Как найти ошибки сканирования и удалить их из google webmaster

Cтатья отредактирована 27.012017 и актуальна на данный момент

 Сегодня поговорим о сканировании ошибок. Мы найдем их и удалим из индекса поисковой системы. Для этого воспользуемся инструментами вэб- мастера от google.

Сначала, о том, что это за ошибки.

Возможно у всех была такая ситуация, когда написанный ранее пост на блоге, вы вдруг решили удалить. Удалили, а чем это чревато не знаете? Дело в том, что поисковые системы уже ранее проиндексировали вашу статью.

Если даже в плагине на блоге, вы запретите роботу индексировать, тот url, что вы удалили. У вас ничего не получится, потому что робот поисковик будет продолжать индексировать несуществующие страницы.

 Заходя, к вам на блог в каждое свое посещение он индексирует новые страницы, но и не забывает про старые. Чтобы сокращать время пребывания на каждом блоге,  он пользуется «кешем» где хранится прошлая информация о ваших страницах.

Получается, что он пользуется старой памятью плюс в индекс добавляет новую статью.

Страница, которую вы удалили также продолжает сканироваться. Таким образом, она находится в выдаче по поисковым запросам. И пользователь, набирая очередной свой запрос «кликает» по ней и попадает на страницу, которой не существует.

Что он делает в таком случае, когда не находит, того чего ищет? Как вы догадались, он просто уходит с сайта.

 А если это повторяется изо дня в день? Это очень плохо отражается на продвижении блога. Роботы такой расклад не приветствуют. Ваши статьи понижаются в ранжировании, потому, что слишком много отказов с вашего блога.

Такие тревожные сигналы поступают роботу поисковику. А это все учитывается поисковыми системами Yandex и Google.

Есть выход- поставить на такую страницу с ошибкой 404, редирект 301. Или простыми словами сделать «перенаправление» на главную страницу сайта.

Обращаю ваше внимание на то, что из  google  эти страницы никогда не уйдут из индекса. Их нужно удалять вручную. А вот в yandex с этим хорошо справляется robot.

Но можно также их  удалять и в яндекс. Достаточно  в инструментах для мастера справа выбрать тот же пункт( удалить адрес).

 А сегодня я покажу вам, как найти несуществующие страницы 404 и послать запрос на их удаление.

Для этого воспользуемся инструментами google- webmaster.

Выполним два  условия:

  •  аккаунт в гугл+

Регистрация довольна проста и бесплатна.

  • ваши права на сайт должны  быть подтверждены

В панеле webmaster, на главной странице, справа есть  красная кнопка «добавить сайт». Кликните по ней и следуйте дальнейшим инструкциям.

А мы  переходим  в инструменты webmaster  на Google по ссылке

И смотрим мои скриншоты. Они вам помогут не заблудиться.

Заходим в инструменты webmaster.

Находим пункт ошибки сканирования.

Копируем адреса страниц.

Далее идем в индексирование сайта.

Выбираем удалить url.

Создать новый запрос на удаление.

В окошко вписываем адрес.

Отправляем запрос на удаление страницы.

При необходимости создаем новый запрос.

Специально  для посетителей которым не до чтения, предлагаю посмотреть короткое видео.

 И так подведем итог. Мы сегодня узнали, как найти ошибки сканирования и удалить их из google webmaster.

На этом все.  До скорых встреч. Подписывайтесь на новости. Желаю всем здоровья и удачи!

C уважением, Рита Молчанова, автор блога ritabk.ru

  • Любовь Долгая

    Рита, спасибо ОГРОМНОЕ! Всегда практические рекомендации по продвижению и настройке блога.

    Появляется пост от Риты и очередная фишка.

    Спасибо, за то, что делишься со своими читателями 😛

    [Ответить]

    Рита Молчанова Reply:

    Любовь, приятно слышать такой отзыв о своей работе. Очень рада,что не зря стараюсь.

    [Ответить]

  • Ольга Гаджилова

    Рита, спасибо! Сейчас же пойду проверять все и удалять! У меня такие вещи присутствуют! Что конечно не очень хорошо.

    Я правда не придавала этим ссылкам внимания, думала что они сами из индексации вылетают со временем. Но лучше сделать и спать спокойно!

    [Ответить]

    Рита Молчанова Reply:

    Правильно, Ольга! Лучше делать все вовремя и не накапливать ошибок. Тогда и посетители будут довольны.

    [Ответить]

  • Марина

    Оооо! я голову ломала, что с ними делать? Огромное спасибо. У меня 15 «Не найдено». Как я поняла, по одному придется удалять? А там ничего очень важного не может оказаться случайно?

    [Ответить]

    Рита Молчанова Reply:

    Марина, ошибка 404 это те страницы которые были, но теперь их нет. Вы отсылаете запрос в гугл. Он проверяет все и, если их нет, то убирает их из индекса. Вот и все. Вам же лучше, чтобы ошибок не было. У яндекс робот это делает, правда не сразу. Хотя и в яндекс можно отослать запрос на удаление. А вы проверьте свои ошибки. Нажмите на ссылку и сами все увидите.

    [Ответить]

  • Спасибо! Ваша статья мне очень помогла.

    [Ответить]

    Рита Молчанова Reply:

    Анатолий,тогда все у вас zer good!

    [Ответить]

  • Анатолий

    Еще благодарность Вам Рита, за неожиданный подарок.

    С уважением Анатолий.

    [Ответить]

    Рита Молчанова Reply:

    Анатолий, спасибо! А про подарок можно по подробней.

    [Ответить]

  • Олия

    Рита, у меня схема примерно такая же. Каждый раз, когда захожу в инструменты для вебмастеров, проверяю ошибки. Спасибо.

    [Ответить]

    Рита Молчанова Reply:

    Оля, тогда все хорошо. Так и должно быть.

    [Ответить]

  • Марина

    Рита, вчера решилась на удаление ошибок наконец-то. Все сделала по вашим скринам и, кажется, нормально. Прошли сутки, а кол-во ошибок (16) все так и мозолит глаза. А в списке ничего нет. Просто число 16 не исчезает. Я так понимаю, что до меня еще очередь не дошла? А как долго надо ждать?

    Еще надпись есть, и она не исчезает: на мой пост 545 в рубрике «Рукоделие» (кардиган белый) проставлена ошибка 500. Написано что ошибка приоритетная, она с сервера. Если я удалю пост, то поможет это отделаться от ошибки 500?

    [Ответить]

  • Марина

    Доброго дня Рите и всем-всем! Рита, спасибо, наконец-то убрались ошибки. А вот что меня беспокоит... Когда картинки загружаю, то они все оседают в «Библиотеке». Мноооого их там накопилось! Нельзя ли от них как-то избавиться или они все необходимы для работы блога?

    [Ответить]

    Рита Молчанова Reply:

    Марина, конечно можно и даже нужно. Я как раз следующую статью задумала писать. Вот на днях чистку с картинками проведу. И все по своему опыту подробно с видео покажу. Нужно сделать некоторые настройки. А потом скачать папку uploads cj всеми изображениями на сайте. Но в ранее опубликованных статьях изображения могут исчезнуть. Поэтому редактировать в ручную все статьи нужно. У кого статей мало, тому повезло.

    [Ответить]

  • Марина

    Спасибо, Рита, буду ждать. Наверно, это периодически нужно делать. Видео очень кстати было бы.

    [Ответить]

    Рита Молчанова Reply:

    Марина, не долго ждать. Сама хочу досконально разобраться, чтобы решить эту проблему.

    [Ответить]

  • Денис Скрипник

    Благодарю за то, что напомнили мне про эту функцию. Проверил свой блог — их нет. Осталось добавить и проверить другие сайты.

    [Ответить]

  • Юрий

    Для меня сейчас проблема №1 внешние ссылки с блога. Не знаю как удалить или закрыть. Точнее как лучше это сделать.

    [Ответить]

  • Александр

    Проверю и свой сайт на дубли.

    [Ответить]

    Рита Молчанова Reply:

    Похвально, Александр!

    [Ответить]

  • Елена Прекрасная

    Это полезно знать, спасибо Рита!

    [Ответить]

    Рита Молчанова Reply:

    Я удаляю постоянно. Только медленно это все уходит. Такое впечатление, что гуглу и яндексу нравится держать людей в напряжении, чтобы не забывали про инструменты.

    [Ответить]

  • Владислав

    Рита, подскажите пожалуйста. Если робот увидел, что на раннее проиндексированой странице произошли изменения, он у себя в кеше ее редактирует или создает новую? А старая тем временем остается и со временем выкидывается из индекса?

    [Ответить]

    Рита Молчанова Reply:

    Все робооты или правильней это назвать программы устроены так, что они очень чувствительны к изменениям на странице. Он проиндексирует последнюю измененную и запомнит ее. Она не новая. Ведь адрес у нее не изменился. Просто в нее внесли изменения и все. Надеюсь,что я вас правильно поняла. Робот ничего не выкидывает. Даже если вы ее удалили. Он будет ее индексировать. Вам нужно вручную самому эту страницу исключить. Я написала в статье как это делается. Тогда она не будет индексироваться.

    [Ответить]

  • Михаил, временно срыть это «спойлер», а в нем скрытая форма. Так скрывают записи. Кстати про «спойлер» у меня на сайте есть статья. Нажимаете на него и откроется форма с окошком. Копируете адрес с ссылки с ошибкой и вставляете в это окошко. Затем нажимаете продолжить. Далее в вверху увидите сообщение, что адрес ссылки был внесен в список удаляемых. К вашим ошибкам «временно скрыть» не имеет никакого отношения. Страницы удаляются и не возвращаются. Только у гугла для этого должно пройти время какое- то. Моя статья актуальна и на сегодняшний день. Там ничего не изменилось. Сегодня только удалила 5 ошибок. Нужно заходить иногда и проверять. Удачи!

    [Ответить]

  • Андрей

    Все отлично, только как быть, если таких страниц тысячи? 🙂

    [Ответить]

    Рита Молчанова Reply:

    Андрей, а это значит, что подзапустили вы свой блог. И нужно начинать с файла robots. Запретить роботам индексировать все подряд. И по- тихоньку, каждый вечер удалять. У меня в свое время неделя ушла. Сейчас периодически захожу и просматриваю. Удачи. Не расстраивайтесь.

    [Ответить]

    Андрей Reply:

    Это не совсем блог, это магазин, страницы возникли в результате переносов с одной платформы на другую и последующей генерации новых УРЛов (старые особого веса на тот момент не имели).

    Вопрос возможно даже не только в том, как их удалить из индекса, а откуда гугл берет эти ссылки ? В базе нет, в sitemap нет, в коде нет, robots направлен только на нужные директории, в коде которых тоже этих ссылок нет.

    Такое ощущение, что сайт индексируется по каким то старым картам и как ему объяснить, что работать нужно только с новыми версиями sitemap и robots? И может ли такое быть, что в каком то еще аккаунте гугл находится старая карта сайта, которая приносит все эти старые линки?

    В одном из постов читал, что ничего делать не нужно, если это действительно старые, не нужные ссылки, и якобы он сам забудет про них. Только, опять же, на сколько у него длинная память )

    PS: недели не хватит, за сутки проиндексировались 1200 страниц с 404

    [Ответить]

    Рита Молчанова Reply:

    Андрей, не важно что их нет. Все равно будет индексировать. И очень плохо, что нет. Где это все есть у него есть запрет. А где нет, значит все можно. Такой вот принцип, поэтому и хавает все подряд.

    [Ответить]

Остались вопросы? Напишите на E-mail: rita.mol4anova@yandex.ru или позвоните Skype: margo19596