Сегодня поисковая система сообщила, что «Инструмент удаления URL» не закрывает страницы от индексации, а всего лишь скрывает их из поисковой системы. А это значит, страницы продолжают сканироваться и индексироваться.

Недавно я писал про функционал Вебмастера «Инструмент удаления URL», который удаляет только на время страницы и после, не проверяя их на код ответа сервера, отображает в поиске. Из-за этого в индексе могут появляться страницы 404.

Давайте разберемся, почему такое может быть? Представитель Google в Twitter Джон Мюллер объяснил это следующим образом. Сайт может находиться на слабых серверах и иметь большой уровень вложенности. Это может ухудшать скорость сканирования сайта поисковыми системами. Но если проанализировать тот сайт, на котором плохо удалялись страницы из индекса, то можно сказать все параметры серверов, скорость сайта и уровень вложенности было в норме. Ниже привожу параметры ресурса.

Единственное объяснения задержки удаления из индекса страниц с кодом ответа 404 можно объяснить тем, что URL добавляется в функционал «Инструмент удаления URL» и скрывается, но не происходит обход данной страницы поисковыми роботами.

Итоговый  вывод, который можно сделать по данному инструменту – не пользоваться им, т.к. он бесполезен. Он всего лишь скрывает страницу из поиска, но сканируется и индексируется.

Если вы решили удалить страницу из индекса рекомендую прочитать статью “Как правильно удалить страницы из Индекса?”.