Google «заблокировал» отдельные страницы, закрытые в robots.txt

 
 
 

05.04.2013

Издание Search Engine Roundtable сообщает о том, что на страницах групп в сервисе «Рекомендаций для веб-мастеров» появились жалобы отдельных пользователей на то, что в отчетах об индексации страниц Google (Index Status report) в „Инструментах для вебмастеров“ они обнаружили уведомления о том, что алгоритм поисковика заблокировал URL отдельных страниц.

Поначалу данная информация вызвала легкое смятение у специалистов, однако в ходе проверки выяснилось, что в отчетах содержались данные о якобы блокировке отдельных веб-страниц, ранее закрытых в robots.txt. Хотя в последствии большинство из этих страниц было удалено вебмастерами, в отчетах об индексации страниц они по-прежнему значатся как «заблокированные алгоритмом».

Представитель Google Джон Мюллер (John Mueller) прокомментировал ситуацию следующим образом: «Поисковый робот анализирует данную манипуляцию, как будто подобные страницы в какой-то момент времени „выпали“ из индекса. Впоследствии он проиндексировал их повторно. Из-за того и произошла накладка. В ближайшее время нельзя ожидать резкого уменьшения подобных уведомлений, однако это никак не влияет на ранжирование сайта в целом. Здесь нет никаких плохих предзнаменований – это техническая особенность работы алгоритма».

Источник: http://www.searchengines.ru