Google «заблокировал» отдельные страницы, закрытые в robots.txt
Издание Search Engine Roundtable сообщило о том, что на страницах групп в сервисе «Рекомендаций для веб-мастеров» появились жалобы отдельных пользователей на то, что в отчетах об индексации страниц Google в «Инструментах для вебмастеров» они обнаружили уведомления о том, что алгоритм поисковика заблокировал URL отдельных страниц.
По результатам проверки стало ясно, что в отчетах содержались данные о якобы блокировке отдельных веб-страниц, ранее закрытых в robots.txt. Хотя в последствии большинство из этих страниц было удалено вебмастерами, в отчетах об индексации страниц они по-прежнему значатся как «заблокированные алгоритмом».
Представитель Google Джон Мюллер обозначил ситуацию следующим образом: «Поисковый робот анализирует данную манипуляцию, как будто подобные страницы в какой-то момент времени «выпали» из индекса. Впоследствии он проиндексировал их повторно. Из-за того и произошла накладка. В ближайшее время нельзя ожидать резкого уменьшения подобных уведомлений, однако это никак не влияет на ранжирование сайта в целом. Здесь нет никаких плохих предзнаменований – это техническая особенность работы алгоритма».