В Google Search Console появился новый отчет robots.txt

Google добавил в Search Console новый отчет robots.txt, содержащий всю информацию об индексации страниц на сайте. 

В частности, из отчета можно узнать, какие файлы robots.txt Google нашел для 20 лучших хостов на сайте, дату последнего сканирования документа, а также предупреждения об обнаруженных ошибках. 


Теперь, если у вебмастера возникают какие-либо проблемы с индексированием и сканированием страниц, с помощью отчета можно понять, связаны ли они с файлом robots.txt.

Информация о состоянии robots.txt также доступна из отчета об индексации страниц в Search Console. 

В Google сообщили, что новый отчет заменит собой инструмент проверки robots.txt, в котором больше нет необходимости.

Источник: SearchEngineLand
preview Бесплатный онлайн-митап «Продуктовый подход в SEO и разработке»

Бесплатный онлайн-митап «Продуктовый подход в SEO и разработке»

6 декабря, в 15:00
preview Google: дата окончания текущих апдейтов пока неизвестна

Google: дата окончания текущих апдейтов пока неизвестна

Все с нетерпением ждут их завершения
preview Бесплатный вебинар «Как изменилась SEO-услуга за 15 лет»

Бесплатный вебинар «Как изменилась SEO-услуга за 15 лет»

30 ноября в 14:00
preview Google начал November 2023 Reviews Update

Google начал November 2023 Reviews Update

Одновременно с обновлением алгоритма ядра
preview Текущий Google Core Update грозит стать самым мощным в 2023 году

Текущий Google Core Update грозит стать самым мощным в 2023 году

По мнению западных коллег