Сотрудник Google Гэри Илш подтвердил, что он продолжает работу над улучшением инструмента проверки robots.txt, который до сих пор доступен только в старой версии Search Console.
В частности, он написал в Twitter: “Мы на данный момент в процессе интеграции тестера с продакшн-версией парсера”.
Илш заявил об этом в ответ на жалобу о возможном баге в том, как работает этот инструмент, или в том, как Google читает файл robots.txt.
По его словам, проблема, скорее всего, в самом инструменте.
we'll look, but it's likely a tool error. we're currently in the process(*) of integrating the tester with the production version of the parser which should fix this, if indeed it is a tool error.
— Gary 鯨理／경리 Illyes (@methode) 6 января 2021 г.
* - it's my procrastination project, so no holding breaths
Напомним, в начале 2019 года Google заверил, что не планирует отключать инструмент проверки robots.txt, а со временем перенесёт его в новую версию Search Console. Однако это до сих пор не сделано.
Судя по твиту Илша, работа над этим инструментом не является срочной задачей.
Напомним также, что в сентябре Google открыл исходный код ряда проектов, связанных с robots.txt.
