Googlebot начал поддерживать сканирование через HTTP/2

В этом месяце Googlebot начал поддерживать сканирование сайтов через протокол HTTP/2. Об этом говорится в англоязычной версии руководства по Googlebot на сайте Google Search Central.

Документ был обновлён 12 ноября.

«Обычно Googlebot сканирует через HTTP/1.1. Однако с ноября 2020 года он может сканировать сайты через HTTP/2, если этот протокол поддерживается на сайте», - говорится в руководстве.

HTTP/2 – это новейший сетевой протокол, который позволяет быстрее и эффективнее передавать данные между сервером и браузером (или роботом Googlebot).

Данный протокол сокращает время, необходимое для доставки веб-страницы из сервера в браузер. HTTP/2 также снижает накладные расходы за счёт сжатия полей заголовка HTTP.

Возможности HTTP/2 уменьшают нагрузку на сервер и экономят его ресурсы.

Как проверить, готов ли сайт к сканированию через HTTP/2

Проверить, готов ли сайт к сканированию через новый протокол, можно с помощью инструмента проверки HTTP/2.

Как отказаться от сканирования через HTTP/2

Для того, чтобы Googlebot не мог сканировать сайт через HTTP/2, сервер должен быть настроен таким образом, чтобы возвращать код ответа 421, когда поисковый робот будет пытаться сканировать сайт через этот протокол.

Код ответа сервера 421 описан Internet Engineering Task Force (IETF.org) как «Misdirected Request» (неверно адресованный запрос). Это значит, что если Googlebot отправит запрос через HTTP/2, то он будет обозначен, как неверно адресованный.

О том, что Google работает над добавлением поддержки сканирования через HTTP/2, стало известно в сентябре. На тот момент сообщалось, что в ноябре это изменение будет запущено для небольшого количества сайтов, а потом расширено на большее количество ресурсов.

В русскоязычной версии руководства по Googlebot информации о сканировании через HTTP/2 пока нет, но обычно перевод документации на другие языки производится в течение примерно двух недель после внесения изменений в англоязычную версию.

Источник: Search Engine Journal
subscribe

Подпишитесь на рассылку SearchEngines

— Статьи мировых экспертов

— Аналитические обзоры

— Важные новости

— Горячие темы с нашего форума

preview Google может использовать машинное обучение в сканировании

Google может использовать машинное обучение в сканировании

Для определения качества и свежести контента
preview В Web Stories for WordPress появились GIF, текстовые шаблоны и субтитры

В Web Stories for WordPress появились GIF, текстовые шаблоны и субтитры

Это первое крупное обновление плагина
preview Как Google Passage Indexing может выглядеть в результатах поиска

Как Google Passage Indexing может выглядеть в результатах поиска

Компания пока продолжает эксперименты
preview Google Webmasters Central стал Google Search Central

Google Webmasters Central стал Google Search Central

Google перенёс блоги для вебмастеров на новый сайт, консолидировал документацию и обновил логотип Googlebot
preview Google о BERT и точных ключевых словах на страницах

Google о BERT и точных ключевых словах на страницах

Снижается ли роль таких фраз