Зарубежные специалисты заметили, что Google опубликовал руководство по управлению лимитом на сканирование для владельцев крупных сайтов. Оно доступно в Справке Search Console.
В целом документ не содержит ничего нового, но информация в нём структурирована и удобна для использования.
Согласно Google, руководство предназначено для владельцев:
- очень больших сайтов (более 1 млн уникальных страниц) с достаточно часто (раз в неделю) меняющимся контентом;
- средних или больших сайтов (более 10 тыс. уникальных страниц) с очень часто (ежедневно) меняющимся контентом.
Документ состоит из следующих разделов:
- Общая информация о сканировании
- Рекомендации
- Как контролировать сканирование и индексирование сайта
- Как ограничить частоту сканирования в экстренных случаях
- Сканирование: мифы и факты
Ознакомиться с руководством можно по ссылке.
Материалы по теме:
