Crawl-delay для Яндекса

S
На сайте с 04.02.2007
Offline
308
svv
1476

Сегодня хостер заругался - перегрузка на аккаунте. Проанализировал - YandexBot/3.0 как саранча набегает, на эти периоды приходится максимальная нагрузка.

Как думаете Crawl-delay в 5 секунд не ухудшит отношение к сайту? Не выбросит его Яндекс из ТОПа?

Z0
На сайте с 03.09.2009
Offline
735
#1

Мне хостер тоже посоветовал поставить, но 10, я поставил 5:

User-agent: Yandex
Crawl-delay: 5

Вроде давно стоит, все как обычно :)

Павел Горбунов
На сайте с 13.06.2011
Offline
117
#2

svv,

svv:
Crawl-delay в 5 секунд
- это дефолтный.

Можете попробовать увеличить до 10.

Не стремитесь сделать лучше - улучшайте!
D8
На сайте с 13.02.2017
Offline
19
#3

Мне хостер вообще 40 посоветовал, сказал проблем не будет. Я поставил. Уже месяц примерно такая цифра. С Яндексом все нормально, индексация быстрая, позиции и посещаемость растут.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий