Увеличить период перескана сайта Яндексом

R
На сайте с 28.08.2006
Offline
18
302

У меня есть вики на mediawiki по специфичной теме для маленького сообщества людей. Т.е. там не может быть большой посещаемости по определению (ну, она не для посещаемости и делалась). Однако ж Яндекс генерит там просто сумасшедший трафик. Считает своим долгом пересканировать страницы чуть ли не ежедневно. Что напрягает моего хостера.

Проект некоммерческий, вики обновляется не слишком часто. Переходить на более дорогой тарифный план из-за яндекса не хочется.

Вопрос - как унять ретивость Яндекса? Полностью исключать страницы из сканирования (robots.txt) - не хочется. Может, есть другой способ? Как-то сделать так, чтобы разрешать раз в неделю, скажем, полное сканирование. Или он бы как-то проверял, что страница не менялась с прошлого раза... :confused:

kit1980
На сайте с 24.07.2006
Offline
62
#1

Попробуйте директиву Crawl-Delay: http://help.yandex.ru/webmaster/?id=996567#1022359

Энциклопедия языков программирования (http://progopedia.ru/) kit1980.ru (http://kit1980.ru/)
R
На сайте с 28.08.2006
Offline
18
#2

Хм. Спасибо, попробую...

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий