Ограничение активности роботов

N7
На сайте с 18.07.2006
Offline
0
818

Мой хостер ограничивает процентную нагрузку сайта 5% в час. Яндекс же периодически устраивает "поисковую лавину", запрашивая документы тысячами с периодом в 5-7 секунд, превышая этот уровень. Что делать?

Предложил на форуме хостинга вариант

if (address == '213.180.216.11') sleep(10);

вроде говорят - да, это корректно. Сомнения берут только - не будет ли 10-секундная задержка проблемой для робота? Занесет в "Серый список" и задвинет куда подальше или еще что?

Возможно, есть какие-то другие решения?

P.S. Собственно тысячами идут запросы к стандартной конференции PHPBB... Не очень большой.

kav
На сайте с 21.02.2006
Offline
159
kav
#1

а перейти на другой хост нет возможности???

Я знаю только то, что ничего не знаю © Сократ а когда я забываю даже это, вспоминаю про..... Форум - это такое место, где 2-е людей могут убедить в своих заблуждениях тысячи
N7
На сайте с 18.07.2006
Offline
0
#2

Ну это слишком радикальное решение. И не факт, что у следующего провайдера не окажется проблемы уже с ограничением трафика или еще чего. Пока я ищу локальный выход.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий