Что за бот?

Бот вам даже ссылку дал на собственное описание.

Лучше всего поставить анализатор логов вебсервера, который будет автоматически банить тех кто превысит определенное количество кликов за заданный период времени.

Заодно защититесь от хулиганов, которые запустив несколько граберов сайта с максимальной скоростью, смогут этим заддосить ваш VDS.

IP ботов поисковиков лучше занести в белый список. И использовать для них менее жесткие лимиты.

Хотя, например, бот сапы (sape.ru) работает слишком быстро.

В среднем 3-4 кликов в секунду.

А один раз бот сапы поставил у меня рекорд – 2000 кликов за минуту. (то есть 33 обращения в секунду)

Общался с супортом сапы.

Объяснял им что так быстро бот работать не должен.

Но так и не смог их убедить уменьшить скорость.

Сказали, что не могут и что не кому такая скорость проблем не доставляет.

Но я им не верю, просто не хотят переделывать свой софт.

zexis, странно, за сапой такого не наблюдал.

Зато подобная "активность" была замечена за роботами Aport (та ещё сволочь)) и Mail.ru (что этот индексирует, вообще загадка, т.к. при поиске майл.ру выдаёт результаты Яндекса)

Наиндесировался уже мейлушный бот на свой поиск, с января 2010 уже свою базу юзает и результаты свои, а не яндексовские показывает.