Печемся о своем сайте

Тоже думал идти по этому пути, но в итоге мне это показалось лишней рутиной. Пошел по иному пути, оптимизировал скрипты и сервер так, что даже "бешеный" бот Апорта нещадящий своим темпом не вызывает проблем.

думаю стоит - закройте через юзер-агент в .htaccess (по-другому врядли получится)..

Зловредные боты несут не только нагрузку на сервер, сжирают трафик, спамят, но и воруют контент с сайтов, чтоб набить им свои доры. Банить таких ботов нужно, но не всегда удаётся. Например очень распространённый злой бот представляется как "Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; SV1)" и использует прокси сервера. Как его забанить?

Сегодня соберу информацию по управлению доступом ботам, выложу сюда, обсудим.

Интересная тема, мне тоже любопытно. Наблюдаю достаточно много левых ботов на своем сайте и загрузка какая-то не стабильная пошла... Вынашиваю потихонько идею с ограничением доступа левых ботов.

Когда бот представляется браузером, а самые плохие боты так и делают, то обычными способами его не побанить.

Фильтровать клоакингом. Как вариант. Но для гугла и полезных ботов сайт показывать. Правдо не всё так просто.

Рано или поздно получишь бан.

Можно попробовать такие вариатны

http://avy.ru/ftopic1870.html

http://php.spb.ru/other/_dima_noflood.php

Только при этом стоит помнить, что каждая директива в .htaccess увеличивает нагрузку на сервер. С другой стороны, будет значительно меньше нагрузка на БД.

Интересные варианты.