Боты и их жизнь среде интернет.

Народ, а методы борьбы какие используете? неужели вам все равно?

Причем не именно методы борьбы, а методы отлова (анализа)?

борьба с ветряными мельницами :)

нам... нам пофигу :)

бан за перебор паролей к ssh, ftp и т п

http://www.fail2ban.org/

защита для php скриптов

http://php-ids.org/

Абсолютно верно. В PHP библиотека CURL позволяет также сохранять и возвращать куки, получается полная эмуляция браузера. Правильного бота вы не отличите от посетителя сайта :)

Valeo, нужно заставить бота делать то, что он сделать не может. Например, ввести капчу или ответить на простой вопрос ("Имя президента России"). Отдельно белый список Ip-адресов ботов яндекса, гугля и других нужны ПС, которым будет всё разрешено без вопросов.

Для очень активных посетителей сайта это будет не очень удобно, но иногда иного выбора нет, из-за пары ботов в Европе или США можно попасть на трафик.

Опять же соглашусь что боты реальная проблема, но чувствую что сегодня нет особых методов борьби с ними.

Наверно придется снова своими методами их отлавливать...

это какими ? поделитесь пжл секретом

против курла можно использовать проверку исполнения яваскрипта - не исполняет - в бан его.

еще помогает блокировка сетей крупных ДЦ - пользователей там нет, а ботов хоть отбавляй

и ботов поисковиков тоже?

Заодно в баню отправятся несколько процентов посетителей.

А если очень постараться, можно имитировать работу javascript в боте.

С этим проще, у ведущих поисковиков не так много сетей для ботов.