АнтиБот - самая полная база IP-адресов ботов.

SC
На сайте с 28.12.2007
Offline
4
959

Представляем набор скриптов АнтиБот 1.2, основными задачами которого являются:

- сокрытие или подмена отдельных частей и зон сайта от поисковых ботов;

- самообновление базы поисковых ботов.

Необходимо сразу оговориться, что мы не одобряем клоакинг и не пропогандируем его использование. Однако во многих случаях может понадобиться закрыть от поисковых систем некоторые страницы или даже отдельные части HTML-документа.

Данная задача осложняется тем, что почти все поисковые системы (Google, MSN, Yandex, Rambler и т.д.) имеют как общеизвестные IP-адреса ботов, так и непубличные, скрываемые зоны IP-адресов, с которых может проводиться сканирование сайтов на предмет подмены контента (т.н. "клоакинг"). Иногда крупные поисковые системы заключают соглашения на аренду серверов и каналов связи более мелких систем и в логах веб-сервера их запросы могут выглядеть так, как будто Ваш сайт посетил робот непопулярного поискового сервиса.

Мы предлагаем обновленный пакет инструментов для определения 99% активных ботов сети, а также базу данных IP-адресов ботов всех поисковых систем мира, а также ботов, которые пока не могут быть нами причислены к какой-либо из известных поисковых систем.

Данная база собирается на протяжении 1 года с порядка 50 сайтов рунета и 30 иностранных сайтов. На каждом таком сайте установлен скрипт, который со 100% точностью определяет, посещает ли его в настоящий момент бот или простой пользователя. Исключение составляют лишь системы вроде Teleport и Offline Explorer, которые также будут диагностироваться как боты.

В пакет АнтиБот 1.2 входят:

- фильтр на базе .htaccess для защиты отдельных файлов или каталогов. По желанию боты могут получать ошибку 404 (Документ не найден), 403 (Доступ запрещен), 500 (Ошибка сервера);

- PHP-скрипт для сбора всех запросов от потенциальных ботов (данный скрипт может быть совмещен с фильтром, чтобы получать информацию только о неизвестных ботах, а может собирать информацию о всех ботах вообще);

- инструмент для анализа собранной инофрмации и обновления базы ботов

- примеры использования пакета.

Поддерживаемые серверные ОС: Linux, FreeBSD.

Поддерживаемые веб-серверы: Apache 1, 2 с установленным mod_rewrite.

Стоимость пакета: $50

Оплата: WMZ, Яндекс Деньги, eGold.

Контакт: ICQ 396-179-952

Обновления высылаются бесплатно.

В случае необходимости мы готовы бесплатно установить пакет на Ваш сервер.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий