Этот сайт существует на доходы от рекламы.
Пожалуйста, выключите AdBlock.
Вернуться   Форум об интернет-маркетинге > > >
Ответ
 
Опции темы
Старый 18.01.2018, 22:18   #21
foxi
Mik Foxi
 
Аватар для foxi
 
Регистрация: 03.03.2011
Адрес: Budva
Сообщений: 9,564
Репутация: 1039819
Социальные сети Аккаунт в Telegram

ТопикСтартер Re: AntiBot - скрипт защиты сайта от плохих ботов и хитроботов.

iccup, пинтерест имеет вроде нормального бота и норм идентифицируется. т.е. только эту строку в конфиг добавьте, его ip сами в белый список запишутся.
Ну и помониторьте первое время пару дней лог /antibot/botlog1.txt (включить логирование в конфиге, если выключили), чтоб видеть там нужных вам ботов, которых антибот заблокировал.
foxi вне форума   Ответить с цитированием
Сказали спасибо:

Реклама
Старый 19.01.2018, 00:08   #22
Харизма
Дипломник
 
Аватар для Харизма
 
Регистрация: 18.06.2009
Сообщений: 59
Репутация: 2494

По умолчанию Re: AntiBot - скрипт защиты сайта от плохих ботов и хитроботов.

Цитата:
/antibot/botlog1.txt (включить логирование в конфиге, если выключили), чтоб видеть там нужных вам ботов, которых антибот заблокировал.
То есть файлик botlog1.txt показывает исключительно заблокированных ботов ?
У меня почему то получилось на сервере 2 файла botlog1.txt botlog2.txt . Первый весит 3мб , а второй уже 24мб. Там сотни записей...это столько ботов получается заблокированы..ничего себе..
Харизма вне форума   Ответить с цитированием
Старый 19.01.2018, 00:16   #23
foxi
Mik Foxi
 
Аватар для foxi
 
Регистрация: 03.03.2011
Адрес: Budva
Сообщений: 9,564
Репутация: 1039819
Социальные сети Аккаунт в Telegram

ТопикСтартер Re: AntiBot - скрипт защиты сайта от плохих ботов и хитроботов.

Харизма, первый файл это те, кто получил проверочную заглушку. Второй это те, кто уже преодолел заглушку и ходит по сайту. Белые боты которые в конфиге - они в этих логах не логируются.
foxi вне форума   Ответить с цитированием
Старый 19.01.2018, 00:28   #24
Харизма
Дипломник
 
Аватар для Харизма
 
Регистрация: 18.06.2009
Сообщений: 59
Репутация: 2494

По умолчанию Re: AntiBot - скрипт защиты сайта от плохих ботов и хитроботов.

Я немного в терминах путаюсь.. сорри. Что значит получил проверочную заглушку ? То есть на сайт не попал и скрипт его заблокировал, и он отобразился в логе botlog1.txt .
А в логе botlog2.txt логируются те, кто все замечательно прошел и ходят по сайту.
Харизма вне форума   Ответить с цитированием
Старый 19.01.2018, 00:31   #25
foxi
Mik Foxi
 
Аватар для foxi
 
Регистрация: 03.03.2011
Адрес: Budva
Сообщений: 9,564
Репутация: 1039819
Социальные сети Аккаунт в Telegram

ТопикСтартер Re: AntiBot - скрипт защиты сайта от плохих ботов и хитроботов.

Харизма, все кроме белых ботов которые прописаны в конфиге - при первом заходе видят заглушку проверочную на 3 секунды. Эти все запросы записываются в лог1, дальше через 3 сек юзер попадает на сайт и записывается в лог2. Ну а если это говнобот, то он во втором логе не появится, т.к. не пройдет проверку.
foxi вне форума   Ответить с цитированием
Сказали спасибо:
Старый 19.01.2018, 00:36   #26
Харизма
Дипломник
 
Аватар для Харизма
 
Регистрация: 18.06.2009
Сообщений: 59
Репутация: 2494

По умолчанию Re: AntiBot - скрипт защиты сайта от плохих ботов и хитроботов.

foxi Благодарю! ) Теперь понятно. Жаль, что говноботы никуда не записываются отдельно, хотелось бы какую-то статистику по ним смотреть, чтобы ip их блокировать уже на самом сервере.
Харизма вне форума   Ответить с цитированием
Старый 19.01.2018, 11:07   #27
iccup
Профессор
 
Регистрация: 01.05.2016
Сообщений: 551
Репутация: 28868

По умолчанию Re: AntiBot - скрипт защиты сайта от плохих ботов и хитроботов.

а как сделать исключения для бота майнлинк?
__________________
kimsufi.com очень дешевые и качественные дедики
iccup вне форума   Ответить с цитированием
Старый 19.01.2018, 11:09   #28
foxi
Mik Foxi
 
Аватар для foxi
 
Регистрация: 03.03.2011
Адрес: Budva
Сообщений: 9,564
Репутация: 1039819
Социальные сети Аккаунт в Telegram

ТопикСтартер Re: AntiBot - скрипт защиты сайта от плохих ботов и хитроботов.

Цитата:
Сообщение от iccup Посмотреть сообщение
а как сделать исключения для бота майнлинк?
а как он выглядит в botlog1.txt ?

---------- Добавлено 19.01.2018 в 12:59 ----------

Цитата:
Сообщение от Харизма Посмотреть сообщение
foxi Благодарю! ) Теперь понятно. Жаль, что говноботы никуда не записываются отдельно, хотелось бы какую-то статистику по ним смотреть, чтобы ip их блокировать уже на самом сервере.
Смотрите botlog1.txt, если там видите ненужных ботов которые активно ломятся и имеют свое имя (маджестики всякие, вебархивы, и прочие полупоисковики), то собирать в логе их юзерагенты и банить по юзерагентам на сервере (в нгинкс, хтасесс), чтоб меньше создавали нагрузки на сервер. В остальном никого дополнительно банить и не надо.
foxi вне форума   Ответить с цитированием
Старый 19.01.2018, 22:15   #29
iccup
Профессор
 
Регистрация: 01.05.2016
Сообщений: 551
Репутация: 28868

По умолчанию Re: AntiBot - скрипт защиты сайта от плохих ботов и хитроботов.

есть проблема, почему-то ботов адсенс скрипт не добавил в белый список
Цитата:
66.249.89.206 rate-limited-proxy-66-249-89-206.google.com Mediapartners-Google
Цитата:
66.249.89.202 rate-limited-proxy-66-249-89-202.google.com Mediapartners-Google
Цитата:
66.249.89.204 rate-limited-proxy-66-249-89-204.google.com Mediapartners-Google
iccup вне форума   Ответить с цитированием
Старый 19.01.2018, 22:17   #30
foxi
Mik Foxi
 
Аватар для foxi
 
Регистрация: 03.03.2011
Адрес: Budva
Сообщений: 9,564
Репутация: 1039819
Социальные сети Аккаунт в Telegram

ТопикСтартер Re: AntiBot - скрипт защиты сайта от плохих ботов и хитроботов.

iccup, добавить в конфиг:
$ab_se['Mediapartners'] = array('googlebot.com', 'google.com'); // AdSense bot
foxi вне форума   Ответить с цитированием
Сказали спасибо:
Ответ




Опции темы

Ваши права в разделе
Вы не можете создавать новые темы
Вы не можете отвечать в темах
Вы не можете прикреплять вложения
Вы не можете редактировать свои сообщения

BB коды Вкл.
Смайлы Вкл.
[IMG] код Вкл.
HTML код Выкл.

Быстрый переход



Текущее время: 16:44. Часовой пояс GMT +3.

Регистрация Справка Календарь Поддержка Все разделы прочитаны