Анти БОТ

Анти БОТ
Рейтинг
137
Регистрация
14.03.2020
Должность
специалист по поведенческим ботам
softerra #:
Ваши советы очень ценны для меня. Подскажите, плиз, что нужно делать и как.

Поменьше засорять тему сообщениями о том, что вы проанализировали лог из 3 прямых заходов на сайт в сутки, и всем бакланам выдали по мордам 403, чтобы побольше зря жгли электричества.

Вы можете самостоятельно пробить айпи своих 3 ботов, и страницы на которые они зашли, и принять решение. Не обязательно это все озвучивать по 10 раз в день.

Я понимаю, вы никогда не видели поток сканирующих запросов на чуть более посещаемом сайте, чем у вас. Там не только раз в месяц wp-login проверяется на наличие, там тысячи подобных запросов. И ботосетей столько, что часами сидишь сортируешь фильтруешь.  И что, все это каждый раз озвучивать на форуме?

Aisamiery #:

У меня очень много ботов GPTBot/1.0; +https://openai.com/gptbot

Я отдельно себе строчку добавлял, блок если юзерагент содержит- GPTBot.
Нечего шариться по сайту тем, кого вы лично не приглашали и не ждете.

softerra #:

ХакИры? 🤔

185.80.149.11 - - [01/Nov/2023:13:45:57 +0300] "GET /wp-login.php?action=register HTTP/1.0" 404

185.80.149.11 - - [01/Nov/2023:13:45:58 +0300] "GET /wp-login.php?action=register HTTP/1.0" 404

Ну конечно хакИры. Всем бакланам 403 в морду, пусть зря палят электричество.

Уже кстати успокоился Амазонбот. По одному из проектов около 50 тыс запросов на сайт в сутки вываливал несколько недель подряд. А потом исчез.
Kalgan #:

Да, с IPv4 address block not managed by the RIPE NCC. Количество заходов только растет. Отпишитесь здесь если найдете решение. Со своей стороны тоже напишу. 

Решение - фильтровать трафик.
Что сделать, чтобы наконец перестать пыкаться-мыкаться, вопрошая что за такая злобная подсеть в цитате - я расписал выше. Если вы случайно не заметили.

Или пробовать готовое решение в формате черного ящика, или банить доставучие подсети через htaccess/nginx, или с нуля осваивать Cloudflare, или нанять того кто вам его настроит.
Ну или самый удобный вариант: просто наблюдать и ничего не делать.

Openso #:
IPv4 address block not managed by the RIPE

Если метрика не определила что вам там показать (или не захотела показать), в строчке подсети с которой был переход, вставляется вот это вот.

Т.е. это такой обезличенный ответ: иди в пень, кто к тебе пришел я не скажу.

Самый логичный шаг - это доработать код метрики так, чтобы оно показывало айпишники каждого перехода. Тогда, проанализировав их, можно будет наконец составить общее представление о своем трафике. А не тот бесполезный обезличенный бред, который сейчас там показывается.

Пример на скрине.
Вводите айпишку например здесь - и владеете наконец информацией.
https://bgp.tools/

Так и введите в поиске: проброс ip в яндекс метрику.

клауд

леонид1161 #:
помню раньше писали, что мегафоновий метрополитен нужно блочить, сейчас создаю новы магаз, с банком подключаю эквайринг, попросил банковских сотрудников посмотреть сайт, заходят - мегафон метрополитен

Ну вот когда надоест банить ботов из московского метрополитена...

Можно будет вспомнить, что Metropoly, Metropolis - это скорее столица (в чьем-то немного вводящем заблуждение переводе, когда название подсети регистрировали). А Metropolitan branch of OJSC MegaFon - подсеть Московского (столичного) региона. К метро это не имеет никакого отношения 😎

softerra #:

Нет никакой рекламы. Айпи Ябота разные, может боты тоже разные, а юзернейм одинаковые?

***.ru 87.250.224.232 - - [31/Oct/2023:14:36:41 +0300] "GET /product/***/ HTTP/1.0" 200 321790 "-" "Mozilla/5.0 (compatible; YandexBot/3.0; +http://yandex.com/bots)"

***.ru 213.180.203.54 - - [31/Oct/2023:14:46:59 +0300] "GET /product/***/ HTTP/1.0" 200 321790 "-" "Mozilla/5.0 (compatible; YandexBot/3.0; +http://yandex.com/bots)"

Да забанить оба диапазона, в чем проблема? Пусть зря жгут электричество, бакланы. И получают по морде 403 error 🔥

mat1441 :
"Bot Fight Mode" включен везде (отличная штука, кстати). 

Чем именно она отлична?

softerra #:

Ботов почти всех заблочил, остались единицы с акков мобильных операторов, пускай пыхтят, жгут электричество бакланы.

Сегодня сильно удивился, Яндекс бот сканирует полностью весь сайт (около 200 страниц).

Не верю 😂

Всего: 1414