В метрике в разделе пользователи - много ботов

O
На сайте с 25.07.2013
Offline
44
oml
947

Добрый день

В разделе пользователей в метрике очень много ботов, которые имеют по несколько тысяч заходов на страницы сайтов с нулевой активностью.

Т.е почти каждый день заходит на определенную страницу и остается несколько секунд.

Как с таким бороться? Явно портит поведенческие факторы...

Все боты с пулов мобильных сетей - т.е по ip блокировать не получится...

D
На сайте с 28.06.2008
Offline
1101
#1

Если ваш сайт на https + http2, то отсечь 98% ботов можно средствами nginx

O
На сайте с 25.07.2013
Offline
44
oml
#2

Подскажите как, буду очень благодарен.

Mik Foxi
На сайте с 02.03.2011
Offline
1076
#3
Dram:
Если ваш сайт на https + http2, то отсечь 98% ботов можно средствами nginx

но для рядового пользователя это сложно. для начала нужно определить белых ботов а также полуюзеров, ходящих через оперу мини со сжатием трафика, которым разрешить ходить по http1

Антибот, антиспам, веб файрвол, защита от накрутки поведенческих: https://antibot.cloud/ + партнерка, до 40$ с продажи.
O
На сайте с 25.07.2013
Offline
44
oml
#4

Я видел ваши темы...

Блокировать по ip не вариант - так как боты идут через пулы мобильных сетей, каждый раз может быть новый ип, под которым завтра может зайти обычный пользователь.

Определять по браузеру\юзерагенту тоже не вариант.

Через тот же селениум я спокойно могу эмигрировать действия пользователя и хрен отличишь.

По метрике понятно что это бот только за счет повторяющихся визитов.

Каждый день, на определённые страницы с определенной активностью.

Mik Foxi
На сайте с 02.03.2011
Offline
1076
#5

oml, антибота ставить надо, в нем нету черных списков ip, все на поведении, куках и прочих действиях апределяется.

D
На сайте с 28.06.2008
Offline
1101
#6
oml:
Подскажите как, буду очень благодарен.

/ru/forum/comment/14885499

+ я еще добавил определение ботов без кукисов, и добавил автоблокировку особо упоротых по айпи на сутки.

+ уде на фронте, тем кто превышает заданное кол-во обращений я выдаю гугл капчу и пока не пройдкт контент не показываю.

Решение работает уже год, траф растет, поисковые боты ходят без ограничений. Все остальные боты или отсекаются сразу или ходят с большим трудом

Оптимизайка
На сайте с 11.03.2012
Offline
396
#7

ТС, можете еще https://botguard.net попробовать - могу помочь с настройкой.

⭐ BotGuard (https://botguard.net) ⭐ — защита вашего сайта от вредоносных ботов, воровства контента, клонирования, спама и хакерских атак!
suffix
На сайте с 26.08.2010
Offline
325
#8
Оптимизайка:
ТС, можете еще https://botguard.net попробовать - могу помочь с настройкой.

На сайте ФАК и т.д. пока в разработке - непонятно совсем как это работает.

Клуб любителей хрюш (https://www.babai.ru)
Оптимизайка
На сайте с 11.03.2012
Offline
396
#9

suffix, работает, но дорабатывается :)

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий