Помощь в фильтрации ботов через CloudFlare

Для пятницы норм 👌 

Эмпирически у метрики определено 30% ботов, а потом к ним развивается толерастия, т.е. эмпирически ботов становится 0% 😁

А вот если ботов блокировать, то Яндекс не сможет затолерастить сайт.

Пора новую мифическую пузомерку вводить. Были трастовые сайты, а теперь ещё будут толерастовые.

Так уже запилили сервис check tolerast, называется pfbaza 🤡

Всем привет!

Буквально каждую минуту осуществляются заходы на главную страницу с разных адресов.
Затем беспорядочное движение мышкой, без кликов и без скролла самой страницы.
Длительность такой сессии варьирует где-то от 0:28 до 1:10.
Реф подставлен как будто бы из поиска Яндекса / Гугла.
Подобных заходов на внутренние страницы вообще не производится.

В итоге сильно вырос показатель отказов в Метрике (80%).
Роботность в норме (3-4%).
Включение Under Attack Mode в Cloudflare не помогло.

Что это вообще такое и как с этим бороться?

И почему это настолько сильно влияет на отказы, которые вроде как должны фиксироваться, если длительность сессии менее 15 секунд?

Оно и не должно было помочь. Этот режим - чтобы при ддос отсечь небольшую часть ботов, пока вы в ужасе бегаете ищете того кто умеет настраивать сайт против ддос.
Ну т.е. чтобы на этот момент сайт хоть иногда открывался.

Сама метрика не особо умеет отличать ботов от не ботов. Ну и не факт что вы там например не проставили галку - фильтровать ботов по поведению. И метрика данные показывает без ботов. Ну и неизвестно,  куда вы там смотрите, когда про 4% пишете. Т.е. с виджетов на главной это, в срезе за вчера или в срезе за последний месяц.

Реф можно задать любой, а если пробить по айпи - то там ни яндексом ни гуглом и не пахло.

Ну а так ответ, исходя даже из того что имеем - это поведенческие боты.

Со всеми этими правилами могут попасть под раздачу некоторые белые боты гугла или яндекса или ... Чтобы точно быть уверенным что все в порядке, проверяйте логи вашего блокирующего правила по фильтру AS, например на скрине внизу я ввожу фильтр 15169, это для гугла. Для других поисковиков думаю сами найдете, эти цифры так же выводятся и в логах клауда.

Обычно просто в первом правиле ставят разрешение для белых ботов. Там и гугл и яндекс и проч.

да, так и есть. Поэтому надо перестраховаться.

Может этой подсети яндекса там нет потому, что эта сеть не имеет отношения к яндексу? 😂

AS20872
PJSC "BANK URALSIB"

Ну об этом ничего не написано в устаревшем хелпе по настройке клауда с vc.ru, по вредным советам с которого все начинающие уже несколько лет скачут по граблям )
А потом орут здесь с  умным видом, что этот ваш клауд не помогает.
А так да, те кто поопытнее, комовскую сетку яндекса да, добавляют. Так что поздравляю, вы теперь профи 👍