Такие заблокированы:
Список заблокированных ботов:open-kabinet.ru|Bytespider|MJ12bot|Amazonbot|SemrushBot|AhrefsBot|DotBot|MegaIndex|weborama|halvakabinet.ru|nmo-lk.ru|domrf-lk.ru|ik-megafon.ru
Ну т.е. вы вообще не различаете что такое поведенческие боты, а что такое сканеры парсеры и проч которые не через реальный браузер ходят?Это чуть разные виды ботов, и ваши списки здесь абсолютно бесполезны. Общее только слово бот.
У поведенческого бота будет реальный браузер, и юзерагент такой-же как у вас, или любого другого посетителя вашего сайта. Например
Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/118.0.0.0 YaBrowser/23.11.0.0 Safari/537.36
Когда Зимин свое сочинение на вольную тему на VC пиарил, он тоже мало понимал разницу между сканирующим ботом и поведенческим. Вот и получаются потом такие случаи, когда идет яростная борьба с ветряными мельницами поведенческими ботами, но с помощью инструментов, которые к поведенческим ботам не имеют вообще никакого отношения.Аналогично и для ДДОС атак. С этого лета все серьезные ДДОС атаки идут по HTTP2 и с профилей которые и для поведенческих ботов используются. А самый распространенный совет против ДДОС до сих пор - блокируйте HTTP1 🤣
Если быстро загуглить, то вот.
Бот компании Moz, собирает статистику о сайтах для коммерческой продажи для клиентов сервиса Moz, данный бот может быть полезен только для тех сайтов, которые работают с Moz по API, в противном случае это лишняя нагрузка на сайты.
Лично я предпочитаю блокировать ботов, которые кому-то там продают данные, собранные на других сайтах.
бггг ... он постоянно обновляется ... откуда такие олухи берутся?
Олухи сначала пишут бред, а потом только читают пост.Я про интерфейс и то что там внутри.Если с яндекс вебмастером сравнить, то гугл - это старый ржавый запорожец по сравнению с мерседесом.
Как по мне, Гугл давно уже забил на вебмастеров и их сайты. Гугл вебмастер уже много лет как вообще не обновляется тот же.
Или через Апи загонять, или закупить себе дофигилиард внешних ссылок.
Ну и подняли вы тему.
Так скоро еще и до послеобеденных ботов доберемся, и до работающих только на выходные. А там и до профсоюза ботов недалеко.
Откройте файл access в логах хостинга, там все будет.