Анти БОТ

Анти БОТ
Рейтинг
129
Регистрация
14.03.2020
Должность
специалист по поведенческим ботам
Coby #:
А как в новой метрике роботность смотреть?

Имеется в виду виджет роботность? Вроде ничего не изменилось.
antiddos24

Обычно так и происходит. Кто-то вообще не понимает что творит, тыкает на все кнопки на клауде. По принципу "институт окончил значит умный и во всем разбираюсь", прыгает по всем возможным граблям. Причем прыгает только там, где до этого попрыгал Иван Зимин с VC. Что наводит на определенные мысли и выводы. О том, что граблепрыгание - штука заразная, передается через поколения сеошников.  

После того как окончательно накосячили, вместо того чтобы в зеркало посмотреть и найти виновника всех бед, начинают сказки рассказывать. Как выше, прекрасная история о том, что 403 error от сервера для hetzner это манна небесная, а такая же 403 от клауда - это зло выбивающее сайт из поиска.

Так и здесь. Если начали что-то делать, то делайте так как советуют те, кто потратил на клауд больше чем 15 минут. В IPV6 - дешевые прокси и толпы ботоферм, и там же - переходы с мобильного интернета. А вы их скопом всех под капчу, и ботофермы и реальных посетителей. А потом удивляетесь, что же не так.

Отключите IPV6 в клаудфларе, по API. С реальными ничего не станет, будут по IPV4 ходить.

fredik1989 #:
Был бы рад если кто поделится списком айпи омских кабельных сетей!

Вот например

Order Deny,Allow
Deny from 185.13.176.0/22
Deny from 94.137.48.0/20
Deny from 2a02:ddc0::/29
Deny from 109.120.16.0/20
Deny from 94.137.0.0/20
Deny from 217.25.208.0/20
Deny from 178.74.64.0/18
Deny from 109.120.32.0/20
Deny from 62.182.192.0/21
Deny from 46.233.192.0/18
Deny from 94.137.16.0/20
Deny from 176.62.64.0/18
Deny from 94.137.32.0/20
Deny from 109.120.48.0/20
Deny from 109.120.0.0/20

Вы же понимаете разницу между айпи и диапазоном айпи? Или нет?

fredik1989 #:
держите список айпи адресов битерики! Целую неделю этих гадов собирал!

Можно было просто взять отсюда.
https://asn.ipinfo.app/api/text/htaccess/AS35048

john_j #:

Сегодня заблочил активного бота по User agent :

ASN: AS48282 VDSINA-AS

Може всю сеть заблочить?

Это хостинг. Соответственно, все заходы из этой сети - это заходы НЕ домашних компьютеров и мобильных телефонов реальных людей, а заходы серверных устройств.
Т.е. людей там нет. Но блочить все равно нежелательно, лучше капча.

xereden #:
Вот точно такая-же фигня случилась. Эта настройка каким-то образом самостоятельно сменилась с Full на Flexible.

Просто снова ставите Full, и вопрос решен.

Максим Кучеров #:
Как и куда в амазон писать жалобу?

В Спортлото написать жалобу. И чтобы 2 раза не вставать - в Гаагский трибунал.

В правилах на клауде амазонботов забаньте по юзерагент,  и все. Чуть раньше в теме вы же выкладывали кусок лога.

(http.user_agent contains "Amazonbot")
Максим Кучеров #:
Куда копать посоветуете?

Вот сюда.
Spider Hits
Не думаю, что яндекс с гуглом столько накидали хитов.

Подозреваю, у вас там вагон клаудиботов, амазонботов, семраш, ашрефс и прочего подобного непрошенного. Что же они такое качают, что терабайт трафика выбрали?

Смотрите именно по юзерагент в логах.

Staws #:
вот только и люди если судить по метрике, тоже перестали заходить по поисковым фразам, 

А графа переходы с поиска у вас осталась? Или все теперь переместились во внутренние?

Andrey_Ermakov #:

код капча и спам бот листы все бесплатно и с обновлениями и микроскоп тоже, один раз настрой и все,

а вот с атаками ддос это уже совсем другое это не просто в название домена ddos дописать))

По ДДОС да, только средствами сервера практически нереально отбиться, особенно если атака выше чем уровень ясельной группы.
У меня слово ДДОС в домене не просто так. Если есть желание и возможности, приглашаю поддосить, по предварительному согласованию. 

Ну и еще раз повторюсь, Cloudflare для фильтрации поведенческих ботов приспособили именно потому, что на данный момент ему просто нет адекватных альтернатив.

Всего: 1326