Анти БОТ

Анти БОТ
Рейтинг
135
Регистрация
14.03.2020
Должность
специалист по поведенческим ботам
maxim0905 #:
С конца января наблюдаю аномальный рост прямых заходов на сайт узкоспециализированного интернет магазина, у меня в лучшие времена 1000-1100 хостов в сутки, большая часть трафика - это ПС и директ. А вчера одних только прямых заходов 1700. По поведению видно, что это боты. Почему Яндекс.Метрика не относит данный трафик к роботам? Также к прямым заходам подключились переходы по ссылкам с довольно популярных ресурсов. Кто-то хочет повлиять на позиции моего сайта в выдаче или что это еще может быть?

И то и то - поведенческие боты. Просто в случае с "сайтами" производится подмена реферера.
Для Яндекса это самые реальные посетители, даже реальнее чем мы тут все на форуме. Нужно же кому-то Директ выкликивать.
Если кратко - сайт попал в чей-то список на нагул профилей ботами. На позиции да, повлияет. Знатоки утверждают, что они упадут. Само оно не рассосется, нужно что-то с этим делать.

sartiqus #:

Это кто? Можно список пофамильно?

Странно обсуждать дурные советы из десятого года держать сайты на зарубежном хостинге. Тогда это может и было актуально, но после 13-14 года точно уже было понятно, что это мина замедленного действия. И так по всем пунктам в том набросе.
Блог-первоисточник  уже издох давно, и до сих пор на http, а автор где-то бомжует. А вот идиотская статья до сих пор будоражит некоторые умы.

Еще более странно - задавать подобные вопросы в длинной теме с нытьем о том, как их пинком под зад выгоняют с Хетцнера из-за неправильного паспорта, а они обтекают и снова туда лезут.

Или о том, как дали 2 недели на то, чтобы быстренько смотать удочки с Годадди.

Для набрасывания фекалий на вентилятор есть курилка. Тратить время на обсуждение очевидных вещей не считаю необходимым.

blg #:

Вы, наверно, забыли первое правило из 9,5 правил ведения безопасного IT-бизнеса в России

Прочел статью. Написана в 2010 году. Наивность просто зашкаливает. Время показало, что в выигрыше оказались те, кто делали ровно наоборот.

юни #:
Я как раз по опыту. И по общению в сообществах операторов связи.

Не уверен. Разве что совсем новичкам.

Кстати, регистрацию аккаунтов с в6 тоже отследить элементарно. Думаю, в поисковиках это учитывают.

Плохой у вас опыт, не релевантный. Это все по ipv6 набежало на одном из сайтов. Все РФ.

Не стоит слушать "знатоков". Они сначала насоветуют, а потом - в кусты.
55

Артём #:

Мне просто интересно, антибот как-нибудь влияет на поведенческие факторы. Ну то есть, человек когда будет заходить на сайт, а ему сразу капча в нос, не будет ли это сильно сказываться на том, что пользователи начнут уходить сразу с сайта?

Например я сразу закрываю сайт, если мне предлагают что-то там разгадать. Открываю следующий по списку. Думаю, я не один такой.

truebusiness :
Если я создам свой сайт на Wordpress для SEO и размещу на дешманском виртуальном хостинге - мой сайт запросто упадет

Вообще ни разу не упадет, так как кроме топикстартера на него изначально никто ходить не будет.

Как по мне - проблема высосана из пальца. Берите любой дешманский хостинг, и экспериментируйте. А пока будете по любой мелочи советы спрашивать, пройдут годы и в итоге даже домен не купите, не то что хостинг.

юни #:

Есть примеры?

Адреса этой версии больше распространены у хостеров, провайдеры их поддерживают в виде исключения, в сеть по в6 выходят в Штатах, иногда в Европе. В бСССР это редкость.

Иными словами, именно для накрутки поведенческих данный протокол скорее вреден. Можно парсить ПС или маркетплейсы, регистрировать аккаунты в соцсетях или заниматься другими техническими работами.

Когда постоянно занимаешься одним и тем же, смотришь каждый день на различные логи в клауде, постепенно формируется какая-то своя картинка с повторяющимися паттернами. Есть люди, которые имеют доступ к статистике, и исходя из более широкого кругозора, принимают то или иное решение. Когда только свой проект, таких знаний не наберешься, негде брать.

Тот же Mik Foxi неделю назад в соседней теме что-то там исходя из своего опыта утверждал, а его в ответ только фекалиями набрасывали. В след раз промолчит.

Вот чисто навскидку. От сайта к сайту сила присутствия протокола и состав сетей прыгает. Насчет экссср зря так думаете, мобильные операторы тоже ipv6 предоставляют, на том же МТС периодически встречаю.

Но повторюсь - я протокол отключаю. Иногда этого простейшего действия было достаточно, даже без остальных настроек, чтобы поведенческий трафик (+ нагрузка на сервер) обваливался практически в ноль, так как там только самых дешманских ботов гоняли.

А накрутчикам все равно на каких айпи набивать статистику у ботофермы. Начальную накрутку массе профилей сделают на IPv6, а потом при необходимости самых раскрученных на бродилку IPv4 переведут, делов-то на пару кликов мышкой.

55

55

55

nikenike #:
Не слушай этих "умников", это полный запрет к сайту. Почитай здесь есть на форуме темы про ботов, там есть советы. Обычно рекомендуют использовать  CloudFlare.

Топикстартер четко указывает, что ему нужна фильтрация поведенческих ботов через Nginx. Так что все верно подсказали, запрет доступа к сайту решит эту проблему.

А если нужна фильтрация ботов, то да, потребуется настройка Cloudflare.
Вот тема.
https://searchengines.guru/ru/forum/1075193

BrickLayer #:

        
deny all;
return 403;

Почему топикстартер мешает в кучу ботов без user-agent и поведенческих ботов - непонятно. Это вообще разные категории и очень распространенное заблуждение.

У поведенческого бота профиль такой же как и у обычного посетителя. И реальный браузер такой-же, со всеми включенными опциями, и юзерагент как у всех. Т.е. если взять профиль поведенческого бота и топикстартера - с точки зрения Яндекса оба одинаковые, но у бота лучше. Так что здесь еще нужно посмотреть, кто бот.

Единственно возможный способ избавиться от поведенческих ботов через NGINX предложил BrickLayer.

Всего: 1389