Как правильно ограничить поведенческих ботов

не хаос
На сайте с 18.10.2021
Offline
105
#121

Если боты имитируют идеальное поведение, но при этом реальные пользователи, попадая на сайт, сразу уходят (потому что дизайн устарел, цены завышены, а текст не отвечает на запрос), алгоритм видит колоссальный разрыв. Поисковик понимает: сайт удерживается в топе искусственно, реальным людям он неинтересен, и опускает его в выдаче.


Антоний Казанский
На сайте с 12.04.2007
Offline
851
#122
не хаос #:
Если боты имитируют идеальное поведение, но при этом реальные пользователи, попадая на сайт, сразу уходят (потому что дизайн устарел, цены завышены, а текст не отвечает на запрос), алгоритм видит колоссальный разрыв. Поисковик понимает: сайт удерживается в топе искусственно, реальным людям он неинтересен, и опускает его в выдаче.

Верно. Поэтому стратегия накрутки без качественной модернизации сайта всегда приводит к тупику деловых отношений.

И самое важное - ни один опытный SEO-шник не возьмёт в работу слабый проект с накрученный переходами, бизнес будет обречён скитаться по накрутчикам, которые своими бесплатными тестовыми прогнонами буду только глубже зарывать проект в яму.

► https://akazansky.ru - продуктовое SEO продвижение, аудиты, комплексное сопровождение для бизнеса • Продвижение от 10 тыс. / месяц • Почасовая нагрузка - 1000 рублей / час.
не хаос
На сайте с 18.10.2021
Offline
105
#123
Опытный имитатор может начать советовать владельцу сайта, дескать, давайте подливать накруточку постепенно, небольшими порциями, чтобы не спалиться.
Такие высказывания нередки на площадке.
юни
На сайте с 01.11.2005
Offline
954
#124
не хаос #:
алгоритм видит колоссальный разрыв
Каким образом? Если боты имитируют идеально.
https://searchengines.guru/ru/forum/944108 - прокси-сервис на базе операторов домашнего интернета, сотни тысяч IP-адресов, канал от 20 Мбит. Пишите в личку.
не хаос
На сайте с 18.10.2021
Offline
105
#125
Алгоритмов нам никто не скажет конечно что бы не утверждали имитаторы и спамеры,  но видимо математики у поисковиков не дураки и знают закономерности.
Антоний Казанский
На сайте с 12.04.2007
Offline
851
#126
не хаос #:
Опытный имитатор может начать советовать владельцу сайта, дескать, давайте подливать накруточку постепенно, небольшими порциями, чтобы не спалиться.

Да, такая стратегия имеет место быть. Иногда она вынуждена и/или необходима.


не хаос #:
Такие высказывания нередки на площадке.

И они имеют свою резонность на практике. 

Нередко даже активно развивающиеся сайты могут использовать такой подход.

Но в целом тема не про выбор стратегии использования ботов, а про ограничение влияния сторонних ботов.

Станислав
На сайте с 27.12.2009
Offline
265
#127
Думаю самая эффективная защита от ботов если не брать сам CF, это Nginx + челендж с капчей на нем, по сути тоже самое что и CF, только индивидуальная реализация. У мня стоить челендж и ботов вообще нет, единственное что нужно правильно настраивать и не накосячить
Мы там, где рады нас видеть.
Анти БОТ
На сайте с 14.03.2020
Offline
149
#128
Станислав #:
+ челендж с капчей на нем

Все, дальше можно не писать. Сейчас набегут местные свидетели секты блокировки парсеров/сканеров через htaccess по диапазонам/User-Agent, и забросают фекалиями. Для них вообще нет разницы между поведенческими (у которых уже пятое поколение можно насчитать) и простейшими http ботами, для них это одно и то же - боты. Они в прошлом столетии заблокировали Битерику по диапазонам, на этом борьба с ботами триумфально завершена.
А раз триумф уже одержан, какая капча.... 😂

Защита сайта от поведенческих ботов, фильтрация ботов для Яндекс Директ - https://antibot24.ru
Анти БОТ
На сайте с 14.03.2020
Offline
149
#129
Станислав #:

Я видимо просто не в курсе срача в теме,  просто пишу о том что 100% поможет от любых ботов.

А по каким кстати признакам срабатывает челлендж? И что он из себя представляет.
Станислав
На сайте с 27.12.2009
Offline
265
#130
Анти БОТ #:
А по каким кстати признакам срабатывает челлендж? И что он из себя представляет.

Срабатывает он так как тебе угодно, по каким признакам сделаешь активацию его, по таким и будет, можно всем подряд, можно фильтровать по языку к примеру, по IP, по UA, до почему угодно. Визуально можно сделать одив в один как в CF. Технически это промежуточная страница где nginx без смены url, а можно и со сменой, перенаправляет клиента на страницу скажем с гпроверкой браузером токена и/или прохождением капчи. У меня к примеру 2 уровня стоит, лайтовый - генерация токена и проверка его JSом, это по сути фильтрует тех у кого JS вырублен, как раз для тех ботов которые код страницы хотят получить, а при этом получают страницу челенджа. Вторая версия со SmartCaptcha для более умных боов которые используют JS и проходят проверку токена, к примеру если юзают puppeteer он на изи проверку токена проходит, но капчу не пройдет, для ботов разгадка капчи это дорого и ресурсоемко. По сути nginx перед отдачей сайта выплевывает клиенту обычную лайтовую html страницу для решения каких то задачь, на ней можно сделать все что тебе в голову взбредет, если проверка пройдена, то пропускает на сам сайт. Я так кстати не только от говноботов и парсеров избавился, но и мое дешманское облако 10млн. запросов (за сутки) во время ддос даже не заметило, к слову говоря ставил до этого зажиту L5-L7 у хостера и она вообще не помогала, ну или частично только, может конечно защита такая неочень у них была, я точно не знаю.

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий