eByeBots

eByeBots
Рейтинг
6
Регистрация
10.12.2025
Должность
Владелец
Интересы
Веб-безопасность, фильтрация трафика, защита от ботов, Anti-DDoS, аналитика трафика, оптимизация сайтов, администрирование серверов, веб-технологии
Занимаемся комплексной защитой сайтов от ботов, парсеров и DDoS-атак. Обеспечиваем фильтрацию трафика и стабильную работу проектов на любых платформах. Надёжная фильтрация трафика через прокси-сервер. Защита от накрутки ПФ, парсеров, DDoS атак и снижение нагрузки на сайт.
Lastwarrior #:
Почему не делаем, делаем

речь не о других, сообщение именно адресовано владельцу топика. 
тут у половины юзеров - свои решения и предложения - и это хорошо. 

Lastwarrior #:
Есть хостеры, которые предлагают фильтрацию ботов, как опцию и фишку, которой нет у других

Можно названия хостеров и их доп.опции? Интересно изучить, что предлагают, спасибо.

Genius Ideaing :
почему компания Яндекс не создает сервис подобный CloudFlare с бесплатным тарифом

несколько причин:
1. Клауд - мировая компания. Яндекс по сути бы занимал только РФ нишу. Доход в вебе в других странах - выше и намного.
2. Клауд на бесплатном тарифе собирает аналитические данные и прочую инфу. Яндекс и так собирает минимальные данные (но не все) с метрики и вебмастера. Да и с РФ сайтов - особо много не соберешь.
3. Яндекс сам не знает кто есть кто, чтобы бороться с этим. (ему проще недовольным кто с Директа жалуется что боты заходят, дать промокод или другую плюшку) 
4. Есть и другие причины, их уже обсудили
5. Создать такой сервис - признать, что они умеют блокать ботов. Тогда возникает вопрос, зачем банить сайты с РСЯ где боты кликают по рекламе?) Блокировать неугодные сайты (по бизнес-модели что сейчас - проще.

Вопрос аналогичный к Вам, почему не создадите подобный сервис самостоятельно? Пускай с минимальными правилами или своей системой?
1. Всему можно научиться.
2. Получите опыт.
3. Сделаете бесплатную альтернативу на минималках.

На самом деле Ваш вопрос упирается в нежелание создать своё решение и затратить время - для результата. А время - деньги.
С таким подходом можно спросить: а почему хостинги не сделают подобный сервис? У них же есть сервера, локации, знания.

Но создавая такое, хостингам неуместно будет предлагать переходить на более высокий тариф - из-за нагрузки ботами и.т.п - а это их хлеб.
У Яндекса так же - они видят если какой то сервис имеет потенциал, и он например блокается по разным причинам - они создают своё - но не в этом случае.

Пока в Яндексе есть Директ, есть влияние ПФ ботов на поиск - Ваша мечта/пожелание, остается мечтой.

Genius Ideaing :
да и вообще наносят колоссальный вред Я.Директ

уверены? склик идет, деньги платят. "Антифрод" яндекса всё "блокирует".
У них клик засчитывается даже если человек не дошел до сайта, что в целом не прозрачно - и я понимаю что это бот.

Вебмастеры с пустым кошельком, перестали быть вебмастерами - ну только если сами что то придумают и потратят время.

yalol :
Что из них точно стоит заблокировать?

Все зависит от ресурса, блокировать по User Agent не лучшая затея (они подделываются). Условно в  Googlebot/2.1  может быть не гугл бот, ПС боты нужно добавлять в исключения по хостам или ASN сетям или что еще - это к слову.
А по теме:
SERankingBacklinksBot - при условии что не пользуетесь сервисом.
DotBot
VKRobotRB  если не крутите рекламу через вк
Semrush все - если не пользуетесь.

Но у Вас по данным видно что преобладают яндекс боты (непонятно за какой промежуток), нужно разобраться - действительно ли это официальные боты.
Если официальные, то вариантов куча:

1. В вебмастере уменьшить сканирование (частоту), но черевато тем если контента много нового - мб долгое появление.
2. Сделать кэширование страниц и отдавать ботам статику, тем самым разгрузить сервер от запросов к БД и ТП
3. Самый простой - увеличить мощности сервера, а потом разбираться по оптимизации.

stamina88 #:
Так не особо получается. Вообще результатов выдачи нет. А что у вас за вариант показов логов такой? Какая то панель управления, или что то вроде тильды?
Самописная веб-панель управления для своего сервиса
stamina88 #:
Так то оно так, но в логах тоже урла целого нет. Просто есть дзен, что и так было понятно. Похоже конкретную страницу откуда идут переходы найти будет невозможно. Только через поиск, ну или perplexity попробовать....
Это боты. У Вас должен быть полный  URL в логах. Попробуйте сами разместить ссылку или перейти с дзена и посмотреть (в консоли разработчика  document.referer я вижу полный URL)

Как вариант поискать в ПС по запросу site:dzen.ru сайт.ру

Вот я создал ссылку на дзене в статье и перешел, вот что в логах у меня

Данные должны быть в access.log логах сайта, поищите в логах по поиску "dzen"  URL`ы. ъ

Перешел с дзен на новостной сайт, реферер не потерялся.

Можете зайти по ссылкам, если там ничего нет на Ваш ресурс - то боты. Возможно имеет смысл ставить капчу (кроме тех URL где есть ссылка на ресурс).

LevShliman #:
то через пару лет они накапливают долги в виде тех месяцев, что ты не пользовался

Слабо верится что это сработает. У знакомого ситуация была, но не РТ: подключили инет, он уточнил мол если не понравится - откажусь и без доплат?  Да, да. Пошёл закрывать договор, выставил счет за месяцы что еще и не пользовался. Тип тариф на 1 год, но если нарушили, платите. Пугали судами, прошло 3 года - тишина.

leoseo #:
проверил, они там без спроса мне какой-то платный антивирус подключили

это база, ЗП  и планы сами себя не закроют. Там же люди - пришел / ушел, текучка - они влились, накидали доп.услуг - получили бонусы, ушли - это в целом у любого провайдера

sagamorr :

Последние 2-3 дня на несколько сайтов повалили боты с Сингапура, все через прямые заходы. В вебизоре их даже не видно, т.к время на сайт 0-1 сек.

Есть у кого то что то подобное?

Можно блочить странами по GeoIP, можно сетками или ASN. Да, всплеск такой есть. Можно и по отпечаткам Fingerprint - при условии если они одинаковые.
Если считаете что из этих стран есть реальный трафик - делайте капчу по типу: если прямой, если эта страна, то капча.

Самое простое забанить диапазоны в .htaccess (если Apache).
Weblady #:
Так переходить на российский хостинг или нет, если даже российские попадают под фильтры?
конечно переходить если трафик под рф, % того что на сайт попадут - намного выше. 
Всего: 58