Анти БОТ

Анти БОТ
Рейтинг
134
Регистрация
14.03.2020
Должность
специалист по поведенческим ботам
Shelton724 #:

А как можно попасть в топ на запрещенном сайте? Они у меня (как и у большинства) без VPN даже не открываются.

Но это ведь не значит, что они недоступны для ботов гугла / яндекса и проч.
А то что айпишник в реестре, вообще ничего не значит. Сайт прокидывается за клауд, и у него уже другой айпишник.
По названию домена блочат, а не по айпишнику. Были в свое время игры с блоком по айпи, начались проблемы у кучи невиновных сайтов.
Половина айпишников клауда в реестре, но это же не мешает открываться тем сайтам, которым также этот айпи достался при добавлении за клауд.

Brat_Sergij #:

Ох... у меня и так  htaccess оказался переполнен из-за внесения диапазонов... Не хотелось бы его еще больше нагружать. А нет ли такого списка, но для robots.txt?

Хотя... по идее эти боты должны слушаться правила в роботс. Типа такого:

Потому что я смотрю, что у меня многие из вашего списка именно так в роботсе и указаны.

Там проблемка в том, что многие боты из списка плевать хотели на то, что написано в роботс.

softerra #:

Повторюсь, я новичок в теме. 

Ну так почитайте теперь про Zennoposter, BAS. Откроете для себя новый мир.
А не разбрасывайтесь религиозными предрассудками, тут верю, тут не верю.

softerra #:

Поисковые боты (боты через поиск) - это нонсенс. Яндекс их капчей сразу замочит.

Ага, понял, вбить в поисковой строке "яндекс капча прохождение" и найти кучу айпишек по ее прохождению с адекватным ценником - это нонсенс.

Вбить в поиск "подмена реферера"  - это нонсенс.

Проще по 10 раз в день рассказывать тут во всех темах как на сайте с 50 посетителями в сутки забанен диапазон, с которого на сайт пришло 2 странных захода.

softerra #:

Верю в такие мощные програмные атаки с прямыми заходами.

А в ботов из поиска по фразе - нет.

Для ВЕРИТЬ - есть другая организация / организации. Загуглите, кофессий много.  Можно найти ближайшую и там ходить ставить свечки.

Если вы не понимаете саму суть, почему и откуда берутся поведенческие боты (включая тех кто приходит не напрямую, а через поиск) - не засоряйте тему. В поиске есть ответы на нужные вопросы, не стоит превращать топик в пустую флудильню.


PS. Начните со слова Zennoposter.
Я еще лет 8 назад экспериментировал написанием шаблонов: заходом бота в поиск яндекса, вводом нужного ключа и листанием страниц пока не найду нужный сайт. После чего бот кликал на ссылку и уходил куда нужно. ВОСЕМЬ лет назад. С тех пор море воды утекло. Доброе утро.

Ощущение, что кто-то сам себя забанил в Яндексе / Гугле.
Чисто для примера.
https://zennolab.com/discussion/threads/iprofiler-jandeks-shablon-nakrutki-pf-i-povyshenija-ctr-v-jandeks-ot-lagir-i-moonwalker.85484/
https://zennolab.com/discussion/forums/prodazha-shablonov-zennoposter-zennodroid.212/

softerra #:

Сайт, про который здесь писал, мелкий ru магазинчик, 50-60 людей с поиска в день. Вот недавно боты поперли, пришлось повникать - я с начала не знал что и делать. Думал одолеют.


Понял. Только нужно учитывать, что битерика ранктеч и еще всего неск диапазонов - это просто ваш частный случай. Для небольшого сайта.

А в проектах где трафика на порядок или два больше - там все вырастает тоже в аналогичной пропорции. Включая и диапазоны подсетей, приходящих в гости.

Vladimirus #:

Я тут простую истину скажу, хотя с ней многие не согласны - компания потому и крупная, что обманывает по крупному.

Ну вот мы подошли к сути взаимоотношений сеошников, ботоводов, поисковика, его рекламной сети, и рекламодателя.

А суть проста. Укради у вора хотя-бы часть того, что вор украл у тебя.

softerra #:

https://www.liveinternet.ru/stat/eroticaau.com/24hours.html?whois=194.145.147.120

Эту маленькую сетку забанил, прямой заход.

Это и есть тот самый нишевый сайт с парой десятков заходов в день?
Там где 1-2 заказа в день хозяевам салона вполне хватает. https://eroticaau.com/

Под ваш конструктор ничто ничем не отличается, поэтому и отдельных тем под Тильду нет.
Единственное отличие - сайты арендаторов на тильде изначально защищены отлично настроенным ддосгард. Проверено, ддос атаку держит.

Поэтому вам стоит переместиться в общую тему, и там уже читать кто как настраивает клауд.

https://searchengines.guru/ru/forum/1075193

PS 

Тот же ддосгард, поставленный на навороченных антиддос планах от хостеров - сайты падают в первые же секунды. Так то у хостеров руки из пятой точки растут, и переплачивать за антиддос им не нужно, он не работает.

avangard #:
Наплыв ботов по прямым заходам. Не думаю что здесь дело в Яндексе. У меня 50 тысяч хитов за несколько дней - все адреса Амазона. Мне кажется или уязвимости ищут или пытаются взломать или еще что- то в этом роде.

Есть такое. Как с цепи сорвались.

Всего: 1386