А как можно попасть в топ на запрещенном сайте? Они у меня (как и у большинства) без VPN даже не открываются.
Но это ведь не значит, что они недоступны для ботов гугла / яндекса и проч.А то что айпишник в реестре, вообще ничего не значит. Сайт прокидывается за клауд, и у него уже другой айпишник.По названию домена блочат, а не по айпишнику. Были в свое время игры с блоком по айпи, начались проблемы у кучи невиновных сайтов.Половина айпишников клауда в реестре, но это же не мешает открываться тем сайтам, которым также этот айпи достался при добавлении за клауд.
Ох... у меня и так htaccess оказался переполнен из-за внесения диапазонов... Не хотелось бы его еще больше нагружать. А нет ли такого списка, но для robots.txt?
Хотя... по идее эти боты должны слушаться правила в роботс. Типа такого:
Потому что я смотрю, что у меня многие из вашего списка именно так в роботсе и указаны.
Там проблемка в том, что многие боты из списка плевать хотели на то, что написано в роботс.
Повторюсь, я новичок в теме.
Ну так почитайте теперь про Zennoposter, BAS. Откроете для себя новый мир.А не разбрасывайтесь религиозными предрассудками, тут верю, тут не верю.
Поисковые боты (боты через поиск) - это нонсенс. Яндекс их капчей сразу замочит.
Ага, понял, вбить в поисковой строке "яндекс капча прохождение" и найти кучу айпишек по ее прохождению с адекватным ценником - это нонсенс.
Вбить в поиск "подмена реферера" - это нонсенс.
Проще по 10 раз в день рассказывать тут во всех темах как на сайте с 50 посетителями в сутки забанен диапазон, с которого на сайт пришло 2 странных захода.
Верю в такие мощные програмные атаки с прямыми заходами.
А в ботов из поиска по фразе - нет.
Для ВЕРИТЬ - есть другая организация / организации. Загуглите, кофессий много. Можно найти ближайшую и там ходить ставить свечки.
Если вы не понимаете саму суть, почему и откуда берутся поведенческие боты (включая тех кто приходит не напрямую, а через поиск) - не засоряйте тему. В поиске есть ответы на нужные вопросы, не стоит превращать топик в пустую флудильню.
PS. Начните со слова Zennoposter.Я еще лет 8 назад экспериментировал написанием шаблонов: заходом бота в поиск яндекса, вводом нужного ключа и листанием страниц пока не найду нужный сайт. После чего бот кликал на ссылку и уходил куда нужно. ВОСЕМЬ лет назад. С тех пор море воды утекло. Доброе утро.Ощущение, что кто-то сам себя забанил в Яндексе / Гугле.Чисто для примера.https://zennolab.com/discussion/threads/iprofiler-jandeks-shablon-nakrutki-pf-i-povyshenija-ctr-v-jandeks-ot-lagir-i-moonwalker.85484/https://zennolab.com/discussion/forums/prodazha-shablonov-zennoposter-zennodroid.212/
Сайт, про который здесь писал, мелкий ru магазинчик, 50-60 людей с поиска в день. Вот недавно боты поперли, пришлось повникать - я с начала не знал что и делать. Думал одолеют.
Понял. Только нужно учитывать, что битерика ранктеч и еще всего неск диапазонов - это просто ваш частный случай. Для небольшого сайта.
А в проектах где трафика на порядок или два больше - там все вырастает тоже в аналогичной пропорции. Включая и диапазоны подсетей, приходящих в гости.
Я тут простую истину скажу, хотя с ней многие не согласны - компания потому и крупная, что обманывает по крупному.
Ну вот мы подошли к сути взаимоотношений сеошников, ботоводов, поисковика, его рекламной сети, и рекламодателя.
А суть проста. Укради у вора хотя-бы часть того, что вор украл у тебя.
https://www.liveinternet.ru/stat/eroticaau.com/24hours.html?whois=194.145.147.120
Эту маленькую сетку забанил, прямой заход.
Это и есть тот самый нишевый сайт с парой десятков заходов в день?Там где 1-2 заказа в день хозяевам салона вполне хватает. https://eroticaau.com/
Под ваш конструктор ничто ничем не отличается, поэтому и отдельных тем под Тильду нет.Единственное отличие - сайты арендаторов на тильде изначально защищены отлично настроенным ддосгард. Проверено, ддос атаку держит.
Поэтому вам стоит переместиться в общую тему, и там уже читать кто как настраивает клауд.
https://searchengines.guru/ru/forum/1075193PS
Тот же ддосгард, поставленный на навороченных антиддос планах от хостеров - сайты падают в первые же секунды. Так то у хостеров руки из пятой точки растут, и переплачивать за антиддос им не нужно, он не работает.
Есть такое. Как с цепи сорвались.