При чём тут хостер?
Если разместить сайт на хостинге Домишко. И в случае если айпишник который под НС выдал клауд, совпадет с айпи, что есть в реестре РКН - сайт сразу же после того как НС подхватятся - начнет выдавать 502 ошибку.Саппорт сошлется на то, что выданный вам клаудом айпи есть в реестре РКН. Поэтому или меняйте айпи, или отключайте клауд, или досвидания.Из личного опыта.
Так они у меня по имени доменов не открываются. Да и как я могу открыть разные сайты на одном айпишнике без имени по одному айпишнику?
Вы просто не сталкивались. Бывают недохостеры (например Хостинг Домишко), которые блочат сайт если ему достался на клауде айпишник который есть в реестре РКН. И неважно что на этом айпи 5 лет назад хостился какой-то сайт, который попал в реестр. И того сайта давно уже не существует.И что этот конкретный сайт вообще ко всему этому никакого отношения не имеет. В итоге подключаешь клауд, а вообще не имеющий ко всему этому отношения сайт тупо перестает работать.Приведите несколько примеров тех сайтов, про которые вы пишете.
А как можно попасть в топ на запрещенном сайте? Они у меня (как и у большинства) без VPN даже не открываются.
Но это ведь не значит, что они недоступны для ботов гугла / яндекса и проч.А то что айпишник в реестре, вообще ничего не значит. Сайт прокидывается за клауд, и у него уже другой айпишник.По названию домена блочат, а не по айпишнику. Были в свое время игры с блоком по айпи, начались проблемы у кучи невиновных сайтов.Половина айпишников клауда в реестре, но это же не мешает открываться тем сайтам, которым также этот айпи достался при добавлении за клауд.
Ох... у меня и так htaccess оказался переполнен из-за внесения диапазонов... Не хотелось бы его еще больше нагружать. А нет ли такого списка, но для robots.txt?
Хотя... по идее эти боты должны слушаться правила в роботс. Типа такого:
Потому что я смотрю, что у меня многие из вашего списка именно так в роботсе и указаны.
Там проблемка в том, что многие боты из списка плевать хотели на то, что написано в роботс.
Повторюсь, я новичок в теме.
Ну так почитайте теперь про Zennoposter, BAS. Откроете для себя новый мир.А не разбрасывайтесь религиозными предрассудками, тут верю, тут не верю.
Поисковые боты (боты через поиск) - это нонсенс. Яндекс их капчей сразу замочит.
Ага, понял, вбить в поисковой строке "яндекс капча прохождение" и найти кучу айпишек по ее прохождению с адекватным ценником - это нонсенс.
Вбить в поиск "подмена реферера" - это нонсенс.
Проще по 10 раз в день рассказывать тут во всех темах как на сайте с 50 посетителями в сутки забанен диапазон, с которого на сайт пришло 2 странных захода.
Верю в такие мощные програмные атаки с прямыми заходами.
А в ботов из поиска по фразе - нет.
Для ВЕРИТЬ - есть другая организация / организации. Загуглите, кофессий много. Можно найти ближайшую и там ходить ставить свечки.
Если вы не понимаете саму суть, почему и откуда берутся поведенческие боты (включая тех кто приходит не напрямую, а через поиск) - не засоряйте тему. В поиске есть ответы на нужные вопросы, не стоит превращать топик в пустую флудильню.
PS. Начните со слова Zennoposter.Я еще лет 8 назад экспериментировал написанием шаблонов: заходом бота в поиск яндекса, вводом нужного ключа и листанием страниц пока не найду нужный сайт. После чего бот кликал на ссылку и уходил куда нужно. ВОСЕМЬ лет назад. С тех пор море воды утекло. Доброе утро.Ощущение, что кто-то сам себя забанил в Яндексе / Гугле.Чисто для примера.https://zennolab.com/discussion/threads/iprofiler-jandeks-shablon-nakrutki-pf-i-povyshenija-ctr-v-jandeks-ot-lagir-i-moonwalker.85484/https://zennolab.com/discussion/forums/prodazha-shablonov-zennoposter-zennodroid.212/
Сайт, про который здесь писал, мелкий ru магазинчик, 50-60 людей с поиска в день. Вот недавно боты поперли, пришлось повникать - я с начала не знал что и делать. Думал одолеют.
Понял. Только нужно учитывать, что битерика ранктеч и еще всего неск диапазонов - это просто ваш частный случай. Для небольшого сайта.
А в проектах где трафика на порядок или два больше - там все вырастает тоже в аналогичной пропорции. Включая и диапазоны подсетей, приходящих в гости.
Я тут простую истину скажу, хотя с ней многие не согласны - компания потому и крупная, что обманывает по крупному.
Ну вот мы подошли к сути взаимоотношений сеошников, ботоводов, поисковика, его рекламной сети, и рекламодателя.
А суть проста. Укради у вора хотя-бы часть того, что вор украл у тебя.
https://www.liveinternet.ru/stat/eroticaau.com/24hours.html?whois=194.145.147.120
Эту маленькую сетку забанил, прямой заход.
Это и есть тот самый нишевый сайт с парой десятков заходов в день?Там где 1-2 заказа в день хозяевам салона вполне хватает. https://eroticaau.com/