Спасибоодним этим параметром получилось отсечь всю ботомусорную битерику
Подскажите как узнать AS Num еще этих негодяев?
Metropolitan branch of PJSC MegaFon Metropolitan branch of OJSC MegaFon
В Cloudflare можно для каждого срабатываемого события посмотреть
Да не путайте вы Tca! -managed это действие по выбору системы - нагульные боты ее зачастую проходят потому что клауд видит что это нормальный браузер. старая капча это captcha challenge, legacy captcha и теперь Interactive Challenge после всех переимнований - вот ее и надо ставить
Я в курсе чем Interactive отличается от Managed. У них на этой странице было - https://developers.cloudflare.com/fundamentals/get-started/concepts/cloudflare-challenges/, написано, что для бесплатных тарифов включенный Interactive будем все равно работать как Managed. Мануал обновлен 6 дней назад, видимо эту сноску убрали.
Кто шарит в настройках htaccess? Можно ли как-то заблокировать доступ только к главной странице сайта на Wordpress при переходе со всех других сайтов? При этом оставив доступ для поисковых роботов яндекс и гугл.
Отдельно банить сайты по списку не имеет значения похоже. Только за два дня насчитал переходы с 3500 сайтов, повторов среди них мало.
Да, имеют. Врубал на хостинге блокировку без Cookie и JavaScrip, ботов ни на одного ни стало меньше.
практически все прямые -
А на какую страницу?
Посмотрите по IP в логах какая сетка, если не большая то можно для ботов из нее заблокировать переходы с пустым реферером (прямые заходы).
Если они все на какую то внутреннею страницу идут, тогда можно еще сделать условие проверки на URL.
Да прямые заходы выросли на порядок, но ТП Яндекса уверяет, что они ни коем образом не влияют на ранжирование сайта, вот скрин
из Я.Справочника ни удаляли.
А какое соотношение с другими источниками?
Посмотрите через вебвизор с каких сетей идут прямые заходы, если есть много заходов с битерики, то значит большая часть боты.
Я для борьбы с ними поставил Cloudflare, в соседних ветках есть инструкция по настройке.
Есть "товарищи" которые как и Яндекс утверждает, что НИ НА ЧТО НЕ ВЛИЯЕТ.
Резкого роста прямых заходов не наблюдается?
Из Яндекс справочника не удаляли организацию?
Я блокировку IP6 отключил. AS в исключения тоже думаю не смысла добавлять, т.к как вы писали кто то кроме гугла так же использует их сеть.
Не думаю, что у CF могут быть проблемы с ботами гугла, т.к он стоит на огромном количестве сайтов бурже и их бы уже претензиями завалили, т.к большинство юзает платные тарифы.
Решил посмотреть логи CF после настройки по шаблону. Мне кажется или все же неправильно, что он блокирует такие запросы?
Я тоже обратил внимание, что какие то IP из этой сетки пропускаются, а какие то идут на проверку.
Вот такой визит вряд ли принадлежит ботам гугла.
Наверное у CF для ботов гугла какой то список IP есть в Known Bots .
