Точно, сломался CF. Никакие исключения не работают, чтобы Google-InspectionTool/1.0 не блокировался. В яндекс ответ от сервера 200 ОК, а чтобы в индекс новую страницу загнать в Google, выдает 403
П.С. (ред) В общем если удалить правило "пустой рефере", то норм боты проходят 200ок. Хотя тсранно работало до этого все. В чем причина то ? знает кто?))
Точнее, по двум правилам не пускает по HTTP 1 и пустом рефере. Отключил на время, пошли прямые заходы, это лучше чем деиндекс от гугла.
Я проверку (not http.request.version in {"HTTP/2" "HTTP/3" "SPDY/3.1"}) убрал, т.к все равно основной спам идет через прямые заходы.
И проверку на спам в UTM перенести в правило с блокировкой. Много таких ботов проходят проверку Managed Challenge и из переходов по рекламе просто переходят во внутренние.
Не, я не буду убирать, 20к за 24 часа всякого шлака по http1 :) Просто интересно, вчера работало, сегодня нет. Даже ASN 15169 Google добавил в белые боты и все ровно 403 при проверке страницы на сайте. Хммм... чудеса.
Странно, отключаю правила выше http1 и гуглбот в вебмастере не выдает при сканировании страницы 403 ошибку, с включенным, выдает. Хотя вчера было все нормально, ничего не менял.
Вот такое правило для HTTP+
(not http.request.version in {"HTTP/2" "HTTP/3" "SPDY/3.1"}) or (http.referer eq "") or (http.request.uri contains "utm")
Улетел сайт в бан:
Ваша площадка заблокирована за нарушение Правил участия (п. 2.1, 2.1.2). На площадке обнаружены недействительные показы и клики.
Естественно ничего не крутил, основной трафик из поиска. Но заметил что в метрике есть много ботов якобы из директа. Примеры заходов:
UTM Source: yandex-direct UTM Medium: cpc UTM Campaign: 29391089 UTM Content: 13208291_kyq6p1 UTM Term: 1cshz0q
UTM Source: yandex UTM Medium: cpc UTM Campaign: 56066920 UTM Content: 94076847_kmi2sl UTM Term: 8yj6ple
UTM Source: yandex UTM Medium: cpm UTM Campaign: 76173326 UTM Content: 80136356_dot8i5 UTM Term: wbf6c1r
Возможно в этом причина?
Скажите какой процент был заходов и CTR блоков?
Вот одно понять не могу, это политику Яндекса с могучим антифродом. Если выявили клики недействительные, значит знают, что это боты. Зачем банить тогда? Просто не учитывать клики и просмотры религия не позволяет? Тут забанить нужно 80% сайтов тогда. Google Adense то не учитывает, даже списывает это всё дело. Почему в яндексе нет такого? Смысл от бана? настораживает всё это дело, когда ты непричем.
Ребят, подскажите а как заблокировать Битерику через CF?
Может есть какое-то красивое правило, которое вырежет всю эту сеть ASN Битерики — 35048?
Ну так и блокируй по ASN (AS num > is in > 35048 )
Такая же история, превью не подгружается только в ok.ru и в vk.com
Походу у них какие то ограничения на cloudflare. Это появилось 2-3 недели назад, раньше нормально работало.
Хммм... проверил сейчас. Всё подсасывает ВК, как и было
Плохо, тестил не 1 раз админтад. Из всего, яндексмаркет нормально зашел
Блин, а я то думал, чего у конкурентов моих выросло резко прибывание на сайте. Они просто поставили Ddos-Guard, который, если перейти через поиск гугл и яндекс, иногда срабатывает и крутится как CF по JS проверке. Так получается так можно увеличить время на сайте?) Сейчас посмотрел, заметил в CF, что прямые заходы в прибывании стали больше с проверкой CF, чем без них. Как задать правило на JS проверку из поисковиков, подскажите кто?))) Как говорится не можешь бороть ботов, используй их во благо...
Эти два ASN основные боты с яндекса. Я 1.5 недели тестил эти ANS в качпе CF, сейчас я убрал эти два ASN и что видно?) 75% трафа. Это при том, что на сайте было до CF 15к уников. Это сколько то в поиске яндекса получается ботов, которые идут именно по поисковым запросам в яндексе. А теперь представь, если столько ботов задержаться в CF правиле каком-либо, так как CF срабатывает уже, когда кто то перешел на URL.
Допустим, не будете вы зарабатывать на сайтах. ПРойдет года 3 и где гугл будет брать новый обновленный контент? Сайты будут в любом случае. Как ты по голосу сделаешь ребут на телефонах, как по голосу код напишешь? Когда топики создаешь, подумай глубже, нейро-параноик.
П.С, дайвай напиши, что нейросети код напишут. Попробуй спросить у Bard и Bing код на редирект для сайта. Потом просто вставь ответ на свой сайт и подумай еще раз)