А кто может подсказать правила для Cloudflare для блока прямых заходов на сайт?
Здравствуйте! Отсутствие значительных изменений в вашей статистике - означает, что новый алгоритм определения роботов на счетчике вызвал несильное расхождение с предыдущим алгоритмом фильтрации. Это нормальная ситуация.
Добрый день! Значит ли это, что Яндекс подтверждает свое бессилие в борьбе с нагулами ботов и накрутки ПФ?
Ничего не отсеивает. Процентов на 10% меньше ботов стало, но это может быть просто ежедневная волатильность.
Пшик вся эта новость. Не понятно, для кого она.
Ушли в поиск. У меня бото трафик по дорогим ключам вырос в десятки раз.
Уже две недели слежу за позициями по таким переходам - пока без изменений, будут смотреть дальше.
можно было и просто забанить, эффект был бы тот же. чтоб в этом убедиться - включи капчу для всего трафа и увидишь как он остановится на 99%, потому что никто не будет гадать эту капчу.
Включал на траф с поиска. Разгадывали 72 %.
Сейчас на телефоны с ПС у меня стоит allow.
По просьбам выкладываю свои настройки в Клаудфлейр:
Капча для соц сетей:
Капча для переходов с Андроида и Айфонов (рефер можно не подключать):
Можно уже почистить тему от Антибота? Тут вообще есть модераторы, или это флуд-тема?
По поводу нового сервиса Супер Бот Файт у Клаудфлейр такие тесты:
1. Автоматический трафик. Фильтрует почти все парсеры, включая хорошие. Требуется ставить фильтр в Firewall - Good Bots, тогда он будет пропускать Гугл бота и Яндекс бота.
2. Почти-автоматизированный трафик. Срезал почти половину трафика на сайте, большая часть - заходы по Http1.0-1.1. При этом разгадывание капч - 25%, что говорит о кривом алгоритме. Не советую.
Сейчас самое действенное - поставил Капчу Клаудфлейр на Соц Сети, эту идею мне подсказал код от Alaev, спасибо ему. Процент разгадывания капчи - 0,5.
Также дополнительно - капча на Прямые заходы на Антроид и Айфонах. Процент разгадывания капчи - 0,8.
Из прямых заходов так режется 80% ботов. Живых почти не задевает (10-20 человек на уровне погрешности).
Не придумал что делать с прямыми заходами с компа. Конечно, можно отдавать 403, можно капчу. Но если не тот толокер увидит, будет гораздо хуже. Пока не тороплюсь.
Самая большая беда - переходы в турбо страницах. Отключить их нельзя, Яндекс наказывает сильно, вот и думаешь, что хуже, падение ПФ в турбо, или их отключение.
А кто-нибудь уже тестил новый функционал Super Bot Fight Mode от Cloudflare?
Раньше у них был просто Bot Fight Mode, от него особо толку не было. Сейчас для платных тарифов появилась приписка Super. Как заявляет сервис, система сама самообучается на плохих и хороших ботах. Поставил себе - нашел очень много ботов, включая парсеры и хрен-пойми-кого. Показывает им свою капчу.
Вместе с фильтром на прямые заходы и переходы - режет у меня очень много ботов, которых раньше я не видел. Сейчас примерно 20% от всего трафика на сайт, и до 95% от прямого трафика (7к в день).
У кого какие впечатления?
PS Антибот не предлагать, спасибо, уже потестил. Клара интеллектуальней определяет хорошие боты, плохие боты.