Много из-за чего так может быть. Начать стоит с очерёдности правил.
Например, пускает всех через поиск, а блокировка по as стоит ниже.
Нет, правило с блокировками стоит по очереди сразу после "белого списка".
Вопрос в том, какой реферер проверяется при таком значении.
Коллеги!
Подскажите один момент.
Я блокирую какие то AS сети в CF. Делаю правило AS num eqals сетка and Refferer eqals пустое значение.
Получается визиты с пустым реферером, это те у которых реферер равен значению "-" и когда реферер равен любой странице домена?
Просто какие то переходы с этих сетей блокируются, а какие то проверка (правило) пропускает.
Вы в логах WAF посмотрите, идут ли ipv6. У меня на серве не было ip6 и АААА в CF, но в WAF все ровно перли адреса вида ipv6. Я отключил полностью в CF ip6.
Получается, если в CF нет AAAA записей, то ничего делать не нужно?
Или нужно еще дополнительно у хостера попросить отключить поддержку IPV6 на сайте?
Смысл тогда отключать ip6 если по ip4 будут боты ходить? Оффайте его полностью. AAAA записи недостатоно убрать
Получается если на сайте отключен IPV6, а юзер заходит туда с IPV6, то если юзер не бот, а с нормального провайдера заходит, то IPV6 автоматом поменяется на IPV4?
Точно, сломался CF. Никакие исключения не работают, чтобы Google-InspectionTool/1.0 не блокировался. В яндекс ответ от сервера 200 ОК, а чтобы в индекс новую страницу загнать в Google, выдает 403
П.С. (ред) В общем если удалить правило "пустой рефере", то норм боты проходят 200ок. Хотя тсранно работало до этого все. В чем причина то ? знает кто?))
Прикрыть Гугл? По ip или по названию доменов?
А что делать с миллионами сайтов, в которые встроена аналитика Гугл, которые тянут шрифты Гугл?
Тот же Яндекс тащит в выдачу видео с youtube, а эти видосики на сайтах, в вк и ок.
Гугл никто перекрывать не будет. 276%.
Гугл - ценнейший инструмент аналитики в действующих условиях.
Ботной параше уже отдали приказ передать важный для них трафик конкуренту.
Надо просто уметь анализировать происходящее и смотреть чуть глубже
https://searchengines.guru/ru/forum/1074235
Если останется не понятно, то могу объяснить )))
Офис в Москве Гугл открыт. Если начнут выгонять Гугл, Фейсбук и прочих, они сами будут умолять, чтобы их оставили.
Многие просто не понимают, что интернет создавался военными, в него вбухали миллиарды долларов инвестиций, но не для того, чтобы был Яндекс , а в нем крутили ботов. Это лишь видимая часть и для обывателя.
Несколько известных соц сетей прикрыли и отток аудитории у них значительный.
Почему по тому же принципу не могут прикрыть гугл?
Думаете пользователи будут ставить себе VPN приложения, чтобы найти что то через поиск? Не проще ничего не делая искать это в Яндексе?
В Китае например гугла официально нет, кто то конечно его использует через VPN, но это меньшинство.
Могут например пойти еще дальше и придумать какой нибудь закон, по которому нельзя посещать запрещенные сайты и пользоваться запрещенными сервисами.
Много будет после этого желающих пользоваться гуглом?
Я о том, что доля влияния неавторизированных поведенческих сигналов скорее всего будет уменьшаться.
