читал про настройки фильтрации ботов для CF
все упорно рекомендуют фильтровать по протоколу например HTTP/1.1
бред!
по этому протоколу например на мои сайты поисковые роботы Яндекса и Гугла ходят.
думать надо, когда советуете!
конечно, смотрел.
но вы вручную настраиваете Skip для Я и Г.
откуда вы уверены, что вы ВСЕХ роботов Я и Г пропускаете? ну, откуда?????
знаете сколько роботов у я и г?
поисковый, я.вебмастер, я.метрика, РСЯ, Директ, для изображений, для мобильных и черт еще сколько
и вы серьезно считаете что у вас нет проблем с блокировкой всех-всех ботов Я и Г?????
я что вы скажете вот на этот комментарий участника форума..
В CF есть отдельный пункт, который пропускает всех поисковых ботов, в том числе Я и G.
там не разжевывают, я сопли жуют...
и вы правда уверены, что CF, который даже не переведен на русский язык, знает всех роботов поисковых Яндекса? смешно...
да и Гугла он вряд ли всех роботов знает...
печаль...
я проверил здесь...
https://webmaster.yandex.ru/site/https:********.ru:443/indexing/check-url/
яндекс не может пробиться корректно через защиту CF в режиме Under Attack Mode и тем более, если правилами файрвола CF выставлена защита JS Challenge
сайт яндексом в таком случае не индексируется..
вот так вот...
а я именно для того, чтобы из РСЯ не вышвырнули (как уже забанили 3 сайта),
и хочу уменьшить число ботов, которые накручивают показы и клики РСЯ. за что потом и банят площадки.
спецы, подскажите, пожалуйста...
в режиме защиты CF - > Under Attack Mode
индексирующие роботы яндекса, гугла, нормально добираются до сайта? они проходят эту проверку и получают контент сайта?
дело в том, что я смотрю лог Event в разделе CF Security, и судя по нему.. поисковые роботы не проходят через JS Challenge ((((((
я нашел в сети статьи.
странные они советы дают как блокировать запросы к сайту с пустым referer
ну. я поставил для таких запросов правило файрвола JS Challenge
и что?
это тоже, что и Under Attack Mode на весь сайт.
а если я поставлю капчу гугла, как роботы поисковых систем пройдут на сайт???
а они точно с пустыми referer заходят, например, по ссылкам из sitemaps
А ВП не причём, до него не доходит.
поспешил с вопросом. тупанул
нужно
Deny from 216.244.66.0/24
на одном сайте очень высокий процент прямых заходов
очень много с IP 23.22.35.162
знает кто что это за IP ?
