У вас есть правило пропускающее известных ботов?
Да, с этого я и начал, что правило есть, совсем как у Зимина, а ads.txt у тех двух сайтов, что с cloudflare google не видит.
Вот и интересно, может у кого-то еще есть такое.
У меня противоположная ситуация. В аккаунте adsence оповещение, что нет файла ads.txt (на самом деле он есть).
Получается, что бот adsence его не может найти. Похоже, что его не пускает cloudflare.
Похоже CloudFlare показывает капчу боту google, который проверяет ads.txt для adsence.
Разрешение для хороших ботов в самом верху. Никто не сталкивался?
Подскажите пожалуйста как снизить эту нагрузку. Хостер заблокировал все сайты.
Хотя нагузка идет только на один из 10. Ни один не открывает. Спасибо большое.
Должен сделать апдейт к предыдущему сообщению. Не сразу все в голове устаканивается.
У меня еще стоит счетчик Li, так он показывает много одинаковых поисковых фраз, причем порой странноватых. В метрике их вообще нет. Может быть метрика для тех, кого считает роботами, как-то по-другому ведет учет поисковых запросов и, наверно, других параметров.
То же самое заметил. У меня бывает событийное увеличение трафика, и роботов тоже в эти дни больше. Думал, фермы на автомате отслеживают увеличение видимости и шлют больше ботов. Но сейчас посмотрел, поисковые фразы все разные.
А как считаете, 304 Not Modified будет в данном аспекте равноценной заменой?