CloudFlare блокирует Yandex Bot - N/a

Sergh545
На сайте с 24.02.2011
Offline
103
193

До недавнего времени все работало нормально, хотя данная проблема и проявлялась, но редко (пару раз в год, на пару дней).

1. Все новые просканированные страницы в Вебмастере имеют статус "N / a".
2. В инструментах Вебмастера "Проверка ответа сервера" при проверке всегда статус "Не удалось скачать содержимое страницы".

В CloudFlare прописываю ASN Яндекса, но толку ноль.  В логах сервера ничего.
https://yadi.sk/i/RSgt3GpADPz70w
https://yadi.sk/i/ML5LF5UlOYZMRg
Если прописываю ASN Яндекса не Allow, а Block, то  инструмент Вебмастера "Проверка ответа сервера" выдает 403 код ответа. В логах сервера присутсвует 403 ошибка.

При отключении DNS CloudFlare проблем с Яндексом нет.

Кто сталкивался с подобным?

png 2020-12-25_17-02-09.png
Push-уведомления - платят больше всех. Честная партнерка, без шейва! (https://clickstar.me/?ref=de8910a4)
Mik Foxi
На сайте с 02.03.2011
Offline
905
#1
ipv6 включен? не встречался с таким. всегда нормально сайт доступен с настройками клауда по умолчанию, только с отключенным ipv6.
Антибот защита сайта от накрутки поведенческих, от спама, взлома и поиска xss, от хит и клик ботов, от парсинга и кражи контента, снижение нагрузки на сервер - https://antibot.cloud/ | Защита яндекс метрики от ботов: https://wmsn.biz/m.php?p=144236 (инструкция по защите от порчи поведенческих факторов).
-S
На сайте с 10.12.2006
Offline
Модератор1213
#2
Другие правила firewall есть?
htexture
На сайте с 29.05.2017
Offline
93
#3
Mik Foxi #:
ipv6 включен? не встречался с таким. всегда нормально сайт доступен с настройками клауда по умолчанию, только с отключенным ipv6.
Где проверить что ipv6 включен? Подскажите пожалуйста
Nopassw0rd
На сайте с 01.02.2019
Offline
115
#4
Посмотрите на вкладке Overview после проверки ответа сервера (в вебмастере нажмите на кнопку проверить ответ сервера). Какая выйдет блокировка, изучите по каким критериям блокируется яндексовский запрос.
Delysid
На сайте с 27.05.2019
Offline
75
#5
Sergh545 :
В CloudFlare прописываю ASN Яндекса, но толку ноль.

Вы не разобрались в настройках. Не нужно никакие ASN прописывать.. Клоудфларе и так знает все IP яндекса.

Есть опция: Known Bots

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий