Вылетело 50% страниц из за ошибки Cloudflare

T
На сайте с 26.04.2018
Offline
60
734

Здравствуйте!

Есть новый информационный сайт на 50 страниц. Но 15 февраля вылетело почти половина страниц из Индекса (вылетело 28 страниц): http://joxi.net/RmzeqgoTYVE4vr

При этом, Яндекс выдал фатальную ошибку на главной: http://joxi.net/MAjG1MBtjYplkr

Я на сайте никакой ошибки не ловил. Потому написал в службу поддержки Яндекс. Ответ службы поддержки: http://joxi.ru/82QDY7LFw3DYRm

То есть сайт временами выдавал 522 и 523 ошибки. У меня на сайте подключен Cloudflare (CDN). Думаю проблема была с ней.

В данный момент я отключил Cloudflare. И проблема устранилась, а все вылетевшие страницы вернулись обратно в индекс.

Коллеги, хочу с вами обсудить этот момент. Почему возникла такая ошибка? Дело на стороне Cloudflare? Или проблемы с хостингом? В сети информации не много.

Кто нибудь еще сталкивался с 522 и 523 ошибками? Все таки, много кто юзает Cloudflare, как CDN для своих сайтов.

Оптимизайка
На сайте с 11.03.2012
Offline
396
#1
truebusiness:
Почему возникла такая ошибка? Дело на стороне Cloudflare?

Скорее всего, ошибка возникла потому, что вы не добавили яндекс в список надежных ботов и cloudflare его заблокировал.

/ru/forum/958512

---------- Добавлено 22.03.2019 в 00:16 ----------

truebusiness:
Кто нибудь еще сталкивался с 522 и 523 ошибками

Такое бывает при недоступности сайта, например на этом форуме почти каждую ночь (когда бэкапятся?)

⭐ BotGuard (https://botguard.net) ⭐ — защита вашего сайта от вредоносных ботов, воровства контента, клонирования, спама и хакерских атак!
T
На сайте с 26.04.2018
Offline
60
#2
Оптимизайка:
Скорее всего, ошибка возникла потому, что вы не добавили яндекс в список надежных ботов и cloudflare его заблокировал.
/ru/forum/958512

---------- Добавлено 22.03.2019 в 00:16 ----------


Такое бывает при недоступности сайта, например на этом форуме почти каждую ночь (когда бэкапятся?)

Спасибо огромное за ответ!

Как я понял, нужно добавить в белый список код: AS13238, верно?

У меня в целом Firewall был отключен на Cloudflare. В этом случае тоже нужно бот Яндекса добавлять в white list?

Оптимизайка
На сайте с 11.03.2012
Offline
396
#3
truebusiness:
Как я понял, нужно добавить в белый список код: AS13238, верно?

Да, необходимо его добавить.

У меня в целом Firewall был отключен на Cloudflare

Насколько я помню, он полностью не отключается:

adjusting the Security Level to Essentially Off in your Cloudflare dashboard. This setting will only challenge the most threatening visitors to your site based on their threat score.
T
На сайте с 26.04.2018
Offline
60
#4
Оптимизайка:


Насколько я помню, он полностью не отключается:

Спасибо большое за ответы! Почему тогда файрвол Cloudflare только частично блокировал бот Яндекса? Вот логи Яндекс: http://joxi.net/82QDY7LFw3DYRm

То есть главная страница отдавала 200 ОК, и иногда выдавала 522, 523 ошибки. То есть боты Яндекса лишь частично блокировались или как?

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий