Понимает ли робот Яндекса HTTP 429 Too many requests?

12
RA
На сайте с 30.03.2009
Offline
119
#11
Lastwarrior #:

Это работает, если траффик маленький, на больших и нагруженных проектах такое не прокатит и будет выливаться в кругленькую сумму, так как помимо оплаты дополнительных ресурсов нужно будет придумывать систему распределения нагрузки по серверам и т.п. Зачем?

У нас кластер из 3-х серверов, 2 эшелона кеширования, но Яндекс оказался сильнее )))
D
На сайте с 02.12.2024
Offline
1
#12
Rosso Azzurro :

Здравствуйте!

Не было ли у кого в практике случая, когда робот Яндекса валил сайт запросами? У нас такое с нового года, наваливает с кучи адресов, нагрузка растет в сотни раз. Регулировка частоты обхода через админку заметно на проблему не влияет. С abuse@yandex пишут что да, это наши роботы, разбираемся. Пока решение только одно, 503 на запросы с сетей яндекс интерпрайз. Может кто знает, понимает ли Яндекс HTTP 429? Экспериментально проверять проблематично.


Понимает (проверено опытом), ещё и в справке у них написано что понимает.

M3
На сайте с 09.02.2022
Offline
112
#13
Rosso Azzurro #:
У нас кластер из 3-х серверов, 2 эшелона кеширования, но Яндекс оказался сильнее )))

ого, какой у вас криворукий админ всем этим заведует)

12

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий