Яндекс ддосит сайт. Что делать?

1 23
Антоний Казанский
На сайте с 12.04.2007
Offline
701
#21
Paradine #:
Поддержка пообещала ограничить активность бота (200/минута), но ничего не меняется.

В данном случае речь идёт именно о боте Директа. Никакими Вебмастерами и тем более заголовками сервера он не регулируются.

Решить в пользовательском режиме эту проблему не получится, только Яндекс может увидев (и в должной степени осознав), повлиять на ситуацию.

Ведите плотную переписку с тех. поддержкой, проверяйте фактически насколько они смогли ограничить деятельность своего бота, фиксируйте и высылайте им результат.

Помните, человеческий фактор есть везде (в том числе и в цепочке взаимодействия с тех. поддержкой Яндекса).

Уже говорил и повторюсь - на форуме есть два сотрудника Яндекса, которые реагируют на пользовательские задачи и включаются в их решение. 

Напишите Роману (это один из них), он активно включается в проблемы вебмастеров и может помочь с коммуникацией.

Также есть ещё Тимур Рябинин.

В вашем случае вам поможет лишь конструктивный диалог и терпение.

Роман Кузьминский - Профиль вебмастера - Форум об интернет-маркетинге
Роман Кузьминский - Профиль вебмастера - Форум об интернет-маркетинге
  • 2024.02.12
  • searchengines.guru
Роман Кузьминский - Профиль вебмастера
√ SEO продвижение ► https://akazansky.ru - экспертный аудит сайтов ( https://akazansky.ru/audit-sajtov ), внедрение эффективных решений цифрового маркетинга.
htexture
На сайте с 29.05.2017
Offline
212
#22
Сергей #:

Просто карта, без xml разметки снизит не на много нагрузку с сервера. Поисковику важно поддерживать актуальность базы.

Карта xml с датами обновления всех страниц сайта, поможет снять нагрузку с сервера, при условии что поисковик будет считать достаточной эту информацию.

Какими сервисами проверить наличие заголовков?
Антоний Казанский
На сайте с 12.04.2007
Offline
701
#23
htexture #:
Какими сервисами проверить наличие заголовков?

https://last-modified.com/

https://bertal.ru/

Впрочем, можно и без сервисов средствами Chrome браузера,


LEOnidUKG
На сайте с 25.11.2006
Offline
1752
#24
У сайта ~2000 поддоменов

ну вот и ответ.

1 заход любого бота на каждый поддомено = 2000 запросов.

Вам нужен мощный и настроенный сервер.

Так же нет никаких входных данных, что за CMS и что там вообще происходит.

✅ Мой Телеграм канал по SEO, оптимизации сайтов и серверов: https://t.me/leonidukgLIVE ✅ Качественное и рабочее размещение SEO статей СНГ и Бурж: https://getmanylinks.ru/ ✅ Настройка и оптимизация серверов https://getmanyspeed.ru/
Антоний Казанский
На сайте с 12.04.2007
Offline
701
#25
LEOnidUKG #:

ну вот и ответ.

1 заход любого бота на каждый поддомено = 2000 запросов.

Замечание резонное, но я очень сомневаюсь, что одновременно стартуют все РК для всех 2K поддоменов, поэтому здесь я вижу принципиально важным уточнить - в каком объёме и в какой конфигурации запускаются РК в Директе.

Отсюда по назначению и нужно оценивать результирующую нагрузку.

LEOnidUKG
На сайте с 25.11.2006
Offline
1752
#26
Антоний Казанский #:

Замечание резонное, но я очень сомневаюсь, что одновременно стартуют все РК для всех 2K поддоменов, поэтому здесь я вижу принципиально важным уточнить - в каком объёме и в какой конфигурации запускаются РК в Директе.

Отсюда по назначению и нужно оценивать результирующую нагрузку.

Стартует может быть и не все, а вот боты могут ходить и проверять по своим правилам. Так же есть момент, что приходят разом не только эти боты, но ну и другие.

В любом случаи 2000 поддоменов = 2000 разных сайтов. Если это виртуальный хостинг или дохлый VDS, а на нём интернет магазин с 50 000 товаров... Ну не знаю...

Антоний Казанский
На сайте с 12.04.2007
Offline
701
#27
LEOnidUKG #:
Стартует может быть и не все, а вот боты могут ходить и проверять по своим правилам.

Я к тому, что вряд ли фактически есть как минимум 2 тыс. рекламных кампаний с указанием на разные поддомены.

А если бы они были, то в общем они бы сами понимали объём рабочей нагрузки.


LEOnidUKG #:
В любом случаи 2000 поддоменов = 2000 разных сайтов. Если это виртуальный хостинг или дохлый VDS, а на нём интернет магазин с 50 000 товаров... Ну не знаю...

Здесь согласен, такой объём рабочих источников должен быть согласован по рабочей нагрузке и по серверным возможностям, поэтому в данном случае рабочая картина неполная и требует уточнений.

Vladimir
На сайте с 07.06.2004
Online
562
#28
Paradine #:

У сайта ~2000 поддоменов. Бот обращается только к главной странице, не понимаю зачем нужно делать 30 000 обращений в час.

При настройке Last-modified , для правильного ответа 304, вы одновременно должны будете настроить и ответ сервера expires
У Антоний в комментарии ссылка на проверку

На данный момент, у вас ответ expires, явно по умолчанию выдает сервер , какого нибудь 1981 года

Аэройога ( https://vk.com/aeroyogadom ) Йога в гамаках ( https://vk.com/aero_yoga ) Аэройога обучение ( https://aeroyoga.ru ) и просто фото ( https://weandworld.com )
skapunker
На сайте с 15.01.2014
Offline
217
#29

Метрика -> настройка -> уведомления -> мониторинг. Может отсюда проблема растет?

А во вторых 600 запросов в минуту это ничкемная нагрузка. Повод заняться оптимизацией, а не ныть что бот сайт проверяет.

Тем более если у яндекса действительно что то некорректно работает, то это найти и исправить не так то просто и быстро.

1 23

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий