Короче сегдня попыхтел, и сделал давно забытую AMP.
Подключил к главной, проверил, все без ошибок.
Гугл на скорость ворчал.
Это наверное так и есть. Уже давно поднимаю этот вопрос.
Боты - это дидос атаки?
Объявление на timeweb
Удалите плиз, по ошибке продублировал
Повторюсь:
Забаненный бот получает ответ 403 и скоро перестанет приходить.
Незабаненный получает ответ 200, даже если его метрика игнорирует. Напрягает сервер.
Независимо от наличия и настройки метрики. Сервер выдает контент только хорошим посетителям и ботам, а для плохих на двери надпись - проходите мимо.
Если боты начнут ломиться тысячами - это наверное уже будет дидос атакой.
Не проще метрику прятать от прямых заходов, чем банить ботов?
Трафик 28к уников - роботность 0,42%, меньше и не надо.
Битерика - блок
Racktech - блок
И остается немного маленьких сетей, которые можно банить вручную по настроению.
Кучка заблоченых ботов пытаются зайти и получают ответ 403
Racktech тоже можно сразу блокировать всю полностью.
https://asn.ipinfo.app/api/text/htaccess/AS204916
Все прекрасно блокируется, раз в две недели выгружаю логи за 2-3 дня, свожу в сводную эксель, анализирую и баню на уровне сервера, занимает времени час максимум.
Поддерживаю, тоже напрямую блокирую, правда не заморачиваясь сильно анализами.
Интересно, можно ли считать визиты ботов дидос атаками? На хостинге timeweb висит объявление, что серверы подвергаются массированным дидос атакам. У меня логи наполняются с задержкой в 5 часов, а должны наверное срабатывать мгновенно.
slams #:
Мое мнение - у гугла что-то наглухо сломалось. Либо их движок, либо семантический анализатор. Они не могут корректно отрендерить и интерпретировать страницу и соответственно это все вылазит некорректно в выдачу.
У меня на одном сайте в кэше Гугла футер сверху показывается.
Может завтра туда главный h1 поставлю, посмотрю на реакцию.
