ArmenDomain

Рейтинг
258
Регистрация
05.05.2007
Должность
Лингвист
Понимаю, что кругом у всех посещаемые сайты где минута простоя стоит бешеных денег и им нужна стабильность и защита от настоящего ддоса. А нам, простым вебмастерам, которым важны позиции в Гугле и каждый новый посетитель, приходится работать по старинке.  Достаточно знать основы работы сервера что бы обходится без прокладок, которые возможно сами и ддосят привлекая новых клиентов. Уже до чего дошло что некоторые хостинги вместо того что бы решать проблемы с нагрузкой сразу предлагают переходить на CF.

а Amazonbot где?

Блокируем всех:

Order Allow,Deny
Allow from all
Deny from env=search_bot

или выборочно:

SetEnvIfNoCase User-Agent "^Боткоторыйнадозакрыть" search_bot

самопис!  Просто и надежно.
ести трехзначный буквы-цифры выброси, такое запомнить невозможно. Короче новый домен и по теме нужен.
наверное самая трастовая зона была, очень жаль. Сам прецедент настораживает, и вообще показывает как хрупок интернет.
Роман Кузьминский #:
Назначения этих роботов можно найти здесь. За подробностями рекомендую обратиться в поддержку Вебмастера.
заблокировал Яндекс в robots, если продолжит сканировать напишу.
Роман Кузьминский #:

Здравствуйте. Уточните, пожалуйста, информацию о ботах, о которых идёт речь. Пришлите скриншот, отчёт на статистику, название ботов. Это поможет детально проанализировать ситуацию. Можно в лс. Посмотрю с командой и вернусь.


Например такие IP где вместо X любые цифры от 1-999 десятки тысяч в день: 5.255.231.X, 87.250.224.X

 - - [13/Nov/2023:14:21:13 +0300] "GET /name/84109 HTTP/1.0" 200 21396 "-" "Mozilla/5.0 (compatible; YaDirectFetcher/1.0; +http://yandex.com/bots)"
 - - [13/Nov/2023:14:22:28 +0300] "GET /name/10569 HTTP/1.0" 200 21805 "-" "Mozilla/5.0 (compatible; YandexBot/3.0; +http://yandex.com/bots)"
 - - [13/Nov/2023:14:24:44 +0300] "GET /name/78066 HTTP/1.0" 200 21257 "-" "Mozilla/5.0 (compatible; YandexBot/3.0; +http://yandex.com/bots)"
 - - [13/Nov/2023:14:26:11 +0300] "GET /name/13858 HTTP/1.0" 200 22139 "-" "Mozilla/5.0 (compatible; YandexBot/3.0;

на первом ничего бы не покупал, цен не видно, дизайн страшный, похож на статейник. Второй норм, но hd в названии как "смотреть фильмы в HD"
есть сайт некоммерция https://imya.com/ доля посетителей с Яндекса 6% или меньше 1000 чел. Доля из РФ меньше 50%. В поиске 90К страниц. Сайта почти не видно, пару запросов в топе типа "рейтинг имен", и такое очень давно, но вопрос не в этом. Ваши боты (IP Яндекса) ежедневно ддосят сайт , в среднем 10-30К в день. Доход РСЯ с посетителей Яндекса меньше стоимости сервера. Может есть рабочий способ уменьшить ЯндексДос? Или блокировать полностью yandexbots... 
что еще нельзя в домене:
*букву S  на конце (типа во множественном числе,  да и любое множественное число нехорошо)
* цифры
* плохие буквы (для рус. C, J, Q, W, X. Правильный транслит у меня на странице https://imya.com/russian_letters )
* длина не больше 8 букв, идеально 5-6
* зона com или страны в которой вы. Если новозона то только ключ.
* две повторяющиеся буквы
* два или более корня в домене
*домен должен отвечать на вопрос кто/что (существительное в единственном числе)

Если бы был конкурс на худший домен то Серч бы занял бы второе место, первое взял бы search-engines.guru 😀

Всего: 1887