спасибо, попробую
Подскажите, что делать, если Яндекс.бот дидосит сайт несколько раз в минуту вот такими запросами:
130.193.50.27 - - [16/May/2016:07:58:27 +0300] "GET /?id=21%2Fpage%2F5%2Fpage%2F14%2Fpage%2F10%2Fpage%2F11%2Fpage%2F9%2Fpage%2F7%2Fpage%2F11%2Fpage%2F15%2Fpage%2F12%2Fpage%2F2%2Fpage%2F7%2Fpage%2F15%2Fpage%2F3%2Fpage%2F9%2Fpage%2F13%2Fpage%2F13%2Fpage%2F13%2Fpage%2F9%2Fpage%2F11%2Fpage%2F6%2Fpage%2F8%2Fpage%2F14%2Fpage%2F3%2Fpage%2F5%2Fpage%2F9%2Fpage%2F3%2Fpage%2F12%2Fpage%2F15%2Fpage%2F3%2Fpage%2F13%2Fpage%2F5%2Fpage%2F4%2Fpage%2F8%2Fpage%2F10%2Fpage%2F9%2Fpage%2F10%2Fpage%2F11%2Fpage%2F12%2Fpage%2F3%2Fpage%2F6%2Fpage%2F9%2Fpage%2F5/page/15 HTTP/1.1" 403 2021 "-" "Mozilla/5.0 (compatible; YandexBot/3.0; +http://yandex.com/bots)"
IP меняются, но все принадлежат Яндексу.
Ответ от саппорта яндекса: Чтобы робот не посещал такие страницы, лучше установить запрет в Вашем robots.txt, например, вида "Disallow: *page*page*", такие запросы прекратятся в течение суток.
Мой robots.txt
User-agent: Yandex Crawl-delay: 180 User-agent: * Disallow: *page*page*
Прошла неделя, бот продолжает долбить. Сейчас я его временно забанил через .htaccess
Что можно сделать, подскажите? и в чем причина такой странной активности?
а зачем теги запрещать?
у меня на одном сайте так же через "/search.php?q=Фамилия" оформлено несколько ссылок на персоналии. как считаете лучше снятЬ?
подскажите, а есть какой-то альтерантивный сервис наподобии блогуна, который принимает жж-блоги? и если есть, то какая там стоимость постового? спасибо за ответ.
