Gray & Metaquotes
PendalF89, к сожалению в nginx можно только dos-еров заблокировать, т.е. с помощью директивы limit_req, которая не даст настроить например, 100 запросов в час. 1 в секунду только :) Поэтому от таких ребят лучше ставить специализированное решение по блокировке ботов. BotGuard, например, позволяет ограничить число запросов в час.
nikki7000, После перехода на сайт бот упадёт после этого, "программа выполнила недопустимую операцию и будет закрыта" или зависнет и никуда уже не пойдет.
nikki7000, ставьте защиту от ботов, но бота можно не просто банить, а нарушать его работу с помощью тривиальной зип-бомбы или медленного ответа сервера.
Нормально с файлом всё - кракозябры - просто русские комментарии в кодировке 1251
Это бот, часто попадается. IP можно тут посмотреть: https://botguard.net/ru/tools
Bill_geits, надо нормальную защиту от ботов ставить, если они беспокоят. В настройках счетчика если включить фильтрацию ботов то это как страус голову в песок прячет, вы ботов в отчете не увидите, но они ходить и делать свои мутные дела не перестанут от этого.
foxi, так rapida теперь и есть киви. воруют только в путь. но присылают email после кражи.
Ну как же нету, есть: https://mcs.mail.ru/infra/
Да, это их поисковый бот: https://help.mail.ru/webmaster/indexing/robots/go_robot
Видимо, где-то на них есть ссылка.
Т.е. он посылает запросы методом POST а не GET?
Лучше создайте этот файл по рекомендациям гугла и пусть лежит, а то потом рано или поздно от гугла появится плашечка в Adsense "вы рискуете потерять доходы":
https://support.google.com/adsense/answer/7532444?hl=ru
