Не работает запрет ботов-сканов через .htaccess

Последнею неделю тоже борюсь с HTTP флудом ответа так и не нашел .htaccess не помогает, какой у Вас хостинг? Смотрю проблема такая у многих появилась.

Хостинг timeweb. Они начали присылать сообщения с просьбой разобраться с нагрузкой, иначе отключат сайты. Последние недели 2-3 большая нагрузка на сервер

Попробуйте этот скрипт. Там гибкие настройки, можно указать исключения и допустимое количество визитов за определённый интервал времени. Плюс блокируйте админку для всех IP кроме ваших. Для этого в папку administrator вставьте htaccess

<Files index.php>

order deny,allow

deny from all

allow from ваш IP или маска

</files>

Попроще методов блокировки поисковых ботов нет?

Если WP, то плагинами. Будут тоже самое делать, но есть оболочка

Ильгиз Ш, в логах будут записи всегда!

Вы посмотрите какой ответ отдает севрер в тех же логах.

Если 403, то всё ок, если 200 значит действительно не работает.

Данное правило Вы размещаете после:

RewriteEngine On

?

Вообще HTTP_USER_AGENT не надежный вариант, так как могут боты маскироваться под известными, тут лучше банить их по айпи.

• Вычисляете в логах айпи бота, заходите сюда
• Указываете айпи адрес, ставите флаг напротив Search resource objects in all available databases и нажимаете поиск.

В информации находите полный блок айпи адресов, например 127.0.0.0/20

Далее в .htaccess указываете следующее:

Order Allow,Deny

Allow from all

Deny from 127.0.0.0/20

Deny from 192.168.0.0/22

Естественно IP 127.0.0.0 и 192.168.0.0, и соответственно их маски /20 и /22 заменяете на результат вывода информации по ссылке выше.

---------- Добавлено 13.10.2017 в 16:54 ----------

Вся подсеть в выводе информации указана после директивы route.

Иногда бывает, что она отсутствует, тогда можно вычислить из директивы inetnum на этом сайте

Вводите начальный айпи и конечный которые указаны в inetnum, и получаете результат, к которому нужно дописать Deny from и проблел.

Пополняете список.

Очень не рекомендую добавлять просто по IP адресу и всё, потому как обработка списка запрещенных адресов тоже дает нагрузку, и если это список разрастется до несколько сотен, а может и тысячу айпи адресов, Вы можете получить обратный эффект, в том плане, что сервер получит больше нагрузки в итоге.

А сервер-то хоть под Апачем работает?

Не тоже самое. Ну те результат может и будет тоже, но цена за него будет намного выше. Перекладывать на php и тем более на движок задачи сервера - кривой путь и дорогое решение.

Смотря какие боты и какую нагрузку. В 90% случаев боты указывают, на то, что нужно оптимизировать сайт/сервер и с ними не нужно "бороться".

Например iThemes Security пишет правила в .htaccess, как говорят, последний можно сохранить, а сам плагин удалить. Если не ошибусь Wordfence Security тоже. Решение найти специалиста для оптимизации тоже не дешевое.

Никогда не видел, чтобы так кто-то делал.

Но в там случае можно говорить, что надо поставить блокнот и логи :).

Ида. Пока он будет что-то собирать и "писать" - это будут расходы. Быстрее и дешевле это сделать анализом логов и блокнотом.

Ну и помидоры не бесплатны. Но можно выращивать самому.