Защита от парсеров

возьмите решения защищающие от ddos и сильнее закрутите там гайки

Да, существуют

Называются системный администратор :)

закрутят так, что яша и гугл лесом пойдут =)

limit_req, limit_conn и прочие друзья

1) Выставить лимиты в nginx на доступ к динамическим файлам PHP не более 1-2 запросов в секунду с одного IP(limit_req)

2) Можно поставить парсер логов Access_log и банить тех кто пытается искать дырки на сервере по запросам в URL

passwd

mysql

/etc/

../../../..

admin

select

union

и тому подобное, разумеется на вашем сайте не должно быть путей включающих эти строки.

3) поставить антиддос защиту на сервер, которая при выставлении определенных параметров будет защищать от парсеров.

Боты яши и гугла чаще всего НЕ работают быстро (5-10 запросов в минуту), поэтому они не банятся.

К тому же подсети поисковиков заносятся в белый список и вообще не банятся.

Есть отлаженное решение для защиты от ддос и парсеров.

Обращайтесь. Аська 1699три8679

парсер может и медленно работать =) ему быстрота не сильно важна, главное контент!

Из вопроса ТС можно предположить что ему нужно блокировать только парсеры сильно нагружающие сервер. Медленные парсеры ему не мешают.

желательно находить такие "узкие" места и их оптимизировать

т.к. лочить запросы - это дорога в никуда