Запрет массового скачивания картинок с сайта менеджерами закачек, как?

гугл тоже банит по IP и каптчу дает - и его прекрасно парсят :)

ПС - если поставишь скрипт, то тебя легко будет положить, примерно с сотня ботов, каждый по пару сотен в секунду запросов - и мускул лужит :)

Здесь нет темы - именно так и работают брутфорсы паролей. И что? Хомяк на 5 страниц скачают за сутки, а уже 1000 страниц будут парсить неделю-две... а если еще на каждой стоит "яма для волков" в виде сслыки, невидимой обычным пользователям, то улетать в бан будут с каждой страницы...

Не вопрос: если нужно спарсить один конкретный сайт, один раз, то будут и ждать и искать новые прокси и т.д. и т.п. А если это просто "прочесывание местности", то плюнут и перейдут туда, где гемора меньше...

Да всё быстро происходит:

А искать прокси - это для школоты ну или "разовых акций". Профи знают где покупать или даже имеют свои автоискалки-чекеры. Так что прокси - это вооще не проблема.

Эти приблуды запросы к картинкам считают (к вопросу из первого поста)? Или всё же картинки nginx-ом отдаются без разбору, а под контентом имеется ввиду "контентная" страница, генерируемая скриптом?

Это ты не догоняешь, причем здесь запросы к скриптам и картинкам при генерации страницы, речь идет о хитах . Мокрое с горячим путаешь

На бис? У тебя бенефис чтоль?)

В первых у меня не гс.

Во вторых - только в твоих грезах сайты сканирует армия прекрасно подготовленных вм, оснащенных парсерами и умеющими с полпинка настраивать их под любые задачи. Основная часть это нубы, потребности которых можно озвучить как "клевые на сайте картинки, вот я щас телепортом себе все скачаю, гы".

Неа. Давай еще раз выйди на бис))

Ой, какая тут полсотня ботов.. я чтоль защиту от ддос изобретаю? У меня коммерческий мегапортал? Речь о "приблуде", которая даст какую-никакую защиту "от дурака"

у меня сделано так, что считается отдельным запросом каждая строчка лога сервера

А всё же ответа на свой вопрос я не получил. Лог какого сервера анализируется? Apache? Nginx? [или всё один сервер обрабатывает] Nginx для статики часто настраивают без записи в логи. (Если будет линк на сайт с приблудой - сам посмотрю)

Попробую на примере пояснить.

Если в дизайне, например 20 картинок (логотип, уголки-кнопочки-рюшечки всякие, изображение товара.. штук 10 на страничке - более чем реально), то 3 запроса в минуту (тоже вполне реально - главная, страница категории, страница товара) с отключенным кэшированием картинок (по условию выше перевалили за ограничение 60 запросов в минуту) попадают под "бан". Или просмотр 5 страниц в минуту с кэшированием с 10-ю разными товарами каждая (обычная постраничная разбивка категории) - аналогично, в бан.

Действительно ли "приблуда" работает именно так?

ссылки не будет :)

кто там пишет в логи error_log и access_log? вот на него приблуда и навешена... 60 - это было "среднепотолочное" - у разных сайтов по разному настройки: и числа разные и методы разные - у некоторых сразу в бан, у некоторых начинают отдавать "не более 10 строчек в минуту"... короче: пользователи не жалуются :)

:D дык.. зависит от настроек, кто и куда логи пишет. /всё та же ситуация - если картинки отдаются nginx-ом, то до apache (и соответственно access-лога апачевского) запрос просто не доходит/ В общем понял.. можно и у Вас все картинки выкачать

Конкретный сайт - конкретные настройки (на 2 сек дела).. Это быстрее, чем гуглить что-то новое.

Впрочем, вижу бесполезно очевидное показывать. Боритесь дальше с мельницами..

:)

ЗЫ. А ещё люди за NATом и корп. проксями юзают инет..