SeVlad

SeVlad
Рейтинг
1609
Регистрация
03.11.2008
awasome:
вернее, их вообще не было, а сейчас на всех сайтах.

Ксена что говорит?

FLASH92:
Ищу современный скрипт недвижимости, с хорошим функционалом.

/ru/forum/682144

burunduk:
платный и бесплатный варианты

За бесплатно на демку посмотреть? ;)

svcitius:
Видать здесь просто складывается русский менталитет и не понимание сути.

Почитай там про не русский менталитет и понимание сути

MoMM:
вопрос цены защиты

В том-то и дело, что это никакая не защита, а проблемы юзерам.

Как защита яваскритом от выделения-копирования, как блокирование ПКМ, как накладывание прозрачной картинки, как ещё 150 способов псевдозащит.

Я, например, достаточно часто топчу среднюю кнопку мыша, открывая по 5-10-15.. вкладок. И при проблемах получения контента я далеко не всегда ЗАХОЧУ найти как связаться с сайтовладельцем и написать ему багрепорт (к вопросу о "не жалуются" ).

Кстати, когда я был на винде именно ДМ меня и выручал в таких редких случаях (когда контент всё-таки хотелось получить-почитать, а хостинг сайта или сайтодержатель понаставил костылей юзераем) - качая себе потихоньку по списку урлов

Shant-kov:
Для пс. Интересует отношение пс

1.Идешь в ПС.

2.Смотришь СЕРП.

3.Смотришь код ТОПовых сайтов.

4.Не делаешь людям мозг в техразделе.

m0ntag:
потребности которых можно озвучить как "клевые на сайте картинки, вот я щас телепортом себе все скачаю, гы".

Конкретный сайт - конкретные настройки (на 2 сек дела).. Это быстрее, чем гуглить что-то новое.

Впрочем, вижу бесполезно очевидное показывать. Боритесь дальше с мельницами..

ivan-lev:
общем понял.. можно и у Вас все картинки выкачать

:)

ЗЫ. А ещё люди за NATом и корп. проксями юзают инет..

awasome:
но почему робот начал шастать по коротких урлам, не ответили

Потому что они прописаны в коде страниц, как shortlink :)

+мб какой кривой плаг может наплевать на настройки ЧПУ. Ксена в помощь.

igor3333:
в роботсе закрыть например можно
Disallow: /?p=

Нафик не надо. Курим 301 редирект.

MoMM:
И что? Хомяк на 5 страниц скачают за сутки, а уже 1000 страниц будут парсить неделю-две... а если еще на каждой стоит "яма для волков" в виде сслыки, невидимой обычным пользователям, то улетать в бан будут с каждой страницы...

Да всё быстро происходит:

SeVlad:
Вкратце: тянется параллельно через пачку проксей с разными ЮА.

А искать прокси - это для школоты ну или "разовых акций". Профи знают где покупать или даже имеют свои автоискалки-чекеры. Так что прокси - это вооще не проблема.

m0ntag:
Ты что, пьный?)) С каких это пор хиты это уники?

Да, после вчерашнего голова всё ещё побаливает :)

Действительно, что-то я с прямым углом хостом перепутал 🤪

Хиты - это кол-во посещённых страниц на сайте, не важно сколькими юзерами.

m0ntag:
Я говорю о живом юзере, то что забанится какой-то левый робот, которого натравил на меня любопытствующий вебмастер,

Ты ппц.. не догоняешь. Тот робот - и есть "живой юзер". Тоже самое тебе покажет файрбаг в браузере.

m0ntag:
Остальные 90% просто переключатся на другую "жертву".

Ты реально считаешь, что проще найти другую жертву, настроить парсер под неё и тд, нежели просто тыкнуть 2 кнопки в том же ДМ?

И на бис: те, кто занимаются парсингом - они найдут способ скачать твой ГС. В большинстве случае даже и искать не будут - всё и так настроено. Вкратце: тянется параллельно через пачку проксей с разными ЮА. Не андестнт?

m0ntag:
ты видел в природе живого юзера способного сделать теже 20 хитов за 10 сек? Я не видел.

Ты когда употребляешь термины - ты хотя бы значения узнавай.

хиты=уники.

Ок, будем считать не хиты, а запросы.

20 за 10 говоришь? А 103 за 4 сек - как тебе? И ты думаешь это предел? :)

И опять же - качалку можно настроить на работу в один поток и даже паузы задать и даже перебор проксей. А браузеры, что бы знал, могут работать в несколько. Это хорошо видно в Опере, где это всё настраивается.

MoMM:
у меня на многих сайтах годами стоят приблуды, отправляющие в сад на 2 суток любого, кто сделает больше 60 запросов к контенту в минуту

Палю тему - парсеры могут работать через прокси. Даже динамически их меняя. ;) А юзеры.. Выше см ссылочку.

MoMM:
ни один не пожаловался...

А у них есть такая возможность? А желание? ;)

Всего: 28518