SilverMaster, ну, это у своих технарей лучше узнавать, кто за движок/апач отвечает.
Они тебе нагрузку создают на сервер, вот и отсеки всех, кто скачивает больше страницы в секунду, например. Точный интервал лучше по статистике определить, дабы не отсечь шутстрых, но всё-таки пользователей, а не ботов.
SilverMaster: Просто я поражаюсь как динамично и красиво меняеться их пул ипов.
Ботнет, палюбасу. Разные подсети, разные владельцы, разные регистраторы, разные роуты, разные маршруты. Но вот левые хуизы у американцев говорят обо многом.
В общем, их нужно по нагрузке отличать. Легче с ними часть копеек отрубить, чем потом с хостером разбираться (и таки да, ты ему скинь базу, нехай поразмыслят и в работу включатся, после НГ-то).
Лично я знаю около десятка контор. Называть не буду (они мои клиенты). Так нормально?
malls: Наверное где-то тут:
А, это... Переписку я вёл где-то с год назад, с Алёной Суворовой, если не ошибаюсь.
Практически дословно: "мы не приветствуем использование нашего xml-сервиса для задач, не связанных с поиском по сайту и похожих. Если Вы планируете делать множество запросов к Яндексу (речь шла об 1-10 млн. в сутки), то мы оставляем за собой право приостанавливать обработку таких запросов. Точную цифру сообщить не можем".
Хоть география и обширна, но ни одного АмерикоССкого IP
А, ну точно, все европейские. Значит, прикрывают ботнет, видимо, после праздников займутся окончательно.
нажираловку вчера прогулял
Не, хватит. Я как знал, кстати, что тя в какую-нить уздечку понесёт опять... ну нафик. Пауза.
А, так это т.е. благотворительность? Мда, это уже не сео... ошибался я, значит... от ведь...
Miha Kuzmin (KMY), а ты зачем выдачу парсишь? Сеопульту занятцо нечем больше? Онлайн-конференций не хватает уже? :)
Цель то парсинга в чем?
Ну, не знаю даже.
Зачем, например, толпы оптимизаторов в сапе каждый день жмут кнопки YBL (или каких там)? Вот примерно для этого же.
Или по твоему DDoS поисковика это тоже СЕО???
Это ещё не ddos. Но явление существует, вот в чём дело.
Думаю если пристально посмотреть - СЕО задач (в плане оптимизации сайтов под поисковые системы) там не ставится вообще...
Если бы. Богатство это идёт почти исключительно (процентов 98) на парсинг поисковиков. Или ты думаешь, я от балды назвал цифру в 14-ом посте? ;)
SilverMaster, ну, это у своих технарей лучше узнавать, кто за движок/апач отвечает.
Они тебе нагрузку создают на сервер, вот и отсеки всех, кто скачивает больше страницы в секунду, например. Точный интервал лучше по статистике определить, дабы не отсечь шутстрых, но всё-таки пользователей, а не ботов.
Просто я поражаюсь как динамично и красиво меняеться их пул ипов.
Ботнет, палюбасу. Разные подсети, разные владельцы, разные регистраторы, разные роуты, разные маршруты. Но вот левые хуизы у американцев говорят обо многом.
В общем, их нужно по нагрузке отличать. Легче с ними часть копеек отрубить, чем потом с хостером разбираться (и таки да, ты ему скинь базу, нехай поразмыслят и в работу включатся, после НГ-то).
Вот у мол у них и них...
Лично я знаю около десятка контор. Называть не буду (они мои клиенты). Так нормально?
Наверное где-то тут:
А, это... Переписку я вёл где-то с год назад, с Алёной Суворовой, если не ошибаюсь.
Практически дословно: "мы не приветствуем использование нашего xml-сервиса для задач, не связанных с поиском по сайту и похожих. Если Вы планируете делать множество запросов к Яндексу (речь шла об 1-10 млн. в сутки), то мы оставляем за собой право приостанавливать обработку таких запросов. Точную цифру сообщить не можем".
Так что это пройденный этап.
RussianDomainer, у Вас есть комания, зарегистрированная в Штатах?