MyOST, я к тому, что нужно удивляться другому - что это произошло так поздно. Соответственно, сколько-нибудь существенные объёмы парсинга нужно производить на новых принципах. А арендовать (хоть у Ростелекома) пару сеточек на сбор информации получится лишь у сеошников с минимальным объёмом работы.
Вы кэш какой собираете, вордстатовский? Перепроверяете инфу?
Хм... мы первый раз заметили специфический процент капчи (вернее, тогда ещё просто отказов) года два назад, в период послеапдейтных парсингов. Тогда суммарные суточные нагрузки достигали 15-17 млн. запросов (до 30 млн. в отдельных пиках, если пересчитывать).
Видимо, где-то в тот период и начался плотный анализ источников трафа на уровнях ниже http - полагаю, что сейчас разбор нагрузки достаточно автоматизирован на большинстве уровней, от пиров/магистральщиков (на входе по bgp) и до сравнения ip (и пакетов от него) с накопленной статистикой.
Только после чего решение по капче происходит на уровне собственно сервиса, к которому идёт запрос.
Вот, yet_warm, а ты про интеллектуальные беседы изволишь толковать. Когда весь интеллект в энное количество смайлов на пост уходит, какие уж тут беседы... с пунктуацией бы справиться. Ладно, скоро буду.
Кстати, я знаю, что перед джокером можно достать: у Мединского есть специальная книга про великорасейское гнобление всех меньших братьев, "О России - тюрьме народов" называется.
MyOST, я к тому, что нужно удивляться другому - что это произошло так поздно. Соответственно, сколько-нибудь существенные объёмы парсинга нужно производить на новых принципах. А арендовать (хоть у Ростелекома) пару сеточек на сбор информации получится лишь у сеошников с минимальным объёмом работы.
Вы кэш какой собираете, вордстатовский? Перепроверяете инфу?
там нормально так грузили
Хм... мы первый раз заметили специфический процент капчи (вернее, тогда ещё просто отказов) года два назад, в период послеапдейтных парсингов. Тогда суммарные суточные нагрузки достигали 15-17 млн. запросов (до 30 млн. в отдельных пиках, если пересчитывать).
Видимо, где-то в тот период и начался плотный анализ источников трафа на уровнях ниже http - полагаю, что сейчас разбор нагрузки достаточно автоматизирован на большинстве уровней, от пиров/магистральщиков (на входе по bgp) и до сравнения ip (и пакетов от него) с накопленной статистикой.
Только после чего решение по капче происходит на уровне собственно сервиса, к которому идёт запрос.
Это не подтвержденная информация.
Увы, есть вполне достаточные данные из разных источников.
владелец наших блоков очень большой LIR
Кто именно?
Иначе бы, скажем наши прокси блокировали бы полностью, а не 20-30%.
Видимо, Вы просто не создаёте весомую нагрузку.
Privod, Вы бы хоть смайлики меняли иногда, чтоль.
тире вместо запятой
Это у мя творческое переосмысление, не надо тут. Не всё ж одному Калинину русский язык переозвучивать на свой лад.
что то постоянно шепчут
О-хо-хо...
Вот, yet_warm, а ты про интеллектуальные беседы изволишь толковать. Когда весь интеллект в энное количество смайлов на пост уходит, какие уж тут беседы... с пунктуацией бы справиться. Ладно, скоро буду.
что там голоса говорят?
:facepalm: Что за голоса-то хоть Вам мерещатся? "Живите безмятежно", ей-бо.
спят и видят
Если бы. Уже проснулись и прячутся.
Кстати, я знаю, что перед джокером можно достать: у Мединского есть специальная книга про великорасейское гнобление всех меньших братьев, "О России - тюрьме народов" называется.
(пойду опять поработаю пока :) :))
затупить я могу похлеще деды
Да, много вас тут, языкастых... надо пореже заходить.
ты ведь претендуешь
Толку-то.
кстати кто такая
:) Потом, всё потом.
Про Крым уже было?
Обижаете. ;)
Я уже давно как бы не обращаю.
Оно и видно.
Вы всегда так делаете...
я так понял что они...
Ну, в экстрасенсорике-то я и подавно соревноваться не смею.
Удачно нарыть новых викиаргументов.