В Яндексе в виде кластера работают несколько машин, обрабатывающих запросы, и у каждой своя база страниц и, наверняка, ссылок. Одна из нескольких метапоисковых машин выдает им пришедшие запросы как задание. Когда минимально установленное количество серверов запроса ответило, метапоисковая машина проверяет затраченное на поиск время. Если оно больше установленного (сколько-то секунд), обработка запроса прекращается по таймауту.
Таким образом, если этот запрос случайно совпал с небольшим пиком загрузки Яндекса, и высока вероятность, что на отправленный запрос не ответят несколько компонент кластера.
Из-за молчания нескольких серверов запроса метапоисковая машина недополучит какое-то количество ссылок.
При первом запросе сервера вернут общее количество известных им ссылок (с определенной погрешностью) и выдадут первые 10-50 в зависимости от Ваших настроек результатов поиска. При переходе на следующую страницу результатов опять будет направлен запрос о количестве ссылок и о выборке следующих 10-50 ссылок, не совпадающих с первыми. Так как придется много проверять на совпадение (чтоб не выдавались повторно уже найденные первым поиском страницы), то окончание поиска из-за таймаута может наступить пораньше - в результате выборочное число ссылок будет меньше. При переходе на следующую страницу - опять меньше, так как проверять придется больше и т.п.
Высокочастотные в массе своей вытаскиваются жирными ссылками, проставленными в достаточно большом количестве. Низкочастотные идут вверх благодаря текстовым критериям и нескольким ссылкам с относительно "прокачанных" главных страниц разделов.
О это круто сказано! :)))
Сутки - это точно. Даже ночью спишь (иногда на клавиатуре), а он какое-то не выключенное кино по кругу показывает, как например у меня в последние несколько ночей. :)
У кого-то в жж это видел. :)
По-моему у drugoi.
Угу, а про форум все равно не забываешь и сидишь на нем. ;)
Уж поверь мне - влегкую бы выключил. Не веселит.
"Вечно у нас все перепутано: добро защищают мерзавцы, а злу служат мученики и герои" (c) Фандорин
Надеюсь, подсмысл понятен?..
Не думаю.
Постоянных форумян много, а географически они разбросаны весьма сильно. Приехать сможет только часть народу, а остальные будут тихо (или громко) завидовать.
Может быть только в близком кругу. ;)
Базу к очередной игре первого тура кубка подготовили.
jED R.,
Рассмешил! :)
Лови плюс!