Прюнинг Яндекса

Ну а чего тут скажешь..? Молодчики. :)

насколько я понимаю, сделали кворум "умнее" или какой-то препроцессинг кворума... ну что ж - давно пора было "оптимизацией" заняться яндексу =)

таки я думаю, пришлось им это сдлать, чтобы нормально индексить зарубежку (при тех же ресурсах)

А мне лично это все напоминает вещь, которую некоторые называют "траст".

Прогнал...

хмм...то есть придумали-таки алгоритм определения "траста" и засчет него (то есть дополнительного шага в построении выдачи) сумели ускорить работу?..вообще, насколько я сумел заметить, кол-во страниц, релевантных запросу в магадане не изменилось...в таком случае, это настоящий прорыв и в перспективе выдача, близкая к идеальной (((:

Статические факторы, это видимо те которые не зависят от запроса.

Что у нас есть известного? вИЦ, траст, тошнота текста, санкции, свойства анкор-листа сходные с текстовой тошнотой, названия которым четкого по-моему еще нет.

Чтобы сократить количество документов участвующих в обработке основываясь только на них, нужно выкинуть сайты с "низкими параметрами" относительно всей выборки. До первичной отборки документов по базе это делать глупо, тогда будут отсеиваться одни и те же документы независимо от запроса, что сильно обрежет базу по которой ведется поиск. Хотели бы, почистили один раз, а не делали это каждый незакешированный запрос.

Следовательно перед прюнингом уже имеется какая-то стартовая выборка. Это могут быть как обычно страницы прошедшие кворум, так и более ранний этап. более ранний этап это все страницы где нашлось хоть одно слово из запроса, те в которых уже потом обычно идет поиск пассажей для проверки кворумом. Поэтому прюнинг может быть как постпроцессинг так и препроцессинг кворума. Я больше склоняюсь к постпроцессингу, иначе по запросу "мебель в черниголовке на развес" останется одна мебель без всякой черниголовки и развеса.

PS: На траст похожим не кажется. Траст по определению не зависит от запроса и пересчитывать его каждый запрос нет нужды.

ИМХО добавил 21.05.2008 в 21:24

PPS: На выдачу сильно повлиять не должно. Об этом они как сами пишут, так и само вроде очевидно, если отсеиваются документы которые по мнению алгоритма прюнинга и так в топ скорее всего не попали бы.

это неверно, смотрим первоисточник

"На стадии прюнинга на основе всех статических факторов для каждого документа оценивается вероятность того, что он окажется релевантным запросу."

заметьте, что в статические параметры страницы входит контент (тобишь релевантность)

также рассмотрим слова про то, что статические параметры есть у страницы или у сайта

эти параметры ждя сайта - и есть аналог траста, судя по всему (возраст, фильтры, качество совокупности внешних ссылок и тп)

спрашиваем "путин"? отвечают: "биография д.а.медведева, фотографии"

такое и китайскому интернету не снилось :) обычный поиск на яндексе - говно говном, но конъюнктура - вне всяких похвал :) нужно еще кнопочку сделать рядом с традиционными "по дате" и "по релевантности" - "сортировать по лояльности к власти"

подкрепите весомым примером.

Где заметить? Я исходил из того что статические параметры документа - параметры не зависящие от запроса.

А понял о чем вы. Контент может входить - он от запроса не зависит. Релевантность нет - она зависит от запроса. И опять возвращаемся что контент от запроса не зависит и выкинет один и тот же набор документов если предположить ваш вариант.

ИМХО добавил 21.05.2008 в 21:43

PS: про траст я сам писал, как про один из факторов на которых основывается прюнинг. Но назначение прюнинга отнюдь не в отработке алгоритма траста.