Сменился ли корпус при добавлении поиска по иностраным сайтам

Нет, пока все старое

:) эх, тудаб бы еще генератор анкоров прикрутить

а вообще же раньше вроде чаще пересчитывались или разВполгода это стандартно?

Ну так у MiRajа данные собраны за 29.11.2007, с этого момента прошло 4-е месяца.

Коллекция с того момента изменялась уже 2-а раза, на сколько я помню.

Вот изменялся ли вес с того 29.11.2007 еще раз, к сожалению, не могу сказать...по моему менялся один раз.

pervius, выложим обновление на днях.

Если честно - просто не доходили руки до него.

Имхо, они придерживаются пока политики "мухи отдельно, котлеты отдельно". То есть хоть для зарубежных релевантность рассчитывается также, но их присутствие не должно повлиять на рассчет релевантности рунетных сайтов, а следовательно корпус используемый для рушной зоны должен остаться неизменным. Даже если это не так, корпусу пока меняться рано, ведь:

Вообще-то последний раз текстовый корпус меняли в феврале. А раньше (когда-то) как раз реже, могли и год не менять.

Корпус пересчитывают произвольно, а не по мере добавления новых документов в индекс.

Я склонен считать, что очередной пересчет вызван политическими, а не техническими мотивами.

стер 10 раз

Константин, что вы имеете ввиду под произвольным пересчетом?

И на сколько я понимаю, корпус (текстовый корпус) - это множество текстов (в данном случае индексная база Яндекса), на основе которых уже производится расчет и перерасчет различных показателей и коэффициентов (в нашем случае мы рассматриваем idf) для каждого слова и словосочетания. Как же тогда можно пересчитать корпус, его можно изменить (дополнить или сократить), но никак не пересчитать.

В принципе логичным было бы предположить, что с ростом индексной базы Яндекса, что приводит к смещению относительных и количественных показателей каждого слова (статистика слов) и увеличению корпуса и учитывая темпы развития интернета в стране, то пересчет пересчеты idf придется делать все чаще и чаще или применять инные алгоритмы.

pervius, корпус - это не индексная база, он значительно меньше по размеру. Что касается пересчета, то изменение корпуса (дополнение, сокращение, изменение состава документов) влечет за собой пересчет idf. Это и имел в виду Константин, говоря о пересчете корпуса.