Официальный старт РОМИП'2006

"Российский семинар по Оценке Методов Информационного Поиска (РОМИП'2006)" Март 2006 - Октябрь 2006

http://romip.narod.ru

РОМИП - это инициатива по созданию плацдарма для проведения независимой оценки методов информационного поиска, ориентированных на работу с русскоязычной информацией.

Для сближения позиций различных исследователей и проведения независимой оценки в мире сложилось несколько форумов - американский TREC, европейский CLEF, японский NTCIR и российский РОМИП.

В 2006 году проводится четвертый семинар серии семинаров РОМИП (материалы семинаров 2003-2005 годов доступны на сайте семинара).

Цели и аудитория

----------------

Основными целями Российского семинара по Оценке Методов Информационного Поиска являются:

* создание и развитие информационных ресурсов, обеспечивающих

исследования в области информационного поиска

(информационно-поисковых систем, экспертных систем, баз данных)

* проведение независимой оценки методов информационного поиска,

ориентированных на работу с русскоязычной информацией

* формирование среды для исследования проблем информационного поиска на

актуальных для российского пользователя задачах

* формирование требований к оформлению текстовых коллекций для тестирования

* формирование "правил игры" - этических норм представления и

использования результатов

Дополнительными целями проекта являются:

* консолидация сообщества российских исследователей и разработчиков,

занимающихся информационным поиском

* сотрудничество с зарубежными инициативами по тестированию систем

информационного поиска

* расширение контактов с зарубежными исследователями и разработчиками,

занимающимися многоязычным информационным поиском

* привлечение широкого внимания к проблемам и перспективам информационного

поиска и интенсификация исследований в этой области в России

* создание предпосылок и стимулов для дальнейшего развития участвующих

систем с целью совершенствования качества поиска.

К участию приглашаются все заинтересованные лица - как создатели поисковых систем, так и исследователи, занимающиеся проблемами информационного поиска.

Важные даты (приблизительный график)

-----------

Приём заявок на участие: до 3 апреля

Распространение заданий: до 17 апреля

Предоставление результатов выполнения заданий: с 1 по 31 июня (по графику)

Результаты оценки: после 2 августа

Тексты докладов: 8 сентября

Очная встреча: 17 октября - 19 октября

Процедура и условия участия

---------------------------

Все участники подписывают лицензионные соглашения об использовании коллекций РОМИП исключительно для исследовательских (некоммерческих) целей в рамках проекта РОМИП.

Участник, получив набор данных и заданий, в оговоренные сроки предоставляет результат(ы) выполнения заданий своей системы для их независимой оценки, которая проводится с соблюдением анонимности источника результата.

Поощряется также и решение модифицированных задач на основе используемых наборов данных.

От участников также ожидается представление статьи с описанием общих принципов использованного подхода и полученных результатов.

Статьи участников будут представлены на очном семинаре и опубликованы. В 2006 году предполагается совмещение этого семинара с российской конференцией по электронным библиотекам (RCDL'2006), которая пройдёт во Владимире с 17 по 19 октября 2006 года.

Предполагается также, что участники компенсируют часть затрат на

распространение тестовых корпусов и оценку результатов, пропорционально степени их участия. Компенсации могут быть производится как путем оплаты оргвзносов, так и путем выделения трудовых ресурсов для проведения оценки (по предварительной договоренности).

Результаты тестирования предназначены для использования исключительно в исследовательских целях и не могут быть использованы в маркетинговых/коммерческих целях без согласия участника.

Дорожки

-------

В 2006 году семинар будет состоять из нескольких секций, посвященным оценке методов решения ряда задач информационного поиска (дорожек).

Предварительный список дорожек состоит из:

* классическая задача поиска по запросу

o по коллекции нормативно-правовых документов

o по Веб-коллекции

o по смешанной коллекции

* тематическая классификация Веб-сайтов

o нормативно-правовых документов

o Веб-сайтов

o Веб-страниц

* фактографический поиск по новостной коллекции

* кластеризация новостного потока

* контекстно-зависимое аннотирование текстовых документов

Обсуждается также несколько других возможных вариантов дорожек, включая:

* вариант поиска по запросу для которого известен контекст (абзац текста)

* поиск похожих документов по документу образцу или фрагменту текста

* вопросно-ответный поиск

Окончательный список будет сформирован по результатам обсуждения в форуме и предпочтений заявившихся участников.

Участники могут принимать участие как в одной, так и в нескольких дорожках.

Подробные описания дорожек и правила проведения обсуждаются в списке рассылки РОМИП и будут опубликованы на сайте семинара.

Наборы данных

-------------

* Веб коллекция Narod.Ru (700.000 документов)

* Веб коллекция DMOZ (300.000 документов)

* Коллекция нормативных документов (61.000 документов)

* Новостная коллекция (24.000 документов) (планируется расширение)

Оргкомитет

----------

* Михаил Агеев (МГУ, Москва)

* Александр Антонов (Галактика, Москва)

* Павел Браславский (ИМаш УрО РАН, Екатеринбург)

* Максим Губин (Кодекс, Санкт-Петербург)

* Борис Добров (УИС РОССИЯ, Москва)

* Игорь Кураленок (ПМПУ СПбГУ, Санкт-Петербург)

* Игорь Некрестьянов (мат-мех СПбГУ, Санкт-Петербург)

* Владимир Плешко (Гарант-Парк Интернет, Москва)

* Илья Сегалович (Яндекс, Москва)

* Влад Шабанов (Рамблер, Москва)

Правила подачи заявки

---------------------

Заявка на участие в семинаре РОМИП должна содержать следующую информацию:

* краткая (в 1-2 абзаца) презентация системы

(название, ссылка в web, краткое описание принципов используемого подхода)

* контактная информация (организация, email контактного лица)

* список дорожек, в которых вы заинтересованы принять участие

Заявки принимаются по адресу: romip[at]meta.math.spbu.ru

Дополнительная информация

-------------------------

Веб сайт семинара - http://romip.narod.ru

Основным средством общения и координации в РОМИП является электронная почта.

Для получения оперативной информации и обсуждения вопросов связанных с проведением семинара приглашаем подписаться на рассылку РОМИП: http://www.yahoogroups.com/group/romip