Пожалуйста, распространите приглашение среди потенциально
заинтересованных лиц.
Список дорожек предварительный - для принятия окончательного решения
нужна ваша активность (заявки на участие и участие в обсуждении
правил новых дорожек).
-igor
------------------------------------------------------------------------
Приглашение к Участию
Российский семинар по Оценке Методов Информационного Поиска (РОМИП'2006)
Март 2006 - Октябрь 2006
http://romip.narod.ru
РОМИП - это инициатива по созданию плацдарма для проведения независимой
оценки методов информационного поиска, ориентированных на работу с
русскоязычной информацией.
Для сближения позиций различных исследователей и проведения независимой
оценки в мире сложилось несколько форумов - американский TREC,
европейский CLEF, японский NTCIR и российский РОМИП.
В 2006 году проводится четвертый семинар серии семинаров РОМИП (материалы
семинаров 2003-2005 годов доступны на сайте семинара).
Цели и аудитория
----------------
Основными целями Российского семинара по Оценке Методов Информационного
Поиска являются:
* создание и развитие информационных ресурсов, обеспечивающих
исследования в области информационного поиска
(информационно-поисковых систем, экспертных систем, баз данных)
* проведение независимой оценки методов информационного поиска,
ориентированных на работу с русскоязычной информацией
* формирование среды для исследования проблем информационного поиска на
актуальных для российского пользователя задачах
* формирование требований к оформлению текстовых коллекций для тестирования
* формирование "правил игры" - этических норм представления и
использования результатов
Дополнительными целями проекта являются:
* консолидация сообщества российских исследователей и разработчиков,
занимающихся информационным поиском
* сотрудничество с зарубежными инициативами по тестированию систем
информационного поиска
* расширение контактов с зарубежными исследователями и разработчиками,
занимающимися многоязычным информационным поиском
* привлечение широкого внимания к проблемам и перспективам информационного
поиска и интенсификация исследований в этой области в России
* создание предпосылок и стимулов для дальнейшего развития участвующих
систем с целью совершенствования качества поиска.
К участию приглашаются все заинтересованные лица - как создатели поисковых
систем, так и исследователи, занимающиеся проблемами информационного поиска.
Важные даты (приблизительный график)
-----------
Приём заявок на участие: до 3 апреля
Распространение заданий: до 17 апреля
Предоставление результатов выполнения заданий: с 1 по 31 июня (по графику)
Результаты оценки: после 2 августа
Тексты докладов: 8 сентября
Очная встреча: 17 октября - 19 октября
Процедура и условия участия
---------------------------
Все участники подписывают лицензионные соглашения об использовании коллекций
РОМИП исключительно для исследовательских (некоммерческих) целей в рамках
проекта РОМИП.
Участник, получив набор данных и заданий, в оговоренные сроки предоставляет
результат(ы) выполнения заданий своей системы для их независимой оценки,
которая проводится с соблюдением анонимности источника результата.
Поощряется также и решение модифицированных задач на основе используемых
наборов данных.
От участников также ожидается представление статьи с описанием общих
принципов использованного подхода и полученных результатов.
Статьи участников будут представлены на очном семинаре и опубликованы. В
2006 году предполагается совмещение этого семинара с российской конференцией
по электронным библиотекам (RCDL'2006), которая пройдёт во Владимире с 17 по
19 октября 2006 года.
Предполагается также, что участники компенсируют часть затрат на
распространение тестовых корпусов и оценку результатов, пропорционально
степени их участия. Компенсации могут быть производится как путем оплаты
оргвзносов, так и путем выделения трудовых ресурсов для проведения оценки
(по предварительной договоренности).
Результаты тестирования предназначены для использования исключительно в
исследовательских целях и не могут быть использованы в
маркетинговых/коммерческих целях без согласия участника.
Дорожки
-------
В 2006 году семинар будет состоять из нескольких секций, посвященным оценке
методов решения ряда задач информационного поиска (дорожек).
Предварительный список дорожек состоит из:
* классическая задача поиска по запросу
o по коллекции нормативно-правовых документов
o по Веб-коллекции
o по смешанной коллекции
* тематическая классификация Веб-сайтов
o нормативно-правовых документов
o Веб-сайтов
o Веб-страниц
* фактографический поиск по новостной коллекции
* кластеризация новостного потока
* контекстно-зависимое аннотирование текстовых документов
Обсуждается также несколько других возможных вариантов дорожек, включая:
* вариант поиска по запросу для которого известен контекст (абзац текста)
* поиск похожих документов по документу образцу или фрагменту текста
* вопросно-ответный поиск
Окончательный список будет сформирован по результатам обсуждения в форуме и
предпочтений заявившихся участников.
Участники могут принимать участие как в одной, так и в нескольких дорожках.
Подробные описания дорожек и правила проведения обсуждаются в списке
рассылки РОМИП и будут опубликованы на сайте семинара.
Наборы данных
-------------
* Веб коллекция Narod.Ru (700.000 документов)
* Веб коллекция DMOZ (300.000 документов)
* Коллекция нормативных документов (61.000 документов)
* Новостная коллекция (24.000 документов) (планируется расширение)
Оргкомитет
----------
* Михаил Агеев (МГУ, Москва)
* Александр Антонов (Галактика, Москва)
* Павел Браславский (ИМаш УрО РАН, Екатеринбург)
* Максим Губин (Кодекс, Санкт-Петербург)
* Борис Добров (УИС РОССИЯ, Москва)
* Игорь Кураленок (ПМПУ СПбГУ, Санкт-Петербург)
* Игорь Некрестьянов (мат-мех СПбГУ, Санкт-Петербург)
* Владимир Плешко (Гарант-Парк Интернет, Москва)
* Илья Сегалович (Яндекс, Москва)
* Влад Шабанов (Рамблер, Москва)
Правила подачи заявки
---------------------
Заявка на участие в семинаре РОМИП должна содержать следующую информацию:
* краткая (в 1-2 абзаца) презентация системы
(название, ссылка в web, краткое описание принципов используемого подхода)
* контактная информация (организация, email контактного лица)
* список дорожек, в которых вы заинтересованы принять участие
Заявки принимаются по адресу: romip@...
Дополнительная информация
-------------------------
Веб сайт семинара - http://romip.narod.ru
Основным средством общения и координации в РОМИП является электронная почта.
Для получения оперативной информации и обсуждения вопросов связанных с
проведением семинара приглашаем подписаться на рассылку РОМИП
http://www.yahoogroups.com/group/romip.