Приглашение к Участию

Девятый Pоссийский семинар по Оценке Методов Информационного Поиска

Октябрь 2011 - Декабрь 2011
http://romip.ru

К участию приглашаются все заинтересованные лица - исследователи, разработчики, студенты и аспиранты.

В этом году участникам предлагаются два типа заданий ("дорожек"): анализ тональности текстов (sentiment analysis) и анализ изображений.

Рассматриваемые задачи

Предварительно, программа семинара в 2011 году будет состоять из следующих секций (дорожек):

• Дорожки по анализу отзывов пользователей (классификаци по тональности)
  • По коллекции отзывов о фильмах
  • По коллекции отзывов о книгах
  • По коллекции отзывов о цифровых фотокамерах
• Дорожки по изображениям
  • Составление панорам из коллекции изображений
  • Поиск изображений по визуальному подобию
  • Построение текстовых меток для изображений
• Свободная дорожка (произвольное исследование на основе материалов РОМИП)

Окончательный список будет сформирован по результатам обсуждения в форуме и предпочтений заявившихся участников. Подробные описания дорожек и правила проведения опубликованы на сайте семинара.

Наборы данных

При проведении семинара используются следующие коллекции (список может быть расширен):

Отзывы:

• Фильмы
  15 718 отзывов с рекомендательного сервиса Имхонет (www.imhonet.ru)
• Книги
  24 159 отзывов с Имхонета
• Цифровые фотокамеры
  10 370 отзывов с Яндекс.Маркета

• Коллекция фотографий
  (20.000+ изображений)
• Коллекция нечетких дубликатов изображений
  (37.000+ изображений)

Процедура и условия участия

Все участники подписывают лицензионные соглашения об использовании коллекций РОМИП исключительно для исследовательских (некоммерческих) целей в рамках проекта РОМИП.

Участник, получив набор данных и заданий, в оговоренные сроки предоставляет результат(ы) выполнения заданий своей системы для их независимой оценки, которая проводится с соблюдением анонимности источника результата. Поощряется также и решение модифицированных задач на основе используемых наборов данных.

Участник обязуется предоставить статью с описанием общих принципов использованного подхода и полученных результатов для публикации в трудах семи-нара и сделать доклад на очной части семинара.

Результаты тестирования предназначены для использования исключительно в исследовательских целях и не могут быть использованы в маркетинговых или коммерческих целях.

Правила подачи заявки

Заявки принимаются через заполнение формы в электронном виде.

Важные даты

Объявление дорожек: 20 октября
Распространение данных для обучения: с 25 октября
Распространение тестовых данных: с 15 ноября
Предоставление результатов выполнения заданий: до 15 декабря
Результаты оценки: 20 декабря
Тексты докладов: 1 февраля

О РОМИП

РОМИП - это инициатива по проведению независимой оценки методов информационного поиска, ориентированных на работу с русскоязычной информацией.

Методология организации семинара во многом схожа с известными мировыми аналогами - американским TREC, европейским CLEF и японским NTCIR. Отличительной чертой РОМИП является использование русскоязычных коллекций и активное участие исследователей из России.

Материалы семинаров РОМИП 2003-2010 годов свободно доступны на сайте семинара.

Цели и аудитория

Основными целями Российского семинара по Оценке Методов Информационного Поиска являются:

• создание и развитие информационных ресурсов, обеспечивающих исследования в области информационного поиска;
• проведение независимой оценки методов информационного поиска, ориентированных на работу с русскоязычной информацией;
• формирование среды для исследования проблем информационного поиска на актуальных для российского пользователя задачах;
• формирование требований к оформлению текстовых коллекций для тестирования;
• формирование "правил игры" - этических норм представления и использования результатов.

Дополнительными целями проекта являются:

• консолидация сообщества российских исследователей и разработчиков, занимающихся информационным поиском
• сотрудничество с зарубежными инициативами по тестированию систем информационного поиска
• расширение контактов с зарубежными исследователями и разработчиками, занимающимися многоязычным информационным поиском
• привлечение широкого внимания к проблемам и перспективам информационного поиска и интенсификация исследований в этой области в России
• создание предпосылок и стимулов для дальнейшего развития участвующих систем с целью совершенствования качества поиска.

Оргкомитет

• Михаил Агеев (МГУ, Москва)
• Илья Четверкин (МГУ, Москва)
• Александр Антонов (Галактика, Москва)
• Павел Браславский (Яндекс, УрФУ, Екатеринбург)
• Наталья Васильева (HP Labs, Санкт-Петербург)
• Максим Губин (Facebook, USA)
• Борис Добров (УИС РОССИЯ, Москва)
• Наталья Лукашевич (УИС РОССИЯ, Москва)
• Михаил Костин (Mail.Ru, Москва)
• Игорь Кураленок (Яндекс, ПМПУ СПбГУ, Санкт-Петербург)
• Игорь Некрестьянов (Oracle Corporation, USA)
• Марина Некрестьянова (RedAril, Санкт-Петербург)
• Владимир Плешко (RCO, Москва)
• Илья Сегалович (Яндекс, Москва)
• Влад Шабанов (Вертикальный поиск, Москва)
• Сергей Татевосян (КМ онлайн, Москва)

Дополнительная информация

Веб сайт семинара - http://romip.ru.

Основным средством общения и координации в РОМИП является форум и электронная почта.

Для получения оперативной информации и обсуждения вопросов, связанных с проведением семинара, приглашаем подписаться на форум РОМИП: http://romip.ru/forum/.

Контактный адрес оргкомитета: romip[AT]romip.ru