Дорожка построения текстовых меток для изображенийЗадачаДорожка посвящена оценке методов автоматического аннотирования изображений, работающих на основе анализа их содержания. Приветствуются самые разнообразные подходы к решению задачи автоматического аннотирования. Возможно, к примеру, распознавание некоторого фиксированного набора объектов или использование уже обученных классификаторов общего плана (indoor/outdoor, city/landscape, ...) и аннотирование изображений названиями соответствующих им категорий. Принципиальным является отсутствие единого для всех участников размеченного обучающего множества, подготовленного специально для данной тестовой коллекции. Общая процедура проведения дорожки стандартна. Тестовая коллекцияВ качестве тестового набора данных используется коллекция изображений Flickr, созданная в 2008 году. Формулировка задания для участвующей системыДля каждого изображения из тестового набора (всего 2000 изображений) построить списки из не более чем 15 соответствующих ему текстовых меток. Методология оценкиОценка текстовых меток будет производиться независимыми асессорами. Для изображений из случайной выборки заданий будут построены "котлы", содержащие текстовые метки, полученные от каждой из систем-участников. Задачей асессора будет просмотреть такой котел и пометить все текстовые метки, подходящие для описания данного изображения.
Форматы данных |