Дорожка по аннотированию - web, legal или mixed?

Дорожка по аннотированию - web, legal или mixed?

Postby neigor » Wed Apr 20, 2005 7:14 am

По каким запросам мы хотим проверять качество аннотирования?

Обсуждалось web и legal, но решения принято не было.

Мы склонны выдать задание на основе результатов прошлогодней оценки
обеих дорожек. А потом решить что и как реально будет оцениваться
(естественно это будет подмножество).

Есть ли возражения?

-igor

p.s.
Будем ли делать расширение задания на основе пулов от этого цикла
- вопрос открытый, посмотрим сможем ли получить результаты по
adhoc вовремя и будут ли готовы участники этой дорожки выполнить
дополнительное задание быстро.
neigor
Оргкомитет
 
Posts: 331
Joined: Sat Feb 08, 2003 2:06 pm

RE: [romip] Дорожка по аннотированию - web, legal или mixed?

Postby maxgubin » Wed Apr 20, 2005 5:50 pm

>Мы склонны выдать задание на основе результатов прошлогодней оценки
>обеих дорожек. А потом решить что и как реально будет оцениваться
> (естественно это будет подмножество).

>Есть ли возражения?

Конечно нет, кроме вопроса сможем ли мы достаточно быстро адаптировать
систему для web коллекции. Я думаю, что, в крайнем случае, можно сделать не
все запросы и оцениваться по ним.

Максим
maxgubin
Оргкомитет
 
Posts: 86
Joined: Fri Jul 04, 2003 3:54 am

Re: [romip] Дорожка по аннотированию - web, legal или mixed?

Postby pb » Thu Apr 21, 2005 7:04 am

Я думаю, лучше WEB - нет тематической привязки, более-менее равные
условия.

ПБ
pb
Оргкомитет
 
Posts: 72
Joined: Mon Feb 10, 2003 11:52 am

Re: [romip] Дорожка по аннотированию - web, legal или mixed?

Postby neigor » Thu Apr 21, 2005 8:48 am

Мы решили сделать mixed, потому что:
- кто-то лучше готов к Веб, кто-то в legal
- оценку можно сделать не только в среднем по всем,
но также и подзачеты по legal/web
Какое подмножество и как оцениваем, можно зафиксировать позже.

>Конечно нет, кроме вопроса сможем ли мы достаточно быстро адаптировать
>систему для web коллекции. Я думаю, что, в крайнем случае, можно сделать не
>все запросы и оцениваться по ним.

лучше сдать все ответы, несмотря на то насколько хорошо получится по Веб.
На основе подзачетов по legal/web будет виден порядок разницы в качестве.
Да и что "в среднем" получится интересно, те кто ориентирован только на Веб
вполне вероятно будут не так успешны в legal

-igor
neigor
Оргкомитет
 
Posts: 331
Joined: Sat Feb 08, 2003 2:06 pm


Return to Контекстно-зависимое аннотирование текстовых документов

Who is online

Users browsing this forum: No registered users and 8 guests

cron