Page 1 of 1

Re: Нужны ли труды к RCDL?

PostPosted: Fri Oct 03, 2003 3:51 pm
by dobroff2003
А что насчет анонимности, открытости результатов, цветов, людей
и организаций?

Нужны ли труды к RCDL?

PostPosted: Fri Oct 03, 2003 4:04 pm
by neigor
Добрый день,

мне кажется, что иметь сборник трудов к RCDL'2003 было бы
полезно, поскольку:
1) он будет доступен участникам RCDL
(что полезно для популяризации РОМИП и получения обратной связи)
2) он косвенно демонстрирует формальную серьезность мероприятия,
что важно для более-менее оффициальных лиц, которые
могут помочь с проведением последующих мероприятий.
3) тексты формируют базис для обсуждения - все их смогут предварительно
посмотреть, чтобы получить общее представление о том что есть
и фокусировать обсуждение на более конкретных моментах

Я _абсолютно_ согласен, что времни для нормального анализа конечно мало.
Однако, кроме печатных трудов тексты будут публиковаться и на Веб-сайте
и ничто нам не мешает опубликовать в трудах предварительные
варианты статей с текущим пониманием. А потом заменить их на более
продвинутые в электронной версии трудов (с учетом небольшого тиража печатной
версии электронные труды потенциально будут гораздо более заметны)

-igor

Re: [romip] Re: Нужны ли труды к RCDL?

PostPosted: Fri Oct 03, 2003 4:48 pm
by segalovich
Может быть я чего-то не понимаю, но в статье ведь не обязательно
указывать свой цвет и номер, не так ли?

Илья

RE: [romip] Re: Нужны ли труды к RCDL?

PostPosted: Fri Oct 03, 2003 4:50 pm
by vladimir_pleshko
Извиняюсь, что вклинился в нить.
Мой предыдущий постинг, который пришел в кривой кодировке отлично виден в web:
http://groups.yahoo.com/group/romip/message/94

Чтобы прочитать его при помощи почтового клиента, нужно сменить кодировку
сообщения с Western-ISO на KOI-RU. Кстати, порекомендуйте, какой язык указывать
при отправке сообщений через yahoo.groups. Кодировка KOI (в web все OK). Язык
английский (проблема с рассылкой, русского в списке нет).

С уважением,
Владимир Плешко

Re: Нужны ли труды кRCDL?

PostPosted: Fri Oct 03, 2003 4:57 pm
by dobroff2003
Коллеги!

мы уже нарисовали ВСЕ кривые (9*2 штук) по первой задаче
и идентифицировали свои (3*2 штуки).
И ясно, что идентификация половины "анонимных" участников будет
достаточна очевидна,
если вторая половина откроет "личико".

Есть только два пути:
1) полная открытость, тогда зачем какие-то цвета
2) закрытость на уровне цветов ДО конференции, где
и будет приниматься решение.

Можно действовать и так и эдак.
В TREC - полная открытость.
В SUMMAC - цвета сохранены в окончательном общем отчете,
ЗАТЕМ УЖЕ писался сборник статей.

Первый путь более жесткий, второй - более мягкий.

Лично меня устраивает ЛЮБОЙ вариант, но НАДО выбрать.

Потому что, если кто-то расчитывает на анонимность,
то она может быть раскрыта вычитанием из общего открытой
информации.

Bye,
Б.Добров

Re: [romip] Re: Нужны ли труды к RCDL?

PostPosted: Fri Oct 03, 2003 5:01 pm
by neigor
Тут я вполне разделяю ваши опасения и мы старались по возможности
обеспечить максимальную анонимность (люди о организации должны
ассоциироваться с результатами только если они этого сами захотят).

Мне не очень нравится идея о анонимных статьях поскольку:
- непонятно как на эти статьи ссылаться
- по контексту из статьи/библографии тоже часто можно угадать автора
- все равно их кто-то будет докладывать

Что можно сделать - можно загрубить общую сводную информацию в трудах,
показывать среднее, разброс и дисперсию.
А участники могут сами решать насколько делтально описывать себя.
В конечном итоге у нас физически нет времени чтобы убеждать участников
дописать что-то еще :)

Лично я полагаю, абсолютная анонимность в этом контексте
не достижима или неинтересна (ведь формально все участники используют
"исследовательские" прототипы, а не промышленные системы),
но непонятно где разумная грань и я не хотел бы навязывать мой выбор :)

Мне кажется, что сейчас надо найти какое-то решение на этот раз и
во время очной встречи обсудить эту проблему всем вместе.

-igor

Re: [romip] Re: Нужны ли труды к RCDL?

PostPosted: Fri Oct 03, 2003 5:14 pm
by dobroff2003
Ilya Segalovich wrote:
>
> Может быть я чего-то не понимаю, но в статье ведь не обязательно
> указывать свой цвет и номер, не так ли?
>
> Илья
>

Если я не ошибаюсь:
- если указать фамилию и не указывать цвет/номер, то невозможно никакое
сопоставление
- если указать цвет/номер и не указывать фамилию, то возможно анонимное
сопоставление
- если указать цвет/номер и фамилию, то возможно полное сопоставление

Б.Добров

Re: [romip] Re: Нужны ли труды к RCDL?

PostPosted: Fri Oct 03, 2003 5:29 pm
by segalovich
Предлагаю оставить все-таки только два варианта.

> Если я не ошибаюсь:
> - если указать фамилию и не указывать цвет/номер, то невозможно никакое
> сопоставление

Выбор для тех, кто хочет остаться анонимным.

> - если указать цвет/номер и не указывать фамилию, то возможно анонимное
> сопоставление

"Статья без автора"? Это какой-то иезуитский вариант.
Я предлагаю его не разрешать. :)

Или он кому-то нужен?

> - если указать цвет/номер и фамилию, то возможно полное сопоставление

Выбор для тех, кто не хочет соблюдать анонимность.

Остается следующая проблема. Если все участники кроме одного
решат вести себя по последнему варианту, то этот последний тем самым
потеряет анонимность.

Надуманная ли это проблема?
Или мне кажется?

Илья

P.S.
Игорь, а нам уже называл свой номер, или
я что-то пропустил? Я помню только цвет.

Re: [romip] Re: Нужны ли труды к RCDL?

PostPosted: Sat Oct 04, 2003 1:48 pm
by neigor
> Игорь, а нам уже называл свой номер, или
> я что-то пропустил? Я помню только цвет.

номера в разосланных результатов с цветами коррелируют неочевидным образом,
поскольку разные участники подавали разное число прогонов,
то если бы мы здесь вписали цвета, то можно было бы вычислить участников.

сегодня будут разосланы персональные результаты,

-igor