Эта статья предоставляет недостаточный контекст для тех, кто не знаком с предметом . Декабрь 2010 г. ) ( Узнайте, как и когда удалить этот шаблон сообщения ) ( |
В Понимании конференции сообщений ( MUC ) была инициирована и финансируется DARPA (Defense Advanced Research Projects Agency) , чтобы стимулировать развитие новых и более совершенных методов извлечения информации . Характер этого соревнования - множество параллельных исследовательских команд конкурируют друг с другом - потребовал разработки стандартов оценки, например, принятия таких показателей, как точность и отзывчивость .
Темы и упражнения [ править ]
Только для первой конференции (MUC-1) участник мог выбрать выходной формат для извлеченной информации. Со второй конференции был предписан выходной формат, по которому будут оцениваться системы участников. Для каждой темы были даны поля, которые необходимо было заполнить информацией из текста. Типичными полями были, например, причина, агент, время и место события, последствия и т. Д. Количество полей увеличивалось от конференции к конференции.
На шестой конференции (MUC-6) была добавлена задача распознавания именованных сущностей и кореференции . Для названной сущности все фразы в тексте должны были быть помечены как лицо, место, организация, время или количество.
Обработанные темы и текстовые источники демонстрируют непрерывный переход от военной к гражданской тематике, что отражает изменение интереса бизнеса к извлечению информации , происходящее в то время.
Конференция | Год | Источник текста | Тема (домен) |
---|---|---|---|
MUC-1 | 1987 г. | Mil. отчеты | Операции флота |
MUC-2 | 1989 г. | Mil. отчеты | Операции флота |
MUC-3 | 1991 г. | Новостные репортажи | Террористическая деятельность в Латинской Америке |
MUC-4 | 1992 г. | Новостные репортажи | Террористическая деятельность в Латинской Америке |
MUC-5 | 1993 г. | Новостные репортажи | Совместные корпоративные предприятия, Производство микроэлектроники |
MUC-6 | 1995 г. | Новостные репортажи | Переговоры по трудовым спорам и преемственности корпоративного управления |
MUC-7 | 1997 г. | Новостные репортажи | Авиакатастрофы и запуск ракет / ракет |
Литература [ править ]
- Ральф Гришман, Бет Сандхейм: Конференция по пониманию сообщений - 6: Краткая история. В: Материалы 16-й Международной конференции по компьютерной лингвистике (COLING), I, Копенгаген, 1996, 466–471.