WMT 2010

Campaña

Nombre de la campaña

WMT 2010: Fifth Workshop on Statistical Machine Translation @ ACL

Nombre de la tarea

Machine Translation for European Languages

Automatic System Combination

Tipo de tarea

Traducción

Descripción de la tarea

En la tarea de evaluación se proporcionarán los resultados de las traducciones y de la combinación de los sistemas, así como las traducciones manuales.  Se emplearán diferentes medidas para la evaluación de las traducciones para el estudio de los resultados..

la tarea

Traducción Automática

Fecha evento / edición

2010

Organizadores
  • Chris Callison-Burch, Johns Hopkins University, EE.UU.
  • Philipp Koehn, University of Edinburgh, Reino Unido
  • Christof Monz, University of Amsterdam, Holanda
  • Kay Peterson, NIST, EE.UU.
  • Omar Zaidan, Johns Hopkins University, EE.UU.
Grupos destinatarios

Abierto a quien quiera participar: grupos de investigación académicos y de la industria. Ha partecipado el European Parliament, sistemas comerciales (EUROTRANS y PC-TRANS), así como sistema de traducción online.

Elegibilidad

Cualquiera puede participar (grupos de investigación académicos, de la industria o investigadores individuales).

Calendario
  • 04/12/2009: Datos de entrenamiento publicados
  • 01/03/2010: Datos de test publicados
  • 05/03/2010: Envío de resultados
  • 23/04/2010: Envío versión final artículos
Número de participantes

37

Número de participantes de España

3

Dominio

Parlamento Europeo, noticias y comentarios

Idiomas Español y otros idiomas

Datos

Datos de entrenamiento

Distribuido como CSV

Derecho de redistribución de datos

Sólo para investigación.

Enlace a datasets

http://www.statmt.org/wmt10/translation-task.html

Resultados

Métrica de evaluación

Correlación de Spearman con las evaluaciones manuales.

Rendimiento
  • ES-EN: 0,98
  • EN-ES: 0,96
Disponibilidad del código

Evaluación: si
Participantes: no

Tipo de ejecución

Local

Número total de resultados enviados

100+

Resultados con los rankings

Chris Callison-Burch, Philipp Koehn, Christof Monz, Kay Peterson, Mark Przybocki and Omar Zaidan. Findings of the 2010 Joint Workshop on Statistical Machine Translation and Metrics for Machine Translation. Proceedings of the Joint Fifth Workshop on Statistical Machine Translation and MetricsMATR, pp.17-53, in conjunction with ACL, July 15 and 16, 2010, Uppsala, Sweden

http://www.statmt.org/wmt10/pdf/wmt10-overview.pdf 

Volumen de publicación

Proceedings of the Workshop on Statistical Machine Translation. Association for Computational Linguistics.

Gestión web de usuarios

Atención a participantes

Email