WMT 2008 - Machine Traslation

Compartir

Campaña

Nombre de la campaña

WMT 2008: Third Workshop on Statistical Machine Translation @ ACL
Nombre de la tarea

Shared Task: Machine Translation for European Languages
Tipo de tarea

Traducción
Descripción de la tarea

Proporcionan datos de entrenamiento para pares de idiomas europeos y un marco común (que incluye un modelo de idioma y un sistema de línea de base). La tarea es mejorar los métodos para construir una tabla de traducción de frases (por ejemplo, mediante una mejor de alineación de palabras, extracción de frases, puntuación de frases), aumentar el sistema de otros sistemas (por ejemplo, mediante preprocesamiento) o crear sistemas de traducción completamente nuevos.
la tarea

Traducción Automática
Fecha evento / edición

2008 - http://www.statmt.org/wmt08/shared-task.html

Organizadores
  • Chris Callison-Burch, Johns Hopkins University, EE.UU.
  • Philipp Koehn, University of Edinburgh, Reino Unido
  • Christof Monz, University of London, Reino Unido
  • Josh Schroeder, University of Edinburgh, Reino Unido
  •  Cameron Shaw Fordyce, University of Edinburgh, Reino Unido
Grupos destinatarios

Abierto a quien quiera participar: grupos de investigación académicos y de la industria.

Elegibilidad

Cualquiera puede participar (grupos de investigación académicos, de la industria o investigadores individuales). Han participado diferentes sistemas comerciales (Systran, Babelfish, Lingenio, Lucy, OpenLogos, ProMT, SDL) así como Xerox (Xerox Research Centre Europe). 
Calendario
  • 14/03/2008: Datos de test publicados
  • 21/03/2008: Envío resultados
  • 04/04/2008: Envío versión final artículos
Número de participantes

26
Número de participantes de España

1
Dominio

Parlamento Europeo y noticias
Idiomas Español y otros idiomas

Datos

Datos de entrenamiento

Distribuido como CSV
Derecho de redistribución de datos

Sólo para investigación.
Enlace a datasets

http://www.statmt.org/wmt08/shared-task.html

Resultados

Métrica de evaluación

BLEU
Rendimiento
  • EN-ES (noticias): 0,21
  • EN-ES (Europarl): 0,32
  • ES-EN (Europarl):  0,34
  • ES-EN (noticias): 0,27
Disponibilidad del código

No
Tipo de ejecución

Local
Número total de resultados enviados

100+
Resultados con los rankings

Chris Callison-Burch, Cameron Fordyce, Philipp Koehn, Christof Monz and Josh Schroeder. Further Meta-Evaluation of Machine Translation. Proceedings of the Third Workshop on Statistical Machine Translation, pp. 70–106, in conjunction with ACL, June 19, 2008, Columbus, Ohio, USA

http://aclweb.org/anthology/W08-03  
Volumen de publicación

Proceedings of the Workshop on Statistical Machine Translation. Association for Computational Linguistics.
Gestión web de usuarios

Sí
Atención a participantes

Email