CoNLL 2009

Campaña

Nombre de la campaña

CoNLL-2009: The Thirteen Workshop on Computational Language Learning @ NAACL

Nombre de la tarea

Syntactic and Semantic Dependencies in Multiple Languages

Tipo de tarea

Clasificación

tarea

Extracción de dependencias sintácticas y semánticas.

Categoría de la tarea

Procesamiento del lenguaje natural

Fecha evento / edición

2009

Organizadores
  • Jan Hajič (chair), Charles University, República Checa
  • Massimiliano Ciaramita, Google Inc., Suiza
  • Richard Johansson, Lund University, Suecia
  • Daisuke Kawahara, NICT, Japón
  • Maria Antonia Martí, University of Barcelona, España
  • Lluís Màrquez, Universitat Politècnica de Catalunya, España
  • Adam Meyers, New York University, EE.UU.
  • Joakim Nivre, Uppsala University, Suecia
  • Jan Štěpánek, Charles University, República Checa
  • Sebastian Padó, Stanford University, EE.UU.
  • Pavel Straňák, Charles University, República Checa
  • Mihai Surdeanu, Stanford University, EE.UU.
  • Nianwen (Bert) Xue, University of Colorado, EE.UU.
  • Yi Zhang, Saarland University, Saarbrücken, Alemania
Grupos destinatarios

Abierto a quien quiera participar: grupos de investigación académicos y de la industria. Han participado: Swedish Institute of Computer Science (Suecia), International Computer Science Institute (EE.UU.), Database Center for Life Science (Japón). 

Elegibilidad

Cualquiera puede participar (grupos de investigación académicos, de la industria o investigadores individuales). 

Calendario
  • 05/01/2009: Inscripción de participantes
  • 05/01/2009: Pequeño conjunto de datos de trial disponible
  • 19/01/2009: Datos de entrenamiento y desarrollo disponibles
  • 11/03/2009: Publicación de datos de test
  • 20/03/2009: Envío de resultados
  • 31/03/2009: Presentación de artículos
  • 08/04/2009: Notificación de aceptación
  • 15/04/2009: Envío artículos final
  • 04-05/06/2009: CoNLL-2009 @ NAACL
Número de participantes

20

Número de participantes de España

1

Dominio

Noticias (agencias EFE, ACN; corpus Lexesp, El Periódico)

Idiomas

Español, catalán y otros idiomas (inglés, alemán, checo, chino, japonés)

Datos

Datos de entrenamiento

Distribuido como CSV.

Derecho de redistribución de datos

Sólo para investigación

Enlace a datasets

http://ufal.mff.cuni.cz/conll2009-st/train-dev-data.html

Resultados

Métrica de evaluación

Macro F1

Rendimiento

Catalán: 83,01

Español: 83,31

Disponibilidad del código

No

Tipo de ejecución

Local

Número total de resultados enviados

33

Resultados con los rankings

Jan Hajic, Massimiliano Ciaramita, Richard Johansson, Daisuke Kawahara, Maria Antonia Martì, Lluíıs Màrquez, Adam Meyers, Joakim Nivre, Sebastian Padó, Jan Stepanek, Pavel Stranak, Mihai Surdeanu, Nianwen Xue, Yi Zhang. The CoNLL-2009 Shared Task: Syntactic and Semantic Dependencies in Multiple Languages. Proceedings of the Thirteenth Conference on Computational Natural Language Learning (CoNLL 2009), colocated with NAACL HLT 2009, June 4-5, 2009, Boulder, CO, USA

http://www.aclweb.org/anthology/W09-1201 

Volumen de publicación

Proceedings of the Thirteenth Conference on Computational Natural Language Learning (CoNLL 2009): Shared Task. Association for Computational Linguistics

Gestión web de usuarios

Atención a participantes

Email