NEGES 2018 - Claves de Negación

Campaña

Nombre de la campaña

TASS 2018@ SEPLN

Nombre de la tarea

Tarea 2: Identificación de claves de negación

Tipo de tarea

Tarea de identificación de claves de negación en el área del análisis de opiniones.

tarea

El objetivo de la tarea 2 es el desarrollo y la evaluación de los sistemas de identificación de claves de negación en español en el área del análisis de opiniones. 

Categoría de la tarea

Procesamiento del lenguaje natural

Fecha evento / edición

2018

Organizadores
  • Salud María Jiménez Zafra, Universidad de Jaén, España
  • Noa Cruz Díaz, Savana Médica, Madrid, España
  • Roser Morante, VU Amsterdam, Holanda
  • Maite Martín Valdivia, Universidad de Jaén, España
Grupos destinatarios

Abierto a quien quiera participar: grupos de investigación académicos y de la industria. 

Elegibilidad

Cualquiera puede participar (grupos de investigación académicos, de la industria o investigadores individuales). Hay un control de calidad en los working notes presentados (peer review)

Calendario
  • 20/04/2018: Inscripción abierta
  • 14/05/2018: Training set publicado
  • 13/06/2018: Test set publicado
  • 06/07/2018: Envío del sistema
  • 09/07/2018: Resultados publicados
  • 16/07/2018: Envío de artículos
  • 20/07/ 2018: Notificación de aceptación
  • 27/07/ 2018: Envío de camera read
  • 18/09/2018: Taller NEGES
Número de participantes

2

Número de participantes de España

2

Dominio

Corpus: SFU ReviewSP-NEG. Dominio: Opiniones de productos.

Idiomas

Español

Datos

Datos de entrenamiento

En formato CoNLL (destribuido en TXT).

Derecho de redistribución de datos

Sólo para investigación

Enlace a datasets

Datos obtenidos con el registro a la tarea.

Resultados

Métrica de evaluación

Medidad F1

Rendimiento

Dominios:

  • Coches: 0,90
  • Hoteles: 0,86
  • Lavadoras: 0,86
  • Libros: 0,84
  • Móviles: 0,83
  • Música: 0,83
  • Oredenadores: 0,91
  • Películas: 0.87 
Disponibilidad del código

No

Tipo de ejecución

Local

Número total de resultados enviados

2

Resultados con los rankings

Salud María Jiménez-Zafra, Noa P. Cruz Díaz, Roser Morante, María Teresa Martín Valdivia. Tarea 1 del Taller NEGES 2018: Guías de Anotación (NEGES 2018 Task 1: Annotation Guidelines). Proceedings of NEGES 2018: Workshop on Negation in Spanish, http://ceur-ws.org/ Vol. 2174, pp. 15-21, co-located with the 34th SEPLN Conference (SEPLN 2018), Seville, Spain, September 18th, 2018.

http://ceur-ws.org/Vol-2174/paper4.pdf 

Volumen de publicación

vol. 2174, CEUR-WS.org

Gestión web de usuarios

Atención a participantes

Email