TASS 2017 - Aspect-based sentiment analysis

Compartir

Campaña

Nombre de la campaña

TASS 2017 @ SEPLN
Nombre de la tarea

Task 2: Aspect-based sentiment analysis
Tipo de tarea

Tarea de análisis de sentimiento
Descripción de la tarea

Esta segunda tarea propone el desarrollo de sistemas de clasificación de polaridad basados en aspectos. Se proporcionan dos datasets para evaluar los sistemas: Social-TV y STOMPOL. Los sistemas deben clasificar la opinión sobre el aspecto dado en un rango de opinión de nivel de tres intensidades: Positivo, Neutral y Negativo. 
Categoría de la tarea

Procesamiento del lenguaje natural
Fecha evento / edición

2017
Organizadores
  • Julio Villena-Román, Daedalus, España
  • Miguel Ángel García-Cumbreras, Universidad de Jaén, España
  • Eugenio Martínez-Cámara, Universidad de Jaén, España
  • Manuel Carlos Díaz-Galiano, Universidad de Jaén, España
  • Manuel García Vega, Universidad de Jaén, España
Grupos destinatarios

Abierto a quien quiera participar: grupos de investigación académicos y de la industria.

Elegibilidad

Cualquiera puede participar (grupos de investigación académicos, de la industria o investigadores individuales). 
Calendario
  • 01/05/2017: Publicación corpus de entrenamiento
  • 20/06/2017: Publicación corpus de test
  • 30/06/2017: Fecha límite de inscripción a tareas
  • 04/07/2017: Envío y evaluación de resultados
  • 18/07/2017: Envío artículos
  • 31/07/2017: Notificación de revisión
  • 31/08/2017: Envío versión final artículos
  • 15/09/2017: Publicación
  • 19/09/2017: Taller
Número de participantes

7
Número de participantes de España

5
Dominio
  • General Corpus: tweets escritos por celebridades del mundo de la política, la economía, la comunicación, los medios de comunicación y la cultura.
  • Social-TV Corpus: este corpus fue recolectado durante la Final de la Copa del Rey entre Real Madrid y F.C. Barcelona, que se jugó el 16 de abril de 2014 en el estadio de Mestalla en Valencia.
  • STOMPOL: corpus de Tweets en español para opinión de opinión a nivel de política; es un corpus de tweets en español preparados para la investigación en la difícil tarea de la minería de opinión en nivel de aspecto.
Idiomas

Español

Datos

Datos de entrenamiento

Formato XML
Derecho de redistribución de datos

Sólo para investigación
Enlace a datasets

http://www.sepln.org/workshops/tass/2017/#datasets

Resultados

Métrica de evaluación

Macro-F1.
Rendimiento
  • General Corpus: 0,56
  • Social-TV Corpus: 0,54
  • STOMPOL: 0,54 
Disponibilidad del código

No
Tipo de ejecución

Local
Número total de resultados enviados

33
Resultados con los rankings

Eugenio Martínez Cámara, Manuel Carlos Díaz Galiano, Miguel Ángel García Cumbreras, Manuel García Vega. Overview of TASS 2017.  Proceedings of TASS 2017: Workshop on Sentiment Analysis at SEPLN, http://ceur-ws.org, Vol. 1896, pp. 13-21, co-located with 33nd SEPLN Conference (SEPLN 2017), Murcia, Spain, September 19th, 2017

http://ceur-ws.org/Vol-1896/p0_overview_tass2017.pdf 
Volumen de publicación

vol. 1896, CEUR-WS.org
Gestión web de usuarios

Sí
Atención a participantes

Email: tass@daedalus.es