Overview of the IDPT Task on Irony Detection in Portuguese at IberLEF 2021
Please use this identifier to cite or link to this item:
http://hdl.handle.net/10045/117496
Title: | Overview of the IDPT Task on Irony Detection in Portuguese at IberLEF 2021 |
---|---|
Other Titles: | Resumen de la tarea de detección de ironía en portugués (IDPT) en IberLEF 2021 |
Authors: | Corrêa, Ulisses B. | Coelho, Leonardo | Santos, Leonardo | Freitas, Larissa A. de |
Keywords: | Irony Detection | Portuguese | Tweets | News | Detección de Ironía | Portugués | Noticias |
Knowledge Area: | Lenguajes y Sistemas Informáticos |
Issue Date: | Sep-2021 |
Publisher: | Sociedad Española para el Procesamiento del Lenguaje Natural |
Citation: | Procesamiento del Lenguaje Natural. 2021, 67: 269-276. https://doi.org/10.26342/2021-67-23 |
Abstract: | This paper presents the Task on Irony Detection in Portuguese (IDPT), held within Iberian Languages Evaluation Forum (IberLEF 2021). We asked the participants to develop systems capable of identifying irony in texts. We created two corpora containing tweets and news articles. Twelve teams registered to the task, among which six submitted both predictions and technical reports. The best performing system achieved a Balanced Accuracy (Bacc) value of 0.52 for tweets (Team PiLN) and 0.92 for news (Team BERT4EVER). | Este artículo presenta la Tarea sobre Detección de Ironías en Portugués (IDPT), realizada en el IberLEF 2021. Les pedimos a los participantes que desarrollaran sistemas capaces de identificar la ironía en los textos. Creamos dos corpora que contienen tweets y artículos de noticias. Doce equipos se inscribieron en la tarea, entre los cuales seis presentaron predicciones e informes técnicos. El sistema con mejor rendimiento logró un valor de precisión equilibrada (Bacc) de 0,52 para los tweets (Equipo PiLN) y 0,92 para las noticias (Equipo BERT4EVER). |
URI: | http://hdl.handle.net/10045/117496 |
ISSN: | 1135-5948 |
DOI: | 10.26342/2021-67-23 |
Language: | eng |
Type: | info:eu-repo/semantics/article |
Rights: | © Sociedad Española para el Procesamiento del Lenguaje Natural |
Peer Review: | si |
Publisher version: | https://doi.org/10.26342/2021-67-23 |
Appears in Collections: | Procesamiento del Lenguaje Natural - Nº 67 (2021) |
Files in This Item:
File | Description | Size | Format | |
---|---|---|---|---|
PLN_67_23.pdf | 732,97 kB | Adobe PDF | Open Preview | |
Items in RUA are protected by copyright, with all rights reserved, unless otherwise indicated.