Characterizing Spans for Sequence Labeling: A Case on Anglicism Detection

• Autores: Elena Álvarez Mellado, Julio Gonzalo Arroyo
• Localización: Procesamiento del lenguaje natural, ISSN 1135-5948, Nº. 73, 2024, págs. 235-246
• Idioma: inglés
• Títulos paralelos:
  • Caracterización de spans en tareas de etiquetado de secuencias: el caso de la detección de anglicismos
• Enlaces
  • Texto completo
• Resumen
  • español

    Presentamos un conjunto de dimensiones para caracterizar spans en la evaluación de etiquetado de secuencias y las aplicamos a la tarea de detección de anglicismos en castellano. Los resultados muestran que las dimensiones ayudan a desenmascarar limitaciones que pasaron desapercibidas en la evaluación estándar.

  • English

    We propose a set of formal dimensions to characterize spans in sequence labeling evaluation. We apply them to a dataset and model results obtained for anglicism detection in Spanish. Results show that the best performing system is outperformed by other models on certain types of spans. Our methodology can uncover limitations in performance that go unnoticed with standard evaluation.