Análisis de los errores factuales en los trabajos de fin de títulogenerados por ChatGPT

• González Martín, Ana María ^[1] ; Vigario Castaño, José Antonio ^[1]
  1. [1] Universidad Atlántico Medio
• Localización: Innovación, internacionalización e inclusión en educación / coord. por Ángel Luis González Olivares, Daniela Melaré Vieira Barros, 2025, ISBN 9788410790438, págs. 217-231
• Idioma: español
• Títulos paralelos:
  • Analysis of Factual Errors in Thesis Papers Generated by ChatGPT
• Enlaces
  • Texto Completo Libro
• Resumen
  • español

    La evolución de la inteligencia artificial (IA) y la popularización de su uso con herramientas como ChatGPT implican un cambio sustancial en los procesos de enseñanza-aprendizaje: la IA busca, selecciona y redacta información, optimizando considerablemente el tiempo dedicado a trabajos académicos y científicos. Con todo, cualquier modelo de lenguaje basado en IA presenta errores de diferentes tipos. Los fallos pragmático-discursivos o aquellos relacionados con problemas de razonamiento lógico y comprensión del contexto son fácilmente reconocibles. En cambio, los producidos en el contenido de la información requieren una comprobación de los datos que no siempre se realiza. El presente estudio tiene como objetivo analizar el impacto que tiene el ChatGPT en errores factuales en trabajos de fin de título (TFT). Con este fin, se han analizado los errores en 100 respuestas a preguntas académicas generados por ChatGPT. Establecida una tipología de errores, se crearon dos encuestas, una para alumnos y otra para profesores, para conocer su uso en la redacción de TFT, así como si se realizaba una revisión adecuada de la misma, considerando los errores más frecuentes de la IA. Los resultados parecen apuntar a que la información errónea relacionada con citas académicas e investigaciones podría no estarse corrigiendo.

  • English

    The evolution of Artificial Intelligence (AI) and the popularization of its use with tools such as ChatGPT imply a substantial change in the teaching-learning processes: AI searches, selects and writes information, considerably optimizing the time dedicated to academic work and scientists. However, any language model based on artificial intelligence presents errors of different types. Pragmatic-discursive failures or those related to problems of logical reasoning and understanding of the context are easily recognizable. However, errors in the content of the information require a verification of the data that is not always carried out. The objective of this study is to analyze the impact of ChatGPT on factual errors in final degree projects (TFT). To this end, errors have been analyzed in more than 100 answers to academic questions generated by ChatGPT. Once a typology of errors was established, two surveys were created, one for students and the other for teachers, to know the use of ChatGPT in writing the TFT, as well as whether an adequate review of it was carried out, considering the most frequent errors of the AI. The results seem to suggest that misinformation related to academic citations and research may not be corrected.