Artificial intelligence-based large language models and integrity of exams and assignments in higher education: the case of tourism courses

• Ülkü, Abdullah ^[1]
  1. [1] Harran University, Turkey. School of Tourism and Hotel Management
• Localización: Tourism & Management Studies, ISSN-e 2182-8466, ISSN 2182-8458, Vol. 19, Nº. 4, 2023, págs. 21-34
• Idioma: inglés
• Títulos paralelos:
  • Inteligência artificial baseada em modelos de linguagem de grande escala e integridade de provas e trabalhos no ensino superior: o caso dos cursos de turismo
• Enlaces
  • Texto completo (pdf)
• Resumen
  • English

    There is an increasing concern regarding the potential misuse of ChatGPT-4 in compromising the integrity of examinations and assignments. This study aims to examine the capabilities of ChatGPT-4 in critical thinking abilities, whether it poses a threat to examinations and assignments in higher education, and create a discussion agenda on this issue. ChatGPT-4 was asked to generate, answer, and criticize questions in tourism marketing, tourism management, tourism economics, tourist guidance, and gastronomy. The answers were evaluated according to universal critical thinking standards. The findings obtained from this study showed that ChatGPT-4 had commendable competence in several critical thinking standards and could produce human-like texts.  However, there are certain domains that might be improved to comply more effectively with the expectations and norms of academia. Educators were recommended to use comprehensive approaches that combine technological and educational techniques to address the issue of cheating enabled by tools, such as ChatGPT-4, during assessment and exam processes.

  • português

    Há uma crescente preocupação em relação ao possível uso indevido do ChatGPT-4 comprometendo a integridade de exames e trabalhos académicos. Este estudo visa examinar as capacidades do ChatGPT-4 nas capacidades de pensamento crítico, avaliar se ele representa uma ameaça para exames e trabalhos no ensino superior e criar uma agenda de discussão sobre esse problema. Solicitou-se ao ChatGPT-4 que gerasse, respondesse e criticasse perguntas nas áreas de marketing turístico, gestão do turismo, economia do turismo, informação turística e gastronomia. As respostas foram avaliadas deacordo com padrões universais de pensamento crítico. Os resultados deste estudo mostraram que o ChatGPT-4 apresentou competência admirável em vários padrões de pensamento crítico e conseguiu produzir textos semelhantes aos humanos. No entanto, há certos domínios que podem ser aperfeiçoados para atender mais efetivamente às expetativas e normas académicas. Recomenda-se que os educadores adotem abordagens abrangentes que combinem técnicas tecnológicas e educacionais para lidar com o problema da fraude, facilitada por ferramentas como o ChatGPT-4, durante processos de avaliação e exames.