Does topic choice affect high-stakes L2 writing scores?

• Marian Amengual-Pizarro ^[1]
  1. [1] Universidad Islas Baleares
• Localización: Complutense Journal of English Studies, ISSN 2386-3935, Nº. 31, 2023
• Idioma: inglés
• Títulos paralelos:
  • ¿Influye la elección del tema en las puntuaciones de los exámenes estandarizados de producción escrita en la L2?
• Enlaces
  • Texto completo
• Resumen
  • español

    Este estudio se propone investigar los posibles efectos de la elección del tema de las redacciones en las puntuaciones de los candidatos en un examen en L2 estandarizado. Un total de 150 redacciones fueron evaluadas por tres correctores que participaron en la administración de la Prueba de Inglés (PI), incluida en las Pruebas de Acceso a la Universidad, en julio de 2020. Aunque los candidatos mostraron una clara preferencia por una opción temática frente a la otra, no se revelaron diferencias significativas entre las puntuaciones medias otorgadas a ambos temas de la redacción. Estos datos indican que la elección del tema no afecta la calidad de la producción escrita. Los resultados también señalan que la elección temática tuvo escaso impacto en las notas finales de los estudiantes en la PI. Asimismo, no se observaron diferencias significativas en la opción temática elegida en función del nivel de competencia lingüística de los candidatos, lo que sugiere que dicha elección estaría más estrechamente relacionada con las características de los estudiantes (motivación, interés, relevancia, etc.) que con la pregunta de la redacción en sí. Finalmente, se observan posibles interacciones entre las características de los evaluadores y los temas de la redacción.

  • English

    This study sets out to investigate the potential effects of topic choice on test-takers’ L2 writing scores in a high-stakes context. Data were collected from a total of 150 essays that were assessed by three qualified raters who participated as judges in the administration of the high-stakes English Test (ET), included in the Spanish University Admission Examination (SUAE), in July 2020. Although test-takers showed a clear preference for one writing topic choice over the other, results did not reveal statistically significant differences between the average scores awarded to both essay options. Therefore, the data clearly indicate that topic choice does not affect L2 writing quality. Findings also show that choice of topic had little impact on test-takers’ overall performance on the ET. Additionally, no differences in choice patterns were either observed across test-takers’ proficiency levels, which suggests that topic choice may be closely related to test-takers’ characteristics (motivation, interest, relevance, etc.) rather than to the writing prompt itself. Lastly, the data show potential interactions between raters’ characteristics and essay topics which may affect final writing scores.