The value of student feedback in open forums: a natural analysis of descriptions of poorly rated teachers

• Autores: Carlos Valcarcel, Jeffrey Holmes, David Berliner, Mari Koerner
• Localización: Archivos Analíticos de Políticas Educativas=Education Policy Analysis Archives, ISSN-e 1068-2341, Vol. 29, Nº. 1, 2021
• Idioma: inglés
• Títulos paralelos:
  • O valor das respostas dos alunos em fóruns abertos: uma análise natural das descrições de professores que foram mal avaliados
  • El valor de las respuestas de los estudiantes en foros abiertos: un análisis natural de las descripciones de los profesores que recibieron una mala calificación
• Enlaces
  • Texto completo
• Resumen
  • español

    En este documento utilizamos el procesamiento del lenguaje natural para revisar cientos de miles de reseñas negativas de los estudiantes sobre sus maestros enviadas al sitio web RateMyTeacher.com. Nuestro análisis identificó varios problemas planteados por los estudiantes al calificar mal a los maestros, lo que se suma a la literatura que define a los “malos maestros” desde la perspectiva del estudiante. También identificamos el idioma que los estudiantes usaron para describir estos problemas y notamos una clara distinción entre el idioma usado para abordar las quejas relacionadas con la enseñanza y el comportamiento percibido como inadecuado para la enseñanza. Argumentamos que los foros digitales pueden ser herramientas valiosas para las escuelas y concluimos con sugerencias y ejemplos del tipo de políticas que se pueden derivar de este tipo de análisis de un foro digital para estudiantes.

  • English

    In this paper we used natural language processing to review hundreds of thousands of negative student reviews of their teachers submitted to the website RateMyTeacher.com. Our analysis identified several issues raised by students when rating teachers poorly,which adds to the literature that defines “bad teachers” from the student perspective. We also identify the language students used to describe these issues and notice a clear distinction between the language used to address teaching-related complaints andbehavior perceived as unfit for teachers. We argue that digital forums can be valuable tools for schools and conclude with suggestions and examples of the type of policies that may be derived from this type of analysis of a digital forum for students.

  • português

    Neste artigo, usamos o processamento de linguagem natural para revisar centenas de milhares de avaliações negativas de alunos de seus professores enviadas para o site RateMyTeacher.com. Nossa análise identificou várias questões levantadas pelos alunos ao avaliar mal os professores, o que contribui para a literatura que define “professores ruins” da perspectiva do aluno. Também identificamos a linguagem que os alunos usam para descrever essas questões e notamos uma distinção clara entre a linguagem usada para lidar com queixas relacionadas ao ensino e o comportamento percebido como impróprio para o ensino. Defendemos que os fóruns digitais podem ser ferramentas valiosas para as escolas e concluímos com sugestões e exemplos do tipo de políticas que podemser derivadas deste tipo de análise de um fórum digital para alunos.