Resumen de Using global observation protocols to inform research on teaching effectiveness and school improvement: strengths and emerging limitations

Sean Kelly, Robert Bringe, Esteban Aucejo, Jane Fruehwirth

• español

  Una característica esencial de varios protocolos de observación es su aproximación “global” a la medición de métodos de instrucción. Dichos protocolos proveen una evaluación sumaria de múltiples aspectos de instrucción docente que son creados en base al análisis de observadores de clases. A pesar de que estos protocolos presentan fortalezas, incluyendo su compresivo análisis y avanzado estado de desarrollo, en este estudio argumentamos que dichos protocolos tienen limitaciones inherentes que afectan tanto a su uso para investigación como para la implementación de esfuerzos relacionados con el mejoramiento de escuelas. En base al análisis de datos generados por el estudio Medidas de Enseñanza Efectiva, exploramos cinco potenciales limitaciones de los protocolos globales. Concluimos el análisis discutiendo medidas detalladas de instrucción, incluyendo herramientas que se relacionan con métodos automatizados de observación, como una alternativa con el potencial para superar varias de las limitaciones fundamentales de los protocolos globales.

• português

  Uma característica essencial de vários protocolos de observação é sua abordagem "global" para a medição de métodos instrucionais. Esses protocolos fornecem uma avaliação resumida de vários aspectos da instrução de ensino criados com base na análise dos observadores de classe. Embora esses protocolos tenham pontos fortes, incluindo sua análise compressiva e status de desenvolvimento avançado, neste estudo, argumentamos que esses protocolos têm limitações inerentes que afetam tanto seu uso em pesquisas quanto na implementação de esforços relacionados à melhoria da escola. Com base na análise dos dados gerados pelo estudo Effective Teaching Measures, exploramos cinco limitações potenciais de protocolos globais. Concluímos a análise discutindo medidas instrucionais detalhadas, incluindo ferramentas relacionadas a métodos automatizados de observação, como uma alternativa com o potencial de superar várias das limitações fundamentais dos protocolos globais.

• English

  An essential feature of many modern teacher observation protocols is their “global” approach to measuring instruction. Global protocols provide a summary evaluation of multiple domains of instruction from observers’ overall review of classroom processes. Although these protocols have demonstrated strengths, including their comprehensiveness and advanced state of development, in this analysis we argue that global protocols also have inherent limitations affecting both research use and applied school improvement efforts. Analyzing the Measures of Effective Teaching study data, we interrogate a set of five potential limitations of global protocols. We conclude by discussing fine-grained measures of instruction, including tools that rely on automated methods of observation, as an alternative with the potential to overcome many of the fundamental limitations of global protocols.