Generación de evidencia
Asia
Generación de evidencia
Asia
Por Erik Andersen, Simon Graffy, Jason T. Kerwin y Monica Lambon-Quayefio
IPA Alianza para la Tecnología en la Educación (P4T-Ed) Esta iniciativa apoya el uso de datos y evidencia para impulsar el aprendizaje y la mejora en el sector de la tecnología educativa. Como parte de la iniciativa P4T-Ed, IPA y la Fundación Jacobs respaldan tres ensayos controlados aleatorios (ECA) para generar evidencia rigurosa sobre el impacto potencial de las intervenciones de tecnología educativa en los resultados del aprendizaje.
Esta es la primera entrada de una serie que destaca los hallazgos clave, las perspectivas y las lecciones aprendidas de los RCT. La serie muestra cómo la evidencia está ayudando a reducir la brecha entre la innovación, la implementación y el impacto en la tecnología educativa.
En este post, el equipo de investigación que trabaja con Maestros inspiradores comparte los primeros resultados del trabajo que permite a los líderes escolares actuar como capacitadores instructivos.
Este blog resume los resultados de una prueba A/B que evalúa la eficacia del uso de líderes escolares como coaches en un programa de pedagogía estructurada en Ghana. Nuestros resultados demuestran que capacitar a líderes escolares y equiparlos con herramientas de coaching basadas en aplicaciones puede mejorar la calidad de la enseñanza en un programa de pedagogía estructurada.
En las aulas de educación infantil de toda África, los resultados de aprendizaje de los niños no alcanzan los estándares globales de educación de calidad. Existe un creciente consenso en que los programas de pedagogía estructurada, que ofrecen a los docentes guías didácticas paso a paso y materiales adaptados para los estudiantes, ofrecen una solución escalable. En 2025, el Panel Asesor de Evidencia Educativa Global (GEEAP) identificó la pedagogía estructurada como una Best Buy para los gobiernos que buscan mejorar el aprendizaje fundamental.
El coaching se considera ampliamente un componente esencial de la pedagogía estructurada. Se recomienda que los coaches visiten las aulas, observen las clases, brinden retroalimentación y modelen buenas prácticas. Conocida a menudo como "supervisión de apoyo", la lógica es que las visitas a las aulas ofrecen un vehículo para la orientación y la rendición de cuentas, lo que permite que los docentes se sientan capacitados y se espere que impartan sus clases diarias con fidelidad. El problema es que mantener un ejército de coaches itinerantes es costoso, como se señala en el informe de la IPA. Informe de mejores apuestas de 2023 lo que destaca la formación docente como una intervención prometedora, para la cual se necesita más investigación para determinar cómo lograr un impacto de manera sostenible y a escala.
Muchos de los programas de alfabetización básica a gran escala de última generación en África, como los financiados por USAID en el marco del Todos los niños leyendo La iniciativa se basó en asesores externos. En el mejor de los casos, se capacitó al personal del distrito, se le proporcionaron tabletas con aplicaciones de asesoramiento preinstaladas y se le asignó la tarea de visitar escuelas. El enfoque funcionó, pero persistían las dudas sobre si el asesoramiento de alta calidad podría implementarse adecuadamente dentro de los gobiernos.
Se procedió a la investigación de implementación. Un ensayo clínico aleatorio demostró que las herramientas de observación basadas en tabletas podían utilizarse para garantizar la calidad del coaching a gran escala. Los programas con coaching fueron eficaces, pero Un análisis de costos de los programas de lectura de USAID reveló que el coaching era a menudo el mayor o el segundo mayor costo continuo de la implementación del programa.
Los optimistas comenzaron a explorar el coaching remoto facilitado por la tecnología. En Sudáfrica, Los primeros trabajos sugirieron que llamar a los profesores podría ser una alternativa viable, pero datos posteriores mostraron que la capacitación en persona era más efectiva.En otros lugares, en Senegal, Se descubrió que el "tele-coaching" era rentable, pero finalmente no fue implementada por el gobierno, que optó por mantener el statu quo al continuar utilizando un modelo de personal itinerante que solo realizaba visitas escolares esporádicas. Esto nos recuerda que la economía política, los incentivos institucionales e incluso la forma en que se evalúan las pruebas determinan qué reformas avanzan.
Hoy en día, con la reducción de la ayuda exterior, la búsqueda de enfoques rentables para apoyar a los docentes en programas de pedagogía estructurada ha cobrado protagonismo. La pregunta para cualquiera que desarrolle un programa hoy en día es: ¿Qué versión de este programa podrían realmente ofrecer los sistemas gubernamentales con calidad?
Inspiring Teachers, una organización sin fines de lucro que opera en Ghana, Uganda y Malawi, utiliza diseño iterativo y programas de prueba para responder a esta pregunta en sus herramientas del programa de Mejora Fundamental del Aprendizaje (TFLI). Nuestro grupo de investigación, con el apoyo de IPA en el marco de la Iniciativa P4T-Ed y del Laboratorio de Acción contra la Pobreza Abdul Latif Jameel (J-PAL) a través de la Iniciativa Aprendizaje para Todos, los apoya en este proceso. Lo hacemos mediante una serie de pruebas A/B en el marco de ensayos controlados aleatorios.
Una de las innovaciones del programa TFLI es que su enfoque de pedagogía estructurada incluye una capa digital: los maestros de aula, los líderes escolares y el personal de campo están equipados con una aplicación llamada SmartCoach, una aplicación móvil que funciona primero sin conexión y que les ayuda a realizar y dar seguimiento a evaluaciones de aprendizaje infantil, visitas escolares y coaching docente, además de proporcionar videos de prácticas pedagógicas clave. Mientras tanto, los gerentes del programa Inspiring Teachers y el personal gubernamental tienen acceso a un panel de control. Disponer de datos exhaustivos en tiempo real sobre la implementación del programa abre nuevas posibilidades de investigación. Nuestro estudio actual ha aprovechado SmartCoach datos para ejecutar nuestra primera prueba A/B comparando dos modelos de entrega diferentes.
Una estrategia para que el coaching sea más rentable sería que los líderes escolares lo implementen. Los líderes escolares (es decir, directores en EE. UU. o directores de escuelas en gran parte del mundo anglófono) ya se encargan de gestionar al profesorado y de brindarles retroalimentación sobre su desempeño. Por lo tanto, lograr que apoyen y supervisen a sus docentes en la implementación de una pedagogía estructurada sería una extensión natural de sus responsabilidades. Sin embargo, los líderes escolares tienen muchas otras responsabilidades, por lo que es posible que actualmente no brinden retroalimentación educativa al profesorado, e incluso si lo hicieran, lograr que lo hagan para un nuevo programa puede ser difícil.
Para estudiar el potencial de este enfoque, implementamos una prueba A/B en nuestras 40 escuelas de tratamiento dentro de un ensayo clínico aleatorio aleatorio (ECA) que probaba el programa Inspiring Teachers TFLI en Cape Coast, Ghana. Los resultados del primer año del ECA son muy prometedores y estarán disponibles en un próximo documento de trabajo.
La idea detrás de las pruebas A/B es probar rápidamente variaciones en un programa para optimizar su rendimiento.Se utilizan ampliamente en el sector tecnológico para proporcionar información rápida en lugar de resultados académicos rigurosos. Por lo tanto, adoptamos un umbral de significación estadística inicial más bajo para esta prueba (70 % en lugar del 95 %), con un resultado "significativo" que orienta la toma de decisiones sobre las opciones a seguir. Predefinimos internamente los resultados que analizaríamos (puntuaciones de las pruebas y calidad docente), en lugar de publicar un plan de análisis en un registro público. como hicimos para el RCT principalAnalizamos los datos de la misma manera que lo haremos para nuestro estudio principal, para evitar buscar hallazgos significativos.
En nuestra prueba A/B, asignamos aleatoriamente 20 escuelas a cada uno de dos grupos:
Realizamos la prueba A/B durante aproximadamente dos meses, desde principios de mayo de 2025 hasta el final del año escolar en junio. En ese momento, recopilamos datos sobre la fidelidad del programa, la calidad de la enseñanza y los niveles de lectura de los niños de ambos grupos. Los datos para esta prueba A/B provinieron de la misma recopilación de datos final que utilizamos en el ensayo clínico aleatorio principal: un conjunto de evaluaciones de lectura y observaciones de clase realizadas en junio de 2025. En las observaciones de clase, los encuestadores registraron si los docentes participaban en diversas actividades y comportamientos docentes al enseñar a leer.
La capacitación de líderes escolares aumentó la calidad docente en 10.6 puntos en nuestra escala de calidad docente de 0 a 100, medida mediante observaciones realizadas por los encuestadores durante el ensayo clínico aleatorio más amplio al final del estudio (véase la Figura 1). A pesar de solo dos meses de duración, este efecto supera nuestro obstáculo interno (70 % de significancia) para un cambio de programa inicialmente prometedor. ¿Qué significa este efecto? El grupo de control obtuvo 43.5 puntos en nuestra escala de calidad docente y el grupo de tratamiento aumentó esa cifra en un 24 %. Observamos que las mejoras en la calidad se debieron a la gestión del comportamiento y a los debates en clase, junto con otros efectos importantes, aunque estimados con poca precisión, derivados de la participación activa de los estudiantes en los debates en clase y de la comprobación proactiva de la comprensión del material por parte de los profesores (véase la Figura 2).
Un análisis de los datos del ensayo clínico aleatorio principal sugiere que una mejora de 0.54 DE en la calidad de la enseñanza podría resultar en una mejora de 0.14 DE en las puntuaciones de la prueba de evaluación de lectura de los primeros grados (EGRA), a lo largo de un año de implementación. Se trata de un aumento significativo. tan grande como el efecto de la intervención educativa media, pero proviene de un complemento bastante pequeño a un programa existente.
Esta prueba A/B demostró que capacitar a líderes escolares como capacitadores dentro de la escuela puede mejorar la calidad de la enseñanza y ayudar a los docentes a ofrecer una pedagogía estructurada con mayor fidelidad.
En consonancia con este hallazgo, Inspiring Teachers optó por incluir la capacitación de líderes escolares como parte de un paquete de apoyo para 80 escuelas públicas del Distrito Metropolitano de Cape Coast en agosto de 2025. Esta fue la primera de nuestras pruebas A/B, y ahora estamos planeando la siguiente, que se centrará en la participación de los padres. Nuestros hallazgos sugieren que los líderes escolares desempeñan un papel importante en la implementación exitosa de programas pedagógicos estructurados.
Esta investigación forma parte de un estudio financiado por la Fundación Jacobs e Innovaciones para la Acción contra la Pobreza a través de la Iniciativa Alianza para la Tecnología en la Educación (P4T-Ed) y el Laboratorio de Acción contra la Pobreza Abdul Latif Jameel (JPAL) a través de la Iniciativa Aprendizaje para Todos. El programa Inspiring Teachers TFLI se creó con el apoyo catalizador de la Fundación IDP y ahora se está expandiendo a escuelas públicas en colaboración con el Servicio de Educación de Ghana, con el apoyo del Programa de Laboratorios de Impacto a Escala del Foro Global de Escuelas y el Fondo Prevail.
