Resumen

Se cree que los rotafolios promueven el aprendizaje de varias maneras y pueden atraer a una gama más amplia de estudiantes con diferentes estilos de aprendizaje. Los rotafolios pueden ser particularmente atractivos en el entorno rural de Kenia, donde los libros de texto son demasiado caros para la mayoría de los estudiantes y muchos estudiantes tienen un dominio limitado del inglés, el medio de instrucción en Kenia y el idioma en el que están escritos todos los libros de texto de Kenia.

Se encontró que el impacto estimado de los rotafolios en los puntajes de las pruebas de los estudiantes era cercano a cero. Un análisis paralelo no aleatorizado estima impactos de cinco a diez veces mayores que las estimaciones basadas en el ensayo aleatorizado. Esto sugiere que las estimaciones no aleatorias están sujetas a un serio sesgo al alza.

Tema de política

Si bien el 85% de los niños en edad escolar primaria están matriculados en la escuela en todo el mundo,¹ estos niveles más altos de inscripción pueden no traducirse en un mayor aprendizaje para los estudiantes en los países en desarrollo, donde la calidad de la educación suele ser baja. La mala educación puede deberse, en parte, a la falta de materiales escolares adecuados, que a menudo no se encuentran en las zonas más pobres o remotas. Existe la creencia generalizada de que la provisión de materiales escolares puede mejorar sustancialmente los resultados educativos en áreas rurales subdesarrolladas, sin embargo, hay poca evidencia empírica que lo confirme.

Contexto de la Evaluación

La gran mayoría de los niños kenianos asisten a la escuela primaria, aunque en las zonas rurales menos de la mitad completa la educación primaria. Las escuelas en este estudio están ubicadas en Busia y Teso, dos distritos agrícolas vecinos en la frontera con Uganda, los cuales tienen ingresos por debajo del promedio de Kenia. Los rotafolios y otras ayudas visuales son raros en las escuelas de estas áreas, y menos de un tercio de las escuelas tenían rotafolios antes del estudio. Incluso los libros de texto son raros: en el grado 8, que es selectivo, alrededor del 40% de los estudiantes tenían libros de texto de matemáticas e inglés, pero el 15% o menos tenían libros de texto de ciencias y otras materias. En los grados inferiores, los libros de texto son aún más raros.

Se cree que los rotafolios promueven el aprendizaje de varias maneras y pueden atraer a una gama más amplia de estudiantes con diferentes estilos de aprendizaje. Los rotafolios pueden ser particularmente atractivos en el entorno rural de Kenia, donde los libros de texto son demasiado caros para la mayoría de los estudiantes y muchos estudiantes tienen un dominio limitado del inglés, el medio de instrucción en Kenia y el idioma en el que están escritos todos los libros de texto de Kenia.

La mayoría de los análisis del efecto de los insumos educativos se basan en estudios retrospectivos, que comparan escuelas con diferentes niveles de insumos. Una posible debilidad de este enfoque es que las entradas observables, como libros de texto y rotafolios, pueden estar correlacionadas con variables no observadas que afectan los resultados educativos. Por ejemplo, si los padres que brindan mejores entornos en el hogar (una característica típicamente no observada) tienden a organizarse para obtener más insumos escolares observados para sus hijos, entonces las estimaciones del efecto de esos insumos escolares en los puntajes de las pruebas pueden estar sesgadas hacia arriba. Esta evaluación compara estimaciones retrospectivas y prospectivas del efecto de los rotafolios en las escuelas primarias de Kenia.

Detalles de la Intervención

En el estudio prospectivo, una ONG holandesa, ICS, entregó cinco juegos de rotafolios (gráficos grandes del tamaño de un póster con material instructivo que se puede montar en las paredes o colocar en caballetes) a cada una de las 89 escuelas primarias de Kenia seleccionadas al azar. La intervención incluyó rotafolios que cubrían matemáticas, geografía, salud y dos gráficos para ciencias (agricultura y ciencias generales), así como una guía para maestros de ciencias. Los gráficos no se guardan en el salón de clases, sino que se traen cuando son relevantes para la lección del día y, por lo tanto, se pueden usar en más de un salón de clases en un día determinado. En la práctica, los maestros de los grados 7 y 8 tienen prioridad sobre el uso de las tablas y representan aproximadamente el 60-75% del uso total.

Los datos disponibles para este estudio son los puntajes de 1997 y 1998 del examen del Certificado de Educación Primaria de Kenia (KCPE), que se toma al final del octavo grado, y los puntajes de los estudiantes de los grados 8-6 en los exámenes de práctica tomados a lo largo de 8 y 1997. Se compararon los puntajes de las pruebas de las escuelas que recibieron la intervención del rotafolio con el grupo de comparación. También se examinaron los datos previos a la intervención sobre el rendimiento escolar en todas las materias.

El análisis retrospectivo utiliza datos de 100 escuelas involucradas en un estudio separado que proporcionó libros de texto y subvenciones para rotafolios a escuelas seleccionadas al azar. El efecto de los rotafolios y otras entradas se estimó utilizando la práctica de 1998 y los puntajes del examen KCPE para los grados 6-8.

Resultados y lecciones de política

La comparación entre las estimaciones prospectivas y retrospectivas del efecto de los rotafolios en las escuelas primarias de Kenia revela que las estimaciones prospectivas aleatorias son mucho más pequeñas que las estimaciones retrospectivas. A pesar de un tamaño de muestra grande y dos años de datos de seguimiento, en el estudio prospectivo se encontró que el impacto estimado de los rotafolios en los puntajes de las pruebas de los estudiantes era cercano a cero.

Por el contrario, utilizando el marco retrospectivo, varias estimaciones convencionales de mínimos cuadrados ordinarios (OLS) sugieren que los rotafolios aumentan las calificaciones de los exámenes de los estudiantes en un 20 por ciento de una desviación estándar. Esto sugiere que las estimaciones retrospectivas están sujetas a un serio sesgo de variables omitidas hacia arriba, incluso cuando se controlan otras entradas observables. La relación entre los insumos escolares y los resultados educativos es fundamental para la política educativa; sin embargo, la política debe reflejar los hallazgos de los estudios prospectivos, ya que los estudios retrospectivos pueden producir resultados engañosos. 

Fuentes

¹ UNICEF, “Información infantil, estadísticas por área/educación”, http://www.childinfo.org/education.html.