Generación de evidencia
Asia
Generación de evidencia
Asia
Este blog se basa en el próximo estudio “Cómo los laboratorios integrados en la educación están promoviendo el uso de datos y evidencia” y es parte de una serie de blogs de tres partes de nuestra campaña, Haz más con lo que funciona. La parte 2 es aquí.
¿Alguna vez has planeado ir al gimnasio pero terminaste viendo Netflix? A todos nos ha pasado. Cambiar es difícil, no porque nos falten buenas intenciones, sino porque requiere empuje y un entorno que te apoye.
Lo mismo ocurre con los gobiernos. Los funcionarios públicos pueden querer genuinamente crear mejores políticas basándose en la evidencia de lo que realmente funciona. Pero incluso con las mejores intenciones, un sistema complejo y la inercia institucional a menudo se interponen en el camino.
Esto es importante porque los gobiernos llegan a millones de personas a través de sus políticas y programas. En el mundo actual de desarrollo en declive... financiamientoExiste una enorme oportunidad de maximizar el impacto ayudando a los gobiernos a utilizar sus presupuestos nacionales de manera más efectiva, invirtiendo en programas que han demostrado funcionar.
Para ayudar a los gobiernos a utilizar la evidencia se necesita un enfoque múltiple: uno que no sólo fomente la voluntad de los responsables de las políticas de usar la evidencia sino que también aborde los sistemas en los que operan.
Para abordar este desafío, el IPA está apoyando a 24 gobiernos de ocho sectores diferentes para establecer sus Laboratorios de Gobierno (Laboratorios), equipos que trabajan dentro del gobierno para conectar sistemáticamente la investigación con la toma de decisiones.
En este blog, describimos cómo estos laboratorios no solo generan evidencia, sino que también abordan factores individuales, grupales y sistémicos para respaldar su uso eficaz en las políticas públicas. ¡Únase a nosotros para descubrir cómo podemos ayudar a los gobiernos a que se esfuercen!
Si observamos cómo se utilizan las pruebas en las instituciones públicas, a menudo se parece al exitoso programa de Netflix CalamaresEn la serie, los participantes corren a través de un circuito lleno de trampas y de alto riesgo, y solo uno logra llegar al final.
Los esfuerzos para fundamentar políticas con evidencia se enfrentan a un camino igualmente brutal. La Figura 1 nos ofrece una visión simplificada de lo caótico y complejo que puede ser el proceso de la evidencia a través del gobierno, que a menudo no llega a su destino previsto.
Figura 1. Una versión simplificada del recorrido de la evidencia dentro de los gobiernos
Establecer una base de evidencia: Desde el principio, el recorrido de la evidencia puede ser breve. Por ejemplo, la evidencia podría mostrar que una nueva política es ineficaz y, por lo tanto, se descarta, lo cual es un resultado relativamente positivo. O bien, la evidencia es prometedora, pero no concluyente, y se necesita más investigación.
Adopción de políticas: Supongamos que la evidencia demuestra que la política es eficaz. El siguiente paso es que los responsables de la toma de decisiones la adopten. Pero ¿quiénes son exactamente estos responsables? ¿Son expertos técnicos o líderes políticos? ¿Quiénes defenderán su inclusión en el presupuesto? ¿Confiarán en los resultados? Si la estructura de toma de decisiones, incluyendo... intereses Si no se identifican y abordan claramente los factores en juego, así como la dinámica de poder y la capacidad que moldean la comprensión de los actores, la voluntad de aceptar la evidencia y el compromiso con el cambio, existe un riesgo significativo de que la evidencia quede relegada a un segundo plano o se le dé menos prioridad. La adopción (también denominada captación) se define como la intención, decisión inicial o acción de probar o emplear una innovación o práctica basada en evidencia.. Más información
Implementación: Suponiendo que las partes interesadas pertinentes adopten la política, viene la implementación. Esta debe implementarse de forma eficaz y sostenida en el tiempo. ¿Cómo se integrará en la estructura operativa de la agencia? ¿Cómo se supervisará y ajustará para lograr la fidelidad de su implementación? ¿Quién abogará por su continuidad cuando cambien las prioridades políticas o las administraciones? Implementar una nueva política requiere cambios en el funcionamiento interno del sistema, así como apoyo continuo para garantizar su correcta y sostenible implementación; de lo contrario, existe el riesgo de que la política sea ineficaz o se suspenda.
Tomemos el caso de la Decidiendo por un Futuro Mejor Programa (DFM), una de las iniciativas apoyadas por la Laboratorio Integrado del Ministerio de Educación del Perú (MineduLab).
El Laboratorio evaluó una estrategia basada en videos para cambiar la percepción de los estudiantes sobre el valor de regresar a la escuela. La estrategia demostró ser eficaz para reducir las tasas de deserción escolar. Esto condujo a una ampliación inicial en 2018, cuando los videos se integraron en el programa de educación secundaria de jornada completa. Sin embargo, debido a cambios en el modelo de implementación del programa, el componente de videos se suspendió.
No fue hasta 2021 que la estrategia fue... ampliado de nuevoEsta vez, como parte de la estrategia de educación a distancia del Ministerio durante el cierre de escuelas por la COVID-19. Al priorizarse la reducción del abandono escolar durante la pandemia, se abrió una ventana de oportunidad política que permitió que la intervención basada en evidencia ganara apoyo y se reimplementara, con la transmisión de los videos a nivel nacional en la televisión pública.
Esta historia ilustra que el uso de la evidencia no es un proceso lineal. Va más allá de la investigación y la difusión. Múltiples actores con diferentes intereses toman decisiones en distintos momentos. El uso de la evidencia a menudo requiere cambios sistémicos, como ajustes presupuestarios o de estrategias de implementación, que evolucionan con el tiempo.
De muchas ideas prometedoras, sólo unas pocas logran implementarse, y aún menos se sostienen.
La adopción e implementación sostenida de políticas basadas en evidencia requiere estrategias que aborden simultáneamente múltiples desafíos interrelacionados. Los laboratorios buscan precisamente esto. Son equipos gubernamentales que trabajan junto con los responsables de la toma de decisiones para identificar problemas, generar datos y evidencia, y apoyar su uso. A través de sus actividades, los laboratorios combinan estrategias lineales, relacionales y sistémicas para facilitar el uso de la evidencia.Best y Holmes, 2010).
Desde un perspectiva linealLos laboratorios integrados diseñan conjuntamente agendas de investigación y diseños de estudios con las partes interesadas del sistema (por ejemplo, unidades gubernamentales que diseñan e implementan políticas), implementan estrategias de generación de evidencia y aprendizaje, y llevan a cabo una difusión estratégica a través de formatos fáciles de usar y prácticos (por ejemplo, informes de políticas) y diversos canales de comunicación (por ejemplo, talleres).
Este enfoque se ve reforzado por: estrategias relacionalesEn este proyecto, los Laboratorios Integrados establecen alianzas con actores clave involucrados en la generación y el uso de evidencia, apoyándolos en el desarrollo de las habilidades y el conocimiento necesarios para una participación efectiva. Por ejemplo, para un proyecto específico, los Laboratorios crean colaboraciones entre investigadores académicos y responsables de políticas educativas e implementan actividades de fortalecimiento de capacidades, como capacitación en metodologías de generación de evidencia, garantizando así que las alianzas estén bien preparadas para codiseñar, decidir e implementar políticas basadas en evidencia. Estos proyectos se codiseñan, centrándose en cuestiones relevantes para las políticas identificadas con los responsables de políticas e incorporando sus conocimientos y objetivos tanto en el diseño como en la implementación.
Además, los laboratorios adoptan un enfoque de sistemas Que reconoce el contexto organizacional en el que se genera y utiliza la evidencia. Al reconocer que estos actores funcionan dentro de marcos institucionales, los Laboratorios abordan las condiciones organizacionales necesarias para implementar políticas basadas en evidencia. Formar equipos dentro del gobierno les permite comprender no solo los procesos y plazos gubernamentales, sino también las relaciones de poder y las narrativas que influyen en la toma de decisiones. Por ejemplo, al escalar una intervención basada en evidencia, como la capacitación docente, un equipo de Laboratorio puede apoyar el desarrollo o la mejora de los sistemas de información de las agencias gubernamentales para permitir el monitoreo de la implementación de políticas, garantizando así la fidelidad y la eficacia a escala. También pueden ayudar a las unidades gubernamentales a promover el apoyo político y la modificación de los marcos legales o manuales operativos, entre otras actividades.
Un ejemplo de cómo los laboratorios combinan enfoques lineales, relacionales y sistémicos es el caso del Laboratorio Integrado de Educación de RuandaEste laboratorio opera bajo el Ministerio de Educación (MINEDUC), en estrecha coordinación con la Autoridad Nacional de Exámenes e Inspección Escolar (NESA) y la Junta de Educación de Ruanda (REB).
El Laboratorio apoya la ampliación de los contratos docentes basados en el desempeño. El programa, evaluado rigurosamente en colaboración con investigadores de la Universidad de Georgetown y el IPA, mostró mejoras tanto en el desempeño docente como en el aprendizaje estudiantil. Tras estos resultados positivos, el Ministerio solicitó al Laboratorio que ampliara el programa y probara diferentes métodos de implementación para identificar el enfoque más eficaz, mediante ensayos controlados aleatorios (ECA), un ejemplo clave de un enfoque lineal para la asimilación de la evidencia.
Al mismo tiempo, el Laboratorio aplica enfoques relacionales y sistémicos. Por ejemplo, el enfoque sistémico se centra en el desarrollo de sistemas de información como el Sistema Integral de Información para la Gestión de la Evaluación (CAMIS) y el Sistema de Información para la Gestión Docente (TMIS), así como en el desarrollo de capacidades y el desarrollo de un sistema MEL para garantizar una implementación de calidad a gran escala. El enfoque relacional incluye la coordinación entre organismos gubernamentales, como la Junta de Educación de Ruanda y la Autoridad Nacional de Exámenes e Inspección Escolar (NESA), y la promoción de la priorización de las iniciativas de ampliación a todos los niveles dentro de estos organismos. En conjunto, estos enfoques permitieron que el programa de incentivos llegara a 4,762 docentes y 207,523 2023 alumnos de primaria para XNUMX.
Incluso con todas estas estrategias combinadas, como demuestra el caso de DFM, el éxito a menudo depende de estar en el lugar correcto en el momento oportuno y aprovechar las oportunidades. Esto requiere... presencia permanente dentro del sistema y la confianza necesaria para ser invitados a reuniones clave donde se toman decisiones, algo que los equipos internos están en una posición única para hacer.
El camino desde la generación de evidencia hasta la implementación sostenida a gran escala es complejo. Requiere estrategias multifacéticas que van más allá de producir y compartir evidencia. Las dimensiones relacionales y sistémicas son clave.
Usar evidencia significa transformar el sistema, un sistema compuesto por personas y grupos con intereses diversos. Los Laboratorios de Evidencia Integrada, como actores internos que forjan alianzas dentro y fuera del sistema y mantienen una presencia a largo plazo, están bien posicionados para facilitar este tipo de cambio sistémico.
Durante más de una década, IPA ha apoyado a gobiernos en el establecimiento de Laboratorios de Evidencia Integrada. Actualmente, colaboramos con 24 agencias gubernamentales para codiseñar e institucionalizar sus Laboratorios. Estas alianzas abarcan la educación, la salud, el medio ambiente y otros sectores cruciales para la reducción de la pobreza.
La evidencia es clara: cuando los gobiernos utilizan sistemáticamente datos y evidencia para fundamentar sus políticas, pueden servir con mayor eficacia a millones de ciudadanos. El reto no es solo generar evidencia, sino garantizar que sobreviva el proceso de la investigación a la implementación.
En el próximo blog de esta serie, analizaremos el enfoque del IPA para codiseñar e institucionalizar laboratorios dentro del gobierno, creando sistemas que faciliten la incorporación de evidencia en los procesos de toma de decisiones e implementación.
