En un entorno de financiamiento limitado, el monitoreo, la evaluación y el aprendizaje (MEL) que realmente se centra en el aprendizaje —es decir, en generar los datos correctos para tomar decisiones oportunas e informadas que mejoren los programas y aumenten su impacto— no es opcional. Es la inversión más inteligente para lograr un impacto rentable. Desafortunadamente, la mayoría de los sistemas MEL actuales son deficientes, diseñados principalmente para la rendición de cuentas en lugar del aprendizaje necesario para desarrollar y escalar soluciones eficaces. Es hora de cambiar esto, y los financiadores tienen una responsabilidad especial.

El problema: un sistema MEL roto

Considere este escenario común: Una organización lanza un nuevo programa educativo con una larga y detallada lista de indicadores que se centran en cumplir con los requisitos de los financiadores y en el seguimiento de los resultados, en lugar de comprender qué funciona. Dos años e innumerables hojas de cálculo después, el programa no ha mejorado. Los datos se encuentran en informes que nadie utiliza para tomar decisiones. Mientras tanto, el equipo del programa sospecha que ciertas actividades no funcionan, pero no tiene tiempo para investigar porque está demasiado ocupado recopilando más datos para el próximo informe.

En este escenario, MEL se convierte en un ejercicio de cumplimiento en lugar de una inversión estratégica para orientar la mejora del programa y la toma de decisiones.

Este sistema roto deja a las organizaciones en uno de tres escenarios:

• Se recopilan demasiados datos y no se utilizan todos
• Se recopilan muy pocos datos, que se utilizan únicamente para cumplir con los indicadores de informes predefinidos
• Se recopilan datos erróneos y se utilizan para hacer afirmaciones engañosas

Las organizaciones terminan sintiéndose atrapadas: si no utilizan los datos que recopilan más allá de la elaboración de informes, es un desperdicio. Si los utilizan, pueden ser engañosos. ¿Qué deberían hacer?

La solución: el enfoque de IPA para el MEL centrado en el aprendizaje

El MEL centrado en el aprendizaje revierte esta dinámica. En lugar de utilizar datos únicamente para informar sobre indicadores que no aportan información valiosa, genera los datos adecuados para mejorar los programas y aumentar su impacto.

Este enfoque se basa en el trabajo de Dean Karlan y Mary Kay Gugerty. Goldilocks Challenge libro, que llama a invertir en evidencia adecuada, alineando los enfoques de aprendizaje con el nivel de madurez de un programa.

IPA estableció la Unidad de Evidencia Adecuada (RFE) en 2017, para actuar en respuesta a este llamado. En RFE, partimos de una pregunta: ¿Qué necesita aprender esta organización ahora mismo? Las respuestas se basan en:

• Las decisiones que las actividades de aprendizaje informarán
• El nivel de madurez del programa
• Los enfoques más rentables para generar ese aprendizaje

Este enfoque es transformador: ayudar a las organizaciones a utilizar la evidencia para aprender, adaptarse y amplificar su impacto.

Cómo se ve en la práctica el MEL centrado en el aprendizaje

Tres principios fundamentales guían este enfoque:

La relación entre aprendizaje y costo: Antes de recopilar cualquier dato, pregunte: ¿Cómo se utilizarán los datos? ¿Informarán sobre una decisión específica o contribuirán a la mejora del programa? Los costos de recopilación de datos deben estar acordes con el valor del aprendizaje. La priorización es fundamental: concéntrese en la recopilación de datos que genere el mayor valor de aprendizaje.

Los primeros resultados como punto óptimo de aprendizaje: Los programas pueden medir cambios en conocimientos, actitudes, prácticas o comportamientos mucho antes de obtener resultados finales. Estos indicadores tempranos se mueven con rapidez, proporcionan señales prácticas para refinar las intervenciones y ayudan a determinar si un programa está listo para una evaluación de impacto.

Una cultura de aprendizaje impulsada por el liderazgo: El MEL centrado en el aprendizaje funciona cuando el liderazgo valora las decisiones basadas en la evidencia, creando un espacio para que los equipos inviertan en el aprendizaje y actúen según los hallazgos. Esto implica celebrar los fracasos y corregir el rumbo con valentía.

En la práctica, estos principios se traducen en tres acciones concretas:

Recopilación de datos adecuados: Recopile datos en la misma proporción en que los analiza y analícelos en la misma proporción en que los utiliza para tomar decisiones o para el aprendizaje. Priorice los datos que aporten el mayor valor de aprendizaje.

Enfoques basados ​​en etapas: Adaptar la metodología a la etapa del programa: Las ideas requieren prototipos, los pilotos requieren ciclos de retroalimentación rápidos, los programas más maduros requieren estimaciones de impacto rigurosas y los programas que operan a gran escala necesitan datos de calidad de implementación. No todo requiere una evaluación aleatoria (RCT). Pasar directamente a una evaluación de impacto antes de resolver los problemas desperdicia recursos y, a menudo, genera resultados decepcionantes.

Colaboración entre MEL y los equipos del programa: Los equipos de MEL deben trabajar en estrecha colaboración con los equipos de programa como verdaderos socios, colaborando no solo para generar datos relevantes, sino también para fundamentar las decisiones. MEL no puede aislarse en un departamento aparte.

El papel de los financiadores

Los socios implementadores no pueden transformar MEL solos.

Los financiadores desempeñan un papel fundamental en la gestión de este cambio. Sus requisitos de información crean incentivos y configuran cómo se recopila, utiliza y valora la evidencia, lo que propicia un tipo diferente de rendición de cuentas que recompensa el aprendizaje, la adaptación y la transparencia.

Los financiadores pueden y deben:

• Diseñar subvenciones para el aprendizaje, no solo para su entrega, y asignar tiempo y presupuesto para pruebas iterativas;
• Adecuar la metodología a la etapa, financiar métodos de retroalimentación rápida cuando se desarrollan nuevas intervenciones y financiar evaluaciones rigurosas cuando los programas maduran; y
• Cambiar los requisitos para priorizar la reflexión y la adaptación sobre la presentación de informes sobre indicadores predefinidos.

Cuando los financiadores presionan para que los programas se expandan antes de saber qué funciona, o exigen evaluaciones de impacto antes de que los programas hayan perfeccionado su enfoque, contribuyen al sistema roto.

Para obtener más información sobre el papel que desempeñan los financiadores en este cambio, lea nuestra publicación, Habilitar el aprendizaje por etapas: guía para donantes para maximizar el impacto.

El recorrido de RFE: Lecciones de nuestro trabajo

En RFE, hemos incorporado estos principios en nuestro trabajo de asesoramiento con más de 100 socios en más de 20 países durante los últimos ocho años, trabajando en África, América Latina y más allá, tanto en contextos de desarrollo como humanitarios.

Nuestra cartera ha evolucionado desde el apoyo a programas específicos hasta la influencia en iniciativas más amplias y la colaboración con financiadores e implementadores en sus sistemas MEL completos. RFE ha trabajado con: 

• Fundaciones globales y regionales, incluidas The LEGO Foundation en África y VélezReyes+ en América Latina, para estructurar sistemas de aprendizaje para toda la cartera y prioridades de inversión estratégicas.
• Implementadores en América Latina, África y Asia, como BRAC, Fundación Juanfe, Ubongo, Ei Mindspark y One Acre Fund, para incorporar MEL centrado en el aprendizaje en su programación mediante el diseño de planes de aprendizaje, la prestación de asistencia técnica, la creación de sistemas de pruebas A/B, la realización de investigaciones y pruebas de usuarios, entre muchas otras formas de asesoramiento técnico sobre MEL.
• Los gobiernos, incluido el Ministerio de Educación de Ghana y la Agencia de Primera Infancia de Colombia, para incorporar el aprendizaje temprano centrado en el aprendizaje en sus operaciones mediante el desarrollo de capacidades y el apoyo técnico, en algunos casos a través de IPA. Laboratorios de Gobierno.

A lo largo de estas experiencias, hay una verdad que permanece constante: priorizar el aprendizaje es una inversión inteligente.

Para obtener más información sobre el trabajo de RFE, visite nuestro sitio web .

Mirando hacia el futuro: Por qué esto importa ahora más que nunca

El sector de desarrollo enfrenta hoy graves limitaciones financieras, lo que aumenta el riesgo de que el campo recurra a un sistema MEL roto, que prioriza la rendición de cuentas a expensas de la inversión en aprendizaje.

Los programas que incorporan MEL centrado en el aprendizaje detectan los problemas a tiempo y se adaptan rápidamente. Evitan el desperdicio de recursos en enfoques ineficaces o en la recopilación de datos innecesaria y costosa que no se ajusta a sus necesidades de aprendizaje.

La tecnología abarata y acelera el aprendizaje, y la IA está transformando rápidamente las posibilidades y la forma en que se desarrollan el aprendizaje y la toma de decisiones. Los paneles digitales ahora pueden mostrar a los equipos de programas qué actividades están funcionando en cuestión de minutos. La recopilación de datos móviles captura la opinión de los participantes a una fracción del costo de las encuestas tradicionales. Y las herramientas basadas en IA pueden analizar grandes volúmenes de datos cualitativos en segundos.

Pero la tecnología y la IA deben estar ancladas en sistemas de aprendizaje y datos sólidos y adecuados (creando capacidad y mejorando la infraestructura de datos) para que las organizaciones puedan hacer más pruebas, aprender más rápido y adaptarse con confianza, al mismo tiempo que reducen el costo por ciclo de aprendizaje mediante enfoques adecuados.

A medida que la financiación se reduce y la tecnología y la inteligencia artificial se aceleran, la pregunta no es si las organizaciones pueden permitirse invertir en aprendizaje, sino si podemos permitirnos no hacerlo.

Este blog inicia una serie sobre el aprendizaje basado en el aprendizaje (MEL) en la práctica. Manténgase al tanto de las próximas publicaciones.