Fortalecimiento de los sistemas de monitoreo, evaluación y aprendizaje (MEL) de BRAC International: Desde un solo diagnóstico hasta la transformación de toda la organización

Tipo(s) de servicios RFE: MEL Diagnóstico, Asistencia Técnica
Socio(s) principal(es): BRAC Internacional
Línea de tiempo: 2019 - 2021
Descripción de una oración: La Unidad de Evidencia de Ajuste Correcto (RFE) de IPA se asoció con BRAC International para realizar un diagnóstico de sus prácticas de Monitoreo, Evaluación y Aprendizaje (MEL). Lo que comenzó como un diagnóstico único de un gran programa agrícola en Liberia se convirtió en un esfuerzo de toda la organización para mejorar la mejora continua en el diseño y la implementación del programa.

El Desafío

BRAC a menudo se considera la organización no gubernamental más grande del mundo. Su sucursal internacional, BRAC International, opera en 10 países y docenas de proyectos en educación, salud, alivio de la pobreza y asistencia humanitaria. La organización es ampliamente reconocida como pionera en el desarrollo de programas basados ​​en evidencia. Por ejemplo, el conocido enfoque Graduación de los ultrapobres (UPG) y el programa Empowerment and Livelihood for Adolescent (ELA) se originaron en BRAC y fueron el producto de esfuerzos deliberados que pusieron el uso iterativo de la evidencia en el centro del desarrollo del programa. Sin embargo, al igual que muchas organizaciones grandes y diversas con una cultura de uso de evidencia, BRAC enfrenta el desafío de garantizar que los datos se recopilen de manera creíble y se utilicen de manera efectiva en todos los ámbitos, no solo con fines de rendición de cuentas, sino también para informar el aprendizaje real. En consecuencia, BRAC International tenía el objetivo de fortalecer sus mecanismos de monitoreo y evaluación para garantizar que permita la mejora, tanto en el diseño como en la implementación del programa.

El Compromiso

BRAC International contactó a la Unidad Right-Fit Evidence (RFE) de IPA para realizar una evaluación en profundidad de su monitoreo y evaluación existentes en un gran proyecto agrícola en Liberia. La evaluación involucró la revisión de las pautas y los procedimientos de MEL, y el análisis de cómo se recopilaron los datos y si se usaron y cómo. Este diagnóstico participativo produjo una lista de mejoras “rápidas” que el proyecto y los equipos de MEL en Liberia podrían implementar rápidamente para fortalecer la calidad y el uso de los datos. Ejemplos de estas mejoras incluyeron modificaciones de instrumentos de encuesta, mecanismos específicos de control de calidad y el fortalecimiento de rutinas en torno al uso de datos.

En la segunda fase, el compromiso se amplió para brindar asistencia técnica para implementar las recomendaciones propuestas y transformar el proyecto de Liberia en un "ejemplo" de las últimas prácticas de MEL de las cuales toda la organización podría aprender. Este proceso duró 10 meses e incluyó la capacitación de los equipos de M&E y del proyecto sobre la recopilación de comentarios de los beneficiarios, el muestreo y los controles de calidad, el uso de datos y los enfoques para permitir el aprendizaje continuo del programa, entre otros temas. Durante este proceso, el equipo de RFE se comprometió ampliamente con el equipo de BRAC Liberia, pero también con las partes interesadas clave de BRAC International a nivel regional y global para garantizar una amplia visibilidad y propiedad de las lecciones que se estaban aprendiendo. El equipo de RFE también revisó y propuso enmiendas a los protocolos MEL de BRAC International, que se probaron en el proyecto de Liberia, se refinaron y luego se adoptaron formalmente para la organización en su conjunto.

El compromiso de RFE luego se expandió a una tercera fase para evaluar las prácticas de MEL de BRAC International como organización, en lugar de en el contexto de un proyecto específico. El equipo de RFE realizó otros tres diagnósticos de MEL de toque ligero en diferentes proyectos y entrevistas en profundidad con varias partes interesadas, incluido el personal de los departamentos de administración, M&E, investigación, operaciones de programas y recaudación de fondos. RFE también realizó un análisis de las necesidades y capacidades tecnológicas relacionadas con MEL tanto de BRAC International como de organizaciones similares. Finalmente, el equipo facilitó una serie de talleres en los que los líderes de BRAC International desarrollaron un plan de acción concreto para mejoras a nivel de sistema en los aspectos fundamentales de MEL en BRAC International (por ejemplo, agendas de aprendizaje, enfoque de evaluaciones, prácticas presupuestarias, capacidad, estructuras de personal, interacciones con la recaudación de fondos, etc.) y seleccionó las soluciones tecnológicas más adecuadas para permitir algunas de esas mejoras a través de la digitalización MEL.

Los resultados

A fines de 2020, BRAC International había implementado muchas mejoras tangibles en sus sistemas y rutinas MEL. BRAC International actualizó formalmente sus procedimientos operativos estándar de MEL para reflejar las mejores prácticas y lanzó los procedimientos actualizados para todos los programas y equipos de M&E, lo que condujo a prácticas de MEL más sólidas en toda la organización.

A mediados de 2021, el liderazgo senior de BRAC International adoptó la hoja de ruta de fortalecimiento y digitalización de MEL. Esta hoja de ruta informará el fortalecimiento continuo de la organización de sus sistemas y prácticas de MEL en los próximos años. Esperamos que este compromiso contribuya significativamente a mejorar la calidad del programa al facilitar la toma de decisiones basada en datos. A la larga, el conocimiento y el aprendizaje generados a través de un mejor seguimiento y evaluación respaldarán el desarrollo de programas más innovadores como Graduación de ultrapobres y Empoderamiento y medios de subsistencia para adolescentes, que en última instancia beneficiarán a los pobres a los que llegan las operaciones de BRAC International y más allá.