Tipo de participación en RFE: Apoyo metodológico

La Unidad de Evidencias de Aptitud Correcta (RFE) del IPA brindó apoyo metodológico para ayudar a establecer el Fondo de Financiamiento Vinculado al Impacto (ILFF) con un enfoque para establecer métricas basadas en resultados. El objetivo de este enfoque es seleccionar métricas de pago que midan con precisión los resultados, para incentivar a los implementadores a lograr el mayor impacto posible. Esta orientación permitió a los administradores de fondos estructurar contratos basados en resultados con un enfoque de verificación factible y rentable, asegurando un impacto significativo para los estudiantes.

El Fondo de Financiación Vinculada al Impacto (ILFF), iniciado por la Fundación Jacobs y la Agencia Suiza para el Desarrollo y la Cooperación, tiene como objetivo alinear los incentivos para las empresas sociales, permitiéndoles priorizar el impacto social junto con las ganancias. El ILFF requería una medición precisa de los resultados finales vinculados a los pagos, una tarea complicada por el alto costo y la duración de los ensayos controlados aleatorios tradicionales (ECA).

ILFF solicitó la experiencia de IPA en medición rigurosa de impacto y recopilación de datos basada en decisiones para identificar estrategias de medición de resultados viables que mantengan incentivos impactantes. Para ello, la Unidad RFE exploró varios métodos para medir el impacto y analizó las compensaciones entre el costo y el rigor epistémico. Esta colaboración se centró en tres áreas clave, adaptadas al contexto único de cada implementador:

Métricas de pago: Las métricas financieras ideales vinculadas al impacto se centran en resultados finales como la alfabetización o la aritmética. Cuando las limitaciones logísticas o de costos lo impiden, se pueden utilizar resultados tempranos como los cambios en el conocimiento o las prácticas de los estudiantes o los docentes si se sabe que conducen directamente a los resultados finales del aprendizaje.
Fuentes de datos: Siempre que sea posible, se deben utilizar datos preexistentes, como las puntuaciones de los exámenes nacionales, para ahorrar tiempo y recursos al evaluar los resultados del aprendizaje. La recopilación de datos a distancia muestra resultados prometedores.
Estrategia de evaluación: Los ensayos aleatorios controlados brindan la mayor certeza en torno a las estimaciones de impacto. La siguiente mejor opción es un cuasiexperimento bien diseñado, que puede minimizar el sesgo si está bien diseñado y respaldado por un conjunto rico de covariables, aunque puede ser más costoso que los ensayos aleatorios controlados para el mismo poder estadístico. Las comparaciones simples de antes y después generalmente no son efectivas para estimar con precisión el impacto.

La unidad RFE proporcionó una guía práctica que guía a los diseñadores de contratos de ILFF a través de una serie de preguntas para identificar la combinación de fuente de datos, resultado vinculado al pago y estrategia de identificación causal con la relación costo-credibilidad más alta para un implementador determinado. RFE también trabajó directamente con los miembros del equipo de ILFF para brindar asistencia técnica en la aplicación de esta guía para un grupo inicial de implementadores. En el futuro, la guía puede ayudar tanto a ILFF como a otros tomadores de decisiones en el espacio de financiación basada en resultados a estructurar intencionalmente los contratos de una manera que maximice el impacto y los incentivos de los contratos basados en resultados.