Esta es la segunda de una serie de publicaciones de blog que resumen las discusiones de mayo de 2017 reunión de investigadores sobre la medición del empoderamiento de la mujer en evaluaciones de impacto. Lea la primera publicación sobre el poder de decisión del hogar aquí.

Pintar una imagen completa del empoderamiento de las mujeres en las evaluaciones de impacto utilizando solo encuestas puede ser un desafío. Los métodos cualitativos pueden ayudar a los investigadores a comprender mejor el impacto de un programa en la experiencia de vida de las mujeres e identificar las razones por las que un programa funcionó o no, pero los economistas rara vez tienen incentivos para incorporar métodos cualitativos sólidos en su investigación.

En este post, presentamos una entrevista con Dra. Sara Baird, economista y profesor asociado de salud y economía global en la Universidad George Washington. Sarah utiliza métodos experimentales de campo para comprender qué funciona para mejorar la vida de los jóvenes, en particular de las adolescentes en el África subsahariana. Aquí comparte sus ideas sobre cómo los métodos cualitativos pueden complementar los métodos cuantitativos basándose en su experiencia como parte de un equipo de investigación interdisciplinario que realiza un estudio longitudinal multipaís sobre género y adolescencia. También habla sobre las barreras para realizar más investigaciones de métodos mixtos en las ciencias sociales.

La próxima semana, publicaremos una entrevista con el director del estudio aquí presentado, Dra. Nicola Jones, para comprender la perspectiva del investigador cualitativo sobre esta historia de métodos mixtos.

Nellie: Un argumento para poner más énfasis en el trabajo de métodos mixtos es desenredar los mecanismos detrás de los programas multifacéticos para mujeres y niñas. Este es un componente importante del estudio de métodos mixtos de evidencia global de género y adolescencia (GAGE) financiado por DfID en el que está trabajando con Nicola Jones, con quien hablaré la próxima semana. ¿Podría hablarme sobre el estudio y su papel?

Sarah:    GAGE es un programa de evaluación e investigación longitudinal de métodos mixtos de nueve años que examina lo que funciona para transformar las vidas de los adolescentes pobres en general y de las adolescentes pobres en particular. Ahora estamos finalizando los diseños del programa y del estudio, así como los instrumentos de la encuesta, y esperamos iniciar la recopilación de datos a principios de septiembre.

Debido a que estamos trabajando con niñas adolescentes y pensando en su transición a la edad adulta, las intervenciones son muy polifacéticas. Esta configuración deja en claro que vamos a necesitar trabajo tanto cuantitativo como cualitativo para llegar al fondo de lo que estamos impactando en última instancia y por qué. La capacitación en habilidades para la vida en espacios seguros, por ejemplo, está tratando de enseñar una gran cantidad de habilidades que afectan muchas dimensiones diferentes (económicas, psicológicas, de salud) de la vida de las niñas. Cuantitativamente es difícil definir los resultados primarios y el mecanismo por el cual se ven afectados esos resultados. La investigación cualitativa puede descubrir los detalles de estos programas multifacéticos, especialmente cuando se piensa en las adolescentes. ¿Es el efecto de pasar tiempo con compañeros o el plan de estudios desarrollado para el grupo de espacio seguro lo que llevó a tasas de embarazo más bajas? El mecanismo puede conducir a estrategias y costos de ampliación muy diferentes.

nellie:   En el trabajo que ya ha realizado, ¿cómo han contribuido los investigadores cualitativos a los aspectos cuantitativos de la investigación?

Sarah:    Ha sido muy útil obtener la perspectiva del otro equipo sobre lo que se puede capturar mejor cualitativamente. Por ejemplo, en muchas encuestas, hacemos preguntas abiertas, como "¿Qué te gusta de la escuela?" y luego escribe una respuesta descriptiva. Estas preguntas están destinadas a desempacar los mecanismos detrás de nuestros hallazgos. Si encuentra que una intervención mantuvo a las niñas en la escuela, realmente quiere entender por qué. Pero mirar los mecanismos cualitativamente es una buena división del trabajo. Es posible que no saquemos todas estas preguntas del cuestionario cuantitativo, porque con una muestra mucho más grande podemos hablar de manera más general sobre la población. Pero nuestras encuestas pueden ceñirse a lo que creemos que van a ser los mecanismos clave y dejar las posibilidades secundarias y terciarias al trabajo cualitativo.

Es importante poder eliminar estas preguntas de la encuesta y, en su lugar, explorarlas en el trabajo cualitativo, porque cuando desea capturar resultados en seis dimensiones, llega rápidamente a un punto en el que necesita tener un cuestionario de tres a cuatro horas para responder. captura todo lo que querías. Nadie, particularmente los jóvenes adolescentes, tiene ese tipo de capacidad de atención.

nellie:   A pesar de estos beneficios potenciales, no vemos tantas asociaciones entre investigadores de todas las disciplinas como cabría esperar. Hábleme de un estudio en el que trabajó que cree que podría haberse beneficiado de componentes cualitativos mejor integrados. ¿Lo que faltaba?

Sarah:    Mi mejor ejemplo es un estudio de transferencia de efectivo en Malawi en el que trabajé justo después de graduarme de la escuela de posgrado. Usamos entrevistas cualitativas en profundidad para dilucidar qué entendían las personas sobre el programa y cómo entendían su brazo de tratamiento en comparación con el de otra persona. Esas entrevistas se convirtieron en notas a pie de página en el periódico para abordar las críticas de los árbitros. Los economistas suelen ver la investigación cualitativa como una forma de llenar esos pequeños vacíos en el análisis cuantitativo.

También solicitamos financiamiento para analizar los datos cualitativos de manera más rigurosa, pero el financiador regresó con financiamiento solo para la recopilación de datos. No creo que hayan apreciado del todo que el análisis cualitativo es un conjunto de habilidades totalmente diferente al que podría ofrecer nuestro equipo de economistas. Ahora tenemos cientos de entrevistas en profundidad en mi computadora que nadie ha analizado todavía debido a la falta de fondos. Es una pena.

Si pudiera regresar, traería a un experto en métodos cualitativos para diseñar un estudio integrado utilizando sus métodos de vanguardia junto con los nuestros. Aunque tengas la financiación, el reto está en la publicación al final. Todavía hay una audiencia bastante limitada para ese tipo de trabajo, y si acabas de terminar tu doctorado y aspiras a ser titular, quieres publicar en la mejor revista de tu disciplina. Es difícil gastar recursos significativos en trabajo cualitativo que se va a quedar fuera del periódico, porque simplemente no podrá llegar a los puntos de venta que le gustaría.

Esas entrevistas se convirtieron en notas a pie de página en el periódico para abordar las críticas de los árbitros. Los economistas suelen ver la investigación cualitativa como una forma de llenar esos pequeños vacíos en el análisis cuantitativo.

nellie:   Entonces, ¿qué podrían hacer las revistas para fomentar una mayor investigación interdisciplinaria?

Sarah:    En este momento, la forma más común de solucionar este problema es publicar dos versiones del documento: una sobre los hallazgos cualitativos y otra sobre los cuantitativos. Ese es un buen primer paso, y desde una perspectiva política, si un colega y yo presentamos juntos al gobierno, también podemos transmitir los matices de los resultados.

Pero la mayoría de los académicos que leen un artículo no leen el otro. Desde esa perspectiva, podríamos aprender mucho más al integrar los hallazgos. Me gustaría ver una revista en la que los economistas del desarrollo, así como los demógrafos, sociólogos y otros que realizan trabajos cualitativos, tengan todo el respeto para desarrollar una reputación por publicar excelentes trabajos de métodos mixtos. Todavía podría haber artículos sobre los hallazgos cuantitativos y cualitativos, pero también un tercer artículo en esta revista que analice los dos juntos. Para que esto suceda, los investigadores senior que tienen menos presión sobre ellos para la titularidad deberían estar entusiasmados (a) para hacer el trabajo que va a esta revista y (b) para leer esta revista.

Sin embargo, por ahora, la salud pública es un buen espacio para hacer avanzar esta agenda de métodos mixtos. Nuestro departamento de salud global en GW es interdisciplinario por diseño. Las revistas de economía, salud pública y sociología son igualmente valoradas. Como individuo dentro del mundo de la economía, tengo mi jerarquía de revistas y mi ego quiere hablarle a ese mundo, pero como miembro de este departamento, estarán igualmente felices si publico en el Quarterly Journal of Economics. o la lanceta. Esto probablemente también sea cierto para los departamentos de política pública.

Como una organización comprometida con hacer que los datos y la información sean significativos y útiles para los formuladores de políticas, IPA también tiene el potencial de hacer avanzar esta agenda fomentando una conversación sobre la necesidad y alentando más trabajo de métodos mixtos.

Lea la entrevista completa con el profesor Baird en el sitio web de GAGE aquí.