Nota del editor: esta publicación cruzada apareció originalmente en la Blog de impacto en el desarrollo.

Recientemente, en trabajo conjunto con Ana María Ibáñez, Andrés Moya, María Ortega, Marisol Rodríguez y el apoyo de campo de IPA Colombia, he estado trabajando en un proyecto de investigación que examina los efectos de una gran amnistía en la vida de los migrantes. El contexto del estudio es la oportunidad de regularización de aproximadamente medio millón de refugiados venezolanos en Colombia, conocido como programa PEP (Permiso Especial de Permanencia). Para ejecutar el proyecto, recolectamos encuestas telefónicas de migrantes regulares e irregulares. Los migrantes irregulares representan a aquellas personas que se encuentran viviendo en Colombia sin la debida documentación migratoria.

Este fue un proyecto desafiante: estábamos tratando de encontrar una muestra representativa de migrantes venezolanos irregulares, una población con muchos problemas de confianza, en medio de la pandemia de COVID-19 y a través de llamadas telefónicas. La buena noticia es que logramos completar el proyecto y recopilamos 3,455 encuestas de hogares de migrantes. Las encuestas son representativas de la población regularizada y de los migrantes irregulares llegados a Colombia entre enero de 2017 y diciembre de 2018.

En el proceso de recopilación de datos, aprendimos lecciones importantes que pueden ayudar a otros investigadores y profesionales a recopilar datos para poblaciones vulnerables con problemas de confianza. Aquí hay una lista de las lecciones principales:

1. Utilizar estudios cualitativos antes de lanzar las encuestas piloto

Antes de lanzar la etapa de pilotaje de la encuesta, realizamos 42 entrevistas semiestructuradas con migrantes para hablar sobre el estudio y el instrumento. El estudio cualitativo reveló lecciones relevantes para el diseño de la encuesta. Primero, señaló inmensos problemas de confianza, por ejemplo, los migrantes tenían miedo de ser deportados, y que el contacto a través de otros migrantes podría facilitar y generar confianza. Los migrantes también fueron objeto de estafas e información falsa enviada a través de WhatsApp, Facebook o sus teléfonos y fueron contactados con frecuencia. Esto les generó desconfianza y podría afectar su disposición a participar en encuestas y brindar información veraz por teléfono sobre temas sensibles como su estatus migratorio, sus ingresos o preguntas sobre integración. Los migrantes también informaron que, a menudo, las autoridades locales y las ONG producen información en un idioma que les resultaba difícil de entender. A pesar de que venezolanos y colombianos comparten un idioma común, existen diferencias importantes en la elección de palabras en el día a día. Las lecciones de estas entrevistas fueron centrales en nuestro éxito y dieron forma a muchas de las acciones correctivas que describiré a continuación.

2. Trabajar a través de organizaciones locales.

Nuestro segundo paso fue difundir los objetivos de nuestro estudio con las ONG locales de inmigrantes. Trabajamos con esas organizaciones para que estuvieran informadas sobre nuestro estudio en caso de que recibieran preguntas de los migrantes al respecto. Después de conocer el estudio, varias de estas organizaciones locales también facilitaron los datos de contacto de sus migrantes afiliados. Esto fue útil para construir nuestro marco de muestreo.

3. Aumente la muestra solicitando referencias

Aprendimos de otros estudios que recolectan muestras para usuarios de drogas o trabajadores sexuales, que podríamos implementar algunos elementos de técnicas de muestreo de bola de nieve en nuestro propio estudio. La metodología comienza construyendo una muestra a partir de un pequeño número de semillas (individuos) tan diversas y representativas de la población objetivo como sea posible y solicita a esas semillas un número determinado de referencias. A esas referencias se les solicitan referencias posteriores y, mediante la iteración de este proceso, se construye la muestra. La cadena se detiene cuando los investigadores tienen una muestra representativa de la población objetivo. Es importante destacar que también aprendimos que algunos estudios que recopilan datos de poblaciones difíciles de alcanzar utilizan un incentivo de dos partes en el que se compensa al individuo por responder la encuesta y también por cada encuesta completada por sus referencias.

Aunque no usamos la metodología de bola de nieve para construir nuestra muestra, sí usamos algunos de sus elementos como, por ejemplo, nuestro marco de muestreo se construyó a partir de la combinación de los datos facilitados por las organizaciones de migrantes y las referencias de cada individuo con el que contactamos en el proceso de selección. . Luego usamos estos datos combinados para seleccionar una muestra representativa de nuestra población objetivo. Debido a que las nuevas referencias modifican el marco muestral en cada etapa, este proceso requiere una selección dinámica de la muestra: a medida que se reciben nuevas referencias, la muestra representativa residual se actualiza.

4. Verifique el idioma de la encuesta

Esto es probablemente más común en otros contextos, pero vale la pena mencionarlo. A pesar de que los nativos venezolanos y colombianos hablan español, ambos usan palabras diferentes en el día a día. Para dar cuenta de esto, les pedimos a los migrantes venezolanos que revisaran el instrumento de la encuesta. Este ejercicio nos permitió identificar preguntas que eran difíciles de entender, eran sensibles en el contexto venezolano y que pueden generar reacciones negativas y comprometer el llenado de la encuesta. Por ejemplo, aprendimos que los venezolanos se sentían extraños y distantes cuando se referían a ellos como “usted” y preferían la palabra “tu”. Aunque ambas palabras representan el mismo significado en español, “usted” generalmente se entiende como más formal que “tu” en Colombia. Los venezolanos, sin embargo, generalmente sentían que "usted" se usaba para hablar con personas en las que no se confía. También tuvimos que modificar palabras utilizadas para referirse a la ubicación geográfica de los migrantes (por ejemplo, “municipio” por “ciudad”), su nivel de educación (algunos niveles de educación se consideraban formales en Venezuela y no en Colombia), y las palabras utilizadas para preguntar si los migrantes pudieron certificar su educación en Colombia (por ejemplo, “homologación” vs “convalidación”), entre otros cambios.

5. Contratar enumeradores del grupo objetivo

También aprendimos que las tasas de respuesta eran más altas cuando los migrantes reconocían un acento familiar al otro lado del teléfono. Por lo tanto, contratamos a migrantes venezolanos como empadronadores. También aprendimos que los enumeradores del mismo grupo estaban profundamente comprometidos al comprender la importancia del estudio para sus comunidades. Todos los encuestadores eran inmigrantes, por lo que también pudieron conectarse y transmitir empatía con los encuestados de manera más efectiva.

6. Cuidando la salud mental de los empadronadores

Una lección importante que trajo al grupo nuestro coautor, Andrés Moya, quien tiene una amplia experiencia trabajando en temas de salud mental con poblaciones desplazadas internamente en Colombia, fue que debido a que la realidad de los refugiados (o de las poblaciones vulnerables en general) es duro, muchas veces la salud mental del encuestador se ve afectada al recopilar encuestas. Por lo tanto, el equipo de IPA realizó capacitaciones con encuestadores para prevenir el trauma indirecto o el estrés traumático secundario, entendido formalmente en este contexto como el trauma indirecto que puede resultar cuando los encuestadores están expuestos a situaciones difíciles de segunda mano de los encuestados. La capacitación incluyó sesiones con un psicólogo que brindó herramientas a los encuestadores para evitar sobrecargarse fisiológicamente y también ofreció consejos para ser más empáticos con los encuestados. Curiosamente, dado que los enumeradores eran migrantes, informaron que estas herramientas fueron muy útiles para ellos también para superar los traumas de su llegada a Colombia.

7. Lecciones de encuestas telefónicas

También implementamos lecciones de otros estudios que realizan encuestas telefónicas para aumentar las tasas de respuesta. Las prácticas estándar en las encuestas telefónicas incluyen llamar a los encuestados en diferentes momentos del día, diferentes días, varias veces y acortar las encuestas. Se puede encontrar un resumen completo de las prácticas estándar para las encuestas telefónicas esta página.

En general, espero sinceramente que estas lecciones sean útiles para informar y facilitar más estudios en grupos de población que a menudo se pasan por alto en la investigación económica debido a la falta de datos existentes.