Debate científico abierto en Innovations for Poverty Action
Plantilla G Bloques de contenido
Subeditor
Innovations for Poverty Action tuvo el placer de presentar recientemente una charla de Courtney Soderberg de la Centro de ciencia abierta (COS). COS tiene como objetivo ayudar a los investigadores a aumentar la transparencia y la reproducibilidad de su trabajo. Fundado en 2013 por los psicólogos Brian Nosek y Jeff Spies, ha crecido rápidamente y ha despertado mucho interés (su trabajo ha aparecido en el El Correo de Washington, Naturaleza y Economist).
La charla comenzó con una discusión de temas que comprometen la confiabilidad de la investigación. El sesgo de publicación, la tendencia a publicar resultados positivos a un ritmo mayor que los resultados nulos, es un gran problema en la investigación, al igual que el informe selectivo de los resultados. Investigadores como John Ioannidis han discutido estos problemas extensamente (ver por ejemplo el artículo altamente citado de Ioannidis, “Por qué la mayoría de los hallazgos de investigación publicados son falsos").
Cada vez está más claro que necesitamos formas de abordar estos problemas sistemáticos. La transparencia de la investigación, incluido el intercambio público de datos y códigos, y el registro previo de estudios, tiene potencial para mejorar la investigación. Compartir materiales más allá de las publicaciones puede permitir que otros investigadores profundicen en el análisis con nuevos análisis y verificaciones de solidez. Y el prerregistro de estudios proporciona un registro público del estudio independientemente de futuras publicaciones, lo que ayuda a combatir el sesgo de publicación.
Pero como destacó Courtney Soderberg, existen problemas de incentivos. La transparencia de la investigación aún no es una norma ampliamente adoptada en las ciencias sociales. Los investigadores son recompensados por las publicaciones en el sistema actual y, a menudo, hay poca recompensa profesional por compartir datos. También existen limitaciones de tiempo: preparar materiales para compartir puede llevar mucho tiempo, especialmente si ese no era el objetivo desde el comienzo del proyecto.
Aquí es donde entra en juego COS. Courtney describió el enfoque triple de COS: infraestructura, comunidad y meta-investigación.
- La Open Science Framework es la plataforma de COS para facilitar el flujo de trabajo: los investigadores pueden cargar sus materiales a medida que trabajan, desde los estudios de prerregistro hasta la versión.
código controlado, para compartir datos públicamente. La plataforma se integra con otros sitios como Github, Dataverse y Figshare. - En el frente comunitario, COS está desarrollando insignias para premiar a los investigadores por las buenas prácticas, incluido el prerregistro y los datos abiertos. Se invita a las revistas a adoptar y distribuir las insignias, con iconos que se pueden colocar directamente en los artículos.
- Sobre meta-investigación: algunos de los proyectos más discutidos de COS incluyen los Proyectos de Reproducibilidad (incluyendo una colaboración con Intercambio de ciencias on biología del cáncer) y el muchos laboratorios proyecto en psicología, en el que diferentes laboratorios realizan los mismos estudios de forma independiente para ver si pueden reproducir los mismos resultados. Otro nuevo estudio de meta-investigación muy interesante es un análisis de datos de colaboración colectiva proyecto, en el que muchos equipos abordan la misma pregunta utilizando los mismos datos.
IPA y otros grupos se unen a COS en el movimiento más amplio hacia la transparencia de la investigación. Algunos ejemplos:
- IPA ha adoptado directrices de publicación de datos y lanzó un repositorio de datos de ensayos controlados aleatorios en las ciencias sociales, alojados en Dataverse. IPA, junto con J-PAL, también ha adoptado un requisito de registro previo (con planes de análisis previo opcionales), y muchos de sus estudios están registrados en el registro AEA.
- Instituto de Berkeley para la Transparencia en las Ciencias Sociales organiza talleres y conferencias sobre temas relacionados con la investigación reproducible y alberga un blog sobre transparencia en la investigación.
- Hay un nuevo centro en Stanford llamado el Centro de Innovación de Meta-Investigación.
En IPA, estamos entusiasmados de ser parte del movimiento para mejorar la investigación a través de una mayor transparencia, y publicaremos más actualizaciones el próximo año. Si tiene preguntas o comentarios sobre la Iniciativa de Transparencia en la Investigación de IPA, envíe un correo electrónico apoyo a la investigación@poverty-action.org.
Stephanie Wykstra es Gerente de Investigación en IPA y dirige la iniciativa de transparencia de investigación. Es miembro del equipo de Investigación y Gestión del Conocimiento de IPA.
Sábado, Abril 15, 2015