El caso del paper Reinhart and Rogof 2010
Thomas Herndon, Michael Ash y Robert Pollin de University of Massachusetts (UMass) trataron de replicar un paper que daba, principalmente, a los republicanos entre el 2010 y 2013 un aparente sustento técnico para reducir el déficit fiscal en tiempos donde la política fiscal estaba como tema principal en EEUU y la mayoría de facultades de Economía.
¿Qué encontraron estos jóvenes estudiantes de economía?
Errores de programación: Cinco países no fueron incluidos sin razones aparentes los cuales, al incluirlas, reducían la validez de la tesis de Reinhart and Rogof (2010).
Exclusión selectiva : Algunos datos fueron extraídos sin razón aparente siendo estos: Australia (1946-1950), New Zealand (1946-1949) and Canada (1946-1950). El incluirlos reducía de forma significativa la hipótesis propuesta por Reinhart and Rogof (2010).
Uso de metodología no convencional: Los autores para su inferencia utilizan una ponderación igual para todos los países en vez de usar ponderar por tiempo y país, los cuales no son recomendables de acuerdo con la academia.
Incluso al aplicar de acuerdo con la metodología planteada por los famosos economistas Reinhart y Rogof, corrigiendo los errores de los puntos 1 y 2, llegaban a una conclusión opuesta a la planteada, lo cual no sólo significó dar sustentos técnicos a los defensores del déficit público sino que además reflejó la importancia de la reproducibilidad y las ciencias abiertas en Economía.
Un punto importante a mencionar fue que la data se encontraba disponible debido a las políticas del Journal. Entonces ¿qué debemos hacer para reducir el riesgo de p-hacking u otros problemas como los mencionados líneas arriba? Aquí algunas ideas:
- Promover las ciencias abiertas: No sólo en economía sino en todas las ciencias para que todos puedan aprender y aportar a lo sociedad así como ayudar a validar para evitar posibles errores y/o manipulaciones.
- Promover las replicaciones: Promover que los estudiantes, académicos y, en general, profesionales repliquen diversos papers como parte de su proceso de formación para obtener grados académicos así como mejorar sus cualidades de investigación.
¿Tienes alguna otra idea? Pronto diseñaremos una forma para que nos puedan compartir sus ideas.