Modelo mental

Prerregistro y planes de análisis

Documentar tus hipótesis y métodos de análisis antes de recopilar datos te ayuda a distinguir los hallazgos reales de los patrones fortuitos que encuentras después.

Descubre

Una persona que investiga recopila datos de 100 empleados sobre su productividad, satisfacción laboral, calidad del sueño, consumo de café y tiempo de desplazamiento al trabajo. Tras revisar los resultados, observa que los empleados que tardan más en llegar al trabajo declaran una satisfacción ligeramente mayor. Así que presenta este hallazgo como el resultado principal y lo comunica como estadísticamente significativo. ¿Es una buena práctica científica?

¿Qué problema tiene esta forma de proceder?

Descubre cómo los científicos evitan esta trampa planificando con antelación.

Comprende

Comprende

El prerregistro consiste en escribir qué vas a poner a prueba y cómo lo analizarás antes de mirar los datos: como un chef que se compromete a seguir una receta antes de cocinar, en vez de inventarla después para que encaje con lo que haya salido del horno. Sin ese compromiso, es fácil convencerte de que has encontrado algo real cuando solo estás describiendo patrones aleatorios que parecían interesantes.

Pregúntate esto: cuando escucho una afirmación sorprendente, ¿la predicción se hizo antes o después de conocer los resultados?

Explicación completa

Explicación completa

Cómo funciona el prerregistro

El prerregistro deja constancia permanente de tu plan de investigación antes de que empiece la recopilación de datos. Piensa en ello como hacer tus apuestas antes de lanzar los dados: documentas tu hipótesis concreta, qué variables medirás, cómo analizarás los datos y qué patrones contarían como evidencia a favor de tu teoría. Este compromiso separa una predicción auténtica de un relato que acomodas a los resultados.

Por qué importa

Cuando los investigadores exploran datos sin un plan prerregistrado, se enfrentan a trampas sutiles. Pueden probar distintas formas de agrupar a los participantes, excluir ciertos datos que «no encajan» o evaluar decenas de relaciones y comunicar solo las que parecen interesantes. Cada decisión parece razonable, pero, juntas, aumentan enormemente la probabilidad de obtener falsos positivos: hallazgos que parecen significativos, pero son simples coincidencias. Los mismos datos que dieron lugar a la hipótesis no permiten ponerla a prueba de forma imparcial.

Aplicaciones en la vida real

Investigación médica: Un ensayo de un medicamento. Al terminar el estudio, los investigadores observan que el medicamento también ayuda con la ansiedad, pero reconocen que se trata de un hallazgo exploratorio que requiere una confirmación independiente, en lugar de presentarlo como un efecto demostrado. Decisiones empresariales: Un equipo de marketing prerregistra que considerará exitosa una nueva campaña publicitaria si aumenta la tasa de clics un 5 %. Cuando también aumentan las ventas, lo trata como una observación adicional, en lugar de convertirlo en la prueba principal. Decisiones personales: Antes de empezar a usar un nuevo sistema de productividad, escribes qué considerarás un éxito (tareas completadas por hora), en lugar de cambiar el criterio después según cómo te sientas.

Cómo llevarlo a la práctica

No necesitas plataformas formales para beneficiarte de este principio. Antes de empezar cualquier proyecto, escribe qué vas a poner a prueba, qué contará como evidencia y qué harás si los resultados son ambiguos. Comprometerte con un plan, incluso en privado, te ayuda a reconocer cuándo estás aprendiendo de verdad y cuándo simplemente buscas una justificación a posteriori.

Investigación

Investigación

El prerregistro y los planes de análisis abordan la crisis de replicación en psicología y otras ciencias al reducir los «grados de libertad del investigador»: las muchas decisiones aparentemente arbitrarias que los investigadores toman durante el análisis y que pueden influir en los resultados. Los informes registrados, un formato de publicación en el que los estudios pasan por una revisión por pares antes de recopilar los datos, han surgido como una forma eficaz de aplicar este principio.

  • Nosek et al. (2018): Destacan la necesidad de mejorar las prácticas de investigación, incluido el prerregistro [1]
  • Chambers et al. (2014): Introdujeron los informes registrados como formato de publicación; los estudios publicados de esta manera muestran tasas de replicación mucho más altas porque los métodos se evalúan antes de conocer los resultados [2]
  • Simmons et al. (2011): Mostraron que la «flexibilidad no declarada» en la recopilación y el análisis de datos permite a los investigadores presentar casi cualquier conjunto de datos como estadísticamente significativo, lo que dio a su artículo el memorable título de «Psicología de los falsos positivos» [3]

Limitaciones

Limitaciones

El prerregistro no es una solución para todo. También se pueden prerregistrar estudios mal diseñados, y el registro no corrige los fallos fundamentales de medición. Algunas personas sostienen que limita la investigación exploratoria, pero la mayoría de los expertos distingue entre el trabajo confirmatorio y el exploratorio: ambos son valiosos, aunque requieren criterios diferentes. Es posible manipular el prerregistro mediante hipótesis vagas o justificaciones a posteriori, lo que ha dado lugar a formatos más específicos de «informes registrados». Además, el prerregistro supone que la investigación sigue un modelo lineal de planificación y ejecución, pero la ciencia real a menudo implica aprender de forma iterativa; equilibrar el rigor con la flexibilidad sigue siendo un reto.

Fuentes

Fuentes

Pruébalo

Comprueba lo que has entendido

Una persona investiga si una nueva técnica de estudio mejora las notas de los exámenes. Después de recopilar los datos, observa que la técnica parece ayudar más a las alumnas que a los alumnos, así que añade esta diferencia de género como su hallazgo principal. ¿Cuál es la mejor valoración de esta forma de proceder?

Ver la explicación de la guía

Respuesta: Es aceptable si presenta el hallazgo como exploratorio en lugar de confirmatorio

La cuestión clave no es si los hallazgos a posteriori pueden ser valiosos (sí lo son), sino si se presentan como resultados que se habían predicho. La diferencia de género surgió de los datos, así que esos mismos datos no permiten ponerla a prueba de forma imparcial. Una buena práctica es reconocer con honestidad los hallazgos exploratorios y recomendar una confirmación independiente. El prerregistro ayuda a distinguir «lo que predijimos» de «lo que observamos después».

En el proceso de prerregistro, ¿cuál de estos pasos suele hacerse AL FINAL?

Ver la explicación de la guía

Respuesta: Recopilar y examinar los datos

El prerregistro exige documentar todo el plan de investigación ANTES de recopilar los datos. Su propósito es que te comprometas con tus hipótesis y métodos de análisis cuando todavía no conoces los resultados. Examinar los datos antes de cerrar tu plan anula ese propósito: no puedes poner a prueba de forma imparcial unas predicciones que hiciste después de haber visto la respuesta.

Un equipo prerregistra un estudio para evaluar si una nueva aplicación reduce el estrés. Su plan de análisis especifica que excluirá a los participantes que abandonen antes de las 2 semanas. Después de recopilar los datos, observa que quienes abandonaron tenían un estrés inusualmente alto, por lo que incluirlos reforzaría sus resultados. ¿Qué debería hacer?

Ver la explicación de la guía

Respuesta: Seguir el plan prerregistrado y excluir a quienes abandonaron, tal como se había especificado

Cambiar las reglas de análisis en función de los datos reintroduce el problema que el prerregistro pretendía resolver. Cuando tomas decisiones que refuerzan tus hallazgos después de ver los resultados, no puedes distinguir los efectos reales de las coincidencias. Una mejor práctica es seguir el análisis prerregistrado para obtener conclusiones confirmatorias y después presentar los análisis exploratorios por separado, con la cautela adecuada. La respuesta prerregistrada es «lo que predijimos que encontraríamos», no «lo que nos habría gustado encontrar».

Sigue explorando

Encuentra otra idea para la decisión que tienes por delante.

Toda la biblioteca de Reframo es de lectura gratuita. Explora otra guía cuando quieras.