- Biblioteca
- Datos, lógica y razonamiento
- Experimentación e inferencia causal
- Diagramas causales (DAG)
- Error de medición
Modelo mental
Error de medición
Cuando los datos que medimos difieren de la realidad, el error de medición en nuestros diagramas causales puede ocultar, crear o invertir relaciones entre variables.
Descubre
Estás estudiando si el ejercicio mejora el sueño. Registras el sueño con un reloj inteligente y anotas de memoria el ejercicio que haces. Tu análisis no muestra ninguna relación, pero ¿significa eso que el ejercicio no afecta al sueño?
Ordena estos pasos para construir un análisis fiable
Descubre cómo el error de medición desvía el descubrimiento de relaciones causales.
Comprende
Comprende
El error de medición significa que los números que registramos no coinciden del todo con la realidad, como cuando una báscula de baño indica que pesas dos libras más de lo que pesas realmente. En los diagramas causales, estos errores pueden romper las conexiones entre variables, haciendo que desaparezcan efectos reales o que aparezcan relaciones que no existen. Un estudio médico podría no detectar que un medicamento funciona porque los registros de los pacientes contienen errores, o dos cosas podrían parecer relacionadas solo porque ambas se midieron sin cuidado. Pregúntate: Cuando ves un resultado sorprendente, ¿has considerado si las propias mediciones podrían estar engañándote?
Explicación completa
Explicación completa
Cómo distorsiona el error de medición el descubrimiento de relaciones causales
Cuando dibujamos diagramas causales, llamados grafos acíclicos dirigidos o DAG, suponemos que las flechas conectan variables reales, pero nuestros datos proceden de mediciones imperfectas. La conexión entre la «calidad real del sueño» y el «sueño medido» se rompe cuando el error de medición es grande. Un reloj inteligente con mediciones imprecisas podría registrar el movimiento como sueño o no detectar en absoluto los períodos de vigilia. Esta desconexión bloquea la vía por la que una causa real, el ejercicio, mostraría su efecto en el resultado, el sueño. Así pueden desaparecer relaciones reales.
Dos formas en que el error te lleva a conclusiones equivocadas
En primer lugar, el error puede ocultar relaciones reales al añadir ruido que ahoga la señal. Imagina que estudias si leer mejora el vocabulario: si evalúas el vocabulario en días en que los estudiantes están cansados, sus puntuaciones fluctúan al azar y ocultan el beneficio real de la lectura. En segundo lugar, el error puede crear relaciones falsas. Supón que dos hospitales usan termómetros defectuosos que marcan temperaturas demasiado altas. El análisis podría sugerir una relación espuria entre los hospitales, cuando el verdadero problema es un sesgo de medición compartido.
Qué agrava el problema
El daño depende de dónde entre el error en tu diagrama. Cuando la variable de resultado se mide mal, pierdes capacidad para detectar cualquier efecto. Cuando un factor de confusión se mide con error, los intentos de ajustar por él se quedan a medias: es como intentar tapar una fuga en una presa con un colador. Los errores grandes en las variables de tratamiento pueden sesgar las estimaciones del efecto hacia cero y hacer que efectos fuertes parezcan débiles. Fíjate: Ni siquiera el análisis estadístico más cuidadoso puede salvar un estudio basado en mediciones con fallos fundamentales.
Investigación
Investigación
El error de medición altera de forma fundamental la inferencia causal al crear un desajuste entre el modelo causal teórico y el modelo estadístico ajustado a los datos. El error de medición clásico, que no está relacionado con los valores verdaderos, suele sesgar las estimaciones hacia la ausencia de efecto y reducir la potencia estadística. Sin embargo, el error no clásico, en el que los errores se correlacionan con los valores verdaderos o con otras variables, puede sesgar las estimaciones en direcciones impredecibles e incluso invertir las conclusiones causales.
- Greenland (2005): El error de medición diferencial, en el que los patrones de error difieren entre grupos, puede crear asociaciones espurias u ocultar asociaciones reales, incluso cuando los análisis de sensibilidad sugieren que los resultados son robustos. [1]
- Hernán y Cole (2009): En los diagramas causales, el error de medición introduce nodos no medidos que bloquean o abren vías. Esto cambia de forma fundamental la estructura de separación d y, por tanto, el conjunto de variables por las que es válido ajustar. [2]
- VanderWeele (2019): Cuando el error de medición afecta a los factores de confusión en lugar de a la exposición o al resultado, el ajuste mediante regresión estándar funciona mal. El sesgo puede amplificarse, de modo que un ajuste parcial puede ser peor que no ajustar en absoluto. [3]
La consecuencia práctica es que el error de medición transforma el propio DAG causal: lo que en teoría aparece como una sola variable se convierte en un par en la realidad, el valor verdadero y el error, con flechas que se conectan de forma inesperada con otras partes del sistema.
Limitaciones
Limitaciones
Las correcciones del error de medición requieren supuestos fuertes sobre la estructura del error que a menudo no se pueden verificar solo con los datos. Los estudios de validación, que miden lo mismo de dos maneras, ayudan, pero introducen sus propias incertidumbres. Muchas técnicas suponen que el error es clásico, aunque en la práctica los errores suelen correlacionarse con los valores verdaderos o variar según el subgrupo. Además, centrarse únicamente en el error de medición puede desviar la atención de otras amenazas, como la confusión no medida o una especificación incorrecta del modelo. Los DAG ayudan a visualizar el problema, pero no lo resuelven: mejorar las mediciones o los diseños, por ejemplo mediante ensayos aleatorizados, sigue siendo la principal defensa.
Fuentes
Fuentes
- [1] Modelización de múltiples sesgos para el análisis de datos observacionalesSander Greenland - 2005
- [2] Comentario invitado: diagramas causales y sesgo de mediciónMiguel A. Hernán and Stephen R. Cole - 2009
- [3] Principios de selección de factores de confusiónTyler J. VanderWeele - 2019
Pruébalo
Comprueba lo que has entendido
Una persona investiga si el consumo de café afecta a la productividad. El consumo de café se declara de memoria: las personas olvidan las tazas que toman o las cuentan mal. En cambio, la productividad se mide con los tiempos objetivos de finalización de tareas. El análisis no muestra ningún efecto. ¿Qué paso, si se realiza primero, permitiría ver mejor si el error de medición explica este resultado nulo?
Ver la explicación de la guía
Respuesta: Dibujar un DAG que incluya tanto las variables reales como sus versiones medidas
Dibujar el DAG completo revela dónde entra el error de medición: el consumo de café declarado es una medida indirecta e imprecisa del consumo real, mientras que la productividad se mide con precisión. El diagrama muestra que el error en la variable de exposición puede sesgar el efecto estimado hacia cero y hacer desaparecer un efecto real. Las muestras más grandes o los modelos diferentes no solucionarán este problema estructural fundamental. Necesitarías mejores mediciones o un análisis de sensibilidad que cuantifique qué magnitud tendría que tener el error para explicar el resultado nulo.
Dos escuelas parecen tener puntuaciones distintas en los exámenes y, al principio, concluyes que la calidad de su enseñanza es diferente. Después descubres que ambas usan el mismo programa de calificación defectuoso, que tiende a sumar o restar 5 puntos al azar. ¿Cómo deberías revisar tu conclusión?
Ver la explicación de la guía
Respuesta: La diferencia podría ser menor de lo que parece o desaparecer por completo
El error de medición aleatorio en el resultado, las puntuaciones de los exámenes, añade ruido que oculta las diferencias reales. Es el efecto clásico de «atenuación» o «dilución por regresión»: las diferencias observadas son menores que las reales cuando los resultados se miden con error. La brecha aparente entre las escuelas podría reflejar, en parte o por completo, fluctuaciones aleatorias causadas por el programa defectuoso en lugar de diferencias educativas reales. Un DAG mostraría las puntuaciones reales de ambas escuelas conectadas con sus puntuaciones medidas mediante flechas sujetas a errores. Esto impide sacar conclusiones claras sobre la calidad de la enseñanza solo a partir de los datos observados.
En un diagrama causal que examina cómo afecta la dieta a las enfermedades cardíacas, ¿qué situación causaría la distorsión más grave de las conclusiones sobre la relación entre la dieta y la enfermedad?
Ver la explicación de la guía
Respuesta: Estimar de forma aproximada tanto la dieta como las enfermedades cardíacas a partir de lo que recuerdan los pacientes
Cuando tanto la exposición como el resultado tienen errores de medición, la vía causal se altera en ambos extremos. Recordar la dieta de memoria es una fuente conocida de mucha imprecisión: las personas olvidan lo que comieron o lo declaran de forma incorrecta. Los antecedentes de enfermedades cardíacas declarados por los propios pacientes tampoco son fiables. Esta situación de «doble riesgo» maximiza el sesgo: los efectos reales pueden desaparecer por completo y la estructura de separación d de tu DAG deja de representar lo que los datos realmente permiten sostener. La falta de datos sobre factores de confusión, en la opción A, o las muestras pequeñas, en la opción D, dejan parte de la señal; el error en todo el sistema la destruye.
Sigue explorando
Encuentra otra idea para la decisión que tienes por delante.
Toda la biblioteca de Reframo es de lectura gratuita. Explora otra guía cuando quieras.