思维模型
测量误差
当测量数据与现实不一致时,因果图中的测量误差可能掩盖、制造,甚至颠倒变量之间的关系。
探索一下
你正在研究运动能否改善睡眠。你用智能手表追踪睡眠,凭记忆记录运动情况。分析显示两者没有关系,但这就说明运动不影响睡眠吗?
将这些步骤排序,做出可信的分析
看看测量误差如何让因果发现偏离方向。
理解概念
理解概念
测量误差是指你记录的数字与实际情况不完全一致,比如体重秤显示的体重比你的实际体重重了两磅。在因果图中,这些误差可能打断变量之间的联系,让真实的效应消失,或制造出原本不存在的关系。一项医学研究可能因为患者记录有误,没能发现药物有效;两件事也可能只是因为测量都不准确,才显得有关联。
想一想:看到出乎意料的结果时,你有没有考虑过,测量本身可能在误导你?
详细讲解
详细讲解
测量误差如何扭曲因果发现
画因果图(有向无环图)时,我们假定箭头连接的是真实变量,但数据却来自不完美的测量。当测量误差很大时,“真实睡眠质量”与“测得的睡眠情况”之间的联系就会断裂。不太可靠的智能手表可能把活动记成睡眠,也可能完全漏掉清醒时段。这种断裂会阻断真实原因(运动)影响结果(睡眠)的效应在数据中显现的路径,让真实的关系消失。
误差误导你的两种方式
第一,误差会增加噪声,淹没有用的信号,从而掩盖真实关系。假设你想研究阅读是否能增加词汇量:如果总在学生疲倦的日子测试词汇量,分数就会随机波动,掩盖阅读带来的真实收益。第二,误差可能制造虚假的关系。假设两家医院都用了有问题的体温计,读数都偏高。分析可能会显示两家医院之间存在虚假关联,而真正的问题是它们有共同的测量偏差。
什么会让问题更严重
误差造成多大影响,取决于它出现在因果图的哪个位置。如果结果变量测得不准,你发现效应的能力就会下降。如果混杂因素的测量有误,针对它的调整就会不充分,就像试图用筛子堵住漏水的堤坝。处理变量中的较大误差可能让效应估计偏向零,使强效应看起来很弱。请注意:如果研究的测量从根本上就有问题,再严谨的统计分析也救不了它。
研究依据
研究依据
测量误差会让理论上的因果模型与根据数据拟合的统计模型不一致,从根本上改变因果推断。经典测量误差(误差与真实值无关)通常会使估计偏向无效应,并降低统计功效,也就是发现效应的能力。不过,非经典测量误差中的错误与真实值或其他变量相关,可能让估计向难以预测的方向偏移,甚至颠倒因果结论。
- Greenland(2005):差异性测量误差(不同群体的误差模式不同)可能制造虚假关联,或掩盖真实关联,即使敏感性分析显示结果稳健,也可能如此。[1]
- Hernán 和 Cole(2009):在因果图中,测量误差会引入未测量的节点,阻断或打开路径,从根本上改变 d-分离结构(用于判断图中路径是否被阻断的结构),从而改变可用于有效调整的变量集合。[2]
- VanderWeele(2019):当测量误差影响的是混杂因素,而非暴露或结果时,标准回归调整的表现不佳;还可能出现偏倚放大,使部分调整比完全不调整更糟。[3]
实际含义是,测量误差改变了因果图本身:理论上看似单一的变量,在现实中变成了两个部分(真实值和误差),并通过箭头与系统的其他部分产生意想不到的联系。
适用局限
适用局限
校正测量误差需要对误差结构作出较强的假设,而这些假设往往无法仅凭数据验证。验证研究(用两种方式测量同一事物)能提供帮助,但也会带来自身的不确定性。许多方法假定误差属于经典测量误差,然而现实中的误差经常与真实值相关,或因子群体而异。此外,如果只关注测量误差,也可能忽略未测量混杂、模型设定错误等其他问题。因果图能帮你把问题画出来,却不能解决问题;更好的测量或研究设计(如随机试验)仍是主要的防线。
参考来源
参考来源
- [1] 用于观察性数据分析的多重偏倚建模Sander Greenland - 2005
- [2] 特邀评论:因果图与测量偏倚Miguel A. Hernán and Stephen R. Cole - 2009
- [3] 混杂因素的选择原则Tyler J. VanderWeele - 2019
试一试
检验你的理解
一位研究者想了解喝咖啡是否影响工作效率。咖啡摄入量由参与者自行报告,人们可能忘记喝了多少杯,或数错杯数;工作效率则通过客观的任务完成时间来衡量。分析显示没有效应。先做哪一步,最有助于看出测量误差能否解释这一无效应结果?
查看文章解释
答案: 画出同时包含真实变量及其测量版本的因果图
画出完整的因果图,能看出测量误差从哪里进入:自报的咖啡摄入量是真实摄入量的一个带有噪声的替代指标,而工作效率测量得很准确。图中可以看出,暴露变量的误差可能使效应估计偏向零,让真实效应消失。扩大样本量或更换模型都无法解决这个根本性的结构问题。你需要更好的测量,或通过敏感性分析,量化误差要大到什么程度才能解释这一无效应结果。
两所学校的考试成绩看起来有差异,你最初据此认为它们的教学质量不同。后来你得知,两所学校使用的是同一款有缺陷的评分软件,它往往会随机加上或减去 5 分。你应该如何更新自己的结论?
查看文章解释
答案: 差异可能比看起来更小,也可能完全消失
结果变量(考试成绩)中的随机测量误差会增加噪声,掩盖真实差异。这就是经典的“衰减”或“回归稀释”效应:当结果的测量存在误差时,观察到的差异会小于真实差异。两所学校表面上的差距,可能部分甚至完全来自故障软件造成的随机波动,而非真实的教育差异。因果图会显示,两所学校的真实成绩都通过容易出错的箭头与测得的成绩相连,让你无法仅凭观测数据就对教学质量作出明确推断。
在一张研究饮食如何影响心脏病的因果图中,哪种情况会最严重地扭曲关于饮食与心脏病关系的结论?
查看文章解释
答案: 仅凭患者记忆,粗略估计饮食情况和心脏病情况
当暴露和结果都存在测量误差时,因果路径的两端都会受到干扰。凭记忆回顾饮食的噪声很大,这是出了名的:人们会忘记或错误报告自己吃过什么;自报的心脏病史也不可靠。这种“双重打击”会让偏倚达到最大,真实效应可能完全消失,因果图中的 d-分离结构也不再代表数据实际能够支持的关系。缺少混杂因素(选项 A)或样本量小(选项 D),还会留下一些信号;遍布整个系统的误差则会破坏这些信号。
继续探索
为眼前的选择,再找一个有用的想法。
Reframo 的全部已发布文章均可免费阅读。准备好后,随时继续探索。