- 文章目录
- 沟通与影响力
- 信息传递、故事讲述与框架构建
- 信念、预期与信息设计
- 先验分布获取技术
思维模型
先验分布获取技术
通过结构化方法,把专家的看法转化为分析时明确的起始假设,并采取措施减少偏差、记录不确定性。
探索一下
误区还是事实?“使用先验只会引入偏见,还不如从零开始。”
深入了解前,先判断一下
我们会澄清这个误区,并一步步介绍具体方法。
理解概念
理解概念
获取先验分布,就是认真梳理人们已有的知识,把它们转化为清晰、可检验的决策起点。只要你用结构化方法把假设摆出来并加以检查,“先验就是偏见”的说法就站不住脚。例如,医院团队要估计新设备在第一年发生故障的概率,可以请专家分别给出低值、最佳估计值和高值,再记录他们的判断理由。
试试这样:选一个你关心的预测,写下下限、最佳估计值和上限,让你有九成把握认为真实值落在这个范围内。
详细讲解
详细讲解
如何运作(输入、处理与输出):
-
输入:明确定义要估计的具体量,包括估计什么、涉及哪里、时间范围多长;选择合适的专家,并收集已有的基础事实。
-
处理:先简要介绍常见偏差,再选择提问方式,例如用百分比表达概率、询问不同概率对应的取值,或询问出现频数。然后按步骤进行:先明确概念,再询问取值范围、追问理由、提供反馈,并反复调整。
-
汇总:把每位专家的判断整理成一条前后一致的概率分布曲线,检查判断的校准程度或是否符合实际,再合并不同专家的判断,可以采用相同权重,也可以按表现分配权重。记录整个过程。
-
输出:得到一份透明的先验分布,并进行敏感性检查,看看换用其他合理的先验分布后,结果会怎样变化。
例如,产品经理请客服、销售和数据负责人给出第五至第九十五百分位的范围,用来估计首月流失率;城市规划师通过结构化研讨会,获取工程师对洪水风险的量化判断;人力资源团队通过一次简短的远程征询,预测关键岗位的招聘用时。
当数据稀缺或不断变化、专家背景多样,而且流程包含培训、反馈和反复调整时,这种方法最能发挥作用。具体形式包括一对一征询或小组讨论、行为汇总(通过讨论达成共识)或数学汇总(取平均值),以及在有校准数据时按表现分配权重。
研究依据
研究依据
研究表明,结构化征询能提高透明度,而且可能比临时、随意做出的判断更可靠,尤其是在数据稀缺时。流程中的选择,包括提问形式、反馈和汇总方式,都会显著影响质量。
适用局限
适用局限
- 当数据充足且质量很高时,这种方法的作用有限,应让数据发挥主导作用。
- 容易受到过度自信、锚定效应、群体思维和专家选择不当的影响。
- 按表现分配权重需要校准题;没有这些题时,采用相同权重可能更稳妥。
- 存在利益对立或受到政治因素影响时,输入的判断可能失真;应采用盲法,让专家独立作答。
- 结果依赖于假设;务必进行敏感性分析。
参考来源
参考来源
- [1] 不确定性判断:获取专家的概率评估O’Hagan, A., et al. - 2006
- [2] 获取概率分布的统计方法Garthwaite, P. H.; Kadane, J. B.; O’Hagan, A. - 2005
- [3] 不确定性中的专家:科学中的意见与主观概率Cooke, R. M. - 1991
- [4] 谢菲尔德专家征询框架(SHELF)Oakley, J.; O’Hagan, A. - 2024
- [5] 技术支持文档第13号:征询专家意见,为卫生技术评估提供依据NICE Decision Support Unit - 2014
试一试
检验你的理解
你需要在数据很少的情况下预测一款新设备的故障率。获取先验分布时,第一步应该做什么?
查看文章解释
答案: 明确定义要估计的具体量及其范围
好的征询从明确估计对象开始,包括单位、时间范围和具体情境。清晰的定义能避免大家答非所问,也能防止后续出错。
“使用先验只会引入偏见,还不如从零开始。”
查看文章解释
答案: 错误
结构化征询能把假设摆到明面上,通过培训和反馈减少隐藏的偏差,还能让你检查结果对假设有多敏感。随意猜测的风险更大。
不同利益相关方给出了不同的首月流失率范围。你手头还有一些简短的校准题。应该怎样合并专家的判断?
查看文章解释
答案: 根据校准表现分配权重,并进行敏感性检查
在有校准信息时,按表现分配权重可以提高准确性;应记录所用的权重,并检查换用其他权重后结果会怎样变化,以确保结果稳健。
继续探索
为眼前的选择,再找一个有用的想法。
Reframo 的全部已发布文章均可免费阅读。准备好后,随时继续探索。