- 文章目录
- 行为科学与应用经济学
- 行为设计与选择架构
- 选择架构(设计实践)
- 助推实验设计
思维模型
助推实验设计
通过随机对照试验,检验选择呈现方式的微小变化是否真的会影响行为。
探索一下
一家公司想测试,把菜单上的“有机”选项移到最上方,是否能提高销量。他们把顾客分成两组:甲组看到原来的菜单,乙组看到重新排列的菜单。一周后,乙组的有机产品销量比甲组高出 8%。他们应该就此认定助推有效吗?
推广之前,最关键的一步是什么?
学会区分真实效果和运气。
理解概念
理解概念
助推实验会比较两种不同的选择环境,看看哪一种能让人做出更好的决定。你把参与者随机分到不同组,让各组看到不同版本的表单、菜单或界面,再衡量他们的行为有什么差别。关键是随机分组,并通过统计检验确认差异确实存在,而不只是运气使然。例如,一项退休储蓄计划可以测试:与要求员工主动加入相比,按百分之五的缴费比例让员工自动加入,是否能增加储蓄,再观察这种差异在数千名员工中是否持续存在。
请注意:如果没有恰当的随机分组和统计检验,看似有所改善的结果可能只是随机波动。
详细讲解
详细讲解
助推实验如何开展
设计良好的助推实验有一套清晰的流程:先确定你想改变的具体行为,再设计两个版本的选择环境,把参与者随机分配到各个版本,最后衡量结果的差异。随机分组至关重要,它能确保组间差异来自你的助推,而不是参与者本来就存在的差异。例如,企业健康促进项目可以把员工随机分组,一组收到普通的健身房优惠传单,另一组收到个性化信息,告诉他们有多少健康状况相近的同事在使用健身房,然后跟踪三个月内员工实际去健身房的次数。
关键设计原则
好的实验需要足够的样本量,以及一个明确的衡量指标。一所大学的图书馆曾测试,把热门图书放在与视线齐平的位置是否能增加借阅量。他们把不同分馆随机分组,让各组把图书摆在不同高度,并统计了共计 12,000 名访客的借阅率。他们还测试了加入社会比较信息是否能减少逾期还书:告诉学生有多少同学已经按时还书。关键是每次只改变一个因素,这样你才能知道观察到的效果是由什么引起的。
统计显著性与统计功效
开场情境中百分之八的差异可能是真实效果,也可能只是偶然。统计检验会计算:如果你的助推其实没有效果,出现这种差异的概率有多大。如果这个概率低于百分之五,研究人员就称其具有“统计显著性”。不过,你还需要足够多的参与者,才能检测出有实际意义的效果,这关系到实验的统计功效。比如,市政府要测试重新设计的停车缴费界面,就需要数千笔交易,才能有把握地检测出百分之十的改善;只有 50 名用户的试点无法区分真实效果和随机波动。
常见陷阱
如果各组并不真正具有可比性,或者你中途查看结果,因为结果合心意就提前结束,又或者测试了许多版本却只报告表现最好的那些,实验就可能出问题。例如,购物网站可能测试 20 种配色方案,然后自豪地宣布哪种表现最好,却忽略了有些方案纯粹靠运气也会显得更出色。应对方法是提前确定样本量和分析计划,然后无论早期数据呈现什么趋势,都坚持原定安排。
研究依据
研究依据
适用局限
适用局限
助推实验存在一些局限。发表偏倚意味着,得到正面结果的实验更容易发表,从而让人高估助推的有效性。此外,也有人担心助推涉及操控:即使助推在形式上保留了选择自由,批评者仍认为,它可能利用人的认知偏差,也可能在未经同意的情况下实施。
参考来源
参考来源
- [1] 助推有多有效?关于实证助推研究效应量与局限的定量综述Dennis Hummel and Alexander Maedche - 2019
- [2] 助推的有效性:跨行为领域选择架构干预的元分析Stephanie Mertens, Michael Kauer, and Michael Hallsworth - 2022
- [3] 从随机对照试验到规模化应用:来自两个助推部门的全面证据Stefano DellaVigna, Elizabeth Lin, and Ulrike Malmendier - 2020
- [4] 助推:改善有关健康、财富与幸福的决策Richard H. Thaler and Cass R. Sunstein - 2008
- [5] 影响的伦理:行为科学时代的政府Cass R. Sunstein - 2015
试一试
检验你的理解
一个网站随机向 500 名访客展示蓝色的“立即购买”按钮,向另外 500 名访客展示绿色的“立即购买”按钮。绿色按钮带来了 27 次购买,蓝色按钮带来了 21 次购买。要判断绿色按钮是否真的表现更好,关键的一步是什么?
查看文章解释
答案: 计算统计显著性
统计显著性检验能告诉你,观察到的差异(27 次购买与 21 次购买)更可能是真实效果,还是仅仅出于偶然。不做这项计算,你就可能根据随机波动做决定。每组只有 500 名访客时,这个差异可能达不到统计显著性,你需要延长测试时间,才能认定绿色按钮确实优于蓝色按钮。
一项退休储蓄计划测试了两种邀请员工加入的信息。信息甲强调财务保障;信息乙强调社会规范(“大多数与你情况相似的员工都会缴纳 6%”)。两种信息都让加入率提高了 5%。要决定推广哪种信息,最关键的补充信息是什么?
查看文章解释
答案: 每种信息的效果是否都具有统计显著性
在比较哪种信息更好之前,你需要先确认每种信息是否真的产生了效果。同样是提高 5%,在一组中可能只是随机波动,在另一组中却可能是真实效果。分别对每种实验条件进行统计显著性检验,才能知道你是在比较两种有效的助推,还是其中一种或两种看似有效的结果都只是随机波动。
你们开展了一项助推实验,比较两种电子邮件主题行。同事每天查看结果,只要有一个版本出现显著结果,就立刻停止测试。这样会造成什么问题?
查看文章解释
答案: 假阳性率大幅上升
中途反复查看结果,一看到统计显著性就停止,这种做法被称为“p 值操纵”。只要查看次数足够多,随机波动最终也会纯粹因为偶然而显得具有统计显著性。这会让假阳性率远高于声称的 5%。规范的实验要求提前确定样本量和分析计划,并在实验结束时只分析一次结果。
继续探索
为眼前的选择,再找一个有用的想法。
Reframo 的全部已发布文章均可免费阅读。准备好后,随时继续探索。