主指标选择

主指标是判断一次改动是否成功时最重要的那个数字。它就像项目的“北极星”，帮你把注意力放在具体目标上，避免被无关的数据分散精力。

对于新推出的“故事（Stories）”功能，最好的选择是关注每天创建故事的用户数，因为它直接衡量了有多少人开始使用这项功能的核心用途：创作内容。选定一个清晰的目标，能帮助整个团队专注于真正推动成功的事情。

想一想：“哪一种行为发生变化，就能说明我们成功了？”

无论是网站改版，还是养成一个新的个人习惯，选择主指标都是衡量改动是否成功的关键第一步。你要把复杂的结果提炼成一个既能敏锐反映变化、又容易理解的数字，这通常叫作总体评估标准。

好的主指标应具备哪些特点

一个好的主指标应该：

• 能指导行动： 它应该直接对应你能影响的某种行为。
• 足够敏感： 它必须能检测到改动带来的影响，即使影响很小。
• 容易理解： 整个团队都应该明白它代表什么，以及它为什么重要。

例如，一家电商网站在测试新的结账按钮时，应该把转化率，也就是每位访客对应的购买次数，作为主指标，而不只是看新按钮的点击次数。转化率能把这次改动与最终的业务目标直接联系起来：卖出更多商品。

再看另一个领域：某市政府希望让交通更顺畅。“新安装的红绿灯数量”不是一个好的主指标。“高峰时段途经市中心的平均通勤时间”要好得多，因为它直接衡量了居民的实际体验。

选定一个主指标，会促使你明确目标，让团队达成共识。这样能防止团队只挑选支持预期结果的数据，也能让大家围绕同一个成功标准开展工作。同时，还要搭配护栏指标，留意意料之外的副作用。

主指标，也称总体评估标准（Overall Evaluation Criterion，简称 OEC），是开展可信在线实验的基石。选择一个好的 OEC 可以说是最关键的一步，因为它定义了什么叫成功，也可能对产品或业务产生巨大的长期影响。研究者强调，一个好的指标不仅要在统计上足够敏感，还必须与长期战略目标存在因果联系，而这种联系往往很难确立。

• Kohavi、Tang 和 Xu（2020）认为，OEC 必须能够量化实验目标，并应与长期价值保持一致。他们提醒，不要一味优化那些长期来看可能有害的短期指标。[1]
• 微软的 Deng 和 Shi（2016）详细介绍了一套由数据驱动的指标开发流程，强调好的指标应该敏感、可信、易于解释，而开发这样的指标往往需要结合领域知识和统计分析。[2]
• Reforge 的 Casey Winters 解释说，北极星指标应该代表产品为客户提供的核心价值。他认为，聚焦这一个指标，能让整个公司朝着可持续、由产品驱动的增长方向努力。[3]（无日期）

只关注一个主指标，可能会让团队的视野变窄。团队在追求主要目标时，可能无意中损害用户体验的其他方面，这种问题被称为“指标固着”，也就是过度盯着某个指标。因此，主指标必须搭配护栏指标，例如延迟、退订次数、联系客户支持的次数，以便监测负面影响。

此外，短期内有效的主指标，不一定与长期成功相关。例如，增加电子邮件通知可能提高每日参与度这一主指标，但几个月下来，也可能让用户感到疲惫，甚至卸载应用。