思维模型

群体公平与个体公平

衡量人工智能系统公平性的两种相互竞争的思路:一种要求不同人口群体获得相近的结果,另一种要求相似的个人得到同等对待,不受群体身份影响。

探索一下

一家银行需要审查贷款审批系统是否公平。一种方法要求各个社区的批准率相同,另一种方法要求信用评分相近的人得到相近的审批决定,不受居住地点的影响。两种方法都声称自己“公平”,却把系统推向了相反的方向。

你觉得哪个公平目标更重要?

理解这种矛盾,你就能明白为什么实现“公平的人工智能”比看起来更难。

理解概念

理解概念

群体公平关注不同人群(比如不同社区、族裔或性别的人)总体上是否获得相近的结果,例如各个社区的贷款批准率是否大致相同。个体公平关注的是,在相关条件上相似的人,是否得到相同的对待,而不受所属群体的影响。

详细讲解

详细讲解

群体公平衡量不同人群之间是否达到统计均等,也就是比较不同人口群体的申请批准率、预测评分或录用率。它的核心直觉是:如果一个系统是公平的,就不应该让任何受保护群体系统性地获得更差的结果。个体公平则关注一致性:资质或处境相似的人,应该得到相似的决定,不受人口群体身份的影响。

这两种原则之间存在矛盾,因为它们无法同时达到最大程度的公平。如果某个群体的平均资质确实更高(由于教育、经验或其他因素),强行让批准率相同,就意味着要么拒绝得分较高群体中符合条件的申请者,要么为得分较低的群体降低标准。反过来,如果各个群体在相关因素上存在差异,对每个人采用完全相同的决策规则,往往会让不同群体获得不同的结果。

这种取舍随处可见。在招聘中,群体公平推动人员构成的多样性,个体公平则坚持由资质最出色的候选人获得职位,不受人口群体身份的影响。在贷款中,群体公平会识别按居住区域拒绝贷款的“红线歧视”模式,个体公平则要求信用资质良好的申请者获得批准,不受所在社区的影响。在医疗中,群体公平会审查治疗建议是否因种族而异,个体公平则确保症状和病史完全相同的患者获得相同的医疗照护。哪种方法最好,取决于具体情境:群体公平擅长发现系统性偏见,个体公平则维护择优原则,防止逆向歧视。

研究依据

研究依据

要在机器学习中实现公平,你需要结合具体情境作出价值判断,确定哪些原则对特定应用最重要。不同的公平标准之间往往需要取舍,无法只靠技术优化来解决。

适用局限

适用局限

这个框架往往把群体归属视为固定且可观察的信息,忽略了交叉性因素(种族、性别和阶层如何相互影响),也忽略了群体身份属于敏感信息、由个人自我认定或会发生变化的情况。此外,形式化的公平定义关注统计特征,却忽视了程序公平,也就是决策过程本身是否透明、是否允许受影响者提出异议,以及是否被受影响的群体视为正当。

参考来源

参考来源

试一试

检验你的理解

一所大学使用人工智能审核入学申请。他们发现,要让各个社区的录取率相同,就需要拒绝某些地区中资质很出色的学生,同时录取其他地区中资质较差的学生。这揭示了什么取舍?

查看文章解释

答案: 群体公平与个体公平可能发生冲突

这个情境展示了两者的核心矛盾:强行让不同群体获得相同的结果,意味着对资质不同的个人采取不同的对待方式,从而违背个体公平。

一个信用评分系统仅仅因为符合贷款条件的申请者住在某个特定邮政编码区域,就拒绝向他们放贷。哪种公平方法更容易发现这种情况?

查看文章解释

答案: 群体公平

群体公平会比较不同人群(比如不同邮政编码区域的居民)的结果,并指出批准率中存在的系统性差异。个体公平检查的是相似的个人是否得到相似的对待,而“红线歧视”发生在群体层面:不考虑个人资质,直接拒绝整个区域的申请者。群体层面的审查能发现逐个分析个人案例时遗漏的模式。

两位候选人应聘同一份工作,他们的测试成绩、经验和面试表现完全相同。其中一人获聘,另一人没有。公平性审查发现,两人唯一有意义的差别是性别。这违反了哪项公平原则?

查看文章解释

答案: 个体公平

个体公平要求相似的个人得到相似的对待。这两位候选人在所有相关方面都完全相同,因此公平要求对他们作出相同的决定。人口群体身份的差异不应该影响结果。群体公平只会查看按性别划分的总体录用统计,而这里的问题是对条件相当的个人给予了不平等的对待,直接违反了个体公平。

继续探索

为眼前的选择,再找一个有用的想法。

Reframo 的全部已发布文章均可免费阅读。准备好后,随时继续探索。