- 文章目录
- 社会动力学与伦理框架
- 伦理困境与应用伦理学
- 算法公平性与AI伦理
- 交叉公平性
思维模型
交叉公平性
交叉公平性关注种族、性别、年龄、残障等多重身份如何交织,让人们遭受独特的算法伤害。
探索一下
一款人工智能招聘工具分别针对女性和黑人应聘者进行评估,总体公平性评分都达到了95%。但黑人女性反映,她们被拒绝的比例是白人男性的三倍。公司应该相信95%的评分,还是进一步调查?
判断公平时,什么更重要?
看看为什么群体层面的公平,仍可能让边缘群体受到不公平对待。
理解概念
理解概念
交叉公平性意味着,即使一个人同时属于多个边缘化群体,人工智能系统也应该公平地对待他们。比如,一个人既是女性,也是有色人种,或者既年长,又有残障。 请注意:评估人工智能系统时,要问它是否针对多种身份的组合做过公平性测试,而不只是每次检查一种特征。
详细讲解
详细讲解
交叉公平性关注人工智能公平性中的一个关键盲点:人们同时拥有相互交织的多重身份,评估时却常把不同人口群体类别看作彼此独立。常见的公平性指标,比如人口统计均等或均等化胜算,通常会按种族、性别、年龄或残障状况分别计算。这种做法假定,只要对每个群体都公平,对这些身份的组合也就公平。但研究表明,这在数学上并不成立。处于多种身份交叉点的子群体,可能遭受更严重的伤害,而汇总指标却看不出来。
比如,一个人脸识别系统分别针对不同种族群体(白人、黑人、亚裔)和不同性别(男性、女性)做了公平性测试。两项分析都可能显示,错误率处于可接受的范围。然而,处于这两种身份交叉点的黑人女性,往往面临高得多的错误率,因为系统训练时没有见过足够多属于这一特定交叉群体的样本。伤害会叠加,而不会相互抵消。这种情况在不同领域反复出现:招聘算法歧视有残障的女性,信用评分系统让有色人种移民处于不利地位,医疗人工智能低估老年黑人患者的疼痛。
实际操作中的难题是,身份组合的数量会急剧增加。大多数机构都缺少能代表所有这些组合的数据,因此不得不做出取舍:根据风险评估,优先关注某些交叉群体;使用合成数据或重新加权技术;或者接受有些伤害无法被发现。正在形成的最佳实践是“交叉公平性审计”:主动测试风险最高的交叉群体,并在设计系统时,让它们在数据稀少时能够妥善处理失效,而不是悄无声息地降低表现。
研究依据
研究依据
法律学者金伯莉·克伦肖(Kimberlé Crenshaw)于1989年提出“交叉性”这一概念,用来描述相互交织的社会身份如何形成叠加的歧视体系。在人工智能伦理中,这一框架揭示了为什么只看单一维度的公平性指标,无法保护同时受到多重边缘化的群体。研究表明,子群体公平性保证与群体层面的公平性在数学上相互独立:满足后者,并不能确保满足前者。
- Mitchell等人(2019):只针对各项受保护属性分别评估算法公平性,可能掩盖多种属性交叉处的严重差距。他们提出,“交叉公平性”要求任何交叉子群体的结果都不能差于总体平均水平。[1]
- Kearns等人(2018):提出“多重校准”技术,确保预测不仅在总体上得到良好校准,也在数量呈指数级增长的交叉子群体中得到良好校准,为交叉公平性提供了一种计算上可行的方法。[2]
- Buolamwini和Gebru(2018):发现商业性别分类系统在肤色较浅的男性身上表现近乎完美,错误率为0.8%;但在肤色较深的女性身上表现很差,错误率达到34.7%。这说明交叉身份如何让算法伤害叠加。[3]
关键的形式化概念:子群体公平性要求模型的错误率或预测分布满足公平性约束,不仅要覆盖主要人口群体,还要覆盖受保护属性的所有组合。这比群体公平性的要求更严格,也需要专门的审计技术。
适用局限
适用局限
交叉公平性面临实践和理论上的根本挑战。数据稀疏是首要障碍:许多交叉群体的样本量很小,难以进行统计验证,还可能触及隐私限制。身份组合的数量会急剧增加,这意味着无法进行全面测试。研究人员必须决定优先审计哪些交叉群体,而这本身就涉及价值判断:哪些伤害最值得关注?一些学者认为,交叉公平性虽然必要,但如果不解决训练数据和制度结构中造成偏差的根源,仍然不够。另一些学者指出,专注于人工智能系统内部的技术修补,可能让人忽视更广泛的社会不平等,而这些系统往往会反映并放大这种不平等。
参考来源
参考来源
- [1] 算法公平性:选择、假设与定义Mitchell et al. - 2019
- [2] 多重校准:面向计算上可识别的众多群体的校准Kearns et al. - 2018
- [3] Gender Shades:商业性别分类中的交叉群体准确率差异Buolamwini and Gebru - 2018
- [4] 让种族与性别交叉处的群体不再被边缘化Kimberlé Crenshaw - 1989
- [5] 机器学习中的交叉公平性Stanford Human-Centered AI - 2023
试一试
检验你的理解
一家公司测试了人工智能招聘工具的性别公平性(均等程度为100%)和种族公平性(均等程度为98%),随后放心地投入使用。三个月后,公司发现拉丁裔女性应聘者的录用率只有白人男性的20%。问题出在哪里?
查看文章解释
答案: 分别满足性别公平和种族公平,并不能保证交叉公平性
单一维度上的公平,也就是分别看性别或种族时的公平,并不能保证两者交叉处的公平,也就是同时考虑性别和种族时的公平。这正是交叉公平性的核心洞见:子群体可能面临独特的叠加伤害,而逐一测试各个人口特征维度时,这些伤害却看不出来。
以下哪项现实研究发现最能说明,人工智能系统为什么需要交叉公平性?
查看文章解释
答案: 人脸识别对肤色较浅男性的错误率为0.8%,对肤色较深女性的错误率却达到34.7%
Buolamwini和Gebru的Gender Shades研究记录了这一差距,展示了错误率如何在种族与性别的交叉处叠加。分别考察不同种族群体和不同性别时,系统可能显得足够公平;但考察交叉群体时,就会发现它的表现差得多。
一家医院采用了一款人工智能诊断工具,并分别针对不同年龄群体和不同种族群体进行了公平性审计。两项审计都显示表现可以接受。老年黑人患者是否应该确信,自己会获得公平的医疗服务?
查看文章解释
答案: 不应该,因为没有测试这一交叉群体,结果可能不同
如果没有专门测试交叉群体,就无法从数学上保证公平性也适用于多种身份的组合。老年黑人患者可能面临独特的叠加伤害,而年龄审计和种族审计都无法发现这些伤害。这就是为什么交叉公平性审计虽然需要投入更多资源,却仍然必要。
继续探索
为眼前的选择,再找一个有用的想法。
Reframo 的全部已发布文章均可免费阅读。准备好后,随时继续探索。