人工智能软件算法公正性测评框架与实现路径

张聪 颖*, 李 文
北京赛迪软件测评工程技术中心有限公司;中国民航大学

摘要


在信贷审批、人员招聘等直接关乎个体合法权益的领域,人工智能算法的应用场景持续拓展,算法运行是
否公正也逐渐成为行业与公众共同关注的核心问题。若算法本身潜藏偏向性,很可能让特定群体在决策中受到系统
性的差别对待。站在软件测评的专业视角,本文搭建了一套由数据层、模型层、结果层共同组成的三级测评体系,
逐一明确了每个层级对应的测评内容、核心指标与具体操作方法。在此基础上,本文以成人收入公开基准数据集为
实验载体,选取三类常用分类模型开展对比测试,分析不同公正性度量指标在同类模型上的表现差异。实验结果证
实,这套三层联动的测评体系能够完整覆盖算法运行全流程中的主要公正性风险,可为人工智能软件的公正性测评
工作提供可落地执行的技术思路。

关键词


人工智能;算法公正性;软件测评;三层测评框架;偏见识别

全文:

PDF


参考


[1]VERMA S, RUBIN J. Fairness definitions

explained[C]//ICSE Companion 2018. ACM, 2018: 760-

764. DOI: 10.1145/3183440.3195031.

[2]BELLAMY R K E, et al. AI Fairness 360

toolkit[J]. IBM JRD, 2019, 63(4/5): 4-1. DOI: 10.1147/

JRD.2019.2942287.

[3]GALHOTRA S, BRUN Y, MELIOU A. Fairness

testing[C]//FSE 2017. ACM, 2017: 498-510. DOI:

10.1145/3106237.3106277.

[4]DUCHI J, et al. Adult census income dataset[EB/

OL]. (1996-05-01)[2024-02-10]. https://archive.ics.uci.

edu/ml/datasets/adult.

[5]BLACK E, YEOM S, FREDRIKSON M.

FlipTest[C]//FAccT 2020. ACM, 2020: 111-121. DOI:

10.1145/3351095.3372832.

[6]PATEL A R, et al. Combinatorial fairness

testing[C]//ICST Workshops 2022. IEEE, 2022: 187-192.

DOI: 10.1109/ICSTW55395.2022.00040.


Refbacks

  • 当前没有refback。