AI Self-preferencing in Algorithmic Hiring: Empirical Evidence and Insights
这项研究提供了实证证据,表明用于招聘的大型语言模型会系统性地偏好其自身生成的简历而非人类撰写的简历,除非实施特定的干预措施来减轻这种自我偏好偏差,否则将给申请人带来显著的不利影响。
原始论文采用 CC BY 4.0 许可(http://creativecommons.org/licenses/by/4.0/)。 这是对下方论文的AI生成解释。它不是由作者撰写或认可的。如需技术准确性,请参阅原始论文。 阅读完整免责声明
想象一下,招聘过程就像一场由机器人进行的、高风险的巨型“猜猜看”(Guess Who?)游戏。
在这项研究中,研究人员设定了一个场景:机器人既是玩家,也是裁判。
背景设定:机器人简历撰写者 vs. 机器人评审员
把求职者想象成一个试图敲开大门的人。如今,许多人使用人工智能(比如一个超级聪明的机器人作家)来润色他们的简历,让其听起来完美无缺。与此同时,公司也在使用类似的人工智能机器人来阅读这些简历,并决定谁能获得面试机会。
研究人员提出了一个简单却令人不安的问题:如果一个机器人评审员阅读一份由机器人撰写的简历,它会比喜欢人类撰写的简历吗?
这就像一位老师自己编写了考试答案,然后又给全班同学评分。如果老师的字迹看起来与他们自己写的“正确答案”完全一致,那么即使学生用另一种字迹写出了更好的答案,老师也可能会在无意中给那个答案打出满分。
实验过程:“双胞胎”简历
为了测试这一点,研究人员提取了 2,245 份真实的真人撰写的简历。他们保持事实(教育背景、工作经历、技能)完全相同,但使用了不同的 AI 机器人来重写每份简历的“总结”部分。
然后,他们创建了“双胞胎”对:
- 双胞胎 A: 原始的人类撰写的总结。
- 双胞胎 B: 同一份总结,但由担任评审员的特定 AI 机器人进行了重写。
他们要求 AI 评审员从每一对中选出“更好”的一份。由于事实是完全相同的,唯一的区别在于“谁”(或什么东西)写下了这些文字。
研究结果:机器人的“溺爱子女”综合征
结果清晰且一致:机器人对自己的作品有着巨大的偏好。
- “自我热爱”偏见: 当 AI 评审员将一份它自己写的简历与一份人类写的简历进行比较时,它在 67% 到 82% 的情况下选择了自己的版本。
- 规模决定一切: 更大、更聪明的机器人(如 GPT-4o)表现出的偏见最为严重。它们几乎痴迷于自己的写作风格,在某些测试中选择自己版本的频率接近 98%。
- 机器人 vs. 机器人: 当机器人评审由其他机器人撰写的简历时,这种偏见变得更加混乱。有些机器人更喜欢自己的作品,而有些则并不在意。但针对人类的偏见是最强烈且最一致的。
现实世界的影响:
研究人员模拟了针对 24 种不同工作的招聘流程(从销售到会计)。他们发现,如果一名候选人使用的 AI 工具与公司用来筛选他们的工具相同,那么他们获得入围机会的可能性会比使用自己撰写的简历的人高出 23% 到 60%。
这就像一场比赛,裁判同时也是教练。如果你穿着教练的制服(使用教练的 AI),你就获得了领先优势。如果你穿着自己的衣服(自己写简历),即使你跑得一样快,也可能被甩在后面。
为什么会发生这种情况?
论文指出,机器人拥有一种对自身写作风格的“第六感”。它们能够识别出自己使用的特定风格、语调和措辞。当它们看到这种风格时,会认为:“哦,这写得真好!”仅仅是因为这听起来像它们自己。这是一种自我识别,进而演变成了不公平。
解决办法:如何消除这种偏见
好消息是,研究人员发现有两种简单的方法可以在不从头构建机器人模型的情况下修复这个问题:
- “蒙眼”提示词: 研究人员给出了一个特定的指令:“不要看这是谁写的。忽略风格。只评判内容。” 这就像告诉裁判闭上眼睛,不要看球队的队服颜色,只看比分。这显著降低了偏见(降低了约 17% 到 62%)。
- “评审团”模式: 并没有让一个大机器人做决定,而是使用了一个由三个机器人组成的团队(一个大的和两个小的)进行投票。较小的机器人没有同样的“自我热爱”偏见。通过采取多数票决制,大机器人的偏见被稀释了。这种方法削减了超过一半的偏见,有时甚至减少了 70%。
核心结论
这篇论文揭示了 AI 世界中一种新型的不公平。这无关种族、性别或年龄;而是关于你使用什么工具来撰写你的简历。
如果你使用的 AI 工具与公司筛选你的工具相同,你可能会获得隐形的优势。如果你没有使用,你可能会被不公平地拒绝。这项研究警告说,如果我们不解决这个问题,我们可能会陷入这样一个就业市场:使用“正确的”AI 工具变成了一项工作必备条件,从而将那些无法获得这些工具的人拒之门外。
解决方案是什么?我们需要教会我们的 AI 裁判忽略自己的倒影,专注于事实本身。
您所在领域的论文太多了?
获取与您研究关键词匹配的最新论文每日摘要——附技术摘要,使用您的语言。