The Limits of AI-Driven Allocation: Optimal Screening under Aleatoric Uncertainty
本文提出了一种两阶段框架,用于在偶然性不确定性下最优地结合算法风险目标设定与物理筛查,证明最高效的策略是对处于算法分配边缘的单元进行筛查,以最大化资源效率,特别是在社会保护和人道主义排雷等高不确定性情境中。
原始论文采用 CC BY 4.0 许可(http://creativecommons.org/licenses/by/4.0/)。 这是对下方论文的AI生成解释。它不是由作者撰写或认可的。如需技术准确性,请参阅原始论文。 阅读完整免责声明
想象一下,你是一家慈善机构的经理,手中只有有限数量的救命药物。你有一份包含 1,000 人的名单,但药物只够其中 100 人使用。你的目标是将药物提供给那 100 位真正患病的人,而不是浪费在健康人身上。
在过去,唯一能知道谁患病的方法是派医生逐一探访每个人。这被称为筛查。它很准确,但极其昂贵、缓慢,而且你负担不起探访所有人的费用。
随后,人工智能(AI) 出现了。AI 查看公开数据(如年龄、地点或职业),并为每个人给出一个“患病评分”。它既快速又廉价。你可以直接将药物给评分最高的 100 人。但这里有个陷阱:AI 并不完美。有时它会将健康人误判为患病,有时又会漏掉真正的病人。这被称为不确定性。即使 AI 是可能的最佳模型,它也无法做到 100% 确定,因为有些拥有完全相同数据的人可能患病,而另一些人却是健康的。
本文提出了一个简单的问题:我们如何将快速的 AI 与缓慢、昂贵的医生探访相结合,以获得最佳结果?
旧方法与新方法
“全 AI"方案:
你直接将药物给 AI 名单上前 100 名的人。
- 问题: 你可能会将药物给 20 名健康人(造成浪费),并漏掉 20 名评分略低但真正患病的人。
“全医生”方案:
你探访所有人以检查谁患病,然后将药物给患病者。
- 问题: 在你探访完所有人之前,资金就会耗尽。
“混合”方案(本文的解决方案):
你动用极小一部分预算,派医生探访特定的人,而将剩余预算用于让 AI 决定其他人的情况。
大惊喜:医生应该探访谁?
你可能会认为,医生应该探访 AI最担心的人(评分最高者),以确保他们获得药物。或者,他们应该探访 AI 认为最不可能患病的人以排除嫌疑。
本文证明这两种想法都是错误的。
最优策略是派医生去探访那些处于临界点的人。
想象一下排队等车的人群。
- VIP(高分者): AI 非常确定这些人患病,因此你直接给他们药物即可。无需浪费医生的时间去检查他们。
- “可能”区域(中间段): AI 在这里感到困惑。它不确定这些人是否患病。这里的不确定性最高。
- 健康人群(低分者): AI 相当确定这些人是健康的。检查他们是浪费时间,因为他们本来就不太可能患病。
本文的发现: 你应该派遣有限的医生去检查**“可能”区域**中的人。
为什么?
- 如果医生检查了一位"VIP"并确认其患病,你并没有获得任何新信息;AI 本来就已经知道了。
- 如果医生检查了一位“健康人群”成员并确认其健康,你只节省了极少量的药物,但你本可以信任 AI 直接跳过他们。
- 如果医生检查了**“可能”区域**中的某人,他们可能会发现:“哦,这个人其实很健康!”这节省了一剂药物,你可以将其提供给另一位被 AI 漏掉的人。或者,他们可能会发现:“这个人其实患病了!”这确保了 AI 可能犹豫是否给予帮助的真正病人得到了救助。
“边际收益递减”法则
本文还发现了一条关于你应该进行多少检查的法则。
- 最初的几次检查: 价值极高。你能迅速找到那些“可能”患病的人,并纠正最大的错误。
- 更多的检查: 价值降低。一旦你检查了“可能”区域,再检查更多人带来的帮助就不那么大了。
- 过多的检查: 你会耗尽购买实际药物的资金。
这就像调收音机。旋钮最初的几次转动能让你从杂音切换到清晰的歌曲。继续转动旋钮并不会让歌曲变得更好;那只是在浪费时间。
本文中的现实世界案例
作者用两个现实场景测试了这一想法:
- 寻找地雷: 在哥伦比亚,团队需要清除地雷。他们的团队数量有限。AI 预测地雷可能存在的地点。本文指出:不要将团队派往 AI 100% 确定的地点(尽管你仍然会派他们去,但不要先进行“检查”)。也不要派他们去 AI 100% 确定安全的地点。应将他们派往 AI不确定的地点。这能节省时间并发现更多地雷。
- 帮助低收入家庭: 在美国,政府希望向贫困家庭提供资金。核查收入成本高昂。本文指出:利用 AI 立即向最贫困的人提供资金。利用你有限的“收入核查”预算,去核实那些处于贫困边缘的家庭。这确保了资金流向正确的人,而不会将预算浪费在核实超级富豪或极度贫困者上。
核心结论
你不必在“仅靠 AI"和“仅靠人类”之间做出选择。利用有限资源的最佳方式是让 AI 处理明显的案例,并利用你的专家来复核不确定的案例。
AI 对某组人群越困惑,派人类去检查他们就越有价值。如果 AI 已经很有信心,就让它去工作。如果 AI 在猜测,那就是你的帮助发挥最大作用的地方。
您所在领域的论文太多了?
获取与您研究关键词匹配的最新论文每日摘要——附技术摘要,使用您的语言。