Economy of Minds: Emerging Multi-Agent Intelligence with Economic Interactions
受弗里德里希·哈耶克经济理论的启发,本文证明了一个去中心化的多智能体系统——其中智能体通过拍卖进行竞争,并基于财富积累经历经济选择——能够通过自我编排,发展出涌现出的多步推理策略,从而在多种复杂任务中超越更强大的单体基准模型。
原始论文采用 CC BY 4.0 许可(http://creativecommons.org/licenses/by/4.0/)。 这是对下方论文的AI生成解释。它不是由作者撰写或认可的。如需技术准确性,请参阅原始论文。 阅读完整免责声明
想象一个繁忙的城市,成千上万个微小且略显笨拙的机器人正试图解决一个宏大而复杂的谜题。就个体而言,每个机器人的能力都非常有限:它们只能看到图像的一小部分,记忆力很短,且只能执行一两个特定的任务。如果你要求其中一个机器人独自解决整个谜题,它注定会失败。
在当今大多数人工智能系统中,我们试图通过构建一个“老板机器人”(中央控制器)来告诉每个人该做什么来解决这个问题。但本文认为,这就像试图用一名交通警察来管理一座拥有数百万人的城市一样——会导致系统过载、缓慢且容易崩溃。
相反,作者提出了一个不同的想法:思维经济学(Economy of Minds, EOM)。他们将这群机器人变成了一个自由市场经济体。
以下是其运作方式,使用了简单的类比:
1. 控制权的拍卖
想象机器人正排成一队,等待着采取解决谜题的下一步行动。它们不能直接抢夺方向盘;它们必须竞标。
- 每个机器人都有一个特定的“唤醒信号”(例如:“只有当任务涉及数学时我才醒来”或者“只有当我们需要搜索网页时我才醒来”)。
- 当需要执行某一步骤时,所有收到唤醒信号的机器人都会举起手,并喊出一个出价(一个它们愿意支付的价格,以获得轮到自己行动的机会)。
- 出价最高的机器人赢得行动权。它负责执行动作,从而推动环境向前推进。
2. 金钱流动(信用分配)
这是神奇之处。系统如何知道哪个机器人真正提供了帮助?
- 当一个机器人赢得拍卖后,它必须向在前一个动作中行动的机器人支付其出价。
- 如果最终谜题被成功解决,最后一个机器人会从“环境”那里获得一份奖励(就像从市长那里得到奖金一样)。
- 这份奖励会沿着机器人的链条向后流动。最后一个机器人付给倒数第二个,倒数第二个付给倒数第三个,以此类推。
- 结果: 那些做出有助于成功的动作的机器人会变得富有;而那些做出导致死胡同动作的机器人则会陷入不断付钱的困境,并最终走向破产。
3. 进化:适者生存(富者生存)
系统不仅仅运行一次,而是像真人秀节目一样反复运行。
- 富人存续: 积累了财富(因为它们不断协助解决问题)的机器人可以进行“繁殖”。它们会被复制,但会带有微小的随机指令调整(即变异)。这就是开发(Exploitation)——精炼行之有效的方法。
- 穷人淘汰: 破产(因为它们一直在做错误的动作)的机器人会被踢出城市。新的、随机的机器人会被引入以取代它们的位置。这就是探索(Exploration)——尝试新事物。
- 租金: 即便是成功的机器人也必须支付一小笔“租金”才能留在城市里,这确保了只有真正有用的机器人才能长期生存。
4. 结果:自组织智能
论文在五个困难任务上测试了该方法:数学问题、金融研究、科学发现、计算机芯片设计以及云软件优化。
他们从“弱”智能体开始——这些机器人是被刻意限制了能力的(例如,它们只能使用一种工具或只能写极短的答案)。
- 没有经济系统时: 这些弱小的机器人表现得一败涂地。
- 有了经济系统后: 市场压力迫使机器人进行进化。那些学会如何通过协作来解决问题的机器人变得富有并大量繁衍;而那些没能做到的则被踢了出去。
随着时间的推移,这群机器人实现了自组织。它们不需要一个“老板”来告诉谁该和谁说话。市场决定了一切。
- 如果一个机器人擅长检查数学,它就会变得富有并留下来。
- 如果一个机器人擅长寻找数据但不擅长撰写最终答案,它就会坚守自己的岗位,由另一个机器人接手写作工作。
- 最终,这群机器人开发出了复杂且高效的工作流,其表现甚至优于试图独自完成一切的单个超级智能机器人。
核心启示
论文声称,你不需要去设计一个拥有严格等级制度的完美 AI 智能体团队。相反,你只需要设定好游戏的规则(即经济规则)。
如果你给智能体一个竞争的理由、一个为错误买单的方式以及一个获得成功的奖励,它们自然会学会如何专业化、如何协作,并解决那些任何单一智能体都无法独立完成的难题。这就像自由市场经济创造复杂产品一样,并不需要一个中央计划者告诉每家工厂生产什么;市场的“看不见的手”完成了组织工作。
简而言之: 论文表明,一群处于竞争性经济系统中的“愚蠢”智能体,可以在没有人指挥的情况下,演变成一种“聪明”的集体智能。
您所在领域的论文太多了?
获取与您研究关键词匹配的最新论文每日摘要——附技术摘要,使用您的语言。