← 最新论文
💻 计算机科学

Verifiable Delegated Authority for LLM Agents in Banking: A Formal Architecture, Capability Protocol, and Audit Guarantees

本文提出了一种用于银行业安全大语言模型(LLM)智能体的形式化架构,该架构通过衰减能力令牌(attenuated capability tokens)和确定性策略引擎将授权与模型解耦,从而针对对抗性参与者提供权威限制、有限金融损失和审计完整性的可证明保证。

原作者: Neeraj Aggarwal

发布于 2026-10-20
📖 1 分钟阅读☕ 轻松阅读

原作者: Neeraj Aggarwal

原始论文采用 CC BY 4.0 许可(https://creativecommons.org/licenses/by/4.0/)。 ✨ 这是对下方论文的AI生成解释。它不是由作者撰写或认可的。如需技术准确性,请参阅原始论文。 阅读完整免责声明

在金融业这个高风险的世界里,信任传统上建立在僵化的规则和可预测的行为者之上。几十年来,银行通过确保每一项操作都来自已知的自然人或可靠的预设计算机服务,来守护其数字大门。这些系统运行在一个简单的前提下:如果请求由正确的人签署并遵循了正确的步骤,那么它就是安全的。然而,一种新型的员工已经登上了舞台:人工智能智能体(AI agent)。与人类或标准计算机程序不同,这些智能体由大语言模型驱动,能够处理如电子邮件或报告等复杂的非结构化信息。它们可以自主决定下一步该采取什么行动。这种灵活性使它们在处理繁琐的后台任务时极其有用,但也引入了深刻的不确定性。因为即使面对相同的信息,这些智能体并不总是做出相同的决策,因此那些假设行为者是可预测的旧安全模型已不再适用。如果给予一个 AI 智能体移动资金的钥匙,银行如何确保它不会意外或恶意地转移不该转移的资金?

Infosys 的研究员 Neeraj Aggarwal 正针对这一问题提出了一种专门为银行业设计的全新框架。其核心思想是停止试图让 AI 本身变得完美安全,而是围绕它构建一个安全的“笼子”。在这种新架构中,AI 不被视为受信任的决策者,而被视为不受信任的“提议者”(proposer)。它被允许提出行动建议,但绝不允许直接执行这些建议。相反,每一项建议都必须通过一个独立的、确定性的策略引擎进行审核,该引擎充当严格的守门人。该引擎会根据一套规则和一个特定的“能力令牌”(capability token)来检查建议,该令牌精确限制了智能体能做的具体事项、能移动的资金金额以及操作时长。该系统的设计确保了即使 AI 被恶意提示词欺骗或被错误数据误导,也无法突破其分配的边界。研究人员从数学上证明,在这种设计下,智能体永远无法提升自身的权限去执行未经授权的操作,并且他们计算出了在没有人工干预的情况下,系统遭受攻击时可能产生的精确损失上限。

为了确保一切环节均准确无误,研究人员还构建了一个可验证证据系统。智能体采取的每一个步骤——从最初的想法到最终的执行——都会被记录在一个安全的、不可篡改的日志中,这些记录像链条一样被签名并相互链接。这使得审计员甚至另一台计算机可以在数月后查看记录,并验证智能体是否遵守了规则,而无需查看 AI 的内部思维过程或重新运行该 AI。该系统还引入了一种利用多个 AI 智能体互相审查工作的方法。研究人员发现,仅仅增加审查者数量并不能保证安全性;相反,关键在于审查者必须具备“多样性”,即它们应基于不同的模型或经过不同的训练。如果所有的审查者都拥有相同的盲点,它们都会犯同样的错误。通过量化这种风险,系统可以决定第二次意见是否真的值得投入成本,以及何时必须停止并寻求人类的帮助。

团队通过构建一个工作原型并让其经历数千次模拟攻击,对这些想法进行了测试。在这些测试中,一个对抗性计算机(作为恶意智能体的替代品,其运行过程中不涉及真实的语言模型)试图欺骗系统执行未经授权的操作,例如伪造令牌、重放旧命令或篡改日志。在 70 万次尝试中,系统成功拦截了每一次未经授权的执行。这些依赖合成数据并使用 HMAC-SHA256 来模拟真实数字签名的模拟实验证实,关于财务损失的数学限制是准确的;当攻击者试图将系统推向绝对极限时,实际损失与预测的最大值完全吻合,证明了安全网非常严密。测试还揭示了初始设计中的两个特定弱点:一个与令牌的有效时长有关,另一个关于回滚日志至先前状态的能力。最终的设计弥补了这些漏洞,确保即使攻击者成功窃取了令牌,该令牌也只能使用一次,且只能在极短的时间窗口内使用。

这种方法代表了我们在如何保障关键基础设施中智能系统安全方面的思维转变。与其寄希望于 AI 始终表现良好,不如假设它可能会出错,并构建一层与 AI 推理过程相分离的强制执行层。其结果是,AI 可以发挥其处理复杂信息和提出解决方案的能力,而银行则保留对最终行动的绝对控制权。研究人员证明,在银行环境中部署强大的自动化智能体是可能的,且不会产生不可审计的风险。通过将 AI 视为“提议者”并将执行层视为“执行者”,并通过保留每个决策的防篡改记录,银行可以开始以一种此前无法实现的安全性与问责水平来使用这些工具。这项工作目前仍是一个形式化模型和模拟实验,但它为将 AI 智能体从实验性工具转向受监管金融业务的核心领域提供了一条清晰且经过验证的路径。

您所在领域的论文太多了?

获取与您研究关键词匹配的最新论文每日摘要——附技术摘要,使用您的语言。

试用 Digest →