ACM: Agentic Context Management for Long Horizon Tasks
本文介绍了智能体上下文管理(Agentic Context Management, ACM),这是一个通过无损上下文编辑和外部记忆检索,使智能体能够自主管理长程任务的框架,显著提升了在搜索和编程任务中的性能,并减轻了 Token 压力。
原始论文采用 CC BY 4.0 许可(http://creativecommons.org/licenses/by/4.0/)。 这是对下方论文的AI生成解释。它不是由作者撰写或认可的。如需技术准确性,请参阅原始论文。 阅读完整免责声明
想象一下你是一名正在试图破解一个庞大且多层谜团的侦探。你有一个笔记本,记录下每一个线索、每一段对话以及每一次死胡同。起初,你的笔记本很小,易于管理。但随着案件拖延数日,你的笔记本填满了。很快,你携带的一叠纸张变得如此厚重,以至于你无法快速翻阅,去寻找三小时前发现的那个关键线索。你开始遗忘,开始感到困惑,最终,你自己笔记的重量本身阻碍了你破案。这就是“AI智能体”(Agent)——那些旨在模仿人类进行网页搜索、编写代码或解决复杂问题的计算机程序——所面临的日常挣扎。它们非常擅长思考,但它们有一个糟糕的记忆限制:它们的“笔记本”(被称为“上下文窗口”)会变满,而一旦变满,它们往往会放弃或出错。
长期以来,科学家们一直试图通过强制智能体在笔记本变得太重时对笔记进行总结来解决这个问题。想象一位严厉的老师,每当笔记本达到 90% 的容量时,就会大喊:“停!把目前写过的所有内容都总结一下!”问题在于,这位老师并不知道侦探正在思考什么。他们可能会在侦探即将取得突破的关键时刻强制要求总结,从而丢弃掉解开谜题所需的关键线索。这篇论文介绍了一种更聪明的方法:为智能体提供自己的记忆工具,让它自己决定何时清理笔记、保留什么内容,以及如何在不永久丢失信息的情况下检索旧线索。
拥有超强组织大脑的智能体
来自卡内基梅隆大学和 Meta 的研究人员提出了一种名为 Agentic Context Management (ACM) 的新系统。ACM 不再依赖僵化的规则或外部监控器来告诉 AI 何时进行总结,而是为 AI 配备了两个特殊的“工具”,充当人类短期和长期记忆的角色。
把 AI 当前的工作记忆想象成一张办公桌。当你正在处理一个项目时,你会把现在需要的资料放在桌上。但随着项目的增长,办公桌会变得杂乱无章。在旧的方法中,机器人只会把所有东西塞进一个箱子并扔掉,只保留一份模糊的描述。如果你以后需要某个特定的细节,你就彻底没戏了。
有了 ACM,AI 的办公桌旁边还有一个文件柜。当桌面变得过于拥挤时,AI 会决定进行整理。它会将那些不需要立即使用的资料拿出来,写一份整洁的摘要,然后将原始资料归档到文件柜中。至关重要的一点是,它并没有把这些资料扔掉;它将它们保存得很好。如果 AI 稍后意识到:“等等,我需要检查一下那份旧文件里说了什么,”它可以打开文件柜,取出特定的文件,并阅读原始细节。这是无损的管理方式:信息从未丢失,只是从“活跃办公桌”转移到了“存储文件柜”。中。
教会 AI 成为一名优秀的图书管理员
仅仅给 AI 这些工具是不够的。研究人员发现,即使是聪明的 AI 模型也不会自然而然地知道何时使用它们。有时它们清理得太早(丢弃了仍需使用的线索),有时又等得太久(任由桌面变得混乱到无法思考)。
为了解决这个问题,团队使用了一种“教师-学生”教学法开发了巧妙的训练方法。想象一位大师级侦探(教师)正在观察一名实习生(学生)尝试破案的过程。
- 错误: 学生尝试在不使用文件柜的情况下解决问题,结果陷入困境或失败。
- 教训: 教师看着学生杂乱的笔记说:“嘿,就在这个时刻,你应该把那些旧笔记放进文件柜,因为你当时正在原地打转。”
- 纠正: 教师也会观察学生何时使用文件柜,并说:“等等,你现在还不该把那个归档!你当时正要找到答案呢。”
通过向学生展示何时该清理以及何时不该清理,AI 学会了完美的时机把握。它学会了识别自己何时“陷入循环”或何时“桌面过载”,并能自主采取行动。
结果:更多的线索,更好的答案
当研究人员测试这个新系统时,结果令人印象深刻。他们让他们的“ACM 智能体”与标准 AI 智能体在三种困难任务上进行了对决:深度网络研究、复杂搜索问题以及修复计算机代码。
- 更高的准确率: 经过训练的 ACM 智能体在处理困难研究问题方面的成功率提升了 27%,在解决编程问题方面的成功率提升了 8%。
- 更小的压力: 该系统减少了约 20% 的“峰值 Token 压力”(即 AI 同时需要处理的最大信息量)。这就像减轻了你背包的重量,让你跑得更快。
- 更多的探索: 由于 AI 不再担心空间耗尽,它更愿意尝试更多的搜索路径。它进行了更多的工具调用,并在放弃之前探索了更多的想法。
这篇论文表明,这种方法可以让 AI 处理更长、更复杂的任务而不会感到困惑。它将 AI 从一个到处乱丢纸张的匆忙记录员,转变为一名冷静、有条理的侦探,即使在调查数小时后,也清楚地知道在哪里可以找到所需的证据。研究人员公开了他们的代码和数据,邀请他人基于这一“智能文件系统”进行未来的 AI 开发。
您所在领域的论文太多了?
获取与您研究关键词匹配的最新论文每日摘要——附技术摘要,使用您的语言。