← 最新论文
💻 computer science

Faster-WAM: Efficient Inference-Time Future Conditioning for Robust World Action Models

Faster-WAM 是一种高效的世界动作模型(World Action Model),它通过引入一种稀疏未来条件化框架,选择性地复用预计算的未来表示,从而解决了推理速度与鲁棒性之间的权衡问题,实现了最先进的性能以及比现有方法显著更快的推理速度。

原作者: Weiheng Zhao, Haoyi Jiang, Xin Shi, Liu Liu, Fan Huang, Zhizhong Su, Wei Sui, Xinggang Wang

发布于 2026-08-06
📖 1 分钟阅读☕ 轻松阅读

原作者: Weiheng Zhao, Haoyi Jiang, Xin Shi, Liu Liu, Fan Huang, Zhizhong Su, Wei Sui, Xinggang Wang

原始论文采用 CC BY 4.0 许可(http://creativecommons.org/licenses/by/4.0/)。 这是对下方论文的AI生成解释。它不是由作者撰写或认可的。如需技术准确性,请参阅原始论文。 阅读完整免责声明

想象一下,你正在教一个机器人做晚饭。你给它看一段有人在切蔬菜的视频,你希望机器人学习的不只是现在的菜刀长什么样,还有场景在下一秒会如何变化。胡萝卜会飞到空中吗?蒸汽会升腾起来吗?这就是被称为“世界动作模型”(World Action Models)的领域的核心。这些是专门为机器人设计的特殊 AI 大脑,它们不仅会对当下做出反应,还会尝试去“想象”未来,从而做出更好的决策。把它想象成玩电子游戏:一个聪明的玩家不仅看现在的屏幕,还会预判敌人的跳跃位置,以便及时躲避。

长期以来,科学家在构建这些机器人大脑时面临着一个棘手的选择。他们可以构建一个“超级思考者”,在移动时不断模拟未来,这会让机器人变得非常聪明,但极其缓慢且极其消耗计算资源。或者,他们可以构建一个“轻量化”版本,这个版本只在机器人学习时思考未来,但一旦机器人开始实际工作,它就会把对未来的思考忘掉。这种轻量化版本很快,但当现实世界变得混乱或看起来与训练视频不同时,它往往会感到困惑。大问题在于:这种“对未来的思考”仅仅是一项有用的课后作业,还是机器人在执行任务时大脑中确实需要保留这种未来愿景?

这篇论文介绍了一种名为 Faster-WAM 的新型机器人大脑,它解决了这个谜题。研究人员发现,机器人确实需要在工作时保持其“未来愿景”处于活跃状态,以保持鲁棒性(稳健性),但它并不需要进行那种反复模拟未来的繁重计算。Faster-WAM 不再不断地重新运行未来模拟,而是在开始时对未来进行一次“快照”,然后在整个任务过程中巧妙地重复使用这个快照。

把它想象成一位在繁忙厨房里的厨师。“联合式 WAM”(Joint-WAM,旧的慢速方法)就像一位厨师每隔几秒就会停下来问副厨:“五分钟后的汤看起来会是什么样?”然后等待答案后再进行下一步。它很准确,但厨房的节奏会变得太慢。一个“快速式 W laM”(Fast-WAM,旧的快速方法)则像是厨师只在看食谱时才提问,然后就把答案扔掉,纯靠直觉烹饪。这很快,但如果炉灶的颜色变了,或者食材略有不同,厨师可能会烧焦汤,因为他忘记了计划。

Faster-WMA 是那位聪明的厨师。他们在开始时问一次问题,把答案写在一张便签上(即“未来表示”),然后把它贴在墙上。在烹饪过程中,他们会在需要提醒时瞥一眼便签,但不会停下来重新提问。这使得他们能像慢速厨师一样细心,但速度却更快。

论文显示,这种方法效果极佳。当在名为 LIBERO-Plus 的复杂任务集(机器人会面临新的、令人困惑的情况,如不同的光照或摄像机角度)上进行测试时,旧的快速方法大约有一半的时间会失败,成功率仅为 49.14%。然而,新的 Faster-WAM 成功率达到了 73.57%。更令人印象深刻的是,它实现这一目标的速度比那个不断进行模拟的慢速方法快了 2.21 倍

研究人员利用两个聪明的技巧构建了这个系统。首先,他们使用了被称为 SparseMoT 的技术,这就像是在特定的、重要的时刻才瞥一眼便签,而不是每一秒都在盯着它看。其次,他们使用了 Interval KV-Fusion,这就像是将整页笔记总结成一个易于阅读的要点,这样机器人就不会被过多的信息淹没。

最终,这篇论文证明了你不需要在“聪明”和“快速”之间做选择。通过高效地保持一个“未来快照”的活跃,机器人可以比以前更好地应对现实世界的混乱,使它们为实验室之外那个杂乱、不可预测的真实世界做好准备。

您所在领域的论文太多了?

获取与您研究关键词匹配的最新论文每日摘要——附技术摘要,使用您的语言。

试用 Digest →