← 最新论文
💻 computer science

PHUMA: Physically Reliable Humanoid Locomotion Dataset

本文介绍了 PHUMA,这是一个通过结合动作捕捉与互联网视频的两阶段流水线构建而成的、时长为 73 小时的物理可靠的人形机器人运动数据集,旨在克服物理伪影并实现鲁棒且可实用于现实世界的运动模仿。

原作者: Kyungmin Lee, Sibeen Kim, Youngdo Lee, Minho Park, Hyunseung Kim, Dongyoon Hwang, Donghu Kim, Hojoon Lee, Jaegul Choo

发布于 2026-06-05
📖 1 分钟阅读☕ 轻松阅读

原作者: Kyungmin Lee, Sibeen Kim, Youngdo Lee, Minho Park, Hyunseung Kim, Dongyoon Hwang, Donghu Kim, Hojoon Lee, Jaegul Choo

原始论文采用 CC BY 4.0 许可(http://creativecommons.org/licenses/by/4.0/)。 ✨ 这是对下方论文的AI生成解释。它不是由作者撰写或认可的。如需技术准确性,请参阅原始论文。 阅读完整免责声明

想象一下,你想教一个机器人像人类一样跳舞或走路。旧的方法是雇佣昂贵的演员在影棚里穿着特殊的套装来记录他们的动作(动作捕捉)。这种方法质量很高,但就像是一个只有几本关于“行走”和“伸手”书籍的图书馆。如果你没有足够的数据,你就无法教会机器人做复杂且有趣的事情。

最近,科学家们尝试了一个新窍门:他们从互联网上抓取了数百万个视频,并利用人工智能将它们转化为机器人的指令。这就像是一个拥有数百万本书籍的庞大图书馆,但问题在于这些书里充满了错别字、缺失的页面以及不可能存在的物理规律。如果你用这些“烂书”来教机器人,机器人可能会尝试穿墙而过、像幽灵一样漂浮在空中,或者像在冰面上一样让脚在地上滑动。

PHUMA 正式登场。

KAIST 的研究人员创建了一个名为 PHUMA(物理可靠的人形机器人运动数据集)的新数据集。把 PHUMA 想象成机器人训练数据中的“质量控制部门”。他们将那些海量的互联网视频通过两步过滤,使其变得安全且符合现实。

以下是他们是如何实现的,我们使用简单的类比:

第一步:“保镖”(物理感知策展)

在数据到达机器人之前,PHUMA 扮演着俱乐部严厉保镖的角色。

  • 问题: 互联网视频很混乱。有时摄像机会移动得很奇怪,导致人看起来像是在漂浮或陷入地板。有时一个人坐在椅子上,但机器人并没有可以坐的椅子。
  • 对策: PHEMA 会扫描视频并剔除“坏”片段。如果一个人看起来在漂浮、滑动,或者正在做机器人物理上无法完成的事情(比如坐在虚空中),那个片段就会被删除。他们还平滑了“抖动”的动作,就像修复抖动的摄像机画面一样。
  • 结果: 他们从巨大的数据池中保留了最好的 73 小时运动数据,确保每一段片段在物理上都是可能的。

第二步:“裁缝”(PhySINK 重定向)

即使视频本身很好,人类的身体形状也与机器人不同。人类的膝盖向一个方向弯曲;机器人可能向另一个方向弯曲。

  • 问题: 如果你只是简单地将人类的姿态复制粘贴到机器人身上,机器人可能会扭转关节直到损坏(关节违规),或者试图让脚踩进地板里一半(穿透)。
  • 对策: 研究人员构建了一个名为 PhySINK 的特殊工具。想象一下一位大师级的裁缝,他不仅仅是把一套衣服拉伸以适应新的人,而是会在确保布料不撕裂的同时,实际重新缝制接缝以适应新身体的形状。
    • “不漂浮”规则: 裁缝确保机器人的脚确实接触地面。
    • “不滑行”规则: 裁缝确保机器人在应该站立不动时,不会像冰球运动员一样滑动脚步。
    • “不折断”规则: 裁缝检查机器人的关节是否会以会导致折断的方式弯曲。

结果:为什么这很重要

论文在真实的机器人(特别是 Unitree G1 和 H1-2)上测试了这个新数据集。

  • 竞争对手: 他们将 PHUMA 与旧有的“规模小但完美”的数据集(如 AMASS)以及“规模大但混乱”的互联网数据集(如 Humanoid-X)进行了对比。
  • 胜出者: 使用 PHUMA 训练的机器人在所有方面表现最好。
    • 它们在模仿从未见过的动作时成功率更高。
    • 它们跌倒或出现故障的情况更少。
    • 现实世界测试: 当他们把用 PHUMA 训练的机器人放入现实世界(而非仅仅在计算机模拟中)时,它走得比使用其他数据集训练的机器人更平稳,犯错也更少。

核心结论

论文认为,为了让机器人动作自然,质量比单纯的数量更重要。 你可以拥有百万个糟糕的视频,但如果其中包含不可能的物理现象,机器人就会学会如何失败。PHUMA 证明了,通过仔细过滤互联网视频并使用“智能裁缝”来修正机器人的身体形状,你可以创建一个高质量的动作库,让机器人能像人类一样行走、转身和保持平衡。

该论文并未声称:

  • 它并不声称这能帮助机器人进行手术或与复杂物体互动(例如打开冰箱)——目前的重点严格限于运动能力(行走、转身、平衡)。
  • 它并不声称机器人是完美的;它们仍然存在一些微小的误差,但比以前有了显著的改进。
  • 它并不声称这适用于不平整的地面(如楼梯或岩石);它目前专注于平坦表面。

您所在领域的论文太多了?

获取与您研究关键词匹配的最新论文每日摘要——附技术摘要,使用您的语言。

试用 Digest →