← 最新论文
💻 computer science

ShapeGrasp: Simultaneous Visuo-Haptic Shape Completion and Grasping for Improved Robot Manipulation

ShapeGrasp 是一种新颖的机器人系统,它在抓取过程中迭代地结合视觉估计与触觉反馈,旨在同时优化三维物体形状的重建并提高对陌生物体的抓取成功率。

原作者: Lukas Rustler, Matej Hoffmann

发布于 2026-07-01
📖 1 分钟阅读☕ 轻松阅读

原作者: Lukas Rustler, Matej Hoffmann

原始论文采用 CC BY 4.0 许可(http://creativecommons.org/licenses/by/4.0/)。 ✨ 这是对下方论文的AI生成解释。它不是由作者撰写或认可的。如需技术准确性,请参阅原始论文。 阅读完整免责声明

想象一下,一个机器人正试图拿起一个它从未见过的神秘物体,比如一个形状奇特的工具或一个皱巴巴的盒子。如果机器人只用眼睛(摄像头)观察,它看到的只是一个扁平且不完整的图像。它可能会猜测物体的背面是光滑的,但实际上,那里可能还凸出了一个把手。如果机器人基于这个猜测去抓取,它可能会抓空、掉落物体,或者捏碎物体。

ShapeGrasp 是一种全新的方法,它教机器人通过实践来学习,就像人类学习那样。机器人不再仅仅是观察和猜测,而是通过“感知”来寻找解决方案。

以下是它的工作原理,分为简单的几个步骤:

1. “蒙眼”开始

机器人从摄像头的单张快照开始。它使用一个智能计算机程序来猜测物体的其余部分看起来是什么样的。这就像是在看一块拼图碎片,并试图想象出整幅画卷。机器人创建了一个 3D 模型,但这仅仅是一个猜测。

2. “试错”抓取

机器人根据那个猜测尝试抓取物体。

  • 如果成功了: 太棒了!它举起了物体。
  • 如果失败了: 物体可能会滑落,或者机器人会意识到:“等等,我的猜测错了;这个物体比我想象的更重,或者形状不同。”

3. “感官更新”

这是神奇的部分。每当机器人尝试抓取时,它都会学到两件新事物:

  • 触觉: 如果机器人的手指确实碰到了物体,它的传感器就会告诉它:“这就是物体的精确表面。”这就像机器人在用手指抚摸雕像以感受凹凸不平。
  • 空白空间: 即使机器人没抓到,它的手指也会占据一定的空间。机器人知道:“我的手指无法进入这里,因为物体一定挡住了。”它利用这种“空白空间”的数据来完善它的心理地图。

4. “重来一次”

如果第一次抓取失败了,机器人并不会只是重复同样的动作。它会利用所有新的触觉和空间信息,更新它对物体的 3D 模型,使其更加准确,然后基于这个更好的地图进行下一次抓取。它不断重复这个循环——抓取、感知、更新、再抓取——直到成功为止。

为什么它很特别?

大多数机器人要么试图在触摸任何东西之前建立一个完美的 3D 模型,要么只是盲目地抓取。ShapeGrasp 是首个在物理抓取之后在现实世界中更新其 3D 模型的方法。

把它想象成一位雕塑家。传统的机器人就像是一个试图根据一张模糊的照片来雕刻雕像并寄希望于运气的人。ShapeGrasp 则像是一位雕塑家,凿一下,退后一步,感受一下石头,意识到自己凿多了,然后在再次动凿之前调整计划。

实验结果

研究人员在两种不同的机器人手臂和不同类型的“手”(夹持器)上测试了该方法:

  • 一个两指手(类似于钳子)。
  • 一个三指手(更像人类的手)。

他们发现 ShapeGrasp 在抓取物体方面比以往的方法表现得好得多。

  • 两指手的成功率达到了 91%。
  • 三指手的成功率达到了 84%。

至关重要的是,每当机器人尝试抓取物体时,该物体的 3D 模型就会变得更加准确和详细。到最后,机器人完全了解了物体的样子,这有助于它随后小心地处理物体(例如,如果需要将物体递给人)。

权衡

论文指出,这个过程需要花费一点时间(每个物体大约 5 到 9 秒),因为机器人必须思考、模拟并小心移动。然而,这种权衡是值得的,因为与单纯的猜测相比,它的可靠性要高得多。

简而言之,ShapeGrasp 将机器人从一台“猜测并寄希望于运气”的机器,转变为一台“学习并适应”的机器,利用自身的错误来构建对世界的更好理解。

您所在领域的论文太多了?

获取与您研究关键词匹配的最新论文每日摘要——附技术摘要,使用您的语言。

试用 Digest →