Learning to Feel Materials from Multisensory Tactile Data via Interpretable Models
本文提出了一种可解释的计算框架,该框架利用多感官触觉数据,特别是来自按压、静态和滑动交互的热学与顺应性线索,来有效地模拟人类材料感知并增强机器人的触觉识别。
原始论文采用 CC BY 4.0 许可(https://creativecommons.org/licenses/by/4.0/)。 这是对下方论文的AI生成解释。它不是由作者撰写或认可的。如需技术准确性,请参阅原始论文。 阅读完整免责声明
想象一下,你的手是一个超级特工,每当你触摸到东西时,它都会向你的大脑发送一条秘密信息。这不仅仅是感觉到“软”或“硬”那么简单。这是一个复杂的高速数据流,涉及你的皮肤如何挤压、热量如何从你的手指流向物体,以及当你滑过一个表面时皮肤是如何振动的。这个科学领域被称为触觉学(haptics)(研究触摸的科学),这也是为什么你无需看一眼就能分辨出是一杯水还是一把牙刷的原因。但这里有一个谜题:虽然人类在这方面非常出色,但我们并不完全理解大脑使用什么样的“秘密代码”,将那些关于挤压、热量和凹凸不平的信号转化为“这是木头”或“这是金属”的清晰图像。
为什么这很重要?因为如果我们想要机器人拥有像人类一样的感觉,或者我们想要在虚拟现实游戏中真正“感觉到”巨龙鳞片的质感,我们就需要破解这个代码。目前,我们的数字世界大多是视觉和听觉的;它们在触觉上是沉默且冰冷的。为了构建能够拿起鸡蛋而不捏碎它的机器人,或者让电子游戏感觉真实,科学家需要弄清楚哪些触觉信号是最重要的线索。他们需要知道,物体的热度是否比它的粗糙度更重要,或者滑动手指是否比仅仅向下按压效果更好。
论文:教计算机像人类一样“感知”
在这项研究中,来自代尔夫特理工大学的研究员 Li Zou 和 Yasemin Vardar 决定构建一个“翻译器”。他们想要创建一个计算机模型,这个模型不仅仅是猜测某种物质是什么,而是要像人类一样理解它。可以把它想象成教机器人一种对纹理的“直觉”,而不是仅仅运行一份清单。
他们为他们的计算机模型建立了一个三步走的“训练营”,使用的是从人类触摸 50 种不同天然表面(如木头、金属、织物和砂纸)中收集的数据。人类不仅仅是在触摸,他们还在按下、滑动以及静止接触这些表面时进行了操作,传感器记录了这一切。然后,人类使用简单的词对来评价这些物体的感觉:粗糙-光滑、黏性-湿滑、热-冷、硬-软、湿-干。
三步侦探故事
研究人员构建了三个相互关联的模型,以观察这种神奇的过程是如何发生的:
- 模型 1:翻译官。 这个模型接收来自传感器的原始、杂乱的数据(例如热量流失了多少或手指陷进去多深),并尝试猜测人类会说什么。“如果传感器看到这么多热量流失,人类会感觉到‘冷’吗?”或者“如果手指快速陷进去,人类会感觉到‘软’吗?”
- 模型 2:人类模拟器。 这个模型跳过了原始数据,只观察人类的评分。它会问:“如果我告诉你这种材料感觉很‘硬’、很‘冷’且很‘光滑’,你能猜出它是金属吗?”这模拟了人类大脑如何根据感觉对事物进行分类。
- 模型 3:AI 直连模型。 这是“捷径”模型。它完全忽略了感觉,试图直接从传感器数据得出答案:“这种振动模式意味着‘塑料'。”这作为一个基准,用以观察在没有人类思维参与的情况下,标准 AI 的表现如何。
重大发现:热量是秘密武器
结果非常迷人,揭示了一些关于我们如何感知世界的惊人真相。
首先,研究人员发现热传导线索(热与冷)极其强大。当计算机模型使用关于热量如何在手指和表面之间移动的数据时,它们在预测物体感觉是“热-冷”甚至“硬-软”方面表现得非常出色。事实证明,在这个数据集中,感觉较暖的材料往往也显得较软,而较冷的材料则显得较硬。计算机学到了:如果你知道一个物体如何从你的手指中夺走热量,你就能推测出它有多软。
其次,他们发现结合不同的触摸方式是关键。仅仅按压手指,或者仅仅滑动手指,都无法获得最佳结果。当模型结合了所有三种动作的数据时——按压、滑动和静止接触——表现最为出色。这就像尝试辨别一首歌:只听鼓声(滑动)或只听贝斯(按压)都有帮助,但听到整个乐队一起演奏才能得到完整的画面。
它们表现得如何?
这些模型的准确性惊人。
- 当计算机尝试根据人类的“感觉”来猜测材料时(模型 2),它的正确率超过了 70%。
- 当计算机直接使用原始传感器数据时(模型 3),它表现得更好,使用最佳算法(随机森林)时达到了 94% 的准确率。
- 更令人印象深刻的是,计算机并不需要查看所有数据。如果只给它前 25 个最重要的特征(主要来自热传导数据),它达到了 96.7% 的峰值准确率。
这对未来意味着什么
论文指出,如果我们希望机器人拥有像人类一样的触感,我们不能仅仅制造能感受压力和振动的手指。我们需要赋予它们热敏传感器,能够感受热量的流动,就像我们的皮肤一样。目前,许多机器人手指和虚拟现实手套主要关注机械感觉(如硬度和粗糙度),而忽略了温度方面。这项研究表明,增加“感受”热量的能力,可能是让机器人和虚拟世界变得真正真实的缺失的一环。
研究人员并没有声称他们已经解决了人类触觉的全部奥秘,但他们确实展示了,通过将问题分解为步骤——将信号转化为感觉,再将感觉转化为物体——我们可以构建出更像人类一样理解世界的机器。下次当你触摸一个冰冷的金属勺子或一块温暖的木头时,请记住:你的大脑正在进行一项复杂的计算,而科学家们才刚刚开始教计算机如何完成这项计算。
您所在领域的论文太多了?
获取与您研究关键词匹配的最新论文每日摘要——附技术摘要,使用您的语言。