✨ 要点🔬 技术摘要
虚拟现实已经掌握了视觉和听觉的艺术,创造出的世界如此逼真,以至于我们的眼睛和耳朵很容易被欺骗。然而,尽管拥有如此高的视觉保真度,这项技术往往无法触及触觉。当一个人伸手去抓取虚拟物体时,他们的手会直接穿过物体,感受不到任何阻力或纹理。这种缺失的物理反馈破坏了沉浸感,让大脑意识到该物体并非真实存在。多年来,工程师们一直试图通过制造能够对用户手指产生反作用力的手套来解决这个问题,以模拟握住实物的感觉。然而,现有的解决方案价格极其昂之高,动辄花费数千美元,并且需要复杂、沉重的设备,将用户束缚在固定式计算机旁。这种高昂的价格使此类技术远离了学校、小型诊所和独立研究人员,使其应用仅限于资金雄厚的实验室。
来自印度浦那尼克军事理工学院的一组研究人员开发出一种新方法来弥补这一差距。他们创造了一种名为 NEC Hands 的可穿戴手套,旨在以极低的成本提供真实的阻力。该设备围绕一个简单而巧妙的机械构思构建:使用一根尼龙绳为每根手指同时承担两项工作。当用户弯曲手指时,绳子会拉动一个小传感器以追踪动作。与此同时,一个微型电机可以缠绕同一根绳子来拉回手指,从而在虚拟手接触到物体时产生阻力感。这种双重用途的设计消除了对感知运动和施加力量的独立系统的需求,大幅减少了零件数量和整体价格。整个手套(包括电子元件和电源)的制作成本约为三十美元,这与商业替代品所需的数千美元形成了鲜明对比。
研究人员对该手套进行了测试,以观察其能否准确追踪手部动作并提供令人信服的触觉。他们邀请了十名志愿者佩戴该设备进行重复的抓握动作,并将手套的读数与专业工作室使用的精密动作捕捉系统进行了对比。结果显示,手套追踪手指角度的平均误差仅略高于 2.5 度,这一精度足以应对大多数涉及固体物体的虚拟现实任务。当系统施加力量时,过程平滑且可预测,在指尖产生的最大拉力为 2.5 牛顿。这种力量强度足以让人感觉到撞击到了坚硬的表面,但又足够轻柔,能保证用户的舒适与安全。从手套检测到碰撞到电机产生拉力的整个过程发生在不到二十毫秒内,这一速度足以让大脑感知到阻力是即时且真实的。
在与仅使用标准虚拟现实头显进行的直接对比中,参与者报告称,佩戴该设备后,他们的“存在感”显著增强。他们觉得仿佛是在与真实物体进行互动,而不仅仅是在观看模拟场景。力反馈改变了他们的移动方式;他们会在接近虚拟物品时自然地减速,这种行为表明他们的大脑正在将物理阻力整合进运动规划中。手套还帮助他们更快地完成了任务,且错误率大幅降低,抓握失败率比仅使用头显时降低了 83%。至关重要的是,该设备通过标准的蓝牙连接进行无线操作,使其能够与不需要电脑线的独立式头显配合使用。这种低成本、无线自由度和有效触觉反馈的结合表明,虚拟现实中的真实触觉不再是富人的奢侈品,而是一个可以带入教室和日常研究环境的可能性。
技术摘要:NEC Hands —— 一种用于沉浸式触觉交互的高性价比 VR 手套
问题陈述 目前的消费级虚拟现实(VR)系统提供了高保真的视觉和音频沉浸感,但在触觉通道方面仍显不足。虽然市面上存在商用触觉手套,但由于成本问题面临着显著的普及障碍;提供手指追踪和抗阻力反馈(例如 HaptX、SenseGove)的高端系统价格高达 3,500 美元以上。相比之下,低成本替代方案(15–30 美元)通常依赖柔性传感器进行运动追踪,但无法提供力反馈。这造成了一个工程空白:目前尚无同行评审的设计能够证明在组件成本低于 100 美元的穿戴式手套中实现比例运动觉力反馈。
方法论与系统架构 作者提出了“NEC Hands”,这是一款旨在填补这一空白的穿戴式手套,其采用由 ESP32 微控制器和低功耗蓝牙(BLE)控制的双功能机械架构。
双功能线缆拓扑结构: 核心创新在于每根手指使用一根尼龙绳,同时兼顾两种功能。该绳索耦合至一个旋转电位器(B10K)用于感知手指屈曲,并由安装在定制 3D 打印“腱鼓”(TendonDrum)上的微型舵机(MG90S)进行驱动。这种设计消除了对独立传感和驱动连杆的需求,与以往的集成设计相比,将线缆数量减少了一半。
追踪与校准: 系统利用绳索耦合电位器来测量掌指关节(MCP)的角度。为了适应不同的手部几何结构,系统采用了双模式校准过程:用于初始设置的启动按钮姿态匹配模式,以及自动全量程回退模式。原始模数转换器(ADC)数值被映射为解剖学参考的关节角度。近端(PIP)和远端(DIP)指间关节角度则通过基于尸体研究得出的生物力学耦合比例进行估算。
力反馈机制: 当 VR 物理引擎检测到碰撞时,主机通过 BLE 发送力指令。舵机带动腱鼓旋转,产生一个与当前手指角度与碰撞阻挡角度之间差异成比例的回复力。固件硬限位将舵机角度限制在 80° 以内,以确保用户安全与舒适,指尖的最大舒适力约为 2.5 N。
集成: 系统通过自定义的 BLE 通用属性配置文件(GATT)接口进行通信,并与 Unity XR Interaction Toolkit 集成。它被设计为可在 Meta Quest 2 和 3 等头显上独立运行,无需连接 PC。
核心贡献
单连杆架构: 一种新颖的设计,每根手指的一根腱索同时驱动传感电位器和驱动舵机,显著降低了机械复杂度和成本。
双模式校准: 一种无需在设置期间使用外部动作捕捉设备的系统,能够映射原始传感器数据到关节角度,从而适应用户特定的手部几何结构。
独立 BLE 集成: 一种开放式架构接口,支持在消费级独立头显上进行无线化操作。
实验验证: 包括针对 OptiTrack 动作捕捉系统的追踪精度评估、力输出特性表征、延迟测量以及一项受试者内研究在内的全面评估。
实验结果
追踪精度: 在针对 OptiTrack 参考系统的台面测试中(10 名参与者,2,500 次屈伸循环),平均角度误差为 2.66°(标准差 1.16°),单指最大误差低于 6.2°。由于未追踪外展-内收分量,拇指和最小指显示出略高的误差。
力线性度: 腱鼓驱动器展示了高度线性的力-位移关系(R² = 0.997),最大力达到 2.5 N。
延迟: 端到端控制回路延迟平均为 19.3 ms(标准差 3.4 ms),完全处于 40 ms 的触觉延迟感知心理物理阈值之内。
用户体验: 在将 NEC Hands 与裸手追踪进行对比的研究中(N=10),参与者在所有四个存在感子量表(触摸真实物体、自然抓握、物体硬度以及场景存在感)上均表现出统计学意义上的显著提升(p < 0.01)。任务完成时间从 5.8 秒缩短至 4.2 秒,抓取失败率降低了 83%。参与者报告了行为变化,例如在靠近物体时减速,这表明力反馈已整合进运动规划中。
意义与主张 论文声称 NEC Hands 成功占据了昂贵高保真触觉手套与低成本非触觉数据手套之间的工程空白。其总物料清单(BOM)成本约为 30.50 美元,与 HaptX G1(5,495 美元)或 SenseGlove Nova(3,500 美元)等商用替代品相比,实现了超过两个数量级的成本削减。
作者断言,这是首个证明在组件成本低于 100 美元的穿戴式手套中实现比例运动觉力反馈的同行评审出版物。尽管该系统存在局限性——特别是单关节追踪、4 Hz 的力渲染带宽以及样本量较小——但结果表明,对于刚性物体抓取这一主流 VR 用例,该系统具有足够的精度和响应速度。其低成本和独立运行能力被视为扩展触觉反馈在教育、康复及独立研究领域应用的关键赋能因素。
每周获取最佳 electrical engineering 论文。
受到斯坦福、剑桥和法国科学院研究人员的信赖。
请查收邮箱确认订阅。
出了点问题,再试一次?
无垃圾邮件,随时退订。