バーチャルリアリティは視覚と聴覚の技術を極め、私たちの目や耳を容易に欺くほど説得力のある世界を作り出しています。しかし、その視覚的な忠実度にもかかわらず、この技術は触覚を刺激することにはしばしば失敗します。人が仮想の物体を掴もうと手を伸ばしても、手はその中を通り抜けてしまい、抵抗も質感も得られません。この物理的なフィードバックの欠如がイリュージョンを壊し、脳にその物体が現実ではないことを認識させてしまうのです。長年、エンジニアたちは、ユーザーの指に対して押し返す力を加え、何か固形物を握っている感覚を模倣するグローブを製作することで、この問題を解決しようとしてきました。しかし、既存のソリューションは非常に高価であり、数千ドルもの費用がかかるだけでなく、複雑で重い装置を必要とし、ユーザーを据え置きのコンピューターに繋ぎ止めてしまいます。この価格設定により、こうした技術は学校や小さなクリニック、独立した研究者たちの手には届かず、資金力のある研究所での使用に限定されてきました。
インドのプネーにある陸軍技術研究所の研究チームは、この溝を埋めるための新しいアプローチを開発しました。彼らは、通常よりもはるかに低いコストで現実的な抵抗感を提供できるように設計された、「NEC Hands」と呼ばれるウェアラブル・グローブを製作しました。このデバイスは、シンプルながらも巧妙な機械的アイデアに基づいています。それは、1本のナイロン紐を各指に使い、2つの役割を同時にこなさせるというものです。ユーザーが指を曲げると、その紐が小さなセンサーを引っ張って動きを追跡します。同時に、小さなモーターが同じ紐を巻き取ることで指を引き戻し、仮想の手が物体に当たった際の抵抗感を作り出します。この二重目的のデザインにより、動きを感知するシステムと力を加えるシステムを分ける必要がなくなり、部品の数と全体の価格を劇的に削減できました。電子部品と電源を含むグローブ全体を製作する費用は約30ドルであり、商業的な代替品に求められる数千ドルとは鮮明な対照を成しています。
研究者たちは、このグローブが手の動きを正確に追跡し、説得力のある触覚を提供できるかどうかを確認するためにテストを行いました。10人のボランティアにデバイスを装着させ、反復的な把握動作を行わせ、グローブの読み取り値をプロのスタジオで使用される高精度なモーションキャプチャシステムと比較しました。その結果、グローブは指の角度を平均でわずか2.5度強の誤差で追跡しており、これは固形物を扱うほとんどのバーチャルリアリティ・タスクにおいて十分な精度レベルであることが示されました。システムが力を加える際、それは滑らかで予測可能な方法で行われ、指先に最大2.5ニュートンの引きを到達させました。この力は、固い表面に当たったと感じるのに十分な強さでありながら、ユーザーにとって快適で安全なほどに優しいものです。グローブが衝突を検知してからモーターが引き戻すまでの全プロセスは、20ミリ秒未満で行われます。この速度は、人間の脳が抵抗を即時的かつリアルなものとして知覚するのに十分な速さです。
グローブを使用しない標準的なバーチャルリアリティ・ヘッドセットの使用との直接比較において、参加者はデバイスを装着しているときの方が、著しく強い「存在感(プレゼンス)」を感じたと報告しました。彼らは単にシミュレーションを見ているのではなく、本当に実在の物体と相互作用しているように感じたのです。力によるフィードバックは彼らの動きを変えました。彼らは仮想のアイテムに近づくにつれて自然に速度を落としましたが、この行動は、脳が物理的な抵抗を運動計画に統合していることを示唆しています。また、グローブはタスクの完了をより速く、かつミスを大幅に少なくすることに貢献し、ヘッドセットのみを使用した場合と比較して、把握の失敗率は83パーセント減少しました。決定的なことに、このデバイスは標準的なBluetooth接続を使用してワイヤレスで動作するため、コンピューターのケーブルを必要としないスタンドアロン型のヘッドセットとも連携可能です。この低コスト、ワイヤレスの自由、そして効果的な触覚フィードバックの組み合わせは、バーチャルリアリティにおける現実的な触覚が、もはや富裕層だけに予約された贅沢品ではなく、教室や日常的な研究現場に持ち込むことができる可能性であることを示唆しています。
技術要約:NEC Hands – 没入型触覚インタラクションのための低コストVRグローブ
問題提起
現在の消費者向けバーチャルリアリティ(VR)システムは、高精細な視覚および音声の没入感を提供する一方で、発展した触覚チャネルが欠如している。商用の触覚グローブは存在するものの、指のトラッキングと抵抗力フィードバックの両方を提供するハイエンドシステム(HaptxやSenseGloveなど)は3,500米ドルを超えるコストがかかるため、普及における大きな障壁となっている。対照的に、低価格な代替品(15〜30米ドル)は通常、動きを追跡するだけで力フィードバックを提供しないフレックスセンサに依存している。これにより、エンジニアリング上の空白が生じている。すなわち、コンポーネントコストが100米ドル未満のウェアラブルグローブにおいて、比例的な運動感覚的力フィードバックを実証した査読済み設計は存在しない。
手法およびシステムアーキテクチャ
著者らは、ESP32マイクロコントローラとBluetooth Low Energy(BLE)によって制御される二機能メカニカルアーキテクチャを用いて、この空白を埋たすべく設計されたウェアラブルグローブ「NEC Hands」を提案する。
- 二機能ケーブルトポロジー: コアとなる革新は、指一本につき一本のナイロン紐が、二つの目的を同時に果たすことである。この紐は、指の屈曲を感知するためのロータリーポテンショメータ(B10K)に結合されると同時に、カスタム3Dプリントされた「TendonDrum」上に搭載されたマイクロサーボモータ(MG90S)によって巻き取られる。この設計により、センシングとアクチュエーションのための独立したリンクが不要となり、従来の統合型設計と比較してケーブル数が半減した。
- トラッキングとキャリブレーション: システムは、中手指節(MCP)関節の角度を測定するために、紐結合型ポテンショメータを使用する。個々の手の形状の違いに対応するため、システムは二段階のキャリブレーションプロセスを採用している。初期設定用のブートボタンによるポーズマッチングモードと、自動フルスウィープ・フォールバックモードである。生のADC(アナログ-デジタル変換)値は、解剖学的に参照された関節角にマッピングされる。近位(PIP)および遠位(DIP)の指節間関節の角度は、遺体研究から得られた生体力学的結合比を用いて推定される。
- 力フィードバック機構: VR物理エンジンが衝突を検知すると、ホストはBLE経由で力コマンドを送信する。サーボは腱ドラムを巻き取り、現在の指の角度と衝突によって阻止された角度の差に比例した復元力を生成する。ユーザーの安全性と快適性を確保するため、ファームウェアのハードリミットによりサーボ角度は80°に制限されており、指先における最大快適力は約2.5 Nである。
- 統合: システムはカスタムBLE GATTインターフェースを介して通信し、Unity XR Interaction Toolkitと統合される。Meta Quest 2や3のようなスタンドアロン型ヘッドセットでの動作を想定しており、テザードPCを必要としない。
主な貢献
- シングルリンケージ・アーキテクチャ: 一本の腱がセンシング用ポテンショメータとアクチュエーション用サーボの両方を駆動する新しい設計であり、機械的な複雑さとコストを大幅に削減した。
- 二段階キャリブレーション: 設定時に外部のモーションキャプチャ装置を必要とせずに、生のセンサデータを関節角にマッピングするシステムであり、ユーザー固有の手の形状に対応する。
- スタンドアロンBLE統合: 消費者向けのスタンドアロン型ヘッドセットでのアンテザード(非有線)動作を可能にするオープンアーキテクチャのインターフェース。
- 実験的検証: OptiTrackモーションキャプチャシステムを用いたトラッキング精度、力出力特性、レイテンシ測定、および被験者内研究を含む包括的な評価。
実験結果
- トラッキング精度: OptiTrackのリファレンスに対するベンチトップテスト(参加者10名、2,500回の屈曲・伸展サイクル)では、平均角度誤差は2.66°(標準偏差 1.16°)であり、指ごとの最大誤差は6.2°未満であった。親指と小指は、トラッキングされていない外転・内転成分のため、わずかに高い誤差を示した。
- 力の線形性: TendonDrumアクチュエータは、非常に線形な力-変位関係(R² = 0.997)を示し、最大2.5 Nに達した。
- レイテンシ: エンドツーエンドの制御ループのレイテンシは平均19.3 ms(標準偏差 3.4 ms)であり、触覚遅延知覚の心理物理学的閾値である40 msを十分に下回っている。
- ユーザー体験: 素手によるトラッキングと比較した研究(N=10)において、参加者は4つのプレゼンス(存在感)サブスケール(実在する物体への接触、自然な把握、物体の硬さ、シーンへの存在感)のすべてにおいて、統計的に有意な改善(p < 0.01)を示した。タスク完了時間は5.8秒から4.2秒に短縮され、把握の失敗は83%減少した。参加者は、物体に近づく際に速度を落とすといった行動の変化を報告しており、これは力フィードバックが運動計画に統合されていることを示している。
意義と主張
本論文は、NEC Handsが高価で高精度な触覚グローブと、低コストで非触覚型のデータグローブとの間のエンジニアリング上の空白を、見事に占めていると主張している。総部品構成表(BOM)コストが約30.50米ドルであることから、HaptX G1(5,495ドル)やSenseGlove Nova(3,500ドル)といった商用代替品と比較して、2桁以上のコスト削減を実現している。
著者らは、これが、100米ドル未満のコンポーネントコストでウェアラブルグローブにおける比例的な運動感覚的力フィードバックを実証した最初の査読済み出版物であると断言している。本システムには限界(単一関節のトラッキング、4 Hzの力レンダリング帯域幅、および限定的なサンプルサイズ)があるものの、結果は、剛体把握という主要なVRユースケースに対して、本システムが十分な精度と応答性を備えていることを示唆している。低コストかつスタンドアロンでの動作可能性は、教育、リハビリテーション、および独立した研究分野における触覚フィードバックの普及を実現するための鍵として提示されている。
毎週最高の electrical engineering 論文をお届け。
スタンフォード、ケンブリッジ、フランス科学アカデミーの研究者に信頼されています。
受信トレイを確認して登録を完了してください。
問題が発生しました。もう一度お試しください。
スパムなし、いつでも解除可能。
週刊ダイジェスト — 最新の研究をわかりやすく。登録