ResXR: infrastructure for quality-controlled, reproducible studies of human behavior in Extended Reality
ResXRは、Meta Questヘッドセット向けのオープンソースのツールキットであり、拡張現実（XR）における人間の行動データの収集、品質管理、およびMotion-BIDS形式へのエクスポートを標準化することで、専門的なプログラミングを必要とせずに、再現可能でアクセシブルなXR研究を可能にします。
原論文は CC BY 4.0 (https://creativecommons.org/licenses/by/4.0/) でライセンスされています。 これは査読を受けていないプレプリントのAI生成解説です。医学的助言ではありません。この内容に基づいて健康上の判断をしないでください。 免責事項の全文を読む
科学者がコンピューター生成された環境の中に足を踏み入れ、人々がどのように考え、感じ、動きをするのかを研究できる世界を想像してみてください。エクステンデッド・リアリティ（拡張現実）として知られるこの技術は、ユニークな利点を提供しています。それは、実験室の厳格な制御と、実際の場所にいるような感覚を組み合わせたものです。平らな画面を見ているのとは異なり、これらの没入型システムは真の身体的・感情的な反応を引き起こすことができるため、研究者は安全で制御された環境の中で、自然な行動を観察することができます。数十年にわたり、機器がより安価で利用しやすくなるにつれて、この分野は急速に発展してきました。しかし、ある重大な問題が進行を妨げてきました。化学実験室の科学者が、結果が信頼でき、他者によって再現可能であることを保証するために、標準的なガラス器具や精密な測定器具を必要とするのと同様に、バーチャルリアリティの研究者たちは、実験を構築しデータを検証するための、共有された信頼できる方法を欠いていたのです。これらの標準がなければ、すべての研究室が独自のカスタムツールを構築することになり、データの比較や検証が困難になります。その結果、この分野には興味深いアイデアは豊富にあるものの、確固たる再現性のある科学が不足しているという状況が生じています。
これを解決するために、研究チームは「ResXR」と呼ばれる新しいオープンソースのツールキットを構築しました。これは、バーチャルリアリティ研究における混沌としたプロセスを、スムーズで標準化されたワークフローに変えるために設計されています。このシステムは、顔に装着するスタンドアロン型のヘッドセット（強力な外部コンピューターに接続する必要のない、自己完結型のコンピューター）向けに作られています。このツールキットは、実験のための既製の基盤を提供し、研究者が人が何を見ているか、どこを見ているか、そして手や体がどのように動いているかを正確に記録することを可能にします。決定的なのは、このシステムが単にデータを収集するだけでなく、厳格な品質管理検査官として機能することです。過去には、研究者が「ヘッドセットが手や目をトラッキングしていると言っているなら、そのデータは正しい」と想定することがよくありました。ResXRの開発チームは、この仮定が危険であることを見出しました。彼らは一連のストレス・テストを実施し、ヘッドセットの視界を意図的に遮ったり、参加者の目を覆ったりして、デバイスがその状況をどのように報告するかを確認しました。その結果、ヘッドセットの内部ソフトウェアが、対象を見失っている場合でも、データを「有効（valid）」として報告し続け、エラーを「緑色のライト」の背後に隠してしまうことが判明したのです。
研究者たちは、ヘッドセットの組み込みステータスフラグ（トラッキングが失われた際にユーザーに警告するためのもの）が、しばしば信頼できないことを発見しました。テストにおいて、手がカメラから隠されると、ヘッドセットは位置データが固定された誤ったポーズへとドリフトしているにもかかわらず、時として「有効」フラグをオンにしたままにすることがありました。同様に、参加者が目を閉じると、アイトラッキングシステムが目の閉鎖を認識できず、目が開いているかのように注視データを報告し続けることがありました。チームは、メーカーのデフォルトの警告をそのまま信じることは、欠陥のある科学につながると悟りました。これらのテストされていない信号に頼る代わりに、ResرشXRは異なるアプローチを採用しています。それは、生のデータとヘッドセット自身のステータスレポートを併せて記録し、その後、別の独立したコンピュータープログラムを実行してエラーをチェックするという方法です。このプログラムは、データの急激な低下や、手が失われたことを示す信号などの特定のパターンを探し、それらの瞬間を研究者がレビューできるようにマークします。データが不適切な場合、システムは記録の他の部分を削除することなく、その特定の瞬間だけを隠すことができ、実験の完全性を保つことができます。
データがクリーニングされチェックされると、ツールキットはデータを「Motion-BIDS」と呼ばれるユニバーサルな形式に整理します。これは、図書館が誰でも本を見つけられるように整理する方法と同様に、動きのデータをラベル付けし保存するための標準化された方法です。ヘッドセットからの乱雑でカスタムされたファイルを、このクリーンで標準的な形式に変換することで、ある研究室のデータを別の研究室が容易に共有し、分析できるようにします。また、システムはセッションごとに明確な視覚的レポートを生成し、いつデータが良好で、いつ良好ではなかったかを正確に示します。このシステムが作業を遅らせることなく機能することを証明するために、チームは参加者が迷路をナビゲートしたり、仮想博物館を探索したりしている間にテストを行いました。その結果、高速ですべてのデータを記録しても、ヘッドセットのパフォーマンスを妨げることはなく、仮想世界は滑らかに保たれ、フレームレートも安定していることが分かりました。このツールキットには、プログラミングコードを書くことなくすぐに実行できる、選択タスク、ナビゲーション迷路、ミュージアムツアーという3つの即時利用可能な実験が含まれています。
この研究の主な成果は、ソフトウェアそのものだけでなく、バーチャルリアリティにおける人間の行動を測定するために使用するツールは、信頼して鵜呑みにするのではなく、経験的にテストされる必要があるということを証明した点にあります。研究者たちは、最も高度なコンシューマー向けヘッドセットであっても、完璧に見えて実際には壊れたデータを生み出す可能性があること、そしてその違いを知る唯一の方法は、実環境下でシステムをストレス・テストすることであるということを示しました。参加者がヘッドセットを装着した瞬間から、検証済みのデータセットに至るまでの透明性の高いオープンソースの経路を提供することで、ResXRは多くの科学者をこの分野から遠ざけてきた技術的な障壁を取り除きます。これは、測定が現実のものであり、エラーが既知であり、その結果がコミュニティ全体から信頼されるという確信を持って、研究の焦点を人間の行動の科学へと戻すための基盤を提供するものです。
自分の分野の論文に埋もれていませんか？
研究キーワードに一致する最新の論文のダイジェストを毎日受け取りましょう——技術要約付き、あなたの言語で。