Uncovering EEG Patterns Consistently Associated with Cybersickness Discomfort Using Deep Learning Interpretability Maps

バーチャルリアリティ（VR）ヘッドセットを装着し、シミュレーションされた美術館ツアーを見たり、画面上で回転する線を見たりしている場面を想像してみてください。ある人々にとって、この体験は刺激的ですが、別の人々にとっては、サイバーシックネス（VR酔い）として知られる吐き気、めまい、そして全般的な不快感を引き起こします。この不快感は、VRの広範な普及における大きな障壁となっており、人々がどれほど長く没入できるかを制限し、多くの人がこの技術を使用することを妨げています。現在、誰かが気分が悪くなっているかどうかを知る唯一の方法は、体験が終わった後に本人に尋ねることですが、その時にはすでに助けるには遅すぎることが多いのです。科学者たちは、人が不快感を自覚するよりも前に、脳が微細な信号を発しているのではないかと以前から疑ってきましたが、これらの信号は混沌とした電気活動の嵐の中に埋もれていました。課題は、ユーザーに一言も質問することなく、不快感の発現を確実に予測できる、そのノイズの中にある特定のパターンを見つけ出すことでした。

研究チームは、脳の電気的な言語を直接聴くことで、このパズルを解こうと試みました。彼らは、参加者がVRヘッドセットを装着しながら、一連のビープ音を聞いている間に脳活動を記録しました。このセットアップにより、研究者は視覚的な世界が回転している間、音に対する脳の反応を捉えることができました。彼らは「事象関連電位」と呼ばれる特定の種類の脳信号に注目しました。これは、脳が音を処理するたびに発生する、短時間でタイミングの決まった電気的反応です。この極めて短い、一瞬の反応を見ることで、チームは、異なる人々や異なる仮想環境においても一貫して現れる「不快感の指紋」を見つけ出したいと考えました。これを行うために、彼らは脳データから学習し、さらに決定的なことに、その判断にどのデータを使用したのかを正確に説明できる高度なコンピュータシステムを構築しました。

研究者たちは、2つの異なるVR研究に参加した2つの別々のグループを用いて、このシステムをテストしました。一方のグループはバーチャルな美術館ツアーを体験し、もう一方は自己運動感覚を生じさせるように設計された回転する線を見ました。仮想世界の性質、使用された機器、そして対象となった人々が異なっていたにもかかわらず、コンピュータモデルは驚くほど一貫したパターンを見つけ出しました。モデルが「その人が不快感を感じている」と正しく識別できたとき、それらは一貫して、頭皮の3つの特定の領域、すなわち額の左側、頭の中央、そして後頭部の右側からの信号に依存していました。これらの信号は単なるランダムなノイズではなく、音が脳に届いてから約80ミリ秒から260ミリ秒という非常に特定の時間枠内に現れました。これは、人が気分が悪くなったと意識的に認識するよりも前の、信じられないほど短い時間です。

この発見を特に強固なものにしたのは、研究者が単一のコンピュータモデルに頼らなかったことです。彼らは、それぞれ独自の情報の処理方法を持つ3種類のディープラーニング・ネットワークを訓練し、わずかな変化を加えた実験を100回以上繰り返しました。ほとんどすべてのケースにおいて、モデルは最も重要な手がかりとなる頭皮上の数個の電極を同じように指し示しました。不快感を感じなかった人々に対しては、モデルは主に頭の中央と後部を中心とした異なる場所を見ていました。しかし、不快感を感じた人々に対しては、左前部と右後部の領域が主要な焦点となりました。この一貫性は、研究者がデータの構成方法を変えたり、参加者が聞いた特定の音を変えたりしても維持されました。全く異なる2つのデータセットが、異なる国々で異なるVRヘッドセットを使用して収集されたにもかかわらず、同じ結果を生み出したという事実は、これらの脳パターンが人間の体がバーチャルな運動酔いに反応する際の根本的な部分であることを示唆しています。

研究はまた、これらの信号のタイミングが極めて重要であることも明らかにしました。不快感を示す脳活動は、音の処理の非常に早い段階で発生しており、仮想環境に関するより複雑な思考が形成されるずっと前の段階でした。これは、不快感という感覚が、複雑な感情的反応（それは形成されるまでに時間がかかるもの）としてではなく、例えば大きな音を即座に認識するような、基本的な感覚イベントとして脳で処理されている可能性を示唆しています。これらの初期の特定の部位を特定することで、研究者たちは将来のテクノロジーに向けた明確なターゲットを提供しました。システムがユーザーが吐き気を感じて報告するのを待つのではなく、これらの特定の脳信号をリアルタイムで監視することが可能になります。もしシステムが不快感に関連するパターンを検知すれば、ユーザーが不快感を自覚する前に、動きを遅くしたり視野を調整したりするなど、仮想体験を自動的に調整して症状を和らげることができるかもしれません。

有望な結果ではありますが、研究者たちは、これは完成された解決策ではなく、あくまで出発点であることに注意を払っています。脳は複雑な器官であり、頭皮から記録された電気信号は多くの領域からの活動が混ざり合ったものであり、頭蓋骨の奥深くにある信号の正確な源を特定することは困難です。さらに、本研究は一般的な不快感に焦点を当てており、これはサイバーシックネスというより広い症候群の一側面に過ぎません。モデルの訓練に使用された人数も比較的少なく、パターンは2つのデータセット間で維持されましたが、これらの発見がすべての人に当てはまることを確認するにはさらなる研究が必要です。それにもかかわらず、この研究は大きな一歩を踏み出しています。それは、単に「誰かが具合が悪い」ことを検出する段階から、脳の中で「いつ不快感が始まるのか」という具体的かつ測定可能な瞬間を理解する段階へと、この分野を進展させ、VRが一部の抵抗力のある人々だけでなく、すべての人にとって快適なものになる未来への扉を開いたのです。