An Approach to Simultaneous Acquisition of Real-Time MRI Video, EEG, and Surface EMG for Articulatory, Brain, and Muscle Activity During Speech Production

この論文は、発話生成における脳、筋肉、および構音器官の動きを同時に捉えるため、リアルタイム MRI、EEG、表面筋電図の同時取得と、それらの相互干渉を抑制する新しいアーチファクト除去パイプラインを提案するものである。

Jihwan Lee, Parsa Razmara, Kevin Huang, Sean Foley, Aditya Kommineni, Haley Hsu, Woojae Jeong, Prakash Kumar, Xuan Shi, Yoonjeong Lee, Tiantian Feng, Takfarinas Medani, Ye Tian, Sudarsana Reddy Kadiri, Krishna S. Nayak, Dani Byrd, Louis Goldstein, Richard M. Leahy, Shrikanth Narayanan

公開日 2026-03-06
📖 1 分で読めます☕ さくっと読める

Each language version is independently generated for its own context, not a direct translation.

この論文は、「話すという行為」を、脳、筋肉、口の中の動きの 3 つの側面から、同時にカメラとセンサーで捉えようとした画期的な実験について書かれています。

まるで、オーケストラの演奏を分析するために、指揮者の脳波、楽器を弾く手の筋肉の動き、そして楽器そのものが動く様子を、すべて同時に撮影しようとしたようなものです。

以下に、専門用語を避けて、わかりやすい比喩を使って説明します。

1. 何をやろうとしたのか?(3 つのカメラ)

普段、私たちは人の「声(音)」しか聞きません。でも、その声が出るまでには、複雑なプロセスがあります。
この研究では、そのプロセスを 3 つの「カメラ」で同時に撮影しました。

  • 脳カメラ(EEG): 頭の上に帽子をかぶせて、**「何を言おうとしているか(脳内の指令)」**を捉えます。
  • 筋肉カメラ(EMG): 顎や喉にセンサーを貼り、**「声を出すための筋肉の準備運動」**を捉えます。
  • 口の中カメラ(rtMRI): 特殊な MRI 装置を使って、**「舌や唇がどう動いているか(口の中のリアルタイム動画)」**を撮ります。

これまでの研究では、これらを別々に測ったり、2 つだけ測ったりするのが限界でした。しかし、この研究は**「脳・筋肉・口」をすべて同時に、リアルタイムで記録することに世界で初めて成功しました。**

2. 最大の難関:「ノイズの嵐」

この実験には、とてつもない技術的な壁がありました。それは**「MRI 装置が作る大騒音」**です。

  • 比喩: マグネット(MRI)の中で、脳波(EEG)や筋肉の電気信号(EMG)を測ろうとするのは、**「静かな図書館の中で、隣で爆弾を連続して爆発させながら、かすかなささやきを聞き取ろうとする」**ようなものです。
  • MRI が動くたびに、強力な電磁波が飛び交い、脳波や筋肉のデータに「ガガガガッ!」という巨大なノイズ(雑音)が混入してしまいます。

3. 解決策:「魔法のノイズ消しゴム」

研究チームは、このノイズを消し去るための**「3 段階のノイズ除去フィルター」**を開発しました。

  1. MRI のノイズを消す: MRI が動くリズムに合わせて、ノイズの「型」を記憶し、データから差し引く(平均ノイズ除去)。
  2. 心臓のノイズを消す: 心臓の鼓動もノイズの原因になるため、心電図を参考にしながら、脈拍に同期したノイズを取り除く。
  3. 筋肉のノイズを消す: 話している時の「まばたき」や「顔の動き」によるノイズを、筋肉のセンサーのデータを使って、脳からの本当の信号だけを残すように分離する(CCA という手法)。

このフィルターを通すことで、爆発音のようなノイズが消え、「脳が本当に何を考えているか」という静かなささやきが聞こえるようになりました。

4. 驚きの発見:「黙って話す」ことでも口は動く

実験の一つに**「想像して話す(音を出さずに頭の中で言葉を思い浮かべる)」**という課題がありました。
参加者は「絶対に口を動かさないで」と言われていましたが、MRI の動画を見ると、口や喉の筋肉が、わずかに「微動(マイクロ・ムーブメント)」していました。

  • 意味: 私たちが「声を出さずに考えている」時でも、脳は自動的に「声を出す準備」を始めていて、口元が微かに動いていることがわかりました。これは、脳と体のつながりが、意識している以上に密接であることを示しています。

5. この研究が未来にどう役立つのか?

この技術が完成すれば、以下のような未来が待っています。

  • 脳内翻訳機(BCI)の進化:
    声が出せない方(失語症や ALS など)でも、脳内の信号と口元の微細な動きから、「何を言いたいのか」を正確に読み取り、音声として出力するシステムが作れるようになります。
  • 話し方の謎の解明:
    「なぜ吃音(どもり)が起きるのか」「言葉の計画はどうやって立てられるのか」といった、人間の言語のメカニズムを、脳から筋肉、そして口まで一貫して追えるようになります。

まとめ

この論文は、「話す」という行為を、脳、筋肉、口という 3 つのカメラで同時に、鮮明に撮影する技術を開発し、その中で見えた「無意識の口の動き」や「ノイズを消す技術」を紹介した、画期的な第一歩です。

まるで、複雑なオーケストラの演奏を、指揮者、奏者、そして楽器そのものの動きをすべて同時に録画することで、音楽の真の美しさを解き明かそうとしたような、壮大で精密な実験でした。