An Approach to Simultaneous Acquisition of Real-Time MRI Video, EEG, and Surface EMG for Articulatory, Brain, and Muscle Activity During Speech Production

该论文提出了一种创新的多模态采集框架,首次实现了实时动态 MRI、脑电图(EEG)和表面肌电图(sEMG)的同步获取,并通过定制化的伪影抑制方案克服了技术挑战,从而为揭示言语产生的神经生理机制及推动脑机接口发展提供了前所未有的研究窗口。

Jihwan Lee, Parsa Razmara, Kevin Huang, Sean Foley, Aditya Kommineni, Haley Hsu, Woojae Jeong, Prakash Kumar, Xuan Shi, Yoonjeong Lee, Tiantian Feng, Takfarinas Medani, Ye Tian, Sudarsana Reddy Kadiri, Krishna S. Nayak, Dani Byrd, Louis Goldstein, Richard M. Leahy, Shrikanth Narayanan

发布于 2026-03-06
📖 1 分钟阅读☕ 轻松阅读

Each language version is independently generated for its own context, not a direct translation.

这篇论文讲述了一项非常前沿的“超级侦探”实验,科学家们试图同时捕捉人类说话时的大脑思维肌肉动作舌头嘴唇的运动

想象一下,说话就像是一场精密的交响乐演奏

  • 大脑是指挥家,决定要演奏什么曲子(想说什么)。
  • 肌肉是乐手,负责调动身体去执行。
  • 舌头和嘴唇是乐器,最终把声音发出来。

以往的研究,要么只盯着指挥家(大脑),要么只盯着乐器(声音或嘴型),很难同时看清这三者是如何完美配合的。这篇论文就是为了解决这个难题,他们发明了一种“三合一”的拍摄技术。

以下是用通俗语言和比喻对论文核心内容的解读:

1. 他们做了什么?(三镜头同步拍摄)

科学家让一位志愿者躺在一种特殊的核磁共振(MRI)机器里(这就像一台超级高清的“身体透视相机”,能实时看到舌头和嘴唇怎么动)。
同时,他们给志愿者戴上了脑电帽(EEG)(像一顶能捕捉大脑“脑电波”的帽子,记录指挥家的指令)和面部肌电贴(EMG)(像贴在脸上的小传感器,记录乐手肌肉的微小颤动)。

难点在于: 核磁共振机器工作时,磁场变化非常剧烈,就像在录音室里开了一台巨大的电钻,会发出巨大的噪音,把脑电波和肌电信号都“淹没”了。这就像你想在电钻旁边听清一只蚊子的嗡嗡声,几乎是不可能的。

2. 他们怎么解决噪音?(“降噪”魔法)

为了在“电钻”(核磁共振)旁边听清“蚊子”(大脑和肌肉信号),科学家开发了一套智能降噪流水线

  • 第一步:过滤“电钻声”。 他们利用数学方法,把核磁共振机器产生的规律性噪音(像有节奏的鼓点)识别出来,然后从信号里减去。
  • 第二步:过滤“心跳声”。 人的心跳也会产生干扰,他们利用心电图(ECG)作为参考,把心跳带来的杂波也剔除。
  • 第三步:过滤“肌肉杂音”。 说话时,脸部的肌肉运动(比如眨眼、皱眉)也会干扰大脑信号。他们利用贴在脸上的传感器作为“参照物”,把那些由肌肉运动产生的“假大脑信号”剔除,只留下真正来自大脑的“指挥指令”。

经过这套处理,原本乱成一团的信号变得清晰可见,就像在嘈杂的摇滚音乐会上突然听到了清晰的独奏。

3. 他们发现了什么?(意想不到的“微动作”)

这项研究最有趣的一个发现是关于**“想象说话”(Silent Speech)。
当志愿者被要求“在脑海里想一个词,但不要真的说出来”时,科学家原本以为他的嘴巴和舌头是完全静止的。
结果却大出所料: 通过实时 MRI 视频,他们发现即使在“默念”时,志愿者的舌头和嘴唇依然有
极其微小的动作**(Micro-articulatory movements)。
这就像你虽然没开口唱歌,但你的喉咙和声带依然在偷偷地“哼”着调子。这些微小的动作以前很难被检测到,但现在被这套“三合一”系统抓了个正着。

4. 这有什么用?(未来的“读心术”与“无声通讯”)

这项技术不仅仅是为了看热闹,它有两个巨大的未来潜力:

  • 给“脑机接口”(BCI)装上眼睛:
    现在的脑机接口(比如让瘫痪病人用意念打字)很难,因为大脑信号太模糊,不知道具体想说什么。有了这套技术,我们可以把“大脑信号”和“舌头动作”直接对应起来。就像给大脑装了一个翻译器,以后即使病人发不出声音,只要他在脑海里“想”说话,机器就能通过捕捉他大脑和肌肉的微小信号,精准地还原出他想说的话。

  • 解开说话的秘密:
    对于语言学家和医生来说,这就像拿到了一张说话过程的“全息地图”。我们可以看清从“想说话”到“张嘴说话”的每一个瞬间,大脑和身体是如何配合的。这对于治疗口吃、失语症等语言障碍非常有帮助。

总结

简单来说,这篇论文就像第一次成功地在暴风雨中,同时拍下了指挥家(大脑)、乐手(肌肉)和乐器(舌头)的实时高清视频,并且把背景里的雷声(机器噪音)全部消除了。

这不仅让我们看清了人类说话的秘密,更为未来开发能直接“读懂”我们内心想法的超级设备铺平了道路。