Human iEEG recordings during audiovisual speech violations support and extend predictive routing models

인간의 뇌는 정지 영상을 포착하는 카메라처럼 단순히 세상을 기록하는 것이 아니라, 우리의 현실 경험을 능동적으로 구성합니다. 뇌는 모든 세부 사항이 감각을 통해 도착하기를 기다리는 대신, 다음에 올 것이 무엇인지에 대해 끊임없이 예측을 생성하며, 이러한 내부적 추측을 사용하여 새로운 정보를 어떻게 처리할지 안내합니다. 세상이 이러한 기대와 일치할 때, 뇌는 예측이 그 역할을 수행하게 함으로써 에너지를 절약합니다. 하지만 현실이 예상과 충돌할 때, 뇌는 자신의 세계 모델을 업데이트하기 위한 신호를 생성해야 합니다. 예측 처리(predictive processing)라고 알려진 이 과정은 뇌 내부의 특정한 전기적 리듬에 의존한다고 여겨집니다. 하나의 유력한 이론은 뇌가 이를 관리하기 위해 '경로 지정(routing)' 시스템을 사용한다고 제안합니다. 즉, 예측과 일치하는 감각 입력을 억제하기 위해 느린 리듬의 파동을 사용하는 한편, 예상치 못한 오류의 신호를 전달하기 위해 빠르고 고속인 활동의 폭발을 허용한다는 것입니다.

인간의 정신에서 이것이 어떻게 작동하는지 이해하기 위해, 연구진은 독특한 자원봉사자 그룹인 뇌전증 치료를 받고 있는 7명의 환자들에게 주목했습니다. 이 환자들은 이미 발작의 근원을 찾기 위해 뇌에 전극이 삽입되어 있었기 때문에, 과학자들은 비침습적 방법으로는 달성할 수 없는 정밀도로 뇌 표면에서 직접적인 전기 활동을 기록할 수 있었습니다. 연구팀은 두 가지 핵심 영역에 집중했습니다: 소리를 처리하는 귀 근처의 상측두회(superior temporal gyrus)와 계획 및 기대를 담당하는 고차원 영역인 전전두엽 피질(prefrontal cortex)입니다. 환자들이 말을 보고 듣는 동안 이 영역들을 관찰함으로써, 연구진은 우리가 보는 것과 듣는 것이 일치하지 않을 때 뇌가 정확히 어떻게 처리하는지 확인할 수 있었습니다.

실험에는 지각의 고전적인 트릭인 맥거크 효과(McGurk effect)가 사용되었습니다. 이 시나리오에서는 화면 속의 인물이 특정 음절을 입 모양으로 말하는 동안, 실제 오디오 트랙에서는 서로 상충하는 소리가 재생됩니다. 이는 시각적 예측(입 모양)과 실제 들리는 소리 사이의 불일치를 만들어내어, 뇌가 시각적 단서와 실제 청각 정보 사이에서 갈등하게 만드는 맥거크 착각을 유발할 수 있습니다. 연구진은 이 불일치를 사용하여 자신들의 이론을 테스트했습니다. 그들은 다양한 속도 범위에 걸쳐 뇌의 전기적 전력을 기록하며, 예측과 오류의 구체적인 징후를 찾았습니다. 그 결과, 뇌가 시각적 단서와 일치하는 소리를 받았을 때와 시각적 단서가 거짓이고 소리가 예상과 다를 때 뇌가 서로 다른 방식으로 반응한다는 것을 발견했습니다.

결과는 뇌의 서로 다른 부분들 사이에 정교한 분업이 존재함을 드러냈습니다. 귀 근처의 청각 영역에서 뇌는 불일치에 대해 고주파 활동인 '하이 감마(high gamma)' 전력의 급격한 스파이크로 반응했습니다. 이 급증은 시각적 예측이 틀렸을 때만 나타났으며, 들어오는 소리가 예상된 패턴과 맞지 않는다는 것을 알리는 국소적인 경보 벨 역할을 했습니다. 흥로하게도, 이 동일한 고주파 스파이크는 뇌의 더 높은 수준의 전두 영역에서는 나타나지 않았습니다. 대신, 전두 영역은 다른 종류의 반응을 보였습니다. 전두 영역은 동일한 고주파 오류 신호를 보여주지는 않았지만, '세타(theta)' 활동이라고 불리는 더 느린 리듬의 파동에서 강한 증가를 나타냈습니다. 이 세타 리듬은 불일치로 인한 복잡한 혼란에 대한 대응을 조율하기 위해 청각 영역과 전두 영역 모두로 퍼져나가는 더 광범위한 신호 역할을 하는 것으로 보였습니다.

이러한 발견은 뇌가 서로 다른 작업을 위해 서로 다른 전기적 도구를 사용한다는 아이디어를 뒷받침합니다. 연구는 소리에 대한 단순한 오류는 청각 센터의 빠르고 높은 주파수의 폭발에 의해 국소적으로 처리된다는 점을 시사합니다. 그러나 오류가 시각과 청각 사이의 복잡한 갈등을 포함할 경우, 뇌는 전체 네트워크에 걸쳐 교정을 조직하기 위해 더 느리고 광범위한 리듬을 동원합니다. 또한 연구진은 소리가 시작되기 전에도 시각적 단서의 존재가 뇌의 상태를 변화시켜, 예상되는 소리에 대비해 느린 알파(alpha) 및 베타(beta) 파동을 증가시킨다는 것을 관찰했습니다. 이러한 예비적 파동은 예측이 위반되었을 때 감소하고 오류 신호가 그 자리를 대신했습니다. 이는 뇌가 수동적인 수신기가 아니라, 현실이 예측과 다를 때 기어를 전환하며 끊임없이 미래를 위해 스스로를 준비시키는 역동적인 시스템임을 확인시켜 줍니다.

이 연구가 인간 지각의 전체 미스터리를 해결했다고 주장하는 것은 아니며, 적은 수의 환자를 대상으로 했기에 연구 결과는 이 특정 집단에 국한됩니다. 그러나 직접적인 측정값은 이러한 과정의 타이밍과 위치에 대한 명확한 창을 제공합니다. 저자들은 뇌의 예측 경로 시스템이 기존 생각보다 더 유연하며, 지속적인 감각 정보를 관리하기 위해 빠르고 국소적인 신호와 느리고 조율적인 파동의 조합을 활용한다고 제안합니다. 눈이 하는 거짓말에 직면했을 때 뇌가 어떻게 이러한 리듬 사이를 전환하는지를 보여줌으로써, 이 연구는 우리가 종종 예상과 다른 세상 속에서 살아갈 수 있게 해주는 신경학적 기제에 대한 구체적인 통찰을 제공합니다.