Social vision expands into auditory cortices of people born deaf: evidence from naturalistic film and encoding models

인간의 뇌는 정적인 기계가 아니라, 우리가 무엇을 경험하느냐에 따라 스스로를 재형성하는 살아있는 기관입니다. 청각 능력을 갖지 못한 채 태어난 사람의 경우, 본래 소리를 처리해야 할 뇌의 부위들이 단순히 유휴 상태로 머물러 있지 않습니다. 대신, 그 부위들은 종종 시각 정보를 처리하기 시작하는데, 과학자들은 이를 '교차 모달 가소성(cross-modal plasticity)'이라고 부릅니다. 수십 년 동안 연구자들은 농인들의 '청각' 피질이 움직이는 물체를 보거나 시각적 퍼즐을 풀 때 활성화된다는 사실을 알고 있었습니다. 그러나 이러한 점유의 구체적인 성격은 미스터리로 남아 있었습니다. 뇌가 단순히 범용적인 시각 처리 장치가 되는 것일까요, 아니면 복잡한 사회적 과업을 위한 특화된 역할을 발달시키는 것일까요? 주요 감각의 상실에 뇌가 어떻게 적응하는지를 이해하는 것은 뇌의 배치가 태어날 때부터 정해진 것인지, 아니면 전적으로 경험에 의해 결정되는 것인지를 밝혀내는 신경 조직의 근본적인 규칙을 들여다보는 창이 됩니다.

연구팀은 농인과 청인 성인이 직면하는 복잡하고 실제적인 시나리오인 '소리가 없는 애니메이션 영화'를 관찰함으로써 이 질문들에 답하고자 했습니다. 연구진은 24명의 농인 성인과 22명의 청인 성인을 모집하여 자기공명영상(MRI) 스캐너 안에서 35분 길이의 영화를 시청하게 했습니다. 영화로는 *벨빌의 삼총사(The Triplets of Belleville)*가 선택되었는데, 이 작품은 언어가 사용되지 않고 사운드트랙이 제거되어 있어 참가자들이 오로지 시각에만 의존하도록 보장하기 때문입니다. 단순한 실험실 테스트가 보여주는 단일한 움직이는 점이나 정지된 그림과 달리, 이 영화는 역동적인 사회적 상호작용, 감정적 변화, 그리고 등장인물들이 서로의 생각을 추론하는 과정이 풍부하게 담겨 있습니다. 참가자들이 이 영화를 보는 동안의 뇌 활동을 관찰함으로써, 연구진은 어떤 유형의 시각 정보가 뇌의 청각 영역에서 처리되고 있는지 정확히 지도화할 수 있었습니다.

연구 결과, 농인 성인의 경우 청각 피질이 단순히 단순한 시각적 움직임에 반응하는 것을 넘어, 화면 속에서 펼쳐지는 복잡한 사회적 세계에 고도로 조율되어 있다는 사실이 밝혀졌습니다. 고급 컴퓨터 모델을 사용하여 영화를 수천 개의 미세한 세부 사항으로 분해한 결과, 연구진은 농인 참가자들의 뇌가 놀라운 정확도로 영화의 내용을 예측하고 있음을 발견했습니다. 청인 집단의 경우, 이러한 청각 영역은 대부분 조용하게 유지되었으며 몇 가지 기본적인 시각적 단서에만 반응했습니다. 그러나 농인 집단에서는 청각 피질이 영화 내내 활성화되어 움직임의 속도부터 장면의 감정적 톤에 이르기까지 모든 것을 인코딩했습니다. 가장 놀라운 점은, 가장 강력한 신호가 사회적 상호작용, 즉 캐릭터들이 대화를 나누거나, 포옹하거나, 함께 협력하는 순간에서 나왔다는 것입니다. 이는 시각에 의존하여 소통하는 사람들에게 있어, 뇌가 청각 센터를 사회적 역학을 이해하기 위한 특화된 허브로 재용도화한다는 것을 시사합니다.

연구진은 또한 이 새로운 시각적 기능이 무작위적인 것이 아니라, 뇌의 자연스러운 조직을 반영하는 엄격한 해부학적 지도를 따른다는 것을 발견했습니다. 농인 참가자들에게서 청각 피질은 명확한 계층 구조를 보여주었습니다. 일차 청각 중추와 가까운 하위 수준 영역들은 움직임이나 색상 같은 기본적인 시각적 특징에 폭넓게 반응했습니다. 연구진이 처리 체인의 더 높은 곳, 즉 측두엽 상단 근처의 고차원 영역으로 올라갈수록 뇌는 점점 더 선택적으로 변했습니다. 청인들의 사회적 시각을 담당하는 부분 바로 옆에 위치한 이 상위 영역들은 복잡한 사회적 개념의 주요 거점이 되었습니다. 여기서 뇌는 사회적 상호작용, 나아가 '마음 이론(Theory of Mind)'—다른 캐릭터가 무엇을 생각하거나 느끼는지 추측하는 능력—에 대한 구체적인 선호도를 보였습니다. 이 패턴은 뇌가 단순히 청각 상실로 남겨진 빈자리를 무작위적인 시각적 노이즈로 채우는 것이 아니라, 근접성과 연결성에 따라 기존의 사회적 처리 네트워크를 인접한 청각 영역으로 확장시킨다는 것을 나타냅니다.

연구에서 매우 중요한 발견 중 하나는 이 새로운 민감성이 무엇에 의해 유도된 것이 아닌가 하는 점이었습니다. 연구진은 농인 참가자들이 단순히 얼굴의 존재에 더 강하게 반응하는 것인지 테스트했습니다. 이는 수어에서 얼굴 표정이 중요하기 때문에 흔히 제기되는 가설입니다. 연구 결과, 두 그룹 모두 얼굴에 반응하기는 했지만, 농인의 뇌가 얼굴 자체에 대해서만 독특한 강화 효과를 보이는 것은 아니라는 점이 밝혀졌습니다. 대신, 추가적인 민감성은 구체적으로 사람들 사이의 '상호작용'과 결합되어 있었습니다. 이 차이는 매우 중요한데, 이는 뇌가 단순히 얼굴을 더 열심히 보고 있는 것이 아니라, 개인 간의 관계와 공동 행동을 능동적으로 해독하고 있음을 시사하기 때문입니다. 또한 연구는 이러한 확장이 비언어적 사회적 신호를 처리하는 데 알려진 반구인 뇌의 우측에 집중되어 있음을 언급하며, 뇌의 적응이 원래의 기능적 청사진을 존중한다는 점을 더욱 뒷받침했습니다.

궁극적으로 이 연구는 뇌가 스스로를 재구성하는 능력이 근접성과 연결성의 원리에 의해 통제된다는 것을 시사합니다. 청각 피질이 주요 입력 신호를 잃었을 때, 뇌는 일반적인 시각 스크린이 되지 않습니다. 대신, 뇌는 이웃한 영역들과 가장 관련이 깊은 시각 정보에 손을 뻗습니다. 고차원 청각 영역은 뇌의 사회적 처리 센터와 바로 맞닿아 있기 때문에, 사회적 상호작용을 해석하는 과업을 자연스럽게 떠맡게 됩니다. 이 연구는 경험이 뇌를 어떻게 형성하는지에 대한 명확한 그림을 제공합니다. 농인의 뇌는 단순히 시각적으로 더 잘 보게 된 것이 아니라, 내부 지도를 재조직하여 사회적 세계를 우선시하도록 만들었으며, 청각 피질의 침묵을 인간적 유대를 이해하는 활기찬 중심으로 탈바꿈시켰습니다.