A cortical hierarchical mechanism for subjective visual experience during working memory

이 연구는 아판타시아 환자의 작업 기억 중 주관적 시각 경험이 결여된 원인이 전두두정피질 (IPS) 에서 초기 시각피질 (EVC) 로 이어지는 피드백 경로의 기능적 연결 저하에 있음을 밝힘으로써, 의식적인 시각적 상상력의 생성이 이 피질 계층 구조에 의존함을 규명했습니다.

핵심

🎨 제목: "머릿속의 영화관"이 작동하지 않는 사람들

우리가 눈을 감고 "빨간 사과"를 떠올릴 때, 대부분의 사람들은 마치 눈을 뜨고 사과를 보는 것처럼 생생한 이미지를 머릿속에 그립니다. 하지만 어떤 사람들은 "사과"라는 단어의 의미는 알지만, 머릿속에 그림이 전혀 그려지지 않는 경우가 있습니다. 이를 **'아판타시아 (Aphantasia)'**라고 합니다.

이 연구는 이런 아판타시아를 가진 사람들과 일반적인 사람들이 작업 기억 (Working Memory) 과제를 할 때 뇌에서 어떤 차이가 있는지 fMRI(뇌 촬영) 로 확인했습니다.

🧠 핵심 발견: 뇌의 '프로젝터'와 '화면'의 연결 고리

연구자들은 뇌를 거대한 영화관에 비유할 수 있다고 설명합니다.

1. 초기 시각 피질 (EVC): 영화관의 스크린입니다. 눈으로 본 이미지를 비추는 곳입니다.
2. 두정엽 (IPS): 영화관의 **프로젝터 (또는 감독실)**입니다. 스크린에 어떤 장면을 비출지 지시하는 곳입니다.
3. 연결 통로 (피드백): 프로젝터에서 스크린으로 영상을 보내는 케이블입니다.

1. 일반적인 사람들 (상상력 있음)

• 상황: 눈을 감고 "왼쪽으로 움직이는 물체"를 상상하라고 하면, **프로젝터 (IPS)**가 "왼쪽으로!"라고 지시합니다.
• 작동: 이 지시가 케이블을 타고 **스크린 (EVC)**으로 전달됩니다.
• 결과: 스크린에 생생한 영상이 비쳐집니다. 그래서 우리는 "아, 내가 지금 머릿속으로 보고 있구나!"라고 느끼며, 기억도 더 선명하게 유지됩니다.

2. 아판타시아를 가진 사람들 (상상력 없음)

• 상황: 같은 "왼쪽으로 움직이는 물체"를 상상하라고 하면, **프로젝터 (IPS)**는 여전히 "왼쪽으로!"라고 지시합니다. (의지력은 정상입니다.)
• 작동: 하지만 **케이블 (연결 통로)**이 고장 나 있거나 약해서, 지시가 **스크린 (EVC)**에 제대로 전달되지 않습니다.
• 결과: 스크린은 어둡거나 흐릿합니다. 그래서 그들은 "물체가 왼쪽으로 간다는 사실은 알지만, 머릿속에 그림이 그려지지 않는다"고 느낍니다.

🔍 연구의 놀라운 발견들

이 연구는 단순히 "프로젝터가 고장 났다"는 것을 넘어, 뇌의 계층적 구조에서 문제가 발생한다는 것을 밝혀냈습니다.

1. "의도적인 상상"과 "의도하지 않은 착시"의 차이

• 연구진은 세 가지 실험을 했습니다.
  • 실제 보기: 눈으로 본 것 (프로젝터 없이 스크린에 직접 비춤).
  • 상상하기: 눈으로 보지 않고 상상하는 것 (프로젝터가 스크린에 비춤).
  • 착시: 눈으로 보는데 뇌가 착각을 일으켜 다른 것을 보는 것 (프로젝터와 스크린이 함께 작동).
• 결과: 아판타시아 사람들은 눈으로 볼 때는 정상이었습니다. 하지만 상상할 때나 착시를 볼 때 뇌의 스크린 (시각 피질) 이 제대로 작동하지 않았습니다. 이는 아판타시아가 단순히 "상상력을 못 쓰는 것"이 아니라, 뇌의 상위 부위에서 하위 부위로 정보를 전달하는 '되먹임 (Feedback)' 시스템 전체에 문제가 있다는 뜻입니다.

2. 뇌의 '중간 지점' (V3AB) 이 병목 현상을 일으킴

• 정보의 흐름은 프로젝터 (IPS) → 중간 지점 (V3AB) → 스크린 (EVC) 순서로 내려갑니다.
• 연구 결과, 아판타시아 사람들의 뇌에서는 이 **중간 지점 (V3AB)**에서 정보가 막히는 '병목 현상'이 발생했습니다. 상위 뇌에서 내려온 지시가 하위 뇌까지 제대로 전달되지 못했던 것입니다.

3. 왜 시험은 잘 보는 걸까? (보상 작용)

• 그런데 재미있는 점은, 아판타시아 사람들이 기억력 테스트 (작업 기억) 를 잘 수행했다는 것입니다.
• 이유: 뇌는 똑똑합니다. 한쪽 (상상력 관련 경로) 이 고장 나자, **다른 경로 (이측 두정엽)**를 이용해 정보를 저장했습니다. 마치 메인 전선이 끊기자 보조 전선으로 전기를 공급하듯, 의식적인 '보기' 감각 없이도 정보를 처리하여 과제를 성공적으로 수행한 것입니다.

💡 결론: 우리가 무언가를 '생각'할 때

이 연구는 우리의 **의식적인 경험 (머릿속에 그림이 그려지는 느낌)**은 단순히 뇌의 한 부분이 작동해서 생기는 것이 아니라, 뇌의 여러 부분이 서로 대화하며 (상향식과 하향식 정보 흐름) 만들어낸 결과임을 보여줍니다.

• 일반인: "프로젝터 (의지)"가 "스크린 (시각)"을 향해 신호를 보내고, 스크린이 그 신호를 받아 생생한 이미지를 만들어냅니다.
• 아판타시아: "프로젝터"는 신호를 보내지만, "스크린"이 그 신호를 받아들이지 못해 이미지가 생성되지 않습니다. 하지만 뇌는 다른 방법으로 기억을 유지할 수 있습니다.

한 줄 요약:

"아판타시아는 상상력을 못 하는 게 아니라, 머릿속 영화관의 프로젝터에서 스크린으로 영상을 보내는 케이블이 약해서, 화면이 흐릿하게 비칠 뿐입니다. 하지만 뇌는 그 화면 없이도 영화를 즐길 수 있는 다른 방법을 찾아냅니다."

이 발견은 우리가 '의식'과 '기억'을 어떻게 이해해야 하는지에 대한 새로운 창을 열어주었습니다.

기술 요약

1. 연구 배경 및 문제 제기 (Problem)

• 작업 기억과 주관적 경험의 불일치: 작업 기억은 외부 자극이 없는 상태에서 정보를 유지하고 조작하는 능력을 제공합니다. 기존 연구는 작업 기억의 객관적 성능 (정확도 등) 에 집중했으나, 작업 기억 내용이 의식적으로 '보는' 것과 같은 주관적 시각 경험 (subjective sensory experience) 을 동반하는지, 그리고 그 신경 기제는 무엇인지 명확하지 않았습니다.
• 시각 피질의 역할과 피드백 가설: 감각 피질 (특히 초기 시각 피질, EVC) 이 작업 기억의 저장소 역할을 한다는 '감각 모집 가설'이 제기되었으나, EVC 의 활동이 단순히 잔류 감각 신호인지, 아니면 상위 뇌 영역으로부터의 피드백에 의한 것인지에 대한 논쟁이 있었습니다.
• 무시각화증 (Aphantasia) 의 활용: 무시각화증 환자는 작업 기억 과제를 수행할 수 있지만, 의식적인 시각 이미지를 생성하지 못한다고 보고합니다. 이는 객관적 작업 기억 성능과 주관적 시각 경험을 분리하여 연구할 수 있는 독특한 모델을 제공합니다.
• 핵심 질문: 무시각화증이 특정 뇌 영역 (예: EVC) 의 국소적 결함 때문인지, 아니면 상위 영역 (전두엽/두정엽) 에서 EVC 로 가는 피드백 경로의 네트워크적 붕괴 때문인지 규명하는 것.

2. 연구 방법론 (Methodology)

• 참가자:
  • 무시각화군 (n=17): VVIQ(시각적 이미지 선명도 질문지) 점수가 매우 낮고, 심층 인터뷰를 통해 시각적 이미지 생성 불가가 확인된 집단.
  • 일반 시각화군 (n=17): 정상적인 시각적 이미지를 생성하는 대조군.
• 실험 과제 (fMRI 내 3 가지 작업 기억 과제):
  • 모든 과제는 지연 회상 (delayed-recall) 구조를 가짐.
  • 지각 기반 (Perception): 실제 움직이는 가바 (Gabor) 패턴을 보고 기억. (하향식 피드백 최소화, 상향식 입력 위주)
  • 상징적 이미지 기반 (Imagery): 심볼 (L/R) 을 보고 해당 방향의 움직임을 자발적으로 상상하며 기억. (하향식 피드백 필수)
  • 착시 기반 (Illusion): 수직으로 움직이는 가바의 내부 질감이 이동하여 자발적 통제 없이 기울어진 운동 착시를 유발. (의도하지 않은 이미지 생성)
  • 지연 기간 (Delay Period): 외부 자극 없이 기억된 운동 경로를 유지하도록 지시.
• 신경 분석 기법:
  • 시간 분해 다변량 패턴 분석 (Time-resolved MVPA): 운동 방향 (좌/우) 을 SVM(서포트 벡터 머신) 으로 디코딩하여 시공간적 신경 표현의 강도와 안정성을 추적.
  • 관심 영역 (ROI): 초기 시각 피질 (EVC: V1-V3), 두정엽 (IPS), V3AB, MT+ 등.
  • 교차 일반화 (Cross-temporal & Cross-task generalization): 시간적 안정성과 과제 간 공유 표현 평가.
  • 표현 유사성 분석 (RSA): 시각적 입력 모델 vs. 기억 (mnemonic) 모델과의 유사성 비교를 통해 신경 코드의 전환 (시각적 -> 기억적) 분석.
  • 일반화 심리생리학적 상호작용 (gPPI): IPS 와 EVC 간의 기능적 연결성 (Functional Connectivity) 분석.
  • 통제 분석: 전체 BOLD 신호 차이, 안구 운동 패턴 (DeepMReye 및 외부 안구 추적기) 배제.

3. 주요 결과 (Key Results)

A. 행동적 결과

• 주관적 경험: 무시각화군은 지연 기간 동안 모든 과제에서 시각적 이미지 선명도 (vividness) 가 거의 0 에 가까웠으나, 일반 시각화군은 선명한 이미지를 보고함.
• 과제 수행: 무시각화군도 작업을 성공적으로 수행했으나, 일반 시각화군보다 회상 오차 (recall error) 와 반응 변동성 (variability) 이 유의미하게 컸음. 이는 시각적 이미지의 부재가 정밀한 작업 기억 유지에 영향을 줌을 시사.
• 착시 지각: 두 집단 모두 착시 크기 (illusion size) 가 유사하여, 비자발적 착시 지각 능력은 정상임을 확인.

B. 신경적 결과

1. 시각화 우세 신호 (Imagery Dominance) 의 부재:

   • 일반 시각화군은 샘플 기간 중 대측 (contralateral) IPS에서 지각 과제 대비 이미지 과제의 디코딩 정확도가 더 높은 '시각화 우세'를 보임.
   • 무시각화군은 IPS 에서 이러한 우세 신호가 완전히 결여됨. 이는 자발적 이미지 생성 신호의 결함을 시사.

2. EVC 로의 피드백 손상:

   • 지연 기간: 일반 시각화군은 EVC 에서 운동 경로를 강력하고 안정적으로 디코딩했으나, 무시각화군은 EVC 의 표현이 약하고 불안정함.
   • 시작 시점: 이미지 과제는 샘플 기간부터, 착시 과제는 지연 기간 초기부터 집단 간 차이가 나타남. 이는 피드백 손상이 지연 기간 유지뿐만 아니라 이미지 생성 단계에서도 발생하며, 자발적 통제 유무와 무관하게 보편적임을 의미.

3. V3AB 의 병목 현상 (Bottleneck):

   • RSA 분석 결과, 일반 시각화군은 지연 기간 동안 시각적 코드에서 기억 (mnemonic) 코드로의 전환이 V3AB 를 거쳐 IPS 로 전파됨.
   • 무시각화군은 V3AB 에서 이러한 전환이 차단되거나 지연됨. 즉, V3AB 가 상위 영역 (IPS) 에서 하위 영역 (EVC) 으로 가는 피드백 신호의 병목 지점으로 작용.

4. 기능적 연결성 (Functional Connectivity) 감소:

   • 지연 기간 중 대측 IPS 와 EVC 간의 기능적 연결성이 일반 시각화군은 유의미하게 유지되었으나, 무시각화군은 현저히 감소하거나 소실됨.
   • 이는 피드백 경로의 붕괴가 EVC 의 약한 표현을 직접적으로 설명함.

5. 동측 (Ipsilateral) IPS 의 보상 기제:

   • 대측 (시각 입력과 반대쪽) EVC 와 IPS 는 손상되었으나, 동측 (시각 입력과 같은 쪽) IPS에서는 무시각화군과 일반 시각화군 간 차이가 없었음.
   • 동측 IPS 는 시각적 이미지와 무관한 비시각적 (non-visual) 코드로 작업 기억을 유지하여, 주관적 경험은 없어도 과제 수행은 가능하게 하는 보상 기제로 작용.

4. 주요 기여 및 결론 (Contributions & Conclusion)

• 계층적 피드백 메커니즘 규명: 작업 기억 중 주관적 시각 경험은 단일 뇌 영역의 활동이 아니라, 두정엽 (IPS) 에서 초기 시각 피질 (EVC) 로 이어지는 피드백 경로의 계층적 활성화에 의해 생성됨을 증명.
• 무시각화증의 신경 기제: 무시각화증은 EVC 의 국소적 결함이 아니라, 상위 영역에서 하위 영역으로 가는 피드백 신호 (특히 IPS-EVC 경로) 의 전반적 붕괴로 인해 발생함.
• 의식적 경험과 수행의 분리: 작업 기억의 객관적 수행 (동측 IPS 의 비시각적 코드 유지) 과 주관적 시각 경험 (대측 IPS-EVC 피드백 경로) 은 신경적으로 분리될 수 있음을 보여줌.
• V3AB 의 역할: V3AB 가 시각적 입력에서 기억적 표현으로 전환되는 핵심 병목 지점이며, 이곳에서의 피드백 차단이 의식적 시각화 실패의 원인이 됨.

5. 의의 (Significance)

이 연구는 의식적 시각화 (conscious mental visualization) 가 단순히 감각 피질의 활성화를 넘어, 상위 인지 영역 (두정엽 등) 에서 하향식 (top-down) 피드백을 통해 감각 피질을 재구성하는 동적 과정임을 입증했습니다. 이는 작업 기억, 정신적 이미지, 그리고 의식 (consciousness) 연구에 중요한 통찰을 제공하며, 무시각화증과 같은 신경학적 상태를 이해하는 새로운 패러다임을 제시합니다. 또한, 작업 기억의 정밀도가 시각적 이미지의 존재 여부에 어떻게 의존하는지에 대한 신경 생물학적 근거를 마련했습니다.