Habit and the hippocampus: Model-based spatial representations without outcome-sensitive control

이 연구는 해마가 공간적 인지 지도를 형성하여 항법 경로를 안내할 수 있지만, 그것만으로는 결과 가치에 민감한 목표 지향적 통제를 보장하지 않으며 습관적 행동이 발현될 수 있음을 보여줍니다.

핵심

이 연구 논문은 **"해마 (Hippocampus, 뇌의 지도 저장소)"**가 우리가 목표를 향해 움직일 때, 정말로 우리가 '무엇을 원하는지'를 고려해서 결정을 내리게 해주는지, 아니면 그냥 '습관적으로' 움직이게만 해주는지에 대한 의문을 던집니다.

결론부터 말씀드리면, **"뇌에 정확한 지도가 있다고 해서, 우리가 그 지도를 이용해 '지금 가장 좋은 것'을 선택하는 건 아닙니다."**라는 놀라운 사실을 발견했습니다.

이 복잡한 실험을 일상적인 비유로 쉽게 설명해 드릴게요.

---

1. 실험 설정: 미로와 두 가지 간식

연구진은 쥐들을 실험실 미로에 넣었습니다. 이 미로는 아주 특이했습니다.

• 북쪽 (North) 에서: 왼쪽으로 가면 우유 (맛있는 간식), 오른쪽으로 가면 물이 나옵니다.
• 남쪽 (South) 에서: 왼쪽으로 가면 물, 오른쪽으로 가면 우유가 나옵니다.

즉, **"왼쪽으로 돌아라"**라고 외우면 안 됩니다. **어디에 서 있느냐 (위치)**에 따라 같은 행동 (왼쪽 회전) 이 다른 결과를 가져옵니다. 쥐들은 이 미로를 아주 오랫동안 훈련해서 우유가 나오는 길을 찾아야 했습니다.

2. 두 가지 훈련 방법: "지도" vs "등불"

연구진은 쥐들을 두 가지 방식으로 훈련시켰습니다.

1. 지도 그룹 (해마 의존): 어둠 속에서 미로 바닥의 질감이나 자신의 움직임을 기억해서 북쪽과 남쪽을 구분해야 했습니다. (이건 뇌의 '지도 저장소'인 해마가 필수적입니다.)
2. 등불 그룹 (해마 비의존): 우유가 나오는 곳에 밝은 LED 불빛을 켜두었습니다. 쥐들은 복잡한 지도를 볼 필요 없이, 그냥 "빛이 있는 곳으로 가라"는 단순한 규칙만 따르면 되었습니다. (이건 해마 없이도 가능합니다.)

3. 상황 변화: "목마름" 테스트

훈련이 끝난 후, 연구진은 쥐들을 목마르게 만들었습니다. 평소엔 우유가 더 맛있었지만, 목이 말라 물이 더 간절해진 상태입니다.
이제 중요한 질문입니다: "목이 말라 물이 더 필요해진 상황에서, 쥐들은 우유를 찾으러 가던 길 (습관) 을 버리고 물을 찾으러 갈까요?"

• 목표 지향적 행동 (Goal-directed): "아, 지금 목이 말라 물이 더 필요하구나. 그럼 우유 대신 물을 주는 곳으로 가야지!" (상황을 고려한 유연한 결정)
• 습관적 행동 (Habit): "아무튼 우유가 나오는 곳으로 가자!" (목마름과 상관없이 예전 습관대로 행동)

4. 놀라운 결과: 지도가 있어도 습관이다!

실험 결과는 매우 놀라웠습니다.

• 등불 그룹 (지도 불필요): 당연히 습관대로 우유 쪽으로 갔습니다. (예상 가능)
• 지도 그룹 (해마 필수): 여기서 대박이 났습니다. 이 쥐들은 해마가 제대로 작동해서 미로를 정확히 헤매고 있었음에도 불구하고, 목이 말라 물이 더 필요할 때도 여전히 우유 쪽으로 갔습니다!

즉, 해마가 미로의 정확한 지도를 그려주고 있었음에도 불구하고, 쥐들은 그 지도를 이용해 '지금 가장 필요한 것 (물)'을 선택하지 못했습니다. 그들은 그냥 "우유가 나오는 곳으로 가는 습관"에 갇혀 있었던 것입니다.

5. 왜 이런 일이 일어났을까? (두 가지 해석)

연구진은 두 가지 가능성을 제시합니다.

1. "기억은 있지만, 예측은 없다": 해마는 "지금 내가 북쪽이야"라는 현재 위치만 기억할 뿐, "북쪽에서 왼쪽으로 가면 물이 나올 텐데, 지금 목이 말라 물이 필요하니까 왼쪽으로 가야지"라는 미래의 가치를 계산하지는 못한다는 뜻입니다.
2. "예측은 하지만, 가치 판단은 없다": 해마가 "왼쪽으로 가면 물이 나오겠지"라고 미래 상태를 예측할 수는 있지만, 그 정보가 "물=목마름 해결=최고"라는 가치 시스템과 연결되지 않아서, 쥐는 그 정보를 활용하지 못했다는 뜻입니다.

6. 해결책: 다시 가르치면 달라진다

하지만 연구진은 한 가지 더 실험을 했습니다. 쥐들에게 목마른 상태에서 직접 우유와 물을 마시며 훈련을 시켰습니다 (재평가 훈련).
그랬더니, 지도 그룹 쥐들도 갑자기 깨어났습니다! "아, 목마를 때는 물이 더 중요하구나!"라고 깨닫고, 습관을 버리고 물을 찾으러 갔습니다.

이는 해마가 가진 지도 자체에 문제가 있는 게 아니라, 그 지도를 '현재의 필요 (가치)'와 연결하는 학습 과정이 필요했다는 뜻입니다.

---

💡 핵심 요약 (일상적인 비유)

이 논문의 결론을 한 문장으로 정리하면 이렇습니다:

"내비게이션 (해마) 이 길 안내를 완벽하게 해준다고 해서, 운전자가 '지금 기름이 부족해서 주유소를 가야겠다'라고 판단하는 건 아닙니다. 운전자는 그냥 '평소 가던 길 (습관)'로 그냥 달려갈 뿐입니다."

• 해마 (내비게이션): "어디에 있는지, 어떻게 가야 하는지"를 알려줍니다.
• 목표 지향적 행동 (유연한 판단): "지금 내가 무엇을 가장 원하는지"를 고려해 길을 바꿉니다.
• 결론: 해마가 작동한다고 해서 자동으로 '유연한 판단'이 나오는 건 아닙니다. 습관이 강해지면, 아무리 정확한 지도를 들고 있어도 '지금 필요한 것'을 잊어버리고 예전 습관대로 움직일 수 있다는 것입니다.

이 연구는 우리가 뇌의 '지도' 기능과 '의사결정' 기능을 분리해서 생각해야 함을 보여줍니다. 지도가 있어도, 그 지도를 어떻게 활용하느냐는 또 다른 학습 과정이 필요하다는 뜻이죠.

기술 요약

1. 연구 배경 및 문제 제기 (Problem)

• 기존 관점: 해마는 환경의 '인지 지도'를 구축하여 유연한 의사결정을 가능하게 하는 모델 기반 (model-based) 학습과 밀접하게 연관되어 있다고 여겨집니다. 특히, 결과의 가치 재평가 (outcome revaluation, 예: 배고픔 상태에서 물의 가치 상승) 에 반응하여 행동을 수정하는 '목표 지향적 행동'과 해마 기능이 연결된다는 연구들이 많았습니다.
• 연구 질문: 해마가 공간적 경로 탐색 (pathfinding) 에 필수적인지 여부와 상관없이, 해마 의존적 항해가 결과에 무감각한 습관적 (habitual, outcome-insensitive) 행동을 지원할 수 있는가? 즉, 해마를 사용하여 경로를 찾는다고 해서 반드시 가치 업데이트가 가능한 목표 지향적 행동을 수행하는 것은 아닌가?

2. 방법론 (Methodology)

• 실험 대상: 38 마리의 Long-Evans 쥐 (수컷 16, 암컷 22).
• 수술 및 조작: 배후 해마 (dorsal hippocampus) 에 양측성 카테터 (cannula) 를 이식하여, 실험 중 **무시르몰 (muscimol)**을 주입해 해마 기능을 일시적으로 억제 (inactivation) 함으로써 해마 의존성을 검증했습니다.
• 과제 설계 (Two-outcome Spatial Navigation Task):
  • 2m x 2m 의 정사각형 트랙과 중앙의 플러스 (plus) 미로로 구성된 복잡한 미로 환경.
  • 핵심 조건: 동일한 회전 행동 (왼쪽 또는 오른쪽) 이 공간 위치에 따라 서로 다른 보상 (우유 vs 물) 으로 이어지도록 설계되었습니다.
    • 북쪽 선택지: 왼쪽→우유, 오른쪽→물
    • 남쪽 선택지: 왼쪽→물, 오른쪽→우유
  • 이 과제는 쥐가 단순히 자극 - 반응 (S-R) 을 기억하는 것이 아니라, 현재의 공간적 위치를 식별해야만 올바른 보상을 얻을 수 있음을 의미합니다.
• 학습 조건 (3 가지 그룹):
  1. Beacon Group: 우유가 있는 곳에 LED 비콘 (빛) 을 켜서 시각적 단서로만 학습 (해마 비의존적).
  2. Texture Group: 교차로 바닥에 다른 질감 (Texture) 을 제공하여 촉각적 단서로 학습 (해마 의존적).
  3. Path Integration Group: 외부 단서 없이 자기 운동 (path integration) 만을 통해 위치를 식별 (해마 의존적).
• 평가 프로토콜:
  • 습관화 (Habituation): 충분한 훈련 후, 우유와 물에 대한 선호도가 바뀐 상태 (물 부족으로 인한 갈증) 에서 보상이 없는 소거 (extinction) 테스트를 수행.
  • 결과 재평가 (Revaluation):
    • Incentive Learning (IL) 그룹: 갈증 상태에서 미로 내 선택 없이 단순히 두 병 (우유/물) 을 마시는 테스트만 수행.
    • Revaluation Training (RT) 그룹: 갈증 상태에서 미로 과제 자체를 수행하며 새로운 보상 (물) 을 경험.

3. 주요 결과 (Key Results)

A. 습관적 행동과 해마 의존성의 분리

• 습관 형성: 충분한 훈련 후, 갈증 상태 (물의 가치 상승) 에서 보상이 없는 테스트 (소거) 를 진행했을 때, **모든 그룹 (Beacon, Texture, PathInt)**이 여전히 우유와 관련된 행동을 선택했습니다.
• 해마의 역할:
  • Beacon 그룹: 해마 억제 시에도 정확도가 유지됨 (해마 비의존적).
  • Discrimination 그룹 (Texture + PathInt): 해마 억제 시 정확도가 급격히 떨어짐 (해마 의존적).
  • 결론: Discrimination 그룹은 정확한 수행을 위해 해마가 필요함에도 불구하고, 갈증에 따른 보상 가치 변화 (물 선호) 를 행동에 반영하지 못함. 즉, 해마를 사용하여 경로를 찾더라도 행동은 결과에 무감각한 습관적 통제 하에 있었습니다.

B. 명시적 재평가 훈련 (Revaluation Training) 의 효과

• RT 그룹의 변화: 갈증 상태에서 미로 과제를 직접 수행하며 보상을 재학습한 (RT) 쥐들은, 이후 테스트에서 우유 대신 물을 선택하는 행동 변화를 보였습니다.
• 해마 의존성 유지: RT 그룹에서도 Discrimination 그룹은 해마 억제로 인해 정확도가 떨어졌지만, 행동 선택의 유연성 (결과 민감도) 은 유지되었습니다.
• 의미: 결과 민감도 (outcome sensitivity) 는 단순히 해마가 활성화된다고 자동으로 생기는 것이 아니라, 보상 가치와 공간적 상태가 명시적으로 결합된 학습 경험을 통해 획득됨을 시사합니다.

4. 핵심 기여 및 결론 (Key Contributions & Conclusions)

1. 해마 기능의 해리 (Dissociation): 해마 의존적 공간 표현 (인지 지도) 과 가치 민감한 통제 (목표 지향적 행동) 는 해리될 수 있음을 증명했습니다. 해마는 경로 탐색 (pathfinding) 에 필수적일 수 있지만, 그 자체가 목표 지향적 의사결정을 보장하지는 않습니다.
2. 습관적 행동의 새로운 메커니즘 제안:
   • 기억만 있고 예측이 없는 (Memory without prediction): 해마가 현재 위치를 식별하여 습관적 행동 (캐시된 가치) 을 실행하게 하지만, 미래 결과의 가치를 예측하지는 않음.
   • 예측만 있고 가치가 없는 (Prediction without value): 해마가 미래 상태를 예측하지만, 그 예측이 동기 상태 (갈증 등) 에 따라 변하는 가치 시스템과 연결되지 않음.
3. 목표 지향적 행동의 조건: 결과 민감도는 해마의 존재 유무가 아니라, 예측적 상태 표현이 가치 시스템과 어떻게 결합되는지에 달려 있음을 시사합니다. 명시적인 재평가 훈련 (Revaluation Training) 을 통해 비로소 이 결합이 이루어져 습관적 행동에서 목표 지향적 행동으로 전환될 수 있었습니다.

5. 의의 (Significance)

이 연구는 해마가 단순히 '유연한 사고'를 담당한다는 단순화된 관점을 수정합니다. 해마는 공간적 맥락에서 모델 기반 (model-based) 표현을 제공하지만, 이 표현이 반드시 **가치 업데이트 (value updating)**와 연결되는 것은 아님을 보여줍니다. 이는 학습 이론에서 '모델 기반'과 '목표 지향적' 행동이 항상 일치하지 않을 수 있음을 보여주며, 해마와 선조체 (striatum) 등 다른 뇌 영역 간의 가치 - 상태 결합 (coupling) 메커니즘에 대한 새로운 연구 방향을 제시합니다.