Evidence for timing in the midsession reversal task with rats in operant conditioning boxes

이 연구는 쥐가 미드세션 반전 과제를 수행할 때 보상 단서뿐만 아니라 시간 정보도 통합하여 의사결정을 한다는 증거를 제시하며, 표준 훈련 조건에서는 드러나지 않더라도 시간적 통제가 존재할 수 있음을 보여줍니다.

핵심

🍪 비유: "자동판매기와 시계"

상상해 보세요. 여러분이 자동판매기 앞에 서 있다고 칩시다. 이 기계는 처음 40 번은 '사과 버튼 (A)'을 누르면 쿠키가 나오고, 나중에 40 번은 '배 버튼 (B)'을 누르면 쿠키가 나오는 규칙을 가지고 있습니다. 하지만 기계는 "이제 규칙이 바뀝니다!"라고 알려주지 않아요.

이때 여러분은 어떻게 행동할까요?

1. 시간을 기억하는 사람: "아, 내가 10 분 정도 기다렸으니 이제 배 버튼으로 바꿔야겠어!"라고 생각합니다.
2. 보상만 보는 사람: "아까 사과 버튼을 눌렀는데 쿠키가 안 나왔네? 그럼 배 버튼으로 바꿔야지!"라고 직전에 먹은 쿠키 (보상) 만 보고 결정합니다.

과거에 비둘기나 새들은 시간을 기억해서 미리 버튼을 바꾸다가 실수를 많이 했습니다. 하지만 쥐들은 보통 보상만 보고 행동해서 거의 실수 없이完美하게 해냈다고 알려져 왔습니다. 즉, 쥐는 "시간"을 모르고 오직 "먹은 것"만 보고 산다고 생각했던 거죠.

🐀 이 실험의 핵심: "속도를 바꿔보자!"

연구자들은 "혹시 쥐도 시간을 기억하고 있을까? 그냥 평소엔 보상이 너무 빨라서 시간을 잊어버리는 건 아닐까?"라고 의심을 했습니다. 그래서 실험 속도를 조절해 보는 실험을 했습니다.

• A 그룹 (빠른 그룹): 버튼과 버튼 사이의 간격이 5 초였습니다. (매우 빠름)
• B 그룹 (느린 그룹): 버튼과 버튼 사이의 간격이 10 초였습니다. (조금 느림)

두 그룹 모두 훈련을 잘 받아서, 평소에는 거의 실수 없이 perfect 하게 버튼을 눌렀습니다. 마치 "시간은 상관없고, 내가 먹은 쿠키만 보고 행동하는구나!"라고 생각하게 만들었죠.

🎭 반전: "속도를 바꿔주니 쥐가 당황했다!"

그런데 갑자기 실험 도중 속도를 바꿔주었습니다.

• **A 그룹 (빠른 쥐)**에게 갑자기 10 초 간격을 주었습니다. (속도가 절반으로 느려짐)
• **B 그룹 (느린 쥐)**에게 갑자기 5 초 간격을 주었습니다. (속도가 두 배로 빨라짐)

그 결과는 놀라웠습니다. 쥐들은 **보상 (쿠키)**을 보고 행동한 게 아니라, **머릿속에 저장된 '시간 감각'**을 보고 버튼을 바꾸기 시작했습니다.

1. 빠른 쥐 (A 그룹): 평소엔 5 초마다 먹었는데, 갑자기 10 초마다 먹으니 "아, 시간이 더 걸리네? 그럼 내가 생각한 '중간 시간'이 이미 지났을 거야!"라고 생각해서, 아직 쿠키가 나오기 전인데도 미리 버튼을 바꾸는 실수를 했습니다.
2. 느린 쥐 (B 그룹): 평소엔 10 초마다 먹었는데, 갑자기 5 초마다 먹으니 "아, 시간이 너무 빨라! 아직 내가 생각한 '중간 시간'이 안 지났어!"라고 생각해서, 쿠키가 이미 바뀌었는데도 계속 옛날 버튼을 누르는 실수를 했습니다.

💡 결론: 쥐는 '시간'과 '보상'을 모두 쓴다

이 실험은 쥐가 단순히 "먹은 것만 보고 행동하는 멍청한 동물"이 아니라는 것을 증명했습니다.

• 평소엔: 보상이 너무 확실해서 "시간"이라는 숨겨진 능력을 쓰지 않고, **보상 (Local Cue)**만 믿고 행동합니다. (마치 매일 같은 시간에 출근하는 사람은 시계를 안 봐도 알지만, 갑자기 출근 시간이 바뀌면 시계를 확인하는 것과 같습니다.)
• 속도가 바뀌면: 평소의 규칙이 깨지자, 쥐들은 **머릿속에 저장해 둔 '전체 시간 (Global Timing)'**을 꺼내서 사용합니다.

🌟 요약

이 연구는 쥐가 **시간을 재는 능력 (시계)**과 **보상을 받는 능력 (맛)**을 모두 가지고 있으며, 평소엔 보상에 집중하다가 상황이 달라지면 시간 감각을 발휘한다는 것을 보여줍니다.

마치 운전과 같습니다. 평소에는 길거리의 표지판 (보상) 만 보고 운전하지만, 갑자기 도로가 막히거나 속도가 변하면 "아, 내가 보통 이 시간에 도착하잖아?"라고 **시계 (시간)**를 확인하며 상황을 판단하는 것과 똑같습니다. 쥐도 우리처럼 상황에 따라 지혜를 다르게 쓴다는 뜻이죠!

기술 요약

논문 요약: 조건부 조작 상자에서 쥐의 중간 회수 (Midsession Reversal) 과제 수행 시 시간적 단서의 증거

1. 연구 배경 및 문제 제기 (Problem)

• 중간 회수 (MSR) 과제: 이 과제는 동물의 행동 유연성과 의사결정 전략을 연구하는 데 널리 사용됩니다. 80 회 시도로 구성된 세션에서, 전 40 회 (S1 강화) 와 후 40 회 (S2 강화) 사이에 강화 규칙이 예고 없이 전환됩니다.
• 종간 차이: 비둘기나 참새와 같은 조류는 회수 지점 (Trial 41) 주변에서 '기대 오류 (anticipatory errors)'와 '고집 오류 (perseverative errors)'를 많이 보여, **경과 시간 (시간 기반 전략)**에 의존하는 것으로 알려져 있습니다. 반면, 쥐는 일반적으로 최적에 가까운 성능을 보이며 거의 오류가 없어, **직전 시도의 결과 (국소적 단서, Win-Stay/Lose-Shift 전략)**에만 의존한다고 해석되어 왔습니다.
• 연구 목적: 쥐가 국소적 단서 (강화 결과) 만을 사용하는지, 아니면 시간적 정보 (전체 세션의 경과 시간) 도 의사결정에 통합하여 사용하는지 규명하는 것입니다. 특히, 훈련 조건에서는 시간적 단서가 드러나지 않더라도 잠재적으로 시간 인식이 존재할 수 있다는 가설을 검증합니다.

2. 방법론 (Methodology)

• 실험 대상: 14 마리의 수컷 Wistar 쥐.
• 장치: Med-Associates 사의 조작 상자 (Operant conditioning chambers). 두 개의 지렛대 (좌/우) 와 두 가지 자극 (S1: 고정, S2: 점멸).
• 실험 설계:
  • 그룹 구성: 두 그룹으로 나뉘어 서로 다른 **시도 간 간격 (Intertrial Interval, ITI)**으로 훈련받음.
    • Short 그룹: 5 초 ITI.
    • Long 그룹: 10 초 ITI.
  • 훈련 (Baseline): 두 그룹 모두 80 회 시도, 41 회에서 강화 규칙이 전환됨. 두 그룹 모두 학습 속도와 최종 정확도 (약 92-95%) 에서 유의미한 차이가 없었음.
  • 프로브 테스트 (Probe Sessions): 훈련 중에는 ITI 를 변경하여 시간적 리듬을 왜곡하고, 국소적 단서와 시간적 단서가 충돌하는 상황을 만들었음.
    • Test 1: ITI 변경 (Short→10 초, Long→5 초). ITI 중 반응 시 타이머 리셋 (Reset).
    • Test 2: ITI 변경 (동일). ITI 중 반응 시 타이머 리셋 없음 (Non-resetting). 이를 통해 회수 전환 시점의 시간적 변이를 줄임.
    • Test 3: ITI 변경 및 강화 규칙 조정. 두 그룹 모두 시간적 단서와 국소적 단서가 상충되지 않도록 강화 시기를 조정 (예: Short 그룹은 S2 를 일찍 강화, Long 그룹은 S1 을 늦게 강화).
  • 데이터 분석: S1 선택 확률 ($P_{S1}$) 을 시도 번호와 세션 시간 (분 단위) 에 따라 분석. 심리물리학적 파라미터 (PSE: 주관적 동등점, DL: 차이 한계) 를 로지스틱 회귀를 통해 추정.

3. 주요 결과 (Key Results)

• 훈련 단계 (Baseline): 두 그룹 모두 거의 완벽한 성능을 보이며, 기대/고집 오류가 거의 발생하지 않음. 이는 국소적 단서 (Win-Stay/Lose-Shift) 가 우세함을 시사함.
• Test 1 및 Test 2 (ITI 변경 시):
  • Short 그룹 (5 초→10 초): 세션 속도가 느려짐. 결과적으로 쥐들은 회수 41 회보다 훨씬 일찍 S2 로 전환하기 시작함 (기대 오류 증가). 이는 경과 시간이 길어졌기 때문에 '중간 지점'이 일찍 왔다고 판단했음을 의미.
  • Long 그룹 (10 초→5 초): 세션 속도가 빨라짐. 결과적으로 쥐들은 회수 41 회보다 훨씬 늦게 S2 로 전환함 (고집 오류 증가).
  • 시간 기반 분석: 시도 번호에 따른 곡선은 그룹 간에 다르게 보였으나, **경과 시간 (Time)**에 따라 재플롯하면 두 그룹의 전환 시점이 훈련 시 경험한 시간적 중간점 (Short: 약 5 분, Long: 약 9 분) 에 수렴하는 경향을 보임.
  • PSE 분석: 훈련 대비 테스트 시 PSE 값이 그룹 간에 유의미하게 반대 방향으로 이동함 (Short 그룹은 감소, Long 그룹은 증가).
• Test 3 (강화 규칙 정렬):
  • 국소적 단서 (강화 유무) 와 시간적 단서의 충돌을 최소화했을 때, 두 그룹 모두 시간적 단서에 더 민감하게 반응함.
  • 특히 Long 그룹에서 S1 강화가 중단되는 시점 (회수 80) 이후에야 완전한 전환이 일어났으며, 이는 국소적 단서가 시간적 단서를 압도할 수 있음을 보여줌.

4. 주요 기여 및 결론 (Key Contributions & Conclusions)

• 혼합 전략 (Mixed Strategy) 의 증거: 쥐는 국소적 단서 (직전 결과) 만을 사용하는 것이 아니라, 국소적 단서와 전역적 시간 단서를 통합하는 혼합 전략을 사용함.
• 잠재적 시간 인식 (Latent Timing): 훈련 조건 (표준 ITI) 에서는 국소적 단서가 시간 단서를 가려 (overshadowing) 최적의 성능을 보이지만, ITI 가 변경되어 두 단서가 불일치할 때 시간적 인식이 드러남. 즉, 쥐는 시간을 학습하고 있지만, 평소에는 이를 사용하지 않을 뿐임.
• 종간 차이 축소: 기존에 쥐와 조류 (비둘기 등) 의 MSR 수행 패턴이 완전히 다르다고 여겨졌으나, 본 연구는 조건을 조작함으로써 쥐도 시간적 단서를 활용함을 입증하여 두 종 간의 인지적 격차를 줄이는 결과를 제공함.
• 학습 메커니즘: 학습 과정 자체가 사건 간의 시간적 관계에 기반할 수 있음을 시사하며, 시간적 단서가 강화 단서와 충돌할 때 비로소 행동에 영향을 미친다는 역동적 가중치 부여 모델을 지지함.

5. 의의 (Significance)

이 연구는 동물의 의사결정 메커니즘이 단순히 '보상 기반 학습'이나 '시간 기반 학습' 중 하나로 귀결되지 않음을 보여줍니다. 쥐는 상황에 따라 국소적 피드백과 전역적 시간 정보를 유연하게 결합하여 적응적인 행동을 수행합니다. 이는 신경과학적으로 시간 처리와 강화 학습이 어떻게 상호작용하는지 이해하는 데 중요한 통찰을 제공하며, 행동 유연성 연구의 패러다임을 확장합니다.