The heritability of reinforcement learning parameters and their association with anxiety

대규모 일란성 쌍둥이 연구에서 연구자들은 소거 학습 속도가 불안의 중증도를 강력하게 예측하지만, 소거 학습이나 안전 학습 속도는 유전적이지 않으며 불안과 유전적으로 연결되지 않아 안전 학습 매개변수의 유전성이 확인되었음에도 불구하고 이들이 내현상형이 아님을 시사한다고 밝혔습니다.

핵심

당신의 뇌를 끊임없이 새로운 경험을 바탕으로 "위험 지도"를 업데이트하는 매우 정교한 학습 컴퓨터라고 상상해 보세요. 무언가 무서운 일이 발생하면 컴퓨터는 이를 위협으로 표시합니다. 하지만 그 동일한 것이 실제로는 해롭지 않다는 것이 밝혀지면, 컴퓨터는 지도를 업데이트하여 "좋아, 이건 이제 실제로 안전해"라고 말해야 합니다.

이 연구는 925 쌍의 쌍둥이를 포함하는 대규모 가족 재회 조사와 같았습니다. 연구자들은 사람들이 이러한 "위험 지도"를 업데이트하는 방식이 부모로부터 유전되는 것 (눈 색깔처럼) 이며, 이러한 특정 학습 스타일이 불안과 연결되어 있는지 확인하고자 했습니다.

다음은 그들이 발견한 바를 간단한 비유로 나눈 것입니다:

1. 두 가지 학습 유형

이 연구는 뇌가 학습하는 두 가지 구체적인 방식을 살펴보았습니다:

• 안전 학습: 이는 아직 만나 본 적이 없는 개가 실제로 친근하다는 것을 배우는 것과 같습니다. 개를 만나고 그것이 친절하다는 것을 깨닫자마자 지도를 즉시 업데이트합니다.
• 소거 학습: 이는 과거에 두려워했던 개가 이제 친근하다는 것을 배우는 것과 같습니다. 오래된 두려움을 잊어버리고 "위험은 사라졌다"라고 말하기 위해 지도를 업데이트해야 합니다.

2. 불안과의 연결

연구자들은 지도를 업데이트하는 속도와 느끼는 불안감 사이에 강한 연관성이 있음을 발견했습니다.

• 발견: 이전에 무서웠던 상황이 실제로는 안전하다는 것을 깨닫는 데 시간이 더 걸리는 사람들 (느린 소거 학습) 은 불안 수준이 더 높은 경향이 있었습니다.
• 비유: 불안을 꺼지지 않는 자동차 경보라고 생각하세요. 이 연구는 불안이 있는 사람들은 종종 "고장 난" 경보를 가지고 있어, 차가 실제로 안전하고 경보를 멈춰야 한다는 사실을 깨닫는 데 오랜 시간이 걸린다는 것을 발견했습니다.

3. 유전학의 반전 (큰 놀라움)

이제 이야기가 흥미로워집니다. 일반적으로 장애와 연결된 특성을 발견할 때, 우리는 그것을 DNA 에서 찾을 것을 기대합니다. 연구자들은 이러한 학습 속도가 부모로부터 전달되는 "가족적 특성"인지 확인했습니다.

• 안전 학습: 이는 어느 정도 유전성이 있었습니다. 새로운 것에 대해 본능적으로 조심스럽거나 호기심이 많다는 유전적 경향과 같습니다.
• 소거 학습 ("고장 난 경보"): 놀랍게도, 이는 유전성이 아니었습니다. 불안과 연결되어 있었음에도 불구하고, 유전자가 두려움을 얼마나 빨리 잊을 수 있는지를 결정하는 것 같지는 않았습니다.
• 결과: "고장 난 경보" (소거 학습) 가 유전적으로 전달되지 않았기 때문에, 연구자들은 이것이 불안에 대한 유전적 "내인성 표현형" (생물학적 지문) 이 아니라고 결론 내렸습니다. 특정 유전자를 가리키며 "이것이 느린 망각을 유발한다"라고 말할 수 없습니다.

결론

이 연구는 우리 뇌가 두려움을 잊는 방식이 불안의 실제적이고 측정 가능한 부분임을 확인시켰습니다. 그러나 또한 이 특정 어려움이 부모의 DNA 로부터 유전되는 것이 아님을 보여주었습니다.

우리는 이 특정 학습 스타일에 대한 "불안 유전자"를 찾지 못했지만, 이 연구는 이러한 학습 과정을 수학과 컴퓨터 모델을 사용하여 측정할 수 있으며, 이러한 측정치가 더 연구할 가치가 있는 생물학적 기반을 가지고 있음을 증명했습니다. 본질적으로, 그 연결이 우리의 유전 코드에 쓰여 있지 않더라도 우리가 어떻게 배우는지와 우리가 얼마나 불안하게 느끼는지 사이의 명확한 기계적 연결을 발견했습니다.

기술 요약

기술 요약: 강화 학습 매개변수의 유전성과 불안과의 연관성

문제 제기
불안 장애는 안전에 대한 학습 및 이전에 위험했던 자극의 소거 (extinction) 와 관련된 학습 장애를 특징으로 합니다. 이러한 결함은 이 장애의 강력하고 유전적인 특징으로 인식되며 잠재적 내성표형 (endophenotypes) 으로 제안되고 있습니다. 최근 연구들은 이러한 학습 과정을 뒷받침하는 계산적 메커니즘과 불안의 심각성 사이의 연관성을 확립했지만, 이러한 특정 학습 매개변수 자체가 유전적인지 아니면 불안과 유전적 기반을 공유하는지는 여전히 불분명합니다. 본 연구는 이전 발견들을 훨씬 더 큰 표본에서 재현하고, 이러한 계산적 매개변수의 유전성을 엄격하게 검증할 필요성에 대응합니다.

방법론
저자들은 이전 연구들에 비해 표본 크기가 10 배 증가한 925 명의 쌍둥이 표본을 활용하여 사전 등록된 재현 연구를 수행했습니다. 연구는 두 가지 구별된 과정, 즉 안전 학습 (새로운 자극이 안전하다는 것을 학습) 과 소거 학습 (이전에 위험했던 자극이 이제 안전하다는 것을 학습) 에 대한 개별 학습 속도를 추정하기 위해 계산적 모델링을 사용했습니다. 연구자들은 이러한 학습 속도와 불안 심각성 사이의 연관성을 분석했습니다. 또한, 두 학습 매개변수의 유전성 ($h^2$) 을 추정하고 학습 속도와 불안 심각성 사이의 유전적 중첩을 조사했습니다.

주요 결과
이 연구는 재현과 새로운 발견이 혼합된 패턴을 보여주었습니다:

• 불안과의 연관성: 소거 학습 속도는 불안 심각성과 유의하게 연관되었습니다 (재현 추정치 $B = -0.14$, $BF_{01} = 1189.67$), 이는 강력한 인지 - 행동 표지자를 확인한 것입니다. 반면, 안전 학습 속도는 불안 심각성과 유의한 연관성을 보이지 않았습니다.
• 유전성: 안전 학습 속도는 modest한 유전성 ($h^2_{safety} = 0.16$) 을 나타냈습니다. 반면, 소거 학습 속도는 이 표본에서 유전성이 없는 것으로 나타났습니다.
• 유전적 중첩: 소거 학습의 유전성 부재와 안전 학습의 연관성 부재로 인해, 연구는 불안과 두 학습 속도 중 어느 것 사이에도 유전적 중첩을 식별하지 못했습니다.

의의 및 주장
본 논문은 공유된 유전적 구조가 부재하다는 점을 들어 안전 학습 속도나 소거 학습 속도 중 어느 것도 불안의 내성표형으로 기능하지 않는다고 결론 내립니다. 그러나 본 연구는 해당 분야에 두 가지 뚜렷한 기여를 합니다:

1. 불안 심각성의 강력한 표지자를 뒷받침하는 구체적인 인지 - 행동 메커니즘 (소거 학습 속도) 을 확인함으로써, 불안 병리를 이해하는 데 계산적 모델링의 타당성을 강화했습니다.
2. 계산적으로 모델링된 학습 매개변수 (안전 학습) 의 유전성을 입증했습니다. 이는 이러한 특정 매개변수 자체가 불안에 대한 직접적인 유전적 표지자가 되지 않더라도, 특정 학습 과정의 생물학적 기반을 확립하는 데 중요한 단계입니다.