A two-stage algorithm underlies the transformation from vision to familiarity in the primate brain

당신의 뇌를 "내가 이 사람을 전에 본 적이 있는가?" 혹은 "이것은 새로운 얼굴인가?"를 결정하려고 애쓰는 첨단 보안 시스템이라고 상상해 보세요.

이 논문은 당신의 뇌가 이미지를 '보는' 단순한 행위를 어떻게 '친숙함'이라는 느낌으로 바꾸는지에 대해 탐구합니다. 연구진들은 이 과정이 실시간으로 일어나는 것을 관찰하기 위해 마카크 원숭이를 연구했으며, 특히 뇌의 두 가지 특정 보안 체크포인트인 **하측두 피질(Inferotemporal Cortex, ITC)**과 **해마(Hippocampus, HC)**에 주목했습니다.

연구진이 발견한 이 2단계 과정을 다음과 같은 간단한 비유를 통해 설명합니다.

1단계: "시끄러운" 보안 요원 (ITC)

하측두 피질(ITC)을 정문 앞에 있는 매우 열정적이지만 약간 산만한 보안 요원이라고 생각해보세요.

• 문제점: 이 요원은 "기억에 남을 만한(memorable)" 것들에 대해 매우 흥분합니다. 만약 사진이 이상하거나, 밝거나, 인상적이라면(높은 기억 가능성), 요원은 크게 소리를 지르며 거대한 신호를 보냅니다. 반면 사진이 지루하다면 요원은 조용합니다.
• 혼동: 이 요원은 이미지가 얼마나 '기억에 남는지'에 너무 집중한 나머지, '친숙함'에 대한 신호가 '기억 가능성'에 대한 신호와 뒤섞여 버립니다. 이는 마치 누군가 드럼을 치고 있는 방 안에서 속삭임을 들으려고 애쓰는 것과 같습니다. 뇌는 이미지가 친숙하다는 것을 알지만, 그 신호는 이미지가 얼마나 "시끄러운지" 또는 "흥미로운지"와 뒤섞여 혼란스러운 상태입니다.
• 좋은 소식: 신호가 뒤섞여 있음에도 불구하고, 컴퓨터(또는 선형 디코더)가 자세히 살펴본다면 답을 찾아낼 수 있을 만큼 여전히 체계적으로 정리되어 있습니다.

2단계: "필터" 전문가 (내측 측두엽)

신호가 정문의 첫 번째 요원을 지나 내측 측두엽에 있는 더 전문적인 두 번째 사무실로 이동합니다. 이곳을 노이즈 캔슬링 필터라고 생각해보세요.

• 역할: 이 전문가의 유일한 임무는 첫 번째 요원으로부터 받은 지저지고 복잡한 신호에서 "시끄러움"(기억 가능성)을 제거하는 것입니다.
• 결과: 이들은 이미지가 얼마나 흥미로운지에 대한 흥분을 걸러내고, "이전에 본 적이 있다"라는 순수한 신호만을 분리해냅니다.
• 출력: 이 깨끗한 신호가 최종 목적지인 **해마(HC)**에 도달할 때쯤이면, 그것은 순수하고 고립된 '친숙함'의 메시지가 됩니다. 해마는 이제 이미지가 지루했는지 흥미로웠는지에는 신경 쓰지 않습니다. 그저 "네, 이것은 전에 본 적이 있습니다"라고 알 뿐입니다.

핵심 발견

이 논문에서 가장 흥ло로운 부분은 연구진이 두 번째 단계에서 일어나는 새로운 유형의 계산을 발견했다는 점입니다.

이 연구 이전에도 뇌가 이미지를 인식하기 위해 이를 처리해야 한다는 것은 알고 있었습니다. 하지만 이 논문은 구체적인 2단계 알고리즘이 존재함을 보여줍니다:

1. 첫째: 뇌는 이미지를 보고 그것이 얼마나 기억에 남을 만한지에 따라 강렬하게 반응하며, 이로 인해 "노이즈가 섞인" 친숙함 신호가 생성됩니다.
2. 둘째: 뇌의 특수한 부위가 체 역할을 하여, "기억 가능성"이라는 노이즈를 걸러내고 수정처럼 맑은 "친숙함" 신호만을 남깁니다.

요약하자면, 당신의 뇌는 이미지가 친숙하다는 것을 즉각적으로 "아는" 것이 아닙니다. 먼저 이미지가 얼마나 흥미로운지에 대해 흥분한 다음, 그 흥분과 실제 본 적이 있다는 기억을 분리하기 위해 특정한 정리 작업을 수행하는 것입니다.