Sequential Sampling as a Computational Principle of Episodic Memory

特定の出来事に関する私たちの記憶――エピソード記憶と呼ばれるもの――は、しばしば過去のメンタル・スナップショット（心の写真）として表現されます。私たちは、自分がどこにいて、何が起こり、誰がそこにいたのかを思い出します。しかし、私たちの世界の経験の仕方は、カメラが単一の完璧な画像を捉えるようなものとは、めったに似通いません。むしろ、私たちの目は絶えずあちこちを素早く動き回り、小さく断片的な、部分的な視覚情報を連続的に取り込んでいます。顔を見て、次に手を見て、それから背景の物体を見る。このようにして、これらの断片を繋ぎ合わせ、一つの整合性のあるシーンを作り上げているのです。数十年にわたり、科学者たちは、脳がいかにしてこの一連の束の間の注視を、後に保存・想起できる単一の安定した記憶へと変えているのかという疑問を抱いてきました。支配的な見解は、脳がまず対象物やシーンの完全な絵を構築し、その完成した絵を保存するというものでした。しかし、新しい研究の流れは、そのプロセスがはるかにダイナミックであることを示唆しています。すなわち、見ること自体、そしてどの順番で見るかというプロセスこそが、記憶を構築している可能性があるのです。

ある研究チームは、このアイデアを検証するためにコンピュータモデルを開発し、私たちの記憶は単に見たものの記録ではなく、それを見るために目が辿った経路から構築されたものであるという説を提唱しました。彼らの研究では、人間の目のように、画像を一度に一つずつ小さな断片として学習するシステムをシミュレートしました。その結果、注視のシーケンス（順序）は単に情報を集めるだけでなく、記憶そのものを能動的に形作っていることが分かりました。システムが特定の物体に数回連続して焦点を当てると、その特定の物体の記憶はより鮮明で独特なものになりました。しかし、システムの視線が二つの異なる物体の間を何度も行き来すると、それら二つの物体の間の関係性の記憶がより強固になりました。決定的なことに、モデルは注視の順番が重要であることを示しました。もし同じ一連の視覚的手がかりが異なる順番で提示された場合、結果として得られる記憶は異なり、元の物体の特定の細部を想起する能力は損なわれました。

これがどのように機能するかを理解するために、一連の画像から学習するコンピュータ・プログラムを想像してみてください。それはまるで、テスト勉強をしている学生のようなものです。研究者たちはこのプログラムに自然な写真のセットを与えましたが、画像全体を一度に見せるのではなく、一連の小さな局所的なパッチ（断片）を、一つずつ順番に与えました。各パッチは、目が焦点を合わせる瞬間である「注視」を表しています。プログラムは、より多くの手がかりを受け取るにつれて、これらのパッチを時間の経過とともに統合し、画像全体の精神的な表現を構築していかなければなりませんでした。研究者たちは、新しいパッチを受け取るたびに、その画像が何であるかについてのプログラムの不確実性が減少することを発見しました。プログラムは、「犬」や「車」といった物体の一般的なカテゴリーを非常に素早く特定することができました。しかし、その特定の犬や車が具体的に何であるかを特定するには、より多くの時間とより多くのサンプルを必要としました。プログラムがこれらの断片を蓄積していくにつれ、その内部表現はより組織化され効率的になり、各パーツをいつ、どこで見たかを正確に記憶しながらも、最も重要な特徴に焦点を当てるようになりました。

この研究では、物事の間のつながりをどのように記憶するかについても調査されました。実生活では、例えば人物とその人が持っている物体のように、関連するアイテムの間を何度も視線が往復することがよくあります。研究者たちは、これらの眼球運動のタイミングが重要かどうかをテストしました。彼らは、プログラムに二つの異なる画像を、一つをしばらく見つめてから次を見る方法、あるいは二つの間を急速に行き来する方法のいずれかで提示するシナリオを作成しました。その結果、「切り替え」パターン、つまり視線が二つのアイテムの間を頻繁に移動する場合に、それらの間の結びつきが記憶の中でより強くなることが分かりました。二つのアイテムが交互のリズムでサンプリングされた場合、プログラムは一方から他方への手がかりによって、もう一方を思い出す能力が高まりました。これは、関連するもの同士の間で目を動かす行為が、単に物を見ている際のおまけではなく、それらを心の中で結びつけるメカニズムであることを示唆しています。

おそらく最も衝撃的な発見は、記憶そのものの中に、それがどのように構築されたかの記録が含まれているということです。研究者たちは、全く同じ視覚的手がかりを用いながら、それらを異なる順番で提示することでこれをテストしました。視覚的な情報は同一であったにもかかわらず、得られた記憶は異なるものでした。プログラムが、元の注視の順番に一致する手がかりを用いて元の画像を想起しようとしたとき、それは成功しました。しかし、順番が入れ替わっていた場合、記憶は曖せつになり、プログラムは特定の画像を特定することに苦労しました。たとえ一般的なカテゴリーを推測することはできてもです。これは、「注視の軌跡」――視線が辿った特定の経路――が記憶に埋め込まれていることを示唆しています。特定の記憶を呼び出すために、私たちの脳は、その元の経路を部分的に辿り直す必要があるのかもしれません。

研究者たちはまた、ぼやけた写真から何かを思い出そうとする時のように、わずかな手がかりだけで何かを思い出そうとする状況をシミュレートしました。彼らは、想起のための手がかりが元の注視のシーケンスと一致すればするほど、記憶がうまく機能することを発見しました。もし手がかりが、元の符号化時と同じ視覚的詳細と注意の順番を共有していれば、システムは特定の記憶を高精度で再構成することができました。もし順番が間違っていたり、視覚的詳細が欠けていたりすれば、記憶は失敗しました。これは、記憶の想起が単に画像と照合することではなく、その画像が元々どのように組み立てられたかというプロセスと照合することであることを支持しています。

最後に、チームはこのようなタイプの記憶が、経験の欠落した部分を再構成する際にどのように役立つかを探りました。彼らは、逐次的なサンプリングによって作成された記憶表現に基づいて画像を生成する別のシステムを訓練しました。その結果、システムは直接注視された画像の部分を高い精度で再構成できることが分かりました。しかし、一度も注視されなかった部分は、システムが他の画像から学んだ一般的なパターンに基づき、より緩やかに補完されていました。これは人間の記憶の仕組みを反映しています。私たちは、焦点を当てた詳細は鮮明に覚えている一方で、その他のシーンについては、一般的な知識や期待によって脳が補っているのです。

これらの知見は、私たちがどのように記憶するかについて、新しい考え方を提示しています。私たちの脳は、出来事の完全で静的な画像を保存するのではなく、その出来事をどのように探索したかというダイナミックな記録を保存しているのかもしれません。視線のシーケンス、どの部分に注意を向けるかという順番、そして注意のリズムのすべてが、記憶の一部となるのです。これは、世界を見ることが単にデータを収集するための手段ではなく、私たちの過去を構築するための根本的なプロセスであることを示唆しています。このプロセスを理解することで、科学者たちは、記憶がどのように形成されるのか、なぜある記憶は他よりも鮮明なのか、そして、見るという単純な行為がいかにして自分たちの人生についての物語を形作るのかを、より深く理解したいと考えています。