Sequential Sampling as a Computational Principle of Episodic Memory

Unsere Erinnerungen an bestimmte Ereignisse – das, was wir das episodische Gedächtnis nennen – werden oft als mentale Schnappschüsse der Vergangenheit beschrieben. Wir erinnern uns daran, wo wir waren, was geschah und wer dabei war. Doch die Art und Weise, wie wir die Welt erleben, gleicht selten einer Kamera, die ein einzelnes, perfektes Bild einfängt. Stattdessen huschen unsere Augen ständig umher und nehmen die Welt in einer schnellen Folge kleiner, partieller Blicke auf. Wir betrachten ein Gesicht, dann eine Hand, dann ein Objekt im Hintergrund und fügen diese Fragmente zu einer kohärenten Szene zusammen. Jahrzehntelang haben sich Wissenschaftler gefragt, wie das Gehirn diese Abfolge flüchtiger Blicke in eine einzige, stabile Erinnerung verwandelt, die später gespeichert und abgerufen werden kann. Die vorherrschende Ansicht war, dass das Gehirn zuerst ein vollständiges Bild eines Objekts oder einer Szene erstellt und dann dieses fertige Bild speichert. Eine neue Forschungsrichtung deutet jedoch darauf an, dass der Prozess weitaus dynamischer ist: Der Akt des Sehens selbst und die Reihenfolge, in der wir schauen, könnten das sein, was die Erinnerung überhaupt erst aufbaut.

Ein Forschungsteam hat ein Computermodell entwickelt, um diese Idee zu testen, mit dem Vorschlag, dass unser Gedächtnis nicht nur eine Aufnahme dessen ist, was wir gesehen haben, sondern eine Konstruktion, die aus dem Pfad aufgebaut wurde, den unsere Augen nahmen, um es zu sehen. In ihrer Arbeit simulierten sie ein System, das lernt, indem es Bilder Stück für Stück betrachtet, genau wie das menschliche Auge. Sie fanden heraus, dass die Sequenz dieser Blicke mehr tut, als nur Informationen zu sammeln; sie formt die Erinnerung selbst aktiv mit. Wenn das System sich über mehrere Blicke hinweg auf ein einzelnes Objekt konzentrierte, wurde die Erinnerung an dieses spezifische Objekt schärfer und deutlicher. Aber wenn der Blick des Systems zwischen zwei verschiedenen Obkten hin und her sprang, wurde die Erinnerung an die Beziehung zwischen diesen beiden Objekten stärker. Entscheidend war, dass das Modell zeigte, dass die Reihenfolge der Blicke entscheidend war. Wenn dieselbe Menge an visuellen Hinweisen in einer anderen Reihenfolge präsentiert wurde, war die resultierende Erinnerung anders, und die Fähigkeit, die spezifischen Details des ursprünglichen Objekts abzurufen, war beeinträchtigt.

Um zu verstehen, wie dies funktioniert, stellen Sie sich ein Computerprogramm vor, das darauf ausgelegt ist, aus einer Serie von Bildern zu lernen, ähnlich wie ein Schüler, der für eine Prüfung lernt. Die Forscher gaben diesem Programm eine Reihe von Naturfotografien, aber anstatt das ganze Bild auf einmal zu zeigen, fütterten sie es mit einer Sequenz kleiner, lokaler Bildausschnitte, nacheinander. Jeder Ausschnitt repräsentierte eine einzelne „Fixation“, also einen Moment, in dem die Augen verharren, um sich zu fokussieren. Das Programm musste diese Ausschnitte über die Zeit hinweg integrieren und so die mentale Repräsentation des gesamten Bildes aufbauen, während es mehr Hinweise erhielt. Die Forscher entdeckten, dass mit jedem neuen Ausschnitt die Unsicherheit des Programms darüber, was das Bild darstellte, abnahm. Es konnte die allgemeine Kategorie des Objekts, wie etwa „Hund“ oder „Auto“, sehr schnell identifizieren. Aber um die exakte Identität dieses spezifischen Hundes oder Autos zu bestimmen, benötigte es mehr Zeit und mehr Stichproben. Während das Programm diese Blicke anhäufte, wurde seine interne Repräsentation des Bildes organisierter und effizienter, wobei es sich auf die wichtigsten Merkmale konzentrierte und gleichzeitig genau wusste, wo und wann es jedes Stück gesehen hatte.

Die Studie untersuchte auch, wie wir uns Verbindungen zwischen Dingen merken. Im echten Leben schauen wir oft zwischen verwandten Gegenständen hin und her, wie etwa zwischen einer Person und dem Objekt, das sie hält. Die Fors 아니라 Forscher testeten, ob das Timing dieser Augenbewegungen eine Rolle spielte. Sie erstellten Szenarien, in denen das Programm zwei verschiedene Bilder betrachtete, entweder indem es eine Zeit lang auf das erste starrte und dann auf das zweite, oder indem es schnell zwischen ihnen hin und her wechselte. Sie fanden heraus, dass das „Wechselmuster“, bei dem der Blick häufig zwischen den beiden Objekten hin und her sprang, die Verbindung zwischen ihnen im Gedächtnis wesentlich stärkte. Das Programm war besser darin, das zweite Objekt zu rufen, wenn es durch das erste angeregt wurde, falls die beiden in einem abwechselnden, hin und her gehenden Rhythmus abgefragt worden waren. Dies deutet darauf hin, dass der Akt, mit den Augen zwischen verwandten Dingen hin und her zu bewegen, nicht nur ein Nebeneffekt des Sehens ist, sondern ein Mechanismus, der diese Dinge in unserem Geist miteinander verknüpft.

Vielleicht war die beeindruckendste Erkenntnis, dass das Gedächtnis selbst einen Datensatz darüber enthält, wie es aufgebaut wurde. Die Forscher testeten dies, indem sie exakt dieselbe Menge an visuellen Hinweisen nahmen und sie in einer anderen Reihenfolge präsentierten. Obwohl die visuellen Informationen identisch waren, war die resultierende Erinnerung eine andere. Wenn das Programm versuchte, das ursprüngliche Bild unter Verwendung eines Hinweises abzurufen, der der ursprünglichen Reihenfolge der Blicke entsprach, gelang dies erfolgreich. Aber wenn die Reihenfolge vertauscht wurde, wurde die Erinnerung unscharf, und das Programm hatte Schwierigkeiten, das spezifische Bild zu identifizieren, obwohl es immer noch die allgemeine Kategorie erraten konnte. Dies impliziert, dass die „Trajektorie“ unseres Blicks – der spezifische Pfad, den unsere Augen nahmen – in der Erinnerung eingebettet ist. Um eine spezifische Erinnerung abzurufen, muss unser Gehirn möglicherweise Teile dieses ursprünglichen Pfades teilweise wieder nachvollziehen.

Die Forscher simulierten auch, was passiert, wenn wir versuchen, uns an etwas mit nur wenigen Hinweisen zu erinnern, ähnlich wie wenn wir versuchen, ein Gesicht anhand eines unscharfen Fotos zu rekonstruieren. Sie fanden heraus, dass die Erinnerung besser funktionierte, je mehr der Abrufreiz die ursprüngliche Sequenz der Blicke mit der ursprünglichen Abfolge der Aufmerksamkeit teilte. Wenn der Reiz dieselben visuellen Details und dieselbe Reihenfolge der Aufmerksamkeit wie bei der ursprünglichen Kodierung aufwies, konnte das System die spezifische Erinnerung mit hoher Genauigkeit rekonstruieren. Wenn die Reihenfolge falsch war oder die visuellen Details fehlten, versagte die Erinnerung. Dies stützt die Vorstellung, dass der Abruf einer Erinnerung nicht nur aus dem Abgleich eines Bildes besteht, sondern aus dem Abgleich des Prozesses, wie dieses Bild ursprünglich zusammengesetzt wurde.

Schließlich untersuchte das Team auch, wie diese Art von Gedächtnis uns helfen könnte, fehlende Teile einer Erfahrung zu rekonstruieren. Sie trainierten ein separates System, um Bilder basierend auf den durch sequentielle Abtastung erzeugten Gedächtnisrepräsentationen zu generieren. Sie fanden heraus, dass das System die Teile des Bildes, die direkt betrachtet worden waren, mit hoher Präzision rekonstruieren konnte. Die Teile jedoch, die nie betrachtet wurden, wurden lockerer aufgefüllt, wobei das System auf allgemeine Muster zurückgriff, die es aus anderen Bildern gelernt hatte. Dies spiegelt wider, wie das menschliche Gedächtnis funktioniert: Wir erinnern uns an die Details, auf die wir uns konzentriert haben, mit Klarheit, während der Rest der Szene oft von unserem Gehirn unter Verwendung allgemeiner Kenntnisse und Erwartungen ergänzt wird.

Diese Ergebnisse bieten eine neue Art, darüber nachzudenken, wie wir uns erinnern. Anstatt ein vollständiges, statisches Bild eines Ereignisses zu speichern, speichern unsere Gehirne möglicherweise eine dynamische Aufzeichnung dessen, wie wir dieses Ereignis erkundet haben. Die Sequenz unserer Augenbewegungen, die Reihenfolge, in der wir verschiedene Teile der Welt wahrgenommen haben, und der Rhythmus unserer Aufmerksamkeit werden alle Teil der Erinnerung selbst. Dies deutet darauf an, dass die Art und Weise, wie wir die Welt betrachten, nicht nur eine Methode ist, um Daten zu sammeln, sondern ein fundamentaler Bestandteil dessen, wie wir unsere Vergangenheit konstruieren. Durch das Verständnis dieses Prozesses hoffen Wissenschaftler, besser zu verstehen, wie Erinnerungen entstehen, warum manche klarer sind als andere und wie der einfache Akt des Sehens die Geschichten prägt, die wir uns über unser Leben erzählen.