Sequential Sampling as a Computational Principle of Episodic Memory

Onze herinneringen aan specifieke gebeurtenissen—wat we episodisch geheugen noemen—worden vaak beschreven als mentale snapshots van het verleden. We herinneren ons waar we waren, wat er gebeurde en wie er aanwezig was. Onze ervaring van de wereld is echter zelden als een camera die één enkel, perfect beeld vastlegt. In plaats daarvan schieten onze ogen voortdurend heen en weer, waarbij ze de wereld opvangen in een snelle reeks kleine, gedeeltelijke blikken. We kijken naar een gezicht, dan naar een hand, en dan naar een object op de achtergrond, waarbij we deze fragmenten samenvoegen tot een samenhangende scène. Decennialang hebben wetenschappers zich afgevraagd hoe het brein deze opeenvolging van vluchtige blikken omzet in een enkele, stabiele herinnering die later kan worden opgeslagen en opgehaald. De heersende opvatting was dat het brein eerst een compleet beeld van een object of scène bouwt en vervolgens dat voltooide beeld opslaat. Maar een nieuwe lijn van onderzoek suggereert dat het proces veel dynamischer is: de handeling van het kijken zelf, en de volgorde waarin we kijken, zou wel eens de basis kunnen zijn van de vorming van de herinnering.

Een team van onderzoekers heeft een computermodel ontwikkeld om dit idee te testen, met de stelling dat ons geheugen niet alleen een registratie is van wat we zagen, maar een constructie die is gebouwd vanuit het pad dat onze ogen namen om het te zien. In hun werk simuleerden zij een systeem dat leert door naar afbeeldingen te kijken, één klein stukje tegelijk, precies zoals het menselijk oog dat doet. Ze ontdekten dat de sequentie van deze blikken meer doet dan alleen informatie verzamelen; het vormt de herinnering zelf actief. Wanneer het systeem zich gedurende meerdere opeenvolgende blikken op een enkel object concentreerde, werd de herinnering aan dat specifieke object scherper en duidelijker. Maar wanneer de blik van het systeem heen en weer sprong tussen twee verschillende objecten, werd de herinnering aan de relatie tussen die twee objecten sterker. Cruciaal was dat het model aantoonde dat de volgorde van de blikken ertoe deed. Als dezelfde set visuele aanwijzingen in een andere volgorde werd gepresenteerd, was de resulterende herinnering anders, en werd het vermogen om de specifieke details van het oorspronkelijke object op te halen aangetast.

Om te begrijpen hoe dit werkt, stel je een computerprogramma voor dat leert van een reeks afbeeldingen, vergelijkbaar met een student die studeert voor een examen. De onderzoekers gaven dit programma een reeks natuurlijke foto's, maar in plaats van de hele afbeelding in één keer te tonen, voerden ze een sequentie van kleine, lokale fragmenten van de afbeelding in, één na de andere. Elk fragment vertegenwoordigde een enkele "fixatie", of een moment waarop de ogen stoppen om te focussen. Het programma moest deze fragmenten in de loop van de tijd integreren, waarbij het een mentale representatie van de gehele afbeelding opbouwde naarmate het meer aanwijzingen ontving. De onderzoekers ontdekten dat met elk nieuw fragment de onzekerheid van het programma over wat de afbeelding was, afnam. Het kon de algemene categorie van het object, zoals een "hond" of een "auto", zeer snel identificeren. Maar om de exacte identiteit van die specifieke hond of auto te bepalen, had het meer tijd en meer monsters nodig. Naarmate het programma meer blikken verzamelde, werd de interne representatie van de afbeelding organisatorischer en efficiënter, waarbij de belangrijkste kenmerken werden benadrukt terwijl nog steeds precies werd onthouden waar en wanneer elk onderdeel was gezien.

De studie onderzocht ook hoe we verbindingen tussen dingen onthouden. In het echte leven kijken we vaak heen en weer tussen gerelateerde zaken, zoals een persoon en het object dat die persoon vasthoudt. De onderzoekers testten of de timing van deze oogbewegingen uitmaakte. Ze creëerden scenario's waarin het programma naar twee verschillende afbeeldingen keek, ofwel door een tijdje naar de eerste te staren en dan naar de tweede, ofwel door snel heen en weer te schakelen tussen beide. Ze ontdekten dat het "schakelpatroon", waarbij de blik frequent tussen de twee items bewoog, de verbinding tussen hen in het geheugen veel sterker maakte. Het programma was beter in staat om het tweede item te herinneren wanneer het door het eerste werd geprikkeld, indien de twee in een afwisselend, heen en weer gaand ritme waren gesampled. Dit suggereert dat de handeling van het bewegen van onze ogen tussen gerelateerde zaken niet slechts een bijproduct is van het kijken, maar een mechanisme dat die zaken in onze geest aan elkaar bindt.

Misschien wel de meest opmerkelijke bevinding was dat de herinnering zelf een verslag bevat van hoe deze is opgebouwd. De onderzoekers testten dit door exact dezelfde set visuele aanwijzingen in een andere volgorde te presenteren. Hoewel de visuele informatie identiek was, was de resulterende herinnering anders. Wanneer het programma probeerde de oorspronkelijke afbeelding op te halen met een aanwijzing die overeenkwam met de oorspronkelijke volgorde van de blikken, slaagde het daarin. Maar wanneer de volgorde werd door elkaar gehusseld, werd de herinnering wazig en had het programma moeite om de specifieke afbeelding te identificeren, ook al kon het nog steeds de algemene categorie raden. Dit impliceert dat de "trajectorie" van onze blik—het specifieke pad dat onze ogen namen—is ingebed in de herinnering. Om een specifieke herinnering op te halen, moet ons brein mogelijk gedeeltelijk dat oorspronkelijke pad opnieuw volgen.

De onderzoekers simuleerden ook wat er gebeurt wanneer we proberen iets te herinneren met slechts enkele aanwijzingen, vergelijkbaar met wanneer we proberen een gezicht te herinneren aan de hand van een wazige foto. Ze ontdekten dat hoe beter de ophaal-aanwijzing (retrieval cue) overeenkwam met de oorspronkelijke sequentie van blikken, hoe beter het geheugen functioneerde. Als de aanwijzing dezelfde visuele details en dezelfde volgorde van aandacht deelde als de oorspronkelijke codering, kon het systeem de specifieke herinnering met hoge nauwkeurigheid reconstrueren. Als de volgorde fout was, of als de visuele details ontbraken, faalde de herinnering. Dit ondersteunt het idee dat het ophalen van herinneringen niet alleen gaat over het matchen van een plaatje, maar over het matchen van het proces van hoe die afbeelding oorspronkelijk werd samengesteld.

Ten slotte onderzocht het team hoe dit type geheugen ons kan helpen bij het reconstrueren van ontbrekende delen van een ervaring. Ze trainden een apart systeem om afbeeldingen te genereren op basis van de geheugenrepresentaties die door de sequentiële sampling waren gecreëerd. Ze ontdekten dat het systeem de delen van de afbeelding die direct bekeken waren, met hoge precisie kon reconstrueren. Echter, de delen die nooit bekeken waren, werden losser ingevuld, waarbij gebruik werd gemaakt van algemene patronen die het systeem uit andere afbeeldingen had geleerd. Dit weerspiegelt hoe het menselijk geheugen werkt: we herinneren de details waarop we ons focusten met helderheid, terwijl de rest van de scène vaak door ons brein wordt ingevuld met behulp van algemene kennis en verwachtingen.

Deze bevindingen bieden een nieuwe manier om over hoe wij ons herinneren na te denken. In plaats van een volledige, statische afbeelding van een gebeurtenis op te slaan, slaan onze hersenen mogelijk een dynamisch verslag op van hoe we die gebeurtenis hebben verkend. De sequentie van onze oogbewegingen, de volgorde waarin we aandacht besteedden aan verschillende delen van de wereld, en het ritme van onze aandacht worden allemaal onderdeel van de herinnering zelf. Dit suggereert dat de manier waarop we naar de wereld kijken niet alleen een manier is om gegevens te verzamelen, maar een fundamenteel onderdeel van hoe we ons verleden construeren. Door dit proces te begrijpen, hopen wetenschappers beter te begrijpen hoe herinneringen worden gevormd, waarom sommige helderder zijn dan andere, en hoe de eenvoudige handeling van het kijken de verhalen vormt die we onszelf over ons leven vertellen.