Distinct cortical regions support the coding of order across visual and auditory working memory

Deze studie toont aan dat hoewel visuele en auditieve werkgeheugentaken vergelijkbare frontopariëtale netwerken activeren, ze toch onderscheidende neurale patronen vertonen in de inferieure frontale gyrus, het intrapariëtale sulcus en de hippocampus, wat suggereert dat de codering van volgorde in deze modaliteiten op verschillende manieren plaatsvindt.

De kern

Hoe ons brein een rijtje woorden onthoudt: Een reis door het visuele en auditieve landschap

Stel je voor dat je brein een enorm, levendig kantoor is. In dit kantoor zijn er verschillende afdelingen die samenwerken om informatie op te slaan. Soms krijgen we een lijst met woorden te zien (visueel), en soms horen we ze (auditief). De vraag die deze wetenschappers zich stelden, was simpel: Gebruikt ons brein voor beide taken dezelfde 'kantoorruimtes' en dezelfde 'manier van werken', of zijn er verschillen?

Hier is wat ze ontdekten, vertaald in een verhaal.

1. De Grote Ontdekking: Het Kantoor is hetzelfde, maar de inrichting verschilt

Het onderzoek toonde aan dat er een gemeenschappelijk team is dat altijd aan het werk is, of je nu kijkt of luistert. Dit team bestaat uit de 'frontale' en 'pariëtale' gebieden van de hersenen (denk aan de voor- en bovenkant van je hoofd). Deze gebieden zijn als de hoofdcentrale van het kantoor: ze houden de volgorde van de woorden in de gaten, net als een manager die een rijtje taken op een whiteboard bewaakt.

• De overeenkomst: Of je nu een rijtje fruitnamen ziet of hoort, deze hoofdcentrale brandt altijd op. Het is alsof je, of je nu een brief leest of een telefoongesprek voert, altijd dezelfde secretaresse nodig hebt om de volgorde te onthouden.

2. Het Verschil: De 'Mental Whiteboard' vs. De '3D Kaart'

Maar hier wordt het spannend. Hoewel het team hetzelfde is, gebruiken ze verschillende hulpmiddelen om de volgorde te onthouden, afhankelijk van of je kijkt of luistert.

• Bij het zien (Visueel): Het 2D Whiteboard.
  Wanneer je een rijtje woorden ziet, gebruikt je brein een soort 2D whiteboard (een plat bord). Je hersenen leggen de woorden neer op een denkbeeldige lijn van links naar rechts.

  • De analogie: Stel je voor dat je een rijtje appels en peren op een plank legt. Appels links, peren rechts. Je hersenen gebruiken het Intrapariëtale Sulcus (IPS) als die plank. Dit is een simpele, platte manier van ordenen. Omdat het visueel is, voelt het heel natuurlijk om een 'links-naar-rechts' lijn te trekken.

• Bij het horen (Auditief): De Complexe 3D Kaart.
  Wanneer je dezelfde woorden hoort, is er geen fysieke plank. Je kunt ze niet 'zien' liggen. Daarom moet je brein een complexe, driedimensionale kaart gebruiken.

  • De analogie: In plaats van een plat bord, moet je nu een 3D-landkaart tekenen in je hoofd. De volgorde wordt niet alleen links-rechts, maar ook 'dieper' of in een complexer patroon opgeslagen. Hier komt het Hippocampus (een deel van je hersenen dat normaal gesproken bekend staat om het onthouden van routes en locaties) om de hoek kijken. Het fungeert als een GPS die een complexe route door een stad tekent, omdat er geen duidelijke 'plank' is om de woorden op te leggen.

3. De Experimentele Proef

De onderzoekers gaven 49 mensen een taak. Ze moesten rijtjes van vier fruitnamen onthouden.

• Soms zagen ze de namen op een scherm.
• Soms hoorden ze de namen via koptelefoons.

Ze keken vervolgens met een speciale hersenscanner (fMRI) naar welke delen van het brein brandden.

Wat zagen ze?

• Gedrag: Mensen waren sneller in het zien dan in het horen. Bij het zien zagen ze duidelijk een patroon: ze reageerden sneller met hun linkerhand op de eerste woorden en met hun rechterhand op de laatste woorden. Dit bevestigt dat ze een 'links-naar-rechts' lijn in hun hoofd hadden. Bij het horen was dit patroon minder duidelijk (misschien door het lawaai van de scanner, of omdat ze een andere strategie gebruikten).
• Hersenen: De 'hoofdcentrale' (frontaal/pariëtale gebieden) brandde bij beide taken. Maar als je heel precies keek naar de patronen van activiteit, zagen ze dat het IPS (de plank) vooral actief was bij het zien, en het Hippocampus (de 3D-kaart) vooral bij het horen.

4. Waarom is dit belangrijk?

Dit onderzoek laat zien dat ons brein slim is. Het gebruikt een algemene manager (de fronto-pariëtale netwerken) voor bijna alles, maar het past de inrichting aan op basis van hoe de informatie binnenkomt.

• Als je kijkt, gebruik je je ogen om een simpele, platte lijn te trekken (zoals een rijtje auto's in een file).
• Als je luistert, moet je een complexer, ruimtelijk netwerk gebruiken om de volgorde vast te houden (zoals het onthouden van een route door een labyrint).

Kortom: Ons brein heeft niet één vaste manier om rijtjes te onthouden. Het is als een veelzijdige kok: of je nu groenten snijdt (visueel) of kruiden roert (auditief), hij gebruikt dezelfde keuken (het brein), maar hij pakt een ander mes of een andere lepel om het werk het beste te doen.

Technische samenvatting

Probleemstelling en Doel

Het onderzoek richt zich op het mechanisme van ordening in het werkgeheugen (working memory). Hoewel bekend is dat niet-spatiale informatie (zoals woorden) vaak wordt gecodeerd in een mentale ruimtelijke lijn (het SPoARC-effect: Spatial-Positional Association of Response Codes), is het onduidelijk of dit mechanisme modale-generiek is (dezelfde neurale netwerken voor visuele en auditieve stimuli) of modale-specifiek.

Bestaande literatuur suggereert een gedeeld fronto-pariëtale netwerk voor werkgeheugen, maar directe vergelijkingen tussen visuele en auditieve modaliteiten ontbreken. De auteurs willen vaststellen of de neurale patronen die verantwoordelijk zijn voor het coderen van de volgorde van items in een reeks, verschillen afhankelijk van of de informatie visueel of auditief wordt gepresenteerd.

Methodologie

Deelnemers en Design:

• Steekproef: 49 studenten (na exclusie van data door beweging of slecht gehoor: 41 deelnemers in de analyse).
• Design: Een binnen-proefdesign waarbij dezelfde deelnemers zowel een visuele als een auditieve SPoARC-taak uitvoerden.
• Stimuli: Een lijst van tien fruitnamen (bisyllabische woorden).
• Taak:
  • Encoding: Deelnemers onthouden een reeks van 4 items (sequentiële presentatie).
  • Recognition: Deelnemers moeten bepalen of een getoond item deel uitmaakte van de onthouden reeks (Ja/No reactie met linker- of rechterhand).
  • De handgebruik (links/rechts) was gekoppeld aan de respons (Ja/No) en werd gevarieerd om het SPoARC-effect te meten (snellere reacties links voor vroege posities, rechts voor late posities).
• Aantal runs: 8 runs totaal (4 visueel, 4 auditief).

Neuroimaging (fMRI):

• Apparatuur: 3T MRI-scanner (GE Healthcare).
• Preprocessing: Gebruik van SPM12. Correctie voor beweging, slice-timing, normalisatie naar MNI-ruimte.
  • Univariate analyse: Gegladd met een 8mm FWHM kernel.
  • Multivariate analyse (MVPA): Gegladd met een 2mm FWHM kernel (minimale smoothing voor Representational Similarity Analysis).
• Regions of Interest (ROI's): Vooraf gedefinieerde gebieden gebaseerd op eerdere literatuur:
  • Frontale gebieden: Inferior Frontal Gyrus (IFG), Middle Frontal Gyrus (MFG), Superior Frontal Gyrus (SFG).
  • Pariëtale gebieden: Anterior IPS (IPSa), Posterior IPS (IPSp).
  • Hippocampus: Anterior (aHC) en Posterior (pHC).
  • Supplementary Motor Area (SMA).

Analysemethoden:

1. Univariate Analyse: Vergelijking van gemiddelde activatie (BOLD-signaal) tussen modaliteiten en fasen (encoding vs. recognition).
2. Multivariate Analyse (RSA - Representational Similarity Analysis):
   • Berekening van Representational Dissimilarity Matrices (RDMs) voor de neurale patronen binnen ROI's.
   • Vergelijking van deze neurale RDMs met vier theoretische modellen:
     • Modaal-generiek vs. Modaal-specifiek: Zijn patronen gelijk tussen visueel/auditief of verschillend?
     • Positie-effect: Zijn vroege posities (1 & 2) verschillend van late posities (3 & 4), of zijn randposities (1 & 4) verschillend van middenposities?
   • Het favoriete hypothetische model was: Modaal-generiek (gelijke patronen over modaliteiten) met onderscheid tussen vroege en late posities (mental whiteboard hypothese).

Belangrijkste Resultaten

1. Gedragsresultaten:

• SPoARC-effect: Significant aanwezig in de visuele conditie (snellere reacties links voor vroege items, rechts voor late items).
• Auditieve conditie: Geen significant SPoARC-effect gevonden. De auteurs suggereren dat scanner-ruis de auditieve taak moeilijker maakte en spontane reactietijden beïnvloedde, waardoor het effect niet detecteerbaar was.
• Reactietijden: Over het algemeen sneller in de visuele conditie dan in de auditieve conditie, hoewel de nauwkeurigheid gelijk was.

2. Univariate fMRI-resultaten:

• Gedeeld Netwerk: Beide modaliteiten activeerden een vergelijkbaar fronto-parieto-cerebellair netwerk (inclusief DLPFC, IPS, SMA, cerebellum), wat wijst op een gedeelde basis voor ordening.
• Sensory Specificity: Visuele stimuli activeerden sterkere gebieden in de occipitale cortex (visuele verwerking), terwijl auditieve stimuli sterkere activatie toonden in de temporale cortex (Heschl's gyrus) en IFG.
• Conclusie: De "item-informatie" wordt verwerkt in modale-specifieke sensorische gebieden, terwijl de "ordening" een gedeeld netwerk activeert.

3. Multivariate (RSA) Resultaten:
Dit is het meest cruciale deel van de bevindingen:

• Gedifferentieerde Patronen: Hoewel de activiteitsniveaus (univariate) vergelijkbaar waren, toonde de MVPA aan dat de neurale patronen (de verdeling van activiteit over voxels) verschillend waren tussen visuele en auditieve modaliteiten binnen de werkgeheugen-gebieden (IFG, IPS, Hippocampus).
• Positie-gecodeerde Patronen:
  • Visueel: Verschillende patronen voor vroege vs. late posities werden gevonden in de IFG en de Anterior IPS (IPSa).
  • Auditief: Verschillende patronen voor vroege vs. late posities werden gevonden in de IFG en de Posterior Hippocampus (pHC).
• SMA: Toonde sterke onderscheidende patronen tussen begin en einde van een reeks, maar dit was voornamelijk modaal-generiek.

Kernbijdragen en Interpretatie

De studie levert drie belangrijke bijdragen:

1. Modale-specifieke neurale patronen: Ondanks een gedeeld macroscopisch netwerk, zijn de microscopische neurale representaties van volgorde afhankelijk van de input-modaliteit.
2. Rol van de IPS vs. Hippocampus: De studie onderscheidt twee mechanismen voor ordening gebaseerd op de presentatiemodaliteit:
   • Visueel: Ordening wordt voornamelijk ondersteund door de Intrapariëtale Sulcus (IPS). Dit wordt geïnterpreteerd als het gebruik van een laag-dimensionale, egocentrische ruimtelijke code (bijv. een mentale horizontale lijn van links naar rechts), wat consistent is met het "mental whiteboard"-concept.
   • Auditief: Ordening wordt voornamelijk ondersteund door de Hippocampus. Dit wordt geïnterpreteerd als het gebruik van hoog-dimensionale, allocentrische ruimtelijke of temporele representaties. Omdat auditieve stimuli geen fysieke ruimtelijke lay-out hebben, zouden deelnemers meer vertrouwen op complexere, niet-lineaire ruimtelijke kaarten of temporele codes.
3. Verklaring voor het ontbrekende SPoARC-effect: Het ontbreken van het SPoARC-effect in de auditieve conditie wordt verklaard door het feit dat auditieve ordening minder afhankelijk is van een strikte "links-rechts" ruimtelijke as (laag-dimensionaal) en meer van complexere representaties (hoog-dimensionaal), waardoor de link met handreacties (links/rechts) zwakker is.

Significantie

De bevindingen hebben belangrijke implicaties voor de theorie van werkgeheugen en ruimtelijke cognitie:

• Uitdaging aan de "Mental Whiteboard" hypothese: De hypothese dat ordening altijd via een lineaire ruimtelijke as verloopt, wordt nu genuanceerd. De aard van de ruimtelijke representatie hangt af van de zintuiglijke input.
• Integratie van ruimtelijke en temporele cognitie: De studie ondersteunt het idee dat de hippocampus niet alleen voor langetermijngeheugen is, maar ook cruciaal is voor het coderen van volgorde in werkgeheugen, vooral wanneer de stimuli geen inherente ruimtelijke structuur hebben (zoals geluid).
• Neurale plasticiteit: Het brein past de representatiestrategie aan aan de modaliteit: visuele informatie wordt "gespatialiseerd" in de IPS (laag-dimensionaal), terwijl auditieve informatie wordt "gespatialiseerd" of "getemporaliseerd" in de hippocampus (hoog-dimensionaal).

Samenvattend suggereert dit onderzoek dat hoewel het werkgeheugen een gedeeld netwerk gebruikt voor het beheer van volgorde, de coderingsstrategieën en de specifieke neurale substraten (IPS vs. Hippocampus) sterk afhankelijk zijn van of de informatie visueel of auditief wordt gepresenteerd.