N-Methyl-D-Aspartate receptors control in vivo striatal calcium and the updating of action policy

Technische Samenvatting: N-Methyl-D-Aspartaat Receptoren Controleren In Vivo Striatale Calcium en het Updaten van de Actie-policy

Probleemstelling
Dieren moeten aangeleerde gedragingen uitvoeren en deze aanpassen wanneer omgevingscondities veranderen. Dit proces rust op een interne "actie-policy" (actiebeleid), die zowel uitvoering als updates vereist. Hoewel de dorsomediale striatum (DMS) cruciaal is voor doelgerichte leerprocessen en corticostriatale plasticiteit, en N-Methyl-D-Aspartaat Receptoren (NMDARs) in de DMS bekend staan als noodzakelijk voor de verwerving van nieuwe doelgerichte gedragingen, blijft het onduidelijk of DMS-NMDARs specifiek vereist zijn voor het updaten van een reeds verworven actie-policy versus de loutere uitvoering ervan. Bovendien is de fysiologische substraat die de relatie tussen NMDAR-activiteit en actie-updates legt, niet volledig begrepen, met name met betrekking tot de relatie tussen NMDAR-gestuurde calciumdynamiek en de actiepotentiaal-vuring in vivo.

Methodologie
De studie maakte gebruik van een combinatie van gedragsfarmacologie, fiber fotometrie en in vivo elektrofysiologie bij muizen.

• Proefdieren: Wild-type C57BL6 muizen, evenals Drd1-Cre en A2A-Cre driver-lijnen voor celtype-specifieke opnames.
• Gedragstaken:
  • Fixed Ratio 1 (FR1) Taak: Een stabiele, eerder aangeleerde taak waarbij een specifieke neusstoot consistent een beloning opleverde. Dit testte de uitvoering van een bekende policy.
  • Two-Armed Bandit Taak: Een probabilistische taak waarbij de beloningskansen (80% vs. 20%) voor linker- versus rechterpoorten elke 30 pellets omkeren. Dit vereiste continue updating van de actie-policy.
• Farmacologische Manipulatie: De niet-competitieve NMDAR-antagonist MK-801 werd toegediend via systemische (intraperitoneale) weg of via lokale microinjectie in de DMS. Een competitieve antagonist (AP5) werd ook gebruikt voor lokale infusies.
• Neurale Opnames:
  • Fiber Fotometrie: GCaMP8f werd tot expressie gebracht in DMS-neuronen (bulk, D1-SPNs en D2-SPNs) om populatie-calciumdynamiek te registreren.
  • Elektrofysiologie: Gelijktijdige in vivo opnames van bulk-calcium en actiepotentiaal-bursting werden uitgevoerd met behulp van een custom elektrode-array gecombineerd met een optische vezel.
• Analyse: Gedragsmetrieken omvatten nauwkeurigheid, "win-stay" (het herhalen van een beloonde actie), "lose-shift" (wisselen na een onbeloonde actie) en logistische regressiemodellering van de keuzehistorie. Neurale analyse omvatte het berekenen van transiënte snelheden, signaalvermogen en peri-event histogrammen uitgelijnd op gedragsevenementen.

Belangrijkste Resultaten

1. Dissociatie van Uitvoering en Updating:

   • Het blokkeren van DMS-NMDARs (via intra-DMS MK-801) beïnvloedde de uitvoering van een eerder geleerde FR1-taak niet. Muizen behielden een hoge nauwkeurigheid en "win-stay" gedrag, en verdienden een vergelijkbaar of licht verhoogd aantal pellets vergeleken met saline-controles.
   • Daarentegen, in de two-armed bandit taak, beïnvloedde de DMS-NMDAR-blokkade de updating van de actie-policy significant. MK-801-behandelde muizen vertoonden een ~20% reductie in nauwkeurigheid direct na poort-omkeringen.
   • Gedragsanalyse toonde aan dat MK-801 specifiek het leren van voorheen beloonde acties verstoorde (het verminderen van "win-stay" gedrag met ~15% en het verminderen van de invloed van voorafgaande beloonde trials op de huidige keuze met ~38%). Het beïnvloedde het leren van onbeloonde acties niet ("lose-shift" gedrag bleef intact).

2. NMDARs Controleren Striatale Calciumdynamiek:

   • Blokkeren van NMDARs, zowel systemisch als lokaal, elimineerde bijna volledig de spontane calciumtransiënten in de DMS (>80–90% reductie in zowel D1 als D2 SPNs).
   • Gedragsmatig geëvoceerde calciumsignalen (het stijgen (ramping) voorafgaand aan beloningsretrieval en inhibitie na retrieval) werden eveneens bijna volledig geëlimineerd door MK-801.
   • Lokale microinjecties toonden een dosisafhankelijke reductie in calciumsignaalvermogen en transiënte frequentie, wat bevestigt dat striatale NMDARs noodzakelijk zijn voor het handhaven van deze calciumdynamiek.

3. Dissociatie van Calcium van Actiepotentialen:

   • Gelijktijdige opnames toonden aan dat hoewel MK-801 de calciumtransiënten met >90% verminderde, het de firing bursts slechts met ~53% verminderde.
   • Cruciaal was dat wanneer actiepotentiaal-bursts van vergelijkbare magnitude post-MK-801 werden geïdentificeerd, de bijbehorende calciumstijging significant kleiner was (~60% reductie) vergeleken met de baseline.
   • Dit geeft aan dat NMDAR-gestuurde calciumactiviteit kan worden gedissocieerd van actiepotentiaal-vuring; de reductie in calcium is niet louter een secundair effect van verminderde spiking, maar weerspiegelt een specifieke afname van NMDAR-gemedieerde dendritische calciuminstroom.

Betekenis en Claims
De auteurs claimen dat DMS-NMDARs cruciaal zijn voor de updating van de actie-policy, maar dispensabel voor de uitvoering ervan. Zij stellen voor dat de unieke functie van NMDARs in deze context het aansturen van striatale calciumdynamiek is, die dienen als een fysiologische substraat voor leren en plasticiteit.

Het onderzoek suggereert dat bulk striatale calciumopnames, die vaak worden geïnterpreteerd als een proxy voor algemene neurale activiteit of actiepotentialen, primair de NMDAR-afhankelijke dendritische calciuminstroom reflecteren. Deze instroom kan onafhankelijk van somatische actiepotentiaal-vuring worden gereguleerd. De auteurs postuleren dat deze NMDAR-gemedieerde calciumdynamiek mogelijk fungeert als een "eligibility trace" binnen een drie-factoren leere-regel, die plasticiteitsgebeurtenissen koppelt aan het updaten van actie-policies.

De studie erkent beperkingen, zoals het gebrek aan een directe trial-by-trial link tussen calciumniveaus en policy-updating, de ruimtelijke resolutie-beperkingen van fiber fotometrie met betrekking tot lokale calciumheterogeniteit, en de moeilijkheid om reinforcement learning-modellen te fitten vanwege het beperkte aantal trials in vrij bewegende paradigma's. Ondanks deze kanttekeningen draagt dit werk bij aan het begrip van de in vivo rol van striatale NMDARs in leren en calciumsignalering, en versterkt het de rol van de striatum als een hub voor reinforcement learning.