Dopamine dips during unrewarded actions promote punishment-resistant reward seeking

Technische Zusammenfassung: Dopamin-Dips bei unbelohnten Aktionen fördern strafungsresistentes Belohnungssuchen

Problemstellung
Strafungsresistentes Belohnungssuchen ist ein definierendes Merkmal von Sucht, tritt jedoch bei Weibchen weniger häufig auf als bei Männchen. Während Sexualhormone, insbesondere Estradiol, die Dopamin-Signalisierung modulieren, bleibt der spezifische neuronale Mechanismus, durch den Estradiol den Einfluss auf die Entwicklung von strafungsresistenterem Verhalten bei Weibchen beeinflusst, unklar. Vorherige Arbeiten etablierten, dass phasische Dopamin-Peaks im dorsomedialen Striatum (DMS) während belohnter Aktionen das Entstehen von strafungsresistenterem Belohnungssuchen vorhersagen. Es war jedoch unbekannt, ob Geschlechtsunterschiede in diesem Verhalten aus der estradiolabhängigen Modulation dieser Peaks oder anderen Komponenten des Dopaminsignals, wie etwa Dips nach unbelohnten Aktionen, resultieren.

Methodik
Die Studie verwendete eine Kombination aus Faser-Photometrie, Optogenetik und Verhaltenspharmakologie in Mäusen, um den kausalen Zusammenhang zwischen DMS-Dopamin-Dynamik und Strafungsresistenz zu untersuchen.

1. Hormonelle Manipulation und Faser-Photometrie:

   • Weibliche Mäuse wurden in drei Gruppen unterteilt: Sham (intakter Zyklus), Ovariektomie mit Placebo (OVX-P, simuliert niedrigen Estradiol-/Diöstrus-Status) und Ovariektomie mit chronischer 17β-Estradiol-Substitution (OVX-E, simuliert hohen Estradiol-/Proöstrus-Status).
   • Alle Gruppen durchliefen ein Random Interval 60 (RI60) Verstärkungstraining, um ein Nosepoke-Verhalten für Zuckerbelohnungen zu erwerben.
   • Faser-Photometrie unter Verwendung des GRAB-gDA3m-Sensors zeichnete DMS-Dopaminsignale während belohnter und unbelohnter Nosepokes auf.
   • Die Strafungsresistenz wurde mittels „Schock-Sonden“ untersucht, bei denen eine Teilmenge der belohnten Nosepokes mit milden Fußschocks kombiniert wurde.

2. Optogenetische kausale Testung:

   • Um die kausale Rolle von Dopamin-Dips zu testen, verwendeten die Autoren DAT-IRES-Cre-Mäuse (sowohl männlich als auch weiblich), in die AAV-eNpHR3.0 (inhibitorischer Opsin) oder ein Kontrollvirus (EYFP) in den medialen Substantia nigra pars compacta (SNc) injiziert wurde, wobei die SNc-zu-DMS-projektierenden Neuronen gezielt adressiert wurden.
   • Faseroptische Kanülen wurden im DMS implantiert.
   • Während des RI60-Trainings wurden unbelohnte Nosepokes mit einem 1-sekündigen kontinuierlichen 625nm Lichtpuls kombiniert, um die Dopamin-Terminals zu inhibieren, wodurch Dopamin-Dips künstlich erzeugt oder verstärkt wurden.
   • Schock-Sonden wurden verabreicht, um die Entwicklung der Strafungsresistenz zu messen.

Wesentliche Ergebnisse

• Verhaltensphänotypen: Während alle Gruppen die RI6 ich-Aufgabe ähnlich erlernten, veränderte der Hormonstatus die Strafungsresistenz signifikant. OVX-E-Weibchen (chronisch hoher Estradiol-Status) wurden zu 100 % als strafungsresistent (PR) kategorisiert, während Sham-Weibchen überwiegend strafungssensitiv (PS) oder verzögert PR waren. OVX-P-Weibchen zeigten eine intermediäre, aber signifikante Verschiebung in Richtung PR im Vergleich zu Sham.
• Dopamin-Signal-Dynamik: Die Faser-Photometrie zeigte keine signifikanten Unterschiede in den Dopamin-Peaks nach belohnten Nosepokes über die Gruppen hinweg. Es zeigten sich jedoch signifikante Unterschiede in den Dopamin-Dips nach unbelohnten Nosepokes. Sowohl die OVX-P- als auch die OVX-E-Gruppen wiesen signifikant größere und länger anhaltende Dopamin-Dips auf als die Sham-Mäuse. Die Magnitude des Dips war bei den OVX-E-Mäusen am ausgeprägtesten.
• Optogenetische Kausalität: Das künstliche Induzieren von Dopamin-Dips mittels NpHR-Inhibition während unbelohnter Nosepokes war ausreichend, um die Entwicklung von strafungsresistentem Belohnungssuchen in sowohl männlichen als auch weiblichen Mäusen zu beschleunigen. NpHR-behandelte Mäuse erhielten während der Sonden-Sessions signifikant mehr Schocks als die Kontrollgruppe.
• Geschlechtsunterschiede in den optogenetischen Effekten: Obwohl der optogenetische Effekt in beiden Geschlechtern signifikant war, war die Effektstärke bei Weibchen größer ($\eta^2_p = 0,38$) als bei Männchen ($\eta^2_p = 0,17$), was auf eine erhöhte Sensitivität gegenüber der Modulation durch Dopamin-Dips bei Weibchen hindeutet.

Wesentliche Beiträge

1. Identifizierung eines neuartigen Mechanismus: Die Studie identifiziert übersteigerte Dopamin-Dips während unbelohnter Aktionen – statt verstärkter Dopamin-Peaks während belohnter Aktionen – als kritischen Treiber für strafungsresistentes Belohnungssuchen.
2. Hormonelle Modulation: Sie zeigt, dass chronische hohe Estradiol-Zustände (die einen nicht-zyklischen hohen Östrogenzustand simulieren) Weibchen spezifisch durch die Amplifikation dieser Dopamin-Dips für Strafungsresistenz prädisponieren.
3. Kausale Validierung: Durch Optogenetik liefern die Autoren kausale Belege dafür, dass das Simulieren dieser Dopamin-Dips ausreicht, um dieses Verhalten in beiden Geschlechtern zu induzieren.
4. Theoretische Verfeinerung: Die Ergebnisse stellen das Standardmodell des Reward Prediction Error (RPE) infrage, welches postuliert, dass Dopamin-Dips die Ausführung einer Aktion unterdrücken sollten. Stattdessen deuten die Daten darauf hin, dass Dopamin-Dips das Lernen über den Wert einer Aktion unterdrücken könnten, was die Persistenz (Policy Learning) trotz negativer Ergebnisse fördert.

Bedeutung und Ansprüche
Das Paper behauptet, dass diese Befunde eine mechanistische Erklärung für die Geschlechtsunterschiede in der Suchtanfälligkeit liefern, indem sie chronische Estradiol-Zustände direkt mit veränderter Dopamin-Signalisierung verknüpfen, die zwanghaftes Verhalten begünstigt. Die Autoren legen nahe, dass die Unterdrückung des Lernens aus unbelohnten Aktionen durch Dopamin-Dips es dem Belohnungssuchen ermöglicht, trotz Bestrafung fortzusetzen.

Aus translationaler Sicht hebt die Studie eine Lücke in der Modellierung der weiblichen Dopaminfunktion hervor und merkt an, dass viele Frauen aufgrund von Verhütungsmitteln oder Menopause nicht-zyklische hormonelle Zustände erleben. Die Autoren schlagen vor, dass das Verständnis darüber, wie diese Zustände die Funktion des Dopamintransporters (DAT) und den daraus resultierenden Ausmaß des Dips regulieren, entscheidend für das Verständnis der Vulnerabilität gegenüber psychiatrischen Störungen ist. Die Arbeit unterstützt eine „Policy-basierte“ Sichtweise der Dopaminfunktion und legt nahe, dass Dopamin eher die Rate des Lernens über Aktionswerte kontrolliert als direkt den Aktionswert selbst zu schätzen.