Dopamine dips during unrewarded actions promote punishment-resistant reward seeking

Resumen Técnico: Los descensos de dopamina durante acciones no recompensadas promueven la búsqueda de recompensa resistente al castigo

Planteamiento del problema
La búsqueda de recompensa resistente al castigo es una característica definitoria de la adicción, aunque es menos prevalente en mujeres que en hombres. Aunque las hormonas sexuales, particularmente el estradiol, son conocidas por modular la señalización de la dopamina, los mecanismos neurales específicos mediante los cuales el estradiol influye en el desarrollo del comportamiento resistente al castigo en las mujeres siguen sin estar claros. Trabajos previos establecieron que los picos fásicos de dopamina en el estriado dorsomedial (DMS) durante acciones recompensadas predicen la emergencia de la búsqueda de recompensa resistente al castigo. Sin embargo, se desconocía si las diferencias de sexo en este comportamiento surgen de la modulación dependiente del estradiol de estos picos u otros componentes de la señal de dopamina, como los descensos tras acciones no recompensadas.

Metodología
El estudio empleó una combinación de fotometría de fibra, optogenética y farmacología conductual en ratones para investigar el vínculo causal entre la dinámica de la dopamina en el DMS y la resistencia al castigo.

1. Manipulación hormonal y fotometría de fibra:

   • Las ratonas hembras se dividieron en tres grupos: Sham (ciclo intacto), Ovariectomizadas con Placebo (OVX-P, que imita niveles bajos de estradiol/diestro) y Ovariectomizadas con reemplazo crónico de 17β-estradiol (OVX-E, que imita niveles altos de estradiol/proestro).
   • Todos los grupos se sometieron a un entrenamiento de refuerzo de Intervalo Aleatorio 60 (RI60) para adquirir un comportamiento de "nosepoke" (toque con la nariz) por recompensas de azúcar.
   • La fotometría de fibra utilizando el sensor GRAB-gDA3m registró las señales de dopamina en el DMS durante los "nosepokes" recompensados y no recompensados.
   • La resistencia al castigo se evaluó mediante "sondas de choque" donde un subconjunto de los "nosepokes" recompensados se emparejó con descargas eléctricas leves en las patas.

2. Prueba causal optogenética:

   • Para probar el papel causal de los descensos de dopamina, los autores utilizaron ratones DAT-IRES-Cre (tanto machos como hembras) inyectados con AAV-eNpHR3.0 (opsina inhibitoria) o un virus de control (EYFP) en la sustancia negra compacta medial (SNc), dirigidos a las neuronas que proyectan al DMS.
   • Se implantaron cánulas de fibra óptica en el DMS.
   • Durante el entrenamiento RI60, los "nosepokes" no recompensados se emparejaron con un pulso de luz continua de 625 nm de 1 segundo para inhibir los terminales de dopamina, creando o exagerando artificialmente los descensos de dopamina.
   • Se administraron sondas de choque para medir el desarrollo de la resistencia al castigo.

Resultados clave

• Fenotipos conductuales: Aunque todos los grupos adquirieron la tarea RI60 de manera similar, el estado hormonal alteró significamente la resistencia al castigo. Las hembras OVX-E (estradiol alto crónico) fueron categorizadas en un 100% como resistentes al castigo (PR), mientras que las hembras Sham fueron predominantemente sensibles al castigo (PS) o con un retraso hacia la PR. Las hembras OVX-P mostraron un cambio intermedio pero significativo hacia la PR en comparación con las Sham.
• Dinámica de la señal de dopamina: La fotometría de fibra no reveló diferencias significativas en los picos de dopamina tras los "nosepokes" recompensados entre los grupos. Sin embargo, surgieron diferencias significativas en los descensos de dopamina tras los "nosepokes" no recompensados. Tanto los grupos OVX-P como los OVX-E exhibieron descensos de dopamina significativamente mayores y más prolongados en comparación con los ratones Sham. La magnitud del descenso en las ratonas OVX-E fue la más pronunciada.
• Causalidad optogenética: Inducir artificialmente los descensos de dopamina mediante la inhibición con NpHR durante los "nosepokes" no recompensados fue suficiente para acelerar el desarrollo de la búsqueda de recompensa resistente al castigo tanto en ratones machos como hembras. Los ratones tratados con NpHR recibieron significativamente más choques durante las sesiones de sonda en comparación con los controles.
• Diferencias de sexo en los efectos optogenéticos: Aunque el efecto optogenético fue significativo en ambos sexos, el tamaño del efecto fue mayor en las hembras ($\eta^2_p = 0.38$) que en los machos ($\eta^2_p = 0.17$), lo que sugiere una mayor sensibilidad a la modulación de los descensos de dopamina en las hembras.

Contribuciones clave

1. Identificación de un nuevo mecanismo: El estudio identifica los descensos exagerados de dopamina durante acciones no recompensadas, en lugar de los picos de dopamina incrementados durante acciones recompensadas, como un motor crítico de la búsqueda de recompensa resistente al castigo.
2. Modulación hormonal: Demuestra que los estados de estradiol alto crónico (que imitan un estado de alto estrógeno no cíclico) predisponen a las hembras a la resistencia al castigo específicamente al amplificar estos descensos de dopamina.
3. Validación causal: Utilizando optogenética, los autores proporcionan evidencia causal de que imitar estos descensos de dopamina es suficiente para inducir comportamiento resistente al castigo en ambos sexos.
4. Refinamiento teórico: Los hallazgos desafían el marco estándar del Error de Predicción de Recompensa (RPE), que postula que los descensos de dopamina deberían suprimir el rendimiento de la acción. En cambio, los datos sugieren que los descensos de dopamina pueden suprimir el aprendizaje sobre el valor de una acción, promoviendo la persistencia (aprendizaje de política) a pesar de los resultados negativos.

Significancia y afirmaciones
El artículo afirma que estos hallazgos ofrecen una explicación mecánica de las diferencias de sexo en la vulnerabilidad a la adicción, vinculando específicamente los estados de estradiol crónico con una señalización de dopamina alterada que fomenta el comportamiento compulsivo. Los autores sugieren que la supresión del aprendizaje de las acciones no recompensadas mediante los descensos de dopamina permite que la búsqueda de recompensa persista frente al castigo.

Desde una perspectiva traslacional, el estudio destaca una brecha en el modelado de la función de la dopamina femenina, señalando que muchas mujeres experimentan estados hormonales no cíclicos debido al uso de anticonceptivos o la menopausia. Los autores proponen que comprender cómo estos estados regulan la función del transportador de dopamina (DAT) y, por ende, la magnitud del descenso, es crucial para entender la vulnerabilidad a los trastornos psiquiátricos. El trabajo respalda los modelos basados en políticas, sugiriendo que la dopamina controla la tasa de aprendizaje sobre los valores de la acción en lugar de estimar directamente el valor de la acción.