Explore-exploit instability reveals computational decision-making heterogeneity in early psychosis

Este estudo demonstra que a heterogeneidade cognitiva na psicose precoce pode ser explicada por subtipos computacionais distintos, caracterizados por sensibilidade elevada à incerteza e ruído decisório que levam a uma transição prematura da exploração à exploração, sugerindo potenciais alvos para intervenções personalizadas.

O essencial

Título: O Dilema do "Jogo do Caos" e os Cérebros que Pensam Diferente na Psicose Inicial

Imagine que você está num restaurante com três pratos misteriosos no menu. Você não sabe exatamente qual é o melhor, mas pode pedir e provar.

• Explorar: Pedir um prato novo para ver se é bom.
• Explorar (no sentido de aproveitar): Pedir o prato que você já sabe que é delicioso e continuar pedindo ele.

O grande desafio da vida é saber quando parar de experimentar coisas novas e começar a aproveitar o que já funciona. Isso é chamado de trade-off entre exploração e exploração.

Este estudo científico olhou para como pessoas com psicose inicial (o começo de condições como esquizofrenia ou transtorno bipolar) lidam com esse dilema, comparando-as com pessoas que não têm essa condição.

Aqui está a explicação simplificada, usando analogias do dia a dia:

1. O Problema: "Pular de Galho em Galho"

Os pesquisadores descobriram que, embora as pessoas com psicose inicial conseguissem ganhar pontos no jogo (ou seja, escolher pratos bons) tanto quanto as pessoas sem a condição, elas tinham um hábito estranho: elas trocavam de prato muito mais rápido.

Mesmo quando o prato estava ótimo, elas largavam e tentavam outro. Não era porque não sabiam qual era o bom (o aprendizado estava ok), mas porque não conseguiam ficar sentadas na mesa com o prato bom por muito tempo. Era como se elas tivessem um medo constante de que o prato atual fosse ficar ruim a qualquer segundo.

2. A Investigação: Por que elas trocam tanto?

Os cientistas usaram "lentes matemáticas" (modelos computacionais) para ver o que estava acontecendo dentro da cabeça delas. Eles encontraram dois "vilões" principais que faziam essas pessoas trocarem de estratégia:

• O "Detector de Perigo" Superativo (Sensibilidade à Incerteza):
  Imagine que você tem um detector de fumaça. Na maioria das pessoas, ele só toca se houver fumaça real. Nas pessoas com alta sensibilidade à incerteza, o detector é tão sensível que toca mesmo se for apenas um pouco de vapor de uma panela.

  • Na prática: Elas acham que o ambiente é muito instável e perigoso. Mesmo que o prato esteja bom, o cérebro delas grita: "Isso pode mudar a qualquer segundo! Troque de prato agora!" Elas trocam de estratégia porque acham que o mundo é mais caótico do que realmente é.

• O "Ruído" no Sistema (Decisão Barulhenta):
  Imagine que você está dirigindo um carro. Às vezes, o volante treme sozinho, sem você querer. Isso é o "ruído de decisão".

  • Na prática: Algumas pessoas com psicose têm mais "ruído" no cérebro. Elas trocam de prato não porque acham que o atual é ruim, mas porque o sistema de decisão delas é um pouco bagunçado e aleatório. É como se o botão de "trocar" fosse apertado por um curto-circuito.

3. A Grande Descoberta: Não é uma doença única, são "Tipos" de Cérebro

A parte mais interessante é que nem todas as pessoas com psicose são iguais. Os pesquisadores usaram um algoritmo (um tipo de "organizador de dados") para agrupar os participantes e descobriram 3 subtipos de cérebros, como se fossem três tipos de carros diferentes:

1. O Carro "Padrão" (Subtipo Normativo):

   • Como é: Funciona quase como um carro normal. Aprende rápido, não troca de direção à toa.
   • Quem tem: Muitas pessoas com transtorno bipolar com sintomas psicóticos se encaixam aqui. Elas têm sintomas de humor (como mania), mas a parte de tomar decisões é sólida.

2. O Carro "Paranoico" (Subtipo Sensível à Incerteza):

   • Como é: O motor é bom, mas o sistema de alarme é defeituoso. Ele acha que todo buraco na estrada é um abismo.
   • Quem tem: Pessoas que trocam de estratégia porque acham que o mundo é instável. Elas têm mais histórico de internações psiquiátricas (talvez porque a sensação de instabilidade seja muito forte). Elas não têm problemas para aprender o que é bom, só têm medo de continuar no que é bom.

3. O Carro "Barulhento" (Subtipo de Alto Ruído):

   • Como é: O motor é forte, mas o volante treme muito. É difícil manter a direção.
   • Quem tem: Pessoas com sintomas negativos (falta de motivação, isolamento) e dificuldade em aprender com recompensas. Elas trocam de prato porque o sistema de decisão delas é muito "barulhento" e aleatório.

4. Por que isso importa? (O Futuro da Medicina)

Antes, os médicos tratavam a "psicose" como se fosse uma única coisa. Se você tinha alucinações ou delírios, recebia o mesmo remédio.

Este estudo diz: "Espere! O cérebro de cada um está quebrado de um jeito diferente."

• Se o problema é o alarme superativo (sensibilidade à incerteza), o tratamento pode focar em acalmar essa percepção de perigo.
• Se o problema é o volante tremendo (ruído de decisão), o tratamento pode focar em estabilizar a química cerebral para reduzir a aleatoriedade.

Resumo em uma frase

Pessoas com psicose inicial não são "burras" ou "desatentas"; elas têm estratégias de decisão diferentes. Algumas acham o mundo muito instável e trocam de ideia rápido demais, enquanto outras têm um sistema de decisão mais "barulhento". Entender qual é o "tipo" de cérebro de cada paciente pode ajudar a criar tratamentos personalizados, como uma chave feita sob medida para cada fechadura.

Resumo técnico

Título: Instabilidade na Exploração-Exploração Revela Heterogeneidade Computacional na Tomada de Decisão na Psicose Precoce

1. Problema e Contexto

As doenças do espectro psicótico (como a esquizofrenia) são caracterizadas por uma heterogeneidade clínica e neurofisiológica significativa, o que dificulta a compreensão da fisiopatologia subjacente e o desenvolvimento de tratamentos individualizados. Um dos déficits cognitivos centrais é a capacidade de tomada de decisão orientada a objetivos, especificamente o equilíbrio entre exploração (tentar novas opções para obter informações) e exploração (aproveitar opções conhecidas e recompensadoras).

Estudos anteriores indicaram que pacientes com psicose exibem uma troca de escolhas excessiva (choice switching), mas as causas computacionais exatas permanecem debatidas: seria devido a déficits na aprendizagem de recompensas, ruído na decisão ou sensibilidade alterada à incerteza? A literatura carece de uma compreensão de como esses indivíduos se adaptam sob condições de incerteza dinâmica e se existem subtipos computacionais distintos dentro do espectro psicótico.

2. Metodologia

O estudo utilizou uma abordagem de Psiquiatria Computacional para modelar o comportamento de decisão em nível de tentativa (trial-by-trial).

• Participantes: 75 indivíduos com Psicose Precoce (EP) e 68 controles neurotípicos.
• Tarefa Comportamental: Tarefa de Restless Bandit de três braços.
  • Os participantes escolheram entre três opções (patches de Gabor) com probabilidades de recompensa ocultas que variavam aleatoriamente ao longo do tempo (10% de chance de mudar a probabilidade a cada tentativa).
  • O objetivo era maximizar pontos, exigindo um equilíbrio dinâmico entre explorar novas opções e explorar a melhor opção atual.
  • A tarefa foi realizada em duas sessões (aproximadamente 3 semanas de intervalo) para avaliar a confiabilidade teste-reteste.
• Modelagem Computacional:
  • Modelo de Markov Oculto (HMM): Utilizado para inferir estados latentes de "exploração" e "exploração" a partir das sequências de escolhas dos participantes.
  • Modelos de Aprendizagem: Comparação entre modelos de Aprendizagem por Reforço (RL) tradicionais (com taxas de aprendizado fixas) e um Modelo de Aprendizista Bayesiano (Filtro de Kalman). O modelo Bayesiano estima tanto o valor esperado quanto a incerteza, adaptando a taxa de aprendizado com base na incerteza percebida.
  • Parâmetros Chave: Sensibilidade à incerteza ($\phi$), ruído de decisão (inverso da temperatura, $\beta^{-1}$) e perseveração ($\omega$).
• Análise de Subtipos: Agrupamento hierárquico (Ward's linkage) baseado em parâmetros computacionais e medidas cognitivas padrão (memória verbal, função executiva, velocidade de processamento) para identificar subtipos latentes independentes do diagnóstico.

3. Contribuições Principais

• Mecanismo Específico de Instabilidade: Demonstrou que o excesso de troca de escolhas na EP não é causado por uma incapacidade de aprender quais opções são recompensadoras, mas sim por uma instabilidade na estratégia de exploração: os pacientes tendem a abandonar uma opção favorável prematuramente, transitando para a exploração antes do tempo.
• Identificação de Mecanismos Independentes: Isolou dois contribuintes computacionais independentes para a superexploração: sensibilidade elevada à incerteza e ruído de decisão aumentado.
• Subtipagem Computacional: Revelou a existência de três subtipos computacionais distintos (Normativo, Sensível à Incerteza e Alto Ruído de Decisão) que possuem perfis cognitivos e sintomáticos únicos, superando a classificação diagnóstica tradicional.
• Validação de Modelo: Evidenciou que modelos baseados em inferência Bayesiana (que consideram a incerteza) descrevem melhor o comportamento da EP do que modelos de RL clássicos.

4. Resultados

• Desempenho Comportamental: Ambos os grupos obtiveram recompensas acima do acaso, sem diferença significativa no total de pontos. No entanto, o grupo EP fez menos escolhas ótimas e exibiu taxas significativamente maiores de troca de escolhas (switching), mesmo após receber recompensas (win-switch).
• Dinâmica de Estados (HMM): O grupo EP passou mais tempo no estado de exploração e tinha uma probabilidade maior de transição do estado de exploração para a exploração (abandonar a boa opção), especialmente após recompensas. A transição de volta para a exploração (aprendizagem) estava intacta.
• Parâmetros Computacionais:
  • Sensibilidade à Incerteza ($\phi$): Significativamente maior no grupo EP. Isso indica que os pacientes reagem mais fortemente à incerteza estimada, levando a uma exploração excessiva para reduzir a ambiguidade.
  • Ruído de Decisão ($\beta^{-1}$): Tendência a ser maior no grupo EP, indicando escolhas mais estocásticas e menos consistentes com o valor aprendido.
  • Perseveração: Não houve diferença entre os grupos.
• Subtipos Identificados:
  1. Subtipo 1 (Normativo): Baixa sensibilidade à incerteza, baixo ruído, cognição forte. Predominante em controles e em pacientes com transtorno bipolar com características psicóticas.
  2. Subtipo 2 (Sensível à Incerteza): Alta sensibilidade à incerteza, processamento lento, memória pobre, mas função executiva intacta. Associado a maior taxa de hospitalizações psiquiátricas.
  3. Subtipo 3 (Alto Ruído de Decisão): Alto ruído, déficits cognitivos generalizados e déficits na aprendizagem de recompensas (dificuldade em sustentar a exploração). Associado a maior gravidade de sintomas negativos.
• Correlações Clínicas: A transição prematura para a exploração e o alto ruído de decisão correlacionaram-se com pior funcionamento no mundo real e maior gravidade de sintomas negativos. O subtipo de alto ruído mostrou a pior performance cognitiva e sintomática.

5. Significado e Implicações

• Precisão em Psiquiatria: O estudo demonstra que a heterogeneidade na psicose pode ser mapeada através de mecanismos computacionais específicos, oferecendo uma alternativa à classificação diagnóstica baseada apenas em sintomas.
• Alvos para Intervenção: A identificação de subtipos sugere que intervenções devem ser personalizadas. Por exemplo, pacientes com alto ruído de decisão podem se beneficiar de estratégias que aumentem a estabilidade da escolha, enquanto aqueles com alta sensibilidade à incerteza podem precisar de intervenções focadas na regulação da resposta à ambiguidade.
• Biomarcadores Computacionais: As medidas de tomada de decisão (como a sensibilidade à incerteza e o ruído) mostraram confiabilidade teste-reteste moderada a alta, validando seu potencial como biomarcadores escaláveis para monitorar a progressão da doença e a resposta ao tratamento.
• Conexão com Biótipos: Os subtipos encontrados espelham os "biótipos" de psicose identificados pelo consórcio B-SNIP, sugerindo que a modelagem computacional de tarefas comportamentais pode ser uma ferramenta acessível para estratificação biológica, sem a necessidade de exames de imagem complexos em todos os casos.

Em resumo, o artigo fornece evidências robustas de que a desregulação na tomada de decisão na psicose precoce é multifacetada, impulsionada por mecanismos distintos de sensibilidade à incerteza e ruído neural, e que a modelagem computacional é uma ferramenta vital para desvendar essa complexidade e guiar tratamentos personalizados.