Symbolic Reasoning Frameworks Modulate LLM Risk Aversion in Multi-Agent Strategic Settings

Resumo Técnico: Estruturas de Raciocínio Simbólico Modulam a Aversão ao Risco de LLMs em Cenários Estratégicos Multiagentes

Problema
Modelos de Linguagem de Grande Escala (LLMs) implantados como agentes estratégicos exibem tendências comportamentais inatas, especificamente um viés de aversão ao risco do tipo "tartaruga" em direção ao jogo defensivo. Embora a literatura prévia demonstre que o prompting de persona possa alterar o comportamento de um agente individual, permanece incerto se a modulação da estrutura de raciocínio de um único agente em um sistema multiagente produz mudanças consequentes nos resultados do ecossistema. Especificamente, a escolha de uma estrutura de raciocínio simbólico para um agente altera as distribuições de vitórias de outros agentes e essa modulação é impulsionada pelo conteúdo semântico da estrutura ou pelo processo interpretativo que ela exige?

Metodologia
O estudo utiliza uma variante de 7 jogadores do jogo Diplomacy ambientada no período dos Estados Combatentes da China (475–221 a.C.) em um mapa de 46 territórios.

• Agentes: Sete agentes independentes (um por estado) são operados pelo Claude Opus 4.6, cada um fundamentado em uma persona histórica/filosófica específica (ex: Legalismo para Qin, Confucionismo para Yan).
• Intervenção: Um agente, representando o estado de Han (o menor e mais fraco), é submetido a quatro condições distintas ao longo de 41 jogos (acumulação de memória de campanha única):
  1. Controle: Um prompt de reflexão genérico de comprimento equivalente.
  2. Yarrow (I-Ching): Prompts por rodada contendo números de hexagramas e comentários abstratos, exigindo que o agente interprete o oráculo em um contexto estratégico.
  3. Tarot: Prompts por rodada contendo tiragens de três cartas com interpretações situacionais.
  4. Scrambled (Embaralhado): Uma condição de ablação onde o texto do I-Ching é embaralhado para destruir a coerência semântica enquanto preserva a estrutura do prompt e o mandato de interpretação.
• Medição: O estudo rastreia perfis comportamentais (taxas de manutenção defensiva, suporte cooperativo, extensão do raciocínio) e distribuições de vencedores do ecossistema. A significância estatística é avaliada por testes exatos de Fisher para distribuições de vencedores e testes de Kruskal-Wallis/Mann-Whitney U para taxas comportamentais.

Principais Contribuições e Descobertas

1. Assinaturas de Ecossistema Específicas de cada Estrutura: A escolha da estrutura de raciocínio para um único agente (Han) produz distribuições de vencedores para todo o ecossistema que são distintas e estatisticamente significativas, apesar de Han nunca vencer nenhum jogo.
   • Controle: Yan domina (7/11 vitórias, 64%).
   • Yarrow: Yan e Chu co-dominam; Qin (o mais forte e expansionista) é completamente suprimido (0/10 vitórias).
   • Tarot: Qin domina (5/10 vitórias; Fisher $p=0.006$ vs. agrupado).
   • Scrambled: Qi domina (5/10 vitórias; Fisher $p=0.006$ vs. agrupado).
2. Modulação Impulsionada pelo Processo, Não pelo Conteúdo: A modulação comportamental não é resultado do seguimento do conteúdo semântico do oráculo.
   • Temas de hexagramas e posturas de cartas de Tarot não mostram associação estatística com as escolhas de ação subsequentes do agente ($\chi^2$ $p=0.95$ e $p=0.69$, respectivamente).
   • No entanto, o agente referencia o texto do oráculo em 83% de seu raciocínio.
   • A ablação Scrambled é crítica: destruir a coerência semântica enquanto preserva a estrutura produz uma assinatura de ecossistema única (dominância de Qi) distinta tanto do controle quanto das condições coerentes de Yarrow. Isso descarta tanto o simples seguimento de conteúdo quanto os efeitos da estrutura do prompt como explicações suficientes.
3. Mecanismos de Propagação: O estudo identifica que a estrutura altera o processo interpretativo, que por sua vez modula a aversão ao risco e a cooperação, propagando-se pelo sistema:
   • Yarrow: Induz "disrupção interpretativa", levando ao aumento da cooperação no final do jogo (taxa de suporte de 17,1%), criando fricção que suprime estados expansionistas como Qin.
   • Tarot: Induz "amplificação tonal cumulativa" de posturas defensivas, resultando em aversão extrema ao risco (taxa de manutenção de 78,3%) e zero cooperação, criando um vácuo explorado por Qin.
   • Scrambled: Causa "falha de análise (parsing)", levando ao raciocínio autorreferencial e suporte reativo próprio, criando fricção localizada que beneficia o estado distante de Qi.
4. Extensão do Raciocínio vs. Qualidade Estratégica: Há um gradiente claro na extensão do raciocínio (Controle < Yarrow $\approx$ Tarot < Scrambled), mas o aumento da deliberação não correlaciona com melhores resultados estratégicos para Han. De fato, a expansão induzida pelo Tarot (maior território de pico) leva à eliminação de coalizões sem melhorar as taxas de sobrevivência.

Significância e Alegações
O artigo apresenta esses achados como uma observação estabelecendo que a escolha da estrutura de alinhamento ao nível do agente produz consequências distintivas em nível de sistema.

• Impacto em Nível de Sistema: O agente mais fraco em um sistema pode remodelar toda a distribuição de resultados do ecossistema através da escolha de seu arcabouço de raciocínio, mesmo que esse agente nunca alcance a vitória em si.
• Limitações da Avaliação Centrada no Agente: Avaliar intervenções de alinhamento apenas com base nos resultados do agente alinhado é insuficiente; os "efeitos de ecossistema" da intervenção devem ser medidos.
• Processo sobre Conteúdo: O conteúdo específico de uma estrutura de raciocínio importa menos do que o processo cognitivo que ela exige (ex: o ato de interpretar metáforas abstratas). Diferentes estruturas atuam como perturbadores confiáveis que deslocam modos comportamentais sem necessariamente melhorar a qualidade da tomada de decisão.

Os autores concluem que, embora o menor estado não possa vencer consultando o oráculo, o oráculo muda o mundo de maneiras específicas de cada estrutura, sugerindo que a seleção de arcabouços de raciocínio é uma decisão de design de nível de sistema, e não uma configuração local de agente.