Embodied reinforcement learning in the primate cortico-basal ganglia system
Ao registrar a atividade neuronal através do sistema cortico-basal gangliar de macacos rhesus, este estudo demonstra que as representações de valor são específicas do sistema motor em vez de invariantes, desafiando, assim, as explicações biológicas existentes sobre o aprendizado por reforço e apoiando estruturas incorporadas onde o comportamento é fundamentado na estrutura física de um agente.
Artigo original dedicado ao domínio público sob CC0 1.0 (https://creativecommons.org/publicdomain/zero/1.0/). Esta é uma explicação gerada por IA de um preprint que não foi revisado por pares. Não é aconselhamento médico. Não tome decisões de saúde com base neste conteúdo. Ler aviso legal completo
O Sistema de Duas Vias do Cérebro: Por que suas Mãos e Olhos Aprendem de Forma Diferente
Imagine seu cérebro como um console de videogame superinteligente tentando descobrir quais botões lhe dão mais pontos. Durante décadas, os cientistas acreditaram que esse "sistema de pontos" funcionava como uma moeda única e universal. Eles pensavam que, não importa como você jogasse o jogo — fosse usando um joystick, um teclado ou um comando de voz — o cérebro calculava o valor de uma recompensa em um único lugar central e então apenas enviava esse mesmo sinal de "bom trabalho!" para o grupo muscular específico necessário para agir. Essa ideia, conhecida como aprendizagem por reforço, sugeria que o calculador de recompensa do cérebro era completamente separado das partes do corpo que realizavam o movimento. Era uma teoria organizada e limpa: um cérebro, um valor, muitas formas de se mover.
Mas e se o cérebro não funcionar como uma troca de moeda única? E se, em vez disso, a maneira como você aprende estiver profundamente ligada a como você se move? Isso é o cerne da "cognição incorporada", um conceito que sugere que nossos pensamentos e aprendizagem estão fundamentados em nossos corpos físicos, e não flutuando acima deles em uma nuvem abstrata. Se isso for verdade, então aprender a pegar um biscoito com a mão pode parecer e ser completamente diferente no seu cérebro do que aprender a olhar para um biscoito com os olhos, mesmo que o biscoito seja o mesmo. Compreender isso é crucial porque muda a forma como vemos tudo, desde como os animais sobrevivem na natureza até como podemos construir robôs mais inteligentes ou ajudar pessoas a se recuperarem de lesões cerebrais. Se o cérebro trata diferentes partes do corpo como canais de aprendizagem separados, isso significa que nossas mentes são muito mais físicas e menos "abstratas" do que pensávamos anteriormente.
O Grande Experimento com Macacos: Olhos vs. Mãos
Neste estudo, os pesquisadores Franco Giarrocco e Bruno Averbeck decidiram testar essa ideia transformando dois macacos rhesus em superaprendizes. Eles montaram um jogo onde os macacos tinham que escolher entre duas imagens para ganhar uma recompensa de suco. Às vezes, os macacos tinham que fazer sua escolha olhando para a imagem certa (um sacádico, ou movimento ocular), e outras vezes, tinham que esticar o braço e tocar a imagem certa (um alcance, ou movimento do braço). O detalhe? Os macacos tinham que aprender qual imagem era a "boa" (80% de chance de suco) e qual era a "ruim" (20% de chance) apenas tentando, por tentativa e erro.
Enquanto os macacos jogavam esse jogo, os cientistas registraram a atividade de 4.843 neurônios em oito regiões diferentes do céreio. Eles observaram tudo, desde a amígdala (frequentamente ligada às emoções) até o córtex pré-frontal (o CEO do cérebro) e os gânglios da base (o centro de ação do cérebro). Eles queriam ver se o cérebro usava a mesma "linguagem neural" para falar sobre o valor de uma recompensa, independentemente de o macaco estar usando os olhos ou as mãos.
A Grande Descoberta: Dois Idiomas Diferentes
Os resultados foram um choque para a antiga teoria. Os cientistas descobriram que o cérebro não usava uma linguagem única e universal para o valor. Em vez disso, ele falava dois dialetos completamente diferentes dependendo de qual parte do corpo estava realizando o trabalho.
Imagine os neurônios do cérebro como uma grande orquestra. Se a teoria do "valor universal" estivesse correta, a orquestra tocaria a mesma melodia quer o macaco estivesse usando os olhos ou as mãos, talvez apenas um pouco mais alto ou mais baixo. Mas o que os pesquisadores descobriram foi mais parecido com a orquestra tocando duas músicas inteiramente diferentes ao mesmo tempo. Quando o macaco usava os olhos, os neurônios disparavam em um padrão específico para dizer: "Esta imagem vale muito!". Quando o macaco usava a mão, um outro conjunto de neurônios disparava em um outro padrão para dizer exatamente a mesma coisa.
Usando uma ferramenta matemática chamada "geometria de população", os pesquisadores mediram o "ângulo" entre esses dois padrões neurais. Eles descobriram que os padrões estavam quase em ângulos retos um do outro, como um formato de "T". Em termos matemáticos, isso significa que eles são ortogonais, ou geometricamente independentes. A informação sobre o valor ao usar os olhos era tão diferente da informação ao usar as mãos que, se você tentasse ler o sinal dos "olhos" usando o decodificador da "mão", ficaria muito confuso. A informação de valor era essencialmente perdida na tradução.
Essa separação acontecia em todo o cérebro, mesmo nas partes profundas e emocionais, como o estriado ventral e a amígdala, que os cientistas costumavam considerar os "centros de valor universal". O único lugar onde o cérebro mantinha um pouco de uma linguagem compartilhada era no córtex pré-frontal ventrolateral (vlPFC), uma região conhecida por lidar com regras abstratas. Mas mesmo lá, a separação era forte.
Por Que Isso Importa: O Corpo Molda a Mente
O estudo sugere que o cérebro é "incorporado". Ele não apenas calcula uma recompensa e depois diz ao corpo o que fazer; a maneira como o corpo se move realmente molda como a recompensa é aprendida e armazenada. Os pesquisadores descobriram que os macacos eram, de fato, melhores em aprender quando usavam as mãos (alcances) do que quando usavam os olhos (sacádicos), aprendendo mais rápido e fazendo escolhas melhores. Isso sugere que nossas diferentes partes do corpo podem ter evoluído para lidar com diferentes tipos de tarefas de aprendizagem.
Crucialmente, os pesquisadores descartaram a ideia de que essas diferenças eram apenas porque os macacos eram melhores em uma tarefa do que em outra. Mesmo quando olharam apenas para as sessões em que os macacos tiveram um desempenho igual tanto com os olhos quanto com as mãos, o cérebro ainda usava dois idiomas separados. Isso prova que a separação não é um erro ou um efeito colateral de ser ruim em uma tarefa; é uma característica fundamental de como o cérebro é estruturado.
Portanto, da próxima vez que estiver aprendendo algo novo, lembre-se: seu cérebro pode estar tratando suas mãos e seus olhos como dois alunos diferentes na mesma classe, cada um com seu próprio caderno e sua própria maneira de entender a lição. O cérebro não é um calculador único e abstrato; é uma máquina física onde a maneira como você se move é parte de como você pensa.
Afogado em artigos na sua área?
Receba digests diários dos artigos mais recentes que correspondam às suas palavras-chave de pesquisa — com resumos técnicos, no seu idioma.