← Últimos artigos
💻 computer science

Analog Diffusion Models

Este artigo introduz os Modelos de Difusão Analógica (ADMs), que aproveitam uma correspondência de ponto fixo entre a dinâmica de hardware analógico e a inferência de difusão implícita para permitir uma IA generativa totalmente analógica e de alta eficiência, sem exigir o redesenho do modelo ou comprometer a compatibilidade com ecossistemas de treinamento padrão.

Autores originais: Jiaqi Chu, Heiner Kremer, Fabian Falck, Grace Brennan, Burcu Canakci, James Clegg, Daniel Cletheroe, Doug Kelly, Christos Gkantsidis, Michael Hansen, Paul Jeha, Kirill Kalinin, Jim Kleewein, Babak Rah
Publicado 2026-08-06
📖 9 min de leitura🧠 Leitura aprofundada

Autores originais: Jiaqi Chu, Heiner Kremer, Fabian Falck, Grace Brennan, Burcu Canakci, James Clegg, Daniel Cletheroe, Doug Kelly, Christos Gkantsidis, Michael Hansen, Paul Jeha, Kirill Kalinin, Jim Kleewein, Babak Rahmani, Saravan Rajmohan, Victor Rühle, Jannes Gladrow, Francesca Parmigiani, Hitesh Ballani

Artigo original sob licença CC BY 4.0 (https://creativecommons.org/licenses/by/4.0/). Esta é uma explicação gerada por IA do artigo abaixo. Não foi escrita nem endossada pelos autores. Para precisão técnica, consulte o artigo original. Ler aviso legal completo

Imagine o mundo da inteligência artificial como uma enorme estação de trem de alta velocidade. Durante anos, os trens (nossos modelos de IA) têm se tornado mais rápidos e poderosos, mas também estão se tornando incrivelmente pesados e ávidos por energia. O tipo de trem mais popular no momento é chamado de "modelo de difusão". Pense nisso como um escultor que começa com um bloco de mármore caótico e ruidoso e vai removendo o ruído lentamente, pedaço por pedaço, até que uma bela estátua emerja. Para obter essa estátua perfeita, o escultor precisa fazer milhares de pequenos e cuidadosos movimentos de cinzel. Cada movimento leva tempo e energia, e à medida que as estátuas ficam maiores, o processo torna-se exaustivo para nossos chips de computador atuais, que são como calculadoras digitais que só conseguem fazer uma coisa de cada vez, muito rapidamente.

Surge a ideia da "computação analógica". Se os computadores digitais são como um relógio digital que marca segundos precisos e separados, os computadores analógicos são como um rio fluindo ou um pêndulo oscilante. Eles não contam passos; eles deixam a física fazer o trabalho. Em vez de calcular um número, eles deixam um sinal fluir através de um circuito até que ele naturalmente se estabilize, de forma muito semelhante a um pêndulo que eventualmente para no fundo de seu balanço. Cientistas há muito esperam que o uso dessas máquinas "fluídas" pudesse tornar a IA incrivelmente rápida e eficiente em termos de energia. No entanto, houve um problema persistente: os algoritmos de IA foram projetados para o estilo de pensamento do "relógio digital". Tentar forçar esses algoritmos a rodar em hardware de "rio fluindo" geralmente significava ou quebrar o cérebro da IA ou usar o hardware apenas para uma pequena parte do trabalho, deixando o trabalho pesado para os antigos e famintos por energia computadores digitais.

Este artigo apresenta uma nova maneira inteligente de preencher essa lacuna, chamada Modelos de Difusão Analógica (ADMs). Os pesquisadores, trabalhando na Microsoft Research, descobriram que a maneira como um modelo de difusão "esculpe o ruído" é suspeitosamente semelhante à maneira como um sistema analógico físico naturalmente "se estabiliza" em um estado estável. Em vez de forçar a IA a mudar sua personalidade para se ajustar ao hardware, eles reimaginaram os passos da IA para que o hardware pudesse fazer o trabalho naturalmente. Eles testaram isso em um computador óptico especial que usa luz e eletricidade para realizar cálculos. Em seus experimentos, o sistema gerou imagens e padrões de dados inteiramente neste hardware analógico, com cada etapa do processo levando apenas 10–15 microssegundos.

A equipe não parou apenas no pequeno protótipo. Eles usaram um "gêmeo digital" — uma simulação de computador superprecisa do seu hardware — para testar como essa ideia funcionaria em modelos de IA muito maiores e do mundo real, incluindo alguns com bilhões de parâmetros. Essas simulações sugerem que esta abordagem pode ser um divisor de águas. Ao usar este método de "estabilização", a IA pode precisar de até 16 vezes menos passos para criar uma imagem de alta qualidade em comparação com os métodos padrão. Embora cada um desses novos passos exija alguns loops internos de "estabilização", a quantidade total de trabalho diminui significativamente. Os pesquisadores sugerem que, se esta tecnologia for escalada para o hardware futuro e miniaturizado, ela poderá oferecer enormes economias de energia, potencialmente tornando a próxima geração de IA muito mais sustentável sem a necessidade de reinventar os algoritmos que já amamos.

A Ideia Central: Deixando a Física Fazer o Trabalho de Cinzel

Para entender por que isso é importante, vamos observar como a "escultura" geralmente funciona. Em uma IA digital padrão, o computador calcula um passo, para, salva o resultado, calcula o próximo passo, e assim por diante. É como um robô que tem que pausar, pensar e então mover seu braço para cada único fragmento de mármore que remove. Isso é lento e consome muita eletricidade.

Os pesquisadores perceberam que a matemática "implícita" usada em alguns modelos avançados de IA é, na verdade, um problema de "ponto fixo". Em termos simples, isso significa encontrar um ponto onde, se você aplicar uma regra, você termina exatamente no mesmo lugar. É como uma bola rolando ladeira abaixo; ela continua se movendo até atingir o fundo e parar. Uma vez que está no fundo, aplicar a regra "rolar ladeira abaixo" não muda nada porque ela já está lá.

A magia deste artigo é que o hardware analógico faz exatamente isso naturalmente. Quando você envia um sinal através de um loop de luz e eletrônica, ele não conta passos. Ele apenas flui até se estabilizar. Os autores perceberam que, se configurassem seu modelo de IA corretamente, a "estabilização" da luz e da eletricidade é a IA realizando um passo. O hardware não precisa ser instruído a parar após um cálculo; ele encontra a resposta naturalmente ao atingir o equilíbrio.

O Experimento: Luz, Espelhos e Micro-LEDs

Para provar que isso funciona, a equipe construiu uma máquina física chamada Computador Óptico Analógico (AOC). Imagine um labirinto tecnológico minúsculo feito de luz.

  • A Fonte de Luz: Eles usaram matrizes de pequenas luzes (micro-LEDs) para representar os dados.
  • Os Pesos: Eles usaram espelhos especiais chamados Moduladores de Luz Espacial (SLMs) que podem alterar o quanto de luz refletem. Esses espelhos atuam como o "cérebro" da IA, mantendo os pesos (o conhecimento) do modelo.
  • O Loop: A luz viaja dos LEDs, atinge os espelhos, é somada pelos sensores e, então, o resultado é alimentado de volta no sistema.

Isso cria um loop de feedback. O sistema continua se ajustando até que o padrão de luz se estabilize. Essa estabilização acontece num piscar de olhos — especificamente, em 10 a 15 microssegundos por passo.

Eles testaram isso em algumas tarefas diferentes:

  1. Formas 2D: Pediram à máquina para gerar padrões 2D simples como corações, estrelas e letras. O hardware fez isso com sucesso, produzindo formas que correspondiam quase perfeitamente às suas simulações digitais.
  2. Geração de Espaço Latente: Usaram uma técnica chamada "difusão latente" (que é como os geradores de imagem modernos como DALL-E ou Stable Diffusion funcionam). Eles executaram todo o processo iterativo no hardware analógico e usaram apenas um computador digital para o último passo para transformar o resultado em uma imagem. Eles geraram com sucesso imagens de dígitos escritos à mão (MNIST), itens de moda (FashionMNIST) e letras (EMNIST).

O Panorama Geral: Simulações e Escalonamento

A máquina física que construíram é pequena, com 2.304 pesos programáveis. Isso é minúsculo comparado aos modelos de IA modernos, que podem ter bilhões de pesos. Então, como sabemos que isso funciona para grandes modelos?

Os pesquisadores criaram um "Gêmeo Digital" (DT). Esta é uma simulação de computador que imita o comportamento exato, o ruído e as peculiaridades do seu hardware físico. Eles treinaram modelos de IA padrão em computadores digitais comuns, mas disseram a eles para esperar o "ruído" e o comportamento da máquina analógica. Depois, rodaram esses modelos através do Gêmeo Digital para ver como eles se sairiam se estivessem rodando de fato no hardware baseado em luz.

Eles testaram isso em:

  • Redes Neurais Convolucionais (U-Nets)
  • Transformers de Difusão (DiT)
  • Modelos gigantes com até 13 bilhões de parâmetros (como o modelo FLUX.1).

Os resultados foram promissores. Nessas simulações, os "Modelos de Difusão Analógica" (ADMs) puderam alcançar os mesmos resultados de alta qualidade de imagem que os métodos digitais padrão, mas com até 16 vezes menos passos de difusão.

Por exemplo, em um conjunto de dados de imagens de borboletas, o método padrão precisava de 128 passos para obter uma boa imagem. O método analógico precisou de apenas 8 passos para obter uma qualidade semelhante. Embora cada um desses 8 passos exigisse alguns loops internos de "estabilização" (iterações de ponto fixo), a quantidade total de trabalho ainda era muito menor.

Por Que Isso Importa (E O Que Não É)

O artigo sugere um novo caminho a seguir. Em vez de tentar forçar os algoritmos de IA a se ajustarem às restrições do novo hardware (o que frequentemente quebra a IA), eles alinharam a física natural do hardware com as necessidades do algoritmo.

O que o artigo NÃO afirma:

  • Não diz que este é um produto acabado que você possa comprar hoje. O hardware ainda é um protótipo.
  • Não afirma ter resolvido o problema da energia para toda a IA ainda. As economias de energia são "projetadas" com base em simulações e na eficiência conhecida da computação óptica.
  • Não diz que todo modelo de IA funcionará melhor desta forma; em alguns testes específicos (como com o conjunto de dados AFHQ usando um modelo DiT), o método básico teve dificuldades, mas uma versão mais avançada chamada "Implicit-CN" (Crank-Nicolson) corrigiu o problema.

O Nível de Confiança:
Os autores são muito cuidadosos com sua linguagem. Eles demonstraram o conceito no hardware pequeno. Eles mostraram que os resultados do espaço latente e 2D correspondem ao gêmeo digital. Eles sugerem que os resultados de escalonamento (para os modelos de bilhões de parâmetros) têm alta probabilidade de serem verdadeiros porque a matemática faz sentido, mas esses resultados de grande escala são atualmente simulações, não experimentos físicos em uma máquina de um bilhão de pesos.

O Roteiro Futuro

O artigo delineia um roteiro para o futuro. O hardware atual tem o tamanho de um pequeno chip. Os autores propõem que, ao empilhar esses sistemas ópticos em três dimensões (usando a terceira dimensão para rotear a luz, em vez de apenas através de uma superfície plana), eles poderiam escalar para 100 milhões de pesos dentro de um volume do tamanho de um centímetro.

Se esse escalonamento acontecer, e se o hardware puder operar em velocidades de gigahertz (que é muito mais rápido do que as velocidades atuais de megahertz), a eficiência energética poderia ser 100 vezes melhor do que os chips digitais atuais para a parte do cálculo real. Mesmo quando você adiciona o custo do passo digital final para transformar o resultado em uma imagem, o sistema total ainda poderia ser 26 vezes mais eficiente do que os métodos atuais.

Em suma, este artigo sugere que, ao ouvir a física da luz e da eletricidade, e ao deixar a IA "se estabilizar" naturalmente em vez de forçá-la a contar, podemos finalmente desbloquear as enormes economias de energia que a computação analógica prometeu por décadas. É uma mudança de "fazer o algoritmo caber na máquina" para "deixar a máquina fazer o que ela faz de melhor".

Afogado em artigos na sua área?

Receba digests diários dos artigos mais recentes que correspondam às suas palavras-chave de pesquisa — com resumos técnicos, no seu idioma.

Experimentar Digest →