← Últimos artigos
💻 computer science

A Closer Look at the Existing Risks of Generative AI: Mapping the Who, What, and How of Real-World Incidents

Este artigo apresenta uma nova taxonomia para falhas de IA Generativa ao analisar sistematicamente 499 incidentes do mundo real, revelando que a maioria dos danos decorre de questões relacionadas ao uso que afetam partes interessadas além dos usuários finais, distinguindo assim o cenário de riscos da IA Generativa da IA tradicional e defendendo estratégias de mitigação não técnicas, como divulgação pública, educação e regulamentação.

Autores originais: Megan Li, Wendy Bickersteth, Ningjing Tang, Jason Hong, Lorrie Cranor, Hong Shen, Hoda Heidari

Publicado 2026-04-27
📖 5 min de leitura🧠 Leitura aprofundada

Autores originais: Megan Li, Wendy Bickersteth, Ningjing Tang, Jason Hong, Lorrie Cranor, Hong Shen, Hoda Heidari

Artigo original sob licença CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/). Esta é uma explicação gerada por IA do artigo abaixo. Não foi escrita nem endossada pelos autores. Para precisão técnica, consulte o artigo original. Ler aviso legal completo

Imagine a IA Generativa como uma fábrica superpotente e hipercriativa que pode produzir instantaneamente texto, imagens, áudio e vídeos. É como uma prensa mágica que nunca dorme. Mas, assim como qualquer fábrica poderosa, ela não produz apenas bens; também produz "acidentes" e "bagunças".

Este artigo é essencialmente uma investigação forense de 499 acidentes reais causados por essa fábrica. Os pesquisadores (da Universidade Carnegie Mellon) não apenas adivinharam o que poderia dar errado; eles analisaram uma enorme pilha de relatórios policiais, notícias e reclamações públicas para mapear exatamente o que aconteceu, quem se machucou e por quê.

Aqui está a divisão de suas descobertas em termos simples:

1. A Grande Surpresa: O Problema do "Espectador"

Na maioria das histórias de segurança, assumimos que a pessoa que se machuca é quem está usando a ferramenta. Se você dirige um carro de forma imprudente, você é quem sofre o acidente.

Mas com a IA Generativa, os pesquisadores descobriram que o oposto é frequentemente verdadeiro.

  • A Analogia: Imagine que você está em uma festa. Você decide usar um pincel mágico para desenhar uma imagem engraçada do seu amigo. Você (o usuário) acha hilário. Mas a pessoa na imagem (o espectador) agora está sendo ridicularizada por toda a cidade, ou sua reputação está arruinada.
  • A Descoberta: O estudo descobriu que a maior parte do dano não aconteceu com a pessoa que usava a IA. Aconteceu com pessoas que não tinham nada a ver com isso — estranhos, comunidades ou a sociedade em geral. Os "usuários" frequentemente obtiveram os benefícios (diversão, produtividade), enquanto os "não usuários" levaram os hematomas (golpes, roubo de identidade, confusão).

2. Os Dois Principais Culpados: "O Glitch" vs. "O Vilão"

Os pesquisadores categorizaram as razões pelas quais esses acidentes aconteceram em duas principais categorias:

  • O Glitch (Falhas Técnicas): Às vezes a IA simplesmente erra. Ela alucina (inventa fatos), fica confusa ou falha em seguir regras.
    • Quem se machuca? Geralmente a pessoa que usa a IA. Por exemplo, um advogado usa IA para escrever uma petição judicial, a IA inventa um caso falso e o advogado se mete em problemas.
  • O Vilão (Uso Malicioso): Esta foi a maior surpresa. A causa mais comum de dano não foi a IA estar quebrada; foi pessoas usando uma IA funcional para fazer coisas ruins de propósito.
    • Quem se machuca? Quase sempre os espectadores.
    • Exemplos: Alguém usando IA para criar um vídeo deepfake falso de um político para causar um motim, ou criar imagens nuas falsas de um colega de classe para intimidá-lo. A IA funcionou exatamente como projetada; o humano por trás dela foi o problema.

3. O Mapa do "Quem, O Que e Como"

O artigo construiu um novo mapa (uma taxonomia) para organizar esses incidentes:

  • O que aconteceu (O Dano): Os tipos de dano mais comuns foram à Autonomia das pessoas (ser enganado ou se passar por outra), Política/Economia (notícias falsas influenciando eleições ou mercados) e Reputação (difamação).
  • Como aconteceu (O Modo de Falha): A causa mais frequente foi o Uso Malicioso (atores mal-intencionados intencionais). A segunda mais comum foi o Uso Não Divulgado (usar IA quando se deveria estar fazendo trabalho humano, como um aluno trapaceando ou uma revista inundada com spam de IA).
  • Quem se machucou: Como mencionado, as pessoas "não interagentes" (o público, vítimas de deepfakes) suportaram o peso do dano.

4. Por Que as Regras Atuais Não Estão Funcionando

O artigo argumenta que nossa maneira atual de pensar sobre segurança está quebrada porque assume que a pessoa que usa a ferramenta é a única que precisa de proteção.

  • A Analogia: É como ter um manual de segurança para um martelo que apenas diz como não acertar o próprio polegar, mas não diz nada sobre não acertar o vizinho com ele.
  • A Realidade: Como as pessoas que usam a IA frequentemente não sofrem as consequências (a vítima sofre), elas não têm motivação para ter cuidado. O "benefício" vai para o usuário, mas o "risco" vai para o estranho.

5. O Que Devemos Fazer?

Os autores sugerem três coisas principais para consertar essa bagunça, focando em pessoas e regras, e não apenas em código melhor:

  1. Ensinar as Pessoas (Alfabetização em IA): Precisamos ensinar o público em geral como essa "fábrica" funciona. Se as pessoas entenderem que a IA pode mentir (alucinar) ou ser usada para golpes, elas não confiarão cegamente nela. Isso impede alguns "acidentes" causados pela ignorância.
  2. Regular o "Faroe Oeste" do Código Aberto: O artigo observa que muitas das piores ferramentas (como aplicativos que criam imagens nuas falsas) são construídas sobre modelos de "código aberto" que qualquer pessoa pode baixar e modificar. As regras atuais permitem que essas ferramentas existam com poucas restrições. Os autores sugerem que precisamos de regras mais estritas aqui para impedir que os "vilões" construam suas armas.
  3. Rastrear o "Rastro de Papel" (Proveniência): Precisamos de melhores maneiras de distinguir o que é real do que é IA. Se pudermos marcar conteúdo de IA (como um rótulo "Feito por IA") e detectar falsificações, fica mais difícil para golpistas espalharem mentiras ou para deepfakes arruínam reputações.

A Conclusão

A IA Generativa não é apenas uma ferramenta que quebra ocasionalmente; é uma ferramenta que é frequentemente armada por humanos para machucar pessoas que nem sequer pediram isso. A solução não é apenas tornar a IA "mais inteligente"; trata-se de mudar como a regulamos, ensinar o público a identificar as truques e perceber que as pessoas que usam a tecnologia não são as únicas que precisam de proteção.

Afogado em artigos na sua área?

Receba digests diários dos artigos mais recentes que correspondam às suas palavras-chave de pesquisa — com resumos técnicos, no seu idioma.

Experimentar Digest →