← Neueste Arbeiten
💻 computer science

DarkLLM: Learning Language-Driven Adversarial Attacks with Large Language Models

Das Papier stellt DarkLLM vor, ein neuartiges Framework, das ein 1-Milliarden-Parameter-Large-Language-Modell nutzt, um natürliche Sprachanweisungen in vielseitige, hochwirksame adversariale Störungen zu übersetzen und dadurch Angriffe auf diverse visuelle und multimodale Basis-Modelle zu vereinheitlichen und zu skalieren.

Ursprüngliche Autoren: Ye Sun, Xin Wang, Jiaming Zhang, Yifeng Gao, Yixu Wang, Yifan Ding, Qixian Zhang, Henghui Ding, Xingjun Ma, Yu-Gang Jiang

Veröffentlicht 2026-05-20
📖 4 Min. Lesezeit☕ Kaffeepausen-Lektüre

Ursprüngliche Autoren: Ye Sun, Xin Wang, Jiaming Zhang, Yifeng Gao, Yixu Wang, Yifan Ding, Qixian Zhang, Henghui Ding, Xingjun Ma, Yu-Gang Jiang

Originalarbeit lizenziert unter CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/). Dies ist eine KI-generierte Erklärung des untenstehenden Papers. Sie wurde nicht von den Autoren verfasst oder gebilligt. Für technische Genauigkeit konsultieren Sie das Originalpaper. Vollständigen Haftungsausschluss lesen

Stellen Sie sich vor, Sie hätten einen superschlauen Roboter, der die Welt „sehen" kann. Er kann Objekte identifizieren, Szenen beschreiben und sogar Umrisse von Dingen auf einem Foto zeichnen. Genau das tun moderne KI-Modelle (wie CLIP, SAM oder ChatGPT).

Seit Jahren versuchen Sicherheitsforscher, diese Roboter zu täuschen, indem sie winzige, unsichtbare „Störpunkte" (Noise) zu Bildern hinzufügen – wie Staub auf einem Kameraobjektiv –, die so klein sind, dass Menschen sie nicht sehen können, die den Roboter jedoch völlig verwirren.

Das Problem mit den alten Tricks
Früher war das Erstellen dieser „Staubkörner" so, als hätte man für jedes einzelne Schloss einen anderen Hauptschlüssel. Wenn Sie einen Roboter täuschen wollten, der Autos identifiziert, benötigten Sie einen spezifischen Schlüssel. Wenn Sie einen Roboter täuschen wollten, der Umrisse zeichnet, benötigten Sie einen völlig anderen Schlüssel. Wenn Sie einen Roboter täuschen wollten, der Englisch spricht, benötigten Sie einen weiteren. Es war langsam, starr und konnte sich nicht leicht an neue Arten von Robotern anpassen.

Die neue Lösung: DarkLLM
Diese Arbeit stellt DarkLLM vor, eine neue Methode, um diese KI-Modelle anzugreifen. Anstatt komplexe mathematische Formeln zu verwenden, um die „Staubkörner" zu berechnen, haben die Forscher ein Large Language Model (ein KI-System, das menschliche Sprache versteht) dazu gebracht, der „Hauptschlüsselmacher" zu sein.

So funktioniert es, anhand einer einfachen Analogie:

1. Der „magische Übersetzer" (Der LLM-Controller)

Stellen Sie sich einen hochqualifizierten Übersetzer vor, der „Mensch" und „Roboter-Sabotage" spricht.

  • Der alte Weg: Sie mussten für jeden spezifischen Roboter, den Sie täuschen wollten, eine komplexe mathematische Gleichung schreiben.
  • Der DarkLLM-Weg: Sie sprechen einfach in klarem Englisch mit dem Übersetzer.
    • Sie sagen: „Bringe diesen Roboter dazu zu glauben, dass das Bild einer Katze tatsächlich ein Hund ist."
    • Oder: „Bringe diesen Roboter dazu, in diesem Bild nichts zu erkennen."
    • Oder: „Bringe diesen Roboter dazu, den Umriss der Katze nicht zu zeichnen, UND lasse ihn gleichzeitig denken, dass die Katze ein Hund ist."

Der Übersetzer (das LLM) versteht Ihre Absicht und wandelt Ihre Worte sofort in einen geheimen „Bauplan" für den Angriff um.

2. Der „unsichtbare Maler" (Der Perturbations-Generator)

Sobald der Übersetzer den Bauplan erstellt hat, fungiert ein zweiter Teil des Systems wie ein unsichtbarer Maler. Er nimmt diesen Bauplan und malt die winzigen, unsichtbaren „Staubkörner" auf das Bild.

  • Da der Übersetzer Ihre spezifische Anweisung verstanden hat (z. B. „verhindere die Segmentierung"), weiß der Maler genau, welche Art von Staub aufzutragen ist, um dieses spezifische Ergebnis zu erzielen.

3. Die „Universalfernbedienung"

Der mächtigste Teil von DarkLLM ist, dass es wie eine Universalfernbedienung funktioniert.

  • Eine Anweisung, viele Ziele: Sie können dieselbe Anweisung geben, um einen Roboter zu täuschen, der Bilder identifiziert, einen Roboter, der Umrisse zeichnet, oder sogar einen Roboter, der mit Ihnen spricht.
  • Cross-Model-Magie: Die Arbeit zeigt, dass ein einzelner „Staubfleck", der von DarkLLM erstellt wurde, einen Roboter täuschen kann, der zum Erkennen von Autos trainiert wurde, einen Roboter, der zum Zeichnen von Umrisse trainiert wurde, und einen Roboter, der zum Chatten trainiert wurde, alles gleichzeitig. Es wurde eine „Schwachstelle" gefunden, die in allen von ihnen existiert.

Was haben sie bewiesen?

Die Forscher testeten dieses System an 13 verschiedenen Datensätzen und 15 verschiedenen KI-Modellen (darunter bekannte wie CLIP, SAM und kommerzielle Chatbots wie GPT-4o und Gemini).

  • Es funktioniert: Sie zeigten, dass das System durch einfaches Tippen eines Satzes wie „Bringe den Roboter dazu, dieses Bild nicht zu erkennen" erfolgreich ein Bild erstellte, das den Roboter verwirrte.
  • Es ist flexibel: Sie konnten nach spezifischen Tricks fragen (wie „tue so, als wäre dies ein Hund") oder allgemeinen Tricks (wie „zerbrich den Roboter"), und das System bewältigte beides.
  • Es ist beängstigend (auf eine gute Weise für die Sicherheit): Die Tatsache, dass eine einfache Sprachanweisung so viele verschiedene Arten fortschrittlicher KI brechen konnte, deutet darauf hin, dass diese leistungsstarken Modelle eine gemeinsame Schwachstelle teilen.

Das Fazit

DarkLLM ist ein Werkzeug, das natürliche Sprache in eine Waffe gegen die KI-Vision verwandelt. Anstatt einen PhD in Mathematik zu benötigen, um eine KI zu hacken, müssen Sie nur wissen, wie man eine Frage stellt. Die Arbeit zeigt, dass Sie, wenn Sie beschreiben können, was mit einer KI auf Englisch passieren soll, sie wahrscheinlich dazu zwingen können, genau das zu tun, selbst wenn es sich um eine völlig andere KI handelt als die, auf der Sie das Werkzeug trainiert haben.

Die Autoren betonen, dass dies ein Sicherheitswerkzeug ist. Genau wie man wissen muss, wie man ein Schloss aufbricht, um ein besseres zu bauen, hilft diese Forschung Entwicklern zu verstehen, wie leicht diese leistungsstarken KI-Systeme getäuscht werden können, damit sie stärkere Verteidigungen aufbauen können.

Ertrinken Sie in Arbeiten in Ihrem Fachgebiet?

Erhalten Sie tägliche Digests der neuesten Arbeiten passend zu Ihren Forschungsbegriffen — mit technischen Zusammenfassungen, in Ihrer Sprache.

Digest testen →