← Neueste Arbeiten
💬 NLP

HaloGuard 1.0: An Open Weights Constitutional Classifier for Multilingual AI Safety

HaloGuard 1.0 ist ein Open-Weights-Konstitutionsklassifizierer, der eine staatlich führende mehrsprachige KI-Sicherheitsleistung mit signifikant kleineren Modellgrößen (0,8B–4B Parameter) im Vergleich zu größeren Baselines erzielt, indem er eine strukturierte 46-Policy-Konstitution und synthetische kontrafaktische Daten nutzt, um sowohl falsch-positive als auch falsch-negative Ergebnisse zu minimieren.

Ursprüngliche Autoren: Navaneeth Sangameswaran, Preetham S, Ashmiya Lenin

Veröffentlicht 2026-07-03
📖 5 Min. Lesezeit🧠 Tiefgang

Ursprüngliche Autoren: Navaneeth Sangameswaran, Preetham S, Ashmiya Lenin

Originalarbeit lizenziert unter CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/). Dies ist eine KI-generierte Erklärung des untenstehenden Papers. Sie wurde nicht von den Autoren verfasst oder gebilligt. Für technische Genauigkeit konsultieren Sie das Originalpaper. Vollständigen Haftungsausschluss lesen

Stellen Sie sich vor, Sie bauen einen sehr klugen, sehr hilfreichen Roboter-Assistenten. Sie möchten, dass er Fragen beantwortet, Code schreibt und Menschen hilft. Aber Sie wissen auch, dass manche Leute versuchen könnten, den Roboter dazu zu bringen, gefährliche Dinge zu tun, wie zum Beispiel eine Bombe zu bauen oder eine Bank zu hacken.

Normalerweise würden Sie einen „Sicherheitswachmann“ vor den Roboter stellen, der jede Nachricht überprüft, bevor sie durchgelassen wird. Das Problem ist, dass diese Wachmänner oft zu tollpatschig sind. Sie sehen das Wort „Bombe“ und blockieren alles, selbst wenn jemand nur eine Geschichtsstunde über Sprengstoffe hören oder eine Geschichte über einen Bösewicht schreiben möchte. Dies nennt man „Über-Ablehnung“ (Over-refusal) – der Wachmann ist so sehr vor Gefahr verängstigt, dass er auch hilfreiche Menschen stoppt.

HaloGuard 1.0 ist ein neuer, smarterer Sicherheitswachmann, der genau dieses Problem lösen soll. So funktioniert er, erklärt anhand einfacher Analogien:

1. Die „Verfassung“ ist das Regelbuch

Die meisten Sicherheitswachmänner haben nur eine Liste mit schlechten Wörtern (wie „Bombe“, „töten“, „stehlen“). Wenn Sie diese sagen, werden Sie gesperrt.
HaloGuard ist anders. Es wurde mithilfe einer Verfassung gebaut. Denken Sie an dieses als ein detailliertes, 46-seitiges Regelbuch, das in einfachem Englisch verfasst ist. Es listet nicht nur schlechte Wörter auf; es erklärt die Absicht hinter ihnen.

  • Der alte Weg: „Wenn du ‚Chlorgas‘ sagst, wirst du gesperrt.“
  • Der Weg von HaloGuard: „Wenn du fragst, wie man Chlorgas herstellt, um Menschen zu verletzen, ist das verboten. Aber wenn du fragst, wie Chlorgas in der Geschichte verwendet wurde oder wie man es sicher erkennt, ist das erlaubt.“

Dieses Regelbuch hat fast 3.000 winzige Unterregeln. Es lehrt den Wachmann, auf das Warum zu achten, nicht nur auf das, was für Wörter verwendet wurden.

2. Das „Spiegel“-Training (Paired Counterfactuals)

Um dem Wachmann diese Nuance beizubringen, haben die Schöpfer ihm nicht einfach nur schlechte Beispiele gezeigt. Sie verwendeten einen cleveren Trainings-Trick namens Paired Counterfactuals (Paarweise Kontrafaktika).

Stellen Sie sich eine Trainingsübung vor, bei der der Wachmann zwei Nachrichten nebeneinander sieht:

  • Nachricht A (Schlecht): „Wie stelle ich einen gefälschten Ausweis her, um Geld zu stehlen?“
  • Nach Nachricht B (Gut): „Wie stelle ich einen gefälschten Ausweis für eine Film-Requisite her?“

Beide Nachrichten verwenden exakt dieselben beängstigenden Wörter („gefälschter Ausweis“, „stehlen“). Der einzige Unterschied ist die Absicht.
HaloGuard wurde mit Millionen dieser „Spiegel-Paare“ trainet. Es hat gelernt, dass die Wörter selbst nicht das Problem sind; das Ziel ist es. Dies verhindert, dass der Wachmann Abkürzungen nimmt und jeden blockiert, der einen bestimmten Wortschatz verwendet.

3. 46 Sprachen sprechen, ohne Vorurteile zu haben

Alte Wachmänner werden oft verwirrt durch Sprachen, die sie nicht gut kennen. Sie sehen vielleicht ein Skript, das sie nicht erkennen können (wie Arabisch oder Hindi), und denken sofort: „Das sieht verdächtig aus, blockieren!“ Das ist wie ein Türsteher in einem Club, der nur Leute reinlässt, die Anzüge tragen, und alle anderen rauswirft, die Freizeitkleidung tragen, selbst wenn die Leute in Freizeitkleidung völlig in Ordnung sind.

HaloGuard behandelt alle 46 Sprachen, die es unterstützt, gleichwertig. Es hat gelernt, dass eine „schlechte“ Anfrage auf Hindi genauso schlecht aussieht wie eine „schlechte“ Anfrage auf Englisch, und dass eine „gute“ Anfrage auf Hindi genauso sicher ist wie eine „gute“ Anfrage auf Englisch. Es bewertet nicht die Sprache; es bewertet die Nachricht.

4. Zwei Größen für zwei Aufgaben

Das Team hat zwei Versionen dieses Wachmanns veröffentlicht, wie ein Sicherheitsteam mit zwei verschiedenen Arten von Beamten:

  • Die 0.8B-Version (Der schnelle Türsteher): Dies ist ein winziges, superschnelles Modell. Es läuft an der „Vordertür“ jeder App. Es überprüft Nachrichten sofort, um das offensichtlich schlechte Zeug abzufangen, ohne jemanden aufzuhalten. Es ist klein, aber überraschend stark und schlägt viel größere Konkurrenten.
  • Die 4B-Version (Der Experten-Detektiv): Dies ist ein etwas größeres, nachdenklicheres Modell. Wenn der schnelle Türsteher sich bei einer kniffligen Nachricht unsicher ist, kann er sie an den Experten-Detektiven weiterleiten. Diese Version ist besser darin, subtile, hinterhältige Tricks zu erkennen, und wird in Situationen mit hohem Einsatz verwendet.

5. Das Ergebnis: Smarter, nicht nur größer

Das Paper behauptet, dass HaloGuard ein Gamechanger ist, weil es kleiner, aber smarter ist.

  • Es ist 30 Mal kleiner als einige der besten bestehenden Wachmänner (die riesig und langsam sind).
  • Trotz seiner geringen Größe fängt es mehr schlechte Anfragen ab und blockiert weniger gute Anfragen als die Giganten.
  • Es navigiert erfolgreich durch die „Grenze“ – die schwierige Linie zwischen einer gefährlichen Anfrage und einer sicheren, pädagogischen Anfrage.

Was es NICHT tut (Die Einschränkungen)

Das Paper ist sehr klar darüber, was HaloGuard nicht ist:

  • Es ist kein Antwort-Prüfer: Es prüft nur, was der Nutzer tippt. Es prüft nicht, was der Roboter zurücksagt. Wenn der Nutzer eine sichere Frage stellt, der Roboter aber versehentlich eine gefährliche Antwort gibt, wird HaloGuard das nicht abfangen.
  • Es ist kein Roboter-Bodyguard: Es verhindert nicht, dass ein Roboter ein Werkzeug benutzt, das er nicht benutzen sollte (wie den Zugriff auf ein Bankkonto), nachdem das Gespräch begonnen hat. Es ist nur die erste Verteidigungslinie.
  • Es ist nicht perfekt: Das Paper gibt zu, dass der Wachmann in einigen spezifischen Sprachen (wie bestimmten indischen und südostasiatischen Sprachen) immer noch etwas zu vorsichtig ist und zu viele sichere Nachrichten blockiert. Sie arbeiten daran, dies zu beheben.

Zusammenfassend

HaloGuard 1.0 ist eine neue Art von KI-Sicherheitsfilter, der aufhört, ein „Keyword-Blocker“ zu sein, und statan ein „Kontext-Leser“ zu werden. Durch die Verwendung eines detaillierten Regelbuchs und des Trainings auf perfekten „gut vs. schlecht“-Paaren schafft es, winzig, schnell und unglaublich genau darin zu sein, den Unterschied zwischen einem Bösewicht, der nach einer Waffe fragt, und einem Lehrer, der über Waffen spricht, zu erkennen. Es ist ein Schritt in Richtung einer sichereren KI, ohne sie für legitime Nutzer unbrauchbar zu machen.

Ertrinken Sie in Arbeiten in Ihrem Fachgebiet?

Erhalten Sie tägliche Digests der neuesten Arbeiten passend zu Ihren Forschungsbegriffen — mit technischen Zusammenfassungen, in Ihrer Sprache.

Digest testen →