TME LLM OS: A Closed-Loop Systems Engineering Architecture for Epistemic Correction in AI Agent Systems Systems Engineering Proposal
Dieses Paper schlägt das TME LLM OS vor, eine geschlossene Systemengineering-Architektur, die das menschliche theoretisch-mechanistisch-erfahrungswissenschaftliche Framework adaptiert, um durch die Integration von strukturierter Überprüfung, Provenienzverfolgung und gesteuerter Ausführung eine epistemische Korrektur in KI-Agenten zu erzwingen, indem Mismatch-Zustände innerhalb einer begrenzten Episode vor der sicheren Freigabe aufgelöst werden.
Originalarbeit lizenziert unter CC BY 4.0 (https://creativecommons.org/licenses/by/4.0/). Dies ist eine KI-generierte Erklärung des untenstehenden Papers. Sie wurde nicht von den Autoren verfasst oder gebilligt. Für technische Genauigkeit konsultieren Sie das Originalpaper. Vollständigen Haftungsausschluss lesen
Moderne künstliche Intelligenz ist bemerkenswert geschickt darin geworden, Texte zu generieren, Code zu schreiben und komplexe Aufgaben zu planen. Diese Systeme arbeiten, indem sie das nächste Wort oder die nächste Aktion basierend auf einer riesigen Historie vorangegangener Beispiele vorhersagen und so einen fließenden Gedankenstrom erzeugen, der sich oft wie menschliches Denken anfühlt. Ein beständiges Problem bleibt jedoch: Wenn diese Systeme frühzeitig einen Fehler machen, verbeißen sie sich oft darin. Sie können eine überzeugende Geschichte um eine falsche Prämisse weben und ihre interne Logik so weit verfeinern, bis sich der Fehler sogar noch sicherer anfühlt, während sie sich gleichzeitig immer weiter von der Wahrheit entfernen. Dies geschieht, weil der Prozess der Generierung einer Antwort und der Prozess der Überprüfung dieser Antwort nicht eng miteinander verknüpft sind. Das System erzeugt ein Ergebnis, und erst später, oft erst wenn ein Nutzer auf den Fehler hinweist, erkennt es, dass etwas falsch ist. Bis dahin hat die Maschine jedoch bereits weitergemacht und eine lange Kette der Argumentation auf einem wackeligen Fundament aufgebaut.
Forscher fragen nun, ob wir eine andere Art von Architektur für diese Maschinen bauen können, die der Art und Weise nachempfunden ist, wie Lebewesen mit Unsicherheit und Korrektur umgehen. Der Kern der Idee besteht darin, den Akt des Denkens vom Akt des Sprechens oder Handelns zu trennen. In der menschlichen Erfahrung gibt es einen Moment des Innehaltens, in dem wir unsere eigenen Gedanken betrachten, sie gegen die Fakten prüfen und entscheiden können, ob sie bereit sind, geteilt zu werden. Dieses Papier schlägt ein Systemdesign vor, das dieses Innehalten in die operative Logik der Maschine integriert. Es legt nahe, dass für einen künstlichen Agenten, der wirklich zuverlässig sein soll, jeder Task als eine gebundene Episode mit einem klaren Anfang, einer Mitte, in der er seine Arbeit überprüft, und einem strengen Gate konzipiert werden muss, das verhindert, dass irgendein Output ausgegeben wird, bevor er einen spezifischen Test der Genauigkeit bestanden hat.
Der Vorschlag mit dem Titel TME LLM OS stammt vom unabhängigen Gelehrten Ilan Kander und skizziert einen neuen Weg zur Organisation der Software, die große Sprachmodelle steuert. Der Name steht für Theoretical-Mechanistic-Experiential, ein Rahmenwerk, das zwischen der rohen Verarbeitung von Informationen und dem bewussten Wahrnehmen dieser Informationen unterscheidet. Der Autor argumentet, dass aktuelle KI-Systeme zwar exzellent in der Datenverarbeitung sind, ihnen aber ein spezifischer interner Mechanismus fehlt, um innezuhalten, zu überprüfen und sich selbst zu korrigieren, bevor ein Fehler zu einer endgültigen Handlung wird. Das Papier behauptet nicht, eine bewusste Maschine gebaut oder das Rätsel des menschlichen Denkens gelöst zu haben. Stattdessen bietet es einen konkreten technischen Entwurf für ein System, das seine eigenen Fehler in Echtzeit erkennen kann, ganz ähnlich wie ein Pilot, der vor dem Start eine Checkliste durchgeht, um sicherzustellen, dass kein kritischer Schritt übersprungen wird.
Die zentrale Innovation dieses Vorschlags ist das Konzept der „Episode“. In aktuellen Systemen ist eine Konversation oder eine Aufgabe oft nur ein kontinuierlicher Datenstrom. Wenn das System im ersten Satz einen Fehler macht, versucht es vielleicht, diesen im zweiten Satz zu korrigieren, scheitert aber oft daran, die ursprüngliche Quelle des Fehlers zu überprüfen. Der TME LLM OS ändert dies, indem er einen dedizierten Arbeitsraum für jede Aufgabe schafft. Dieser Arbeitsraum enthält die ursprüngliche Anfrage, die Informationsquelle und die Historie der Versuche des Systems, das Problem zu lösen. Wenn das System eine Kandidatenantwort generiert, gibt es diese nicht sofort frei. Stattdessen tritt es in eine „reflektive Verzögerung“ ein, ein programmiertes Innehalten, bei dem das System seinen eigenen Output als ein zu untersuchendes Objekt behandelt.
Während dieser Pause führt das System eine Reihe von Prüfungen durch, die in den meisten KI-Architekturen derzeit fehlen. Es trennt die Informationsquelle von seiner eigenen Interpretation. Es fragt, ob die Beweise die Behauptung stützen, welche Informationen fehlen könnten und ob es andere Wege gibt, die Situation zu verstehen. Dieser Prozess wird als „sekundäre Segmentierung“ bezeichnet, wobei das System seinen eigenen Denkprozess in distinkte Teile zerlegt, um zu sehen, ob sie logisch zusammenpassen. Wenn das System eine Diskrepanz zwischen dem, was es generiert hat, und den Fakten feststellt, die es besitzt, fährt es nicht einfach fort. Es kehrt in einer Schleife zurück, sammelt mehr Informationen und versucht es erneut. Dieser Zyklus setzt sich fort, bis die Differenz zwischen der vorgeschlagenen Antwort und den bekannten Fakten innerhalb eines sicheren, akzeptablen Bereichs liegt.
Das Papier betont, dass es hierbei nicht darum geht, die Maschine im Sinne von „mehr wissen“ intelligenter zu machen. Die zugrunde liegende Intelligenz der Maschine bleibt dieselbe. Die Änderung liegt darin, wie die Maschine diese Intelligenz nutzt. Derzeit leiden KI-Systeme oft unter dem, was der Autor als „Overthinking Drift“ (Überlegungs-Drift) bezeichnet. Dies geschieht, wenn ein System kontinuierlich Text generiert, der intern konsistent, aber faktisch falsch ist, weil es den Kontakt zum ursprünglichen Beweis verloren hat. Durch das Erzwingen eines Stopps, um die internen Gedanken mit der Außenwelt zu vergleichen, zielt der TME LLM OS darauf ab, diesen Drift zu verhindern. Das System ist darauf ausgelegt, das „leitende Anliegen“ (governing concern) der Aufgabe im Blick zu behalten, um sicherzustellen, dass jeder Schritt relevant für das ursprüngliche Ziel ist und auf zuverlässigen Daten basiert.
Ein wesentlicher Teil dieses Designs ist die Unterscheidung zwischen zwei Arten der Korrektur. Die erste findet unmittelbar innerhalb der aktuellen Aufgabe statt. Wenn das System einen Bericht schreibt und feststellt, dass es eine falsche Zahl verwendet hat, kann es dies sofort korrigieren, ohne seine grundlegende Programmierung zu ändern. Dies ist eine Laufzeitkorrektur. Die zweite Art der Korrektur findet über einen längeren Zeitraum statt. Wenn das System bei vielen verschiedenen Aufgaben wiederholt eine bestimmte Art von Fehler macht, werden diese Informationen gespeichert und genutzt, um das Langzeitgedächtnis des Systems oder seine zugrunde liegenden Regeln zu aktualisieren. Dies stellt sicher, dass die Maschine aus ihren Fehlern lernt, ohne instabil zu werden oder ihr Verhalten während einer einzelnen Konversation auf unvorhersehbare Weise zu ändern.
Der Vorschlag adresst auch das Thema Sicherheit und Kontrolle. In vielen aktuellen Systemen muss ein Nutzer manuell intervenieren, um eine Maschine daran zu hindern, eine gefährliche oder falsche Aktion auszuführen. Der TME LLM OS baut ein „kontrolliertes Freigabe-Gate“ in die Architektur ein. Dieses Gate fungt als letzte Kontrollinstanz. Bevor Code ausgeführt, eine physische Aktion genommen oder ein Text veröffentlicht wird, muss das System eine abschließende Prüfung bestehen. Wenn das System nicht verifizieren kann, dass die Aktion sicher und korrekt ist, wird es den Output nicht freigeben. Stattdessen wird es entweder nach weiteren Informationen fragen, seine Antwort mit Warnungen versehen oder die Aufgabe an einen menschlichen Operator übergeben. Dies schafft ein Sicherheitsnetz, das in den Entscheidungsprozess der Maschine selbst eingebaut ist, anstatt sich auf einen externen Beobachter zu verlassen, der jeden Fehler abfangen muss.
Der Autor stellt sorgfältig klar, dass dieses System nicht beansprucht, das menschliche Bewusstsein zu replizieren. Das Papier trennt explizit die funktionale Organisation der Maschine von der gelebten Erfahrung eines Menschen. Die Maschine „fühlt“ nicht das Bedürfnis, sich selbst zu korrigieren; sie folgt lediglich einem Satz von Regeln, die verlangen, dass sie ihre Arbeit überprüft. Das Ziel ist nicht, eine lebendige Maschine zu erschaffen, sondern eine zuverlässige. Indem das Papier die Operationen der Maschine in einer Schleife organisiert, die Reflexion und Korrektur beinhaltet, wird das System robuster gegenüber jenen Fehlern, die die künstliche Intelligenz derzeit plagen.
Das Papier vergleicht diese neue Architektur mit bestehenden Systemen, die von großen Technologieunternehmen und Forschungslaboren genutzt werden. Während diese Systeme über mächtige Werkzeuge für logisches Denken und Planung verfügen, fehlt ihnen oft die spezifische Organisationsstruktur, die die Informationsquelle von der Interpretation der Maschine trennt. Der TME LLM OS schlägt vor, dass wir durch das Hinzufügen dieser Struktur verbessern können, wie Maschinen von falschen Prämissen sich erholen, die Notwendigkeit für Nutzer verringern, sie ständig zu korrigieren, und die Gesamtkosten für die korrekte Ausführung einer Aufgabe senken. Der Autor deutet an, dass das wahre Maß für den Erfolg nicht nur darin liegt, wie schnell die Maschine arbeitet, sondern wie oft sie beim ersten Versuch die richtige Antwort liefert und wie sicher sie komplexe Aufgaben bewältigt.
Letztendlich ist dieser Vorschlag eine Hypothese darüber, wie man bessere KI bauen kann. Er legt nahe, dass der nächste Schritt in der Evolution der künstlichen Intelligenz nicht nur darin besteht, Modelle größer oder leistungsfähiger zu machen, sondern ihre internen Prozesse disziplinierter zu gestalten. Durch die Einführung eines Pausenmoments zur Reflexion und eines strengen Gates für die Freigabe zielt der TME LLM OS darauf ab, Agenten zu schaffen, die nicht nur fähig, sondern auch vertrauenswürdig sind. Das Papier schließt mit dem Gedanken, dass das System zwar nicht das Rätsel des Bewusstseins löst, aber einen praktischen Weg aufzeigt, um Maschinen zu bauen, die ihre eigenen Fehler korrigieren können, in der Realität verwurzelt bleiben und sicher in der realen Welt agieren können. Die Arbeit bleibt ein Vorschlag – eine Anleitung für eine neue Art von Maschinenarchitektur, die bisher noch nicht vollständig getestet und gegen die fortschrittlichsten derzeit im Einsatz befindlichen Systeme verglichen wurde.
Ertrinken Sie in Arbeiten in Ihrem Fachgebiet?
Erhalten Sie tägliche Digests der neuesten Arbeiten passend zu Ihren Forschungsbegriffen — mit technischen Zusammenfassungen, in Ihrer Sprache.