CINDI: Conditional Imputation and Noisy Data Integrity with Flows in Power Grid Data

Die Arbeit stellt CINDI vor, ein unüberwachtes probabilistisches Framework auf Basis bedingter normalisierender Flows, das Anomalieerkennung und Imputation in einem einzigen End-to-End-System vereint, um die Datenintegrität in verrauschten multivariaten Zeitreihen von Stromnetzen durch die Modellierung der exakten bedingten Wahrscheinlichkeitsverteilung wiederherzustellen.

David Baumgartner, Helge Langseth, Heri Ramampiaro

Veröffentlicht 2026-03-13
📖 4 Min. Lesezeit☕ Kaffeepausen-Lektüre

Each language version is independently generated for its own context, not a direct translation.

Das Problem: Ein kaputtes Puzzle im Stromnetz

Stellen Sie sich das Stromnetz wie ein riesiges, komplexes Puzzle vor, das rund um die Uhr läuft. Die Stromversorger müssen genau wissen, wie viel Energie verloren geht (z. B. durch Wärme in den Leitungen), um Preise zu berechnen und das Netz stabil zu halten.

Das Problem ist: Die Daten, die von den Sensoren kommen, sind oft schmutzig.

  • Ein Sensor fällt aus und sendet Nullen.
  • Ein Kabel wackelt und sendet verrauschte Zahlen.
  • Ein menschlicher Fehler führt zu falschen Einträgen.

Wenn man versucht, mit diesen schmutzigen Daten ein Vorhersagemodell zu trainieren, ist das, als würde man versuchen, ein Auto zu fahren, während die Windschutzscheibe voller Schlamm ist. Man sieht die Straße nicht richtig, und das Auto (das Modell) macht Fehler.

Die alte Lösung: Zwei getrennte Helfer

Bisher haben Forscher oft zwei getrennte Schritte gemacht:

  1. Der Detektiv: Ein Programm sucht nach den verdächtigen, falschen Datenpunkten.
  2. Der Reparaturmechaniker: Ein anderes Programm versucht, diese Lücken mit einer einfachen Schätzung zu füllen (z. B. „Nimm den Wert von gestern und morgen und ziehe eine gerade Linie dazwischen").

Der Nachteil: Diese beiden arbeiten nicht zusammen. Der Reparaturmechaniker weiß nicht, was der Detektiv genau gesehen hat. Oft wird dabei die natürliche Struktur des Stromnetzes zerstört. Es ist, als würde man ein kaputtes Mosaik mit Kleber und Pappe flicken, statt die fehlenden Steine aus demselben Steinbruch zu holen.

Die neue Lösung: CINDI – Der „Alles-in-einem"-Künstler

Die Autoren haben CINDI entwickelt. Das ist ein intelligenter, probabilistischer Rahmen (ein mathematisches System), der Detektiv und Mechaniker in einer Person vereint.

Hier ist, wie CINDI funktioniert, mit einer einfachen Analogie:

1. Der „Musiker", der das Lied kennt

Stellen Sie sich CINDI als einen genialen Jazzmusiker vor, der das Lied des Stromnetzes auswendig kennt. Er weiß genau, wie die Melodie (die Daten) normalerweise klingt.

  • Er hört sich die Musik an (die Daten).
  • Wenn er eine Note hört, die völlig falsch klingt (ein Anomalie oder Fehler), weiß er sofort: „Das passt nicht in das Lied!"

2. Das „Was-wäre-wenn"-Spiel

Anstatt einfach eine gerade Linie zu zeichnen (wie ein einfacher Reparaturmechaniker), fragt CINDI: „Wenn dieser Fehler nicht da wäre, wie hätte die Melodie hier klingen müssen, damit sie perfekt zum Rest des Songs passt?"

CINDI nutzt eine Technik namens „Conditional Normalizing Flows". Das klingt kompliziert, ist aber im Grunde wie ein 3D-Drucker für Daten:

  • Er kennt die Form des „perfekten" Stromnetzes (die Wahrscheinlichkeitsverteilung).
  • Wenn ein Datenpunkt fehlt oder falsch ist, druckt er nicht einfach etwas Beliebiges. Er druckt die wahrscheinlichste Version, die physikalisch und statistisch Sinn ergibt.
  • Er berücksichtigt dabei den Kontext: Was war davor passiert? Was kommt danach?

3. Der iterative Prozess (Das Schleifen-Schleifen)

CINDI macht das nicht nur einmal. Es ist wie ein Bildhauer, der an einem Marmorblock arbeitet:

  1. Schritt 1: Er modelliert das Lied mit den aktuellen (schmutzigen) Daten.
  2. Schritt 2: Er findet die Stellen, die „falsch" klingen, und ersetzt sie durch seine beste Schätzung.
  3. Schritt 3: Er nimmt diese verbesserte Version und trainiert sein Modell erneut darauf.
  4. Schritt 4: Da das Modell jetzt auf saubereren Daten trainiert wurde, versteht es das Lied noch besser und findet noch mehr kleine Fehler.

Dieser Kreislauf wiederholt sich, bis das Bild perfekt ist.

Das Ergebnis: Warum ist das wichtig?

Die Forscher haben CINDI mit echten Daten aus einem norwegischen Stromnetz getestet.

  • Das Ergebnis: CINDI war besser als alle anderen Methoden (wie einfache lineare Interpolation oder andere KI-Modelle).
  • Der Clou: Selbst wenn die Daten sehr stark beschädigt waren (bis zu 13 % Fehler), konnte CINDI das Netz so weit reparieren, dass Vorhersagen wieder sehr genau wurden.
  • Ein interessanter Fund: Manchmal ist es sogar besser, die kaputten Daten einfach zu ignorieren („Skip"), als sie schlecht zu reparieren. Aber CINDI ist so schlau, dass es weiß, wann es reparieren soll und wann es besser ist, die Lücke zu lassen.

Zusammenfassung in einem Satz

CINDI ist wie ein intelligenter Restaurator, der nicht nur sieht, wo ein altes Gemälde (das Stromnetz) beschädigt ist, sondern die fehlenden Farben basierend auf dem gesamten Kunstwerk so ergänzt, dass das Bild wieder lebendig und authentisch wirkt – und dabei lernt er mit jedem Pinselstrich noch besser, wie das Original aussieht.

Dies ermöglicht es Stromversorgern, verlässlichere Vorhersagen zu treffen, Geld zu sparen und das Stromnetz sicherer zu machen, selbst wenn die Sensoren mal wieder streiken.