Five Fatal Assumptions: Why T-Shirt Sizing Systematically Fails for AI Projects
Diese Arbeit zeigt auf, dass die T-Shirt-Sizing-Methode bei KI-Projekten aufgrund von fünf falschen Annahmen systematisch versagt, und schlägt stattdessen einen iterativen „Checkpoint Sizing"-Ansatz vor, der Lernfortschritte und explizite Entscheidungsgatter in den Vordergrund stellt.
Originalarbeit lizenziert unter CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/). Dies ist eine KI-generierte Erklärung des untenstehenden Papers. Sie wurde nicht von den Autoren verfasst oder gebilligt. Für technische Genauigkeit konsultieren Sie das Originalpaper. Vollständigen Haftungsausschluss lesen
Warum das "T-Shirt-Größen"-System bei KI-Projekten scheitert
(Eine einfache Erklärung für alle, die nicht in der KI-Forschung arbeiten)
Stellen Sie sich vor, Sie planen den Bau eines Hauses. In der klassischen Softwareentwicklung nutzen Manager oft eine Methode namens "T-Shirt-Sizing". Das klingt lustig, ist aber sehr logisch:
- Klein (S): Ein kleines Gartenhäuschen.
- Mittel (M): Ein normales Einfamilienhaus.
- Groß (L): Ein mehrstöckiges Apartmentgebäude.
- Extra Groß (XL): Ein Wolkenkratzer.
Die Idee dahinter: "Wir haben schon einmal ein Einfamilienhaus gebaut. Das dauerte 6 Monate. Also dauert das neue, ähnliche Haus auch etwa 6 Monate."
Das Problem: Die Autoren dieses Papiers (von Cisco) sagen: Diese Logik funktioniert bei Künstlicher Intelligenz (KI) gar nicht. Wenn Sie versuchen, KI-Projekte wie normale Software zu planen, landen Sie in einer Katastrophe. Projekte, die als "Klein" geplant waren, werden zu "Riesigen", die Monate länger dauern und das Budget sprengen.
Warum? Weil KI fünf fundamentale Regeln bricht, auf denen das T-Shirt-System basiert. Hier sind diese fünf "tödlichen Annahmen" – erklärt mit einfachen Metaphern:
1. Die Annahme: "Doppelte Arbeit = Doppelte Größe" (Lineares Wachstum)
- Die alte Regel: Wenn Sie ein Haus bauen und die Fläche verdoppeln, brauchen Sie ungefähr doppelt so viel Ziegelsteine und Zeit. Das ist linear.
- Die KI-Realität: KI ist wie das Klettern auf einem Berg, der steiler wird, je höher man kommt.
- Wenn Sie eine KI von 85 % auf 90 % Genauigkeit bringen, ist das noch machbar.
- Aber von 90 % auf 99 %? Das ist nicht mehr nur "ein bisschen mehr Arbeit". Das ist wie der Versuch, den Berg mit einem Flugzeug zu überqueren. Der Aufwand explodiert exponentiell.
- Der Vergleich: Bei T-Shirts ist ein XL-Shirt nur ein bisschen größer als ein L-Shirt. Bei KI ist der Unterschied zwischen "ganz gut" und "perfekt" wie der Unterschied zwischen einem Spaziergang und einem Marsch zum Mond.
2. Die Annahme: "Erfahrung zählt" (Wiederholbarkeit)
- Die alte Regel: "Wir haben schon einmal einen Chatbot für den Kundenservice gebaut. Also wissen wir, wie lange ein Chatbot für die Personalabteilung dauert."
- Die KI-Realität: Jeder Datensatz ist ein neues, unbekanntes Land.
- Ein Chatbot für Technik-Support lernt andere Wörter und Fehler als einer für HR.
- In der KI tauchen oft "Unbekannte Unbekannte" auf: Daten sind korrupt, Vorurteile (Bias) verstecken sich erst in der Mitte des Projekts, oder die KI halluziniert plötzlich.
- Der Vergleich: Es ist, als würden Sie sagen: "Ich kann gut Auto fahren, also kann ich auch sofort ein Flugzeug fliegen." Die Erfahrung hilft, aber die Regeln des Spiels haben sich komplett geändert.
3. Die Annahme: "Mehr Leute = Schnellere Arbeit" (Austauschbarkeit)
- Die alte Regel: Wenn ein Programm 8 Wochen dauert, schaffen 4 Entwickler es in 2 Wochen. (Das ist die klassische "Brooks'sche Regel", die bei normaler Software oft funktioniert).
- Die KI-Realität: KI hat unumgängliche Wartezeiten, die man nicht wegkaufen kann.
- Man kann nicht 100 Leute nehmen, um das "Trainieren" eines Modells zu beschleunigen. Das Training braucht Rechenzeit, egal wie viele Leute davor sitzen.
- Man kann nicht 100 Leute nehmen, um zu warten, ob die KI in einem langen Gespräch den Faden nicht verliert.
- Der Vergleich: Sie können nicht 100 Hebammen nehmen, um ein Baby in 10 Minuten zur Welt zu bringen. Die Schwangerschaft hat eine natürliche Mindestzeit. Bei KI gibt es diese "natürlichen Wartezeiten" für Datenverarbeitung und Tests.
4. Die Annahme: "Man kann alles in Teile zerlegen" (Zerlegbarkeit)
- Die alte Regel: Ein Haus hat Fundament, Wände und Dach. Man kann vier Teams bauen: Team A macht das Fundament, Team B die Wände. Am Ende schrauben sie es zusammen.
- Die KI-Realität: KI ist wie ein Wasserspiel, bei dem alles miteinander verbunden ist.
- Wenn Sie die Daten ändern (das Fundament), muss das Modell neu trainiert werden (die Wände), und die Anweisungen (Prompt) müssen komplett neu geschrieben werden (das Dach).
- Alles hängt eng zusammen. Eine kleine Änderung an einer Stelle kann das ganze System zum Einsturz bringen.
- Der Vergleich: Bei einem normalen Haus können Sie das Dach bauen, während das Fundament trocknet. Bei KI ist es wie ein Orchester: Wenn der Geiger falsch spielt, muss der ganze Dirigent neu dirigieren. Man kann die Teile nicht isoliert planen.
5. Die Annahme: "Wenn es fertig ist, ist es fertig" (Feste Ziele)
- Die alte Regel: Ein Programm ist fertig, wenn alle Tests grün leuchten. Punkt.
- Die KI-Realität: Das Ziel bewegt sich wie ein Fluchender Ball.
- Die KI ist "fertig" und liefert gute Antworten. Aber dann sagt die Rechtsabteilung: "Aber sie lügt zu oft!" oder "Sie ist zu voreingenommen!".
- Plötzlich muss das Projekt neu gestartet werden, um diese neuen Sicherheitsregeln zu erfüllen. Was als "Klein" (S) begann, wird über Nacht zu "Extra Groß" (XL).
- Der Vergleich: Sie bauen ein Auto. Es fährt. Aber dann verlangt der Gesetzgeber neue Bremsen. Das Auto ist nicht mehr "fertig", es muss neu konstruiert werden.
Die Lösung: "Checkpoint-Sizing" (Der Weg der Entdeckung)
Da wir die T-Shirt-Größe nicht mehr am Anfang festlegen können, schlagen die Autoren eine neue Methode vor: Checkpoint-Sizing.
Stellen Sie sich vor, Sie planen eine Reise in den Dschungel.
- T-Shirt-Sizing wäre: "Wir gehen 3 Tage lang, dann sind wir am Ziel." (Gefährlich, wenn Sie sich verirren).
- Checkpoint-Sizing ist: "Wir gehen zu einem bestimmten Punkt (Checkpoint). Dort prüfen wir: Ist der Weg noch passierbar? Haben wir genug Wasser? Sehen wir eine Gefahr?"
So funktioniert es:
- Start: Sie machen eine Hypothese ("Wir brauchen vielleicht 2 Monate").
- Checkpoint 1 (Daten): Sind die Daten gut genug? Wenn nein -> Projekt stoppen oder ändern.
- Checkpoint 2 (Test): Funktioniert die KI in kurzen Gesprächen?
- Checkpoint 3 (Sicherheit): Halluziniert sie zu viel?
- Entscheidung: An jedem Punkt entscheiden Sie neu: Weitermachen, Umleiten oder Abbrechen.
Das Fazit:
Bei KI-Projekten können Sie nicht am Anfang wissen, wie groß das "T-Shirt" sein wird. Sie müssen es während des Bauens herausfinden. Anstatt stur an einem alten Plan festzuhalten, sollten Sie kleine Meilensteine setzen, an denen Sie die Realität prüfen und Ihren Plan anpassen.
Kurz gesagt: Hören Sie auf, KI-Projekte wie Hausbau zu planen. Planen Sie sie wie eine wissenschaftliche Expedition, bei der Sie erst wissen, wie weit Sie kommen, wenn Sie den nächsten Hügel überquert haben.
Ertrinken Sie in Arbeiten in Ihrem Fachgebiet?
Erhalten Sie tägliche Digests der neuesten Arbeiten passend zu Ihren Forschungsbegriffen — mit technischen Zusammenfassungen, in Ihrer Sprache.