Orchestrating Human-AI Software Delivery: A Retrospective Longitudinal Field Study of Three Software Modernization Programs
Deze longitudinale veldstudie toont aan dat het integreren van AI in een gecoördineerd workflow-platform voor mens-AI samenwerking, in plaats van het gebruik ervan als geïsoleerde hulpmiddelen, leidt tot aanzienlijke verbeteringen in snelheid, kwaliteit en dekking bij drie grote softwaremoderniseringsprogramma's.
Stel je voor dat software ontwikkelen een enorme bouwproject is. Je hebt een team van architecten, metselaars en inspecteurs die een gebouw moeten neerzetten.
Vroeger (de "oude manier") deden ze dit allemaal met de hand, met blauwdrukken op papier en veel overleg. Soms duurde het jaren, en als er een fout in de muren zat, merkten ze dat pas als het gebouw bijna klaar was.
Deze paper vertelt het verhaal van een bedrijf dat een nieuwe, slimme robot-assistent (AI) introduceerde om hen te helpen. Maar hier is het interessante deel: ze ontdekten dat het simpelweg "een robot geven" niet genoeg was. Je moest de robot ook in het team integreren en een nieuw bouwplan maken.
Hier is wat ze ontdekten, vertaald in alledaags taal:
1. Het probleem: De robot alleen is niet genoeg
In het begin (versie V1) gaven ze de robot de taak om alleen maar te helpen met het schrijven van code, alsof het een super-snel schrijfmachine was.
- Het resultaat: Het ging sneller om de muren op te bouwen, maar de kwaliteit zakte. De robot schreef snel, maar maakte veel fouten die later pas opvielen. Het was alsof je iemand laat bouwen die heel snel werkt, maar nooit controleert of de muren recht staan.
- De les: Een snelle robot die alleen maar "werkt" zonder in het grotere plaatje te kijken, maakt het proces soms rommeliger.
2. De oplossing: De "Orkestratie" (Het Dirigent)
De echte doorbraak kwam toen ze de robot niet meer alleen lieten werken, maar hem een dirigent gaven. Ze bouwden een nieuw systeem (Chiron) waarin de robot en de mensen samenwerkten in een strakke cyclus:
- Analyse: De robot leest het oude plan en begrijpt wat er moet gebeuren.
- Planning: De robot en mensen maken samen een gedetailleerd stappenplan.
- Bouwen: De robot bouwt, maar de mensen controleren tussendoor.
- Controle: Voordat het gebouw "klaar" is, kijkt de robot en het team samen of alles voldoet aan de eisen.
Dit noemen ze georkestreerde levering. Het is niet meer "robot werkt, mens kijkt toe", maar "robot en mens dansen samen op hetzelfde ritme".
3. De resultaten: Van chaos naar harmonie
Toen ze dit nieuwe systeem (versie V4) toepasten op drie grote projecten (een bank, een groot boekhoudsysteem en een hypotheek-app), gebeurde er magisch veel:
- Snelheid: Wat vroeger 36 weken duurde, duurde nu nog maar 9 weken. Dat is bijna 4 keer sneller!
- Kwaliteit: Vroeger zaten er veel fouten in het eindresultaat dat de klant kreeg. Nu waren er 4 keer minder fouten.
- Kosten: Omdat het zo snel ging en minder fouten waren, hadden ze minder mensen nodig om het project te managen. Het was alsof ze met een klein team een gigantisch project afkregen dat vroeger een heel leger nodig had.
4. De belangrijkste les: Het is niet de robot, het is het ritme
De paper concludeert iets heel belangrijks:
De grootste winst kwam niet omdat de robot "slimmer" werd, maar omdat ze de workflow veranderden.
- In het begin (V1) was de robot een snelle, maar ongeduldige werknemer die fouten maakte.
- Aan het einde (V4) was de robot een gecoördineerde teamspeler die samen met mensen controleerde, plande en verbeterde voordat er fouten ontstonden.
Samenvattend in één metafoor:
Stel je voor dat je een orkest hebt.
- De oude manier: Iedereen speelt zijn eigen instrument, maar niemand luistert naar elkaar. Het klinkt luid, maar niet mooi.
- De eerste AI-versie: Je hebt een robot die super-snel viool speelt, maar de rest van het orkest houdt niet mee. Het klinkt als een chaos van snelle noten.
- De uiteindelijke versie (V4): Je hebt een dirigent (het nieuwe systeem) die de robot en de mensen in de gaten houdt. De robot speelt snel, maar precies op het juiste moment, en de mensen controleren of het harmonieert. Het resultaat is een prachtig, snel en foutloos concert.
Kortom: AI is geweldig, maar het werkt pas echt goed als je het niet alleen als een "snelle schrijver" gebruikt, maar als een integraal onderdeel van een goed georganiseerd teamproces.
Verdrinkt u in papers in uw vakgebied?
Ontvang dagelijkse digests van de nieuwste papers die bij uw onderzoekswoorden passen — met technische samenvattingen, in uw taal.