Less Back-and-Forth: A Comparative Study of Structured Prompting
Dit artikel toont aan dat het gebruik van met checklists verbeterde prompts de kwaliteit van antwoorden van grote taalmodellen aanzienlijk verbetert voor uiteenlopende taken, terwijl het tegelijkertijd de inspanning van de gebruiker en het tokenverbruik verlaagt in vergelijking met ruwe prompts of prompts met verhelderende vragen.
Oorspronkelijk artikel gelicentieerd onder CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/). Dit is een AI-gegenereerde uitleg van het onderstaande artikel. Het is niet geschreven of goedgekeurd door de auteurs. Raadpleeg het oorspronkelijke artikel voor technische nauwkeurigheid. Lees de volledige disclaimer
Stel je voor dat je een zeer getalenteerde, maar iets letterlijk ingestelde assistent inhuurt om je te helpen met een groot project. Je wilt dat ze een samenvatting schrijven, een reis plannen, een complex idee uitleggen of wat code schrijven.
Dit artikel is in wezen een test om te zien hoe je tegen deze assistent moet praten om met de minste wisselwerking het beste resultaat te krijgen.
De onderzoekers vergeleken drie verschillende manieren om instructies (zogenaamde 'prompts') te geven aan drie verschillende AI-assistenten (ChatGPT, Claude en Grok). Hieronder volgt een uiteenzetting van hun experiment en wat ze ontdekten, gebruikmakend van eenvoudige analogieën.
De Drie Manieren van Vragen
De "Rauwe" Prompt (Het Vage Fluister):
- Wat het is: Je geeft een korte, basisinstructie, zoals "Plan een vakantie" of "Vat dit samen."
- De Analogie: Dit is alsof je naar een chef-kok toe loopt en zegt: "Maak me een avondmaal." Je hebt hen niet verteld wat je lekker vindt, wat je budget is, of je allergieën hebt. De chef moet raden. Ze maken misschien iets lekkers, of misschien iets dat je haat, waardoor je het terug naar de keuken moet sturen.
De "Controlelijst" Prompt (Het Gedetailleerde Recept):
- Wat het is: Je herschrijft je verzoek met een eenvoudige controlelijst die drie dingen toevoegt: Rol (wie de AI is), Context (voor wie en waarom) en Formaat (hoe het antwoord eruit moet zien).
- De Analogie: Dit is alsof je de chef een specifiek receptkaartje geeft: "Je bent een Franse patissier. Ik ben vegetariër met een budget van 50 dollar. Ik heb een dessert nodig dat eruitziet als een bloem en op een klein bord past." De chef weet direct precies wat ze moeten doen.
De "Verhelderende Vraag" Prompt (Het Interview):
- Wat het is: Je vraagt de AI om te stoppen en jou 1 tot 3 vragen te stellen voordat ze een antwoord geeft.
- De Analogie: Dit is alsof de chef zegt: "Wacht, voordat ik ga koken, kun je me je budget en dieetbeperkingen vertellen?" Je antwoordt, en dan koken ze. Het zorgt ervoor dat ze de juiste informatie hebben, maar het kost extra tijd en conversatierondes.
Wat Gebeurde er in de Test?
De onderzoekers testten deze drie methoden op vier soorten taken: teksten samenvatten, reizen plannen, concepten uitleggen en code schrijven. Ze scoorden de resultaten op basis van hoe correct, duidelijk en bruikbaar de antwoorden waren.
De Winnaar: De Controlelijst Prompt
- Kwaliteit: De "Controlelijst"-methode leverde de antwoorden van de hoogste kwaliteit op. De AI begreep de taak perfect en volgde alle regels.
- Inspanning: Het was ook het snelst. Omdat de instructies zo duidelijk waren, kreeg de AI het in één keer goed. Je hoefde geen lang gesprek te voeren of het terug naar de keuken te sturen.
- Het Resultaat: Het was het "sweet spot". Je kreeg een perfect maaltijd zonder te hoeven wachten tot de chef je vragen stelde, en zonder een slecht gerecht te krijgen dat je terug moest sturen.
De Tweede: De Verhelderende Vraag
- Kwaliteit: Deze antwoorden waren beter dan de vage "Rauwe" prompts, maar ze konden de Controlelijst-methode niet helemaal evenaren.
- Inspanning: Deze methode kostte de meeste inspanning. Omdat de AI moest stoppen, vragen stellen, wachten op je antwoord en dan pas antwoorden, duurde het bijna twee keer zo lang in termen van "rondes" (gesprekken) om een goed resultaat te krijgen.
- Het Resultaat: Het was behulpzaam, maar het voelde als een langere, vermoeiender conversatie.
De Verliezer: De Rauwe Prompt
- Kwaliteit: Dit waren de zwakste antwoorden. Ze waren vaak onvolledig, vaag of misten het doel.
- Inspanning: Verrassend genoeg toonden de gegevens aan dat deze slechts één ronde kostten, maar de onderzoekers merkten op dat je in het echte leven waarschijnlijk om herzieningen zou blijven vragen omdat het eerste antwoord meestal slecht was.
- Het Resultaat: Je kreeg een snel antwoord, maar het was waarschijnlijk niet wat je eigenlijk wilde.
De Grote Leerervaring
Het artikel concludeert dat het besteden van een beetje extra tijd aan het schrijven van een gestructureerde prompt (met behulp van een eenvoudige controlelijst) je later veel tijd bespaart.
Denk eraan als het inpakken van een koffer:
- Rauwe Prompt: Je gooit kleding willekeurig in. Je komt op je bestemming aan en besef je dat je je schoenen bent vergeten. Je moet thuis bellen om het op te lossen (extra inspanning).
- Verhelderende Vraag: Je belt thuis voordat je gaat inpakken om te vragen: "Heb ik schoenen nodig?" Dan pak je in. Het werkt, maar het kost tijd om het gesprek te voeren.
- Controlelijst Prompt: Je gebruikt een inpaklijst voordat je begint. Je weet precies wat je moet meenemen. Je komt aan en alles is direct perfect.
De studie suggereert dat voor de meeste mensen en de meeste taken, het simpelweg organiseren van je verzoek met een duidelijke structuur (Rol, Context, Formaat) de meest efficiënte manier is om geweldige resultaten van AI te krijgen, waardoor de behoefte aan eindeloze wisselwerking en correcties wordt vermeden.
Verdrinkt u in papers in uw vakgebied?
Ontvang dagelijkse digests van de nieuwste papers die bij uw onderzoekswoorden passen — met technische samenvattingen, in uw taal.