Beyond Probabilistic Similarity: Structural, Temporal, and Causal Limitations of Retrieval-Augmented Generation in the Legal Domain
Dit artikel betoogt dat de terugkerende tekortkomingen van Retrieval-Augmented Generation in het juridische domein voortvloeien uit een fundamentele architecturale mismatch tussen probabilistische retrieval en de hiërarchische, temporele en causale aard van juridische kennis, en stelt een nieuw deterministisch kader voor dat gecentreerd is rond ontologische primatie, event-reificatie, bitemporale correctheid en deterministische interactieprotocollen om deze structurele beperkingen op te lossen.
Oorspronkelijk artikel gelicentieerd onder CC BY 4.0 (http://creativecommons.org/licenses/by/4.0/). Dit is een AI-gegenereerde uitleg van het onderstaande artikel. Het is niet geschreven of goedgekeurd door de auteurs. Raadpleeg het oorspronkelijke artikel voor technische nauwkeurigheid. Lees de volledige disclaimer
Het Grote Probleem: De "Vloeiende Leugenaar"
Stel je een briljante rechtenstudent voor die perfecte essays kan schrijven en met totale zelfverzekerdheid spreekt. Deze student heeft echter een gevaarlijke gewoonte: wanneer hij het antwoord niet weet, verzint hij feiten die echt klinken. Hij kan een rechtszaak citeren die nooit heeft plaatsgevonden of een wet aanhalen die tien jaar geleden al is ingetrokken.
In de juridische wereld is dit precies wat huidige AI-systemen doen. Ze "confabuleren" (verzinnen dingen). Het artikel stelt dat het simpelweg "slimmer" maken van de AI of het geven van meer data dit probleem niet zal oplossen. Het probleem is niet de intelligentie van de AI; het is de bibliotheek waaruit de AI put.
Het Kernargument: Een Verkeerde Match met de Bibliotheek
Het artikel stelt dat juridische kennis niet lijkt op een normale bibliotheek (zoals Wikipedia of een nieuwswebsite). Het is meer als een levende, ademende machine met strikte regels.
Om te begrijpen waarom de huidige AI faalt, vergelijken de auteurs juridische kennis met drie specifieke zaken:
De Russische Matroesjka-pop (Structuur):
- De Realiteit: Wetten zijn gebouwd als Russische matroesjka-poppen. Een specifieke regel (de kleine pop) maakt alleen zin als je weet in welke paragraaf deze zit (de middelgrote pop), die op zijn beurt alleen zin heeft als je weet bij welke Artikel het hoort (de grote pop). Als je de kleine pop eruit haalt en deze alleen laat zien, is dat misleidend.
- De AI-fout: Huidige AI behandelt wetten als een stapel losse papieren. Het pakt een enkele zin omdat die relevant klinkt, maar vergeet de "ouderregels" die die zin hun betekenis geven. Het artikel noemt dit "Mereologische Blindheid" (blindheid voor de deel-geheel relatie).
De Tijdmachine (Tijd):
- De Realiteit: Wetten veranderen voortdurend. Een wet kan in 2020 zijn geschreven, maar wordt pas echt effectief in 2022. Of een rechter kan een oude wet in 2024 op een nieuwe manier interpreteren zonder de tekst te veranderen.
- De AI-fout: Huidige AI laat je meestal de "huidige" versie van de wet zien, zelfs als je vroeg naar de wet in 2021. Het begrijpt niet dat de wet destijds anders was. Het mist ook wanneer een uitspraak van een rechter de betekenis van een wet heeft veranderd zonder de woorden te wijzigen. Het artikel noemt dit "Diachrone Blindheid" (blindheid voor tijd).
Het Papierspoor (Causaliteit):
- De Realiteit: In het recht kun je niet simpelweg zeggen: "Dit is de regel." Je moet bewijzen wie de regel heeft gemaakt, wanneer zij dat deden, en welke officiële handeling de verandering teweegbracht. Elke wet heeft een "geboortebewijs" en een "geschiedenis van operaties".
- De AI-fout: Huidige AI geeft je het antwoord, maar verbergt de geschiedenis. Het zegt: "Hier is de regel," maar laat niet de keten van officiële documenten zien die bewijzen dat de regel geldig is. Het artikel noemt dit "Causale Ondoorzichtigheid" (het verbergen van de oorzaak).
De Oplossing: Het Bouwen van een "Deterministische" Motor
De auteurs betogen dat we moeten stoppen met proberen dit op te lossen door de AI beter te laten raden. In plaats daarvan moeten we de architectuur (het blauwdruk) van hoe het systeem werkt, veranderen.
Ze stellen een nieuwe aanpak voor genaamd "Deterministic-by-Design" (ontwerpmatig deterministisch).
Denk aan het verschil tussen een waarzegster en een GPS:
- De Waarzegster (Huidige AI): Kijkt naar de wolken (patrons in tekst) en raadt waar je bent. Meestal heeft ze gelijk, maar soms hallucineert ze een berg die er niet is.
- De GPS (Nieuwe Aanpak): Gebruikt een strikte kaart met exacte coördinaten. Het raadt niet. Als de weg is afgesloten, zegt het: "Weg afgesloten." Als er een wegwerkzaamheid is, toont het de omleiding. Het volgt een rigide set regels om te garanderen dat het nooit liegt over de kaart.
Om deze "GPS voor het Recht" te bouwen, stelt het artikel vier strikte regels voor:
- Ontologische Primaat (De Kaart Eerst): Begin niet met tekst, maar begin met de structuur. Het systeem moet weten dat "Artikel 5" de ouder is van "Sectie 2" voordat het ooit de woorden leest.
- Event Reification (Het Logboek): Elke keer dat een wet verandert, moet het systeem de specifieke "gebeurtenis" (zoals een handtekening op een document) registreren die de verandering veroorzaakte. Het behandelt de verandering als een echt object, niet alleen als een datumstempel.
- Bitemporale Correctheid (Twee Klokken): Het systeem moet twee tijden bijhouden:
- Wanneer de wet werd opgeschreven (Transactietijd).
- Wanneer de wet daadwerkelijk van kracht werd (Geldigheidstijd).
- Voorbeeld: Een wet die in januari is ondertekend, kan pas in maart van kracht worden. Het systeem moet het verschil weten.
- Deterministische Protocollen (De Verkeersregels): De AI mag niet vrijelijk "improviseren" bij zijn zoektocht. Het moet specifieke, vooraf goedgekeurde instrumenten gebruiken om wetten op te zoeken. Als het het antwoord niet kan vinden met behulp van de strikte regels, moet het zeggen "Ik weet het niet" in plaats van iets te verzinnen.
Wat Dit Voor U Betekent
Het artikel concludeert dat we voor hoogwaardig juridisch werk (zoals pleiten in de rechtszaal) niet kunnen vertrouien op AI die "gokt" op basis van gelijkenis. We hebben systemen nodig die gebouwd zijn als een rigide, controleerbare database.
- Het Goede Nieuws: We hebben de technologie om dit te bouwen (met behulp van "Neuro-Symbolische" AI, die slim raden combineert met strikte regels).
- De Haken en ogen: Het is duur en moeilijk om te bouwen. Het vereist dat juristen helpen bij het in kaart brengen van de regels en het perfectioneren van de datastructuur voordat de AI er ook maar iets mee mag doen.
- Het Doel: Om te bewegen van een systeem dat "vloeiend maar gevaarlijk" is naar een systeem dat "saai maar veilig" is. Als het systeem het antwoord niet kan vinden binnen de strikte regels, geeft het dat toe, in plaats van de rechter te liegen.
Kortom: Het artikel zegt dat we moeten stoppen met het recht te behandelen als een gesprek en het moeten gaan behandelen als een precisie-engineeringproject. We moeten de "kaart" bouwen voordat we de AI de auto laten besturen.
Verdrinkt u in papers in uw vakgebied?
Ontvang dagelijkse digests van de nieuwste papers die bij uw onderzoekswoorden passen — met technische samenvattingen, in uw taal.