Enhancing Judgment Document Generation via Agentic Legal Information Collection and Rubric-Guided Optimization

Stel je de taak van een rechter voor als het schrijven van een zeer strikt, hoog-risico recept voor een juridische beslissing. Om dit "recept" (het vonnisdocument) te schrijven, heeft de rechter twee dingen nodig:

1. De juiste ingrediënten: Ze moeten de exacte wetten en eerdere rechtszaken (statuten en jurisprudentie) vinden die van toepassing zijn op het specifieke misdrijf.
2. De perfecte kookmethode: Ze moeten die ingrediënten mengen met de feiten van de zaak om een logisch, professioneel en juridisch onderbouwde eindgerecht te creëren.

Op dit moment maken computers die dit proberen vaak twee grote fouten: ze pakken de verkeerde ingrediënten (ze hallucineren wetten die niet bestaan) of ze koken ze op een manier die geen logisch zin heeft.

Het artikel introduceert Judge-R1, een nieuw computersysteem dat is ontworpen om deze problemen op te lossen. Denk hierbij aan een "Super-Kok" die een twee-staps trainingsproces gebruikt om de beste juridische schrijver mogelijk te worden.

Stap 1: De "Slimme Koper" (Agente verzameling van juridische informatie)

Voordat het systeem schrijft, moet het de juiste wetten vinden.

• De oude manier: Stel je een winkelier voor die een vaag beschrijving als "er is iets slechts gebeurd" intypt in een zoekmachine. Ze krijgen een enorme hoop resultaten terug, waarvan veel irrelevant of lichtelijk verkeerd zijn.
• De Judge-R1 manier: Dit systeem gebruikt een Slimme Koper Agent. In plaats van alleen te zoeken, treedt deze agent op als een detective. Het breekt het rommelige verhaal van het misdrijf op in specifieke vragen (bijvoorbeeld: "Wat is de wet over diefstal?" "Wat is de straf voor dit specifieke bedrag?"). Het gaat vervolgens naar meerdere "winkels" (juridische databases) om de exacte statuten en eerdere zaken te vinden die nodig zijn.
• Het resultaat: Het filtert het ruis eruit en brengt een perfecte, hoogwaardige mand met juridisch bewijsmateriaal terug, zodat de rechter de juiste "ingrediënten" heeft voordat ze beginnen met koken.

Stap 2: De "Strikte Eetcriticus" (Optimalisatie geleid door rubrieken)

Zodra het systeem de ingrediënten heeft, moet het het vonnis schrijven.

• De oude manier (Supervised Fine-Tuning): Stel je voor dat je een student leert schrijven door hen 1.000 voorbeelden van goede opstellen te tonen. De student leert de stijl en het formaat perfect na te bootsen. Ze kunnen echter nog steeds logische fouten maken of feiten verzinnen, omdat ze alleen de uitstraling van het opstel nabootsen en niet de regels begrijpen.
• De Judge-R1 manier: Na de initiële stijltraining gaat het systeem een fase van "Versterkend Leren" in. Hier speelt het een spel waarbij het vele verschillende versies van het vonnis schrijft.
  • Een Strikte Eetcriticus (een digitale rubriek) proeft elke versie.
  • De criticus kijkt niet alleen naar hoe chique de woorden zijn. Het controleert: Heb je de juiste wet gebruikt? Is de rekenkunde van de boete correct? Is de logica waterdicht? Heb je jezelf te vaak herhaald?
  • Als het vonnis juridisch verkeerd is, krijgt het systeem een "slechte score". Als het perfect is, krijgt het een "goede score".
  • Het systeem leert van deze scores en past voortdurend zijn "recept" aan totdat het consequent vonnissen produceert die niet alleen goed geschreven zijn, maar juridisch accuraat en logisch waterdicht.

Het eindresultaat

Het artikel testte deze "Super-Kok" tegen andere topcomputersystemen met behulp van een standaard juridische test genaamd JuDGE.

• Het vinden van de ingrediënten: Judge-R1 vond de juiste wetten veel beter dan eerdere systemen, die vaak cruciale details misten of irrelevante grepen deden.
• Het schrijven van het vonnis: De uiteindelijke documenten die door Judge-R1 werden geproduceerd, waren nauwkeuriger in hun juridische conclusies, hadden minder verzonden citaten en volgden de strikte logische structuur die door rechtbanken wordt vereist beter dan de concurrentie.

Kortom, Judge-R1 probeert niet alleen te klinken als een advocaat; het gebruikt een slimme zoekstrategie om de waarheid te vinden en een strikt scoresysteem om ervoor te zorgen dat de logica standhoudt, wat resulteert in een veel betrouwbaarder hulpmiddel voor het genereren van juridische vonnissen.