From Punishment to Protection: Charting Six Decades of U.S. Juvenile Justice Through Topic Modeling and LLM-Assisted Analysis

Sintesi Tecnica: Dalla Punizione alla Protezione: Tracciare Sei Decenni di Giustizia Minorile negli Stati Uniti attraverso il Topic Modeling e l'Analisi Assistita da LLM

Problema
Il contenzioso relativo alla giustizia minorile negli Stati Uniti comprende due flussi distinti: i casi di delinquenza (giovani accusati di crimini) e i casi di tutela dell'infanzia (bambini a rischio all'interno delle famiglie). Negli ultimi cinquant'anni, questi flussi si sono evoluti drasticamente, eppure la lettura dottrinale tradizionale fatica a identificare modelli di lungo periodo attraverso le oltre 60.000 opinioni d'appello che spaziano dal 1970 al 2025. Le ricerche esistenti si affidano a dati amministrativi (arresti, carichi di lavoro) o alla dottrina politica, nessuno dei quali traccia come siano cambiate nel tempo le questioni giuridiche che i tribunali sono chiamati a decidere. Inoltre, lo studio di tendenze legali multi-decennali è ostacolato dalla disponibilità non uniforme dei dati, dalle norme di riservatezza e dal "disallineamento temporale", in cui il vocabolario legale e la dottrina cambiano significativamente tra le diverse epoche. Questo studio affronta il vuoto nell'analisi sistematica della giurisprudenza d'appello per comprendere l'evoluzione della dottrina della giustizia minorile e identifica i rischi critici per gli strumenti di supporto decisionale basati su IA addestrati su tali corpora storici.

Metodologia
Lo studio impiega una pipeline end-to-end in sei fasi che combina il topic modeling computazionale con l'assistenza di Large Language Models (LLM) per analizzare 60.470 opinioni d'appello statunitensi provenienti da CourtListener (1970–2025).

1. Costruzione e Pre-elaborazione dei Dati: Le opinioni sono state raccolte tramite API, de-duplicate e pulite. La normalizzazione del testo ha rimosso i boilerplate e i frammenti di citazione preservando il vocabolario dottrinale. Le frasi legali multi-parola sono state tokenizzate come unità singole per garantire la coerenza attraverso i decenni.
2. Modellazione dei Topic Globali-Locali: È stata utilizzata un'architettura ibrida per garantire la comparabilità tra i decenni.
   • Un modello BERTopic Globale (utilizzando embedding di frasi MPNet, UMAP per la riduzione della dimensionalità e HDBSCAN per il clustering) è stato applicato all'intero corpus per stabilire uno spazio tematico condiviso, risultando in 182 temi sostanzivi.
   • Modelli Locali per Decennio sono stati applicati indipendentemente per ciascuno dei sei decenni (anni '70–anni '20).
   • Allineamento: I temi locali sono stati mappati sull'inventario globale utilizzando la somiglianza di Jaccard sui set di parole chiave (soglia $\ge$ 0.20). Ciò ha permesso di tracciare i temi stabili pur isolando i "sotto-temi" specifici di ogni epoca che il modello globale non riusciva a catturare.
3. Diagnostica della Qualità: La qualità dei temi è stata valutata tramite punteggi di coerenza UMass e sovrapposizione lessicale di vicini più prossimi. Solo 182 dei cluster iniziali sono stati mantenuti come temi sostanzivi, coprendo il 54,7% del corpus; il resto è stato escluso in quanto outlier o boilerplate.
4. Computazione delle Tendenze: La prevalenza è stata calcolata come quota normalizzata per decennio (opinioni assegnate a un tema diviso per il totale delle opinioni assegnate in quel decennio) per consentire il confronto diretto tra decenni di dimensioni variabili. Sono state applicate pendenze lineari per identificare tendenze in crescita, in calo o stabili.
5. Classificazione e Analisi Assistita da LLM:
   • Induzione dei Temi: Un LLM (Claude) ha analizzato i metadati dei temi (parole chiave, conteggi, coerenza, tendenze) per proporre una tassonomia di 10 temi.
   • Assegnazione dei Temi: L'LLM ha assegnato a ciascuno dei 182 temi esattamente un tema principale.
   • Analisi Basata su Evidenze: Per i temi selezionati di alto interesse, all'LLM è stato fornito un "pacchetto di evidenze" contenente i testi completi delle opinioni del tema globale, i temi locali mappati e i sotto-temi non mappati. L'LLM è stato istruito a generare narrazioni legali e archi dottrinali basandosi strettamente sul testo fornito, evitando l'uso della conoscenza legale pre-addestrata.

Contributi Chiave

• Metodologici: Il documento introduce una pipeline riproducibile e verificabile per l'analisi legale trans-decennale. Combina un'architettura BERTopic globale-locale con diagnostica di qualità integrata e un flusso di lavoro a due passaggi assistito da LLM per la scoperta dei temi e l'analisi delle tendenze basata sulle evidenze.
• Empirici: Fornisce la prima documentazione quantitativa su larga scala della ri-bilanciamento dottrinale nella giustizia minorile statunitense attraverso sei decenni, identificando 182 distinti temi legali organizzati in 10 macro-temi.
• Framework del Rischio: Stabilisce un framework di rischio per l'IA basato sulle evidenze, identificando cinque linee guida specifiche per gli strumenti di supporto decisionale nella giustizia minorile basate sui pattern di dati osservati.

Risultati
L'analisi rivela uno spostamento fondamentale nel sistema di giustizia minorile da un focus sull'adjudicazione e la procedura verso la supervisione e il benessere del minore.

• Spostamenti Tematici:

  • In Crescita: Benessere del Minore e Dipendenza (dal 5,6% al 16,7%) e Registrazione per Reati Sessuali (il tema singolo più grande, salito dal 5,0% al 12,9%) sono le aree in più rapida crescita. Anche Probation/Supervisione e Detenzione/Custodia hanno visto una crescita significativa prima dei recenti cali nei carichi di lavoro complessivi.
  • In Calo: Questioni Procedurali ed Evidenziarie (scese dal 12,6% al 6,7%) sono diminuite man mano che i diritti di due process (stabiliti da Kent, Gault, Winship) sono diventati legge consolidata. Il Trasferimento Giudiziario (passaggio al tribunale per adulti) è sceso drasticamente (dal 4,6% all'1,0%) mentre gli stati si sono spostati verso statuti di trasferimento automatico. Il caso della Pena di Morte per i Minori è diminuito a seguito della decisione Roper.
  • Stabili: Reati Minorili e Adjudicazione è rimasto il tema principale (~22–27%) ma ha subito un declino relativo con la crescita di altre aree.

• Archi Dottrinali (Analisi LLM):

  • Registrazione per Reati Sessuali (T0): Si è evoluta da un focus su due process e trasferimento negli anni '70/'80 a un regime complesso di mandati di registrazione (Wetterling, Megan's Law, Adam Walsh) negli anni '90/'00, seguito da una reazione giudiziaria riguardante proporzionalità e revisione individualizzata negli anni '10/'20.
  • Traffico di Droga (T2): Si è spostata da un modello riabilitativo negli anni '70 a un'era punitiva della "Guerra alla Droga" (minimi obbligatori, responsabilità per complicità) negli anni '80/'90, e infine a un focus sui danni distinti del fentanyl e sul rifiuto di fondere le accuse di traffico negli anni '10/'20.
  • Tutela dell'Infanzia (T6): Si è trasformata da una cauta protezione dei diritti genitoriali (che richiedeva un danno effettivo) a una dottrina in cui la dipendenza da metanfetamina è trattata come presumibilmente incompatibile con una genitorialità sicura, guidata dagli scadenze ASFA e dallo standard "i bambini non possono aspettare".

• Deriva del Vocabolario: Lo studio ha riscontrato che il vocabolario legale cambia significativamente per decennio. Ad esempio, termini come "conoscenza carnale" (anni '70) hanno lasciato il posto a "registrazione per reati sessuali" (anni '90+), e "crack cocaine" (anni '80) ha lasciato il posto a "fentanyl" (anni '10+). I modelli globali spesso perdono questi sotto-temi specifici dell'epoca, che costituiscono una parte significativa del contenzioso.

Significato e Rivendicazioni
Il documento sostiene che l'analisi su larga scala e riproducibile della giurisprudenza d'appello è possibile e praticamente utile per la ricerca giuridica, ma evidenzia anche le limitazioni critiche per le applicazioni dell'IA in questo dominio.

1. Due Sistemi Paralleli: Lo studio dimosta che la delinquenza e la tutela dell'infanzia si muovono in direzioni opposte e hanno sviluppato vocabolari e logiche distinte. Gli strumenti di IA addestrati su un corpus combinato rischiano di fondere questi sistemi, portando a un recupero o a un ragionamento inaccurato.
2. Disallineamento Temporale e Deriva del Vocabolario: Gli strumenti addestrati su dati storici senza stratificazione temporale possono presentare standard legali superati (es. l'ergastolo senza possibilità di libertà pre-Miller) come legge attuale. Inoltre, la deriva del vocabolario significa che gli strumenti calibrati su i termini di un'epoca potrebbero fallire nel recuperare casi rilevanti di altre epoche.
3. Frammentazione Giurisdizionale: L'area in più rapida crescita (registrazione per reati sessuali) è altamente frammentata in varianti specifiche degli stati che le etichette dei temi globali non riescono a catturare. Gli strumenti di IA devono indicizzare questi sotto-temi per evitare di perdere il contenzioso critico.
4. Trend vs Condotta: Il documento sottolinea che le linee di tendenza misurano l'attività legale (ciò che i tribunali sono chiamati a decidere), non la condotta (quanto spesso avvengono i reati). Un calo nei casi di trasferimento riflette cambiamenti statutari che rimuovono la discrezionalità giudiziaria, non necessariamente un calo dei reati gravi.

Gli autori concludono che affrontare questi rischi — calibrazione temporale, allineamento del vocabolario, specificità giurisdizionale e separazione dei sistemi di delinquenza e di tutela — è un requisito fondamentale per qualsiasi strumento di supporto decisionale basato su IA utilizzato nella giustizia minorile. La pipeline serve come modello per l'audit del ragionamento legale e per garantire che gli strumenti di IA riflettano standard moderni piuttosto che obsoleti parametri punitivi.