Elite Polarization in European Parliamentary Speeches: a Novel Measurement Approach Using Large Language Models

Sintesi Tecnica: Polarizzazione delle Elite nei Discorsi Parlamentari Europei

Enunciazione del Problema
La scienza politica comparata riconosce da tempo che l'ostilità emotiva reciproca tra le élite politiche può destabilizzare le democrazie più rapidamente delle lamentele a livello di massa. Tuttavia, gli strumenti di misurazione esistenti non riescono a catturare direttamente questo fenomeno specifico. Le misure comparative attuali si concentrano tipicamente o sulla polarizzazione affettiva di massa (il sentimento pubblico verso i partiti) o sulla distanza ideologica delle élite (posizioni politiche). Esiste un significativo vuoto metodologico riguardo alla valutazione reciproca diretta delle élite: il sentimento specifico che un attore politico esprime verso un altro all'interno del discorso ufficiale. I metodi tradizionali, come l'aggregazione di sondaggi, sono limitati dalla frequenza e dalla portata geografica, mentre la codifica manuale o l'elaborazione del linguaggio naturale (NLP) basata su dizionari manca della scalabilità, della capacità multilingue e della sfumatura contestuale necessarie per analizzare milioni di riferimenti parlamentari attraverso più lingue e decenni.

Metodologia
Il documento introduce il Punteggio di Polarizzazione delle Elite (EPS), un approccio di misurazione innovativo che utilizza i Modelli Linguistici di Grande Dimensione (LLM) per analizzare i discorsi parlamentari. La metodologia prevede una pipeline multistadio:

1. Disaggregazione dell'Unità di Analisi: A differenza dell'analisi del sentiment tradizionale che assegna un unico punteggio all'intero discorso, questo approccio disaggrega l'unità di analisi fino al singolo riferimento. L'LLM identifica ogni istanza in cui un politico menziona un altro attore politico.
2. Estrazione Attore-Target-Sentimento: Utilizzando un prompt standardizzato e un ragionamento a catena di pensiero (Chain-of-Thought), l'LLM estrae:
   • Il parlante e l'attore target.
   • Il contesto specifico del riferimento.
   • Il sentimento diretto specificamente verso l'attore target (distinguendo la valutazione dell'attore dalla valutazione delle sue circostanze).
   • Il sentimento è valutato su una scala da −5 (disprezza fortemente) a +5 (apprezza fortemente).
3. Standardizzazione e Collegamento delle Entità: I riferimenti eterogenei (es. "Primo Ministro", "Orbán", "Fidesz") vengono standardizzati in coppie di partiti. Questo processo combina script di ricerca deterministici con un matching fuzzy assistito da LLM per risolvere le entità nominate nei loro specifici partiti politici all'interno di un dato contesto paese-anno.
4. Aggregazione: Il sistema calcola una media ponderata delle valutazioni verso partiti esterni.
   • Livello Partito: Le valutazioni sono ponderate in base alla quota di riferimento (quanto spesso viene menzionato il partito target).
   • Livello Parlamento: I punteggi a livello di partito sono aggregati utilizzando pesi basati sulla quota di voti.
   • Il punteggio finale inverte il segno in modo che valori più alti indichino una maggiore negatività (polarizzazione).
5. Protocollo di Validazione: Gli autori impiegano uno standard di unione "supergold" costruito tramite matching fuzzy assistito da LLM. Codificatori umani e l'IA annotano lo stesso campione di discorsi; l'unione dei riferimenti validi identificati da entrambi funge da verità fondamentale. Questo evita di penalizzare l'IA per aver identificato riferimenti validi che gli umani hanno mancato.

Contributi Chiave

• Innovazione Concettuale: L'EPS occupa un quadrante precedentemente non misurato nella tipologia della polarizzazione: polarizzazione affettiva a livello di élite basata su valutazioni dirette verso partiti esterni nel discorso. È distinta dalla distanza ideologica, dal sentiment generale, dall'inciviltà e dalla polarizzazione affettiva di massa.
• Scalabilità Metodologica: L'approccio sfrutta LLM pre-addestrati (in particolare GPT-4o e alternative a pesi aperti) che operano attraverso le lingue (ungherese, italiano, inglese) senza addestramento o affinamento specifici per il compito. Ciò consente il primo pannello longitudinale trattabile, multilingue e di polarizzazione delle élite.
• Validazione Tecnica: Lo studio dimostra che gli LLM possono raggiungere un'elevata sensibilità (ricordando più riferimenti rispetto ai codificatori umani in alcune impostazioni) e un elevato accordo sul sentiment (Errore Assoluto Medio di 0,85–1,48 su una scala a 10 punti) con i codificatori umani. Crucialmente, il Tasso di Falsi Positivi (FDR) è stato zero in tutti i campioni di validazione, confermando che ogni riferimento identificato dall'IA aveva un ancoraggio testuale genuino.

Risultati
La metodologia è stata applicata a corpora parlamentari del Regno Unito (1987–2020), Ungheria (2002–2023) e Italia (2013–2022).

• Ungheria: L'EPS cattura il consolidamento del regime e la riconfigurazione del sistema partitico. La polarizzazione ha raggiunto il picco nel 2018–2019, piuttosto che durante la fase iniziale dell'aggrandimento esecutivo (2010–2011), suggerendo che la misura riflette la reazione dell'opposizione e il nuovo equilibrio del sistema più che l'immediata presa di controllo istituzionale.
• Regno Unito: L'indice mostra una tendenza a forma di U (in calo dopo il 1997, in aumento dopo il 2010). È empiricamente distinto dagli indici di polarizzazione affettiva di massa e di polarizzazione ideologica; notevolmente, durante il periodo della Brexit, la polarizzazione delle élite non ha subito picchi nonostante l'alta tensione pubblica e ideologica, indicando che la retorica parlamentare è rimasta vincolata dalle norme istituzionali.
• Italia: La misura è altamente reattiva alle dinamiche di coalizione. La negatività verso partiti esterni diminuisce quando ex rivali entrano insieme nel governo (ad esempio, il governo di unità Draghi) e aumenta quando tornano all'opposizione.
• Validazione: L'approccio distingue con successo tra diversi tipi di polarizzazione. Nel caso del Regno Unito, l'EPS ha mostrato una bassa correlazione con la polarizzazione affettiva di massa negli anni successivi, confermando che misura un fenomeno distinto a livello di élite.

Significato e Affermazioni
Il documento afferma che il Punteggio di Polarizzazione delle Elite fornisce una base scalabile e transnazionale per future ricerche sulle cause e le conseguenze dell'ostilità delle élite.

• Distintività: La misura è concettualmente ed empiricamente distinta dalle metriche esistenti, offrendo una nuova lente per studiare la stabilità democratica senza fare affidamento su dati centrati sugli Stati Uniti o sondaggi di massa.
• Fattibilità: Lo studio dimostra che gli LLM possono eseguire un'analisi testuale politica dettagliata (rilevamento degli attori e attribuzione del sentiment) a una scala precedentemente impossibile, superando la necessità di costose codifiche manuali o studi ristretti a un singolo paese.
• Utilità Futura: Gli autori ipotizzano che questa misura permetta agli studiosi di trattare la polarizzazione delle élite sia come variabile dipendente (studiando cosa la produce, come elezioni o crisi) sia come variabile indipendente (studiando cosa produce, come il regresso democratico o l'escalation populista). La pipeline è progettata per essere estesa a tutti i 29 Stati membri dell'UE tramite il corpus ParlaMint, potenzialmente creando un pannello europeo di vent'anni.