An index to quantify scientific debt

Immaginate il mondo della scienza come una biblioteca gigantesca e frenetica dove i ricercatori scrivono continuamente nuovi libri. Per decenni, il modo più famoso per giudicare il successo di uno scrittore è stato l' "h-index". Pensatelo come un punteggio di un "concorso di popolarità": se uno scienziato ha un h-index di 20, significa che ha scritto 20 libri che sono stati ciascuno presi in prestito e discussi da almeno altre 20 persone. Più alto è il punteggio, più influente è considerato lo scrittore e più probabile è che ottenga finanziamenti o un lavoro. È un distintivo d'onore orientato al futuro, assumendo che un punteggio elevato significhi che lo scrittore continuerà a produrre ottimi lavori.

Ma cosa succede quando uno di quei "grandi" libri si rivela una menzogna? Cosa succede se i dati sono stati falsificati o i risultati sono solo un errore? Nel mondo reale, quando un libro viene dimostrato falso, la biblioteca lo preleva dallo scaffale e vi appone un grande timbro "RETRACTED" (Ritirato). Tuttavia, il vecchio punteggio di popolarità (l'h-index) non cambia; il brutto libro conta ancora per la fama dello scrittore. Questo crea un problema: uno scienziato potrebbe avere un punteggio elevato costruito in parte su libri che sono ora noti per essere sciocchezze. Questo articolo introduce una nuova idea per correggere questo squilibrio. Suggerisce che abbiamo bisogno di un modo per misurare non solo i buoni libri, ma anche il "debito scientifico" causato da quelli cattivi. È come rendersi conto che il saldo di un conto bancario sembra ottimo solo se si ignora l'enorme scoperto che si sta accumulando sullo sfondo.

Il Nuovo Punteggio: Lo "z-index"

L'autore di questo articolo, scrivendo da una data futura nel 2026, propone una nuova metrica chiamata z-index. Se l'h-index misura il tuo "successo" scientifico, lo z-index misura il tuo "debito".

Ecco come funziona: ogni volta che un articolo viene ritirato, questo si aggiunge allo z-index di uno scienziato. Ma non è un semplice sistema a "una sola penalità". L'articolo sostiene che un ritiro in una rivista super famosa e ad alto impatto è una questione molto più grave rispetto a un ritiro in una rivista più piccola. Quindi, lo z-index somma l' "Impact Factor" (un punteggio di quanto una rivista sia famosa e influente) di ogni rivista in cui è stato pubblicato un articolo ritirato.

Pensatelo come a un gioco di sedie musicali dove le sedie hanno diversi valori di punti. Se fate cadere una sedia piccola e traballante, perdete pochi punti. Ma se fate cadere un enorme trono dorato, perdete una quantità massiccia di punti. Lo z-index è il peso totale di tutte le sedie che avete fatto cadere.

Il Bilancio tra "Debito" e "Successo"

L'articolo suggerisce che, per avere un quadro reale del valore di uno scienziato, non dovremmo guardare solo al suo h-index. Inveve, dovremmo guardare la differenza: h meno z.

• Risultato Positivo: Se il tuo punteggio dei "buoni libri" (h) è superiore al tuo debito dei "libri cattivi" (z), sei ancora un contributore netto positivo.
• Risultato Negativo: Se il tuo debito è superiore ai tuoi successi, il tuo valore netto è negativo. Ciò suggerisce che, in definitiva, il tuo lavoro potrebbe fare più danni che bene alla comunità scientifica.

L'autore usa un esempio del mondo reale (dalla prospettiva della data del 2026 dell'articolo) riguardante uno scienziato di nome Ranga Dias. In questo scenario, Dias ha un h-index di 19, che sembra impressionante. Tuttavia, ha cinque articoli ritirati da riviste molto famose come Nature e Physical Review Letters. Quando si sommano i "punteggi di fama" di queste riviste, il suo z-index balza a circa 124. Il suo punteggio finale (19 meno 124) è un enorme -105. Questo numero negativo funge da segnale di allarme, suggerendo che la disinformazione che ha diffuso supera i suoi contributi validi.

Il Tempo Conta: La "Penalità Ritardata"

L'articolo realizza anche che quando un errore viene corretto è importante. Se uno scienziato si rende conto di aver commesso un errore onesto e lo corregge rapidamente, il danno è piccolo. Ma se trascina la faccenda per anni, la cattiva informazione si diffonde ulteriormente e il "debito" cresce.

Per tenere conto di questo, l'autore crea uno "z-index modificato" (chiamato z-tilde). Questa versione utilizza una funzione matematica speciale che agisce come un timer di penalità:

• Se un articolo viene ritirato rapidamente (entro un anno), la penalità è piccola.
• Se il ritiro richiede molto tempo (due anni o più), la penalità raddoppia o addirittura quadruplica.

Usando questo sistema "pesato nel tempo", l'autore ricalcola i punteggi. Per Ranga Dias, il debito cresce ancora di più (arrivando a circa 165) perché i suoi ritiri hanno richiesto molti mesi per essere elaborati. Il suo punteggio finale scende a -146.

Interessantemente, l'articolo guarda anche a due vincitori del Nobel, Gregg Semenza e Thomas Südhof. Nonostante abbiano enormi h-index (223 e 238), il loro debito accumulato dai ritiri degli articoli è così alto che i loro punteggi netti cambiano significamente. Per Semenza, il valore h meno z-tilde diventa un enorme -227. Tuttavia, il punteggio di Südhof rimane positivo a 176, il che significa che nonostante i suoi ritiri, i suoi successi validi superano ancora il suo debito scientifico. Ciò suggerisce che anche gli scienziati più celebrati possono avere un impatto "netto negativo" se permettono troppa disinformazione di persistere, sebbene nel caso di Südhof la sua eredità rimanga netta positiva.

Il Punteggio delle Riviste Stesse

L'articolo non si ferma ai singoli scienziati; applica la stessa logica alle riviste stesse. Proprio come gli scienziati hanno i loro punteggi, anche le riviste li hanno. L'autore calcola lo z-index per le prime 20 riviste al mondo.

I risultati sono scioccanti. Le due riviste più famose, Nature e Science, hanno enormi h-index (1495 e 1433), mostrando di pubblicare molti articoli influenti. Tuttavia, hanno anche enormi z-index (3650 e 2809). Quando viene applicata la "penalità temporale", il loro debito si gonfia a 8290 e 6350.

L'articolo sottolinea che queste riviste sono sedute su una montagna di "detriti scientifici". Sebbene siano famose per i loro successi, sono anche responsabili di una enorme quantità di disinformazione che ha richiesto molto tempo per essere ripulita. Al contrario, il New England Journal of Medicine (NEJM) ha un punteggio di debito molto più basso rispetto alla sua fama. L'autore suggerisce che ciò possa essere dovuto al fatto che il NEJM ha regole più rigorose sulla condivisione dei dati, il che aiuta a individuare gli errori più velocemente.

Perché Questo è Importante

L'articolo conclude che la scienza ha bisogno di un modo per misurare l' "impatto negativo" tanto quanto misura l' "impatto positivo". Attualmente, il sistema conta solo le vittorie. Introducendo lo z-index, l'autore spera di incoraggiare scienziati e riviste a essere più prudenti.

Il punto fondamentale è che se le riviste potessero ritirare i cattivi articoli più velocemente (idealmente entro un anno), i punteggi di debito scenderebbero significativamente e la maggior parte degli scienziati e delle riviste avrebbe di nuovo un valore netto positivo. L'articolo non pretende di risolvere il problema della condotta scientifica impropria, ma offre un nuovo strumento — un "contatore del debito" — per rendere visibile il problema e incoraggiare la comunità scientifica a migliorare la propria condotta. È un invito a smettere di ignorare i brutti libri nella biblioteca e iniziare a contare il costo delle menzogne.