Statistical Methods and Methodological Quality in Health Research in Somalia: A Review of Current Practices, Gaps, and Opportunities

Per comprendere la salute di una nazione, gli scienziati devono prima di tutto comprendere le storie che i dati raccontano loro. La ricerca sanitaria è il processo di raccolta di fatti riguardanti malattie, cure e benessere per guidare decisioni che salvano vite. Ma i fatti da soli non bastano; il modo in cui quei fatti vengono raccolti e gli strumenti utilizzati per interpretarli contano altrettanto. Se uno studio pone le domande sbagliate, sceglie il gruppo di persone sbagliato da intervistare o utilizza un calcolatore che non può gestire la complessità delle risposte, l'immagine risultante della realtà sarà distorta. Nel mondo della medicina, questa distorsione può portare a politiche che trascurano le persone che hanno più bisogno di aiuto o a trattamenti che sembrano funzionare solo a causa di un errore nel calcolo. Per un paese che ricostruisce le proprie istituzioni dopo decenni di conflitto, fare bene questi metodi non è solo un esercizio accademico; è il fondamento per un futuro in cui l'assistenza sanitaria raggiunga ogni cittadino, dal trambusto della capitale ai remoti campi nomadi.

In una recente revisione, due ricercatori della Somali National University si sono posti l'obiettivo di esaminare la qualità della ricerca sanitaria prodotta all'interno della Somalia stessa. Volevano sapere se gli studi pubblicati dagli scienziati somali utilizzassero metodi solidi e affidabili o se il campo stesse ancora lottando con inconsistenze di base. Per trovare la risposta, hanno raccolto quaranta articoli pubblicati che coprivano una vasta gamma di argomenti, dalla salute materna alle malattie infettive, fino al benessere mentale e all'organizzazione degli ospedali. Non hanno guardato i pazienti o i dati grezzi all'interno degli studi; hanno invece esaminato gli studi stessi, leggendo le sezioni relative ai metodi per vedere come i ricercatori avessero progettato il loro lavoro, come avessero scelto i partecipanti e come avessero analizzato i risultati. È stata una verifica sistematica degli strumenti e dei progetti, piuttosto che degli edifici stessi.

I ricercatori hanno scoperto che il panorama della ricerca sanitaria somala è attivo e in crescita, ma pende pesantemente verso alcuni approcci specifici e più semplici. Il tipo di studio più comune incontrato è stato il disegno trasversale, che costituisce il trentacinque percento dei lavori. Questo è un metodo in cui i ricercatori scattano un'istantanea di una popolazione in un singolo momento nel tempo, come scattare una fotografia a una folla per vedere chi è malato e chi è sano proprio ora. Sebbene questo sia utile per comprendere lo stato attuale delle cose, non può dire agli scienziati cosa abbia causato la malattia o cosa accadrà in futuro. Solo un piccolo numero di studi ha utilizzato disegni più rigorosi che seguono le persone nel tempo o testano nuovi trattamenti attraverso esperimenti controllati. La revisione ha identificato un solo studio che ha seguito un gruppo di persone verso il futuro e un solo studio che ha utilizzato un trial randomizzato, dove i partecipanti sono assegnati a diversi gruppi per caso per testare un intervento specifico.

Per quanto riguarda la scelta di chi studiare, i metodi variavano, ma c'era una chiara tendenza a fare affidamento sulla comodità. In quasi la metà degli studi in cui veniva descritto un metodo di campionamento, i ricercatori utilizzavano tecniche di non-probabilità, come interrogare le prime persone che riuscivano a trovare in un ospedale o selezionare i partecipanti in base a criteri specifici senza un processo di selezione casuale. Questo è come cercare di capire il gusto di un'intera pentola di zuppa assaggiando solo il cucchiaio che si è trovato in superficie; potrebbe essere accurato, ma potrebbe anche mancare i sapori mescolati più in profondità. Sebbene questo approccio sia accettabile per alcuni tipi di lavoro esplorativo, rende difficile affermare con certezza che i risultati siano applicabili all'intera popolazione somala. I dati hanno mostrato anche un significativo squilibrio geografico. Quasi la metà di tutti gli studi si concentrava esclusivamente su Mogadiscio e nella regione di Banadir. Ciò lascia le comunità rurali, i pastori nomadi e le popolazioni sfollate in altre regioni ampiamente invisibili nella base di evidenza nazionale.

Il modo in cui i ricercatori hanno gestito i numeri ha rivelato anche lacune negli standard di reporting. Mentre molti studi utilizzavano strumenti di base per riassumere i propri dati, come contare quante persone avevano una certa condizione o calcolare le medie, meno utilizzavano tecniche statistiche avanzate per tenere conto delle relazioni complesse tra diversi fattori. Quando i ricercatori utilizzano questi strumenti avanzati, devono verificare che la matematica regga al controllo, un processo noto come test delle assunzioni. La revisione ha scoperto che solo una minima frazione degli studi, appena tre su quaranta, ha riportato di aver verificato queste assunzioni. Inoltre, i ricercatori hanno cercato modi specifici per mostrare quanto fossero precisi i loro risultati. Hanno scoperto che, sebbene alcuni studi riportassero l'intervallo di incertezza attorno ai loro numeri, nessuno dei quaranta studi ha riportato esplicitamente una misura standardizzata della dimensione di un effetto, che dice al lettore quanto sia forte una relazione. Inoltre, nessun lavoro ha riportato un controllo sistematico per vedere se i risultati sarebbero cambiati utilizzando un metodo leggermente diverso, e nessuno ha descritto come avessero gestito le informazioni mancanti dai partecipanti che non hanno risposto a tutte le domande.

Anche gli strumenti utilizzati per eseguire questi calcoli erano distribuiti in modo non uniforme. Il pacchetto software più comune menzionato è stato SPSS, utilizzato in quindici studi, seguito da STATA e NVivo. Tuttavia, sette studi non hanno menzionato quale software avessero utilizzato. I ricercatori hanno notato che la presenza di metodi avanzati in alcuni studi di alta qualità dimostra che è possibile condurre ricerche sofisticate in Somalia. Ad esempio, un trial cluster-randomizzato ha utilizzato una modellazione complessa per tenere conto di come le persone nello stesso villaggio influenzino tra loro, e alcuni studi spaziali hanno mappato i modelli di malattia attraverso le regioni. Questi esempi mostrano che la capacità esiste, ma non è ancora la pratica standard in tutto il settore.

Gli autori hanno concluso che, sebbene il volume della ricerca sanitaria in Somalia sia in espansione, la qualità metodologica rimane eterogenea. Il campo è attualmente dominato da istantanee di popolazioni urbane che utilizzano strumenti statistici di base, con significative lacune nel modo in cui viene riportata l'incertezza e nel modo in cui vengono gestiti i dati mancanti. Per rafforzare le prove che guidano la politica sanitaria, i ricercatori suggeriscono un passaggio verso disegni che seguano le persone nel tempo, l'uso di metodi di selezione casuale per garantire che tutte le parti del paese siano rappresentate e un impegno verso un reporting trasparente che includa controlli per errori matematici e spiegazioni chiare su come siano stati trattati i dati mancanti. La strada da percorrere prevede la costruzione della capacità di utilizzare questi metodi più rigorosi in modo costante, assicurando che le storie sulla salute di tutti i somali, non solo di quelli nella capitale, siano raccontate con chiarezza e precisione.