BengalGrid: A Decade-Scale Hourly Dataset of Bangladesh Power Supply by Source Type, Including Cross-Border Imports from India and Nepal

L'elettricità è la corrente invisibile che alimenta la vita moderna, fluendo dalle centrali elettriche attraverso una vasta rete verso luci, fabbriche e case. Affinché ingegneri e decisori politici possano mantenere questo sistema in funzione senza intoppi, hanno bisogno di un registro chiaro e continuo di quanta energia viene prodotta, da dove proviene e quando è necessaria. Questo registro si chiama serie temporale, un semplice elenco di numeri che racconta una storia nel tempo. Senza un tale elenco, è impossibile prevedere i bisogni futuri o comprendere come stia cambiando il mix di fonti energetiche — come gas, carbone o vento. Tuttavia, in molte parti del mondo, queste informazioni vitali sono sparse, nascoste in formati destinati all'occhio umano piuttosto che all'analisi informatica, o semplicemente mancanti per lunghi periodi di tempo.

In Bangladesh, una nazione con un'economia in rapida crescita e un panorama energetico complesso, un registro così chiaro è mancato fino a tempi recenti. La rete elettrica del paese si affida a un mix di fonti di combustibile domestico ed elettricità importata dai paesi vicini, ma i dati ufficiali erano bloccati in un sito web pubblico che presentava le informazioni in un modo che i computer non potevano leggere facilmente. Le date erano scritte in uno script diverso, i numeri erano incoerenti e i dati erano suddivisi in migliaenti di piccole pagine. Per studiare il futuro energetico del paese, i ricercatori dovevano sbloccare questi dati, pulirli e trasformarli in una singola linea temporale affidabile.

Un team di ricercatori dell'East West University di Dhaka ha fatto esattamente questo. Hanno creato un nuovo dataset aperto, chiamato BengalGrid, che offre una visione decennale, ora per ora, della fornitura elettrica del Bangladesh. Scrivendo un programma per computer per visitare sistematicamente il portale ufficiale del governo, hanno raccolto oltre 104.000 record che spaziano dall'aprile 2015 all'ottobre 2026. Questo enorme sforzo ha trasformato una collezione caotica di pagine web in un file pulito e organizzato che chiunque può utilizzare per studiare come il paese genera e importa elettricità.

Il processo è iniziato con una scansione digitale del sito web pubblico della Power Grid Company of Bangladesh. I ricercatori hanno scritto uno script per visitare ogni pagina del sito, una per una, imitando un visitatore umano per evitare di sovraccaricare il server. Hanno estratto le tabelle contenenti i dati di generazione, che elencavano la produzione totale di energia e la suddivisione per tipo di combustibile, come gas naturale, combustibile liquido, carbone, idroelettrico, solare ed eolico. Hanno anche catturato i dati sull'elettricità portata dall'India e dal Nepal attraverso specifiche connessioni transfrontaliere. I dati grezzi che hanno raccolto erano disordinati. Le date e le ore erano scritte in numerali bengalesi, che i computer non riconoscono come numeri, e i formati temporali erano incoerenti. Alcune voci erano duplicati, altre avevano informazioni mancanti.

Per rendere i dati utilizzabili, il team ha costruito un secondo programma per pulirli e organizzarli. Hanno convertito i numerali bengalesi in cifre standard, sistemato i timestamp affinché seguissero tutti lo stesso formato e rimosso le voci duplicate. In totale, hanno scartato 438 righe duplicate e una manciata di record con date impossibili, lasciando un set finale di 104.134 record orari unici. Fondamentalmente, hanno deciso di non colmare i numeri mancanti o correggere gli strani valori anomali che hanno trovato. Invece, hanno lasciato i vuoti e i valori insoliti esattamente come apparivano nella fonte, confidando che i futuri ricercatori volessero vedere la verità grezza dei dati e prendessero le proprie decisioni su come gestirli. Questo approccio assicura che il dataset rimanga uno specchio trasparente dei registri ufficiali, piuttosto che una versione lucidata che nasconde potenziali errori.

Una volta pronti i dati, i ricercatori hanno trascorso mesi a controllarne la qualità per garantire che raccontassero una storia vera. Hanno verificato che l'importo totale di energia riportato per un dato orario corrispondesse alla somma delle singole fonti, come gas e carbone, più l'elettricità importata dai vicini. In quasi tutti i casi in cui tutti i numeri erano disponibili, il totale corrispondeva perfettamente alla somma delle sue parti, con una differenza di meno di un megawatt. Questa coerenza interna ha confermato che il processo di raccolta dei dati aveva preservato le relazioni tra le diverse colonne di informazioni. Hanno anche controllato se i dati si comportassero come dovrebbe comportarsi una vera rete elettrica. Hanno scoperto che la generazione di elettricità seguiva un ritmo quotidiano prevedibile, calando nelle prime ore del mattino, crescendo durante il giorno e raggiungendo un plateau distinto la sera, quando la domanda raggiunge il picco. Hanno anche visto un modello settimanale, con l'uso di energia che scende sensibilmente il venerdì, che è il giorno festivo settimanale in Bangladesh, e un modello stagionale in cui l'offerta è più alta nei caldi mesi estivi e più bassa in quelli invernali.

Il dataset rivela un cambiamento significativo nel modo in cui il Bangladesh alimenta la sua crescita. Nell'arco dei dieci anni coperti dai dati, l'offerta totale di elettricità del paese è cresciuta costantemente. I ricercatori hanno osservato che, mentre il gas naturale è stato tradizionalmente la fonte dominante, la sua quota del mix totale ha iniziato a diminuire. Allo stesso tempo, il carbone è aumentato drasticamente, passando da una minuscola frazione dell'offerta a un contributore importante che ora rivaleggia con il gas in termini di volume. I dati mostrano anche la crescente importanza del commercio transfrontaliero. L'elettricità importata dall'India, in particolare attraverso una connessione ad alta tensione chiamata Bheramara, è diventata una parte stabile ed essenziale della rete. Nuove connessioni, incluse quelle da Adani e dal Nepal, appaiono negli anni più recenti del dataset, riflettendo l'espansione delle partnership energetiche del paese.

I ricercatori hanno anche documentato i limiti del loro lavoro, assicurandosi che gli utenti sappiano esattamente cosa stanno guardando. Hanno scoperto che alcune fonti più recenti, come l'energia eolica e quella solare, presentano ampi vuoti nei primi anni del dataset perché non venivano segnalate in quel periodo. I dati contengono anche alcuni valori estremi che sembrano fisicamente impossibili, come un singolo record che mostra una generazione totale di oltre 64 milioni di megawatt, ben oltre quanto l'intero paese potrebbe mai produrre. Questi sono probabilmente errori nella segnalazione originale, e i ricercatori li hanno lasciati nel file in modo che gli utenti possano identificarli e gestirli. Allo stesso modo, i dati mostrano che la fornitura di energia del paese non riguarda solo quanto viene prodotto, ma anche quando viene prodotto, con picchi chiari la sera che richiedono una gestione attenta.

Rilasciando questo dataset insieme al codice informatico utilizzato per crearlo, il team ha fornito una base per la ricerca futura. Gli scienziati possono ora usare questi dati per prevedere i futuri bisogni energetici, studiare l'impatto ambientale del passaggio dal gas al carbone o analizzare come il commercio transfrontaliero influenzi la sicurezza nazionale. Il lavoro trasforma una collezione frammentata e difficile da leggere di pagine web in un registro chiaro e a lungo termine del viaggio energetico di una nazione. Dimostra che anche quando i dati sono nascosti dietro interfacce disordinate, possono essere scoperti e organizzati per rivelare il battito costante e complesso di un'economia moderna. Il risultato è uno strumento che permette a chiunque, dagli studenti agli esperti di politiche, di vedere la storia della potenza elettrica del Bangladesh dell'ultimo decennio in alta definizione, pronto a informare le decisioni del prossimo decennio.