BengalGrid: A Decade-Scale Hourly Dataset of Bangladesh Power Supply by Source Type, Including Cross-Border Imports from India and Nepal

Elektriciteit is de onzichtbare stroom die het moderne leven aandrijft, stromend van elektriciteitscentrales door een uitgestrekt netwerk naar lichten, fabrieken en huizen. Om dit systeem soepel te laten verlopen, hebben ingenieurs en beleidsmakers een duidelijk, continu verslag nodig van precies hoeveel vermogen er wordt opgewekt, waar het vandaan komt en wanneer het nodig is. Dit verslag wordt een tijdreeks genoemd, een eenvoudige lijst met getallen die een verhaal vertelt over de tijd heen. Zonder een dergelijke lijst is het onmogelijk om toekomstige behoeften te voorspellen of te begrijpen hoe de mix van energiebronnen — zoals gas, kolen of wind — verandert. Echter, in veel delen van de wereld is deze vitale informatie versnipperd, verborgen in formaten die bedoeld zijn voor menselijke ogen in plaats van computeranalyse, of simpelweg ontbrekend voor lange periodes.

In Bangladesh, een land met een snelgroeiende economie en een complex energielandschap, was een dergelijk duidelijk verslag tot voor kort ontbrak. Het elektriciteitsnet van het land vertrouwt op een mix van binnenlandse brandstofbronnen en elektriciteit geïmporteerd uit buurlanden, maar de officiële gegevens waren opgesloten in een publieke website die informatie presenteerde op een manier die computers niet gemakkelijk konden lezen. De datums werden geschreven in een ander schrift, de getallen waren inconsistent en de gegevens waren opgedeeld in duizenden kleine pagina's. Om de energietoekomst van het land te bestuderen, moesten onderzoekers deze gegevens ontsluiten, opschonen en transformeren tot een enkele, betrouwbare tijdlijn.

Een team van onderzoekers van East West University in Dhaka heeft nu precies dat gedaan. Ze hebben een nieuwe, open dataset gecreëerd genaamd BengalGrid, die een tienjarige, per uur gedetailleerde kijk biedt op de elektriciteitsvoorziening van Bangladesh. Door een computerprogramma te schrijven dat systematisch de officiële overheidsportal bezoekt, hebben ze meer dan 104.000 records verzameld die lopen van april 2015 tot oktober 2026. Deze enorme inspanning heeft een chaotische verzameling webpagina's getransformeerd in een schoon, georganiseerd bestand dat iedereen kan gebruiken om te bestuderen hoe het land elektriciteit opwekt en importeert.

Het proces begon met een digitale scan van de publieke website van de Power Grid Company of Bangladesh. De onderzoekers schreven een script om elke pagina van de site één voor één te bezoeken, waarbij ze een menselijke bezoeker nabootsten om de server niet te overbelasten. Ze extraheerden de tabellen met generatiegegevens, die de totale energieopbrengst en de uitsplitsing naar brandstoftype bevatten, zoals aardgas, vloeibare brandstof, kolen, waterkracht, zon en wind. Ze legden ook gegevens vast over elektriciteit die uit India en Nepal werd binnengebracht via specifieke grensoverschrijdende verbindingen. De ruwe gegevens die ze verzamelden, waren slordig. De datums en tijden werden geschreven in Bengaalse cijfers, die computers niet als getallen herkennen, en de tijdformaten waren inconsistent. Sommige vermeldingen waren duplicaten en andere bevatten ontbrekende informatie.

Om de gegevens bruikbaar te maken, bouwde het team een tweede programma om ze op te schonen en te organiseren. Ze zetten de Bengaalse cijfers om in standaardcijfers, herstelden de tijdstempels zodat ze allemaal hetzelfde formaat volgden, en verwijderden de dubbele vermeldingen. In totaal verwijderden ze 438 duplicaten en een handvol records met onmogelijke datums, wat resulteerde in een definitieve set van 104.134 unieke uurgeregistreerde records. Cruciaal was dat ze besloten de ontbrekende getallen niet in te vullen of de vreemde uitschieters die ze vonden niet te corrigeren. In plaats daarvan lieten ze de gaten en de vreemde waarden precies zoals ze in de bron verschenen, in het vertrouwen dat toekomstige onderzoekers de rauwe waarheid van de gegevens willen zien en zelf beslissingen willen nemen over hoe ze hiermee omgaan. Deze aanpak zorgt ervoor dat de dataset een transparante spiegel blijft van de officiële records, in plaats van een gepolijste versie die mogelijke fouten verbergt.

Zodra de gegevens klaar waren, besteedden de onderzoekers maanden aan het controleren van de kwaliteit om te verzekeren dat ze een waar verhaal vertelden. Ze verifieerden of de totale hoeveelheid vermogen die voor een bepaalde uur werd gerapporteerd, overeenkwam met de som van de individuele bronnen, zoals gas en kolen, plus de elektriciteit geïmporteerd uit buurlanden. In bijna alle gevallen waar alle getallen beschikbaar waren, kwam het totaal exact overeen met de som van de delen, met een verschil van minder dan één megawatt. Deze interne consistentie bevestigde dat het proces van gegevensverzameling de relaties tussen de verschillende kolommen van informatie had behouden. Ze controleerden ook of de gegevens zich gedroegen zoals een echt elektriciteitsnet zou moeten doen. Ze ontdekten dat de elektriciteitsopwekking een voorspelbaar dagelijks ritme volgde, met een daling in de vroege ochtend, een stijging tijdens de dag en een duidelijk plateau in de avond wanneer de vraag piekt. Ze zagen ook een wekelijks patroon, waarbij het stroomverbruik merkbaar daalt op vrijdagen, de wekelijkse vrije dag in Bangladesh, en een seizoenspatroon waarbij de aanvoer hoger is in de hete zomermaanden en lager in de wintermaanden.

De dataset onthult een significante verschuiving in hoe Bangladesh zijn groei aandrijft. Over de tien jaar die door de gegevens worden gedekt, is de totale elektriciteitsvoorziening van het land gestaag gegroeid. De onderzoekers observeerden dat terwijl aardgas traditioneel de dominante bron is geweest, het aandeel ervan in de totale mix is begonnen te dalen. Tegelijkertijd is de kolenopwekking hard gegroeid, van een klein deel van de aanvoer naar een belangrijke bijdrager die nu qua volume wedijvert met gas. De gegevens tonen ook het toenemende belang van grensoverschrijdende handel. Elektriciteit geïmporteerd uit India, met name via een hoogspanningsverbinding genaamd Bheramara, is een stabiel en essentieel onderdeel van het netwerk geworden. Nieuwere verbindingen, waaronder lijnen vanuit Adani en vanuit Nepal, verschijnen in de latere jaren van de dataset, wat de uitbreidende energiepartnerschappen van het land weerspiegelt.

De onderzoekers documenteerden ook de beperkingen van hun werk, om gebruikers precies te laten weten waarnaar ze kijken. Ze ontdekten dat sommige nieuwere bronnen, zoals windenergie en zonne-energie, grote gaten hebben in de vroege jaren van de dataset omdat ze op dat moment niet werden gerapporteerd. De gegevens bevatten ook enkele extreme waarden die fysiek onmogelijk lijken, zoals een enkel record dat een totale opwekking van meer dan 64 miljoen megawatt laat zien, wat ver boven wat het hele land ooit zou kunnen produceren ligt. Dit zijn waarschijnlijk fouten in de oorspronkelijke rapportage, en de onderzoekers hebben ze in het bestand gelaten zodat gebruikers ze kunnen identificeren en afhandelen. Op dezelfde manier laten de gegevens zien dat de elektriciteitsvoorziening van het land niet alleen gaat over hoeveel er wordt opgewekt, maar ook over wanneer dat gebeurt, met duidelijke pieken in de avond die zorgvuldig beheer vereisen.

Door deze dataset samen met de computercode waarmee deze is gemaakt vrij te geven, heeft het team een fundament gelegd voor toekomstig onderzoek. Wetenschappers kunnen deze gegevens nu gebruiken om toekomstige energiebehoeften te voorspellen, de milieu-impact van de overstap van gas naar kolen te bestuderen, of te analyseren hoe grensoverschrijdende handel de nationale veiligheid beïnvloedt. Het werk transformeert een gefragmenteerde, moeilijk leesbare verzameling webpagina's in een helder, langetermijnverslag van de energierit van een natie. Het laat zien dat zelfs wanneer gegevens verborgen zijn achter rommelige interfaces, ze onthuld en georganiseerd kunnen worden om de gestage, complexe hartslag van een moderne economie te onthullen. Het resultaat is een instrument waarmee iedereen, van studenten tot beleidsexperts, de afgelopen tien jaar van de geschiedenis van de stroomvoorziening van Bangladesh in hoge definitie kan zien, klaar om de beslissingen van het volgende decennium te informeren.