STORMY : A Real-time Triggering Framework using Yamagawa Solar Spectrograph for Active Solar Emission Observations with the MWA

Technische Samenvatting: STORMY – Een real-time triggeringsframework voor MWA-zonobservaties

Probleemstelling
Zonale radio-uitbarstingen, die cruciale inzichten bieden in de solaire fysica en ruimteweersystemen, zijn inherent onvoorspelbaar, transient en komen zelere frequent voor. Moderne radio-interferometers zoals de Murchison Widefield Array (MWA), voorlopers van de Square Kilometre Array (SKAO), bieden superieure beeldvormende capaciteiten, maar zijn sterk overbezet. Het vertrouwen op blinde, geplande zonobservaties is inefficiënt en leidt tot een hoge waarschijnlijkheid van het missen van significante zonne-events. Hoewel er algoritmen voor automatische detectie in archiefgegevens bestaan, zijn deze vaak ongeschikt voor real-time triggering omdat ze de volledige morfologie van een event vereisen voordat een trigger kan worden gegenereerd. Er is een robuust, lage-latentie framework nodig om de beperkte observatietijd effectief te benutten door zonneactiviteit alleen te vangen wanneer deze in bijna-real-time wordt gedetecteerd.

Methodologie
De auteurs hebben STORMY (Solar Triggered Observations of Radio bursts using MWA and Yamagawa) ontwikkeld, een real-time triggering framework ontworpen voor de MWA. Het systeem werkt volgens de volgende workflow:

1. Databron en Latentiebeheer:

   • De trigger wordt afgeleid van bijna-real-time data van de Yamagawa Solar Spectrograph (Japan), die opereert in de band 70 MHz–9 GHz. Vanwege vergelijkbare lengtegraden valt het observatievenster van Yamagawa volledig samen met die van de MWA (80–300 MHz).
   • Het systeem maakt gebruik van een aangepaste datastroom van Yamagawa met een latentie van 2 minuten.
   • Om gegevensverlies als gevolg van deze latentie te beperken, onderhoudt de MWA een voltage ringbuffer (die tot 160 seconden aan ruwe voltage-data opslaat). Wanneer een trigger wordt ontvangen, wordt de buffer bevroren en naar de schijf gedumpt, waardoor de initiële fase van het zonne-event dat voorafging aan de aankomst van de trigger, kan worden hersteld.

2. Pre-processing Pipeline:

   • Bandpass Correctie: Het ruwe dynamische spectrum wordt genormaliseerd met behulp van een mediaan bandpass berekend uit eerdere volledige daggegevens (opgesplitst in segmenten van 180 seconden) om de instrumentale spectrale respons te verwijderen.
   • RFI Mitigatie: Het systeem gebruikt specifieke algoritmen om Radio Frequentie Interferentie (RFI) te verwijderen:
     • Periodieke RFI: Geïdentificeerd via peak finding met een periodiciteit van 300 seconden en verwijderd.
     • Smalbandige Persistente RFI: Gefilterd met behulp van een aangepaste z-score gebaseerd op de Median Absolute Deviation (MAD) om te voorkomen dat echte zonnestralen worden gemarkeerd.
     • Transiënte RFI: Aangepakt via morfologische operaties.
   • Achtergrond Subtractie: Een bewegend mediaanfilter (vensterbreedte van 1800 seconden) wordt toegepast om langzaam variërende achtergrondruis (instrumentale gain, systeemtemperatuur, rustige Zon) te subtraheren.

3. Event Detectie:

   • Een Signaal-ruisverhouding (SNR) dynamisch spectrum wordt gegenereerd.
   • Een binair dynamisch spectrum wordt gemaakt met een drempelwaarde van 13σ (bepaald om de balans tussen precisie en recall te optimaliseren).
   • Morfologische Closing: Een 2-staps morfologische closing-operatie (dilatatie gevolgd door erosie met een 2×2 kernel) vult ontbrekende pixels in die veroorzaakt zijn door RFI-flagging.
   • Contour Detectie: Gesloten contouren worden geïdentificeerd met behulp van OpenCV. Events worden gevalideerd als ze ten minste 15 MHz in frequentie en 3 seconden in tijd beslaan.

4. Triggering en Observatie:

   • Bij detectie triggert een webgebaseerd mechanisme de MWA.
   • Het systeem schat de spectrale spanne van de burst en configureert de 30,72 MHz bandbreedte van de MWA om het gedetecteerde frequentiebereik te dekken, waarbij guard bands worden toegevoegd (30 MHz onder, 10 MHz boven) om spectrale drift en zwakkere emissies op te vangen.
   • De MWA schakelt over naar een "picket fence" modus (log-gespaaste frequentieblokken) voor de getriggerde observatie.

Belangrijkste Bijdragen

• Ontwikkeling van STORMY: De eerste implementatie van een real-time triggering framework specifiek voor zonnale radio-uitbarstingen met behulp van MWA- en Yamagawa-data.
• Algoritmische Innovatie: Een robuuste pipeline die median-gebaseerde denoising, aangepaste z-score RFI-verwijdering en morfologische closing combineert om uitbarstingen te detecteren in ruizige real-time datastromen.
• Latentiecompensatie: Een praktische demonstratie van het gebruik van de MWA voltage ringbuffer om verloren gegaan event-data te herstellen tijdens de latentie van de triggergeneratie (ca. 70–80 seconden).
• Operationele Implementatie: Het systeem is operationeel gemaakt bij de MWA voor routinematige zonobservaties.

Resultaten

• Prestatie-metrieken: Testen op 8.400 twee-minuten datablokken (bevattende 226 ware events) toonden aan dat een drempelwaarde van 13σ de optimale F1-score oplevert, waarbij een balans wordt gevonden tussen precisie en recall.
• Operationeel Succes: Tussen 31 juli 2024 en 31 januari 2025 heeft STORMY ongeveer 110 zonne-uitbarstingen succesvol getriggerd en geobserveerd.
• Casestudies: Het artikel presenteert twee succesvolle captures:
  1. Een M-klasse X-ray flare op 1 augustus 2024, waarbij het systeem een observatie triggerde bij 126 MHz, waarbij radiobeelden werden gevangen die consistent zijn met SDO/AIA data.
  2. Een Group Type-III event op 4 november 2024, waarbij buffergegevens succesvol werden gecorreleerd om een radiobeeld te produceren bij 103 MHz, overlappend met LASCO C2 data.

Betekenis en Claims
Het artikel claimt dat STORMY een robuuste en efficiënte methode biedt om interferometrische data van transiënte zonneactiviteit te vangen, waarmee de inefficiëntie van blind plannen wordt aangepakt. De auteurs benadrukken dat dit framework:

• Het efficiënt vangen van event-rijke zonnegegevens mogelijk maakt met bestaande instrumenten zoals de MWA, LOFAR en OVRO-LWA.
• De weg vrijmaakt voor getriggerde observaties met de SKAO (specifiek SKA-Low). De auteurs stellen voor dat het "solar subarray" concept voor SKA-Low vergelijkbare voltage buffering en real-time detectie kan gebruiken om breedbandige observaties te triggeren, waardoor de impact op andere wetenschappelijke observaties wordt geminimaliseerd terwijl de capture van onvoorspelbare zonne-events wordt gemaximaliseerd.
• Demonstreert dat zonne-triggering haalbaar is met de huidige technologie, wat een pad biedt om toekomstige zonnale radio-astronomie te optimaliseren tijdens de huidige zonnemaximum.