Emerging diseases: when lower vaccine performance in Randomized Clinical Trials means higher economic value

Dit artikel toont aan dat voor opkomende ziektes een vaccin dat tijdens het piekmoment van een uitbraak in een gerandomiseerde klinische studie weliswaar met hoge zekerheid effectief blijkt, vaak te laat wordt goedgekeurd om kosteneffectief te zijn, terwijl een vaccinatie in een vroeg stadium juist kosteneffectiever zou zijn maar in een studie minder snel effectiviteit aantoont door de lage transmissie.

De kern

Titel: Waarom een "geslaagde" vaccin-test soms betekent dat het te laat is

Stel je voor dat je een nieuwe, onbekende ziekte (noem het "Ziekte X") in een stad ziet opkomen. Je hebt een vaccin, maar je weet niet precies hoe snel de ziekte zich verspreidt of hoe goed het vaccin werkt. De standaardmanier om te beslissen of je het vaccin moet gebruiken, is een grote test doen: een RCT (een willekeurige gecontroleerde studie).

In deze test krijg je de helft van de mensen het vaccin en de andere helft een nepvaccin (placebo). Als er duidelijk minder mensen ziek worden in de groep met het echte vaccin, zeggen we: "Het werkt! We moeten het gebruiken."

Het probleem: De valstrik van de timing

De auteurs van dit paper zeggen: "Wacht even, dat is niet zo simpel." Ze tonen aan dat bij een nieuwe, snelle epidemie, een geslaagde test eigenlijk een slecht teken kan zijn voor de economische waarde van het vaccin, en een mislukte test juist een goed teken.

Hier is de uitleg met een simpele analogie:

De Analogie: De Brand in het Bos

Stel je voor dat er een bosbrand is (de epidemie). Je hebt een waterkanon (het vaccin).

1. Het begin van de brand (De vroege fase):
   De brand begint net. Er is nog maar één vlammetje. Als je nu je waterkanon inschakelt, kun je de hele brand blussen voordat hij uit de hand loopt. Dit is ontzettend waardevol.

   • Maar: Omdat er nog maar één vlammetje is, is het in je test heel moeilijk om te bewijzen dat je waterkanon werkt. Misschien brandt dat ene vlammetje vanzelf uit, of misschien brandt het net niet. Je testresultaat is vaag: "We weten niet of het werkt."
   • Conclusie: De test faalt, maar het moment om te handelen is perfect.

2. Het hoogtepunt van de brand (De piek):
   De brand is nu enorm. Het bos staat in lichterlaaie. Als je nu je waterkanon inschakelt, zie je direct dat het water de vlammen dooft. Je kunt met 100% zekerheid zeggen: "Kijk, zonder water waren er 1000 bomen gebrand, met water slechts 100. Het werkt!"

   • Maar: De brand is al zo groot dat het te laat is om het bos te redden. De meeste bomen zijn al verbrand. Je hebt een perfecte test die bewijst dat het werkt, maar het economische nut is nihil omdat je te laat was.

Wat zegt dit paper dan precies?

De auteurs hebben met computersimulaties laten zien dat er een vreemd verband is:

• Hoe beter de test uitslag is (hoger vertrouwen dat het werkt), hoe waarschijnlijker het is dat de epidemie al op zijn piek is.
  Als de test duidelijk bewijst dat het vaccin werkt, betekent dit vaak dat de ziekte al zo snel en hevig heeft toegeslagen dat het vaccin nu te laat komt om de meeste schade te voorkomen. Het is alsof je de brandbluswagen roept nadat het huis al in puin ligt. De test is "geslaagd", maar de investering is verspild.

• Hoe slechter de test uitslag is (moeilijk om te bewijzen dat het werkt), hoe waarschijnlijker het is dat de epidemie nog in de kinderschoenen staat.
  Als de test niet kan bewijzen dat het werkt (omdat er nog te weinig gevallen zijn), betekent dit vaak dat de epidemie nog traag is. Dit is precies het moment waarop je moet vaccineren om de ramp te voorkomen. Als je hier wacht op een "geslaagde" test, mis je het moment om de ramp te voorkomen.

De "Simpson's Paradox" (De verwarring)

Het paper noemt dit een vorm van verwarring. We denken: "Als het vaccin werkt, is het goed."
Maar in de realiteit van een nieuwe epidemie geldt: "Als we kunnen bewijzen dat het werkt, is het waarschijnlijk te laat."

Het is alsof je een weersvoorspelling krijgt:

• Als de weerman zegt: "Het regent heel hard, hier is een paraplu die werkt!" (Geslaagde test), dan is het al te laat om droog te blijven.
• Als de weerman zegt: "Het regent nog niet, we weten niet of de paraplu werkt" (Mislukte test), dan is het het perfecte moment om de paraplu te kopen voordat het stortregent.

Wat betekent dit voor de praktijk?

De auteurs waarschuwen dat we niet blind moeten vertrouwen op de standaardregels van medische tests.

• De huidige regel: "Wacht tot de test bewijst dat het werkt, en geef dan het vaccin."
• De nieuwe inzichten: Bij een nieuwe, onbekende ziekte kan deze regel leiden tot het nemen van slechte beslissingen. Je zou kunnen wachten tot je "bewijs" hebt, maar tegen die tijd is de kans dat het vaccin nog nuttig is, al verdwenen.

Samenvattend:
Soms is een "mislukte" test (waar je niet zeker bent of het werkt) een teken dat je nu moet handelen. En een "geslaagde" test (waar je zeker weet dat het werkt) kan een teken zijn dat je te laat bent. Het paper roept op om niet alleen naar de cijfers van de test te kijken, maar ook naar het tijdstip en de snelheid van de epidemie zelf.

Technische samenvatting

Titel: Opkomende ziekten: wanneer lagere vaccinprestaties in gerandomiseerde klinische trials (RCT's) leiden tot een hogere economische waarde

1. Het Probleem

Het artikel adresseert een fundamenteel conflict tussen de methodologie van fase III gerandomiseerde klinische trials (RCT's) en de economische efficiëntie van vaccinatiecampagnes bij opkomende ziekten (zoals "Disease X").

• Huidige aanname: Er wordt impliciet aangenomen dat een hoge klinische werkzaamheid (statistisch significant bewezen in een RCT) correleert met een hoge maatschappelijke en economische meerwaarde. Een succesvolle RCT zou dus leiden tot goedkeuring en implementatie.
• Het paradoxale inzicht: De auteurs betogen dat bij opkomende ziekten met onzekere epidemiologische dynamiek, een succesvolle RCT (hoge werkzaamheid) vaak betekent dat de trial plaatsvond tijdens de piek van de epidemie. Op dat moment is het echter vaak te laat om een vaccinatiecampagne kosteneffectief te maken.
• De omgekeerde relatie: Een RCT die faalt om werkzaamheid te bewijzen (lage werkzaamheid) kan juist wijzen op een vroege fase van de epidemie met lage transmissie. In deze vroege fase is vaccinatie juist het meest kosteneffectief, omdat het de verspreiding kan stoppen voordat deze uit de hand loopt.

2. Methodologie

De auteurs gebruiken een wiskundig model gebaseerd op Monte Carlo-simulaties om deze hypothese te testen.

• Model: Een deterministisch SIR-model (Susceptible-Infectious-Recovered) voor een gesloten populatie van $N = 10^8$ individuen.
  • De ziekte begint met één geïnfecteerd individu.
  • Er is levenslange immuniteit na herstel.
  • De basisreproductiegetal ($R_0$) en het hersteltempo ($\gamma$) zijn onbekend en worden getrokken uit a priori verdelingen (Gamma en Lognormaal).
• Vaccin: Een kandidaat-vaccin met een onbekende werkzaamheid ($\alpha$), getrokken uit een uniforme verdeling. Het biedt onmiddellijke en blijvende bescherming.
• Tijdslijn:
  • $T_v$: Het moment waarop het vaccin beschikbaar is voor een RCT (vastgesteld op dag 365).
  • $T_c$: De duur van de RCT (100 dagen).
  • De RCT omvat $n = 50.000$ individuen, verdeeld in een controlegroep en een behandelgroep.
• Statistische Test: De werkzaamheid wordt getest via een z-score op het verschil in infecties tussen de groepen, met als drempel een p-waarde < 0,05 (95% betrouwbaarheidsniveau).
• Kosten-batenanalyse:
  • Kosten van infectie ($c_i$): Genormaliseerd naar 1 per dag.
  • Kosten van vaccinatie ($c_v$): Variabel (productie, toediening, bijwerkingen).
  • Doel: Minimalisatie van het tijdsgedisconteerde aantal infectiedagen.
• Strategieën: De auteurs vergelijken verschillende strategieën:
  1. Geen vaccinatie.
  2. Directe vaccinatie bij beschikbaarheid ($T_v$).
  3. Voorwaardelijke vaccinatie na RCT: Alleen vaccineren als de RCT wel werkzaamheid bewijst ($CT_{95}$).
  4. Voorwaardelijke vaccinatie na RCT: Alleen vaccineren als de RCT geen werkzaamheid bewijst ($CT_{95}^-$).

3. Belangrijkste Resultaten

De simulaties (100.000 runs) leveren de volgende tegenintuïtieve bevindingen op:

• De standaardstrategie faalt: De gebruikelijke strategie ($CT_{95}$: vaccineren alleen als de RCT succesvol is) is nooit de optimale strategie, ongeacht de vaccinatiekosten. Het leidt tot een gemiddeld aantal infectiedagen van 324,8 miljoen.
• De omgekeerde strategie is superieur: De strategie waarbij men vaccineren alleen toepast als de RCT faalt om werkzaamheid te bewijzen ($CT_{95}^-$), levert aanzienlijk betere resultaten op (gemiddeld 132,9 miljoen infectiedagen).
• De Simpson-paradox: De relatie tussen RCT-resultaten en economische waarde wordt vertekend door de epidemische dynamiek (een verstorende variabele).
  • Snelle dynamiek (vroege piek): De RCT heeft een hoge kans om werkzaamheid te bewijzen (veel infecties in de trial), maar vaccinatie is dan te laat om kosteneffectief te zijn.
  • Trage dynamiek (late piek): De RCT heeft een lage kans om werkzaamheid te bewijzen (weinig infecties in de trial), maar dit is precies het moment waarop vaccinatie de grootste maatschappelijke winst oplevert.
• Lineaire regressie: Er is een positieve correlatie gevonden tussen de p-waarde van de RCT en de baten van vaccinatie. Een hogere p-waarde (minder bewijs voor werkzaamheid) correleert met een grotere economische meerwaarde van vaccinatie.
  • Voor $c_v = 3$, is het gebruik van $CT_{95}^-$ in plaats van $CT_{95}$ goed voor een winst van ongeveer 44,7 miljoen eenheden.
• Tijdstip van de piek (UPT):
  • Bij een "Unmitigated Peak Time" (UPT) onder de 2 jaar: De RCT slaagt vaak, maar vaccinatie is economisch negatief.
  • Bij een UPT boven de 2 jaar: De RCT slaagt zelden, maar vaccinatie is economisch zeer positief.

4. Bijdragen en Significatie

Dit artikel biedt een kritische bijdrage aan de epidemiologische modellering en gezondheidsbeleid:

• Herinterpretatie van RCT-data: Het artikel stelt dat RCT-data niet alleen informatie geeft over de intrinsieke eigenschappen van het vaccin, maar ook over de fase van de epidemie. In het geval van opkomende ziekten kan een "negatief" RCT-resultaat een signaal zijn voor een gunstig moment voor interventie.
• Kritiek op de huidige besluitvorming: De huidige praktijk om klinische werkzaamheid als een noodzakelijke voorwaarde voor kosteneffectiviteit te zien, is in deze context fundamenteel flawed. Het kan leiden tot het afwijzen van kosteneffectieve vaccins en het goedkeuren van inefficiënte vaccinaties.
• Implicaties voor beleidsmakers: Voor ziekten met onzekere dynamiek (zoals Disease X) zou de interpretatie van klinische trials mogelijk "omgekeerd" moeten worden. Een gebrek aan statistisch significant bewijs in een vroege trial kan een sterkere reden zijn om te vaccineren dan een succesvolle trial.
• Ethische en economische kosten: Het artikel waarschuwt dat het ethisch imperative om strikte klinische bewijslast te eisen, grote maatschappelijke kosten met zich meebrengt door het uitstellen van effectieve interventies tot het moment dat ze niet meer rendabel zijn.

Conclusie:
De auteurs concluderen dat bij opkomende ziekten met onzekerheid, de kortetermijnobservaties van een RCT misleidend kunnen zijn voor langetermijnbeslissingen. De economische waarde van een vaccin kan juist het hoogst zijn wanneer de klinische trial het minst overtuigend is, omdat dit wijst op een vroege epidemiefase waarin preventie het meest effectief is.