ForeComp: An R Package for Comparing Predictive Accuracy Using Fixed-Smoothing Asymptotics

Dit paper introduceert ForeComp, een R-pakket dat de vergelijkende voorspellende nauwkeurigheid analyseert met behulp van Diebold-Mariano-tests en vaste-kwelling-asymptotiek, inclusief visuele hulpmiddelen voor bandbreedtegevoeligheid en toepassing op professionele voorspellingen.

Minchul Shin, Nathan Schor

Gepubliceerd 2026-03-10
📖 4 min leestijd☕ Koffiepauze-leesvoer

Each language version is independently generated for its own context, not a direct translation.

ForeComp: Een Nieuw Gereedschapskistje voor Voorspellingen

Stel je voor dat je twee vrienden hebt, Jan en Pieter, die allebei proberen te voorspellen hoe het weer morgen wordt. Jan kijkt naar de wolken, Pieter naar zijn oude wekker. Wie is de betere voorspeller?

In de economie en finance doen economen precies hetzelfde, maar dan met voorspellingen over de economie, inflatie of beurskoersen. Ze willen weten: "Wie is de beste?"

Het probleem is dat de oude manier om dit te testen (een methode uit 1995 genaamd de Diebold-Mariano test) soms een beetje "dwaas" is, vooral als je niet heel veel data hebt. Het is alsof je Jan en Pieter slechts één dag laat voorspellen en dan concludeert dat Jan de beste is, puur omdat hij die ene keer toevallig gelijk had. De oude methode ziet die toevalstreffer vaak als een echt bewijs.

Hier komt ForeComp om de hoek kijken. Het is een nieuwe softwaretool (een pakketje voor het programmeertaal R) die economen helpt om eerlijker te testen wie er echt de beste voorspeller is.

Hier is hoe het werkt, vertaald in alledaagse taal:

1. Het Probleem: De "Korte Geheugen" Valstrik

De oude methode kijkt naar de fouten die Jan en Pieter maken. Als Jan vaak een beetje naast de bus zit, maar Pieter soms heel ver, wil je dat weten. Maar als je maar weinig data hebt (bijvoorbeeld slechts 40 weken van voorspellingen), kan de oude methode in de war raken.

Het is alsof je een kok wilt beoordelen op basis van slechts drie maaltijden. Als de kok die ene keer per ongeluk een perfecte taart bakt, zegt de oude methode: "Hij is een ster!" Maar misschien was het gewoon geluk. De oude methode negeert dat de fouten van de kok soms met elkaar verbonden zijn (als hij vandaag een taart mislukt, is hij morgen misschien ook nog niet helemaal in orde).

2. De Oplossing: "Vaste Smoothing" (Het Glazen Kijkvenster)

ForeComp introduceert een nieuwere, slimmere manier van kijken, genaamd fixed-smoothing asymptotics.

  • De Oude Manier: Kijkt door een heel smal kijkvenster. Je ziet alleen wat er direct gebeurt, maar je mist de context. Dit leidt tot veel "vals-positieven" (je denkt dat iemand goed is, terwijl het geluk was).
  • De Nieuwe Manier (ForeComp): Gebruikt een breder, gladder kijkvenster. Het neemt meer context mee en kijkt naar de "lange termijn" patronen in de fouten. Het zegt: "Oké, Jan had die ene keer geluk, maar als we naar de hele reeks kijken, is hij niet consistent beter."

Dit zorgt ervoor dat je veel minder vaak iemand onterecht prijst. Het is alsof je de kok niet beoordeelt op één maaltijd, maar op zijn hele carrière, rekening houdend met zijn slechte dagen.

3. De "Trade-off" (De Afweging)

ForeComp heeft een heel handig hulpmiddel genaamd Plot Tradeoff.

Stel je voor dat je een schuifregelaar hebt op een geluidsapparaat.

  • Als je de regelaar naar links schuift (kleine "bandbreedte"), hoor je de muziek heel scherp en helder (je hebt veel kans om een echte winnaar te vinden), maar je hoort ook veel ruis (je denkt dat er een winnaar is, terwijl het ruis is).
  • Als je de regelaar naar rechts schuift (grote "bandbreedte"), is de muziek heel rustig en veilig (je maakt bijna geen fouten door iemand onterecht te prijzen), maar je mist misschien de echte sterren omdat je te voorzichtig bent.

Plot Tradeoff is een grafiek die je laat zien wat er gebeurt als je die regelaar beweegt. Het helpt de econoom om te beslissen: "Wil ik liever een beetje risico lopen om een winnaar te vinden, of wil ik zeker zijn dat mijn winnaar echt goed is?"

4. Wat hebben ze ontdekt?

De auteurs van het papier hebben ForeComp getest met echte data van de "Survey of Professional Forecasters" (een groep experts die de economie voorspellen).

  • Resultaat: De oude methoden zeiden vaak: "De experts zijn veel beter dan de simpele voorspellingen!"
  • ForeComp: Zei: "Wacht even, als we het goed doen met de nieuwe methode, zijn ze eigenlijk niet veel beter dan we dachten."

De oude methode was te optimistisch. ForeComp laat zien dat in korte periodes (zoals de laatste 10 jaar) de oude methode vaak "te veel roept" dat er een verschil is, terwijl er misschien geen echt verschil is.

Samenvatting

ForeComp is als een nieuwe, betere bril voor economen.

  • De oude bril (oude tests) gaf soms een valse kleurweergave: het zag verschillen waar er geen waren.
  • De nieuwe bril (ForeComp) corrigeert dit beeld. Het is iets conservatiever, maar veel betrouwbaarder, vooral als je niet heel veel data hebt.

Het pakketje helpt economen om niet te snel te juichen over wie de beste voorspeller is, en zorgt ervoor dat hun conclusies steviger staan op de grond, zelfs als de data-kast niet helemaal vol is.