In theorie zou het dus moeten zijn dat 1 van de 50 keer het member met de hoogste waarde uitkomt, 1 vd 50 keer de een na hoogste enz. tot aan 1 vd 50 keer de laagste. Om dit te testen zul je jaren aan data nodig hebben.
Als je genoeg 'cases' hebt, zal je zien dat de waarheid in 50 van de 52 keer binnen de bandbreedte van het ensemble valt en tweemaal erbuiten. Afhankelijk van de natuurlijke spreiding in het klimaat waarvoor de EPS geldt, heb je slechts enkele weken tot een jaar nodig. In Nederland is een half jaar genoeg (in mijn verificatie 344 runs).
Ik vraag me ook af wat de waarde van een pluim op +15 dagen is als deze zeer breed is. Ik wil graag weten hoe groot de waarde van de pluim zelf is.
Voor de middellange en lange termijn heeft het EPS vooral waarde in de vorm van kansverwachtingen. Mijn manier van verifiëren is daar ook op geënt: hoe vaak valt de waarheid binnen de pluim en zit de waarheid vaak aan de onder- of bovenkant, of is die over langere tijd netjes over het hele ensemble verdeelt? Dat zegt iets over de kwaliteit van het ensemble in het algemeen.
In specifieke situaties kan de kwaliteit van het ensemble natuurlijk zeer uiteenlopen. Vooraf valt niet goed te zeggen wanneer het ensemble wel of niet goed zal scoren, al zijn er wel bepaalde stromingspatronen die moeilijker 'te vatten zijn'. Dat blijken in de praktijk vooral geblokkeerde situaties en de aanzetten daartoe te zijn.
Zijn er voor Nederland beginsituaties waarbij de verwachtingshorizon flink verder ligt als in andere situaties?
Zie boven: bijvoorbeeld bij situaties waarin een blokkade (lijkt) te ontstaan.
Gr. Ben
Quote selectie