Praktische leeswijzer
Hoe lees je een onderzoeksresultaat?
Begin niet bij het grootste percentage. Een betrouwbare conclusie ontstaat pas wanneer vraag, eindtest, baseline, onzekerheid en kosten samen kloppen.
De juiste volgorde
Zes vragen vóór je een conclusie gelooft.
Deze volgorde voorkomt dat een opvallend getal meer betekenis krijgt dan het onderzoek toelaat.
- 01
Wat was vooraf de onderzoeksvraag?
Een goede vraag noemt de informatie, het te voorspellen resultaat en de horizon. Als die achteraf worden aangepast, neemt de kans op toevalsbevindingen toe.
- 02
Was er een echte holdout?
Ontwikkeldata helpt een model leren; holdoutdata is een later, afgeschermd tijdsblok waarop keuzes niet meer worden aangepast. Alleen die eindtest telt als eerlijke beoordeling.
- 03
Is de steekproef groot en representatief genoeg?
Meer waarnemingen verkleinen toevalsruis, maar duizend bijna identieke minuten zijn niet hetzelfde als duizend onafhankelijke gebeurtenissen. Kijk daarom ook naar ondernemingen, perioden en marktregimes.
- 04
Verslaat het model een eenvoudige baseline?
Een richtingsscore boven 50% kan alsnog zwak zijn wanneer altijd “omhoog” voorspellen 52,9% oplevert. De juiste vergelijking is het beste eenvoudige alternatief, niet alleen toeval.
- 05
Hoe breed is de onzekerheid?
Een puntschatting is één getal; het interval toont welke waarden met de data verenigbaar zijn. Omvat een verschil nul, dan kan de waargenomen voorsprong door toeval zijn ontstaan.
- 06
Blijft het resultaat over na kosten en replicatie?
Een statistisch patroon moet economisch bruikbaar zijn na transactiekosten. Een herhaling op andere data is vervolgens de sterkste controle tegen een toevallige eerste vondst.
Echt voorbeeld uit dit archief
49,88% is niet “bijna goed”.
In de onafhankelijke replicatie voorspelde het tekstmodel 49,88% van de richtingen correct. De eenvoudige baseline haalde 52,90%, terwijl het 95%-interval van het model 47,20–52,51% bedroeg.
De juiste conclusie is daarom niet dat het model nét tekortkwam, maar dat deze eindtest geen bewijs leverde voor extra voorspelwaarde.
Lees de volledige replicatieStatuskleuren
In één oogopslag, nooit zonder onderbouwing.
Dataverwerking of eindtest is nog niet afgerond; er is nog geen definitieve conclusie.
Een eerste effect dat vervolgonderzoek verdient, maar onzekerheid of replicatie ontbreekt nog.
De eindtest leverde geen overtuigende meerwaarde ten opzichte van de referentie.
Een bruto patroon bleef economisch niet overeind na realistische kosten.
Alleen de onderzoeksopzet is voorbereid; het onderzoek is niet gestart en heeft geen resultaat.