De vliegtuigen waar alles mee begon
Tijdens de oorlog bestudeerden ingenieurs teruggekeerde bommenwerpers en noteerden ze waar de meeste kogelgaten zaten. De voor de hand liggende oplossing leek: versterk de plekken met de meeste gaten.
Een wiskundige draaide de logica om: de kogelgaten zijn zichtbaar op plekken waar het vliegtuig tegen bestand is. De bepantsering moest komen op plekken zonder sporen - want vliegtuigen die daar geraakt werden, keerden niet terug.
De fout zat niet in de berekeningen, maar in de steekproef. Daarin zaten alleen overlevende vliegtuigen, waardoor de kaart van de schade veilige treffers liet zien, niet de gevaarlijke.
Waar je hetzelfde patroon tegenkomt
- Adviezen van succesvolle mensen: we horen degenen bij wie het is gelukt, maar niet degenen die hetzelfde deden en het niet haalden.
- Reviews en beoordelingen: tevreden en woedende klanten schrijven ze, terwijl de zwijgende meerderheid niet in de statistieken voorkomt.
- Oude spullen: 'vroeger maakten ze dingen die eeuwen meegingen' - alleen wat niet kapotging, heeft ons bereikt.
- Investeringen en de markt: bedrijven die zijn gesloten, verdwijnen uit rapportages, waardoor rendementen uit het verleden hoger lijken dan ze werkelijk waren.
Daarom zijn succesverhalen gevaarlijk. Je kunt er geen oorzaak uit afleiden: als duizenden mensen die het niet haalden dezelfde gewoontes hadden, verklaren die gewoontes niets en moet je de verklaring zoeken in wat je niet ziet.
De controle is eenvoudig en bijna altijd ongemakkelijk: vraag waar de andere helft van de gegevens is. Wie heeft het geprobeerd en het niet gehaald? Wat is er gebeurd met degenen die niet terugkeerden? Meestal blijkt dat niemand die gegevens heeft verzameld.
Het omgekeerde toepassen is ook nuttig. Als je besluit wat je van andermans ervaring wilt leren, kijk dan niet naar degenen bij wie het is gelukt, maar naar degenen die dicht bij jouw situatie stonden en het niet haalden: daar zijn de oorzaken duidelijker.
Lees de rest in de Miqo-app
Nog 1 minuut lezen, en aan het eind een quiz. Te vinden onder ‘Geschiedenis → Grote fouten’
Richt de camera van je telefoon hierop om de App Store of Google Play te openen.
Bronnen
- Het voorbeeld van de bepantsering van bommenwerpers wordt in verband gebracht met het werk van Abraham Wald bij de Statistical Research Group tijdens de Tweede Wereldoorlog: hij liet zien dat de schade bij teruggekeerde vliegtuigen scheef verdeeld was en stelde voor om zones zonder kogelgaten extra te versterken. Systematische selectiebias wordt in de statistiek beschreven en duikt regelmatig op in reviews, succesverhalen en gegevens over rendement