Superforecasters: wat pandemische planners kunnen leren van 's werelds beste voorspellers

Superforecasters: wat pandemische planners kunnen leren van 's werelds beste voorspellersVolgens Dominic Cummings, de voormalige hoofdadviseur van de Britse premier Boris Johnson, hadden experts het catastrofaal mis. Cummings heeft betoogd dat het officiële wetenschappelijke advies van de Britse regering in maart 2020 enorm verkeerd begreep hoe de pandemie zou uitpakken, wat leidde tot een vertraging bij het afsluiten die duizenden levens kostte.

Volgens Cummings waren het bepaalde specialisten met minder kennis van pandemieën of medicijnen - zoals datawetenschapper Ben Warner, kunstmatige intelligentie-onderzoeker Demis Hassabis van DeepMind en wiskundige Tim Gowers - die op dit punt nauwkeurigere voorspellingen gaven.

Cummings staat ook bekend als een ventilator of Superforecasting door Philip Tetlock, een boek over mensen die toekomstige gebeurtenissen betrouwbaarder voorspellen dan de meesten. Sommige supervoorspellers zijn geprezen voor hun voorspellingen over de pandemie, terwijl anderen dat ook zijn geweest kritisch over de experts record.

Moeten regeringen dus meer gebruik maken van superforecasters in plaats van te vertrouwen op wetenschappelijke experts? Het bewijs is niet zo duidelijk. Maar er lijken zeker dingen te zijn die regeringen kunnen leren van superforecasting.

In een beroemde Amerikaanse studie op superforecasters die in 2014 werden gepubliceerd, waren ze een eliteploeg. Alleen de beste 2% van de kanshebbers presteerde goed genoeg in een geopolitiek voorspellingstoernooi om de titel te winnen. Hun taak was om kansen toe te kennen aan mogelijke antwoorden op tientallen vragen.

De onderzoekers geven enkele illustratieve voorbeelden. Wie zou in 2012 de president van Rusland zijn? Zal Noord-Korea de komende drie maanden nog een kernwapen laten ontploffen? Hoeveel vluchtelingen zullen volgend jaar Syrië ontvluchten?

Natuurlijk, alleen omdat iemand het een jaar goed doet, bewijst dat nog niet dat ze vaardiger zijn dan wie dan ook. Misschien hebben ze gewoon geluk gehad. We moeten kijken hoe goed ze het de volgende jaren deden om te evalueren hoe "super" ze werkelijk zijn.

Indrukwekkend, deze superforecasters behielden hun voorsprong terwijl het toernooi nog drie jaar duurde. Nadat ze waren samengevoegd tot 'superforecasting-teams' met alleen andere toppresteerders, stegen hun prestaties zelfs met een aanzienlijke marge. De onderzoekers ontdekten ook dat het werken in teams en het volgen van relevante training de prestaties van andere voorspellers verbeterde, vergeleken met voorspellers in een controleconditie.

Teams en trainingen

Of we Cummings nu wel of niet op zijn woord geloven dat de pandemieplanning in het VK te lijden had onder een "klassieke groepsdenkbubbel", we weten dat teams niet altijd verstandige beslissingen nemen. Wat maakte de teams succesvoller in het Amerikaanse onderzoek?

Het is moeilijk met zekerheid te zeggen, maar de onderzoekers moedigden de teams specifiek aan om precieze vragen te stellen om helderder na te denken over het bewijs dat een bepaalde voorspelling ondersteunt, om "bewijsmateriaal te zoeken dat uw huidige voorspelling tegenspreekt", en om constructief alternatieve standpunten te introduceren .

Zo'n debat zou best kunnen collectief oordeel verbeteren als beschermen tegen groepsdenken. Ook waren teamleden niet verplicht om tot een consensus te komen. Hoewel ze informatie en meningen deelden, deden ze nog steeds individuele voorspellingen die door algoritmen werden gecombineerd. Vooral Superforecaster-teams waren: zeer betrokken, regelmatig informatie delen met en vragen stellen aan andere teamleden.

Een andere studie onderzocht welke specifieke trainingstechnieken het meest leken te helpen. Drie technieken werden in het bijzonder geassocieerd met een hogere nauwkeurigheid. De eerste was het gebruik van zogenaamde vergelijkingsklassen.

Als ik bijvoorbeeld de waarschijnlijkheid probeer te voorspellen dat Benedict Cumberbatch en Sophie Hunter over vijf jaar nog steeds samen zullen zijn, kan het nuttig zijn om na te denken over andere 'klassen' die relevant zijn, bijvoorbeeld de klasse van huwelijken met beroemdheden, of zelfs huwelijken in het algemeen. Hierdoor kan ik naar de geschiedenis kijken om mijn voorspellingen te baseren: welk percentage van de huwelijken van beroemdheden eindigt in een bepaalde periode van vijf jaar?

De tweede was om, indien beschikbaar, gebruik te maken van wiskundige en statistische modellen om iemands standpunten te onderbouwen. De derde was om "de juiste vragen te selecteren" - een aanbeveling om meer tijd te besteden aan het voorspellen van antwoorden op vragen waarvan u meer dan anderen over het onderwerp weet, of waarvan aanvullend onderzoek waarschijnlijk de moeite waard is. De onderzoekers benadrukten echter dat alle componenten van de training kan een holistische bijdrage hebben geleverd aan betere prestaties.

Onderzoek heeft dat ook aangetoond nauwkeurigheid verbetert wanneer we onze prestaties uit het verleden bijhouden - maar het soort feedback is belangrijk. Zijn de resultaten waarvan u dacht dat ze in 20% van de gevallen zouden gebeuren, in 20% van de gevallen ook daadwerkelijk gebeurd? Hoe zit het met de resultaten waarvan je dacht dat ze 90% van de tijd zouden gebeuren? De prestaties verbeteren voor degenen die dit soort informatie ontvangen.

Kunnen overheden het beter doen?

Had de Britse regering het beter kunnen doen met betrekking tot COVID-19 door om input te vragen van teams van superforecasters? Het is mogelijk. Superforecasters bij Good Judgement Open en geoefende voorspellers bij Metaculus (waaraan ik heb deelgenomen) lijken elk het goed te hebben gedaan op COVID-19, waarbij Metaculus beweert te hebben beter gepresteerd dan experts in juni 2020. Dat gezegd hebbende, in a recente serie van COVID-19-gerelateerde voorspellingen waren getrainde voorspellers niet altijd nauwkeuriger dan experts. De onderzoekers achter het onderzoek experimenteren met manieren om voorspellingen van domeinexperts en getrainde voorspellers te combineren tot een 'consensusvoorspelling'.

Het lijkt ook aannemelijk dat zelfs de training die de niet-supers hielp om betere voorspellingen te maken nuttig zou zijn geweest. Cummings beweerde bijvoorbeeld dat hoewel er veel aandacht was voor epidemiologische modellen, bewijs dat in tegenspraak was met de veronderstellingen van de modellen - zoals gegevens die worden gerapporteerd door intensive care-afdelingen - werd genegeerd. Het lijkt zeker aannemelijk dat iemand die getraind is om "op zoek te gaan naar bewijs dat uw huidige voorspelling tegenspreekt" dit eerder heeft opgemerkt.

Natuurlijk zijn niet alle aanbevelingen uit de literatuur praktisch in overheidsomgevingen. In theorie zouden regeringen dergelijke aanbevelingen voor zichzelf kunnen testen en alle aanbevelingen overnemen die nuttig leken. Helaas kun je niet verbeteren wat je niet meet.

In Superforecasting, Tetlock benadrukt dat elke organisatie die serieus zijn prognoses wil verbeteren, daar concrete cijfers aan moet koppelen, in ieder geval intern. Een uitdrukking als "ernstige mogelijkheid" kan een kans van 20% betekenen voor de ene persoon en een kans van 80% voor een ander.

Dit is vrijwel zeker waar Cummings naar verwees toen hij zei: "Een man genaamd Phil Tetlock schreef een boek en in dat boek zei hij dat je geen woorden als redelijk en waarschijnlijk en waarschijnlijk moet gebruiken, omdat het iedereen in verwarring brengt." Het zou ons misschien niet moeten verbazen als organisaties die geen prognoses maken op een manier waarop ze kunnen worden geëvalueerd, niet zijn toegerust om te leren hoe ze deze kunnen verbeteren. Om te verbeteren, moet je eerst proberen.

Over de auteur

Gabriel Recchia, onderzoeksmedewerker, Winton Center for Risk and Evidence Communication, University of Cambridge


Aanbevolen boeken: Gezondheid

Vers fruit reinigenFresh Fruit Cleanse: Detox, afvallen en herstellen van uw gezondheid met Nature's Most Delicious Foods [Paperback] door Leanne Hall.
Afvallen en je gezond voelen terwijl je je lichaam van gifstoffen schoonmaakt. Vers fruit reinigen biedt alles wat je nodig hebt voor een gemakkelijke en krachtige ontgifting, inclusief programma's van dag tot dag, overheerlijke recepten en advies voor het overschakelen van de reini- ging.
Klik hier voor meer info en / of om dit boek op Amazon te bestellen.

Gedijen FoodsThrive Foods: 200 Plant-Based Recepten voor Peak Health [Paperback] door Brendan Brazier.
Voortbouwen op de stressverminderende, gezondheidsbevorderende voedingsfilosofie geïntroduceerd in zijn veelgeprezen veganistische voedingsgids Thrive, professionele Ironman-triatleet Brendan Brazier richt nu zijn aandacht op je bord (ontbijtkom en lunchplateau).
Klik hier voor meer info en / of om dit boek op Amazon te bestellen.

Death by Medicine van Gary NullDeath by Medicine van Gary Null, Martin Feldman, Debora Rasio en Carolyn Dean
De medische omgeving is een doolhof geworden van in elkaar grijpende raden van bestuur van bedrijven, ziekenhuizen en overheden, geïnfiltreerd door de farmaceutische bedrijven. De meest toxische stoffen worden vaak als eerste goedgekeurd, terwijl mildere en meer natuurlijke alternatieven om financiële redenen worden genegeerd. Het is de dood door medicijnen.
Klik hier voor meer info en / of om dit boek op Amazon te bestellen.


Dit artikel verscheen oorspronkelijk op The Conversation


 Ontvang de nieuwste via e-mail

Wekelijks tijdschrift Dagelijkse inspiratie

Dit vind je misschien ook leuk

INNERSEL VOICES

Noorderlicht
Horoscoop Huidige week: 27 september - 3 oktober 2021
by Pam Younghans
Dit wekelijkse astrologische dagboek is gebaseerd op planetaire invloeden en biedt perspectieven en ...
een regenboog in de palm van een open hand
Zilveren voeringen en regenbogen vinden
by Marie T. Russell, InnerSelf.com
Sta open voor het ontdekken van de geschenken die het leven je biedt - verwacht zilveren voeringen en regenbogen, wees op ...
een zwemmer in een groot wateroppervlak
Vreugde en veerkracht: een bewust tegengif tegen stress
by Nancy Windheart
We weten dat we ons in een geweldige tijd van overgang bevinden, waarin we een nieuwe manier van zijn, leven en...
vijf gesloten deuren, een gepijnigd geel, de andere wit
Hoe gaan we verder?
by Marie T. Russell, InnerSelf.com
Het leven kan verwarrend zijn. Er zijn zoveel dingen aan de hand, zoveel keuzes die ons worden voorgelegd. Zelfs een…
Inspiratie of motivatie: wat werkt het beste?
Inspiratie of motivatie: wat komt eerst?
by Alan Cohen
Mensen die enthousiast zijn over een doel, vinden manieren om het te bereiken en hoeven niet geprikkeld te worden...
foto silhouet van bergbeklimmer die een houweel gebruikt om zichzelf te beveiligen
Sta de angst toe, transformeer het, ga er doorheen en begrijp het
by Lawrence Doochin
Angst voelt rot. Daar is geen weg omheen. Maar de meesten van ons reageren niet op onze angst in een...
vrouw zit aan haar bureau en kijkt bezorgd
Mijn recept voor angst en zorgen
by Jude Bijou
We zijn een samenleving die zich graag zorgen maakt. Piekeren komt zo vaak voor, het voelt bijna sociaal acceptabel.…
bochtige weg in Nieuw-Zeeland
Wees niet zo hard voor jezelf
by Marie T. Russell, InnerSelf
Het leven bestaat uit keuzes... sommige zijn "goede" keuzes, en andere niet zo goed. Maar elke keuze…
April 2018: Het is tijd om hard te zijn als staal en zacht als zijde
April 2018: Het is tijd om hard te zijn als staal en zacht als zijde
by Sarah Varcas
Wat uw prioriteiten op dit moment ook zijn, houd vast aan de overtuiging dat u positieve ...
Feeling Down: 7 manieren om hoop te herstellen
Feeling Down: 7 manieren om hoop te herstellen
by Jude Bijou, MA, MFT
Als u zich depressief voelt, kunt u wanhopen dat uw leven nooit beter zal worden. In plaats van te vertellen...
We zijn verantwoordelijk voor de puinzooi die we hebben gemaakt ... Laten we het nu oplossen
We zijn verantwoordelijk voor de puinzooi die we hebben gemaakt ... Laten we het nu oplossen
by Marie T. Russell, InnerSelf.com
Dat is een heftig statement: wij zijn verantwoordelijk voor de rotzooi die we hebben gemaakt! En voor sommigen misschien...

MEEST GELEZEN

Hoe wonen aan de kust verband houdt met een slechte gezondheid
Hoe wonen aan de kust verband houdt met een slechte gezondheid
by Jackie Cassell, hoogleraar eerstelijns epidemiologie, honorair adviseur volksgezondheid, Brighton en Sussex Medical School
De precaire economieën van veel traditionele badplaatsen zijn nog verder gedaald sinds de…
De meest voorkomende problemen voor Earth Angels: Love, Fear en Trust
De meest voorkomende problemen voor Earth Angels: Love, Fear en Trust
by Sonja Grace
Terwijl je ervaart dat je een aardse engel bent, zul je ontdekken dat het pad van dienst doorzeefd is met ...
Hoe kan ik weten wat het beste voor mij is?
Hoe kan ik weten wat het beste voor mij is?
by Barbara Berger
Een van de grootste dingen die ik heb ontdekt door elke dag met klanten te werken, is hoe extreem moeilijk ...
Eerlijkheid: de enige hoop op nieuwe relaties
Eerlijkheid: de enige hoop op nieuwe relaties
by Susan Campbell, Ph.D.
Volgens de meeste singles die ik tijdens mijn reizen heb ontmoet, is de typische datingsituatie beladen ...
De rollen van mannen in antiseksismecampagnes uit de jaren 1970 kunnen ons leren over toestemming
De rollen van mannen in antiseksismecampagnes uit de jaren 1970 kunnen ons leren over toestemming
by Lucy Delap, Universiteit van Cambridge
De antiseksistische mannenbeweging uit de jaren 1970 had een infrastructuur van tijdschriften, conferenties, mannencentra ...
Chakra Healing Therapy: dansen naar de innerlijke kampioen
Chakra Healing Therapy: dansen naar de innerlijke kampioen
by Glen Park
Flamencodansen is een genot om naar te kijken. Een goede flamencodanseres straalt een uitbundig zelfvertrouwen uit ...
Een stap naar vrede ondernemen door onze relatie met het denken te veranderen
Stappen naar vrede door onze relatie met het denken te veranderen
by John Ptacek
We brengen ons leven door ondergedompeld in een vloed van gedachten, niet wetend dat een andere dimensie van bewustzijn ...
Een astroloog introduceert de negen gevaren van astrologie
Een astroloog introduceert de negen gevaren van astrologie
by Tracy Marks
Astrologie is een krachtige kunst die ons leven kan verbeteren door ons in staat te stellen onze eigen ...

volg InnerSelf op

facebook icontwitter iconyoutube iconinstagram pictogrampintrest pictogramrss-pictogram

 Ontvang de nieuwste via e-mail

Wekelijks tijdschrift Dagelijkse inspiratie

BESCHIKBARE TALEN

enafarzh-CNzh-TWdanltlfifrdeeliwhihuiditjakomsnofaplptroruesswsvthtrukurvi

Nieuwe attitudes - nieuwe mogelijkheden

InnerSelf.comClimateImpactNews.com | InnerPower.net
MightyNatural.com | WholisticPolitics.com | InnerSelf Market
Copyright © 1985 - 2021 InnerSelf Publications. Alle rechten voorbehouden.