Supervoorspellers: watter pandemiebeplanners kan leer by die wêreld se beste voorspellersVolgens Dominic Cummings, die voormalige Britse hoofadviseur Boris Johnson, het kenners dit katastrofies verkeerd verstaan. Cummings het betoog dat die Britse regering se amptelike wetenskaplike advies in Maart 2020 baie misverstaan ​​het hoe die pandemie sou uitspeel, wat gelei het tot 'n vertraging in die sluiting wat duisende lewens gekos het.

Volgens Cummings was dit sekere spesialiste met minder kennis van pandemies of medisyne - soos data-wetenskaplike Ben Warner, navorser van kunsmatige intelligensie, Demis Hassabis van DeepMind, en wiskundige Tim Gowers - wat op hierdie stadium akkurater voorspellings gegee het.

Cummings is ook bekend as 'n fan of Supervoorspelling deur Philip Tetlock, 'n boek oor mense wat toekomstige gebeure meer betroubaar voorspel as die meeste. Sommige supervoorspellers geprys is vir hul voorspellings oor die pandemie, terwyl ander dit ook al was kritiek op die kundiges rekord.

Moet regerings dus meer gebruik maak van supervoorspellers in plaas van op wetenskaplike kundiges te vertrou? Die bewyse is nie heeltemal so duidelik nie. Maar dit lyk of daar beslis dinge is wat regerings uit supervoorspelling kan leer.

in 'n bekende Amerikaanse studie op supervoorspellers wat in 2014 gepubliseer is, was hulle 'n elite-bemanning. Slegs die top 2% van die deelnemers het goed genoeg gevaar in 'n geopolitieke voorspellingstoernooi om die titel te verower. Hulle taak was om waarskynlikhede toe te ken aan moontlike antwoorde op tientalle vrae.


innerself teken grafiese in


Die navorsers gee enkele illustratiewe voorbeelde. Wie sou die president van Rusland in 2012 wees? Sal Noord-Korea in die volgende drie maande nog 'n kernwapen ontplof? Hoeveel vlugtelinge sal volgende jaar uit Sirië vlug?

Net omdat iemand een jaar goed vaar, kan dit natuurlik nie bewys dat hy vaardiger is as enigiemand anders nie. Miskien het hulle net gelukkig geword. Ons moet kyk hoe goed hulle die volgende jaar gevaar het om te evalueer hoe 'super' hulle is.

Indrukwekkend het hierdie supervoorspellers hul voordeel behou namate die toernooi nog drie jaar aangehou het. Nadat hulle saamgevoeg is in 'supervoorspellingspanne' wat slegs ander toppresteerders bevat, het hul prestasie met 'n aansienlike marge toegeneem. Die navorsers het ook bevind dat die werk in spanne en relevante opleiding die prestasie vir ander voorspellers verbeter, vergeleke met voorspellers in 'n beheertoestand.

Spanne en opleiding

Of ons nou Cummings op die woord stel dat die pandemiebeplanning in die Verenigde Koninkryk onder 'n 'klassieke groepsdenkborrel' gely het, weet ons dat spanne nie altyd wyse besluite neem nie. Wat het die spanne meer suksesvol gemaak in die Amerikaanse studie?

Dit is moeilik om met sekerheid te sê, maar die navorsers het die spanne spesifiek aangemoedig om presiese vrae te stel om duideliker denke oor die bewyse wat 'n spesifieke voorspelling ondersteun, aan te moedig, om "te soek na bewyse wat u huidige voorspelling weerspreek" en om konstruktief alternatiewe standpunte in te voer. .

Sulke debatte kan wel kollektiewe oordeel te verbeter en waak teen groepdenke. Daar is ook nie van lede van die span verwag om tot 'n konsensus te kom nie. Alhoewel hulle inligting en menings gedeel het, het hulle steeds individuele voorspellings gemaak wat deur algoritme gekombineer is. Veral supervoorspeller-spanne was hoogs verloof, gereeld inligting deel en vrae aan ander spanlede stel.

Nog 'n studie het ondersoek ingestel na watter spesifieke opleidingstegnieke die meeste help. Drie tegnieke word veral met hoër akkuraatheid geassosieer. Die eerste was die gebruik van sogenaamde vergelykingsklasse.

As ek byvoorbeeld probeer om die waarskynlikheid te voorspel dat Benedict Cumberbatch en Sophie Hunter oor vyf jaar nog bymekaar sal wees, kan dit nuttig wees om na te dink oor ander "klasse" wat relevant is - byvoorbeeld die klas van bekende huwelike, of selfs huwelike in die algemeen. Dit stel my in staat om na die geskiedenis te kyk om my voorspellings in te lig: Watter persentasie bekende huwelike eindig in 'n tydperk van vyf jaar?

Die tweede was om gebruik te maak van wiskundige en statistiese modelle, indien beskikbaar, om u siening te help inlig. Die derde was om 'die regte vrae te kies' - 'n aanbeveling om meer tyd te bestee aan die voorspelling van antwoorde op vrae waar u meer as ander oor die onderwerp weet, of waarby addisionele navorsing waarskynlik sal vrugte afwerp. Die navorsers het egter benadruk dat alle komponente van die opleiding mag holisties bygedra het tot beter prestasie.

Navorsing het dit ook getoon akkuraatheid verbeter as ons ons prestasies in die verlede byhou - maar die soort terugvoer is belangrik. Het die uitkomste wat u gedink het 20% van die tyd 20% van die tyd sou plaasvind? Wat van die uitkomste wat u gedink het 90% van die tyd sou gebeur? Prestasie verbeter vir diegene wat hierdie soort inligting ontvang.

Kan regerings beter doen?

Kon die Britse regering beter op COVID-19 gevaar het deur insette van spanne supervoorspellers te vra? Dit is moontlik. Supervoorspellers by Goeie Oordeel Open en geoefende voorspellers by Metakulus (waaraan ek deelgeneem het) het blykbaar goed gevaar op COVID-19, met Metaculus wat beweer het oortref kundiges in Junie 2020. Dit gesê, in 'n onlangse reeks van COVID-19-verwante voorspellings was opgeleide voorspellers nie altyd akkurater as kundiges nie. Die navorsers agter die opname eksperimenteer met maniere om voorspellings van domeinkenners en opgeleide voorspellers te kombineer in 'n 'konsensusvoorspelling'.

Dit lyk ook aanneemlik dat selfs die opleiding wat die nie-supers gehelp het om beter voorspellings te maak, nuttig sou gewees het. Cummings het byvoorbeeld beweer dat, hoewel daar baie aandag aan epidemiologiese modelle was, bewyse wat die aannames van die modelle weerspreek - soos inligting wat deur intensiewe sorgeenhede gerapporteer word - geïgnoreer word. Dit lyk beslis aanneemlik dat iemand wat opgelei is om 'bewyse te soek wat in stryd is met u huidige voorspelling' dit dalk vroeër sou raakgesien het.

Natuurlik is nie alle aanbevelings uit die literatuur prakties in die regering nie. In teorie kan regerings sulke aanbevelings vir hulself toets en die goedkeuring aanvaar wat voordelig lyk. Ongelukkig kan u nie verbeter wat u nie meet nie.

In Supervoorspelling, Tetlock benadruk dat enige organisasie wat ernstig is oor die verbetering van sy voorspellings, ten minste intern konkrete getalle daaraan moet heg. 'N Frase soos' ernstige moontlikheid 'kan 'n kans van 20% vir een persoon beteken en 'n 80% kans vir 'n ander persoon.

Dit is byna seker waarna Cummings verwys het toe hy gesê het: '' N Man genaamd Phil Tetlock het 'n boek geskryf en in daardie boek het hy gesê dat jy nie woorde soos redelik en waarskynlik en waarskynlik moet gebruik nie, want dit verwar almal. ' Miskien moet dit ons nie verbaas as organisasies wat nie vooruitskattings op 'n manier maak om te evalueer nie, nie toegerus is om te leer hoe om dit beter te maak nie. Om te verbeter, moet u eers probeer.

Oor Die Skrywer

Gabriel Recchia, navorsingsgenoot, Winton-sentrum vir risiko- en bewyse-kommunikasie, Universiteit van Cambridge

Verwante Boeke:

Die liggaam hou die telling: brein gees en liggaam in die genesing van trauma

deur Bessel van der Kolk

Hierdie boek ondersoek die verbande tussen trauma en fisiese en geestelike gesondheid, en bied insigte en strategieë vir genesing en herstel.

Klik vir meer inligting of om te bestel

Asem: Die nuwe wetenskap van 'n verlore kuns

deur James Nestor

Hierdie boek verken die wetenskap en praktyk van asemhaling, en bied insigte en tegnieke vir die verbetering van fisiese en geestelike gesondheid.

Klik vir meer inligting of om te bestel

Die plantparadoks: die verborge gevare in "gesonde" kosse wat siektes en gewigstoename veroorsaak

deur Steven R. Gundry

Hierdie boek ondersoek die verbande tussen dieet, gesondheid en siekte, en bied insigte en strategieë vir die verbetering van algehele gesondheid en welstand.

Klik vir meer inligting of om te bestel

Die immuniteitskode: die nuwe paradigma vir werklike gesondheid en radikale anti-veroudering

deur Joel Greene

Hierdie boek bied 'n nuwe perspektief op gesondheid en immuniteit, met die beginsels van epigenetika en bied insigte en strategieë vir die optimalisering van gesondheid en veroudering.

Klik vir meer inligting of om te bestel

Die volledige gids tot vas: genees jou liggaam deur intermitterende, alternatiewe dag en verlengde vas

deur Dr Jason Fung en Jimmy Moore

Hierdie boek verken die wetenskap en praktyk van vas en bied insigte en strategieë vir die verbetering van algehele gesondheid en welstand.

Klik vir meer inligting of om te bestel

Hierdie artikel het oorspronklik verskyn op Die gesprek