Szuper előrejelzők: mit tanulhatnak a világjárvány-tervezők a világ legjobb előrejelzőitőlDominic Cummings, Boris Johnson brit miniszterelnök volt főtanácsadója szerint katasztrofálisan tévesen értek hozzá a szakértők. Cummings azzal érvelt hogy az Egyesült Királyság kormányának 2020 márciusában kiadott hivatalos tudományos tanácsai rendkívül félreértették a járvány kialakulásának módját, ami késedelmes zároláshoz vezetett, és ezrek életébe került.

Cummings szerint bizonyos szakemberek, akiknek kevesebb ismerete van a járványokról vagy az orvostudományról - például Ben Warner adattudós, Demis Hassabis, a DeepMind mesterséges intelligencia kutatója és Tim Gowers matematikus - adtak pontosabb előrejelzéseket ezen a ponton.

Cummingsról is ismert, hogy a ventilátor of Szuper előrejelzés Philip Tetlock, egy könyv azokról az emberekről, akik a legtöbb eseménynél megbízhatóbban jósolják a jövőbeni eseményeket. Néhány szuper előrejelző dicsérték a járványra vonatkozó jóslataikhoz, míg mások is kritikus a szakértők rekord.

Tehát a kormányoknak nagyobb mértékben kellene használniuk a szuper előrejelzőket, ahelyett, hogy tudományos szakértőkre támaszkodnának? A bizonyítékok nem egészen egyértelműek. De úgy tűnik, vannak olyan dolgok, amelyeket a kormányok megtanulhatnak a szuper előrejelzésből.

egy híres amerikai tanulmány a 2014-ben megjelent szuper előrejelzőkön elit személyzet volt. Csak a versenyzők 2% -a teljesített elég jól egy geopolitikai előrejelző tornán a cím elnyeréséhez. Feladatuk a tucatnyi kérdésre adott lehetséges válaszok valószínűségének kijelölése volt.


belső feliratkozási grafika


A kutatók bemutatnak néhány szemléltető példát. Ki lenne Oroszország elnöke 2012-ben? Észak-Korea felrobbant egy újabb atomfegyvert a következő három hónapban? Hány menekült menekül Szíriából jövőre?

Természetesen az, hogy valaki jól teljesít egy év alatt, nem bizonyítja, hogy ügyesebb, mint bárki más. Talán csak szerencséjük volt. Meg kell vizsgálnunk, hogy milyen jól teljesítettek a következő években annak értékelésére, hogy mennyire “szuperek” valójában.

Lenyűgöző, hogy ezek a szuper előrejelzők megőrizték előnyüket, mivel a torna még három évig tartott. Tulajdonképpen, miután csak más legjobb teljesítményt nyújtó „szuperprognozó csapatokká” egyesültek, teljesítményük jelentős különbséggel nőtt. A kutatók azt is megállapították, hogy a csapatokban végzett munka és a megfelelő képzés elvégzése javította más előrejelzők teljesítményét, összehasonlítva a kontroll állapotú előrejelzőkkel.

Csapatok és edzés

Függetlenül attól, hogy Cummingst vesszük-e szavára, miszerint az Egyesült Királyság járványtervezése „klasszikus csoport-gondolati buborékban” szenvedett, tudjuk, hogy a csapatok nem mindig hoznak bölcs döntéseket. Mi volt az, ami sikeresebbé tette a csapatokat az amerikai tanulmányban?

Nehéz ezt biztosan megmondani, de a kutatók kifejezetten arra bíztatták a csapatokat, hogy tegyenek fel pontos kérdéseket, hogy ösztönözzék az adott előrejelzést alátámasztó bizonyítékok egyértelműbb gondolkodását, „keressenek olyan bizonyítékokat, amelyek ellentmondanak a jelenlegi jóslatodnak”, és konstruktívan vezessenek be alternatív nézőpontokat. .

Egy ilyen vita jó lehet javítsa a kollektív megítélést és a a csoportgondolkodás ellen védekezni. A csapat tagjainak sem kellett konszenzusra jutniuk. Bár információkat és véleményeket osztottak meg, mégis egyedi előrejelzéseket tettek, amelyeket algoritmus kombinált. Különösen a Superforecaster csapatok voltak nagyon elkötelezett, gyakran megosztja az információkat a csoport többi tagjával és kérdéseket tesz fel.

Egy másik tanulmány alaposabban megvizsgálta, hogy mely speciális képzési technikák tűntek leginkább segíteni. Három technika kapcsolódott különösen a nagyobb pontossághoz. Az első az úgynevezett összehasonlító osztályok használata volt.

Például, ha megpróbálom megjósolni annak valószínűségét, hogy Benedict Cumberbatch és Sophie Hunter öt év múlva is együtt lesznek, hasznos lehet más releváns „osztályokra” gondolni - mondjuk a hírességek házasságainak osztályára, vagy akár házasságok általában. Ez lehetővé teszi számomra, hogy a történelem során tájékozódjak az előrejelzéseimről: A hírességi házasságok hány százaléka ér véget egy adott ötéves időszakban?

A második az volt, hogy matematikai és statisztikai modelleket kell használniuk, ha rendelkezésre állnak, hogy segítsék a nézeteik megismerését. A harmadik a „megfelelő kérdések kiválasztása” volt - egy ajánlás arra, hogy több időt fordítson a kérdésekre adott válaszok előrejelzésére, ahol másoknál többet tud a témáról, vagy amelyekre további kutatások valószínűleg megtérülnek. A kutatók azonban hangsúlyozták, hogy a a képzés holisztikusan hozzájárulhatott a jobb teljesítményhez.

A kutatások azt is kimutatták a pontosság javul, ha nyomon követjük a múltbeli teljesítményünket - de a visszajelzés fajtája számít. Azok az eredmények, amelyekről azt gondolta, hogy az idő 20% -ában történnek, valójában az esetek 20% -ában történnek? Mi a helyzet az eredményekkel, amelyekről azt gondoltad, hogy az esetek 90% -ában meg fog történni? A teljesítmény javul azok számára, akik ilyen információt kapnak.

A kormányok jobban tudnak?

Vajon az Egyesült Királyság kormánya jobban tudott-e járni a COVID-19 ügyében azáltal, hogy szuper előrejelzők csapatainak hozzájárulását kérte? Lehetséges. Szuper előrejelzők itt: Jó ítélet nyílt és gyakorolták az előrejelzőket a Metaculus (amelyben részt vettem) úgy tűnik, hogy mindegyik jól teljesített a COVID-19-nél, Metaculus azt állította magáról felülmúlta a szakértőket 2020 júniusában. Ez azt mondta, a legújabb sorozat a COVID-19-re vonatkozó jóslatok közül a képzett előrejelzők nem mindig voltak pontosabbak, mint a szakértők. A felmérés mögött álló kutatók kísérletet tesznek arra, hogyan kombinálják a szakterület szakértői és képzett előrejelzői előrejelzéseit „konszenzusos előrejelzéssé”.

Ugyancsak hihetőnek tűnik, hogy még az a képzés is hasznos lett volna, amely segítette a nem supereket jobb előrejelzésekben. Például Cummings azt állította, hogy bár nagy figyelmet fordítottak az epidemiológiai modellekre, a modell feltételezéseinek ellentmondó bizonyítékokat - például az intenzív osztályok által közölt adatokat - figyelmen kívül hagyták. Minden bizonnyal hihetőnek tűnik, hogy valaki, aki arra tanult, hogy „olyan bizonyítékokat keressen, amelyek ellentmondanak a jelenlegi jóslatának”, észrevehette ezt korábban.

Természetesen a szakirodalom nem minden ajánlása praktikus kormányzati környezetben. Elméletileg a kormányok kipróbálhatták maguknak az ilyen ajánlásokat, elfogadva azokat, amelyek előnyösnek tűntek. Sajnos nem lehet javítani azon, amit nem mér.

In Szuper előrejelzés, Tetlock hangsúlyozza, hogy minden olyan szervezetnek, amely komolyan tervezi az előrejelzéseinek javítását, legalább belsőleg konkrét számokat kell csatolnia hozzájuk. Az olyan kifejezés, mint a „komoly lehetőség”, 20% -os esélyt jelenthet az egyik ember számára, és 80% -os esélyt a másik számára.

Szinte biztosan erre utalt Cummings amikor azt mondta: "Egy Phil Tetlock nevű fickó írt egy könyvet, és abban a könyvben azt mondta, hogy ne használjon ésszerű, valószínű és valószínű szavakat, mert mindenkit összezavar." Talán nem lephet meg minket, ha azok a szervezetek, amelyek nem készítenek előrejelzéseket úgy, hogy értékelhetők legyenek, nincsenek felkészülve arra, hogy megtanulják, hogyan lehet jobbá tenni. A fejlődés érdekében először meg kell próbálni.

A szerzőről

Gabriel Recchia, tudományos munkatárs, Winton Kockázati és Bizonyítékkommunikációs Központ, Cambridge-i Egyetem

Kapcsolódó könyvek:

A test tartja a pontszámot: Az agy és a test a traumák gyógyításában

írta Bessel van der Kolk

Ez a könyv a trauma, valamint a fizikai és mentális egészség összefüggéseit tárja fel, betekintést és stratégiákat kínálva a gyógyuláshoz és felépüléshez.

Kattintson a további információkért vagy a megrendeléshez

Lélegzet: Egy elveszett művészet új tudománya

írta: James Nestor

Ez a könyv a légzés tudományát és gyakorlatát tárja fel, betekintést és technikákat kínálva a testi és lelki egészség javítására.

Kattintson a további információkért vagy a megrendeléshez

A növényi paradoxon: Az „egészséges” élelmiszerek rejtett veszélyei, amelyek betegségeket és súlygyarapodást okoznak

szerző: Steven R. Gundry

Ez a könyv az étrend, az egészség és a betegségek közötti összefüggéseket tárja fel, betekintést és stratégiákat kínálva az általános egészség és jólét javítására.

Kattintson a további információkért vagy a megrendeléshez

Az Immunity Code: A valódi egészség és a radikális öregedésgátlás új paradigmája

írta Joel Greene

Ez a könyv új perspektívát kínál az egészségről és az immunitásról, az epigenetika alapelveire támaszkodva, valamint betekintést és stratégiákat kínál az egészség és az öregedés optimalizálásához.

Kattintson a további információkért vagy a megrendeléshez

A böjt teljes útmutatója: Gyógyítsa meg testét időszakos, váltakozó napos és hosszabb böjtöléssel

Dr. Jason Fung és Jimmy Moore

Ez a könyv a böjt tudományát és gyakorlatát tárja fel, betekintést és stratégiákat kínálva az általános egészség és jólét javítására.

Kattintson a további információkért vagy a megrendeléshez

Ez a cikk eredetileg megjelent A beszélgetés