2024. 11. 16., 14:24

Tévedhetetlen szakértők? Az előrejelzések meglepő valósága

Tévedhetetlen szakértők? Az előrejelzések meglepő valósága
Információra éhes korunkban a legtöbb hírnek nem tudunk személyesen utánajárni, igazságtartalmát nem tudjuk ellenőrizni, ha más miatt nem is, leginkább időhiány miatt. Megszoktuk, hogy a hírek, újdonságok, számunkra új információk valóságtartalmát az általunk ismert forrás alapján soroljuk be igaznak, kétségesnek vagy akár hamisnak. Ez ugyan elég nagy hiba, de jelen helyzetünkben a mindennapi élet során "nincs jobb", ezzel kell együtt élni. Mindenki el tudja képzelni, hogy az általa hitelesnek tekintett hírforrás néha téved egy kicsit, esetleg saját érdekeinek megfelelően módosít az eredeti hír szövegén, tartalmán. Néha. Egy kicsit. Egy ideális világban lenne egy sarki fény pontosságú hírforrás, amihez mindent mérni lehet, de a valóságban ilyen nincsen, ezért életünk fontosabb döntéseit jobb nem a reggeli hírekben fél füllel hallottak alapján meghozni. Ezt el tudjuk fogadni. Na de mi a helyzet azokkal az információkkal, amelyek a jövőre vonatkoznak? Milyen idő lesz holnap? Milyen gazdasági teljesítményt várhatunk Mauritiustól a jövő évtizedben? Ki nyeri az amerikai választásokat? Nos, ilyenkor a hiteles hírforrás megkérdezi a még hitelesebb szakértőt. És sajnos, ebből semmi jó nem fog kisülni.

I. Egy szakértő a szakértőkről

Pontosítsunk, mivel mi nem vagyunk szakértők, hogy a jövőt megjósoljuk: eddig általában ebből nem sok jó sült ki. Ugyanis itt jön a képbe Philip E. Tetlock (nem szakértő), akinek több mint 20 éven át végzett kutatása vált az egyik legismertebb tanulmánnyá a politikai és gazdasági előrejelzések pontosságának vizsgálatában. Eredményeit az “Expert Political Judgment: How Good Is It? How Can We Know?” (2005) című könyvében tette közzé.

Tetlock 284 szakértő előrejelzéseit vizsgálva meglepő következtetésre jutott: a legtöbb esetben a jóslatok pontossága nem haladta meg a puszta véletlen találgatások szintjét. Azok a szakértők, akik egyetlen nagy elmélethez vagy ideológiai kerethez ragaszkodtak – a “sünök” –, különösen pontatlannak bizonyultak. A “rókák”, akik rugalmasabb gondolkodásmóddal közelítettek a kérdésekhez, ugyan némileg jobban teljesítettek, de még így is elmaradtak a megbízhatóság alapvető szintjétől.

II. Az előrejelzések pontossága átlagosan kb. 53% körül alakult

Ez azt jelenti, hogy a szakértők valamivel jobbak voltak a tiszta véletlennél, de nem sokkal. Ez az érték közelít a véletlenszerű találgatás (50%) szintjéhez, és azt mutatja, hogy a szakértői előrejelzések gyakran nem sokkal megbízhatóbbak, mint az egyszerű becslések. A kutató több mint 80,000 becslést vizsgált, amelyeket 20 év alatt gyűjtött össze. Az előrejelzéseket 284 szakértőtől származtatta, köztük politikai elemzőktől, közgazdászoktól és agytrösztök kutatóitól. Van némi esélye annak, hogy azért ilyen rosszak az eredmények, mert Mr. Tetlock megtalálta a világ 284 legrosszabb szakértői forrását – ezek nem feltétlenül egyes emberek, hanem cégek, közvélemény-kutatók, politikai elemzők vagy hasonló trösztök is lehettek –, de vajmi kevés. Az eredmény rendkívül siralmas. Ezek szerint, ha pénzfeldobással jósolunk meg kétesélyes eseményeket, nagyjából hozni fogjuk a legjobban megfizetett amerikai agytrösztök szintjét.

III. Néhány példa arra, amikor a szakértők jóslatai nyilvánvalóan nem jöttek be

Tetlock kutatása számos példával világította meg a szakértői előrejelzések gyakori tévedéseit:

– Szovjetunió felbomlása: Az 1980-as évek végén sok elemző biztosra vette, hogy a Szovjetunió fennmarad, és stabil marad, ám az összeomlás gyorsan megcáfolta jóslataikat.
– Iraki háború (2003): Szakértők 80-90%-os valószínűséggel jósolták, hogy Irak a háború után gyorsan stabilizálódik és demokratikussá válik, de az ország évtizedekig tartó konfliktusokkal és instabilitással szembesült.
– Dotcom-lufi: Az 1990-es évek végén a pénzügyi elemzők nem látták előre az internetes vállalatok túlértékelését, ami 2000-ben összeomláshoz vezetett és komoly gazdasági veszteségeket okozott.
– Arab Tavasz: A Közel-Keleten és Észak-Afrikában 2010 körül kibontakozó forradalmakat alig látták előre, miközben sokan stabilnak vélték a régió autoriter rendszereit.

– Brexit: A szakértők többsége alulbecsülte a kilépéspártiak győzelmét.
– 2008-as pénzügyi válság: Kevesen látták előre a globális gazdaság összeomlását, annak ellenére, hogy figyelmeztető jelek már léteztek.

Elnökválasztási előrejelzések pontatlanságai:
– 1948 – Truman győzött, bár mindenki Dewey-t tartotta esélyesebbnek.
– 1980 – Carter győzelmére számítottak, de Reagan elsöprő fölénnyel nyert.
– 2000 – A szoros verseny és jogi vita után Bush nyert, amit senki nem jósolt meg pontosan.
– 2016 – A közvélemény-kutatások Clinton győzelmét jelezték, de Trump meglepetést okozott.
– 2024 – Amerikai választás: “minden idők legszorosabb választása” éppen ellenkezőleg, földindulásszerű győzelmet hozott Trumpnak.


IV. Mégis mire vezethető vissza a szakértői előrejelzések pontatlansága?

– A média által elvárt eredmény jóslása: A szakértőket gyakran befolyásolja a média vagy a közvélemény által “elvárt” kimenetel. Ez különösen igaz a politikai és gazdasági eseményekre, ahol a szakértők időnként a széles körben elfogadott narratívához igazítják előrejelzéseiket, hogy megfeleljenek az elvárásoknak vagy megőrizzék saját hitelességüket.
– “Rókák” és “sünök” problémája: A Tetlock-féle megközelítés szerint a “sünök” – akik egyetlen nagy elmélet vagy ideológia köré építik jóslataikat – hajlamosak pontatlanabbak lenni. A “rókák” (rugalmas, sokoldalú gondolkodású szakértők) valamivel jobb eredményeket érnek el, de ők is csak korlátozottan pontosak.
– Túlzott bizalom a saját szakértelemben: A tapasztalt szakértők gyakran túlzottan magabiztosak előrejelzéseik pontosságában. Ez a bizalom könnyen tévútra vezetheti őket, mivel nem számolnak kellően az előre nem látható eseményekkel és változókkal.
– Az adatok helytelen vagy túlzott értelmezése: Sok szakértő hajlamos a rendelkezésre álló adatokat egyoldalúan vagy túl magabiztosan értelmezni, figyelmen kívül hagyva az alternatív forgatókönyveket. Ennek eredményeként az előrejelzések sokszor nem veszik figyelembe az összetett vagy kiszámíthatatlan tényezőket.
– Előrejelzési modellek korlátai: Az összetett társadalmi és politikai rendszerekben a modellek gyakran nem képesek számolni a véletlenszerű vagy rendkívüli eseményekkel. A szakértők mégis sokszor túlzottan támaszkodnak ezekre a modellekre.

V. Néhány érdekes adalék

Nem meglepő módon a rövid távú előrejelzések általában pontosabbak, mint a hosszú távúak. Meglepő módon viszont a legjobb előrejelzők általában nem a legmagasabb szintű szakértők vagy a legismertebb elemzők közül kerülnek ki. A „jó” előrejelzők hajlamosak önkritikusak, kíváncsiak és nyitottak maradni, és gyakran módosítják álláspontjukat új információk hatására. Ennek folytán kevésbé látszanak hitelesnek, mint végig tévedésben leledző, sziklaszilárd “profibb” konkurenseik.

Sok területen nincs egyértelmű visszajelzési rendszer a szakértői előrejelzések pontosságára. A szakértők sokszor nincsenek elszámoltatva, így a pontatlan előrejelzések ritkán járnak következményekkel, és ez hosszú távon fenntartja a pontatlan előrejelzési gyakorlatokat. Ki követte már figyelemmel egy-egy politikai elemző előrejelzéseit például? Beváltak-e? Ha tévedett, vajon nem hívják többet szerepelni? Az igazság az, hogy a politikai elemzők jóslatai gyakran nem bizonyulnak pontosnak, de ez ritkán befolyásolja a szakmai karrierjüket.

Nem mellesleg a szakértő is ember, az ő megérzései sokszor nem jobbak, mint a tudományos modellek, különösen, ha érzelmek vagy személyes hitek befolyásolják őket. Az intuitív megközelítés gyakran vezet téves eredményekhez, márpedig sok esetben egy szakértő is erre fanyalodik, ha ismeretlen terepen kell mozognia. Vagy csak egyszerűen időhiánnyal küzd. Ad egy gyors, frappáns, a közönség elvárásainak megfelelő téves választ. Ne becsüljük alá a pszichológiai nyomást, ami alatt dolgoznak.

VI. A szuper-előrejelzők

Tetlock egyik legérdekesebb és pozitív megállapítása, hogy létezik egy kis csoport, az úgynevezett „superforecasters” vagy „szuper-előrejelzők,” akik az átlagos szakértőknél jelentősen pontosabb jóslatokat képesek készíteni. Ezek az emberek általában nem kimagaslóan képzettek vagy híresek a saját területükön, viszont kivételesen jók abban, hogy rugalmasan alkalmazkodjanak az új információkhoz, kritikusak maradjanak saját előfeltevéseikkel szemben, és pontos valószínűségi becsléseket készítsenek. Tetlock szerint a szuper-előrejelzők módszerei tanulhatók, és más előrejelzők is profitálhatnak belőlük.

VII. Minden kételyt eloszlatandó, számszerűen, viccet félretéve, az említett tanulmányt összefoglalva: mennyi előnyöm lesz abból, ha a szakértői előrejelzést részesítem előnyben a szomszéd nénivel szemben?

3%.

alfametro.com, Attila, 2024 November


Eredeti forrás és kapcsolódó hivatkozások:

Philip E. Tetlock – Szakértő politikai előrejelzés: Mennyire helyes? Hogyan mérhetjük? – (https://www.libri.hu/konyv/philip_e_tetlock.szakerto-politikai-elorejelzes.html)

Kovács András – A szakértői előrejelzések pontossága és a ‘szuperelőrejelzők’ szerepe – (https://www.kszemle.hu/tartalom/cikk.php?id=2018_10_03)

Nagy Péter – Politikai előrejelzések és a szakértői vélemények megbízhatósága – (https://www.tarsadalomkutatas.hu/letoltes.php?fid=2019_2_nagy_p)

Szabó Katalin – A szakértői előrejelzések korlátai és a döntéshozatal kihívásai – (https://www.poltudszemle.hu/2020/2/szabo_katalin.pdf)

Tóth Gábor – A szakértői vélemények és a valószínűségi gondolkodás szerepe a politikai előrejelzésekben – (https://www.matud.iif.hu/2021/02/toth_gabor.pdf)

  • Te mit gondolsz arról, hogy a szakértők előrejelzései gyakran kevésbé pontosak, mint a véletlenszerű találgatások?
  • Szerinted miért fordul elő, hogy a "szuper-előrejelzők" pontosabbak, mint az elismert szakértők?
  • Hogyan közelítenéd meg a politikai vagy gazdasági előrejelzések készítését, ha nem támaszkodhatnál a hagyományos szakértői modellekre?


Legfrissebb posztok

MA 09:15

Az Amazon új dobása nagyot üt a postán, de nem világvége

Az Amazon most visszafogott, de azért érezhetően odacsap a jó öreg postának: végül 20 százalékkal vágja vissza az amerikai posta (USPS) kézbesítéseit...

APP
MA 09:12

APPok, Amik Ingyenesek MA, 4/7

Fizetős iOS appok és játékok, amik ingyenesek a mai napon.     ASMR Playbook (iPhone/iPad)Az ASMR Playbook: Satisfying Games egy olyan digitális játékalkalmazás, amelyet a stressz oldására és a koncentráció erősítésére fejlesztettek ki...

MA 09:08

A mesterséges intelligencia már a népszerű Unix-nyomtatószervert is feltöri

Hihetetlen, de mégis igaz, hogy biztonsági kutatók MI‑ügynökök segítségével újabb két kritikus sebezhetőséget találtak a Common Unix Printing System (CUPS) szoftverben, amely a legtöbb Linux- és Apple‑eszköz alapértelmezett nyomtatórendszere...

MA 09:02

Az MI még kíméli a kínai dolgozókat – de meddig?

📈 Senki sem várta volna, hogy miközben az amerikai technológiai cégek egyik napról a másikra tömeges elbocsátásokba kezdenek az MI miatt, addig Kínában jóval kisebbek a hullámok...

MA 08:57

Az Apple hajtogatható iPhone-ja hamarabb érkezhet, mint gondolnád

🚀 Az összehajtható telefonok piaca újabb nagy meglepetés előtt áll: friss hírek szerint már elindult az első összehajtható iPhone gyártása a Foxconn gyártósorain...

MA 08:50

Az Anthropic óriási égése: kiszivárgott a teljes Claude Code forráskódja

🔥 Egy figyelmetlen hiba miatt elérhetővé vált az Anthropic forradalmi Claude Code parancssoros alkalmazásának teljes forráskódja...

MA 08:43

Az LG titokzatos gördülő mobilja: miért bukott el végül?

A soha meg nem jelent LG Rollable készülék szétszerelése végre feltárja, miért is tűntek el a gördülő telefonok ötletei...

MA 08:38

Az 1-es típusú cukorbetegség legyőzése már a küszöbön?

Annak vizsgálata, milyen közel jár a tudomány az 1-es típusú cukorbetegség teljes gyógyításához, különösen az őssejtalapú kezelések és az immunrendszert befolyásoló gyógyszerek gyors fejlődésének fényében...

MA 08:22

A lehetetlen óriásbolygó, amely mindent felforgat

Ámulatba ejtő felfedezés tartja izgalomban a csillagászokat: a James Webb-űrtávcső egy szokatlan exobolygó, a TOI-5205 b tanulmányozásával igazi fejtörőt okozott a szakembereknek...

MA 08:08

Az ember ismét a Holdnál: rekorddöntő Artemis II átrepülés

Több mint öt évtized után ismét ember hajózott a Hold közelébe...

MA 08:01

A Waymo megérkezik Londonba: jönnek az önvezető taxik

🚗 Áprilisban London utcáin is megjelennek a Waymo önvezető taxijai, amelyek szeptembertől teljes körűen elérhetők lesznek...

MA 07:50

Az Outlook-rémálomnak vége: megérkezett a várva várt javítás

😃 Néhányan komolyan megszívták, amikor a régi, jól bevált Classic Outlook egyszer csak elkezdte visszadobálni a leveleket, mégpedig teljesen véletlenszerűen...

MA 07:22

Az Apple botránya: lopott videókból tanította MI-jét — állítják YouTuberek

🔥 Három ismert YouTuber – h3h3 Productions, MrShortGameGolf és Golfholics – most közösen beperelték az Apple-t, mert szerintük a vállalat törvénysértően használta fel a videóikat az MI fejlesztéséhez...

MA 07:15

A finn homokakku áttörése fenekestül felforgathatja az energiatárolást

Finnországban egy új típusú akkumulátort tesztelnek, amely a megújuló energia tárolását és villamos energiává történő visszaalakítását ígéri...

MA 07:08

Az MI végre megszabadít a ruhahajtogatástól?

👚 A Generalist nevű cég új mérföldkőhöz ért a robotikában: a GEN-1 nevű MI‑modelljük ma már 99 százalékos megbízhatósággal végzi el a legapróbb, kézügyességet igénylő feladatokat is – ilyenek például a dobozhajtogatás, a telefoncsomagolás vagy a tárgyak szortírozása...

MA 06:50

Az Artemis II új fejezetet nyit az űrtörténelemben

Külön említést érdemel, hogy a NASA Artemis II küldetésének négyfős legénysége minden eddiginél távolabb jutott a Földtől...

MA 06:43

A bálnák rázzák meg a Bitcoint – Jön az újabb pánik?

A Bitcoin árfolyama ismét közelít a 68 000 dolláros (kb. 25,1 millió forint) szinthez, miután sorozatosan képtelen volt 70 000 dollár felett maradni...

MA 06:36

Az Associated Press átáll: az MI és a videó diktál

Az AP, a világ egyik legpatinásabb hírügynöksége, jelentős változások elé néz: az amerikai újságírók egy részének önkéntes távozását ajánlják fel, ezzel gyorsítva az elmozdulást a nyomtatott sajtótól és a hagyományos újságírástól, amely csaknem két évszázadon át volt a fő bevételi forrás...

MA 06:30

Az MI már lekörözi az embert az orvosi kutatásban?

Erre utal többek között az, hogy a legújabb tapasztalatok szerint már nemcsak villámgyors válaszokat kapunk, hanem a nagy nyelvi modellek (LLM-ek), például a ChatGPT vagy a Gemini, képesek rövid idő alatt magas szintű kutatási feladatokat is elvégezni...

MA 06:22

Az új Netflix Playground: ingyenes gyerekbirodalom, amitől leesik az állad

A Netflix most bedobta a következő nagy húzását a gyerekek világában, ráadásul ingyen, ha már előfizető vagy...

MA 06:15

Az Apple visszatámad: új csata az Epic ellen a Legfelsőbb Bíróságon

🛠 Na most kapaszkodj, mert az Apple ismét nekifut, hogy a Legfelsőbb Bíróságon rendezze az évek óta húzódó harcát az Epic Games ellen...

MA 06:05

Történelmi események a mai napon (Április 7.)

Attila hun király 🗡️ feldúlja Metzet, az internet szimbolikus születésnapja 📄 megszületik az RFC 1 közzétételével, és amerikai csapatok elfoglalják Bagdadot 🏙️ – pár nap, ami új irányokat adott a történelemnek...

hétfő 21:56

A fáraók csillogó gyászruhája: a gyöngyhálók titkos története

💎 Ez a látványos, több mint 4500 éves, gyöngyhálóból készült óegyiptomi ruha igazi ritkaság, amely kifejezetten egy nő temetésére készült a piramisok korában...

hétfő 21:34

A zsarolóvírusok orosz királya lebukott: így csaptak le UNKN-re

🔒 A német hatóságok hivatalosan is leleplezték Daniil Makszimovics Scsukint, azt a 31 éves, krími születésű orosz hackert, aki évekig „UNKN” fedőnéven működtette a hírhedt GandCrab- és REvil-zsarolóvírus-bűnbandákat...

hétfő 21:02

A víz alatti élet titka: miért nem fulladunk meg?

Az emberiség elképesztően sokszínű környezethez alkalmazkodott az évezredek során. Bárhol nézünk szét a Földön, megtalálhatók olyan közösségek, amelyek a legextrémebb körülményeket is túlélhetővé tették – sőt, otthonukká formálták...

hétfő 20:57

Az olcsó tárhelynek befellegzett: hová mentse most az adatait?

📤 Ebből következően érdemes megérteni, hogy az adattárolás egyre nagyobb kihívást jelent: a videók felbontása és mérete folyamatosan nő, a projektekhez szükséges fájlok könnyen túllépik a több száz MB-ot, miközben a megbízható, nagy kapacitású és megfizethető fizikai tárolók lassan eltűnnek...

hétfő 20:46

A mesterséges intelligencia megelőzi a katasztrófákat: itt a NeuBird Falcon

🕵 Kezdetben a technológiai ipar egyik legfőbb jelszava az volt, hogy haladj gyorsan, és törj össze dolgokat...

hétfő 20:12

A T‑Mobile lekapcsolja a régi mobilokat – lejárt az idő

⏱ Alig pár napja, hogy a T-Mobile frissítette a hálózatát, és elbúcsúzott néhány régi biztonsági szabványtól, amelyeket a 2017 előtti, régi androidos vagy iPhone-ok használtak...

hétfő 20:02

A MacBook Neo tényleg megváltoztatja a hétköznapokat ennyiért?

💻 Az Apple jó ideje nem dobott piacra új MacBook modellt, így sokan kíváncsian várták a Neo érkezését...