2024. 11. 16., 14:24

Tévedhetetlen szakértők? Az előrejelzések meglepő valósága

Tévedhetetlen szakértők? Az előrejelzések meglepő valósága
Információra éhes korunkban a legtöbb hírnek nem tudunk személyesen utánajárni, igazságtartalmát nem tudjuk ellenőrizni, ha más miatt nem is, leginkább időhiány miatt. Megszoktuk, hogy a hírek, újdonságok, számunkra új információk valóságtartalmát az általunk ismert forrás alapján soroljuk be igaznak, kétségesnek vagy akár hamisnak. Ez ugyan elég nagy hiba, de jelen helyzetünkben a mindennapi élet során "nincs jobb", ezzel kell együtt élni. Mindenki el tudja képzelni, hogy az általa hitelesnek tekintett hírforrás néha téved egy kicsit, esetleg saját érdekeinek megfelelően módosít az eredeti hír szövegén, tartalmán. Néha. Egy kicsit. Egy ideális világban lenne egy sarki fény pontosságú hírforrás, amihez mindent mérni lehet, de a valóságban ilyen nincsen, ezért életünk fontosabb döntéseit jobb nem a reggeli hírekben fél füllel hallottak alapján meghozni. Ezt el tudjuk fogadni. Na de mi a helyzet azokkal az információkkal, amelyek a jövőre vonatkoznak? Milyen idő lesz holnap? Milyen gazdasági teljesítményt várhatunk Mauritiustól a jövő évtizedben? Ki nyeri az amerikai választásokat? Nos, ilyenkor a hiteles hírforrás megkérdezi a még hitelesebb szakértőt. És sajnos, ebből semmi jó nem fog kisülni.

I. Egy szakértő a szakértőkről

Pontosítsunk, mivel mi nem vagyunk szakértők, hogy a jövőt megjósoljuk: eddig általában ebből nem sok jó sült ki. Ugyanis itt jön a képbe Philip E. Tetlock (nem szakértő), akinek több mint 20 éven át végzett kutatása vált az egyik legismertebb tanulmánnyá a politikai és gazdasági előrejelzések pontosságának vizsgálatában. Eredményeit az “Expert Political Judgment: How Good Is It? How Can We Know?” (2005) című könyvében tette közzé.

Tetlock 284 szakértő előrejelzéseit vizsgálva meglepő következtetésre jutott: a legtöbb esetben a jóslatok pontossága nem haladta meg a puszta véletlen találgatások szintjét. Azok a szakértők, akik egyetlen nagy elmélethez vagy ideológiai kerethez ragaszkodtak – a “sünök” –, különösen pontatlannak bizonyultak. A “rókák”, akik rugalmasabb gondolkodásmóddal közelítettek a kérdésekhez, ugyan némileg jobban teljesítettek, de még így is elmaradtak a megbízhatóság alapvető szintjétől.

II. Az előrejelzések pontossága átlagosan kb. 53% körül alakult

Ez azt jelenti, hogy a szakértők valamivel jobbak voltak a tiszta véletlennél, de nem sokkal. Ez az érték közelít a véletlenszerű találgatás (50%) szintjéhez, és azt mutatja, hogy a szakértői előrejelzések gyakran nem sokkal megbízhatóbbak, mint az egyszerű becslések. A kutató több mint 80,000 becslést vizsgált, amelyeket 20 év alatt gyűjtött össze. Az előrejelzéseket 284 szakértőtől származtatta, köztük politikai elemzőktől, közgazdászoktól és agytrösztök kutatóitól. Van némi esélye annak, hogy azért ilyen rosszak az eredmények, mert Mr. Tetlock megtalálta a világ 284 legrosszabb szakértői forrását – ezek nem feltétlenül egyes emberek, hanem cégek, közvélemény-kutatók, politikai elemzők vagy hasonló trösztök is lehettek –, de vajmi kevés. Az eredmény rendkívül siralmas. Ezek szerint, ha pénzfeldobással jósolunk meg kétesélyes eseményeket, nagyjából hozni fogjuk a legjobban megfizetett amerikai agytrösztök szintjét.

III. Néhány példa arra, amikor a szakértők jóslatai nyilvánvalóan nem jöttek be

Tetlock kutatása számos példával világította meg a szakértői előrejelzések gyakori tévedéseit:

– Szovjetunió felbomlása: Az 1980-as évek végén sok elemző biztosra vette, hogy a Szovjetunió fennmarad, és stabil marad, ám az összeomlás gyorsan megcáfolta jóslataikat.
– Iraki háború (2003): Szakértők 80-90%-os valószínűséggel jósolták, hogy Irak a háború után gyorsan stabilizálódik és demokratikussá válik, de az ország évtizedekig tartó konfliktusokkal és instabilitással szembesült.
– Dotcom-lufi: Az 1990-es évek végén a pénzügyi elemzők nem látták előre az internetes vállalatok túlértékelését, ami 2000-ben összeomláshoz vezetett és komoly gazdasági veszteségeket okozott.
– Arab Tavasz: A Közel-Keleten és Észak-Afrikában 2010 körül kibontakozó forradalmakat alig látták előre, miközben sokan stabilnak vélték a régió autoriter rendszereit.

– Brexit: A szakértők többsége alulbecsülte a kilépéspártiak győzelmét.
– 2008-as pénzügyi válság: Kevesen látták előre a globális gazdaság összeomlását, annak ellenére, hogy figyelmeztető jelek már léteztek.

Elnökválasztási előrejelzések pontatlanságai:
– 1948 – Truman győzött, bár mindenki Dewey-t tartotta esélyesebbnek.
– 1980 – Carter győzelmére számítottak, de Reagan elsöprő fölénnyel nyert.
– 2000 – A szoros verseny és jogi vita után Bush nyert, amit senki nem jósolt meg pontosan.
– 2016 – A közvélemény-kutatások Clinton győzelmét jelezték, de Trump meglepetést okozott.
– 2024 – Amerikai választás: “minden idők legszorosabb választása” éppen ellenkezőleg, földindulásszerű győzelmet hozott Trumpnak.


IV. Mégis mire vezethető vissza a szakértői előrejelzések pontatlansága?

– A média által elvárt eredmény jóslása: A szakértőket gyakran befolyásolja a média vagy a közvélemény által “elvárt” kimenetel. Ez különösen igaz a politikai és gazdasági eseményekre, ahol a szakértők időnként a széles körben elfogadott narratívához igazítják előrejelzéseiket, hogy megfeleljenek az elvárásoknak vagy megőrizzék saját hitelességüket.
– “Rókák” és “sünök” problémája: A Tetlock-féle megközelítés szerint a “sünök” – akik egyetlen nagy elmélet vagy ideológia köré építik jóslataikat – hajlamosak pontatlanabbak lenni. A “rókák” (rugalmas, sokoldalú gondolkodású szakértők) valamivel jobb eredményeket érnek el, de ők is csak korlátozottan pontosak.
– Túlzott bizalom a saját szakértelemben: A tapasztalt szakértők gyakran túlzottan magabiztosak előrejelzéseik pontosságában. Ez a bizalom könnyen tévútra vezetheti őket, mivel nem számolnak kellően az előre nem látható eseményekkel és változókkal.
– Az adatok helytelen vagy túlzott értelmezése: Sok szakértő hajlamos a rendelkezésre álló adatokat egyoldalúan vagy túl magabiztosan értelmezni, figyelmen kívül hagyva az alternatív forgatókönyveket. Ennek eredményeként az előrejelzések sokszor nem veszik figyelembe az összetett vagy kiszámíthatatlan tényezőket.
– Előrejelzési modellek korlátai: Az összetett társadalmi és politikai rendszerekben a modellek gyakran nem képesek számolni a véletlenszerű vagy rendkívüli eseményekkel. A szakértők mégis sokszor túlzottan támaszkodnak ezekre a modellekre.

V. Néhány érdekes adalék

Nem meglepő módon a rövid távú előrejelzések általában pontosabbak, mint a hosszú távúak. Meglepő módon viszont a legjobb előrejelzők általában nem a legmagasabb szintű szakértők vagy a legismertebb elemzők közül kerülnek ki. A „jó” előrejelzők hajlamosak önkritikusak, kíváncsiak és nyitottak maradni, és gyakran módosítják álláspontjukat új információk hatására. Ennek folytán kevésbé látszanak hitelesnek, mint végig tévedésben leledző, sziklaszilárd “profibb” konkurenseik.

Sok területen nincs egyértelmű visszajelzési rendszer a szakértői előrejelzések pontosságára. A szakértők sokszor nincsenek elszámoltatva, így a pontatlan előrejelzések ritkán járnak következményekkel, és ez hosszú távon fenntartja a pontatlan előrejelzési gyakorlatokat. Ki követte már figyelemmel egy-egy politikai elemző előrejelzéseit például? Beváltak-e? Ha tévedett, vajon nem hívják többet szerepelni? Az igazság az, hogy a politikai elemzők jóslatai gyakran nem bizonyulnak pontosnak, de ez ritkán befolyásolja a szakmai karrierjüket.

Nem mellesleg a szakértő is ember, az ő megérzései sokszor nem jobbak, mint a tudományos modellek, különösen, ha érzelmek vagy személyes hitek befolyásolják őket. Az intuitív megközelítés gyakran vezet téves eredményekhez, márpedig sok esetben egy szakértő is erre fanyalodik, ha ismeretlen terepen kell mozognia. Vagy csak egyszerűen időhiánnyal küzd. Ad egy gyors, frappáns, a közönség elvárásainak megfelelő téves választ. Ne becsüljük alá a pszichológiai nyomást, ami alatt dolgoznak.

VI. A szuper-előrejelzők

Tetlock egyik legérdekesebb és pozitív megállapítása, hogy létezik egy kis csoport, az úgynevezett „superforecasters” vagy „szuper-előrejelzők,” akik az átlagos szakértőknél jelentősen pontosabb jóslatokat képesek készíteni. Ezek az emberek általában nem kimagaslóan képzettek vagy híresek a saját területükön, viszont kivételesen jók abban, hogy rugalmasan alkalmazkodjanak az új információkhoz, kritikusak maradjanak saját előfeltevéseikkel szemben, és pontos valószínűségi becsléseket készítsenek. Tetlock szerint a szuper-előrejelzők módszerei tanulhatók, és más előrejelzők is profitálhatnak belőlük.

VII. Minden kételyt eloszlatandó, számszerűen, viccet félretéve, az említett tanulmányt összefoglalva: mennyi előnyöm lesz abból, ha a szakértői előrejelzést részesítem előnyben a szomszéd nénivel szemben?

3%.

alfametro.com, Attila, 2024 November


Eredeti forrás és kapcsolódó hivatkozások:

Philip E. Tetlock – Szakértő politikai előrejelzés: Mennyire helyes? Hogyan mérhetjük? – (https://www.libri.hu/konyv/philip_e_tetlock.szakerto-politikai-elorejelzes.html)

Kovács András – A szakértői előrejelzések pontossága és a ‘szuperelőrejelzők’ szerepe – (https://www.kszemle.hu/tartalom/cikk.php?id=2018_10_03)

Nagy Péter – Politikai előrejelzések és a szakértői vélemények megbízhatósága – (https://www.tarsadalomkutatas.hu/letoltes.php?fid=2019_2_nagy_p)

Szabó Katalin – A szakértői előrejelzések korlátai és a döntéshozatal kihívásai – (https://www.poltudszemle.hu/2020/2/szabo_katalin.pdf)

Tóth Gábor – A szakértői vélemények és a valószínűségi gondolkodás szerepe a politikai előrejelzésekben – (https://www.matud.iif.hu/2021/02/toth_gabor.pdf)

  • Te mit gondolsz arról, hogy a szakértők előrejelzései gyakran kevésbé pontosak, mint a véletlenszerű találgatások?
  • Szerinted miért fordul elő, hogy a "szuper-előrejelzők" pontosabbak, mint az elismert szakértők?
  • Hogyan közelítenéd meg a politikai vagy gazdasági előrejelzések készítését, ha nem támaszkodhatnál a hagyományos szakértői modellekre?


Legfrissebb posztok

hétfő 21:56

A nagy vita: kell-e megmosni a rizst főzés előtt?

🍚 A rizs több milliárd ember mindennapi tápláléka világszerte, elkészítése kapcsán azonban rengetegen vitáznak: meg kell-e mosni főzés előtt, vagy felesleges időpazarlás?..

hétfő 21:34

Az ADHD felismerése nem erősségünk – az MI-é annál inkább

A figyelemhiányos hiperaktivitás-zavar, vagyis az ADHD hivatalos diagnózisa sokak számára elérhetetlen: az időhiány, a költségek, a kevés elérhető szakorvos és az általános tájékozatlanság mind nehezítik az utat...

hétfő 21:23

A netet elárasztották a botok – mit jelent ez nekünk?

Alig néhány év alatt gyökeresen megváltozott az internet felhasználói összetétele. Már nem emberek, hanem automatizált rendszerek bonyolítják le a webes kérések többségét – derül ki a Cloudflare Radar mérőrendszerének statisztikáiból, amelyek szerint világszerte a forgalom 57,4%-át úgynevezett agentikus, vagyis parancsokra dolgozó MI-botok generálják, míg a valódi emberek csak 42,6%-ot képviselnek...

hétfő 21:12

Az Xbox leépít, a Microsoft szerint kevés pénz jön a játékokból

A Microsoft vezetősége szerint a videójátékos üzletág egyik legnagyobb nehézsége, hogy nem termel elég bevételt...

hétfő 21:01

A kínai hackerek feltörték a REDCap szervereket, orvosi kutatási adatokat loptak

🔒 Jó példa erre, hogy Észak-Amerika egyik orvosi kutatóintézetének gépeit kínai kötődésű hackerek támadták meg, és hónapokon át észrevétlenül lopták az érzékeny adatokat...

hétfő 20:34

Az amerikai szigor miatt turbófokozatba kapcsol az európai technológiai szuverenitás

A világ egyik legnagyobb MI-fejlesztője, az Anthropic váratlanul leállította két fejlett kiberbiztonsági modellje, a Mythos 5 és a Fable 5 elérhetőségét az egész világon, miután amerikai kormányzati előírás erre kötelezte...

hétfő 20:12

Az új támadás egykattintásos adatlopóvá tette a Microsoft 365 Copilotot

Felmerül a kérdés, hogy mennyire bízhatunk meg a legmodernebb vállalati megoldásokban, amikor egy újonnan felfedezett, SearchLeak névre keresztelt sebezhetőség-sorozat lehetővé tette, hogy támadók különleges URL-ek segítségével egyetlen kattintással szerezzenek hozzáférést levelekhez, jelszavakhoz vagy akár SharePoint- és OneDrive-fájlokhoz a Microsoft 365 Copilot Enterprise rendszeren keresztül...

hétfő 20:01

Az Apple nyerő húzása lehet az iOS 27 a régi iPhone-okra

Ilyen eset például, amikor az Apple az új iOS 27-et a 2019-ben bemutatott iPhone 11 sorozattól kezdődően teszi elérhetővé...

hétfő 19:56

Az FBI figyelmeztet: futárok gyűjtik be a kriptós csalások pénzét

💸 Megfigyelhető, hogy a kriptobefektetési csalások új hullámában a bűnözők már futárokat is bevetnek a pénz megszerzésére...

hétfő 19:45

Az afrikai holdkőzet egy ősi, holdfelszínt olvasztó ütközést sejtet

🌚 Egy Észak-Afrikában talált holdi meteorit új megvilágításba helyezi a Hold ősi múltját...

hétfő 19:33

A nagy áttekintés szerint az időseknek alig használ a kalcium és D-vitamin

🙂 Különösen igaz ez akkor, ha az egészségügyi ajánlásokat követjük, hiszen világszerte emberek milliói szednek kalcium- és D-vitamin-készítményeket abban a reményben, hogy ezzel csökkentik a csonttörések és az esések kockázatát...

hétfő 19:22

A NASA óriási óceáni melegfoltot észlelt, jöhet az El Niño

🌊 A NASA műholdjai a Dél-Amerika partjaihoz tartó hatalmas melegvíztömeget figyeltek meg, amely komoly eséllyel az El Niño kialakulását jelzi...

hétfő 19:12

Az AYANEO tenyérnyi Game Boy-mása újra ringbe száll

🎮 A zsebben is elférő AYANEO Pocket Micro az utóbbi évek egyik legjobb kézi konzolja lett, amely tökéletesen hozza a klasszikus Game Boy Advance hangulatot...

hétfő 19:01

Az emberes SpaceX Mars-küldetés? Ne számítsunk rá ebben az évtizedben

🚀 Érdemes megérteni, hogy a SpaceX, amely a múlt pénteken debütált a Nasdaqon, villámgyorsan 19%-ot emelkedett, ezzel átlépve a 2 billió dolláros (kb...

hétfő 18:56

Az Xboxon felbukkant a „Vedd meg most, fizess később”, kiakadtak a rajongók

💸 Érdemes megvizsgálni, hogy a videojátékokhoz és konzolokhoz kapcsolódó vásárlási lehetőségek hogyan változnak a növekvő árak fényében...

hétfő 18:45

Az utazók pórul járhatnak: megugorhatnak a T‑Mobile külföldi percdíjai

Ha külföldre utazol, általában két lehetőséged van: veszel egy helyi SIM-kártyát, vagy a megszokott szolgáltatód roamingját használod...

hétfő 18:35

Az MI-vel ne csak gyorsabbak, hanem jobbak is legyenek a munkatársak

Képzeld el, pályád elején vagy, és a főnököd megbíz egy kellemetlen feladattal: meg kell írnod egy e-mailt egy fontos ügyfélnek, amelyben megmagyarázod a projekt késését...

hétfő 18:24

Az óriásgát Tibetben: Kína a természetet próbálja megszelídíteni

🚦 Magasan, a 4500 méterrel a tengerszint felett fekvő Tibeti-fennsík évszázadok óta Ázsia víztornya...

hétfő 17:45

A válogatós cégek MI-tudást követelnek: bajban az informatikusok

A kaliforniai techszektorban dolgozók tömegei még mindig abban reménykednek, hogy a munkaerőpiac végre talpra áll, de valójában egyre nehezebb új állást találni...

hétfő 17:34

A KFC visszavág: csont nélküli csirke és új italok

Az ikonikus gyorsétteremlánc most új stratégiához nyúl: teljesen átalakítja kínálatát, hangsúlyt helyezve a csont nélküli csirkére, különleges szószokra és izgalmas, élményalapú vendéglátásra...

hétfő 17:23

A Tejútrendszer szívében hatalmas szupernóva lehetséges maradványaira bukkant a NASA

💫 26 ezer fényévnyi távolságból figyelte meg a NASA Chandra Röntgen Obszervatóriuma a Tejútrendszer egyik leglátványosabb jelenségét...

hétfő 17:01

Az egyetemisták tömegesen felejtenek el olvasni?

Egy irodalmat és íráskészséget oktató egyetemi tanár, Tyler Jagt meglepő tapasztalatairól számolt be: egyik diákja sem tudott végigolvasni egy húszoldalas, kötelező tanulmányt, amelyet ő maga még egy évtizede egyetemistaként gond nélkül elolvasott...

hétfő 16:23

Az MI-felügyelőkre vadásznak a cégek: berobban a brit munkaerőpiac

Ami először apróságnak tűnt, mára gyökeresen átalakítja a brit munkaerőpiacot: a mesterséges intelligencia iránti kereslet ugrásszerűen megnőtt az utóbbi évben...

hétfő 16:12

A rekord egynapos esetszámugrás az Ebola-járványban Kongóban, egy hónappal a kitörés után

😷 Kongóban az Ebola-járvány minden eddiginél gyorsabban terjed, miközben az egészségügyi hatóságok igyekeznek lépést tartani az egyre növekvő esetszámmal...

hétfő 16:01

Az Antarktisz alatt több száz rejtett földrengést fedeztek fel – szokatlan helyen

Senki sem várta volna, hogy az Antarktisz rejtett, rendszeres földrengésekkel lepi meg a tudósokat...

hétfő 15:56

A Google lebuktatta a következő Pixel Dropot: képernyőreakciók, fizetős extrák

Tipikus eset, amikor egy vállalat maga szivárogtatja ki a nagy újításai részleteit, így mire a hivatalos bejelentés megtörténik, már mindenki tudja, mire számíthat...

hétfő 15:45

A SpaceX óriási tőzsdei bevezetése mindent a feje tetejére állíthat

Különösen igaz ez akkor, ha a befektetők már hónapok óta várnak valami nagy visszatérésre a tőzsdén...

hétfő 15:34

A Google AI-módja mostantól helyetted tartja számon az információkat

📝 A Google újabb nagy dobással jelentkezik: már valóság az a funkció, amelyben személyes digitális ügynököd veszi le a válladról az állandó keresgélést és a friss információkra való vadászatot...

hétfő 15:23

Az AMD Radeon RX 9070 XT váratlanul tarol a Steam-felmérésben

🔥 Az AMD új Radeon RX 9070 XT videókártyája váratlanul népszerűvé vált a gamerek körében: a legfrissebb Steam hardverfelmérés szerint májusban már 1,33%-os részesedést szerzett a felhasználók között, ezzel az első helyre került az AMD GPU-k között...