Abilitatea de a prezice viitorul este un semn valoros de inteligență și un test bun pentru capacitățile inteligenței artificiale. Cât de bun este ChatGPT la predicții?
Un răspuns la această întrebare fascinantă a apărut recent când economistul David Seif a încheiat un concurs anual de prognoze pe care îl organizează pentru un grup secret de economiști, investitori din fonduri de hedging și directori din tehnologie, scrie Business Insider.
Ajuns la a șaptea ediție, concursul cere participanților să prezică aproximativ 30 de evenimente. Jocul pentru 2025 a început la finalul lui 2024, când Seif a trimis lista de evenimente din domenii precum politică, afaceri, știință, economie, cultură pop și sport.
O întrebare le cerea participanților să estimeze probabilitatea ca Taylor Swift și Travis Kelce să își anunțe logodna până la 1 aprilie. Alta întreba dacă Bulgaria va adopta euro ca monedă oficială până la 1 iulie.
Sam Leffell, director într-un fond de investiții, completa probabilitățile în decembrie când i-a venit o idee.
„Când răspundeam la întrebări, aveam ChatGPT deschis. M-am întrebat: oare ce ar spune la aceste întrebări?”, își amintește el într-un interviu recent.
ChatGPT a trebuit să învețe reguli complexe
Leffell l-a contactat pe Seif pentru a întreba dacă ChatGPT poate participa, iar Seif i-a spus să încerce. Așa că Leffell a început prin a copia în ChatGPT regulile concursului.
Regulile sunt complexe, acoperind mai multe pagini. Participanții trebuie să atribuie fiecărui eveniment un procent care să reflecte probabilitatea de a se întâmpla. Pe măsură ce evenimentele se confirmă sau nu, predicțiile sunt punctate ca la golf: scorul cel mai mic câștigă.
„Primești puncte egale cu pătratul diferenței dintre predicția ta și rezultatul final”, explică Seif.
De exemplu, dacă atribui 90% șanse unui eveniment și acesta se întâmplă, primești 10 puncte. Pătrate, asta înseamnă 100 de puncte – excelent.
Dar dacă evenimentul nu se întâmplă, diferența este 90, iar pătratul este 8.100 de puncte. Durere.
Și acesta e doar sistemul de punctaj. Regulile complete sunt mult mai stufoase. Leffell a introdus totul în ChatGPT.
Câteva secunde mai târziu, chatbotul a răspuns: „Mulțumesc pentru regulile detaliate. Te rog să îmi trimiți lista clară de întrebări pentru care trebuie să ofer o probabilitate și voi furniza un singur număr pentru fiecare, conform regulilor concursului.”
Leffell a introdus toate cele 30 de întrebări odată, iar ChatGPT a generat rapid procentele sale pentru fiecare eveniment. Leffell le-a transmis lui Seif, care le-a introdus oficial în concurs în numele ChatGPT.
Încă din etapa de configurare, Leffell a observat ceva interesant.
„La o întrebare despre rezultatul unui meci NFL, a dat un răspuns matematic statistic corect. Făcea calcule, nu evaluări calitative. A fost remarcabil, pentru că la acel moment ChatGPT nu era considerat foarte bun la matematică.”
Cum au evoluat predicțiile
La începutul lui 2025, 160 de participanți își trimiseseră predicțiile și așteptau desfășurarea evenimentelor.
Aici am auzit și eu prima dată de acest joc, prin prieteni care participau. Unul conduce un fond de investiții, ceilalți sunt un director de marketing și un avocat.
Au devenit imposibil de suportat la petreceri, discutând doar despre predicții, scoruri și reguli.
De obicei asemenea discuții mă plictisesc, dar când am aflat că ChatGPT participă pentru prima dată, am devenit interesat.
Ar putea o mașină să depășească 160 de oameni în anticiparea viitorului? Modelele AI sunt excelente când există date istorice, dar viitorul este mult mai imprevizibil.
Testasem recent abilitatea ChatGPT de a prezice piața bursieră. Mă întrebam dacă se poate descurca mai bine într-un concurs atât de variat sau dacă oamenii rămân superiori datorită experienței, intuiției și extrapolării.
Pe parcursul anului, unele evenimente s-au întâmplat, altele nu. Unele prea târziu, altele în moduri complet neașteptate – exact cum se întâmplă în viață.
De fiecare dată când o întrebare era rezolvată, Seif actualiza un tabel central și trimitea clasamentul participanților.
Prieteneii mei urmăreau obsesiv actualizările: Cine conduce? Cine e în coadă? Și, mai ales… unde se află ChatGPT?
Simetrie ciudată
Jocul s-a încheiat pe 13 noiembrie.
„Pentru prima dată în cei șapte ani de când organizăm concursul, am câștigat chiar eu”, a anunțat Seif în emailul final.
ChatGPT a ieșit pe locul 80.
„Am avut 160 de participanți”, a adăugat el.
Simetrie perfectă.
Am scris prietenilor: „Asta înseamnă că ChatGPT nu este mai bun decât un om obișnuit!”
Unul dintre ei, directorul de marketing, mi-a răspuns imediat: „Nu, asta înseamnă că ChatGPT este la fel de bun ca un om obișnuit. Incredibil!”
