Mākslīgā intelekta sistēma ir pārspējusi daudzus prognozēšanas entuziastu, ieskaitot vairākus profesionāļus Konkurss, lai prognozētu notikumus Sākot no krūtīm starp Donaldu Trumpu un Elonu Musku līdz Kemi Badenoch, kas tiek izņemti no konservatīvās partijas vadības.
Lielbritānijas AI startup, ko līdzdibināja bijušais Google Deepmind pētnieks, ir ierindojies starptautiskā prognozēšanas konkursa desmit labāko desmitniekā, kas prasa dalībniekiem prognozēt 60 notikumu iespējamību vasarā.
Mantikai bija astotais Metaculus kausa izcīņā, kuru vadīja Sanfrancisko bāzēts prognozēšanas uzņēmums, kas mēģina paredzēt ieguldījumu fondu un korporāciju nākotni.
AI sniegums joprojām atpaliek no labākajiem cilvēku prognozētājiem, taču tas ir atstājis dažus uzskatus, ka AI varētu pārspēt cilvēkus ātrāk, nekā vairums gaidīja.
“Šajā brīdī noteikti ir dīvaina sajūta, ka šajā brīdī ir pārspīlēti vairāki roboti,” sacīja Bens Šindels, viens no profesionālajiem prognozētājiem, kurš konkursa laikā atradās aiz AI, pirms finišēja virs Mantic. “Mēs šeit patiešām esam nogājuši tālu, salīdzinot ar pirms gada, kad labākais robots bija kaut kas līdzīgs 300. rangs.”
Jautājumi Metaculus kausa izcīņā ietvēra, kura partija ieguvusi visvairāk vietu Samoan vispārējās vēlēšanās un cik akru ASV no janvāra līdz augustam sadedzina ugunsgrēkus. Konkursa dalībnieki tika vērtēti par to, cik labi viņi prognozēja rezultātus no 1. septembra.
“Tas, ko Mantic ir izdarījis, ir iespaidīgs,” sacīja Degers Turāns, Metaculus izpilddirektors.
Turāns lēš, ka AI līdz 2029. gadam būs uz nominālvērtības vai labāku par labākajiem cilvēku prognozētājiem, bet sacīja, ka kopumā “šobrīd cilvēku prognozētājiem klājas labāk nekā AI prognozētāji”.
Sarežģītās prognozēs, kas paļaujas uz savstarpēji saistītu notikumu prognozēšanu, AI sistēmas joprojām var cīnīties, lai veiktu loģikas pārbaudes pārbaudes, pārveidojot zināšanas galīgajā prognozē, viņš sacīja.
Mantic sadala prognozēšanas problēmu dažādos darbos un piešķir tos mašīnmācīšanās modeļu sarakstam, ieskaitot Openai, Google un DeepSeek, atkarībā no viņu stiprajām pusēm.
Tobijs Ševlāns, Mantic līdzdibinātājs, sacīja, ka tā sniegums ir pagrieziena punkts AI kopienai, izmantojot prognozēšanas lielus valodu modeļus.
“Daži saka, ka LLMS tikai atjauno savus apmācības datus, bet jūs nevarat paredzēt tādu nākotni,” viņš teica. “Tas prasa patiesu argumentāciju. Jūs varētu teikt, ka mūsu sistēmas prognozes bija oriģinālākas nekā vairums cilvēku dalībnieku, jo cilvēki bieži sagrupējas ap kopienas vidējām prognozēm. AI sistēma bieži vien nepiekrita. Tātad, AI prognozētāji varētu būt pretdots grupas domāšanas jomā.”
Mantic sistēma izvieto dažādus AI aģentus, lai novērtētu, kas notiek tagad, veic vēsturiskus pētījumus, izspēlēt scenārijus un pēc tam prognozēt, kas, iespējams, notiks tālāk. AI prognozēšanas stiprums ir tā spēja noturīgi smagi strādāt, kas ir būtiska efektīvai prognozēšanai.
Viņi var viegli strādāt pie desmitiem sarežģītu problēmu vienlaikus un katru dienu tos pārskatīt, lai uzzinātu no informācijas maiņas. Cilvēka prognozēšana izmanto arī intuīciju, bet Šindels ir starp cilvēku prognozētājiem, kuri domā, ka tas varētu parādīties AI.
“Intuīcija ir ļoti svarīga, bet es nedomāju, ka tas ir iekšēji cilvēki,” viņš teica.
Vadošie cilvēku superforekasteri joprojām saka, ka viņi ir vislabākie. Filips Tetloks, bestselleru grāmatas SuperForecasting līdzautors šogad Publicēts pētījums Tas atklāja, ka eksperti cilvēki vidēji joprojām pārspēj augstāko robotu skaitu.
Turāns sacīja, ka sarežģītās prognozēs, kas paļaujas uz savstarpēji saistītu notikumu prognozēšanu, AI sistēmas joprojām var cīnīties, lai pamanītu loģiskas neatbilstības to rezultātos un veiktu verifikācijas pārbaudes.
Vorens Hečs, Good Judgment izpilddirektors, Tetlock līdzdibinātais prognozēšanas uzņēmums, sacīja: “Mēs sagaidām, ka AI izceļas ar dažām jautājumu kategorijām, piemēram, ikmēneša inflācijas līmeni. Kategorijām ar retiem datiem, kuriem nepieciešams lielāks spriedums, cilvēki saglabā galveno punktu. Galvenais mums pēc iespējas ātrāk nav cilvēku vai AI, bet gan AI, lai iegūtu labāko prognozi.”
Vai arī kā Lubos Saloky, cilvēku prognozētājs, kurš ieradās trešajā vietā Metaculus kausa izcīņā, izteicās: “Es neplānoju aiziet pensijā. Ja jūs nevarat tos pārspēt, apvienojieties ar viņiem.”
