Piețele de predicție ar trebui să vă ofere probabilități, nu rezultate. Lumea reală este incertă și @Polymarket cuantifică această incertitudine cu probabilități. Deci, dacă nu este "Polymarket a prezis X și X s-a întâmplat/nu s-a întâmplat" – dacă doar scoate probabilități – cum măsori cât de predictiv este de fapt Polymarket? Statisticienii au deja un instrument pentru acest lucru, numit Brier Score. Scorurile Brier îți spun practic: "când spui că un rezultat are ~60% șanse să se întâmple, se întâmplă aceste lucruri în 60% din timp?" La fel pentru 10%, la fel pentru 90% și așa mai departe. Iată cum arată asta pentru Polymarket, @Dune tabloul de bord de @alexmccullaaa 👇 Pentru scorurile Brier, mai mic este mai bine. Orice sub 0,1 este în general fantastic. (Liniile de pariuri sportive tind să fie în jur de 0,2). Scorul Brier al Polymarket este de 0,056, ceea ce înseamnă că este extrem de precis la evidențierea probabilităților corecte. Concluzie: Polymarket este foarte precis, dar este subtil ce înseamnă asta și cum este măsurat.
wishful_cynic
wishful_cynic17 oct., 13:17
Cred că oamenii sunt foarte confuzi cu privire la "acuratețea" piețelor de predicție Primul exemplu sunt alegerile din SUA. Nu, polimarketul nu a "prezis victoria lui Trump". A fost mai precis (!) decât alte surse. Pentru a avea o afirmație că ați prezis ceva ce nu puteți spune "Trump are 60% șanse de a câștiga", trebuie să spuneți "Trump va câștiga" (sau să aveți o afirmație care este foarte aproape de 100%, ceea ce 60% pur și simplu nu este, este totuși mai mult o aruncare a monedei)
Addendum - din punct de vedere tehnic, ceea ce am descris în OP este calibrarea, în timp ce scorul Brier măsoară și claritatea (adică modelul face predicții sigure sau acoperă pentru a obține scoruri mai bune). Pentru cei cu înclinații matematice, scorul Brier este calculat ca MSE de probabilități prezise.
145,6K