Prediksjonsmarkeder er ment å gi deg sannsynligheter, ikke utfall. Den virkelige verden er usikker, og @Polymarket kvantifiserer denne usikkerheten med sannsynligheter. Så hvis det ikke er "Polymarket spådde X og X skjedde/skjedde ikke" – hvis det bare gir ut sannsynligheter – hvordan måler du hvor prediktiv Polymarket faktisk er? Statistikere har allerede et verktøy for dette, kalt Brier Score. Brier Scores forteller deg i bunn og grunn: "når du sier at et utfall er ~60 % sannsynlig å skje, skjer disse tingene 60 % av tiden?" Samme for 10 %, samme for 90 % og så videre. Slik ser det ut for Polymarket, @Dune dashbord av @alexmccullaaa 👇 For Brier Scores er mindre bedre. Alt under 0,1 er generelt fantastisk. (Sportsbettinglinjer pleier å være rundt 0,2). Polymarkets Brier-score er 0,056, noe som betyr at den er ekstremt nøyaktig når det gjelder å vise riktige sannsynligheter. Takeaway: Polymarket er veldig nøyaktig, men det er subtilt hva det betyr og hvordan det måles.

Tillegg - teknisk sett er det jeg beskrev i OP kalibrering, mens Brier Score også måler skarphet (dvs. er modellen som gjør sikre spådommer eller sikring for å få bedre poengsum). For de matematisk tilbøyelige beregnes Brier-skår som MSE for anslåtte sannsynligheter.