予測市場は、結果ではなく確率を与えるはずです。現実世界は不確実であり、@Polymarketその不確実性を確率で定量化します。 では、「PolymarketがXを予測し、Xは起こった/起こらなかった」でなければ、確率を出力するだけなら、Polymarketが実際にどの程度予測できるかをどのように測定するのでしょうか? 統計学者はすでに、ブライアースコアと呼ばれるこのためのツールを持っています。ブライアースコアは基本的に、「結果が~60%起こる可能性が高いと言うとき、そのようなことは60%の確率で起こるのか?」と教えてくれます。10%も同じ、90%も同じ、という具合です。 Polymarket、@Duneダッシュボードの様子を@alexmccullaaa👇に示します。 ブライアースコアの場合、小さいほど良いです。0.1 未満であれば、一般的に素晴らしいです。(スポーツベッティングラインは0.2前後になる傾向があります)。Polymarket の Brier スコアは 0.056 で、正しい確率を非常に正確に表示できることを意味します。 要点: Polymarket は非常に正確ですが、それが何を意味するのか、どのように測定されるのかは微妙です。

補遺--技術的には、OPで説明したのはキャリブレーションですが、ブライアースコアはシャープネスも測定します(つまり、モデルが自信を持って予測を行うか、より良いスコアを得るためにヘッジするか)。 数学的に傾倒している人の場合、ブライアースコアは予測確率のMSEとして計算されます。