Los mercados de predicción se supone que te dan probabilidades, no resultados. El mundo real es incierto, y @Polymarket cuantifica esa incertidumbre con probabilidades. Así que si no es "Polymarket predijo X y X sucedió/no sucedió"—si solo emite probabilidades—¿cómo mides cuán predictivo es realmente Polymarket? Los estadísticos ya tienen una herramienta para esto, llamada Brier Score. Los Brier Scores básicamente te dicen: "cuando dices que un resultado tiene un ~60% de probabilidad de ocurrir, ¿suceden esas cosas el 60% de las veces?" Lo mismo para el 10%, lo mismo para el 90%, y así sucesivamente. Así es como se ve para Polymarket, panel de @Dune por @alexmccullaaa 👇 Para los Brier Scores, cuanto más bajo, mejor. Cualquier cosa por debajo de 0.1 es generalmente fantástica. (Las líneas de apuestas deportivas tienden a estar alrededor de 0.2). El Brier Score de Polymarket es 0.056, lo que significa que es extremadamente preciso al mostrar probabilidades correctas. Conclusión: Polymarket es muy preciso, pero es sutil lo que eso significa y cómo se mide.

Adenda--técnicamente lo que describí en OP es calibración, mientras que el Brier Score también mide la agudeza (es decir, si el modelo está haciendo predicciones seguras o está siendo cauteloso para obtener mejores puntuaciones). Para los matemáticamente inclinados, el Brier Score se calcula como el MSE de las probabilidades predichas.