¿Aciertan las previsiones?
Una probabilidad solo vale si es honesta: de los equipos a los que dimos un 70%, alrededor del 70% debe llegar. Esta página lo comprueba con todo lo que publicamos en las ediciones terminadas, día a día, frente a lo que pasó de verdad.
Son 7 ediciones terminadas y 60.734 previsiones: cada probabilidad publicada para un equipo en un objetivo, en cada actualización, mientras el desenlace seguía abierto. Cuando la probabilidad publicada estaba entre el 10% y el 20%, el desenlace ocurrió el 13,6% de las veces. Cuando la probabilidad publicada estaba entre el 50% y el 60%, el desenlace ocurrió el 59,1% de las veces. Cuando la probabilidad publicada estaba entre el 80% y el 90%, el desenlace ocurrió el 89,7% de las veces. En los tramos 50–60%, 60–70%, 70–80% y 80–90%, el desenlace ocurrió más veces de lo previsto: ahí el modelo fue conservador. En los tramos 40–50%, ocurrió menos de lo previsto: ahí el modelo se pasó. El Brier score general es 0,086 (0 sería acertarlo todo con certeza). Una previsión ingenua, que diera a todos la misma probabilidad media, tendría 0,140: el modelo se equivoca un 38% menos.
Previsto frente a ocurrido, por tramo
La barra muestra cuánto ocurrió; la marca, la probabilidad media prevista. En una previsión calibrada, la barra termina en la marca.
| Tramo previsto | Previsiones | Media prevista | Ocurrió | Comparación |
|---|---|---|---|---|
| 0–10% | 36.241 | 3,2% | 3,8% | |
| 10–20% | 9044 | 14,4% | 13,6% | |
| 20–30% | 4454 | 24,7% | 26,4% | |
| 30–40% | 3070 | 34,9% | 33,8% | |
| 40–50% | 2124 | 44,7% | 39,9% | |
| 50–60% | 1658 | 54,5% | 59,1% | |
| 60–70% | 1001 | 64,8% | 71,6% | |
| 70–80% | 869 | 74,9% | 83,7% | |
| 80–90% | 786 | 85,0% | 89,7% | |
| 90–100% | 1487 | 96,6% | 97,6% |
Por competición
Brier score de cada división (menor es mejor). Una liga más igualada tiene más incertidumbre real y, por eso, un Brier mayor; no significa un modelo peor.
| División | Ediciones | Previsiones | Brier |
|---|---|---|---|
| La LigaLiga Española | 2 | 22.383 | 0,058 |
| Brasileirão Série ACampeonato Brasileño | 2 | 16.806 | 0,132 |
| Premier LeagueLiga Inglesa | 2 | 16.201 | 0,072 |
| MundialFIFA | 1 | 5344 | 0,105 |
Cómo contamos
Cuenta toda probabilidad publicada en las actualizaciones diarias de cada edición terminada, para cada equipo y objetivo (título, plazas, descenso, rondas de copa). Quedan fuera las ya decididas —aseguradas o eliminadas matemáticamente, o fijadas en 0% o 100%—, porque no ponen a prueba el modelo. El desenlace es dónde terminó el equipo la edición.
Qué es el Brier score
Es la media del cuadrado de la diferencia entre la probabilidad prevista y el resultado (1 si ocurrió, 0 si no). Dar un 90% a algo que ocurrió cuesta 0,01; dar un 90% a algo que no ocurrió cuesta 0,81. Cuanto menor, mejor.
Limitaciones de esta cuenta
Las previsiones de un mismo equipo en días seguidos son muy parecidas, así que el número de previsiones exagera la cantidad de evidencia independiente. Aún hay pocas ediciones terminadas: la cuenta gana solidez con cada temporada que acaba. Y una buena calibración agregada no garantiza acertar cada caso: un 10% ocurre, una vez de cada diez.