Guía práctica / 03

Qué significa estar calibrado

Una probabilidad no se vuelve confiable porque tenga decimales o porque acertó ayer. La calibración pregunta si sus frecuencias se sostienen cuando llegan partidos nuevos.

PredicciónOrdena escenarios

Asigna probabilidades antes de conocer el resultado.

ComprobaciónEspera resultados nuevos

Evalúa partidos que no participaron en el ajuste.

CorrecciónReduce exceso de confianza

Ajusta solo cuando existe evidencia suficiente y mejora real.

Qué es calibrar

Si un modelo asigna 70% a muchos eventos comparables, un modelo bien calibrado espera que aproximadamente siete de cada diez terminen ocurriendo. No se exige que cada evento individual acierte: se compara el conjunto de previsiones con su frecuencia posterior.

Pronósticos cercanos a 70% → frecuencia observada cercana a 70%La cercanía necesaria depende del volumen, el mercado y la incertidumbre de la prueba.

La calibración corrige una tendencia sistemática. Si los eventos publicados al 70% ocurren solo 58% de las veces, el modelo está mostrando demasiada seguridad. Si ocurren 78%, podría estar siendo conservador, aunque una muestra pequeña puede producir esa diferencia por azar.

Calibración no es porcentaje de aciertos

Un sistema que siempre pronostica al favorito podría acertar muchas veces y seguir estando mal calibrado si exagera sus probabilidades. Del mismo modo, un modelo bien calibrado puede fallar varias predicciones seguidas porque los eventos probables también pierden.

Acierto
Pregunta si el resultado elegido ocurrió. Reduce una distribución completa a sí o no.
Calibración
Pregunta si las probabilidades publicadas coinciden con frecuencias observadas en grupos comparables.
Discriminación
Pregunta si el modelo ordena correctamente escenarios más y menos probables.
Rentabilidad
Incorpora precio, margen y decisiones. No se deduce únicamente de las tres medidas anteriores.

Por qué se evalúa fuera de muestra

Si un partido ayuda a construir el modelo y luego se utiliza para demostrar que el mismo modelo funciona, la evaluación queda contaminada. Una prueba fuera de muestra reserva resultados posteriores: el motor genera la estimación primero y espera a que el partido cierre.

  1. Se fija una versión del cálculo con información disponible hasta una fecha.
  2. Se generan probabilidades para partidos todavía no resueltos.
  3. Los resultados llegan sin modificar retrospectivamente la salida.
  4. Se agrupan mercados y rangos comparables.
  5. Solo entonces se mide error y se evalúa una corrección.
El tiempo forma parte del control

No se debe usar el resultado para escoger después qué versión “habría” acertado. El corte cronológico protege contra esa retrospectiva.

Cómo leer los sellos de PARTIDATO

EstadoQué existeLectura prudente
CalibradoLa salida fue contrastada y una corrección cumplió el criterio definido.Sigue teniendo error; revisa volumen y vigencia.
Medido · sin margenExiste medición del mercado, pero no un colchón adicional consolidado.No conviertas el porcentaje en certeza.
PreliminarEl dato existe, pero puede actualizarse cerca del partido.Úsalo como contexto, no como confirmación.
Crudo / sin auditarLa distribución se calculó, pero falta validación suficiente.Exploración; no sostengas una conclusión solo con ella.
No validadoLa muestra o comparabilidad no cumple el control mínimo.El mercado debe detenerse y no publicar cifras aparentes.

El sello pertenece al mercado, no al partido completo. Puede existir BTTS calibrado y 1X2 crudo dentro del mismo informe.

Por qué pocos resultados no bastan

Supón que cinco eventos marcados al 70% producen cuatro aciertos: la frecuencia observada es 80%. Con una muestra tan pequeña, un solo resultado mueve la tasa veinte puntos. No existe base suficiente para afirmar que el modelo es conservador.

Con más resultados, cada partido pesa menos y la estimación de error se estabiliza. El informe de PARTIDATO muestra cuántos resultados se han cerrado y cuánto falta según la regla vigente. Esa cantidad puede variar por liga y mercado; no debe convertirse en una garantía universal.

5 resultados±20 ppCada partido cambia mucho
40 resultados±2.5 ppCada partido pesa menos
VigenciaContinuaDebe seguir midiéndose

Cada mercado necesita su propia prueba

Goles, BTTS, 1X2, remates, corners y tarjetas no comparten exactamente la misma distribución ni el mismo error. Calibrar el resultado del partido no valida automáticamente la escalera de faltas.

1X2

Tres resultados

Debe mantener coherencia entre local, empate y visita y respetar la suma del conjunto.

BTTS

Evento binario

Ambos marcan o no; puede recibir corrección diferente al total de goles.

Goles

Distribución discreta

El total esperado produce muchas líneas relacionadas, no pruebas independientes.

Físicos

Mayor dispersión

Remates, corners y faltas pueden necesitar controles de variabilidad propios.

Cómo leer “42 resultados cerrados”

Un informe indica: “42 resultados cerrados; BTTS calibrado; 1X2 crudo”. La lectura correcta no es “todo el partido está calibrado”. Significa que la prueba definida encontró soporte para corregir BTTS, mientras 1X2 no cumplió su criterio o no mejoró.

  1. Identifica el mercado exacto al que pertenece el sello.
  2. Revisa cuántos resultados comparables entraron.
  3. Distingue probabilidad cruda y probabilidad calibrada.
  4. Comprueba la fecha de la evaluación.
  5. No traslades la corrección a otras ligas o mercados.

Si el informe dice “faltan resultados o no hubo mejora fuera de muestra”, conservar la salida cruda puede ser más responsable que forzar una corrección.

Lista de control

  • ¿El porcentaje fue generado antes del resultado?
  • ¿El sello corresponde a este mercado exacto?
  • ¿Cuántos resultados cerrados forman la prueba?
  • ¿La muestra pertenece a una liga y periodo comparables?
  • ¿La corrección mejoró el error fuera de muestra?
  • ¿Se sigue midiendo su vigencia?
  • ¿Estoy confundiendo calibración con certeza?
Siguiente: incertidumbre y errorAprende por qué un porcentaje alto todavía conserva escenarios contrarios.→Consultar la metodología públicaRevisa el proceso completo y los límites declarados por PARTIDATO.→