Practica la calibración de probabilidades

Haz predicciones probabilísticas con regularidad y sigue tu precisión a lo largo de muchas de ellas.

Why it works

La calibración es la correspondencia entre tu confianza declarada y tu precisión real: si dices "80 % de confianza" en 100 predicciones, deberías acertar unas 80 veces. El sesgo retrospectivo interfiere con la calibración al hacerte creer que estabas más seguro sobre los resultados que acertaste de lo que en realidad estabas. Entrenar la calibración directamente —haciendo muchos pronósticos pequeños y puntuándolos— construye un autoconocimiento preciso sobre la incertidumbre, que es el cimiento de mejores decisiones bajo incertidumbre.

How to do it

1. Elige un dominio con resultados comprobables: resultados deportivos, plazos de proyectos, decisiones de colegas.
2. Haz una predicción probabilística y anótala con un nivel de confianza.
3. Tras el resultado, puntúa si el resultado cayó dentro de tu probabilidad declarada.
4. A lo largo de docenas de predicciones, calcula tu puntuación de calibración y fíjate en dónde tienes un exceso o un defecto de confianza sistemático.

Evidencia

El entrenamiento de la calibración es una de las pocas intervenciones de reducción de sesgos con evidencia real de mejorar la precisión de los pronósticos. La investigación sobre los superpronosticadores halló que las personas entrenadas en pensamiento probabilístico superan a los expertos sin ese entrenamiento. (observational)

Los hallazgos sobre superpronósticos proceden de contextos específicos de pronóstico geopolítico; cuánto se transfiere la habilidad a las decisiones personales y profesionales es plausible pero no está estudiado directamente.

Sources

• Tetlock & Gardner (2015), Superforecasting: The Art and Science of Prediction

Common mistake

Hacer predicciones solo sobre cosas que esperas acertar, en lugar de muestrear ampliamente, lo que produce una calibración falsa a partir de una selección no aleatoria de casos fáciles.