Puntúa tus propias predicciones pasadas para calibrar tu uso de la visión externa

Lleva un registro de pronósticos y puntúalo; no puedes mejorar la calibración sin retroalimentación sobre dónde tuviste exceso o falta de confianza.

Why it works

La calibración es la alineación entre la confianza declarada y la precisión real. La mayoría de la gente nunca descubre qué tan bien calibrada está porque no rastrea sus predicciones. Sin este bucle de retroalimentación, la adopción de la visión externa sigue siendo una buena intención en lugar de una habilidad. Puntuar fuerza al sistema a producir señales de error legibles y crea las condiciones para una mejora genuina.

How to do it

1. Comienza a registrar predicciones significativas con estimaciones de probabilidad: "70% de probabilidad de que esto tarde menos de tres meses".
2. Fija un recordatorio en el calendario para registrar el resultado cuando se resuelva.
3. Calcula tu calibración con el tiempo: de todo lo que dijiste que tenía un 70% de probabilidad, ¿ocurrió aproximadamente el 70%?
4. Identifica los dominios donde tienes exceso o falta de confianza sistemática y ajusta tu anclaje en las tasas base en consecuencia.

Evidencia

La investigación del torneo de pronósticos de Tetlock encontró que rastrear y puntuar las predicciones es el mecanismo de retroalimentación que separa a los superpronosticadores del resto; quienes rastreaban y reflexionaban mejoraban sustancialmente, mientras que quienes no lo hacían se estancaban. (observational)

La puntuación de calibración requiere un volumen suficiente de predicciones puntuadas para ser estadísticamente significativa; las decisiones de vida individuales no se resuelven con la frecuencia suficiente para producir curvas de calibración limpias a corto plazo.

Sources

• Tetlock & Gardner (2015), Superforecasting

Common mistake

Registrar las predicciones en lenguaje natural en lugar de probabilidades explícitas, haciendo imposible la calibración retrospectiva; "pensé que era probable" no puede puntuarse.