Construye repeticiones de calibración con trivialidades de bajo riesgo y preguntas de almanaque

Usa preguntas de trivia factuales como campo de práctica para la calibración: los resultados se resuelven de inmediato y el riesgo es cero.

Why it works

La habilidad de calibración, como cualquier habilidad, requiere repetición con retroalimentación. Las decisiones del mundo real se resuelven lentamente, tienen alto riesgo emocional que distorsiona la puntuación honesta, y ocurren con muy poca frecuencia para una iteración rápida. Las preguntas de trivia y almanaque aportan práctica de alto volumen y retroalimentación inmediata en un ámbito sin interferencia emocional, convirtiéndolas en un entorno de entrenamiento ideal para la habilidad metacognitiva subyacente que se transfiere a las predicciones de alto riesgo.

How to do it

1. Usa una herramienta de entrenamiento de calibración o un almanaque para practicar la estimación de intervalos de confianza (p. ej., herramientas de navegador como OpenBook, Calibrate Your Uncertainty).
2. Apunta a al menos 20 a 30 preguntas por sesión para generar retroalimentación estadísticamente significativa.
3. Después de cada sesión, revisa dónde tu probabilidad declarada se desvió más de tu tasa de acierto.
4. Traduce el patrón de descalibración de la sesión a una regla para las predicciones del mundo real.

Evidencia

Lichtenstein y Fischhoff y los investigadores posteriores encontraron que los ejercicios de entrenamiento en probabilidad con retroalimentación reducen el exceso de confianza, y que las mejoras son observables en estudios controlados con medición de seguimiento. La transferencia a ámbitos del mundo real es parcial pero presente. (observational)

Las mejoras de calibración del entrenamiento con trivia no se generalizan del todo a ámbitos con estructura, peso emocional o retrasos de retroalimentación distintos. El entrenamiento es un fundamento, no un arreglo completo.

Sources

• Lichtenstein & Fischhoff (1980), "Training for calibration," Organizational Behavior and Human Performance

Common mistake

Tratar un buen desempeño en la calibración de trivia como evidencia de buena calibración en ámbitos de consecuencias: la contaminación emocional y motivacional de las decisiones reales está ausente en la trivia.