Impegnati in anticipo su criteri di risoluzione prima di fare una previsione
Definisci esattamente cosa conta come "avevo ragione" prima che l'esito accada.
Why it works
Le previsioni vaghe sopravvivono a quasi qualsiasi esito — "ho detto che le cose potrebbero complicarsi" è coerente sia col disastro sia col successo. Questa flessibilità dell'esito è una forma di ragionamento motivato che impedisce al feedback di calibrazione di arrivare mai. Impegnarsi in anticipo su criteri di risoluzione specifici e verificabili chiude la via di fuga: la previsione o si risolve correttamente o no, e non puoi ricostruire post-hoc cosa "intendevi davvero".
How to do it
- Quando registri una previsione, scrivi i criteri di risoluzione nella stessa voce: "Questo è corretto se X accade entro Y data."
- Rendi i criteri misurabili: "più del 50% di quota di mercato", "spedito entro Q4", non "va ragionevolmente bene".
- Non rivedere i criteri dopo che la previsione è stata fatta — la revisione è la misurazione che stai cercando di raccogliere.
- Includi una condizione "nulla": cosa conterebbe come previsione indeterminata?
Prove scientifiche
Il Good Judgment Project richiedeva che tutte le previsioni avessero criteri di risoluzione espliciti; questo requisito strutturale è accreditato come motivo chiave per cui le sue misurazioni di calibrazione erano significative. Mellers et al. (2014) hanno riportato che le strategie vincenti del torneo si costruivano su quell'impalcatura — domande precise e risolvibili erano la precondizione che permetteva ad allenamento e collaborazione di tradursi in accuratezza misurabilmente più affilata. (clinical)
Alcuni eventi del mondo reale resistono a una risoluzione binaria pulita; l'esercizio dei criteri di risoluzione è più potente per previsioni specifiche a breve termine e meno pulito per esiti complessi a lungo orizzonte.
Fonti
Errore comune
Scrivere "avevo ragione sulla direzione generale" come criteri di risoluzione retrospettivi dopo un esito deludente — questo è riformulazione col senno di poi, non valutazione.
Metti in pratica questo con IX Coach
More practices for Allenamento alla Calibrazione
- Pratica la stima di intervalli di confidenza
Stima intervalli per quantità fattuali e verifica quanto spesso il valore vero cade nel tuo intervallo.
- Mantieni un registro di previsioni con punteggio
Registra le previsioni con probabilità esplicite e valutale quando si risolvono.
- Identifica i domini specifici dove sei più sicuro di te
La calibrazione è specifica del dominio — trova dove la tua fiducia supera di più la tua accuratezza.
- Ancora il tuo livello di fiducia sui tassi base, non sull'istinto
Inizia la tua stima di fiducia dal tasso storico di successo per questo tipo di previsione, non da quanto ti senti sicuro.
- Costruisci ripetizioni di calibrazione con trivia e domande da almanacco a basso rischio
Usa domande di trivia fattuali come terreno di pratica per la calibrazione — gli esiti si risolvono immediatamente e la posta in gioco è zero.
- Distingui l'incertezza (quantificabile) dall'ignoranza (non quantificabile)
Sappi quando puoi assegnare una probabilità e quando la situazione è così nuova che un numero sarebbe fabbricato.
Concetti correlati
- Superforecasting
The habits, mindset, and calibration practices of the world’s most accurate forecasters
- La Prospettiva Esterna
Correcting inside-view optimism with base rates, history, and calibrated humility
- Previsione a Classe di Riferimento
Using base rates and outside-view anchors to forecast more honestly