Tratta l'accuratezza previsionale come un'abilità che migliora con la pratica

Prendi gli errori di previsione come feedback sulla prestazione, non come prova che prevedere è inutile.

Why it works

I superforecaster trattano i risultati della loro valutazione come diagnostiche, non verdetti. Quando sono mal calibrati in un dominio, indagano perché — la classe di riferimento era sbagliata, la ponderazione dell'evidenza era imprecisa, c'era una dipendenza strutturale che hanno perso? Questo orientamento al feedback è lo stesso meccanismo che distingue la pratica deliberata dalla semplice esperienza. Senza di esso, la ripetizione produce fiducia senza accuratezza.

How to do it

1. Dopo che una previsione si risolve, valutala: confronta la tua probabilità dichiarata con l'esito binario.
2. Per le previsioni in cui hai sbagliato significativamente, fai un breve post-mortem: qual è stato il fattore più forte che hai sottostimato?
3. Traccia i pattern di errore: sovrastimi in certi domini, sottostimi in altri?
4. Fissa un obiettivo di apprendimento per la calibrazione (non solo l'accuratezza) — "voglio che le mie previsioni al 70% si verifichino il 70% delle volte."

Prove scientifiche

La ricerca di Tetlock ha scoperto che i previsori che si sono impegnati in apprendimento deliberato dalla valutazione — in particolare quelli che si sono esercitati in squadre con feedback — hanno mostrato il maggior miglioramento nel tempo. La traiettoria di crescita è coerente con la ricerca sulla pratica deliberata. (observational)

Il miglioramento della calibrazione è lento e dipendente dal contesto; grandi miglioramenti sono stati osservati in condizioni di torneo con feedback denso. Il processo decisionale nel mondo reale con feedback scarso produce guadagni più lenti.

Fonti

• Tetlock & Gardner (2015), Superforecasting, Chapter 10

Errore comune

Usare un singolo errore drammatico per concludere che la previsione non è affidabile invece di indagare il meccanismo specifico dell'errore — un errore è un dato, non una confutazione.