確率の較正を練習する
定期的に確率的な予測を行い、その多くにわたって自分の正確さを追跡する。
Why it works
較正とは、あなたが述べる自信と実際の正確さの一致度のことです——100回の予測にわたって「80%の自信がある」と言うなら、およそ80回は当たっているべきです。後知恵バイアスは、当たった結果について実際よりも自分は確信を持っていたと信じ込ませることで、較正を妨げます。較正を直接トレーニングすること——多くの小さな予測を行い、それを採点すること——は、不確実性についての正確な自己認識を築き、それが不確実性の下でのより良い決定の土台となります。
How to do it
- 確認可能な結果のある領域を選ぶ——スポーツの結果、プロジェクトの締め切り、同僚の決定など。
- 確率的な予測を行い、自信のレベルとともに書き留める。
- 結果が出た後、その結果が自分の述べた確率の範囲に収まっていたかを採点する。
- 数十回の予測を経て較正スコアを計算し、体系的に自信過剰か自信不足になっている部分に気づく。
エビデンス
Calibration training is one of the few debiasing interventions with real evidence of improving forecasting accuracy. Research on superforecasters found that people trained in probabilistic thinking outperform experts without such training. (observational)
Superforecasting findings come from specific geopolitical forecasting contexts; how much the skill transfers to personal and professional decisions is plausible but not directly studied.
出典
- Tetlock & Gardner (2015), Superforecasting: The Art and Science of Prediction
よくある間違い
幅広くサンプルを取るのではなく、正解できると予想できることだけを予測してしまうこと——それでは非ランダムに選ばれた簡単なケースから偽の較正が生まれてしまう。