期待値の推定を評価するための決断日記をつける

自分の確率推定と結果予測を記録し、後で実際に何が起きたかと比較する。

Why it works

期待値思考は、それに入力される確率と結果の推定の質次第でしか良いものにならない。フィードバックがなければ、推定は感情的に都合の良い方向へと漂っていく。決断日記は説明責任を生み出す:結果が出る前に推定を記録し、後で見直す。このフィードバックループは、キャリブレーション練習を効果的にするのと同じメカニズムである――体系的な誤りを見ることで意図的な修正が可能になる。

How to do it

1. 重要な決断の前に書く:シナリオ、確率、推定された価値、そして期待値の結果。
2. 選んだ選択肢と、それが最高の期待値と一致していたかどうかを書き留める。
3. 結果が出た後、実際に何が起きたかを記録する。
4. 四半期ごとに自分の推定を見直し、体系的なバイアス――楽観、直近性、特定分野での過信――を探す。

エビデンス

決断日記をつけることは、予測と意思決定の質を扱うコミュニティで広く支持されている実践である。そのフィードバックのメカニズムは、専門的な予測者の予測精度の向上に観察的なエビデンスを持つキャリブレーション練習と同一である。 (mechanistic)

日記の実践は正直な事後評価に依存する。事前の記録が詳細でない限り、事後の動機づけられた推論が書かれた記録さえ汚染しうる。

出典

• Tetlock & Gardner (2015), Superforecasting, Crown Publishers
• Mellers, B., Ungar, L., Baron, J., Ramos, J., Gurcay, B., Fincher, K., Scott, S. E., Moore, D., Atanasov, P., Swift, S. A., Murray, T., Stone, E., & Tetlock, P. E. (2014). Psychological Strategies for Winning a Geopolitical Forecasting Tournament. Psychological Science, 25(5), 1106-1115.

よくある間違い

うまくいった決断だけを記録したり、結果が分かった後にオリジナルの予測を書き換えたりすること――どちらも日記が提供するはずのフィードバックを消してしまう。