直感ではなく基準率に自信レベルを固定する
自信の推定値を、感じている自信からではなく、このタイプの予測の歴史的な的中率から始める。
Why it works
直感的な自信は、答えがどれだけ流暢に思い浮かんだか、結果にどれだけ動機づけられているか、似たような出来事がどれだけ最近起こったかによって汚染されています。これらのどれも正確さの信頼できる代理指標ではありません。定義された基準クラスからの基準率は、直感が混ぜ込んでしまう感情的・認知的なノイズから自信の推定値を切り離す、確固たる外部の錨を提供します。
How to do it
- 自信レベルを述べる前に問う。『これのような予測において、自分は歴史的にどのくらいの割合を正しく当ててきたか?』
- 個人的なデータがない場合は、領域の基準率を使う(例:新製品の成功率、診断の的中率)。
- 初期の自信を基準率に設定し、この場合の具体的な特徴に応じて調整する。
- 調整は控えめにする――アンカリングに関する研究は、いずれにしても十分に調整しないことを示している。
エビデンス
基準率の無視はよく文書化されています。人はケース固有の情報を統計的な基準率よりも重く見て、過信した個別評価につながります。ケース固有の推論の前に基準率を固定することはこの効果を減らします。 (observational)
基準率のアンカリングは平均して正確さを向上させますが、個人が基準クラスに対して異常に有利な位置にある、本当に異常なケースには保守的すぎることがあります。
出典
- Kahneman & Tversky (1973), "On the psychology of prediction," Psychological Review
- Kahneman & Lovallo (1993), on planning fallacy and inside-view bias
- Kahneman, D., & Tversky, A. (1973). On the psychology of prediction. Psychological Review, 80(4), 237–251.
- Kahneman, D., & Lovallo, D. (1993). Timid choices and bold forecasts: A cognitive perspective on risk taking. Management Science, 39(1), 17–31.
よくある間違い
基準率を錨としてではなく、多くの入力の一つとして使うこと。それにより、具体的なケースの説得力のある物語に薄められてしまいます。
IX Coach でこれを実践する
More practices for キャリブレーション・トレーニング
- 信頼区間の推定を練習する
事実に関する量の範囲を推定し、真の値がその範囲内に収まる頻度を確認する。
- 採点された予測の記録を維持する
明示的な確率をつけて予測を記録し、それが解決したときに採点する。
- 自分が最も過信している具体的な領域を特定する
キャリブレーションは領域固有である――自信が正確さを最も超えている場所を見つける。
- 予測をする前に解決基準に事前コミットする
結果が起こる前に、何が『自分は正しかった』と数えるかを正確に定義する。
- 低リスクのトリビアと年鑑の質問でキャリブレーションの反復練習を積む
事実に関するトリビアの質問をキャリブレーションの練習の場として使う。結果は即座に解決し、リスクはゼロである。
- 不確実性(定量化可能)と無知(定量化不可能)を区別する
確率を割り当てられるときと、状況があまりにも新しく数字が捏造されたものになるときを知る。