一点見積もりではなく範囲で見積もる

「私の見積もりは500だ」ではなく「200から2000のあいだだと思う」と言う。

Why it works

一点見積もりは偽の精密さを伝え、実際に存在する不確実性を隠します。範囲による見積もりは較正された自信を伝えます――範囲の幅は、自分が実際にどれだけ知っているかを反映します。スーパーフォーキャスターを含む予測の専門家は、不確実性を一点の推測に潰すのではなく範囲として表現することによっても、初心者を一貫して上回ります。

How to do it

1. 中心の見積もりを計算した後、問う――どんな条件なら本当の答えは10倍高くなるか。10倍低くなるか。
2. 「妥当と考えられる結果」をカバーする範囲を述べる――絶対的な最悪ケースではなく、もっともらしい広がりを。
3. 桁数にまたがる量には、算術的な範囲ではなく幾何学的な範囲を使う(たとえば100〜900ではなく100〜10,000)。
4. 範囲とそれへの自信の両方を伝える。一点だけではなく。

エビデンス

較正研究は、見積もりを範囲として表現し、時間をかけてその正確さを追跡することが較正を大幅に改善することを示しています。スーパーフォーキャスターは日常的に信頼区間を使い、証拠によってそれを狭めます。 (observational)

人は過信した(狭すぎる)範囲を出しがちです。訓練は適切な較正へと広げることができますが、多くの予測にわたるフィードバックが必要です。

出典

• Tetlock & Gardner (2015), Superforecasting — range-based probabilistic estimates and calibration
• Soll, J. B., & Klayman, J. (2004). Overconfidence in interval estimates. Journal of Experimental Psychology: Learning, Memory, and Cognition, 30(2), 299-314.
• Alpert, M., & Raiffa, H. (1982). A progress report on the training of probability assessors. In D. Kahneman, P. Slovic, & A. Tversky (Eds.), Judgment under Uncertainty: Heuristics and Biases (pp. 294-305). Cambridge University Press.

よくある間違い

範囲が広すぎて何の情報にもならないものを与えること(1から10億のあいだ)――これはコミットメントを避けることで見積もりの目的を無にする。