構造化されたチーム予測を使って多様な視点を集約する
グループが話し合う前に複数人の独立した見積もりを組み合わせる——集約はどんな単独の専門家にも勝る。
Why it works
グループディスカッションは、最も自信のある、または最上位のメンバーの見解を増幅し、少数派の情報を抑制する傾向があります。ディスカッションの前に独立した見積もりを集約することは、ディスカッションが洗い流してしまうであろう情報を保存します。群衆の知恵の効果は独立性に依存します——このメカニズムは、見積もりが他者の見解の存在下で行われた瞬間に崩れます。
How to do it
- 各チームメンバーに、グループディスカッションの前に独立して確率の見積もりを書かせる。
- 見積もりを集め、平均する(あるいは中央値のような単純な集約を使う)。
- 個々の見積もりとともに集約結果を提示し、その後ディスカッションを開く。
- ディスカッションの後、個々の更新を許すが、グループの最頻見解に移るのではなく再集約する。
エビデンス
集約された独立した見積もりが、専門家を含むほとんどの個人を上回るという群衆の知恵の効果は、よく文書化されています(ゴルトン、スロウィッキー)。テトロックのトーナメントは集約されたチームスコアを使用し、構造化されたチームが個人を上回ることを発見しました。その優位性は集約前に独立性を保つことに依存していました。 (observational)
群衆の知恵は真の独立性を必要とします。人々が見積もりを出す前に共有された事前見解や目に見えるアンカーにアンカリングしていれば、集約は最良の単独見解にほとんど付け加えるものがありません。
出典
- Galton (1907), "Vox Populi," Nature
- Tetlock & Gardner (2015), Superforecasting, on team performance
よくある間違い
グループディスカッションを実施し、その後にディスカッション後の見積もりを平均すること——その時点ですでに独立性は失われており、「集約」は多様な視点ではなく最も説得力のある声を反映している。