Strukturiertes Team-Forecasting nutzen, um vielfältige Sichtweisen zu aggregieren
Kombinieren Sie unabhängige Schätzungen mehrerer Personen, bevor die Gruppe spricht — Aggregation schlägt jeden einzelnen Experten.
Why it works
Gruppendiskussion neigt dazu, die Ansichten des selbstbewusstesten oder ranghöchsten Mitglieds zu verstärken und Minderheitsinformationen zu unterdrücken. Unabhängige Schätzungen vor der Diskussion zu aggregieren bewahrt Informationen, die die Diskussion sonst ausspülen würde. Der Weisheit-der-Vielen-Effekt hängt von Unabhängigkeit ab; der Mechanismus bricht in dem Moment zusammen, in dem Schätzungen in Anwesenheit der Ansichten anderer abgegeben werden.
How to do it
- Lassen Sie jedes Teammitglied unabhängig eine Wahrscheinlichkeitsschätzung aufschreiben, bevor die Gruppendiskussion beginnt.
- Sammeln und mitteln Sie die Schätzungen (oder verwenden Sie ein einfaches Aggregat wie den Median).
- Präsentieren Sie das Aggregat zusammen mit den Einzelschätzungen, dann öffnen Sie die Diskussion.
- Erlauben Sie nach der Diskussion individuelle Aktualisierungen, aber aggregieren Sie erneut, statt zur modalen Ansicht der Gruppe zu wechseln.
Evidenz
Der Weisheit-der-Vielen-Effekt — dass aggregierte unabhängige Schätzungen die meisten Individuen, einschließlich Experten, übertreffen — ist gut dokumentiert (Galton, Surowiecki). Tetlocks Turnier nutzte aggregierte Teamergebnisse und fand, dass strukturierte Teams Einzelpersonen übertrafen; die Überlegenheit hing davon ab, Unabhängigkeit vor der Aggregation zu bewahren. (observational)
Die Weisheit der Vielen erfordert echte Unabhängigkeit; wenn Menschen sich an einem gemeinsamen Prior oder einem sichtbaren Anker verankern, bevor sie ihre Schätzungen abgeben, trägt die Aggregation wenig zur besten Einzelmeinung bei.
Quellen
- Galton (1907), "Vox Populi," Nature
- Tetlock & Gardner (2015), Superforecasting, on team performance
Häufiger Fehler
Eine Gruppendiskussion durchzuführen und dann die Schätzungen nach der Diskussion zu mitteln — zu diesem Zeitpunkt ist die Unabhängigkeit bereits verloren, und das „Aggregat“ spiegelt die überzeugendste Stimme wider, nicht vielfältige Perspektiven.
Übe das mit IX Coach
More practices for Superforecasting
- In expliziten Wahrscheinlichkeiten denken und kommunizieren
Ersetzen Sie vage Sprache („wahrscheinlich“, „vermutlich“) durch numerische Wahrscheinlichkeiten.
- Überzeugungen häufig und in kleinen Schritten aktualisieren
Wenn neue Evidenz eintrifft, passen Sie Ihre Wahrscheinlichkeitsschätzung an — auch wenn die Änderung klein ist.
- Aktiv nach widerlegender Evidenz suchen
Suchen Sie bewusst nach Evidenz, dass Ihre aktuelle Überzeugung falsch ist.
- Komplexe Fragen in Unterfragen zerlegen
Zerlegen Sie eine schwierige Vorhersagefrage in kleinere, einschätzbare Teile und aggregieren Sie sie.
- Vorhersagegenauigkeit als Fähigkeit behandeln, die sich mit Übung verbessert
Vorhersagefehler als Leistungsfeedback nehmen, nicht als Beweis, dass Vorhersagen sinnlos ist.