Vorhersagegenauigkeit als Fähigkeit behandeln, die sich mit Übung verbessert
Vorhersagefehler als Leistungsfeedback nehmen, nicht als Beweis, dass Vorhersagen sinnlos ist.
Why it works
Superforecaster behandeln ihre Bewertungsergebnisse als Diagnosen, nicht als Urteile. Wenn sie in einem Bereich schlecht kalibriert sind, untersuchen sie warum — war die Referenzklasse falsch, war die Evidenzgewichtung daneben, gab es eine strukturelle Abhängigkeit, die sie übersehen haben? Diese Feedback-Orientierung ist derselbe Mechanismus, der bewusstes Üben von bloßer Erfahrung unterscheidet. Ohne ihn erzeugt Wiederholung Zuversicht ohne Genauigkeit.
How to do it
- Bewerten Sie nach dem Eintreten einer Vorhersage: Vergleichen Sie Ihre angegebene Wahrscheinlichkeit mit dem binären Ergebnis.
- Führen Sie bei Vorhersagen, bei denen Sie erheblich danebenlagen, eine kurze Nachbesprechung durch: Welcher stärkste Faktor wurde unterschätzt?
- Verfolgen Sie Fehlermuster: Überschätzen Sie in bestimmten Bereichen, unterschätzen Sie in anderen?
- Setzen Sie ein Lernziel für Kalibrierung (nicht nur Genauigkeit) — „ich will, dass meine 70%-Vorhersagen 70 % der Zeit eintreffen“.
Evidenz
Tetlocks Forschung fand, dass Vorhersager, die bewusst aus Bewertungen lernten — besonders die, die in Teams mit Feedback übten — die größte Verbesserung über die Zeit zeigten. Der Wachstumsverlauf stimmt mit Forschung zu bewusstem Üben überein. (observational)
Kalibrierungsverbesserung ist langsam und kontextabhängig; große Verbesserungen zeigten sich unter Turnierbedingungen mit dichtem Feedback. Reale Entscheidungsfindung mit spärlichem Feedback erzeugt langsamere Fortschritte.
Quellen
- Tetlock & Gardner (2015), Superforecasting, Chapter 10
Häufiger Fehler
Aus einem einzigen dramatischen Fehlschlag zu schließen, dass Vorhersagen unzuverlässig sind, statt den spezifischen Mechanismus des Fehlschlags zu untersuchen — ein Fehler ist ein Datenpunkt, keine Widerlegung.
Übe das mit IX Coach
More practices for Superforecasting
- In expliziten Wahrscheinlichkeiten denken und kommunizieren
Ersetzen Sie vage Sprache („wahrscheinlich“, „vermutlich“) durch numerische Wahrscheinlichkeiten.
- Überzeugungen häufig und in kleinen Schritten aktualisieren
Wenn neue Evidenz eintrifft, passen Sie Ihre Wahrscheinlichkeitsschätzung an — auch wenn die Änderung klein ist.
- Aktiv nach widerlegender Evidenz suchen
Suchen Sie bewusst nach Evidenz, dass Ihre aktuelle Überzeugung falsch ist.
- Komplexe Fragen in Unterfragen zerlegen
Zerlegen Sie eine schwierige Vorhersagefrage in kleinere, einschätzbare Teile und aggregieren Sie sie.
- Strukturiertes Team-Forecasting nutzen, um vielfältige Sichtweisen zu aggregieren
Kombinieren Sie unabhängige Schätzungen mehrerer Personen, bevor die Gruppe spricht — Aggregation schlägt jeden einzelnen Experten.