Eine Verteilung prognostizieren, keine Punktschätzung

Die Prognose als Spanne wahrscheinlicher Ergebnisse darstellen, nicht als eine einzelne vorhergesagte Zahl.

Why it works

Punktschätzungen vermitteln trügerische Präzision und unterdrücken nützliche Informationen über die Varianz. Ein Projekt, das im Schnitt sechs Monate dauert, kann ein 10.-Perzentil-Ergebnis von drei Monaten und ein 90.-Perzentil-Ergebnis von achtzehn Monaten haben – eine Verteilung, die Planungsentscheidungen, Ressourcenzuteilung und Notfallbudgetierung anders beeinflussen sollte, als eine Punktschätzung es verbirgt. Verteilungen zu kommunizieren macht Unsicherheit greifbar und verbessert nachgelagerte Entscheidungen.

How to do it

1. Für jede bedeutende Prognose drei Zahlen angeben: optimistisch (10. Perzentil der Klasse), Median und pessimistisch (90. Perzentil).
2. Die Verteilung asymmetrisch gewichten, wenn die Referenzklasse rechtsschiefe Verteilungen zeigt (die meisten Projekte tun das).
3. Für den Median budgetieren und planen, aber sicherstellen, dass der Plan das 75.-Perzentil-Ergebnis übersteht.
4. Dem Druck widerstehen, die Verteilung in eine Punktzahl umzuwandeln – die Punktschätzung zerstört die planungsrelevante Information.

Evidenz

Forschung zu Kostenüberschreitungen und Terminverschiebungen findet durchgängig rechtsschiefe Verteilungen – Ergebnisse können deutlich schlechter als der Durchschnitt ausfallen, selten aber deutlich besser. Auf den Median zu planen unterversorgt bei rechtsschiefer Verteilung systematisch. Intervallprognosen sind in mehreren von Tetlock und Kollegen untersuchten Bereichen präziser und nützlicher als Punktprognosen. (observational)

Verteilungen zu kommunizieren ist sozial schwieriger – Stakeholder bevorzugen selbstsichere Punktschätzungen. Der Genauigkeitsgewinn geht mit Kommunikationskosten einher, die aktiv gemanagt werden müssen.

Quellen

• Flyvbjerg (2002), cost overrun distributions in infrastructure projects
• Tetlock & Gardner (2015), Superforecasting, Chapter 7

Häufiger Fehler

Die „optimistische“ Schätzung als Plan und die „pessimistische“ als Notfallreserve behandeln, obwohl die Referenzklasse zeigt, dass das pessimistische Ergebnis der typische Fall ist, nicht der Ausnahmefall.