Konfidenzintervall-Schätzung üben
Schätze Bereiche für faktische Größen und prüfe, wie oft der wahre Wert innerhalb deines Bereichs liegt.
Why it works
Ein 90-%-Konfidenzintervall sollte den wahren Wert 90 % der Zeit enthalten. Die 90-%-Intervalle der meisten Menschen sind viel zu eng — reale Werte fallen 30–50 % der Zeit außerhalb, was schwere Selbstüberschätzung in der Präzision widerspiegelt.
How to do it
- Mach ein Kalibrierungsquiz: Gib für jede Faktenfrage einen Bereich an, in dem du zu 90 % sicher bist, dass er die wahre Antwort enthält.
- Bewerte nach jedem Fragenblock, wie oft der wahre Wert innerhalb deines Bereichs lag.
- Enthalten deine 90-%-Intervalle die richtige Antwort weniger als 90 % der Zeit, erweitere deine Bereiche in der nächsten Runde.
- Wiederhole wöchentlich, bis deine 90-%-Intervalle wirklich 90 % der Zeit treffen — das ist Kalibrierung.
Evidenz
Mehrere Studien zu Wahrscheinlichkeitstraining fanden, dass Konfidenzintervall-Übungen mit Feedback Selbstüberschätzung in Kalibrierungstests signifikant reduzieren, mit Effekten, die über Wochen anhalten. (observational)
Kalibrierungsverbesserungen bei Trainingsaufgaben übertragen sich nicht vollständig auf neue Bereiche; Kalibrierung ist teilweise bereichsspezifisch und erfordert Feedback in jedem Bereich, um zuverlässig zu sein.
Quellen
- Lichtenstein, Fischhoff & Phillips (1982), "Calibration of subjective probabilities," in Judgment Under Uncertainty: Heuristics and Biases
- Tetlock & Gardner (2015), Superforecasting — calibration training modules
- Alpert, M., & Raiffa, H. (1982). A progress report on the training of probability assessors. In D. Kahneman, P. Slovic, & A. Tversky (Eds.), Judgment Under Uncertainty: Heuristics and Biases (pp. 294–305). Cambridge University Press.
- Lichtenstein, S., Fischhoff, B., & Phillips, L. D. (1982). Calibration of probabilities: The state of the art to 1980. In D. Kahneman, P. Slovic, & A. Tversky (Eds.), Judgment Under Uncertainty: Heuristics and Biases (pp. 306–334). Cambridge University Press.
Häufiger Fehler
Alle Bereiche einheitlich erweitern statt zu diskriminieren lernen — eine gut kalibrierte Person hat enge Bereiche, wenn sie wirklich etwas weiß, und weite, wenn nicht, nicht einheitlich weite Bereiche.
Übe das mit IX Coach
More practices for Kalibrierungstraining
- Ein bewertetes Vorhersageprotokoll führen
Zeichne Vorhersagen mit expliziten Wahrscheinlichkeiten auf und bewerte sie, wenn sie sich klären.
- Die konkreten Bereiche identifizieren, in denen du am meisten überkonfident bist
Kalibrierung ist bereichsspezifisch — finde, wo dein Vertrauen deine Genauigkeit am stärksten übersteigt.
- Verankere dein Vertrauensniveau an Basisraten, nicht am Bauchgefühl
Beginne deine Vertrauensschätzung bei der historischen Trefferquote für diese Art von Vorhersage, nicht bei deinem Gefühl.
- Auflösungskriterien vor der Vorhersage festlegen
Definiere genau, was als „Ich hatte recht" zählt, bevor das Ergebnis eintritt.
- Kalibrierungswiederholungen mit risikoarmem Trivia und Almanach-Fragen aufbauen
Nutze Faktenfragen als Übungsfeld für Kalibrierung — Ergebnisse klären sich sofort, und der Einsatz ist null.
- Unsicherheit (quantifizierbar) von Unwissenheit (nicht quantifizierbar) unterscheiden
Wisse, wann du eine Wahrscheinlichkeit zuweisen kannst und wann die Situation so neu ist, dass eine Zahl erfunden wäre.