Identifique os domínios específicos onde você tem mais excesso de confiança

A calibração é específica de domínio — encontre onde sua confiança mais excede sua precisão.

Why it works

As pessoas não têm excesso de confiança de forma uniforme; costumam ter mais excesso de confiança em domínios onde têm experiência mas pouco feedback, onde o domínio usa jargão que entendem, ou onde fizeram compromissos públicos. Diagnosticar quais domínios produzem sua pior calibração foca o esforço de correção de viés onde ele terá o maior retorno.

How to do it

1. Revise seu registro de previsões classificado por domínio (trabalho, relacionamentos, autopredições, apostas de mercado, etc.).
2. Para cada domínio, calcule a lacuna entre a confiança média declarada e a taxa de acerto real.
3. Classifique os domínios por descalibração: a maior lacuna recebe mais atenção corretiva.
4. Para domínios de alta descalibração, construa uma regra: "Desconte minha primeira estimativa neste domínio em X pontos percentuais."

Evidência

A pesquisa sobre excesso de confiança descobre que ele é mais forte em domínios familiares e complexos com feedback atrasado (previsão financeira, diagnóstico médico) e mais fraco em áreas com feedback imediato e claro (previsão do tempo). A correção de viés específica de domínio está implícita nessa estrutura. A análise de Murphy e Winkler sobre meteorologistas profissionais é o caso canônico da extremidade bem calibrada desse espectro — feedback diário e pontuado produziu previsões de probabilidade que acompanhavam de perto as frequências observadas — ancorando por que o diagnóstico deve ser feito por domínio. (observational)

Identificar domínios de excesso de confiança exige rastreamento honesto de resultados; sem isso, os domínios que parecem confortáveis são exatamente os que não serão examinados.

Fontes

• Lichtenstein & Fischhoff (1977), "Do those who know more also know more about how much they know?", Organizational Behavior and Human Performance
• Lichtenstein, S., & Fischhoff, B. (1977). Do those who know more also know more about how much they know? Organizational Behavior and Human Performance, 20(2), 159–183.
• Murphy, A. H., & Winkler, R. L. (1977). Reliability of subjective probability forecasts of precipitation and temperature. Journal of the Royal Statistical Society: Series C (Applied Statistics), 26(1), 41–47.

Erro comum

Assumir que expertise em um domínio significa boa calibração — a expertise de domínio prevê precisão em recordação factual, mas não está correlacionada com calibração metacognitiva em muitos estudos.