how to evaluate evidence quality

Apply the same evidence standard regardless of whether you like the conclusion — Grade the evidence before you know which conclusion it supports. Evaluate evidence by its likelihood ratio, not by how it makes you feel — Ask how much more likely this evidence would be if you’re right versus if you’re wrong. Probe for evidence behind claims — Ask "what evidence supports that?" before accepting any factual or evaluative claim. Structure the analysis before searching for evidence — Define what you’re looking for and what would count as evidence before starting your search. State your prior probability before seeing the evidence — Before looking at any data, commit to a numerical estimate of how likely something is. Update beliefs incrementally, not all at once — New evidence should shift your probability somewhat — rarely from 5% to 95% in one step. Identify which features are actually diagnostic — Separate features that genuinely differentiate categories from ones that just complete the picture. Specify what would falsify your belief before you look at evidence — Write down what evidence would prove you wrong before you go looking. Rate the strength of each logical link — Assign a confidence to each "supports" or "rebuts" link, not just to the conclusion. Catch yourself working backward from a conclusion — Notice when the conclusion appeared before the evidence — and treat that as a red flag.

Práticas de coaching para como avaliar a qualidade das evidências

Descreva quase qualquer coisa em que você esteja trabalhando e o IX Coach encontra as práticas com melhor ajuste à realidade. Para como avaliar a qualidade das evidências, estas são as correspondências mais fortes na biblioteca de práticas atual.

Práticas que podem ajudar

Aplique o mesmo padrão de evidência independentemente de você gostar da conclusão
Avalie a evidência antes de saber qual conclusão ela apoia.
Raciocínio Motivado
Avalie a evidência pela sua razão de verossimilhança, não por como ela te faz sentir
Pergunte quão mais provável essa evidência seria se você estiver certo versus se estiver errado.
Pensamento Bayesiano: Como Atualizar Crenças Racionalmente
Investigue a evidência por trás das afirmações
Pergunte "que evidência apoia isso?" antes de aceitar qualquer afirmação factual ou avaliativa.
Questionamento Socrático
Estruture a análise antes de buscar evidências
Defina o que você está procurando e o que contaria como evidência antes de iniciar sua busca.
Viés de Confirmação: Vendo o Que Você Espera Ver
Declare sua probabilidade prévia antes de ver a evidência
Antes de olhar para qualquer dado, comprometa-se com uma estimativa numérica de quão provável algo é.
Pensamento Bayesiano: Como Atualizar Crenças Racionalmente
Atualize crenças incrementalmente, não de uma vez
Nova evidência deveria deslocar sua probabilidade um tanto — raramente de 5% para 95% em um único passo.
Pensamento Bayesiano: Como Atualizar Crenças Racionalmente
Identifique quais características são realmente diagnósticas
Separe características que genuinamente diferenciam categorias das que apenas completam o quadro.
A Heurística da Representatividade — Julgar pela Semelhança
Especifique o que refutaria sua crença antes de olhar as evidências
Escreva que evidência provaria você errado antes de sair procurando.
Pensamento por Falsificação
Avalie a força de cada elo lógico
Atribua uma confiança a cada elo de "apoio" ou "refutação", não apenas à conclusão.
Mapeamento de Argumentos
Flagre-se trabalhando de trás para frente a partir de uma conclusão
Perceba quando a conclusão apareceu antes da evidência — e trate isso como um sinal de alerta.
Raciocínio Motivado

Preocupações relacionadas

Descreva sua situação com suas próprias palavras para pesquisar na biblioteca completa de práticas.

Pratique isso com IX Coach

Experimente esta prática