how to evaluate evidence quality

Apply the same evidence standard regardless of whether you like the conclusion — Grade the evidence before you know which conclusion it supports. Evaluate evidence by its likelihood ratio, not by how it makes you feel — Ask how much more likely this evidence would be if you’re right versus if you’re wrong. Probe for evidence behind claims — Ask "what evidence supports that?" before accepting any factual or evaluative claim. Structure the analysis before searching for evidence — Define what you’re looking for and what would count as evidence before starting your search. State your prior probability before seeing the evidence — Before looking at any data, commit to a numerical estimate of how likely something is. Update beliefs incrementally, not all at once — New evidence should shift your probability somewhat — rarely from 5% to 95% in one step. Identify which features are actually diagnostic — Separate features that genuinely differentiate categories from ones that just complete the picture. Specify what would falsify your belief before you look at evidence — Write down what evidence would prove you wrong before you go looking. Rate the strength of each logical link — Assign a confidence to each "supports" or "rebuts" link, not just to the conclusion. Catch yourself working backward from a conclusion — Notice when the conclusion appeared before the evidence — and treat that as a red flag.

Pratiques de coaching pour Comment évaluer la qualité des preuves

Décrivez presque n'importe quoi sur lequel vous travaillez et IX Coach trouve les pratiques dont l'adéquation avec la réalité est la plus proche. Pour Comment évaluer la qualité des preuves, voici les correspondances les plus solides dans la bibliothèque de pratiques actuelle.

Pratiques qui peuvent aider

Appliquer la même exigence de preuve, que la conclusion vous plaise ou non
Évaluez la preuve avant de savoir quelle conclusion elle soutient.
Le Raisonnement motivé
Évaluez la preuve par son rapport de vraisemblance, pas par ce qu'elle vous fait ressentir
Demandez-vous à quel point cette preuve serait plus probable si vous avez raison plutôt que si vous avez tort.
La pensée bayésienne : comment mettre à jour ses croyances rationnellement
Sonder les preuves derrière les affirmations
Demandez « quelles preuves soutiennent cela ? » avant d'accepter toute affirmation factuelle ou évaluative.
Le questionnement socratique
Structurer l'analyse avant de chercher des preuves
Définissez ce que vous cherchez et ce qui compterait comme preuve avant de commencer votre recherche.
Le biais de confirmation : voir ce que l'on s'attend à voir
Énoncez votre probabilité préalable avant de voir la preuve
Avant de regarder toute donnée, engagez-vous sur une estimation numérique de la probabilité de quelque chose.
La pensée bayésienne : comment mettre à jour ses croyances rationnellement
Mettez à jour vos croyances progressivement, pas d'un coup
Une nouvelle preuve devrait déplacer votre probabilité quelque peu — rarement de 5 % à 95 % en une étape.
La pensée bayésienne : comment mettre à jour ses croyances rationnellement
Identifier quelles caractéristiques sont réellement diagnostiques
Séparez les caractéristiques qui différencient réellement les catégories de celles qui complètent seulement le tableau.
L'heuristique de représentativité — juger par ressemblance
Spécifier ce qui falsifierait votre croyance avant de regarder les preuves
Écrivez quelle preuve prouverait que vous avez tort avant de partir à sa recherche.
La pensée par falsification
Évaluer la force de chaque lien logique
Attribuez une confiance à chaque lien "soutient" ou "réfute", pas seulement à la conclusion.
La cartographie d'arguments
Se surprendre à raisonner à rebours à partir d'une conclusion
Remarquez quand la conclusion est apparue avant les preuves — et traitez cela comme un signal d'alerte.
Le Raisonnement motivé

Préoccupations connexes

Décrivez votre situation avec vos propres mots pour rechercher dans la bibliothèque complète de pratiques.

Pratiquez cela avec IX Coach

Essayer cette pratique