How does Notice which data you selected — and which you ignored work?

Attention is finite, and selection is always happening, usually in the direction of information that confirms existing beliefs. The data you selected feels like "the data" — the rest does not feel excluded, it feels absent. Deliberately searching for the data you did not attend to is the countermeasure to selection bias operating at the bottom of the ladder.

What is the most common mistake with Notice which data you selected — and which you ignored?

Selecting data to support the opposite conclusion as the "corrective" — the goal is to find data you genuinely weighted too low, not to perform the opposite bias.

Fíjate en qué datos seleccionaste y cuáles ignoraste

Tus conclusiones se construyen sobre una muestra de los datos disponibles: pregúntate qué dejó fuera esa muestra.

Why it works

La atención es finita y la selección ocurre siempre, normalmente en dirección a la información que confirma las creencias existentes. Los datos que seleccionaste se sienten como «los datos»; el resto no se siente excluido, se siente ausente. Buscar deliberadamente los datos a los que no atendiste es la contramedida frente al sesgo de selección que opera en la base de la escalera.

How to do it

Después de llegar a una conclusión, pregúntate: ¿en qué me fijé y a qué no estaba atendiendo?
Busca los datos que habría seleccionado alguien que llegara a la conclusión contraria.
Pregunta a alguien que conozca la misma situación si dio el mismo peso que tú a los mismos hechos.
Trata cualquier dato que sientas el impulso de descartar como algo que merece un examen más cuidadoso.

Evidencia

La atención selectiva y el sesgo de confirmación están entre los hallazgos más replicados de la psicología cognitiva. Las personas atienden y recuerdan la información coherente con sus creencias previas de forma más fiable que la información incoherente. (observational)

Ser consciente del sesgo de confirmación solo ofrece una protección parcial; el proceso de selección opera en parte por debajo de la consciencia y no es del todo corregible solo con atención.

Sources

Nickerson (1998), "Confirmation Bias: A Ubiquitous Phenomenon in Many Guises", Review of General Psychology

Common mistake

Seleccionar datos que respalden la conclusión opuesta como «corrección»: el objetivo es encontrar datos a los que de verdad diste poco peso, no representar el sesgo contrario.

Practica esto con IX Coach

Start with IX Coach

7 days free, then $40/month (~$1.30/day).