Estructura el análisis antes de buscar evidencia

Define qué estás buscando y qué contaría como evidencia antes de empezar tu búsqueda.

Why it works

El sesgo de confirmación opera con fuerza en la búsqueda: el encuadre de una consulta de búsqueda, las bases de datos elegidas, el primer resultado clicado: todos están moldeados por la hipótesis previa. Especificar de antemano qué evidencia contaría a favor y en contra de la hipótesis, y qué fuentes serían autorizadas, reduce la susceptibilidad del proceso de búsqueda al filtrado motivado. Convierte una exploración abierta en una prueba preregistrada.

How to do it

1. Antes de investigar cualquier cuestión, escribe: "Consideraré mi hipótesis confirmada si encuentro X; la consideraré desconfirmada si encuentro Y."
2. Enumera las tres o cuatro fuentes que serían más creíbles, no las más propensas a confirmar.
3. Comprométete a reportar el resultado de la búsqueda estructurada, no solo los hallazgos con los que te topaste.
4. Haz la búsqueda como la diseñaste, y luego evalúa.

Evidencia

El preregistro en la ciencia —comprometerse con las hipótesis y los planes de análisis antes de recopilar datos— reduce de forma fiable la tasa de falsos positivos, demostrando que estructurar antes de buscar es una intervención eficaz contra el sesgo a nivel institucional. (observational)

El preregistro funciona en estudios científicos con resultados claros; la búsqueda informal de evidencia cotidiana es más difícil de preregistrar con el mismo rigor.

Sources

• Nosek et al. (2018), the preregistration revolution, PNAS

Common mistake

Especificar la hipótesis después de empezar a buscar, cuando los resultados de la búsqueda ya han moldeado lo que parece "importante": una forma sutil de HARKing (formular hipótesis después de conocer los resultados).