Prueba de transferencia con instancias novedosas

Prueba periódicamente tu habilidad perceptual con ejemplos que nunca has visto para verificar un aprendizaje genuino.

Why it works

El aprendizaje perceptual es genuino cuando se transfiere a instancias novedosas — ha extraído la estructura de la categoría, no memorizado ejemplos específicos. Probar con ejemplos reservados que nunca se mostraron durante el entrenamiento es la única verificación fiable. Sin esto, un aprendiz puede acumular alta precisión durante el entrenamiento mientras su discriminación real depende de detalles memorizados que no volverán a ocurrir en el campo.

How to do it

1. Reserva el 20% de tu conjunto de ejemplos antes del entrenamiento y nunca lo muestres durante la práctica.
2. Después de que el entrenamiento alcance un criterio (por ejemplo, 85% de precisión), pruébate en frío con el conjunto reservado.
3. Si la precisión con el conjunto reservado se rezaga más de un 10% respecto a la precisión de entrenamiento, has memorizado en lugar de generalizado.
4. Añade más ejemplos variados y repite el ciclo.

Evidencia

La prueba de transferencia es metodológicamente estándar en la investigación PLM de Kellman como el criterio para el aprendizaje perceptual genuino. Los estudios que omiten pruebas de transferencia sobreestiman sistemáticamente el aprendizaje al confundir familiaridad con discriminación. (mechanistic)

El umbral del 10% de brecha es una heurística práctica, no un estándar derivado empíricamente.

Fuentes

• Kellman & Garrigan (2009), "Perceptual learning and human expertise," Physics of Life Reviews

Error común

Medir el progreso solo con ejemplos vistos, lo que infla la confianza y deja al aprendiz desprevenido cuando las instancias del mundo real difieren de su conjunto de entrenamiento.