Test di trasferimento con istanze nuove

Testa periodicamente la tua abilità percettiva su esempi mai visti prima per verificare l'apprendimento genuino.

Why it works

L'apprendimento percettivo è genuino quando si trasferisce a istanze nuove — ha estratto la struttura della categoria, non memorizzato esempi specifici. Testare su esempi trattenuti che non sono mai stati mostrati durante l'allenamento è l'unico controllo affidabile. Senza questo, un discente può accumulare alta accuratezza durante l'allenamento mentre la sua discriminazione effettiva dipende da dettagli memorizzati che non ricorreranno sul campo.

How to do it

1. Trattieni il 20% del tuo set di esempi prima dell'allenamento e non mostrarlo mai durante la pratica.
2. Dopo che l'allenamento raggiunge un criterio (es. 85% di accuratezza), testa sul set trattenuto a freddo.
3. Se l'accuratezza sul set trattenuto è indietro rispetto all'accuratezza durante l'allenamento di più del 10%, hai memorizzato invece di generalizzare.
4. Aggiungi esempi più variati e ripeti il ciclo.

Prove scientifiche

Il test di trasferimento è metodologicamente standard nella ricerca PLM di Kellman come criterio per l'apprendimento percettivo genuino. Gli studi che omettono i test di trasferimento sovrastimano sistematicamente l'apprendimento confondendo familiarità con discriminazione. (mechanistic)

La soglia del gap del 10% è un'euristica pratica, non uno standard derivato empiricamente.

Fonti

• Kellman & Garrigan (2009), "Perceptual learning and human expertise," Physics of Life Reviews

Errore comune

Misurare il progresso solo su esempi visti, il che gonfia la fiducia e lascia il discente impreparato quando le istanze del mondo reale differiscono dal loro set di allenamento.