新規事例による転移テスト
本物の学習を確認するため、見たことのない事例で知覚スキルを定期的にテストする。
Why it works
知覚学習が本物であるのは、それが新規の事例に転移するとき――カテゴリー構造を抽出しており、特定の事例を暗記しているのではないとき――である。トレーニング中に一度も見せられなかった保留事例でテストすることが唯一信頼できる確認方法である。これがなければ、学習者はトレーニング内での正答率が高いまま蓄積していく一方で、実際の識別力は現場では再現されない暗記した細部に依存している可能性がある。
How to do it
- 事例セットの20%をトレーニング前に取っておき、練習中には一度も見せない。
- トレーニングが基準(例:85%の正確さ)に達したら、保留したセットで冷たいまま(準備なしに)テストする。
- 保留セットの正確さがトレーニング時の正確さを10%以上下回るなら、汎化ではなく暗記していることになる。
- より多様な事例を加えて、このサイクルを繰り返す。
エビデンス
転移テストは、本物の知覚学習の基準として、Kellmanの知覚学習モジュール研究において方法論的に標準的なものである。転移テストを省いた研究は、馴染みと識別を混同することで学習を体系的に過大評価する。 (mechanistic)
10%の差の閾値は経験則であり、実証的に導出された基準ではない。
出典
- Kellman & Garrigan (2009), "Perceptual learning and human expertise," Physics of Life Reviews
よくある間違い
見た事例だけで進捗を測ること――これは自信を水増しし、実世界の事例がトレーニングセットと異なるとき学習者を準備不足のままにしてしまう。