変動比率強化を使って習慣を持続的にする
行動が確立されたら、消去に抵抗するよう予測不可能な報酬スケジュールに切り替える。
Why it works
変動比率(VR)スケジュールは予測不可能な回数の反応の後に行動を報酬する——これがギャンブルの定義的な特徴だ。VRはあらゆる強化スケジュールの中で最も高い反応率と最も遅い消去を生む。なぜなら、報酬を得られなかった各反応が、報酬を得られる最後の反応になるかもしれないからだ。動物や人間は、次の反応が当たりかもしれないため、いつやめるべきか分からない。これによりVRの習慣は非常に持続的になるが、アプリの設計者やカジノに利用されうることも意味する。
How to do it
- まず連続または固定スケジュールで行動を確立する——それが信頼できるようになるまで発生のたびに報酬を与える。
- 行動が一貫したら、時々サプライズの報酬を導入する:自発的なごほうび、予期しないチェックイン、ランダムなお祝い。
- 報酬を単に頻度が低いだけでなく、本当に予測不可能なものに保つ——週に一度の予定された報酬は固定間隔であり、変動ではない。
- 維持したい行動にのみ変動強化を使い、消去したい行動には使わない。
エビデンス
変動比率スケジュールが反応率と消去への抵抗に与える効果は、スキナーの最も再現された知見の一つであり、種や行動タイプを超えて実証されている。 (rct)
基礎的なデータのほとんどは動物実験(ハト、ラット)に由来する。複雑な人間の行動を自然な環境で移転するには注意が必要である。社会的・認知的な文脈がスケジュール効果を調節する。
出典
- Ferster & Skinner (1957), "Schedules of Reinforcement" — foundational experimental data
- Ferster, C. B., & Skinner, B. F. (1957). Schedules of Reinforcement. New York: Appleton-Century-Crofts.
よくある間違い
行動が確立される前に変動強化を適用してしまうこと——獲得段階での変動性は学習を遅らせる。それは維持のためのツールであって、獲得のためのツールではない。
IX Coach でこれを実践する
More practices for オペラント条件づけと強化スケジュール
- 目標行動のための本物の正の強化子を設計する
その行動を繰り返す可能性を実際に高めるものを特定する——効くべきものではなく、実際に効くもの。
- 連続的な接近法を通じて複雑な行動を形成する
完全な行動が現れるのを待つのではなく、目標行動に段階的に近づく近似を強化する。
- 強化を取り除くことで望まない行動を消去する
その行動を維持している強化子を一貫して差し控えることで、行動を止める——罰することによってではない。
- 分化強化を使って望ましい行動を増やしながら望まない行動を減らす
望む行動を強化しながら、望まない行動への強化を——同時に——差し控える。
- 結果を即座にして報酬の遅延問題を橋渡しする
行動の後、結果が時間的に近ければ近いほど、その行動への効果は強くなる。
- 先行刺激を修正して、動機に依存する前に行動を引き起こす
行動に先立つ手がかりを変えることで、それが起きる可能性を高くしたり低くしたりする。