報酬を確実に予測する手がかりを設計する

報酬を予測する手がかりは、やがて報酬そのものと同じドーパミン反応を引き起こす。

Why it works

シュルツは、手がかりが多くの試行にわたって確実に報酬を予測すると、ドーパミン活動が報酬の瞬間から手がかりへとシフトすることを示した。手がかりそのものがモチベーションを生むようになる——これがジムのプレイリストを聞くと運動への衝動を感じたり、特定のコーヒーマグが執筆セッションを魅力的に感じさせたりする理由だ。手がかりは、行動が始まる前からモチベーションを呼び込む。

How to do it

1. 目標とする行動のためだけに使う手がかり(音、匂い、場所、物)を選ぶ。
2. 少なくとも数週間、それを本物の報酬と一貫してペアにする。
3. その排他性を保つ——手がかりが他の文脈で現れると、予測が薄まってしまう。

エビデンス

手がかりからドーパミンへの転移は、シュルツの記録研究からの基礎的な発見であり、動物学習でよく再現されており、条件づけられた「欲求」に関する人間の画像研究とも整合的だ。 (observational)

手がかりの転移には時間をかけた一貫したペアリングが必要だ——一度や二度のセッションでは起こらない。手がかり反応の強度は、ペアリングの信頼性に比例する。

出典

• Schultz, Dayan & Montague (1997), A neural substrate of prediction and reward, Science

よくある間違い

手がかりをあまりに多くの文脈で使いすぎること——報酬なしでその文脈が現れれば現れるほど、それがコード化する予測は弱まる。