生体の科学64巻4号

2013年08月発行

特集 予測と意思決定の神経科学

報酬予測を作る大脳基底核回路の形態学的解明

著者： 藤山文乃¹

所属機関： ¹同志社大学大学院 脳科学研究科 神経回路形態部門

ページ範囲：P.309 - P.313

　1997年のSchultzらによるサルの電気生理の仕事から，中脳にあるドーパミンニューロンが報酬の予測からのずれ（報酬予測誤差）に応答していることが知られるようになった^1）。また，Wickensらはドーパミン投射を受ける線条体ニューロンにおいて，大脳皮質からの入力と黒質からのドーパミン入力に依存するシナプス可塑性が起こることを報告した^2）。これらの報告から線条体シナプスは報酬予測誤差に依存した可塑性を引き起こし，大脳基底核の回路を使って時々刻々更新される強化学習を行っているという仮説が提案された^3-5）。

　この強化学習における線条体内の役割分担を提唱したのがBartoらで，彼らは線条体のストリオソーム・マトリックス構造に着目し，actor-critic仮説を提唱した^4）。この説によると線条体のマトリックスは基底核出力部位（淡蒼球内節/黒質網様部）を通じて行動選択を行い（actor），ストリオソームは報酬予測を行い（critic），その投射先のドーパミンニューロンで報酬予測誤差が計算され，そのドーパミンニューロンがさらに線条体へ投射することによってactor-critic学習が行われる。

参考文献

275：1593-1599, 1997

413：67-70, 2001

10：732-739, 2000

4）Barto AG：Adaptive Critics and the Basal Ganglia. Models of information processing in the basal ganglia, MIT Press, pp215-232, 1995

16：1936-1947, 1996

57：93-102, 1990

20：584-589, 2009

48：355-360, 2004

374：578-592, 1996

311：134-167, 1991

24：2813-2824, 2006

7：3915-3934, 1987

29：444-453, 2009

14）Matsuda W：Imaging of Dopaminergic Neurons and the Implications for Parkinson's Disease. Systems Biology of Parkinson's Disease, Springer, Verlag, New York, pp1-17, 2012

13：266-271, 1990

43：111-117, 2002

33：668-677, 2011

83：93-103, 2005

31：552-558, 2008