生体の科学59巻1号

2008年02月発行

特集 コンピュータと脳

脳の中のコンピュータ―小脳，大脳基底核，海馬，大脳皮質の回路と物質機構

著者： 銅谷賢治¹

所属機関： ¹沖縄科学技術大学院大学先行研究

ページ範囲：P.10 - P.19

1　コンピュータと脳

　｢コンピュータと脳｣のアナロジーはどこまで有効だろうか。今日一般的なコンピュータと脳の最大の違いは，それが外部から設計，製造，プログラムされたものか，自ら進化，発達，学習により形成されていくものかという点にある。しかし，ハードウェアとしては今日のコンピュータを使いながらも，環境の中で自律的に行動し学習するロボットやプログラムを作ろうとして，試行錯誤を重ねるうちにぶつかった問題やたどり着いた解決策は，脳の構造や機能を理解する上で有用なモデルやヒントを与えてくれる可能性がある^1,2）。

　本稿ではまず，報酬信号からの行動学習の理論的枠組みである｢強化学習^3）｣の基本的なアルゴリズムを紹介する。つぎにそこで必要とされる計算要素が，脳の中ではどのように実現されているのかという観点から，小脳，大脳基底核，海馬，大脳皮質の機能分化と統合の可能性を検討する。また，柔軟かつ確実な行動学習のために必要な制御機構について考察し，その神経修飾物質系による実現の可能性について議論する。

参考文献

1）銅谷賢治：計算神経科学への招待―脳の学習機構の理解を目指して―，サイエンス社，東京，2007

1：30-40，2007

3）Sutton RS, Barto AG：Reinforcement Learning, MIT Press, Cambridge, 1998

4）銅谷賢治：医学のあゆみ 202：175-179，2002

13：149-160, 2005

12：961-974, 1999

10：732-739, 2000

8）川人光男：脳の計算理論，産業図書，東京，1996

275：1593-1599, 1997

15：507-521, 2002

413：67-70, 2001

310：1337-1340, 2005

271：1870-1873, 1996

440：680-683, 2006

37：3327-3338, 1997

16）Doya K, Ishii S, Pouget A, Rao R：Bayesian Brain：Probabilistic Approach to Neural Coding and Learning, MIT Press, Cambridge, 2007

2：79-87, 1999

8：1491-1493, 2005

16：448-450, 1993

20）Uchibe E, Doya K：in International Conference on Simulation of Adaptive Behavior：From Animals to Animats（SAB2004）, pp287-296, MIT Press, Cambridge, 2004

11：1317-1329, 1998

22）Haruno M, Wolpert DM, Kawato M：in Advances in Neural Information Processing Systems, 11 Cohen MS（ed）, pp31-37, MIT Press, Cambridge, 1999

14：1347-1369, 2002

8：1704-1711, 2005

4：826-831, 2001

13：626-647, 2001

27）Bissmarck F, Nakahara H, Doya K, Hikosaka O：in Advances in Neural Information Processing Systems, 17, MIT Press, Cambridge, 2005

28）銅谷賢治：生物物理学とはなにか―未解決問題への挑戦，曽我部正博，郷信広（eds），共立出版，東京，2001

29）銅谷賢治：脳情報数理科学の発展，数理科学別冊：31-36，2002

15：495-506, 2002

7：887-893, 2004

32）Tanaka SC et al：Serotonin differentially regulates short-and long-term prediction of rewards in the ventral and dorsal striatum. PLoS One 2：e1333, 2007

358：593-602, 2003