リファレンスにノイズが乗った場合のノードパータベーション学習

摘要

ニューラルネットワークの学習法の一つであるノードパータベーション学習は，actor-critic型の強化学習の枠組みに適用できるため，実際の脳の中で使われているのではないかという期待がもたれている．ノードパータベーション学習は，摂動としてのノイズが与えられたもとでの出力の評価値とリファレンスとの差に基づいて結合加重を更新する学習法である．これまでノードパータベーション学習では，リファレンスとしてノイズが与えられない場合の評価値が用いられてきた．しかしながら，一般に神経活動には常にノイズが乗っているため，ノイズのないリファレンスが得られることは稀であると考えられる．本研究では，リファレンスにノイズが乗った場合の学習則を提案し，線形パーセプトロンを用いてその性能を解析的に評価した．その結果，リファレンスにノイズが乗った場合でも学習は成功し，さらにノイズがない場合と比べ残留誤差が出力素子数の分だけ減少することを示す．