群強化学習法－Particle Swarm Optimizationの強化学習への応用

摘要

本稿ではPSOの強化学習問題への応用として，著者らが提案しているPSOに基づく群強化学習法を説明、した．群強化学習法は複数のエージェントを用意して，各エージェントが通常の強化学習法で個別に学習を行うとともに，エージェント間での情報交換を通しでも学習を進めていく方法であり，PSOに基づく群強化学習法はこの情報交換にPSOの更新式を利用する方法である．また，エージェント間の情報交換法には他にもさまざまな方法が考えられ，他の方法に基づく群強化学習法についてもいくつか紹介した．最適化の分野では，多点探索メタヒューリスティクスが多くの研究者によって研究され，発展を遂げている．強化学習においても複数のエージェントを用いる学習法が発展することを期待する．