POMDPを利用した思考喚起型対話の制御

摘要

我々は，会話エージェントが，状況に即した適切な働きかけを通して，人間の自発的思考を喚起し，人間の会話意欲を高める思考喚起型の会話システムの実現を目指している．本稿では，思考喚起型会話システムの一例であるクイズを対象とする対話システムにおいて，POMDPを利用し不確定な情報にも適切に対処する対話システムの制御手法を提案する．不確定な情報として，ここでは，人がユーザの表情と音声からユーザが感じる難易度を判定した結果を利用する．この制御手法では，実験データから強化学習によりPOMDPの方策を作成し，その方策を使ってヒントを適切にスキップすることにより，ユーザのヒントに対する心的状態（易，ニュートラル，難）を制御する．本稿では，提案手法の有効性をシミュレーションにより評価を行った．