発話予測を利用した手話対話システムに関する検討

摘要

In this study, we propose a dialogue system based on utterance prediction in order to support communications by sign language. Conventional methods of sign language recognition have performed a word recognition based on gesture components. However, the recognition accuracy decreases when the number of recognition candidates increases. We can predict next utterances according to the scene in an actual dialogue. The proposed method is able to decrease the recognition candidates by performing a sentence recognition using the utterance prediction. We conducted recognition experiments by assuming scenes in the hospital. As a result, a sentence recognition accuracy by the conventional method was 7.9% and the recognition accuracy of 83.8% was obtained by the proposed method.%本研究では、手話によるコミュニケーション支援を目指して、発話予測に基づく手話対話システムを提案する。従来の手話認識では、動作要素に着月した手の動きなどによる単語の認識について検討されており、認識対象が多くなると認識精度が低下してしまう。それに対して、実際に使用される場面を想定した対話を行うことで、対話場面に応じて発話を予測することができる。つまり、場面に応じて動作要素を対応付けた予測文を用意して文単位での認識を行うことで、認識対象を抑制することが可能となる．提案手法の有効性を示すため、病院での受付場面を想定した実験を行った結果、従来の動作要素による認識では7．9％の文認識率に対して、提案手法による認識では83．8％と高い文認識率を得ることができた。