読唇に有効な顔モデルの検討

摘要

読唇に関する研究は随所で取り組まれているが，読唇に用いる顔モデルに関する検討はなされていない．本論文では，顔部位の組み合わせに基づく顔モデルおよび口唇輪郭や口唇特徴点を変更した20個の顔モデルを構築する．モデル形状のみを変更し，その他のアルゴリズムを変更せずに認識実験を実施し，モデル形状と認識精度を解析することにより，読唇に有効な顔モデルを検討する．モデル構築にはActive Appearance Modelを利用する．認識実験には英数字10単語の発話シーンが含まれているCUAVEデータベースを利用した．その結果，口唇以外の顔部位を含めず，口唇のみを用いた顔モデルが最も高い認識精度を得られることが判明した．また口唇に関しては外側唇輪郭と内側唇輪郭の両方をモデルに含め，口唇特徴点が多いモデルが高い認識率を得られやすい知見を得た．