音声と同期した唇アニメーションの生成と評価

摘要

唇の動きが音声の聴き取りに寄与すると言われることから、唇の口形素（言語音発声時の典型的な形）の補間方法を検討し、音声と同期した唇アニメーションを生成するシステムを構成した。 まず。 形素間の補間を線形関数とsigmoid関数で行い、視覚による選好試験を行った。 その結果、Sigmoid関数の方がより自然な動きを表現することが分かった。 次に、雑音下の音声の正聴率に対する唇アニメーションの効果を調べるため、音声の聴取実験を行った。 その結果、特に雑音レベルの高い場合に、唇アニメーションを併用したとき正聴率が高くなることが示され、アニメーションであっても、音声の正聴率向上に効果があることが分かった。