日本語発話時の特徴的口形のコード化と口形変化情報表示方法の提案

摘要

In this paper, we propose a lip-reading method based on lip-reading skill holders. When they do lip-reading, they pay attention to the changes in mouth shape of a speaker. In recent years, some research into lip-reading using information technology has been pursued. There are some research based on the changes in mouth shape. The researchers analyze all data of the size of mouth shapes during utterance, whereas lip-reading skill holders look at the distinctive mouth shapes. We discovered that it is able to do lip-reading using the distinctive mouth shapes. To build the technique into a lip-reading system, we propose an expression method of the distinctive mouth shapes which can be processed with computer. And, we acquire knowledge about the relation between Japanese articulation and mouth shapes. We also define the method to express the order of the distinctive mouth shapes which are formed by a speaker.%本研究では，機械読唇を実現するにあたり，読唇者の読rn唇技法に着目した。読唇者は読唇の際，口形に注目しておrnり，発話中に形成される特徴的な口形の出現順序から話をrn読み取っていた。従来の研究でも口形の動きに着目していrnるものもあるが，これらの研究が発話期間の一連の口形のrn動きを対象としていたのに対し，読唇者は発話期間に断続rn的に形成される特徴的な口形を対象としていた。そこで，機rn械読唇においても口形を利用することで読唇を実現するこrnとができると考えられる。