歌唱時の身振りと音楽との関連性に基づく音楽からの動作生成

摘要

本論文では，歌唱時の身振りと音楽との関連性を教示し，その教示に基づき音楽から動作を生成する手法を提案する．歌唱時のビデオ映像からモーションキャプチャにより動作を測定する．この一連の動作データを動作と音のビートが一致する時点で基本動作列に分節化する．基本動作と同期している音楽フレーズを対応づけ，データべースに登録しておく．動作の生成では，与えられた音楽に最も似た音楽フレーズをデータベースから選択し，この音楽フレーズに対応づけられた基本動作を取り出す．生成された動作は動作主の特徴を継承していることが確かめられた．