頭部動作と音声に基づく身体引き込みキャラクタ重畳合成型ビデオチャットシステムの開発

摘要

対面コミュニケーションでは，音声に対するうなずきや身振り·手振りなどが相互に同調して，対話者同士が互いに引き込み合うことで円滑にコミュニケーションを行っている．遠隔コミュニケーションでも，対面コミュニケーションのように映像対話における相手とのインタラクションが把握できれば，豊かなコミュニケーションが期待できる．著者らは，身体的リズムの引き込みに着目して，発話音声からCGキャラクタの豊かなコミュニケーション動作を自動生成する音声駆動型身体引き込みキャラクタInterActor を開発し，その有効性を示している．本研究では，InterActorの機能に加えて自己の代役となる対話者自身の頭部動作を連動させたCG キャラクタを相手映像に重畳合成するE-VChat ( Enhanced VideoChat ) システムを開発している．さらに，インタラクションモードの異なる3つのプロトタイプシステムを開発し，その有効性を示している．