前景の運動と背景の外観を併用した複数映像からの共通動作区間の検出

摘要

インターネット上の映像には通常，その内容を表した「タグ」が付与されるが，タグ付き映像全体が「タグ」の内容に対応している場合は少ない．そのため，複数のタグ付き映像からその「タグ」の内容に対応した区間や領域を検出する研究が進められている．本研究ではその中でも人の動作を表す「動作タグ」が付与された映像を対象とする．人の動作には限られた場所や場面でのみ行われるものも存在すると推察されるため，人の動きの特徴に加え，周辺の物体や背景の特徴も有効であると考えられる．そこで，本研究では人の動きの特徴と背景の外観に関する特徴（背景特徴）を統合的に利用する共通動作区間検出手法を提案する．実世界の環境に近い映像データセットを用いた実験の結果，背景特徴を取り入れることで共通動作区間の検出精度が向上することを確認した．