スケッチ表現を用いた映像検索システム

摘要

本論文では，手描きスケッチをクエリとして利用した映像検索システムの提案を行う．近年，デジタルビデオカメラの普及や映像投稿サイトの発達により，大量の映像が蓄積され，様々な映像を視聴することが可能となった．しかし同時に，好みの映像を視聴するためにはそれら大量の映像群から所望の映像を検索する必要が生まれた．本論文で提案する手描きスケッチによる映像検索を使用することで，映像検索におけるクエリ設定の困難さを解消し，ユーザの検索作業を容易にすると考えられる．提案手法では，オプティカルフローからロバスト推定によりカメラワークによる背景の動きを推定し，それとは異なる動きをもつ移動物体候補領域を推定する．さらに，前フレーム移動物体領域と推定した候補領域とでテンプレートマッチングを行うことで，移動物体領域推定の精度を向上させる．抽出した領域の情報を基に，エッジ形状と動き，2つの特徴量を求めて映像の特徴量とする．検索を行う際には，ユーザは線画と矢印を描画することで映像を1枚のスケッチとして表現し，クエリを作成する．最終的に，YouTubeから収集した映像群に対して提案システムを適用することで検索実験を行い，有効性を示す．