音声情報と画像情報の併用による商品紹介映像のセグメンテーション

摘要

本研究では，社内で製作された商品の紹介映像を対象とした，個々の商品区間へ分割するとともにrn商品名を索引として付与するシステムを提案する．本研究におけるシステムでは，商品紹介映像に含まれる音声rnを認識することにより抽出された重要単語（商品名）を用いて，映像の分割と索引の付与を行う．音声認識によrnり商品名を抽出するには，音声認識用の辞書に商品名が事前に登録されている必要がある．しかし多くの場合，rn対象としている映像にどのような商品が含まれているかということは事前には未知である．このため本研究では，rn映像中に出現するテロップ文字を認識して商品名の候補を自動的に抽出し，音声認識によって商品名を確定するrn方法を採用する．つまり本手法は，音声情報と映像情報を併用した映像分割手法であり，それぞれの情報を単独rnで用いる場合に比べて，わき出しを削減し，高い分割精度を得ることができる．