ニュース文と画像内容の一致性を考慮した複数ニュース映像の要約

摘要

本報告では，ニュース文と画像内容が一致する要約映像の作成手法を提案する．大量のニュース映像を資料として活用する際，あるトピックに関する映像を全て閲覧するには時間を要するという問題を解決するために，ニュース映像の自動要約技術を開発する．従来手法では，ニュース映像の文字放送字幕（CC：Closed-Caption）を用いた映像要約がなされている．しかし，CCのみを利用するニュース映像の要約手法では，映像の重要な構成要素である画像内容が考慮されないという問題があった．そこで提案手法では，Visual Conceptを用いて画像内容を分析し，重要文として抽出したニュース文の内容と一致するシーンを選択して，それに重要文の音声を重畳することで，複数ニュース映像を要約する．提案手法の有効性を確認するために，2種類の被験者実験を行った．その結果，様々なニューストピックに対して，提案手法が有効であることを確認した．