画像に付属するテキストのクラスタリングを用いた画像の類似性抽出とその評価

摘要

この論文では画像間の類似性の尺度として画像に付属したテキスト（文書）を用いた方法を提案する。テキストは単語ベクトルへと変換する。 クラスタリングは単語ベクトルの集合と,画像から抽出された特徴ベクトルの集合それぞれで独立して行う。そして画像とテキストからなるペアデータにより2つの空間のクラスターを結ぶリンクが生成される。 提案する類似性は,部分画像によって2つの空間クラスターを行き来するサーチパスのサークルを通じて定義される。 このサーチパスのサークルへの未知画像入力や未知テキスト入力で画像検索を実現する。