撮影位置情報を利用した画像アノテーションに関する検討

摘要

Web上で公開された大規模画像データベース（写真共有サイト）の画像と画像に付与されているラベルを利用して，ラベルが未知の画像に対して適切なラベル付けを行う画像アノテーションの研究が盛んに行われている．写真共有サイトで公開されている画像には，その画像が撮影された位置情報が記録されているものがある．本稿では，そのような位置情報を効果的に利用して，画像アノテーションの精度を向上させる方法を提案する．従来の画像アノテーションでは，画像特徴とラベル特徴問の関係を学習する方法が主流であったが，本稿では画像アノテーション問題を，Image-based Labeling と Label-based Localizationという画像特徴からラベルを推定する問題と，ラベルから位置情報を推定する問題として定式化し，これらの組合せによって画像アノテーションを行う．実験では，従来の画像特徴とラベル特徴のみを利用した方法よりも高い精度で画像アノテーションが行えることが確認できた．%The growth of photo-sharing website such as Flickr and Picasa enables us to access the billions of images easily. Recent years, many researchers leverage such photo-sharing site to tackle the image annotation problem. The aim of the image annotation is to give a proper label to an unknown image. Generally, image features and label features are used to acquire the relationship between them. Meanwhile, we use not only such image and label features but also geolocation which indicate the information where the image was taken. We formulate the image annotation problem as two important issues; image-based labeling and label-based localization. The former issue is to estimate a proper label from a given image. The latter is the issue to estimate the location from the label. Our approach combine these two estimation strategies. We conducted some experiments and found that our approach outperformed the traditional approach.