ライフログにおける自動タグ付けのための笑顔認識機構の設計と実装

摘要

人が笑顔になるとき，目の前ではその人にとって価値のある出来事が起こっている可能性が高い．一方で，ウェアラブルカメラやウェアラブルマイクを用いて全てを記録するようなライフログシステムにおいては，膨大な記録の中から重要な出来事を切り出すことは難しい．本研究では，徴笑みと笑いに着目し，動画に記録された楽しい出来事や面白い出来事にタグ付けする，笑顔に基づくライフログシステムの設計および実装を行った．笑いと微笑みが発生する理由はそれぞれ異なるため，微笑みと笑いを別の出来事として検知する必要がある．そこで本提案システムでは，フォトリフレクタを用いて微笑みと笑いを認識するデバイスおよび閾値に基づくクラスタリングを用いて微笑みと笑いを認識するアルゴリズムを提案する．提案システムは日常生活下で自然に利用できるように設計されており，評価実験では笑い94％，微笑み73％の認識率が得られた．また，実運用した結果，ライフログから興味深いシーンを抽出できることを確認した．