拡張現実感のための視点依存テクスチャ·ジオメトリに基づく仮想化実物体の輪郭形状の修復

摘要

拡張現実感技術を利用して，スマートフォン等で実空間を撮影した映像上で家具や家電のような実物体を仮想的に配置可能なアプリケーションが一般に利用され始めている．本報告では，マルチビューステレオ等に代表される三次元復元手法を用いて生成した三次元モデルをこのようなアプリケーションで利用することを前提に，形状の推定誤差に起因する輪郭の膨張や欠損などの不整合を低減する手法を提案する．具体的には，視点依存ジオメトリを用いて三次元モデルを視点に依存して膨張させることにより三次元モデルの欠損を補完し，前景抽出で得られた前景領域のみを視点依存テクスチャにより三次元モデルにテクスチャマッピングすることで膨張領域を修復する．実験では，仮想化実物体を実時間で合成する拡張現実感システムを試作し，これを用いて提案手法の有効性を示す．