SfM位置推定による静的シーンの自由視点画像生成

摘要

静止物体のみで構成されたシーンをハンディカメラで撮影し，その動画像をもとに自由視点画像を生成する手法を提案する．自由視点画像を生成する際に必要な情報であるカメラの位置と向きの推定を，従来手法においてはチェックパターンを用いたり，疑似透視投影を用いた因子分解法により求めていたため，ハンディカメラが撮影できる軌跡が制限されてしまっていた．それに対して提案手法においては，より自由な軌跡から撮影された動画像から自然特徴点の軌跡を用いてStructure from Motionによりカメラの位置と向きを求め，数枚の参照画像を選択し，仮想視点の奥行きを求めて自由視点画像を生成する．%We propose a method that generates free-viewpoint images for static scene from a video captured by a handy camera. In some previous works, camera pose/positions are estimated by capturing a checkerboard pattern or using factorization method in pseudo perspective projection. In our method, Structure from Motion is used to estimate camera pose/positions. From the reconstructed frame images, some frames are selected to estimate a depth map of a virtual view. And we render the virtual view by the estimated depth map and selected some frame images.