ウオークスルーを実現する自由視点映像合成方式

摘要

"Free Viewpoint Video" generating technology enables audiences of TV program to choose their own viewpoints. We propose a novel method to realize "walk-through" experience in which the viewpoint can fly into the phalanx of sports game players in a large arena, where the scene is captured by video cameras surrounding the arena. The proposed method employs a local ray-space concept It divides the 3D space into small subspaces to generate a local ray-space, generates local images, and integrates them to reconstruct the scene. Furthermore, the proposed method solves a vertical disparity problem that might cause a border discontinuity in the integration process. A computer simulation shows that the proposed method achieves highly flexible viewpoint generation with high fidelity.%複数カメラで撮影した映像から，任意の視点における映像を合成する自由視点映像合成技術が注目されている．本稿では，その中でも特に，スポーツやダンスのように広い空間に複数の被写体が散在するような状況を複数カメラで取り囲んで撮影した映像から，被写体の間を通り抜ける視点の（ウオークスルー）自由視点映像を合成する方式を提案する．光線空間の手法を用いつつ，新しいアプローチとして，被写体空間を多数の小領域に分割し，個別に映像合成を行い，全体の統合を行う方式を採用した．また，統合時に問題となる縦方向視差の補正も導入している．これにより，真に自由な視点移動を可能とする臨場感の高い映像合成が実現できた．