自由視点映像生成に適したN-View N-Depth符号化

摘要

In this paper, we discuss a multiview video and depth coding for Multiview applications such as 3DTV and Free View-point Television. We investigate the effect on free view synthesis quality by changing the transmis sion rates between multiview and depth sequences. In the simulations, we employ MVC in parallel to compress the multiview video and depth sequences at different bitrates, and compare the virtual view sequences generated by decoded stream with the original video sequences taken in the same viewpoint. Our results show that multiview depth bitrates has less effect on the view synthesis quality compared with the multiview video bitrates.%本報告では，多視点映像及び各視点に対応する奥行き情報の圧縮符号化について取り扱う．復号後に行う自由視点映像生成に適した符号化方式を提案する初期段階として，多視点映像及び奥行き情報各々の伝送レートが自由視点映像生成の精度に及ぼす影響について検討する．現在標準化団体MPEGにおいて，復号側での自由視点映像生成を前提とした，新たな多視点映像及び奥行き情報符号化方式が議論されている．この方式では，全体のデータレートがある値に定められた際，その範囲中で多視点映像及び奥行き情報各々のビットレートを決定しなくてはならない．その際，伝送量が復号後に行われる自由視点映像生成の精度が最大となる様，各ビットレートを適した値に調整し，伝送する必要がある．実験では，多視点映像及び奥行き情報の符号化方式としてMultiview Video Coding（MVC）を並列に用い，復号情報より生成された視点映像と，同位置で撮影された映像との比較を行った．結果より，特に総伝送量が一定である場合，多視点映像に比べ奥行き情報は低ビットレートでも視点映像生成の精度に影響を及ぼしにくい事が分かった．