一种基于单视点RGB-D图像的大尺度全景视点合成方法

摘要

本发明公开了一种基于单视点RGB‑D图像的大尺度全景视点合成方法，首先对输入的单帧彩色图和对应的深度图分别进行3D‑Warping，得到带有空洞的虚拟视点图像和掩膜图像。接下来将带有空洞的虚拟视点图像及掩膜图像作为CNN神经网络的输入，网络模型的输出结果即为虚拟视点空洞填补后的图像，接下来将水平方向新生成的虚拟视点作为新的输入，通过3D‑Warping及CNN神经网络空洞填充得到空间中任意位置处的虚拟视点图像。本发明实现了从整体上提高虚拟视点的质量，对提高大视差虚拟视点合成具有重要的指导意义。