来自3D模型的神经重新渲染

摘要

根据一个方面，一种用于神经重新渲染的方法包括获得表示物理空间场景的三维(3D)模型，其中3D模型从输入图像的合集被构建；根据视点从3D模型渲染图像数据缓存，其中该图像数据缓存表示来自3D模型的重构图像；由神经重新渲染网络接收图像数据缓存，由神经重新渲染网络接收表示外观条件的外观代码，以及由神经重新渲染网络将图像数据变换为具有图像数据缓存的视点和外观代码指定的外观条件的重新渲染的图像。