用于在显示器上渲染视频的方法和设备

摘要

描述了一种用于在客户端设备的显示器上渲染沉浸式视频的空间部分的方法，所述客户端设备包括图块帧检索设备、解码器设备和渲染器设备，其中沉浸式视频包括视频帧，每个视频帧在空间上被划分为图块帧，并且沉浸式视频包括图块流，每个图块流表示沉浸式视频的空间部分，并且每个图块流包括多个所述图块帧，并且其中客户端存储有图块流映射信息，图块流映射信息为每个图块流指示在诸如球形或立方体之类的二维或三维模型的表面上的相应位置，所述方法包括：基于所述图块流映射信息和视口，图块帧检索设备确定多个图块流，并向服务器请求编码视频数据，编码视频数据对于每个确定的图块流包括编码图块帧，编码图块帧包括表示包含在该图块流中的图块帧的编码数据；图块帧检索设备接收编码图块帧并形成编码视频帧，编码视频帧包括接收的编码图块帧，每个编码图块帧在编码视频帧中具有位置，并且图块帧检索设备生成图块帧布置信息，图块帧布置信息指示每个编码图块帧在编码视频帧内的位置；所述解码器设备对编码视频帧解码以获得解码视频帧，解码视频帧包括在解码视频帧内的相应位置处的图块帧；基于图块帧布置信息并且基于图块流映射信息，所述渲染器设备将解码视频帧映射到二维或三维模型的一个或多个表面上，使得每个图块帧被映射到所指示的模型的一个或多个表面的位置上；基于映射的解码视频帧，渲染器设备在客户端设备的显示器上渲染解码视频帧的至少一部分。