景深包装及解包装的RGB格式与YUV格式的转换与反转换的方法及电路

摘要

本发明提出的转换方法包括：分别取得RGB格式的四像素中具有交错位置的两个R、两个G及两个B次像素值；以及依据取得的这些次像素值得到YUV格式的四个Y亮度值、一个U色度值及一个V色度值；其中，YUV格式的第一像素、第二像素、第三像素及第四像素的Y亮度值分别是由RGB格式的第一像素的R、第二像素的G、第三像素的G与第四像素的B次像素值经计算而得到，第一像素的U色度值是由第一像素的B、第一像素的R与第三像素的G次像素值经计算而得到，第一像素的V色度值是由第四像素的R、第二像素的G与第四像素的B次像素值经计算而得到。

说明书

技术领域

本发明涉及一种应用于景深包装及解包装的RGB格式与YUV格式的转换与反转换的方法及其电路。

背景技术

人类可见的色彩都可用红、绿、蓝(R、G、B)三种颜色来加以混和而成。然而，人类的视觉系统对于亮度(luminance)比较敏感，而对于彩度比较不敏感，况且，三原色所构成的向量空间无法对影像强度(亮度)做处理，例如柔和化、锐利化等等。同时，由RGB格式构成的影像数据也在传输时占用较大带宽、储存时占用较多的内存。因此，有必要将RGB格式的影像数据转换成YUV格式，以达到高效率的影像传输。

在习知技术中，视频或影像压缩系统会将RGB次像素的相邻四个像素转换为YUV的相邻四个像素(又称YUV 444格式)后进行压缩传输，接收端再将YUV格式转换回RGB格式。

在习知技术的一个实施例中，如图11A与图11B所示，其分别显示RGB与YUV格式中，次像素的景深(depth)垂直与景深水平像素之间的转换示意图。在图11A中，配合以下表一的矩阵方程式，排除计算的误差外，景深像素对应在RGB格式的与YUV 444格式之间的转换及反转换并不会产生失真。

表一

另外，在图11B中，配合以下表二的矩阵方程式，排除计算的误差外，景深像素对应在RGB格式的与YUV 444格式之间的转换及反转换也不会产生失真。

表二

然而，为达到高效率的视频压缩传输，在一些实施例中，视频或影像压缩系统会保留YUV格式的四个像素的四个亮度值(Y，luminance)，但对四个色度值(U，V，chrominance)则采用次取样(Subsampling)的方式，仅保留两个像素的U、V色度值(又称YUV 422格式)，或一个像素的U、V色度值(又称YUV 420格式)，由此，使利用YUV422或420格式传输影像数据时可占用较少带宽、储存时可占用较少的内存，以达到高效率的视频压缩与传输。

请参照图12A与图12B所示，其分别显示景深垂直与景深水平包装的YUV444格式、YUV422格式及YUV420格式的示意图。在这两个图示中的圆圈内显示有剖面线的UV色度值已依取样的不同而被舍去。由于YUV 420格式会占用最少的带宽与内存，因此，视频或影像压缩系统最常被采用的格式正是YUV 420格式。

当接收端的影像解压缩系统接收到YUV420(或YUV 422)格式的影像数据时，会先将缺少的U、V色度值以保留的U、V色度值填入，以近似为YUV444格式之后再转换成RGB格式的影像数据。例如，在YUV 420格式中，解压缩系统会将第一像素的U色度值(U1)分别填入第二像素、第三像素及第四像素的U色度(U2、U3、U4)的位置内，并将第一像素的V色度值(V1)分别填入第二像素、第三像素及第四像素的V色度(V2、V3、V4)的位置内，再将YUV格式的四个像素转换回RGB格式。由于是将缺少的U、V色度值以保留的U、V色度值填入，因此，转换回的RGB格式的影像数据在景深落差的剧变区将会产生严重失真的现象。

上述习知技术的RGB格式与YUV格式的转换与反转换的方式已经长久被业界所采用，虽然参数值略有变化，但是在转换与反转换的做法上都是以上述的矩阵方式以及RGB或YUV三个变量去做转换，而且都只是强调传输的效率良好，并不考虑其他层面的问题。

发明人在过去提出的专利技术中提出了一种彩色帧(color frame)与景深帧(depth frame)的包装(packing)与解包装(unpacking)技术(Centralized Texture DepthPacking,CTDP)，可以将包装后的彩色帧与景深帧一并传送，其中RGB次像素即分别代表三个景深次像素。但是在转换的过程中却发现，应用于景深帧的压缩与传输时，若采用YUV420格式(或422格式)重新补回YUV 444格式之后，再转换回RGB格式时，在景深落差剧变区的位置上，景深像素将产生相当大的失真现象。

发明内容

有鉴于上述，本发明的目的为提供一种应用于景深包装及解包装的RGB格式与YUV格式的转换与反转换的方法及其电路。

本发明的转换方法与其转换电路与习知技术的做法不同，并不是以RGB或YUV的三个变量去做转换，但是同样可具有压缩效率较高、数据量较少及传输效率较高的优点，同样可有效降低现有传输设备及传输带宽的负担。

另外，相较于习知反转换的做法而言，本发明的反转换方法与其反转换电路可以还原成较佳原始的景深帧，因此可以改善在景深落差剧变区位置上的失真现象。

本发明提出一种应用于景深帧包装的RGB格式转换至YUV格式的方法，其中RGB格式包括R次像素、G次像素与B次像素，YUV格式包括Y亮度、U色度与V色度，具有RGB格式的景深帧至少包含四像素，四像素中的每一个的R次像素、G次像素、B次像素分别为垂直排列，四像素分别为第一像素、第二像素、第三像素及第四像素，第一像素分别与第二像素及第三像素相邻排列，且第四像素分别与第二像素及第三像素相邻排列，该方法包括以下步骤：分别取得四像素中具有交错位置的两个R次像素值、两个G次像素值及两个B次像素值；以及依据取得的这些R次像素值、这些G次像素值与这些B次像素值得到YUV格式的四个Y亮度值、一个U色度值及一个V色度值；其中，在YUV格式的四像素中，第一像素的Y亮度值是由RGB格式的第一像素的R次像素值经计算而得到，第二像素的Y亮度值是由第二像素的G次像素值经计算而得到，第三像素的Y亮度值是由第三像素的G次像素值经计算而得到，第四像素的Y亮度值是由第四像素的B次像素值经计算而得到，第一像素的U色度值是由第一像素的B次像素值减去第一像素的R次像素值与第三像素的G次像素值的平均值后经计算而得到，第一像素的V色度值是由第四像素的R次像素值减去第二像素的G次像素值与第四像素的B次像素值的平均值后经计算而得到。

本发明还提出一种应用于景深帧包装的RGB格式转换至YUV格式的电路，其中RGB格式包括R次像素、G次像素与B次像素，YUV格式包括Y亮度、U色度与V色度，具有RGB格式的景深帧至少包含四像素，四像素中的每一个的R次像素、G次像素、B次像素分别为垂直排列，四像素分别为第一像素、第二像素、第三像素及第四像素，第一像素分别与第二像素及第三像素相邻排列，且第四像素分别与第二像素及第三像素相邻排列，该电路包括像素取得单元以及像素转换单元。像素取得单元分别取得四像素中具有交错位置的两个R次像素值、两个G次像素值及两个B次像素值。像素转换单元依据取得的这些R次像素值、这些G次像素值与这些B次像素值得到YUV格式的四个Y亮度值、一个U色度值及一个V色度值；其中，在YUV格式的四像素中，第一像素的Y亮度值是由RGB格式的第一像素的R次像素值经计算而得到，第二像素的Y亮度值是由第二像素的G次像素值经计算而得到，第三像素的Y亮度值是由第三像素的G次像素值经计算而得到，第四像素的Y亮度值是由第四像素的B次像素值经计算而得到，第一像素的U色度值是由第一像素的B次像素值减去第一像素的R次像素值与第三像素的G次像素值的平均值后经计算而得到，第一像素的V色度值是由第四像素的R次像素值减去第二像素的G次像素值与第四像素的B次像素值的平均值后经计算而得到。

本发明又提出一种应用于景深帧包装的RGB格式转换至YUV格式的方法，其中RGB格式包括R次像素、G次像素与B次像素，YUV格式包括Y亮度、U色度与V色度，具有RGB格式的景深帧至少包含四像素，四像素中的每一个的R次像素、G次像素、B次像素分别为水平排列，四像素分别为第一像素、第二像素、第三像素及第四像素，第一像素分别与第二像素及第三像素相邻排列，且第四像素分别与第二像素及第三像素相邻排列，该方法包括以下步骤：分别取得四像素中具有交错位置的两个R次像素值、两个G次像素值及两个B次像素值；以及依据取得的这些R次像素值、这些G次像素值与这些B次像素值得到YUV格式的四个Y亮度值、一个U色度值及一个V色度；其中，在YUV格式的四像素中，第一像素的Y亮度值是由RGB格式的第一像素的R次像素值经计算而得到，第二像素的Y亮度值是由第二像素的G次像素值经计算而得到，第三像素的Y亮度值是由第三像素的G次像素值经计算而得到，第四像素的Y亮度值是由第四像素的B次像素值经计算而得到，第一像素的U色度值是由第一像素的B次像素值减去第一像素的R次像素值与第二像素的G次像素值的平均值后经计算而得到，第一像素的V色度值是由第四像素的R次像素值减去第三像素的G次像素值与第四像素的B次像素值的平均值后经计算而得到。

本发明又提出一种应用于景深帧包装的RGB格式转换至YUV格式的电路，其中RGB格式包括R次像素、G次像素与B次像素，YUV格式包括Y亮度、U色度与V色度，具有RGB格式的景深帧至少包含四像素，四像素中的每一个的R次像素、G次像素、B次像素分别为水平排列，四像素分别为第一像素、第二像素、第三像素及第四像素，第一像素分别与第二像素及第三像素相邻排列，且第四像素分别与第二像素及第三像素相邻排列，该电路包括像素取得单元以及像素转换单元。像素取得单元分别取得四像素中具有交错位置的两个R次像素值、两个G次像素值及两个B次像素值。像素转换单元依据取得的这些R次像素值、这些G次像素值与这些B次像素值得到YUV格式的四个Y亮度值、一个U色度值及一个V色度值；其中，在YUV格式的四像素中，第一像素的Y亮度值是由RGB格式的第一像素的R次像素值经计算而得到，第二像素的Y亮度值是由第二像素的G次像素值经计算而得到，第三像素的Y亮度值是由第三像素的G次像素值经计算而得到，第四像素的Y亮度值是由第四像素的B次像素值经计算而得到，第一像素的U色度值是由第一像素的B次像素值减去第一像素的R次像素值与第二像素的G次像素值的平均值后经计算而得到，第一像素的V色度值是由第四像素的R次像素值减去第三像素的G次像素值与第四像素的B次像素值的平均值后经计算而得到。

本发明又提出一种应用于景深帧解包装的YUV格式转换至RGB格式的方法，其中YUV格式包括Y亮度、U色度与V色度，RGB格式包括R次像素、G次像素与B次像素，具有YUV格式的景深帧至少包含四像素，四像素中的每一个的Y亮度、U色度、V色度分别为垂直排列，四像素分别为第一像素、第二像素、第三像素及第四像素，第一像素分别与第二像素及第三像素相邻排列，且第四像素分别与第二像素及第三像素相邻排列，该方法包括以下步骤：分别取得四像素的四个Y亮度值、一个U色度值及一个V色度值；以及依据取得的这些Y亮度值、该U色度值与该V色度值得到RGB格式的两个R次像素值、两个G次像素值及两个B次像素值；其中，在RGB格式的四像素中，第一像素的R次像素值是由第一像素的Y亮度值经计算而得到，第二像素的G次像素值是由第二像素的Y亮度值经计算而得到，第三像素的G次像素值是由第三像素的Y亮度值经计算而得到，第四像素的B次像素值是由第四像素的Y亮度值经计算而得到，第一像素的B次像素值是由第一像素的U色度值及第一像素的R次像素值与第三像素的G次像素值的平均值经计算而得到，第四像素的R次像素值是由第一像素的V色度值及第二像素的G次像素值与第四像素的B次像素值的平均值经计算而得到。

本发明又提出一种应用于景深帧解包装的YUV格式转换至RGB格式的电路，其中YUV格式包括Y亮度、U色度与V色度，RGB格式包括R次像素、G次像素与B次像素，具有YUV格式的景深帧至少包含四像素，四像素中的每一个的Y亮度、U色度、V色度分别为垂直排列，四像素分别为第一像素、第二像素、第三像素及第四像素，第一像素分别与第二像素及第三像素相邻排列，且第四像素分别与第二像素及第三像素相邻排列，该电路包括像素取得单元以及像素转换单元。像素取得单元分别取得四像素的四个Y亮度值、一个U色度值及一个V色度值。像素转换单元依据取得的这些Y亮度值、该U色度值与该V色度值得到RGB格式的两个R次像素值、两个G次像素值及两个B次像素值；其中，在RGB格式的四像素中，第一像素的R次像素值是由第一像素的Y亮度值经计算而得到，第二像素的G次像素值是由第二像素的Y亮度值经计算而得到，第三像素的G次像素值是由第三像素的Y亮度值经计算而得到，第四像素的B次像素值是由第四像素的Y亮度值经计算而得到，第一像素的B次像素值是由第一像素的U色度值及第一像素的R次像素值与第三像素的G次像素值的平均值经计算而得到，第四像素的R次像素值是由第一像素的V色度值及第二像素的G次像素值与第四像素的B次像素值的平均值经计算而得到。

本发明又提出一种应用于景深帧解包装的YUV格式转换至RGB格式的方法，其中YUV格式包括Y亮度、U色度与V色度，RGB格式包括R次像素、G次像素与B次像素，具有YUV格式的景深帧至少包含四像素，四像素中的每一个的Y亮度、U色度、V色度分别为水平排列，四像素分别为第一像素、第二像素、第三像素及第四像素，第一像素分别与第二像素及第三像素相邻排列，且第四像素分别与第二像素及第三像素相邻排列，该方法包括以下步骤：分别取得四像素的四个Y亮度值、一个U色度值及一个V色度值；以及依据取得的这些Y亮度值、该U色度值与该V色度值得到RGB格式的两个R次像素值、两个G次像素值及两个B次像素值；其中，在RGB格式的四像素中，第一像素的R次像素值是由第一像素的Y亮度值经计算而得到，第二像素的G次像素值是由第二像素的Y亮度值经计算而得到，第三像素的G次像素值是由第三像素的Y亮度值经计算而得到，第四像素的B次像素值是由第四像素的Y亮度值经计算而得到，第一像素的B次像素值是由第一像素的U色度值及第一像素的R次像素值与第二像素的G次像素值的平均值经计算而得到，第四像素的R次像素值是由第一像素的V色度值及第三像素的G次像素值与第四像素的B次像素值的平均值经计算而得到。

本发明又提出一种应用于景深帧解包装的YUV格式转换至RGB格式的电路，其中YUV格式包括Y亮度、U色度与V色度，RGB格式包括R次像素、G次像素与B次像素，具有YUV格式的景深帧至少包含四像素，四像素中的每一个的Y亮度、U色度、V色度分别为水平排列，四像素分别为第一像素、第二像素、第三像素及第四像素，第一像素分别与第二像素及第三像素相邻排列，且第四像素分别与第二像素及第三像素相邻排列，该电路包括像素取得单元以及像素转换单元。像素取得单元分别取得四像素的四个Y亮度值、一个U色度值及一个V色度值。像素转换单元依据取得的这些Y亮度值、该U色度值与该V色度值得到RGB格式的两个R次像素值、两个G次像素值及两个B次像素值；其中，在RGB格式的四像素中，第一像素的R次像素值是由第一像素的Y亮度值经计算而得到，第二像素的G次像素值是由第二像素的Y亮度值经计算而得到，第三像素的G次像素值是由第三像素的Y亮度值经计算而得到，第四像素的B次像素值是由第四像素的Y亮度值经计算而得到，第一像素的B次像素值是由第一像素的U色度值及第一像素的R次像素值与第二像素的G次像素值的平均值经计算而得到，第四像素的R次像素值是由第一像素的V色度值及第三像素的G次像素值与第四像素的B次像素值的平均值经计算而得到。

承上所述，本发明的应用于景深包装的RGB格式与YUV格式的转换方法及其电路与习知转换技术的做法不同，并不是以RGB或YUV的三个变量去做转换，但是同样可具有压缩效率较高、数据量较少及传输效率较高的优点，亦可有效降低现有传输设备及传输带宽的负担。

另外，本发明的应用于景深解包装的RGB格式与YUV格式的反转换的方法及其电路中，可以还原成较佳原始的景深帧，因此，可以改善在景深落差剧变区位置上的失真现象。

附图说明

图1A为本发明优选实施例的一种将影像数据由RGB格式转换为YUV格式的转换方法的流程示意图。

图1B为本发明优选实施例的一种将影像数据由RGB格式转换为YUV格式的转换电路的功能方块示意图。

图2A为一个实施例的影像数据由RGB格式转换为YUV420格式的示意图。

图2B为一个实施例的影像数据由RGB格式转换为YUV422格式的示意图。

图2C为一个实施例的影像数据由RGB格式转换为YUV444格式的示意图。

图2D为影像数据由RGB格式转换为YUV420格式的另一示意图。

图3为本发明另一优选实施例的一种将影像数据由RGB格式转换为YUV格式的转换方法的流程示意图。

图4A为一个实施例的影像数据由RGB格式转换为YUV420格式的示意图。

图4B为一个实施例的影像数据由RGB格式转换为YUV422格式的示意图。

图4C为一个实施例的影像数据由RGB格式转换为YUV444格式的示意图。

图5A为本发明优选实施例的一种将影像数据由YUV格式转换为RGB格式的转换方法的流程示意图。

图5B为本发明优选实施例的一种将影像数据由YUV格式转换为RGB格式的转换电路的功能方块示意图。

图6A为一个实施例的影像数据由YUV422格式转换为RGB格式的示意图。

图6B为一个实施例的景深帧与彩色帧的对应示意图。

图6C为一个实施例的影像数据由YUV420格式转换为RGB格式的示意图。

图7为本发明优选实施例的一种将影像数据由YUV格式转换为RGB格式的转换方法的另一流程示意图。

图8A为一个实施例的影像数据由YUV422格式转换为RGB格式的示意图。

图8B为一个实施例的影像数据由YUV420格式转换为RGB格式的示意图。

图9A与图10A分别为习知技术由RGB格式转换YUV420格式，再由YUV420格式转换为RGB格式后的景深帧示意图。

图9B、图9C与图10B、图10C分别为本发明由RGB格式转换YUV420格式，再由YUV420格式转换为RGB格式后的景深帧示意图。

图11A与图11B分别显示RGB与YUV格式中，次像素的景深垂直与景深水平像素之间的转换示意图。

图12A与图12B分别显示景深垂直与景深水平包装的YUV444格式、YUV422格式及YUV420格式的示意图。

图13为一个实施例的3D影像及景深系统包装技术的步骤流程图。

具体实施方式

以下将参照相关附图，说明依据本发明应用于景深包装及解包装的RGB格式与YUV格式的转换与反转换的方法及其电路，其中相同的组件将以相同的参照符号加以说明。

本发明的转换、反转换方法与其电路是应用于3D景深系统的包装(packing)与解包装(unpacking)技术上。另外，本技术的转换、反转换方法与电路可应用于灰阶影像信号的压缩与传输上。本发明优选是应用于发明人在美国专利申请号第14/504,901、14/504,936、14/505,117与14/505,153号中所提出的3D影像系统的包装与解包装技术中。上述专利申请号均通过引用方式纳入本说明书全文之中。

发明人提出的3D影像及景深系统包装技术可参照图13所示。该步骤流程包含：分别重调彩色帧(color frame)与景深帧(depth frame)的尺寸(Downscaling)(步骤Q01、步骤Q02)；将重调后的景深帧进行像素重排列(Pixel Rearrangement)成RGB次像素格式(步骤Q03)、RGB格式与YUV格式转换(Format Conversion)(步骤Q04)、分割及反转(Splitting&Filpping)(步骤Q05)，再与重调后的彩色帧组合(步骤Q06)，之后再进行传输；接收端接收后再进行反转换工作，以得到原来的彩色帧与景深帧。本发明提出的RGB格式与YUV格式的转换就是使用于上述的YUV格式转换步骤；反之，本发明提出的RGB格式与YUV格式的反转换就是使用于接收端的格式反转换步骤。

在图13的步骤中，若跳过像素重排列，该RGB次像素格式排列也可以直接表示为依据对应位置的三个连续景深图素。该YUV格式也可称为YCbCr，即Cb以U表示，Cr以V表示。

换言之，本发明基于发明人于过去提出的彩色帧与景深帧的包装与解包装技术，更进一步提出将景深帧的格式转换(由RGB格式转换成YUV格式)与反转换(由YUV格式转换成RGB格式)的详细技术内容，包括转换与反转换的方法与其电路，以解决在景深帧在转换格式时，景深有落差的区域会有失真现象的问题。尤其是相邻的位置之间具有大景深落差时(即景深落差剧变区)。本发明所指的转换就是将RGB格式转换成YUV格式的过程，而本发明所指的反转换就是将YUV格式还原成RGB格式的过程。

请参照图1A及图1B所示，其中，图1A为本发明优选实施例的一种将影像数据由RGB格式转换为YUV格式的转换方法的流程示意图，而图1B为本发明优选实施例的一种将影像数据由RGB格式转换为YUV格式的转换电路1的功能方块示意图。

灰阶影像数据例如但不限于为景深帧，可包装为RGB格式，经本技术的转换方法与转换电路1转换后可得到YUV格式的影像数据，在YUV格式中，尤其是YUV420或422格式的影像数据应用于信号传输时可占用较少带宽、储存时可占用较少的内存，由此达到高效率的视频压缩与传输。其中，RGB格式包括R次像素、G次像素与B次像素，而YUV格式包括Y亮度、U色度与V色度。在本实施例中，具有RGB格式的影像数据包含四个相邻像素的群组，亦即每一个群组具有四个相邻的像素。因此，以下是将影像数据中所有群组的四像素都由RGB格式转换成YUV格式。其中，每一群组的四个像素分别为第一像素、第二像素、第三像素及第四像素，第一像素分别与第二像素及第三像素相邻排列，且第四像素分别与第二像素及第三像素相邻排列。另外，每一个像素的R次像素、G次像素、B次像素分别为垂直排列。换言之，每一个像素的R次像素、G次像素、B次像素是位于同一行中。

如图1A所示，将影像数据由RGB格式转换为YUV格式的转换方法包括步骤S01至步骤S02。步骤S01为：分别取得该四像素中具有交错位置的两个R次像素值、两个G次像素值及两个B次像素值，而步骤S02为：依据取得的这些R次像素值、这些G次像素值与这些B次像素值得到YUV格式的四个Y亮度值、一个U色度值及一个V色度值；其中，在YUV格式的四像素中，第一像素的Y亮度值是由RGB格式的第一像素的R次像素值经计算而得到，第二像素的Y亮度值是由第二像素的G次像素值经计算而得到，第三像素的Y亮度值是由第三像素的G次像素值经计算而得到，第四像素的Y亮度值是由第四像素的B次像素值经计算而得到，第一像素的U色度值是由第一像素的B次像素值减去第一像素的R次像素值与第三像素的G次像素值的平均值后经计算而得到，第一像素的V色度值是由第四像素的R次像素值减去第二像素的G次像素值与第四像素的B次像素值的平均值后经计算而得到。

另外，如图1B所示，转换电路1包括像素取得单元11及像素转换单元12，像素取得单元11与像素转换单元12电性连接。其中，像素取得单元11可由影像数据的每一群组中分别取得该四像素中具有交错位置的两个R次像素值、两个G次像素值及两个B次像素值，而像素转换单元12可依据取得的这些R次像素值、这些G次像素值与这些B次像素值得到YUV格式的四个Y亮度值、一个U色度值及一个V色度值。在此，像素取得单元11与像素转换单元12是应用硬件电路或固件的方式来实现其功能。在一个实施例中，转换电路1可包含例如可以加/减法器及乘/除法器。

像素取得单元11可依据转换需求分别取得每一群组转换时对应所需的R次像素值、G次像素值与B次像素值，且像素转换单元12可将取得的R次像素值、G次像素值与B次像素值转换而得到YUV格式。在一些实施例中，像素转换单元12可将一个群组的四像素转换得到YUV格式后就储存至同一群组的第一像素、第二像素、第三像素及第四像素的对应位置中；或者，在另一些实施例中，像素转换单元12也可将所有的群组的四像素全部转换而得到YUV格式后，再全部储存至对应群组的第一像素、第二像素、第三像素及第四像素的对应位置中，对此并不限定。此外，存储单元(图未示)可分别与像素取得单元11及像素转换单元12电性连接，并可储存转换前与转换后的影像数据。以下将以实施例来说明上述的转换方法。

请参照图2A所示，其为一个实施例的影像数据由RGB格式转换为YUV420格式的示意图。在此，各像素的次像素的数量分别为三个，其为红、绿、蓝三个次像素(以R、G、B表示)，每一像素的R、G、B次像素分别为垂直排列(位于同一行中)，而转换后的YUV格式的影像数据的各次像素的数量也分别为三个，其为一个Y亮度与两个U、V色度所构成，且也分别为垂直排列。

以下以对应的代号来表示每一个次像素的位置及其次像素值。例如图2A的R₁代表第一像素的R次像素位置与R次像素值，G₁代表第一像素的G次像素位置与G次像素值，B₁代表第一像素的B次像素位置与B次像素值。同样地，Y₁、U₁、V₁对应代表第一像素的Y亮度位置与Y亮度值、第一像素的U色度位置与U色度值、第一像素的V色度位置与V色度值，以此类推。不过，若图示中的整个圆圈显示有斜线面的色度U、V是表示，该位置的U、V色度值为不存在。举例来说，在图2A的YUV420格式中，只有Y₁～Y₄亮度位置有对应的亮度值，及U₁、V₁色度位置有对应的色度值，而U₂～U₄、V₂～V₄的位置则不存在。另外，在图2A中，RGB或YUV格式的第一像素为左上角垂直排列的三个次像素(以1表示)，第二像素为右上角垂直排列的三个次像素(以2表示)，第三像素为左下角垂直排列的三个次像素(以3表示)，第四像素为右下角垂直排列的三个次像素(以4表示)，然而并不局限于此。不过，在一些实施例中，第一像素～第四像素的位置也可以互换，只要符合第一像素分别与第二像素及第三像素相邻排列，且第四像素分别与第二像素及第三像素相邻排列即可。

在本实施例中，将影像数据由RGB格式转换为YUV420格式的转换方法是通过像素取得单元11分别取得该四像素中具有交错位置的两个R次像素值、两个G次像素值及两个B次像素值，且依据取得的这些R次像素值、这些G次像素值与这些B次像素值得到YUV420格式的四个Y亮度值、一个U色度值及一个V色度值。在一个实施例的四像素中，像素取得单元11是分别取得第一像素与第四像素的R次像素值、第二像素与第三像素的G次像素值及第一像素与第四像素的B次像素值，且依据取得的第一像素与第四像素的R次像素值、第二像素与第三像素的G次像素值及第一像素与第四像素的B次像素值得到YUV格式的四个Y亮度值(Y₁～Y₄)、一个U色度值(U₁)及一个V色度值(V₁)。

其中，第一像素的Y亮度值是等于0.8588乘以第一像素的R次像素值后加16，第二像素的Y亮度值等于0.8588乘以第二像素的G次像素值后加16，第三像素的Y亮度值等于0.8588乘以第三像素的G次像素值后加16，第四像素的Y亮度值等于0.8588乘以第四像素的B次像素值后加16，第一像素的U色度值等于第一像素的B次像素值减去第一像素的R次像素值与第三像素的G次像素值的平均值后乘以0.4392加128，第一像素的V色度值等于第四像素的R次像素值减去第二像素的G次像素值与第四像素的B次像素值的平均值后乘以0.4392加128。换言之，

Y₁＝0.8588×R₁+16(1)；

Y₂＝0.8588×G₂+16(2)；

Y₃＝0.8588×G₃+16(3)；

Y₄＝0.8588×B₄+16(4)；

U₁＝0.4392×(B₁–0.5×(R₁+G₃))+128>

V₁＝0.4392×(R₄–0.5×(G₂+B₄))+128>

上述的方程式(1)～(6)可称为第一阶段转换。其中，方程式(1)～(6)中包含四个线性Y亮度值(Y₁～Y₄)转换编码(称为线性映像/linear>1、V₁)预测线性差值转换编码(称为DPCM)：将原DPCM值域{-255,255}转至U及V的值域{16,240}；线性映像可将各个Y值与UV值转换为与传统YUV值有相同分布，而预测线性差值则可使保有的UV值与传统UV值的特性相同，以确保原有压缩系统的压缩质量，并同时也有较佳景深解包装的质量，其中，公式(5)及(6)中的预测差值分别为D＝B₁–0.5×(R₁+G₃)及D＝R₄–0.5×(G₂+B₄)。由于转换后的YUV420格式的影像数据中舍去了U₂～U₄、V₂～V₄，因此，当利用YUV420格式的影像数据进行影像传输时可占用较少的带宽，储存时也可占用较少的内存，由此达到高效率的视频压缩与传输。

上述的方程式(5)～(6)，得依据预测差值D的分布采用线性或非线性转换编码(称为非线性映像/nonlinear mapping)差值，一般性预测差值转换公式为：

U₁＝f(B₁–0.5×(R₁+G₃))+128>

V₁＝f(R₄–0.5×(G₂+B₄))+128.>

若采用线性函数转换，则为：

f(D)＝0.4392×D(9)；

方程式(7)～(8)即为方程式(5)～(6)。若采用非线性转换，转换公式可为分段线性(piece-wise linear)函数：

另外，请参照图2B所示，其为一个实施例的影像数据由RGB格式转换为YUV422格式的示意图。

将影像数据由RGB格式转换为YUV422格式的方法中，除了得到图2A的YUV420的Y₁～Y₄、U₁与V₁之外，像素取得单元11还分别取得四像素中的另一个R次像素值(R₂)及另一个B次像素值(B₃)，且像素转换单元12还依据取得的R次像素值、G次像素值与B次像素值得到YUV格式的第二像素的U色度(U₂)值与第二像素的V色度(V₂)值。其中，Y₁～Y₄的计算式可参照上述的方程式(1)～(4)、而U₁与V₁转换的计算式可参照上述的方程式(7)～(8)，其中若转换为线性转换的计算式可参照函数方程式(9)；若为非线性转换则可参照函数方程式(10)。而第二像素的U色度值是由第二像素的R次像素值减去第一像素的R次像素值与第二像素的G次像素值的平均值后经计算而得到，第二像素的V色度值是由第三像素的B次像素值减去第三像素的G次像素值与第四像素的B次像素值的平均值后经计算而得到。

在一个实施例中，第二像素的U色度值等于第二像素的R次像素值减去第一像素的R次像素值与第二像素的G次像素值的平均值后的预测差值D经函数f(D)转换再加128，第二像素的V色度值等于第三像素的B次像素值减去第三像素的G次像值与第四像素的B次像素值的平均值后的预测差值D经函数f(D)转换再加128。换言之，

U₂＝f(R₂–0.5×(R₁+G₂))+128；>

V₂＝f(B₃–0.5×(G₃+B₄))+128；>

其中，方程式(11)及(12)的预测差值分别以D＝R₂–0.5×(R₁+G₂)及D＝B₃–0.5×(G₃+B₄)表示。若采用线性转换，则该函数f(D)为公式(9)；若采用非线性转换，则该函数f(D)为公式(10)。

上述的方程式(11)～(12)可称为第二阶段转换。因此，在YUV422格式的转换过程中，除了第一阶段的转换程序(YUV420格式)之外，还包含第二阶段转换程序。其中，方程式(1)～(4)中包含四个表示线性Y值(Y₁～Y₄)转换编码(线性映像/linear>1,U₂,V₁,V₂)预测线性差值转换编码(DPCM)。在此，转换后的YUV422格式的影像数据舍去了U₃、U₄、V₃、V₄。

另外，请参照图2C所示，其为一个实施例的影像数据由RGB格式转换为YUV444格式的示意图。

将影像数据由RGB格式转换为YUV444格式的方法中，除了得到上述的YUV422的Y₁～Y₄、U₁、U₂与V₁、V₂之外，像素取得单元11还取得四像素的其余的R次像素值、其余的G次像素值及其余的B次像素值，即R₃、G₁、G₄、B₂，且像素转换单元12还依据取得的R次像素值、G次像素值与B次像素值得到YUV格式的另两个U色度值(U₃、U₄)及另两个V色度值(V₃、V₄)，也就是四像素的YUV亮彩及色度值均得到。其中，Y₁～Y₄、U₁、U₂与V₁、V₂的计算式可参照上述的方程式(1)～(12)。另外，第三像素的U色度值是由第一像素的G次像素值减去第一像素的R次像素值与第一像素的B次像素值的平均值后的预测差值D经函数转换计算而得到，第三像素的V色度值是由第四像素的G次像素值减去第四像素的R次像素值与第四像素的B次像素值的平均值后的预测差值D经函数转换计算而得到，第四像素的U色度值是由第三像素的R次像素值减去第一像素的B次像素值与第三像素的G次像素值的平均值后的预测差值D经函数转换计算而得到，而第四像素的V色度值是由第二像素的B次像素值减去第二像素的G次像素值与第四像素的R次像素值的平均值后的预测差值D经函数转换计算而得到。

在一个实施例中，第三像素的U色度值等于第一像素的G次像素值减去第一像素的R次像素值与第一像素的B次像素值的平均值后的预测差值D经函数f(D)转换加128，第三像素的V色度值等于第四像素的G次像素值减去第四像素的R次像素值与第四像素的B次像素值的平均值后的预测差值D经函数f(D)转换加128，第四像素的U色度值等于第三像素的R次像素值减去第一像素的B次像素值与第三像素的G次像素值的平均值后的预测差值D经函数f(D)转换加128，第四像素的V色度值等于第二像素的B次像素值减去第二像素的G次像素值与第四像素的R次像素值的平均值后的预测差值D经函数f(D)转换加128。换言之，

U₃＝f(G₁–0.5×(R₁+B₁))+128；>

V₃＝f(G₄–0.5×(R₄+B₄))+128；>

U₄＝f(R₃–0.5×(B₁+G₃))+128；>

V₄＝f(B₂–0.5×(G₂+R₄))+128；(16)

其中方程式(13)、(14)、(15)及(16)的预测差值分别以D＝G₁–0.5×(R₁+B₁)，D＝G₄–0.5×(R₄+B₄)，D＝R₃–0.5×(B₁+G₃)及D＝B₂–0.5×(G₂+R₄)表示。若采用线性转换，则该函数f(D)为公式(9)；若采用非线性转换，则该函数f(D)为公式(10)。

因此，在YUV444格式的转换过程中，除了第一阶段与第二阶段的转换程序之外，还包含上述方程式(U₃、U₄、V₁、V₂)的第三阶段转换程序，其中包含了四个线性Y值(Y₁～Y₄)转换编码(线性映像/linear>1～U₄、V₁～V₄)预测线性差值转换编码(差值预测/DPCM)。

另外，再特别说明的是，请参照图2A及图2D所示，其中，图2D为影像数据由RGB格式转换为YUV420格式的另一示意图。

在图2A中，RGB或YUV格式的第一像素为左上角垂直排列的三个次像素(以1表示)，第二像素为右上角垂直排列的三个次像素(以2表示)，第三像素为左下角垂直排列的三个次像素(以3表示)，第四像素为右下角垂直排列的三个次像素(以4表示)，但在图2D中，RGB或YUV格式的第一像素为右上角垂直排列的三个次像素，第二像素为左上角垂直排列的三个次像素，第三像素为右下角垂直排列的三个次像素，第四像素为左下角垂直排列的三个次像素。

在图2D中，同样地，第一像素的Y亮度值等于0.8588乘以第一像素的R次像素值后加16，第二像素的Y亮度值等于0.8588乘以第二像素的G次像素值后加16，第三像素的Y亮度值等于0.8588乘以第三像素的G次像素值后加16，第四像素的Y亮度值等于0.8588乘以第四像素的B次像素值后加16，第一像素的U色度值等于第一像素的B次像素值减去第一像素的R次像素值与第三像素的G次像素值的平均值后的预测差值D经函数f(D)转换加128，第一像素的V色度值等于第四像素的R次像素值减去第二像素的G次像素值与第四像素的B次像素值的平均值后的预测差值D经函数f(D)转换加128。换言之，在图2D的本实施例中，第一阶段的转换为：

Y₂＝0.8588×R₂+16；>

Y₁＝0.8588×G₁+16；>

Y₄＝0.8588×G₄+16；>

Y₃＝0.8588×B₃+16；>

U₂＝f(B₂–0.5×(R₂+G₄))+128；(21)

V₂＝f(R₃–0.5×(G₁+B₃))+128；(22)

其中，方程式(21)及(22)的预测差值分别以D＝B₂–0.5×(R₂+G₄)及D＝R₃–0.5×(G₁+B₃)表示。若采用线性转换，则该函数f(D)为公式(9)；若采用非线性转换，则该函数f(D)为公式(10)。

因此，在RGB格式转换成YUV格式的过程中，本发明的取样方式是采取交错取样的方式(如图2A与图2D中的虚线所示)，以得到对应的YUV格式的次像素值；另外，本发明并不限定第一像素、第二像素、第三像素或第四像素是群组的四像素中的哪一个位置，只要符合第一像素分别与第二像素及第三像素相邻排列，且第四像素分别与第二像素及第三像素相邻排列即可。

另外，请再参照图1B并配合图3所示，其中，图3为本发明另一优选实施例的一种将影像数据由RGB格式转换为YUV格式的转换方法的流程示意图。

在本实施例中，具有RGB格式的影像数据一样包含四个相邻像素的复数群组，亦即每一个群组具有四个相邻的像素。其中，每一群组的四个像素分别为第一像素、第二像素、第三像素及第四像素，第一像素分别与第二像素及第三像素相邻排列，第四像素分别与第二像素及第三像素相邻排列。另外，本实施例之影像数据的每一个像素的R次像素、G次像素、B次像素分别为水平排列。换言之，每一个像素的R次像素、G次像素、B次像素是位于同一列中。

如图3所示，将影像数据由RGB格式转换为YUV格式的转换方法包括步骤P01至步骤P02。步骤P01为：分别取得该四像素中具有交错位置的两个R次像素值、两个G次像素值及两个B次像素值，而步骤P02为：依据取得的这些R次像素值、这些G次像素值与这些B次像素值得到YUV格式的四个Y亮度值、一个U色度值及一个V色度值；其中，在YUV格式的四像素中，第一像素的Y亮度值是由RGB格式的第一像素的R次像素值经计算而得到，第二像素的Y亮度值是由第二像素的G次像素值经计算而得到，第三像素的Y亮度值是由第三像素的G次像素值经计算而得到，第四像素的Y亮度值是由第四像素的B次像素值经计算而得到，第一像素的U色度值是由第一像素的B次像素值减去第一像素的R次像素值与第二像素的G次像素值的平均值后经计算而得到，第一像素的V色度值是由第四像素的R次像素值减去第三像素的G次像素值与第四像素的B次像素值的平均值后经计算而得到。

另外，像素取得单元11可由影像数据的每一群组中分别取得该四像素中具有交错位置的两个R次像素值、两个G次像素值及两个B次像素值，而像素转换单元12将依据取得的这些R次像素值、这些G次像素值与这些B次像素值得到YUV格式的四个Y亮度值、一个U色度值及一个V色度值。以下，将以实施例来说明图3的转换方法。

请参照图4A所示，其为一个实施例的影像数据由RGB格式转换为YUV420格式的示意图。

在本实施例中，RGB格式的各像素的次像素分别为水平排列，而转换后的YUV格式的影像数据的各次像素的数量也分别为水平排列。其中，第一像素分别与第二像素及第三像素相邻排列，且第四像素分别与第二像素及第三像素相邻排列。在图4A中，RGB或YUV格式的第一像素为左上角水平排列的三个次像素(以1表示)，第二像素为右上角水平排列的三个次像素(以2表示)，第三像素为左下角水平排列的三个次像素(以3表示)，第四像素为右下角水平排列的三个次像素(以4表示)，然并不局限于此。不过，在一些实施例中，第一像素～第四像素的位置也可以互换，只要符合第一像素分别与第二像素及第三像素相邻排列，且第四像素分别与第二像素及第三像素相邻排列即可。

将影像数据由RGB格式转换为YUV420格式的转换方法是通过像素取得单元11分别取得该四像素中具有交错位置的两个R次像素值、两个G次像素值及两个B次像素值，且依据取得的这些R次像素值、这些G次像素值与这些B次像素值得到YUV格式的四个Y亮度值、一个U色度值及一个V色度值。在一个实施例的YUV420格式的四像素中，像素取得单元11是分别取得第一像素与第四像素的R次像素值(R₁、R₄)、第二像素与第三像素的G次像素值(G₂、G₃)及第一像素与第四像素的B次像素值(B₁、B₄)，且像素转换单元12依据取得的第一像素与第四像素的R次像素值、第二像素与第三像素的G次像素值及第一像素与第四像素的B次像素值得到YUV格式的四个Y亮度值(Y₁～Y₄)、一个U色度值(U₁)及一个V色度值(V₁)。

在YUV格式的四像素中，第一像素的Y亮度值等于0.8588乘以第一像素的R次像素值后加16，第二像素的Y亮度值等于0.8588乘以第二像素的G次像素值后加16，第三像素的Y亮度值等于0.8588乘以第三像素的G次像素值后加16，第四像素的Y亮度值等于0.8588乘以第四像素的B次像素值后加16，第一像素的U色度值等于第一像素的B次像素值减去第一像素的R次像素值与第二像素的G次像素值的平均值后的预测差值D经函数f(D)转换加128，第一像素的V色度值等于第四像素的R次像素值减去第三像素的G次像素值与第四像素的B次像素值的平均值后的预测差值D经函数f(D)转换加128。换言之，

Y₁＝0.8588×R₁+16(22)；

Y₂＝0.8588×G₂+16(23)；

Y₃＝0.8588×G₃+16(24)；

Y₄＝0.8588×B₄+16(25)；

U₁＝f(B₁–0.5×(R₁+G₂))+128(26)；

V₁＝f(R₄–0.5×(G₃+B₄))+128(27)；

其中，方程式(26)及(27)的预测差值分别以D＝B₁–0.5×(R₁+G₂)及D＝R₄–0.5×(G₃+B₄)表示。若采用线性转换，则该函数f(D)为公式(9)；若采用非线性转换，则该函数f(D)为公式(10)。

上述的方程式(22)～(27)可称为第一阶段转换。其中，同样包含四个线性Y值(Y₁～Y₄)转换编码(线性映像/linear>1、V₁)预测线性差值转换编码(差值预测/DPCM)。由于转换后的YUV420格式的影像数据舍去了U₂～U₄、V₂～V₄，因此，当利用YUV420格式的影像数据进行传输时可占用较少带宽，储存时也可占用较少的内存，由此达到高效率的视频压缩与传输。

另外，请参照图4B所示，其为一个实施例的影像数据由RGB格式转换为YUV422格式的示意图。

将影像数据由RGB格式转换为YUV422格式的方法中，除了上述得到YUV420的Y₁～Y₄、U₁与V₁之外，像素取得单元11还分别取得四像素中的另一个R次像素值(R₃)及另一个B次像素值(B₂)，且像素转换单元12还依据取得的这些R次像素值、这些G次像素值与这些B次像素值得到YUV格式的第二像素的U色度(U₂)与第二像素的V色度(V₂)。其中，Y₁～Y₄可参照上方程式(22)～(25)，U₁与V₁的计算式可参照上述方程式(26)～(27)，而第二像素的U色度值是由第三像素的R次像素值减去第一像素的R次像素值与第三像素的G次像素值的平均值后的预测差值D经函数f(D)转换经计算而得到，第二像素的V色度值是由第二像素的B次像素值减去第二像素的G次像素值与第四像素的B次像素值的平均值后的预测差值D经函数f(D)转换经计算而得到。

在一个实施例中，第二像素的U色度值等于第三像素的R次像素值减去第一像素的R次像素值与第三像素的G次像素值的平均值后的预测差值D经函数f(D)转换加128，第二像素的V色度值等于第二像素的B次像素值减去第二像素的G次像素值与第四像素的B次像素值的平均值后的预测差值D经函数f(D)转换加128。换言之，

U₂＝f(R₃–0.5×(R₁+G₃))+128>

V₂＝f(B₂–0.5×(G₂+B₄))+128>

其中，方程式(28)及(29)的预测差值分别以D＝R₃–0.5×(R₁+G₃)及D＝B₂–0.5×(G₂+B₄)表示。若采用线性转换，则该函数f(D)为公式(9)；若采用非线性转换，则该函数f(D)为公式(10)。

上述的方程式(28)～(29)可称为第二阶段转换。上述的方程式(9)～(16)中同样包含四个线性Y值(Y₁～Y₄)转换编码(线性映像/linear>1～U₂、V₁～V₂)预测线性差值转换编码(差值预测/DPCM)。由于转换后的YUV422格式的影像数据舍去了U₃～U₄、V₃～V₄，因此，当利用YUV422格式的影像数据进行影像传输时也可占用较少带宽，储存时也可占用较少的内存，由此也可达到高效率的视频压缩与传输。

另外，请参照图4C所示，其为一个实施例的影像数据由RGB格式转换为YUV444格式的示意图。

将影像数据由RGB格式转换为YUV444格式的方法中，除了上述得到YUV422的Y₁～Y₄、U₁、U₂与V₁、V₂之外，像素取得单元11还分别取得四像素的其余的R次像素值、其余的G次像素值及其余的B次像素值，即R₂、G₁、G₄、B₃，且像素转换单元12还依据取得的这些R次像素值、这些G次像素值与这些B次像素值得到YUV格式的另两个U色度值及另两个V色度值，即U₃、U₄、V₃、V₄，也就是四像素的YUV格式的次像素值均全部得到。其中，Y₁～Y₄、U₁、U₂与V₁、V₂的计算式可参照上述方程式(22)～(29)。另外，第三像素的U色度值是由第一像素的G次像素值减去第一像素的R次像素值与第一像素的B次像素值的平均值后的预测差值D经函数f(D)转换经计算而得到，第三像素的V色度值是由第四像素的G次像素值减去第四像素的R次像素值与第四像素的B次像素值的平均值后的预测差值D经函数f(D)转换经计算而得到，第四像素的U色度值是由第二像素的R次像素值减去第一像素的B次像素值与第二像素的G次像素值的平均值后的预测差值D经函数f(D)转换经计算而得到，第四像素的V色度值是由第三像素的B次像素值减去第三像素的G次像素值与第四像素的R次像素值的平均值的预测差值D经函数f(D)转换后经计算而得到。

在一个实施例中，第三像素的U色度值等于第一像素的G次像素值减去第一像素的R次像素值与第一像素的B次像素值的平均值后的预测差值D经函数f(D)转换加128，第三像素的V色度值等于第四像素的G次像素值减去第四像素的R次像素值与第四像素的B次像素值的平均值后的预测差值D经函数f(D)转换加128，第四像素的U色度值等于第二像素的R次像素值减去第一像素的B次像素值与第二像素的G次像素值的平均值后的预测差值D经函数f(D)转换加128，第四像素的V色度值等于第三像素的B次像素值减去第三像素的G次像素值与第四像素的R次像素值的平均值后的预测差值D经函数f(D)转换加128。换言之，

U₃＝f(G₁–0.5×(R₁+B₁))+128；(30)

V₃＝f(G₄–0.5×(R₄+B₄))+128；(31)

U₄＝f(R₂–0.5×(B₁+G₂))+128；(32)

V₄＝f(B₃–0.5×(G₃+R₄))+128；(33)

其中，方程式(30)、(31)、(32)及(33)的预测差值分别以D＝G₁–0.5×(R₁+B₁)，D＝G₄–0.5(R₄+B₄)，D＝R₂–0.5×(B₁+G₂)、及D＝B₃–0.5×(G₃+R₄)表示。若采用线性转换，则该函数f(D)为公式(9)；若采用非线性转换，则该函数f(D)为公式(10)。

因此，在YUV444格式的转换过程中，除了第一阶段与第二阶段的转换程序之外，还包含上述方程式(U₃、U₄、V₃、V₄)的第三阶段转换程序，其中包含了四个线性Y值(Y₁～Y₄)转换编码(线性映像/linear>1～U₄、V₁～V₄)预测线性差值转换编码(差值预测/DPCM)。

此外，在上述三阶段编码程序中，若只需要YUV420格式时，只要执行完第一阶段编码程序即可，若需要YUV422格式时，则需执行完第一阶段与第二阶段编码程序即可，若需要YUV424格式时，则要执行完三个阶段的编码程序。

另外，请参照图5A及图5B所示，其中，图5A为本发明优选实施例的一种将影像数据由YUV格式转换为RGB格式的转换方法的流程示意图，而图5B为本发明优选实施例的一种将影像数据由YUV格式转换为RGB格式的转换电路1a的功能方块示意图。在此，图5A的转换方法可称为图1A由RGB格式转换为YUV格式的反转换方法或还原方法。

同样地，影像数据例如但不限于为景深帧，并具有YUV格式，经本技术的转换方法与转换电路1a转换后可得到RGB格式的影像数据。其中，YUV格式包括Y亮度、U色度与V色度，RGB格式包括R次像素、G次像素与B次像素。在本实施例中，具YUV格式的影像数据包含四个相邻像素的复数群组，亦即每一个群组具有四个相邻的像素。因此，以下是将影像数据中所有群组的四像素都由YUV格式转换成RGB格式。其中，每一群组的四个像素分别为第一像素、第二像素、第三像素及第四像素，第一像素分别与第二像素及第三像素相邻排列，且第四像素分别与第二像素及第三像素相邻排列。另外，每一个像素的Y亮度值、U色度值、V色度值分别为垂直排列。换言之，每一个像素的Y亮度值、U色度值、V色度值是位于同一行中。

如图5A所示，将影像数据由YUV格式转换为RGB格式的转换方法包括步骤Q01至步骤Q02。步骤Q01为：分别取得该四像素的四个Y亮度值、一个U色度值及一个V色度值，而步骤Q02为：依据取得的这些Y亮度值、该U色度值与该V色度值得到RGB格式的两个R次像素值、两个G次像素值及两个B次像素值；其中，在RGB格式的该四像素中，该第一像素的R次像素值是由该第一像素的Y亮度值经计算而得到，该第二像素的G次像素值是由该第二像素的Y亮度值经计算而得到，该第三像素的G次像素值是由该第三像素的Y亮度值经计算而得到，该第四像素的B次像素值是由该第四像素的Y亮度值经计算而得到，该第一像素的B次像素值是由该第一像素的U色度值及该第一像素的R次像素值与该第三像素的G次像素值的平均值经计算而得到，该第四像素的R次像素值是由该第一像素的V色度值及该第二像素的G次像素值与该第四像素的B次像素值的平均值经计算而得到。

另外，如图5B所示，转换电路1a包括像素取得单元11a及像素转换单元12a，像素取得单元11a与像素转换单元12a电性连接。其中，像素取得单元11a可由影像数据的每一群组中分别取得该四像素的四个Y亮度值、一个U色度值及一个V色度值，而像素转换单元12a可依据取得的这些Y亮度值、该U色度值与该V色度值得到RGB格式的两个R次像素值、两个G次像素值及两个B次像素值。

像素取得单元11a可依据转换需求分别取得每一群组转换时对应所需的Y亮度值、U色度值与V色度值，且像素转换单元12a将取得的Y亮度值、U色度值与V色度值转换而得到RGB格式。在一些实施例中，像素转换单元12a可将一个群组的四像素转换得到RGB格式后就储存至同一群组的第一像素、第二像素、第三像素及第四像素的对应位置中；或者，在另一些实施例中，像素转换单元12a也可将所有的群组的四像素全部转换而得到RGB格式后，再全部储存至对应群组的第一像素、第二像素、第三像素及第四像素的对应位置中，并不限定。此外，存储单元(图未示)可分别与像素取得单元11a及像素转换单元12a电性连接，并可储存转换前与转换后的影像数据。将以以下的实施例来说明上述的转换方法。

请参照图6A所示，其为一个实施例的影像数据由YUV422格式转换为RGB格式的示意图。

在YUV422格式的本实施例中，各群组的各像素的Y亮度值、U色度值及V色度值分别为垂直排列(位于同一行中)，而转换后的RGB格式的影像数据的各像素的R、G、B次像素也分别为垂直排列。在图6A中，RGB或YUV格式的第一像素为左上角垂直排列的三个次像素(以1表示)，第二像素为左上角垂直排列的三个次像素(以2表示)，第三像素为左下角垂直排列的三个次像素(以3表示)，第四像素为左下角垂直排列的三个次像素(以4表示)，然而并不局限于此。不过，在一些实施例中，第一像素～第四像素的位置也可以互换，只要符合第一像素分别与第二像素及第三像素相邻排列，且第四像素分别与第二像素及第三像素相邻排列即可。

由于本实施例是由YUV422格式转换为RGB格式，因此在图6A的YUV422格式中，各群组的四像素只有Y₁～Y₄、U₁、V₁、U₂、V₂等次像素位置有对应的次像素值，U₃～U₄、V₃～V₄的位置并不存在次像素值(缺，以整个圆圈显示有斜线面表示)。

在本实施例中，将影像数据由YUV422格式转换为RGB格式的转换方法是通过像素取得单元11a分别取得四像素的四个Y亮度值、一个U色度值及一个V色度值，且像素转换单元12a依据取得的这些Y亮度值、该U色度值与该V色度值得到RGB格式的两个R次像素值、两个G次像素值及两个B次像素值。

在一个实施例的YUV422格式的四像素中，像素取得单元11a是分别取得第一像素至第四像素的Y亮度值(Y₁～Y₄)、第一像素的U色度值(U₁)及第一像素V色度值(V₁)，且像素转换单元12a依据取得的第一像素至第四像素的Y亮度值(Y₁～Y₄)、第一像素的U色度值(U₁)及第一像素V色度值(V₁)得到第一像素与第四像素的R次像素值(R₁、R₄)、第二像素与第三像素的G次像素值(G₂、G₃)及第一像素与第四像素的B次像素值(B₁、B₄)。其中，在RGB格式的该四像素中，第一像素的R次像素值是由该第一像素的Y亮度值经计算而得到，第二像素的G次像素值是由第二像素的Y亮度值经计算而得到，第三像素的G次像素值是由第三像素的Y亮度值经计算而得到，第四像素的B次像素值是由第四像素的Y亮度值经计算而得到，第一像素的B次像素值是由第一像素的U色度值及第一像素的R次像素值与第三像素的G次像素值的平均值经计算而得到，第四像素的R次像素值是由第一像素的V色度值及第二像素的G次像素值与第四像素的B次像素值的平均值经计算而得到。

在一个实施例中，第一像素的R次像素值等于第一像素的Y亮度值减去16后乘以1.1644，第二像素的G次像素值等于第二像素的Y亮度值减去16后乘以1.1644，第三像素的G次像素值等于第三像素的Y亮度值减去16后乘以1.1644，第四像素的B次像素值等于第四像素的Y亮度值减去16后乘以1.1644，第一像素的B次像素值等于第一像素的U色度值减去128后乘以2.2768，再加上第一像素的R次像素值与第三像素的G次像素值的平均值，第四像素的R次像素值等于第一像素的V色度值减去128后乘以2.2768，再加上第二像素的G次像素值与第四像素的B次像素值的平均值。换言之，

R₁＝1.1644×(Y₁–16)；(34)

G₂＝1.1644×(Y₂–16)；(35)

G₃＝1.1644×(Y₃–16)；(36)

B₄＝1.1644×(Y₄–16)；(37)

B₁＝2.2768×(U₁–128)+0.5×(R₁+G₃)；>

R₄＝2.2768×(V₁–128)+0.5×(G₂+B₄)；>

在此称为第一阶段反转换，其包含四个线性反转换编码(R₁、G₂、G₃、B₄)，即线性映像(linear>1、R₄)，即差值预测(DPCM)。因此，由YUV420格式反转换成RGB格式时，需完成第一阶段反转换程序。

上述的方程式(38)～(39)的预测线性差值线性反转换中，反转换可依据原预测差值线性或非线性转换编码且采用对应于线性或非线性的反转换编码，其中，反转换可用一般性反转换编码公式如下所示：

B₁＝g(U₁)+0.5×(R₁+G₃)；(40)

R₄＝g(V₁)+0.5×(G₂+B₄)；(41)

其中，g(C)为色度值C的一般性反转换编码函数。若原包装程序采用预测差值为公式(9)的线性转换，则色度值C的解包装必须采用以下的线性反转换编码函数：

g(C)＝2.2769×(C-128)，(42)

此时方程式(40)～(41)即为方程式(38)～(39)。若原包装程序采用预测差值为公式(10)的非线性转换，则其解包装必须采用非线性反转换编码，其色度值C的反转换编码公式则为分段线性(piece-wise linear)反函数：

另外，在本实施例中，像素取得单元11a还分别取得各群组的四像素中的另一个U色度值及另一个V色度值，且像素转换单元12a还依据取得的该另一个U色度值、该另一个V色度值及得到的R次像素值、G次像素值与B次像素值得到另一个R次像素值及另一个B次像素值。在此，像素取得单元11a还取得第二像素的U色度值(U₂)及第二像素的V色度值(V₂)，且像素转换单元12a还依据取得的第二像素的U色度值(U₂)、第二像素的V色度值(V₂)及之前得到的第一像素的R次像素值(R₁)、第二像素与第三像素的G次像素值(G₂、G₃)与第四像素的B次像素值(B₄)，得到第二像素的R次像素值(R₂)及第三像素的B次像素值(B₃)。

其中，第二像素的R次像素值是由第二像素的U色度值及第一像素的R次像素值与第二像素的G次像素值的平均值经计算而得到，第三像素的B次像素值是由第二像素的V色度值及第三像素的G次像素值与第四像素的B次像素值的平均值经计算而得到。具体而言，第二像素的R次像素值等于第二像素的U色度值取反函数g(U₂)，再加上第一像素的R次像素值与第二像素的G次像素值的平均值，第三像素的B次像素值等于第二像素的V色度值取反函数g(V₂)，再加上第三像素的G次像素值与第四像素的B次像素值的平均值。换言之，

R₂＝g(U₂)+0.5×(R₁+G₂)；>

B₃＝g(V₂)+0.5×(G₃+B₄)；>

若原包装程序的预测差值D采用公式(9)的线性转换f(D)，则解包装必须将色度值C等于U₂或V₂且以公式(42)的线性反函数g(C)计算线性反转换。若原包装程序的预测差值D采用公式(10)的非线性转换f(D)，则解包装必须将色度值C以公式(43)的非线性反函数g(C)以计算非线性反转换。

在此称为第二阶段反转换，其包含两个预测线性差值反转换编码(R₂、B₃)。因此，由YUV422格式反转换成RGB格式时，需完成第一阶段与第二阶段反转换程序。

不过，由于YUV422格式中没有U₃～U₄、V₃～V₄，因此，通过上述的方程式转换成RGB格式后，如图6A所示，各群组四像素的RGB格式中将缺少G₁、B₂、R₃、G₄等次像素。因此，为了补齐各群组的四像素中的G₁、B₂、R₃、G₄次像素值，在一个实施例中，像素转换单元12a还使用了一种平均内插解码方法求出四个未知值(G₁、B₂、R₃、G₄)(在此称为第一种)。其中，第一像素的G次像素值等于与第一像素的G次像素值相邻的所有次像素值的平均值，第二像素的B次像素值等于与第二像素的B次像素值相邻的所有次像素值的平均值，第三像素的R次像素值等于与第三像素的R次像素值相邻的所有次像素值的平均值，第四像素的G次像素值等于与第四像素的G次像素值相邻的所有次像素值的平均值。

具体而言，若该未知的次像素为影像数据边缘的次像素时，则该未知的次像素为相邻三个次像素位置的次像素值的平均；若该未知的次像素为影像数据边的内部次像素(非位于边缘位置的群组)时，则该未知的次像素为相邻四个次像素位置的次像素值的平均。例如图6A所示，

G₁＝0.3333(R₁+G₂+B₁)(46)；

B₂＝0.250(B₁+R₄+B’₁+G₂)>

R₃＝0.3333(B₁+R₄+G₃)(48)；

G₄＝0.250(R₄+G₃+B₄+G’₃)>

G’₁＝0.250(R’₁+G₂+B’₁+G’₂)>

经由上述的平均内插解码方式可补齐RGB格式中，每一群组四像素中所有缺少的次像素值(G₁、B₂、R₃、G₄)，使得RGB格式的影像数据可完整。

另外，在另一个实施例中，像素转换单元12a还可使用另一种平均内插解码方法求出四个未知值(G₁、B₂、R₃、G₄)(在此称为第二种)。其中，3D影像生成系统可通过彩色帧(2D影像数据)产生与该彩色帧对应的景深帧，因此，景深帧与彩色帧为对应关系，亦即景深帧中的某一位置的次像素可对应至彩色帧对应位置的次像素。如图6B所示，景深帧中的次像素D_X可对应至彩色帧的次像素I_X，景深帧中的次像素D_T可对应至彩色帧的次像素I_T、…。

因此，在另一实施例中，第一像素的G次像素值是依据景深帧中与第一像素的G次像素值相邻的所有次像素值，以及彩色帧中与第一像素的G次像素值对应位置的次像素的相邻的所有次像素值经计算而得到，第二像素的B次像素值是依据景深帧中与第二像素的B次像素值相邻的所有次像素值，以及彩色帧中与第二像素的B次像素值对应位置的次像素的相邻的所有次像素值经计算而得到，第三像素的R次像素值是依据景深帧中与第三像素的R次像素值相邻的所有次像素值，以及彩色帧中与第三像素的R次像素值对应位置的次像素的相邻的所有次像素值经计算而得到，第四像素的G次像素值是依据景深帧中与第四像素的G次像素值相邻的所有次像素值，以及彩色帧中第四像素的G次像素值对应位置的次像素的相邻的所有次像素值经计算而得到。

请再参照图6A所示，以G1为例(G1为边缘的次像素)，其计算过程如下所示：G1相邻次像素R1、B1、G2的中位数为D，即D＝median(R1，B1，G2)；而Cost_color定义为[|IR1-IG1|，|IB1-IG1|，|IG2-IG1|]，其中，I为彩色帧中对应于景深帧位置的次像素值，假设Cost_color得到的值依序为1a、1b、1c；另外Cost_depth定义为[|R1-D|，|B1-D|，|G2-D|]，假设Cost_depth得到的值依序为2a、2b、2c，再将Cost_color的值对应加上Cost_depth的值，可得到三个值，即(1a+1b)、(2a+2b)、(3a+3b)，再取这三个值的中位数而得到D’；其中，若(1a+1b)≦D’，则保留次像素值R1，否则舍去R1；若(2a+2b)≦D’，则保留次像素值B1，否则舍去B1；若(3a+3b)≦D’，则保留次像素值G2，否则舍去G2；再取保留的次像素值的平均值作为G1的次像素值。

再以B₂为例(B₂为内部的次像素)，其计算过程如下所示：B₂相邻次像素G₂、R₄、B₁、B₁’的中位数为D，即D＝median(G₂，R₄，B₁，B₁’)；Cost_color定义为[|I_G2-I_B2|，|I_R4-I_B2|，|I_B1-I_B2|，|I_B1’-I_B2|]，假设Cost_color得到的值依序为1a、1b、1c、1d；而Cost_depth定义为[|G₂-D|，|R₄-D|，|B₁-D|，|B₁’-D|]，假设Cost_depth得到的值依序为2a、2b、2c、2d，再将Cost_color的值对应加上Cost_depth的值，可得到四个值：(1a+1b)、(2a+2b)、(3a+3b)、(4a+4b)，再取这四个值的中位数而得到D’；同样地，若(1a+1b)、(2a+2b)、(3a+3b)或(4a+4b)≦D’时，则保留该次像素值，否则就舍去，再取保留次像素值的平均值作为B₂的次像素值。此外，未知的次像素R₃、G₄的值可以此类推而得到。由此可得到四个未知值(G₁、B₂、R₃、G₄)。

另外，请参照图6C所示，其为一个实施例的影像数据由YUV420格式转换为RGB格式的示意图。

在YUV420格式的本实施例中，各群组的各像素的Y亮度值、U色度值及V色度值分别为垂直排列(位于同一行中)，而转换后的RGB格式的影像数据的各像素的R、G、B次像素也分别为垂直排列。另外，在一些实施例中，第一像素～第四像素的位置也可以互换，只要符合第一像素分别与第二像素及第三像素相邻排列，且第四像素分别与第二像素及第三像素相邻排列即可。

由于本实施例是由YUV420格式转换为RGB格式，因此在图6C的YUV420格式中，只有Y₁～Y₄亮度及U₁、V₁色度位置有对应的次像素值，U₂～U₄、V₂～V₄的位置并不存在有色度值(缺)。因此，除了各群组四像素中将缺少上述的G₁、B₂、R₃、G₄等次像素外，更缺少R₂、B₃等次像素。因此，除了上述利用二种平均内插解码方式求出四个未知值(G₁、B₂、R₃、G₄)等次像素(例如上述方程式(46)～(50))外，还可利用与上述方法相同的二种平均内插解码方式求出另两个未知值：R₂、B₃。

在一个实施例的第一种平均内插解码方法中，第二像素的R次像素值等于与第二像素的R次像素值相邻的所有次像素值的平均值，第三像素的B次像素值等于与第三像素的B次像素值相邻的所有次像素值的平均值。

同样地，若该未知的次像素为影像数据边缘的次像素时，则该未知的次像素为相邻的次像素值的三点平均；若该未知的次像素为影像数据边的内部次像素(非位于外侧边缘)时，则该未知的次像素为的相邻次像素值的四点平均。例如图6C所示，

R₂＝0.3333(R₁+G₂+R’₁)；

B₃＝0.3333(G₃+B₄+R”₁)；

B’₃＝0.250(G’₃+B₄+R”’₁+B’₄)；以此类推。

或者，在另一实施例的第二种平均内插解码方法中，第二像素的R次像素值是依据景深帧中与第二像素的R次像素值相邻的所有次像素值，以及彩色帧中与第二像素的R次像素值对应位置的次像素的相邻的所有次像素值经计算而得到，第三像素的B次像素值是依据景深帧中与第三像素的B次像素值相邻的所有次像素值，以及彩色帧中与第三像素的B次像素值对应位置的次像素的相邻的所有次像素值经计算而得到。其计算方法可参照上述，在此不再赘述。

因此，为了补齐各群组的四像素中的R、G、B次像素值，本案的像素转换单元12a可使用二种平均内插解码方式求出六个未知值(G₁、B₂、R₃、G₄、R₂、B₃)。

另外，在另一实施例中，若要将YUV444格式的影像数据转换成RGB格式时，由于YUV444格式的影像数据的每一群组的四像素的Y亮度值、U色度值、V色度值都有，因此，除了上述YUV422格式中转换得到的R₁、G₂、G₃、B₄、B₁、R₄、R₂与B₃等次像素之外(完成上述的第一阶段与第二阶段反转换程序)，像素取得单元11a还分别取得四像素其余的U色度值(U₃、U₄)及其余的V色度值(V₃、V₄)，且像素转换单元12a还依据取得的这些U色度值、这些V色度值及得到的R次像素值、G次像素值与B次像素值，得到其余的R次像素值(R₃)、其余的G次像素值(G₁、G₄)及其余的B次像素值(B₂)；其中，第一像素的G次像素值是由第三像素的U色度值及第一像素的R次像素值与第一像素的B次像素值的平均值经计算而得到，第四像素的G次像素值是由第三像素的V色度值及第四像素的R次像素值与第四像素的B次像素值的平均值经计算而得到，第三像素的R次像素值是由第四像素的U色度值及第一像素的B次像素值与第三像素的G次像素值的平均值经计算而得到，第二像素的B次像素值是由第四像素的V色度值及第二像素的G次像素值与第四像素的R次像素值的平均值经计算而得到。

在一个实施例中，第一像素的G次像素值等于第三像素的U色度值取反函数g(U₃)，再加上第一像素的R次像素值与第一像素的B次像素值的平均值，第四像素的G次像素值等于第三像素的V色度值取反函数g(V₃)，再加上第四像素的R次像素值与第四像素的B次像素值的平均值，第三像素的R次像素值等于第四像素的U色度值取反函数g(U₄)，再加上第一像素的B次像素值与第三像素的G次像素值的平均值，第二像素的B次像素值等于第四像素的V色度值取反函数g(V₄)，再加上第二像素的G次像素值与第四像素的R次像素值的平均值。具体而言，

G₁＝g(U₃)+0.5×(R₁+B₁)；

G₄＝g(V₃)+0.5×(R₄+B₄)；

R₃＝g(U₄)+0.5×(B₁+G₃)；

B₂＝g(V₄)+0.5×(G₂+R₄)；

若原包装程序的预测差值D采用公式(9)的线性转换f(D)，则解包装必须将色度值C等于U₃、V₃、U₄或V₄以公式(42)的线性反函数g(C)计算线性反转换。若原包装程序的预测差值D采用公式(10)的非线性转换f(D)，则解包装必须将色度值C以公式(43)的非线性反函数g(C)以计算非线性反转换。

在此称为第三阶段反转换，其包含四个预测线性差值反转换编码(G₁、G₄、R₃、B₂)。因此，由YUV444格式反转换成RGB格式时，需完成上述的第一阶段、第二阶段与第三阶段反转换程序。

另外，请再参照图5B及图7所示，其中，图7为本发明优选实施例的一种将影像数据由YUV格式转换为RGB格式的转换方法的另一流程示意图。

影像数据例如但不限于为景深帧的影像数据，并具有YUV格式，经转换电路1a转换后可得到RGB格式的影像数据。在本实施例中，具YUV格式的影像数据包含四个相邻像素的复数群组，亦即每一个群组具有四个相邻的像素。因此，以下是将影像数据中所有群组的四像素都由RGB格式转换成YUV格式。其中，每一群组的四个像素分别为第一像素、第二像素、第三像素及第四像素，第一像素分别与第二像素及第三像素相邻排列，且第四像素分别与第二像素及第三像素相邻排列。另外，每一个像素的Y亮度值、U色度值、V色度值分别为水平排列。换言之，每一个像素的Y亮度值、U色度值、V色度值是位于同一列中(水平方向)。

如图7所示，将影像数据由YUV格式转换为RGB格式的转换方法包括步骤R01至步骤R02。步骤R01为：分别取得四像素的四个Y亮度值、一个U色度值及一个V色度值，而步骤R02为：依据取得的这些Y亮度值、U色度值与V色度值得到RGB格式的两个R次像素值、两个G次像素值及两个B次像素值；其中，在RGB格式的四像素中，第一像素的R次像素值是由第一像素的Y亮度值经计算而得到，第二像素的G次像素值是由第二像素的Y亮度值经计算而得，第三像素的G次像素值是由第三像素的Y亮度值经计算而得到，第四像素的B次像素值是由第四像素的Y亮度值经计算而得到，第一像素的B次像素值是由第一像素的U色度值及第一像素的R次像素值与第二像素的G次像素值的平均值经计算而得到，第四像素的R次像素值是由第一像素的V色度值及第三像素的G次像素值与第四像素的B次像素值的平均值经计算而得到。

另外，像素取得单元11a可由影像数据的每一群组中分别取得四像素的四个Y亮度值、一个U色度值及一个V色度值，而像素转换单元12a依据取得的这些Y亮度值、该U色度值与该V色度值得到RGB格式的两个R次像素值、两个G次像素值及两个B次像素值。在一个实施例中，转换电路1a可包含例如可以加/减法器及乘/除法器。

像素取得单元11a可依据转换需求分别取得每一群组转换时对应所需的Y亮度值、U色度值与V色度值，且像素转换单元12a将取得的Y亮度值、U色度值与V色度值转换而得到RGB格式。以下，将以实施例来说明上述的转换方法。

请参照图8A所示，其为一个实施例的影像数据由YUV422格式转换为RGB格式的示意图。在此，在YUV422的格式中，各群组的各像素的Y亮度值及U色度值、V色度值分别为水平排列(位于同一列中)，而转转换后的RGB格式的影像数据的各像素的R、G、B次像素也分别为水平排列。不过，在一些实施例中，第一像素～第四像素的位置也可以互换，只要符合第一像素分别与第二像素及第三像素相邻排列，且第四像素分别与第二像素及第三像素相邻排列即可。

由于本实施例是由YUV422格式转换为RGB格式，因此在图8A的YUV422格式中，只有Y₁～Y₄亮度值及U₁、V₁、U₂、V₂等色度值的位置有对应的次像素值，U₃～U₄、V₃～V₄的位置并不存在有色度值(缺)。

在本实施例中，将影像数据由YUV格式转换为RGB格式的转换方法是通过像素取得单元11a分别取得四像素的四个Y亮度值、一个U色度值及一个V色度值，且像素转换单元12a依据取得的这些Y亮色度值、U色度值与V色度值得到RGB格式的两个R次像素值、两个G次像素值及两个B次像素值。在一个实施例的YUV422格式的四像素中，像素取得单元11a是分别取得第一像素至第四像素的Y亮度值(Y₁～Y₄)、第一像素的U色度值(U₁)及第一像素V色度值(V₁)，且像素转换单元12a依据取得的第一像素至第四像素的Y亮度值(Y₁～Y₄)、第一像素的U色度值(U₁)及第一像素V色度值(V₁)得到第一像素与第四像素的R次像素值(R₁、R₄)、第二像素与第三像素的G次像素值(G₂、G₃)及第一像素与第四像素的B次像素值(B₁、B₄)。其中，在RGB格式的四像素中，第一像素的R次像素值是由第一像素的Y亮度值经计算而得到，第二像素的G次像素值是由第二像素的Y亮度值经计算而得到，第三像素的G次像素值是由第三像素的Y亮度值经计算而得到，第四像素的B次像素值是由第四像素的Y亮度值经计算而得到，第一像素的B次像素值是由第一像素的U色度值及第一像素的R次像素值与第二像素的G次像素值的平均值经计算而得到，第四像素的R次像素值是由第一像素的V色度值及第三像素的G次像素值与第四像素的B次像素值的平均值经计算而得到。

在一个实施例中，第一像素的R次像素值等于第一像素的Y亮度值减去16后乘以1.1644，第二像素的G次像素值等于第二像素的Y亮度值减去16后乘以1.1644，第三像素的G次像素值等于第三像素的Y亮度值减去16后乘以1.1644，第四像素的B次像素值等于第四像素的Y亮度减去16后乘以1.1644，第一像素的B次像素值等于第一像素的U色度值取反函数g(U₁)，再加上第一像素的R次像素值与第二像素的G次像素值的平均值，第四像素的R次像素值等于第一像素的V色度值取反函数g(V₁)，再加上第三像素的G次像素值与第四像素的B次像素值的平均值。换言之，

R₁＝1.1644×(Y₁–16)；

G₂＝1.1644×(Y₂–16)；

G₃＝1.1644×(Y₃–16)；

B₄＝1.1644×(Y4–16)；

B₁＝g(U₁)+0.5×(R₁+G₂)；

R₄＝g(V₁)+0.5×(G₃+B₄)；

若原包装程序的预测差值D采用公式(9)的线性转换f(D)，则解包装必须将色度值C等于U₂或V₂以公式(42)的线性反函数g(C)计算线性反转换。若原包装程序的预测差值D采用公式(10)的非线性转换f(D)，则解包装必须将色度值C以公式(43)的非线性反函数g(C)以计算非线性反转换。

在此也称为第一阶段反转换，其包含四个线性反转换编码(R₁、G₂、G₃、B₄)及两个预测线性差值反转换编码(B₁、R₄)。因此，由YUV420格式反转换成RGB格式时，需完成第一阶段反转换程序。

另外，在本实施例中，像素取得单元11a还分别取得各群组的四像素中的另一个U色度值及另一个V色度值，且像素转换单元12a还依据依据取得的该另一个U色度值、该另一个V色度值及上述得到的R次像素值、G次像素值与B次像素值，得到另一个R次像素值及另一个B次像素值。在此，像素取得单元11a还取得第二像素的U色度值(U₂)及第二像素的V色度值(V₂)，且像素转换单元12a还依据取得的第二像素的U色度值(U₂)、第二像素的V色度值(V₂)及之前得到的第一像素的R次像素值(R₁)、第二像素与第三像素的G次像素值(G₂、G₃)与第四像素的B次像素值(B₄)，得到第三像素的R次像素值(R₃)及第二像素的B次像素值(B₂)。其中，第三像素的R次像素值是由第二像素的U色度值及第一像素的R次像素值与第三像素的G次像素值的平均值经计算而得到，第二像素的B次像素值是由第二像素的V色度值及第二像素的G次像素值与第四像素的B次像素值的平均值经计算而得到。

具体而言，第三像素的R次像素值等于第二像素的U色度值取反函数g(U₂)，再加上第一像素的R次像素值与第三像素的G次像素值的平均值，第二像素的B次像素值等于第二像素的V色度值取反函数g(V₂)，再加上第二像素的G次像素值与第四像素的B次像素值的平均值。换言之，

R₃＝g(U₂)+0.5×(R₁+G₃)；

B₂＝g(V₂)+0.5×(G₂+B₄)；

若原包装程序的预测差值D采用公式(9)的线性转换f(D)，则解包装必须将色度值C等于U₂或V₂以公式(42)的线性反函数g(C)计算线性反转换。若原包装程序的预测差值D采用公式(10)的非线性转换f(D)，则解包装必须将色度值C以公式(43)的非线性反函数g(C)以计算非线性反转换。

在此称为第二阶段反转换程序，其包含两个预测线性差值反转换编码(R₃、B₂)。因此，由YUV422格式反转换成RGB格式时，需完成第一阶段与第二阶段反转换程序。

不过，由于YUV422格式的影像数据缺少U₃～U₄、V₃～V₄，因此，通过上述的方程式转换成RGB格式后，各群组四像素中将缺少G₁、B₃、R₂、G₄等次像素。因此，为了补齐各群组的四像素中的R、G、B次像素值，在一个实施例中，像素转换单元12a还使用第一种平均内插解码方式求出四个未知值(G₁、B₃、R₂、G₄)。其中，第一像素的G次像素值等于与第一像素的G次像素值相邻的所有次像素值的平均值，第三像素的B次像素值等于与第三像素的B次像素值相邻的所有次像素值的平均值，第二像素的R次像素值等于与第二像素的R次像素值相邻的所有次像素值的平均值，第四像素的G次像素值等于与第四像素的G次像素值相邻的所有次像素值的平均值。

具体而言，若该未知的次像素为影像数据边缘的次像素时，则该未知的次像素为相邻的次像素值的三点平均；若该未知的次像素为影像数据边的内部次像素(非位于外侧边缘)时，则该未知的次像素为相邻四次像素值的四点平均。例如图8A所示，

G₁＝0.3333(R₁+G₃+B₁)；

B₃＝0.250(B₁+G₃+B’₁+R₄)；

R₂＝0.3333(B₁+G₂+R₄)；

G₄＝0.250(R₄+G’₂+B₄+G₂)；

G’₁＝0.250(R’₁+G’₃+B’₁+G₃)；以此类推。

经由上述的平均内插解码方式可补齐RGB格式中，每一群组四像素所缺少的次像素(G₁、B₃、R₂、G₄)，以得完整的RGB格式的影像数据。

另外，在另一实施例中，像素转换单元12a还使用第二种平均内插解码方法求出四个未知值(G1、B3、R2、G4)。其中，3D影像生成系统可通过彩色帧(2D影像数据)产生与该彩色帧对应的景深帧，因此，景深帧与彩色帧为对应关系，亦即景深帧中的某一位置的次像素可对应至彩色帧对应位置的次像素。

因此，在像素转换单元12a中，第一像素的G次像素值是依据景深帧中与第一像素的G次像素值相邻的所有次像素值，以及彩色帧中与第一像素的G次像素值对应位置的次像素的相邻的所有次像素值经计算而得到，第三像素的B次像素值是依据景深帧中与第三像素的B次像素值相邻的所有次像素值，以及彩色帧中与第三像素的B次像素值对应位置的次像素的相邻的所有次像素值经计算而得到，第二像素的R次像素值是依据景深帧中与第二像素的R次像素值相邻的所有次像素值，以及彩色帧中与第二像素的R次像素值对应位置的次像素的相邻的所有次像素值经计算而得到，第四像素的G次像素值是依据景深帧中与第四像素的G次像素值相邻的所有次像素值，以及彩色帧中第四像素的G次像素值对应位置的次像素的相邻的所有次像素值经计算而得到。其计算方法可参照上述，在此不再赘述。

另外，请参照图8B所示，其为一个实施例的影像数据由YUV420格式转换为RGB格式的示意图。

由于本实施例是由YUV420格式转换为RGB格式，因此在图8B的YUV420格式中，只有Y1～Y4亮度值及U1色度值、V1色度值的位置有对应的次像素值，U2～U4、V2～V4的位置并不存在次像素值(缺)。因此，除了各群组四像素中将缺少图8A的G1、B3、R2、G4等次像素外，更缺少R3、B2。因此，除了上述利用二种平均内插解码方式求出四个未知值(G1、B3、R2、G4)等次像素，还可利用与上述方法相同的二种平均内插解码方式求出另两个未知值(R3、B2)等次像素。在一个实施例的第一种平均内插解码方法中，第三像素的R次像素值等于与第三像素的R次像素值相邻的所有次像素值的平均值，第二像素的B次像素值等于与第二像素的B次像素值相邻的所有次像素值的平均值。例如图8B所示，

R₃＝0.3333(R₁+G₃+R’₁)；

B₂＝0.3333(G₂+B₄+R”₁)；

B’₂＝0.250(G’₂+B”₄+R”’₁+B₄)；以此类推。

或者，在另一实施例的第二种平均内插解码方法中，第三像素的R次像素值是依据景深帧中与第三像素的R次像素值相邻的所有次像素值，以及彩色帧中与第三像素的R次像素值对应位置的次像素的相邻的所有次像素值经计算而得到，第二像素的B次像素值是依据景深帧中与第二像素的B次像素值相邻的所有次像素值，以及彩色帧中与第二像素的B次像素值对应位置的次像素的相邻的所有次像素值经计算而得到。其计算方法也可参照上述，在此不再赘述。

因此，为了补齐各群组的四像素中的R、G、B次像素值，本案的像素转换单元12a可使用二种平均内插解码方式求出六个未知值(G1、B3、R2、G4、R3、B2)。

另外，在另一实施例中，若要将YUV444格式的影像数据转换成RGB格式时，由于YUV444格式的影像数据的每一群组的四像素的Y亮度值及U色度值、V色度值都有，因此，除了上述YUG422格式中转换得到的次像素之外(R1、G2、G3、B4、B1、R4、R3与B2，即完成上述的第一阶段与第二阶段反转换程序)，像素取得单元11a还分别取得四像素其余的U色度值(U3、U4)及其余的V色度值(V3、V4)，且像素转换单元12a还依据取得的这些U色度值、这些V色度值及得到的R次像素值、G次像素值与B次像素值得到其余的R次像素值(R2)、其余的G次像素值(G1、G4)及其余的B次像素值(B3)；其中，第一像素的G次像素值是由第三像素的U色度值及第一像素的R次像素值与第一像素的B次像素值的平均值经计算而得到，第四像素的G次像素值是由第三像素的V色度值及第四像素的R次像素值与第四像素的B次像素值的平均值经计算而得到，第二像素的R次像素值是由第四像素的U色度值及第一像素的B次像素值与第二像素的G次像素值的平均值经计算而得到，第三像素的B次像素值是由第四像素的V色度值及第三像素的G次像素值与第四像素的R次像素值的平均值经计算而得到。

在一个实施例中，第一像素的G次像素值等于第三像素的U色度值取反函数g(U3)，再加上第一像素的R次像素值与第一像素的B次像素值的平均值，第四像素的G次像素值等于第三像素的V色度值取反函数g(V3)，再加上第四像素的R次像素值与第四像素的B次像素值的平均值，第二像素的R次像素值等于第四像素的U色度值取反函数g(U4)，再加上第一像素的B次像素值与第二像素的G次像素值的平均值，第三像素的B次像素值等于第四像素的V色度值取反函数g(V4)，再加上第三像素的G次像素值与第四像素的R次像素值的平均值。具体而言，

G₁＝g(U₃)+0.5×(R₁+B₁)；

G₄＝g(V₃)+0.5×(R₄+B₄)；

R₂＝g(U₄)+0.5×(B₁+G₂)；

B₃＝g(V₄)+0.5×(G₃+R₄)；

若原包装程序的预测差值D采用公式(9)的线性转换f(D)，则解包装必须将色度值C等于U3、V3、U4或V4以公式(42)的线性反函数g(C)计算线性反转换。若原包装程序的预测差值D采用公式(10)的非线性转换f(D)，则解包装必须将色度值C以公式(43)的非线性反函数g(C)以计算非线性反转换。

在此称为第三阶段反转换，其包含四个预测线性差值反转换编码(G1、G4、R2、B3)。因此，由YUV444格式反转换成RGB格式时，需完成上述的第一阶段、第二阶段与第三阶段反转换程序。

此外，应用习知技术与本技术分别将景深帧的影像数据由RGB格式转换YUV420格式，再由YUV420格式转换为RGB格式后，在一个实施例，习知技术所得到景深帧的峰值信号噪声比(Peak Signal to Noise Ratio,PSNR)与本技术以第一种平均内插解码或第二种平均内插解码后得到的PSNR较差，明显地，本技术的PSNR比较高，影像质量比较好。

另外，请参照图9A至图10C所示，其中，图9A与图10A分别为习知技术由RGB格式转换YUV420格式，再由YUV420格式转换为RGB格式后的景深帧示意图，而图9B、图9C与图10B、图10C分别为本技术由RGB格式转换YUV420格式，再由YUV420格式转换为RGB格式后的景深帧示意图。在此，图9B与图10B是利用上述第一种平均内插解码方式补齐每一群组的六个未知次像素值，而图9C与图10C是利用上述第二种平均内插解码方式补齐每一群组的六个未知次像素值。

如图9A与图10A所示，在大景深落差的地方(即景深落差剧变区位置)，例如人的右臂边缘处，图9A与图10A有明显的白点及锯齿状，而图9B与图10B、图9C与图10C的相同位置都没有白点而且线条也比较平滑，相对的失真较少。因此，本技术的转换与反转换方法与电路是以渐次预测译码方式及平均内插解码填入方式求得未知的损失点，相较习知技术而言，可以获得较佳RGB格式的转换以还原较佳原始的景深帧，因此，可以改善习知在景深落差剧变区位置上的失真现象。

综上所述，本发明应用于景深包装的RGB格式与YUV格式的转换方法及其电路与习知转换技术的做法不同，并不是以RGB或YUV中的三个变量去做转换，但是同样可具有压缩效率较高、数据量较少及传输效率较高的优点，也可有效降低现有传输设备及传输带宽的负担。

另外，本发明应用于景深解包装的RGB格式与YUV格式的反转换的方法及其电路中，可以还原成较佳原始的景深帧，因此，可以改善在景深落差剧变区位置上的失真现象。

以上所述仅为举例性，而非为限制性。任何未脱离本发明的精神与范畴而对其进行的等效修改或变更均应包含于随附的权利要求范围中。