减少运动补偿图象的成组效应和振铃噪声的环形滤波方法

摘要

本发明提供一种能减少运动补偿的图象数据的成组效应和振铃噪声的信号自适应环形滤波方法,能够改善解压后的图象质量,包括:把运动补偿的图象整体阈值化和局部阈值化,生成二进制边缘图象信息;判断滤波窗口内的二进制边缘图象信息是等质区还是边缘区;若判断为等质区,用具有第1加权值的滤波窗口产生对应于该象素的被滤波的象素值;若判断为边缘区,改变已经设定的第2加权值;产生对应于该个别象素的被滤波的象素值。

说明书

本发明涉及能够减少成组效应和振铃噪声的滤波方法，特别涉及一种能够减少运动补偿的图象的成组效应和振铃噪声的滤波方法。

包含ITU的H.263、ISO的MPEG-1、MPEG-2的大部分的图象编码标准，为了进行运动推定和离散余弦变换(DCT)而采用基于图象方块的处理。

基于图象方块的处理，特别是在高效率地压缩图象时会引起众所周知的成组效应和振铃噪声，成组效应所产生的问题是观看显示在被解压的画面上的图象的人会从视觉上感到图象方块间的边缘，作为代表性的成组效应有单色区内的栅格噪声和图象边缘上出现的阶跃噪声；振铃噪声会在图象的边缘附近诱发正弦函数形的缘迹。

因此，本发明的目的是通过适应性地滤除存储在编码/解码系统内的图象存储器中的运动补偿的图象数据来大幅度地减少成组噪声和振铃声的环形滤波方法。    

为实现本发明的目的，按照本发明的信号自适应环形滤波方法，包括如下步骤：(a)把运动补偿的图象整体阀值化和局部阀值化，并生成二进制边缘图象信息；(b)用属于已经设置了大小的滤波窗口内的二进制边缘图象信息来判断对应于滤波窗口内的个别象素的二进制边缘图象信息是等质区和边缘区的哪个区；(c)如果在步骤(b)判断为等质区，用具有对应于此的已经设定的第1加权值的滤波窗口产生对应于该象素的被滤波的象素值；(d)如果在步骤(b)判断为边缘区，按照对应于该个别象素的二进制边缘图象信息来改变已经设定的第2加权值；(e)用具有在步骤(d)改变了的第2加权值的滤波窗口产生对应于该个别象素的被滤波的象素值。

附图简要说明

图1是采用按照本发明的优选实施例的环形滤波器的编码装置的方框图。

图2是说明按照本发明的优选实施例的环形滤波器的方框图。

图3是由图2的二进制边缘图象生成器所生成的二进制边缘图象的示意图。

图4A、B、C分别表示本发明所提示的用于3×3滤波器的滤波窗口、用于3×3平均滤波器的加权值、用于3×3加权滤波器的加权值。

以下根据附图来详细说明本发明的优选实施例。

图1是设置有按照本发明优选实施例的环形滤波器的编码装置的方框图，所表示的是与H.263有关的编码装置。在图1的编码装置中，因为除了按照本发明所提示的环形滤波器310之外的方框都是有关包含运动补偿-预测编码器的高效率编码系统的技术人员所熟知的，所以对此仅简单地说明其动作。

在图1中，把输入视频信号输入到减法器301、第1开关302和预测编码器309；减法器301从输入视频信号中减掉经环形滤波器310滤波的信号，然后把减法器301的输出信号送到第1开关302。第1开关302由编码控制器306控制，选择输入视频信号和减法器301的输出信号之一，把所选出来的信号送到直交变换器303。编码控制器305在内部编码模式的情况下，控制第1开关302把输入视频信号送到直交变换器303；而在中间编码模式的情况下，控制第1开关把减法器301的输出信号送到直交变换器303。经过直交变换器303和量化器304的信号被送到视频多路编码器(未示出)和逆量化器306；逆量化器306把送来的信号进行逆量化，并把经逆量化的信号送到逆直交变换器307。加法器308把第2开关311的输出信号和逆直交变换器307的输出信号相加，把所得到的信号送到预测编码器309；预测编码器309用所输入视频信号和存储在内部存储器中的图象信号进行运动补偿预测编码，然后把从运动补偿预测编码的结果所得到的信号存储在内部存储器中。

预测编码器309把由运动补偿编码所得到的运动矢量输出到视频多路编码器，后述的本发明的环形滤波器310进行对存储在预测编码器309内的图象的滤波，环形滤波器310的输出信号被提供给减法器301和第2开关311，因为第2开关311受编码控制器305的控制，所以，在内部编码模式的情况下，中断提供输入信号给加法器308；而在中间编码的情况下，把输入信号提供给加法器308。因为编码控制器305控制图1的装置的前述的动作，所以，它产生表示内部/中间模式的标示符p、表示有无量化器qz和信号的传送的标示符t。

图2是说明图1的环形滤波器310的方框图。图2的环形滤波器310包含有图象存储器10、二进制边缘图象生成器100和信号自适应滤波器200。图象存储器10存储由预测编码器309送来的进行过运动推定及预测编码的数据，二进制边缘图象生成器100设置有倾斜度图象发生器20、整体二进制边缘图象生成30、局部二进制边缘图象生成器40和逻辑和运算器50，并且产生反映运动补偿-预测编码过的图象的整体边缘和局部边缘的二进制边缘图象信息。信号自适应滤波器200包含有滤波器决定部60、平均滤波器70和加权滤波器80，它根据二进制边缘图象信息用后述的平均滤波器和加权滤波器之一对经过运动补偿-预测编码的图象数据进行滤波，用该信号自适应滤波器200来缓和栅格噪声和振铃噪声。

倾斜度图象发生器20用存储在图象存储器10内的图象数据来产生倾斜度图象数据，为了产生倾斜度图象数据，把垂直索贝尔(Sobel)算符和水平索贝尔算符适用于经运动补偿-预测编码的图象，即：存储在图象存储器10内的图象数据，然后把由倾斜度图象发生器20所得到的倾斜图象数据供给整体边缘图象生成器30和局部边缘图象生成器40。

整体边缘图象生成器30作成对整体图象的整体边缘图象，局部边缘图象生成器40把上述的整个图象分割为具有任意尺寸的方块，而对于分割所得到的各个方块作成局部边缘图象。更详细地说，整体边缘图象生成器30用如下的公式1来计算对应于各象素的边缘值(i，j)：

[公式1]

若｜h｜+｜v｜≥Tg，则边缘(i，j)＝1

其他情况下，边缘(i，j)＝0

其中，h和v分别表示由水平索贝尔倾斜度算符和垂直索贝尔算符得到位置(i，j)上的水平倾斜度图象和垂直倾斜度图象，｜h｜+｜v｜表示位于(i，j)处的倾斜度值，在图象内的各象素可以有256灰度级的情况下，Tg的值是“100”的整体阀值。因此，如果对应于具有位置(i，j)的象素的倾斜度值大于等于整体阀值Tg，整体边缘图象生成器30就把对应于该象素的边缘值(i，j)决定为“1”。另一方面，如果对应于象素的倾斜度值小于整体阀值Tg，整体边缘图象生成器30就把对应于该象素的边缘值(i，j)决定为“0”。把上式适用于整个图象所得到的整体边缘图象信息被送到逻辑和运算器50。

局部边缘图象生成器40用倾斜度图象发生器20的输出作成局部边缘图象，局部边缘图象生成器40对倾斜度图象的所有M1×M2的各个方块计算局部阀值，并使用所算出的局部阀值来对进入到该方块内的全部倾斜度值计算局部边缘值。作为基于方块的处理方法的DCT变换、量化等对由8×8个象素得到的8×8个方块进行信号处理。因此，按照本发明的局部边缘图象生成器40也被设计得用8×8个方块来作成局部边缘图象。但是，应该清楚，本发明并不仅仅限定方块的这个大小，对倾斜度图象内的第n个8×8方块的局部阀值Tn用如下的2～4式来定义：

[公式2] $>>>T>n>>=>|>1>->>>\sigma >n>>>m>n>>>|>\times >>T>g>>>s>其中：[公式3]$ >>>\sigma >n>>=>>>>1>N>>>(>i>,>j>)>>>>\Sigma >>\in >>R>n>>>>\{>g>>(>i>,>j>)>>->>m>n>{$ >>>m>n>>=>>>1>N>>>(>i>,>j>)>>>>\Sigma >>\in >>R>n>>>>g>>(>i>,>j>)>>>s>$}^{}$$

其中，g(i，j)是倾斜度值；Rn是第n个8×8方块区；m_n和σ_n分别表示倾斜度图象的第n个8×8方块的平均值和标准偏差；Tg是整体阀值；在8×8方块的情况下，N＝64。因为如果第N个8×8方块为等质的，比率(σ_n/m_n)趋于“0”，所以，Tn就极接近于Tg。另一方面，如果第n个8×8方块是复杂图象的一部分，比率(σ_n/m_n)就增大；Tn就小于Tg。这个小的Tn被用于作成不由Tg分为整体边缘的详细的边缘图象，即：用于作成局部边缘图象。

局部边缘图象生成器40个别地比较对应于第n个8×8方块的局部阀值Tn和该方块内的一部分的倾斜度值大小，在这里，一部分倾斜度值是除8×8方块内的边界象素之外的对应于8×8方块内的6×6象素的倾斜度值。如果这样限定为作成局部边缘图象所用的倾斜度值的话，可以防止细节信息发生模糊现象，并可以防止在图象边缘检出栅格噪声。如果在第n个8×8方块区域Rn内所许可的各个倾斜度值大于等于局部阀值，局部边缘图象生成器40就把与此相对应的局部边缘值决定为“1”；反之，则把局部边缘值决定为“0”。局部边缘图象生成器40对由倾斜度图象发生器20所产生的全部倾斜度值分割为8×8个方块，并计算局部阀值以及使用各方块的允许的倾斜度值的局部边缘值，进行这些处理之后，产生局部边缘图象信息，把所产生的局部边缘图象信息送到逻辑和运算器50。

该逻辑和运算器50对用象素位置相互关联起来的整体边缘图象信息和局部边缘图象信息进行逻辑和运算，逻辑和运算器50对整体边缘图象上的全部整体边缘值和局部边缘图象上的全部局部边缘值进行逻辑和运算，并把表示其运算结果的二进制边缘图象信息输出到滤波器决定部60。由逻辑和运算器50所作成的二进制边缘图象被示意性地表示在图3上，在图3的二进制边缘图象中，用斜线所引出来的四角形表示其边缘值为“1”的边缘地点。

滤波器决定部60存储由逻辑和运算器50提供的二进制边缘图象信息，经运动补偿-预测编码的图象按照二进制图象被分成为边缘区和等质区两个区域，本发明使用滤波器决定部60来进行这种分类。后述的平均滤波器70和加权滤波器80采用3×3的滤波器窗口。因此，滤波器决定部60中所使用的滤波器窗口也具有3×3的大小。滤波器决定部60根据已经设定的大小即进入到3×3大小的滤波器窗口内的边缘值来判断滤波器窗口定位的二进制边缘图象上的区域是边缘区还是等质区。如果被判断为是等质区，滤波器决定部60就把对应于在判断时所使用的滤波器窗口内的中心地点的数据输出到平均滤波器70；如果被判断为是边缘区，滤波器决定部60就把对应于在判断时所使用的滤波器窗口的二进制边缘图象信息和中心地点的位置数据输出到加权滤波器80。在这里，所谓中心地点的意思是定位于该地点的象素的值经滤波而被代替为新的值的地点。

图4A至图4C是与二维3×3滤波器有关的图，图4A表示3×3滤波器用的滤波器窗口，图4B和图4C分别表示3×3平均滤波器用的加权值和3×3加权滤波器用的加权值。图4A的滤波器窗口中，滤波器加权值索引值为“5”的地点是该滤波器窗口的中心地点；图4C所示的中心地点的加权值也可以替换为“2”。

平均滤波器70和加权滤波器80是二维低通滤波器的一种，对该滤波器70，80的动作详细说明如下。

如果输入对应于中心地点的位置数据，平均滤波器70就从图象存储器10把中心地点的经滤波过的象素的计算所必要的象素值读取出来，然后，平均滤波器70用所读取出来的象素值和图4B所示的加权值来计算滤波过的象素值，计算出的滤波过的象素值被用作对中心地点的经变更的象素值。加权滤波器80根据由滤波器决定部60供给的二进制边缘图象信息和对中心地点的位置数据进行滤波动作。

为进一步地理解起见，下面举例说明加权滤波器80的动作。

如果中心地点“5”为边缘地点，加权滤波器80就不进行对该中心地点的滤波动作；如果边缘地点(或边缘地点群)有除中心地点之外的3×3滤波器窗口内的位置的话，加权滤波器80就用图4C所示的加权值来进行滤波动作。如果任意的边缘地点位于图4A的2和6、6和8、4和8、或2和4的位置，则该边缘地点群及其外侧的邻接地点的加权值全都为“0”，把由平均滤波器70和加权滤波器80所得到的信号自适应滤波过的图象数据提供给图象存储器10。

图象存储器10用由平均滤波器70和加权滤波器80提供的图象数据来代替对应象素的值，因此，图象存储器10就对由预测编码器309送来的图象内的全部象素把经信号自适应滤波过的图象数据存储起来，图象存储器10输出图1的减法器301和加法器308中所使用的图象数据。

虽然前述的实施例说明了对从预测编码器输出的图象的环形滤波，显然，本领域的技术人员能在本发明的范畴之内实现对预测编码器内的存储器中存储的图像进行环形滤波的变形方案。

虽然前述的实施例对有关编码装置作了说明，显然本领域的技术人员也可以把按照本发明的环形滤波器310用于解码装置的运动补偿图象数据。不仅如此，虽然关于H.263作了说明，同样也可以使用MPEG-4的VM2.1情况。

如上所述，按照本发明的环形滤波方法，由于从运动补偿的图象中去除成组效应和振铃噪声，就能够改善解压后的图象质量。