CN1725860A - 在音频视频编解码器中使用的滤波方法、设备和介质 - Google Patents

在音频视频编解码器中使用的滤波方法、设备和介质 Download PDF

Info

Publication number
CN1725860A
CN1725860A CNA2005100848539A CN200510084853A CN1725860A CN 1725860 A CN1725860 A CN 1725860A CN A2005100848539 A CNA2005100848539 A CN A2005100848539A CN 200510084853 A CN200510084853 A CN 200510084853A CN 1725860 A CN1725860 A CN 1725860A
Authority
CN
China
Prior art keywords
macro block
filter
loop filtering
pixel
carried out
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CNA2005100848539A
Other languages
English (en)
Other versions
CN100490538C (zh
Inventor
宋秉哲
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from KR1020040055893A external-priority patent/KR20050121627A/ko
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of CN1725860A publication Critical patent/CN1725860A/zh
Application granted granted Critical
Publication of CN100490538C publication Critical patent/CN100490538C/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/86—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • H04N19/82—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop

Abstract

提供了一种在音频视频编解码器中使用的滤波方法、设备和介质。该滤波方法可包括确定预定宏块为滤波区域；扩展该滤波区域，以进一步包括与该预定宏块相邻的宏块中该预定宏块和与该预定宏块相邻的宏块之间的边界附近的一部分；和根据时间的过去，而以关联方式对该扩展的滤波区域执行解块滤波操作。该滤波方法、设备和介质可以利用非关联环路滤波器和缓冲器而容易地实现。该滤波方法、设备和介质可以有效地对成块假象进行滤波，而不增加需要的存储带宽，并且不引起帧延迟。

Description

在音频视频编解码器中使用的滤波方法、设备和介质
相关申请的交叉引用
本申请要求2004年7月19日向韩国知识产权局提交的韩国专利申请第10-2004-0055893号的利益，这里通过引用而全部合并其公开。
技术领域
本发明涉及一种编码器和解码器(编解码器)，并更特别地，涉及一种在音频视频编解码器中使用的滤波方法、设备和介质。
背景技术
最近，微软(Microsoft)公司向电影与电视工程师协会(SMPTE)(一个国际标准化团体)提出了一项被授予“VC-1”称号(先前称作“VC9”)的运动画面压缩标准的草案。当前，正在对VC-1进行审查，并且许多专家预期迟早采用VC-1作为国际标准。
还预期VC-1如同已被用作运动画面压缩标准并已被广泛应用到各个领域的运动画面专家组(MPEG)-2、MPEG-4、和H.264一样，在不久的将来成为最主要的运动画面压缩标准。VC-1的复杂性比H.264小大约60％，但VC-1能实现H.264的压缩效率的大约80％，这被看作是一种在压缩效率方面最有效的运动画面压缩标准。另外，还知道VC-1能提供比MPEG-2或MPEG-4高的画面质量。
根据上面简要描述的现有运动画面压缩标准，以块为单位对数字图像进行编码或解码。所以，当解码然后再现该数字图像时，可能错误地呈现(render)数字图像的每对垂直或水平相邻块之间的边界，如同它们是真实的边界一样。这些伪边界被称作成块(blocking)假象，并且该现象被称作成块现象。为了防止成块现象，需要一种环路滤波器，其是在编解码器中包括的滤波器，以对该编解码器所处理的数字图像进行解块(deblock)。
下面将更详细地描述VC-1解码方法。
图1是VC-1解码器110的方框图。参考图1，该VC-1解码器110包括比特流分析单元115；I画面的解码部分120，包括逆可变长度编码(VLC)单元122、逆量化单元124、和逆变换单元；P和B画面的解码部分130，包括逆可变长度编码(VLC)单元132和预测单元134；运动补偿单元140；组合器或加法器145；重叠平滑和环路滤波单元150；强度补偿和范围缩放单元160；存储器(例如缓冲器)170；已解码的帧180；和后解码部分190，包括后滤波器192、颜色变换单元194、和尺寸调整单元196。稍后将在该公开中进行描述的本发明涉及该重叠平滑和环路滤波单元。
假设作为序列参数的OVERLAP(重叠)和LOOPFILTER(环路滤波)被设置为1，则通过将其经过逆VLC单元、逆量化单元、和逆变换单元而恢复的画面在一些条件下可被重叠平滑然后被环路滤波。在用作用于运动补偿的参考帧之前，该画面应被环路滤波。为了将该画面用作稍后用于运动补偿的参考帧，VC-1解码器110应在完全符合VC-1的情况下，对该画面执行环路滤波操作。一般来说，由于一个画面包括几个片断(slice)，所以应以片断为单位执行重叠平滑操作和环路滤波操作。
下面将更详细地描述环路滤波操作。
为了在量化操作期间，防止或最小化在画面的多对垂直或水平相邻的8×8块之间的边界附近可能出现的成块现象，而执行环路滤波操作。由于I画面被变换为一组8×8块，所以应以8的倍数个像素为单位对其进行垂直和水平环路滤波。所以，可以以8个像素、16个像素、或24个像素为单位对I画面进行垂直和水平环路滤波。
然而，P画面可被变换为一组8×8块、8×4子块、和/和4×8子块。由此，应以4的倍数个像素为单位对P画面进行垂直和水平环路滤波。所以，可以以4个像素、8个像素、或12个像素为单位对P画面进行垂直和水平环路滤波。
现在将更详细地描述环路滤波操作。
1)I画面的环路滤波
为了防止解块现象，而对I画面的每对垂直或水平相邻块之间的边界执行环路滤波操作(即解块滤波操作)。图2是图示I画面的环路滤波的图。具体说，图2(a)图示了具有YCbCr的I画面的左上部分的水平环路滤波，而图2(b)图示了I画面的左上部分的垂直环路滤波。参考图2(a)和图2(b)，十字形(+)代表像素，而带圈十字形()代表环路滤波后的像素。对从I画面顶部起的第一行像素和从I画面最左边起的第一列像素不进行环路滤波。同样，对从I画面底部起的第一行像素和从I画面最右边起的第一列像素也不进行环路滤波。换言之，假设一帧由N×M个块组成，并且每一块具有8×8的尺寸，则在对I画面进行水平环路滤波的过程中，对第7行和第8行、第15行和第16行、...、以及第((N-1)×(8-1))行和第((N-1)×8)行的像素进行环路滤波，在对I画面进行垂直环路滤波的过程中，对第7列和第8列、第15列和第16列、...、以及第((N-1)×(8-1))列和第((N-1)×8)列的像素进行环路滤波。
对I画面进行环路滤波的顺序很重要。传统上，对一帧中每对水平相邻子块之间的边界附近的像素进行环路滤波，然后对该帧中每对垂直相邻子块之间的边界附近的像素进行环路滤波。在对该帧中每对垂直相邻子块之间的边界附近的像素进行环路滤波之前，应将对该帧中每对水平相邻子块之间的边界附近的像素进行环路滤波的结果存储在存储器中。这类无关联(non-causal)滤波方法一般需要很大的存储带宽来仅对一帧进行滤波。另外，这类无关联滤波方法经常引起帧延迟，因为直到预定块既经历了水平滤波操作又经历了垂直滤波操作，才完成对该预定块的滤波。
2)P画面的环路滤波
P画面被分类为帧内编码(intra-coded)P画面或帧间编码(inter-coded)P画面。帧内编码P画面总是经过8×8变换。由此，在帧内编码P画面的情况下，仅对每对垂直或水平相邻8×8块之间的边界附近的像素进行环路滤波。然而，帧间编码P画面可经过8×8、8×4、4×8、或4×4逆变换以解码残留误差。所以，在帧间编码P画面的情况下，可以根据情况对当前正滤波的块(以后称为当前块)和与该当前块垂直或水平相邻的块之间的边界附近的像素进行或不进行环路滤波。根据以下规则来确定是否对当前块(或子块)和与该当前块(或子块)垂直或水平相邻的块(或子块)之间的边界进行环路滤波：
(1)对每一块(具有8×8尺寸)中的每对垂直或水平相邻子块(具有8×4、4×8、或4×4尺寸)之间的边界附近的像素进行环路滤波；和
(2)对具有相同运动矢量且不具有残留误差的每对垂直或水平相邻块(或子块)之间的边界附近的像素不进行环路滤波。
图3是图示对P画面的环路滤波的各个例子的图。具体说，图3图示了在哪种情况下，必须对P画面的一对水平相邻块(或子块)之间的边界进行环路滤波。如果一对水平相邻块具有相同的运动矢量，则不对这对水平相邻块之间的边界进行环路滤波。否则，就必须对这对水平相邻块之间的边界进行环路滤波。参考图3，灰色块(或子块)是用变换系数编码的块(或子块)，而白色块(或子块)是不用变换系数的块，粗实线代表进行环路滤波的一对垂直或水平相邻块(或子块)之间的边界，而细实线代表不进行环路滤波的一对垂直或水平相邻块(或子块)之间的边界。根据上述规则来确定是否对P画面的一对垂直或水平相邻块(或子块)之间的边界进行环路滤波。图3图示了仅对P画面的多对水平相邻块进行的环路滤波。然而，可根据与用于确定是否对P画面的一对水平相邻块之间的边界进行环路滤波的规则相同的规则，来确定是否对P画面的一对垂直相邻块之间的边界进行环路滤波。以上描述也可应用于P画面的水平块(或水平子块)边界的环路滤波。
图4(a)和4(b)是分别图示了P画面的水平环路滤波和垂直环路滤波的图。参考图4(a)，可以对P画面的每对垂直相邻的8×8块之间的边界以及每对垂直相邻的8×4子块之间的边界，即第4和第5、第8和第9、第12和第13行像素，进行环路滤波。
参考图4(b)，可以对P画面的每对水平相邻的8×8块之间的边界以及每对水平相邻的4×8子块之间的边界，即第4和第5、第8和第9、第12和第13列像素，进行环路滤波。与从I画面的顶部和底部起的第一行像素以及从I画面的最左边和最右边起的第一列像素一样，与P画面的轮廓线邻接的像素，即从P画面的顶部和底部起的第一行像素以及从P画面的最左边和最右边起的第一列像素，被排除在P画面的环路滤波之外。
对P画面进行环路滤波的顺序也很重要。首先，按照从P画面的顶部到底部的顺序而对一帧中每对垂直相邻块之间的边界进行环路滤波，并将环路滤波结果存储在存储器中。其后，按照从P画面的顶部到底部的顺序而对该帧中每对垂直相邻8×4子块之间的边界进行环路滤波，并将环路滤波结果存储在存储器中。其后，按照从P画面的左边到右边的顺序而对该帧中每对水平相邻8×8块之间的边界进行环路滤波，并将环路滤波结果存储在存储器中。其后，按照从P画面的左边到右边的顺序而对该帧中每对水平相邻4×8子块之间的边界进行环路滤波，并将环路滤波结果存储在存储器中。所以，以2个阶段对每对垂直块或子块之间的边界进行环路滤波，并以2个阶段对每对水平相邻块或子块之间的边界进行环路滤波。由此，以总共4个阶段对每一帧进行环路滤波。在这一点上，认为这类无关联滤波方法会引起延迟并需要大存储带宽。
3)B画面的环路滤波
以与I画面相同的方式对B画面进行环路滤波。
下面将更详细地描述对每对垂直或水平相邻块(或子块)之间的边界进行的环路滤波。
图5(a)和5(b)是图示对一对垂直或水平相邻块之间的边界附近的像素的环路滤波的图。由于每一块或子块沿纵向或横向包括4的倍数个像素，所以可以4的倍数个像素为单位来执行垂直或水平环路滤波操作。参考图5(a)，两列像素被划分为4段，每段包括4个像素，使得一对垂直相邻块(或子块)之间的边界落在上边两段和下边两段之间。从每一段的顶部起的、用“X”标记的第三像素在对应段的其它像素之前被环路滤波。其后，基于对对应部分的第三像素进行环路滤波的结果，而确定是否对对应段中除了第三像素之外的像素进行环路滤波。具体说来，如果对对应部分的第三像素进行环路滤波的结果表示还没有发生成块现象并由此确定不再执行环路滤波操作，则不对对应部分中除了第三像素之外的像素进行环路滤波。
参考图5(b)，假设一对水平相邻块或子块之间的边界落在第四和第五像素P4和P5之间。在滤波过程中，第四和第五像素P4和P5是可交换的。第五像素P4的值和位于像素P4左边的第一到第三像素P1到P3的值被加权平均，由此获得第一补偿值。同样，像素P5的值和位于像素P5右边的第六到第八像素P6到P8的值被加权平均，由此获得第二补偿值。其后，向像素P4和P5的值中添加或从其中减去第一和第二补偿值。以这种方式，可能防止或最小化在每对垂直或水平相邻块或子块之间的边界周围呈现的成块假象。
参考图5(a)，如果对对应段的第三像素进行环路滤波的结果表示需要对对应段的其它像素进行环路滤波，则对对应部分中除了第三像素之外的所有像素进行环路滤波。否则，就跳过对对应段中除了第三像素之外的所有像素的环路滤波，并对对应段之后的段执行环路滤波的另一迭代。
现在将详细描述重叠平滑操作。
图6是图示重叠平滑操作的例子的图。参考图6，如果作为序列参数的OVERLAP被设置为1，并且满足预定条件，则可对每个都具有YCbCr的一对两个垂直或水平相邻帧内块(intra block)之间的边界执行称为重叠平滑的滤波操作。在以上参考图2(a)到5(b)所述的环路滤波操作之前，执行重叠平滑操作，也称为重叠变换操作。重叠平滑操作是一种基于块的变换，其使得一对垂直或水平相邻块彼此交换其边界信息。精心设计的重叠平滑操作有助于最小化成块噪声。
图6图示了包括多个I块的P帧。参考图6，可作为Y或CbCr的像素被呈现为小正方形，I块被呈现为填充了阴影线的大矩形，而P块被呈现为填充了点的区。仅对填充了点的区进行重叠平滑。具体说，在水平或垂直相邻2×2的P块之间的边界的每一边的两列或两行像素被重叠平滑。圆圈中包括的像素既被水平地重叠平滑，又被垂直地重叠平滑。
对一对水平相邻像素a0和a1以及一对水平相邻像素b1和b0执行重叠平滑操作。这两对水平相邻像素a0和a1、以及b1和b0彼此相邻，并在其间具有边界。像素a0和a1在该边界的左边，而像素b1和b0在该边界的右边。其后，对一对垂直相邻像素p0和p1以及一对垂直相邻像素q1和q0执行重叠平滑操作。这两对垂直相邻像素p0和pl、以及q1和q0彼此相邻，并在其间具有边界。换言之，对像素a0、al、b1和b0进行重叠平滑，然后对像素p0、p1、q1和q0进行重叠平滑。在对像素p0、p1、q1和q0进行重叠平滑之前，将对像素a0、a1、b1和b0进行重叠平滑的结果存储在存储器中。
基于是否满足预定条件而确定是否对I、P或B帧执行重叠平滑操作。在与VC-1相关的文献中详细描述了该预定条件，并由此将省略对它们的详细描述。如果不满足该预定条件，则可跳过该重叠平滑操作。例如，可以不对仅包括帧间块(inter block)的帧执行重叠平滑操作。然而，为了便于说明，在本公开中假设需要执行重叠平滑操作和环路滤波操作。然而，显然可以基于是否满足预定条件而跳过重叠平滑操作。
如上所述，为了防止成块现象，传统VC-1滤波方法和设备以帧或片断为单位执行水平重叠平滑操作和随后的垂直重叠平滑操作，然后以帧或片断为单位执行水平环路滤波操作和随后的垂直环路滤波操作。因此，传统VC-1滤波方法和设备需要在执行垂直重叠平滑操作之前，存储执行水平重叠平滑操作的结果，并需要在执行垂直环路滤波操作之前，存储执行水平环路滤波操作的结果。所以，VC-1滤波方法和设备需要大存储带宽和多个帧存储器，可能引起帧延迟，并需要具有大存储容量的帧存储器。另外，由于传统VC-1滤波方法和设备的无关联特性，使得很难利用传统VC-1滤波方法和设备实现编解码器硬件。
发明内容
本发明的其它方面、特征、和/或优点将部分地在下面的描述中阐明，部分地通过该描述将变得明显，或可以通过对本发明的实践而得知。
本发明提供了一种在音频视频编解码器中使用的滤波方法、设备和介质，其可以克服重叠平滑操作和环路滤波操作的无关联性，并可以在不需要扩大存储器或带宽的情况下，有效地执行重叠平滑操作和环路滤波操作。
根据本发明的一个方面，提供了一种音频视频编解码器中使用的滤波方法。该滤波方法包括：确定预定宏块为滤波区域；扩展该滤波区域，以进一步包括与该预定宏块相邻的宏块中该预定宏块和与该预定宏块相邻的宏块之间的边界附近的一部分；和根据时间的过去，而以关联(causal)方式对该扩展的滤波区域执行解块滤波操作。
在执行解块滤波操作的步骤中，可对该扩展的滤波区域进行水平和随后的垂直解块滤波，然后可对该扩展的滤波区域后面的滤波区域进行水平和随后的垂直解块滤波。
所述与该预定宏块相邻的宏块的一部分可包括多个各由至少4个像素组成的段。
该解块滤波操作可包括重叠平滑操作和环路滤波操作中的至少一个。
如果满足预定条件，则可以宏块为单位对该扩展的滤波区域进行重叠平滑，然后以宏块为单位进行环路滤波。
可利用该扩展的滤波区域中包括的宏块的每一对相邻子块之间的边界的每一边的至少两行或两列像素，来对该扩展的滤波区域进行重叠平滑。
可对该扩展的滤波区域中包括的宏块的两对垂直相邻8×8块之间的边界附近的像素进行水平重叠平滑然后进行垂直重叠平滑。
可利用该扩展的滤波区域中包括的宏块的每一对相邻子块之间的边界的每一边的至少四行或四列像素，来对该扩展的滤波区域进行环路滤波。
可对该扩展的滤波区域中包括的宏块的两对水平相邻8×8块之间的边界附近的像素进行水平环路滤波，可对该扩展的滤波区域中包括的宏块的每对水平相邻8×4子块之间的边界附近的像素进行水平环路滤波，可对该扩展的滤波区域中包括的宏块的两对垂直相邻8×8块之间的边界附近的像素进行垂直环路滤波，并可对该扩展的滤波区域中包括的宏块的每对垂直相邻4×8子块之间的边界附近的像素进行垂直环路滤波。
该音频视频编解码器可以符合提交给电影与电视工程师学会(SMPTE)的VC-1。
根据本发明的另一方面，提供了一种音频视频编解码器中使用的滤波设备。该滤波设备包括：缓冲器单元，存储预定宏块作为滤波区域；行缓冲器，存储与该预定宏块垂直相邻的宏块中该预定宏块和与该预定宏块垂直相邻的宏块之间的边界附近的一部分；列缓冲器，存储与该预定宏块水平相邻的宏块中该预定宏块和与该预定宏块水平相邻的宏块之间的边界附近的一部分；和滤波单元，根据时间的过去，而以关联方式对该缓冲器单元中存储的滤波区域执行解块滤波操作。
根据本发明的另一方面，提供了至少一种存储有指令的计算机可读介质，该指令控制至少一个处理器执行以下方法，该方法包括：确定预定宏块为滤波区域；扩展该滤波区域，以进一步包括与该预定宏块相邻的宏块中该预定宏块和与该预定宏块相邻的宏块之间的边界附近的一部分；和根据时间的过去，而以宏块为单位对该扩展的滤波区域执行解块滤波操作。
附图说明
通过结合附图对示范实施例的以下描述，本发明的这些和/或其它方面、特征和优点将变得清楚和更易于理解，其中：
图1是VC-1编解码器的方框图；
图2(a)和2(b)是图示在I画面的两个垂直相邻块和I画面的两个水平相邻块之间的边界附近的像素的环路滤波的图；
图3是图示P画面的环路滤波后的块边界的各个例子的图；
图4(a)和4(b)是图示对在P画面的两个垂直相邻块(或子块0)和P画面的两个水平相邻块(或子块)之间的边界附近的像素的环路滤波的图；
图5(a)和5(b)是图示对在两个相邻块之间的边界附近的像素的环路滤波的图；
图6是图示重叠平滑操作的图；
图7是根据本发明示范实施例的滤波设备的方框图；
图8是图示要用根据本发明示范实施例的滤波方法来滤波的帧的图；
图9是图示根据本发明示范实施例的图8的框格(CASE)1的重叠平滑和环路滤波的图；
图10A和10B是图示根据本发明示范实施例的图8的框格2的重叠平滑和环路滤波的图；
图11A和11B是图示根据本发明示范实施例的图8的框格3的重叠平滑和环路滤波的图；以及
图12A到12C是图示根据本发明示范实施例的图8的框格4的重叠平滑和环路滤波的图。
具体实施方式
现在将详细讨论附图中图示了其例子的本发明的示范实施例，其中相同的附图标记始终表示相同的元件。下面通过参考附图来描述示范实施例以说明本发明。
现在将参考示出了本发明的示范实施例的附图来更全面地描述本发明。
图7是根据本发明示范实施例的滤波设备的方框图。参考图7，与传统VC-1滤波设备不同，该滤波设备以宏块为单位对画面执行滤波操作。因此，该滤波设备包括行缓冲器630和列缓冲器640，其中临时存储宏块边界信息。
具体地，该滤波设备包括：滤波器单元610，防止成块现象；缓冲器单元(L_BUF)620，存储要滤波的数据和对要滤波的数据进行滤波的结果；以及行缓冲器(ROW_BUF)630和列缓冲器(COL_BUF)640，临时存储宏块边界信息。
根据本发明可以处理的数据的最小单位是16×16宏块。因此，根据本发明示范实施例的滤波设备被设计为以16×16宏块为单位执行重叠平滑操作和环路滤波操作。换言之，根据本发明示范实施例的滤波设备对一帧的每一16×16宏块执行重叠平滑操作，然后对该帧的每一16×16宏块执行环路滤波操作。作为尺寸为16×16的缓冲器的缓冲器单元620存储对该帧的每一16×16宏块的滤波结果。作为尺寸为20×8的缓冲器的行缓冲器630存储当前正滤波的宏块(下面称为当前宏块)中该当前宏块和位于该当前宏块正上方的宏块之间的边界附近的像素、以及对其中存储的像素进行滤波的结果。作为尺寸为8×16的缓冲器的列缓冲器640存储该当前宏块中在当前宏块和位于该当前宏块左边的宏块之间的边界附近的像素、以及对其中存储的像素的滤波结果。
现在将在要滤波的帧纵向包括4个宏块而横向包括3个宏块的假设下，更详细地描述根据本发明示范实施例的滤波设备的操作。
图8是图示根据本发明示范实施例的要被重叠平滑然后环路滤波的帧的图。参考图8，该帧包括12个宏块，即第1到第12宏块MB1到MB12。框格1表示要被滤波并包括第1宏块MB1的区域，而框格2表示要被滤波并包括第2宏块MB2的区域。框格3表示要被滤波并包括第5宏块MB5的区域，而框格4表示要被滤波并包括第6宏块MB6的区域。
图9是图示根据本发明示范实施例的图8的框格1的重叠平滑和环路滤波的图。参考图9，以与上面参考图1描述的相同方式对第1宏块MB1进行运动补偿。其后，对运动补偿后的第1宏块MB1进行重叠平滑，然后进行环路滤波。
参考图7和9，运动补偿后的第1宏块MB1被存储在缓冲器单元620中。其后，基于是否满足上面已描述过的预定条件，而确定是否对运动补偿后的第1宏块MB1进行重叠平滑。如果不满足预定条件，则对运动补偿后的第1宏块MB1直接进行环路滤波，而无需进行重叠平滑。否则，就对运动补偿后的第1宏块MB1进行重叠平滑，然后进行环路滤波，现在对此进行更详细的描述。
图9(a)图示了框格1。由于第1宏块MB1是图8的帧的第一片断的第1宏块，所以行缓冲器630和列缓冲器640是空的。当对第2宏块MB2执行滤波操作时，对邻接第1和第2宏块MB1和MB2之间的边界的像素进行滤波。
现在将参考图9(b)和9(c)而详细描述对第1宏块MB1的重叠平滑。
参考图9(b)，对呈现为黑圆圈并由两条平行虚线包围的、第1宏块MB1的2对垂直相邻块之间的边界的每一边的2列像素进行重叠平滑。具体地，第1宏块MB1的每一行中的第7到第10像素同时被分别输入到图7的锁存器p1、p0、q0和q1。将第1宏块MB1的每一行与时钟周期同步地从各锁存器输入到滤波器单元610。其后，将对第1宏块MB1执行重叠平滑操作的滤波器单元610的输出值输入到寄存器P1、P0、Q0和Q1。缓冲器单元620基于锁存器P1、P0、Q0和Q1的输出值而更新先前从锁存器P1、P0、Q0和Q1接收的值。缓冲器单元620仅对于满足预定条件的第1宏块MB1的一部分而更新先前从寄存器P1、P0、Q0和Q1输入的值。
参考图9(c)，从第1宏块MB1的2对水平相邻8×8块之间的边界起的2行像素除了未被虚线包围的像素之外被呈现为黑圆圈。以与图9(b)所示的从第1宏块MB1的2对垂直相邻8×8块之间的边界起的2行像素相同的方式，而仅对呈现为黑圆圈的像素进行重叠平滑。当对第2宏块MB2执行滤波操作时，对未被虚线包围但与第1宏块MB1的2对水平相邻8×8块之间的边界邻接的像素进行滤波。可替换地，当对第2宏块MB2执行滤波操作时，可对从第1宏块MB1的最右边起的至少2列像素进行滤波。
一旦完成了对第1宏块MB1的重叠平滑，就对第1宏块MB1执行环路滤波。参考图9(d)，与2对水平相邻8×8块之间的边界邻接的像素除了未被虚线包围的像素之外被呈现为黑圆圈。仅对呈现为黑圆圈的像素进行环路滤波。当对第5宏块MB5执行滤波操作时，对第1宏块MB1中与第1宏块MB1和第5宏块MB5之间的边界邻接的像素进行环路滤波。当对第2宏块MB2执行滤波操作时，对未被虚线包围但与第1宏块MB1的2对水平相邻8×8块之间的边界邻接的像素进行环路滤波。不与2对水平相邻8×8块之间的边界邻接但被虚线包围的像素用于对呈现为黑圆圈的像素进行环路滤波。
参考图9(d)，由虚线包围的一共12列像素被输入到图7的锁存器p0、p1、p2、p3、q0、q1、q2和q3，使得12列中的每一列中的8个像素被同时输入到相应锁存器。由虚线包围的12列的每一列都包括8个像素。特别是，在第1宏块MB1的第一到第四行中除了未被虚线包围的像素之外的第1到第12个像素以同时将4个像素输入到相应锁存器的方式被输入到锁存器p3、p2、p1和p0，而第五到第八行中除了未被虚线包围的像素之外的第1到第12个像素以同时将4个像素输入到相应锁存器的方式被输入到锁存器q0、q1、q2和q3。
如图9(d)的顶部所示，由虚线包围的一共8行中的每一行中包括的一共12个像素根据它们被输入到对应锁存器(p3、p2、p1、p0、q0、q1、q2或q4)的顺序而被编号。假设由虚线包围的8行中的每一行被划分为3个部分，每一部分包括4个像素，如上所述，3个部分中的每一部分中的第3个像素(即由虚线包围的8行中的每一行中的第3、第7、和第11个像素)在对应部分的其它像素之前被环路滤波。其后，基于对对应部分的第3像素进行环路滤波的结果而确定是否对对应部分的其余像素进行环路滤波。其后，从目应锁存器输出由虚线包围的8行像素，然后将其在一个周期中依次输入到图6的滤波器单元610并进行环路滤波。以与上面参考图5描述的相同方式执行对由虚线包围的12列像素或8行像素的环路滤波。这里，可利用VC-1中定义的任何滤波方法对虚线包围的8行像素进行环路滤波。作为对虚线包围的8行像素进行环路滤波的结果，呈现为黑圆圈的像素的值被输入到图7的锁存器P0和Q0。如果需要执行滤波操作，例如如果宏块MB的水平或垂直块边界而非第1宏块MB1的轮廓线被错误地呈现为第1宏块MB1的边界，则缓冲器单元620基于当前从锁存器P0和Q0接收的值，而更新先前从锁存器P0和Q0接收的值。
同样，对虚线包围的8行中的每一行中的第5到第8个像素进行滤波，然后对虚线包围的8行中的每一行中的第9到第12个像素进行滤波。由虚线包围的所有8行像素可被环路滤波，但缓冲器单元620基于对图9(d)中呈现为黑圆圈的像素(即与第1宏块MB1的2对水平相邻8×8块之间的边界邻接的像素)进行环路滤波的结果，而更新先前从锁存器P0和Q0接收的值。例如，在对I画面进行环路滤波的情况下，缓冲器单元620仅对于与相邻8×8块之间的边界邻接的像素而更新存储器中存储的数据，而在对P画面进行环路滤波的情况下，缓冲器单元620仅对于与编码块之间的边界邻接的像素而更新存储器中存储的数据。
图9(e)图示了对与第1宏块MB1的2对水平相邻8×4子块之间的边界邻接的像素的环路滤波。参考图9(e)，与第1宏块MB1的2对水平相邻8×4子块之间的边界邻接的像素被呈现为黑圆圈。由虚线包围的所有多个像素除了呈现为黑圆圈的像素之外都用于对呈现为黑圆圈的像素进行环路滤波。以与上面参考图9(d)所描述的相同的方式对呈现为黑圆圈的像素进行环路滤波。根据VC-1，如果第1宏块MB1是帧内块，则可跳过对呈现为黑圆圈的像素进行的环路滤波。
如果完成了对与第1宏块MB1中的水平块边界邻接的像素的环路滤波，则对与垂直块边界邻接的像素进行环路滤波，这将在下面参考图9(f)、9(g)和9(h)进行描述。
参考图9(f)，对与第1宏块MB1的2对垂直相邻8×8块之间的边界邻接的像素除了未被2条平行虚线包围的像素之外进行环路滤波。在对第5宏块MB5执行滤波操作时，对未被2条平行虚线包围但与第1宏块MB1的2对垂直相邻8×8块之间的边界邻接的像素进行滤波。另外，当对第2宏块MB2执行滤波操作时，对从第1宏块MB1的最右边起的4列像素进行滤波。不与第1宏块MB1的2对垂直相邻8×8块之间的边界邻接但被2条虚线包围的像素用于对呈现为黑圆圈的像素进行环路滤波。
参考图9(g)，以与上面参考图9(d)和9(e)所描述的相同的方式，对第1宏块MB1的左上8×8块中的2对垂直相邻4×8子块进行环路滤波。根据VC-1，如果第1宏块MB1是帧内块，则可跳过对与第1宏块MB1的左上8×8块中的2对垂直相邻4×8子块进行的环路滤波。
对第1宏块MB1进行环路滤波的结果被临时存储在缓冲器单元620中，然后被记录在外部帧存储器中。图9(h)图示了在外部帧存储器中记录的对第1宏块MB1进行环路滤波的结果。
其后，将第1宏块MB1的右上和右下8×8块中包括的像素值载入到列缓冲器640中，而将第二宏块MB2中包括的像素值载入到缓冲器单元620中，以便对框格2执行重叠平滑操作和随后的环路滤波操作(参考图7)。
如上所述，以每个都包括4个像素的段为单位而执行重叠平滑操作和环路滤波操作。另外，对宏块垂直地重叠平滑，然后水平地重叠平滑。在完成对宏块的重叠平滑之后，对宏块水平地环路滤波，然后垂直地环路滤波。
图10A和10B是图示根据本发明示范实施例的图8的框格2的重叠平滑和环路滤波(具体说是对第2宏块MB2的重叠平滑和环路滤波)的图。具体地，图10A(a)图示了要被重叠平滑和环路滤波的框格2。参考图10A(a)，框格2不仅包括第2宏块MB2，而且包括第1宏块MB1的右上和右下8×8块。如上所述，第1宏块MB1的右上和右下8×8块中包括的像素值被临时存储在列缓冲器640中。
参考图10A(b)到10A(d)，在第1和第2宏块MB1和MB2之间的边界的每一边的两排像素被重叠平滑，在第2宏块MB2的2对垂直相邻8×8块之间的边界的每一边的两排像素被重叠平滑，然后在第1宏块MB1的最右边的一对垂直相邻4×8子块之间的边界的每一边的两排像素、以及在第2宏块MB2的2对水平相邻8×8块之间的边界的每一边的两排像素除了包括在第2宏块MB2的最右边的一对垂直相邻4×8子块中的像素之外被重叠平滑。框格2的重叠平滑与上面参考图9(b)和9(c)所述的框格1的重叠平滑相同。参考图10(d)，从框格2的最左边起的4列像素已在对框格1进行重叠平滑时被重叠平滑，而从框格2的最右边起的4列像素将在对第3宏块MB3进行重叠平滑时被重叠平滑。由此，这8列像素被排除在对框格2的重叠平滑之外。
如果完成了对框格2的重叠平滑，则对框格2进行环路滤波。参考图10A(e)，在与第1宏块MB1的右上和右下8×8块之间的边界或与第2宏块MB2的2对水平相邻8×8块之间的边界邻接的多个像素中，仅对呈现为黑圆圈的像素进行环路滤波。从框格2的底部起的8行像素和从框格2的最右边起的4列像素将在对后续片断或后续宏块进行环路滤波时被环路滤波。由虚线包围的所有多个像素除了被呈现为黑圆圈的像素之外用于对呈现为黑圆圈的像素进行环路滤波。换言之，由虚线包围的一共8行被输入到锁存器p3、p2、p1、p0、q0、q1、q2和q3，然后被环路滤波。由虚线包围的8行中的每一行以与上面参考图9(d)到9(h)所述的相同方式包括16个像素。其后，参考图10B(f)，在由虚线包围的2对水平相邻4×8子块中包括的多个像素中，以与上述相同的方式对与2对水平相邻4×8子块之间的边界邻接的像素进行环路滤波。
图10B(g)到10B(k)图示了框格2的垂直环路滤波。参考图10B(g)，由虚线包围的一共8列以与上面参考图5所描述的几乎相同的方式被输入到锁存器p3、p2、p1、p0、q0、q1、q2和q3，然后被环路滤波。8列中的每一列包括8个像素。如图10B(g)的左边所示，8列中的每一列包括的8个像素根据将其输入到对应锁存器的顺序而编号。
其后，以上面参考图10B(g)所述的相同方式对由图10B(h)的虚线包围的8列、由图10B(i)的虚线包围的8列、和由图10B(j)的虚线包围的8列顺序地进行环路滤波。图10B(k)图示了外部帧存储器中记录的对框格2进行环路滤波的结果。
其后，从第2宏块MB2的最右边起的8列中包括的像素值被载入到列缓冲器640中，并且在后续迭代中要被滤波的包括在第3宏块MB3中的像素值被载入到缓冲器单元620。以这种方式，对由第1到第4宏块MB1到MB4组成的第1片断进行滤波。
图11A和11B是图示根据本发明示范实施例的对图8的框格3的重叠平滑和环路滤波的图。具体地说，图11A和11B图示了作为第2片断的第1宏块的第5宏块MB5的重叠平滑和环路滤波。在完成第4宏块MB4的重叠平滑和环路滤波之后，将从第1宏块MB1的底部起的上面8行中包括的像素值载入到行缓冲器630中，并将第5宏块MB5中包括的像素值载入到缓冲器单元620中。
图11A(b)到11A(d)中图示了框格3的重叠平滑。参考图11A(b)到11A(d)，以与上面参考图9、10A或10B所述相同的方式对框格3进行重叠平滑。
图11A(e)、11B(f)到11B(h)中图示了框格3的环路滤波。参考图11A(e)、11B(f)到11B(h)，以与上面参考图9、10A或10B所述相同的方式对框格3进行环路滤波。对框格3进行环路滤波的结果被图示在图11B(i)和11B(j)中，而对框格3进行重叠平滑然后进行环路滤波的结果被图示在图11B(k)中。对框格3进行重叠平滑然后进行环路滤波的结果被记录在外部帧存储器中。
更新缓冲器单元620、行缓冲器630、和列缓冲器640中存储的像素值，以进行后续迭代的滤波。更新的像素值不属于还没滤波的像素，而是属于已滤波的像素。
图12A到12C是图示根据本发明示范实施例的图8的框格4的重叠平滑和环路滤波的图。具体地说，图12A(b)到12A(e)图示了框格4的重叠平滑，图12B(f)到12B(i)图示了框格4的水平环路滤波，而图12B(j)到12C(m)图示了框格4的垂直环路滤波。图12C(n)图示了对框格4进行重叠平滑然后进行环路滤波的结果。对框格4进行重叠平滑然后进行环路滤波的结果波记录在外部帧存储器中。
根据本发明的滤波设备以宏块为单位执行重叠平滑操作和随后的环路滤波操作，而传统VC-1滤波设备以帧为单位执行重叠平滑操作和随后的环路滤波操作。因此，与传统VC-1滤波设备不同，根据本发明的滤波设备包括行缓冲器630和列缓冲器640。
换言之，根据本发明的滤波设备对每一宏块执行重叠平滑操作，然后对对应宏块执行水平环路滤波和随后的垂直环路滤波操作。在当前宏块和与该当前宏块垂直或水平相邻的宏块之间的边界附近的像素被存储在行缓冲器630或列缓冲器640中，然后被排除在当前宏块的重叠平滑和环路滤波之外，并在对与该当前宏块垂直或水平相邻的宏块进行重叠平滑和环路滤波时被使用。
因此，根据本发明的滤波设备能够以关联方式执行滤波操作，即能够根据时间的过去而以宏块为单位执行滤波操作。所以，根据本发明的滤波设备与以帧为单位执行滤波操作的传统滤波设备相比，能更显著地降低需要的存储带宽，并因此而可以防止帧延迟。
然而，尽管预期上面已描述过的根据本发明的滤波方法和设备与现有技术相比能更显著地减小需要的存储带宽，但是很难控制所述滤波方法和设备。所以，现在将描述与根据本发明前一示范实施例的滤波方法和设备相比可以较不显著地减小需要的存储带宽但可以被更容易地控制的根据本发明另一示范实施例的滤波方法和设备。
在本示范实施例中，水平滤波操作与垂直滤波操作相分离。特别是，假设存在多个片断要滤波，则以宏块为单位对第1片断进行水平重叠平滑然后进行水平环路滤波。其后，以宏块为单位对第2片断进行水平重叠平滑然后进行水平环路滤波。如果完成了对所有要滤波的片断的水平重叠平滑和水平环路滤波，则按照已对它们进行水平重叠平滑然后被水平环路滤波的顺序，对所有片断进行垂直重叠平滑然后进行垂直环路滤波。其后，在完成对所有片断的垂直和水平重叠平滑以及垂直和水平环路滤波之后，在外部帧存储器中记录垂直和水平重叠平滑结果以及垂直和水平环路滤波结果。
尽管上面已将缓冲器单元、行缓冲器、和列缓冲器描述为如同它们的尺寸限于这里提出的尺寸，但是缓冲器单元、行缓冲器、和列缓冲器的尺寸可动态确定。例如，水平方向的缓冲器单元和行缓冲器的尺寸可扩展到与一个片断一样大，在该情况下，将行缓冲器中存储的数据载入到存储器中所需的带宽变得不必要。换言之，随着缓冲器单元、行缓冲器、和列缓冲器的每一个的尺寸的增加，需要的存储带宽减小。由此，需要考虑到缓冲器单元、行缓冲器、和列缓冲器的每一个的尺寸与需要的存储带宽之间的折衷，而适当地调整它们。
如上所述，根据本发明的滤波方法和设备可用在音频视频编解码器中，以便以关联方式以宏块为单位而执行滤波操作。根据本发明的滤波方法和设备可以利用非关联环路滤波器和缓冲器而容易地实现。根据本发明的滤波方法和设备可以有效地对成块假象进行滤波，而不增加所需要的存储带宽，并不引起帧延迟。
根据本发明的滤波方法和设备不仅可应用于VC-1编解码器，而且可应用于基于其它标准的编解码器。
除了上述示范实施例之外，本发明的示范实施例也可以通过执行例如计算机可读介质的介质中/上的计算机可读代码/指令而实现。该介质可对应于允许存储和/或传输计算机可读代码的任何一种介质/多种介质。
该计算机可读代码可以以各种方式在介质上记录/传输，例如包括磁存储介质(例如ROM、软盘、硬盘等)、光记录介质(例如CD-ROM、或DVD)、和诸如载波的存储/传输介质的介质，以及通过因特网。该介质也可以为分布式网络，使得计算机可读代码以分布方式被存储/传送和执行。
尽管已示出和描述了本发明的几个示范实施例，但本领域普通技术人员应明白，在不脱离由权利要求及其等同限定其范围的本发明的原理和精神的情况下，可对这些示范实施例进行改变。

Claims (21)

1.一种音频视频编解码器中使用的滤波方法，包括：
确定预定宏块为滤波区域；
扩展该滤波区域，以进一步包括与该预定宏块相邻的宏块中该预定宏块和与该预定宏块相邻的宏块之间的边界附近的一部分；和
根据时间的过去，而以宏块为单位对该扩展的滤波区域执行解块滤波操作。
2.根据权利要求1的滤波方法，其中该执行解块滤波操作的步骤包括：
对该扩展的滤波区域执行水平解块滤波操作，然后对该扩展的滤波区域执行垂直解块滤波操作；和
对该扩展的滤波区域后面的滤波区域执行水平解块滤波操作，然后对该后面的滤波区域执行垂直解块滤波操作。
3.根据权利要求1的滤波方法，其中所述与该预定宏块相邻的宏块的一部分包括多个各由至少4个像素组成的段。
4.根据权利要求1的滤波方法，其中该解块滤波操作包括重叠平滑操作和环路滤波操作中的至少一个。
5.根据权利要求4的滤波方法，其中如果满足预定条件，则以宏块为单位对该扩展的滤波区域进行重叠平滑，然后以宏块为单位进行环路滤波。
6.根据权利要求4的滤波方法，其中利用该扩展的滤波区域中包括的宏块的每一对相邻子块之间的边界的每一边的至少两行或两列像素，来对该扩展的滤波区域进行重叠平滑。
7.根据权利要求4的滤波方法，其中对该扩展的滤波区域中包括的宏块的两对垂直相邻8×8块之间的边界附近的像素进行水平重叠平滑然后进行垂直重叠平滑。
8.根据权利要求4的滤波方法，其中利用该扩展的滤波区域中包括的宏块的每一对相邻子块之间的边界的每一边的至少四行或四列像素，来对该扩展的滤波区域进行环路滤波。
9.根据权利要求4的滤波方法，其中对该扩展的滤波区域中包括的宏块的两对水平相邻8×8块之间的边界附近的像素进行水平环路滤波，对该扩展的滤波区域中包括的宏块的每对水平相邻8×4子块之间的边界附近的像素进行水平环路滤波，对该扩展的滤波区域中包括的宏块的两对垂直相邻8×8块之间的边界附近的像素进行垂直环路滤波，并对该扩展的滤波区域中包括的宏块的每对垂直相邻4×8子块之间的边界附近的像素进行垂直环路滤波。
10.根据权利要求1的滤波方法，其中该音频视频编解码器符合VC-1标准。
11.一种音频视频编解码器中使用的滤波设备，包括：
缓冲器单元，存储预定宏块作为滤波区域；
行缓冲器，存储与该预定宏块垂直相邻的宏块中该预定宏块和与该预定宏块垂直相邻的宏块之间的边界附近的一部分；
列缓冲器，存储与该预定宏块水平相邻的宏块中该预定宏块和与该预定宏块水平相邻的宏块之间的边界附近的一部分；和
滤波单元，根据时间的过去，而以宏块为单位对该缓冲器单元中存储的滤波区域执行解块滤波操作。
12.根据权利要求11的滤波设备，其中该滤波单元对滤波区域执行水平解块滤波操作和随后的垂直解块滤波操作，然后对后面的滤波区域执行水平解块滤波操作和垂直解块滤波操作。
13.根据权利要求11的滤波设备，其中在行缓冲器或列缓冲器中存储的所述与该预定宏块垂直或水平相邻的宏块的一部分包括多个各由至少4个像素组成的段。
14.根据权利要求11的滤波设备，其中该解块滤波操作包括重叠平滑操作和环路滤波操作中的至少一个。
15.根据权利要求14的滤波设备，其中如果满足预定条件，则以宏块为单位执行重叠平滑，然后以宏块为单位执行环路滤波操作。
16.根据权利要求14的滤波设备，其中利用该缓冲器单元中存储的滤波区域中包括的宏块的每一对相邻子块之间的边界的每一边的至少两行或两列像素，来执行重叠平滑操作。
17.根据权利要求14的滤波设备，其中在该重叠平滑操作中，对该缓冲器单元中存储的滤波区域中包括的宏块的两对垂直相邻8×8块之间的边界附近的像素进行水平重叠平滑然后进行垂直重叠平滑。
18.根据权利要求14的滤波设备，其中利用该缓冲器单元中存储的滤波区域中包括的宏块的每一对相邻子块之间的边界的每一边的至少四行或四列像素，来执行环路滤波。
19.根据权利要求14的滤波设备，其中在环路滤波操作中，对该缓冲器单元中存储的滤波区域中包括的宏块的两对水平相邻8×8块之间的边界附近的像素进行水平环路滤波，对该缓冲器单元中存储的滤波区域中包括的宏块的每对水平相邻8×4子块之间的边界附近的像素进行水平环路滤波，对该缓冲器单元中存储的滤波区域中包括的宏块的两对垂直相邻8×8块之间的边界附近的像素进行垂直环路滤波，并对该缓冲器单元中存储的滤波区域中包括的宏块的每对垂直相邻4×8子块之间的边界附近的像素进行垂直环路滤波。
20.根据权利要求11的滤波设备，其中该音频视频编解码器符合VC-1标准。
21.至少一种存储有指令的计算机可读介质，该指令控制至少一个处理器执行以下方法，该方法包括：
确定预定宏块为滤波区域；
扩展该滤波区域，以进一步包括与该预定宏块相邻的宏块中该预定宏块和与该预定宏块相邻的宏块之间的边界附近的一部分；和
根据时间的过去，而以宏块为单位对该扩展的滤波区域执行解块滤波操作。
CNB2005100848539A 2004-07-19 2005-07-19 在音频视频编解码器中使用的滤波方法和设备 Expired - Fee Related CN100490538C (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020040055893A KR20050121627A (ko) 2004-06-22 2004-07-19 동영상 코덱의 필터링 방법 및 필터링 장치
KR55893/04 2004-07-19

Publications (2)

Publication Number Publication Date
CN1725860A true CN1725860A (zh) 2006-01-25
CN100490538C CN100490538C (zh) 2009-05-20

Family

ID=35599385

Family Applications (1)

Application Number Title Priority Date Filing Date
CNB2005100848539A Expired - Fee Related CN100490538C (zh) 2004-07-19 2005-07-19 在音频视频编解码器中使用的滤波方法和设备

Country Status (2)

Country Link
US (1) US20060013315A1 (zh)
CN (1) CN100490538C (zh)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101115195B (zh) * 2006-07-24 2010-08-18 同济大学 视频码流的宏块级耦合的解码和环路滤波方法和装置
CN101080009B (zh) * 2007-07-17 2011-02-23 智原科技股份有限公司 运用于图像编解码器中的去方块过滤方法与装置
WO2014019496A1 (en) * 2012-08-03 2014-02-06 Mediatek Inc. Video processing system with shared/configurable in-loop filter data buffer architecture and related video processing method thereof
CN103765889A (zh) * 2011-09-09 2014-04-30 松下电器产业株式会社 低复杂度解块滤波器判定
CN104041050A (zh) * 2012-01-20 2014-09-10 高通股份有限公司 多线程纹理解码
CN104754353A (zh) * 2013-12-31 2015-07-01 珠海全志科技股份有限公司 Vc-1编解码insc的实现方法及系统
WO2019134557A1 (zh) * 2018-01-03 2019-07-11 华为技术有限公司 视频图像的处理方法及装置
WO2020094154A1 (en) * 2018-11-09 2020-05-14 Beijing Bytedance Network Technology Co., Ltd. Improvements for region based adaptive loop filter

Families Citing this family (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050281339A1 (en) * 2004-06-22 2005-12-22 Samsung Electronics Co., Ltd. Filtering method of audio-visual codec and filtering apparatus
JP5086664B2 (ja) * 2007-03-02 2012-11-28 ギガフォトン株式会社 極端紫外光源装置
TWI335764B (en) * 2007-07-10 2011-01-01 Faraday Tech Corp In-loop deblocking filtering method and apparatus applied in video codec
GB0807804D0 (en) * 2008-04-29 2008-06-04 Imagination Tech Ltd Interlaced video edge filtering
US8326075B2 (en) 2008-09-11 2012-12-04 Google Inc. System and method for video encoding using adaptive loop filter
KR101529992B1 (ko) 2010-04-05 2015-06-18 삼성전자주식회사 픽셀 그룹별 픽셀값 보상을 위한 비디오 부호화 방법과 그 장치, 및 픽셀 그룹별 픽셀값 보상을 위한 비디오 복호화 방법과 그 장치
US20110280321A1 (en) * 2010-05-12 2011-11-17 Shu-Hsien Chou Deblocking filter and method for controlling the deblocking filter thereof
US8638863B1 (en) * 2010-05-18 2014-01-28 Google Inc. Apparatus and method for filtering video using extended edge-detection
US20230290542A1 (en) * 2010-08-31 2023-09-14 3M Innovative Properties Company Shielded electric cable
BR112013003296A2 (pt) * 2010-08-31 2016-06-07 3M Innovatie Properties Company cabo elétrico blindado e montagem de cabo
EP3046115B1 (en) 2010-08-31 2019-07-24 3M Innovative Properties Company High density shielded electrical cable and other shielded cables, systems, and methods
WO2012030367A1 (en) 2010-08-31 2012-03-08 3M Innovative Properties Company Shielded electrical cable in twinaxial configuration
US10147522B2 (en) 2010-08-31 2018-12-04 3M Innovative Properties Company Electrical characteristics of shielded electrical cables
US8780996B2 (en) 2011-04-07 2014-07-15 Google, Inc. System and method for encoding and decoding video data
US8781004B1 (en) 2011-04-07 2014-07-15 Google Inc. System and method for encoding video using variable loop filter
US8767817B1 (en) 2011-04-07 2014-07-01 Google Inc. Apparatus and method for coding using parameterized equation
US8780971B1 (en) 2011-04-07 2014-07-15 Google, Inc. System and method of encoding using selectable loop filters
US8885706B2 (en) 2011-09-16 2014-11-11 Google Inc. Apparatus and methodology for a video codec system with noise reduction capability
US9131073B1 (en) 2012-03-02 2015-09-08 Google Inc. Motion estimation aided noise reduction
US9344729B1 (en) 2012-07-11 2016-05-17 Google Inc. Selective prediction signal filtering
KR101994599B1 (ko) * 2013-10-25 2019-06-28 미디어텍 인크. 전송 동기화 이벤트에 따라 압축된 픽처의 전송을 제어하는 방법 및 장치
US10102613B2 (en) 2014-09-25 2018-10-16 Google Llc Frequency-domain denoising
JP6964780B2 (ja) * 2017-12-29 2021-11-10 テレフオンアクチーボラゲット エルエム エリクソン（パブル） 参照値と関係するデバイスとを使用するビデオの符号化および／または復号を行う方法
US10884829B1 (en) * 2020-05-05 2021-01-05 Innovium, Inc. Shared buffer memory architecture
US11522817B1 (en) 2021-01-04 2022-12-06 Innovium, Inc. Spatial dispersion buffer

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6188799B1 (en) * 1997-02-07 2001-02-13 Matsushita Electric Industrial Co., Ltd. Method and apparatus for removing noise in still and moving pictures
US6205181B1 (en) * 1998-03-10 2001-03-20 Chips & Technologies, Llc Interleaved strip data storage system for video processing
US20030012286A1 (en) * 2001-07-10 2003-01-16 Motorola, Inc. Method and device for suspecting errors and recovering macroblock data in video coding
AU2002326713B2 (en) * 2001-08-23 2006-12-14 Polycom, Inc. System and method for video error concealment
US7031392B2 (en) * 2002-09-20 2006-04-18 Seiko Epson Corporation Method and apparatus for video deblocking
US7173971B2 (en) * 2002-11-20 2007-02-06 Ub Video Inc. Trailing artifact avoidance system and method
US7162093B2 (en) * 2003-09-07 2007-01-09 Microsoft Corporation Slice-layer in video codec
US7680351B2 (en) * 2004-05-21 2010-03-16 Broadcom Corporation Video deblocking method and apparatus
US20050281339A1 (en) * 2004-06-22 2005-12-22 Samsung Electronics Co., Ltd. Filtering method of audio-visual codec and filtering apparatus
US8576924B2 (en) * 2005-01-25 2013-11-05 Advanced Micro Devices, Inc. Piecewise processing of overlap smoothing and in-loop deblocking

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101115195B (zh) * 2006-07-24 2010-08-18 同济大学 视频码流的宏块级耦合的解码和环路滤波方法和装置
CN101080009B (zh) * 2007-07-17 2011-02-23 智原科技股份有限公司 运用于图像编解码器中的去方块过滤方法与装置
CN103765889B (zh) * 2011-09-09 2017-05-24 太阳专利托管公司 低复杂度解块滤波器判定
CN103765889A (zh) * 2011-09-09 2014-04-30 松下电器产业株式会社 低复杂度解块滤波器判定
CN104041050A (zh) * 2012-01-20 2014-09-10 高通股份有限公司 多线程纹理解码
US9438911B2 (en) 2012-08-03 2016-09-06 Mediatek Inc. Video processing system with shared/configurable in-loop filter data buffer architecture and related video processing method thereof
WO2014019496A1 (en) * 2012-08-03 2014-02-06 Mediatek Inc. Video processing system with shared/configurable in-loop filter data buffer architecture and related video processing method thereof
CN107087206A (zh) * 2012-08-03 2017-08-22 联发科技股份有限公司 视频处理系统及其相关视频处理方法
CN104754353A (zh) * 2013-12-31 2015-07-01 珠海全志科技股份有限公司 Vc-1编解码insc的实现方法及系统
CN104754353B (zh) * 2013-12-31 2018-08-10 珠海全志科技股份有限公司 Vc-1编解码insc的实现方法及系统
WO2019134557A1 (zh) * 2018-01-03 2019-07-11 华为技术有限公司 视频图像的处理方法及装置
US11463700B2 (en) 2018-01-03 2022-10-04 Huawei Technologies Co., Ltd. Video picture processing method and apparatus
WO2020094154A1 (en) * 2018-11-09 2020-05-14 Beijing Bytedance Network Technology Co., Ltd. Improvements for region based adaptive loop filter

Also Published As

Publication number Publication date
US20060013315A1 (en) 2006-01-19
CN100490538C (zh) 2009-05-20

Similar Documents

Publication Publication Date Title
CN1725860A (zh) 在音频视频编解码器中使用的滤波方法、设备和介质
US11284117B2 (en) Deblocking filtering
US8031778B2 (en) Picture decoding device and method
JP5396478B2 (ja) 適応ループフィルタを用いた動画符号化方法
KR20200096466A (ko) 적응적 필터를 이용한 인트라 예측을 수행하는 영상 복호화 방법 및 컴퓨터로 읽을 수 있는 기록 매체
JP5711098B2 (ja) 画像符号化方法，画像復号方法，画像符号化装置，画像復号装置およびそれらのプログラム
CN1812576A (zh) 同时执行视频数据水平和垂直滤波的解块滤波器及其方法
US20070098070A1 (en) Image coding apparatus
US20050281339A1 (en) Filtering method of audio-visual codec and filtering apparatus
JP2022130647A (ja) 双方向オプティカル・フローに対するビット幅制御方法およびデバイス
CN1977541A (zh) 运动补偿预测方法和运动补偿预测装置
JP2006165840A (ja) 動き補償画像符号化装置及び符号化方法
CN1960495A (zh) 图像编码装置、方法及程序
CN1543220A (zh) 视频解码装置和方法
CN1722842A (zh) 视听编解码器的滤波方法和滤波设备
JP2007235886A (ja) 動画像符号化方法、動画像復号方法、動画像符号化装置、動画像復号装置、フィルタ装置及びプログラム
JP2007013298A (ja) 画像符号化装置
CN1248487C (zh) 根据编码信息提供效用度量进行视频增强的装置和方法
US11917144B2 (en) Efficient in-loop filtering for video coding
JP2007258882A (ja) 画像復号装置
JP2007180723A (ja) 画像処理装置及び画像処理方法
JP2005311512A (ja) エラーコンシールメント方法及び復号器
JP2009027762A (ja) 動き補償画像符号化装置及び符号化方法
JP2006339774A (ja) 動画像符号化装置
TWI832449B (zh) 視訊編解碼方法及裝置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
C17 Cessation of patent right
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20090520

Termination date: 20100719