CN101945281A - 视频编码的滤波方法及装置 - Google Patents

视频编码的滤波方法及装置 Download PDF

Info

Publication number
CN101945281A
CN101945281A CN2010102866373A CN201010286637A CN101945281A CN 101945281 A CN101945281 A CN 101945281A CN 2010102866373 A CN2010102866373 A CN 2010102866373A CN 201010286637 A CN201010286637 A CN 201010286637A CN 101945281 A CN101945281 A CN 101945281A
Authority
CN
China
Prior art keywords
filtering
macro block
macro
carried out
current macro
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2010102866373A
Other languages
English (en)
Other versions
CN101945281B (zh
Inventor
曾幸
鲁晓牧
吴钊
王宁
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
ZTE Corp
Original Assignee
ZTE Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ZTE Corp filed Critical ZTE Corp
Priority to CN201010286637.3A priority Critical patent/CN101945281B/zh
Publication of CN101945281A publication Critical patent/CN101945281A/zh
Priority to PCT/CN2011/076286 priority patent/WO2012031498A1/zh
Application granted granted Critical
Publication of CN101945281B publication Critical patent/CN101945281B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本发明公开了一种视频编码的滤波方法及装置,该方法包括:在编码每帧视频图像前对视频图像进行感兴趣区域检测,得到以宏块为单位的感兴趣区域;计算视频图像中每个宏块到感兴趣区域的中心宏块的距离;按照各个宏块到中心宏块的距离分别对各个宏块进行空间滤波。本发明达到了提高感兴趣区域图像质量的效果。

Description

视频编码的滤波方法及装置
技术领域
本发明涉及通信领域,具体而言,涉及一种视频编码的滤波方法及装置。
背景技术
网络技术和视频编码技术的巨大进步使得人们可以方便地利用各种终端进行视频对话。但是,由于信道带宽的限制,目前视频通话的图像质量普遍不能令人满意。具体表现在图像模糊、图像出现方块、色彩失真等。要想使用户得到更好的视频通话体验,必须改善低码率下的视频图像质量。
在目前通信带宽相对不足的情况下,有人提出了基于感兴趣区域的视频编码方法。基于感兴趣区域的视频编码方法将视频图像中用户比较关注的部分(例如,视频通话中的人脸)和其他图像部分区分开,对两者采用不同的编码方法,从而改善感兴趣区域的图像质量,提高用户的感受。例如,在手机可视电话中,由于图像尺寸小,用户的脸部通常是最受关注的部分,如果能够提高编码图像中脸部的清晰度,就可以很大地提高使用者的主观感受。
通常,基于感兴趣区域的编码会通过降低感兴趣区域的量化参数来提高感兴趣区域的图像质量。由于各视频编码标准中对相邻宏块的量化参数改变范围限定的很小,仅仅通过降低量化参数的方法对感兴趣区域的图像质量改善有限。因此,需要采用其他的编码技术来提高感兴趣区域的图像质量。
发明内容
本发明的主要目的在于提供视频编码的滤波方案,以至少解决上述的相关技术中基于感兴趣区域的编码的图像质量不高的问题。
为了实现上述目的,根据本发明的一个方面,提供了一种视频编码的滤波方法,该方法包括:在编码每帧视频图像前对视频图像进行感兴趣区域检测,得到以宏块为单位的感兴趣区域;计算视频图像中每个宏块到感兴趣区域的中心宏块的距离;按照各个宏块到中心宏块的距离分别对各个宏块进行空间滤波。
进一步地,在按照各个宏块到中心宏块的距离分别对各个宏块进行空间滤波之后,该方法还包括:确定当前宏块属于非感兴趣区域并且当前宏块采用帧间编码;根据当前宏块的像素方差、残差系数方差和运动强度对当前宏块进行滤波。
进一步地,根据当前宏块的像素方差、残差系数方差和运动强度对当前宏块进行滤波包括:根据当前宏块的像素方差、残差系数方差和运动强度计算综合滤波因子;判断综合滤波因子是否大于第一门限,如果是,则不对当前宏块进行残差滤波,否则,使用预定的滤波模板对当前宏块进行残差滤波。
进一步地,使用预定的滤波模板对当前宏块进行残差滤波包括:当综合滤波因子大于或等于第一门限且小于第二门限时,使用滤波模板
Figure BSA00000278276300021
对当前宏块进行残差滤波;当综合滤波因子大于或等于第二门限时,使用滤波模板
Figure BSA00000278276300031
对当前宏块进行残差滤波。
进一步地,在按照各个宏块到中心宏块的距离分别对各个宏块进行空间滤波之后,该方法还包括:对非感兴趣区域的每个宏块的离散余弦变换系数进行滤波。
进一步地,对非感兴趣区域的每个宏块的离散余弦变换系数进行滤波包括:使用公式对非感兴趣区域的每个宏块的离散余弦变换系数进行滤波,其中,是滤波前的离散余弦变换系数,
Figure BSA00000278276300034
是滤波后的离散余弦变换系数。
进一步地,按照距离的大小对每个宏块进行空间滤波包括:判断当前宏块到中心宏块的距离是否大于第三门限,如果是,则使用预定的滤波模板对当前宏块进行空间滤波,否则,不对当前宏块进行空间滤波。
进一步地,使用预定的滤波模板对当前宏块进行空间滤波包括:当当前宏块到中心宏块的距离大于第三门限且小于或等于第四门限时,使用滤波模板
Figure BSA00000278276300035
对当前宏块进行空间滤波;当当前宏块到中心宏块的距离大于第四门限且小于或等于第五门限时,使用滤波模板
Figure BSA00000278276300041
对当前宏块进行空间滤波;当当前宏块到中心宏块的距离大于第五门限且小于或等于第六门限时,使用滤波模板
Figure BSA00000278276300042
对当前宏块进行空间滤波;当当前宏块到中心宏块的距离大于第六门限时,使用滤波模板
Figure BSA00000278276300043
对当前宏块进行空间滤波。
为了实现上述目的,根据本发明的另一方面,提供了一种视频编码的滤波装置,该装置包括:检测模块,用于在编码每帧视频图像前对视频图像进行感兴趣区域检测,得到以宏块为单位的感兴趣区域;计算模块,用于计算视频图像中每个宏块到感兴趣区域的中心宏块的距离;空间滤波模块,用于按照各个宏块到中心宏块的距离分别对各个宏块进行空间滤波。
进一步地,该装置还包括:确定模块,用于确定当前宏块属于非感兴趣区域并且当前宏块采用帧间编码;滤波模块,用于根据当前宏块的像素方差、残差系数方差和运动强度对当前宏块进行滤波。
通过本发明,采用按照各宏块到感兴趣区域中心的距离的不同对各个宏块进行空间滤波的方式,解决了相关技术中基于感兴趣区域的编码的图像质量不高的问题,进而达到了提高感兴趣区域图像质量的效果。
附图说明
此处所说明的附图用来提供对本发明的进一步理解,构成本申请的一部分,本发明的示意性实施例及其说明用于解释本发明,并不构成对本发明的不当限定。在附图中:
图1是根据本发明实施例的视频编码的滤波方法的流程图;
图2是根据本发明实施例的滤波方法的示意图;
图3是根据本发明实施例的空间像素域滤波方法的流程图;
图4是根据本发明实施例的运动补偿残差滤波的方法的流程图;
图5是根据本发明实施例的视频编码的滤波装置的结构框图;
图6是根据本发明实施例的视频编码的滤波装置的一个优选结构框图;
图7是根据本发明实施例的滤波模块64的优选的结构框图;
图8是根据本发明实施例的视频编码的滤波装置的另一个优选结构框图;
图9是根据本发明实施例的空间像素域滤波装置的示意图;
图10是根据本发明实施例的运动补偿残差滤波装置的示意图;以及
图11是根据本发明实施例的变换域滤波装置的示意图。
具体实施方式
下文中将参考附图并结合实施例来详细说明本发明。需要说明的是,在不冲突的情况下,本申请中的实施例及实施例中的特征可以相互组合。
实施例一
本发明实施例提供了一种视频编码的滤波方法。图1是根据本发明实施例的视频编码的滤波方法的流程图,如图1所示,该方法包括:
步骤S102,在编码每帧视频图像前对视频图像进行感兴趣区域检测,得到以宏块为单位的感兴趣区域;
步骤S104,计算视频图像中每个宏块到该感兴趣区域的中心宏块的距离;
步骤S106,按照各个宏块到该中心宏块的距离分别对各个宏块进行空间滤波。
该实施例根据各宏块到感兴趣区域中心的距离对各个宏块进行空间滤波,这样可以减少非感兴趣区域的图像高频信息,从而能够将更多的编码比特用于感兴趣区域,提高了感兴趣区域图像质量。
在本发明的一个实现方式中,在按照各个宏块到中心宏块的距离分别对各个宏块进行空间滤波之后,可以对宏块进行残差滤波。例如,如果当前宏块属于非感兴趣区域并且该当前宏块采用了帧间编码,则可以根据当前宏块的像素方差、残差系数方差和运动强度对该当前宏块进行滤波。该实施例对非感兴趣区域采用了运动补偿残差滤波,减少了非感兴趣区域编码所需的比特数,从而能够将更多的编码比特用于感兴趣区域,提高了感兴趣区域图像质量。
在具体实现过程中,可以根据当前宏块的像素方差、残差系数方差和运动强度计算综合滤波因子,然后,判断该综合滤波因子是否大于第一门限,如果是,则不对该当前宏块进行残差滤波,否则,使用预定的滤波模板对该当前宏块进行残差滤波。其中,第一门限的值可以根据实际情况进行设定。该实施例通过综合滤波因子控制是否需要滤波,实用性较强。
例如,当综合滤波因子大于或等于第一门限且小于第二门限时,可以使用滤波模板
Figure BSA00000278276300071
对该当前宏块进行残差滤波,当综合滤波因子大于或等于第二门限时,可以使用滤波模板
Figure BSA00000278276300072
对该当前宏块进行残差滤波。其中,第一门限的值可以根据实际情况进行设定。该实施例给出了优选的滤波模板,可操作性强。
在本发明的另一个实现方式中,还可以对非感兴趣区域的每个宏块的离散余弦变换系数进行滤波。例如,可以使用公式
Figure BSA00000278276300073
对非感兴趣区域的每个宏块的离散余弦变换系数进行滤波,其中,
Figure BSA00000278276300074
是滤波前的离散余弦变换系数,
Figure BSA00000278276300081
是滤波后的离散余弦变换系数。该实施例通过多重滤波,能够保证将更多的编码比特用于感兴趣区域,提高了感兴趣区域图像质量。
优选地,按照距离的大小对每个宏块进行空间滤波可以通过以下方式实现:首先,判断当前宏块到中心宏块的距离是否大于第三门限,如果是,则可以使用预定的滤波模板对该当前宏块进行空间滤波,否则,可以不对该当前宏块进行空间滤波。该实施例通过当前宏块到中心宏块的距离判断是否需要滤波,滤波效果更好。
其中,当当前宏块到中心宏块的距离大于第三门限且小于或等于第四门限时,可以使用滤波模板
Figure BSA00000278276300082
对当前宏块进行空间滤波;当当前宏块到中心宏块的距离大于第四门限且小于或等于第五门限时,可以使用滤波模板
Figure BSA00000278276300083
对当前宏块进行空间滤波;当当前宏块到中心宏块的距离大于第五门限且小于或等于第六门限时,使用滤波模板
Figure BSA00000278276300084
对当前宏块进行空间滤波;当当前宏块到中心宏块的距离大于第六门限时,使用滤波模板
Figure BSA00000278276300085
对当前宏块进行空间滤波。其中,各个门限值都可以根据实际情况设定。该实施例给出了优选的滤波模板,可操作性强。
实施例二
本实施例给出了一种根据本发明实施例的视频编码的滤波方法具体实现方式,该方法包括:
第一步:对输入图像进行感兴趣区域检测,得到以宏块为单位的感兴趣区域。
第二步:对整帧图像进行空域滤波。图2是根据本发明实施例的滤波方法的示意图,如图2所示,空间像素域滤波(即,空域滤波)发生在编码之前,属于视频编码前处理。空域滤波的作用在于减少非感兴趣区域的图像高频信息,以便将更多的编码比特用于感兴趣区域,同时,保证了感兴趣区域和非感兴趣区域图像质量的平滑过渡。对于宏块的亮度分量和色度分量,既可以进行相同处理,也可以只对亮度分量进行处理,而不对色度分量进行处理。
图3是根据本发明实施例的空间像素域滤波方法的流程图,如图3所示,空域滤波包括以下步骤:
步骤S301,计算图像中每个宏块到感兴趣区域中心宏块的距离。当前宏块与感兴趣区域中心宏块的距离可以使用公式(1)计算。当前宏块与感兴趣区域中心宏块的距离为:
D(x,y)=|y-y0|/2+|x-x0|    (1)
其中,x、y分别表示宏块的水平与垂直坐标;x0、y0分别表示感兴趣区域中心宏块的水平与垂直坐标,符号“||”表示对其中的数取绝对值。
步骤S302,根据距离的大小对每个宏块进行不同强度的空间滤波。判断各个宏块到中心宏块的距离是否大于阈值D 1,如果是,则进行步骤S303,否则,进入步骤S305。
步骤S303,对到中心宏块的距离大于阈值D 1的宏块,根据距离选取合适的滤波模板。这里可以选择不同的3×3滤波模板。需要注意的是,也可以选择其他滤波模板,例如选择5×5滤波模板。
对于距离大于D 1小于等于D2的宏块,相应的滤波模板可以为TF1;对于距离大于D2小于等于D3的宏块,相应的滤波模板可以为TF2;对于距离大于D3小于等于D4的宏块,相应的滤波模板可以为TF3;对于距离大于D4的宏块,相应的滤波模板可以为TF4。其中,
TF 1 = 1 5 1 5 25 5 1 5 1 ; TF 2 = 1 3 1 3 8 3 1 3 1 ;
TF 3 = 1 2 1 2 4 2 1 2 1 ; TF 4 = 1 1 1 1 1 1 1 1 1 .
步骤S304,使用选取的滤波模板对宏块的像素进行滤波。
步骤S305,判断当前的宏块是否为最后一个宏块,如果是,则流程结束,否则,返回步骤S301。
其中,对于距离感兴趣区域中心宏块小于等于阈值D1的宏块,不需要进行空域滤波。
上述阈值的选择主要与视频图像的尺寸有关。例如,对于3G视频通话典型的四分之一通用中间格式(Quarter commonintermediate format,简称为QCIF)尺寸,D1取值为2,D2取值为3,D3取值为4,D4取值为5。这样,离感兴趣区域中心越近的区域细节保留越多,编码失真越小。由于人眼对远离感兴趣区域的图像细节关注度低,这些区域的细节被滤波基本不会造成主观感受的下降,反而节省了比特用于编码感兴趣区域。
第三步:对帧间编码的非感兴趣区域宏块进行运动补偿残差滤波。如图2所示,该过程发生在运动补偿之后,以及离散余弦变化(Discrete Cosine Transform,简称为DCT)变换之前,其作用在于减少非感兴趣区域的图像噪声和人眼不敏感的高频信息,从而减少非感兴趣区域宏块的编码所需比特。对于宏块的亮度残差和色度残差,可以进行相同处理,也可以只对亮度残差进行处理,而不对色度残差进行处理。
图4是根据本发明实施例的运动补偿残差滤波的方法的流程图,如图4所示,该流程包括:
步骤S401,计算出当前宏块的像素方差、残差系数方差和运动强度;
步骤S402,根据公式(2)计算出综合滤波因子:
t = Er Er + Ec + a · | MVx | + | MVy | 2 × MV max - - - ( 2 )
其中,Er表示宏块的残差系数方差;Ec表示宏块像素方差;MVx,和MVy分别表示运动矢量水平和垂直分量;MVmax表示运动搜索最大范围;a表示权重因子。以3G视频通话典型的48Kbps而言,公式(2)中的权重因子a取值可以为2;该公式中的运动矢量和最大运动搜索范围都可以从运动估计与补偿器中得到。
步骤S403,判断综合滤波因子是否小于阈值T1,如果是,则流程结束,否则,进入步骤S404。
步骤S404,根据综合滤波因子选取相应的滤波模板。例如,根据综合滤波因子选择不同的3×3滤波模板。具体的,对于综合滤波因子大于等于T1且小于T2的宏块,相应的滤波模板可以为TF3;对于综合滤波因子大于等于T2的宏块,相应的滤波模板为可以为TF4。其中,综合滤波因子的阈值T1取值可以为0.1,T2取值可以为0.5。
步骤S405,使用选取的滤波模板对该当前宏块进行残差系数滤波。综合滤波因子越大,则滤波强度越大。在理想的运动估计后,运动补偿残差的主要成分是噪声和人眼不敏感的高频信息。残差宏块方差越大,表示可以减少的高频信息越多;而人眼对运动剧烈的图像不敏感,可以对大运动宏块进行更强的滤波。
第四步:对非感兴趣区域宏块的DCT系数进行滤波。如图2所示,该过程发生在DCT变换之后,量化之前。变换域滤波是对非感兴趣区域的帧间和帧内编码宏块的8×8块的DCT系数滤波,即对DCT系数进行矩阵量化。对于宏块的亮度DCT系数和色度DCT系数,可以进行相同处理,也可以只对亮度DCT系数进行处理,而不对色度DCT系数进行处理。可以采用公式(3)对DCT系数进行滤波:
D → 2 = D → 1 · 1 16 16 15 14 12 10 8 6 4 15 14 12 10 8 6 4 2 14 12 10 8 6 4 2 2 12 10 8 6 4 2 2 2 10 8 6 4 2 2 2 1 8 6 4 2 2 2 1 1 6 4 2 2 2 1 1 1 4 2 2 2 1 1 1 1 - - - ( 3 )
其中,其中,
Figure BSA00000278276300122
是滤波前的离散余弦变换系数,
Figure BSA00000278276300123
是滤波后的离散余弦变换系数,并且,
Figure BSA00000278276300124
Figure BSA00000278276300125
都是8×8的DCT系数矩阵。
第五步:当前图像编码结束,转至第一步继续下一帧编码。
该实施例利用人眼视觉特性,通过将三种滤波方式组合,适当减少非感兴趣区域的图像细节,将节省下的比特用于编码感兴趣区域,从而提高了感兴趣区域的图像质量,在低码率视频通话中可以有效地提高用户的体验。
需要注意的是,在本实施例中,第二步、第三步和第四步可以同时使用,也可以仅使用其中的一步或几步,即,仅使用一种或几种滤波方式。例如,仅使用第二步,然后就进入第五步,或者,使用第第二步和第三步,而不使用第四步。仅使用其中的一步或几步也可以达到提高感兴趣区域的图像质量的效果,只是没有第二步、第三步和第四步同时使用产生的效果好。
装置实施例
对应于上述方法实施例,本发明实施例还提供了一种视频编码的滤波装置。
图5是根据本发明实施例的视频编码的滤波装置的结构框图,如图5所示,该装置包括:检测模块52,用于在编码每帧视频图像前对视频图像进行感兴趣区域检测,得到以宏块为单位的感兴趣区域;计算模块54,耦合至检测模块52,用于计算视频图像中每个宏块到感兴趣区域的中心宏块的距离;空间滤波模块56,耦合至计算模块54,用于按照各个宏块到中心宏块的距离分别对各个宏块进行空间滤波。
图6是根据本发明实施例的视频编码的滤波装置的一个优选结构框图,优选地,该装置还包括:确定模块62,用于确定当前宏块属于非感兴趣区域并且当前宏块采用帧间编码;滤波模块64,耦合至确定模块62,用于根据当前宏块的像素方差、残差系数方差和运动强度对当前宏块进行滤波。
其中,图7是根据本发明实施例的滤波模块64的优选的结构框图,滤波模块64包括:计算子模块72,用于根据当前宏块的像素方差、残差系数方差和运动强度计算综合滤波因子;滤波子模块74,耦合至计算子模块72,用于判断综合滤波因子是否大于第一门限,如果是,则不对当前宏块进行残差滤波,否则,使用预定的滤波模板对当前宏块进行残差滤波。
其中,滤波子模块74用于在综合滤波因子大于或等于第一门限且小于第二门限时,使用滤波模板
Figure BSA00000278276300141
对当前宏块进行残差滤波;当综合滤波因子大于或等于第二门限时,使用滤波模板
Figure BSA00000278276300142
对当前宏块进行残差滤波。
图8是根据本发明实施例的视频编码的滤波装置的另一个优选结构框图,如图8所示,该装置还包括:系数滤波模块82,用于对非感兴趣区域的每个宏块的离散余弦变换系数进行滤波。
其中,系数滤波模块82使用公式
Figure BSA00000278276300143
对非感兴趣区域的每个宏块的离散余弦变换系数进行滤波,其中,是滤波前的离散余弦变换系数,
Figure BSA00000278276300145
是滤波后的离散余弦变换系数。
优选地,空间滤波模块56用于判断当前宏块到中心宏块的距离是否大于第三门限,如果是,则使用预定的滤波模板对当前宏块进行空间滤波,否则,不对当前宏块进行空间滤波。其中,当当前宏块到中心宏块的距离大于第三门限且小于或等于第四门限时,空间滤波模块56使用滤波模板
Figure BSA00000278276300151
对当前宏块进行空间滤波;当当前宏块到中心宏块的距离大于第四门限且小于或等于第五门限时,空间滤波模块56使用滤波模板
Figure BSA00000278276300152
对当前宏块进行空间滤波;当当前宏块到中心宏块的距离大于第五门限且小于或等于第六门限时,空间滤波模块56使用滤波模板
Figure BSA00000278276300153
对当前宏块进行空间滤波;当当前宏块到中心宏块的距离大于第六门限时,空间滤波模块56使用滤波模板
Figure BSA00000278276300154
对当前宏块进行空间滤波。
在具体应用过程中,本发明实施例还提出了三种滤波装置,分别完成上述三种滤波功能,并对应上述滤波装置的相应模块。
图9是根据本发明实施例的空间像素域滤波装置的示意图,如图9所示,该装置包括:距离确定器92,对应于计算模块52,用于根据每个宏块的坐标和感兴趣区域中心宏块的坐标确定每个宏块到中心宏块的距离;滤波模板确定器94,耦合至距离确定器92,用于根据距离确定器92确定的距离选择相应的滤波模板;卷积器96,耦合至滤波模板确定器94,与滤波模板确定器94联合实现空间滤波模块56的功能,用于将宏块的像素和确定的滤波模板进行卷积得到滤波后的宏块像素。
图10是根据本发明实施例的运动补偿残差滤波装置的示意图,如图10所示,该装置包括:残差系数方差确定器1002,用于确定当前宏块的残差系数方差;像素方差确定器1004,用于确定当前宏块的像素方差;运动强度确定器1006,用于根据运动矢量确定当前宏块的运动强度;综合滤波因子确定器1008,耦合至残差系数方差确定器1002、像素方差确定器1004和运动强度确定器1006,对应于计算子模块72,用于根据残差系数方差确定器1002、像素方差确定器1004和运动强度确定器1006确定的结果确定综合滤波因子;滤波模板确定器1010,耦合至综合滤波因子确定器1008,用于根据综合滤波因子确定相应的滤波模板;卷积器1012,耦合至滤波模板确定器1010,与滤波模板确定器1010联合实现滤波子模块74的功能,用于根据确定的滤波模板对当前宏块的残差系数进行滤波。
图11是根据本发明实施例的变换域滤波装置的示意图,如图11所示,该装置包括:滤波系数矩阵生成器1102,用于生成滤波系数矩阵;乘法器1104,耦合至滤波系数矩阵生成器1102,对应于系数滤波模块82,用于将变换系数矩阵与生成的滤波系数矩阵相乘;移位器1106,耦合至乘法器1104,用于产生滤波后的变换系数。
综上所述,本发明通过采用上述滤波技术,降低了视频中的噪声,适当减少了非感兴趣区域的细节信息,同时减少了压缩伪效应,从而将更多的比特用于编码感兴趣区域,提高了感兴趣区域图像质量的效果。
显然,本领域的技术人员应该明白,上述的本发明的各模块或各步骤可以用通用的计算装置来实现,它们可以集中在单个的计算装置上,或者分布在多个计算装置所组成的网络上,可选地,它们可以用计算装置可执行的程序代码来实现,从而,可以将它们存储在存储装置中由计算装置来执行,并且在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤,或者将它们分别制作成各个集成电路模块,或者将它们中的多个模块或步骤制作成单个集成电路模块来实现。这样,本发明不限制于任何特定的硬件和软件结合。
以上所述仅为本发明的优选实施例而已,并不用于限制本发明,对于本领域的技术人员来说,本发明可以有各种更改和变化。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (10)

1.一种视频编码的滤波方法,其特征在于,包括:
在编码每帧视频图像前对所述视频图像进行感兴趣区域检测,得到以宏块为单位的感兴趣区域;
计算所述视频图像中每个宏块到所述感兴趣区域的中心宏块的距离;
按照各个所述宏块到所述中心宏块的距离分别对各个所述宏块进行空间滤波。
2.根据权利要求1所述的方法,其特征在于,在按照各个所述宏块到所述中心宏块的距离分别对各个所述宏块进行空间滤波之后,所述方法还包括:
确定当前宏块属于非感兴趣区域并且所述当前宏块采用帧间编码;
根据所述当前宏块的像素方差、残差系数方差和运动强度对所述当前宏块进行滤波。
3.根据权利要求2所述的方法,其特征在于,根据所述当前宏块的像素方差、残差系数方差和运动强度对所述当前宏块进行滤波包括:
根据所述当前宏块的像素方差、残差系数方差和运动强度计算综合滤波因子;
判断所述综合滤波因子是否大于第一门限,如果是,则不对所述当前宏块进行残差滤波,否则,使用预定的滤波模板对所述当前宏块进行残差滤波。
4.根据权利要求3所述的方法,其特征在于,使用预定的滤波模板对所述当前宏块进行残差滤波包括:
当所述综合滤波因子大于或等于第一门限且小于第二门限时,使用滤波模板
Figure FSA00000278276200021
对所述当前宏块进行残差滤波;
当所述综合滤波因子大于或等于第二门限时,使用滤波模板
Figure FSA00000278276200022
对所述当前宏块进行残差滤波。
5.根据权利要求1至4中任一项所述的方法,其特征在于,在按照各个所述宏块到所述中心宏块的距离分别对各个所述宏块进行空间滤波之后,所述方法还包括:
对非感兴趣区域的每个宏块的离散余弦变换系数进行滤波。
6.根据权利要求5所述的方法,其特征在于,对非感兴趣区域的每个宏块的离散余弦变换系数进行滤波包括:
使用公式
Figure FSA00000278276200023
对非感兴趣区域的每个宏块的离散余弦变换系数进行滤波,其中,是滤波前的离散余弦变换系数,
Figure FSA00000278276200025
是滤波后的离散余弦变换系数。
7.根据权利要求1所述的方法,其特征在于,按照距离的大小对所述每个宏块进行空间滤波包括:
判断当前宏块到所述中心宏块的距离是否大于第三门限,如果是,则使用预定的滤波模板对所述当前宏块进行空间滤波,否则,不对所述当前宏块进行空间滤波。
8.根据权利要求7所述的方法,其特征在于,使用预定的滤波模板对所述当前宏块进行空间滤波包括:
当所述当前宏块到所述中心宏块的距离大于第三门限且小于或等于第四门限时,使用滤波模板
Figure FSA00000278276200031
对所述当前宏块进行空间滤波;
当所述当前宏块到所述中心宏块的距离大于第四门限且小于或等于第五门限时,使用滤波模板
Figure FSA00000278276200032
对所述当前宏块进行空间滤波;
当所述当前宏块到所述中心宏块的距离大于第五门限且小于或等于第六门限时,使用滤波模板
Figure FSA00000278276200033
对所述当前宏块进行空间滤波;
当所述当前宏块到所述中心宏块的距离大于第六门限时,使用滤波模板
Figure FSA00000278276200034
对所述当前宏块进行空间滤波。
9.一种视频编码的滤波装置,其特征在于,包括:
检测模块,用于在编码每帧视频图像前对所述视频图像进行感兴趣区域检测,得到以宏块为单位的感兴趣区域;
计算模块,用于计算所述视频图像中每个宏块到所述感兴趣区域的中心宏块的距离;
空间滤波模块,用于按照各个所述宏块到所述中心宏块的距离分别对各个所述宏块进行空间滤波。
10.根据权利要求9所述的装置,其特征在于,所述装置还包括:
确定模块,用于确定当前宏块属于非感兴趣区域并且所述当前宏块采用帧间编码;
滤波模块,用于根据所述当前宏块的像素方差、残差系数方差和运动强度对所述当前宏块进行滤波。
CN201010286637.3A 2010-09-10 2010-09-10 视频编码的滤波方法及装置 Active CN101945281B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201010286637.3A CN101945281B (zh) 2010-09-10 2010-09-10 视频编码的滤波方法及装置
PCT/CN2011/076286 WO2012031498A1 (zh) 2010-09-10 2011-06-24 视频编码的滤波方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201010286637.3A CN101945281B (zh) 2010-09-10 2010-09-10 视频编码的滤波方法及装置

Publications (2)

Publication Number Publication Date
CN101945281A true CN101945281A (zh) 2011-01-12
CN101945281B CN101945281B (zh) 2014-09-10

Family

ID=43437005

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201010286637.3A Active CN101945281B (zh) 2010-09-10 2010-09-10 视频编码的滤波方法及装置

Country Status (2)

Country Link
CN (1) CN101945281B (zh)
WO (1) WO2012031498A1 (zh)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2012031498A1 (zh) * 2010-09-10 2012-03-15 中兴通讯股份有限公司 视频编码的滤波方法及装置
CN105516721A (zh) * 2014-10-20 2016-04-20 广东中星电子有限公司 一种视频编码器及其码率控制方法
CN105930678A (zh) * 2016-05-19 2016-09-07 信阳农林学院 一种生猪口蹄疫实时预警的方法及系统
CN106572351A (zh) * 2015-10-13 2017-04-19 腾讯科技(北京)有限公司 视频编码中的码率控制方法及装置
CN107396114A (zh) * 2011-02-23 2017-11-24 高通股份有限公司 多度量滤波
CN108063946A (zh) * 2017-11-16 2018-05-22 腾讯科技(成都)有限公司 图像编码方法和装置、存储介质及电子装置
WO2020258241A1 (zh) * 2019-06-28 2020-12-30 深圳市大疆创新科技有限公司 可移动平台的图像处理方法、装置、可移动平台及介质
CN114531599A (zh) * 2022-04-25 2022-05-24 中国医学科学院阜外医院深圳医院(深圳市孙逸仙心血管医院) 一种用于医疗图像存储的图像压缩方法

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101102492A (zh) * 2007-07-26 2008-01-09 上海交通大学 实现基于感兴趣区域的压缩域mpeg-2到h.264视频转换的方法
CN101420618A (zh) * 2008-12-02 2009-04-29 西安交通大学 基于感兴趣区域的自适应可伸缩视频编解码结构设计方法
JP2010141883A (ja) * 2008-12-10 2010-06-24 Nvidia Corp 画像データの測定ベースのスケーラブルデブロックフィルタリング

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101882316A (zh) * 2010-06-07 2010-11-10 深圳市融创天下科技发展有限公司 一种图像区域划分/编码方法、装置及系统
CN101945281B (zh) * 2010-09-10 2014-09-10 中兴通讯股份有限公司 视频编码的滤波方法及装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101102492A (zh) * 2007-07-26 2008-01-09 上海交通大学 实现基于感兴趣区域的压缩域mpeg-2到h.264视频转换的方法
CN101420618A (zh) * 2008-12-02 2009-04-29 西安交通大学 基于感兴趣区域的自适应可伸缩视频编解码结构设计方法
JP2010141883A (ja) * 2008-12-10 2010-06-24 Nvidia Corp 画像データの測定ベースのスケーラブルデブロックフィルタリング

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2012031498A1 (zh) * 2010-09-10 2012-03-15 中兴通讯股份有限公司 视频编码的滤波方法及装置
CN107396114A (zh) * 2011-02-23 2017-11-24 高通股份有限公司 多度量滤波
CN107396114B (zh) * 2011-02-23 2020-09-22 高通股份有限公司 多度量滤波
CN105516721A (zh) * 2014-10-20 2016-04-20 广东中星电子有限公司 一种视频编码器及其码率控制方法
CN106572351A (zh) * 2015-10-13 2017-04-19 腾讯科技(北京)有限公司 视频编码中的码率控制方法及装置
CN106572351B (zh) * 2015-10-13 2019-11-15 腾讯科技(北京)有限公司 视频编码中的码率控制方法和装置、电子设备以及计算机可读存储介质
CN105930678A (zh) * 2016-05-19 2016-09-07 信阳农林学院 一种生猪口蹄疫实时预警的方法及系统
CN108063946A (zh) * 2017-11-16 2018-05-22 腾讯科技(成都)有限公司 图像编码方法和装置、存储介质及电子装置
WO2020258241A1 (zh) * 2019-06-28 2020-12-30 深圳市大疆创新科技有限公司 可移动平台的图像处理方法、装置、可移动平台及介质
CN114531599A (zh) * 2022-04-25 2022-05-24 中国医学科学院阜外医院深圳医院(深圳市孙逸仙心血管医院) 一种用于医疗图像存储的图像压缩方法
CN114531599B (zh) * 2022-04-25 2022-06-21 中国医学科学院阜外医院深圳医院(深圳市孙逸仙心血管医院) 一种用于医疗图像存储的图像压缩方法

Also Published As

Publication number Publication date
CN101945281B (zh) 2014-09-10
WO2012031498A1 (zh) 2012-03-15

Similar Documents

Publication Publication Date Title
CN101945281B (zh) 视频编码的滤波方法及装置
Wang et al. Frame rate up-conversion using trilateral filtering
CN100592798C (zh) 一种视频编码快速变换量化的实现方法
CN104301724B (zh) 视频处理方法、编码设备和解码设备
CN105472205A (zh) 编码过程中的实时视频降噪方法和装置
CN104994382B (zh) 一种感知率失真的优化方法
CN106060539B (zh) 一种低传输带宽的视频编码方法
JP2008508751A5 (zh)
MX2007011084A (es) Clasificacion de contenido para procesamiento multimedia.
CN111131831B (zh) 数据传输方法及装置
CN109862356A (zh) 一种基于感兴趣区域的视频编码方法及系统
CN110730346B (zh) 基于编码树单元失真优化的视频编码码率控制方法
WO2020098751A1 (zh) 一种视频数据的编码处理方法和计算机存储介质
CN106056638B (zh) 一种自适应纹理对比度的低复杂度压缩感知图像编码方法
CN110996102A (zh) 抑制p/b帧中帧内块呼吸效应的视频编码方法及装置
CN102547282B (zh) 可伸缩视频编码错误隐藏方法、解码器和系统
JPH04219089A (ja) 画像符号化装置
CN107343202A (zh) 基于附加码率的无反馈分布式视频编解码方法及移动终端
CN110740316A (zh) 数据编码方法及装置
CN111770334B (zh) 数据编码方法及装置、数据解码方法及装置
CN111314700B (zh) 抑制呼吸效应的视频编码方法及装置
CN103167290A (zh) 一种视频编码运动强度量化方法及装置
CN102685491A (zh) 一种实现视频编码的方法和系统
CN103313064B (zh) 基于帧间模式和运动修补的时域错误隐藏方法
CN109089116A (zh) 一种Skip类型宏块的判定方法、装置、设备及介质

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant