CN101188763A - 图像数据滤波方法 - Google Patents

图像数据滤波方法 Download PDF

Info

Publication number
CN101188763A
CN101188763A CNA2007101814401A CN200710181440A CN101188763A CN 101188763 A CN101188763 A CN 101188763A CN A2007101814401 A CNA2007101814401 A CN A2007101814401A CN 200710181440 A CN200710181440 A CN 200710181440A CN 101188763 A CN101188763 A CN 101188763A
Authority
CN
China
Prior art keywords
pixel
piece
filtering
block
marker
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CNA2007101814401A
Other languages
English (en)
Inventor
李英烈
朴玄旭
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Korea Advanced Institute of Science and Technology KAIST
Original Assignee
Samsung Electronics Co Ltd
Korea Advanced Institute of Science and Technology KAIST
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd, Korea Advanced Institute of Science and Technology KAIST filed Critical Samsung Electronics Co Ltd
Publication of CN101188763A publication Critical patent/CN101188763A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/86Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117Filters, e.g. for pre-processing or post-processing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136Incoming video signal characteristics or properties
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136Incoming video signal characteristics or properties
    • H04N19/137Motion inside a coding unit, e.g. average field, frame or block difference
    • H04N19/139Analysis of motion vectors, e.g. their magnitude, direction, variance or reliability
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136Incoming video signal characteristics or properties
    • H04N19/14Coding unit complexity, e.g. amount of activity or edge presence estimation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/18Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a set of transform coefficients
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/182Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a pixel
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/20Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video object coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46Embedding additional information in the video signal during the compression process
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Complex Calculations (AREA)

Abstract

公开了一种图像数据滤波方法,用于减少当解码基于块压缩的图像数据时产生的量化效应,该方法包括下列步骤:根据所述块中是否存在非零象素,提取表示是否需要滤波的信号标志;和如果通过检验被检测的信号标志确定需要滤波,则通过预定方法滤波对应于所述信号标志的解码图像数据。因此,可通过使用信号标志和自适应滤波器减少量化效应,并且也减少滤波的计算量。此外,通过并行处理而不需乘法和除法减少了硬件的复杂性。

Description

图像数据滤波方法
本申请是申请日为1998年10月9日、申请号为200410063567.X、发明名称为“用于减少量化效应的图像数据后处理方法和装置”的发明专利申请的分案申请。
技术领域
本发明涉及图像数据处理,并且特别涉及用于减少量化效应的图像数据后处理方法和装置。
背景技术
本发明被采纳为ISO/IEC JTC1/SC29/WG11 N1902(ISO/IEC 14496-2委员会草案)
通常,诸如由国际电信联盟(ITU)推荐的H.263和国际标准化组织(ISO)的MPEG的图像编码标准采用基于块的运动估计和块的离散余弦变换(DCT)。此外,多数视频编码标准使用8×8象素块DCT,用于将信息压缩进几个变换块。这种基于块的DCT方案利用了图像的局部空间相关特性。
然而,当恢复基于块编码的图像数据时,恢复的图像严重劣化,引起块边界附近的成块现象(blocking artifacts),在块交叉点处的角分离物(corneroutliers),以及图像边缘附近的振铃噪声(ringing noise)。因为MPEG量化8×8象素块的变换系数。特别是,当高度压缩图像时,图像劣变变得严重。
当高度压缩图像时,基于块的编码导致公知的块边界附近的成块现象、在各块的拐角点(corner point)处的角分离物、和图像边缘附近的振铃噪声。
成块现象是在相对一致的区域沿块边界出现的栅极噪声(grid noise)。当压缩数据恢复之后显示在屏幕上时,栅极噪声在块之间的边缘处显露出基于块处理的痕迹。于是,识别出块之间的边缘。此外,在8×8块的交叉点出现角分离物。还有,振铃噪声是当量化DCT的高频系数以便高度压缩图像时,由截取引起的典型的Gibb现象。结果,由于振铃噪声造成的预定间隔的图像重叠是可注意到的。
已经在下列文章中提到了用于减少由基于块的编码引起的成块现象、角分离物和振铃噪声的几种方法,这些文章是:[1]1997年出版的IEEE学报,图像处理,Lee,H.C.Kim和H.W.Park的“Blocking Effect Reduction of JPEGimages by Signal Adaptive Filtering(通过信号自适应滤波减少JPEG图像中的成块效应)”,[2]1986年出版的IEEE学报,ASSP,第34卷,第5号,第1258-1267页,B.Ramanurthi和A.Gersho的“Nonlinear Space Variant Postprocessing ofBlock Coded Images(基于块的图像的非线性空间变化后处理)”,[3]1995年7月,IEEE学报,图像处理,第4卷,第7号,第896-908页,Y.Ynag,N.Galatsanos和A.Katsaggelos的“Projection-Based Spatially Adaptive Reconstruction of Block-Transform Compressed Images(块变换压缩图像的基于投影的空间自适应重构)”,[4]1997年,IEEE学报,电路系统,视频技术,第7卷,第2号,第433-437页,Z.Xiong,M.T.Orchard,和Y.Q.Zhang的“A Deblocking Algorithumfor JPEG Compressed Images Using Overcomplete Wavelet Representations(使用过完成小波表示法用于JPEG压缩图像的解块算法)”。
在参考文章[1]中,已经提出了用于减少JPEG解压缩图像的量化效应的2维信号自适应滤波器(SAF)。此外,在参考文章[2]中,2维滤波器用来减少成块现象,并且1维滤波器用来减少阶梯噪声,产生好的效果。在参考文章[3]中,还提出了使用在凸面集上投影(projections onto convex sets,POCS)的理论的迭代图像恢复算法。
然而,这些算法的主要缺陷是它们的计算的复杂性。其间,由参考文章[4]提出了使用过完成小波表示法的后滤波,减少计算的复杂性。
然而,后滤波方法只应用于JPEG解压缩图像。此外,对于低比特率编码,在参考文章[5]中,已经提出了可应用于3维子带编码的空间时间自适应后滤波,该文章是:1995年7月,IEEE学报,图像处理,第4卷,第7号,第1032到1035页,T.S.Liu和N.Jayant的“Adaptive Postprocessing Algorithmsfor Low Bit Rate Video Signals(用于低比特率视频信号的自适应后处理算法)”。然而,该方法也有计算复杂的问题。
发明内容
为了解决上述问题,本发明的目的是提供一种图像数据后处理方法和装置,用于减少来自MPEG解压缩图像的量化效应诸如成块现象、角分离物和振铃噪声,该方法能够进行低比特率编码而不用复杂的计算。
按照本发明的一个方面,提供了一种图像数据后处理方法,用于减少当检测基于块压缩的图像数据时产生的量化效应,该方法包括下列步骤:(a)使用逆量化图像数据的逆量化残余信号和表示先前块和当前块之间的差值的运动矢量,检测表示是否需要后处理的信号标志;和(b)如果通过检验被检测的信号标志确定需要后处理,则通过预定方法滤波对应于所述信号标志的解码图像数据。
按照本发明的另一个方面,提供了一种图像数据后处理方法,用于减少当解码基于块压缩的图像数据时产生的量化效应,该方法包括下列步骤:参照在视频目标平面内编码模式中逆量化图像数据的逆量化系数的分布、和在视频目标平面间编码模式中表示先前视频目标平面的块和当前视频目标平面的块之间的差值的运动矢量,确定是否执行后处理以减少量化效应。
按照本发明的另一个方面,提供了一种图像数据后处理方法,用于减少当解码基于块压缩的图像数据时产生的量化效应,该方法包括下列步骤:(a)使用逆量化图像数据的逆量化系数分布和表示先前视频目标平面(VOP)的块和当前VOP的块之间的差值的运动矢量,检测表示是否需要后处理的信号标志(semphore);和(b)如果通过检验被检测的信号标志确定需要后处理,则通过预定方法滤波对应于信号标志的解码图像数据。
最好是,步骤(a)以VOP内模式对VOP内执行,并且以VOP间模式对VOP间执行。
最好是,信号标志包括:成块信号标志,表示是否需要减少块边界附近的成块现象;振铃信号标志,表示是否需要减少图像边缘附近的振铃噪声;
最好是,在逆量化所压缩的位流之后,通过调查逆量化系数的分布来检测VOP内的成块信号标志和振铃信号标志,其中该逆量化系数是离散余弦变换(DCT)系数。
最好是,VOP内的成块信号标志包括水平成块信号标志(HBS)和垂直成块信号标志(VBS),假定在构成8×8块的64个象素中,块的最左上角的象素是象素A,象素A的右边的象素是象素B,并且象素A下面的象素是象素C,VOP内的HBS和VBS通过下列步骤提取:(a)在逆量化所压缩的图像数据之后,计算关于逆量化8×8块的离散余弦变换(DCT)系数;(b)如果只有象素A的系数是非零,则设定HBS和VBS为“1”,表示需要后处理;(c)如果只有逆量化8×8块的顶行包括非零系数象素,设定VBS为“1”,表示需要后处理;和(d)如果逆量化8×8块的最左边列包括非零系数象素,设定HBS为“1”,表示需要后处理。
最好是,假定在构成8×8块的64个象素中,块的最左上角的象素是象素A,象素A的右边的象素是象素B,并且象素A下面的象素是象素C,如果除了逆量化8×8块的象素A、B和C外的任何象素具有非零系数,VOP内的振铃信号标志(RS)设定为“1”,表示需要后处理。
最好是,当前VOP间的成块信号标志包括:水平成块信号标志(HBS)和垂直成块信号标志(VBS),并且假定参考VOP包括预定参考块,并且由当前VOP间的块Ac的运动矢量(MVx,MVy)预测的参考VOP的块是运动块X,当前VOP间的块Ac的HBS和VBS由下列步骤提取:检验运动块X和参考块之间的重叠程度;对重叠象素的数目多于预定数目的参考块的HBS和VBS进行逐位与运算;及将当前VOP的块Ac的HBS和VBS设定为运算结果。
最好是,假定参考VOP包括预定参考块,并且由当前VOP间的块Ac的运动矢量(MVx,MVy)预测的参考VOP的块是运动块X,当前VOP间的块Ac的振铃信号标志通过下列步骤提取:如果在VOP间的8×8块中残余信号的逆量化系数(IQC)是非零,则将当前块Ac的RS设定为“1”;以由MPEG-4算法支持的8×8预测模式,设定块的RS为“1”,并且传送一个宏块(MB)的四个运动矢量;并且如果RS仍然是0,检验运动块X和参考块之间的重叠的程度;以及对重叠象素的数目大于预定数目的参考块的RS进行逐位或运算,以将当前VOP的块Ac的RS设定为运算结果。
最好是,通过下列步骤进行滤波:(a)如果块I和与块I相邻的块J的HBS设定为“1”,改变块I和块J之间的水平块边界的预定数目象素的值;(b)如果块I或块J的HBS是零,将水平块边界周围彼此相邻的两个象素的值之间的差值与H.263的量化因数(QP)相比较,并且如果象素的差值小于QP,改变数目小于在步骤(a)中数目的象素的值,其中以与水平块边界周围的象素中相同的方式,使用VBS对垂直块边界周围的象素执行滤波。
最好是,假定块I和J之间的水平块边界周围的六个象素是象素A、B、C、D、E和F,象素C和D是离水平块边界最近的象素,象素A和F是离水平块边界最远的象素,象素B和E位于象素A与C和象素D与F之间,在步骤(a)中使用7个抽头(1,1,1,2,1,1,1)低通滤波器对6个象素进行低通滤波,并且对象素B、C、D和E进行步骤(b)的滤波,其中,假定象素C和D之间的差值是d,象素C和D被滤波为象素C和D的平均值,经滤波的象素B和E分别与象素B和E相差d/8。
最好是,滤波步骤包括下列步骤:检测图像数据的水平和垂直边缘;并且对需要减少振铃噪声的8×8块执行2维自适应信号滤波,其中,假定预定大小的块内的一个象素是pixel[m][n],pixel[m][n]右边的象素是pixel[m][n+1],pixel[m][n]的左边的象素是pixel[m][n-1],pixel[m][n]和pixel[m][n+1]之间的差值是A1,并且pixel[m][n]和pixel[m][n-1]之间的差值是A2,H.263的量化因数是QP,通过逻辑公式((A1>QP)和(A2>QP))或(A1>2QP)或(A2>2QP)进行水平边缘检测,其中并且如果所述逻辑公式满足,pixel[m][n]被确定为边缘,并且边缘映射Edge[m][n]设定为“1”,假定pixel[m][n]之上的象素是pixel[m+1][n],pixel[m][n]之下的象素是pixel[m-1][n],pixel[m][n]和pixel[m+1][n]之间的差值是A’1,并且pixel[m][n]和pixel[m-1][n]之间的差值是A’2,H.263的量化因数是QP,通过逻辑公式((A’1>QP)和(A’2>QP))或(A’1>2QP)或(A’2>2QP)进行垂直边缘检测,并且如果所述逻辑公式满足,pixel[m][n]被确定为边缘,并且边缘映射Edge[m][n]设定为“1”,并且通过将4连接滤波器窗用到8×8块,进行信号自适应滤波,其中如果滤波器窗的中心象素是一边缘象素,则不执行滤波,如果滤波器窗的中心象素是非边缘象素,则进行加权滤波。
按照本发明的再一个方面,提供了一种图像数据后处理方法,用于减少当解码基于块压缩的图像数据时产生的量化效应,该方法包括下列步骤:执行用以解振铃滤波的边缘检测以减少振铃噪声,该边缘检测步骤包括下列步骤:检测图像数据的水平边缘;和检测所述图像数据的垂直边缘,其中,假定预定大小的块内的一个象素是pixel[m][n],pixel[m][n]右边的象素是pixel[m][n+1],pixel[m][n]的左边的象素是pixel[m][n-1],pixel[m][n]和pixel[m][n+1]之间的差值是A1,并且pixel[m][n]和pixel[m][n-1]之间的差值是A2,H.263的量化因数是QP,通过逻辑公式((A1>QP)和(A2>QP))或(A1>2QP)或(A2>2QP)进行水平边缘检测,其中并且如果所述逻辑公式满足,所述pixel[m][n]被确定为边缘,和假定pixel[m][n]之上的象素是pixel[m+1][n],pixel[m][n]之下的象素是pixel[m-1][n],pixel[m][n]和pixel[m+1][n]之间的差值是A’1,并且pixel[m][n]和pixel[m-1][n]之间的差值是A’2,H.263的量化因数是QP,通过逻辑公式((A,1>QP)和(A’2>QP))或(A’1>2QP)或(A’2>2QP)进行垂直边缘检测,其中如果所述逻辑公式满足,所述pixel[m][n]被确定为边缘。
按照本发明的再一个方面,提供了一种图像数据后处理方法,用于减少当解码基于块压缩的图像数据时产生的量化效应,该方法包括下列步骤:检测图像数据的水平和垂直边缘;和对需要减少振铃噪声的块执行2-D信号自适应滤波,其中,假定预定大小的块内的一个象素是pixel[m][n],pixel[m][n]右边的象素是pixel[m][n+1],pixel[m][n]的左边的象素是pixel[m][n-1],pixel[m][n]和pixel[m][n+1]之间的差值是A1,并且pixel[m][n]和pixel[m][n-1]之间的差值是A2,H.263的量化因数是QP,通过逻辑公式((A1>QP)和(A2>QP))或(A1>2QP)或(A2>2QP)进行水平边缘检测,其中并且如果所述逻辑公式满足,pixel[m][n]被确定为边缘,并且边缘映射Edge[m][n]设定为“1”,假定pixel[m][n]之上的象素是pixel[m+1][n],pixel[m][n]之下的象素是pixel[m-1][n],pixel[m][n]和pixel[m+1][n]之间的差值是A’1,并且pixel[m][n]和pixel[m-1][n]之间的差值是A’2,H.263的量化因数是QP,通过逻辑公式((A’1>QP)和(A’2>QP))或(A’1>2QP)或(A’2>2QP)进行垂直边缘检测,并且如果所述逻辑公式满足,pixel[m][n]被确定为边缘,并且边缘映射Edge[m][n]设定为“1”,并且通过将4连接滤波器窗用到8×8块,进行信号自适应滤波,其中如果滤波器窗的中心象素是一边缘象素,则不执行滤波,如果滤波器窗的中心象素是非边缘象素,则进行加权滤波。
按照本发明的再一个方面,提供了一种图像数据后处理方法,用于减少当解码基于块压缩的图像数据时产生的量化效应,该方法包括下列步骤:
检测当解码基于块压缩的图像数据时,在四个块相交的交叉点的拐角出现的角分离物,假定交叉点周围的四个象素是象素A、B、C和D,value[0]是A,value[1]是B,value[2]是C,value[3]是D,(A+B+C+D+2)/4是Average,A1和A2是在象素A所属的块中与象素A相邻的象素,A3是象素A的对角象素,B1和B2是在象素B所属的块中与象素B相邻的象素,B3是象素B的对角象素,C1和C2是在象素C所属的块中与象素C相邻的象素,C3是象素C的对角象素,D1和D2是在象素D所属的块中与象素D相邻的象素,D3是象素D的对角象素,所述检测角分离物的步骤包括下列步骤:(a)将value[0]和Average之间的差值与H.263的量化因数(QP)相比较,并且如果差值大于QP,将象素A算作角分离物候选象素;(b)对于value[1],value[2],value[3]执行步骤(a),以将相应象素算作角分离物候选象素;和(c)如果角分离物候选象素只有一个,则将该象素检测为角分离物象素,并且如果有两个或多个角分离物候选象素,则将与(A3+B3+C3+D3+2)/4之间具有最大差值的候选象素检测为角分离物象素。
此外,提供了一种图像数据后处理方法,一种图像数据后处理方法,用于减少当解码基于块压缩的图像数据时产生的量化效应,该方法包括下列步骤:  (a)检测当解码基于块压缩的图像数据时,在4个块相交的交叉点的拐角出现的角分离物;和(b)补偿所检测的角分离物进行补偿,其中,假定交叉点周围的四个象素是象素A、B、C和D,value[0]是A,value[1]是B,value[2]是C,value[3]是D,(A+B+C+D+2)/4是Average,A1和A2是在象素A所属的块中与象素A相邻的象素,A3是象素A的对角象素,B1和B2是在象素B所属的块中与象素B相邻的象素,B3是象素B的对角象素,C1和C2是在象素C所属的块中与象素C相邻的象素,C3是象素C的对角象素,D1和D2是在象素D所属的块中与象素D相邻的象素,D3是象素D的对角象素,步骤(a)可包括子步骤:(a1)将value[0]和Average之间的差值与H.263的量化因数(QP)相比较,并且如果差值大于QP,将象素A算作角分离物候选象素;(a2)对于value[1],value[2],value[3]执行步骤(a1),以将相应象素算作角分离物候选象素;和(a3)如果角分离物候选象素只有一个,则将该象素检测为角分离物象素,并且如果有两个或多个角分离物候选象素,则将与(A3+B3+C3+D3+2)/4之间具有最大差值的候选象素检测为角分离物象素。还可以通过下列步骤执行步骤(b):如果角分离物象素是A,并且象素A和A3之间的差值小于3QP/2,则对象素A补偿(4A+B+C+2D+4)/8成为A’、对象素A1补偿(A’+3A1+2)/4成为A1’、对象素A2补偿(A’+3A2+2)/4成为A2’;如果角分离物象素是B,并且象素B和B3之间的差值小于3QP/2,对象素B补偿(4B+C+D+2A+4)/8成为B’、对象素B1补偿(B’+3B1+2)/4成为B1’、对象素B2补偿(B’+3A2+2)/4量成为B2’;如果角分离物象素是C,并且象素C和C3之间的差值小于3QP/2,对象素C补偿(4C+D+A+2B+4)/8成为C’、对象素C1补偿(C’+3C1+2)/4成为C1’、对象素C2补偿(C’+3C2+2)/4成为C2’;如果角分离物象素是D,并且象素D和D3之间的差值小于3QP/2,对象素D补偿(4D+A+B+2C+4)/8成为D’、对象素D1补偿(D’+3D1+2)/4成为D1’、对象素D2补偿(D’+3D2+2)/4成为D2’。
此外,提供了一种图像数据后处理方法,用于减少当解码基于块压缩的图像数据时产生的量化效应,该方法包括下列步骤:(a)使用逆量化图像数据的逆量化系数分布和表示先前视频目标平面(VOP)的块和当前VOP的块之间的差值的运动矢量,检测表示是否需要后处理的信号标志;(b)假定交叉点周围的四个象素是象素A、B、C和D,value[0]是A,value[1]是B,value[2]是C,value[3]是D,(A+B+C+D+2)/4是Average,A1和A2是在象素A所属的块中与象素A相邻的象素,A3是象素A的对角象素,B1和B2是在象素B所属的块中与象素B相邻的象素,B3是象素B的对角象素,C1和C2是在象素C所属的块中与象素C相邻的象素,C3是象素C的对角象素,D1和D2是在象素D所属的块中与象素D相邻的象素,D3是象素D的对角象素,通过下列步骤检测逆量化图像数据块的角分离物象素:(b1)将value[0]和Average之间的差值与H.263的量化因数(QP)相比较,并且如果差值大于QP,将象素A算作角分离物候选象素;(b2)对于value[1],value[2],value[3]执行步骤(b1),以将相应象素算作角分离物候选象素;和(c)如果通过检验被检测的信号标志确定需要后处理,则通过预定方法滤波对应于信号标志的解码图像数据;和
(d)如果角分离物候选象素只有一个,则将该象素检测为角分离物象素,然后如果所述象素和与该象素对角的象素之间的差值小于3QP/2,通过预定方法对该象素进行补偿,并且如果有两个或多个角分离物候选象素,则将与(A3+B3+C3+D3+2)/4之间具有最大差值的候选象素检测为角分离物象素,然后通过所述预定方法补偿所检测的候选象素
按照本发明的另一个方面,提供了一种图像数据后处理装置,用于减少当解码基于块压缩的图像数据时产生的量化效应,该装置包括:信号标志检测器,使用逆量化图像数据的逆量化系数分布和表示先前视频目标平面(VOP)的块和当前VOP的块之间的差值的运动矢量,检测表示是否需要后处理的信号标志;解块滤波器,检验由信号标志检测器检测的成块信号标志,并且对于解码的图像数据执行解块滤波;角分离物补偿器,用于从经解块滤波的数据中检测角分离物,并且补偿检测的角分离物;和解振铃滤波器,检验由信号标志检测器检测的振铃信号标志,并且对角分离物补偿数据执行解振铃滤波。
此外,本发明可以作为能够由计算机运行的程序来实现,并且可以在一般用途的计算机上实现,该计算机运行来自计算机可用介质的该程序,所述计算机可用介质包括但不限于诸如磁存储介质(例如,ROM、软盘、硬盘等)、光可读介质(例如,CD-ROM,DVD等)、和载波(例如,经互联网传输)的存储介质。
按照本发明的另一个方面,提供了一种其上具有一计算机程序的计算机可读介质,该计算机程序用于减少当解码基于块压缩的图像数据时产生的量化效应的图像数据后处理。其中,所述图像数据后处理包括下列步骤:(a)使用逆量化图像数据的逆量化系数分布和表示先前视频目标平面(VOP)的块和当前VOP的块之间的差值的运动矢量,检测表示是否需要后处理的信号标志;(b)如果通过检验被检测的信号标志确定需要后处理,则通过预定方法滤波对应于信号标志的解码图像数据。
按照本发明的再一个方面,提供了一种计算机可读介质,其上嵌入一计算机程序,该计算机程序执行一种图像后处理方法,该方法用于减少当解码基于块压缩的图像数据时产生的量化效应,该方法包括下列步骤:(a)检测当解码基于块压缩的图像数据时,在四个块相交的交叉点的拐角出现的角分离物;和(b)对所检测的角分离物进行补偿,其中,假定交叉点周围的四个象素是象素A、B、C和D,value[0]是A,value[1]是B,value[2]是C,value[3]是D,(A+B+C+D+2)/4是Average,A1和A2是在象素A所属的块中与象素A相邻的象素,A3是象素A的对角象素,B1和B2是在象素B所属的块中与象素B相邻的象素,B3是象素B的对角象素,C1和C2是在象素C所属的块中与象素C相邻的象素,C3是象素C的对角象素,D1和D2是在象素D所属的块中与象素D相邻的象素,D3是象素D的对角象素,步骤(a)包括下列子步骤:(a1)将value[0]和Average之间的差值与H.263的量化因数(QP)相比较,并且如果差值大于QP,将象素A算作角分离物候选象素;(a2)对于value[1],value[2],value[3]执行步骤(a),以将相应象素算作角分离物候选象素;和(a3)如果角分离物候选象素只有一个,则将该象素检测为角分离物象素,并且如果有两个或多个角分离物候选象素,则将与(A3+B3+C3+D3+2)/4之间具有最大差值的候选象素检测为角分离物象素,和其中通过下列步骤执行步骤(b):如果角分离物象素是A,并且象素A和A3之间的差值小于3QP/2,则对象素A补偿(4A+B+C+2D+4)/8成为A’、对象素A1补偿(A’+3A1+2)/4成为A1’、对象素A2补偿(A’+3A2+2)/4成为A2’;如果角分离物象素是B,并且象素B和B3之间的差值小于3QP/2,对象素B补偿(4B+C+D+2A+4)/8成为B’、对象素B1补偿(B’+3B1+2)/4成为B1’、对象素B2补偿(B’+3A2+2)/4量成为B2’;如果角分离物象素是C,并且象素C和C3之间的差值小于3QP/2,对象素C补偿(4C+D+A+2B+4)/8成为C’、对象素C1补偿(C’+3C1+2)/4成为C1’、对象素C2补偿(C’+3C2+2)/4成为C2’;如果角分离物象素是D,并且象素D和D3之间的差值小于3QP/2,对象素D补偿(4D+A+B+2C+4)/8成为D’、对象素D1补偿(D’+3D1+2)/4成为D1’、对象素D2补偿(D’+3D2+2)/4成为D2’。
按照本发明的再一个方面,提供了一种图像数据滤波方法,用于减少当解码基于块压缩的图像数据时产生的量化效应,该方法包括下列步骤:根据所述块中是否存在非零象素,提取表示是否需要滤波的信号标志;和如果通过检验被检测的信号标志确定需要滤波,则通过预定方法滤波对应于所述信号标志的解码图像数据。
按照本发明的再一个方面,提供了一种用于解振铃滤波以减少振铃噪声的边缘检测方法,该方法包括下列步骤:检测图像数据的水平边缘;和检测所述图像数据的垂直边缘,其中,假定预定大小的块内的一个象素是pixel[m][n],pixel[m][n]右边的象素是pixel[m][n+1],pixel[m][n]的左边的象素是pixel[m][n-1],pixel[m][n]和pixel[m][n+1]之间的差值是A1,并且pixel[m][n]和pixel[m][n-1]之间的差值是A2,H.263的量化因数是QP,通过逻辑公式((A1>QP)和(A2>QP))或(A1>2QP)或(A2>2QP)进行水平边缘检测,其中并且如果所述逻辑公式满足,所述pixel[m][n]被确定为边缘,和假定pixel[m][n]之上的象素是pixel[m+1][n],pixel[m][n]之下的象素是pixel[m-1][n],pixel[m][n]和pixel[m+1][n]之间的差值是A’1,并且pixel[m][n]和pixel[m-1][n]之间的差值是A’2,H.263的量化因数是QP,通过逻辑公式((A’1>QP)和(A’2>QP))或(A’1>2QP)或(A’2>2QP)进行垂直边缘检测,其中如果所述逻辑公式满足,所述pixel[m][n]被确定为边缘。
按照本发明的再一个方面,提供了一种用于减少振铃噪声的解振铃滤波方法,包括下列步骤:检测图像数据的水平和垂直边缘;和对需要减少振铃噪声的块执行2-D信号自适应滤波,其中,假定预定大小的块内的一个象素是pixel[m][n],pixel[m][n]右边的象素是pixel[m][n+1],pixel[m][n]的左边的象素是pixel[m][n-1],pixel[m][n]和pixel[m][n+1]之间的差值是A1,并且pixel[m][n]和pixel[m][n-1]之间的差值是A2,H.263的量化因数是QP,通过逻辑公式((A1>QP)和(A2>QP))或(A1>2QP)或(A2>2QP)进行水平边缘检测,其中并且如果所述逻辑公式满足,pixel[m][n]被确定为边缘,并且边缘映射Edge[m][n]设定为“1”,假定pixel[m][n]之上的象素是pixel[m+1][n],pixel[m][n]之下的象素是pixel[m-1][n],pixel[m][n]和pixel[m+1][n]之间的差值是A’1,并且pixel[m][n]和pixel[m-1][n]之间的差值是A’2,H.263的量化因数是QP,通过逻辑公式((A’1>QP)和(A’2>QP))或(A’1>2QP)或(A’2>2QP)进行垂直边缘检测,并且如果所述逻辑公式满足,pixel[m][n]被确定为边缘,并且边缘映射Edge[m][n]设定为“1”,并且通过将4连接滤波器窗用到8×8块,进行信号自适应滤波,其中如果滤波器窗的中心象素是一边缘象素,则不执行滤波,如果滤波器窗的中心象素是非边缘象素,则进行加权滤波。
按照本发明的再一个方面,提供了一种检测当解码基于块压缩的图像数据时、在四个块相交的交叉点的拐角出现的角分离物的方法,假定交叉点周围的四个象素是象素A、B、C和D,value[0]是A,value[1]是B,value[2]是C,value[3]是D,(A+B+C+D+2)/4是Average,A1和A2是在象素A所属的块中与象素A相邻的象素,A3是象素A的对角象素,B1和B2是在象素B所属的块中与象素B相邻的象素,B3是象素B的对角象素,C1和C2是在象素C所属的块中与象素C相邻的象素,C3是象素C的对角象素,D1和D2是在象素D所属的块中与象素D相邻的象素,D3是象素D的对角象素,该方法包括下列步骤:(a)将value[0]和Average之间的差值与H.263的量化因数(QP)相比较,并且如果差值大于QP,将象素A算作角分离物候选象素;(b)对于value[1],value[2],value[3]执行步骤(a),以将相应象素算作角分离物候选象素;和(c)如果角分离物候选象素只有一个,则将该象素检测为角分离物象素,并且如果有两个或多个角分离物候选象素,则将与(A3+B3+C3+D3+2)/4之间具有最大差值的候选象素检测为角分离物象素。
按照本发明的再一个方面,提供了一种补偿所检测的当解码基于块压缩的图像数据时、在四个块相交的交叉点的拐角出现的角分离物的方法,假定交叉点周围的四个象素是象素A、B、C和D,value[0]是A,value[1]是B,value[2]是C,value[3]是D,(A+B+C+D+2)/4是Average,A1和A2是在象素A所属的块中与象素A相邻的象素,A3是象素A的对角象素,B1和B2是在象素B所属的块中与象素B相邻的象素,B3是象素B的对角象素,C1和C2是在象素C所属的块中与象素C相邻的象素,C3是象素C的对角象素,D1和D2是在象素D所属的块中与象素D相邻的象素,D3是象素D的对角象素,该方法包括下列步骤:如果角分离物象素是A,并且象素A和A3之间的差值小于3QP/2,则对象素A补偿(4A+B+C+2D+4)/8成为A’、对象素A1补偿(A’+3A1+2)/4成为A1’、对象素A2补偿(A’+3A2+2)/4成为A2’;如果角分离物象素是B,并且象素B和B3之间的差值小于3QP/2,对象素B补偿(4B+C+D+2A+4)/8成为B’、对象素B1补偿(B’+3B1+2)/4成为B1’、对象素B2补偿(B’+3A2+2)/4量成为B2’;如果角分离物象素是C,并且象素C和C3之间的差值小于3QP/2,对象素C补偿(4C+D+A+2B+4)/8成为C’、对象素C1补偿(C’+3C1+2)/4成为C1’、对象素C2补偿(C’+3C2+2)/4成为C2’;如果角分离物象素是D,并且象素D和D3之间的差值小于3QP/2,对象素D补偿(4D+A+B+2C+4)/8成为D’、对象素D1补偿(D’+3D1+2)/4成为D1’、对象素D2补偿(D’+3D2+2)/4成为D2’。
按照本发明的再一个方面,提供了一种图像数据后处理方法,用于减少当解码基于块压缩的图像数据时、在4个块相交的交叉点的拐角出现的角分离物,所述方法包括下列步骤:(a)从逆量化图像数据块检测角分离物;和(b)补偿所检测的角分离物,其中,假定交叉点周围的四个象素是象素A、B、C和D,value[0]是A,value[1]是B,value[2]是C,value[3]是D,(A+B+C+D+2)/4是Average,A1和A2是在象素A所属的块中与象素A相邻的象素,A3是象素A的对角象素,B1和B2是在象素B所属的块中与象素B相邻的象素,B3是象素B的对角象素,C1和C2是在象素C所属的块中与象素C相邻的象素,C3是象素C的对角象素,D1和D2是在象素D所属的块中与象素D相邻的象素,D3是象素D的对角象素,步骤(a)可包括子步骤:(a1)将value[0]和Average之间的差值与H.263的量化因数(QP)相比较,并且如果差值大于QP,将象素A算作角分离物候选象素;(a2)对于value[1],value[2],value[3]执行步骤(a1),以将相应象素算作角分离物候选象素;和(a3)如果角分离物候选象素只有一个,则将该象素检测为角分离物象素,并且如果有两个或多个角分离物候选象素,则将与(A3+B3+C3+D3+2)/4之间具有最大差值的候选象素检测为角分离物象素,并且其中通过下列步骤执行步骤(b):如果角分离物象素是A,并且象素A和A3之间的差值小于3QP/2,则对象素A补偿(4A+B+C+2D+4)/8成为A’、对象素A1补偿(A’+3A1+2)/4成为A1’、对象素A2补偿(A’+3A2+2)/4成为A2’;如果角分离物象素是B,并且象素B和B3之间的差值小于3QP/2,对象素B补偿(4B+C+D+2A+4)/8成为B’、对象素B1补偿(B’+3B1+2)/4成为B1’、对象素B2补偿(B’+3A2+2)/4量成为B2’;如果角分离物象素是C,并且象素C和C3之间的差值小于3QP/2,对象素C补偿(4C+D+A+2B+4)/8成为C’、对象素C1补偿(C’+3C1+2)/4成为C1’、对象素C2补偿(C’+3C2+2)/4成为C2’;如果角分离物象素是D,并且象素D和D3之间的差值小于3QP/2,对象素D补偿(4D+A+B+2C+4)/8成为D’、对象素D1补偿(D’+3D1+2)/4成为D1’、对象素D2补偿(D’+3D2+2)/4成为D2’。
附图说明
图1是对基于块编码的图像数据解码的解码器、以及用于减少当由该解码器解码图像时产生的量化效应的图像数据后处理装置的方框图;
图2示出了MPEG-4解码器的方框图、以及由所述解码器的逆量化器逆量化的8×8DCT系数块;
图3示出了视频目标平面(VOP)间(inter)的8×8块和参考VOP的相邻块之间的关系;
图4是示出用于VOP间的水平成块信号标志(HBS)、垂直成块信号标志(VBS)和振铃信号标志(RS)的提取例子的图;
图5示出了块边界和块边界的象素位置,用于图示减少成块现象的解块滤波器的操作;
图6A是示出成块现象的例子的一维图;
图6B示出了对解码的象素执行的7抽头滤波的结果;
图6C示出了对解码的象素执行弱滤波的结果;
图7A示出了图像边缘的例子,其中由量化产生了角分离物;
图7B示出了由量化产生的角分离物;
图7C示出了用于补偿角分离物的在拐角点的配位(coordination)值;
图8A示出了2维信号自适应滤波器(2-D SAF)的内核;
图8B示出了用于边缘检测和SAF的10×10块的例子。
具体实施方式
在图1中,解码器20是一个通常的解码器,对基于块的图像数据解码,图像数据后处理装置10,用于减少当解码器20解码图像时产生的量化效应,该装置10包括:信号标志提取器100;解块滤波器110;角分离物补偿器120和解振铃滤波器130。
信号标志提取器100使用已被逆量化的图像数据的逆量化系数(IQC)的分布、以及使用表示先前视频目标平面(VOP)和当前VOP之间的差值的运动矢量,提取一信号标志。
所述信号标志是表示解码的图像是否需要后处理的信息,并且所述信号标志被划分成成块信号标志和振铃信号标志。成块信号标志表示是否需要减少成块边界附近的成块现象,而振铃信号标志表示是否需要减少图像边缘附近的振铃噪声。此外,成块信号标志由水平成块信号标志(HBS)和垂直成块信号标志(VBS)构成,所述水平成块信号标志表示是否需要对水平块边界线的相邻块的象素进行后处理,而所述垂直成块信号标志表示是否需要对垂直块边界线的相邻块的象素进行后处理。
此外,对VOP内和VOP间执行信号标志提取。使用逆量化图像数据的IQC分布,进行对VOP内的信号标志提取。而对VOP间的信号标志提取是基于表示先前VOP和当前VOP之间的差值的运动矢量。
解块滤波器110使用1维水平和垂直低通滤波器(LPF),检验从信号标志提取器100提取的成块信号标志,并且对解码图像数据执行解块滤波。
分离物补偿器120检测经过解块滤波器110的数据的角分离物,并且补偿检测的角分离物。
解振铃滤波器130使用2维信号自适应滤波器(2-D SAF),检验由信号标志提取器100提取的振铃信号标志并且对角分离物补偿数据执行解振铃滤波。
同时,在下列实施例中将详细描述本发明的操作。按照本发明的图像数据后处理方法的基本概念,通过使用空间频率和时间信息,自适应地减少量化效应。
此外,在本发明中,考虑了主观图像质量、峰值信号与噪声比(PSNR)和计算的复杂性。特别是,当由软件和硬件实现基本概念时,计算复杂性在MPEG-4中是很重要的因素。为了提取在每个8×8块中成块现象和振铃噪声的信号标志,调查在频域中量化系数的分布和运动矢量。使用成块信号标志和振铃信号标志,以便在每个8×8块中自适应地使用1维低通滤波器(1-D LPF)和2-D SAF。
首先,将解释由信号标志提取器100从成块现象和振铃噪声中提取信号标志。
1.用于成块现象和振铃噪声的信号标志
为了在MPEG-4中减少计算次数并且有效减少量化效应,定义了两种信号标志:成块信号标志和振铃信号标志。从在内视频目标平面(VOP)中的每个8×8块的DCT域提取成块和振铃信号标志。此外,从残余信号和参考VOP的信号标志两者中计算VOP间的信号标志。
1.1用于VOP内的信号标志提取
调查了逆量化系数(IQC)即逆量化之后的DCT系数的分布。图2示出了MEPG-4的解码器方框图。在图2的8×8逆量化块中,系数A、B和C用于确定成块和振铃信号标志。
当只有在图2的位置A中的系数具有非零值时,8×8解码块的64个象素在空间域中具有相同值;因此,只有一个DC分量的块可引起水平和垂直块现象。在此情况下,该块的水平信号标志(HBS)和垂直成块信号标志(VBS)均设定为“1”。
当只有在8×8逆量化块的顶部行中的系数具有非零值时,每列中的8个象素在空间域具有相同的值。该块可引起垂直成块现象,则VBS设定为“1”。当只有在最左边列中的系数具有非零值时,在每行中的8个象素在空间域中具有相同的值。该块可引起水平分块现象,则HBS设定为“1”。
如果在图2中的除了A、B和C外的任何其它位置存在非零系数,振铃信号标志(RS)设定为“1”。这些高频系数表示该块包括图像边缘。因此,由于高频系数的截取,该块在图像边缘周围产生振铃噪声。
对于每个块,这三个噪声信号标志HBS、VBS和RS以三位存储。不需要附加计算来提取信号标志。
1.2用于VOP间的信号标志传播
通过使用运动矢量,在参考VOP中的成块和振铃信号标志被传播到下个VOP间。此外,VOP间的残余信号用来确定VOP间的信号标志。
首先,将描述从参考VOP到VOP间的成块信号标志的传播。
图3示出了在VOP间中8×8块Ac与参考VOP的相邻块的关系。下面通过运动矢量MVx和MVy描述成块信号标志的传播。
在图3中,Ar、Br、Cr和Dr表示参考VOP的块,并且Ac是当前VOP间的块,并且X是块Ac的运动块。使用运动矢量(MVx,MVy)估计运动块X。首先,调查运动矢量X和参考块之间的重叠程度。通过对被运动估计块X重叠的参考块的HBS和VBS进行逐位(bitwise)运算,可计算当前块Ac的HBS和VBS,假定在该计算中只使用那些重叠区域分别比2×2个象素宽的块。
例如,当MVx和MVy分别等于5和3.5时,运动估计块X与四个参考块Ar、Br、Cr和Dr重叠。此处,四个重叠区域均比2×2象素宽。于是,可从四个参考块Ar、Br、Cr和Dr计算当前块Ac的HBS和VBS,如图4所示。在图4中,“&”表示逐位与运算,并且“|”表示逐位或运算。
下面,将描述从参考VOP到VOP间振铃信号标志的传播。
首先,如果在VOP间的8×8块中残余信号的任何IQC是非零,则参考块Ac的RS设定为“1”。MPEG-4算法支持8×8预测模式,其对于一个宏块(MB)传送四个运动矢量。8×8预测模式通常用于具有高频分量的忙区域。这样,在检验该块是否具有8×8预测模式之后,具有8×8预测模式的块的RS被设定为“1”。如果在上述判断之后,RS仍然等于“0”,通过对重叠区域比2×2象素宽的参考块的RS进行逐位或运算,可用与在成块信号标志中相同的模式,计算当前块Ac的RS。RS运算的举例示于图4中。
2.使用信号标志的图像数据后处理方法
下面将详细描述解块滤波器110、角分离物补偿器120和解振铃滤波器130。
2.1用于减少成块现象的解块滤波器
根据在水平和垂直块边界上的成块信号标志,或强或弱地执行用于减少成块现象的1维LPF。为了减少成块现象,多数解块算法计算图像边缘信息,并且自适应地根据图像边缘检测自适应应用LPF。然而,本发明提议的解块算法不要求需要大量计算的图像边缘检测,因为它使用上面获得的成块信号标志。
在图5中示出了要处理的8×8块和相邻块。如果BLOCK-I的HBS和BLOCK-J的HBS均设定为“1”,对图5的水平块边界的象素A、B、C、D、E和F使用7抽头(1,1,1,2,1,1,1)LPF。可通过下列算法表达水平解块滤波。
if(HBS of BLOCK-I==1 and HBS of BLOCK-J==1)
     7-tab filtering  //改变A、B、C、D、E和F//
else
    if(|D-C|<QP)
    weak filtering;;    //改变B、C、D和E//
在上述中,如果BLOCK-I和BLOCK-J的水平成块信号标志设定为“1”,则改变位于BLOCK-I和BLOCK-J之间水平块边界周围的预定数目象素的值。使用7抽头(1,1,1,2,1,1,1)LPF对上述6个象素进行滤波。
如果BLOCK-I和BLOCK-J的任何的水平成块信号标志是“0”,则比较位于水平块边界周围的两个相邻象素的象素值之间的差值和H.263的量化因数QP。如果象素值差小于QP,则改变与使用7抽头滤波器的滤波相比较少数目的象素值。即,当滤波象素B、C、D和E时,象素C和D的象素值被平均,而象素B和E的象素值变化d/8,在此,d是象素C和D之间的差值。
图6A示出了成块现象的1维图的例子,图6B示出了执行7抽头滤波之后的结果,而图6C示出了执行弱滤波之后的结果。当在块边界的差值d=|D-C|小于QP时,执行弱滤波。在此,参数QP是H.263的量化因数。MPEG-4支持H.263量化。在图6C的弱滤波的情况下,平均边界象素C和D,并且还稍微改变相邻象素B和E,以平滑成块现象。
本发明的解块滤波改变在块边界上的象素值,以便减少1-D人工不连续。以与在水平块边界周围的块相同的方式,使用垂直成块信号标志,滤波垂直块边界周围的象素。即,以与在水平滤波中相同的方式,执行垂直滤波。本发明的解块算法可通过基于块的并行处理以硬件实现,并且对于7抽头滤波和弱滤波只需要移位和加法运算。例如,在7抽头滤波的情况下,由C’=(A+A+B+2C+D+E+F+4)/8计算通过滤波象素C获得的值C’,在计算式中只包括移位和加法运算。
2.2角分离物补偿器
角分离物的特征在于,在MPEG解压缩图像的8×8块的拐角点中一个象素比相邻象素要么大得多要么小得多,如图7A、7B和7C所示。当阴影区域分布在四个块上,并且阴影区域的一个或两个象素位于相邻象素的拐角点中时,如图7(A)所示,DCT系数的量化能够将拐角点失真,如图7(B)所示。这种失真的拐角点称为角分离物。角分离物不能通过解块和解振铃滤波器除去。为了减少角分离物,必须检测角分离物,然后对其补偿。在图7(C)中示出了角分离物检测的简单配位,其中A、B、C和D是8×8块的拐角点的象素值。
用于角分离物检测的算法可表达如下:
value[0]=A;  value[1]=B;
value[2]=C;  value[3]=D;
Average=(A+B+C+D+2)/4;
Count=0;
for(m=0;m<4;m++)
     if(|value[m]-Average|>QP)
          Count++;    /*候选点的数目*/
在此,QP表示H.263的量化因数,并且“Count”是一变量,用于存储候选角分离物象素的数目。如果“Count”是零,则没有角分离物。如果A是在图7(C)中的唯一候选点,并且|A-A3|小于3QP/2,对于A,A1和A2进行角分离物补偿如下。假定对于A的补偿值是A’,A1和A2的补偿值是A1’和A2’,通过下列公式(1)确定补偿值A’、A1’和A2’。
A’=(4A+B+C+2D+4)/8
A1’=(A’+3A1+2)/4    (1)
A2’=(A’+3A2+2)/4
如果候选点的数目是大于2,选择与(A3+B3+C3+D3+2)/4具有最大差值的候选点中,以与只有一个候选点的情况相同的方式,对该点进行角分离物补偿。
2.3用于减少振铃噪声的解振铃滤波器
在对每个块使用解振铃滤波之前,调查RS。如果当前块的RS是“1”,对该块使用解振铃滤波。为了防止图像细节被滤波失真,滤波之前进行简单的边缘检测。如图8A和8B所示,对具有非零振铃信号标志的8×8块使用边缘检测和2维信号自适应滤波(2-D SAF)。对位于8×8块的中心的4×4象素进行2-D SAF,因为边界象素通过解块滤波器平滑。
首先,将解释边缘检测。对重构块使用1维(1-D)水平和垂直梯度运算符,以找到图像边界。从H.263的量化因数QP选择用于确定边缘象素的阈值。为了对4×4象素使用2-D SAF,必须获得当前块6×6块的边缘信息,如图8B所示。假定有象素[m][n]和象素[m][n+1]及象素[m][n-1],象素[m][n+1]是象素[m][n]右边的象素,象素[m][n-1]是象素[m][n]左边的象素,象素[m][n]和象素[m][n+1]之间的差值是A1,象素[m][n]和象素[m][n-1]之间的差值是A2,并且H.263的量化因数是QP,通过逻辑公式((A1>QP)与(A2>QP))或(A1>2QP)或(A2>2QP)进行水平边缘检测,如果所述逻辑公式满足,象素[m][n]确定为边缘,并且边缘映射Edge[m][n]变成“1”。
假定具有一象素[m][n]、象素[m][n]之上的象素[m+1][n],象素[m][n]之下的象素[m-1][n],象素[m][n]和象素[m+1][n]之间的差值是A’1,并且象素[m][n]和象素[m-1][n]之间的差值是A’2,H.263的量化因数是QP,通过逻辑公式((A’1>QP)与(A’2>QP))或(A’1>2QP)或(A’2>2QP)进行垂直边缘检测,并且如果所述逻辑公式满足,象素[m][n]确定为边缘,并且边缘映射Edge[m][n]变成“1”。
通过下列算法从象素值pixel[m][n]获得边缘映射Edge[m][n]。
/*水平边缘检测*/
A1=|pixel[m][n]-pixel[m][n+1];
A2=|pixel[m][n]-pixel[m][n-1];
if(((A1>QP)and(A2>QP))or(A1>2QP)or(A2>2QP))
      Edge[m][n]=1;
else{/*垂直边缘检测*/
      A’1=|pixel[m][n]-pixel[m+1][n];
      A’2=|pixel[m][n]-pixel[m-1][n];
      if(((A’1>QP)and(A’2>QP))or(A’1>2QP)or(A’2>2QP))
      Edge[m][n]=1;
      }
下面,将描述使用2维信号自适应滤波器(2-D SAF)的解振铃滤波。建议采用解振铃滤波以平滑振铃噪声而没有图像细节的严重损失。本发明的解振铃滤波是简单的卷积运算,其中卷积的加权因数按照边缘映射变化。通过使用Edge[m][n]对解码块使用SAF。图8A示出了2-D SAF的内核。当在图8B中的滤波器窗的中心点A是在边缘象素上,则不执行2-D滤波操作(图8B的EX.1)。如果边缘点不包括在4连接滤波器窗中,则执行低通滤波(图8B的EX.2)。如果不在中心点的某些边缘点是在4连接滤波器窗中,执行排除边缘象素的加权滤波(图8B的EX.3)。考虑计算复杂性定义加权因数,这样能够通过表1所示的简单移位和加法运算,进行SAF滤波。
表1
A B C D E SAF
0 0 0 0 0 A=(4A+B+C+D+E+4)/8
0 0 0 0 1 A=(4A+B+2C+D+4)/8
0 0 0 1 0 A=(4A+2B+C+D+4)/8
0 0 0 1 1 A=(2A+B+C+2)/4
0 0 1 0 0 A=(4A+B+D+2E+4)/8
0 0 1 0 1 A=(2A+B+D+2)/4
0 0 1 1 0 A=(2A+B+E+2)/4
0 0 1 1 1 A=(A+B+1)/2
0 1 0 0 0 A=(4A+C+2D+E+4)/8
0 1 0 0 1 A=(2A+C+D+2)/4
0 1 0 1 0 A=(2A+C+E+2)/4
0 1 0 1 1 A=(A+C+1)/2
0 1 1 0 0 A=(2A+D+E+2)/4
0 1 1 0 1 A=(A+D+1)/2
0 1 1 1 0 A=(A+E+1)/2
0 1 1 1 1 A=4
在表1中,“0”表示非边缘,并且“1”表示边缘。
本发明可以作为能够由计算机运行的程序来实现,并且可以在通用的计算机上实现,该计算机运行来自计算机可用介质的程序,所述计算机可用介质包括但不限于诸如磁存储介质(例如,ROM、软盘、硬盘等)、光可读介质(例如,CD-ROM,DVD等)、和载波(例如,经互联网传输)这些存储介质。
因此本发明可以作为其内具有计算机可读程序代码单元的计算机可用介质实现,该计算机可读程序代码用于减少当解码基于块压缩的图像数据时引起的量化效应的图像数据后处理。在计算机可用介质中的计算机可读程序代码单元包括:使用逆量化图像数据的逆量化系数分布和表示先前视频目标平面(VOP)的块和当前VOP的块之间的差值的运动矢量,检测表示是否需要后处理的信号标志的计算机可读程序代码单元;和用于如果通过检验被检测的信号标志确定需要后处理,则通过预定方法滤波对应于该信号标志的解码图像数据的计算机可读程序代码单元。
熟练的计算机程序员可从所含有的本发明的描述中导出实现本发明使用的功能程序、代码和代码段。
当图像被高度压缩时,解压缩的图像产生诸如成块现象、角分离物和振铃噪声等量化效应。如上所述,本发明的后处理方法通过使用信号标志和自适应滤波器,减少解压缩的图像的量化效应。每个块的成块和振铃信号标志大大有助于减少后滤波的计算复杂性。对于当前块使用在VOP间中的运动矢量来提取成块和振铃信号标志。
在视频编码中,为了高图像质量和在硬件和软件方面容易实现,必须考虑计算复杂性和PSNR。从硬件复杂性方面,本发明的算法可通过并行处理进行而无需乘法和除法运算。
本发明的后处理方法可被广泛使用,因为它大大提高了主观质量同时保持了图像细节。本发明提出的算法可应用到JPEG、H.263+、MPEG-1和MPEG-4解压缩图像。

Claims (6)

1.一种图像数据滤波方法,用于减少当解码基于块压缩的图像数据时产生的量化效应,该方法包括下列步骤:
根据所述块中是否存在非零象素,提取表示是否需要滤波的信号标志;和
如果通过检验被检测的信号标志确定需要滤波,则通过预定方法滤波对应于所述信号标志的解码图像数据。
2.如权利要求1所述的方法,其中,为包含非零象素的块和为仅包含零象素的块不同地执行所述提取。
3.如权利要求1或2所述的方法,其中,根据所述提取的信号标志为所述块边界中的象素执行滤波以减少成块现象。
4.如权利要求3所述的方法,其中,根据所述提取的信号标志,利用块边界中的象素之间的差值来执行所述滤波。
5.如权利要求3所述的方法,其中,根据所述提取的信号标志,利用块边界中的象素之间的差值和量化因数值来执行所述滤波。
6.如权利要求1所述的方法,其中,所述信号标志包含:水平成块信号标志,其表示是否需要减少水平块边界附近的成块现象;垂直成块信号标志,其表示是否需要减少垂直块边界附近的成块现象;振铃信号标志,其表示是否需要减少图像边缘附近的振铃噪声,和
如果只有所述块的低频分量系数是非零,则将所述水平成块信号标志和所述垂直成块标志二者均设为表示需要所述滤波;
如果在所述块的顶部行中存在非零系数,则将所述垂直成块信号标志设为表示需要所述滤波;
如果在所述块的最左边列中存在非零系数,则将所述水平成块信号标志设为表示需要所述滤波;和
如果除了所述块的低频分量系数、所述块的顶部行中的系数和所述块的最左边列中的系数之外,在所述块中还存在非零系数,则将所述振铃信号标志设为表示需要所述滤波。
CNA2007101814401A 1997-10-25 1998-10-09 图像数据滤波方法 Pending CN101188763A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR55067/97 1997-10-25
KR1019970055067A KR100269125B1 (ko) 1997-10-25 1997-10-25 양자화효과감소를위한영상데이터후처리방법및장치

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CNB988119625A Division CN1214645C (zh) 1997-10-25 1998-10-09 用于减少量化效应的图像数据后处理方法和装置

Publications (1)

Publication Number Publication Date
CN101188763A true CN101188763A (zh) 2008-05-28

Family

ID=19523434

Family Applications (3)

Application Number Title Priority Date Filing Date
CNB200410063567XA Expired - Fee Related CN100377598C (zh) 1997-10-25 1998-10-09 用于减少量化效应的图像数据后处理方法和装置
CNA2007101814401A Pending CN101188763A (zh) 1997-10-25 1998-10-09 图像数据滤波方法
CNB988119625A Expired - Fee Related CN1214645C (zh) 1997-10-25 1998-10-09 用于减少量化效应的图像数据后处理方法和装置

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CNB200410063567XA Expired - Fee Related CN100377598C (zh) 1997-10-25 1998-10-09 用于减少量化效应的图像数据后处理方法和装置

Family Applications After (1)

Application Number Title Priority Date Filing Date
CNB988119625A Expired - Fee Related CN1214645C (zh) 1997-10-25 1998-10-09 用于减少量化效应的图像数据后处理方法和装置

Country Status (8)

Country Link
US (1) US6539060B1 (zh)
EP (3) EP1657934A1 (zh)
JP (5) JP2001522172A (zh)
KR (1) KR100269125B1 (zh)
CN (3) CN100377598C (zh)
AU (1) AU9465798A (zh)
DE (1) DE69837714T2 (zh)
WO (1) WO1999022509A2 (zh)

Families Citing this family (134)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100243225B1 (ko) 1997-07-16 2000-02-01 윤종용 블록화효과 및 링잉잡음 감소를 위한 신호적응필터링방법 및신호적응필터
KR100269125B1 (ko) * 1997-10-25 2000-10-16 윤덕용 양자화효과감소를위한영상데이터후처리방법및장치
KR100366643B1 (ko) * 1998-11-25 2003-02-19 삼성전자 주식회사 구획현상제거방법및장치
CN1286575A (zh) * 1999-08-25 2001-03-07 松下电器产业株式会社 噪声检测方法、噪声检测装置及图象编码装置
KR100335055B1 (ko) 1999-12-08 2002-05-02 구자홍 압축 영상신호의 블럭현상 및 링현상 제거방법
GB0016838D0 (en) * 2000-07-07 2000-08-30 Forbidden Technologies Plc Improvements relating to representations of compressed video
US7054500B1 (en) * 2000-12-06 2006-05-30 Realnetworks, Inc. Video compression and decompression system with postfilter to filter coding artifacts
TW589870B (en) * 2000-12-19 2004-06-01 Pts Corp Adaptive transforms
FR2818863A1 (fr) * 2000-12-26 2002-06-28 Koninkl Philips Electronics Nv Procede de traitement de donnees
US6845180B2 (en) * 2001-03-16 2005-01-18 Sharp Laboratories Of America, Inc. Predicting ringing artifacts in digital images
GB2373661B (en) * 2001-03-23 2005-05-11 Advanced Risc Mach Ltd A data processing apparatus and method for performing an adaptive filter operation on an input data sample
WO2002096117A1 (en) * 2001-05-25 2002-11-28 Pace Soft Silicon Limited Deblocking block-based video data
US6968006B1 (en) 2001-06-05 2005-11-22 At&T Corp. Method of content adaptive video decoding
US6810086B1 (en) * 2001-06-05 2004-10-26 At&T Corp. System and method of filtering noise
US7773670B1 (en) 2001-06-05 2010-08-10 At+T Intellectual Property Ii, L.P. Method of content adaptive video encoding
US6909745B1 (en) 2001-06-05 2005-06-21 At&T Corp. Content adaptive video encoder
US6970513B1 (en) 2001-06-05 2005-11-29 At&T Corp. System for content adaptive video decoding
US7003173B2 (en) * 2001-06-12 2006-02-21 Sharp Laboratories Of America, Inc. Filter for combined de-ringing and edge sharpening
KR100525785B1 (ko) 2001-06-15 2005-11-03 엘지전자 주식회사 이미지 화소 필터링 방법
US7003174B2 (en) * 2001-07-02 2006-02-21 Corel Corporation Removal of block encoding artifacts
KR100522938B1 (ko) * 2001-08-13 2005-10-24 삼성전자주식회사 블록화현상 제거장치 및 제거방법, 블록화현상 제거장치가 구비된 디스플레이장치
DE10140984C1 (de) * 2001-08-21 2003-04-03 Sci Worx Gmbh Verfahren und Vorrichtung zur Filterung von Bilddatenströmen
US6983079B2 (en) * 2001-09-20 2006-01-03 Seiko Epson Corporation Reducing blocking and ringing artifacts in low-bit-rate coding
EP1442603B1 (en) * 2001-10-26 2014-12-17 Koninklijke Philips N.V. Spatial scalable compression scheme using spatial sharpness enhancement techniques
AU2002347635B2 (en) 2001-11-29 2008-04-24 Godo Kaisha Ip Bridge 1 Coding distortion removal method and video encoding end decoding methods
EP2320661B8 (en) 2001-11-29 2015-09-02 Godo Kaisha IP Bridge 1 Coding distortion removal method
CN1874522B (zh) * 2001-11-29 2010-09-08 松下电器产业株式会社 运动图像编码方法
US7302104B2 (en) * 2001-12-28 2007-11-27 Ricoh Co., Ltd. Smoothing tile boundaries of images encoded and decoded by JPEG 2000
KR100538215B1 (ko) * 2002-01-23 2005-12-21 삼성전자주식회사 고속 후처리가 가능한 영상 재생 장치 및 그 방법
KR100584549B1 (ko) * 2002-01-31 2006-05-30 삼성전자주식회사 블록킹 효과를 제거하기 위한 필터링 방법 및 그 장치
EP2894856A1 (en) 2002-01-31 2015-07-15 Samsung Electronics Co., Ltd Filtering method and apparatus for reducing block artifacts or ringing noise
US7826535B2 (en) * 2002-04-11 2010-11-02 Broadcom Corporation Adaptive pixel processing
KR100846774B1 (ko) * 2002-05-03 2008-07-16 삼성전자주식회사 블록킹 효과를 제거하기 위한 필터링 방법 및 그 장치
US7543326B2 (en) * 2002-06-10 2009-06-02 Microsoft Corporation Dynamic rate control
US20030235250A1 (en) 2002-06-24 2003-12-25 Ankur Varma Video deblocking
FR2841423A1 (fr) * 2002-06-25 2003-12-26 Koninkl Philips Electronics Nv Procede de detection d'artefacts de bloc
US6728315B2 (en) * 2002-07-24 2004-04-27 Apple Computer, Inc. Method and apparatus for variable accuracy inter-picture timing specification for digital video encoding with reduced requirements for division operations
US6807317B2 (en) 2002-10-25 2004-10-19 Motorola, Inc. Method and decoder system for reducing quantization effects of a decoded image
CN100553151C (zh) * 2002-11-15 2009-10-21 高通股份有限公司 用于多种描述编码的设备和方法
US7227901B2 (en) * 2002-11-21 2007-06-05 Ub Video Inc. Low-complexity deblocking filter
US7298885B2 (en) * 2002-11-27 2007-11-20 3M Innovative Properties Company Biological growth plate scanner with automated image processing profile selection
US7254275B2 (en) * 2002-12-17 2007-08-07 Symbol Technologies, Inc. Method and system for image compression using image symmetry
US6922492B2 (en) * 2002-12-27 2005-07-26 Motorola, Inc. Video deblocking method and apparatus
AR043643A1 (es) * 2003-03-17 2005-08-03 Qualcomm Inc Metodo y aparato para mejorar la calidad de video de bajo caudal de bits
US7995849B2 (en) * 2003-03-17 2011-08-09 Qualcomm, Incorporated Method and apparatus for improving video quality of low bit-rate video
US7792194B2 (en) * 2003-04-10 2010-09-07 Lefan Zhong MPEG artifacts post-processed filtering architecture
US9330060B1 (en) 2003-04-15 2016-05-03 Nvidia Corporation Method and device for encoding and decoding video image data
US20040208389A1 (en) * 2003-04-15 2004-10-21 Silicon Integrated Systems Corp. Digital picture processing method
US7362810B2 (en) * 2003-05-13 2008-04-22 Sigmatel, Inc. Post-filter for deblocking and deringing of video data
US8660182B2 (en) * 2003-06-09 2014-02-25 Nvidia Corporation MPEG motion estimation based on dual start points
US20050024651A1 (en) * 2003-07-29 2005-02-03 Zhenghua Yu Adaptive complexity scalable post-processing method
KR100936034B1 (ko) 2003-08-11 2010-01-11 삼성전자주식회사 블록 단위로 부호화된 디지털 영상의 블로킹 현상을제거하는 방법 및 그 영상재생장치
US7277592B1 (en) 2003-10-21 2007-10-02 Redrock Semiconductory Ltd. Spacial deblocking method using limited edge differences only to linearly correct blocking artifact
US7616829B1 (en) * 2003-10-29 2009-11-10 Apple Inc. Reducing undesirable block based image processing artifacts by DC image filtering
US7412109B2 (en) 2003-11-07 2008-08-12 Mitsubishi Electric Research Laboratories, Inc. System and method for filtering artifacts in images
US7346224B2 (en) * 2003-11-07 2008-03-18 Mitsubishi Electric Research Laboratories, Inc. System and method for classifying pixels in images
US7551792B2 (en) * 2003-11-07 2009-06-23 Mitsubishi Electric Research Laboratories, Inc. System and method for reducing ringing artifacts in images
US20050100235A1 (en) * 2003-11-07 2005-05-12 Hao-Song Kong System and method for classifying and filtering pixels
US7400681B2 (en) 2003-11-28 2008-07-15 Scientific-Atlanta, Inc. Low-complexity motion vector prediction for video codec with two lists of reference pictures
US7430337B2 (en) * 2004-01-06 2008-09-30 Sharp Laboratories Of America, Inc. System and method for removing ringing artifacts
US7471845B2 (en) * 2004-01-06 2008-12-30 Sharp Laboratories Of America, Inc. De-ringing filter
US20050157796A1 (en) * 2004-01-20 2005-07-21 Victor Company Of Japan, Ltd. Block noise reducing apparatus
JP4323519B2 (ja) * 2004-03-08 2009-09-02 三菱電機株式会社 符号化データの復号プログラム及び方法並びに装置
KR100628839B1 (ko) * 2004-03-30 2006-09-27 학교법인 성균관대학 모서리 잡음 검출 및 보상방법
US7315661B2 (en) * 2004-04-01 2008-01-01 Mediatek Inc. Directional interpolation method using DCT information and related device
US7400679B2 (en) * 2004-04-29 2008-07-15 Mediatek Incorporation Adaptive de-blocking filtering apparatus and method for MPEG video decoder
US7460596B2 (en) * 2004-04-29 2008-12-02 Mediatek Incorporation Adaptive de-blocking filtering apparatus and method for MPEG video decoder
US7397854B2 (en) * 2004-04-29 2008-07-08 Mediatek Incorporation Adaptive de-blocking filtering apparatus and method for MPEG video decoder
US7496141B2 (en) * 2004-04-29 2009-02-24 Mediatek Incorporation Adaptive de-blocking filtering apparatus and method for MPEG video decoder
US7397853B2 (en) * 2004-04-29 2008-07-08 Mediatek Incorporation Adaptive de-blocking filtering apparatus and method for MPEG video decoder
US20050243914A1 (en) * 2004-04-29 2005-11-03 Do-Kyoung Kwon Adaptive de-blocking filtering apparatus and method for mpeg video decoder
US7539248B2 (en) * 2004-04-29 2009-05-26 Mediatek Incorporation Adaptive de-blocking filtering apparatus and method for MPEG video decoder
US7738563B2 (en) * 2004-07-08 2010-06-15 Freescale Semiconductor, Inc. Method and system for performing deblocking filtering
KR100618849B1 (ko) * 2004-07-22 2006-09-01 삼성전자주식회사 영상에서의 블록킹 현상 필터링 장치 및 방법
CN1306822C (zh) * 2004-07-30 2007-03-21 联合信源数字音视频技术(北京)有限公司 一种基于软硬件协同控制的视频解码器
GB2418093B (en) * 2004-09-09 2007-03-28 Imagination Tech Ltd Method and apparatus for removing visible artefacts in video images
US7697782B2 (en) * 2004-09-16 2010-04-13 Sharp Laboratories Of America, Inc. System for reducing ringing artifacts
US20060062311A1 (en) * 2004-09-20 2006-03-23 Sharp Laboratories Of America, Inc. Graceful degradation of loop filter for real-time video decoder
US20060103254A1 (en) * 2004-11-16 2006-05-18 Horst Gary E Permanent magnet rotor
KR100843196B1 (ko) * 2004-12-17 2008-07-02 삼성전자주식회사 H.264/avc 비디오 디코더의 디블록킹 필터
US7136536B2 (en) * 2004-12-22 2006-11-14 Telefonaktiebolaget L M Ericsson (Publ) Adaptive filter
KR100672592B1 (ko) * 2005-01-14 2007-01-24 엘지전자 주식회사 디스플레이 장치의 영상 보상장치 및 보상방법
JP4618676B2 (ja) * 2005-04-28 2011-01-26 株式会社リコー 構造化文書符号の転送方法、画像処理システム、サーバ装置、プログラム及び情報記録媒体
JP4672431B2 (ja) * 2005-05-13 2011-04-20 パナソニック株式会社 フィルタ特性異常隠蔽処理装置
US8731071B1 (en) 2005-12-15 2014-05-20 Nvidia Corporation System for performing finite input response (FIR) filtering in motion estimation
US8724702B1 (en) 2006-03-29 2014-05-13 Nvidia Corporation Methods and systems for motion estimation used in video coding
GB2437337A (en) * 2006-04-21 2007-10-24 Snell & Wilcox Ltd Measuring block artefacts in video data using an auto-correlation function
JP4784386B2 (ja) * 2006-05-01 2011-10-05 富士ゼロックス株式会社 復号化装置、逆量子化方法及びプログラム
US20080037627A1 (en) * 2006-06-26 2008-02-14 Genesis Microchip Inc. Adaptive reduction of local mpeg artifacts
US8660380B2 (en) * 2006-08-25 2014-02-25 Nvidia Corporation Method and system for performing two-dimensional transform on data value array with reduced power consumption
US8175405B1 (en) 2006-09-14 2012-05-08 Marvell International Ltd. Adaptive MPEG noise reducer
JP2008124742A (ja) * 2006-11-10 2008-05-29 Sony Corp 画像処理装置、画像処理方法、およびプログラム
JP2008271472A (ja) * 2007-04-25 2008-11-06 Nec Electronics Corp ビデオ再生装置、ビデオ再生方法、及びプログラム
KR100856303B1 (ko) * 2007-05-18 2008-09-03 삼성전기주식회사 링잉 노이즈 제거 장치 및 노이즈 제거 장치
US8756482B2 (en) * 2007-05-25 2014-06-17 Nvidia Corporation Efficient encoding/decoding of a sequence of data frames
US20080291209A1 (en) * 2007-05-25 2008-11-27 Nvidia Corporation Encoding Multi-media Signals
US9118927B2 (en) * 2007-06-13 2015-08-25 Nvidia Corporation Sub-pixel interpolation and its application in motion compensated encoding of a video signal
US8873625B2 (en) * 2007-07-18 2014-10-28 Nvidia Corporation Enhanced compression in representing non-frame-edge blocks of image frames
TWI375470B (en) * 2007-08-03 2012-10-21 Via Tech Inc Method for determining boundary strength
US20090060368A1 (en) * 2007-08-27 2009-03-05 David Drezner Method and System for an Adaptive HVS Filter
US20090080517A1 (en) * 2007-09-21 2009-03-26 Yu-Ling Ko Method and Related Device for Reducing Blocking Artifacts in Video Streams
US8331717B2 (en) * 2007-10-03 2012-12-11 Panasonic Corporation Method and apparatus for reducing block noise
US8200028B2 (en) * 2007-12-07 2012-06-12 Csr Technology Inc. System and method for detecting edges in a video signal
KR101458493B1 (ko) 2008-06-30 2014-11-10 삼성전자주식회사 주파수 대역 교환 기지국
CN101625753B (zh) * 2008-07-10 2012-11-21 辉达公司 图形处理中的光栅及光栅化方法
JP5362723B2 (ja) * 2008-07-30 2013-12-11 日立コンシューマエレクトロニクス株式会社 圧縮画像ノイズ除去装置と再生装置
US8666181B2 (en) * 2008-12-10 2014-03-04 Nvidia Corporation Adaptive multiple engine image motion detection system and method
TWI422228B (zh) * 2009-01-15 2014-01-01 Silicon Integrated Sys Corp 去方塊濾波方法及影像處理裝置
US8380001B2 (en) * 2009-02-27 2013-02-19 Vixs Systems, Inc. Edge adaptive deblocking filter and methods for use therewith
JP5146388B2 (ja) 2009-04-03 2013-02-20 沖電気工業株式会社 映像圧縮符号化データの復号装置
US8306355B2 (en) * 2009-07-13 2012-11-06 Sharp Laboratories Of America, Inc. Methods and systems for reducing compression artifacts
KR20110123651A (ko) 2010-05-07 2011-11-15 한국전자통신연구원 생략 부호화를 이용한 영상 부호화 및 복호화 장치 및 그 방법
KR20110125153A (ko) 2010-05-12 2011-11-18 에스케이 텔레콤주식회사 영상의 필터링 방법 및 장치와 그를 이용한 부호화/복호화를 위한 방법 및 장치
US8300949B2 (en) * 2010-05-18 2012-10-30 Sharp Laboratories Of America, Inc. Edge detection technique having improved feature visibility
CN106791878B (zh) * 2010-12-07 2019-05-14 索尼公司 图像处理设备和图像处理方法
ES2613823T3 (es) 2011-01-14 2017-05-26 Telefonaktiebolaget Lm Ericsson (Publ) Filtrado de desbloqueo
US9930366B2 (en) * 2011-01-28 2018-03-27 Qualcomm Incorporated Pixel level adaptive intra-smoothing
KR102231522B1 (ko) * 2011-04-22 2021-03-24 돌비 인터네셔널 에이비 데이터를 손실 압축-인코딩하기 위한 방법 및 장치와 데이터를 재구성하기 위한 대응하는 방법 및 장치
CN107347157B (zh) * 2011-07-22 2020-03-17 Sk电信有限公司 视频解码装置
KR20130049522A (ko) * 2011-11-04 2013-05-14 오수미 인트라 예측 블록 생성 방법
WO2014018867A1 (en) * 2012-07-27 2014-01-30 The Neat Company, Inc. Portable document scanner having user interface and integrated communications means
KR102056686B1 (ko) * 2013-02-18 2019-12-18 삼성디스플레이 주식회사 영상 처리부, 이를 포함하는 표시 장치 및 이를 이용한 영상 처리 방법
US9386319B2 (en) 2013-09-05 2016-07-05 Microsoft Technology Licensing, Llc Post-process filter for decompressed screen content
US10999602B2 (en) 2016-12-23 2021-05-04 Apple Inc. Sphere projected motion estimation/compensation and mode decision
CN114173117B (zh) * 2016-12-27 2023-10-20 松下电器(美国)知识产权公司 编码方法、解码方法及发送方法
US11259046B2 (en) 2017-02-15 2022-02-22 Apple Inc. Processing of equirectangular object data to compensate for distortion by spherical projections
US10924747B2 (en) 2017-02-27 2021-02-16 Apple Inc. Video coding techniques for multi-view video
CN107181953B (zh) * 2017-03-31 2019-09-17 北京奇艺世纪科技有限公司 一种边界滤波强度的确定方法及装置
US11093752B2 (en) 2017-06-02 2021-08-17 Apple Inc. Object tracking in multi-view video
US20190005709A1 (en) * 2017-06-30 2019-01-03 Apple Inc. Techniques for Correction of Visual Artifacts in Multi-View Images
US10754242B2 (en) 2017-06-30 2020-08-25 Apple Inc. Adaptive resolution and projection format in multi-direction video
EP3732886A1 (en) * 2017-12-29 2020-11-04 Telefonaktiebolaget Lm Ericsson (Publ) Methods providing encoding and/or decoding of video using reference values and related devices
US11032574B2 (en) * 2018-12-31 2021-06-08 Tencent America LLC Method and apparatus for video coding
CN112508913A (zh) * 2020-12-10 2021-03-16 国网江西省电力有限公司电力科学研究院 基于图像检测的电缆截面边沿检测方法

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS63182984A (ja) * 1987-01-23 1988-07-28 Matsushita Electric Ind Co Ltd テレビジヨン信号復号化装置
JPH01311782A (ja) * 1988-06-10 1989-12-15 Toshiba Corp 変換符号化方式
FR2660138B1 (fr) * 1990-03-26 1992-06-12 France Telecom Cnet Dispositif de codage/decodage de signaux d'image.
DE69132268T2 (de) * 1990-09-29 2000-10-26 Victor Company Of Japan Bildsignalkodierer/Dekodierer mit adaptiver Quantisierung
JP3485192B2 (ja) * 1991-01-10 2004-01-13 オリンパス株式会社 画像信号復号化装置
JPH05316361A (ja) * 1992-04-24 1993-11-26 Sony Corp ブロック歪除去フィルタ
JP3365784B2 (ja) * 1992-04-30 2003-01-14 オリンパス光学工業株式会社 画像信号復号化装置
US5379122A (en) * 1992-10-02 1995-01-03 Xerox Corporation Decompression of standard ADCT-compressed images
US5335990A (en) * 1993-09-28 1994-08-09 Maxon Industries, Inc. Concrete remix and transfer device
US5563718A (en) * 1993-11-30 1996-10-08 Polaroid Corporation Image coding by use of discrete cosine transforms
KR100229783B1 (ko) * 1994-07-29 1999-11-15 전주범 디지탈 전송 화상의 적응적후 처리장치
KR0165497B1 (ko) * 1995-01-20 1999-03-20 김광호 블럭화현상 제거를 위한 후처리장치 및 그 방법
US5852475A (en) * 1995-06-06 1998-12-22 Compression Labs, Inc. Transform artifact reduction process
US5986707A (en) * 1995-06-07 1999-11-16 Geshwind; David Michael Methods and devices for the creation of images employing variable-geometry pixels
US5850294A (en) * 1995-12-18 1998-12-15 Lucent Technologies Inc. Method and apparatus for post-processing images
US5881180A (en) * 1996-02-08 1999-03-09 Sony Corporation Method and apparatus for the reduction of blocking effects in images
US5974196A (en) * 1996-03-15 1999-10-26 Sony Corporation Method and apparatus for blocking effect reduction in images
KR100242636B1 (ko) * 1996-03-23 2000-02-01 윤종용 블록화효과 및 링잉노이즈 감소를 위한 신호적응후처리시스템
DE19626985C1 (de) * 1996-07-04 1998-01-02 Siemens Ag Verfahren und Anordnung zur Reduktion von Codierungsartefakten von blockbasierten Bildcodierungsverfahren und objektbasierten Bildcodierungsverfahren
KR100269125B1 (ko) * 1997-10-25 2000-10-16 윤덕용 양자화효과감소를위한영상데이터후처리방법및장치

Also Published As

Publication number Publication date
JP4828930B2 (ja) 2011-11-30
DE69837714D1 (de) 2007-06-14
WO1999022509A2 (en) 1999-05-06
JP2006157938A (ja) 2006-06-15
EP1025691B1 (en) 2007-05-02
EP1657934A1 (en) 2006-05-17
JP2009065716A (ja) 2009-03-26
EP1025691A2 (en) 2000-08-09
US6539060B1 (en) 2003-03-25
EP1657933A1 (en) 2006-05-17
JP2012249321A (ja) 2012-12-13
CN1214645C (zh) 2005-08-10
CN1599460A (zh) 2005-03-23
WO1999022509A3 (en) 1999-11-25
JP2001522172A (ja) 2001-11-13
JP5753933B2 (ja) 2015-07-22
KR19990033652A (ko) 1999-05-15
AU9465798A (en) 1999-05-17
DE69837714T2 (de) 2007-08-16
CN1281617A (zh) 2001-01-24
JP2014200104A (ja) 2014-10-23
CN100377598C (zh) 2008-03-26
KR100269125B1 (ko) 2000-10-16
JP5207942B2 (ja) 2013-06-12

Similar Documents

Publication Publication Date Title
CN100377598C (zh) 用于减少量化效应的图像数据后处理方法和装置
US6665346B1 (en) Loop-filtering method for image data and apparatus therefor
Park et al. A postprocessing method for reducing quantization effects in low bit-rate moving picture coding
Lee et al. Loop filtering and post-filtering for low-bit-rates moving picture coding
Choi et al. Blocking-artifact reduction in block-coded images using wavelet-based subband decomposition
KR100331331B1 (ko) 영상데이터 루프필터링 방법
KR100301013B1 (ko) 영상데이터 루프필터링방법 및 장치
Liu et al. Objective image quality measure for block-based DCT coding
Kim Adaptive blocking artifact reduction using wavelet-based block analysis
Do et al. A new adaptive image post-treatment for deblocking and deringing based on total variation method
Kaur et al. Artifacts reduction based on separate modes in compressed images
Liu et al. A new postprocessing method for the block-based DCT coding based on the convex-projection theory
Law et al. Successive structural analysis using wavelet transform for blocking artifacts suppression
Atzori et al. A real-time visual postprocessor for MPEG-coded video sequences
Kumar Srivastava A SVD based scheme for post processing of DCT coded images
Zhang et al. A novel deblocking algorithm using edge flow-directed filter and curvelet transform
Biswas et al. Support Vector Machine (SVM) based compression artifact‐reduction technique
Oktia A Motion Estimation
Wu et al. Efficient postprocessing scheme for block-coded images based on multiscale edge detection
Makol et al. Review of Deblocking Of Compressed Images Using Post Processing Spatial Techniques
Chowdhury et al. Performance evaluation of linear filters for reducing blocking artifacts in transform video coded images

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C12 Rejection of a patent application after its publication
RJ01 Rejection of invention patent application after publication

Open date: 20080528