CN1266945C - 数字图象处理方法 - Google Patents

数字图象处理方法 Download PDF

Info

Publication number
CN1266945C
CN1266945C CNB031206042A CN03120604A CN1266945C CN 1266945 C CN1266945 C CN 1266945C CN B031206042 A CNB031206042 A CN B031206042A CN 03120604 A CN03120604 A CN 03120604A CN 1266945 C CN1266945 C CN 1266945C
Authority
CN
China
Prior art keywords
digital image
filter
grade
pair
filtering
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CNB031206042A
Other languages
English (en)
Other versions
CN1437409A (zh
Inventor
J·荣
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Koninklijke Philips NV
Original Assignee
Koninklijke Philips Electronics NV
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from FR0200487A external-priority patent/FR2834853A1/fr
Application filed by Koninklijke Philips Electronics NV filed Critical Koninklijke Philips Electronics NV
Publication of CN1437409A publication Critical patent/CN1437409A/zh
Application granted granted Critical
Publication of CN1266945C publication Critical patent/CN1266945C/zh
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/86Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117Filters, e.g. for pre-processing or post-processing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/18Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a set of transform coefficients
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Image Processing (AREA)

Abstract

本发明涉及一种由象素构成的数字图象后处理方法,上述数字图象根据象素块编码技术被编码和解码。所述方法包括对所述数字图象的象素块分配一个等级的分类步骤、输出所述数字图象的衰减量度的所述数字图象衰减评估步骤、根据各自的不同等级和数字图象的衰减量度。将一对邻接块与一个滤波器结合起来的滤波器选择步骤、根据衰减量度输出对于一对邻接块的滤波判定的滤波判定步骤,以及通过相关滤波器对一对邻接块进行滤波以得到滤波后的数字图象的滤波步骤。该方法的优点在于它兼备了低复杂性和高有效性。

Description

数字图象处理方法
技术领域
本发明涉及一种由象素组成的数字图象处理方法,所述数字图象是根据象素块编码技术进行编码和解码,上述方法包括输出等级的分类步骤、输出所述数字图象恶化量度的所述数字图象恶化评估步骤和输出经滤波的数字图象的滤波步骤。
还涉及执行该方法的数字图象后处理设备。
还涉及采用该方法的计算机程序。
还涉及传送该计算机程序的信号。
可发现其特别适用于集成在如移动电话的便携设备中的在低位速率和实时状态下运行的视频解码器。
背景技术
面对传送和存储数字数据的需求的增长,压缩技术,或换言之数据编码变得越来越普及。最常用的视频数据压缩技术(后面,将视频数据也称为数字图象序列),如那些MPEG(“运动图象专家组”)标准,采用块变换,例如离散余弦变换(DCT)。该块变换有压缩率高的优点。另一方面,随后的量化步长对已解码的数字图象造成块效应,这导致它们的品质降低。实际上,量化越近于准确,编码率越低。从而,由于量化步长造成的衰减可以在编码率很高时的觉察不到的程度到编码率很低时的令人烦恼程度之间变化。
为了解决上述问题,过去几年来已发展了很多后处理所述已解码的数字图象的技术,以便校正所述块效应。这些技术主要涉及根据高速率应用的MPEG-2技术编码和解码的数字图象序列,例如通过卫星的广播电视节目。
随着因特网和便携设备的发展,例如移动电话或移动秘书,已出现了在移动网络上实时传送用于低速率应用的视频数据的需求,结果,实现了更合适的压缩技术,例如MPEG-4或H.26L标准,也同样基于块变换。与之平行地,特别针对低比率的块效应校正技术也已经发展起来了。
根据MPEG-4标准执行的已解码的数字图象的处理技术,已经在国际标准组织ISO/IEC JTC 1/SC 29/WG 11中说明了,题名“信息技术—视听对象编码—第2部分:视觉”,N3056,454-56页,2000年1月31日出版。其目的在于校正用MPEG-4标准编码和解码的数字图象中出现的块效应。
图1示出了所述已解码数字图象Im的处理技术,包括以下3个步骤:
-数字图象Im恶化评估步骤DEGR(1),它接收作为输入的所述数字图象Im,并输出图象恶化量度DM,
-分类步骤CLASS(2),将所述数字图象Im的2个邻接块(Bj,Bk)的行或列象素段Sj,k作为输入,其中0≤j、k<nbmax(nbmax是该图象Im的块序号)、j≠k,并将它分配给2个可能等级中的等级Ci。该2个可能等级是单色等级C1和质地等级C2
-滤波步骤FILT(3),接收作为输入的2个邻接块的行或列象素段Sj,k,并根据恶化量度DM,在所述段Sj,k为等级C1时利用滤波器F1输出或不输出已滤波的段S’j,k,如果所述段Sj,k为等级C2则采用滤波器F2
要注意,分类步骤CLASS(2)和FILT(3)应用于2个邻接块的象素的行或列段,从而所述步骤在扫描该数字图象Im的行或列段的环路(4)内执行。只要执行完扫描,就得到该滤波的数字图象ImF。
这个方法的主要缺点是复杂性,虽然程序与其它竞争的技术相同,但不能实现例如专用于移动终端的实时低比率的应用。
发明内容
本发明的目的是给出一个效果相同的、不复杂的对由象素构成的图象进行处理方法。
本发明的目的是通过说明书第一段落所述的方法实现的,其特征在于包括:
-用来对数字图象的象素块分配等级的所述分类步骤,
-用来根据各自的不同等级和数字图象的恶化量度将一对邻接块与滤波器联系起来的滤波器选择步骤,
-用来根据恶化量度,对于一对邻接块输出滤波判定的滤波判定步骤,
-用来对一对邻接块通过与它的相联系的滤波器进行滤波的所述滤波步骤。
该方法首先可以降低复杂性。这样做,使得所述分类步骤应用于整个块,而不是只应用于2个邻接块的行或列象素段,因此,可以减少对整个已解码数字图象执行的分类操作的数量。
滤波器选择步骤不再应用于两个邻接块象素的行或列段,而是应用于一对邻接块,这样也可以减少被执行的滤波器选择操作的数量。
同样,滤波判定步骤不再应用于两个邻接块的象素的行或列段,而应用于一对邻接块,从而降低复杂性。
对于正常的滤波,至少在两个滤波器中进行选择,也就是,根据将滤波器与一对等级联系起来的预定模型进行选择。
根据本发明特别有益的实施例,分类步骤的特征在于,至少包括4个等级,即,单色等级、行等级、列等级、和纹理等级。
因此,所述分类步骤与现有技术相比包括至少两个额外的等级,即,行等级和列等级。行和列实际上是频繁出现在以低比特率编码和解码的数字图象上的块的图案。由于增加了两个等级,所述分类步骤具有更多选择性,如后面所述,与现有的技术相比,很大程度上简化了滤波步骤并且保持了如效果等的所有性能。
根据所述实施例,数字图象后处理方法的特征在于,还包括至少4个不同的滤波器。
实际上,如在现有技术中,采用至少4个非常简单的线性滤波器对所述滤波器没有自适应性这一情况进行补偿。滤波的数字图象的视频质量不次于采用现有技术的视频质量,但运算成本低得多。
根据上面实施例,对于一对块的滤波判定步骤的特征在于,它用于按相邻块对来抑制或激活所述滤波器选择步骤。换言之,对于一对邻接块是否滤波的判定不是象现有技术那样在滤波步骤发生,而是在滤波器选择步骤发生。本发明的优选实施例的一个优点是不处理大量的邻接块对,从而没有明显降低选择个数,随后执行滤波操作。
根据所述实施例,所述数字图象(Im)的恶化评估步骤的特征在于,它用于根据当前图象(Im)和前一图象的量化步长值,给出恶化量度(DM)。采用至少2个量化步长的优点在于,在量化步长可以计算从一个图象到另一图象的变化量,并且可以由此导出比简易量化步长更精确的恶化量度(DM)。所述量度有可能考虑基于所使用的编码标准的先验知识数据。
本发明的另一个目的是提供用于例如采用硬件或软件单元在集成电路中实现所述方法的数字图象处理设备。
附图说明
本发明的这些方面的内容以及其它更加详细的方面将从下面本发面的多个实施例的说明中更加清楚地表现出来,这些实施例通过无限制实例和相关的附图给出,其中:
图1是根据现有技术的数字图象后处理方法的框图。
图2是根据本发明的数字图象后处理的框图。
图3给出了根据本发明贯串按照块编码技术被编码和解码的一系列数字图象的在量化步长中和衰减量的变化的曲线。
图4说明了用于在分类步骤中选择一个等级的在块中被考虑的子块。
图5给出可以被根据本发明的数字图象后处理方法便利地使用的四个平滑滤波器。
图6示出多对等级和根据本发明的恶化量度的滤波器的相关性。
图7是含有根据本发明的数字图象处理方法的解码过程框图。
图8是含有根据本发明的数字图象处理方法的编码过程框图。
具体实施方式
本发明特别涉及根据块编码技术进行编码和解码的数字图象后处理方法,以便用于低比特率和实时应用。我们所述的例子中,所执行的编码技术是MPEG-4标准,但也可以是H.26L标准或其它等同标准。要注意,该方法也可以应用于例如用JPEG标准编码的固定图象。
这样的块编码技术将一个数字图象分解成块。在MPEG-4标准情况下,所述块是固定大小的8象素×8象素。在编码期间,所述块进行频率变换。在MPEG-4和多数的标准技术情况下,离散余弦变换DCT是一个问题。在解码期间,在块边界可能会出现块效应。
块效应类似于一个边缘,但并不真正存在正常图象的内容中。本发明的目标具体是消除位于块边界的假边缘,效果与现有技术相同,但远远没有现有方法复杂。
图2是概括了根据本发明的数字图象处理设备方法的功能的框图。经解码的数字图象Im首先作为恶化评估步骤DEGR(5)的输入,它输出数字图象Im的恶化量度DM。
滤波判定步骤DEC(8)按照所述恶化量度DM而进行操作。所述滤波判定步骤判定是否需要对一对具有恶化量度DM的邻接块(Bj,Bk)进行滤波步骤,其中,0≤j、k<nbmax,nbmax是出现在图象Im中的块的总个数,j≠k。所述判定Dec对于本方法的其它步骤是独立得的,这将在下面进行说明,在这点上因此可以应用于该方法的不同阶段。这可以,例如是最后进行,就是说在所述滤波步骤中进行,就如同在现有技术中的状态,例如最后是所述滤波步骤,但这并没有被限定。如下将看到,将该判定应用得越前(上游)越好,从而消除所进行的处理的最大数量。
如上所述的并行于恶化评估DEGR(5)步骤和根据恶化DEC(8)的滤波判定步骤,所述图象Im在分类步骤CLASS(6)以一块块的形式出现。所述分类步骤CLASS(6)与从预定等级集中选出的块Bj相关联,其中0≤j<nbmax,等级Cli,i≥0。要注意的是,所述分类步骤CLASS(6)在用于对出现在数字输入图象Im中的块Bj进行扫描的回路(7)中执行,其中0≤j<nbmax
从这一阶段起,就不再有孤立的块,而是被认为是横向或纵向相邻的块对。对应于一对等级(Clm、Cln)(m≥0、n≥0)以及恶化量度DM的一对邻接块(Bj,Bk)(0≤j,k<nbmax、j≠k),随后通过滤波器选择步骤SEL(9)被进行处理。所述滤波器选择步骤SEL(9)给出滤波器F1,1≥0,应用于所述的一对邻接块对(Bj,Bk)(0≤j,k<nbmax和j≠k)。根据与一对邻接块(Bj,Bk)相对应的一对等级(Clm、Cln)并且根据数字输入图象Im的恶化量度DM,从把滤波器与多个等级对相联系的预定模型10中选择滤波器F1
所述邻接块对(Bj,Bk)(0≤j、k<nbmax、j≠k)和相关滤波器F1随后提供给滤波步骤FILT(11)的输入端,该步骤FILT输出滤波后的邻接块对(B’j,B’k)(0≤j、k<nbmax、j≠k)。
滤波器选择步骤SEL(9)和滤波步骤FILT(11)最好对出现在数字输入图象Im中所有的横向和纵向邻接块对执行。因此,它们在用于扫描数字输入图象Im的一个回路(12)内完成。
根据本发明的方法,对于已解码的数字图象Im,将得到经滤波的已解码数字图象ImF。
下面进一步详细说明利用本发明的方法的各步骤。
恶化评估步骤DEGR(5)接收作为输入的数字图象Im,并输出所述数字图象Im的恶化量度。该恶化评估是基于在编码期间采用的量化步长QP进行的。
在本发明的优选实施例中,该量度不直接对应所述量化步长QP的值,而更合适地对应于根据采用的视频数据压缩技术的已知特性而做出的QP修正值。例如,在MPEG-4的情况下,我们知道,序列的整个第一图象(又称为第一内部图象,编码完全独立于该序列的其它图象)总是以非常粗糙的方式量化。因此质量相对差。接着,其后的并依靠其进行编码的一定数量的图象(这些是预测图象,称为图象P)具有与它们相关的量化步长可能给出的更差的品质。
在根据本发明的方法中,恶化量度DM(Im)在某种程度上是虚拟量化步长。根据图象Im的量化步长QP进行评估,如下:
-若前一图象的量化步长值QPprec与由标准预测的的最大值(这里,MPEG-4时为31)相等,则恶化量度DM固定在30。这是因为,若QPprec=31,则可知当前图象是该序列的第1个图象。由于如上所述的原因,使它自动分配非常大的恶化量度DM。
-若不相等,若前一图象的量化步长值QPprec小于当前图象的量化步长QP,则恶化量度DM固定在QP值。若该量化步长值增加,则该增加将被立即传递给恶化量度DM,
-否则,量化步长中的变化量被评估:
变化量QP=QPprec-QP和恶化量度DM的计算如下:DM=QPprec-变量QP/4。若量化步长值减小,则恶化量度沿着相同的趋势变化,但比较缓和。
图3示出在一个图象序列上的恶化量度DM的变化与量化步长值QP变化的比较的例子。
根据为当前图象Im计算的恶化量度DM,滤波判定步骤DEC(8)优选地应用于图象Im的所有可能邻接的块对。对于一对邻接块(Bj,Bk),将被校正的任一边缘位于块Bj和Bk之间边界。所述滤波判定步骤DEC(8)的目的是确定其为真正的边缘,并在这第一种情况下决定不进行滤波,或确定其不是真正的边缘,并在这第二种情况下为了将它消除而决定进行滤波。这样,被考虑的一对中的块Bj和Bk之间存在强度的最大差Diff,这一最大差值由所讨论的两个块的最大和最小强度值得到,并与加权的恶化量度DM进行比较。
更详细地说,对滤波器Dec的判定是根据下述准则确定的:
-若块Bj和Bk之间的最大强度差Diff小于恶化量度的1.5倍,则滤波判定结果是肯定的。在此,可以认为不含真正的边缘,
-否则是就是否定的。此时,认为强度差Diff对于真正边缘的情况是足够大的。
如上所述,判定Dec可以在根据本发明的方法的不同位置上进行。另一方面,判定Dec进行得越早,在之后的步骤中将被处理的等级对的数量越小。在本发明的优选实施例中,一对块的滤波判定步骤DEC(8)通过邻接块对来禁止或激活所述滤波器选择步骤SEL(9)。换言之,根据一对邻接块(Bj,Bk)所属的当前图象Im的恶化量度DM确定是否滤波该对(Bj,Bk),在根据本发明的数字图象后处理方法中执行得非常早。通过消除来自在任何情况下都不会滤波的邻接块对的选择步骤的输入,将被处理的情况的数量和所述方法的复杂性,将在最大程度上被减小。
如果再次考虑图2,可以发现被用于处理给定图象Im的两个并行分支:
-第1个分支如上刚刚所述的,包含恶化评估步骤DEGR(5)和其后的滤波确定步骤DEC(8),
-第2个分支包含分类步骤CLASS(6)、滤波选择步骤SEL(9)和滤波步骤FILT(11)。
如上所述,分类步骤CLASS(6)处理整个块,而不是象素段。它应用于已解码的数字图象Im的大小为P象素×Q象素的所有块Bj(在MPEG-4中,这里认为该块的大小为8×8),其中0≤j<nbmax。在所述块Bj中,除了边缘象素外的所有象素都被考虑。图4给出大小8×8的块的一个例子。因此所考虑的子块SBj是由系数{ap,q}表构成,其中p=1…P-2、q=1…Q-2。所述分类步骤CLASS(6)包括在该子块内评定某些在强度上的不连续点类型,并且与门限进行比较,最终目的是对每个块Bj分配等级Cli,其中i≥0。
从至少2个等级中选择进行,即,在现有技术中,为单色等级和纹理等级。本发明的优选实施例中,采用4个等级,即单色等级Cl1和纹理等级Cl4,再加上行等级Cl2和列等级Cl3
从而,分类步骤CLASS(6)对块Bj的子块SBj进行不连续点的评定:
-若满足下述条件,则块Bj被表示为单色等级Cl1的一个成员:
|m1-m2|<S,其中
m1=max{sp,q }p=1…P-2,q=1…Q-2,和m2=min{ap,q }p=1…P-2,q=1…Q-2
m1是子块SBj的系数ap,q中的最大值,m2是子块SBj的系数ap,q中的最小值。
-对于子块SBj的任一行p,p=1…P-2,如果满足下这条件,块Bj被表示为所述行等级Cl2的一个成员:
|m1-m2|<S,其中
m1=max{ap,q}q=1…Q-2,和m2=min{ap,q}q=1…Q-2
m1是子块SBj的行p的系数ap,q中的最大值,m2是子块SBj的行p的系数ap,q中的最小值。
-对于子块SBj的任一列q,q=1…Q-2,如果满足下这条件,块Bj被表示为所述列等级Cl3的一个成员:
|m1-m2|<S,其中
m1=max{ap,q}p=1…P-2,和m2=min{ap,q}p=1…P-2
m1是子块SBj的列q的系数ap,q中的最大值,m2是子块SBj的列q的系数ap,q中的最小值。
-若所述条件都不满足,则块Bj被表示为所述纹理等级Cl4的一个成员。
对于块8×8,根据对人类视觉系统的考虑,所述门限S例如固定在3个强度单位。
邻接块对的滤波器选择步骤SEL(9)将所述邻接块对中的块的等级与结合了等级对和滤波器的预定模型进行比较。一对邻接块(Bj,Bk)和通过在先分类步骤CLASS(6)得到的与之相应的等级对(Clm,Cln)被作为所述的滤波器选择步骤SEL(9)的输入,同样对应于含有块对(Bj,Bk)的当前图象Im的恶化量度DM也被作为输入。所述预定模型也考虑本技术公知的人类视觉系统特性而构造的。本实施例的最重要的特性是称为纹理掩蔽,它表现为眼睛对图象的纹理非常突出的区域的错误不敏感。因此,这些区域不需要滤波。实际上,破坏任一个对象的真正轮廓比减小块效应更危险,后者用肉眼难以看到。另一方面,在单色区域,肉眼对边缘效应很敏感,并且更容易滤波,在该区域很少保持真正的轮廓。
在滤波选择步骤SEL(9)期间,图象Im的恶化量度DM可改良所用滤波器的选择。这是因为若恶化量度高,则可以进行彻底地滤波,以便补偿粗略的量化。
因此,可知可以预先定义模型,该模型将滤波器的适当选择与一对等级和恶化量度相关联。例如,若邻接块对(Bj,Bk)与单色等级对(Cl1,Cl1)对应,则选择的平滑滤波器的滤波能力非常强,并且恶化量度越大则越强。对于行等级对(Cl2,Cl2),由于它发生在行方向上,所以可以进行非常强的水平平滑。相反,对于列等级对(Cl3,Cl3),选择的水平滤波器是空滤波器。
总之,在该阶段没有进行计算。滤波器选择步骤包括查找预先构建的表,以便在其中选择滤波器。
滤波步骤FILT(11)利用在前面滤波选择步骤SEL(9)所选的滤波器F1滤波一对邻接块(Bj,Bk)。这些所采用的滤波器非常简单。它们是可应用于垂直方向和水平方向的线性低通滤波器。根据这些滤波器作用于在两个块之间的边界的各侧的象素数量将它们彼此区别开来。对于一对8×8的邻接块对,若是水平对,同一线性滤波器F1应用于该对的每一行,若是垂直对,同一线性滤波器F1应用于该对的每一列,并且是连续进行8次。应注意,在采用硬件装置实现本方法的情况下,这种相同动作的重复可以被有效优化。
根据本发明的优选实施例,采用4个平滑滤波器。图5示出所述滤波器。它们很好地兼顾了简便性和有效性,但也可以采用复杂的滤波器或数量更多的滤波器。
根据本发明的同一优选实施例,上面所介绍的用于4个平滑滤波器的预定模型在图6中示出。
应注意,图6所示的所述预定模型只不过是一种可能的组成的例子。
应注意,不是对所有邻接对块进行滤波。如上所述,是否滤波邻接块(Bj,Bk)的判定是以通过根据当前图象Im的恶化量度DM所进行的判定步骤所做出的判定结果为条件的。
根据本发明的优选实施例,分类步骤采用4个等级而比现有技术更有选择性,可以弥补滤波步骤的过于简单。可以发现,行和列的图案在以相对低比特率编码和解码的视频数据中经常同等采用。在分类步骤时就对它们进行鉴别,可以实现利用简单的滤波器以更合适的形式对它们进行滤波。
本发明的优选实施例在视频的品质方面具有与现有技术相同的性能,但复杂程度却是现有技术的四分之一。复杂性的简化主要是由于分类和滤波步骤应用于整个块或块对,而不是块段或块对段,以及采用的滤波器非常简单且非自适应。
本发明可以通过装载在执行如上所述的数字图象处理方法的一个或多个电路中的软件的形式实现,或利用集成电路实现。用于与所述方法相应的根据块压缩技术进行编码和解码的数字图象后处理的设备,是对图2的功能性模块的重复,它包括:
-分类装置,用于将等级(Cli)分配给所述数字图象Im的象素块(Bj),
-滤波器选择装置(SEL),用于根据上述数字图象(Im)的各自等级(Clm,Cln)和恶化量度(DM),将滤波器(F1)与一对邻接块(Bj,Bk)相关联,
-滤波判定装置用于按邻接块对输出一个滤波判定结果,
-滤波判定装置(DEC),用于根据恶化量度(DM),对于一对邻接块(Bj,Bk),输出滤波判定(Dec)
-滤波装置(FILT),用于利用相关滤波器(F1)对一对邻接块(Bj,Bk)进行滤波。
图7示出本发明的适用于产生已解码的数字图象的视频解码器的功能,含有执行本发明的处理方法的处理设备。
上述视频解码器包括:
-已编码的数字数据ES的可变长度解码装置VLD(91),适用于产生量化的数据,
-已量化数据的反量化装置IQ(92),适用于产生变换数据,
-反向频率变换设备,如上所述,在本例中,已变换数据的反向离散余弦变换IDCT(93)得到反向变换的数据。
解压设备还包括利用图象存储器MEM(95)的图象数据块—数据块的重建步骤REC(94)。利用处理设备COR(96)执行本发明的处理方法,所以设备适用于重建的数字图象块的处理,以便产生用于在屏幕DIS(97)上显示的已处理图象。
图8示出适用于接收数据块形式的数字图象IN的视频编码器的功能,并含有编码环路中的紧跟在处理装置之后的反向频率变换装置,它利用了根据本发明的处理方法。
视频编码器(100)包括:
-正向频率变换设备,这里是数字视频数据的正向离散余弦变换DCT(101)并且已变换数据如上面所述,
-量化装置Q(102),用于量化已变换数据,适用于产生已量化数据,
-可变长度编码单元VLC(103),用于编码量化的数据,适用于产生已编码的数据ES。
还具有含有以下系列组合的预测单元:
-反向量化装置IQ(104),用于反向量化该已量化的数据,适用于产生已变换的数据,
-反向离散余弦变换单元IDCT(105),用于将已变换的数据变换成如前面所述的反向已变换的数据,
-加法器,相加来自变换单元IDCT和来自运动补偿设备MC(106)的数据,
-处理设备COR(107),用于执行本发明的处理方法,并适用于处理来自加法器的已解码数据块,以便将处理后的数据块提供给图象存储器MEM(108),
-图象存储器MEM(108)适用于存储运动补偿设备MC(106)采用的图象及来自运动评估设备ME(109)的运动向量,
-减法器,适用于从输入IN的数字视频数据中减去来自运动补偿设备的数据,其结果输出给变换设备DCT。
还可以在反向余弦反换设备IDCT(105)和加法器之间插入处理设备COR(107),该处理对微分信号有效,对重构造信号无效。
执行本发明的处理方法的处理设备也可以提高视频编码器的性能,不仅在编码质量上有提高,在输入比特率方面也有提高。因此,将图8的视频编码器和图7的视频解码器级联时,图象质量比级联标准视频编码器和图7的视频解码器、或级联图8的视频编码器和标准视频解码器时的图象质量好得多。
用软件单元有很多方法实现上述功能。在这点上图2具有很高的示意性。因此,虽然示出各块的几个功能,但并不排除一个软件单元执行几个功能。也不排除一个功能被一组软件执行。可以利用已编好程序的视频解码器电路、数字电视接收器—解码器电路(“机顶盒”)、或电视接收器电路实现这些功能。包含在程序设计存储器中的指令集可使电路执行上述图2中所描述的不同操作。这些指令集也可以通过读数据媒介装载到程序设计存储器中,例如含有指令集的磁盘。也可以通过例如因特网的通信网络进行读取。此时,服务供应商将指令集提供给相关的当事人。
括号里的参考符号不是用于限制的。动词“包括”和其逻辑和不排除没有列出的单元或步骤。单元前面的词“一个”不排除多个单元或步骤。

Claims (9)

1.一种含有象素的数字图象(Im)的后处理方法,所述数字图象根据象素块编码技术进行编码和解码,所述方法包括输出等级(Cli)的分类步骤(6)、输出所述数字图象恶化量度(DM)的所述数字图象的恶化评估步骤(5)和输出经滤波的数字图象(ImF)的滤波步骤(11),其特征在于包括:
所述分类步骤(6),被用作对上述数字图象(Im)的象素块(Bj)分配等级;
滤波器选择步骤(9),被用作根据各自的不同等级(Clm,Cln)和上述数字图象(Im)的恶化量度(DM),将一个滤波器(Fl)与一对邻接块(Bj,Bk)相关联;
滤波判定步骤(8),被用于根据恶化量度(DM),对于一对邻接块(Bj,Bk),输出一个滤波判定(DEC),和用于按每对邻接块禁止或激活所述滤波器选择步骤(9)或所述滤波步骤(11);
所述滤波步骤(11),被用于利用其相关联的滤波器单元(Fl)对一对邻接块(Bj,Bk)进行滤波。
2.如权利要求1所述的后处理方法,其特征在于:
所述分类步骤(6)可以判别至少4个不同等级(Cli),即,单色等级、行等级、列等级、和纹理等级。
3.如权利要求2所述的后处理方法,其特征在于:
所述方法采用至少4个不同的滤波器(Fl)。
4.如权利要求1所述的后处理方法,其特征在于:
恶化评估步骤(5)用于根据当前图象(Im)和前一图象的量化步长值提供恶化量度(DM)。
5.一种用于由象素构成的数字图象(Im)的后处理的设备,所述数字图象按照基于象素块的编码技术进行编码和解码,所述设备包括输出等级(Cli)的分类装置、输出所述数字图象的恶化量度(DM)的所述数字图象(Im)的恶化评估装置和输出滤波后的数字图象(ImF)的滤波装置,其特征在于包括:
所述分类装置,被用于对所述数字图象(Im)的象素块(Bj)分配等级;
滤波器选择装置,被用于根据各自的不同等级(Clm,Cln)和所述数字图象(Im)的恶化量度(DM),将一个滤波器(Fl)与一对邻接块(Bj,Bk)相关联;
滤波判定装置,被用于根据恶化量度(DM),对于一对邻接块(Bj,Bk)输出滤波判定(DEC),和用于按每对邻接块禁止或激活所述滤波器选择装置或所述滤波装置;
所述滤波装置,被用于利用其相关联的滤波器(Fl)对一对邻接块(Bj,Bk)进行滤波。
6.如权利要求5所述的处理设备,其特征在于:
所述分类装置包括至少4个等级(Cli),即,单色等级、行等级、列等级、和纹理等级。
7.一种用于对按照块编码技术编码的数字图象进行解码的解码器,包括:
如权利要求5或6所述的适于处理已解码的数字图象(Im)的数字图象处理装置。
8.一种编码器,适于接收象素块形式的数字图象,并包含反向频率变换单元以及权利要求5的用于数字图象的后处理的设备,适于处理来自所述反向频率变换装置的已解码象素块,以便产生已处理象素块。
9.一种含有权利要求7所述的解码器的便携式设备,用于在所述设备的屏幕上显示已处理的数字图象。
CNB031206042A 2002-01-16 2003-01-13 数字图象处理方法 Expired - Fee Related CN1266945C (zh)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
FR02/00487 2002-01-16
FR0200487A FR2834853A1 (fr) 2002-01-16 2002-01-16 Procede de post-traitement d'une image numerique
FR02/04014 2002-03-29
FR0204014 2002-03-29

Publications (2)

Publication Number Publication Date
CN1437409A CN1437409A (zh) 2003-08-20
CN1266945C true CN1266945C (zh) 2006-07-26

Family

ID=26213324

Family Applications (1)

Application Number Title Priority Date Filing Date
CNB031206042A Expired - Fee Related CN1266945C (zh) 2002-01-16 2003-01-13 数字图象处理方法

Country Status (5)

Country Link
US (1) US7254278B2 (zh)
EP (1) EP1333680A3 (zh)
JP (1) JP2003333596A (zh)
KR (1) KR20030062383A (zh)
CN (1) CN1266945C (zh)

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DK1704585T3 (en) 2003-12-19 2017-05-22 Univ North Carolina Chapel Hill Methods for preparing isolated micro- and nanostructures using soft lithography or printing lithography
US9040090B2 (en) 2003-12-19 2015-05-26 The University Of North Carolina At Chapel Hill Isolated and fixed micro and nano structures and methods thereof
WO2007021762A2 (en) 2005-08-09 2007-02-22 The University Of North Carolina At Chapel Hill Methods and materials for fabricating microfluidic devices
US20070275193A1 (en) * 2004-02-13 2007-11-29 Desimone Joseph M Functional Materials and Novel Methods for the Fabrication of Microfluidic Devices
WO2005101298A2 (en) * 2004-04-14 2005-10-27 Imperial Innovations Limited Estimation of within-class matrix in image classification
GB0408328D0 (en) * 2004-04-14 2004-05-19 Imp College Innovations Ltd Method of processing image data
US7136536B2 (en) * 2004-12-22 2006-11-14 Telefonaktiebolaget L M Ericsson (Publ) Adaptive filter
US7760963B2 (en) * 2005-01-07 2010-07-20 Niigata University Image processing method, image processing device and recording medium on which image processing program is recorded
JP2008529102A (ja) * 2005-02-03 2008-07-31 ザ ユニバーシティ オブ ノース カロライナ アット チャペル ヒル 液晶ディスプレイに用いられる低表面エネルギー高分子材料
KR100715512B1 (ko) * 2005-05-16 2007-05-04 엠텍비젼 주식회사 이미지 처리 장치 및 그 방법
CN101491103B (zh) * 2006-07-20 2011-07-27 高通股份有限公司 用于编码器辅助式预处理的方法和设备
US8128393B2 (en) * 2006-12-04 2012-03-06 Liquidia Technologies, Inc. Methods and materials for fabricating laminate nanomolds and nanoparticles therefrom
US20100151031A1 (en) * 2007-03-23 2010-06-17 Desimone Joseph M Discrete size and shape specific organic nanoparticles designed to elicit an immune response

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4849810A (en) * 1987-06-02 1989-07-18 Picturetel Corporation Hierarchial encoding method and apparatus for efficiently communicating image sequences
US5852475A (en) * 1995-06-06 1998-12-22 Compression Labs, Inc. Transform artifact reduction process
US6188799B1 (en) * 1997-02-07 2001-02-13 Matsushita Electric Industrial Co., Ltd. Method and apparatus for removing noise in still and moving pictures
US7003174B2 (en) * 2001-07-02 2006-02-21 Corel Corporation Removal of block encoding artifacts

Also Published As

Publication number Publication date
US20030147559A1 (en) 2003-08-07
JP2003333596A (ja) 2003-11-21
EP1333680A2 (fr) 2003-08-06
EP1333680A3 (fr) 2007-06-13
CN1437409A (zh) 2003-08-20
US7254278B2 (en) 2007-08-07
KR20030062383A (ko) 2003-07-25

Similar Documents

Publication Publication Date Title
CN1266945C (zh) 数字图象处理方法
CN1178515C (zh) 图象编码方法及图象编码装置
Shen et al. Effective CU size decision for HEVC intracoding
CN1215439C (zh) 执行可缩放的分层运动估算的装置与方法
CN100345450C (zh) 视频或图像去块滤波的方法和装置
CN1214645C (zh) 用于减少量化效应的图像数据后处理方法和装置
CN1110961C (zh) 用于消除dct编码的振铃现象的滤波装置和方法
CN1116768C (zh) 图像编码装置和方法
KR101546894B1 (ko) 화상 처리 방법, 화상 처리 장치, 영상 부호화/복호 방법, 영상 부호화/복호 장치 및 그 프로그램
CN1820512A (zh) 消除块效应的方法、介质和滤波器
CN1726709A (zh) 利用基于图像的超前查看窗口进行速率控制
CN101064850A (zh) 图像压缩装置、图像压缩程序和图像压缩方法
CN1906938A (zh) 用于发送可缩放的视频比特流的方法和设备
CN1922859A (zh) 图像压缩方法、图像压缩装置、图像传输系统、数据压缩预处理装置及计算机程序
CN101052129A (zh) 数字广播接收装置
CN101043621A (zh) 一种自适应插值处理方法及编解码模块
CN1272287A (zh) 在编码数据流中修改数据的方法和设备
CN1941911A (zh) 退色补偿的参数化
CN1723711A (zh) 用于数字视频处理的一元化量度(umdvp)
CN1318950A (zh) 图像编码装置及其方法、摄像机、录像装置和图像发送装置
CN1957596A (zh) 可扩缩编码方法和装置、可扩缩解码方法和装置
CN1191718C (zh) 运动图象编码器及其方法
CN1498501A (zh) 视频数据压缩和解压缩的方法
AU2024200562A1 (en) Tool selection for feature map encoding vs regular video encoding
CN1886759A (zh) 对视频信号中的局部视觉时空细节的检测

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
C17 Cessation of patent right
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20060726

Termination date: 20100222