CN103503451A - 用于对经编码的图像分区进行滤波的方法和设备 - Google Patents

用于对经编码的图像分区进行滤波的方法和设备 Download PDF

Info

Publication number
CN103503451A
CN103503451A CN201280021984.0A CN201280021984A CN103503451A CN 103503451 A CN103503451 A CN 103503451A CN 201280021984 A CN201280021984 A CN 201280021984A CN 103503451 A CN103503451 A CN 103503451A
Authority
CN
China
Prior art keywords
image
reconstruct
filtering
subregion
encoded
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201280021984.0A
Other languages
English (en)
Other versions
CN103503451B (zh
Inventor
P.阿蒙
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Siemens AG
Original Assignee
Siemens AG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Siemens AG filed Critical Siemens AG
Publication of CN103503451A publication Critical patent/CN103503451A/zh
Application granted granted Critical
Publication of CN103503451B publication Critical patent/CN103503451B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117Filters, e.g. for pre-processing or post-processing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • H04N19/82Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Compression Of Band Width Or Redundancy In Fax (AREA)

Abstract

本发明描述一种用于对由大量像素组成的数字化图像(I)的序列进行编码的方法。在此对于相应图像,对与其图像内容有关的信号(S)进行编码,其中在编码的范畴中执行未编码的信号的重构并且从中导出重构的图像。所述重构的图像(RI)经受滤波(LF),在所述滤波时将相应的重构的图像(RI)划分成分区(PA1,PA2),并且对于每个分区(PA1,PA2)设定一个或多个滤波参数(FP)。根据本发明,至少一些分区(PI1,PI2)分别通过函数(F1,F2,F3)的一个或多个参数来加以描述,所述函数描述在预定图像区域(B)内像素的走向,其中像素的走向将预定图像区域(B)划分成至少两个分区(PA1,PA2)。

Description

用于对经编码的图像分区进行滤波的方法和设备
技术领域
本发明涉及用于对数字化图像的序列进行编码的方法以及对应的解码方法。此外,本发明涉及分别用于执行编码和解码方法的编码设备和解码设备。
本发明处于视频编码领域。在此,利用对应的压缩方法对由大量像素组成的时间上相继的数字图像的内容进行压缩,其中一般适当地考虑在时间上相邻的图像之间的相似性,以便缩小经压缩的图像流的大小。
背景技术
为了在对图像流进行编码之后改善经编码的图像流的图像质量,从现有技术中已知各种滤波方法。在此,图像流的已经编码的图像再次被重构并且对应的滤波被应用于所述图像,所述对应的滤波类似地在解码时被使用。在当今的编码方法中,尤其是使用解块滤波器和维纳滤波器。在解块滤波时,通过压缩减少在经编码的图像块的边界处所产生的伪影。在维纳滤波时,将重构的图像与原始图像进行比较并且将对应的滤波系数确定为使得最小化在重构的图像和原始图像之间的均方误差。
现代编码方法包含预测环,其中从一个或多个时间上在前的重构的图像中经由对应的运动估计来预测时间上紧接着的图像。在此,在要编码的图像和预测图像之间的预测误差作为信号被编码。上面提及的滤波器经常在预测环内被使用。在该情况下,将该滤波器也称为环路滤波器。
从现有技术中已知使用所谓的自适应环路滤波,其中仅使图像的特定图像区域经受滤波。在出版物[1]中为此将图像块分割成越来越小的图像块,其方式是,首先将原始图像块划分成四个较小的相同大小的图像块并且接着分层地将这些较小的图像块以相同的方式一再地划分成更小的图像块。对于相应图像块,在此发信号通知:该图像块的滤波是否应该发生。在出版物[1]中所描述的滤波具有以下缺点:对于每单个块必须发信号通知:滤波是否应该被使用,使得在所分割的块的数量很大的情况下必须在经编码的图像流中传送很多附加信息。
发明内容
本发明的任务是提供一种用于对图像流进行编码或解码的方法,利用所述方法对于图像流的图像实现简单的和灵活可匹配的滤波。
该任务通过独立权利要求解决。本发明的改进方案在从属权利要求中定义。
根据本发明的方法用于对由大量像素组成的数字化图像的序列进行编码,其中对于相应图像,对与其图像内容有关的信号进行编码。在编码的范畴中,执行未编码的信号的重构并且从中导出重构的图像,所述重构的图像优选地在时间预测的范畴中在对该序列的后续图像进行编码时被使用。重构的图像经受滤波,在所述滤波时将相应的重构的图像划分成分区,并且对于每个分区设定一个或多个滤波参数。
根据本发明的方法的特征在于,至少一部分分区分别通过函数的一个或多个参数来加以描述,所述函数描述在预定图像区域内像素的走向,其中像素的走向将预定图像区域划分成至少两个分区。预定图像区域尤其是代表以所谓编码单元形式的各个在编码的范畴中被单独处理的子图像区域或者又代表该编码单位的子图像区域。
根据本发明的方法基于以下构思:可以经由对应参数化的函数来描述图像区域内的不同像素走向并且由此可以提供不同形状的分区,其中给所述分区分别分派适当的滤波参数。由此实现图像流的图像的非常灵活的编码。根据本发明的方法可以被用于任意的编码方法。该方法尤其是可以在仍处于开发中的视频编码标准HEVC(HEVC=高效率视频编码)中被使用。
在优选的变型方案中,在预测式视频编码方法中使用根据本发明的滤波。在此,对在当前要编码的图像和一个或多个重构的和预测的图像之间的预测误差作为信号进行编码,其中在预测环内从一个或多个过去的重构的图像中求得预测误差,所述一个或多个过去的重构的图像在使用经由运动估计所求得的运动向量情况下经受运动补偿。未编码的图像的重构的概念这里和下面尤其是涉及从经编码的信号中近似地重建原始图像。精确的重构由于通过编码引起的图像损失一般是不可能的。在预测环内,在此所述一个或多个重构的图像在运动补偿之后被用于重构一个或多个随后的图像。优选地,在此在运动补偿之前或之后使用根据本发明的滤波作为预测环内的环路滤波。也就是说,用于求得预测误差的重构的图像在预测环内除了运动补偿之外还经受根据本发明的滤波。然而,也存在以下可能性:用于求得预测误差的重构的图像未经滤波,并且在预测环之外进行对重构的图像的滤波。
在特别优选的变型方案中,为了编码使用以下方法,在所述方法中,经编码的图像通过变换和量化来产生并且为了重构未编码的信号而将对应的逆量化和逆变换应用于经编码的信号,其中经编码的信号在量化和变换之后优选地经受另外的熵编码。熵编码再次提高编码效率,而在此来自图像的其它信息不丢失。于是在解码的范畴中在接着将逆量化和逆变换应用于经编码的信号之前首先进行对应的熵解码。
在根据本发明的滤波范畴中,可以使用任意的、从现有技术中使用的滤波器。尤其是可以使用上面已经提及的维纳滤波器或可替换地或附加地也可以使用解块滤波器。
在另一特别优选的实施方式中,相应的预定图像区域是图像块形式的矩形图像区域和优选地正方形图像区域,所述相应的预定图像区域通过像素走向被划分成至少两个分区。如上面已经提及的,这些图像区域在此尤其是对应的编码单元或这些编码单元的子区域。
描述在预定图像区域内像素的走向的函数可以根据应用情况任意地加以选择。在特别优选的实施方式中使用直线。在此该直线优选地在对应的矩形图像区域中倾斜地走向,也即在该直线与该图像区域的对应边缘相交的点处,该直线不与该图像区域的边缘垂直。可替换地或附加地,在预定图像区域中像素的对应走向也可以通过另外的函数描述,例如通过多项式和/或是多项式的分段组合的样条(尤其是B样条)。
为图像中的各个分区设定的对应的滤波参数可以被任意设计。在本发明的一个变型方案中,滤波参数仅仅设定:是否在相应的分区中进行滤波。同样也可以经由滤波参数指定,在预定的图像区域中使用何种类型的滤波器。尤其是可以为不同的分区设定特殊的滤波器、例如上述维纳滤波器或解块滤波器,或者其它特殊滤波器类型或者专门的滤波特性。
在另一实施方式中,将根据本发明基于函数的参数对分区的分割与分层式块分割相组合。也就是说,被划分成至少两个分区的相应的预定图像区域通过分层地将对应的图像分割成越来越小的图像区域来产生。分层式图像划分在此意味着,基于规定将图像区域分割成预定数目的较小的图像区域,这些较小的图像区域类似地基于相同的规定又能够被分割成进一步更小的图像区域并且这些进一步更小的图像区域又被分割成对应的更小的图像区域等。这样的分层式块分割的示例在开头所提及的出版物[1]中找到,其中图像块被逐步地划分成四个相同大小的较小图像块。
在本发明方法的另一实施方式中,用于相应的分区的所述一个或多个滤波参数和/或描述在相应的预定图像区域内像素的走向的函数的所述一个或多个参数包含在经编码的图像序列内。可替换地或附加地,也存在以下可能性:可以从一个或多个预先给定的编码参数中导出滤波参数或对应的函数的参数。例如,可以从描述编码的对应的配置文件中得出函数的类型(线性、多项式的、样条等)。
在借助于运动估计进行预测的本发明方法的另一优选实施方式中,在运动估计的范畴中被定义和经由相应的运动向量表示移动的图像区域的分区至少部分地被用作用于滤波的分区。尤其是在此可以使用在出版物[2]中所描述的运动估计,其中移动的分区通过基于直线的对应参数划分块来加以定义。
除了上面描述的编码方法之外,本发明还涉及用于对数字化图像序列进行解码的方法,所述数字化图像序列借助于根据本发明的方法被编码,使得对于相应的图像获得与其图像内容有关的经编码的信号。在编码的范畴中,执行对未编码的信号的重构并且从中导出重构的图像,所述重构的图像优选地在对该序列的后续图像进行解码时被使用。重构的图像经受滤波,所述滤波对应于在编码时所使用的滤波,其中在滤波时将相应的重构的图像划分成分区并且对于每个分区设定一个或多个滤波参数。与在编码时完全一样地,至少一部分分区分别通过函数的一个或多个参数来加以描述,所述函数描述在预定图像区域内像素的走向,其中像素的走向将预定图像区域划分成至少两个分区。根据本发明的解码方法优选地被设计为使得可以对基于编码方法的一个或多个优选变型方案被编码的数字化图像序列进行解码。也就是说,解码方法也包括对利用根据从属权利要求的编码实施方式被编码的数字化图像序列的解码。
本发明还涉及用于对数字化图像序列进行编码和解码的方法,其中该序列的图像利用上述的编码方法被编码并且该序列的经编码的图像利用上述解码方法被解码。
本发明还涉及用于对由大量像素组成的数字化图像的序列进行编码的设备,具有用于对信号进行编码的编码装置,所述信号对于相应的图像与其图像内容有关,其中编码装置包括:
-重构装置,利用所述重构装置在编码的范畴中执行对未编码的信号的重构并且从中导出重构的图像,所述重构的图像尤其是在对该序列的随后图像编码时被使用;
-滤波装置,利用所述滤波装置,重构的图像经受滤波,其中将相应的重构的图像划分成分区并且对于每个分区设定一个或多个滤波参数,其中至少一些分区分别通过函数的一个或多个参数来加以描述,所述函数描述在预定图像区域内像素的走向,其中像素的走向将预定图像区域划分成至少两个分区。
本发明还涉及用于对利用根据本发明的编码方法被编码的数字化图像序列进行解码的对应解码设备。在此,该设备在运行中利用解码装置处理经编码的信号,所述经编码的信号对于相应的图像与其图像内容有关,其中解码装置包括:
-重构装置,利用所述重构装置在解码的范畴中执行对未编码的信号的重构并且从中导出重构的图像,所述重构的图像尤其是在对该序列的随后图像的解码时被使用;
-滤波装置,利用所述滤波装置,重构的图像经受滤波,所述滤波对应于在编码时所使用的滤波,其中在滤波时将相应的重构的图像划分成分区并且对于每个分区设定一个或多个滤波参数,其中至少一些分区分别通过函数的一个或多个参数来加以描述,所述函数描述在预定图像区域内像素的走向,其中像素的走向将预定图像区域划分成至少两个分区。
本发明还涉及用于对数字化图像序列进行编码和解码的编解码器,包括根据本发明的编码设备和根据本发明的解码设备。
附图说明
下面根据附图详细地描述本发明的实施例。
图1示出基于本发明方法的实施方式的编码和解码的示意图;
图2示出图像区域的再现,所述图像区域基于根据现有技术的自适应环路滤波被滤波;
图3示出图示,该图示示出在本发明滤波的范畴中所使用的图像区域分区的不同变型方案;
图4示出基于本发明滤波的实施方式被分区的图像区域;和
图5示出用于执行本发明方法的编码设备和解码设备的示意图。
具体实施方式
本发明方法的下面描述的实施方式基于在图1中所示的混合视频编码架构,其中所示的组件本身从现有技术中是已知的。根据本发明的方法相对于现有技术的区别在于基于在图1中所示的环路滤波器LF执行滤波,如下面还要进一步更详细地描述的。
图1的架构示出用于视频图像I的流的编码COD,从所述视频图像I中借助于微分器DI求得预测误差信号S,所述预测误差信号经受本身已知的变换(尤其是DCT变换;DCT=离散余弦变换)和接着经受同样已知的量化Q,由此获得经压缩的预测误差信号CS。该信号经受无损的熵编码EC。由此获得的信号S’接着利用对应的解码DEC被解码。
为了求得要编码的预测误差信号S,考虑在过去的时刻的对应的视频图像。为了获得这些视频图像,已经编码的误差信号CS经受逆量化IQ和逆变换IT。然后将由此获得的重构的预测误差RS经由加法器AD与经运动补偿的信号相组合。由此得出的重构的图像RI经受滤波LF并且被存放在存储器FB中。在运动补偿的范畴中,用原始图像I执行本身已知的运动估计ME,由此获得描述在当前图像和时间上在前的图像之间的图像块移动的运动向量MV。借助于运动向量,在运动补偿MC的范畴中从时间上在前的图像预测当前图像,该当前图像然后被输送给微分器DI,所述微分器输出对应的预测误差S。另外,将经运动补偿的图像经由加法器AD与对应重构的预测误差RS相组合并且存放在存储器FB中,由此形成预测环。
如上面已经提及的,重构的图像RI在存储在存储器FB中之前经受滤波LF。该滤波在预测环内进行并且因此也称为环路滤波。在此使用维纳滤波器,其本身从现有技术已知。利用该滤波器,在当前图像I和重构的图像RI之间的均方误差被最小化。作为滤波的结果获得滤波系数FC,这些滤波系数作为侧面信息被传输给用于解码的解码器。在本发明滤波的范畴中,对于不同的图像区域单独地进行滤波,也即滤波的对应的参数可以对于不同的图像区域被不同地设定。这些滤波参数FP作为侧面信息同样被传输给用于解码的解码器。此外,经由运动估计所求得的运动向量MV在解码器处被求得。
在解码DEC的范畴中,经编码的信号S’首先经受熵解码,由此获得经编码的预测误差CS。该预测误差经受逆量化IQ和逆变换IT。由此得出的重构的误差信号RS经由加法器AD’与来自存储器FB的对应的重构的图像相组合,所述重构的图像经受了滤波LF和运动补偿MC。由此,获得图像I’的经解码的序列,所述序列在滤波LF之后被抽取出来。在存储器FB中的图像的重构范畴中,考虑所传送的运动向量MV以及滤波参数FP和滤波系数FC。基于滤波参数和滤波系数进行与在编码时类似的滤波以及借助于所传送的运动向量MV进行类似的运动补偿。
在探讨根据本发明的环路滤波的实施方式之前,首先描述本身已知的自适应环路滤波器,其必要时可以与根据本发明的滤波相组合。该自适应环路滤波器的描述在出版物[1]中找到。根据该滤波器,基于分层式块分区将以对应的图像块形式的编码单元划分成较小的正方形图像区域。这在图2中予以再现。所示的图像块B首先被分割成四个较小的图像块,并且接着各个图像块必要时又被分割成四个更小的图像块并且这些更小的图像块必要时又被分割成更小的图像块等。通过这种方式分层地分割成较小的图像块,其中在每个分层层面中决定:是否应该划分成较小的块或者块是否应该作为整体保持。因此根据该分割由恰好被处理的块产生四个较小的子块,所述子块在水平和竖直方向上是原始块的一半大小。于是对于该四叉树的每个节点(也即不被针对着进行进一步分割的子块)存放二进制信息:对于该子块是否应该进行滤波。根据图1对于用1标出的所有块设置滤波,而用零标出的其它块不被滤波。
根据本发明的滤波也基于将对应的图像块分割成较小的图像区域,但是不基于或仅可选地基于分层地越来越小的块来进行分区。代替之,使用参数式分区,其对于本发明的不同变型方案在图3中示出。
图3示出图表DI,所述图表说明针对图像块B的根据本发明分区的变型方案(a),(b)和(c)。在此对发明重要的是,为了分区考虑函数的一个或多个参数,所述函数描述在对应要分区的图像块B内像素的走向。在此在变型方案(a)中,示出基于直线的分区,所述直线倾斜地穿过对应的图像块B走向并且将该图像块划分成两个分区PA1和PA2。该直线在此尤其是通过其斜率和偏移来描述。对于每个分区,与根据图2的方法类似地设定是否应该进行滤波。直线的位置在此可以是任意的。尤其是可能的是,直线倾斜地穿过图像块走向,这也在变型方案(a)中示出。对应的设定直线的参数并且从而设定到分区的划分的准则可以被任意定义。优选地,直线的参数利用适当的启发学或递归方法被设定为使得通过分区得出的平方误差被最小化。
代替基于直线函数的分区也可以使用用于描述分区的其它函数。在图3中在此在变型方案(b)中再现基于适当的多项式的分区。另外,可以基于样条形式的多个多项式的逐段组合来进行分区,这在变型方案(c)中示出。必要时也可以使用用于分割的其它任意函数。
图4示出根据本发明分区的变型方案,其与根据图2的分层式块分割组合。在此,首先以适当的方式将图像块B分割成多个子块。接着对于四叉树中的在分层式分割的范畴中不被进一步减小的至少一些子块,基于根据本发明的分区经由直线形式的像素走向的参数描述来进行分割。在图4中根据本发明的分区被应用于左上方的块以及在右下方块内的两个对角线相对的块。通过数字1再次表明在对应的图像区域中滤波的执行,而数字0用信号通知:在该图像区域中不进行滤波。
在图4中所表明的滤波必要时也可以纯粹通过四叉树分区来实现,其方式是,一直分割成较小的块,直至由此将对应的直线建模成像素走向。但是为此比在借助于直线函数分割的情况下需要明显更大数量的分区。因此,本发明滤波的使用导致比基于四叉树的纯滤波显著更小的压缩比特流数据速率。
在根据本发明的方法的在前面所阐述的实施方式中,在滤波的范畴中对于对应的分区设定是否应该在相应的分区中进行滤波。必要时也存在以下可能性:更微分地设定滤波参数。例如可以对于不同的分区设定不同的滤波器或不同的滤波器类型,例如可分离的滤波器、不可分离的滤波器、钻石(Diamant)滤波器等。此外在其它变型方案中存在以下可能性:滤波不是在预测环内的环路滤波器范畴中、而是通过预测环之外的对应的滤波器进行。同样,在图1中的滤波器可以布置在预测环内的另外的位置处,例如滤波可以在运动补偿MC之后进行。
对应的、用于描述对块进行分区的函数的参数可以以不同的方式被用信号通知。例如作为参数可以说明分区类型(线性的、多项式的、样条等)以及所使用的分区类型的对应参数或系数,诸如斜率、函数的预先已知的点等。这些参数在此可以明确地在经压缩的比特流中作为滤波参数FP被用信号通知,如这也在图1中所再现的。同样存在以下可能性:从其它编码参数中导出所述参数。例如在运动估计时可以使用在出版物[2]中所描述的方法,其中与在根据本发明的方法中完全一样地经由直线的参数进行图像块的分区,其中这样形成的分区被用于运动估计。运动估计的对应的参数也可以至少部分地被用于滤波,使得经由运动估计的编码参数也设定对应的滤波参数。对应的滤波参数必要时也可以通过用于编码的配置文件的规范来得出。例如,对于预定的配置文件可以设定仅允许线性分区。
在前面描述的根据本发明的方法具有一系列优点。尤其是所使用的滤波器可以更精确地被调整和控制,这尤其是对于在图像中具有多个对象的复杂场景是有利的。另外,相比于经由分层式块分割来表示滤波器可以节省数据速率,如在上面已经提及的。此外,还存在以下可能性:将根据本发明的滤波以适当的方式与分层式块分割相组合,这对于滤波器导致非常灵活的分区方案。
图5以示意图示出由根据本发明的编码设备和根据本发明的解码设备组成的系统的具体构型。系统的各个组件在此可以以硬件或软件或硬件和软件的组合的形式来实现。编码设备包括编码装置CM,其接收由数字化图像I组成的要编码的流。在此在编码装置内根据图1对预测误差进行编码,也即尤其是设置用于变换、量化、逆变换、逆量化和熵编码的对应单元。特别地,编码装置CM在此包含重构装置形式的第一装置M1,利用该第一装置,在编码的范畴中执行对未编码的预测误差RS的重构并且基于此导出重构的图像RI。此外,设置滤波装置形式的第二装置M2,利用该第二装置,重构的图像RI经受根据本发明的滤波,在根据本发明的滤波中根据本发明将图像分区成子区域。
在编码的范畴中所获得的、按照经编码的预测误差形式的经编码的信号S'被传输给具有解码装置DM的对应的解码单元,所述解码单元类似于图1尤其是包含用于熵解码、逆量化、逆变换和运动估计的对应组件。特别地,在此设置重构装置形式的第三装置M3,利用该第三装置在解码的范畴中执行未编码的信号RS的重构并且从中导出重构的图像RI。另外,设置滤波装置M4形式的第四装置M4,利用该第四装置,重构的图像经受滤波,所述滤波对应于在编码时所使用的滤波并且将图像块分割成适当的分区。紧接在解码之后,输出由大量经解码的图像I'组成的经对应解码的图像流。
文献目录
[1] T.Chujoh, N.Wada和G.Yasuda,"Quadtree-based Adaptive Loop Filter",ITU-T SG 16, document C181, Geneva,2009年1月;
[2] P.Chen,W.Chien,R.Panchal,M.Karczewicz,"Geometry motion partition"JCT-VC of ISO/IEC SG29 WG11 (MPEG) and ITU-T SG16 Q.6(VCEG),document JCTVC-B049,Geneva,Switzerland,2010年7月。

Claims (20)

1.用于对由大量像素组成的数字化图像(I)的序列进行编码的方法,其中对于相应图像(I),对与其图像内容有关的信号(S)进行编码,其中在编码的范畴中执行未编码的信号的重构并且从中导出重构的图像(RI),其中所述重构的图像(RI)经受滤波(LF),在所述滤波时将相应的重构的图像(RI)划分成分区(PA1,PA2),并且对于每个分区(PA1,PA2)设定一个或多个滤波参数(FP),其特征在于,至少一些分区(PI1,PI2)分别通过函数(F1,F2,F3)的一个或多个参数来加以描述,所述函数描述在预定图像区域(B)内像素的走向,其中像素的走向将预定图像区域(B)划分成至少两个分区(PA1,PA2)。
2.根据权利要求1所述的方法,其特征在于,对在当前要编码的图像(I)和一个或多个重构的和预测的图像(RI)之间的预测误差作为信号(S)进行编码,其中借助于预测环从一个或多个过去的重构的图像(RI)中求得预测误差,所述一个或多个过去的重构的图像在使用经由运动估计(ME)求得的运动向量(MV)的情况下经受运动补偿(NC),其中在预测环内所述一个或多个重构的图像(RI)在运动补偿之后被用于重构一个或多个随后的图像(RI)。
3.根据权利要求2所述的方法,其特征在于,用于求得预测误差的重构的图像(RI)在预测环内除了运动补偿(MC)之外还经受滤波(LF)。
4.根据权利要求2或3所述的方法,其特征在于,用于求得预测误差(S)的重构的图像(RI)未经滤波,并且在预测环之外进行对重构的图像(RI)的滤波。
5.根据前述权利要求之一所述的方法,其特征在于,经编码的信号(CS)通过变换(T)和量化(Q)来产生,并且为了重构未编码的信号(RS)而将对应的逆量化(IQ)和逆变换(IT)应用于经编码的信号(CS),其中经编码的信号(CS)在量化(Q)和变换(T)之后优选地经受另外的熵编码。
6.根据前述权利要求之一所述的方法,其特征在于,基于维纳滤波器和/或解块滤波器对重构的图像(RI)进行滤波(LF)。
7.根据前述权利要求之一所述的方法,其特征在于,相应的预定图像区域(B)是图像块形式的矩形图像区域和尤其是正方形图像区域,所述预定图像区域通过像素走向被划分成至少两个分区(PA1,PA2)。
8.根据前述权利要求之一所述的方法,其特征在于,描述在预定图像区域(B)内像素的走向的函数(F1,F2,F3)是直线。
9.根据权利要求7和8所述的方法,其特征在于,该直线在矩形图像区域(B)中倾斜地走向。
10.根据前述权利要求之一所述的方法,其特征在于,描述在预定图像区域(B)内像素的走向的函数(F1,F2,F3)是多项式和/或样条。
11.根据前述权利要求之一所述的方法,其特征在于,一个或多个滤波参数(FP)说明:是否在相应的分区(PA1,PA2)中进行滤波和/或在相应的分区(PA1,PA2)中使用何种类型的滤波器。
12.根据前述权利要求之一所述的方法,其特征在于,被划分成至少两个分区(PA1,PA2)的相应的预定图像区域(B)通过将对应的图像(I)分层式地分割成越来越小的图像区域(B)来产生。
13.根据前述权利要求之一所述的方法,其特征在于,用于相应的分区(PA1,PA2)的所述一个或多个滤波参数(FP)和/或描述在相应的预定图像区域(B)内像素走向的函数(F1,F2,F3)的所述一个或多个参数包含在经编码的图像序列内和/或能够从一个或多个预先给定的编码参数中导出。
14.根据前述权利要求之一所述的、当从属于权利要求2时的方法,其特征在于,在运动估计(ME)的范畴中定义的并且经由相应的运动向量(MV)表示移动的图像区域的分区(PA1,PA2)至少部分地被用作用于滤波(LF)的分区(PA1,PA2)。
15.用于对数字化图像序列进行解码的方法,所述数字化图像序列借助于根据前述权利要求之一的方法被编码,使得对于相应的图像(I)获得与其图像内容有关的经编码的信号(S),其中在解码的范畴中执行对未编码的信号(RS)的重构并且从中导出重构的图像,其中所述重构的图像(RI)经受滤波(LF),所述滤波对应于在编码时所使用的滤波,其中在该滤波时将相应的重构的图像(RI)划分成分区(PA1,PA2)并且对于每个分区(PA1,PA2)设定一个或多个滤波参数(FP),其特征在于,至少一些分区(PI1,PI2)分别通过函数(F1,F2,F3)的一个或多个参数来加以描述,所述函数描述在预定图像区域(B)内像素的走向,其中像素的走向将预定图像区域划分成至少两个分区(PA1,PA2)。
16.用于对数字化图像(I)的序列进行编码和解码的方法,其中
-该序列的图像(I)利用根据权利要求1至14之一所述的方法被编码;
-经编码的图像利用根据权利要求15所述的方法被解码。
17.用于对由大量像素组成的数字化图像(I)的序列进行编码的设备,具有用于对信号(S)进行编码的编码装置(CM),所述信号对于相应的图像与其图像内容有关,其中编码装置包括:
-重构装置(M1),利用所述重构装置在编码的范畴中执行对未编码的信号(RS)的重构并且从中导出重构的图像(RI);
-滤波装置(M2),利用所述滤波装置,重构的图像(RI)经受滤波(LF),其中将相应的重构的图像(RI)划分成分区(PA1,PA2)并且对于每个分区(PA1,PA2)设定一个或多个滤波参数(FP);
其特征在于,至少一些分区(PI1,PI2)分别通过函数(F1,F2,F3)的一个或多个参数来加以描述,所述函数描述在预定图像区域(B)内像素的走向,其中像素的走向将预定图像区域划分成至少两个分区(PA1,PA2)。
18.根据权利要求17所述的设备,其特征在于,所述设备包括用于执行根据权利要求2至14之一所述的方法的一个或多个其它装置。
19.用于对利用根据权利要求1至14之一所述的方法被编码的数字化图像序列进行解码的设备,其中该设备在运行中利用解码装置(DM)处理经编码的信号(S'),所述经编码的信号对于相应的图像与其图像内容有关,其中解码装置(DM)包括:
-重构装置(M3),利用所述重构装置在解码的范畴中执行对未编码的信号(RS)的重构并且从中导出重构的图像;
-滤波装置(M4),利用所述滤波装置,重构的图像(RI)经受滤波(LF),所述滤波对应于在编码时所使用的滤波,其中在滤波时将相应的重构的图像(RI)划分成分区(PA1,PA2)并且对于每个分区(PA1,PA2)设定一个或多个滤波参数(FP),其特征在于,至少一些分区(PI1,PI2)分别通过函数(F1,F2,F3)的一个或多个参数来加以描述,所述函数描述在预定图像区域(B)内像素的走向,其中像素的走向将预定图像区域划分成至少两个分区(PA1,PA2)。
20.用于对数字化图像(I)的序列进行编码和解码的编解码器,包括根据权利要求17或18所述的编码设备和根据权利要求19所述的解码设备。
CN201280021984.0A 2011-05-06 2012-04-23 用于对经编码的图像分区进行滤波的方法和设备 Active CN103503451B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
EP11165099.0 2011-05-06
EP11165099A EP2521357A1 (de) 2011-05-06 2011-05-06 Verfahren und Vorrichtung zur Filterung von kodierten Bildpartitionen
PCT/EP2012/057344 WO2012152565A1 (de) 2011-05-06 2012-04-23 Verfahren und vorrichtung zur filterung von kodierten bildpartitionen

Publications (2)

Publication Number Publication Date
CN103503451A true CN103503451A (zh) 2014-01-08
CN103503451B CN103503451B (zh) 2018-02-23

Family

ID=44146502

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201280021984.0A Active CN103503451B (zh) 2011-05-06 2012-04-23 用于对经编码的图像分区进行滤波的方法和设备

Country Status (7)

Country Link
US (2) US20140079132A1 (zh)
EP (1) EP2521357A1 (zh)
KR (1) KR20140043743A (zh)
CN (1) CN103503451B (zh)
BR (1) BR112013028615A2 (zh)
CA (1) CA2835009C (zh)
WO (1) WO2012152565A1 (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020200052A1 (zh) * 2019-03-30 2020-10-08 华为技术有限公司 视频编码方法、视频解码方法及相关设备
CN113837966A (zh) * 2021-09-26 2021-12-24 北京的卢深视科技有限公司 人脸深度图的滤波方法、装置、电子设备及存储介质
WO2023123512A1 (zh) * 2021-12-31 2023-07-06 Oppo广东移动通信有限公司 滤波系数生成及滤波方法、视频编解码方法、装置和系统

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2008049446A1 (en) 2006-10-25 2008-05-02 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Quality scalable coding
KR20230098693A (ko) 2011-11-11 2023-07-04 지이 비디오 컴프레션, 엘엘씨 분할 코딩을 이용한 효과적인 예측
IN2014KN01047A (zh) 2011-11-11 2015-10-09 Fraunhofer Ges Forschung
WO2013068564A1 (en) 2011-11-11 2013-05-16 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Effective wedgelet partition coding using spatial prediction
EP2777286B1 (en) 2011-11-11 2017-01-04 GE Video Compression, LLC Effective wedgelet partition coding
US10742972B1 (en) * 2019-03-08 2020-08-11 Tencent America LLC Merge list construction in triangular prediction

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2161936A1 (en) * 2008-09-04 2010-03-10 Panasonic Corporation Locally adaptive filters for video coding controlled by local correlation data
WO2011005317A2 (en) * 2009-07-07 2011-01-13 Thomson Licensing Methods and apparatus for collaborative partition coding for region based filters

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8879632B2 (en) * 2010-02-18 2014-11-04 Qualcomm Incorporated Fixed point implementation for geometric motion partitioning

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2161936A1 (en) * 2008-09-04 2010-03-10 Panasonic Corporation Locally adaptive filters for video coding controlled by local correlation data
WO2011005317A2 (en) * 2009-07-07 2011-01-13 Thomson Licensing Methods and apparatus for collaborative partition coding for region based filters

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
CHEN P ET AL.: "Geometry motion partition(JCTVC-B049)", 《JOINT COLLABORATIVE TEAM ON VIDEO CODING OF ISO/IEC JTC1/SC29/WG11 AND ITU-T SG.16》 *
DIVORRA ESCODA O ET AL.: "Geometry-Adaptive Block Partioning for video coding", 《2007 IEEE INTERNATIONAL CONFERENCE ON ACOUSTICS,SPEECH AND SIGNAL PROCESSING》 *
GBP OSCAR DIVORRA ET AL.: "Geometry-adaptive Block Partitioning", 《ITU-T SG16-VIDEO CODING EXPERTS GROUP-ISO/IEC MPEG&ITU-T VCEG VCEG-AF10》 *

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020200052A1 (zh) * 2019-03-30 2020-10-08 华为技术有限公司 视频编码方法、视频解码方法及相关设备
CN113837966A (zh) * 2021-09-26 2021-12-24 北京的卢深视科技有限公司 人脸深度图的滤波方法、装置、电子设备及存储介质
WO2023123512A1 (zh) * 2021-12-31 2023-07-06 Oppo广东移动通信有限公司 滤波系数生成及滤波方法、视频编解码方法、装置和系统

Also Published As

Publication number Publication date
US20140079132A1 (en) 2014-03-20
CA2835009C (en) 2021-10-19
WO2012152565A1 (de) 2012-11-15
CN103503451B (zh) 2018-02-23
EP2521357A1 (de) 2012-11-07
US20180220131A1 (en) 2018-08-02
BR112013028615A2 (pt) 2017-01-24
CA2835009A1 (en) 2012-11-15
KR20140043743A (ko) 2014-04-10

Similar Documents

Publication Publication Date Title
CN103503451A (zh) 用于对经编码的图像分区进行滤波的方法和设备
Fu et al. Sample adaptive offset in the HEVC standard
EP3754990B1 (en) Method for inducing a merge candidate block
CN103891293B (zh) 用于色度分量的自适应环路滤波的方法及设备
CA2840476C (en) Encoding and decoding video applying independent offset for luma and chroma samples
CN107888919B (zh) 用于导出重建图像的装置
EP2689582B1 (en) Bi-predictive merge mode based on uni-predictive and bi-predictive neighbors in video coding
CN110099191B (zh) 清除解块人为噪声的方法
CA3082413A1 (en) Intra-prediction method, and video encoder and decoder using same
CN111201791B (zh) 用于视频编码的帧间预测装置和方法的插值滤波器
CN103518375A (zh) 用于贯穿条带或图块边界环路滤波的方法及其装置
CN103069800A (zh) 用于编码视频的方法和设备、以及解码方法和设备
TW201711465A (zh) 視頻資料的解碼設備
CN116389737B (zh) 视频编解码中变换系数的编解码
KR101364085B1 (ko) 비디오 압축 시스템의 sao 처리 장치 및 그 방법
EP3685581A1 (en) Devices and methods for image and video coding
CN107343199B (zh) 用于hevc中样点的快速自适应补偿方法
Sedani et al. A novel approach of video compression over 4g system using H. 265 standard
CN118175311A (zh) 视频数据处理方法、装置、存储介质及设备
CN116980609A (zh) 视频数据处理方法、装置、存储介质及设备
CN114830643A (zh) 图像编码方法和图像解码方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant