CN102474608B - 解码代表图像序列的编码数据流的方法和编码图像序列的方法 - Google Patents

解码代表图像序列的编码数据流的方法和编码图像序列的方法 Download PDF

Info

Publication number
CN102474608B
CN102474608B CN201080033641.7A CN201080033641A CN102474608B CN 102474608 B CN102474608 B CN 102474608B CN 201080033641 A CN201080033641 A CN 201080033641A CN 102474608 B CN102474608 B CN 102474608B
Authority
CN
China
Prior art keywords
mean value
current block
coefficient
piece
block
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201080033641.7A
Other languages
English (en)
Other versions
CN102474608A (zh
Inventor
D.索罗
E.弗朗索瓦
J.维隆
F.雷卡普
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Thomson Licensing SAS
International Digital Madison Patent Holding SAS
Original Assignee
Thomson Licensing SAS
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Thomson Licensing SAS filed Critical Thomson Licensing SAS
Publication of CN102474608A publication Critical patent/CN102474608A/zh
Application granted granted Critical
Publication of CN102474608B publication Critical patent/CN102474608B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/105Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136Incoming video signal characteristics or properties
    • H04N19/137Motion inside a coding unit, e.g. average field, frame or block difference
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46Embedding additional information in the video signal during the compression process
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本发明涉及解码代表图像序列的编码数据流(F)的方法,对于当前块,它包含如下步骤:确定(1)预测块;计算(2)所述预测块的平均值(avrpred);从所述流中重构(4)与所述当前块有关的DC系数(IresDC)和AC系数;根据所述预测块的所述平均值(avrpred)和所述DC系数(IresDC)计算(6)所述当前块的平均值(avrcr_dec);计算(8)作为所述当前块的平均值(avrcr_dec)与所述预测块的平均值(avrpred)的比值的加权预测参数(wpcr_dec);-将包含作为DC系数的零值和所述重构AC系数的系数块变换(10)成残差块;通过合并所述残差块和由所述加权预测参数加权的所述预测块重构(14)当前块。本发明还涉及编码方法。

Description

解码代表图像序列的编码数据流的方法和编码图像序列的方法
技术领域
本发明涉及图像编码的一般领域。更具体地说,本发明涉及解码代表图像序列的编码数据流的方法以及编码图像序列的方法。
背景技术
将图像序列编码成编码数据流的大多数方法以及解码这种流的方法使用时间预测或图像间预测和等效地使用空间预测或图像内预测。图像内预测或图像间预测使得能够改进图像序列的压缩。它包含针对当前块生成预测块,并编码当前块与预测块之间的也称作残差块的差值。预测块与当前块的相关性越高,编码当前块所需的位数越少,并因此压缩越有效。但是,当序列的图像之间(相应地在当前图像中)存在光度(luminosity)变化时,图像间(相应地图像内)预测丧失了其效率。这样的光度变化是由例如照度(illumination)的改变、渐变(fade)效果、闪烁等引起的。
考虑到光度变化的编码/解码图像序列的方法是已知的。因此,在ISO/IEC14496-10文件中描述的MPEG-4 AVC/H.264标准的框架内,已知在光度变化的情况下,使用加权预测方法以改进压缩。为此目的,MPEG-4 AVC/H.264标准使得能够按图像切片在流中显性发送加权预测参数,一个图像切片包含一个或多个像素块。因此,以相同方式将借助加权预测参数或一组几个加权预测参数的照度校正应用于与该加权预测参数或该组加权预测参数相关联的图像切片的所有块。例如,如图1所示,通过使用诸如运动矢量MV之类的运动数据项计算当前块Bc的平均值和与该当前块相关联的参考块Br的平均值之间的比值为当前块Bc确定加权预测参数。如果运动矢量MV具有低于像素的精度水平,则内插块Br。一个块的平均值是例如与该块的像素相关联的亮度(luminance)值的平均值。参考块是例如在运动估计步骤期间确定的。当根据与当前块相关联的值确定当前块的亮度变化时,这样的预测方法是精确的。但是,就位速率而言,这样的方法是昂贵的,因为这意味着按图像切片并因此潜在地按块在流中发送一组加权预测参数。
校正局部光度变化以便在编码器侧和解码器侧以相同方式局部确定加权预测参数在本领域也是已知的。在这种情况下,不在流中显性发送加权预测参数。例如,参考图1,通过计算当前块Bc的邻域(neighbourhood)Nc的平均值和与当前块Bc相关联的参考块Br的邻域Nr的平均值之间的比值为当前块Bc确定当前块Bc的加权预测参数。邻域的平均值是例如与所考虑的邻域的像素相关联的亮度值的平均值。Nc位于块Bc的因果邻域上。因此,Nc在Bc之前编码(相应地重构)。就位速率而言,这样的方法是廉价的,因为不在流中显性发送加权预测参数,而是在编码器侧和解码器侧以相同方式确定它们。但是,这样的预测方法不如前面的方法精确,因为与当前块Bc相关联的(多个)加权预测参数未考虑该块的内容。
发明内容
本发明的目的是克服现有技术的至少一个缺点。为了这个目的,本发明涉及解码代表划分成块的图像序列的编码数据流的方法,对于当前块,该方法包含如下步骤:
-根据与当前块有关的编码数据流的第一部分的解码重构残差块;
-确定预测块;以及
-通过合并残差块和由加权预测参数加权的预测块来重构当前块。
有利的是,加权预测参数按照如下步骤确定:
-计算预测块的平均值;
-重构当前块的DC系数;
-根据预测块的平均值和DC系数计算当前块的平均值;以及
-计算作为当前块的平均值与预测块的平均值的比值的加权预测参数。
按照第一实施例变型,在计算当前块的平均值的步骤期间,通过从编码数据流中解码的初始加权预测参数加权预测块的平均值。
按照第二实施例变型,在计算当前块的平均值的步骤期间,通过等于当前块的邻域的平均值和与所述当前块相关联的参考块的相应邻域的平均值之间的比值的初始加权预测参数来加权预测块的平均值。
本发明还涉及编码划分成块的图像序列的方法,对于当前块,该方法包含如下步骤:
-确定当前块的预测块;
-通过从当前块中提取由加权预测参数加权的预测块来确定残差块;以及
-编码残差块。
有利的是,加权预测参数按照如下步骤确定:
-计算预测块的平均值和当前块的平均值;
-计算当前块的平均值与预测块的平均值之间的预测误差;
-根据预测块的平均值和相继量化和去量化的预测误差计算当前块的校正平均值;以及
-计算作为重构当前块的平均值与预测块的平均值之间的比值的加权预测参数。
按照一种实施例变型,在计算所述预测误差的步骤期间,通过初始加权预测参数加权所述预测块的平均值,所述初始加权预测参数在所述编码数据流中编码。
按照本发明的一个特定特征,按照如下步骤为当前块所属的图像的一部分确定初始加权预测参数:
-确定称作第一平均值的图像部分的平均值;
-确定称作第二平均值的预测块所属的相应图像部分的平均值;以及
-计算作为第一平均值与第二平均值的比值的加权预测参数。
按照本发明的一个特定特征,图像部分是整个图像或图像切片。
按照另一种实施例变型,在计算预测误差的步骤期间,通过等于当前块的邻域的平均值和与所述当前块相关联的参考块的相应邻域的平均值之间的比值的初始加权预测参数加权预测块的平均值。
附图说明
通过参考附图的非限制性的实施例和有利实现方式,将更好地理解和例示本发明,在附图中:
-图1示出当前块Bc和参考块Br以及它们各自的邻域Nc和Nr;
-图2示出按照本发明的解码方法;
-图3示出按照本发明的编码方法;
-图4示出按照本发明的编码设备;以及
-图5示出按照本发明的解码设备。
具体实施方式
本发明涉及解码代表图像序列的编码数据流F以便重构这个序列的方法,以及将图像序列编码成编码数据流F的形式的方法。图像序列是一系列的几个图像。每个图像包含每一个与至少一项图像数据相关联的像素或像点。一项图像数据是例如一项亮度数据项或一项色度数据。
表述“发光(brightness)变化”在英文术语中也称为“亮度变化”,“光度变化”或“照度变化”。
术语“运动数据”应该从最宽泛的意义上来理解。它包含运动矢量以及可能包含使参考图像能够从图像序列中识别的参考图像索引。它还可以包含指示必须应用于参考块以便导出预测块的内插类型的一项信息。
术语“残差数据(residual data)”表示提取其它数据之后获得的数据。该提取一般是源数据与预测数据的逐个像素相减。但是,该提取更一般,并且特别是包含加权相减。这个术语与“残余(residue)”术语同义。残差块是与残差数据相关联的像素块。
术语“变换残差数据”表示已经应用变换的残差数据。这样变换的一个示例是在J.Wiley & Sons在2003年9月出版的I.E.Richardson的标题“H.264and MPEG-4 video compression”的书的第3.4.2.2章中描述的DCT(离散余弦变换)。其它示例是在I.E.Richardson的书第3.4.2.3章中描述的小波变换和哈达玛(Hadamard)变换。这样的变换将图像数据(例如,残差亮度和/或色度数据)块“变换”成也称作“频率数据块”或“系数块”的“变换数据块”。系数块一般包含根据连续系数或DC系数的名称的低频系数和已知为AC系数的高频系数。
术语“预测数据”表示用于预测其它数据的数据。预测块是与预测数据相关联的像素块。预测块是从与预测(空间预测或图像内预测)的块所属的图像相同的图像的一个块或几个块中,或从与预测的块所属的图像不同的图像(时间预测或图像间预测)的一个块(单向预测)或几个块(双向预测)中获得的。
术语“重构数据”表示将残差数据与预测数据合并之后获得的数据。该合并一般是预测数据与残差数据的逐个像素的总和。但是,该合并更一般,并且特别是包含加权总和。重构块是与重构图像数据相关联的像素块。
图2示出解码代表图像序列的编码数据流F的方法。该方法是针对当前块Bc描述的,并且可以应用于几个图像块。
在步骤1期间,为当前块Bc确定预测块Bpred。例如,从解码与当前块Bc有关的编码数据流F的一部分获得的运动数据中确定预测块Bpred。按照一种变型,通过模板匹配型方法从重构运动数据中确定预测块Bpred。这样的方法在标题为“Decoder Side Motion Vector Derivation”并且在2007年10月20日在ITU-T的VCEG组的第33次会议期间在中国深圳发表的Steffen Kamp等人的文献VCEG-AG16中描述。
在步骤2期间,确定预测块Bpred的平均值avrpred。作为一个简单示例,平均值avrpred等于与预测块Bpred的像素相关联的亮度值的平均值。按照一种变型,平均值avrpred等于与预测块Bpred的像素相关联的亮度和色度值的平均值。按照另一种变型,平均值avrpred等于与预测块Bpred的像素相关联的色度值的平均值。
在步骤4期间,从编码数据流F中重构当前块Bc的记为的DC系数。为了这个目的,通过熵解码将与DC系数有关的编码数据F解码成对其应用逆量化(inverse quatization)以获得的量化DC系数。注意,在这个步骤期间,也可以重构以后用于重构Bc的与当前块(就残差误差而言)有关的AC系数。为了这个目的,通过熵解码将与AC系数有关的编码数据F解码成对其应用逆量化的量化AC系数。
在步骤6期间,按如下从预测块Bpred的平均值avrpred和DC系数中计算当前块Bc的平均值avrcr_dec
avr cr _ dec = avr pred + I resDC Qinv / scale
其中scale是将一个块的平均值和与所考虑的块相关联的DC系数的值相联系的比例系数。该比例系数取决于用于从图像域到DC系数所属的变换域的变换(例如,DCT 8×8、DCT 16×16、Hadamard等)。
按照一种变型,在步骤6期间,按如下根据由初始加权预测参数wpcr加权的预测块的平均值avrpred和DC系数计算当前块Bc的平均值avrcr_dec
avr cr _ dec = avr pred _ cr + I resDC Qinv / scale
其中avrpred_cr=wpcr*avrpred
初始加权预测参数wpcr来自例如在现有技术中已知的方法之一。例如,从编码数据流F中解码初始加权预测参数wpcr。按照一种变型,通过计算如图1所示当前块Bc的邻域Nc的平均值和与参考块Br相对应的邻域Nr的平均值之间的比值确定初始加权预测参数wpcr
在步骤8期间,通过计算在步骤6中计算的当前块的平均值avrcr_dec与在步骤2中计算的预测块的平均值avrpred之间的比值确定加权预测参数wpcr_dec,即,wpcr_dec=avrcr_dec/avrpred
在步骤10期间,为当前块Bc重构残差块Bres。为此,通过解码与当前块Bc有关的编码数据流F的一部分(如果在步骤4期间尚未解码它们)重构与当前块有关的AC系数。通过逆变换将包含取代DC系数的零值和重构AC系数的系数块变换成残差块Bres。
在步骤14期间,通过合并在步骤10中重构的残差块Bres和由加权预测参数wpcr_dec加权的预测块Bpred重构当前块Bc。例如,当前块Bc等于残差块Bres和由加权预测参数wpcr_dec加权的预测块Bpred的逐个像素和值:Bc(i,j)=Bres(i,j)+wpcr_dec*Bpred(i,j),其中(i,j)是像素坐标。
按照一种变型,当前块Bc等于按照如下类型的方程的残余块和预测块的过滤版本的和值:
Bc ( i , j ) = Σ ( k , l ) a ( k , l ) * Bres ( i + k , j + l ) + wp cr _ dec * Σ ( k , l ) b ( k , l ) * Bpred ( i + k , j + l )
其中a(·)和b(·)是线性过滤器的系数。(k,l)是例如从-1变化到1的整数。作为一个简单示例,a()可以采用如下值:
1/64      -10/64      1/64
-10/64    100/64      -10/64
1/64      -10/64      1/64
并且b()可以采用如下值:
1/16        2/16        1/16
2/16        4/16        2/16
1/16        2/16        1/16
图3示出了将图像序列编码成编码数据流F的形式的方法。该方法是针对当前块Bc描述的,并且可以应用于图像的几个块。
在步骤15期间,为当前块Bc确定预测块Bpred。例如,根据通过视频编码器/解码器领域的技术人员已知的块匹配型的运动估计方法获得的运动数据确定预测块Bpred。但是,本发明决不会受用于确定预测块Bpred的方法限制。
在步骤16期间,确定预测块Bpred的平均值avrpred和当前块Bc的平均值avrcr。作一个简单示例,平均值avrpred等于与预测块Bpred的像素相关联的亮度值的平均值。按照一种变型,平均值avrpred等于与预测块Bpred的像素相关联的亮度和色度值的平均值。按照另一种变型,平均值avrpred等于与预测块Bpred的像素相关联的色度值的平均值。相同的变型应用于当前块Bc的平均值avrcr的计算。
在步骤18期间,按如下在当前块Bc的平均值avrcr与预测块Bpred的平均值之间计算预测误差IresDC
IresDC=(avrcr-avrpred)×scale
这个预测误差IresDC与当前块Bc的平均值avrcr和预测块Bpred的平均值avrpred之间的差成正比。比例系数scale是将一个块的平均值和与所考虑的块相关联的DC系数的值相联系的系数。该比例系数取决于用于从图像域到DC系数所属的变换域的变换(例如,DCT 8×8、DCT 16×16、Hadamard等)。
按照一种变型,在步骤18期间,按如下根据由初始加权预测参数wpcr加权的预测块的平均值avrpred和当前块Bc的平均值avrcr计算预测误差IresDC
IresDC=(avrcr-avrpred_cr)×scale
其中avrpred_cr=wpcr*avrpred
初始加权预测参数wpcr来自例如在现有技术中已知的方法之一。例如,通过计算如图1所示当前块Bc的邻域Nc的平均值和与参考块Br相对应的邻域Nr的平均值之间的比值确定初始加权预测参数wpcr
按照另一种变型,按照如下步骤为当前块Bc所属的图像的一部分确定初始加权预测参数wpcr
-确定称作第一平均值的图像部分的平均值;
-确定称作第二平均值的预测块所属的相应图像部分的平均值;以及
-计算作为第一平均值与第二平均值的比值的加权预测参数。
图像部分是整个图像或图像切片。在这种情况下,按照本发明的编码方法包含将初始加权预测参数在编码数据流F中编码的附加步骤。
在步骤20期间,按如下根据预测块Bpred的平均值avrpred和相继量化和去量化(dequantize)的预测误差计算当前块Bc的校正平均值avrcr_dec
avr cr _ dec = ( avr pred × scale + I resDC Qinv ) / scale ,
其中其中Q是量化算符,以及Q-1是逆量化算符。按照一种变型,对于avrcr_dec的计算,在上面方程中用avrpred_cr取代avrpred
在步骤22期间,通过计算在步骤20中计算的当前块的平均值avrcr_dec与在步骤16中计算的预测块的平均值avrpred之间的比值确定加权预测参数wpcr_dec
在步骤26期间,通过从当前块Bc中提取经由加权预测参数wpcr_dec加权的预测块Bpred确定残差块Bres。例如,残差块Bres等于当前块Bc与通过加权预测参数wpcr_dec加权的预测块Bpred的逐个像素差值:Bres(i,j)=Bc(i,j)-wpcr_dec*Bpred(i,j),其中(i,j)是像素的坐标。
按照一种变型,残差块Bres等于按照如下类型的方程的当前块和预测块的过滤版本的差值:
Bres ( i , j ) = Σ ( k , l ) a ′ ( k , l ) * Bcur ( i + k , j + l ) - wp cr _ dec * Σ ( k , l ) b ′ ( k , l ) * Bpred ( i + k , j + l )
其中a′()和b′()是可能不同于前面定义的a()和b()系数的线性过滤器的系数。(k,l)是例如从-1变化到1的整数。作为一个简单示例,a′()可以采用如下值:
1/256      -18/256    1/256
-18/256    324/256    -18/256
1/256      -18/256    1/256
以及b′()可以采用如下值:
1/64        6/64         1/64
6/64        36/64        6/64
1/64        6/64         1/64
在步骤28期间,将在步骤26中确定的块Bres变换成包含由于通过wpcr-dec的校正而具有零或极低值的初始DC系数、和AC系数的系数块。然后用在步骤18中计算的预测误差IresDC取代初始DC系数。因此,IresDC是在流F中有效编码的DC系数。然后量化和通过熵编码来编码如此修改的系数块。
例如,使用熵编码VLC(可变长编码)型视频编码器(使用例如J.Wiley& Sons在2003年9月发表的书名叫做“H.264 and MPEG-4 video compression”的书的第3.5.2章中描述的预先计算VLC表)的本技术人员已知的熵编码方法。按照一种变型,可以使用像在I.E.Richardson的书的第6.5.4章中描述或再次在标题为“Information technology-Coding of audio-visual objects-Part 10:Advanced Video Coding”的ISO/IEC 14496-10文件的第9.3节中描述的那样的CABAC(基于上下文的自适应二进制算术编码)型方法。按照另一种变型,可以使用像在标题为“Information technology-Coding of audio-visual objects-Part 10:Advanced Video Coding”的ISO/IEC 14496-10文件的第9.2节中描述以及在I.E.Richardson的书的第6.4.13.2章中描述的那样的CAVLC(基于上下文的自适应可变长编码)型方法。
按照本发明的编码和解码方法具有以下优点,通过考虑当前块的内容,即,特别是不局限于其邻域的内容改进预测方法,以及动态地适应照度的局部变化而不必显性地编码与这些局部变化有关的参数。它们还具有在未在流中传送加权预测参数的情况下提高了编码效率的优点。
本发明还涉及参考图4所描述的编码设备12和参考图5所描述的解码设备13。在图4和5中,所示的模块是可以对应于或可以不对应于物理上可区分单元的功能单元。例如,这些模块或它们的一些可以一起分组在单个部件中,或构成同一软件的功能。相反,一些模块可以由分立物理实体组成。
参考图4,编码设备12在输入端上接收属于图像序列的图像。每个图像被划分成每一个与至少一项图像数据相关联的像素块。编码设备12特别实现利用时间预测的编码。在图12中只示出了编码设备12与通过时间预测的编码或INTER编码有关的模块。未示出的、并且视频编码器领域的技术人员已知的其它模块利用或不利用空间预测实现INTRA编码。编码设备12特别包含能够例如通过逐个像素相减从当前块Bc中提取预测块Bpred以生成残差图像数据块或残差块Bres的计算模块1200。它进一步包含能够将残差块Bres变换然后量化成量化数据的模块1202。变换T是例如离散余弦变换(或DCT)。编码设备12进一步包含能够将量化数据编码成编码数据流F的熵编码模块1204。它进一步包含进行模块1202的逆操作的模块1206。模块1206进行逆量化Q-1以及之后的逆变换T-1。模块1206与计算模块1208连接,计算模块1208能够例如通过逐个像素相加合并来自模块1206的数据块和预测块Bpred,以生成在存储器1210中存储的重构图像数据块。
编码设备12进一步包含能够估计当前块Bc与在存储器1210中存储的参考图像块Ir之间的至少一个运动矢量的运动估计模块1212,这个图像以前已经被编码然后重构。按照一种变型,可以在当前块Bc与原始参考图像Ic之间进行运动估计,在这种情况下存储器1210未与运动估计模块1212连接。按照本领域的技术人员熟知的方法,运动估计模块以这样的方式搜索一项运动数据,特别是运动矢量,以最小化在当前块Bc与借助该项运动数据识别的参考图像块Ir之间计算的误差。
确定的运动数据由运动估计模块1212发送给判定模块1214,判定模块1214能够在预定的一组编码模式中为块Bc选择一种编码模式。留下的编码模式是例如使位速率-失真型判据最小化的编码模式。但是,本发明不局限于这种选择方法,而是可以按照另一种判据,例如,先验型判据选择留下的模式。将判定模块1214选择的编码模式以及运动数据,例如,在时间预测模式或INTER模式的情况下该项或多项运动数据发送给预测模块1216。预测模块1216能够实现按照本发明的编码方法的步骤15到22。选择的编码模式以及如果需要的话,运动数据也被发送给熵编码模块1204以便在流F中编码。预测模块1216根据判定模块1214确定的编码模式,以及可能根据运动估计模块1212确定的运动数据(图像间预测)确定预测块Bpred。
参考图5,解码模块13在输入端上接收代表图像序列的编码数据流F。流F是例如编码设备12经由信道发送的。解码设备13包含能够生成解码数据,例如,编码模式和与图像的内容有关的解码数据的熵解码模块1300。
解码设备13还包含运动数据重构模块。按照第一实施例,该运动数据重构模块是解码代表所述运动数据的流F的一部分的熵解码模块1300。按照未在图13中示出的一种变型,该运动数据重构模块是运动估计模块。这种经由解码设备13重构运动数据的解决方案称为“模板匹配(template matching)”。
然后将与图像的内容有关的解码数据发送给能够进行逆量化以及之后的逆变换的模块1302。模块1302与生成编码流F的编码设备12的模块1206相同。模块1302与计算模块1304连接,计算模块1304能够例如通过逐个像素相加合并来自模块1302的块和预测块Bpred,以生成被存储在存储器1306中的重构当前块Bc。解码设备13还包含预测模块1308。预测模块1308根据熵解码模块1300为当前块解码的编码模式,以及可能根据运动数据重构模块确定的运动数据确定预测块Bpred。预测模块1308能够实现按照本发明的解码方法的步骤1到8。
当然,本发明不局限于上面提及的实施例示例。
尤其,本领域的技术人员可以将任何变型应用于所述实施例,并组合它们以便从它们的各种优点中获益。本发明决不会受变换类型限制。特别是,可以利用DCT变换、Hadamard变换或小波变换使用本发明。

Claims (11)

1.一种解码代表划分成块的图像序列的编码数据流(F)的方法,其特征在于,该方法包含如下步骤:
-确定当前块的(1)预测块;
-计算(2)所述预测块的平均值;
-从所述流中重构(4)与所述当前块有关的DC系数和AC系数;
-根据所述预测块的所述平均值和所述DC系数计算(6)所述当前块的平均值;
-计算(8)作为所述当前块的平均值与所述预测块的平均值的比值的加权预测参数;
-将包含作为DC系数的零值和所述重构AC系数的系数块变换(10)成残差块;
-通过合并所述残差块和由加所述加权预测参数加权的所述预测块重构(14)当前块。
2.根据权利要求1所述的解码方法,其中,在计算所述当前块的平均值的步骤期间,通过从编码数据流中解码的初始加权预测参数加权所述预测块的所述平均值。
3.根据权利要求1所述的解码方法,其中,在计算所述当前块的平均值的步骤期间,通过等于当前块的邻域的平均值和与所述当前块相关联的参考块的相应邻域的平均值之间的比值的初始加权预测参数加权所述预测块的所述平均值。
4.一种将划分成块的图像序列在编码数据流中编码的方法,其特征在于,该方法包含如下步骤:
-为当前块确定(15)预测块;
-计算(16)所述预测块的平均值和所述当前块的平均值;
-计算(18)所述当前块的平均值与所述预测块的平均值之间的预测误差;
-根据所述预测块的所述平均值和相继量化和去量化的预测误差计算(20)所述当前块的校正平均值;
-计算(22)作为所述当前块的校正平均值与所述预测块的平均值之间的比值的加权预测参数;
-通过从所述当前块中提取由所述加权预测参数加权的所述预测块确定(26)残差块;以及
-通过将所述残差块变换成DC系数和AC系数,通过量化所述AC系数以及通过熵编码量化预测误差和所述量化AC系数,将所述残差块在所述编码数据流中编码(28)。
5.根据权利要求4所述的编码方法,其中,在计算所述预测误差的步骤期间,通过初始加权预测参数加权所述预测块的所述平均值,所述初始加权预测参数被编码成所述编码数据流。
6.根据权利要求5所述的编码方法,其中,按照如下步骤为所述当前块所属的图像的一部分确定所述初始加权预测参数:
-确定称作第一平均值的所述图像的一部分的平均值;
-确定称作第二平均值的与所述当前块相关联的参考块所属的相应图像的一部分的平均值;以及
-计算作为所述第一平均值与所述第二平均值的比值的所述加权预测参数。
7.根据权利要求6所述的编码方法,其中,所述图像部分是整个图像。
8.根据权利要求6所述的编码方法,其中,所述图像部分是图像切片。
9.根据权利要求4所述的编码方法,其中,在计算所述预测误差的步骤期间,通过等于当前块的邻域的平均值和与所述当前块相关联的参考块的相应邻域的平均值之间的比值的初始加权预测参数加权所述预测块的所述平均值。
10.一种解码代表划分成块的图像序列的编码数据流的解码设备(13),其特征在于,该设备包含:
-用于确定(1308)当前块的预测块的部件;
-用于计算(1308)所述预测块的平均值的部件;
-用于从所述流中重构(1308,1302)与所述当前块有关的DC系数和AC系数的部件;
-用于根据所述预测块的所述平均值和所述DC系数计算(1308)所述当前块的平均值的部件;
-用于计算(1308)作为所述当前块的平均值与所述预测块的平均值的比值的加权预测参数的部件;
-用于将包含作为DC系数的零值和所述重构AC系数的系数块变换(1302)成残差块的部件;以及
-用于通过合并所述残差块和由所述加权预测参数加权的所述预测块重构(1304)当前块的部件。
11.一种将划分成块的图像序列在编码数据流中编码的编码设备(12),其特征在于,该设备包含:
-用于为当前块确定(1216)预测块的部件;
-用于计算(1216)所述预测块的平均值和所述当前块的平均值的部件;
-用于计算(1216)所述当前块的平均值与所述预测块的平均值之间的预测误差的部件;
-用于根据所述预测块的所述平均值和相继量化和去量化的预测误差计算(1216)所述当前块的校正平均值的部件;
-用于计算(1216)作为所述当前块的校正平均值与所述预测块的平均值之间的比值的加权预测参数的部件;
-用于通过从所述当前块中提取由所述加权预测参数加权的所述预测块确定(1200)残差块的部件;以及
-用于通过将所述残差块变换成DC系数和AC系数,量化所述AC系数以及熵编码量化预测误差和所述量化AC系数将所述残差块在所述编码数据流中编码(1202,1204)的部件。
CN201080033641.7A 2009-07-30 2010-07-29 解码代表图像序列的编码数据流的方法和编码图像序列的方法 Active CN102474608B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
FR0955353A FR2948845A1 (fr) 2009-07-30 2009-07-30 Procede de decodage d'un flux representatif d'une sequence d'images et procede de codage d'une sequence d'images
FR0955353 2009-07-30
PCT/EP2010/061013 WO2011012669A2 (en) 2009-07-30 2010-07-29 Method for decoding a stream of coded data representative of a sequence of images and method for coding a sequence of images

Publications (2)

Publication Number Publication Date
CN102474608A CN102474608A (zh) 2012-05-23
CN102474608B true CN102474608B (zh) 2014-10-29

Family

ID=41719377

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201080033641.7A Active CN102474608B (zh) 2009-07-30 2010-07-29 解码代表图像序列的编码数据流的方法和编码图像序列的方法

Country Status (7)

Country Link
US (1) US9008178B2 (zh)
EP (1) EP2460355B1 (zh)
JP (1) JP5545783B2 (zh)
KR (1) KR101681353B1 (zh)
CN (1) CN102474608B (zh)
FR (1) FR2948845A1 (zh)
WO (1) WO2011012669A2 (zh)

Families Citing this family (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2587803A1 (en) * 2011-10-27 2013-05-01 Thomson Licensing Methods for coding and reconstructing a pixel block and corresponding devices.
RU2510944C2 (ru) * 2012-07-03 2014-04-10 Корпорация "САМСУНГ ЭЛЕКТРОНИКС Ко., Лтд." Способ кодирования/декодирования многоракурсной видео последовательности на основе адаптивной локальной коррекции яркости опорных кадров без передачи дополнительных параметров (варианты)
EP2683165B1 (en) * 2012-07-04 2015-10-14 Thomson Licensing Method for coding and decoding a block of pixels from a motion model
WO2014048946A1 (fr) * 2012-09-26 2014-04-03 Thomson Licensing Procede et dispositif de prediction inter-image et procede et appareil de codage correspondants
WO2015042751A1 (en) * 2013-09-27 2015-04-02 Qualcomm Incorporated Residual coding for depth intra prediction modes
EP3050294A4 (en) 2013-09-27 2017-08-09 Qualcomm Incorporated Residual coding for depth intra prediction modes
EP3084968A4 (en) * 2013-12-16 2017-11-29 McAfee, LLC Process efficient preprocessing for an encryption standard
EP3096518A1 (en) * 2015-05-20 2016-11-23 Thomson Licensing Methods, systems and apparatus for determining prediction adjustment factors
CN107810635A (zh) 2015-06-16 2018-03-16 Lg 电子株式会社 图像编译系统中基于照度补偿预测块的方法和设备
EP3340621B1 (en) * 2015-08-20 2023-01-25 Nippon Hoso Kyokai Image decoding device, and programs therefor
KR102601732B1 (ko) * 2016-05-31 2023-11-14 삼성디스플레이 주식회사 영상 부호화 방법 및 영상 복호화 방법
JP2018056699A (ja) * 2016-09-27 2018-04-05 株式会社ドワンゴ 符号化装置、符号化方法、復号化装置、及び復号化方法
KR102569476B1 (ko) * 2016-10-11 2023-08-24 엘지전자 주식회사 영상 코딩 시스템에서 인트라 예측에 따른 영상 디코딩 방법 및 장치
IT201700024294A1 (it) * 2017-03-03 2018-09-03 Sisvel Tech S R L Metodo e apparato per codificare e decodificare immagini o flussi video digitali
CN117395394A (zh) * 2017-03-22 2024-01-12 韩国电子通信研究院 使用参考块的预测方法和装置

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1933601A (zh) * 2005-09-16 2007-03-21 世宗大学校产学协力团 用于无损视频编码和解码的方法及设备
CN1984340A (zh) * 2005-11-02 2007-06-20 三星电子株式会社 视频编码/解码的方法和设备
CN101159875A (zh) * 2007-10-15 2008-04-09 浙江大学 二重预测视频编解码方法和装置
CN101313581A (zh) * 2005-11-22 2008-11-26 汤姆森许可贸易公司 视频图像编码方法及设备

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004007379A (ja) 2002-04-10 2004-01-08 Toshiba Corp 動画像符号化方法及び動画像復号化方法
KR100584552B1 (ko) 2003-01-14 2006-05-30 삼성전자주식회사 동영상 부호화 및 복호화 방법과 그 장치
WO2006033953A1 (en) * 2004-09-16 2006-03-30 Thomson Licensing Video codec with weighted prediction utilizing local brightness variation
US7755984B2 (en) 2004-09-21 2010-07-13 Koninklijke Philips Electronics N.V. Method of controller and data carrier drive apparatus for controlling loading means supporting a data carrier
US8457203B2 (en) 2005-05-26 2013-06-04 Ntt Docomo, Inc. Method and apparatus for coding motion and prediction weighting parameters
EP1980112B1 (en) * 2006-02-02 2012-10-24 Thomson Licensing Method and apparatus for adaptive weight selection for motion compensated prediction
CN101385346B (zh) * 2006-02-17 2012-05-30 汤姆森许可贸易公司 解决局部亮度变化的视频编码设备和方法
KR101369746B1 (ko) * 2007-01-22 2014-03-07 삼성전자주식회사 적응적 보간 필터를 이용한 영상 부호화, 복호화 방법 및장치
KR101244917B1 (ko) * 2007-06-11 2013-03-18 삼성전자주식회사 조도 보상 방법 및 장치, 이를 이용한 영상의 부호화,복호화 방법 및 장치
KR20090090152A (ko) * 2008-02-20 2009-08-25 삼성전자주식회사 영상의 부호화, 복호화 방법 및 장치
TWI498003B (zh) 2009-02-02 2015-08-21 Thomson Licensing 代表一序列圖像的碼式資料連流之解碼方法和一序列圖像之寫碼方法及碼式圖像資料結構
JP5938424B2 (ja) 2011-03-14 2016-06-22 トムソン ライセンシングThomson Licensing 画像ブロックを再構成および符号化する方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1933601A (zh) * 2005-09-16 2007-03-21 世宗大学校产学协力团 用于无损视频编码和解码的方法及设备
CN1984340A (zh) * 2005-11-02 2007-06-20 三星电子株式会社 视频编码/解码的方法和设备
CN101313581A (zh) * 2005-11-22 2008-11-26 汤姆森许可贸易公司 视频图像编码方法及设备
CN101159875A (zh) * 2007-10-15 2008-04-09 浙江大学 二重预测视频编解码方法和装置

Also Published As

Publication number Publication date
WO2011012669A2 (en) 2011-02-03
CN102474608A (zh) 2012-05-23
US9008178B2 (en) 2015-04-14
EP2460355A2 (en) 2012-06-06
WO2011012669A3 (en) 2011-04-14
EP2460355B1 (en) 2016-08-31
JP2013500661A (ja) 2013-01-07
KR20120039675A (ko) 2012-04-25
JP5545783B2 (ja) 2014-07-09
KR101681353B1 (ko) 2016-11-30
FR2948845A1 (fr) 2011-02-04
US20120128068A1 (en) 2012-05-24

Similar Documents

Publication Publication Date Title
CN102474608B (zh) 解码代表图像序列的编码数据流的方法和编码图像序列的方法
CN101911702B (zh) 针对支持cabac的视频编码过程而量化视频块的系数的方法和装置
KR101830352B1 (ko) 스킵모드를 이용한 동영상 부호화 및 복호화 방법 및 장치
KR101362757B1 (ko) 인터 컬러 보상을 이용한 영상의 부호화 방법 및 장치,복호화 방법 및 장치
CN102172027B (zh) 有效率的预测模式选择
CN107046644B (zh) 运动图像编码装置以及运动图像解码装置
KR101311403B1 (ko) 영상의 부호화 방법 및 장치, 복호화 방법 및 장치
US10142650B2 (en) Motion vector prediction and refinement using candidate and correction motion vectors
KR101261526B1 (ko) 영상의 부호화 방법 및 장치, 복호화 방법 및 장치
JP5646641B2 (ja) 画像のブロックを符号化する方法及び画像のブロックを再構成する方法
JP5590133B2 (ja) 動画像符号化装置、動画像符号化方法、動画像符号化用コンピュータプログラム、動画像復号装置及び動画像復号方法ならびに動画像復号用コンピュータプログラム
CN103782598A (zh) 用于无损编码的快速编码方法
KR100612849B1 (ko) 영상 부호화 및 복호화 장치 및 방법
CN102265619A (zh) 切换式内插滤波器中的偏移计算
EP1949704A1 (en) Method, medium, and apparatus encoding and/or decoding an image using the same coding mode across components
CN105284112A (zh) 用于确定量化参数的值的方法和装置
KR20090095011A (ko) 영상의 부호화, 복호화 방법 및 장치
KR20110090841A (ko) 가중치 예측을 이용한 영상 부호화/복호화 장치 및 방법
KR20110048004A (ko) 움직임 벡터 해상도 제한을 이용한 움직임 벡터 부호화/복호화 방법 및 장치와 그를 이용한 영상 부호화/복호화 방법 및 장치
JP6402520B2 (ja) 符号化装置、方法、プログラム及び機器
JP6497100B2 (ja) 映像符号化装置、方法及びプログラム
KR101285841B1 (ko) 움직임 벡터 부호화 장치 및 복호화 장치, 그리고 그것의 부호화 및 복호화 방법

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20190131

Address after: Paris France

Patentee after: International Digital Madison Patent Holding Co.

Address before: I Si Eli Murli Nor, France

Patentee before: THOMSON LICENSING

Effective date of registration: 20190131

Address after: I Si Eli Murli Nor, France

Patentee after: THOMSON LICENSING

Address before: I Si Eli Murli Nor, France

Patentee before: THOMSON LICENSING