CN103688543A - 进行图像编码和解码的设备和方法 - Google Patents

进行图像编码和解码的设备和方法 Download PDF

Info

Publication number
CN103688543A
CN103688543A CN201280032894.1A CN201280032894A CN103688543A CN 103688543 A CN103688543 A CN 103688543A CN 201280032894 A CN201280032894 A CN 201280032894A CN 103688543 A CN103688543 A CN 103688543A
Authority
CN
China
Prior art keywords
pixel
prediction piece
luminance compensation
video
prediction
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201280032894.1A
Other languages
English (en)
Other versions
CN103688543B (zh
Inventor
林晶娟
朴重键
韩钟基
李英烈
文柱禧
金海光
全炳宇
徐钻源
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
SK Telecom Co Ltd
Original Assignee
SK Telecom Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by SK Telecom Co Ltd filed Critical SK Telecom Co Ltd
Publication of CN103688543A publication Critical patent/CN103688543A/zh
Application granted granted Critical
Publication of CN103688543B publication Critical patent/CN103688543B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136Incoming video signal characteristics or properties
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/513Processing of motion vectors
    • H04N19/517Processing of motion vectors by encoding
    • H04N19/52Processing of motion vectors by encoding by predictive encoding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/105Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117Filters, e.g. for pre-processing or post-processing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136Incoming video signal characteristics or properties
    • H04N19/137Motion inside a coding unit, e.g. average field, frame or block difference
    • H04N19/139Analysis of motion vectors, e.g. their magnitude, direction, variance or reliability
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本发明涉及用于进行图像编码和解码的设备和方法。用于进行图像编码和解码的所述设备包括:参数计算单元,其用于基于与当前块相邻的至少一个第一像素以及与利用预测运动矢量获得的至少一个运动预测块相邻的第二像素来计算亮度补偿参数;目标像素选择单元,其用于从至少一个预测块中的像素当中选择用于执行亮度补偿的目标像素,其中,利用与所述至少一个运动预测块相邻的周边像素来通过针对当前块的运动矢量确定目标像素;以及预测编码单元,其将所述亮度补偿参数应用于所选择的目标像素来生成针对所述至少一个预测块的补偿预测块,从而执行预测编码。

Description

进行图像编码和解码的设备和方法
技术领域
本公开在一些实施方式中涉及用于进行视频编码/解码的方法和设备。更具体地讲,本公开涉及一种通过应用亮度补偿技术来进行视频编码/解码的方法和设备。
背景技术
本部分中的陈述仅提供与本公开相关的背景信息,可能不构成现有技术。
H.264/AVC是迄今为止标准化的视频编解码器当中具有最大压缩率的最新视频编码/解码标准。H.264/AVC试图利用考虑方向性的帧内预测模式、4×4整数变换、从16×16到4×4的各种块模式、解块滤波等来增加压缩效率。
H.264/AVC使用加权预测(WP)技术来使具有变化的亮度的图像的编码效率最大化。WP是以切片(slice)为单位应用加权因子和偏移的技术。WP的应用方法由式1表示。
P idx d = w idx d × R idx d + o idx d 式1
在式1中,P是通过将WP应用于基准图像R得到的视频。“w”和“o”分别表示加权因子和偏移。下标“d”和“idx”分别表示预测方向和参考索引。以这种方式得到的新的基准图像P可用于预测当前图像。另外,将用于每一基准图像R的“w”和“o”编码到切片头上并发送给解码器,然后解码器可使用基准图像R来生成应用WP之后的基准图像P。
以切片为单位应用的现有WP技术被设计为应对图像的淡入或淡出效果,它们无法考虑诸如由于光照的局部亮度变化以及由物体的运动引起的亮度改变的因素。另外,在将WP应用于没有明显亮度改变的大多数图像时,编码效率变差。
发明内容
技术问题
本公开的至少一个方面对进行编码的当前块中的像素选择性地应用亮度补偿技术。
本公开的另一方面提供了一种编码和解码方法,其根据具有亮度变化的不同环境来自适应地执行逐块的亮度补偿并且在块中进一步执行逐个像素的亮度补偿。
解决问题的技术手段
根据一些实施方式,本公开提供了一种视频编码设备,该视频编码设备包括参数计算器、目标像素选择器和预测编码器。所述参数计算器被配置为基于与当前块相邻的一个或更多个第一像素以及位于与所述第一像素对应的位置并且与利用预测运动矢量获得的运动预测块相邻的一个或更多个第二像素来计算亮度补偿参数。所述目标像素选择器被配置为利用与所述运动预测块相邻的像素来从通过针对所述当前块的运动矢量确定的预测块中的像素中选择用于亮度补偿的目标像素。并且所述预测编码器被配置为通过将所述亮度补偿参数应用于所选择的一个或更多个目标像素来生成所述预测块的补偿预测块,然后对所生成的补偿预测块执行预测编码。
这里,提供标志值并将其插入切片头中以指示是否执行全块亮度补偿,并且如果所述标志值指示执行,则所述预测编码器可将所述亮度补偿参数应用于属于所述预测块的全部像素。另外,如果所述亮度补偿参数偏离预定的标准范围,则所述预测编码器可将所述亮度补偿参数应用于属于所述预测块的全部像素。
本公开的另外至少一个实施方式提供了一种视频解码设备,该视频解码设备包括参数计算器、目标像素选择器和预测解码器。所述参数计算器被配置为基于与当前块相邻的一个或更多个第一像素以及位于与所述第一像素对应的位置并且与利用预测运动矢量获得的运动预测块相邻的一个或更多个第二像素来计算亮度补偿参数。所述目标像素选择器被配置为利用与所述运动预测块相邻的一个或更多个像素来从通过针对所述当前块的运动矢量确定的预测块中的像素中选择用于亮度补偿的一个或更多个目标像素。并且所述预测解码器被配置为通过将所述亮度补偿参数应用于所选择的一个或更多个目标像素来生成所述预测块的补偿预测块,然后对所生成的补偿预测块执行预测解码。
本公开的另外至少一个实施方式提供了一种视频编码方法,该视频编码方法包括以下步骤:基于与当前块相邻的一个或更多个第一像素以及位于与所述第一像素对应的位置并且与利用预测运动矢量获得的运动预测块相邻的一个或更多个第二像素来计算亮度补偿参数。所述视频编码方法还包括以下步骤:利用与所述运动预测块相邻的一个或更多个像素来从通过针对所述当前块的运动矢量确定的预测块中的像素中选择用于亮度补偿的一个或更多个目标像素。所述视频编码方法还包括以下步骤:通过将所述亮度补偿参数应用于所选择的一个或更多个目标像素来生成所述预测块的补偿预测块,然后对所生成的补偿预测块执行预测编码。
本公开的另外至少一个实施方式提供了一种视频解码方法,该视频解码方法包括以下步骤:基于与当前块相邻的一个或更多个第一像素以及位于与所述第一像素对应的位置并且与利用预测运动矢量获得的运动预测块相邻的一个或更多个第二像素来计算亮度补偿参数。所述视频解码方法还包括以下步骤:利用与所述运动预测块相邻的一个或更多个像素来从通过针对所述当前块的运动矢量确定的预测块中的像素中选择用于亮度补偿的一个或更多个目标像素。所述视频解码方法还包括以下步骤:通过将所述亮度补偿参数应用于所选择的一个或更多个目标像素来生成所述预测块的补偿预测块,然后对所生成的补偿预测块执行预测解码。
有益效果
根据如上所述的本公开,本公开可以通过对属于当前块的像素选择性地应用亮度补偿技术来改进编码效率。
附图说明
图1是根据本公开的至少一个实施方式的视频编码设备的构造的示图。
图2是根据本公开的至少一个实施方式的视频编码设备的帧间预测单元的构造的示图。
图3至图6是根据本公开的至少一个实施方式的应用亮度补偿的编码方法的示例图,其中,CU表示编码单元,MC为运动补偿。
图7是根据本公开的至少一个实施方式的视频编码方法的流程图。
图8是根据本公开的至少一个实施方式的视频解码设备的构造的示图。
图9是根据本公开的至少一个实施方式的视频解码设备的帧间预测单元的构造的示图。
图10是根据本公开的至少一个实施方式的视频解码方法的流程图。
具体实施方式
以下将参照示例图详细描述本公开的至少一个实施方式。在以下描述中,尽管元件示出在不同的图中,类似的标号指代类似的元件。另外,在下面对至少一个实施方式的描述中,为了清晰和简洁起见,将省略对本文包含的已知功能和构造的详细描述。
图1是根据本公开的至少一个实施方式的视频编码设备的构造的示图。
示例性视频编码设备包括帧间预测单元110、变换和量化单元120、编码器130、解量化和逆变换单元140、加法器150和存储单元160。
视频编码设备可以是用户终端,例如PC(个人计算机)、笔记本计算机、PDA(个人数字助理)、PMP(便携式多媒体播放器)、PSP(便携式游戏机)、移动通信终端以及其它用户终端。视频编码设备可表示各自包括以下部件的各种设备:(a)用于与各种类型的装置或有线/无线通信网络执行通信的通信设备(例如通信调制解调器等)、(b)用于存储执行视频编码的各种程序和数据的存储器以及(c)执行程序以进行计算和控制的微处理器等。
要编码的图像可以按照块(例如,宏块)为单位输入。出于描述的目的,本公开的实施方式按照与H.264/AVC标准相同的方式定义16×16形式的宏块,但是更一般地讲,宏块可按照M×N形成,其中,M和N可分别大于16并且是相同或不同的整数。
帧间预测单元110在已经进行编码处理之后重构的先前帧中确定搜索范围,并且在所确定的搜索范围中执行运动估计处理,以生成与当前块高度相关从而相对于当前块引起的可能误差最小的预测块。另外,帧间预测单元110使用当前块和预测块来生成残差块并将其发送给变换和量化单元120。另外,运动估计处理生成当前块的运动矢量并将其提供给编码器130。另外,帧间预测单元110可通过根据本公开的至少一个实施方式(以下将参照图2描述)应用亮度补偿技术来执行帧间预测。
变换和量化单元120将从帧间预测单元110输出的残差块变换到频域,然后将频域的残差块量化。更具体地讲,变换和量化单元120执行从帧间预测单元110所生成的残差块的残差系数到频域的变换,从而生成具有频率系数的残差块并将其量化。这里,所使用的变换方法可以是图像信号的空域至频域变换,例如哈达玛(Hadamard)变换、基于离散余弦变换(DCT)的整数变换等。量化方法可使用各种量化技术,例如死区均匀阈值量化(DZUTQ)或量化加权矩阵。然而,所提及的变换和量化方法不限制本公开采用其它各种变换和量化技术。
编码器130对来自变换和量化单元120的经变换和量化的残差块进行编码以生成编码数据。所生成的编码数据被输出为比特流。编码器130的编码方法包括(但不限于)熵编码,并且可使用其它各种编码方案。
另外,编码器130可使编码数据包括用于对编码数据进行解码的各种信息。例如,编码数据可包括编码块图案(CBP)、差量量化参数、用于预测的预测信息(例如,运动矢量或用于预测运动矢量的预测运动矢量索引信息)等。
解量化和逆变换单元140通过对由变换和量化单元120转换并量化的残差块进行解量化和逆变换来重构残差块。即,逆向执行变换和量化单元120所执行的变换处理和量化处理,它们可以按照各种方法来实现。例如,解量化和逆变换单元140可使用变换和逆变换或者量化和解量化的相同的预共享处理。另选地,解量化和逆变换单元140可通过利用与变换和量化单元120的变换和量化处理相关的信息(例如,通过所述变换和量化处理生成并发送的关于变换尺寸、变换形状和量化类型的信息)逆向地执行所述变换和量化处理来执行变换和量化。
加法器150通过将从解量化和逆变换单元140重构的残差块与从帧间预测单元110输出的预测块相加来生成重构块。将所生成的重构块存储在存储单元160中,该重构块用作稍后对要编码的目标块进行编码的基准帧。
此外,尽管图1中未示出,但是除了帧间预测单元120之外,根据本公开的一个实施方式的视频编码设备还可包括帧内预测单元。帧内预测单元利用空间上设置在当前块周围的相邻块中可用的基准像素值生成针对当前块的预测块。在这种情况下,针对各个可用的帧内预测模式计算当前块与预测块之间的误差值,通过应用具有最小误差值的帧内预测模式来生成预测块。另外,通过对具有最小误差值的帧内预测模式进行编码来将帧内预测模式的信息提供给编码器130。另外,将利用当前块和帧内预测的预测块生成的残差块发送给变换和量化单元120。
另外,根据本公开的一个实施方式的视频编码设备还包括解块滤波器以用于对重构块进行滤波,以减少通过以块为单位进行预测和量化而生成的块伪影。此时,帧内预测可使用通过解块滤波器进行滤波之前的重构块,并且帧间预测可使用滤波后的重构块。
此外,根据本公开的一个实施方式的视频编码设备可在生成预测块并对预测块进行预测编码之前确定预测模式。预测模式包括帧间模式、帧内模式、跳过模式和合并模式等。
例如,在跳过模式下,编码设备将用于指示在对当前块进行编码中使用跳过模式的标志发送给解码设备,而解码设备响应于所接收到的指示跳过模式的标志来利用当前矢量的相邻块的运动矢量预测当前矢量的运动矢量并执行运动补偿。另外,跳过模式安排将运动矢量的索引信息进一步发送给解码设备。
在合并模式下,如果编码设备将关于使用哪个运动矢量来对当前块进行编码的信息(例如,使用紧邻当前块左侧的块的运动矢量还是使用紧邻当前块上侧的块的运动矢量)发送给解码设备,则解码设备利用接收到的信息所指示的运动矢量对当前块执行预测解码。另一方面,合并模式通常安排将残差块的编码数据发送给解码设备。
图2是根据本公开的至少一个实施方式的视频编码设备的帧间预测单元的构造的示图。
根据本公开的一个实施方式的帧间预测单元包括参数计算器210、目标像素选择器220和预测编码器230。
参数计算器210基于与当前块相邻的一个或更多个第一像素以及位于与第一像素对应的位置并且与利用预测运动矢量获得的运动预测块相邻的第二像素,来计算亮度补偿参数。
如图3所示,可利用当前块的相邻像素来确定第一像素。例如,基于均从当前块的相邻像素的值计算出的最大阈值和最小阈值来确定第一像素,其中,所述最大阈值和最小阈值可通过下式2计算:
T min N = m N - Δ N
T max N = m N + Δ N
Δ N = 2 S N Σ i = 1 S N | N ( i ) - m N | 式2
其中,TN min是最小阈值,TN max是最大阈值,SN是当前块的相邻像素的总数,并且N(i)表示当前块的相邻像素的相应像素值。
如果确定了最大阈值和最小阈值,则可通过下式3来确定第一像素:
N * = { N ( i ) | T min N ≤ N ( i ) ≤ T max N } 式3
其中,N*表示第一像素的集合。
另一方面,如果确定了第一像素,则将第二像素确定为与利用预测运动矢量(PMV)获得的运动预测块相邻的像素当中的处于与第一像素对应的位置的像素,如图4所示。在本公开中,“运动预测块”表示利用预测运动矢量获得的预测块。另一方面,通过运动估计处理确定的当前块的“运动预测块”被命名为与定义利用实际运动矢量获得的实际预测块的“预测块”相区别。
用于确定第二像素的预测运动矢量可从预测运动矢量候选选择。例如,可通过如下所述应用亮度补偿参数来对各个预测运动矢量候选尝试预测编码,在对当前块进行编码中最有效的预测运动矢量候选可用作用于确定第二像素的那个预测运动矢量。另选地,特定一个预测运动矢量候选可用作用于确定第二像素的预测运动矢量,并且可在编码设备与解码设备之间预先安排该预测运动矢量。这样,编码设备无需向解码设备发送标识所使用的预测运动矢量候选的信息,从而进一步增加了编码效率。
另外,为了确定第二像素,预测运动矢量可按照各种像素单位使用,例如整数像素单位、1/2像素单位、1/4像素单位等。然而,当以1/2像素、1/4像素等为单位使用预测运动矢量时,由于必要的插值滤波器,复杂度可能增加。因此,尽管本实施方式按照整数像素单位取预测运动矢量,但是明显的是,本公开的范围不限于此。
如果确定了第一像素和第二像素,则可基于第一像素和第二像素来计算亮度补偿参数,该亮度补偿参数可包括加权因子和偏移中的至少一个。这里,可基于第一像素与第二像素之间的像素值的比来计算加权因子,并且可基于第一像素与第二像素之间的像素值的差来计算偏移。例如,加权因子和偏移可通过下式4来计算:
w = Σ i = 1 S N * N * ( i ) / Σ i = 1 S N * C * ( i )
o = Σ i = 1 S N * N * ( i ) - Σ i = 1 S N * C * ( i ) S N * 式4
式4中,w是加权因子,o是偏移,
Figure BDA0000450933970000073
是第一像素的数量,N*(i)是第一像素的相应像素值,C*(i)是第二像素的相应像素值。
目标像素选择器220利用与利用预测运动矢量获得的运动预测块相邻的相邻像素的像素值,在通过针对当前块的运动矢量确定的预测块中的像素当中,选择要应用亮度补偿参数的目标像素。即,目标像素选择器220利用与利用预测运动矢量获得的运动预测块相邻的相邻像素的像素值,在属于针对当前块的预测块的像素当中,选择要应用亮度补偿参数的目标像素,所述预测块利用通过运动估计处理获得的针对当前块的实际运动矢量来获得。
例如,目标像素选择器220基于最小阈值和最大阈值来选择目标像素,所述最小阈值和最大阈值这二者是从与利用预测运动矢量获得的运动预测块相邻的相邻像素的像素值计算出的。这里,所述最大阈值和最小阈值可通过下式5计算:
T min c = m c - Δ c
T max c = m c + Δ c
Δ c = 2 S c Σ i = 1 S c | C ( i ) - m c | 式5
在式5中,下标C是运动预测块的相邻像素的集合,TN min是最小阈值,TN max是最大阈值,mc是属于集合C的相邻像素的像素值的平均值,Sc是集合C中的元素的数量,并且C(i)表示属于集合C的相邻像素的相应像素值。
如果确定了最小阈值和最大阈值,则如式6所示,目标像素选择器220可在利用针对当前块的运动矢量获得的预测块中选择像素值高于最小阈值且低于最大阈值的像素作为目标像素。
M * = { M ( j ) | T min C ≤ M ( j ) ≤ T max C } 式6
式6中,M(j)表示利用针对当前块的运动矢量获得的预测块中的相应像素值,M*是目标像素的集合。
预测编码器230通过将参数计算器210所计算出的亮度补偿参数应用于从目标像素选择器220选择的目标像素来针对通过当前块的运动矢量确定的预测块生成补偿预测块,并利用所生成的补偿预测块执行预测编码。即,预测编码器230利用当前块和补偿预测块生成残差块,并将所生成的残差块发送给变换和量化单元120。
如果在式5中加权因子w的分母不为零,则加权因子w可用作要应用于目标像素的亮度补偿参数;如果加权因子w的分母为零,则偏移o可用作要应用于目标像素的亮度补偿参数。这些可通过下式7来表示。
Figure BDA0000450933970000085
式7
其中, A C * = Σ i = 1 S N * C * ( i )
图5示出通过上述方法在预测块当中选择要应用亮度补偿参数的目标像素的示例。
另一方面,如果亮度补偿参数偏离预定的标准范围,例如,如果加权因子偏离以1为基准的基准范围,则预测编码器230可将亮度补偿参数应用于利用当前块的运动矢量获得的预测块中的全部像素,而不通过目标像素选择器220选择目标像素。
此外,预测编码器230可对用于指示是否通过将亮度补偿应用于通过目标像素选择器220选择的目标像素来执行预测编码的标志进行编码,或者使得能够通过将该标志发送给编码器130来对其进行编码。解码设备可通过标识包括在从编码设备接收到的编码数据中的标志值来通过应用上述亮度补偿技术执行解码。
另一方面,为了增加运动矢量的编码效率,视频编码设备可对当前块的运动矢量与预测运动矢量之间的差(即,运动矢量差)进行编码,并将运动矢量差以及所使用的预测运动矢量的索引信息发送给视频解码设备。这里,用于确定第二像素的预测运动矢量可用作用于计算运动矢量差的预测运动矢量。具体地讲,如果在编码设备与解码设备之间预先安排用于确定第二像素的预测运动矢量,则编码设备可以不向解码设备发送关于预测运动矢量的索引信息。
以上描述了在使用一个运动预测块的单向预测中应用亮度补偿技术的视频编码方法。然而,本公开不限于此,尽管利用至少一个运动预测块来执行编码,但是本公开还可应用于本公开的实施方式中提出的亮度补偿技术。例如,如图6所示,即使在使用两个运动预测块的双向预测中,也可以应用本公开的实施方式所提出的亮度补偿技术。
在双向预测的情况下,如图6所示,使用利用两个预测运动矢量获得的两个运动预测块,与两个运动预测块中的一个运动预测块相邻并且位于与第一像素对应的位置处的像素以及与另一运动预测块相邻并且位于与第一像素和所述另一运动预测块对应的位置处的像素可用作第二像素。
在这种情况下,亮度补偿参数可通过下式8计算:
w = Σ i = 1 S N * N * ( i ) / Σ i = 1 S N * C avg * ( i )
o = Σ i = 1 S N * N * ( i ) - Σ i = 1 S N * C avg * ( i ) S N *
C avg * ( i ) = C 0 * ( i ) + C 1 * ( i ) + 1 2 式8
式8中,C0*(i)是属于两个运动预测块中的一个的第二像素的相应像素值,并且C1*(i)表示属于两个运动预测块中的另一个的第二像素的相应像素值。
此外,可通过将式5和式6分别应用于当前块的两个预测块来确定要应用亮度补偿参数的目标像素,可通过将按照式8的方法确定的亮度补偿参数应用于所确定的目标像素来生成补偿预测块。
此外,根据本公开的实施方式的视频编码设备可将标志值插入切片头中以指示是否执行全块亮度补偿。如果包括在切片头中的标志值指示执行全块亮度补偿,则预测编码器230将参数计算器210所计算出的亮度补偿参数应用于属于预测块的全部像素,而不通过目标像素选择器220选择目标像素。即,可根据插入切片头中的标志将亮度补偿技术应用于属于块的全部像素,或者可将亮度补偿技术应用于通过目标像素选择器220选择的有限的目标像素。
另一方面,在上文中,尽管仅针对帧间模式描述了本公开的实施方式中提出的亮度补偿技术,但是本公开的范围不限于此,本公开的实施方式中提出的亮度补偿技术可应用于跳过模式或合并模式,例如,在跳过模式或合并模式的情况下,可通过将参数计算器210所计算出的亮度补偿参数应用于属于预测块的全部像素来执行编码或解码。
图7是根据本公开的至少一个实施方式的视频编码方法的流程图。
如图7所示,根据本公开的实施方式的视频编码方法可包括参数计算步骤S710、目标像素选择步骤S720和预测编码步骤S730。
在参数计算步骤S710中,基于与当前块相邻的至少一个第一像素以及与利用预测运动矢量获得的至少一个运动预测块相邻并且位于与第一像素对应的位置处的第二像素,来计算亮度补偿参数。
在目标像素选择步骤S720中,利用与至少一个运动预测块相邻的相邻像素,在通过当前块的运动矢量获得的至少一个预测块中的像素当中,选择用于执行亮度补偿的目标像素。
在预测编码步骤S730中,通过将在参数计算步骤S710中计算出的亮度补偿参数应用于在目标像素选择步骤S720中选择的目标像素来生成针对至少一个预测块的补偿预测块,并利用所生成的补偿预测块来执行预测编码。即,通过利用当前块和补偿预测块生成残差块来执行编码。
由于参数计算步骤S710、目标像素选择步骤S720和预测编码步骤S730中的每一个对应于参照图2由参数计算器210、目标像素选择器220和预测编码器230执行的处理,所以将省略进一步的详细描述,以上参照图2所述的所有内容均可原样应用于视频编码方法。
此外,上述视频编码方法实现在计算机程序中并存储在记录介质上,该视频编码方法可通过使计算机访问记录介质并运行所述程序来实现。并且不限于此,视频编码方法可通过利用一个硬件芯片实现执行视频编码方法的各个步骤的模块并驱动该硬件芯片来实现。
图8是根据本公开的至少一个实施方式的视频解码设备的构造的示例。
类似于以上图1所述的视频编码设备,根据本公开的实施方式的视频解码设备可以是PC(个人计算机)、笔记本计算机、PDA(个人数字助理)、PMP(便携式多媒体播放器)、PSP(便携式游戏机)、移动通信终端等,并且表示各自包括以下部件的各种设备:用于与各种类型的装置或有线/无线通信网络执行通信的通信设备(例如通信调制解调器等)、用于存储执行视频编码的各种程序和数据的存储器以及执行程序以进行计算和控制的微处理器等。
根据本公开的一个实施方式的视频解码设备可包括解码器810、解量化和逆变换单元820、帧间预测单元830、加法器840和存储单元850。
解码器810通过对所接收到的编码数据进行熵解码来提取块单位解码所需的信息。换言之,解码器810通过对数据进行解码来提取量化频率系数序列,并通过对量化频率系数序列进行逆扫描来生成具有量化频率系数的残差块。例如,如果编码设备使用锯齿形扫描方法,则解码设备通过应用逆锯齿形扫描方法对量化频率系数序列进行逆扫描来生成具有量化频率系数的残差块。另外,解码器810从编码数据提取解码所需的信息,例如,用于预测模式的信息、关于运动矢量的信息等。另外,可以提取诸如切片头中的用于指示是否将针对整个图像执行亮度补偿的标志、用于指示是否应用本公开的实施方式中提出的亮度补偿技术的标志等信息。
解量化和逆变换单元820将从解码器810接收到的量化的残差块解量化,并通过再次对其进行逆变换来生成残差块。
帧间预测单元830利用从解码器810发送来的、针对帧间预测所需的运动矢量的信息等,从存储在存储单元850中的基准帧生成预测块。此外,帧间预测单元830利用本公开的实施方式中提出的亮度补偿来执行帧间预测(将在下文参照图9进行描述)。
加法器840通过将从帧间预测单元830发送的预测块与从解量化和逆变换单元820发送的残差块相加来重构当前块。重构的当前块被存储在存储单元850中,其将用于预测随后的其它块。
另一方面,尽管图8中未示出,但是类似于视频编码设备,根据本公开的实施方式的视频解码设备可包括用于帧内预测的帧内预测单元以及用于对重构块进行滤波以减少由于块单位预测和量化而生成的块效应的解块滤波器。另外,视频解码设备可以支持跳过模式或合并模式。
图9是根据本公开的至少一个实施方式的视频解码设备的帧间预测单元的构造的示图。
根据本公开的实施方式的帧间预测单元可包括参数计算器910、目标像素选择器920和预测解码器930。
参数计算器910基于与当前块相邻的至少一个第一像素以及与利用预测运动矢量获得的至少一个运动预测块相邻并且位于与第一像素对应的位置的第二像素来计算亮度补偿参数。
这里,通过在与视频编码设备共享的预测运动矢量候选当中进行选择来使用用于确定第二像素的预测运动矢量。例如,可利用从视频编码设备发送的预测运动矢量的索引信息来确定预测运动矢量候选当中要用于确定第二像素的预测运动矢量。或者,如果视频编码设备预先安排特定预测运动矢量候选用作预测运动矢量,则预先安排的特定预测运动矢量候选可用作用于确定第二像素的预测运动矢量。
目标像素选择器920利用与至少一个运动预测块相邻的相邻像素,在通过针对当前块的运动矢量确定的至少一个预测块中的像素当中选择要执行亮度补偿的目标像素。即,视频解码设备可利用通过从编码设备接收到的针对运动矢量的信息计算出的当前块的运动矢量来确定至少一个预测块,目标像素选择器920利用与通过预测运动矢量获得的至少一个运动预测块相邻的相邻像素,来在属于所述至少一个预测块的像素当中选择要应用亮度补偿参数的目标像素。
由于根据本公开的实施方式的参数计算器910和目标像素选择器920是分别与上述视频编码设备的参数计算器210和目标像素选择器220对应的元件,并且其功能相同,所以将省略其进一步的详细描述,并且可以应用针对视频编码设备的参数计算器210和目标像素选择器220的以上所有描述。
预测解码器930通过将参数计算器910所计算出的亮度补偿参数应用于在目标像素选择器920中选择的目标像素来针对通过当前块的运动矢量确定的至少一个预测块生成补偿预测块,从而执行预测解码以用于重构当前块。在预测解码器930中,通过将亮度补偿参数应用于目标像素来生成补偿预测块的处理与视频编码设备的预测编码器230相同,将省略其进一步的详细说明。
此外,在预测解码器930中,如果视频编码设备发送用于指示是否应用本公开的实施方式中提出的亮度补偿技术的标志,则参照该标志,仅当该标志指示应用所述亮度补偿技术时,可将亮度补偿参数应用于目标像素。
另外,在预测解码器930中,如果视频编码设备通过将用于指示是否应用针对整个图像的亮度补偿的标志插入切片头中来发送所述标志,并且如果参照切片头中的所述标志,所述标志指示针对整个图像应用亮度补偿,则可将亮度补偿参数应用于预测块中的全部像素,而不限于目标像素选择器920中所选择的目标像素。
另外,如果参数计算器910所计算出的亮度补偿参数偏离预定的标准范围,则预测解码器930可将亮度补偿参数应用于预测块中的全部像素,而不限于目标像素选择器920中所选择的目标像素。
上文仅针对帧间模式说明了利用本公开的实施方式中提出的亮度补偿技术的视频解码方法。然而,本公开的范围不限于此。例如,本公开可应用于跳过模式或合并模式,在这种情况下,亮度补偿参数可应用于预测块中的全部像素,而不限于目标像素选择器920中所选择的目标像素。例如,在跳过模式的情况下,如果从视频编码设备接收到用于指示跳过模式的标志和针对运动矢量的索引信息,则参数计算器910利用接收的索引信息所指示的预测运动矢量来预测运动预测块,然后选择与预测的运动预测块相邻并且位于与第一像素对应的位置处的第二像素,并且基于第一像素和第二像素来计算亮度补偿参数。另外,通过将亮度补偿参数应用于利用针对当前块的运动矢量获得的预测块中的全部像素来生成补偿预测块。
图10是根据本公开的至少一个实施方式的视频编码方法的流程图。
根据本公开的至少一个实施方式的视频编码方法包括以下步骤:参数计算步骤S1010,基于与当前块相邻的至少一个第一像素以及与利用预测运动矢量获得的至少一个运动预测块相邻并且位于与第一像素对应的位置处的第二像素来计算亮度补偿参数;目标像素选择步骤S1020,利用与至少一个运动预测块相邻的相邻像素在利用针对当前块的运动矢量获得的至少一个预测块中的像素当中选择要执行亮度补偿的目标像素;以及预测解码步骤S1030,在通过将亮度补偿参数应用于所选择的目标像素来针对至少一个预测块生成补偿预测块之后执行预测解码。
这里,参数计算步骤S1010、目标像素选择步骤S1020和预测解码步骤S1030分别与上述图9的参数计算器910、目标像素选择器920和预测解码器930所执行的处理相同,将不再重复进一步的详细说明。
上述视频编码方法将能够通过计算机程序来实现并存储在非临时性计算机可读介质中以便于计算机访问和执行。然而,本公开不限于此,所述视频编码方法可通过在执行视频编码方法的单个硬件芯片中具体实现用于执行所述视频编码方法的步骤的相应模块来实现。
尽管为了示意性目的描述了本公开的示例性实施方式,但是本领域技术人员将理解,在不脱离本公开的各种特征的情况下,各种修改、添加和置换是可以的。因此,为了简明和清晰起见,描述了本公开的示例性实施方式。因此,本领域普通技术人员将理解,本公开的范围不由以上明确描述的实施方式限定,而是由权利要求及其等同物限定。
工业实用性
本发明的实施方式应用于针对当前块执行预编码及解码的图像编码及解码技术领域,通过针对属于当前块的像素选择性地应用亮度补偿技术来提高编码效率,在这一点上来说,本发明是很有用的发明。
相关申请的交叉引用
本申请是2012年6月27日提交的PCT/KR2012/005078的国家阶段,该申请基于2011年7月1日提交的韩国专利申请No.10-2011-0065407并要求其优先权。以上列出的申请的公开内容通过引用全部并入本文。

Claims (50)

1.一种视频编码/解码设备,该视频编码/解码设备包括:
编码器,其被配置为
基于与当前块相邻的一个或更多个第一像素以及位于与所述第一像素对应的位置并且与利用预测运动矢量获得的一个或更多个运动预测块相邻的第二像素来计算亮度补偿参数,
利用所述一个或更多个运动预测块的相邻像素来从通过针对所述当前块的运动矢量确定的一个或更多个预测块中的像素中选择用于亮度补偿的目标像素,并且
通过将所述亮度补偿参数应用于所述目标像素来生成所述一个或更多个预测块的补偿预测块,然后对所生成的补偿预测块执行预测编码;以及
解码器,其被配置为
基于所述第一像素和所述第二像素来计算所述亮度补偿参数,
利用所述一个或更多个运动预测块的相邻像素来从通过针对所述当前块的运动矢量确定的所述一个或更多个预测块中的像素中选择用于亮度补偿的目标像素,并且
通过将所述亮度补偿参数应用于所述目标像素来生成所述一个或更多个预测块的补偿预测块,然后对所生成的补偿预测块执行预测解码。
2.一种视频编码设备,该视频编码设备包括:
参数计算器,其被配置为基于与当前块相邻的一个或更多个第一像素以及与利用预测运动矢量获得的运动预测块相邻的一个或更多个第二像素来计算亮度补偿参数,其中,所述一个或更多个第二像素位于与所述一个或更多个第一像素对应的位置;
目标像素选择器,其被配置为利用与所述运动预测块相邻的像素来从通过所述当前块的运动矢量确定的预测块中的像素中选择用于亮度补偿的一个或更多个目标像素;以及
预测编码器,其被配置为通过将所述亮度补偿参数应用于所选择的一个或更多个目标像素来生成所述预测块的补偿预测块,并对所述补偿预测块执行预测编码。
3.根据权利要求1所述的视频编码设备,其中,基于最大阈值和最小阈值来确定所述第一像素,所述最大阈值和所述最小阈值这二者是从所述当前块的相邻像素的值计算出的。
4.根据权利要求3所述的视频编码设备,其中,所述最大阈值和所述最小阈值通过下式计算:
T min N = m N - Δ N
T max N = m N + Δ N
Δ N = 2 S N Σ i = 1 S N | N ( i ) - m N |
其中,TN min是所述最小阈值,TN max是所述最大阈值,SN是所述当前块的相邻像素的总数,N(i)表示所述当前块的相邻像素的相应像素值,并且其中,所述第一像素低于所述最大阈值并且高于所述最小阈值。
5.根据权利要求1所述的视频编码设备,其中,所述亮度补偿参数是加权因子和偏移中的至少一个,基于所述第一像素与所述第二像素之间的像素值的比来计算所述加权因子,并且基于所述第一像素与所述第二像素之间的像素值的差来计算所述偏移。
6.根据权利要求5所述的视频编码设备,其中,在使用单个运动预测块的单向预测的情况下,所述加权因子和所述偏移通过下式计算:
w = Σ i = 1 S N * N * ( i ) / Σ i = 1 S N * C * ( i )
o = Σ i = 1 S N * N * ( i ) - Σ i = 1 S N * C * ( i ) S N *
其中,w是所述加权因子,o是所述偏移,
Figure FDA0000450933960000026
是所述第一像素的数量,N*(i)是所述第一像素的相应像素值,并且C*(i)是所述第二像素的相应像素值。
7.根据权利要求5所述的视频编码设备,其中,在使用两个运动预测块的双向预测的情况下,所述加权因子和所述偏移通过下式计算:
w = Σ i = 1 S N * N * ( i ) / Σ i = 1 S N * C avg * ( i )
o = Σ i = 1 S N * N * ( i ) - Σ i = 1 S N * C avg * ( i ) S N *
C avg * ( i ) = C 0 * ( i ) + C 1 * ( i ) + 1 2
其中,w是所述加权因子,o是所述偏移,
Figure FDA0000450933960000037
是所述第一像素的数量,N*(i)是所述第一像素的相应像素值,C0*(i)是属于所述两个运动预测块中的一个的所述第二像素的相应像素值,并且C1*(i)表示属于所述两个运动预测块中的另一个的所述第二像素的相应像素值。
8.根据权利要求6或7所述的视频编码设备,其中,如果所述加权因子w的分母不为零,则所述预测编码器通过将所述加权因子w应用于所述目标像素来生成所述补偿预测块,如果所述加权因子w的分母为零,则所述预测编码器通过将所述偏移o应用于所述目标像素来生成所述补偿预测块。
9.根据权利要求1所述的视频编码设备,其中,所述预测运动矢量是所述视频编码设备与视频解码设备之间预先安排的运动矢量。
10.根据权利要求9所述的视频编码设备,其中,所述预测运动矢量是以整数像素为单位的运动矢量。
11.根据权利要求1所述的视频编码设备,其中,所述目标像素选择器基于最小阈值和最大阈值来确定所述一个或更多个目标像素,所述最小阈值和所述最大阈值这二者是从与所述运动预测块相邻的一个或更多个像素的值计算出的。
12.根据权利要求11所述的视频编码设备,其中,所述最大阈值和所述最小阈值通过下式计算:
T min c = m c - Δ c
T max c = m c + Δ c
Δ c = 2 S c Σ i = 1 S c | C ( i ) - m c |
其中,下标C是所述运动预测块的相邻像素的集合,TN min是所述最小阈值,TN max是所述最大阈值,mc是属于所述集合C的相邻像素的像素值的平均值,Sc是所述集合C中的元素的数量,C(i)表示属于所述集合C的相邻像素的相应像素值,并且其中,所述目标像素选择器从所述一个或更多个预测块中的像素值高于所述最小阈值且低于所述最大阈值的像素中确定所述目标像素。
13.根据权利要求1所述的视频编码设备,其中,所述预测编码器对用于指示是否通过应用亮度补偿来执行预测编码的标志进行编码。
14.根据权利要求1所述的视频编码设备,其中,提供标志值并将该标志值插入切片头中以指示是否执行全块亮度补偿,并且如果所述标志值指示执行所述全块亮度补偿,则所述预测编码器将所述亮度补偿参数应用于属于所述一个或更多个预测块的全部像素。
15.根据权利要求14所述的视频编码设备,其中,即使预测模式为跳过模式或合并模式,如果所述标志值指示执行所述全块亮度补偿,则将所述亮度补偿参数应用于属于所述一个或更多个预测块的全部像素。
16.根据权利要求1所述的视频编码设备,其中,如果所述亮度补偿参数偏离预定的标准范围,则所述预测编码器将所述亮度补偿参数应用于属于所述一个或更多个预测块的全部像素。
17.一种视频解码设备,该视频解码设备包括:
参数计算器,其被配置为基于与当前块相邻的一个或更多个第一像素以及与利用预测运动矢量获得的运动预测块相邻的一个或更多个第二像素来计算亮度补偿参数,其中,所述一个或更多个第二像素位于与所述一个或更多个第一像素对应的位置;
目标像素选择器,其被配置为利用与所述运动预测块相邻的一个或更多个像素来从通过所述当前块的运动矢量确定的预测块中的像素中选择用于亮度补偿的一个或更多个目标像素;以及
预测解码器,其被配置为通过将所述亮度补偿参数应用于所选择的一个或更多个目标像素来生成所述预测块的补偿预测块,并对所述补偿预测块执行预测解码。
18.根据权利要求17所述的视频解码设备,其中,基于最大阈值和最小阈值来确定所述一个或更多个第一像素,所述最大阈值和所述最小阈值这二者是从与所述当前块相邻的一个或更多个像素的值计算出的。
19.根据权利要求18所述的视频解码设备,其中,所述最大阈值和所述最小阈值通过下式计算:
T min N = m N - Δ N
T max N = m N + Δ N
Δ N = 2 S N Σ i = 1 S N | N ( i ) - m N |
其中,TN min是所述最小阈值,TN max是所述最大阈值,SN是所述当前块的相邻像素的总数,N(i)表示所述当前块的相邻像素的相应像素值,并且其中,所述第一像素低于所述最大阈值且高于所述最小阈值。
20.根据权利要求17所述的视频解码设备,其中,所述亮度补偿参数是加权因子和偏移中的至少一个,基于所述第一像素与所述第二像素之间的像素值的比来计算所述加权因子,并且基于所述第一像素与所述第二像素之间的像素值的差来计算所述偏移。
21.根据权利要求20所述的视频解码设备,其中,在使用单个运动预测块的单向预测的情况下,所述加权因子和所述偏移通过下式计算:
w = Σ i = 1 S N * N * ( i ) / Σ i = 1 S N * C * ( i )
o = Σ i = 1 S N * N * ( i ) - Σ i = 1 S N * C * ( i ) S N *
其中,w是所述加权因子,o是所述偏移,
Figure FDA0000450933960000059
是所述第一像素的数量,N*(i)是所述第一像素的相应像素值,并且C*(i)是所述第二像素的相应像素值。
22.根据权利要求20所述的视频解码设备,其中,在使用两个运动预测块的双向预测的情况下,所述加权因子和所述偏移通过下式计算:
w = Σ i = 1 S N * N * ( i ) / Σ i = 1 S N * C avg * ( i )
o = Σ i = 1 S N * N * ( i ) - Σ i = 1 S N * C avg * ( i ) S N *
C avg * ( i ) = C 0 * ( i ) + C 1 * ( i ) + 1 2
其中,w是所述加权因子,o是所述偏移,
Figure FDA0000450933960000064
是所述第一像素的数量,N*(i)是所述第一像素的相应像素值,C0*(i)是属于所述两个运动预测块中的一个的所述第二像素的相应像素值,并且C1*(i)表示属于所述两个运动预测块中的另一个的所述第二像素的相应像素值。
23.根据权利要求21或22所述的视频解码设备,其中,如果所述加权因子w的分母不为零,则所述预测解码器通过将所述加权因子w应用于所述目标像素来生成所述补偿预测块,如果所述加权因子w的分母为零,则所述预测解码器通过将所述偏移o应用于所述目标像素来生成所述补偿预测块。
24.根据权利要求17所述的视频解码设备,其中,所述预测运动矢量是所述视频解码设备与视频编码设备之间预先安排的运动矢量。
25.根据权利要求24所述的视频解码设备,其中,所述预测运动矢量是以整数像素为单位的运动矢量。
26.根据权利要求17所述的视频解码设备,其中,所述目标像素选择器基于最小阈值和最大阈值来确定所述一个或更多个目标像素,所述最小阈值和所述最大阈值这二者是从与所述运动预测块相邻的一个或更多个像素的值计算出的。
27.根据权利要求26所述的视频解码设备,其中,所述最大阈值和所述最小阈值通过下式计算:
T min c = m c - Δ c
T max c = m c + Δ c
Δ c = 2 S c Σ i = 1 S c | C ( i ) - m c |
其中,下标C是所述运动预测块的相邻像素的集合,TN min是所述最小阈值,TN max是所述最大阈值,mc是属于所述集合C的相邻像素的像素值的平均值,Sc是所述集合C中的元素的数量,C(i)表示属于所述集合C的相邻像素的相应像素值,并且其中,所述目标像素选择器从所述一个或更多个预测块中的像素值高于所述最小阈值且低于所述最大阈值的像素中确定所述目标像素。
28.根据权利要求17所述的视频解码设备,其中,响应于从视频编码设备发送并且指示通过应用亮度补偿来进行预测编码的标志,所述预测解码器将所述亮度补偿参数应用于所选择的一个或更多个目标像素。
29.根据权利要求17所述的视频解码设备,其中,响应于包含在从视频编码设备接收到的切片头中并且指示全块亮度补偿的标志值,所述预测解码器将所述亮度补偿参数应用于属于所述预测块的全部像素。
30.根据权利要求29所述的视频解码设备,其中,在预测模式为跳过模式或合并模式的情况下,如果所述切片头中的所述标志值指示执行所述全块亮度补偿,则所述预测解码器将所述亮度补偿参数应用于属于所述预测块的全部像素。
31.根据权利要求17所述的视频解码设备,其中,如果所述亮度补偿参数偏离预定的标准范围,则所述预测解码器将所述亮度补偿参数应用于属于所述预测块的全部像素。
32.一种视频编码/解码方法,该视频编码/解码方法包括以下步骤:
通过以下步骤执行编码:
基于与当前块相邻的一个或更多个第一像素以及位于与所述第一像素对应的位置并且与利用预测运动矢量获得的一个或更多个运动预测块相邻的第二像素来计算亮度补偿参数,
利用所述一个或更多个运动预测块的相邻像素来从通过针对所述当前块的运动矢量确定的一个或更多个预测块中的像素中选择用于亮度补偿的目标像素,以及
通过将所述亮度补偿参数应用于所述目标像素来生成所述一个或更多个预测块的补偿预测块,然后对所生成的补偿预测块执行预测编码;以及
通过以下步骤执行解码:
基于所述第一像素和所述第二像素来计算所述亮度补偿参数,
利用所述一个或更多个运动预测块的相邻像素来从通过针对所述当前块的所述运动矢量确定的所述一个或更多个预测块中的像素中选择用于亮度补偿的所述目标像素,以及
通过将所述亮度补偿参数应用于所述目标像素来生成所述一个或更多个预测块的补偿预测块,然后对所生成的补偿预测块执行预测解码。
33.一种视频编码方法,该视频编码方法包括以下步骤:
基于与当前块相邻的一个或更多个第一像素以及与利用预测运动矢量获得的运动预测块相邻的一个或更多个第二像素来计算亮度补偿参数,其中,所述一个或更多个第二像素位于与所述一个或更多个第一像素对应的位置;
利用与所述运动预测块相邻的一个或更多个像素来从通过所述当前块的运动矢量确定的预测块中的像素中选择用于亮度补偿的一个或更多个目标像素;以及
通过将所述亮度补偿参数应用于所选择的一个或更多个目标像素来生成所述预测块的补偿预测块,并对所述补偿预测块执行预测编码。
34.根据权利要求33所述的视频编码方法,其中,基于最大阈值和最小阈值来确定所述第一像素,所述最大阈值和所述最小阈值这二者是从所述当前块的相邻像素的值计算出的。
35.根据权利要求33所述的视频编码方法,其中,所述亮度补偿参数是加权因子和偏移中的至少一个,基于所述第一像素与所述第二像素之间的像素值的比来计算所述加权因子,基于所述第一像素与所述第二像素之间的像素值的差来计算所述偏移。
36.根据权利要求33所述的视频编码方法,其中,选择所述目标像素的步骤基于最小阈值和最大阈值来确定所述目标像素,所述最小阈值和所述最大阈值这二者是从所述一个或更多个运动预测块的相邻像素的值计算出的。
37.根据权利要求33所述的视频编码方法,其中,执行预测编码的步骤对用于指示是否通过应用亮度补偿来执行预测编码的标志进行编码。
38.根据权利要求33所述的视频编码方法,其中,提供标志值并将该标志值插入切片头中以指示是否执行全块亮度补偿,并且如果所述标志值指示执行所述全块亮度补偿,则执行预测编码的步骤将所述亮度补偿参数应用于属于所述预测块的全部像素。
39.根据权利要求38所述的视频编码方法,其中,即使预测模式为跳过模式或合并模式,如果所述标志值指示执行所述全块亮度补偿,则将所述亮度补偿参数应用于属于所述一个或更多个预测块的全部像素。
40.根据权利要求33所述的视频编码方法,其中,如果所述亮度补偿参数偏离预定的标准范围,则执行预测编码的步骤将所述亮度补偿参数应用于属于所述预测块的全部像素。
41.一种视频解码方法,该视频解码方法包括以下步骤:
基于与当前块相邻的一个或更多个第一像素以及与利用预测运动矢量获得的运动预测块相邻的一个或更多个第二像素来计算亮度补偿参数,其中,所述一个或更多个第二像素位于与所述一个或更多个第一像素对应的位置;
利用与所述运动预测块相邻的一个或更多个像素来从通过所述当前块的运动矢量确定的预测块中的像素中选择用于亮度补偿的一个或更多个目标像素;以及
通过将所述亮度补偿参数应用于所选择的一个或更多个目标像素来生成所述预测块的补偿预测块,并对所述补偿预测块执行预测解码。
42.根据权利要求41所述的视频解码方法,其中,基于最大阈值和最小阈值来确定所述第一像素,所述最大阈值和所述最小阈值这二者是从所述当前块的相邻像素的值计算出的。
43.根据权利要求41所述的视频解码方法,其中,所述亮度补偿参数是加权因子和偏移中的至少一个,基于所述第一像素与所述第二像素之间的像素值的比来计算所述加权因子,并且基于所述第一像素与所述第二像素之间的像素值的差来计算所述偏移。
44.根据权利要求41所述的视频解码方法,其中,选择所述目标像素的步骤基于最小阈值和最大阈值来确定所述目标像素,所述最小阈值和所述最大阈值这二者是从所述一个或更多个运动预测块的相邻像素的值计算出的。
45.根据权利要求41所述的视频解码方法,其中,响应于从视频编码设备发送并且指示通过应用亮度补偿来进行预测编码的标志,执行预测解码的步骤将所述亮度补偿参数应用于所选择的一个或更多个目标像素。
46.根据权利要求41所述的视频解码方法,其中,响应于包含在从视频编码设备接收到的切片头中并且指示全块亮度补偿的标志值,执行预测解码的步骤将所述亮度补偿参数应用于属于所述预测块的全部像素。
47.根据权利要求46所述的视频解码方法,其中,在预测模式为跳过模式或合并模式的情况下,如果所述切片头中的所述标志值指示执行所述全块亮度补偿,则执行预测解码的步骤将所述亮度补偿参数应用于属于所述一个或更多个预测块的全部像素。
48.根据权利要求41所述的视频解码方法,其中,如果所述亮度补偿参数偏离预定的标准范围,则执行预测解码的步骤将所述亮度补偿参数应用于属于所述预测块的全部像素。
49.一种存储有包括计算机可执行指令的计算机程序的非临时性计算机可读介质,所述指令在处理器中执行时使得该处理器执行视频编码方法,该视频编码方法包括:
基于与当前块相邻的一个或更多个第一像素以及位于与所述第一像素对应的位置并且与利用预测运动矢量获得的一个或更多个运动预测块相邻的第二像素来计算亮度补偿参数;
利用所述一个或更多个运动预测块的相邻像素来从通过针对所述当前块的运动矢量确定的一个或更多个预测块中的像素中选择用于亮度补偿的目标像素;以及
通过将所述亮度补偿参数应用于所选择的目标像素来生成所述一个或更多个预测块的补偿预测块,然后对所生成的补偿预测块执行预测编码。
50.一种存储有包括计算机可执行指令的计算机程序的非临时性计算机可读介质,所述指令在处理器中执行时使得该处理器执行视频解码方法,该视频解码方法包括:
基于与当前块相邻的一个或更多个第一像素以及位于与所述第一像素对应的位置并且与利用预测运动矢量获得的一个或更多个运动预测块相邻的第二像素来计算亮度补偿参数;
利用所述一个或更多个运动预测块的相邻像素来从通过针对所述当前块的运动矢量确定的一个或更多个预测块中的像素中选择用于亮度补偿的目标像素;以及
通过将所述亮度补偿参数应用于所选择的目标像素来生成所述一个或更多个预测块的补偿预测块,然后对所生成的补偿预测块执行预测解码。
CN201280032894.1A 2011-07-01 2012-06-27 进行图像编码和解码的设备和方法 Active CN103688543B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
KR1020110065407A KR101444675B1 (ko) 2011-07-01 2011-07-01 영상 부호화 및 복호화 방법과 장치
KR10-2011-0065407 2011-07-01
PCT/KR2012/005078 WO2013005941A2 (ko) 2011-07-01 2012-06-27 영상 부호화 및 복호화 방법과 장치

Publications (2)

Publication Number Publication Date
CN103688543A true CN103688543A (zh) 2014-03-26
CN103688543B CN103688543B (zh) 2017-03-22

Family

ID=47437529

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201280032894.1A Active CN103688543B (zh) 2011-07-01 2012-06-27 进行图像编码和解码的设备和方法

Country Status (4)

Country Link
US (1) US9516313B2 (zh)
KR (1) KR101444675B1 (zh)
CN (1) CN103688543B (zh)
WO (1) WO2013005941A2 (zh)

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107810635A (zh) * 2015-06-16 2018-03-16 Lg 电子株式会社 图像编译系统中基于照度补偿预测块的方法和设备
CN109429071A (zh) * 2017-08-23 2019-03-05 富士通株式会社 图像编码装置、图像解码装置及图像处理方法
WO2019154417A1 (en) * 2018-02-12 2019-08-15 Mediatek Inc. Method and apparatus of current picture referencing for video coding using adaptive motion vector resolution and sub-block prediction mode
CN110521207A (zh) * 2017-03-13 2019-11-29 韩国电子通信研究院 用于视频编码/解码的基于非典型块的运动预测和补偿的方法及其装置
CN110710213A (zh) * 2017-04-24 2020-01-17 Sk电信有限公司 用于估计运动补偿的光流的方法及装置
WO2020038232A1 (zh) * 2018-08-21 2020-02-27 华为技术有限公司 一种图像块的运动信息的预测方法及装置
CN111194553A (zh) * 2017-10-05 2020-05-22 交互数字Vc控股公司 用于视频编码和解码中的自适应照明补偿的方法和装置
CN112188195A (zh) * 2014-08-12 2021-01-05 奥兰治 图像编码/解码方法和设备以及相应的计算机可读介质
CN112740678A (zh) * 2018-09-25 2021-04-30 索尼公司 编码装置、编码方法、解码装置和解码方法
CN113068036A (zh) * 2021-03-17 2021-07-02 上海哔哩哔哩科技有限公司 用于样点自适应补偿的方法及装置、设备和介质
CN113170123A (zh) * 2018-12-08 2021-07-23 高通股份有限公司 照明补偿与帧间预测的相互作用
CN113170141A (zh) * 2018-12-03 2021-07-23 华为技术有限公司 帧间预测方法和相关装置
CN113573053A (zh) * 2015-01-13 2021-10-29 英迪股份有限公司 视频编解码设备、方法和计算机可读记录介质
CN115278232A (zh) * 2015-11-11 2022-11-01 三星电子株式会社 对视频进行解码的方法和对视频进行编码的方法
CN111869216B (zh) * 2018-02-12 2024-05-28 联发科技股份有限公司 用于视频编解码系统的语法处理的方法和装置

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FI3907999T3 (fi) * 2010-09-02 2023-12-14 Lg Electronics Inc Inter-ennustus
US9438906B2 (en) 2011-03-03 2016-09-06 Sun Patent Trust Method of encoding an image into a coded image, method of decoding a coded image, and apparatuses thereof
WO2014163454A1 (ko) * 2013-04-05 2014-10-09 삼성전자주식회사 휘도차를 보상하기 위한 인터 레이어 비디오 부호화 방법 및 그 장치, 비디오 복호화 방법 및 그 장치
KR102105323B1 (ko) * 2013-04-15 2020-04-28 인텔렉추얼디스커버리 주식회사 객체 기반 적응적 밝기 보상 방법 및 장치
GB2596496B (en) 2015-09-11 2022-05-18 Kt Corp Method and device for processing video signal
WO2018008905A1 (ko) 2016-07-05 2018-01-11 주식회사 케이티 비디오 신호 처리 방법 및 장치
EP3503553A4 (en) * 2016-09-22 2020-07-29 LG Electronics Inc. -1- INTER-PREDICTION PROCESS AND APPARATUS BASED ON LIGHTING COMPENSATION IN AN IMAGE CODING SYSTEM
WO2018093184A1 (ko) * 2016-11-18 2018-05-24 주식회사 케이티 비디오 신호 처리 방법 및 장치
US20200267385A1 (en) * 2017-07-06 2020-08-20 Kaonmedia Co., Ltd. Method for processing synchronised image, and apparatus therefor
WO2019117613A1 (ko) * 2017-12-13 2019-06-20 삼성전자주식회사 로컬 휘도 보상에 의한 비디오 복호화 방법 및 장치, 로컬 휘도 보상에 의한 비디오 부호화 방법 및 장치
CN111630855A (zh) * 2018-01-16 2020-09-04 Vid拓展公司 基于局部照明补偿的运动补偿双向预测
EP3777174A4 (en) 2018-03-30 2021-12-22 Hulu, LLC TEMPLATE-BASED ADAPTIVE WEIGHTED BI-PRDICTION FOR VIDEO ENCODING
US11831900B2 (en) * 2021-03-29 2023-11-28 Ati Technologies Ulc Video encoding/decoding using detected pattern of pixel intensity differences

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101023673A (zh) * 2004-09-16 2007-08-22 汤姆逊许可证公司 具有利用局部亮度变化的加权预测的视频编解码器
CN101536031A (zh) * 2006-09-29 2009-09-16 汤姆森许可贸易公司 用于基于像素的自适应滤波的自动参数估计
US20100027666A1 (en) * 2008-07-30 2010-02-04 Sony Corporation Motion vector detecting apparatus, motion vector detecting method, and program

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0625853B1 (en) * 1993-05-21 1999-03-03 Nippon Telegraph And Telephone Corporation Moving image encoder and decoder
KR100763182B1 (ko) * 2005-05-02 2007-10-05 삼성전자주식회사 다계층 기반의 가중 예측을 이용한 비디오 코딩 방법 및장치
CN101385346B (zh) * 2006-02-17 2012-05-30 汤姆森许可贸易公司 解决局部亮度变化的视频编码设备和方法
KR101408698B1 (ko) * 2007-07-31 2014-06-18 삼성전자주식회사 가중치 예측을 이용한 영상 부호화, 복호화 방법 및 장치
CN101911705B (zh) * 2007-12-28 2012-08-29 夏普株式会社 运动图像编码装置及运动图像解码装置
CN101911708B (zh) * 2008-01-10 2016-03-09 汤姆森特许公司 帧内预测视频的照明补偿方法和装置
US8406569B2 (en) * 2009-01-19 2013-03-26 Sharp Laboratories Of America, Inc. Methods and systems for enhanced dynamic range images and video from multiple exposures
US9161058B2 (en) * 2010-03-27 2015-10-13 Texas Instruments Incorporated Method and system for detecting global brightness change for weighted prediction in video encoding
US20120207214A1 (en) * 2011-02-11 2012-08-16 Apple Inc. Weighted prediction parameter estimation

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101023673A (zh) * 2004-09-16 2007-08-22 汤姆逊许可证公司 具有利用局部亮度变化的加权预测的视频编解码器
CN101536031A (zh) * 2006-09-29 2009-09-16 汤姆森许可贸易公司 用于基于像素的自适应滤波的自动参数估计
US20100027666A1 (en) * 2008-07-30 2010-02-04 Sony Corporation Motion vector detecting apparatus, motion vector detecting method, and program

Cited By (31)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112188195A (zh) * 2014-08-12 2021-01-05 奥兰治 图像编码/解码方法和设备以及相应的计算机可读介质
CN112188195B (zh) * 2014-08-12 2024-04-12 奥兰治 图像编码/解码方法和设备以及相应的计算机可读介质
CN113573051B (zh) * 2015-01-13 2024-03-01 杜比实验室特许公司 视频编解码设备、方法和计算机可读记录介质
CN113573052A (zh) * 2015-01-13 2021-10-29 英迪股份有限公司 视频编解码设备、方法和计算机可读记录介质
CN113573053B (zh) * 2015-01-13 2023-11-28 杜比实验室特许公司 视频编解码设备、方法和计算机可读记录介质
CN113573051A (zh) * 2015-01-13 2021-10-29 英迪股份有限公司 视频编解码设备、方法和计算机可读记录介质
CN113573053A (zh) * 2015-01-13 2021-10-29 英迪股份有限公司 视频编解码设备、方法和计算机可读记录介质
CN113573052B (zh) * 2015-01-13 2023-12-05 杜比实验室特许公司 视频编解码设备、方法和计算机可读记录介质
US10477231B2 (en) 2015-06-16 2019-11-12 Lg Electronics Inc. Method and device for predicting block on basis of illumination compensation in image coding system
CN107810635A (zh) * 2015-06-16 2018-03-16 Lg 电子株式会社 图像编译系统中基于照度补偿预测块的方法和设备
CN115278232A (zh) * 2015-11-11 2022-11-01 三星电子株式会社 对视频进行解码的方法和对视频进行编码的方法
CN110521207A (zh) * 2017-03-13 2019-11-29 韩国电子通信研究院 用于视频编码/解码的基于非典型块的运动预测和补偿的方法及其装置
US11997292B2 (en) 2017-04-24 2024-05-28 Sk Telecom Co., Ltd. Method and apparatus for estimating optical flow for motion compensation
CN110710213A (zh) * 2017-04-24 2020-01-17 Sk电信有限公司 用于估计运动补偿的光流的方法及装置
CN109429071B (zh) * 2017-08-23 2023-09-08 富士通株式会社 图像编码装置、图像解码装置及图像处理方法
CN109429071A (zh) * 2017-08-23 2019-03-05 富士通株式会社 图像编码装置、图像解码装置及图像处理方法
CN111194553A (zh) * 2017-10-05 2020-05-22 交互数字Vc控股公司 用于视频编码和解码中的自适应照明补偿的方法和装置
CN111869216B (zh) * 2018-02-12 2024-05-28 联发科技股份有限公司 用于视频编解码系统的语法处理的方法和装置
CN111869216A (zh) * 2018-02-12 2020-10-30 联发科技股份有限公司 利用自适应运动向量分辨率和子块预测模式进行视频编解码的当前图像参考的方法和装置
US11109056B2 (en) 2018-02-12 2021-08-31 Mediatek Inc. Method and apparatus of current picture referencing for video coding using adaptive motion vector resolution and sub-block prediction mode
WO2019154417A1 (en) * 2018-02-12 2019-08-15 Mediatek Inc. Method and apparatus of current picture referencing for video coding using adaptive motion vector resolution and sub-block prediction mode
GB2585304A (en) * 2018-02-12 2021-01-06 Mediatek Inc Method and apparatus of current picture referencing for video coding using adaptive motion vector resolution and sub-block prediction mode
AU2019217409B2 (en) * 2018-02-12 2021-04-22 Mediatek Inc. Method and apparatus of current picture referencing for video coding using adaptive motion vector resolution and sub-block prediction mode
GB2585304B (en) * 2018-02-12 2023-03-08 Mediatek Inc Method and apparatus of current picture referencing for video coding using adaptive motion vector resolution and sub-block prediction mode
WO2020038232A1 (zh) * 2018-08-21 2020-02-27 华为技术有限公司 一种图像块的运动信息的预测方法及装置
CN112740678A (zh) * 2018-09-25 2021-04-30 索尼公司 编码装置、编码方法、解码装置和解码方法
CN113170141B (zh) * 2018-12-03 2023-03-03 华为技术有限公司 帧间预测方法和相关装置
US11601667B2 (en) 2018-12-03 2023-03-07 Huawei Technologies Co., Ltd. Inter prediction method and related apparatus
CN113170141A (zh) * 2018-12-03 2021-07-23 华为技术有限公司 帧间预测方法和相关装置
CN113170123A (zh) * 2018-12-08 2021-07-23 高通股份有限公司 照明补偿与帧间预测的相互作用
CN113068036A (zh) * 2021-03-17 2021-07-02 上海哔哩哔哩科技有限公司 用于样点自适应补偿的方法及装置、设备和介质

Also Published As

Publication number Publication date
CN103688543B (zh) 2017-03-22
KR20130003816A (ko) 2013-01-09
KR101444675B1 (ko) 2014-10-01
US9516313B2 (en) 2016-12-06
WO2013005941A3 (ko) 2013-03-14
US20140112392A1 (en) 2014-04-24
WO2013005941A2 (ko) 2013-01-10

Similar Documents

Publication Publication Date Title
CN103688543A (zh) 进行图像编码和解码的设备和方法
US9781443B2 (en) Motion vector encoding/decoding method and device and image encoding/decoding method and device using same
US10491920B2 (en) Method and apparatus for encoding/decoding the motion vectors of a plurality of reference pictures, and apparatus and method for image encoding/decoding using same
CN102835111B (zh) 使用先前块的运动矢量作为当前块的运动矢量来对图像进行编码/解码的方法和设备
CN103329537B (zh) 一种视频解码的设备和方法
US9973750B2 (en) Method and device for image encoding/decoding using block split prediction
CN109479149A (zh) 视频信号处理方法和设备
CN104041048A (zh) 利用跳过模式进行视频编码和解码的方法和设备
KR20110045908A (ko) 공간 분할을 이용한 움직임 벡터 부호화/복호화 방법 및 장치와 그를 이용한 영상 부호화/복호화 방법 및 장치
US9491480B2 (en) Motion vector encoding/decoding method and apparatus using a motion vector resolution combination, and image encoding/decoding method and apparatus using same
CN102598670A (zh) 参考多个帧对图像进行编码/解码的方法和设备
CN103650499A (zh) 通过高速编码单位模式决策进行编码/解码的方法及设备
CN105847833B (zh) 视频解码装置
US20130202047A1 (en) Apparatus and method for video encoding/decoding
CN105025298A (zh) 对图像进行编码/解码的方法和设备
JP6435822B2 (ja) 動画像符号化装置、動画像符号化方法及び動画像符号化用コンピュータプログラム
KR20120138426A (ko) 교차 삽입법을 이용한 향상된 움직임 백터 예측 방법 및 장치
KR20120041440A (ko) 전역움직임을 기반하여 결정된 부호화구조를 이용한 영상 부호화/복호화 방법 및 장치
CN105025300A (zh) 对图像进行编码/解码的方法和设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant