CN111279702A - 视频编码方法和装置及视频解码方法和装置 - Google Patents

视频编码方法和装置及视频解码方法和装置 Download PDF

Info

Publication number
CN111279702A
CN111279702A CN201880069775.0A CN201880069775A CN111279702A CN 111279702 A CN111279702 A CN 111279702A CN 201880069775 A CN201880069775 A CN 201880069775A CN 111279702 A CN111279702 A CN 111279702A
Authority
CN
China
Prior art keywords
block
current
sub
coding unit
image decoding
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
CN201880069775.0A
Other languages
English (en)
Inventor
朴银姬
朴慜祐
李善一
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of CN111279702A publication Critical patent/CN111279702A/zh
Withdrawn legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/583Motion compensation with overlapping blocks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/12Selection from among a plurality of transforms or standards, e.g. selection between discrete cosine transform [DCT] and sub-band transform or selection between H.263 and H.264
    • H04N19/122Selection of transform size, e.g. 8x8 or 2x4x8 DCT; Selection of sub-band transforms of varying structure or type
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Discrete Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本公开提供用于通过使用重复块运动补偿来预测在图像中包括的编码单元的图像解码/编码方法和装置。图像解码方法包括:确定在当前编码单元中包括的至少一个子块;基于在至少一个子块中包括的当前子块的运动矢量获得当前子块的当前预测因子;基于邻近子块的运动矢量来获得针对当前子块的邻近预测因子;基于针对当前编码单元的所述当前子块的位置确定包括针对当前预测因子的加权值的当前加权值块和包括针对邻近预测因子的加权值的邻近预测因子块;将当前加权值块应用于当前预测因子并将邻近加权值应用于邻近预测因子,来获得提高的当前预测因子;以及基于提高的当前预测因子对所述当前编码单元进行解码。

Description

视频编码方法和装置及视频解码方法和装置
技术领域
根据一实施例的方法和装置可以使用在图像中包括的各种形式的编码单元来对图像进行编码或解码。
背景技术
随着能够播放及存储高清晰度或高画质图像内容的硬件的开发与普及,对用于有效地编码或解码高清晰度或高画质图像内容的编解码器(codec)的需要在逐渐增加。所编码的图像内容可以通过进行解码来被播放。目前在实施用于有效地压缩这些高清晰度或高画质的图像内容的各种方法。例如,通过使用任意的方法处理所要进行编码的图像的过程实施有效的图像压缩方法。
在视频编码和解码方法中,可以将一个图像划分为多个块以对图像进行编码,也可以使用帧间预测(inter prediction)模式或帧内预测(intra prediction)模式来对各个块进行预测编码。
帧间预测为通过除去画面之间的时间上的重复性来压缩图像的方法。编码装置可以使用至少一个参照画面来对当前画面的每个块进行帧间预测。并且,编码装置可以使用预定的评估函数来在参照画面的预定的检索范围内检索与当前块最相似的参照块。还有,编码装置可以使用在参照画面中与当前块最相似的参照块来对当前块进行帧间预测。并且,编码装置可以获得最相似的参照块与当前块之间的位置的差作为运动信息,并将运动信息传输到解码装置。
发明内容
技术问题
可以使用当前块的邻近块以更高效地执行帧间预测。重叠块运动补偿(Overlapped Block Motion Compensation)为使用邻近块的运动信息来更加正确地预期当前块的技术中的一个。然而,现有的重叠块运动补偿的问题在于其不能被应用于具有各种尺寸的块。
并且,在现有的重叠块运动补偿中,是否应用重叠块运动补偿取决于预定的条件。因此,根据预定条件的复杂性很高。例如,根据编码单元的尺寸是否大于阈值、预测模式是否为合并模式、预测模式是否为帧率上转换模式(FRUC:Frame Rate Up Conversion)模式、预测模式是否为先进时间运动矢量预测(ATMVP:Advanced Temporal Motion VectorPrediction)模式、预测模式是否为Affine mode、或用于获得改善的运动信息的子块的尺寸,来确定是否要执行重叠块运动补偿。
并且,现有的重叠块运动补偿是使用当前块和上侧块的运动信息、当前块和左侧块的运动信息、当前块和右侧块的运动信息和当前块和下侧块的运动信息中的可使用的至少一个来执行的。例如,当可使用上侧块的运动信息时,图像解码装置100基于上侧块的运动信息和当前块的运动信息来获得提高的预测因子。并且,当可使用左侧块的运动信息时,基于上侧块的运动信息和提高的预测因子来修改提高的预测因子。根据同样的方式,图像解码装置100根据右侧块的运动信息和下侧块的运动信息的使用可能性来修改提高的预测因子。换言之,图像解码装置100可以根据上侧块的运动信息、左侧块的运动信息、右侧块的运动信息和下侧块的运动信息的使用可能性执行不同次数的重复块运动矢量。因此存在针对邻近块的当前块的加权值根据执行重叠块运动补偿的次数而变化的问题。
技术方案
根据本公开的一实施例的重叠块运动补偿(OBMC:Overlapped Block MotionCompensation)来对图像进行解码方法,其特征在于包括:确定在当前编码单元中包括的至少一个子块;基于在至少一个子块中包括的当前子块的运动矢量来获得当前子块的当前预测因子(current predictor);基于包括当前子块的上侧子块、左侧子块、右侧子块和下侧子块中的至少一个的邻近子块的运动矢量来获得包括针对当前子块的上侧预测因子、左侧预测因子、右侧预测因子和下侧预测因子中至少一个的邻近预测因子;基于针对当前编码单元的当前子块的位置确定包括针对当前预测因子的加权值的当前加权值块及包括针对邻近预测因子的加权值的邻近加权值块;将当前加权值块应用于当前预测因子并将邻近加权值块应用于邻近预测因子来获得提高的当前预测因子;以及基于提高的当前预测因子对当前编码单元进行解码,其中,邻近加权值块包括上侧加权值块、左侧加权值块、右侧加权值块和下侧加权值块中的至少一个。
根据本公开的一实施例,其特征在于,当前子块的尺寸为2×2、4×4及8×8中的一个。
根据本公开的一实施例的图像解码方法,其特征在于包括:当当前编码单元的宽度和幅度的最小值或最大值大于或等于阈值时将当前子块的尺寸确定为8×8;当当前编码单元的宽度和幅度的最小值或最大值小于阈值时,将当前子块的尺寸确定为4×4。
根据本公开的一实施例的图像解码方法包括:确定邻近子块的运动矢量是否可用;当邻近子块的运动矢量不可用时获得当前预测因子作为邻近预测因子。
根据本公开的一实施例的图像解码方法,其特征在于包括;当当前子块不位于当前编码单元的边界(boundary)时确定第一当前加权值块和第一邻近加权值块;当当前子块位于当前编码单元的边界时确定第二当前加权值块和第二邻近第二加权值块,其中,在第一当前加权值块中包括的加权值中的至少一个不同于在第二当前加权值块中包括的加权值中的至少一个,在第一邻近加权值块中包括的加权值中的至少一个不同于在第二邻近加权值块中包括的加权值中的至少一个。
根据本公开的一实施例的图像解码方法,其特征在于包括:当当前子块不位于当前子块的边界时,确定第一当前加权值块并确定第一上侧加权值块;当当前子块位于当前编码单元的上侧边界时,确定第二当前加权值块并确定第二上侧加权值块,其中,在第二当前加权值块中包括的上侧的加权值小于或等于在第一当前加权值块中包括的上侧的加权值,在第二上侧加权值块中包括的上侧的加权值大于或等于在第一上侧加权值块中包括的上侧的加权值。
根据本公开的一个实施例的图像解码方法,其特征在于包括:当当前子块不位于当前编码单元的边界时,确定第一当前加权值块并确定第一左侧加权值块;当当前子块位于当前编码单元的左侧边界时,确定第二当前加权值块和确定第二左侧加权值块,其中,在第二当前加权值块中包括的左侧的加权值小于在第一当前加权值块中包括的左侧的加权值,在第二左侧加权值块中包括的左侧的加权值大于或等于第在一左侧加权值块中包括的左侧的加权值。
根据本公开的一实施例的图像解码方法,其特征在于包括:当当前子块不位于当前编码单元时,确定第一确定加权值块并确定第一右侧加权值块;当当前子块位于当前编码单元的右侧边界时,确定第二当前加权值块并确定第二右侧加权值块,其中,在第二当前加权值块中包括的右侧的加权值小于或等于在第一当前加权值块中包括的右侧的加权值,在第二右侧加权值块中包括的右侧的加权值大于或等于在第一右侧加权值块中包括的右侧的加权值。
根据本公开的一实施例的图像解码方法,其特征在于包括:当当前子块不位于当前编码单元的边界时,确定第一当前加权值块并确定第一下侧加权值块;当当前子块位于当前编码单元的下侧边界时,确定第二当前加权值块并确定第二下侧加权值块,其中,在第二当前加权值块中包括的下侧的加权值小于或等于在第一当前加权值块中包括的下侧的加权值,在第二下侧加权值块中包括的下侧的加权值大于或等于在第一下侧加权值块中包括的下侧的加权值。
图像解码方法,其特征在于还包括:当在当前编码单元中包括的至少一个子块的运动矢量全部相同,左侧编码单元被恢复而右侧编码单元没有被恢复时,确定对当前编码单元的左侧边界子块和边界子块执行重叠块运动补偿;当在当前编码单元中包括的至少一个子块的运动矢量全部相同,左侧编码单元没有被恢复而右侧编码单元被恢复时,确定对当前编码单元的右侧边界子块和上侧边界子块执行重复块运动补偿;当在当前编码单元中包括的至少一个子块的运动矢量全部相同,左侧编码单元和右侧编码单元被恢复时,确定对当前编码单元的右侧边界子块、左侧边界子块和上侧边界子块执行重叠块运动补偿;当在当前编码单元中包括的至少一个子块的运动矢量全部相同,左侧编码单元和右侧编码单元没有被恢复时,确定对当前编码单元的上侧边界子块执行重复块运动补偿。
根据本公开的图像解码方法,其特征在于包括:当在当前编码单元中包括的第一子块的参照图像和与第一子块邻近的第二子块的参照图像不同时,确定对第一子块执行重叠块运动补偿。
根据本公开的一实施例的图像解码方法,其特征在于包括:当第一子块的参照图像与第二子块的参照图像彼此相同,第一子块的运动矢量与第二子块的运动矢量之间的差大于阈值时,确定对第一子块执行重叠块运动补偿。
根据本公开的一实施例的图像解码方法,其特征在于包括:基于当前子块的运动矢量与邻近子块的运动矢量之间的差确定在当前加权值块和邻近加权值块中包括的加权值。
根据本公开的一实施例的一种用于使用重叠块运动补偿(OBMC:OverlappedBlock Motion Compensation)来对图像进行解码的装置包括至少一个处理器,其中,至少一个处理器被配置为:确定在当前编码单元中包括的至少一个子块;基于在至少一个子块中包括的当前子块的运动矢量获得当前子块的当前预测因子;基于包括当前子块的上侧子块、左侧子块、右侧子块和下侧子块中的至少一个的邻近子块的运动矢量来获得邻近预测因子,邻近预测因子包括针对当前子块的上侧预测因子、左侧预测因子、右侧预测因子和下侧预测因子中的至少一个;基于针对当前编码单元的当前子块的位置确定包括针对当前预测因子的加权值的当前加权值块和包括针对邻近预测因子的加权值的邻近加权值块;将当前加权值块应用于当前预测因子并将邻近加权值块应用于邻近预测因子,来获得提高的当前预测因子;基于提高的当前预测因子对当前编码单元进行解码,其中,邻近加权值块包括上侧加权值块、左侧加权值块、右侧加权值块和下侧加权值块中的至少一个。
根据本公开的一实施例的针对图像解码方法的计算机程序可被记录在计算机可读记录介质上。
附图说明
图1图示根据一实施例的图像解码装置100的方块示意图。
图2图示根据一实施例的图像解码方法的流程图。
图3图示根据一实施例的图像解码装置划分当前编码单元来确定至少一个编码单元的过程。
图4图示根据一实施例的图像解码装置划分非正方形形状的编码单元来确定至少一个编码单元的过程。
图5图示根据一实施例的图像解码装置基于块形状信息和关于划分形式模式的信息中的至少一个来划分编码单元的过程。
图6图示根据一实施例的图像解码装置从奇数个的编码单元中确定预定的编码单元的方法。
图7图示根据一实施例的当图像解码装置划分当前编码单元来确定多个编码单元时,多个编码单元被处理的顺序。
图8图示根据一实施例的当图像解码装置中不能按照预定的顺序处理编码单元时确定当前的编码单元划分为奇数个的编码单元的过程。
图9图示根据一实施例的图像解码装置划分第一编码单元来确定至少一个编码单元的过程。
图10图示根据一实施例的当图像解码装置划分第一编码单元来确定的非正方形形状的第二编码单元满足预定条件时,第二编码单元可被划分的形式收到限制。
图11图示根据一实施例的当关于划分形式模式的信息指示不能以四个正方形形状的编码单元进行划分时,图像解码装置划分正方形形状的编码单元的过程。
图12图示根据一实施例的多个编码单元之间的处理顺序可以根据编码单元的划分过程而不同。
图13图示根据一实施例的当通过递归地划分编码单元来确定多个编码单元时随着编码单元的形状和尺寸的变化而确定编码单元的深度的过程。
图14图示根据一实施例的可根据编码单元的形状和尺寸可确定的深度和用于区分编码单元的部分索引(part index,下称PID)。
图15图示根据一实施例的基于在画面中包括的多个预定的编码单元来确定多个编码单元。
图16图示根据一实施例的作为确定在画面中包括的基准编码单元的确定顺序的基准的处理块。
图17图示根据一实施例的编码单元以及子块。
图18图示根据一实施例的从子块的运动矢量来获得当前子块的预测因子的方法。
图19图示根据一实施例的当前加权值块和邻近加权值块。
图20图示针对当前编码单元的子块的位置。
图21图示基于针对当前编码单元的当前子块的位置而确定的当前加权值块和邻近加权值块。
图22图示根据一实施例的用于重复块运动补偿的编码单元。
图23图示根据一实施例的图像编码装置的方块示意图。
具体实施方式
所公开的实施例的优点和特征以及实现其的方法将参照与所附附图一起在后面描述的实施例将变得清楚。但是,本公开不局限于所公开的实施例,而是可以以彼此不同的各种形态实现,本实施例只是为了使本公开变得完整并且将发明的范围完全传递给本公开所述技术领域中具有一般知识的技术人员而提供的。
简要说明本说明书中使用的术语,并具体说明所公开的实施例。
在本说明书中使用的术语是在考虑本公开中的功能的同时选择了当前尽可能广泛使用的通用术语,但是这可以根据相关领域技术人员的意图或判例或新技术的出现而被改变。另外,在某些情况下,可存在申请人任意选择的一些术语,而在这种情况下,其含义将详细记载在相应发明的说明部分中。因此,本公开中使用的术语应基于术语所具有的含义和本公开的整体内容来定义,而不仅仅是这些术语的名称。
在本说明书中,除非上下文清楚地表明单数表述是单数,否则单数表述包括复数表述。
贯穿说明书,当某一部分“包括”某个构成要素时,除非另有明确说明,这意味着可以额外包括其他构成要素,而不是排除其他构成要素。
另外,说明书中使用的术语“-单元”是指软件或硬件构成要素,并且“-单元”执行某些功能。但是,“-单元”并不意味着限于软件或硬件。“-单元”可以被配置为位于可寻址存储介质中,或者可以被配置为再现一个或多个处理器。因此,举例来说,“-单元”包括软件构成要素(诸如,面向对象的软件构成要素,类构成要素和任务构成要素的构成要素)、过程、功能、属性,过程、子例程、程序代码段、驱动程序、固件、微码、电路、数据、数据库、数据结构、表、数组和变量。在构成要素和“-单元”内提供的功能可以组合为较少数量的构成要素和“-单元”,或进一步分离为额外的构成要素“-单元”。
根据本公开的实施例,“-单元”可以被实现为处理器和存储器。术语“处理器”应广义地解释为包括通用处理器、中央处理器(CPU)、微处理器、数字信号处理器(DSP)、控制器、微控制器、状态机等。在一些环境中,“处理器”可以指示专用半导体(ASIC)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)等。术语“处理器”可以指示处理设备的组合,例如,DSP和微处理器的组合、多个微处理器的组合、与DSP核结合的一个以上的微处理器的组合或任何这种配置的组合。
术语“存储器”应该广义地解释为包括能够存储电子信息的任何电子组件。术语存储器可指示处理器可读介质的各种形态,诸如,随机存取存储器(RAM)、只读存储器(ROM)、非易失性随机存取存储器(NVRAM)、可编程只读存储器(PROM)、可擦除可编程只读存储器(EPROM)、电可擦可编程只读存储器(EEPROM)、闪存、磁或光数据存储介质、寄存器等。如果处理器可以从存储器读取/将读取信息,或能够将信息记录到存储器,则存储器被称为处于与处理器的电子通信状态下。集成在处理器中的存储器处于与处理器的电子通信状态下。
在下文中,“图像”可以表示诸如视频的静止图像的静态图像或诸如视频(即,视频本身)的动态图像。
在下文中,“样本”是指分配给图像的采样位置的数据,表示作为处理对象的数据。例如,在空间域的图像中,像素值、变换区域上的变换系数可以是样本。包括这样的至少一个样本的单元可以被定义为块。
以下,参照附图对实施例进行详细说明,以使本公开所属的技术领域的通常技术人员能够容易地实施本公开的实施例。并且,为了明确说明本公开,在附图中省略与描述无关的部分。
以下,参照图1至图22,详细地描述根据一实施例的图像编码装置和图像解码装置、图像编码方法和图像解码方法。参照图3至图16描述根据一实施例的确定图像的数据单元的方法,参照图1、图2,及图17至图22描述根据一实施例的使用重叠块运动补偿的编码或解码方法和装置。
以下,参照图1和图2详细地描述根据本公开的一实施例的使用重叠块运动补偿的编码或解码方法和装置。
图1图示根据一实施例的图像解码装置100的方块示意图。
图像解码装置100可以包括接收单元110和解码单元120。接收单元110和解码单元120可以包括至少一个处理器。并且,接收单元110和解码单元120可以包括存储由至少一个处理器执行的指令的存储器。
接收单元110可以接收比特流。比特流包括由后述的图像编码装置2300对图像进行编码而获得的信息。另外,比特流可以由图像编码装置2300传输。图像编码装置2300和图像解码装置100可以有线地或无线地互相连接,接收单元110可以通过有线或无线的形式接收比特流。接收单元110可以从诸如光学介质、硬盘的存储介质接收比特流。解码单元120可以基于从接收的比特流获得的信息来恢复图像。解码单元120可以从比特流获得用于恢复图像的语法要素。解码单元120可以基于语法要素恢复图像。
结合图2更加详细地说明图像解码装置100的操作。
图2图示根据一实施例的图像解码方法的流程图。
根据本公开的一实施例,接收单元110接收比特流。图像解码装置100执行确定在当前编码单元中包括的至少一个子块的步骤(210)。图像解码装置100执行基于在至少一个子块中包括的当前子块的运动矢量获得当前子块的当前预测因子(current predictor)的步骤(220)。图像解码装置100执行基于包括当前子块的上侧子块、左侧子块、右侧子块和下侧子块中的至少一个的邻近子块的运动矢量获得包括当前子块的上侧预测因子、左侧预测因子、右侧预测因子和下侧预测因子中的至少一个的邻近预测因子的步骤(230)。图像解码装置100执行基于针对当前编码单元的当前子块的位置确定包括针对当前预测因子的加权值的当前加权值块和包括针对邻近预测因子的加权值的邻近加权值块的步骤(240)。邻近加权值块包括上侧加权值块、左侧加权值块、右侧加权值块和下侧加权值块中的至少一个。图像解码装置100执行将当前加权值块应用于当前预测因子并将邻近加权值块应用于邻近预测因子来获得提高的当前预测因子的步骤(250)。图像解码装置100执行基于提高的当前预测因子对当前编码单元进行解码的步骤(260)。
编码单元为用于对图像进行编码和解码的数据处理的基本单元。即,图像解码装置100和图像编码装置2300将图像根据编码单元划分以执行编码和解码。以下,详细说明根据本公开的一实施例的对作为图像的编码和解码的基本单元的编码单元的划分。
图像可以基于最大编码单元被划分。最大编码单元的尺寸可以基于从比特流获得的信息确定。最大编码单元的形状可以是相同尺寸的正方形。然而,不限于此。并且,最大编码单元可以基于从比特流获得的关于划分形式模式的信息被分层划分为编码单元。关于划分形式模式的信息可以包括指示是否划分的信息、划分方向信息和划分类型信息中的至少一个。指示是否划分的信息指示是否划分编码单元。划分方向信息指示以水平方向和垂直方向中的一个进行划分。划分类型信息指示用二叉划分(binary split)、三叉划分(trisplit)和四叉划分(quad split)中的一个划分编码单元。
例如,关于划分形式模式的信息(split_mode)可以包括当前编码单元不被划分(NO_SPLIT)。并且,关于划分形式模式的信息可以表示四叉分割(QUAD_SPLIT)。另外,关于划分形式模式的信息可以指示二叉垂直划分(BI_VER_SPLIT)。另外,关于划分形式模式的信息可以指示二叉垂直划分(BI_VER_SPLIT)。而且,关于划分形式模式的信息可以指示二叉水平划分(BI_HOR_SPLIT)。另外,关于划分形式模式的信息可以指示三叉垂直划分(TRI_VER_SPLIT)。另外,关于划分形式模式的信息可以是指三叉水平划分(TRI_HOR_SPLIT)。
图像解码装置100可以在比特流从一个二进字串(binstring)获得关于划分形式模式的信息。由图像解码装置100接收的比特流的形状可以包括固定长度二进制代码(Fixed length binary code)、一元编码(Unary code)、截断一元编码(Truncated unarycode)和预定的二进制代码等。二进字串通过排列二进制数字来指示信息。二进字串可以由至少一个位构成。图像解码装置100可以基于划分规则获得与二进字串对应的关于划分形式模式的信息。图像解码装置100可以基于一个二进字串确定是否划分编码单元、划分方向和划分类型。
编码单元可以小于或等于最大编码单元。例如,当关于划分形式模式的信息指示不进行划分时,编码单元具有与最大编码单元的大小相同的大小。当关于划分形式模式的信息指示进行划分时,最大编码单元可以被划分为编码单元。并且,当针对编码单元的关于划分形式模式的信息指示进行划分时,编码单元可以划分为其尺寸更小的编码单元。然而,图像的划分不限于此,最大编码单元和编码单元可能不被区别。在图3至图16更加详细地描述编码单元的划分。
并且,编码单元可以被划分为用于预测图像的预测单元。预测单元可以等于或小于编码单元。另外,编码单元被划分为用于图像变换的变换单元。变换单元可以等于或小于编码单元。变换单元和预测单元的形状与尺寸可彼此不相关。编码单元可以区别于预测单元和变换单元,然而,编码单元、预测单元和变换单元也可以彼此相同。可以通过与编码单元的划分相同的方式执行对预测单元和变换单元的划分。在图3至图16更加详细地描述编码单元的划分。本公开的当前块和邻近块可以是指最大编码单元、编码单元、预测单元和变换单元中的一个。并且,当前块或当前编码单元为目前被执行解码或编码的块或目前被执行划分的块。邻近块可以是在当前块之前被恢复的块。邻近块可以空间上或时间上与当前块相邻。邻近块可以位于当前块的左下侧、左侧、左上侧、上侧、右上侧、右侧和右下侧中的一个。
图3图示根据一实施例的图像解码装置100划分当前编码单元来确定至少一个编码单元的过程。
块的形状可以包括4N×4N、4N×2N、2N×4N、4N×N,或N×4N。其中,N可以为正整数。块形状信息为指示编码单元的形状、方向、宽度与高度的比例和尺寸中的至少一个的信息。
编码单元的形状可以包括正方形(square)及非正方形(non-square)。当编码单元的宽度和高度的大小相同时(即,当编码单元的块形状为4N×4N时),图像解码装置100可以将编码单元的块形状信息确定为正方形。图像解码装置100可以将编码单元的形状确定为非正方形。
当编码单元的宽度和高度的大小不同时(即当编码单元的块形状为4N×2N、2N×4N、4N×N或N×4N时),图像解码装置100可以将编码单元的块形状信息确定为非正方形。当编码单元的形状为非正方形时,图像解码装置100可以将编码单元的块形状信息中宽度与高度的比例确定为1:2、2:1、1:4、4:1、1:8和8:1中的至少一个。并且,基于编码单元的宽度的大小和高度的大小,图像解码装置100可以确定编码单元是水平方向还是垂直方向。并且,基于编码单元的宽度的大小、高度的大小和面积中的至少一个,图像解码装置100可以确定编码单元的大小。
根据一实施例,图像解码装置100可以使用块形状信息确定编码单元的形状,且可以使用关于划分形式模式的信息来确定编码单元以哪种形式被划分。例如,根据由图像解码装置100使用的块形状信息指示哪种块形状可以确定关于划分形式模式的信息指示的编码单元的划分方法。
图像解码装置100可以从比特流中获得关于划分形式模式的信息。然而,不限于此,图像解码装置100和图像编码装置200可以确定关于基于块形状信息预先约定的块形状模式的信息。图像解码装置100可以确定关于最大编码单元或最小编码单元预先约定的划分形式模式的信息。例如,对最大编码单元,图像解码装置100可以将关于划分形式模式的信息确定为四叉划分(quad split)。并且,对最小编码单元,图像解码装置100可以将关于划分形式模式的信息确定为“不进行划分”。具体地,图像解码装置100可以将最大编码单元的尺寸确定为256×256。图像解码装置100可以将关于预先约定的划分形式模式的信息确定为四叉划分。四叉划分为将编码单元的宽度和高度都二等分的划分形式模式。图像解码装置100可以基于关于划分形式模式的信息从具有256×256尺寸的最大编码单元获得具有128×128尺寸的编码单元。另外,图像解码装置100可以将最小编码单元的尺寸确定为4×4。图像解码装置100可以获得对最小编码单元指示“不进行划分”的关于划分形式模式的信息。
根据一实施例,图像解码装置100可以使用指示当前编码单元具有正方形形状的块形状信息。例如,图像解码装置100可以根据关于划分形式模式的信息来确定将正方形的编码单元不划分、垂直划分、水平划分还是划分为四个编码单元等。参照图3,当当前编码单元300的块形状信息显示正方形形状时,解码单元120可以基于指示不被划分的关于划分形式模式的信息来不划分具有与当前编码单元300相同尺寸的编码单元310a,或者可以确定基于指示预定的划分方式的关于划分形式模式的信息被划分的编码单元310b、310c及310d等。
参照图3,图像解码装置100可以根据一实施例基于指示以垂直方向进行划分的关于划分形式模式的信息,来将当前编码单元300以垂直方向划分而确定两个编码单元310b。图像解码装置100可以基于指示以水平方向进行划分的关于划分形式模式的信息来确定将当前编码单元300以水平方向划分的两个编码单元310c。图像解码装置100可以基于指示编码单元被以垂直方向和水平方向划分的关于划分形式模式的信息来确定以垂直方向和水平方向划分当前编码单元300的四个编码单元310d。然而,可以用于划分正方形的编码单元的划分形式不应解释为限于上述的形式,而可以包括能够由关于划分形式模式的信息指示的各种形式。在下文中参照各种实施例具体地描述划分正方形的编码单元的预定的划分形式。
图4图示根据一实施例的图像解码装置100划分非正方形形状的编码单元来确定至少一个编码单元的过程。
根据一实施例,图像解码装置100可以使用指示当前编码单元具有非正方形形状的块形状信息。图像解码装置100可以基于关于划分形式模式的信息来确定是不划分非正方形的当前编码单元还是以预定的方法划分当前编码单元。参照图4,当当前编码单元400或450的块形状信息指示非正方形形状时,图像解码装置100可以根据指示不进行划分的关于划分形式模式的信息来确定具有与当前编码单元400或450的尺寸相同的尺寸的编码单元410或460,或者可以基于指示预定的划分方法的关于划分形式模式的信息确定被划分的编码单元420a、420b、430a、430b、430c、470a、470b、480a、480b,及480c。在下文中参照各种实施例具体地描述划分非正方形的编码单元的预定的划分方法。
根据一实施例,图像解码装置100可以使用关于划分形式模式的信息来确定划分编码单元的形式,在这种情况下,关于划分形式模式的信息可以指示通过划分编码单元而生成的至少一个编码单元的数量。参照图4,当关于划分形式模式的信息指示当前编码单元400或450划分为两个编码单元时,图像解码装置100可以基于关于划分形式模式的信息来划分当前编码单元400或450而确定在当前编码单元中包括的两个编码单元420a、420b或470a、470b。
根据一实施例,当图像解码装置100基于关于划分形式模式的信息来划分非正方形形状的当前编码单元400或450时,图像解码装置100可以考虑非正方形的当前编码单元400或450的长边的位置来划分当前编码单元。例如,图像解码装置100可以考虑当前编码单元400或450的形状来以划分当前编码单元400或450的长边的方向来划分当前编码单元400或450而确定多个编码单元。
根据一实施例,当关于划分形式模式的信息指示将编码单元划分(三划分:trisplit)成奇数个块时,图像解码装置100可以确定在当前编码单元400或450中包括的奇数个编码单元。例如,当关于划分形式模式的信息指示将当前编码单元400或450划分为三个编码单元时,图像解码装置100可以将当前编码单元400或450划分为三个编码单元430a、430b及430c或480a、480b、480c。
根据一实施例,当前编码单元400或450的宽度与高度的比例可以为4:1或者1:4。当宽度与高度的比例为4:1时,由于宽度的大小大于高度的大小,块形状信息可以为水平方向。当宽度与高度的比例为1:4时,由于宽度的大小短于高度的大小,块形状信息可以为垂直方向。图像解码装置100可以基于关于划分形式模式的信息来确定将当前编码单元划分为奇数个块。并且,图像解码装置100可以基于当前编码单元400或450的块形状信息来确定当前编码单元400或450的划分方向。例如,当当前编码单元400为垂直方向时,图像解码装置100可以通过将当前编码单元400以水平方向划分来确定编码单元430a、430b及430c。另外,当当前编码单元450为水平方向时,图像解码装置100可以通过将当前编码单元以垂直方向划分来确定编码单元480a、480b及480c。
根据一实施例,图像解码装置100可以确定在当前编码单元400或450中包括的奇数个编码单元,所确定的编码单元的尺寸不一定相同。例如,所确定的奇数个的编码单元430a、430b、430c、480a、480b及480c中预定的编码单元430b或480b的尺寸可以与其他编码单元430a、430c、480a及480c的尺寸不同。换言之,可以通过划分当前编码单元400或450而确定的编码单元可以具有多个类型的尺寸,根据情况,奇数个编码单元430a、430b、430c、480a、480b及480c各自可以具有不同的尺寸。
根据一实施例,当关于划分形式模式的信息指示编码单元被划分为奇数个块时,图像解码装置100可以确定在当前编码单元400或450中包括的奇数个的编码单元,进而,图像解码装置100可以对在通过划分而生成的奇数个编码单元中的至少一个编码单元实施预定的限制。参照图4,图像解码装置100可以使对通过划分当前编码单元400或450来生成的三个编码单元430a、430b及430c或480a、480b及480c中位于中央的编码单元430b和480b的解码过程与对其他编码单元430a、430c、480a,及480c的解码过程不同。例如,与其他编码单元430a、430c、480a及480c不同,图像解码装置100可以限制位于中央的编码单元430b和480b不再被划分或只以预定的次数划分。
图5图示根据一实施例的图像解码装置100基于块形状信息和关于划分形式模式的信息中的至少一个来划分编码单元的过程。
根据一实施例,图像解码装置100可以基于块形状信息和关于划分形式模式的信息中的至少一个确定将正方形的第一编码单元500划分为多个编码单元或确定不进行划分。根据一实施例,当关于划分形式模式的信息指示以水平方向划分第一编码单元500时,图像解码装置100可以通过将第一编码单元500以水平方向划分来确定第二编码单元510。根据一实施例所使用的第一编码单元、第二编码单元及第三编码单元是为了理解编码单元之间的划分前后关系而使用的术语。例如,可以通过划分第一编码单元来确定第二编码单元,可以通过划分第二编码单元来确定第三编码单元。在下文中,可以理解所使用的第一编码单元、第二编码单元与第三编码单元之间的关系基于上述的特点。
根据一实施例,图像解码装置100可以基于块形状信息和关于划分形式模式的信息中的至少一个确定将所确定的第二编码单元510划分为多个编码单元或确定不进行划分。参照图5,图像解码装置100可以基于块形状信息和关于划分形式模式的信息中的至少一个将通过划分第一编码单元500而确定的非正方形形状的第二编码单元510划分为至少一个第三编码单元520a、520b、520c及520d等或不划分第二编码单元510。图像解码装置100可以获得块形状信息和关于划分形式模式的信息中的至少一个,并且可以基于所获得的块形状信息和关于划分形式模式中的至少一个来将第一编码单元500划分为各种形式的多个第二编码单元(例如,510),而且,第二编码单元510是可以基于块形状信息和关于划分形式模式的信息中的至少一个根据第一编码单元500被划分的方式来被划分的。根据一实施例,当第一编码单元500基于关于第一编码单元500的块形状信息和关于划分形式模式的信息中的一个而被划分为第二编码单元510时,第二编码单元510也可以基于关于第二编码单元510的块形状信息和关于划分形式模式的信息中的一个而被划分为第三编码单元(例如,520a、520b、520c及520d等)。换言之,编码单元可以基于与各编码单元有关的关于划分形式模式的信息和块形状信息中的至少一个被递归地划分。因此,可以在非正方形形状的编码单元中确定正方形的编码单元,也可以通过递归地划分该正方形形状的编码单元来确定非正方形形状的编码单元。
参照图5,在通过划分非正方形形状的第二编码单元510来被确定的奇数个的第三编码单元520b、520c及520d中的预定的编码单元(例如,位于中央的编码单元或正方形形状的编码单元)可以被递归地划分。根据一实施例,作为奇数个第三编码单元520b、520c及520d中的一个的正方形的第三编码单元520b可以被以水平方向划分且被划分为多个第四编码单元。多个第四编码单元530a、530b、530c及530d中的一个的非正方形形状的第四编码单元530b或530d可以再被划分为多个编码单元。例如,非正方形的第四编码单元530b或530d可以再被划分为奇数个编码单元。稍后通过各种实施例描述可以用于递归地划分编码单元的方法。
根据一实施例,图像解码装置100可以基于块形状信息和关于划分形式模式的信息中的至少一个来将第三编码单元520a、520b、520c及520d分别划分为多个编码单元。并且,图像解码装置100可以基于块形状信息和关于划分形式模式的信息中的至少一个来确定不划分第二编码单元510。图像解码装置100可以根据一实施例将非正方形形状的第二编码单元510划分为奇数个第三编码单元520b、520c及520d。图像解码装置100可以对在奇数个的第三编码单元520b、520c及520d中的预定数量的第三编码单元实施预定的限制。例如,图像解码装置100可以将在奇数个的第三编码单元520b、520c及520d中的位于中央的编码单元520c限制为不再被划分或可以被设定的次数划分。
参照图5,图像解码装置100可以限制在非正方形形状的第二编码单元510中包括的奇数个的第三编码单元520b、520c及520d中的位于中央的编码单元520c不再被划分,限制划分形式(例如,仅被划分为四个编码单元或以与第二编码单元510被划分的形式对应的形式被划分),或限制进行划分的次数(例如,仅进行划分n次,n>0)。然而,对位于中央的编码单元520c的所述限制仅仅是单纯的实施例,不应被解释为限于上述的实施例,应解释为包括位于中央的编码单元520c能够被解码成与其他编码单元520b和520d不同的各种限制。
根据一实施例,图像解码装置100可以从当前编码单元内的预定的位置获得用于划分当前编码单元的块形状信息和关于划分形式模式的信息中的至少一个。
图6图示根据一实施例的图像解码装置100从奇数个的编码单元中确定预定的编码单元的方法。
参照图6,当前编码单元600和650的块形状信息和关于划分形式模式的信息中的至少一个可以是从在当前编码单元600和650中包括的多个样本中位于预定位置的样本(例如,位于中央的样本640和690)获得的。然而,可以获得这种块形状信息和关于划分形式模式的信息中的至少一个的当前编码单元600内的预定位置不应被限制性地解释为在图6中所示的中央位置,而预定位置可以解释为包括可以包括在当前编码单元600内的各种位置(例如,最上端、最下端、左侧、右侧、左侧上端、左侧下端、右侧上端或右侧下端等)。图像解码装置100可以获得从预定位置获得的块形状信息和关于划分形式模式的信息中的至少一个来确定将当前编码单元划分为各种形状和尺寸的编码单元或确定不进行划分。
根据一实施例,当当前编码单元被划分为预定数量的编码单元时,图像解码装置100可以选择其中一个编码单元。可以存在从多个编码单元中选择一个的各种方法,参照以下的各种实施例稍后描述这些各种方法。
根据一实施例,图像解码装置100可以将当前编码单元划分为多个编码单元并确定预定位置的编码单元。
根据一实施例,图像解码装置100可以使用指示奇数个编码单元各自的位置的信息以确定在奇数个编码单元中的位于中央的编码单元。参照图6,图像解码装置100可以划分当前编码单元600或当前编码单元650来确定奇数个的编码单元620a、620b及620c或奇数个的编码单元660a、660b及660c。图像解码装置100可以使用关于奇数个的编码单元620a、620b及620c或奇数个的编码单元660a、660b及660c的位置的信息来确定中央编码单元620b或中央编码单元660b。例如,图像解码装置100可以基于指示在编码单元620a、620b及620c中包括的预定样本的位置的信息来确定编码单元620a、620b及620c的位置以确定位于中央的编码单元620b。具体地,图像解码装置100可以基于指示编码单元620a、620b及620c的左侧上端的样本630a、630b及630c的位置的信息来确定编码单元620a、620b及620c的位置以确定位于中央的编码单元620b。
根据一实施例,指示分别包括在编码单元620a、620b及620c中的左侧上端的样本630a、630b及630c的位置的信息可以包括关于编码单元620a、620b及620c在画面内的位置或坐标的信息。根据一实施例,指示分别包括在编码单元620a、620b及620c中的左侧上端的样本630a、630b及630c的位置的信息可以包括指示在当前编码单元600中包括的编码单元620a、620b及620c的宽度或高度的信息,该宽度或高度可以相当于指示编码单元620a、620b及620c在画面内的坐标之间的差的信息。也就是说,图像解码装置100可以直接使用关于编码单元620a、620b及620c在画面内的位置或坐标的信息或使用关于与坐标之间的差值对应的编码单元的宽度或高度的信息来确定位于中央的编码单元620b。
根据一实施例,指示上端编码单元620a的左侧上端的样本630a的位置的信息可以指示(xa,ya)坐标,指示中央编码单元620b的左侧上端的样本630b的位置的信息可以指示(xb,yb)坐标,指示下端编码单元620c的左侧上端的样本630c的位置的信息可以指示(xc,yc)坐标。图像解码装置100可以使用分别在编码单元620a、620b及620c中包括的左侧上端的样本630a、630b及630c的坐标来确定中央编码单元620b。例如,将左侧上端的样本630a、630b及630c的坐标按照升序或降序排列,可以将包括位于中央的样本630b的坐标(即,(xb,yb))的编码单元620b确定为在通过划分当前编码单元600来确定的编码单元620a、620b及620c中的位于中央的编码单元。然而,指示左侧上端的样本630a、630b及630c的位置的坐标可以是指指示在画面内的绝对位置的坐标,进而,可以使用作为指示中央编码单元620b的左侧上端的样本630b相对于上端编码单元620a的左侧上端的样本630a的位置的相对位置的信息的(dxb,dyb)坐标和作为指示下端编码单元620c的左侧上端的样本630c相对于上端编码单元620a的左侧上端的样本630a的位置的相对位置的信息的(dxc,dyc)坐标。并且,通过将指示在编码单元中包括的样本的位置的信息用作该样本的坐标来确定预定位置的编码单元的方法不应被解释为限于上述的方法,而应被解释为可以使用样本的坐标的各种算术性方法。
根据一实施例,图像解码装置100可以将当前编码单元600划分为多个编码单元620a、620b及620c,且可以从编码单元620a、620b及620c中根据预定标准确定编码单元。例如,图像解码装置100可以从编码单元620a、620b及620c中选择具有不同尺寸的编码单元620b。
根据一实施例,图像解码装置100可以使用作为指示上端编码单元620a的左侧上端的样本630a的位置的信息的(xa,ya)坐标、作为指示中央编码单元620b的左侧上端的样本630b的位置的信息的(xb,yb)坐标)及作为指示下端编码单元620c的左侧上端的样本630c的位置的信息的(xc,yc)坐标来确定各个编码单元620a、620b及620c的宽度和高度。图像解码装置100可以使用指示编码单元620a、620b及620c的位置的坐标(xa,ya)、(xb,yb)及(xc,yc)来确定编码单元620a、620b及620c各自的尺寸。根据一实施例,图像解码装置100可以将上端编码单元620a的宽度确定为当前编码单元600的宽度。图像解码装置100可以将上端编码单元620a的高度确定为yb-ya。根据一实施例,图像解码装置100可以将中央编码单元620b的宽度确定为当前编码单元600的宽度。图像解码装置100可以将中央编码单元620b的高度确定为yc-yb。根据一实施例,图像解码装置100可以使用当前编码单元的宽度或高度和上端编码单元620a及中央编码单元620b的宽度和高度来确定下端编码单元的宽度或高度。图像解码装置100可以基于所确定的编码单元620a、620b及620c的宽度和高度来确定具有与其他编码单元的尺寸不同的尺寸的编码单元。参照图6,图像解码装置100可以将具有与上端编码单元620a和下端编码单元620c的尺寸不同的尺寸的中央编码单元620b确定为处于预定位置的编码单元。然而,所述的图像解码装置100确定具有与其他编码单元的尺寸不同的尺寸的过程仅为使用基于样本坐标确定的编码单元的尺寸确定预定位置的编码单元的一个实施例,因此可以使用将根据预定的样本坐标确定的编码单元的尺寸进行比较来确定预定位置的编码单元的各种过程。
图像解码装置100可以使用作为指示左侧编码单元660a的左侧上端的样本670a的位置的信息的(xd,yd)坐标)、作为指示中央编码单元660b的左侧上端的样本670b的位置的信息的(xe,ye)坐标及作为指示右侧编码单元660c的左侧上端的样本670c的位置的信息的(xf,yf)坐标来确定编码单元660a、660b及660c各自的宽度或高度。图像解码装置100可以使用作为指示编码单元660a、660b及660c的位置的坐标的(xd,yd)、(xe,ye)及(xf,yf)来确定各编码单元660a、660b,及660c的尺寸。
根据一实施例,图像解码装置100可以将左侧编码单元660a的宽度确定为xe-xd。图像解码装置100可以将左侧编码单元660a的高度确定为当前编码单元650的高度。根据一实施例,图像解码装置100可以将中央编码单元660b的宽度确定为xf-xe。图像解码装置100可以将中央编码单元660b的高度确定为当前编码单元600的高度。根据一实施例,图像解码装置100可以使用当前编码单元650的宽度或高度和左侧编码单元660a和中央编码单元660b的宽度和高度来确定右侧编码单元660c的宽度或高度。图像解码装置100可以基于所确定的编码单元660a、660b及660c的宽度和高度来确定具有与其他编码单元的尺寸不同的尺寸的编码单元。参照图6,图像解码装置100可以将中央编码单元660b确定为预定位置的编码单元,所述中央编码单元660b具有与左侧编码单元660a和右侧编码单元660c的尺寸不同的尺寸。但是,所述图像解码装置100确定具有与其他编码单元的尺寸不同的尺寸的编码单元的过程仅为使用基于样本坐标确定的编码单元的尺寸来确定预定位置的编码单元的一个实施例,因此可以使用将根据预定的样本坐标确定的编码单元的尺寸进行比较来确定预定位置的编码单元的各种过程。
然而,为了确定编码单元的位置而考虑的样本的位置不应被解释为局限于所述左侧上端,而可以被解释为可以使用关于包括在编码单元中的任何样本的位置的信息。
根据一实施例,图像编码装置100可以考虑当前编码单元的形式来从通过划分当前编码单元而确定的奇数个编码单元中选择预定位置的编码单元。例如,若当前编码单元具有其宽度比高度大的非正方形形状,图像解码装置100可以根据水平方向确定处于预定位置的编码单元。换言之,图像解码装置100可以从在水平方向上位于不同位置的编码单元中确定一个并对该编码单元实施限制。若当前编码单元具有其高度比宽度大的非正方形形状,图像解码装置100可以根据垂直方向确定处于预定位置的编码单元。换言之,图像解码装置100可以从在垂直方向位于不同位置的编码单元中确定一个并对该编码单元实施限制。
根据一实施例,图像解码装置100可以使用指示偶数个编码单元的各个位置的信息来确定在偶数个编码单元中处于预定位置的编码单元。图像解码装置100可以通过划分(二划分;binary-split)当前编码单元来确定偶数个的编码单元,且可以使用关于偶数个的编码单元的位置的信息来确定处于预定位置的编码单元。对此的具体过程可对应于参照图6详细描述的从奇数个的编码单元中确定处于预定位置(例如,中央位置)的编码单元的过程,故不再赘述。
根据一实施例,当将具有非正方形形状的当前编码单元划分为多个编码单元时,在划分过程中可以使用关于处于预定位置的编码单元的预定信息来从多个编码单元中确定处于预定位置的编码单元。例如,图像解码装置100在划分过程中可以使用存储在包括在中央编码单元中的样本的块形状信息和关于划分形式模式中的至少一个,来从划分当前编码单元的多个的编码单元中确定处于中央的编码单元。
参照图6,图像解码装置100可以基于块形状信息和关于划分形式模式的信息中的至少一个将当前编码单元600划分为多个编码单元620a、620b及620c,且可以从多个编码单元620a、620b及620c中确定处于中央的编码单元620b。进而,图像解码装置100可以考虑获得块形状信息和关于划分形式模式的信息中的至少一个的位置来确定处于中央的编码单元620b。就是说,可以从处于当前编码单元600的中央的样本640获得块形状信息和关于划分形式模式的信息中的至少一个,且可以基于所述块形状信息和所述关于划分形式模式的信息中的至少一个来将在当前编码单元600划分为多个编码单元620a、620b及620c时包括所述样本640的编码单元620b确定为处于中央的编码单元。然而,用于确定位于中央的编码单元的信息不应被解释为局限于块形状信息和关于划分形式模式的信息中的至少一个,而是各种信息可以被使用在确定位于中央的编码单元的过程中。
根据一实施例,用于识别处于预定位置的编码单元的预定的信息是可以从包括在在所要确定的编码单元中的预定的样本获得的。参照图6,图像解码装置100可以使用从当前编码单元600内的预定位置的样本(例如,位于当前编码单元600的中央的样本)获得的块形状信息和关于划分形式模式的信息中的至少一个,来确定从通过划分当前编码单元600而确定的多个编码单元620a、620b及620c中的预定位置的编码单元(例如,在被划分为多个的编码单元中的位于中央的编码单元)。也就是说,图像解码装置100可以考虑当前编码单元600的块形状来确定所述位于预定位置的样本,且可以在通过划分当前编码单元600来确定的多个的编码单元620a、620b及620c中确定包括可以获得预定信息(例如,块形状信息和关于划分形式模式的信息中的至少一个)的样本的编码单元620b并对该编码单元620b实施预定的限制。参照图6,根据一实施例,图像解码装置100可以将位于当前编码单元600的中央的样本640确定为可以用于获得预定的信息的样本,且可以在解码过程中对包括该样本640的编码单元620b实施预定的限制。然而,可以获得预定信息的样本的位置不应被解释为局限于上述的位置,而可以被解释为在为了设置限制而确定的编码单元620b中包括的任何位置的样本。
根据一实施例,可以获得预定信息的样本的位置是可以根据当前编码单元600的形状确定的。根据一实施例,块形状信息可以确定当前编码单元的形状是正方形还是非正方形,并且,可以根据该形状确定可以获得预定信息的样本的位置。例如,图像解码装置100可以使用当前编码单元的关于宽度的信息和关于高度的信息中的至少一个可以将位于将当前编码单元的宽度和高度中的至少一个对半划分的边界上的样本确定为可以从该样本获得预定信息的样本。根据另一个例子,当关于当前编码单元的块形状信息指示非正方形形状时,图像解码装置100可以将与将当前编码单元的长边对半划分的边界相邻的样本中的一个确定为可以获得预定信息的样本。
根据一实施例,当将当前编码单元划分为多个编码单元时,图像解码装置100可以使用块形状信息和关于划分形式模式的信息中的至少一个来确定在多个编码单元中位于预定位置的编码单元。根据一实施例,图像解码装置100可以从包括在编码单元中的预定位置的样本中获得块形状信息和关于划分形式模式的信息中至少一个,且可以通过使用从在多个编码单元中分别包括的预定位置的样本中获得的关于划分形式模式的信息和块形状信息中的至少一个来将通过划分当前编码单元来生成的多个编码单元进行划分。换言之,可以使用从包括在各编码单元的预定位置的样本中获得的块形状信息和关于划分形式模式的信息中的一个递归地划分编码单元。已参照图5详细描述了编码单元的递归划分过程,故不再赘述。
根据一实施例,图像解码装置100可以通过划分当前编码单元来确定至少一个编码单元,且可以根据预定的块(例如,当前编码单元)来确定对至少一个编码单元进行解码的顺序。
图7图示根据一实施例的当图像解码装置100划分当前编码单元来确定多个编码单元时多个编码单元被处理的顺序。
根据一实施例,图像解码装置100可以根据块形状信息和关于划分形式模式的信息以垂直方向划分第一编码单元700来确定第二编码单元710a和710b,以水平方向划分第一编码单元来确定第二编码单元730a和730b,或者以垂直方向和水平方向划分第一编码单元700来确定第二编码单元750a、750b、750c,及750d。
参照图7,图像解码装置100可以确定顺序以使通过以垂直方向划分第一编码单元700来确定的第二编码单元710a和710b被以水平方向710c处理。图像解码装置100可以将通过以水平方向划分第一编码单元700来确定的第二编码单元730a和730b的处理顺序为垂直方向730c。图像解码装置100可以根据位于一个行的编码单元被处理后位于下一个行的编码单元被处理的预定顺序(例如,光栅扫描顺序(raster scan order)或z扫描顺序(z scanorder)750e等)来确定通过以垂直方向和水平方向划分第一编码单元700来确定的第二编码单元750a、750b、750c,750d。
根据一实施例,图像解码装置100可以递归地划分编码单元。参照图7,图像解码装置100可以通过划分第一编码单元700来确定多个编码单元710a、710b、730a、730b、750a、750b、750c、750d,且可以递归地划分所确定的多个编码单元710a、710b、730a、730b、750a、750b、750c、750d。划分多个编码单元710a、710b、730a、730b、750a、750b、750c、750d的方法可以是与划分第一编码单元700的方法对应的方法。因此,多个编码单元710a、710b、730a、730b、750a、750b、750c、750d可以各自独立地被划分为多个编码单元。参照图7,图像解码装置100可以以垂直方向划分第一编码单元700来确定第二编码单元710a和710b,进而,也可以确定将第二编码单元710a和710b进行划分或不进行划分。
根据一实施例,图像解码装置100可以将左侧的第二编码单元710a以水平方向划分为第三编码单元720a和720b,而可以不划分右侧的第二编码单元710b。
根据一实施例,编码单元的处理顺序是可以根据编码单元的划分过程确定的。换言之,划分的编码单元的处理顺序是可以基于划分之前的编码单元的处理顺序来确定的。图像解码装置100可以与右侧的第二编码单元710b分开地确定对通过划分左侧的第二编码单元710a来确定的第三编码单元720a和720b的处理顺序。由于通过以水平方向划分左侧的第二编码单元710a来确定第三编码单元720a和720b,可以以垂直方向720c处理第三编码单元720a和720b。并且,左侧的第二编码单元710a和右侧的第二编码单元710b被处理的顺序相当于水平方向710c,因此,在在左侧的第二编码单元710a中包括的第三编码单元720a和720b被以垂直方向720c处理后,右侧编码单元710b可以被处理。上述的内容仅用于说明根据划分前的编码单元确定各编码单元的处理顺序的过程,不应将其解释为限于上述实施例,应解释为上述内容适用于以各种形式划分来确定的编码单元可以按照预定顺序独立地处理的各种方法。
图8图示根据一实施例的当图像解码装置100不能按照预定的顺序处理编码单元时确定当前编码单元将被划分为奇数个的编码单元的过程。
根据一实施例,图像解码装置100基于关于所获得的块形状信息和关于划分形式模式的信息来确定当前编码单元被划分为奇数个编码单元。参照图8,具有正方形形状的第一编码单元800可以被划分为非正方形的第二编码单元810a和810b,第二编码单元810a和810b可以各自独立地被划分为第三编码单元820a、820b、820c、820d和820e。根据一实施例,在第二编码单元中,图像解码装置100可以将左侧编码单元810a以水平方向划分来确定多个第三编码单元820a和820b,且可以将右侧编码单元810b划分为奇数个的第三编码单元820c、820d和820e。
根据一实施例,图像解码装置100可以判断第三编码单元820a、820b、820c、820d和820e是否可以按照预定的顺序被处理来确定是否存在划分为奇数个的编码单元。参照图8,图像解码装置100可以递归地划分第一编码单元800来确定第三编码单元820a、820b、820c、820d和820e。图像解码装置100可以基于块形状信息和关于划分形式模式的信息中的至少一个来确定第一编码单元800、第二编码单元810a和810b或第三编码单元820a、820b、820c、820d和820e在划分形式中是否被划分为奇数个编码单元。例如,在第二编码单元810a和810b中位于右侧的编码单元可以被划分为奇数个的第三编码单元820c、820d和820e。在第一编码单元800中包括的多个编码单元的处理顺序可以为预定顺序(例如,z-扫描顺序(z-scan order)830,图像解码装置100可以判断通过将右侧的第二编码单元810b划分为奇数个来确定的第三编码单元820c、820d和820e是否满足可以按照所述预定顺序被处理的条件。
根据一实施例,图像解码装置100可以确定在第一编码单元800中包括的第三编码单元820a、820b、820c、820d和820e是否满足可以按照预定顺序被处理的条件,所述条件与是否可以按照第三编码单元820a、820b、820c、820d和820e的边界将第二编码单元810a和810b的宽度和高度中的至少一个对半划分有关。例如,通过将非正方形形状的左侧第二编码单元810a的高度对半划分来确定的第三编码单元820a和820b可以满足条件。通过将右侧第二编码单元810b划分为三个编码单元而确定的第三编码单元820c、820d、820e的边界不能将右侧第二编码单元810b的宽度或高度对半划分,因此可以确定第三编码单元820c、820d和820e不满足条件。图像解码装置100可以将这种条件不满足的情况判断为扫描顺序的不连续(disconnection),且可以基于判断结果确定右侧第二编码单元810b被划分为奇数个的编码单元。根据一实施例,当编码单元被划分为奇数个的编码单元时,图像解码装置100可以对划分出的编码单元中的在预定位置的编码单元实施预定的限制,由于参照各种实施例详细描述了关于这些限制内容或预定位置,故不再赘述。
图9图示根据一实施例的图像解码装置100划分第一编码单元900来确定至少一个编码单元的过程。
根据一实施例,图像解码装置100可以基于从接收单元110获得的块形状信息和关于划分形式模式的信息中的至少一个来划分第一编码单元900。正方形的第一编码单元900可以被划分为具有正方形形状的四个编码单元或被划分为多个的非正方形形状的编码单元。例如,参照图9,当块形状信息指示第一编码单元900为正方形且关于划分形式模式的信息指示以非正方形的编码单元划分时,图像解码装置100可以将第一编码单元900划分为多个非正方形的编码单元。具体地,当关于划分形式模式的信息指示通过以水平方向或垂直方向划分第一编码单元900来确定奇数个编码单元时,图像解码装置100可以将正方形形状的第一编码单元900划分为奇数个的编码单元,即,以垂直方向划分来确定的第二编码单元910a、910b和910c或通过以水平方向划分来确定的第二编码单元920a、920b和920c。
根据一实施例,图像解码装置100可以确定在第一编码单元900中包括的第二编码单元910a、910b、910c、920a、920b和920c是否满足可以按照预定顺序处理的条件,所述条件与是否可以按照第二编码单元910a、910b、910c、920a、920b和920c的边界将第一编码单元900的宽度和高度中至少一个对半划分有关。参照图9,通过以垂直方向划分正方形形状的第一编码单元900来确定的第二编码单元910a、910b和910c的边界不能将第一编码单元900的宽度对半划分,因此可以确定第一编码单元900不满足可以按照预定顺序处理的条件。并且,通过以水平方向划分正方形形状的第一编码单元900来确定的第二编码单元920a、920b和920c的边界不能将第一编码单元900的宽度对半划分,因此可以确定第一编码单元900不满足可以按照预定顺序处理的条件。图像解码装置可以将这种条件不满足的情况判断为扫描顺序的不连续(disconnection),基于判断结果,可以确定第一编码单元900划分为奇数个的编码单元。根据一实施例,当编码单元被划分为奇数个的编码单元时,图像解码装置100可以对划分出的编码单元中的在预定位置的编码单元实施预定的限制,由于参照各种实施例详细描述了关于这些限制内容或预定位置,故不再赘述。
根据一实施例,图像解码装置100可以划分第一编码单元来确定各种形式的编码单元。
参照图9,图像解码装置100可以将正方形形状的第一编码单元900、非正方形形状的第一编码单元930或950划分为各种形式的编码单元。
图10图示根据一实施例的当图像解码装置100划分第一编码单元1000来确定的非正方形形状的第二编码单元满足预定条件时,可划分第二编码单元的形式受到限制。
根据一实施例,图像解码装置100可以基于从接收单元110获得的块形状信息和关于划分形式模式的信息中的至少一个来确定将正方形形状的第一编码单元1000划分为非正方形形状的第二编码单元1010a、1010b、1020a、及1020b)。第二编码单元1010a、1010b、1020a和1020b可以被独立地划分。由此,图像解码装置100可以基于各个第二编码单元1010a、1010b、1020a和1020b的块形状信息和关于划分形式模式的信息中的至少一个确定将第二编码单元1010a、1010b、1020a和1020b分别划分为多个编码单元或确定不进行划分。根据一实施例,图像解码装置100可以将通过以垂直方向划分第一编码单元1000确定的非正方形形状的左侧第二编码单元1010a以水平方向划分来确定第三编码单元1012a和1012b。只是,图像解码装置100可以以水平方向划分左侧的第二编码单元1010a后限制右侧的编码单元1010b不可以被以与左侧第二编码划分1010a的划分方向相同的水平方向划分。当通过以相同的方向划分右侧的第二编码单元1010b来确定第三编码单元1014a和1014b时,可以以水平方向各自独立地划分左侧的第二编码单元1010a和右侧的第二编码单元1010b来确定第三编码单元1012a、1012b、1014a和1014b。然而,这是与图像解码装置100基于块形状信息和关于划分形式模式的信息中的至少一个将第一编码单元1000划分为四个正方形形状的第二编码单元1030a、1030b、1030c和1030d相同的结果,这在图像解码的角度来看可能是低效率的。
根据一实施例,图像解码装置100可以通过将以水平方向划分第一编码单元1000来确定的非正方形形状的第二编码单元1020a或1020b以垂直方向划分来确定第三编码单元1022a、1022b、1024a和1024b。然而,当将第二编码单元中的一个(例如,上端第二编码单元1020a)以垂直方向划分时,根据上述的理由,图像解码装置100可以限制另一第二编码单元(例如下端编码单元1020b不能被以与划分上端第二编码单元1020a的方向相同的垂直方向划分。
图11图示根据一实施例的当关于划分形式模式的信息不能指示划分为四个正方形形状的编码单元时图像解码装置100划分正方形形状的编码单元的过程。
根据一实施例,图像解码装置100可以基于块形状信息和关于划分形式模式的信息中的至少一个划分第一编码单元1100来确定第二编码单元1110a、1110b、1120a和1120b等。关于划分形式模式的信息可以包括关于可以划分编码单元的各种形式的信息,然而,在有些情况下,关于各种形式的包括不能包括用于将编码单元划分为正方形的四个编码单元的信息。根据该关于划分形式模式的信息,图像解码装置100不能将正方形形状的第一编码单元1100划分为四个正方形形状的第二编码单元1130a、1130b、1130c和1130d。基于关于划分形式模式的信息,图像解码装置100可以确定非正方形形状的第二编码单元1110a、1110b、1120a和1120b等。
根据一实施例,图像解码装置100可以各自独立地划分非正方形形状的第二编码单元1110a、1110b、1120a和1120b等。各个第二编码单元1110a、1110b、1120a和1120b通过递归的方法按照预定的顺序被划分,这可以是与基于块形状信息和关于划分形式模式的信息中的至少一个划分第一编码单元1100的方法对应的划分方法。
例如,图像解码装置100可以通过以水平方向划分左侧第二编码单元1110a来确定正方形形状的第三编码单元1112a和1112b,且可以通过以水平方向划分右侧第二编码单元1110b来确定正方形形状的第三编码单元1114a和1114b。进而,图像解码装置100可以通过将左侧第二编码单元1110a和右侧第二编码单元1110b均以水平方向划分来确定正方形形状的第三编码单元1116a、1116b、1116c和1116d。在这种情况下,可以以与第一编码单元1100被划分为四个正方形形状的第二编码单元1130a、1130b、1130c和1130d的形式相同的形式确定编码单元。
根据另一个例子,图像解码装置100可以通过以垂直方向划分上端第二编码单元1120a来确定正方形形状的第三编码单元1122a和1122b,且可以通过以垂直方向划分下端第二编码单元1120b来确定正方形形状的第三编码单元1124a和1124b。进而,图像解码装置100可以通过将上端第二编码单元1120a和下端第二编码单元1120b均以垂直方向划分来确定正方形形状的第三编码单元1126a、1126b、1126a和1126b。在这种情况下,可以与将第一编码单元1100划分为四个正方形形状的第二编码单元1130a、1130b、1130c和1130d类似的形状确定编码单元。
图12图示根据一实施例的多个编码单元之间的处理顺序可以根据编码单元的划分过程而变更。
根据一实施例,图像解码装置100可以基于块形状信息和关于划分形式模式的信息来划分第一编码单元1200。当块形状信息显示出正方形形状且关于划分形式模式的信息显示第一编码单元1200被以水平方向和垂直方向中的至少一个方向划分时,图像解码装置100可以通过划分第一编码单元1200来确定第二编码单元(例如,1210a、1210b、1220a和1220b等)。参照图12,通过仅以水平方向或垂直方向划分第一编码单元1200来确定的非正方形形状的第二编码单元1210a、1210b、1220a和1220b可以基于关于各第二编码单元1210a、1210b、1220a和1220b的块形状信息和关于划分形式模式的信息被独立地划分。例如,图像解码装置100可以将通过以垂直方向划分第一编码单元1200来生成的第二编码单元1210a和1210b分别以水平方向划分来确定第三编码单元1216a、1216b、1216c和1216d,且可以将通过以水平方向划分第一编码单元1200生成的第二编码单元1220a和1220b分别以水平方向划分来确定第三编码单元1226a、1226b、1226c和1226d。已结合图11详细地描述了第二编码单元1210a、1210b、1220a和1220b的划分过程,故不再赘述。
根据一实施例,图像解码装置100可以按照预定的顺序来处理编码单元。已经结合图7描述了关于按照预定顺序的编码单元的处理的特征,故不再赘述。参照图12,图像解码装置100可以划分正方形形状的第一编码单元1200来确定四个正方形形状的第三编码单元1216a、1216b、1216c、1216d、1226a、1226b、1226c和1226d。根据一实施例,图像解码装置100可以根据第一编码单元1200被划分的形式确定第三编码单元1216a、1216b、1216c、1216d、1226a、1226b、1226c和1226d的处理顺序。
根据一实施例,图像解码装置100可以通过将以垂直方向划分而生成的第二编码单元1210a和1210b分别以水平方向划分来确定第三编码单元1216a、1216b、1216c和1216d,且可以按首先以垂直方向处理在左侧第二编码单元1210a中包括的第三编码单元1216a和1216b,然后以垂直方向处理在右侧第二编码单元1210b中包括的第三编码单元1216b和1216d的顺序1217来处理第三编码单元1216a、1216b、1216c和1216d。
根据一实施例,图像解码装置100可以通过将以水平方向划分而生成的第二编码单元1220a和1220b分别以垂直方向划分来确定第三编码单元1226a、1226b、1226c和1226d,且可以按首先以垂直方向处理在上端第二编码单元1220a中包括的第三编码单元1216a和1226b,然后以垂直方向处理在下端第二编码单元1220b中包括的第三编码单元1226b和1226d的顺序1227来处理第三编码单元1226a、1226b、1226c和1226d。
参照图12,通过将第二编码单元1210a、1210b、1220a和1220b各自划分可以确定正方形形状的第三编码单元1216a、1216b、1216c、1216d、1226a、1226b、1226c和1226d。以垂直方向划分而确定的第二编码单元1210a和1210b及以水平方向划分而确定的第二编码单元1220a和1220b是以彼此不同的形式划分的,然而,如果根据稍后被确定的第三编码单元,第一编码单元1200可以被划分为相同形状的编码单元。基于此,通过基于块形状信息和关于划分形式模式的信息中的至少一个来将编码单元以不同的过程进行递归划分,即使确定了结果上相同形状的多个编码单元,但是图像解码装置100可以按彼此不同的顺序来处理这种确定的相同形状的多个编码单元。
图13图示根据一实施例的当递归地划分编码单元来确定多个编码单元时随着编码单元的形状和尺寸的变化而确定编码单元的深度的过程。
根据一实施例,图像解码装置100可以根据预定的基准确定编码单元的深度。例如,预定的基准可以是编码单元的长边的长度。当以划分前的编码单元的长边的长度的2n(n>0)倍来将当前编码单元的长边的长度划分时,图像解码装置100可以确定当前编码单元的深度比划分前的编码单元的深度增加了n。以下,将其深度增加的编码单元表现为具有下位深度的编码单元。
参照图13,基于根据一实施例指示正方形形状的块形状信息(例如,块形状信息可以指示‘0:SQUARE’),图像解码装置100可以通过划分正方形形状的第一编码单元1300来确定下位深度的第二编码单元1302、第三编码单元1304等。若假定正方形形状的第一编码单元1300的尺寸为2N×2N,通过以1/2倍划分第一编码单元1300的宽度和高度而确定的第二编码单元1302可以具有N×N的尺寸。进而,通过将第二编码单元1302的宽度和高度分别划分为1/2尺寸而确定的第三编码单元1304可以具有N/2×N/2的尺寸。此时,第三编码单元1304的宽度和高度分别相当于第一编码单元1300的宽度和高度的1/4倍。当第一编码单元1300的深度为D时,第一编码单元1300的宽度和高度的1/2倍的第二编码单元1302的深度可以为D+1,第一编码单元1300的宽度和高度的1/4倍的第三编码单元1304的深度可以为D+2。
根据一实施例,图像解码装置100可以基于指示非正方形形状的块形状信息(例如,块形状信息可以指示'1:NS_VER',其指示高度长于宽度的非正方形,或者'2:NS_HOR',其指示宽度长于高度的非正方形)来划分非正方形形状的第一编码单元1310或1320而确定下位深度的第二编码单元1312或1322、第三编码单元1314或1324等。
图像解码装置100可以通过划分具有N×2N尺寸的第一编码单元1310的宽度和高度中的至少一个来确定第二编码单元(例如,第二编码单元1302、1312和1322等)。换言之,图像解码装置100可以以水平方向划分第一编码单元1310来确定具有N×N尺寸的第二编码单元1302或具有N×N/2尺寸的第二编码单元1322,也可以以水平方向和垂直方向划分来确定具有N/2×N尺寸的第二编码单元1312。
根据一实施例,图像解码装置100可以通过划分具有2N×N尺寸的第一编码单元1320的宽度和高度中的至少一个来确定第二编码单元(例如,1302、1312和1322等)。也就是说,图像解码装置100可以通过以垂直方向划分第一编码单元1320来确定具有N×N尺寸的第二编码单元1302或具有N/2×N尺寸的第二编码单元1312,也可以以水平方向和垂直方向来确定N×N/2尺寸的第二编码单元1322。
根据一实施例,图像解码装置100可以通过划分具有N×N尺寸的第二编码单元1302的宽度和高度中的至少一个来确定第三编码单元(例如,1304、1314和1324等)。换言之,图像解码装置100可以通过以垂直方向和水平方向划分第二编码单元1302来确定具有N/2×N/2尺寸的第三编码单元1304,确定具有N/4×N/2尺寸的第三编码单元1314,或确定具有N/2×N/4尺寸的第三编码单元1324。
根据一实施例,图像解码装置100可以通过划分具有N/2×N尺寸的第二编码单元1312的宽度和高度中的至少一个来确定第三编码单元(例如,1304、1314和1324等)。也就是说,图像解码装置100可以通过以水平方向划分第二编码单元1312来确定具有N/2×N/2尺寸的第三编码单元1304或具有N/2×N/4尺寸的第三编码单元1324,或者可以通过以垂直方向和水平方向划分第二编码单元1312来确定具有N/4×N/2尺寸的第三编码单元1314。
根据一实施例,图像解码装置100还可以通过划分具有N×N/2尺寸的第二编码单元1322的宽度和高度中的至少一个来确定第三编码单元(例如,1304、1314和1324等)。换言之,图像解码装置100可以通过以垂直方向划分第二编码单元1322来确定具有N/2×N/2尺寸的第三编码单元1304或N/4×N/2尺寸的第二编码单元1314,或者可以通过以垂直方向和水平方向划分第二编码单元1322来确定具有N/2×N/4尺寸的第三编码单元1324。
根据一实施例,图像解码装置100可以以水平方向或垂直方向划分具有正方形形状的编码单元(例如,1300、1302或1304)。例如,通过以垂直方向划分具有2N×2N尺寸的第一编码单元1300来确定具有N×2N尺寸的第一编码单元1310或以水平方向划分第一编码单元1300来确定具有2N×N尺寸的第一编码单元1320。根据一实施例,当深度基于编码单元的长度最大的边被确定的时,通过以水平方向或垂直方向划分具有2N×2N尺寸的第一编码单元1300而确定的编码单元的深度可以与第一编码单元1300的深度相同。
根据一实施例,第三编码单元1314或1324的宽度和高度可以相当于第一编码单元1310或1320的1/4倍。当第一编码单元1310或1320的深度为D时,作为第一编码单元1310或1320的高度和宽度的1/2倍的第二编码单元1312或1322的深度可以为D+1,作为第一编码单元1310或1320的1/4倍的第三编码单元1314或1324的深度可以为D+2。
图14图示根据一实施例的可根据编码单元的形状和尺寸确定的深度和用于区分编码单元的部分索引(part index,下称PID)。
根据一实施例,图像解码装置100可以通过划分具有正方形形状的第一编码单元1400来确定具有各种形状的第二编码单元。参照图14,图像解码装置100可以根据关于划分形式模式的信息以垂直方向和水平方向中的至少一个方向划分第一编码单元1400来确定第二编码单元1402a、1402b、1404a、1404b、1406a、1406b、1406c和1406d。就是说,图像解码装置100可以基于针对第一编码单元1400的关于划分形式模式的信息来确定第二编码单元1402a、1402b、1404a、1404b、1406a、1406b、1406c、1406d。
根据一实施例,基于针对正方形形状的第一编码单元1400的关于划分形式模式的信息而被确定的第二编码单元1402a、1402b、1404a、1404b、1406a、1406b、1406c和1406的深度可以基于长边的长度被确定。例如,正方形形状的第一编码单元1400的一个边的长度与非正方形形状的第二编码单元1402a、1402b、1404a和1404b的长边的长度相同,因此,第一编码单元1400和非正方形形状的第二编码单元1402a、1402b、1404a和1404b的深度可以被视为相同的D。相反地,当图像解码装置100基于关于划分形式模式的信息将第一编码单元1400划分为四个正方形形状的第二编码单元1406a、1406b、1406c和1406d的时,正方形形状的第二编码单元1406a、1406b、1406c和1406d的一个边的长度为第一编码单元1400的一个边的1/2倍,因此,第二编码单元1406a、1406b、1406c和1406d的深度可以是比第一编码单元1400的深度D深一个深度的深度,即,D+1。
根据一实施例,图像解码装置100可以根据关于划分形式模式的信息将长度大于宽度的第一编码单元1410以水平方向划分为多个第二编码单元1412a、1412b、1414a、1414b和1414c。根据一实施例,图像解码装置100可以根据关于划分形式模式的信息将宽度大于长度的第一编码单元1420以水平方向划分为多个第二编码单元1422a、1422b、1424a、1424b和1424c。
根据一实施例,根据针对非正方形形状的第一编码单元1410或1420的关于划分形式模式的信息而被确定的第二编码单元1412a、1412b、1414a、1414b、1414c、1422a、1422b、1424a、1424b和1406的深度可以基于长边的长度被确定。例如,正方形形状的第二编码单元1412a、1412b的一个边的长度为高度大于宽度的非正方形形状的第一编码单元1410的一个边的长度的1/2倍,因此,正方形形状的第二编码单元1412a和1412b的深度为比非正方形形状的第一编码单元1410的深度D深一个深度的深度D+1。
进而,图像解码装置100可以基于关于划分形式模式的信息将非正方形形状的第一编码单元1410划分为奇数个的第二编码单元1414a、1414b和1414c。奇数个的第二编码单元1414a、1414b和1414c可以包括非正方形形状的第二编码单元1414a和1414c及正方形形状的第二编码单元1414b。在这种情况下,非正方形形状的第二编码单元1414a和1414c的长边的长度和正方形形状的第二编码单元1414b的一个边的长度等于第一编码单元1410的一个边的长度的1/2倍,因此,第二编码单元1414a、1414b和1414c的深度为比第一编码单元1410的深度D深一个深度的深度D+1。图像解码装置100可以按照与确定与第一编码单元1410有关的编码单元的深度的所述方式对应的方式确定与宽度大于高度的非正方形形状的第一编码单元1420有关的编码单元的深度。
根据一实施例,对于确定用于区分被划分的编码单元的索引PID而言,当奇数个划分的编码单元的尺寸彼此不同时,图像解码装置100可以基于编码单元之间的尺寸比例来确定索引。参照图14,在划分的奇数个的编码单元1414a、1414b和1414c中,位于中央的编码单元1414b的宽度可以与其他编码单元1414a和1414c的宽度相同,然而,其高度可以等于其他编码单元1414a和1414c的高度的两倍。换言之,在这种情况下,位于中央的编码单元1414b可以包括两个其他编码单元1414a和1414c。因此,根据扫描顺序,若位于中央的编码单元1414的部分索引PID为1,位于下一个顺序的编码单元1414c的部分索引可以是从1增加2的3。换言之,有可存在索引值的不连续性。根据一实施例,图像解码装置100可以基于用于区分划分的编码单元的索引的不连续性是否存在,确定划分的奇数个的编码单元是否具有彼此相同的尺寸。
根据一实施例,图像解码装置100可以基于用于区分通过将当前编码单元划分来确定的多个编码单元的索引的值而确定是否使用特定划分形式进行划分。参照图14,图像解码装置100可以通过划分高度大于宽度的矩形形状的第一编码单元1410来确定偶数个的编码单元1412a和1412b或确定奇数个的编码单元1414a、1414b和1414c。图像解码装置100可以使用各编码单元的PID来区分多个编码单元。根据一实施例,可以从各编码单元中的预定位置的样本(例如,左侧上端的样本)获得PID。
根据一实施例,图像解码装置100可以使用用于区分编码单元的索引来确定被划分而确定的编码单元中的在预定位置的编码单元。根据一实施例,当针对高度大于宽度的矩形形状的第一编码单元1410的关于划分形式的信息指示第一编码单元1410被划分为三个编码单元时,图像解码装置100可以将第一编码单元1410划分为三个编码单元1414a、1414b和1414c。图像解码装置100可以分配针对三个编码单元1414a、1414b和1414c各自的索引。图像解码装置100可以对关于各编码单元的索引进行比较以在被划分的奇数个的编码单元中确定中央编码单元。图像解码装置100可以基于编码单元的索引将具有与索引的中央值对应的索引的编码单元1414b确定为通过划分第一编码单元1410来确定的编码单元中的位于中央的编码单元。根据一实施例,对于确定用于区分划分的编码单元的索引而言,当编码单元的尺寸彼此不同的时,图像解码装置100可以基于编码单元之间的尺寸比例来确定索引。参照图14,通过划分第一编码单元1410而生成的编码单元1414b的宽度与其他编码单元1414a和1414c的宽度相同,但其高度可以是高度同的其他编码单元1414a和1414c的高度的两倍。在这种情况下,若位于中央的编码单元1414b的PID为1,位于下一个顺序的编码单元1414的索引为增加2的3。如在这种情况下,当索引均匀地增加时增幅改变时,图像解码装置100可以确定通过使用包括具有与其他编码单元不同尺寸的编码单元的多个编码单元来进行划分。根据一实施例,当关于划分形式模式的信息指示以奇数个的编码单元进行划分时,图像解码装置100可以使用在奇数个编码单元中的具有预定位置的编码单元(例如,中央编码单元)具有与其他编码单元的尺寸不同的尺寸的形式将当前编码单元划分。在这种情况下,图像解码装置100可以使用关于编码单元的索引PID来确定具有不同尺寸的中央编码单元。然而,上述的索引、所要确定的预定位置的编码单元的尺寸或位置是为了说明一实施例而特定的,编码单元的确定不应被解释为受到限制,应解释为可以使用各种索引、编码单元的位置及尺寸。
根据一实施例,图像解码装置100可以使用开始编码单元的递归性划分的预定的数据单元。
图15图示根据一实施例的基于在画面中包括的多个预定的编码单元来确定多个编码单元。
根据一实施例,预定的数据单元可以被定义为使用块形状信息和关于划分形式模式的信息中的至少一个开始在其中递归地划分编码单元的数据单元。换言之,预定的数据单元可以相当于在确定划分当前画面的多个编码单元的过程中使用的最上位深度的编码单元。在下文中,为了便于说明,将这些预定的数据单元指称为基准数据单元。
根据一实施例,基准数据单元可以指示预定的尺寸和形状。根据一实施例,基准编码单元可以包括M×N的样本。这里,M和N可以彼此相同,也可以是被表现为2的乘数的整数。换言之,基准数据单元可以显示出正方形或非正方形的形状,以后可以被划分为整数个的编码单元。
根据一实施例,图像解码装置100可以将当前画面划分为多个基准数据单元。根据一实施例,图像解码装置100可以使用针对各个基准数据单元的关于划分形式模式的信息来划分用于划分当前画面的多个基准数据单元。基准数据单元的这种划分过程可以对应于使用四叉树(quad-tree)结构的划分过程。
根据一实施例,图像解码装置100可以预先确定包括在当前画面中的基准数据单元可以具有的最小的尺寸。由此,图像解码装置100可以确定具有等于或大于最小尺寸的各种尺寸的基准数据单元,且可以基于所确定的基准数据单元使用块形状信息和关于划分形式模式的信息来确定至少一个编码单元。
参照图15,图像解码装置100既可以使用正方形形状的基准编码单元1500,也可以使用非正方形形状的基准编码单元1502。根据一实施例,基准编码单元的形状和尺寸可以由可包括至少一个基准编码单元的各种数据单元(例如,序列(sequence)、画面(picture)、条带(slice)、条带片段(slice segment)和最大编码单元等)所确定。
根据一实施例,图像解码装置100的接收单元110可以根据所述各种数据单元从比特流获得关于基准编码单元的形状的信息和关于基准编码单元的尺寸的信息中的至少一个。通过图3的当前编码单元300被划分的过程详细地描述了在正方形形状的基准编码单元1500中包括的至少一个编码单元被确定的过程,而且通过图4的当前编码单元400或450被划分的过程详细地描述了在非正方形形状的基准编码单元1502中包括的至少一个编码单元的过程,故不再赘述。
根据一实施例,图像解码装置100可以使用用于识别基准编码单元的尺寸和形状的索引以根据基于预定条件被预定的一些数据单元确定基准编码单元的尺寸和形状。换言之,针对作为所述各种数据单元(例如,序列、画面、条带、条带片段和最大编码单元等)中满足预定条件(例如,尺寸小于或等于条带的数据单元)的数据单元的每个条带、条带段、最大编码单元,接收单元110可以从比特流仅获得用于识别基准编码单元的尺寸及形状的索引。图像解码装置100可以使用索引对满足所述预定条件的每个数据单元确定基准数据单元的尺寸和形状。当根据相对小的数据单元从比特流获得并使用关于基准编码单元的形状的信息和关于基准编码单元的尺寸的信息时,比特流的使用效率可能不好,因此,可以仅获得并使用所述索引,而不是直接获得关于基准编码单元的形状的信息和关于基准编码单元的尺寸的信息。在这种情况下,与指示基准编码单元的尺寸和形状的索引对应的基准编码单元的尺寸和形状中的至少一个可以是预定的。换言之,图像解码装置100可以基于索引选择预定的基准编码单元的尺寸和形状中的至少一个以确定在用作获得索引的基准的数据单元中包括的基准编码单元的尺寸和形状中的至少一个。
根据一实施例,图像解码装置100可以使用在一个最大编码单元中包括的至少一个基准编码单元。换言之,划分图像的最大编码单元可以包括至少一个基准编码单元,且可以通过各个基准编码单元的递归划分过程确定编码单元。根据一实施例,最大编码单元的宽度和高度中的至少一个可以相当于基准编码单元的宽度和高度中的至少一个的整数倍。根据一实施例,基准编码单元的尺寸可以是将最大编码单元根据四叉树结构划分n次而获得的尺寸。换言之,图像解码装置100可以通过将最大编码单元根据四叉树结构划分n次来确定基准编码单元,且可以根据各种实施例基于块形状信息和关于划分形式模式的信息中的至少一个划分基准编码单元。
图16图示根据一实施例的作为确定在画面1600中包括的基准编码单元的确定顺序的基准的处理块。
根据一实施例,图像解码装置100可以确定用于划分画面的至少一个处理块。处理块为包括划分图像的至少一个基准编码单元的数据单元,在处理块中包括的至少一个基准编码单元是可以按照特定顺序确定的。换言之,在各个处理块中确定的至少一个基准编码单元的确定顺序可以相当于可以确定基准编码单元的各种顺序的类型之一,在各个处理块中确定的基准编码单元的确定顺序可以根据各处理块不同。在每个处理块中确定的基准编码单元的确定顺序可以是光栅扫描(raster scan)、Z扫描(Z-scan)、N扫描(N-scan)、右上对角扫描(up-right diagonal scan)、水平扫描(horizontal scan)和垂直扫描(verticalscan),然而,可以确定的顺序不应被解释为限于所述扫描顺序。
根据一实施例,图像解码装置100可以通过获得关于处理块的尺寸的信息来确定被包括在图像中的至少一个处理块的尺寸。图像解码装置100可以通过从比特流中获得关于处理块的信息来确定在图像中包括的至少一个处理块的尺寸。这种处理块的尺寸可以是关于处理块的尺寸的信息所指示的数据单元的预定的尺寸。
根据一实施例,图像解码装置100的接收单元110可以从比特流中根据每个特定的数据单元获得关于处理块的尺寸的信息。例如,关于处理块的尺寸的信息是可以根据图像、序列、画面、条带、条带片段等的数据单元从比特流中获得的。换言之,接收单元110可以根据所述多个数据单元分别从比特流中获得关于处理块的尺寸的信息,图像解码装置100可以使用所获得的关于处理块的尺寸的信息来确定用于划分画面的至少一个处理块的尺寸,这种处理块的尺寸可以是基准编码单元的整数倍的尺寸。
根据一实施例,图像解码装置1000可以确定包括在画面1600中的处理块1602和1612的尺寸。例如,图像解码装置1000可以基于从比特流获得的关于处理块的尺寸的信息来确定处理块的尺寸。参照图16,图像解码装置100可以根据一实施例将处理块1602和1612的横向尺寸确定为基准编码单元的横向尺寸的四倍,并将纵向尺寸确定为基准编码单元的纵向尺寸的四倍。图像解码装置100可以确定在至少一个处理块内确定至少一个基准编码单元的顺序。
根据一实施例,图像解码装置100可以基于处理块的尺寸来确定被包括在画面1600中的各个处理块1602和1612,且可以确定被包括在处理块1602和1612中的至少一个基准编码单元的确定顺序。根据一实施例,对基准编码单元的确定可以包括对基准编码单元的尺寸的确定。
根据一实施例,图像解码装置100可以从比特流中获得关于在至少一个处理块中包括的至少一个基准编码单元的确定顺序的信息,且可以基于所获得的关于确定顺序的信息来确定至少一个基准编码单元被确定的顺序。关于确定顺序的信息是可以根据在处理块内的基准编码单元被确定的顺序或方向确定的。换言之,基准编码单元被确定的顺序是可以在每个处理块中独立地确定的。
根据一实施例,图像解码装置100可以根据每个特定数据单元从比特流中获得关于基准编码单元的确定顺序的信息。例如,接收单元110可以根据图像、序列、画面、条带、条带片段、处理块等的每个数据单元从比特流中获得关于基准编码单元的确定顺序的信息。关于基准编码单元的确定顺序的信息指示在处理块内的基准编码单元的确定顺序,因此,可以根据包括整数个的处理块的每个特定数据单元获得关于确定顺序的信息。
图像解码装置1000可以基于根据一实施例确定的顺序来确定至少一个基准编码单元。
根据一实施例,接收单元110可以从比特流中获得作为与处理块1602和1612有关的信息的关于基准编码单元的确定顺序的信息,图像解码装置100可以确定在所述处理块1602和1612中包括的至少一个基准编码单元的顺序,且可以基于编码单元的确定顺序来确定在画面1600中包括的至少一个基准编码单元。参照图16,图像解码装置100可以确定与各个处理块1602和1612有关的至少一个基准编码单元的确定顺序1604和1614。例如,当根据每个处理块而获得关于基准编码单元的确定顺序的信息时,与各个处理块1602和1612有关的基准编码单元的确定顺序可以根据每个处理块不同。当与处理块1602有关的基准编码单元的确定顺序1604为光栅扫描(raster scan)顺序时,在处理块1602中包括的基准编码单元可以根据光栅扫描顺序而被确定。相反,当与其他处理块1612有关的基准编码单元的确定顺序1614是光栅扫描顺序的倒序时,在处理块1612中包括的基准编码单元是以根据光栅扫描顺序的倒序而被确定。
图像解码装置100可以根据一实施例对所确定的至少一个编码单元进行解码。图像解码装置100可以根据通过上述的实施例被确定的基准编码单元对图像进行解码。对基准编码单元进行解码的方法可以包括对图像进行解码的各种方法。
根据一实施例,图像解码装置100可以从比特流中获得且使用指示当前编码单元的形状的块形状信息或指示划分当前编码单元的方法的关于划分形式模式的信息。块形状信息或关于划分形式模式的信息可以包括在与各种数据单元有关的比特流中。例如,图像解码装置100可以使用在序列参数集(sequence parameter set)、画面参数集(pictureparameter set)、视频参数集(video parameter set)、条带头(slice header)和条带片段头(slice segment header)中包括的块形状信息或关于划分形式模式的信息。进而,图像解码装置100可以根据最大编码单元、基准编码单元和处理块从比特流获得与块形状信息或关于划分形式模式的信息对应的语法元素并使用该语法元素。
以下,详细描述根据本公开的一实施例的确定划分规则的方法。
图像解码装置100可以确定图像的划分规则。划分规则可在图像解码装置100和图像编码装置2300之间预先确定。图像解码装置100可以基于从比特流获得的信息来确定图像的划分规则。图像解码装置100可以基于从序列参数集(sequence parameter set)、画面参数集(picture parameter set)、视频参数集(video parameter set)、条带头(sliceheader)和条带片段头(slice segment header)中的至少一个获得的信息来确定划分规则。图像解码装置100可以根据帧、条带、时域层(Temporal layer)、最大编码单元或编码单元而不同地确定划分规则。
图像解码装置100可以基于编码单元的块形状信息来确定划分规则。图像解码装置100可以确定编码单元的块形状信息。块形状信息可以包括编码单元的尺寸、形状、宽度与高度的比例和方向信息。图像编码装置2300和图像解码装置100可以预先确定基于编码单元的块形状信息来确定划分规则。然而,不限于此。图像解码装置100可以基于从图像解码装置2300接收的比特流中获得的信息来确定划分规则。
编码单元的形状可以包括正方形(square)及非正方形(non-square)。当编码单元的宽度和高度彼此相同时,图像解码装置100可以将编码单元的形状确定为正方形。并且,当编码单元的宽度和高度的长度彼此不同时,图像解码装置100可以将编码单元的形状确定为非正方形。
编码单元的尺寸可以包括4×4、8×4、4×8、8×8、16×4、16×8、…、256×256的各种尺寸。编码单元的尺寸是可以根据编码单元的长边的长度、短边的长度或宽度而分类的。图像解码装置100可以对被分类成相同群组的编码单元应用相同的划分规则。例如,图像解码装置100可以将具有长边的长度相同的编码单元分类成相同的尺寸。并且,图像解码装置100可以对具有相同的长边长度的编码单元应用相同的划分规则。
编码单元的宽度与高度的比例可以包括1:2、2:1、1:4、4:1、1:8、8:1、1:16或16:1等。并且,编码单元的方向可以包括水平方向和垂直方向。水平方向可以指示编码单元的宽度的长度大于高度的长度的情况。垂直方向可以指示编码单元的宽度的长度小于高度的长度的情况。
图像解码装置100可以基于编码单元的尺寸适应性地确定划分规则。图像解码装置100可以基于编码单元的尺寸不同地确定可允许的划分形式模式。例如,图像解码装置100可以基于编码单元的尺寸确定是否可以允许划分。图像解码装置100可以根据编码单元的大小确定划分方向。图像解码装置100可以根据编码单元的大小来确定可允许的划分类型。
基于编码单元的尺寸确定划分规则可以是在图像编码装置2300和图像解码装置100之间预先确定的划分规则。并且,图像解码装置100可以基于从比特流获得的信息确定划分规则。
图像解码装置100可以基于编码单元的位置适应性地确定划分规则。图像解码装置100可以基于编码单元在图像中占据的位置适应性地确定划分规则。
并且,图像解码装置100可以确定划分规则以防止通过彼此不同的划分途径生成的编码单元具有相同的块形状。然而,并不限于此,通过彼此不同的划分途径生成的编码单元可以具有相同的块形状。通过彼此不同的划分途径生成的编码单元可以具有彼此不同的解码处理顺序。已经结合图12描述了解码处理顺序,故不再赘述。
并且,图像解码装置100可以基于关于编码的帧(或者条带)的划分形式模式的信息、关于与当前块邻近的邻近块的划分形式模式的信息来适应地确定划分规则。以下,结合图17至图22详细地描述使用重复块运动补偿(OBMC:Overlapped Block MotionCompensation)来对图像解码的方法和其装置。
图17图示根据一实施例的编码单元以及子块。
如在图3至图16中所述,图像解码装置100可以将图像划分为至少一个编码单元。编码单元1700可以包括在至少一个编码单元中。
编码单元1700可以包括至少一个子块。子块可以是用于图像解码装置100获得编码单元1700的运动信息的单元。一个编码单元可以包括具有相同尺寸的至少一个子块。至少一个子块的尺寸可以根据编码单元、条带或图像而确定。就是说,至少一个子块的尺寸可以根据编码单元、条带或图像而不同。
根据本公开的一实施例,图像解码装置100可以将至少一个子块的尺寸确定为预定的尺寸。例如,至少一个子块的预定的尺寸可以是2×2、4×4和8×8中的一个。由于至少一个子块的尺寸是预定的,图像解码装置100可以不从图像解码装置2300接收关于子块的尺寸的信息。
根据本公开的一实施例,图像解码装置100可以根据预定的条件确定至少一个子块的尺寸。图像解码装置100可以根据编码单元的尺寸确定至少一个子块的尺寸。当编码单元的尺寸大于阈值时,图像解码装置100可以确定子块具有大尺寸。并且,当编码单元的尺寸小于阈值时,图像解码装置100可以确定子块具有小尺寸。用于确定编码单元的基准可以是编码单元的宽度的大小、幅度的大小和编码单元的宽度中的至少一个。
例如,当当前编码单元的宽度和幅度的最小值或最大值大于或等于阈值时,可以将子块的尺寸确定为8×8。并且,当当前编码单元的宽度和幅度的最小值或最大值小于阈值时,可以将子块的尺寸确定为4×4。
另外,当当前编码单元的宽度和幅度的最小值或最大值大于或等于阈值时,可以将子块的尺寸确定为4×4。并且,当当前编码单元的宽度和幅度的最小值或最大值小于阈值时,可以将所述子块的尺寸确定为2×2。
还有,当当前编码单元的宽度等于或大于阈值时,可以将子块的尺寸确定为8×8。并且,当当前编码单元的宽度小于阈值时,可以将所述子块的尺寸确定为4×4。
另外,当当前编码单元的宽度大于或等于阈值时,可以将子块的大小确定为4×4。并且,当当前编码单元的宽度小于阈值时,可以将所述子块的尺寸确定为2×2。
根据本公开的一实施例,图像解码装置100可以基于从图像编码装置2300获得的比特流来适应性地确定至少一个子块的尺寸。比特流可以包括与子块的尺寸有关的信息。图像解码装置100可以按照画面单元、条带单元或编码单元接收与子块的尺寸有关的信息。至少一个子块的尺寸可以为2×2、4×4和8×8中的一个。当没有接收与子块的大小有关的信息时,图像解码装置100可以将子块的尺寸确定为默认(default)尺寸。基本尺寸可以为2×2、4×4和8×8中的一个。
图像解码装置100可以确定在当前编码单元1700中包括的至少一个子块。至少一个子块可以包括当前子块1710。图像解码装置100可以确定当前子块1710的邻近子块。邻近子块可以包括上侧子块1711、左侧子块1712、右侧子块1713和下侧子块1714。
当当前子块1710存在于当前编码单元1700的边界时,当前子块1710可以包括在当前编码单元1700中,然而,邻近子块中的至少一个可以被包括在当前编码单元1700的邻近编码单元中。例如,若当前子块1710位于当前编码单元1700的左侧边界,则当前子块1710的左侧子块1712可以包括在当前编码单元1700的左侧编码单元中。
类似地,当当前子块位于当前编码单元1700的上侧边界时,当前子块的上侧子块可以包括在当前编码单元1700的上侧编码单元中。并且,当当前子块位于当前编码单元1700的右侧边界时,当前子块的右侧子块可以包括在当前编码单元1700的右侧编码单元中。而且,当当前子块位于当前编码单元1700的下侧边界时,当前子块的下侧子块可以包括在当前编码单元1700的下侧编码单元中。
还有,当当前子块位于当前编码单元1700的左上侧、左下侧、右上侧或右下侧的边界时,当前子块的左上侧子块、左下侧子块、右上侧子块或右下侧子块可以包括在当前编码单元1700的左上侧、左下侧、右上侧或右下侧的编码单元中。
当当前子块1720不位于当前编码单元1700的边界时,邻近子块1721、1722、1723和1724都可以包括在当前编码单元1700中。
图像解码装置100可以确定在帧间模式下预测当前编码单元1700。图像解码装置100可以确定当前编码单元1700的运动信息。图像解码装置100可以针对当前编码单元1700确定一个运动信息。
并且,当确定在帧间模式下预测当前编码单元1700时,图像解码装置100可以确定当前编码单元1700包括至少一个子块。图像解码装置100可以针对包括在编码单元1700中的每个子块确定运动信息。图像解码装置100可以使用帧率上转换(FRUC:Frame Rate UpConversion)模式、先进时间运动矢量预测(ATMVP:Advanced Temporal Motion VectorPredidction)模式及Affine模式以获得子块的运动信息。运动信息可以包括运动矢量信息和子块的参照图像信息中的至少一个。图像解码装置100可以基于运动信息确定子块的运动矢量和参照图像。
图像解码装置100可以将当前子块1710的运动矢量确定为mvC。图像解码装置100可以将当前子块1710的上侧子块1711的运动矢量确定为mvA。图像解码装置100可以将当前子块1710的左侧子块1712的运动矢量确定为mvL。图像解码装置100可以将当前子块1710的右侧子块1713的运动矢量确定为mvR。图像解码装置100可以将当前子块1710的下侧子块1714的运动矢量确定为mvB。
图18图示根据一实施例的从子块的运动矢量获得当前子块的预测因子(predictor)的方法。
图像解码装置100可以根据重复块运动补偿(Overlapped Block MotionCompensation)的一实施例,基于当前子块的运动矢量获得当前子块的当前预测因子(current predictor)。当前预测因子的尺寸可以与当前子块的尺寸相同。
图像解码装置100可以基于比特流或邻近编码单元的运动信息中的至少一个来获得当前编码单元的运动信息。并且,图像解码装置100可以根据比特流、当前编码单元的运动信息、邻近编码单元的运动信息、邻近子块的运动信息和以前恢复的图像中的至少一个来获得当前子块的运动信息。
图像解码装置100可以获得包括在当前子块的运动信息中的参照图像信息和运动矢量信息。参照图像信息是用于从包括预先恢复的参照图像的列表中选择当前块所参照的图像的信息。例如,参照图像信息可以包括用于从多个参照图像列表中选择至少一个列表的信息或用于从至少一个列表中选择至少一个参照图像的信息。并且,运动矢量信息是用于获得为了在帧间模式下预测当前块而使用的运动矢量的信息。
图像解码装置100可以基于参照图像信息来获得当前子块的参照图像1810。图像解码装置100可以基于针对当前图像的当前子块中包括的像素的位置,确定参照图像1810内的像素的位置1811。针对当前图像的当前子块的像素的位置可通过从当前图像的左上侧到当前子块内的像素的坐标值来指示。图像解码装置100可以基于当前子块的运动矢量信息来确定当前子块的运动矢量1812。图像解码装置100可以基于像素的位置1811和运动矢量1812来确定预测像素的位置1813。在参照图像1810内与预测像素的位置1813对应的样本(像素值)可以是当前子块内的一个样本的预测值。由包括在当前子块中的多个样本的预测值组成的块可以是当前子块的当前预测因子。换言之,图像解码装置100可以从参照图像1810获得具有与当前子块类似的样本的当前预测因子。
图像解码装置100可以基于包括当前子块的上侧、左侧、右侧和下侧子块中的至少一个的邻近子块的运动矢量来获得包括当前子块的上侧预测因子、左侧预测因子、右侧预测因子和下侧预测因子中的至少一个的邻近预测因子。邻近预测因子的尺寸可以与邻近子块的尺寸相同。
具体地,图像解码装置100可以获得在当前子块的上侧子块的运动信息中包括的参照图像信息和运动矢量信息。图像解码装置100可以基于上侧子块的参照图像信息来获得参照图像1820。图像解码装置100可以基于针对当前图像的当前子块中包括的像素的位置,来确定参照图像1820内的像素的位置1821。图像解码装置100可以基于上侧子块的运动矢量信息来确定上侧子块的运动矢量1822。图像解码装置100可以基于像素的位置1821和运动矢量1822来确定预测像素的位置1823。由于当前子块和上侧子块之间的空间相似性,在上侧子块的参照图像1820内与预测像素的位置1823对应的像素可以是当前子块内的一个样本的预测值。上侧预测因子指示从上侧子块的运动信息预测的当前子块中包括的多个样本的预测值。图像解码装置100可以从上侧子块的参照图像1820中获得具有与当前子块类似的样本的上侧预测因子。
并且,图像解码装置100可以获得包括在当前子块的左侧子块的运动信息中的参照图像信息和运动矢量信息。图像解码装置100可以基于左侧子块的参照图像信息来获得参照图像。图像解码装置100可以基于针对当前图像的当前子块中包括的像素的位置来确定参照图像1830内的像素的位置1831。图像解码装置100可以基于左侧子块的运动矢量信息来确定左侧子块的运动矢量1832。图像解码装置100可以基于像素的位置1831和运动矢量1832来确定预测像素的位置1833。由于当前子块和左侧子块之间的空间相似性,在左侧子块的参照图像1830内与预测像素的位置1833对应的样本可以是当前子块内的一个像素的预测值。左侧预测因子指示从左侧子块的运动信息预测的在当前子块中包括的多个样本的预测值。图像解码装置100可以从左侧子块的参照图像1830中获得具有与当前子块类似的样本的左侧预测因子。
并且,图像解码装置100可以获得包括在当前子块的右侧子块的运动信息中的参照图像信息和运动矢量信息。图像解码装置100可以基于右侧子块的参照图像信息来确定参照图像1840。图像解码装置100可以基于针对当前图像的在当前子块中包括的像素的位置来确定在参照图像1840内的像素的位置1841。图像解码装置100可以基于右侧子块的运动矢量信息来确定右侧子块的运动矢量1842。图像解码装置100可以基于像素的位置1841和运动矢量1842来确定预测像素的位置1843。由于当前子块和右侧子块之间的空间相似性,在右侧子块的参照图像1840内与预测像素的位置1843对应的样本可以是当前子块内的一个样本的预测因子。右侧预测因子指示从右侧子块的运动信息预测的在当前子块中包括的多个样本的预测值。图像解码装置100可以从右侧子块的参照图像1840获得具有与当前子块类似的样本的右侧预测因子。
并且,图像解码装置100可以获得包括在当前子块的下侧子块的运动信息中的参照图像信息和运动矢量信息。图像解码装置100可以基于下侧子块的参照图像信息来获得参照图像1850。图像解码装置100可以基于针对当前图像的在当前子块中包括的像素的位置来确定在参照图像1850内的像素的位置1851。图像解码装置100可以基于下侧子块的运动矢量信息来确定下侧子块的运动矢量1852。图像解码装置100可以基于像素的位置1851和运动矢量1852来确定预测像素的位置1853。由于当前子块和下侧子块之间的空间相似性,在下侧子块的参照图像1850内与预测像素的位置1853对应的样本可以是当前子块内的一个样本的预测因子。下侧预测因子指示从下侧子块的运动信息预测的在当前子块中包括的多个样本的预测值。图像解码装置100可以从下侧子块的参照图像1850获得具有与当前子块类似的样本的下侧预测因子。
根据本公开的一实施例,邻近子块的运动信息可能不可用。例如,可能存在邻近子块是被帧内预测的情况。并且,当前子块可能位于当前图像的边界而不存在邻近子块。图像解码装置100可以确定邻近子块的运动信息是否可用。并且,当邻近子块的运动信息不可用时,图像解码装置100可以基于与所述当前子块有关的信息来确定邻近预测因子。
例如,当前子块的上侧子块的运动信息可能不可用。当上侧子块的运动信息不可用时,图像解码装置100可以基于与当前子块有关的信息来获得上侧预测因子。图像解码装置100可以获得当前预测因子作为上侧预测因子。
并且,当左侧子块的运动信息不可用时,图像解码装置100可以基于与当前子块有关的信息来获得左侧预测因子。图像解码装置100可以获得当前预测因子作为左侧预测因子。
并且,当右侧子块的运动信息不可用时,图像解码装置100可以基于关于当前子块的信息来获得右侧预测因子。图像解码装置100可以获得当前预测因子作为右侧预测因子。
还有,当下侧子块的运动信息不可用时,图像解码装置100可以基于关于当前子块的信息来获得下侧预测因子。图像解码装置100可以获得当前预测因子用作为下侧预测因子。
在上文中,对重复块运动补偿的处理块的尺寸和子块的尺寸彼此相同的情况进行了描述。然而,不限于此,图像解码装置100可以将重复块运动补偿的处理块的尺寸设定为大于子块的尺寸。例如,即使编码单元的子块的尺寸为2×2或4×4,图像解码装置100可以用8×8尺寸的处理块执行重叠块运动补偿。图像解码装置100可以从包括在处理块中的多个子块获得代表运动矢量。例如,可以基于包括在当前处理块中的左上侧子块的运动信息来确定当前处理块的运动信息。或者,可以基于包括在当前处理块中的子块的运动信息的平均来确定当前处理块的运动信息。运动信息的平均可以是指子块的运动矢量的x轴上的值的平均、y轴上的值的平均,或参照图像的POC值的平均。图像解码装置100可以基于处理块的运动信息来获得当前预测因子。并且,图像解码装置100可以通过与此相同的方式来获得邻近预测因子。
图像解码装置100可以确定包括关于当前预测因子的加权值的当前加权值块和包括关于邻近预测因子的加权值的邻近加权值块。对此,结合图19至图21进行描述。
图19图示根据一实施例的当前加权值块和邻近加权值块。
图像解码装置100可以获得关于当前预测因子的当前加权值块和关于邻近预测因子的邻近加权值块。图像解码装置100和图像编码装置2300可以使用预先确定的当前加权值块和邻近加权值块。换言之,由于图像解码装置100和图像编码装置2300在存储器内存储有关于当前加权值和邻近加权值块的信息,可以不收发关于当前加权值块和邻近加权值块的信息。当前加权值块和邻近加权值块可以基于当前编码单元的子块的尺寸来确定。然而,不限于此,图像解码装置100可以基于从图像编码装置2300接收的比特流来获得当前加权值块和邻近加权值块。
当子块的尺寸为8×8时(1910),图像解码装置100可以确定包括关于当前预测因子的加权值的当前加权值块1911。并且,图像解码装置100可以确定包括关于上侧预测因子的加权值的上侧加权值块1912。图像解码装置100可以确定包括关于左侧预测因子的加权值的左侧加权值块1913。图像解码装置100可以确定包括关于下侧预测因子的加权值的下侧加权值块1914。图像解码装置100可以确定包括关于右侧预测因子的加权值的右侧加权值块1915。
当前加权值块1911可以左右对称。例如,当前加权值块1911可以相对于垂直中心线1917而左右对称。并且,当前加权值块1911可以上下对称。例如,当前加权值块1911可以相对于水平中心线1916而上下对称。
在当前加权值块1911中,位于边界的加权值可小于位于中心的加权值。并且,当前加权值块1911的值可以朝向中心增加。图像解码装置100可以将当前加权值块1911应用于当前预测因子来对当前预测因子的中心应用高的加权值并对当前预测因子的边界应用低的加权值。
上侧加权值块1912的值可以越向上侧边界而变得越大。图像解码装置100可以将上侧加权值块1912应用于上侧预测因子来对上侧预测因子的上侧边界应用高的加权值并对上侧预测因子的下侧边界应用低的加权值。
左侧加权值块1913的值可以越向左侧边界而变得越大。图像解码装置100可以将左侧加权值块1913应用于左侧预测因子来对左侧预测因子的左侧边界应用高的加权值并对左侧预测因子的右侧边界应用低的加权值。
下侧加权值块1914的值可以越向下侧边界而变得越大。图像解码装置100可以将下侧加权值块1914应用于下侧预测因子来对下侧预测因子的下侧边界应用高的加权值并对下侧预测因子的上侧边界应用低的加权值。
右侧加权值块1915的值可以越向右侧边界而变得越大。图像解码装置100可以将右侧加权值块1915应用于右侧预测因子来对右侧预测因子的右侧边界应用高的加权值并对右侧预测因子的左侧边界应用低的加权值。
在上侧加权值块1912、左侧加权值块1913、下侧加权值块1914,或右侧加权值块1915中包括的加权值对在当前加权值块1911中包括的加权值可以具有恒定的比例。例如,当前加权值块1911的左上侧加权值、上侧加权值块1912的左上侧加权值和左侧加权值块1913的最上侧加权值可以具有4:2:2的比例。
图像解码装置100可以对当前预测因子应用当前加权值块并对邻近预测因子应用邻近加权值块来获得提高的当前预测因子。更具体地,图像解码装置100可以使用以下的式1来获得提高的当前预测因子。
[式1]
Pred(final)=(Pred(mvC)*wt_C+Pred(mvA)*wt_A+Pred(mvL)*wt_L+Pred(mvB)*wt_B+Pred(mvR)*wt_R+offset)>>scale
在此,Pred(final)是指提高的当前预测因子。Pred(mvC)是指基于当前运动矢量(mvC)的当前预测因子。wt_C是指当前加权值块。Pred(mvA)是指基于上侧运动矢量mvA的上侧预测因子。wt_A是指上侧加权值块。Pred(mvL)是指基于左侧运动矢量mvL的左侧预测因子。wt_L是指左侧加权值块。Pred(mvB)是指基于下侧运动矢量mvB的下侧预测因子。wt_B是指下侧加权值块。Pred(mvR)是指基于右侧运动矢量mvR的右侧预测因子。wt_R是指右侧加权值块。offset作为用于指示四舍五入的值且offset具有如1<<(scale-1)的值。
scale是用于补正由加权值缩放的值的值。scale可以基于包括在当前加权值块1911和邻近加权值块1912、1913、1914和1915的样本(加权值)获得。scale可以基于当前加权值块1911和邻近加权值块1912、1913、1914和1915的处在相同位置的样本的和获得。例如,包括将处在当前加权值块1911、上侧加权值块1912、左侧加权值块1913、下侧加权值块1914和右侧加权值块1915的相同位置的样本相加而获得的8×8尺寸的合算块的样本可以具有彼此相同的值。例如,合算块的要素均可以是8。此时,scale值可以是log2(8)。也就是说,scale值可以为3。合算块的要素可以具有8之外的值对普通技术人员而言是显而易见的。并且,可以基于合算块的要素的值确定scale值。
根据本公开的另一实施例,在合算块中包括的样本可以根据位置具有彼此不同的值。图像解码装置100可以根据位置确定不同scale的值。
在式1中描述了使用当前子块的上侧子块的运动信息、左侧子块的运动信息、右侧子块的运动信息和下侧子块的运动信息的实施例。然而,不限于此,还可以使用左上侧子块的运动信息、右上侧子块的运动信息、左下侧子块的运动信息和右下侧子块的运动信息。
左上侧加权值块,右上侧加权值块、左下侧加权值块及右下侧加权值块可以基于当前加权值块1911、上侧加权值块1912、左侧加权值块1913、下侧加权值块1914及右侧加权值块1915中的至少一个获得。并且,左上侧加权值块、右上侧加权值块、左下侧加权值块及右下侧加权值块可以基于邻近加权值块获得。例如,左上侧加权值块可以基于在当前加权值块1911、上侧加权值块1912和左侧加权值块1913中包括的加权值的平均值确定。当使用左上侧加权值块、右上侧加权值块、左下侧加权值块和右下侧加权值块时,如上所述,scale值可以根据合算块的要素的值而变更的。
如已结合图18所述,当上侧子块的运动信息、左侧子块的运动信息、右侧子块的运动信息及下侧子块的运动信息中的任何一个不可用时,图像解码装置100可以基于当前预测因子获得上侧预测因子、左侧预测因子、右侧预测因子或下侧预测因子。
根据本公开的一实施例,当子块的尺寸为8×8时(1910),图像解码装置100获得提高的预测因子的方法如下。图像解码装置100将当前预测因子的第一位置的样本乘以当前加权值块1911的第一位置的加权值。还有,图像解码装置100将上侧预测因子的第一位置的样本乘以上侧加权值块1912的第一位置的加权值。并且,图像解码装置100将左侧预测因子的第一位置的样本乘以左侧加权值块1913的第一位置的加权值。并且,图像解码装置100以下侧预测因子的第一位置的样本乘以下侧加权值块1914的第一位置的加权值。还有,图像解码装置100将右侧预测因子的第一位置的样本乘以右侧加权值块1915的第一位置的加权值。图像解码装置100将加权值被应用的第一位置的预测因子样本与offset相加。图像解码装置100基于scale执行移位(shifting)运算来获得提高的预测因子的第一位置的样本。图像解码装置100还可以对当前预测因子的其他位置执行相同的过程来获得提高的预测因子。
当子块的尺寸为4×4时(1920),图像解码装置100可以获得当前加权值块1921、上侧加权值块1922、左侧加权值块1923、下侧加权值块1924和右侧加权值块1925中的至少一个。关于子块的尺寸为4×4的情况(1920)的说明与关于子块的尺寸为8×8的情况(1910)的说明重复,故不再赘述。
当子块的尺寸为2×2时1930,图像解码装置100可以获得当前加权值块1931、上侧加权值块1932、左侧加权值块1933、下侧加权值块1934和右侧加权值块1935中至少一个。关于子块的尺寸为2×2的情况(1930)的说明与关于子块的尺寸为8×8的情况(1910)的说明重复,故不再赘述。
根据本公开的一实施例,当亮度(luminance)子块为8×8时,色度(chrominance)子块可以为4×4。即,可以对亮度子块使用子块的尺寸为8×8的情况(1910)的加权值块,而对色度子块使用子块的尺寸为4×4的情况(1920)的加权值块。
根据本公开的另一实施例,当亮度(luminance)子块为4×4时,色度(chrominance)子块可以为2×2。也就是说,对亮度子块可以使用子块的尺寸为4×4的情况(1920)的加权值块,对色度子块可以使用子块的尺寸为2×2的情况(1930)的加权值块。
图像解码装置100可以基于处理块的各种尺寸适应性地执行重叠块运动补偿。并且,图像解码装置100可以根据重叠块运动补偿的处理块的各种尺寸确定加权值块,由此可以根据图像的特性有效地执行重叠块运动补偿。
并且,图像解码装置100可以根据式1将当前子块、上侧加权值块、左侧加权值块、右侧加权值块和下侧加权值块应用于当前预测因子、上侧预测因子、左侧预测因子、右侧预测因子和下侧预测因子来一次性地获得提高的预测因子。因此可以消除针对邻近块的当前块的加权值根据重叠块运动补偿的执行次数而改变的问题。
并且,图像解码装置100不考虑用于确定是否执行重叠块运动补偿的条件而一次性地获得提高的预测值,由此具有可以减少解码的复杂性的效果。包括在图19所示的加权值块中的加权值的值仅是一个示例,本领域的普通技术人员应清楚理解可以使用各种值。
图像解码装置100可以基于提高的预测因子对当前编码单元进行解密。具体地,图像解码装置100可以基于比特流获得变换系数。图像解码装置100可以基于变换系数获得残差(residual)。图像解码装置100可以基于提高的预测因子和残差来恢复当前子块。图像解码装置100可通过对在当前编码单元中包括的子块执行如上所述的过程,来对当前编码单元进行解密。然而,不限于此,图像解码装置100可以将不使用变换系数而提高的预测因子确定为当前子块。
图像解码装置100可以基于针对当前编码单元的当前子块的位置来确定针对当前预测因子的加权值以及针对邻近预测因子的加权值。对此,结合图20和图21详细描述。
图20图示针对当前编码单元的子块的位置。
图像解码装置100可以确定包括在当前编码单元2000中的至少一个子块。包括在至少一个子块中的当前子块可以位于编码单元的边界。例如,当前子块2010、2020、2030、2040、2060、2070、2080和2090位于当前编码单元的边界。并且,包括在至少一个子块中的当前子块也可以不位于编码单元的边界。例如,当前子块2050不位于当前编码单元的边界。
图像解码装置100可以获得包括在当前编码单元2000中的当前子块2050。第五情形的当前子块2050不位于当前编码单元2000的边界。图像解码装置100可以确定针对当前子块2050的邻近子块2051、2052、2053和2054。邻近子块2051、2052、2053、2054可以包括在当前编码单元2000。换言之,当当前子块2050不存在于当前编码单元2000的边界时,当前子块的邻近子块都可以包括在当前编码单元2000中。
图像解码装置100可以获得包括在当前编码单元2000中的当前子块2010、2020、2030、2040、2060、2070、2080和2090。当前子块2010、2020、2030、2040、2060、2070、2080和2090位于当前编码单元2000的边界。图像解码装置1000可以确定针对当前子块2010、2020、2030、2040、2060、2070、2080和2090的邻近子块2011、2012、2013、2014、2021、2022、2023、2024、2031、2032、2033、2034、2041、2042、2043、2044、2061、2062、2063、2064、2071、2072、2073、2074、2081、2082、2083、2084、2091、2092、2093和2094。邻近子块2011、2012、2013、2014、2021、2022、2023、2024、2031、2032、2033、2034、2041、2042、2043、2044、2061、2062、2063、2064、2071、2072、2073、2074、2081、2082、2083、2084、2091、2092、2093和2094中的至少一个可以不包括在当前编码单元2000中。换言之,当当前子块2010、2020、2030、2040、2060、2070、2080和2090存在于当前编码单元2000的边界时,当前子块的邻近子块中的至少一个可以不包括在当前编码单元2000中。
例如,第一情形的当前子块2010的上侧子块2011和左侧子块2012可以不包括在当前编码单元2000中。并且,第二情形的当前子块2020的上侧子块2021可以不包括在当前编码单元2000中。还有,第三情形的当前子块2030的上侧子块2031和右侧子块2033可以不包括在当前编码单元2000中。并且,第四情形的当前子块2040的左侧子块2042可以不包括在当前编码单元2000中。还有,第六情形的当前子块2060的右侧子块2063可以不包括在当前编码单元2000中。并且,第七情形的当前子块2070的左侧子块2072和下侧子块2074可以不包括在当前编码单元2000中。还有,第八情形的当前子块2080的下侧子块2084可以不包括在当前编码单元2000中。并且,第九请的当前子块2090的下侧子块2094和右侧子块2093可以不包括在当前编码单元2000中。
当前编码单元2000和邻近编码单元可以具有彼此不同的特性。在邻近编码单元中的至少一编码单元可以具有与当前编码单元的运动信息不同的运动信息。在邻近编码单元中包括的子块的运动信息可以不同于在当前编码单元中包括的子块的运动信息。在当前编码单元中包括的子块的运动信息之间的差可以小于在当前编码单元中包括的子块的运动信息与在邻近编码单元中包括的子块的运动信息之间的差。例如,在当前编码单元中包括的子块的运动矢量与在邻近编码单元中包括的子块的运动矢量之间的差可大于在当前编码单元中包括的子块的运动矢量之间的差。并且,在当前编码单元中包括的子块的参照图像与在邻近编码单元中包括的子块的参照图像之间的画面顺序计数(POC:Picture OrderCount)差可大于在当前编码单元中包括的子块的参照图像之间的POC差。
因此,图像解码装置100可以基于针对当前编码单元2000的当前子块的位置来确定在当前加权值块和邻近加权值块中包括的加权值,以更有效地反映邻近编码单元的特性。结合图21详细地描述基于针对当前编码单元2000的当前子块的位置来确定当前加权值块和邻近加权值块的方法。
图21图示基于针对当前编码单元的当前子块的位置而确定的当前加权值块和邻近加权值块。
如第五情形,在当前子块不位于当前编码单元的边界(boundary)的情况(2150)下,图像解码装置100可以确定第一当前加权值块和第一邻近加权值块。如上所述,当包括在当前编码单元的子块的尺寸为4×4时,针对当前预测因子的第一当前加权值块2151和第一邻近加权值块2152、2153、2154和2155的尺寸为4×4。并且,第一当前加权值块2151和第一邻近加权值块2152、2153、2154和2155可以与图19的加权值块1921、1922、1923、1924和1925相同。同样,当子块的尺寸为2×2时,针对当前预测因子的第一当前加权值块2156和第一邻近加权值块的尺寸为2×2。第一当前加权值块2156和第一邻近加权值块可以与图19的加权值块1931、1932、1933、1934和1935相同。尽管图21未示出,当在当前编码单元中包括的子块的尺寸为8×8时,第一当前加权值块和第一邻近加权值块的尺寸可以为8×8且与图19的加权值块1911、1912、1913、1914和1915相同。
如第一情形至第四情形及第六情形至第九情形9,当当前子块位于当前编码单元的边界时,图像解码装置100可以确定第二当前加权值块和第二邻近加权值块。
第一情形为当前子块位于当前编码单元的左上侧边界的情况。当当前子块位于当前编码单元的左上侧边界时,图像解码装置100可以获得第二当前加权值块2111。在第一当前加权值块2151中包括的加权值中的至少一个可以不同于在第二当前加权值块2111中包括的加权值中的至少一个。第二当前加权值块2111的左上侧区域的第一位置的加权值可以具有小于或等于第一当前加权值块2151的左上侧区域的第一位置的加权值。也就是说,当当前子块位于当前编码单元的左上侧边界时,可以将小的加权值应用于针对当前子块的当前预测因子的左上侧区域的样本。第一位置是指在加权值块的左上侧区域中包括的任何位置。
当当前子块位于当前编码单元的左上侧边界时,图像解码装置100可以获得第二邻近加权值块2112、2113、2114和2115。在第一邻近加权值块2152、2153、2154和2155中包括的加权值中的至少一个可以与在第二邻近加权值块2112、2113、2114和2115中包括的加权值中的至少一个不同。第二邻近加权值块2112和2113的左上侧区域的第一位置的加权值可以具有大于或等于第一邻近加权值块2152和2153的左上侧区域的第一位置的加权值。也就是说,当当前子块位于当前编码单元的左上侧边界时,可以将大的加权值应用于针对当前子块的左侧预测因子和上侧预测因子的左上侧区域的样本。图像解码装置100可以提高对邻近子块的信息的影响以正确地预测位于当前编码单元的左上侧边界的当前子块。
第二情形为当前子块位于当前编码单元的上侧边界的情况。当当前子块位于当前编码单元的上侧边界时,图像解码装置100可以获得第二当前加权值块2121。在第一当前加权值块2151中包括的加权值中的至少一个可以与在第二当前加权值块2121中包括的加权值中的至少一个不同。第二当前加权值块2121的上侧区域的第二位置的加权值可以具有小于或等于第一当前加权值块2151的上侧区域的第二位置的加权值的值。也就是说,当当前子块位于当前编码的上侧边界时,可以将小的加权值应用于针对当前子块的当前预测因子的上侧区域的样本。在此,第二位置是指在加权值块的上侧区域中包括的任何位置。
根据图21,第二当前加权值块2121的上侧两个行的加权值与第一当前加权值块2151的加权值不同。然而,不限于此,第二当前加权值块2121的上侧的一个行至四个行可与第一当前加权值块2151的加权值不同。并且,在第一当前加权值块2151中包括的加权值与在第二当前加权值块2121中包括的加权值之间的差的绝对值可以越向第一行而变得越大。
当当前子块位于当前编码单元的上侧边界时,图像解码装置100可以获得第二邻近加权值块2122、2123、2124和2125。第二左侧加权值块2123可以与第一左侧加权值块2153相同。第二下侧加权值块2124可以与第一下侧加权值块2154相同。第二右侧加权值块2125可以与第一右侧加权值块2155相同。在第一上侧加权值块2152中包括的加权值中的至少一个可以与在第二上侧加权值块2122中包括的加权值中的至少一个不同。第二上侧加权值块2122的上侧区域的第二位置的加权值可以具有大于或等于第一上侧加权值块2152的上侧区域的第二位置的加权值的值。换言之,当当前子块位于当前编码单元的上侧边界时,可以将大的加权值应用于针对当前子块的上侧预测因子的上侧区域的样本。图像解码装置100可以提高针对上侧子块的信息的影响以预测位于当前编码单元的上侧边界的当前子块。
根据图21,第二上侧加权值块2122的上侧两个行的加权值与第一上侧加权值块2152不同。然而,不限于此,第二上侧加权值块2122的上侧一个行至四个行可与第一上侧加权值块2152不同。并且,在第一上侧加权值块2152中包括的加权值与在第二上侧加权值块2122中包括的加权值之间的差的绝对值可以越向上侧第一行而变得越大。
第三情形为当前子块位于当前编码单元的右上侧边界的情况。当当前子块位于当前编码单元的右上侧边界时,图像解码装置100可以获得第二当前加权值块2131。在第一当前加权值块2151中包括的加权值中的至少一个可以与在第二当前加权值块2131中包括的加权值中的至少一个不同。第二当前加权值块2131的右上侧区域的第三位置的加权值可以具有小于或等于第一当前加权值块2151的右上侧区域的第三位置的加权值的值。第三位置是指在加权值块的右上侧区域中包括的任何位置。
当当前子块位于当前编码单元的右上侧边界时,图像解码装置100可以获得第二邻近加权值块2132、2133、2134和2135。在第一邻近加权值块2152、2153、2154和2155中包括的加权值中的至少一个可以与第二邻近加权值块2132、2133、2134和2135的加权值中的至少一个不同。第二邻近加权值块2132和2135的右上侧区域的第三位置的加权值可以具有大于或等于第一邻近加权值块2152和2155的右上侧区域的第三位置的加权值的值。
第四情形为当前子块位于的当前编码单元的左侧边界的情况。当当前子块位于当前编码单元的左侧边界时,图像解码装置100可以获得第二当前加权值块2141。在第一当前加权值块2151中包括的加权值中的至少一个可以与在第二当前加权值块2141中包括的加权值中的至少一个不同。第二当前加权值块2141的左侧区域的第四位置的加权值可以具有小于或等于第一当前加权值块2151的左侧区域的第四位置的加权值的值。在此,第四位置是指在加权值块的左侧区域中包括的任何位置。
根据图21,第二当前加权值块2141的左侧两个列的加权值与第一当前加权值块2151不同。然而,不限于此,第二当前加权值块2141的左侧的一个列至四个列可与第一当前加权值2151不同。并且,在第一当前加权值块2151中包括的加权值与在第二当前加权值块2141中包括的加权值之间的差的绝对值可以越向左侧第一行而变得越大。
当当前子块位于当前编码单元的左侧边界时,图像解码装置100可以获得第二邻近加权值块2142、2143、2144和2145。第二上侧加权值块2142可以与第一上侧加权值块2152相同。第二下侧加权值块2144可以与第一下侧加权值块2154相同。第二右侧加权值块2145可以与第一右侧加权值块2155相同。在第一左侧加权值块2153中包括的加权值中的至少一个可以不同于在第二左侧加权值块2143中包括的加权值中的至少一个。第二左侧加权值块2143的左侧区域的第四位置的加权值可以具有大于或等于第一左侧加权值块2153的左侧区域的第四位置的加权值的值。换言之,当当前子块位于当前编码单元的左侧边界时,可以将大的加权值应用于针对当前子块的左侧预测因子的左侧区域的样本。图像解码装置100可以提高对于左侧子块的信息的影响以预测位于当前编码单元的左侧边界的当前子块。
根据图21,第二左侧加权值块2143的左侧两个列的加权值与第一左侧加权值块2153不同。然而,不限于此,第二左侧加权值块2143的左侧一个列至四个列可以与第一左侧加权值块2153不同。并且,在第一左侧加权值块2153中包括的加权值与在第二左侧加权值块2143中包括的加权值之间的差的绝对值可以越向左侧第一列而变得越大。
第六情形为当前子块位于当前编码单元的右侧边界的情况。当当前子块位于当前编码单元的右侧边界时,图像解码装置100可以获得第二当前加权值块2161。在第一当前加权值块2151中包括的加权值中的至少一个可以于在第二当前加权值块2161中包括的加权值中的至少一个不同。第二当前加权值块2161的右侧区域的第五位置的加权值可以具有小于或等于第一当前加权值2151的右侧区域的第五位置的加权值的值。在此,第五位置是指在加权值块的右侧区域中包括的任何位置。
根据图21,第二当前加权值块2161的右侧两个列的加权值与第一当前加权值块2151不同。然而,不限于此,第二当前加权值块2161的右侧一个列至四个列可与第一当前加权值块2151不同。并且,在第一当前加权值块2151中包括的加权值与在第二加权值块2161中包括的加权值之间的差的绝对值可以越向右侧的第一列而变得越大。
当当前子块位于当前编码单元的右侧边界时,图像解码装置100可以获得第二邻近加权值块2162、2163、2164和2165。第二上侧加权值块2162可以与第一上侧加权值块2152相同。第二左侧加权值块2163可以与第一左侧加权值块2153相同。第二下侧加权值块2164可以与第一下侧加权值块2154相同。在第一右侧加权值块2155中包括的加权值中的至少一个可以与在第二右侧加权值块2165中包括的加权值中的至少一个不同。第二右侧加权值块2165的右侧区域的第五位置的加权值可以具有大于或等于第一右侧加权值块2155的右侧区域的第五位置的加权值的值。换言之,当当前子块位于当前编码单元的右侧边界时,可以将大的加权值应用于针对当前子块的右侧预测因子的预测区域的样本。图像解码装置100可以提高对于右侧子块的信息的影响以预测位于当前编码单元的右侧边界的当前子块。
根据图21,第二右侧加权值块2165的右侧两个列的加权值与第一右侧加权值块2155不同。然而,不限于此,第二右侧加权值块2165的右侧一个列至四个列可与第一右侧加权值块2155不同。并且,在第一右侧加权值块2155中包括的加权值与在第二右侧加权值块2165中包括的加权值之间的差的绝对值可以越向右侧的第一列而变得越大。
第七情形为当前子块位于当前编码单元的左下侧边界的情况。当当前子块位于当前编码单元的左下侧边界时,图像解码装置100可以获得第二当前加权值块2171。在第一当前加权值块2151中包括的加权值中的至少一个可以不同于在第二当前加权值块2171中包括的加权值中的至少一个。第二当前加权值块2171的左下侧区域的第六位置的加权值可以具有小于或等于第一当前加权值块2151的左下侧区域的第六位置的加权值的值。在此,第六位置是指在加权值块的左下侧区域中包括的任何位置。
当当前子块位于当前编码单元的左下侧边界时,图像解码装置100可以获得第二邻近加权值块2172、2173、2174和2175。在第一邻近加权值块2152、2153、2154和2155中包括的加权值中的至少一个可以不同于包括在第二邻近加权值块2172、2173、2174和2175的加权值中的至少一个。第二邻近加权值块2173和2174的左下侧区域的第六位置的加权值可以具有大于或等于第一邻近加权值块2153和2154的左下侧区域的第六位置的加权值的值。
第八情形为当前子块位于当前编码单元的下侧边界的情况。当当前子块位于当前编码单元的下侧边界时,图像解码装置100可以获得第二当前加权值块2181。在第一当前加权值块2151中包括的加权值中的至少一个可以不同于在第二当前加权值块2181中包括的加权值中的至少一个。第二当前加权值块2181的下侧区域的第七位置的加权值可以具有小于或等于第一当前加权值块2151的下侧区域的第七位置的加权值的值。在此,第七位置是指在加权值块的下侧区域中包括的任何位置。
根据图21,第二当前加权值块2181的下侧两个行的加权值不同于第一当前加权值块2151。然而,不限于此,第二当前加权值块2181的下侧的一个列至四个列可与第一当前加权值块2151不同。并且,在第一当前加权值块2151中包括的加权值与在第二当前加权值块2181中包括的加权值之间的差的绝对值可以越向下侧的第一行而变得越大。
当当前子块位于当前编码单元的下侧边界时,图像解码装置100可以获得第二邻近加权值块2182、2183、2184和2185。第二上侧加权值块2182可以与第一上侧加权值块2152相同。第二左侧加权值块2183可以与第一左侧加权值块2153相同。第二右侧加权值块2185可以与第一右侧加权值块2155相同。在第一下侧加权值块2154中包括的加权值中的至少一个可以不同于在第二下侧加权值2184中包括的加权值中的至少一个。第二下侧加权值块2184的下侧区域的第七位置的加权值可以具有大于或等于第一下侧加权值块2154的下侧区域的第七位置的加权值的值。换言之,当当前子块位于当前编码单元的下侧边界时,可以将大的加权值应用于针对当前子块的下侧预测因子的下侧区域的样本。图像解码装置1000可以提高对于下侧子块的信息的影响以预测位于当前编码单元的下侧边界的当前子块。
根据图21,第二下侧加权值块2184的下侧的两个行的加权值与第一下侧加权值块2154不同。然而,不限于此,第二下侧加权值块2184的下侧的一个行至四个行可与第一下侧加权值块2154不同。并且,在第一下侧加权值块2154中包括的加权值与在第二下侧加权值块2184中包括的加权值之间的差的绝对值可以越向下侧第一行而变得越大。
第九情形为当前子块位于当前编码单元的右下侧边界的情况。当当前子块位于当前编码单元的右下侧的边界时,图像解码装置100可以获得第二当前加权值块2191。在第一当前加权值块2151中包括的加权值中的至少一个可以不同于在第二当前加权值块2191中包括的加权值中的至少一个。第二当前加权值块2191的右下侧区域的第八位置的加权值可以具有小于或等于第一当前加权值块2151的右下侧区域的第八位置的加权值的值。在此,第八位置是指在加权值块的右下侧区域中包括的任何位置。
当当前子块位于当前编码单元的右下侧边界时,图像解码装置100可以获得第二邻近加权值块2192、2193、2194和2195。在第一邻近加权值块2152、2153、2154和2155中包括的加权值中的至少一个可以不同于在第二邻近加权值块2192、2193、2194和2195中包括的加权值中的至少一个。第二邻近加权值块2194和2195的右下侧区域的第八位置的加权值可以具有大于或等于第一邻近加权值块2154和2155的右下侧区域的第六位置的加权值的值。
图22图示根据一实施例的用于重复块运动补偿的编码单元。
在当前编码单元中包括的子块都可以具有相同的运动信息。在这种情况下,图像解码装置100可以进行简化方式的重复块运动补偿以减少处理的复杂性并提高处理速度。例如,可以仅对在当前编码单元中包括的一些子块执行重复块运动补偿。
图22将编码单元2210、2220、2230、2240和2250图示为正方形,然而,编码单元2210、2220、2230、2240和2250不限于此而可以具有各种形状,如参照图3至图16所述。
图像解码装置100可以确定在当前编码单元2210中包括的至少一个子块的运动信息是否全部相同。当在当前编码单元2210中包括的至少一个子块的运动信息全部相同时,图像解码装置100可以确定左侧编码单元2230和右侧编码单元2240是否被恢复。当左侧编码单元2230被恢复而右侧编码单元2240未被恢复时,图像解码装置100可以对当前编码单元2210的左侧边界子块2212和上侧边界子块2211执行重叠块运动补偿。
当在当前编码单元2210中包括的至少一个子块的运动信息全部相同且左侧编码单元2230未被恢复而右侧编码单元2240被恢复时,图像解码装置100可以对当前编码单元2210的右侧边界子块2213和上侧边界子块2211执行重叠块运动补偿。
当在当前编码单元2210中包括的至少一个子块的运动矢量全部相同且左侧编码单元2230和右侧编码单元2240都被恢复时,图像解码装置100可以对当前编码单元2210的右侧边界子块2213、左侧边界子块2212和上侧边界子块2211执行所述重叠块运动补偿。
当在当前编码单元2210中包括的所述至少一个子块的运动矢量全部相同且左侧编码单元2230和右侧编码单元2240未被恢复时,图像解码装置100可以确定对当前编码单元2210的上侧边界子块2211执行所述重叠块运动补偿。
如上所述,由于图像解码装置100仅对多个子块中的至少一个子块执行重叠块运动补偿,可以提高处理速度且减少处理的复杂性。
根据本公开的一实施例的图像解码装置100不确定是否对编码单元执行重叠块运动补偿而对所有帧间模式的编码单元执行重叠块运动补偿。在这种情况下,不需要确定是否执行重叠块运动补偿,因此可以减少处理的复杂性。
当不执行重叠块运动补偿也可以导出类似品质的图像时,图像解码装置100也可以不执行重叠块运动补偿。当当前编码单元为帧间预测模式中的双向光流(BIO:Bi-directional Optical-flow)模式或者亮度补偿(IC:illumination compensation)模式时,图像解码装置100可以不执行重叠块运动补偿。图像解码装置100可以基于从图像编码装置2300接收的信息来确定当前编码单元处在BIO模式还是IC模式。然而,不限于此,图像解码装置1000基于当前编码单元或邻近编码单元的特性而不从图像编码装置2300接收信息也可以确定当前编码单元处在BIO模式还是IC模式。
根据本公开的一实施例,图像解码装置100可以确定是否要执行重叠运动补偿。图像解码装置100可以确定在当前编码单元中包括的第一子块的参照图像与邻近于第一子块的第二子块的参照图像是否彼此不同。若第一子块的参照图像与邻近于第一子块的第二子块的参照图像不同,则可表示第一子块的运动信息与第二子块的运动信息不同。换言之,可以表示第一子块的运动信息和第二子块的运动信息不是重复的信息。因此,图像解码装置100可以使用附加的第二子块的运动信息来更准确地预测第一子块。当在当前编码单元中包括的第一子块的参照图像与邻近于第一子块的第二子块的参照图像不同时,图像解码装置100可以确定对第一子块执行如参照图1、图2和图17至图22所述的重叠块运动补偿。换言之,图像解码装置100可以基于第二子块的运动信息和第一子块的运动信息来预测第一子块。
当第一子块的参照图像和所述第二子块的参照图像相同时,图像解码装置100可以确定第一子块的运动矢量与所述第二子块的运动矢量之间的差是否大于阈值。若第一子块的运动矢量和第二子块的运动矢量之间的差大于阈值,则可以表示第一子块的运动信息与第二子块的运动信息不同。换言之,第一子块的运动信息和第二子块的运动信息可能不是重复的信息。因此,图像解码装置100可以使用附加的第二子块的运动信息来更准确地预测第一子块。当第一子块的运动矢量与第二子块的运动矢量之间的差大于阈值时,图像解码装置100可以确定对第一子块进行所述重叠块运动补偿。换言之,图像解码装置100可以基于第二子块的运动信息和第一子块的运动信息来预测第一子块。
阈值为在图像解码装置100与图像编码装置2300之间预先确定的值,由此可能不会被收发。就是说,阈值可为存储于图像解码装置100和图像编码装置2300的存储器中的值。然而,阈值不限于此,图像解码装置100可以从图像编码装置200接收阈值。
图像解码装置100可以基于当前子块的运动矢量与邻近子块的运动矢量之间的差来确定在当前加权值块和邻近加权值块中包括的加权值。图像解码装置100可以通过对当前子块的运动矢量与邻近子块的运动矢量之间的差和阈值进行比较来确定运动矢量的差是否大于阈值。或者,图像解码装置100可以基于以当前子块的运动矢量与邻近子块的运动矢量之间的差为参数的函数来确定在当前加权值块和邻近加权值块中包括的加权值。
根据本公开的一实施例,当当前子块的运动矢量的大小与邻近子块的运动矢量之间的差小时,在针对当前预测因子的当前加权值块中包括的加权值可以大于或等于在针对邻近预测因子的邻近加权值块中包括的加权值。并且,位于当前加权值块的边界的加权值可以大于或等于在邻近加权值块的边界中包括的加权值。
根据本公开的一实施例,当当前子块的运动矢量的大小与邻近子块的运动矢量的大小之间的差小时,在针对当前预测因子的当前加权值块中包括的加权值可以小于在针对邻近预测因子的邻近加权值块中包括的加权值。并且,位于当前加权值块的边界的加权值可以小于或等于在邻近加权值块的边界中包括的加权值。
根据本公开的一实施例,当当前子块的运动矢量的大小与邻近子块的运动矢量的大小之间的差大时,在针对当前预测因子的当前加权值块中包括的加权值可以大于或等于在针对邻近预测因子的邻近加权值块中包括的加权值。并且,位于当前加权值块的边界的加权值可以大于或等于在邻近加权值块的边界中包括的加权值。
根据本公开的一实施例,当当前子块的运动矢量的大小与邻近子块的运动矢量的大小的差大时,在针对当前预测因子的当前加权值块中包括的加权值可以小于或等于在针对邻近预测因子的邻近加权值块中包括的加权值。并且,位于当前加权值块的边界的加权值可以小于或等于在邻近加权值块的边界中包括的加权值。
根据本公开的一实施例,当当前子块的运动矢量的大小与邻近子块的运动矢量之间的差大时,图像解码装置100可以获得针对当前预测因子的第一当前加权值块和针对邻近预测因子的第一邻近加权值块。当当前子块的运动矢量的大小与邻近子块的运动矢量的大小之间的差小时,图像解码装置100可以获得针对当前预测因子的第二当前加权值块和针对邻近预测因子的第二邻近加权值块。在第一当前加权值块中包括的加权值可以小于或等于在第二当前加权值块中包括的加权值。位于第一当前加权值块的边界的加权值可以小于或等于位于第二当前加权值块的边界的加权值。在第一邻近加权值块中包括的加权值可以大于或等于在第二邻近加权值块中包括的加权值。位于第一邻近加权值块的边界的加权值可以大于或等于位于第二邻近加权值块的边界的加权值。
根据本公开的一实施例,在第一当前加权值中包括的加权值可以大于或等于在第二当前加权值中包括的加权值。位于第一当前加权值块的边界的加权值可以大于或等于位于第二当前加权值块的边界的加权值。在第一邻近加权值块中包括的加权值可以小于或等于在第二邻近加权值块中包括的加权值。位于第一邻近加权值块的边界的加权值可以小于或等于位于第二邻近加权值块的边界的加权值。
图23图示根据一实施例的图像编码装置的方块示意图。
图像解码装置2300可以由至少一个处理器和至少一个存储器组成。图像编码装置2300可以包括编码单元2310和比特流生成单元2320。编码单元2310可以接收输入图像并对输入图像进行编码。比特流生成单元2320可以基于所编码的输入图像来输出比特流。并且,图像编码单元2300可以将比特流传输到图像解码装置100。
图像编码装置2300可以使用重叠块运动补偿来对图像进行编码。图像编码装置2300可以接收原始图像。图像编码装置2300可以将原始原始图像划分为多个编码单元。多个编码单元可以包括当前编码单元。图像编码装置2300可以确定当前编码单元的运动信息。图像编码装置2300可以确定在当前编码单元中包括的至少一个子块。图像编码装置2300可以基于当前编码单元的运动信息和邻近编码单元的运动信息中的至少一个来确定子块的运动信息。图像编码装置2300可以使用帧率上变换(FRUC)模式、先进时间运动矢量预测(ATMVP)模式和Affine模式以获得子块的运动信息。
图像编码装置2300可以基于在至少一个子块中包括的当前子块的运动矢量来获得当前子块的当前预测因子(current predictor)。图像编码装置2300可以基于包括当前子块的上侧子块、左侧子块、右侧子块和下侧子块中的至少一个的邻近子块的运动矢量来获得包括关于所述当前子块的上侧预测因子、左侧预测因子、右侧预测因子和下策预测因子中的至少一个的邻近预测因子。在此,邻近预测因子为基于邻近子块的运动信息来预测了当前子块的块。
图像编码装置2300可以基于针对当前编码单元的当前子块的位置来确定包括针对当前预测因子的加权值的当前加权值块和包括针对邻近预测因子的加权值的邻近加权值块。邻近加权值块可以包括上侧加权值块、左侧加权值块、右侧加权值块和下侧加权值块中的至少一个。图像编码装置2300可以将当前加权值块应用于当前预测因子并将邻近加权值块应用于邻近预测因子来获得提高的当前预测因子。图像编码装置2300可以通过将原始图像和提高的当前预测因子进行相减来获得残差。图像编码装置2300可以基于残差来生成关于变换系数的比特流。然而,不限于此,图像编码装置2300可以将如下信息生成为比特流,其中,所述信息指示没有使用残差而是将提高的当前预测因子用作恢复的当前子块。图像编码装置2300可以将比特流传输到图像解码装置100。
由于图像编码装置2300的重复块运动补偿的更详细的操作与图像解码装置100的重复块运动补偿相似,因此省略对图像编码装置2300的操作的详细说明。
到此为止,以各种实施例为中心说明了本公开。在本公开所属的技术领域中具有普通知识的人员应理解本公开可以在不脱离本公开的本质特性的范围内以变更的形式实现。因此,应该不是从限制性的角度而从描述性的角度来考虑所公开公开的实施例。本公开的范围显示在权利要求书内而不是上文中记载的描述,与其等同范围内的所有区别点应被解释为被包括在本公开中。
同时,本公开的上述实施例可以被编写为可以在计算机执行的程序,并且可以在使用计算机可读的记录介质来使程序操作的通用数字计算机中实现。计算机可读的记录介质包括如磁性的存储介质(例如,只读存储器、软盘和和硬盘等)和光学读取介质(例如,CD-ROM、DVD等)的存储介质。

Claims (15)

1.一种图像解码方法,所述图像解码方法为使用重叠块运动补偿来对图像进行解码的方法,包括:
确定在当前编码单元中包括的至少一个子块;
基于在所述至少一个子块中包括的当前子块的运动矢量来获得当前子块的当前预测因子;
基于包括当前子块的上侧子块、左侧子块、右侧子块和下侧子块中的至少一个的邻近子块的运动矢量,来获得包括针对当前子块的上侧预测因子、左侧预测因子、右侧预测因子和下侧预测因子中的至少一个的邻近预测因子;
基于针对当前编码单元的当前子块的位置,确定包括针对当前预测因子的加权值的当前加权值块及包括针对所述邻近预测因子的加权值的邻近加权值块;
将当前加权值块应用于当前预测因子并将所述邻近加权值块应用于所述邻近预测因子,来获得提高的当前预测因子;以及
基于所述提高的当前预测因子对当前编码单元进行解码,
其中,所述邻近加权值块包括上侧加权值块、左侧加权值块、右侧加权值块和下侧加权值块中的至少一个。
2.如权利要求1所述的图像解码方法,其中,当前子块的尺寸为2×2、4×4及8×8中的一个。
3.如权利要求1所述的图像解码方法,还包括:
当当前编码单元的宽度和幅度的最小值或最大值大于或等于阈值时,将当前子块的尺寸确定为8×8;以及
当当前编码单元的宽度和幅度的最小值或最大值小于阈值时,将当前子块的尺寸确定为4×4。
4.如权利要求1所述的图像解码方法,其中,
获得所述邻近预测因子的步骤包括:
确定所述邻近子块的运动矢量是否可用;以及
当所述邻近子块的运动矢量不可用时,获得当前预测因子作为所述邻近预测因子。
5.如权利要求1所述的图像解码方法,包括:
当当前子块不位于当前编码单元的边界时,确定第一当前加权值块和第一邻近加权值块;以及
当当前子块位于当前编码单元的边界时,确定第二当前加权值块和第二邻近加权值块,
其中,在第一当前加权值块中包括的加权值中的至少一个不同于在第二当前加权值块中包括的加权值中的至少一个,
在第一邻近加权值块中包括的加权值中的至少一个不同于在第二邻近加权值块中包括的加权值中的至少一个。
6.如权利要求1所述的图像解码方法,还包括:
当当前子块不位于当前编码单元的边界时,确定第一当前加权值块并确定第一上侧加权值块;以及
当当前子块位于当前编码单元的上侧边界时,确定第二当前加权值块并确定第二上侧加权值块,
其中,在第二当前加权值块中包括的上侧的加权值小于或等于在第一当前加权值块中包括的上侧的加权值,
在第二上侧加权值块中包括的上侧的加权值大于或等于在第一上侧加权值块中包括的上侧的加权值。
7.如权利要求1所述的图像解码方法,还包括:
当当前子块不位于当前编码单元的边界时,确定第一当前加权值块并确定第一左侧加权值块;以及
当当前子块位于当前编码单元的左侧边界时,确定第二当前加权值块并确定第二左侧加权值块,
在第二当前加权值块中包括的左侧的加权值小于或等于在第一当前加权值块中包括的左侧的加权值,
在第二左侧加权值块中包括的左侧的加权值大于或等于在第一左侧加权值块中包括的左侧的加权值。
8.如权利要求1所述的图像解码方法,还包括:
当当前子块不位于当前编码单元的边界时,确定第一当前加权值块并确定第一右侧加权值块;以及
当当前子块位于当前编码单元的右侧边界时,确定第二当前加权值块并确定第二右侧加权值块,
其中,在第二当前加权值中包括的右侧的加权值小于或等于在第一当前加权值块中包括的右侧的加权值,
在第二加权值块中包括的右侧的加权值大于或等于在第一右侧加权值块中包括的右侧的加权值。
9.如权利要求1所述的图像解码方法,还包括:
当当前子块不位于当前编码单元的边界时,确定第一当前加权值块并确定第一下侧加权值块;以及
当当前子块位于当前编码单元的下侧边界时,确定第二当前加权值块并确定第二下侧加权值块,
其中,在第二当前加权值块中包括的下侧的加权值小于或等于在第一当前加权值块中包括的下侧的加权值,
在第二下侧加权值块中包括的下侧的加权值大于或等于在第一下侧加权值块中包括的下侧的加权值。
10.如权利要求1所述的图像解码方法,还包括:
当在当前编码单元中包括的所述至少一个子块的运动矢量全部相同,并且左侧编码单元被恢复而右侧编码单元没有被恢复时,确定对当前编码单元的左侧边界子块和上侧边界子块执行重叠块运动补偿;
当在当前编码单元中包括的所述至少一个子块的运动矢量全部相同,并且左侧编码单元没有被恢复而右侧编码单元被恢复时,确定对当前编码单元的右侧边界子块和上侧边界子块执行重叠块运动补偿;
当在当前编码单元中包括的所述至少一个子块的运动矢量全部相同,并且左侧编码单元和右侧编码单元被恢复时,确定对当前编码单元的右侧边界子块、左侧边界子块和上侧边界子块执行重叠块运动补偿;以及
当在当前编码单元中包括的所述至少一个子块的运动矢量全部相同,并且左侧编码单元和右侧编码单元没有被恢复时,确定对当前编码单元的上侧边界子块执行重叠块运动补偿。
11.如权利要求1所述的图像解码方法,还包括:
当在当前编码单元中包括的第一子块的参照图像不同于与第一子块邻接的第二子块的参照图像时,确定对第一子块执行重叠块运动补偿。
12.如权利要求11所述的图像解码方法,还包括:
当第一子块的参照图像与第二子块的参照图像相同,并且第一子块的运动矢量的大小与第二子块的运动矢量的大小之间的差大于阈值时,确定对第一子块执行重叠块运动补偿。
13.如权利要求1所述的图像解码方法,包括:
基于当前子块的运动矢量与所述邻近子块的运动矢量之间的差确定在当前加权值块和所述邻近加权值块中包括的加权值。
14.一种图像解码装置,所述图像解码装置为使用重叠块运动补偿来对图像进行解码的装置,所述图像解码装置包括至少一个处理器,其中,
所述至少一个处理器被配置为:
确定在当前编码单元中包括的至少一个子块,
基于在所述至少一个子块中包括的当前子块的运动矢量获得当前子块的当前预测因子,
基于包括当前子块的上侧子块、左侧子块、右侧子块和下侧子块中的至少一个的邻近子块的运动矢量获得邻近预测因子,所述邻近预测因子包括针对当前子块的上侧预测因子、下侧预测因子、右侧预测因子和下侧预测因子中的至少一个,
基于针对当前编码单元的当前子块的位置,确定包括针对当前预测因子的加权值的当前加权值块和包括针对所述邻近预测因子的加权值的邻近加权值块,
将当前加权值块应用于当前预测因子并将所述邻近加权值块应用于所述邻近预测因子,来获得提高的当前预测因子,
基于所述提高的当前预测因子对当前编码单元进行解码,
所述邻近加权值块包括上侧加权值块、左侧加权值块、右侧加权值块和下侧加权值块中的至少一个。
15.一种计算机可读记录介质,其上记录有用于执行如权利要求1所述的方法的计算机程序。
CN201880069775.0A 2017-08-28 2018-08-28 视频编码方法和装置及视频解码方法和装置 Withdrawn CN111279702A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201762550873P 2017-08-28 2017-08-28
US62/550,873 2017-08-28
PCT/KR2018/009885 WO2019045398A1 (ko) 2017-08-28 2018-08-28 비디오 부호화 방법 및 장치, 비디오 복호화 방법 및 장치

Publications (1)

Publication Number Publication Date
CN111279702A true CN111279702A (zh) 2020-06-12

Family

ID=65525885

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201880069775.0A Withdrawn CN111279702A (zh) 2017-08-28 2018-08-28 视频编码方法和装置及视频解码方法和装置

Country Status (3)

Country Link
KR (1) KR20200037130A (zh)
CN (1) CN111279702A (zh)
WO (1) WO2019045398A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113596474A (zh) * 2021-06-23 2021-11-02 浙江大华技术股份有限公司 图像/视频编码方法、装置、系统及计算机可读存储介质

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110636311B (zh) * 2019-09-18 2021-10-15 浙江大华技术股份有限公司 运动矢量的获取方法及相关预测方法、装置

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20160219302A1 (en) * 2015-01-26 2016-07-28 Qualcomm Incorporated Overlapped motion compensation for video coding
US20160295215A1 (en) * 2013-12-06 2016-10-06 Mediatek Inc. Method and Apparatus for Motion Boundary Processing
US20160330475A1 (en) * 2015-05-05 2016-11-10 Broadcom Corporation Apparatus and method for overlapped motion compensation for video coding

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101553850B1 (ko) * 2008-10-21 2015-09-17 에스케이 텔레콤주식회사 동영상 부호화/복호화 장치 및 그를 위한 적응적 가중치를 사용하는 적응 중첩 블록 움직임 보상 방법 및 장치
KR101978429B1 (ko) * 2013-05-14 2019-05-15 한국전자통신연구원 고효율 비디오 코딩 내 분수 움직임 추정 스킵 장치 및 방법

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20160295215A1 (en) * 2013-12-06 2016-10-06 Mediatek Inc. Method and Apparatus for Motion Boundary Processing
US20160219302A1 (en) * 2015-01-26 2016-07-28 Qualcomm Incorporated Overlapped motion compensation for video coding
US20160330475A1 (en) * 2015-05-05 2016-11-10 Broadcom Corporation Apparatus and method for overlapped motion compensation for video coding

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
JIANLE CHEN ET AL.: "Coding tools investigation for next generation video coding based on HEVC", 《CONFERENCE:SPIE OPTICAL ENGINEERING + APPLICATIONS》, 22 June 2016 (2016-06-22), pages 3 *

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113596474A (zh) * 2021-06-23 2021-11-02 浙江大华技术股份有限公司 图像/视频编码方法、装置、系统及计算机可读存储介质

Also Published As

Publication number Publication date
WO2019045398A1 (ko) 2019-03-07
KR20200037130A (ko) 2020-04-08

Similar Documents

Publication Publication Date Title
KR102618498B1 (ko) 비디오 복호화 방법 및 장치, 비디오 부호화 방법 및 장치
KR102499383B1 (ko) 영상 부호화 방법 및 장치, 영상 복호화 방법 및 장치
KR102591095B1 (ko) 부호화 방법 및 그 장치, 복호화 방법 및 그 장치
KR102471075B1 (ko) 부호화 방법 및 그 장치, 복호화 방법 및 그 장치
KR102366262B1 (ko) 영상 부호화 방법 및 장치, 영상 복호화 방법 및 장치
KR20200100656A (ko) 비디오 복호화 방법 및 장치, 비디오 부호화 방법 및 장치
KR20210021590A (ko) 비디오 복호화 방법 및 장치, 비디오 부호화 방법 및 장치
CN110892718A (zh) 视频编码方法和装置、视频解码方法和装置
KR102641425B1 (ko) 영상 부호화 방법 및 장치, 영상 복호화 방법 및 장치
KR20200096550A (ko) 비디오 복호화 방법 및 장치, 비디오 부호화 방법 및 장치
KR20210072118A (ko) 비디오 복호화 방법 및 장치, 비디오 부호화 방법 및 장치
KR20210054569A (ko) 비디오 복호화 방법 및 장치, 비디오 부호화 방법 및 장치
CN111279702A (zh) 视频编码方法和装置及视频解码方法和装置
KR102482893B1 (ko) 비디오 복호화 방법 및 장치, 비디오 부호화 방법 및 장치
KR102221581B1 (ko) 비디오 복호화 방법 및 장치, 비디오 부호화 방법 및 장치
CN113228640A (zh) 用于对视频进行解码的方法和设备以及用于对视频进行编码的方法和设备
KR20240027518A (ko) 영상 복호화 방법 및 장치, 영상 부호화 방법 및 장치

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WW01 Invention patent application withdrawn after publication
WW01 Invention patent application withdrawn after publication

Application publication date: 20200612