CN114630133A - 影像解码方法、编码图像的方法及设备 - Google Patents

影像解码方法、编码图像的方法及设备 Download PDF

Info

Publication number
CN114630133A
CN114630133A CN202210186095.5A CN202210186095A CN114630133A CN 114630133 A CN114630133 A CN 114630133A CN 202210186095 A CN202210186095 A CN 202210186095A CN 114630133 A CN114630133 A CN 114630133A
Authority
CN
China
Prior art keywords
block
unit
prediction
current block
intra prediction
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202210186095.5A
Other languages
English (en)
Inventor
沈东圭
朴施耐
林和燮
林柾润
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Jiawen Electronics Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Jiawen Electronics Co ltd filed Critical Jiawen Electronics Co ltd
Publication of CN114630133A publication Critical patent/CN114630133A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/96Tree coding, e.g. quad-tree coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/11Selection of coding mode or of prediction mode among a plurality of spatial predictive coding modes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117Filters, e.g. for pre-processing or post-processing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/119Adaptive subdivision aspects, e.g. subdivision of a picture into rectangular or non-rectangular coding blocks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124Quantisation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/129Scanning of coding units, e.g. zig-zag scan of transform coefficients or flexible macroblock ordering [FMO]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146Data rate or code amount at the encoder output
    • H04N19/147Data rate or code amount at the encoder output according to rate distortion criteria
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46Embedding additional information in the video signal during the compression process
    • H04N19/463Embedding additional information in the video signal during the compression process by compressing encoding parameters before transmission
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards

Abstract

本发明涉及一种影像解码方法、编码图像的方法及设备。根据本发明的影像解码方法,包括如下步骤:从比特流获得包括当前区块的系数的量化系数序列;通过基于用于扫描所述当前区块的所述系数的扫描方式来对量化的所述系数序列进行解码而重建所述当前区块的残差区块;在解码装置中预先定义的可允许的帧内预测模式中确定所述当前区块的帧内预测模式;基于所述当前区块的所述帧内预测模式生成所述当前区块的预测区块;以及使用所述残差区块和预测区块重建所述当前区块。

Description

影像解码方法、编码图像的方法及设备
本申请是申请日为2018年09月06日、申请号为201880057900.6、题为“基于有效传送的差分量化参数的影像编码/解码方法及装置”的专利申请的分案申请。
技术领域
本发明涉及高清视频压缩方法及装置中的影像编码及解码技术,更详细地涉及有效传送差分量化参数,通过传送的差分量化参数,计算实际量化参数,由此执行逆量化的方法及装置。
背景技术
影像压缩方法中将一个图像区分为具有预定大小的多个区块来执行编码。并且,为了提高压缩效率,利用去除多个图像之间的冗余的帧间预测(inter prediction)及帧内预测(intra prediction)技术。
此时,利用帧内预测及帧间预测生成残差信号(residual signal),求残差信号是因为利用残差信号进行编码时,由于数据量小而数据压缩率变高,预测越好,残差信号的值越小。
帧内预测方法利用当前区块的周边像素来预测当前区块的数据。将实际值和预测值的差称为残差信号。HEVC的情况下,帧内预测方法从现有的H.264/AVC中使用的9个预测模式增加为35个预测模式,从而,更加细化预测。
帧间预测方法中,通过将当前区块与周边的多个像素内的区块进行比较搜索最相似的区块。此时,将对所搜索的区块的位置信息(Vx、Vy)称为运动矢量(motion vector)。将当前区块和利用运动矢量所预测的预测区块之间的区块内像素值之差称为残差信号(residual signal)区块(motion-compensated residual block)。
如此,虽进一步细化帧内预测和帧间预测而残差信号的数据量减少,但是,用于处理视频的计算量大大增加。
尤其,由于确定用于影像编码及解码的图像内分割结构的过程变复杂,因此,在实现管线等时存在困难,在现有的区块分割方法以及由此分割的区块的大小可能不适合高分辨率影像的编码。
并且,因处理360VR影像等用于支持虚拟现实的超高清影像和随之伴随的多种分割结构,当前的区块结构的量化处理程序可能并不有效。
发明内容
技术问题
本发明用于解决如上问题,其目的在于,提供适合于高分辨率影像的编码及解码,根据复杂化的编码特性变化,处理更有效的量化程序的影像处理方法、利用其的影像解码及编码方法。
尤其,对于全高清(FHD,Full High Definition)及超高清(UHD,Ultra HighDefinition)、全方向视频而言,由于其分辨率非常高,因此为了编码效率,对多样地实现基本编码单元的大小有效。由此,影响编码效率的量化参数信息也在多种级别下可传送,由于相关信息是附加的信息,因此为了提高编码效率,在大的区块单位下有效地编码相关信息而传送,但是若在大的区块单位下执行量化,则在率控制或主观性、客观性画质观点上可能降低装置的性能,故而需要传送适当单位的量化参数。
技术方案
为解决所述问题,根据本发明的一实施例的影像解码方法包括如下步骤:从比特流获得包括当前区块的系数的量化系数序列;通过基于用于扫描所述当前区块的所述系数的扫描方式来对量化的所述系数序列进行解码而重建所述当前区块的残差区块;在解码装置中预先定义的可允许的帧内预测模式中确定所述当前区块的帧内预测模式;基于所述当前区块的所述帧内预测模式生成所述当前区块的预测区块;以及使用所述残差区块和预测区块重建所述当前区块。
根据本发明的另一实施例的编码图像的方法包括如下步骤:基于当前区块的帧内预测模式来生成所述当前区块的预测区块,所述帧内预测模式是编码装置中预先定义的可允许的帧内预测模式中的一个;获得作为所述当前区块的原始区块与所述预测区块之间的差的残差区块;从所述残差区块中获得量化系数的二维排列;和通过基于用于扫描所述当前区块的所述系数的扫描方式对所述量化系数的所述二维排列进行编码来生成比特流。
根据本发明的又一实施例的设备包括通过对图像进行编码而生成的比特流,其中,所述比特流包括量化系数序列,所述量化系数序列包括当前区块的系数,所述量化系数序列基于用于扫描所述当前区块的所述系数的扫描方式来被解码,以重建所述当前区块的残差区块,所述残差区块表示所述当前区块的原始区块和所述当前区块的预测区块之间的差,所述预测区块基于所述当前区块的可允许的帧内预测模式中的一个来生成。
技术效果
根据本发明的实施例,通过将执行帧间预测或帧内预测的基本单位的编码单元可分割为包括四叉树、二叉树及三叉树的复合树结构,基于对象区块的所述对象区块的组量化信息,选择适应性地确定所述对象区块的量化程序的量化参数,由此可提高对应于多样化的区块形态的量化效率,并可提高高清晰度影像的编码效率。
并且,根据本发明的实施例,利用影像的细化的特性信息,选择适应性地确定量化参数的诱导程序及由此诱导的量化参数,故而可提高对应于多样化的区块形态的运动补偿效率和滤波效果,并可提高高清晰度影像的编码效率。
尤其,本发明通过以多种大小的单元单位传送差分量化参数的方法,提高量化参数的传送效率,并可实现精密的率-控制。
附图说明
图1为表示本发明的一实施例的影像编码装置的结构的框图。
图2至图5为用于说明以区块单位分割影像来处理的方法的第一实施例的图。
图6为用于说明在影像编码装置中执行帧间预测的方法的一实施例的框图。
图7为表示本发明的一实施例的影像解码装置的结构的框图。
图8为用于说明在影像解码装置中执行帧间预测的方法的一实施例的框图。
图9为用于说明以区块单位分割影像来处理的方法的第二实施例的图。
图10为表示为了以区块单位分割影像来处理而使用的语法(syntax)结构的一实施例的图。
图11为用于说明以区块单位分割影像来处理的方法的第三实施例的图。
图12为用于说明将编码单元分割为二叉树结构来构成变换单位的方法的一实施例的图。
图13为用于说明以区块单位分割影像来处理的方法的第四实施例的图。
图14至图16为用于说明以区块单位分割影像来处理的方法的另一实施例的图。
图17及图18为用于说明执行速率失真优化(Rate distortion Optimization)确定变换单元的分割结构的方法的实施例的图。
图19为用于说明本发明的另一实施例的复合分割结构的图。
图20为用于说明本发明的实施例的量化处理方法的流程图。
图21表示本发明的实施例的多种编码及差分量化参数传送单元的分割结构。
图22表示本发明的实施例的差分量化参数预测方法。
图23表示本发明的实施例的差分量化参数预测方法。
具体实施方式
下面参照附图详细说明本发明的实施方式。在说明本发明的实施例时,若判断对相关公知结构或功能的具体说明会使本说明书的要旨不明确时,可以省略对其的详细说明。
当被提及某种结构要素与另一结构要素“连接”或“联接”时,应当理解为可以直接与其他结构要素相连接或相联接,但在中间也可存在其他结构要素。并且,在本发明中描述为“包含”特定结构的内容并不排除相应结构之外的结构,而可意味着在本发明的实施或本发明的技术思想范围内可包含附加结构。
第一和/或第二等术语可用于说明多种结构要素,但所述结构要素并不局限于所述术语。所述术语以从其他结构要素区分一个结构要素为目的而使用。例如在不脱离本发明的权利范围的情况下,第一结构要素可以被称为第二结构要素,类似地,第二结构要素也可以被称为第一结构要素。
并且,独立地示出本发明的实施例中所示的构成部,以表示彼此不同的特征功能,这并不意指每个构成部都是以单独的硬件或一个软件组成单元组成的。换句话说,为了方便起见,每个构成部都包括每个列举的构成部,因此,每个构成部的至少两个构成部分以被组合以形成一个构成部,或者一个构成部可以被分成多个构成部以执行功能,如果不偏离本发明的本质,组合每个构成部的实施例和分离其中一个构成部的实施例也包括在本发明的范围内。
并且,一些结构要素可能不是执行本发明的基本功能的不可缺少的结构要素,而是仅仅改善其性能的选择性结构要素。除了用于改善性能的结构要素之外,本发明可以通过仅包括用于实现本发明的本质的必不可少的结构要素来实现,除了仅用于提高性能的选择性结构要素以外,仅包含不可缺少的结构要素的结构也包含在本发明的范围内。
图1是示出根据本发明的一实施例的影像编码装置的结构的框图,影像编码装置10,包括:图像分割部110、变换部120、量化部130、扫描部131、熵编码部140、帧内预测部150、帧间预测部160、逆量化部135、逆变换部125、后处理部170、图像存储部180、减法部190以及加法部195。
参照图1,图像分割部110分析所输入的视频信号以编码单位分割图像后确定预测模式,并按不同所述编码单元确定预测单元的大小。
并且,所述图像分割部110根据预测模式(或预测方法)将待编码的预测单元传送至帧内预测部150或帧间预测部160。并且,图像分割部110将待编码的预测单元传送至减法部190。
其中,影像的图像(picture)由多个切片构成,切片可分割为用于分割图像的基本单位的多个编码树单元(Coding Tree Unit:CTU)。
所述编码树单元可分割为执行帧间预测(inter prediction)或帧内预测(intraprediction)的基本单位的一个或两个以上的编码单元(Coding Unit:CU)。
编码单元(CU)可分割为执行预测的基本单位的一个或其以上的预测单元(Prediction unit:PU)。
此时,编码装置10对所述分割的编码单元(CU)分别以预测方法确定帧间预测及帧内预测中的一个,但是,对每个预测单元(PU)可生成不同的预测区块。
一方面,编码单元(CU)可分割为对残差区块(residual block)进行变换的基本单位的一个或两个以上的变换单元(Transform Unit:TU)。
此时,图像分割部110以如上所述分割的区块单位(例如,预测单元(PU)或变换单元(TU))可将影像数据传送至减法部190。
参照图2,最大具有256×256像素尺寸的编码树单元(CTU)分割为四叉树(quadtree)结构,从而,可以分割为具有正方形形态的4个编码单元(CU)。
具有正方形形态的4个编码单元(CU)分别可再分割为四叉树结构,如上所述,被分割为四叉树结构的编码单元(CU)的深度(Depth)可具有0至3中的一个整数值。
编码单元(CU)根据预测模式可分割为一个或2以上的预测单元(PU)。
在帧内预测模式下编码单元(CU)的大小为2N×2N时,预测单元(PU)的大小可为如图3(a)所示的2N×2N或图3(b)所示的N×N。
一方面,在帧间预测模式下编码单元(CU)的大小为2N×2N时,预测单元(PU)的大小可为如图4(a)所示的2N×2N、图4(b)所示的2N×N、图4(c)所示的N×2N、图4(d)所示的N×N、图4(e)所示的2N×nU、图4(f)所示的2N×nD、图4(g)所示的nL×2N及图4(h)所示的nR×2N中的一个大小。
参照图5,编码单元(CU)分割为四叉树(quad tree)结构,从而,可分割为具有正方形形态的4个变换单元(TU)。
具有所述正方形形态的4个编码单元(CU)分别可再分割为四叉树结构,如上所述,被分割为四叉树结构的变换单元(TU)的深度(Depth)可具有0至3中的一个整数值。
其中,编码单元(CU)为帧间预测模式时,从该编码单元(CU)分割的预测单元(PU)和变换单元(TU)可具有相互独立的分割结构。
编码单元(CU)为帧内预测模式时,从该编码单元(CU)分割的变换单元(TU)不能大于预测单元(PU)的大小。
而且,如上所述分割的变换单元最大具有64×64像素尺寸。
变换部120对所输入的预测单元(PU)的原始区块和在帧内预测部150或帧间预测部160生成的预测区块之间的残差信号的残差区块进行变换,所述变换可将变换单元(TU)作为基本单位执行。
在所述变换过程中,可根据预测模式(intra or inter)确定相互不同的变换矩阵,帧内预测的残差信号根据帧内预测模式具有方向性,因此,变换矩阵根据帧内预测模式可适应地确定。
变换单位可通过2个(水平、垂直)一维变换矩阵变换,例如,帧间预测的情况下可确定事先确定的一个变换矩阵。
一方面,帧内预测情况下,在帧内预测模式为水平时,残差区块具有垂直方向的方向性的概率变高,因此,垂直方向适用基于DCT的整数矩阵,水平方向适用基于DST或基于KLT的整数矩阵。帧内预测模式为垂直时,垂直方向适用基于DST或基于KLT的整数矩阵,水平方向适用基于DCT的整数矩阵。
并且,在DC模式下两方向均可适用基于DCT的整数矩阵。
而且,帧内预测情况下,可基于变换单元(TU)的大小适应地确定变换矩阵。
量化部130确定用于量化通过所述变换矩阵变换的残差区块的系数的量化步长,可按照预设大小以上的不同量化单元确定量化步长。
量化单元的大小可为8×8或16×16,量化部130利用根据量化步长及预测模式而确定的量化矩阵对多个变换区块的系数进行量化。
而且,量化部130作为当前量化单元的量化步长的预测子,可以利用与当前量化单元相邻的量化单元的量化步长。
量化部130以当前量化单元的左侧量化单元、上侧量化单元、左上侧量化单元的顺序进行搜索,可利用1个或2个有效的量化步长生成当前量化单元的量化步长预测子。
例如,量化部130将由所述顺序搜索的有效的第一个量化步长确定为量化步长预测子,或者将由所述顺序搜索的有效的2个量化步长的平均值确定为量化步长预测子,或者在只有1个量化步长有效时,可将其确定为量化步长预测子。
若确定所述量化步长预测子,量化部130将当前量化单元的量化步长和量化步长预测子之间的差分值传送至熵编码部140。
一方面,当前编码单元的左侧编码单元、上侧编码单元、左上侧编码单元可以都不存在,或者在最大编码单元内的编码顺序上可以存在之前存在的编码单元。
因此,按照编码的顺序,在与当前编码单元相邻的量化单元和所述最大编码单元内紧前面的量化单元的量化步长成为候选。
此时,能够以1)当前编码单元的左侧量化单元、2)当前编码单元的上侧量化单元、3)当前编码单元的左上侧量化单元、4)按照编码顺序紧前面的量化单元的顺序设定优先顺序。所述顺序可以改变,还可以省略所述左上侧量化单元。
一方面,如上所述量化的变换区块被传送至逆量化部135和扫描部131。
扫描部131对量化的变换区块的系数进行扫描并将它们变换成一维量化系数,此时,由于量化后的变换区块的系数分布会取决于帧内预测模式,因此,可以根据帧内预测模式确定扫描方式。
并且,还可以根据变换单位的大小不同地确定系数扫描方式,并且,所述扫描方式可根据方向性帧内预测模式而不同,此时,量化系数的扫描顺序可以反向扫描。
当所述量化的系数被分割为多个子集(sub-set)时,对每个子集内的量化系数适用相同的扫描方式,子集之间的扫描方式可以是Z字形扫描或对角线扫描。
一方面,优选地,所述扫描方式从包括DC的主子集扫描到正向的剩余子集,但是,也可以进行反向扫描。
另外,能够以与子集中量化的系数的扫描方式相同的方式设置子集之间的扫描方式,可根据帧内预测模式确定子集之间的扫描方式。
另一方面,编码装置10使可以指示在所述变换单元(PU)中非零的最后量化系数的位置和每个子集中非零的最后量化系数的位置的信息包括在比特流并传送至解码装置20。
逆量化部135对如上所述量化的量化系数进行逆量化,逆变换部125以变换单元(TU)执行逆变换,可以将逆量化的变换系数重建为空间区域的残差区块。
加法部195相加由所述逆变换部125重建的残差区块和自帧内预测部150或帧间预测部160接收的预测区块,可以生成重建区块。
并且,后处理部170可以执行去区块(deblocking)滤波过程,以消除在重建的图像中产生的块效应;样本适应偏移(Sample Adaptive Offset:SAO)适用过程,以像素单位补偿与原始图像之间的差值;以及适应环路滤波(Adaptive Loof Filtering:ALF),以编码单元补偿与原始图像之间的差值。
去区块滤波过程可适用于具有预定大小以上的大小的预测单元(PU)或变换单元(TU)的边界。
例如,去区块滤波过程可包括:确定待滤波的边界(bounary)的步骤;确定适用于所述边界的边界滤波强度(bounary filtering strength)的步骤;确定是否适用去区块滤波器的步骤;以及确定适用去区块滤波器时,选择适用于所述边界的滤波器的步骤。
另一方面,是否适用所述去区块滤波器可取决于i)所述边界滤波强度是否大于0;以及ii)与所述待滤波的边界相邻的2个区块(P区块、Q区块)边界部份的像素值是否小于表示变化程度的值的量化参数所确定的第一参考值。
所述滤波器优选至少为2个。若位于区块边界的2个像素之间的差值的绝对值大于或等于第二参考值,则选择执行相对弱滤波的滤波器。
所述第二参考值由所述量化参数和所述边界滤波强度而确定。
并且,样本适应偏移(SAO)适用过程用于减小适用去区块滤波的影像内的像素和原始像素之间的差值(distortion),能够以图像或切片单位确定是否适用样本适应偏移(SAO)。
图像或切片可分割为多个偏移区域,可对每个偏移区域确定偏移类型,所述偏移类型可包括预定数量(例如4个)的边缘偏移类型和2个带偏移类型。
例如,当偏移类型为边缘偏移类型时,确定各像素所属的边缘类型来适用与其相对应的偏移,所述边缘类型可以基于与当前像素相邻的2个像素值的分布来确定。
适应环路滤波(ALF)过程可以基于比较经去区块滤波过程或适应偏移适用过程的重建影像和原始影像的值进行滤波。
图像存储部180从后处理部170接收经后处理的影像数据,并以图像单位重建影像进行存储,图像可为帧单位的影像或场单位的影像。
帧间预测部160可以使用存储在图像存储部180中的至少一个参考图像执行运动估计,并可以确定表示参考图像的参考图像索引和运动矢量。
此时,根据所确定的参考图像索引和运动矢量可从存储在图像存储部180中的多个参考图像中用于运动估计的参考图像提取对应于待编码的预测单元的预测区块。
帧内预测部150可以使用包括当前预测单元的图像中重建像素值来执行帧内预测编码。
帧内预测部150接收待预测编码的当前预测单元,并根据当前区块的大小选择预定数量的帧内预测模式中的一个来执行帧内预测。
帧内预测部150可以适应地滤波参考像素以生成帧内预测区块,在不能利用参考像素时,可以利用可用参考像素来生成参考像素。
熵编码部140可以对通过量化部130量化的量化系数、自帧内预测部150接收的帧内预测信息,自帧间预测部160接收的运动信息等进行熵编码。
图6是示出在编码装置10执行帧间预测的结构的一实施例的框图,图示的帧间预测编码器可包括,运动信息确定部161,运动信息编码模式确定部162、运动信息编码部163、预测区块生成部164、残差区块生成部165、残差区块编码部166及多路复用器167。
参照图6,运动信息确定部161确定当前区块的运动信息,运动信息包括参考图像索引和运动矢量,参考图像索引可表示已被编码重建图像中的一个。
可包括对当前区块进行单向帧间预测编码时,表示属于列表0(L0)的参考图像中的一个,对当前区块进行双向预测编码时,表示列表0(L0)的参考图像中的一个的参考图像索引和表示列表1(L1)的参考图像中的一个的参考图像索引。
并且,还可包括对当前区块进行双向预测编码时,表示结合列表0和列表1而生成的复合列表(L/C)的参考图像中的一个或2个图像的索引。
运动矢量表示每个参考图像索引所指示的图像中的预测区块的位置,所述运动矢量可以是像素单位(整数单位)或子像素单位。
例如,所述运动矢量可具有1/2、1/4、1/8或1/16像素的分辨率,当运动向量不是整数单位时,预测区块可由整数单位的像素生成。
运动信息编码模式确定部162可以由跳过模式、合并模式及AMVP模式中的一个来确定对当前区块的运动信息的编码模式。
跳过模式在存在具有与当前区块的运动信息相同的运动信息的跳过候选的情况下适用,残差信号为0的情况下适用,所述跳过模式可在预测单元(PU)即当前区块的大小与编码单元(CU)和相同时适用。
合并模式在存在具有与当前区块的运动信息相同的运动信息的合并候选的情况下适用,所述合并模式在当前区块的大小与编码单元(CU)不同或相同时,存在残差信号的情况下适用。一方面,合并候选可与跳过候选相同。
AMVP模式是在不适用跳过模式和合并模式的情况下适用,可以将具有与当前区块的运动向量最相似的运动向量的AMVP候选选择为AMVP预测子。
运动信息编码部163可根据由运动信息编码模式确定部162确定的方式对运动信息进行编码。
例如,运动信息编码部163在运动信息编码模式为跳过模式或合并模式时执行合并运动矢量编码过程,当AMVP模式时执行AMVP编码过程。
预测区块生成部164利用当前区块的运动信息生成预测区块,运动向量为整数单位时,复制与参考图像索引所指示的图像中的运动矢量表示的位置相对应的区块,生成当前区块的预测区块。
一方面,当运动矢量不是整数单位时,预测区块生成部164可以从由参考图像索引所指示的图像中的整数单位像素生成预测区块的像素。
此时,对亮度像素可使用8抽头内插滤波器生成预测像素,并且对色度像素可使用4抽头内插滤波器生成预测像素。
残差区块生成部165使用当前区块和当前区块的预测区块生成残差区块,当当前区块的大小为2N×2N时,可以利用当前区块和与当前区块对应的大小为2N×2N的预测区块生成残差区块。
一方面,当用于预测的当前区块的大小为2N×N或N×2N时,分别对构建2N×2N的2个2N×N区块求预测区块之后,可以利用2个2N×N预测区块生成大小为2N×2N的最终预测区块。
并且,还可以利用大小为2N×2N的预测区块生成大小为2N×2N的残差区块,为了解决大小为2N×N的2个预测区块的边界部分的不连续性,对边界部分的像素可以适用重叠平滑。
残差区块编码部166将所述残差区块分割为一个以上的变换单元(TU),并且可以对各变换单元(TU)进行变换编码、量化和熵编码。
残差区块编码部166可以利用基于整数的变换矩来变换由帧间预测方法生成的残差区块,并且,所述变换矩可为基于整数的DCT矩阵。
一方面,残差区块编码部166利用量化矩阵来对由变换矩阵而变换的残差区块的系数进行量化,并且,所述量化矩阵可由量化参数确定。
所述量化参数可按照预定大小以上的编码单元(CU)而确定,当前编码单元(CU)小于所述预定大小时,在所述预定大小内的编码单元(CU)中按编码顺序只对第一个编码单元(CU)的量化参数进行编码,而剩余编码单元(CU)的量化参数与所述参数相同,因此,可以不进行编码。
另外,可以使用根据所述量化参数和预测模式确定的量化矩阵来对所述变换区块的系数进行量化。
可以使用与当前编码单元(CU)相邻的编码单元(CU)的量化参数来对按照所述预定大小以上的编码单元(CU)确定的量化参数进行预测编码。
以当前编码单元(CU)的左侧编码单元(CU)、上侧编码单元(CU)的顺序进行搜索利用1个或2个有效的量化参数生成当前编码单元(CU)的量化参数预测子。
例如,可以将以所述顺序搜索的有效的第一个量化参数确定为量化参数预测子,并且,以左侧编码单元(CU)、按编码顺序紧前面的编码单位(CU)的顺序进行搜索来将有效的第一个量化参数确定为量化参数预测子。
扫描经量化的变换区块的系数并将其变换为一维量化系数,并且,可以根据熵编码模式不同地设置扫描方式。
例如,用CABAC进行编码时,可以按预定的一种方式(之字形或对角线方向进行光栅扫描)扫描经帧间预测编码的量化系数,在使用CAVLC进行编码时,可以与所述方式不同的方式进行扫描。
例如,帧间扫描时采用之字形扫描,帧内扫描时可根据帧内预测模式确定扫描方式,并且,可以根据变换单元的大小不同地确定系数扫描方式。
一方面,所述扫描方式可根据方向性帧内预测模式而不同,并且,量化系数的扫描顺序可以反向扫描。
多路复用器167对由所述运动信息编码部163进行编码的运动信息和由所述残差区块编码部166进行编码的残差信号进行多路分配。
所述运动信息可根据编码模式而不同。例如,在跳过模式或合并模式的情况下,所述运动信息仅包括指示预测子的索引,在AMVP模式的情况下,所述运动信息可以包括当前区块的参考图像索引、差分运动矢量和AMVP索引。
下面,将详细说明图1中所示的帧内预测部150的操作的一实施例。
首先,帧内预测部150从图像分割部110接收预测模式信息及预测单元(PU)的大小,并且,从图像存储部180读取参考像素来确定预测单元(PU)的帧内预测模式。
帧内预测部150通过检查是否存在不可用的参考像素来判断是否生成参考像素,并且,所述参考像素可用于确定当前区块的帧内预测模式。
当前区块位于当前图像的上边界时,不定义与当前区块上侧相邻的像素,当前区块位于当前图像的左边界时,不定义与当前区块的左侧相邻的像素,可以确定所述像素不是可用像素。
而且,在当前区块位于切片边界而与切片的上侧或左侧相邻的像素不是先经编码而重建的像素时,也可以判断为不是可用的像素。
如上所述,当没有与当前区块的左侧或上侧相邻的像素时,或者没有预先经编码重建的像素时,可以仅使用可用像素来确定当前区块的帧内预测模式。
一方面,还可以利用当前区块的可用参考像素来生成不可用位置的参考像素,例如,当上部区块的像素不可用时,可以利用左侧像素的局部或全部来生成上侧像素,反之亦然。
即,从不可用位置的参考像素复制在预定方向上最近位置的可用参考像素来生成参考像素,或者在预定方向上没有可用的参考像素时,可以复制相反方向上最近位置的可用参考像素来生成参考像素。
一方面,存在当前区块的上侧像素或左侧像素时,也可以根据所述像素所属区块的编码模式将确定为不可用像素。
例如,与当前区块的上侧相邻的参考像素所属区块为被帧间编码而重建的区块时,可以将所述像素判断为不可用像素。
此时,可以利用属于与当前区块相邻的区块被帧内编码而重建的区块的像素来生成可用的参考像素,编码装置10根据编码模式将判断为可用的参考像素的信息传送至解码装置20。
帧内预测部150利用所述参考像素确定当前区块的帧内预测模式,当前区块中可允许的帧内预测模式的数量可以根据区块的大小而不同。
例如,当前区块的大小为8×8、16×16、32×32时,可以存在34个帧内预测模式,当前区块的大小为4×4时,可以存在17个帧内预测模式。
所述34个或17个帧内预测模式可由至少一个非方向性模式和多个方向性模式组成。
至少一个非方向性模式可为DC模式及/或平面模式。当DC模式及平面模式为非方向性模式时,无论当前区块的大小如何,都可能存在35个帧内预测模式。
在这种情况下,可以包括2个非方向性模式(DC模式和平面模式)及33个方向性模式。
在平面模式时,利用位于当前区块的右下侧的至少一个像素值(或所述像素值的预测值,以下称为第一参考值)和参考像素来生成当前区块的预测区块。
根据本发明的一实施例的影像解码装置的组成可以从参照图1至图6说明的影像编码装置10的组成导出,例如,通过相反地执行参照图1至图6所说明的影像编码方法的过程可以对影像进行解码。
图7是示出根据本发明的一实施例的视频解码装置的结构的框图,解码装置20包括熵解码部210、逆量化/逆变换部220、加法器270、去区块滤波器250、图像存储部260、帧内预测部230、运动补偿预测部240以及帧内/帧间切换开关280。
熵解码部210输入得到在影像编码装置10上经编码的位流进行解码,分割为帧内预测模式索引、运动信息、量化系数序列等,并将经解码的运动信息传送至运动补偿预测部240。
熵解码部210将帧内预测模式索引传送至帧内预测部230及逆量化/逆变换部220,将逆量化系数序列传送至逆量化/逆变换部220。
逆量化/逆变换部220将所述量化系数序列变换为二维排列的逆量化系数,为进行所述变换,可从多个扫描方式中选择一种,例如,可基于当前区块的预测模式(即帧内预测或帧间预测)和帧内预测模式选择扫描方式。
逆量化/逆变换部220对二维排列的逆量化系数适用从多个量化矩阵中选择的量化矩阵来重建量化系数。
一方面,根据要重建的当前区块的大小适用相互不同的量化矩阵,对相同大小的区块也可基于所述当前区块的预测模式及帧内预测模式中的至少一个选择量化矩阵。
逆量化/逆变换部220对所述重建的量化系数进行逆变换重建残差区块,所述逆变换过程可将变换单元(TU)作为基本单位执行。
加法器270对通过逆量化/逆变换部220重建的残差区块和通过帧内预测部230或运动补偿预测部40生成的预测区块进行相加重建影像区块。
截区块滤波器250对通过加法器270生成的重建影像进行去区块滤波处理,可以减小在量化过程中因影像损失而导致的截区块伪影。
图像存储部260是帧存储器,用于存储通过截区块滤波器250执行截区块滤波处理的解码影像。
帧内预测部230基于从熵解码部210接收的帧内预测模式索引重建当前区块的帧内预测模式,根据重建的帧内预测模式生成预测区块。
运动补偿预测部240基于运动向量信息从存储在图像存储部260的图像生成对当前区块的预测区块,适用小数精密度的运动补偿时,适用所选择的内插滤波器生成预测区块。
帧内/帧间切换开关280基于编码模式可向加法器270提供在帧内预测部230和运动补偿预测部240中的一个生成的预测区块。
图8是示出在影像解码装置20执行帧间预测的组成的一实施例的框图,帧间预测解码器,包括:多路复用器241、运动信息编码模式判断部242、合并模式运动信息解码部243、AMVP模式运动信息解码部244、预测区块生成部245、残差区块解码部246以及重建区块生成部247。
参照图8,多路复用器241对从所接收的比特流至当前经编码的运动信息和经编码的残差信号进行多路分配,将经多路分配的运动信息传送至运动信息编码模式判断部242,将经多路分配的残差信号传送至残差区块解码部246。
运动信息编码模式判断部242判断当前区块的运动信息编码模式,所接收的比特流的skip_flag为1时,可以判断当前区块的运动信息编码模式以跳过编码模式被编码。
运动信息编码模式判断部242,当所接收的比特流的skip_flag为0,由多路复用器241接收的运动信息只具有合并索引时,可以判断当前区块的运动信息编码模式以合并模式被编码。
运动信息编码模式判断部242,当所接收的比特流的skip_flag为0,由多路复用器241接收的运动信息具有参考图像索引和差分运动向量和AMVP索引时,可以判断当前区块的运动信息编码模式以AMVP模式被编码。
合并模式运动信息解码部243当运动信息编码模式判断部242将当前区块的运动信息编码模式判断为跳过模式或合并模式时被激活,AMVP模式运动信息解码部244当运动信息编码模式判断部242将当前区块的运动信息编码模式判断为AMVP模式时被激活。
预测区块生成部245利用由合并模式运动信息解码部243或AMVP模式运动信息解码部244重建的运动信息生成当前区块的预测区块。
运动向量为整数单位时,可以复制与参考图像索引所指示的图像中的运动矢量表示的位置对应的区块,生成当前区块的预测区块。
一方面,当运动矢量不是整数单位时,从参考图像索引所指示的图像中的整数单位像素来生成预测区块的像素,当亮度像素时,可使用8插头内插滤波器来生成预测像素,当色度像素时,可使用4抽头内插滤波器来生成预测像素。
残差区块解码部246对残差信号进行熵解码,并且,对经熵解码的系数进行逆扫描生成二维量化系数区块,逆扫描方式可根据熵解码方式而不同。
例如,基于CABAC进行解码时适用对角线方向的光栅逆扫描方式,基于CAVLC的解码时适用之字形逆扫描方式,可以适用所述逆扫描方式。而且,所述逆扫描方式可根据预测区块的大小而不同地确定。
残差区块解码部246将如所述生成的系数区块利用逆量化矩阵进行逆量化,为了导出所述量化矩阵可以重建量化参数。此处,量化步长可按预定大小以上的编码单元重建。
残差区块解码部260对所述逆量化系数区块进行逆变化重建残差区块。
重建区块生成部270对由所述预测区块生成部250生成的预测区块和由所述残差区块解码部260生成的残差区块进行相加而生成重建区块。
下面,再次参照图7说明通过帧内预测重建当前区块的过程的一实施例。
首先,从接收的比特流对当前区块的帧内预测模式进行解码,为此,熵解码部210参照多个帧内预测模式表中的一个重建当前区块的第一帧内预测模式索引。
所述多个帧内预测模式表是编码装置10和解码装置20共享的表,可适用对与当前区块相邻的多个区块按照帧内预测模式的分布选择的任一表。
例如,当前区块的左侧区块的帧内预测模式和当前区块的上侧区块的帧内预测模式相同时,可以适用第一帧内预测模式表重建当前区块的第一帧内预测模式索引,若不相同,则可以适用第二帧内预测模式表重建当前区块的第一帧内预测模式索引。
作为其他例,当前区块的上侧区块和左侧区块的帧内预测模式均为方向性预测模式(directional intra prediction)的情况下,所述上侧区块的帧内预测模式的方向与所述左侧区块的帧内预测模式的方向在预定角度以内时,可以适用第一帧内预测模式表重建当前区块的第一帧内预测模式索引,若超过预定角,则可以适用第二帧内预测模式表重建当前区块的第一帧内预测模式索引。
熵解码部210将重建的当前区块的第一帧内预测模式索引传送至帧内预测部230。
接收第一帧内预测模式索引的帧内预测部230,当所述索引具有最小值时(即0),可以将当前区块的最大可能模式确定为当前区块的帧内预测模式。
一方面,帧内预测部230,当所述索引具有0之外的值时,对当前区块的最大可能模式所表示的索引和所述第一帧内预测模式索引进行比较,比较结果所述第一帧内预测模式索引大于等于所述当前区块的最大可能模式所表示的索引时,将与对所述第一帧内预测模式索引加1的第二帧内预测模式索引相对应的帧内预测模式确定为当前区块的帧内预测模式,若不是,则可以将对应于所述第一帧内预测模式索引的帧内预测模式确定为当前区块的帧内预测模式。
对当前区块可允许的帧内预测模式可由至少一个非方向性模式和多个方向性模式组成。
至少一个非方向性模式可为DC模式及/或平面模式。并且,DC模式及平面模式中的一个可适应地包含于所述可允许的帧内预测模式集合。
为此,对图像首标或切片首标可包含特定在所述可允许的帧内预测模式集合中包含的非方向性模式的信息。
接着,帧内预测部230为了生成帧内预测区块而从图像存储部260读取参考像素,并判断是否存在不可用参考像素。
所述判断可根据适用当前区块的经解码的帧内预测模式生成帧内预测区块时所利用的参考像素的存在与否而执行。
接着,有必要生成参考像素时,帧内预测部230可以利用预先重建的可用参考像素生成不可用位置的参考像素。
对不可用参考像素的定义及参考像素的生成方法可与图1的帧内预测部150的操作相同,但是,根据当前区块的经解码的帧内预测模式可选择性地重建生成帧内预测区块时利用的参考像素。
而且,帧内预测部230为了生成预测区块判断对参考像素是否适用滤波器,即基于所述经解码的帧内预测模式及当前预测区块的大小确定为了生成当前区块的帧内预测区块对参考像素是否适用滤波器。
而且,区块的大小越大去区块伪影的问题也越大,因此,区块的大小越大,可以增加对参考像素进行滤波的预测模式的数量,但是,区块大于预定大小时会看成平坦的区域,因此,为了减小复杂度,对参考像素可以不进行滤波。
若判断对所述参考像素有必要进行滤波,则帧内预测部230利用滤波器对所述参考像素进行滤波。
根据所述参考像素之间的差异程度,可以适应地适用至少2个滤波器。所述滤波器的滤波系数相对称为佳。
另外,可以根据当前区块的大小适应地适用至少2个滤波器,并且,当适用滤波器时,对于具有小尺寸的区块适用窄带滤波器,对于具有大尺寸的区块适用宽带滤波器。
在DC模式下,由于由参考像素的平均值生成预测区块,因此不需要适用滤波器,在不同的垂直方向上具有关联性的垂直模式下,对参考像素不必适用滤波器,影像在水平方向上具有关联性的水平模式下也不必对参考像素适用滤波器。
如此,是否适用滤波与当前区块的帧内预测模式也有关联,因此,可以基于当前区块的帧内预测模式和预测区块的大小适应地滤波参考像素。
接着,帧内预测部230根据所述重建的帧内预测模式利用参考像素或经滤波的参考像素生成预测区块,所述预测区块的生成可以与在编码装置10的工作相同,因此,将省略对其的详细说明。
帧内预测部230判断是否对所生成的预测区块进行滤波,可根据切片首标或编码单元首标中包含的信息或者当前区块的帧内预测模式确定是否进行滤波。
若判断为对所生成的预测区块进行滤波,则帧内预测部230可通过对利用与当前区块相邻的可用参考像素生成的预测区块的特定位置的像素进行滤波而生成新的像素。
例如,在DC模式下,可以利用与预测像素接触的参考像素来滤波在预测像素中与参考像素接触的预测像素。
因此,根据预测像素的位置利用1个或2个参考像素对预测像素进行滤波,并且可以将DC模式下的预测像素的滤波适用于所有大小的预测区块。
一方面,在垂直模式下,可利用生成所述预测区块时利用的除上侧像素以外的参考像素来变更预测区块的预测像素中与左侧参考像素接触的预测像素。
同样地,在水平模式下,可利用生成所述预测区块时利用的除左侧像素以外的参考像素来变更所生成的预测区块中与上侧参考像素接触的预测像素。
通过利用以这种方式重建的当前区块的预测区块和经解码的当前区块的残差区块,可以重建当前区块。
图9是用于说明将影像以区块单位分割处理的方法的第二实施例的图。
参照图9,最多具有256×256像素尺寸的编码树单元(CTU)先分割为四叉树(四叉树)结构,从而,可分割为具有正方形形态的4个编码单元(CU)。
此处,被分割为所述四叉树结构的编码单元中的至少一个分割为二叉树(bunarytree)结构,然后,可再分割为具有矩形形态的2个编码单元(CU)。
一方面,被分割为所述四叉树结构的编码单元中的至少一个分割为四叉树结构,然后,可再分割为具有正方形形态的4个编码单元(CU)。
一方面,再分割为所述二叉树结构的编码单元中的至少一个再分割为二叉树结构,然后,可分割为具有正方形或矩形形态的2个编码单元(CU)。
一方面,再分割为所述四叉树结构的编码单元中的一个再分割为四叉树结构或二叉树结构,然后,可分割为具有正方形或矩形形态的编码单元(CU)。
如上所述,分割为二叉树结构而构建的编码区块(CB)可以用于预测和变换而不会再分割。即,属于图9所示的编码区块(CB)的预测单元(PU)和变换单元(TU)的大小可与相应编码区块(CB)的大小相同。
如上所述,可以利用参照图3和图4说明的方法将分割为四叉树结构的编码单元分割为一个以上的预测单元(PU)。
另外,如上所述分割为四叉树结构的编码单元可以利用参照图5说明的方法分割为一个以上的变换单元(TU),所述经分割的变换单元(TU)最大可具有64×64的像素尺寸。
图10示出用于将影像以区块单位分割处理时使用的语法结构的一实施例。
参照图10,利用split_cu_flag来表示是否分割参照图9说明的编码单元(CU),并利用binary_depth来表示采用二叉树分割的编码单元(CU)的深度。
而且,还可由另外的binary_split_flag表示编码单元(CU)是否分割为二叉树结构。
对通过参照图9及图10说明的方法分割的区块(例如,编码单元(CU)、预测单元(PU)、以及变换单元(TU))适用参照图1至图8说明的方法,对影像进行编码及解码。
下面,参照图11至图16说明将编码单元(CU)分割为1个以上的变换单元(TU)的方法的其他实施例。
根据本发明的实施例,编码单元(CU)分割为二叉树结构,并可分为对残差区块进行变换的基本单位的变换单元(TU)。
参照图11,分割为二叉树结构,且具有大小为N×2N或2N×N的矩形编码区块(CB0、CB1)中的至少一个再次分割为二叉树结构,从而,可分割为大小为N×N的正方形变换单元(TU0、TU1)。
如上所述,基于区块的影像编码方法可以执行预测、变换、量化及熵编码的步骤。
在所述预测步骤中,通过参照执行当前编码的区块和现有已经编码的影像或周边影像生成预测信号,通过此预测信号可以计算与当前区块的差分信号。
并且,在变换步骤中,输入所述差分信号并使用各种变换函数执行变换,所述经变换后的信号分为DC系数和AC系数,并执行能量压缩,可以提高编码效率。
并且,在量化步骤中,通过输入变换系数来执行量化,然后,对量化的信号执行熵编码,从而可以对影像进行编码。
一方面,影像解码方法以与所述的编码过程相反顺序执行,并且,在量化步骤中会发生影像质量失真的现象。
作为提高编码效率的同时减小影像质量失真现象,根据在变换步骤中输入的差分信号的分布及影像的特征,可以多样地设定变换单元(TU)的大小或形状以及所适用的变换函数的种类。
例如,在预测步骤中,通过基于区块的运动估计过程搜索与当前区块相似的区块时,利用SAD(绝对差之和)或MSE(均方差)等成本(cost)测定方法,差分信号的分布可根据影像的特性具有多样的形态。
因此,通过基于各种差分信号的分布选择性地确定变换单元(CU)的大小或形状,从而,可以有效地进行编码。
参照图12,当在某个编码区块CBx中如12(a)所示发生差分信号时,如图12(b)所示,将该编码区块CBx分割为二叉树结构并分割为2个变换单元(TU),从而,可以有效地进行变换。
例如,可以说通常DC值表示输入信号的平均值,因此,当接收到在变换过程输入如图12(a)所示的差信号时,编码区块CBx分割为2个变换单元(TU),从而,可以有效地表示DC值。
参照图13,将大小为2N×2N的正方形编码单元(CU0)分割为二叉树结构,并可分割为大小为N×2N或2N×N的矩形变换单元(TU0、TU1)。
根据本发明的另一实施例,如上所述,将编码单元(CU)分割为二叉树结构的步骤可以重复执行2次以上,从而,可以分割为多个变换单元(TU)。
参照图14,将大小为N×2N的矩形编码区块(CB1)分割为二叉树结构,并将所述经分割的大小为N×N的区块再分割为二叉树结构构建大小为N/2×N或N×N/2的矩形区块,然后,将大小为N/2×N或N×N/2的区块再分割为二叉树结构,从而,可以分割为大小为N/2×N/2的正方形变换单元(TU1、TU2、TU4、TU5)。
参照图15,将大小为2N×2N的正方形编码区块(CB0)分割为二叉树结构,并将所述经分割的大小为N×2N的区块再分割为二叉树结构构建大小为N×N的正方形区块,然后,将大小为N×N的区块再分割为二叉树结构,从而,可以分割为大小为N/2×N的矩形变换单元(TU1、TU2)。
参照图16,将大小为2N×N的矩形编码区块(CB0)分割为二叉树结构,并将所述经分割的大小为N×N的区块再分割为四叉树结构,从而,可以将大小为N/2×N/2的区块分割为正方形变换单元(TU1、TU2、TU3、TU4)。
通过对参照图11至图16说明的方法分割的区块(例如,编码单元(CU)、预测单元(PU)及变换单元(TU))适用与参照图1至8非零说明的相同的方法,从而,可以对影像进行编码及解码。
下面,说明根据本发明的编码装置10确定区块分割结构的方法的实施例。
设置在影像编码装置10中的图像分割部110按照预定顺序执行速率失真优化(Rate distortion Optimization,RDO),可以确定如上所述可分割的编码单元(CU)、预测单元(PU)及变换单元(TU)的分割结构。
例如,为了确定区块分割结构,图像分割部110在执行速率失真优化(Ratedistortion Optimization,RDO)的同时,可在比特流和失真方面确定最佳的区块分割结构。
参照图17,当编码单元(CU)具有2N×2N的像素尺寸的形态时,以图17(a)所示的2N×2N像素尺寸、图17(b)所示的N×N像素尺寸、图17(c)所示的N×2N像素尺寸、图17(d)所示的2N×N像素尺寸的变换单元(PU)分割结构顺序执行速率失真优化,以确定变换单元(PU)的最佳分割结构。
参照图18,当编码单元(CU)具有N×2N或2N×N像素尺寸的形态时,以图18(a)所示的N×2N(或2N×N)的像素尺寸、图18(b)所示的N×N的像素尺寸、图18(c)所示的N/2×N(或N×N/2)及N×N的像素尺寸、图18(d)所示的N/2×N/2、N/2×N及N×N的像素尺寸、图18(e)所示的N/2×N的像素尺寸的变换单元(PU)分割结构顺序执行速率失真优化,以确定变换单元(PU)的最佳分割结构。
以上尽管通过执行速率失真优化(RDO)来确定区块分割结构的情况为例说明了本发明的区块分割方法,但是,图像分割部110通过利用绝对差之和(Sum of Absolutedifference,SAD)和均方差(Mean Square Error,MSE)确定区块分割结构,从而,可以降低复杂性,并保持适当的效率。
根据本发明的一实施例,可根据如上所述分割的编码单元(CU)、预测单元(PU)或变换单元(TU)为单位确定是否适用适应环路滤波(Adaptive Loof Filtering,ALF)。
例如,能够以编码单元(CU)单位确定是否适用适应环路滤波器(ALF),并且,所适用的环路滤波器的大小或系数可根据编码单元(CU)而不同。
此时,表示是否针对每个编码单元(CU)适用适应环路滤波器(ALF)的信息可以包括在每个切片首标中。
在色度信号的情况下,能够以图像单位确定是否适用适应环路滤波器(ALF),与亮度不同,环路滤波器的形状也可以具有矩形形状。
另外,所述适应环路滤波(ALF)可以按照切片确定是否适用。因此,表示适应环路滤波(ALF)是否适用于当前切片的信息可以包含在切片首标或图像首标。
若表示对当前切片适用了适应环路滤波,则切片首标或图像首标可另外包括表示在适应环路滤波过程中使用的亮度分量的水平及/或垂直方向的滤波器长度的信息。
切片首标或图像首标可包括表示滤波器组的数量的信息,滤波器组的数量为2个以上时,滤波器系数可以使用预测方法进行编码。
因此,切片首标或图像首标可以包括表示滤波器系数是否用预测方法编码的信息,使用预测方法时可以包含预测的滤波器系数。
一方面,除了亮度之外对色度分量也可以适应地进行滤波,此时,表示对每个色度分量是否进行滤波的信息可以包括在切片首标或图像首标中,为了减少比特数,可以与表示对Cr和Cb是否进行滤波的信息一起联合编码(即多重编码)。
此时,在色度分量的情况下,为了减低复杂度,对Cr和Cb都不进行滤波的可能性频繁地发生,因此,在对Cr和Cb都不进行滤波时,可以分配最小的索引,来执行熵编码。
而且,对于Cr和Cb都进行滤波的情况下,可以分配最大的索引来执行熵编码。
图19为用于说明本发明的另一实施例的复合分割结构的图。
参照图19,编码单元(CU)分割为二叉树结构,由此可出现分割为如图19(A)所示的横向长度W长于纵向长度H的形态的长方形和如图19(B)所示的纵向长度H长于横向长度W的形态的长方形的编码单元(CU)的形态。像这样,对于特定方向的长度长的编码单元而言,相比于中间区域,边缘左右或上下界限区域的编码信息要集中的可能性相对来说高。
因此,为了实现更精密而有效的编码及解码,本发明的一实施例的编码装置10根据四叉树及二叉树的分割,能够按可容易分割特定方向长度较长地分割的编码单元的边缘区域等的三叉树(ternary tree)或三重树(triple tree)结构分割编码单元。
例如,图19(A)可表示分割对象编码单元为水平分割的编码单元时,可三进制分割为横向长度为W/8、纵向长度为H/4的左侧边缘的第1区域、横向长度为W/8*6、纵向长度为H/4的作为中间区域的第2区域、横向长度为W/8、纵向长度为H/4的右侧边缘的第三区域。
并且,图19(B)可表示分割对象编码单元为垂直分割的编码单元时,可分割为横向长度为W/4、纵向长度为H/8的上端边缘的第1区域、横向长度为W/4、纵向长度为H/8*6的作为中间区域的第2区域、横向长度为W/4、纵向长度为H/8的下端边缘的第三区域。
而且,本发明的实施例的编码装置10可通过图像分割部110处理如上的三叉树结构的分割。为此,图像分割部110不仅可按编码效率决定向四叉树及二叉树结构的分割,而且可确定一起考虑三叉树结构来细化的分割方式。
其中,三叉树结构的分割不受特别限制,可处理所有编码单元。但是,如前所述,考虑编码及解码效率时,优选地仅对特定条件的编码单元允许三叉树结构。
并且,三叉树结构,有可能需要对编码树单元进行多种方式的三进制分割,但是考虑编码及解码复杂度及信号传送带宽,优选地仅允许优化的规定形态。
因此,图像分割部110在决定当前编码单元的分割时,仅在当前编码单元对抗预先设定的条件时可判断及决定是否要分割为特定形态的三叉树结构。并且,根据如上三叉树的允许,还可将二叉树的分割比率扩大及可变为3:1、1:3等,而不仅是1:1。因此,本发明的实施例的编码单元的分割结构可包括能够按比率细化分割为四叉树、二叉树或三叉树。
例如,图像分割部110基于分割表,可确定分割对象编码单元的复合分割结构。
根据本发明的实施例,图像分割部110对应于区块的最大尺寸(例如,基于像素128x128、256x256等),处理四叉树分割,可对与分割有四叉树的终端节点对应的双重树及三重树结构分割中的至少一个执行复合分割处理。
尤其,本发明的实施例的图像分割部110根据分割表可确定与当前区块的特性及尺寸对应的作为二叉树分割的第1二进制分割(BINARY 1)、第2二进制分割(BINARY 2)、作为三叉树分割的第1三进制分割(TRI 1)或第2三进制分割(TRI 2)中的任一个分割结构。
其中,第1二进制分割可对应于具有N:N的比率的垂直或水平分割,第2二进制分割可对应于具有3N:N或N:3N的比率的垂直或水平分割,各自二进制分割的root CU可分割为明示于分割表的各尺寸的CU0及CU1。
另一方面,第1三进制分割可对应于具有N:2N:N的比率的垂直或水平分割,第2三进制分割可对应于具有N:6N:N的比率的垂直或水平分割,各自三进制分割的root CU可分割为明示于分割表的各尺寸的CU0、CU1及CU2。
由此,对应于分割对象编码单元的尺寸,可确定表示可各自处理的分割结构及分割时的编码单元尺寸的分割表。
只是,本发明的实施例的图像分割部110可分别用于适用所述第1二进制分割、第2二进制分割、第1三进制分割或第2三进制分割的最大编码单元尺寸及最小编码单元尺寸。
这是因为,执行与具有最小尺寸例如具有2以下的横向或纵向像素的区块对应的编码及解码处理,在复杂度方面上有可能不太有效,因此本发明的实施例的分割表可预先定义各编码单元的不同尺寸可允许的分割结构。
由此,图像分割部110可预先防止分割为作为最小大小例如小于4的尺寸的横向像素尺寸或纵向像素尺寸为2的情况等,为此,从分割对象区块的尺寸中预先判断与第1二进制分割、第2二进制分割、第1三进制分割或第2三进制分割对应的允许与否,处理比较对应于可允许的分割结构的RDO性能计算,可确定最佳的分割结构。
例如,当最大大小的root编码单元CU0被二进制分割时,二进制分割结构可分割为构成1:1、3:1或1:3垂直分割中的任一个结构的CU0、CU1,三进制分割结构可分割为构成1:2:1或1:6:1垂直分割中的任一个结构的CU0、CU1及CU2。
尤其,根据分割对象编码单元的尺寸,可限制性地确定可允许的垂直分割结构。例如,64X64编码单元及32X32编码单元的垂直分割结构均可允许第1二进制分割、第2二进制分割、第1三进制分割及第2三进制分割,但是16X16编码单元的垂直分割结构中的第2三进制分割可限制为不可能。并且,8X8编码单元的垂直分割结构还可限制性地仅允许第1二进制分割。由此可预先防止分割为小于导致复杂性的最小尺寸。
同理,当最大尺寸的root编码单元CU0被二进制分割时,二进制分割结构可分割为构成1:1、3:1或1:3水平分割中的任一个结构的CU0、CU1,三进制分割结构可分割为构成1:2:1或1:6:1水平分割中的任一个构成的CU0、CU1及CU2。
同理,根据分割对象编码单元的尺寸,可限制性地确定可允许的水平分割结构。例如,64X64编码单元及32X32编码单元的水平分割结构均可允许第1二进制分割、第2二进制分割、第1三进制分割及第2三进制分割,但是16X16编码单元的水平分割结构中的第2三进制分割可限定为不可能。并且,8X8编码单元的水平分割结构还可限制性地仅允许第1二进制分割。由此可预先防止分割为小于导致复杂性的最小尺寸。
另一方面,还可例示与受限垂直分割的编码单元对应的水平分割被处理的情况的分割形态。
这种情况下,图像分割部110根据分割表,可将垂直分割的编码单元水平分割处理为第1二进制分割或第2二进制分割,或者可水平分割处理为第1三进制分割或第2三进制分割。
例如,对应于由32X64垂直分割的编码单元,图像分割部110根据第1二进制分割,分割为32X32的CU0、CU1,或者根据第2二进制分割,分割为32X48、32X16的C0、CU1,或者根据第1三进制分割,分割为32X32、32X16、32X16的CU0、CU1、CU2,或者根据第2三进制分割,可分割为32X8、64X48、32X8的CU0、CU1、CU2。
并且,图像分割部110将水平分割的编码单元垂直分割处理为第1二进制分割或第2二进制分割,或者可垂直分割处理为第1三进制分割或第2三进制分割。
例如,对应于由32X16水平分割的编码单元,图像分割部110根据第1二进制分割,分割为16X16的CU0、CU1,或者根据第2二进制分割,分割为24X16、8X16的C0、CU1,或者根据第1三进制分割,分割为8X16、16X16、8X16的CU0、CU1、CU2,或者根据第2三进制分割,可分割为4X16、24X16、4X16的CU0、CU1、CU2。
这种分割允许结构,可根据CTU的尺寸、CTU组单位及切片单位和垂直及水平不同方向不同地确定为条件部,由第1二进制分割、第2二进制分割、第1三进制分割及第2三进制分割处理的情况的各CU分割比率及确定大小信息可根据分割表定义或者可预先设置条件信息。
根据如上的分割处理,将利用二叉树及三叉树细化的分割允许为条件部,由此可使该编码单元实现适合于特性的适当比率的分割,由此可提高编码效率。
图20为用于说明本发明的一实施例的量化部130或逆量化部220的动作的流程图。
如前所述,量化部130作为量化步长预测子,可以利用与当前量化单元相邻的量化单元的量化步长,例如,量化部130以当前量化单元的左侧量化单元、上侧量化单元、左上侧量化单元的顺序进行搜索,可利用1个或2个有效的量化步长生成当前量化单元的量化步长预测子。例如,量化部130若确定量化步长预测子,量化部130将当前量化单元的量化步长和量化步长预测子之间的差分值传送至熵编码部140。逆量化部220可逆序处理。
但是,如图21所示,各区块内分割结构不仅以前述的二进制树、三叉树结构,而且能够以更多种形态存在,进而,分割的形状也可以表示为正方形、矩形、三角形或任意形状。
图像分割部110为了掌握这种分割形态,可提取基本分割单位信息、分割深度信息及再分割与否信息。
基本分割单位信息可表示将一个区块分割为几个区块的信息。基本分割单位信息根据实施例可包括交叉适用两个直线并通过一次分割来分割为4个区块,或者适用一个直线来分割为2个区块的分割单位信息。
并且,分割深度信息可表示在帧区块内进行最小分割的区块的分割次数。
并且,区块的再分割与否信息可表示分割的区块并不是全部分割为分割次数,而是中间被中断。
例如,分割出大小为64x64的大的区块,基本分割单位为1,分割深度为3,这样所有区块分割为分割深度,大的区块可能分割为总共8个的长方形。此时,长方形的横向像素、纵向像素的大小可通过分割方向信息而不同。
由此,如图20所示,本发明的实施例的编码装置100或解码装置200,若要编码或解码的区块的分割深度信息及分割方向信息被解析(S1001),则通过量化部130或逆量化部220,可获得与所述解析的分割深度信息及分割方向信息对应的所述区块内要编码或解码的单元的分割结构信息(S1003)。
并且,量化部130或逆量化部220基于所述分割结构信息,从与所述要编码或解码的单元对应的至少一个周边单元中获得一个以上的预测量化参数(S1005),并获得所述要编码或解码的单元的差分量化参数(S1007),从所述差分量化参数和所述一个以上的预测量化参数中获得量化参数(S1009),利用获得的量化参数,可对所述要编码或解码的单元执行对应的解码(S1011)。
更具体地,量化部130或逆量化部220获得所述结构信息时,基于所述解析的区块的分割深度信息及分割方向信息,可获得所述要解码的区块的分割单位信息及分割次数信息,基于所述解析的区块的分割深度信息、分割方向信息、所述分割单位信息及所述分割次数信息中的至少一个,可确定用于预测与所述要解码的单元对应的量化参数的周边单元。
并且,量化部130或逆量化部220还可获得与额外信号传递的所述要解码的单元的差分量化参数对应的差分量化参数深度信息。
这种情况下,量化部130或逆量化部220可比较所述要解码的区块的分割深度信息和所述差分量化参数深度信息。
并且,量化部130或逆量化部220根据所述比较结果,所述差分量化参数深度信息小于所述要解码的区块的所述分割深度信息时,可将所述差分量化参数深度信息确定为所述要解码的单元的分割深度信息。
由此,量化部130或逆量化部220基于所述确定的分割深度信息,将所述区块分割为所述要解码的单元,利用所述差分量化参数可执行所述分割的单元的逆量化。
另一方面,量化部130或逆量化部220根据所述比较结果,所述差分量化参数深度信息大于所述要解码的区块的所述分割深度信息时,可获得用于差分量化参数的追加分割方向及追加分割单位信息。
这种情况下,量化部130或逆量化部220利用所述追加分割方向及追加分割单位信息,可将所述区块分割为所述要解码的单元,对所述分割的单元可执行利用于所述差分量化参数的逆量化。
通过图22至图23,更具体地说明如上的程序。
图22表示根据本发明实施例的区块内分割的单元的尺寸不同时求出预测量化参数的方法。
如图22所示,由于量化部130以分割的单元单位执行量化,因此区块内单元以不同的大小分割的情况下,可发生左、上端的区块不存在,或者存在多个的情况。
例如,在图22中,单元F在上端存在A单元,在左侧上端存在B单元,在左侧下端存在C单元。这种情况下,量化部130均利用A、B、C的区块特性值,可预测单元F的量化参数。
并且,例如,在图22中,对于单元E而言,在左侧存在单元D,在上端左侧存在单元C,在上端右侧存在单元F,因此量化部130均利用D、C、F的区块特性值,可预测单元E的量化参数。
图22作为用于理解发明的实施例的一个实施例可实现更多种的实施例。
即,根据本发明的实施例,量化部130利用与当前解码的单元的左侧及上侧的界限相邻的所有单元的区块特性值,可预测量化参数。
并且,作为量化部130中计算预测值的方法,可以有利用区块特性值的平均值的方法、利用区块特性值中最小的值的方法、利用区块特性值中最大的值的方法等多种方法,这可根据编码装置100与解码装置200之间预先定义的程序来进行工作,故而无需额外的信号传递,这可提高传送效率。
图23为用于说明通过根据本发明的实施例传送的差分量化参数深度信息来求出预测量化参数的方法的图。
在图23所示的实施例中,分割前编码单元的基本分割单位信息可包括将1个直线分割为两个区块的分割信息,单元的分割深度信息可以是3,差分量化参数深度信息可以是2。
这种情况下,分割的单元A及单元B的量化参数有可能未被传送,量化部130可处理各单元,使其具有与作为一个步骤上位分割单元(区块)的分割前编码单元的差分量化参数相同的差分量化参数值,并计算量化参数。
相反,单元的分割深度信息为2,差分量化参数的深度信息为3的情况下,C和D单元(区块)应当具有两个差分量化参数。由此,编码装置100向解码装置200分别传送深度信息、分割方向及分割单位信息,并传送相当于各个量化单元的特性值,由此能够以确定量化参数的方式进行处理。
其中,编码装置100具有用于传送信号传递信息的传送部,该信号传递信息用于额外传递用于差分量化参数的深度信息。
尤其,当对应于差分量化参数的深度信息与区块分割深度信息相同时,编码装置100通过所述传送部,将差分量化参数对应于各单元,可将每一个参数传送至解码装置200,由此可提高位元比。
并且,对于解码装置200而言,当分割深度信息大于差分量化参数深度信息时,对应于差分量化参数的深度信息可被处理为具有与相同级别的差分量化参数相同的值。
并且,对于解码装置200而言,当分割深度信息小于差分量化参数深度信息时,相当于差分量化深度地分割单元,可从编码装置100接收与该单元对应的量化参数,逆量化部220可利用其来处理逆量化。
如上所述的分割深度信息可根据差分量化参数的传送来处理,随着按单元单位传送差分量化参数,可在解码装置200中实现逆量化部220的条件部逆量化处理,以便提高量化参数的传送效率,并可控制精密率。
根据如上所述的本发明的方法被制作成可在计算机执行的程序,所述程序存储于计算机可读记录介质上,记录介质的例子包括只读存储器(ROM)、随机存取存储器(RAM)、CD-ROM、磁带、软盘、光学数据存储设备等,还包括以载波(例如,通过因特网的传播)形态体现。
计算机可读记录介质分布在由网络连接的计算机系统上,因此计算机可读代码以分布的形式被存储和执行。用于实现所述方法的功能性程序、编码以及编码段可由本发明所属领域的程序编制员容易推论。
以上示出并说明了本发明的优选实施例,但本发明并不局限于所述特定实施例,本发明所属技术领域的普通技术人员在不脱离发明要求保护范围所要求的本发明的主旨的范围内可对本发明进行多种变形实施,这种变形实施不能脱离本发明的技术思想或前景而单独被理解。

Claims (13)

1.一种影像解码方法,包括如下步骤:
从比特流获得包括当前区块的系数的量化系数序列;
通过基于用于扫描所述当前区块的所述系数的扫描方式来对量化的所述系数序列进行解码而重建所述当前区块的残差区块;
在解码装置中预先定义的可允许的帧内预测模式中确定所述当前区块的帧内预测模式;
基于所述当前区块的所述帧内预测模式生成所述当前区块的预测区块;以及
使用所述残差区块和预测区块重建所述当前区块。
2.如权利要求1所述的方法,其中,所述扫描方式被确定为所述解码装置中预先定义的多个扫描方式中的一个,以及
其中,所述多个扫描方式包括正向的对角线扫描和反向的对角线扫描。
3.如权利要求2所述的方法,其中,所述扫描方式基于所述当前区块的变换单元的大小来适应地确定。
4.如权利要求1所述的方法,其中,所述当前区块的所述帧内预测模式基于可用参考像素的位置来确定。
5.如权利要求3所述的方法,其中,所述可允许的帧内预测模式的数量根据可用参考像素的位置而不同。
6.如权利要求5所述的方法,其中,当确定所述当前区块的所述帧内预测模式为DC模式时,生成所述当前区块的所述预测区块的步骤包括如下步骤:
使用与所述当前区块相邻的一个以上的参考像素来对所述预测区块的预测像素进行滤波。
7.如权利要求6所述的方法,其中,用于对所述预测像素进行滤波的所述参考像素的数量根据所述预测像素在所述预测区块中的位置而不同。
8.如权利要求7所述的方法,其中,
响应于所述预测像素在所述预测区块中具有第一坐标,仅使用一个参考像素来对所述预测像素进行滤波,并且,响应于所述预测像素在所述预测区块中具有第二坐标,仅使用两个参考像素来对所述预测像素进行滤波。
9.如权利要求8所述的方法,其中,
所述当前区块通过基于三叉树分割来分割编码区块而获得,
其中,所述三叉树分割表示使用两条分割线将一个编码区块分割为三个编码区块的分割类型,并且
其中,所述两条分割线表示垂直线或水平线。
10.如权利要求9所述的方法,其中,
所述两条分割线不穿过所述编码区块的中心。
11.如权利要求10所述的方法,其中,
所述三个编码区块中的一个的大小是所述三个编码区块中的另外两个的大小的两倍,并且
所述三个编码区块中的所述另外两个具有相同的大小,并且
其中,所述三个编码区块中的所述一个位于所述三个编码区块中的所述另外两个之间。
12.一种编码图像的方法,包括如下步骤:
基于当前区块的帧内预测模式来生成所述当前区块的预测区块,所述帧内预测模式是编码装置中预先定义的可允许的帧内预测模式中的一个;
获得作为所述当前区块的原始区块与所述预测区块之间的差的残差区块;
从所述残差区块中获得量化系数的二维排列;和
通过基于用于扫描所述当前区块的所述系数的扫描方式对所述量化系数的所述二维排列进行编码来生成比特流。
13.一种设备,所述设备包括通过对图像进行编码而生成的比特流,其中,
所述比特流包括量化系数序列,所述量化系数序列包括当前区块的系数,
所述量化系数序列基于用于扫描所述当前区块的所述系数的扫描方式来被解码,以重建所述当前区块的残差区块,
所述残差区块表示所述当前区块的原始区块和所述当前区块的预测区块之间的差,
所述预测区块基于所述当前区块的可允许的帧内预测模式中的一个来生成。
CN202210186095.5A 2017-09-06 2018-09-06 影像解码方法、编码图像的方法及设备 Pending CN114630133A (zh)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
KR20170113889 2017-09-06
KR10-2017-0113889 2017-09-06
PCT/KR2018/010430 WO2019050300A1 (ko) 2017-09-06 2018-09-06 효과적인 차분양자화 파라미터 전송 기반 영상 부/복호화 방법 및 장치
CN201880057900.6A CN111052741A (zh) 2017-09-06 2018-09-06 基于有效传送的差分量化参数的影像编码/解码方法及装置

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CN201880057900.6A Division CN111052741A (zh) 2017-09-06 2018-09-06 基于有效传送的差分量化参数的影像编码/解码方法及装置

Publications (1)

Publication Number Publication Date
CN114630133A true CN114630133A (zh) 2022-06-14

Family

ID=65634911

Family Applications (2)

Application Number Title Priority Date Filing Date
CN202210186095.5A Pending CN114630133A (zh) 2017-09-06 2018-09-06 影像解码方法、编码图像的方法及设备
CN201880057900.6A Pending CN111052741A (zh) 2017-09-06 2018-09-06 基于有效传送的差分量化参数的影像编码/解码方法及装置

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN201880057900.6A Pending CN111052741A (zh) 2017-09-06 2018-09-06 基于有效传送的差分量化参数的影像编码/解码方法及装置

Country Status (4)

Country Link
US (1) US11064201B2 (zh)
KR (2) KR20230113661A (zh)
CN (2) CN114630133A (zh)
WO (1) WO2019050300A1 (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11064201B2 (en) * 2017-09-06 2021-07-13 Kaonmedia Co., Ltd. Method and device for image encoding/decoding based on effective transmission of differential quantization parameter
WO2020111981A1 (en) * 2018-11-26 2020-06-04 Huawei Technologies Co., Ltd. Apparatus and method for chrominance quantization parameter derivation
EP3993416A4 (en) * 2019-06-27 2023-03-15 Samsung Electronics Co., Ltd. IMAGE CODING METHOD AND APPARATUS, AND IMAGE DECODING METHOD AND APPARATUS

Family Cites Families (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106028048B (zh) * 2010-01-15 2019-04-05 三星电子株式会社 对视频进行解码的设备
CN102918842B (zh) * 2010-04-07 2016-05-18 Jvc建伍株式会社 动图像编码装置和方法、以及动图像解码装置和方法
KR101828625B1 (ko) * 2010-06-04 2018-02-12 소니 주식회사 화상 처리 장치 및 방법
EP2624560B1 (en) 2010-09-30 2016-11-02 Sun Patent Trust Image decoding method, image encoding method, image decoding device, image encoding device, programme, and integrated circuit
KR101269116B1 (ko) * 2010-12-14 2013-05-29 엠앤케이홀딩스 주식회사 인터 예측 부호화된 동영상 복호화 방법
JP6056122B2 (ja) * 2011-01-24 2017-01-11 ソニー株式会社 画像符号化装置と画像復号装置およびその方法とプログラム
KR101442127B1 (ko) * 2011-06-21 2014-09-25 인텔렉추얼디스커버리 주식회사 쿼드트리 구조 기반의 적응적 양자화 파라미터 부호화 및 복호화 방법 및 장치
US20140205007A1 (en) * 2011-08-31 2014-07-24 Sony Corporation Image processing devices and methods
BR112014007494B1 (pt) * 2011-09-29 2022-05-31 Sharp Kabushiki Kaisha Dispositivo de decodificação de imagem, método de decodificação de imagem, e dispositivo de codificação de imagem
KR101620620B1 (ko) 2011-10-26 2016-05-13 주식회사 케이티 인트라 예측 모드를 기초로 양자화 계수를 예측하는 방법 및 이를 이용하는 장치
KR20130049523A (ko) * 2011-11-04 2013-05-14 오수미 인트라 예측 블록 생성 장치
BR112014023948B1 (pt) * 2012-03-28 2021-05-25 JVC Kenwood Corporation dispositivo de decodificação de imagem
CN103517070B (zh) * 2013-07-19 2017-09-29 清华大学 图像的编解码方法和装置
CN105580361A (zh) * 2013-09-27 2016-05-11 高通股份有限公司 用于深度帧内预测模式的残余译码
CN104010196B (zh) * 2014-03-14 2017-02-15 北方工业大学 基于hevc的3d质量可伸缩视频编码
KR101706276B1 (ko) * 2014-05-22 2017-02-15 인텔렉추얼디스커버리 주식회사 쿼드트리 구조 기반의 적응적 양자화 파라미터 부호화 및 복호화 방법 및 장치
WO2015194922A1 (ko) * 2014-06-20 2015-12-23 삼성전자 주식회사 비디오 부호화 방법 및 장치, 비디오 복호화 방법 및 장치
US10531123B2 (en) * 2015-03-06 2020-01-07 Korea Advanced Institute Of Science And Technology Image encoding and decoding method based on low-complexity transformation, and apparatus using same
KR101914667B1 (ko) 2016-09-19 2018-11-02 세종대학교산학협력단 동영상 처리 방법 및 장치
JP6256572B2 (ja) * 2016-11-04 2018-01-10 株式会社Jvcケンウッド 画像復号装置、画像復号方法、及び画像復号プログラム
US11064201B2 (en) * 2017-09-06 2021-07-13 Kaonmedia Co., Ltd. Method and device for image encoding/decoding based on effective transmission of differential quantization parameter
US10516885B1 (en) * 2018-07-11 2019-12-24 Tencent America LLC Method and apparatus for video coding

Also Published As

Publication number Publication date
US20200296374A1 (en) 2020-09-17
US11064201B2 (en) 2021-07-13
KR20230113661A (ko) 2023-07-31
CN111052741A (zh) 2020-04-21
WO2019050300A1 (ko) 2019-03-14
KR20200040255A (ko) 2020-04-17

Similar Documents

Publication Publication Date Title
CN109845269B (zh) 影像处理方法、利用其的影像解码及编码方法
KR102354628B1 (ko) 부호화 트리 유닛 및 부호화 유닛의 처리를 수행하는 영상 처리 방법, 그를 이용한 영상 복호화, 부호화 방법 및 그 장치
KR102657392B1 (ko) 병렬 처리를 위한 움직임 정보를 처리하는 영상 처리 방법, 그를 이용한 영상 복호화, 부호화 방법 및 그 장치
KR20190081383A (ko) 서브-블록 단위 화면 내 예측을 사용하는 비디오 코딩 방법 및 장치
KR20200039591A (ko) 영상 부호화/복호화 방법, 장치 및 비트스트림을 저장한 기록 매체
CN114630133A (zh) 影像解码方法、编码图像的方法及设备
KR20200083316A (ko) 영상 부호화/복호화 방법, 장치 및 비트스트림을 저장한 기록 매체
KR20170132038A (ko) 영상 처리를 위한 블록 기반 적응적 루프 필터링 방법, 그를 이용한 영상 부호화 및 복호화 방법
KR20190084560A (ko) 영상 처리 방법, 그를 이용한 영상 복호화 및 부호화 방법
KR20170132036A (ko) 영상 처리를 위한 블록 분할 방법, 그를 이용한 영상 부호화 및 복호화 방법
KR101659343B1 (ko) 동영상 처리 방법 및 장치
KR101914667B1 (ko) 동영상 처리 방법 및 장치
KR102610188B1 (ko) 향상된 산술부호화를 제공하는 영상 처리 방법, 그를 이용한 영상 복호화, 부호화 방법 및 그 장치
KR20240052921A (ko) 병렬 처리를 위한 움직임 정보를 처리하는 영상 처리 방법, 그를 이용한 영상 복호화, 부호화 방법 및 그 장치
CN117939173A (zh) 影像处理方法以及计算机可读记录介质
KR20150070845A (ko) 영상의 복호화/부호화 방법 및 장치
KR20200005207A (ko) 움직임 보상 및 필터링을 처리하는 영상 복호화 및 부호화 방법

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information
CB02 Change of applicant information

Address after: Gyeonggi Do city of South Korea

Applicant after: Jiawen Group Co.,Ltd.

Address before: Gyeonggi Do city of South Korea

Applicant before: Jiawen Electronics Co.,Ltd.

TA01 Transfer of patent application right
TA01 Transfer of patent application right

Effective date of registration: 20240123

Address after: Gyeonggi Do Korea Suwon

Applicant after: SAMSUNG ELECTRONICS Co.,Ltd.

Country or region after: Republic of Korea

Address before: Gyeonggi Do city of South Korea

Applicant before: Jiawen Group Co.,Ltd.

Country or region before: Republic of Korea