CN109792516A - 图像和视频编解码中用于帧内色度编解码的方法及装置 - Google Patents

图像和视频编解码中用于帧内色度编解码的方法及装置 Download PDF

Info

Publication number
CN109792516A
CN109792516A CN201780059798.9A CN201780059798A CN109792516A CN 109792516 A CN109792516 A CN 109792516A CN 201780059798 A CN201780059798 A CN 201780059798A CN 109792516 A CN109792516 A CN 109792516A
Authority
CN
China
Prior art keywords
block
mode
sub
decoding
encoding
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201780059798.9A
Other languages
English (en)
Other versions
CN109792516B (zh
Inventor
夜静
许晓中
刘杉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
MediaTek Inc
Original Assignee
MediaTek Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by MediaTek Inc filed Critical MediaTek Inc
Publication of CN109792516A publication Critical patent/CN109792516A/zh
Application granted granted Critical
Publication of CN109792516B publication Critical patent/CN109792516B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/105Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/11Selection of coding mode or of prediction mode among a plurality of spatial predictive coding modes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/167Position within a video image, e.g. region of interest [ROI]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques

Abstract

本发明提供一种以推导模式帧内预测编解码的色度的视频编解码的方法及装置。如果推导模式帧内预测被选择用于当前色度块,则:通过定位对应于当前色度块相应亮度块区域的第一左上像素地址,确定相应亮度块区域;从包括相应亮度块区域的一个或多个子块的子块集中确定一个或多个候选亮度编解码模式,其中如果子块集仅包括一个子块,则子块集排除位于相应亮度块区域的左上角处的角子块;基于包括一个或多个候选亮度编解码模式的信息,推导出当前色度帧内模式以用于当前色度块;以及使用推导出的当前色度帧内模式,将帧内预测编码或者解码应用到当前色度块。

Description

图像和视频编解码中用于帧内色度编解码的方法及装置
交叉引用
本发明主张在2016年10月04日提出的申请号为62/403,735的美国临时专利申请的优先权,主张在2016年11月11日提出的申请号为62/420,659的美国临时专利申请的优先权,其内容以引用方式整体并入本文中。
技术领域
本发明涉及图像和视频编解码中的帧内编解码。具体而言,本发明涉及帧内预测模式推导以用于帧内推导模式(derived-mode,DM)编解码的颜色图像或者颜色视频的色度分量,以提高编解码效率。
背景技术
高效视频编码(High Efficiency Video Coding,HEVC)标准,是在ITU-T视频编码专家组(Video Coding Experts Group,VCEG)标准组织与运动图像专家组(MovingPicture Experts Group,MPEG)标准组织的联合视频项目下发展的,特别是与视频编码联合小组(Joint Collaborative Team on Video Coding,JCT-VC)存在合作伙伴关系。在HEVC中,一个片段(slice)被分割成多个编码树单元(coding tree unit,CTU)。在主文档中,编码树单元的最小尺寸和最大尺寸由序列参数集(sequence parameter set,SPS)中的语法元素指定。所允许的编码树单元尺寸可以为8x8、16x16、32x32或者64x64。对于每个片段,根据光栅扫描连续处理这个片段内的编码树单元。
编码树单元被进一步分割成多个编码单元(coding unit,CU),以适应性各种本地特征。四叉树,表示为编码树,用于将编码树单元分割成多个编码单元。假设编码树单元尺寸为MxM,其中M为64、32或者16的值中的一个。编码树单元可以为单个编码单元(即没有分割),或者可以被分割成四个相同尺寸(即M/2xM/2)的更小的单元,其对应于编码树的节点。如果这些单元为编码树的叶节点,则这些单元变成编码单元。否则,四叉树分割流程可以被重复直到节点的尺寸达到序列参数集中所指定的最小允许编码单元尺寸。
此外,根据HEVC,每个编码单元可以被分割成一个或多个预测单元(predictionunit,PU)。结合(couple)编码单元,预测单元用作基础表示块以用于共享预测信息。在每个预测单元内部,相同的预测流程被使用,且基于预测单元,相关信息被发信到解码器。根据预测单元分割类型,编码单元可以被分割成1个、2个或者4个预测单元。HEVC定义了8种形状以用于将编码单元分割成预测单元,其包括2Nx2N分割类型、2NxN分割类型、Nx2N分割类型、NxN分割类型、2NxnU分割类型、2NxnD分割类型、nLx2N分割类型和nRx2N分割类型。不同于编码单元,预测单元可以仅被分割一次。2NxnU分割类型、2NxnD分割类型、nLx2N分割类型和nRx2N分割类型如第二行所示的分割对应于非对称分割,其中两个分割的部分具有不同尺寸。
HEVC编解码包括帧间预测和帧内预测。对于帧内预测,生成帧内预测包括三个部分:帧内光滑滤波、帧内预测和帧内梯度滤波。首先,在计算预测之前,光滑操作被应用到参考样本,作为预处理步骤。这个光滑操作对应于将具有滤波器权重[1,2,1]>>2与低通特性的FIR(Finite Impulse Response)滤波器应用到属于当前变换单元(transform unit,TU)的左行和上列的样本。每个变换单元的帧内预测与相邻变换单元的重构样本一起被产生。涉及帧内光滑的样本如图1所示,其中块100对应于当前块,线110对应于水平分界线,线120对应于垂直分界线。是否使用这个光滑操作由变换单元尺寸和帧内预测模式来确定。其次,用某个帧内预测模式,当前块的帧内预测自相邻参考样本推导出,并且帧内预测模式由编码器自DC模式、平面模式和33种方向模式中选择,并被发信在比特流中。再次,如果帧内预测模式为DC模式、水平模式或者垂直模式,则帧内梯度滤波器被进一步应用到位于当前变换单元的左分界线和上分界线处的样本。
在HEVC中的所有35种帧内预测模式中,三种模式被考虑成最大概率模式(mostprobable mode,MPM),以用于预测当前预测块内的帧内预测模式。例如,左预测块中和上预测块中使用的帧内预测模式可以作为最大概率模式集的候选。在两个相邻块中的帧内预测模式相同且均为方向的,或者两个相邻块中仅一个可用且以帧内预测编解码,且同时这个帧内预测模式为方向的情况下,紧邻着这个方向的两个相邻方向在最大概率模式中也被使用。DC模式和平面模式也被考虑在最大概率模式集中,以填充最大概率模式中可用点(available spot),特别是如果上相邻块或者顶端相邻块不可用或者不以帧内预测编解码,或者相邻块中的帧内预测模式不是方向的。如果用于当前预测块的帧内预测模式为最大概率模式集中的模式中的一个,则1个二进制代码(bin)或者2个二进制代码用于发信其为哪个模式。否则,其与最大概率模式集中的任何条目不相同,则其被编解码成非最大概率模式模式。总共存在32种这样非最大概率模式模式,并且(5码元)固定长度编解码方法被应用到发信这个模式。33个方向如图2所示。在图2中,总共存在33种方向模式,即H,H+1,…,H+8,H-1,…,H-7,V,V+1,…,V+8,V-1,…,V-8。这个系统可以被扩展成常规情况,其中水平模式和垂直模式被表示为H模式和V模式。对于其他方向模式,其可以被表示为H+k模式或者V+k模式,其中k=1,2等。例如,如图3所示,如果65种方向模式被使用,k可以从1到16、或从-1到-16变化。
在HEVC的一些最近发展中,如图3所示,额外的32种方向模式被使用在已有的33种方向模式之间。在这种情况中,存在总共65种模式,包括方向模式和一些非方向模式。
在HEVC中,一旦方向模式被确定,沿着预测方向,当前块中所有像素将使用相同的预测子值。如果预测子落入两个重构参考样本之间,则双线性滤波器将被使用以计算预测子作为两个相邻像素的加权平均。例如,根据P=[P1*a+P2*(32-a)]/32,预测子发信P可以被推导出,其中P1和P2为两个相邻重构样本,整数a为从预测子P到P2的距离,其范围为0与32之间且包括端点。
帧内梯度滤波器的概念将沿着帧内预测方向使用梯度信息来提高帧内预测质量。对于如图2所示的从垂直方向/水平方向(即v/h)到垂直+8方向/水平+8方向(即v+8/h+8)的帧内预测模式,左侧行相邻样本/上方列相邻样本可以沿着来自于上方列/左侧行的帧内预测方向而放置其相应的参考。用相邻样本计算的梯度可以用于改善帧内预测。用于垂直方向模式的示例如图4A所示,其中Pij表示位于i列和j行的预测子。AL表示位于当前块的左上角处的重构样本,而Li表示当前块的左侧列中的重构样本。新的预测子被计算成:
P′ij=Pij+α·(Li-AL), (1)
其中α为从0到1的小数,且根据j而选择,例如,对于j=0,α=1/2,对于j=1,α=1/4。P’ij被用作最终预测子。对于水平方向模式,最终预测子P’ij被计算成
P′ij=Pij+α·(Aj-AL), (2)
在上述等式中,Aj为上方列中的重构样本,其如图4A所示。对应方向模式v+1,…,v+8和方向模式h+1,…,h+8,Li或者Aj首先沿着帧内预测的方向获得其相应的参考样本RLi或者RAj。当RLi或者Raj不位于整数像素的位置处时,其由当前块的上方列或者左侧行中的整数像素的插值来产生。v+1方向模式,…,v+8方向模式的示例如图4B所示。最终预测子P’ij被计算成
P′ij=Pij+α·(Li-RLi). (3)
同理于垂直方向模式,α为从0到1的小数,且根据帧内预测的方向和j而选择。对于h+1,…,h+8方向模式,最终预测子P’ij被计算成
P′ij=Pij+α·(Aj-RAj), (4)
其中,α为从0到1的小数,且根据帧内预测的方向和i而选择。
帧内梯度滤波器可以被应用于HEVC中的所有方向模式,即v+1,…,v+8和h+1,…,h+8。但是,仅当帧内预测模式为DC、水平模式或者垂直模式时,帧内梯度滤波器被使用。如果帧内预测为DC模式,则位于第一列和第一行处的样本由帧内梯度滤波器滤波。如果帧内预测为水平模式,则位于第一列的样本由帧内梯度滤波器滤波。如果帧内预测为垂直模式,则位于第一行的样本由帧内梯度滤波器进一步滤波。
除了帧内梯度滤波,称为双向帧内预测的另一种方法在JCT-VC会议中也被提出以改善帧内预测的质量。对于对角帧内预测模式,即v+1,…,v+8和h+1,…,h+8,上方行的重构样本与来自于左侧行沿着方向的重构样本的加权和用作帧内预测子。例如,如图5所示,对于v+1,…,v+8方向模式,来自于上方列的相邻样本的Pij在左侧行沿着预测方向具有相应的参考样本Fij。如果Fij不位于整数像素位置处,则其可以通过插值左侧行中的整数像素而产生。然后,最终预测子被计算成Pij与Fij的加权和,如下:
P′ij=α·Pij+(1-α)·Fij (5)
其中,α为从0到1的小数,且根据帧内预测的方向和j而选择(对于v+1,…,v+8方向模式)或者根据帧内预测的方向和i而选择(对于h+1,…,h+8方向模式)。
在产生帧内预测子之后,预测误差由变换和量化来进一步处理,并由熵编解码来编码。对于熵编解码,首先,量化系数被分割成4x4个系数组。不同系数组的编解码顺序和一个系数组中系数的扫描顺序根据帧内预测模式和变换尺寸而选择。如果变换尺寸小于或者等于8x8,则基于帧内模式扫描将用于不同系数组的编解码顺序和一个系数组中的系数的扫描顺序。否则,对角扫描用于不同系数组的编解码顺序和一个系数组中的系数的扫描顺序。
同时,可能用几个预测子的加权和来产生用于帧内预测的最终预测发信(即多参数帧内预测或者称为MPI)。位置(i,j)的最终预测子PMPI[i,j]被定义成如下:
PMPI[i,j]=(αPHEVC[i,j]+βPMPI[i-1,j]+γPMPI[i,j-1]+δPMPI[i-1,j-1]+4)>>3,
其中如图6所示,块的外部PMPI[i,j]等于重构发信,如果i<0||j<0,则PMPI[i,j]=REC[i,j]。
图6示出了多参数帧内预测(multiple parameter Intra prediction,MPI)流程的示例,其中输入块由任意方向帧内(Arbitrary Directional Intra,ADI)610处理,其后为多参数帧内预测620。这个后处理的强度(即参数α+β+γ+δ=8)被控制在编码单元层,并用2个以上码元发信。
在ITU-T稿件C1046(A.Said,etc.,"Position dependent Intra predictioncombination,"ITU-T SG16 COM 16–C1046–E,Oct.2015)中,如图7所示,一种方法被提出以使用已滤波参考样本和未滤波参考样本的结合来形成最终预测子p[x,y],以用于未滤波情况(即710)和已滤波情况(即720)。
发信r和发信s用于表示具有已滤波参考和未滤波参考的序列。新的预测p[x,y]结合分界线元素r[]和分界线元素q[x,y]的加权值(即自已滤波样本s[]推导出的预测子),如下:
其中,为存储的预测参数,d=1用于块尺寸为16×16,d=2用于更大块,并且
为归一化因子。
在稿件JVET-C-0061(X.Xiu,etc.,“Decoder-side Intra mode derivation”,JVET-C0061,May,2016)中,公开了用于使用平面模式的帧内预测的插值。根据JVET-C-0061,使用相应的左侧参考样本和上方参考样本的线性平均,位于右下角当前预测块的样本被发信或者估计。因此,如图8所示,使用上方/右下样本组合和左侧/右下样本组合,最右侧行和下方列中的样本被双线性插值(即,示例810所示)。如图8所示,使用相似的双线性插值,预测块中剩余像素被预测(即示例820所示)。
四叉树加二叉树(Quadtree Plus Binary Tree,QTBT)结构
在稿件m37524/COM16–C966(J.An,et al.,“Block partitioning structure fornext generation video coding,”MPEG doc.m37524and ITU-T SG16Doc.COM16–C966,Oct.2015)中,公开了QTBT块分割结构。根据QTBT,编码树块(coding tree block,CTB)首先由四叉树结构分割。四叉树叶节点进一步由二叉树结构分割。二叉树叶节点,即编码块(coding block,CB),用于预测和变换,而无需进一步分割。对于P片段和B片段,一个编码树单元(coding tree unit,CTU)中的亮度编码树块和色度编码树块共享相同的QTBT结构。对于I片段,亮度编码树块由一QTBT结构分割成编码块,两个色度编码树块由另一QTBT结构分割成色度编码块。
编码树单元(或者用于I片段的编码树块),其为四叉树的根节点,首先由四叉树来分割,其中一个节点的四叉树分割可以被重复直到该节点达到最小允许四叉树叶节点尺寸(即MinQTSize)。如果四叉树叶节点尺寸不大于最大允许二叉树根节点尺寸(即MaxBTSize),则其可以进一步由二叉树来分割。一个节点的二叉树分割可以被重复直到这个节点达到最小允许二叉树叶节点尺寸(即MinBTSize)或者最大允许二叉树深度(即MaxBTDepth)。二叉树叶节点,即编码单元(或者用于I片段的编码块),将用于预测(即帧内图像预测或者帧间图像预测)和变换,而无需进一步分割。在二叉树分割中存在两个分割类型:对称水平分割和对称垂直分割。
图9的块分割910和相应的QTBT结构920示出了通过使用QTBT的块分割示例。实线表示四叉树分割,虚线表示二叉树分割。在二叉树的每个分割节点中,一个标志被发信以指示哪个分割类型(即水平的或者垂直的)被使用,其中0表示水平分割,1表示垂直分割。对于四叉树分割,无需表示分割类型,由于其总是将块水平并垂直地分割成4个相等尺寸的子块。
在上述中,联合视频探索队(joint video exploration team,JVET)为国际组织,其由ITU-T VCEG和ISO/IEC MPEG建立,以研究下一代视频编解码技术。称为联合探索模型(joint exploration model,JEM)的参考软件基于HEVC的参考软件(HEVC’s referencesoftware,HM)而建立。一些新视频编解码方法,包括QTBT和65种帧内预测方向,被包含在JEM软件中。
在QTBT结构中,对于I片段,当使用推导模式(自亮度而推导出的模式)而编解码色度编码单元,编码单元将使用左上色度像素来查找相应的亮度像素。因此,包含亮度像素的亮度块的帧内模式用作色度帧内模式。
图10示出了用于色度块的推导模式(derived mode,DM)的示例。在图10中,块1020为自色度编码树块1022分割的色度块。块1010为亮度编码树块1012内相应亮度块区域。黑像素1014表示相应亮度块区域的左上角像素。由于亮度分量和色度分量可以使用单独的块分割,可以不存在同位亮度块(例如,亮度编码块)以用于给定的色度块(例如色度编码块)。因此,色度编码单元的左上像素1024将用于基于相应的亮度编码单元的左上像素1014而查找相应的亮度编码单元区域。相应的亮度编码单元区域1010覆盖在亮度图像中与色度块1020同等的亮度像素区域。相应的亮度编码单元区域1010可以对应于一个或多个亮度编码单元或者部分亮度编码单元。与位于左上角位置处的最小编码单元(即最小编码单元1016)相关的亮度帧内模式用作色度帧内模式。在图10中,每个较小正方形对应一个最小编码单元,其是用于编码或者解码的基础单元。一个编码单元可以由1到M个最小编码单元形成,其中M=(最大编码单元宽度/最小编码单元宽度)×(最大编码单元高度/最小编码单元高度)。
根据传统的方法,当推导模式用于色度块时,由相应的亮度编码单元区域的左上最小编码单元使用的亮度帧内模式用作相关色度编码单元的帧内模式。但是,左上最小编码单元可以不是帧内模式编解码的,色度推导模式帧内预测不能被使用。因此,推导模式编解码的色度块可能不具有将使用的有效的亮度帧内模式。本发明的目标之一在于解决这个问题。
发明内容
本发明公开了视频编解码色度推导模式帧内预测的方法及装置。根据一个方法,如果推导模式帧内预测被选择用于当前色度块,则:通过定位对应于当前色度块的第二左上像素地址的相应亮度块区域的第一左上像素地址,确定相应亮度块区域,其中相应亮度块区域对应于当前色彩图像中与当前色度块相同的区域;从包括相应亮度块区域的一个或多个子块的子块集中确定一个或多个候选亮度编解码模式,其中如果子块集仅包括一个子块,则子块集排除位于相应亮度块区域的左上角处的角子块;基于包括一个或多个候选亮度编解码模式的信息,推导出当前色度帧内模式以用于当前色度块;以及使用推导出的当前色度帧内模式,将帧内预测编码或者解码应用到当前色度块。
当前色度块可以对应于一个色度编码单元,且相应亮度块区域对应于一个亮度编码单元。相应亮度块区域的每个子块可以对应于一个最小亮度编码单元。
确定一个或多个候选亮度编解码模式的步骤包括:逐个检测与子块集的n个子块相关的一个或多个亮度编解码模式,直到所检测的亮度编解码模式为帧内角度模式、DC模式或者平面模式,并使用所检测的亮度编解码模式作为当前色度帧内模式,其中n为正整数。可以根据所选择的顺序逐个检测子块集的n个子块。在一个实施例中,如果与子块集的n个子块相关的一个或多个亮度编解码模式中没有一个为帧内角度模式、DC模式或者平面模式,则确定一个或多个候选亮度编解码模式的步骤包括:选择默认帧内模式作为当前色度帧内模式。默认帧内模式被发信在序列参数集、图像参数集或者片段头中。默认帧内模式可以对应于平面模式、DC模式、垂直模式或者水平模式。默认帧内模式也可以自与当前色度块的一个或多个候选相邻色度块相关的一个或多个候选色度帧内模式而推导出。例如,当前色度块的候选相邻色度块包括位于当前色度块的左上、上方、右上、左侧或者左下处的多个相邻色度块。一个或多个候选色度帧内模式中使用最频繁的模式可以被选择作为当前色度帧内模式。在另一实施例中,如果与子块集的n个子块相关的一个或多个亮度编解码模式中没有一个为帧内角度模式、DC模式或者平面模式,则推导模式帧内预测被考虑成对当前色度帧内模式不可用。
在一个实施例中,子块集包括位于左上角、右上角、左下角和右下角处的四个角子块。在另一实施例中,子块集包括与相应亮度块区域的中间位置相邻的四个中间子块,并且四个中间子块包括左上中间子块(M1)、右上中间子块(M2)、左下中间子块(M3)和右下中间子块(M4)。在又一实施例中,子块集包括相应亮度块区域的四个角子块和四个中间子块。
附图说明
图1是根据HEVC的涉及应用到变换单元(transform unit,TU)的帧内光滑的样本。
图2是根据HEVC的用于帧内预测的33种方向,其中这些方向被设计为H,H+1,…,H+8,H-1,…,H-7,V,V+1,…,V+8,V-1,…,V-8。
图3是通过在已有33种方向模式之间添加32中方向模式的用于帧内预测的65种方向的示例。
图4A是用于帧内预测的垂直方向模式的示例。
图4B是根据HEVC的从(v+1)到(v+8)用于帧内预测的示例帧内梯度滤波器。
图5是根据HEVC的从(v+1)到(v+8)用于帧内预测的示例双向预测滤波器。
图6是多参数帧内预测流程的示例。
图7是用于未滤波情况和已滤波情况的4×4块中的帧内预测示例。
图8是最右侧行和下方列的双线性插值(左边)与剩余样本的双线性插值(右边)的示例。
图9是通过使用QTBT的块分割的示例,其中块分割如左边所示,相应的QTBT结构如右边所示。
图10是用于基于相应亮度块区域的左上角最小编码单元的帧内模式的色度块的推导模式的示例。
图11是位于相应亮度块区域的四个角处的四个亮度最小块(即TL,TR,BL和BR)的示例。
图12是相应亮度块区域中的四个中间亮度最小块(即M1,M2,M3和m4)。
图13是用于推导默认帧内模式的当前色度块的相邻块的示例。
图14是根据本发明实施例的用于四叉树加二叉树块分割的适应性运动向量分辨率(adaptive motion vector resolution,AMVR)的发信示例。
图15是根据本发明实施例的用于色度块的推导模式帧内预测的示例性编解码系统的流程图。
具体实施方式
以下描述是实现本发明的最佳实施方式。这一描述是为了说明本发明的一般原理,而不应被认为是限制性的。本发明的范围最好通过权利要求的范围来确定。
如上所述,在基于HEVC参考软件的称为JEM的参考软件中,通过复制相应亮度编码单元的帧内模式,色度编码单元可以使用推导模式(来自于相应亮度分量的推导模式)。然而,可能的是,相应亮度块为非帧内编解码的,例如IBC模式、调色板模式(palette mode)、帧间模式或者除了DC模式、平面模式或者角度模式之外的模式。因此,这将使得色度帧内模式未定义。因此,在本发明中公开了克服这个问题的各种方法。
用于相应非帧内模式亮度块的色度推导模式分配
在本发明中,当相应亮度块为非帧内编解码的时,色度推导模式被指定。非帧内模式指的是除了角度模式、DC模式或者平面模式之外的任何模式。因此,本发明能处理一种情况,其为色度平面和亮度平面被单独编解码且具有不同块分割结构,并且相应亮度块可以为非帧内编解码的,例如IBC模式、调色板模式、PCM模式、帧间模式等。
根据本方法,用于色度块的相应亮度块区域将先基于左上色度像素地址而识别。“相应亮度块区域”的意义已在本发明的背景技术部分中描述。这个亮度块地址将被处理为亮度块的起始。当视频颜色格式为420时,这个亮度块的宽度为2×width_chroma,这个亮度编码单元的高度为2×height_chroma,其中width_chroma为当前色度的宽度,height_chroma为当前色度的高度。换言之,当视频颜色格式为420时,相应亮度块区域是色度块的两倍宽和两倍高。当视频颜色格式为422时,这个亮度块的宽度为2×width_chroma,这个亮度块的高度等于height_chroma。换言之,当视频颜色格式为422时,相应亮度块区域是色度块的两倍宽,且与色度块相同高度。当视频颜色格式为444时,这个亮度块的宽度等于width_chroma,这个亮度块的高度等于height_chroma。换言之,当视频颜色格式为444时,相应亮度块区域具有与色度块相同的宽度和高度。
对于每个相应亮度块区域(例如亮度编码单元/预测单元/变换单元),存在四个角亮度最小块,包括左上最小亮度块(即TL)、右上最小亮度块(即TR)、左下最小亮度块(即BL)和右下最小亮度块(即BR)。在本发明中,最小块也称为子块。图11示出了位于四个角处的四个亮度最小块的示例,其中块1110对应于亮度编码树块、块1120对应于亮度编码单元区域、亮度预测单元区域或者亮度变换单元区域。
如图12所示,存在由M1,M2,M3和M4表示的四个中间最小块(即子块)。左上中间最小块被设计为M1,右上最小块被设计为M2,左下最小块被设计为M3,右下最小块被设计为M4。每列存在N个最小块,每行存在K个最小块,以用于相应亮度块,其中根据如下确定N和K:
N=块宽度/最小块宽度,以及
K=块高度/最小块高度。
M1为最小块,其自编码块上分界线具有(N/2-1)个最小块的距离,且自编码块左分界线具有(M/2–1)个最小块的距离。
M2为最小块,其自编码块上分界线具有N/2个最小块的距离,且自编码块左分界线具有(M/2–1)个最小块的距离。
M3为最小块,其自编码块上分界线具有(N/2-1)个最小块的距离,且自编码块左分界线具有M/2个最小块的距离。
M4为最小块,其自编码块上分界线具有N/2个最小块的距离,且自编码块左分界线具有M/2个最小块的距离。
在一个方法中,编码器和解码器将检测8个位置(即TL,TR,BL,BR,M1,M2,M3,M4)中的n个位置,其中n可以为1,2,3,4,5,6,7,8。在n被确定之后,编码器和解码器可以从这8个位置中选择任何n个位置。例如,如果n为4,则编码器、解码器可以选择对应于TL,TR,BL和BR的四个位置。可选地,编码器和解码器可以选择对应于M1,M2,M3和M4的四个位置。编码器和解码器可以逐个检测这n个位置,直到其中一个为帧内角度模式、DC模式或者平面模式编解码的。如果这些模式中没有一个是角度模式、DC模式或者平面模式,则根据本发明,默认帧内模式被填充以用于这个色度块。如本发明的后续部分中所描述,默认帧内模式可以被指定。选择这n个模式的顺序可以有很多变形。
在另一实施例中,当色度帧内模式为推导模式时,编码器和解码器将逐个检测TL位置、TR位置、BL位置、BR位置、M1位置、M2位置、M3位置、M4位置,直到其中一个为帧内角度模式、DC模式或者平面模式编解码的。相应亮度块的帧内模式将用于色度块。如果其中没有为帧内角度模式、DC模式或者平面模式编解码的,则默认帧内模式将用于色度块。默认帧内模式将在本发明的后续部分中进行描述。注意的是,这些块的检测顺序可以有很多种变形。例如,编码器和解码器可以依次检测TL位置、M1位置、M2位置、M3位置、M4位置、TR位置、BL位置和BR位置。又例如,编码器和解码器可以依次检测M4位置、TL位置、TR位置、BL位置、BR位置、M3位置、M2位置和M1位置。
在又一实施例中,当色度帧内模式为推导模式时,编码器和解码器将逐个检测TL位置、M2位置、M3位置、M4位置,直到其中一个为帧内角度模式、DC模式或者平面模式编解码的。相应亮度块的帧内模式将用于色度块。如果其中没有为帧内角度模式、DC模式或者平面模式编解码的,则默认帧内模式将用于色度块。默认帧内模式将在本发明的后续部分中进行描述。注意的是,这些块的检测顺序可以有很多种变形。例如,编码器和解码器可以依次检测TL位置、M4位置、M2位置、M3位置。又例如,编码器和解码器可以依次检测M4位置、TL位置、M3位置、M2位置。
在又一实施例中,当色度帧内模式为推导模式时,编码器和解码器将逐个检测TL位置、TR位置、BR位置和M4位置,直到其中一个为帧内角度模式、DC模式或者平面模式编解码的。相应块的帧内模式将用于色度块。如果没有为帧内角度模式、DC模式或者平面模式编解码的,则默认帧内模式将用于色度块。默认帧内模式将在本发明的后续部分中进行描述。注意的是,这些块的检测顺序可以有很多种变形。
在又一方法中,当色度帧内模式为推导模式时,编码器和解码器将检测8个位置(即TL,TR,BL,BR,M1,M2,M3,M4)中的n个位置,其中n可以为1,2,3,4,5,6,7或者8。在n被确定之后,编码器和解码器可以从这8个位置中选择任何n个位置。例如,如果n为4,则编码器、解码器可以选择对应于TL,TR,BL和BR的四个位置。可选地,编码器和解码器可以选择对应于M1,M2,M3和M4的四个位置。编码器和解码器可以逐个检测所有这n个位置。编码器和解码器可以选择使用最频繁的亮度帧内模式以用于推导模式编解码的色度块。当这些位置中没有一个为帧内角度模式、DC模式或者平面模式编解码的时,默认帧内模式被填充以用于这个色度块。默认帧内模式将在本发明的后续部分中进行描述。这n个模式的顺序可以具有很多变形。
在又一方法中,当色度帧内模式为推导模式时,编码器和解码器将检测8个位置(即TL,TR,BL,BR,M1,M2,M3,M4)中的n个位置,其中n可以为1,2,3,4,5,6,7或者8。在n被确定之后,编码器和解码器可以从这8个位置中选择任何n个位置。例如,如果n为4,则编码器、解码器可以选择对应于TL,TR,BL和BR的四个位置。可选地,编码器和解码器可以选择对应于M1,M2,M3和M4的四个位置。编码器和解码器可以逐个检测这n个位置,直到其中一个为帧内角度模式、DC模式或者平面模式编解码的。如果这些位置中没有一个为帧内角度模式、DC模式或者平面模式编解码的,则推导模式被处理为对当前色度块不可用。色度帧内模式列表可以被缩短1,并且相应的码字将被改变。这n个模式的顺序可以具有很多变形。
在又一方法中,当色度帧内模式为推导模式时,编码器和解码器将检测8个位置(即TL,TR,BL,BR,M1,M2,M3,M4)中的n个位置,其中n可以为1,2,3,4,5,6,7或者8。在n被确定之后,编码器和解码器可以从这8个位置中选择任何n个位置。例如,当n为4时,则编码器、解码器可以选择对应于TL,TR,BL和BR的四个位置。可选地,编码器和解码器可以选择对应于M1,M2,M3和M4的四个位置。编码器和解码器可以逐个检测这n个位置。编码器和解码器可以选择作为亮度帧内模式使用最频繁的帧内角度模式、DC模式或者平面模式以用于推导模式编解码的色度块。如果这些位置中没有一个为帧内角度模式、DC模式或者平面模式编解码的,则推导模式被处理为对当前色度块不可用。色度帧内模式列表可以被缩短1,并且相应的码字将被改变。这n个模式的顺序可以具有很多变形。
填充用于色度帧内推导模式的默认模式
在一个方法中,默认模式可以为预定义的帧内模式。这个帧内模式可以是硬件编解码以用于编码器和解码器。这个帧内模式也可以被发信在序列参数集或者图像参数集(Picture Parameter Set,PPS)或者片段头中。
例如,默认模式可以是平面模式、DC模式、垂直模式或者水平模式。
在另一方法中,默认模式可以被推导出以用于来自于其相邻块的每个色度块。色度块可以检测位于当前块的左上(即AL)、上方(即A)、右上(即AR)、左侧(即L)或者左下(即BL)的相邻块的帧内模式,并查找使用最频繁的相邻块的帧内模式作为用于当前块的帧内模式。如图13所示,是当前块的相邻块的示例。
在第三方法中,来自于相邻块的第一可用帧内角度模式、DC模式或者平面模式用作用于当前块的帧内模式。候选相邻块的顺序可以不同;下面列出了一些示例:
1.L,A,AR,BL,AL;
2.L,A,AL,AR,BL;以及
3.AL,L,A,AR,BL。
在上述所有中,L和A的顺序可以被互换,或者AR和BL的顺序可以被互换。在另一示例中,帧间模式运动向量预测子候选清单(空间候选)中的相邻位置的相同顺序可以被使用。在又一示例中,帧内模式合并候选列表(空间候选)中相邻位置的相同顺序可以被使用。
适应性运动向量分辨率
在第52届VCEG会议中,VCEG-AZ07(Chen,et al.,“Further improvements toHMKTA-1.0”,ITU-T VCEG,document:VCEG-AZ07,19–26June 2015,Warsaw,Poland)中公开了适应性运动向量分辨率。根据适应性运动向量分辨率,预测单元的当前运动向量与预测运动向量之间的运动向量差分(Motion Vector Difference,MVD)可以用四分之一像素分辨率或者整数像素分辨率来编解码。运动向量差分分辨率被控制在编码单元层,且整数运动向量差分分辨率标志被有条件地发信以用于每个编码单元,其具有至少一个非零运动向量差分分量。
当整数运动向量差分分辨率标志为假(即表示整数分辨率不被使用)或者不被编解码以用于编码单元时,默认四分之一像素运动向量(Motion Vector,MV)被使用以用于属于这个编码单元的所有预测单元。否则(即整数运动向量分辨率为真以用于编码单元),用高级运动向量预测(advanced motion vector prediction,AMVP)模式编解码且属于这个编码单元的所有预测单元使用整数运动向量分辨率,而用合并模式编解码的预测单元仍然使用四分之一像素运动向量分辨率。当预测单元使用整数运动向量分辨率时,通过将四分之一像素运动向量四舍五入到整数像素运动向量,高级运动向量预测候选清单用整数运动向量来填充。
在JEM3.0中,QTBT结构被使能,使得编码单元等于预测单元和变换单元(即编码单元=预测单元=变换单元)。同时,适应性运动向量分辨率被使能以用于每个编码单元。在这种情况中,一些子块可以共享相同的运动向量分辨率。但是,这些块具有其各自的标志,以发信适应性运动向量分辨率。这可能引起额外的发信开销。下面公开了各种方法以降低所需要的发信。
方法1:修改用于QTBT结构中的二叉树的适应性运动向量分辨率的发信
为了降低发信开销,本发明提出,当使用二进制分割时,在某个二叉树深度(Binary Tree depth,BT depth)(例如AMVR_signal_BT_flag)处发信AMVR_signal_BT_flag。二进制分割的子块共享来自于母二进制分割的相同的适应性运动向量分辨率标志。换句话说,深度大于MIN_BT_DEPTH_SIGNAL_AMVR的二进制块在MIN_BT_DEPTH_SIGNAL_AMVR处共享适应性运动向量分辨率标志。深度小于MIN_BT_DEPTH_SIGNAL_AMVR的二进制块发信其自身的适应性运动向量分辨率标志。当位于MIN_BT_DEPTH_SIGNAL_AMVR处的适应性运动向量分辨率标志为0时,所有子块使用整数运动向量分辨率。当位于MIN_BT_DEPTH_SIGNAL_AMVR处的适应性运动向量分辨率标志为1时,所有子块使用四分之一像素运动向量分辨率。如表1所示,是这个AMVR_signal_BT_flag的二进制表的示例。
表1
AMVR_signal_BT_flag 注释
0 所有子树使用整数运动向量分辨率
1 所有子树使用四分之一像素运动向量分辨率
注意的是,上述表中的码字可以被互换。为了编解码AMVR_signal_BT_flag,N个上下文可以被使用,其中N可以为1,2,3,…,MAX_INT。
MIN_BT_DEPTH_SIGNAL_AMVR小于或等于MaxBTSize。其可以为0,1,2,3,…,MaxBTSize。MIN_BT_DEPTH_SIGNAL_AMVR可以被定义在编码器和解码器宏中,或者被发信在序列参数集、图像参数集或者片段头中。
在一个示例中,MIN_BT_DEPTH_SIGNAL_AMVR对应于为0的二叉树深度,其意味着四叉树(quadtree)的叶和子块均是二进制分割。
在另一示例中,MIN_BT_DEPTH_SIGNAL_AMVR对应于为1的二叉树深度,其意味着二进制分割的第一层。因此,当当前块为四叉树分割的时,这个标志将总是被发信。其如图14所示,其中当二叉树深度小于1时适应性运动向量分辨率标志被发信。
在图14中,虚线块1410是二叉树深度等于1的二叉树,使得适应性运动向量分辨率标志将被发信以用于这层。当二叉树深度小于1时,运动向量分辨率由位于为1的二叉树深度处的适应性运动向量分辨率标志来表示。换言之,适应性运动向量分辨率标志仅被发信以用于没有分割的编码单元。
在另一实施例中,当其为二进制分割的时,在某个二叉树深度(例如MIN_BT_DEPTH_SIGNAL_AMVR)处,AMVR_signal_BT_flag被发信。当位于MIN_BT_DEPTH_SIGNAL_AMVR处的适应性运动向量分辨率标志为0时,所有子块使用整数运动向量分辨率。当位于MIN_BT_DEPTH_SIGNAL_AMVR处的适应性运动向量分辨率标志为1时,所有子块使用四分之一像素运动向量分辨率。当位于MIN_BT_DEPTH_SIGNAL_AMVR处的适应性运动向量分辨率标志为2时,所有子块将发信其自身的适应性运动向量分辨率标志。AMVR_signal_BT_flag可以使用固定长度二进制化、变长度二进制化、k阶指数哥伦布(Exp-Golomb-k)二进制化或者截断二进制化。表2显示了Exp-Golomb-k码字的示例,其中k等于0。
表2
注意的是,码字分配可以被改变。为了编解码AMVR_signal_BT_flag,N个上下文可以被使用,其中N可以为1,2,3,…,MAX_INT。
例如,MIN_BT_DEPTH_SIGNAL_AMVR可以小于或等于MaxBTSize。其可以为0,1,2,3,…,MaxBTSize。MIN_BT_DEPTH_SIGNAL_AMVR可以被定义在编码器和解码器宏中,或者被发信在序列参数集、图像参数集或者片段头中。
在一个示例中,MIN_BT_DEPTH_SIGNAL_AMVR对应于为0的二叉树深度,其意味着四叉树的叶节点和子块均是二进制分割的。
在另一示例中,MIN_BT_DEPTH_SIGNAL_AMVR对应于为1的二叉树深度,其意味着二进制分割的第一层。因此,当当前块为四叉树分割的时,这个标志将总是被发信。
在另一实施例中,当其为二进制分割的时,在某个二叉树深度(例如MIN_BT_DEPTH_SIGNAL_AMVR)处,AMVR_signal_BT_flag被发信。当位于MIN_BT_DEPTH_SIGNAL_AMVR处的适应性运动向量分辨率标志为0时,所有子块发信其自身的适应性运动向量分辨率标志。当位于MIN_BT_DEPTH_SIGNAL_AMVR处的适应性运动向量分辨率标志为1时,所有子块使用四分之一像素运动向量分辨率。如表3所示,是这个AMVR_signal_BT_flag的二进制表的示例。
表3
AMVR_signal_BT_flag 注释
0 所示子树使用其自身的适应性运动向量分辨率标志
1 所示子树使用四分之一像素运动向量分辨率
注意的是,码字可以被互换。为了编解码AMVR_signal_BT_flag,N个上下文可以被使用,其中N可以为1,2,3,…,MAX_INT。
MIN_BT_DEPTH_SIGNAL_AMVR可以小于或等于MaxBTSize。其可以为0,1,2,3,…,MaxBTSize。MIN_BT_DEPTH_SIGNAL_AMVR可以被定义在编码器和解码器的宏中,或者被发信在序列参数集、图像参数集或者片段头中。
在一个示例中,MIN_BT_DEPTH_SIGNAL_AMVR对应于为0的二叉树深度,其意味着四叉树的叶节点,并且子块均是二进制分割的。
在另一示例中,MIN_BT_DEPTH_SIGNAL_AMVR对应于为1的二叉树深度,其意味着二进制分割的第一层。因此,当当前块为四叉树分割的时,这个标志将总是被发信。
在另一实施例中,当其为二进制分割的时,在某个二叉树深度(例如MIN_BT_DEPTH_SIGNAL_AMVR)处,AMVR_signal_BT_flag被发信。当位于MIN_BT_DEPTH_SIGNAL_AMVR处的适应性运动向量分辨率标志为0时,所有子块发信其自身的适应性运动向量分辨率标志。当位于MIN_BT_DEPTH_SIGNAL_AMVR处的适应性运动向量分辨率标志为1时,所有子块使用整数像素运动向量分辨率。如表4所示,是这个AMVR_signal_BT_flag的二进制表的示例。
表4
注意的是,码字可以被互换。为了编解码AMVR_signal_BT_flag,N个上下文可以被使用,其中N可以为1,2,3,…,MAX_INT。
MIN_BT_DEPTH_SIGNAL_AMVR可以小于或等于MaxBTSize。其可以为0,1,2,3,…,MaxBTSize。MIN_BT_DEPTH_SIGNAL_AMVR可以被定义在编码器和解码器的宏中,或者被发信在序列参数集、图像参数集或者片段头中。
在一个示例中,MIN_BT_DEPTH_SIGNAL_AMVR对应于为0的二叉树深度,其意味着四叉树的叶节点和子块均是二进制分割的。
在另一示例中,MIN_BT_DEPTH_SIGNAL_AMVR对应于为1的二叉树深度,其意味着二进制分割的第一层。因此,当当前块为四叉树分割的时,这个标志将总是被发信。
方法2:修改用于QTBT结构中的四叉树的适应性运动向量分辨率的发信
在所提出的方法中,当其为二进制分割的时,在某个四叉树深度(例如MIN_QT_DEPTH_SIGNAL_AMVR)处,AMVR_signal_QT_flag被发信。当位于MIN_QT_DEPTH_SIGNAL_AMVR处的AMVR_signal_QT_flag为0时,所有子块使用整数运动向量分辨率。当位于MIN_QT_DEPTH_SIGNAL_AMVR处的AMVR_signal_QT_flag为1时,所有子块使用四分之一像素运动向量分辨率。当位于MIN_QT_DEPTH_SIGNAL_AMVR处的AMVR_signal_QT_flag为2时,所有子块将发信其自身的适应性运动向量分辨率标志。表5显示了Exp-Golomb-k的示例,其中k等于0。
表5
注意的是,码字分配可以被改变。为了编解码AMVR_signal_QT_flag,N个上下文可以被使用,其中N可以为1,2,3,…,MAX_INT。
MIN_QT_DEPTH_SIGNAL_AMVR小于或等于MaxQTSize。其可以为0,1,2,3,…,MaxQTSize。MIN_QT_DEPTH_SIGNAL_AMVR可以被定义在编码器和解码器的宏中,或者被发信在序列参数集、图像参数集或者片段头中。
在另一实施例中,当其为二进制分割的时,在某个四叉树深度(例如MIN_QT_DEPTH_SIGNAL_AMVR)处,AMVR_signal_QT_flag被发信。当位于MIN_QT_DEPTH_SIGNAL_AMVR处的AMVR_signal_QT_flag为0时,所有子块使用整数运动向量分辨率。当位于MIN_QT_DEPTH_SIGNAL_AMVR处的AMVR_signal_QT_flag为1时,所有子块使用四分之一像素运动向量分辨率。表6示出了显示了Exp-Golomb-k的示例,其中k等于0。
表6
注意的是,码字可以被互换。为了编解码AMVR_signal_QT_flag,N个上下文可以被使用,其中N可以为1,2,3,…,MAX_INT。
MIN_QT_DEPTH_SIGNAL_AMVR小于或等于MaxQTSize。其可以为0,1,2,3,…,MaxQTSize。MIN_QT_DEPTH_SIGNAL_AMVR可以被定义在编码器和解码器的宏中,或者被发信在序列参数集、图像参数集或者片段头中。
在另一实施例中,当其为二进制分割的时,在某个四叉树深度(例如MIN_QT_DEPTH_SIGNAL_AMVR)处,AMVR_signal_QT_flag被发信。当位于MIN_QT_DEPTH_SIGNAL_AMVR处的AMVR_signal_QT_flag为0时,所有子块发信其自身的适应性运动向量分辨率标志。当位于MIN_QT_DEPTH_SIGNAL_AMVR处的AMVR_signal_QT_flag为1时,所有子块使用四分之一像素运动向量分辨率。表7示出了显示了Exp-Golomb-k的示例,其中k等于0。
表7
注意的是,码字可以被互换。为了编解码AMVR_signal_QT_flag,N个上下文可以被使用,其中N可以为1,2,3,…,MAX_INT。
MIN_QT_DEPTH_SIGNAL_AMVR小于或等于MaxQTSize。其可以为0,1,2,3,…,MaxQTSize。MIN_QT_DEPTH_SIGNAL_AMVR可以被定义在编码器和解码器的宏中,或者被发信在序列参数集、图像参数集或者片段头中。
在另一实施例中,当其为二进制分割的时,在某个四叉树深度(例如MIN_QT_DEPTH_SIGNAL_AMVR)处,AMVR_signal_QT_flag被发信。当位于MIN_QT_DEPTH_SIGNAL_AMVR处的AMVR_signal_QT_flag为0时,所有子块使用整数像素运动向量分辨率。当位于MIN_QT_DEPTH_SIGNAL_AMVR处的AMVR_signal_QT_flag为1时,所有子块发信其自身的适应性运动向量分辨率标志。表8示出了显示了Exp-Golomb-k的示例,其中k等于0。
表8
注意的是,码字可以被互换。为了编解码AMVR_signal_QT_flag,N个上下文可以被使用,其中N可以为1,2,3,…,MAX_INT。
MIN_QT_DEPTH_SIGNAL_AMVR可以小于或等于MaxQTSize。其可以为0,1,2,3,…,MaxQTSize。MIN_QT_DEPTH_SIGNAL_AMVR可以被定义在编码器和解码器的宏中,或者被发信在序列参数集、图像参数集或者片段头中。
上述公开的本发明可以以各种形式合并到各种视频编码或者解码系统中。例如,本发明可以使用基于硬件的方法来实现,例如专用集成电路(integrated circuit,IC)、现场可程序设计逻辑数组(field programmable logic array,FPGA)、数据信号处理器(digital signal processor,DSP)、中央处理单元(central processing unit,CPU)等。本发明也可以使用计算机、掌上设备或者例如智能手机的移动设备上可执行的软件代码或者韧体代码来实现。此外,软件代码或者韧体代码可以在混合型平台上可执行,例如具有专用处理器的CPU(例如视频编解码引擎或者公共处理器)。
图15示出了根据本发明实施例的用于色度块的推导模式帧内预测的示例性编解码系统的流程图。根据本方法,在步骤1510中,接收与当前色彩图像中的当前色度块相关的输入数据。在步骤1520中,检测推导模式帧内预测是否被选择以用于当前色度块。如果结果为“是”(即当前色度块为推导模式编解码的块),则执行步骤1530到步骤1560。否则(即“否”路径),跳过步骤1530到步骤1560。在步骤1530中,通过定位对应于当前色度块的第二左上像素地址的相应亮度块区域的第一左上像素地址,确定相应亮度块区域,其中相应亮度块区域对应于当前色彩图像中与当前色度块相同的区域。在步骤1540中,从包括相应亮度块区域的一个或多个子块的子块集中确定一个或多个候选亮度编解码模式,其中如果子块集仅包括一个子块,则子块集排除位于相应亮度块区域的左上角处的角子块。在步骤1550中,基于包括一个或多个候选亮度编解码模式的信息,推导出当前色度帧内模式以用于当前色度块。在步骤1560中,使用推导出的当前色度帧内模式,将帧内预测编码或者解码应用到当前色度块。
本发明所示的流程图用于示出根据本发明的视频编解码的示例。在不脱离本发明的精神的情况下,本领域技术人员可以修改每个步骤、重组这些步骤、将一个步骤进行分离或者组合这些步骤而实施本发明。在本发明中,已经使用特定语法和语义来示出不同示例,以实施本发明的实施例。在不脱离本发明的精神的情况下,通过用等价的语法和语义来替换该语法和语义,本领域技术人员可以实施本发明。
上述说明被呈现,使得本领域的技术人员能够在特定应用程序的内容及其需求中实施本发明。对技术人员来说,所描述的实施例的各种变形将是显而易见的,并且本文定义的一般原则可以应用于其他实施例中。因此,本发明不限于所示和描述的特定实施例,而是将被赋予与本文所公开的原理和新颖特征相一致的最大范围。在上述详细说明中,说明了各种具体细节,以便透彻理解本发明。不仅如此,将被本领域的技术人员能理解的是,本发明能够被实践。
本发明以不脱离其精神或本质特征的其他具体形式来实施。所描述的例子在所有方面仅是说明性的,而非限制性的。因此,本发明的范围由权利要求的范围来表示,而不是前述的描述来表示。权利要求的含义以及相同范围内的所有变化都应纳入其范围内。

Claims (22)

1.一种视频编解码方法,其特征在于,分别由视频编码系统和视频解码系统使用,该方法包括:
接收与当前色彩图像中的当前色度块相关的输入数据;
如果推导模式帧内预测被选择用于该当前色度块,则:
通过定位对应于该当前色度块的第二左上像素地址的相应亮度块区域的第一左上像素地址,确定相应亮度块区域,其中该相应亮度块区域对应于该当前色彩图像中与该当前色度块相同的区域;
从包括该相应亮度块区域的一个或多个子块的子块集中确定一个或多个候选亮度编解码模式,其中如果该子块集仅包括一个子块,则该子块集排除位于该相应亮度块区域的左上角处的角子块;
基于包括该一个或多个候选亮度编解码模式的信息,推导出当前色度帧内模式以用于该当前色度块;以及
使用推导出的该当前色度帧内模式,将帧内预测编码或者解码应用到该当前色度块。
2.如权利要求1所述的视频编解码方法,其特征在于,
该当前色度块对应于一个色度编码单元,且该相应亮度块区域对应于一个亮度编码单元。
3.如权利要求1所述的视频编解码方法,其特征在于,
该相应亮度块区域的每个子块对应于一个最小亮度编码单元。
4.如权利要求1所述的视频编解码方法,其特征在于,
确定该一个或多个候选亮度编解码模式,包括:
逐个检测与该子块集的n个子块相关的一个或多个亮度编解码模式,直到所检测的亮度编解码模式为帧内角度模式、DC模式或者平面模式;以及
使用所检测的该亮度编解码模式作为该当前色度帧内模式;
其中n为正整数。
5.如权利要求4所述的视频编解码方法,其特征在于,
如果与该子块集的该n个子块相关的该一个或多个亮度编解码模式中没有一个为该帧内角度模式、DC模式或者平面模式,则确定该一个或多个候选亮度编解码模式,包括:
选择默认帧内模式作为该当前色度帧内模式。
6.如权利要求4所述的视频编解码方法,其特征在于,根据所选择的顺序逐个检测该子块集的该n个子块。
7.如权利要求6所述的视频编解码方法,其特征在于,
该默认帧内模式被发信在序列参数集、图像参数集或者片段头中。
8.如权利要求6所述的视频编解码方法,其特征在于,
该默认帧内模式对应于平面模式、DC模式、垂直模式或者水平模式。
9.如权利要求6所述的视频编解码方法,其特征在于,
该默认帧内模式自与该当前色度块的一个或多个候选相邻色度块相关的一个或多个候选色度帧内模式而推导出。
10.如权利要求9所述的视频编解码方法,其特征在于,
该当前色度块的该一个或多个候选相邻色度块包括位于该当前色度块的左上、上方、右上、左侧或者左下处的多个相邻色度块。
11.如权利要求10所述的视频编解码方法,其特征在于,
该一个或多个候选色度帧内模式中使用最频繁的模式被选择作为该当前色度帧内模式。
12.如权利要求4所述的视频编解码方法,其特征在于,
如果与该子块集的该n个子块相关的该一个或多个亮度编解码模式中没有一个为该帧内角度模式、DC模式或者平面模式,则该推导模式帧内预测被认为对该当前色度帧内模式不可用。
13.如权利要求1所述的视频编解码方法,其特征在于,
该子块集包括位于左上角、右上角、左下角和右下角处的四个角子块。
14.如权利要求13所述的视频编解码方法,其特征在于,
确定该一个或多个候选亮度编解码模式,包括:
逐个检测与该子块集的该n个子块相关的该一个或多个亮度编解码模式,直到所检测的亮度编解码模式为帧内角度模式、DC模式或者平面模式;以及
使用所检测的该亮度编解码模式作为该当前色度帧内模式;
其中n为1、2、3或者4。
15.如权利要求14所述的视频编解码方法,其特征在于,
如果与该子块集的该n个子块相关的该一个或多个亮度编解码模式中没有一个为该帧内角度模式、DC模式或者平面模式,则确定该一个或多个候选亮度编解码模式,包括:
选择默认帧内模式作为该当前色度帧内模式。
16.如权利要求1所述的视频编解码方法,其特征在于,
该子块集包括该相应亮度块区域的四个角子块和四个中间子块;
该四个角子块位于该相应亮度块区域的左上角、右上角、左下角和右下角处;
该四个中间子块与该相应亮度块区域的中间位置相邻,且该四个中间子块包括左上中间子块(M1)、右上中间子块(M2)、左下中间子块(M3)和右下中间子块(M4)。
17.如权利要求16所述的视频编解码方法,其特征在于,
确定该一个或多个候选亮度编解码模式,包括:
逐个检测与该子块集的该n个子块相关的该一个或多个亮度编解码模式,直到所检测的亮度编解码模式为帧内角度模式、DC模式或者平面模式;以及
使用所检测的该亮度编解码模式作为该当前色度帧内模式;
其中n为1到8的整数。
18.如权利要求17所述的视频编解码方法,其特征在于,
如果与该子块集的该n个子块相关的该一个或多个亮度编解码模式中没有一个为该帧内角度模式、DC模式或者平面模式,则确定该一个或多个候选亮度编解码模式,包括:
选择默认帧内模式作为该当前色度帧内模式。
19.如权利要求1所述的视频编解码方法,其特征在于,
该子块集包括与该相应亮度块区域的中间位置相邻的四个中间子块,并且该四个中间子块包括左上中间子块(M1)、右上中间子块(M2)、左下中间子块(M3)和右下中间子块(M4)。
20.如权利要求19所述的视频编解码方法,其特征在于,
确定该一个或多个候选亮度编解码模式,包括:
逐个检测与该子块集的该n个子块相关的该一个或多个亮度编解码模式,直到所检测的亮度编解码模式为帧内角度模式、DC模式或者平面模式;以及
使用所检测的该亮度编解码模式作为该当前色度帧内模式;
其中n等于1、2、3或者4。
21.如权利要求20所述的视频编解码方法,其特征在于,
如果与该子块集的该n个子块相关的该一个或多个亮度编解码模式中没有一个为该帧内角度模式、DC模式或者平面模式,则确定该一个或多个候选亮度编解码模式,包括:
选择默认帧内模式作为该当前色度帧内模式。
22.一种视频编解码装置,其特征在于,分别由视频编码系统和视频解码系统使用,该装置包括一个或多个电子电路或一个或多个处理器,被配置为:
接收与当前色彩图像中的当前色度块相关的输入数据;
如果推导模式帧内预测被选择用于该当前色度块,则:
通过定位对应于该当前色度块的第二左上像素地址的相应亮度块区域的第一左上像素地址,确定相应亮度块区域,其中该相应亮度块区域对应于该当前色彩图像中与该当前色度块相同的区域;
从该对应的亮度块区域的至少两个子块确定多个候选亮度编码模式;
基于包括多个候选亮度编解码模式的信息,推导出当前色度帧内模式以用于该当前色度块;以及
使用推导出的该当前色度帧内模式,将帧内预测编码或者解码应用到该当前色度块。
CN201780059798.9A 2016-10-04 2017-09-28 图像和视频编解码中用于帧内色度编解码的方法及装置 Active CN109792516B (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201662403735P 2016-10-04 2016-10-04
US62/403,735 2016-10-04
US201662420659P 2016-11-11 2016-11-11
US62/420,659 2016-11-11
PCT/CN2017/103851 WO2018064948A1 (en) 2016-10-04 2017-09-28 Method and apparatus for intra chroma coding in image and video coding

Publications (2)

Publication Number Publication Date
CN109792516A true CN109792516A (zh) 2019-05-21
CN109792516B CN109792516B (zh) 2021-05-25

Family

ID=61830792

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201780059798.9A Active CN109792516B (zh) 2016-10-04 2017-09-28 图像和视频编解码中用于帧内色度编解码的方法及装置

Country Status (5)

Country Link
US (1) US20200045322A1 (zh)
EP (2) EP4075798A1 (zh)
CN (1) CN109792516B (zh)
TW (1) TWI650003B (zh)
WO (1) WO2018064948A1 (zh)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020244579A1 (zh) * 2019-06-05 2020-12-10 华为技术有限公司 Mpm列表构建方法、色度块的帧内预测模式获取方法及装置
CN112135128A (zh) * 2019-06-24 2020-12-25 华为技术有限公司 图像预测方法、编码树节点划分方法及其装置
CN113557724A (zh) * 2019-06-07 2021-10-26 腾讯美国有限责任公司 视频编解码的方法和装置
CN113748679A (zh) * 2019-04-19 2021-12-03 高通股份有限公司 用于视频编解码的帧内块复制合并数据语法
CN114072849A (zh) * 2019-06-28 2022-02-18 字节跳动有限公司 屏幕内容编解码中的色度帧内模式推导
CN114424574A (zh) * 2019-09-20 2022-04-29 北京字节跳动网络技术有限公司 编解码块的缩放过程
CN114467308A (zh) * 2019-09-22 2022-05-10 北京字节跳动网络技术有限公司 视频处理中的参考图片重采样
CN116193131A (zh) * 2019-08-15 2023-05-30 北京达佳互联信息技术有限公司 一种用于视频编码的方法、电子装置及存储介质

Families Citing this family (48)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3410722A1 (en) * 2017-05-31 2018-12-05 Thomson Licensing Method and apparatus for low-complexity bi-directional intra prediction in video encoding and decoding
US20190110052A1 (en) * 2017-10-06 2019-04-11 Futurewei Technologies, Inc. Bidirectional intra prediction
WO2019103491A1 (ko) * 2017-11-22 2019-05-31 한국전자통신연구원 영상 부호화/복호화 방법, 장치 및 비트스트림을 저장한 기록 매체
EP3738306A1 (en) * 2018-01-11 2020-11-18 Telefonaktiebolaget LM Ericsson (publ) Multiple boundary filtering
US11509889B2 (en) 2018-06-27 2022-11-22 Kt Corporation Method and apparatus for processing video signal
MX2020012688A (es) * 2018-06-27 2021-02-15 Kt Corp Metodo y aparato para procesar se?ales de video.
NZ772299A (en) 2018-07-12 2022-12-23 Huawei Tech Co Ltd Boundary block partitioning in video coding
CN111418212B (zh) * 2018-07-13 2023-12-01 Lg电子株式会社 基于图像编码系统中的仿射运动预测的图像解码方法和设备
TW202007164A (zh) 2018-07-15 2020-02-01 大陸商北京字節跳動網絡技術有限公司 跨分量運動資訊匯出
CN116347109A (zh) 2018-08-17 2023-06-27 北京字节跳动网络技术有限公司 一种处理视频数据的方法和装置
SG11202101229VA (en) * 2018-08-24 2021-03-30 Samsung Electronics Co Ltd Video decoding method and apparatus, and video encoding method and apparatus
WO2020048466A1 (en) 2018-09-03 2020-03-12 Huawei Technologies Co., Ltd. Relation between partition constraint elements
KR102595146B1 (ko) 2018-09-03 2023-10-26 후아웨이 테크놀러지 컴퍼니 리미티드 비디오 인코더, 비디오 디코더 및 그에 대응하는 방법
CN116033150A (zh) * 2018-09-08 2023-04-28 北京字节跳动网络技术有限公司 不同视频块尺寸的仿射模式计算
CN112771872A (zh) * 2018-09-11 2021-05-07 有限公司B1影像技术研究所 使用帧间预测的图像编码/解码方法和装置
CN117478883A (zh) 2018-09-12 2024-01-30 北京字节跳动网络技术有限公司 交叉分量线性模型中的尺寸相关的下采样
TWI827681B (zh) 2018-09-19 2024-01-01 大陸商北京字節跳動網絡技術有限公司 具有自適應運動矢量分辨率的仿射模式的語法重用
CN112703739B (zh) * 2018-09-19 2022-11-25 华为技术有限公司 用于预测最可能帧内模式的方法和装置
WO2020056779A1 (en) * 2018-09-22 2020-03-26 Hangzhou Hikvision Digital Technology Co., Ltd Adaptive construction of most probable modes candidate list for video data encoding and decoding
EP3709644A1 (en) * 2019-03-12 2020-09-16 Ateme Method for image processing and apparatus for implementing the same
CN117221531A (zh) * 2018-10-09 2023-12-12 Lg 电子株式会社 使用mpm列表的基于帧内预测的图像编译方法及其设备
CN109862353B (zh) * 2018-12-29 2022-11-22 浙江大华技术股份有限公司 色度块预测模式获取方法、装置、编解码器及存储装置
EP3881535A4 (en) * 2018-12-29 2022-03-16 Zhejiang Dahua Technology Co., Ltd. INTRA-PREDICTION SYSTEMS AND METHODS
KR20210119429A (ko) * 2019-02-19 2021-10-05 주식회사 윌러스표준기술연구소 인트라 예측 기반 비디오 신호 처리 방법 및 장치
US10778972B1 (en) 2019-02-27 2020-09-15 Google Llc Adaptive filter intra prediction modes in image/video compression
US20220182662A1 (en) * 2019-03-11 2022-06-09 Electronics And Telecommunications Research Institute Intra block copy-based encoding/decoding method and device, and bitstream storage medium
WO2020185047A1 (ko) * 2019-03-14 2020-09-17 엘지전자 주식회사 인트라 예측을 수행하는 영상 부호화/복호화 방법, 장치 및 비트스트림을 전송하는 방법
MX2021012230A (es) 2019-04-12 2021-11-03 Beijing Bytedance Network Tech Co Ltd Construccion de lista de modos mas probables para intraprediccion basada en matriz.
JP7403555B2 (ja) 2019-04-16 2023-12-22 北京字節跳動網絡技術有限公司 イントラコーディングモードにおけるマトリクスの導出
KR20210154806A (ko) 2019-04-24 2021-12-21 바이트댄스 아이엔씨 코딩 된 비디오의 양자화된 잔차 차동 펄스 코드 변조 표현
EP3942799A4 (en) 2019-05-01 2022-06-08 ByteDance Inc. INTRACODED VIDEO USING QUANTIZED RESIDUAL PULSE CODE MODULATION ENCODING
CN117241018A (zh) 2019-05-01 2023-12-15 北京字节跳动网络技术有限公司 使用滤波的基于矩阵的帧内预测
WO2020221372A1 (en) 2019-05-01 2020-11-05 Beijing Bytedance Network Technology Co., Ltd. Context coding for matrix-based intra prediction
CN113785306A (zh) * 2019-05-02 2021-12-10 字节跳动有限公司 基于编解码树结构类型的编解码模式
WO2020223612A1 (en) * 2019-05-02 2020-11-05 Bytedance Inc. Signaling in transform skip mode
CN114424534A (zh) * 2019-05-10 2022-04-29 寰发股份有限公司 视频编码的色度直接模式产生方法和装置
MX2021001663A (es) * 2019-05-16 2021-05-12 Huawei Tech Co Ltd Un codificador, un decodificador y metodos correspondientes usando bufer dedicado de ibc y actualizacion de valor predeterminado para componente luma y croma.
BR112021022868A2 (pt) 2019-05-22 2022-01-04 Beijing Bytedance Network Tech Co Ltd Método de processamento de vídeos, aparelho para processar dados de vídeo e meios de armazenamento e gravação não transitórios legíveis por computador
WO2020239018A1 (en) 2019-05-31 2020-12-03 Beijing Bytedance Network Technology Co., Ltd. Restricted upsampling process in matrix-based intra prediction
CN113906758A (zh) 2019-05-31 2022-01-07 字节跳动有限公司 调色板模式与帧内块复制预测
JP2022534320A (ja) 2019-06-05 2022-07-28 北京字節跳動網絡技術有限公司 マトリクスベースイントラ予測のためのコンテキスト決定
JP7359878B2 (ja) 2019-06-28 2023-10-11 バイトダンス インコーポレイテッド 変換スキップモードにおける量子化パタメータの修正技術
US11477444B2 (en) * 2019-08-06 2022-10-18 Hfi Innovation Inc. Method and apparatus of encoding or decoding video data with intra prediction mode mapping
EP4008109A4 (en) 2019-09-02 2022-09-14 Beijing Bytedance Network Technology Co., Ltd. ENCODING MODE DETERMINATION BASED ON COLOR FORMAT
EP4042689A4 (en) 2019-10-28 2023-06-07 Beijing Bytedance Network Technology Co., Ltd. SIGNALING AND SYNTAX ANALYSIS BASED ON A COLOR COMPONENT
KR20230062685A (ko) * 2019-10-29 2023-05-09 엘지전자 주식회사 변환에 기반한 영상 코딩 방법 및 그 장치
CN114930851A (zh) * 2019-10-29 2022-08-19 Lg电子株式会社 基于变换的图像编码方法及其装置
US11736708B2 (en) * 2020-12-16 2023-08-22 Tencent America LLC Method and apparatus for video coding

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1784015A (zh) * 2004-12-02 2006-06-07 中国科学院计算技术研究所 一种帧内图像预测编码方法
US20120287995A1 (en) * 2011-05-12 2012-11-15 Madhukar Budagavi Luma-Based Chroma Intra-Prediction for Video Coding
CN103636203A (zh) * 2011-06-17 2014-03-12 联发科技股份有限公司 内部预测模式编码的方法及装置

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
SG10201408745YA (en) * 2011-06-28 2015-02-27 Samsung Electronics Co Ltd Prediction method and apparatus for chroma component of image using luma component of image
US8724711B2 (en) * 2011-07-12 2014-05-13 Intel Corporation Luma-based chroma intra prediction
CN103918269B (zh) * 2012-01-04 2017-08-01 联发科技(新加坡)私人有限公司 色度帧内预测方法及装置
CN103220508B (zh) * 2012-01-20 2014-06-11 华为技术有限公司 编解码方法和装置
US10368107B2 (en) * 2016-08-15 2019-07-30 Qualcomm Incorporated Intra video coding using a decoupled tree structure
US10812796B2 (en) * 2016-09-30 2020-10-20 Lg Electronics Inc. Image decoding method and apparatus in image coding system

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1784015A (zh) * 2004-12-02 2006-06-07 中国科学院计算技术研究所 一种帧内图像预测编码方法
US20120287995A1 (en) * 2011-05-12 2012-11-15 Madhukar Budagavi Luma-Based Chroma Intra-Prediction for Video Coding
CN103636203A (zh) * 2011-06-17 2014-03-12 联发科技股份有限公司 内部预测模式编码的方法及装置

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113748679A (zh) * 2019-04-19 2021-12-03 高通股份有限公司 用于视频编解码的帧内块复制合并数据语法
WO2020244579A1 (zh) * 2019-06-05 2020-12-10 华为技术有限公司 Mpm列表构建方法、色度块的帧内预测模式获取方法及装置
CN113557724A (zh) * 2019-06-07 2021-10-26 腾讯美国有限责任公司 视频编解码的方法和装置
CN113557724B (zh) * 2019-06-07 2024-04-05 腾讯美国有限责任公司 视频解码方法、装置以及存储介质
CN112135128A (zh) * 2019-06-24 2020-12-25 华为技术有限公司 图像预测方法、编码树节点划分方法及其装置
CN114072849A (zh) * 2019-06-28 2022-02-18 字节跳动有限公司 屏幕内容编解码中的色度帧内模式推导
CN114072849B (zh) * 2019-06-28 2023-12-15 字节跳动有限公司 屏幕内容编解码中的色度帧内模式推导
CN116193131A (zh) * 2019-08-15 2023-05-30 北京达佳互联信息技术有限公司 一种用于视频编码的方法、电子装置及存储介质
CN116193131B (zh) * 2019-08-15 2023-10-31 北京达佳互联信息技术有限公司 一种用于视频编码的方法、电子装置及存储介质
CN114424574A (zh) * 2019-09-20 2022-04-29 北京字节跳动网络技术有限公司 编解码块的缩放过程
CN114467308A (zh) * 2019-09-22 2022-05-10 北京字节跳动网络技术有限公司 视频处理中的参考图片重采样
CN114467308B (zh) * 2019-09-22 2024-04-12 北京字节跳动网络技术有限公司 视频处理中的参考图片重采样

Also Published As

Publication number Publication date
EP3516869A1 (en) 2019-07-31
EP3516869A4 (en) 2020-05-06
EP4075798A1 (en) 2022-10-19
WO2018064948A1 (en) 2018-04-12
CN109792516B (zh) 2021-05-25
TW201818719A (zh) 2018-05-16
US20200045322A1 (en) 2020-02-06
EP3516869B1 (en) 2022-06-08
TWI650003B (zh) 2019-02-01

Similar Documents

Publication Publication Date Title
CN109792516A (zh) 图像和视频编解码中用于帧内色度编解码的方法及装置
CN104838658B (zh) 具有不对称空间分辨率的纹理和深度视图分量当中的内部视图运动预测
EP3328081B1 (en) Effective prediction using partition coding
CN103975597B (zh) 纹理及深度视图分量当中的内部视图运动预测
CN111656783B (zh) 使用基于子块的运动补偿进行视频信号处理的方法和装置
CN107925759A (zh) 用于编码和解码帧内预测的方法和设备
KR20180061046A (ko) 영상 부호화/복호화 방법, 장치 및 비트스트림을 저장한 기록 매체
CN111886861A (zh) 根据图像编码系统中的块划分结构的图像解码方法和设备
CN107925773A (zh) 使用自适应去块滤波编码和解码图像的方法及其装置
CN109845261A (zh) 图像和视频编解码中帧内色度编解码的方法及装置
CN109792515A (zh) 图像编码/解码方法和装置以及存储比特流的记录介质
KR20190067732A (ko) 채널들 간의 선택적인 정보 공유를 사용하는 부호화 및 복호화를 위한 방법 및 장치
KR20190071611A (ko) 예측 네트워크를 사용하는 영상의 부호화 및 복호화를 위한 방법 및 장치
KR102619133B1 (ko) 영상 부호화/복호화 방법, 장치 및 비트스트림을 저장한 기록 매체
CN106105199B (zh) 基于多边形单元的编/解码图像的方法及其装置
KR20190062273A (ko) 영상 변환 신경망 및 영상 역변환 신경망을 이용한 영상 처리 방법 및 장치
HUE034631T2 (en) Adaptive partition coding
EP3806472A1 (en) Merge mode-based inter-prediction method and apparatus
KR20190052097A (ko) 영상 처리 방법 및 이를 위한 장치
US11818378B2 (en) Image encoding/decoding method and device
CN110366850A (zh) 基于帧内预测模式处理图像的方法和用于该方法的设备
CN113454990A (zh) 帧间预测编解码方法及装置
KR20190116067A (ko) 딥 러닝에 기반하여 생성된 참조 프레임을 이용하는 인터 예측을 위한 방법 및 장치
KR20190091217A (ko) 시간적 움직임 정보를 이용하는 영상 부호화 및 영상 복호화를 위한 방법 및 장치
Tabatabai et al. Tool Experiment 6: Intra Prediction Improvement

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right

Effective date of registration: 20220601

Address after: Chinese Taiwan jhubei City, Hsinchu County Taiwan Yuan Street No. five 3 floor 7

Patentee after: MEDIATEK Inc.

Address before: Hsinchu Science Park Road Taiwan Hsinchu city China Dusing No. 1

Patentee before: MEDIATEK Inc.

TR01 Transfer of patent right