CN105247863A - 三维视频编码中简化的cabac编码方法 - Google Patents

三维视频编码中简化的cabac编码方法 Download PDF

Info

Publication number
CN105247863A
CN105247863A CN201480029875.2A CN201480029875A CN105247863A CN 105247863 A CN105247863 A CN 105247863A CN 201480029875 A CN201480029875 A CN 201480029875A CN 105247863 A CN105247863 A CN 105247863A
Authority
CN
China
Prior art keywords
coding
contiguous block
context
current block
corresponds
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201480029875.2A
Other languages
English (en)
Other versions
CN105247863B (zh
Inventor
张凯
陈渏纹
林建良
安基程
张贤国
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
HFI Innovation Inc
Original Assignee
MediaTek Singapore Pte Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from PCT/CN2013/078981 external-priority patent/WO2015003294A1/en
Priority claimed from PCT/CN2013/090566 external-priority patent/WO2015096093A1/en
Application filed by MediaTek Singapore Pte Ltd filed Critical MediaTek Singapore Pte Ltd
Priority to CN201480029875.2A priority Critical patent/CN105247863B/zh
Priority to KR1020157031924A priority patent/KR101817589B1/ko
Publication of CN105247863A publication Critical patent/CN105247863A/zh
Application granted granted Critical
Publication of CN105247863B publication Critical patent/CN105247863B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/13—Adaptive entropy coding, e.g. adaptive variable length coding [AVLC] or context adaptive binary arithmetic coding [CABAC]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/91—Entropy coding, e.g. variable length coding [VLC] or arithmetic coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/96—Tree coding, e.g. quad-tree coding

Abstract

本发明揭露了一种于三维或多视图视频编码以及解码中基于上下文编码的用于减少存储要求或复杂性的方法。系统基于已选择的与当前块的一个或多个邻近块相关联的信息选择上下文，其中，已选择的与当前块的一个或多个邻近块相关联的信息有条件地取决于所述一个或多个邻近块是否为可用。接着，语法元素根据上下文选择使用基于上下文的编码被编码或解码。待编码的语法元素可对应于IC旗标或ARP旗标。于另一示例中，用于编码使用DMM的当前深度块的一个或多个语法元素使用基于上下文的编码被编码或解码，其中，所述基于上下文的编码对至少一个所选择的语法元素选择旁通模式。

Description

三维视频编码中简化的CABAC编码方法
【相关申请的交叉引用】
本发明主张申请于2013年7月8日，序列号为PCT/CN2013/078981，标题为“ASimplifiedMethodonSegmentationCodinginIntraPrediction”的PCT专利申请，以及申请于2013年12月26日，序列号为PCT/CN2013/090566，标题为“SimplifiedCABACContextsin3DVC”的PCT专利申请的优先权。将所述PCT专利申请以参考的方式并入本文中。
【技术领域】
本发明涉及三维(three-dimensional，3D)视频编码。特别地，本发明是关于三维编码系统中用于上下文自适应二进制算术编码(ContextAdaptiveBinaryArithmeticCoding，CABAC)的优化方法。
【背景技术】
于三维(three-dimensional，3D)视频编码中，与底层纹理图像(underlyingtextureimage)相关联的深度信息在提高编码效率以及合成视图的渲染上是有用的。用于典型场景的深度数据的统计分布通常是稀疏的(sparse)。一些深度值可能不会出现在深度图中。于基于高效视频编码(HighEfficiencyVideoCoding，HEVC)的三维视频编码标准(命名为3D-HEVC)中，基于分区(partition-based)的方法被应用于深度图帧内编码。基于分区的方法使用深度图建模(depthmapmodelling，DMM)来根据重建的邻近(neighboring)深度像素形成当前深度块的预测。使用基于分区的深度图帧内编码方法，深度块被分区为两个区段(segment)，且每个区段由单一常数值来表示。
在3D-HEVC的当前版本中如JCT3V-D1005(“3D-HEVCTestModel4”,JointCollaborativeTeamon3DVideoCodingExtensionDevelopmentofITU-TSG16WP3andISO/IECJTC1/SC29/WG11,4thMeeting:Incheon,KR,20–26Apr.2013,文档：JCT3V-D1005)所规定，具有四个DMM模式被定义以对应于模式1-显式楔形波信令(ExplicitWedgeletsignaling)、模式2-帧内预测楔形波分区(Intra-predictedWedgeletpartitioning)、模式3-楔形波分区(Wedgeletpartition)的限制信令(Restrictedsignaling)及分量间(inter-component)预测、以及模式4-分量间预测的轮廓分区(Inter-component-predictedContourpartitioning)。DMM模式1(简称为DMM1)中的表索引wedge_full_tab_idx被二值化(binarized)并被表示为固定长度代码。接着，表索引的二进制(bin)使用上下文自适应二进制算术编码(ContextAdaptiveBinaryArithmeticCoding，CABAC)被编码，其中，所有二进制共用一个上下文模型(contextmodel)。图1所示为使用固定长度代码的表索引编码的示例，其中，对应于表索引的二进制是以固定长度代码来表示。接着，这些二进制被使用算术编码引擎110压缩以产生已编码的比特流120。这些二进制很难遵循任何具体的分布模型；根据单个上下文模型130来编码这些二进制是无效率的(inefficient)。DMM模式2(简称为DMM2)中的表索引wedge_predtex_tab_idx以及DMM模式3(简称为DMM3)中的参数delta_end_abs_minus1是以类似方式被编码。
与其它基于非上下文的熵编码相比较，CABAC编码通常会导致更高的复杂性。在二进制很难遵循任何分布模型的情况下，CABAC的更高编码效率的益处可能无法实现。因此，希望能开发出匹配底层语法元素特性的编码方案。
CABAC也被应用于编码3D-HEVC中与亮度补偿(illuminationcompensation，IC)以及高级残差预测(advancedresidualprediction，ARP)相关联的语法。对于每个编码单元(codingunit，CU)，编码器根据率失真最优化(rate-distortionoptimization，RDO)准则确定启用或禁用IC或ARP，且信号决定作为比特流中的控制旗标ic_flag或arp_flag，其中，控制旗标的值为0或1。
于3D-HEVC中，CABAC被用于根据上下文模型来编码控制旗标，即，ic_flag以及arp_flag。用于控制旗标的上下文模型有三个，被表示为X_model[0]，X_model[1]以及X_model[2]，其中，X对应于“ic”或“arp”。对于当前块，X_model[idx]被选择以编码X_flag，其中，idx被计算如下：
idx＝X_flag(A)+X_flag(B)，如果A以及B都可用；
idx＝X_flag(A)，如果A可用但B不可用；
idx＝X_flag(B)，如果A不可用但B可用；以及
idx＝0，如果A以及B都不可用；
其中，X_flag(A)以及X_flag(B)分别表示如图3所描绘的左侧以及上方的邻近块的X_flag。
因此，邻近块的X_flag必须被存储以便导出当前块的idx。于HEVC或其扩展中，例如3D-HEVC，编码树单元(codingtreeunit，CTU)是基础处理单元。CTU也被称作最大编码单元(largestcodingunit，LCU)。因为上方邻近块可能位于与包含当前块的当前CTU不同的CTU中，所以当前CTU上方的整个CTU行的X_flag都需要被存储以便推导当前块的idx。
因此，根据3D-HEVC的当前版本的用于ic_flag或arp_flag的基于上下文的编码需要存储整个CTU行的旗标。此外，与基于非上下文的编码相比，基于上下文的编码将导致更高的复杂性。需要开发出能够减少存储要求、复杂性、或同时减少存储要求及复杂性的方法以及系统。
【发明内容】
本发明揭露了一种于三维或多视图视频编码以及解码中基于上下文编码的用于减少存储要求或复杂性的方法。在一个实施例中，上下文选择是基于已选择的与当前块的一个或多个邻近块相关联的信息，其中，已选择的与当前块的一个或多个邻近块相关联的信息有条件地取决于所述一个或多个邻近块是否为可用。接着，语法元素根据上下文选择使用基于上下文的编码被编码或解码。待编码的语法元素可对应于亮度补偿(illuminationcompensation，IC)旗标或高级残差预测(advancedresidualprediction，ARP)旗标。IC旗标用于指示用于当前块的亮度补偿是否被启用，以及ARP旗标用于指示用于当前块的高级残差预测是否被启用。
一个或多个邻近块可对应于当前块的左侧邻近块、上方邻近块、或左侧邻近块以及上方邻近块。当一个或多个邻近块可对应于上方邻近块时，如果上方邻近块位于包含当前块的当前编码树单元(codingtreeunit，CTU)的上方的CTU行中，则上方邻近块被认为是不可用的。当一个或多个邻近块可对应于左侧邻近块时，如果左侧邻近块位于不同于包含当前块的当前CTU的另一CTU中，则左侧邻近块被认为是不可用的。
所选择的与邻近块相关联的信息可对应于邻近块的语法元素。语法元素可对应于IC旗标或ARP旗标。于当前块的一个或多个邻近块只对应于一个上方或左侧邻近块，且与每个块相关联的语法元素对应于1比特旗标(1-bitflag)时，具有两个上下文的上下文自适应二进制算术编码(ContextAdaptiveBinaryArithmeticCoding，CABAC)可被用于基于上下文的编码。于当前块的一个或多个邻近块只对应于一个上方邻近块，且CABAC编码被使用时，当上方邻近块位于包含当前块的当前CTU的上方的CTU行中时，默认CABAC上下文可被使用。于当前块的一个或多个邻近块只对应于一个左侧邻近块，且CABAC编码被使用时，当左侧邻近块位于与包含当前块的当前CTU不同的CTU中时，默认CABAC上下文可被使用。
本发明的另一实施例使用CABAC编码来编码或解码IC旗标或ARP旗标，其中，没有所选择的与当前块的任何邻近块相关联的信息被用于确定CABAC上下文。当CABAC使用多个上下文，上下文选择可根据与当前块相关联的CU的分割深度信息(splittingdepthinformation)被确定。例如，CU的分割深度信息可对应于CU尺寸或CU的预测单元(predictionunit，PU)分区结构(partitionstructure)。因此，编码以及解码IC旗标或ARP旗标所需要的上下文的数量从三个减少为一个。IC旗标或ARP旗标可使用仅具有一个上下文的CABAC被编码或解码。
在本发明的又一实施例中，用于编码使用深度图建模(depthmapmodelling，DMM)的当前深度块的一个或多个语法元素使用基于上下文的编码被编码或解码，其中，基于上下文的编码对至少一个所选择的语法元素选择旁通(by-pass)模式。至少一个所选择的语法元素可对应于语法元素wedge_full_tab_idx，wedge_predtex_tab_idx或delta_end_abs_minus1，其中，wedge_full_tab_idx对应于使用显式楔形波信令的DMM模式1中的全表索引，wedge_predtex_tab_idx对应于使用帧内预测楔形波分区的DMM模式2中的预测纹理表索引(predictedtexturetableindex)，且delta_end_abs_minus1对应于DMM模式3中的终点差异量(deltaendvalue)。此外，基于上下文的编码还可选择用于所述至少一个所选择的语法元素的上下文模式。例如，第一个二进制是使用上下文模式被编码，且其余的二进制是使用旁通模式被编码。于另一示例中，前N个二进制是使用上下文模式被编码，且其余的二进制是使用旁通模式被编码，其中，N为大于1的正整数。具有旁通模式或混合模式的基于上下文的编码也可应用与其它语法元素相关联的DMM。
【附图说明】
图1所示为于当前3D-HEVC中使用基于上下文的编码来编码与DMM模式1相关联的表索引的示例。
图2所示为根据本发明实施例的使用具有旁通模式的基于上下文的编码来编码与DMM模式1相关联的表索引的示例。
图3所示为被用于选择用于编码使用基于上下文编码的当前块的语法元素的上下文的上方以及左侧邻近块的示例。
图4所示为根据本发明实施例的结合具有减少存储要求的基于上下文编码的编码系统的示范性流程图。
图5所示为根据本发明的实施例的结合具有旁通模式的基于上下文编码的示范性流程图。
【具体实施方式】
下文的描述是实施本发明的最佳预期模式。这种描述是为了说明本发明的一般原理，而不应被理解成对本发明的限制。本发明的范围可通过参考所附权利要求做最好的确定。
如上所述，在JCT3V-D1005中指定的当前版本的3D-HEVC的，深度图建模(depthmapmodelling，DMM)模式1(简称为DMM1)中的表索引被二值化(binarized)并被表示为固定长度代码。其中，所有二进制共用一个上下文模型。而且，DMM模式2(简称为DMM2)中的表索引wedge_predtex_tab_idx以及DMM模式3(DMM3)中的参数delta_end_abs_minus1以类似方式被编码。然而，这些固定长度代码通常不遵循任何特定的分布模型。因此，基于上下文的熵编码对这些代码是无效的。另一方面，基于上下文的熵编码的使用会导致更高复杂性。因此，本发明的实施例对DMM1的全表索引wedge_full_tab_idx、DMM2的预测纹理表索引wedge_predtex_tab_idx、以及DMM3的终点差异量delta_end_abs_minus1的二进制使用旁通模式。对于基于上下文的编码，例如上下文自适应二进制算术编码(ContextAdaptiveBinaryArithmeticCoding，CABAC)，旁通模式可被使用。在此情况下，CABAC编码引擎由两个子引擎组成，一个用于常规编码模式(本申请中也称为上下文编码模式)，其包括自适应概率模型的使用。另一个用于旁通编码模式，其提供符元(symbol)的快速编码。
此外，旁通模式还可应用于编码与不同DMM模式相关联的以下的语法元素的二进制：
1.区段/分区线(segment/partitionline)、曲线、或候选，或
2.区段/分区线、曲线的起始点/终点、或候选，或
3.所选择的区段/分区候选的索引。
图2所示为根据本发明实施例的编码DMM1中表索引的示例，其中，二进制由基于上下文编码的旁通编码模式来编码。本发明的另一实施例将混合二进制编码应用到与不同DMM模式有关的一个或多个以下的语法元素：
1.被表示为wedge_full_tab_idx的全表索引，或
2.被表示为wedge_predtex_tab_idx的预测纹理表索引，或
3.DMM3中被表示为delta_end_abs_minus1的终点差异量，或
4.区段/分区线、曲线、或候选，或
5.区段/分区线、曲线的起始点/终点、或候选，或
6.所选择的区段/分区候选的索引。
于混合二进制编码方法中，一个或多个二进制是根据单个/多个上下文模型被编码，且一个或多个二进制是基于旁通方法被编码。在混合二进制编码的一个实施例中，第一个二进制是使用上下文模式来编码，且剩余二进制是使用旁通模式来编码。例如，前N个二进制是使用上下文模式来编码，且剩余二进制是使用旁通模式来编码，其中，N为大于1的整数。
如前所述，当前版本的3D-HEVC中的ic_flag以及arp_flag的基于上下文的编码需要线缓冲器(linebuffer)来存储旗标或编码树单元(codingtreeunit，CTU)行以用于上下文的索引的选择。为了减少所需的缓冲器，以下公开了多种方法。
在一个实施例中，如果上方邻近块位于与当前块的CTU不同的CTU中，则上方邻近块被认为是不可用的。例如，上方邻近块位于包含当前块的当前CTU的上方CTU行时。
在另一实施例中，如果左侧邻近块位于与当前块的CTU不同的CTU中，则左侧邻近块被认为是不可用的。例如，左侧邻近块位于包含当前块的当前CTU的左侧的左侧CTU时。
在另一实施例中，上方邻近块总是被认为是不可用的。可选地，左侧邻近块总是被认为是不可用的。
在另一实施例中，只有两个上下文模型被需要以编码X_flag。对于当前块，X_model[idx]被选择来编码X_flag，其中，idx的计算公式为idx＝X_flag(A)，且X_flag(A)表示左侧邻近块的X_flag。
在另一实施例中，只有两个上下文模型被需要以编码X_flag。对于当前块，X_model[idx]被选择来编码X_flag，其中，idx的计算公式为idx＝X_flag(B)，且X_flag(B)表示上方邻近块的X_flag。
在另一实施例中，只有两个上下文模型被需要以编码X_flag。对于当前块，X_model[idx]被选择来编码X_flag。如果上方邻近块位于当前CTU行中，则idx的计算公式为idx＝X_flag(B)，且X_flag(B)表示上方邻近块的X_flag。否则，idx＝0，这意味着上方邻近块是不可用的。
在又一实施例中，用于CABAC的上下文不参考与任何邻近块相关联的任何信息。简单来说，只有一个上下文被CABAC使用来编码语法元素。此简化的CABAC可以被应用在编码IC旗标、ARP旗标或其它语法元素上。此外，当CABAC不参考与任何邻近块相关联的任何信息时，多个上下文仍然可被使用。例如，多个上下文中的上下文选择可基于CU的分割深度信息。CU的分割深度信息可对应于CU尺寸或CU的PU分区结构。
如前所述，本发明是为了减少于三维或多视图编码中用于编码语法的存储要求、复杂性、或同时减少存储要求及复杂性。表1为用于通用测试条件(commontestcondition)下，根据本发明实施例的结合具有旁通模式的基于上下文编码的3D视频编码系统的性能与现有系统的性能比较，表2为用于所有帧内(AllIntra，AI)测试条件下，根据本发明实施例的结合具有旁通模式的基于上下文编码的3D视频编码系统的性能与现有系统的性能比较。性能比较是基于第一列中列出的不同组的测试数据。用于视图1(视频1)以及视图2(视频2)的纹理图片的BD率差值被示出。BD率的负值意味着本发明具有更佳的性能。用于具有视频比特率的已编码视频PSNR的BD率度量，具有总比特率(纹理比特率以及深度比特率)的已编码视频PSNR，具有总比特率的合成视频PSNR也被示出。如表1以及表2所示，与现有的系统相比没有性能损耗。事实上，一些小的性能改进已经被注意到。处理时间(编码时间，解码时间以及渲染时间)也被比较。如表1以及表2所示，处理时间与现有的系统是大致相同的。因此，与现有的系统相比较，根据本发明一个实施例的使用具有旁通模式的基于上下文编码的系统不会导致性能损耗，但可降低计算的复杂性。
表1
表2
表3所示为根据本发明实施例的结合具有降低存储要求和/或复杂性的基于上下文的编码的3D视频编码系统的性能与现有的系统性能的比较，其中，ic_flag的编码不需要来自邻近块的任何信息。因此，与现有的方法相比，上下文的数量从3个减少为1个。此外，不需要存储用于包含当前块的当前CTU上方的CTU行的ic_flag的CTU行。如表3所示，与现有的系统相比没有性能损耗。处理时间(编码时间，解码时间以及渲染时间)有轻微的减少。
表3
表4所示为根据本发明实施例的结合具有降低存储要求和/或复杂性的基于上下文的编码的3D视频编码系统的性能与现有的系统性能的比较，其中，ic_flag的编码不需要来自邻近块的任何信息，其中，用于iv_res_pred_weight_idx的上下文仅基于左侧邻近块。因此，与现有的方法相比，上下文的数量从3个减少为2个。此外，不需要存储用于包含当前块的当前CTU上方的CTU行的iv_res_pred_weight_idx的CTU行。如表4所示，与现有的系统相比没有性能损耗。处理时间(编码时间，解码时间以及渲染时间)有轻微的减少。
表4
图4所示为根据本发明实施例的结合简化的基于上下文的编码的三维编码或解码系统的示范性流程图。于步骤410中，系统接收与附属视图中当前块的语法元素相关联的输入数据。对于编码，输入数据对应于待编码的语法元素。对于解码，输入数据对应于待解码的已编码语法元素。输入数据可以从存储器(例如，计算机存储器，缓冲器(RAM或DRAM)或其它媒体)或从处理器中取回。于步骤420中，上下文选择是基于已选择的与当前块的一个或多个邻近块相关联的信息被确定，其中，已选择的与当前块的一个或多个邻近块相关联的信息有条件地取决于所述一个或多个邻近块是否为可用。接着，于步骤430中，语法元素根据上下文选择使用基于上下文的编码被编码或解码。
图5所示为根据本发明的实施例的结合具有用于语法元素的旁通模式的基于上下文编码以使用DMM编码当前深度块的三维编码或解码系统的示范性流程图。于步骤510中，系统接收与用于编码使用DMM的当前深度块的一个或多个语法元素相关联的输入数据。接着，如步骤520所示，使用基于上下文的编码来编码或解码一个或多个语法元素，其中，基于上下文的编码为至少一个所选择的语法元素选择旁通模式。
根据本发明，以上所示的流程图旨在说明具有简化的基于上下文编码的3D或多视图编码的示例。本领域技术人员可以在不脱离本发明的精神实质的情况下修改每个步骤，重新排列所述步骤，分割步骤，或合并步骤来实施本发明。
以上描述可使本领域的普通技术人员如特定应用及其要求的上下文提供的来实践本发明。对本领域技术人员来说，对所描述的实施例的各种修改是显而易见的，且本文定义的一般原理可被应用于其它实施例。因此，本发明并非意在限定于以上所示及所描述的特定实施例，而是要符合与此公开揭露的原理和新颖特征相一致的最宽范围。在以上详细描述中，各种具体细节被示出以便提供本发明的彻底理解。然而，本领域技术人员应知晓本发明是可被实践的。
如上所述，本发明的实施例可以由各种硬件，软件代码，或两者的组合来实现。例如，本发明的实施例可以是被集成到视频压缩芯片电路，或被集成于视频压缩软件的程序代码以执行本文所描述的处理过程。本发明的实施例还可以是执行于数字信号处理器上的程序代码，以执行本文所描述的处理过程。本发明还可包含由计算机处理器，数字信号处理器，微处理器，或现场可编程门阵列执行的多个功能。根据本发明，通过执行定义本发明所体现的特定方法的机器可读软件代码或固件代码，这些处理器可被配置为执行特定任务。软件代码或固件代码可被开发为不同的编程语言以及不同的格式或风格。软件代码还可被编译以用于不同的目标平台。然而，根据本发明的不同的软件代码的代码格式、风格及语言，以及用于配置代码以执行任务的其他方式，均不会背离本发明的精神以及范围。
在不脱离其精神或本质特征的情况下，本发明可以其它特定形式来体现。所描述的示例在所考虑的所有的方面都只是说明性的而不是限制性的。因此，本发明的范围是由其所附的权利要求来指示的，而不是由上文的描述来指示的。在权利要求的等效范围及含义内的所有改变均包含于本发明范围之内。

Claims (21)

1.一种三维或多视图视频编码或解码的方法，其特征在于，所述方法包括：
接收与附属视图中当前块的语法元素相关联的输入数据；
基于所选择的与所述当前块的一个或多个邻近块相关联的信息确定上下文选择，其中，与所述当前块的所述一个或多个邻近块相关联的所述信息有条件地取决于所述一个或多个邻近块是否是可用的；以及
根据所述上下文选择使用基于上下文的编码来编码或解码所述语法元素。
2.如权利要求1所述的方法，其特征在于，所述当前块的所述语法元素对应于亮度补偿旗标或高级残差预测旗标，其中，所述亮度补偿旗标指示用于所述当前块的亮度补偿是否被启用，以及所述高级残差预测旗标指示用于所述当前块的高级残差预测是否被启用。
3.如权利要求1所述的方法，其特征在于，所述当前块的所述一个或多个邻近块对应于所述当前块的左侧邻近块、上方邻近块、或所述左侧邻近块以及上方邻近块。
4.如权利要求3所述的方法，其特征在于，所述当前块的所述一个或多个邻近块对应于上方邻近块，其中，如果上方邻近块位于包含所述当前块的当前编码树单元的上方的编码树单元行中，则上方邻近块被认为是不可用的。
5.如权利要求3所述的方法，其特征在于，所述当前块的所述一个或多个邻近块对应于所述左侧邻近块，其中，如果所述左侧邻近块位于与包含所述当前块的当前编码树单元不同的另一编码树单元中，则所述左侧邻近块被认为是不可用的。
6.如权利要求1所述的方法，其特征在于，所述所选择的与所述当前块的所述一个或多个邻近块相关联的信息对应于所述当前块的所述一个或多个邻近块的所述语法元素。
7.如权利要求6所述的方法，其特征在于，所述语法元素对应于亮度补偿旗标或高级残差预测旗标，其中，所述亮度补偿旗标指示用于相关块的亮度补偿是否被启用，所述高级残差预测旗标指示用于所述相关块的高级残差预测是否被启用。
8.如权利要求6所述的方法，其特征在于，所述当前块的所述一个或多个邻近块只对应于一个上方或左侧邻近块，与每个块相关联的所述语法元素对应于1比特旗标，以及所述基于上下文的编码对应于具有两个上下文的上下文自适应二进制算术编码。
9.如权利要求6所述的方法，其特征在于，所述当前块的所述一个或多个邻近块只对应于一个上方邻近块，所述基于上下文的编码对应于上下文自适应二进制算术编码，以及当所述上方邻近块位于包含所述当前块的当前编码树单元的上方的编码树单元行时，默认上下文自适应二进制算术编码上下文被使用。
10.如权利要求6所述的方法，其特征在于，所述当前块的所述一个或多个邻近块只对应于一个左侧邻近块，所述基于上下文的编码对应于上下文自适应二进制算术编码，以及当所述左侧邻近块位于与包含所述当前块的当前编码树单元不同的编码树单元中时，默认上下文自适应二进制算术编码上下文被使用。
11.一种三维或多视图视频编码或解码的方法，其特征在于，所述方法包括：
接收与附属视图中当前块的语法元素相关联的输入数据，其中，所述语法元素对应于亮度补偿旗标或高级残差预测旗标，所述亮度补偿旗标指示用于相关块的亮度补偿是否被启用，以及所述高级残差预测旗标指示用于所述相关块的高级残差预测是否被启用；以及
使用上下文自适应二进制算术编码来编码或解码所述语法元素，其中，没有所选择的与所述当前块的任何邻近块相关联的信息被用于确定上下文自适应二进制算术编码上下文。
12.如权利要求11所述的方法，其特征在于，所述上下文自适应二进制算术编码使用多个上下文，且上下文选择是基于与所述当前块相关联的编码单元的分割深度信息来确定。
13.如权利要求12所述的方法，其特征在于，所述编码单元的所述分割深度信息对应于编码单元尺寸或所述编码单元的预测单元分区结构。
14.如权利要求11所述的方法，其特征在于，所述语法元素是使用只具有一个上下文的上下文自适应二进制算术编码被编码或解码。
15.一种三维或多视图视频编码或解码的方法，其特征在于，所述方法包括：
接收与用于使用深度图模型来编码当前深度块的一个或多个语法元素相关联的输入数据；以及
使用基于上下文的编码来编码或解码所述一个或多个语法元素，其中，所述基于上下文的编码对至少一个所选择的语法元素选择旁通模式。
16.如权利要求15所述的方法，其特征在于，所述至少一个所选择的语法元素对应于wedge_full_tab_idx，其中，wedge_full_tab_idx对应于使用显式楔形波信令的DMM模式1的全表索引。
17.如权利要求15所述的方法，其特征在于，所述至少一个所选择的语法元素对应于wedge_predtex_tab_idx或delta_end_abs_minus1，其中，wedge_predtex_tab_idx对应于使用帧内预测楔形波分区的深度图建模模式2的预测纹理表索引，且delta_end_abs_minus1对应于深度图建模模式3的终点差异量。
18.如权利要求15所述的方法，其特征在于，所述至少一个所选择的语法元素对应于区段/分区线的索引或起始/终点、曲线、或帧内编码中的候选。
19.如权利要求15所述的方法，其特征在于，所述基于上下文的编码进一步对所述至少一个所选择的语法元素选择上下文模式。
20.如权利要求19所述的方法，其特征在于，所述至少一个所选择的语法元素对应于wedge_full_tab_idx，或者wedge_predtex_tab_idx，或者delta_end_abs_minus1，或者区段/分区线、曲线的索引或起始点/终点、或者帧内编码中的候选，其中，wedge_full_tab_idx对应于使用显式楔形波信令的深度图建模模式1中的全表索引，wedge_predtex_tab_idx对应于使用帧内预测楔形波分区的深度图建模模式2中的预测纹理表索引，以及delta_end_abs_minus1对应于深度图建模模式3中的终点差异量。
21.如权利要求19所述的方法，其特征在于，前N个二进制是使用所述上下文模式被编码，且剩余二进制是使用所述旁通模式被编码，其中，N为大于或等于1的整数。
CN201480029875.2A 2013-07-08 2014-06-24 三维或多视图视频编码或解码的方法 Active CN105247863B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201480029875.2A CN105247863B (zh) 2013-07-08 2014-06-24 三维或多视图视频编码或解码的方法
KR1020157031924A KR101817589B1 (ko) 2013-07-08 2014-06-24 3d 비디오 코딩에서 단순화된 cabac 코딩의 방법

Applications Claiming Priority (6)

Application Number Priority Date Filing Date Title
PCT/CN2013/078981 WO2015003294A1 (en) 2013-07-08 2013-07-08 A simplified method on segmentation coding in intra prediction
CNPCT/CN2013/078981 2013-07-08
PCT/CN2013/090566 WO2015096093A1 (en) 2013-12-26 2013-12-26 Simplified cabac contexts in 3dvc
CNPCT/CN2013/090566 2013-12-26
PCT/CN2014/080601 WO2015003554A1 (en) 2013-07-08 2014-06-24 Method of simplified cabac coding in 3d video coding
CN201480029875.2A CN105247863B (zh) 2013-07-08 2014-06-24 三维或多视图视频编码或解码的方法

Publications (2)

Publication Number Publication Date
CN105247863A true CN105247863A (zh) 2016-01-13
CN105247863B CN105247863B (zh) 2018-09-07

Family

ID=52279350

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201480029875.2A Active CN105247863B (zh) 2013-07-08 2014-06-24 三维或多视图视频编码或解码的方法

Country Status (5)

Country Link
US (1) US9973759B2 (zh)
KR (2) KR101817589B1 (zh)
CN (1) CN105247863B (zh)
CA (1) CA2908115C (zh)
WO (1) WO2015003554A1 (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107749984A (zh) * 2017-10-24 2018-03-02 福州大学 基于模式映射的多视点视频编码复杂度控制方法
CN108234987A (zh) * 2018-01-23 2018-06-29 西南石油大学 一种用于深度图像边界拟合的双抛物线分区模板优化方法
CN107071478B (zh) * 2017-03-30 2019-08-20 成都图必优科技有限公司 基于双抛物线分区模板的深度图编码方法
CN110337001A (zh) * 2019-07-15 2019-10-15 福州大学 一种基于hevc的残差编码吞吐率优化系统及方法
WO2020052534A1 (zh) * 2018-09-10 2020-03-19 华为技术有限公司 视频解码方法及视频解码器
CN113647105A (zh) * 2019-01-28 2021-11-12 Op方案有限责任公司 指数分区的帧间预测

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2014166119A1 (en) * 2013-04-12 2014-10-16 Mediatek Inc. Stereo compatibility high level syntax
US11412220B2 (en) 2017-12-14 2022-08-09 Interdigital Vc Holdings, Inc. Texture-based partitioning decisions for video compression
EP3738310A4 (en) * 2018-01-11 2021-08-11 Qualcomm Incorporated VIDEO ENCODING USING LOCAL LIGHTING COMPENSATION
WO2019230904A1 (ja) * 2018-06-01 2019-12-05 シャープ株式会社 画像復号装置、および画像符号化装置
US11115652B2 (en) 2018-12-07 2021-09-07 Tencent America LLC Method and apparatus for further improved context design for prediction mode and coded block flag (CBF)
TW202101982A (zh) * 2018-12-14 2021-01-01 美商松下電器（美國）知識產權公司 編碼裝置、解碼裝置、編碼方法、及解碼方法
CN113170166B (zh) * 2018-12-30 2023-06-09 北京字节跳动网络技术有限公司 具有几何分割的帧间预测在视频处理中有条件的应用
KR20210128497A (ko) 2019-03-11 2021-10-26 인터디지털 브이씨 홀딩스 인코포레이티드 비디오 인코딩 및 디코딩을 위한 엔트로피 코딩
CN117560489A (zh) 2019-05-14 2024-02-13 北京字节跳动网络技术有限公司 用于残差编解码的上下文建模
WO2020263680A1 (en) 2019-06-22 2020-12-30 Beijing Dajia Internet Information Technology Co., Ltd. Methods and apparatus for prediction simplification in video coding
US11272200B2 (en) * 2019-06-24 2022-03-08 Tencent America LLC Method and apparatus for video coding

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101371571A (zh) * 2006-01-12 2009-02-18 Lg电子株式会社 处理多视图视频
US20090096643A1 (en) * 2007-10-16 2009-04-16 Yuan-Teng Chang System and Method for Context-Based Adaptive Binary Arithematic Encoding and Decoding
US20090296806A1 (en) * 2008-06-02 2009-12-03 Mediatek Inc. Cabac encoder and cabac encoding method
CN102113326A (zh) * 2008-08-04 2011-06-29 杜比实验室特许公司 重叠块差异估计和补偿体系结构
CN102273203A (zh) * 2009-04-02 2011-12-07 威仕达品特技术有限公司 利用颜色量化的图像-html表格转换
WO2012163199A1 (en) * 2011-05-27 2012-12-06 Mediatek Inc. Method and apparatus for line buffer reduction for video processing
WO2013017092A1 (en) * 2011-08-04 2013-02-07 Mediatek Inc. Method and apparatus for reordered binarization of syntax elements in cabac

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2052546A4 (en) 2006-07-12 2010-03-03 Lg Electronics Inc METHOD AND DEVICE FOR SIGNAL PROCESSING
US8537200B2 (en) 2009-10-23 2013-09-17 Qualcomm Incorporated Depth map generation techniques for conversion of 2D video data to 3D video data
US8995523B2 (en) * 2011-06-03 2015-03-31 Qualcomm Incorporated Memory efficient context modeling
RU2714371C2 (ru) * 2011-07-11 2020-02-14 Сан Пэтент Траст Способ декодирования изображений, способ кодирования изображений, устройство декодирования изображений, устройство кодирования изображений и устройство кодирования и декодирования изображений
US10154276B2 (en) 2011-11-30 2018-12-11 Qualcomm Incorporated Nested SEI messages for multiview video coding (MVC) compatible three-dimensional video coding (3DVC)
US9615090B2 (en) * 2012-12-28 2017-04-04 Qualcomm Incorporated Parsing syntax elements in three-dimensional video coding

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101371571A (zh) * 2006-01-12 2009-02-18 Lg电子株式会社 处理多视图视频
US20090096643A1 (en) * 2007-10-16 2009-04-16 Yuan-Teng Chang System and Method for Context-Based Adaptive Binary Arithematic Encoding and Decoding
US20090296806A1 (en) * 2008-06-02 2009-12-03 Mediatek Inc. Cabac encoder and cabac encoding method
CN101599768A (zh) * 2008-06-02 2009-12-09 联发科技股份有限公司 Cabac编码器以及编码方法
CN102113326A (zh) * 2008-08-04 2011-06-29 杜比实验室特许公司 重叠块差异估计和补偿体系结构
CN102273203A (zh) * 2009-04-02 2011-12-07 威仕达品特技术有限公司 利用颜色量化的图像-html表格转换
WO2012163199A1 (en) * 2011-05-27 2012-12-06 Mediatek Inc. Method and apparatus for line buffer reduction for video processing
WO2013017092A1 (en) * 2011-08-04 2013-02-07 Mediatek Inc. Method and apparatus for reordered binarization of syntax elements in cabac

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107071478B (zh) * 2017-03-30 2019-08-20 成都图必优科技有限公司 基于双抛物线分区模板的深度图编码方法
CN107749984A (zh) * 2017-10-24 2018-03-02 福州大学 基于模式映射的多视点视频编码复杂度控制方法
CN107749984B (zh) * 2017-10-24 2019-12-17 福州大学 基于模式映射的多视点视频编码复杂度控制方法
CN108234987A (zh) * 2018-01-23 2018-06-29 西南石油大学 一种用于深度图像边界拟合的双抛物线分区模板优化方法
WO2020052534A1 (zh) * 2018-09-10 2020-03-19 华为技术有限公司 视频解码方法及视频解码器
US11706417B2 (en) 2018-09-10 2023-07-18 Huawei Technologies Co., Ltd. Video decoding method and video decoder
CN113647105A (zh) * 2019-01-28 2021-11-12 Op方案有限责任公司 指数分区的帧间预测
CN110337001A (zh) * 2019-07-15 2019-10-15 福州大学 一种基于hevc的残差编码吞吐率优化系统及方法

Also Published As

Publication number Publication date
KR20150140769A (ko) 2015-12-16
KR20180005750A (ko) 2018-01-16
KR101817589B1 (ko) 2018-01-11
US9973759B2 (en) 2018-05-15
CA2908115A1 (en) 2015-01-15
CA2908115C (en) 2019-02-12
CN105247863B (zh) 2018-09-07
US20160065964A1 (en) 2016-03-03
KR101909863B1 (ko) 2018-10-18
WO2015003554A1 (en) 2015-01-15

Similar Documents

Publication Publication Date Title
CN105247863A (zh) 三维视频编码中简化的cabac编码方法
US11234002B2 (en) Method and apparatus for encoding and decoding a texture block using depth based block partitioning
KR101846762B1 (ko) 3d 비디오 코딩에서의 서브-ｐｕ 움직임 정보 상속 방법
CN110572643B (zh) 利用自适应运动向量精度的方法和装置
CN105981385B (zh) 帧内预测编码方法及其装置
CN110087089B (zh) 用于颜色视频数据的视频编解码方法
US8363936B2 (en) Method and apparatus for reduced resolution partitioning
EP2946553B1 (en) Transform coefficient coding for context-adaptive binary entropy coding of video
CN110855988B (zh) 用于视频编码的替代变换的方法及装置
KR101622468B1 (ko) 깊이 맵 모델링을 사용한 깊이 인트라 예측 방법
CN112534813A (zh) 视频处理系统中色度量化参数导出的方法以及装置
CN105981381A (zh) 用于分量间残差预测的缩放参数编码的方法及装置
JP2015526976A (ja) 現在ブロックの分割を予測することによるビデオ符号化方法、復号化方法、対応する符号化及び復号化装置、並びにコンピュータプログラム
JP2018524923A (ja) デジタル画像のコーディング方法、デコーディング方法、装置、および関連するコンピュータプログラム
KR20160001714A (ko) 픽쳐들의 그룹에서 변경가능 엘리먼트들의 세트를 결정하기 위한 방법 및 디바이스
US20200059647A1 (en) Guided transcoding
CN113647105A (zh) 指数分区的帧间预测
CN108600755B (zh) 图像帧编码方法及装置
CN114930838A (zh) 帧间预测方法、编码器、解码器以及计算机存储介质
TWI738167B (zh) 圖像編碼及解碼技術
US20210029369A1 (en) Quantized coefficient coding
JP6985924B2 (ja) 画像符号化装置、画像処理装置、画像符号化方法
WO2024000768A1 (zh) 视频编、解码方法及装置、码流、解码器、编码器、存储介质
EP3110156B1 (en) A system and a method for disoccluded region coding in a multiview video data stream
KR20150026924A (ko) 3차원 비디오에서의 깊이 쿼드트리 예측 방법 및 장치

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C41 Transfer of patent application or patent right or utility model
TA01 Transfer of patent application right

Effective date of registration: 20160930

Address after: Chinese Taiwan jhubei City, Hsinchu County Taiwan Yuan Street No. five 3 floor 7

Applicant after: Atlas Limited by Share Ltd

Address before: One of the third floor, Soras building, 1st Avenue, Singapore

Applicant before: Mediatek (Singapore) Pte. Ltd.

GR01 Patent grant
GR01 Patent grant