CN114342400A

CN114342400A - 基于色彩格式的编解码模式确定

Info

Publication number: CN114342400A
Application number: CN202080061699.6A
Authority: CN
Inventors: 许继征; 邓智玭; 张莉; 刘鸿彬; 张凯
Original assignee: Beijing ByteDance Network Technology Co Ltd; ByteDance Inc
Current assignee: Beijing ByteDance Network Technology Co Ltd; ByteDance Inc
Priority date: 2019-09-02
Filing date: 2020-09-02
Publication date: 2022-04-12
Also published as: US20220210410A1; KR20220044968A; WO2021043157A1; KR102650079B1; JP2022546112A; JP7381722B2; EP4008106A4; KR102653559B1; KR20240040129A; JP7309046B2; US11601652B2; US20220210437A1; CN117714683A; JP2022546111A; KR20220051178A; EP4008109A1; MX2022002188A; EP4008106A1; BR112022003732A2; US20230217029A1

Abstract

描述了视频处理的方法。所述方法包含，为视频的视频区与所述视频的编解码表示之间的转换，根据规则基于所述视频的色彩格式确定所述视频区的帧内编解码特性；以及根据所述帧内编解码特性进行所述转换。

Description

基于色彩格式的编解码模式确定

相关申请的交叉引用

在适用专利法和/或根据巴黎公约的规则下，本申请即时要求提交于2019年9月2日的国际专利申请No.PCT/CN2019/103959的优先权和权益。出于法律下的全部目的，前述申请的全部公开通过引用并入作为本申请的公开的一部分。

技术领域

本文档涉及视频和图像编解码和解码技术。

背景技术

数字视频占据互联网和其他数字通信网络上使用的最大带宽。随着连接的能够接收和显示视频的用户装置的数目不断增大，预计数字视频使用的带宽需求将持续增长。

发明内容

本公开技术可以由在视频编解码或解码中使用参考图片的视频或图像解码器或编码器实施例来使用。

在一个示例性方面中，公开了视频处理的方法。方法包含：为视频的视频区与视频的编解码表示之间的转换，根据规则基于视频的色彩格式确定视频区的帧内编解码特性；以及根据帧内编解码特性进行转换。

在另一示例性方面中，公开了另一视频处理的方法。方法包含：进行视频的当前视频块与视频的编解码表示之间的转换，其中编解码表示符合格式规则，并且其中格式规则指定语法元素modeType，其指示当前视频块的编解码模式，等于MODE_TYPE_NO_INTER或MODE_TYPE_NO_INTRA，MODE_TYPE_NO_INTER限制对转换使用帧间编解码模式，MODE_TYPE_NO_INTRA限制对转换使用帧内模式。

在另一示例性方面中，公开了另一视频处理的方法。方法包含：进行视频与视频的编解码表示之间的转换，其中编解码表示符合格式规则，该格式规则指定标志，该标志指示，在视频的色度格式是4：2：2、4：0：0，或4：4：4的情况下，预测模式约束不被包含在编解码表示中。

在另一示例性方面中，公开了另一视频处理的方法。方法包含：为视频的视频区与视频的编解码表示之间的转换，根据规则确定对视频区是否和/或如何启用对最小色度帧内预测块的尺寸的限制；以及基于确定进行转换，其中规则取决于视频的色彩格式是4：2：0还是4：2：2。

在另一示例性方面中，公开了另一视频处理的方法。方法包含：为视频的视频区与视频的编解码表示之间的转换，根据规则确定对视频区是否启用对最小色度帧内预测块的尺寸的限制；以及基于确定进行转换，其中规则取决于视频的色彩格式和/或视频区的宽度(M)和高度(N)，并且其中规则还指定，对于作为具有BT(二叉树)划分的编解码树节点的视频区，则在以下情况下禁用对最小色度帧内预测块的限制：1)视频的色彩格式是4：2：2；并且2)M和N的乘积是来自值的集合的值，其中值的集合包含64。

在另一示例性方面中，公开了另一视频处理的方法。方法包含：根据对最小色度帧内预测块尺寸的限制进行视频的视频区与视频的编解码表示之间的转换，其中编解码表示符合格式规则，该规则由于视频的4：2：2色彩格式而指定在编解码表示中的语法字段的值。

在另一示例性方面中，公开了另一视频处理的方法。方法包含：为视频的当前视频块与视频的编解码表示之间的转换，根据规则确定分割方案对当前视频块的适用性；以及基于确定进行转换。

在另一示例性方面中，公开了另一视频处理的方法。方法包含为视频的视频块与视频的编解码表示之间的转换，根据规则确定是否启用帧间模式，以及基于确定进行转换，其中规则指定在对视频块启用亮度样点的双树分割的情况下启用帧间模式。

在另一示例性方面中，公开了另一视频处理的方法。方法包含：为视频的视频区与视频的编解码表示之间的转换，基于规则确定对视频区是否允许使用调色板模式；以及基于确定进行转换，其中调色板模式包含使用代表性样点值的调色板编码视频区。

在另一示例性方面中，公开了另一视频处理的方法。方法包含：进行视频的当前视频块与视频的编解码表示之间的转换，其中编解码表示符合格式规则，其中该格式规则指定语法元素modeType，语法元素modeType包含MODE_TYPE_IBC或MODE_TYPE_PALETTE，MODE_TYPE_IBC允许对转换使用帧内块复制模式，MODE_TYPE_PALETTE允许对转换使用调色板模式，其中帧内块复制模式包含至少使用指向含有当前视频块的视频帧的块矢量编码当前视频块，并且其中调色板模式包含使用代表性样点值的调色板编码当前视频块。

在另一示例性方面中，公开了另一视频处理的方法。方法包含：为视频的当前视频块与视频的编解码表示之间的转换，根据规则确定对当前视频块是否允许某分割方案，规则取决于用于在编解码表示中表示当前视频块的编解码模式类型和当前视频块的维度；以及基于确定进行转换。

在另一示例性方面中，公开了另一视频处理的方法。方法包含：进行视频的视频块与视频的编解码表示之间的转换，其中编解码表示符合格式规则，其中格式规则指定视频块的特性控制编解码表示中的语法元素是否指示视频块的预测模式。

在另一示例性方面中，公开了另一视频处理的方法。方法包含：进行视频的第一分量的视频区与视频的编解码表示之间的转换，其中编解码表示符合格式规则，其中格式规则指定，是否和/或如何在编解码表示中将语法字段配置为指示视频区的差分量化参数取决于用于划分第一分量的样点的划分方案。

在另一示例性方面中，公开了另一视频处理的方法。方法包含：根据规则进行视频的第一分量的视频区与视频的编解码表示之间的转换，其中在双树和/或局部双树编解码结构被应用于视频区的情况下，规则指定与第一分量的差分量化参数有关的变量在视频的第二分量的解码或解析过程期间不被修改。

在又一示例性方面中，上述方法可以由包括处理器的视频编码器设备实现。

在又一示例性方面中，上述方法可以由包括处理器的视频解码器设备实现。

在又一示例性方面中，这些方法可以实施为处理器可执行指令的形式并储存在计算机可读程序介质上。

本文档中进一步描述了这些和其他方面。

附图说明

图1示出了帧内块复制编解码工具的示例。

图2示出了以调色板模式编解码的块的示例。

图3示出了使用调色板预测器来信令通知调色板条目的示例。

图4示出了水平和垂直遍历扫描的示例的示例。

图5示出了调色板索引的编解码的示例。

图6示出了67个帧内预测模式的示例。

图7示出了当前块的左侧和上方邻域的示例。

图8示出了ALF滤波形状(色度：5×5菱形，亮度：7×7菱形)的示例。

图9示出了子采样拉普拉斯算子计算的示例。

图10示出了在虚拟边界处的修改的块分类的示例。

图11是虚拟边界处的亮度分量的修改的ALF滤波的示例性图示。

图12示出了EO中的像素分类的四个一维3像素图案的示例。

图13示出了四个带(band)被分组在一起且由其起始带位置表示。

图14示出了CIIP权重导出中使用的顶部和左侧邻域块。

图15示出了具有色度缩放的亮度映射架构。

图16示出了SCIPU的示例。

图17是用于实现本文档中所描述的技术的硬件平台的示例的框图。

图18是示例性视频处理的方法的流程图。

图19示出了空域Merge候选的位置的示例。

图20示出了为空域Merge候选的冗余检查考虑的候选对的示例。

图21A至图21G是视频处理的示例性方法的流程图。

具体实施方式

本文档提供了可以由图像或视频比特流的解码器使用的各种技术，以改善解压缩或解码的数字视频或图像的质量。为简洁起见，术语“视频”在本文中用于包含图片的序列(传统上称为视频)和单独的图像。此外，视频编码器还可在编码过程期间实施这些技术，以便重构用于进一步编码的解码帧。

在本文档中使用章节标题是为了易于理解，并且不将实施例和技术限于对应的章节。因此，来自一个章节的实施例可以与其他章节的实施例组合。

1.概述

本文档涉及视频编解码技术。具体地，其涉及调色板编解码，其在视频编解码中采用基于基色的表示。其可以应用于如HEVC的现有视频编解码标准，或尚待定案的标准(多功能视频编解码)。其还可以适用于未来视频编解码标准或视频编解码器。

2.初始讨论

视频编解码标准已经主要通过熟知的ITU-T和ISO/IEC标准的发展而演进。ITU-T制作了H.261和H.263，ISO/IEC制作了MPEG-1和MPEG-4Visual，并且两个组织联合地制作了H.262/MPEG-2视频和H.264/MPEG-4先进视频编解码(AVC)和H.265/HEVC标准。自从H.262，视频编解码标准是基于混合视频编解码结构，其中采用时域预测加上变换编解码。为了探索超越HEVC的未来视频编解码技术，联合视频探索小组(JVET)在2015年由VCEG和MPEG联合地成立。自此，许多新的方法已经被JVET采用并置入名为联合探索模型(JEM)的参考软件中。在2018年4月，VCEG(Q6/16)与ISO/IEC JTC1 SC29/WG11(MPEG)之间创立了联合视频专家小组(JVET)，以研究VVC标准，目标为与HEVC相比减少50％比特率。

2.1帧内块复制

帧内块复制(IBC)(又称当前图片参考)已经被采用在HEVC屏幕内容编解码扩展(HEVC-SCC)和当前VVC测试模型(VTM-4.0)中。IBC将运动补偿的概念从帧间编解码扩展到帧内编解码。如图1所展示，由在应用IBC时相同图片中的参考块预测当前块。参考块中的样点在当前块被编解码或解码之前必须已经重构。虽然IBC对于大多数相机捕捉的序列并不很高效，但其示出了对屏幕内容的显著编解码增益。原因在于存在许多重复图案，诸如屏幕内容图片中的图标和文本字符。IBC可以有效地移除这些重复的图案之间的冗余。在HEVC-SCC中，帧间编解码的编解码单元(CU)如果选择当前图片作为其参考图片则可以应用IBC。MV在此情况下被重命名为块矢量(BV)，并且BV总是具有整数像素精度。为了与主要配置文件(profile)的HEVC兼容，当前图片在解码图片缓冲器(DPB)中被标记为“长期”参考图片。应注意到，相似地，在多视图/3D视频编解码标准中，视图间参考图片也被标记为“长期”参考图片。

BV找到其参考块之后，可以通过复制参考块生成预测。可以通过从原始信令通知减去参考像素而得到残差。然后可以如其他编解码模式般应用变换和量化。

图1是帧内块复制的图示。

然而，当参考块在图片之外或与当前块重叠或在重构的区域之外或在由一些约束限制的有效区域之外时，未定义部分或全部像素值。基本上，存在两种方案来解决这样的问题。一种方案是例如在比特流一致性中不允许这样的情况。另一种方案是对这些未定义的像素值应用填充。以下子章节详细描述所述方案。

2.2HEVC屏幕内容编解码扩展中的IBC

在HEVC的屏幕内容编解码扩展中，当块使用当前图片作为参考时，应当保证整个参考块在可用重构区域内，如以下规范文本中所指示：

变量offsetX和offsetY的导出如下：

offsetX＝(ChromaArrayType＝＝0)？0:(mvCLX[0]&0x7？2:0)(8-104)

offsetY＝(ChromaArrayType＝＝0)？0:(mvCLX[1]&0x7？2:0)(8-105)

比特流一致性的要求为，当参考图片是当前图片时，亮度运动矢量mvLX应当遵循以下约束：

-当以将设置为(xCb，yCb)的(xCurr,yCurr)、将设置为等于(xPb+(mvLX[0]>>2)-offsetX,yPb+(mvLX[1]>>2)-offsetY)的邻域亮度位置(xNbY,yNbY)作为输入调用第6.4.1节中指定的z扫描顺序块可用性的导出过程时，输出应当等于真(TRUE)。

-当以将设置为(xCb，yCb)的(xCurr,yCurr)、将设置为等于(xPb+(mvLX[0]>>2)+nPbW-1+offsetX,yPb+(mvLX[1]>>2)+nPbH-1+offsetY)的相邻亮度位置(xNbY,yNbY)作为输入调用第6.4.1节中指定的z扫描顺序块可用性的导出过程时，输出应当等于真

-以下条件中的一者或两者应当为真：

-(mvLX[0]>>2)+nPbW+xB1+offsetX的值小于或等于0。

-(mvLX[1]>>2)+nPbH+yB1+offsetY的值小于或等于0。

-以下条件应当为真：

(xPb+(mvLX[0]>>2)+nPbSw-1+offsetX)/CtbSizeY-xCurr/CtbSizeY<＝yCurr/CtbSizeY-(yPb+(mvLX[1]>>2)+nPbSh-1+offsetY)/CtbSizeY (8-106)

从而，参考块与当前块重叠或参考块在图片之外的情况将不会发生。不需要填充参考或预测块。

2.3VVC测试模型中的IBC

在当前VVC测试模型(即，VTM-4.0设计)中，整个参考块应当在当前编解码树单元(CTU)中且不与当前块重叠。从而，不需要填充参考或预测块。IBC标志被编解码为当前CU的预测模式。从而，对每个CU总共存在三个预测模式MODE_INTRA、MODE_INTER和MODE_IBC。

2.3.1 IBC Merge模式

在IBC Merge模式中，从比特流解析指向IBC Merge候选列表中的条目的索引。IBCMerge列表的构建可以根据以下步骤的序列概括：

●步骤1：空域候选的导出

●步骤2：HMVP候选的插入

●步骤3：成对平均候选的插入

在空域Merge候选的导出中，从位于图19中所示的位置的候选中选择最多四个Merge候选。导出的顺序是A₁，B₁，B₀，A₀和B₂。仅在位置A₁，B₁，B₀，A₀的任何PU不可用(例如因为其属于另一条带或片)或用IBC模式编解码时才考虑位置B₂。在位置A₁处的候选被添加之后，插入其余候选经受冗余检查，其确保具有相同运动信息的候选被从列表排除，使得编解码效率改善。为降低计算复杂度，在提到的冗余检查中不考虑所有可能的候选对。替代地，仅在图20中用箭头联接的对被考虑，并且只有用于冗余检查的对应的候选不具有相同的运动信息才将候选添加到列表。

在插入空域候选之后，如果IBC Merge列表尺寸仍小于最大IBC Merge列表尺寸，则来自HMVP表的IBC候选可以被插入。当插入HMVP候选时进行冗余检查。

最终，成对平均候选被插入到IBC Merge列表中。

当由Merge候选识别的参考块在图片之外或与当前块重叠或在重构区域之外或在由一些约束限制的有效区域之外时，Merge候选称为无效Merge候选。

注意到，无效Merge候选可以被插入到IBCMerge列表中。

2.3.2 IBC AMVP模式

在IBC AMVP模式中，从比特流中解析出指向IBC AMVP列表中的条目的AMVP索引。IBC AMVP列表的构建可以根据以下步骤的序列来概括：

●步骤1：导出空域候选

○检查A₀，A₁直到找到可用候选。

○检查B₀，B₁，B₂直到找到可用候选。

●步骤2：插入HMVP候选

●步骤3：插入零候选

在插入空域候选之后，如果IBC AMVP列表尺寸仍小于最大IBC AMVP列表尺寸，则来自HMVP表的IBC候选可以被插入。

最终，零候选被插入到IBC AMVP列表中。

2.4调色板模式

调色板模式背后的基本思想是CU中的样点由代表性色彩值的小集合表示。该集合被称为调色板。并且可以通过信令通知逸出符号和之后的(可能量化的)分量值而指示调色板外部的样点。这种样点称为逸出样点。图2中图示了调色板模式。

图2示出了以调色板模式编解码的块的示例。

2.5HEVC屏幕内容编解码扩展(HEVC-SCC)中的调色板模式

在HEVC-SCC中的调色板模式中，使用预测性方式来编解码调色板和索引图。

2.5.1调色板条目的编解码

对于调色板条目的编解码，保持调色板预测器。在SPS中信令通知调色板的最大尺寸以及调色板预测器。在HEVC-SCC中，在PPS中引入palette_predictor_initializer_present_flag。当该标志为1时，在比特流中信令通知用于初始化调色板预测器的条目。在每个CTU行、每个条带和每个片的开始处初始化调色板预测器。取决于palette_predictor_initializer_present_flag的值，调色板预测器被重设为0或使用PPS中信令通知的调色板预测器初始化器条目进行初始化。在HEVC-SCC中，启用尺寸0的调色板预测器初始化器，以允许在PPS级显式禁用调色板预测器初始化。

对于调色板预测器中的每个条目，信令通知重复使用标志以指示其是否是当前调色板的一部分。这如图3所示。使用零的游程长度(run-length)编解码发送重复使用标志。之后，使用0阶指数Golomb码来信令通知新的调色板条目的数目。最终，信令通知新的调色板条目的分量值。

图3示出了使用调色板预测器来信令通知调色板条目的示例。

2.5.2编解码调色板索引

使用图4中所示的水平和垂直遍历扫描编解码调色板索引。使用palette_transpose_flag在比特流中显式地信令通知扫描顺序。对于子章节的其余部分，假设扫描是水平的。

图4示出了水平和垂直遍历扫描的示例。

使用两个主要调色板样点模式编解码调色板索引：‘INDEX’和‘COPY_ABOVE’。如之前解释的，逸出符号也作为‘INDEX’模式被信令通知并分配等于最大调色板尺寸的索引。使用除顶部行以外的标志或者当之前的模式是‘COPY_ABOVE’时信令通知模式。在‘COPY_ABOVE’模式中，上方行中的样点的调色板索引被复制。在‘INDEX’模式下，显式地信令通知调色板索引。对于‘INDEX’和‘COPY_ABOVE’模式两者，都信令通知游程值，该值指定也使用相同模式进行编解码的后续样点的数目。当逸出符号是‘INDEX’和‘COPY_ABOVE’模式中的游程的一部分时，对每个逸出符号信令通知逸出分量值。图5中图示了调色板索引的编解码。

该语法顺序如下完成。首先信令通知CU的索引值的数目。这之后是使用截断的二进制编解码信令通知整个CU的实际索引值。索引的数目以及索引值两者都以旁路模式编解码。这将索引相关的旁路二进制数(bin)分组在一起。然后以交错方式信令通知调色板样点模式(如果需要)和游程。最终，将与整个CU的逸出样点相对应的分量逸出值分组在一起，并以旁路模式进行编解码。

在信令通知索引值之后信令通知附加语法元素last_run_type_flag。结合索引的数目，该语法元素消除对信令通知与块中的最后的游程相对应的游程值的需求。

在HEVC-SCC中，还对4：2：2、4：2：0和单色色度格式启用调色板模式。对于全部色度格式，调色板条目和调色板索引的信令通知几乎相同。在非单色格式的情况下，每个调色板条目由3个分量构成。对于单色格式，每个调色板条目由单个分量构成。对于子采样的色度方向，色度样点与可被2整除的亮度样点索引相关联。在为CU重构的调色板索引之后，如果样点仅具有与之相关联的单个分量，则仅适用调色板条目的第一分量。信令通知上的唯一区别在于关于逸出分量值。对于每个逸出样点，取决于与该样点相关联的分量的数目，信令通知的逸出分量值的数目可以不同。

在VVC中，在编解码帧内条带中使用双树编解码结构，因此亮度分量和两个色度分量可以具有不同的调色板和调色板索引。此外，两个色度分量共享相同的调色板和调色板索引。

图5示出了调色板索引的编解码的示例。

2.6VVC中的帧内模式编解码

为了捕捉自然视频中出现的任意边缘方向，VTM5中的方向性帧内模式的数目被从HEVC中使用的33个扩展到65个。不在HEVC中的新的方向模式被描绘为图6中的红色虚线箭头，并且平面和DC模式保持相同。这些较密的方向性帧内预测模式应用于全部块尺寸且应用于亮度和色度帧内预测两者。

在VTM5中，对于非正方形块，若干常规角度帧内预测模式使用广角帧内预测模式自适应地替换。

在HEVC中，每个帧内编解码块具有正方形形状，并且其每侧边的长度是2的幂。从而，不需要除法运算来使用DC模式生成帧内预测器。在VTM5中，块可以具有长方形形状，这通常情况下需要对每块使用除法运算。为了避免用于DC预测的除法运算，仅长侧边用于计算非正方形块的平均。

图6示出了67个帧内预测模式的示例。

为了保持最可能模式(MPM)列表生成的低复杂度，通过考虑两个可用邻域帧内模式，使用具有6个MPM的帧内模式编解码方法。考虑以下三个方面来构建MPM列表：

-默认帧内模式

-邻域帧内模式

-导出帧内模式

无论是否应用MRL和ISP编解码工具，统一的6-MPM列表都用于帧内块。基于左侧和上方邻域块的帧内模式构建MPM列表。假设左侧块的模式指代为Left且上方块的模式指代为Above，则统一MPM列表构建如下(左侧和上方块在图7中示出)：

图7是当前块的左侧和上方邻域的示例。

–当邻域块不可用时，其帧内模式默认被设定为平面。

–如果模式Left和Above都是非角度模式：

○MPM列表→{平面，DC，V，H，V-4，V+4}

–如果模式Left和Above中的一个是角度模式，并且另一个是非角度模式：

○设定模式Max作为Left和Above中的较大模式

○MPM列表→{平面，Max，DC，Max-1，Max+1，Max-2}

–如果Left和Above都是角度模式且它们不同：

○设定模式Max作为Left和Above中的较大模式

○如果模式Left和Above的差在2至62的范围内(含端值)

■MPM列表→{平面，Left，Above，DC，Max-1，Max+1}

○否则

■MPM列表→{平面，Left，Above，DC，Max-2，Max+2}

–如果Left和Above都是角度模式且它们相同：

○MPM列表→{平面，Left，Left-1，Left+1，DC，Left-2}

另外，mpm索引码字的第一二进制数是CABAC上下文编解码的。使用总共三个上下文，对应于当前帧内块是启用MRL、启用ISP还是正常帧内块。

在6个MPM列表生成过程期间，使用裁剪来移除重复模式，使得仅唯一模式可以被包含在MPM列表中。对于61个非MPM模式的熵编解码，使用截断二进制编解码(TBC)。

对于色度帧内模式编解码，对色度帧内模式编解码允许总共8个帧内模式。这些模式包含五个传统帧内模式和三个跨分量线性模型模式(CCLM、LM_A和LM_L)。色度模式信令通知和导出过程如表2-4中示出。色度模式编解码直接取决于对应的亮度块的帧内预测模式。因为I条带中对亮度和色度分量启用分开的块分割结构，一个色度块可以对应于多个亮度块。因此，对于色度DM模式，覆盖当前色度块的中央位置的对应的亮度块的帧内预测模式被直接继承。

表2-4–当启用cclm_时从亮度模式导出色度预测模式

2.7量化残差块差分脉冲编解码调制(QR-BDPCM)

在JVET-M0413中，提出量化残差块差分脉冲编解码调制(QR-BDPCM)以高效编解码屏幕内容。

QR-BDPCM中使用的预测方向可以是垂直和水平预测模式。通过相似于帧内预测在预测方向(水平或垂直预测)上的样点复制来对整个块进行帧内预测。残差被量化，并且量化的残差与其预测器(水平或垂直)量化值之间的差值被编解码。这可以通过以下描述：对于尺寸为M(行)×N(列)的块，使r_i,j,0≤i≤M-1,0≤j≤N-1为在使用来自上方或左侧块边界样点的未滤波的样点水平地(在预测块上逐行复制左侧邻域像素值)或垂直地(将顶部邻域行复制到预测块中的每行)进行帧内预测之后的预测残差。使Q(r_i,j),0≤i≤M-1,0≤j≤N-1指代残差r_i,j的量化版本，其中残差是原始块与预测块值之间的差。然后块DPCM被应用于量化的残差样点，得到具有元素

的修改的M×N阵列

当垂直BDPCM被信令通知时：

对于水平预测，适用相似规则，并且通过以下获得残差量化的样点

残差量化的样点

被发送到解码器。

在解码器侧，逆向进行以上计算以产生Q(r_i,j),0≤i≤M-1,0≤j≤N-1。对于垂直预测情况，

对于水平情况，

逆量化的残差Q^-1(Q(r_i,j))被添加到帧内块预测值以产生重构的样点值。

该方案的主要优点在于，可以在系数解析期间即时完成逆DPCM，在系数被解析时简单地添加预测器或可以在解析之后进行逆DPCM。

2.8自适应环路滤波器

在VTM5中，应用了具有基于块的滤波器自适应的自适应环路滤波(ALF)。对于亮度分量，基于局部梯度的方向和活动度，对每个4×4块选择25个滤波器中的一个。

2.8.1.1滤波器形状

在VTM5中，使用两个菱形滤波器形状(如图8所示)。7×7菱形形状应用于亮度分量，且5×5菱形形状应用于色度分量。

图8示出了ALF滤波器形状的示例(色度：5×5菱形，亮度：7×7菱形)

2.8.1.2块分类

对于亮度分量，每个4×4块被归类为25类中的一个。基于其方向性D和活动度的量化值

导出分类索引C，如下：

为计算D和

首先使用一维拉普拉斯算子计算水平、垂直和两个对角方向的梯度：

其中索引i和j指代4×4块内的左上方样点的坐标，并且R(i,j)指示坐标(i,j)处的重构样点。

为降低块分类的复杂度，应用子采样的一维拉普拉斯算子计算。如图9所示，相同子采样位置用于全部方向的梯度计算。

图9示出了子采样的拉普拉斯算子计算的示例。(a)垂直梯度的子采样位置(b)水平梯度的子采样位置(c)对角梯度的子采样位置(d)对角梯度的子采样位置。

然后，水平和垂直方向的梯度的D最大和最小值设定为：

两个对角方向的梯度的最大和最小值设定为：

为了导出方向性D的值，这些值被彼此比较并与两个阈值t₁和t₂比较：

步骤1.如果

和

都为真，则D被设定为0。

步骤2.如果

则从步骤3继续；否则从步骤4继续。

步骤3.如果

则D被设定为2；否则D被设定为1。

步骤4.如果

则D被设定为4；否则D被设定为3。

活动度值A被计算为：

A被进一步量化到0至4的范围(含端值)，并且量化值指代为

对于图片中的色度分量，不应用分类方法，即，ALF系数的单个集合应用于每个色度分量。

2.8.1.3滤波器系数和修剪值的几何变换

在滤波每个4×4亮度块之前，诸如旋转或对角和垂直翻转的几何变换被应用于滤波器系数f(k，l)和对应的滤波器修剪值c(k，l)，取决于对该块计算的梯度值。这等同于将这些变换应用于滤波支持区域中的样点。该思想是使应用ALF的不同块通过对准它们的方向性而更加相似。

引入三个几何变换，包含对角、垂直翻转和旋转：

对角：f_D(k,l)＝f(l,k)，c_D(k,l)＝c(l,k), (2-9-9)

垂直翻转：f_V(k,l)＝f(k,K-l-1)，c_V(k,l)＝c(k,K-l-1)(2-9-10)

旋转：f_R(k,l)＝f(K-l-1,k)，c_R(k,l)＝c(K-l-1,k)(2-9-11)

其中K是滤波器的尺寸，并且0≤k,l≤K-1是系数坐标，使得位置(0,0)在左上角而位置(K-1,K-1)在右下角。变换被应用于滤波器系数f(k，l)和修剪值c(k，l)，取决于对该块计算的梯度值。下表总结了变换与四个方向的四个梯度之间的关系。

表2-5–对于一个块而计算的梯度与变换的映射

梯度值	变换
		g<sub>d2</sub><g<sub>d1</sub>且g<sub>h</sub><g<sub>v</sub>	无变换
g<sub>d2</sub><g<sub>d1</sub>且g<sub>v</sub><g<sub>h</sub>	对角
		g<sub>d1</sub><g<sub>d2</sub>且g<sub>h</sub><g<sub>v</sub>	垂直翻转
g<sub>d1</sub><g<sub>d2</sub>且g<sub>v</sub><g<sub>h</sub>	旋转

2.8.1.4滤波器参数信令通知

在VTM5中，在自适应参数集(APS)中信令通知ALF滤波器参数。在一个APS中，可以信令通知修剪值索引和亮度滤波器系数的多至25个集合，以及修剪值索引和色度滤波器系数的多至一个集合。为了减少比特开销，可以合并不同分类的滤波器系数。在条带头中，信令通知用于当前条带的APS的索引。

从APS解码的修剪值索引允许使用修剪值的亮度表和修剪值的色度表确定修剪值。这些修剪值取决于内部比特深度。更准确地，修剪值的亮度表和修剪值的色度表由以下公式获得：

其中B等于内部比特深度且N等于4，其为VTM5.0中允许的修剪值的数目。

滤波过程可以在CTB级控制。总是信令通知标志，以指示ALF是否被应用于亮度CTB。亮度CTB可以从16个固定滤波器集合和来自APS的滤波器集合中选择滤波器集合。信令通知用于亮度CTB的滤波集合索引，以指示应用哪个滤波器集合。16个固定滤波集合在编码器和解码器两者中是预定义的且硬编解码的。

滤波器系数被以等于128的范数(norm)量化。为了限制乘法复杂度，应用比特流一致性，使得非中央位置的系数值应在-2⁷至2⁷-1的范围内(含端值)。中央位置系数不被在比特流中信令通知且视为等于128。

2.8.1.5滤波过程

在解码器侧，当对CTB启用ALF时，滤波CU内的每个样点R(i,j)，得到样点值R′(i,j)如下所示，

其中f(k，l)指代解码的滤波器系数，K(x,y)是修剪函数，并且c(k，l)指代解码的修剪参数。变量k和l在

与

之间变化，其中L指代滤波器长度。修剪函数K(x,y)＝min(y,max(-y,x))，其对应于函数Clip3(-y,y,x)。

2.8.1.6用于减少行缓冲器的虚拟边界滤波过程

在VTM5中，为减少ALF的行缓冲器要求，对于靠近水平CTU边界的样点采用修改的块分类和滤波。出于此目的，虚拟边界被定义为通过将水平CTU边界移位“N”个样点的线，如图10所示，其中N对于亮度分量等于4且对于色度分量等于2。

图10示出了虚拟边界处的修改的块分类的示例。

修改的块分类应用于亮度分量，如图11所示，活动度值A通过考虑一维拉普拉斯算子梯度计算中使用的减少数目的样点而相应地缩放。

对于滤波过程，对亮度和色度分量两者使用虚拟边界处的对称填充操作。如图11所示，当正在滤波的样点在虚拟边界下方时，位于虚拟边界上方的邻域样点被填充。同时，另一侧处的对应样点也被对称地填充。

图11示出了对于虚拟边界处的亮度分量的修改的ALF滤波的示例。

2.9样点自适应偏移(SAO)

通过使用由编码器对每个CTB指定的偏移，样点自适应偏移(SAO)应用于在去块(deblocking)滤波之后的重构信令通知。HM编码器首先进行SAO过程是否要应用于当前条带的决定。如果SAO应用于条带，则每个CTB被分类为五个SAO类型中的一个，如表2-6所示。SAO的概念是将像素分类到各类别，并通过将偏移添加到每个类别的像素而降低失真。SAO操作包含边缘偏移(EO)和带偏移(BO)，该边缘偏移(EO)使用SAO类型1-4中的像素分类的边缘性质，该带偏移(BO)使用SAO类型5中的像素分类的像素强度。每个适用CTB具有SAO参数，包含sao_merge_left_flag，sao_merge_up_flag，SAO类型和四个偏移。如果sao_merge_left_flag等于1，则当前CTB将重复使用SAO类型和CTB向左的偏移。如果sao_merge_up_flag等于1，则当前CTB将重复使用SAO类型和CTB向上的偏移。

表2-6–SAO类型的规范

2.9.1每个SAO类型的操作

边缘偏移通过考虑边缘方向性信息使用当前像素p的分类的四个一维3像素图案，如图12所示。这些从左到右为：0度，90度，135度和45度。

图12示出了EO中的像素分类的四个一维3像素图案的示例。

每个CTB根据表2-7被分类为五个类别中的一个。

表2-7–EO的像素分类规则

类别	条件	含义
			0	以下都不是	大体上单调
1	p<2邻域	局部最小
			2	p<1邻域&&p＝＝1邻域	边缘
3	p>1邻域&&p＝＝1邻域	边缘
			4	p>2邻域	局部最大

带偏移(BO)通过使用像素值的五个最高有效比特作为带索引，将一个CTB区域中的全部像素分类为32个均匀的带。换而言之，像素强度范围被分为从零至最大强度值(例如对于8比特像素为255)的32个相等的段。四个相邻带被分组在一起，并且每个组由最左手边位置指示，如图13所示。编码器搜索全部位置以通过补偿每个带的偏移而得到具有最大失真降低的组。

图13示出了被分组在一起且由其起始带位置表示的四个带的示例。

2.10组合的帧间和帧内预测(CIIP)

在VTM5中，当以Merge模式编解码CU时，如果CU含有至少64个亮度样点(即，CU宽度乘以CU高度等于或大于64)，并且如果CU宽度和CU高度两者都小于128个亮度样点，则信令通知附加标志以指示组合帧间/帧内预测(CIIP)模式是否被应用于当前CU。如其名称所指示，CIIP预测将帧间预测信令通知与帧内预测信令通知组合。使用应用于常规Merge模式的相同的帧间预测过程来导出CIIP模式中的帧间预测信令通知P_inter；并且在常规帧内预测过程之后用平面模式导出帧内预测信令通知P_intra。然后，使用加权平均对帧内和帧间预测信令通知进行组合，其中取决于顶部和左侧邻域块(图14所示)的编解码模式计算权重值，如下：

–如果顶部邻域可用且为帧内编解码的，则将isIntraTop设定为1，否则将isIntraTop设定为0；

–如果左侧邻域可用且为帧内编解码的，则将isIntraLeft设定为1，否则将isIntraLeft设定为0；

–如果(isIntraLeft+isIntraLeft)等于2，则wt被设定为3；

–否则，如果(isIntraLeft+isIntraLeft)等于1，则wt被设定为2；

–否则，将wt设定为1。

CIIP预测形成如下：

P_CIIP＝((4-wt)*P_inter+wt*P_intra+2)＞＞2 (3-2)

图14示出了CIIP加权导出中使用的顶部和左侧邻域块的示例。

2.11具有色度缩放的亮度映射(LMCS)

在VTM5中，称为具有色度缩放的亮度映射(LMCS)的编解码工具被添加作为环路滤波之前的新的处理块。LMCS具有两个主要组成部分：1)基于自适应分段线性模型的亮度分量的环路内映射；2)对于色度分量，应用亮度相关的色度残差缩放。图15示出了从解码器角度的LMCS架构。图15中的虚线框指示在映射域中应用该过程的地方；并且这些包含逆量化、逆变换、亮度帧内预测和与亮度残差一起添加亮度预测。图15中的无图案的框指示在原始(即，非映射的)域中应用该过程的地方；并且这些包含环路滤波(诸如去块化、ALF和SAO)、运动补偿预测、色度帧内预测、与色度残差一起添加色度预测，以及储存解码的图片作为参考图片。图15中的带格子的框是新的LMCS功能框，包含亮度信令通知的正映射和逆映射以及亮度相关的色度缩放过程。与VVC中的大多数其他工具相同，可以在序列级使用SPS标志来启用/禁用LMCS。

图15示出了具有色度缩放的亮度映射架构的示例。

2.12双树分割

在当前VVC设计中，对于I条带，每个CTU可以使用隐式四叉树划分来划分为具有64x64亮度样点的编解码单元，并且这些编解码单元是亮度和色度的两个分开的coding_tree语法结构的根。

由于帧内图片中的双树允许在色度编解码树中应用与亮度编解码树相比不同的分割，因此双树引入较长编解码管线，并且色度树中的QTBT MinQTSizeC值范围和MinBtSizeY和MinTTSizeY允许小色度块，诸如2x2、4x2和2x4。这在实际解码器设计中造成困难。此外，诸如CCLM、平面和角度模式的若干预测模式需要乘法。为了缓解上述问题，小色度块尺寸(2x2/2x4/4x2)在双树中被限制作为分割限制。

2.13 JVET-O0050中的最小色度帧内预测单元(SCIPU)

小色度尺寸对硬件实现方式不友好。在双树情况下，具有过小的尺寸的色度块不被允许。然而，在单树情况下，VVC草案5仍允许2x2、2x4、4x2色度块。为限制色度块的尺寸，在单个编解码树中，SCIPU在JVET-O0050中定义为编解码树节点，该编解码树节点的色度块尺寸大于或等于TH色度样点，并且具有小于4TH亮度样点的至少一个子亮度块，其中TH在该投稿(contribution)中被设定为16。要求在每个SCIPU中，全部CB是帧间的，或全部CB是非帧间的，即，帧内或IBC。在非帧间SCIPU的情况下，还要求非帧间SCIPU的色度不应进一步划分，并且SCIPU的亮度允许进一步划分。以此方式，最小色度帧内CB尺寸是16个色度样点，并且移除了2x2、2x4和4x2色度CB。此外，在非帧间SCIPU的情况下，不应用色度缩放。

图16中示出了两个SCIPU示例。在图16(a)中，8x4色度样点的一个色度CB和三个亮度CB(4x8、8x8、4x8亮度CB)形成一个SCIPU，因为自8x4色度样点的三叉树(TT)划分将导致色度CB小于16个色度样点。在图16(b)中，4x4色度样点的一个色度CB(8x4色度样点的左侧)和三个亮度CB(8x4、4x4、4x4亮度CB)形成一个SCIPU，并且4x4样点的另一个色度CB(8x4色度样点的右侧)和两个亮度CB(8x4、8x4亮度CB)形成一个SCIPU，因为自4x4色度样点的二叉树(BT)划分将导致色度CB小于16个色度样点。

图16示出了SCIPU示例。

如果当前条带是I条带或当前SCIPU在在进一步划分一次之后其中具有4x4亮度分割，则SCIPU的类型被推断为非帧间(因为在VVC中不允许帧间4x4)；否则，SCIPU的类型(帧间或非帧间)在解析SCIPU中的CU之前由一个信令通知的标志来指示。

2.14 VVC草案6中的小色度块约束

在VVC草案6(JVET-O2001-vE.docx)中，对小色度块的约束如下实现(相关部分标记为粗斜体)。

2.14.1.1编解码单元语法

允许的四叉划分过程

对该过程的输入为：

–亮度样点中的编解码块尺寸cbSize，

–多类型树深度mttDepth，

–变量treeType指定单树(SINGLE_TREE)还是双树被用于分割CTU，并且当使用双树时，当前处理亮度分量(DUAL_TREE_LUMA)还是色度分量(DUAL_TREE_CHROMA)，

该过程的输出为变量allowSplitQt。

变量allowSplitQt导出如下：

–如果以下条件中的一个或多个为真，则allowSplitQt被设定为等于假(FALSE)：

–treeType等于SINGLE_TREE或DUAL_TREE_LUMA且cbSize小于或等于MinQtSizeY

–treeType等于DUAL_TREE_CHROMA且cbSize/SubWidthC小于或等于MinQtSizeC

–mttDepth不等于0

–treeType等于DUAL_TREE_CHROMA且(cbSize/SubWidthC)小于或等于4

–否则，allowSplitQt被设定为等于真(TRUE)。

允许的二叉划分过程

对该过程的输入为：

–二叉划分模式btSplit，

–亮度样点中的编解码块宽度cbWidth，

–亮度样点中的编解码块高度cbHeight，

–相对于图片的左顶方亮度样点的考虑的编解码块的左顶方亮度样点的位置(x0，y0)，

–多类型树深度mttDepth，

–具有偏移的最大多类型树深度maxMttDepth，

–最大二叉树尺寸maxBtSize，

–最小四叉树尺寸minQtSize，

–分割索引partIdx，

–变量treeType，指定单树(SINGLE_TREE)还是双树被用于分割CTU，并且当使用双树时，当前处理亮度分量(DUAL_TREE_LUMA)还是色度分量(DUAL_TREE_CHROMA)，

该过程的输出为变量allowBtSplit。

表6-2–基于btSplit的parallelTtSplit和cbSize的规范。

变量parallelTtSplit和cbSize如表6-2中所指定地导出。

变量allowBtSplit导出如下：

–如果以下条件中的一个或多个为真，则allowBtSplit被设定为等于假：

–cbSize小于或等于MinBtSizeY

–cbWidth大于maxBtSize

–cbHeight大于maxBtSize

–mttDepth大于或等于maxMttDepth

–treeType等于DUAL_TREE_CHROMA且(cbWidth/SubWidthC)*(cbHeight/SubHeightC)小于或等于16

–否则，如果以下全部条件为真，则allowBtSplit被设定为等于假

–btSplit等于SPLIT_BT_VER

–y0+cbHeight大于pic_height_in_luma_samples

–btSplit等于SPLIT_BT_VER

–cbHeight大于MaxTbSizeY

–x0+cbWidth大于pic_width_in_luma_samples

–btSplit等于SPLIT_BT_HOR

–cbWidth大于MaxTbSizeY

–y0+cbHeight大于pic_height_in_luma_samples

–x0+cbWidth大于pic_width_in_luma_samples

–y0+cbHeight大于pic_height_in_luma_samples

–cbWidth大于minQtSize

–btSplit等于SPLIT_BT_HOR

–x0+cbWidth大于pic_width_in_luma_samples

–y0+cbHeight小于或等于pic_height_in_luma_samples

–否则，如果以下全部条件为真，则allowBtSplit被设定为等于假：

–mttDepth大于0

–partIdx等于1

–MttSplitMode[x0][y0][mttDepth-1]等于parallelTtSplit

–btSplit等于SPLIT_BT_VER

–cbWidth小于或等于MaxTbSizeY

–cbHeight大于MaxTbSizeY

–btSplit等于SPLIT_BT_HOR

–cbWidth大于MaxTbSizeY

–cbHeight小于或等于MaxTbSizeY

–否则，allowBtSplit被设定为等于真。

允许的三叉划分过程

对该过程的输入为：

–三叉划分模式ttSplit，

–亮度样点中的编解码块宽度cbWidth，

–亮度样点中的编解码块高度cbHeight，

–多类型树深度mttDepth

–具有偏移的最大多类型树深度maxMttDepth，

–最大三叉树尺寸maxTtSize，

该过程的输出为变量allowTtSplit。

表6-3–基于ttSplit的cbSize的规范。

变量cbSize如表6-3所指定地导出。

变量allowTtSplit导出如下：

–如果以下条件中的一个或多个为真，则allowTtSplit被设定为等于假：

–cbSize小于或等于2*MinTtSizeY

–cbWidth大于Min(MaxTbSizeY，maxTtSize)

–cbHeight大于Min(MaxTbSizeY，maxTtSize)

–mttDepth大于或等于maxMttDepth

–x0+cbWidth大于pic_width_in_luma_samples

–y0+cbHeight大于pic_height_in_luma_samples

–treeType等于DUAL_TREE_CHROMA且(cbWidth/SubWidthC)*(cbHeight/SubHeightC)小于或等于32

–否则，allowTtSplit被设定为等于真。

等于0的

指定当前编解码单元是以帧间预测模式编解码的。等于1的pred_mode_flag指定当前编解码单元是以帧内预测模式编解码的。

当pred_mode_flag不存在时，其被如下推断：

–如果cbWidth等于4且cbHeight等于4，则pred_mode_flag被推断为等于1。

–否则，pred_mode_flag在解码I条带时被推断为等于1，并且在解码P或B条带时被推断为等于0。

对于x＝x0..x0+cbWidth-1且y＝y0..y0+cbHeight–1，变量CuPredMode[chType][x][y]导出如下：

–如果pred_mode_flag等于0，则CuPredMode[chType][x][y]被设定为等于MODE_INTER。

–否则(pred_mode_flag等于1)，则CuPredMode[chType][x][y]被设定为等于MODE_INTRA。

等于1的

指定当前编解码单元是以IBC预测模式编解码的。等于0的pred_mode_ibc_flag指定当前编解码单元不是以IBC预测模式编解码的。

当pred_mode_ibc_flag不存在时，其被如下推断：

–如果cu_skip_flag[x0][y0]等于1，且cbWidth等于4，且cbHeight等于4，则pred_mode_ibc_flag被推断为等于1。

–否则，如果cbWidth和cbHeight两者都等于128，则pred_mode_ibc_fla g被推断为等于0。

–否则，pred_mode_ibc_flag被推断为在解码I条带时等于sps_ibc_enabled_flag的值，并且在解码P或B条带时等于0。

当pred_mode_ibc_flag等于1时，对于x＝x0..x0+cbWidth–1且y＝y0..y0+cbHeight–1，变量CuPredMode[chType][x][y]被设定为等于MODE_IBC。

3.本公开技术方案解决的技术问题的示例

1.当前IBC视为MODE_TYPE_INTRA并且因此不允许小色度块，导致不必要的编解码效率损失。

2.当前调色板视为MODE_TYPE_INTRA并且因此不允许小色度块，导致不必要的编解码效率损失。

3.当前小色度块约束不考虑色彩子采样格式。

4.当前对小块的相同分割和预测模式约束被应用于全部色度格式。然而，可能期望对4：2：0和4：2：2色度格式的小块设计不同的约束机制。

5.当前调色板模式标志信令通知取决于modeType，这不合期望，因为调色板可能不应用小块约束。

6.在cu_skip_flag等于1但MODE_TYPE等于MODE_TYPE_INTRA的情况下，当前IBC模式标志对P/B条带推断为0，这在语法解析中不合法。

7.当前，对SCIPU亮度块不允许非4x4亮度IBC模式，这可能是不合期望的并可能导致编解码效率损失。

8.2xH色度块仍被允许，这对于硬件实现方式不友好。

9.CIIP被视为MODE_INTER，而其使用帧内预测，这在一些条件下破坏了约束。

10.当应用SCIPU时，色度的增量(delta)QP可以取决于亮度划分被信令通知。例如，当当前块尺寸为亮度样点中的16×8且以垂直TT划分时，可以应用局部双树。指定了

qgOnC＝qgOnC&&(cbSubdiv+2<＝cu_chroma_qp_offset_subdiv)

因此，如果cbSubdiv+2<＝cu_chroma_qp_offset_subdiv，则qgOnC被设定为零。该条件设定假设了色度分量也以TT划分。在局部双树的情况下，色度分量可能不划分，因此cbSubdiv可能大于cu_chroma_qp_offset_subdiv。IsCuChromaQpOffsetCoded应被设定为0，以允许信令通知色度的增量QP。然而，IsCuChromaQpOffsetCoded没有被设定为0，因为qgOnC被设定为0。

4.技术方案和实施例的示例

以下列举的应视为示例。这些技术不应以狭义方式理解。此外，这些技术可以以任意方式组合。

在本文档中，“MxN编解码树节点”指示M×N块，且在亮度样点中M为块宽度而N为块高度，其可以被诸如QT/BT/TT进一步分割。例如，块可以是QT节点，或BT节点，或TT节点。编解码树节点可以是编解码单元(例如，对于单树具有三个色彩分量，对于双树色度编解码具有两个色度色彩分量，并且对于双树亮度编解码仅亮度色彩分量)，或亮度编解码块，或色度编解码块。“小编解码树节点单元”可以指示具有等于亮度样点中的32/64/128的块尺寸MxN的编解码树节点。

如果未明确提到，编解码块的宽度W和高度H是以亮度样点测量的。例如，MxN编解码块意味着MxN亮度块，和/或两个(M/SubWidthC)x(N/SubHeightC)色度块，其中SubWidthC和SubHeightC由色度格式导出如下。

1.是否和/或如何分割为小块可以取决于色彩格式。

a.在一个示例中，对于4：4：4色彩格式，对色度块的尺寸的约束可以遵循对亮度块的那些约束。

b.在一个示例中，对于4：2：2色彩格式，对色度块的尺寸的约束可以遵循对4：2：0色彩格式的那些约束。

c.在一个示例中，对于4：0：0和/或4：4：4色度格式，可以不应用对小块分割和/或预测模式的约束。

d.在一个示例中，对小块分割和/或预测模式的约束对不同色度格式可以不同地应用。

i.在一个示例中，对于具有水平BT划分的MxN(诸如8x8)编解码树节点，在4：2：2色度格式中，可以对色度块和亮度块两者允许水平BT划分，而在4：2：0色度格式中，可以对亮度块允许水平BT划分但对于色度块禁用水平BT划分。

ii.在一个示例中，对于具有垂直BT划分的MxN(诸如16x4)编解码树节点，在4：2：2色度格式中，可以对色度块和亮度块两者允许垂直BT划分，而在4：2：0色度格式中，可以对亮度块允许垂直BT划分但对于色度块禁用垂直BT划分。

iii.在一个示例中，对于具有水平TT划分的MxN(诸如8x16)编解码树节点，在4：2：2色度格式中，可以对色度块和亮度块两者允许水平TT划分，而在4：2：0色度格式中，可以对亮度块允许水平TT划分但对于色度块禁用水平TT划分。

iv.在一个示例中，对于具有垂直TT划分的MxN(诸如32x4)编解码树节点，在4：2：2色度格式中，可以对色度块和亮度块两者允许垂直TT划分，而在4：2：0色度格式中，可以对亮度块允许垂直TT划分但对于色度块禁用垂直TT划分。

v.在一个示例中，对于4：0：0，和/或4：4：4色彩格式，可以不应用小块约束。

e.在一个示例中，是否启用SCIPU取决于色彩格式。

i.在一个示例中，对于4：2：0和4：2：2色彩格式启用SCIPU。

ii.在一个示例中，对于4：0：0和/或4：4：4色彩格式禁用SCIPU。

1.在一个示例中，modeType可以对于4：0：0和/或4：4：4色彩格式总是等于MODE_TYPE_ALL。

2.在一个示例中，modeTypeCondition对于4：0：0和/或4：4：4色彩格式可以总是等于0。

2.如何对编解码树节点的(子)块确定预测模式(和/或modeType)可以取决于色度格式。

a.在一个示例中，如果以下条件中的一个为真，则对于4：2：2色度格式，由该编解码树节点分割的(子)块的modeType可以等于MODE_TYPE_ALL，而对于4：2：0色度格式，modeType可以等于MODE_TYPE_INTRA或MODE_TYPE_INTER。

i.具有水平BT划分的MxN(诸如8x8)编解码树节点

ii.具有垂直BT划分的MxN(诸如16x4)编解码树节点

iii.具有水平TT划分的MxN(诸如8x16)编解码树节点

iv.具有垂直TT划分的MxN(诸如32x4)编解码树节点

3.提出了将MODE_TYPE_INTRA重命名为MODE_TYPE_NO_INTER，并且限制MODE_INTER的使用。

a.在一个示例中，当编解码单元的modeType等于MODE_TYPE_NO_INTER时，可以不允许MODE_INTER。

4.提出了将MODE_TYPE_INTER重命名为MODE_TYPE_NO_INTRA，并且限制MODE_INTRA的使用。

a.在一个示例中，当编解码单元的modeType等于MODE_TYPE_NO_INTRA时，可以不允许MODE_INTRA。

5.模式约束标志可以从不被在4：2：2和/或4：0：0和/或4：4：4色度格式中信令通知。

a.在一个示例中，当式约束标志不存在时，其可以被推断为等于1。

i.替代地，当式约束标志不存在时，其可以被推断为等于0。

6.对具有M作为块宽度和N作为块高度的MxN编解码块是否和/或如何应用SCIPU可以取决于色彩格式是4：2：0还是4：2：2。

a.在一个示例中，在4：2：2色彩格式中，对于具有M作为块宽度和N作为块高度的MxN编解码块，仅如果M乘以N(由M*N指代)等于64或32，则可以启用SCIPU。

b.在一个示例中，M*N＝128的编解码树节点可以从不被视为4：2：2色彩格式中的SCIPU块。

c.在一个示例中，具有BT划分和M*N＝64的编解码树节点可以从不被视为4：2：2色彩格式中的SCIPU块。

d.在一个示例中，具有等于1的split_qt_flag和M*N＝64的编解码树节点，可以是4：2：2色彩格式中的SCIPU块。

e.在一个示例中，具有TT划分和M*N＝64的编解码树节点，可以被视为4：2：2色彩格式中的SCIPU块。

f.在一个示例中，具有BT划分和M*N＝32的编解码树节点，可以被视为4：2：2色彩格式中的SCIPU块。

g.在以上描述中，对于4：2：2色彩格式中的SCIPU块，modeTypeCondition可以总是等于1。

h.在以上描述中，对于4：2：2色彩格式中的SCIPU块，可以对父(parent)节点中的当前块和子叶节点下的全部子块两者仅允许MODE_TYPE_INTRA。

7.在4：2：2色彩格式中，SCIPU块的modeTypeCondition可以总是等于1。

a.在一个示例中，modeTypeCondition对于4：2：2色彩格式可以等于0或1。

b.在一个示例中，对于4：2：2色彩格式中的SCIPU块，modeTypeCondition可以从不等于2。

8.在4：2：2色彩格式中，SCIPU块的modeType可以总是等于MODE_TYPE_INTRA。

a.在一个示例中，modeType在4：2：2色彩格式中可以等于MODE_TYPE_ALL或MODE_TYPE_INTRA。

b.在一个示例中，对于4：2：2色彩格式中的SCIPU块，MODE_TYPE_INTER可以被禁用。

9.是否允许块分割可以取决于modeType，和/或块尺寸。

a.在一个示例中，对块是否允许BT和/或TT划分可以取决于modeType。

i.在一个示例中，如果modeType等于MODE_TYPE_INTER，则对于当前编解码块可以不允许BT划分(例如，allowBtSplit被设定为等于假)。

ii.在一个示例中，如果modeType等于MODE_TYPE_INTER，则对于当前编解码块可以不允许TT划分(例如，allowTtSplit被设定为等于假)。

b.在一个示例中，对块是否允许BT和/或TT划分可以取决于modeType和块尺寸。

i.在一个示例中，对于MxN编解码块，M作为块宽度且N作为块高度，当M*N小于或等于32且modeType等于MODE_TYPE_INTER时，BT划分可以不被允许(例如，

allowBtSplit被设定为等于假)。

ii.在一个示例中，对于MxN编解码块，M作为块宽度且N作为块高度，当M*N小于或等于64且modeType等于MODE_TYPE_INTER，TT划分可以不被允许(例如，allowTtSplit被设定为等于假)。

10.当编解码树的modeTypeCurr等于MODE_TYPE_INTER时，编解码树的划分可以被限制

a.在一个示例中，当编解码树的modeTypeCurr等于MODE_TYPE_INTER时，BT划分可以不被允许。

b.在一个示例中，当编解码树的modeTypeCurr等于MODE_TYPE_INTER时，TT划分可以不被允许。

c.在一个示例中，当编解码树的modeTypeCurr等于MODE_TYPE_INTER时，QT划分可以不被允许。

d.在一个示例中，当编解码树的modeTypeCurr等于MODE_TYPE_INTER且亮度块尺寸小于或等于32时，BT划分可以不被允许。

e.在一个示例中，当编解码树的modeTypeCurr等于MODE_TYPE_INTER且亮度块尺寸小于或等于64时，TT划分可以不被允许。

11.具有treeType为DUAL_TREE_LUMA的编解码单元可以以帧间模式编解码。

a.在一个示例中，以帧间编解码模式(即，MODE_INTER)编解码的编解码单元即使对于具有多个色彩分量的色彩格式也可以仅含有亮度分量。

b.在一个示例中，对DUAL_TREE_LUMA块可能需要解析pred_mode_flag。

c.在一个示例中，对于以帧间模式编解码的DUAL_TREE_LUMA块，也可以应用SINGLE_TREE的帧间模式的相同的约束。

i.在一个示例中，4x4 DUAL_TREE_LUMA帧间块可以不被允许。

12.块宽度等于M(诸如M＝2)色度样点的色度帧内(和/或IBC)块可以不被允许。

a.在一个示例中，2xN(诸如N<＝64)色度帧内块在双树中可以不被允许。

i.在一个示例中，当treeType等于DUAL_TREE_CHROMA且块宽度等于4个色度样点时，垂直BT划分可以被禁用。

ii.在一个示例中，当treeType等于DUAL_TREE_CHROMA且块宽度等于8个色度样点时，垂直TT划分可以被禁用。

b.在一个示例中，2xN(诸如N<＝64)色度帧内(和/或IBC)块在单树中可以不被允许。

i.在一个示例中，对于具有垂直BT划分的MxN(诸如M＝8andN<＝64)编解码树节点，可以应用以下过程中的一个。

1.垂直BT划分可以对于4xN或4x(N/2)色度块不被允许但对于8xN亮度块被允许。

2.4xN或4x(N/2)色度块可以不被垂直BT划分，并且其可以由MODE_INTRA或MODE_IBC编解码。

3.可以对8xN亮度块和4xN或4x(N/2)色度块两者允许垂直BT划分，但亮度和色度块两者不是由MODE_INTRA编解码的(例如，可以由MODE_INTER或MODE_IBC编解码)。

ii.在一个示例中，对于使用垂直TT划分的MxN(诸如M＝16且N<＝64)编解码树节点，可以应用以下过程中的一个。

1.垂直TT划分可以对于8xN或8x(N/2)色度块不被允许但对于16xN亮度块被允许。

2.8xN或8x(N/2)色度块可以不被垂直TT划分且由MODE_INTRA或MODE_IBC编解码。

3.可以对16xN亮度块和8xN或8x(N/2)色度块两者允许垂直TT划分，但亮度和色度块两者都可以不由MODE_INTRA编解码(例如，可以由MODE_INTER或MODE_IBC编解码)。

13.可以对亮度和/或色度块允许IBC模式，而与其是否具有小块尺寸无关。

a.在一个示例中，可以对包含8x4/8x8/16x4和4xN(诸如N<＝64)亮度块的亮度块允许IBC模式，即使modeType等于MODE_TYPE_INTRA。

b.在一个示例中，可以对色度块允许IBC模式，即使modeType等于MODE_TYPE_INTRA。

14.IBC预测模式标志的信令通知可以取决于预测模式类型(例如，MODE_TYPE_INTRA)。

a.在一个示例中，当treeType不等于DUAL_TREE_CHROMA且modeType等于MODE_TYPE_INTRA时，非跳过块(例如不是由跳过模式编解码的编解码块)的IBC预测模式标志可以在比特流中被显式地信令通知。

15.可以取决于CU SKIP标志和模式类型(例如，modeType)推断IBC预测模式标志。

a.在一个示例中，如果当前块是以跳过模式编解码的(诸如cu_skip_flag等于1)，并且modeType等于MODE_TYPE_INTRA，则IBC预测模式标志(诸如pred_mode_ibc_flag)可以被推断为等于1。

16.调色板模式标志的显式信令通知可以不取决于modeType。

a.在一个示例中，调色板模式标志(诸如pred_mode_plt_flag)信令通知可以取决于条带类型、块尺寸、预测模式等，但不论modeType为何。

b.在一个示例中，当modeType等于MODE_TYPE_INTER或MODE_TYPE_INTRA时，调色板模式标志(诸如pred_mode_plt_flag)被推断为0。

17.当modeType等于MODE_TYPE_INTER时，可以允许使用IBC模式

a.在一个示例中，当modeType等于MODE_TYPE_INTRA时，色度IBC可以不被允许。

b.在一个示例中，当modeType等于MODE_TYPE_INTRA或MODE_TYPE_INTER时，可以允许使用IBC模式。

c.在一个示例中，可以允许使用IBC模式，无论modeType为何。

d.在一个示例中，在一个SCIPU内，IBC和帧间模式可以都被允许。

e.在一个示例中，IBC色度块的尺寸可以总是对应于对应的亮度块的尺寸。

f.在一个示例中，当modeType等于MODE_TYPE_INTER且编解码单元尺寸为以亮度的4x4时，pred_mode_ibc_flag的信令通知可以被跳过且pred_mode_ibc_flag可以被推断为等于1。

18.当modeType为MODE_TYPE_INTER时，可以允许使用调色板模式

a.在一个示例中，当modeType为MODE_TYPE_INTRA时，色度调色板可以不被允许。

c.在一个示例中，可以允许使用IBC模式，无论modeType为何。

d.在一个示例中，当modeType等于MODE_TYPE_INTRA或MODE_TYPE_INTER时，可以允许使用调色板模式。

e.在一个示例中，可以允许使用调色板模式，无论modeType为何。

f.在一个示例中，在一个SCIPU内，调色板和帧间模式可以都被允许。

g.在一个示例中，在一个SCIPU内，调色板、IBC和帧间模式可以全部被允许。

h.在一个示例中，调色板色度块的尺寸可以总是对应于对应的亮度块的尺寸。

i.在一个示例中，当modeType等于MODE_TYPE_INTER且编解码单元尺寸为以亮度的4x4时，pred_mode_plt_flag的信令通知可以被跳过且pred_mode_plt_flag可以被推断为等于1。

j.在一个示例中，当modeType等于MODE_TYPE_INTER且编解码单元尺寸为以亮度的4x4时，可以发送一条消息以指示当前预测模式是IBC还是调色板。

k.在一个示例中，启用还是禁用调色板模式可以取决于条带类型和modeType。

i.在一个示例中，对于具有MODE_TYPE_INTRA的I条带，调色板模式可以被启用。

ii.在一个示例中，对于具有MODE_TYPE_INTER的P/B条带，调色板模式可以被启用。

19.当调色板模式被启用时，局部双树可以不被允许。

a.在一个示例中，当调色板模式被启用时，modeTypeCondition可以总是设定为等于0。

20.对于具有等于M(例如，M＝2)的宽度或等于N(例如，N＝2)的高度的小色度块，允许的帧内预测模式可以被限制为与对大色度块允许的那些模式不同。

a.在一个示例中，仅可用色度帧内预测模式的帧内预测模式的子集可以被使用。

b.在一个示例中，仅INTRA_DC模式可以被使用。

c.在一个示例中，仅INTRA_PLANAR模式可以被使用。

d.在一个示例中，仅INTRA_ANGULAR18模式可以被使用。

e.在一个示例中，仅INTRA_ANGULAR50模式可以被使用。

f.在一个示例中，CCLM墨水可以不被允许。

21.对于具有等于M(例如，M＝2)的宽度或等于N(例如，N＝2)的高度的小色度块，变换类型可以被限制为不同于对大色度块允许的那些模式。

a.在一个示例中，仅变换跳过可以被使用。

b.在一个示例中，仅一维变换可以被使用。

c.在一个示例中，支持多个类型的变换的编解码工具不被允许。

i.替代地，支持多个类型的变换的编解码工具的信令通知被省略。

22.CIIP可以被视为MODE_TYPE_INTRA。

a.在一个示例中，当使用双树分割时，CIIP模式可以被允许。

i.在一个示例中，当CU类型具有DUAL_TREEE_CHROMA时，CIIP模式可以被允许。

b.替代地，CIIP可以被视为MODE_TYPE_INTER

i.在一个示例中，当色度块宽度等于M(例如，M＝2)时，CIIP模式可以不被允许。

ii.在一个示例中，当色度块宽度等于M(例如，M＝2)时，CIIP中的色度的帧内预测模式可以被限制为简单帧内预测模式。

1.在一个示例中，当色度块宽度等于M(例如，M＝2)时，INTRA_DC可以被用于色度帧内预测。

2.在一个示例中，当色度块宽度等于M(例如，M＝2)时，INTRA_ANGULAR18可以被用于色度帧内预测。

3.在一个示例中，当色度块宽度等于M(例如，M＝2)时，INTRA_ANGULAR50可以被用于色度帧内预测。

iii.在一个示例中，CIIP中的色度的帧内预测模式可以被限制为简单帧内预测模式。

1.在一个示例中，INTRA_DC可以被用于色度帧内预测。

2.在一个示例中，INTRA_ANGULAR18模式可以被用于色度帧内预测。

3.在一个示例中，INTRA_ANGULAR50模式可以被用于色度帧内预测。

23.对于以上项目符号，变量M和/或N可以预定义或被信令通知。

a.在一个示例中，M和/或N可以进一步取决于色彩格式(例如，4：2：0、4：2：2、4：4：4)。

24.modeType可以扩展以覆盖更多类型。

a.在一个示例中，modeType可以是MODE_TYPE_IBC。当modeType等于MODE_TYPE_IBC时，预测模式推断为IBC。

i.在一个示例中，pred_mode_flag在此情况下不被信令通知。

ii.在一个示例中，pred_mode_ibc_flag在此情况下不被信令通知。

iii.在一个示例中，pred_mode_plt_flag在此情况下不被信令通知。

b.在一个示例中，modeType可以是MODE_TYPE_PALETTE。当modeType等于MODE_TYPE_PALETTE时，预测模式推断为调色板模式。

i.在一个示例中，pred_mode_flag在此情况下不被信令通知。

ii.在一个示例中，pred_mode_ibc_flag在此情况下不被信令通知。

iii.在一个示例中，pred_mode_plt_flag在此情况下不被信令通知。

c.在一个示例中，mode_constraint_flag可以被索引替换以告知使用允许的modeTypes中的哪一个。

25.在一个示例中，对于具有维度W×H的块是否允许QT划分可以取决于与维度组合的modeType。

a.例如，如果modeType等于MODE_TYPE_INTER且W等于8且H等于8，则QT划分不被允许。

26.在一个示例中，对于具有维度W×H的块是否允许垂直TT划分可以取决于与维度组合的modeType。

a.例如，如果modeType等于MODE_TYPE_INTER且W等于16且H等于4，则垂直TT划分不被允许。

27.在一个示例中，对具有维度W×H的块是否允许水平TT划分可以取决于与维度组合的modeType。

a.例如，如果modeType等于MODE_TYPE_INTER且W等于4且H等于16，则水平TT划分不被允许。

28.在一个示例中，对具有维度W×H的块是否允许垂直BT划分可以取决于与维度组合的modeType。

a.例如，如果modeType等于MODE_TYPE_INTER且W等于8且H等于4，则垂直BT划分不被允许。

29.在一个示例中，对具有维度W×H的块是否允许水平BT划分可以取决于与维度组合的modeType。

a.例如，如果modeType等于MODE_TYPE_INTER且W等于4且H等于8，则水平BT划分不被允许。

30.在一个示例中，是否由modeType推断CU的预测模式可以取决于色彩分量和/或块维度W×H。

a.例如，由modeType推断色度CU的预测模式；但亮度CU的预测模式被信令通知而非由modeType推断。

i.例如，如果W>4或H>4，则亮度CU的预测模式被信令通知而非由modeType推断。

31.当应用SCIPU时，是否和/或如何信令通知关于第一分量的增量QP的信息可以取决于第一分量的划分方式。

a.在一个示例中，当应用SCIPU时，是否和/或如何信令通知关于第一分量的增量QP的信息可以取决于第一分量的划分方式，并且与第二分量的划分方式解耦。

b.在一个示例中，第一分量是亮度且第二分量是色度。

c.在一个示例中，第一分量是色度且第二分量是亮度。

32.当应用双树和/或局部双树编解码结构时，与第一分量的增值QP有关的任何变量在第二分量的解码或解析过程期间不可以被修改。

a.在一个示例中，根据SCIPU可以使用局部双树编解码结构。

b.在一个示例中，第一分量是亮度且第二分量是色度。

i.变量可以是IsCuQpDeltaCoded。

c.在一个示例中，第一分量是色度且第二分量是亮度。

i.变量可以是IsCuChromaQpOffsetCoded。

33.当应用SCIPU时，与分量(诸如亮度或色度)的增量QP有关的信息在特定区域中被信令通知至多一次，其中亮度分量和色度分量要求共享相同的模式类型(诸如MODE_TYPE_INTER或MODE_TYPE_INTRA)。

a.在一个示例中，特定区域被视为量化组。

5.实施例

5.1示例性实施例#1

7.4.9.4编解码树语义

变量modeTypeCondition导出如下：

–如果以下条件中的一个为真，则modeTypeCondition被设定为等于0

–slice_type＝＝I且qtbtt_dual_tree_intra_flag等于1

–modeTypeCurr不等于MODE_TYPE_ALL

–否则，如果以下条件中的一个为真，则modeTypeCondition被设定为等于1

–cbWidth*cbHeight等于64且split_qt_flag等于1

–cbWidth*cbHeight等于64且MttSplitMode[x0][y0][mttDepth]等于SPLIT_TT_HOR或SPLIT_TT_VER

–cbWidth*cbHeight等于32且MttSplitMode[x0][y0][mttDepth]等于SPLIT_BT_HOR或SPLIT_BT_VER

–否则，如果以下条件中的一个为真，则modeTypeCondition被设定为等于1+(slice_type！＝I？1：0)

–cbWidth*cbHeight等于64且MttSplitMode[x0][y0][mttDepth]等于SPLIT_BT_HOR或SPLIT_BT_VER

–cbWidth*cbHeight等于128且MttSplitMode[x0][y0][mttDepth]等于SPLIT_TT_HOR或SPLIT_TT_VER

–否则，modeTypeCondition被设定为等于0

5.2示例性实施例#2

7.3.8.5编解码单元语法

5.3示例性实施例#3

以下实施例是关于取决于CU SKIP标志和modeType推断IBC预测模式标志。

等于1的

当前编解码单元是以IBC预测模式编解码的。等于0的pred_mode_ibc_flag指定当前编解码单元不是以IBC预测模式编解码的。

当pred_mode_ibc_flag不存在时，其被如下推断：

–否则，如果modeType等于MODE_TYPE_INTER，则pred_mode_ibc_flag被推断为等于0。

–否则，如果treeType等于DUAL_TREE_CHROMA，则pred_mode_ibc_flag被推断为等于0。

–否则，pred_mode_ibc_flag分别在解码I条带时被推断为等于sps_ibc_enabled_flag的值，并且在解码P或B条带时被推断为0。

当pred_mode_ibc_flag等于1时，对于x＝x0..x0+cbWidth-1且y＝y0..y0+cbHeight–1，变量CuPredMode[chType][x][y]被设定为等于MODE_IBC。

5.4示例性实施例#4

7.3.8.5编解码单元语法

5.5示例性实施例#5

7.4.9.4编解码树语义

变量modeTypeCondition导出如下：

–slice_type＝＝I且qtbtt_dual_tree_intra_flag等于1

–modeTypeCurr不等于MODE_TYPE_ALL

–cbWidth*cbHeight等于64且split_qt_flag等于1

–cbWidth*cbHeight等于64且MttSplitMode[x0][y0][mttDepth]等于SPLIT_BT_HOR或SPLIT_BT_VER且

–cbWidth*cbHeight等于128且MttSplitMode[x0][y0][mttDepth]等于SPLIT_TT_HOR或SPLIT_TT_VER且

–否则，modeTypeCondition被设定为等于0

5.6示例性实施例#6

7.4.9.4编解码树语义

变量modeTypeCondition导出如下：

–slice_type＝＝I且qtbtt_dual_tree_intra_flag等于1

–modeTypeCurr不等于MODE_TYPE_ALL

–cbWidth*cbHeight等于64且split_qt_flag等于1

–否则，modeTypeCondition被设定为等于0

5.7示例性实施例#7

6.4.2允许的二叉划分过程

变量allowBtSplit导出如下：

–cbSize小于或等于MinBtSizeY

–cbWidth大于maxBtSize

–cbHeight大于maxBtSize

–mttDepth大于或等于maxMttDepth

–treeType等于DUAL_TREE_CHROMA且modeType等于MODE_TYPE_INTRA

…

6.4.3允许的三叉划分过程

变量allowTtSplit导出如下：

–cbSize小于或等于2*MinTtSizeY

–cbWidth大于Min(MaxTbSizeY，maxTtSize)

–cbHeight大于Min(MaxTbSizeY，maxTtSize)

–mttDepth大于或等于maxMttDepth

–x0+cbWidth大于pic_width_in_luma_samples

–y0+cbHeight大于pic_height_in_luma_samples

–treeType等于DUAL_TREE_CHROMA且modeType等于MODE_TYPE_INTRA

–否则，allowTtSplit被设定为等于真。

5.8示例性实施例#8

7.3.8.5编解码单元语法

5.9关于在modeType为MODE_TYPE_INTER时不允许块分割的示例性实施例#9(方案1)

6.4.2允许的二叉划分过程

变量allowBtSplit导出如下：

–cbSize小于或等于MinBtSizeY

–cbWidth大于maxBtSize

–cbHeight大于maxBtSize

–mttDepth大于或等于maxMttDepth

–treeType等于DUAL_TREE_CHROMA且modeType等于MODE_TYPE_INTRA

…

6.4.3允许的三叉划分过程

变量allowTtSplit导出如下：

–cbSize小于或等于2*MinTtSizeY

–cbWidth大于Min(MaxTbSizeY，maxTtSize)

–cbHeight大于Min(MaxTbSizeY，maxTtSize)

–mttDepth大于或等于maxMttDepth

–x0+cbWidth大于pic_width_in_luma_samples

–y0+cbHeight大于pic_height_in_luma_samples

–treeType等于DUAL_TREE_CHROMA且modeType等于MODE_TYPE_INTRA

–否则，allowTtSplit被设定为等于真。

5.10关于在modeType为MODE_TYPE_INTER时不允许块分割的示例性实施例#10(方案2)

6.4.2允许的二叉划分过程

变量allowBtSplit导出如下：

–cbSize小于或等于MinBtSizeY

–cbWidth大于maxBtSize

–cbHeight大于maxBtSize

–mttDepth大于或等于maxMttDepth

–treeType等于DUAL_TREE_CHROMA且modeType等于MODE_TYPE_INTRA

…

6.4.3允许的三叉划分过程

变量allowTtSplit导出如下：

–cbSize小于或等于2*MinTtSizeY

–cbWidth大于Min(MaxTbSizeY，maxTtSize)

–cbHeight大于Min(MaxTbSizeY，maxTtSize)

–mttDepth大于或等于maxMttDepth

–x0+cbWidth大于pic_width_in_luma_samples

–y0+cbHeight大于pic_height_in_luma_samples

–treeType等于DUAL_TREE_CHROMA且modeType等于MODE_TYPE_INTRA

–否则，allowTtSplit被设定为等于真。

5.11示例性实施例#11

7.3.8.4编解码树语法

5.12示例性实施例#12

7.4.9.4编解码树语义

变量modeTypeCondition导出如下：

–slice_type＝＝I且qtbtt_dual_tree_intra_flag等于1

–modeTypeCurr不等于MODE_TYPE_ALL

–cbWidth*cbHeight等于64且split_qt_flag等于1

–否则，modeTypeCondition被设定为等于0

–

5.13示例性实施例#13

7.4.9.4编解码树语义

变量modeTypeCondition导出如下：

–slice_type＝＝I且qtbtt_dual_tree_intra_flag等于1

–modeTypeCurr不等于MODE_TYPE_ALL

–cbWidth*cbHeight等于64且split_qt_flag等于1

–否则，如果

以下条件中的一个为真，则modeTypeCondition被设定为等于1+(slice_type！＝I？1：0)

–否则，modeTypeCondition被设定为等于0

5.14 SCIPU中的增量QP信令通知的示例#1

5.15 SCIPU中的增量QP信令通知的示例#2

5.16 SCIPU中的增量QP信令通知的示例#3

5.17 SCIPU中的增量QP信令通知的示例#4

图17是视频处理设备1700的框图。设备1700可以用于实现本文所描述的方法中的一个或多个。设备1700可以实施为智能电话、平板计算机、计算机，物联网(IoT)接收器等等。设备1700可以包含一个或多个处理器1702、一个或多个存储器1704和视频处理硬件1706。(一个或多个)处理器1702可以配置为实现本文档中所描述的一个或多个方法。(一个或多个)存储器1704可以被用于储存用于实现本文中所描述的方法和技术的数据和代码。视频处理硬件1706可以用于在硬件电路中实现本文档中描述的一些技术。在一些实施例中，硬件1706可以至少部分地在处理器1702内，例如，图形协处理器。

图18是处理视频的方法1800的流程图。方法1800包含：为视频的视频区与视频区的编解码表示之间的转换，根据语法规则解析(1802)编解码表示，语法规则定义色度块尺寸与视频区的色彩格式之间的关系；以及通过根据语法规则进行解析来进行(1804)转换。

本公开技术的一些实施例包含进行启用视频处理工具或模式的决定或确定。在示例中，当启用视频处理工具或模式时，编码器将在视频块的处理中使用或实现工具或模式，但可以不必基于工具或模式的使用来修改所得的比特流。即，从视频块到视频的比特流表示的转换将在基于决定或确定启用视频处理工具或模式时使用视频处理工具或模式。在另一示例中，当启用视频处理工具或模式时，解码器将在了解比特流已经被基于视频处理工具或模式修改的情况下处理比特流。即，使用基于决定或确定启用的视频处理工具或模式将进行从视频的比特流表示到视频块的转换。

本公开技术的一些实施例包含进行禁用视频处理工具或模式的决定或确定。在示例中，当禁用视频处理工具或模式时，编码器在视频块到视频的比特流表示的转换中将不使用工具或模式。在另一示例中，当禁用视频处理工具或模式时，解码器将在了解比特流未被使用基于决定或确定禁用的视频处理工具或模式修改的情况下处理比特流。

在本文档中，术语“视频处理”可以指代视频编码、视频解码、视频压缩或视频解压缩。例如，在从视频的像素表示到对应的比特流表示的转换期间可以应用视频压缩算法，反之亦然。当前视频块的比特流表示可以例如对应于共位的或分布在比特流内的不同位置的比特，如由语法定义的。例如，宏块可以就变换和编解码的误差残差值而言被编码，并且也使用比特流中的头和其他字段中的比特。

在一些实施例中可以实现以下第一组条款。

以下条款可以与之前章节的项目1中描述的附加技术一起实现。

1.一种视频处理的方法，包括：为视频的视频区与视频区的编解码表示之间的转换，根据语法规则解析编解码表示，语法规则定义色度块尺寸与视频区的色彩格式区之间的关系；并且通过根据语法规则进行解析来进行转换。

2.如条款1所述的方法，其中色彩格式是4：4：4，并且其中语法规则指定色度块经受与亮度块相同的尺寸约束。

3.如条款1所述的方法，其中色彩格式是4：2：2，并且其中语法规则指定色度块经受与4：2：0色彩格式相同的尺寸约束。

4.如条款1-3中任一项所述的方法，其中语法指定以色度格式相关的方式使用预测模式和小块分割。

5.如条款1所述的方法，其中语法规则定义基于视频区的色彩格式对视频区的转换启用最小允许尺寸特征。

以下条款可以与之前章节的项目2中描述的附加技术一起实现。

6.一种视频处理的方法，包括：基于视频的性质和视频的色度格式，确定视频的编解码树节点的编解码模式；以及使用确定的编解码模式进行视频的编解码表示与编解码树节点的视频块之间的转换。

7.如条款6所述的方法，其中具有以下性质的情况下，编解码模式对于作为4：2：2的色度格式被确定为MODE_TYPE_ALL，对于作为4：2：0的色度格式被确定为MODE_TYPE_INTRA或MODE_TYPE_INTER：

i.编解码节点是具有水平二叉树划分的MxN编解码树节点；

ii.编解码节点是具有垂直二叉树划分的MxN编解码树节点；

iii.编解码节点是具有水平三叉树划分的MxN编解码树节点；或

iv.编解码节点是具有垂直三叉树划分的MxN编解码树节点。

8.如条款7所述的方法，其中M＝8或16或32，并且N＝4或8或16。

以下条款可以与之前章节的项目12中描述的附加技术一起实现。

9.一种视频处理的方法，包括：基于规则确定在视频的视频区中是否允许某尺寸的色度块；以及基于确定进行视频区与视频区的编解码表示之间的转换。

10.如条款9所述的方法，其中规则指定由于视频区包含双树分割，2xN色度块不被允许。

11.如条款9所述的方法，其中规则指定，由于视频区包含单树分割，2N色度块不被允许。

12.如条款10或11所述的方法，其中N<＝64。

以下条款可以与之前章节的项目13、14和15中描述的附加技术一起实现。

13.一种视频处理的方法，包括：基于对视频条件允许使用编解码模式的规则，确定了对视频区允许编解码模式；以及基于确定进行视频区中的像素的编解码表示与视频区的像素之间的转换。

14.如条款13所述的方法，其中视频条件是块尺寸，并且其中规则允许对小块尺寸的亮度块使用帧内块复制模式。

15.如条款14所述的方法，其中小块尺寸包含8x4、8x8、16x4或4xN亮度块尺寸。

16.如条款13所述的方法，其中规则允许对使用编解码的MODE_TYPE_INTER模式的视频区的转换使用帧内块复制模式。

17.如条款13所述的方法，其中规则允许对使用编解码的MODE_TYPE_INTER模式的视频区的转换使用调色板编解码模式。

以下条款可以与之前章节的项目16、17、18中描述的附加技术一起实现。

18.一种视频处理的方法，包括：使用视频编解码模式进行视频的视频块与视频块的编解码表示之间的转换，其中信令通知编解码模式的语法元素基于规则被选择性地包含在编解码表示中。

19.如条款18所述的方法，其中视频编解码模式是帧内块编解码模式，并且其中规则指定使用视频编解码模式的类型来控制语法元素在编解码表示中的包含。

20.如条款19所述的方法，其中规则指定显式地信令通知非跳过块。

21.如条款18所述的方法，其中规则指定基于跳过标志和视频块的模式类型隐式地信令通知帧内块复制标志。

22.如条款18所述的方法，其中编解码模式是调色板编解码模式，并且其中规则指定基于视频块的模式类型选择性地包含调色板编解码指示符。

以下条款可以与之前章节的项目21中描述的附加技术一起实现。

23.一种视频处理的方法，包括：由于色度块的尺寸小于阈值尺寸，确定在色度块与色度块的编解码表示之间的转换期间所使用的变换类型与用于对应的亮度块转换的变换类型不同；以及基于确定进行转换。

24.如条款23所述的方法，其中阈值尺寸是MxN，其中M是2。

以下条款可以与之前章节的项目22中描述的附加技术一起实现。

25.如条款1至24中任一项所述的方法，其中，转换使用组合帧间和帧内预测模式作为MODE_TYPE_INTRA模式。

26.如条款18至22中任一项所述的方法，其中转换使用组合帧间和帧内预测模式作为MODE_TYPE_INTER模式。例如，当考虑CIIP作为MODE_TYPE_INTER时，可以应用在项目之前章节中的14-17中描述的方法。或当应用项目14-16中描述的方法时，CIIP可以被视为MODE_TYPE_INTER。

以下条款可以与之前章节的项目3-6中描述的附加技术一起实现。

27.一种视频处理的方法，包括：基于视频区的编解码条件，确定在视频区的编解码表示与视频区的像素值的转换期间是否强制最小色度块规则；以及基于确定进行转换。

28.如条款27所述的方法，其中编解码条件包括视频区的色彩格式。

29.如条款28所述的方法，其中视频区具有M像素的宽度和N像素的高度，并且其中编解码条件还取决于M和/或N的值。

30.如条款29所述的方法，其中由于视频区具有4：2：2色彩格式且M*N＝32或M*N＝64而启用最小色度块规则。

以下条款可以与之前章节的项目7-11中描述的附加技术一起实现。

31.一种视频处理的方法，包括：为4：2：2格式的视频区的编解码表示与视频区的像素值之间的转换，基于对视频区是否启用最小色度块规则，确定要用于转换的模式类型；以及基于确定进行转换。

32.如条款31所述的方法，其中由于视频区具有4：2：2格式且启用最小色度块规则，视频区的模式类型被设定为1。

33.如条款31所述的方法，其中确定模式类型包含：由于对视频区启用最小色度块规则，将模式类型确定为帧内(INTRA)类型。

34.如条款31所述的方法，其中确定模式类型包含：由于对视频区启用最小色度块规则，确定模式类型帧间(INTER)被禁用。

35.一种视频处理的方法，包括：为视频块的编解码表示与视频的视频块之间的转换，基于在转换期间使用的模式类型或视频块的维度，确定在转换期间是否允许块分割；以及使用确定进行转换。

36.如条款35所述的方法，其中块分割包括二叉树分割或三叉树分割。

37.如条款35-36中任一项所述的方法，其中，在模式类型是帧间(INTER)模式的情况下，块分割是基于允许或不允许分割类型的限制规则。

38.如条款1至37中任一项所述的方法，其中转换包括将视频编码为编解码表示。

39.如条款1至37中任一项所述的方法，其中转换包括解码编解码表示以生成视频的像素值。

40.一种视频解码设备，包括处理器，处理器配置为实现条款1至39中一项或多项所列举的方法。

41.一种视频编码设备，包括处理器，处理器配置为实现条款1至39中一项或多项所列举的方法。

42.一种计算机程序产品，具有其上储存的计算机代码，当由处理器执行代码时，使处理器实现条款1至39中任一项所列举的方法。

43.一种本文档中描述的方法、设备或系统。

第二组条款描述之前章节(例如，项目1、3-11、18、19和24)中的本公开技术的某些特征和方面。

1.一种视频处理的方法(例如，图21A所示的方法2110)，包括：为视频的视频区与所述视频的编解码表示之间的转换，根据规则基于所述视频的色彩格式确定(2112)所述视频区的帧内编解码特性；以及根据所述帧内编解码特性进行(2114)所述转换。

2.如条款1所述的方法，其中所述规则指定，在所述视频区的色彩格式是4：0：0或4：4：4的情况下，所述帧内编解码特性是对所述视频区启用全部编解码模式，并且其中所述编解码表示包含指示用于所述视频区的模式类型的语法元素的MODE_TYPE_ALL值。

3.如条款1-2中任一项所述的方法，其中所述规则指定，在所述色彩格式是4：0：0或4：4：4的情况下，所述编解码表示包含指示确定模式类型的条件的语法元素被设定为0。

4.如条款1-3中任一项所述的方法，其中所述规则指定，是否启用对所述视频区中的帧内编解码色度块的最小允许尺寸的限制取决于所述色彩格式。

5.如条款4所述的方法，其中所述规则指定对4：2：0和4：2：2格式启用所述限制。

6.如条款4所述的方法，其中所述规则指定对4：0：0和4：4：4格式禁用所述限制。

7.一种视频处理的方法(例如，图21B中所示的方法2120)，包括：进行(2122)视频的当前视频块与所述视频的编解码表示之间的转换，其中所述编解码表示符合格式规则，并且其中所述格式规则指定语法元素modeType，所述语法元素modeType指示所述当前视频块的编解码模式，所述编解码模式等于MODE_TYPE_NO_INTER或者MODE_TYPE_NO_INTRA，所述MODE_TYPE_NO_INTER限制将所述帧间编解码模式用于所述转换，所述MODE_TYPE_NO_INTRA限制将所述帧内模式用于所述转换。

8.一种视频处理的方法(例如，图21B中所示的方法2120)，包括：进行(2122)视频与所述视频的编解码表示之间的转换，其中所述编解码表示符合格式规则，所述格式规则指定标志，所述标志指示，所述视频的色度格式是4：2：2、4：0：0或4：4：4的情况下，预测模式约束不被包含在所述编解码表示中。

9.如条款8所述的方法，其中在所述标志不存在的情况下，对应的值被推断为0或1。

10.一种视频处理的方法(例如，图21C中所示的方法2130)，包括：为视频的视频区与所述视频的编解码表示之间的转换，根据规则确定(2132)对所述视频区是否和/或如何启用对最小色度帧内预测块的尺寸的限制；以及基于所述确定进行(2134)所述转换，其中所述规则取决于所述视频的色彩格式是4：2：0还是4：2：2。

11.一种视频处理的方法，包括：为视频的视频区与所述视频的编解码表示之间的转换，根据规则确定对所述视频区是否启用对最小色度帧内预测块的尺寸的限制；以及基于所述确定进行所述转换，其中所述规则取决于所述视频的色彩格式和/或所述视频区的宽度(M)和高度(N)，并且其中所述规则还指定，对于作为具有BT(二叉树)划分的编解码树节点的所述视频区，则在以下情况下禁用对所述最小色度帧内预测块的限制：1)所述视频的色彩格式是4：2：2；并且2)M和N的乘积是来自值的集合中的值，其中所述值的集合包含64。

12.如条款11所述的方法，其中所述规则还指定在以下情况下启用对所述最小色度帧内预测块的限制：1)所述视频的色彩格式是4：2：2；并且2)所述值的集合还包含32。

13.如条款11所述的方法，其中所述规则还指定在以下情况下禁用对所述最小色度帧内预测块的限制：1)所述视频的色彩格式是4：2：2；并且2)所述值的集合还包含128。

14.如条款11所述的方法，其中所述规则还指定，对于作为具有等于1的split_qt_flag的编解码树节点的所述视频区，在所述视频的色彩格式是4：2：2的情况下启用对所述最小色度帧内预测块的限制。

15.如条款11所述的方法，其中所述规则还指定，对于作为具有TT(三叉树)划分的编解码树节点的所述视频区，在所述视频的色彩格式是4：2：2的情况下启用对所述最小色度帧内预测块的限制。

16.如条款11所述的方法，其中所述规则还指定，对于作为具有BT(二叉树)划分的编解码树节点的所述视频区，在以下情况下启用对所述最小色度帧内预测块的限制：1)所述视频的色彩格式是4：2：2；并且2)所述值的集合还包含32。

17.如条款11至16中任一项所述的方法，其中所述规则还指定，对于具有4：2：2色彩格式的所述视频中的所述最小色度帧内预测块，modeTypeCondition总是等于1。

18.如条款11至17中任一项所述的方法，其中所述规则还指定，对于具有4：2：2色彩格式的所述视频中的所述最小色度帧内预测块，仅允许MODE_TYPE_INTRA，所述MODE_TYPE_INTRA允许对所述转换使用帧内模式、调色板模式，以及帧内块复制模式。

19.一种视频处理的方法，包括：根据对最小色度帧内预测块尺寸的限制，进行视频的视频区与所述视频的编解码表示之间的转换，其中所述编解码表示符合格式规则，所述格式规则由于所述视频的4：2：2色彩格式而指定所述编解码表示中的语法字段的值。

20.如条款19所述的方法，其中所述语法字段对应于所述SCIPU块的modeTypeCondition，并且其中所述格式规则由于所述4：2：2色彩格式还指定所述modeTypeCondition总是1。

21.如条款19所述的方法，其中所述语法字段对应于所述SCIPU块的modeTypeCondition，并且其中所述格式规则由于所述4：2：2色彩格式还指定所述modeTypeCondition是0或1。

22.如条款19所述的方法，其中所述语法字段对应于所述SCIPU块的modeTypeCondition，并且其中所述格式规则由于所述4：2：2色彩格式还指定所述modeTypeCondition不是2。

23.如条款19所述的方法，其中所述语法字段对应于所述SCIPU块的modeType，并且其中所述格式规则由于所述4：2：2色彩格式还指定所述modeType总是等于MODE_TYPE_INTRA，所述MODE_TYPE_INTRA允许使用帧内模式、调色板模式，以及帧内块复制模式。

24.如条款19所述的方法，其中所述语法字段对应于所述SCIPU块的modeType，并且其中所述格式规则由于所述4：2：2色彩格式还指定所述modeType等于1)MODE_TYPE_ALL，所述MODE_TYPE_ALL允许对所述转换使用帧间编解码模式、帧内模式、调色板模式，以及帧内块复制模式；或2)MODE_TYPE_INTRA，所述MODE_TYPE_INTRA允许使用帧内模式、调色板模式，以及帧内块复制模式。

25.如条款19所述的方法，其中所述语法字段对应于所述SCIPU块的modeType，并且其中所述格式规则由于所述4：2：2色彩格式还指定所述modeType不对应于MODE_TYPE_INTER，所述MODE_TYPE_INTER仅允许对所述转换使用帧间模式。

26.一种视频处理的方法(例如，图21D中所示的方法2140)，包括：为视频的当前视频块与所述视频的编解码表示之间的转换，根据规则确定(2142)分割方案对所述当前视频块的适用性；以及基于所述确定进行(2144)所述转换。

27.如条款26所述的方法，其中所述规则指定，所述确定基于在所述转换期间使用的模式类型或所述当前视频块的维度中的至少一者来确定所述适用性，并且其中所述分割方案包括BT(二叉树)划分和/或TT(三叉树)划分。

28.如条款27所述的方法，其中在所述模式类型等于仅允许对所述转换使用帧间模式的MODE_TYPE_INTER的情况下，对所述当前视频块不允许所述BT划分。

29.如条款27所述的方法，其中在所述模式类型等于仅允许对所述转换使用帧间模式的MODE_TYPE_INTER的情况下，对所述当前视频块不允许所述TT划分。

30.如条款27所述的方法，其中在M*N小于或等于32且所述模式类型等于仅允许对所述转换使用帧间模式的MODE_TYPE_INTER的情况下，不允许所述BT划分，从而M和N对应于所述当前视频块的高度和宽度。

31.如条款27所述的方法，其中在M*N小于或等于64且所述模式类型等于仅允许对所述转换使用帧间模式的MODE_TYPE_INTER的情况下，不允许所述TT划分，从而M和N对应于所述当前视频块的高度和宽度。

32.如条款26所述的方法，其中所述规则指定，基于语法元素modeTypeCurr限制某分割方案，所述语法元素modeTypeCurr被包含在所述编解码表示中并描述在所述转换期间使用的模式类型，并且其中所述某分割方案包括BT(二叉树)划分、TT(三叉树)划分，和/或QT(四叉树)划分。

33.如条款32所述的方法，其中，由于所述modeTypeCurr等于仅允许对所述转换使用帧间模式的MODE_TYPE_INTER，因而不允许所述BT划分。

34.如条款32所述的方法，其中，由于所述modeTypeCurr等于仅允许对所述转换使用帧间模式的MODE_TYPE_INTER，因而不允许所述TT划分。

35.如条款32所述的方法，其中，由于所述modeTypeCurr等于仅允许对所述转换使用帧间模式的MODE_TYPE_INTER，因而不允许所述QT划分。

36.如条款32所述的方法，其中在所述modeTypeCurr等于仅允许对所述转换使用帧间模式的MODE_TYPE_INTER且亮度块尺寸小于或等于32的情况下，不允许所述BT划分。

37.如条款32所述的方法，其中在所述modeTypeCurr等于仅允许对所述转换使用帧间模式的MODE_TYPE_INTER且亮度块尺寸小于或等于64的情况下，不允许所述TT划分。

38.一种视频处理的方法(例如，图21E所示的方法2150)，包括：为视频的视频块与所述视频的编解码表示之间的转换，根据规则确定(2152)是否启用帧间模式，以及基于所述确定进行(2154)所述转换，其中所述规则指定，在对所述视频块启用亮度样点的双树分割的情况下，启用所述帧间模式。

39.如条款38所述的方法，其中所述编解码表示包含等于DUAL_TREE_LUMA的语法字段。

40.如条款38所述的方法，其中以所述帧间模式编解码的所述编解码单元仅对具有多个色彩分量的色彩格式含有所述亮度样点。

41.如条款38所述的方法，其中所述编解码表示包含指示应用于所述视频块的预测模式的标志，并且对与具有双树类型的亮度块相对应的所述视频块解析所述标志。

42.如条款38所述的方法，其中所述规则还指定，无论对所述视频块启用所述亮度样点的双树分割还是单树分割，都应用关于所述帧间模式的相同的约束。

43.一种视频处理的方法(例如，图21F所示的方法2160)，包括：为视频的视频区与所述视频的编解码表示之间的转换，基于规则确定(2162)是否允许对所述视频区使用调色板模式；以及基于所述确定进行(2164)所述转换，其中所述调色板模式包含使用代表性样点值的调色板编码所述视频区。

44.如条款43所述的方法，所述规则指定，在所述视频区的模式类型等于MODE_TYPE_INTRA或MODE_TYPE_INTER的情况下，允许所述调色板模式，所述MODE_TYPE_INTRA允许对所述转换使用帧内模式、调色板模式和帧内块复制模式，所述MODE_TYPE_INTER仅允许对所述转换使用帧间模式。

45.如条款43所述的方法，其中所述规则指定独立于所述视频区的模式类型而允许所述调色板模式。

46.如条款43所述的方法，其中所述规则是基于所述视频区的条带类型和模式类型。

47.如条款46所述的方法，其中所述规则指定，对于具有等于MODE_TYPE_INTRA的模式类型的I条带允许所述调色板模式，所述MODE_TYPE_INTRA对所述转换允许使用帧内模式、调色板模式和帧内块复制模式。

48.如条款46所述的方法，其中所述规则指定，对具有等于MODE_TYPE_INTRA的模式类型的P/B条带允许所述调色板模式，所述MODE_TYPE_INTRA对所述转换允许使用帧内模式、调色板模式和帧内块复制模式。

49.如条款43所述的方法，其中所述规则还指定，在允许所述调色板模式的情况下，不允许局部双树。

50.如条款43所述的方法，其中在启用所述调色板模式的情况下，modeTypeCondition总是设定为0。

51.一种视频处理的方法，包括：进行视频的当前视频块与所述视频的编解码表示之间的转换，其中所述编解码表示符合格式规则，其中所述格式规则指定语法元素modeType，所述语法元素modeType包含对所述转换允许使用帧内块复制模式的MODE_TYPE_IBC或对所述转换允许使用调色板模式的MODE_TYPE_PALETTE，其中所述帧内块复制模式包含至少使用指向含有所述当前视频块的视频帧的块矢量来编码所述当前视频块，并且其中所述调色板模式包含使用代表性样点值的调色板来编码所述当前视频块。

52.如条款51所述的方法，其中所述格式规则还指定，在所述modeType是所述MODE_TYPE_IBC或所述MODE_TYPE_PALETTE的情况下，所述编解码表示不包含pred_mode_flag、pred_mode_ibc_flag和/或pre_mode_plt_flag。

53.如条款51所述的方法，其中所述编解码表示包含指示用于所述转换的模式类型的索引而非mode_constraint_flag。

54.如条款1至53中任一项所述的方法，其中所述转换包含将所述视频编码为所述编解码表示。

55.如条款1至53中任一项所述的方法，其中所述转换包含解码所述编解码表示以生成所述视频。

56.一种视频处理设备，包括处理器，所述处理器配置为实现条款1至55中任一项所述的方法。

57.一种计算机可读介质，储存程序代码，所述程序代码当被执行时，使处理器实现条款1至55中任一项所述的方法。

58.一种计算机可读介质，储存根据上述方法中任一项生成的编解码表示或比特流表示。

第三组条款描述之前章节(例如，项目25-33)中的本公开技术的某些特征和方面。

1.一种视频处理的方法，包括：为视频的当前视频块与所述视频的编解码表示之间的转换，根据规则确定对所述当前视频块是否允许某分割方案，所述规则取决于用于在所述编解码表示中表示所述当前视频块的编解码模式类型和所述当前视频块的维度；以及基于所述确定进行所述转换。

2.如条款1所述的方法，其中所述某分割方案包括QT(四叉树)划分、垂直TT(三叉树)划分、水平TT划分、垂直BT(二叉树)划分和/或水平BT划分，在所述QT(四叉树)划分中所述当前视频块在水平方向和垂直方向上被划分为四个部分，在所述垂直TT(三叉树)划分中所述当前视频块在垂直方向上被划分为三个部分，在所述水平TT划分中所述当前视频块在水平方向上被划分为三个部分，在所述垂直BT(二叉树)划分中所述当前视频块在垂直方向上被划分为两个部分，在所述水平BT划分中所述当前视频块在水平方向上被划分为两个部分。

3.如条款1所述的方法，其中所述规则指定在以下情况下对所述当前视频块不允许QT(四叉树)划分：1)所述编解码表示包含与对所述当前视频块仅允许帧间模式的编解码模式类型相对应的MODE_TYPE_INTER值；并且2)所述当前视频块的宽度和高度都是8。

4.如条款1所述的方法，其中所述规则指定在以下情况下对所述当前视频块不允许TT(三叉树)划分：1)所述编解码表示包含与对所述当前视频块仅允许帧间模式的编解码模式类型相对应的MODE_TYPE_INTER值；以及2)所述当前视频块的宽度和高度的乘积是64。

5.如条款4所述的方法，其中所述规则还指定，在所述编解码表示包含MODE_TYPE_INTER值且所述当前视频块的宽度和高度分别是16和4的情况下，不允许垂直TT(三叉树)划分。

6.如条款4所述的方法，其中所述规则还指定，在所述编解码表示包含MODE_TYPE_INTER值且所述当前视频块的宽度和高度分别是4和16的情况下，不允许水平TT(三叉树)划分。

7.如条款1所述的方法，其中所述规则指定在以下情况下对所述当前视频块不允许BT(二叉树)划分：1)所述编解码表示包含与对所述当前视频块仅允许帧间模式的编解码模式类型相对应的MODE_TYPE_INTER值；以及2)所述当前视频块的宽度和高度的乘积是32。

8.如条款7所述的方法，其中所述规则还指定，在所述编解码表示包含MODE_TYPE_INTER值且所述当前视频块的宽度和高度分别是8和4的情况下，不允许垂直BT(二叉树)划分。

9.如条款7所述的方法，其中所述规则指定，在所述编解码表示包含MODE_TYPE_INTER值且所述当前视频块的宽度和高度分别是4和8的情况下，不允许水平BT(二叉树)划分。

10.一种视频处理的方法，包括：进行视频的视频块与所述视频的编解码表示之间的转换，其中所述编解码表示符合格式规则，其中所述格式规则指定所述视频块的特性控制所述编解码表示中的语法元素是否指示所述视频块的预测模式。

11.如条款10所述的方法，其中所述视频块的特性包含色彩分量中的一个或所述视频块的维度。

12.如条款10或11所述的方法，其中所述格式规则还指定所述语法元素指示与色度块相对应的所述视频块的预测模式。

13.如条款10至12中任一项所述的方法，其中所述格式规则还指定，所述语法元素不指示与亮度块相对应的所述视频块的预测模式和与所述亮度块相对应的所述视频块的预测模式被包含在所述编解码表示中。

14.如条款13所述的方法，其中所述视频块的宽度和高度都大于4。

15.一种视频处理的方法，包括：进行视频的第一分量的视频区与所述视频的编解码表示之间的转换，其中所述编解码表示符合格式规则，其中所述格式规则指定，在所述编解码表示中是否和/或如何配置语法字段以指示所述视频区的差分量化参数取决于用于划分所述第一分量的样点的划分方案。

16.如条款15所述的方法，其中所述格式规则还指定，在所述编解码表示中是否和/或如何配置所述语法字段是独立于用于划分所述视频的第二分量的样点的划分方案的。

17.如条款15或16所述的方法，其中所述第一分量是亮度分量且所述第二分量是色度分量。

18.如条款15或16所述的方法，其中所述第一分量是色度分量且所述第二分量是亮度分量。

19.如条款15所述的方法，其中所述格式规则还指定在其中亮度分量和色度分量共享相同模式类型的特定区域中包含与所述差分量化参数有关的信息至多一次。

20.如条款19所述的方法，其中所述特定区域对应于量化组。

21.一种视频处理的方法，包括：根据规则进行视频的第一分量的视频区与所述视频的编解码表示之间的转换，其中所述规则指定，在双树和/或局部双树编解码结构被应用于所述视频区的情况下，在所述视频的第二分量的解码或解析过程期间不修改与所述第一分量的差分量化参数有关的变量。

22.如条款21所述的方法，其中在对色度块的最小允许尺寸的限制被应用于所述视频区的情况下，所述局部双树结构被应用于所述视频区。

23.如条款21或22所述的方法，其中所述第一分量是亮度分量且所述第二分量是色度分量。

24.如条款21或22所述的方法，其中所述第一分量是色度分量且所述第二分量是亮度分量。

25.如条款21至24中任一项所述的方法，其中所述差分量化参数指示应用于所述视频块的量化值与应用于邻域视频块的之前的量化值之间的差。

26.如条款1至25中任一项所述的方法，其中进行所述转换包含从所述视频生成所述编解码表示。

27.如条款1至25中任一项所述的方法，其中进行所述转换包含从所述编解码表示生成所述视频。

28.一种视频处理设备，包括处理器，所述处理器配置为实现条款1至27中任一项所述的方法。

29.一种计算机可读介质，储存程序代码，所述程序代码当被执行时使处理器实现条款1至27中任一项所述的方法。

30.一种计算机可读介质，储存根据上述方法中任一项生成的编解码表示或比特流表示。

本文档中描述的所公开的和其他的解决方案、示例、实施例、模块和功能操作可以以数字电子电路或计算机软件、固件或硬件来实现，包括本文档中公开的结构及其结构等同，或其中一种或多种的组合。所公开的实施例和其他实施例可以被实现为一个或多个计算机程序产品，即，在计算机可读介质上编码的计算机程序指令的一个或多个模块，以由数据处理装置执行或控制数据处理装置的操作。所述计算机可读介质可以是机器可读存储设备、机器可读存储基板、存储器装置、实现机器可读传播信号的物质组成或它们中的一个或多个的组合。术语“数据处理装置”涵盖用于处理数据的所有设备、装置和机器，例如包括可编程处理器、计算机或多个处理器或计算机。除了硬件之外，设备还可以包含为所讨论的计算机程序创建执行环境的代码，例如，构成处理器固件、协议栈、数据库管理系统、操作系统或它们中的一个或多个组合的代码。传播的信号是人工产生的信号，例如机器产生的电、光或电磁信号，其被产生以对信息进行编码以传输到合适的接收器设备。

计算机程序(也称为程序、软件、软件应用、脚本或代码)可以用任何形式的编程语言(包括编译或解释语言)编写，并且可以以任何形式进行部署，包括独立程序或适合在计算环境中使用的模块、组件、子例程或其他单元。计算机程序不一定与文件系统中的文件相对应。程序可以存储在保存其他程序或数据的文件的一部分中(例如，存储在标记语言文档中的一个或多个脚本)，专用于所讨论程序的单个文件中或多个协调文件(例如，存储一个或多个模块、子程序或部分代码的文件)。可以将计算机程序部署为在一台计算机上执行，或者在位于一个站点上或分布在多个站点上并通过通信网络互连的多台计算机上执行。

本文档中描述的过程和逻辑流程可以由一个或多个可编程处理器执行，该可编程处理器执行一个或多个计算机程序以通过对输入数据进行操作并生成输出来执行功能。处理和逻辑流程也可以由专用逻辑电路执行，并且装置也可以实现为专用逻辑电路，例如，FPGA(现场可编程门阵列)或ASIC(应用专用集成电路)。

例如，适合于执行计算机程序的处理器包括通用和专用微处理器，以及任何种类的数字计算机的任何一个或多个处理器。通常，处理器将从只读存储器或随机存取存储器或两者接收指令和数据。计算机的基本元件是用于执行指令的处理器和用于存储指令和数据的一个或多个存储设备。通常，计算机还将包括或可操作地耦合以从一个或多个大容量存储设备(例如，磁、磁光盘或光盘)接收数据或将数据传输到一个或多个大容量存储装置或将数据传输到这两个或多个存储装置。但是，计算机不必具有此类装置。适用于存储计算机程序指令和数据的计算机可读介质包括所有形式的非易失性存储器、介质和存储器装置，包括例如半导体存储器装置，例如EPROM、EEPROM和闪存设备；磁盘，例如内部硬盘或可移动磁盘；磁光盘；以及CD ROM和DVD-ROM盘。处理器和存储器可以由专用逻辑电路补充或并入专用逻辑电路中。

虽然该专利文件包含许多细节，但是这些细节不应被解释为对任何主题或所要求保护的范围的限制，而是对特定于特定技术的具体实施例的特征的描述。在单独的实施例的上下文中在该专利文件中描述的某些特征也可以在单个实施例中组合实现。相反，在单个实施例的上下文中描述的各种特征也可以分别在多个实施例中或以任何合适的子组合来实现。而且，尽管以上可以将特征描述为以某些组合起作用并且甚至最初如此要求保护，但是在某些情况下，可以从组合中剔除所要求保护的组合中的一个或多个特征，并且所要求保护的组合可以涉及子组合或子组合的变体。

类似地，虽然在附图中以特定顺序描绘了操作，但是这不应被理解为要求以所示的特定顺序或以连续的顺序执行这样的操作，或者执行所有示出的操作以实现期望的效果。此外，在该专利文档中描述的实施例中的各种系统组件的分离不应被理解为在所有实施例中都需要这种分离。

仅描述了一些实施方式和示例，并且基于该专利文件中所描述和示出的内容可以进行其他实施方式、增强和变化。

Claims

1.一种视频处理的方法，包括：

为视频的视频区与所述视频的编解码表示之间的转换，根据规则基于所述视频的色彩格式确定所述视频区的帧内编解码特性；以及

根据所述帧内编解码特性进行所述转换。

2.如权利要求1所述的方法，其中所述规则指定，在所述视频区的色彩格式是4：0：0或4：4：4的情况下，所述帧内编解码特性是对所述视频区启用全部编解码模式，并且其中所述编解码表示包含指示用于所述视频区的模式类型的语法元素的MODE_TYPE_ALL值。

3.如权利要求1-2中任一项所述的方法，其中所述规则指定，在所述色彩格式是4：0：0或4：4：4的情况下，所述编解码表示包含指示确定模式类型的条件的语法元素被设定为0。

4.如权利要求1-3中任一项所述的方法，其中所述规则指定，是否启用对所述视频区中的帧内编解码色度块的最小允许尺寸的限制取决于所述色彩格式。

5.如权利要求4所述的方法，其中所述规则指定对4：2：0和4：2：2格式启用所述限制。

6.如权利要求4所述的方法，其中所述规则指定对4：0：0和4：4：4格式禁用所述限制。

7.一种视频处理的方法，包括：

进行视频的当前视频块与所述视频的编解码表示之间的转换，

其中所述编解码表示符合格式规则，并且

其中所述格式规则指定语法元素modeType，所述语法元素modeType指示所述当前视频块的编解码模式，所述编解码模式等于MODE_TYPE_NO_INTER等于MODE_TYPE_NO_INTRA，所述MODE_TYPE_NO_INTER限制将所述帧间编解码模式用于所述转换，所述MODE_TYPE_NO_INTRA限制将所述帧内模式用于所述转换。

8.一种视频处理的方法，包括：

进行视频与所述视频的编解码表示之间的转换，

其中所述编解码表示符合格式规则，所述格式规则指定标志，所述标志指示，所述视频的色度格式是4：2：2、4：0：0或4：4：4的情况下，预测模式约束不被包含在所述编解码表示中。

9.如权利要求8所述的方法，其中在所述标志不存在的情况下，对应的值被推断为0或1。

10.一种视频处理的方法，包括：

为视频的视频区与所述视频的编解码表示之间的转换，根据规则确定对所述视频区是否和/或如何启用对最小色度帧内预测块的尺寸的限制；以及

基于所述确定进行所述转换，

其中所述规则取决于所述视频的色彩格式是4：2：0还是4：2：2。

11.一种视频处理的方法，包括：

为视频的视频区与所述视频的编解码表示之间的转换，根据规则确定对所述视频区是否启用对最小色度帧内预测块的尺寸的限制；以及

基于所述确定进行所述转换，

其中所述规则取决于所述视频的色彩格式和/或所述视频区的宽度(M)和高度(N)，并且

其中所述规则还指定，对于作为具有BT(二叉树)划分的编解码树节点的所述视频区，则在以下情况下禁用对所述最小色度帧内预测块的限制：1)所述视频的色彩格式是4：2：2；并且2)M和N的乘积是来自值的集合中的值，其中所述值的集合包含64。

12.如权利要求11所述的方法，其中所述规则还指定在以下情况下启用对所述最小色度帧内预测块的限制：1)所述视频的色彩格式是4：2：2；并且2)所述值的集合还包含32。

13.如权利要求11所述的方法，其中所述规则还指定在以下情况下禁用对所述最小色度帧内预测块的限制：1)所述视频的色彩格式是4：2：2；并且2)所述值的集合还包含128。

14.如权利要求11所述的方法，其中所述规则还指定，对于作为具有等于1的split_qt_flag的编解码树节点的所述视频区，在所述视频的色彩格式是4：2：2的情况下启用对所述最小色度帧内预测块的限制。

15.如权利要求11所述的方法，其中所述规则还指定，对于作为具有TT(三叉树)划分的编解码树节点的所述视频区，在所述视频的色彩格式是4：2：2的情况下启用对所述最小色度帧内预测块的限制。

16.如权利要求11所述的方法，其中所述规则还指定，对于作为具有BT(二叉树)划分的编解码树节点的所述视频区，在以下情况下启用对所述最小色度帧内预测块的限制：1)所述视频的色彩格式是4：2：2；并且2)所述值的集合还包含32。

17.如权利要求11至16中任一项所述的方法，其中所述规则还指定，对于具有4：2：2色彩格式的所述视频中的所述最小色度帧内预测块，modeTypeCondition总是等于1。

18.如权利要求11至17中任一项所述的方法，其中所述规则还指定，对于具有4：2：2色彩格式的所述视频中的所述最小色度帧内预测块，仅允许MODE_TYPE_INTRA，所述MODE_TYPE_INTRA允许对所述转换使用帧内模式、调色板模式，以及帧内块复制模式。

19.一种视频处理的方法，包括：

根据对最小色度帧内预测块尺寸的限制，进行视频的视频区与所述视频的编解码表示之间的转换，

其中所述编解码表示符合格式规则，所述格式规则由于所述视频的4：2：2色彩格式而指定所述编解码表示中的语法字段的值。

20.如权利要求19所述的方法，其中所述语法字段对应于所述SCIPU块的modeTypeCondition，并且其中所述格式规则由于所述4：2：2色彩格式还指定所述modeTypeCondition总是1。

21.如权利要求19所述的方法，其中所述语法字段对应于所述SCIPU块的modeTypeCondition，并且其中所述格式规则由于所述4：2：2色彩格式还指定所述modeTypeCondition是0或1。

22.如权利要求19所述的方法，其中所述语法字段对应于所述SCIPU块的modeTypeCondition，并且其中所述格式规则由于所述4：2：2色彩格式还指定所述modeTypeCondition不是2。

23.如权利要求19所述的方法，其中所述语法字段对应于所述SCIPU块的modeType，并且其中所述格式规则由于所述4：2：2色彩格式还指定所述modeType总是等于MODE_TYPE_INTRA，所述MODE_TYPE_INTRA允许使用帧内模式、调色板模式，以及帧内块复制模式。

24.如权利要求19所述的方法，其中所述语法字段对应于所述SCIPU块的modeType，并且其中所述格式规则由于所述4：2：2色彩格式还指定所述modeType等于1)MODE_TYPE_ALL，所述MODE_TYPE_ALL允许对所述转换使用帧间编解码模式、帧内模式、调色板模式，以及帧内块复制模式；或2)MODE_TYPE_INTRA，所述MODE_TYPE_INTRA允许使用帧内模式、调色板模式，以及帧内块复制模式。

25.如权利要求19所述的方法，其中所述语法字段对应于所述SCIPU块的modeType，并且其中所述格式规则由于所述4：2：2色彩格式还指定所述modeType不对应于MODE_TYPE_INTER，所述MODE_TYPE_INTER仅允许对所述转换使用帧间模式。

26.一种视频处理的方法，包括：

为视频的当前视频块与所述视频的编解码表示之间的转换，根据规则确定分割方案对所述当前视频块的适用性；以及

基于所述确定进行所述转换。

27.如权利要求26所述的方法，其中所述规则指定，所述确定基于在所述转换期间使用的模式类型或所述当前视频块的维度中的至少一者来确定所述适用性，并且其中所述分割方案包括BT(二叉树)划分和/或TT(三叉树)划分。

28.如权利要求27所述的方法，其中在所述模式类型等于仅允许对所述转换使用帧间模式的MODE_TYPE_INTER的情况下，对所述当前视频块不允许所述BT划分。

29.如权利要求27所述的方法，其中在所述模式类型等于仅允许对所述转换使用帧间模式的MODE_TYPE_INTER的情况下，对所述当前视频块不允许所述TT划分。

30.如权利要求27所述的方法，其中在M*N小于或等于32且所述模式类型等于仅允许对所述转换使用帧间模式的MODE_TYPE_INTER的情况下，不允许所述BT划分，从而M和N对应于所述当前视频块的高度和宽度。

31.如权利要求27所述的方法，其中在M*N小于或等于64且所述模式类型等于仅允许对所述转换使用帧间模式的MODE_TYPE_INTER的情况下，不允许所述TT划分，从而M和N对应于所述当前视频块的高度和宽度。

32.如权利要求26所述的方法，其中所述规则指定，基于语法元素modeTypeCurr限制某分割方案，所述语法元素modeTypeCurr被包含在所述编解码表示中并描述在所述转换期间使用的模式类型，并且其中所述某分割方案包括BT(二叉树)划分、TT(三叉树)划分，和/或QT(四叉树)划分。

33.如权利要求32所述的方法，其中，由于所述modeTypeCurr等于仅允许对所述转换使用帧间模式的MODE_TYPE_INTER，因此不允许所述BT划分。

34.如权利要求32所述的方法，其中，由于所述modeTypeCurr等于仅允许对所述转换使用帧间模式的MODE_TYPE_INTER，因此不允许所述TT划分。

35.如权利要求32所述的方法，其中，由于所述modeTypeCurr等于仅允许对所述转换使用帧间模式的MODE_TYPE_INTER，因此不允许所述QT划分。

36.如权利要求32所述的方法，其中在所述modeTypeCurr等于仅允许对所述转换使用帧间模式的MODE_TYPE_INTER且亮度块尺寸小于或等于32的情况下，不允许所述BT划分。

37.如权利要求32所述的方法，其中在所述modeTypeCurr等于仅允许对所述转换使用帧间模式的MODE_TYPE_INTER且亮度块尺寸小于或等于64的情况下，不允许所述TT划分。

38.一种视频处理的方法，包括：

为视频的视频块与所述视频的编解码表示之间的转换，根据规则确定是否启用帧间模式，以及

基于所述确定进行所述转换，

其中所述规则指定，在对所述视频块启用亮度样点的双树分割的情况下，启用所述帧间模式。

39.如权利要求38所述的方法，其中所述编解码表示包含等于DUAL_TREE_LUMA的语法字段。

40.如权利要求38所述的方法，其中以所述帧间模式编解码的所述编解码单元仅对具有多个色彩分量的色彩格式含有所述亮度样点。

41.如权利要求38所述的方法，其中所述编解码表示包含指示应用于所述视频块的预测模式的标志，并且对与具有双树类型的亮度块相对应的所述视频块解析所述标志。

42.如权利要求38所述的方法，其中所述规则还指定，无论对所述视频块启用所述亮度样点的双树分割还是单树分割，应用关于所述帧间模式的相同的约束。

43.一种视频处理的方法，包括：

为视频的视频区与所述视频的编解码表示之间的转换，基于规则，确定是否允许对所述视频区使用调色板模式；以及

基于所述确定进行所述转换，

其中所述调色板模式包含使用代表性样点值的调色板编码所述视频区。

44.如权利要求43所述的方法，所述规则指定，在所述视频区的模式类型等于MODE_TYPE_INTRA或MODE_TYPE_INTER的情况下，允许所述调色板模式，所述MODE_TYPE_INTRA允许对所述转换使用帧内模式、调色板模式和帧内块复制模式，所述MODE_TYPE_INTER仅允许对所述转换使用帧间模式。

45.如权利要求43所述的方法，其中所述规则指定独立于所述视频区的模式类型而允许所述调色板模式。

46.如权利要求43所述的方法，其中所述规则是基于所述视频区的条带类型和模式类型。

47.如权利要求46所述的方法，其中所述规则指定，对于具有等于MODE_TYPE_INTRA的模式类型的I条带允许所述调色板模式，所述MODE_TYPE_INTRA对所述转换允许使用帧内模式、调色板模式和帧内块复制模式。

48.如权利要求46所述的方法，其中所述规则指定，对具有等于MODE_TYPE_INTRA的模式类型的P/B条带允许所述调色板模式，所述MODE_TYPE_INTRA对所述转换允许使用帧内模式、调色板模式和帧内块复制模式。

49.如权利要求43所述的方法，其中所述规则还指定，在允许所述调色板模式的情况下，不允许局部双树。

50.如权利要求43所述的方法，其中在启用所述调色板模式的情况下，modeTypeCondition总是设定为0。

51.一种视频处理的方法，包括：

其中所述编解码表示符合格式规则，

其中所述格式规则指定语法元素modeType，所述语法元素modeType包含对所述转换允许使用帧内块复制模式的MODE_TYPE_IBC或对所述转换允许使用调色板模式的MODE_TYPE_PALETTE，

其中所述帧内块复制模式包含至少使用指向含有所述当前视频块的视频帧的块矢量来编码所述当前视频块，并且

其中所述调色板模式包含使用代表性样点值的调色板来编码所述当前视频块。

52.如权利要求51所述的方法，其中所述格式规则还指定，在所述modeType是所述MODE_TYPE_IBC或所述MODE_TYPE_PALETTE的情况下，所述编解码表示不包含pred_mode_flag、pred_mode_ibc_flag和/或pre_mode_plt_flag。

53.如权利要求51所述的方法，其中所述编解码表示包含指示用于所述转换的模式类型的索引而非mode_constraint_flag。

54.如权利要求1至53中任一项所述的方法，其中所述转换包含将所述视频编码为所述编解码表示。

55.如权利要求1至53中任一项所述的方法，其中所述转换包含解码所述编解码表示以生成所述视频。

56.一种视频处理设备，包括处理器，所述处理器配置为实现权利要求1至55中任一项所述的方法。

57.一种计算机可读介质，储存程序代码，所述程序代码当被执行时使处理器实现权利要求1至55中任一项所述的方法。