CN114788289A - 使用调色板模式的视频处理方法和装置 - Google Patents

使用调色板模式的视频处理方法和装置 Download PDF

Info

Publication number
CN114788289A
CN114788289A CN202080081908.3A CN202080081908A CN114788289A CN 114788289 A CN114788289 A CN 114788289A CN 202080081908 A CN202080081908 A CN 202080081908A CN 114788289 A CN114788289 A CN 114788289A
Authority
CN
China
Prior art keywords
target
palette
component
stripe
slice
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202080081908.3A
Other languages
English (en)
Inventor
穆罕默德·G·萨维尔
廖如伶
叶琰
罗建聪
陈杰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Alibaba China Co Ltd
Original Assignee
Alibaba Group Holding Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Alibaba Group Holding Ltd filed Critical Alibaba Group Holding Ltd
Publication of CN114788289A publication Critical patent/CN114788289A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/11—Selection of coding mode or of prediction mode among a plurality of spatial predictive coding modes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159—Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/174—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a slice, e.g. a line of blocks or a group of blocks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/182—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a pixel
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/96—Tree coding, e.g. quad-tree coding

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本公开提供了用于在视频处理中发出信号通知并使用调色板模式的系统和方法。根据某些公开的实施例，一种示例性视频处理方法包括:接收用于对目标编码单元(CU)进行编码的调色板的第一调色板条目；确定所述目标CU是否是单树条带的一部分；确定所述目标CU是否使用单独的亮度树和色度树编码；并且响应于确定所述目标CU为单树条带的一部分并且用单独的亮度树和色度树进行编码，基于所述第一调色板条目对所述目标CU的第一分量进行解码，并且基于默认调色板条目对所述目标CU的第二分量进行解码。

Description

使用调色板模式的视频处理方法和装置
相关申请的交叉引用
本公开要求对在2019年12月3日上提交的美国临时申请号62/943,083的美国临时申请和在2019年12月22日上提交的申请号62/952,426的美国临时申请的优先权，它们全部通过引用并入本文。
技术领域
技术领域本公开一般涉及视频处理，并且更具体地，涉及用于发信号通知和使用调色板模式的方法和装置。
背景技术
视频是一组采集视觉信息的静态图像(或“帧”)。为了减少存储内存和传输带宽，可以在存储或传输之前对视频进行压缩，然后在显示之前对视频进行解压缩。压缩过程通常称为编码，解压缩过程通常称为解码。有多种使用标准化视频编码技术的视频编码格式，最常见的是基于预测、变换、量化、熵编码和环路滤波。视频编码标准，例如高效视频编码(HEVC/H.265)标准、通用视频编码(VVC/H.266)标准、AVS标准，指定了特定的视频编码格式，由标准化组织开发。随着视频标准中采用越来越多的先进视频编码技术，新的视频编码标准的编码效率越来越高。
发明内容
本发明实施例提供了一种用信号通知和使用调色板模式的方法和装置。在一些示例性实施例中，一种视频处理方法包括:接收用于对目标编码单元(CU)进行编码的调色板的第一调色板条目；确定所述目标CU是否是单树条带的一部分；确定所述目标CU是否用单独的亮度树和色度树编码；并且响应于确定所述目标CU为单树条带的一部分并且用单独的亮度树和色度树进行编码，基于所述第一调色板条目对所述目标CU的第一分量进行解码，并且基于默认调色板条目对所述目标CU的第二分量进行解码。
在一些实施例中，示例性视频处理装置包括用于存储指令集的至少一个存储器和至少一个处理器。所述至少一个处理器被配置为执行所述指令以使所述装置执行:接收用于对目标编码单元(CU)进行编码的调色板的第一调色板条目；确定所述目标CU是否是单树条带的一部分；确定所述目标CU是否用单独的亮度树和色度树编码；以及响应于确定所述目标CU为单树条带的一部分并且用单独的亮度树和色度树编码，基于所述第一调色板条目对所述目标CU的第一分量进行解码，并且基于默认调色板条目对目标CU的第二分量进行解码。
在一些实施例中，示例性非暂时性计算机可读存储介质存储指令集。所述指令集可由一个或多个处理设备执行以使视频处理装置执行:接收用于对目标编码单元(CU)进行编码的调色板的第一调色板条目；确定所述目标CU是否是单树条带的一部分；确定所述目标CU是否用单独的亮度树和色度树编码；以及响应于确定所述目标CU为单树条带的一部分并且用单独的亮度树和色度树编码，基于所述第一调色板条目对所述目标CU的第一分量进行解码，并且基于默认调色板条目对目标CU的第二分量进行解码。
附图说明
在下面的详细描述和附图中示出了本发明的具体实施方式和各个方面。图中所示的各种特征未按比例绘制。
图1是根据本公开的一些实施例的示例性视频序列的结构示意图。
图2示出了根据本公开的一些实施例的混合视频编码系统中的示例性编码器的示意图。
图3示出了根据本公开的一些实施例的混合视频编码系统中的示例性解码器的示意图。
图4示出了根据本公开的一些实施例的用于对视频进行编码或解码的示例性装置的框图。
图5示出了根据本公开的一些实施例的调色板模式中编码的示例性图像块的示意图。
图6示出了根据本公开的一些实施例的用于在对编码单元编码之后更新调色板预测器的示例性过程的示意图。
图7示出了根据本公开的一些实施例的示例性表1，其示出了序列参数集(SPS)语法表的一部分。
图8示出了根据本公开的一些实施例的示例性表2，其示出了编码单元语法表的一部分。
图9示出了根据本公开的一些实施例的示例性表3，其示出了调色板编码语法表的一部分。
图10示出了根据本公开的一些实施例的用于调色板模式的示例性解码过程。
图11示出了根据本公开的一些实施例的示例性表4，其示出了调色板编码语法表的一部分。
图12示出了根据本公开的一些实施例的用于调色板模式的示例性调色板编码语义和解码过程。
图13示出了根据本公开的一些实施例的示例性表5，其示出了调色板编码语法表的一部分。
图14示出了根据本公开的一些实施例的用于调色板模式的示例性解码过程。
图15示出了根据本公开的一些实施例的示例性表6，其示出了编码单元语法表的一部分。
图16示出了根据本公开的一些实施例的示例性表7，其示出了调色板编码语法表的一部分。
图17示出了根据本公开的一些实施例的用于调色板模式的另一示例性调色板编码语义和解码过程。
图18示出了根据本公开的一些实施例的示例性视频处理方法的流程图。
图19示出了根据本公开的一些实施例的另一示例性视频处理方法的流程图。
图20示出了根据本公开的一些实施例的另一示例性视频处理方法的流程图。
图21示出了根据本公开的一些实施例的另一示例性视频处理方法的流程图。
图22示出了根据本公开的一些实施例的另一示例性视频处理方法的流程图。
图23示出了根据本公开的一些实施例的另一示例性视频处理方法的流程图。
具体实施方式
现在将详细参考示例性实施例，其示例在附图中示出。以下描述参照附图，除非另有说明，其中不同附图中的相同数字表示相同或相似的元件。在示例性实施例的以下描述中阐述的实施方式并不代表与本公开一致的所有实施方式。相反，它们仅是与如所附权利要求中所述的与本公开相关的方面一致的装置和方法的示例。下面更详细地描述本公开的特定方面。如果与通过引用并入的术语和/或定义相冲突的话，以本文提供的术语和定义为准。
ITU-T视频编码专家组(ITU-T VCEG)和ISO/IEC运动图像专家组(ISO/IEC MPEG)的联合视频专家小组(JVET)目前正在开发通用视频编码(VVC/H.266)标准。VVC标准旨在将其前身高效视频编码(HEVC/H.265)标准的压缩效率提高一倍。换句话说，VVC的目标是使用一半的带宽实现与HEVC/H.265相同的主观质量。
为了使用一半的带宽实现与HEVC/H.265相同的主观质量，JVET一直在使用联合探索模型(JEM)参考软件开发HEVC以外的技术。随着编码技术被纳入JEM，JEM实现了比HEVC更高的编码性能。VCEG和MPEG已正式开始开发HEVC以外的下一代视频压缩标准。
VVC标准是最近开发的，并且继续包括提供更好压缩性能的更多编码技术。VVC基于与HEVC、H.264/AVC、MPEG2、H.263等现代视频压缩标准中一直使用的混合视频编码系统。
视频是按时间顺序排列以存储视觉信息的一组静态图像(或“帧”)。可以使用视频采集设备(例如，相机)以时间顺序采集和存储这些图像，并且可以使用视频回放设备(例如，电视、计算机、智能手机、平板计算机、视频播放器、或任何具有显示功能的最终用户终端)显示时间序列中的此类图像。此外，在一些应用中，视频采集设备可以实时地将采集的视频发送到视频回放设备(例如，具有监视器的计算机)，例如用于监视、会议或现场广播。
为了减少此类应用所需的存储空间和传输带宽，可以在存储和传输之前对视频进行压缩，并在显示之前进行解压缩。可以通过由处理器(例如，通用计算机的处理器)或专用硬件执行的软件来实现压缩和解压缩。用于压缩的模块通常被称为“编码器”，并且用于解压缩的模块通常被称为“解码器”。编码器和解码器可以统称为“编解码器”。编码器和解码器可以被实现为各种合适的硬件、软件、或其组合中的任何一种。例如，编码器和解码器的硬件实现可以包括电路，诸如一个或多个微处理器、数字信号处理器(DSP)、专用集成电路(ASIC)、现场可编程门阵列(FPGA)、离散逻辑或其任何组合。编码器和解码器的软件实现可以包括固定在计算机可读介质中的程序代码、计算机可执行指令、固件或任何合适的计算机实现的算法或过程。视频压缩和解压缩可以通过各种算法或标准来实现，例如MPEG-1、MPEG-2、MPEG-4、H.26x系列等。在一些应用中，编解码器可以从第一编码标准解压缩视频，并且使用第二编码标准重新压缩解压缩的视频，在这种情况下，编解码器可以被称为“转码器”。
视频编码过程可以识别并保留可用于重建图像的有用信息，并忽略不重要的重建信息。如果忽略不重要的信息不能被完全重建，则这样的编码过程可以被称为“有损”。否则，它可以被称为“无损”。大多数编码过程都是有损的，这是为了减少所需的存储空间和传输带宽的权衡。
被编码的图像(称为“当前图像”)的有用信息包括相对于参考图像(例如，先前编码和重建的图像)的变化。这样的变化可以包括像素的位置变化、亮度变化或颜色变化，其中位置变化是最受关注的。代表对象的一组像素的位置变化可以反映对象在参考图像和当前图像之间的运动。
未参考另一图像而编码的图像(即，它是自己的参考图像)被称为“I-图像”。使用先前图像作为参考图像编码的图像被称为“P-图像”,使用先前图像和将来图像作为参考图像编码的图像称为被称为“B图像”(参考是“双向”)。
图1示出了根据本公开的一些实施例的示例视频序列100的结构。视频序列100可以是实况视频或已被采集和存档的视频。视频100可以是现实生活中的视频，电脑生成的视频(例如，计算机游戏视频)或二者组合(例如，具有增强现实效果的真实视频)。视频序列100可以从视频采集设备(例如，相机)、包含先前采集的视频档案(例如，存储在存储设备中的视频文件)或从视频内容提供商接收视频的视频馈送接口(例如，视频广播收发器)。
如图1所示，视频序列100可以包括沿时间线在时间上布置的一系列图像，包括图像102、104、106和108。图像102-106是连续的，在图像106和108之间有更多的图像。在图1中，图像102是I-图像，其参考图像是图像102本身。图像104是P-图像，其参考图像是图像102，如箭头所示。图像106是B图像，其参考图像是图像104和108，如箭头所示。在一些实施例中，图像的参考图像(例如，图像104)可以不紧接在图像之前或之后。例如，图像104的参考图像可以是图像102之前的图像。需要说明的是，图像102-106的参考图像仅仅是示例，本公开并不限定如图1所示的参考图像的实施例。
通常，由于编解码任务的计算复杂性，视频编解码器不会一次对整个图像进行编码或解码。相反，他们可以将图像分割成基本段，并逐段对图像段进行编码或解码。在本公开中，这样的基本段被称为基本处理单元(“BPU”)。例如，图1中的结构110示出了视频序列100的图像(例如，图像102-108中的任何图像)的示例结构。在结构110中，图像被划分为4×4基本处理单元，其边界被示出为虚线。在一些实施例中，基本处理单元可以在一些视频编码标准(例如，MPEG族、H.261、H.263或H.264/AVC)中被称为“宏块”，或者在一些其它视频编码标准(例如，H.265/HEVC或H.266/VVC)中被称为“编码树单元”(“CTU”)。基本处理单元可以在图像中具有可变的大小，例如128×128、64×64、32×32、16×16、4×8、16×32或任意形状和大小的像素。可以基于编码效率和要保持在基本处理单元中的细节水平的平衡来为图像选择基本处理单元的尺寸和形状。
基本处理单元可以是逻辑单元，其可以包括存储在计算机存储器中(例如，在视频帧缓冲区中)的一组不同类型的视频数据。例如，彩色图像的基本处理单元可以包括表示消色差亮度信息的亮度分量(Y)、表示颜色信息的一个或多个色度分量(例如，Cb和Cr)以及相关联的语法元素，其中亮度和色度分量可以具有与基本处理单元的相同大小。在一些视频编码标准(例如，H.265/HEVC或H.266/VVC)中，亮度和色度分量可以被称为“编码树块”(“CTB”)。对基本处理单元执行的任何操作都可以对其亮度和色度分量中的每一个重复执行。
视频编码具有多个操作阶段，其示例如图2和图3所示。对于每个阶段，基本处理单元的大小对于处理仍然可能太大，因此可以进一步划分为在本公开中称为“基本处理子单元”的段。在一些实施例中，基本处理子单元可以在一些视频编码标准(例如，MPEG族、H.261、H.263或H.264/AVC)中被称为“块”，或者作为一些其他视频编码标准(例如，H.265/HEVC或H.266/VVC)中的“编码单元”(“CU”)。基本处理子单元可以具有与基本处理单元相同的大小或具有比基本处理单元更小的大小。与基本处理单元类似，基本处理子单元也是逻辑单元，其可以包括存储在计算机存储器(例如，在视频帧缓冲区中)中的一组不同类型的视频数据(例如，Y、Cb、Cr和相关联的语法元素)。对基本处理子单元执行的任何操作都可以对其亮度和色度分量中的每一个重复执行。应该注意的是，可以根据处理需要将这种划分执行到进一步的级别。还应注意，不同阶段可以使用不同的方案来划分基本处理单元。
例如，在模式决策阶段(其示例在图2中示出，编码器可以决定对基本处理单元使用什么预测模式(例如，帧内预测或帧间预测)，该基本处理单元可能太大而无法做出这样的决定。编码器可以将基本处理单元划分成多个基本处理子单元(例如，如H.265/HEVC或H.266/VVC中的CU)，并且决定每个单独的基本处理子单元的预测类型。
对于另一个示例，在预测阶段(其示例在图2中示出)，编码器可以在基本处理子单元(例如，CU)的级别上执行预测操作。但是，在某些情况下，基本处理子单元仍然可能太大而无法处理。编码器可以进一步将基本处理子单元分成更小的段(例如，在H.265/HEVC或H.266/VVC中称为“预测块”或“PB”)，在该级别上可以执行预测操作。
对于另一个示例，在变换阶段(其示例在图2中示出)，编码器可以对残差基本处理子单元(例如，CU)执行变换操作。但是，在某些情况下，基本处理子单元仍然可能太大而无法处理。编码器可以进一步将基本处理子单元分成更小的段(例如，在H.265/HEVC或H.266/VVC中称为“变换块”或“TB”)，在该级别上可以执行变换操作。需要注意的是，同一基本处理子单元的划分方案在预测阶段和变换阶段可以不同。例如，在H.265/HEVC或H.266/VVC中，相同CU的预测块和变换块可以具有不同的大小和数量。
在图1的结构110中，将基本处理单元112进一步划分为3×3个基本处理子单元，其边界以虚线示出。同一图像的不同基本处理单元可以在不同的方案中划分为基本处理子单元。
在一些实施方式中，为了提供并行处理的能力以及对视频编码和解码的容错能力，可以将图像划分成用于处理的区域，使得对于图像的区域，编码或解码过程可以不依赖于来自图像的任何其他区域的信息。换句话说，图像的每个区域都可以单独处理。通过这样做，编解码器可以并行处理图像的不同区域，从而提高了编码效率。此外，当一区域的数据在处理中被损坏或在网络传输中丢失时，编解码器可以正确地编码或解码相同图像的其他区域而不依赖于被损坏或丢失的数据，从而提供容错能力。在某些视频编码标准中，可以将图像划分为不同类型的区域。例如，H.265/HEVC和H.266/VVC提供两种类型的区域:“条带(slice)”和“块片(tile)”。还应注意的是，视频序列100的不同图像可以具有用于将图像划分为区域的不同划分方案。
例如，在图1中，结构110被分成三个区域114、116和118，其边界被示为结构110内部的实线。区域114包括四个基本处理单元。区域116和118均包括六个基本处理单元。需要说明的是，图1中110的基本处理单元、基本处理子单元和结构区域仅是示例，本公开不限制其实施例。
图2示出了根据本公开的一些实施例的混合视频编码系统中的示例性编码器200的示意图。视频编码器200可以执行视频帧内的块(包括视频块、或视频块的分区或子分区)的帧内或帧间编码。帧内编码可以依靠空间预测来减少或消除给定视频帧内视频中的空间冗余。帧间编码可以依靠时间预测来减少或消除视频序列的相邻帧内的视频中的时间冗余。帧内模式可以指多个基于空间的压缩模式。帧间模式(例如单向预测或双向预测)可以指多个基于时间的压缩模式。
参考图2，输入视频信号202可以被逐块处理。例如，视频块单元可以是16×16像素块(例如，宏块(MB))。视频块单元的大小可能会有所不同，这取决于所使用的编码技术以及所需的精度和效率。在HEVC中，扩展块大小(例如，编码树单元(CTU))可用于压缩视频信号的分辨率，例如，1080p及以上。在HEVC中，CTU可能包括多达64×64亮度样本、对应的色度样本以及相关的语法元素。在VVC中，CTU的大小可以进一步增加以包括128×128亮度样本、对应的色度样本和相关联的语法元素。可以使用例如四叉树、二叉树或三元树将CTU进一步划分为编码单元(CU)。可以进一步将CU划分为预测单元(PU)，对于该预测单元，可以应用单独的预测方法。每个输入视频块可以通过使用空间预测单元260或时间预测单元262来处理。
空间预测单元260使用关于包含当前块的相同图像/条带的信息对当前块/CU执行空间预测(例如，帧内预测)。空间预测可以使用来自相同视频图像帧/条带中的已经编码的相邻块的像素来预测当前视频块。空间预测可以减少视频信号中固有的空间冗余。
时间预测单元262使用来自与包含当前块的图像/条带不同的图像/条带的信息对当前块执行时间预测(例如，帧间预测)。视频块的时间预测可以通过一个或多个运动矢量用信号通知。在单向方向时间预测中，仅使用指示一个参考图像的一个运动矢量来生成当前块的预测信号。另一方面，在双向时间预测中，可以使用两个运动矢量(每个运动矢量指示相应的参考图像)来生成用于当前块的预测信号。运动矢量可以指示当前块与参考帧中的一个或多个相关联的块之间的运动的量和方向。如果支持多个参考图像，则可以为视频块发送一个或多个参考图像索引。一个或多个参考索引可以用于识别，时间预测信号来自在参考图像存储或解码图像缓冲区(DPB)264中的哪个参考图像。
编码器中的模式决策和编码器控制单元280可以例如基于率失真优化来选择预测模式。基于所确定的预测模式，可以获得预测块。可以在加法器216从当前视频块减去预测块。预测残差可以由变换单元204变换并且由量化单元206量化。可在逆量化单元210处对经量化的残差系数进行逆量化，并在逆变换单元212处进行逆变换以形成经重建的残差。可在加法器226处将重建残差添加到预测块以形成重建视频块。可以使用在环路滤波之前重建的视频块来提供用于帧内预测的参考样本。
重建的视频块可以在环路滤波器266处经过环路滤波。例如可以使用去块滤波器、采样自适应补偿(SAO)和自适应环路滤波器(ALF)。环路滤波后的重建块可以存储在参考图像存储264中，并且可以用于提供帧间预测参考样本，以用于编码其他视频块。为了形成输出视频位流220，在数据被压缩和打包以形成位流220之前，可以将编码模式(例如，帧间或帧内)、预测模式信息、运动信息和量化的残差系数发送到熵编码单元208以进一步降低比特率。
图3示出了根据本公开的一些实施例的混合视频编码系统中的示例性解码器300的示意图。参考图3，视频位流302可以在熵解码单元308处被解压缩或熵解码。编码模式信息可用于确定要选择空间预测单元360还是时间预测单元362。可以将预测模式信息发送到相应的预测单元以生成预测块。例如，可以由时间预测单元362应用运动补偿预测以形成时间预测块。
可以将残差系数发送到逆量化单元310和逆变换单元312以获得重建残差。可以在326处将预测块和重建残差相加，以在环路滤波之前形成重建块。然后，重建块可以在环路滤波器366处经过环路滤波。例如，可以应用诸如去块滤波器、SAO和ALF的环路滤波。然后可以将循环滤波后的重建块存储在参考图像存储364中。参考图像存储364中的重建数据可用于获得解码视频320，或用于预测未来视频块。解码的视频320可以显示在显示设备(诸如TV、PC、智能手机或平板电脑)上以供终端用户观看。
图4是根据本公开的一些实施例的用于对视频进行编码或解码的示例性装置400的框图。如图4所示，装置400可以包括处理器402。当处理器402执行本文所述的指令时，装置400可以成为用于视频编码或解码的专用机器。处理器402可以是能够操纵或处理信息的任何类型的电路。例如，处理器402可以包括任何数量的中央处理单元(或“CPU”)、图形处理单元(或“GPU”)、神经网络处理单元(“NPU”)、微控制器单元(“MCU”)、光学处理器、可编程逻辑控制器、微处理器、数字信号处理器、知识产权(IP)核心、可编程逻辑阵列(PLA)、可编程阵列逻辑(PAL)、通用阵列逻辑(GAL)、复杂可编程逻辑器件(CPLD)、现场可编程门阵列(FPGA)、片上系统(SoC)、专用集成电路(ASIC)等的任何组合。在一些实施例中，处理器402还可以是被分组为单个逻辑组件的一组处理器。例如，如图4所示，处理器402可以包括多个处理器，包括处理器402a、处理器402b和处理器402n。
装置400还可以包括被配置为存储数据(例如，一组指令、计算机代码、中间数据等)的存储器404。例如，如图4所示，所存储的数据可以包括程序指令(例如，用于实现图2或图3中的阶段的程序指令)和用于处理的数据。处理器402可以访问用于处理的程序指令和数据(例如，经由总线410)，并且执行程序指令以对用于处理的数据执行操作或操纵。存储器404可以包括高速随机存取存储设备或非易失性存储设备。在一些实施例中，存储器404可以包括任意数量的随机存取存储器(RAM)、只读存储器(ROM)、光盘、磁盘、硬盘驱动器、固态驱动器、闪存驱动器、安全数字(SD)卡、记忆棒，紧凑型闪存(CF)卡等的任何组合。存储器404也可以是被分组为单个逻辑组件的一组存储器(图4中未示出)。
总线410可以是在装置400内部的部件之间传输数据的通信设备，诸如内部总线(例如，CPU存储器总线)、外部总线(例如，通用串行总线端口、外围部件互连快速端口)，或者类似物。
为了便于解释而不引起歧义，在本公开中将处理器402和其他数据处理电路统称为“数据处理电路”。数据处理电路可以完全实现为硬件，或者实现为软件、硬件或固件的组合。此外，数据处理电路可以是单个单独模块，或者可以完全或部分地组合到装置400的任何其他部件中。
装置400还可以包括网络接口406，以提供与网络(例如，因特网、内联网、局域网、移动通信网络等)的有线或无线通信。在一些实施例中，网络接口406可以包括任何数量的网络接口控制器(NIC)、射频(RF)模块、应答器、收发器、调制解调器、路由器、网关、有线网络适配器、无线网络适配器、蓝牙适配器、红外适配器、近场通信(“NFC”)适配器、蜂窝网络芯片的任意组合或其类似物。
在一些实施例中，可选地，装置400可以进一步包括外围接口408，以提供到一个或多个外围设备的连接。如图4所示，外围设备可以包括但不限于光标控制设备(例如，鼠标、触摸板或触摸屏)、键盘、显示器(例如，阴极射线管、液晶显示器或发光二极管显示器)、视频输入设备(例如，相机或耦合到视频档案的输入接口)等。
应当注意，视频编解码器可以被实现为装置400中的任何软件或硬件模块的任何组合。例如，图2的编码器200或图3的解码器300的一些或所有阶段可以被实现为装置400的一个或多个软件模块，诸如可以被加载到存储器404中的程序指令。对于另一示例，图2的编码器200或图3的解码器300的一些或所有阶段可以被实现为装置400的一个或多个硬件模块，诸如专用数据处理电路(例如，FPGA、ASIC、NPU等)。
在量化和逆量化功能块(例如，图2的量化单元206和逆量化单元210，图3的逆量化单元310)中，使用量化参数(QP)来确定应用于预测残差的量化(和逆量化)的量。用于对图像或条带进行编码的初始QP值可以在高级别上发出信号，例如，在图像参数集(PPS)中使用语法元素init_qp_minus26并且在条带头中使用语法元素slice_qp_delta。此外，可以使用以量化组的粒度发送的增量QP(delta QP)值在局部级别针对每个CU适配QP值。
在VVC(例如，VVC草案7)中，在4:4:4颜色格式使用调色板模式。当启用调色板模式时，如果CU大小小于或等于64×64，则会在CU级别发送一个标志，指示是否使用了调色板模式。
图5示出了根据本公开的一些实施例的以调色板模式编码的示例性图像块500的示意图。如图5所示，如果利用调色板模式对当前CU进行编码，则CU中的每个位置中的样本值由一小组代表性颜色值表示。该小组被称为调色板(例如，调色板510)。对于具有接近调色板颜色的值的样本位置(例如，位置50 1、502或503)，用信号通知相应的调色板索引(例如，索引0、索引1、索引2或索引3)。根据一些公开的实施例，可以通过发信号通知逃逸索引(escape index)(或逃逸颜色索引)来指定调色板外部的颜色值。然后，对于使用逃逸颜色指数(例如，索引4)的CU中的所有位置(例如，位置504)，对这些位置中的每一个用信号通知(量化的)颜色分量值。
为了对调色板进行编码，保留了调色板预测器。对于非波前情况，在每个条带的开始处以及对于波前情况，在每个CTU行的开始处，预测器被初始化为0(例如，空)。图6示出了根据本公开的一些实施例的用于在对编码单元编码之后更新调色板预测器的示例性过程600的示意图。如图6所示，对于调色板预测器中的每个条目，用信号通知重用标志以指示它是否将被包括在当前CU的当前调色板中。使用零的游程长度编码发送重用标志，之后用信号通知新调色板条目的数量和新调色板条目的分量值。在对调色板编码的CU进行编码之后，使用当前调色板更新调色板预测器，并且在新调色板预测器的末尾添加来自先前调色板预测器的未在当前调色板中重复使用的条目，直到达到允许的最大大小为止。
在一些实施例中，为每个CU用信号通知逃逸标志(escape flag)以指示当前CU中是否存在逃逸符号(escape symbol)。如果存在逃逸符号，则将调色板表增加一个，并且将最后一个索引(例如，如图5所示的索引4)分配为逃逸符号。
返回参考图5，CU中的样本的调色板索引(例如，索引0、索引1、索引2、索引3和索引4)形成调色板索引图。使用水平或垂直横向扫描对索引图进行编码。扫描顺序使用语法元素palette_transpose_flag在位流中显式地发出信号。使用索引运行模式或索引复制模式对调色板索引图进行编码。
在一些实施例中，调色板模式仅允许用于4:4:4颜色格式。然而，大量的视频内容可能用其他颜色格式(例如，4:2:0色度子采样格式)来编码。本公开提供了将调色板模式扩展到其他色度格式(诸如单色、4:2:0、4:2:2等)的方法。
此外，对于具有亮度/色度双树的条带，调色板分别应用于亮度(Y分量)和色度(Cb和Cr分量)。对于单树的条带，将调色板共同应用于Y、Cb、Cr分量(例如，调色板中的每个条目都包含Y、Cb、Cr值)。然而，在VVC中，对于4:2:0和4:2:2颜色格式，由于对允许的最小色度编码块大小的限制，单树条带的编码单元(CU)可以具有单独的亮度树和色度树。因此，由于双树CU的亮度和色度被分别处理(尽管CU属于单树条带)，因此无法将联合调色板应用于双树CU。因此，在本公开的一些实施例中，在将调色板模式扩展到诸如4:2:0和4:2:2的其他色度格式的同时，可以解决具有局部双树结构的单树条带的可能性(例如，在条带级别是单树，而CU级别是双树)。
本公开的一些实施例提供了用于将调色板模式应用于除4:4:4颜色格式之外(或非4:4:4颜色格式)的颜色格式以及应用于具有局部双树结构的单树条带的方法和装置。
本公开的一些实施例可以允许所有色度格式的调色板模式，诸如单色、4:2:0、4:2:2、4:4:4等。图7示出了根据本公开的一些实施例的示例性表1，其示出了SPS语法表的一部分。如错误所示！参考来源未找到。建议从当前VVC草案7中删除在框701中(横线)贯穿的语法元素，并建议将在框702中斜体化的语法元素添加到当前VVC草案7。无论语法元素chroma_format_idc的值如何，都可以用信号通知sps_palette_enabled_flag。
如上所述，在当前的视频编码标准(例如，VVC草案7)中，对于具有单树的条带，将调色板模式联合应用于Y、Cb、Cr分量上。P和B条带始终被编码为单树切片。I条带的树结构通过SPS语法发出信号，例如，语法元素qtbtt_dual_tree_intra_flag。语法元素qtbtt_dual_tree_intra_flag等于1指定对于I条带，使用两个单独的用于亮度和色度的coding_tree语法结构。语法元素qtbtt_dual_tree_intra_flag等于0指定单独的coding_tree语法结构不用于I条带。
单树条带的编码单元可以具有单独的亮度树和色度树，因为在非内部最小色度帧内预测单元(SCIPU)的情况下，色度不允许进一步划分，但允许亮度进一步划分。在单树编码中，SCIPU被定义为其色度块大小大于或等于16个色度样本并且具有至少一个子亮度块小于64个亮度样本的编码树节点。因此，联合调色板不能应用于双树CU，因为双树CU的亮度和色度是分开处理的(尽管双树CU属于单树条带)。这产生了将调色板模式应用于具有双树CU的单树条带的问题。本公开提供了一些实施例来解决该问题。
根据一些实施例，如果CU包含局部双树，则不允许所述调色板模式用于CU。因此，如果满足以下两个条件，则不允许调色板模式用于CU：(1)使用单独的树对CU进行编码，并且(2)CU属于具有单个树的切片。图8示出了根据本公开的一些实施例的示例性表2，其示出了编码单元语法表的一部分。表2的编码单元语法表可以禁止CU的调色板模式。如表2所示，与本实施例一致的语法变化在框801中以斜体表示。基于表2的编码单元语法表，如果满足以下两个条件，则不允许使用调色板模式:
(treeType！＝SINGLE_TREE)&&
(Slice_type！＝I||qtbtt_dual_tree_intra_flag＝＝0)
根据一些实施例，为了提高调色板模式的编码效率，将调色板模式应用于包含局部双树的CU。对于局部双树块，在不添加新调色板条目(例如语法元素new_palette_entries[cIdx][i])的情况下用信号发送重用标志(例如语法元素new_palette_entries[cIdx][i])。由于局部双树块可能仅包含亮度(或色度)分量，因此新调色板条目的色度(或亮度)值可能为空。因此，为局部双树块发送新的调色板条目受到限制。图9示出了根据本公开的一些实施例的示例性表3，其示出了调色板编码语法表的一部分。表3的调色板编码语法表可以将调色板模式应用于包含局部双树的CU。如表3所示，与本实施例一致的语法变化在框901-904中以斜体表示。
此外，对于非4:4:4颜色格式，存在仅包含亮度分量的像素。因此，在一些实施例中，当这些像素使用逃逸模式(参见图9的表3中的语法，其在框903中是粗体和阴影)被编码时，仅对这些像素用信号通知亮度值。
图10示出了根据本发明的一些实施例的用于调色板模式的示例性解码过程。解码过程包括VVC草案7中的8.4.5.3节。解码过程可以包含两个过程，一个用于像素重建，另一个用于调色板预测器更新。
如图10所示，解码过程可以类似于VVC草案7中的8.4.5.3节。解码过程可以包括在框1001-1003中斜体表示的一些语法改变。当使用当前调色板更新调色板预测器时，当前调色板的条目将放在新调色板预测器之前。然后，将来自先前调色板预测器的未在当前调色板中重复使用的条目添加到新调色板预测器的末尾。对于局部双树块，每个调色板条目都包含亮度和色度分量。因此，所有三个分量都参与了调色板预测器更新的过程。位流一致性的要求是，PredictorPaletteSize[startComp]的值在0到63的范围内，包括端值。
根据一些实施例，可以将调色板模式以与应用于单树块的调色板模式相同的方式应用于局部双树块。因为局部双树块可能只包含亮度(或色度)分量，所以亮度(或色度)分量的值被用信号通知，并且可以将默认值设置为新调色板条目的色度(或亮度)分量。作为示例，默认值可与视频序列的位深度有关。作为另一个示例，默认值可以是零。
此外，对于非4:4:4颜色格式，当使用逃逸模式对像素进行编码时，仅对仅包含亮度分量的像素用信号通知亮度值。图11示出了根据本公开的一些实施例的示例性表4，其示出了调色板编码语法表的一部分。表4的调色板编码语法表可以将调色板模式应用于包含局部双树的CU。如表4所示，与本实施例一致的语法变化在方框1101和方框1102中以斜体表示。
在本发明的一些实施例中，局部双树的语法解析可以与单树的语法解析对齐。此外，由于用信号发送的比特较少，因此可以提高调色板模式的编码效率。
图12示出了根据本公开的一些实施例的用于调色板模式的示例性调色板编码语义和解码过程。如图12所示，VVC草案7中的7.4.12.6节和8.4.5.3节的建议语法变化在框1201-1205中以斜体表示。对于局部双树块，在执行调色板预测器更新时，将首先在当前调色板中填充默认值(请参见图12中粗体语义)。然后，所有三个分量都参与了调色板预测器更新的过程。位流一致性的要求是，PredictorPaletteSize[startComp]的值在0到63的范围内，包括端值。
根据一些实施例，可以将调色板模式以与应用于单树块的调色板模式相同的方式应用于局部双树块，这类似于图11的表4中所示的实施例。然而，在一些实施例中，局部双树块的调色板不用于更新调色板预测器。因此，由于跳过了调色板预测器中的重新排序过程，因此可以简化解码过程。
此外，对于非4:4:4颜色格式，当使用逃逸模式对像素进行编码时，仅对仅包含亮度分量的像素用信号通知亮度值。图13示出了根据本公开的一些实施例的示例性表5，其示出了调色板编码语法表的一部分。表5的调色板编码语法表可以将调色板模式应用于包含局部双树的CU。如表5所示，与本实施例一致的语法变化在方框1301和方框1302中以斜体表示。
图14示出了根据本公开的一些实施例的用于调色板模式的示例性解码过程。如图14所示，在框1401和框1402中，VVC草案7中8.4.5.3部分建议的语法改变以斜体表示。对于局部双树块，调色板预测器不会更新。位流一致性的要求是，PredictorPaletteSize[startComp]的值在0到63的范围内，包括端值。
根据一些实施例，调色板模式可以以与应用于单树块的调色板模式相同的方式应用于局部双树亮度块。对于局部双树色度块，调色板模式被禁用。由于局部双树亮度块可能仅包含亮度分量，因此会用信号通知亮度分量的值，并且可以将新调色板条目色度分量设置为默认值。作为示例，默认值可以与视频序列的位深度相关。作为另一个示例，默认值可以是零。
此外，对于非4:4:4颜色格式，当使用跳过模式对像素进行编码时，仅对仅包含亮度分量的像素用信号通知亮度值。图15示出了根据本公开的一些实施例的示例性表6，其示出了编码单元语法表的一部分。图16示出了根据本公开的一些实施例的示例性表7，其示出了调色板编码语法表的一部分。调色板编码语法表可以将调色板模式应用于包含亮度局部双树的CU。与本实施例一致的表6和表7中的语法变化分别在框1501和框1601-1602中以斜体表示。
在本公开的一些实施例中，通过禁用用于色度局部双树的调色板，简化了调色板设计。
图17示出了根据本公开的一些实施例的用于调色板模式的示例性调色板编码语义和解码过程。如图17所示，VVC草案7中的7.4.12.6节和8.4.5.3节建议的语法变化在方框1701-1705中以斜体表示。对于局部双树块，在执行调色板预测器更新时，将首先在当前调色板中填充默认值。然后，所有三个分量都参与了调色板预测器更新的过程。位流一致性的要求是，PredictorPaletteSize[startComp]的值在0到63的范围内，包括端值。
图18示出了根据本公开的一些实施例的示例性视频处理方法1800的流程图。在一些实施例中，方法1800可以由解码器(例如，图3的解码器300)或由装置(例如，图4的装置400)一个或多个软件或硬件组件来执行。例如，处理器(例如，图4的处理器402)可以执行方法1800。在一些实施例中，方法1800可以由包含在计算机可读介质中的计算机程序产品来实现，所述计算机程序产品包括由计算机(例如，图4的装置400)执行的计算机可执行指令，诸如程序代码。
在步骤1801，可以接收用于对目标CU进行编码的调色板条目。例如，解码器(例如，图3的解码器300)可以接收包括用于对目标CU进行调色板编码的一个或多个调色板条目(例如，图9的表3中的new_palette_entries[cIdx][i])的位流。
在步骤1803，可以确定目标CU是否用单独的亮度树和色度树编码。例如，可以确定是否满足条件(treeType！＝SINGLE_TREE)。如果treeType！＝SINGLE_TREE，可以确定目标CU使用单独的亮度树和色度树进行编码。
在步骤1805，可以确定目标CU是否是单树条带的一部分。在一些实施例中，方法1800可以包括确定目标CU是P条带的一部分还是B条带(例如，slice_type＝I)，或者确定目标CU是否是单树I条带的一部分(例如，qtbtt_dual_tree_intra_flag＝＝0)。
在步骤1807，响应于目标CU被确定为(a)用单独的亮度树和色度树编码以及(b)是单树条带的一部分，可以基于接收到的调色板条目来解码目标CU的第一分量。并且可以基于默认调色板条目来解码目标CU的第二分量。在一些实施例中，方法1800可以包括:响应于目标CU被确定为P条带或B条带的一部分或单树I条带的一部分，基于所接收的调色板条目对目标CU的第一和第二分量进行解码。所述第一分量是亮度分量，所述第二分量是色度分量，或者所述第一分量是色度分量，所述第二分量是亮度分量。
在一些实施例中，方法1800可以包括接收用于重用调色板条目来对目标CU进行调色板编码的重用标志，并且基于所接收的调色板条目和所接收的重用标志来更新目标CU的调色板预测器。在一些实施例中，目标CU的调色板预测器的大小在0到63的范围内，包括端值。在一些实施例中，方法1800可以包括基于所接收的调色板条目来更新目标CU的调色板预测器。在一些实施例中，在所述第一分量和所述第二分量被解码之后，不更新所述目标CU的调色板预测器。
图19示出了根据本公开的一些实施例的示例性视频处理方法1900的流程图。在一些实施例中，方法1900可以由编码器(例如，图2的编码器200)、解码器(例如，图3的解码器300)或装置(例如，图4的装置400)的一个或多个软件或硬件组件来执行。例如，处理器(例如，图4的处理器402)可以执行方法1900。在一些实施例中，方法1900可以由包含在计算机可读介质中的计算机程序产品来实现，所述计算机程序产品包括由计算机(例如，图4的装置400)执行的计算机可执行指令，诸如程序代码。
在步骤1901，方法1900可以包括用信号通知指示针对目标CU启用调色板模式的标志。无论色度采样格式是否用于目标CU，都可以用信号通知该标志。在一些实施例中，所述标志在SPS中被发信号通知。色度采样格式可以包括4:4:4格式、4:2:2格式或4:2:0格式中的一个或多个。
在步骤1903，方法1900还可以包括确定用于目标CU的色度采样格式(例如，4:4:4格式、4:2:2格式或4:2:0格式)。在一些实施例中，方法1900可以包括:基于所确定的色度采样格式(例如，4:4:4格式)，用信号发送对应的语法元素(例如，图7的表1中的语法元素sps_act_enabled_flag)。
图20示出了根据本公开的一些实施例的示例性视频处理方法2000的流程图。在一些实施例中，方法2000可以由编码器(例如，图2的编码器200)、解码器(例如，图3的解码器300)或装置(例如，图4的装置400)的一个或多个软件或硬件组件来执行。例如，处理器(例如，图4的处理器402)可以执行方法2000。在一些实施例中，方法2000可以由包含在计算机可读介质中的计算机程序产品来实现，所述计算机程序产品包括由计算机(例如，图4的装置400)执行的计算机可执行指令，诸如程序代码。
在步骤2001，可以确定目标CU是否用单独的亮度树和色度树编码。例如，可以确定是否满足条件(treeType！＝SINGLE_TREE)。如果treeType！＝SINGLE_TREE，可以确定目标CU使用单独的亮度树和色度树进行编码。
在步骤2003，可以确定目标CU是否是单树条带的一部分。在一些实施例中，方法2000可以包括确定目标CU是P条带的一部分还是B条带(例如，slice_type＝I)，或者确定目标CU是否是单树I条带的一部分(例如，qtbtt_dual_tree_intra_flag＝＝0)。
在步骤2005，响应于目标CU被确定为(a)用单独的亮度树和色度树编码并且(b)是单树条带的一部分，可以确定对于目标CU禁止调色板模式(例如，图8的表2)。
图21示出了根据本公开的一些实施例的示例性视频处理方法2100的流程图。在一些实施例中，方法2100可以由编码器(例如，图2的编码器200)、解码器(例如，图3的解码器300)或装置(例如，图4的装置400)的一个或多个软件或硬件组件来执行。例如，处理器(例如，图4的处理器402)可以执行方法2100。在一些实施例中，方法2100可以由包含在计算机可读介质中的计算机程序产品来实现，所述计算机程序产品包括由计算机(例如，图4的装置400)执行的计算机可执行指令，诸如程序代码。
在步骤2101，可以确定目标CU是否用单独的亮度树和色度树编码。例如，可以确定是否满足条件(treeType！＝SINGLE_TREE)。如果treeType！＝SINGLE_TREE，可以确定目标CU使用单独的亮度树和色度树进行编码。
在步骤2103，可以确定目标CU是否是单树条带的一部分。在一些实施例中，方法2100可以包括确定目标CU是P条带的一部分还是B条带(例如，slice_type＝I)，或者确定目标CU是否是单树I条带的一部分(例如，qtbtt_dual_tree_intra_flag＝＝0)。
在步骤2105，响应于目标CU被确定为(a)用单独的亮度树和色度树编码并且(b)是单树条带的一部分，可以用信号通知一重用标志，该重用标志用于将调色板条目重用于编码目标CU的调色板。没有新的调色板条目被用信号通知用于对目标CU进行编码的调色板(例如，图9的表3)。
在一些实施例中，方法2100可以包括:响应于目标CU被确定为不是(a)用单独的亮度树和色度树编码或(b)单树条带的一部分，用信号发送用于对目标CU进行编码的调色板条目(例如，图9的表3)。
在一些实施例中，方法2100可以包括:确定目标CU中的像素是否仅包含亮度分量，并且响应于像素被确定为仅包含亮度分量，如果使用逃逸模式CU对所述像素进行编码，仅用信号通知用于像素的亮度调色板逃逸值(例如，图9的表3)。
图22示出了根据本公开的一些实施例的示例性视频处理方法2200的流程图。在一些实施例中，方法2200可以由编码器(例如，图2的编码器200)、解码器(例如，图3的解码器300)或装置(例如，图4的装置400)的一个或多个软件或硬件组件来执行。例如，处理器(例如，图4的处理器402)可以执行方法2200。在一些实施例中，方法2200可以由包含在计算机可读介质中的计算机程序产品来实现，所述计算机程序产品包括由计算机(例如，图4的装置400)执行的计算机可执行指令，诸如程序代码。
在步骤2201，可以确定目标编码单元(CU)中的像素是否仅包含亮度分量。在步骤2203处，响应于像素被确定为仅包含亮度分量，如果使用逃逸模式对像素进行编码(例如，图11的表4)，则可以仅用信号通知像素的亮度调色板逃逸值。
图23示出了根据本公开的一些实施例的示例性视频处理方法2300的流程图。在一些实施例中，方法2300可以由的解码器(例如，图3的解码器300)或装置(例如，图4的装置400)一个或多个软件或硬件组件来执行。例如，处理器(例如，图4的处理器402)可以执行方法2300。在一些实施例中，方法2300可以由包含在计算机可读介质中的计算机程序产品来实现，所述计算机程序产品包括由计算机(例如，图4的装置400)执行的计算机可执行指令，诸如程序代码。
在步骤2301，可以接收位流。位流可以包括用于将调色板条目重用于对目标CU进行编码的调色板的重用标志。例如，解码器(例如，图3的解码器300)可以接收包括一个或多个重用标志(例如，图9的表3中的palette_predictor_run)的位流，用于将调色板条目重用到对目标CU进行编码的调色板代码。
在步骤2303，可以确定目标CU是否用单独的亮度树和色度树编码。例如，可以确定是否满足条件(treeType！＝SINGLE_TREE)。如果treeType！＝SINGLE_TREE，可以确定目标CU使用单独的亮度树和色度树进行编码。
在步骤2305，可以确定目标CU是否是单树条带的一部分。在一些实施例中，方法2300可以包括确定目标CU是P条带的一部分还是B条带(例如，slice_type＝I)，或者确定目标CU是否是单树I条带的一部分(例如，qtbtt_dual_tree_intra_flag＝＝0)。
在步骤2307，响应于目标CU被确定为(a)用单独的亮度树和色度树编码以及(b)单树条带的一部分，可以基于接收到的重用标志来解码目标CU的亮度分量和色度分量。接收到的位流不包括用于对目标CU进行编码的调色板条目。在一些实施例中，方法2300可以包括:响应于确定目标CU为P条带或B条带的一部分或单树I条带的一部分，基于接收到的重用标志和用于对位流中的目标CU进行编码的调色板条目来解码目标CU的亮度分量和色度分量。
在一些实施例中，方法2300可以包括基于所接收的重用标志来更新目标CU的调色板预测器。方法230还可以包括:响应于确定目标CU为P切片或B切片的一部分或单树I切片的一部分，基于所接收的重用标志和用于对位流中的目标CU进行编码的调色板条目来更新目标CU的调色板预测器。在一些实施例中，目标CU的调色板预测器的大小在0到63的范围内，包括端值。
在一些实施例中，还提供了包括指令集的非暂时性计算机可读存储介质，并且所述指令集可以由设备(诸如所公开的编码器和解码器)执行，用于执行上述方法。非暂时性介质的常见形式包括，例如，软盘、硬盘、固态驱动器、磁带或任何其他磁性数据存储介质、CD-ROM、任何其他光学数据存储介质、任何具有孔图案的物理介质、RAM、PROM和EPROM、FLASH-EPROM或任何其他闪存、NVRAM、高速缓存、寄存器、任何其他存储芯片或盒式存储，以及它们的联网版本。该设备可以包括一个或多个处理器(CPU)、输入/输出接口、网络接口和/或存储器。
可以使用以下条款进一步描述实施例:
1.一种视频处理方法，包括:
接收用于对目标编码单元(CU)进行编码的调色板的第一调色板条目；
确定所述目标CU是否是单树条带的一部分；
确定所述目标CU是否使用单独的亮度树和色度树进行编码；以及
响应于确定所述目标CU为单树条带的一部分并使用单独的亮度树和色度树进行编码，
基于所述第一调色板条目对所述目标CU的第一分类进行解码，并且
基于默认调色板条目对所述目标CU的第二分量进行解码。
2.根据条款1所述的方法，其中接收用于对所述目标CU进行编码的调色板的所述第一调色板条目包括:
接收与第二调色板条目相关联的标志；以及
基于所述接收到的标志将所述第二调色板条目包括在的所述目标CU的调色板预测器中。
3.根据条款2所述的方法，其中所述目标CU的所述调色板预测器的大小在0至63的范围内，包括端值在内。
4.根据条款1-3中任一项所述的方法，其中接收用于对所述目标CU进行编码的调色板的所述第一调色板条目包括:
基于所述第一调色板条目更新所述目标CU的调色板预测器。
5.根据条款1-4中任一项所述的方法，其中确定所述目标CU是否是单树条带的一部分包括:
确定所述目标CU是P条带的一部分还是B条带的一部分；或者
确定所述目标CU是单树I条带的一部分。
6.根据条款5所述的方法，还包括:
响应于确定所述目标CU为P条带的一部分或B条带的一部分或为单树I条带的一部分，基于所述第一调色板条目对所述目标CU的所述第一分量和第二分量进行解码。
7.根据条款1-6中任一项所述的方法，其中:
所述第一分量是亮度分量，所述第二分量是色度分量；或者
所述第一分量是色度分量，所述第二分量是亮度分量。
8.根据条款1所述的方法，其中在解码所述第一分量和所述第二分量之后，不更新所述目标CU的调色板预测器。
9.一种视频处理装置，包括:
至少一个存储器，用于存储指令集；以及
至少一个处理器，被配置为执行所述指令集以使所述装置执行以下操作:
接收用于对目标编码单元(CU)进行编码的调色板的第一调色板条目；
确定目标CU是否是单树条带的一部分；
确定目标CU是否用单独的亮度树和色度树编码；以及
响应于确定所述目标CU为单树条带的一部分并用单独的亮度树和色度树编码，
基于所述第一调色板条目对所述目标CU的第一分量进行解码，并且
基于默认调色板条目对所述目标CU的第二分量进行解码。
10.根据条款9所述的装置，其中所述至少一个处理器被配置为执行所述指令以使所述装置执行:
接收与第二调色板条目相关联的标志；以及
基于接收到的标志将所述第二调色板条目包括在所述目标CU的调色板预测器中。
11.根据条款10所述的装置，其中所述目标CU的所述调色板预测器的大小在0至63的范围内，包括端值在内。
12.根据条款9-11中任一项所述的装置，其中所述至少一个处理器被配置为执行所述指令以使所述装置执行:
基于所述第一调色板条目更新所述目标CU的调色板预测器。
13.根据条款9-12中任一项所述的装置，其中所述至少一个处理器被配置为执行所述指令以使所述装置执行:
确定所述目标CU是P条带的一部分还是B条带的一部分；或者
确定所述目标CU是单个树I条带的一部分。
14.根据条款13所述的装置，其中所述至少一个处理器被配置为执行所述指令以使所述装置执行:
响应于所述目标CU被确定为P条带或B条带的一部分或为单树I条带的一部分，基于所述第一调色板条目对所述目标CU的所述第一分量和所述第二分量进行解码。
15.根据条款9-14中任一项所述的装置，其中
所述第一分量是亮度分量，所述第二分量是色度分量；或者
所述第一分量是色度分量，所述第二组分是亮度分量。
16.根据条款9所述的装置，其中在解码所述第一分量和所述第二分量之后，不更新所述目标CU的调色板预测器。
17.一种非暂时性计算机可读存储介质，存储有指令集，所述指令集可由一个或多个处理设备执行以使视频处理装置执行以下操作:
接收用于对目标编码单元(CU)进行编码的调色板的第一调色板条目；
确定所述目标CU是否是单树条带的一部分；
确定目标CU是否使用单独的亮度树和色度树进行编码；以及
响应于确定所述目标CU为单树条带的一部分并使用单独的亮度树和色度树进行编码，
基于所述第一调色板条目对所述目标CU的第一分量进行解码，并且
基于默认调色板条目对所述目标CU的第二分量进行解码。
18.根据条款17所述的非暂时性计算机可读存储介质，其中所述指令集可由所述一个或多个处理设备执行以使所述视频处理装置执行:
接收与第二调色板条目相关联的标志；以及
基于接收到的标志将所述第二调色板条目包括在所述目标CU的调色板预测器中。
19.根据条款18所述的非暂时性计算机可读存储介质，其中所述目标CU的所述调色板预测器的大小在0至63的范围内，包括端值在内。
20.根据条款17-19中任一项所述的非暂时性计算机可读存储介质，其中所述指令集可由所述一个或多个处理设备执行以使所述视频处理装置执行:
基于所述第一调色板条目更新所述目标CU的调色板预测器。
21.根据条款17-20中任一项所述的非暂时性计算机可读存储介质，其中所述指令集可由所述一个或多个处理设备执行以使所述视频处理装置执行:
确定所述目标CU是P条带的一部分还是B条带的一部分；或者确定目标CU是单个树I条带的一部分。
22.根据条款21所述的非暂时性计算机可读存储介质，其中所述指令集可由所述一个或多个处理设备执行以使所述视频处理装置执行:
响应于所述目标CU被确定为P条带或B条带的一部分或为单树I条带的一部分，基于所述第一调色板条目对所述目标CU的所述第一分量和所述第二分量进行解码。
23.根据条款17-22中任一项所述的非暂时性计算机可读存储介质，其中
所述第一分量是亮度分量，所述第二分量是色度分量；或者
所述第一分量是色度分量，所述第二分量是亮度分量。
24.如条款17所述的非暂时性计算机可读存储介质，其中在解码所述第一分量和所述第二分量之后，不更新所述目标CU的调色板预测器。
25.一种视频处理方法，包括:
发信号通知一标志，该标志指示针对目标编码单元(CU)启用了调色板模式，
其中不管色度采样格式是否用于所述目标CU，所述标志都被发信号通知。
26.根据条款25所述的方法，其中所述标志在序列参数集(SPS)中用信号通知。
27.根据条款25和26中任一项所述的方法，其中所述色度采样格式包括以下中的一个或多个:
4:4:4格式，
4:2:2格式，或
4:2:0格式。
28.一种视频处理方法，包括:
确定目标CU是否为单树条带的一部分；
确定目标编码单元(CU)是否使用单独的亮度树和色度树进行编码；以及
响应于所述目标CU被确定为单树条带的一部分并且使用单独的亮度树和色度树编码，确定对于所述目标CU的调色板模式被禁止。
29.根据条款28所述的方法，其中确定所述目标CU是否是单树条带的一部分包括:
确定所述目标CU是P条带的一部分还是B条带的一部分；或者
确定所述目标CU是单树I条带的一部分。
30.根据条款29所述的方法，还包括:
响应于所述目标CU被确定为P条带或B条带的一部分或单树I条带的一部分，确定对所述目标CU允许调色板模式。
31.一种视频处理方法，包括:
确定目标CU是否为单树条带的一部分；
确定目标编码单元(CU)是否使用单独的亮度树和色度树进行编码；以及
响应于所述目标CU被确定为单树条带的一部分并且用单独的亮度树和色度树进行编码，发信号通知一重用标志，该重用标志用于重用一调色板条目至对所述目标CU进行编码的调色板，其中没有新的调色板条目被发信号通知以用于对所述目标CU进行调色板编码。
32.根据条款31所述的方法，其中确定所述目标CU是否是单树条带的一部分包括:
确定所述目标CU是P条带的一部分还是B条带的一部分；或者
确定所述目标CU是单树I条带的一部分。
33.根据条款31和32中任一项所述的方法，还包括:
响应于所述目标CU不是单树条带的一部分或未使用单独的亮度树和色度树进行编码，发信号通知用于对目标CU进行编码的调色板的调色板条目。
34.根据条款31-33中任一项所述的方法，还包括:
确定所述目标CU中的像素是否包含色度分量，所述像素使用逃逸模式进行编码；以及
响应于所述像素不包含色度分量，发信号通知所述像素的亮度调色板逃逸值，其中不发信号通知所述像素的色度调色板逃逸值。
35.一种视频处理方法，包括:
确定目标编码单元(CU)中的像素是否包含色度分量，所述像素使用逃逸模式进行编码；以及
响应于所述像素不包含色度分量，发信号通知亮度调色板的逃逸值，其中不发信号通知所述像素的色度调色板的逃逸值。
36.一种视频处理方法，包括:
接收包括重用标志的位流，所述重用标志用于重用调色板条目到对目标编码单元(CU)进行编码的调色板；
确定所述目标CU是否为单树条带的一部分；
确定所述目标CU是否使用单独的亮度树和色度树进行编码；以及
响应于所述目标CU被确定为单树条带的一部分并使用单独的亮度树和色度树进行编码，基于所接收的重用标志对所述目标CU的亮度分量和色度分量进行解码，所述位流不包括用于对所述目标CU进行编码的调色板的调色板条目，所述目标CU是单树条带的一部分并且用单独的亮度树和色度树进行编码。
37.根据条款36所述的方法，还包括:
基于接收到的重用标志更新所述目标CU的调色板预测器。
38.根据条款36和37中任一项所述的方法，其中确定所述目标CU是否是单树条带的一部分包括:
确定所述目标CU是P条带的一部分还是B条带的一部分；或者
确定所述目标CU是单树I条带的一部分。
39.根据条款38所述的方法，还包括:
响应于确定所述目标CU为P条带或B条带的一部分或单树I条带的一部分，基于接收到的重用标志和用于对位流中的目标CU进行编码的调色板的调色板条目来解码所述目标CU的亮度分量和色度分量。
40.根据条款38和39中任一项所述的方法，还包括:
响应于确定所述目标CU为P条带或B条带的一部分或单树I条带的一部分，基于所接收的重用标志和用于对位流中的所述目标CU进行编码的调色板的调色板条目来更新所述目标CU的调色板预测器。
41.根据条款37和40中任一项所述的方法，其中所述目标CU的所述调色板预测器的大小在0至63的范围内，包括端值在内。
42.一种视频处理装置，其特征在于，包括:
至少一个存储器，用于存储指令集；以及
至少一个处理器，被配置为执行所述指令集以使所述装置执行以下操作:
发信号通知一标志，该标志指示针对目标编码单元(CU)启用了调色板模式，
其中，不管色度采样格式是否用于所述目标CU，所述标志都被用信号通知。
43.根据条款42所述的装置，其中所述标志在序列参数集(SPS)中被用信号通知。
44.根据条款42和43中任一项所述的装置，其中所述色度采样格式包括以下中的一个或多个:
4:4:4格式，
4:2:2格式，或
4:2:0格式。
45.一种视频处理装置，其特征在于，包括:
至少一个存储器，用于存储指令集；以及
至少一个处理器，被配置为执行所述指令集以使所述装置执行以下操作:
确定目标CU是否是单树条带的一部分；
确定目标编码单元(CU)是否使用单独的亮度树和色度树进行编码；以及
响应于确定所述目标CU为单树条带的一部分并且用单独的亮度树和色度树编码，确定对于所述目标CU，调色板模式被禁止。
46.根据条款45所述的装置，其中所述至少一个处理器被配置为执行所述指令以使所述装置执行:
确定所述目标CU是P条带的一部分还是B条带的一部分；或者
确定目标CU是单树I条带的一部分。
47.根据条款46所述的装置，其中所述至少一个处理器被配置为执行所述指令以使所述装置执行:
响应于确定所述目标CU为P条带或B条带的一部分或单树I条带的一部分，确定对于所述目标CU允许调色板模式。
48.一种视频处理装置，其特征在于，包括:
至少一个存储器，用于存储指令集；以及
至少一个处理器，被配置为执行所述指令集以使所述装置执行以下操作:
确定目标CU是否是单树条带的一部分；
确定目标编码单元(CU)是否使用单独的亮度树和色度树进行编码；以及
响应于确定所述目标CU为单树条带的一部分并且用单独的亮度树和色度树进行编码，发信号通知一重用标志，该重用标志用于重用一调色板条目至对所述目标CU进行编码的调色板，其中没有新的调色板条目被发信号通知以用于对所述目标CU进行调色板编码。
49.根据条款48所述的装置，其中所述至少一个处理器被配置为执行所述指令以使所述装置执行:
确定是目标CU是P条带的一部分还是B条带的一部分；或者
确定所述目标CU是单树I条带的一部分。
50.根据条款48和49中任一项所述的装置，其中所述至少一个处理器被配置为执行所述指令以使所述装置执行:
响应于所述目标CU不是单树条带的一部分或未使用单独的亮度树和色度树进行编码，发信号通知用于对所述CU进行编码的调色板条目。
51.根据条款48-50中任一项所述的装置，其中所述至少一个处理器被配置为执行所述指令以使所述装置执行:
确定所述目标CU中的像素是否包含色度分量，所述像素使用逃逸模式进行编码；以及
响应于所述像素不包含色度分量，发信号通知所述像素的亮度调色板逃逸值，其中不发信号通知所述像素的色度调色板逃逸值。
52.一种视频处理装置，其特征在于，包括:
至少一个存储器，用于存储指令集；以及
至少一个处理器，被配置为执行所述指令集以使所述装置执行以下操作:
确定目标编码单元(CU)中的像素是否包含色度分量，所述像素使用逃逃逸模式进行编码；以及
响应于所述像素不包含色度分量，发信号通知亮度调色板的逃逸值，其中不发信号通知所述像素的色度调色板的逃逸值。
53.一种视频处理装置，其特征在于，包括:
至少一个存储器，用于存储指令集；以及
至少一个处理器，被配置为执行所述指令集以使所述装置执行以下操作:
接收包括重用标志的位流，所述重用标志用于重用调色板条目到对目标编码单元(CU)进行编码的调色板；
确定所述目标CU是否为单树条带的一部分；
确定所述目标CU是否用单独的亮度树和色度树编码；以及
响应于确定所述目标CU为单树条带的一部分并且用单独的亮度树和色度树进行编码，基于所接收的重用标志对所述目标CU的亮度分量和色度分量进行解码，所述位流不包括用于对所述目标CU进行编码的调色板的调色板条目，所述目标CU是单树条带的一部分，并且用单独的亮度树和色度树进行编码。
54.根据条款53所述的装置，其中所述至少一个处理器被配置为执行所述指令以使所述装置执行:
基于接收到的重用标志更新是目标CU的调色板预测器。
55.根据条款53和54中任一项所述的装置，其中所述至少一个处理器被配置为执行所述指令以使所述装置执行:
确定目标CU是P条带的一部分还是B条带的一部分；或者
确定目标CU是单个树I条带的一部分。
56.根据条款55所述的装置，其中所述至少一个处理器被配置为执行所述指令以使所述装置执行:
响应于确定所述目标CU为P条带或B条带的一部分或单树I条带的一部分，基于接收到的重用标志和用于对所述位流中的所述目标CU进行编码的调色板的调色板条目来解码所述目标CU的亮度分量和色度分量。
57.根据条款55和56中任一项所述的装置，其中所述至少一个处理器被配置为执行所述指令以使所述装置执行:
响应于所述目标CU被确定为P条带或B条带的一部分或单树I条带的一部分，基于所接收的重用标志和用于对位流中的所述目标CU进行编码的调色板的调色板条目来更新所述目标CU的调色板预测器。
58.根据条款54和57中任一项所述的装置，其中所述目标CU的所述调色板预测器的大小在0到63的范围内，包括端值在内。
59.一种非暂时性计算机可读存储介质，存储有指令集，所述指令集可由一个或多个处理设备执行以使视频处理装置执行以下操作:
发信号通知一标志，该标志指示针对目标编码单元(CU)启用了调色板模式，其中不管色度采样格式是否用于所述目标CU，所述标志都被发信号通知。
60.根据条款59所述的非暂时性计算机可读存储介质，其中所述标志在序列参数集(SPS)中被用信号通知。
61.根据条款59和60中任一项所述的非暂时性计算机可读存储介质，其中所述色度采样格式包括以下中的一个或多个:
4:4:4格式，
4:2:2格式，或
4:2:0格式。
62.一种非暂时性计算机可读存储介质，存储指令集，所述指令集可由一个或多个处理设备执行以使视频处理装置执行以下操作:
确定目标CU是否为单树条带的一部分；
确定目标编码单元(CU)是否使用单独的亮度树和色度树进行编码；以及
响应于确定所述目标CU为单树条带的一部分并且用单独的亮度树和色度树编码，确定对于所述目标CU，调色板模式被禁止。
63.根据条款62所述的非暂时性计算机可读存储介质，其中所述指令集可由所述一个或多个处理设备执行以使所述视频处理装置执行:
确定所述目标CU是P条带的一部分还是B条带的一部分；或者
确定目标CU是单树I条带的一部分。
64.根据条款63所述的非暂时性计算机可读存储介质，其中所述指令集可由所述一个或多个处理设备执行以使所述视频处理装置执行:
响应于确定所述目标CU为P条带或B条带的一部分或单树I条带的一部分，确定对于所述目标CU允许调色板模式。
65.一种非暂时性计算机可读存储介质，存储指令集，所述指令集可由一个或多个处理设备执行以使视频处理装置执行以下操作:
确定目标CU是否为单树条带的一部分；
确定目标编码单元(CU)是否使用单独的亮度树和色度树进行编码；以及
响应于确定所述目标CU为单树条带的一部分并且用单独的亮度树和色度树进行编码，发信号通知一重用标志，该重用标志用于重用一调色板条目至对所述目标CU进行编码的调色板，其中没有新的调色板条目被发信号通知以用于对所述目标CU进行调色板编码。
66.根据条款65所述的非暂时性计算机可读存储介质，其中所述指令集可由所述一个或多个处理设备执行以使所述视频处理装置执行:
确定所述目标CU是P条带的一部分还是B条带的一部分；或者
确定所述目标CU是单树I条带的一部分。
67.根据条款65和66中任一项所述的非暂时性计算机可读存储介质，其中所述指令集可由所述一个或多个处理设备执行以使所述视频处理装置执行:
响应于所述目标CU不是单树条带的一部分或未使用单独的亮度树和色度树进行编码，发信号通知用于对所述目标CU进行编码的调色板条目。
68.根据条款65-67中任一项所述的非暂时性计算机可读存储介质，其中所述指令集可由所述一个或多个处理设备执行以使所述视频处理装置执行:
确定所述目标CU中的像素是否包含色度分量，所述像素使用逃逸模式进行编码；以及
响应于所述像素不包含色度分量，发信号通知所述像素的亮度调色板逃逸值，其中不发信号通知所述像素的色度调色板跳值。
69.一种非暂时性计算机可读存储介质，存储指令集，所述指令集可由一个或多个处理设备执行以使视频处理装置执行以下操作:
确定目标编码单元(CU)中的像素是否包含色度分量，所述像素使用逃逸模式进行编码；以及
响应于所述像素不包含色度分量，发信号通知亮度调色板逃逸值，其中不发信号通知所述像素的色度调色板的逃逸值。
70.一种非暂时性计算机可读存储介质，存储指令集，所述指令集可由一个或多个处理设备执行以使视频处理装置执行以下操作:
接收包括重用标志的位流，所述重用标志用于重用调色板条目到对目标编码单元(CU)进行编码的调色板；
确定所述目标CU是否为单树条带的一部分；
确定所述目标CU是否使用单独的亮度树和色度树进行编码；以及
响应于确定所述目标CU为单树条带的一部分并使用单独的亮度树和色度树进行编码，基于所接收的重用标志对所述目标CU的亮度分量和色度分量进行解码，所述位流不包括用于对所述目标CU进行编码的调色板条目，所述目标CU是单树条带的一部分并且用单独的亮度树和色度树进行编码。
71.根据条款70所述的非暂时性计算机可读存储介质，其中所述指令集可由所述一个或多个处理设备执行以使所述视频处理装置执行:
基于接收到的重用标志更新所述目标CU的调色板预测器。
72.根据条款70和71中任一项所述的非暂时性计算机可读存储介质，其中所述指令集可由所述一个或多个处理设备执行以使所述视频处理装置执行:
确定所述目标CU是P条带的一部分还是B条带的一部分；或者
确定所述目标CU是单树I条带的一部分。
73.根据条款72所述的非暂时性计算机可读存储介质，其中所述指令集可由所述一个或多个处理设备执行以使所述视频处理装置执行:
响应于确定所述目标CU为P条带或B条带的一部分或单树I条带的一部分，基于接收到的重用标志和用于对所述位流中的所述目标CU进行编码的调色板的调色板条目来解码所述目标CU的亮度分量和色度分量。
74.根据条款72和73中任一项所述的非暂时性计算机可读存储介质，其中所述指令集可由所述一个或多个处理设备执行以使所述视频处理装置执行:
响应于确定所述目标CU为P条带或B条带的一部分或单树I条带的一部分，基于所接收的重用标志和用于对所述位流中的所述目标CU进行编码的调色板的调色板条目来更新所述目标CU的调色板预测器。
75.根据条款72和74中任一项所述的非暂时性计算机可读存储介质，其中所述目标CU的所述调色板预测器的大小在0到63的范围内，包括端值在内。
应当注意，本文中的关系术语，例如“第一”和“第二”，仅用于将实体或操作与另一实体或操作区分开来，而不要求或暗示这些实体或操作之间的任何实际关系或顺序。此外，词语“包括”、“具有”、“包含”和“包括”和其他类似的形式旨在在含义上是等效的，并且是开放式的，因为在这些词语中的任何一个后面的一个或多个项目并不意味着是这样一个或多个项目的详尽列表，或者意味着仅限于列出的一个或多个项目。
如本文所用，除非另有特别说明，否则术语“或”包括所有可能的组合，除非在不可行的情况下。例如，如果声明数据库可包括A或B，则除非另有明确声明或不可行，否则数据库可包括A、或B、或A和B。作为第二示例，如果声明数据库可以包括A、B或C，则除非另有明确说明或不可行，否则数据库可以包括A、或B、或C、或A和B、或A和C、或B和C、或A，B和C。
应当理解，上述实施例可以通过硬件、或软件(程序代码)、或硬件和软件的组合来实现。如果通过软件实现，则可以将其存储在上述计算机可读介质中。该软件在由处理器执行时可以执行所公开的方法。本公开中描述的计算单元和其他功能单元可以通过硬件、或软件、或硬件和软件的组合来实现。本领域普通技术人员还将理解，可以将上述多个模块/单元组合为一个模块/单元，并且可以将上述模块/单元中的每一个进一步划分为多个子模块/子单元。
在上述说明书中，已经参考许多具体细节描述了实施例，这些具体细节可以随实施方式而变化。可以对所描述的实施例进行某些修改和修改。通过考虑本文公开的本发明的说明书和实践，其他实施例对于本领域技术人员来说是显而易见的。本说明书和实施例仅被认为是示例性的，本发明的真正范围和精神由所附的权利要求指示。附图所示的步骤序列仅用于说明目的，而不旨在限于任何特定的步骤序列。因此，本领域技术人员可以理解，这些步骤可以在实施相同方法的同时以不同的顺序执行。
在附图和说明书中，已经公开了示例性实施例。然而，可以对这些实施例进行许多变化和修改。因此，尽管采用了特定的术语，但它们仅在通用和描述性的意义上使用，而不是出于限制的目的。

Claims (20)

1.一种视频处理方法，包括:
接收用于对目标编码单元(CU)进行编码的调色板的第一调色板条目；确定所述目标CU是否是单树条带的一部分；
确定所述目标CU是否使用单独的亮度树和色度树进行编码；以及
响应于确定所述目标CU为单树条带的一部分并用单独的亮度树和色度树进行编码，
基于所述第一调色板条目对所述目标CU的第一分量进行解码，并且
基于默认调色板条目对所述目标CU的第二分量进行解码。
2.根据权利要求1所述的方法，其中，接收用于对所述目标CU进行编码的调色板的所述第一调色板条目包括:
接收与第二调色板条目相关联的标志；以及
基于接收到的标志，将所述第二调色板条目包括在所述目标CU的调色板预测器中。
3.根据权利要求2所述的方法，其中，所述目标CU的所述调色板预测器的大小在0到63的范围内，包括端值在内。
4.根据权利要求1所述的方法，其中，接收用于对所述目标CU进行编码的调色板的所述第一调色板条目包括:
基于所述第一调色板条目更新所述目标CU的调色板预测器。
5.根据权利要求1所述的方法，其中确定所述目标CU是否是单树条带的一部分包括:
确定所述目标CU是P条带的一部分还是B条带的一部分；或者
确定所述目标CU是单树I条带的一部分。
6.根据权利要求5所述的方法，还包括:
响应于确定所述目标CU为P条带的一部分或B条带的一部分或为单树I条带的一部分，基于所述第一调色板条目对所述目标CU的所述第一分量和所述第二分量进行解码。
7.根据权利要求1所述的方法，其中:
所述第一分量是亮度分量，所述第二分量是色度分量；或者
所述第一分量是色度分量，所述第二分量是亮度分量。
8.根据权利要求1所述的方法，其中，在对所述第一分量和所述第二分量解码之后，不更新所述目标CU的调色板预测器。
9.一种视频处理装置，包括:
至少一个存储器，所述至少一个存储器用于存储指令集；以及
至少一个处理器，所述至少一个处理器被配置为执行所述指令集以使所述装置执行以下操作:
接收用于对目标编码单元(CU)进行编码的调色板的第一调色板条目；
确定所述目标CU是否是单树条带的一部分；
确定所述目标CU是否用单独的亮度树和色度树编码；以及
响应于确定所述目标CU为单树条带的一部分并用单独的亮度树和色度树编码，
基于所述第一调色板条目对所述目标CU的第一分量进行解码，并且
基于默认调色板条目对所述目标CU的第二分量进行解码。
10.如权利要求9所述的装置，其特征在于，所述至少一个处理器被配置为执行所述指令以使所述装置执行:
接收与第二调色板条目相关联的标志；以及
基于接收到的标志，将所述第二调色板条目包括在所述目标CU的调色板预测器中。
11.如权利要求9所述的装置，其特征在于，所述至少一个处理器被配置为执行所述指令以使所述装置执行:
确定所述目标CU是P条带的一部分还是B条带的一部分；或者
确定目标CU是单树I条带的一部分。
12.如权利要求11所述的装置，其特征在于，所述至少一个处理器被配置为执行所述指令以使所述装置执行:
响应于所述目标CU被确定为P条带的一部分或B条带的一部分或为单树I条带的一部分，基于所述第一调色板条目对所述目标CU的所述第一分量和所述第二分量进行解码。
13.根据权利要求9所述的装置，其中，在解码所述第一分量和所述第二分量之后，不更新所述目标CU的调色板预测器。
14.一种非暂时性计算机可读存储介质，存储有指令集，所述指令集可由一个或多个处理设备执行以使视频处理装置执行以下操作:
接收用于对目标编码单元(CU)进行编码的调色板的第一调色板条目；
确定所述目标CU是否是单树条带的一部分；
确定所述目标CU是否使用单独的亮度树和色度树进行编码；以及
响应于确定所述目标CU为单树条带的一部分并用单独的亮度树和色度树进行编码，
基于所述第一调色板条目对所述目标CU的第一分量进行解码，并且
基于默认调色板条目对所述目标CU的第二分量进行解码。
15.根据权利要求14所述的非暂时性计算机可读存储介质，其中所述指令集能够由所述一个或多个处理设备执行以使所述视频处理装置执行:
接收与第二调色板条目相关联的标志；以及
基于接收到的标志，将所述第二调色板条目包括在目标CU的调色板预测器中。
16.根据权利要求14所述的非暂时性计算机可读存储介质，其中所述指令集能够由所述一个或多个处理设备执行以使所述视频处理装置执行:
基于所述第一调色板条目更新所述目标CU的调色板预测器。
17.根据权利要求14所述的非暂时性计算机可读存储介质，其中所述指令集能够由所述一个或多个处理设备执行以使所述视频处理装置执行:
确定所述目标CU是P条带的一部分还是B条带的一部分；或者
确定所述目标CU是单树I条带的一部分。
18.根据权利要求17所述的非暂时性计算机可读存储介质，其中所述指令集能够由所述一个或多个处理设备执行以使所述视频处理装置执行:
响应于所述目标CU被确定为P条带的一部分或B条带的一部分或为单树I条带的一部分，基于所述第一调色板条目对所述目标CU的所述第一分量和所述第二分量进行解码。
19.根据权利要求14所述的非暂时性计算机可读存储介质，其中
所述第一分量是亮度分量，所述第二分量是色度分量；或者
所述第一分量是色度分量，所述第二分量是亮度分量。
20.根据权利要求14所述的非暂时性计算机可读存储介质，其中，在解码所述第一分量和所述第二分量之后，不更新所述目标CU的调色板预测器。
CN202080081908.3A 2019-12-03 2020-10-02 使用调色板模式的视频处理方法和装置 Pending CN114788289A (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201962943083P 2019-12-03 2019-12-03
US62/943,083 2019-12-03
US201962952426P 2019-12-22 2019-12-22
US62/952,426 2019-12-22
PCT/US2020/054023 WO2021112949A1 (en) 2019-12-03 2020-10-02 Video processing method and apparatus for using palette mode

Publications (1)

Publication Number Publication Date
CN114788289A true CN114788289A (zh) 2022-07-22

Family

ID=76091399

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202080081908.3A Pending CN114788289A (zh) 2019-12-03 2020-10-02 使用调色板模式的视频处理方法和装置

Country Status (6)

Country Link
US (3) US11451796B2 (zh)
EP (1) EP4070557A4 (zh)
JP (1) JP2023504407A (zh)
KR (1) KR20220101729A (zh)
CN (1) CN114788289A (zh)
WO (1) WO2021112949A1 (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2583061B (en) * 2019-02-12 2023-03-15 Advanced Risc Mach Ltd Data processing systems
US11683489B2 (en) * 2019-12-26 2023-06-20 Qualcomm Incorporated Monochrome palette mode for video coding

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016048092A1 (ko) * 2014-09-26 2016-03-31 주식회사 케이티 비디오 신호 처리 방법 및 장치
CN105556974A (zh) * 2013-07-12 2016-05-04 高通股份有限公司 基于调色板的视频译码中的调色板预测
CN105874796A (zh) * 2014-01-02 2016-08-17 高通股份有限公司 用于基于调色板的视频译码的颜色索引译码
US20170078683A1 (en) * 2015-09-14 2017-03-16 Qualcomm Incorporated Palette predictor initialization and merge for video coding
CN107079160A (zh) * 2014-11-11 2017-08-18 联发科技（新加坡）私人有限公司 对亮度及色度使用单独编码树的视频编码方法
CN107211160A (zh) * 2015-01-30 2017-09-26 高通股份有限公司 通过调色板预测残余编码的视频译码
US20190246122A1 (en) * 2018-02-08 2019-08-08 Qualcomm Incorporated Palette coding for video coding
US20190281311A1 (en) * 2018-03-07 2019-09-12 Tencent America LLC Methods and apparatus for palette coding

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9860560B2 (en) * 2014-07-02 2018-01-02 Qualcomm Incorporated Method for palette mode coding
US11330297B2 (en) * 2014-08-19 2022-05-10 Qualcomm Incorporated Methods incorporating extensions to copy-above mode for palette mode coding
US11206413B2 (en) * 2019-08-13 2021-12-21 Qualcomm Incorporated Palette predictor updates for local dual trees

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105556974A (zh) * 2013-07-12 2016-05-04 高通股份有限公司 基于调色板的视频译码中的调色板预测
CN105874796A (zh) * 2014-01-02 2016-08-17 高通股份有限公司 用于基于调色板的视频译码的颜色索引译码
WO2016048092A1 (ko) * 2014-09-26 2016-03-31 주식회사 케이티 비디오 신호 처리 방법 및 장치
CN107079160A (zh) * 2014-11-11 2017-08-18 联发科技（新加坡）私人有限公司 对亮度及色度使用单独编码树的视频编码方法
CN107211160A (zh) * 2015-01-30 2017-09-26 高通股份有限公司 通过调色板预测残余编码的视频译码
US20170078683A1 (en) * 2015-09-14 2017-03-16 Qualcomm Incorporated Palette predictor initialization and merge for video coding
US20190246122A1 (en) * 2018-02-08 2019-08-08 Qualcomm Incorporated Palette coding for video coding
US20190281311A1 (en) * 2018-03-07 2019-09-12 Tencent America LLC Methods and apparatus for palette coding

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
YU-CHEN SUN ET AL: "CE8: Palette mode with neighboring pixel copy (CE8-2.2)（JVET-O0059）", JVET 15TH MEETING *

Also Published As

Publication number Publication date
US20230011928A1 (en) 2023-01-12
KR20220101729A (ko) 2022-07-19
US20230023977A1 (en) 2023-01-26
EP4070557A4 (en) 2023-01-18
WO2021112949A1 (en) 2021-06-10
US11451796B2 (en) 2022-09-20
JP2023504407A (ja) 2023-02-03
EP4070557A1 (en) 2022-10-12
US20210168377A1 (en) 2021-06-03

Similar Documents

Publication Publication Date Title
CN114830670B (zh) 用于色度采样的方法和装置
US11356684B2 (en) Method and system for signaling chroma quantization parameter table
CN114424525A (zh) 视频处理中的量化参数标识
US20230011928A1 (en) Video processing method and apparatus for using palette mode
US20240129498A1 (en) Methods for processing chroma signals
CN114830669A (zh) 用于在图像边界划分块的方法和装置
US11765361B2 (en) Method and apparatus for coding video data in palette mode
US20230156211A1 (en) Method for apparatus for deriving maximum sub-block transform size
US20210266548A1 (en) Signaling of maximum transform size and residual coding method
CN115516857A (zh) 用于处理视频内容的方法和装置
CN114902670A (zh) 用信号通知子图像划分信息的方法和装置
CN115443655A (zh) 用于处理视频编码中自适应颜色变换和低频不可分离变换的方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right
TA01 Transfer of patent application right

Effective date of registration: 20220809

Address after: Room 554, floor 5, building 3, No. 969, Wenyi West Road, Wuchang Street, Yuhang District, Hangzhou City, Zhejiang Province

Applicant after: Alibaba (China) Co.,Ltd.

Address before: Box 847, four, Grand Cayman capital, Cayman Islands, UK

Applicant before: ALIBABA GROUP HOLDING Ltd.