CN113302924A - 用于视频编码和解码的量化 - Google Patents

用于视频编码和解码的量化 Download PDF

Info

Publication number
CN113302924A
CN113302924A CN201980088748.2A CN201980088748A CN113302924A CN 113302924 A CN113302924 A CN 113302924A CN 201980088748 A CN201980088748 A CN 201980088748A CN 113302924 A CN113302924 A CN 113302924A
Authority
CN
China
Prior art keywords
quantization
quantization mode
transform coefficients
selection condition
mode selection
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201980088748.2A
Other languages
English (en)
Inventor
陈娅
F.莱林内克
K.纳瑟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
InterDigital VC Holdings Inc
Original Assignee
InterDigital VC Holdings Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by InterDigital VC Holdings Inc filed Critical InterDigital VC Holdings Inc
Publication of CN113302924A publication Critical patent/CN113302924A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124Quantisation
    • H04N19/126Details of normalisation or weighting functions, e.g. normalisation matrices or variable uniform quantisers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124Quantisation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/18Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a set of transform coefficients
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/91Entropy coding, e.g. variable length coding [VLC] or arithmetic coding

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

提出了至少一种方法和装置用于有效地编码或解码视频。例如,获取量化模式选择条件。基于量化模式选择条件,选择第一量化模式用于处理变换系数集合的第一部分。基于量化模式选择条件,选择第二量化模式用于处理变换系数集合的第二部分。基于变换系数集合的经处理的第一部分和第二部分对视频进行编码或解码。

Description

用于视频编码和解码的量化
技术领域
本实施例一般涉及用于视频编码或解码的方法和设备,并且更具体地,涉及用于有效地编码和解码视频的方法和设备,其中基于量化模式选择条件来选择用于分别处理变换系数集合的第一部分和第二部分的量化模式。
背景技术
为了实现高压缩效率,图像和视频编解码(coding)方案通常采用预测性和变换编解码来利用视频内容中的空域和时域冗余。一般地,使用帧内预测或帧间预测来利用帧内或帧间的帧相关性,然后对原始块和预测块之间的差(通常被表示为预测误差或预测残差)进行变换、量化和熵编解码。为了重建视频,通过对应于预测、变换、量化和熵编解码的逆过程来对被压缩的数据进行解码。
对视频压缩技术的最近补充包括各种版本的参考软件和/或文件联合探索模型(JEM),它们由联合视频探索团队(JVET)开发,作为被称为多功能视频编解码(VVC)的新视频编解码标准的一部分。目的是对现有的高效视频编解码(HEVC)标准进行进一步的改进。
发明内容
根据根据本公开的至少一个实施例的一般方面,提出了一种用于视频编码的方法,包括获取量化模式选择条件;基于量化模式选择条件,选择第一量化模式用于处理变换系数集合的第一部分;基于量化模式选择条件,选择第二量化模式用于处理变换系数集合的第二部分;以及基于变换系数集合的经处理的第一部分和第二部分对视频进行编码。
根据根据本公开的至少一个实施例的一般方面,提出了一种用于视频编码的装置,包括一个或多个处理器,其被配置为:获取量化模式选择条件;基于量化模式选择条件,选择第一量化模式用于处理变换系数集合的第一部分;基于量化模式选择条件,选择第二量化模式用于处理变换系数集合的第二部分;以及基于变换系数集合的经处理的第一部分和第二部分对视频进行编码。
根据至少一个实施例的一般方面,提出了一种用于视频编码的装置,包括用于获取量化模式选择条件的部件;用于基于量化模式选择条件,选择第一量化模式用于处理变换系数集合的第一部分的部件;用于基于量化模式选择条件,选择第二量化模式用于处理变换系数集合的第二部分的部件;以及用于基于变换系数集合的经处理的第一部分和第二部分对视频进行编码的部件。
根据至少一个实施例的一般方面,提出了一种用于视频解码的方法,包括获取量化模式选择条件;基于量化模式选择条件,选择第一量化模式用于处理变换系数集合的第一部分;基于量化模式选择条件,选择第二量化模式用于处理变换系数集合的第二部分;以及基于变换系数集合的经处理的第一部分和第二部分对视频进行解码。
根据至少一个实施例的一般方面,提出了一种用于视频解码的装置,包括一个或多个处理器,其被配置为:获取量化模式选择条件;基于量化模式选择条件,选择第一量化模式用于处理变换系数集合的第一部分;基于量化模式选择条件,选择第二量化模式用于处理变换系数集合的第二部分;以及基于变换系数集合的经处理的第一部分和第二部分对视频进行解码。
根据至少一个实施例的一般方面,提出了一种用于视频解码的装置,包括用于获取量化模式选择条件的部件;用于基于量化模式选择条件,选择第一量化模式用于处理变换系数集合的第一部分的部件;用于基于量化模式选择条件,选择第二量化模式用于处理变换系数集合的第二部分的部件;以及用于基于变换系数集合的经处理的第一部分和第二部分对视频进行解码的部件。
在至少一个实施例中,提供一个或多个语法元素来指示量化模式选择条件,该量化模式选择条件使得能够基于条件来选择第一量化模式用于处理变换系数集合的第一部分,基于条件来选择第二量化模式用于处理变换系数集合的第二部分,以及基于第一部分和第二部分的处理来对视频信息进行编码和/或解码。
根据至少一个实施例的另一个一般方面,提出了一种包括视频的比特流,其中比特流通过以下步骤形成:获取量化模式选择条件;基于量化模式选择条件,选择第一量化模式用于处理变换系数集合的第一部分;基于量化模式选择条件,选择第二量化模式用于处理变换系数集合的第二部分;以及基于变换系数集合的经处理的第一部分和第二部分将视频编码成比特流。
本实施例中的一个或多个实施例还提供了一种计算机可读存储介质,其上存储有指令,该指令用于根据本文描述的一个或多个方面和/或实施例来编码或解码视频数据。
本实施例中的一个或多个实施例还可以涉及一种非暂时性计算机可读介质,其存储有可执行程序指令,使得计算机执行该指令来执行根据根据本公开的任何实施例的方法。
本实施例还提供了一种计算机可读存储介质,其上存储有根据本文描述的一个或多个方面和/或实施例生成的比特流。
本实施例还提供了一种用于传输根据本文描述的一个或多个方面和/或实施例生成的比特流的方法和装置。
附图说明
通过结合附图考虑下面的具体实施方式,可以更好地理解本公开,其中:
图1示出了视频编码器的实施例的示例的框图;
图2示出了视频解码器的实施例的示例的框图;
图3示出了用来表示被压缩的HEVC图片的编解码树单元(CTU)和编解码树(CT)概念;
图4示出了编解码树单元(CTU)到编解码单元(CU)、预测单元(PU)和变换单元(TU)的划分;
图5示出了根据本文描述的一个或多个方面使用的两个标量量化器的示例;
图6示出了根据本文描述的一个或多个方面的状态转变和量化器选择的示例;
图7示出了根据本文描述的一个或多个方面的编码方法的示例;
图8示出了根据本文描述的一个或多个方面的解码方法的示例;
图9示出了根据本文描述的一个或多个方面的量化的控制的示例;以及
图10示出了适于实现根据本公开的各个方面、实施例和特征中的一个或多个的系统的示例的框图。
应当理解,附图是为了说明各个方面和实施例的示例,而并不一定是唯一可能的配置。贯穿各个附图中,相似的参考标记指代相同或相似的特征。
具体实施方式
现在转向附图,图1示出了诸如高效视频编解码(HEVC)编码器的视频编码器100的示例。图1还可以示出其中对HEVC标准做出改进的编码器,或者采用类似于HEVC的技术的编码器,例如作为被称为多功能视频编解码(VVC)的新视频编解码标准的开发的一部分的、由JVET(联合视频探索团队)开发的JEM(联合探索模型)编码器。
在本申请中,术语“重建的”和“解码的”可以互换使用,术语“编码的”或“编解码的”可以互换使用,并且术语“图像”、“图片”和“帧”可以互换使用。通常,但不是必须的,在编码器侧使用术语“重建的”,而在解码器侧使用“解码的”。
在被编码之前,视频序列可以经历预编码处理(101),例如,对输入彩色图片应用颜色变换(例如,从RGB 4:4:4到YCbCr 4:2:0的转换),或者执行输入图片分量的重映射(例如,使用颜色分量之一的直方图均衡化),以便得到对压缩更有弹性的信号分布。元数据可以与预处理相关联,并被附加到比特流。
在HEVC中,为了对具有一个或多个图片的视频序列进行编码,图片被分割(102)为一个或多个条带(slice),其中每个条带可以包括一个或多个条带片段。条带段被组织成编解码单元、预测单元和变换单元。HEVC规范区分了“块”和“单元”,其中“块”寻址样点阵列中的特定区域(例如,亮度,Y),而“单元”包括所有经编码的颜色分量(Y、Cb、Cr或单色)、语法元素和与块相关联的预测数据(例如,运动矢量)的同位块。
为了在HEVC中进行编解码,图片被分割为具有可配置尺寸的方形的编解码树块(CTB),并且连续的编解码树块的集合被分组为条带。编解码树单元(CTU)包含经编码的颜色分量的CTB。CTB是被分割为编解码块(CB)的四叉树的根,并且编解码块可以被分割为一个或多个预测块(PB),并形成被分割为变换块(TB)的四叉树的根。对应于编解码块、预测块和变换块,编解码单元(CU)包括预测单元(PU)和树结构的变换单元(TU)集合,PU包括所有颜色分量的预测信息,而TU包括针对每个颜色分量的残差编解码语法结构。亮度分量的CB、PB和TB的尺寸适用于对应的CU、PU和TU。
在JEM中,QTBT(四叉树加二叉树)结构移除了HEVC中多个分割类型的概念,即移除了CU、PU和TU概念的区分(separation)。首先由四叉树结构分割编解码树单元(CTU)。由二叉树结构进一步分割四叉树叶节点。二叉树的叶节点被命名为编解码单元(CU),其用于预测和转换,而不再进一步分割。因此,在新的编解码QTBT块结构中,CU、PU和TU具有相同的块尺寸。在JEM中,CU由不同颜色分量的编解码块(CB)组成。
在本申请中,术语“块”可以用来指例如CTU、CU、PU、TU、CB、PB和TB中的任何一种。此外,“块”还可以用来指H.264/AVC或其他视频编解码标准中规定的宏块和分割,并且更一般地指各种大小的数据阵列。
在示例性编码器100中,如下所述,由编码器元件来对图片进行编码。以CU为单位对要被编码的图片进行处理。使用帧内模式或帧间模式对每个CU进行编码。当以帧内模式对CU进行编码时,它执行帧内预测(160)。在帧间模式中,执行运动估计(175)和运动补偿(170)。编码器决定(105)使用帧内模式或帧间模式中的哪一个来对CU进行编码,并通过预测模式标志来指示帧内/帧间决定。通过从原始图像块中减去(110)预测块来计算预测残差。
从同一条带内的重建的相邻样点来预测帧内模式中的CU。在HEVC中,35种帧内预测模式的集合是可用的,包括DC、平面和33种角度预测模式。从与当前块相邻的行和列来重建帧内预测参考。使用来自先前重建块的可用样点,参考在水平和垂直方向上延伸块尺寸的两倍。当角度预测模式被用于帧内预测时,可以沿着由角度预测模式指示的方向复制参考样点。
可以使用HEVC中的两种不同选项对当前块的适用的亮度帧内预测模式进行编码。如果适用模式包含在三种最可能模式(most probable mode,MPM)的构建列表中,则该模式由MPM列表中的索引来发信令通知。否则,该模式由模式索引的固定长度二进制来发信令通知。三种最可能模式是从顶部和左侧相邻块的帧内预测模式中导出的。
与HEVC相比,JEM中当前的建议增加了帧内预测模式的数量。除了平面模式0和DC模式1之外,JEM 3.0还使用65种方向帧内预测模式。以与HEVC中从2到34相同的方式,方向帧内预测模式以递增的顺序从2到66编号。65种方向预测模式包括HEVC中指定的33种方向预测模式,加上与两个原始角度之间的角度对应的32种附加的方向预测模式。换句话说,JEM中的预测方向具有两倍于HEVC的角度分辨率。已经提出了更高数量的预测模式,以利用具有所提出的更大块尺寸的更精细角度结构的可能性。
对于HEVC的帧间CU,对应的编解码块被进一步分割为一个或多个预测块。在PB级别上执行帧间预测,并且对应的PU包含关于如何执行帧间预测的信息。可以以两种方法,即“合并模式”和“高级运动矢量预测(AMVP)”,发信令通知运动信息(例如,运动矢量和参考图片索引)。
在合并模式中,视频编码器或解码器基于已经编解码的块来装配候选列表,并且视频编码器发信令通知候选列表中的候选之一的索引。在解码器侧,基于被发信令通知的候选来重建运动矢量(MV)和参考图片索引。
在AMVP中,视频编码器或解码器基于从已经编解码的块确定的运动矢量来装配候选列表。然后,视频编码器发信令通知候选列表中的索引以识别运动矢量预测值(MVP),并发信令通知运动矢量差(MVD)。在解码器侧,运动矢量(MV)被重建为MVP+MVD。适用的参考图片索引也在用于AMVP的PU语法中被显式地编解码。
然后对预测残差进行变换(125)和量化(130)。变换通常基于可分离变换。例如,首先在水平方向上应用DCT变换,然后在垂直方向上应用DCT变换。对于HEVC,支持4×4、8×8、16×16和32×32的变换块尺寸。核心变换矩阵的元素是通过对缩放的离散余弦变换(DCT)基函数进行近似而得到的。HEVC变换是在诸如以下的考虑下设计的:当矩阵条目被指定为整数值时,限制变换计算的动态范围并且最大化精度和与正交性的接近度。为简单起见,仅指定了32个点的长度的整数矩阵,而下采样(subsampled)版本则被用于其他尺寸。对于4×4的变换块尺寸,从离散正弦变换(DST)导出的替代的整数变换被应用于帧内预测模式的亮度残差块。
在JEM中,在两个方向上使用的变换可能不同(例如,在一个方向上为DCT,在另一个方向上为DST),这导致了各种各样的2D变换,而在先前的编解码器中,用于给定块尺寸的2D变换的种类通常是有限的。
对经量化的变换系数以及运动矢量和其他语法元素进行熵编解码(145)以输出比特流。编码器也可以跳过该变换,并以4×4TU为基础将量化直接应用于未变换的残差信号。编码器也可以绕过变换和量化两者,即在不应用变换或量化过程的情况下直接对残差进行编解码。在直接PCM编解码中,不应用预测,并且将编解码单元样点直接编解码到比特流中。
编码器对经编码的块进行解码,以为进一步的预测提供参考。经量化的变换系数被去量化(140)和逆变换(150)以解码预测残差。组合(155)经解码的预测残差和预测块,重建图像块。例如,环内滤波器(165)被应用于重建的图片,以例如执行去块/样点自适应偏移(SAO)滤波以减少编码伪影。滤波后的图像被存储在参考图片缓冲器(180)中。
图2示出了诸如HEVC解码器的示例性视频解码器200的框图。在示例性解码器200中,如下所述,由解码器元件对比特流进行解码。视频解码器200一般执行与如图1中描述的编码遍历(pass)相应的解码遍历,其执行视频解码作为对视频数据进行编码的一部分。图2还可以示出对HEVC标准做出改进的解码器或者采用类似于HEVC技术的解码器,例如JEM解码器。
具体地,解码器的输入包括视频比特流,其可以由视频编码器100生成。首先对比特流进行熵解码(230)以获得变换系数、运动矢量、图片分割信息和其他编解码信息。对于HEVC,图片分割信息指示了CTU的尺寸,以及CTU被拆分为CU以及在适用时可能被拆分为PU的方式。因此,解码器可以根据经解码的图片分割信息,将图片划分(235)为CTU,并将每个CTU划分为CU。对于JEM,解码器可以基于指示QTBT结构的分割信息来划分图片。对变换系数进行去量化(240)和逆变换(250)以解码预测残差。
组合(255)经解码的预测残差和预测块,重建图像块。可以从帧内预测(260)或运动补偿预测(即,帧间预测)(275)中获取(270)预测块。如上所述,AMVP和合并模式技术可以用于导出用于运动补偿的运动矢量,运动补偿可以使用插值滤波器来计算参考块的子整数样点的插值值。环内滤波器(265)被应用于重建的图像。滤波后的图像被存储在参考图片缓冲器(280)中。
经解码的图片可以进一步经历解码后处理(285),例如逆颜色变换(例如,从YCbCr4:2:0到RGB 4:4:4的转换)或者逆重映射,逆重映射执行与预编码处理(101)中执行的重映射处理的逆。解码后处理可以使用在预编码处理中导出并在比特流中发信令通知的元数据。
在HEVC视频压缩标准中,图片被划分为所谓的编解码树单元(CTU),其尺寸小通常为64×64、128×128或256×256个像素。每个CTU由压缩域中的编解码树表示。如图3所示,这是CTU的四叉树划分,其中每个叶子被称为编解码单元(CU)。然后给每个单元一些帧内或帧间预测参数(Prediction Info)。这样做,每个预测单元在空域上被分割为或拆分为一个或多个预测单元(PU),每个PU被分配一些预测信息。如图4中所示,在CU级别分配帧内或帧间编解码模式。
使用帧内或帧间预测以利用帧内或帧间的帧相关性,然后对原始块和预测块之间的差(通常表示为预测误差或预测残差)进行变换、量化和熵编码。为了重建视频,通过对应于熵编码、量化、变换和预测的逆过程对压缩数据进行解码。
被称为依赖标量量化(dependent scalar quantization)的量化形式涉及使用两个具有不同重建级别的标量量化器以用于量化。与常规的(例如在HEVC中使用的)非依赖标量量化相比,依赖标量量化涉及变换系数的可容许重建值的集合,该集合取决于重建顺序中在当前变换系数级别之前的变换系数级别的值。
依赖标量量化可以通过以下方式来实现:(a)定义两个具有不同重建级别的标量量化器,以及(b)定义用于在两个标量量化器之间切换的过程。例如,图5示出了两个标量量化器,由Q0和Q1表示,它们可以用在依赖标量量化方法中。可用的重建级别的位置由量化步长Δ唯一指定。如果我们忽略变换系数的实际重建使用整数运算的事实,则两个标量量化器Q0和Q1被表征如下:
Q0:第一量化器Q0的重建级别由量化步长Δ的偶数整数倍给出。当使用该量化器时,根据下式计算重建的变换系数t':
t'=2·k·Δ
其中k表示相关联的变换系数级别(所传输的量化索引)。应当注意,术语“变换系数级别”指的是经量化的变换系数值,例如,它对应于如在下文residual_coding语法结构中描述的absLevel。术语“重建的变换系数”指的是去量化的变换系数值。
Q1:第二量化器Q1的重建级别由量化步长Δ的奇数整数倍以及另外的等于零的重建级别给出。变换系数级别k到重建的变换系数t'的映射由下式指定:
t'=(2·k–sgn(k))·Δ,
其中sgn(·)表示符号函数,
sgn(x)=(k==0?0:(k<0?–1:1)).
没有在比特流中显式地发信令通知所使用的标量量化器(Q0或Q1)。相反,用于当前变换系数的量化器由编解码/重建顺序中在当前变换系数之前的变换系数级别的奇偶性(parity)来确定。例如,图6示出了状态转变图和用于依赖量化的方法的相关联的量化器选择。
如图6所示,两个标量量化器(Q0和Q1)之间的切换经由具有四种状态的状态机来实现。状态可以取四个不同的值:0、1、2、3。状态由编解码/重建顺序中在当前变换系数之前的变换系数级别的奇偶性唯一确定。在变换块的逆量化开始时,状态被设置为等于0。以扫描顺序重建(即,以与对它们进行熵解码相同的顺序)变换系数。在当前变换系数被重建之后,状态被更新,如图6所示,其中k表示变换系数级别的值。注意,下一个状态仅取决于当前状态和当前变换系数级别k的奇偶性(k&1)。用k表示当前变换系数级别的值,则状态更新可以被写为:
state=stateTransTable[state][k&1],
其中stateTransTable表示图6中所示的状态转变表,并且运算符“&”指定二进制补码运算中的按比特“与”运算符。可替代地,也可以在不使用查找表而使用16比特值QStateTransTable的情况下指定状态转变:
state=(QStateTransTable>>((state<<2)+((k&1)<<1)))&3
如果使用依赖量化,则QStateTransTable的值被设置为32040。结果,使用具有四种状态的状态机来更新状态。如果当前变换系数的状态等于0或1,则使用标量量化器Q0。否则(状态等于2或3),则使用标量量化器Q1。当应用依赖量化时,量化步长为2Δ。
否则(使用常规标量量化),则QStateTransTable的值被设置为等于0。结果,对于所有变换系数,状态都等于0。当应用常规标量量化时,量化步长为Δ。
注意,状态用于选择用于sig_coeff_flag的概率模型。利用参数化状态转变表的方法(使用16比特变量QstateTransTable),完全相同的上下文建模可以用于具有依赖量化的熵编解码和具有常规的非依赖量化的熵编解码。
如果使用依赖标量量化,则系数编解码的设计方法可以涉及对所有变换系数应用依赖标量量化。
一般地,本公开的一个方面涉及在至少一个实施例中提供用于选择性地启用第一量化方案和第二量化方案之一或在第一量化方案和第二量化方案之间切换,以用于变换系数编解码。一般地,至少一个实施例可以包括基于以下条件在第一量化方案和第二量化方案之间切换:启用第一量化方案以用于对变换系数集合的第一部分或子集进行编解码,该第一部分或子集可以包括少于变换系数集合的全部;以及启用第二量化方案以用于对除了包括在第一子集中的变换系数之外的、变换系数集合的第二部分或子集进行编解码。一般地,至少一个实施例可以包括包含变换系数相对于编解码块的一个或多个区域的位置的条件,例如,第一部分位于对应于低频信息的第一区域中,并且第二部分位于对应于高频信息的第二区域中。一般地,至少一个实施例可以包括包含块的预测模式的条件,其中预测模式包括帧内编解码或帧间编解码中的一个,例如,第一部分对应于帧内编解码的信息,并且第二部分对应于帧间编解码的信息。一般地,至少一个实施例可以包括包含分量特性的条件,其中分量特性包括亮度分量和色度分量中的一个,例如,第一部分包括亮度信息,并且第二部分包括色度信息。一般地,至少一个实施例可以包括包含变换系数的位置和预测模式以及分量特性中的一个或多个的组合的条件。一般地,至少一个实施例可以包括基于评估编解码效率和/或实现复杂性来确定的条件。
更详细地,诸如由JVET开发的编解码器可以包括量化方法,诸如应用于块中所有变换系数的依赖标量量化。依赖量化可以通过网格(trellis)编解码量化技术增加编解码效率。然而,依赖标量量化的复杂性可能高于诸如常规标量量化的替代量化方法。例如,依赖标量量化的更高复杂性可能涉及解码过程中需要的更多步骤。
关于要量化的变换系数,在变换之后,能量将被高度压缩到对应于低频位置或区域的编解码块的左上角。也就是说,与位于高频区域的变换系数相比,DC系数和低频变换系数通常具有更多的信息和更高的绝对值。对于位于高频区域的变换系数,它们中的大多数是零或微不足道的值(1或2)。可以使用诸如常规标量量化的量化方案或技术,以低速率成本(例如,基于速率失真优化(RDO)来确定)容易地对这样的微不足道的值进行编解码,并且这些微不足道的值对样点重建的影响不如DC系数或低频变换系数重要。
一般地,本文描述的实施例的至少一个示例的一个方面包括基于条件选择性地启用第一量化方案和第二量化方案或在第一和第二量化方案之间切换,例如,基于诸如编解码块中变换系数的位置(例如,低频区域或高频区域)的条件将第一量化方案和第二量化方案应用于变换系数。在至少一个实施例中,另一方面可以涉及停用、禁用或从用于量化位于第一位置或区域(例如低频区域)的变换系数的第一类型的量化(例如依赖标量量化)切换,以及激活、启用或切换到用于量化位于第二位置或区域(例如高频区域)的变换系数的第二类型的量化(例如常规标量量化),其中切换可以基于评估一个或多个因素,例如,在诸如编解码复杂性和效率的因素或特性之间获取良好的或可接受的或最优的折衷。
图7和图8分别示出了根据本公开的编码方法700和解码方法800的示例实施例。在诸如图7所示的编码方法700中,在710处,例如通过从输入中提取信息,例如预测模式、编解码块中的位置或诸如亮度/色度的其他特性,来获取量化模式选择条件。在720处,基于在710处获取的条件,启用诸如依赖标量量化或常规标量量化的量化模式或量化类型。然后,在730处,基于量化模式或量化类型对视频数据进行编码。
同样,在诸如图8所示的解码方法800中,在810处,(例如,基于信号的语法)例如通过从输入中提取信息,例如预测模式、编解码块中的位置或诸如亮度/色度的其他特性,来获取量化模式选择条件。在820处,基于在810处获取的条件,启用诸如依赖标量量化或常规标量量化的量化模式或量化类型。然后,在830处,基于量化模式或量化类型对视频数据进行解码。
作为另一个示例,基于诸如JVET所设想的编解码器中的系数编解码的当前采用的设计,可以通过设置指定状态转变表的QStateTransTable的16比特值来实现依赖标量量化和常规标量量化之间的切换。如果QStateTransTable的值被设置为等于0,则使用常规标量量化,其中量化步长等于Δ;并且如果QStateTransTable的值被设置为等于32040,则使用依赖标量量化,其中量化步长被自适应地改变为2Δ。
至少一个实施例可以包括停用用于位于高频区域中的变换系数的依赖标量量化,其中可以基于子块的位置来设置QStateTransTable的值,子块也可以被称为“系数组(CG)”。然后,可以应用诸如以下的变体:
-仅激活用于第一子块的依赖标量量化,该第一子块包含DC级别;或者
-仅激活用于第一子块和位于编解码块的左上方的一个或多个附加子块的依赖标量量化,这些子块包含DC级别和低频系数。其中应用了依赖标量量化的子块的数量(例如,在下文中被称作名为“DSQSwitchPoint”的参数或值)可以是一个预定义值,或者是值DSQSwitchPoint,其取决于诸如编解码块的尺寸(宽度和高度)的因素。
图9描绘了流程图900,其示出了涉及为索引小于预定义DSQSwitchPoint的若干子块激活依赖标量量化的实施例的示例。相结合地,本实施例的另一方面涉及提供编码和/或解码信号语法和/或包括这种语法的比特流,以启用在如本文所述的量化方案之间的切换。这种语法的示例如本文件所附的表1所示。表1中的细节对应于上面描述的并在图9中示出的示例实施例。在表1中,为了说明的目的,扫描位置上的不同遍历被标记为“第一遍”、“第二遍”、“第三遍”和“第四遍”。表1的阴影部分示出了用于在依赖标量量化和常规标量量化的变换系数编解码之间切换的语法的示例。
上述一个或多个实施例可以包括激活或启用用于位于低频区域的变换系数的依赖标量量化。变体可以包括停用用于位于低频区域的变换系数的依赖标量量化,例如如果编解码效率和/或复杂性的评估指示这样做是有利的。
一般地,至少一个实施例的另一方面可以涉及预测模式,例如帧内编解码或帧间编解码。例如,帧内编解码块通常比帧间编解码块包含更多要编解码的残差信息,并且因此,依赖标量量化对于帧内编解码块更有用。
在至少一个其他实施例中,可以基于诸如预测模式的条件来启用或激活诸如依赖标量量化的量化模式或量化类型。例如,指示帧内编解码块的预测模式条件可以启用诸如依赖标量量化的量化类型或量化模式,而指示帧间编解码块的条件可以作为切换量化模式的基础,例如切换为常规标量量化。这样做可以基于评估诸如编解码复杂性和效率之类的因素,以例如在对于特定情况或实施例可能合适的、良好的或最优的这些因素之间实现折衷。
涉及预测模式的所述实施例的变体可以包括在量化模式或量化类型之间切换,以例如对于帧内编解码块停用或禁用诸如依赖标量量化的量化类型,而对于帧间编解码块则启用或激活它。
一般地,至少一个实施例的另一方面可以涉及基于包括诸如亮度/色度或其他颜色分量的分量特性的条件来选择或切换量化模式或量化类型。人类视觉系统对颜色的敏感度低于对结构和纹理信息的敏感度。因此,在许多应用场景中,提供高分辨率的亮度分量比为色度分量提供这样的细节更重要。在视频压缩过程中,与色度样点相比,减少亮度样点的数据损失更为必要。为了减轻信息损失,精细和准确的量化是非常必要的。因此,在实施例的至少一个示例中,可以基于包括分量特性的条件来激活或启用诸如依赖标量量化的量化类型。例如,可以基于指示亮度分量的条件来启用或激活依赖标量量化,并且对于色度分量,改为切换到常规标量量化。这样做可以基于评估诸如编解码复杂性和效率之类的因素,以例如在对于特定情况或实施例可能合适、良好或最优的这些因素之间实现折衷。变体可以包括被评估的条件,以停用用于亮度分量的依赖标量量化,而仅激活用于色度分量的依赖标量量化。
上述变体可以被视为排他性的,因为具有具体或固定硬件编解码器实施例的特定系统可实现实施例、特征、方面或变体中的一个而不包括其他实施例、特征、方面或变体。可替代地,某些系统可以包括一个以上这样的变体。例如,可以预见本文描述的特征和方面的各种组合。此外,基于诸如但不限于要处理的内容、功耗控制、性能(速度、时延)、编解码复杂性、编解码效率等因素,系统可以是可重新配置的,例如,包括用于硬件和/或软件的重新配置的能力。在这样的系统中,重新配置能力可以包括选择性地启用诸如所描述的那些变体的多个变体中的一个或多个。
上文描述了各种方法,并且每种方法包括用于实现所述方法的一个或多个步骤或动作。除非该方法的正确操作需要步骤或动作的具体顺序,否则具体步骤和/或动作的顺序和/或使用可以被修改或组合。
本申请中使用了各种数值,例如帧内预测模式的数量(35或67),或者变换子集的数量(3)。应当注意,具体值是为了示例性目的,并且本实施例不限于这些具体值。
在上文中,关于HEVC或JEM描述了各种实施例。例如,根据本公开的方面和实施例的各种示例可以用于修改编码器和/或解码器(例如分别在图1和图2中示出的JEM或HEVC编码器和解码器)的一个或多个方面。作为示例,本文描述的方面和实施例可以修改诸如图1所示的编码器中的量化模块130和/或逆量化模块140和/或熵编解码模块145,和/或可以修改诸如图2所示的解码器中的逆量化模块240和/或熵解码模块220。然而,本实施例不限于JEM或HEVC,并且可以应用于其他标准、推荐及其扩展。
图10示出了其中可以实现各种方面和实施例的系统的示例的框图。系统1000可以体现为包括以下描述的各种组件的设备,并且被配置为执行本文件中描述的一个或多个方面。这种设备的示例包括但不限于各种电子设备,例如个人计算机、膝上型计算机、智能蜂窝电话、平板计算机、数字多媒体机顶盒、数字电视接收器、个人视频记录系统、连接的家用电器、以及服务器。系统1000的元件可以单独或组合地体现在单个集成电路、多个IC和/或分立组件中。例如,在至少一个实施例中,系统1000的处理和编码器/解码器元件跨多个IC和/或分立元件分布。在各种实施例中,系统1000经由例如通信总线或通过专用输入和/或输出端口通信地耦合到其他类似系统或其他电子设备。在各种实施例中,系统1000被配置为实现本文件中描述的方面中的一个或多个。
系统1000包括至少一个处理器1010,处理器1010被配置为执行加载在其中的指令,以例如用于实现本文件中描述的各个方面。处理器1010可以包括嵌入式存储器、输入输出接口和本领域已知的各种其他电路。系统1000包括至少一个存储器1020(例如,易失性存储器设备和/或非易失性存储器设备)。系统1000包括存储设备1040,其可以包括非易失性存储器和/或易失性存储器,包括但不限于EEPROM、ROM、PROM、RAM、DRAM、SRAM、闪存、磁盘驱动器和/或光盘驱动器。作为非限制性示例,存储设备1040可以包括内部存储设备、附加存储设备和/或网络可访问存储设备。
系统1000包括编码器/解码器模块1030,其被配置为例如处理数据以提供经编码的视频或经解码的视频,并且编码器/解码器模块1030可以包括其自己的处理器和存储器。编码器/解码器模块1030表示可以被包括在设备中以执行编码和/或解码功能的(一个或多个)模块。如已知的,设备可以包括编码和解码模块中的一个或两个。附加地,如本领域技术人员已知的,编码器/解码器模块1030可以被实现为系统1000的独立元件,或者可以被并入处理器1010中作为硬件和软件的组合。
要加载到处理器1010或编码器/解码器1030上以执行本文件中描述的各个方面的程序代码可以被存储在存储设备1040中,并且随后被加载到存储器1020上以供处理器1010执行。根据各种实施例,处理器1010、存储器1020、存储设备1040和编码器/解码器模块1030中的一个或多个可以在执行本文件中描述的过程期间存储各种项目中的一个或多个。这种存储的项目可以包括但不限于输入视频、经解码的视频或经解码的视频的部分、比特流或信号、矩阵、变量以及来自等式、公式、运算和运算逻辑的处理的中间或最终结果。
在若干实施例中,处理器1010和/或编码器/解码器模块1030内部的存储器用于存储指令,并为编码或解码期间所需的处理提供工作存储器。然而,在其他实施例中,处理设备(例如,处理设备可以是处理器1010或编码器/解码器模块1030)外部的存储器用于这些功能中的一个或多个。外部存储器可以是存储器1020和/或存储设备1040,例如动态易失性存储器和/或非易失性闪速存储器。在若干实施例中,外部非易失性闪速存储器用于存储电视的操作系统。在至少一个实施例中,诸如RAM的快速外部动态易失性存储器被用作视频编码和解码操作(例如用于MPEG-2、HEVC或VVC(多功能视频编解码))的工作存储器。
如块1130所示,可以通过各种输入设备来提供到系统1000的元件的输入。这种输入设备包括但不限于(i)接收例如由广播者通过空中发送的RF信号的RF部分,(ii)复合输入终端,(iii)USB输入终端,和/或(iv)HDMI输入终端。
在各种实施例中,块1130的输入设备具有相关联的本领域已知的相应输入处理元件。例如,RF部分可以与用于以下项的元件相关联:(i)选择期望的频率(也被称为选择信号,或者将信号频带限制到一频带),(ii)下变频所选择的信号,(iii)再次频带限制到较窄的频带,以选择(例如)在某些实施例中可以被称为信道的信号频带,(iv)解调经下变频和经频带限制的信号,(v)执行纠错,以及(vi)解复用以选择期望的数据分组的流。各种实施例的RF部分包括一个或多个用来执行这些功能的元件,例如频率选择器、信号选择器、频带限制器、信道选择器、滤波器、下变频器、解调器、纠错器和解复用器。RF部分可以包括执行各种这些功能的调谐器,包括例如将接收到的信号下变频到较低频率(例如,中频或近基带频率)或基带。在一个机顶盒实施例中,RF部分及其相关联的输入处理元件接收通过有线(例如,电缆)介质传输的RF信号,并通过滤波、下变频和再次滤波到期望的频带来执行频率选择。各种实施例重新排列上述(和其他)元件的顺序,移除这些元件中的一些,和/或添加执行相似或不同功能的其他元件。添加元件可以包括在现有的元件之间插入元件,例如,插入放大器和模数转换器。在各种实施例中,RF部分包括天线。
附加地,USB和/或HDMI终端可以包括相应的接口处理器,以用于通过USB和/或HDMI连接将系统1000连接到其他电子设备。应当理解,输入处理的各个方面,例如里德-所罗门(Reed-Solomon)纠错,可以例如在单独的输入处理IC内或在处理器1010内实现。类似地,USB或HDMI接口处理的各个方面可以在单独的接口IC内或处理器1010内实现。经解调、纠错和解复用的流被提供给各种处理元件,包括例如与存储器和存储元件组合操作的处理器1010和编码器/解码器1030,来处理数据流以供在输出设备上呈现。
可以在集成外壳内提供系统1000的各种元件。在集成外壳内,各种元件可以使用合适的连接布置1140相互连接并在它们之间传输数据,连接布置1140例如本领域已知的包括I2C总线、布线和印刷电路板的内部总线。
系统1000包括使得能够经由通信信道1060与其他设备通信的通信接口1050。通信接口1050可以包括但不限于被配置为通过通信信道1060发送和接收数据的收发器。通信接口1050可以包括但不限于调制解调器或网卡,并且通信信道1060可以例如在有线和/或无线介质内实现。
在各种实施例中,使用诸如IEEE 802.11的Wi-Fi网络将数据流式传输到系统1000。这些实施例的Wi-Fi信号是通过适于Wi-Fi通信的通信信道1060和通信接口1050接收的。这些实施例的通信信道1060通常连接到接入点或路由器,该接入点或路由器提供对包括互联网的外部网络的访问,以允许流应用和其他过顶(over-the-top)通信。其他实施例使用通过输入块1130的HDMI连接递送数据的机顶盒向系统1000提供流式数据。还有其他实施例使用输入块1130的RF连接向系统1000提供流式数据。
系统1000可以向各种输出设备提供输出信号,包括显示器1100、扬声器1110和其他外围设备1120。在实施例的各种示例中,其他外围设备1120包括独立DVR、磁盘播放器、立体声系统、照明系统以及基于系统1000的输出提供功能的其他设备中的一个或多个。在各种实施例中,使用诸如AV.Link、CEC的信令或者在有或没有用户干预的情况下使能设备到设备控制的其他通信协议在系统1000和显示器1100、扬声器1110或其他外围设备1120之间传送控制信号。输出设备可以通过相应的接口1070、1080和1090经由专用连接通信地耦合到系统1000。可替代地,输出设备可以使用通信信道1060经由通信接口1050连接到系统1000。显示器1100和扬声器1110可以与电子设备(例如,电视)中的系统1000的其他组件集成在单个单元中。在各种实施例中,显示接口1070包括显示驱动器,例如,时序控制器(TCon)芯片。
例如,如果输入1130的RF部分是独立机顶盒的一部分,则显示器1100和扬声器1110可以可替代地与其他组件中的一个或多个分离。在显示器1100和扬声器1110是外部组件的各种实施例中,可以经由包括例如HDMI端口、USB端口或COMP输出的专用输出连接来提供输出信号。
这些实施例可以通过由处理器1010实现的计算机软件、或者通过硬件、或者通过硬件和软件的组合来实现。作为非限制性示例,实施例可以由一个或多个集成电路来实现。作为非限制性示例,存储器1020可以是适合于技术环境的任何类型,并且可以使用任何适当的数据存储技术来实现,例如光存储器设备、磁存储器设备、基于半导体的存储器设备、固定存储器和可移动存储器。作为非限制性示例,处理器1010可以是适合于技术环境的任何类型,并且可以涵盖微处理器、通用计算机、专用计算机和基于多核架构的处理器中的一个或多个。
贯穿本公开内容,还支持和设想了各种概括性的以及具体的实施例。根据本公开的实施例的示例包括但不限于以下内容。
一般地,实施例的至少一个示例可以涉及一种用于视频编码的方法,包括:获取量化模式选择条件;基于量化模式选择条件,选择第一量化模式用于处理变换系数集合的第一部分;基于量化模式选择条件,选择第二量化模式用于处理变换系数集合的第二部分;以及基于变换系数集合的经处理的第一部分和第二部分对视频进行编码。
一般地,实施例的至少一个示例可以涉及一种用于视频解码的方法,包括:获取量化模式选择条件;基于量化模式选择条件,选择第一量化模式用于处理变换系数集合的第一部分;基于量化模式选择条件,选择第二量化模式用于处理变换系数集合的第二部分;以及基于变换系数集合的经处理的第一部分和第二部分对视频进行解码。
一般地,实施例的至少一个示例可以涉及一种用于视频编码的装置,包括一个或多个处理器,其中该一个或多个处理器被配置为:获取量化模式选择条件;基于量化模式选择条件,选择第一量化模式用于处理变换系数集合的第一部分;基于量化模式选择条件,选择第二量化模式用于处理变换系数集合的第二部分;以及基于变换系数集合的经处理的第一部分和第二部分对视频进行编码。
一般地,实施例的至少一个示例可以涉及一种用于视频解码的装置,包括一个或多个处理器,其中该一个或多个处理器被配置为:获取量化模式选择条件;基于量化模式选择条件,选择第一量化模式用于处理变换系数集合的第一部分;基于量化模式选择条件,选择第二量化模式用于处理变换系数集合的第二部分;以及基于变换系数集合的经处理的第一部分和第二部分对视频进行解码。
一般地,实施例的至少一个示例可以涉及一种用于视频编码的方法,包括:获取包括块的预测模式的量化模式选择条件;基于量化模式选择条件,选择第一量化模式用于处理变换系数集合的第一部分;基于量化模式选择条件,选择第二量化模式用于处理变换系数集合的第二部分;以及基于变换系数集合的经处理的第一部分和第二部分对视频进行编码。
一般地,实施例的至少一个示例可以涉及一种用于视频解码的方法,包括:获取包括块的预测模式的量化模式选择条件;基于量化模式选择条件,选择第一量化模式用于处理变换系数集合的第一部分;基于量化模式选择条件,选择第二量化模式用于处理变换系数集合的第二部分;以及基于变换系数集合的经处理的第一部分和第二部分对视频进行解码。
一般地,实施例的至少一个示例可以涉及一种用于视频编码的装置,包括一个或多个处理器,其中该一个或多个处理器被配置为:获取包括块的预测模式的量化模式选择条件;基于量化模式选择条件,选择第一量化模式用于处理变换系数集合的第一部分;基于量化模式选择条件,选择第二量化模式用于处理变换系数集合的第二部分;以及基于变换系数集合的经处理的第一部分和第二部分对视频进行编码。
一般地,实施例的至少一个示例可以涉及一种用于视频解码的装置,包括一个或多个处理器,其中该一个或多个处理器被配置为:获取包括块的预测模式的量化模式选择条件;基于量化模式选择条件,选择第一量化模式用于处理变换系数集合的第一部分;基于量化模式选择条件,选择第二量化模式用于处理变换系数集合的第二部分;以及基于变换系数集合的经处理的第一部分和第二部分对视频进行解码。
一般地,实施例的至少一个示例可以涉及如本文所述的方法或装置,其中提供至少一个语法元素来指示量化模式选择条件。
一般地,实施例的至少一个示例可以涉及如本文所述的方法或装置,其中第一量化模式不同于第二量化模式。
一般地,实施例的至少一个示例可以涉及如本文所述的方法或装置,其中第一量化模式是依赖标量量化。
一般地,实施例的至少一个示例可以涉及如本文所述的方法或装置,其中依赖标量量化取决于重建顺序中的先前变换系数的值。
一般地,实施例的至少一个示例可以涉及如本文所述的方法或装置,其中第二量化模式是非依赖标量量化。
一般地,实施例的至少一个示例可以涉及如本文所述的方法或装置,其中依赖标量量化被应用于第一部分中的变换系数,第一部分具有比第二部分更低的频率。
一般地,实施例的至少一个示例可以涉及如本文所述的方法或装置,其中非依赖标量量化被应用于第二部分中的变换系数,第二部分具有比第一部分更高的频率。
一般地,实施例的至少一个示例可以涉及如本文所述的方法或装置,其中量化模式选择条件取决于以下中的一个或多个:1)编解码块中的位置,2)块的预测模式,或3)块的分量特性。
一般地,实施例的至少一个示例可以涉及如本文所述的方法或装置,其中预测模式包括正在被编码或解码的块是被帧内编解码的还是帧间编解码的。
一般地,实施例的至少一个示例可以涉及如本文所述的方法或装置,其中块的分量特性包括正在被编码或解码的块是视频的亮度分量还是色度分量。
一般地,实施例的至少一个示例可以涉及包括视频的比特流,其中比特流通过以下步骤形成:获取量化模式选择条件;基于量化模式选择条件,选择第一量化模式用于处理变换系数集合的第一部分;基于量化模式选择条件,选择第二量化模式用于处理变换系数集合的第二部分;以及基于变换系数集合的经处理的第一部分和第二部分将视频编码为比特流。
一般地,实施例的至少一个示例可以涉及非暂时性计算机可读介质,该非暂时性计算机可读介质包含根据本文所述的方法或装置的一个或多个实施例生成的数据内容。
一般地,实施例的至少一个示例可以涉及计算机程序产品,该计算机程序产品包括用于执行本文所述的一种或多种方法的指令。
一般地,实施例的至少一个示例可以涉及信号,该信号包含根据本文所述的一种或多种方法生成的数据。
一般地,实施例的至少一个示例可以涉及一种设备,该设备包括:如本文所述的装置;以及以下中的至少一个(i)天线,被配置为接收信号,该信号包括表示图像信息的数据,(ii)频带限制器,被配置为将接收到的信号限制到包括表示图像信息的数据的频带,以及(iii)显示器,被配置为显示来自图像信息的图像。
一般地,实施例的至少一个示例可以涉及设备,其中该设备包括电视、电视信号接收器、机顶盒、网关设备、移动设备、蜂窝电话、平板或其他电子设备中的一种。
贯穿本公开,各种实现方式涉及解码。本申请中使用的“解码”可以涵盖例如对接收到的经编码的序列执行的、为了产生适合显示的最终输出的过程中的全部或部分。在各种实施例中,这些过程包括通常由解码器执行的过程中的一个或多个,例如熵解码、逆量化、逆变换和差分解码。在各种实施例中,这样的过程也或者可替代地包括由本申请中描述的各种实现方式的解码器执行的过程,例如,从平铺(打包)(tiled(packed))的图片中提取图片,确定要使用的上采样滤波器并且然后对图片进行上采样,并将图片翻转回其预期方向。
作为进一步的示例,在一个实施例中,“解码”仅指熵解码,在另一个实施例中,“解码”仅指差分解码,并且在另一个实施例中,“解码”指熵解码和差分解码的组合。基于具体描述的上下文,短语“解码过程”是旨在具体指操作的子集还是大体上指更广泛的解码过程将是清楚的,并且被认为是本领域技术人员很好理解的
此外,各种实现方式涉及编码。以类似于上面关于“解码”的讨论的方式,本申请中使用的“编码”可以涵盖例如对输入视频序列执行的、为了产生经编码的比特流或信号的过程中的全部或部分。在各种实施例中,这些过程包括通常由编码器执行的过程中的一个或多个,例如,分割、差分编码、变换、量化和熵编码。在各种实施例中,这样的过程也或者可替代地包括由本申请中描述的各种实现方式的编码器执行的过程。
作为进一步的示例,在一个实施例中,“编码”仅指熵编码,在另一个实施例中,“编码”仅指差分编码,并且在另一个实施例中,“编码”指差分编码和熵编码的组合。基于具体描述的上下文,短语“编码过程”是旨在具体指操作的子集还是大体上指更广泛的编码过程将是清楚的,并且被认为是本领域技术人员很好理解的
注意,本文使用的语法元素是描述性术语。因此,它们不排除使用其他语法元素名称。
当图作为流程图呈现时,应当理解,它还提供了对应的装置的框图。类似地,当图以框图的形式呈现时,应当理解,它还提供了对应的方法/过程的流程图。
各种实施例涉及速率失真优化。具体地,在编码过程期间,往往鉴于计算复杂性的约束,通常会考虑速率和失真之间的平衡或折衷。速率失真优化通常用公式表述为最小化速率失真函数,该函数是速率和失真的加权和。有不同的方法来解决率失真优化问题。例如,这些方法可以基于对所有编码选项(包括所有考虑的模式或编解码参数值)的广泛测试,其利用了对它们的编解码成本以及编解码和解码后的重建信号的相关失真的完整评估。还可以使用更快的方法来节省编码复杂性,具体是基于预测或预测残差信号而不是重建信号来计算近似失真。也可以使用这两种方法的混合,例如只对可能的编码选项中的一些使用近似失真,而对其他编码选项使用完全失真。其他方法只评估可能的编码选项的子集。更一般地,许多方法采用多种技术中的任何一种来执行优化,但是优化不一定是对编解码成本和相关失真的完整评估。
本文描述的实现和方面可以以例如方法或过程、装置、软件程序、数据流或信号来实现。即使仅在实现方式的单一形式的上下文中讨论(例如,仅作为方法讨论),所讨论的特征的实现方式也可以以其他形式(例如,装置或程序)来实现。装置可以以例如适当的硬件、软件和固件来实现。方法可以在例如处理器中实现,处理器通常指处理设备,包括例如计算机、微处理器、集成电路或可编程逻辑设备。处理器还包括通信设备,例如计算机、蜂窝电话、便携式/个人数字助理(“PDA”)以及促进终端用户之间的信息通信的其他设备。
对“一个实施例”或“实施例”或“一个实现方式”或“实现方式”以及其其他变体的引用,意味着结合该实施例描述的特定特征、结构、特性等被包括在至少一个实施例中。因此,出现在贯穿本文件的各个地方的短语“在一个实施例中”或“在实施例中”或“在一个实现方式中”或“在实现方式中”以及任何其他变体的呈现,不一定都指同一实施例。
附加地,本文件可能提及“获取”各种信息。获取信息可以包括例如确定信息、估计信息、计算信息、预测信息或从存储器中检索信息中的一个或多个。
此外,本文件可能提及“访问”各种信息。访问信息可以包括例如接收信息、检索信息(例如,从存储器)、存储信息、移动信息、复制信息、计算信息、确定信息、预测信息或估计信息中的一个或多个。
附加地,本文件可能提及“接收”各种信息。与“访问”一样,接收旨在是宽泛的术语。接收信息可以包括例如访问信息或检索信息(例如,从存储器)中的一个或多个。此外,在诸如存储信息、处理信息、传输信息、移动信息、复制信息、擦除信息、计算信息、确定信息、预测信息或估计信息的操作期间,通常以这样或那样的方式涉及“接收”。
应当理解,例如在“A/B”、“A和/或B”和“A和B中的至少一个”的情况下,使用下列“/”、“和/或”以及“至少一个”中的任何一个旨在涵盖仅选择第一个列出的选项(A),或仅选择第二个列出的选项(B),或选择两个选项(A和B)。作为进一步的示例,在“A、B和/或C”和“A、B和C中的至少一个”的情况下,这样的短语旨在涵盖仅选择第一个列出的选项(A),或仅选择第二个列出的选项(B),或仅选择第三个列出的选项(C),或仅选择第一个和第二个列出的选项(A和B),或者仅选择第一个和第三个列出的选项(A和C),或者仅选择第二个和第三个列出的选项(B和C),或者选择所有三个选项(A和B和C)。正如本领域和相关领域的普通技术人员所清楚的,这可以扩展到可列出的尽可能多的项目。
此外,如本文所使用的,词语“发信令通知(signal)”尤其是指向对应的解码器指示一些东西。例如,在某些实施例中,编码器发信令通知多个参数中的特定一个参数以进行细化。以这种方式,在一个实施例中,在编码器侧和解码器侧都使用相同的参数。因此,例如,编码器可以向解码器发送(显式信令通知)特定参数,使得解码器可以使用相同的特定参数。相反,如果解码器已经具有特定参数以及其他参数,则可以在不发送(隐式信令通知)的情况下使用信令,来简单地允许解码器知道并选择特定参数。通过避免任何实际功能的传输,在各种实施例中实现了比特节省。应当理解,信令可以以多种方式完成。例如,在各种实施例中,一个或多个语法元素、标志等用于向对应的解码器发信令通知信息。虽然前面提到了词语“发信令通知”的动词形式,但是词语“信号(signal)”在本文也可以用作名词。
对于本领域普通技术人员来说显而易见的是,实现方式可以产生各种信号,这些信号被格式化以携带例如可以被存储或传输的信息。该信息可以包括例如用于执行方法的指令,或者由所描述的实现方式之一产生的数据。例如,信号可以被格式化以携带所描述的实施例的比特流或信号。这种信号可以被格式化为例如电磁波(例如,使用频谱的射频部分)或基带信号。格式化可以包括,例如,编码数据流和调制具有经编码的数据流的载波。信号携带的信息可以是例如模拟或数字信息。如已知的,信号可以通过各种不同的有线或无线链路来传输。信号可以被存储在处理器可读介质上。
已经描述了各种实施例。实施例可以跨各种不同权利要求类别和类型,以单独或任意组合的方式包括以下特征或实体中的任何一个:
·提供一种用于视频编码的方法,包括获取量化模式选择条件,基于条件选择第一量化模式用于处理变换系数集合的第一部分,基于条件选择第二量化模式用于处理变换系数集合的第二部分,以及基于第一部分和第二部分的处理对视频信息进行编码。
·提供用于视频编码的装置,包括一个或多个处理器,其被配置为用于获取量化模式选择条件,基于条件选择第一量化模式用于处理变换系数集合的第一部分,基于条件选择第二量化模式用于处理变换系数集合的第二部分,以及基于第一部分和第二部分的处理对视频信息进行编码。
·提供一种用于视频解码的方法,包括获取量化模式选择条件,基于条件选择第一量化模式用于处理变换系数集合的第一部分,基于条件选择第二量化模式用于处理变换系数集合的第二部分,以及基于第一部分和第二部分的处理对视频信息进行解码。
·提供用于视频解码的装置,包括一个或多个处理器,其被配置为获取量化模式选择条件,基于条件选择第一量化模式用于处理变换系数集合的第一部分,基于条件选择第二量化模式用于处理变换系数集合的第二部分,以及基于第一部分和第二部分的处理对视频信息进行解码。
·提供一个或多个语法元素,语法元素提供量化模式选择条件的指示,量化模式选择条件使得能够基于条件来选择第一量化模式用于处理变换系数集合的第一部分,基于条件来选择第二量化模式用于处理变换系数集合的第二部分,以及基于第一部分和第二部分的处理来对视频信息进行编码和/或解码。
·提供比特流,其中通过包括指示量化模式选择条件的信息来形成比特流,量化模式选择条件使得能够基于条件来选择第一量化模式用于处理变换系数集合的第一部分,基于条件来选择第二量化模式用于处理变换系数集合的第二部分,以及基于第一部分和第二部分的处理来对视频信息进行编码和/或解码。
·提供视频编码和/或解码,其包括在用于处理变换系数集合的第一部分和第二部分的第一和第二量化方法之间切换。
·提供视频编码和/或解码,其包括选择性地启用和/或切换用于处理变换系数集合的第一部分和第二部分的依赖标量量化和常规标量量化。
·提供视频编码和/或解码,其包括基于条件选择性地启用用于处理变换系数集合的第一量化方案和第二量化方案之一,其中条件包括变换系数在编解码块中的位置、和/或块的预测模式、和/或分量特性之一。
·提供视频编码和/或解码,其包括基于条件选择性地启用第一量化方案和第二量化方案之一,其中条件包括编解码块中的位置,并且其中位置包括低频区域或高频区域。
·提供视频编码和/或解码,其包括基于条件选择性地启用第一量化方案和第二量化方案之一,其中条件包括编解码块中的位置,并且其中位置包括低频区域或高频区域,并且其中选择性地启用包括:针对位于低频区域中的变换系数启用依赖标量量化,以及针对位于高频区域中的变换系数启用常规标量量化。
·提供视频编码和/或解码,其包括基于条件选择性地启用第一量化方案和第二量化方案之一,其中条件包括编解码块的预测模式,并且其中预测模式包括帧内编码模式或帧间编码模式,并且其中选择性地启用包括:针对帧内编解码块启用依赖标量量化和针对帧间编解码块启用常规标量量化。
·提供视频编码和/或解码,其包括基于条件选择性地启用第一量化方案和第二量化方案之一,其中条件包括分量特性,并且其中分量特性包括亮度或色度之一,并且其中选择性地启用包括:针对亮度分量启用依赖标量量化和针对色度分量启用常规标量量化。
·提供一个或多个语法元素,该语法元素提供对量化模式选择条件的指示,量化模式选择条件使得能够基于该条件来选择第一量化模式用于处理变换系数集合的第一部分,基于该条件来选择第二量化模式用于处理变换系数集合的第二部分,以及基于第一部分和第二部分的处理来编码和/或解码视频信息。
·包括语法元素中的一个或多个或其变体的比特流或信号。
·创建和/或传输和/或接收和/或解码包括所描述的语法元素中的一个或多个或其变体的比特流或信号。
·电视、机顶盒、蜂窝电话、平板或其他电子设备,其根据所描述的实施例中的任何一个来执行视频编码和/或解码,并显示(例如使用监视器、屏幕或其他类型的显示器)结果图像。
·电视、机顶盒、蜂窝电话、平板或其他电子设备,其调谐(例如使用调谐器)频道以接收包括经编码的图像的信号,并根据所描述的实施例中的任何一个来执行视频编码和/或解码。
·电视、机顶盒、蜂窝电话、平板或其他电子设备,其通过空中接收(例如,使用天线)包括经编码的图像的信号,并根据所描述的实施例中的任何一个来执行视频编码和/或解码。
·一种存储程序代码的计算机程序产品,当该程序代码由计算机执行时,根据所描述的实施例中的任何一个来实现视频编码和/或解码。
·一种包括可执行程序指令的非暂时性计算机可读介质,该可执行程序指令使得执行该指令的计算机根据所描述的实施例中的任何一个来实现视频编码和/或解码。
·一种计算机可读存储介质,其上存储有根据本文描述的一个或多个方面和/或实施例生成的比特流。
·一种用于传输根据本文描述的一个或多个方面和/或实施例生成的比特流的方法和装置。
贯穿本公开内容,还支持和设想了各种其他概括性的以及具体的实施例。
表1
Figure BDA0003158403670000261
Figure BDA0003158403670000271
Figure BDA0003158403670000281
Figure BDA0003158403670000291

Claims (25)

1.一种用于视频编码的方法,包括:
获取量化模式选择条件;
基于所述量化模式选择条件,选择第一量化模式用于处理变换系数集合的第一部分;
基于所述量化模式选择条件,选择第二量化模式用于处理所述变换系数集合的第二部分;以及
基于所述变换系数集合的经处理的第一部分和第二部分对所述视频进行编码。
2.一种用于视频解码的方法,包括:
获取量化模式选择条件;
基于所述量化模式选择条件,选择第一量化模式用于处理变换系数集合的第一部分;
基于所述量化模式选择条件,选择第二量化模式用于处理所述变换系数集合的第二部分;以及
基于所述变换系数集合的经处理的第一部分和第二部分对所述视频进行解码。
3.一种用于视频编码的装置,包括
一个或多个处理器,其中所述一个或多个处理器被配置为:
获取量化模式选择条件;
基于所述量化模式选择条件,选择第一量化模式用于处理变换系数集合的第一部分;
基于所述量化模式选择条件,选择第二量化模式用于处理所述变换系数集合的第二部分;以及
基于所述变换系数集合的经处理的第一部分和第二部分对所述视频进行编码。
4.一种用于视频解码的装置,包括
一个或多个处理器,其中所述一个或多个处理器被配置为:
获取量化模式选择条件;
基于所述量化模式选择条件,选择第一量化模式用于处理变换系数集合的第一部分;
基于所述量化模式选择条件,选择第二量化模式用于处理所述变换系数集合的第二部分;以及
基于所述变换系数集合的经处理的第一部分和第二部分对所述视频进行解码。
5.一种用于视频编码的方法,包括:
获取包括块的预测模式的量化模式选择条件;
基于所述量化模式选择条件,选择第一量化模式用于处理变换系数集合的第一部分;
基于所述量化模式选择条件,选择第二量化模式用于处理所述变换系数集合的第二部分;以及
基于所述变换系数集合的经处理的第一部分和第二部分对所述视频进行编码。
6.一种用于视频解码的方法,包括:
获取包括块的预测模式的量化模式选择条件;
基于所述量化模式选择条件,选择第一量化模式用于处理变换系数集合的第一部分;
基于所述量化模式选择条件,选择第二量化模式用于处理所述变换系数集合的第二部分;以及
基于所述变换系数集合的经处理的第一部分和第二部分对所述视频进行解码。
7.一种用于视频编码的装置,包括
一个或多个处理器,其中所述一个或多个处理器被配置为:
获取包括块的预测模式的量化模式选择条件;
基于所述量化模式选择条件,选择第一量化模式用于处理变换系数集合的第一部分;
基于所述量化模式选择条件,选择第二量化模式用于处理所述变换系数集合的第二部分;以及
基于所述变换系数集合的经处理的第一部分和第二部分对所述视频进行编码。
8.一种用于视频解码的装置,包括
一个或多个处理器,其中所述一个或多个处理器被配置为:
获取包括块的预测模式的量化模式选择条件;
基于所述量化模式选择条件,选择第一量化模式用于处理变换系数集合的第一部分;
基于所述量化模式选择条件,选择第二量化模式用于处理所述变换系数集合的第二部分;以及
基于所述变换系数集合的经处理的第一部分和第二部分对所述视频进行解码。
9.根据权利要求1、2、5或6所述的方法,或根据权利要求3、4、7或8所述的装置,其中提供至少一个语法元素来指示所述量化模式选择条件。
10.根据权利要求1、2、5、6或9中任一项所述的方法,或根据权利要求3、4或7-9中任一项所述的装置,其中所述第一量化模式不同于所述第二量化模式。
11.根据权利要求1、2、5、6、9或10中任一项所述的方法,或根据权利要求3、4或7-10中任一项所述的装置,其中所述第一量化模式是依赖标量量化。
12.根据权利要求11所述的方法或装置,其中所述依赖标量量化取决于重建顺序中的先前变换系数的值。
13.根据权利要求1、2、5、6或9-12中任一项所述的方法,或根据权利要求3、4或7-12中任一项所述的装置,其中所述第二量化模式是非依赖标量量化。
14.根据权利要求11-13中任一项所述的方法,或根据权利要求11-13中任一项所述的装置,其中所述依赖标量量化被应用于所述第一部分中的变换系数,所述第一部分具有比所述第二部分更低的频率。
15.根据权利要求11-14中任一项所述的方法,或根据权利要求11-14中任一项所述的装置,其中所述非依赖标量量化被应用于所述第二部分中的变换系数,所述第二部分具有比所述第一部分更高的频率。
16.根据权利要求1、2或结合权利要求1或权利要求2的权利要求9-15中任一项所述的方法,或根据权利要求3、4或结合权利要求3或权利要求4的权利要求9-15中任一项所述的装置,其中所述量化模式选择条件取决于以下中的一个或多个:1)编解码块中的位置、2)块的预测模式、或3)块的分量特性。
17.根据权利要求5、6或结合权利要求5或权利要求6的权利要求9-15中任一项所述的方法,或根据权利要求7、8或结合权利要求7或权利要求8的权利要求9-15中任一项所述的装置,其中所述量化模式选择条件取决于以下中的一个或多个:1)编解码块中的位置、2)块的预测模式、或3)块的分量特性。
18.根据权利要求16或17所述的方法或装置,其中所述预测模式包括正在被编码或解码的块是被帧内编解码的还是帧间编解码的。
19.根据权利要求16、17或18所述的方法或装置,其中块的分量特性包括正在被编码或解码的所述块是所述视频的亮度分量还是色度分量。
20.一种包括视频的比特流,其中所述比特流通过以下步骤形成:
获取量化模式选择条件;
基于所述量化模式选择条件,选择第一量化模式用于处理变换系数集合的第一部分;
基于所述量化模式选择条件,选择第二量化模式用于处理所述变换系数集合的第二部分;以及
基于所述变换系数集合的经处理的第一部分和第二部分将所述视频编码为比特流。
21.一种非暂时性计算机可读介质,包含根据权利要求1、2和5-12中任一项所述的方法或权利要求3-12中任一项所述的装置生成的数据内容。
22.一种计算机程序产品,包括用于在由一个或多个处理器执行时执行权利要求1、2和5-12中任一项所述的方法的指令。
23.一种信号,包括根据权利要求1或结合权利要求1的权利要求5至12中任一项所述的方法生成的数据。
24.一种设备,包括:
根据权利要求3或4-12中任一项所述的装置;以及
以下中的至少一个:(i)天线,被配置为接收信号,所述信号包括表示所述图像信息的数据;(ii)频带限制器,被配置为将接收到的信号限制到包括表示所述图像信息的数据的频带;以及(iii)显示器,被配置为显示来自所述图像信息的图像。
25.根据权利要求17所述的设备,其中所述设备包括电视、电视信号接收器、机顶盒、网关设备、移动设备、蜂窝电话、平板或其他电子设备中的一种。
CN201980088748.2A 2018-11-22 2019-11-19 用于视频编码和解码的量化 Pending CN113302924A (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
EP18306550 2018-11-22
EP18306550.7 2018-11-22
EP19306024 2019-08-21
EP19306024.1 2019-08-21
PCT/US2019/062114 WO2020106668A1 (en) 2018-11-22 2019-11-19 Quantization for video encoding and decoding

Publications (1)

Publication Number Publication Date
CN113302924A true CN113302924A (zh) 2021-08-24

Family

ID=68808629

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201980088748.2A Pending CN113302924A (zh) 2018-11-22 2019-11-19 用于视频编码和解码的量化

Country Status (4)

Country Link
US (1) US20210400276A1 (zh)
EP (1) EP3884668A1 (zh)
CN (1) CN113302924A (zh)
WO (1) WO2020106668A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113613004A (zh) * 2021-09-14 2021-11-05 百果园技术(新加坡)有限公司 图像编码方法、装置、电子设备及存储介质

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022174477A1 (zh) * 2021-02-22 2022-08-25 浙江大学 一种编码方法、解码方法、编码器、解码器以及存储介质
CN117426089A (zh) * 2021-07-27 2024-01-19 Oppo广东移动通信有限公司 一种视频解码、编码方法及设备、存储介质
CN116320471B (zh) * 2023-05-18 2023-08-22 中南大学 视频信息隐藏方法、系统、设备及视频隐藏信息提取方法

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0443114A2 (en) * 1990-02-23 1991-08-28 International Business Machines Corporation Method and apparatus for image-data decompression
CN101960466A (zh) * 2007-09-11 2011-01-26 彩升集团有限公司 用于误差弹性视频编码的帧间模式生成的比率失真优化
US20110268183A1 (en) * 2009-01-27 2011-11-03 Thomson Licensing Method and apparatus for transform selection in video encoding and decoding
GB201217464D0 (en) * 2012-03-02 2012-11-14 Canon Kk Method and devices for encoding a sequence of images into a scalable video bitstream, and decoding a corresponding scalable video bitstream
US20140105283A1 (en) * 2011-06-13 2014-04-17 Jin Li Method and apparatus for encoding and decoding video using intra prediction mode dependent adaptive quantization matrix
EP2830308A1 (en) * 2013-06-11 2015-01-28 BlackBerry Limited Intra-coding mode-dependent quantization tuning
US20150163498A1 (en) * 2013-12-06 2015-06-11 Fujitsu Limited Video encoding apparatus and video encoding method
US20170064328A1 (en) * 2015-08-28 2017-03-02 Samsung Electronics Co., Ltd. Video encoding method and apparatus and video decoding method and apparatus
US20170094313A1 (en) * 2015-09-29 2017-03-30 Qualcomm Incorporated Non-separable secondary transform for video coding
CN107211144A (zh) * 2015-01-26 2017-09-26 高通股份有限公司 用于预测残差的增强型多重变换

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0443114A2 (en) * 1990-02-23 1991-08-28 International Business Machines Corporation Method and apparatus for image-data decompression
CN101960466A (zh) * 2007-09-11 2011-01-26 彩升集团有限公司 用于误差弹性视频编码的帧间模式生成的比率失真优化
US20110268183A1 (en) * 2009-01-27 2011-11-03 Thomson Licensing Method and apparatus for transform selection in video encoding and decoding
US20140105283A1 (en) * 2011-06-13 2014-04-17 Jin Li Method and apparatus for encoding and decoding video using intra prediction mode dependent adaptive quantization matrix
GB201217464D0 (en) * 2012-03-02 2012-11-14 Canon Kk Method and devices for encoding a sequence of images into a scalable video bitstream, and decoding a corresponding scalable video bitstream
EP2830308A1 (en) * 2013-06-11 2015-01-28 BlackBerry Limited Intra-coding mode-dependent quantization tuning
US20150163498A1 (en) * 2013-12-06 2015-06-11 Fujitsu Limited Video encoding apparatus and video encoding method
CN107211144A (zh) * 2015-01-26 2017-09-26 高通股份有限公司 用于预测残差的增强型多重变换
US20170064328A1 (en) * 2015-08-28 2017-03-02 Samsung Electronics Co., Ltd. Video encoding method and apparatus and video decoding method and apparatus
US20170094313A1 (en) * 2015-09-29 2017-03-30 Qualcomm Incorporated Non-separable secondary transform for video coding

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
HEIKO SCHWARZ ET AL: "CE7: Transform Coefficient Coding and Dependent Quantization (Tests 7.1.2, 7.2.1)", JOINT VIDEO EXPERTS TEAM (JVET) OF ITU-T SG 16 WP 3 AND ISO/IEC JTC 1/SC 29/WG 11 11TH MEETING: LJUBLJANA, SI, 10–18 JULY, 2018,JVET-K0071, pages 8 - 12 *

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113613004A (zh) * 2021-09-14 2021-11-05 百果园技术(新加坡)有限公司 图像编码方法、装置、电子设备及存储介质

Also Published As

Publication number Publication date
US20210400276A1 (en) 2021-12-23
WO2020106668A1 (en) 2020-05-28
EP3884668A1 (en) 2021-09-29

Similar Documents

Publication Publication Date Title
US20220038684A1 (en) Multi-reference line intra prediction and most probable mode
WO2022063729A1 (en) Template matching prediction for versatile video coding
CN113016180A (zh) 用于视频编码和解码的虚拟管线
CN113170146A (zh) 用于图片编码和解码的方法和设备
CN113302924A (zh) 用于视频编码和解码的量化
US20220038681A1 (en) Video encoding or decoding using block extension for overlapped block motion compensation
CN114208178A (zh) 用于视频编码和解码的二次变换
US20240089437A1 (en) Chroma quantization parameter adjustment in video encoding and decoding
CN113170210A (zh) 视频编码和解码中的仿射模式信令
CN112771874A (zh) 用于画面编码和解码的方法和设备
CN113647112A (zh) 用于视频编码和解码的熵编解码
CN112740676A (zh) 帧内变换译码和广角帧内预测的协调
US11831872B2 (en) Video encoding and decoding using multiple transform selection
JP7506063B2 (ja) ビデオ符号化および復号のための複数のコーディングユニットの中でグループ化するパラメータ
CN114930819A (zh) 三角形合并模式中的子块合并候选
CN114450951A (zh) 视频编码和解码中的运动向量预测
CN113170153A (zh) 基于二元树初始化当前图片参考块矢量
US20230024223A1 (en) Intra sub partitions for video encoding and decoding combined with multiple transform selection, matrix weighted intra prediction or multi-reference-line intra prediction
EP3664450A1 (en) Method and device for picture encoding and decoding
CN114830656A (zh) 用于快速视频编码器的二次变换
WO2020072397A1 (en) Block size based motion vector coding in affine mode

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination