CN115039408A - 确定上下文自适应二进制算术编码的参数化 - Google Patents

确定上下文自适应二进制算术编码的参数化 Download PDF

Info

Publication number
CN115039408A
CN115039408A CN202080094666.1A CN202080094666A CN115039408A CN 115039408 A CN115039408 A CN 115039408A CN 202080094666 A CN202080094666 A CN 202080094666A CN 115039408 A CN115039408 A CN 115039408A
Authority
CN
China
Prior art keywords
parameterization
transform
predetermined
transform block
quantization
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202080094666.1A
Other languages
English (en)
Inventor
阮藩黄松
本杰明·布鲁斯
海科·施瓦茨
德特勒夫·马尔佩
托马斯·威甘德
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fraunhofer Gesellschaft zur Forderung der Angewandten Forschung eV
Original Assignee
Fraunhofer Gesellschaft zur Forderung der Angewandten Forschung eV
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fraunhofer Gesellschaft zur Forderung der Angewandten Forschung eV filed Critical Fraunhofer Gesellschaft zur Forderung der Angewandten Forschung eV
Publication of CN115039408A publication Critical patent/CN115039408A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46Embedding additional information in the video signal during the compression process
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/12Selection from among a plurality of transforms or standards, e.g. selection between discrete cosine transform [DCT] and sub-band transform or selection between H.263 and H.264
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/13Adaptive entropy coding, e.g. adaptive variable length coding [AVLC] or context adaptive binary arithmetic coding [CABAC]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/174Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a slice, e.g. a line of blocks or a group of blocks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Discrete Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)

Abstract

视频解码器使用上下文自适应二进制算术编码来从数据流中解码视频。视频解码器确定用于上下文自适应二进制算术编码的参数化。

Description

确定上下文自适应二进制算术编码的参数化
技术领域
本发明的实施例涉及视频解码器和编码器以及用于对视频进行编码和解码的方法。本发明的实施例涉及用于范围广泛的操作点的残差编码设计。
背景技术
视频编码标准通常是为实际应用而设计的,因此,是为满足应用的要求(例如,色度格式、空间分辨率或典型比特率范围)而设计的。然而,也支持非典型的操作范围,但是位于该操作范围内的操作点并非是优化的。对于高比特率和超高比特率,并且对于无损操作模式,信号特性变得不同,因此,专用设计是有益的。尽管如此,因为这种专用设计引入了额外的实现工作量和资源,这种专用设计是不可取的。
在残差编码级的上下文中,即,从编码器角度对变换和量化之后的输出信号进行编码,当前的通用视频编码(VVC)草案中存在两种不同的方案。第一种设计是常规残差编码(RRC),其适用于相机捕获的内容;而第二种设计是变换跳过残差编码(TSRC),其适用于屏幕内容。虽然这两个残差编码级不同,但它们共享一个典型的编码结构。RRC和TSRC之间的选择依赖于变换跳过模式(TSM)的使用,并且是隐含的。在TSM中,变换被旁路,这等于使用恒等变换,导致在空间域内将输出信号传送到量化级。
发明内容
期望的是在应用残差编码的高灵活性和低实施工作量之间提供改进的折衷的视频编码构思。
本发明的实施例依赖于如下思想:关于用于对预测残差进行变换的变换的选择,允许灵活选择用于使用上下文自适应二进制算术编码(CABAC)的残差编码的参数化(parametrization)。
根据本发明的实施例提供了一种视频解码器。视频解码器被配置为使用预测和基于变换的残差解码来重构视频。此外,视频解码器被配置为支持用于基于变换的残差解码的变换集,其中所述变换集包括恒等变换。此外,视频解码器被配置为对于视频的图片的每个变换块,从该变换集中确定一个变换,其中针对相应变换块的预测残差根据该变换被编码到数据流中。例如,解码器可以通过使用数据流中的某些语法元素来执行对变换的确定,这些语法元素可以以变换块级在数据流中传输,或者以比变换块大的块(例如,编码块,帧间/帧内预测决策是以编码块为单位做出的)为单位在数据流中传输,并且可选地,通过使用相应变换块的特性(例如,相应变换块的大小,或相应变换块是否与视频的帧内预测部分或帧间预测部分相关)来执行对变换的确定。此外,视频解码器被配置为支持用于基于变换的残差解码的量化参数集,该量化参数集包括对应于量化步长大小为1的预定量化参数。此外,视频解码器被配置为对于视频的图片的每个变换块,从该量化参数集中确定一个量化参数,其中针对相应变换块的预测残差使用该量化参数被量化且被编码到数据流中。例如,解码器可以通过使用数据流中的某些语法元素来执行对量化参数的确定,这些语法元素可以以变换块级在数据流中传输,或者以比变换块大的块为单位(例如,编码块,帧间/帧内预测决策是以编码块为单位做出的)在数据流中传输,并且可选地,通过根据用于先前变换块的先前使用的量化参数的预测来执行对量化参数的确定。此外,视频解码器被配置为:对于所述变换不等于恒等变换的每个变换块,对针对相应变换块从数据流中解码的残差值执行所述变换的逆变换。此外,视频解码器被配置为:对于所述量化参数不等于预定量化参数的每个变换块,对针对相应变换块从数据流中解码的量化索引进行缩放,以获得残差值。此外,视频解码器被配置为:使用上下文自适应二进制算术解码从数据流中解码量化索引。此外,视频解码器被配置为:支持上下文自适应二进制算术解码的参数化集。此外,视频解码器被配置为:对于视频的图片的每个变换块或对于相应变换块被细分成的每个子块或对于相应变换块的每个量化索引,从该参数化集中确定一个参数化,其中使用所述参数化对上下文自适应二进制算术解码进行参数化。
在一个替代方案中,视频解码器被配置为以如下方式执行对所述参数化的确定:对于所述变换等于恒等变换的第一预定变换块,该方式使所述参数化是第一参数化;对于所述变换不等于恒等变换的第二预定变换块,该方式也使所述参数化是第一参数化。因此,解码器可以在所述变换等于恒等变换的情况下以及在所述变换不等于恒等变换的情况下使用第一参数化,从而关于对所述变换的选择,在选择所述参数化方面提供较高灵活性。特别地,与不允许这样选择所述参数化的实施方式相比,本发明构思允许在更多数量的用例中使用第一参数化,而无需用于额外参数化的额外实现工作量。在选择所述参数化方面的高度灵活性使所述参数化适应要解码的视频,从而实现更高的编码效率。
附加地或替代地,视频解码器被配置为:以根据针对预定变换块确定的所述量化参数的方式,来执行对针对预定变换块的参数化的确定。因此,对所述参数化的选择可以适应于对量化参数的选择。
附加地或替代地,视频解码器被配置为以根据数据流中的一个或多个第一语法元素的方式执行对针对预定变换块的参数化的确定,其中一个或多个第一语法元素与一个或多个第二语法元素不相交,其中,解码器被配置为根据一个或多个第二语法元素,执行对针对预定变换块的变换的确定。由于解码器根据与第二语法元素不相交的一个或多个第一语法元素来确定所述参数化,因此可以通过第一语法元素和第二语法元素用信号通知所述参数化和所述变换,使得所述参数化和所述变换不一定相互依赖。因此,对所述参数化和所述变换之一的选择不一定意味着对所述参数化和所述变换中的另一个的选择。因此,该信令允许参数化和变换的灵活组合,使得视频解码器可以灵活地选择所述参数化,例如,在考虑到要解码的视频的情况下进行选择。
附加地或替代地,视频解码器被配置为:根据一个或多个先前解码的量化索引来执行对所述参数化的确定。
四个替代方案中的每一个都可以单独应用。因此,例如,根据第二替代方案的实施例提供了一种视频解码器,其被配置为使用预测和基于变换的残差解码来重构视频。视频解码器还被配置为支持用于基于变换的残差解码的变换集,其中所述变换集包括恒等变换。视频解码器还被配置为对于视频的图片的每个变换块,从该变换集中确定一个变换,其中针对相应变换块的预测残差根据该变换被编码到数据流中。视频解码器还被配置为支持用于基于变换的残差解码的量化参数集,该量化参数集包括对应于量化步长大小为1的预定量化参数。视频解码器还被配置为对于视频的图片的每个变换块,从该量化参数集中确定一个量化参数,其中针对相应变换块的预测残差使用该量化参数被量化且被编码到数据流中。视频解码器还被配置为:对于所述变换不等于恒等变换的每个变换块,对针对相应变换块从数据流中解码的残差值执行所述变换的逆变换。视频解码器还被配置为:对于所述量化参数不等于预定量化参数的每个变换块,对针对相应变换块从数据流中解码的量化索引进行缩放,以获得残差值。视频解码器还被配置为:使用上下文自适应二进制算术解码从数据流中解码量化索引。视频解码器还被配置为:支持上下文自适应二进制算术解码的参数化集。视频解码器还被配置为:针对视频的图片的每个变换块或针对相应变换块被细分成的每个子块或针对相应变换块的每个量化索引,从该参数化集中确定一个参数化,其中使用所述参数化对上下文自适应二进制算术解码进行参数化。视频解码器还被配置为:以根据针对预定变换块确定的所述量化参数的方式,来执行对针对预定变换块的所述参数化的确定。
在其他实施例中,相应地实施第一、第三或第四替代方案。
另一实施例提供了一种视频编码器,其被配置为使用预测和基于变换的残差编码来对视频进行编码。视频编码器被配置为支持用于基于变换的残差编码的变换集,其中所述变换集包括恒等变换。视频编码器被配置为:对于视频的图片的每个变换块,从变换集中确定一个变换,其中针对相应变换块的预测残差根据所述变换被编码到数据流中(例如,通过使用数据流中的某些语法元素,这些语法元素可以以变换块级在数据流中传输,或者以比变换块大的块(例如,编码块,帧间/帧内预测决策是以编码块为单位做出的)为单位在数据流中传输;并且可选地,通过使用相应变换块的特性(例如,相应变换块的大小,或相应变换块是否与视频的帧内预测部分或帧间预测部分相关))。视频编码器还被配置为支持用于基于变换的残差编码的量化参数集,该量化参数集包括对应于量化步长大小为1的预定量化参数。视频编码器还被配置为:对于视频的图片的每个变换块,从量化参数集中确定一个量化参数,其中针对相应变换块的预测残差使用所述量化参数被量化且被编码到数据流中(例如,通过使用数据流中的某些语法元素,这些语法元素可以以变换块级在数据流中传输,或者以比变换块大的块(例如,编码块,帧间/帧内预测决策是以编码块为单位做出的)为单位在数据流中传输;并且可选地,通过根据用于先前量化块的先前使用的量化参数的预测)。视频编码器还被配置为:对于所述变换不等于恒等变换的每个变换块,执行所述变换以针对相应变换块产生残差值并将该残差值编码到数据流中。视频编码器还被配置为:对于所述量化参数不等于预定量化参数的每个变换块,在舍入之前对残差值进行缩放以针对相应变换块获得量化索引并将该量化索引编码到数据流中。视频编码器还被配置为:使用上下文自适应二进制算术编码将量化索引编码到数据流中。视频编码器还被配置为:支持上下文自适应二进制算数编码的参数化集。视频编码器还被配置为:对于视频的图片的每个变换块或对于相应变换块被细分成的每个子块或对于相应变换块的每个量化索引,从该参数化集中确定一个参数化,其中使用所述参数化对上下文自适应二进制算术编码进行参数化。在一个替代方案中,视频编码器被配置为以如下方式执行对所述参数化的确定:对于所述变换等于恒等变换的第一预定变换块,该方式使所述参数化是第一参数化;对于所述变换不等于恒等变换的第二预定变换块,该方式也使所述参数化是第一参数化。替代地或附加地,视频编码器还被配置为:以根据针对预定变换块确定的所述量化参数的方式,来执行对针对预定变换块的所述参数化的确定。替代地或附加地,视频编码器还被配置为以根据数据流中的一个或多个第一语法元素的方式执行对针对预定变换块的所述参数化的确定,其中一个或多个第一语法元素与一个或多个第二语法元素不相交,其中,编码器被配置为根据一个或多个第二语法元素,执行对针对预定变换块的所述变换的确定。替代地或附加地,视频编码器还被配置为:根据一个或多个先前编码的量化索引来执行对所述参数化的确定。如关于视频解码器所描述的,替代方案可以单独实施。
其他实施例提供由任何视频解码器或视频编码器执行的方法。
其他实施例提供由视频编码器提供的视频比特流。
附图说明
下面参考附图更详细地描述本公开的实施例,附图中:
图1示出了根据实施例的视频编码器;
图2示出了根据实施例的视频解码器;
图3示出了将图片划分为编码块和变换块的示例;
图4示出了根据实施例的视频解码器;
图5示出了根据实施例的参数化确定435;
图6示出了根据实施例的视频编码器。
具体实施方式
在下文中,将详细讨论实施例,然而,应当理解,实施例提供了许多能够体现在各种视频编码中的可应用构思。所讨论的具体实施例仅用于说明实现和使用本构思的具体方式,并不限制实施例的范围。在以下描述中,阐述了多个细节以提供对本公开的实施例的更透彻的解释。然而,对于本领域的技术人员来说显而易见的是,可以在没有这些具体细节的情况下实践其他实施例。在其他实例中,以框图形式示出公知的结构和设备(而不是具体地示出),以避免对本文所述示例造成混淆。此外,除非另外具体指示,否则下文所述的不同实施例的特征可以彼此组合。
在以下实施例的描述中,相同或相似的元件或具有相同功能的元件被赋有相同附图标记或以相同名称标识,并且通常省略对被赋有相同附图标记或以相同名称标识的元件的重复描述。因此,针对具有相同或相似附图标记或以相同名称标识的元件提供的描述可以相互交换或可以在不同实施例中相互应用。
附图的以下描述开始于呈现对用于对视频的图片进行编码的基于块的预测编解码器的编码器和解码器的描述,以便形成本发明的实施例可以构建在其中的编码框架的示例。相应的编码器和解码器将参照图1至图3进行描述。在下文中,呈现了对本发明的构思的实施例的描述以及关于如何将这些构思分别构建到图1的编码器和图2的解码器中的描述,尽管随后图4和以下描述的实施例也可用于形成不根据构成图1的编码器和图2的解码器基础的编码框架操作的编码器和解码器。
图1示出了用于示例性地使用基于变换的残差编码将图片12预测编码到数据流14中的装置。该装置或编码器使用附图标记10表示。图2示出了对应的解码器20,即,被配置为也使用基于变换的残差解码从数据流14中预测解码图片12′的装置20,其中撇号被用于指示由解码器20重构的图片12′由于对预测残差信号的量化而引起的编码损耗而与最初由装置10编码的图片12不同。图1和图2示例性地使用基于变换的预测残差编码,但是本申请的实施例不限于这种预测残差编码。对于关于图1和图2所描述的其他细节也是如此,如下文将概述的。
编码器10被配置为对预测残差信号进行空间到频谱变换,并将由此获得的预测残差信号编码到数据流14中。同样,解码器20被配置为从数据流14中解码预测残差信号,并对由此获得的预测残差信号进行频谱到空间变换。
在内部,编码器10可以包括预测残差信号形成器22,预测残差信号形成器22生成预测残差24以便测量预测信号26与原始信号(即,与图片12)的偏差。预测残差信号形成器22例如可以是从原始信号(即,从图片12)减去预测信号的减法器。编码器10则还包括变换器28,变换器28对预测残差信号24进行空间到频谱变换,以获得频谱域预测残差信号24′,频谱域预测残差信号24′然后由量化器32进行量化,其中量化器32也包括在编码器10中。这样量化的预测残差信号24″被编码到比特流14中。为此,编码器10可以可选地包括熵编码器34,熵编码器34将经变换和量化的预测残差信号熵编码到数据流14中。编码器10的预测级36基于编码到数据流14中并可从数据流14中解码的预测残差信号24″生成预测信号26。为此,如图1所示,预测级36可以在内部包括去量化器38,去量化器38对预测残差信号24″去量化以便获得对应于信号24′的频谱域预测残差信号24″′(除了量化损耗外),随后是逆变换器40,逆变换器40对后一预测残差信号24″′进行逆变换,即,频谱到空间变换,以获得预测残差信号24″″,其对应于原始预测残差信号24(除了量化损耗外)。预测级36的组合器42然后例如通过相加来重新组合预测信号26和预测残差信号24″″以获得重构信号46,即,原始信号12的重构。重构信号46可以对应于信号12′。预测级36的预测模块44然后通过使用例如空间预测(即,图片内预测)和/或时间预测(即,图片间预测)来基于信号46生成预测信号26。
同样,如图2所示,解码器20可以在内部包括与预测级36对应且以与预测级36对应的方式互连的组件。特别地,解码器20的熵解码器50可以对来自数据流的经量化的频谱域预测残差信号24″进行熵解码,在此之后,以以上关于预测级36的模块描述的方式互连和协作的去量化器52、逆变换器54、组合器56和预测模块58基于预测残差信号24″来恢复重构信号,使得如图2所示,组合器56的输出得到重构信号,即,图片12′。
尽管上面没有具体描述,但是很容易明白的是,编码器10可以根据一些优化方案(例如以优化一些速率和失真相关准则(即,编码成本)的方式)设置一些包括例如预测模式、运动参数等的编码参数。例如,编码器10和解码器20以及对应的模块44、58分别可以支持不同的预测模式,例如帧内编码模式和帧间编码模式。编码器和解码器在这些预测模式类型之间切换的粒度可以对应于图片12和12’分别细分为编码片段或编码块的细分。例如,以这些编码片段为单位,图片可以被细分为被帧内编码的块和被帧间编码的块。如以下更详细地概述的,基于相应块的空间的、已编码/解码的邻域来预测帧内编码块。可能存在若干帧内编码模式,并且对其进行选择以用于相应的帧内编码片段,若干帧内编码模式包括方向或角度帧内编码模式,根据这些帧内编码模式,通过沿某方向将邻域的样本值外推到相应的帧内编码片段来填充相应片段,其中该方向特定于相应的方向帧内编码模式。例如,帧内编码模式还可以包括一个或多个其他模式,例如:DC编码模式,其中根据DC编码模式,相应帧内编码块的预测将DC值分配给相应帧内编码片段内的所有样本;和/或平面帧内编码模式,其中根据平面帧内编码模式,相应块的预测被近似或确定为由二维线性函数描述的样本值在相应帧内编码块的样本位置上的空间分布,其中该二维线性函数基于相邻样本定义了平面的驱动倾斜和偏移。与之相比,帧间编码块可以例如在时间上被预测。对于帧间编码块,可以在数据流内用信号通知运动矢量,运动矢量指示图片12所属的视频的先前编码图片的一部分的空间移位,先前编码/解码图片在该部分处被采样,以获得针对相应帧间编码块的预测信号。这意味着,除了由数据流14包括的残差信号编码,例如表示经量化的频谱域预测残差信号24″的熵编码变换系数级之外,数据流14中可以编码有用于向各个块分配编码模式的编码模式参数、用于一些块的预测参数(例如,用于帧间编码片段的运动参数)、以及可选的其他参数(例如,用于控制和用信号通知将图片12和12′分别细分成片段的细分的参数)。解码器20使用这些参数从而以与编码器相同的方式细分图片、向片段分配相同的预测模式、并执行相同的预测以产生相同的预测信号。
图3说明了一方面的在数据流14中用信号通知的预测残差信号24″″与预测信号26的组合与另一方面的重构信号(即,重构图片12′)之间的关系。如上所述,该组合可以是相加。预测信号26在图3中被图示为将图片区域细分为示意性地使用阴影表示的帧内编码块和示意性地用非阴影表示的帧间编码块。细分可以是任何细分,例如将图片区域细分为方形块或非方形块的行和列的规则细分,或者将图片12从树根块多树细分为可变大小的多个叶块的多树细分,例如四叉树细分等,其中其混合如图3所示,在图3中图片区域首先被细分为树根块的行和列,然后根据递归多树细分进一步被细分为一个或多个叶块。例如,图片12、12′可以被细分为编码块80、82,编码块80、82例如可以表示编码树块,并且可以被进一步细分为更小的编码块83。
同样,数据流14中可以编码有针对帧内编码块80的帧内编码模式,其将若干支持的帧内编码模式之一分配给相应的帧内编码块80。对于帧间编码块82,数据流14中可以编码有一个或多个运动参数。一般而言,帧间编码块82不限于在时间上编码。备选地,帧间编码块82可以是根据除了当前图片12本身之外的先前编码部分进行预测的任何块,例如,先前编码部分是图片12所属的视频的先前编码图片,或者另一视图的图片或层级较低层的图片(在编码器和解码器分别是可缩放的编码器和解码器的情况下)。
图3中的预测残差信号24″″也被示出为将图片区域细分为块84。这些块可以被称为变换块,以便与编码块80和82区分。实际上,图3说明了编码器10和解码器20可以使用两个不同细分来将图片12和图片12′分别细分为块,即,一个细分为编码块80和82,另一个细分为变换块84。两个细分可能是相同的,即,每个编码块80和82可以同时形成变换块84,但是图3说明了如下情况:例如,至变换块84的细分形成为至编码块80、82的细分的扩展,使得块80和82的两个块之间的任何边界与两个块84之间的边界重叠,或者换言之,每个块80、82要么与变换块84之一重合、要么与变换块84的簇重合。然而,也可以彼此独立地确定或选择细分,使得变换块84可以替代地跨越块80、82之间的块边界。就至变换块84的细分而言,相似的描述也因此适用于至块80、82的细分,即,块84可以是图片区域规则细分为块(可以排列成行和列或无需排列成行和列)的结果、图片区域的递归多树细分的结果、或它们的组合、或任何其他类型的块化。顺便说一句,注意块80、82和84不限于是正方形、矩形或任何其他形状。
图3还示出了预测信号26和预测残差信号24″″的组合直接得到重构信号12′。然而,应当注意,根据替代实施例,可以将多于一个的预测信号26与预测残差信号24″″组合,以得到图片12′。
如上面已经概述的,图1至图3已经作为示例呈现,其中可以实现下面进一步描述的发明构思以便形成根据本申请的编码器和解码器的具体示例。至此,图1的编码器和图2的解码器分别可以代表下文描述的编码器和解码器的可能实现方式。然而,图1和图2只是示例。然而,根据本申请的实施例的编码器可以使用以下更详细概述的构思来执行对图片12的基于块的编码。同样,根据本申请的实施例的解码器可以使用下面进一步概述的编码构思来执行对来自数据流14的图片12′执行基于块的解码,但是该解码器可能与例如图2的解码器20的不同之处在于:所述解码器以关于图3所述方式不同的方式将图片12′细分为块;和/或所述解码器例如在空间域中从数据流14中导出预测残差,而不是在变换域中。
为了继续对编码器10和解码器20的描述,不同的操作模式可用于各个处理级,例如变换器28和逆变换器54、量化器32和去量化器52,以及熵编码器34和熵解码器50。例如,量化参数(QP)可以定义量化器32和去量化器52对信号24′的量化程度、以及去量化器52对信号24″的缩放程度。此外,还如在介绍部分中提到的,解码器租用的解码器20可以实现变换跳过模式(TSM)。在TSM中,变换器28和逆变换器54可以执行恒等变换。在这种情况下,残差信号24可以对应于信号24′。
当前的VVC草案定义了一种无损操作模式,它可以可选地由编码器10和解码器20实现。从纯技术的角度来看,无损操作模式是一种仅编码器的机制,该机制通过对8位输入信号使用小于或等于4的量化参数(QP),并针对所有变换块使用TSM来实现。当QP小于阈值(即,在8位输入信号的情况下,阈值为4)时,其值被裁剪为等于4,导致输出样本值等于输入样本值。解码器也必须裁剪该值,这是因为更精细的量化会导致缩放,这是不希望的和不必要的。使用这两种机制会产生无损操作模式,而不会向标准引入额外的语法和语义。由于TSM隐含意味着使用TSRC代替常规残差编码(RRC)级,因此编码器在无损操作模式下也将TSRC用于相机捕获内容。事实证明,将TSRC用于相机捕获内容并不合适,本发明提出了不同的方面来解决该问题,而无需为不同的操作模式设计专用的编码路径。
此外,熵编码器34和熵解码器50可以分别应用CABAC来对信号24″或14进行编码和解码。CABAC可以用不同的参数化来实现,从这些参数化中可以确定一个参数化以用于编码/解码过程。
例如,当前的VVC草案采用两个不同的残差编码级,即,常规残差编码(RRC)级和变换跳过残差编码(TSRC)级,熵编码器34和熵解码器50可以采用上述残差编码级。当前VVC草案的语法在启用变换跳过模式(TSM)时隐式指定TSRC。TSM适用于信号特性不适于能量压缩的屏幕内容。一种独特的情况随着无损操作模式出现,其中,当输入比特深度等于8时,VVC编码器通过使用TSM和等于4的QP来使能无损操作模式,导致分别在编码器侧不进行量化或在解码器侧不进行缩放的恒等变换。
RRC和TSRC共享相同的结构,例如,VVC草案指定将大于4×4的变换块细分为不相交的4×4子块(SB),并且在RRC的情况下使用反向对角线扫描模式对每个SB单独进行处理,并且在TSRC的情况下使用前向对角扫描模式对每个SB单独进行处理。具体而言,对SB的处理所使用的扫描模式与对由SB覆盖的样本位置的处理的扫描模式相同。通过使用类似的设计,可以将实现工作量保持在较低水平,特别是,相同的处理块可以用于两个残差编码级。
在RRC中,信令从最后的显著扫描位置开始,导致变换块内的一些SB被推断为不重要的情况。接下来,从覆盖最后的显著扫描位置的SB开始,对位于反向扫描模式的路径中的所有SB进行如下处理。
1.当CCB预算大于或等于4时,
a.未推断时的sig_flag
b.大于1标志(greater than one flag)
c.奇偶标志(parity flag)
d.大于2标志(greater than two flag)
2.针对首次扫描位置的剩余绝对级(Remaining absolute level)
3.针对目前为止未处理的扫描位置的剩余绝对级
4.针对显著扫描位置的符号
sig_flag:使用具有五个相邻样本的模板、得到的绝对和(针对每个扫描位置裁剪的)和显著位置数、以及对角线
greater_flags:使用对角线、以及根据sig标志推导的绝对和数减
去显著位置数
Rice(莱斯)参数:使用具有五个相邻样本的模板,得到绝对和并将其映射到Rice参数
与RRC的逆处理相反,TSRC如下所示地使用前向对角线扫描模式处理变换块内的所有SB。
1.当CCB预算大于或等于4时,
a.未推断时的sig_flag
b.sign_flag
c.大于1标志(greater than one flag)
d.奇偶标志(parity flag)
2.当CCB预算大于或等于4时,
a.大于2标志(greater than two flag)
b.大于4标志(greater than four flag)
c.大于8标志(greater than eight flag)
d.大于10标志(greater than ten flag)
3.针对所有扫描位置的剩余绝对级(如果适用)
a.如果位置未被第一编码环路覆盖并且该位置包含显著系数,则以旁路模式传输符号标志
RRC和TSRC二者的语法都由计数变量(计数器)组成,并且当计数器小于阈值时,可以跳过一些编码环路。这样做的原因是限制需要更多逻辑(因此需要更多处理时间)的上下文编码二进制位(CCB)的数量。具体而言,RRC和TSRC二者的CCB限制等于变换块的每个样本位置1.75CCB。这样的CCB限制与二进制化过程的自适应边界相同,特别是二进制化过程的将截断一元码和Rice码分开的第一边界。
即使信号没有经历与恒等变换不同的变换,当前的TSRC设计仍不适用于相机捕获内容。然而,在无损操作模式的情况下,由于无损VVC编码器始终选择TSM,因此TSRC被应用于相机捕获内容。克服这种情况的解决方案是使用高级标志(“一个或多个第一语法元素”的示例),指示应始终使用RRC。备选地,可以在编码结构级(例如,在编码单元或变换单元级处)用信号通知这种切换标志(“一个或多个第一语法元素”的示例)。但是,将RRC用于无损可以提高相机捕获内容的压缩效率,但不能提高屏幕内容的压缩效率。因此,引入指示当前图片或区域为屏幕内容的高级标志和/或低级信令机制是一种替代方案,然而这与指示使用RRC或TSRC的标志完全相同。备选地,可以采用HLS机制来指示对图片的哪个区域采用替代RC,以便解码器预先知道图片内的切换区域。
图4示出了根据实施例的视频解码器420的框图。视频解码器420被配置为使用预测58和基于变换的残差解码来重构视频12。视频解码器420被配置为支持用于基于变换的残差解码的变换集453,所述变换集包括恒等变换。视频解码器420包括变换确定模块455,变换确定模块455被配置为对于视频的图片12′的每个变换块84,从该变换集453中确定一个变换457,其中针对相应变换块84的预测残差24根据该变换457被编码到数据流14中。此外,视频解码器420被配置为支持用于基于变换的残差解码的量化参数集443,该量化参数集443包括对应于量化步长大小为1的预定量化参数441。视频解码器420包括QP确定模块445,QP确定模块445被配置为对于视频的图片的每个变换块84,从该量化参数集443中确定一个量化参数447,其中针对相应变换块84的预测残差24使用该量化参数447被量化且被编码到数据流中。此外,视频解码器420被配置为:对于所述变换457不等于恒等变换的每个变换块84,对针对相应变换块从数据流中解码的残差值24″′执行54所述变换457的逆变换。视频解码器420还被配置为:对于所述量化参数447不等于预定量化参数的每个变换块84,对针对相应变换块从数据流中解码的量化索引24″执行52缩放,以获得残差值24″′。此外,视频解码器420被配置为使用上下文自适应二进制算术解码从数据流14解码50量化索引24″。视频解码器420被配置为支持上下文自适应二进制算术解码的参数化集433。视频解码器420包括参数化确定模块435,参数化确定模块435被配置为:对于视频的图片的每个变换块或对于相应变换块84被细分成的每个子块84a或对于相应变换块84的每个量化索引,从该参数化集433中确定一个参数化437,其中使用所述参数化437对上下文自适应二进制算术解码进行参数化。
图片12′可以被细分为变换块84,如关于图3所解释的。图片12′的解码和重构可以逐变换块地执行,其中可选地,图片12′的一个或多个变换块可以细分为子块(SB)。图片12′的变换块可以随后被解码。预定变换块84可以被认为是图片12′被细分成的变换块之一。
例如,解码器420可以通过使用数据流14中的某些语法元素来执行对所述变换457的确定455,这些语法元素可以以变换块级在数据流14中传输,或者以比变换块大的块为单位(例如,编码块,帧间/帧内预测决策是以编码块为单位做出的)在数据流14中传输,并且可选地,通过使用相应变换块的特性(例如,相应变换块的大小,或相应变换块是否与视频的帧内预测部分或帧间预测部分相关)来执行对变换457的确定455。在示例中,解码器420可以使用在数据流14中用信号通知的语法元素,该语法元素指向图片12′或视频序列。附加地或替代地,解码器420可以使用在数据流14中用信号通知的语法元素,该语法元素指向图片12′的一部分,例如,切片。
类似地,解码器420可以通过使用数据流14中的某些语法元素来执行QP确定445,这些语法元素可以以变换块级在数据流14中传输,或者以比变换块大的块为单位(例如,编码块,帧间/帧内预测决策是以编码块为单位做出的)在数据流14中传输,并且可选地,通过根据用于先前变换块的先前使用的量化参数的预测来执行QP确定445。
在示例中,解码器420可以通过使用可以在数据流14中传输的某些语法元素来执行对所述参数化437的参数化确定435。例如,某些语法元素可以是针对当前考虑的变换块84显式地用信号通知的,或者可以是针对变换块84所属的图片12′、其一部分或视频序列用信号通知的。解码器420可以应用预测来确定某些语法元素中的一个或多个。在示例中,可以隐含地用信号通知某些语法元素中的一个或多个,使得解码器420可以从数据流14的其他信息中推断出某些语法元素中的一个或多个。
例如,恒等变换是一种使残差值24″′保持不变的变换。也就是说,使用恒等变换,由变换54提供的预测残差信号24″″可以对应于残差值24″′。换言之,选择恒等变换可以对应于跳过对残差值24″′的变换。在这种情况下,残差值24″′可以表示空间域中的残差值。在示例中,选择恒等变换作为所述变换457可以对应于TSM。
在示例中,用于变换确定455的一个或多个语法元素可以被隐式地用信号通知。例如,解码器420可以基于图片12′、图片12′的一部分(例如,切片)、当前考虑的变换块84或一个或多个先前解码的变换块的特性,来推断语法元素中的一个或多个。
根据第一替代方案,参数化确定模块435被配置为以如下方式执行对所述参数化437的确定:对于所述变换457等于恒等变换的第一预定变换块,该方式使所述参数化437是第一参数化431;对于所述变换457不等于恒等变换的第二预定变换块,该方式也使所述参数化437是第一参数化431。
因此,参数化集453可以包括第一参数化431。例如,第一参数化431可以对应于RRC。因此,解码器420可以将RRC应用于可以应用TSM的第一预定变换块,以及应用于所述变换457不同于恒等变换(即,变换54没有被跳过)的第二预定变换块。
根据第二替代方案,参数化确定模块435被配置为以根据针对预定变换块84确定的所述量化参数447的方式,执行对针对预定变换块84的所述参数化437的确定435。
根据第三替代方案,参数化确定模块435被配置为以根据数据流14中的一个或多个第一语法元素416的方式执行对针对预定变换块84的所述参数化437的确定,其中一个或多个第一语法元素416与一个或多个第二语法元素418不相交,其中,解码器420被配置为根据一个或多个第二语法元素418,执行对针对预定变换块84的变换457的确定455。
在示例中,一个或多个第一语法元素416包括指示所述参数化437的参数化标志。在示例中,在切片级上指示参数化标志,即,参数化标志指向图片12′的预定变换块84所属的一部分,该部分被称为切片。在其他示例中,参数化标志在变换块级或子块级上被信号通知。在示例中,参数化标志在切片级上指示一个参数化437是第一参数化431(例如,RRC)还是第二参数化(例如,TSRC),例如,sh_ts_residual_coding_disabled_flag=1或0。
例如,一个或多个第二语法元素418包括对所述变换457加以指示的变换标志。例如,变换标志指示所述变换457是否是恒等变换。例如,变换标志被称为变换跳过标志,transform_skip_flag。在示例中,变换标志在变换块上被指示,或者变换标志可以指向预定的变换块84。可以可选地在比特流14中用信号通知一个或多个第二语法元素418。替代地,视频解码器420可以被配置为推断一个或多个第二语法元素418中的一个或多个,例如,考虑到在比特流14中用信号通知的某些语法元素,例如,考虑到一个或多个高级语法元素和/或一个或多个低级语法元素。
在示例中,视频比特流14包括TSRC使能标志(例如,sps_ts_enabled)和预测模式标志(例如,BDPCM标志)。视频解码器420可以根据TSRC使能标志和预测模式标志来推断变换标志,例如,在TSRC使能标志指示TSRC对于当前考虑的视频序列是启用的情况下。
在示例中,第二语法元素包括预测模式标志,例如,BDPCMflag,其指示是否使用帧内预测模式进行预测。附加地或替代地,第二语法元素可以包括intra_bdpcm_luma_flag,其中,根据该语法元素,可以设置或推断预测模式标志。例如,如果变换标志在数据流中不存在,则可以根据预测模式标志推断变换标志。
根据第四替代方案,参数化确定模块435被配置为:根据一个或多个先前解码的量化索引24″来执行对所述参数化437的确定。
参数化确定模块435的第一到第四替代方案可以在对所述参数化437的确定中单独实施。备选地,第一至第四替代方案中的一个或多个可以应用于参数化确定模块435。
图5示出了参数化确定435的操作方案的示例。根据该示例,参数化确定435包括参数化标志评估538,以评估参数化标志516,例如,上述参数化标志,其可以属于一个或多个第一语法元素416。此外,参数化确定435可以包括变换标志评估539,以评估变换标志518,例如,上述变换标志,其可以属于一个或多个第二语法元素418。参数化标志516指示要选择的所述参数化437是否是参数化集433中的预定参数化。预定参数化可以是第一参数化431。在这种情况下,如果参数化标志516指示所述参数化437是预定参数化,则参数化确定435可以确定所述参数化437是第一参数化431。替代地,预定参数化可以是不同的参数化,例如,参数化集433中的第二参数化432。在后者情况下,如果参数化标志516指示所述参数化437不是预定参数化,则参数化确定435可以示例地确定所述参数化437是第一参数化431。例如,参数化集433包括第二参数化432,例如,TSRC。根据该示例,参数化标志516可以指示所述参数化437是否不对应于第二参数化432,并且如果该条件为真,则参数化确定435可以确定所述参数化437是第一参数化431,例如,RRC。变换标志518可以指示所述变换457是否是恒等变换。如果变换标志518指示所述变换457不是恒等变换,则变换标志评估539可以确定所述参数化437是第一参数化431,例如,RRC。
继续图4的描述,并且适用于图5的示例,参数化集433可以可选地包括第二参数化432。在该示例中,参数化确定435可以以如下方式确定所述参数化437:对于所述变换457等于恒等变换的第一预定变换块84,该方式使所述参数化437选自第一参数化431和第二参数化432。
根据另一实施例,视频解码器被配置为:通过检查一个或多个第一语法元素416是否具有第一状态且针对预定变换块84确定的所述变换457是否等于恒等变换,以根据数据流中的一个或多个第一语法元素416的方式来执行对针对预定变换块84的所述参数化437的确定435,其中一个或多个第一语法元素416与一个或多个第二语法元素418不相交,其中解码器被配置为根据一个或多个第二语法元素418,执行对针对预定变换块84的所述变换457的确定455。如果例如sh_ts_residual_coding_disabled_flag的一个或多个第一语法元素416具有第一状态(例如,1),并且针对预定变换块84确定的所述变换457等于恒等变换,则参数化确定435可以确定所述参数化437是第一参数化431,例如,RRC。如果一个或多个第一语法元素416不具有第一状态(例如,sh_ts_residual_coding_disabled_flag=0),并且针对预定变换块确定的所述变换457等于恒等变换,则参数化确定435可以确定所述参数化437是第二参数化432。
例如,参考图5的示例,如果变换标志518指示所述变换457是统一变换(uniformtransform),并且如果参数化标志516指示所述参数化437不是第一参数化431,则参数化确定435可以可选地确定所述参数化437是第二参数化432,例如,TSRC。因此,如果参数化标志516指示所述参数化437是第一参数化431,则参数化435可以独立于所述变换457而选择第一参数化431。
在先前实施例的一些示例中,视频解码器420还被配置为使用上下文自适应二进制算术解码从数据流中解码量化索引24″,以使得每个变换块的量化索引24″的二进制化的上下文编码二进制位的数量被限制为预定数量二进制位,其中对量化索引24″的二进制化的其他二进制位使用等概率旁路模式。可选地,在这些示例中,第二参数化与第一参数化一致在于以下项中的一项或多项:(i)从数据流中解码针对预定块的量化索引的扫描顺序,和(ii)执行对关于所有残差值的量化索引的解码。
根据图4的视频解码器420的另一实施例,视频解码器被配置为:如果针对预定变换块84确定的所述变换457不等于恒等变换,则确定所述参数化437是第一参数化431。例如,图5提供了本实施例的示例。
在本发明的优选实施例中,实施指示RRC或TSRC的使用的高级标志(“一个或多个第一语法元素”的示例),以允许将RRC用于TSM模式和/或将TSRC用于非TSM模式。
在本发明的另一优选实施例中,采用高级语法方案来指示将RRC或TSRC用于当前图片的特定区域。例如,可以通过使用编码单元索引的列表来实现该用法,编码单元索引表示使用替代残差编码方案的编码单元。
在本发明的另一优选实施例中,实施指示RRC或TSRC的使用的低级标志(“一个或多个第一语法元素”的示例),以允许将RRC用于TSM模式和/或将TSRC用于非TSM模式。信令级可以是编码单元、预测单元和/或变换单元。
根据一个实施例,图4的视频解码器420被配置为:通过检查针对预定变换块84确定的所述量化参数447是否与预定量化参数具有预定关系(例如,是否相对于预定量化参数等于或对应于更精细量化精度的QP)并且针对预定变换块确定的所述变换457是否等于恒等变换,以根据针对预定变换块确定的所述量化参数447的方式,来执行对针对预定变换块84的所述参数化437的确定435。如果针对预定变换块确定的所述量化参数447与预定量化参数具有预定关系并且针对预定变换块确定的所述变换457等于恒等变换,则确定所述参数化437是第一参数化。如果针对预定变换块确定的所述量化参数447与预定量化参数不具有预定关系并且针对预定变换块确定的所述变换457等于恒等变换,则确定所述参数化437是第二参数化432。第一参数化431和第二参数化432可以如相应部分中所述来实施。可选地,根据该实施例,视频解码器420被配置为使用上下文自适应二进制算术解码从数据流14中解码50量化索引24″,以使得每个变换块的量化索引24″的二进制化的上下文编码二进制位的数量被限制为预定数量二进制位,其中对量化索引24″的二进制化的其他二进制位使用等概率旁路模式,其中第二参数化432与第一参数化431一致在于以下项中的一项或多项:(i)从数据流中解码针对预定块的量化索引24″的扫描顺序,和(ii)执行对关于所有残差值24″′的量化索引24″的解码。
根据实施例,图4的视频解码器420被配置为:通过检查一个或多个先前解码的量化索引24″是否满足预定条件并且针对预定变换块确定的所述变换457是否等于恒等变换,根据一个或多个先前解码的量化索引24″执行对所述参数化437的确定。如果一个或多个先前解码的量化索引24″满足预定条件并且针对预定变换块确定的所述变换457等于恒等变换,则确定所述参数化437是第一参数化。如果一个或多个先前解码的量化索引24″不满足预定条件并且针对预定变换块确定的所述变换457等于恒等变换,则确定所述参数化437是第二参数化432。第一参数化431和第二参数化432可以如相应部分中所述来实施。可选地,根据该实施例,视频解码器420被配置为使用上下文自适应二进制算术解码从数据流14中解码50量化索引24″,以使得每个变换块的量化索引24″的二进制化的上下文编码二进制位的数量被限制为预定数量二进制位,其中对量化索引24″的二进制化的其他二进制位使用等概率旁路模式,其中第二参数化432与第一参数化431一致在于以下项中的一项或多项:(i)从数据流中解码针对预定块的量化索引24″的扫描顺序,和(ii)执行对关于所有残差值24″′的量化索引24″的解码。
根据另一实施例,视频解码器420被配置为:如果针对预定变换块确定的所述变换457不等于恒等变换,则确定所述参数化437是第三参数化。第三参数化与第一参数化和第二参数化不同在于以下项中的一项或多项:(i)从数据流中解码针对预定块的量化索引24″的扫描顺序;以及(ii)在第三参数化的情况下,从数据流中解码预定残差值位置信息,推断根据扫描顺序位于所述残差值位置信息上游的残差值24″′为零,并执行对关于根据扫描顺序位于所述残差值位置信息下游的残差值24″′的量化索引24″的解码,而在第一参数化和第二参数化的情况下,执行对关于所有残差值24″′的量化索引24″的解码。
例如,在先前实施例或上述实施例中与第四替代方案有关的预定条件是以下项之一:(i)如果一组先前解码的量化索引24″驻留在预定的先前解码部分中(例如,在预定变换块的子块中或在另一变换块中),则该组先前解码的量化索引24″的二进制化的预定上下文自适应编码二进制位都是1;(ii)如果一组先前解码的量化索引24″驻留在预定的先前解码部分中(例如,在预定变换块的子块中或在另一变换块中),则对于该组先前解码的量化索引24″,与根据更少数量的先前解码的残差值24″′相比,根据更多数量的先前解码的残差值24″′来确定针对预定残差值的量化索引的二进制化的Rice码的Rice参数产生更高的压缩率,其中确定Rice参数产生针对预定残差值的旁路编码二进制位;(iii)如果一组先前解码的量化索引24″驻留在预定的先前解码部分中(例如,在预定变换块的子块中或在另一变换块中),则对于该组先前解码的量化索引24″,根据预定变换块的相邻先前解码的残差值24″′比根据用于对预定变换块的残差值24″′的量化值进行去量化的转变状态对其二进制位仅在等概率旁路模式下被解码的预定残差值进行预测产生更高的预测准确率,其中通过使用转变状态来针对当前要被去量化的量化索引选择两个量化器之一,并根据当前要被去量化的量化索引来更新转变状态,使用依赖量化,对预定变换块的残差值24″′的量化值进行去量化。
第一参数化431和第二参数化432的描述
下文中,描述第一参数化431和第二参数化432的示例以及两者之间的差异。
例如,第一参数化431与第二参数化432不同可以在于:从数据流中解码针对预定块84的量化索引24″的扫描顺序。例如,扫描顺序可以关于变换块84中的量化索引24″的相应位置定义量化索引24″的解码顺序。
附加地或替代地,第一参数化431和第二参数化432可以在以下方面有所不同:在第一参数化431的情况下,解码50可以包括从数据流中解码预定残差值位置信息。例如,预定残差值位置信息可以指示最后显著系数(例如,最后显著残差值24″′)的位置。因此,在第一参数化431的情况下,解码器420可以推断根据扫描顺序位于残差值位置信息上游的残差值24″′是零。在这种情况下,可以关于根据扫描顺序位于残差值位置信息下游的残差值24″′,执行对量化索引24″的解码。相反,在第二参数化432的情况下,解码器420可以关于所有残差值24″′执行对量化索引24″的解码。
从数据流14中解码50量化索引24″可以依赖于将量化索引24″编码到数据流14中所使用的二进制化方案。二进制化方案可以包括截断的一元二进制化码和莱斯Rice码中的一种或多种。可以通过一个或多个上下文将其中编码有一个或多个量化索引24″的数据流14的多个二进制位中的一个或多个二进制位编码到数据流14中。
量化索引24″的二进制化可以包括以下项中的一个或多个:显著性标志(例如,sig_flag);可以表示符号的符号标志;一个或多个大于X标志,其表示要解码的量化索引的值是否大于X;以及奇偶校验标志,其表示要解码的量化索引的奇偶性。
根据实施例,视频解码器420被配置为在大于2标志之后的二进制位位置处并在子块内扫描遍次(within sub-block scanning pass)中解码预定变换块84的预定残差值的符号位(例如,指示符号标志),其中该子块内扫描遍次在对大于2标志进行解码的扫描遍次之后。
例如,对量化索引24″的解码50可以在一个或多个扫描遍次中执行。例如,在一个扫描遍次中,可以根据扫描顺序从数据流14中解码对在当前考虑的变换块84内的位置的量化索引24″的贡献。在每个扫描遍次中,可以针对所考虑的量化索引24″从数据流14中解码一个或多个二进制位,以便获得对所考虑的量化索引24″的贡献。例如,可以逐子块地执行扫描遍次。也就是说,对于当前考虑的变换块的每个子块,可以执行一个或多个扫描遍次,以便获得针对相应子块内的位置的量化索引24″。
在示例中,从数据流14中解码50量化索引24″使用上下文自适应二进制算术解码,以使得每个变换块84的量化索引24″的二进制化的上下文编码二进制位的数量被限制为预定数量二进制位,例如,CCB预算,其中对量化索引的二进制化的其他二进制位使用等概率旁路模式。换言之,例如,二进制化的超过预定数量二进制位的其他二进制位可以使用等概率编码到数据流14中。
如前所述,第一参数化431可以是RRC,而第二参数化432可以是TSRC。因此,第一参数化431和第二参数化432可以在RRC和TSRC之间的上述差异方面不同,并且可以在以下方面中的一个或多个方面附加地或替代地不同:
RRC例如相比于TSRC在TSM中针对相机捕获内容提供更高压缩效率的原因是多方面的,并且可以标识出三个方面:
1.大于标志的数量,或指定截断一元二进制化码和Rice码之间转变的第一二进制化界限。
2.用于选择Rice码的Rice参数推导。
3.TSRC中使用的系数预测方案。
例如,第二参数化432可以与第一参数化431不同在于:其量化索引24″的二进制化的二进制位都不属于上下文编码二进制位的残差值24″′的数量。与第二参数化的情况相比,在第一参数化的情况下,这个残差值24″′的数量可能更高。例如,第一参数化431可以使用具有更多数量的大于X标志的不同二进制化,其中X是大于1的整数,这些标志被上下文自适应编码。在其他示例中,第一参数化431可以使用具有更少数量的大于X标志的不同二进制化,其中X是大于1的整数,这些标志被上下文自适应编码。
例如,参考第一参数化431为RRC且第二参数化432为TSRC的情况,这种差异可以如下实现:
当编码更多数量的“大于标志”,或将第一二进制化界限设置为高时,对于高比特率和无损模式CCB预算将很快用尽,使得变换块中的其余样本都使用Rice码进行编码。然而,由于存在大样本值,对显著性标志的编码非常高效,因此,该标志的概率分布非常偏斜。在TSRC中,由于额外的第二编码环路传输“大于标志”,CCB预算比在RRC情况下更早用尽,因此对更少的显著性标志进行编码。另一方面,就压缩比而言,额外的“大于标志”不如显著性标志高效。“大于标志”的数量和操作点之间存在一个最佳的折衷,优化的方法是根据操作点和内容选择适当数量的标志。对于无损情况,TSRC中额外的“大于标志”的最佳数量等于两个。代替根据操作模式或独立于操作模式来将额外的“大于标志”的数量保持固定,替代方案是在变换块内对额外的“大于标志”的数量进行后向自适应决策。例如,在变换块的开始处,额外的“大于标志”的数量等于四个。当对于SB,所有额外的“大于标志”都出现值等于1时,可以减少针对变换块内的下一SB的限制。作为另一替代方案,额外的“大于标志”的数量以固定值开始,例如,该值等于四,并且根据先前的SB和/或变换块,该值被保持或减小。注意,该值在作为编码结构的第一编码单元的编码单元的开始处被重置。最终,额外的“大于标志”的数量可以针对每个样本位置自适应,并且可以在SB、和/或变换块、和/或编码结构的第一编码单元的开始处重置为默认值。
附加地或替代地,第二参数化432与第一参数化431不同在于:与第二参数化的情况相比,在第一参数化的情况下,依赖于更多数量的先前解码的残差值来确定预定残差值的量化索引的二进制化的Rice码的Rice参数,这产生针对预定残差值的旁路编码二进制位。
例如,参考第一参数化431为RRC且第二参数化432为TSRC的情况,对于预定残差值的量化索引的二进制化的Rice码的Rice参数的确定可以如下进行:
RRC中自然内容的Rice参数推导使用五个相邻样本,而TSRC中仅使用两个相邻样本。对于自然内容,相邻样本之间的梯度通常是平滑和渐变的,而屏幕内容则相反。因此,对于屏幕内容而言,仅两个相邻样本就足够了,而考虑五个相邻样本会导致适用于相机捕获内容的平均效果。RRC和TSRC之间从相邻样本值到实际Rice码的映射也不同。对于无损操作模式,RRC Rice映射更适合,而TSRC Rice映射适合于屏幕内容。克服该方面的一个解决方案是使用QP,即,得出QP是否低于或等于针对TSM的限制QP的信息。在后者情况下,可以推断出无损操作模式,并将RRC Rice映射用于TSRC,而在其他情况下,即,在有损模式下,使用TSRC Rice映射。这种方法解决了用于无损的TSRC的低效问题。然而,屏幕内容的无损结果受到该方法的影响。替代地,用于SB的Rice映射表是根据先前的SB导出的,例如,给定解码的样本值,检测RRC映射还是TSRC映射更好,并将更好的映射用于当前SB。可以针对变换块和/或针对形成编码结构的一组编码单元扩展后向自适应方法。
附加地或替代地,第二参数化432与第一参数化431不同在于:在第一参数化的情况下而不在第二参数化的情况下,通过以下操作,来对其二进制位仅以等概率旁路模式被解码的预定残差值24″′进行预测解码:根据针对预定残差值的量化索引的二进制化的Rice码的Rice参数来预测预定残差值。
附加地或替代地,第二参数化432与第一参数化431不同在于:在第一参数化的情况下以等概率旁路模式对预定变换块的预定残差值的符号二进制位进行解码,而在第二参数化的情况下以自适应编码方式对预定变换块的预定残差值的符号二进制位进行解码。
附加地或替代地,第二参数化432与第一参数化431不同在于:与第二参数化的情况相比,在第一参数化的情况下,使用根据更多数量的先前解码的残差值而确定的上下文,对预定变换块的预定残差值的显著性二进制位进行上下文自适应解码,其中显著性二进制位指示预定残差值是否为零。即,例如,与第一参数化431的情况相比,在第二参数化432的情况下显著性二进制位(例如,sig_flag)在上下文编码二进制位序列中的位置是不同的,其中,根据显著性二进制位解码量化索引24″。
附加地或替代地,如上所述,第一参数化431和第二参数化432可以不同在于系数预测方案。例如,在例如TSRC的第二参数化432中,一个或多个先前解码的量化索引24″可以用于预测当前考虑的量化索引24″。例如,左相邻量化索引和上相邻量化索引可以用于确定当前考虑的量化索引24″。
在示例中,系数预测用于两种残差编码方案,但它们的工作方式不同。在RRC中,系数预测适用于完全以旁路模式被编码的样本。根据Rice参数,语义在两个二进制位串之间切换,如下所示。给定当前的TCQ状态,导出一个值,并将该值左移Rice参数,结果值表示Rice码的第一码字,而其对应的二进制位字符串表示等于0的第一值。对于TSRC,系数预测采用评估两个相邻样本的模板,并使用具有较高值的样本作为预测器。虽然RRC方案适用于相机捕获内容,但TSRC方案适用于屏幕内容。与Rice参数推导类似,QP可以用于确定RRC系数预测的使用。替代地,当检测到无损操作模式时,可以比较两个相邻预测器之间的绝对差值,并且当差值小于阈值时禁用系数预测。在预测预定残差值时,也可以实现系数预测的这个示例,其中根据用于对预定变换块的残差值24″′的量化值进行去量化的转变状态,根据预定变换块的相邻的先前解码残差值来预测预定残差值,如下所述。
与Rice参数的模板类似,使用模板针对其他语法元素的上下文建模(例如,RRC中的显著性标志)使用五个相邻样本而不是两个。与上述类似的效果也发生在使用TSM的相机捕获内容中,因此针对TSRC中模板扩展到五个相邻样本有利于压缩效率。请注意,对TSRC中模板扩展到五个相邻样本在压缩效率方面不会损害有损操作模式,只是引入了额外的复杂性。
TSRC中的另一特殊情况是使用上下文模型对符号信息进行编码。它在屏幕内容的压缩效率方面具有优势,但它不适用于使用TSM的相机捕获内容。因此,当仅考虑压缩效率方面时,最好禁用该方案,即,以旁路模式对符号语法元素进行编码。
当采用基于网格的编码时,奇偶校验信息是有用的,基于网格的量化与状态信息一起用于上下文建模。然而,由于在无损操作模式下缺乏量化,因此去除奇偶校验信息是有益的。通过去除奇偶校验信息,其余系数级的分布不会缩小,这允许更有效的Rice参数推导。然而,由于希望RRC和TSRC之间的相似语法,因此,作为备选方案,“大于2”和符号的语法元素被交换在语法表中的位置。它还有一个好处是符号的编码在无损操作模式中至关重要。
在本发明的优选实施例中,TSRC中的额外的“大于标志”的数量取决于操作模式和/或操作点。
在本发明的另一优选实施例中,TSRC中的额外的“大于标志”的数量取决于操作模式和/或操作点。在无损的情况下,额外的“大于标志”的数量等于2,而在有损操作模式中,额外的“大于标志”的数量等于4。
在本发明的另一优选实施例中,额外的“大于标志”的数量对于每个变换块是自适应的。额外的“大于标志”的数量以默认值开始,例如,该值等于4,并且根据先前SB的条件,对于当前SB,保持或减少该数量。
在本发明的另一优选实施例中,额外的“大于标志”的数目对于形成编码结构的一组编码单元是自适应的。额外的“大于标志”的数量以默认值开始,例如,该值等于4,并且根据先前SB和/或变换块的条件,对于当前SB和/或变换块,保持或减少该数量。
在本发明的另一个优选实施例中,额外的“大于标志”的数量对于每个样本位置是自适应的,并且在每个SB的开始处重置为默认值。
在本发明的另一个优选实施例中,额外的“大于标志”的数量对于每个样本位置是自适应的,并且在每个变换块的开始处重置为默认值。
例如,“大于标志”的数量可以取决于预定数量的二进制位,其中每个变换块84或每个SB的量化索引24″的二进制化的上下文编码二进制位的数量可以被限制为预定数量二进制位,这是因为当使用预定数量的二进制位时可以省略额外的“大于标志”的编码。因此,每个样本位置的“大于标志”的数量可以取决于对用于当前考虑的变换块或SB的编码的上下文编码二进制位的使用。
在本发明的另一优选实施例中,额外的“大于标志”的数量对于每个样本位置是自适应的,并且针对编码结构的第一编码单元被重置为默认值。
在本发明的优选实施例中,当操作模式为无损时,即,当QP等于或低于TSM的限制QP时,在没有上下文建模的情况下执行TSRC中的符号语法元素的编码。
在本发明的优选实施例中,用于对使用上下文模型编码的语法元素进行上下文建模的模板是可变的,并且取决于通过TSM和QP识别的操作模式。
在本发明的一个优选实施例中,TSRC Rice映射依赖于QP,并且当QP小于或等于TSM的限制QP时,使用RRC Rice映射,而当QP不是针对TSM的限制QP时使用TSRC Rice映射。
在本发明的另一优选实施例中,TSRC Rice映射依赖于QP,并且当QP小于或等于TSM的限制QP时,执行Rice和TSRC映射之间的后向自适应选择。
在本发明的另一优选实施例中,TSRC Rice映射依赖于QP,并且当QP小于或等于TSM的限制QP时,执行Rice和TSRC映射之间的后向自适应选择。切换级用于每个样本位置,取决于先前的样本位置和/或SB。
在本发明的另一优选实施例中,TSRC Rice映射依赖于QP,并且当QP小于或等于TSM的限制QP时,执行Rice和TSRC映射之间的后向自适应选择。切换级用于每个样本位置,取决于先前的样本位置和/或SB和/或变换块。
在本发明的另一优选实施例中,TSRC Rice映射依赖于QP,并且当QP小于或等于TSM的限制QP时,执行Rice和TSRC映射之间的后向自适应选择。切换级用于每个样本位置,取决于先前的样本位置和/或SB和/或变换块和/或在同一编码结构内的编码单元。
在本发明的优选实施例中,当使用TSM和限制QP时,使用RRC的系数预测方案。
在本发明的另一优选实施例中,当预测器之间的绝对差值低于特定阈值时,额外采用TSRC的系数预测方案。
在本发明的优选实施例中,表示符号信息和“大于2标志”的语法元素的编码位置被交换,导致第一编码环路的TSRC和RRC的语法相同。
确定一个量化参数447
在下文中,描述了对量化参数447的确定445的示例,其可以与任何先前描述的实施例组合,特别是与用于参数化确定435的所述示例和用于第一参数化431和第二参数化432的示例组合。
根据实施例,视频解码器420被配置为:通过检查针对相应变换块确定的变换457是否等于恒等变换,对于视频的图片的每个变换块,从该量化参数集中确定一个量化参数447,其中针对相应变换块的预测残差使用该量化参数447被量化且被编码到数据流中。根据这些实施例,视频解码器420被配置为:通过根据针对先前变换块的先前使用的量化参数进行预测,来确定针对相应变换块的初始量化参数,例如,qP。如果针对相应变换块84确定的变换457等于恒等变换,则视频解码器420被配置为:在初始量化参数对应于比预定量化参数高的量化精度的情况下,将初始量化参数修改为预定量化参数,以获得量化参数447。如果针对相应变换块确定的变换457不等于恒等变换,则视频解码器420被配置为使用初始量化参数作为量化参数447。例如,预定量化参数可以称为QpPrimeTsMin。
图6示出了根据实施例的视频编码器610的框图。视频编码器610被配置为使用预测36和基于变换的残差编码来编码视频。视频编码器610还被配置为支持用于基于变换的残差编码的变换集453,所述变换集包括恒等变换。此外,视频编码器610被配置为对于视频的图片12的每个变换块84,确定655变换集453中的一个变换457,其中,针对相应变换块84的预测残差24根据所述变换457被编码到数据流14中。视频编码器610还被配置为支持用于基于变换的残差编码的量化参数集443,该量化参数集443包括对应于量化步长大小为1的预定量化参数。视频编码器610还被配置为对于视频的图片12的每个变换块84,从该量化参数集443中确定645一个量化参数447,其中针对相应变换块的预测残差使用该量化参数447被量化且被编码到数据流中。视频编码器610还被配置为:对于所述变换457不等于恒等变换的每个变换块84,执行所述变换457以针对相应变换块产生残差值24′并将该残差值24′编码到数据流中。视频编码器610还被配置为:对于所述量化参数447不等于预定量化参数的每个变换块84,在舍入之前对残差值24′进行缩放以针对相应变换块获得量化索引24″并将该量化索引24″编码到数据流中。视频编码器610还被配置为:使用上下文自适应二进制算术编码将量化索引24″编码到数据流中。视频编码器610还被配置为:支持上下文自适应二进制算数编码的参数化集433。视频编码器610还被配置为:对于视频的图片的每个变换块或对于相应变换块被细分成的每个子块或对于相应变换块的每个量化索引,从该参数化集433中确定635一个参数化437,其中使用所述参数化437对上下文自适应二进制算术编码进行参数化。视频编码器被配置为以根据以下替代方案中的一个或多个的方式执行对所述参数化437的确定635:
根据第一替代方案,参数化确定635被配置为以如下方式执行对所述参数化437的确定:对于所述变换457等于恒等变换的第一预定变换块,该方式使所述参数化437是第一参数化;对于所述变换457不等于恒等变换的第二预定变换块,该方式也使所述参数化437是第一参数化431。
根据第二替代方案,参数化确定635被配置为以根据针对预定变换块确定的所述量化参数447的方式,执行对针对预定变换块的所述参数化437的确定。
根据第三替代方案,参数化确定635被配置为以根据数据流14中的一个或多个第一标准的方式执行对针对预定变换块的参数化437的确定,其中一个或多个第一标准与一个或多个第二标准不相交,其中,编码器被配置为根据一个或多个第二标准,执行对针对预定变换块的变换457的确定。替代地,参数化确定635被配置为以根据数据流416中的一个或多个第一语法元素416的方式(即,根据视频编码器610被配置为将其编码到数据流中的一个或多个第一语法元素416)执行对针对预定变换块的所述参数化437的确定,其中一个或多个第一语法元素与一个或多个第二语法元素418不相交,其中,编码器被配置为根据一个或多个第二语法元素418,执行对针对预定变换块的变换457的确定。
根据第四替代方案,参数化确定635被配置为:根据一个或多个先前编码的量化索引24″来执行对所述参数化437的确定。
参数化确定635可以对应于参数化确定435,QP确定645可以对应于QP确定445,并且变换确定655可以对应于变换确定455,其中参数化确定435、QP确定445和变换确定455要从数据流14中检索的信息可以基于对视频的编码由视频编码器610提供给参数化确定635、QP确定645和变换确定655。
编码器620可以在如关于图1的编码器10和图2的解码器20所描述的意义上匹配解码器420。也就是说,编码器将解码器从数据流中解码的任何内容编码到数据流中;编码器以与解码器相同的方式预测任何内容;编码器将语法元素二进制化为二进制位且解码器通过去二进制化从所述二进制位中获取所述语法元素;编码器对残差进行变换并对系数进行量化,而解码器对系数进行去量化并对它们进行重新变换,主要区别在于编码器对某些编码决策和语法元素设置(例如要使用的变换和要使用的量化设置)执行决策。
尽管一些方面已在装置的上下文中被描述为特征,但显然这种描述也可以被视为对方法的对应特征的描述。尽管一些方面已在方法的上下文中被描述为特征,但显然这种描述也可以被视为对涉及装置的功能的对应特征的描述。
可以由(或使用)硬件设备(诸如,微处理器、可编程计算机或电子电路)来执行一些或全部方法步骤。在一些实施例中,可以由这种装置来执行最重要方法步骤中的一个或多个方法步骤。
新颖的编码视频比特流可以存储在数字存储介质上,或者可以在诸如无线传输介质或有线传输介质(例如,互联网)等的传输介质上传输。
根据某些实现要求,本发明的实施例可以用硬件或软件实现,或者至少部分用硬件实现,或至少部分用软件实现。可以使用其上存储有电子可读控制信号的数字存储介质(例如,软盘、DVD、蓝光、CD、ROM、PROM、EPROM、EEPROM或闪存)来执行实现,该电子可读控制信号与可编程计算机系统协作(或者能够与之协作)从而执行相应方法。因此,数字存储介质可以是计算机可读的。
根据本发明的一些实施例包括具有电子可读控制信号的数据载体,其能够与可编程计算机系统协作以便执行本文所述的方法之。
通常,本发明的实施例可以实现为具有程序代码的计算机程序产品,程序代码可操作以在计算机程序产品在计算机上运行时执行方法之一。程序代码可以例如存储在机器可读载体上。
其他实施例包括存储在机器可读载体上的计算机程序,该计算机程序用于执行本文所述的方法之一。
换言之,本发明方法的实施例因此是具有程序代码的计算机程序,该程序代码用于当计算机程序在计算机上运行时执行本文所述的方法之一。
因此,本发明方法的另一实施例是其上记录有计算机程序的数据载体(或者数字存储介质或计算机可读介质),该计算机程序用于执行本文所述的方法之一。数据载体、数字存储介质或记录介质通常是有形的和/或非暂时性的。
因此,本发明方法的另一实施例是表示计算机程序的数据流或信号序列,所述计算机程序用于执行本文所述的方法之一。数据流或信号序列可以例如被配置为经由数据通信连接(例如,经由互联网)传送。
另一实施例包括处理装置,例如,计算机或可编程逻辑器件,所述处理装置被配置为或适于执行本文所述的方法之一。
另一实施例包括其上安装有计算机程序的计算机,该计算机程序用于执行本文所述的方法之一。
根据本发明的另一实施例包括被配置为向接收机(例如,以电子方式或以光学方式)传送计算机程序的装置或系统,该计算机程序用于执行本文所述的方法之一。接收器可以是例如计算机、移动设备、存储设备等。装置或系统可以例如包括用于向接收器传送计算机程序的文件服务器。
在一些实施例中,可编程逻辑器件(例如,现场可编程门阵列)可以用于执行本文所述的方法的功能中的一些或全部。在一些实施例中,现场可编程门阵列可以与微处理器协作以执行本文所述的方法之一。通常,方法优选地由任意硬件装置来执行。
本文描述的装置可以使用硬件装置、或者使用计算机、或者使用硬件装置和计算机的组合来实现。
本文描述的方法可以使用硬件装置、或者使用计算机、或者使用硬件装置和计算机的组合来执行。
在上文的具体实施方式中,可以看出,出于简化本公开的目的,将各种特征一起组合为示例。这种公开方式不应被解释为反映了要求保护的示例需要比每一个权利要求中明确记载的特征更多特征的意图。相反地,如以下权利要求所反映的那样,发明主题具有比单个所公开的实施例的所有特征更少的特征。因此,下述权利要求被并入具体实施方式中,每个权利要求作为单独的实施例独立存在。虽然每个权利要求都可以作为单独的示例独立存在,但应注意,尽管从属权利要求在权利要求中可能涉及与一个或多个其他权利要求的特定组合,但其他示例也可能包括从属权利要求与每个其他从属权利要求的主题的组合或每个特征与其他从属权利要求或独立权利要求的组合。在本文中提出了这样的组合,除非声明特定组合是不涵括的。此外,权利要求旨在包括要求任何其他独立权利要求的特征,即使该权利要求不直接从属于该独立权利要求。
上述实施例对于本公开的原理仅是说明性的。应当理解的是,本文所述的布置和细节的修改和变形对于本领域其他技术人员将是显而易见的。因此,旨在仅由所附专利权利要求的范围来限制而不是由借助对本文的实施例的描述和解释所给出的具体细节来限制。

Claims (25)

1.一种视频解码器(420),被配置为:
使用预测(58)和基于变换的残差解码来重构视频,
支持用于所述基于变换的残差解码的变换集(453),所述变换集(453)包括恒等变换,
对于所述视频的图片(12′)的每个变换块(84),从所述变换集(453)中确定(455)一个变换(457),其中针对相应变换块(84)的预测残差根据所述变换(457)被编码到数据流中(14),
支持用于所述基于变换的残差解码的量化参数集(443),所述量化参数集(443)包括对应于量化步长大小为1的预定量化参数(441),
对于所述视频的图片的每个变换块(84),从所述量化参数集(443)中确定(445)一个量化参数(447),其中针对相应变换块(84)的预测残差(24)使用所述量化参数(447)被量化且被编码到数据流中,
对于所述变换(457)不等于恒等变换的每个变换块(84),对针对相应变换块从数据流中解码的残差值(24″′)执行(54)所述变换(457)的逆变换,
对于所述量化参数(447)不等于所述预定量化参数的每个变换块(84),对针对相应变换块从数据流中解码的量化索引(24″)执行(52)缩放,以获得残差值(24″′),
使用上下文自适应二进制算术解码从数据流(14)中解码(50)量化索引(24″),
支持上下文自适应二进制算术解码的参数化集(433),
对于所述视频的图片的每个变换块(84)或对于相应变换块(84)被细分成的每个子块(84a)或对于相应变换块(84)的每个量化索引(24″),从所述参数化集(433)中确定(435)一个参数化(437),其中使用所述参数化(437)对上下文自适应二进制算术解码进行参数化,
其中,所述视频解码器被配置为:
-以以下方式执行对所述参数化(437)的确定(435):
对于所述变换(457)等于恒等变换的第一预定变换块,使所述参数化(437)是第一参数化(431);以及
对于所述变换(457)不等于恒等变换的第二预定变换块,使所述参数化(437)是所述第一参数化(431);和/或
-以根据针对预定变换块(84)确定的所述量化参数(447)的方式执行对针对所述预定变换块(84)的所述参数化(437)的确定(435);和/或
-以根据所述数据流中的一个或多个第一语法元素(416)的方式执行对针对预定变换块(84)的所述参数化(437)的确定(435),其中所述一个或多个第一语法元素与一个或多个第二语法元素(418)不相交,其中,所述解码器被配置为根据所述一个或多个第二语法元素(418),执行对针对所述预定变换块(84)的所述变换(457)的确定(455);和/或
-根据一个或多个先前解码的量化索引(24″)执行对所述参数化(437)的确定(435)。
2.根据权利要求1所述的视频编码器(420),其中,所述视频解码器被配置为以以下方式执行对所述参数化(437)的确定:
对于所述变换(457)等于恒等变换的第一预定变换块,使所述参数化(437)是第一参数化;以及
对于所述变换(457)不等于恒等变换的第二预定变换块,使所述参数化(437)是所述第一参数化(431)。
3.根据权利要求1所述的视频编码器(420),其中,所述视频解码器被配置为:
以根据针对预定变换块确定的所述量化参数(447)的方式执行对针对所述预定变换块的所述参数化(437)的确定。
4.根据权利要求1所述的视频编码器(420),其中,所述视频解码器被配置为:
以根据所述数据流(14)中的一个或多个第一语法元素(416)的方式执行对针对预定变换块(84)的所述参数化(437)的确定(435),其中所述一个或多个第一语法元素与一个或多个第二语法元素(418)不相交,其中,所述解码器(420)被配置为根据所述一个或多个第二语法元素(418),执行对针对所述预定变换块(84)的所述变换(457)的确定(455)。
5.根据权利要求1所述的视频编码器(420),其中,所述视频解码器被配置为:
根据一个或多个先前解码的量化索引(24″)执行对所述参数化(437)的确定(435)。
6.根据任一前述权利要求所述的解码器(420),其中,所述视频解码器(420)被配置为:
以以下方式执行对所述参数化(437)的确定(435):
对于所述变换(457)等于恒等变换的第一预定变换块(84),使所述参数化(437)选自所述第一参数化(431)和第二参数化(432);以及
其中,所述第二参数化(432)与所述第一参数化(431)不同在于以下项中的一项或多项:
-从数据流中解码针对预定块(84)的量化索引(24″)的扫描顺序,以及
-在所述第一参数化(431)的情况下,从数据流中解码预定残差值位置信息,推断根据扫描顺序位于所述残差值位置信息上游的残差值(24″′)为零,并执行对关于根据扫描顺序位于所述残差值位置信息下游的残差值(24″′)的量化索引(24″)的解码,而在所述第二参数化(432)的情况下,执行对关于所有残差值(24″′)的量化索引(24″)的解码。
7.根据任一前述权利要求所述的解码器(420),其中,所述视频解码器被配置为:
通过以下操作,以根据针对预定变换块确定的所述量化参数(447)的方式执行对针对所述预定变换块(84)的所述参数化(437)的确定(435):
检查针对所述预定变换块(84)确定的所述量化参数(447)是否与所述预定量化参数具有预定关系,以及针对所述预定变换块确定的所述变换(457)是否等于恒等变换;以及
如果针对所述预定变换块确定的所述量化参数(447)与所述预定量化参数具有预定关系并且针对所述预定变换块确定的所述变换(457)等于恒等变换,则确定所述参数化(437)是第一参数化;以及
如果针对所述预定变换块确定的所述量化参数(447)与所述预定量化参数不具有预定关系并且针对所述预定变换块确定的所述变换(457)等于恒等变换,则确定所述参数化(437)是第二参数化(432),
其中,所述第二参数化(432)与所述第一参数化(431)不同在于以下项中的一项或多项:
-从数据流中解码针对预定块的量化索引(24″)的扫描顺序,以及
-在所述第一参数化(431)的情况下,从数据流中解码预定残差值位置信息,推断根据扫描顺序位于所述残差值位置信息上游的残差值(24″′)为零,并执行对关于根据扫描顺序位于所述残差值位置信息下游的残差值(24″′)的量化索引(24″)的解码,而在所述第二参数化(432)的情况下,执行对关于所有残差值(24″′)的量化索引(24″)的解码。
8.根据任一前述权利要求所述的解码器(420),其中,所述视频解码器被配置为:
通过以下操作,以根据所述数据流中的一个或多个第一语法元素(416)的方式执行对针对预定变换块(84)的所述参数化(437)的确定(435),其中所述一个或多个第一语法元素与一个或多个第二语法元素(418)不相交,其中,所述解码器被配置为根据所述一个或多个第二语法元素(418),执行对针对所述预定变换块(84)的所述变换(457)的确定(455):
检查所述一个或多个第一语法元素(416)是否具有第一状态,以及针对所述预定变换块(84)确定的所述变换(457)是否等于恒等变换,以及
如果所述一个或多个第一语法元素(416)具有所述第一状态并且针对所述预定变换块(84)确定的所述变换(457)等于恒等变换,则确定所述参数化(437)是第一参数化(431);以及
如果所述一个或多个第一语法元素(416)不具有所述第一状态并且针对所述预定变换块确定的所述变换(457)等于恒等变换,则确定所述参数化(437)是第二参数化(432),
其中,所述第二参数化(432)与所述第一参数化(431)不同在于以下项中的一项或多项:
-从数据流中解码针对预定块的量化索引(24″)的扫描顺序,以及
-在所述第一参数化(431)的情况下,从数据流中解码预定残差值位置信息,推断根据扫描顺序位于所述残差值位置信息上游的残差值(24″′)为零,并执行对关于根据扫描顺序位于所述残差值位置信息下游的残差值(24″′)的量化索引(24″)的解码,而在所述第二参数化(432)的情况下,执行对关于所有残差值(24″′)的量化索引(24″)的解码。
9.根据任一前述权利要求所述的解码器(420),其中,所述视频解码器被配置为:
通过以下操作,根据一个或多个先前解码的量化索引(24″)执行对所述参数化(437)的确定:
检查所述一个或多个先前解码的量化索引(24″)是否满足预定条件,以及针对所述预定变换块确定的所述变换(457)是否等于恒等变换,以及
如果所述一个或多个先前解码的量化索引(24″)满足所述预定条件并且针对所述预定变换块确定的所述变换(457)等于恒等变换,则确定所述参数化(437)是第一参数化;以及
如果所述一个或多个先前解码的量化索引(24″)不满足所述预定条件并且针对所述预定变换块确定的所述变换(457)等于恒等变换,则确定所述参数化(437)是第二参数化(432),
其中,所述第二参数化(432)与所述第一参数化(431)不同在于以下项中的一项或多项:
-从数据流中解码针对预定块的量化索引(24″)的扫描顺序,以及
-在所述第一参数化(431)的情况下,从数据流中解码预定残差值位置信息,推断根据扫描顺序位于所述残差值位置信息上游的残差值(24″′)为零,并执行对关于根据扫描顺序位于所述残差值位置信息下游的残差值(24″′)的量化索引(24″)的解码,而在所述第二参数化(432)的情况下,执行对关于所有残差值(24″′)的量化索引(24″)的解码。
10.根据权利要求7至9中任一项所述的解码器(420),其中,所述视频解码器被配置为:
如果针对所述预定变换块确定的所述变换(457)不等于恒等变换,则确定所述参数化(437)是所述第一参数化(431)。
11.根据前述权利要求7至10℃任一项所述的解码器(420),所述解码器被配置为在所述第二参数化(432)的情况下:
在大于2标志之后的二进制位位置处并在子块内扫描遍次中解码所述预定变换块的预定残差值的符号位,其中所述子块内扫描遍次在对所述大于2标志进行解码的扫描遍次之后。
12.根据任一前述权利要求所述的解码器(420),其中,所述视频解码器被配置为:
通过以下操作,以根据针对预定变换块确定的所述量化参数(447)的方式执行对针对所述预定变换块的所述参数化(437)的确定:
检查针对所述预定变换块确定的所述量化参数(447)是否与所述预定量化参数具有预定关系,以及针对所述预定变换块确定的所述变换(457)是否等于恒等变换;以及
如果针对所述预定变换块确定的所述量化参数(447)与所述预定量化参数具有预定关系并且针对所述预定变换块确定的所述变换(457)等于恒等变换,则确定所述参数化(437)是第一参数化;以及
如果针对所述预定变换块确定的所述量化参数(447)与所述预定量化参数不具有预定关系并且针对所述预定变换块确定的所述变换(457)等于恒等变换,则确定所述参数化(437)是第二参数化(432),
使用上下文自适应二进制算术解码来从数据流(14)中解码(50)量化索引(24″),以使得每个变换块的量化索引(24″)的二进制化的上下文编码二进制位的数量被限制为预定数量二进制位,其中对量化索引(24″)的二进制化的其他二进制位使用等概率旁路模式,
其中,所述第二参数化(432)与所述第一参数化(431)一致在于以下项中的一项或多项:
-从数据流中解码针对预定块的量化索引(24″)的扫描顺序,以及
-执行对关于所有残差值(24″′)的量化索引(24″)的解码,
其中,所述第二参数化(432)与所述第一参数化(431)不同在于以下项中的一项或多项:
-与所述第二参数化(432)的情况相比,在所述第一参数化(431)的情况下其量化索引(24″)的二进制化的二进制位都不属于上下文编码二进制位的残差值(24″′)的数量更多,以及
-与所述第二参数化(432)的情况相比,在所述第一参数化(431)的情况下,依赖于更多数量的先前解码的残差值(24″′)确定预定残差值的量化索引的二进制化的Rice码的Rice参数,这产生针对所述预定残差值的旁路编码二进制位,以及
-在所述第一参数化(431)的情况下而不在所述第二参数化(432)的情况下,通过以下操作来对其二进制位仅在等概率旁路模式下被解码的预定残差值(24″′)进行预测解码:根据针对所述预定残差值的量化索引的二进制化的Rice码的Rice参数对所述预定残差值进行预测,
-在所述第一参数化(431)的情况下以等概率旁路模式对所述预定变换块的预定残差值的符号二进制位进行解码,并且在所述第二参数化(432)的情况下以上下文自适应编码方式对所述符号二进制位进行解码,以及
-与所述第二参数化(432)的情况相比,在所述第一参数化的情况下,使用根据更多数量的先前解码的残差值(24″′)而确定的上下文,对所述预定变换块的预定残差值的显著性二进制位进行上下文自适应解码,其中所述显著性二进制位指示所述预定残差值是否为零。
13.根据任一前述权利要求所述的解码器(420),其中,所述视频解码器被配置为:
通过以下操作,以根据所述数据流中的一个或多个第一语法元素的方式执行对针对预定变换块的所述参数化(437)的确定,其中所述一个或多个第一语法元素与一个或多个第二语法元素不相交,其中,所述解码器被配置为根据所述一个或多个第二语法元素,执行对针对所述预定变换块的所述变换(457)的确定:
检查所述一个或多个第一语法元素(416)是否具有第一状态,以及针对所述预定变换块确定的所述变换(457)是否等于恒等变换,以及
如果所述一个或多个第一语法元素(416)具有所述第一状态并且针对所述预定变换块(84)确定的所述变换(457)等于恒等变换,则确定所述参数化(437)是第一参数化;以及
如果所述一个或多个第一语法元素(416)不具有所述第一状态并且针对所述预定变换块确定的所述变换(457)等于恒等变换,则确定所述参数化(437)是第二参数化(432),
使用上下文自适应二进制算术解码来从数据流中解码量化索引(24″),以使得每个变换块的量化索引(24″)的二进制化的上下文编码二进制位的数量被限制为预定数量二进制位,其中对量化索引(24″)的二进制化的其他二进制位使用等概率旁路模式,
其中,所述第二参数化(432)与所述第一参数化(431)不同在于以下项中的一项或多项:
-与所述第二参数化(432)的情况相比,在所述第一参数化(431)的情况下其量化索引的二进制化的二进制位都不属于上下文编码二进制位的残差值(24″′)的数量更多,以及
-与所述第二参数化(432)的情况相比,在所述第一参数化(431)的情况下,依赖于更多数量的先前解码的残差值(24″′)确定预定残差值(24″′)的量化索引(24″)的二进制化的Rice码的Rice参数,这产生针对所述预定残差值的旁路编码二进制位,以及
-在所述第一参数化(431)的情况下而不在所述第二参数化(432)的情况下,通过以下操作来对其二进制位仅在等概率旁路模式下被解码的预定残差值进行预测解码:根据针对所述预定残差值的量化索引的二进制化的Rice码的Rice参数对所述预定残差值进行预测,
-在所述第一参数化(431)的情况下以等概率旁路模式对所述预定变换块的预定残差值的符号二进制位进行解码,并且在所述第二参数化(432)的情况下以上下文自适应编码方式对所述符号二进制位进行解码,以及
-与所述第二参数化(432)的情况相比,在所述第一参数化(431)的情况下,使用根据更多数量的先前解码的残差值(24″′)而确定的上下文,对所述预定变换块的预定残差值的显著性二进制位进行上下文自适应解码,其中所述显著性二进制位指示所述预定残差值是否为零。
14.根据任一前述权利要求所述的解码器(420),其中,所述视频解码器被配置为:
通过以下操作,根据一个或多个先前解码的量化索引(24″)执行对所述参数化(437)的确定:
检查所述一个或多个先前解码的量化索引(24″)是否满足预定条件,以及针对所述预定变换块确定的所述变换(457)是否等于恒等变换,以及
如果所述一个或多个先前解码的量化索引(24″)满足所述预定条件并且针对所述预定变换块确定的所述变换(457)等于恒等变换,则确定所述参数化(437)是第一参数化;以及
如果所述一个或多个先前解码的量化索引(24″)不满足所述预定条件并且针对所述预定变换块确定的所述变换(457)等于恒等变换,则确定所述参数化(437)是第二参数化(432),使用上下文自适应二进制算术解码来从数据流中解码量化索引(24″),以使得每个变换块的量化索引(24″)的二进制化的上下文编码二进制位的数量被限制为预定数量二进制位,其中对量化索引(24″)的二进制化的其他二进制位使用等概率旁路模式,
其中,所述第二参数化(432)与所述第一参数化(431)一致在于以下项中的一项或多项:
-从数据流中解码针对预定块的量化索引(24″)的扫描顺序,以及
-执行对关于所有残差值(24″′)的量化索引(24″)的解码,
其中,所述第二参数化(432)与所述第一参数化(431)不同在于以下项中的一项或多项:
-与所述第二参数化(432)的情况相比,在所述第一参数化(431)的情况下其量化索引的二进制化的二进制位都不属于上下文编码二进制位的残差值(24″′)的数量更多,以及
-与所述第二参数化(432)的情况相比,在所述第一参数化(431)的情况下,依赖于更多数量的先前解码的残差值(24″′)确定预定残差值的量化索引的二进制化的Rice码的Rice参数,这产生针对所述预定残差值的旁路编码二进制位,以及
-在所述第一参数化(431)的情况下而不在所述第二参数化(432)的情况下,通过以下操作来对其二进制位仅在等概率旁路模式下被解码的预定残差值进行预测解码:根据针对所述预定残差值的量化索引的二进制化的Rice码的Rice参数对所述预定残差值进行预测,
-在所述第一参数化(431)的情况下而不在所述第二参数化(432)的情况下,通过以下操作来对其至少一个二进制位被上下文自适应解码的预定残差值进行预测解码:根据一个或多个先前解码的残差值(24″′′)对所述预定残差值进行预测,以及
-在所述第一参数化(431)的情况下以等概率旁路模式对所述预定变换块的预定残差值的符号二进制位进行解码,而在所述第二参数化(432)的情况下以上下文自适应编码方式对所述符号二进制位进行解码,以及
-与所述第二参数化(432)的情况相比,在所述第一参数化的情况下,使用根据更多数量的先前解码的残差值(24″′)而确定的上下文,对所述预定变换块的预定残差值的显著性二进制位进行上下文自适应解码,其中所述显著性二进制位指示所述预定残差值是否为零。
15.根据权利要求12至14中任一项所述的解码器(420),其中,所述视频解码器被配置为:
如果针对所述预定变换块确定的所述变换(457)不等于恒等变换,则确定所述参数化(437)是第三参数化,
其中,所述第三参数化与所述第一参数化和所述第二参数化不同在于以下项中的一项或多项:
-从数据流中解码针对预定块的量化索引(24″)的扫描顺序,以及
-在所述第三参数化的情况下,从数据流中解码预定残差值位置信息,推断根据扫描顺序位于所述残差值位置信息上游的残差值(24″′)为零,并执行对关于根据扫描顺序位于所述残差值位置信息下游的残差值(24″′)的量化索引(24″)的解码,而在所述第一参数化和所述第二参数化的情况下,执行对关于所有残差值(24″′)的量化索引(24″)的解码。
16.根据权利要求9或权利要求15中任一项所述的解码器(420),其中,所述预定条件是以下项之一:
-如果一组先前解码的量化索引(24″)驻留在预定的先前解码部分中,例如,在所述预定变换块的子块中或在另一变换块中,则该组先前解码的量化索引(24″)的二进制化的预定上下文自适应编码二进制位都是1;
-如果一组先前解码的量化索引(24″)驻留在预定的先前解码部分中,例如,在所述预定变换块的子块中或在另一变换块中,则对于该组先前解码的量化索引(24″),与根据更少数量的先前解码的残差值(24″′)相比,根据更多数量的先前解码的残差值(24″′)来确定针对预定残差值的量化索引的二进制化的Rice码的Rice参数产生更高压缩率,其中确定Rice参数产生针对所述预定残差值的旁路编码二进制位;
-如果一组先前解码的量化索引(24″)驻留在预定的先前解码部分中,例如,在所述预定变换块的子块中或在另一变换块中,则对于该组先前解码的量化索引(24″),根据所述预定变换块的相邻先前解码的残差值(24″′)比根据用于对所述预定变换块的残差值(24″′)的量化值进行去量化的转变状态对其二进制位仅在等概率旁路模式下被解码的预定残差值进行预测产生更高的预测准确率,其中通过使用所述转变状态来针对当前要被去量化的量化索引选择两个量化器之一,并根据当前要被去量化的量化索引来更新所述转变状态,使用依赖量化,对所述预定变换块的残差值(24″′)的量化值进行去量化。
17.根据任一前述权利要求所述的解码器(420),其中,所述解码器被配置为:
通过以下操作,对于所述视频的图片的每个变换块,从所述量化参数集中确定一个量化参数(447),其中针对相应变换块的预测残差使用所述量化参数(447)被量化且被编码到数据流中:
检查针对相应变换块确定的所述变换(457)是否等于恒等变换;以及
确定针对相应变换块的初始量化参数,
如果针对相应变换块确定的所述变换(457)等于恒等变换,
在所述初始量化参数与所述预定量化参数相比对应于更高量化精度的情况下,将所述初始量化参数修改为所述预定量化参数,以获得所述量化参数(447),以及
如果针对相应变换块确定的所述变换(457)不等于恒等变换,
使用所述初始量化参数作为所述量化参数(447)。
18.根据权利要求15所述的解码器(420),其中,解码器被配置为在所述第一参数化和所述第二参数化的情况下,
在大于2标志之后的二进制位位置处并在子块内扫描遍次中解码所述预定变换块的预定残差值的符号位,其中所述子块内扫描遍次在对所述大于2标志进行解码的扫描遍次之后。
19.一种视频编码器(610),被配置为:
使用预测和基于变换的残差编码来对视频进行编码,
支持用于所述基于变换的残差编码的变换集(453),所述变换集包括恒等变换,
对于所述视频的图片的每个变换块(84),从所述变换集中确定(655)一个变换(457),其中针对相应变换块的预测残差根据所述变换(457)被编码到数据流中,
支持用于所述基于变换的残差编码的量化参数集,所述量化参数集包括对应于量化步长大小为1的预定量化参数,
对于所述视频的图片的每个变换块,从所述量化参数集中确定(645)一个量化参数(447),其中针对相应变换块的预测残差使用所述量化参数(447)被量化且被编码到数据流中,
对于所述变换(457)不等于恒等变换的每个变换块,执行所述变换(457),以针对相应变换块产生残差值(24′)并将该残差值(24′)编码到数据流中,
对于所述量化参数(447)不等于所述预定量化参数的每个变换块,在舍入之前对残差值(24′)进行缩放,以针对相应变换块获得量化索引(24″)并将该量化索引(24″)编码到数据流中,
使用上下文自适应二进制算术编码将所述量化索引(24″)编码到数据流中,
支持上下文自适应二进制算术编码的参数化集,
对于所述视频的图片的每个变换块或对于相应变换块被细分成的每个子块或对于相应变换块的每个量化索引,从所述参数化集中确定(635)一个参数化(437),其中使用所述参数化(437)对上下文自适应二进制算术编码进行参数化,
其中,所述视频编码器被配置为:
-以以下方式执行对所述参数化(437)的确定(635):
对于所述变换(457)等于恒等变换的第一预定变换块,使所述参数化(437)是第一参数化;以及
对于所述变换(457)不等于恒等变换的第二预定变换块,使所述参数化(437)是所述第一参数化(431);和/或
-以根据针对预定变换块确定的所述量化参数(447)的方式执行对针对所述预定变换块的所述参数化(437)的确定(635);
和/或
-以根据所述数据流中的一个或多个第一语法元素的方式执行对针对预定变换块的所述参数化(437)的确定(635),其中所述一个或多个第一语法元素与一个或多个第二语法元素不相交,其中,所述编码器被配置为根据所述一个或多个第二语法元素,执行对针对所述预定变换块的所述变换(457)的确定;
和/或
-根据一个或多个先前编码的量化索引(24″)执行对所述参数化(437)的确定(635)。
20.根据权利要求19所述的编码器(610),适配于根据权利要求2至18中任一项所述的解码器(420)。
21.一种方法,由根据权利要求1至18中任一项所述的解码器和根据权利要求19或20中任一项所述的编码器执行。
22.一种用于对视频进行解码的方法,包括:
使用预测和基于变换的残差解码来重构视频,
支持用于所述基于变换的残差解码的变换集,所述变换集包括恒等变换,
对于所述视频的图片的每个变换块,从所述变换集中确定一个变换(457),其中针对相应变换块的预测残差根据所述变换(457)被编码到数据流中,
支持用于所述基于变换的残差解码的量化参数集,所述量化参数集包括对应于量化步长大小为1的预定量化参数,
对于所述视频的图片的每个变换块,从所述量化参数集中确定一个量化参数(447),其中针对相应变换块的预测残差使用所述量化参数(447)被量化且被编码到数据流中,
对于所述变换(457)不等于恒等变换的每个变换块,对针对相应变换块从数据流中解码的残差值(24″′)执行所述变换(457)的逆变换,
对于所述量化参数(447)不等于所述预定量化参数的每个变换块,对针对相应变换块从数据流中解码的量化索引(24″)执行缩放,以获得残差值(24″′),
使用上下文自适应二进制算术解码从数据流中解码量化索引(24″),
支持上下文自适应二进制算术解码的参数化集,
对于所述视频的图片的每个变换块或对于相应变换块被细分成的每个子块或对于相应变换块的每个量化索引,从所述参数化集中确定一个参数化(437),其中使用所述参数化(437)对上下文自适应二进制算术解码进行参数化,
其中,所述视频解码器被配置为:
-以以下方式执行对所述参数化(437)的确定:
对于所述变换(457)等于恒等变换的第一预定变换块,使所述参数化(437)是第一参数化;以及
对于所述变换(457)不等于恒等变换的第二预定变换块,使所述参数化(437)是所述第一参数化(431);和/或
-以根据针对预定变换块确定的所述量化参数(447)的方式执行对针对所述预定变换块的所述参数化(437)的确定;和/或
-以根据所述数据流中的一个或多个第一语法元素的方式执行对针对预定变换块的所述参数化(437)的确定,其中所述一个或多个第一语法元素与一个或多个第二语法元素不相交,其中,所述解码器被配置为根据所述一个或多个第二语法元素,执行对针对所述预定变换块的所述变换(457)的确定;和/或
-根据一个或多个先前解码的量化索引(24″)执行对所述参数化(437)的确定。
23.一种用于对视频进行编码的方法,包括:
使用预测和基于变换的残差编码来对视频进行编码,
支持用于所述基于变换的残差编码的变换集,所述变换集包括恒等变换,
对于所述视频的图片的每个变换块,从所述变换集中确定一个变换(457),其中针对相应变换块的预测残差根据所述变换(457)被编码到数据流中,
支持用于所述基于变换的残差编码的量化参数集,所述量化参数集包括对应于量化步长大小为1的预定量化参数,
对于所述视频的图片的每个变换块,从所述量化参数集中确定一个量化参数(447),其中针对相应变换块的预测残差使用所述量化参数(447)被量化且被编码到数据流中,
对于所述变换(457)不等于恒等变换的每个变换块,执行所述变换(457),以针对相应变换块产生残差值(24″′)并将该残差值(24″′)编码到数据流中,
对于所述量化参数(447)不等于所述预定量化参数的每个变换块,在舍入之前对残差值(24″′)进行缩放,以针对相应变换块获得量化索引(24″)并将该量化索引(24″)编码到数据流中,
使用上下文自适应二进制算术编码将所述量化索引(24″)编码到数据流中,
支持上下文自适应二进制算术编码的参数化集,
对于所述视频的图片的每个变换块或对于相应变换块被细分成的每个子块或对于相应变换块的每个量化索引,从所述参数化集中确定一个参数化(437),其中使用所述参数化(437)对上下文自适应二进制算术编码进行参数化,
其中,所述视频编码器被配置为:
-以以下方式执行对所述参数化(437)的确定:
对于所述变换(457)等于恒等变换的第一预定变换块,使所述参数化(437)是第一参数化;以及
对于所述变换(457)不等于恒等变换的第二预定变换块,使所述参数化(437)是所述第一参数化(431);和/或
-以根据针对预定变换块确定的所述量化参数(447)的方式执行对针对所述预定变换块的所述参数化(437)的确定;和/或
-以根据所述数据流中的一个或多个第一语法元素的方式执行对针对预定变换块的所述参数化(437)的确定,其中所述一个或多个第一语法元素与一个或多个第二语法元素不相交,其中,所述编码器被配置为根据所述一个或多个第二语法元素,执行对针对所述预定变换块的所述变换(457)的确定;和/或
-根据一个或多个先前编码的量化索引(24″)执行对所述参数化(437)的确定。
24.一种数据流,通过根据权利要求19或20的编码器执行的编码方法而编码或通过根据权利要求23的方法而编码。
25.一种计算机程序,用于当在计算机或信号处理器上执行时实现根据权利要求21至23所述的方法中的任一方法。
CN202080094666.1A 2019-12-30 2020-12-29 确定上下文自适应二进制算术编码的参数化 Pending CN115039408A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
EP19220126.7 2019-12-30
EP19220126 2019-12-30
PCT/EP2020/088001 WO2021136789A1 (en) 2019-12-30 2020-12-29 Determining a parametrization for context-adaptive binary arithmetic coding

Publications (1)

Publication Number Publication Date
CN115039408A true CN115039408A (zh) 2022-09-09

Family

ID=69147439

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202080094666.1A Pending CN115039408A (zh) 2019-12-30 2020-12-29 确定上下文自适应二进制算术编码的参数化

Country Status (5)

Country Link
US (1) US20230044030A1 (zh)
EP (1) EP4085638A1 (zh)
CN (1) CN115039408A (zh)
TW (1) TWI789668B (zh)
WO (1) WO2021136789A1 (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7323719B2 (ja) * 2020-02-05 2023-08-08 エルジー エレクトロニクス インコーポレイティド 残差コーディングに関する画像デコード方法およびその装置
WO2021172913A1 (ko) * 2020-02-25 2021-09-02 엘지전자 주식회사 영상 코딩 시스템에서 레지듀얼 코딩에 대한 영상 디코딩 방법 및 그 장치
US11849133B2 (en) * 2020-12-10 2023-12-19 Qualcomm Incorporated Low complexity history usage for rice parameter derivation for high bit-depth video coding
WO2023191261A1 (ko) * 2022-03-30 2023-10-05 엘지전자 주식회사 영상 코딩 시스템에서 레지듀얼 정보를 코딩하는 방법 및 장치

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11973983B2 (en) * 2019-10-11 2024-04-30 Qualcomm Incorporated Signaling coding scheme for residual values in transform skip for video coding

Also Published As

Publication number Publication date
WO2021136789A1 (en) 2021-07-08
EP4085638A1 (en) 2022-11-09
US20230044030A1 (en) 2023-02-09
TWI789668B (zh) 2023-01-11
TW202131681A (zh) 2021-08-16

Similar Documents

Publication Publication Date Title
KR102543505B1 (ko) 종속 양자화
US9462275B2 (en) Residual quad tree (RQT) coding for video coding
US9667994B2 (en) Intra-coding for 4:2:2 sample format in video coding
JP6553090B2 (ja) パレットベースのビデオコーディングにおけるコーディングのラン
US10277915B2 (en) Signaling quantization matrices for video coding
JP5847958B2 (ja) コンテキスト適応型バイナリ算術コード化のためのコンテキスト削減
US9386305B2 (en) Largest coding unit (LCU) or partition-based syntax for adaptive loop filter and sample adaptive offset in video coding
US20130272412A1 (en) Common motion information candidate list construction process
TWI789668B (zh) 脈絡適應性二進制算術寫碼用參數化體系決定技術
US20130272423A1 (en) Transform coefficient coding
US20130101033A1 (en) Coding non-symmetric distributions of data
JP2018520562A (ja) 最後のパレットインデックスのグループ化、およびパレットサイズとラン値とを使用するインデックスコーディング
KR102626260B1 (ko) 잔차 및 계수 코딩 방법 및 장치
JP2015508617A (ja) 映像の符号化における係数の符号化
JP2017513311A (ja) 残差差分パルス符号変調のための量子化プロセス
JP7369191B2 (ja) しきい値とライスパラメータとを使用した係数復号のための正規コード化ビン低減
KR20210107118A (ko) 통합된 변환 타입 시그널링 및 변환 타입 종속 변환 계수 레벨 코딩
JP2022516132A (ja) 係数レベルのためのエスケープコーディング
US20220210418A1 (en) Multiple stage residual coding in modern hybrid image and video coding solutions
CN116016915B (zh) 变换与系数信令的方法和装置
CN114556932B (zh) 用于视频编解码的无损编解码模式
JP2021093574A (ja) 符号化装置、復号装置、及びプログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 40072849

Country of ref document: HK

SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination