CN113875240A - 使用自适应参数集的视频译码方法和设备 - Google Patents

使用自适应参数集的视频译码方法和设备 Download PDF

Info

Publication number
CN113875240A
CN113875240A CN202080038371.2A CN202080038371A CN113875240A CN 113875240 A CN113875240 A CN 113875240A CN 202080038371 A CN202080038371 A CN 202080038371A CN 113875240 A CN113875240 A CN 113875240A
Authority
CN
China
Prior art keywords
prediction
parameter set
aps
quantization
block
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202080038371.2A
Other languages
English (en)
Inventor
安镕照
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
DigitalInsights Inc
Original Assignee
DigitalInsights Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by DigitalInsights Inc filed Critical DigitalInsights Inc
Publication of CN113875240A publication Critical patent/CN113875240A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124—Quantisation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124—Quantisation
    • H04N19/126—Details of normalisation or weighting functions, e.g. normalisation matrices or variable uniform quantisers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117—Filters, e.g. for pre-processing or post-processing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/119—Adaptive subdivision aspects, e.g. subdivision of a picture into rectangular or non-rectangular coding blocks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/132—Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/18—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a set of transform coefficients
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/188—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a video data packet, e.g. a network abstraction layer [NAL] unit
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • H04N19/82—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/88—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving rearrangement of data among different coding units, e.g. shuffling, interleaving, scrambling or permutation of pixel data or permutation of transform coefficient data among different blocks

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

根据本公开内容的视频解码方法和设备可以获得当前块的变换系数、基于自适应参数集的量化相关参数对变换系数执行逆量化以获得经逆量化的变换系数以及基于经逆量化的变换系数来重建当前块的残差块。

Description

使用自适应参数集的视频译码方法和设备
技术领域
本公开内容涉及视频编码/解码方法和设备。
背景技术
随着近来对高分辨率和高清晰度视频的需求增加，已经出现了针对用于下一代视频服务的高效视频压缩技术的需求。基于该需求，自2015年10月起，联合对H.264/AVC和HEVC视频压缩标准进行标准化的ISO/IEC MPEG和ITU-T VCEG组建了JVET(Joint VideoExploration Team，联合视频探索小组)并进行了研究和探索以建立新的视频压缩标准。2018年4月，随着对新的视频压缩标准CfP(Call for Proposal，提案征集)的响应的评估，开始了新的视频压缩标准化。
在视频压缩技术中，块划分结构是指执行编码和解码的单元以及对其应用主要编码和解码技术诸如预测和变换的单元。随着视频压缩技术的发展，用于编码和解码的块的大小逐渐增加，并且支持更多的各种划分类型作为块划分类型。另外，不仅使用用于编码和解码的单元而且使用根据块的作用而被细分的单元来执行视频压缩。
在HEVC标准中，使用根据四叉树型块划分结构细分的单元块以及用于进行预测和变换的作用来执行视频编码和解码。除了四叉树型块划分结构之外，还提出了各种类型的块划分结构，例如组合了四叉树和二叉树的形式的QTBT(Quad Tree plus Binary Tree，四叉树加二叉树)以及组合了三叉树的MTT(Multi-Type Tree，多类型树)，以提高视频译码效率。通过对各种块大小和各种类型的块划分结构的支持，将一个图片分成多个块，并且以各种方式来表达以译码单元为单位的信息例如译码模式、运动信息以及与每个块对应的帧内预测方向信息，因此，表达这样的信息的比特的数目显著增加。
发明内容
技术问题
本公开内容的目的在于提高视频信号的译码效率。
本公开内容的目的在于提供用于有效地定义/管理要以图片或切片为单位应用的各种参数的方法和设备。
本公开内容的目的在于提供用于获得量化/逆量化的缩放列表(scaling unit)的方法和设备。
技术解决方案
为了解决上述问题，本发明提供使用自适应参数集的视频译码方法和设备。
根据本公开内容的视频解码方法和设备可以通过对比特流进行解码来获得当前块的变换系数，通过基于比特流中包括的量化相关参数对所获得的变换系数执行逆量化来获得经逆量化的变换系数，以及基于经逆量化的变换系数来重建当前块的残差块。此处，可以从比特流的自适应参数集(adaptation parameter set，APS)获得量化相关参数。
在根据本公开内容的视频解码方法和设备中，获得经逆量化的变换系数包括：基于量化相关参数获得逆量化的缩放列表，基于缩放列表和预定权重得出缩放因子，以及将所得出的缩放因子应用于变换系数。
在根据本公开内容的视频解码方法和设备中，量化相关参数可以包括复制模式标志、预测模式标志、增量标识符或差异系数信息中的至少一者。
在根据本公开内容的视频解码方法和设备中，可以从解码设备中预先定义的权重候选列表获得权重。
在根据本公开内容的视频解码方法和设备中，在解码设备中预先定义的权重候选列表的数量为二或大于二，并且可以基于当前块的编码参数选择性地使用权重候选列表之一。
在根据本公开内容的视频解码方法和设备中，自适应参数集是包括要在预定图像单元中使用的参数集的语法结构，并且该参数集包括自适应环路滤波器(ALF)相关参数、整形器的映射模型相关参数(luma mapping with chroma scaling，亮度映射与色度缩放)或量化相关参数中的至少一个。
在根据本公开内容的视频解码方法和设备中，自适应参数集还可以包括自适应参数集的标识符或自适应参数集类型信息中的至少之一。
在根据本公开内容的视频解码方法和设备中，将相同的标识符分配给不同的自适应参数集类型，并且可以针对每种自适应参数集类型使用不同的列表来管理自适应参数集。
根据本公开内容的视频编码方法和设备可以获得当前块的变换系数，基于预定的量化相关参数对变换系数执行逆量化以获得经逆量化的变换系数，以及基于经逆量化的变换系数来重建当前块的残差块。此处，可以在比特流的自适应参数集(APS)中传输量化相关参数。
一种计算机可读记录介质，存储通过根据本公开内容的视频解码方法解码的比特流，所述视频解码方法包括：对比特流进行解码以获得当前块的变换系数，通过基于所述比特流中包括的量化相关参数对所获得的变换系数执行逆量化来获得经逆量化的变换系数，以及基于经逆量化的变换系数重建当前块的残差块。此处，可以从比特流的自适应参数集(APS)获得量化相关参数。
有益效果
根据本公开内容，可以通过使用自适应参数集来提高视频信号译码效率。
根据本公开内容，可以通过使用自适应参数集来有效地管理针对每种自适应参数集类型(APS类型)的各种参数。
根据本公开内容，可以通过各种模式有效地获得量化/逆量化的缩放列表。
附图说明
图1是示出根据本公开内容的图像编码设备的框图。
图2是示出根据本公开内容的图像解码设备的框图。
图3示出了自适应参数集(APS)的语法表的实施方式。
图4示出了用于传输和解析量化相关参数的语法表的实施方式。
图5示出了用于基于量化相关参数来重建残差块的方法的实施方式。
图6是示出增加了用于权重预测的APS类型的APS语法表的实施方式的图。
图7是示出增加了用于权重预测的APS类型的APS语法表的另一实施方式的图。
图8是示出增加了用于权重预测的APS类型的APS语法表的另一实施方式的图。
图9是示出用于传输和解析用于权重预测的参数的语法表的实施方式的图。
图10是示出增加了用于块划分结构的APS类型的APS语法表的实施方式的图。
图11和图12示出了在当前APS类型是块划分结构的参数的情况下另外用信号通知(signaling)或解析的块结构的参数的语法表的实施方式。
图13是示出用于切片报头的语法表的一部分以示出针对切片报头中的块划分结构的APS信令或解析的实施方式的图。
图14是示出根据APS类型使用不同列表来管理APS的构思的图。
具体实施方式
为了解决上述问题，本发明提供使用自适应参数集的视频译码方法和设备。
根据本公开内容的视频解码方法和设备可以通过对比特流进行解码来获得当前块的变换系数，通过基于比特流中包括的量化相关参数对所获得的变换系数执行逆量化来获得经逆量化的变换系数，以及基于经逆量化的变换系数来重建当前块的残差块。此处，可以从比特流的自适应参数集(APS)获得量化相关参数。
在根据本公开内容的视频解码方法和设备中，获得经逆量化的变换系数包括：基于量化相关参数获得逆量化的缩放列表，基于缩放列表和预定权重得出缩放因子，以及将所得到的缩放因子应用于变换系数。
在根据本公开内容的视频解码方法和设备中，量化相关参数可以包括复制模式标志、预测模式标志、增量标识符或差异系数信息中的至少一者。
在根据本公开内容的视频解码方法和设备中，可以从解码设备中预先定义的权重候选列表获得权重。
在根据本公开内容的视频解码方法和设备中，在解码设备中预先定义的权重候选列表的数量为二或更大，并且可以基于当前块的编码参数选择性地使用权重候选列表之一。
在根据本公开内容的视频解码方法和设备中，自适应参数集是包括要在预定图像单元中使用的参数集的语法结构，并且该参数集包括自适应环路滤波器(ALF)相关参数、整形器的映射模型相关参数(luma mapping with chroma scaling，亮度映射与色度缩放)或量化相关参数中的至少一个。
在根据本公开内容的视频解码方法和设备中，自适应参数集还可以包括自适应参数集的标识符或自适应参数集类型信息中的至少一者。
在根据本公开内容的视频解码方法和设备中，将相同的标识符分配给不同的自适应参数集类型，并且可以针对每种自适应参数集类型使用不同的列表来管理自适应参数集。
根据本公开内容的视频编码方法和设备可以获得当前块的变换系数，基于预定的量化相关参数对变换系数执行逆量化以获得经逆量化的变换系数，以及基于经逆量化的变换系数来重建当前块的残差块。此处，可以在比特流的自适应参数集(APS)中传输量化相关参数。
一种计算机可读记录介质，存储通过根据本公开内容的视频解码方法解码的比特流，所述视频解码方法包括：对比特流进行解码以获得当前块的变换系数，通过基于所述比特流中包括的量化相关参数对所获得的变换系数执行逆量化来获得经逆量化的变换系数，以及基于经逆量化的变换系数重建当前块的残差块。此处，可以从比特流的自适应参数集(APS)获得量化相关参数。
发明的实施模式
在下文中，将参照本说明书中的附图详细描述本公开内容的实施方式，使得本领域普通技术人员可以容易地实现本公开内容。然而，本公开内容可以以各种不同的形式实现，并且不限于本文描述的实施方式。在附图中，为了清楚地描述本公开内容，与描述无关的部分被省略，并且在整个说明书相似的附图标志被附于相似的部分。
贯穿本说明书，当某个部分被描述为与另一部分“连接”时，这不仅包括其直接连接的情况，还包括其与中间的另一元件电连接的情况。另外，在整个说明书中，当某个部分“包括”某个部件时，这意指除非另外说明，否则还可以包括其他部件而不是排除其他部件。
如贯穿本说明书所使用的，术语“(进行)～的步骤”或“～的步骤”并不意指“针对～的步骤”。另外，诸如第一和第二的术语可以用于描述各种元件，但是所述元件不应受这些术语限制。以上术语仅用于将一个部件与另一部件进行区分的目的。
另外，在本公开内容的实施方式中示出的部件被独立地示出以表示不同的特征功能，这并不意指每个部件由单独的硬件或单个软件部件单元组成。也就是说，为了便于描述，通过将每个部件单元列为相应的部件单元来对其进行描述，并且将部件单元中的至少两个进行组合以形成一个部件单元，或者可以将一个部件单元分成为多个部件单元以执行功能。只要这些部件中的每个部件的集成实施方式和单独实施方式不脱离本公开内容的本质，那么这些部件中的每个部件的集成实施方式和单独实施方式也包括在本公开内容的范围内。
在下文中描述的本公开内容的各种实施方式中，术语例如“～单元”、“～组”、“～单元”、“～模块”和“～块”意指处理至少一个功能或操作的单元，并且这些单元可以以硬件或软件或硬件和软件的组合来实现。
另外，译码块(coding block)是指当前对其执行编码和解码的一组目标像素的处理单元，并且可以互换地用作译码块和译码单元。另外，译码单元是指译码单元(codingunit，CU)，并且可以一般地意指包括译码块(coding block，CB)。
另外，四叉树划分是指将一个块划分为四个独立的译码单元，并且二叉树划分是指将一个块划分为两个独立的译码单元。另外，三叉树划分是指以1:2:1的比率将一个块划分为三个独立的译码单元。
图1是示出根据本公开内容的图像编码设备的框图。
参照图1，视频编码设备(100)可以包括：图片划分模块(110)、预测模块(120，125)、变换模块(130)、量化模块(135)、重排模块(160)、熵编码模块(165)、逆量化模块(140)、逆变换模块(145)、滤波器模块(150)和存储器(155)。
图片划分模块(110)可以将输入图片划分为一个或更多个处理单元。在本文中，处理单元可以是预测单元(prediction unit，PU)、变换单元(transform unit，TU)或译码单元(coding unit，CU)。在下文中，在本公开内容的实施方式中，译码单元可以用作执行编码的单元或执行解码的单元。
可以通过将一个译码单元划分为相同大小的至少一个正方形或非正方形来得到预测单元，并且可以对预测单元进行划分成使得在一个译码单元内划分的预测单元中的一个预测单元具有与另一预测单元不同的形状和/或大小。在基于译码单元来生成执行帧内预测的预测单元时不是最小译码单元的情况下，可以在不将译码单元划分为多个预测单元N×N的情况下执行帧内预测。
预测模块(120，125)可以包括执行帧间预测的帧间预测模块(120)和执行帧内预测的帧内预测模块(125)。可以确定针对预测单元执行帧间预测还是帧内预测，并且可以确定根据每种预测方法的详细信息(例如，帧内预测模式、运动矢量、参考图片等)。所生成的预测块与原始块之间的残差值(残差块)可以被输入至变换模块(130)。另外，用于预测的预测模式信息、运动矢量信息等可以通过熵编码模块(165)与残差值一起被编码并且可以被传输至解码器。然而，当应用根据本公开内容的从解码器侧进行的运动信息得出技术时，由于编码器不生成预测模式信息和运动矢量信息，因此相应的信息不被传输至解码器。另一方面，编码器可以用信号通知并传输指示从解码器侧得出运动信息并使用运动信息的信息以及关于用于得出运动信息的技术的信息。
帧间预测模块(120)可以基于当前图片的先前图片或后续图片中的至少一个的信息来对预测单元进行预测，或者在一些情况下可以基于当前图片中的一些编码区域的信息来对预测单元进行预测。作为帧间预测模式，可以使用各种方法，例如合并模式、高级运动矢量预测(AMVP)模式、仿射模式、当前图片参考模式和组合预测模式。在合并模式下，可以将空间/时间合并候选中的至少一个运动矢量设置为当前块的运动矢量，并且可以使用所设置的运动矢量来执行帧间预测。然而，即使在合并模式下，也可以通过将附加运动矢量差值(MVD)与预设运动矢量相加来校正预设运动矢量。在这种情况下，经校正的运动矢量可以用作当前块的最终运动矢量，这将参照图15进行详细描述。仿射模式是将当前块划分为预定子块单元并且使用针对每个子块单元得出的运动矢量执行帧间预测的方法。此处，子块单元用N x M表示，并且N和M可以分别为4、8、16或更大的整数。子块的形状可以是正方形或非正方形。子块单元可以是预先约定给编码设备的固定单元，或者可以通过考虑当前块的大小/形状、分量类型等来可变地确定。当前图片参考模式是使用当前块所属的当前图片中的预重建区域和预定块矢量的帧间预测方法，这将参照图9至图14进行详细描述。在组合预测模式下，针对一个当前块分别通过帧间预测生成第一预测块并通过帧内预测生成第二预测块，并且将预定权重应用于第一预测块和第二预测块以生成当前块的最终预测块。此处，可以使用上述帧间预测模式中的任何一种帧间预测模式来执行帧间预测。可以仅使用在编码设备中预设的帧内预测模式(例如，平面模式、DC模式、竖直/水平模式和对角线模式中的任何一种)来执行帧内预测。可替选地，可以基于与当前块邻近的相邻块(例如，左、上、左上、右上和右下中的至少一个)的帧内预测模式得出用于帧内预测的帧内预测模式。在这种情况下，要使用的相邻块的数目可以固定为一个或两个，或者可以是三个或更多个。即使在所有上述相邻块都可用的情况下，也可以限制仅使用左相邻块或上相邻块之一，或者限制仅使用左相邻块和上相邻块。可以通过考虑前述相邻块是否是以帧内模式编码的块来确定权重。假设将权重w1应用于第一预测块并且将权重w2应用于第二预测块。在这种情况下，当左相邻块/上相邻块两者均是以帧内模式编码的块时，w1可以是小于w2的自然数。例如，w1与w2之比可以是[1:3]。当左相邻块/上相邻块两者均不是以帧内模式编码的块时，w1可以是大于w2的自然数。例如，w1与w2之比可以是[3:1]。当仅左相邻块/上相邻块之一是以帧内模式编码的块时，w1可以被设置成与w2相同。
帧间预测模块(120)可以包括参考图片插值模块、运动预测模块和运动补偿模块。
参考图片插值模块可以从存储器(155)接收参考图片信息，并且可以根据参考图片生成关于整像素或小于整像素的像素信息。在亮度像素的情况下，可以使用具有不同滤波器系数的基于8抽头DCT的插值滤波器以1/4像素为单位生成关于整像素或小于整像素的像素信息。在色度信号的情况下，可以使用具有不同滤波器系数的基于4抽头DCT的插值滤波器以1/8像素为单位生成关于整像素或小于整像素的像素信息。
运动预测模块可以基于由参考图片插值模块插值的参考图片来执行运动预测。作为用于获得运动矢量的方法，可以使用各种方法，例如基于全搜索的块匹配算法(FBMA)、三步搜索(TSS)以及新三步搜索算法(NTS)。运动矢量可以具有基于插值像素的以1/2像素或1/4像素为单位的运动矢量值。运动预测模块可以通过使用各种运动预测方法来对当前预测单元进行预测。
帧内预测模块(125)可以基于与当前块相邻的作为当前图片中的像素信息的参考像素信息来生成预测单元。在当前预测单元的相邻块是已经对其执行了帧间预测的块并且参考像素是已经对其执行了帧间预测的像素的情况下，可以用已经对其执行了帧内预测的相邻块的参考像素信息来替换包括在已经对其执行了帧间预测的块中的参考像素。换言之，当参考像素不可用时，可以用可用参考像素中的至少一个参考像素来替换关于不可用参考像素的信息。
另外，可以生成包括残差信息的残差块，所述残差信息是基于由预测模块(120，125)生成的预测单元已经对其执行了预测的预测单元与该预测单元的原始块之间的差。所生成的残差块可以被输入至变换模块(130)。
变换模块(130)可以使用诸如离散余弦变换(DCT)、离散正弦变换(DST)和KLT的变换方法对包括原始块与由预测模块(120，125)生成的预测单元之间的残差信息的残差块进行变换。可以基于用于生成残差块的预测单元的帧内预测模式信息来确定是否应用DCT、DST或KLT以便对残差块进行变换。
量化模块(135)可以对通过变换模块(130)变换至频域的值进行量化。量化系数可以根据图片的块或重要性而变化。由量化模块(135)计算的值可以被提供至逆量化模块(140)和重排模块(160)。
重排模块(160)可以针对经量化的残差值对系数值进行重排。
重排模块(160)可以通过系数扫描方法将二维块形式的系数改变为一维矢量形式的系数。例如，重排模块(160)可以使用之字形扫描方法从DC系数扫描至高频域中的系数，以将系数改变为一维矢量的形式。取决于变换单元的大小和帧内预测模式，可以使用沿列方向扫描二维块形式的系数的竖直扫描或沿行方向扫描二维块形式的系数的水平扫描来代替之字形扫描。换言之，可以根据变换单元的大小和帧内预测模式来确定使用之字形扫描、竖直扫描和水平扫描中的哪种扫描方法。
熵编码模块(165)可以基于由重排模块(160)计算的值来执行熵编码。熵编码可以使用各种编码方法，例如指数哥伦布、上下文自适应可变长度编码(CAVLC)和上下文自适应二进制算术编码(CABAC)。与此相关，熵编码模块(165)可以对来自重排模块(160)和预测模块(120，125)的译码单元的残差值系数信息进行编码。另外，根据本公开内容，可以用信号通知并传输指示在解码器侧处得出运动信息并使用运动信息的信息以及关于用于得出运动信息的技术的信息。
逆量化模块(140)和逆变换模块(145)可以对由量化模块(135)量化的值进行逆量化，并且对由变换模块(130)变换的值进行逆变换。通过逆量化模块(140)和逆变换模块(145)生成的残差值可以与通过包括在预测模块(120，125)中的运动预测模块、运动补偿模块和帧内预测模块预测的预测单元组合，以生成重建块。
滤波器模块(150)可以包括去块滤波器、偏移校正模块或自适应环路滤波器(ALF)中的至少一个。去块滤波器可以去除由于重建图片中的块之间的边界而出现的块失真。偏移校正模块可以以去块滤波后的图像中的像素为单位来校正相对于原始图像的偏移。为了对特定图片执行偏移校正，可以使用考虑每个像素的边缘信息来应用偏移的方法，或者可以使用将图像中包括的像素划分为预定数目的区域、确定要执行偏移的区域并且将该偏移应用于所确定的区域的方法。可以基于通过将滤波后的重建图像与原始图像进行比较而获得的值来执行自适应环路滤波(ALF)。在将图像中包括的像素划分为预定组之后，可以确定要应用于相应组的一个滤波器，并且可以针对每个组区别地执行滤波。
存储器155可以存储通过滤波器模块150计算的重建块或图片。在执行帧间预测时，可以将所存储的重建块或图片提供至预测模块(120，125)。
图2是示出根据本公开内容的图像解码设备的框图。
参照图2，用于对视频进行解码的设备(200)可以包括：熵解码模块(210)、重排模块(215)、逆量化模块(220)、逆变换模块(225)、预测模块(230，235)、滤波器模块(240)和存储器(245)。
当视频比特流被输入至用于对视频进行解码的设备时，可以根据用于对视频进行编码的设备的逆处理来对所输入的比特流进行解码。
熵解码模块(210)可以根据由视频编码设备的熵编码模块进行的熵编码的逆处理来执行熵解码。例如，对应于由视频编码设备执行的方法，可以应用诸如指数哥伦布、上下文自适应可变长度编码(CAVLC)和上下文自适应二进制算术编码(CABAC)的各种方法。
熵解码模块(210)可以对关于由编码设备执行的帧内预测和帧间预测的信息进行解码。
重排模块(215)可以基于在编码设备中使用的重排方法对由熵解码模块(210)解码的比特流熵执行重排。重排模块可以将一维矢量形式的系数重建并重排为二维块形式的系数。
逆量化模块(220)可以基于从编码设备接收的量化参数和块的重排系数来执行逆量化。
逆变换模块(225)可以对由用于对视频进行编码的设备产生的量化结果执行逆变换，即与由变换模块执行的变换即DCT、DST和KLT对应的逆DCT、逆DST和逆KLT。可以基于由视频编码设备确定的传输单元来执行逆变换。在视频解码设备的逆变换模块(225)中，可以根据多条信息例如预测方法、当前块的大小和预测方向来选择性地执行变换方案(例如，DCT、DST和KLT)。
预测模块(230，235)可以基于从熵解码模块(210)接收的关于预测块生成的信息以及从存储器(245)接收的关于先前解码的块或图片的信息来生成预测块。
如上所述，如果在以与视频编码设备的操作相同的方式执行帧内预测时预测单元的大小和变换单元的大小相同，则可以基于存在于预测单元的左部、左上部和顶部的像素来对预测单元执行帧内预测。然而，如果在执行帧内预测时预测单元的大小和变换单元的大小不同，则可以基于变换单元使用参考像素来执行帧内预测。另外，使用N x N划分的帧内预测可以仅用于最小的译码单元。
预测模块(230，235)可以包括预测单元确定模块、帧间预测模块和帧内预测模块。预测单元确定模块可以从熵解码模块(210)接收诸如预测单元信息、帧内预测方法的预测模式信息以及关于帧间预测方法的运动预测的信息的各种信息，可以将当前译码单元划分为预测单元，并且可以确定对预测单元执行帧间预测还是帧内预测。另一方面，如果编码器(100)不传输与用于帧间预测的运动预测有关的信息，而是传输指示从解码器侧得出运动信息并使用运动信息的信息以及关于用于得出运动信息的技术的信息，则预测单元确定模块基于从编码器(100)传输的信息来确定帧间预测模块(23)的预测性能。
帧间预测模块(230)可以使用对由视频编码设备提供的当前预测单元进行帧间预测所需的信息，基于包括当前预测单元的当前图片的先前图片或后续图片中的至少一者的信息，对当前预测单元执行帧间预测。为了执行帧间预测，可以基于译码单元来确定包括在相应译码单元中的预测单元的帧间预测模式。相对于帧间预测模式，前述合并模式、AMVP模式、仿射模式、当前图片参考模式、组合预测模式等可以同样用于解码设备中，并且因此在本文中将省略其详细描述。帧间预测模块(230)可以以预定优先级确定当前预测单元的帧间预测模式，这将参照图16至图18进行描述。
帧内预测模块(235)可以基于当前图片中的像素信息来生成预测块。在预测单元是经受了帧内预测的预测单元时，可以基于从视频编码设备接收的预测单元的帧内预测模式信息来执行帧内预测。帧内预测模块(235)可以包括自适应帧内平滑(AIS)滤波器、参考像素插值模块和DC滤波器。AIS滤波器对当前块的参考像素执行滤波，并且可以根据当前预测单元的预测模式来确定是否应用滤波器。可以通过使用预测单元的预测模式和从用于对视频进行编码的设备接收的AIS滤波器信息来对当前块的参考像素执行AIS滤波。在当前块的预测模式是不执行AIS滤波的模式时，可以不应用AIS滤波器。
在预测单元的预测模式是基于由参考像素插值的像素值执行帧内预测的预测单元时，参考像素插值模块可以对参考像素进行插值以生成以等于整像素或小于整像素的像素为单位的参考像素。在当前预测单元的预测模式是在不对参考像素进行插值的情况下生成预测块的预测模式时，可以不对参考像素进行插值。在当前块的预测模式是DC模式时，DC滤波器可以通过滤波来生成预测块。
重建的块或图片可以被提供至滤波器模块(240)。滤波器模块(240)可以包括去块滤波器、偏移校正模块和ALF。
视频解码设备的去块滤波器可以从视频编码设备接收关于去块滤波器的信息，并且可以对相应的块执行去块滤波。
偏移校正模块可以基于偏移校正的类型和在执行编码时应用于图像的偏移值信息来对重建图像执行偏移校正。可以基于从编码设备接收的关于是否应用ALF的信息、ALF系数信息等将ALF应用于译码单元。ALF信息可以以被包括在特定参数集中的方式来提供。
存储器(245)可以存储重建图片或块以用作参考图片或块，并且可以将重建图片提供至输出模块。
本公开内容涉及用于在一个参数集中用信号通知可应用于每个图片或切片的各种参数的方法和设备，例如视频译码技术中的自适应环路滤波器、整形器、量化(缩放)和加权预测。
另外，本发明涉及用于在视频解码器中以列表形式管理参数集的方法和设备。
可以使用在编码/解码设备中预先定义的一个参数集来传输要在预定图像单元中应用的参数。图像单元可以是视频序列、图片、切片、图块或砖形块中的至少一种。例如，可以使用一个预先定义的参数集来传输适用于每个图片或切片的参数，例如自适应环路滤波器和整形器。在这种情况下，使用一个参数集，但是可以使用针对参数集的类型的附加信令方法。由于使用一个参数集来用信号通知不同的类型，因此即使参数集的类型不同，也可以共享参数集标识符(ID)或参数集管理列表。在本公开内容中，提出了用于在使用相同的参数集传输各种类型的参数时共享参数集标识符和列表或独立地管理它们的方法和设备。
图3示出了自适应参数集(adaptation parameter set,APS)的语法表的实施方式。
自适应参数集整体地定义/管理针对每种APS类型的参数，并且是用于通过在对应图像单元的报头中仅用信号通知在对应图像单元中使用的参数集的标识符(ID)来使用/管理参数的参数集。也就是说，通过使用自适应参数集，可以省略将应用于上述预定图像单元(例如，一个或更多个图片、一个或更多个切片)的各种参数定义为单独的参数集并以图像为单位用信号通知它们。
例如，应用于一个或更多个图片或一个或更多个切片的各种参数包括自适应环路滤波器(ALF)的滤波器参数、整形器的映射模型相关参数(LMCS：luma mapping withchroma scaling，亮度映射与色度缩放)等。
另外，还可以包括用于加权预测的权重相关参数和用于块结构的参数。可替选地，还可以包括图片(或切片、图块等)划分相关参数、参考图片集或参考结构相关参数、量化相关参数、变换相关参数、其他环路内滤波器相关参数等。稍后将在本公开内容中详细描述量化相关参数及其APS类型、权重相关参数及其APS类型、块结构的参数及其APS类型等。
如图3所示，根据自适应参数集语法表的实施方式，可以用信号通知作为自适应参数集的标识符的adaptation_parameter_set_id(301)。
用信号通知自适应参数集标识符(301)可以意指向通过一个视频流传输的一个或更多个自适应参数集中的每个自适应参数集分配唯一的特定值(编号)。自适应参数集标识符(301)可以意指用于指定在编码/解码设备中预先定义的多个自适应参数集中的任何一个自适应参数集的信息。
在这种情况下，可以将自适应参数集标识符表示为从0到2N-1的值，并且可以使用具有N比特固定长度的比特来传输自适应参数集标识符。在这种情况下，根据本公开内容的实施方式，N可以是2、3、4、5和6之一。在图3中示出的语法表中，示出了N为3的实施方式。
尽管具有不同的自适应参数集类型，自适应参数集标识符(301)可以使用单个数字串，而不依赖于稍后描述的自适应参数集类型(302)。
可替选地，在不同的自适应参数集类型的情况下，可以针对每种自适应参数集类型使用单独的数字串。也就是说，可以依赖于自适应参数集类型(302)来定义自适应参数集标识符(301)。
在一个实施方式中，在使用依赖于自适应参数集类型(302)的自适应参数集标识符(301)的情况下，针对ALF自适应参数集类型的自适应参数集标识符(301)可以具有0至7中的任何一个值。针对LMCS自适应参数集类型的自适应参数集标识符(301)可以具有0至3中的任何一个。针对量化自适应参数集类型的自适应参数集标识符(301)可以具有0至7中的任何一个。在这种情况下，具有不同的自适应参数集类型(302)的参数集可以使用相同的值。在一个实施方式中，可以将相同的值用于ALF的自适应参数集标识符(ALF_APS_ID)和LMCS的自适应参数集标识符(LMCS_APS_ID)。类似地，可以将相同的值用于ALF的自适应参数集标识符(ALF_APS_ID)和量化的自适应参数集标识符(SCALING_APS_ID)。
如图3所示，根据APS语法表的实施方式，可以用信号通知aps_params_type(302)，aps_params_type(302)是关于指定包括在相应APS中的参数的类型的APS类型的信息。
作为APS类型，可以定义指示ALF的参数的ALF APS类型、指示LMCS的参数的LMCSAPS类型等。如上所述，可以另外定义指示量化相关参数的SCALING APS类型。
根据本公开内容的实施方式，包括在相应APS中的参数可以取决于APS类型而不同，并且可以根据APS类型执行针对相应APS类型的附加的参数相关语法解析处理。
如图3所示，在当前APS类型为ALF_APS的情况下，可以通过调用alf_data()(303)来解析ALF相关参数，在当前APS类型为LMCS_APS的情况下，可以调用lmcs_data()(304)来解析LMCS相关参数。如果当前APS类型为SCALING_APS，则可以通过调用scaling_list_data()来解析量化相关参数。
具体地，在当前APS类型为ALF_APS的情况下，可以通过调用alf_data()函数来提取ALF相关参数。可以基于上述标识符(301)执行参数提取。为此，在alf_data()函数中，可以针对每个标识符(310)定义ALF相关参数，并且可以提取与相应标识符(310)对应的ALF相关参数。可替选地，可以在不依赖于以上描述的标识符(301)的情况下执行参数提取。类似地，在当前APS类型为LMCS_APS的情况下，可以通过调用lmcs_data()函数来提取LMCS相关参数。在lmcs_data()函数中，可以针对每个标识符(310)定义LMCS相关参数。在这种情况下，可以提取与标识符(301)对应的LMCS相关参数。可替选地，可以在不依赖于以上描述的标识符(301)的情况下执行参数提取。如果当前APS类型为SCALING_APS，则可以通过调用scaling_list_data()函数来提取量化相关参数。在scaling_list_data()函数中，可以针对每个标识符(310)定义量化相关参数。在这种情况下，可以提取与标识符(301)对应的量化相关参数。可替选地，可以在不依赖于以上描述的标识符(301)的情况下执行参数提取。
另外，可以依赖于标识符(301)来提取ALF相关参数、LMCS相关参数或量化相关参数中的至少一个，并且可以在不依赖标识符(301)的情况下提取其余参数。然而，本公开内容不限于此，并且可以依赖于标识符(301)来提取所有ALF相关参数、LMCS相关参数和量化相关参数，或者可以在不依赖标识符(301)的情况下提取所有ALF相关参数、LMCS相关参数和量化相关参数。
是否依赖于标识符(301)可以根据APS类型选择性地确定。该选择可以预先承诺给编码/解码设备，或者可以基于标识符(301)的值或是否被激活来确定。这可以同等地/类似地适用于稍后描述的各种APS类型。
除此之外，可以定义用于加权预测、块结构等的APS类型。稍后将详细描述其中定义了用于权重预测和块结构的APS类型的APS语法表的实施方式。
图4示出了用于传输和解析量化相关参数的语法表的实施方式。
参照图4，可以用信号通知复制模式标志(scaling_list_copy_mode_flag)。复制模式标志可以指示是否基于复制模式获得缩放列表。例如，当复制模式标志为第一值时，可以使用复制模式，否则可以不使用复制模式。可以基于标识符(id)来解析复制模式标志。此处，标识符(id)是基于当前块的编码参数而得出的信息，稍后将参照图5详细描述。
参照图4，可以用信号通知预测模式标志(scaling_list_pred_mode_flag)。预测模式标志可以指示是否基于预测模式获得缩放列表。例如，当预测模式标志为第一值时，可以使用预测模式，否则可以不使用预测模式。可以基于复制模式标志来解析预测模式标志。也就是说，仅在根据复制模式标志不使用复制模式的情况下，才可以对预测模式标志进行解析。
参照图4，可以用信号通知增量标识符(scaling_list_pred_id_delta)。增量标识符可以是用于指定要用于获得缩放列表的参考缩放列表的信息。仅在根据前述复制模式标志使用复制模式或根据预测模式标志使用预测模式的情况下，可以用信号通知增量标识符。另外，通过进一步考虑上述标识符(id)来用信号通知增量标识符，例如，如图4所示，可以仅在标识符(id)与在解码设备中预先定义的值(0，2，8)不对应的情况下用信号通知增量标识符。换句话说，在当前块的宽度和高度的最大值为4或8、当前块的分量类型为亮度分量以及当前块的预测模式为帧内模式的情况下，可以不用信号通知增量标识符。
参照图4，可以用信号通知差异系数信息(scaling_list_delta_coef)。差异系数信息可以指被编码以指定当前系数与缩放列表的先前系数之间的差的信息。仅在根据复制模式标志不使用复制模式的情况下，可以用信号通知差异系数信息。也就是说，差异系数信息可以用于预测模式和传输模式，这将在稍后描述。
图5示出了用于基于量化相关参数来重建残差块的方法的实施方式。
参照图5，可以对比特流进行解码以获得当前块的变换系数(S500)。
此处，变换系数可以意指通过在编码设备中对残差样本执行变换和量化而获得的系数。可替换地，变换系数可以意指通过跳过对残差样本进行变换而仅执行量化而获得的系数。变换系数可以被不同地表示为系数、残差系数、变换系数级别等。
参照图5，可以对所获得的变换系数执行逆量化以获得经逆量化的变换系数(S510)。
具体地，可以通过将预定缩放因子(在下文中，称为最终缩放因子)应用于变换系数来得出经逆量化的变换系数。此处，可以通过将预定权重应用于初始缩放因子来得出最终缩放因子。
可以基于与当前块的标识符(在下文中，称为第一标识符)对应的缩放列表来确定初始缩放因子。解码设备可以基于当前块的编码参数得出第一标识符。编码参数可以包括预测模式、分量类型、大小、形状、变换类型或是否跳过变换中的至少一种。当前块的大小可以被表示为宽度、高度、宽度和高度的总和、宽度和高度的乘积或者宽度和高度的最大/最小值。例如，可以如表1所示得出第一标识符。
[表1]
Figure BDA0003369781880000171
参照表1，第一标识符可以具有0至27中的任何一个。可以根据当前块的宽度(nTbW)和高度(nTbH)中的最大值、预测模式(predMode)和分量类型(cIdx)来自适应地得出第一标识符。
根据本公开内容的缩放列表具有M x N矩阵的形式，并且M和N可以相同或不同。矩阵的每个分量可以被称为系数或矩阵系数。矩阵的大小可以基于当前块的第一标识符可变地确定。具体地，当第一标识符小于第一阈值大小时，可以确定M和N中的至少一个为2，并且当第一标识符大于或等于第一阈值大小且小于第二阈值大小时，可以确定M和N中的至少一个为4。当第一标识符大于第二阈值大小时，可以确定M和N中的至少一个为8。此处，第一阈值大小可以是2、3、4、5或更大的整数，并且第二阈值大小可以是8、9、10、11或更大的整数。
可以基于量化相关参数得出用于当前块的逆量化的缩放列表。如图4所示，量化相关参数可以包括复制模式标志、预测模式标志、增量标识符或差异系数信息中的至少一者。
可以在自适应参数集(APS)中用信号通知量化相关参数。自适应参数集可以意指包括要应用于图片和/或切片的参数的语法结构。
例如，可以通过比特流用信号通知一个自适应参数集，并且可以通过该比特流用信号通知多个自适应参数集。此处，可以通过自适应参数集标识符(301)来标识多个自适应参数集。每个自适应参数集可以具有不同的自适应参数集标识符(301)。
可以通过多个自适应参数集之中由预定标识符(在下文中，称为第二标识符)指定的自适应参数集用信号通知用于当前块的缩放列表的量化相关参数。第二标识符是被编码以指定多个自适应参数集中的任何一个自适应参数集的信息，并且可以在预定图像单元(图片、切片、图块或砖形块)中被用信号通知。在对应图像单元的报头中用信号通知第二标识符，并且该对应图像单元可以使用从与第二标识符对应的自适应参数集中提取的量化相关参数来获得缩放列表。在下文中，将描述基于量化相关参数获得缩放列表的方法。
1.在复制模式的情况下
在复制模式下，当前块的缩放列表可以被设置为与对应于参考标识符的缩放列表(即参考缩放列表)相同。此处，可以基于当前块的第一标识符和预定增量标识符来得出参考标识符。增量标识符可以是由编码设备编码并用信号通知以标识参考缩放列表的信息。例如，参考标识符可以被设置为当前块的第一标识符与增量标识符之间的差值。
然而，在所得出的参考标识符与第一标识符相同(即，增量标识符的值为0)的情况下，当前块的缩放列表可以被设置为与默认缩放列表相同。默认缩放列表是在解码设备中预先定义的，并且默认缩放列表的每个系数可以具有预定常数值(例如，2、4、8、16)。
可以基于指示是否使用复制模式的复制模式标志来使用复制模式。例如，如果复制模式标志为第一值，则可以使用复制模式，否则，可以不使用复制模式。
2.在预测模式的情况下
在预测模式的情况下，可以基于预测缩放列表和差异缩放列表来确定当前块的缩放列表。此处，可以基于前述参考缩放列表来得出预测缩放列表。也就是说，可以将由当前块的第一标识符和增量标识符指定的参考缩放列表设置为预测缩放列表。然而，如上所述，在所得出的参考标识符与第一标识符相同(即，增量标识符的值为0)的情况下，可以基于默认缩放列表来确定预测缩放列表。
差异缩放列表也具有M x N矩阵的形式，并且可以基于从比特流用信号通知的差异系数信息来得出该矩阵的每个系数。例如，可以用信号通知作为先前系数与当前系数之间的差的差异系数信息，并且可以使用用信号通知的差异系数信息和先前系数来获得当前系数。通过上述处理，可以恢复差异缩放列表的至少一个系数。可以通过将预测缩放列表和差异缩放列表相加来确定当前块的缩放列表。
然而，可以基于指示是否使用预测模式的预测模式标志来使用预测模式。例如，如果预测模式标志为第一值，则可以使用预测模式，否则可以不使用预测模式。
3.在传输模式的情况下
可以基于由编码设备用信号通知的差异系数信息来得出当前块的缩放列表中的至少一个系数。此处，用信号通知的差异系数信息可以用于确定作为先前系数与当前系数之间的差的差异系数。也就是说，可以使用信号通知的差异系数信息和先前系数来得出缩放列表的当前系数，并且可以通过该处理获得当前块的缩放列表。
另外，可以将预定偏移应用于属于所获得的缩放列表的至少一个系数。此处，偏移可以是预先承诺给解码设备的固定常数值(例如，2、4、8、16)。例如，通过将偏移与预先获得的缩放列表的至少一个系数相加，可以获得逆量化的最终缩放列表。
然而，仅在根据复制模式标志和预测模式标志不使用前述复制模式和预测模式的情况下，可以使用传输模式。
同时，可以从解码设备中预先定义的权重候选列表获得前述权重。权重候选列表可以包括一个或更多个权重候选。可以将属于权重候选列表的任何一个权重候选设置为权重。
例如，权重候选列表可以由六个权重候选组成。权重候选列表可以被定义为{40，45，51，57，64，72}或{57，64，72，80，90，102}。然而，本公开内容不限于此，并且权重候选的数量可以是2、3、4、5、7或更大。可替选地，权重候选列表可以包括值小于40的权重候选或值大于102的权重候选。
预先定义的权重候选列表的数量可以是一、或二或更大。在定义了多个权重候选列表的情况下，可以选择性地使用任何一个权重候选列表。在这种情况下，可以通过考虑当前块的编码参数来执行选择。编码参数与以上描述的相同，并且将不再赘述。
例如，假设预先定义的权重候选列表包括{40，45，51，57，64，72}(在下文中称为第一列表)和{57，64，72，80，90，102}(在下文中称为第二列表)。如果当前块是通过变换跳过而编码的块，则可以使用第一列表，否则可以使用第二列表。可替选地，如果当前块的形状是正方形，则可以使用第一列表，否则可以使用第二列表。可替选地，如果当前块是通过变换跳过而编码的块，则使用第一列表。否则，如上所述，可以根据当前块的形状选择性地使用第一列表或第二列表。
参照图5，可以基于经逆量化的变换系数来重建当前块的残差块(S520)。
在不应用变换跳过的情况下，可以通过对经逆量化的变换系数执行逆变换来重建残余块。另一方面，在应用变换跳过的情况下，可以通过将经逆量化的变换系数设置为残差样本来重建残差块。
可以以与编码设备中相同/相似的方式执行残差块的上述重建处理，并且将不再赘述。
图6是示出增加了用于权重预测的APS类型的APS语法表的实施方式的图。
根据本公开内容的实施方式，可以利用APS用信号通知用于权重预测的参数并对其进行解析。另外，可以定义用于传输权重预测的参数的APS类型，并且可以将其映射至从0到2N-1的一个数字。此处，N可以是2、3、4和5之一，并且图6中示出的实施方式对应于N为3的情况。
在对应APS的类型是用于权重预测的参数类型的情况下，可以增加用信号传输或解析用于权重预测的参数的步骤(600)。
在当前APS类型为WP_APS的情况下，可以通过调用pred_weight_table()函数来提取权重预测相关参数。pred_weight_table()函数可以仅定义与单向权重预测相关的参数，或者可以仅定义与双向权重预测相关的参数。可替选地，pred_weight_table()函数可以分别定义与单向权重预测相关的参数和与双向权重预测相关的参数。pred_weight_table()函数可以定义与隐式权重预测相关的参数或与显式权重预测相关的参数中的至少一个。
同时，可以基于上述标识符(301)执行参数提取。为此，在pred_weight_table()函数中，针对每个标识符定义与权重预测相关的参数，并且可以提取与对应于相应标识符(301)的权重预测相关的参数。可替选地，可以在不依赖于以上描述的标识符(301)的情况下执行参数提取。
图7是示出增加了用于权重预测的APS类型的APS语法表的另一实施方式的图。
根据本公开内容的实施方式，可以利用APS用信号通知用于权重预测的参数并对其进行解析。此外，根据权重预测的方向，可以定义用于传输用于单向权重预测的参数的APS类型，并且可以单独定义用于传输用于双向权重预测的参数的APS类型。另外，可以将用于单向权重预测的APS类型和用于双向权重预测的APS类型分别映射至从0到2N-1的一个数字。此处，N可以是2、3、4和5之一，并且图7中示出的实施方式对应于N为3的情况。
在对应APS的类型是用于权重预测的参数类型之一的情况下，可以增加用信号通知或解析用于权重预测的参数的步骤(700或701)。
可以分别定义用于单向权重预测的pred_weight_table()函数和用于双向权重预测的bipred_weight_table()函数。在当前APS类型为WP_APS的情况下，调用pred_weight_table()函数以提取单向权重预测相关参数，而在当前APS类型为WBP_APS的情况下，调用bipred_weight_table()函数以提取双向权重预测相关参数。可以基于上述标识符(301)执行参数提取。为此，pred_weight_table()和bipred_weight_table()可以针对每个标识符定义权重预测相关参数，并且可以提取对应于相应标识符(301)的权重预测相关参数。可替选地，可以在不依赖于以上描述的标识符(301)的情况下执行参数提取。
图8是示出增加了用于权重预测的APS类型的APS语法表的另一实施方式的图。
如图7和图8所示，根据本公开内容的实施方式，可以利用APS用信号通知权用于权重预测的参数并对其进行解析。另外，根据权重预测的方向，可以定义用于传输用于单向权重预测的参数的APS类型，也可以单独定义用于传输用于双向权重预测的参数的APS类型。另外，可以将用于单向权重预测的APS类型和用于双向权重预测的APS类型分别映射至从0到2N-1的一个数字。此处，N可以是2、3、4和5之一，并且图7和图8中示出的实施方式对应于N为3的情况。
在对应APS的类型是用于权重预测的参数类型之一的情况下，可以增加用信号通知或解析用于权重预测的参数的步骤(800或801)。
另外，在图8中，可以通过将用于单向预测或双向预测的APS类型用作权重预测的参数信令或解析步骤中的输入来执行信令或解析步骤。pred_weight_table()函数可以分别定义用于单向权重预测的参数和用于双向权重预测的参数。可以提取对应于前述APS类型(302)的用于权重预测的参数。可替选地，可以从用于单向加权预测的参数得出用于双向加权预测的参数。
另外，可以通过考虑上述标识符(301)来执行参数提取。为此，pred_weight_table()可以针对每个标识符定义权重预测相关参数，并且可以提取对应于相应标识符(301)的权重预测相关参数。可替选地，可以在不依赖于以上描述的标识符(301)的情况下执行参数提取。
图9是示出用于传输和解析用于权重预测的参数的语法表的实施方式的图。
作为示出图8中所示的用信号通知或解析用于权重预测的参数的附加步骤(800和801)的实施方式的图，对应于APS类型的aps_param_type可以用作用信号通知或解析用于权重预测的参数的步骤中的输入。
另外，根据aps_param_type(901)，在aps_param_type意指双向预测的情况下，可以增加用于双向预测的附加加权预测参数信令或解析步骤(920)。
另外，在使用APS执行权重预测时，参考图片的数量(NumRefIdxActive)等可以使用预先定义的固定值或参考预先传输的参考图片结构的参数等。
图10是示出增加了用于块划分结构的APS类型的APS语法表的实施方式的图。
图10是用于示出除图3和图6中示出的APS语法表之外的新的APS类型的实施方式的图。在图10中，可以利用APS用信号通知或解析适用于上述图像单元的块划分结构的参数，并且可以通过针对该块划分结构定义单独的参数类型来用信号通知所述参数。
如上面在关于图3和图6描述本发明的细节中提到的。可以用信号通知aps_params_type(302)，aps_params_type(302)是关于指定包括在APS中的参数的类型的APS类型的信息。
作为APS类型，可以定义指示ALF的参数的ALF APS类型、指示LMCS的参数的LMCSAPS类型等。
除此之外，根据本公开内容的实施方式，可以定义用于传输块划分结构的参数的APS类型，并且可以执行针对该APS类型的参数传输和解析。
另外，根据本公开内容的实施方式，包括在相应APS中的参数可以取决于APS类型而不同，并且可以根据APS类型执行针对相应APS类型的附加的参数相关语法解析处理。
如图10所示，在当前APS类型是传输块划分结构的参数的APS类型的情况下，可以另外执行用信号通知或解析块划分结构的参数的步骤(1001)。
另外，根据本公开内容的实施方式，可以利用APS用信号通知用于权重预测的参数并对其进行解析。另外，可以定义用于传输权重预测的参数的APS类型，并且可以将其映射至从0到2N-1的一个数字。此处，N可以是2、3、4和5之一，并且图10中示出的实施方式对应于N为3的情况。
图11和图12示出了在当前APS类型是块划分结构的参数的情况下另外用信号通知或解析的块结构的参数的语法表的实施方式。
图11示出了语法表的示例，在该语法表中，当满足特定条件时，在一个参数集中用信号通知可应用于图像单元的块划分结构的参数连同亮度树的参数(1110)以及色度树的参数(1120)。
另一方面，图12示出了这样的实施方式，在所述实施方式中，不管是亮度还是色度树，针对slice_log2_diff_min_qt_min_cb、slice_max_mtt_hierarchy_depth和slice_max_mtt_hierachy_depth不为0的情况，通过使用slice_log2_diff_max_bt_min_qt、slice_log2_diff_max_tt_min_qt的语法用信号通知关于一个块划分结构的信息。
在使用图12利用APS来传输块划分结构的情况下，在用信号通知或解析切片报头中的块划分结构等时，可以根据当前切片的类型或是否使用色度分离树(CST)技术中的至少一者来用信号通知或解析用于块划分结构的参数的一个或更多个APS ID。该实施方式在图13中示出。
图13是示出用于切片报头的语法表的一部分以示出针对切片报头中的块划分结构的APS信令或解析的实施方式的图。
如在图12的描述中所描述的，当利用APS来传输块划分结构时，可以根据当前切片的类型或在用信号通知或解析切片报头中的块划分结构时是否使用色度分离树(CST)技术等中的至少一者来用信号通知或解析用于块划分结构的参数的一个或更多个APS ID。
如图13所示，在不应用CST的情况下，即在相同地使用亮度树和色度树的情况下，将与slice_mtt_aps_id(1300)中解析的APS ID对应的块划分结构参数同样适用于亮度树和色度树。
另一方面，在应用CST的情况下，即在不同地使用亮度树和色度树的情况下，将与在slice_mtt_aps_id(1300)中解析的APS ID对应的块划分结构参数应用于亮度树，并且将与在slice_mtt_chroma_aps_id(1310)中解析的APS ID对应的块划分结构参数应用于色度树。
图13示出了在切片报头中传输块分割结构的实施方式，但是即使是在序列参数集(SPS)、图片参数集(PPS)等中用信号通知或解析块划分结构的情况下，也可以像在切片的示例中那样用信号通知或解析块划分结构。
图14是示出根据APS类型使用不同列表来管理APS的构思的图。
如通过图3的详细描述所描述的，在取决于自适应参数集类型(302)的不同自适应参数集类型的情况下，可以通过针对每种自适应参数集类型使用单独的数字串来定义自适应参数集标识符(301)。
在一个实施方式中，在使用依赖于自适应参数集类型(302)的自适应参数集标识符(301)的情况下，针对ALF自适应参数集类型的自适应参数集标识符(301)可以具有0至7中的任何一个值。针对LMCS自适应参数集类型的自适应参数集标识符(301)可以具有0到3中的任何一个值。针对量化自适应参数集类型的自适应参数集标识符(301)可以具有0到7中的任何一个值。在这种情况下，具有不同的自适应参数集类型(302)的参数集可以使用相同的值。在一个实施方式中，可以将相同的值用于ALF的自适应参数集标识符(ALF_APS_ID)和LMCS的自适应参数集标识符(LMCS_APS_ID)。类似地，可以将相同的值用于ALF的自适应参数集标识符(ALF_APS_ID)和量化的自适应参数集标识符(SCALING_APS_ID)。
将相同的APS_ID分配给不同的APS类型，并且可以针对每种APS类型使用不同的列表以用于管理。分配相同的APS_ID意指针对每种APS类型定义的标识符(301)值的间隔可以彼此相同或交叠。也就是说，如上面的示例中那样，ALF_APS_ID和SCALING_APS_ID可以具有0至7中的任何一个，并且LMCS_APS_ID可以具有0至3中的任何一个。在这种情况下，甚至可以将相同的APS_ID分配给不同的APS类型。如图14所示，对于每种APS类型，分别定义/使用针对ALF_APS的列表、针对LMCS_APS的列表、针对SCALING_APS的列表等，并且可以在每个列表中定义一个或更多个具有不同标识符(APS_ID)的自适应参数集。此处，列表可以被解释为意指单独的区域或空间。
可以根据APS类型分配不同的APS_ID，并且可以使用不同的列表来管理自适应参数集。可以针对每种APS类型分配不同的APS_ID并使用一个列表进行管理。可以针对不同的APS类型分配相同的APS_ID，并且可以使用相同的列表来管理具有相同APS_ID的APS类型。
本公开内容的各种实施方式没有按照列出所有可能的组合那样被列出，而是旨在描述本公开内容的代表性方面，并且在各种实施方式中描述的内容可以被独立地应用或者可以以两个或更多个组合的方式被应用。
另外，可以通过硬件、固件、软件或其组合来实现本公开内容的各种实施方式。在通过硬件实现的情况下，可以通过一个或更多个专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理装置(DSPD)、可编程逻辑装置(PLD)、现场可编程门阵列(FPGA)、通用处理器、控制器、微控制器、微处理器等来实现本公开内容的各种实施方式。
本公开内容的范围包括允许在装置或计算机上执行根据各种实施方式的方法的操作的软件或机器可执行指令(例如，操作系统、应用、固件、程序等)，并且包括在装置或计算机上存储和执行所述软件或指令的非暂态计算机可读介质。
工业可用性
本公开内容可以用于对图像信号进行编码/解码。

Claims (10)

1.一种视频解码方法，包括：
通过对比特流进行解码来获得当前块的变换系数；
通过基于所述比特流中包括的量化相关参数对所获得的变换系数执行逆量化来获得经逆量化的变换系数；以及
基于所述经逆量化的变换系数来重建所述当前块的残差块，
其中，能够从所述比特流的自适应参数集(APS)获得所述量化相关参数。
2.根据权利要求1所述的方法，其中，获得所述经逆量化的变换系数包括：
基于所述量化相关参数获得所述逆量化的缩放列表；
基于所述缩放列表和预定权重得出缩放因子；以及
将所得出的缩放因子应用于所述变换系数。
3.根据权利要求2所述的方法，其中，所述量化相关参数能够包括复制模式标志、预测模式标志、增量标识符或差异系数信息中的至少一者。
4.根据权利要求2所述的方法，其中，所述权重是从解码设备中预先定义的权重候选列表中获得的。
5.根据权利要求4所述的方法，其中，在所述解码设备中预先定义的权重候选列表的数量为二或大于二，并且
其中，基于所述当前块的编码参数选择性地使用所述权重候选列表之一。
6.根据权利要求1所述的方法，其中，所述自适应参数集是包括要在预定图像单元中使用的参数集的语法结构，并且
其中，所述参数集包括自适应环路滤波器(ALF)相关参数、整形器的映射模型相关参数(亮度映射与色度缩放)或所述量化相关参数中的至少一者。
7.根据权利要求6所述的方法，其中，所述自适应参数集还包括所述自适应参数集的标识符或自适应参数集类型信息中的至少一者。
8.根据权利要求7所述的方法，其中，将相同的标识符分配给不同的自适应参数集类型，并且
其中，针对每种自适应参数集类型使用不同的列表来管理所述自适应参数集。
9.一种视频编码方法，包括：
获得当前块的变换系数；
基于预定的量化相关参数对所述变换系数执行逆量化以获得经逆量化的变换系数；以及
基于所述经逆量化的变换系数来重建所述当前块的残差块，
其中，所述量化相关参数被包括在比特流的自适应参数集(APS)中并且在所述比特流的自适应参数集(APS)中传输。
10.一种计算机可读记录介质，存储通过视频解码方法解码的比特流，
所述视频解码方法包括：
对所述比特流进行解码以获得当前块的变换系数；
通过基于所述比特流中包括的量化相关参数对所获得的变换系数执行逆量化来获得经逆量化的变换系数；以及
基于所述经逆量化的变换系数来重建所述当前块的残差块，
其中，所述量化相关参数是从所述比特流的自适应参数集(APS)中获得的。
CN202080038371.2A 2019-05-24 2020-05-22 使用自适应参数集的视频译码方法和设备 Pending CN113875240A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
KR20190060975 2019-05-24
KR10-2019-0060975 2019-05-24
PCT/KR2020/006704 WO2020242145A1 (ko) 2019-05-24 2020-05-22 적응적 파라미터 셋을 사용하는 비디오 코딩 방법 및 장치

Publications (1)

Publication Number Publication Date
CN113875240A true CN113875240A (zh) 2021-12-31

Family

ID=73552070

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202080038371.2A Pending CN113875240A (zh) 2019-05-24 2020-05-22 使用自适应参数集的视频译码方法和设备

Country Status (7)

Country Link
US (2) US11190769B2 (zh)
KR (1) KR20220003124A (zh)
CN (1) CN113875240A (zh)
BR (1) BR112021023469A2 (zh)
CA (1) CA3141350A1 (zh)
MX (1) MX2021014277A (zh)
WO (1) WO2020242145A1 (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111602397B (zh) * 2018-01-17 2024-01-23 英迪股份有限公司 使用各种变换技术的视频编码方法和装置
WO2020204419A1 (ko) * 2019-04-03 2020-10-08 엘지전자 주식회사 적응적 루프 필터 기반 비디오 또는 영상 코딩
CN116668699A (zh) 2019-07-05 2023-08-29 Lg电子株式会社 图像编码/解码设备和图像数据的发送方法
CN114365497A (zh) * 2019-07-08 2022-04-15 Lg电子株式会社 基于缩放列表参数的视频或图像编码
JP7303367B2 (ja) * 2019-07-08 2023-07-04 エルジー エレクトロニクス インコーポレイティド スケーリングリストデータのシグナリングに基づくビデオまたは画像コーディング

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013034161A (ja) * 2011-06-28 2013-02-14 Sharp Corp 画像復号装置、画像符号化装置、および符号化データのデータ構造
US9451252B2 (en) * 2012-01-14 2016-09-20 Qualcomm Incorporated Coding parameter sets and NAL unit headers for video coding
KR101418096B1 (ko) * 2012-01-20 2014-07-16 에스케이 텔레콤주식회사 가중치예측을 이용한 영상 부호화/복호화 방법 및 장치
US9521410B2 (en) * 2012-04-26 2016-12-13 Qualcomm Incorporated Quantization parameter (QP) coding in video coding
CN111149359B (zh) * 2017-09-20 2023-11-17 韩国电子通信研究院 用于对图像进行编码/解码的方法和装置以及存储有比特流的记录介质
KR20190033771A (ko) * 2017-09-22 2019-04-01 삼성전자주식회사 영상 인코딩 장치, 영상 디코딩 장치, 영상 인코딩 방법 및 영상 디코딩 방법
US11706405B2 (en) * 2018-03-30 2023-07-18 Lg Electronics Inc. Image/video coding method based on intra prediction involving parsing of MPM index, and apparatus thereof

Also Published As

Publication number Publication date
US20220053190A1 (en) 2022-02-17
MX2021014277A (es) 2022-01-06
CA3141350A1 (en) 2020-12-03
US11575898B2 (en) 2023-02-07
US20210321104A1 (en) 2021-10-14
WO2020242145A1 (ko) 2020-12-03
US11190769B2 (en) 2021-11-30
BR112021023469A2 (pt) 2022-01-18
KR20220003124A (ko) 2022-01-07

Similar Documents

Publication Publication Date Title
US11949885B2 (en) Intra prediction in image processing
US11539973B2 (en) Method and device for processing video signal using multiple transform kernels
US9549198B2 (en) Apparatus for decoding a moving picture
KR102540995B1 (ko) 휘도 샘플을 이용한 색차 블록의 화면 내 예측 방법 및 이러한 방법을 사용하는 장치
WO2018132475A1 (en) Intra prediction techniques for video coding
US20140376634A1 (en) Intra prediction from a predictive block
US11190769B2 (en) Method and apparatus for coding image using adaptation parameter set
EP3092802A1 (en) Intra prediction from a predictive block
WO2012138032A1 (ko) 영상 정보 부호화 방법 및 복호화 방법
US11818378B2 (en) Image encoding/decoding method and device
US20220360776A1 (en) Method and device for encoding or decoding image
KR20210035062A (ko) 영상 부호화/복호화 방법, 장치 및 비트스트림을 저장한 기록 매체
WO2020016795A2 (en) Block size restrictions for visual media coding
US11343496B2 (en) Method and apparatus for encoding/decoding an image based on in-loop filter

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination