CN114424540B - 视频编解码中自适应环路滤波器的信令使用 - Google Patents

视频编解码中自适应环路滤波器的信令使用 Download PDF

Info

Publication number
CN114424540B
CN114424540B CN202080065752.XA CN202080065752A CN114424540B CN 114424540 B CN114424540 B CN 114424540B CN 202080065752 A CN202080065752 A CN 202080065752A CN 114424540 B CN114424540 B CN 114424540B
Authority
CN
China
Prior art keywords
adaptive loop
loop filter
luma
bitstream
video
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202080065752.XA
Other languages
English (en)
Other versions
CN114424540A (zh
Inventor
张莉
刘鸿彬
张凯
王悦
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing ByteDance Network Technology Co Ltd
ByteDance Inc
Original Assignee
Beijing ByteDance Network Technology Co Ltd
ByteDance Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing ByteDance Network Technology Co Ltd, ByteDance Inc filed Critical Beijing ByteDance Network Technology Co Ltd
Publication of CN114424540A publication Critical patent/CN114424540A/zh
Application granted granted Critical
Publication of CN114424540B publication Critical patent/CN114424540B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • H04N19/82Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117Filters, e.g. for pre-processing or post-processing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/13Adaptive entropy coding, e.g. adaptive variable length coding [AVLC] or context adaptive binary arithmetic coding [CABAC]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/174Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a slice, e.g. a line of blocks or a group of blocks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/184Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being bits, e.g. of the compressed video stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards

Abstract

描述了用于信令通知在图像和视频编解码中使用自适应环路滤波的方法、系统和设备。视频处理的示例方法包括:对于视频的当前区域与视频的比特流表示之间的转换,确定在转换期间是否使用了亮度自适应环路滤波器,以及在比特流表示中是否包括亮度自适应环路滤波器系数,其中在比特流表示中的单个语法元素指示亮度自适应环路滤波器的使用和亮度自适应环路滤波器系数的信令,并且基于确定来执行转换。

Description

视频编解码中自适应环路滤波器的信令使用
相关申请的交叉引用
本申请基于2020年9月18日提交的国际专利申请号PCT/CN2020/116084,其要求2019年9月18日提交的国际专利申请号PCT/CN2019/106420的优先权和利益。所有上述专利申请在此全部引入作为参考。
技术领域
本申请文件涉及视频编码和解码技术。
背景技术
尽管视频压缩取得了进步,但是数字视频仍在互联网和其他数字通信网络上占据最大带宽使用量。随着能够接收和显示视频的连接用户设备数量的增加,预计数字视频使用的带宽需求将持续增长。
发明内容
与数字视频编解码有关的设备、系统和方法,特别是与其中使用自适应环路滤波的视频和图像编码和解码有关的设备、系统和方法。
在一个示例方面,公开了一种视频处理方法。该方法包括:对于视频的当前区域与视频的比特流表示之间的转换,确定在转换期间是否使用亮度自适应环路滤波器以及在比特流表示中是否包括亮度自适应环路滤波器系数,其中,在比特流表示中的单个语法元素指示亮度自适应环路滤波器的使用和亮度自适应环路滤波器系数的信令;以及基于确定来执行转换。
在另一示例方面,公开了一种视频处理方法。该方法包括:执行视频的当前区域与视频的比特流表示之间的转换,其中,在转换期间使用自适应环路滤波器,并且其中比特流表示符合语法规则,该语法规则规定在比特流表示中信令通知的自适应环路滤波器的系数包括零值的自适应环路滤波器系数。
在又一示例方面,公开了一种视频处理方法。该方法包括:对于视频的当前区域与视频的比特流表示之间的转换,确定在转换中不使用在比特流表示中信令通知的视频的先前区域的零值的自适应环路滤波器系数;以及基于确定来执行转换。
在又一示例方面,公开了一种视频处理方法。该方法包括:执行视频的当前区域与视频的比特流表示之间的转换,其中,比特流表示符合语法规则,该语法规则规定指示是否将环路滤波用于转换的标志被包括在包括当前区域的视频单元级别的比特流表示中,视频单元级别小于视频的条带级别。
在又一示例方面,公开了一种视频处理方法。该方法包括:执行视频的当前区域与视频的比特流表示之间的转换,其中,转换包括使用自适应环路滤波器,并且其中比特流表示被配置为使用两部分信令来指示自适应环路滤波器,两部分信令包括:指示确定自适应环路滤波器的技术的第一部分,以及指示技术使用的索引的第二部分。
在又一示例方面,公开了一种视频处理方法。该方法包括:基于视频的属性,确定共享共用环路滤波器设置的视频的当前区域的尺寸,共用环路滤波器设置用于当前区域与视频的比特流表示之间的转换;以及基于确定来执行转换。
在又一示例方面,公开了一种视频处理方法。该方法包括:执行视频的当前区域与视频的比特流表示之间的无损的转换,其中,比特流表示符合语法规则,该语法规则由于转换是无损的而限制比特流表示中的与当前区域相关联的语法字段的值。
在又一示例方面,上述方法实施为处理器可执行代码的形式并被存储在计算机可读程序介质中。
在又一示例方面,公开了一种被配置为或可操作为执行上述方法的设备。该设备可以包括被编程为实现该方法的处理器。
在又一示例方面,视频解码器装置可以实施如本文所述的方法。
在附图、说明书和权利要求书中更详细地描述了所公开技术的以上和其他方面以及特征。
附图说明
图1是编码器框图的示例。
图2示出了GALF滤波器形状的示例(左侧:5×5菱形,中间:7×7菱形,右侧:9×9菱形)。
图3是用于GALF的编码器决策的一种实现的流程图。
图4示出了用于CE2.6.2的子采样拉普拉斯算子(Laplacian)计算的示例。左上(a):用于垂直梯度的子采样位置,右上(b):用于水平梯度的子采样位置,左下(c):用于对角梯度的子采样位置,右下(d):用于对角梯度的子采样位置。
图5示出了图片的光栅扫描条带分割的示例,其中图片被分成12个片和3个光栅扫描条带。
图6示出了具有18乘以12亮度CTU的图片,该图片被分成24个片和9个矩形条带。
图7示出了被分割为4个片、11个图块(brick)和4个矩形条带的图片的示例。
图8示出了具有28个子图片的图片。
图9是视频系统的框图。
图10是视频处理装置的示例的框图。
图11-17是视频处理的示例方法的流程图。
具体实施方式
可以将所公开的技术的实施例应用于现有视频编解码标准(例如,HEVC、H.265)和将来的标准,以改善压缩性能。在本文中,使用章节标题来提高描述的可读性,并且不以任何方式使论述或实施例(和/或实施方式)仅局限于相应章节。
1.概要
本申请文件涉及视频编解码技术。具体地,本申请文件涉及视频编码或解码中的自适应环路滤波。其可以应用于现有的视频编解码标准,如HEVC,也可以应用于待定的标准(多功能视频编解码)。其也可适用于未来的视频编解码标准或视频编解码器。
2.初步讨论
视频编解码标准主要是通过开发公知的ITU-T和ISO/IEC标准而发展起来的。ITU-T开发了H.261和H.263,ISO/IEC开发了MPEG-1和MPEG-4视觉,并且两个组织联合开发了H.262/MPEG-2视频、H.264/MPEG-4高级视频编解码(AVC)和H.265/HEVC标准。自H.262以来,视频编解码标准基于混合视频编解码结构,其中采用了时域预测加变换编解码。为了探索HEVC以外的未来视频编解码技术,VCEG和MPEG于2015年联合成立了联合视频探索团队(JVET)。此后,JVET采纳了许多新方法并将其引入到名为联合探索模型(JEM)的参考软件中。在2018年4月,成立了VCEG(Q6/16)与ISO/IEC JTC1 SC29/WG11(MPEG)之间的联合视频专家小组(JVET),以致力于目标在于相比HEVC降低50%比特率的VVC标准。
可以在以下位置找到VVC草案的最新版本,即通用视频编解码(草案6):
http://phenix.it-sudparis.eu/jvet/doc_end_user/documents/15_Gothenburg/wg11/JVET-O2001-v14.zip
可以在以下位置找到名为VTM的VVC的最新参考软件:
https://vcgit.hhi.fraunhofer.de/jvet/VVCSoftware_VTM/tags/VTM-2.1
2.1颜色空间和色度子采样
颜色空间(也称为颜色模型(或颜色系统))是抽象数学模型,其简单地将颜色范围描述为数字元组,通常为3或4个值或颜色分量(例如,RGB)。基本上来说,颜色空间是对坐标系和子空间的精细化。
对于视频压缩,最常用的颜色空间是YCbCr和RGB。
YCbCr、Y′CbCr或Y Pb/Cb Pr/Cr(也写为YCBCR或Y'CBCR)是在视频和数字摄影系统中用作颜色图像管道一部分的颜色空间族。Y′是亮度分量,CB和CR是蓝差和红差色度分量。Y′(带质数)与Y不同,Y是光亮度(luminance),这意味着光强度是基于伽马校正的RGB质数进行非线性编码的。
色度子采样是利用人类视觉系统对色差的敏感度低于对于光亮度的敏感度的优势,通过对色度信息实施比亮度信息更低分辨率来编码图像的实践。
2.1.1 4:4:4
三个Y'CbCr分量中的每个具有相同的采样率,因此没有色度子采样。此方案有时用在高端胶片扫描仪和电影后期制作。
2.1.2 4:2:2
以亮度一半的采样率对两个色度分量进行采样:水平色度分辨率减半。这使得在几乎没有视觉差异的情况下将未压缩视频信号的带宽减少三分之一。
2.1.3 4:2:0
在4:2:0中,水平采样比4:1:1增加了一倍,但是由于在此方案中Cb和Cr通道仅在每个可选线上采样,垂直分辨率降低一半。因此数据速率是相同的。Cb和Cr在水平和垂直方向上均以2的因子进行子采样。4:2:0方案有三种变体,具有不同的水平和垂直设置。
●在MPEG-2中,Cb和Cr在水平上共同设置。Cb和Cr设置在垂直方向的像素之间(间隙设置)。
●在JPEG/JFIF、H.261和MPEG-1中,Cb和Cr是间隙设置的,位于可选亮度样点中间。
●在4:2:0 DV中,Cb和Cr在水平方向上共同设置。在垂直方向上,它们在可选线上共同设置。
2.2典型视频编解码器的编解码流程
图1示出了VVC的编码器框图的示例,其包含三个环路滤波块:去方块滤波器(DF)、采样自适应偏移(SAO)和ALF。与使用预定义滤波器的DF不同,SAO和ALF利用当前图片的原始样点分别通过添加偏移和通过应用有限脉冲响应(FIR)滤波器来降低原始样点与重构样点之间的均方误差,而编码后的辅助信息信令通知偏移和滤波器系数。ALF位于每个图片的最后处理阶段,并且能够被看作是试图捕获和修复由先前阶段创建的伪像的工具。
2.3 JEM中基于几何变换的自适应环路滤波器
在JEM中,应用了具有基于块的滤波器自适应的基于几何变换的自适应环路滤波器(GALF)。对于亮度分量,根据局部梯度的方向和活动,为每个2×2块选择25个滤波器之一。
2.3.1滤波器形状
在JEM中,能够为亮度分量选择多达三个菱形滤波器形状(如图2所示)。在图片级别信令通知索引,以指示用于亮度分量的滤波器形状。
图2示出了GALF滤波器形状的示例(左侧:5×5菱形,中间:7×7菱形,右侧:9×9菱形)。
对于图片中的色度分量,总是使用5×5菱形形状。
2.3.1.1块类别
每个2×2块被分类为25个类别中的一个。类别索引C是基于其方向D和活动的量化值而得出的,如下所示:
为了计算D和首先使用一维拉普拉斯算子计算水平、垂直和两个对角方向的梯度:
索引i和j表示2×2块中左上样点的坐标,R(i,j)表示在坐标(i,j)处的重构样点。
然后将D水平和垂直方向的梯度的最大值和最小值设置为:
将两个对角方向的梯度的最大值和最小值设置为:
为了得出方向D的值,将这些值相互比较,并且与两个阈值t1和t2进行比较。
步骤1.如果和/>两者为真,则将D设置为0。
步骤2.如果从步骤3开始;否则从步骤4开始。
步骤3.如果将D设置为2;否则将D设置为1。
步骤4.如果将D设置为4;否则将D设置为3。
按照如下计算方向值A:
将A进一步量化到0至4的范围(包括端值),并且将量化的值表示为
对于图片中的两个色度分量,不应用分类方法,即,对每个色度分量应用单个ALF系数集。
2.3.1.2滤波器系数的几何变换
在对每个2×2块进行滤波之前,根据为该块计算的梯度值,将几何变换(诸如旋转或对角和垂直翻转)应用于滤波器系数f(k,l)。这等效于将这些变换应用于滤波器支持区域中的样点。想法是通过对齐他们的方向来使应用了ALF的不同块更加相似。
引入了三种几何变换,包括对角、垂直翻转和旋转:
对角:fD(k,l)=f(l,k),
垂直翻转:fV(k,l)=f(k,K-l-1), (9)
旋转:fR(k,l)=f(K-l-1,k).
其中K是滤波器的尺寸,0≤k,l≤K-1是系数坐标,因此位置(0,0)在左上角,位置(K-1,K-1)在右下角。根据为该块计算的梯度值,将变换应用于滤波器系数f(k,l)。表1中总结了变换与四个方向的四个梯度之间的关系。
表1:对一个块计算的梯度与变换之间的映射
梯度值 变换
gd2<gd1和gh<gv 无变换
gd2<gd1和gv<gh 对角
gd1<gd2和gh<gv 垂直翻转
gd1<gd2和gv<gh 旋转
2.3.1.3滤波器参数信令
在JEM中,对于第一个CTU信令通知GALF滤波器参数,即在条带标头之后和第一个CTU的SAO参数之前。可以信令通知多达25个亮度滤波器系数的集合。为了减少比特开销,能够合并不同类别的滤波器系数。另外,参考图片的GALF系数被存储并被允许重用作为当前图片的GALF系数。当前图片可以选择使用为参考图片存储的GALF系数,并绕过GALF系数的信令。在这种情况下,仅信令通知参考图片之一的索引,并且当前图片继承所指示的参考图片的存储的GALF系数。
为了支持GALF时域预测,将保持GALF滤波器集合的候选列表。在开始解码新序列时,候选列表为空。在解码一个图片之后,可以将对应的滤波器集合添加到候选列表。一旦候选列表的尺寸达到最大允许值(即,在当前JEM中为6),新的滤波器集合将按照解码顺序覆盖最旧的集合,即,应用先进先出(FIFO)规则以更新候选列表。为避免重复,只有当对应图片不使用GALF时域预测时,才将集合添加到列表中。为了支持时域可伸缩,存在滤波器集合的多个候选列表,并且每个候选列表都与时域层相关联。更具体地,由时域层索引(TempIdx)分配的每个阵列可以组成具有等于低于TempIdx的先前解码图片的滤波器集合。例如,第k个阵列被分配为与等于k的TempIdx相关联,并且它仅包含来自TempIdx小于或等于k的图片滤波器集合。在对某个图片进行编解码后,与该图片关联的滤波器集合将用来更新与等于或更高TempIdx相关联的那些阵列。
GALF系数的时域预测是用于帧间编解码的帧,以最小化信令开销。对于帧内帧,时域预测是不可用的,并且将16个固定滤波器的集合分配给每个类别。为了指示固定滤波器的使用,将信令通知每个类别的标志,并在需要时信令通知所选的固定滤波器的索引。即使为给定类别选择了固定滤波器,仍然可以为该类别信令通知自适应滤波器的系数f(k,l),在这种情况下,将应用于重构图像的滤波器系数为两组系数的总和。
亮度分量的滤波过程可以控制在CU级别。信令通知标志以指示是否对CU的亮度分量应用了GALF。对于色度分量,仅在图片级别指示是否应用了GALF。
2.3.1.4滤波过程
在解码器侧,当对块启用GALF时,块内的每个样点R(i,j)被滤波,使得样点值R′(i,j)如下所示,其中,L表示滤波器长度,fm,n代表滤波器系数,以及f(k,l)表示解码的滤波系数。
2.3.1.5编码侧滤波器参数确定过程
在图3中图示了用于GALF的整体编码器决策过程。对于每个CU的亮度样点,编码器对是否应用GALF以及在条带标头中包括合适的信令标志作出决策。对于色度样点,基于图片级别而不是CU级别来作出是否应用滤波器的决策。此外,仅当对图片启用亮度GALF时,才检查图片的色度GALF。
2.4 VVC中基于几何变换的自适应环路滤波器
与JEM相比,VVC中GALF的当前设计具有以下主要变化:
1)移除了自适应滤波器形状。亮度分量仅允许使用7×7滤波器形状,色度分量仅允许使用5×5滤波器形状。
2)移除了ALF参数的时域预测以及来自固定滤波器的预测。
3)对于每个CTU,无论启用还是禁用ALF,信令通知一个比特标志。
4)在4×4级别而不是2×2级别进行类别索引的计算。另外,如在JVET-L0147中所提出的,利用了用于ALF分类的子采样拉普拉斯算子计算方法。更具体地,不需要对一个块内的每个样点计算水平/垂直/45对角/135度梯度。取而代之的是,使用了1:2的子采样。
图4示出了用于CE2.6.2的子采样拉普拉斯算子计的算示例。左上(a):用于垂直梯度的子采样位置,右上(b):用于水平梯度的子采样位置,左下(c):用于对角梯度的子采样位置,右下(d):用于对角梯度的子采样位置。
2.5自适应参数集中的自适应环路滤波器参数的信令
在最新版本的VVC草案中,能在自适应参数集(APS)中信令通知ALF参数,并且每个CTU能够自适应地选择这些参数。
ALF的详细信令(在JVET-O2001-vE中)如下。
7.3.2.5自适应参数集语法元素
7.3.2.14自适应环路滤波器数据语法元素
7.4.3.5自适应参数集语义
在被引用之前,每个APS RBSP可用于解码过程,被包括在至少一个访问单元中,访问单元具有TemporalId小于或等于引用其的编解码条带NAL单元的TemporalId或通过外部方式提供的TemporalId。
令aspLayerId为APS NAL单元的nuh_layer_id。如果具有nuh_layer_id等于aspLayerId的层是一个单独的层(即,vps_independent_layer_flag[GeneralLayerIdx[aspLayerId]]等于1),则包含APS RBSP的APS NAL单元应具有nuh_layer_id等于引用其的编解码条带NAL单元的nuh_layer_id。否则,包含APS RBSP的APS NAL单元的nuh_layer_id等于引用其的编解码条带NAL单元的nuh_layer_id,或者等于包含引用其的编解码条带NAL单元的层的直接相关层的nuh_layer_id。
访问单元内具有adaptation_parameter_set_id的特定值和aps_params_type的特定值的所有APS NAL单元应具有相同的内容。
提供用于APS的标识符,以供其他语法元素引用。
当aps_params_type等于ALF_APS或SCALING_APS时,adaptation_parameter_set_id的值应在0到7的范围内(包括端值)。
当aps_params_type等于LMCS_APS时,adaptation_parameter_set_id的值应在0到3之间(包括端值)。
规定表7-2中规定的APS中携带的APS参数的类型。当aps_params_type等于1(LMCS_APS)时,adaptation_parameter_set_id的值应在0到3的范围内(包括端值)。
表7-2-APS参数类型代码和APS参数类型
注1–每种类型的APS对adaptation_parameter_set_id使用单独的值空间。
注2–APS NAL单元(具有adaptation_parameter_set_id的特定值和aps_params_type的特定值)能在图片之间被共享,并且图片内的不同条带能引用不同的ALF APS。
等于0规定APS RBSP语法结构中不存在aps_extension_data_flag语法元素。aps_extension_flag等于1规定APS RBSP语法结构中存在aps_extension_data_flag语法元素。
可以具有任意值。它的存在和值不影响解码器对此规范的此版本中规定的配置文件的符合性。符合此规范的此版本的解码器应忽略所有aps_extension_data_flag语法元素。/>
7.4.3.14自适应环路滤波器数据语义
等于1规定信令通知亮度滤波器集合。
alf_luma_filter_signal_flag等于0规定不信令通知亮度滤波器集合。
等于1规定信令通知色度滤波器。
alf_chroma_filter_signal_flag等于0规定不信令通知色度滤波器。当ChromaArrayType等于0时,alf_chroma_filter_signal_flag应等于0。
规定不同的自适应环路滤波器数量的变量NumAlfFilters设置为等于25。
等于0规定将线性自适应环路滤波应用于亮度分量。alf_luma_clip_flag等于1规定可以将非线性自适应环路滤波应用于亮度分量。
加1规定能信令通知亮度系数的自适应环路滤波器类别的数量。alf_luma_num_filters_signalled_minus1的值应在0到NumAlfFilters-1的范围内(包括端值)。
[filtIdx]规定用于由filtIdx指示的滤波器类别的信令通知的自适应环路滤波器亮度系数delta的索引的范围从0到NumAlfFilters-1。当alf_luma_coeff_delta_idx[filtIdx]不存在时,推断为等于0。alf_luma_coeff_delta_idx[filtIdx]的长度为Ceil(Log2(alf_luma_num_filters_signalled_minus1+1))比特。
等于1指示信令通知了alf_luma_coeff_flag[sfIdx]。alf_luma_coeff_signalled_flag等于0指示未信令通知alf_luma_coeff_flag[sfIdx]。
[sfIdx]等于1规定信令通知了由sfIdx指示的亮度滤波器的系数。alf_luma_coeff_flag[sfIdx]等于0规定由sfIdx指示的亮度滤波器的所有滤波器系数都设置为0。不存在时,alf_luma_coeff_flag[sfIdx]设置等于1。
[sfIdx][j]规定由sfIdx指示的信令通知的亮度滤波器的第j个系数的绝对值。如果alf_luma_coeff_abs[sfIdx][j]不存在,则将其推断为等于0。
exp-Golomb二值化uek(v)的阶数k等于3。
[sfIdx][j]规定由sfIdx指示的滤波器的第j个亮度系数的符号,如下所示:
-如果alf_luma_coeff_sign[sfIdx][j]等于0,则对应的亮度滤波器系数为正值。
-否则(alf_luma_coeff_sign[sfIdx][j]等于1),对应的亮度滤波器系数为负值。
当alf_luma_coeff_sign[sfIdx][j]不存在时,则推断为等于0。
具有sfIdx=0..alf_luma_num_filters_signalled_minus1,j=0..11的变量filtCoeff[sfIdx][j]的初始化如下:
filtCoeff[sfIdx][j]=alf_luma_coeff_abs[sfIdx][j]* (7-47)
(1-2*alf_luma_coeff_sign[sfIdx][j])
具有元素AlfCoeffL[adaption_parameter_set_id][filtIdx][j]且lultIdx=0..NumAlfFilters-1和j=0..11的亮度滤波器系数AlfCoeffL[adaptation_parameter_set_id]的推导如下:
AlfCoeffL[adaptation_parameter_set_id][filtIdx][j]=filtCoeff[alf_luma_coeff_delta_idx[filtIdx]][j](7-48)
具有i=0..64,j=0..11的固定滤波器系数AlfFixFiltCoeff[i][j]以及具有m=0..15且n=0的滤波器映射AlfClassToFiltMap[m][n]的类别的推导如下:
AlfFixFiltCoeff= (7-49)
{
{0,0,2,-3,1,-4,1,7,-1,1,-1,5}
{0,0,0,0,0,-1,0,1,0,0,-1,2}
{0,0,0,0,0,0,0,1,0,0,0,0}
{0,0,0,0,0,0,0,0,0,0,-1,1}
{2,2,-7,-3,0,-5,13,22,12,-3,-3,17}
{-1,0,6,-8,1,-5,1,23,0,2,-5,10}
{0,0,-1,-1,0,-1,2,1,0,0,-1,4}
{0,0,3,-11,1,0,-1,35,5,2,-9,9}
{0,0,8,-8,-2,-7,4,4,2,1,-1,25}
{0,0,1,-1,0,-3,1,3,-1,1,-1,3}
{0,0,3,-3,0,-6,5,-1,2,1,-4,21}
{-7,1,5,4,-3,5,11,13,12,-8,11,12}
{-5,-3,6,-2,-3,8,14,15,2,-7,11,16}
{2,-1,-6,-5,-2,-2,20,14,-4,0,-3,25}
{3,1,-8,-4,0,-8,22,5,-3,2,-10,29}
{2,1,-7,-1,2,-11,23,-5,0,2,-10,29}
{-6,-3,8,9,-4,8,9,7,14,-2,8,9}
{2,1,-4,-7,0,-8,17,22,1,-1,-4,23}
{3,0,-5,-7,0,-7,15,18,-5,0,-5,27}
{2,0,0,-7,1,-10,13,13,-4,2,-7,24}
{3,3,-13,4,-2,-5,9,21,25,-2,-3,12}
{-5,-2,7,-3,-7,9,8,9,16,-2,15,12}
{0,-1,0,-7,-5,4,11,11,8,-6,12,21}
{3,-2,-3,-8,-4,-1,16,15,-2,-3,3,26}
{2,1,-5,-4,-1,-8,16,4,-2,1,-7,33}
{2,1,-4,-2,1,-10,17,-2,0,2,-11,33}
{1,-2,7,-15,-16,10,8,8,20,11,14,11}
{2,2,3,-13,-13,4,8,12,2,-3,16,24}
{1,4,0,-7,-8,-4,9,9,-2,-2,8,29}
{1,1,2,-4,-1,-6,6,3,-1,-1,-3,30}
{-7,3,2,10,-2,3,7,11,19,-7,8,10}
{0,-2,-5,-3,-2,4,20,15,-1,-3,-1,22}
{3,-1,-8,-4,-1,-4,22,8,-4,2,-8,28}
{0,3,-14,3,0,1,19,17,8,-3,-7,20}
{0,2,-1,-8,3,-6,5,21,1,1,-9,13}
{-4,-2,8,20,-2,2,3,5,21,4,6,1}
{2,-2,-3,-9,-4,2,14,16,3,-6,8,24}
{2,1,5,-16,-7,2,3,11,15,-3,11,22}
{1,2,3,-11,-2,-5,4,8,9,-3,-2,26}
{0,-1,10,-9,-1,-8,2,3,4,0,0,29}
{1,2,0,-5,1,-9,9,3,0,1,-7,20}
{-2,8,-6,-4,3,-9,-8,45,14,2,-13,7}
{1,-1,16,-19,-8,-4,-3,2,19,0,4,30}
{1,1,-3,0,2,-11,15,-5,1,2,-9,24}
{0,1,-2,0,1,-4,4,0,0,1,-4,7}
{0,1,2,-5,1,-6,4,10,-2,1,-4,10}
{3,0,-3,-6,-2,-6,14,8,-1,-1,-3,31}
{0,1,0,-2,1,-6,5,1,0,1,-5,13}
{3,1,9,-19,-21,9,7,6,13,5,15,21}
{2,4,3,-12,-13,1,7,8,3,0,12,26}
{3,1,-8,-2,0,-6,18,2,-2,3,-10,23}
{1,1,-4,-1,1,-5,8,1,-1,2,-5,10}
{0,1,-1,0,0,-2,2,0,0,1,-2,3}
{1,1,-2,-7,1,-7,14,18,0,0,-7,21}
{0,1,0,-2,0,-7,8,1,-2,0,-3,24}
{0,1,1,-2,2,-10,10,0,-2,1,-7,23}
{0,2,2,-11,2,-4,-3,39,7,1,-10,9}
{1,0,13,-16,-5,-6,-1,8,6,0,6,29}
{1,3,1,-6,-4,-7,9,6,-3,-2,3,33}
{4,0,-17,-1,-1,5,26,8,-2,3,-15,30}
{0,1,-2,0,2,-8,12,-6,1,1,-6,16}
{0,0,0,-1,1,-4,4,0,0,0,-3,11}
{0,1,2,-8,2,-6,5,15,0,2,-7,9}
{1,-1,12,-15,-7,-2,3,6,6,-1,7,30}
},
AlfClassToFiltMap= (7-50)
{
{8,2,2,2,3,4,53,9,9,52,4,4,5,9,2,8,10,9,1,3,39,39,10,9,52}
{11,12,13,14,15,30,11,17,18,19,16,20,20,4,53,21,22,23,14,25,26,26,27,28,10}
{16,12,31,32,14,16,30,33,53,34,35,16,20,4,7,16,21,36,18,19,21,26,37,38,39}
{35,11,13,14,43,35,16,4,34,62,35,35,30,56,7,35,21,38,24,40,16,21,48,57,39}
{11,31,32,43,44,16,4,17,34,45,30,20,20,7,5,21,22,46,40,47,26,48,63,58,10}
{12,13,50,51,52,11,17,53,45,9,30,4,53,19,0,22,23,25,43,44,37,27,28,10,55}
{30,33,62,51,44,20,41,56,34,45,20,41,41,56,5,30,56,38,40,47,11,37,42,57,8}
{35,11,23,32,14,35,20,4,17,18,21,20,20,20,4,16,21,36,46,25,41,26,48,49,58}
{12,31,59,59,3,33,33,59,59,52,4,33,17,59,55,22,36,59,59,60,22,36,59,25,55}
{31,25,15,60,60,22,17,19,55,55,20,20,53,19,55,22,46,25,43,60,37,28,10,55,52}
{12,31,32,50,51,11,33,53,19,45,16,4,4,53,5,22,36,18,25,43,26,27,27,28,10}
{5,2,44,52,3,4,53,45,9,3,4,56,5,0,2,5,10,47,52,3,63,39,10,9,52}
{12,34,44,44,3,56,56,62,45,9,56,56,7,5,0,22,38,40,47,52,48,57,39,10,9}
{35,11,23,14,51,35,20,41,56,62,16,20,41,56,7,16,21,38,24,40,26,26,42,57,39}
{33,34,51,51,52,41,41,34,62,0,41,41,56,7,5,56,38,38,40,44,37,42,57,39,10}
{16,31,32,15,60,30,4,17,19,25,22,20,4,53,19,21,22,46,25,55,26,48,63,58,55}
},
对于比特流一致性的要求是,具有filtIdx=0..NumAlfFilters–1、j=0..11的AlfCoeffL[adaptation_parameter_set_id][filtIdx][j]的值应在-27到27-1的范围内(包括端值)。
[sfIdx][j]规定在乘以由sfIdx指示的信令通知的亮度滤波器的第j个系数之前要使用的裁剪值的裁剪索引。比特流一致性的要求是,具有sfIdx=0..alf_luma_num_filters_signalled_minus1和j=0..11的alf_luma_clip_idx[sfIdx][j]的值应在0到3的范围内(包括端值)。
取决于bitDepth设置为等于BitDepthY并且clipIdx设置为等于alf_luma_clip_idx[alf_luma_coeff_delta_idx[filtIdx]][j],如表7-4所规定的推导具有元素AlfClipL[adaptation_parameter_set_id][filtIdx][j]其中filtIdx=0..NumAlfFilters–1以及j=0..11的亮度滤波器裁剪值AlfClipL[adaptation_parameter_set_id]。
加1规定用于色度分量的可选滤波器的数量。
[altIdx]等于0规定当使用索引altIdx的色度滤波器时,对色度分量应用线性自适应环路滤波;alf_chroma_clip_flag[altIdx]等于1规定当使用索引altIdx的色度滤波器时,对色度分量应用非线性自适应环路滤波。如果不存在,则alf_chroma_clip_flag[altIdx]推断为等于0。
[altIdx][j]规定用于索引为altIdx的可选色度滤波器指定第j个色度滤波器系数的绝对值。当alf_chroma_coeff_abs[altIdx][j]不存在时,推断为等于0。比特流一致性的要求是alf_chroma_coeff_abs[altIdx][j]的值应在0到27-1的范围内(包括端值)。
exp-Golomb二值化uek(v)的阶数k等于3。
[altIdx][j]规定索引为altIdx的可选色度滤波器的第j个色度滤波器系数的符号,如下所示:
-如果alf_chroma_coeff_sign[altIdx][j]等于0,则对应的色度滤波器系数为正值。
-否则(alf_chroma_coeff_sign[altIdx][j]等于1),对应的色度滤波器系数为负值。
当alf_chroma_coeff_sign[altIdx][j]不存在时,则推断为等于0。
具有元素AlfCoeffC[adaptation_parameter_set_id][altIdx][j]其中altIdx=0..alf_chroma_num_alt_filters_minus1以及j=0..5的色度滤波器系数AlfCoeffC[adaptation_parameter_set_id][altIdx],按照如下推导:
AlfCoeffC[adaptation_parameter_set_id][altIdx][j]=alf_chroma_coeff_abs[altIdx][j]*(7-51)
(1-2*alf_chroma_coeff_sign[altIdx][j])
比特流一致性的要求是,具有altIdx=0..alf_chroma_num_alt_filters_minus1,j=0..5的AlfCoeffC[adaption_parameter_set_id][altIdx][j]的值应在-27-1到27-1的范围内(包括端值)。
[altIdx][j]规定在乘以索引为altIdx的可选色度滤波器的第j个系数之前要使用的裁剪值的裁剪索引。比特流一致性的要求是,具有altIdx=0..alf_chroma_num_alt_filters_minus1,j=0..5的alf_chroma_clip_idx[altIdx][j]的值应在0到3的范围内(包括端值)。
取决于bitDepth设置为等于BitDepthC并且clipIdx设置为等于alf_chroma_clip_idx[altIdx][j],如表7-4所规定的推导具有元素AlfClipC[adaptation_parameter_set_id][altIdx][j]其中altIdx=0..alf_chroma_num_alt_filters_minus1,j=0..5的色度滤波器裁剪值AlfClipC[adaptation_parameter_set_id][altIdx]。
表7-4–取决于bitDepth和clipIdx的规定AlfClip
2.6用于CTU的ALF参数的信令
在VTM6中,在自适应参数集(APS)中信令通知ALF滤波器参数。在一个APS中,可以信令通知多达25个亮度滤波器系数集和裁剪值索引,以及多达8个色度滤波器系数集和裁剪值索引。为了减少比特开销,能够合并用于亮度分量的不同类别的滤波器系数。在条带标头中,信令通知用于当前条带的APS的索引。
从APS解码的裁剪值索引允许使用裁剪值的亮度表和裁剪值的色度表来确定裁剪值。这些裁剪值取决于内部比特深度。更准确地,裁剪值的亮度表和裁剪值的色度表通过以下公式获得:
其中n∈[1..N]}, (3-11)
其中n∈[1..N]} (3-12)
其中,B等于内部比特深度,N等于4,N是VTM6.0中所允许的裁剪值的数量。
在条带标头中,可以信令通知多达7个APS索引,以规定用于当前条带的亮度滤波器器集合。能够在CTB级别进一步控制滤波过程。始终信令通知标志,以指示ALF是否应用于亮度CTB。亮度CTB能从16个固定滤波器集合和来自APS的滤波器集合中选择滤波器集合。信令通知用于亮度CTB的滤波器集合索引,以指示应用了哪个滤波器集合。在编码器和解码器两者中预定义和硬编解码了16个固定滤波器集合。
对于色度分量,在条带标头中信令通知APS索引,以指示用于当前条带的色度滤波器集合。在CTB级别,如果APS中存在多于一个的色度滤波器集合,则对每个色度CTB信令通知滤波器索引。
更具体地,适用以下内容:
首先对条带开/关控制标志进行编解码,以指示条带中的至少一个CTU是否应用ALF。如果为真,则对于每个CTU,将依次检查并信令通知以下内容:
涉及亮度的部分:
1.是否将ALF应用于亮度CTB。如果是,则转到步骤2。否则,不需要其他信令。
2.检查用于当前条带的ALF APS的数量,表示为numALFAPS。
3.如果numALFAPS等于0,则信令通知固定滤波器索引(例如,alf_luma_fixed_filter_idx)。否则,应用以下:
-信令通知标志以指示是否根据第一ALF APS进行预测。
-如果否,则转到步骤4。否则,停止信令通知用于亮度CTB的ALF参数。
4.如果numALFAPS大于1,则信令通知标志以指示是否根据ALF APS进行预测。
-如果不是,则信令通知固定滤波器的索引;
-如果是,并且numALFAPS大于2,则利用截断一元来信令通知ALF APS的索引减去1。
涉及色度的部分:
1.是否将ALF应用于Cb/Cr CTB。如果是,则转到步骤2。否则,不需要其他信令。
2.信令通知与第i个ALF APS相关联的滤波器的索引,其中,在条带标头中信令通知APS索引。
7.3.8.2编解码树单元语法
/>
/>
2.7图片、子图片、条带、片、图块和CTU的分割
子图片:图片内一个或多个条带的矩形区域。
条带:排他地包含在单个NAL单元中的图片的整数图块。
注–条带由多个完整的片或仅由一个片的完整图块的连续序列组成。
片:图片中的特定片列和特定片行内的CTU的矩形区域。
图块:图片中的特定片内的CTU行的矩形区域。
注-片可以分割为多个图块,每个图块由图块内的一个或多个CTU行组成。未分割为多个图块的片也称为图块。然而,作为片的真实子集的图块不表示为片。
图块扫描:分割图片的CTU的特定顺序排序,其中CTU在图块中的CTU光栅扫描中连续排序,在片内的图块在片的图块的光栅扫描中连续排序,图片中的片在图片的片的光栅扫描中连续排序。
图片被分成一个或多个片行和一个或多个片列。片是一系列CTU,它们覆盖图片的矩形区域。
片被分成一个或多个图块,每个图块由片内的多个CTU行组成。
未被分割成多个图块的片也称为图块。然而,作为片的真实子集的图块不称为片。
条带包含图片的多个片或片的多个图块。
子图片包含共同覆盖图片的矩形区域的一个或多个条带。
支持片的两种模式,即,光栅扫描条带模式和矩形条带模式。在光栅扫描条带模式下,条带包含图片的片光栅扫描中的一系列片。在矩形条带模式下,条带包含图片的多个图块,这些图块共同形成图片的矩形区域。矩形条带内的图块按条带的图块光栅扫描顺序排列。
图5示出了图片的光栅扫描条带分割的示例,其中图片被分成12个片和3个光栅扫描条带。
图6示出了图片的矩形条带分割的示例,其中图片被分成24个片(6个片列和4个片行)和9个矩形条带。
图7示出了将图片分割为片、图块和矩形条带的示例,其中图片被分成4个片(2个片列和2个片行)、11个图块(左上片包含1个图块,右上片包含5个图块,左下片包含2个图块,右下片包含3个图块)和4个矩形条带。
图8示出了图片的子图片分割的示例,其中图片被分割为维度变化的28个子图片。
当使用三个单独的颜色平面(separate_colour_plane_flag等于1)对图片进行编解码时,条带仅包含由colour_plane_id的对应值标识的一个颜色分量的CTU,并且图片的每个颜色分量阵列由具有相同的colour_plane_id值的条带组成。图片内具有不同colour_plane_id值的编解码条带可以在以下条件下相互交错:对于colour_plane_id的每个值,具有colour_plane_id值的编解码条带NAL单元应按以用于每个编解码条带NAL单元的第一个CTU的图块扫描顺序增加CTU地址的顺序排列。
注1–当sepeparate_colour_plane_flag等于0时,图片的每个CTU恰好包含在一个条带中。当sepeparate_colour_plane_flag等于1时,颜色分量的每个CTU恰好包含在一个条带中(即,用于图片的每个CTU的信息恰好存在于三个条带中,并且这三个条带具有不同的colour_plane_id值)。
2.8 RPR
AVC和HEVC不具备在不引入IDR或内部随机接入点(IRAP)图片的情况下改变分辨率的能力;这种能力能够被称为自适应分辨率改变(ARC)。有一些情形或应用场景可以从ARC特性中获益,比如视频电话和会议中的速率自适应。ARC也称为动态分辨率转换。
ARC也可被视为参考图片重采样(RPR)的特例,诸如H.263附录P。
在VVC中,ARC,又称RPR(参考图片重采样)包含在JVET-O2001-v14中。对于JVET-O2001-v14中的RPR,如果并置的图片与当前图片具有不同的分辨率,则禁用TMVP。此外,当参考图片与当前图片的分辨率不同时,禁用BDOF和DMVR。在SPS中,定义了最大图片分辨率。并且对于PPS中的每个图片,定义了其分辨率(包括以亮度样点为单位的图片宽度和高度)。当图片分辨率不同时,则启用RPR。
2.9 VVC中的一致性窗口
VVC中的一致性窗口定义了矩形。一致性窗口之内的样点属于感兴趣的图像。在输出时,一致性窗口之外的样点可能会被丢弃。
当应用一致性窗口时,基于一致性窗口推导RPR中的缩放率。
7.3.2.4图片参数集RBSP语法
以亮度样点为单位规定参考PPS的每个解码图片的宽度。pic_width_in_luma_samples不应等于0,应为Max(8,MinCbSizeY)的整数倍,并且应小于或等于pic_width_max_in_luma_samples。
当subpics_present_flag等于1时,pic_width_in_luma_samples的值应等于pic_width_max_in_luma_samples。
以亮度样点为单位规定参考PPS的每个解码图片的高度。pic_height_in_luma_samples不应等于0,并且应为Max(8,MinCbSizeY)的整数倍,并且应小于或等于pic_height_max_in_luma_samples。
当subpics_present_flag等于1时,pic_height_in_luma_samples的值应等于pic_height_max_in_luma_samples。
使得refPicWidthInLumaSamples和refPicHeightInLumaSamples分别是参考该PPS的当前图片的参考图片的pic_width_in_luma_samples和pic_height_in_luma_samples。比特流一致性要求满足以下所有条件:
-pic_width_in_luma_samples*2应大于或等于
refPicWidthInLumaSamples。
-pic_height_in_luma_samples*2应大于或等于
refPicHeightInLumaSamples。
-pic_width_in_luma_samples应小于或等于
refPicWidthInLumaSamples*8。
-pic_height_in_luma_samples应小于或等于
refPicHeightInLumaSamples*8。
等于1指示在SPS中随后是一致性裁剪窗口偏移参数。conformance_window_flag等于0指示不存在一致性裁剪窗口偏移参数。
依据用于输出的图片坐标中规定的矩形区域来规定从解码过程输出的CVS中的图片的样点。
当conformance_window_flag等于0时,推断conf_win_left_offset、conf_win_right_offset、conf_win_top_offset和conf_win_bottom_offset的值等于0。
一致性裁剪窗口包含其水平图片坐标为从SubWidthC*conf_win_left_offset到pic_width_in_luma_samples-(SubWidthC*conf_win_right_offset+1)以及垂直图片坐标为从SubHeightC*conf_win_top_offset到pic_height_in_luma_samples-(SubHeightC*conf_win_bottom_offset+1)(包括端值)的亮度样点。
SubWidthC*(conf_win_left_offset+conf_win_right_offset)的值应小于pic_width_in_luma_samples,以及SubHeightC*(conf_win_top_offset+conf_win_bottom_offset)的值应小于pic_height_in_luma_samples。
变量PicOutputWidthL和PicOutputHeightL的推断如下:
PicOutputWidthL=pic_width_in_luma_samples- (7-43)
SubWidthC*(conf_win_right_offset+conf_win_left_offset)
PicOutputHeightL=pic_height_in_pic_size_units- (7-44)
SubHeightC*(conf_win_bottom_offset+conf_win_top_offset)
当ChromaArrayType不等于0时,两个色度阵列的对应规定样点是具有图片坐标(x/SubWidthC,y/SubHeightC)的样点,其中(x,y)是规定亮度样点的图片坐标。
注–一致性裁剪窗口偏移参数仅在输出应用。
所有内部解码过程都应用于未裁剪的图片尺寸。
使得ppsA和ppsB是参考相同SPS的任意两个PPS。比特流一致性的要求,当ppsA和ppsB的pic_width_in_luma_samples和pic_height_in_luma_samples的值分别相同时,ppsA和ppsB的conf_win_left_offset、conf_win_right_offset、conf_win_top_offset和conf_win_bottom的值应相同。
3.本文描述的技术方案所解决的技术问题
APS中的ALF数据存在以下问题:
1.它具有两个标志来控制是否信令通知亮度ALF参数,例如和/>这是冗余的。
2.它为ALF中的每个类别信令通知一个标志,以指示该类别中的所有ALF系数是否为零。这可能是不必要的,因为很少选择所有ALF系数为零。同时,即使具有这样的标志,仍然信令通知所有为零的ALF系数。
3.需要多个条件检查和步骤以推导用于亮度颜色分量的滤波器预测器。这可能带来不必要的复杂性。
4.在VVC中,图片的分割可以是条带/片/图块,其中相比于条带/片,图块是较小的单元。不允许相互预测不同的图块。在实际的编码器中,在片/图块级别信令通知ALF开/关可能为编解码性能带来额外的好处。
4.示例技术和实施例
以下所列出的应被认为是解释一般概念的示例。这些项目不应被狭义地解释。此外,能够以任何方式组合这些项目。
在此申请文件中,图片的分辨率(或维度,或宽度/高度或尺寸)可以指编码/解码图片的分辨率(或维度,或宽度/高度或尺寸),或者可以指编码/解码图片中的一致性窗口的分辨率(或维度,或宽度/高度或尺寸)。
1.提出仅信令通知一个语法元素以指示是否存在要信令通知的亮度ALF系数。
a.在一个示例中,可以跳过的信令。
b.可替换地,此外,是否信令通知由sfIdx指示的亮度滤波器的系数(例如,[sfIdx])可以单纯地取决于是否存在至少一个滤波器需要被信令通知(例如,/>)。
c.在一个示例中,的信令可以从最后一个(即,允许的最大滤波器索引)开始到第一个。
d.可替代地,保持计数器,以记录已编解码了多少个滤波器或多少个alf_luma_coeff_flags等于真。
i.如果在对最后一个滤波器的信息进行编解码之前计数器等于0,则不信令通知用于最后一个滤波器(例如,取决于编解码顺序,具有所允许的最大滤波器索引或索引等于0)的alf_luma_coeff_flag,并推导为真的。
e.可替换地,此外,当语法指示存在要信令通知的亮度ALF系数时,一致性比特流应满足一个亮度滤波器的至少一个系数不等于零。
f.可替换地,此外,当语法指示存在要信令通知的亮度ALF系数时,一致性比特流应满足信令通知至少一个亮度滤波器(例如,至少一个[sfIdx]为真)。
2.提出当ALF中的类别具有全部为零的ALF系数时,仍信令通知全部为零的ALF系数。
a.在一个示例中,可以为共享相同ALF系数的每对位置信令通知零值(例如,零)。例如,对于7*7对角ALF滤波器,可以信令通知12个零。
b.在一个示例中,ALF中不超过N个(N是非负整数)类别可以具有全部为零的ALF系数。例如,N。
3.提出当在APS中信令通知的亮度/色度ALF系数的所有类别都为零时,以下图片/条带/片/图块/CTU可以不使用这样的亮度/色度ALF系数。
a.可替换地,此外,不允许在APS中用信号通知零ALF滤波器(例如,所有系数均为零)。
b.可替换地,此外,比特流一致性的要求是,在APS中信令通知的亮度/色度ALF系数应包含至少一个非零系数。例如,当亮度/色度ALF系数仅包含零系数时,应指出(例如,通过或/>),APS中不存在亮度/色度ALF系数。
4.将用于指示至少一个CTU/CTB以启用的环路滤波方法(例如,SAO/ALF)进行编解码的开/关控制标志从条带级别(例如,)移除到视频单元级,并且视频单元小于条带(例如,图块/片级别)。
a.在一个示例中,对于每个图块/片,可以编解码标志以指示环路滤波方法是否应用于图块/片中的至少一个样点。
b.在一个示例中,用于指示至少一个CTU/CTB以应用的环路滤波方法进行编解码的条带级别开/关控制标志(例如,slice_alf_enabled_flag)被在图块/片级别信令通知的标志所替代。
c.在一个示例中,用于指示至少一个CTU/CTB以应用的环路滤波方法进行编解码的条带级别开/关控制标志(例如,slice_alf_enabled_flag)保持不变,并且当此标志为真时,可以进一步信令通知图块/片级别的开/关控制标志。
5.可以将ALF滤波器的信令简化为两部分,例如,第一部分以指示其是从固定滤波器还是ALF APS中预测或选择的;第二部分是到固定滤波器/ALF APS的索引。
a.在一个示例中,可以信令通知标志以指示滤波器是否是从固定滤波器中预测的。
i.可替换地,可以信令通知标志以指示滤波器是否是从ALF APS预测的。
ii.可替换地,可以信令通知/解析标志以指示确定的滤波器是否是从固定的ALF滤波器中选择的。
iii.可替代地,可以信令通知/解析标志以指示确定的滤波器是否是从ALF APS中选择的。
iv.可替换地,此外,在用于颜色分量(例如,亮度)的ALF APS的数量大于0(或不等于0)的条件下可以信令通知/解析这样的标志。
a)在一个示例中,当用于颜色分量(例如,亮度)的ALF APS的数量等于0时,不信令通知/解析此标志,并且可以总是推断出使用了固定的ALF滤波器。
v.在一个示例中,该标志可以是上下文编解码的或旁路编解码的。
a)在一个示例中,可以仅利用一个上下文。
b)可替换地,可以利用一个以上的上下文。
a.可替代地,此外,上下文建模可以取决于相邻CTB的信息。
b.可替换地,此外,上下文建模可以取决于当前CTB的信息,诸如当前CTB的位置。
c.可替换地,此外,上下文建模可以取决于解码的信息,诸如条带/图片类型。
b.可替换地,此外,取决于标志,可以信令通知或解析到固定滤波器或ALF APS的索引。
i.在一个示例中,是否信令通知ALF APS索引可以进一步取决于用于当前条带/片/图块的所允许的ALF APS的数量。
a)可替换地,当用于当前条带/片/图块的所允许的ALF APS的数量大于1时,可以信令通知索引。否则,当用于当前条带/片/图块的所允许的ALF APS的数量等于1时,可以不信令通知索引,并且使用单个ALF APS。
ii.在一示例中,可以信令通知ALF APS索引的指示。
a)在一个示例中,可以利用截断的一元方法来进行信令通知。可替代地,此外,将最大值设置为用于当前条带/片/图块的所允许的ALF APS的数量减去K(例如,K=0或1)。
b)在一个示例中,可以利用截断的二进制方法来进行信令通知。可替代地,此外,将最大值设置为用于当前条带/片/图块的所允许的ALF APS的数量减去K(例如,K=0或1)。
iii.在一示例中,可以上下文编解码索引。
a)在一个示例中,可以对索引的二值化的二进制数字符的前K个二进制数进行上下文编解码,并且可以对其余二进制数进行旁路编解码(例如,K=1或基于ALF APS的数量)。
b)在一个示例中,所有二进制数都被旁路编解码。
6.可以在区域级别中信令通知/推导滤波方法(例如,SAO、双边滤波器、ALF)的开/关控制,其中可以至少根据图片分辨率和最大图片分辨率来确定区域尺寸。
a.可替换地,此外,该区域的尺寸对于图片是固定的,但是对于具有不同分辨率的不同图片可以是不同的。
b.在一个示例中,假设以亮度样点为单位的最大图片宽度和高度分别表示为maxW和maxH;以亮度样点为单位的当前图片宽度和高度分别表示为currW和currH。CTU/CTB的宽度和高度分别表示为ctbW和ctbH。由regW*regH表示的区域尺寸可以定义为:
i.可替代地,另外,可以在区域级别中信令通知/解析开/关控制标志和/或辅助信息(例如,从哪个固定滤波器预测的和/或从哪个ALF APS预测的)。
ii.在一个示例中,regW可以设置为(ctbW*currW/maxW)。
iii.在一个示例中,regH可以设置为(ctbH*currH/maxH)。
iv.在一个示例中,regW和/或regH可以进一步取决于当前CTB的分割结构。
a)可替代地,此外,其可以进一步取决于第一分割类型(例如,不划分(编解码为整个CTB)、四叉树划分、二叉树划分、三叉树划分)。
a.可替换地,此外,区域尺寸应不小于直接从CTB划分出的子CU。
b)在一个示例中,regW可以设置为ctbW*max(RW,currW/maxW)
c)在一个示例中,regH可以设置为ctbH*max(RH,currH/maxH)
d)在以上示例中,对于不划分的情况,RW和/或RH可以设置为1。
e)在以上示例中,对于四叉树划分的情况,RW和/或RH可以设置为1/2。
c.当对序列启用RPR时,可以启用以上方法。
7.一致性比特流应满足:当对序列/图片启用无损的编解码(例如,)时,NAL单元类型不应等于APS_NUT(即,自适应参数集)。
a.一致性比特流应满足:当对序列/图片启用无损的编解码(例如,)时,/>不应等于ALF_APS。
b.一致性比特流应满足:当对序列/图片启用无损的编解码(例如,)时,/>不应等于LMCS_APS。
c.一致性比特流应满足:当对序列/图片启用无损的编解码(例如,)时,/>不应等于SCALING_APS。
d.一致性比特流应满足:当为序列/图片启用无损的编解码(例如,)时,在序列/图片/条带/片/图块/CTU/子图片级别的用于一些工具的开/关控制标志(例如,由 表示的ALF/LMCS/JCCR)以及缩放列表呈现标志(例如,)应等于0。
i.可替换地,在对图片禁用无损的编解码的条件下可以信令通知用于那些工具的开/关控制标志和/或缩放列表呈现标志。
8.是否和/或如何应用以上方法可以是基于以下列出的一个或多个条件:
a.视频内容(例如,屏幕内容或自然内容)
b.在DPS/SPS/VPS/PPS/APS/图片标头/片标头/片组标头/最大编解码单元(LCU)/编解码单元(CU)/LCU行/LCU组/TU/PU块/视频编解码单元中信令通知的消息
c.CU/PU/TU/块/视频编解码单元的位置
d.当前块和/或其相邻块的解码信息
i.当前块和/或其相邻块的块维度/块形状
e.颜色格式的指示(例如4:2:0、4:4:4、RGB或YUV)
f.编解码树结构(例如双树或单树)
g.条带/片组类型和/或图片类型
h.颜色分量(例如,可以只应用于亮度分量和/或色度分量)
i.时域层ID
j.标准的配置文件/级别/等级
5.本技术的示例实施例
删除的部分用双粗体方括号括起来(例如[[a]]表示“a”已被删除),新添加的部分用双粗体大括号括起来(例如{{a}}表示“a”被添加)。此实施例在JVET-O2001-vE之上。
5.1.实施例#1
此实施例给出了关于如何用信令通知ALF APS中的ALF参数的一些示例。
7.3.2.15自适应环路滤波器数据语法
/>
/>
可替换地,可以应用以下:
/>
/>
7.4.3.14自适应环路滤波器数据语义
等于1规定信令通知亮度滤波器集合。
alf_luma_filter_signal_flag等于0规定不信令通知亮度滤波器集合。
等于1规定信令通知色度滤波器。
alf_chroma_filter_signal_flag等于0规定不信令通知色度滤波器。当ChromaArrayType等于0时,alf_chroma_filter_signal_flag应等于0。
规定不同的自适应环路滤波器数量的变量NumAlfFilters设置为等于25。
等于0规定将线性自适应环路滤波应用于亮度分量。alf_luma_clip_flag等于1规定可以将非线性自适应环路滤波应用于亮度分量。
加1规定能信令通知亮度系数的自适应环路滤波器类别的数量。alf_luma_num_filters_signalled_minus1的值应在0到NumAlfFilters-1的范围内(包括端值)。
[filtIdx]规定用于由filtIdx指示的滤波器类别的信令通知的自适应环路滤波器亮度系数delta的索引的范围从0到NumAlfFilters-1。当alf_luma_coeff_delta_idx[filtIdx]不存在时,推断为等于0。alf_luma_coeff_delta_idx[filtIdx]的长度为Ceil(Log2(alf_luma_num_filters_signalled_minus1+1))比特。
等于1指示信令通知了alf_luma_coeff_flag[sfIdx]。alf_luma_coeff_signalled_flag等于0指示未信令通知alf_luma_coeff_flag[sfIdx]。/>
[sfIdx]等于1规定信令通知了由sfIdx指示的亮度滤波器的系数。alf_luma_coeff_flag[sfIdx]等于0规定由sfIdx指示的亮度滤波器的所有滤波器系数都设置为0。不存在时,alf_luma_coeff_flag[sfIdx]设置等于1。]]
[sfIdx][j]规定由sfIdx指示的信令通知的亮度滤波器的第j个系数的绝对值。如果alf_luma_coeff_abs[sfIdx][j]不存在,则将其推断为等于0。
exp-Golomb二值化uek(v)的阶数k等于3。
[sfIdx][j]规定由sfIdx指示的滤波器的第j个亮度系数的符号,如下所示:
-如果alf_luma_coeff_sign[sfIdx][j]等于0,则对应的亮度滤波器系数为正值。
-否则(alf_luma_coeff_sign[sfIdx][j]等于1),对应的亮度滤波器系数为负值。
当alf_luma_coeff_sign[sfIdx][j]不存在时,则推断为等于0。
具有sfIdx=0..alf_luma_num_filters_signalled_minus1,j=0..11的变量filtCoeff[sfIdx][j]的初始化如下:
filtCoeff[sfIdx][j]=alf_luma_coeff_abs[sfIdx][j]* (7-47)
(1-2*alf_luma_coeff_sign[sfIdx][j])
具有元素AlfCoeffL[adaption_parameter_set_id][filtIdx][j]且lultIdx=0..NumAlfFilters-1和j=0..11的亮度滤波器系数AlfCoeffL[adaptation_parameter_set_id]的推导如下:
AlfCoeffL[adaptation_parameter_set_id][filtIdx][j]=filtCoeff[alf_luma_coeff_delta_idx[filtIdx]][j](7-48)
5.2实施例#2
此实施例给出了关于如何信令通知用于亮度CTB的ALF参数的示例。
/>
/>
[[等于1规定使用了具有adaptive_parameter_set_id等于slice_alf_aps_id_luma[0]的APS中的滤波器信息。
alf_ctb_use_first_aps_flag等于0规定亮度CTB不使用具有adaptive_parameter_set_id等于slice_alf_aps_id_luma[0]的APS中的滤波器信息。当alf_ctb_use_first_aps_flag不存在时,则推断其等于0。]]
等于0规定将固定滤波器集合之一应用于亮度CTB。alf_use_aps_flag等于1规定将来自APS的滤波器集合应用于亮度CTB。在alf_use_aps_flag不存在时,则将其推断为等于0。
加1]]规定将先前的滤波器应用于亮度CTB。alf_luma_prev_filter_idx[[_minus1]]的值应在0到slice_num_alf_aps_ids_luma-{{1}}[[2]]的范围内(包括端值)。当alf_luma_prev_filter_idx[[_minus1]]不存在时,则将其推断为等于0。
变量AlfCtbFiltSetIdxY[xCtb>>CtbLog2SizeY][yCtb>>CtbLog2SizeY]规定如下推导在位置(xCtb,yCtb)处的用于亮度CTB的滤波器集合索引:
-[[如果alf_ctb_use_first_aps_flag等于1,则将AlfCtbFiltSetIdxY[xCtb>>CtbLog2SizeY][yCtb>>CtbLog2SizeY]设置为等于16。
-否则,]]如果alf_use_aps_flag等于0,则将AlfCtbFiltSetIdxY[xCtb>>CtbLog2SizeY][yCtb>>CtbLog2SizeY]设置为等于alf_luma_fixed_filter_idx。
-否则,将AlfCtbFiltSetIdxY[xCtb>>CtbLog2SizeY][yCtb>>CtbLog2SizeY]设置为等于{{16+alf_luma_prev_filter_idx}}[[17+alf_luma_prev_filter_idx_minus1]]。
规定将固定的滤波器应用于亮度CTB。alf_luma_fixed_filter_idx的值应在0到15的范围内(包括端值)。
表9-77–语法元素和关联的二值化
图9是示出其中可以实施本文所公开的各种技术的视频处理系统900的示例的框图。各种实现方式可以包括系统900的一些或全部组件。系统900可以包括用于接收视频内容的输入902。可以以原始或未压缩的格式(例如,8或10比特多分量像素值)或者可以以压缩或编码的格式来接收视频内容。输入902可以代表网络接口、外围总线接口或存储接口。网络接口的示例包括有线接口(例如以太网、无源光网络(PON)等),无线接口诸如可以是Wi-Fi或蜂窝接口。
系统900可以包括编解码组件904,其可实现本申请文件中所描述的各种编解码或编码方法。编解码组件904可以降低从输入902到编解码组件904的输出的视频的平均比特率,以产生视频的编解码表示。因此,编解码技术有时被称为视频压缩或视频转码技术。编解码组件904的输出可以被存储,也可以通过连接的通信进行传输,如组件906所示。输入902处接收的视频的存储或传输的比特流(或编解码)表示可由组件908用于生成像素值或发送到显示接口910的可显示视频。从比特流表示生成用户可观看视频的过程有时称为视频解压缩。此外,尽管某些视频处理操作被称为“编解码”操作或工具,但应当理解的是,编解码工具或操作被用于编码器处,并且逆向编解码结果的对应的解码工具或操作将由解码器执行。
外围总线接口或显示接口的示例可以包括通用串行总线(USB)或高清晰度多媒体接口(HDMI)或显示端口等。存储接口的示例包括SATA(串行高级技术附件)、PCI、IDE接口等。本文中所述的技术可实施在各种电子设备中,例如移动电话、笔记本电脑、智能手机或其他能够执行数字数据处理和/或视频显示的设备。
图10是视频处理装置1000的框图。装置1000可以用于实现本文描述的一种或多种方法。装置1000可以实施在智能手机、平板电脑、计算机、物联网(IoT)接收器等之中。装置1000可以包括一个或多个处理器1002、一个或多个存储器1004和视频处理硬件1006。(多个)处理器1002可以配置成实现本申请文件中描述的一种或多种方法。(多个)存储器1004可以用于存储用于实现本文描述的方法和技术的数据和代码。视频处理硬件1006可以用于在硬件电路中实现本申请文件中描述的一些技术。在一些实现方式中,硬件1006可以完全或部分地在处理器1002中实现,例如图形处理器。
图11是视频处理的示例方法的流程图。方法1100包括,在操作1110,对于视频的当前区域与视频的比特流表示之间的转换,确定在转换期间是否使用了亮度自适应环路滤波器,以及在比特流表示中是否包括亮度自适应环路滤波器系数,使得比特流表示中的单个语法元素指示亮度自适应环路滤波器的使用和亮度自适应环路滤波器系数的信令。
方法1100包括,在操作1120,基于确定来执行转换。
图12是视频处理的示例方法的流程图。方法1200包括,在操作1210,执行视频的当前区域与视频的比特流表示之间的转换,使得在转换期间使用自适应环路滤波器,并且比特流表示符合语法规则,该语法规则规定在比特流表示中信令通知的自适应环路滤波器的系数包括零值的自适应环路滤波器系数。
图13是视频处理的示例方法的流程图。方法1300包括,在操作1310,对于视频的当前区域与视频的比特流表示之间的转换,确定在转换中不使用在比特流表示中信令通知的该视频的先前区域的零值的自适应环路滤波器系数。
方法1300包括,在操作1320,基于确定来执行转换。
图14是视频处理的示例方法的流程图。方法1400包括,在操作1410,执行视频的当前区域与视频的比特流表示之间的转换,使得比特流表示符合语法规则,该语法规则规定指示是否将环路滤波用于该转换的标志被包括在包括当前区域的视频单元级别的比特流表示中,该视频单元级别小于视频的条带级别。
图15是视频处理的示例方法的流程图。方法1500包括,在操作1510,执行视频的当前区域与视频的比特流表示之间的转换,使得该转换包括使用自适应环路滤波器,并且比特流表示被配置为使用两部分信令来指示自适应环路滤波器,该两部分信令包括指示确定自适应环路滤波器的技术的第一部分和指示该技术使用的索引的第二部分。
图16是视频处理的示例方法的流程图。方法1600包括,在操作1610,基于视频的属性,确定共享共用环路滤波器设置的视频的当前区域的尺寸,共用环路滤波器设置用于当前区域与视频的比特流表示之间的转换。
方法1600包括,在操作1620,基于确定来执行转换。
图17是视频处理的示例方法的流程图。方法1700包括,在操作1710,执行视频的当前区域与视频的比特流表示之间的无损的转换,使得比特流表示符合语法规则,该语法规则由于转换是无损的而限制比特流表示中的与当前区域相关联的语法字段的值。
在一些实施例中,以下解决方案可以被实现为优选的技术解决方案。
A1.一种视频处理方法,包括:对于视频的当前区域与视频的比特流表示之间的转换,确定在转换期间是否使用亮度自适应环路滤波器以及在比特流表示中是否包括亮度自适应环路滤波器系数,其中,在比特流表示中的单个语法元素指示亮度自适应环路滤波器的使用和亮度自适应环路滤波器系数的信令;以及基于确定来执行转换。
A2.根据解决方案A1的方法,其中,单个语法元素为单值,指示具有特定索引的亮度自适应环路滤波器系数被信令通知,并且其中单个语法元素为零值,指示具有特定索引的亮度自适应环路滤波器系数从比特流表示中被排除。
A3.根据解决方案A2的方法,其中,单个语法元素是alf_luma_coeff_flag,并且其中,特定索引表示为sfIdx。
A4.根据解决方案A1至A3中的任一项的方法,其中,单个语法元素排除alf_luma_coeff_signalled_flag。
A5.根据解决方案A1的方法,其中,单个语法元素为单值,指示具有特定索引的亮度自适应滤波器的使用的指示,并且其中单个语法元素为零值,指示具有特定索引的亮度自适应滤波器的使用的指示从比特流表示中被排除。
A6.根据解决方案A5的方法,其中,单个语法元素是alf_luma_coeff_signalled_flag,并且其中,特定索引表示为sfIdx。
A7.根据解决方案A1的方法,其中,基于是否需要信令通知至少一个亮度自适应环路滤波器,在比特流表示中有条件地信令通知亮度自适应环路滤波器系数。
A8.根据解决方案A7的方法,其中,以与用于多个亮度自适应环路滤波器的滤波器索引相反的顺序来信令通知用于多个亮度自适应环路滤波器的亮度自适应环路滤波器系数。
A9.根据解决方案A1的方法,还包括:保持计数器以确定在比特流表示中编解码的亮度自适应环路滤波器的数量。
A10.根据解决方案A1的方法,其中,在信令通知指示亮度自适应环路滤波器的信令的单个语法元素时,比特流表示包括至少一个非零的亮度自适应环路滤波器系数。
A11.根据解决方案A1的方法,中,在信令通知指示亮度自适应环路滤波器系数的信令的单个语法元素时,比特流表示包括至少一个亮度自适应环路滤波器。
A12.根据解决方案A1至A11中的任一项的方法,其中,亮度自适应环路滤波器系数是亮度自适应环路滤波器(ALF)系数。
A13.一种视频处理方法,包括:执行视频的当前区域与视频的比特流表示之间的转换,其中,在转换期间使用自适应环路滤波器,并且其中比特流表示符合语法规则,语法规则规定在比特流表示中信令通知的自适应环路滤波器的系数包括零值的自适应环路滤波器系数。
A14.根据解决方案A13的方法,其中,语法规则规定信令通知用于自适应环路滤波器系数的单个零值的系数,自适应环路滤波器系数由于对称性而共享系数值。
A15.根据解决方案A14的方法,其中,对于7×7菱形自适应环路滤波器,信令通知12个零值的系数。
A16.根据解决方案A13的方法,其中,语法规则规定将具有零值的自适应环路滤波器系数的自适应环路滤波器的数量限制为数量N,并且其中,N是非负整数。
A17.根据解决方案A16的方法,其中,N=1。
A18.一种视频处理方法,包括:对于视频的当前区域与视频的比特流表示之间的转换,确定在转换中不使用在比特流表示中信令通知的视频的先前区域的零值的自适应环路滤波器系数;以及基于确定来执行转换。
A19.根据解决方案A18的方法,其中,当前区域对应于亮度区域。
A20.根据解决方案A18的方法,其中,当前区域对应于色度区域。
A21.根据解决方案A18至A20中的任一项的方法,其中,当前区域对应于图片、条带、片、图块或编解码树单元(CTU)。
A22.根据解决方案A18的方法,其中,在不同于自适应参数集(APS)的参数集中信令通知零值的自适应环路滤波器系数。
A23.一种视频处理方法,包括:执行视频的当前区域与视频的比特流表示之间的转换,其中,比特流表示符合语法规则,语法规则规定指示是否将环路滤波用于转换的标志被包括在包括当前区域的视频单元级别的比特流表示中,视频单元级别小于视频的条带级别。
A24.根据解决方案A23的方法,其中,当前区域是视频的编解码树单元(CTU)或编解码树块(CTB)。
A25.根据解决方案A23或24的方法,其中,视频单元级别对应于图块级别。
A26.根据解决方案A23或24的方法,其中,视频单元级别对应于片级别。
A27.根据解决方案A23至A26中的任一项的方法,其中,环路滤波包括自适应环路滤波(ALF)或采样自适应偏移(SAO)滤波。
A28.根据解决方案A23至A27中的任一项的方法,其中,比特流表示包括视频单元标志,以指示将环路滤波应用于视频单元级别的视频单元中的至少一个样点。
A29.根据解决方案A1至A28中的任一项的方法,其中,执行转换包括从当前区域生成比特流表示。
A30.根据解决方案A1至A28中的任一项的方法,其中,执行转换包括从比特流表示生成当前区域。
A31.一种视频系统中的装置,包括处理器和其上具有指令的非暂时性存储器,其中,指令在由处理器执行时使处理器实现根据解决方案A1至A30中的任一项的方法。
A32.一种存储在非暂时性计算机可读介质上的计算机程序产品,该计算机程序产品包括用于执行根据解决方案A1到A30中的任一项的程序代码。
A33.一种计算机可读介质,该计算机可读介质存储根据解决方案A1到A30中的任一项的方法生成的比特流表示。
在一些实施例中,以下附加解决方案可以被实现为优选技术解决方案。
B1.一种视频处理方法,包括:执行视频的当前区域与视频的比特流表示之间的转换,其中,转换包括使用自适应环路滤波器,并且其中,比特流表示被配置为使用两部分信令来指示自适应环路滤波器,两部分信令包括:指示确定自适应环路滤波器的技术的第一部分,以及指示技术使用的索引的第二部分。
B2.根据解决方案B1的方法,其中,技术包括:从固定滤波器集合中进行选择或者从至少一个自适应环路滤波器(ALF)自适应参数集(APS)中进行选择。
B3.根据解决方案B2的方法,其中,比特流表示包括零值的标志,零值的标志指示从固定滤波器集合中选择自适应环路滤波器的滤波器集合。
B4.根据解决方案B2或B3的方法,其中,比特流表示包括单值的标志,单值的标志指示从至少一个ALF APS中选择自适应环路滤波器的滤波器集合。
B5.根据解决方案B2的方法,其中,比特流表示包括标志,标志指示用于当前区域的颜色分量的ALF APS的数量大于零。
B6.根据解决方案B5的方法,其中,颜色分量是视频的亮度分量。
B7.根据解决方案B2的方法,其中,在用于当前区域的颜色分量的ALF APS的数量为零时,比特流表示排除指示从至少一个ALF APS中选择自适应环路滤波器的标志,并且其中,推断标志指示从固定滤波器集合中选择自适应环路滤波器。
B8.根据解决方案B3至B7中的任一项的方法,其中,标志是上下文编解码的或旁路编解码的。
B9.根据解决方案B3或B4的方法,其中,索引的值是基于标志。
B10.根据解决方案B4的方法,其中,是否在比特流表示中信令通知索引是基于针对当前区域的所允许的ALF APS的数量。
B11.根据解决方案B10的方法,其中,在针对当前区域的所允许的ALF APS的数量大于1时,在比特流表示中信令通知索引。
B12.根据解决方案B10的方法,其中,在针对当前区域的所允许的ALF APS的数量等于1时,从比特流表示中排除索引。
B13.根据解决方案B10至B12中的任一项的方法,其中,当前区域包括条带、片或砖块。
B14.根据解决方案B4的方法,其中,在比特流表示中信令通知至少一个ALF APS的索引的指示。
B15.根据解决方案B14的方法,其中,指示是利用截断一元方法编解码的。
B16.根据解决方案B14的方法,其中,指示是利用截断二进制方法编解码的。
B17.根据解决方案B15或B16的方法,其中,指示的最大值被设置为针对当前区域所允许的ALF APS的数量减去K,并且其中,K是整数。
B18.根据解决方案B17的方法,其中,K=0或K=1。
B19.根据解决方案B1的方法,索引是上下文编解码的。
B20.根据解决方案B19的方法,其中,索引的二值化的二进制数字符的前K个二进制是上下文编解码的,并且索引的二值化的二进制数字符的其余二进制数是旁路编解码的,并且其中,K是整数。
B21.根据解决方案B20的方法,其中,K=1。
B22.根据解决方案B19的方法,其中,索引的二值化的二进制数字符的多个二进制数中的每个二进制数是旁路编解码的。
B23.根据解决方案B1至B22中的任一项的方法,其中,自适应环路滤波器(ALF)是被应用为转换的一部分并且由比特流表示中的自适应参数集(APS)的参数来控制的滤波过程。
B24.根据解决方案B1到B23中的任何一个的方法,其中,自适应参数集(APS)是语法结构,语法结构包括应用于视频的零或多个条带的一个或多个语法元素,视频的零或多个条带由对应于零或多个条带的条带标头中的一个或多个语法元素确定。
B25.一种视频处理方法,包括:基于视频的属性,确定共享共用环路滤波器设置的视频的当前区域的尺寸,共用环路滤波器设置用于当前区域与视频的比特流表示之间的转换;以及基于确定来执行转换。
B26.根据解决方案B25的方法,其中,属性是包括当前区域的图片的分辨率。
B27.根据解决方案B25的方法,其中,属性是包括当前区域的图片的最大分辨率。
B28.根据解决方案B25的方法,其中,将图片的最大尺寸的亮度样点中的宽度和亮度样点中的高度分别表示为maxW和maxH,其中,将包括当前区域的当前图片的尺寸的亮度样点中的宽度和亮度样点中的高度分别表示为currW和currH,其中,将当前编解码树单元(CTU)或当前编解码树块(CTB)的尺寸的宽度和高度分别表示为ctbW和ctbH,并且其中将当前区域的尺寸的宽度和高度分别表示为regW和regH。
B29.根据解决方案B28的方法,其中,regW=(ctbW×currW/maxW)。
B30.根据解决方案B28的方法,其中,regH=(ctbH×currH/maxH)。
B31.根据解决方案B28的方法,其中,regW或regH是基于当前CTB或当前CTU的分割结构。
B32.一种视频处理方法,包括:执行视频的当前区域与视频的比特流表示之间的无损的转换,其中,比特流表示符合语法规则,语法规则由于转换是无损的而限制比特流表示中的与当前区域相关联的语法字段的值。
B33.根据解决方案B32的方法,其中,语法规则规定网络抽象层(NAL)单元类型不等于自适应参数集(APS)的NAL单元类型。
B34.根据解决方案B32的方法,其中,语法规则规定语法字段的值不同于自适应环路滤波器(ALF)自适应参数集(APS)中的一个或多个值。
B35.根据解决方案B32的方法,其中,语法规则规定语法字段的值不同利用色度缩放亮度映射(LMCS)自适应参数集(APS)中的一个或多个值。
B36.根据解决方案B32的方法,其中,语法规则规定语法字段的值不同于缩放列表自适应参数集(APS)中的一个或多个值。
B37.根据解决方案B1到B36中任一项的方法,其中,执行转换还基于以下中的至少一个或多个:(a)视频内容,(b)在解码器参数集(DPS)、序列参数集(SPS)、视频参数集(VPS)、图片参数集(PPS)、自适应参数集(APS)、图片标头、条带标头、片组标头、最大编解码单元(LCU)、LCU行、LCU组、变换单元(TU)、预测单元(PU)或视频编解码单元中信令通知的消息,(c)在包括当前区域的当前图片中的编解码单元(CU)、TU、PU、当前块或视频编解码单元的位置,(d)当前区域的解码信息,(e)视频的颜色格式的指示,(f)编解码树结构,(g)条带类型、片组类型或图片类型,(h)视频的颜色分量,(i)时域层ID,以及(j)标准的配置文件、级别或等级。
B38.根据解决方案B1至B37中的任一项的方法,其中,执行转换包括从当前区域生成比特流表示。
B39.根据解决方案B1至B37中的任一项的方法,其中,执行转换包括从比特流表示生成当前区域。
B40.一种视频系统中的装置,包括处理器和其上具有指令的非暂时性存储器,其中,指令在由处理器执行时使处理器实现根据解决方案B1至B39中的任一项的方法。
B41.一种存储在非暂时性计算机可读介质上的计算机程序产品,该计算机程序产品包括用于执行根据解决方案B1到B39中的任一项的方法的程序代码。
B42.一种计算机可读介质,该计算机可读介质存储根据解决方案B1至B39中的任一项的方法生成的比特流表示。
在以上解决方案中,执行转换包括在编码或解码操作期间使用先前决定步骤的结果(例如,使用或不使用某些编码或解码步骤)以得到转换结果。在上述解决方案中,视频处理可以包括视频编解码或编码或压缩或代码转换(从一种格式或比特率改变为另一种格式或比特率)、解码或解压缩。此外,这些解决方案可以应用于诸如图像的其他视觉数据。
本申请文件中描述的所公开的和其他解决方案、示例、实施例、模块和功能操作能在数字电子电路、或计算机软件、固件或硬件中实现,包括本说明书中所公开的结构及其结构等效体,或其中一个或多个的组合。所公开的和其他实施例能够实现为一个或多个计算机程序产品,即编解码在有形的且非易失的计算机可读介质上的计算机程序指令的一个或多个模块,以供数据处理装置执行或控制数据处理装置的操作。计算机可读介质可以是机器可读存储设备、机器可读存储基板、存储设备、影响机器可读传播信号的物质组成或其中一个或其中多个的组合。术语“数据处理单元”或“数据处理装置”包括用于处理数据的所有装置、设备和机器,包括例如可编程处理器、计算机或多处理器或计算机组。除硬件外,该装置还可以包括为计算机程序创建执行环境的代码,例如,构成处理器固件的代码、协议栈、数据库管理系统、操作系统或其中一个或多个的组合。传播的信号是人为生成的信号,例如,机器生成的电、光或电磁信号,其被生成以编解码信息以传输到合适的接收器设备。
计算机程序(也称为程序、软件、软件应用、脚本或代码)可以用任何形式的编程语言(包括编译语言或解释语言)编写,并且可以以任何形式部署,包括作为独立程序或作为模块、组件、子程序或其他适合在计算环境中使用的单元。计算机程序不一定与文件系统中的文件对应。程序可以存储在保存其他程序或数据的文件的部分中(例如,存储在标记语言文档中的一个或多个脚本)、专用于该程序的单个文件中、或多个协调文件(例如,存储一个或多个模块、子程序或部分代码的文件)中。计算机程序可以部署在一台或多台计算机上来执行,这些计算机位于一个站点上或分布在多个站点上,并通过通信网络互连。
本申请文件中描述的过程和逻辑流可以通过一个或多个可编程处理器执行,该处理器执行一个或多个计算机程序,通过在输入数据上操作并生成输出来执行功能。处理和逻辑流也可以通过特殊用途的逻辑电路来执行,并且装置也可以实现为特殊用途的逻辑电路,例如,FPGA(现场可编程门阵列)或ASIC(专用集成电路)。
例如,适于执行计算机程序的处理器包括通用和专用微处理器,以及任何类型数字计算机的任何一个或多个。通常,处理器将从只读存储器或随机存取存储器或两者接收指令和数据。计算机的基本元件是执行指令的处理器和存储指令和数据的一个或多个存储设备。通常,计算机还将包括一个或多个用于存储数据的大容量存储设备,例如,磁盘、磁光盘或光盘,或通过操作耦合到一个或多个大容量存储设备来从其接收数据或将数据传输到一个或多个大容量存储设备,或两者兼有。然而,计算机不一定具有这样的设备。适用于存储计算机程序指令和数据的计算机可读介质包括所有形式的非易失性存储器、介质和存储器设备,包括例如半导体存储器设备,例如EPROM、EEPROM和闪存设备;磁盘,例如,内部硬盘或可移动硬盘;磁光盘;以及CD ROM和DVD ROM盘。处理器和存储器可以由专用逻辑电路来补充,或合并到专用逻辑电路中。
虽然本专利文件包含许多细节,但不应将其解释为对任何发明或权利要求范围的限制,而应解释为对特定发明的特定实施例的特征的描述。本专利文件在单独实施例的上下文描述的某些特征也可以在单个实施例中组合实施。相反,在单个实施例的上下文中描述的各种功能也可以在多个实施例中单独实施,或在任何合适的子组合中实施。此外,尽管上述特征可以描述为在某些组合中起作用,甚至最初要求是这样,但在某些情况下,可以从组合中移除权利要求组合中的一个或多个特征,并且权利要求的组合可以指向子组合或子组合的变体。
同样,尽管附图中以特定顺序描述了操作,但这不应理解为要获得想要的结果必须按照所示的特定顺序或顺序执行此类操作,或执行所有说明的操作。此外,本专利文件所述实施例中各种系统组件的分离不应理解为在所有实施例中都需要这样的分离。
仅描述了一些实现和示例,可以基于本专利文件中描述和说明的内容做出其他实现、增强和变体。

Claims (46)

1.一种处理视频数据的方法,包括:
对于视频的当前区域和所述视频的比特流之间的转换,基于第一语法元素确定亮度自适应环路滤波器组是否包括在所述比特流中;
仅基于所述第一语法元素指示所述亮度自适应环路滤波器组包括在所述比特流中,针对所述亮度自适应环路滤波器组的每一自适应环路滤波器类别,确定所述亮度自适应环路滤波器系数包括在所述比特流中;以及
基于所述确定,执行所述转换,
其中,从所述比特流中省略指示所述亮度自适应环路滤波器系数是否包括在所述比特流中的第二语法元素。
2.根据权利要求1所述的方法,其中,每个自适应环路滤波器类别被分配有由sfIdx表示的特定索引,sfIdx的值的范围是从0到亮度自适应环路滤波器组中的自适应环路滤波器类别的数量减1。
3.根据权利要求2所述的方法,其中,所述亮度自适应环路滤波器系数包括由sfIdx指示的自适应环路滤波器类别的第j个系数的绝对值或由sfIdx指示的自适应环路滤波器类别的第j个系数的符号中的至少一个,其中j是整数变量。
4.根据权利要求1所述的方法,其中,当所述自适应环路滤波器类别具有全零亮度自适应环路滤波器系数时,所述全零亮度自适应环路滤波器系数仍包括在所述比特流中。
5.根据权利要求4所述的方法,其中,共享相同亮度自适应环路滤波器系数的每对位置的零绝对值包括在所述比特流中。
6.根据权利要求5所述的方法,其中,所述自适应环路滤波器类别是7×7菱形自适应环路滤波器,并且12个零绝对值系数被包括在所述比特流中。
7.根据权利要求1所述的方法,其中,所述转换包括将所述视频编码成所述比特流。
8.根据权利要求1所述的方法,其中,所述转换包括从所述比特流中解码所述视频。
9.一种用于处理视频数据的装置,包括处理器和其上具有指令的非暂时性存储器,其中所述指令在由所述处理器执行时使得所述处理器:
对于视频的当前区域和所述视频的比特流之间的转换,基于第一语法元素确定亮度自适应环路滤波器组是否包括在所述比特流中;
仅基于所述第一语法元素指示所述亮度自适应环路滤波器组包括在所述比特流中,针对所述亮度自适应环路滤波器组的每一自适应环路滤波器类别,确定所述亮度自适应环路滤波器系数包括在所述比特流中;以及
基于所述确定,执行所述转换,
其中,从所述比特流中省略指示所述亮度自适应环路滤波器系数是否包括在所述比特流中的第二语法元素。
10.根据权利要求9所述的装置,其中,每个自适应环路滤波器类别被分配有由sfIdx表示的特定索引,sfIdx的值的范围是从0到亮度自适应环路滤波器组中的自适应环路滤波器类别的数量减1;以及
其中,所述亮度自适应环路滤波器系数包括由sfIdx指示的自适应环路滤波器类别的第j个系数的绝对值或由sfIdx指示的自适应环路滤波器类别的第j个系数的符号中的至少一个,其中j是整数变量。
11.根据权利要求9所述的装置,其中,当所述自适应环路滤波器类别具有全零亮度自适应环路滤波器系数时,所述全零亮度自适应环路滤波器系数仍包括在所述比特流中;
其中,共享相同亮度自适应环路滤波器系数的每对位置的零绝对值包括在所述比特流中;以及
其中,所述自适应环路滤波器类别是7×7菱形自适应环路滤波器,并且12个零绝对值系数被包括在所述比特流中。
12.一种存储指令的非暂时性计算机可读存储介质,所述指令使得处理器:
对于视频的当前区域和所述视频的比特流之间的转换,基于第一语法元素确定亮度自适应环路滤波器组是否包括在所述比特流中;
仅基于所述第一语法元素指示所述亮度自适应环路滤波器组包括在所述比特流中,针对所述亮度自适应环路滤波器组的每一自适应环路滤波器类别,确定所述亮度自适应环路滤波器系数包括在所述比特流中;以及
基于所述确定,执行所述转换,
其中,从所述比特流中省略指示所述亮度自适应环路滤波器系数是否包括在所述比特流中的第二语法元素。
13.根据权利要求12所述的非暂时性计算机可读存储介质,其中,每个自适应环路滤波器类别被分配有由sfIdx表示的特定索引,sfIdx的值的范围是从0到亮度自适应环路滤波器组中的自适应环路滤波器类别的数量减1;以及
其中,所述亮度自适应环路滤波器系数包括由sfIdx指示的自适应环路滤波器类别的第j个系数的绝对值或由sfIdx指示的自适应环路滤波器类别的第j个系数的符号中的至少一个,其中j是整数变量。
14.根据权利要求12所述的非暂时性计算机可读存储介质,其中,当所述自适应环路滤波器类别具有全零亮度自适应环路滤波器系数时,所述全零亮度自适应环路滤波器系数仍包括在所述比特流中;
其中,共享相同亮度自适应环路滤波器系数的每对位置的零绝对值包括在所述比特流中;以及
其中,所述自适应环路滤波器类别是7×7菱形自适应环路滤波器,并且12个零绝对值系数被包括在所述比特流中。
15.一种用于存储视频的比特流的方法,包括:
对于视频的当前区域,基于第一语法元素确定亮度自适应环路滤波器组是否包括在所述比特流中;
仅基于所述第一语法元素指示所述亮度自适应环路滤波器组包括在所述比特流中,针对所述亮度自适应环路滤波器组的每一自适应环路滤波器类别,确定所述亮度自适应环路滤波器系数包括在所述比特流中;
基于所述确定来生成所述比特流;以及
将所述比特流存储在非暂时性计算机可读记录介质中,
其中,从所述比特流中省略指示所述亮度自适应环路滤波器系数是否包括在所述比特流中的第二语法元素。
16.一种视频处理方法,包括:
对于视频的当前区域与所述视频的比特流表示之间的转换,确定在所述转换期间是否使用亮度自适应环路滤波器以及在所述比特流表示中是否包括亮度自适应环路滤波器系数,其中,在所述比特流表示中的单个语法元素指示所述亮度自适应环路滤波器的使用和所述亮度自适应环路滤波器系数的信令;以及
基于所述确定来执行所述转换,
其中,从所述比特流表示中省略指示所述亮度自适应环路滤波器系数是否包括在所述比特流表示中的语法元素。
17.根据权利要求16所述的方法,其中,所述单个语法元素为单值,指示具有特定索引的所述亮度自适应环路滤波器系数被信令通知,并且其中所述单个语法元素为零值,指示具有所述特定索引的所述亮度自适应环路滤波器系数从所述比特流表示中被排除。
18.根据权利要求17所述的方法,其中,所述单个语法元素是alf_luma_coeff_flag,并且其中,所述特定索引表示为sfIdx。
19.根据权利要求16所述的方法,其中,所述单个语法元素不包括alf_luma_coeff_signalled_flag。
20.根据权利要求16所述的方法,其中,所述单个语法元素为单值,指示具有特定索引的所述亮度自适应滤波器的使用的指示,并且其中所述单个语法元素为零值,指示具有所述特定索引的所述亮度自适应滤波器的使用的指示从所述比特流表示中被排除。
21.根据权利要求20所述的方法,其中,所述单个语法元素是alf_luma_coeff_signalled_flag,并且其中,所述特定索引表示为sfIdx。
22.根据权利要求16所述的方法,其中,基于是否需要信令通知至少一个亮度自适应环路滤波器,在所述比特流表示中有条件地信令通知所述亮度自适应环路滤波器系数。
23.根据权利要求22所述的方法,其中,以与用于多个亮度自适应环路滤波器的滤波器索引相反的顺序来信令通知用于所述多个亮度自适应环路滤波器的所述亮度自适应环路滤波器系数。
24.根据权利要求16所述的方法,还包括:
保持计数器以确定在所述比特流表示中编解码的亮度自适应环路滤波器的数量。
25.根据权利要求16所述的方法,其中,在信令通知指示所述亮度自适应环路滤波器的信令的所述单个语法元素时,所述比特流表示包括至少一个非零的亮度自适应环路滤波器系数。
26.根据权利要求16所述的方法,其中,在信令通知指示所述亮度自适应环路滤波器系数的信令的所述单个语法元素时,所述比特流表示包括至少一个亮度自适应环路滤波器。
27.根据权利要求16至26中的任一项所述的方法,其中,所述亮度自适应环路滤波器系数是亮度自适应环路滤波器(ALF)系数。
28.一种视频处理方法,包括:
执行视频的当前区域与所述视频的比特流表示之间的转换,其中,在所述转换期间使用自适应环路滤波器,并且其中所述比特流表示符合语法规则,所述语法规则规定在所述比特流表示中信令通知的所述自适应环路滤波器的系数包括零值的自适应环路滤波器系数,
其中,从所述比特流表示中省略指示自适应环路滤波器系数是否包括在所述比特流表示中的语法元素。
29.根据权利要求28所述的方法,其中,所述语法规则规定信令通知用于自适应环路滤波器系数的单个零值的系数,所述自适应环路滤波器系数由于对称性而共享系数值。
30.根据权利要求29所述的方法,其中,对于7×7菱形自适应环路滤波器,信令通知12个零值的系数。
31.根据权利要求28所述的方法,其中,所述语法规则规定将具有零值的自适应环路滤波器系数的自适应环路滤波器的数量限制为数量N,并且其中,N是非负整数。
32.根据权利要求31所述的方法,其中,N=1。
33.一种视频处理方法,包括:
对于视频的当前区域与所述视频的比特流表示之间的转换,确定在所述转换中不使用在所述比特流表示中信令通知的所述视频的先前区域的零值的自适应环路滤波器系数;以及
基于所述确定来执行所述转换。
34.根据权利要求33所述的方法,其中,所述当前区域对应于亮度区域。
35.根据权利要求33所述的方法,其中,所述当前区域对应于色度区域。
36.根据权利要求33至35中的任一项所述的方法,其中,所述当前区域对应于图片、条带、片、图块或编解码树单元(CTU)。
37.根据权利要求33所述的方法,其中,在不同于自适应参数集(APS)的参数集中信令通知所述零值的自适应环路滤波器系数。
38.一种视频处理方法,包括:
执行视频的当前区域与所述视频的比特流表示之间的转换,其中,所述比特流表示符合语法规则,所述语法规则规定指示是否将环路滤波用于所述转换的标志被包括在包括所述当前区域的视频单元级别的所述比特流表示中,所述视频单元级别小于所述视频的条带级别,
其中,从比特流表示中省略指示环路滤波器系数是否包括在所述比特流表示中的语法元素。
39.根据权利要求38所述的方法,其中,所述当前区域是所述视频的编解码树单元(CTU)或编解码树块(CTB)。
40.根据权利要求38或39所述的方法,其中,所述视频单元级别对应于图块级别。
41.根据权利要求38或39所述的方法,其中,所述视频单元级别对应于片级别。
42.根据权利要求38至39中的任一项所述的方法,其中,所述环路滤波包括自适应环路滤波(ALF)或采样自适应偏移(SAO)滤波。
43.根据权利要求38至39中的任一项所述的方法,其中,所述比特流表示包括视频单元标志,以指示将所述环路滤波应用于所述视频单元级别的视频单元中的至少一个样点。
44.根据权利要求16、28、33和38中任一项所述的方法,其中,执行所述转换包括从所述当前区域生成所述比特流表示。
45.根据权利要求16、28、33和38中任一项所述的方法,其中,执行所述转换包括从所述比特流表示生成所述当前区域。
46.一种视频系统中的装置,包括处理器和其上具有指令的非暂时性存储器,其中,所述指令在由所述处理器执行时使所述处理器实现根据权利要求22至45中的任一项所述的方法。
CN202080065752.XA 2019-09-18 2020-09-18 视频编解码中自适应环路滤波器的信令使用 Active CN114424540B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
CN2019106420 2019-09-18
CNPCT/CN2019/106420 2019-09-18
PCT/CN2020/116084 WO2021052452A1 (en) 2019-09-18 2020-09-18 Signaling usage of adaptive loop filter in video coding

Publications (2)

Publication Number Publication Date
CN114424540A CN114424540A (zh) 2022-04-29
CN114424540B true CN114424540B (zh) 2023-12-29

Family

ID=74883900

Family Applications (3)

Application Number Title Priority Date Filing Date
CN202080065895.0A Pending CN114424529A (zh) 2019-09-18 2020-09-18 视频编解码中自适应环路滤波器的两部分信令
CN202311511214.0A Pending CN117294847A (zh) 2019-09-18 2020-09-18 视频编解码中自适应环路滤波器的两部分信令
CN202080065752.XA Active CN114424540B (zh) 2019-09-18 2020-09-18 视频编解码中自适应环路滤波器的信令使用

Family Applications Before (2)

Application Number Title Priority Date Filing Date
CN202080065895.0A Pending CN114424529A (zh) 2019-09-18 2020-09-18 视频编解码中自适应环路滤波器的两部分信令
CN202311511214.0A Pending CN117294847A (zh) 2019-09-18 2020-09-18 视频编解码中自适应环路滤波器的两部分信令

Country Status (7)

Country Link
US (3) US11601686B2 (zh)
EP (1) EP4014485A4 (zh)
JP (2) JP7323711B2 (zh)
KR (1) KR20220058899A (zh)
CN (3) CN114424529A (zh)
BR (1) BR112022005046A2 (zh)
WO (2) WO2021052452A1 (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
BR112022005046A2 (pt) 2019-09-18 2022-07-05 Beijing Bytedance Network Tech Co Ltd Método de processamento de dados de vídeo, aparelho para processar dados de vídeo, meio de armazenamento não transitório legível por computador e meio de gravação não transitório legível por computador
AU2020354926A1 (en) * 2019-09-24 2022-04-07 Huawei Technologies Co., Ltd. Decoded picture buffer operation for resolution changes
CN117337568A (zh) * 2021-03-26 2024-01-02 抖音视界有限公司 用于视频处理的方法、设备和介质
CN117256140A (zh) * 2021-04-12 2023-12-19 抖音视界有限公司 导向滤波器的使用

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102804776A (zh) * 2010-05-10 2012-11-28 联发科技股份有限公司 自适应回路滤波方法和装置
CN103081467A (zh) * 2010-09-01 2013-05-01 高通股份有限公司 用于多滤波器自适应滤波的滤波器描述信令
WO2016204373A1 (ko) * 2015-06-18 2016-12-22 엘지전자 주식회사 영상 코딩 시스템에서 영상 특성에 기반한 적응적 필터링 방법 및 장치

Family Cites Families (53)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2988503A1 (en) * 2010-01-14 2016-02-24 Dolby Laboratories Licensing Corporation Buffered adaptive filters
US20120039383A1 (en) * 2010-08-12 2012-02-16 Mediatek Inc. Coding unit synchronous adaptive loop filter flags
US9247258B2 (en) 2011-10-26 2016-01-26 Qualcomm Incorporated Unified design for picture partitioning schemes
US9077998B2 (en) 2011-11-04 2015-07-07 Qualcomm Incorporated Padding of segments in coded slice NAL units
CN103796015A (zh) * 2012-10-31 2014-05-14 朱洪波 系数数目自适应的量化参数差分编码
US10321130B2 (en) 2013-01-07 2019-06-11 Vid Scale, Inc. Enhanced deblocking filters for video coding
US9473779B2 (en) 2013-03-05 2016-10-18 Qualcomm Incorporated Parallel processing for video coding
US9628792B2 (en) 2013-07-15 2017-04-18 Qualcomm Incorporated Cross-layer parallel processing and offset delay parameters for video coding
WO2015043501A1 (en) 2013-09-27 2015-04-02 Qualcomm Incorporated Residual coding for depth intra prediction modes
US9807406B2 (en) 2014-03-17 2017-10-31 Qualcomm Incorporated Picture flushing and decoded picture buffer parameter inference for multi-layer bitstreams
US9591325B2 (en) 2015-01-27 2017-03-07 Microsoft Technology Licensing, Llc Special case handling for merged chroma blocks in intra block copy prediction mode
US10057574B2 (en) * 2015-02-11 2018-08-21 Qualcomm Incorporated Coding tree unit (CTU) level adaptive loop filter (ALF)
WO2016204531A1 (ko) * 2015-06-16 2016-12-22 엘지전자(주) 블록 경계에 따라 적응적으로 필터링을 수행하는 방법 및 장치
WO2017045101A1 (en) 2015-09-14 2017-03-23 Mediatek Singapore Pte. Ltd. Advanced deblocking filter in video coding
EP3371974B1 (en) 2015-11-06 2024-05-01 Microsoft Technology Licensing, LLC Flexible reference picture management for video encoding
US11064195B2 (en) 2016-02-15 2021-07-13 Qualcomm Incorporated Merging filters for multiple classes of blocks for video coding
US10887621B2 (en) 2016-07-08 2021-01-05 Vid Scale, Inc. 360-degree video coding using geometry projection
US11095922B2 (en) 2016-08-02 2021-08-17 Qualcomm Incorporated Geometry transformation-based adaptive loop filtering
US20180184127A1 (en) 2016-12-22 2018-06-28 Qualcomm Incorporated Determining neighboring samples for bilateral filtering in video coding
US10506230B2 (en) * 2017-01-04 2019-12-10 Qualcomm Incorporated Modified adaptive loop filter temporal prediction for temporal scalability support
CN110692249A (zh) 2017-04-11 2020-01-14 Vid拓展公司 使用面部连续性的360度视频编码
US10778974B2 (en) 2017-07-05 2020-09-15 Qualcomm Incorporated Adaptive loop filter with enhanced classification methods
US10728573B2 (en) 2017-09-08 2020-07-28 Qualcomm Incorporated Motion compensated boundary pixel padding
EP3685585A1 (en) 2017-09-20 2020-07-29 Vid Scale, Inc. Handling face discontinuities in 360-degree video coding
US10965941B2 (en) 2017-10-09 2021-03-30 Qualcomm Incorporated Position-dependent prediction combinations in video coding
EP3704858A1 (en) 2017-11-01 2020-09-09 Vid Scale, Inc. Methods for simplifying adaptive loop filter in video coding
EP3704857A1 (en) 2017-11-01 2020-09-09 VID SCALE, Inc. Overlapped block motion compensation
CN107801024B (zh) 2017-11-09 2019-07-12 北京大学深圳研究生院 一种用于帧内预测的边界滤波方法
US10721469B2 (en) 2017-11-28 2020-07-21 Qualcomm Incorporated Line buffer reduction for adaptive loop filtering in video coding
CN111713111B (zh) 2017-12-19 2024-04-09 Vid拓展公司 用于360度视频译码的面不连续性滤波
CN111527751A (zh) 2017-12-29 2020-08-11 夏普株式会社 用于在用于视频编码的图片的边界处划分视频块的系统和方法
US10972729B2 (en) 2018-01-20 2021-04-06 Qualcomm Incorporated Deblocking filter selection and application in video coding
US20190238845A1 (en) 2018-01-26 2019-08-01 Qualcomm Incorporated Adaptive loop filtering on deblocking filter results in video coding
WO2019157717A1 (zh) 2018-02-14 2019-08-22 北京大学 运动补偿的方法、装置和计算机系统
US11470359B2 (en) 2018-03-30 2022-10-11 Sharp Kabushiki Kaisha Systems and methods for partitioning video blocks at a boundary of a picture for video coding
US10708592B2 (en) 2018-04-02 2020-07-07 Qualcomm Incorporated Deblocking filter for video coding and processing
US20190306502A1 (en) 2018-04-02 2019-10-03 Qualcomm Incorporated System and method for improved adaptive loop filtering
CN116055732A (zh) 2018-09-14 2023-05-02 华为技术有限公司 视频译码方法,设备以及非瞬时性计算机可读介质
CN112913247B (zh) 2018-10-23 2023-04-28 北京字节跳动网络技术有限公司 使用局部照明补偿的视频处理
CN113302930A (zh) 2019-01-09 2021-08-24 华为技术有限公司 视频译码中的时间运动约束子图像指示
WO2020143824A1 (en) 2019-01-13 2020-07-16 Beijing Bytedance Network Technology Co., Ltd. Interaction between lut and shared merge list
MX2021010337A (es) 2019-02-27 2021-09-28 Huawei Tech Co Ltd Un codificador, un decodificador y metodos correspondientes.
CN113519164A (zh) 2019-03-02 2021-10-19 北京字节跳动网络技术有限公司 对分割结构的限制
WO2020182620A1 (en) 2019-03-08 2020-09-17 Canon Kabushiki Kaisha An adaptive loop filter
EP4358036A2 (en) 2019-03-11 2024-04-24 Huawei Technologies Co., Ltd. Interpolation filter clipping for sub-picture motion vectors
CN117499644A (zh) 2019-03-14 2024-02-02 北京字节跳动网络技术有限公司 环路整形信息的信令和语法
AU2020248837B2 (en) 2019-03-24 2023-06-08 Beijing Bytedance Network Technology Co., Ltd. Nonlinear adaptive loop filtering in video processing
CN113678462B (zh) 2019-04-15 2023-01-10 北京字节跳动网络技术有限公司 自适应环路滤波器中的裁剪参数推导
CN113767623B (zh) 2019-04-16 2024-04-02 北京字节跳动网络技术有限公司 用于视频编解码的自适应环路滤波
US11368684B2 (en) 2019-04-23 2022-06-21 Qualcomm Incorporated Adaptation parameter sets (APS) for adaptive loop filter (ALF) parameters
CN117221538A (zh) 2019-07-08 2023-12-12 Lg电子株式会社 解码和编码设备、数据发送设备及计算机可读存储介质
US11451834B2 (en) 2019-09-16 2022-09-20 Tencent America LLC Method and apparatus for cross-component filtering
BR112022005046A2 (pt) 2019-09-18 2022-07-05 Beijing Bytedance Network Tech Co Ltd Método de processamento de dados de vídeo, aparelho para processar dados de vídeo, meio de armazenamento não transitório legível por computador e meio de gravação não transitório legível por computador

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102804776A (zh) * 2010-05-10 2012-11-28 联发科技股份有限公司 自适应回路滤波方法和装置
CN106331709A (zh) * 2010-05-10 2017-01-11 寰发股份有限公司 采用回路内处理来处理视频的方法和装置
CN103081467A (zh) * 2010-09-01 2013-05-01 高通股份有限公司 用于多滤波器自适应滤波的滤波器描述信令
WO2016204373A1 (ko) * 2015-06-18 2016-12-22 엘지전자 주식회사 영상 코딩 시스템에서 영상 특성에 기반한 적응적 필터링 방법 및 장치
CN107750459A (zh) * 2015-06-18 2018-03-02 Lg电子株式会社 图像编码系统中的基于图像特性的自适应滤波方法和装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
Benjamin Bross.Versatile Video Coding (Draft 6).《Joint Video Experts Team (JVET)》.2019,正文7.4.3.14. *

Also Published As

Publication number Publication date
US11683531B2 (en) 2023-06-20
US20220217340A1 (en) 2022-07-07
CN114424540A (zh) 2022-04-29
EP4014485A1 (en) 2022-06-22
US11601686B2 (en) 2023-03-07
WO2021052453A1 (en) 2021-03-25
US20220210478A1 (en) 2022-06-30
CN117294847A (zh) 2023-12-26
KR20220058899A (ko) 2022-05-10
WO2021052452A1 (en) 2021-03-25
BR112022005046A2 (pt) 2022-07-05
JP2022548296A (ja) 2022-11-17
US20230336788A1 (en) 2023-10-19
CN114424529A (zh) 2022-04-29
JP2023153166A (ja) 2023-10-17
JP7323711B2 (ja) 2023-08-08
EP4014485A4 (en) 2022-10-26

Similar Documents

Publication Publication Date Title
CN113678464B (zh) 非线性自适应环路滤波器中的参数的时域预测
CN113316931B (zh) 视频处理中的脉冲编解码调制技术
WO2021083257A1 (en) Cross-component adaptive loop filter
CN114424540B (zh) 视频编解码中自适应环路滤波器的信令使用
WO2020228717A1 (en) Block dimension settings of transform skip mode
CN113767627B (zh) 基于二次变换的视频处理中的裁剪操作
CN115066899A (zh) 编解码视频的可分二次变换处理
CN113826405B (zh) 多个颜色分量的变换量化旁路模式的使用
CN117596400A (zh) 编解码块的缩放过程
CN113994696A (zh) 编解码视频中的块尺寸相关的二次变换的使用
US20230328294A1 (en) Filter parameter signaling in video picture headers
CN114391255B (zh) 用于基于交叉分量相关性来减小视频编码中的重构误差的系统和方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant