CN114402601A - 色度去块滤波的量化参数偏移 - Google Patents

色度去块滤波的量化参数偏移 Download PDF

Info

Publication number
CN114402601A
CN114402601A CN202080064523.6A CN202080064523A CN114402601A CN 114402601 A CN114402601 A CN 114402601A CN 202080064523 A CN202080064523 A CN 202080064523A CN 114402601 A CN114402601 A CN 114402601A
Authority
CN
China
Prior art keywords
video
block
chroma
offset
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202080064523.6A
Other languages
English (en)
Other versions
CN114402601B (zh
Inventor
朱维佳
张莉
许继征
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
ByteDance Inc
Original Assignee
ByteDance Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ByteDance Inc filed Critical ByteDance Inc
Publication of CN114402601A publication Critical patent/CN114402601A/zh
Application granted granted Critical
Publication of CN114402601B publication Critical patent/CN114402601B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117Filters, e.g. for pre-processing or post-processing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124Quantisation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/132Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136Incoming video signal characteristics or properties
    • H04N19/14Coding unit complexity, e.g. amount of activity or edge presence estimation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/174Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a slice, e.g. a line of blocks or a group of blocks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/189Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding
    • H04N19/196Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding being specially adapted for the computation of encoding parameters, e.g. by averaging previously computed encoding parameters
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/86Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computing Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

视频处理的示例方法包括执行在视频的色度分量块和视频的比特流表示之间的转换。在转换期间,去块滤波过程被应用于沿块的边缘的至少一些样点,并且其中色度量化参数(QP)偏移被添加到来自色度QP表的输出,以确定去块滤波过程的参数。

Description

色度去块滤波的量化参数偏移
相关申请的交叉引用
根据适用的专利法和/或《巴黎公约》的规则,本申请旨在及时要求2019年9月14日提交的国际专利申请号PCT/CN2019/105831的优先权和权益。出于法律规定的所有目的,上述申请的全部公开内容作为本申请公开内容的一部分通过引用结合于此。
技术领域
本专利文件涉及视频编解码技术、设备和系统。
背景技术
目前,正在努力提高当前视频编解码器技术的性能,以提供更好的压缩比或提供允许较低复杂度或并行实现的视频编解码和解码方案。行业专家最近提出了几种新的视频编解码工具,目前正在进行测试以确定它们的有效性。
发明内容
描述了与数字视频编码相关的设备、系统和方法,特别是与运动向量管理相关的设备、系统和方法。所描述的方法可以应用于现有的视频编解码标准(例如,高效视频编解码(HEVC)或通用视频编解码)和未来的视频编解码标准或视频编解码器。
在一个代表性方面,所公开的技术可以用于提供视频处理的方法。该方法包括执行在视频的色度分量的块和视频的比特流表示之间的转换。在转换期间,去块滤波过程被选择性地应用于沿块边缘的样点,并且色度量化参数(QP)偏移被添加到来自色度QP表的输出,以确定去块滤波过程的参数。
在另一代表性方面,所公开的技术可以用于提供视频处理的方法。该方法包括,对于视频的色度分量的块和视频的比特流表示之间的转换,根据规则,基于包括边缘一侧的样点的第一视频区域的第一量化信息和/或包括边缘另一侧的样点的第二视频区域的第二量化信息,确定是否或如何对块的边缘应用滤波处理。该规则基于适用于块的编解码模式,为了对边缘的一侧的样点或另一侧的样点进行编解码。该规则规定使用不同的视频单元级的多个QP偏移来确定第一量化信息或第二量化信息。该方法还包括基于该确定来执行转换。
在另一代表性方面,所公开的技术可以用于提供视频处理的方法。该方法包括对于视频的当前块和视频的比特流表示之间的转换,根据视频单元的级的语法元素,确定是否启用当前块的色度量化参数(QP)偏移的使用。视频单元包括视频的当前块和第二块。
在另一代表性方面,所公开的技术可以用于提供视频处理的方法。该方法包括执行在包括第一色度分量和第二色度分量的视频和视频的比特流表示之间的转换。根据规则,使用编解码模式在比特流表示中联合编解码第一色度分量的第一色度块和第二色度分量的第二色度块的残差。该规则规定为了转换导出量化参数(QP)的方式独立于编解码模式。
在另一代表性方面,所公开的技术可以用于提供视频处理的方法。该方法包括执行在视频的第一块和视频的比特流表示之间的转换。视频具有多颜色分量的颜色格式,并且第一块与视频的第一颜色分量相关联。在转换期间,沿第一块的边缘对至少一些样点应用去块滤波过程。该方法还包括执行在与视频的剩余颜色分量和视频的比特流表示相关联的块之间的后续转换。在后续转换期间,以与第一块的转换相同的方式将去块滤波过程应用于沿每个块的边缘的至少一些样点。
在另一代表性方面,所公开的技术可以用于提供视频处理的方法。该方法包括对于视频和视频的比特流表示之间的转换,确定视频的两个块之间的边界的边界强度。不管两个块中的任何一个是否以色度残差的联合编解码(JCCR)模式被编解码,该边界强度被确定。该方法还包括基于该确定来执行转换。
在另一代表性方面,所公开的技术可以用于提供视频处理的方法。该方法包括对于视频和视频的比特流表示之间的转换,确定第一块和第二块之间的边界的边界强度。执行该确定,且无需将第一块的信息与第二块的对应的信息进行比较。该信息包括参考图片和/或对应的块的运动向量的数量,并且边界强度用于确定去块滤波过程是否适用于边界。该方法还包括基于该确定来执行转换。
在另一代表性方面,所公开的技术可以用于提供视频处理的方法。该方法包括对于视频的视频块和视频的比特流表示之间的转换,根据规则确定用于对视频块应用去块滤波的量化参数(QP)。该规则规定在使用变换跳过(TS)模式对视频块进行编解码的情况下,对该确定使用第一QP,在变换跳过模式中,通过跳过应用变换,视频块的残差被编解码在比特流表示中。在使用非变换跳过模式编解码视频块的情况下,对该确定使用不同于第一QP的第二QP,在非变换跳过模式中,视频块的残差在应用变换之后被编解码在比特流表示中。该方法还包括基于该确定来执行转换。
在另一代表性方面,所公开的技术可以用于提供视频处理的方法。该方法包括对于视频的视频块和视频的比特流表示之间的转换,根据规则确定为了确定去块滤波过程对视频块的边缘的至少一些样点的适用性的梯度。该规则规定确定梯度的方式独立于视频块的尺寸。该方法还包括基于该确定来执行转换。
在另一代表性方面,所公开的技术可以用于提供视频处理的方法。该方法包括执行在视频单元和视频单元的比特流表示之间的转换,其中,在转换期间,在视频单元的边界上使用去块滤波器,使得当使用色度量化参数(QP)表来导出去块滤波器的参数时,对各个色度QP值执行色度QP表的处理。
在另一代表性方面,所公开的技术可以用于提供另一种视频处理方法。该方法包括执行在视频单元和视频单元的比特流表示之间的转换,其中,在转换期间,在视频单元的边界上使用去块滤波器,使得在去块滤波器中使用色度QP偏移,其中色度QP偏移处于图片/条带/片/图块/子图片级。
在另一代表性方面,所公开的技术可以用于提供另一种视频处理方法。该方法包括执行在视频单元和视频单元的比特流表示之间的转换,其中,在转换期间,在视频单元的边界上使用去块滤波器,使得在去块滤波器中使用色度QP偏移,其中,在去块滤波器中并且为了导出色度QP偏移,使用与相同亮度编解码单元相关的信息。
在另一代表性方面,所公开的技术可以用于提供另一种视频处理方法。该方法包括执行在视频单元和视频单元的比特流表示之间的转换,其中,在转换期间,在视频单元的边界上使用去块滤波器,使得在去块滤波器中使用色度QP偏移,其中在比特流表示中信令通知启用色度QP偏移的使用的指示。
在另一代表性方面,所公开的技术可以用于提供另一种视频处理方法。该方法包括执行在视频单元和视频单元的比特流表示之间的转换,其中在转换期间,在视频单元的边界上使用去块滤波器,使得在去块滤波器中使用色度QP偏移,其中对于在视频单元的边界上应用JCCR编解码方法还是在视频单元的边界上应用不同于JCCR编解码方法的方法,在去块滤波器中使用的色度QP偏移是相同的。
在另一代表性方面,所公开的技术可以用于提供另一种视频处理方法。该方法包括执行在视频单元和视频单元的比特流表示之间的转换,其中,在转换期间,在视频单元的边界上使用去块滤波器,使得在去块滤波器中使用色度QP偏移,其中,计算去块滤波器的边界强度(BS),且无需将与在P侧边界处的视频单元相关联的参考图片和/或运动向量(MV)的数量与在Q侧边界处的视频单元的参考图片进行比较。
此外,在代表性方面,公开了一种视频系统中的装置,该装置包括处理器和其上具有指令的非暂时性存储器。由处理器执行的指令使得处理器实现任何一个或多个所公开的方法。
此外,在一个代表性方面,一种视频解码设备包括被配置为实现所公开的方法中的任何一种或多种的处理器。
在另一代表性方面,一种视频编码设备包括被配置为实现所公开的方法中的任何一种或多种的处理器。
此外,公开了一种存储在非暂时性计算机可读介质上的计算机程序产品,该计算机程序产品包括用于执行任何一个或多个所公开的方法的程序代码。
在附图、说明书和权利要求书中更详细地描述了所公开技术的上述和其他方面和特征。
附图说明
图1显示了分块去块滤波(blocking deblocking filter process)过程的整体处理流程的示例。
图2显示了Bs计算的流程图的示例。
图3显示了CTU边界处的Bs计算的参考信息的示例。
图4显示了涉及滤波器开/关决策和强/弱滤波器选择的像素的示例。
图5显示了VVC中的去块滤波过程的整体处理流程的示例。
图6显示了VVC中的亮度去块滤波过程示例。
图7显示了VVC中的色度去块滤波过程的示例
图8显示了子PU边界的滤波器长度确定的示例。
图9A显示了色度块的中心位置的示例。
图9B显示了色度块的中心位置的另一个示例。
图10显示了P侧和Q侧处的块的示例。
图11显示了亮度块的解码信息的使用的示例。
图12是用于实现本文档中描述的视觉媒体解码或视觉媒体编码技术的硬件平台的示例的块图。
图13显示了用于视频编解码的示例方法的流程图。
图14是其中可以实现公开的技术的示例视频处理系统的块图。
图15是根据本技术的视频处理的方法的流程图表示。
图16是根据本技术的另一种视频处理的方法的流程图。
图17是根据本技术的另一种视频处理的方法的流程图。
图18是根据本技术的另一种视频处理的方法的流程图。
图19是根据本技术的另一种视频处理的方法的流程图。
图20是根据本技术的另一种视频处理的方法的流程图。
图21是根据本技术的另一种视频处理的方法的流程图。
图22是根据本技术的另一种视频处理的方法的流程图。
图23是根据本技术的另一种视频处理的方法的流程图。
图24是显示示例视频编解码系统的块图。
图25是显示根据本公开的一些实施例的编码器的块图。
图26是显示根据本公开的一些实施例的解码器的块图。
具体实施方式
1.HEVC/H.265中的视频编解码
视频编解码标准主要通过众所周知的ITU-T和ISO/IEC标准的发展而演变。ITU-T生产了H.261和H.263,ISO/IEC生产了MPEG-1和MPEG-4视频,并且这两个组织联合生产了H.262/MPEG-2视频和H.264/MPEG-4高级视频编解码(AVC)和H.265/HEVC标准。自H.262以来,视频编解码标准基于混合视频编解码结构,其中利用了时域预测加变换编解码。为了探索HEVC以外的未来视频编解码技术,VCEG和MPEG于2015年联合成立了联合视频探索团队(JVET)。此后,许多新的方法被JVET所采用,并被放入名为联合探索模型(JEM)的参考软件中。2018年4月,VCEG(Q6/16)和ISO/IEC JTC1 SC29/WG11(MPEG)成立了联合视频专家小组(JVET),致力于VVC标准,目标是与HEVC相比比特率降低50%。
2.1.HEVC中的去块方案
以与解码处理相同的顺序对每个CU执行去块滤波处理。首先,滤波垂直边缘(水平滤波),然后滤波水平边缘(垂直滤波)。对于亮度和色度分量,滤波应用于确定要滤波的8×8块边界。为了降低复杂度,不处理4×4块边界。
图1示出了去块滤波过程的整体处理流程。边界可以有三种滤波状态:不滤波、弱滤波和强滤波。每个滤波决策都基于边界强度Bs,以及阈值β和tC。
滤波过程中可能涉及三种边界:CU边界、TU边界和PU边界。CU边界是CU的外边缘,由于CU边界始终也是TU边界或PU边界,因此总是涉及在滤波中。当PU形状为2NxN(N>4)且RQT深度等于1时,8×8块网格处的TU边界和CU内部每个PU之间的PU边界均涉及在滤波中。一个例外是,当PU边界在TU内部时,边界不会被滤波。
2.1.1.边界强度计算
一般来说,边界强度(Bs)反映了边界需要多强的滤波。如果Bs较大,应考虑强滤波。
将P和Q定义为滤波中涉及的块,其中P表示位于边界左侧(垂直边缘情况)或上方(水平边缘情况)的块,Q表示位于边界右侧(垂直边缘情况)或上方(水平边缘情况)的块。图2示出了如何基于帧内编解码模式、非零变换系数和运动信息的存在、参考图片、运动向量的数量和运动向量差来计算Bs值。
Bs是在4×4块的基础上计算的,但它被重新映射到一个8×8的网格。对应于由4×4网格中的一条线路组成的8个像素的两个Bs值的最大值被选择作为8×8网格中边界的Bs。
为了减少行缓冲存储器需求,仅对于CTU边界,左侧或上方的每第二块(4×4网格)中的信息被重新使用,如图3所示。
2.1.2.β和tC决策
分别基于P块和Q块的亮度量化参数QPP和QPQ,导出涉及滤波器开/关决策、强和弱滤波器选择以及弱滤波过程的阈值β和tC。用于导出β和tC的Q计算如下。
Q=((QPP+QPQ+1)>>1)。
如表1所示,基于Q导出变量β。如果Bs大于1,变量tC指定为表1,带有Clip3(0,55,Q+2)作为输入。否则(BS等于或小于1),变量tC被指定为表1,带有Q作为输入。
表1从输入Q导出阈值变量β和tC
Q 0 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18
β 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 6 7 8
t<sub>C</sub> 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 0 1
Q 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37
β 9 10 11 12 13 14 15 16 17 18 20 22 24 26 28 30 32 34 36
t<sub>C</sub> 1 1 1 1 1 1 1 1 2 2 2 2 3 3 3 3 4 4 4
Q 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55
β 38 40 42 44 46 48 50 52 54 56 58 60 62 64 64 64 64 64
t<sub>C</sub> 5 5 6 6 7 8 9 9 10 10 11 11 12 12 13 13 14 14
2.1.3.4条线路的滤波器开/关决策
滤波器开/关决策是以四条线路为单位进行的。图4示出了滤波器开/关决策中涉及的像素。前四行的两个红块中的6个像素用于确定4行的滤波器开/关。后4行的两个红块中的6个像素用于确定后4行的滤波器开/关。
如果dp0+dq0+dp3+dq3<β,则开启前四行的滤波,并应用强/弱滤波器选择过程。每个变量的导出如下。
dp0=|p2,0–2*p1,0+p0,0|,dp3=|p2,3–2*p1,3+p0,3|,dp4=|p2,4–2*p1,4+p0,4|,dp7=|p2,7–2*p1,7+p0,7|
dq0=|q2,0–2*q1,0+q0,0|,dq3=|q2,3–2*q1,3+q0,3|,dq4=|q2,4–2*q1,4+q0,4|,dq7=|q2,7–2*q1,7+q0,7|
如果不满足该条件,则不对前4行进行滤波。此外,如果满足该条件,则针对弱滤波过程导出dE、dEp1和dEp2。变量dE设置为等于1。如果dp0+dp3<(β+(β>>1))>>3,变量dEp1设置为等于1。如果dq0+dq3<(β+(β>>1))>>3,变量dEq1设置为等于1。
对于后四行,决策以与上面相同的方式做出。
2.1.4.4条线路的强/弱滤波器选择
在滤波器开/关决策中确定前四行滤波开启后,如果满足以下两个条件,则使用强滤波器对前四行进行滤波。否则,使用弱滤波器进行滤波。如图4所示,涉及的像素与用于滤波器开/关决策的像素相同。
1)2*(dp0+dq0)<(β>>2),|p30–p00|+|q00–q30|<(β>>3)and|p00–q00|<(5*tC+1)>>1
2)2*(dp3+dq3)<(β>>2),|p33–p03|+|q03–q33|<(β>>3)and|p03–q03|<(5*tC+1)>>1
同样,如果满足以下两个条件,则使用强滤波器滤波后4行。否则,使用弱滤波器进行滤波。
1)2*(dp4+dq4)<(β>>2),|p34–p04|+|q04–q34|<(β>>3)and|p04–q04|<(5*tC+1)>>1
2)2*(dp7+dq7)<(β>>2),|p37–p07|+|q07–q37|<(β>>3)and|p07–q07|<(5*tC+1)>>1
2.1.4.1.强滤波
对于强滤波,滤波后的像素值通过以下等式获得。值得注意的是,分别使用四个像素作为每个P和Q块的输入来修改三个像素。
p0’=(p2+2*p1+2*p0+2*q0+q1+4)>>3
q0’=(p1+2*p0+2*q0+2*q1+q2+4)>>3
p1’=(p2+p1+p0+q0+2)>>2
q1’=(p0+q0+q1+q2+2)>>2
p2’=(2*p3+3*p2+p1+p0+q0+4)>>3
q2’=(p0+q0+q1+3*q2+2*q3+4)>>3
2.1.4.2.弱滤波
让我们定义Δ如下。
Δ=(9*(q0–p0)–3*(q1–p1)+8)>>4
当abs(Δ)小于tC*10时,
Δ=Clip3(-tC,tC,Δ)
p0’=Clip1Y(p0+Δ)
q0’=Clip1Y(q0-Δ)
如果dEp1等于1,
Δp=Clip3(-(tC>>1),tC>>1,(((p2+p0+1)>>1)–p1+Δ)>>1)
p1’=Clip1Y(p1+Δp)
如果dEq1等于1,
Δq=Clip3(-(tC>>1),tC>>1,(((q2+q0+1)>>1)–q1–Δ)>>1)
q1’=Clip1Y(q1+Δq)
值得注意的是,对于每个P和Q块,分别使用三个像素作为输入来修改最大两个像素。
2.1.4.3.色度滤波
色度滤波的Bs继承自亮度。如果Bs>1或存在编解码的色度系数,则执行色度滤波。没有其他滤波决策。并且只有一个滤波器应用于色度。不使用色度的滤波器选择过程。滤波后的样点值p0’和q0’导出如下。
Δ=Clip3(-tC,tC,((((q0–p0)<<2)+p1–q1+4)>>3))
p0’=Clip1C(p0+Δ)
q0’=Clip1C(q0-Δ)。
2.2VVC中的去块方案
在VTM6中,去块滤波过程大多与HEVC相同。但是,添加了以下修改。
A)去块滤波器的滤波器强度取决于重构的样点的平均亮度水平。
B)去块tC表扩展和适应到10比特视频。
C)亮度的4×4网格去块。
D)更强的亮度去块滤波器。
E)更强的色度去块滤波器。
F)子块边界的去块滤波器。
G)适应较小运动差异的去块决策。
图5描绘了在VVC中针对编解码单元的去块滤波器过程的流程图。
2.2.1.取决于重构的平均亮度的滤波器强度
在HEVC中,去块滤波器的滤波器强度由变量β和tC控制,这两个变量是从平均量化参数qPL导出的。在VTM6中,如果该方法的SPS标志为真,则去块滤波器通过根据重构的样点的亮度的水平向qPL添加偏移来控制去块滤波器的强度。重构的亮度水平LL如下导出:
LL=((p0,0+p0,3+q0,0+q0,3)>>2)/(1<<bitDepth) (3-1)
其中,样点值pi,k和qi,k、其中i=0..3且k=0和3可以被导出。然后,LL用于基于SPS中信令通知的阈值来决策qpOffset偏移。之后,使用如下导出的qPL来导出β和tC
qPL=((QpQ+QpP+1)>>1)+qpOffset (3-2)
其中QpQ和QpP分别表示包含样点q0,0和p0,0的编解码单元的量化参数。在当前的VVC中,此方法仅适用于亮度去块过程。
2.2.2.亮度的4×4去块网格
HEVC对亮度和色度使用8×8去块网格。在VTM6中,引入了亮度边界的4×4网格去块,以处理来自矩形变换形状的分块伪影。4×4网格上的并行友好(friendly)亮度去块是通过将要去块的样点的数量限制为垂直亮度边界的每侧上的1个样点(其中一侧宽度为4或更小)或水平亮度边界的每侧上的1个样点(其中一侧高度为4或更小)来实现的。
2.2.3.亮度的边界强度导出
详细的边界强度导出见表2。顺序检查表2中的条件。
表2边界强度导出
Figure BDA0003545935980000101
Figure BDA0003545935980000111
Figure BDA0003545935980000121
2.2.4.更强的亮度的去块滤波器
当边界任一侧的样点属于大块时,该提议使用双线性滤波器。属于大块的样点定义为:垂直边的宽度>=32,并且水平边的高度>=32。
双线性滤波器如下所示。
i=0至Sp-1的块边界样点pi和j=0至Sq-1的qi(pi和qi遵循上述HEVC去块中的定义)然后由如下所示的线性插值代替:
—pi′=(fi*Middles,t+(64-fi)*Ps+32>>6),裁剪到pi±tcPDi
—qj′=(gj*Middles,t+(64-gj)*Qs+32>>6),裁剪到qj±tcPDj
其中tcPDi和tcPDj项是第2.2.5节中描述的位置相关裁剪,gj、fi、Middles,t、Ps和Qs给出如下:
Figure BDA0003545935980000122
Figure BDA0003545935980000131
2.2.5.亮度的去块控制
本小节介绍去块决策过程。
更宽-更强的亮度滤波器是仅当条件1、条件2和条件3都为真时才使用的滤波器。
条件1是“大块条件”。这种条件检测P侧和Q侧的样点是否属于大块,其分别用变量bSidePisLargeBlk和bSideQisLargeBlk表示。bSidePisLargeBlk和bSideQisLargeBlk的定义如下。
bSidePisLargeBlk=((边缘类型为垂直,并且p0属于宽度>=32的CU)||(边缘类型为水平,并且p0属于高度>=32的CU))?真:假
bSideQisLargeBlk=((边缘类型为垂直,并且q0属于宽度>=32的CU)||(边缘类型为水平,并且q0属于高度>=32的CU))?真:假
基于bSidePisLargeBlk和bSideQisLargeBlk,条件1定义如下。
条件1=(bSidePisLargeBlk||bSidePisLargeBlk)?真:假
接下来,如果条件1为真,将进一步检查条件2。首先,导出以下变量:
dp0、dp3,dq0、dq3首先如在HEVC中一样导出
if(p侧大于或等于32)
dp0=(dp0+Abs(p5,0-2*p4,0+p3,0)+1)>>1
dp3=(dp3+Abs(p5,3-2*p4,3+p3,3)+1)>>1
if(q侧大于或等于32)
dq0=(dq0+Abs(q5,0-2*q4,0+q3,0)+1)>>1
dq3=(dq3+Abs(q5,3-2*q4,3+q3,3)+1)>>1
dpq0、dpq3、dp、dq、d的如在HEVC中一样导出。
那么条件2定义如下。
条件2=(d<β)?真:假
其中d=dp0+dq0+dp3+dq3,如第2.1.4节所示。
如果条件1和条件2有效,则检查是否有任何块使用子块:
Figure BDA0003545935980000141
Figure BDA0003545935980000151
最后,如果条件1和条件2都有效,提议的去块方法将检查条件3(大块强滤波条件),其定义如下。
在条件3强滤波条件(StrongFilterCondition)中,导出了以下变量:
Figure BDA0003545935980000152
如在HEVC导出中一样,StrongFilterCondition=(dpq小于(β>>2),sp3+sq3小于(3*β>>5),Abs(p0-q0)小于(5*tC+1)>>1)?真:假
图6描述了亮度去块滤波过程的流程图。
2.2.6.色度的强去块滤波器
定义了以下色度的强去块滤波器:
p2′=(3*p3+2*p2+p1+p0+q0+4)>>3
p1′=(2*p3+p2+2*p1+p0+q0+q1+4)>>3
p0′=(p3+p2+p1+2*p0+q0+q1+q2+4)>>3
提议的色度滤波器在4×4色度样点网格上执行去块。
2.2.7.色度的去块控制
上述色度滤波器对8×8色度样点网格执行去块。色度强滤波器用于块边界的两侧。这里,当色度边缘的两侧都大于或等于8(以色度样点为单位)时,选择色度滤波器,并且满足以下具有三个条件的决策。第一个是边界强度和大块的决策。第二个和第三个基本上与HEVC亮度决策相同,分别是开/关决策和强滤波器决策。
图7描绘了色度去块滤波过程的流程图。
2.2.8.位置相关裁剪
该提议还引入了位置相关裁剪tcPD,其应用于亮度滤波过程的输出样点,涉及在边界处修改7、5和3个样点的强滤波器和长滤波器。假设量化误差分布,提议增加对于预期具有较高量化噪声的样点的裁剪值,因此预期重构的样点值与真实样点值的偏差较大。
根据第2.2节中描述的决策过程的结果,对于用提议的不对称滤波器滤波的每个P或Q边界,从Tc7和Tc3表中选择位置相关阈值表,作为边信息提供给解码器:
Tc7={6,5,4,3,2,1,1};
Tc3={6,4,2};
tcPD=(SP==3)?Tc3:Tc7;
tcQD=(SQ==3)?Tc3:Tc7;
对于用短对称滤波器滤波的P或Q边界,应用较低幅度的位置相关阈值:
Tc3={3,2,1};
定义阈值后,根据tcP和tcQ裁剪值对滤波后的p’i和q’i样点值进行裁剪:
p”i=clip3(p’i+tcPi,p’i–tcPi,p’i);
q”j=clip3(q’j+tcQj,q’j–tcQ j,q’j);
其中p’i和q’i是滤波后的样点值,p”i和q”j是裁剪后的输出样点值,并且tcPi和tcQi是从VVC tc参数和tcPD和tcQD导出的裁剪阈值。术语clip3是如在VVC指定的一样的裁剪功能。
2.2.9.子块去块调整
为了使用长滤波器和子块去块来实现并行友好去块,长滤波器被限制为在使用子块去块的侧最多修改5个样点,如针对长滤波器的亮度控制所示。此外,子块去块被调整,使得靠近CU或隐式TU边界的8×8网格上的子块边界被限制为每侧最多修改两个样点。
适用以下内容于未与CU边界对齐的子块边界。
Figure BDA0003545935980000171
其中等于0的边缘对应于CU边界,等于2或等于orthogonalLength-2的边缘对应于来自CU边界的子块边界8样点,等等。如果使用了TU的隐式划分,则隐式TU为真。图8显示了TU边界和子PU边界的确定过程的流程图。
当水平边界与CTU边界对齐时,水平边界的滤波限制针对亮度的Sp=3并且针对色度的Sp=1和Sq=1。
2.2.10.适应于较小运动差异的去块决策
当边界的各侧上的块之间的至少一个运动向量分量的差等于或大于1个样点的阈值时,HEVC能够对预测单元边界进行去块。在VTM6中,引入了半亮度样点的阈值,以消除源自运动向量差异较小的帧间预测单元之间的边界的去块伪影。
2.3.组合帧间和帧内预测(CIIP)
在VTM6中,当CU以Merge模式编解码时,如果CU包含至少64个亮度样点(即,CU宽度乘以CU高度等于或大于64),并且如果CU宽度和CU高度都小于128个亮度样点,则信令通知附加标志,以指示组合帧间/帧内预测(CIIP)模式是否应用于当前CU。顾名思义,CIIP预测将帧间预测信号与帧内预测信号相结合。使用应用于常规合并模式的相同帧间预测过程来导出CIIP模式下的帧间预测信号Pinter;并且帧内预测信号Pintra是在平面模式的常规帧内预测过程之后导出的。然后,使用加权平均来组合帧内和帧间预测信号,其中根据顶部和左侧临近块的编解码模式来计算权重值,如下所示:
–如果最上面的临近块(neighbor)可用并且是帧内编解码的,则将IsinatraTop设置为1,否则将IsinatraTop设置为0;
–如果左边的临近块可用并且是帧内编解码的,则将IsitraLeft设置为1,否则将IsitraLeft设置为0;
–如果(IsitraLeft+IsitraLeft)等于2,则wt设置为3;
–否则,如果(IsitRaleft+IsitRaleft)等于1,则wt设置为2;
–否则,将wt设置为1。
CIIP预测形成如下:
PCIIP=((4-wt)*Pinter+wt*Pintra+2)>>2
2.4.VTM-6.0中的色度QP表设计
在一些实施例中,使用色度QP表。在一些实施例中,信令机制被用于色度QP表,这使得能够灵活地为编码器提供针对SDR和HDR内容优化表的机会。它支持为Cb和Cr分量分别信令通知表格信号。提出的机制将色度QP表作为分段线性函数来信令通知。
2.5.变换跳过(TS)
如同在HEVC中一样,可以用变换跳过模式对块的残差进行编解码。为了避免语法编解码的冗余,当CU级MTS_CU_flag不等于0时,不信令通知变换跳过标志。变换跳过的块尺寸限制与JEM4中的MTS相同,这指示当块宽度和高度都等于或小于32时,变换跳过适用于CU。请注意,当为当前CU激活LFNST或MIP时,隐式MTS变换设置为DCT2。此外,当针对帧间编解码的块启用MTS时,隐式MTS仍然可以启用。
此外,对于变换跳过块,最小允许量化参数(QP)定义为6*(internalBitDepth–inputBitDepth)+4。
2.6.色度残差的联合编解码(JCCR)
在一些实施例中,色度残差被联合编解码。联合色度编解码模式的使用(激活)由TU级标志tu_joint_cbcr_residual_flag指示,并且所选模式由色度CBF隐式指示。如果TU的一个或两个色度CBF等于1,则标志tu_joint_cbcr_residual_flag g存在。在PPS和条带标头中,为联合色度残差编解码模式信令通知色度QP偏移值,以区别于为常规色度残差编解码模式信令通知的通常色度QP偏移值。这些色度QP偏移值用于为使用联合色度残差编解码模式编解码的那些块导出色度QP值。当TU中对应的联合色度编解码模式(表3中的模式2)处于活动状态时,该色度QP偏移会在该TU的量化和解码过程中被添加到应用的亮度导出的色度QP中。对于其他模式(表3中的模式1和3),色度QP的导出方式与传统Cb或Cr块相同。表3描绘了从传输的变换块中重构色度残差的过程。当该模式激活时,一个单联合色度残差块(表3中的resJointC[x][y])被信令通知,并且Cb的残差块(resCb)和Cr的残差块(resCr)是考虑诸如tu_cbf_cb、tu_cbf_cr和CSign的信息导出的,CSign是在条带标头中指定的符号值。
在编码器侧,联合色度分量如下所述导出。根据模式(上表中列出),resJointC{1,2}由编码器生成,如下所示:
·如果模式等于2(重构Cb=C,Cr=CSign*C的单残差),则联合残差根据下式确定
resJointC[x][y]=(resCb[x][y]+CSign*resCr[x][y])/2。
·否则,如果模式等于1(重构Cb=C,Cr=(CSign*C)/2的单残差),则根据以下公式确定联合残差
resJointC[x][y]=(4*resCb[x][y]+2*CSign*resCr[x][y])/5。
·否则(模式等于3,即单残差,重构Cr=C,Cb=(CSign*C)/2),联合残差根据下式确定
resJointC[x][y]=(4*resCr[x][y]+2*CSign*resCb[x][y])/5。
表3色度残差的重构。值CSign是符号值(+1或–1),其在条带头中被指定,resJointC[][]是传输的残差。
Figure BDA0003545935980000191
以上三种模式使用了不同的QP。对于模式2,应用在JCCR编解码的块的PPS中信令通知的QP偏移,而对于其他两种模式,不应用它,而是应用在非JCCR编解码的块的PPS中信令通知的QP偏移。
对应的规范如下:
8.7.1量化参数的导出过程
变量QpY导出如下:
QpY=((qPY_PRED+CuQpDeltaVal+64+2*QpBdOffsetY)%(64+QpBdOffsetY))-QpBdOffsetY(8-933)
亮度量化参数Qp′Y导出如下:
Qp′Y=QpY+QpBdOffsetY (8-934)
当ChromaArrayType不等于0且treeType等于SINGLE_TREE或DUAL_TREE_CHROMA时,适用以下内容:
–当treeType等于DUAL_TREE_CHROMA时,变量QpY被设置为等于覆盖亮度位置(xCb+cbWidth/2,yCb+cbHeight/2)的亮度编解码单元的亮度量化参数QpY
–变量qPCb、qPCr和qPCbCr导出如下:
qPiChroma=Clip3(-QpBdOffsetC,63,QpY) (8-935)
qPiCb=ChromaQpTable[0][qPiChroma] (8-936)
qPiCr=ChromaQpTable[1][qPiChroma] (8-937)
qPiCbCr=ChromaQpTable[2][qPiChroma] (8-938)
–Cb和Cr分量的色度量化参数Qp′Cb和Qp′Cr以及联合Cb-Cr编解码Qp′CbCr导出如下:
Qp′Cb=Clip3(-QpBdOffsetC,63,qPCb+pps_cb_qp_offset+slice_cb_qp_offset+CuQpOffsetCb)
+QpBdOffsetC (8-939)
Qp′Cr=Clip3(-QpBdOffsetC,63,qPCr+pps_cr_qp_offset+slice_cr_qp_offset+CuQpOffsetCr)
+QpBdOffsetC (8-940)
Qp′CbCr=Clip3(-QpBdOffsetC,63,qPCbCr+pps_cbcr_qp_offset+slice_cbcr_qp_offset+CuQpOffsetCbCr)
+QpBdOffsetC (8-941)
8.7.3变换系数的缩放过程
该过程的输入为:
–指定当前亮度变换块的左上角样点相对于当前图片的左上角亮度样点的亮度位置(xTbY,yTbY),
–指定变换块宽度的变量nTbW,
–指定变换块高度的变量nTbH,
–指定当前块的颜色分量的变量cIdx,
–指定当前颜色分量的比特深度的变量bitDepth。
该过程的输出是元素为d[x][y]的缩放变换系数的(nTbW)x(nTbH)阵列d。
量化参数qP导出如下:
–如果cIdx等于0,并且transform_skip_flag[xTbY][yTbY]等于0,
则适用以下内容:
P=Qp′Y (8-950)
–否则,如果cIdx等于0(并且transform_skip_flag[xTbY][yTbY]等于1),则适用以下内容:
qP=Max(QpPrimeTsMin,Qp′Y) (8-951)
–否则,如果TuCResMode[xTbY][yTbY]等于2,则适用以下内容:
qP=Qp′CbCr (8-952)
–否则,如果cIdx等于1,则适用以下内容:
qP=Qp′Cb (8-953)
–否则(cIdx等于2),适用以下内容:
qP=Qp′Cr (8-954)
3.现有实施方式的缺点
在细化运动向量期间,DMVR和BIO不涉及原始信号,这可能导致编解码块具有不准确的运动信息。此外,DMVR和BIO有时在运动细化后采用分数运动向量,而屏幕视频通常具有整数运动向量,这使得当前的运动信息更加不准确,并且使得编解码性能更差。
1.色度QP表和色度去块之间的交互可能存在问题,例如色度QP表应该应用于单独QP,而不是QP的加权和。
2.亮度去块滤波过程的逻辑对于硬件设计来说是复杂的。
3.边界强度导出的逻辑对软硬件设计来说都太复杂了。
4.在BS决策过程中,JCCR被与没有应用JCCT编解码的那些块分开处理。然而,JCCR只是对残差进行编解码的特殊方式。因此,这种设计可能会带来附加的复杂度,而没有明显的好处。
5.在色度边缘决策中,QpQ和QpP被设置为等于编解码单元的QpY值,该编解码单元包括分别包含样点q0,0和p0,0的编解码块。然而,在量化/去量化过程中,色度样点的QP是从覆盖当前色度CU的中心位置的对应的亮度样点的亮度块的QP导出的。启用双树时,亮度块的不同位置可能会导致不同的QP。因此,在色度去块过程中,错误的QP可能被用于滤波器决策。这种未对齐可能导致视觉伪影。示例如图9所示,包括图9(a)和图9(b)。在图9中,左侧(图9(a))是亮度块的对应的CTB分割,且右侧(图9(b))是双树下的色度CTB分割。当确定色度块(用CUc1表示)的QP时,首先导出CUc1的中心位置。然后,CUc1的中心位置的对应的亮度样点被识别,并且与覆盖对应的亮度样点的亮度CU相关联的亮度QP,即CUY3然后被利用以导出CUc1的QP。然而,当对所描绘的三个样点(用实心圆)进行滤波决策时,选择覆盖对应的三个样点的CU的QP。因此,对于第一、第二和第三色度样点(如图9(b)所示),分别利用CUY2、CUY3和CUY4的QP。也就是说,同一CU中的色度样点可能使用不同的QP进行滤波器决策,这可能导致错误的决策。
6.不同的图片级QP偏移(即,pps_joint_cbcr_qp_offset)被应用于JCCR编解码的块,其不同于应用于非JCCR编解码的块的Cb/Cr的图片级偏移(例如,pps_cb_qp_offset和pps_cr_qp_offset)。然而,在色度去块滤波器决策过程中,仅利用非JCCR编解码的块的那些偏移。缺少对编解码模式的考虑可能导致错误的滤波器决策。
7.TS和非TS编解码的块在去量化过程中采用不同的QP,这也可以在去块过程中考虑。
8.对于具有不同模式的JCCR编解码的块,在缩放过程(量化/去量化)中使用不同的QP。这样的设计并不一致。
4.示例技术和实施例
下面描述的详细实施例应该被认为是解释一般概念的示例。这些实施例不应被狭义地解释。此外,这些实施例可以以任何方式组合。
除了下面提到的DMVR和BIO之外,下面描述的方法还可以应用于其他解码器运动信息导出技术。
在下面的示例中,MVM[i].x和MVM[i].y表示在M(M是P或Q)侧的块的参考图片列表i(i是0或1)中运动向量的水平和垂直分量。Abs表示获取输入绝对值的运算,而“&&”和“||”表示逻辑运算AND和OR。参考图10,P可以表示P侧的样点,并且Q可以表示Q侧的样点。P侧和Q侧的块可以表示由虚线标记的块。
关于去块中的色度QP
1.当色度QP表用于导出控制色度去块的参数时(例如,在色度块边缘的决策过程中),色度QP偏移可以在应用色度QP表之后应用。
a.在一个示例中,色度QP偏移可以被添加到由色度QP表输出的值。
b.或者,色度QP偏移可以不被认为是色度QP表的输入。
c.在一个示例中,色度QP偏移可以是图片级或其他视频单元级(条带/片/图块/子图片)色度量化参数偏移(例如,说明书中的pps_cb_qp_offset、pps_cr_qp_offset)。
2.QP裁剪可能不适用于色度QP表的输入。
3.提议在去块滤波器决策过程中考虑用于不同编解码方法的图片/条带/片/图块/子图片级量化参数偏移。
a.在一个示例中,对于滤波器决策(例如,去块滤波过程中的色度边缘决策)的图片/条带/片/图块/子图片级量化参数偏移的选择可以取决于每侧的编解码方法。
b.在一个示例中,需要对色度块使用量化参数的滤波过程(例如,色度边缘决策过程)可以取决于块是否使用JCCR。
i.或者,此外,在去块滤波过程中可以进一步考虑应用于JCCR编解码的块的图片/条带级QP偏移(例如,pps_joint_cbcr_qp_offset)。
ii.在一个示例中,在某些条件下,用于决策Tc和β设置的cQpPicOffset可以设置为pps_joint_cbcr_qp_offset,而不是pps_cb_qp_offset或pps_cr_qp_offset:
1.在一个示例中,当P或Q侧的任何一个块使用JCCR时。
2.在一个示例中,当P或Q侧的两个块都使用JCCR时。
4.需要访问亮度块的解码的信息的色度滤波过程(例如,色度边缘决策过程)可以利用与相同亮度编解码块相关联的信息,该信息用于在去量化/量化过程中导出色度QP。
a.在一个示例中,需要使用亮度块的量化参数的色度滤波过程(例如,色度边缘决策过程)可以利用覆盖当前色度CU的中心位置的对应的亮度样点的亮度编解码单元。
b.图9中描绘了示例,其中CUY3的解码的信息可以用于图9(b)中三个色度样点(第一、第二和第三)的滤波决策。
5.色度滤波过程(例如,色度边缘决策过程)可以取决于应用于色度块的缩放过程(例如,量化/去量化)的量化参数。
a.在一个示例中,用于导出β和Tc的QP可能取决于应用于色度块的缩放过程的QP。
b.或者,此外,用于色度块的缩放处理的QP可能已经考虑了色度CU级QP偏移。
6.是否调用上述项目符号(bullet)可能取决于要滤波的样点是在P侧还是Q侧的块中。
a.例如,是使用覆盖当前色度样点的对应的亮度样点的亮度编解码块的信息,还是使用覆盖当前色度样点的色度编解码块的中心位置的对应的亮度样点的亮度编码块的信息,可以取决于块位置。
i.在一个示例中,如果当前色度样点在Q侧的块中,则可以使用覆盖覆盖当前色度样点的色度编解码块的中心位置的对应的亮度样点的亮度编解码块的QP信息。
ii.在一个示例中,如果当前色度样点在P侧的块中,则可以使用覆盖色度样点的对应的亮度样点的亮度编解码块的QP信息。
关于QP环境
7.提议在条带/片/图块/子图片级信令通知启用块级色度QP偏移的指示(例如slice_cu_chroma_qp_offset_enabled_flag)。
a.或者,可以有条件地信令通知这种指示。
i.在一个示例中,可以在JCCR启用标志的条件下信令通知它。
ii.在一个示例中,它可以在图片级的块级色度QP偏移启用标志的条件下被信令通知。
iii.或者,可以替代地导出这样的指示。
b.在一个示例中,只有当色度QP偏移的PPS标志(例如,slice_cu_chroma_qp_offset_enabled_flag)为真时,才可以信令通知slice_cu_chroma_qp_offset_enabled_flag。
c.在一个示例中,只有当色度QP偏移的PPS标志(例如,slice_cu_chroma_qp_offset_enabled_flag)为假时,才可以将slice_cu_chroma_qp_offset_enabled_flag推断为假。
d.在一个示例中,是否在块上使用色度QP偏移可以基于在PPS级和/或条带级的色度QP偏移的标志。
8.对于具有不同模式的JCCR编解码的块,在缩放过程(量化/去量化)中使用相同的QP导出方法。
a.在一个示例中,对于模式1和模式3的JCCR,QP取决于在图片/条带级中信号通知的QP偏移(例如,pps_cbcr_qp_offset,slice_cbcr_qp_offset)。
滤波程序
9.除了第一颜色分量之外的所有颜色分量的去块可以跟随第一颜色分量的去块过程。
a.在一个示例中,当颜色格式是4:4:4时,第二和第三分量的去块过程可以跟随第一分量的去块过程。
b.在一个示例中,当颜色格式在RGB颜色空间中是4:4:4时,第二和第三分量的去块过程可以跟随第一分量的去块过程。
c.在一个示例中,当颜色格式是4:2:2时,第二和第三分量的垂直去块过程可以跟随第一分量的垂直去块过程。
d.在以上示例中,去块过程可以指去块决策过程和/或去块滤波过程。
关于边界强度导出
10.提议在边界强度决策过程中将JCCR编解码的块视为那些非JCCR编解码的块。
a.在一个示例中,边界强度(BS)的确定可以独立于对P和
Q侧的两个块的JCCR使用的检查。
a.在一个示例中,可以确定块的边界强度,而不管该块是否用JCCR编解码。
11.提议导出边界强度,且无需将与P侧的块相关联的参考图片和/或MV的数量与Q侧的块的参考图片/或MV的数量进行比较。
b.在一个示例中,即使当两个块具有不同的参考图片时,也可以禁用去块滤波。
c.在一个示例中,即使当两个块具有不同数量的MV(例如,一个是单向预测的,而另一个是双向预测的)时,去块滤波器也可以被禁用。
d.在一个示例中,当在P侧和Q侧的块之间的一个或所有参考图片列表的运动向量差值大于或等于阈值Th时,BS的值可以被设置为1。
i.或者,此外,当在P侧和Q侧的块之间的一个或所有参考图片列表的运动向量差值小于或等于阈值Th时,BS的值可以被设置为0。
e.在一个示例中,两个块的运动向量之差值大于阈值Th,可以被定义为(Abs(MVP[0].x-MVQ[0].x)>Th||Abs(MVP[0].y-MVQ[0].y)>Th||Abs(MVP[1].x-MVQ[1].x)>Th)||Abs(MVP[1].y-MVQ[1].y)>Th)
i.或者,两个块的运动向量的差值大于阈值Th可以被定义为(Abs(MVP[0].x-MVQ[0].x)>Th&&Abs(MVP[0].y-MVQ[0].y)>Th&&Abs(MVP[1].x-MVQ[1].x)>Th)&&Abs(MVP[1].y-MVQ[1].y)>Th)
ii.或者,在一个示例中,两个块的运动向量的差值大于阈值Th可以被定义为(Abs(MVP[0].x-MVQ[0].x)>Th||Abs(MVP[0].y-MVQ[0].y)>Th)&&(Abs(MVP[1].x-MVQ[1].x)>Th)||Abs(MVP[1].y-MVQ[1].y)>Th)
iii.或者,在一个示例中,两个块的运动向量的差值大于阈值Th的可以被定义为(Abs(MVP[0].x-MVQ[0].x)>Th&&Abs(MVP[0].y-MVQ[0].y)>Th)||(Abs(MVP[1].x-MVQ[1].x)>Th)&&Abs(MVP[1].y-MVQ[1].y)>Th)
f.在一个示例中,在给定列表中不具有运动向量的块可以被视为在该列表中具有零运动向量。
g.在上述示例中,Th是整数(例如4、8或16)。
h.在上述示例中,Th可以取决于
i.视频内容(例如屏幕内容或自然内容)
ii.在DPS/SPS/VPS/PPS/APS/图片标头/条带标头/片组标头/最大编解码单元(LCU)/编解码单元(CU)/LCU行/LCU的组/TU/PU块/视频编解码单元中信令通知的消息
iii.CU/PU/TU/块/视频编解码单元的位置
iv.沿边缘包含样点的块的编解码模式
v.应用于沿边缘包含样点的块的变换矩阵
vi.当前块和/或其临近块的块维度/块形状
vii.颜色格式的指示(如4:2:0、4:4:4、RGB或YUV)
viii.编码树结构(如双树或单树)
ix.条带/片组类型和/或图片类型
x.颜色分量(例如,仅适用于Cb或Cr)
xi.时域层ID
xii.标准的配置文件/级/层级
xiii.或者,可以向解码器信令通知Th。
i.上述示例可以在某些条件下应用。
i.在一个示例中,条件是blkP和blkQ没有用帧内模式编解码。
ii.在一个示例中,条件是blkP和blkQ在亮度分量上具有零系数。
iii.在一个示例中,条件是blkP和blkQ没有用CIIP模式编解码。
iv.在一个示例中,条件是blkP和blkQ用相同的预测模式(例如,IBC或帧间(Inter))编解码。
关于亮度去块滤波过程
12.去块可以对TS编解码的块和非TS编解码的块使用不同的QP。
a.在一个示例中,TS的QP可以用在TS编解码的块上,而非TS的QP可以用在非TS编解码的块上。
13.亮度滤波过程(例如,亮度边缘决策过程)可以取决于应用于亮度块的缩放过程的量化参数。
a.在一个示例中,用于导出β(beta)和Tc的QP可以取决于变换跳跃的裁剪范围,例如,如QpPrimeTsMin所指示的。
14.提议对大块边界和小块边界使用相同的梯度计算。
a.在一个示例中,第2.1.4节中描述的去块滤波器开/关决策也可以应用于大块边界。
i.在一个示例中,可以对大块边界修改决策中的阈值beta。
1.在一个示例中,beta可以取决于量化参数。
2.在一个示例中,用于大块边界的去块滤波器开/关决策的β可以小于较小块边界的beta。
a.或者,在一个示例中,用于大块边界的去块滤波器开/关决策的beta可以大于用于较小块边界的beta。
b.或者,在一个示例中,用于大块边界的去块滤波器开/关决策的beta可以等于较小块边界的beta。
3.在一个示例中,beta是整数,并且可以基于
a.视频内容(例如屏幕内容或自然内容)
b.在DPS/SPS/VPS/PPS/APS/图片标头/条带标头/片组标头/最大编解码单元(LCU)/编解码单元(CU)/LCU行/LCU的组/TU/PU块/视频编解码单元中信令通知的消息
c.CU/PU/TU/块/视频编解码单元的位置
d.沿边缘包含样点的块的编解码模式
e.应用于沿边缘包含样点的块的变换矩阵
f.当前块和/或其临近块的块尺寸
g.当前块和/或其临近块的块形状
h.颜色格式的指示(如4:2:0、4:4:4、RGB或YUV)
i.编码树结构(如双树或单树)
j.条带/片组类型和/或图片类型
k.颜色分量(例如,仅适用于Cb或Cr)
l.时域层ID
m.标准的配置文件/级/层级
n.或者,可以向解码器信令通知beta。
通用
15.上述提议的方法可以在某些条件下应用。
a.在一个示例中,条件是颜色格式是4:2:0和/或4:2:2。
i.或者,此外,对于4:4:4颜色格式,如何对两种颜色色度分量应用去块滤波器可以遵循当前的设计。
b.在一个示例中,上述方法的使用的指示可以在序列/图片/条带/片/图块/视频区域级,如SPS/PPS/图片标头/条带标头中信令通知。
c.在一个示例中,上述方法的使用可能取决于
ii.视频内容(例如屏幕内容或自然内容)
iii.在DPS/SPS/VPS/PPS/APS/图片标头/条带标头/片组标头/最大编解码单元(LCU)/编解码单元(CU)/LCU行/LCU的组/TU/PU块/视频编解码单元中信令通知的消息
iv.CU/PU/TU/块/视频编解码单元的位置
v.沿边缘包含样点的块的编解码模式
vi.应用于沿边缘包含样点的块的变换矩阵
vii.当前块和/或其临近块的块维度
viii.当前块和/或其临近块的块形状
ix.颜色格式的指示(如4:2:0、4:4:4、RGB或YUV)
x.编码树结构(如双树或单树)
xi.条带/片组类型和/或图片类型
xii.颜色分量(例如,仅适用于Cb或Cr)
xiii.时域层ID
xiv.标准的配置文件(profile)/级(level)/层级(tier)
xv.或者,可以向解码器信令通知m和/或n。
5.附加实施例
新添加的文本以下划线粗体斜体显示。删除的文本用[[]]标记。
5.1.关于去块中色度QP的实施例#1
8.8.3.6一个方向的边缘滤波过程
–否则(cIdx不等于0),由cIdx指定的当前编解码单元的色度编解码块中边缘的滤波过程包括以下有序步骤:
1.变量cQpPicOffset导出如下:
cQpPicOffset=cIdx==1?pps_cb_qp_offset:pps_cr_qp_offset(8-1065)
8.8.3.6.3色度块边缘的决策过程
变量QpQ和QpP被设置为等于编解码单元的QpY值,该编解码单元包括分别包含样点q0,0和p0,0的编码块。
变量QpC导出如下:
[[qPi=Clip3(0,63,((QpQ+QpP+1)>>1)+cQpPicOffset) (8-1132)
QpC=ChromaQpTable[cIdx-1][qPi] (8-1133)]]
qPi=(QpQ+QpP+1)>>1 (8-1132)
QpC=ChromaQpTable[cIdx-1][qPi]+cQpPicOffset (8-1133)
注意–变量cQpPicOffset根据滤波后的色度分量是cb分量还是cr分量,对pps_cb_qp_offset或pps_cr_qp_offset的值进行调整。但是,为了避免改变图片内的调整的量,滤波过程不包括对slice_cb_qp_offset或slice_cr_qp_offset值的调整,也不包括对CuQpOffsetCb、CuQpOffsetCr或CuQpOffsetCbCr值的调整(当cu_chroma_qp_offset_enabled_flag等于1时)。
变量β′的值根据表8-18中的规定基于量化参数Q确定,量化参数Q如下导出:
Q=Clip3(0,63,QpC+(slice_beta_offset_div2<<1)) (8-1134)
其中slice_beta_offset_div2是包含样点q0,0的条带的语法元素slice_beta_offset_div2的值。
变量β导出如下:
β=β′*(1<<(BitDepthC-8)) (8-1135)
变量tC′的值根据表8-18中的规定基于量化参数Q确定,量化参数Q如下导出:
Q=Clip3(0,65,QpC+2*(bS-1)+(slice_tc_offset_div2<<1)) (8-1136)
其中slice_tc_offset_div2是包含样点q0,0的条带的语法元素slice_tc_offset_div2的值。
变量tC导出如下:
tC=(BitDepthC<10)?(tC′+2)>>(10-BitDepthC):tC′*(1<<(BitDepthC-8)) (8-1137)
5.2.边界强度导出的实施例#2
8.8.3.5边界滤波强度的导出过程
该过程的输入包括:
–图片样点阵列recPicture,
–指定当前编解码块的左上角样点相对于当前图片的左上角样点的位置(xCb,yCb),
–指定当前编解码块宽度的变量nCbW,
–指定当前编解码块高度的变量nCbH,
–指定是滤波垂直(EDGE_VER)还是水平(EDGE_HOR)边缘的可变边缘类型,
–指定当前编解码块的颜色分量的变量cIdx,
–二维(nCbW)x(nCbH)阵列edgeFlags。
这个过程的输出是指定边界滤波强度的二维(nCbW)x(nCbH)阵列bS。
对于i=0..xN的xDi和j=0..yN的yDj,适用以下内容:
–如果edgeFlags[xDi][yDj]等于0,则变量bS[xDi][yDj]设置为等于0。
–否则,适用以下内容:
–变量bS[xDi][yDj]导出如下:
–如果cIdx等于0,并且样点p0和q0都在intra_bdpcm_flag等于1的编解码块中,则bS[xDi][yDj]设置为等于0。
–否则,如果样点p0或q0在用帧内预测模式编解码的编解码单元的编解码块中,bS[xDi][yDj]设置为等于2。
–否则,如果块边缘也是变换块边缘,并且样点p0或q0在ciip_flag等于1的编码块中,则bS[xDi][yDj]设置为等于2。
–否则,如果块边缘也是变换块边缘,并且样点p0或q0在包含一个或多个非零变换系数级的变换块中,则bS[xDi][yDj]设置为等于1。
–否则,如果块边缘也是变换块边缘,cIdx大于0,并且样点p0或q0在tu_joint_cbcr_residual_flag等于1的变换单元中,则bS[xDi][yDj]设置为等于1。
–否则,如果包含样点p0的编解码子块的预测模式不同于包含样点q0的编解码子块的预测模式(即,编解码子块之一以IBC预测模式编解码,而另一个以帧间预测模式编解码),则bS[xDi][yDj]被设置为等于1。
–否则,如果cIdx等于0,并且下列一个或多个条件为真,则bS[xDi][yDj]被设置为等于1:
用于预测两个编解码子块的列表0运动向量的水平或垂直分量之间的绝对差在 1/16亮度样点中大于或等于8,或者用于预测两个编解码子块的列表1运动向量的水平或垂 直分量之间的绝对差在1/16亮度样点中大于或等于8。
–[[包含样点p0的编解码子块和包含样点q0的编解码子块都以IBC预测模式进行编解码,并且在两个编解码子块的预测中使用的块向量的水平或垂直分量之间的绝对差以1/16亮度样点为单位大于或等于8。
–对于包含样点p0的编解码子块的预测,与包含样点q0的编解码子块的预测相比,使用不同的参考图片或不同数量的运动向量。
注释1–用于两个编解码子块的参考图片是相同还是不同的确定仅基于哪些图片被参考,而不考虑是使用参考图片列表0的索引还是参考图片列表1的索引来形成预测,也不考虑参考图片列表内的索引位置是否不同。
注释2–用于预测具有左上样点覆盖的编解码子块(xSb,ySb)的运动向量的数量等于PredFlagL0[xSb][ySb]+PredFlagL1[xSb][ySb]。
–一个运动向量用于预测包含样点p0的编解码子块,一个运动向量用于预测包含样点q0的编解码子块,并且所使用的运动向量的水平或垂直分量之间的绝对差以1/16亮度样点为单位大于或等于8。
–使用两个运动向量和两个不同的参考图片来预测包含样点p0的编解码子块,使用相同的两个参考图片的两个运动向量来预测包含样点q0的编解码子块,并且在预测相同参考图片的两个编解码子块中使用的两个运动向量的水平或垂直分量之间的绝对差以1/16亮度样点为单位大于或等于8。
–相同参考图片的两个运动向量用于预测包含样点p0的编解码子块,相同参考图片的两个运动向量用于预测包含样点q0的编解码子块,并且以下两个条件都为真:
–用于预测两个编解码子块的列表0运动向量的水平或垂直分量之间的绝对差以1/16亮度样点为单位大于或等于8,或者用于预测两个编解码子块的列表1运动向量的水平或垂直分量之间的绝对差值以1/16亮度样点为单位大于或等于8。
–在包含样点p0的编解码子块的预测中使用的列表0运动向量的水平或垂直分量和在包含样点q0的编解码子块的预测中使用的列表1运动向量之间的绝对差以1/16亮度样点为单位大于或等于8,或者在包含样点p0的编解码子块的预测中使用的列表1运动向量的水平或垂直分量和在包含样点q0的编解码子块的预测中使用的列表0运动向量之间的绝对差以1/16亮度样点为单位大于或等于8。]]
–否则,变量bS[xDi][yDj]设置为等于0。
5.3.边界强度导出的实施例#3
8.8.3.5边界滤波强度的导出过程
该过程的输入包括:
–图片样点阵列recPicture,
–指定当前编解码块的左上角样点相对于当前图片的左上角样点的位置(xCb,yCb),
–指定当前编解码块宽度的变量nCbW,
–指定当前编解码块高度的变量nCbH,
–指定是滤波垂直(EDGE_VER)还是水平(EDGE_HOR)边缘的可变边缘类型,
–指定当前编解码块的颜色分量的变量cIdx,
–二维(nCbW)x(nCbH)阵列edgeFlags。
这个过程的输出是指定边界滤波强度的二维(nCbW)x(nCbH)阵列bS。
对于i=0..xN的xDi和j=0..yN的yDj,适用以下内容:
–如果edgeFlags[xDi][yDj]等于0,则变量bS[xDi][yDj]设置为等于0。
–否则,适用以下内容:
–变量bS[xDi][yDj]导出如下:
–如果cIdx等于0,并且样点p0和q0都在intra_bdpcm_flag等于1的编解码块中,则bS[xDi][yDj]设置为等于0。
–否则,如果样点p0或q0在用帧内预测模式编解码的编解解码单元的编解码块中,bS[xDi][yDj]设置为等于2。
–否则,如果块边缘也是变换块边缘,并且样点p0或q0在ciip_flag等于1的编码块中,则bS[xDi][yDj]设置为等于2。
–否则,如果块边缘也是变换块边缘,并且样点p0或q0在包含一个或多个非零变换系数级的变换块中,则bS[xDi][yDj]设置为等于1。
–[[否则,如果块边也是变换块边,cIdx大于0,样点p0或q0在tu_joint_cbcr_residual_flag等于1的变换单元中,则bS[xDi][yDj]设置为等于1。]]
–否则,如果包含样点p0的编解码子块的预测模式不同于包含样点q0的编解码子块的预测模式(即,编解码子块之一以IBC预测模式编解码,而另一个以帧间预测模式编解码),则bS[xDi][yDj]被设置为等于1。
–否则,如果cIdx等于0,并且下列一个或多个条件为真,则bS[xDi][yDj]被设置为等于1:
–包含样点p0的编解码子块和包含样点q0的编解码子块都以IBC预测模式进行编解码,并且在两个编解码子块的预测中使用的块向量的水平或垂直分量之间的绝对差以1/16亮度样点为单位大于或等于8。
–对于包含样点p0的编解码子块的预测,与包含样点q0的编解码子块的预测相比,使用不同的参考图片或不同数量的运动向量。
注意1–用于两个编解码子块的参考图片是相同还是不同的确定仅基于哪些图片被参考,而不考虑是使用参考图片列表0的索引还是参考图片列表1的索引来形成预测,也不考虑参考图片列表内的索引位置是否不同。
注意2–用于预测具有左上样点覆盖的编解码子块(xSb,ySb)的运动向量的数量等于PredFlagL0[xSb][ySb]+PredFlagL1[xSb][ySb]。
–一个运动向量用于预测包含样点p0的编解码子块,一个运动向量用于预测包含样点q0的编解码子块,并且所使用的运动向量的水平或垂直分量之间的绝对差以1/16亮度样点为单位大于或等于8。
–使用两个运动向量和两个不同的参考图片来预测包含样点p0的编解码子块,使用相同的两个参考图片的两个运动向量来预测包含样点q0的编解码子块,并且在预测相同参考图片的两个编解码子块中使用的两个运动向量的水平或垂直分量之间的绝对差以1/16亮度样点为单位大于或等于8。
–相同参考图片的两个运动向量用于预测包含样点p0的编解码子块,相同参考图片的两个运动向量用于预测包含样点q0的编解码子块,并且以下两个条件都为真:
–用于预测两个编解码子块的列表0运动向量的水平或垂直分量之间的绝对差以1/16亮度样点为单位大于或等于8,或者用于预测两个编解码子块的列表1运动向量的水平或垂直分量之间的绝对差值以1/16亮度样点为单位大于或等于8。
–在包含样点p0的编解码子块的预测中使用的列表0运动向量的水平或垂直分量和在包含样点q0的编解码子块的预测中使用的列表1运动向量之间的绝对差以1/16亮度样点为单位大于或等于8,或者在包含样点p0的编解码子块的预测中使用的列表1运动向量的水平或垂直分量和在包含样点q0的编解码子块的预测中使用的列表0运动向量之间的绝对差以1/16亮度样点为单位大于或等于8。
–否则,变量bS[xDi][yDj]设置为等于0。
5.4.关于亮度去块滤波过程的实施例#4
8.8.3.6.1亮度块边缘的决策过程
该过程的输入包括:
–图片样点阵列recPicture,
–指定当前编解码块的左上角样点相对于当前图片的左上角样点的位置(xCb,yCb),
–指定当前块的左上角样点相对于当前编解码块的左上角样点的位置(xBl,yBl),
–指定是滤波垂直(EDGE_VER)还是水平(EDGE_HOR)边缘的可变边缘类型,
–指定边界滤波强度的变量bS,
–指定最大滤波器长度的变量maxFilterLengthP,
–指定最大滤波器长度的变量maxFilterLengthQ。
该过程的输出是:
–包含决策的变量dE、dEp和dEq,
–修改后的滤波器长度变量maxFilterLengthP和maxFilterLengthQ,
–变量tC
以下有序步骤适用:
...
1.当sidePisLargeBlk或sideQisLargeBlk大于0时,适用以下内容:
a.变量dp0L、dp3L被导出,maxFilterLengthP被修改如下:
–[[如果sidePisLargeBlk等于1,则以下公式适用:dp0L=(dp0+Abs(p5,0-2*p4,0+p3,0)+1)>>1 (8-1087)
dp3L=(dp3+Abs(p5,3-2*p4,3+p3,3)+1)>>1 (8-1088)
–否则,适用以下内容:]]
dp0L=dp0 (8-1089)
dp3L=dp3 (8-1090)
[[maxFilterLengthP=3 (8-1091)]]
maxFilterLengthP=sidePisLargeBlk?maxFilterLengthP:3
b.变量dq0L和dq3L导出如下:
–[[如果sideQisLargeBlk等于1,则适用以下内容:
dq0L=(dq0+Abs(q5,0-2*q4,0+q3,0)+1)>>1 (8-1092)
dq3L=(dq3+Abs(q5,3-2*q4,3+q3,3)+1)>>1 (8-1093)
–否则,适用以下内容:]]
dq0L=dq0 (8-1094)
dq3L=dq3 (8-1095)
maxFilterLengthQ=sidePisLargeBlk?maxFilterLengthQ:3
2.变量dE、dEp和dEq导出如下:
5.5.关于色度去块滤波过程的实施例#5
8.8.3.6.3色度块边缘的决策过程
该过程仅在ChromaArrayType不等于0时调用。
该过程的输入包括:
–色度图片采样阵列recPicture,
–指定当前色度编解码块相对于当前图片的左上角色度样点的左上角样点的色度位置(xCb,yCb),
–指定当前色度块的左上角样点相对于当前色度编解码块的左上角样点的色度位置(xBl,yBl),
–指定是滤波垂直(EDGE_VER)还是水平(EDGE_HOR)边缘的可变边缘类型,
–指定颜色分量索引的变量cIdx,
–指定图片级色度量化参数偏移的变量cQpPicOffset,
–指定边界滤波强度的变量bS,
–变量maxFilterLengthCbCr。
该过程的输出是
–修改后的变量maxFilterLengthCbCr,
–变量tC
变量maxK的导出如下:
–如果edgeType等于EDGE_VER,则适用以下内容:
maxK=(SubHeightC==1)?3:1 (8-1124)
–否则(edgeType等于EDGE_HOR),适用以下内容:
maxK=(SubWidthC==1)?3:1 (8-1125)
i=0..maxFilterLengthCbCr和k=0..maxK的值pi和qi的导出如下:
–如果edgeType等于EDGE_VER,则适用以下内容:
qi,k=recPicture[xCb+xBl+i][yCb+yBl+k] (8-1126)
pi,k=recPicture[xCb+xBl-i-1][yCb+yBl+k] (8-1127)
subSampleC=SubHeightC (8-1128)
–否则(edgeType等于EDGE_HOR),适用以下内容:
qi,k=recPicture[xCb+xBl+k][yCb+yBl+i] (8-1129)
pi,k=recPicture[xCb+xBl+k][yCb+yBl-i-1] (8-1130)
subSampleC=SubWidthC (8-1131)
当ChromaArrayType不等于0且treeType等于SINGLE_TREE或DUAL_TREE_CHROMA 时,适用以下内容:
–当treeType等于DUAL_TREE_CHROMA时,变量QpY被设置为等于覆盖亮度位置(xCb +cbWidth/2,yCb+cbHeight/2)的亮度编解码单元的亮度量化参数QpY
–变量qPCb、qPCr和qPCbCr导出如下:
qPiChroma=Clip3(-QpBdOffsetC,63,QpY) (8-935)
qPiCb=ChromaQpTable[0][qPiChroma] (8-936)
qPiCr=ChromaQpTable[1][qPiChroma] (8-937)
qPiCbCr=ChromaQpTable[2][qPiChroma] (8-938)
–Cb和Cr分量的色度量化参数Qp′Cb和Qp′Cr以及联合Cb-Cr编解码Qp′CbCr导出如下:
Qp′Cb=Clip3(-QpBdOffsetC,63,qPCb+pps_cb_qp_offset+slice_cb_qp_offset+ CuQpOffsetCb) (8-939)
Qp′Cr=Clip3(-QpBdOffsetC,63,qPCr+pps_cr_qp_offset+slice_cr_qp_offset+ CuQpOffsetCr) (8-940)
Qp′CbCr=Clip3(-QpBdOffsetC,63,qPCbCr+pps_cbcr_qp_offset+slice_cbcr_qp_ offset+CuQpOffsetCbCr) (8-941)
变量QpQ和QpP被设置为分别等于包括包含样点q0,0和p0,0的编解码块的编解码单元 的对应的Qp′Cb或Qp′Cr或Qp′CbCr值。
变量QpC导出如下:
QpC=(QpQ+QpP+1)>>1 (8-1133)
变量β′的值根据表t-18中的规定基于量化参数Q确定,量化参数Q如下导出:
Q=Clip3(0,63,QpC+(slice_beta_offset_div2<<1)) (8-1134)
其中slice_beta_offset_div2是包含样点q0,0的条带的语法元素slice_beta_offset_div2的值。
变量β导出如下:
β=β′*(1<<(BitDepthC-8)) (8-1135)
变量tC′的值根据表8-18中的规定基于量化参数Q确定,量化参数Q如下导出:
Q=Clip3(0,65,QpC+2*(bS-1)+(slice_tc_offset_div2<<1)) (8-1136)
其中slice_tc_offset_div2是包含样点q0,0的条带的语法元素slice_tc_offset_div2的值。
变量tC导出如下:
tC=(BitDepthC<10)?(tC′+2)>>(10-BitDepthC):tC′*(1<<(BitDepthC-8)) (8-1137)
当maxFilterLengthCbCr等于1而bS不等于2时,maxFilterLengthCbCr设置为等于0。
5.6.去块中色度QP的实施例#6
8.8.3.6.3色度块边缘的决策过程
该过程仅在ChromaArrayType不等于0时调用。
该过程的输入包括:
–色度图片采样阵列recPicture,
–指定当前色度编解码块相对于当前图片的左上角色度样点的左上角样点的色度位置(xCb,yCb),
–指定当前色度块的左上角样点相对于当前色度编解码块的左上角样点的色度位置(xBl,yBl),
–指定是滤波垂直(EDGE_VER)还是水平(EDGE_HOR)边缘的可变边缘类型,
–指定颜色分量索引的变量cIdx,
–指定图片级色度量化参数偏移的变量cQpPicOffset,
–指定边界滤波强度的变量bS,
–变量maxFilterLengthCbCr。
该过程的输出是
–修改后的变量maxFilterLengthCbCr,
–变量tC
变量maxK的导出如下:
–如果edgeType等于EDGE_VER,则适用以下内容:
maxK=(SubHeightC==1)?3:1 (8-1124)
–否则(edgeType等于EDGE_HOR),适用以下内容:
maxK=(SubWidthC==1)?3:1 (8-1125)
i=0..maxFilterLengthCbCr和k=0..maxK的值pi和qi的导出如下:
–如果edgeType等于EDGE_VER,则适用以下内容:
qi,k=recPicture[xCb+xBl+i][yCb+yBl+k] (8-1126)
pi,k=recPicture[xCb+xBl-i-1][yCb+yBl+k] (8-1127)
subSampleC=SubHeightC (8-1128)
–否则(edgeType等于EDGE_HOR),适用以下内容:
qi,k=recPicture[xCb+xBl+k][yCb+yBl+i] (8-1129)
pi,k=recPicture[xCb+xBl+k][yCb+yBl-i-1] (8-1130)
subSampleC=SubWidthC (8-1131)
变量QpQ和QpP被设置为等于编解码单元的QpY值,该编解码单元包括分别包含样点q0,0和p0,0的编码块。
变量jccr_flagP和jccr_flagQ被设置为等于编解码单元的tu_joint_cbcr_ residual_flag值,该编解码单元包括分别包含样点q0,0和p0,0的编码块。
变量QpC导出如下:
[[qPi=Clip3(0,63,((QpQ+QpP+1)>>1)+cQpPicOffset) (8-1132)]]
qPi=Clip3(0,63,((QpQ+(jccr_flagP?pps_joint_cbcr_qp_offset: cQpPicOffset)+QpP+(jccr_flagQ?pps_joint_cbcr_qp_offset:cQpPicOffset)+1)>>1))
QpC=ChromaQpTable[cIdx-1][qPi] (8-1133)
注意–变量cQpPicOffset根据滤波后的色度分量是Cb分量还是Cr分量,对pps_cb_qp_offset或pps_cr_qp_offset的值进行调整。但是,为了避免改变图片内的调整的量,滤波过程不包括对slice_cb_qp_offset或slice_cr_qp_offset的值的调整,也不包括对CuQpOffsetCb、CuQpOffsetCr或CuQpOffsetCbCr的值的调整(当cu_chroma_qp_offset_enabled_flag等于1时)。
5.7.关于去块中色度QP的实施例#7
8.8.3.6.3色度块边缘的决策过程
该过程仅在ChromaArrayType不等于0时调用。
该过程的输入包括:
–色度图片采样阵列recPicture,
–指定当前色度编解码块相对于当前图片的左上角色度样点的左上角样点的色度位置(xCb,yCb),
–…
该过程的输出是
–修改后的变量maxFilterLengthCbCr,
–变量tC
变量maxK的导出如下:
–如果edgeType等于EDGE_VER,则适用以下内容:
maxK=(SubHeightC==1)?3:1 (8-1124)
–否则(edgeType等于EDGE_HOR),适用以下内容:
maxK=(SubWidthC==1)?3:1 (8-1125)
i=0..maxFilterLengthCbCr和k=0..maxK时的值pi和qi的导出如下:
–如果edgeType等于EDGE_VER,则适用以下内容:
qi,k=recPicture[xCb+xBl+i][yCb+yBl+k] (8-1126)
pi,k=recPicture[xCb+xBl-i-1][yCb+yBl+k] (8-1127)
subSampleC=SubHeightC (8-1128)
–否则(edgeType等于EDGE_HOR),适用以下内容:
qi,k=recPicture[xCb+xBl+k][yCb+yBl+i] (8-1129)
pi,k=recPicture[xCb+xBl+k][yCb+yBl-i-1] (8-1130)
subSampleC=SubWidthC(8-1131)
[[变量QpQ和QpP被设置为等于编解码单元的QpY值,该编解码单元包括分别包含样点q0,0和p0,0的编码块。]]
变量QpQ被设置为等于覆盖亮度位置(xCb+cbWidth/2,yCb+cbHeight/2)的亮度编 解码单元的亮度量化参数QpY,其中cbWidth指定亮度样点中当前色度编解码块的宽度,并 且cbHeight指定亮度样点中当前色度编解码块的高度。
变量QpP被设置为等于覆盖亮度位置(xCb’+cbWidth’/2,yCb’+cbHeight’/2)的亮 度编解码单元的亮度量化参数QpY,其中(xCb’,yCb’)相对于当前图片的左上角色度样点覆 盖q0,0的色度编解码块的左上角样点,cbWidth’指定亮度样点中当前色度编解码块的宽度, 并且cbHeight指定亮度样点中当前色度编解码块的高度。
变量QpC导出如下:
qPi=Clip3(0,63,((QpQ+QpP+1)>>1)+cQpPicOffset) (8-1132)
QpC=ChromaQpTable[cIdx-1][qPi] (8-1133)
注意–变量cQpPicOffset根据滤波后的色度分量是Cb分量还是Cr分量,对pps_cb_qp_offset或pps_cr_qp_offset的值进行调整。但是,为了避免改变图片内的调整的量,滤波过程不包括对slice_cb_qp_offset或slice_cr_qp_offset的值的调整,也不包括对CuQpOffsetCb、CuQpOffsetCr或CuQpOffsetCbCr的值的调整(当cu_chroma_qp_offset_enabled_flag等于1时)。
变量β′的值根据表8-18中的规定根据量化参数Q确定,量化参数Q如下导出:
Q=Clip3(0,63,QpC+(slice_beta_offset_div2<<1)) (8-1134)
其中slice_beta_offset_div2是包含样点q0,0的条带的语法元素slice_beta_offset_div2的值。
变量β导出如下:
β=β′*(1<<(BitDepthC-8)) (8-1135)
变量tC′的值根据表8-18中的规定基于量化参数Q确定,量化参数Q如下导出:
Q=Clip3(0,65,QpC+2*(bS-1)+(slice_tc_offset_div2<<1)) (8-1136)
其中slice_tc_offset_div2是包含样点q0,0的条带的语法元素slice_tc_offset_div2的值。
5.8.关于去块中色度QP的实施例#8
当对所描绘的三个样点(用实心圆)进行滤波决策时,覆盖包括三个样点的色度CU的中心位置的亮度CU的QP被选择。因此,对于第一、第二和第三色度样点(如图11所示),分别只利用了CUY3的QP。
这样,如何选择用于色度量化/去量化处理的亮度CU就与用于色度滤波器决策处理的亮度系数对齐。
5.9.关于用于JCCR编解码的块的QP的实施例#9
8.7.3变换系数的缩放过程
该过程的输入包括:
–指定当前亮度变换块相对于当前图片的顶部亮度采样的左上角采样的亮度位置(xTbY,yTbY),
–指定变换块宽度的变量nTbW,
–指定变换块高度的变量nTbH,
–指定当前块的颜色分量的变量cIdx,
–指定当前颜色分量的比特深度的变量bitDepth。
该过程的输出是元素为d[x][y]的缩放的变换系数的(nTbW)x(nTbH)阵列d。
量化参数qP导出如下:
–如果cIdx等于0,并transform_skip_flag[xTbY][yTbY]等于0,则适用以下内容:
qP=Qp′Y (8-950)
–否则,如果cIdx等于0(并且transform_skip_flag[xTbY][yTbY]等于1),则适用以下内容:
qP=Max(QpPrimeTsMin,Qp′Y) (8-951)
–否则,如果TuCResMode[xTbY][yTbY]不等于0[[等于2]],则适用以下内容:
qP=Qp′CbCr (8-952)
–否则,如果cIdx等于1,则适用以下内容:
qP=Qp′Cb (8-953)
–否则(cIdx等于2),适用以下内容:
qP=Qp′Cr (8-954)
6.所公开技术的示例实现
图12是视频处理装置1200的块图。装置1200可用于实施本文所述的一种或多种方法。装置1200可以体现在智能手机、平板电脑、计算机、物联网(IoT)接收器等中。装置1200可以包括一个或多个处理器1202、一个或多个存储器1204和视频处理硬件1206。处理器1202可以被配置成实现本文档中描述的一种或多种方法。存储器(多个存储器)1204可以用于存储用于实现本文描述的方法和技术的数据和代码。视频处理硬件1206可以用于在硬件电路中实现本文档中描述的一些技术,并且可以部分或完全是处理器1202(例如,图形处理器核心GPU或其他信号处理电路)的一部分。
在本文档中,术语“视频处理”可以指视频编码、视频解码、视频压缩或视频解压缩。例如,视频压缩算法可以在从视频的像素表示到对应的比特流表示的转换期间应用,反之亦然。如语法所定义的,当前视频块的比特流表示可以例如对应于位于比特流内不同位置或在比特流内不同位置扩展的比特。例如,宏块可以根据变换和编码的误差残差值进行编码,并且还可以使用标头中的比特和比特流中的其他字段。
应当理解,通过允许使用本文档中公开的技术,所公开的方法和技术将有益于结合在诸如智能手机、膝上型电脑、台式电脑和类似设备的视频处理装置中的视频编码器和/或解码器实施例。
图13是视频处理的示例方法1300的流程图。方法1300包括,在1310,执行视频单元和视频单元的比特流表示之间的转换,其中,在转换期间,在视频单元的边界上使用去块滤波器,使得当色度量化参数(QP)表用于导出去块滤波器的参数时,色度QP表的处理在各个色度QP值上执行。
可以使用以下基于条款的格式来描述一些实施例。
1.一种视频处理方法,包括:
在视频单元和视频单元的比特流表示之间执行转换,其中,在转换期间,在视频单元的边界上使用去块滤波器,使得当色度量化参数(QP)表被用于导出去块滤波器的参数时,色度QP表的处理在各个色度QP值上执行。
2.条款1的方法,其中在色度QP表处理之后,色度QP偏移被添加到各个色度QP值。
3.条款1-2中任一项的方法,其中色度QP偏移被添加到色度QP表输出的值上。
4.条款1-2中任一项的方法,其中色度QP偏移不被认为是色度QP表的输入。
5.条款2的方法,其中色度QP偏移是在图片级或视频单元级。
6.一种视频处理方法,包括:
在视频单元和视频单元的比特流表示之间执行转换,其中,在转换期间,在视频单元的边界上使用去块滤波器,使得在去块滤波器中使用色度QP偏移,其中色度QP偏移处于图片/条带/片/图块/子图片级。
7.条款6的方法,其中去块滤波器中使用的色度QP偏移与在视频单元的边界上应用的编解码方法相关联。
8.条款7的方法,其中编解码方法是色度残差的联合编解码(JCCR)方法。
9.一种视频处理方法,包括:
在视频单元和视频单元的比特流表示之间执行转换,其中,在转换期间,在视频单元的边界上使用去块滤波器,使得在去块滤波器中使用色度QP偏移,其中在去块滤波器中使用与相同亮度编解码单元相关的信息,并且用于导出色度QP偏移。
10.条款9的方法,其中相同的亮度编解码单元覆盖视频单元的中心位置的对应的亮度样点,其中视频单元是色度编解码单元。
11.根据条款9所述的方法,其中将缩放过程应用于视频单元,并且其中去块滤波器的一个或多个参数至少部分取决于缩放过程的量化/去量化参数。
12.条款11的方法,其中缩放过程的量化/去量化参数包括色度QP偏移。
13.条款9-12中任一项的方法,其中视频单元中的亮度样点在P侧或Q侧。
14.根据条款13所述的方法,其中与相同亮度编解码单元相关的信息取决于编解码单元相对于相同亮度编解码单元的相对位置。
15.一种视频处理方法,包括:
在视频单元和视频单元的比特流表示之间执行转换,其中,在转换期间,在视频单元的边界上使用去块滤波器,使得在去块滤波器中使用色度QP偏移,其中,在比特流表示中信令通知启用色度QP偏移的使用的指示。
16.根据条款15所述的方法,其中响应于检测到一个或多个标志,有条件地信令通知所述指示。
17.根据条款16所述的方法,其中所述一个或多个标志与JCCR启用标志或色度QP偏移启用标志相关。
18.根据条款15所述的方法,其中所述指示是基于导出而信令通知的。
19.一种视频处理方法,包括:
在视频单元和视频单元的比特流表示之间执行转换,其中在转换期间,在视频单元的边界上使用去块滤波器,使得在去块滤波器中使用色度QP偏移,其中在去块滤波器中使用的色度QP偏移与在视频单元的边界上应用JCCR编解码方法还是在视频单元的边界上应用不同于JCCR编解码方法的方法是相同的。
20.一种视频处理方法,包括:
在视频单元和视频单元的比特流表示之间执行转换,其中,在转换期间,在视频单元的边界上使用去块滤波器,使得在去块滤波器中使用色度QP偏移,其中计算去块滤波器的边界强度(BS),且无需将与P侧边界处的视频单元相关联的参考图片和/或运动向量(MV)的数量与与Q侧的视频单元相关联的参考图片和/或运动向量(MV)的数量进行比较。
21.条款20的方法,其中去块滤波器在一个或多个条件下被禁用。
22.根据条款21所述的方法,其中一个或多个条件与以下相关联:运动向量(MV)的幅度或阈值。
23.根据条款22所述的方法,其中阈值与以下至少一个相关联:i.视频单元的内容,ii.在DPS/SPS/VPS/PPS/APS/图片标头/条带标头/片组标头/最大编解码单元(LCU)/编解码单元(CU)/LCU行/LCU的组/TU/PU块/视频编解码单元中信令通知的消息,iii.CU/PU/TU/块/视频编解码单元的位置,iv.沿边界具有样点的块的编解码模式,v.应用于沿边界具有样点的视频单元的变换矩阵,vi.视频单元的形状或维度,vii.颜色格式的指示,viii.编解码树结构,ix.条带/片组类型和/或图片类型,x.颜色分量,xi.时域层ID,或xii.标准的配置文件/级/层级。
24.根据条款20所述的方法,其中不同的QP偏移用于TS编解码的视频单元和非TS编解码的视频单元。
25.条款20的方法,其中在亮度滤波步骤中使用的QP与在亮度块的缩放过程中使用的QP相关。
26.一种视频解码装置,包括处理器,该处理器被配置为实现条款1至25中的一个或多个的方法。
27.一种视频编码设备,包括处理器,该处理器被配置为实现条款1至25中的一个或多个的方法。
28.一种其上存储有计算机代码的计算机程序产品,当由处理器执行时,该代码使处理器实现条款1至25中任一项的方法。
29.本文件中描述的方法、装置或系统。
图14是显示示例视频处理系统1400的块图,其中可以实现本文公开的各种技术。各种实现可以包括系统1400的一些或所有组件。系统1400可以包括用于接收视频内容的输入1402。视频内容可以以原始或未压缩格式接收,例如8或10位多分量像素值,或者可以是压缩或编码格式。输入1902可以代表网络接口、外围总线接口或存储接口。网络接口的示例包括有线接口,如以太网、无源光网络(PON)等,以及无线接口,如Wi-Fi或蜂窝接口。
系统1400可以包括编解码组件1404,其可以实现本文档中描述的各种编码或编码方法。编解码组件1404可以降低从输入1402到编解码组件1404的输出的视频的平均比特率,以产生视频的比特流表示。因此,编解码技术有时被称为视频压缩或视频代码转换技术。编解码组件1404的输出可以被存储,或者经由连接的通信(如组件1406所表示的)来传输。组件1408可以使用在输入1402接收的视频的存储或传送的比特流(或编解码的)表示来生成发送到显示接口1410的像素值或可显示视频。从比特流表示生成用户可视视频的过程有时被称为视频解压缩。此外,虽然某些视频处理操作被称为“编解码”操作或工具,但是应当理解,编解码工具或操作在编码器处使用,并且反转编解码的结果的对应的解码工具或操作将由解码器执行。
外围总线接口或显示接口的示例可以包括通用串行总线(USB)或高清晰度多媒体接口(HDMI)或显示端口等。存储接口的示例包括SATA(串行高级技术附件)、PCI、IDE接口等。本文档中描述的技术可以体现在各种电子设备中,如移动电话、膝上型电脑、智能手机或能够执行数字数据处理和/或视频显示的其他设备。
图15是根据本技术的视频处理方法1500的流程图表示。方法1500包括,在操作1510,在视频的色度分量的块和视频的比特流表示之间执行转换。在转换期间,去块滤波过程被应用于沿块的边缘的至少一些样点,并且色度量化参数(QP)偏移被添加到来自色度QP表的输出,以确定去块滤波过程的参数。
在一些实施例中,色度QP偏移至少在比特流表示中的图片级或视频单元级由语法元素指示。在一些实施例中,视频单元包括条带、片、图块、子图片或块。在一些实施例中,色度QP偏移至少包括pps_cb_qp_offset和/或pps_cr_qp_offset。在一些实施例中,对色度QP表的输入禁用QP裁剪过程。在一些实施例中,色度分量包括视频的Cr分量。在一些实施例中,色度分量包括视频的Cb分量。
图16是根据本技术的视频处理方法1600的流程图表示。方法1600包括,在操作1610,对于视频的色度分量的块和视频的比特流表示之间的转换,根据规则,基于包括边缘的一侧的样点的第一视频区域的第一量化信息和/或包括边缘的另一侧的样点的第二视频区域的第二量化信息,确定是否或如何对块的边缘应用滤波处理。该规则基于适用于块的编解码模式,用于对边缘的一侧的样点或另一侧的样点进行编码。该规则规定使用不同的视频单元级的多个QP偏移来确定第一量化信息或第二量化信息。方法1600还包括,在操作1620,基于该确定执行转换。
在一些实施例中,其中不同的视频单元级至少包括图片级、条带级、片级、图块级或子图片级。在一些实施例中,多个QP偏移包括视频的Cb分量的偏移。在一些实施例中,多个QP偏移包括视频的Cr分量的偏移。
在一些实施例中,规则规定多个QP偏移的选择基于编解码模式。在一些实施例中,编解码模式包括色度残差的联合编解码(JCCR)编解码模式。在一些实施例中,在块以JCCR编解码模式编解码的情况下,多个QP偏移包括至少图片级QP偏移或条带级QP偏移。在一些实施例中,在使用JCCR编解码模式编解码第一视频区域或第二视频区域中的至少一个的情况下,用于确定滤波过程的阈值β和tC的多个QP偏移包括JCCR编解码模式的QP偏移值。
在一些实施例中,亮度分量的对应的块的信息用于确定第一视频区域的第一量化信息或第二视频区域的第二量化信息。在一些实施例中,为了滤波色度分量的块中的当前色度样点,覆盖对应于当前色度样点的亮度样点的亮度编解码单元的信息被用于确定第一视频区域的第一量化信息或第二视频区域的第二量化信息。
在一些实施例中,是否或如何应用滤波过程基于适用于该块的缩放过程。在一些实施例中,用于确定阈值β和tC的第一视频区域的第一量化信息或第二视频区域的第二量化信息基于缩放过程中使用的量化信息。在一些实施例中,使用一个或多个编解码单元级QP偏移来确定在缩放过程中使用的量化信息。
在一些实施例中,该方法的适用性基于块是在边缘的一侧上还是在边缘的另一侧上。在一些实施例中,亮度分量的对应的块的信息是否用于滤波过程是基于块的位置。在一些实施例中,在块位于边缘的另一侧上的情况下,亮度分量的对应的块的信息被用于滤波过程。在一些实施例中,在块位于边缘的一侧上的情况下,亮度分量的对应的块的信息被用于滤波过程。
图17是根据本技术的视频处理方法1700的流程图表示。方法1700包括,在操作1710,对于视频的当前块和视频的比特流表示之间的转换,根据视频单元的级的语法元素,确定是否启用当前块的色度量化参数(QP)偏移的使用。视频单元包括视频的当前块和第二块。方法1700还包括,在操作1720,基于该确定执行转换。
在一些实施例中,视频单元包括条带。在一些实施例中,视频单元还包括片、图块或子图片。
在一些实施例中,语法元素有条件地包括在视频单元的级的比特流表示中。在一些实施例中,基于色度残差的联合编解码模式是否被启用,语法元素被有条件地包括在比特流表示中。在一些实施例中,基于指示块的级的色度量化参数(QP)偏移的使用的图片级的第二语法元素,语法元素被包括在视频单元的级的比特流表示中。在一些实施例中,在比特流表示中省略了语法元素,并且在图片级的第二语法元素指示在块的级的色度量化参数(QP)偏移的使用被禁止的情况下,块级的色度量化参数(QP)偏移的使用被确定为被禁止。在一些实施例中,基于条带级的语法元素和图片级的第二语法元素来确定当前块的色度量化参数(QP)偏移的使用。
图18是根据本技术的视频处理方法1800的流程图表示。方法1800包括,在操作1810,执行在包括第一色度分量和第二色度分量的视频和视频的比特流表示之间的转换。根据规则,使用编解码模式在比特流表示中联合编解码第一色度分量的第一色度块和第二色度分量的第二色度块的残差。该规则规定导出用于转换的量化参数(QP)的方式独立于编解码模式。在一些实施例中,用于转换的QP是基于在比特流表示中的图片级或条带级处信令通知的QP偏移来导出的。
图19是根据本技术的视频处理方法1900的流程图表示。方法1900包括,在操作1910,执行在视频的第一块和视频的比特流表示之间的转换。视频具有多颜色分量的颜色格式,并且第一块与视频的第一颜色分量相关联。在转换期间,沿第一块的边缘对至少一些样点应用去块滤波过程。方法1900包括,在操作1920,执行在与视频的剩余颜色分量和视频的比特流表示相关联的块之间的后续转换。在后续转换期间,以与第一块的转换相同的方式将去块滤波过程应用于沿每个块的边缘的至少一些样点。
在一些实施例中,颜色格式是4:4:4。在一些实施例中,在红-绿-蓝(RGB)颜色空间中,颜色格式是4:4:4。在一些实施例中,颜色格式是4:2:2,并且去块滤波过程在垂直方向上应用。在一些实施例中,去块滤波过程包括决策过程和/或滤波过程。
图20是根据本技术的视频处理方法2000的流程图表示。方法2000包括,在操作2010,对于视频和视频的比特流表示之间的转换,确定视频的两个块之间的边界的边界强度。不管两个块中的任何一个是否以色度残差的联合编解码(JCCR)模式被编解码,该边界强度被确定。方法2000包括,在操作2020,基于该确定执行转换。
在一些实施例中,在两个块中的一个块以JCCR模式编解码的情况下,该块被视为以非JCCR模式编解码,用于确定边界强度。在一些实施例中,边界强度独立于两个块的JCCR的使用来确定。
图21是根据本技术的视频处理方法2100的流程图表示。方法2100包括,在操作2110,对于视频和视频的比特流表示之间的转换,确定第一块和第二块之间的边界的边界强度。执行该确定且无需将第一块的信息与第二块的对应的信息进行比较。该信息包括参考图片和/或对应的块的运动向量的数量,并且边界强度用于确定去块滤波过程是否适用于边界。方法2100还包括,在操作2120,基于该确定执行转换。
在一些实施例中,边界强度指示在第一块的参考图片不同于第二块的参考图片的情况下去块滤波过程被禁用。在一些实施例中,边界强度指示在第一块的运动向量的数量不同于第二块的运动向量的数量的情况下去块滤波过程被禁用。
在一些实施例中,在第一块的一个或多个运动向量和第二块的一个或多个运动向量之间的差大于或等于阈值的情况下,边界强度被设置为1,该阈值是整数。在一些实施例中,第一块的一个或多个运动向量被表示为MVP[0]和MVP[1],并且第二块的一个或多个运动向量被表示为MVQ[0]和MVQ[1]。在(Abs(MVP[0].x-MVQ[0].x)>Th||Abs(MVP[0].y-MVQ[0].y)>Th||Abs(MVP[1].x-MVQ[1].x)>Th)||Abs(MVP[1].y-MVQ[1].y)>Th)的情况下,差大于或等于阈值Th。在一些实施例中,在(Abs(MVP[0].x-MVQ[0].x)>Th&&Abs(MVP[0].y-MVQ[0].y)>Th&&Abs(MVP[1].x-MVQ[1].x)>Th)&&Abs(MVP[1].y-MVQ[1].y)>Th)的情况下,差大于或等于阈值Th。在一些实施例中,在(Abs(MVP[0].x-MVQ[0].x)>Th||Abs(MVP[0].y-MVQ[0].y)>Th)&&(Abs(MVP[1].x-MVQ[1].x)>Th)||Abs(MVP[1].y-MVQ[1].y)>Th)的情况下,差值大于或等于阈值Th。在一些实施例中,在(Abs(MVP[0].x-MVQ[0].x)>Th&&Abs(MVP[0].y-MVQ[0].y)>Th)||(Abs(MVP[1].x-MVQ[1].x)>Th)&&Abs(MVP[1].y-MVQ[1].y)>Th)的情况下,差值大于或等于阈值Th。在一些实施例中,在第一块的运动向量和第二块的运动向量之间的差值小于或等于阈值的情况下,边界强度被设置为0,该阈值是整数。在一些实施例中,阈值是4、8或16。在一些实施例中,阈值基于视频的特性。
在一些实施例中,基于条件来确定该方法的适用性。在一些实施例中,该方法适用于第一块和第二块没有用帧内预测模式编解码的情况。在一些实施例中,该方法适用于第一块和第二块对于亮度分量具有零系数的情况。在一些实施例中,该方法适用于第一块和第二块没有用组合帧间和帧内预测模式编解码的情况。在一些实施例中,该方法适用于第一块和第二块用相同的预测模式编解码的情况,相同的预测模式是块内拷贝预测模式或帧间预测模式。
图22是根据本技术的视频处理方法2200的流程图表示。方法2200包括,在操作2210,对于视频的视频块和视频的比特流表示之间的转换,根据规则确定用于对视频块应用去块滤波的量化参数(QP)。该规则规定在使用变换跳过(TS)模式对视频块进行编解码的情况下,对该确定使用第一QP,在变换跳过模式中,通过跳过应用变换,视频块的残差被编解码在比特流表示中。在使用非变换跳过模式编解码视频块的情况下,对确定使用不同于第一QP的第二QP,在非变换跳过模式中,视频块的残差在应用变换之后被编解码在比特流表示中。方法2200还包括,在操作2220,基于该确定执行转换。
在一些实施例中,对于亮度块的转换,适用于亮度块的滤波过程基于应用于亮度块的缩放过程的QP。在一些实施例中,用于确定滤波过程是否适用于亮度块的QP是基于TS模式的裁剪范围来确定的。
图23是根据本技术的视频处理方法2300的流程图表示。方法2300包括,在操作2310,对于视频的视频块和视频的比特流表示之间的转换,根据规则确定为确定去块滤波过程对视频块的边缘的至少一些样点的适用性的梯度。该规则规定确定梯度的方式独立于视频块的尺寸。方法2300还包括,在操作2320,基于该确定执行转换。
在一些实施例中,为具有不同边界尺寸的块调整用于确定是否启用去块滤波过程的阈值,该阈值是整数。在一些实施例中,阈值基于为去块滤波过程确定的量化参数。在一些实施例中,具有大边界的块的阈值小于具有小边界的块的第二阈值。在一些实施例中,具有大边界的块的阈值大于具有小边界的块的第二阈值。在一些实施例中,具有大边界的块的阈值等于具有小边界的块的第二阈值。在一些实施例中,阈值基于视频的特性。
在一些实施例中,一个或多个上述方法的适用性基于视频的特性。在一些实施例中,视频的特性包括视频的内容。在一些实施例中,视频的特性包括在比特流表示中的解码器参数集、条带参数集、视频参数集、图片参数集、自适应参数集、图片标头、条带标头、片组标头、最大编解码单元(LCU)、编解码单元、LCU行、LCU的组、变换单元、图片单元或视频编解码单元中信令通知的信息。在一些实施例中,视频的特性包括编解码单元、图片单元、变换单元、块或视频编解码单元在视频中的位置。在一些实施例中,视频的特性包括块的编解码模式,该块包括沿边缘的至少一些样点。在一些实施例中,视频的特性包括变换矩阵,该变换矩阵被应用于包括沿边缘的至少一些样点的块。在一些实施例中,当前块或当前块的临近块的特性包括当前块的维度或当前块的临近块的维度。在一些实施例中,当前块或当前块的临近块的特性包括当前块的形状或当前块的临近块的形状。在一些实施例中,视频的特性包括视频的颜色格式的指示。在一些实施例中,视频的特性包括适用于视频的编码树结构。在一些实施例中,视频的特性包括视频的条带类型、片组类型或图片类型。在一些实施例中,视频的特性包括视频的颜色分量。在一些实施例中,视频的特性包括视频的时域层标识符。在一些实施例中,视频的特性包括视频标准的配置文件、级或层级。
在一些实施例中,转换包括将视频编码成比特流表示。在一些实施例中,转换包括将比特流表示解码成视频。
图24是示出可以利用本公开的技术的示例视频编解码系统100的块图。
如图24所示,视频编解码系统100可以包括源设备110和目的地设备120。源设备110生成编码的视频数据,源设备110可以被称为视频编码设备。目的地设备120可以解码由源设备110生成的编码的视频数据,源设备110可以被称为视频解码设备。
源设备110可以包括视频源112、视频编码器114和输入/输出(I/O)接口116。
视频源112可以包括如视频捕获设备之类的源、从视频内容提供商接收视频数据的接口、和/或用于生成视频数据的计算机图形系统,或者这些源的组合。视频数据可以包括一个或多个图片。视频编码器114对来自视频源112的视频数据进行编码,以生成比特流。比特流可以包括形成视频数据的编解码的表示的比特序列。比特流可以包括编解码的图片和相关联的数据。编解码的图片是图片的编解码的表示。相关联的数据可以包括序列参数集、图片参数集和其他语法结构。I/O接口116可以包括调制器/解调器(调制解调器)和/或发送器。编码的视频数据可以通过网络130a经由I/O接口116直接传输到目的地设备120。编码的视频数据也可以存储在存储介质/服务器130b上,以供目的地设备120访问。
目的地设备120可以包括I/O接口126、视频解码器124和显示设备122。
I/O接口126可以包括接收器和/或调制解调器。I/O接口126可以从源设备110或存储介质/服务器130b获取编码的视频数据。视频解码器124可以解码编码的视频数据。显示设备122可以向用户显示解码的视频数据。显示设备122可以与目的地设备120集成,或者可以在目的地设备120的外部,目的地设备120被配置为与外部显示设备接口。
视频编码器114和视频解码器124可以根据视频压缩标准操作,如高效视频编解码(HEVC)标准、通用视频编解码(VVC)标准和其他当前和/或进一步的标准。
图25是示出视频编码器200的示例的块图,视频编码器200可以是图24所示的系统100中的视频编码器114。
视频编码器200可以被配置成执行本公开的任何或所有技术。在图25的示例中,视频编码器200包括多个功能组件。本公开中描述的技术可以在视频编码器200的各种组件之间共享。在一些示例中,处理器可以被配置成执行本公开中描述的任何或所有技术。
视频编码器200的功能组件可以包括分割单元201、预测单元202、残差生成单元207、变换单元208、量化单元209、逆量化单元210、逆变换单元211、重构单元212、缓冲器213和熵编解码单元214,预测单元202可以包括模式选择单元203、运动估计单元204、运动补偿单元205和帧内预测单元206。
在其他示例中,视频编码器200可以包括更多、更少或不同的功能组件。在示例中,预测单元202可以包括块内拷贝(IBC)单元。IBC单元可以在IBC模式中执行预测,其中至少一个参考图片是当前视频块所在的图片。
此外,一些组件,如运动估计单元204和运动补偿单元205可以高度集成,但是为了解释的目的,在图5的示例中被单独表示。
分割单元201可以将图片分割成一个或多个视频块。视频编码器200和视频解码器300可以支持各种视频块尺寸。
模式选择单元203可以例如基于误差结果来选择编解码模式(帧内或帧间)之一,并将所得的帧内或帧间编解码的块提供给残差生成单元207以生成残差块数据,并提供给重构单元212以重构编码的块用作参考图片。在一些示例中,模式选择单元203可以选择帧内和帧间预测(CIIP)模式的组合,其中预测基于帧间预测信号和帧内预测信号。在帧间预测的情况下,模式选择单元203还可以为块选择运动向量的分辨率(例如,子像素或整数像素精度)。
为了对当前视频块执行帧间预测,运动估计单元204可以通过将来自缓冲器213的一个或多个参考帧与当前视频块进行比较来生成当前视频块的运动信息。运动补偿单元205可以基于除了与当前视频块相关联的图片之外的来自缓冲器213的图片的运动信息和解码的样点来确定当前视频块的预测的视频块。
运动估计单元204和运动补偿单元205可以对当前视频块执行不同的操作,例如,取决于当前视频块是在I条带、P条带还是B条带中。
在一些示例中,运动估计单元204可以对当前视频块执行单预测,并且运动估计单元204可以在列表0或列表1的参考图片中搜索当前视频块的参考视频块。运动估计单元204然后可以生成指示列表0或列表1中包含参考视频块的参考图片的参考索引和指示当前视频块和参考视频块之间的空域位移的运动向量。运动估计单元204可以输出参考索引、预测方向指示符和运动向量作为当前视频块的运动信息。运动补偿单元205可以基于由当前视频块的运动信息指示的参考视频块来生成当前块的预测的视频块。
在其他示例中,运动估计单元204可以对当前视频块执行双预测,运动估计单元204可以在列表0中的参考图片中搜索当前视频块的参考视频块,并且还可以在列表1中的参考图片中搜索当前视频块的另一参考视频块。运动估计单元204然后可以生成参考索引,该参考索引指示包含参考视频块的列表0和列表1中的参考图片以及指示参考视频块和当前视频块之间的空域位移的运动向量。运动估计单元204可以输出当前视频块的参考索引和运动向量作为当前视频块的运动信息。运动补偿单元205可以基于由当前视频块的运动信息指示的参考视频块来生成当前视频块的预测的视频块。
在一些示例中,运动估计单元204可以输出完整的运动信息集,用于解码器的解码处理。
在一些示例中,运动估计单元204可以不输出当前视频的完整运动信息集。相反,运动估计单元204可以参考另一个视频块的运动信息来信令通知当前视频块的运动信息。例如,运动估计单元204可以确定当前视频块的运动信息与临近视频块的运动信息足够相似。
在一个示例中,运动估计单元204可以在与当前视频块相关联的语法结构中指示值,该值向视频解码器300指示当前视频块具有与另一视频块相同的运动信息。
在另一个示例中,运动估计单元204可以在与当前视频块相关联的语法结构中识别另一视频块和运动向量差(MVD)。运动向量差指示当前视频块的运动向量和指示的视频块的运动向量之间的差。视频解码器300可以使用指示的视频块的运动向量和运动向量差来确定当前视频块的运动向量。
如上所述,视频编码器200可以预测性地信令通知运动向量。可以由视频编码器200实现的预测信令技术的两个示例包括高级运动向量预测(AMVP)和合并模式信令。
帧内预测单元206可以对当前视频块执行帧内预测。当帧内预测单元206对当前视频块执行帧内预测时,帧内预测单元206可以基于同一图片中的其他视频块的解码样点来生成当前视频块的预测数据。当前视频块的预测数据可以包括预测的视频块和各种语法元素。
残差生成单元207可以通过从当前视频块中减去(例如,由减号指示)当前视频块的预测的视频块来生成当前视频块的残差数据。当前视频块的残差数据可以包括与当前视频块中样点的不同样点分量相对应的残差视频块。
在其他示例中,例如在跳过模式下,当前视频块可以没有当前视频块的残差数据,并且残差生成单元207可以不执行减法操作。
变换处理单元208可以通过对与当前视频块相关联的残差视频块应用一个或多个变换来为当前视频块生成一个或多个变换系数视频块。
在变换处理单元208生成与当前视频块相关联的变换系数视频块之后,量化单元209可以基于与当前视频块相关联的一个或多个量化参数(QP)值来量化与当前视频块相关联的变换系数视频块。
逆量化单元210和逆变换单元211可以分别对变换系数视频块应用逆量化和逆变换,以从变换系数视频块重构残差视频块。重构单元212可以将重构的残差视频块添加到来自由预测单元202生成的一个或多个预测的视频块的对应的样点,以产生与当前块相关联的重构的视频块,用于存储在缓冲器213中。
在重构单元212重构视频块之后,可以执行环路滤波操作来减少视频块中的视频去块伪影。
熵编解码单元214可以从视频编码器200的其他功能组件接收数据。当熵编解码单元214接收数据时,熵编解码单元214可以执行一个或多个熵编码操作以生成熵编码的数据并输出包括熵编码的数据的比特流。
图26是显示视频解码器300的示例的块图,该视频解码器300可以是图24所示的系统100中的视频解码器114。
视频解码器300可以被配置为执行本公开的任何或所有技术。在图26的示例中,视频解码器300包括多个功能组件。本公开中描述的技术可以在视频解码器300的各种组件之间共享。在一些示例中,处理器可以被配置成执行本公开中描述的任何或所有技术。
在图26的示例中,视频解码器300包括熵解码单元301、运动补偿单元302、帧内预测单元303、逆量化单元304、逆变换单元305以及重构单元306和缓冲器307。在一些示例中,视频解码器300可以执行通常与关于视频编码器200描述的编码过程(例如,图25)相反的解码过程。
熵解码单元301可以检索编码的比特流。编码的比特流可以包括熵编解码的视频数据(例如,视频数据的编码的块)。熵解码单元301可以解码熵编解码的视频数据,并且根据熵解码的视频数据,运动补偿单元302可以确定包括运动向量、运动向量精度、参考图片列表索引和其他运动信息的运动信息。运动补偿单元302例如可以通过执行AMVP和合并模式来确定这样的信息。
运动补偿单元302可以产生运动补偿块,可能基于插值滤波器执行插值。语法元素中可以包括要以子像素精度使用的插值滤波器的标识符。
运动补偿单元302可以使用由视频编码器20在视频块编码期间使用的插值滤波器来计算参考块的子整数像素的插值。运动补偿单元302可以根据接收的语法信息确定视频编码器200使用的插值滤波器,并使用插值滤波器来产生预测块。
运动补偿单元302可以使用一些语法信息来确定用于对编码的视频序列的帧和/或条带进行编码的块的尺寸、描述如何对编码的视频序列的图片的每个宏块进行分割的分割信息、指示如何对每个分割进行编码的模式、每个帧间编码的块的一个或多个参考帧(和参考帧列表)以及解码编码的视频序列的其他信息。
帧内预测单元303可以使用例如在比特流中接收的帧内预测模式来从空域相邻的块形成预测块。逆量化单元303逆量化,即去量化在比特流中提供并由熵解码单元301解码的量化视频块系数。逆变换单元303应用逆变换。
重构单元306可以将残差块与由运动补偿单元202或帧内预测单元303生成的对应的预测块相加,以形成解码的块。如果需要,还可以应用去块滤波器来对解码的块进行滤波,以便去除块效应伪影。解码的视频块然后被存储在缓冲器307中,缓冲器307为后续的运动补偿/帧内预测提供参考块,并且还产生解码的视频以呈现在显示设备上。
所公开的技术的一些实施例包括做出启用视频处理工具或模式的决策或确定。在示例中,当启用视频处理工具或模式时,编码器将在视频块的处理中使用或实现该工具或模式,但是不一定基于工具或模式的使用来修改结果比特流。也就是说,当基于决策或确定启用视频处理工具或模式时,从视频块到视频的比特流表示的转换将使用视频处理工具或模式。在另一示例中,当启用视频处理工具或模式时,解码器将在比特流已经基于视频处理工具或模式被修改的知识的情况下处理比特流。也就是说,从视频的比特流表示到视频块的转换将使用基于决策或确定而启用的视频处理工具或模式来执行。
所公开的技术的一些实施例包括做出禁用视频处理工具或模式的决策或决策。在示例中,当视频处理工具或模式被禁用时,编码器将不会在视频块到视频的比特流表示的转换中使用该工具或模式。在另一个示例中,当视频处理工具或模式被禁用时,解码器将在比特流没有使用基于决策或确定被启用的视频处理工具或模式被修改的知识的情况下处理比特流。
本文档中描述的所公开的和其他解决方案、示例、实施例、模块和功能操作可以在数字电子电路中实现,或者在计算机软件、固件或硬件中实现,包括本文档中公开的结构及其结构等同物,或者在它们中的一个或多个的组合中实现。所公开的和其他实施例可以被实现为一个或多个计算机程序产品,即编码在计算机可读介质上的计算机程序指令的一个或多个模块,用于由数据处理装置执行或控制数据处理装置的操作。计算机可读介质可以是机器可读存储设备、机器可读存储基底、存储器设备、实现机器可读传播的信号的物质组合,或者它们中的一个或多个的组合。术语“数据处理装置”包括用于处理数据的所有装置、设备和机器,包括例如可编程处理器、计算机或多个处理器或计算机。除了硬件之外,该装置可以包括为所讨论的计算机程序创建执行环境的代码,例如,构成处理器固件、协议栈、数据库管理系统、操作系统或它们中的一个或多个的组合的代码。传播的信号是人工生成的信号,例如机器生成的电、光或电磁信号,其被生成来编码信息以传输到合适的接收器设备。
计算机程序(也称为程序、软件、软件应用、脚本或代码)可以用任何形式的编程语言编写,包括编译或解释语言,并且它可以以任何形式部署,包括作为独立程序或作为模块、组件、子例程或适合在计算环境中使用的其他单元。计算机程序不一定对应于文件系统中的文件。程序可以存储在保存其他程序或数据的文件的一部分中(例如,存储在标记语言文档中的一个或多个脚本),存储在专用于所讨论的程序的单个文件中,或者存储在多个协同文件中(例如,存储一个或多个模块、子程序或部分代码的文件)。计算机程序可以被部署为在一台计算机上或位于一个站点或分布在多个站点并通过通信网络互连的多台计算机上执行。
本文档中描述的过程和逻辑流程可以由一个或多个可编程处理器执行,该处理器执行一个或多个计算机程序,以通过对输入数据进行操作并生成输出来执行功能。这些过程和逻辑流程也可以由专用逻辑电路来执行,并且设备也可以被实现为专用逻辑电路,例如,FPGA(现场可编程门阵列)或ASIC(专用集成电路)。
举例来说,适合于执行计算机程序的处理器包括通用和专用微处理器,以及任何类型的数字计算机的任何一个或多个处理器。通常,处理器将从只读存储器或随机存取存储器或两者接收指令和数据。计算机的基本元件是用于执行指令的处理器和一个或多个用于存储指令和数据的存储器设备。通常,计算机还将包括或可操作地耦合到一个或多个用于存储数据的大容量存储设备,例如磁盘、磁光盘或光盘,以从其接收数据或向其传输数据,或两者兼有。然而,计算机不需要有这样的设备。适于存储计算机程序指令和数据的计算机可读介质包括所有形式的非易失性存储器、介质和存储设备,包括例如半导体存储器设备,例如EPROM、EEPROM和闪存设备;磁盘,例如内部硬盘或可移动磁盘;CD ROM;和DVD-ROM盘。处理器和存储器可以由专用逻辑电路来补充或结合在其中。
尽管本专利文件包含许多细节,但这些细节不应被解释为对任何主题或所要求保护的范围的限制,而是对特定技术的特定实施例可能特定的特征的描述。本专利文件中在单独实施例的上下文中描述的某些特征也可以在单个实施例中组合实现。相反,在单个实施例的上下文中描述的各种特征也可以在多个实施例中单独实现或者在任何合适的子组合中实现。此外,尽管特征可以在上面被描述为在某些组合中起作用,并且甚至最初被这样要求保护,但是在一些情况下,来自所要求保护的组合的一个或多个特征可以从该组合中删除,并且所要求保护的组合可以指向子组合或子组合的变体。
类似地,虽然在附图中以特定顺序描述了操作,但是这不应该被理解为要求以所示的特定顺序或顺序执行这些操作,或者要求执行所有示出的操作,以获得期望的结果。此外,本专利文件中描述的实施例中的各种系统组件的分离不应被理解为在所有实施例中都需要这种分离。
仅描述了几个实现和示例,并且可以基于本专利文件中描述和示出的内容进行其他实现、增强和变化。

Claims (12)

1.一种视频处理方法,包括:
执行视频的色度分量的块和所述视频的比特流表示之间转换,其中,在所述转换期间,去块滤波过程被应用于沿所述块的边缘的至少一些样点,并且其中色度量化参数(QP)偏移被添加到来自色度QP表的输出,以确定所述去块滤波过程的参数。
2.根据权利要求1所述的方法,其中所述色度QP偏移由语法元素指示,所述语法元素至少在所述比特流表示中的图片级或视频单元级。
3.根据权利要求2所述的方法,其中所述视频单元包括条带、片、图块、子图片或块。
4.根据权利要求2所述的方法,其中所述色度QP偏移包括至少pps_cb_qp_offset和/或pps_cr_qp_offset。
5.根据权利要求1至4中任一项所述的方法,其中对于所述色度QP表的输入,禁用QP裁剪处理。
6.根据权利要求1至5中任一项所述的方法,其中所述色度分量包括所述视频的Cr分量。
7.根据权利要求1至5中任一项所述的方法,其中所述色度分量包括所述视频的Cb分量。
8.根据权利要求1至7中任一项所述的方法,其中所述转换包括将所述视频编码成所述比特流表示。
9.根据权利要求1至7中任一项所述的方法,其中所述转换包括将所述比特流表示解码成所述视频。
10.一种视频处理装置,包括被配置为实现权利要求1至9中任一项所述的方法的处理器。
11.一种其上存储有代码的计算机可读介质,所述代码在由处理器执行时,使得所述处理器实现权利要求1至9中任一项所述的方法。
12.一种存储根据权利要求1至9中任一项生成的比特流表示的计算机可读介质。
CN202080064523.6A 2019-09-14 2020-09-14 色度去块滤波的量化参数偏移的方法及装置 Active CN114402601B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
CN2019105831 2019-09-14
CNPCT/CN2019/105831 2019-09-14
PCT/US2020/050638 WO2021051044A1 (en) 2019-09-14 2020-09-14 Quantization parameter offset for chroma deblocking filtering

Publications (2)

Publication Number Publication Date
CN114402601A true CN114402601A (zh) 2022-04-26
CN114402601B CN114402601B (zh) 2024-02-27

Family

ID=74866030

Family Applications (4)

Application Number Title Priority Date Filing Date
CN202080064523.6A Active CN114402601B (zh) 2019-09-14 2020-09-14 色度去块滤波的量化参数偏移的方法及装置
CN202080064322.6A Pending CN114402611A (zh) 2019-09-14 2020-09-14 色度去块滤波的量化参数
CN202080064524.0A Pending CN114402609A (zh) 2019-09-14 2020-09-14 视频编解码中的色度量化参数
CN202311506464.5A Pending CN117294846A (zh) 2019-09-14 2020-09-14 色度去块滤波的量化参数

Family Applications After (3)

Application Number Title Priority Date Filing Date
CN202080064322.6A Pending CN114402611A (zh) 2019-09-14 2020-09-14 色度去块滤波的量化参数
CN202080064524.0A Pending CN114402609A (zh) 2019-09-14 2020-09-14 视频编解码中的色度量化参数
CN202311506464.5A Pending CN117294846A (zh) 2019-09-14 2020-09-14 色度去块滤波的量化参数

Country Status (8)

Country Link
US (4) US11973959B2 (zh)
EP (3) EP4014492A4 (zh)
JP (4) JP7322285B2 (zh)
KR (3) KR20220058888A (zh)
CN (4) CN114402601B (zh)
BR (1) BR112022004668A2 (zh)
MX (1) MX2022002815A (zh)
WO (3) WO2021051044A1 (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021051044A1 (en) 2019-09-14 2021-03-18 Bytedance Inc. Quantization parameter offset for chroma deblocking filtering
CN114651442A (zh) 2019-10-09 2022-06-21 字节跳动有限公司 视频编解码中的跨分量适应性回路滤波
EP4029273A4 (en) * 2019-10-14 2023-03-15 ByteDance Inc. USE OF CHROMA QUANTIZATION PARAMETERS IN VIDEO ENCODING
WO2021091214A1 (ko) * 2019-11-05 2021-05-14 엘지전자 주식회사 크로마 양자화 파라미터 오프셋 관련 정보를 코딩하는 영상 디코딩 방법 및 그 장치
CN114788279A (zh) 2019-12-09 2022-07-22 字节跳动有限公司 视频编解码中使用的量化组
WO2021138293A1 (en) 2019-12-31 2021-07-08 Bytedance Inc. Adaptive color transform in video coding

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104584560A (zh) * 2012-07-02 2015-04-29 微软公司 在去块时使用色度量化参数偏移

Family Cites Families (120)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5512953A (en) 1994-08-09 1996-04-30 At&T Corp. Method and apparatus for conversion of compressed bit stream representation of video signal
US7123655B2 (en) 2001-08-09 2006-10-17 Sharp Laboratories Of America, Inc. Method for reduced bit-depth quantization
US7190723B2 (en) * 2002-03-27 2007-03-13 Scientific-Atlanta, Inc. Digital stream transcoder with a hybrid-rate controller
US7227901B2 (en) 2002-11-21 2007-06-05 Ub Video Inc. Low-complexity deblocking filter
US20040146108A1 (en) * 2003-01-23 2004-07-29 Shih-Chang Hsia MPEG-II video encoder chip design
US7227585B1 (en) 2003-12-30 2007-06-05 Conexant Systems, Inc. Luminance and chrominance separation system
US8953673B2 (en) 2008-02-29 2015-02-10 Microsoft Corporation Scalable video coding and decoding with sample bit depth and chroma high-pass residual layers
US9185426B2 (en) * 2008-08-19 2015-11-10 Broadcom Corporation Method and system for motion-compensated frame-rate up-conversion for both compressed and decompressed video bitstreams
EP3101897B1 (en) 2010-04-09 2021-10-20 Xylene Holding S.A. Moving image encoding device and method, moving image decoding device and method, bitstream
JP2011259362A (ja) * 2010-06-11 2011-12-22 Sony Corp 画像処理装置および方法
KR20120035096A (ko) 2010-10-04 2012-04-13 한국전자통신연구원 쿼드 트리 변환 구조에서 부가 정보의 시그널링 방법 및 장치
US8891617B2 (en) 2011-01-18 2014-11-18 Google Inc. Method and system for processing video data
US10409892B2 (en) 2011-01-26 2019-09-10 Microsoft Technology Licensing, Llc Formatting data by example
US9363509B2 (en) * 2011-03-03 2016-06-07 Electronics And Telecommunications Research Institute Method for determining color difference component quantization parameter and device using the method
GB2488816A (en) 2011-03-09 2012-09-12 Canon Kk Mapping motion vectors from a plurality of reference frames to a single reference frame
JP5936939B2 (ja) 2011-07-14 2016-06-22 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America 画像符号化方法および画像復号化方法
US8964833B2 (en) 2011-07-19 2015-02-24 Qualcomm Incorporated Deblocking of non-square blocks for video coding
WO2013042884A1 (ko) * 2011-09-19 2013-03-28 엘지전자 주식회사 영상 부호화/복호화 방법 및 그 장치
US9510020B2 (en) 2011-10-20 2016-11-29 Qualcomm Incorporated Intra pulse code modulation (IPCM) and lossless coding mode deblocking for video coding
US9807403B2 (en) 2011-10-21 2017-10-31 Qualcomm Incorporated Adaptive loop filtering for chroma components
US9161046B2 (en) 2011-10-25 2015-10-13 Qualcomm Incorporated Determining quantization parameters for deblocking filtering for video coding
US20130107973A1 (en) 2011-10-28 2013-05-02 Qualcomm Incorporated Loop filtering control over tile boundaries
US9807401B2 (en) 2011-11-01 2017-10-31 Qualcomm Incorporated Transform unit partitioning for chroma components in video coding
WO2013074365A1 (en) 2011-11-18 2013-05-23 Dolby Laboratories Licensing Corporation Subjective based post-filter optimization
CN104137545B (zh) 2012-01-19 2018-06-05 寰发股份有限公司 编码块旗标的编码及视频比特流的解码方法与装置
US9538200B2 (en) 2012-01-19 2017-01-03 Qualcomm Incorporated Signaling of deblocking filter parameters in video coding
US9451258B2 (en) 2012-04-03 2016-09-20 Qualcomm Incorporated Chroma slice-level QP offset and deblocking
WO2013152736A1 (en) 2012-04-12 2013-10-17 Mediatek Singapore Pte. Ltd. Method and apparatus for block partition of chroma subsampling formats
JPWO2013154028A1 (ja) 2012-04-13 2015-12-17 ソニー株式会社 画像処理装置および方法
GB2501535A (en) * 2012-04-26 2013-10-30 Sony Corp Chrominance Processing in High Efficiency Video Codecs
US9414054B2 (en) 2012-07-02 2016-08-09 Microsoft Technology Licensing, Llc Control and use of chroma quantization parameter values
US10448032B2 (en) 2012-09-04 2019-10-15 Qualcomm Incorporated Signaling of down-sampling location information in scalable video coding
GB2506852B (en) 2012-09-28 2015-09-30 Canon Kk Method and device for determining the value of a quantization parameter
TWI610574B (zh) 2012-09-29 2018-01-01 微軟技術授權有限責任公司 於解塊中色度量化參數偏移之使用
JP2014116733A (ja) 2012-12-07 2014-06-26 Canon Inc 画像符号化装置、画像符号化方法及びプログラム、画像復号装置、画像復号方法及びプログラム
AU2013200051B2 (en) 2013-01-04 2016-02-11 Canon Kabushiki Kaisha Method, apparatus and system for de-blocking video data
WO2014107709A2 (en) 2013-01-07 2014-07-10 Vid Scale, Inc. Enhanced deblocking filters for video coding
US9225991B2 (en) 2013-05-30 2015-12-29 Apple Inc. Adaptive color space transform coding
US11323747B2 (en) 2013-06-05 2022-05-03 Qualcomm Incorporated Residual differential pulse code modulation (DPCM) extensions and harmonization with transform skip, rotation, and scans
US20140376611A1 (en) 2013-06-21 2014-12-25 Qualcomm Incorporated Adaptive color transforms for video coding
US9510002B2 (en) 2013-09-09 2016-11-29 Apple Inc. Chroma quantization in video coding
JP6359101B2 (ja) 2013-10-14 2018-07-18 マイクロソフト テクノロジー ライセンシング,エルエルシー ビデオ及び画像の符号化及び復号のためのイントラブロックコピー予測モードの特徴
US11109036B2 (en) 2013-10-14 2021-08-31 Microsoft Technology Licensing, Llc Encoder-side options for intra block copy prediction mode for video and image coding
CN105230023B (zh) 2014-03-04 2019-10-18 微软技术许可有限责任公司 色彩空间、色彩采样率和/或比特深度的自适应切换
US11070810B2 (en) 2014-03-14 2021-07-20 Qualcomm Incorporated Modifying bit depths in color-space transform coding
MX356497B (es) 2014-03-14 2018-05-31 Vid Scale Inc Sistemas y metodos para una mejora de codificacion de video rgb.
AU2014202921B2 (en) 2014-05-29 2017-02-02 Canon Kabushiki Kaisha Method, apparatus and system for de-blocking a block of video samples
US10038919B2 (en) 2014-05-29 2018-07-31 Apple Inc. In loop chroma deblocking filter
US10142642B2 (en) 2014-06-04 2018-11-27 Qualcomm Incorporated Block adaptive color-space conversion coding
US10136141B2 (en) * 2014-06-11 2018-11-20 Qualcomm Incorporated Determining quantization parameter (QP) values and delta QP values for palette coded blocks in video coding
US9924175B2 (en) 2014-06-11 2018-03-20 Qualcomm Incorporated Determining application of deblocking filtering to palette coded blocks in video coding
US20150373327A1 (en) 2014-06-20 2015-12-24 Qualcomm Incorporated Block adaptive color-space conversion coding
US10469847B2 (en) 2014-09-12 2019-11-05 Vid Scale, Inc. Inter-component de-correlation for video coding
EP3205098B1 (en) * 2014-10-06 2020-01-08 Telefonaktiebolaget LM Ericsson (publ) Coding and deriving quantization parameters
US9883184B2 (en) 2014-10-07 2018-01-30 Qualcomm Incorporated QP derivation and offset for adaptive color transform in video coding
US20160179521A1 (en) * 2014-12-23 2016-06-23 Intel Corporation Method and apparatus for expanding a mask to a vector of mask values
US9854201B2 (en) 2015-01-16 2017-12-26 Microsoft Technology Licensing, Llc Dynamically updating quality to higher chroma sampling rate
US10057574B2 (en) 2015-02-11 2018-08-21 Qualcomm Incorporated Coding tree unit (CTU) level adaptive loop filter (ALF)
CN107534783B (zh) 2015-02-13 2020-09-08 联发科技股份有限公司 图像中区块的调色板索引图编解码方法
US20160286226A1 (en) * 2015-03-24 2016-09-29 Nokia Technologies Oy Apparatus, a method and a computer program for video coding and decoding
WO2016167538A1 (ko) 2015-04-12 2016-10-20 엘지전자(주) 비디오 신호의 인코딩, 디코딩 방법 및 그 장치
TW201642655A (zh) 2015-04-21 2016-12-01 Vid衡器股份有限公司 基於藝術意向之視訊編碼
US10623740B2 (en) * 2015-09-23 2020-04-14 Telefonaktiebolaget Lm Ericsson (Publ) Determination of QP values
US20170105014A1 (en) 2015-10-08 2017-04-13 Qualcomm Incorporated Luma-driven chroma scaling for high dynamic range and wide color gamut contents
CN108293124B (zh) 2015-11-30 2022-05-13 瑞典爱立信有限公司 视频中画面的编码
US11405611B2 (en) 2016-02-15 2022-08-02 Qualcomm Incorporated Predicting filter coefficients from fixed filters for video coding
US10419755B2 (en) * 2016-05-16 2019-09-17 Qualcomm Incorporated Confusion of multiple filters in adaptive loop filtering in video coding
EP3449630A4 (en) 2016-05-28 2019-11-27 MediaTek Inc. METHOD AND APPARATUS FOR CURRENT IMAGE REFERENCING FOR VIDEO CODING
WO2017206826A1 (en) 2016-05-28 2017-12-07 Mediatek Inc. Methods and apparatuses of video data processing with conditionally quantization parameter information signaling
WO2018018486A1 (en) 2016-07-28 2018-02-01 Mediatek Inc. Methods of reference quantization parameter derivation for signaling of quantization parameter in quad-tree plus binary tree structure
US20180041778A1 (en) 2016-08-02 2018-02-08 Qualcomm Incorporated Geometry transformation-based adaptive loop filtering
US10200698B2 (en) 2016-08-09 2019-02-05 Intel Corporation Determining chroma quantization parameters for video coding
US10419757B2 (en) 2016-08-31 2019-09-17 Qualcomm Incorporated Cross-component filter
US20180091812A1 (en) 2016-09-23 2018-03-29 Apple Inc. Video compression system providing selection of deblocking filters parameters based on bit-depth of video data
US10506230B2 (en) 2017-01-04 2019-12-10 Qualcomm Incorporated Modified adaptive loop filter temporal prediction for temporal scalability support
US20180199057A1 (en) 2017-01-12 2018-07-12 Mediatek Inc. Method and Apparatus of Candidate Skipping for Predictor Refinement in Video Coding
US10554974B2 (en) 2017-01-13 2020-02-04 Mediatek Inc. Method and apparatus enabling adaptive multiple transform for chroma transport blocks using control flags
US10708591B2 (en) 2017-03-20 2020-07-07 Qualcomm Incorporated Enhanced deblocking filtering design in video coding
US10212456B2 (en) 2017-06-02 2019-02-19 Apple Inc. Deblocking filter for high dynamic range (HDR) video
CN110999296B (zh) * 2017-06-21 2022-09-02 Vid拓展公司 解码360度视频的方法、设备及计算机可读介质
FR3067918B1 (fr) 2017-06-23 2019-07-19 Laboratoires M&L Capsule deformable a usage unique comprenant une quantite predeterminee d'une phase d'un produit cosmetique
EP3649782A4 (en) 2017-07-05 2021-04-14 Telefonaktiebolaget LM Ericsson (PUBL) DECODING A BLOCK OF VIDEO SAMPLE
US10778974B2 (en) 2017-07-05 2020-09-15 Qualcomm Incorporated Adaptive loop filter with enhanced classification methods
US11019339B2 (en) * 2017-07-12 2021-05-25 Futurewei Technologies, Inc. Fractional quantization parameter offset in video compression
GB2575090A (en) 2018-06-28 2020-01-01 Canon Kk Method and apparatus for deblocking filtering a block of pixels
US10616577B2 (en) 2017-10-16 2020-04-07 Intel Corporation Adaptive video deblocking
US10812798B2 (en) * 2017-10-19 2020-10-20 Qualcomm Incorporated Chroma quantization parameter (QP) offset
SG11202003927TA (en) 2017-11-01 2020-05-28 Vid Scale Inc Methods for simplifying adaptive loop filter in video coding
US10972729B2 (en) 2018-01-20 2021-04-06 Qualcomm Incorporated Deblocking filter selection and application in video coding
US20190238845A1 (en) 2018-01-26 2019-08-01 Qualcomm Incorporated Adaptive loop filtering on deblocking filter results in video coding
MX2020007868A (es) 2018-01-26 2020-09-07 Interdigital Vc Holdings Inc Metodo y aparato para codificacion y decodificacion de video basado en un modelo lineal receptivo a muestras vecinas.
EP3782371A4 (en) 2018-03-30 2021-12-22 Sharp Kabushiki Kaisha SYSTEMS AND PROCEDURES FOR THE APPLICATION OF UNBLOCKING FILTERS ON RECONSTRUCTED VIDEO DATA
US20190306502A1 (en) 2018-04-02 2019-10-03 Qualcomm Incorporated System and method for improved adaptive loop filtering
US10708592B2 (en) 2018-04-02 2020-07-07 Qualcomm Incorporated Deblocking filter for video coding and processing
EP3554074A1 (en) 2018-04-13 2019-10-16 Thomson Licensing Methods and apparatus for depth encoding and decoding
KR101997681B1 (ko) 2018-06-11 2019-07-08 광운대학교 산학협력단 양자화 파라미터 기반의 잔차 블록 부호화/복호화 방법 및 장치
US11051036B2 (en) * 2018-07-14 2021-06-29 Mediatek Inc. Method and apparatus of constrained overlapped block motion compensation in video coding
US20200213570A1 (en) 2019-01-02 2020-07-02 Mediatek Inc. Method for processing projection-based frame that includes at least one projection face and at least one padding region packed in 360-degree virtual reality projection layout
CN113383554B (zh) 2019-01-13 2022-12-16 北京字节跳动网络技术有限公司 LUT和共享Merge列表之间的交互
JP7418459B2 (ja) 2019-02-27 2024-01-19 華為技術有限公司 符号化器、復号器及び対応する方法
WO2020177664A1 (en) 2019-03-02 2020-09-10 Beijing Bytedance Network Technology Co., Ltd. Restrictions on in-loop filtering
CN117499644A (zh) 2019-03-14 2024-02-02 北京字节跳动网络技术有限公司 环路整形信息的信令和语法
CN115243056A (zh) 2019-03-24 2022-10-25 抖音视界有限公司 视频处理中的多参数自适应环路滤波
WO2020192726A1 (en) 2019-03-27 2020-10-01 Beijing Bytedance Network Technology Co., Ltd. History-based motion vector prediction
US11546587B2 (en) 2019-04-11 2023-01-03 Mediatek Inc. Adaptive loop filter with adaptive parameter set
EP3928524A4 (en) 2019-04-15 2022-06-22 Beijing Bytedance Network Technology Co., Ltd. TIME PREDICTION OF PARAMETERS IN A NONLINEAR ADAPTIVE LOOP FILTER
EP3928516A4 (en) 2019-04-16 2022-06-15 Beijing Bytedance Network Technology Co., Ltd. ADAPTIVE LOOP FILTERING FOR VIDEO PROCESSING
CN114026868A (zh) 2019-04-25 2022-02-08 Op方案有限责任公司 帧间预测中全局运动约束的运动矢量
US11381819B2 (en) * 2019-07-05 2022-07-05 Qualcomm Incorporated Chroma delta quantization parameter (QP) in video coding
WO2021041156A1 (en) 2019-08-23 2021-03-04 Tencent America LLC Method and apparatus for video coding
EP3868101B1 (en) * 2019-08-23 2024-04-10 Huawei Technologies Co., Ltd. An encoder, a decoder and corresponding methods for performing chroma deblocking for blocks which use joint chroma coding
CN114600466A (zh) 2019-08-29 2022-06-07 Lg电子株式会社 基于交叉分量滤波的图像编码设备和方法
US20210076032A1 (en) 2019-09-09 2021-03-11 Qualcomm Incorporated Filter shapes for cross-component adaptive loop filter with different chroma formats in video coding
WO2021051044A1 (en) 2019-09-14 2021-03-18 Bytedance Inc. Quantization parameter offset for chroma deblocking filtering
JP2022548330A (ja) 2019-09-24 2022-11-17 ホアウェイ・テクノロジーズ・カンパニー・リミテッド レイヤベースのパラメータセットnalユニット制約
CN114651442A (zh) 2019-10-09 2022-06-21 字节跳动有限公司 视频编解码中的跨分量适应性回路滤波
EP4029273A4 (en) 2019-10-14 2023-03-15 ByteDance Inc. USE OF CHROMA QUANTIZATION PARAMETERS IN VIDEO ENCODING
JP2023508060A (ja) 2019-12-23 2023-02-28 ホアウェイ・テクノロジーズ・カンパニー・リミテッド ビデオコーディングのためのクロスコンポーネント適応ループフィルタリング
US11375200B2 (en) 2019-12-24 2022-06-28 Tencent America LLC Video coding method and device for controlling color component processing
WO2021138293A1 (en) 2019-12-31 2021-07-08 Bytedance Inc. Adaptive color transform in video coding

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104584560A (zh) * 2012-07-02 2015-04-29 微软公司 在去块时使用色度量化参数偏移
US20190098307A1 (en) * 2012-07-02 2019-03-28 Microsoft Technology Licensing, Llc Use of chroma quantization parameter offsets in deblocking

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
BROSS B等: "Versatile Video Coding (Draft 6)", JVET MEETING, pages 1 - 455 *

Also Published As

Publication number Publication date
US20220210448A1 (en) 2022-06-30
JP2022548008A (ja) 2022-11-16
WO2021051047A1 (en) 2021-03-18
EP4014497A4 (en) 2022-11-30
CN114402611A (zh) 2022-04-26
JP7322285B2 (ja) 2023-08-07
JP7321365B2 (ja) 2023-08-04
US20240073426A1 (en) 2024-02-29
US20220210408A1 (en) 2022-06-30
KR20220058534A (ko) 2022-05-09
CN114402609A (zh) 2022-04-26
MX2022002815A (es) 2022-04-06
WO2021051046A1 (en) 2021-03-18
CN114402601B (zh) 2024-02-27
JP2022548007A (ja) 2022-11-16
JP2022547571A (ja) 2022-11-14
KR20220058888A (ko) 2022-05-10
EP4014495A1 (en) 2022-06-22
EP4014492A4 (en) 2023-01-11
JP2023143946A (ja) 2023-10-06
WO2021051044A1 (en) 2021-03-18
US11985329B2 (en) 2024-05-14
KR20220058889A (ko) 2022-05-10
EP4014497A1 (en) 2022-06-22
BR112022004668A2 (pt) 2022-05-31
US11973959B2 (en) 2024-04-30
EP4014492A1 (en) 2022-06-22
EP4014495A4 (en) 2022-11-02
US20220210433A1 (en) 2022-06-30
CN117294846A (zh) 2023-12-26
JP7321364B2 (ja) 2023-08-04

Similar Documents

Publication Publication Date Title
CN114586370B (zh) 在视频编解码中使用色度量化参数的方法、装置及介质
CN114402601B (zh) 色度去块滤波的量化参数偏移的方法及装置
CN114902657A (zh) 视频编解码中的自适应颜色变换
US11785260B2 (en) Cross-component adaptive loop filtering in video coding
WO2021110116A1 (en) Prediction from multiple cross-components
US20240073419A1 (en) Cross Component Adaptive Loop Filtering for Video Coding
WO2021115235A1 (en) Cross-component prediction using multiple components
CN114788279A (zh) 视频编解码中使用的量化组
CN114503597B (zh) 视频编解码中的色度去方块方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant