CN114640847B - 编解码方法、装置及其设备 - Google Patents

编解码方法、装置及其设备 Download PDF

Info

Publication number
CN114640847B
CN114640847B CN202110739453.6A CN202110739453A CN114640847B CN 114640847 B CN114640847 B CN 114640847B CN 202110739453 A CN202110739453 A CN 202110739453A CN 114640847 B CN114640847 B CN 114640847B
Authority
CN
China
Prior art keywords
block
current
reconstruction
brightness
filtering
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202110739453.6A
Other languages
English (en)
Other versions
CN114640847A (zh
Inventor
陈方栋
潘冬萍
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hangzhou Hikvision Digital Technology Co Ltd
Original Assignee
Hangzhou Hikvision Digital Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hangzhou Hikvision Digital Technology Co Ltd filed Critical Hangzhou Hikvision Digital Technology Co Ltd
Priority to CN202111628844.7A priority Critical patent/CN114125445B/zh
Priority to CN202110739453.6A priority patent/CN114640847B/zh
Publication of CN114640847A publication Critical patent/CN114640847A/zh
Application granted granted Critical
Publication of CN114640847B publication Critical patent/CN114640847B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117Filters, e.g. for pre-processing or post-processing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本申请提供一种编解码方法、装置及其设备,该方法可以包括:获取当前亮度块对应的第一亮度重建块;对所述第一亮度重建块进行垂直DBF滤波,得到第二亮度重建块;对所述第二亮度重建块进行垂直DBR滤波,得到第三亮度重建块;对所述第三亮度重建块进行水平DBF滤波,得到第四亮度重建块;对所述第四亮度重建块进行水平DBR滤波,得到第五亮度重建块;对所述第五亮度重建块进行ESAO滤波,得到第六亮度重建块;对所述第五亮度重建块进行SAO滤波,得到第六亮度重建块;对所述第六亮度重建块进行ALF滤波,得到第七亮度重建块。通过本申请的技术方案,能够提高编码性能。

Description

编解码方法、装置及其设备
技术领域
本申请涉及编解码技术领域,尤其是涉及一种编解码方法、装置及其设备。
背景技术
为了达到节约空间的目的,视频图像都是经过编码后才传输的,完整的视频编码方法可以包括预测、变换、量化、熵编码、滤波等过程。其中,预测编码可以包括帧内编码和帧间编码。进一步的,帧间编码是利用视频时间域的相关性,使用邻近已编码图像的像素预测当前像素,以达到有效去除视频时域冗余的目的。帧内编码是指利用视频空间域的相关性,使用当前帧图像的已经编码块的像素预测当前像素,以达到去除视频空域冗余的目的。
常用的滤波技术包括DBF(DeBlocking Filter,去块滤波)技术、SAO(SampleAdaptive Offset,样本自适应补偿)技术和ALF(Adaptive Loop Filter,自适应环路滤波)技术。DBF技术用于去除分块编码产生的块边界效应。SAO技术通过基于样本的像素值和周围块的梯度值进行分类,对于每个类别的像素值加上不同的补偿值,使得重建图像更接近于原始图像。ALF技术通过维纳滤波器,对重建图像进行滤波,使得重建图像更接近于原始图像。
但是,如何基于DBF、SAO和ALF等实现滤波,相关技术并没有合理的滤波方式,均存在滤波效果不佳,编码性能比较差等问题。比如说,基于DBF、SAO和ALF等对当前块进行滤波后,可能会出现过滤波现象,即滤波后的像素值远大于或远小于滤波前的像素值。
发明内容
本申请提供一种编解码方法、装置及其设备,能够提高编码性能。
本申请提供一种编解码方法,所述方法包括:
获取当前亮度块对应的第一亮度重建块;
若所述当前亮度块启用DBF模式,则对所述第一亮度重建块进行垂直DBF滤波,得到第二亮度重建块;否则,基于所述第一亮度重建块确定第二亮度重建块;
若所述当前亮度块启用垂直DBR模式,则对所述第二亮度重建块进行垂直DBR滤波,得到第三亮度重建块;否则,基于所述第二亮度重建块确定第三亮度重建块;
若所述当前亮度块启用DBF模式,则对所述第三亮度重建块进行水平DBF滤波,得到第四亮度重建块;否则,基于所述第三亮度重建块确定第四亮度重建块;
若所述当前亮度块启用水平DBR模式,则对所述第四亮度重建块进行水平DBR滤波,得到第五亮度重建块;否则,基于所述第四亮度重建块确定第五亮度重建块;
若所述当前亮度块启用ESAO模式,则对所述第五亮度重建块进行ESAO滤波,得到第六亮度重建块;否则,若所述当前亮度块启用SAO模式,则对所述第五亮度重建块进行SAO滤波,得到第六亮度重建块;否则,基于第五亮度重建块确定第六亮度重建块;
若所述当前亮度块启用ALF模式,则对所述第六亮度重建块进行ALF滤波,得到第七亮度重建块;否则,基于所述第六亮度重建块确定第七亮度重建块。
本申请提供一种编解码方法,所述方法包括:
获取当前色度块对应的第一色度重建块;
若所述当前色度块启用DBF模式,则对所述第一色度重建块进行垂直DBF滤波,得到第二色度重建块;否则,基于所述第一色度重建块确定第二色度重建块;
若所述当前色度块启用DBF模式,则对所述第二色度重建块进行水平DBF滤波,得到第三色度重建块;否则,基于所述第二色度重建块确定第三色度重建块;
若所述当前色度块启用ESAO模式,则对所述第三色度重建块进行ESAO滤波,得到第四色度重建块;否则,若所述当前色度块启用SAO模式,则对所述第三色度重建块进行SAO滤波,得到第四色度重建块;否则,基于所述第三色度重建块确定第四色度重建块;
若所述当前色度块启用CCSAO模式,则对所述第四色度重建块进行CCSAO滤波,得到第五色度重建块;否则,基于所述第四色度重建块确定第五色度重建块;
若所述当前色度块启用ALF模式,则对所述第五色度重建块进行ALF滤波,得到第六色度重建块;否则,基于所述第五色度重建像素值确定第六色度重建块。
本申请提供一种解码装置,所述解码装置包括:
存储器,其经配置以存储视频数据;
解码器,其经配置以实现:
获取当前亮度块对应的第一亮度重建块;
若所述当前亮度块启用DBF模式,则对所述第一亮度重建块进行垂直DBF滤波,得到第二亮度重建块;否则,基于所述第一亮度重建块确定第二亮度重建块;
若所述当前亮度块启用垂直DBR模式,则对所述第二亮度重建块进行垂直DBR滤波,得到第三亮度重建块;否则,基于所述第二亮度重建块确定第三亮度重建块;
若所述当前亮度块启用DBF模式,则对所述第三亮度重建块进行水平DBF滤波,得到第四亮度重建块;否则,基于所述第三亮度重建块确定第四亮度重建块;
若所述当前亮度块启用水平DBR模式,则对所述第四亮度重建块进行水平DBR滤波,得到第五亮度重建块;否则,基于所述第四亮度重建块确定第五亮度重建块;
若所述当前亮度块启用ESAO模式,则对所述第五亮度重建块进行ESAO滤波,得到第六亮度重建块;否则,若所述当前亮度块启用SAO模式,则对所述第五亮度重建块进行SAO滤波,得到第六亮度重建块;否则,基于第五亮度重建块确定第六亮度重建块;
若所述当前亮度块启用ALF模式,则对所述第六亮度重建块进行ALF滤波,得到第七亮度重建块;否则,基于所述第六亮度重建块确定第七亮度重建块;
或者,
获取当前色度块对应的第一色度重建块;
若所述当前色度块启用DBF模式,则对所述第一色度重建块进行垂直DBF滤波,得到第二色度重建块;否则,基于所述第一色度重建块确定第二色度重建块;
若所述当前色度块启用DBF模式,则对所述第二色度重建块进行水平DBF滤波,得到第三色度重建块;否则,基于所述第二色度重建块确定第三色度重建块;
若所述当前色度块启用ESAO模式,则对所述第三色度重建块进行ESAO滤波,得到第四色度重建块;否则,若所述当前色度块启用SAO模式,则对所述第三色度重建块进行SAO滤波,得到第四色度重建块;否则,基于所述第三色度重建块确定第四色度重建块;
若所述当前色度块启用CCSAO模式,则对所述第四色度重建块进行CCSAO滤波,得到第五色度重建块;否则,基于所述第四色度重建块确定第五色度重建块;
若所述当前色度块启用ALF模式,则对所述第五色度重建块进行ALF滤波,得到第六色度重建块;否则,基于所述第五色度重建像素值确定第六色度重建块。
本申请提供一种编码装置,所述编码装置包括:
存储器,其经配置以存储视频数据;
编码器,其经配置以实现:
获取当前亮度块对应的第一亮度重建块;
若所述当前亮度块启用DBF模式,则对所述第一亮度重建块进行垂直DBF滤波,得到第二亮度重建块;否则,基于所述第一亮度重建块确定第二亮度重建块;
若所述当前亮度块启用垂直DBR模式,则对所述第二亮度重建块进行垂直DBR滤波,得到第三亮度重建块;否则,基于所述第二亮度重建块确定第三亮度重建块;
若所述当前亮度块启用DBF模式,则对所述第三亮度重建块进行水平DBF滤波,得到第四亮度重建块;否则,基于所述第三亮度重建块确定第四亮度重建块;
若所述当前亮度块启用水平DBR模式,则对所述第四亮度重建块进行水平DBR滤波,得到第五亮度重建块;否则,基于所述第四亮度重建块确定第五亮度重建块;
若所述当前亮度块启用ESAO模式,则对所述第五亮度重建块进行ESAO滤波,得到第六亮度重建块;否则,若所述当前亮度块启用SAO模式,则对所述第五亮度重建块进行SAO滤波,得到第六亮度重建块;否则,基于第五亮度重建块确定第六亮度重建块;
若所述当前亮度块启用ALF模式,则对所述第六亮度重建块进行ALF滤波,得到第七亮度重建块;否则,基于所述第六亮度重建块确定第七亮度重建块;
或者,
获取当前色度块对应的第一色度重建块;
若所述当前色度块启用DBF模式,则对所述第一色度重建块进行垂直DBF滤波,得到第二色度重建块;否则,基于所述第一色度重建块确定第二色度重建块;
若所述当前色度块启用DBF模式,则对所述第二色度重建块进行水平DBF滤波,得到第三色度重建块;否则,基于所述第二色度重建块确定第三色度重建块;
若所述当前色度块启用ESAO模式,则对所述第三色度重建块进行ESAO滤波,得到第四色度重建块;否则,若所述当前色度块启用SAO模式,则对所述第三色度重建块进行SAO滤波,得到第四色度重建块;否则,基于所述第三色度重建块确定第四色度重建块;
若所述当前色度块启用CCSAO模式,则对所述第四色度重建块进行CCSAO滤波,得到第五色度重建块;否则,基于所述第四色度重建块确定第五色度重建块;
若所述当前色度块启用ALF模式,则对所述第五色度重建块进行ALF滤波,得到第六色度重建块;否则,基于所述第五色度重建像素值确定第六色度重建块。
本申请提供一种解码端设备,包括:处理器和机器可读存储介质,所述机器可读存储介质存储有能够被所述处理器执行的机器可执行指令;
所述处理器用于执行机器可执行指令,以实现如下步骤:
获取当前亮度块对应的第一亮度重建块;
若所述当前亮度块启用DBF模式,则对所述第一亮度重建块进行垂直DBF滤波,得到第二亮度重建块;否则,基于所述第一亮度重建块确定第二亮度重建块;
若所述当前亮度块启用垂直DBR模式,则对所述第二亮度重建块进行垂直DBR滤波,得到第三亮度重建块;否则,基于所述第二亮度重建块确定第三亮度重建块;
若所述当前亮度块启用DBF模式,则对所述第三亮度重建块进行水平DBF滤波,得到第四亮度重建块;否则,基于所述第三亮度重建块确定第四亮度重建块;
若所述当前亮度块启用水平DBR模式,则对所述第四亮度重建块进行水平DBR滤波,得到第五亮度重建块;否则,基于所述第四亮度重建块确定第五亮度重建块;
若所述当前亮度块启用ESAO模式,则对所述第五亮度重建块进行ESAO滤波,得到第六亮度重建块;否则,若所述当前亮度块启用SAO模式,则对所述第五亮度重建块进行SAO滤波,得到第六亮度重建块;否则,基于第五亮度重建块确定第六亮度重建块;
若所述当前亮度块启用ALF模式,则对所述第六亮度重建块进行ALF滤波,得到第七亮度重建块;否则,基于所述第六亮度重建块确定第七亮度重建块;
或者,
获取当前色度块对应的第一色度重建块;
若所述当前色度块启用DBF模式,则对所述第一色度重建块进行垂直DBF滤波,得到第二色度重建块;否则,基于所述第一色度重建块确定第二色度重建块;
若所述当前色度块启用DBF模式,则对所述第二色度重建块进行水平DBF滤波,得到第三色度重建块;否则,基于所述第二色度重建块确定第三色度重建块;
若所述当前色度块启用ESAO模式,则对所述第三色度重建块进行ESAO滤波,得到第四色度重建块;否则,若所述当前色度块启用SAO模式,则对所述第三色度重建块进行SAO滤波,得到第四色度重建块;否则,基于所述第三色度重建块确定第四色度重建块;
若所述当前色度块启用CCSAO模式,则对所述第四色度重建块进行CCSAO滤波,得到第五色度重建块;否则,基于所述第四色度重建块确定第五色度重建块;
若所述当前色度块启用ALF模式,则对所述第五色度重建块进行ALF滤波,得到第六色度重建块;否则,基于所述第五色度重建像素值确定第六色度重建块。
本申请提供一种编码端设备,包括:处理器和机器可读存储介质,所述机器可读存储介质存储有能够被所述处理器执行的机器可执行指令;
所述处理器用于执行机器可执行指令,以实现如下步骤:
获取当前亮度块对应的第一亮度重建块;
若所述当前亮度块启用DBF模式,则对所述第一亮度重建块进行垂直DBF滤波,得到第二亮度重建块;否则,基于所述第一亮度重建块确定第二亮度重建块;
若所述当前亮度块启用垂直DBR模式,则对所述第二亮度重建块进行垂直DBR滤波,得到第三亮度重建块;否则,基于所述第二亮度重建块确定第三亮度重建块;
若所述当前亮度块启用DBF模式,则对所述第三亮度重建块进行水平DBF滤波,得到第四亮度重建块;否则,基于所述第三亮度重建块确定第四亮度重建块;
若所述当前亮度块启用水平DBR模式,则对所述第四亮度重建块进行水平DBR滤波,得到第五亮度重建块;否则,基于所述第四亮度重建块确定第五亮度重建块;
若所述当前亮度块启用ESAO模式,则对所述第五亮度重建块进行ESAO滤波,得到第六亮度重建块;否则,若所述当前亮度块启用SAO模式,则对所述第五亮度重建块进行SAO滤波,得到第六亮度重建块;否则,基于第五亮度重建块确定第六亮度重建块;
若所述当前亮度块启用ALF模式,则对所述第六亮度重建块进行ALF滤波,得到第七亮度重建块;否则,基于所述第六亮度重建块确定第七亮度重建块;
或者,
获取当前色度块对应的第一色度重建块;
若所述当前色度块启用DBF模式,则对所述第一色度重建块进行垂直DBF滤波,得到第二色度重建块;否则,基于所述第一色度重建块确定第二色度重建块;
若所述当前色度块启用DBF模式,则对所述第二色度重建块进行水平DBF滤波,得到第三色度重建块;否则,基于所述第二色度重建块确定第三色度重建块;
若所述当前色度块启用ESAO模式,则对所述第三色度重建块进行ESAO滤波,得到第四色度重建块;否则,若所述当前色度块启用SAO模式,则对所述第三色度重建块进行SAO滤波,得到第四色度重建块;否则,基于所述第三色度重建块确定第四色度重建块;
若所述当前色度块启用CCSAO模式,则对所述第四色度重建块进行CCSAO滤波,得到第五色度重建块;否则,基于所述第四色度重建块确定第五色度重建块;
若所述当前色度块启用ALF模式,则对所述第五色度重建块进行ALF滤波,得到第六色度重建块;否则,基于所述第五色度重建像素值确定第六色度重建块。
由以上技术方案可见,本申请实施例中,若当前亮度块启用DBF模式,则对第一亮度重建块进行垂直DBF滤波,得到第二亮度重建块,若当前亮度块启用垂直DBR模式,则对第二亮度重建块进行垂直DBR滤波,得到第三亮度重建块,若当前亮度块启用DBF模式,则对第三亮度重建块进行水平DBF滤波,得到第四亮度重建块,若当前亮度块启用水平DBR模式,则对第四亮度重建块进行水平DBR滤波,得到第五亮度重建块,若当前亮度块启用ESAO模式,则对第五亮度重建块进行ESAO滤波,得到第六亮度重建块(或若当前亮度块启用SAO模式,则对第五亮度重建块进行SAO滤波,得到第六亮度重建块),若当前亮度块启用ALF模式,则对第六亮度重建块进行ALF滤波,得到第七亮度重建块。综上可以看出,可以依次对当前亮度块进行垂直DBF滤波、垂直DBR滤波、水平DBF滤波、水平DBR滤波、ESAO滤波(或SAO滤波)、ALF滤波等滤波过程,从而提出合理的滤波方式,避免出现滤波效果不佳,编码性能比较差等问题,即可以提高滤波效果,提高编码性能,不会出现过滤波现象,即滤波后的像素值不会远大于或远小于滤波前的像素值。
附图说明
图1是本申请一种实施方式中的编解码框架的示意图;
图2A和图2B本申请一种实施方式中的块划分的示意图;
图3是本申请一种实施方式中的编解码方法的流程图;
图4A-图4D是本申请一种实施方式中的垂直边界和水平边界的示意图;
图5是本申请一种实施方式中的编解码方法的流程图;
图6是本申请一种实施方式中的当前亮度块和当前色度块的处理过程示意图;
图7A和图7B是本申请一种实施方式中的滤波系数的形状示意图。
具体实施方式
在本申请实施例中使用的术语仅仅是出于描述特定实施例的目的,而非限制本申请。本申请实施例和权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式,除非上下文清楚地表示其它含义。还应当理解,本文中使用的术语“和/或”是指包含一个或多个相关联的列出项目的任何或所有可能组合。还应当理解,尽管在本申请实施例可能采用术语第一、第二、第三等来描述各种信息,但是,这些信息不应限于这些术语。这些术语仅用来将同一类型的信息彼此区分开。例如,在不脱离本申请实施例范围的情况下,第一信息也可以被称为第二信息,类似地,第二信息也可以被称为第一信息。取决于语境,此外,所使用的词语“如果”可以被解释成为“在……时”,或“当……时”,或“响应于确定”。
为了使本领域技术人员更好地理解本申请技术方案,下面对技术术语进行简单说明。
视频编码框架:参见图1所示,可以使用视频编码框架实现本申请实施例的编码端处理流程,视频解码框架的示意图可以与图1类似,在此不再重复赘述,可以使用视频解码框架实现本申请实施例的解码端处理流程。在视频编码框架和视频解码框架中,可以包括但不限于:预测(如帧内预测和帧间预测等)、运动估计/运动补偿、参考图像缓冲器、环内滤波、重建、变换、量化、反变换、反量化、熵编码器等模块。在编码端,通过这些模块之间的配合,实现编码端的处理流程,在解码端,通过这些模块之间的配合,实现解码端的处理流程。
环路滤波用于减少图像块效应或图像效果不佳等问题,能够改善图像质量,可以包括DBF、SAO和ALF等三种滤波器。DBF为去方块滤波,用于去除分块编码产生的块边界效应。SAO为样本自适应补偿滤波,用于通过基于样本的像素值和周围块的梯度值进行分类,对于每个类别的像素值加上不同的补偿值,使得重建图像更接近于原始图像。ALF为自适应环路滤波,即通过维纳滤波器,对重建图像进行增强滤波,使得重建图像更接近于原始图像。
示例性的,在视频编解码过程中,预测过程可以包括帧内预测和帧间预测,帧内预测是考虑到相邻块之间存在很强的空域相关性,利用周围已经重建的像素作为参考像素,对当前未编码块进行预测,只需要对残差值进行后续编码处理,而不是对原始值进行编码,从而有效去除空域上的冗余,大大提高压缩效率。帧间预测是利用视频时间域的相关性,使用邻近已编码图像的像素预测当前图像的像素,达到去除视频时域冗余的目的。
示例性的,在视频编解码过程中,变换是指将以空间域中像素形式描述的图像转换至变换域的图像,并以变换系数的形式来表示。由于绝大多数图像都含有较多平坦区域和缓慢变化的区域,因此,适当的变换过程,可以使图像能量在空间域的分散分布,转换为在变换域的相对集中分布,从而能够去除信号之间的频域相关性,配合量化过程,可以有效压缩码流。
示例性的,熵编码是指按照信息熵的原理进行无损编码的方式,处于视频压缩的最后一个处理模块,将一系列用来表示视频序列的元素符号,转变为一个用来传输或存储的二进制码流,输入的符号可能包括量化后的变换系数,运动矢量信息,预测模式信息,变换量化相关语法等,熵编码模块的输出数据即原始视频压缩后的最终码流。熵编码可以有效地去除这些视频元素符号的统计冗余,是保证视频编码压缩效率的重要工具之一。
示例性的,环路滤波用于减少图像的块效应或者图像效果不佳等问题,用来改善图像质量,可以包括但不限于DBF、SAO和ALF等。例如,在视频图像中,图像块的边界并不连续,压缩重建图像具有明显的块效应,严重影响图像质量,可以采用DBF技术对边界进行去块滤波。针对所有预测单元(Prediction Unit,PU)和变换单元(Transform Unit,TU)的边界进行去块滤波,去块滤波包括滤波决策和滤波操作,在滤波决策过程中,获取边界强度(如不滤波、弱滤波或强滤波)和滤波参数。在滤波操作过程中,根据边界强度和滤波参数对像素进行修正,如对边界进行滤波时,可以是强滤波或弱滤波,采用不同长度的抽头进行滤波。
SAO滤波:用于消除振铃效应。振铃效应是由于高频交流系数的量化失真,解码后会在边缘周围产生波纹的现象,变换块尺寸越大振铃效应越明显。SAO的基本原理是对重构曲线中的波峰像素加上负值进行补偿,波谷像素加上正值进行补偿。SAO是以CTU(CodingTree Unit,编码树单元)为基本单位,可以包括两大类补偿形式:边界补偿(Edge Offset,简称EO)和边带补偿(Band Offset,简称BO),此外还引入了参数融合技术。
ALF滤波:可以根据原始信号和失真信号计算得到均方意义下的最优滤波器,即维纳滤波器。ALF的滤波器可以包括但不限于:7*7的菱形滤波器或5*5的菱形滤波器、7*7十字形加3*3方形的中心对称滤波器,或7*7十字形加5*5方形的中心对称滤波器。
标志位编码(flag coding):在视频编码中,存在很多模式。对于某个块来说,可能采用其中一种模式。为了表示采用何种模式,每个块需要通过编码对应的标志位来进行标记。比如说,针对编码端来说,通过编码端决策,确定该标志位的值,然后对标志位的值进行编码传递到解码端。针对解码端来说,通过解析标志位的值,确定对应模式是否启用。
在标志位的编码过程中,可以通过高层语法实现标志位的编码,高层语法可以用于表示是否允许启用某种模式,即通过高层语法允许启用某种模式,或者禁止启用某种模式。
示例性的,高层语法可以是序列头的高层语法,或者图像参数集级的高层语法,或者片头级的高层语法,或者图像头级的高层语法等,对此高层语法不做限制。
针对序列头的高层语法,存在确定整个视频序列(即多帧视频图像)中是否允许某些模式(工具/方法)开关的标志位。例如,若标志位为取值A(如数值1等),则视频序列可以允许启用该标志位对应的模式;或者,若标志位为取值B(如数值0等),则视频序列可以不允许启用该标志位对应的模式。示例性的,视频序列是位流的最高层语法结构,视频序列由第一个序列头开始,序列结束码或视频编辑码表明了一个视频序列的结束。视频序列的第一个序列头到第一个出现的序列结束码或视频编辑码之间的序列头为重复序列头,每个序列头后面跟着一个或多个编码图像,每幅图像之前应有图像头。
针对图像参数集(PPS,picture parameter set)的高层语法,存在确定某图片(如视频图像)中是否允许某些模式(工具/方法)开关的标志位。若标志位为取值A,则视频图像允许启用该标志位对应的模式;若标志位为取值B,则视频图像不允许启用该标志位对应的模式。
针对图像头(picture header)的高层语法,存在某图像头中是否允许某些模式(工具/方法)开关的标志位。若标志位为取值A,则图像头允许启用该标志位对应的模式;若标志位为取值B,则图像头不允许启用该标志位对应的模式。示例性的,图像头保存的是仅针对当前图像的共同信息,例如,在图像包含多个slice时,多个slice可以通用图像头中的信息。
针对片头(Slice header)的高层语法,存在某个slice中是否允许某些模式(工具/方法)开关的标志位。若标志位为取值A,则slice允许启用该标志位对应的模式;若标志位为取值B,则slice不允许启用该标志位对应的模式。示例性的,一帧图像可以包含1个slice或多个slice,针对片头(Slice header)的高层语法,是针对每个slice配置的高层语法。
高层语法:用于表示是否允许启用某些工具(方法),即通过高层语法允许启用某些工具(方法),或者禁止启用某些工具(方法)。示例性的,参见上述介绍,高层语法可以是序列头的高层语法,或者图像参数集级的高层语法,或者片头级的高层语法,或者图像头级的高层语法,对此高层语法不做限制,只要能够实现上述功能即可。
率失真原则(Rate-Distortion Optimized):评价编码效率的有两大指标:码率和PSNR(Peak Signal to Noise Ratio,峰值信噪比),比特流越小,则压缩率越大,PSNR越大,则重建图像质量越好,在模式选择时,判别公式实质上也就是对二者的综合评价。例如,针对率失真代价(Rate-Distortion Cost)来说,率失真代价的公式为:J(mode)=D+λ*R。其中,D表示Distortion(失真),通常可以使用SSE指标来进行衡量,SSE是指重建图像块与源图像的差值的均方和;λ是拉格朗日乘子,R就是该模式下图像块编码所需的实际比特数,包括编码模式信息、运动信息、残差等所需的比特总和,如R为编码所有滤波系数所需的比特数。在模式选择时,若使用RDO原则去对编码模式做比较决策,通常可以保证编码性能最佳。
块划分技术:一个编码树单元(Coding Tree Unit,简称CTU)使用四叉树递归划分成CU。在叶子节点CU级确定是否使用帧内编码或者帧间编码。CU可以划分成两个或四个预测单元(Prediction Unit,简称PU),同一个PU内使用相同的预测信息。在预测完成后得到残差信息后,一个CU可四叉划分成多个变换单元(Transform Units,简称TU)。例如,本申请中的当前图像块即为一个PU。还可以对块划分技术进行变化,比如说,使用一种混合了二叉树/三叉树/四叉树的划分结构取代原先划分模式,取消CU,PU,TU的概念的区分,支持CU的更灵活的划分方式。CU可以是正方形也可以是矩形划分。CTU首先进行四叉树的划分,然后四叉树划分的叶子节点可以进行二叉树和三叉树的划分。参见图2A所示,CU共有五种划分类型,分别为四叉树划分,水平二叉树划分,垂直二叉树划分,水平三叉树划分和垂直三叉树划分,参见图2B所示,CTU内的CU划分可以是上述五种划分类型的任意组合由上可知不同的划分方式,使得各个PU的形状有所不同,如不同尺寸的矩形,正方形。
在相关技术中,虽然DBF、SAO和ALF技术等均能够实现滤波,但是,应该如何基于DBF、SAO和ALF等实现滤波,相关技术中并没有合理的滤波方式,均存在滤波效果不佳,编码性能比较差等问题。比如说,基于DBF、SAO和ALF等对当前块进行滤波后,可能会出现过滤波现象,也就是说,滤波后的像素值远大于或远小于滤波前的像素值。
针对上述发现,本申请实施例中提出一种编解码方法,通过设计多种滤波器的控制方法,实现灵活控制各个滤波技术的目的,是多模式滤波控制方法。比如说,依次对当前亮度块进行垂直DBF滤波、垂直DBR滤波、水平DBF滤波、水平DBR滤波、ESAO滤波(或SAO滤波)、ALF滤波等滤波过程,从而提出合理的滤波方式,提高滤波效果,提高编码性能。
以下结合具体实施例,对本申请实施例中的编解码方法进行详细说明。
实施例1:本申请实施例中提出一种编解码方法,该编解码方法可以应用于编码端或者解码端,参见图3所示,为该编解码方法的流程示意图,该方法可以包括:
步骤301、获取当前亮度块对应的第一亮度重建块,即滤波前的原始亮度重建块。
示例性的,当前亮度块也可以称为当前亮度分量,即当前块的亮度分量。针对当前亮度块中的每个像素点,可以称为当前像素点,即当前像素点为当前亮度像素点。
步骤302、若当前亮度块启用DBF模式,则对该第一亮度重建块进行垂直DBF滤波,得到第二亮度重建块;否则,基于该第一亮度重建块确定第二亮度重建块,也就是说,若当前亮度块未启用DBF模式,则可以将该第一亮度重建块直接作为第二亮度重建块。
在一种可能的实施方式中,第一亮度重建块可以包括多个像素点的第一亮度重建像素值,第二亮度重建块可以包括多个像素点的第二亮度重建像素值,且第一亮度重建块中的像素点与第二亮度重建块中的像素点一一对应。基于此,垂直DBF滤波过程可以包括:
步骤S11、针对第一亮度重建块中每个当前像素点(即第一亮度重建块中的每个像素点作为当前像素点),若当前像素点满足DBF模式的垂直边界滤波的像素级启用条件,则基于当前像素点的第一亮度重建像素值和当前像素点的周围像素点的第一亮度重建像素值确定当前像素点的第二亮度重建像素值。若当前像素点不满足DBF模式的垂直边界滤波的像素级启用条件,则基于当前像素点的第一亮度重建像素值确定当前像素点的第二亮度重建像素值,也就是说,将当前像素点的第一亮度重建像素值作为当前像素点的第二亮度重建像素值。
示例性的,当前像素点的周围像素点可以是当前像素点的垂直边界周围的像素点。比如说,当前像素点的周围像素点,可以是当前像素点的垂直边界的相邻像素点,也可以是当前像素点的垂直边界的非相邻像素点。当前像素点的周围像素点,可以是位于当前亮度块中的像素点,也可以是位于当前亮度块的相邻亮度块中的像素点。当前像素点的周围像素点,可以是当前像素点左侧的像素点,也可以是当前像素点右侧的像素点,对此当前像素点的周围像素点的位置不做限制。参见图4A所示,为当前像素点的垂直边界的示意图,显然,当前像素点的垂直边界就是一个像素点的边界,是当前像素点所在一行的边界。若当前像素点是当前亮度块中的p0,则当前像素点的周围像素点可以是当前亮度块右侧相邻亮度块中的q0。或者,当前像素点的周围像素点可以包括p1、p2、p3、q0、q1、q2、q3中的至少一个。
示例性的,基于当前像素点的第一亮度重建像素值和当前像素点的周围像素点的第一亮度重建像素值,就可以确定当前像素点的第二亮度重建像素值,对此确定方式不做限制,可以采用DBF滤波的实现方式,而DBF滤波的实现方式可以参见后续实施例。
示例性的,在当前亮度块启用DBF模式的基础上,针对第一亮度重建块中的每个当前像素点,还需要判断当前像素点是否满足DBF模式的垂直边界滤波的像素级启用条件。当前像素点满足DBF模式的垂直边界滤波的像素级启用条件,可以包括但不限于:当前亮度块的垂直边界允许DBF滤波,当前像素点的垂直边界的边界强度(即BS)大于0。比如说,可以先确定当前亮度块的垂直边界是否允许DBF滤波,若当前亮度块的垂直边界不允许DBF滤波,则确定当前像素点不满足DBF模式的垂直边界滤波的像素级启用条件,若当前亮度块的垂直边界允许DBF滤波,则可以确定当前像素点的垂直边界的边界强度。若该边界强度大于0,则确定当前像素点满足DBF模式的垂直边界滤波的像素级启用条件,若该边界强度等于0,则确定当前像素点不满足DBF模式的垂直边界滤波的像素级启用条件。
参见图4A所示,为当前像素点的垂直边界的示意图,参见图4B所示,为当前亮度块的垂直边界的示意图,显然,当前亮度块的垂直边界包括当前像素点的垂直边界,也就是说,当前像素点的垂直边界是当前像素点所在一行的边界,而当前亮度块的垂直边界包括当前亮度块的所有行的边界,当前亮度块的所有行的边界对应同一条竖线边界。
示例性的,满足以下条件之一的当前亮度块的垂直边界不需要滤波,即当前亮度块的垂直边界不允许DBF滤波:若待滤波的垂直边界(待滤波的垂直边界即当前亮度块的垂直边界)是图像边界,则该垂直边界不需要滤波。若待滤波的垂直边界是片边界且跨片环路滤波允许标志为0,则该垂直边界不需要滤波。若待滤波的垂直边界是亮度滤波边界,且该亮度滤波边界不是亮度编码块或者亮度变换块的边界,则该垂直边界不需要滤波。若待滤波的垂直边界是亮度滤波边界,且该亮度滤波边界所在的编码单元的子块变换标志为1,且该亮度滤波边界不是亮度编码块的边界,则该垂直边界不需要滤波。若待滤波的垂直边界所在的编码单元的串复制帧内预测模式标志为1,则该垂直边界不需要滤波。
步骤S12、基于每个当前像素点的第二亮度重建像素值确定第二亮度重建块。
比如说,针对第一亮度重建块中的每个当前像素点,在得到所有当前像素点的第二亮度重建像素值后,可以将所有当前像素点的第二亮度重建像素值组成第二亮度重建块。
步骤S13、若当前像素点满足DBF模式的垂直边界滤波的像素级启用条件,则从当前像素点的垂直边界的相邻亮度块中确定与当前像素点对应的参考像素点。
示例性的,参考像素点可以是相邻亮度块中与当前像素点相邻的像素点,参考像素点也可以是相邻亮度块中与当前像素点非相邻的像素点,参考像素点也可以是相邻亮度块中与当前像素点对称的像素点,对此不做限制。参见图4A所示,为当前像素点的垂直边界的示意图,若当前像素点是当前亮度块中的p0,则参考像素点可以是相邻亮度块中的q0,若当前像素点是当前亮度块中的p1,则参考像素点可以是相邻亮度块中的q1,以此类推。
步骤S14、基于相邻亮度块中的参考像素点的第一亮度重建像素值和参考像素点的周围像素点的第一亮度重建像素值确定参考像素点的第二亮度重建像素值。
示例性的,参考像素点的周围像素点可以是当前像素点的垂直边界(也即参考像素点的垂直边界)周围的像素点。比如说,参考像素点的周围像素点,可以是参考像素点的垂直边界的相邻像素点,也可以是参考像素点的垂直边界的非相邻像素点。参考像素点的周围像素点,可以是位于相邻亮度块中的像素点,也可以是位于当前亮度块中的像素点。参考像素点的周围像素点,可以是参考像素点左侧的像素点,也可以是参考像素点右侧的像素点,对此不做限制。参见图4A所示,为当前像素点/参考像素点的垂直边界的示意图,若参考像素点是相邻亮度块中的q0,则参考像素点的周围像素点可以是当前亮度块中的p0。或者,参考像素点的周围像素点可以包括p0、p1、p2、p3、q1、q2、q3中的至少一个。
示例性的,基于参考像素点的第一亮度重建像素值和参考像素点的周围像素点的第一亮度重建像素值,就可以确定参考像素点的第二亮度重建像素值,对此确定方式不做限制,可以采用DBF滤波的实现方式,而DBF滤波的实现方式可以参见后续实施例。
步骤303、若当前亮度块启用垂直DBR模式,则对该第二亮度重建块进行垂直DBR滤波,得到第三亮度重建块;否则,基于该第二亮度重建块确定第三亮度重建块,也就是说,若当前亮度块未启用垂直DBR模式,则可以将该第二亮度重建块作为第三亮度重建块。
示例性的,DBR模式可以为去块滤波调整(DeBlocking Refinement)模式。
在一种可能的实施方式中,第二亮度重建块可以包括多个像素点的第二亮度重建像素值,第三亮度重建块可以包括多个像素点的第三亮度重建像素值,且第二亮度重建块中的像素点与第三亮度重建块中的像素点一一对应。基于此,垂直DBR滤波过程可以包括:
步骤S21、针对第二亮度重建块中每个当前像素点(即第二亮度重建块中的每个像素点作为当前像素点),若当前像素点满足垂直DBR模式的去块滤波调整模式的像素级启用条件,则基于当前像素点的第二亮度重建像素值和当前像素点的第一亮度重建像素值确定当前像素点的第三亮度重建像素值。若当前像素点满足垂直DBR模式的增强去块滤波调整模式的像素级启用条件,则基于当前像素点的第二亮度重建像素值和当前像素点的周围像素点的第二亮度重建像素值确定当前像素点的梯度值,并基于当前像素点的梯度值和当前像素点的第二亮度重建像素值,确定当前像素点的第三亮度重建像素值。若当前像素点不满足垂直DBR模式的像素级启用条件,则基于当前像素点的第二亮度重建像素值确定当前像素点的第三亮度重建像素值,即将当前像素点的第二亮度重建像素值作为当前像素点的第三亮度重建像素值。
示例性的,在当前亮度块启用垂直DBR模式的基础上,针对第二亮度重建块中的每个当前像素点,还需要判断当前像素点是否满足垂直DBR模式的去块滤波调整模式的像素级启用条件。若是,则可以采用情况一确定当前像素点的第三亮度重建像素值。若否,则还需要判断当前像素点是否满足垂直DBR模式的增强去块滤波调整模式的像素级启用条件。若满足,则可以采用情况二确定当前像素点的第三亮度重建像素值。若不满足,则直接将当前像素点的第二亮度重建像素值作为当前像素点的第三亮度重建像素值,不再执行情况一和情况二。
情况一、若当前像素点满足垂直DBR模式的去块滤波调整模式的像素级启用条件,则可以基于当前像素点的第二亮度重建像素值,当前像素点的第一亮度重建像素值,去块滤波调整模式的垂直调整阈值,去块滤波调整模式的第一垂直调整偏移值和去块滤波调整模式的第二垂直调整偏移值,确定当前像素点的第三亮度重建像素值。
示例性的,当前像素点满足垂直DBR模式的去块滤波调整模式的像素级启用条件,可以包括但不限于:当前亮度块的垂直边界允许垂直DBR滤波;当前像素点的垂直边界的边界强度(即BS)大于0。例如,确定当前亮度块的垂直边界是否允许垂直DBR滤波,若当前亮度块的垂直边界不允许垂直DBR滤波,则确定当前像素点不满足垂直DBR模式的去块滤波调整模式的像素级启用条件,若当前亮度块的垂直边界允许垂直DBR滤波,则确定当前像素点的垂直边界的边界强度。若该边界强度大于0,则确定当前像素点满足垂直DBR模式的去块滤波调整模式的像素级启用条件,若该边界强度等于0,则确定当前像素点不满足垂直DBR模式的去块滤波调整模式的像素级启用条件。关于当前像素点的垂直边界和当前亮度块的垂直边界,可以参见图4A和图4B所示,当前像素点的垂直边界是当前像素点所在一行的边界,而当前亮度块的垂直边界包括当前亮度块的所有行的边界,当前亮度块的所有行的边界对应同一条竖线边界。
示例性的,满足以下条件之一的当前亮度块的垂直边界不需要滤波,即当前亮度块的垂直边界不允许垂直DBR滤波:若待滤波的垂直边界(待滤波的垂直边界即当前亮度块的垂直边界)是图像边界,则该垂直边界不需要滤波。若待滤波的垂直边界是片边界且跨片环路滤波允许标志为0,则该垂直边界不需要滤波。若待滤波的垂直边界是亮度滤波边界,且该亮度滤波边界不是亮度编码块或者亮度变换块的边界,则该垂直边界不需要滤波。若待滤波的垂直边界是亮度滤波边界,且该亮度滤波边界所在的编码单元的子块变换标志为1,且该亮度滤波边界不是亮度编码块的边界,则该垂直边界不需要滤波。若待滤波的垂直边界所在的编码单元的串复制帧内预测模式标志为1,则该垂直边界不需要滤波。
示例性的,可以基于垂直调整阈值确定第一垂直调整阈值和第二垂直调整阈值,第一垂直调整阈值与该垂直调整阈值可以相同,第二垂直调整阈值与该垂直调整阈值可以互为相反数,即第一垂直调整阈值和第二垂直调整阈值互为相反数。基于此,基于当前像素点的第二亮度重建像素值,当前像素点的第一亮度重建像素值,第一垂直调整阈值,第二垂直调整阈值,第一垂直调整偏移值和第二垂直调整偏移值,确定当前像素点的第三亮度重建像素值。
比如说,若当前像素点的第一亮度重建像素值与当前像素点的第二亮度重建像素值之间的差值大于第一垂直调整阈值,则基于当前像素点的第一亮度重建像素值、当前像素点的第二亮度重建像素值和第一垂直调整偏移值,确定当前像素点的第三亮度重建像素值,参见如下公式所示:若pi>Pi+DbrThreshold,则Pi’=Clip1((Pi+pi+1)>>1+DbrOffset0)。pi表示当前像素点的第一亮度重建像素值,Pi表示当前像素点的第二亮度重建像素值,“+DbrThreshold”表示第一垂直调整阈值,Pi’表示当前像素点的第三亮度重建像素值,DbrOffset0表示第一垂直调整偏移值,>>表示右移位。Clip1(x)表示将x限制在[0,2^(bit_depth)-1]之间(包括0和2^(bit_depth)-1),bit_depth表示图像的比特深度,如可以为8、10、12等。
又例如,若当前像素点的第一亮度重建像素值与当前像素点的第二亮度重建像素值之间的差值小于第二垂直调整阈值,则基于当前像素点的第一亮度重建像素值、当前像素点的第二亮度重建像素值和第二垂直调整偏移值,确定当前像素点的第三亮度重建像素值,参见如下公式所示:若pi<Pi-DbrThreshold,则Pi’=Clip1((Pi+pi+1)>>1+DbrOffset1)。pi表示当前像素点的第一亮度重建像素值,Pi表示当前像素点的第二亮度重建像素值,“-DbrThreshold”表示第二垂直调整阈值,Pi’表示当前像素点的第三亮度重建像素值,DbrOffset1表示第二垂直调整偏移值,>>表示右移位。Clip1(x)表示将x限制在[0,2^(bit_depth)-1]之间(包括0和2^(bit_depth)-1),bit_depth表示图像的比特深度,如可以为8、10、12等。
又例如,若当前像素点的第一亮度重建像素值与当前像素点的第二亮度重建像素值之间的差值不大于第一垂直调整阈值,当前像素点的第一亮度重建像素值与当前像素点的第二亮度重建像素值之间的差值不小于第二垂直调整阈值,则基于当前像素点的第二亮度重建像素值确定当前像素点的第三亮度重建像素值,即第二亮度重建像素值作为第三亮度重建像素值。
情况二、若当前像素点满足垂直DBR模式的增强去块滤波调整模式的像素级启用条件,则基于当前像素点的第二亮度重建像素值和当前像素点的周围像素点的第二亮度重建像素值确定当前像素点的梯度值,并基于当前像素点的梯度值和当前像素点的第二亮度重建像素值,确定当前像素点的第三亮度重建像素值。比如说,可以基于当前像素点的梯度值,当前像素点的第二亮度重建像素值,增强去块滤波调整模式的垂直调整阈值,增强去块滤波调整模式的第一增强垂直调整偏移值和增强去块滤波调整模式的第二增强垂直调整偏移值,确定当前像素点的第三亮度重建像素值。
示例性的,当前像素点满足垂直DBR模式的增强去块滤波调整模式的像素级启用条件,可以包括但不限于:当前亮度块的垂直边界允许垂直DBR滤波;当前像素点的垂直边界的边界强度(即BS)等于0。例如,确定当前亮度块的垂直边界是否允许垂直DBR滤波,若当前亮度块的垂直边界不允许垂直DBR滤波,则确定当前像素点不满足垂直DBR模式的增强去块滤波调整模式的像素级启用条件,若当前亮度块的垂直边界允许垂直DBR滤波,则确定当前像素点的垂直边界的边界强度。若该边界强度等于0,则确定当前像素点满足垂直DBR模式的增强去块滤波调整模式的像素级启用条件,若该边界强度大于0,则确定当前像素点不满足垂直DBR模式的增强去块滤波调整模式的像素级启用条件。关于当前像素点的垂直边界和当前亮度块的垂直边界,可以参见图4A和图4B所示,当前像素点的垂直边界是当前像素点所在一行的边界,而当前亮度块的垂直边界包括当前亮度块的所有行的边界,当前亮度块的所有行的边界对应同一条竖线边界。
示例性的,基于当前像素点的第二亮度重建像素值和当前像素点的周围像素点的第二亮度重建像素值确定当前像素点的梯度值,可以包括但不限于:基于如下公式确定当前像素点的梯度值:DPi=(qi–pi+2)>>2。DPi表示当前像素点的梯度值,qi表示当前像素点的周围像素点的第二亮度重建像素值,pi表示当前像素点的第二亮度重建像素值,>>表示右移位。
综上可以看出,当前像素点的梯度值可以基于当前像素点的第二亮度重建像素值和周围像素点的第二亮度重建像素值之间的差值确定,对此梯度值的确定方式不做限制。
当前像素点的周围像素点可以是当前像素点的垂直边界周围的像素点,比如说,当前像素点的周围像素点,可以是当前像素点的垂直边界的相邻像素点,也可以是当前像素点的垂直边界的非相邻像素点。当前像素点的周围像素点,可以是位于当前亮度块中的像素点,也可以是位于当前亮度块的相邻亮度块中的像素点,如当前亮度块的相邻亮度块中与当前像素点对称的像素点。参见图4A所示,为当前像素点的垂直边界的示意图,若当前像素点是当前亮度块中的p0,则当前像素点的周围像素点可以是当前亮度块右侧相邻亮度块中的q0。若当前像素点是当前亮度块中的p1,则当前像素点的周围像素点可以是相邻亮度块中的q1
在一种可能的实施方式中,在确定当前像素点的第三亮度重建像素值的过程中,可以基于当前像素点的梯度值,当前像素点的第二亮度重建像素值,增强去块滤波调整模式的垂直调整阈值,增强去块滤波调整模式的第一增强垂直调整偏移值和增强去块滤波调整模式的第二增强垂直调整偏移值,确定当前像素点的第三亮度重建像素值。
示例性的,可以基于垂直调整阈值确定第一垂直调整阈值和第二垂直调整阈值,第一垂直调整阈值与该垂直调整阈值可以相同,第二垂直调整阈值与该垂直调整阈值可以互为相反数,即第一垂直调整阈值和第二垂直调整阈值互为相反数。基于此,可以基于当前像素点的梯度值,当前像素点的第二亮度重建像素值,第一垂直调整阈值,第二垂直调整阈值,第一增强垂直调整偏移值和第二增强垂直调整偏移值,确定当前像素点的第三亮度重建像素值。
比如说,若当前像素点的梯度值小于第二垂直调整阈值,则可以基于当前像素点的第二亮度重建像素值和第一增强垂直调整偏移值确定当前像素点的第三亮度重建像素值,例如,参见如下公式所示:DPi=(qi–pi+2)>>2,若DPi<–DbrThreshold,则Pi=Clip1(pi+DbrAltOffset0)。在上述公式中,DPi表示当前像素点的梯度值,“–DbrThreshold”表示第二垂直调整阈值,Pi表示当前像素点的第三亮度重建像素值,pi表示当前像素点的第二亮度重建像素值,DbrAltOffset0表示第一增强垂直调整偏移值。Clip1(x)表示将x限制在[0,2^(bit_depth)-1]之间(包括0和2^(bit_depth)-1),bit_depth表示图像的比特深度,如可以为8、10、12等。
又例如,若当前像素点的梯度值大于第一垂直调整阈值,则可以基于当前像素点的第二亮度重建像素值和第二增强垂直调整偏移值确定当前像素点的第三亮度重建像素值,例如,参见如下公式所示:DPi=(qi–pi+2)>>2,若DPi>DbrThreshold,则Pi=Clip1(pi+DbrAltOffset1)。在上述公式中,DPi表示当前像素点的梯度值,“DbrThreshold”表示第一垂直调整阈值,Pi表示当前像素点的第三亮度重建像素值,pi表示当前像素点的第二亮度重建像素值,DbrAltOffset1表示第二增强垂直调整偏移值。Clip1(x)表示将x限制在[0,2^(bit_depth)-1]之间(包括0和2^(bit_depth)-1),bit_depth表示图像的比特深度,如可以为8、10、12等。
又例如,若当前像素点的梯度值不小于第二垂直调整阈值,且当前像素点的梯度值不大于第一垂直调整阈值,则基于当前像素点的第二亮度重建像素值确定当前像素点的第三亮度重建像素值,即将当前像素点的第二亮度重建像素值作为当前像素点的第三亮度重建像素值。
步骤S22、基于每个当前像素点的第三亮度重建像素值确定第三亮度重建块。
比如说,针对第二亮度重建块中的每个当前像素点,在得到所有当前像素点的第三亮度重建像素值后,可以将所有当前像素点的第三亮度重建像素值组成第三亮度重建块。
步骤S23、若当前像素点满足垂直DBR模式的去块滤波调整模式的像素级启用条件,则还可以从当前像素点的垂直边界的相邻亮度块中确定与当前像素点对应的参考像素点,并基于参考像素点的第二亮度重建像素值和参考像素点的第一亮度重建像素值确定参考像素点的第三亮度重建像素值。比如说,基于参考像素点的第二亮度重建像素值,参考像素点的第一亮度重建像素值,去块滤波调整模式的垂直调整阈值,去块滤波调整模式的第一垂直调整偏移值和去块滤波调整模式的第二垂直调整偏移值,确定参考像素点的第三亮度重建像素值。
示例性的,参考像素点可以是相邻亮度块中与当前像素点相邻的像素点,参考像素点也可以是相邻亮度块中与当前像素点非相邻的像素点,参考像素点还可以是相邻亮度块中与当前像素点对称的像素点,对此不做限制。参见图4A所示,为当前像素点的垂直边界的示意图,若当前像素点是当前亮度块中的p0,则参考像素点可以是相邻亮度块中的q0,若当前像素点是当前亮度块中的p1,则参考像素点可以是相邻亮度块中的q1,以此类推。
示例性的,可以基于垂直调整阈值确定第一垂直调整阈值和第二垂直调整阈值,第一垂直调整阈值与该垂直调整阈值可以相同,第二垂直调整阈值与该垂直调整阈值可以互为相反数,即第一垂直调整阈值和第二垂直调整阈值互为相反数。基于此,基于参考像素点的第二亮度重建像素值,参考像素点的第一亮度重建像素值,第一垂直调整阈值,第二垂直调整阈值,第一垂直调整偏移值和第二垂直调整偏移值,确定参考像素点的第三亮度重建像素值。
比如说,若参考像素点的第一亮度重建像素值与参考像素点的第二亮度重建像素值之间的差值大于第一垂直调整阈值,则基于参考像素点的第一亮度重建像素值、参考像素点的第二亮度重建像素值和第一垂直调整偏移值,确定参考像素点的第三亮度重建像素值,参见如下公式所示:若qi>Qi+DbrThreshold,则Qi’=Clip1((Qi+qi+1)>>1+DbrOffset0)。qi表示参考像素点的第一亮度重建像素值,Qi表示参考像素点的第二亮度重建像素值,“+DbrThreshold”表示第一垂直调整阈值,Qi’表示参考像素点的第三亮度重建像素值,DbrOffset0表示第一垂直调整偏移值,>>表示右移位。Clip1(x)表示将x限制在[0,2^(bit_depth)-1]之间(包括0和2^(bit_depth)-1),bit_depth表示图像的比特深度,如可以为8、10、12等。
又例如,若参考像素点的第一亮度重建像素值与参考像素点的第二亮度重建像素值之间的差值小于第二垂直调整阈值,则基于参考像素点的第一亮度重建像素值、参考像素点的第二亮度重建像素值和第二垂直调整偏移值,确定参考像素点的第三亮度重建像素值,参见如下公式所示:若qi<Qi–DbrThreshold,则Qi’=Clip1((Qi+qi+1)>>1+DbrOffset1)。qi表示参考像素点的第一亮度重建像素值,Qi表示参考像素点的第二亮度重建像素值,“-DbrThreshold”表示第二垂直调整阈值,Qi’表示参考像素点的第三亮度重建像素值,DbrOffset1表示第二垂直调整偏移值,>>表示右移位。Clip1(x)表示将x限制在[0,2^(bit_depth)-1]之间(包括0和2^(bit_depth)-1),bit_depth表示图像的比特深度,如可以为8、10、12等。
又例如,若参考像素点的第一亮度重建像素值与参考像素点的第二亮度重建像素值之间的差值不大于第一垂直调整阈值,参考像素点的第一亮度重建像素值与参考像素点的第二亮度重建像素值之间的差值不小于第二垂直调整阈值,则基于参考像素点的第二亮度重建像素值确定参考像素点的第三亮度重建像素值,即第二亮度重建像素值作为第三亮度重建像素值。
步骤S24、若当前像素点满足垂直DBR模式的增强去块滤波调整模式的像素级启用条件,则还可以从当前像素点的垂直边界的相邻亮度块中确定与当前像素点对应的参考像素点,并基于参考像素点的第二亮度重建像素值和参考像素点的周围像素点(该参考像素点的周围像素点可以包括当前像素点的垂直边界周围的像素点)的第二亮度重建像素值确定参考像素点的梯度值,并可以基于参考像素点的梯度值和参考像素点的第二亮度重建像素值,确定参考像素点的第三亮度重建像素值。比如说,可以基于参考像素点的梯度值,参考像素点的第二亮度重建像素值,增强去块滤波调整模式的垂直调整阈值,增强去块滤波调整模式的第一增强垂直调整偏移值和增强去块滤波调整模式的第二增强垂直调整偏移值,确定参考像素点的第三亮度重建像素值。
示例性的,参考像素点可以是相邻亮度块中与当前像素点相邻的像素点,参考像素点也可以是相邻亮度块中与当前像素点非相邻的像素点,参考像素点还可以是相邻亮度块中与当前像素点对称的像素点,对此不做限制。参见图4A所示,为当前像素点的垂直边界的示意图,若当前像素点是当前亮度块中的p0,则参考像素点可以是相邻亮度块中的q0,若当前像素点是当前亮度块中的p1,则参考像素点可以是相邻亮度块中的q1,以此类推。
示例性的,参考像素点的周围像素点可以是当前像素点的垂直边界(也即参考像素点的垂直边界)周围的像素点。比如说,参考像素点的周围像素点,可以是参考像素点的垂直边界的相邻像素点,也可以是参考像素点的垂直边界的非相邻像素点。参考像素点的周围像素点,可以是位于相邻亮度块中的像素点,也可以是位于当前亮度块中的像素点,如当前亮度块中与参考像素点对称的像素点。参见图4A所示,为当前像素点/参考像素点的垂直边界的示意图,若参考像素点是相邻亮度块中的q0,则参考像素点的周围像素点可以是当前亮度块中的p0。或者,参考像素点的周围像素点可以包括p0、p1、p2、p3、q1、q2、q3中的至少一个。
综上可以看出,参考像素点的梯度值可以基于参考像素点的第二亮度重建像素值和周围像素点的第二亮度重建像素值之间的差值确定,对此梯度值的确定方式不做限制。
示例性的,基于参考像素点的第二亮度重建像素值和参考像素点的周围像素点的第二亮度重建像素值确定参考像素点的梯度值,可以包括但不限于:基于如下公式确定参考像素点的梯度值:DQi=(pi–qi+2)>>2。DQi表示参考像素点的梯度值,pi表示参考像素点的周围像素点的第二亮度重建像素值,qi表示参考像素点的第二亮度重建像素值,>>表示右移位。
示例性的,可以基于垂直调整阈值确定第一垂直调整阈值和第二垂直调整阈值,第一垂直调整阈值与该垂直调整阈值可以相同,第二垂直调整阈值与该垂直调整阈值可以互为相反数,即第一垂直调整阈值和第二垂直调整阈值互为相反数。基于此,可以基于参考像素点的梯度值,参考像素点的第二亮度重建像素值,第一垂直调整阈值,第二垂直调整阈值,第一增强垂直调整偏移值和第二增强垂直调整偏移值,确定参考像素点的第三亮度重建像素值。
比如说,若参考像素点的梯度值小于第二垂直调整阈值,则可以基于参考像素点的第二亮度重建像素值和第一增强垂直调整偏移值确定参考像素点的第三亮度重建像素值,例如,参见如下公式所示:DQi=(pi–qi+2)>>2,若DQi<–DbrThreshold,则Qi=Clip1(qi+DbrAltOffset0)。在上述公式中,DQi表示参考像素点的梯度值,“–DbrThreshold”表示第二垂直调整阈值,Qi表示参考像素点的第三亮度重建像素值,qi表示参考像素点的第二亮度重建像素值,DbrAltOffset0表示第一增强垂直调整偏移值。Clip1(x)表示将x限制在[0,2^(bit_depth)-1]之间(包括0和2^(bit_depth)-1),bit_depth表示图像的比特深度,如可以为8、10、12等。
又例如,若参考像素点的梯度值大于第一垂直调整阈值,则可以基于参考像素点的第二亮度重建像素值和第二增强垂直调整偏移值确定参考像素点的第三亮度重建像素值,例如,参见如下公式所示:DQi=(pi–qi+2)>>2,若DQi>DbrThreshold,则Qi=Clip1(qi+DbrAltOffset1)。在上述公式中,DQi表示参考像素点的梯度值,“DbrThreshold”表示第一垂直调整阈值,Qi表示参考像素点的第三亮度重建像素值,qi表示参考像素点的第二亮度重建像素值,DbrAltOffset1表示第二增强垂直调整偏移值。Clip1(x)表示将x限制在[0,2^(bit_depth)-1]之间(包括0和2^(bit_depth)-1),bit_depth表示图像的比特深度,如可以为8、10、12等。
又例如,若参考像素点的梯度值不小于第二垂直调整阈值,且参考像素点的梯度值不大于第一垂直调整阈值,则基于参考像素点的第二亮度重建像素值确定参考像素点的第三亮度重建像素值,即将参考像素点的第二亮度重建像素值作为参考像素点的第三亮度重建像素值。
在上述实施例中,针对当前像素点满足垂直DBR模式的去块滤波调整模式的像素级启用条件的情况,需要基于去块滤波调整模式的垂直调整阈值,去块滤波调整模式的第一垂直调整偏移值和去块滤波调整模式的第二垂直调整偏移值,确定当前像素点的第三亮度重建像素值,在一种可能的实施方式中,可以从高层语法中解析出当前亮度块对应的去块滤波调整模式的垂直调整阈值,去块滤波调整模式的第一垂直调整偏移值和第二垂直调整偏移值。
在上述实施例中,针对当前像素点满足垂直DBR模式的增强去块滤波调整模式的像素级启用条件的情况,需要基于增强去块滤波调整模式的垂直调整阈值(与去块滤波调整模式的垂直调整阈值可以相同,也可以不同,本文以二者相同为例,均记为垂直调整阈值),增强去块滤波调整模式的第一增强垂直调整偏移值和增强去块滤波调整模式的第二增强垂直调整偏移值,确定当前像素点的第三亮度重建像素值,在一种可能的实施方式中,可以从高层语法中解析出当前亮度块对应的增强去块滤波调整模式的垂直调整阈值,增强去块滤波调整模式的第一增强垂直调整偏移值和增强去块滤波调整模式的第二增强垂直调整偏移值。
示例性的,在上述实施例中,高层语法可以包括但不限于如下语法中的一种:序列头级高层语法;图像参数集PPS级高层语法;图像头级高层语法;帧级高层语法;片头级高层语法;编码树单元CTU级高层语法;编码单元CU级高层语法。
步骤304、若当前亮度块启用DBF模式,则对该第三亮度重建块进行水平DBF滤波,得到第四亮度重建块;否则,基于该第三亮度重建块确定第四亮度重建块,也就是说,若当前亮度块未启用DBF模式,则可以将该第三亮度重建块直接作为第四亮度重建块。
在一种可能的实施方式中,第三亮度重建块可以包括多个像素点的第三亮度重建像素值,第四亮度重建块可以包括多个像素点的第四亮度重建像素值,且第三亮度重建块中的像素点与第四亮度重建块中的像素点一一对应。基于此,水平DBF滤波过程可以包括:
步骤S31、针对第三亮度重建块中每个当前像素点(即第三亮度重建块中的每个像素点作为当前像素点),若当前像素点满足DBF模式的水平边界滤波的像素级启用条件,则基于当前像素点的第三亮度重建像素值和当前像素点的周围像素点的第三亮度重建像素值确定当前像素点的第四亮度重建像素值。若当前像素点不满足DBF模式的水平边界滤波的像素级启用条件,则基于当前像素点的第三亮度重建像素值确定当前像素点的第四亮度重建像素值,也就是说,将当前像素点的第三亮度重建像素值作为当前像素点的第四亮度重建像素值。
示例性的,当前像素点的周围像素点可以是当前像素点的水平边界周围的像素点。比如说,当前像素点的周围像素点,可以是当前像素点的水平边界的相邻像素点,也可以是当前像素点的水平边界的非相邻像素点。当前像素点的周围像素点,可以是位于当前亮度块中的像素点,也可以是位于当前亮度块的相邻亮度块中的像素点。当前像素点的周围像素点,可以是当前像素点上侧的像素点,也可以是当前像素点下侧的像素点,对此当前像素点的周围像素点的位置不做限制。参见图4C所示,为当前像素点的水平边界的示意图,显然,当前像素点的水平边界就是一个像素点的边界,是当前像素点所在一列的边界。若当前像素点是当前亮度块中的p0,则当前像素点的周围像素点可以是当前亮度块下侧相邻亮度块中的q0。或者,当前像素点的周围像素点可以包括p1、p2、p3、q0、q1、q2、q3中的至少一个。
示例性的,基于当前像素点的第三亮度重建像素值和当前像素点的周围像素点的第三亮度重建像素值,就可以确定当前像素点的第四亮度重建像素值,对此确定方式不做限制,可以采用DBF滤波的实现方式,而DBF滤波的实现方式可以参见后续实施例。
示例性的,在当前亮度块启用DBF模式的基础上,针对第三亮度重建块中的每个当前像素点,还需要判断当前像素点是否满足DBF模式的水平边界滤波的像素级启用条件。当前像素点满足DBF模式的水平边界滤波的像素级启用条件,可以包括但不限于:当前亮度块的水平边界允许DBF滤波,当前像素点的水平边界的边界强度(即BS)大于0。比如说,可以先确定当前亮度块的水平边界是否允许DBF滤波,若当前亮度块的水平边界不允许DBF滤波,则确定当前像素点不满足DBF模式的水平边界滤波的像素级启用条件,若当前亮度块的水平边界允许DBF滤波,则可以确定当前像素点的水平边界的边界强度。若该边界强度大于0,则确定当前像素点满足DBF模式的水平边界滤波的像素级启用条件,若该边界强度等于0,则确定当前像素点不满足DBF模式的水平边界滤波的像素级启用条件。
参见图4C所示,为当前像素点的水平边界的示意图,参见图4D所示,为当前亮度块的水平边界的示意图,显然,当前亮度块的水平边界包括当前像素点的水平边界,也就是说,当前像素点的水平边界是当前像素点所在一列的边界,而当前亮度块的水平边界包括当前亮度块的所有列的边界,当前亮度块的所有列的边界对应同一条横线边界。
示例性的,满足以下条件之一的当前亮度块的水平边界不需要滤波,即当前亮度块的水平边界不允许DBF滤波:若待滤波的水平边界(待滤波的水平边界即当前亮度块的水平边界)是图像边界,则该水平边界不需要滤波。若待滤波的水平边界是片边界且跨片环路滤波允许标志为0,则该水平边界不需要滤波。若待滤波的水平边界是亮度滤波边界,且该亮度滤波边界不是亮度编码块或者亮度变换块的边界,则该水平边界不需要滤波。若待滤波的水平边界是亮度滤波边界,且该亮度滤波边界所在的编码单元的子块变换标志为1,且该亮度滤波边界不是亮度编码块的边界,则该水平边界不需要滤波。若待滤波的水平边界所在的编码单元的串复制帧内预测模式标志为1,则该水平边界不需要滤波。
步骤S32、基于每个当前像素点的第四亮度重建像素值确定第四亮度重建块。
比如说,针对第三亮度重建块中的每个当前像素点,在得到所有当前像素点的第四亮度重建像素值后,可以将所有当前像素点的第四亮度重建像素值组成第四亮度重建块。
步骤S33、若当前像素点满足DBF模式的水平边界滤波的像素级启用条件,则从当前像素点的水平边界的相邻亮度块中确定与当前像素点对应的参考像素点。
示例性的,参考像素点可以是相邻亮度块中与当前像素点相邻的像素点,参考像素点也可以是相邻亮度块中与当前像素点非相邻的像素点,参考像素点也可以是相邻亮度块中与当前像素点对称的像素点,对此不做限制。参见图4C所示,为当前像素点的水平边界的示意图,若当前像素点是当前亮度块中的p0,则参考像素点可以是相邻亮度块中的q0,若当前像素点是当前亮度块中的p1,则参考像素点可以是相邻亮度块中的q1,以此类推。
步骤S34、基于相邻亮度块中的参考像素点的第三亮度重建像素值和参考像素点的周围像素点的第三亮度重建像素值确定参考像素点的第四亮度重建像素值。
示例性的,参考像素点的周围像素点可以是当前像素点的水平边界(也即参考像素点的水平边界)周围的像素点。比如说,参见图4C所示,为当前像素点/参考像素点的水平边界的示意图,若参考像素点是相邻亮度块中的q0,则参考像素点的周围像素点可以是当前亮度块中的p0。或参考像素点的周围像素点可以包括p0、p1、p2、p3、q1、q2、q3中的至少一个。
示例性的,基于参考像素点的第三亮度重建像素值和参考像素点的周围像素点的第三亮度重建像素值,就可以确定参考像素点的第四亮度重建像素值,对此确定方式不做限制,可以采用DBF滤波的实现方式,而DBF滤波的实现方式可以参见后续实施例。
步骤305、若当前亮度块启用水平DBR模式,则对该第四亮度重建块进行水平DBR滤波,得到第五亮度重建块;否则,基于该第四亮度重建块确定第五亮度重建块,也就是说,若当前亮度块未启用水平DBR模式,则可以将该第四亮度重建块作为第五亮度重建块。
在一种可能的实施方式中,第四亮度重建块可以包括多个像素点的第四亮度重建像素值,第五亮度重建块可以包括多个像素点的第五亮度重建像素值,且第四亮度重建块中的像素点与第五亮度重建块中的像素点一一对应。基于此,水平DBR滤波过程可以包括:
步骤S41、针对第四亮度重建块中每个当前像素点(即第四亮度重建块中的每个像素点作为当前像素点),若当前像素点满足水平DBR模式的去块滤波调整模式的像素级启用条件,则基于当前像素点的第四亮度重建像素值和当前像素点的第三亮度重建像素值确定当前像素点的第五亮度重建像素值。若当前像素点满足水平DBR模式的增强去块滤波调整模式的像素级启用条件,则基于当前像素点的第四亮度重建像素值和当前像素点的周围像素点的第四亮度重建像素值确定当前像素点的梯度值,并基于当前像素点的梯度值和当前像素点的第四亮度重建像素值,确定当前像素点的第五亮度重建像素值。若当前像素点不满足水平DBR模式的像素级启用条件,则基于当前像素点的第四亮度重建像素值确定当前像素点的第五亮度重建像素值,即将当前像素点的第四亮度重建像素值作为当前像素点的第五亮度重建像素值。
示例性的,在当前亮度块启用水平DBR模式的基础上,针对第四亮度重建块中的每个当前像素点,还需要判断当前像素点是否满足水平DBR模式的去块滤波调整模式的像素级启用条件。若是,则可以采用情况三确定当前像素点的第五亮度重建像素值。若否,则还需要判断当前像素点是否满足水平DBR模式的增强去块滤波调整模式的像素级启用条件。若满足,则可以采用情况四确定当前像素点的第五亮度重建像素值。若不满足,则直接将当前像素点的第四亮度重建像素值作为当前像素点的第五亮度重建像素值,不再执行情况三和情况四。
情况三、若当前像素点满足水平DBR模式的去块滤波调整模式的像素级启用条件,则可以基于当前像素点的第四亮度重建像素值,当前像素点的第三亮度重建像素值,去块滤波调整模式的水平调整阈值,去块滤波调整模式的第一水平调整偏移值和去块滤波调整模式的第二水平调整偏移值,确定当前像素点的第五亮度重建像素值。
示例性的,当前像素点满足水平DBR模式的去块滤波调整模式的像素级启用条件,可以包括但不限于:当前亮度块的水平边界允许水平DBR滤波;当前像素点的水平边界的边界强度(即BS)大于0。例如,确定当前亮度块的水平边界是否允许水平DBR滤波,若当前亮度块的水平边界不允许水平DBR滤波,则确定当前像素点不满足水平DBR模式的去块滤波调整模式的像素级启用条件,若当前亮度块的水平边界允许水平DBR滤波,则确定当前像素点的水平边界的边界强度。若该边界强度大于0,则确定当前像素点满足水平DBR模式的去块滤波调整模式的像素级启用条件,若该边界强度等于0,则确定当前像素点不满足水平DBR模式的去块滤波调整模式的像素级启用条件。关于当前像素点的水平边界和当前亮度块的水平边界,可以参见图4C和图4D所示,当前像素点的水平边界是当前像素点所在一列的边界,而当前亮度块的水平边界包括当前亮度块的所有列的边界,当前亮度块的所有列的边界对应同一条横线边界。
示例性的,满足以下条件之一的当前亮度块的水平边界不需要滤波,即当前亮度块的水平边界不允许水平DBR滤波:若待滤波的水平边界(待滤波的水平边界即当前亮度块的水平边界)是图像边界,则该水平边界不需要滤波。若待滤波的水平边界是片边界且跨片环路滤波允许标志为0,则该水平边界不需要滤波。若待滤波的水平边界是亮度滤波边界,且该亮度滤波边界不是亮度编码块或者亮度变换块的边界,则该水平边界不需要滤波。若待滤波的水平边界是亮度滤波边界,且该亮度滤波边界所在的编码单元的子块变换标志为1,且该亮度滤波边界不是亮度编码块的边界,则该水平边界不需要滤波。若待滤波的水平边界所在的编码单元的串复制帧内预测模式标志为1,则该水平边界不需要滤波。
示例性的,可以基于水平调整阈值确定第一水平调整阈值和第二水平调整阈值,第一水平调整阈值与该水平调整阈值可以相同,第二水平调整阈值与该水平调整阈值可以互为相反数,即第一水平调整阈值和第二水平调整阈值互为相反数。基于此,基于当前像素点的第四亮度重建像素值,当前像素点的第三亮度重建像素值,第一水平调整阈值,第二水平调整阈值,第一水平调整偏移值和第二水平调整偏移值,确定当前像素点的第五亮度重建像素值。
比如说,若当前像素点的第三亮度重建像素值与当前像素点的第四亮度重建像素值之间的差值大于第一水平调整阈值,则基于当前像素点的第三亮度重建像素值、当前像素点的第四亮度重建像素值和第一水平调整偏移值,确定当前像素点的第五亮度重建像素值。即,若pi>Pi+DbrThreshold,则Pi’=Clip1((Pi+pi+1)>>1+DbrOffset0)。pi表示当前像素点的第三亮度重建像素值,Pi表示当前像素点的第四亮度重建像素值,“+DbrThreshold”表示第一水平调整阈值,Pi’表示当前像素点的第五亮度重建像素值,DbrOffset0表示第一水平调整偏移值。
又例如,若当前像素点的第三亮度重建像素值与当前像素点的第四亮度重建像素值之间的差值小于第二水平调整阈值,则基于当前像素点的第三亮度重建像素值、当前像素点的第四亮度重建像素值和第二水平调整偏移值,确定当前像素点的第五亮度重建像素值。即,若pi<Pi-DbrThreshold,则Pi’=Clip1((Pi+pi+1)>>1+DbrOffset1)。pi表示当前像素点的第三亮度重建像素值,Pi表示当前像素点的第四亮度重建像素值,“-DbrThreshold”表示第二水平调整阈值,Pi’表示当前像素点的第五亮度重建像素值,DbrOffset1表示第二水平调整偏移值。
又例如,若当前像素点的第三亮度重建像素值与当前像素点的第四亮度重建像素值之间的差值不大于第一水平调整阈值,当前像素点的第三亮度重建像素值与当前像素点的第四亮度重建像素值之间的差值不小于第二水平调整阈值,则基于当前像素点的第四亮度重建像素值确定当前像素点的第五亮度重建像素值,即第四亮度重建像素值作为第五亮度重建像素值。
情况四、若当前像素点满足水平DBR模式的增强去块滤波调整模式的像素级启用条件,则基于当前像素点的第四亮度重建像素值和当前像素点的周围像素点的第四亮度重建像素值确定当前像素点的梯度值,并基于当前像素点的梯度值和当前像素点的第四亮度重建像素值,确定当前像素点的第五亮度重建像素值。比如说,可以基于当前像素点的梯度值,当前像素点的第四亮度重建像素值,增强去块滤波调整模式的水平调整阈值,增强去块滤波调整模式的第一增强水平调整偏移值和增强去块滤波调整模式的第二增强水平调整偏移值,确定当前像素点的第五亮度重建像素值。
示例性的,当前像素点满足水平DBR模式的增强去块滤波调整模式的像素级启用条件,可以包括但不限于:当前亮度块的水平边界允许水平DBR滤波;当前像素点的水平边界的边界强度(即BS)等于0。例如,确定当前亮度块的水平边界是否允许水平DBR滤波,若当前亮度块的水平边界不允许水平DBR滤波,则确定当前像素点不满足水平DBR模式的增强去块滤波调整模式的像素级启用条件,若当前亮度块的水平边界允许水平DBR滤波,则确定当前像素点的水平边界的边界强度。若该边界强度等于0,则确定当前像素点满足水平DBR模式的增强去块滤波调整模式的像素级启用条件,若该边界强度大于0,则确定当前像素点不满足水平DBR模式的增强去块滤波调整模式的像素级启用条件。关于当前像素点的水平边界和当前亮度块的水平边界,可以参见图4C和图4D所示,当前像素点的水平边界是当前像素点所在一列的边界,而当前亮度块的水平边界包括当前亮度块的所有列的边界,当前亮度块的所有列的边界对应同一条横线边界。
示例性的,基于当前像素点的第四亮度重建像素值和当前像素点的周围像素点的第四亮度重建像素值确定当前像素点的梯度值,可以包括但不限于:基于如下公式确定当前像素点的梯度值:DPi=(qi–pi+2)>>2。DPi表示当前像素点的梯度值,qi表示当前像素点的周围像素点的第四亮度重建像素值,pi表示当前像素点的第四亮度重建像素值,>>表示右移位。
当前像素点的周围像素点可以是当前像素点的水平边界周围的像素点,比如说,当前像素点的周围像素点可以是当前像素点的水平边界的相邻像素点,也可以是当前像素点的水平边界的非相邻像素点。当前像素点的周围像素点可以是位于相邻亮度块中的像素点,如相邻亮度块中与当前像素点对称的像素点。参见图4C所示,为当前像素点的水平边界的示意图,若当前像素点是当前亮度块中的p0,则周围像素点可以是当前亮度块下侧相邻亮度块中的q0。若当前像素点是当前亮度块中的p1,则周围像素点可以是相邻亮度块中的q1
在一种可能的实施方式中,可以基于水平调整阈值确定第一水平调整阈值和第二水平调整阈值,第一水平调整阈值与该水平调整阈值可以相同,第二水平调整阈值与该水平调整阈值可以互为相反数,即第一水平调整阈值和第二水平调整阈值互为相反数。基于此,可以基于当前像素点的梯度值,当前像素点的第四亮度重建像素值,增强去块滤波调整模式的第一水平调整阈值,增强去块滤波调整模式的第二水平调整阈值,增强去块滤波调整模式的第一增强水平调整偏移值和增强去块滤波调整模式的第二增强水平调整偏移值,确定当前像素点的第五亮度重建像素值。
比如说,若当前像素点的梯度值小于第二水平调整阈值,则基于当前像素点的第四亮度重建像素值和第一增强水平调整偏移值确定当前像素点的第五亮度重建像素值。若当前像素点的梯度值大于第一水平调整阈值,则基于当前像素点的第四亮度重建像素值和第二增强水平调整偏移值确定当前像素点的第五亮度重建像素值。若当前像素点的梯度值不小于第二水平调整阈值,当前像素点的梯度值不大于第一水平调整阈值,则基于当前像素点的第四亮度重建像素值确定当前像素点的第五亮度重建像素值,即第四亮度重建像素值作为第五亮度重建像素值。
例如,若DPi<–DbrThreshold,则Pi=Clip1(pi+DbrAltOffset0)。若DPi>DbrThreshold,则Pi=Clip1(pi+DbrAltOffset1)。DPi表示梯度值,–DbrThreshold表示第二水平调整阈值,Pi表示第五亮度重建像素值,pi表示第四亮度重建像素值,DbrAltOffset0表示第一增强水平调整偏移值,DbrThreshold表示第一水平调整阈值,DbrAltOffset1表示第二增强水平调整偏移值。
步骤S42、基于每个当前像素点的第五亮度重建像素值确定第五亮度重建块。
比如说,针对第四亮度重建块中的每个当前像素点,在得到所有当前像素点的第五亮度重建像素值后,可以将所有当前像素点的第五亮度重建像素值组成第五亮度重建块。
步骤S43、若当前像素点满足水平DBR模式的去块滤波调整模式的像素级启用条件,则还可以从当前像素点的水平边界的相邻亮度块中确定与当前像素点对应的参考像素点,并基于参考像素点的第四亮度重建像素值和参考像素点的第三亮度重建像素值确定参考像素点的第五亮度重建像素值。比如说,基于参考像素点的第四亮度重建像素值,参考像素点的第三亮度重建像素值,去块滤波调整模式的水平调整阈值,去块滤波调整模式的第一水平调整偏移值和去块滤波调整模式的第二水平调整偏移值,确定参考像素点的第五亮度重建像素值。
示例性的,参考像素点可以是相邻亮度块中与当前像素点相邻的像素点,或与当前像素点非相邻的像素点,或相邻亮度块中与当前像素点对称的像素点,对此不做限制。参见图4C所示,若当前像素点是当前亮度块中的p0,则参考像素点可以是相邻亮度块中的q0,若当前像素点是当前亮度块中的p1,则参考像素点可以是相邻亮度块中的q1,以此类推。
示例性的,可以基于水平调整阈值确定第一水平调整阈值和第二水平调整阈值,第一水平调整阈值与该水平调整阈值可以相同,第二水平调整阈值与该水平调整阈值可以互为相反数,即第一水平调整阈值和第二水平调整阈值互为相反数。基于此,基于参考像素点的第四亮度重建像素值,参考像素点的第三亮度重建像素值,第一水平调整阈值,第二水平调整阈值,第一水平调整偏移值和第二水平调整偏移值,确定参考像素点的第五亮度重建像素值。
比如说,若参考像素点的第三亮度重建像素值与参考像素点的第四亮度重建像素值之间的差值大于第一水平调整阈值,则基于参考像素点的第三亮度重建像素值、参考像素点的第四亮度重建像素值和第一水平调整偏移值,确定参考像素点的第五亮度重建像素值。若参考像素点的第三亮度重建像素值与参考像素点的第四亮度重建像素值之间的差值小于第二水平调整阈值,则基于参考像素点的第三亮度重建像素值、参考像素点的第四亮度重建像素值和第二水平调整偏移值,确定参考像素点的第五亮度重建像素值。若参考像素点的第三亮度重建像素值与参考像素点的第四亮度重建像素值之间的差值不大于第一水平调整阈值,参考像素点的第三亮度重建像素值与参考像素点的第四亮度重建像素值之间的差值不小于第二水平调整阈值,则基于参考像素点的第四亮度重建像素值确定参考像素点的第五亮度重建像素值。
例如,若qi>Qi+DbrThreshold,Qi’=Clip1((Qi+qi+1)>>1+DbrOffset0)。若qi<Qi–DbrThreshold,则Qi’=Clip1((Qi+qi+1)>>1+DbrOffset1)。在上述公式中,qi表示参考像素点的第三亮度重建像素值,Qi表示参考像素点的第四亮度重建像素值,+DbrThreshold表示第一水平调整阈值,Qi’表示参考像素点的第五亮度重建像素值,DbrOffset0表示第一水平调整偏移值,-DbrThreshold表示第二水平调整阈值,DbrOffset1表示第二水平调整偏移值。
步骤S44、若当前像素点满足水平DBR模式的增强去块滤波调整模式的像素级启用条件,则还可以从当前像素点的水平边界的相邻亮度块中确定与当前像素点对应的参考像素点,并基于参考像素点的第四亮度重建像素值和参考像素点的周围像素点(该参考像素点的周围像素点可以包括当前像素点的水平边界周围的像素点)的第四亮度重建像素值确定参考像素点的梯度值,并可以基于参考像素点的梯度值和参考像素点的第四亮度重建像素值,确定参考像素点的第五亮度重建像素值。比如说,可以基于参考像素点的梯度值,参考像素点的第四亮度重建像素值,增强去块滤波调整模式的水平调整阈值,增强去块滤波调整模式的第一增强水平调整偏移值和增强去块滤波调整模式的第二增强水平调整偏移值,确定参考像素点的第五亮度重建像素值。
示例性的,参考像素点可以是相邻亮度块中与当前像素点相邻的像素点,参考像素点还可以是相邻亮度块中与当前像素点对称的像素点,参见图4C所示,若当前像素点是当前亮度块中的p0,则参考像素点可以是相邻亮度块中的q0,以此类推。参考像素点的周围像素点可以是当前像素点的水平边界(也即参考像素点的水平边界)周围的像素点。
示例性的,基于参考像素点的第四亮度重建像素值和参考像素点的周围像素点的第四亮度重建像素值确定参考像素点的梯度值,可以包括但不限于:基于如下公式确定参考像素点的梯度值:DQi=(pi–qi+2)>>2。DQi表示参考像素点的梯度值,pi表示参考像素点的周围像素点的第四亮度重建像素值,qi表示参考像素点的第四亮度重建像素值,>>表示右移位。
示例性的,可以基于水平调整阈值确定第一水平调整阈值和第二水平调整阈值,第一水平调整阈值和第二水平调整阈值互为相反数。基于此,可以基于参考像素点的梯度值,参考像素点的第四亮度重建像素值,第一水平调整阈值,第二水平调整阈值,第一增强水平调整偏移值和第二增强水平调整偏移值,确定参考像素点的第五亮度重建像素值。
比如说,若参考像素点的梯度值小于第二水平调整阈值,则基于参考像素点的第四亮度重建像素值和第一增强水平调整偏移值确定参考像素点的第五亮度重建像素值。若参考像素点的梯度值大于第一水平调整阈值,则基于参考像素点的第四亮度重建像素值和第二增强水平调整偏移值确定参考像素点的第五亮度重建像素值。若参考像素点的梯度值不小于第二水平调整阈值,参考像素点的梯度值不大于第一水平调整阈值,则基于参考像素点的第四亮度重建像素值确定参考像素点的第五亮度重建像素值,即第四亮度重建像素值作为第五亮度重建像素值。
例如,若DQi<–DbrThreshold,则Qi=Clip1(qi+DbrAltOffset0)。若DQi>DbrThreshold,则Qi=Clip1(qi+DbrAltOffset1)。DQi表示梯度值,–DbrThreshold表示第二水平调整阈值,Qi表示第五亮度重建像素值,qi表示第四亮度重建像素值,DbrAltOffset0表示第一增强水平调整偏移值,DbrThreshold表示第一水平调整阈值,DbrAltOffset1表示第二增强水平调整偏移值。
在上述实施例中,针对当前像素点满足水平DBR模式的去块滤波调整模式的像素级启用条件的情况,需要基于去块滤波调整模式的水平调整阈值,去块滤波调整模式的第一水平调整偏移值和去块滤波调整模式的第二水平调整偏移值,确定当前像素点的第五亮度重建像素值,在一种可能的实施方式中,可以从高层语法中解析出当前亮度块对应的去块滤波调整模式的水平调整阈值,去块滤波调整模式的第一水平调整偏移值和第二水平调整偏移值。
在上述实施例中,针对当前像素点满足水平DBR模式的增强去块滤波调整模式的像素级启用条件的情况,需要基于增强去块滤波调整模式的水平调整阈值(与去块滤波调整模式的水平调整阈值可以相同,也可以不同,本文以二者相同为例,即均记为水平调整阈值),增强去块滤波调整模式的第一增强水平调整偏移值和增强去块滤波调整模式的第二增强水平调整偏移值,确定当前像素点的第五亮度重建像素值,在一种可能的实施方式中,可以从高层语法中解析出当前亮度块对应的增强去块滤波调整模式的水平调整阈值,增强去块滤波调整模式的第一增强水平调整偏移值和增强去块滤波调整模式的第二增强水平调整偏移值。
示例性的,在上述实施例中,高层语法可以包括但不限于如下语法中的一种:序列头级高层语法;图像参数集PPS级高层语法;图像头级高层语法;帧级高层语法;片头级高层语法;编码树单元CTU级高层语法;编码单元CU级高层语法。
步骤306、若当前亮度块启用ESAO模式,则对该第五亮度重建块进行ESAO滤波,得到第六亮度重建块;否则,若当前亮度块启用SAO模式,则对该第五亮度重建块进行SAO滤波,得到第六亮度重建块;否则(即当前亮度块未启用ESAO模式,且当前亮度块未启用ESAO模式),基于该第五亮度重建块确定第六亮度重建块。
比如说,可以先确定当前亮度块是否启用ESAO模式,若启用ESAO模式,则对该第五亮度重建块进行ESAO滤波,得到第六亮度重建块。若未启用ESAO模式,则确定当前亮度块是否启用SAO模式,若启用SAO模式,则对该第五亮度重建块进行SAO滤波,得到第六亮度重建块。若未启用SAO模式,则将第五亮度重建块作为第六亮度重建块。
示例性的,对该第五亮度重建块进行ESAO滤波,得到第六亮度重建块,可以包括但不限于:基于该第五亮度重建块确定增强样值偏移补偿块,并对该增强样值偏移补偿块内的各个像素点的亮度重建像素值进行操作,得到偏移后的亮度重建像素值。基于各个像素点的偏移后的亮度重建像素值确定第六亮度重建块,即将这些偏移后的亮度重建像素值组成第六亮度重建块。当然,上述只是ESAO滤波的示例,对此ESAO滤波的实现方式不做限制。
示例性的,对该第五亮度重建块进行SAO滤波,得到第六亮度重建块,可以包括但不限于:基于该第五亮度重建块确定基本样值偏移补偿块,确定与该基本样值偏移补偿块对应的基本样值偏移补偿信息,并基于该基本样值偏移补偿信息对该基本样值偏移补偿块内的各个像素点的亮度重建像素值进行操作,得到偏移后的亮度重建像素值。基于各个像素点的偏移后的亮度重建像素值确定第六亮度重建块,即将这些偏移后的亮度重建像素值组成第六亮度重建块。当然,上述只是SAO滤波的示例,对此SAO滤波的实现方式不做限制。
步骤307、若当前亮度块启用ALF模式,则对第六亮度重建块进行ALF滤波,得到第七亮度重建块;否则,基于第六亮度重建块确定第七亮度重建块,也就是说,若当前亮度块未启用ALF模式,则可以将第六亮度重建块作为第七亮度重建块,即经过滤波后的重建块。
示例性的,对第六亮度重建块进行ALF滤波,得到第七亮度重建块,可以包括但不限于:基于该第六亮度重建块确定自适应修正滤波块,并确定与该自适应修正滤波块对应的自适应修正滤波系数,基于该自适应修正滤波系数对该自适应修正滤波块内的各个像素点的亮度重建像素值进行自适应修正滤波,得到自适应修正滤波后的亮度重建像素值。基于各个像素点的自适应修正滤波后的亮度重建像素值确定第七亮度重建块,即将这些自适应修正滤波后的亮度重建像素值组成第七亮度重建块。当然,上述只是ALF滤波的示例,对此不做限制。
在一种可能的实施方式中,还可以获取ESAO允许标志位(允许标志位也可以称为使能标志位),该ESAO允许标志位允许当前亮度块启用ESAO模式,或者,该ESAO允许标志位禁止当前亮度块启用ESAO模式。比如说,若ESAO允许标志位为第一取值(如1),则允许当前亮度块启用ESAO模式,若ESAO允许标志位为第二取值(如0),则禁止当前亮度块启用ESAO模式。ESAO允许标志位可以是序列头级的ESAO允许标志位、或PPS级的ESAO允许标志位、或图像头级的ESAO允许标志位、或帧级的ESAO允许标志位、或片头级的ESAO允许标志位、或CTU级的ESAO允许标志位、或CU级的ESAO允许标志位。当然,上述只是几个示例,对ESAO允许标志位的高层语法不做限制。
还可以获取SAO允许标志位,该SAO允许标志位允许当前亮度块启用SAO模式,或者,该SAO允许标志位禁止当前亮度块启用SAO模式。比如说,若SAO允许标志位为第一取值(如1),则允许当前亮度块启用SAO模式,若SAO允许标志位为第二取值(如0),则禁止当前亮度块启用SAO模式。示例性的,SAO允许标志位可以是序列头级的SAO允许标志位、或PPS级的SAO允许标志位、或图像头级的SAO允许标志位、或帧级的SAO允许标志位、或片头级的SAO允许标志位、或CTU级的SAO允许标志位、或CU级的SAO允许标志位。当然,上述只是几个示例,对SAO允许标志位的高层语法不做限制。
还可以获取ALF允许标志位,该ALF允许标志位允许当前亮度块启用ALF模式,或者,该ALF允许标志位禁止当前亮度块启用ALF模式。比如说,若ALF允许标志位为第一取值(如1),则允许当前亮度块启用ALF模式,若ALF允许标志位为第二取值(如0),则禁止当前亮度块启用ALF模式。示例性的,ALF允许标志位可以是序列头级的ALF允许标志位、或PPS级的ALF允许标志位、或图像头级的ALF允许标志位、或帧级的ALF允许标志位、或片头级的ALF允许标志位、或CTU级的ALF允许标志位、或CU级的ALF允许标志位。当然,上述只是几个示例,对ALF允许标志位的高层语法不做限制。
还可以获取DBF允许标志位,该DBF允许标志位允许当前亮度块启用DBF模式,或该DBF允许标志位禁止当前亮度块启用DBF模式;比如说,若DBF允许标志位为第一取值(如1),则允许当前亮度块启用DBF模式,若DBF允许标志位为第二取值(如0),则禁止当前亮度块启用DBF模式。示例性的,DBF允许标志位可以是图像头级的DBF允许标志位。当然,上述只是DBF允许标志位的示例,对DBF允许标志位的高层语法不做限制。如还可以是序列头级、或PPS级、或帧级、或片头级、或CTU级、或CU级的DBF允许标志位。
在一种可能的实施方式中,若DBF允许标志位允许当前亮度块启用DBF模式,则还可以获取垂直DBR允许标志位和水平DBR允许标志位。该垂直DBR允许标志位允许当前亮度块启用垂直DBR模式,或者,该垂直DBR允许标志位禁止当前亮度块启用垂直DBR模式;比如说,若垂直DBR允许标志位为第一取值(如1),则允许当前亮度块启用垂直DBR模式,若垂直DBR允许标志位为第二取值(如0),则禁止当前亮度块启用垂直DBR模式。该水平DBR允许标志位允许当前亮度块启用水平DBR模式,或者,该水平DBR允许标志位禁止当前亮度块启用水平DBR模式;比如说,若水平DBR允许标志位为第一取值(如1),则允许当前亮度块启用水平DBR模式,若水平DBR允许标志位为第二取值(如0),则禁止当前亮度块启用水平DBR模式。
若DBF允许标志位禁止当前亮度块启用DBF模式,如DBF允许标志位为第二取值,则不需要获取垂直DBR允许标志位和水平DBR允许标志位,可以直接确定禁止当前亮度块启用垂直DBR模式,并确定禁止当前亮度块启用水平DBR模式。
在另一种可能的实施方式中,还可以获取垂直DBR允许标志位和水平DBR允许标志位,也就是说,获取过程并不需要参考DBF允许标志位的取值。
示例性的,垂直DBR允许标志位可以是图像头级的垂直DBR允许标志位。当然,上述只是示例,对垂直DBR允许标志位的高层语法不做限制。比如说,还可以是序列头级、或PPS级、或帧级、或片头级、或CTU级、或CU级的垂直DBR允许标志位。
示例性的,水平DBR允许标志位可以是图像头级的水平DBR允许标志位。当然,上述只是示例,对水平DBR允许标志位的高层语法不做限制。比如说,还可以是序列头级、或PPS级、或帧级、或片头级、或CTU级、或CU级的水平DBR允许标志位。
在上述实施例中,若DBF允许标志位允许当前亮度块启用DBF模式,则获取垂直DBR允许标志位和水平DBR允许标志位,可以包括但不限于:若DBF允许标志位允许当前亮度块启用DBF模式,且当前亮度块的编码比特流中携带的档次标识大于或者等于预设标识号,则获取垂直DBR允许标志位和水平DBR允许标志位。
由以上技术方案可见,本申请实施例中,若当前亮度块启用DBF模式,则对第一亮度重建块进行垂直DBF滤波,得到第二亮度重建块,若当前亮度块启用垂直DBR模式,则对第二亮度重建块进行垂直DBR滤波,得到第三亮度重建块,若当前亮度块启用DBF模式,则对第三亮度重建块进行水平DBF滤波,得到第四亮度重建块,若当前亮度块启用水平DBR模式,则对第四亮度重建块进行水平DBR滤波,得到第五亮度重建块,若当前亮度块启用ESAO模式,则对第五亮度重建块进行ESAO滤波,得到第六亮度重建块(或若当前亮度块启用SAO模式,则对第五亮度重建块进行SAO滤波,得到第六亮度重建块),若当前亮度块启用ALF模式,则对第六亮度重建块进行ALF滤波,得到第七亮度重建块。综上可以看出,可以依次对当前亮度块进行垂直DBF滤波、垂直DBR滤波、水平DBF滤波、水平DBR滤波、ESAO滤波(或SAO滤波)、ALF滤波等滤波过程,从而提出合理的滤波方式,避免出现滤波效果不佳,编码性能比较差等问题,即可以提高滤波效果,提高编码性能,不会出现过滤波现象,即滤波后的像素值不会远大于或远小于滤波前的像素值。在对像素值进行上述各种滤波处理后,滤波后的像素值更加接近真实像素,能够提升图像质量。
实施例2:本申请实施例中提出一种编解码方法,该编解码方法可以应用于编码端或者解码端,参见图5所示,为该编解码方法的流程示意图,该方法可以包括:
步骤501、获取当前色度块对应的第一色度重建块,即滤波前的原始色度重建块。
示例性的,当前色度块也可以称为当前色度分量,即当前块的色度分量。针对当前色度块中的每个像素点,可以称为当前像素点,即当前像素点为当前色度像素点。
步骤502、若当前色度块启用DBF模式,则对该第一色度重建块进行垂直DBF滤波,得到第二色度重建块;否则,基于该第一色度重建块确定第二色度重建块,也就是说,若当前色度块未启用DBF模式,则可以将该第一色度重建块直接作为第二色度重建块。
在一种可能的实施方式中,第一色度重建块可以包括多个像素点的第一色度重建像素值,第二色度重建块可以包括多个像素点的第二色度重建像素值,且第一色度重建块中的像素点与第二色度重建块中的像素点一一对应。基于此,垂直DBF滤波过程可以包括:
步骤S51、针对第一色度重建块中每个当前像素点(即第一色度重建块中的每个像素点作为当前像素点),若当前像素点满足DBF模式的垂直边界滤波的像素级启用条件,则基于当前像素点的第一色度重建像素值和当前像素点的周围像素点的第一色度重建像素值确定当前像素点的第二色度重建像素值。若当前像素点不满足DBF模式的垂直边界滤波的像素级启用条件,则基于当前像素点的第一色度重建像素值确定当前像素点的第二色度重建像素值,也就是说,将当前像素点的第一色度重建像素值作为当前像素点的第二色度重建像素值。
示例性的,当前像素点的周围像素点可以是当前像素点的垂直边界周围的像素点。比如说,当前像素点的周围像素点,可以是当前像素点的垂直边界的相邻像素点,也可以是当前像素点的垂直边界的非相邻像素点。当前像素点的周围像素点,可以是位于当前色度块中的像素点,也可以是位于当前色度块的相邻色度块中的像素点。当前像素点的周围像素点,可以是当前像素点左侧的像素点,也可以是当前像素点右侧的像素点,对此当前像素点的周围像素点的位置不做限制。参见图4A所示,为当前像素点的垂直边界的示意图,若当前像素点是当前色度块中的p0,则当前像素点的周围像素点可以是当前色度块右侧相邻色度块中的q0。或者,当前像素点的周围像素点可以包括p1、p2、p3、q0、q1、q2、q3中的至少一个。
示例性的,基于当前像素点的第一色度重建像素值和当前像素点的周围像素点的第一色度重建像素值,就可以确定当前像素点的第二色度重建像素值,对此确定方式不做限制,可以采用DBF滤波的实现方式,而DBF滤波的实现方式可以参见后续实施例。
示例性的,在当前色度块启用DBF模式的基础上,针对第一色度重建块中的每个当前像素点,还需要判断当前像素点是否满足DBF模式的垂直边界滤波的像素级启用条件。当前像素点满足DBF模式的垂直边界滤波的像素级启用条件,可以包括但不限于:当前色度块的垂直边界允许DBF滤波,当前像素点的垂直边界的边界强度(即BS)大于0。比如说,可以先确定当前色度块的垂直边界是否允许DBF滤波,若当前色度块的垂直边界不允许DBF滤波,则确定当前像素点不满足DBF模式的垂直边界滤波的像素级启用条件,若当前色度块的垂直边界允许DBF滤波,则可以确定当前像素点的垂直边界的边界强度。若该边界强度大于0,则确定当前像素点满足DBF模式的垂直边界滤波的像素级启用条件,若该边界强度等于0,则确定当前像素点不满足DBF模式的垂直边界滤波的像素级启用条件。参见图4A和图4B所示,当前色度块的垂直边界包括当前像素点的垂直边界,当前像素点的垂直边界是当前像素点所在一行的边界,而当前色度块的垂直边界包括当前色度块的所有行的边界。
示例性的,满足以下条件之一的当前色度块的垂直边界不需要滤波,即当前色度块的垂直边界不允许DBF滤波:若待滤波的垂直边界(待滤波的垂直边界即当前色度块的垂直边界)是图像边界,则该垂直边界不需要滤波。若待滤波的垂直边界是片边界且跨片环路滤波允许标志为0,则该垂直边界不需要滤波。若待滤波的垂直边界是色度滤波边界,且该色度滤波边界不是色度编码块或者色度变换块的边界,且该色度滤波边界对应的亮度滤波边界不是亮度编码块的边界,则该垂直边界不需要滤波。若待滤波的垂直边界是亮度滤波边界,且该亮度滤波边界所在的编码单元的子块变换标志为1,且该亮度滤波边界不是亮度编码块的边界,则该垂直边界不需要滤波。若待滤波的垂直边界所在的编码单元的串复制帧内预测模式标志为1,则该垂直边界不需要滤波。
步骤S52、基于每个当前像素点的第二色度重建像素值确定第二色度重建块。
比如说,针对第一色度重建块中的每个当前像素点,在得到所有当前像素点的第二色度重建像素值后,可以将所有当前像素点的第二色度重建像素值组成第二色度重建块。
步骤S53、若当前像素点满足DBF模式的垂直边界滤波的像素级启用条件,则从当前像素点的垂直边界的相邻色度块中确定与当前像素点对应的参考像素点。
示例性的,参考像素点可以是相邻色度块中与当前像素点相邻的像素点,参考像素点也可以是相邻色度块中与当前像素点非相邻的像素点,参考像素点也可以是相邻色度块中与当前像素点对称的像素点,对此不做限制。参见图4A所示,为当前像素点的垂直边界的示意图,若当前像素点是当前色度块中的p0,则参考像素点可以是相邻色度块中的q0,若当前像素点是当前色度块中的p1,则参考像素点可以是相邻色度块中的q1,以此类推。
步骤S54、基于相邻色度块中的参考像素点的第一色度重建像素值和参考像素点的周围像素点的第一色度重建像素值确定参考像素点的第二色度重建像素值。
示例性的,参考像素点的周围像素点可以是当前像素点的垂直边界(也即参考像素点的垂直边界)周围的像素点。比如说,参考像素点的周围像素点,可以是参考像素点的垂直边界的相邻像素点,也可以是参考像素点的垂直边界的非相邻像素点。参考像素点的周围像素点,可以是位于相邻色度块中的像素点,也可以是位于当前色度块中的像素点。参考像素点的周围像素点,可以是参考像素点左侧的像素点,也可以是参考像素点右侧的像素点,对此不做限制。参见图4A所示,为当前像素点/参考像素点的垂直边界的示意图,若参考像素点是相邻色度块中的q0,则参考像素点的周围像素点可以是当前色度块中的p0。或者,参考像素点的周围像素点可以包括p0、p1、p2、p3、q1、q2、q3中的至少一个。
示例性的,基于参考像素点的第一色度重建像素值和参考像素点的周围像素点的第一色度重建像素值,就可以确定参考像素点的第二色度重建像素值,对此确定方式不做限制,可以采用DBF滤波的实现方式,而DBF滤波的实现方式可以参见后续实施例。
步骤503、若当前色度块启用DBF模式,则对该第二色度重建块进行水平DBF滤波,得到第三色度重建块;否则,基于该第二色度重建块确定第三色度重建块,也就是说,若当前色度块未启用DBF模式,则可以将该第二色度重建块直接作为第三色度重建块。
在一种可能的实施方式中,第二色度重建块可以包括多个像素点的第二色度重建像素值,第三色度重建块可以包括多个像素点的第三色度重建像素值,且第二色度重建块中的像素点与第三色度重建块中的像素点一一对应。基于此,水平DBF滤波过程可以包括:
步骤S61、针对第二色度重建块中每个当前像素点(即第二色度重建块中的每个像素点作为当前像素点),若当前像素点满足DBF模式的水平边界滤波的像素级启用条件,则基于当前像素点的第二色度重建像素值和当前像素点的周围像素点的第二色度重建像素值确定当前像素点的第三色度重建像素值。若当前像素点不满足DBF模式的水平边界滤波的像素级启用条件,则基于当前像素点的第二色度重建像素值确定当前像素点的第三色度重建像素值,也就是说,将当前像素点的第二色度重建像素值作为当前像素点的第三色度重建像素值。
示例性的,当前像素点的周围像素点可以是当前像素点的水平边界周围的像素点。比如说,当前像素点的周围像素点,可以是当前像素点的水平边界的相邻像素点,也可以是当前像素点的水平边界的非相邻像素点。当前像素点的周围像素点,可以是位于当前色度块中的像素点,也可以是位于当前色度块的相邻色度块中的像素点。当前像素点的周围像素点,可以是当前像素点上侧的像素点,也可以是当前像素点下侧的像素点,对此当前像素点的周围像素点的位置不做限制。参见图4C所示,为当前像素点的水平边界的示意图,若当前像素点是当前色度块中的p0,则当前像素点的周围像素点可以是当前色度块下侧相邻色度块中的q0。或者,当前像素点的周围像素点可以包括p1、p2、p3、q0、q1、q2、q3中的至少一个。
示例性的,基于当前像素点的第二色度重建像素值和当前像素点的周围像素点的第二色度重建像素值,就可以确定当前像素点的第三色度重建像素值,对此确定方式不做限制,可以采用DBF滤波的实现方式,而DBF滤波的实现方式可以参见后续实施例。
示例性的,在当前色度块启用DBF模式的基础上,针对第二色度重建块中的每个当前像素点,还需要判断当前像素点是否满足DBF模式的水平边界滤波的像素级启用条件。当前像素点满足DBF模式的水平边界滤波的像素级启用条件,可以包括但不限于:当前色度块的水平边界允许DBF滤波,当前像素点的水平边界的边界强度(即BS)大于0。比如说,可以先确定当前色度块的水平边界是否允许DBF滤波,若当前色度块的水平边界不允许DBF滤波,则确定当前像素点不满足DBF模式的水平边界滤波的像素级启用条件,若当前色度块的水平边界允许DBF滤波,则可以确定当前像素点的水平边界的边界强度。若该边界强度大于0,则确定当前像素点满足DBF模式的水平边界滤波的像素级启用条件,若该边界强度等于0,则确定当前像素点不满足DBF模式的水平边界滤波的像素级启用条件。参见图4C和图4D所示,当前色度块的水平边界包括当前像素点的水平边界,当前像素点的水平边界是当前像素点所在一列的边界,而当前色度块的水平边界包括当前色度块的所有列的边界。
示例性的,满足以下条件之一的当前色度块的水平边界不需要滤波,即当前色度块的水平边界不允许DBF滤波:若待滤波的水平边界(待滤波的水平边界即当前色度块的水平边界)是图像边界,则该水平边界不需要滤波。若待滤波的水平边界是片边界且跨片环路滤波允许标志为0,则该水平边界不需要滤波。若待滤波的水平边界是色度滤波边界,且该色度滤波边界不是色度编码块或者色度变换块的边界,且该色度滤波边界对应的亮度滤波边界不是亮度编码块的边界,则该水平边界不需要滤波。若待滤波的水平边界是亮度滤波边界,且该亮度滤波边界所在的编码单元的子块变换标志为1,且该亮度滤波边界不是亮度编码块的边界,则该水平边界不需要滤波。若待滤波的水平边界所在的编码单元的串复制帧内预测模式标志为1,则该水平边界不需要滤波。
步骤S62、基于每个当前像素点的第三色度重建像素值确定第三色度重建块。
比如说,针对第二色度重建块中的每个当前像素点,在得到所有当前像素点的第三色度重建像素值后,可以将所有当前像素点的第三色度重建像素值组成第三色度重建块。
步骤S63、若当前像素点满足DBF模式的水平边界滤波的像素级启用条件,则从当前像素点的水平边界的相邻色度块中确定与当前像素点对应的参考像素点。
示例性的,参考像素点可以是相邻色度块中与当前像素点相邻的像素点,参考像素点也可以是相邻色度块中与当前像素点非相邻的像素点,参考像素点也可以是相邻色度块中与当前像素点对称的像素点,对此不做限制。参见图4C所示,为当前像素点的水平边界的示意图,若当前像素点是当前色度块中的p0,则参考像素点可以是相邻色度块中的q0,若当前像素点是当前色度块中的p1,则参考像素点可以是相邻色度块中的q1,以此类推。
步骤S64、基于相邻色度块中的参考像素点的第二色度重建像素值和参考像素点的周围像素点的第二色度重建像素值确定参考像素点的第三色度重建像素值。
示例性的,参考像素点的周围像素点可以是当前像素点的水平边界(也即参考像素点的水平边界)周围的像素点。比如说,参见图4C所示,为当前像素点/参考像素点的水平边界的示意图,若参考像素点是相邻色度块中的q0,则参考像素点的周围像素点可以是当前色度块中的p0。或参考像素点的周围像素点可以包括p0、p1、p2、p3、q1、q2、q3中的至少一个。
示例性的,基于参考像素点的第二色度重建像素值和参考像素点的周围像素点的第二色度重建像素值,就可以确定参考像素点的第三色度重建像素值,对此确定方式不做限制,可以采用DBF滤波的实现方式,而DBF滤波的实现方式可以参见后续实施例。
步骤504、若当前色度块启用ESAO模式,则对该第三色度重建块进行ESAO滤波,得到第四色度重建块;否则,若当前色度块启用SAO模式,则对该第三色度重建块进行SAO滤波,得到第四色度重建块;否则(即当前色度块未启用ESAO模式,且当前色度块未启用ESAO模式),基于该第三色度重建块确定第四色度重建块。
比如说,可以先确定当前色度块是否启用ESAO模式,若启用ESAO模式,则对该第三色度重建块进行ESAO滤波,得到第四色度重建块。若未启用ESAO模式,则确定当前色度块是否启用SAO模式,若启用SAO模式,则对该第三色度重建块进行SAO滤波,得到第四色度重建块。若未启用SAO模式,则将第三色度重建块作为第四色度重建块。
示例性的,对该第三色度重建块进行ESAO滤波,得到第四色度重建块,可以包括但不限于:基于该第三色度重建块确定增强样值偏移补偿块,并对该增强样值偏移补偿块内的各个像素点的色度重建像素值进行操作,得到偏移后的色度重建像素值。基于各个像素点的偏移后的色度重建像素值确定第四色度重建块,即将这些偏移后的色度重建像素值组成第四色度重建块。当然,上述只是ESAO滤波的示例,对此ESAO滤波的实现方式不做限制。
示例性的,对该第三色度重建块进行SAO滤波,得到第四色度重建块,可以包括但不限于:基于该第三色度重建块确定基本样值偏移补偿块,确定与该基本样值偏移补偿块对应的基本样值偏移补偿信息,并基于该基本样值偏移补偿信息对该基本样值偏移补偿块内的各个像素点的色度重建像素值进行操作,得到偏移后的色度重建像素值。基于各个像素点的偏移后的色度重建像素值确定第四色度重建块,即将这些偏移后的色度重建像素值组成第四色度重建块。当然,上述只是SAO滤波的示例,对此SAO滤波的实现方式不做限制。
步骤505、若当前色度块启用CCSAO模式,则对该第四色度重建块进行CCSAO滤波,得到第五色度重建块;否则,基于该第四色度重建块确定第五色度重建块,也就是说,若当前色度块未启用CCSAO模式,则将该第四色度重建块直接作为第五色度重建块。
示例性的,对该第四色度重建块进行CCSAO滤波,得到第五色度重建块,可以包括但不限于:基于该第四色度重建块确定跨分量样值偏移补偿块,并对该跨分量样值偏移补偿块内的各个像素点的色度重建像素值进行操作,得到跨分量偏移后样本值。基于各个像素点的跨分量偏移后样本值确定第五色度重建块,即将这些像素点的跨分量偏移后样本值组成第五色度重建块。当然,上述只是CCSAO滤波的示例,对此CCSAO滤波的实现方式不做限制。
比如说,基于第四色度重建块和第四色度重建块对应的第五亮度重建块(第五亮度重建块的获取方式可以参见实施例一,在此不再赘述),确定第四色度重建块的分类;基于该分类确定第四色度重建块对应的跨分量样值偏移补偿块,并对跨分量样值偏移补偿块内的各个像素点的色度重建像素值进行操作,得到跨分量偏移后样本值;基于各个像素点的跨分量偏移后样本值确定所述第五色度重建块。
步骤506、若当前色度块启用ALF模式,则对第五色度重建块进行ALF滤波,得到第六色度重建块;否则,基于第五色度重建像素值确定第六色度重建块,也就是说,若当前色度块未启用ALF模式,则可以将第五色度重建块作为第六色度重建块,即经过滤波后的重建块。
示例性的,对第五色度重建块进行ALF滤波,得到第六色度重建块,可以包括但不限于:基于该第五色度重建块确定自适应修正滤波块,并确定与该自适应修正滤波块对应的自适应修正滤波系数,基于该自适应修正滤波系数对该自适应修正滤波块内的各个像素点的色度重建像素值进行自适应修正滤波,得到自适应修正滤波后的色度重建像素值。基于各个像素点的自适应修正滤波后的色度重建像素值确定第六色度重建块,即将这些自适应修正滤波后的色度重建像素值组成第六色度重建块。当然,上述只是ALF滤波的示例,对此不做限制。
在一种可能的实施方式中,还可以获取ESAO允许标志位(允许标志位也可以称为使能标志位),该ESAO允许标志位允许当前色度块启用ESAO模式,或者,该ESAO允许标志位禁止当前色度块启用ESAO模式。比如说,若ESAO允许标志位为第一取值(如1),则允许当前色度块启用ESAO模式,若ESAO允许标志位为第二取值(如0),则禁止当前色度块启用ESAO模式。ESAO允许标志位可以是序列头级的ESAO允许标志位、或PPS级的ESAO允许标志位、或图像头级的ESAO允许标志位、或帧级的ESAO允许标志位、或片头级的ESAO允许标志位、或CTU级的ESAO允许标志位、或CU级的ESAO允许标志位。当然,上述只是几个示例,对ESAO允许标志位的高层语法不做限制。
还可以获取SAO允许标志位,该SAO允许标志位允许当前色度块启用SAO模式,或者,该SAO允许标志位禁止当前色度块启用SAO模式。比如说,若SAO允许标志位为第一取值(如1),则允许当前色度块启用SAO模式,若SAO允许标志位为第二取值(如0),则禁止当前色度块启用SAO模式。示例性的,SAO允许标志位可以是序列头级的SAO允许标志位、或PPS级的SAO允许标志位、或图像头级的SAO允许标志位、或帧级的SAO允许标志位、或片头级的SAO允许标志位、或CTU级的SAO允许标志位、或CU级的SAO允许标志位。当然,上述只是几个示例,对SAO允许标志位的高层语法不做限制。
还可以获取CCSAO允许标志位,CCSAO允许标志位允许当前色度块启用CCSAO模式,或禁止当前色度块启用CCSAO模式。比如说,若CCSAO允许标志位为第一取值(如1),则允许当前色度块启用CCSAO模式,若CCSAO允许标志位为第二取值(如0),则禁止当前色度块启用CCSAO模式。CCSAO允许标志位可以是序列头级的CCSAO允许标志位、或PPS级的CCSAO允许标志位、或图像头级的CCSAO允许标志位、或帧级的CCSAO允许标志位、或片头级的CCSAO允许标志位、或CTU级的CCSAO允许标志位、或CU级的CCSAO允许标志位。当然,上述只是几个示例,对CCSAO允许标志位的高层语法不做限制。
还可以获取ALF允许标志位,该ALF允许标志位允许当前色度块启用ALF模式,或者,该ALF允许标志位禁止当前色度块启用ALF模式。比如说,若ALF允许标志位为第一取值(如1),则允许当前色度块启用ALF模式,若ALF允许标志位为第二取值(如0),则禁止当前色度块启用ALF模式。示例性的,ALF允许标志位可以是序列头级的ALF允许标志位、或PPS级的ALF允许标志位、或图像头级的ALF允许标志位、或帧级的ALF允许标志位、或片头级的ALF允许标志位、或CTU级的ALF允许标志位、或CU级的ALF允许标志位。当然,上述只是几个示例,对ALF允许标志位的高层语法不做限制。还可以获取DBF允许标志位,该DBF允许标志位允许当前色度块启用DBF模式,或者,该DBF允许标志位禁止当前色度块启用DBF模式;比如说,若DBF允许标志位为第一取值,则允许当前色度块启用DBF模式,若DBF允许标志位为第二取值,则禁止当前色度块启用DBF模式。示例性的,DBF允许标志位可以是图像头级的DBF允许标志位。当然,上述只是DBF允许标志位的示例,对DBF允许标志位的高层语法不做限制。比如说,还可以是序列头级、或PPS级、或帧级、或片头级、或CTU级、或CU级的DBF允许标志位。由以上技术方案可见,本申请实施例中,若当前色度块启用DBF模式,则对第一色度重建块进行垂直DBF滤波,得到第二色度重建块,若当前色度块启用DBF模式,则对第二色度重建块进行水平DBF滤波,得到第三色度重建块,若当前色度块启用ESAO模式,则对第三色度重建块进行ESAO滤波,得到第四色度重建块(或若当前色度块启用SAO模式,则对第三色度重建块进行SAO滤波,得到第四色度重建块),若当前色度块启用CCSAO模式,则对第四色度重建块进行CCSAO滤波,得到第五色度重建块,若当前色度块启用ALF模式,则对第五色度重建块进行ALF滤波,得到第六色度重建块。综上可以看出,可以依次对当前色度块进行垂直DBF滤波、水平DBF滤波、ESAO滤波(或SAO滤波)、CCSAO滤波、ALF滤波等滤波过程,从而提出合理的滤波方式,避免出现滤波效果不佳,编码性能比较差等问题,即可以提高滤波效果,提高编码性能,不会出现过滤波现象,即滤波后的像素值不会远大于或远小于滤波前的像素值。在对像素值进行上述各种滤波处理后,滤波后的像素值更加接近真实像素,能够提升图像质量。
实施例3:本申请实施例中提出一种编解码方法,该编解码方法可以应用于编码端或者解码端,可以对当前亮度块(即亮度分量)和当前色度块(即色度分量)进行处理。
对于当前亮度块(即亮度分量)来说,原始亮度重建块/第一亮度重建块可以记为Y1(i);
第一步:若当前亮度块启用DBF模式,则Y1(i)可以通过垂直DBF滤波后得到Y2(i);否则,Y2(i)=Y1(i),Y2(i)可以为上述实施例的第二亮度重建块。
第二步:若当前亮度块启用垂直DBR模式,则Y2(i)可以通过垂直DBR滤波后得到Y3(i);否则,Y3(i)=Y2(i),Y3(i)可以为上述实施例的第三亮度重建块。
第三步:若当前亮度块启用DBF模式,则Y3(i)可以通过水平DBF滤波后得到Y4(i);否则,Y4(i)=Y3(i),Y4(i)可以为上述实施例的第四亮度重建块。
第四步:若当前亮度块启用水平DBR模式,则Y4(i)可以通过水平DBR滤波后得到Y5(i);否则,Y5(i)=Y4(i),Y5(i)可以为上述实施例的第五亮度重建块。
第五步:若当前亮度块启用ESAO模式,则Y5(i)可以通过ESAO滤波后得到Y6(i),否则,若当前亮度块启用SAO模式,则Y5(I)可以通过SAO滤波后得到Y6(I),否则(即未启用ESAO模式和SAO模式),Y6(i)=Y5(i),Y6(i)可以为上述实施例的第六亮度重建块。
第六步:若当前亮度块启用ALF模式,则Y6(i)可以通过ALF滤波后得到Y7(i),否则,Y7(i)=Y6(i),Y7(i)可以为上述实施例的第七亮度重建块。
在上述过程中,i表示亮度重建块中的像素点,即i的取值范围是1-像素点总数量。
对于当前色度块(即色度分量)来说,原始色度重建块/第一色度重建块可以记为C1(i);
第一步:若当前色度块启用DBF模式,则C1(i)可以通过垂直DBF滤波后得到C2(i);否则,C2(i)=C1(I),C2(i)可以为上述实施例的第二色度重建块。
第二步:若当前色度块启用DBF模式,则C2(i)可以通过水平DBF滤波后得到C3(i);否则,C3(i)=C2(i),C3(i)可以为上述实施例的第三色度重建块。
第三步:若当前色度块启用ESAO模式,则C3(i)可以通过ESAO滤波后得到C4(i),否则,若当前色度块启用SAO模式,则C3(i)可以通过SAO滤波后得到C4(i),否则(即未启用ESAO模式和SAO模式),C4(i)=C3(I),C4(I)可以为上述实施例的第四色度重建块。
第四步:若当前色度块启用CCSAO模式,则C4(i)可以通过CCSAO滤波后得到C5(i);否则,C5(i)=C4(i),C5(i)可以为上述实施例的第五色度重建块。
示例性的,在C4(i)通过CCSAO滤波得到C5(I)的过程中,可以基于C4(i)和Y5(i)进行CCSAO滤波,得到C5(i),Y5(i)为上述实施例的第五亮度重建块,即经过水平DBR滤波后的亮度重建块。比如说,CCSAO滤波的基本过程如下:对于需要进行CCSAO滤波的色度重建块C4(i),基于对应位置的第五亮度重建块Y5(i)和当前色度像素值(经过ESAO之后的色度像素值C4(i)),确定当前色度像素的分类。基于分类,确定当前色度像素的补偿值。将当前色度像素值加上该补偿值,得到CCSAO滤波后的色度像素值(C5(i))。
第五步:若当前色度块启用ALF模式,则C5(i)可以通过ALF滤波后得到C6(i);否则,C6(i)=C5(i),C6(i)可以为上述实施例的第六色度重建块。
在上述过程中,i表示色度重建块中的像素点,即i的取值范围是1-像素点总数量。
针对当前亮度块(即亮度分量)和当前色度块(即色度分量)的处理过程,可以参见图6所示,在图6中,Y为亮度分量,Cb和Cr为两个色度分量。针对亮度分量Y来说,依次进行垂直DBF滤波、垂直DBR滤波、水平DBF滤波、水平DBR滤波、ESAO滤波或SAO滤波、ALF滤波等,得到与亮度分量Y对应的亮度分量Y’,即最终滤波后的亮度分量。
针对色度分量Cb来说,可以依次进行垂直DBF滤波、水平DBF滤波、ESAO滤波(或SAO滤波)、CCSAO滤波(CCSAO滤波的输入包括水平DBR滤波后的亮度分量)、ALF滤波等,得到与色度分量Cb对应的色度分量Cb’,即最终滤波后的色度分量Cb。
针对色度分量Cr来说,可以依次进行垂直DBF滤波、水平DBF滤波、ESAO滤波(或SAO滤波)、CCSAO滤波(CCSAO滤波的输入包括水平DBR滤波后的亮度分量)、ALF滤波等,得到与色度分量Cr对应的色度分量Cr’,即最终滤波后的色度分量Cr。
在上述实施例中,DBF为deblocking filter,即去块效应滤波;DBR为deblockingrefinement,即去块滤波调整;ESAO为Enhanced Sample Adaptive Offset,即增强样值偏移补偿;SAO为Sample Adaptive Offset,即样值偏移补偿;CCSAO为Cross-ComponentSample Adaptive Offset,即跨分量样值偏移补偿;ALF为Adaptive Leveling Filter,即自适应修正滤波。
实施例4:高层语法(如序列头高层语法)的控制可以参见表1所示,也就是说,编码端在序列头编码表1所示的高层语法,解码端从序列头解码表1所示的高层语法。
表1
Figure GDA0003910700970000311
Figure GDA0003910700970000321
在表1中,sao_enable_flag是SAO允许标志位,当前亮度块和当前色度块可以共用同一个SAO允许标志位,也可以分开设置当前亮度块的SAO允许标志位和当前色度块的SAO允许标志位,表1中以共用同一个SAO允许标志位为例。
在表1中,alf_enable_flag是ALF允许标志位,当前亮度块和当前色度块可以共用同一个ALF允许标志位,也可以分开设置当前亮度块的ALF允许标志位和当前色度块的ALF允许标志位,表1中以共用同一个ALF允许标志位为例。
在表1中,esao_enable_flag是ESAO允许标志位,当前亮度块和当前色度块可以共用同一个ESAO允许标志位,也可以分开设置当前亮度块的ESAO允许标志位和当前色度块的ESAO允许标志位,表1中以共用同一个ESAO允许标志位为例。
在表1中,ccsao_enable_flag是CCSAO允许标志位,当前亮度块和当前色度块可以共用同一个CCSAO允许标志位,也可以分开设置当前亮度块的CCSAO允许标志位和当前色度块的CCSAO允许标志位,以共用同一个CCSAO允许标志位为例。
从表1可以看出,序列头高层语法中并没有DBF工具和DBR工具的序列头开关,即不存在序列头的DBF允许标志位、垂直DBR允许标志位和水平DBR允许标志位。
在表1中,sao_enable_flag是样值偏移补偿允许标志,为二值变量,值为‘1’表示可使用样值偏移补偿,值为‘0’表示不应使用样值偏移补偿。
alf_enable_flag是自适应修正滤波允许标志,为二值变量,值为‘1’表示可使用自适应修正滤波,值为‘0’表示不应使用自适应修正滤波。
esao_enable_flag是增强样值偏移补偿允许标志,为二值变量,值为‘1’表示可使用增强样值偏移补偿,值为‘0’表示不应使用增强样值偏移补偿。
ccsao_enable_flag是跨分量样值偏移补偿允许标志位,为二值变量,值为‘1’表示可使用跨分量样值偏移补偿,值为‘0’表示不应使用跨分量样值偏移补偿。
ealf_enable_flag是增强自适应修正滤波允许标志,为二值变量,值为‘1’表示应使用增强自适应修正滤波,值为‘0’表示不应使用增强自适应修正滤波。EalfEnableFlag的值等于ealf_enable_flag的值,如果位流中不存在ealf_enable_flag,则EalfEnableFlag的值为0。
实施例5:高层语法(如图像头高层语法)的控制可以参见表2所示,也就是说,编码端在图像头编码表2所示的高层语法,解码端从图像头解码表2所示的高层语法。
表2
deblocking_filter_disable_flag u(1)
在表2中,deblocking_filter_disable_flag是DBF允许标志位,当前亮度块和当前色度块可以共用同一个DBF允许标志位,也可以分开设置当前亮度块的DBF允许标志位和当前色度块的DBF允许标志位,以共用同一个DBF允许标志位为例。
综上所述,针对DBF模式来说,可以在图像头中编码/解码表2所示的高层语法,在表2中,deblocking_filter_disable_flag可以是去块滤波禁用标志,为一个二值变量,值为‘1’表示不应使用去块效应滤波,值为‘0’表示应使用去块效应滤波。
实施例6:高层语法(如图像头高层语法)的控制可以参见表3所示,也就是说,编码端在图像头编码表3所示的高层语法,解码端从图像头解码表3所示的高层语法。
表3
Figure GDA0003910700970000331
表3是DBR模式的相关高层语法,也就是说,针对DBR模式来说,可以在帧内或帧间的图像头编码/解码表3所示的高层语法。比如说,当满足如下两个条件时,才进行DBR模式的图像头的相关高层语法的编码/解码,也就是说,当满足如下两个条件时,编码端在图像头编码表3所示的高层语法,解码端从图像头解码表3所示的高层语法。针对DBR模式的高层语法来说,可以是针对当前亮度块的高层语法,即当前色度块不进行DBR模式。
条件1:DBF允许标志位允许启用DBF模式,比如说,deblocking_filter_disable_flag为0。条件2:编码比特流中携带的档次标识(如profile_id)大于或者等于预设标识号,比如说,profile_id==0x32||profile_id==0x30,即档次标识为48或50,即当前档次为加强8位档次(High 8bit profile)或加强10位档次(High 10bit profile),加强8位档次的档次标识为48,加强10位档次的档次标识为50。显然,可以将预设标识号设置为48,若编码比特流中携带的档次标识大于或者等于预设标识号48,则表示允许进行DBR模式。
参见表3所示,针对图像头高层语法包括的DBF模式的相关内容,可以包括:
picture_dbr_v_enable_flag是垂直DBR允许标志位,是图像级去块滤波垂直调整允许标志,是二值变量,值为‘1’表示当前图像可使用去块滤波垂直调整,值为‘0’表示当前图像不应使用去块滤波垂直调整。PictureDbrVEnableFlag的值等于picture_dbr_v_enable_flag的值,如果位流中不存在picture_dbr_v_enable_flag,则PhDbrVEnableFlag的值为0。
picture_alt_dbr_v_enable_flag是垂直DBR允许标志位,picture_alt_dbr_v_enable_flag是图像级增强去块滤波垂直调整允许标志,是一个二值变量,值为‘1’可以表示当前图像应使用增强去块滤波垂直调整,值为‘0’可以表示当前图像不应使用增强去块滤波垂直调整。PictureAltDbrVEnableFlag的值等于picture_alt_dbr_v_enable_flag的值,如果位流中不存在picture_alt_dbr_v_enable_flag,则PictureAltDbrVEnableFlag的值为0。
综上可以看出,在表3中,垂直DBR允许标志位可以包括picture_dbr_v_enable_flag和picture_alt_dbr_v_enable_flag。在此基础上,若picture_dbr_v_enable_flag的值为1,和/或,picture_alt_dbr_v_enable_flag的值为1,则表示垂直DBR允许标志位允许当前亮度块启用垂直DBR模式。若picture_dbr_v_enable_flag的值为0,且picture_alt_dbr_v_enable_flag的值为0,则表示垂直DBR允许标志位禁止当前亮度块启用垂直DBR模式。
高层语法还可以只包括picture_dbr_v_enable_flag或picture_alt_dbr_v_enable_flag,若高层语法只包括picture_dbr_v_enable_flag,当picture_dbr_v_enable_flag的值为1,表示垂直DBR允许标志位允许当前亮度块启用垂直DBR模式,当picture_dbr_v_enable_flag的值为0,表示垂直DBR允许标志位禁止当前亮度块启用垂直DBR模式。或者,若高层语法只包括picture_alt_dbr_v_enable_flag,当picture_alt_dbr_v_enable_flag的值为1,表示垂直DBR允许标志位允许当前亮度块启用垂直DBR模式,当picture_alt_dbr_v_enable_flag的值为0,表示垂直DBR允许标志位禁止当前亮度块启用垂直DBR模式。
在上述实施例中,picture_dbr_v_enable_flag是图像级去块滤波垂直调整允许标志,即垂直DBR模式的去块滤波调整模式的使能标志位,若picture_dbr_v_enable_flag的值为1,则在上述实施例中,需要确定当前像素点是否满足垂直DBR模式的去块滤波调整模式的像素级启用条件,确定方式参见上述实施例,在此不再赘述。若picture_dbr_v_enable_flag的值为0,则在上述实施例中,直接确定当前像素点不满足垂直DBR模式的去块滤波调整模式的像素级启用条件。picture_alt_dbr_v_enable_flag是图像级增强去块滤波垂直调整允许标志,即垂直DBR模式的增强去块滤波调整模式的使能标志位,若picture_alt_dbr_v_enable_flag的值为1,则在上述实施例中,需要确定当前像素点是否满足垂直DBR模式的增强去块滤波调整模式的像素级启用条件,确定方式参见上述实施例,在此不再赘述。若picture_alt_dbr_v_enable_flag的值为0,则在上述实施例中,直接确定当前像素点不满足垂直DBR模式的增强去块滤波调整模式的像素级启用条件。
dbr_v_threshold_minus1是垂直调整阈值,即去块滤波调整模式的垂直调整阈值和增强去块滤波调整模式的垂直调整阈值,dbr_v_threshold_minus1的取值范围是0-1。DbrVThreshold的值等于dbr_v_threshold_minus1的值加1,如果位流中不存在dbr_v_threshold_minus1,则DbrVThreshold的值为0。
dbr_v_offset0_minus1是垂直调整偏移值0,dbr_v_offset0_minus1的取值范围是0-3。DbrVOffset0的值等于dbr_v_offset0_minus1的值加1后的负值,如果位流中不存在dbr_v_offset0_minus1,则DbrVOffset0的值为0。
dbr_v_offset1_minus1是垂直调整偏移值1,dbr_v_offset1_minus1的取值范围是0-3。DbrVOffset1的值等于dbr_v_offset1_minus1的值加1,如果位流中不存在dbr_v_offset1_minus1,则DbrVOffset1的值为0。
dbr_v_alt_offset0_minus1是增强垂直调整偏移值0,取值范围是0-3。DbrVAltOffset0的值等于dbr_v_alt_offset0_minus1的值加1后的负值,如果位流中不存在dbr_v_alt_offset0_minus1,则DbrVAltOffset0的值为0。
dbr_v_alt_offset1_minus1是增强垂直调整偏移值1,取值范围是0-3。DbrVAltOffset1的值等于dbr_v_alt_offset1_minus1的值加1,如果位流中不存在dbr_v_alt_offset1_minus1,则DbrVAltOffset1的值为0。
picture_dbr_h_enable_flag是水平DBR允许标志位,是图像级去块滤波水平调整允许标志,是二值变量,值为‘1’表示当前图像可使用去块滤波水平调整,值为‘0’表示当前图像不应使用去块滤波水平调整。PictureDbrHEnableFlag的值等于picture_dbr_h_enable_flag的值,如果位流中不存在picture_dbr_h_enable_flag,则PictureDbrHEnableFlag的值为0。
picture_alt_dbr_h_enable_flag是水平DBR允许标志位,picture_alt_dbr_h_enable_flag是图像级增强去块滤波水平调整允许标志,是一个二值变量,值为‘1’可以表示当前图像应使用增强去块滤波水平调整,值为‘0’可以表示当前图像不应使用增强去块滤波水平调整。PictureAltDbrHEnableFlag的值等于picture_alt_dbr_h_enable_flag的值,如果位流中不存在picture_alt_dbr_h_enable_flag,则PictureAltDbrHEnableFlag的值为0。
综上可以看出,在表3中,水平DBR允许标志位可以包括picture_dbr_h_enable_flag和picture_alt_dbr_h_enable_flag。在此基础上,若picture_dbr_h_enable_flag的值为1,和/或,picture_alt_dbr_h_enable_flag的值为1,则表示水平DBR允许标志位允许当前亮度块启用水平DBR模式。若picture_dbr_h_enable_flag的值为0,且picture_alt_dbr_h_enable_flag的值为0,则表示水平DBR允许标志位禁止当前亮度块启用水平DBR模式。
高层语法还可以只包括picture_dbr_h_enable_flag或picture_alt_dbr_h_enable_flag,若高层语法只包括picture_dbr_h_enable_flag,当picture_dbr_h_enable_flag的值为1时,表示水平DBR允许标志位允许当前亮度块启用水平DBR模式,当picture_dbr_h_enable_flag的值为0时,表示水平DBR允许标志位禁止当前亮度块启用水平DBR模式。或者,若高层语法只包括picture_alt_dbr_h_enable_flag,当picture_alt_dbr_h_enable_flag的值为1,表示水平DBR允许标志位允许当前亮度块启用水平DBR模式,当picture_alt_dbr_h_enable_flag的值为0时,表示水平DBR允许标志位禁止当前亮度块启用水平DBR模式。
在上述实施例中,picture_dbr_h_enable_flag是图像级去块滤波水平调整允许标志,即水平DBR模式的去块滤波调整模式的使能标志位,若picture_dbr_h_enable_flag的值为1,则在上述实施例中,需要确定当前像素点是否满足水平DBR模式的去块滤波调整模式的像素级启用条件,确定方式参见上述实施例,在此不再赘述。若picture_dbr_h_enable_flag的值为0,则在上述实施例中,直接确定当前像素点不满足水平DBR模式的去块滤波调整模式的像素级启用条件。
picture_alt_dbr_h_enable_flag是图像级增强去块滤波水平调整允许标志,即水平DBR模式的增强去块滤波调整模式的使能标志位,若picture_alt_dbr_h_enable_flag的值为1,则在上述实施例中,需要确定当前像素点是否满足水平DBR模式的增强去块滤波调整模式的像素级启用条件,确定方式参见上述实施例,在此不再赘述。若picture_alt_dbr_h_enable_flag的值为0,则在上述实施例中,直接确定当前像素点不满足水平DBR模式的增强去块滤波调整模式的像素级启用条件。
dbr_h_threshold_minus1是水平调整阈值,即去块滤波调整模式的水平调整阈值和增强去块滤波调整模式的水平调整阈值,dbr_h_threshold_minus1的取值范围是0-1。DbrHThreshold的值等于dbr_h_threshold_minus1的值加1,如果位流中不存在dbr_h_threshold_minus1,则DbrHThreshold的值为0。
dbr_h_offset0_minus1是水平调整偏移值0,dbr_h_offset0_minus1的取值范围是0-3。DbrHOffset0的值等于dbr_h_offset0_minus1的值加1后的负值,如果位流中不存在dbr_h_offset0_minus1,则DbrHOffset0的值为0。
dbr_h_offset1_minus1是水平调整偏移值1,dbr_h_offset1_minus1的取值范围是0-3。DbrHOffset1的值等于dbr_h_offset1_minus1的值加1,如果位流中不存在dbr_h_offset1_minus1,则DbrHOffset1的值为0。
dbr_h_alt_offset0_minus1是增强水平调整偏移值0,取值范围是0-3。DbrHAltOffset0的值等于dbr_h_alt_offset0_minus1的值加1后的负值,如果位流中不存在dbr_h_alt_offset0_minus1,则DbrHAltOffset0的值为0。
dbr_h_alt_offset1_minus1是增强水平调整偏移值1,取值范围是0-3。DbrHAltOffset1的值等于dbr_h_alt_offset1_minus1的值加1,如果位流中不存在dbr_h_alt_offset1_minus1,则DbrHAltOffset1的值为0。
在上述实施例的表1、表2和表3中,u(n)表示n位无符号整数。在表1、表2和表3的语法表中,如果n是“v”,则其位数可以由其他语法元素值确定,对此不再赘述。
实施例7:针对去块滤波过程(即DBF滤波和DBR滤波)来说,可以对亮度块和色度块分别进行去块滤波(亮度块可以进行DBF滤波和DBR滤波,色度块可以进行DBF滤波),去块滤波的单位可以是滤波块(即上述实施例的当前亮度块或者当前色度块),可以按照光栅扫描顺序(即从左到右,从上到下的顺序)依次处理每个滤波块,亮度滤波块的尺寸可以是8*8,色度滤波块的尺寸可以是8*8。每个滤波块包括一条垂直边界(即当前亮度块或者当前色度块的垂直边界)和一条水平边界(即当前亮度块或者当前色度块的水平边界),亮度滤波块的每条边界(即垂直边界或者水平边界)的长度为8个亮度样本,平均分为8段,色度滤波块的每条边界(即垂直边界或者水平边界)的长度是8个色度样本,平均分为8段。
针对每个滤波块,首先滤波垂直边界,然后滤波水平边界。针对每条边界来说,先按照实施例8判断该边界(即当前亮度块或者当前色度块的边界,如垂直边界或者水平边界等)是否需要滤波。如果需要滤波,则按照实施例9确定去块滤波调整参数,并按照实施例10计算该条边界的每段边界(每段边界也就是当前像素点的边界)的滤波强度,然后,根据该段边界的滤波强度进行去块滤波,去块滤波(即DBF滤波和DBR滤波)的过程可以参见实施例11-实施例17。否则(即不需要滤波),可以直接将补偿后样本的值作为滤波后样本的值。
示例性的,当前边界两侧的样值可能在以前的去块滤波过程中已经被修改,当前边界的滤波的输入为这些可能被修改的样值,比如说,当前滤波块的垂直边界的滤波过程中修改的样值可以作为水平边界滤波过程的输入,可以参见实施例1和实施例2,在此不再赘述。
实施例8:是否跳过去块滤波(即DBF滤波和DBR滤波)的判断。满足以下条件之一的边界(如垂直边界或者水平边界,这里的边界是指当前亮度块或者当前色度块的边界,而不是当前像素点的边界)不需要滤波:如果待滤波边界是图像边界,则该边界不需要滤波。如果待滤波边界是片边界且跨片环路滤波允许标志为0,则该边界不需要滤波。如果待滤波边界是亮度滤波边界,且该亮度滤波边界不是亮度编码块或亮度变换块的边界,则该边界不需要滤波。如果待滤波边界是色度滤波边界,且该色度滤波边界不是色度编码块或色度变换块的边界,且该色度滤波边界对应的亮度滤波边界不是亮度编码块的边界,则该边界不需要滤波。如果待滤波边界是亮度滤波边界,且该亮度滤波边界所在的编码单元的子块变换标志为1,且该亮度滤波边界不是亮度编码块的边界,则该边界不需要滤波。如果待滤波边界所在的编码单元的串复制帧内预测模式标志为1,则该边界不需要滤波。
实施例9:确定去块滤波调整参数。比如说,可以确定如下去块滤波调整参数:DbrThresold、DbrOffset0、DbrOffset1、DbrAltOffset0和DbrAltOffset1。示例性的,如果当前边界为垂直边界且PictureDbrVEnableFlag为1,或当前边界为水平边界且PictureDbrHEnableFlag为1,则PictureDbrEnableFlag的值为1;否则,PictureDbrEnableFlag的值为0。如果当前边界为垂直边界且PictureAltDbrVEnableFlag为1,或当前边界为水平边界且PictureAltDbrHEnableFlag为1,则PictureAltDbrEnableFlag的值为1;否则,PictureAltDbrEnableFlag的值为0。
综上可以看出,如果垂直DBR允许标志位表示允许启用垂直DBR滤波(即当前边界为垂直边界且PictureDbrVEnableFlag为1,表示允许启用垂直DBR滤波的去块滤波调整模式,或,当前边界为垂直边界且PictureAltDbrVEnableFlag为1,表示允许启用垂直DBR滤波的增强去块滤波调整模式),则PictureDbrEnableFlag的值为1,在值为1时,用于表示需要启用DBR滤波,即需要启用垂直DBR滤波和/或水平DBR滤波。如果水平DBR允许标志位表示允许启用水平DBR滤波(即当前边界为水平边界且PictureDbrHEnableFlag为1,表示允许启用水平DBR滤波的去块滤波调整模式,或当前边界为水平边界且PictureAltDbrHEnableFlag为1,表示允许启用水平DBR滤波的增强去块滤波调整模式),则PictureDbrEnableFlag的值为1,用于表示需要启用DBR滤波,即需要启用垂直DBR滤波和/或水平DBR滤波。
示例性的,对于垂直边界来说,DbrThreshold=DbrVThreshold,DbrOffset0=DbrVOffset0,DbrOffset1=DbrVOffset1,DbrAltOffset0=DbrVAltOffset0,DbrAltOffset1=DbrVAltOffset1。
参见上述实施例,DbrVThreshold用于表示去块滤波调整模式的垂直调整阈值和增强去块滤波调整模式的垂直调整阈值,二者为同一个垂直调整阈值,DbrVOffset0用于表示去块滤波调整模式的第一垂直调整偏移值,DbrVOffset1用于表示去块滤波调整模式的第二垂直调整偏移值,DbrVAltOffset0用于表示增强去块滤波调整模式的第一增强垂直调整偏移值,DbrVAltOffset1用于表示增强去块滤波调整模式的第二增强垂直调整偏移值。
示例性的,对于水平边界来说,DbrThreshold=DbrHThreshold,DbrOffset0=DbrHOffset0,DbrOffset1=DbrHOffset1,DbrAltOffset0=DbrHAltOffset0,DbrAltOffset1=DbrHAltOffset1。
参见上述实施例,DbrHThreshold用于表示去块滤波调整模式的水平调整阈值和增强去块滤波调整模式的水平调整阈值,二者为同一个水平调整阈值,DbrHOffset0用于表示去块滤波调整模式的第一水平调整偏移值,DbrHOffset1用于表示去块滤波调整模式的第二水平调整偏移值,DbrHAltOffset0用于表示增强去块滤波调整模式的第一增强水平调整偏移值,DbrHAltOffset1用于表示增强去块滤波调整模式的第二增强水平调整偏移值。
示例性的,上述垂直边界可以是指当前亮度块的垂直边界,上述水平边界可以是指当前亮度块的水平边界,也就是说,针对当前亮度块的垂直边界包括的每个像素点的垂直边界,均可以使用上述去块滤波调整参数进行滤波处理,针对当前亮度块的水平边界包括的每个像素点的水平边界,均可以使用上述去块滤波调整参数进行滤波处理。
实施例10:边界滤波强度的推导过程。参见图4A和图4C所示,示出了当前像素点的垂直边界和水平边界的示意图,垂直边界/水平边界两侧的8个样本分别记为p0、p1、p2、p3和q0、q1、q2、q3。需要注意的是,在计算边界滤波强度BS时,是针对当前像素点计算边界滤波强度BS,即边界是针对当前像素点的边界,而不是针对当前亮度块或者当前色度块的边界。
边界滤波强度确定方式一、如果满足以下所有条件,则边界滤波强度BS等于0。
a)p0和q0所在的编码单元变换块的量化系数均为0。示例性的,如果p0(或q0)是亮度样本且p0(或q0)所在的编码单元只包含亮度样本,则p0(或q0)所在的编码单元是指包含p0(或q0)的亮度编码单元。如果p0(或q0)是色度样本且p0(或q0)所在的编码单元只包含色度样本,则p0(或q0)所在的编码单元是指包含p0(或q0)对应亮度样本的编码单元;否则(即p0或q0所在的编码单元同时包含亮度样本和色度样本),则p0(或q0)所在的编码单元是指包含p0(或q0)的编码单元。
b)p0和q0所在的编码单元的预测类型不是帧内。
c)记BP和BQ分别是p0和q0所在的4*4的亮度编码块,BP和BQ的运动信息同时满足下列条件1和条件2,或,同时满足条件3、条件4和条件5。
1)BP和BQ分别对应的空域运动信息存储单元的L0参考索引均等于-1,或,BP和BQ分别对应的空域运动信息存储单元的L0参考索引对应的参考帧为同一帧、且空域运动信息存储单元的L0运动矢量的所有分量的差均小于一个整像素点。
2)BP和BQ分别对应的空域运动信息存储单元的L1参考索引均等于-1,或,BP和BQ分别对应的空域运动信息存储单元的L1参考索引对应的参考帧为同一帧、且空域运动信息存储单元的L1运动矢量的所有分量的差均小于一个整像素点。
3)满足以下条件之一:
Figure GDA0003910700970000381
BP对应的空域运动信息存储单元的L0参考索引等于-1、且BQ对应的空域运动信息存储单元的L1参考索引等于-1。
Figure GDA0003910700970000382
BP对应的空域运动信息存储单元的L0参考索引对应的参考帧与BQ对应的空域运动信息存储单元的L1参考索引对应的参考帧为同一帧,且BP对应的空域运动信息存储单元的L0运动矢量和BQ对应的空域运动信息存储单元的L1运动矢量的所有分量的差均小于一个整像素点。
4)满足以下条件之一:
Figure GDA0003910700970000383
BQ对应的空域运动信息存储单元的L0参考索引等于-1、且BP对应的空域运动信息存储单元的L1参考索引等于-1。
Figure GDA0003910700970000384
BQ对应的空域运动信息存储单元的L0参考索引对应的参考帧与BP对应的空域运动信息存储单元的L1参考索引对应的参考帧为同一帧,且BQ对应的空域运动信息存储单元的L0运动矢量和BP对应的空域运动信息存储单元的L1运动矢量的所有分量的差均小于一个整像素点。
5)BP对应的空域运动信息存储单元的L0参考索引对应的参考帧和BQ对应的空域运动信息存储单元的L0参考索引对应的参考帧不为同一帧;BP对应的空域运动信息存储单元的L1参考索引对应的参考帧和BQ对应的空域运动信息存储单元的L1参考索引对应的参考帧不为同一帧。
边界滤波强度确定方式二、否则,按照以下方法计算边界滤波强度BS(简称为边界强度)。
a)计算p0和q0所在的编码单元的平均量化参数QPav。如果是亮度样本,则可以使用亮度编码块的量化参数;如果是色度样本,则可以使用色度编码块的量化参数。可以令p0所在编码单元的量化参数为QPp,q0所在编码单元的量化参数为QPq,在此基础上,平均量化参数可以为:QPav=(QPp+QPq+1)>>1。
b)采用如下公式计算索引IndexA和IndexB。IndexA=Clip3(0,63,QPav–8*(BitDepth–8)+AlphaCOffset);IndexB=Clip3(0,63,QPav–8*(BitDepth–8)+BetaOffset)。
c)分别根据IndexA和IndexB查表得到α'和β'的值,再根据BitDepth得到α、β的值,参见如下公式所示:α=α'<<(BitDepth–8);β=β'<<(BitDepth–8)。
d)如果DeblockingFilterType(去块滤波类型)为1,且Abs(p0-q0)大于或等于4×α,则BS等于0;否则,可以按照以下方法计算边界滤波强度BS。
1)将fL和fR的值均置为0,计算fS。
Figure GDA0003910700970000391
2)根据fS确定BS。
Figure GDA0003910700970000392
当fS等于6时,如果Abs(p0-p1)小于或等于β/4且Abs(q0-q1)小于或等于β/4且Abs(p0-q0)小于α,则BS等于4;否则BS等于3。
Figure GDA0003910700970000393
当fS等于6且DeblockingFilterType等于1时,如果Abs(p0-p1)小于或等于β/4且Abs(q0-q1)小于或等于β/4且Abs(p0-p3)小于或等于β/2且Abs(q0-q3)小于或等于β/2且Abs(p0-q0)小于α,则BS等于4;否则BS等于3。
Figure GDA0003910700970000394
当fS等于5时,如果p0等于p1且q0等于q1,则BS等于3;否则BS等于2。
Figure GDA0003910700970000395
当fS等于5且DeblockingFilterType等于1时,如果p0等于p1且q0等于q1且Abs(p2-q2)小于α,则BS等于3;否则BS等于2。
Figure GDA0003910700970000396
当fS等于4时,如果fL等于2,则BS等于2;否则BS等于1。
Figure GDA0003910700970000397
当fS等于3时,如果Abs(p1–q1)小于β,则BS等于1;否则BS等于0。
Figure GDA0003910700970000398
当fS为其它值时,BS等于0。
3)如果步骤2)得到的BS不等于0且滤波的边界是色度编码块边界,则BS减1。
综上可以看出,可以采用边界滤波强度确定方式一确定出当前像素点的边界强度(即当前像素点的垂直边界的边界强度或者水平边界的边界强度),该边界强度可以等于0,也可以采用边界滤波强度确定方式二确定出当前像素点的边界强度(即当前像素点的垂直边界的边界强度或者水平边界的边界强度),该边界强度可以等于0,该边界强度也可以大于0。
当前像素点满足垂直DBR模式的增强去块滤波调整模式的像素级启用条件,包括:当前像素点的垂直边界的边界强度等于0,当前像素点的垂直边界的边界强度等于0可以包括以下情况:
若采用边界滤波强度确定方式一确定当前像素点的垂直边界的边界强度等于0,则当前像素点满足垂直DBR模式的增强去块滤波调整模式的像素级启用条件;若采用边界滤波强度确定方式二确定出当前像素点的垂直边界的边界强度等于0,当前像素点不满足垂直DBR模式的增强去块滤波调整模式的像素级启用条件。或者,若采用边界滤波强度确定方式一确定出当前像素点的垂直边界的边界强度等于0,当前像素点不满足垂直DBR模式的增强去块滤波调整模式的像素级启用条件;若采用边界滤波强度确定方式二确定出当前像素点的垂直边界的边界强度等于0,当前像素点满足垂直DBR模式的增强去块滤波调整模式的像素级启用条件。或者,若采用边界滤波强度确定方式一确定出当前像素点的垂直边界的边界强度等于0,当前像素点满足垂直DBR模式的增强去块滤波调整模式的像素级启用条件;若采用边界滤波强度确定方式二确定出当前像素点的垂直边界的边界强度等于0,当前像素点满足垂直DBR模式的增强去块滤波调整模式的像素级启用条件。
同理,当前像素点满足水平DBR模式的增强去块滤波调整模式的像素级启用条件,包括:当前像素点的水平边界的边界强度等于0,当前像素点的水平边界的边界强度等于0包括以下情况:
若采用边界滤波强度确定方式一确定当前像素点的水平边界的边界强度等于0,则当前像素点满足水平DBR模式的增强去块滤波调整模式的像素级启用条件;若采用边界滤波强度确定方式二确定出当前像素点的水平边界的边界强度等于0,当前像素点不满足水平DBR模式的增强去块滤波调整模式的像素级启用条件。或者,若采用边界滤波强度确定方式一确定出当前像素点的水平边界的边界强度等于0,当前像素点不满足水平DBR模式的增强去块滤波调整模式的像素级启用条件;若采用边界滤波强度确定方式二确定出当前像素点的水平边界的边界强度等于0,当前像素点满足水平DBR模式的增强去块滤波调整模式的像素级启用条件。或者,若采用边界滤波强度确定方式一确定出当前像素点的水平边界的边界强度等于0,当前像素点满足水平DBR模式的增强去块滤波调整模式的像素级启用条件;若采用边界滤波强度确定方式二确定出当前像素点的水平边界的边界强度等于0,当前像素点满足水平DBR模式的增强去块滤波调整模式的像素级启用条件。
在上述实施例中,采用边界滤波强度确定方式一确定出当前像素点的边界强度的过程,是基于周围块(如4*4块)的变换信息、帧内预测信息、帧间预测信息确定当前像素点的边界强度。采用边界滤波强度确定方式二确定出当前像素点的边界强度的过程,是基于当前像素点所在行或列的周围像素值确定当前像素点的边界强度。
实施例11:针对亮度分量,BS等于4时的边界滤波过程。比如说,BS的值为4时,对p0、p1、p2和q0、q1、q2滤波的计算过程如下(P0、P1、P2和Q0、Q1、Q2是滤波后的值):
P0=(p2*3+p1*8+p0*10+q0*8+q1*3+16)>>5;
P1=(p2*4+p1*5+p0*4+q0*3+8)>>4;
P2=(p3*2+p2*2+p1*2+p0*1+q0*1+4)>>3;
Q0=(p1*3+p0*8+q0*10+q1*8+q2×3+16)>>5;
Q1=(p0*3+q0*4+q1*5+q2*4+8)>>4;
Q2=(p0*1+q0*1+q1*2+q2*2+q3*2+4)>>3。
示例性的,上述边界滤波过程是DBF滤波,可以是垂直DBF滤波,也可以是水平DBF滤波。针对垂直DBF滤波,p0、p1、p2和q0、q1、q2是垂直DBF滤波前的像素值,P0、P1、P2和Q0、Q1、Q2是垂直DBF滤波后的像素值。针对水平DBF滤波,p0、p1、p2和q0、q1、q2是水平DBF滤波前的像素值,P0、P1、P2和Q0、Q1、Q2是水平DBF滤波后的像素值。
示例性的,如果PictureDbrEnableFlag的值为1,即,需要启用DBR滤波(如启用垂直DBR滤波和/或水平DBR滤波),则在实施例11的基础上,还可以采用实施例17进行DBR滤波。在进行垂直DBR滤波时,垂直DBR滤波前的像素值就是垂直DBF滤波后的像素值。在进行水平直DBR滤波时,水平DBR滤波前的像素值就是水平DBF滤波后的像素值。
实施例12:针对亮度分量,BS等于3时的边界滤波过程。比如说,BS的值为3时,对p0、p1和q0、q1滤波的计算过程如下(P0、P1和Q0、Q1是滤波后的值):
P0=(p2+(p1<<2)+(p0<<2)+(p0<<1)+(q0<<2)+q1+8)>>4;
P1=((p2<<1)+p2+(p1<<3)+(p0<<2)+q0+8)>>4;
Q0=(p1+(p0<<2)+(q0<<2)+(q0<<1)+(q1<<2)+q2+8)>>4;
Q1=((q2<<1)+q2+(q1<<3)+(q0<<2)+p0+8)>>4。
示例性的,上述边界滤波过程是DBF滤波,可以是垂直DBF滤波,也可以是水平DBF滤波。针对垂直DBF滤波,p0、p1和q0、q1是垂直DBF滤波前的像素值,P0、P1和Q0、Q1是垂直DBF滤波后的像素值。针对水平DBF滤波,p0、p1和q0、q1是水平DBF滤波前的像素值,P0、P1和Q0、Q1是水平DBF滤波后的像素值。
示例性的,如果PictureDbrEnableFlag的值为1,即,需要启用DBR滤波(如启用垂直DBR滤波和/或水平DBR滤波),则在实施例12的基础上,还可以采用实施例17进行DBR滤波。在进行垂直DBR滤波时,垂直DBR滤波前的像素值就是垂直DBF滤波后的像素值。在进行水平直DBR滤波时,水平DBR滤波前的像素值就是水平DBF滤波后的像素值。
实施例13:针对亮度分量,BS等于2时的边界滤波过程。比如说,BS的值为2时,对p0和q0滤波的计算过程如下(P0和Q0是滤波后的值):
P0=((p1<<1)+p1+(p0<<3)+(p0<<1)+(q0<<1)+q0+8)>>4;
Q0=((p0<<1)+p0+(q0<<3)+(q0<<1)+(q1<<1)+q1+8)>>4。
上述边界滤波过程是DBF滤波,可以是垂直DBF滤波或水平DBF滤波。针对垂直DBF滤波,p0和q0是垂直DBF滤波前的像素值,P0和Q0是垂直DBF滤波后的像素值。针对水平DBF滤波,p0和q0是水平DBF滤波前的像素值,P0和Q0是水平DBF滤波后的像素值。
示例性的,如果PictureDbrEnableFlag的值为1,即,需要启用DBR滤波(如启用垂直DBR滤波和/或水平DBR滤波),则在实施例13的基础上,还可以采用实施例17进行DBR滤波。在进行垂直DBR滤波时,垂直DBR滤波前的像素值就是垂直DBF滤波后的像素值。在进行水平直DBR滤波时,水平DBR滤波前的像素值就是水平DBF滤波后的像素值。
实施例14:针对亮度分量,BS等于1时的边界滤波过程。比如说,BS的值为1时,对p0和q0滤波的计算过程如下(P0和Q0是滤波后的值):
P0=((p0<<1)+p0+q0+2)>>2;
Q0=((q0<<1)+q0+p0+2)>>2。
上述边界滤波过程是DBF滤波,可以是垂直DBF滤波或水平DBF滤波。针对垂直DBF滤波,p0和q0是垂直DBF滤波前的像素值,P0和Q0是垂直DBF滤波后的像素值。针对水平DBF滤波,p0和q0是水平DBF滤波前的像素值,P0和Q0是水平DBF滤波后的像素值。
示例性的,如果PictureDbrEnableFlag的值为1,即,需要启用DBR滤波(如启用垂直DBR滤波和/或水平DBR滤波),则在实施例14的基础上,还可以采用实施例17进行DBR滤波。在进行垂直DBR滤波时,垂直DBR滤波前的像素值就是垂直DBF滤波后的像素值。在进行水平直DBR滤波时,水平DBR滤波前的像素值就是水平DBF滤波后的像素值。
实施例15:针对亮度分量,BS等于0时的边界滤波过程,该边界滤波过程是针对DBR滤波的增强去块滤波调整模式的滤波过程。比如说,BS的值为0且PictureAltDbrEnableFlag的值为1(表示允许启用DBR滤波的增强去块滤波调整模式,如垂直DBR滤波的增强去块滤波调整模式或水平DBR滤波的增强去块滤波调整模式)时,对p0和q0滤波调整的计算过程如下(P0和Q0是滤波调整后的值):
Figure GDA0003910700970000421
示例性的,上述边界滤波过程是增强去块滤波调整模式的DBR滤波,可以是增强去块滤波调整模式的垂直DBR滤波,也可以是增强去块滤波调整模式的水平DBR滤波。针对增强去块滤波调整模式的垂直DBR滤波,DP0和DQ0是像素点的梯度值,p0和q0是增强去块滤波调整模式的垂直DBR滤波前的像素值,P0和Q0是增强去块滤波调整模式的垂直DBR滤波后的像素值。DbrThreshold、DbrAltOffset0、DbrAltOffset1是增强去块滤波调整模式的垂直DBR滤波的相关参数,参见实施例9。针对增强去块滤波调整模式的水平DBR滤波,DP0和DQ0可以表示像素点的梯度值,p0和q0可以是增强去块滤波调整模式的水平DBR滤波前的像素值,P0和Q0可以是增强去块滤波调整模式的水平DBR滤波后的像素值。DbrThreshold、DbrAltOffset0、DbrAltOffset1是增强去块滤波调整模式的水平DBR滤波的相关参数,参见实施例9。在上述公式中,Clip1(x)表示将x限制在[0,2^(bit_depth)-1]之间(包括0和2^(bit_depth)-1),bit_depth表示图像的比特深度,如bit_depth可以为8、10、12等。
实施例16:针对色度分量,BS大于0时的边界滤波过程。
比如说,BS的值大于0时,对p0和q0滤波的计算过程如下(P0和Q0是滤波后的值):
P0=((p1<<1)+p1+(p0<<3)+(p0<<1)+(q0<<1)+q0+8)>>4;
Q0=((p0<<1)+p0+(q0<<3)+(q0<<1)+(q1<<1)+q1+8)>>4。
又例如,BS的值等于3时,对p1和q1滤波的计算过程如下(P1和Q1是滤波后的值):
P1=((p2<<1)+p2+(p1<<3)+(p0<<1)+p0+(q0<<1)+8)>>4;
Q1=((q2<<1)+q2+(q1<<3)+(q0<<1)+q0+(p0<<1)+8)>>4。
示例性的,上述边界滤波过程是DBF滤波,可以是垂直DBF滤波,也可以是水平DBF滤波。针对垂直DBF滤波,p0、p1和q0、q1是垂直DBF滤波前的像素值,P0、P1和Q0、Q1是垂直DBF滤波后的像素值。针对水平DBF滤波,p0、p1和q0、q1是水平DBF滤波前的像素值,P0、P1和Q0、Q1是水平DBF滤波后的像素值。
实施例17:针对亮度分量,BS大于0时的边界滤波过程,该边界滤波过程是针对DBR滤波的去块滤波调整模式的滤波过程。比如说,BS的值大于0且PictureDbrEnableFlag的值为1(表示允许启用DBR滤波的去块滤波调整模式,如垂直DBR滤波的去块滤波调整模式或水平DBR滤波的去块滤波调整模式),对Pi和Qi调整的计算过程如下(Pi’和Qi’是滤波后的值):
Figure GDA0003910700970000431
示例性的,上述边界滤波过程是去块滤波调整模式的DBR滤波,可以是去块滤波调整模式的垂直DBR滤波,也可以是去块滤波调整模式的水平DBR滤波。针对去块滤波调整模式的垂直DBR滤波,Pi和Qi可以是去块滤波调整模式的垂直DBR滤波前的像素值,pi和qi可以是垂直DBF滤波前的像素值,Pi’和Qi’可以是去块滤波调整模式的垂直DBR滤波后的像素值,i的取值可以为0、1或2等。DbrThreshold、DbrOffset0、DbrOffset1是去块滤波调整模式的垂直DBR滤波的相关参数,参见实施例9。以及,针对去块滤波调整模式的水平DBR滤波,Pi和Qi可以是去块滤波调整模式的水平DBR滤波前的像素值,pi和qi可以是水平DBF滤波前的像素值,Pi’和Qi’可以是去块滤波调整模式的水平DBR滤波后的像素值,i的取值可以为0、1或2等。DbrThreshold、DbrOffset0、DbrOffset1是去块滤波调整模式的水平DBR滤波的相关参数,参见实施例9。上述公式中,Clip1(x)表示将x限制在[0,2^(bit_depth)-1]之间(包括0和2^(bit_depth)-1),bit_depth为图像的比特深度,如bit_depth为8、10、12等。
实施例18:样本偏移补偿滤波。样本偏移补偿滤波包括基本样值偏移补偿(上述SAO),增强样值偏移补偿(上述ESAO),跨分量样值偏移补偿(上述CCSAO,只针对色度进行)。
SAO的基本过程:如果当前块的当前分量启用SAO,则先导出基本样值偏移补偿单元,再导出与当前基本样值偏移补偿单元对应的基本样值偏移补偿信息,最后对当前基本样值偏移补偿单元内的各个样本的各分量进行操作,得到偏移后样本值。否则,直接将滤波后样本对应分量的值作为偏移后该样本分量的值。示例性的,上述分量可以为亮度分量或色度分量。
ESAO的基本过程(ESAO和SAO是互斥的,即启用SAO则不启用ESAO):如果当前块的当前分量启用ESAO,则先导出增强样值偏移补偿单元,再对增强样值偏移补偿单元内的各个样本的各个分量进行操作,得到偏移后样本值。否则,直接将滤波后样本对应分量的值作为偏移后该样本分量的值。示例性的,上述分量可以为亮度分量或色度分量。
CCSAO的基本过程:如果当前块的当前分量启用CCSAO,则先导出跨分量样值偏移补偿单元,然后对当前跨分量样值偏移补偿单元内的各分量样本进行操作,得到跨分量偏移后样本值。否则,直接将偏移后样本对应分量的值作为跨分量偏移后该样本分量的值。示例性的,对于需要进行CCSAO的色度像素,基于对应位置的去块滤波(调整)后的亮度值和当前色度像素值(经过ESAO后的色度像素值),确定当前色度像素的分类。基于分类确定当前色度像素的补偿值,将当前色度像素值加上该补偿值,得到CCSAO滤波后的色度像素值。
实施例19:自适应修正滤波。自适应修正滤波(上述ALF)可以启用增强自适应修正滤波(EALF),自适应修正滤波(上述ALF)也可以不启用增强自适应修正滤波。
ALF的基本过程如下:如果当前图像的当前分量(如亮度分量或色度分量)不启用ALF,则直接将偏移后样本分量的值作为对应重建样本分量的值;否则,对相应的偏移后样本分量进行自适应修正滤波。自适应修正滤波的单位是由最大编码单元导出的自适应修正滤波单元,按照光栅扫描顺序依次处理。首先,解码各分量的自适应修正滤波系数,再导出自适应修正滤波单元,并确定当前自适应修正滤波单元亮度分量的自适应修正滤波系数索引,最后对自适应修正滤波单元的亮度和色度分量进行自适应修正滤波,得到重建样本。
示例性的,如果当前图像启用EALF,则当前图像的ALF的每组滤波系数有15个,这组滤波系数的形状可以参见图7A所示,为自适应修正滤波系数(7*7十字形加5*5方形),当前图像亮度分量自适应修正滤波器的个数的最大值为64。否则,当前图像的ALF的每组滤波系数有9个,这组滤波系数的形状可以参见图7B所示,为自适应修正滤波系数(7*7十字形加3*3方形),当前图像亮度分量自适应修正滤波器的个数的最大值为16。
示例性的,上述实施例1-实施例19可以单独实现,也可以任意组合,如实施例1和实施例4-实施例19中的至少一个实施例可以组合,实施例2和实施例4-实施例19中的至少一个实施例可以组合,实施例3和实施例4-实施例19中的至少一个实施例可以组合,实施例4-实施例19中的至少两个实施例可以组合。当然,上述只是几个组合的示例,实施例1-实施例19之间的任意至少两个实施例,均可以进行组合实现相关过程,对此不做限制。
示例性的,上述各实施例中,编码端的内容也可以应用到解码端,即解码端可以采用相同方式进行处理,解码端的内容也可以应用到编码端,即编码端可以采用相同方式进行处理。
实施例20:基于与上述方法同样的申请构思,本申请实施例中还提出一种解码装置,所述解码装置应用于解码端,所述解码装置包括:存储器,其经配置以存储视频数据;解码器,其经配置以实现上述实施例1-实施例19中的编解码方法,即解码端的处理流程。
比如说,在一种可能的实施方式中,解码器,其经配置以实现:
获取当前亮度块对应的第一亮度重建块;
若所述当前亮度块启用DBF模式,则对所述第一亮度重建块进行垂直DBF滤波,得到第二亮度重建块;否则,基于所述第一亮度重建块确定第二亮度重建块;
若所述当前亮度块启用垂直DBR模式,则对所述第二亮度重建块进行垂直DBR滤波,得到第三亮度重建块;否则,基于所述第二亮度重建块确定第三亮度重建块;
若所述当前亮度块启用DBF模式,则对所述第三亮度重建块进行水平DBF滤波,得到第四亮度重建块;否则,基于所述第三亮度重建块确定第四亮度重建块;
若所述当前亮度块启用水平DBR模式,则对所述第四亮度重建块进行水平DBR滤波,得到第五亮度重建块;否则,基于所述第四亮度重建块确定第五亮度重建块;
若所述当前亮度块启用ESAO模式,则对所述第五亮度重建块进行ESAO滤波,得到第六亮度重建块;否则,若所述当前亮度块启用SAO模式,则对所述第五亮度重建块进行SAO滤波,得到第六亮度重建块;否则,基于第五亮度重建块确定第六亮度重建块;
若所述当前亮度块启用ALF模式,则对所述第六亮度重建块进行ALF滤波,得到第七亮度重建块;否则,基于所述第六亮度重建块确定第七亮度重建块;
或者,
获取当前色度块对应的第一色度重建块;
若所述当前色度块启用DBF模式,则对所述第一色度重建块进行垂直DBF滤波,得到第二色度重建块;否则,基于所述第一色度重建块确定第二色度重建块;
若所述当前色度块启用DBF模式,则对所述第二色度重建块进行水平DBF滤波,得到第三色度重建块;否则,基于所述第二色度重建块确定第三色度重建块;
若所述当前色度块启用ESAO模式,则对所述第三色度重建块进行ESAO滤波,得到第四色度重建块;否则,若所述当前色度块启用SAO模式,则对所述第三色度重建块进行SAO滤波,得到第四色度重建块;否则,基于所述第三色度重建块确定第四色度重建块;
若所述当前色度块启用CCSAO模式,则对所述第四色度重建块进行CCSAO滤波,得到第五色度重建块;否则,基于所述第四色度重建块确定第五色度重建块;
若所述当前色度块启用ALF模式,则对所述第五色度重建块进行ALF滤波,得到第六色度重建块;否则,基于所述第五色度重建像素值确定第六色度重建块。
基于与上述方法同样的申请构思,本申请实施例中还提出一种编码装置,所述编码装置应用于编码端,所述编码装置包括:存储器,其经配置以存储视频数据;编码器,其经配置以实现上述实施例1-实施例19中的编解码方法,即编码端的处理流程。
比如说,在一种可能的实施方式中,编码器,其经配置以实现:
获取当前亮度块对应的第一亮度重建块;
若所述当前亮度块启用DBF模式,则对所述第一亮度重建块进行垂直DBF滤波,得到第二亮度重建块;否则,基于所述第一亮度重建块确定第二亮度重建块;
若所述当前亮度块启用垂直DBR模式,则对所述第二亮度重建块进行垂直DBR滤波,得到第三亮度重建块;否则,基于所述第二亮度重建块确定第三亮度重建块;
若所述当前亮度块启用DBF模式,则对所述第三亮度重建块进行水平DBF滤波,得到第四亮度重建块;否则,基于所述第三亮度重建块确定第四亮度重建块;
若所述当前亮度块启用水平DBR模式,则对所述第四亮度重建块进行水平DBR滤波,得到第五亮度重建块;否则,基于所述第四亮度重建块确定第五亮度重建块;
若所述当前亮度块启用ESAO模式,则对所述第五亮度重建块进行ESAO滤波,得到第六亮度重建块;否则,若所述当前亮度块启用SAO模式,则对所述第五亮度重建块进行SAO滤波,得到第六亮度重建块;否则,基于第五亮度重建块确定第六亮度重建块;
若所述当前亮度块启用ALF模式,则对所述第六亮度重建块进行ALF滤波,得到第七亮度重建块;否则,基于所述第六亮度重建块确定第七亮度重建块;
或者,
获取当前色度块对应的第一色度重建块;
若所述当前色度块启用DBF模式,则对所述第一色度重建块进行垂直DBF滤波,得到第二色度重建块;否则,基于所述第一色度重建块确定第二色度重建块;
若所述当前色度块启用DBF模式,则对所述第二色度重建块进行水平DBF滤波,得到第三色度重建块;否则,基于所述第二色度重建块确定第三色度重建块;
若所述当前色度块启用ESAO模式,则对所述第三色度重建块进行ESAO滤波,得到第四色度重建块;否则,若所述当前色度块启用SAO模式,则对所述第三色度重建块进行SAO滤波,得到第四色度重建块;否则,基于所述第三色度重建块确定第四色度重建块;
若所述当前色度块启用CCSAO模式,则对所述第四色度重建块进行CCSAO滤波,得到第五色度重建块;否则,基于所述第四色度重建块确定第五色度重建块;
若所述当前色度块启用ALF模式,则对所述第五色度重建块进行ALF滤波,得到第六色度重建块;否则,基于所述第五色度重建像素值确定第六色度重建块。
基于与上述方法同样的申请构思,本申请实施例提供的解码端设备(也可以称为视频解码器),从硬件层面而言,该解码端设备可以包括:处理器和机器可读存储介质,其中:所述机器可读存储介质存储有能够被所述处理器执行的机器可执行指令;所述处理器用于执行机器可执行指令,以实现本申请上述实施例1-19公开的编解码方法。
例如,所述处理器用于执行机器可执行指令,以实现如下步骤:
获取当前亮度块对应的第一亮度重建块;
若所述当前亮度块启用DBF模式,则对所述第一亮度重建块进行垂直DBF滤波,得到第二亮度重建块;否则,基于所述第一亮度重建块确定第二亮度重建块;
若所述当前亮度块启用垂直DBR模式,则对所述第二亮度重建块进行垂直DBR滤波,得到第三亮度重建块;否则,基于所述第二亮度重建块确定第三亮度重建块;
若所述当前亮度块启用DBF模式,则对所述第三亮度重建块进行水平DBF滤波,得到第四亮度重建块;否则,基于所述第三亮度重建块确定第四亮度重建块;
若所述当前亮度块启用水平DBR模式,则对所述第四亮度重建块进行水平DBR滤波,得到第五亮度重建块;否则,基于所述第四亮度重建块确定第五亮度重建块;
若所述当前亮度块启用ESAO模式,则对所述第五亮度重建块进行ESAO滤波,得到第六亮度重建块;否则,若所述当前亮度块启用SAO模式,则对所述第五亮度重建块进行SAO滤波,得到第六亮度重建块;否则,基于第五亮度重建块确定第六亮度重建块;
若所述当前亮度块启用ALF模式,则对所述第六亮度重建块进行ALF滤波,得到第七亮度重建块;否则,基于所述第六亮度重建块确定第七亮度重建块;
或者,
获取当前色度块对应的第一色度重建块;
若所述当前色度块启用DBF模式,则对所述第一色度重建块进行垂直DBF滤波,得到第二色度重建块;否则,基于所述第一色度重建块确定第二色度重建块;
若所述当前色度块启用DBF模式,则对所述第二色度重建块进行水平DBF滤波,得到第三色度重建块;否则,基于所述第二色度重建块确定第三色度重建块;
若所述当前色度块启用ESAO模式,则对所述第三色度重建块进行ESAO滤波,得到第四色度重建块;否则,若所述当前色度块启用SAO模式,则对所述第三色度重建块进行SAO滤波,得到第四色度重建块;否则,基于所述第三色度重建块确定第四色度重建块;
若所述当前色度块启用CCSAO模式,则对所述第四色度重建块进行CCSAO滤波,得到第五色度重建块;否则,基于所述第四色度重建块确定第五色度重建块;
若所述当前色度块启用ALF模式,则对所述第五色度重建块进行ALF滤波,得到第六色度重建块;否则,基于所述第五色度重建像素值确定第六色度重建块。
基于与上述方法同样的申请构思,本申请实施例提供的编码端设备(也可以称为视频编码器),从硬件层面而言,该编码端设备可以包括:处理器和机器可读存储介质,其中:所述机器可读存储介质存储有能够被所述处理器执行的机器可执行指令;所述处理器用于执行机器可执行指令,以实现本申请上述实施例1-19公开的编解码方法。
例如,所述处理器用于执行机器可执行指令,以实现如下步骤:
获取当前亮度块对应的第一亮度重建块;
若所述当前亮度块启用DBF模式,则对所述第一亮度重建块进行垂直DBF滤波,得到第二亮度重建块;否则,基于所述第一亮度重建块确定第二亮度重建块;
若所述当前亮度块启用垂直DBR模式,则对所述第二亮度重建块进行垂直DBR滤波,得到第三亮度重建块;否则,基于所述第二亮度重建块确定第三亮度重建块;
若所述当前亮度块启用DBF模式,则对所述第三亮度重建块进行水平DBF滤波,得到第四亮度重建块;否则,基于所述第三亮度重建块确定第四亮度重建块;
若所述当前亮度块启用水平DBR模式,则对所述第四亮度重建块进行水平DBR滤波,得到第五亮度重建块;否则,基于所述第四亮度重建块确定第五亮度重建块;
若所述当前亮度块启用ESAO模式,则对所述第五亮度重建块进行ESAO滤波,得到第六亮度重建块;否则,若所述当前亮度块启用SAO模式,则对所述第五亮度重建块进行SAO滤波,得到第六亮度重建块;否则,基于第五亮度重建块确定第六亮度重建块;
若所述当前亮度块启用ALF模式,则对所述第六亮度重建块进行ALF滤波,得到第七亮度重建块;否则,基于所述第六亮度重建块确定第七亮度重建块;
或者,
获取当前色度块对应的第一色度重建块;
若所述当前色度块启用DBF模式,则对所述第一色度重建块进行垂直DBF滤波,得到第二色度重建块;否则,基于所述第一色度重建块确定第二色度重建块;
若所述当前色度块启用DBF模式,则对所述第二色度重建块进行水平DBF滤波,得到第三色度重建块;否则,基于所述第二色度重建块确定第三色度重建块;
若所述当前色度块启用ESAO模式,则对所述第三色度重建块进行ESAO滤波,得到第四色度重建块;否则,若所述当前色度块启用SAO模式,则对所述第三色度重建块进行SAO滤波,得到第四色度重建块;否则,基于所述第三色度重建块确定第四色度重建块;
若所述当前色度块启用CCSAO模式,则对所述第四色度重建块进行CCSAO滤波,得到第五色度重建块;否则,基于所述第四色度重建块确定第五色度重建块;
若所述当前色度块启用ALF模式,则对所述第五色度重建块进行ALF滤波,得到第六色度重建块;否则,基于所述第五色度重建像素值确定第六色度重建块。
基于与上述方法同样的申请构思,本申请实施例还提供一种机器可读存储介质,所述机器可读存储介质上存储有若干计算机指令,所述计算机指令被处理器执行时,能够实现本申请上述示例公开的编解码方法,如上述各实施例中的编解码方法。其中,上述机器可读存储介质可以是任何电子、磁性、光学或其它物理存储装置,可以包含或存储信息,如可执行指令、数据,等等。例如,机器可读存储介质可以是:RAM(Radom Access Memory,随机存取存储器)、易失存储器、非易失性存储器、闪存、存储驱动器(如硬盘驱动器)、固态硬盘、任何类型的存储盘(如光盘、dvd等),或者类似的存储介质,或者它们的组合。
基于与上述方法同样的申请构思,本申请实施例还提供一种计算机应用程序,所述计算机应用程序令被处理器执行时,能够实现本申请上述示例公开的编解码方法。
基于与上述方法同样的申请构思,本申请实施例还提供一种编解码装置,可以应用于编码端或者解码端,该编码端装置用于实现本申请上述实施例1-19公开的编解码方法。
在一种可能的实施方式中,该编解码装置可以包括:
第一获取模块,用于获取当前亮度块对应的第一亮度重建块;
第一处理模块,用于若所述当前亮度块启用DBF模式,则对所述第一亮度重建块进行垂直DBF滤波,得到第二亮度重建块;否则,基于所述第一亮度重建块确定第二亮度重建块;
若所述当前亮度块启用垂直DBR模式,则对所述第二亮度重建块进行垂直DBR滤波,得到第三亮度重建块;否则,基于所述第二亮度重建块确定第三亮度重建块;
若所述当前亮度块启用DBF模式,则对所述第三亮度重建块进行水平DBF滤波,得到第四亮度重建块;否则,基于所述第三亮度重建块确定第四亮度重建块;
若所述当前亮度块启用水平DBR模式,则对所述第四亮度重建块进行水平DBR滤波,得到第五亮度重建块;否则,基于所述第四亮度重建块确定第五亮度重建块;
若所述当前亮度块启用ESAO模式,则对所述第五亮度重建块进行ESAO滤波,得到第六亮度重建块;否则,若所述当前亮度块启用SAO模式,则对所述第五亮度重建块进行SAO滤波,得到第六亮度重建块;否则,基于第五亮度重建块确定第六亮度重建块;
若所述当前亮度块启用ALF模式,则对所述第六亮度重建块进行ALF滤波,得到第七亮度重建块;否则,基于所述第六亮度重建块确定第七亮度重建块。
在另一种可能的实施方式中,该编解码装置可以包括:
第二获取模块,用于获取当前色度块对应的第一色度重建块;
第二处理模块,用于若所述当前色度块启用DBF模式,则对所述第一色度重建块进行垂直DBF滤波,得到第二色度重建块;否则,基于所述第一色度重建块确定第二色度重建块;
若所述当前色度块启用DBF模式,则对所述第二色度重建块进行水平DBF滤波,得到第三色度重建块;否则,基于所述第二色度重建块确定第三色度重建块;
若所述当前色度块启用ESAO模式,则对所述第三色度重建块进行ESAO滤波,得到第四色度重建块;否则,若所述当前色度块启用SAO模式,则对所述第三色度重建块进行SAO滤波,得到第四色度重建块;否则,基于所述第三色度重建块确定第四色度重建块;
若所述当前色度块启用CCSAO模式,则对所述第四色度重建块进行CCSAO滤波,得到第五色度重建块;否则,基于所述第四色度重建块确定第五色度重建块;
若所述当前色度块启用ALF模式,则对所述第五色度重建块进行ALF滤波,得到第六色度重建块;否则,基于所述第五色度重建像素值确定第六色度重建块。
上述实施例阐明的系统、装置、模块或单元,具体可以由计算机芯片或实体实现,或者由具有某种功能的产品来实现。一种典型的实现设备为计算机,计算机的具体形式可以是个人计算机、膝上型计算机、蜂窝电话、相机电话、智能电话、个人数字助理、媒体播放器、导航设备、电子邮件收发设备、游戏控制台、平板计算机、可穿戴设备或者这些设备中的任意几种设备的组合。为了描述的方便,描述以上装置时以功能分为各种单元分别描述。当然,在实施本申请时可以把各单元的功能在同一个或多个软件和/或硬件中实现。
本领域内的技术人员应明白,本申请实施例可提供为方法、系统、或计算机程序产品。本申请可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。本申请实施例可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本申请是参照根据本申请实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可以由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其它可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其它可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可以存储在能引导计算机或其它可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或者多个流程和/或方框图一个方框或者多个方框中指定的功能。这些计算机程序指令也可装载到计算机或其它可编程数据处理设备上,使得在计算机或者其它可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其它可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。以上所述仅为本申请的实施例而已,并不用于限制本申请。对于本领域技术人员来说,本申请可以有各种更改和变化。凡在本申请的精神和原理之内所作的任何修改、等同替换、改进等,均应包含在本申请的权利要求范围之内。

Claims (30)

1.一种编解码方法,其特征在于,所述方法包括:
获取当前亮度块对应的第一亮度重建块;
若所述当前亮度块启用去块滤波DBF模式,则对所述第一亮度重建块进行垂直DBF滤波,得到第二亮度重建块;否则,基于所述第一亮度重建块确定第二亮度重建块;
若所述当前亮度块启用垂直去块滤波调整DBR模式,则对所述第二亮度重建块进行垂直DBR滤波,得到第三亮度重建块;否则,基于所述第二亮度重建块确定第三亮度重建块;
若所述当前亮度块启用DBF模式,则对所述第三亮度重建块进行水平DBF滤波,得到第四亮度重建块;否则,基于所述第三亮度重建块确定第四亮度重建块;
若所述当前亮度块启用水平DBR模式,则对所述第四亮度重建块进行水平DBR滤波,得到第五亮度重建块;否则,基于所述第四亮度重建块确定第五亮度重建块;
若所述当前亮度块启用增强样本自适应补偿ESAO模式,则对所述第五亮度重建块进行ESAO滤波,得到第六亮度重建块;否则,若所述当前亮度块启用样本自适应补偿SAO模式,则对所述第五亮度重建块进行SAO滤波,得到第六亮度重建块;否则,基于第五亮度重建块确定第六亮度重建块;
若所述当前亮度块启用自适应环路滤波ALF模式,则对所述第六亮度重建块进行ALF滤波,得到第七亮度重建块;否则,基于所述第六亮度重建块确定第七亮度重建块。
2.根据权利要求1所述的方法,其特征在于,所述第一亮度重建块包括多个像素点的第一亮度重建像素值,所述第二亮度重建块包括所述多个像素点的第二亮度重建像素值;
所述对所述第一亮度重建块进行垂直DBF滤波,得到第二亮度重建块,包括:
针对所述第一亮度重建块中每个当前像素点,若所述当前像素点满足DBF模式的垂直边界滤波的像素级启用条件,则基于所述当前像素点的第一亮度重建像素值和所述当前像素点的周围像素点的第一亮度重建像素值确定所述当前像素点的第二亮度重建像素值;其中,所述当前像素点的周围像素点是所述当前像素点的垂直边界周围的像素点;若所述当前像素点不满足DBF模式的垂直边界滤波的像素级启用条件,则基于所述当前像素点的第一亮度重建像素值确定所述当前像素点的第二亮度重建像素值;
基于每个当前像素点的第二亮度重建像素值确定所述第二亮度重建块。
3.根据权利要求2所述的方法,其特征在于,
若所述当前像素点满足DBF模式的垂直边界滤波的像素级启用条件,所述方法还包括:
从所述当前像素点的垂直边界的相邻亮度块中确定与所述当前像素点对应的参考像素点;
基于所述参考像素点的第一亮度重建像素值和所述参考像素点的周围像素点的第一亮度重建像素值确定所述参考像素点的第二亮度重建像素值;
其中,所述参考像素点的周围像素点是所述当前像素点的垂直边界周围的像素点。
4.根据权利要求2或3所述的方法,其特征在于,
所述当前像素点满足DBF模式的垂直边界滤波的像素级启用条件,包括:
所述当前亮度块的垂直边界允许DBF滤波;
所述当前像素点的垂直边界的边界强度大于0。
5.根据权利要求1所述的方法,其特征在于,所述第二亮度重建块包括多个像素点的第二亮度重建像素值,所述第三亮度重建块包括所述多个像素点的第三亮度重建像素值;
所述对所述第二亮度重建块进行垂直DBR滤波,得到第三亮度重建块,包括:
针对所述第二亮度重建块中每个当前像素点,若所述当前像素点满足垂直DBR模式的去块滤波调整模式的像素级启用条件,则基于所述当前像素点的第二亮度重建像素值和所述当前像素点的第一亮度重建像素值确定所述当前像素点的第三亮度重建像素值;若所述当前像素点满足垂直DBR模式的增强去块滤波调整模式的像素级启用条件,则基于所述当前像素点的第二亮度重建像素值和所述当前像素点的周围像素点的第二亮度重建像素值确定所述当前像素点的梯度值,基于所述当前像素点的梯度值和所述当前像素点的第二亮度重建像素值,确定所述当前像素点的第三亮度重建像素值,其中,当前像素点的周围像素点是所述当前像素点的垂直边界周围的像素点;若所述当前像素点不满足垂直DBR模式的像素级启用条件,则基于所述当前像素点的第二亮度重建像素值确定所述当前像素点的第三亮度重建像素值;
基于每个当前像素点的第三亮度重建像素值确定所述第三亮度重建块。
6.根据权利要求5所述的方法,其特征在于,
所述基于所述当前像素点的第二亮度重建像素值和所述当前像素点的第一亮度重建像素值确定所述当前像素点的第三亮度重建像素值,包括:
基于所述当前像素点的第二亮度重建像素值,所述当前像素点的第一亮度重建像素值,去块滤波调整模式的垂直调整阈值,所述去块滤波调整模式的第一垂直调整偏移值和所述去块滤波调整模式的第二垂直调整偏移值,确定所述当前像素点的第三亮度重建像素值。
7.根据权利要求5所述的方法,其特征在于,若所述当前像素点满足垂直DBR模式的去块滤波调整模式的像素级启用条件,所述方法还包括:
从所述当前像素点的垂直边界的相邻亮度块中确定与所述当前像素点对应的参考像素点;
基于所述参考像素点的第二亮度重建像素值,所述参考像素点的第一亮度重建像素值,去块滤波调整模式的垂直调整阈值,所述去块滤波调整模式的第一垂直调整偏移值和所述去块滤波调整模式的第二垂直调整偏移值,确定所述参考像素点的第三亮度重建像素值。
8.根据权利要求5所述的方法,其特征在于,
所述基于所述当前像素点的第二亮度重建像素值和所述当前像素点的周围像素点的第二亮度重建像素值确定所述当前像素点的梯度值,包括:
基于如下公式确定所述当前像素点的梯度值:DPi=(qi–pi+2)>>2;
其中,DPi表示所述当前像素点的梯度值,qi表示所述当前像素点的周围像素点的第二亮度重建像素值,pi表示所述当前像素点的第二亮度重建像素值,>>表示右移位。
9.根据权利要求5所述的方法,其特征在于,所述基于所述当前像素点的梯度值和所述当前像素点的第二亮度重建像素值,确定所述当前像素点的第三亮度重建像素值,包括:
基于所述当前像素点的梯度值,所述当前像素点的第二亮度重建像素值,增强去块滤波调整模式的垂直调整阈值,增强去块滤波调整模式的第一增强垂直调整偏移值和所述增强去块滤波调整模式的第二增强垂直调整偏移值,确定所述当前像素点的第三亮度重建像素值。
10.根据权利要求5所述的方法,其特征在于,若所述当前像素点满足垂直DBR模式的增强去块滤波调整模式的像素级启用条件,所述方法还包括:
从所述当前像素点的垂直边界的相邻亮度块中确定与所述当前像素点对应的参考像素点;
基于所述参考像素点的第二亮度重建像素值和所述参考像素点的周围像素点的第二亮度重建像素值确定所述参考像素点的梯度值;其中,所述参考像素点的周围像素点是所述当前像素点的垂直边界周围的像素点;基于所述参考像素点的梯度值和所述参考像素点的第二亮度重建像素值确定所述参考像素点的第三亮度重建像素值。
11.根据权利要求10所述的方法,其特征在于,
所述基于所述参考像素点的梯度值和所述参考像素点的第二亮度重建像素值确定所述参考像素点的第三亮度重建像素值,包括:
基于所述参考像素点的梯度值,所述参考像素点的第二亮度重建像素值,增强去块滤波调整模式的垂直调整阈值,增强去块滤波调整模式的第一增强垂直调整偏移值和所述增强去块滤波调整模式的第二增强垂直调整偏移值,确定所述参考像素点的第三亮度重建像素值。
12.根据权利要求5-11任一项所述的方法,其特征在于,
所述当前像素点满足垂直DBR模式的去块滤波调整模式的像素级启用条件,包括:
所述当前亮度块的垂直边界允许垂直DBR滤波;
所述当前像素点的垂直边界的边界强度大于0。
13.根据权利要求5-11任一项所述的方法,其特征在于,
所述当前像素点满足垂直DBR模式的增强去块滤波调整模式的像素级启用条件,包括:
所述当前亮度块的垂直边界允许垂直DBR滤波;
所述当前像素点的垂直边界的边界强度等于0。
14.根据权利要求1所述的方法,其特征在于,所述第三亮度重建块包括多个像素点的第三亮度重建像素值,所述第四亮度重建块包括所述多个像素点的第四亮度重建像素值;
所述对所述第三亮度重建块进行水平DBF滤波,得到第四亮度重建块,包括:
针对所述第三亮度重建块中每个当前像素点,若所述当前像素点满足DBF模式的水平边界滤波的像素级启用条件,则基于所述当前像素点的第三亮度重建像素值和所述当前像素点的周围像素点的第三亮度重建像素值确定所述当前像素点的第四亮度重建像素值;其中,所述当前像素点的周围像素点是所述当前像素点的水平边界周围的像素点;若所述当前像素点不满足DBF模式的水平边界滤波的像素级启用条件,则基于所述当前像素点的第三亮度重建像素值确定所述当前像素点的第四亮度重建像素值;
基于每个当前像素点的第四亮度重建像素值确定所述第四亮度重建块。
15.根据权利要求14所述的方法,其特征在于,
所述当前像素点满足DBF模式的水平边界滤波的像素级启用条件,包括:
所述当前亮度块的水平边界允许DBF滤波;
所述当前像素点的水平边界的边界强度大于0。
16.根据权利要求1所述的方法,其特征在于,所述第四亮度重建块包括多个像素点的第四亮度重建像素值,所述第五亮度重建块包括所述多个像素点的第五亮度重建像素值;
所述对所述第四亮度重建块进行水平DBR滤波,得到第五亮度重建块,包括:
针对所述第四亮度重建块中每个当前像素点,若所述当前像素点满足水平DBR模式的去块滤波调整模式的像素级启用条件,则基于所述当前像素点的第四亮度重建像素值和所述当前像素点的第三亮度重建像素值确定所述当前像素点的第五亮度重建像素值;若所述当前像素点满足水平DBR模式的增强去块滤波调整模式的像素级启用条件,则基于所述当前像素点的第四亮度重建像素值和所述当前像素点的周围像素点的第四亮度重建像素值确定所述当前像素点的梯度值,基于所述当前像素点的梯度值和所述当前像素点的第四亮度重建像素值,确定所述当前像素点的第五亮度重建像素值,其中,当前像素点的周围像素点是所述当前像素点的水平边界周围的像素点;若所述当前像素点不满足水平DBR模式的像素级启用条件,则基于所述当前像素点的第四亮度重建像素值确定所述当前像素点的第五亮度重建像素值;
基于每个当前像素点的第五亮度重建像素值确定所述第五亮度重建块。
17.根据权利要求16所述的方法,其特征在于,
所述基于所述当前像素点的第四亮度重建像素值和所述当前像素点的第三亮度重建像素值确定所述当前像素点的第五亮度重建像素值,包括:
基于所述当前像素点的第四亮度重建像素值,所述当前像素点的第三亮度重建像素值,去块滤波调整模式的水平调整阈值,所述去块滤波调整模式的第一水平调整偏移值和所述去块滤波调整模式的第二水平调整偏移值,确定所述当前像素点的第五亮度重建像素值。
18.根据权利要求16所述的方法,其特征在于,所述基于所述当前像素点的梯度值和所述当前像素点的第四亮度重建像素值,确定所述当前像素点的第五亮度重建像素值,包括:
基于所述当前像素点的梯度值,所述当前像素点的第四亮度重建像素值,增强去块滤波调整模式的水平调整阈值,增强去块滤波调整模式的第一增强水平调整偏移值和所述增强去块滤波调整模式的第二增强水平调整偏移值,确定所述当前像素点的第五亮度重建像素值。
19.根据权利要求16-18任一项所述的方法,其特征在于,
所述当前像素点满足水平DBR模式的去块滤波调整模式的像素级启用条件,包括:
所述当前亮度块的水平边界允许水平DBR滤波;
所述当前像素点的水平边界的边界强度大于0。
20.根据权利要求16-18任一项所述的方法,其特征在于,
所述当前像素点满足水平DBR模式的增强去块滤波调整模式的像素级启用条件,包括:
所述当前亮度块的水平边界允许水平DBR滤波;
所述当前像素点的水平边界的边界强度等于0。
21.根据权利要求1所述的方法,其特征在于,
所述对所述第五亮度重建块进行ESAO滤波,得到第六亮度重建块,包括:
基于所述第五亮度重建块确定增强样值偏移补偿块,对所述增强样值偏移补偿块内的各个像素点的亮度重建像素值进行操作,得到偏移后的亮度重建像素值;
基于各个像素点的偏移后的亮度重建像素值确定所述第六亮度重建块。
22.根据权利要求1所述的方法,其特征在于,
所述对所述第五亮度重建块进行SAO滤波,得到第六亮度重建块,包括:
基于所述第五亮度重建块确定基本样值偏移补偿块,确定与所述基本样值偏移补偿块对应的基本样值偏移补偿信息,基于所述基本样值偏移补偿信息对所述基本样值偏移补偿块内的各个像素点的亮度重建像素值进行操作,得到偏移后的亮度重建像素值;
基于各个像素点的偏移后的亮度重建像素值确定所述第六亮度重建块。
23.根据权利要求1所述的方法,其特征在于,
所述对所述第六亮度重建块进行ALF滤波,得到第七亮度重建块,包括:
基于所述第六亮度重建块确定自适应修正滤波块,并确定与所述自适应修正滤波块对应的自适应修正滤波系数,基于所述自适应修正滤波系数对所述自适应修正滤波块内的各个像素点的亮度重建像素值进行自适应修正滤波,得到自适应修正滤波后的亮度重建像素值;
基于各个像素点的自适应修正滤波后的亮度重建像素值确定所述第七亮度重建块。
24.根据权利要求1所述的方法,其特征在于,
所述获取当前亮度块对应的第一亮度重建块之前,所述方法还包括:
获取ESAO允许标志位;其中,所述ESAO允许标志位允许当前亮度块启用ESAO模式,或者,所述ESAO允许标志位禁止当前亮度块启用ESAO模式;
获取SAO允许标志位;其中,所述SAO允许标志位允许当前亮度块启用SAO模式,或者,所述SAO允许标志位禁止当前亮度块启用SAO模式;
获取ALF允许标志位;其中,所述ALF允许标志位允许当前亮度块启用ALF模式,或者,所述ALF允许标志位禁止当前亮度块启用ALF模式;
其中,ESAO允许标志位是序列头级的ESAO允许标志位、或图像头级的ESAO允许标志位、或帧级的ESAO允许标志位、或片头级的ESAO允许标志位、或编码树单元CTU级的ESAO允许标志位、或编码单元CU级的ESAO允许标志位;
SAO允许标志位是序列头级的SAO允许标志位、或图像头级的SAO允许标志位、或帧级的SAO允许标志位、或片头级的SAO允许标志位、或CTU级的SAO允许标志位、或CU级的SAO允许标志位;
ALF允许标志位是序列头级的ALF允许标志位、或图像头级的ALF允许标志位、或帧级的ALF允许标志位、或片头级的ALF允许标志位、或CTU级的ALF允许标志位、或CU级的ALF允许标志位。
25.根据权利要求1所述的方法,其特征在于,
所述获取当前亮度块对应的第一亮度重建块之前,所述方法还包括:
获取DBF允许标志位;其中,所述DBF允许标志位允许当前亮度块启用DBF模式,或者,所述DBF允许标志位禁止当前亮度块启用DBF模式;
若所述DBF允许标志位允许当前亮度块启用DBF模式,则获取垂直DBR允许标志位和水平DBR允许标志位;其中,所述垂直DBR允许标志位允许当前亮度块启用垂直DBR模式,或者,所述垂直DBR允许标志位禁止当前亮度块启用垂直DBR模式;所述水平DBR允许标志位允许当前亮度块启用水平DBR模式,或者,所述水平DBR允许标志位禁止当前亮度块启用水平DBR模式;
其中,DBF允许标志位是图像头级的DBF允许标志位;
垂直DBR允许标志位是图像头级的垂直DBR允许标志位;
水平DBR允许标志位是图像头级的水平DBR允许标志位。
26.根据权利要求25所述的方法,其特征在于,所述若所述DBF允许标志位允许当前亮度块启用DBF模式,则获取垂直DBR允许标志位和水平DBR允许标志位,包括:若所述DBF允许标志位允许当前亮度块启用DBF模式,且当前亮度块的编码比特流中携带的档次标识大于或者等于预设标识号,则获取垂直DBR允许标志位和水平DBR允许标志位。
27.一种解码装置,其特征在于,所述解码装置包括:
存储器,其经配置以存储视频数据;
解码器,其经配置以实现:
获取当前亮度块对应的第一亮度重建块;
若所述当前亮度块启用去块滤波DBF模式,则对所述第一亮度重建块进行垂直DBF滤波,得到第二亮度重建块;否则,基于所述第一亮度重建块确定第二亮度重建块;
若所述当前亮度块启用垂直去块滤波调整DBR模式,则对所述第二亮度重建块进行垂直DBR滤波,得到第三亮度重建块;否则,基于所述第二亮度重建块确定第三亮度重建块;
若所述当前亮度块启用DBF模式,则对所述第三亮度重建块进行水平DBF滤波,得到第四亮度重建块;否则,基于所述第三亮度重建块确定第四亮度重建块;
若所述当前亮度块启用水平DBR模式,则对所述第四亮度重建块进行水平DBR滤波,得到第五亮度重建块;否则,基于所述第四亮度重建块确定第五亮度重建块;
若所述当前亮度块启用增强样本自适应补偿ESAO模式,则对所述第五亮度重建块进行ESAO滤波,得到第六亮度重建块;否则,若所述当前亮度块启用样本自适应补偿SAO模式,则对所述第五亮度重建块进行SAO滤波,得到第六亮度重建块;否则,基于第五亮度重建块确定第六亮度重建块;
若所述当前亮度块启用自适应环路滤波ALF模式,则对所述第六亮度重建块进行ALF滤波,得到第七亮度重建块;否则,基于所述第六亮度重建块确定第七亮度重建块。
28.一种编码装置,其特征在于,所述编码装置包括:
存储器,其经配置以存储视频数据;
编码器,其经配置以实现:
获取当前亮度块对应的第一亮度重建块;
若所述当前亮度块启用去块滤波DBF模式,则对所述第一亮度重建块进行垂直DBF滤波,得到第二亮度重建块;否则,基于所述第一亮度重建块确定第二亮度重建块;
若所述当前亮度块启用垂直去块滤波调整DBR模式,则对所述第二亮度重建块进行垂直DBR滤波,得到第三亮度重建块;否则,基于所述第二亮度重建块确定第三亮度重建块;
若所述当前亮度块启用DBF模式,则对所述第三亮度重建块进行水平DBF滤波,得到第四亮度重建块;否则,基于所述第三亮度重建块确定第四亮度重建块;
若所述当前亮度块启用水平DBR模式,则对所述第四亮度重建块进行水平DBR滤波,得到第五亮度重建块;否则,基于所述第四亮度重建块确定第五亮度重建块;
若所述当前亮度块启用增强样本自适应补偿ESAO模式,则对所述第五亮度重建块进行ESAO滤波,得到第六亮度重建块;否则,若所述当前亮度块启用样本自适应补偿SAO模式,则对所述第五亮度重建块进行SAO滤波,得到第六亮度重建块;否则,基于第五亮度重建块确定第六亮度重建块;
若所述当前亮度块启用自适应环路滤波ALF模式,则对所述第六亮度重建块进行ALF滤波,得到第七亮度重建块;否则,基于所述第六亮度重建块确定第七亮度重建块。
29.一种解码端设备,其特征在于,包括:处理器和机器可读存储介质,所述机器可读存储介质存储有能够被所述处理器执行的机器可执行指令;
所述处理器用于执行机器可执行指令,以实现如下步骤:
获取当前亮度块对应的第一亮度重建块;
若所述当前亮度块启用去块滤波DBF模式,则对所述第一亮度重建块进行垂直DBF滤波,得到第二亮度重建块;否则,基于所述第一亮度重建块确定第二亮度重建块;
若所述当前亮度块启用垂直去块滤波调整DBR模式,则对所述第二亮度重建块进行垂直DBR滤波,得到第三亮度重建块;否则,基于所述第二亮度重建块确定第三亮度重建块;
若所述当前亮度块启用DBF模式,则对所述第三亮度重建块进行水平DBF滤波,得到第四亮度重建块;否则,基于所述第三亮度重建块确定第四亮度重建块;
若所述当前亮度块启用水平DBR模式,则对所述第四亮度重建块进行水平DBR滤波,得到第五亮度重建块;否则,基于所述第四亮度重建块确定第五亮度重建块;
若所述当前亮度块启用增强样本自适应补偿ESAO模式,则对所述第五亮度重建块进行ESAO滤波,得到第六亮度重建块;否则,若所述当前亮度块启用样本自适应补偿SAO模式,则对所述第五亮度重建块进行SAO滤波,得到第六亮度重建块;否则,基于第五亮度重建块确定第六亮度重建块;
若所述当前亮度块启用自适应环路滤波ALF模式,则对所述第六亮度重建块进行ALF滤波,得到第七亮度重建块;否则,基于所述第六亮度重建块确定第七亮度重建块。
30.一种编码端设备,其特征在于,包括:处理器和机器可读存储介质,所述机器可读存储介质存储有能够被所述处理器执行的机器可执行指令;
所述处理器用于执行机器可执行指令,以实现如下步骤:
获取当前亮度块对应的第一亮度重建块;
若所述当前亮度块启用去块滤波DBF模式,则对所述第一亮度重建块进行垂直DBF滤波,得到第二亮度重建块;否则,基于所述第一亮度重建块确定第二亮度重建块;
若所述当前亮度块启用垂直去块滤波调整DBR模式,则对所述第二亮度重建块进行垂直DBR滤波,得到第三亮度重建块;否则,基于所述第二亮度重建块确定第三亮度重建块;
若所述当前亮度块启用DBF模式,则对所述第三亮度重建块进行水平DBF滤波,得到第四亮度重建块;否则,基于所述第三亮度重建块确定第四亮度重建块;
若所述当前亮度块启用水平DBR模式,则对所述第四亮度重建块进行水平DBR滤波,得到第五亮度重建块;否则,基于所述第四亮度重建块确定第五亮度重建块;
若所述当前亮度块启用增强样本自适应补偿ESAO模式,则对所述第五亮度重建块进行ESAO滤波,得到第六亮度重建块;否则,若所述当前亮度块启用样本自适应补偿SAO模式,则对所述第五亮度重建块进行SAO滤波,得到第六亮度重建块;否则,基于第五亮度重建块确定第六亮度重建块;
若所述当前亮度块启用自适应环路滤波ALF模式,则对所述第六亮度重建块进行ALF滤波,得到第七亮度重建块;否则,基于所述第六亮度重建块确定第七亮度重建块。
CN202110739453.6A 2021-06-30 2021-06-30 编解码方法、装置及其设备 Active CN114640847B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN202111628844.7A CN114125445B (zh) 2021-06-30 2021-06-30 解码方法、装置、设备及机器可读存储介质
CN202110739453.6A CN114640847B (zh) 2021-06-30 2021-06-30 编解码方法、装置及其设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110739453.6A CN114640847B (zh) 2021-06-30 2021-06-30 编解码方法、装置及其设备

Related Child Applications (1)

Application Number Title Priority Date Filing Date
CN202111628844.7A Division CN114125445B (zh) 2021-06-30 2021-06-30 解码方法、装置、设备及机器可读存储介质

Publications (2)

Publication Number Publication Date
CN114640847A CN114640847A (zh) 2022-06-17
CN114640847B true CN114640847B (zh) 2023-03-24

Family

ID=81946341

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110739453.6A Active CN114640847B (zh) 2021-06-30 2021-06-30 编解码方法、装置及其设备

Country Status (1)

Country Link
CN (1) CN114640847B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114125445B (zh) * 2021-06-30 2023-03-24 杭州海康威视数字技术股份有限公司 解码方法、装置、设备及机器可读存储介质
WO2024055842A1 (en) * 2022-09-16 2024-03-21 Mediatek Inc. Method and apparatus for adaptive loop filter with non-sample taps for video coding

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9094658B2 (en) * 2010-05-10 2015-07-28 Mediatek Inc. Method and apparatus of adaptive loop filtering
US10306246B2 (en) * 2015-02-13 2019-05-28 Mediatek Inc. Method and apparatus of loop filters for efficient hardware implementation
US10382792B2 (en) * 2015-02-13 2019-08-13 Lg Electronics Inc. Method and apparatus for encoding and decoding video signal by means of transform-domain prediction
WO2021203394A1 (zh) * 2020-04-09 2021-10-14 北京大学 环路滤波的方法与装置

Also Published As

Publication number Publication date
CN114640847A (zh) 2022-06-17

Similar Documents

Publication Publication Date Title
CN110393011B (zh) 用于视频编解码中具有帧内方向预测模式的内含帧内编解码工具设定的方法和装置
CN106131552B (zh) 采用自适应偏置处理编码视频的方法和装置
CN107197256B (zh) 用于对图像的序列进行编码和解码的方法和装置
JP5763210B2 (ja) 改良されたループ型フィルタリング処理のための方法と装置
EP3363198B1 (en) Method and apparatus of adaptive filtering of samples for video coding
TWI558212B (zh) 一種後期處理重建畫面的方法
KR20130091800A (ko) 인트라 예측 복호화 방법
CN114640847B (zh) 编解码方法、装置及其设备
CN114125445B (zh) 解码方法、装置、设备及机器可读存储介质
KR20190088020A (ko) 다양한 변환 기술을 사용하는 비디오 코딩 방법 및 장치
CN114143548B (zh) 视频编解码中变换系数的编解码
JP2024133168A (ja) ビデオ符号化のための方法および装置
KR20140124448A (ko) 인트라 예측을 이용한 비디오 부호화/복호화 방법 및 장치
TWI806447B (zh) 編解碼方法、裝置及其設備
TW202112132A (zh) 視訊編碼系統中用以決定去區塊濾波決策之視訊處理方法和裝置
CN114222119B (zh) 增强滤波方法、装置及机器可读存储介质
CN113891075B (zh) 滤波处理方法及装置
CN114007082A (zh) 一种解码、编码、编解码方法、装置及其设备
US20210185314A1 (en) Image decoding device, image coding device, image processing system, and program
CN114051727A (zh) 编码装置、解码装置和程序
CN113132724A (zh) 编码、解码方法、装置及其设备
RU2817405C1 (ru) Способ, оборудование и устройства для кодирования и декодирования
EP4325848A1 (en) Encoding method, decoding method, encoder, decoder and storage medium
KR20130029695A (ko) 근거리 인트라 예측에서의 예측 블록 생성 방법
KR20130029694A (ko) 인트라 모드에서의 색차 예측 블록 생성 방법

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant