CN106303550B - 去块效应滤波方法和去块效应滤波器 - Google Patents

去块效应滤波方法和去块效应滤波器 Download PDF

Info

Publication number
CN106303550B
CN106303550B CN201510320826.0A CN201510320826A CN106303550B CN 106303550 B CN106303550 B CN 106303550B CN 201510320826 A CN201510320826 A CN 201510320826A CN 106303550 B CN106303550 B CN 106303550B
Authority
CN
China
Prior art keywords
value
pixel
filtered
filtering
neighborhood
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201510320826.0A
Other languages
English (en)
Other versions
CN106303550A (zh
Inventor
曾兵
缪泽翔
陈宸
朱树元
赵寅
杨海涛
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huawei Technologies Co Ltd
Original Assignee
Huawei Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huawei Technologies Co Ltd filed Critical Huawei Technologies Co Ltd
Priority to CN201510320826.0A priority Critical patent/CN106303550B/zh
Priority to KR1020187001044A priority patent/KR102094247B1/ko
Priority to EP16806532.4A priority patent/EP3300361B1/en
Priority to PCT/CN2016/075311 priority patent/WO2016197634A1/zh
Publication of CN106303550A publication Critical patent/CN106303550A/zh
Priority to US15/837,594 priority patent/US10555007B2/en
Application granted granted Critical
Publication of CN106303550B publication Critical patent/CN106303550B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/86Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117Filters, e.g. for pre-processing or post-processing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136Incoming video signal characteristics or properties
    • H04N19/137Motion inside a coding unit, e.g. average field, frame or block difference
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • H04N19/82Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Image Processing (AREA)

Abstract

本发明实施例提供了一种去块效应滤波方法和去块效应滤波器。该方法包括根据图像块上的待滤波像素的当前像素值和待滤波像素的第一邻域中的像素的像素值,确定待滤波像素的第一滤波偏置值,并根据待滤波像素的第二邻域中的像素的像素值对待滤波像素的像素值进行预测,得到待滤波像素的滤波预测值,然后根据当前像素值、第一滤波偏置值和滤波预测值确定待滤波像素的实际滤波值。本发明实施例通过新增滤波预测值,并与当前像素值、第一滤波偏置值结合得到实际滤波值,这样能够提高滤波后的信号波形整体的平滑性。

Description

去块效应滤波方法和去块效应滤波器
技术领域
本发明涉及通信领域,并且更具体地,涉及去块效应滤波方法和去块效应滤波器。
背景技术
视频编码通常采用混合编码框架,例如H.264/AVC、H.265/HEVC、AVS等视频编码标准。混合编码框架主要包括预测(prediction)、变换(transform)、量化(quantization)、熵编码(entropy coding)、环路去块滤波(deblocking)等环节。
例如,高效视频编码标准(High Efficiency Video Coding,HEVC)采用基于图像分块的预测和变换的混合编码框架。HEVC可以将需要编码的视频划分为I帧、P帧和B帧。I帧的编码为帧内编码,P帧和B帧的编码为帧间编码,帧间编码和帧内编码都有基于块的编码方式。HEVC以编码树单元(Coding Tree Unit,CTU)为基本单位对图像进行分块,CTU继续以四叉树的形式向下划分为编码单元(Coding Unit,CU),在预测及变换时CU作为根节点将继续分为预测单元(Prediction Unit,PU)和变换单元(Transform Unit,TU)。
基于块的变换编码在图像压缩编码中得到广泛应用,随着码率的降低,量化变得粗糙,在块的边界会出现不连续,形成重建图像的明显缺陷,这种图像块之间的不连续现象称为块效应。
现有的去除块效应时,一般采用去块滤波器。去块滤波器可以首先计算块边界处像素的滤波偏置值,并根据滤波偏置值对该像素的像素值进行滤波。但是,按照这种方法滤波后的信号可能会出现局部波形梯度增加,可能使得最大波形梯度发生转移,使得信号整体的平滑性下降。
发明内容
本发明实施例提供一种去块效应滤波方法和去块效应滤波器,能够提高滤波后的信号波形整体的平滑性。
第一方面,提供了一种去块效应滤波方法,包括:根据图像块上的待滤波像素的当前像素值和所述待滤波像素的第一邻域中的像素的像素值,确定所述待滤波像素的第一滤波偏置值;根据所述待滤波像素的第二邻域中的像素的像素值对所述待滤波像素的像素值进行预测,从而得到所述待滤波像素的滤波预测值;根据所述当前像素值、所述第一滤波偏置值和滤波预测值确定所述待滤波像素的实际滤波值。。
结合第一方面,在第一方面的一种实现方式中,将所述当前像素值与所述第一滤波偏置值的和减去所述滤波预测值所得差值取绝对值,从而获得第一绝对值,以及将所述当前像素值减去所述滤波预测值所得差值取绝对值,从而获得第二绝对值,对所述第一绝对值与所述第二绝对值进行比较;根据比较结果确定所述实际滤波值。
结合第一方面及其上述实现方式,在第一方面的另一种实现方式中,所述根据判断结果确定所述实际滤波值包括:当所述第一绝对值大于所述第二绝对值时,将所述当前像素值加上第二滤波偏置值Δ2所得的值作为所述实际滤波值,其中,Δ2=δΔ1,Δ1表示所述第一滤波偏置值,-1<δ<1;或者,当所述第一绝对值小于或者等于所述第二绝对值时,将所述当前像素值加上所述第一滤波偏置值所得的值作为所述实际滤波值。
结合第一方面及其上述实现方式,在第一方面的另一种实现方式中,所述根据所述当前像素值、所述第一滤波偏置值和滤波预测值确定所述实际滤波值包括:判断所述当前像素值减去所述滤波预测值之后所得差值的符号是否与所述第一滤波偏置值的符号相同;根据判断结果确定所述实际滤波值。
结合第一方面及其上述实现方式,在第一方面的另一种实现方式中,所述根据判断结果确定所述实际滤波值包括:当所述当前像素值减去所述滤波预测值之后所得差值的符号与所述第一滤波偏置值Δ1的符号相同时,将所述当前像素值加上第二滤波偏置值Δ2所得的值确定为所述实际滤波值,其中,Δ2=δΔ1,Δ1表示所述第一滤波偏置值,-1<δ<1;或者,当所述当前像素值减去所述滤波预测值之后所得差值的符号与所述第一滤波偏置值Δ1的符号相反时,将所述当前像素值加上所述第一滤波偏置值所得的值作为所述实际滤波值。
结合第一方面及其上述实现方式,在第一方面的另一种实现方式中,所述根据所述待滤波像素的第二邻域中像素的像素值对所述待滤波像素的像素值进行预测,得到所述待滤波像素的滤波预测值包括:对所述第二邻域中所述待滤波像素两侧的至少两个像素的像素值进行加权求和,从而得到所述待滤波像素的滤波预测值。
结合第一方面及其上述实现方式,在第一方面的另一种实现方式中,所述对所述第二邻域中所述待滤波像素两侧的至少两个像素的像素值进行加权求和,从而得到所述待滤波像素的滤波预测值包括根据以下公式确定所述滤波预测值:r=round[(d1p1+d2p2+…+dNpN)/dN+1],其中,d1、d2、…dN、dN+1为预设参数,且dN+1=d1+d2+…+dN,p1、p2…pN为所述第二邻域中所述待滤波像素两侧的N个像素分别对应的N个像素值,N为大于或者等于2的整数。
结合第一方面及其上述实现方式,在第一方面的另一种实现方式中,所述根据所述待滤波像素的第二邻域中像素的像素值对所述待滤波像素的像素值进行预测,从而得到所述待滤波像素的滤波预测值包括:确定拟合曲线,所述拟合曲线包括拟合参数;根据所述拟合曲线对所述第二邻域中的至少两个像素进行拟合,得到所述拟合参数的值;根据所述拟合参数的值和拟合曲线得到所述待滤波像素的滤波预测值。
结合第一方面及其上述实现方式,在第一方面的另一种实现方式中,所述拟合曲线为:t为所述待滤波像素到所述图像块边界的距离,β和γ为所述拟合参数;相应的,所述根据所述拟合曲线对所述第二邻域中的至少两个像素进行拟合,得到所述拟合参数的值包括:根据所述拟合曲线、所述第二邻域中所述待滤波像素两侧的至少三个像素到所述图像块的边界的距离及所述至少三个像素对应的像素值确定β和γ的值。
结合第一方面及其上述实现方式,在第一方面的另一种实现方式中,所述拟合曲线为:t为所述待滤波像素到所述图像块边界的距离,β和γ为所述拟合参数;相应的,所述根据所述拟合曲线对所述第二邻域中的至少两个像素进行拟合,得到所述拟合参数的值包括:根据所述拟合曲线、所述第二邻域中所述待滤波像素两侧的至少两个像素到所述图像块的边界的距离及所述至少两个像素对应的像素值确定β和γ的值。
结合第一方面及其上述实现方式,在第一方面的另一种实现方式中,所述拟合曲线为:t为所述待滤波像素到所述图像块边界的距离,β和γ为所述拟合参数;相应的,所述根据所述拟合曲线对所述第二邻域中的至少两个像素进行拟合,得到所述拟合参数的值包括:根据所述拟合曲线、所述第二邻域中所述待滤波像素两侧的至少两个像素到所述图像块的边界的距离及所述至少两个像素对应的像素值确定β和γ的值。
结合第一方面及其上述实现方式,在第一方面的另一种实现方式中,,所述根据待滤波像素的当前像素值和所述待滤波像素的第一邻域中的像素的像素值,确定所述待滤波像素的第一滤波偏置值包括:对所述待滤波像素的当前像素值和至少一个所述第一邻域中的像素的像素值进行加权求和,得到所述待滤波像素的滤波偏置值。
结合第一方面及其上述实现方式,在第一方面的另一种实现方式中,所述第一邻域和所述第二邻域相同。
第二方面,提供了一种去块效应滤波器,包括:第一确定单元,用于根据图像块上的待滤波像素的当前像素值和所述待滤波像素的第一邻域中的像素的像素值,确定所述待滤波像素的第一滤波偏置值;预测单元,用于根据所述待滤波像素的第二邻域中的像素的像素值对所述待滤波像素的像素值进行预测,从而得到所述待滤波像素的滤波预测值;第二确定单元,用于根据所述当前像素值、所述第一确定单元得到的所述第一滤波偏置值和所述预测单元得到的所述滤波预测值确定所述待滤波像素的实际滤波值。
结合第二方面,在第二方面的一种实现方式中,所述第二确定单元具体用于将所述当前像素值与所述第一滤波偏置值的和减去所述滤波预测值所得差值取绝对值,从而获得第一绝对值,以及将所述当前像素值减去所述滤波预测值所得差值取绝对值,从而获得第二绝对值,对所述第一绝对值与所述第二绝对值进行比较,并根据比较结果确定所述实际滤波值。
结合第二方面及其上述实现方式,在第二方面的另一种实现方式中,所述第二确定单元具体用于:当所述第一绝对值大于所述第二绝对值时,将所述当前像素值加上第二滤波偏置值Δ2所得的值作为所述实际滤波值,其中,Δ2=δΔ1,Δ1表示所述第一滤波偏置值,-1<δ<1;或者,当所述第一绝对值小于或者等于所述第二绝对值时,将所述当前像素值加上所述第一滤波偏置值所得的值作为所述实际滤波值。
结合第二方面及其上述实现方式,在第二方面的另一种实现方式中,所述第二确定单元具体用于判断所述当前像素值减去所述滤波预测值之后所得差值的符号是否与所述第一滤波偏置值的符号相同,并根据判断结果确定所述实际滤波值。
结合第二方面及其上述实现方式,在第二方面的另一种实现方式中,所述第二确定单元具体用于:当所述当前像素值减去所述滤波预测值之后所得差值的符号与所述第一滤波偏置值Δ1的符号相同时,将所述当前像素值加上第二滤波偏置值Δ2所得的值作为所述实际滤波值,其中,Δ2=δΔ1,Δ1表示所述第一滤波偏置值,-1<δ<1;或者,当所述当前像素值减去所述滤波预测值之后所得差值的符号与所述第一滤波偏置值Δ1的符号相反时,将所述当前像素值加上所述第一滤波偏置值所得的值作为所述实际滤波值。
结合第二方面及其上述实现方式,在第二方面的另一种实现方式中,所述预测单元具体用于对所述第二邻域中所述待滤波像素两侧的至少两个像素的像素值进行加权求和,从而得到所述待滤波像素的滤波预测值。
结合第二方面及其上述实现方式,在第二方面的另一种实现方式中,所述预测单元具体用于根据以下公式确定所述滤波预测值:r=round[(d1p1+d2p2+…+dNpN)/dN+1],其中,d1、d2、…dN、dN+1为预设参数,且dN+1=d1+d2+…+dN,p1、p2…pN为所述第二邻域中所述待滤波像素两侧的N个像素分别对应的N个像素值,N为大于或者等于2的整数。
结合第二方面及其上述实现方式,在第二方面的另一种实现方式中,所述预测单元具体用于确定拟合曲线,所述拟合曲线包括拟合参数,根据所述拟合曲线对所述第二邻域中的至少两个像素进行拟合,得到所述拟合参数的值,并根据所述拟合参数的值和拟合曲线得到所述待滤波像素的滤波预测值。
结合第二方面及其上述实现方式,在第二方面的另一种实现方式中,所述拟合曲线为:t为所述待滤波像素到所述图像块边界的距离,β和γ为所述拟合参数;相应的,所述预测单元具体用于根据所述拟合曲线、所述第二邻域中所述待滤波像素两侧的至少三个像素到所述图像块的边界的距离及所述至少三个像素对应的像素值确定β和γ的值。
结合第二方面及其上述实现方式,在第二方面的另一种实现方式中,所述拟合曲线为:t为所述待滤波像素到所述图像块边界的距离,β和γ为所述拟合参数;相应的,所述预测单元具体用于根据所述拟合曲线、所述第二邻域中所述待滤波像素两侧的至少两个像素到所述图像块的边界的距离及所述至少两个像素对应的像素值确定β和γ的值。
结合第二方面及其上述实现方式,在第二方面的另一种实现方式中,所述拟合曲线为:t为所述待滤波像素到所述图像块边界的距离,β和γ为所述拟合参数;相应的,所述预测单元具体用于根据所述拟合曲线、所述第二邻域中所述待滤波像素两侧的至少两个像素到所述图像块的边界的距离及所述至少两个像素对应的像素值确定β和γ的值。
结合第二方面及其上述实现方式,在第二方面的另一种实现方式中,所述第一确定单元具体用于对所述待滤波像素的当前像素值和至少一个所述第一邻域像素的像素值进行加权求和,得到所述待滤波像素的滤波偏置值。
结合第二方面及其上述实现方式,在第二方面的另一种实现方式中,所述第一邻域和所述第二邻域相同。
本发明实施例利用待滤波像素的邻域像素的像素值来确定该待滤波像素的滤波偏置值和滤波预测值,并根据滤波偏置值、当前像素值以及滤波预测值来确定实际滤波值,这样可以提高滤波后的信号波形整体上的平滑性。
附图说明
为了更清楚地说明本发明实施例的技术方案,下面将对本发明实施例中所需要使用的附图作简单地介绍,显而易见地,下面所描述的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是现有的去块效应滤波方法导致滤波异常的示意图。
图2是本发明一个实施例的去块效应滤波方法的示意性流程图。
图3是本发明一个实施例的基于线性预测得到的待滤波像素的滤波预测值的示意图。
图4是本发明另一实施例的基于函数拟合进行预测得到的待滤波像素的滤波预测值的示意图。
图5是本发明一个实施例的去块效应滤波器的框图。
图6是本发明一个实施例的去块效应滤波器的框图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明的一部分实施例,而不是全部实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例,都应属于本发明保护的范围。
图1是现有的去块效应滤波方法导致滤波异常的示意图。
图1的去块滤波器可以为HEVC中的去块滤波器。像素P0和P1位于图像中的第一图像块,像素Q0和Q1位于图像中的第二图像块。
现有的去除块效应时,一般采用去块滤波器。去块滤波器可以首先计算块边界处像素的滤波偏置值,并根据滤波偏置值对该像素的像素值进行滤波。例如,像素P0和Q0滤波后得到像素P0′和Q0′。但是,由图像可以看出,滤波后P0′和Q0′之间的梯度下降,Q0′和Q1之间的梯度也下降,即像素P0′和Q1之间的梯度下降,使得这段波形更不容易发生块效应。但是,P1和P0′之间的梯度却增加了。从整个P0和P1之间的波形来看,滤波后的最大梯度并未减小,只是从P0与Q0之间转移到P1与P0′之间。即滤波后的信号可能会出现局部波形梯度增加,使得最大波形梯度发生转移,使得信号整体的平滑性下降,主观视觉效果受损,编码效率降低。
图2是本发明一个实施例的去块效应滤波方法的示意性流程图。图2的方法可以由去块效应滤波器执行。
201,根据图像块上的待滤波像素的当前像素值和待滤波像素的第一邻域中的像素的像素值,确定待滤波像素的第一滤波偏置值。
202,根据待滤波像素的第二邻域中的像素的像素值对待滤波像素的像素值进行预测,从而得到待滤波像素的滤波预测值。
203,根据当前像素值、第一滤波偏置值和滤波预测值确定待滤波像素的实际滤波值。
本发明实施例利用待滤波像素的邻域像素的像素值来确定该待滤波像素的滤波偏置值和滤波预测值,并根据滤波偏置值、当前像素值以及滤波预测值来确定实际滤波值,这样可以提高滤波后的信号波形整体上的平滑性。
本发明实施例中的待滤波像素可以为所有编码块、变化块或预测块等图像块边界的像素,也可以为仅存在块效应的图像块边界处的像素,本发明实施例对此不做限制。
本发明实施例对待滤波像素的具体位置不做限制。在本发明的一个实施例中,滤波器可以对块效应中至少一个待滤波像素按照上述方法进行滤波处理。每个待滤波像素可以为编码块、变化块或预测块中存在块效应区域中的任意一个像素。一般地,待滤波像素可以为存在块效应的块边界处的像素。
另外,多个待滤波像素可以为横跨两个编码块的一行或一列像素,也可以为横跨两个变换块的一行或一列像素,还可以是横跨两个预测块的一行或一列像素。对多个待滤波像素进行滤波处理时,多个待滤波像素计算滤波偏置值和滤波预测值时,可以采用相同的计算方法,也可以采用不同的计算方法。本发明实施例对存在块效应的区域的待滤波像素进行滤波处理,但至于选择多少个待滤波像素,本发明实施例对此不做限制。例如,多个带滤波像素的数目可以为4、6、8、10、12、9等。一般地,至少会选择存在块效应的块边界的像素。下面仅以对多个待滤波像素中的任意一个为例进行示例性说明。
在本发明的一个实施例中,可以根据待滤波像素的当前像素值和待滤波像素的第一邻域像素的像素值,确定待滤波像素的第一滤波偏置值Δ1。待滤波像素的第一邻域像素可以为待滤波像素周围区域的像素。本发明实施例对第一邻域的大小不做限制,只要第一邻域包括除待滤波像素之外的其它像素即可。换句话说,可以由待滤波像素的当前像素值及其周围至少一个像素的像素值得到待滤波像素的滤波偏置值。
可选地,可以对待滤波像素的当前像素值和至少一个第一邻域像素的像素值进行加权求和,得到待滤波像素的滤波偏置值。
具体地,可以使用HEVC中计算像素的滤波偏置值的方法计算待滤波像素的滤波偏置值。例如,可以根据下列公式确定待滤波像素P0的第一滤波偏置值:
Δ1=round{[a(q0-p0)-b(q1-p1)]/c} (1)
其中,a、b和c为预设常数,p0为待滤波像素的像素值,p1、q0和q1为第一邻域中的三个像素对应的像素值。
像素P1、Q0、Q1为像素P0第一邻域的像素。假设p0、p1、q0、q1四个像素值分别为像素P0、P1、Q0、Q1所对应的像素值。在公式(1)中,round(x)表示对x取整,例如,可以采用四舍五入的取整方法、向上取整或向下取整等。p0、p1、q0、q1的权重值分别为-a/c、b/c、a/c、-b/c。这里,a、b和c为预设常数,每个像素的权重值可以使用经验值或者重新确定。一般地,为了使得加权求和能够转换为整数乘加和移位运算,通常可以将常数c设置为2的正整数次幂。例如,预设常数,a、b、c可以分别为9、3、16,即可以根据下列公式确定待滤波像素的第一滤波偏置值:
另外,具体地,还可以根据下列公式确定待滤波像素的第一滤波偏置值:
Δ1=round[(a0p0+a1p1+a2p2+b1q1+b2q2)/c] (3)
其中,a0、a1、a2、b1、b2和c为预设常数,p0为待滤波像素的像素值,p1、p2、q1和q2为第一邻域中的四个像素P1、P2、Q1、Q2对应的像素值。为了使得加权求和能够转换为整数乘加和移位运算,通常可以将常数c设置为2的正整数次幂,例如c=16、c=32、c=64等。可选地,a0、a1、a2、b1、通常可以设置为整数。例如,上述公式(3)中的参数可以如下设置:a0=-16、a1=5、a2=5、b1=3、b2=3、c=16。再如,a0=-17、a1=10、a2=5、b1=6、b2=-4、c=32。
对于像素Q0的滤波偏置值可以为-Δ1,也可以采用其它的加权求和方式计算。例如,当两个像素关于块边界对称(比如,两个距离块边界最近的像素或者次近的像素)时,关于块边界对称的两个像素的滤波偏置值可以大小相同,符号相反。或者,也可以对两个像素分别采用不同的加权求和方式进行计算,本发明实施例对此不做限制。
在本发明的一个实施例中,所有像素的滤波偏置值都可以独立进行计算得到,还可以通过邻域点的滤波偏置值及邻域点的像素值进行计算得到。例如,可以通过下列公式(4)(5)通过邻域像素的滤波偏置值及邻域像素的像素值得到该像素的滤波偏置值。
对于像素P1、Q1的滤波偏置值可以为:
在本发明的一个实施例中,可以根据待滤波像素的第二邻域像素的像素值对待滤波像素的像素值进行预测得到待滤波像素的滤波预测值。
应理解,本发明实施例中的第一邻域和第二邻域都为待滤波像素的邻域,二者可以为同一区域,也可以为不同区域。例如,第一邻域和第二邻域相同。
可选地,可以对第二邻域中待滤波像素两侧的至少两个像素的像素值进行加权求和得到待滤波像素的滤波预测值。
具体地,对第二邻域中所述待滤波像素两侧的至少两个像素的像素值进行加权求和,从而得到待滤波像素的滤波预测值包括可以根据下列公式确定待滤波像素的滤波预测值:
r=round[(d1p1+d2p2+…+dNpN)/dN+1], (6)
其中,d1、d2、…dN、dN+1为预设参数,且dN+1=d1+d2+…+dN,p1、p2…pN为第二邻域中待滤波像素两侧的N个像素分别对应的N个像素值,N为大于或者等于2的整数。
当公式(6)中N=2时,可以利用像素P0的第二邻域中的两个像素,例如,P0两侧的像素P1和Q1计算P0的滤波预测值。计算公式如下:
r=round[(d1p1+d2p2)/d3] (7)
其中,d1、d2、d3为预设参数,且d3=d1+d2。通常,为了使得加权求和能够转换为整数乘加和移位运算,通常可以将常数c设置为2的正整数次幂。
本发明实施例对d1、d2、d3的具体数值不做限制。例如,可以采用d1=2、d2=1、d3=3,此时,待滤波像素的滤波预测值位于像素P1和Q1对应像素的连线上,即待滤波像素的滤波预测值r为像素值p1和q1的线性内插值。又如,d1=5、d2=3、d3=8。再如,d1=13、d2=3、d3=16。
公式(6)中,N为大于或者等于2的整数。只要取待滤波像素第二邻域的至少两个像素即可对待滤波像素的滤波预测值进行估计。例如,还可以像素P2、P1、Q1对应的像素值p2、p1、q1的加权求和值作为待滤波像素的滤波预测值,其中,像素值p2、p1、q1对应的权重可以分别为6/16、11/16、-1/16。又如,还可以像素P3、P2、P1、Q0、Q1、Q2对应的像素值p3、p2、p1、q0、q1、q2的加权求和值作为待滤波像素的滤波预测值,其中,像素值p3、p2、p1、q0、q1、q2对应的权重可以分别为1/32、-5/32、20/32、20/32、-5/32、1/32。
具体地,本发明实施例中的待滤波像素的滤波预测值可以根据拟合函数得到。根据待滤波像素的第二邻域中像素的像素值对待滤波像素的像素值进行预测,从而得到待滤波像素的滤波预测值包括:确定拟合曲线,其中,拟合曲线包括拟合参数;根据拟合曲线对第二邻域中的至少两个像素进行拟合得到拟合参数的值;根据拟合参数的值和拟合曲线得到待滤波像素的滤波预测值。
例如,可以预设一个函数并设定函数中的参数,通过上述第二邻域中的至少两个像素及其对应的像素值对函数进行拟合,以得到函数中的参数值。然后,将待滤波像素的自变量的值代入到拟合得到的函数中,得到待滤波像素的滤波预测值。
本发明实施例对具体的拟合曲线不做限制,各种形式的曲线都可以作为拟合曲线。
例如,拟合曲线可以为:
其中,t为待滤波像素到所述图像块边界的距离,β和γ的值可以根据拟合曲线、第二邻域中待滤波像素两侧的至少三个像素到图像块边界的距离及至少三个像素对应的像素值确定。
具体地,可以通过第二邻域中的像素P2、P1、Q1、Q2到块边界的距离 以及每个像素对应的像素值对公式(8)中的函数进行拟合。例如,可以分别为-2.5、-1.5、1.5、2.5,可以用(-2.5,p2)、(-1.5,p1)、(1.5,q1)、(2.5,q2)这四组数据,求解一组α、β、γ,使得由公式(8)的拟合函数得到的预测值与p2、p1、q1、q2足够接近。
应理解,在求解拟合函数中参数时,为了减小计算复杂度,可以取第二邻域中不同的像素对函数进行拟合,得到多组预设参数。然后,遍历多组预设参数,计算每一组预设参数下多个像素的像素值与像素预测值的均方差,并取多个像素的均方差和最小的一组预设参数作为函数最终的拟合参数。或者,还可以遍历多组预设参数,计算每一组预设参数下多个像素的像素值与像素预测值的误差总和小于阈值时,取该组预设参数作为函数最终的拟合参数。这里的阈值可以预先设定。
在得到最终的拟合预设参数之后,可以将待滤波像素到块边界的距离代入拟合得到的函数中,得到待滤波像素的像素预测值。例如,像素P0、Q0到块边界的距离分别为-0.5、0.5,那么,像素P0、Q0的像素预测值分别为S(-0.5)、S(0.5)。
应理解,本发明实施例对曲线拟合选择的函数不做限制。例如,除公式(8)中的拟合函数之外,还可以采用其它类型的函数进行拟合。可以通过选取第二邻域中的像素及其对应的像素值来确定拟合函数中的预设参数。确定拟合函数中的预设参数之后,可以将待滤波像素到块边界的距离代入函数中,求得待滤波像素的滤波预测值。
又如,拟合曲线还可以为:
其中,t为待滤波像素到图像块边界的距离,β和γ的值可以根据拟合曲线、第二邻域中待滤波像素两侧的至少两个像素到图像块边界的距离及其至少两个像素对应的像素值确定。
再如,拟合曲线还可以为:
其中,t为待滤波像素到所述图像块边界的距离,β和γ的值可以根据拟合曲线、第二邻域中待滤波像素两侧的至少两个像素到图像块边界的距离及其至少两个像素对应的像素值确定。
在本发明的一个实施例中,可以根据当前像素值、第一滤波偏置值和滤波预测值所得的值作为待滤波像素的实际滤波值。
可选地,可以通过判断当前像素值加上第一滤波偏置值之后所得的值,相对当前像素值是否更加远离滤波预测值,并根据判断结果确定实际滤波值。例如,对当前像素值与第一滤波偏置值的和减去滤波预测值所得差值的第一绝对值,以及当前像素值减去滤波预测值所得差值的第二绝对值进行比较,根据比较结果确定实际滤波值。
例如,在当前像素值加上所述第一滤波偏置值Δ1之后所得的值,相对当前像素值更加远离滤波预测值时,将当前像素值加上第二滤波偏置值Δ2所得的值作为实际滤波值,其中,Δ2=δΔ1,Δ1表示所述第一滤波偏置值,-1<δ<1;在当前像素值加上第一滤波偏置值之后所得的值,与滤波预测值相等,或者,相对当前像素值更加接近滤波预测值时,将当前像素值加上第一滤波偏置值作为实际滤波值。即,当第一绝对值大于所述第二绝对值时,将当前像素值加上第二滤波偏置值Δ2所得的值作为实际滤波值,其中,Δ2=δΔ1,Δ1表示所述第一滤波偏置值,-1<δ<1;或者,当第一绝对值小于或者等于第二绝对值时,将当前像素值加上所述第一滤波偏置值所得的值作为所述实际滤波值。
本发明实施例中的实际滤波值可以使得信号整体的平滑性更好,增强主观视觉效果和编码效率。原则上,实际滤波值相对当前像素值加上第一滤波偏置值更加接近滤波预测值。
本发明实施例对判断当前像素值加上第一滤波偏置值之后相对当前像素值是否更加远离滤波预测值的具体方法不做限定。
例如,可以对当前像素值加上第一滤波偏置值之后与滤波预测值之间的第一距离和当前像素值与滤波预测值之间的第二距离进行比较,这样来判断待滤波像素的当前像素值加上滤波偏置值之后相对待滤波像素的当前像素值是否更加偏离滤波预测值。当第一距离大于第二距离时,待滤波像素的当前像素值加上滤波偏置值之后相对待滤波像素的当前像素值是否更加偏离滤波预测值。当第一距离小于第二距离时,待滤波像素的当前像素值加上滤波偏置值之后相对待滤波像素的当前像素值是否更加接近滤波预测值。当第一距离等于第二距离时,待滤波像素的当前像素值加上滤波偏置值之后相对待滤波像素的当前像素值与滤波预测值的接近程度相同。
本发明实施例还可以通过其它等价的方式来判断当前像素值加上第一滤波偏置值之后相对当前像素值是否更加远离滤波预测值,在此不再一一叙述。
可选地,可以通过判断当前像素值减去滤波预测值之后所得差值的符号与第一滤波偏置值的符号是否相同,并根据判断结果确定实际滤波值。例如,在当前像素值减去滤波预测值之后所得差值的符号与第一滤波偏置值Δ1的符号相同时,将当前像素值加上第二滤波偏置值Δ2所得的值作为实际滤波值,其中,Δ2=δΔ1,Δ1表示所述第一滤波偏置值,-1<δ<1;或者,在当前像素值减去滤波预测值之后的差值的符号与第一滤波偏置值Δ1的符号相反时,将当前像素值加上第一滤波偏置值所得的值作为实际滤波值。这里的符号为正负号的符号,即符号可以为正,也可以为负。
当前像素值减去滤波预测值之后的差值的符号与第一滤波偏置值Δ1的符号相同时,使得当前滤波像素值加上第一滤波偏置值之后相对当前像素值更加远离滤波预测值。
当前像素值减去滤波预测值之后的差值的符号与第一滤波偏置值Δ1的符号相反时,可以直接通过上述符号关系来确定实际滤波值。也可以进一步地,继续判断当前像素值加上第一滤波偏置值之后相对当前像素值是否更加远离滤波预测值来确定实际滤波值,具体确定方法前面已有叙述,此处不再赘述。
应理解,根据当前像素值、第一滤波偏置值和滤波预测值确定待滤波像素的实际滤波值的方案都在本发明的保护范围之内,上面列举的几个具体实施方式并不对本发明的保护范围构成任何限定。
可选地,可以根据判断结果确定待滤波像素的实际滤波值。例如,当前像素值加上第一滤波偏置值Δ1之后相对当前像素值更加远离滤波预测值时,将当前像素值加上第二滤波偏置值Δ2所得的值作为实际滤波值,其中,Δ2=δΔ1,Δ1表示所述第一滤波偏置值,-1<δ<1。当前像素值加上第一滤波偏置值之后相对当前像素值更加接近滤波预测值时,将当前像素值加上第一滤波偏置值作为实际滤波值。
上述缩放系数δ值可以由编码端预先设定,也可以在编码端经过分析并决策得到。编码端可以通过下列方法决策缩放系数:例如,对一幅图像尝试在多个不同数值δi下进行去块滤波,i=1,2,...,I,I为大于1的正整数;从多个缩放系数中,选择编码性能最优的缩放系数作为决策结果,其中,编码性能最优可以为滤波图像中各滤波像素的均方差最小;然后将决策结果写入码流中,例如,写入条带头(slice header)、图像参数集(pictureparameter set,PPS)等语法结构体中。解码端可以通过解析码流中关于缩放系数的语法元素恢复出缩放系数,将该缩放系数用于解码端的去块滤波。
当待滤波像素的当前像素值加上滤波偏置值之后的数值超过图像信号的动态范围时,可以将该数据调整在动态范围之内。例如,对于宽为8比特位的图像,其动态范围一般为0到255。如果待滤波像素的当前像素值加上滤波偏置值之后的数值大于255或者小于0,那么需要将该竖直限定在0至255范围内。一般地,将结果小于0的数值钳置为0,将结果大于255的数值钳置为255。
应理解,本发明实施例中的待滤波像素相互独立,可以对块效应中的待滤波的一个像素单独处理,也可以对多个待滤波像素同时处理。对多个待滤波像素进行处理计算滤波偏置值或滤波预测值时,可以采用相同的公式,也可以采用不同的公式。
对块效应中的待滤波像素进行处理之后,可以提高信号波形的整体平滑性,增强图像的主观视觉效果和编码效率。
本发明实施例对待滤波像素的对滤波预测值的具体拟合曲线不做限定。下面举两个例子来说明。
图3是本发明一个实施例的基于线性预测得到的待滤波像素的滤波预测值的示意图。
在本发明的一个实施例中,可以利用像素P0的第二邻域中的两个像素,例如,P0两侧的像素P1和Q1计算P0的滤波预测值。计算公式如下:
r=round[(d1p1+d2p2)/d3] (7)
其中,d1、d2、d3为预设参数,且d3=d1+d2
利用P0两侧的像素P1和Q1拟合得到一条如图3所示的直线及其直线对应的参数值。然后通过直线对待滤波像素P0进行线性预测,得到P0对应的滤波预测值r。
图4是本发明另一实施例的基于函数拟合进行预测得到的待滤波像素的滤波预测值的示意图。
在本发明的一个实施例中,可以根据下列公式确定滤波预测值:
其中,t为待滤波像素到述图像块边界的距离,β和γ的值根据第二邻域中待滤波像素两侧的至少三个像素到图像块边界的距离及其至少三个像素对应的像素值确定。
具体地,可以通过第二邻域中的像素P2、P1、Q1、Q2到块边界的距离 以及每个像素对应的像素值对公式(8)中的函数进行拟合。例如,可以分别为-2.5、-1.5、1.5、2.5,可以用(-2.5,p2)、(-1.5,p1)、(1.5,q1)、(2.5,q2)这四组数据,求解一组α、β、γ,使得由公式(8)的拟合函数得到的预测值与p2、p1、q1、q2足够接近。
在得到最终的拟合预设参数之后,可以将待滤波像素到块边界的距离代入拟合得到的函数中,得到待滤波像素的像素预测值。例如,像素P0、Q0到块边界的距离分别为-0.5、0.5,那么,像素P0、Q0的像素预测值分别为S(-0.5)、S(0.5)。
上文中结合图2至图4,从去块效应滤波器的角度详细描述了根据本发明实施例的去块效应滤波方法,下面将结合图5和图6从去块效应滤波器的角度描述根据本发明实施例的去块效应滤波器的装置框图。
图5是本发明一个实施例的去块效应滤波器的框图。图5的去块效应滤波器包括第一确定单元11、预测单元12和第二确定单元13。
第一确定单元11用于根据图像块上的待滤波像素的当前像素值和待滤波像素的第一邻域中的像素的像素值确定待滤波像素的第一滤波偏置值,其中,待滤波像素为图像中存在块效应的图像块边界的一个像素。
预测单元12用于根据待滤波像素的第二邻域中的像素的像素值对待滤波像素的像素值进行预测,从而得到待滤波像素的滤波预测值。
第二确定单元13用于根据当前像素值、第一确定单元得到的第一滤波偏置值和预测单元得到的滤波预测值确定待滤波像素的实际滤波值。
本发明实施例利用待滤波像素的邻域像素的像素值来确定该待滤波像素的滤波偏置值和滤波预测值,并根据滤波偏置值、当前像素值以及滤波预测值来确定实际滤波值,这样可以提高滤波后的信号波形整体上的平滑性。
可选地,作为本发明的一个实施例,第二确定单元具体用于将当前像素值与第一滤波偏置值的和减去滤波预测值所得差值取绝对值,从而获得第一绝对值,以及将当前像素值减去滤波预测值所得差值取绝对值,从而获得第二绝对值,对第一绝对值与第二绝对值进行比较,并根据比较结果确定实际滤波值。
可选地,作为本发明的一个实施例,所述第二确定单元具体用于当第一绝对值大于所述第二绝对值时,将当前像素值加上第二滤波偏置值Δ2所得的值作为实际滤波值,其中,Δ2=δΔ1,Δ1表示所述第一滤波偏置值,-1<δ<1;或者,当第一绝对值小于或者等于第二绝对值时,将当前像素值加上所述第一滤波偏置值所得的值作为实际滤波值。
可选地,作为本发明的一个实施例,第二确定单元具体用于判断当前像素值减去滤波预测值之后所得差值的符号是否与第一滤波偏置值的符号相同,并根据判断结果确定实际滤波值。
可选地,作为本发明的一个实施例,第二确定单元具体用于当前像素值减去滤波预测值之后所得差值的符号与第一滤波偏置值Δ1的符号相同时,将当前像素值加上第二滤波偏置值Δ2所得的值作为为实际滤波值,其中,Δ2=δΔ1,Δ1表示所述第一滤波偏置值,-1<δ<1;或者,当前像素值减去滤波预测值之后所得差值的符号与第一滤波偏置值Δ1的符号相反时,将当前像素值加上第一滤波偏置值作为实际滤波值。
可选地,作为本发明的一个实施例,预测单元具体用于对第二邻域中待滤波像素两侧的至少两个像素的像素值进行加权求和得到待滤波像素的滤波预测值。
可选地,作为本发明的一个实施例,预测单元具体用于根据下列公式确定所述滤波预测值:r=round[(d1p1+d2p2+…+dNpN)/dN+1],其中,d1、d2、…dN、dN+1为预设参数,且dN+1=d1+d2+…+dN,p1、p2…pN为第二邻域中待滤波像素两侧的N个像素对应的像素值,N为大于或者等于2的整数。
可选地,作为本发明的一个实施例,预测单元具体用于确定拟合曲线,其中,拟合曲线包括拟合参数,根据拟合曲线对第二邻域中的至少两个像素进行拟合,得到拟合参数的值,并根据拟合参数的值和拟合曲线得到待滤波像素的滤波预测值。
可选地,作为本发明的一个实施例,拟合曲线为其中,t为待滤波像素到图像块边界的距离,β和γ为拟合参数,相应的,预测单元具体用于根据拟合曲线、第二邻域中待滤波像素两侧的至少三个像素到图像块的边界的距离及至少三个像素对应的像素值确定β和γ的值。
可选地,作为本发明的一个实施例,拟合曲线为其中,t为待滤波像素到所述图像块边界的距离,β和γ为拟合参数,相应的,预测单元具体用于根据拟合曲线、第二邻域中待滤波像素两侧的至少两个像素到图像块的边界的距离及至少两个像素对应的像素值确定β和γ的值。
可选地,作为本发明的一个实施例,拟合曲线为其中,t为待滤波像素到所述图像块边界的距离,β和γ为拟合参数,相应的,预测单元具体用于根据拟合曲线、第二邻域中待滤波像素两侧的至少两个像素到图像块的边界的距离及至少两个像素对应的像素值确定β和γ的值。
可选地,作为本发明的一个实施例,第一确定单元具体用于对待滤波像素的当前像素值和至少一个第一邻域像素的像素值进行加权求和,得到待滤波像素的滤波偏置值。
可选地,作为本发明的一个实施例,第一邻域和第二邻域相同。
根据本发明实施例的去块效应滤波器可对应于本发明实施例的方法中的去块效应滤波方法,并且,该去块效应滤波器中的各个单元/模块和上述其他操作和/或功能分别为了实现图2至4中所示去块效应滤波方法的相应流程,为了简洁,在此不再赘述。
图6是本发明一个实施例的去块效应滤波器的框图。
图6的去块效应滤波器20包括处理器21和存储器22。处理器21控制去块效应滤波器的操作,并可用于处理信号。存储器22可以包括只读存储器和随机存取存储器,并向处理器21提供指令和数据。去块效应滤波器20的各个组件通过总线系统23耦合在一起,其中总线系统23除包括数据总线之外,还包括电源总线、控制总线和状态信号总线。但是为了清楚说明起见,在图中将各种总线都标为总线系统23。
上述本发明实施例揭示的方法可以应用于处理器21中,或者由处理器21实现。在实现过程中,上述方法的各步骤可以通过处理器21中的硬件的集成逻辑电路或者软件形式的指令完成。处理器21可以是通用处理器、数字信号处理器、专用集成电路、现场可编程门阵列或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件,可以实现或者执行本发明实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者任何常规的处理器等。结合本发明实施例所公开的方法的步骤可以直接体现为硬件处理器执行完成,或者用处理器中的硬件及软件模块组合执行完成。软件模块可以位于随机存储器,闪存、只读存储器,可编程只读存储器或者电可擦写可编程存储器、寄存器等本领域成熟的存储介质中。该存储介质位于存储器22,处理器21读取存储器22中的信息,结合其硬件完成上述方法的步骤。
具体地,处理器21可以根据图像块上的待滤波像素的当前像素值待滤波像素的第一邻域中的像素的像素值,确定待滤波像素的第一滤波偏置值,待滤波像素为图像中存在块效应的图像块边界的一个像素。
处理器21还可以根据待滤波像素的第二邻域中的像素的像素值对待滤波像素的像素值进行预测得到待滤波像素的滤波预测值。
处理器21还可以根据当前像素值、第一确定单元得到的第一滤波偏置值和预测单元得到的滤波预测值确定待滤波像素的实际滤波值。
本发明实施例利用待滤波像素的邻域像素的像素值来确定该待滤波像素的滤波偏置值和滤波预测值,并根据滤波偏置值、当前像素值以及滤波预测值来确定实际滤波值,这样可以提高滤波后的信号波形整体上的平滑性。
可选地,作为一个实施例,存储器22存储使得处理器21执行如下操作的指令:将当前像素值与所述第一滤波偏置值的和减去滤波预测值所得差值取绝对值,从而获得第一绝对值,以及将当前像素值减去滤波预测值所得差值取绝对值,从而获得第二绝对值,对第一绝对值与第二绝对值进行比较,并根据比较结果确定实际滤波值。
可选地,作为一个实施例,处理器21还可以用于当第一绝对值大于所述第二绝对值时,将当前像素值加上第二滤波偏置值Δ2所得的值作为实际滤波值,其中,Δ2=δΔ1,Δ1表示所述第一滤波偏置值,-1<δ<1;或者,当第一绝对值小于或者等于第二绝对值时,将当前像素值加上所述第一滤波偏置值所得的值作为实际滤波值。
可选地,作为一个实施例,处理器21还可以用于判断当前像素值减去滤波预测值之后所得差值的符号是否与第一滤波偏置值的符号相同,并根据判断结果确定实际滤波值。
可选地,作为一个实施例,处理器21还可以用于当前像素值减去滤波预测值之后所得差值的符号与第一滤波偏置值Δ1的符号相同时,将当前像素值加上第二滤波偏置值Δ2所得的值作为实际滤波值,其中,Δ2=δΔ1,Δ1表示所述第一滤波偏置值,-1<δ<1;或者,当前像素值减去滤波预测值之后所得差值的符号与第一滤波偏置值Δ1的符号相反时,将当前像素值加上第一滤波偏置值所得的值作为实际滤波值。
可选地,作为一个实施例,处理器21还可以用于对第二邻域中待滤波像素两侧的至少两个像素的像素值进行加权求和,得到待滤波像素的滤波预测值。
可选地,作为一个实施例,处理器21还可以用于根据下列公式确定滤波预测值:
r=round[(d1p1+d2p2+…+dNpN)/dN+1],
其中,d1、d2、…dN、dN+1为预设参数,且dN+1=d1+d2+…+dN,p1、p2…pN为第二邻域中所述待滤波像素两侧的N个像素对应的像素值,N为大于或者等于2的整数。
可选地,作为一个实施例,处理器21还可以用于确定拟合曲线,其中,拟合曲线包括拟合参数,根据拟合曲线对第二邻域中的至少两个像素进行拟合,得到拟合参数的值,并根据拟合参数的值和拟合曲线得到待滤波像素的滤波预测值。
可选地,作为一个实施例,拟合曲线为:
其中,t为待滤波像素到所述图像块边界的距离,β和γ为拟合参数,相应的,预测单元具体用于根据拟合曲线、第二邻域中待滤波像素两侧的至少三个像素到图像块的边界的距离及至少三个像素对应的像素值确定β和γ的值。
可选地,作为一个实施例,拟合曲线为:
其中,t为待滤波像素到所述图像块边界的距离,β和γ为拟合参数,相应的,预测单元具体用于根据拟合曲线、第二邻域中待滤波像素两侧的至少两个像素到图像块的边界的距离及至少两个像素对应的像素值确定β和γ的值。
可选地,作为一个实施例,拟合曲线为:
其中,t为待滤波像素到所述图像块边界的距离,β和γ为拟合参数,相应的,预测单元具体用于根据拟合曲线、第二邻域中待滤波像素两侧的至少两个像素到图像块的边界的距离及至少两个像素对应的像素值确定β和γ的值。
可选地,作为一个实施例,处理器21还可以用于对待滤波像素的当前像素值和至少一个所述第一邻域像素的像素值进行加权求和,得到待滤波像素的滤波偏置值。
可选地,作为一个实施例,第一邻域和第二邻域相同。
根据本发明实施例的去块效应滤波器可对应于本发明实施例的方法中的去块效应滤波方法,并且,该去块效应滤波器中的各个单元/模块和上述其他操作和/或功能分别为了实现图2至4中所示去块效应滤波方法的相应流程,为了简洁,在此不再赘述。
应理解,说明书通篇中提到的“一个实施例”或“一实施例”意味着与实施例有关的特定特征、结构或特性包括在本发明的至少一个实施例中。因此,在整个说明书各处出现的“在一个实施例中”或“在一实施例中”未必一定指相同的实施例。此外,这些特定的特征、结构或特性可以任意适合的方式结合在一个或多个实施例中。
应理解,在本发明的各种实施例中,上述各过程的序号的大小并不意味着执行顺序的先后,各过程的执行顺序应以其功能和内在逻辑确定,而不应对本发明实施例的实施过程构成任何限定。
应理解,在本发明实施例中,“与A相应的B”表示B与A相关联,根据A可以确定B。但还应理解,根据A确定B并不意味着仅仅根据A确定B,还可以根据A和/或其它信息确定B。
在本申请所提供的几个实施例中,应该理解到,所揭露的系统、装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。
本领域普通技术人员可以意识到,结合本文中所公开的实施例中描述的各方法步骤和单元,能够以电子硬件、计算机软件或者二者的结合来实现,为了清楚地说明硬件和软件的可互换性,在上述说明中已经按照功能一般性地描述了各实施例的步骤及组成。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。本领域普通技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本发明的范围。
结合本文中所公开的实施例描述的方法或步骤可以用硬件、处理器执行的软件程序,或者二者的结合来实施。软件程序可以置于随机存储器(RAM)、内存、只读存储器(ROM)、电可编程ROM、电可擦除可编程ROM、寄存器、硬盘、可移动磁盘、CD-ROM、或技术领域内所公知的任意其它形式的存储介质中。
尽管通过参考附图并结合优选实施例的方式对本发明进行了详细描述,但本发明并不限于此。在不脱离本发明的精神和实质的前提下,本领域普通技术人员可以对本发明的实施例进行各种等效的修改或替换,而这些修改或替换都应在本发明的涵盖范围内。

Claims (22)

1.一种去块效应滤波方法,其特征在于,所述方法包括:
根据图像块上的待滤波像素的当前像素值和所述待滤波像素的第一邻域中的像素的像素值,确定所述待滤波像素的第一滤波偏置值;
根据所述待滤波像素的第二邻域中的像素的像素值对所述待滤波像素的像素值进行预测,从而得到所述待滤波像素的滤波预测值;
根据所述当前像素值、所述第一滤波偏置值和所述滤波预测值确定所述待滤波像素的实际滤波值;
所述根据所述当前像素值、所述第一滤波偏置值和所述滤波预测值确定所述待滤波像素的实际滤波值包括:
将所述当前像素值与所述第一滤波偏置值的和减去所述滤波预测值所得差值取绝对值,从而获得第一绝对值,以及将所述当前像素值减去所述滤波预测值所得差值取绝对值,从而获得第二绝对值,对所述第一绝对值与所述第二绝对值进行比较;根据比较结果确定所述实际滤波值;或者,
所述根据所述当前像素值、所述第一滤波偏置值和所述滤波预测值确定所述待滤波像素的实际滤波值包括:
判断所述当前像素值减去所述滤波预测值所得差值的符号,是否与所述第一滤波偏置值的符号相同;
根据判断结果确定所述实际滤波值。
2.如权利要求1所述的方法,其特征在于,所述根据比较结果确定所述实际滤波值包括:
当所述第一绝对值大于所述第二绝对值时,将所述当前像素值加上第二滤波偏置值Δ2所得的值作为所述实际滤波值,其中,Δ2=δΔ1,其中,Δ1表示所述第一滤波偏置值,-1<δ<1;或者,
当所述第一绝对值小于或者等于所述第二绝对值时,将所述当前像素值加上所述第一滤波偏置值所得的值作为所述实际滤波值。
3.如权利要求1所述的方法,其特征在于,所述根据判断结果确定所述实际滤波值包括:
当所述当前像素值减去所述滤波预测值所得差值的符号与所述第一滤波偏置值Δ1的符号相同时,将所述当前像素值加上第二滤波偏置值Δ2所得的值作为所述实际滤波值,其中,Δ2=δΔ1,Δ1表示所述第一滤波偏置值,-1<δ<1;或者,
当所述当前像素值减去所述滤波预测值之后所得差值的符号与所述第一滤波偏置值Δ1的符号相反时,将所述当前像素值加上所述第一滤波偏置值所得的值作为所述实际滤波值。
4.如权利要求1-3中任一项所述的方法,其特征在于,所述根据所述待滤波像素的第二邻域中的像素的像素值对所述待滤波像素的像素值进行预测,从而得到所述待滤波像素的滤波预测值包括:
对所述第二邻域中所述待滤波像素两侧的至少两个像素的像素值进行加权求和,从而得到所述待滤波像素的滤波预测值。
5.如权利要求4所述的方法,其特征在于,所述对所述第二邻域中所述待滤波像素两侧的至少两个像素的像素值进行加权求和,从而得到所述待滤波像素的滤波预测值包括:
根据以下公式确定所述滤波预测值:
r=round[(d1p1+d2p2+…+dNpN)/dN+1],
其中,d1、d2、…dN、dN+1为预设参数,且dN+1=d1+d2+…+dN,p1、p2…pN为所述第二邻域中所述待滤波像素两侧的N个像素分别对应的N个像素值,N为大于或者等于2的整数。
6.如权利要求1-3中任一项所述的方法,其特征在于,所述根据所述待滤波像素的第二邻域中像素的像素值对所述待滤波像素的像素值进行预测,从而得到所述待滤波像素的滤波预测值包括:
确定拟合曲线,所述拟合曲线包括拟合参数;
根据所述拟合曲线对所述第二邻域中的至少两个像素进行拟合,得到所述拟合参数的值;
根据所述拟合参数的值和拟合曲线得到所述待滤波像素的滤波预测值。
7.如权利要求6所述的方法,其特征在于,所述拟合曲线为:
t为所述待滤波像素到所述图像块的边界的距离,β和γ为所述拟合参数;
相应的,所述根据所述拟合曲线对所述第二邻域中的至少两个像素进行拟合,得到所述拟合参数的值包括:
根据所述拟合曲线、所述第二邻域中所述待滤波像素两侧的至少三个像素到所述图像块的边界的距离及所述至少三个像素对应的像素值确定β和γ的值。
8.如权利要求6所述的方法,其特征在于,所述拟合曲线为:
t为所述待滤波像素到所述图像块的边界的距离,β和γ为所述拟合参数;
相应的,所述根据所述拟合曲线对所述第二邻域中的至少两个像素进行拟合,得到所述拟合参数的值包括:
根据所述拟合曲线、所述第二邻域中所述待滤波像素两侧的至少两个像素到所述图像块的边界的距离及所述至少两个像素对应的像素值确定β和γ的值。
9.如权利要求6所述的方法,其特征在于,所述拟合曲线为:
t为所述待滤波像素到所述图像块的边界的距离,β和γ为所述拟合参数;
相应的,所述根据所述拟合曲线对所述第二邻域中的至少两个像素进行拟合,得到所述拟合参数的值包括:
根据所述拟合曲线、所述第二邻域中所述待滤波像素两侧的至少两个像素到所述图像块的边界的距离及所述至少两个像素对应的像素值确定β和γ的值。
10.如权利要求1-3中任一项所述的方法,其特征在于,所述根据待滤波像素的当前像素值和所述待滤波像素的第一邻域中的像素的像素值,确定所述待滤波像素的第一滤波偏置值包括:
对所述待滤波像素的当前像素值和至少一个所述第一邻域中的像素的像素值进行加权求和,从而得到所述待滤波像素的滤波偏置值。
11.如权利要求1-3中任一项所述的方法,其特征在于,所述第一邻域和所述第二邻域相同。
12.一种去块效应滤波器,其特征在于,包括:
第一确定单元,用于根据图像块上的待滤波像素的当前像素值和所述待滤波像素的第一邻域中的像素的像素值,确定所述待滤波像素的第一滤波偏置值;
预测单元,用于根据所述待滤波像素的第二邻域中的像素的像素值对所述待滤波像素的像素值进行预测,从而得到所述待滤波像素的滤波预测值;
第二确定单元,用于将所述当前像素值与所述第一滤波偏置值的和减去所述滤波预测值所得差值取绝对值,从而获得第一绝对值,以及将所述当前像素值减去所述滤波预测值所得差值取绝对值,从而获得第二绝对值,对所述第一绝对值与所述第二绝对值进行比较,并根据比较结果确定实际滤波值;或者,第二确定单元,用于判断所述当前像素值减去所述滤波预测值之后所得差值的符号是否与所述第一滤波偏置值的符号相同,并根据判断结果确定实际滤波值。
13.如权利要求12所述的去块效应滤波器,其特征在于,所述第二确定单元具体用于:当所述第一绝对值大于所述第二绝对值时,将所述当前像素值加上第二滤波偏置值Δ2所得的值作为所述实际滤波值,其中,Δ2=δΔ1,Δ1表示所述第一滤波偏置值,-1<δ<1;或者,当所述第一绝对值小于或者等于所述第二绝对值时,将所述当前像素值加上所述第一滤波偏置值所得的值作为所述实际滤波值。
14.如权利要求12所述的去块效应滤波器,其特征在于,所述第二确定单元具体用于:当所述当前像素值减去所述滤波预测值之后所得差值的符号与所述第一滤波偏置值Δ1的符号相同时,将所述当前像素值加上第二滤波偏置值Δ2所得的值作为所述实际滤波值,其中,Δ2=δΔ1,Δ1表示所述第一滤波偏置值,-1<δ<1;或者,当所述当前像素值减去所述滤波预测值之后所得差值的符号与所述第一滤波偏置值Δ1的符号相反时,将所述当前像素值加上所述第一滤波偏置值所得的值作为所述实际滤波值。
15.如权利要求12-14中任一项所述的去块效应滤波器,其特征在于,所述预测单元具体用于对所述第二邻域中所述待滤波像素两侧的至少两个像素的像素值进行加权求和,从而得到所述待滤波像素的滤波预测值。
16.如权利要求15所述的去块效应滤波器,其特征在于,所述预测单元具体用于根据以下公式确定所述滤波预测值:
r=round[(d1p1+d2p2+…+dNpN)/dN+1],
其中,d1、d2、…dN、dN+1为预设参数,且dN+1=d1+d2+…+dN,p1、p2…pN为所述第二邻域中所述待滤波像素两侧的N个像素分别对应的N个像素值,N为大于或者等于2的整数。
17.如权利要求12-14中任一项所述的去块效应滤波器,其特征在于,所述预测单元具体用于确定拟合曲线,所述拟合曲线包括拟合参数,根据所述拟合曲线对所述第二邻域中的至少两个像素进行拟合,得到所述拟合参数的值,并根据所述拟合参数的值和拟合曲线得到所述待滤波像素的滤波预测值。
18.如权利要求17所述的去块效应滤波器,其特征在于,所述拟合曲线为:
t为所述待滤波像素到所述图像块的边界的距离,β和γ为所述拟合参数;
相应的,所述预测单元具体用于根据所述拟合曲线、所述第二邻域中所述待滤波像素两侧的至少三个像素到所述图像块的边界的距离及所述至少三个像素对应的像素值确定β和γ的值。
19.如权利要求17所述的去块效应滤波器,其特征在于,所述拟合曲线为:
t为所述待滤波像素到所述图像块的边界的距离,β和γ为所述拟合参数;
相应的,所述预测单元具体用于根据所述拟合曲线、所述第二邻域中所述待滤波像素两侧的至少两个像素到所述图像块的边界的距离及所述至少两个像素对应的像素值确定β和γ的值。
20.如权利要求17所述的去块效应滤波器,其特征在于,所述拟合曲线为:
t为所述待滤波像素到所述图像块的边界的距离,β和γ为所述拟合参数;
相应的,所述预测单元具体用于根据所述拟合曲线、所述第二邻域中所述待滤波像素两侧的至少两个像素到所述图像块的边界的距离及所述至少两个像素对应的像素值确定β和γ的值。
21.如权利要求12-14中任一项所述的去块效应滤波器,其特征在于,所述第一确定单元具体用于对所述待滤波像素的当前像素值和至少一个所述第一邻域像素的像素值进行加权求和,得到所述待滤波像素的滤波偏置值。
22.如权利要求12-14中任一项所述的去块效应滤波器,其特征在于,所述第一邻域和所述第二邻域相同。
CN201510320826.0A 2015-06-11 2015-06-11 去块效应滤波方法和去块效应滤波器 Active CN106303550B (zh)

Priority Applications (5)

Application Number Priority Date Filing Date Title
CN201510320826.0A CN106303550B (zh) 2015-06-11 2015-06-11 去块效应滤波方法和去块效应滤波器
KR1020187001044A KR102094247B1 (ko) 2015-06-11 2016-03-02 디블로킹 필터링 방법 및 디블로킹 필터
EP16806532.4A EP3300361B1 (en) 2015-06-11 2016-03-02 Deblocking method and deblocking filter
PCT/CN2016/075311 WO2016197634A1 (zh) 2015-06-11 2016-03-02 去块效应滤波方法和去块效应滤波器
US15/837,594 US10555007B2 (en) 2015-06-11 2017-12-11 Deblocking filtering method and deblocking filter

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510320826.0A CN106303550B (zh) 2015-06-11 2015-06-11 去块效应滤波方法和去块效应滤波器

Publications (2)

Publication Number Publication Date
CN106303550A CN106303550A (zh) 2017-01-04
CN106303550B true CN106303550B (zh) 2019-06-21

Family

ID=57504456

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510320826.0A Active CN106303550B (zh) 2015-06-11 2015-06-11 去块效应滤波方法和去块效应滤波器

Country Status (5)

Country Link
US (1) US10555007B2 (zh)
EP (1) EP3300361B1 (zh)
KR (1) KR102094247B1 (zh)
CN (1) CN106303550B (zh)
WO (1) WO2016197634A1 (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11457239B2 (en) * 2017-11-09 2022-09-27 Google Llc Block artefact reduction
CN107623859B (zh) * 2017-11-27 2021-11-30 珠海亿智电子科技有限公司 一种低码率下jpeg编码的去块效应方法
MX2020006500A (es) * 2017-12-29 2020-09-17 Ericsson Telefon Ab L M Metodos que proporcionan codificacion y/o decodificacion de video usando valores de referencia y dispositivos relacionados.
WO2020073904A1 (en) * 2018-10-08 2020-04-16 Huawei Technologies Co., Ltd. An image processing device and method for performing deblocking

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1134091A (zh) * 1995-02-28 1996-10-23 大宇电子株式会社 视频信号解码装置中所使用的后处理方法
WO2014110240A1 (en) * 2013-01-09 2014-07-17 Qualcomm Incorporated Blockiness metric for large hevc block artifacts

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5530198B2 (ja) * 2009-11-20 2014-06-25 パナソニック株式会社 画像符号化方法、復号化方法、装置
US8526509B2 (en) 2011-01-14 2013-09-03 Telefonaktiebolaget L M Ericsson (Publ) Deblocking filtering
US9432700B2 (en) 2011-09-27 2016-08-30 Broadcom Corporation Adaptive loop filtering in accordance with video coding
US9484952B2 (en) * 2011-11-03 2016-11-01 Qualcomm Incorporated Context state and probability initialization for context adaptive entropy coding
US10027988B2 (en) 2012-09-20 2018-07-17 Sony Corporation Image processing device and method
CN104219520B (zh) * 2014-09-10 2018-11-20 华为技术有限公司 确定图像补偿模式的方法和装置

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1134091A (zh) * 1995-02-28 1996-10-23 大宇电子株式会社 视频信号解码装置中所使用的后处理方法
WO2014110240A1 (en) * 2013-01-09 2014-07-17 Qualcomm Incorporated Blockiness metric for large hevc block artifacts

Also Published As

Publication number Publication date
US20180103274A1 (en) 2018-04-12
US10555007B2 (en) 2020-02-04
KR102094247B1 (ko) 2020-03-27
EP3300361A1 (en) 2018-03-28
KR20180017159A (ko) 2018-02-20
EP3300361A4 (en) 2018-03-28
EP3300361B1 (en) 2022-07-27
WO2016197634A1 (zh) 2016-12-15
CN106303550A (zh) 2017-01-04

Similar Documents

Publication Publication Date Title
KR100672592B1 (ko) 디스플레이 장치의 영상 보상장치 및 보상방법
CN110036637B (zh) 去噪声化已重构图像的方法及装置
KR102359415B1 (ko) 비디오 코딩을 위한 인터 예측 장치 및 방법을 위한 보간 필터
CN106303550B (zh) 去块效应滤波方法和去块效应滤波器
US20180160138A1 (en) Method and device for performing deblocking filtering
CN107027040B9 (zh) 一种去除块效应的滤波方法及装置
CN109963151B (zh) 编码单元划分确定方法及装置、终端设备及可读存储介质
Lin et al. Residual in residual based convolutional neural network in-loop filter for AVS3
CN109565592B (zh) 一种使用基于分割的视频编码块划分的视频编码设备和方法
KR20200000543A (ko) 지도 학습을 이용한 영상 개선 방법 및 장치
CN115834882A (zh) 一种帧内预测方法、装置、电子设备及存储介质
JPH11187400A (ja) 歪除去方法および歪除去フィルタ
US11202082B2 (en) Image processing apparatus and method
JP6171584B2 (ja) 動画像符号化装置、動画像符号化方法、および動画像符号化プログラム
JP7387878B2 (ja) ビデオまたは画像コーディングにおけるデブロッキングフィルタ選択
JP7386883B2 (ja) サブペル動きベクトルしきい値を使用するデブロッキング
Li et al. Complexity Reduction of an Adaptive Loop Filter Based on Local Homogeneity
CA3093048A1 (en) Inter prediction apparatus and method for video coding
CN113170120A (zh) 去块或去振铃滤波器以及应用和改变去块或去振铃滤波器的强度的编码器、解码器和方法
CN108322748A (zh) 一种编码单元的层次决定方法及装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant