CN112752104B - 图像补偿方法、装置、存储介质及电子设备 - Google Patents

图像补偿方法、装置、存储介质及电子设备 Download PDF

Info

Publication number
CN112752104B
CN112752104B CN202110364581.7A CN202110364581A CN112752104B CN 112752104 B CN112752104 B CN 112752104B CN 202110364581 A CN202110364581 A CN 202110364581A CN 112752104 B CN112752104 B CN 112752104B
Authority
CN
China
Prior art keywords
pixel
image
maximum coding
coding unit
compensated
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202110364581.7A
Other languages
English (en)
Other versions
CN112752104A (zh
Inventor
王克彦
杨国全
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhejiang Huachuang Video Signal Technology Co Ltd
Original Assignee
Zhejiang Huachuang Video Signal Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhejiang Huachuang Video Signal Technology Co Ltd filed Critical Zhejiang Huachuang Video Signal Technology Co Ltd
Priority to CN202110364581.7A priority Critical patent/CN112752104B/zh
Publication of CN112752104A publication Critical patent/CN112752104A/zh
Application granted granted Critical
Publication of CN112752104B publication Critical patent/CN112752104B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146Data rate or code amount at the encoder output
    • H04N19/147Data rate or code amount at the encoder output according to rate distortion criteria
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/002D [Two Dimensional] image generation
    • G06T11/40Filling a planar surface by adding surface attributes, e.g. colour or texture
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/40Analysis of texture
    • G06T7/41Analysis of texture based on statistical description of texture
    • G06T7/44Analysis of texture based on statistical description of texture using image operators, e.g. filters, edge density metrics or local histograms
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T9/00Image coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/182Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a pixel
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/60Noise processing, e.g. detecting, correcting, reducing or removing noise
    • H04N25/68Noise processing, e.g. detecting, correcting, reducing or removing noise applied to defects
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10016Video; Image sequence

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Probability & Statistics with Applications (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本公开涉及一种图像补偿方法、装置、存储介质及电子设备,所述方法包括:基于待补偿图像中的像素分类补偿区域内的像素点信息,对像素点进行分类;针对每一像素分类,计算对应于该像素分类的候选补偿值;基于每一候选补偿值调整待补偿图像中的目标最大编码单元的滤波开启状态;将最新确定的开启滤波的目标最大编码单元作为新的像素分类补偿范围,循环执行从对每一像素点进行分类至基于每一候选补偿值调整待补偿图像中的目标最大编码单元的滤波开启状态的步骤,直至满足预设条件;将最后一次执行得到的开启滤波的目标最大编码单元作为目标像素分类补偿区域;将最后一次执行得到的每一像素分类的候选补偿值作为该像素分类的目标补偿值。

Description

图像补偿方法、装置、存储介质及电子设备
技术领域
本公开涉及图像处理技术领域,具体地,涉及一种图像补偿方法、装置、存储介质及电子设备。
背景技术
在视频编解码场景中,由于原始视频图像的数据量比较大,因此通常会对原始视频图像数据执行预测、变换、量化、重建、滤波等多种数据处理过程。其中,相比原始视频数据,对原始视频数据执行数据处理过程后得到视频数据可能存在失真,简称为失真视频数据。
由于失真视频数据可能导致视觉障碍,因此在相关技术中,可以通过对失真视频数据进行补偿,从而提升图像质量。然而,相关技术在补偿过程中所采用的补偿值还可能存在着较大的误差,因而可能降低图像补偿的效果。
发明内容
本公开的目的是提供一种图像补偿方法、装置、存储介质及电子设备,以解决上述相关技术问题。
为了实现上述目的,根据本公开实施例的第一方面,提供一种图像补偿方法,包括:
基于待补偿图像中的像素分类补偿区域内的像素点的信息,对每一所述像素点进行分类,其中,所述待补偿图像包括多个最大编码单元,所述像素分类补偿区域包括多个开启滤波的最大编码单元;
针对每一像素分类,计算对应于该像素分类的候选补偿值;
基于每一所述候选补偿值调整所述待补偿图像中的目标最大编码单元的滤波开启状态;
将最新确定的所述目标最大编码单元中的开启滤波的目标最大编码单元作为新的像素分类补偿范围,循环执行从所述对每一所述像素点进行分类至所述基于每一所述候选补偿值调整所述待补偿图像中的目标最大编码单元的滤波开启状态的步骤,直至满足预设条件;
将最后一次执行所述步骤得到的开启滤波的目标最大编码单元作为目标像素分类补偿区域;
将最后一次执行所述步骤得到的每一像素分类的候选补偿值作为该像素分类的目标补偿值,所述目标补偿值用于对该像素分类在所述目标像素分类补偿区域中所对应的像素点进行补偿。
可选地,所述预设条件包括:
循环执行所述步骤的次数达到预设阈值;和/或,
当前循环计算得到的候选补偿值所对应的率失真代价值大于前一次循环计算得到的候选补偿值所对应的率失真代价值。
可选地,所述目标最大编码单元包括所述待补偿图像所包括的每一最大编码单元。
可选地,所述基于每一所述候选补偿值调整所述待补偿图像中的目标最大编码单元的滤波开启状态之前,还包括:
将所述像素分类补偿区域所包括的多个开启滤波的最大编码单元作为所述目标最大编码单元。
可选地,所述基于待补偿图像中的像素分类补偿区域内的像素点的信息,对每一所述像素点进行分类之前,所述方法还包括:
计算所述待补偿图像的纹理信息;
计算所述待补偿图像所包括的各最大编码单元所对应的纹理信息;
基于所述待补偿图像的纹理信息与各所述最大编码单元所对应的纹理信息调整各所述最大编码单元的滤波开启状态;
将开启滤波的最大编码单元作为所述像素分类补偿区域。
可选地,所述方法还包括:
针对所述待补偿图像所包括的每一像素点,基于边缘检测算子计算该像素点在水平方向上的像素值分量以及该像素点在垂直方向上的像素值分量;
通过该像素点在水平方向上的像素值分量以及该像素点在垂直方向上的像素值分量计算该像素点的纹理信息度量值;
所述计算所述待补偿图像的纹理信息,包括:
计算所述待补偿图像所包括的每一像素点的纹理信息度量值的和值作为所述待补偿图像的纹理信息度量值;
所述计算所述待补偿图像所包括的各最大编码单元所对应的纹理信息,包括:
针对每一最大编码单元,计算该最大编码单元所包括的每一像素点的纹理信息度量值的和值作为该最大编码单元的纹理信息度量值;
所述基于所述待补偿图像的纹理信息与各所述最大编码单元所对应的纹理信息调整各所述最大编码单元的滤波开启状态,包括:
将纹理信息度量值大于待补偿图像的纹理信息度量值的最大编码单元调整为开启滤波状态。
可选地,所述边缘检测算子为Sobel算子,所述通过该像素点在水平方向上的像素值分量以及该像素点在垂直方向上的像素值分量计算该像素点的纹理信息度量值,包括:
通过如下计算式计算所述像素点的纹理信息度量值:
d(x, y) = |Sobel_x(x, y)| + |Sobel_y(x, y)|;
或者,通过如下计算式计算所述像素点的纹理信息度量值:
d(x, y) = sqrt( (Sobel_x(x, y))2 + (Sobel_y(x, y))2);
其中,d(x, y)为像素点(x, y)的纹理信息度量值,Sobel_x(x, y)为基于Sobel算子计算得到的所述像素点(x, y)在水平方向上的像素值分量,Sobel_y(x, y) 为基于Sobel算子计算得到的所述像素点(x, y)在垂直方向上的像素值分量,sqrt()为返回正的平方根的函数。
可选地,所述方法还包括:
通过该像素点在水平方向上的像素值分量以及该像素点在垂直方向上的像素值分量计算该像素点的纹理方向度量值;
所述计算所述待补偿图像的纹理信息,包括:
计算所述待补偿图像所包括的每一像素点的纹理方向度量值的和值;
根据该和值与所述待补偿图像所包括的像素点的数量值的比值确定所述待补偿图像的纹理方向度量值;
所述计算所述待补偿图像所包括的各最大编码单元所对应的纹理信息,包括:
针对每一最大编码单元,计算该最大编码单元所包括的每一像素点的纹理方向度量值的和值;
根据该和值与该最大编码单元所包括的像素点的数量值的比值确定该最大编码单元的纹理方向度量值;
所述基于所述待补偿图像的纹理信息与各所述最大编码单元所对应的纹理信息调整各所述最大编码单元的滤波开启状态,包括:
将纹理信息度量值大于待补偿图像的纹理信息度量值、且纹理方向度量值与待补偿图像的纹理信息度量值相同的最大编码单元设置为开启滤波状态。
根据本公开实施例的第二方面,提供一种图像补偿装置,包括:
像素点分类模块,用于基于待补偿图像中的像素分类补偿区域内的像素点的信息,对每一所述像素点进行分类,其中,所述待补偿图像包括多个最大编码单元,所述像素分类补偿区域包括多个开启滤波的最大编码单元;
第一计算模块,用于针对每一像素分类,计算对应于该像素分类的候选补偿值;
第一调整模块,用于基于每一所述候选补偿值调整所述待补偿图像中的目标最大编码单元的滤波开启状态;
第一执行模块,用于将最新确定的所述目标最大编码单元中的开启滤波的目标最大编码单元作为新的像素分类补偿范围,循环执行从所述对每一所述像素点进行分类至所述基于每一所述候选补偿值调整所述待补偿图像中的目标最大编码单元的滤波开启状态的步骤,直至满足预设条件;
第二执行模块,用于将最后一次执行所述步骤得到的开启滤波的目标最大编码单元作为目标像素分类补偿区域;
第三执行模块,用于将最后一次执行所述步骤得到的每一像素分类的候选补偿值作为该像素分类的目标补偿值,所述目标补偿值用于对该像素分类在所述目标像素分类补偿区域中所对应的像素点进行补偿。
可选地,所述预设条件包括:
循环执行所述步骤的次数达到预设阈值;和/或,
当前循环计算得到的候选补偿值所对应的率失真代价值大于前一次循环计算得到的候选补偿值所对应的率失真代价值。
可选地,所述目标最大编码单元包括所述待补偿图像所包括的每一最大编码单元。
可选地,所述装置还包括:
第四执行模块,用于在所述第一调整模块基于每一所述候选补偿值调整所述待补偿图像中的目标最大编码单元的滤波开启状态之前,将所述像素分类补偿区域所包括的多个开启滤波的最大编码单元作为所述目标最大编码单元。
可选地,所述装置还包括:
第二计算模块,用于在所述像素点分类模块基于待补偿图像中的像素分类补偿区域内的像素点的信息,对每一所述像素点进行分类之前,计算所述待补偿图像的纹理信息;
第三计算模块,用于计算所述待补偿图像所包括的各最大编码单元所对应的纹理信息;
第二调整模块,用于基于所述待补偿图像的纹理信息与各所述最大编码单元所对应的纹理信息调整各所述最大编码单元的滤波开启状态;
第五执行模块,用于将开启滤波的最大编码单元作为所述像素分类补偿区域。
可选地,所述装置还包括:
第四计算模块,用于针对所述待补偿图像所包括的每一像素点,基于边缘检测算子计算该像素点在水平方向上的像素值分量以及该像素点在垂直方向上的像素值分量;
第五计算模块,用于通过该像素点在水平方向上的像素值分量以及该像素点在垂直方向上的像素值分量计算该像素点的纹理信息度量值;
所述第二计算模块,包括:
第一计算子模块,用于计算所述待补偿图像所包括的每一像素点的纹理信息度量值的和值作为所述待补偿图像的纹理信息度量值;
所述第三计算模块,包括:
第二计算子模块,用于针对每一最大编码单元,计算该最大编码单元所包括的每一像素点的纹理信息度量值的和值作为该最大编码单元的纹理信息度量值;
所述第二调整模块,包括:
第一执行子模块,用于将纹理信息度量值大于待补偿图像的纹理信息度量值的最大编码单元调整为开启滤波状态。
可选地,所述边缘检测算子为Sobel算子,所述第五计算模块用于:
通过如下计算式计算所述像素点的纹理信息度量值:
d(x, y) = |Sobel_x(x, y)| + |Sobel_y(x, y)|;
或者,通过如下计算式计算所述像素点的纹理信息度量值:
d(x, y) = sqrt( (Sobel_x(x, y))2 + (Sobel_y(x, y))2);
其中,d(x, y)为像素点(x, y)的纹理信息度量值,Sobel_x(x, y)为基于Sobel算子计算得到的所述像素点(x, y)在水平方向上的像素值分量,Sobel_y(x, y) 为基于Sobel算子计算得到的所述像素点(x, y)在垂直方向上的像素值分量,sqrt()为返回正的平方根的函数。
可选地,所述装置还包括:
第六计算模块,用于通过该像素点在水平方向上的像素值分量以及该像素点在垂直方向上的像素值分量计算该像素点的纹理方向度量值;
所述第二计算模块,包括:
第三计算子模块,用于计算所述待补偿图像所包括的每一像素点的纹理方向度量值的和值;
第一确定子模块,用于根据该和值与所述待补偿图像所包括的像素点的数量值的比值确定所述待补偿图像的纹理方向度量值;
所述第三计算模块,包括:
第四计算子模块,用于针对每一最大编码单元,计算该最大编码单元所包括的每一像素点的纹理方向度量值的和值;
第二确定子模块,用于根据该和值与该最大编码单元所包括的像素点的数量值的比值确定该最大编码单元的纹理方向度量值;
所述第二调整模块,包括:
第二执行子模块,用于将纹理信息度量值大于待补偿图像的纹理信息度量值、且纹理方向度量值与待补偿图像的纹理信息度量值相同的最大编码单元设置为开启滤波状态。
根据本公开实施例的第三方面,提供一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现上述第一方面中任一项所述方法的步骤。
根据本公开实施例的第四方面,提供一种电子设备,包括:
存储器,其上存储有计算机程序;
处理器,用于执行所述存储器中的所述计算机程序,以实现上述第一方面中任一项所述方法的步骤。
采用上述技术方案,在针对待补偿图像的各类像素点计算出候选补偿值,并根据候选补偿值重新确定各最大编码单元的滤波开启状态之后,还可以基于各最大编码单元的滤波开启状态循环执行计算各类像素点的候选补偿值的过程,直至满足预设条件。例如,可以基于所述补偿值计算最大编码单元的率失真代价值,在当前循环计算得到的候选补偿值所对应的率失真代价值大于前一次循环计算得到的候选补偿值所对应的率失真代价值的情况下则可以终止所述循环执行的过程。这样,通过多次循环计算补偿值,能够提升所计算得到的各类像素点的补偿值的准确度,有利于提升图像补偿的效果。
本公开的其他特征和优点将在随后的具体实施方式部分予以详细说明。
附图说明
附图是用来提供对本公开的进一步理解,并且构成说明书的一部分,与下面的具体实施方式一起用于解释本公开,但并不构成对本公开的限制。在附图中:
图1是本公开一示例性实施例所示出的一种图像补偿方法的流程图。
图2是本公开一示例性实施例所示出的一种像素点的排列示意图。
图3是本公开一示例性实施例所示出的一种图像补偿方法的流程图。
图4是本公开一示例性实施例所示出的一种Sobel算子的示意图。
图5是本公开一示例性实施例所示出的一种图像补偿装置的框图。
图6是本公开一示例性实施例所示出的一种电子设备的框图。
具体实施方式
以下结合附图对本公开的具体实施方式进行详细说明。应当理解的是,此处所描述的具体实施方式仅用于说明和解释本公开,并不用于限制本公开。
在介绍本公开的图像补偿方法、装置、存储介质及电子设备之前,首先对本公开的应用场景进行介绍。本公开所提供的各实施例可以应用于图像优化场景,例如对相关的失真图像进行过滤、补偿。
相关实施场景中,可以通过样点自适应补偿技术对图像进行优化。例如,可以将整个图像划分为多个最大编码单元,将每一最大编码单元设置为滤波开启状态,从而将整个图像作为像素分类补偿区域。这样,可以基于整个图像进行像素点分类,并计算每一类像素点所对应的补偿值。
在计算得到所述补偿值之后,可以根据所述补偿值计算每一所述最大编码单元的率失真代价值,并进而根据计算得到的率失真代价值调整各最大编码单元的滤波开启状态。例如,可以分别计算某一最大编码单元在开启滤波状态以及关闭滤波状态两种情况下的率失真代价值,若开启滤波状态所对应的率失真代价值大于关闭滤波状态所对应的率失真代价值,则可以将该最大编码单元所对应的滤波状态调整为关闭状态。
这样,在得到每一最大编码单元所对应的滤波开启状态、以及每一类像素点的补偿值之后,可以通所述补偿值对图片中的像素分类补偿区域内的各类像素点进行补偿,从而提升图像的画质。
值得注意的是,由于各类像素点的补偿值是基于图像分类补偿区域得到(上述示例中为整个图片),而在重新确定和调整相关的最大编码单元的滤波开启状态之后,实际的图像分类补偿区域可能被改变。相应的,由于实际的分类补偿区域可能被改变,因此其所对应的补偿值也可能发生变化。也就是说,基于整个图片计算得到的补偿值可能存在着相应的误差,影响图像补偿效果。
为此,本公开提供一种图像补偿方法,参照图1所示出的一种图像补偿方法的流程图,所述方法包括:
在步骤S11中,基于待补偿图像中的像素分类补偿区域内的像素点的信息,对每一所述像素点进行分类。
其中,所述待补偿图像可以是存在着失真现象的图像。例如在视频编码场景中,所述待补偿图像可以是相比原始未编码压缩的视频图像发生失真(比如像素偏移)的图像,如重建图像、编码端对重建图像使用相关滤波技术进行滤波后的图像等等。
所述待补偿图像可以包括多个最大编码单元(LCU)。其中,最大编码单元的数量和尺寸可以基于分割的方式确定。所述像素分类补偿区域包括多个开启滤波的最大编码单元。在一些实施场景中,所述像素分类补偿区域可以包括所述待补偿图像中的每一最大编码单元,即将整个所述待补偿图像作为所述像素分类补偿区域。在另一些实施场景中,所述像素分类补偿区域也可以包括所述待补偿图像中的部分最大编码单元,即将所述待补偿图像中的部分区域作为所述像素分类补偿区域。
针对所述像素分类补偿区域,可以基于该区域内的每一像素点的信息,对每一像素点进行分类。例如,针对像素点的亮度分量,可以基于当前像素点与当前像素点的8个相邻像素点的亮度值的大小关系对当前像素点进行分类。参照图2所示出的一种像素点的排列示意图,针对像素点5,可以基于该像素点5与像素点1-4以及像素点6-8的亮度值大小关系对像素点5进行分类,具体分类方式请参照相关技术的说明,本公开在此不做赘述。类似的,还可以针对像素点的色度分量进行分类,从而将像素点分类成多个类别。
在步骤S12中,针对每一像素分类,计算对应于该像素分类的候选补偿值。
例如,可以基于样点自适应补偿算法计算每一像素分类所对应的候选补偿值。通过对每一类像素点计算初始补偿值,并以所述初始补偿值为起点遍历预设范围内的可用补偿值,这样,可以计算补偿范围内的像素点应用所述可用补偿值的率失真代价值。进一步的,可以将率失真代价值最小的补偿值作为该类像素的候选补偿值。
在步骤S13中,基于每一所述候选补偿值调整所述待补偿图像中的目标最大编码单元的滤波开启状态。
其中,所述目标最大编码单元例如可以是所述像素分类补偿区域所对应的最大编码单元。在这种情况下,所述基于每一所述候选补偿值调整所述待补偿图像中的目标最大编码单元的滤波开启状态之前,还包括:将所述像素分类补偿区域所包括的多个开启滤波的最大编码单元作为所述目标最大编码单元。
此外,在计算得到各类像素的候选补偿值之后,可以针对每一所述目标最大编码单元计算率失真代价值。举例来讲,可以分别计算该目标最大编码单元处于开启滤波状态时的率失真代价值以及该目标最大编码单元处于关闭滤波状态时的率失真代价值。当该目标最大编码单元处于关闭滤波状态时的率失真代价值小于该目标最大编码单元处于开启滤波状态时的率失真代价值时,则可以将该目标最大编码单元调整为关闭滤波状态。
在步骤S14中,判断是否满足预设条件。
其中,所述预设条件例如可以是循环的次数,如10次、15次等。当候选补偿值的循环计算次数小于设定的循环次数时,可以将最新确定的所述目标最大编码单元中的开启滤波的目标最大编码单元作为新的像素分类补偿范围,循环执行从所述对每一所述像素点进行分类至所述基于每一所述候选补偿值调整所述待补偿图像中的目标最大编码单元的滤波开启状态的步骤(即S11至S13的步骤)。
在一些实施场景中,所述预设条件也可以基于率失真代价值设置。例如,在每一次计算得到所述候选补偿值之后,可以基于所述候选补偿值,计算待补偿区域内各像素点应用所述候选补偿值后的率失真代价值。这样,所述预设条件可以为:在当前循环计算得到的候选补偿值所对应的率失真代价值大于前一次循环计算得到的候选补偿值所对应的率失真代价值。
当然,在一些实施场景中,所述预设条件也可以同时包括上述的两个条件,从而起到提升补偿值的计算准确度的效果。
在满足所述预设条件之后,循环终止。在步骤S15中,将开启滤波的目标最大编码单元作为目标像素分类补偿区域,即将最后一次执行所述步骤得到的开启滤波的目标最大编码单元作为目标像素分类补偿区域。
在步骤S16中,将每一像素分类的候选补偿值作为该像素分类的目标补偿值,即将最后一次执行所述步骤得到的每一像素分类的候选补偿值作为该像素分类的目标补偿值。
其中,所述目标补偿值用于对所述目标补偿值所对应的像素分类在所述目标像素分类补偿区域中所对应的像素点进行补偿。以所述方法应用于视频图像编码端为例,在计算得到所述目标补偿值之后,视频图像编码端可以将所述目标补偿值进行编码,并将编码结果发送至解码端,以便于解码端根据所述目标补偿值进行图像补偿。
当然,在一些可能的实施场景中,所述图像补偿方法的执行端在计算得到所述目标补偿值之后,也可以根据所述目标补偿值对所述目标像素分类补偿区域中的各像素点进行补偿,本公开对此不做限制。
采用上述技术方案,在针对待补偿图像的各类像素点计算出候选补偿值,并根据候选补偿值重新确定各最大编码单元的滤波开启状态之后,还可以基于各最大编码单元的滤波开启状态循环执行计算各类像素点的候选补偿值的过程,直至满足预设条件。例如,可以基于所述补偿值计算最大编码单元的率失真代价值,在当前循环计算得到的候选补偿值所对应的率失真代价值大于前一次循环计算得到的候选补偿值所对应的率失真代价值的情况下则可以终止所述循环执行的过程。这样,通过多次循环计算补偿值,能够提升所计算得到的各类像素点的补偿值的准确度,有利于提升图像补偿的效果。
以视频会议场景为例,本实施例中所提供的图像补偿方法可以应用于编码端。编码端通过循环计算视频图像帧所对应的候选补偿值,从而能够得到满足条件(例如率失真代价值更小)的目标补偿值以及目标像素分类补偿区域。这样,所述编码端可以将所述目标补偿值以及目标像素分类补偿区域的信息编码发送至解码端。相应的,解码端可以基于接收到的目标补偿值以及目标像素分类补偿区域的信息对所述目标像素分类补偿区域内的像素点进行补偿,从而提升图像的清晰度。也就是说,采用上述技术方案,能够提升视频编码的质量,也能够提升会议各方所解码得到的图像的清晰度。
值得注意的是,在一些实施场景中,像素点的分类模式也可以存在多种,在这种情况下,上述技术方案可以用于计算每一种分类模式所对应的目标补偿值。
此外,对于多次循环计算候选补偿值的情况,也可能存在着本次计算得到的候选补偿值也适用于已经处于关闭滤波状态的最大编码单元的现象。例如,对于已经处于关闭滤波状态的第一最大编码单元,基于当前候选补偿值计算得到的该第一最大编码单元在关闭滤波状态下的第一率失真代价值也可能大于该第一最大编码单元在开启滤波状态下的第二率失真代价值。因此,在这种情况下可以将该第一最大编码单元的滤波状态调整为开启状态。
由此,在一种可能的实施方式中,上述步骤S13中的所述目标最大编码单元也可以包括所述待补偿图像所包括的每一最大编码单元。采用这样的方式,在每次计算得到候选补偿值之后,可以根据该候选补偿值能够对待补偿图片的所有最大编码单元的滤波状态进行调整和修正,从而能够进一步地提升所确定的目标像素分类补偿范围以及目标补偿值的准确度,最终提升图像的补偿效果。
图3是本公开一示例性实施例所示出的一种图像补偿方法的流程图,如图3所示,所述方法在图1的基础上,在所述步骤S11之前,还包括:
在步骤S01中,计算所述待补偿图像的纹理信息。
举例来讲,在计算所述待补偿图像的纹理信息之前可以先计算所述待补偿图像所包括的各像素点的像素值分量。例如,针对所述待补偿图像所包括的每一像素点,可以基于边缘检测算子计算该像素点在水平方向上的像素值分量以及该像素点在垂直方向上的像素值分量。
以Sobel算子为例,参照图4所示出的一种Sobel算子的示意图,在计算目标像素点(x, y)的像素值分量时,可以基于所述目标像素点以及与所述目标像素点相邻的像素点的像素值,计算在水平Sobel算子下滤波得到的所述目标像素点在水平方向上的像素值分量,此处记作Sobel_x(x, y)。类似的,可以基于所述目标像素点以及与所述目标像素点相邻的像素点的像素值,计算在垂直Sobel算子下滤波得到的所述目标像素点在垂直方向上的像素值分量,此处记作Sobel_y(x, y)。
这样,在得到像素点在水平方向上的像素值分量以及该像素点在垂直方向上的像素值分量之后,可以通过该像素点在水平方向上的像素值分量以及该像素点在垂直方向上的像素值分量计算该像素点的纹理信息度量值。
仍以所述目标像素点为例进行说明,在一种可能的实施方式中,可以通过如下计算式计算所述像素点的纹理信息度量值:
d(x, y) = |Sobel_x(x, y)| + |Sobel_y(x, y)|。
其中,d(x, y)为像素点(x, y)的纹理信息度量值,Sobel_x(x, y)为基于Sobel算子计算得到的所述像素点(x, y)在水平方向上的像素值分量,Sobel_y(x, y) 为基于Sobel算子计算得到的所述像素点(x, y)在垂直方向上的像素值分量。
在另一种可能的实施方式中,可以通过如下计算式计算所述像素点的纹理信息度量值:
d(x, y) = sqrt( (Sobel_x(x, y))2 + (Sobel_y(x, y))2);
其中,d(x, y)为像素点(x, y)的纹理信息度量值,Sobel_x(x, y)为基于Sobel算子计算得到的所述像素点(x, y)在水平方向上的像素值分量,Sobel_y(x, y) 为基于Sobel算子计算得到的所述像素点(x, y)在垂直方向上的像素值分量,sqrt()为返回正的平方根的函数。
在计算得到所述待补偿图像所包括的各像素点的纹理信息度量值之后,可以计算所述待补偿图像的纹理信息度量值。例如,可以计算所述待补偿图像所包括的每一像素点的纹理信息度量值的和值,将该和值作为所述待补偿图像的纹理信息度量值。
此外,在步骤S02中,计算所述待补偿图像所包括的各最大编码单元所对应的纹理信息。
例如,针对每一最大编码单元,可以计算该最大编码单元所包括的每一像素点的纹理信息度量值的和值作为该最大编码单元的纹理信息度量值。
在步骤S03中,基于所述待补偿图像的纹理信息与各所述最大编码单元所对应的纹理信息调整各所述最大编码单元的滤波开启状态。
举例来讲,所述待补偿图像的纹理信息度量值例如可以表示为C,所述待补偿图像中的第二最大编码单元所对应的纹理信息度量值例如可以为C2。这样,可以根据C和C2的大小调整所述第二最大编码单元的滤波开启状态。例如,当C2大于C时,则可以将所述第二最大编码单元的滤波状态调整为开启状态。当C2小于C时,则可以将所述第二最大编码单元的滤波状态调整为关闭状态。
类似的,可以通过这样的方式,对所述待补偿图像中的每一最大编码单元的滤波开启状态进行调整。
这样,在步骤S04中,可以将开启滤波的最大编码单元作为所述像素分类补偿区域。
此外,关于步骤S11至S16,请参照上述关于图1的实施例说明,为了说明书的简洁,本公开在此不再赘述。
在本实施例中,在计算像素分类补偿区域所对应的目标补偿值之前,可以首先计算所述待补偿图像中的各最大编码单元的纹理信息以及所述待补偿图像的纹理信息。这样,可以基于所述各最大编码单元的纹理信息以及所述待补偿图像的纹理信息提前确定最大编码单元的滤波开启状态。也就是说,相对于相关技术中默认开启所有最大编码单元的滤波状态的方式,上述技术方案能够利用图像的纹理信息对最大编码单元的滤波开启状态进行调整,即为图像的滤波范围选择提供了依据,最终起到提升图像处理准确度、提升编码效率的效果。
此外,在一种可能的实施方式中,所述图像的纹理信息还可以包括纹理方向信息,在这种情况下,所述方法还包括:
通过该像素点在水平方向上的像素值分量以及该像素点在垂直方向上的像素值分量计算该像素点的纹理方向度量值。
沿用上述例子,在具体实施时例如可以通过如下方式定义像素点的纹理方向度量值:
dir(x, y) = 1, if |Sobel_y(x, y)| > | Sobel_x(x, y)|
dir(x, y) = 0, if |Sobel_y(x, y)| ≤ | Sobel_x(x, y)|
其中,dir(x, y)为像素点(x, y)的纹理方向度量值。
这样,所述计算所述待补偿图像的纹理信息,包括:
计算所述待补偿图像所包括的每一像素点的纹理方向度量值的和值,根据该和值与所述待补偿图像所包括的像素点的数量值的比值确定所述待补偿图像的纹理方向度量值。
其中,针对所述比值,可以基于四舍五入的方式将所述比值分类为0或者1。当然,在具体实施时,也可以基于同样的构思对所述比值进行分类,本公开对此不做限制。
类似的,所述计算所述待补偿图像所包括的各最大编码单元所对应的纹理信息,包括:
针对每一最大编码单元,计算该最大编码单元所包括的每一像素点的纹理方向度量值的和值,根据该和值与该最大编码单元所包括的像素点的数量值的比值确定该最大编码单元的纹理方向度量值。
在计算得到待补偿图像的纹理方向度量值以及各最大编码单元的纹理方向度量值之后,可以确定各所述最大编码单元的滤波开启状态。例如,所述基于所述待补偿图像的纹理信息与各所述最大编码单元所对应的纹理信息调整各所述最大编码单元的滤波开启状态,可以包括:
将纹理信息度量值大于待补偿图像的纹理信息度量值、且纹理方向度量值与待补偿图像的纹理信息度量值相同的最大编码单元设置为开启滤波状态。
沿用上述例子,所述待补偿图像的纹理信息度量值例如可以表示为C,所述待补偿图像的纹理方向度量值可以为1;所述待补偿图像中的第二最大编码单元所对应的纹理信息度量值例如可以为C2,所述第二最大编码单元所对应的纹理方向度量值例如可以为1。这样,可以根据C和C2的大小,以及所述第二最大编码单元与所述待补偿图像的纹理方向度量值调整所述第二最大编码单元的滤波开启状态。例如,由于上述示例中待补偿图像以及第二最大编码单元的纹理方向度量值均为1,因此,当C2大于C时,则可以将所述第二最大编码单元的滤波状态调整为开启状态。类似的,当C2小于C时,则可以将所述第二最大编码单元的滤波状态调整为关闭状态。
上述示例中纹理信息中还包括了纹理方向信息,从而能够基于所述纹理方向信息对最大编码单元的滤波开启状态进行调整,即为图像的滤波范围选择提供了依据,最终起到进一步提升图像处理准确度、提升编码效率的效果。
基于同一发明构思,本公开还提供一种图像补偿装置,参照图5所示出的一种图像补偿装置的框图,所述装置500包括:
像素点分类模块501,用于基于待补偿图像中的像素分类补偿区域内的像素点的信息,对每一所述像素点进行分类,其中,所述待补偿图像包括多个最大编码单元,所述像素分类补偿区域包括多个开启滤波的最大编码单元;
第一计算模块502,用于针对每一像素分类,计算对应于该像素分类的候选补偿值;
第一调整模块503,用于基于每一所述候选补偿值调整所述待补偿图像中的目标最大编码单元的滤波开启状态;
第一执行模块504,用于将最新确定的所述目标最大编码单元中的开启滤波的目标最大编码单元作为新的像素分类补偿范围,循环执行从所述对每一所述像素点进行分类至所述基于每一所述候选补偿值调整所述待补偿图像中的目标最大编码单元的滤波开启状态的步骤,直至满足预设条件;
第二执行模块505,用于将最后一次执行所述步骤得到的开启滤波的目标最大编码单元作为目标像素分类补偿区域;
第三执行模块506,用于将最后一次执行所述步骤得到的每一像素分类的候选补偿值作为该像素分类的目标补偿值,所述目标补偿值用于对该像素分类在所述目标像素分类补偿区域中所对应的像素点进行补偿。
采用上述技术方案,在针对待补偿图像的各类像素点计算出候选补偿值,并根据候选补偿值重新确定各最大编码单元的滤波开启状态之后,还可以基于各最大编码单元的滤波开启状态循环执行计算各类像素点的候选补偿值的过程,直至满足预设条件。例如,可以基于所述补偿值计算最大编码单元的率失真代价值,在当前循环计算得到的候选补偿值所对应的率失真代价值大于前一次循环计算得到的候选补偿值所对应的率失真代价值的情况下则可以终止所述循环执行的过程。这样,通过多次循环计算补偿值,能够提升所计算得到的各类像素点的补偿值的准确度,有利于提升图像补偿的效果。
可选地,所述预设条件包括:
循环执行所述步骤的次数达到预设阈值;和/或,
当前循环计算得到的候选补偿值所对应的率失真代价值大于前一次循环计算得到的候选补偿值所对应的率失真代价值。
可选地,所述目标最大编码单元包括所述待补偿图像所包括的每一最大编码单元。
可选地,所述装置500还包括:
第四执行模块,用于在所述第一调整模块503基于每一所述候选补偿值调整所述待补偿图像中的目标最大编码单元的滤波开启状态之前,将所述像素分类补偿区域所包括的多个开启滤波的最大编码单元作为所述目标最大编码单元。
可选地,所述装置500还包括:
第二计算模块,用于在所述像素点分类模块基于待补偿图像中的像素分类补偿区域内的像素点的信息,对每一所述像素点进行分类之前,计算所述待补偿图像的纹理信息;
第三计算模块,用于计算所述待补偿图像所包括的各最大编码单元所对应的纹理信息;
第二调整模块,用于基于所述待补偿图像的纹理信息与各所述最大编码单元所对应的纹理信息调整各所述最大编码单元的滤波开启状态;
第五执行模块,用于将开启滤波的最大编码单元作为所述像素分类补偿区域。
可选地,所述装置500还包括:
第四计算模块,用于针对所述待补偿图像所包括的每一像素点,基于边缘检测算子计算该像素点在水平方向上的像素值分量以及该像素点在垂直方向上的像素值分量;
第五计算模块,用于通过该像素点在水平方向上的像素值分量以及该像素点在垂直方向上的像素值分量计算该像素点的纹理信息度量值;
所述第二计算模块,包括:
第一计算子模块,用于计算所述待补偿图像所包括的每一像素点的纹理信息度量值的和值作为所述待补偿图像的纹理信息度量值;
所述第三计算模块,包括:
第二计算子模块,用于针对每一最大编码单元,计算该最大编码单元所包括的每一像素点的纹理信息度量值的和值作为该最大编码单元的纹理信息度量值;
所述第二调整模块,包括:
第一执行子模块,用于将纹理信息度量值大于待补偿图像的纹理信息度量值的最大编码单元调整为开启滤波状态。
可选地,所述边缘检测算子为Sobel算子,所述第五计算模块用于:
通过如下计算式计算所述像素点的纹理信息度量值:
d(x, y) = |Sobel_x(x, y)| + |Sobel_y(x, y)|;
或者,通过如下计算式计算所述像素点的纹理信息度量值:
d(x, y) = sqrt( (Sobel_x(x, y))2 + (Sobel_y(x, y))2);
其中,d(x, y)为像素点(x, y)的纹理信息度量值,Sobel_x(x, y)为基于Sobel算子计算得到的所述像素点(x, y)在水平方向上的像素值分量,Sobel_y(x, y) 为基于Sobel算子计算得到的所述像素点(x, y)在垂直方向上的像素值分量,sqrt()为返回正的平方根的函数。
可选地,所述装置500还包括:
第六计算模块,用于通过该像素点在水平方向上的像素值分量以及该像素点在垂直方向上的像素值分量计算该像素点的纹理方向度量值;
所述第二计算模块,包括:
第三计算子模块,用于计算所述待补偿图像所包括的每一像素点的纹理方向度量值的和值;
第一确定子模块,用于根据该和值与所述待补偿图像所包括的像素点的数量值的比值确定所述待补偿图像的纹理方向度量值;
所述第三计算模块,包括:
第四计算子模块,用于针对每一最大编码单元,计算该最大编码单元所包括的每一像素点的纹理方向度量值的和值;
第二确定子模块,用于根据该和值与该最大编码单元所包括的像素点的数量值的比值确定该最大编码单元的纹理方向度量值;
所述第二调整模块,包括:
第二执行子模块,用于将纹理信息度量值大于待补偿图像的纹理信息度量值、且纹理方向度量值与待补偿图像的纹理信息度量值相同的最大编码单元设置为开启滤波状态。
关于上述实施例中的装置,其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述,此处将不做详细阐述说明。
本公开还提供一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现本公开所提供的图像补偿方法的步骤。
根据本公开实施例的第四方面,提供一种电子设备,包括:
存储器,其上存储有计算机程序;
处理器,用于执行所述存储器中的所述计算机程序,以实现本公开所提供的图像补偿方法的步骤。
图6是根据一示例性实施例示出的一种电子设备600的框图。如图6所示,该电子设备600可以包括:处理器601,存储器602。该电子设备600还可以包括多媒体组件603,输入/输出(I/O)接口604,以及通信组件605中的一者或多者。
其中,处理器601用于控制该电子设备600的整体操作,以完成上述的图像补偿方法中的全部或部分步骤。存储器602用于存储各种类型的数据以支持在该电子设备600的操作,这些数据例如可以包括用于在该电子设备600上操作的任何应用程序或方法的指令,以及应用程序相关的数据,例如联系人数据、收发的消息、图片、音频、视频等等。该存储器602可以由任何类型的易失性或非易失性存储设备或者它们的组合实现,例如静态随机存取存储器(Static Random Access Memory,简称SRAM),电可擦除可编程只读存储器(Electrically Erasable Programmable Read-Only Memory,简称EEPROM),可擦除可编程只读存储器(Erasable Programmable Read-Only Memory,简称EPROM),可编程只读存储器(Programmable Read-Only Memory,简称PROM),只读存储器(Read-Only Memory,简称ROM),磁存储器,快闪存储器,磁盘或光盘。多媒体组件603可以包括屏幕和音频组件。其中屏幕例如可以是触摸屏,音频组件用于输出和/或输入音频信号。例如,音频组件可以包括一个麦克风,麦克风用于接收外部音频信号。所接收的音频信号可以被进一步存储在存储器602或通过通信组件605发送。音频组件还包括至少一个扬声器,用于输出音频信号。I/O接口604为处理器601和其他接口模块之间提供接口,上述其他接口模块可以是键盘,鼠标,按钮等。这些按钮可以是虚拟按钮或者实体按钮。通信组件605用于该电子设备600与其他设备之间进行有线或无线通信。无线通信,例如Wi-Fi,蓝牙,近场通信(Near FieldCommunication,简称NFC),2G、3G、4G、NB-IOT、eMTC、或其他5G等等,或它们中的一种或几种的组合,在此不做限定。因此相应的该通信组件605可以包括:Wi-Fi模块,蓝牙模块,NFC模块等等。
在一示例性实施例中,电子设备600可以被一个或多个应用专用集成电路(Application Specific Integrated Circuit,简称ASIC)、数字信号处理器(DigitalSignal Processor,简称DSP)、数字信号处理设备(Digital Signal Processing Device,简称DSPD)、可编程逻辑器件(Programmable Logic Device,简称PLD)、现场可编程门阵列(Field Programmable Gate Array,简称FPGA)、控制器、微控制器、微处理器或其他电子元件实现,用于执行上述的图像补偿方法。
在另一示例性实施例中,还提供了一种包括程序指令的计算机可读存储介质,该程序指令被处理器执行时实现上述的图像补偿方法的步骤。例如,该计算机可读存储介质可以为上述包括程序指令的存储器602,上述程序指令可由电子设备600的处理器601执行以完成上述的图像补偿方法。
在另一示例性实施例中,还提供一种计算机程序产品,该计算机程序产品包含能够由可编程的装置执行的计算机程序,该计算机程序具有当由该可编程的装置执行时用于执行上述的图像补偿方法的代码部分。
以上结合附图详细描述了本公开的优选实施方式,但是,本公开并不限于上述实施方式中的具体细节,在本公开的技术构思范围内,可以对本公开的技术方案进行多种简单变型,这些简单变型均属于本公开的保护范围。
另外需要说明的是,在上述具体实施方式中所描述的各个具体技术特征,在不矛盾的情况下,可以通过任何合适的方式进行组合,为了避免不必要的重复,本公开对各种可能的组合方式不再另行说明。
此外,本公开的各种不同的实施方式之间也可以进行任意组合,只要其不违背本公开的思想,其同样应当视为本公开所公开的内容。

Claims (11)

1.一种图像补偿方法,其特征在于,包括:
基于待补偿图像中的像素分类补偿区域内的像素点的信息,对每一所述像素点进行分类,其中,所述待补偿图像包括多个最大编码单元,所述像素分类补偿区域包括多个开启滤波的最大编码单元;
针对每一像素分类,计算对应于该像素分类的候选补偿值;
基于每一所述候选补偿值调整所述待补偿图像中的目标最大编码单元的滤波开启状态;
将最新确定的所述目标最大编码单元中的开启滤波的目标最大编码单元作为新的像素分类补偿范围,循环执行从所述对每一所述像素点进行分类至所述基于每一所述候选补偿值调整所述待补偿图像中的目标最大编码单元的滤波开启状态的步骤,直至满足预设条件;
将最后一次执行所述步骤得到的开启滤波的目标最大编码单元作为目标像素分类补偿区域;
将最后一次执行所述步骤得到的每一像素分类的候选补偿值作为该像素分类的目标补偿值,所述目标补偿值用于对该像素分类在所述目标像素分类补偿区域中所对应的像素点进行补偿。
2.根据权利要求1所述的方法,其特征在于,所述预设条件包括:
循环执行所述步骤的次数达到预设阈值;和/或,
当前循环计算得到的候选补偿值所对应的率失真代价值大于前一次循环计算得到的候选补偿值所对应的率失真代价值。
3.根据权利要求1所述的方法,其特征在于,所述目标最大编码单元包括所述待补偿图像所包括的每一最大编码单元。
4.根据权利要求1所述的方法,其特征在于,所述基于每一所述候选补偿值调整所述待补偿图像中的目标最大编码单元的滤波开启状态之前,还包括:
将所述像素分类补偿区域所包括的多个开启滤波的最大编码单元作为所述目标最大编码单元。
5.根据权利要求1所述的方法,其特征在于,所述基于待补偿图像中的像素分类补偿区域内的像素点的信息,对每一所述像素点进行分类之前,所述方法还包括:
计算所述待补偿图像的纹理信息;
计算所述待补偿图像所包括的各最大编码单元所对应的纹理信息;
基于所述待补偿图像的纹理信息与各所述最大编码单元所对应的纹理信息调整各所述最大编码单元的滤波开启状态;
将开启滤波的最大编码单元作为所述像素分类补偿区域。
6.根据权利要求5所述的方法,其特征在于,所述方法还包括:
针对所述待补偿图像所包括的每一像素点,基于边缘检测算子计算该像素点在水平方向上的像素值分量以及该像素点在垂直方向上的像素值分量;
通过该像素点在水平方向上的像素值分量以及该像素点在垂直方向上的像素值分量计算该像素点的纹理信息度量值;
所述计算所述待补偿图像的纹理信息,包括:
计算所述待补偿图像所包括的每一像素点的纹理信息度量值的和值作为所述待补偿图像的纹理信息度量值;
所述计算所述待补偿图像所包括的各最大编码单元所对应的纹理信息,包括:
针对每一最大编码单元,计算该最大编码单元所包括的每一像素点的纹理信息度量值的和值作为该最大编码单元的纹理信息度量值;
所述基于所述待补偿图像的纹理信息与各所述最大编码单元所对应的纹理信息调整各所述最大编码单元的滤波开启状态,包括:
将纹理信息度量值大于待补偿图像的纹理信息度量值的最大编码单元调整为开启滤波状态。
7.根据权利要求6所述的方法,其特征在于,所述边缘检测算子为Sobel算子,所述通过该像素点在水平方向上的像素值分量以及该像素点在垂直方向上的像素值分量计算该像素点的纹理信息度量值,包括:
通过如下计算式计算所述像素点的纹理信息度量值:
d(x, y) = |Sobel_x(x, y)| + |Sobel_y(x, y)|;
或者,通过如下计算式计算所述像素点的纹理信息度量值:
d(x, y) = sqrt( (Sobel_x(x, y))2 + (Sobel_y(x, y))2);
其中,d(x, y)为像素点(x, y)的纹理信息度量值,Sobel_x(x, y)为基于Sobel算子计算得到的所述像素点(x, y)在水平方向上的像素值分量,Sobel_y(x, y) 为基于Sobel算子计算得到的所述像素点(x, y)在垂直方向上的像素值分量,sqrt()为返回正的平方根的函数。
8.根据权利要求6所述的方法,其特征在于,所述方法还包括:
通过该像素点在水平方向上的像素值分量以及该像素点在垂直方向上的像素值分量计算该像素点的纹理方向度量值;
所述计算所述待补偿图像的纹理信息,包括:
计算所述待补偿图像所包括的每一像素点的纹理方向度量值的和值;
根据该和值与所述待补偿图像所包括的像素点的数量值的比值确定所述待补偿图像的纹理方向度量值;
所述计算所述待补偿图像所包括的各最大编码单元所对应的纹理信息,包括:
针对每一最大编码单元,计算该最大编码单元所包括的每一像素点的纹理方向度量值的和值;
根据该和值与该最大编码单元所包括的像素点的数量值的比值确定该最大编码单元的纹理方向度量值;
所述基于所述待补偿图像的纹理信息与各所述最大编码单元所对应的纹理信息调整各所述最大编码单元的滤波开启状态,包括:
将纹理信息度量值大于待补偿图像的纹理信息度量值、且纹理方向度量值与待补偿图像的纹理信息度量值相同的最大编码单元设置为开启滤波状态。
9.一种图像补偿装置,其特征在于,包括:
像素点分类模块,用于基于待补偿图像中的像素分类补偿区域内的像素点的信息,对每一所述像素点进行分类,其中,所述待补偿图像包括多个最大编码单元,所述像素分类补偿区域包括多个开启滤波的最大编码单元;
第一计算模块,用于针对每一像素分类,计算对应于该像素分类的候选补偿值;
第一调整模块,用于基于每一所述候选补偿值调整所述待补偿图像中的目标最大编码单元的滤波开启状态;
第一执行模块,用于将最新确定的所述目标最大编码单元中的开启滤波的目标最大编码单元作为新的像素分类补偿范围,循环执行从所述对每一所述像素点进行分类至所述基于每一所述候选补偿值调整所述待补偿图像中的目标最大编码单元的滤波开启状态的步骤,直至满足预设条件;
第二执行模块,用于将最后一次执行所述步骤得到的开启滤波的目标最大编码单元作为目标像素分类补偿区域;
第三执行模块,用于将最后一次执行所述步骤得到的每一像素分类的候选补偿值作为该像素分类的目标补偿值,所述目标补偿值用于对该像素分类在所述目标像素分类补偿区域中所对应的像素点进行补偿。
10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现权利要求1-8中任一项所述方法的步骤。
11.一种电子设备,其特征在于,包括:
存储器,其上存储有计算机程序;
处理器,用于执行所述存储器中的所述计算机程序,以实现权利要求1-8中任一项所述方法的步骤。
CN202110364581.7A 2021-04-06 2021-04-06 图像补偿方法、装置、存储介质及电子设备 Active CN112752104B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110364581.7A CN112752104B (zh) 2021-04-06 2021-04-06 图像补偿方法、装置、存储介质及电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110364581.7A CN112752104B (zh) 2021-04-06 2021-04-06 图像补偿方法、装置、存储介质及电子设备

Publications (2)

Publication Number Publication Date
CN112752104A CN112752104A (zh) 2021-05-04
CN112752104B true CN112752104B (zh) 2021-06-08

Family

ID=75651709

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110364581.7A Active CN112752104B (zh) 2021-04-06 2021-04-06 图像补偿方法、装置、存储介质及电子设备

Country Status (1)

Country Link
CN (1) CN112752104B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115691390B (zh) * 2022-11-02 2023-09-26 上海傲显科技有限公司 一种显示面板补偿方法、装置及显示装置

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105325000A (zh) * 2013-06-12 2016-02-10 三菱电机株式会社 图像编码装置、图像编码方法、图像解码装置和图像解码方法
CN107483935A (zh) * 2011-11-07 2017-12-15 佳能株式会社 用于针对图像的重建样本的集合提供补偿偏移的方法和装置
CN107707915A (zh) * 2017-09-30 2018-02-16 上海兆芯集成电路有限公司 采样点自适应偏移滤波的控制方法及其影像处理系统

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20190320172A1 (en) * 2018-04-12 2019-10-17 Qualcomm Incorporated Hardware-friendly sample adaptive offset (sao) and adaptive loop filter (alf) for video coding

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107483935A (zh) * 2011-11-07 2017-12-15 佳能株式会社 用于针对图像的重建样本的集合提供补偿偏移的方法和装置
CN105325000A (zh) * 2013-06-12 2016-02-10 三菱电机株式会社 图像编码装置、图像编码方法、图像解码装置和图像解码方法
CN107707915A (zh) * 2017-09-30 2018-02-16 上海兆芯集成电路有限公司 采样点自适应偏移滤波的控制方法及其影像处理系统

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
《Sample adaptive offset for HEVC》;Chih-Ming Fu ET AL;《MMSP 2011》;20111231;全文 *

Also Published As

Publication number Publication date
CN112752104A (zh) 2021-05-04

Similar Documents

Publication Publication Date Title
US11694125B2 (en) Image encoder using machine learning and data processing method of the image encoder
US11736701B2 (en) Hash-based encoder decisions for video coding
US11949888B2 (en) Block partitioning methods for video coding
EP3095239B1 (en) Intra block copy prediction with asymmetric partitions and encoder-side search patterns, search ranges and approaches to partitioning
US10567754B2 (en) Hash table construction and availability checking for hash-based block matching
EP3120556A1 (en) Encoder-side decisions for screen content encoding
US11272176B2 (en) Encoding processing method and device, decoding processing method and device, encoder, and decoder
US10200699B2 (en) Apparatus and method for encoding moving picture by transforming prediction error signal in selected color space, and non-transitory computer-readable storage medium storing program that when executed performs method
US20220078425A1 (en) Method and device for selecting context model of quantization coefficient end flag bit
US20220109871A1 (en) Method and apparatus for video encoding and decoding with bi-directional optical flow adapted to weighted prediction
US20150350641A1 (en) Dynamic range adaptive video coding system
EP3818705A1 (en) Context-based binary arithmetic encoding and decoding
CN116828192A (zh) 图像重建方法和装置
US20150062371A1 (en) Encoding apparatus and method
CN112752104B (zh) 图像补偿方法、装置、存储介质及电子设备
US20220417530A1 (en) Image decoding device, image decoding method, and program
US20170201767A1 (en) Video encoding device and video encoding method
De Praeter et al. Simultaneous encoder for high-dynamic-range and low-dynamic-range video
US11991399B2 (en) Apparatus and method for de-blocking filtering
EP3641311A1 (en) Encoding and decoding methods and apparatus
CN114556923B (zh) 编码器、解码器和使用插值滤波的对应方法
CN104918052B (zh) 用于视频压缩的错误追踪和减轻的方法和视频编码器
US20190304074A1 (en) Video optimization processing system and method
JP2015115901A (ja) 符号化装置、符号化装置の制御方法、及び、コンピュータプログラム
CN111970517B (zh) 基于双向光流的帧间预测方法、编码方法及相关装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant