CN109167892B - 一种视频图像细节增强方法与系统 - Google Patents

一种视频图像细节增强方法与系统 Download PDF

Info

Publication number
CN109167892B
CN109167892B CN201810959301.5A CN201810959301A CN109167892B CN 109167892 B CN109167892 B CN 109167892B CN 201810959301 A CN201810959301 A CN 201810959301A CN 109167892 B CN109167892 B CN 109167892B
Authority
CN
China
Prior art keywords
dark
mask
merge
pixel value
mean
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201810959301.5A
Other languages
English (en)
Other versions
CN109167892A (zh
Inventor
黄缚鹏
罗秀玲
刘杜娟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Galaxy Internet Tv Co ltd
Original Assignee
Galaxy Internet Tv Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Galaxy Internet Tv Co ltd filed Critical Galaxy Internet Tv Co ltd
Priority to CN201810959301.5A priority Critical patent/CN109167892B/zh
Publication of CN109167892A publication Critical patent/CN109167892A/zh
Application granted granted Critical
Publication of CN109167892B publication Critical patent/CN109167892B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/14Picture signal circuitry for video frequency region
    • H04N5/21Circuitry for suppressing or minimising disturbance, e.g. moiré or halo
    • H04N5/213Circuitry for suppressing or minimising impulsive noise
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/44Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/57Control of contrast or brightness

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Image Processing (AREA)

Abstract

本发明公开了一种视频图像细节增强方法与系统。所述方法包括以下步骤:将待处理的视频文件解码为单个视频帧;对于所述的单个视频帧,执行如下处理:提取单个视频帧图像的暗部区域,暗部增强,将暗部增强、暗部区域与原图做融合处理;通过拟合的二次曲线调节融合处理后图像的亮度和对比度,锐化处理;提取锐化处理后结果的高亮区域,将高亮区域,锐化处理后的结果与原图做融合处理;最后,将融合处理后的所有视频帧编码得到新的视频文件。该方法在提升图像亮度、对比度和增强暗部区域细节的同时,抑制了高亮区域。该算法过程简单,时效性强,适用范围广,增强效果明显。

Description

一种视频图像细节增强方法与系统
技术领域
本发明属于视频图像处理技术领域,尤其涉及一种适用于视频编码系统的基于高亮区域抑制和暗部区域细节提升的视频增强方法及系统。
背景技术
视频图像的暗部有很丰富的细节信息,但人眼感知到的信息却很少。为了提高视觉感受及便于后续更高层次的处理,必须对视频图像亮度、对比度及暗部细节进行增强处理。
现有的众多图像增强算法基本可以分为两类:空间域方法和频域方法。空间域方法是对图像的像素直接处理的方法,主要方法有灰度变换、直方图均衡化和空域滤波等。频域方法是在图像的某个变换域内对图像变换系统进行运算,然后通过逆变换以获得图像增强效果的方法。
现有图像增强方法中,应用比较广泛的有直方图均衡化、小波变换和基于色彩恒常性理论的Retinex算法等。直方图均衡化算法通过使图像灰度级的概率密度函数近似满足均匀分布来达到扩大图像动态范围和提供图像对比度的目的。小波变换算法是将图像分解为低频图像和高频图像,通过对不同频率的图像进行增强达到突出图像细节的目的。Retinex算法通过去除原始图像中照度分量,求解出反应物体本质颜色的反射分量,达到图像增强的目的。
直方图均衡化方法的原理简单,实时性好,但很容易出现图像亮度不均,图像过亮或过暗,部分细节信息丢失等问题,虽然有了多个改进方法,但是图像增强效果提升有限。小波变换很容易使得图像噪声被放大,图像细节丢失。Retinex算法更适用于红外图像处理,且计算过程复杂,时效性差。
发明内容
本发明的目的是提供一种视频图像高亮区域抑制,暗部细节提升的增强方法,以解决现有的视频图像增强算法过于依赖于复杂的算法,时效性差,适用范围有限,很容易引起亮部及边缘区域的恶化,尤其是暗部区域的人脸失真严重等问题。
根据本发明的一个方面,提供一种视频图像处理方法,包括以下步骤:获取单个视频帧;对于所述的单个视频帧,执行如下处理:读取当前视频帧图像frame;对所述当前视频帧图像frame,执行暗部区域d_Mask提取及方框滤波处理,得到Dark_Mask;对所述当前视频帧图像frame,执行暗部增强处理,得到Dark_Enhance;对所述当前视频帧图像frame,所述暗部区域Dark_Mask,所述暗部增强处理Dark_Enhance,执行融合操作,得到暗部融合结果d_Merge;对暗部融合结果,执行亮度和对比度调节,锐化处理,得到Merge_Enhance;对所述亮度和对比度调节,锐化处理结果Merge_Enhance,执行高亮区域b_Mask提取及方框滤波处理,得到Bright_Mask;最后,对所述当前视频帧图像frame,所述亮度和对比度调节,锐化处理结果Merge_Enhance,所述高亮区域Bright_Mask,执行融合操作,得到亮部融合结果b_Merge。
其中,在上述发明中,所述的暗部区域d_Mask,按照以下函数执行:
Figure GSB0000177358930000021
v1=1-(G-Y)/15 G>Max(R,B)
Figure GSB0000177358930000022
d_Mask=d_Mask*v2
其中,d_Mask表示输出的暗部区域像素值,[start,end]是暗部区域像素值区间,Y=0.299*R+0.587*G+0.114*B+0.5,R,G,B表示所述当前视频帧图像frame的红、绿、蓝三个颜色通道,Max(R,B)表示R通道和B通道的最大值。
其中,在上述发明中,所述的当前视频帧图像frame执行暗部增强,按照以下函数执行:
max_mean=max(mean_R,mean_G,mean_B)
Figure GSB0000177358930000031
a=-(255*(h-128))/d
b=(65025*h-4177920)/d
h=128/(1.0-d_value)
y=(ax+b)x
其中,mean_R,mean_G,mean_B分别表示R,G,B三通道的均值,max(mean_R,mean_G,mean_B)表示R,G,B三通道均值的最大值,max_mean表示当前视频帧图像frame的R,G,B三通道均值的最大值,x表示输入的当前视频帧图像frame的像素值,y表示输出的Dark_Enhance像素值,x,y均为[0,1]之间的32位浮点数,d=4145280,d_value表示暗部增强系数。
其中,在上述发明中,所述的暗部融合d_Merge操作,按照以下函数执行
fth=pMask/255
d_Merge=fth*pOrg+(1-fth)*pNew
其中,d_Merge表示暗部融合后的像素值,fth表示处理的暗部区域Dark_Mask的像素值,pOrg表示当前视频帧图像frame的像素值,pNew表示Dark_Enhance的像素值。
其中,在上述发明中,所述的Merge_Enhance操作,按照以下函数执行:
a=-(255*(h-128))/d
b=(65025*h-4177920)/d
h=128/(1.0-b_value)
y=(ax+b)x
r=y+(y-128)*c_value
Figure GSB0000177358930000032
其中,x表示输入的d_Merge像素值,r表示输出的Merge_Enhance像素值,x,r均为[0,1]之间的32位浮点数,d=4145280,b_value表示亮度调节系数,c_value表示对比度调节系数。
其中,在上述发明中,所述的高亮区域b_Mask,按照以下函数执行:
max=max(R,G,B)
Figure GSB0000177358930000041
其中,b_Mask表示输出的高亮区域像素值,[start,end]是高亮区域像素值区间,R,G,B表示输入图像的红、绿、蓝三个颜色通道,Max(R,G,B)表示R,G,B三通道的最大值,max表示Merge_Enhance的R,G,B三通道的最大值。
其中,在上述发明中,所述的亮部融合b_Merge操作,按照以下函数执行:
fth=pMask/255
b_Merge=fth*pOrg+(1-fth)*pNew
其中b_Merge表示亮部融合后的像素值,fth表示高亮区域Bright_Mask的像素值,pOrg表示当前视频帧图像frame的像素值,pNew表示Merge_Enhance的像素值。
根据本发明的另一个方面,提供了一种视频图像处理系统,包括以下部分:解码模块,用于将视频文件解码为单个视频帧图像;增强模块,将所述单个视频帧图像进行一系列的增强操作;所述增强模块进一步包括:读取单元,用于读取解码后的视频帧图像frame;Dark_Mask单元,用于从视频帧图像frame提取暗部区域d_Mask,并对d_Mask执行方框滤波处理;Dark_Enhance单元,用于对视频帧图像frame执行暗部增强处理;d_Merge单元,用于对视频帧图像frame,Dark_Enhance和Dark_Mask,执行融合操作;Merge_Enhance单元,用于对d_Merge,执行亮度和对比度调节,锐化处理;Bright_Mask单元,用于从Merge_Enhance提取高亮区域b_Mask,并对b_Mask执行方框滤波处理;b_Merge单元,用于对视频帧图像frame,Merge_Enhance和Bright_Mask,执行融合操作;编码模块,将所述增强操作后的视频帧编码为新的视频文件。
其中,在上述发明中,所述的暗部区域d_Mask,按照以下函数执行:
Figure GSB0000177358930000051
v1=1-(G-Y)/15 G>Max(R,B)
Figure GSB0000177358930000052
d_Mask=d_Mask*v2
其中,d_Mask表示输出的暗部区域像素值,[start,end]是暗部区域像素值区间,Y=0.299*R+0.587*G+0.114*B+0.5,R,G,B表示所述当前视频帧图像frame的红、绿、蓝三个颜色通道,Max(R,B)表示R通道和B通道的最大值。
其中,在上述发明中,所述的视频帧图像frame执行暗部增强,按照以下函数执行:
max_mean=max(mean_R,mean_G,mean_B)
Figure GSB0000177358930000053
a=-(255*(h-128))/d
b=(65025*h-4177920)/d
h=128/(1.0-d_value)
y=(ax+b)x
其中,mean_R,mean_G,mean_B分别表示R,G,B三通道的均值,max(mean_R,mean_G,mean_B)表示R,G,B三通道均值的最大值,max_mean表示当前视频帧图像frame的R,G,B三通道均值的最大值,x表示输入的视频帧图像frame的像素值,y表示输出的Dark_Enhance像素值,x,y均为[0,1]之间的32位浮点数,d=4145280,d_value表示暗部增强系数。
其中,在上述发明中,所述的暗部融合d_Merge操作,按照以下函数执行:
fth=pMask/255
d_Merge=fth*pOrg+(1-fth)*pNew
其中,d_Merge表示暗部融合后的像素值,fth表示处理的暗部区域Dark_Mask的像素值,pOrg表示当前视频帧图像frame的像素值,pNew表示Dark_Enhance的像素值。
其中,在上述发明中,所述的Merge_Enhance操作,按照以下函数执行:
a=-(255*(h-128))/d
b=(65025*h-4177920)/d
h=128/(1.0-b_value)
y=(ax+b)x
r=y+(y-128)*c_value
Figure GSB0000177358930000061
其中,x表示输入的d_Merge像素值,r表示输出的Merge_Enhance像素值,x,r均为[0,1]之间的32位浮点数,d=4145280,b_value表示亮度调节系数,c_value表示对比度调节系数。
其中,在上述发明中,所述的高亮区域b_Mask,按照以下函数执行:
max=max(R,G,B)
Figure GSB0000177358930000062
其中,b_Mask表示输出的高亮区域像素值,[start,end]是高亮区域像素值区间,R,G,B表示输入图像的红、绿、蓝三个颜色通道,Max(R,G,B)表示R,G,B三通道的最大值,max表示Merge_Enhance的R,G,B三通道的最大值。
其中,在上述发明中,所述的亮部融合b_Merge操作,按照以下函数执行:
fth=pMask/255
b_Merge=fth*pOrg+(1-fth)*pNew
其中b_Merge表示亮部融合后的像素值,fth表示高亮区域Bright_Mask的像素值,pOrg表示当前视频帧图像frame的像素值,pNew表示Merge_Enhance的像素值。
根据本发明的视频图像处理方法和系统,在提升亮度和对比度,增强暗部细节的同时,很好的保留了高亮区域,避免了高亮区域出现过亮,噪声被放大,细节丢失等情况;使用了方框滤波,比双边滤波,高斯滤波及其他滤波方法计算速度更快,边缘细节保持效果更好;没有复杂的计算公式,计算速度快,可以满足实时要求;根据不同图像类型,灵活设置暗部和高亮区域,有很大的改进空间;视频图像适用范围广,增强效果显著。
附图说明
图1为本发明视频图像处理方法的一个实施例中暗部区域提取操作的示意图;
图2为本发明视频图像处理方法的一个实施例暗部增强操作的示意图;
图3为本发明视频图像处理方法的一个实施例的流程框图;
图4为本发明一具体实施方式中,一视频帧的原始图像示例;
图5为本发明一具体实施方式中,提取暗部区域并执行方框滤波处理后的效果图示例;
图6为本发明一具体实施方式中,对原始图像执行暗部增强处理后的效果图示例;
图7为本发明一具体实施方式中,对原始图像,对提取的暗部区域及方框滤波处理后的图像,对原始图像执行暗部增强处理后的图像三者进行融合处理后的效果图示例;
图8为本发明一具体实施方式中,对融合处理后的图像进行亮度和对比度调节,锐化处理后的效果图示例;
图9为本发明一具体实施方式中,对融合处理后的图像进行亮度和对比度调节,锐化处理后图像提取高亮区域并执行方框滤波处理后的效果图示例;
图10为本发明一具体实施方式中,对原始图像,对提取的高亮区域及方框滤波处理后的图像,对融合处理后的图像进行亮度和对比度调节,锐化处理后图像三者进行再次融合处理后的效果图示例。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚明了,下面结合具体实施方式并参照附图,对本发明进一步详细说明。应该理解,这些描述只是示例性的,而并非要限制本发明的范围。
首先,介绍本发明中所使用的、对图像进行暗部区域提取处理的具体算法。先根据输入图像frame的R、G、B三通道计算亮度分量Y=0.299*R+0.587*G+0.114*B+0.5,再根据分段函数
Figure GSB0000177358930000081
得到d_Mask的像素值;如果G>Max(R,B),将d_Mask的像素值归一化到[0.2,1],归一化过程为:令v1=1-(G-Y)/15,得到
Figure GSB0000177358930000082
其中,d_Mask表示输出的暗部区域像素值,[start,end]是暗部区域像素值区间,Max(R,B)表示R通道和B通道的最大值。
随后,介绍本发明中所使用的方框滤波算法。方框滤波是线性滤波中最简单的,其等价于图像与全部元素值为1的核函数进行卷积再进行尺度缩放。方框滤波用K×K窗口中的像素值平均后输出,核函数为:
Figure GSB0000177358930000091
该算法计算速度快,效果良好。通过对d_Mask执行方框滤波,得到Dark_Mask。
经过大量测试,申请人发现,当暗部区域像素值区间设置为[start,end]=[30,40]时,暗部增强的效果相对比较好。
随后,介绍本发明中所使用的暗部增强算法。首先计算输入图像frame的R、G、B三通道均值的最大值max_mean,然后,根据分段函数
Figure GSB0000177358930000092
调节暗部增强系数d_value,随后,根据二次曲线y=(ax+b)x,其中
a=-(255*(h-128))/d,b=(65025*h-4177920)/d,h=128/(1.0-d_value),
得到暗部增强处理后的结果Dark_Enhance。
随后,介绍本发明中所使用的暗部融合算法。暗部融合是将原始图像frame,暗部区域Dark_Mask和暗部增强Dark_Enhance三者的像素值做线性融合,计算函数如下:
Figure GSB0000177358930000093
其中,d_Merge表示暗部融合后的像素值,fth表示处理的暗部区域Dark_Mask的像素值,pOrg表示当前视频帧图像frame的像素值,pNew表示Dark_Enhance的像素值。
最后,介绍本发明中所使用的亮度和对比度调节,锐化处理算法。亮度和对比度调节公式如下:
Figure GSB0000177358930000101
其中,x表示输入的d_Merge像素值,r表示输出的Merge_Enhance像素值,x,r均为[0,1]之间的32位浮点数,d=4145280,b_value表示亮度调节系数,c_value表示对比度调节系数。锐化处理使用了USM算法。USM锐化会使临界像素两端的像素产生与原来像素或明或暗的变化,是一个加强和拉大临界像素反差的操作过程,变不明显的模糊界线为明显界线,使我们看上去感到图像变清晰了。USM算法过程为:对输入Merge_Enhance做高斯模糊处理,模糊半径radius,得到模糊图像blurimage;Merge_Enhance与模糊图像blurimage做差,得到diffimage;如果diffimage的像素值大于阈值threshold,最终锐化图像Merge_Enhance=Merge_Enhance+diffimage*amout/100;如果diffimage的像素值小于等于阈值threshold,Merge_Enhance不做处理。
随后,介绍本发明中所使用的高亮区域提取的处理过程。先计算Merge_Enhance的R,G,B三通道的最大值max,然后根据
Figure GSB0000177358930000102
计算得到b_Mask图像。其中,[start,end]是高亮区域像素值区间。再对b_Mask图像执行方框滤波处理,得到Bright_Mask图像。
最后,介绍本发明中所使用的亮部融合的处理过程。融合公式如下:
Figure GSB0000177358930000111
其中b_Merge表示亮部融合后的像素值,fth表示高亮区域Bright_Mask的像素值,pOrg表示当前视频帧图像frame的像素值,pNew表示Merge_Enhance的像素值。
经过大量测试,申请人发现,当高亮区域像素值区间设置为[start,end]=[100,200]时,亮部融合后的效果相对比较好。
接下来,将参考图3,阐述本发明实施方法的各具体实施步骤:
首先,解码视频文件为单个视频帧。
随后,针对读取的单个视频帧,按照顺序执行如下处理过程:
首先提取当前视频帧frames的暗部d_Mask,并对d_Mask,执行方框滤波处理,得到Dark_Mask图像;
随后,针对当前视频帧frames,执行暗部增强处理,得到Dark_Enhance图像;
随后,针对Dark_Enhance图像,Dark_Mask图像和当前视频帧frames执行暗部融合处理,得到d_Merge图像;
随后,针对d_Merge图像,执行亮度和对比度调节,锐化处理,得到Merge_Enhance图像;
随后,针对Merge_Enhance图像,执行高亮区域b_Mask提取,并对b_Mask执行方框滤波,得到Bright_Mask图像;
随后,针对Bright_Mask图像,Merge_Enhance图像和当前视频帧frames执行亮部融合操作,得到b_Merge图像;
最后,针对b_Merge图像,执行编码处理。
当所有的视频帧处理完毕后,输出编码得到的新视频。
具体的,以下以电影“海上钢琴师”中的某单个视频帧(图4,分辨率1920*1080)为例,说明对其进行的处理过程。首先,对图4执行暗部区域提取处理(公式1),如果G>Max(R,B),令v1=1-(G-Y)/15,将暗部区域提取结果进行归一化(公式2),其中[start,end]=[30,40],再进行方框滤波处理,得到Dark_Mask图像(图5);其次,对图4进行暗部增强处理(公式3),得到Dark_Enhance图像(图6),其中暗部增强系数d_value=0.15;其次,对图4,图5和图6进行暗部融合处理(公式4),得到d_Merge图像(图7);对图7进行亮度和对比度调节处理(公式5)及USM锐化处理,得到Merge_Enhance图像(图8),其中亮度调节系数b_value=0.1,对比度调节系数c_value=0.1,USM阈值threshold=0,amout=20;其次,对图8进行高亮区域提取(公式6)及方框滤波,得到b_Merge图像(图9),其中[start,end]=[100,200];最后,对图4,图8和图9进行亮部融合处理(公式7),得到最终处理图像(图10)。
处理前的原图参见图4,各步骤处理后的结果以及最终结果参见图5-图10。从视觉效果来看,图6中的效果图比原图通透了很多,暗部细节也丰富了很多;例如,图6中人物衣服上的褶皱比图4更清楚,乐器的质感也比图4更突出;图7比图6的细节轮廓更明显,亮度变得比较柔和;图8比图7在亮度和对比度方面都有所提升,图中乐器看着更有光泽,通透性更好;图10比图8突出了暗部细节,亮部细节,整体图像更有层次感和通透感,清晰度更好一些。
应当理解的是,在提取暗部区域和高亮区域之后,为了保持边缘的过渡自然及比较快的计算速度,使用了方框滤波方法。除了使用方框滤波方法,还可以使用双边滤波、高斯滤波等类似方法;在暗部增强过程中,我们还可以有选择地使用伽玛逆变换,或者拟合适合暗部区域的二次曲线,或者增加锐化等处理。
综上可知,采用上述流程,本发明所实现的视频图像细节增强方法与系统,在提升亮度和对比度,增强暗部细节的同时,很好的保留了高亮区域,避免了高亮区域出现过亮,噪声被放大,细节丢失等情况;使用了方框滤波方法,计算速度快,边缘细节保持效果好;根据不同图像类型,灵活设置暗部和高亮区域,有很大的改进空间;视频图像适用范围广,增强效果显著;没有复杂的计算公式,计算速度快,可以满足实时要求。
该方法与系统可以嵌入在视频编码系统或其它视频处理系统中,也可以放在客户端使用,在改善视频质量的同时提高了视频增强的灵活性。
本发明的上述具体实施方式仅仅用于示例性说明或解释本发明的原理,而不构成对本发明的限制。因此,在不偏离本发明的精神和范围的情况下所做的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。此外,本发明所附权利要求旨在涵盖落入所附权利要求范围和边界、或者这种范围和边界的等同形式内的全部变化和修改例。

Claims (14)

1.一种视频图像处理方法,其特征在于,包括:
解码视频文件,获取单个视频帧;
对于所述的单个视频帧,执行如下处理:
读取当前视频帧图像frame;
对所述当前视频帧图像frame,执行暗部区域d_Mask提取及方框滤波处理,得到Dark_Mask;
对处理的暗部区域Dark_Mask,执行暗部增强处理,得到暗部增强处理结果Dark_Enhance;
对所述当前视频帧图像frame,所述暗部区域Dark_Mask,所述暗部增强处理结果Dark_Enhance,执行融合操作,得到暗部融合结果d_Merge;
对暗部融合结果,执行亮度和对比度调节,锐化处理,得到亮度和对比度调节,锐化处理结果Merge_Enhance;
对所述亮度和对比度调节,锐化处理结果Merge_Enhance,执行高亮区域b_Mask提取及方框滤波处理,得到Bright_Mask;
对所述当前视频帧图像frame,所述亮度和对比度调节,锐化处理结果Merge_Enhance,所述Bright_Mask,执行融合操作,得到亮部融合结果b_Merge;
将所述的单个视频帧的亮部融合结果b_Merge编码输出到新的视频文件;
所述对处理的暗部区域Dark_Mask,执行暗部增强处理,按照以下函数执行:
max_mean=max(mean_R,mean_G,mean_B)
Figure FDA0002851586750000011
a=-(255*(h-128))/d
b=(65025*h-4177920)/d
h=128/(1.0-d_value)
y=(ax+b)x
其中,mean_R,mean_G,mean_B分别表示R,G,B三通道的均值,max(mean_R,mean_G,mean_B)表示R,G,B三通道均值的最大值,max_mean表示当前视频帧图像frame的R,G,B三通道均值的最大值,x表示输入的d_Mask像素值,y表示输出的Dark_Enhance像素值,x,y均为[0,1]之间的32位浮点数,d=4145280,d_value表示暗部增强系数。
2.根据权利要求1所述的方法,其特征在于,所述的暗部区域d_Mask,按照以下函数执行:
Figure FDA0002851586750000021
v1=1-(G-Y)/15G>Max(R,B)
Figure FDA0002851586750000022
d_Mask=d_Mask*v2
其中,d_Mask表示输出的暗部区域像素值,[start,end]是设置的暗部区域像素值区间,Y=0.299*R+0.587*G+0.114*B+0.5,R,G,B表示所述当前视频帧图像frame的红、绿、蓝三个颜色通道,Max(R,B)表示R通道和B通道的最大值。
3.根据权利要求1所述的方法,其特征在于,所述的处理的暗部区域Dark_Mask是对暗部区域d_Mask经过方框滤波处理得到的。
4.根据权利要求1所述的方法,其特征在于,所述的执行融合操作,得到暗部融合结果d_Merge,按照以下函数执行:
fth=pMask/255
d_Merge=fth*pOrg+(1-fth)*pNew
其中,d_Merge表示暗部融合后的像素值,fth表示处理的暗部区域Dark_Mask的像素值,pOrg表示当前视频帧图像frame的像素值,pNew表示Dark_Enhance的像素值。
5.根据权利要求1所述的方法,其特征在于,所述的执行亮度和对比度调节,锐化处理,得到亮度和对比度调节,锐化处理结果Merge_Enhance,按照以下函数执行:
a=-(255*(h-128))/d
b=(65025*h-4177920)/d
h=128/(1.0-b_value)
y=(ax+b)x
r=y+(y-128)*c_value
Figure FDA0002851586750000031
其中,x表示输入的d_Merge像素值,r表示输出的Merge_Enhance像素值,x,r均为[0,1]之间的32位浮点数,d=4145280,b_value表示亮度调节系数,c_value表示对比度调节系数。
6.根据权利要求1所述的方法,其特征在于,所述的高亮区域b_Mask,按照以下函数执行:
max=max(R,G,B)
Figure FDA0002851586750000032
其中,b_Mask表示输出的高亮区域像素值,[start,end]是设置的高亮区域像素值区间,R,G,B表示输入图像的红、绿、蓝三个颜色通道,Max(R,G,B)表示R,G,B三通道的最大值,max表示Merge_Enhance的R,G,B三通道的最大值。
7.根据权利要求1所述的方法,其特征在于,所述的Bright_Mask是对高亮区域b_Mask经过方框滤波处理得到的。
8.根据权利要求1所述的方法,其特征在于,所述的执行融合操作,得到亮部融合结果b_Merge,按照以下函数执行:
fth=pMask/255
b_Merge=fth*pOrg+(1-fth)*pNew
其中b_Merge表示亮部融合后的像素值,fth表示高亮区域Bright_Mask的像素值,pOrg表示当前视频帧图像frame的像素值,pNew表示Merge_Enhance的像素值。
9.一种视频图像处理系统,其特征在于,包括:
解码模块,用于将视频文件解码为单个视频帧图像;
增强模块,将所述单个视频帧图像进行一系列的增强操作;
编码模块,将所述增强操作后的视频帧编码为新的视频文件;
所述增强模块包括:
读取单元,用于读取解码后的视频帧图像frame;
Dark_Mask单元,用于从视频帧图像frame提取暗部区域d_Mask,并对d_Mask执行方框滤波处理,得到Dark_Mask;
Dark_Enhance单元,用于对处理的暗部区域Dark_Mask执行暗部增强处理,得到暗部增强处理结果Dark_Enhance;
d_Merge单元,用于对视频帧图像frame,暗部增强处理结果Dark_Enhance和暗部区域Dark_Mask,执行融合操作,得到暗部融合结果d_Merge;
Merge_Enhance单元,用于对暗部融合结果d_Merge,执行亮度和对比度调节,锐化处理,得到亮度和对比度调节,锐化处理结果Merge_Enhance;
Bright_Mask单元,用于从Merge_Enhance提取高亮区域b_Mask,并对b_Mask执行方框滤波处理,得到Bright_Mask;
b_Merge单元,用于对视频帧图像frame,Merge_Enhance和Bright_Mask,执行融合操作,得到亮部融合结果b_Merge;
编码模块,用于将所述的单个视频帧的亮部融合结果b_Merge编码输出到新的视频文件;
所述对处理的暗部区域Dark_Mask执行暗部增强处理,按照以下函数执行:
max_mean=max(mean_R,mean_G,mean_B)
Figure FDA0002851586750000051
a=-(255*(h-128))/d
b=(65025*h-4177920)/d
h=128/(1.0-d_value)
y=(ax+b)x
其中,mean_R,mean_G,mean_B分别表示R,G,B三通道的均值,max(mean_R,mean_G,mean_B)表示R,G,B三通道均值的最大值,max_mean表示当前视频帧图像frame的R,G,B三通道均值的最大值,x表示输入的d_Mask像素值,y表示输出的Dark_Enhance像素值,x,y均为[0,1]之间的32位浮点数,d=4145280,d_value表示暗部增强系数。
10.根据权利要求9所述的系统,其特征在于,所述的暗部区域d_Mask,按照以下函数执行:
Figure FDA0002851586750000052
v1=1-(G-Y)/15G>Max(R,B)
Figure FDA0002851586750000061
d_Mask=d_Mask*v2
其中,d_Mask表示输出的暗部区域像素值,[start,end]是设置的暗部区域像素值区间,Y=0.299*R+0.587*G+0.114*B+0.5,R,G,B表示所述视频帧图像frame的红、绿、蓝三个颜色通道,Max(R,B)表示R通道和B通道的最大值。
11.根据权利要求9所述的系统,其特征在于,所述的执行融合操作,得到暗部融合结果d_Merge,按照以下函数执行:
fth=pMask/255
d_Merge=fth*pOrg+(1-fth)*pNew
其中,d_Merge表示暗部融合后的像素值,fth表示处理的暗部区域Dark_Mask的像素值,pOrg表示当前视频帧图像frame的像素值,pNew表示Dark_Enhance的像素值。
12.根据权利要求9所述的系统,其特征在于,所述的执行亮度和对比度调节,锐化处理,得到亮度和对比度调节,锐化处理结果Merge_Enhance,按照以下函数执行:
a=-(255*(h-128))/d
b=(65025*h-4177920)/d
h=128/(1.0-b_value)
y=(ax+b)x
r=y+(y-128)*c_value
Figure FDA0002851586750000062
其中,x表示输入的d_Merge像素值,r表示输出的Merge_Enhance像素值,x,r均为[0,1]之间的32位浮点数,d=4145280,b_value表示亮度调节系数,c_value表示对比度调节系数。
13.根据权利要求9所述的系统,其特征在于,所述的高亮区域b_Mask,按照以下函数执行:
max=max(R,G,B)
Figure FDA0002851586750000071
其中,b_Mask表示输出的高亮区域像素值,[start,end]是高亮区域像素值区间,R,G,B表示输入图像的红、绿、蓝三个颜色通道,Max(R,G,B)表示R,G,B三通道的最大值,max表示Merge_Enhance的R,G,B三通道的最大值。
14.根据权利要求9所述的系统,其特征在于,所述的执行融合操作,得到亮部融合结果b_Merge,按照以下函数执行:
fth=pMask/255
b_Merge=fth*pOrg+(1-fth)*pNew
其中b_Merge表示亮部融合后的像素值,fth表示高亮区域Bright_Mask的像素值,pOrg表示当前视频帧图像frame的像素值,pNew表示Merge_Enhance的像素值。
CN201810959301.5A 2018-08-22 2018-08-22 一种视频图像细节增强方法与系统 Active CN109167892B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810959301.5A CN109167892B (zh) 2018-08-22 2018-08-22 一种视频图像细节增强方法与系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810959301.5A CN109167892B (zh) 2018-08-22 2018-08-22 一种视频图像细节增强方法与系统

Publications (2)

Publication Number Publication Date
CN109167892A CN109167892A (zh) 2019-01-08
CN109167892B true CN109167892B (zh) 2021-05-07

Family

ID=64896486

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810959301.5A Active CN109167892B (zh) 2018-08-22 2018-08-22 一种视频图像细节增强方法与系统

Country Status (1)

Country Link
CN (1) CN109167892B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114494083B (zh) * 2022-04-14 2022-07-29 杭州雄迈集成电路技术股份有限公司 一种自适应提升视频通透性方法和系统

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120288168A1 (en) * 2011-05-09 2012-11-15 Telibrahma Convergent Communications Pvt. Ltd. System and a method for enhancing appeareance of a face
CN202394507U (zh) * 2011-08-26 2012-08-22 上海国际技贸联合有限公司 一种可视性增强芯片
CN102957919A (zh) * 2012-11-14 2013-03-06 四川长虹电器股份有限公司 一种数字图像亮度增强方法
CN103002291B (zh) * 2012-12-06 2014-12-03 杭州藏愚科技有限公司 一种摄像机宽动态图像增强方法及装置
CN103971330B (zh) * 2013-02-05 2017-10-20 腾讯科技(深圳)有限公司 图像增强方法及装置
WO2016197015A1 (en) * 2015-06-05 2016-12-08 Longeva Llc Personal care products: kit and methods of use and making

Also Published As

Publication number Publication date
CN109167892A (zh) 2019-01-08

Similar Documents

Publication Publication Date Title
Fu et al. Retinex-based perceptual contrast enhancement in images using luminance adaptation
Parthasarathy et al. An automated multi scale retinex with color restoration for image enhancement
US20200273154A1 (en) Image enhancement method and system
WO2016206087A1 (zh) 一种低照度图像处理方法和装置
US9135681B2 (en) Image chroma noise reduction
Nithyananda et al. Review on histogram equalization based image enhancement techniques
EP1242975B1 (en) Digital imaging
US7881554B2 (en) Method for correcting a digital image
Ke et al. BiTA/SWCE: Image enhancement with bilateral tone adjustment and saliency weighted contrast enhancement
Zotin Fast algorithm of image enhancement based on multi-scale retinex
CN111861896A (zh) 一种面向uuv的水下图像色彩补偿与恢复方法
CN111161177B (zh) 图像自适应降噪方法和装置
Jia et al. Real-time content adaptive contrast enhancement for see-through fog and rain
CN201726464U (zh) 一种新的视频图像锐化处理装置
CN109345479B (zh) 一种视频监控数据的实时预处理方法及存储介质
Albu et al. One scan shadow compensation and visual enhancement of color images
Zhang et al. A novel tone mapping method for high dynamic range image by incorporating edge-preserving filter into method based on retinex
CN109167892B (zh) 一种视频图像细节增强方法与系统
CN114092407A (zh) 一种视频会议共享文档清晰化处理方法和装置
Wang et al. Retinex algorithm on changing scales for haze removal with depth map
CN117252773A (zh) 基于自适应颜色校正和导向滤波的图像增强方法及系统
Asari et al. Nonlinear enhancement of extremely high contrast images for visibility improvement
Tang et al. Sky-preserved image dehazing and enhancement for outdoor scenes
Chandana et al. An optimal image dehazing technique using dark channel prior
Raju et al. Modified self—Adaptive Plateau Histogram Equalization with mean threshold for brightness preserving and contrast enhancement

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant