CN103618888A - 一种基于fpga的视频图像增强方法和装置 - Google Patents

一种基于fpga的视频图像增强方法和装置 Download PDF

Info

Publication number
CN103618888A
CN103618888A CN201310686574.4A CN201310686574A CN103618888A CN 103618888 A CN103618888 A CN 103618888A CN 201310686574 A CN201310686574 A CN 201310686574A CN 103618888 A CN103618888 A CN 103618888A
Authority
CN
China
Prior art keywords
video
pixel
field picture
mapping function
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201310686574.4A
Other languages
English (en)
Other versions
CN103618888B (zh
Inventor
黄科杰
张羽
杨泽钰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Skyworth Digital Technology Co Ltd
Original Assignee
Chuangwei Quanxin Safety And Protection Science And Technology Co Ltd Shenzh
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Chuangwei Quanxin Safety And Protection Science And Technology Co Ltd Shenzh filed Critical Chuangwei Quanxin Safety And Protection Science And Technology Co Ltd Shenzh
Priority to CN201310686574.4A priority Critical patent/CN103618888B/zh
Publication of CN103618888A publication Critical patent/CN103618888A/zh
Application granted granted Critical
Publication of CN103618888B publication Critical patent/CN103618888B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Image Processing (AREA)
  • Picture Signal Circuits (AREA)

Abstract

本发明适用于图像处理技术领域,提供了一种基于FPGA的视频图像增强方法和装置,包括:输入视频流,对所述视频流进行串并变换,生成奇像素视频流和偶像素视频流;生成奇像素视频流的第一帧图像的直方图;对第一帧图像的直方图进行增强处理得到第一帧图像的映射函数;根据相邻帧图像的相似性,用上一帧图像的映射函数处理得到当前帧图像的映射函数,生成奇像素图像增强视频流;复制所述奇像素视频流的所有帧图像的映射函数处理所述偶像素视频流,得到偶像素图像增强视频流,将所述奇像素图像增强视频流与所述偶像素图像增强视频流进行并串变换,输出图像增强视频流。本发明节省了视频图像增强的资源消耗,提高了视频图像增强的实时性。

Description

一种基于FPGA的视频图像增强方法和装置
技术领域
本发明属于图像处理技术领域,尤其涉及一种基于FPGA的视频图像增强方法和装置。
背景技术
在安防监控行业,下雨、大雾或者阴霾天气或者夜间能见度低,摄像机拍摄图像具有不同程度的显示效果差、监控画面难以辨认的问题。传统的基于光学的透雾摄像机和电子透雾摄像机受镜头昂贵成本的限制,很难普及,且透雾摄像机不能解决夜间照度低的问题。
现有的图像增强方法有两大类:一类是非模型的图像增强方法,通过增强图像的对比度来达到图像增强的目的;另一类是基于模型的图像复原方法,该类方法考查图像退化的原因,将图像退化过程进行建模,采用逆向处理,以完成图像的复原。基于模型的图像复原方法大多通过C语言实现,用于处理单幅图像,算法比较复杂,处理实时视频图像时需要高速DSP(Digital SignalProcessing,数字信号处理),而且实时处理的分辨率和帧率不高。采用FPGA(Field Programmable Gate Array,现场可编程门阵列)基于模型的图像复原方法做全局处理自适应能力不强,细节效果不理想;做局部处理实时性不高,资源消耗较大。
综上所述,现有的图像增强方式实时性差、资源消耗大。
发明内容
本发明实施例的目的在于提供一种基于FPGA的视频图像增强方法,旨在解决现有的视频图像增强方法实时性差、资源消耗大的问题。
本发明实施例是这样实现的,一种基于FPGA的视频图像增强方法,包括:
在现场可编程门阵列FPGA平台上,输入视频流,对所述视频流进行串并变换,生成奇像素视频流和偶像素视频流;
统计所述奇像素视频流的第一帧图像的各个灰度值的像素数,生成所述第一帧图像的直方图;
对所述第一帧图像的直方图进行增强处理得到所述第一帧图像的映射函数;
根据相邻帧图像的相似性,用所述第一帧图像的映射函数处理得到第二帧图像的映射函数,以此类推,用上一帧图像的映射函数处理得到当前帧图像的映射函数,生成奇像素图像增强视频流;
复制所述奇像素视频流的所有帧图像的映射函数,用复制的所述映射函数处理所述偶像素视频流,得到偶像素图像增强视频流,将所述奇像素图像增强视频流与所述偶像素图像增强视频流进行并串变换,输出图像增强视频流。
本发明实施例的另一目的在于提供一种基于FPGA的视频图像增强装置,包括:
串并变换模块,用于在现场可编程门阵列FPGA平台上,输入视频流,对所述视频流进行串并变换,生成奇像素视频流和偶像素视频流;
直方图统计模块,用于统计所述奇像素视频流的第一帧图像的各个灰度值的像素数,生成所述第一帧图像的直方图;
映射函数生成模块,用于对所述第一帧图像的直方图进行增强处理得到所述第一帧图像的映射函数;
奇像素图像增强视频流生成模块,用于根据相邻帧图像的相似性,用所述第一帧图像的映射函数处理得到第二帧图像的映射函数,以此类推,用上一帧图像的映射函数处理得到当前帧图像的映射函数,生成奇像素图像增强视频流;
图像增强视频流输出模块,用于复制所述奇像素视频流的所有帧图像的映射函数,用复制的所述映射函数处理所述偶像素视频流,得到偶像素图像增强视频流,将所述奇像素图像增强视频流与所述偶像素图像增强视频流进行并串变换,输出图像增强视频流。
本发明实施例通过在现场可编程门阵列FPGA平台上对输入的视频流进行串并变换生成奇像素视频流和偶像素视频流,只对奇像素视频流进行直方图统计,再根据相邻帧图像的相似性对奇像素视频流进行图像增强,从而节省了视频图像增强的资源消耗,由此提高了视频图像增强的实时性。
附图说明
图1是本发明实施例提供的基于FPGA的视频图像增强方法的实现流程图;
图2是本发明实施例提供的基于FPGA的视频图像增强方法步骤S102中对图像进行直方图均衡化的示例图;
图3是本发明实施例提供的基于FPGA的视频图像增强方法步骤S102中对图像进行直方图均衡化后过增强现象的示例图;
图4是本发明实施例提供的基于FPGA的视频图像增强方法中对原始图像直方图进行限幅裁剪的示意图;
图5是本发明实施例提供的基于FPGA的视频图像增强方法中对图2中原始图像直方图进行限幅阈值为总像素数c的0.5%时的限幅裁剪的图像增强效果图;
图6是本发明实施例提供的基于FPGA的视频图像增强方法中对图2中原始图像直方图进行限幅阈值为总像素数的1.0%时的限幅裁剪的图像增强效果图;
图7是本发明实施例提供的基于FPGA的视频图像增强方法中对图2中原始图像直方图进行限幅阈值为总像素数的1.5%时的限幅裁剪的图像增强效果图;
图8是本发明实施例提供的基于FPGA的视频图像增强方法中对图3中原始图像直方图进行限幅阈值为总像素数的1.0%时的限幅裁剪的图像增强效果图;
图9是本发明实施例提供的基于FPGA的视频图像增强方法中对图3中原始图像直方图进行限幅阈值为总像素数的1.5%时的限幅裁剪的图像增强效果图;
图10是本发明实施例提供的基于FPGA的视频图像增强方法中对图2中原始图像直方图进行限幅阈值为0.5%、拉伸阈值为35的图像增强效果图;
图11是本发明实施例提供过的基于FPGA的视频图像增强装置的结构框图;
图12是本发明另一实施例提供过的基于FPGA的视频图像增强装置的结构框图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
本发明实施例通过在现场可编程门阵列FPGA平台上对输入的视频流进行串并变换生成奇像素视频流和偶像素视频流,只对奇像素视频流进行直方图统计,再根据相邻帧图像的相似性对奇像素视频流进行图像增强,从而节省了视频图像增强的资源消耗,由此提高了视频图像增强的实时性。
本发明实施例可应用于多个领域,例如,安防监控系统、工业控制领域等,在此不作限定。本发明实施例可应用于多个场合,例如,银行等金融系统监控项目、电力系统监控项目、石化行业监控项目、机房监控项目、监狱系统监控项目、交通系统监控项目、校园监控项目和网吧监控项目等,在此不作限定。
具体地,本发明实施例可应用于监视器、广告机和大屏幕拼接控制器等对视频图像有增强要求的设备。本发明实施例可以以极少的资源占用率移植到现有的带FPGA的设备上;本发明实施例也可以通过增加一个低成本的FPGA集成在监控系统后端设备如监视器、大屏幕拼接控制器上,用于实现雨雾天、阴霾天和低照度等低质量图像的增强,从而不更换摄像机就可以实现透雾、低照度情况下的图像增强处理,由此大大减少了更换前端摄像头的巨额花费。
图1示出了本发明实施例提供的基于FPGA的视频图像增强方法的实现流程图,详述如下:
在步骤S101中,在现场可编程门阵列FPGA平台上,输入视频流,对所述视频流进行串并变换,生成奇像素视频流和偶像素视频流。
在这里,在FPGA(Field Programmable Gate Array,现场可编程门阵列)平台上,使用寄存器对输入的视频流进行串并变换。奇像素视频流是指横向像素为第2n+1个像素的视频流,偶像素视频流是指横向像素为第2n个像素的视频流,其中n为非负整数。
在步骤S102中,统计所述奇像素视频流的第一帧图像的各个灰度值的像素数,生成所述第一帧图像的直方图。
需要说明的是,在黑白图像中,灰度级数是指像素之间的亮暗差别;在彩色图像中,灰度级数表现为像素之间颜色的不同。灰度级数越多,图像层次越清楚逼真。在黑白图像中,灰度值表现为亮度,例如,白色的灰度值为255,黑色的灰度值为0。在彩色图像中,灰度值表现为色彩的深浅程度,在每个像素中,R(Red,红)、G(Green,绿)、B(Blue,蓝)三个通道各有一个灰度值。
下面对直方图均衡算法进行说明:
Figure BDA0000436521300000061
其中,L为第一帧图像灰度级数,nk为第一帧图像中灰度值为sk的像素数,n为第一帧图像的像素总数。计算累积直方图各项,取整扩展,tk=int[(L-1)tk+0.5)]。映射对应关系为
Figure BDA0000436521300000066
为了方便编程,可以不对统计直方图进行归一化,得到p(k)=nk,k=0,1,...,L-1,p(k)为第一帧图像中灰度值为sk的像素数,
Figure BDA0000436521300000063
把tk值量化到0~L-1区间,得到统计直方图均衡化的映射函数: T k = ( L - 1 ) t k n , k = 0,1 , . . . , L - 1 .
Figure BDA0000436521300000065
包含一个乘法运算和一个除法运算,在实际应用中,若为8位每像素,则L=256,为了进一步节省资源消耗和提高运算速度,(L-1)×tk=255×tk=(tk<<8)-tk,其中(tk<<8)为tk左移8位,从而,乘法运算转换为移位运算和减法运算,大大减少了计算量。
由于FPGA进行整数除法时结果只取整数位,为了保证四舍五入,对上述算式更改为 T k = ( t k < < 8 ) - t k + n 2 n .
图2示出了对图像进行直方图均衡化的示例图。上图为原始图像,原始图像受薄雾影响,图像不清晰,色彩暗淡。经过直方图均衡化,下图相对上图清晰了很多,对比度较高。但是,下图右侧的景物显得很不自然,出现了过增强的现象。
直方图均衡化处理灰度值比较集中的图像时,过增强现象更为明显,如图3所示。在图3中,下图相对上图整体亮度提升了,但是出现了许多不自然的地方,如天空的噪声被增强了,上图原本能看清的左下边招牌经过直方图均衡化后反而没法分辨了。
进一步地,步骤S102所述统计所述奇像素视频流的第一帧图像的各个灰度值的像素数,生成所述第一帧图像的直方图具体为:
统计所述奇像素视频流的第一帧图像的红、绿、蓝三个通道的各个灰度值的像素数;
将所述三个通道的各个灰度值的像素数的累加,生成所述第一帧图像的直方图。
彩色图像可以对R、G、B三个通道分别进行直方图均衡化处理,也可以将R、G、B三个通道合并进行直方图均衡化处理。由于每个通道的色彩总量不同,分开处理会导致各个通道的分布不均衡,致使图像产生偏色。实验证明,将R、G、B三个通道合并处理不会产生偏色,效果较好。
在步骤S103中,对所述第一帧图像的直方图进行增强处理得到所述第一帧图像的映射函数。
进一步地,步骤S103所述对所述第一帧图像的直方图进行增强处理得到所述第一帧图像的映射函数包括:
对所述第一帧图像的直方图超出限幅阈值的像素数进行裁剪,将所述超出限幅阈值的像素数平均分配给裁剪后的所述第一帧图像的直方图,得到所述第一帧图像的映射函数。
图4示出了本发明实施例提供了对原始图像直方图进行限幅裁剪的示意图。在本发明实施例中,针对原始图像像素值过于集中,对应的直方图的峰值很高,造成图像过增强的问题,采用限幅裁剪来实现对图像增强强度的控制。
参照图4,定义限幅阈值Y,对直方图p(k)超出限幅阈值Y的部分进行裁剪,裁剪后得到p′(k),超出限幅阈值Y的部分的像素数为S,将S平均分配给裁剪后的p′(k),得到虽然裁剪分配后的直方图又会有一部分超出限幅阈值Y,但是超出的值较小,可以不用再重新裁剪。
对图2中原始图像直方图进行限幅裁剪,参照图5、图6和图7。图5是限幅阈值为总像素数的0.5%时的图像增强效果图。图6是限幅阈值为总像素数的1.0%时的图像增强效果图。图7是限幅阈值为总像素数的1.5%时的图像增强效果图。从图5、图6和图7可以看出,适当设置限幅阈值既可以控制图像增强的强度,对抗过增强,同时能增加算法的适应性。
对图3中原始图像直方图进行限幅裁剪,参照图8和图9。图8是限幅阈值为总像素数的1.0%时的图像增强效果图。图9是限幅阈值为总像素数的1.5%时的图像增强效果图。可以看出,对于低亮度的图像以及没有过增强的现象,图像的还原较好。
进一步地,步骤S103所述对所述第一帧图像的直方图进行增强处理得到所述第一帧图像的映射函数包括:
量化所述第一帧图像的直方图,生成第一映射函数Tk
记所述第一映射函数Tk中像素数大于拉伸阈值的最小灰度值为M,对所述第一映射函数Tk进行拉伸得到所述第一帧图像的映射函数其中,L为灰度级数,k=0,1,…,L-1。
对于量化后得到的第一映射函数,当直方图的限幅阈值越大,分配累积后量化丢失的灰度级就越多。对第一映射函数进行自适应拉伸,可以在使用较小的直方图限幅阈值时保持细节。通过拉伸可以在图像增强的同时保持图像的细节。
对于8位每像素的图像而言,原本灰度值的范围为0~255,进行拉伸后灰度值的范围为M~255。拉伸具有自适应性是因为,对于同一拉伸阈值,不同图像有其对应的M值,能根据图像本身特点调整M值。拉伸就是为了将第一映射函数中我们关心的那部分值间距拉开,从而增强那部分的对比度,由此保持了图像的细节。
参照图10,上图限幅阈值为0.5%,拉伸阈值为0,下图限幅阈值为0.5%,拉伸阈值为35。进行拉伸后,图像中的厚雾几乎去除了,没有过增强现象,层次感较强。
在步骤S104中,根据相邻帧图像的相似性,用所述第一帧图像的映射函数处理得到第二帧图像的映射函数,以此类推,用上一帧图像的映射函数处理得到当前帧图像的映射函数,生成奇像素图像增强视频流。
在这里,如果对视频流图像一帧一帧单独处理,则必须对当前帧图像数据进行缓存处理,待当前帧图像数据传输完成后,得到直方图,计算出映射函数后,再将存储的当前帧的图像数据输出。若对于1920×1080、60Hz、8位每像素的视频来说,每帧图像数据量很大,普通FPGA内部存储容量不能满足要求,需要外扩DDR(Double Data Rate,双倍速率同步动态随机存储器)来进行存储,增加了硬件成本,且消耗大量FPGA引脚和控制DDR相关的逻辑资源。
在实际应用中,由于视频流中相邻两帧图像具有极大的相似性,因此,可利用FPGA并行处理的优势,使用上一帧图像的映射函数处理当前帧,在映射当前帧的同时计算当前帧的映射函数,用于处理下一帧。输入视频流没有进行缓存,即视频流在有效数据区,图像数据由固定的映射函数实时处理输出,同时图像数据进入直方图统计模块进行当前帧图像的直方图统计,利用视频流的帧同步间隙,将统计完成的直方图计算生成映射函数,等待下一帧图像数据的到来。
进一步地,步骤S101所述在现场可编程门阵列FPGA平台上,输入视频流,对所述视频流进行串并变换,生成奇像素视频流和偶像素视频流具体为:
在现场可编程门阵列FPGA平台上,实时输入视频流,对所述实时输入的视频流进行串并变换,生成奇像素视频流和偶像素视频流。
在本发明实施例中,输入视频流不进行缓存,即视频流在有效数据区,对实时输入的视频流进行实时处理。在这里,利用两个相邻帧图像的相似性和映射函数与图像像素点的位置无关性,由此不用存储每一帧图像也可以实现实时处理每一帧图像。这种处理方式不会出现高速运动图像的失真问题,而且增强效果与单帧单处处理效果无区别。
在步骤S105中,复制所述奇像素视频流的所有帧图像的映射函数,用复制的所述映射函数处理所述偶像素视频流,得到偶像素图像增强视频流,将所述奇像素图像增强视频流与所述偶像素图像增强视频流进行并串变换,输出图像增强视频流。
若对于1920×1080、60Hz、8位每像素的视频来说,每帧图像数据量很大,对于处理速度要求比较高,对于低成本FPGA来说,时序要求比较高,布线要求比较严格。如果应用在资源消耗比较大的FPGA上,将很难满足FPGA时序要求,程序的稳定性和移植的成功率都会下降。
在本发明实施例中,虽然将输入视频流分成两路并行处理,但是只对奇像素视频流进行直方图统计和映射函数计算,增加的另一路只是将上一路的处理结果直接复制过来,只增加了极少量的视频串并和并串转换逻辑资源与存储映射函数的RAM(Random Access Memory,随机存储器)资源。
在这里,只对奇像素视频流进行直方图统计是利用了图像数据的空间连续性和分布的随机性。经过大量实验表明,间隔采样统计的结果与连续采样统计的结果几乎相同。因此,利用这一特性,在降低FPGA处理速度要求的同时,只增加了少量的资源消耗。
本发明实施例通过在现场可编程门阵列FPGA平台上对输入的视频流进行串并变换生成奇像素视频流和偶像素视频流,只对奇像素视频流进行直方图统计,再根据相邻帧图像的相似性对奇像素视频流进行图像增强,从而节省了视频图像增强的资源消耗,由此提高了视频图像增强的实时性。
图11示出了本发明实施例提供的基于FPGA的视频图像增强装置的结构框图,为了便于说明,仅示出了与本实施例相关的部分。参照图11,所述装置包括:
串并变换模块111,在现场可编程门阵列FPGA平台上,输入视频流,对所述视频流进行串并变换,生成奇像素视频流和偶像素视频流。
直方图统计模块112,统计所述奇像素视频流的第一帧图像的各个灰度值的像素数,生成所述第一帧图像的直方图。
映射函数生成模块113,对所述第一帧图像的直方图进行增强处理得到所述第一帧图像的映射函数。
奇像素图像增强视频流生成模块114,根据相邻帧图像的相似性,用所述第一帧图像的映射函数处理得到第二帧图像的映射函数,以此类推,用上一帧图像的映射函数处理得到当前帧图像的映射函数,生成奇像素图像增强视频流。
图像增强视频流输出模块115,复制所述奇像素视频流的所有帧图像的映射函数,用复制的所述映射函数处理所述偶像素视频流,得到偶像素图像增强视频流,将所述奇像素图像增强视频流与所述偶像素图像增强视频流进行并串变换,输出图像增强视频流。
进一步地,所述映射函数生成模块113包括:
限幅裁剪子模块,对所述第一帧图像的直方图超出限幅阈值的像素数进行裁剪,将所述超出限幅阈值的像素数平均分配给裁剪后的所述第一帧图像的直方图,得到所述第一帧图像的映射函数。
进一步地,所述映射函数生成模块113包括:
量化子模块,量化所述第一帧图像的直方图,生成第一映射函数Tk
映射函数拉伸子模块,记所述第一映射函数Tk中像素数大于拉伸阈值的最小灰度值为M,对所述第一映射函数Tk进行拉伸得到所述第一帧图像的映射函数
Figure BDA0000436521300000121
其中,L为灰度级数,k=0,1,…,L-1。
优选地,所述直方图统计模块112具体用于:
统计所述奇像素视频流的第一帧图像的红、绿、蓝三个通道的各个灰度值的像素数;
将所述三个通道的各个灰度值的像素数的累加,生成所述第一帧图像的直方图。
优选地,所述串1具体用于:
在现场可编程门阵列FPGA平台上,实时输入视频流,对所述实时输入的视频流进行串并变换,生成奇像素视频流和偶像素视频流。
可选地,所述装置还包括分辨率检测模块,所述分辨率检测模块用于检测视频分辨率,给视频增加视频分辨率参数。
可选地,所述装置还包括I2C(Inter-Integrated Circuit,两线式串行总线)接口,所述I2C接口用于提供外部MCU(Micro Control Unit,微控制单元)控制视频增强的相关寄存器进行使能开关、强度控制等。
图12示出了本发明另一实施例提供的基于FPGA的视频图像增强装置的结构框图。
参照图12:
直方图统计模块121可以由一个20位宽256深度的双口RAM、控制寄存器和控制逻辑子模块组成,双扣RAM由FPGA内嵌的块RAM构成。直方图统计就是实时将输入的8比特数据对应的RAM地址数据加1,每帧图像数据传输结束且计算得到映射数据后,由状态控制模块123给予控制清零。
运算控制模块122主要用于将直方图统计数据根据I2C配置参数和分辨率数据进行限幅裁剪、累加分配、量化和拉伸,主要负责数据的逻辑运算。
状态控制模块123根据输入的视频同步信号区分视频流的数据区和同步区,当处于数据区时,直方图统计模块121实时统计各个灰度值的像素数,同时数据经由映射模块124同步映射输出,当传输完成一帧图像,进入同步区,直方图RAM写使能关闭,由读端口输出数据进入运算控制模块122进行运算后得到映射数据,写入映射模块124RAM中,然后运算控制模块122控制直方图统计单元将统计RAM清零,等待下一帧数据再进行处理。
本发明实施例应用在监视器上,增加一个处理小板对输入的信号进行增强处理;应用在屏幕拼接内置拼接盒上,将FPGA集成在板子上,通过机芯与FPGA通信,控制图像增强的开关与强度。
奇像素图像增强视频流和偶像素图像增强视频流通过并串变换模块125得到图像增强视频流。并串变换模块125可以通过寄存器来实现。
本发明实施例通过在现场可编程门阵列FPGA平台上对输入的视频流进行串并变换生成奇像素视频流和偶像素视频流,只对奇像素视频流进行直方图统计,再根据相邻帧图像的相似性对奇像素视频流进行图像增强,从而节省了视频图像增强的资源消耗,由此提高了视频图像增强的实时性。
以上所述仅为本发明的较佳实施例而已,并不用以限制本发明,凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等,均应包含在本发明的保护范围之内。

Claims (10)

1.一种基于FPGA的视频图像增强方法,其特征在于,包括:
在现场可编程门阵列FPGA平台上,输入视频流,对所述视频流进行串并变换,生成奇像素视频流和偶像素视频流;
统计所述奇像素视频流的第一帧图像的各个灰度值的像素数,生成所述第一帧图像的直方图;
对所述第一帧图像的直方图进行增强处理得到所述第一帧图像的映射函数;
根据相邻帧图像的相似性,用所述第一帧图像的映射函数处理得到第二帧图像的映射函数,以此类推,用上一帧图像的映射函数处理得到当前帧图像的映射函数,生成奇像素图像增强视频流;
复制所述奇像素视频流的所有帧图像的映射函数,用复制的所述映射函数处理所述偶像素视频流,得到偶像素图像增强视频流,将所述奇像素图像增强视频流与所述偶像素图像增强视频流进行并串变换,输出图像增强视频流。
2.如权利要求1所述的方法,其特征在于,所述对所述第一帧图像的直方图进行增强处理得到所述第一帧图像的映射函数包括:
对所述第一帧图像的直方图超出限幅阈值的像素数进行裁剪,将所述超出限幅阈值的像素数平均分配给裁剪后的所述第一帧图像的直方图,得到所述第一帧图像的映射函数。
3.如权利要求1所述的方法,其特征在于,所述对所述第一帧图像的直方图进行增强处理得到所述第一帧图像的映射函数包括:
量化所述第一帧图像的直方图,生成第一映射函数Tk
记所述第一映射函数Tk中像素数大于拉伸阈值的最小灰度值为M,对所述第一映射函数Tk进行拉伸得到所述第一帧图像的映射函数
Figure FDA0000436521290000021
其中,L为灰度级数,k=0,1,…,L-1。
4.如权利要求1所述的方法,其特征在于,所述统计所述奇像素视频流的第一帧图像的各个灰度值的像素数,生成所述第一帧图像的直方图具体为:
统计所述奇像素视频流的第一帧图像的红、绿、蓝三个通道的各个灰度值的像素数;
将所述三个通道的各个灰度值的像素数的累加,生成所述第一帧图像的直方图。
5.如权利要求1所述的方法,其特征在于,所述在现场可编程门阵列FPGA平台上,输入视频流,对所述视频流进行串并变换,生成奇像素视频流和偶像素视频流具体为:
在现场可编程门阵列FPGA平台上,实时输入视频流,对所述实时输入的视频流进行串并变换,生成奇像素视频流和偶像素视频流。
6.一种基于FPGA的视频图像增强装置,其特征在于,包括:
串并变换模块,用于在现场可编程门阵列FPGA平台上,输入视频流,对所述视频流进行串并变换,生成奇像素视频流和偶像素视频流;
直方图统计模块,用于统计所述奇像素视频流的第一帧图像的各个灰度值的像素数,生成所述第一帧图像的直方图;
映射函数生成模块,用于对所述第一帧图像的直方图进行增强处理得到所述第一帧图像的映射函数;
奇像素图像增强视频流生成模块,用于根据相邻帧图像的相似性,用所述第一帧图像的映射函数处理得到第二帧图像的映射函数,以此类推,用上一帧图像的映射函数处理得到当前帧图像的映射函数,生成奇像素图像增强视频流;
图像增强视频流输出模块,用于复制所述奇像素视频流的所有帧图像的映射函数,用复制的所述映射函数处理所述偶像素视频流,得到偶像素图像增强视频流,将所述奇像素图像增强视频流与所述偶像素图像增强视频流进行并串变换,输出图像增强视频流。
7.如权利要求6所述的装置,其特征在于,所述映射函数生成模块包括:
限幅裁剪子模块,用于对所述第一帧图像的直方图超出限幅阈值的像素数进行裁剪,将所述超出限幅阈值的像素数平均分配给裁剪后的所述第一帧图像的直方图,得到所述第一帧图像的映射函数。
8.如权利要求6所述的装置,其特征在于,所述映射函数生成模块包括:
量化子模块,用于量化所述第一帧图像的直方图,生成第一映射函数Tk
映射函数拉伸子模块,用于记所述第一映射函数Tk中像素数大于拉伸阈值的最小灰度值为M,对所述第一映射函数Tk进行拉伸得到所述第一帧图像的映射函数
Figure FDA0000436521290000031
其中,L为灰度级数,k=0,1,…,L-1。
9.如权利要求6所述的装置,其特征在于,所述直方图统计模块具体用于:
统计所述奇像素视频流的第一帧图像的红、绿、蓝三个通道的各个灰度值的像素数;
将所述三个通道的各个灰度值的像素数的累加,生成所述第一帧图像的直方图。
10.如权利要求6所述的装置,其特征在于,所述串并变换模块具体用于:
在现场可编程门阵列FPGA平台上,实时输入视频流,对所述实时输入的视频流进行串并变换,生成奇像素视频流和偶像素视频流。
CN201310686574.4A 2013-12-12 2013-12-12 一种基于fpga的视频图像增强方法和装置 Active CN103618888B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201310686574.4A CN103618888B (zh) 2013-12-12 2013-12-12 一种基于fpga的视频图像增强方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201310686574.4A CN103618888B (zh) 2013-12-12 2013-12-12 一种基于fpga的视频图像增强方法和装置

Publications (2)

Publication Number Publication Date
CN103618888A true CN103618888A (zh) 2014-03-05
CN103618888B CN103618888B (zh) 2015-10-14

Family

ID=50169592

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201310686574.4A Active CN103618888B (zh) 2013-12-12 2013-12-12 一种基于fpga的视频图像增强方法和装置

Country Status (1)

Country Link
CN (1) CN103618888B (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105354803A (zh) * 2015-10-23 2016-02-24 中国科学院上海高等研究院 截断直方图均衡实现装置及方法
CN106846234A (zh) * 2016-12-22 2017-06-13 捷开通讯(深圳)有限公司 一种基于fpga的图像视频增强方法、系统及设备
CN107547886A (zh) * 2016-09-12 2018-01-05 郑州蓝视科技有限公司 视频图像增强系统
CN108495070A (zh) * 2018-02-28 2018-09-04 北京德为智慧科技有限公司 实现数字视频单像素输入输出多像素处理的方法及装置
CN111447425A (zh) * 2015-05-26 2020-07-24 松下电器(美国)知识产权公司 显示方法和显示装置
CN114584701A (zh) * 2021-11-26 2022-06-03 钧捷科技(北京)有限公司 采用fpga实现图像直方图的调节以及动态范围扩展的方法

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6642962B1 (en) * 1999-09-01 2003-11-04 Neomagic Corp. Merged pipeline for color interpolation and edge enhancement of digital images
CN102036079A (zh) * 2010-12-16 2011-04-27 北京航空航天大学 一种基于全方向预测误差直方图修改的可逆图像水印算法
WO2012090814A1 (ja) * 2010-12-28 2012-07-05 シャープ株式会社 表示装置、その駆動方法、および表示用駆動回路
JP2013044910A (ja) * 2011-08-24 2013-03-04 Seiko Epson Corp 電気光学装置および電子機器
CN103002197A (zh) * 2012-09-27 2013-03-27 深圳市创维群欣安防科技有限公司 一种信号数据处理方法、装置及智能终端
CN103065277A (zh) * 2012-12-21 2013-04-24 深圳市创维群欣安防科技有限公司 数字图像信息处理方法及装置

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6642962B1 (en) * 1999-09-01 2003-11-04 Neomagic Corp. Merged pipeline for color interpolation and edge enhancement of digital images
CN102036079A (zh) * 2010-12-16 2011-04-27 北京航空航天大学 一种基于全方向预测误差直方图修改的可逆图像水印算法
WO2012090814A1 (ja) * 2010-12-28 2012-07-05 シャープ株式会社 表示装置、その駆動方法、および表示用駆動回路
JP2013044910A (ja) * 2011-08-24 2013-03-04 Seiko Epson Corp 電気光学装置および電子機器
CN103002197A (zh) * 2012-09-27 2013-03-27 深圳市创维群欣安防科技有限公司 一种信号数据处理方法、装置及智能终端
CN103065277A (zh) * 2012-12-21 2013-04-24 深圳市创维群欣安防科技有限公司 数字图像信息处理方法及装置

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111447425A (zh) * 2015-05-26 2020-07-24 松下电器(美国)知识产权公司 显示方法和显示装置
CN105354803A (zh) * 2015-10-23 2016-02-24 中国科学院上海高等研究院 截断直方图均衡实现装置及方法
CN107547886A (zh) * 2016-09-12 2018-01-05 郑州蓝视科技有限公司 视频图像增强系统
CN106846234A (zh) * 2016-12-22 2017-06-13 捷开通讯(深圳)有限公司 一种基于fpga的图像视频增强方法、系统及设备
CN106846234B (zh) * 2016-12-22 2020-09-25 Tcl移动通信科技(宁波)有限公司 一种基于fpga的图像视频增强方法、系统及设备
CN108495070A (zh) * 2018-02-28 2018-09-04 北京德为智慧科技有限公司 实现数字视频单像素输入输出多像素处理的方法及装置
CN114584701A (zh) * 2021-11-26 2022-06-03 钧捷科技(北京)有限公司 采用fpga实现图像直方图的调节以及动态范围扩展的方法

Also Published As

Publication number Publication date
CN103618888B (zh) 2015-10-14

Similar Documents

Publication Publication Date Title
CN103618888B (zh) 一种基于fpga的视频图像增强方法和装置
US11961431B2 (en) Display processing circuitry
CN102637293B (zh) 运动图像处理装置及运动图像处理方法
KR20220000333A (ko) 해상도가 감소한 신경 네트워크 및 이전 프레임으로부터의 마스크를 사용하는 비디오 프레임 분할
CN105653224A (zh) 一种拼接显示系统及其显示方法
CN103530847A (zh) 一种红外图像增强方法
CN110544213A (zh) 一种基于全局和局部特征融合的图像去雾方法
CN104157005A (zh) 一种基于图像的hdr光照渲染方法
CN111294520B (zh) 一种基于fpga的实时幸运成像方法及系统
CN107862672A (zh) 图像去雾的方法及装置
CN103108109A (zh) 一种数字视频降噪系统与方法
CN110691203B (zh) 基于纹理映射的多路全景视频拼接显示方法及其系统
CN105516674B (zh) 一种具有hdr显示功能的监视设备
CN112085767B (zh) 一种基于深度光流跟踪的客流统计方法及系统
CN116863861A (zh) 基于非显性点判断的图像处理方法、设备及可读存储介质
US11450009B2 (en) Object detection with modified image background
CN101355646B (zh) 噪声消除装置及方法
CN113689448B (zh) 一种基于FPGA的Sobel+Ewma边缘检测系统及方法
CN115589455A (zh) 一种基于fpga+arm的夜间视频图像增强系统
CN103051904A (zh) 一种基于浮动像素的数字半调视频处理系统及其方法
CN111784736A (zh) 基于单像元并行计算的运动小目标实时检测系统及方法
CN201898578U (zh) 一种除雾图像采集装置
Xie et al. High definition wide dynamic video surveillance system based on FPGA
CN107146207B (zh) 一种参数优化的低照度图像增强方法
Xing et al. Design of object edge detection system based on FPGA

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
C56 Change in the name or address of the patentee
CP03 Change of name, title or address

Address after: Baolong Baolong Industrial City six road in Longgang District of Shenzhen City, Guangdong Province, No. 1 518000

Patentee after: SHENZHEN SKYWORTH QUNXIN SECURITY TECHNOLOGY CO., LTD.

Address before: 518000 Guangdong city of Shenzhen province Futian District Huaqiang North window of a modern block A 08G

Patentee before: Chuangwei Quanxin Safety and Protection Science and Technology Co., Ltd., Shenzh

TR01 Transfer of patent right

Effective date of registration: 20210720

Address after: 518057 14th floor, block a, Skyworth building, Gaoxin South 1st Road, Nanshan District, Shenzhen City, Guangdong Province (office only)

Patentee after: SHENZHEN SKYWORTH DIGITAL TECHNOLOGY Co.,Ltd.

Address before: 518000 No. 1, Baolong 6th Road, Baolong Industrial City, Longgang District, Shenzhen City, Guangdong Province

Patentee before: SHENZHEN SKYWORTH QUNXIN SECURITY TECHNOLOGY Co.,Ltd.

TR01 Transfer of patent right