CN105203159A - 单通道可见光与红外图像采集融合监测系统 - Google Patents

单通道可见光与红外图像采集融合监测系统 Download PDF

Info

Publication number
CN105203159A
CN105203159A CN201510662921.9A CN201510662921A CN105203159A CN 105203159 A CN105203159 A CN 105203159A CN 201510662921 A CN201510662921 A CN 201510662921A CN 105203159 A CN105203159 A CN 105203159A
Authority
CN
China
Prior art keywords
image sensor
infrared
visible light
monitoring system
visible
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201510662921.9A
Other languages
English (en)
Inventor
黄凯
柳德伟
曾延安
张洋南生
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
WUHAN SANJIANG CLP TECHNOLOGY Co Ltd
Original Assignee
WUHAN SANJIANG CLP TECHNOLOGY Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by WUHAN SANJIANG CLP TECHNOLOGY Co Ltd filed Critical WUHAN SANJIANG CLP TECHNOLOGY Co Ltd
Priority to CN201510662921.9A priority Critical patent/CN105203159A/zh
Publication of CN105203159A publication Critical patent/CN105203159A/zh
Pending legal-status Critical Current

Links

Abstract

本发明公开了一种单通道可见光与红外图像采集融合监测系统,包括双波段前端光学镜头、分光器、可见光图像传感器和红外图像传感器;双波段前端光学镜头设置在单通道的前端,分光器设置在该双波段前端光学镜头的后方,分光器将光分为两束,其中一束光为透射的红外光束,通过红外图像传感器接收,另一束光为反射的可见光光束,通过可见光图像传感器接收;可见光图像传感器接收的可见光经采集、处理后,通过通讯传输电路发送出去;红外图像传感器接收的红外光经采集、处理后,通过通讯传输电路发送出去。本发明可实现单通道双光谱图像的高准确度实时融合。

Description

单通道可见光与红外图像采集融合监测系统
技术领域
本发明涉及双光谱图像监测系统,尤其涉及一种单通道可见光与红外图像采集融合监测系统。
背景技术
在某些工业设备状态监控领域中,需要在观察识别目标物外观的同时又能得到目标物体的温度分布信息,这种双光谱图像融合技术能够直观生动、快速准确的识别发热目标物体的整体形态及温度分布,可以显著提升目标识别及状态监测效率。目前国内外对于可见光和红外图像双光谱融合的系统都采用了两套各自独立的光学通道设计方案,双光学通道物理上不同轴,视场上必然存在偏差,使用时必须针对不同距离的目标进行配准适配。这种双光学通道系统只有目标物距离不变时时才能实现两幅图像的准确配准融合,而当相机和目标相对位置发生改变时,必须进行重新配准,现有的任何处理器都无法实现同视场运动目标不同距离的双光谱图像的实时配准融合。
发明内容
本发明要解决的技术问题在于针对现有技术中传统双光路监测系统存在的双光实时配准融合的缺陷,提供一种可实现双光谱高准确度的实时融合的单通道可见光与红外图像采集融合监测系统。
本发明解决其技术问题所采用的技术方案是:
提供一种单通道可见光与红外图像采集融合监测系统,包括双波段前端光学镜头、分光器、可见光图像传感器和红外图像传感器;
所述双波段前端光学镜头设置在单通道的前端,分光器设置在该双波段前端光学镜头的后方,分光器将光分为两束,其中一束光为透射的红外光束,通过红外图像传感器接收,另一束光为反射的可见光光束,通过可见光图像传感器接收;
该监测系统还包括可见光图像传感器驱动与数据采集电路和可见光信号处理电路,所述可见光图像传感器接收的可见光经采集、处理后,通过通讯传输电路发送出去;
该监测系统还包括红外图像传感器驱动与数据采集电路和红外信号处理电路,所述红外图像传感器接收的红外光经采集、处理后,通过通讯传输电路发送出去。
本发明所述的监测系统中,所述可见光信号处理电路和所述红外信号处理电路集成在一个电路板上。
本发明所述的监测系统中,该监测系统还包括反射器,设置在所述分光器与所述可见光图像传感器之间,改变所述分光器反射的可见光的光路,使可见光入射到所述可见光图像传感器的探测阵列上。
本发明所述的监测系统中,所述可见光图像传感器前方还设有波段调整器。
本发明所述的监测系统中,所述可见光图像传感器为可见光CMOS或CCD。
本发明所述的监测系统中,所述红外图像传感器为红外UFPA探测器。
本发明产生的有益效果是:本发明采用单一光学通道设计,通过将双波段前端光学镜头设置在单通道的前端,并通过分光器将光分为两束,其中透射的红外光束通过红外图像传感器接收,反射的可见光光束通过可见光图像传感器接收;再分别采集和处理红外光和可见光,最后实现双光融合输出。本发明保证了可见光、红外光物理上的绝对同轴,无论目标远或近、静或动都能实现双光谱高准确度的实时融合。
附图说明
下面将结合附图及实施例对本发明作进一步说明,附图中:
图1是本发明实施例单通道可见光与红外光双波段图像融合系统组成示意图;
图2是本发明实施例单通道可见光与红外光双波段图像融合系统电路原理框图;
图3是本发明实施例单通道可见光与红外光双波段图像融合系统底层嵌入式软件结构框图;
图4是本发明实施例单通道可见光与红外光双波段图像融合系统中全双波段前端光学镜头的结构示意图;
图5是本发明实施例单通道可见光与红外光双波段图像融合中的波段调整器的结构示意图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅用以解释本发明,并不用于限定本发明。
本发明实施例的单通道图像融合系统是以单通道同时对目标进行双波段光学成像,并通过对可见光和长波红外图像的像素级融合实现对目标的视觉信息和温度信息的实时分辨。因此,该系统光学成像部分的作用是通过单一光学成像孔径,也即光学单通道,同时接收目标反射或发射的可见光波段和红外波段的光波能量,将其通过光学变换分别清晰地成像在系统的光传感器上,如可见光CMOS或CCD和红外UFPA探测器上。
如图1所示,本发明实施例的单通道可见光与红外图像采集融合监测系统,包括双波段前端光学镜头10、分光器20、可见光图像传感器40和红外图像传感器30。
双波段前端光学镜头10设置在单通道的前端,能将两个波段的光能量同时汇聚在后续的分光器20上;双波段前端光学镜头10的结构如图4所示,可见光调整镜头结构示意图如图5所示。分光器20设置在该双波段前端光学镜头的后方,分光器20将光分为两束,其中一束光为透射的红外光束,通过红外图像传感器30接收,另一束光为反射的可见光光束,通过可见光图像传感器40接收。本发明的一个实施例中,可见光图像传感器40可选择可见光CMOS或CCD,红外图像传感器30可选用红外UFPA探测器。
如图2所示,该监测系统还包括可见光图像传感器的驱动与数据采集电路80和可见光信号处理电路51可见光图像传感器40接收的可见光经采集、处理后,形成可见光图像信息,通过通讯传输电路发送出去。
该监测系统还包括红外图像传感器的驱动与数据采集电路90和红外信号处理电路52,红外图像传感器30接收的红外光经采集、处理后,形成红外图像信息,通过通讯传输电路发送出去。
本发明的一个较佳实施例中,可见光和红外图像数据的采集采取同步时序设计,可见光图像传感器采用CMOS,红外图像传感器采用采用非制冷焦平面阵列UFPA,两者的驱动电路采用同一主频时钟信号,可实现两个波段图像的严格同时采集,保证了图像融合的实时性。
本发明的一个具体实施例中,系统电路组成部分如图2所示,其工作原理为:光学镜头将可见光和红外光信号分波段聚焦在可见光图像传感器CMOS或CCD和红外焦平面阵列UFPA上,可见光经CMOS或CCD驱动与数据采集后经处理电路,再由通讯传输电路发送给上位控制器。红外通道经UFPA驱动、红外数据采集、处理后,也由通讯接口发送给上位控制器。
本发明的一个实施例中,如图1所示,可见光信号处理电路40和红外信号处理电路40集成在一个电路板50上。
如图1所示,当使用集成的电路板50时,需要改变分光器20的其中一束出射光的光路,若改变可见光的光路,则需要在分光器20与可见光图像传感器之间设置一个反射器60,改变分光器20反射的可见光的光路,使可见光入射到可见光图像传感器40的探测阵列上。相应地,如果电路板50放置在分光器20的反射光处,则需要在分光器20与红外图像传感器30之间设置一个反射器。
本发明的一个实施例中,如图1所示,可见光图像传感器40前方还设有波段调整器70,以消除两个不同波段的相差,其结构示意图如图5所示。
本发明的一个实施例中,根据设计要求,单通道图像融合系统要求在视场角范围内对目标清晰成像,可见光波段输出RGB彩色图像,而对8-14μm长波红外输出灰度图像,其中所采用的红外UFPA探测器与可见光CMOS或CCD图像传感器像元间隔、像素大小相互匹配。单通道图像融合系统的光学成像系统是一种覆盖可见光和长波红外波段的宽波段混合光学成像系统。该系统在可见光波段和长波红外波段对像差校正的要求不同,且考虑到图像融合的要求,该系统应保证在物方具有相同的视场角和成像区域,即视场匹配。
本发明可通过软件的方式实现传感器的驱动和数据采集,根据所运行的硬件平台不同,可分为底层嵌入式软件与系统机软件两大组成部分。
底层嵌入式软件运行于嵌入式硬件平台,其作用是驱动图像采集硬件电路,实现目标红外图像和可见光彩色图像的采集和预处理以及与系统机通过无线网络进行数据交换等功能。系统机软件运行于PC平台,其作用是通过通讯网络与底层嵌入式平台交换数据,对所接收的视频图像数据进行处理与分析,并对结果进行实时显示和保存,底层嵌入式软件结构框图见说明书附图图3所示。
综上,本发明只需单个光学镜头,采用同轴光路设计,在光路中加入分束器进行分光,使红外和可见光具有相同的视场,不仅减少了有效载荷的体积和重量,而且能够实现不同距离目标双波段图像的像素级融合,比采用双镜头成像后的图像融合具有本质上的优势,实现了动态目标的实时图像融合。
应当理解的是,对本领域普通技术人员来说,可以根据上述说明加以改进或变换,而所有这些改进和变换都应属于本发明所附权利要求的保护范围。

Claims (6)

1.一种单通道可见光与红外图像采集融合监测系统,其特征在于,包括双波段前端光学镜头、分光器、可见光图像传感器和红外图像传感器;
所述双波段前端光学镜头设置在单通道的前端,分光器设置在该双波段前端光学镜头的后方,分光器将光分为两束,其中一束光为透射的红外光束,通过红外图像传感器接收,另一束光为反射的可见光光束,通过可见光图像传感器接收;
该监测系统还包括可见光驱动与数据采集电路和可见光信号处理电路,所述可见光图像传感器接收的可见光经采集、处理后,通过通讯传输电路发送出去;
该监测系统还包括红外驱动与数据采集电路和红外信号处理电路,所述红外图像传感器接收的红外光经采集、处理后,通过通讯传输电路发送出去。
2.根据权利要求1所述的监测系统,其特征在于,所述可见光信号处理电路和所述红外信号处理电路集成在一个电路板上。
3.根据权利要求2所述的监测系统,其特征在于,该监测系统还包括反射器,设置在所述分光器与所述可见光图像传感器之间,改变所述分光器反射的可见光的光路,使可见光入射到所述可见光图像传感器的探测阵列上。
4.根据权利要求3所述的监测系统,其特征在于,所述可见光图像传感器前方还设有波段调整器。
5.根据权利要求1所述的监测系统,其特征在于,所述可见光图像传感器为可见光CMOS或CCD。
6.根据权利要求1所述的监测系统,其特征在于,所述红外图像传感器为红外UFPA探测器。
CN201510662921.9A 2015-10-14 2015-10-14 单通道可见光与红外图像采集融合监测系统 Pending CN105203159A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510662921.9A CN105203159A (zh) 2015-10-14 2015-10-14 单通道可见光与红外图像采集融合监测系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510662921.9A CN105203159A (zh) 2015-10-14 2015-10-14 单通道可见光与红外图像采集融合监测系统

Publications (1)

Publication Number Publication Date
CN105203159A true CN105203159A (zh) 2015-12-30

Family

ID=54950966

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510662921.9A Pending CN105203159A (zh) 2015-10-14 2015-10-14 单通道可见光与红外图像采集融合监测系统

Country Status (1)

Country Link
CN (1) CN105203159A (zh)

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107800936A (zh) * 2017-11-08 2018-03-13 信利光电股份有限公司 一种摄像模组
CN107820056A (zh) * 2017-11-16 2018-03-20 上海易密值半导体技术有限公司 一种基于液体镜头的双波段光纤传输智能工业相机
CN108335330A (zh) * 2017-12-31 2018-07-27 华中科技大学 一种图谱协同实时处理系统
CN108387944A (zh) * 2018-02-01 2018-08-10 北京理工大学 小型化可见光和长波红外双波段视频融合的生命探测仪
CN109063701A (zh) * 2018-08-08 2018-12-21 合肥英睿系统技术有限公司 一种红外图像中目标的标记方法、装置、设备及存储介质
CN109348116A (zh) * 2018-11-28 2019-02-15 国网电力科学研究院武汉南瑞有限责任公司 单通道可见光与红外图像采集融合监测系统
CN109508588A (zh) * 2017-09-15 2019-03-22 杭州海康威视数字技术股份有限公司 监控方法、装置、系统、电子设备及计算机可读存储介质
CN109521495A (zh) * 2018-12-20 2019-03-26 安徽源典科技有限公司 一种双波段成像探测装置及方法
CN111028188A (zh) * 2016-09-19 2020-04-17 杭州海康威视数字技术股份有限公司 分光融合的图像采集设备
CN113055571A (zh) * 2021-03-10 2021-06-29 中国科学院半导体研究所 长波红外与可见光共孔径复合成像相机及系统
CN113520594A (zh) * 2021-05-31 2021-10-22 浙江大学 一种双光路3d成像模组的装配方法

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS587131A (ja) * 1981-07-06 1983-01-14 Konishiroku Photo Ind Co Ltd カメラの撮影拒離測定装置
CN200986646Y (zh) * 2006-12-22 2007-12-05 重庆伟联科技有限公司 乳腺红外双波段摄像头
CN101888487A (zh) * 2010-06-02 2010-11-17 中国科学院深圳先进技术研究院 高动态范围视频成像系统和图像生成方法
CN102323670A (zh) * 2011-09-06 2012-01-18 中国科学院长春光学精密机械与物理研究所 紫外、可见光和近红外三波段光学成像系统
CN102495474A (zh) * 2011-12-09 2012-06-13 北京理工大学 一种可见光/长波红外宽波段共调焦光学成像系统
CN104655283A (zh) * 2014-03-03 2015-05-27 上海膺芙光电科技有限公司 共光路红外光/可见光双波段显微系统

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS587131A (ja) * 1981-07-06 1983-01-14 Konishiroku Photo Ind Co Ltd カメラの撮影拒離測定装置
CN200986646Y (zh) * 2006-12-22 2007-12-05 重庆伟联科技有限公司 乳腺红外双波段摄像头
CN101888487A (zh) * 2010-06-02 2010-11-17 中国科学院深圳先进技术研究院 高动态范围视频成像系统和图像生成方法
CN102323670A (zh) * 2011-09-06 2012-01-18 中国科学院长春光学精密机械与物理研究所 紫外、可见光和近红外三波段光学成像系统
CN102495474A (zh) * 2011-12-09 2012-06-13 北京理工大学 一种可见光/长波红外宽波段共调焦光学成像系统
CN104655283A (zh) * 2014-03-03 2015-05-27 上海膺芙光电科技有限公司 共光路红外光/可见光双波段显微系统

Cited By (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111028188A (zh) * 2016-09-19 2020-04-17 杭州海康威视数字技术股份有限公司 分光融合的图像采集设备
CN111028188B (zh) * 2016-09-19 2023-05-02 杭州海康威视数字技术股份有限公司 分光融合的图像采集设备
US11275952B2 (en) 2017-09-15 2022-03-15 Hangzhou Hikvision Digital Technology Co., Ltd. Monitoring method, apparatus and system, electronic device, and computer readable storage medium
CN109508588A (zh) * 2017-09-15 2019-03-22 杭州海康威视数字技术股份有限公司 监控方法、装置、系统、电子设备及计算机可读存储介质
CN107800936A (zh) * 2017-11-08 2018-03-13 信利光电股份有限公司 一种摄像模组
CN107820056A (zh) * 2017-11-16 2018-03-20 上海易密值半导体技术有限公司 一种基于液体镜头的双波段光纤传输智能工业相机
CN108335330A (zh) * 2017-12-31 2018-07-27 华中科技大学 一种图谱协同实时处理系统
CN108387944A (zh) * 2018-02-01 2018-08-10 北京理工大学 小型化可见光和长波红外双波段视频融合的生命探测仪
CN109063701A (zh) * 2018-08-08 2018-12-21 合肥英睿系统技术有限公司 一种红外图像中目标的标记方法、装置、设备及存储介质
CN109348116A (zh) * 2018-11-28 2019-02-15 国网电力科学研究院武汉南瑞有限责任公司 单通道可见光与红外图像采集融合监测系统
CN109521495A (zh) * 2018-12-20 2019-03-26 安徽源典科技有限公司 一种双波段成像探测装置及方法
CN113055571A (zh) * 2021-03-10 2021-06-29 中国科学院半导体研究所 长波红外与可见光共孔径复合成像相机及系统
CN113520594A (zh) * 2021-05-31 2021-10-22 浙江大学 一种双光路3d成像模组的装配方法
CN113520594B (zh) * 2021-05-31 2023-08-08 浙江大学 一种双光路3d成像模组的装配方法

Similar Documents

Publication Publication Date Title
CN105203159A (zh) 单通道可见光与红外图像采集融合监测系统
CN109348116A (zh) 单通道可见光与红外图像采集融合监测系统
CN103477186B (zh) 立体摄像装置
CN201293684Y (zh) 三通道实时测温热像仪
KR101799522B1 (ko) 교환렌즈 형태를 채용한 3차원 영상 획득 장치
CN104822033A (zh) 一种红外与可见光图像融合的视觉传感器及其使用方法
CN105676305B (zh) 一种共口径多视场图谱协同探测系统与方法
CN103323113B (zh) 基于光场成像技术的多光谱成像仪
US20120050533A1 (en) Mems based surveillance system and a method for using same
CN102789114A (zh) 一种可见-红外双通摄像机
CN101813520A (zh) 一种二维光谱测量装置
WO2018026147A1 (ko) 라이다 장치
CN108181782A (zh) 无盲点的折返式全景成像仪
CN102062945B (zh) 一种空间变分辨率红外双色成像探测系统
CN207910882U (zh) 远程夜视全彩成像系统
CN207995235U (zh) 一种分光成像装置
CN107270867B (zh) 一种主动测距系统以及方法
Gerken et al. Military reconnaissance platform for the spectral range from the visible to the MWIR
CN108540691B (zh) 相机装置和用于拍摄至少两种波段光线的方法
CN201780164U (zh) 一种二维光谱测量装置
CN205300765U (zh) 双波段红外探测系统
CN110456371B (zh) 一种激光雷达系统及相关测量方法
CN106597422A (zh) 小型化光电被动测距装置
CN103139477A (zh) 一种3d相机及获得立体像的方法
CN107846542A (zh) 一种3d摄像头及3d图像的生成方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20151230

WD01 Invention patent application deemed withdrawn after publication