CN112991468A - 一种利用波长信息识别红外图片和可见光图片的方法 - Google Patents
一种利用波长信息识别红外图片和可见光图片的方法 Download PDFInfo
- Publication number
- CN112991468A CN112991468A CN201911300486.XA CN201911300486A CN112991468A CN 112991468 A CN112991468 A CN 112991468A CN 201911300486 A CN201911300486 A CN 201911300486A CN 112991468 A CN112991468 A CN 112991468A
- Authority
- CN
- China
- Prior art keywords
- picture
- infrared
- visible light
- image
- characteristic value
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/90—Determination of colour characteristics
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10048—Infrared image
Landscapes
- Engineering & Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Color Television Image Signal Generators (AREA)
Abstract
Description
技术领域
本发明涉及图像处理技术领域,特别涉及一种利用波长信息识别红外图片和可见光图片的方法。
背景技术
随着科技的不断发展,特别是计算机视觉技术的发展,图像处理得到了广泛的应用,举例来说,人脸识别技术中,图像处理是非常重要的,目前人脸识别技术需要用到双摄像头的硬件方案,也就是需要一颗处理器连接两个摄像头,这两颗摄像头一颗为可见光摄像头,一颗为红外摄像头。常用的现有技术术语包括:
红外图片:指通过红外摄像头拍摄到的图像数据;
可见光图片:指通过可见光摄像头拍摄到的图像数据;
ISP:图像信号处理器(ISP)模块是一个完整的摄像机子系统,包括多种先进的图像处理技术,满足高性能摄像机的要求设计。
为了达到高质量的成像效果,我们需要用到图像信号处理器(ISP)来对原始的图像数据进行处理。目前接双摄像头的方案有:
方案1,采用带ISP的摄像头;
方案2,用一个ISP分时处理两个摄像头;
采用方案1成本会提高很多,因为目前我们的CPU已经内置了一个ISP。但采用方案2会遇到一个问题,就是ISP输出数据后无法分辨是哪个摄像头的数据。这样在应用层我们可能会把红外的数据当做可见光的数据进行处理,造成混乱。
下面将用图详细说明,如图1所示,以北京君正集成电路股份有限公司生产的x1830芯片为例,图1中是该芯片跟图像传感器(摄像头)连接的示意图,在x1830芯片(Chip)上内置了ISP,它接了一个图像传感器(CMOS Image Sensor),这是通常的情况。
如图2所示,当采用方案1的时候,需要采用两颗带ISP的非常昂贵的摄像头,CPU中内置的ISP被浪费了。
如图3所示,当采用方案2的时候,两颗普通的摄像头经过分时互用接到CPU内置的ISP中,再输出到DRAM(内存中)。
如图4所示,采用分时互用,比如可能会第一帧输出第一个摄像头的数据,第二帧输出第二个摄像头的数据,第三帧又输出第一个摄像头的数据,第四帧输出第二帧数据,如此循环。
由于在这个过程中ISP接收到的数据并没进行区分,也就是说不管来的是什么数据都进行了同样的处理,而且在处理过程中某一帧数据可能会被丢弃,这样就导致输出的图像数据排列就不是严格的两个摄像头交替的了,这样应用层处理起来就会出现错乱。
发明内容
为了解决上述现有技术中存在的问题,本发明的目的在于:使用较低的成本实现在收到图像数据以后,能够分辨出它是可见光摄像头拍摄的数据还是红外摄像头拍摄的数据。
本方法是结合图像传感器原理,判断可见光和红外光波长的差值,单纯从图像数据就能判断出是红外或者可见光的数据,方法简单。
具体地,本发明提供一种利用波长信息识别红外图片和可见光图片的方法,所述方法包括:
S1.获取图片的初始图像数据;
S2.遍历图片的每个像素;
S3.按照以下公式计算图片的红外特征值:
图片中像素的集合m1:
m1={n1,n2,....},每个像素n,其中包含r,g,b三种颜色值,n={r,g,b},
然后计算x,
当r>=b>=g成立xi=1,
当r>=b>=g不成立xi=0,
然后求x的平均值:
S4.根据红外特征值区分红外图片数据和可见光图片数据。
所述步骤S4中根据红外特征值区分红外图片数据和可见光图片数据具体包括:
1),在普通光照场景下,红外特征值的数值在0.9和1.0之间,图像是红外图片;
2),在普通光照场景下,红外特征值的数值在0.4-0.6,图像是可见光图片。红外特征值的数值优选为0.5,图像是可见光图片。
3),在其他场景下,红外特征值的数值都满足红外图片的大于可见光的图片。
所述的S1中获取图片的初始图像数据是由双摄像头拍摄同一个场景产生的图片。
所述的双摄像头一颗是可见光的摄像头,一颗是红外摄像头。
所述的红外摄像头前面有一层红外滤光片,红外的不可见光大部分通过,而人眼敏感的可见光被反射出去。
图片中任一个像素的红绿蓝的三色值满足:r>b>g。
本申请的优势在于:这样的方法成本低廉,方法简单。使用本发明通过简单的计算方法就可区分出红外图像数据和可见光图像数据,不会导致应用层处理图像时出现错乱,相比现有技术成本更低。
附图说明
此处所说明的附图用来提供对本发明的进一步理解,构成本申请的一部分,并不构成对本发明的限定。
图1是现有技术涉及的芯片跟图像传感器连接的示意图。
图2是现有技术采用带ISP的摄像头的方案示意图。
图3是现有技术用一个ISP分时处理两个摄像头的方案示意图。
图4是采用两颗普通摄像头经过分时互用接到CPU内置的ISP中,再输出到DRAM的示意图。
图5是本发明的方法的简单的示意框图。
图6是本发明涉及的图像传感器的原理示意图。
图7是本发明涉及的一个传感器单元对某波长范围的光线敏感,多个传感器单元组成阵列,形成了图像传感器的示意图。
图8是本发明涉及的彩色光经过传感器阵列后,采集到某个点位的颜色信息的示意图。
图9是本发明可见光的摄像头和红外摄像头的区别示意图。
图10是本发明涉及的实施例中红外图像的范例。
图11是本发明涉及的实施例中可见光图像的范例。
图12是图10对应的红绿蓝图像数据的示意图。
图13是图11对应的红绿蓝图像数据的示意图。
图14是本发明涉及的方法的具体流程图。
具体实施方式
本申请涉及的具体实施方案包括:
如图5所示,本申请的方法的示意图,为了解决现有技术中的问题,在收到图像数据以后,通过计算,分辨出它是可见光摄像头拍摄的数据还是红外摄像头拍摄的数据。
首先,来看图像传感器的原理。如图6所示,一个传感器单元会对某波长范围的光线敏感,而多个传感器单元组成阵列,形成了图像传感器。
然后,如图7所示,阵列中的每个点经过ADC转换成数字信号,最后变成了图像数据。
可见光中包含红绿蓝三原色,像素阵列排列不同波长的敏感单元,达到检测到三原色的目的。如图8所示,彩色光经过传感器阵列后,我们就能采集到某个点位的颜色信息。
知道了可见光成像的原理以后,需要了解接的两个摄像头有什么区别。一颗是可见光的摄像头,一颗是红外摄像头,如图9所示:可见红外图像传感器和可见光传感器的主要区别就是镜头前面的那个透光膜。对于可见光摄像头镜头前有一层泛紫色的增透膜,这个膜能保证可见光大部分通过,而紫色或者红色外的不可见光区域的光线会被反射出去;而对于红外摄像头,它前面有一层红外滤光片,这个滤光片的作用于增透膜几乎正好相反,它保证了红外的不可见光大部分通过,而绿色等人眼敏感的可见光被反射出去。
从以上原理可以看出,取到的图像数据里就包含了不同波长的图像数据。
下面来比较两副真实的图像的红绿蓝信息,如图10,11所示。然后通过工具打开这两幅图,查看他们的红绿蓝图像数据,如图12,13所示。如图12所示,从00偏移量开始,第一个字节是蓝色,第二个字节是绿色,第三个字节是红色,第四个字节无用,每四个字节表示一个像素,后面再按此顺序循环组成一张图片。从图中可以看出,绿色的值普遍都是00,说明绿色光已经大部分被过滤掉了。
然后再比较图13中可见光的数据时可以发现,红绿蓝三色基本上是平衡的。
本方法主要基本原理就是识别两幅图中绿色被过滤的程度来判断两幅图哪张是红外的,哪张是可见光的。另外根据滤光片的原理,在红绿蓝三色当中,被过滤得最多的是绿色,其次是蓝色,最少的是红色,所以图一中莫个像素的红绿蓝的三色值必须大部分都满足:
r>b>g
这个数据是经过大量测试得出的。
以下是从图像中提取红外特征值的计算方法:
图片中像素的集合m1:
m1={n1,n2,....}
每个像素n,中包含r,g,b三种颜色值
n={r,g,b}
然后计算x
当r>=b>=g成立xi=1,
当r>=b>=g不成立xi=0,
然后求x的平均值:
这个值为红外特征值,记作f1
现在对图像p1和图像p2作比较,首先,分别计算p1和p2的特征值:p1f1,p2f1,经过大量数据测试发现,
1)测试发现在普通光照场景下,f1的值在0.9和1.0之间,这时候可以认为是红外图片;
2)测试发现在普通光照场景下,f1的值在0.5左右,这时可以认为图片是可见光图片;
3)在其他场景下,f1的值都满足红外图片的大于可见光的图片。
具体地,本发明的具体实施方法的流程图,如图14所示。
一种利用波长信息识别红外图片和可见光图片的方法,所述方法包括:
S1.获取图片的初始图像数据;
S2.遍历图片的每个像素;
S3.按照以下公式计算图片的红外特征值:
图片中像素的集合m1:
m1={n1,n2,....},每个像素n,其中包含r,g,b三种颜色值,n={r,g,b},
然后计算x,
当r>=b>=g成立xi=1,
当r>=b>=g不成立xi=0,
然后求x的平均值:
S4.根据红外特征值区分红外图片数据和可见光图片数据。
以上所述仅为本发明的优选实施例而已,并不用于限制本发明,对于本领域的技术人员来说,本发明实施例可以有各种更改和变化。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。
Claims (8)
2.根据权利要求1所述的一种利用波长信息识别红外图片和可见光图片的方法,其特征在于,所述步骤S4中根据红外特征值区分红外图片数据和可见光图片数据具体包括:
1),在普通光照场景下,红外特征值的数值在0.9和1.0之间,图像是红外图片;
2),在普通光照场景下,红外特征值的数值在0.4-0.6,图像是可见光图片。
3.根据权利要求2所述的一种利用波长信息识别红外图像和可见光图像的方法,其特征在于,在普通光照场景下,红外特征值的数值优选为0.5,图像是可见光图片。
4.根据权利要求2所述的一种利用波长信息识别红外图像和可见光图像的方法,其特征在于,还包括:在其他场景下,红外特征值的数值都满足红外图片的大于可见光的图片。
5.根据权利要求1所述的一种利用波长信息识别红外图像和可见光图像的方法,其特征在于,所述的S1中获取图片的初始图像数据是由双摄像头拍摄同一个场景产生的图片。
6.根据权利要求5所述的一种利用波长信息识别红外图像和可见光图像的方法,其特征在于,所述的双摄像头一颗是可见光的摄像头,一颗是红外摄像头。
7.根据权利要求6所述的一种利用波长信息识别红外图像和可见光图像的方法,其特征在于,所述的红外摄像头前面有一层红外滤光片,红外的不可见光大部分通过,而人眼敏感的可见光被反射出去。
8.根据权利要求1所述的一种利用波长信息识别红外图像和可见光图像的方法,其特征在于,图片中任一个像素的红绿蓝的三色值满足:r>b>g。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911300486.XA CN112991468A (zh) | 2019-12-17 | 2019-12-17 | 一种利用波长信息识别红外图片和可见光图片的方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911300486.XA CN112991468A (zh) | 2019-12-17 | 2019-12-17 | 一种利用波长信息识别红外图片和可见光图片的方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN112991468A true CN112991468A (zh) | 2021-06-18 |
Family
ID=76342076
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201911300486.XA Pending CN112991468A (zh) | 2019-12-17 | 2019-12-17 | 一种利用波长信息识别红外图片和可见光图片的方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112991468A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114390249A (zh) * | 2021-12-14 | 2022-04-22 | 北京百度网讯科技有限公司 | 视频处理方法、装置、电子设备及存储介质 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP1202214A2 (en) * | 2000-10-31 | 2002-05-02 | Matsushita Electric Industrial Co., Ltd. | Method and apparatus for object recognition |
US6774909B1 (en) * | 2000-01-19 | 2004-08-10 | Keyence Corporation | Method and apparatus for transforming color image into monochromatic image |
CN103270745A (zh) * | 2010-12-07 | 2013-08-28 | 株式会社隆创 | 颜色处理方法、颜色处理装置和颜色处理系统 |
US20160255290A1 (en) * | 2015-02-26 | 2016-09-01 | Dual Aperture International Co., Ltd. | Hybrid image correction for dual-aperture camera |
WO2017133217A1 (en) * | 2016-02-03 | 2017-08-10 | Boe Technology Group Co., Ltd. | Method and apparatus for infrared thermal image contour extraction |
CN108460756A (zh) * | 2018-01-30 | 2018-08-28 | 西安电子科技大学 | 基于统计特征的无参考红外图像质量评价方法 |
US20180247127A1 (en) * | 2015-09-25 | 2018-08-30 | Board Of Regents, The University Of Texas System | Classifying images and videos |
-
2019
- 2019-12-17 CN CN201911300486.XA patent/CN112991468A/zh active Pending
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6774909B1 (en) * | 2000-01-19 | 2004-08-10 | Keyence Corporation | Method and apparatus for transforming color image into monochromatic image |
EP1202214A2 (en) * | 2000-10-31 | 2002-05-02 | Matsushita Electric Industrial Co., Ltd. | Method and apparatus for object recognition |
CN103270745A (zh) * | 2010-12-07 | 2013-08-28 | 株式会社隆创 | 颜色处理方法、颜色处理装置和颜色处理系统 |
US20160255290A1 (en) * | 2015-02-26 | 2016-09-01 | Dual Aperture International Co., Ltd. | Hybrid image correction for dual-aperture camera |
US20180247127A1 (en) * | 2015-09-25 | 2018-08-30 | Board Of Regents, The University Of Texas System | Classifying images and videos |
WO2017133217A1 (en) * | 2016-02-03 | 2017-08-10 | Boe Technology Group Co., Ltd. | Method and apparatus for infrared thermal image contour extraction |
CN108460756A (zh) * | 2018-01-30 | 2018-08-28 | 西安电子科技大学 | 基于统计特征的无参考红外图像质量评价方法 |
Non-Patent Citations (2)
Title |
---|
庞小平: "《遥感制图与应用》", 1 June 2016 * |
谷雨等: "基于分形特征和导引滤波的可见光与红外图像融合算法", 《光电工程》 * |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114390249A (zh) * | 2021-12-14 | 2022-04-22 | 北京百度网讯科技有限公司 | 视频处理方法、装置、电子设备及存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10742889B2 (en) | Image photographing method, image photographing apparatus, and terminal | |
US8018509B2 (en) | Image input processing apparatus and method | |
EP2589226B1 (en) | Image capture using luminance and chrominance sensors | |
US7460160B2 (en) | Multispectral digital camera employing both visible light and non-visible light sensing on a single image sensor | |
CN107481186B (zh) | 图像处理方法、装置、计算机可读存储介质和计算机设备 | |
CN108055452A (zh) | 图像处理方法、装置及设备 | |
CN107704798B (zh) | 图像虚化方法、装置、计算机可读存储介质和计算机设备 | |
CN108259770B (zh) | 图像处理方法、装置、存储介质及电子设备 | |
CN108712608A (zh) | 终端设备拍摄方法和装置 | |
CN109685853B (zh) | 图像处理方法、装置、电子设备和计算机可读存储介质 | |
CN108700472A (zh) | 使用相对的滤光器掩模进行相位检测自动聚焦 | |
EP4109894A1 (en) | Image sensor and image sensitization method | |
CN108053438B (zh) | 景深获取方法、装置及设备 | |
EP3820140A1 (en) | Time-division-multiplexing-based light-supplementing imaging apparatus and method | |
US20160035099A1 (en) | Depth estimation apparatus, imaging device, and depth estimation method | |
CN107563329B (zh) | 图像处理方法、装置、计算机可读存储介质和移动终端 | |
CN107454335A (zh) | 图像处理方法、装置、计算机可读存储介质和移动终端 | |
US11347978B2 (en) | Image processing apparatus, image processing method, and image processing system | |
CN112991468A (zh) | 一种利用波长信息识别红外图片和可见光图片的方法 | |
CN110507283A (zh) | 视网膜相机及其实现方法 | |
CN112990244A (zh) | 一种区分红外图像数据和可见光图像数据的方法 | |
CN107786857B (zh) | 一种图像还原方法及装置 | |
CN106384102A (zh) | 一种带ir卡日夜两用数字网络摄像机火焰检测系统及方法 | |
JP2010276469A (ja) | 画像処理装置及び測距装置の画像処理方法 | |
CN112990243A (zh) | 一种采用分时互用识别红外图像和可见光图像的系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20210618 |
|
RJ01 | Rejection of invention patent application after publication |