CN109963084B - 行人检测红外摄像照明装置 - Google Patents

行人检测红外摄像照明装置 Download PDF

Info

Publication number
CN109963084B
CN109963084B CN201711417590.8A CN201711417590A CN109963084B CN 109963084 B CN109963084 B CN 109963084B CN 201711417590 A CN201711417590 A CN 201711417590A CN 109963084 B CN109963084 B CN 109963084B
Authority
CN
China
Prior art keywords
camera
illumination
infrared
minimum
pedestrian detection
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201711417590.8A
Other languages
English (en)
Other versions
CN109963084A (zh
Inventor
田雨农
苍柏
唐丽娜
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Dalian Roiland Technology Co Ltd
Original Assignee
Dalian Roiland Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Dalian Roiland Technology Co Ltd filed Critical Dalian Roiland Technology Co Ltd
Priority to CN201711417590.8A priority Critical patent/CN109963084B/zh
Publication of CN109963084A publication Critical patent/CN109963084A/zh
Application granted granted Critical
Publication of CN109963084B publication Critical patent/CN109963084B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B15/00Special procedures for taking photographs; Apparatus therefor
    • G03B15/02Illuminating scene
    • G03B15/03Combinations of cameras with lighting apparatus; Flash units
    • G03B15/05Combinations of cameras with electronic flash apparatus; Electronic flash units
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/73Circuitry for compensating brightness variation in the scene by influencing the exposure time
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/74Circuitry for compensating brightness variation in the scene by influencing the scene brightness using illuminating means
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02BCLIMATE CHANGE MITIGATION TECHNOLOGIES RELATED TO BUILDINGS, e.g. HOUSING, HOUSE APPLIANCES OR RELATED END-USER APPLICATIONS
    • Y02B20/00Energy efficient lighting technologies, e.g. halogen lamps or gas discharge lamps
    • Y02B20/40Control techniques providing energy savings, e.g. smart controller or presence detection

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Studio Devices (AREA)
  • Circuit Arrangement For Electric Light Sources In General (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

行人检测红外摄像照明装置,属于双目视觉行人检测领域,用于解决由于夜间光照度较差,导致双目摄像机成像不清晰的问题,技术要点是:主要由双目摄像机、红外照明系统和电路控制系统组成,所述双目摄像机包括第一摄像机和第二摄像机,所述红外照明系统位于第一摄像机和第二摄像机之间,且红外照明系统的红外探照灯光束照射目标的反射光,由第一摄像机和第二摄像机接收,所述的第一摄像机和第二摄像机分别连接对应的数据处理与控制单元,且红外照明系统连接红外照明控制电路。

Description

行人检测红外摄像照明装置
技术领域
本发明属于双目视觉行人检测领域,尤其涉及普通低照度双目摄像机的夜间成像照明装置。
背景技术
随着机动车保有量的快速增长,给人们的生活和出行带来了极大的便利,但由此带来的道路交通事故给各个国家的人民生命财产和国民经济造成巨大的损失。在最近几年发生的多起交通事故中,夜间或者阴天情况下所发生的事故尤为严重。对夜间驾驶问题给予更多的重视是绝对必要的。造成夜间行车危险的因素主要有两个,一是视觉因素,由于夜间光线较差,导致驾驶员看不清楚路况,不能提前注意到前方的潜在危险,这是夜间交通事故发生的主要原因;二是生理因素,夜间是驾驶员生理条件最差的时候,由于不能见到道路两旁的景观,对驾驶员兴奋性刺激小,容易产生驾驶疲劳,造成注意力不集中,对速度和距离的判断不准确。
为了减少交通事故的发生,汽车安全辅助驾驶技术的研究受到各方的普遍关注,并投入大量的人力、物力和财力进行研究开发,以提高汽车的安全性。大量事实证明,由车辆与行人发生碰撞而引发交通事故是导致行人伤亡的主要原因。因此,行人检测是车辆辅助驾驶系统中的关键技术,它能及时地告知驾驶员车辆前方行人的存在,并进行安全预警,减少或避免车辆与行人发生碰撞事故,具有潜在的经济价值和广泛的社会价值。
实现行人探测主要有两种途径:一种是基于可见光图像,另一种是基于红外图像。由于普通摄像机采集的可见光图像易受光照的影响,对图像中目标的识别存在很大难度,且在夜晚、雨天或有雾的天气尤其是缺少可见光光源的条件下,能见距离和能见度极差,根本无法使用。与可见光成像相比,红外成像具有显著的优点:由于红外图像是热成像,因此具有强大的“穿透”能力,可以透过黑暗和烟雾,看到在可见光波段无法看见的感兴趣的目标。由于红外成像可以在夜间、成像光线不足等情况下发现目标,可实现远距离、全天候观察,因此基于红外图像的夜间人体目标检测近年来也越来越受到人们的关注。
发明内容
本发明为解决由于夜间光照度较差,导致双目摄像机成像不清晰的问题,技术要点是:一种行人检测红外摄像照明装置,主要由双目摄像机、红外照明系统和电路控制系统组成,所述双目摄像机包括第一摄像机和第二摄像机,所述红外照明系统位于第一摄像机和第二摄像机之间,且红外照明系统的红外探照灯光束照射目标的反射光,由第一摄像机和第二摄像机接收,所述的第一摄像机和第二摄像机分别连接对应的数据处理与控制单元,且红外照明系统连接红外照明控制电路。
有益效果:本发明实施的目的是提供一种双目行人检测的夜间红外摄像照明装置,该装置在双目行人检测白天摄像装置上加装一个红外照明系统,该红外照明系统需要满足双目夜间红外摄像的照度要求,解决由于夜间光照度较差,导致双目摄像机成像不清晰,影响双目行人检测效果,使双目行人检测系统满足夜间使用要求。
附图说明
图1为行人检测红外摄像照明装置结构示意图;
图2为光谱响应图;
图3为光学结构图;
图4为光度计算图。
1.第一摄像机,2.第二摄像机,3.红外照明系统,4.数据处理与控制单元,5.红外照明控制电路,6.输入输出接口。
具体实施方式
基于行人检测系统的双目摄像机夜间成像照明装置是主动红外技术设备,也是波长780nm一1000nm的近红外摄像敏感装置。该装置是利用850nm或940nm的“红外灯”产生红外辐射,发出人眼看不见的红外光去照射景物和环境,利用双目普通低照度CMOS摄像机接收周围环境反射回来的红外光,从而实现夜间双目摄像功能,完成行人检测。主动照明可以充分利用红外探照灯的狭窄光束照射目标,使目标与背景形成较大的反差,在视场中突出出来。因此在夜间辅助驾驶系统、夜间双目行人检测和夜间瞄准等方面有广阔应用前景。近红外摄像机的价格也比红外热像仪便宜很多。
基于行人检测的夜间双目红外摄像照明装置的主要功能是满足双目行人检测摄像机在夜间的摄像要求,根据双目行人检测摄像机的成像要求,设计双目行人检测的夜间红外摄像照明装置,其具体实施方法是:
(1)大功率红外LED阵列灯的选型及光照度计算
双目行人检测的夜间红外摄像对目标的照度有一定要求,由于我们采用普通白光摄像机,及光谱相应范围:350nm~1100nm。图2为硅基彩色相机的光谱响应图,由图可知,近红外光850nm波长的光谱响应比940nm的光谱响应大3~4倍,所以,选择红外LED灯的光谱中心波长为850nm,选择该波长的近红外光另一个原因是,该波长的LED性价比高。
普通白光摄像机应选择低照度高感应相机,例如双目行人检测的夜间红外摄像照明装置选择的双目相机的型号为:OmniVision公司的OV10633图像传感器,该图像传感器的敏感度为:3650mV/lux-sec,最大信噪比:39dB,动态范围:115dB。50°时的暗电流:2.5mV/sec。
为了避免普通LED无法均匀照亮夜视面而形成中间过亮,两边过暗的“手电筒效应”,大功率红外LED灯采用点阵列式LED,具体型号为:SFH4716A或者SFH4740。
这两种型号的阵列式LED的中心波长都为:850nm,半波宽度:30nm。
SFH4716AS的电功率为:3.35W,光辐射通量为:1.9W,半功率角为:±75°。
SFH4740的电功率:15.5W,光辐射通量为:4.3W,半功率角为:±60°;
根据OV10633图像传感器的性能指标,可以得到该传感器的最大信噪比时的照度为:0.06lux。
在满月天顶时,地面的照度为0.2lux,无月时的地面照度为:0.0003lux。地面反射率为:沥青路0.03,光泽路0.2.如果采用大功率红外LED灯SFH4716AS,以此为例进行,进行行人检测系统的夜间大功率LED照明装置设计。
A、OV10633图像传感器的最大曝光时间的光通量计算
根据OV10633图像传感器的性能指标,最大曝光时间间隔为:828tROW,像素时钟频率为27MHz,最大曝光时间间隔:
Tex=828tROW=828*1312*(1/27)=40234.6us=40.236ms=0.040236s。
1lux照度的最大像素响应为:3650mV/lux-sec*0.040236sec=146.8614mV/lux。
在最大曝光时间间隔内,最大的暗电压为:2.5mV/sec*0.040236s=0.10059mV。
最小的照度为:(0.10059mV)/(146.8614mV/lux)=0.0006lux。
因此,为了在OV10633图像传感器的感光像元产生响应,还需要考虑其光谱响应。如图所示,在波长λ=850nm处,其光谱响应系数为:0.7,所以最大曝光时间时,其像元的最小照度为:
0.0006lux/0.7=0.00086lux。
B、行人检测红外摄像照明装置的摄像系统的光照度计算
行人检测红外摄像照明装置的照明光学系统的设计的目的是设计一种合适的照明系统,使得相应的低照度摄像机能够在夜间完成清晰成像。
由上述的推导可知,OV10633图像传感器的成像最小照度为0.00086lux。下面就行人检测红外摄像系统的光照度进行推导:
设物方照度为E‘,像方照度为E′,由工程光学理论可知
Figure GDA0003640272380000041
其中,
Figure GDA0003640272380000042
为相对孔径,其值为1/2,K为透过率,其值约为0.9,当像面为最小照度时,即E′min=0.00086lux时,物方最小照度Emin为:Emin=0.0152lux。
以上物方最小照度是不计反射率系数的最小照度。由于环境中的各种物体的反射率系数相差较大,我们通过资料求证,以的确良军装在近红外850nm的反射率0.44为准,为达到Emin=0.0152lux的照度,照明系统的最小照度为:Emin=0.0152lux/0.44=0.0354lux
依据以上的推导,现在求取照明系统的LED灯的最小光辐射量E′lmin。如图所示,为使远处照明尽量均匀,避免“手电筒效应”,采用聚光物镜加照明物镜结构,聚光物镜将光源板成像与照明物镜处,照明物镜以一定的视场角在远处虚拟屏幕成像。
C、行人检测红外摄像照明装置的照明系统照度设计
设光源的亮度为L1,虚拟屏幕上的照度分布为:
E=E0 cos4W′=πkL1 sin2U′cos4W′
式中E0为中心点照度,k为照明透镜系统的透过率,2W′为像方视场角。一般情况下,虚拟屏幕的距离l′比照明物镜的出瞳直径D大很多,U′角很小,所以,
Figure GDA0003640272380000043
由于l′>>f′2,l′≈β2f′2,代入上述公式得:
Figure GDA0003640272380000044
由E=πL1可知,得公式为:
Figure GDA0003640272380000045
对于上式,设行人检测双目红外摄像照明装置的透镜组透过率为0.9,相对孔径
Figure GDA0003640272380000046
焦距为f2=20mm,像方视场角2W′=50°,虚拟屏幕为30m处,即l′=30000mm,可知
Figure GDA0003640272380000051
对于最小Emin=0.0354lux,可以求得光源板的照度E′:
Figure GDA0003640272380000052
对于光源板上的最小照度E′min,光源板的直径为2.8mm,光源板上的最小光通量为:
Figure GDA0003640272380000053
折合成红外光辐射量为:
Figure GDA0003640272380000054
对于大功率SFH4716AS的LED灯,其光辐射功率为1.9W,是最小红外光辐射量的1005倍。
当然,以上的计算是以假设的确良军装的红外反射率为例进行计算的结果。对于其他物体而言,具有比较意义。
通过以上的推导和计算,采用大功率SFH4716AS的LED灯,是满足基于行人检测系统的红外摄像照明装置的光源要求的。
(2)大功率红外LED阵列灯照度计算方法
根据以上的大功率红外LED阵列灯照度推导计算步骤,总结出计算方法及流程如图4所示。
(3)双目行人检测的夜间红外摄像照明装置的光学设计
如图所示,双目行人检测的夜间红外摄像照明装置的光学结构为:光源板、聚光透镜和照明透镜组成。其中光源板是大功率阵列式LED等,聚光透镜实现光源板成像在照明透镜上,照明透镜将光源板的像以一定的视场角度投射到虚拟屏幕上,也即是外部需要照明的区域。

Claims (1)

1.一种行人检测红外摄像照明装置,其特征在于,主要由双目摄像机、红外照明系统和电路控制系统组成,所述双目摄像机包括第一摄像机和第二摄像机,所述红外照明系统位于第一摄像机和第二摄像机之间,且红外照明系统的红外探照灯光束照射目标的反射光,由第一摄像机和第二摄像机接收,所述的第一摄像机和第二摄像机分别连接对应的数据处理与控制单元,且红外照明系统连接红外照明控制电路;
该照明控制电路连接输入输出接口;
红外照明系统包括红外LED阵列灯,所述红外LED阵列灯的光谱中心波长为850nm或940nm,其光学结构包括光源板、聚光透镜和照明透镜,光源板是阵列式红外LED,所述聚光透镜使光源板成像于照明透镜,该像以一定的视场角度投射至虚拟屏幕,该虚拟屏幕为外部需要照明的区域;
所述的照明系统基于如下方式实现LED阵列灯选型:计算图像传感器的最大曝光时间的光通量;计算行人检测红外摄像照明装置照明系统的照度;
计算行人检测红外摄像照明装置照明系统的照度基于如下方式实现:
最大曝光时间间隔为:828tROW
最大曝光时间间隔Tex=0.040236s;
依据最大像元敏感度:3650mV/lux-sec;
在1lux照度的最大像素响应为:146.8614mV/lux;
在最大曝光时间间隔内,最大的暗电压为:2.5mV/sec*0.040236s=0.10059mV;
在波长λ=850nm处,其光谱响应系数为:0.7,所以最大曝光时间时,其像元的最小照度为:0.0006lux/0.7=0.00086lux;
当像面为最小照度取值0.00086lux时,物方最小照度为:0.0152lux;
所述的行人检测红外摄像照明装置的摄像系统的光照度计算
设物方照度为E,像方照度为E′,由工程光学理论可知
Figure FDA0003640272370000011
其中,
Figure FDA0003640272370000012
为相对孔径,其值为1/2,K为透过率,其值约为0.9,当像面为最小照度时,即E′min=0.00086lux时,物方最小照度Emin为:Emin=0.0152lux;
所述的行人检测红外摄像照明装置的照明系统照度设计中设光源的亮度为L1,虚拟屏幕上的照度分布为:
E=E0 cos4W′=πkL1 sin2U′cos4W′
式中E0为中心点照度,k为照明透镜系统的透过率,2W′为像方视场角,虚拟屏幕的距离l′比照明物镜的出瞳直径D大,U′角小,所以,
Figure FDA0003640272370000021
由于l′>>f′2,l′≈β2f′2,代入上述公式得:
Figure FDA0003640272370000022
由E=πL1可知,得公式为:
Figure FDA0003640272370000023
对于上式,设行人检测双目红外摄像照明装置的透镜组透过率为0.9,相对孔径
Figure FDA0003640272370000024
焦距为f2=20mm,像方视场角2W′=50°,虚拟屏幕为30m处,即l′=30000mm,可知
Figure FDA0003640272370000025
对于最小Emin=0.0354lux,可以求得光源板的最小照度E′min
Figure FDA0003640272370000026
对于光源板上的最小照度E′min,光源板的直径为2.8mm,光源板上的最小光通量为:
Figure FDA0003640272370000027
折合成红外光辐射量为:
Figure FDA0003640272370000028
照明系统的最小照度为:0.0354lux;
以照明系统的最小照度0.0354lux为准,LED阵列灯灯的最小红外光辐射量为:1.89mW。
CN201711417590.8A 2017-12-25 2017-12-25 行人检测红外摄像照明装置 Active CN109963084B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201711417590.8A CN109963084B (zh) 2017-12-25 2017-12-25 行人检测红外摄像照明装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201711417590.8A CN109963084B (zh) 2017-12-25 2017-12-25 行人检测红外摄像照明装置

Publications (2)

Publication Number Publication Date
CN109963084A CN109963084A (zh) 2019-07-02
CN109963084B true CN109963084B (zh) 2022-07-08

Family

ID=67020685

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201711417590.8A Active CN109963084B (zh) 2017-12-25 2017-12-25 行人检测红外摄像照明装置

Country Status (1)

Country Link
CN (1) CN109963084B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111487647A (zh) * 2020-03-31 2020-08-04 中国科学院西安光学精密机械研究所 一种基于逆向反射背景的主动照明的高速目标探测装置及方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20060127680A (ko) * 2005-06-08 2006-12-13 김달수 펄스식 적외선 레이저 조명기를 갖는 감시카메라
CN104915716A (zh) * 2014-03-14 2015-09-16 宝山钢铁股份有限公司 用于带钢表面检测的照明led阵列光源的均匀优化方法
CN106546171A (zh) * 2016-10-18 2017-03-29 河海大学 一种基于机器视觉的高速列车接触导线实时检测装置
CN107041729A (zh) * 2016-12-30 2017-08-15 西安中科微光影像技术有限公司 双目近红外成像系统及血管识别方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20060127680A (ko) * 2005-06-08 2006-12-13 김달수 펄스식 적외선 레이저 조명기를 갖는 감시카메라
CN104915716A (zh) * 2014-03-14 2015-09-16 宝山钢铁股份有限公司 用于带钢表面检测的照明led阵列光源的均匀优化方法
CN106546171A (zh) * 2016-10-18 2017-03-29 河海大学 一种基于机器视觉的高速列车接触导线实时检测装置
CN107041729A (zh) * 2016-12-30 2017-08-15 西安中科微光影像技术有限公司 双目近红外成像系统及血管识别方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
新型汽车主动式红外夜视系统的研究与开发;陈新发等;《红外》;20090210(第02期);第24-27页 *

Also Published As

Publication number Publication date
CN109963084A (zh) 2019-07-02

Similar Documents

Publication Publication Date Title
CN103118900B (zh) 前照灯装置及其亮度控制方法
JP4491453B2 (ja) 赤外画像と視覚画像を周辺部に依存して融合させることにより車両の周辺部を可視化するための方法及び装置
US7015944B2 (en) Device for improving visibility in vehicles
US7358496B2 (en) Infrared night vision system, in colour
US7016518B2 (en) Vehicle license plate imaging and reading system for day and night
CN100426046C (zh) 用于机动车的具有局部的光学滤光器的夜视系统
JP4853437B2 (ja) 車両周辺監視システム
US20060018513A1 (en) Stereo vehicle-exterior monitoring apparatus
US20040252516A1 (en) Method of providing modulated illumination of a road, and a vehicle headlight for performing the said method
CN101142814A (zh) 图像处理装置及方法、程序、以及记录介质
JP4927647B2 (ja) 車両周辺監視装置
JPWO2019194256A1 (ja) 演算処理装置、オブジェクト識別システム、学習方法、自動車、車両用灯具
CN102745135A (zh) 一种主动式车辆红外夜视系统
JP2013097885A (ja) ヘッドライト装置、及びヘッドライトシステム
Tsimhoni et al. Pedestrian detection with near and far infrared night vision enhancement
JP6555569B2 (ja) 画像処理装置、移動体機器制御システム及び画像処理用プログラム
CN109963084B (zh) 行人检测红外摄像照明装置
CN205010094U (zh) 一种车辆hud系统
CN204795330U (zh) 一种具有温控功能的车载红外夜视摄像头
CN103792666B (zh) 激光夜视辅助驾驶激光照明器
CN201097067Y (zh) 一种摄像装置
CN203136029U (zh) 一种车载红外夜视成像系统
CN109963093A (zh) 车载行人检测系统的双目红外摄像照明系统的led阵列灯选型计算方法
CN114604165B (zh) 车辆及其车辆照明灯控制系统和方法
CN210119619U (zh) 一种适合黑夜无外界光源环境5mm焦距的镜头

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant