CN112487896A - 一种基于深度学习的远光灯识别方法 - Google Patents

一种基于深度学习的远光灯识别方法 Download PDF

Info

Publication number
CN112487896A
CN112487896A CN202011292620.9A CN202011292620A CN112487896A CN 112487896 A CN112487896 A CN 112487896A CN 202011292620 A CN202011292620 A CN 202011292620A CN 112487896 A CN112487896 A CN 112487896A
Authority
CN
China
Prior art keywords
high beam
light
vehicle lamp
deep learning
vehicle
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202011292620.9A
Other languages
English (en)
Inventor
张中
黄俊杰
李安
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hefei Zhanda Intelligent Technology Co ltd
Original Assignee
Hefei Zhanda Intelligent Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hefei Zhanda Intelligent Technology Co ltd filed Critical Hefei Zhanda Intelligent Technology Co ltd
Priority to CN202011292620.9A priority Critical patent/CN112487896A/zh
Publication of CN112487896A publication Critical patent/CN112487896A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q1/00Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor
    • B60Q1/02Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to illuminate the way ahead or to illuminate other areas of way or environments
    • B60Q1/04Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to illuminate the way ahead or to illuminate other areas of way or environments the devices being headlights
    • B60Q1/14Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to illuminate the way ahead or to illuminate other areas of way or environments the devices being headlights having dimming means
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/23Clustering techniques
    • G06F18/232Non-hierarchical techniques
    • G06F18/2321Non-hierarchical techniques using statistics or function optimisation, e.g. modelling of probability density functions
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/02Neural networks
    • G06N3/04Architecture, e.g. interconnection topology
    • G06N3/045Combinations of networks
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/40Extraction of image or video features
    • G06V10/44Local feature extraction by analysis of parts of the pattern, e.g. by detecting edges, contours, loops, corners, strokes or intersections; Connectivity analysis, e.g. of connected components

Abstract

本发明涉及远光灯技术领域,具体涉及一种基于深度学习的远光灯识别方法,本发明提取表征光斑和光晕图像信息的中心亮度、边缘对称性、线性梯度等特征,判断车灯类别;基于多目标卷积神经网络对车灯类别提取与分类,使用深度学习算法实现多任务学习;利用改进DBSCAN算法与最小二乘法相结合对车灯类别进行拟合;预测帧间位移极限值以自适应生成跟踪搜索区域,最优化相邻帧目标匹配函数实现多车灯跟踪;跟踪远光车灯一定距离后,通过共线性约束进行左右车灯配对,完成远光灯识别。避免杂光干扰减少了特征冗余。减少了以往多目标跟踪的复杂度,同时单车灯上下独立匹配,不受车灯改装的影响。同时使用深度学习算法显著提高识别效果。

Description

一种基于深度学习的远光灯识别方法
技术领域
本发明涉及远光灯技术领域,具体涉及一种基于深度学习的远光灯识别方法。
背景技术
汽车的发展给中国的经济注入活力,不仅解决了就业问题,而且也极大的方便了人们的生活。随着经济的提升,中国的人均收入持续增长,越来越多的人对生活有更高的追求。汽车作为交通工具,不仅方便了人们的交通,也给人带来一定的社会“地位”,越来越多的人开始成为“有车族”。资料显示我国每千人汽车拥有量是114辆,而美国、德国、法国以及日本等均早已超过500辆,所以我国汽车市场还有巨大的发展空间。
当汽车极大了方便了人们的生活的同时,也带来了交通、环保和能源等几个方面的问题。联合国的最新统计数据显示,全世界每年因交通事故死亡的人数超过了100万,而我国则占据了全世界的20%的比例,居世界首位。
夜间的交通事故率是昼间的1-1.5倍,造成交通事故的主要原因在于驾驶员驾驶疲劳或视线差。视线差是由于汽车前照灯的光形、照度、位置等非人为因素造成的。而驾驶疲劳这一主观因素不仅是由于驾驶员不按规定作息,而且还有可能因为车灯的炫目或者照明不足造成的。汽车前照灯作为汽车的眼睛,不仅代表着到车主的外在形象,更与驾驶员在夜间或不良天气的条件开车的安全性紧密联系。
夜间会车过程中,驾驶员眼睛受到对方远光刺激而出现的炫目现象易引发交通事故。照明较好的城区道路中,部分车辆仍潇用远光的现象己引起交通管理部门重视。
发明内容
针对现有技术的不足,本发明公开了一种基于深度学习的远光灯识别方法,用于解决夜间会车过程中,驾驶员眼睛受到对方远光刺激而出现的炫目现象易引发交通事故,提供基于深度学习的远光灯识别的方法,解决传统方法的缺点且显著提高识别效果。
本发明通过以下技术方案予以实现:
本发明公开一种基于深度学习的远光灯识别方法,其特征在于,所述方法包括以下步骤:
S1在待测区域设置相机,并调整其高度、俯仰角和相机曝光等参数,以满足取证距离;
S2设置合适曝光,凸显车灯光晕区域,减少远光在图像中的粘连,同时保证车辆车牌在补光灯下的清晰度;
S3提取表征光斑和光晕图像信息的中心亮度、边缘对称性、线性梯度等特征,判断车灯类别;
S4基于多目标卷积神经网络对车灯类别提取与分类,使用深度学习算法实现多任务学习;
S5利用改进DBSCAN算法与最小二乘法相结合对车灯类别进行拟合;
S6预测帧间位移极限值以自适应生成跟踪搜索区域,最优化相邻帧目标匹配函数实现多车灯跟踪;
S7跟踪远光车灯一定距离后,通过共线性约束进行左右车灯配对,完成远光灯识别。
更进一步的,所述方法中若新跟踪到的车灯为远光,统计其累计开启时间和行驶距离,判别车辆远近光属性;若为近光,删除此车灯轨迹。
更进一步的,所述方法中,提取车灯多维特征需提前分离光斑和光晕区域,统计数据库中远光车灯的平均起始衰减亮度作为图像分割阈值,滤除狭长的闭合连通域,初步检测出车灯光斑,光斑向外环状发散得到相应的光晕区域。
更进一步的,所述方法基于各光源不同阶段的成像变化,将光源分为中心和光晕两部分,分别提取其中心边缘、线性等不同结构的多模式特征,获得了稳定且区分度显著的光源特征向量,进而结合随机森林分类远近车灯。
更进一步的,所述深度学习算法包括生成模型和判别模型;所述生成模型捕捉真实数据样本的潜在分布,并生成新的数据样本;所述判别模型是一个二分类器,判别区分输入的是真实数据还是生成的样本数据。
更进一步的,所述判别模型输出是以概率值表示,概率值大于0.5则为真,概率值小于0.5则为假。当判别器无法区别出真实数据和生成数据时则停止训练,此时达到生成器与判别器之间判定误差的平衡,训练达到理想状态。
更进一步的,所述方法以生成各车灯局部的最大跟踪搜索区,当搜索区内车灯唯一存在时,直接匹配即可;当搜索区重叠或远光车灯不唯一时,基于多结构特征相似度优化此局部的匹配模型,实现稳定的多车灯跟踪,统计跟踪周期中远光开启时长和距离以判断车辆远近光属性。
本发明的有益效果为:
本发明用中心、边缘、线性结构特征表征了车灯的光斑、光晕和局部梯度信息,避免杂光干扰减少了特征冗余。基于车灯搜索区域独立生成的匹配算法减少了以往多目标跟踪的复杂度,同时单车灯上下独立匹配,不受车灯改装的影响。同时使用深度学习算法显著提高识别效果。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是一种基于深度学习的远光灯识别方法原理步骤图;
图2是本发明实施例车辆远光识别验证设置示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
实施例1
本实施例公开如图1所示的一种基于深度学习的远光灯识别方法,包括以下步骤:
S1在待测区域设置相机,并调整其高度、俯仰角和相机曝光等参数,以满足取证距离;
S2设置合适曝光,凸显车灯光晕区域,减少远光在图像中的粘连,同时保证车辆车牌在补光灯下的清晰度;
S3提取表征光斑和光晕图像信息的中心亮度、边缘对称性、线性梯度等特征,判断车灯类别;
S4基于多目标卷积神经网络对车灯类别提取与分类,使用深度学习算法实现多任务学习;
S5利用改进DBSCAN算法与最小二乘法相结合对车灯类别进行拟合;
S6预测帧间位移极限值以自适应生成跟踪搜索区域,最优化相邻帧目标匹配函数实现多车灯跟踪;
S7跟踪远光车灯一定距离后,通过共线性约束进行左右车灯配对,完成远光灯识别。
本实施例中若新跟踪到的车灯为远光,统计其累计开启时间和行驶距离,判别车辆远近光属性;若为近光,删除此车灯轨迹。提取车灯多维特征需提前分离光斑和光晕区域,统计数据库中远光车灯的平均起始衰减亮度作为图像分割阈值,滤除狭长的闭合连通域,初步检测出车灯光斑,光斑向外环状发散得到相应的光晕区域。
本实施例基于各光源不同阶段的成像变化,将光源分为中心和光晕两部分,分别提取其中心边缘、线性等不同结构的多模式特征,获得了稳定且区分度显著的光源特征向量,进而结合随机森林分类远近车灯。
本实施例的深度学习算法包括生成模型和判别模型;所述生成模型捕捉真实数据样本的潜在分布,并生成新的数据样本;所述判别模型是一个二分类器,判别区分输入的是真实数据还是生成的样本数据,判别模型输出是以概率值表示,概率值大于0.5则为真,概率值小于0.5则为假。当判别器无法区别出真实数据和生成数据时则停止训练,此时达到生成器与判别器之间判定误差的平衡,训练达到理想状态。
本实施例以生成各车灯局部的最大跟踪搜索区,当搜索区内车灯唯一存在时,直接匹配即可;当搜索区重叠或远光车灯不唯一时,基于多结构特征相似度优化此局部的匹配模型,实现稳定的多车灯跟踪,统计跟踪周期中远光开启时长和距离以判断车辆远近光属性。
实施例2
本实施例公开如图2所示的车辆远光识别验证设置,其为较典型的车辆直行场景,H为监控立杆高度,α为相机俯视角,β为镜头垂直视场角,点A、B、C为路面上的标记点。点C到A为远光的有效检测范围,跟踪AC间的远光车辆,当其远光持续时间较长或行驶距离较远时,视为误用远光灯。
本实施例中首先设置相机高度H、俯仰角α、相机曝光等参数,满足取证距离。设置合适曝光,凸显车灯光晕区域,减少远光在图像中的粘连,同时保证车辆车牌在补光灯下的清晰度。其次,通过阈值分割和光斑几何长宽比约束初步筛选车灯区域。远光光斑光线发散贴近圆形、面积较大;车灯光晕亮度衰竭较慢,梯度变化平缓;在车辆逐渐接近监控相机时,车灯面积不断增长。
提取表征光斑和光晕图像信息的中心亮度、边缘对称性、线性梯度等特征,判断车灯类别。预测帧间位移极限值以自适应生成跟踪搜索区域,最优化相邻帧目标匹配函数实现多车灯跟踪。跟踪远光车灯一定距离后,通过共线性约束进行左右车灯配对。最后,若新跟踪到的车灯为远光,统计其累计开启时间和行驶距离,判别车辆远近光属性;若为近光,删除此车灯轨迹。
实施例3
本实施例对夜间灯检测时,提取车灯多维特征需提前分离光斑和光晕区域,统计数据库中远光车灯的平均起始衰减亮度作为图像分割阈值,滤除狭长的闭合连通域,初步检测出车灯光斑,光斑向外环状发散得到相应的光晕区域。夜间车流密集时,车灯下方及左右光晕易被地面反光、车身反光等破坏,线性结构跳变。选择以光斑形心上半扇形为线性特征提取的感兴趣区域,提取稳定光晕梯度特征,减少杂光干扰。
本实施例对车灯提取时,视觉目标检测中,特征提取算子将原始RGB图像降维并保存其部分特有信息,是决定分类器性能的重要因素之一。SIFT4、LBPl5、Haar等可提取常见目标的多维特征,但其计算较复杂,过多的纹理信息计算难以选择性地适应车灯显著的成像规律。
车辆前大灯可分为中心光斑、周围光晕两部分,远、近光成像主要区别,对于车灯中心区域,其亮度变化平缓无明显梯度或纹理等局部特征,但远光中心亮度较高,面积较大;对于车灯同心边缘线,远光光源较对称,边缘上相邻像素点的亮度接近,跳变较小,而近光成像凹凸点较多,跳变较大;对于光斑上半扇形,干扰光较少,其射线贯穿光斑中心和光晕,远光射线上亮度衰竭较慢。
综上,本发明用中心、边缘、线性结构特征表征了车灯的光斑、光晕和局部梯度信息,避免杂光干扰减少了特征冗余。基于车灯搜索区域独立生成的匹配算法减少了以往多目标跟踪的复杂度,同时单车灯上下独立匹配,不受车灯改装的影响。同时使用深度学习算法显著提高识别效果。
以上实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。

Claims (7)

1.一种基于深度学习的远光灯识别方法,其特征在于,所述方法包括以下步骤:
S1在待测区域设置相机,并调整其高度、俯仰角和相机曝光等参数,以满足取证距离;
S2设置合适曝光,凸显车灯光晕区域,减少远光在图像中的粘连,同时保证车辆车牌在补光灯下的清晰度;
S3提取表征光斑和光晕图像信息的中心亮度、边缘对称性、线性梯度等特征,判断车灯类别;
S4基于多目标卷积神经网络对车灯类别提取与分类,使用深度学习算法实现多任务学习;
S5利用改进DBSCAN算法与最小二乘法相结合对车灯类别进行拟合;
S6预测帧间位移极限值以自适应生成跟踪搜索区域,最优化相邻帧目标匹配函数实现多车灯跟踪;
S7跟踪远光车灯一定距离后,通过共线性约束进行左右车灯配对,完成远光灯识别。
2.根据权利要求1所述的基于深度学习的远光灯识别方法,其特征在于,所述方法中若新跟踪到的车灯为远光,统计其累计开启时间和行驶距离,判别车辆远近光属性;若为近光,删除此车灯轨迹。
3.根据权利要求1所述的基于深度学习的远光灯识别方法,其特征在于,所述方法中,提取车灯多维特征需提前分离光斑和光晕区域,统计数据库中远光车灯的平均起始衰减亮度作为图像分割阈值,滤除狭长的闭合连通域,初步检测出车灯光斑,光斑向外环状发散得到相应的光晕区域。
4.根据权利要求1所述的基于深度学习的远光灯识别方法,其特征在于,所述方法基于各光源不同阶段的成像变化,将光源分为中心和光晕两部分,分别提取其中心边缘、线性等不同结构的多模式特征,获得了稳定且区分度显著的光源特征向量,进而结合随机森林分类远近车灯。
5.根据权利要求1所述的基于深度学习的远光灯识别方法,其特征在于,所述深度学习算法包括生成模型和判别模型;所述生成模型捕捉真实数据样本的潜在分布,并生成新的数据样本;所述判别模型是一个二分类器,判别区分输入的是真实数据还是生成的样本数据。
6.根据权利要求1所述的基于深度学习的远光灯识别方法,其特征在于,所述判别模型输出是以概率值表示,概率值大于0.5则为真,概率值小于0.5则为假。当判别器无法区别出真实数据和生成数据时则停止训练,此时达到生成器与判别器之间判定误差的平衡,训练达到理想状态。
7.根据权利要求1所述的基于深度学习的远光灯识别方法,其特征在于,所述方法以生成各车灯局部的最大跟踪搜索区,当搜索区内车灯唯一存在时,直接匹配即可;当搜索区重叠或远光车灯不唯一时,基于多结构特征相似度优化此局部的匹配模型,实现稳定的多车灯跟踪,统计跟踪周期中远光开启时长和距离以判断车辆远近光属性。
CN202011292620.9A 2020-11-18 2020-11-18 一种基于深度学习的远光灯识别方法 Pending CN112487896A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011292620.9A CN112487896A (zh) 2020-11-18 2020-11-18 一种基于深度学习的远光灯识别方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011292620.9A CN112487896A (zh) 2020-11-18 2020-11-18 一种基于深度学习的远光灯识别方法

Publications (1)

Publication Number Publication Date
CN112487896A true CN112487896A (zh) 2021-03-12

Family

ID=74931721

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011292620.9A Pending CN112487896A (zh) 2020-11-18 2020-11-18 一种基于深度学习的远光灯识别方法

Country Status (1)

Country Link
CN (1) CN112487896A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR3122800A1 (fr) * 2021-05-07 2022-11-11 Psa Automobiles Sa Procédé, dispositif et système de contrôle de feux d’éclairage d’un véhicule

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR3122800A1 (fr) * 2021-05-07 2022-11-11 Psa Automobiles Sa Procédé, dispositif et système de contrôle de feux d’éclairage d’un véhicule

Similar Documents

Publication Publication Date Title
CN113276769B (zh) 车辆盲区防撞预警系统及方法
CN104778444B (zh) 道路场景下车辆图像的表观特征分析方法
US8064643B2 (en) Detecting and recognizing traffic signs
US7724962B2 (en) Context adaptive approach in vehicle detection under various visibility conditions
CN101783076B (zh) 一种视频监控模式下的快速车型识别方法
O'Malley et al. Vehicle detection at night based on tail-light detection
CN111161543A (zh) 一种基于图像识别的公交前车违章行为自动抓拍方法及系统
CN108357418A (zh) 一种基于尾灯识别的前车驾驶意图分析方法
KR20070027768A (ko) 교통 표지판 탐지를 위한 방법
CN105528609A (zh) 一种基于字符位置的车牌定位方法
CN109887276B (zh) 基于前景提取与深度学习融合的夜间交通拥堵检测方法
CN107622494A (zh) 面向交通视频的夜间车辆检测与跟踪方法
CN112487896A (zh) 一种基于深度学习的远光灯识别方法
Sushmitha et al. Multiple car detection, recognition and tracking in traffic
Acunzo et al. Context-adaptive approach for vehicle detection under varying lighting conditions
Sakagawa et al. Vision based nighttime vehicle detection using adaptive threshold and multi-class classification
CN104318783A (zh) 一种通过车灯侦测分析夜间交通流量的方法
Guo et al. Visibility detection based on the recognition of the preceding vehicle’s taillight signals
CN109800693B (zh) 一种基于颜色通道混合特征的夜间车辆检测方法
CN106864351A (zh) 一种基于计算机视觉的夜间车辆行驶辅助照明系统
CN103065141A (zh) 基于色彩聚类的车牌定位方法
CN113743226B (zh) 一种日间前车灯语识别及预警方法及系统
CN112836619A (zh) 嵌入式车载远红外行人检测方法、系统、设备及存储介质
CN105740834A (zh) 夜视环境下对前方车辆的高精度检测方法
Lin et al. Long-distance vehicle detection algorithm at night for driving assistance

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20210312

RJ01 Rejection of invention patent application after publication