CN103279741A - 一种基于车载红外图像的行人预警系统及其工作方法 - Google Patents
一种基于车载红外图像的行人预警系统及其工作方法 Download PDFInfo
- Publication number
- CN103279741A CN103279741A CN2013101901570A CN201310190157A CN103279741A CN 103279741 A CN103279741 A CN 103279741A CN 2013101901570 A CN2013101901570 A CN 2013101901570A CN 201310190157 A CN201310190157 A CN 201310190157A CN 103279741 A CN103279741 A CN 103279741A
- Authority
- CN
- China
- Prior art keywords
- pedestrian
- image
- cluster
- driver
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Closed-Circuit Television Systems (AREA)
- Image Analysis (AREA)
- Traffic Control Systems (AREA)
- Image Processing (AREA)
Abstract
本发明公开了一种基于车载红外图像的行人预警系统及其工作方法,所述的系统包括图像获取单元、图像处理单元、决策输出单元、驾驶员预警单元和驾驶员报警单元,所述的图像获取单元、图像处理单元和决策输出单元依次顺序串联,图像获取单元连接车载红外摄像机,获取红外图像信息,图像获取单元将信息传给图像处理单元处理,决策输出单元根据车辆当前的车速信息,向驾驶员预警单元或者驾驶员报警单元发送信号。本发明在行人分割技术上采用了K均值聚类分析算法,获取了较为准确的行人感兴趣区域,使得下一步的行人识别工作变得简单,避免了一部分的非行人干扰。本发明在行人识别过程中采用了串联组合方式的行人识别方法,提高了行人检测的准确率。
Description
技术领域
本发明属于汽车主动安全技术领域,涉及到图像处理方法和行人安全保护知识,特别涉及到一种基于车载红外图像的行人预警系统及其工作方法。
背景技术
目前,车辆与行人发生碰撞而引发的交通事故频繁发生,给人民的生命财产安全带来很大的威胁。行人检测是车辆辅助驾驶系统中的关键技术也是必需技术,它能及时地告知驾驶员车辆前方行人的存在,并进行安全预警,减少或避免车辆与行人发生碰撞事故,具有潜在的经济价值和广泛的应用前景。基于可见光的普通摄像机,在可见光光源不足的情况下,特别是夜间条件下,得不到应有的视频输出图像,因而难以做到行人的准确检测。
由于红外图像是热成像,具有强大的“穿透”能力,可以透过黑暗和烟雾,看到在可见光波段无法看见的感兴趣目标,因此红外图像中行人的分割和识别倍受人们的关注。
在红外图像分割中,基于图像直方图目标和背景的分布呈明显双峰形状的基础上,常用的直方图聚类方法如类间最大方差法、一维Kapur熵、二维直方图熵法等,然而红外行人图像的直方图多数情况下并不呈明显双峰形状。在红外图像识别中利用方向梯度直方图(HOG)特征对远红外行人进行描述,结合支持向量机(SVM)实现行人检测,该方法检测效果较好,但计算开销稍大。因此上述方法在车载红外图像行人预警系统中不能够很好的应用,存在着一定的技术难题。
发明内容
为解决现有技术存在的上述问题,本发明要设计一种能够实现红外图像行人较为准确分割和在红外图像行人识别中减少运算和开销的车载红外图像行人预警系统及其工作方法。
为了实现上述目的,本发明的技术方案如下:
一种基于车载红外图像的行人预警系统,包括图像获取单元、图像处理单元、决策输出单元、驾驶员预警单元和驾驶员报警单元,所述的图像获取单元、图像处理单元和决策输出单元依次顺序串联,所述的决策输出单元的输出端分别连接驾驶员预警单元和驾驶员报警单元,图像获取单元连接车载红外摄像机,获取红外图像信息,图像获取单元将信息传给图像处理单元处理,图像处理单元包括获取行人感兴趣区域和串联组合方式的行人识别两个过程,图像处理单元将处理后的结果传给决策输出单元,决策输出单元根据车辆当前的车速信息,向驾驶员预警单元或者驾驶员报警单元发送信号,驾驶员预警单元向驾驶员发出闪烁行人图标的预警信息或者驾驶员报警单元向驾驶员发出方向盘震动的报警信息。
一种基于车载红外图像的行人预警系统的工作方法,包括以下步骤:
A、图像获取单元获取车载红外摄像机采集的红外图像信息;
B、图像处理单元的处理方法,包括以下步骤:
B1、获取行人感兴趣区域;采用中值滤波方法对采集到的红外图像进行滤波降噪,将滤波降噪后的红外图像进行图像增强处理,将增强后的红外图像采用k均值聚类分析算法进行二值化分割,将分割后的红外图像采用先膨胀后腐蚀的闭运算做形态学处理,将形态学处理后的图像根据目标行人的宽高比删选后即可获得行人感兴趣区域;
B2、串联组合式行人识别;
B21、获取行人感兴趣区域的类haar特征值;
B22、训练行人检测器和通过行人检测器进行感兴趣区域的初步行人识别;
B23、将行人检测器分类后的结果采用基于模板匹配的头部检测进一步识别行人;
C、决策输出单元将图像处理单元得到的行人信息和车速信息进行综合分析,向驾驶员预警单元或者驾驶员报警单元发送信号;如果车速大于或等于警示速度V0,信号传给驾驶员报警单元,驾驶员报警单元向驾驶员发出方向盘震动的报警信息;如果车速小于警示速度V0,信号传给驾驶员预警单元,驾驶员预警单元向驾驶员发出闪烁行人图标的预警信息;所述的警示速度V0的范围为60-70km/h;
步骤B1中所述的k均值聚类分析算法的二值化分割,包括以下步骤:
B11、获取增强处理后红外图像的灰度直方图,求得红外图像的灰度均值T0;
B12、提取高于图像灰度均值T0的像素集x,采用k均值聚类分析算法分割图像;具体步骤如下:
对高于灰度均值T0的像素集x采用图像的标准差初始化类间距离,划分聚类空间来确定分类数并进行k均值聚类,然后计算ki聚类空间与其相邻的两个聚类空间ki+1和ki-1的关系;
设第i个聚类空间为ki,聚类前ki聚类空间的中心值为聚类后ki聚类空间中心值为μi,聚类前ki+1聚类空间的中心值为聚类后ki+1聚类空间中心值为μi+1,聚类前ki-1聚类空间的中心值为聚类后ki-1聚类空间中心值为μi-1,聚类前的相对关系值为l0,聚类后μi-1、μi、μi+1的相对关系值为l,;
聚类后,μi、μi-1、μi+1的相对关系为:
为了准确找到直方图聚类中心走势的转折点,采用聚类中心值的相对增量差分的绝对值作为测度函数CR;即:
通过寻找测度函数CR的极大值点对应的类别作为转折点,将转折点处两相邻聚类中心值的平均值作为阈值,大于等于所求阈值的被判定为目标,小于阈值的被判定为背景,达到了对整个红外图像进行二值化的目的;
步骤B22所述的训练行人检测器,包括以下步骤:
B221、选取样本库
选取800个红外正行人样本和3800个红外负行人样本,所述的负行人样本为不含行人图像的道路背景红外图像;
B222、获取类haar特征值
haar特征的定义是指白色矩形区域内的所有像素灰度值之和减去黑色矩形区域,通过局部的灰度变化描述了图像相邻区域的特征差异。
类haar特征值的计算公式如下:
式中:ωi∈R为矩形的权重,RecSum(i)为矩形ri所围区域的灰度积分,n是组成矩形的个数。
B223、基于adaboost算法的行人检测器的训练
行人检测器包括弱分类器和强分类器;
训练得到对应每个特征j的弱分类器:
每个弱分类器只针对一个特征fj(x),θj为阈值,参数pj表示不等式的方向,j为有效特征个数;
在建立全部弱分类器之后,就要通过一定的筛选机制挑选出分类能力强的一些特征,也就是弱分类器,最后依次顺序地将这些弱分类器线性组合成最终的强分类器;
训练强分类器的adaboost算法的具体过程如下:
B2231、给定N对训练样本集(x1,y1),,(xn,yn),其中xi为表征样本的特征向量,yi=0,1分别表示红外正行人样本和红外负行人样本;
B2232、初始化样本权重:
红外正行人样本的权重为w1,i=1/2m,红外负行人样本的权重为w1,i=1/2n,m和n分别为红外正行人样本和红外负行人样本的数量;
B2233、训练最优的弱分类器
设训练总轮数为T,训练最优的弱分类器的方法包括以下步骤:
B22331、设训练轮数t=1
B22332、计算归一化样本权重
B22333.对于每一个特征,在给定样本权重qt,i条件下按照公式(6)训练一个弱分类器ht,j,并计算每个弱分类器对样本集的分类错误率:
B22334.选择具有最小分类错误率εt的弱分类器ht;
若样本被正确分类,则ei=0,否则ei=1,βt=εt/(1-εt)
B22336、如果t<T,则令t=t+1,转步骤B22332;否则,转步骤B2234;
B2234、输出最终强分类器
B23、采用基于模板匹配的头部检测进一步来识别行人,具体步骤如下:
B231、头部模板建立
针对红外正行人样本的头部轮廓构建了一个“Ω”形位图模板图像F;
B232、采用Canny算子对行人感兴趣区域图像进行边缘检测
B233、进行模板匹配,具体步骤如下:
B2331、距离转换:
设B表示一个二值图像中的目标点集合,则对于该图像中的每一个点p,距离转换公式如下:
其中q为背景像素点,d(p,q)为p到q的欧几里得距离;进行距离转换后,图像中每个像素点的值就会变成与其最近的特征点的距离;
B2332、进行图像匹配,具体步骤如下:
将头部模板与DT图像做卷积,利用头部模板图像F中的特征点f所在的坐标相对应到DT图像中的距离值相加,再求其平均值,即所谓的Chamfer距离,其公式如下:
DT(f)表示f对应于DT图像的欧几里得距离,取平均值的目的是对模板的大小进行归一化;如果待匹配的图像中没有头部,则求得的Chamfer距离通常会远大于在图像中有头部的Chamfer距离,因此选取Chamfer距离最小的区域作为头部最优框的大小和位置;
当边缘图像的Chamfer距离值为检测区域R中最小值时,须再做一次特征点数量上的判断:
上式为边缘图像F的面积计算,主要目的在确保不会因为特征点数稀少才使得平均距离很小;因此当上述两个条件同时成立时,图像匹配成功。
与现有技术相比,本发明的效果和益处是:
1、本发明在行人分割技术上采用了K均值聚类分析算法,获取了较为准确的行人感兴趣区域,使得下一步的行人识别工作变得简单,避免了一部分的非行人干扰。
2、本发明在行人识别过程中采用了串联组合方式的行人识别方法,首先通过行人检测器进行行人感兴趣区域的初步行人识别,再将分类后的结果采用模板匹配的头部检测进一步识别行人,提高了行人检测的准确率。
3、本发明还可以根据车速的快慢给与驾驶员不同程度的预警或报警信息,将前期的检测结果更好的传递给了驾驶员,减轻了驾驶疲劳。
附图说明
本发明共有附图4幅,其中:
图1是本发明的总体设计框图。
图2是获取行人感兴趣区域的流程框图。
图3是行人识别流程框图。
图4是驾驶员预警和报警流程框图。
图中:1、图像获取单元,2、图像处理单元,3、决策输出单元,4、驾驶员预警单元,5、驾驶员报警单元。
具体实施方式
下面结合附图对本发明进行进一步地描述。
如图1所示,一种基于车载红外图像的行人预警系统,包括图像获取单元1、图像处理单元2、决策输出单元3、驾驶员预警单元4和驾驶员报警单元5,所述的图像获取单元1、图像处理单元2和决策输出单元3依次顺序串联,所述的决策输出单元3的输出端分别连接驾驶员预警单元4和驾驶员报警单元5,图像获取单元1连接车载红外摄像机,获取红外图像信息,图像获取单元1将信息传给图像处理单元2处理,图像处理单元2包括获取行人感兴趣区域和串联组合方式的行人识别两个过程,图像处理单元2将处理后的结果传给决策输出单元3,决策输出单元3根据车辆当前的车速信息,向驾驶员预警单元4或者驾驶员报警单元5发送信号,驾驶员预警单元4向驾驶员发出闪烁行人图标的预警信息或者驾驶员报警单元5向驾驶员发出方向盘震动的报警信息。
如图1-4所示,一种基于车载红外图像的行人预警系统的工作方法,包括以下步骤:
A、图像获取单元1获取车载红外摄像机采集的红外图像信息;
B、图像处理单元2的处理方法,包括以下步骤:
B1、获取行人感兴趣区域;采用中值滤波方法对采集到的红外图像进行滤波降噪,将滤波降噪后的红外图像进行图像增强处理,将增强后的红外图像采用k均值聚类分析算法进行二值化分割,将分割后的红外图像采用先膨胀后腐蚀的闭运算做形态学处理,将形态学处理后的图像根据目标行人的宽高比删选后即可获得行人感兴趣区域;
B2、串联组合式行人识别;
B21、获取行人感兴趣区域的类haar特征值;
B22、训练行人检测器和通过行人检测器进行感兴趣区域的初步行人识别;
B23、将行人检测器分类后的结果采用基于模板匹配的头部检测进一步识别行人;
C、决策输出单元3将图像处理单元2得到的行人信息和车速信息进行综合分析,向驾驶员预警单元4或者驾驶员报警单元5发送信号;如果车速大于或等于警示速度V0,信号传给驾驶员报警单元5,驾驶员报警单元5向驾驶员发出方向盘震动的报警信息;如果车速小于警示速度V0,信号传给驾驶员预警单元4,驾驶员预警单元4向驾驶员发出闪烁行人图标的预警信息;所述的警示速度V0的范围为60-70km/h;
如果车速大于或等于某一值V0,V0的范围为60-70km/h,信号传给驾驶员报警单元5,驾驶员预警单元4向驾驶员发出闪烁行人图标的预警信息;如果车速小于V0,信号传给驾驶员预警单元4,驾驶员报警单元5向驾驶员发出方向盘震动的报警信息;
步骤B1中所述的k均值聚类分析算法的二值化分割,包括以下步骤:
B11、获取增强处理后红外图像的灰度直方图,求得红外图像的灰度均值T0;
B12、提取高于图像灰度均值T0的像素集x,采用k均值聚类分析算法分割图像;具体步骤如下:
对高于灰度均值T0的像素集x采用图像的标准差初始化类间距离,划分聚类空间来确定分类数并进行k均值聚类,然后计算ki聚类空间与其相邻的两个聚类空间ki+1和ki-1的关系;
设第i个聚类空间为ki,聚类前ki聚类空间的中心值为,聚类后ki聚类空间中心值为μi,聚类前ki+1聚类空间的中心值为聚类后ki+1聚类空间中心值为μi+1,聚类前ki-1聚类空间的中心值为聚类后ki-1聚类空间中心值为μi-1,聚类前的相对关系值为l0,聚类后μi-1、μi、μi+1的相对关系值为l,;
聚类前,由于呈线性关系,满足以下公式:
聚类后,μi、μi-1、μi+1的相对关系为:
为了准确找到直方图聚类中心走势的转折点,采用聚类中心值的相对增量差分的绝对值作为测度函数CR;即:
通过寻找测度函数CR的极大值点对应的类别作为转折点,将转折点处两相邻聚类中心值的平均值作为阈值,大于等于所求阈值的被判定为目标,小于阈值的被判定为背景,达到了对整个红外图像进行二值化的目的;
步骤B22所述的训练行人检测器,包括以下步骤:
B221、选取样本库
选取800个红外正行人样本和3800个红外负行人样本,所述的负行人样本为不含行人图像的道路背景红外图像;
B222、获取类haar特征值
haar特征的定义是指白色矩形区域内的所有像素灰度值之和减去黑色矩形区域,通过局部的灰度变化描述了图像相邻区域的特征差异。
类haar特征值的计算公式如下:
式中:ωi∈R为矩形的权重,RecSum(i)为矩形ri所围区域的灰度积分,n是组成矩形的个数。
B223、基于adaboost算法的行人检测器的训练
行人检测器包括弱分类器和强分类器;
训练得到对应每个特征j的弱分类器:
每个弱分类器只针对一个特征fj(x),θj为阈值,参数pj表示不等式的方向,j为有效特征个数;
在建立全部弱分类器之后,就要通过一定的筛选机制挑选出分类能力强的一些特征,也就是弱分类器,最后依次顺序地将这些弱分类器线性组合成最终的强分类器;
训练强分类器的adaboost算法的具体过程如下:
B2231、给定N对训练样本集(x1,y1),,(xn,yn),其中xi为表征样本的特征向量,yi=0,1分别表示红外正行人样本和红外负行人样本;
B2232、初始化样本权重:
红外正行人样本的权重为w1,i=1/2m,红外负行人样本的权重为w1,i=1/2n,m和n分别为红外正行人样本和红外负行人样本的数量;
B2233、训练最优的弱分类器
设训练总轮数为T,训练最优的弱分类器的方法包括以下步骤:
B22331、设训练轮数t=1
B22332、计算归一化样本权重
B22333.对于每一个特征,在给定样本权重qt,i条件下按照公式(6)训练一个弱分类器ht,j并计算每个弱分类器对样本集的分类错误率:
B22334.选择具有最小分类错误率εt的弱分类器ht;
若样本被正确分类,则ei=0,否则ei=1,βt=εt/(1-εt)
B22336、如果t<T,则令t=t+1,转步骤B22332;否则,转步骤B2234;
B2234、输出最终强分类器
B23、采用基于模板匹配的头部检测进一步来识别行人,具体步骤如下:
B231、头部模板建立
针对红外正行人样本的头部轮廓构建了一个“Ω”形位图模板图像F;
B232、采用Canny算子对行人感兴趣区域图像进行边缘检测
B233、进行模板匹配,具体步骤如下:
B2331、距离转换:
设B表示一个二值图像中的目标点集合,则对于该图像中的每一个点p,距离转换公式如下:
其中q为背景像素点,d(p,q)为p到q的欧几里得距离;进行距离转换后,图像中每个像素点的值就会变成与其最近的特征点的距离;
B2332、进行图像匹配,具体步骤如下:
将头部模板与DT图像做卷积,利用头部模板图像F中的特征点f所在的坐标相对应到DT图像中的距离值相加,再求其平均值,即所谓的Chamfer距离,其公式如下:
DT(f)表示f对应于DT图像的欧几里得距离,取平均值的目的是对模板的大小进行归一化;如果待匹配的图像中没有头部,则求得的Chamfer距离通常会远大于在图像中有头部的Chamfer距离,因此选取Chamfer距离最小的区域作为头部最优框的大小和位置;
当边缘图像的Chamfer距离值为检测区域R中最小值时,须再做一次特征点数量上的判断:
上式为边缘图像F的面积计算,主要目的在确保不会因为特征点数稀少才使得平均距离很小;因此当上述两个条件同时成立时,图像匹配成功。
Claims (2)
1.一种基于车载红外图像的行人预警系统,其特征在于:包括图像获取单元(1)、图像处理单元(2)、决策输出单元(3)、驾驶员预警单元(4)和驾驶员报警单元(5),所述的图像获取单元(1)、图像处理单元(2)和决策输出单元(3)依次顺序串联,所述的决策输出单元(3)的输出端分别连接驾驶员预警单元(4)和驾驶员报警单元(5),图像获取单元(1)连接车载红外摄像机,获取红外图像信息,图像获取单元(1)将信息传给图像处理单元(2)处理,图像处理单元(2)包括获取行人感兴趣区域和串联组合方式的行人识别两个过程,图像处理单元(2)将处理后的结果传给决策输出单元(3),决策输出单元(3)根据车辆当前的车速信息,向驾驶员预警单元(4)或者驾驶员报警单元(5)发送信号,驾驶员预警单元(4)向驾驶员发出闪烁行人图标的预警信息或者驾驶员报警单元(5)向驾驶员发出方向盘震动的报警信息。
2.一种基于车载红外图像的行人预警系统的工作方法,其特征在于:包括以下步骤:
A、图像获取单元(1)获取车载红外摄像机采集的红外图像信息;
B、图像处理单元(2)的处理方法,包括以下步骤:
B1、获取行人感兴趣区域;采用中值滤波方法对采集到的红外图像进行滤波降噪,将滤波降噪后的红外图像进行图像增强处理,将增强后的红外图像采用k均值聚类分析算法进行二值化分割,将分割后的红外图像采用先膨胀后腐蚀的闭运算做形态学处理,将形态学处理后的图像根据目标行人的宽高比删选后即可获得行人感兴趣区域;
B2、串联组合式行人识别;
B21、获取行人感兴趣区域的类haar特征值;
B22、训练行人检测器和通过行人检测器进行感兴趣区域的初步行人识别;
B23、将行人检测器分类后的结果采用基于模板匹配的头部检测进一步识别行人;
C、决策输出单元(3)将图像处理单元(2)得到的行人信息和车速信息进行综合分析,向驾驶员预警单元(4)或者驾驶员报警单元(5)发送信号;如果车速大于或等于警示速度V0,信号传给驾驶员报警单元(5),驾驶员报警单元(5)向驾驶员发出方向盘震动的报警信息;如果车速小于警示速度V0,信号传给驾驶员预警单元(4),驾驶员预警单元(4)向驾驶员发出闪烁行人图标的预警信息;所述的警示速度V0的范围为60-70km/h;
步骤B1中所述的k均值聚类分析算法的二值化分割,包括以下步骤:
B11、获取增强处理后红外图像的灰度直方图,求得红外图像的灰度均值T0;
B12、提取高于图像灰度均值T0的像素集x,采用k均值聚类分析算法分割图像;具体步骤如下:
对高于灰度均值T0的像素集x采用图像的标准差初始化类间距离,划分聚类空间来确定分类数并进行k均值聚类,然后计算ki聚类空间与其相邻的两个聚类空间ki+1和ki-1的关系;
设第i个聚类空间为ki,聚类前ki聚类空间的中心值为,聚类后ki聚类空间中心值为μi,聚类前ki+1聚类空间的中心值为,聚类后ki+1聚类空间中心值为μi+1,聚类前ki-1聚类空间的中心值为,聚类后ki-1聚类空间中心值为μi-1,聚类前的相对关系值为l0,聚类后μi-1、μi、μi+1的相对关系值为l,;
聚类后,μi、μi-1、μi+1的相对关系为:
为了准确找到直方图聚类中心走势的转折点,采用聚类中心值的相对增量差分的绝对值作为测度函数CR;即:
通过寻找测度函数CR的极大值点对应的类别作为转折点,将转折点处两相邻聚类中心值的平均值作为阈值,大于等于所求阈值的被判定为目标,小于阈值的被判定为背景,达到了对整个红外图像进行二值化的目的;
步骤B22所述的训练行人检测器,包括以下步骤:
B221、选取样本库
选取800个红外正行人样本和3800个红外负行人样本,所述的负行人样本为不含行人图像的道路背景红外图像;
B222、获取类haar特征值
haar特征的定义是指白色矩形区域内的所有像素灰度值之和减去黑色矩形区域,通过局部的灰度变化描述了图像相邻区域的特征差异;
类haar特征值的计算公式如下:
式中:ωi∈R为矩形的权重,RecSum(i)为矩形ri所围区域的灰度积分,n是组成矩形的个数;
B223、基于adaboost算法的行人检测器的训练
行人检测器包括弱分类器和强分类器;
训练得到对应每个特征j的弱分类器:
每个弱分类器只针对一个特征fj(x),θj为阈值,参数pj表示不等式的方向,j为有效特征个数;
在建立全部弱分类器之后,就要通过一定的筛选机制挑选出分类能力强的一些特征,也就是弱分类器,最后依次顺序地将这些弱分类器线性组合成最终的强分类器;
训练强分类器的adaboost算法的具体过程如下:
B2231、给定N对训练样本集(x1,y1),,(xn,yn),其中xi为表征样本的特征向量,yi=0,1分别表示红外正行人样本和红外负行人样本;
B2232、初始化样本权重:
红外正行人样本的权重为w1,i=1/2m,红外负行人样本的权重为w1,i=1/2n,m和n分别为红外正行人样本和红外负行人样本的数量;
B2233、训练最优的弱分类器
设训练总轮数为T,训练最优的弱分类器的方法包括以下步骤:
B22331、设训练轮数t=1
B22332、计算归一化样本权重
B22333.对于每一个特征,在给定样本权重qt,i条件下按照公式(6)训练一个弱分类器ht,j,并计算每个弱分类器对样本集的分类错误率:
εt=minf,p,θΣiqt,i|hj(xi)-yi| (8)
B22334.选择具有最小分类错误率εt的弱分类器ht;
B22335.更新样本权重:
若样本被正确分类,则ei=0,否则ei=1,βt=εt/(1-εt)
B22336、如果t<T,则令t=t+1,转步骤B22332;否则,转步骤B2234;
B2234、输出最终强分类器
B23、采用基于模板匹配的头部检测进一步来识别行人,具体步骤如下:
B231、头部模板建立
针对红外正行人样本的头部轮廓构建了一个“Ω”形位图模板图像F;
B232、采用Canny算子对行人感兴趣区域图像进行边缘检测
B233、进行模板匹配,具体步骤如下:
B2331、距离转换:
设B表示一个二值图像中的目标点集合,则对于该图像中的每一个点p,距离转换公式如下:
其中q为背景像素点,d(p,q)为p到q的欧几里得距离;进行距离转换后,图像中每个像素点的值就会变成与其最近的特征点的距离;
B2332、进行图像匹配,具体步骤如下:
将头部模板与DT图像做卷积,利用头部模板图像F中的特征点f所在的坐标相对应到DT图像中的距离值相加,再求其平均值,即所谓的Chamfer距离,其公式如下:
DT(f)表示f对应于DT图像的欧几里得距离,取平均值的目的是对模板的大小进行归一化;如果待匹配的图像中没有头部,则求得的Chamfer距离通常会远大于在图像中有头部的Chamfer距离,因此选取Chamfer距离最小的区域作为头部最优框的大小和位置;
当边缘图像的Chamfer距离值为检测区域R中最小值时,须再做一次特征点数量上的判断:
上式为边缘图像F的面积计算,主要目的在确保不会因为特征点数稀少才使得平均距离很小;因此当上述两个条件同时成立时,图像匹配成功。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201310190157.0A CN103279741B (zh) | 2013-05-20 | 2013-05-20 | 一种基于车载红外图像的行人预警系统及其工作方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201310190157.0A CN103279741B (zh) | 2013-05-20 | 2013-05-20 | 一种基于车载红外图像的行人预警系统及其工作方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN103279741A true CN103279741A (zh) | 2013-09-04 |
CN103279741B CN103279741B (zh) | 2016-07-06 |
Family
ID=49062256
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201310190157.0A Expired - Fee Related CN103279741B (zh) | 2013-05-20 | 2013-05-20 | 一种基于车载红外图像的行人预警系统及其工作方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN103279741B (zh) |
Cited By (19)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103870837A (zh) * | 2014-02-25 | 2014-06-18 | 奇瑞汽车股份有限公司 | 一种检测待检测区域内是否存在车辆的方法和装置 |
CN104748862A (zh) * | 2013-12-29 | 2015-07-01 | 杭州美盛红外光电技术有限公司 | 分析装置和分析方法 |
CN104952060A (zh) * | 2015-03-19 | 2015-09-30 | 杭州电子科技大学 | 一种红外行人感兴趣区域自适应分割提取方法 |
CN105260712A (zh) * | 2015-10-03 | 2016-01-20 | 上海大学 | 一种车辆前方行人检测方法及系统 |
CN105426852A (zh) * | 2015-11-23 | 2016-03-23 | 天津津航技术物理研究所 | 车载单目长波红外相机行人识别方法 |
CN105787456A (zh) * | 2016-03-02 | 2016-07-20 | 江苏大学 | 一种夜间远红外图像中的行人检测方法 |
CN106340021A (zh) * | 2016-08-18 | 2017-01-18 | 上海联影医疗科技有限公司 | 血管提取方法 |
CN106874900A (zh) * | 2017-04-26 | 2017-06-20 | 桂林电子科技大学 | 一种基于方向盘图像的司机疲劳检测方法和检测装置 |
CN107610392A (zh) * | 2017-09-20 | 2018-01-19 | 北京亚欧震达科技发展有限公司 | 一种动车检修库综合管廊的行人检测及警报的装置和方法 |
CN108154087A (zh) * | 2017-12-08 | 2018-06-12 | 北京航天计量测试技术研究所 | 一种基于特征匹配的红外人体目标检测跟踪方法 |
CN108549864A (zh) * | 2018-04-12 | 2018-09-18 | 广州飒特红外股份有限公司 | 面向车载热成像行人检测的感兴趣区域过滤方法和装置 |
CN108564030A (zh) * | 2018-04-12 | 2018-09-21 | 广州飒特红外股份有限公司 | 面向车载热成像行人检测的分类器训练方法和装置 |
CN109446895A (zh) * | 2018-09-18 | 2019-03-08 | 中国汽车技术研究中心有限公司 | 一种基于人体头部特征的行人识别方法 |
CN109747566A (zh) * | 2017-11-02 | 2019-05-14 | 郭宇铮 | 一种汽车夜视系统 |
US10357218B2 (en) | 2016-06-30 | 2019-07-23 | Shanghai United Imaging Healthcare Co., Ltd. | Methods and systems for extracting blood vessel |
CN110796099A (zh) * | 2019-10-31 | 2020-02-14 | 广东泓胜科技股份有限公司 | 一种车辆超限检测方法及装置 |
CN110956630A (zh) * | 2019-12-18 | 2020-04-03 | 浙江大学 | 平面印刷缺陷检测方法、装置以及系统 |
CN112581426A (zh) * | 2020-11-06 | 2021-03-30 | 上海达适医疗科技有限公司 | 一种红外热成像图像的左右腿识别方法 |
CN113344237A (zh) * | 2021-03-24 | 2021-09-03 | 安徽超视野智能科技有限公司 | 一种违法车辆路线预测方法 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20080033649A1 (en) * | 2006-06-05 | 2008-02-07 | Honda Motor Co., Ltd. | Collision avoidance of a mobile unit |
CN102700569A (zh) * | 2012-06-01 | 2012-10-03 | 安徽理工大学 | 基于图像处理的矿用电机车行人监测方法及报警系统 |
CN102765365A (zh) * | 2011-05-06 | 2012-11-07 | 香港生产力促进局 | 基于机器视觉的行人检测方法及行人防撞预警系统 |
-
2013
- 2013-05-20 CN CN201310190157.0A patent/CN103279741B/zh not_active Expired - Fee Related
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20080033649A1 (en) * | 2006-06-05 | 2008-02-07 | Honda Motor Co., Ltd. | Collision avoidance of a mobile unit |
CN102765365A (zh) * | 2011-05-06 | 2012-11-07 | 香港生产力促进局 | 基于机器视觉的行人检测方法及行人防撞预警系统 |
CN102700569A (zh) * | 2012-06-01 | 2012-10-03 | 安徽理工大学 | 基于图像处理的矿用电机车行人监测方法及报警系统 |
Non-Patent Citations (2)
Title |
---|
赵宗艳: "基于部位组合特征行人检测方法的研究", 《中国优秀硕士学位论文全文数据库》, 15 October 2012 (2012-10-15), pages 3 * |
郭烈: "基于单目视觉的车辆前方行人检测技术研究", 《中国博士学位论文全文数据库》, 15 September 2007 (2007-09-15), pages 3 - 4 * |
Cited By (27)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104748862A (zh) * | 2013-12-29 | 2015-07-01 | 杭州美盛红外光电技术有限公司 | 分析装置和分析方法 |
CN103870837A (zh) * | 2014-02-25 | 2014-06-18 | 奇瑞汽车股份有限公司 | 一种检测待检测区域内是否存在车辆的方法和装置 |
CN104952060B (zh) * | 2015-03-19 | 2017-10-31 | 杭州电子科技大学 | 一种红外行人感兴趣区域自适应分割提取方法 |
CN104952060A (zh) * | 2015-03-19 | 2015-09-30 | 杭州电子科技大学 | 一种红外行人感兴趣区域自适应分割提取方法 |
CN105260712A (zh) * | 2015-10-03 | 2016-01-20 | 上海大学 | 一种车辆前方行人检测方法及系统 |
CN105260712B (zh) * | 2015-10-03 | 2019-02-01 | 上海大学 | 一种车辆前方行人检测方法及系统 |
CN105426852A (zh) * | 2015-11-23 | 2016-03-23 | 天津津航技术物理研究所 | 车载单目长波红外相机行人识别方法 |
CN105426852B (zh) * | 2015-11-23 | 2019-01-08 | 天津津航技术物理研究所 | 车载单目长波红外相机行人识别方法 |
CN105787456A (zh) * | 2016-03-02 | 2016-07-20 | 江苏大学 | 一种夜间远红外图像中的行人检测方法 |
US11344273B2 (en) | 2016-06-30 | 2022-05-31 | Shanghai United Imaging Healthcare Co., Ltd. | Methods and systems for extracting blood vessel |
US10357218B2 (en) | 2016-06-30 | 2019-07-23 | Shanghai United Imaging Healthcare Co., Ltd. | Methods and systems for extracting blood vessel |
CN106340021A (zh) * | 2016-08-18 | 2017-01-18 | 上海联影医疗科技有限公司 | 血管提取方法 |
CN106340021B (zh) * | 2016-08-18 | 2020-11-27 | 上海联影医疗科技股份有限公司 | 血管提取方法 |
CN106874900A (zh) * | 2017-04-26 | 2017-06-20 | 桂林电子科技大学 | 一种基于方向盘图像的司机疲劳检测方法和检测装置 |
CN107610392A (zh) * | 2017-09-20 | 2018-01-19 | 北京亚欧震达科技发展有限公司 | 一种动车检修库综合管廊的行人检测及警报的装置和方法 |
CN109747566A (zh) * | 2017-11-02 | 2019-05-14 | 郭宇铮 | 一种汽车夜视系统 |
CN108154087A (zh) * | 2017-12-08 | 2018-06-12 | 北京航天计量测试技术研究所 | 一种基于特征匹配的红外人体目标检测跟踪方法 |
CN108564030A (zh) * | 2018-04-12 | 2018-09-21 | 广州飒特红外股份有限公司 | 面向车载热成像行人检测的分类器训练方法和装置 |
WO2019196131A1 (zh) * | 2018-04-12 | 2019-10-17 | 广州飒特红外股份有限公司 | 面向车载热成像行人检测的感兴趣区域过滤方法和装置 |
CN108549864B (zh) * | 2018-04-12 | 2020-04-10 | 广州飒特红外股份有限公司 | 面向车载热成像行人检测的感兴趣区域过滤方法和装置 |
CN108549864A (zh) * | 2018-04-12 | 2018-09-18 | 广州飒特红外股份有限公司 | 面向车载热成像行人检测的感兴趣区域过滤方法和装置 |
CN109446895A (zh) * | 2018-09-18 | 2019-03-08 | 中国汽车技术研究中心有限公司 | 一种基于人体头部特征的行人识别方法 |
CN109446895B (zh) * | 2018-09-18 | 2022-04-08 | 中国汽车技术研究中心有限公司 | 一种基于人体头部特征的行人识别方法 |
CN110796099A (zh) * | 2019-10-31 | 2020-02-14 | 广东泓胜科技股份有限公司 | 一种车辆超限检测方法及装置 |
CN110956630A (zh) * | 2019-12-18 | 2020-04-03 | 浙江大学 | 平面印刷缺陷检测方法、装置以及系统 |
CN112581426A (zh) * | 2020-11-06 | 2021-03-30 | 上海达适医疗科技有限公司 | 一种红外热成像图像的左右腿识别方法 |
CN113344237A (zh) * | 2021-03-24 | 2021-09-03 | 安徽超视野智能科技有限公司 | 一种违法车辆路线预测方法 |
Also Published As
Publication number | Publication date |
---|---|
CN103279741B (zh) | 2016-07-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN103279741B (zh) | 一种基于车载红外图像的行人预警系统及其工作方法 | |
CN109829403B (zh) | 一种基于深度学习的车辆防碰撞预警方法及系统 | |
CN109190523B (zh) | 一种基于视觉的车辆检测跟踪预警方法 | |
CN105631414B (zh) | 一种基于贝叶斯分类器的车载多障碍物分类装置及方法 | |
Silva et al. | Automatic detection of motorcyclists without helmet | |
CN105488453B (zh) | 一种基于图像处理的驾驶员未系安全带检测识别方法 | |
CN110866427A (zh) | 一种车辆行为检测方法及装置 | |
CN104573646A (zh) | 基于激光雷达和双目相机的车前行人检测方法及系统 | |
CN106203499A (zh) | 一种基于深度cnn的安全带检测方法 | |
CN112381870B (zh) | 一种基于双目视觉的船舶识别与航速测量系统及方法 | |
CN104123557B (zh) | 一种基于公路监控设备的轿车安全带系挂状态的检测方法 | |
EP2741234B1 (en) | Object localization using vertical symmetry | |
CN113658427A (zh) | 基于视觉与雷达的路况监控方法及系统、设备 | |
CN110060221A (zh) | 一种基于无人机航拍图像的桥梁车辆检测方法 | |
CN106778473A (zh) | 一种车型识别方法 | |
CN103177248B (zh) | 一种基于视觉的快速行人检测方法 | |
Dinh et al. | Image segmentation based on histogram of depth and an application in driver distraction detection | |
CN105117696B (zh) | 一种基于小线分析的未系安全带自动检测方法 | |
CN105426852B (zh) | 车载单目长波红外相机行人识别方法 | |
CN104966064A (zh) | 基于视觉的前方行人测距方法 | |
CN103942541A (zh) | 一种基于车载视觉的盲区内电动车自动检测方法 | |
Álvarez et al. | Perception advances in outdoor vehicle detection for automatic cruise control | |
Pham et al. | A robust multiclass vehicle detection and classification algorithm for traffic surveillance system | |
CN109190591A (zh) | 一种基于摄像头的前车识别预警装置及识别预警方法 | |
Sotelo et al. | Vision-based blind spot detection using optical flow |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20160706 Termination date: 20190520 |
|
CF01 | Termination of patent right due to non-payment of annual fee |