CN103942532A - 基于车载摄像机的盲区车辆检测方法 - Google Patents

基于车载摄像机的盲区车辆检测方法 Download PDF

Info

Publication number
CN103942532A
CN103942532A CN201410093762.0A CN201410093762A CN103942532A CN 103942532 A CN103942532 A CN 103942532A CN 201410093762 A CN201410093762 A CN 201410093762A CN 103942532 A CN103942532 A CN 103942532A
Authority
CN
China
Prior art keywords
vehicle
roi
region
image
doubtful
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201410093762.0A
Other languages
English (en)
Other versions
CN103942532B (zh
Inventor
李文辉
刘培勋
王莹
倪洪印
傅博
陈存祺
肖文超
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Jilin University
Original Assignee
Jilin University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Jilin University filed Critical Jilin University
Priority to CN201410093762.0A priority Critical patent/CN103942532B/zh
Publication of CN103942532A publication Critical patent/CN103942532A/zh
Application granted granted Critical
Publication of CN103942532B publication Critical patent/CN103942532B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Image Analysis (AREA)

Abstract

本发明方法涉及一种基于车载相机的在行车环境下对驾驶盲区中的车辆检测的一种方法,在车辆较为密集,天气情况不佳的情况下,也可获得令人满意的精确程度;本方法可广泛应用于对行车环境下盲区中车辆的检测问题,对图片的类似分析问题,如:驾驶盲区中车辆的检测等;同时本方法对环境和设备的要求很低,拓宽了应用的场合。

Description

基于车载摄像机的盲区车辆检测方法
技术领域
本发明方法涉及一种基于车载相机的在行车环境下对驾驶盲区中的车辆检测的一种方法,在车辆较为密集,天气情况不佳的情况下,也可获得令人满意的精确程度;本方法可广泛应用于对行车环境下盲区中车辆的检测问题,对图片的类似分析问题,如:驾驶盲区中车辆的检测等;同时本方法对环境和设备的要求很低,拓宽了应用的场合。
背景技术
近年来数字图像处理技术日益成熟,各种目标检测算法效果越来越好。一些边缘检测算法也可以提取出图像清晰的轮廓,这就为图像中的盲区车辆检测问题提供了基础。传统的基于阴影的车辆检测等方法可以处理这类问题,但是行车环境下,车辆可能很密集,天气情况可能不佳,这些情形下传统的方法精度并不很高。故要实现驾驶盲区中车辆的自动检测,所用算法需要灵活高效,且可以在各种工况下应用。
发明内容
本发明的目的是为了检测行车环境下驾驶盲区中的车辆,通过对一定区域车辆的检测,配合其它指标实现对车辆的自动化检测。
本发明提供一种利用车载摄像机和处理器对行车环境下驾驶盲区中车辆的检测方法,通过实时捕获的图片,利用图像处理技术,可通过基于车辆水平方向边缘统计直方图的方法,获取一定区域中疑似车辆区域。即使是在车辆密集,天气情况不佳的情况下,也可通过对车辆水平方向边缘统计直方图进行中值滤波处理,通过对得到的车辆波进行分割,得到疑似车辆区域的左上,右下及中心点的横坐标值,通过一定区域中的水平方向边缘线得到疑似车辆区域的左上,右下及中心点的纵坐标。并可通过基于运动轨迹的车辆检测方法,对一定时间内,一定区域内疑似车辆区域的数目Vehicle_num进行统计,通过Vehicle_num判断疑似车辆区域是否为真实车辆区域。本发明即是根据车辆的水平方向边缘判断图像中的疑似车辆区域,通过运动轨迹判断疑似车辆区域是否为车辆,进而得到车辆在图像中的位置信息。
本发明方法的条件和步骤如下:
1.所需设备:高清工业相机(型号:DAHENG-F-033C),定焦镜头(型号:Computar-M0814-MP2)传输设备(USB数据线),存储设备,处理器(本系统采用PC机)。
2.实现步骤:
本发明方法(010)部分,采用基于水平方向边缘统计直方图的车辆检测方法提取驾驶盲区中疑似车辆区域并给出疑似车辆区域的左上,右下点及中心点的横纵坐标值,保留原始的图片,具体步骤如下:
步骤C011:做好初始化车载摄像机,初始化编解码器;
步骤C012:利用车载摄像机获取图像Image,保存获得的图像Image;
步骤C013:通过Sobel算子提取图像Image中的水平方向边缘,获得粗线条的车辆水平方向边缘和一些干扰伪边缘的边缘图像Image_edge;
步骤C014:将边缘图像Image_edge的下2/3区域设置为检测区域Detection_area,统计检测区域Detection_area中每一列上的边缘像素点个数,以生成该区域的水平方向边缘像素点统计直方图His_hor;
步骤C015:对C014步骤中的水平边缘像素点统计直方图His_hor进行中值滤波处理,得到了车辆波Vehicle_wave;
步骤C016:通过对车辆波Vehicle_wave进行分割,获得图像中疑似车辆区域Vehicle_roi的左上,右下点的横坐标X_roi_min,X_roi_max;
步骤C017:在以左上,右下点的横坐标X_roi_min,X_roi_max为左右边界的检测子矩形区域Detection_area_s内,根据Detection_area_s内的水平方向边缘线的位置,获得疑似车辆区域Vehicle_roi的左上,右下点的纵坐标,保存坐标值Y_roi_min,Y_roi_max;
步骤C018:根据疑似车辆区域Vehicle_roi的左上,右下点的横纵坐标计算出疑似车辆区域的中心点的横纵坐标,保存坐标值(X_roi_center,Y_roi_center)生成疑似车辆区域图像Image_vehicle,保存Image_vehicle;
本发明方法(020)部分,本部分为采用基于运动轨迹的车辆检测方法对疑似区域进行车辆确定的过程,具体步骤如下:
步骤C021:读取(010)部分的方法所得到的Image_vehicle,并记录相应疑似车辆区域Vehicle_roi的中心点横纵坐标值(X_roi_center,Y_roi_center);
步骤C022:判断视频中每一帧图像中的疑似车辆区域的中心点(X_roi_center,Y_roi_center)是否落在前一帧确定出的疑似车辆区域中心点周围内,如连续Num帧内落在中心点周围的中心点数目超过给定阈值Vehicle_Num,则认为此疑似车辆区域为车辆区域;
步骤C023:根据(010)部分确定的疑似车辆区域的左上,右下点的横纵坐标值,标记出车辆在图像Image中的位置,得到结果图Image_result,保存Image_result。
有益效果:
本发明提出了一种基于车载摄像机的行车环境下车辆检测方法,这种方法的灵活性较高,可在对精度要求不同的情况下做出调整,通过改变算法的相关阈值,可以满足对精度和效率的要求。本方法是根据车辆的水平方向边缘判断图像中的疑似车辆区域,通过运动轨迹判断疑似车辆区域是否为车辆,而非基于阴影的车辆检测等常规方法。这不仅提高了算法的检测精度和效率,更可以解决基于阴影的车辆检测方法在车辆较为集中以及天气不佳的情况下无法检测的问题。
附图说明
图1为使用Sobel算子提取的水平方向边缘。
图2为检测区域的水平方向边缘像素点统计直方图。
图3为中值滤波后的车辆波示意图。
图4为白色矩形区域示意图。
图5为连续25帧内疑似车辆区域中心点位置分布图。
图6为Vehicle_roi定义示意图。
图7为车辆检测结果图。
具体实施方式
具体实施方式以城市道路中常见的小型汽车的检测为例。图1为(010)部分经过步骤C011到步骤C013边缘提取后的图像Image_edge。得到Image_edge之前,先通过车载摄像机得到了彩色图像Image。在图1上可以看到除了车辆水平方向边缘之外,还有许多短小零碎的伪边缘。由于车体的水平边缘数量多,且比较规则,故水平方向边缘是表现车辆的一个很好特征。图像的上1/3区域为天空,为减少计算量,将图像的下2/3区域设置为检测区域Detection_area。统计检测区域每一列上的水平方向边缘像素点个数,得到如图2所示该区域的水平方向边缘像素点统计直方图His_hor。水平边缘直方图的级数等于感兴趣区域的宽度,每一级的bin值为对应列上的边缘像素点个数。
使用步骤C014到步骤C016能准确地确定出疑似车辆区域Vehicle_roi的左上,右下及中心点的横坐标X_roi_min,X_roi_max。对水平边缘直方图进行中值滤波处理,得到了如图3所示的车辆波Vehicle_wave,通过对车辆波使用一条阈值直线Y=Threshold_HorHis进行分割,得到了直线Y=Threshold_HorHis与车辆波的交点,两个交点的横坐标即为检测区域中的疑似车辆区域的左上,右下点横坐标,实现中设置阈值Threshold_HorHis为10。
步骤C017确定了疑似车辆区域的左上,右下点的纵坐标,首先在水平边缘图中以左上,右下点的横坐标为左右边界,检测区域的第1行和第H行为上下边界取如图4中所示的白色矩形区域Detection_area_s,Detection_area_s中包含多条水平线段。通过对多个Detection_area_s进行分析发现,在矩形区域中属于车辆的水平线段的纵向间距较小。考虑到不同距离下车载摄像机捕获的车辆在图像中具有不同的尺寸,且不同尺寸车辆包含的水平线段之间存在不同的间距,因此需要自适应地设置一个距离阈值Threshold_dis来确定物体的上下边界。实现过程中自适应地根据确定的矩形区域的宽度W设置阈值Threshold_dis=Min(W/6,100)。设置阈值Threshold_dis后,从上到下对矩形区域中的每一条水平Horizontal_linei使用以下规则进行判断:
规则1.若Horizontal_linei是出现的第一条水平线段,则它是第一个物体的上边界;
规则2.若Horizontal_linei是最后一条水平线段,则它是最后一个物体的下边界;
规则3.若当前Horizontal_linei与其相邻的下一条Horizontal_linei+1之间的间距大于
Threshold_dis,则Horizontal_linei为第J个物体的下边界,Horizontal_linei+1为第
J+1个物体的上边界;
规则4.若Horizontal_linei与其相邻的下面一条Horizontal_linei+1之间的间距小于等于Threshold_dis,则这两条直线属于同一个物体。
通过上述规则得到了车顶和车底的位置,从而确定出疑似车辆区域的左上,右下点的纵坐标:
通过使用大量视频对基于水平边缘直方图的车辆检测算法进行测试后发现,连续25帧提取出的疑似车辆的中心落在同一区域内。图5为连续25帧内,使用基于水平方向边缘像素点统计直方图的车辆检测算法提取的疑似车辆区域的中心位置,其中的2个为真实车辆,编号分别为车辆1,车辆2。
定义如图6所示的基于水平边缘直方图的车辆检测算法提取的疑似车辆区域:Vehicle_roi={X_roi_center,Y_roi_center,Width_vehicle_roi,Height_vehicle_roi,Search_window_vehicle_roi,Seq_vehicle_roij}。其中X_roi_center,Y_roi_center表示提取的疑似车辆区域的中心点横、纵坐标。Width_vehicle_roi,Height_vehicle_roi分别为疑似车辆区域的宽和高。Search_window_vehicle_roi为搜索框,其定义为以每个疑似车辆区域的中心为中心,边长为2×STEP的一个矩形区域,实现过程中STEP取值为5,且每隔5帧根据当前物体的中心更新搜索框的中心。Seq_vehicle_roi j用于记录连续8帧内疑似车辆区域的中心落在搜索框内的情况。步骤C021-C023为采用基于运动轨迹的车辆检测方法对疑似区域进行车辆确定的过程,具体操作如下:
Step1使用基于水平方向边缘像素点统计直方图的车辆检测算法提取视频中每一帧的疑似车辆区域,并用Vehicle_roii记录当前帧中的疑似车辆区域的相关信息,初始化每个疑似车辆区域的搜索框Search_window_vehicle_roii
Step2循环判断当前帧中的每一个疑似车辆区域Vehicle_roin的中心(X_roi_centern,Y_roi_centern)是否落在前一帧确定的感兴趣区域Vehicle_roii的搜索框内,若落在搜索框Search_window_vehicle_roii内则将Seq_vehicle_roiij赋值为1,否则将Seq_vehicle_roiij赋值为0,其中i=1,2……Num,j=1,2……N。若当前帧中的某一疑似车辆区域未落在任何一个前一帧确定出来的感兴趣区域Vehicle_roii的搜索框内,则认定该区域为新出现的感兴趣区域,并初始该区域为Vehicle_roii+1
Step3统计连续8帧内队列Seq_vehicle_roii中值为1的元素个数,若为1的元素个数大于4,则确定疑似车辆区域Vehicle_roii为车辆,并在结果图Image_result中标示出该车辆。
Step4统计连续8帧内队列Seq_vehiclei中值为0的元素个数,若为0的元素个数等于8,则认为该疑似车辆区域Vehicle_roii为干扰,删除该感兴趣区域。
Step5保存如图7所示的结果图Image_result。

Claims (1)

1.基于车载摄像机的盲区车辆检测方法,所用设备由普通PC机,成像系统组成,成像系统采用车载摄像机;其特征在于,实现步骤如下:
(010)部分,采用基于水平方向边缘统计直方图的车辆检测方法提取驾驶盲区中疑似车辆区域并给出疑似车辆区域的左上,右下点及中心点的横纵坐标值,保留原始的图片,具体步骤如下:
步骤C011:做好初始化车载摄像机,初始化编解码器;
步骤C012:利用车载摄像机获取图像Image,保存获得的图像Image;
步骤C013:通过Sobel算子提取图像Image中的水平方向边缘,获得粗线条的车辆水平方向边缘和一些干扰伪边缘的边缘图像Image_edge;
步骤C014:将边缘图像Image_edge的下2/3区域设置为检测区域Detection_area,统计检测区域Detection_area中每一列上的边缘像素点个数,以生成该区域的水平方向边缘像素点统计直方图His_hor;
步骤C015:对C014步骤中的水平边缘像素点统计直方图His_hor进行中值滤波处理,得到了车辆波Vehicle_wave;
步骤C016:通过对车辆波Vehicle_wave进行分割,获得图像中疑似车辆区域Vehicle_roi的左上,右下点的横坐标X_roi_min,X_roi_max;
步骤C017:在以左上,右下点的横坐标X_roi_min,X_roi_max为左右边界的检测子矩形区域Detection_area_s内,根据Detection_area_s内的水平方向边缘线的位置,获得疑似车辆区域Vehicle_roi的左上,右下点的纵坐标,保存坐标值Y_roi_min,Y_roi_max;
步骤C018:根据疑似车辆区域Vehicle_roi的左上,右下点的横纵坐标计算出疑似车辆区域的中心点的横纵坐标,保存坐标值(X_roi_center,Y_roi_center)生成疑似车辆区域图像Image_vehicle,保存Image_vehicle;
(020)部分,采用基于运动轨迹的车辆检测方法对疑似区域进行车辆确定,具体步骤如下:
步骤C021:读取(010)部分的方法所得到的Image_vehicle,并记录相应疑似车辆区域Vehicle_roi的中心点横纵坐标值(X_roi_center,Y_roi_center);
步骤C022:判断视频中每一帧图像中的疑似车辆区域的中心点(X_roi_center,Y_roi_center)是否落在前一帧确定出的疑似车辆区域中心点周围内,如连续Num帧内落在中心点周围的中心点数目超过给定阈值Vehicle_Num,则认为此疑似车辆区域为车辆区域;
步骤C023:根据(010)部分确定的疑似车辆区域的左上,右下点的横纵坐标值,标记出车辆在图像Image中的位置,得到结果图Image_result,保存Image_result。
CN201410093762.0A 2014-03-14 2014-03-14 基于车载摄像机的盲区车辆检测方法 Expired - Fee Related CN103942532B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201410093762.0A CN103942532B (zh) 2014-03-14 2014-03-14 基于车载摄像机的盲区车辆检测方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410093762.0A CN103942532B (zh) 2014-03-14 2014-03-14 基于车载摄像机的盲区车辆检测方法

Publications (2)

Publication Number Publication Date
CN103942532A true CN103942532A (zh) 2014-07-23
CN103942532B CN103942532B (zh) 2017-02-15

Family

ID=51190196

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410093762.0A Expired - Fee Related CN103942532B (zh) 2014-03-14 2014-03-14 基于车载摄像机的盲区车辆检测方法

Country Status (1)

Country Link
CN (1) CN103942532B (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105711501A (zh) * 2016-04-19 2016-06-29 深圳市航盛电子股份有限公司 一种基于汽车环视相机的盲区中车辆监测方法及系统
CN106504542A (zh) * 2016-09-30 2017-03-15 北京中星微电子有限公司 车速智能监控方法和系统
CN109657643A (zh) * 2018-12-29 2019-04-19 百度在线网络技术(北京)有限公司 一种图像处理方法及装置

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2010034065A1 (en) * 2008-09-25 2010-04-01 National Ict Australia Limited Detection of vehicles in an image
CN102610104A (zh) * 2012-03-16 2012-07-25 南京航空航天大学 一种车载的前方车辆检测方法
CN102632839A (zh) * 2011-02-15 2012-08-15 汽车零部件研究及发展中心有限公司 一种基于后视图像认知的车载盲区预警系统及方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2010034065A1 (en) * 2008-09-25 2010-04-01 National Ict Australia Limited Detection of vehicles in an image
CN102165493A (zh) * 2008-09-25 2011-08-24 澳大利亚国家Ict有限公司 对图像中的车辆的检测
CN102632839A (zh) * 2011-02-15 2012-08-15 汽车零部件研究及发展中心有限公司 一种基于后视图像认知的车载盲区预警系统及方法
CN102610104A (zh) * 2012-03-16 2012-07-25 南京航空航天大学 一种车载的前方车辆检测方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
WEN-HUI LI,ET AL: "Co-training Algorithm Based on On-line Boosting for", 《INTERNATIONAL CONFERENCE ON INFORMATION AND AUTOMATION》 *

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105711501A (zh) * 2016-04-19 2016-06-29 深圳市航盛电子股份有限公司 一种基于汽车环视相机的盲区中车辆监测方法及系统
CN106504542A (zh) * 2016-09-30 2017-03-15 北京中星微电子有限公司 车速智能监控方法和系统
CN109657643A (zh) * 2018-12-29 2019-04-19 百度在线网络技术(北京)有限公司 一种图像处理方法及装置

Also Published As

Publication number Publication date
CN103942532B (zh) 2017-02-15

Similar Documents

Publication Publication Date Title
US8902053B2 (en) Method and system for lane departure warning
CN107330376B (zh) 一种车道线识别方法及系统
CN105260713B (zh) 一种车道线检测方法和装置
CN111784685A (zh) 一种基于云边协同检测的输电线路缺陷图像识别方法
CN105868688B (zh) 行驶路面检测装置和行驶路面检测方法
CN102663760B (zh) 一种对图像中的车辆挡风镜区域进行定位分割的方法
CN106971155B (zh) 一种基于高度信息的无人车车道场景分割方法
CN104766071B (zh) 一种应用于无人驾驶汽车的交通灯快速检测算法
CN106971185B (zh) 一种基于全卷积网络的车牌定位方法及装置
CN105184812B (zh) 一种基于目标跟踪的行人徘徊检测方法
CN108052904B (zh) 车道线的获取方法及装置
CN104657735A (zh) 车道线检测方法、系统、车道偏离预警方法及系统
CN107909036B (zh) 一种基于视差图的道路检测方法及装置
CN101334836A (zh) 一种融合色彩、尺寸和纹理特征的车牌定位方法
CN107895151A (zh) 一种强光照条件下基于机器视觉的车道线检测方法
US9747507B2 (en) Ground plane detection
CN110197494B (zh) 一种基于单目红外图像的受电弓接触点实时检测算法
CN107832674B (zh) 一种车道线检测方法
CN105303153A (zh) 一种车辆车牌识别方法及装置
US10726277B2 (en) Lane line detection method
DE102014012653A1 (de) Bildverarbeitungsverfahren für Fahrzeugkamera und dieses anwendende Bildverarbeitungsvorrichtung
CN107146238A (zh) 基于特征块优选的运动目标跟踪方法
CN102393902A (zh) 基于h_s二维直方图和区域颜色匹配的车辆颜色检测方法
CN104156727A (zh) 一种基于单目视觉的灯光倒影检测的方法
CN108460333A (zh) 基于深度图的地面检测方法及装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20170215

Termination date: 20200314