CN108133231A - 一种尺度自适应的实时车辆检测方法 - Google Patents

一种尺度自适应的实时车辆检测方法 Download PDF

Info

Publication number
CN108133231A
CN108133231A CN201711338422.XA CN201711338422A CN108133231A CN 108133231 A CN108133231 A CN 108133231A CN 201711338422 A CN201711338422 A CN 201711338422A CN 108133231 A CN108133231 A CN 108133231A
Authority
CN
China
Prior art keywords
detection
vehicle
adaption
real
detection window
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201711338422.XA
Other languages
English (en)
Other versions
CN108133231B (zh
Inventor
王海
李�诚
蔡英凤
陈龙
刘擎超
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Jiangsu University
Original Assignee
Jiangsu University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Jiangsu University filed Critical Jiangsu University
Priority to CN201711338422.XA priority Critical patent/CN108133231B/zh
Publication of CN108133231A publication Critical patent/CN108133231A/zh
Application granted granted Critical
Publication of CN108133231B publication Critical patent/CN108133231B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/21Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
    • G06F18/214Generating training patterns; Bootstrap methods, e.g. bagging or boosting
    • G06F18/2148Generating training patterns; Bootstrap methods, e.g. bagging or boosting characterised by the process organisation or structure, e.g. boosting cascade
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/24Classification techniques
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/20Image preprocessing
    • G06V10/25Determination of region of interest [ROI] or a volume of interest [VOI]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V2201/00Indexing scheme relating to image or video recognition or understanding
    • G06V2201/08Detecting or categorising vehicles

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Evolutionary Biology (AREA)
  • Evolutionary Computation (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • General Engineering & Computer Science (AREA)
  • Artificial Intelligence (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Multimedia (AREA)
  • Image Analysis (AREA)
  • Traffic Control Systems (AREA)

Abstract

本发明公开了一种尺度自适应的实时车辆检测方法,属于模式识别领域。该方法首先通过人工选取车辆及非车辆的图片,并分别标记为正、负样本;然后将任意一个正负样本用Haar特征进行表征,生成Haar特征向量Hi,采用Adaboost算法对Hi进行训练,即可训练得到车辆分类器C;接着通过图像采集装置采集车辆前方的图像,通过分类器C的反馈值调整检测区域范围,实现尺度自适应检测;最后通过对检测窗口进行尺度自适应变化及轮询遍历后,检测出一幅感兴趣区域图像中所有存在车辆。本发明减少了检测窗口的搜索次数,提高了车辆检测算法的实时性并保证准确率。

Description

一种尺度自适应的实时车辆检测方法
技术领域
本发明属于模式识别领域,具体涉及一种尺度自适应的实时车辆检测方法。
背景技术
伴随着城市化的进展和汽车的普及,交通事故的发生剧增,造成了大量的人员伤害和经济损失。如何保障好车辆在公路上的安全、快速的行驶,避免追尾等交通事故的发生,成为汽车领域的重要课题。而传统的被动安全已经远远不能避免交通的事故发生,汽车主动安全的概念应运而生,而道路上的前车检测已成为汽车主动安全技术研究的一个热点。视觉传感由于具有信息量大、成本低廉的特点,在汽车主动安全领域有着广泛的应用。
车辆检测技术是指利用图像传感手段对图像中的车辆搜寻和判定,获得图像中车辆的多种属性(如位置、速度、形状、外观)的过程。它是汽车主动安全领域,尤其是实现追尾预警(Forward Collision Warning,FCW)以及自动紧急刹车(Automatic EmergencyBraking,AEB)功能的关键技术之一。
目前,基于Adaboost的车辆检测方法较为成熟。但是,由于算法耗时相对较长,使得车辆检测效率不足,导致无法满足产业化需求。因此,如何提高车辆检测算法的准确性、鲁棒性和实时性,提高车辆检测效率一直是亟待解决的问题。
通过研究,发现检测窗口的搜索次数过多是造成检测效率低下的一个重要原因。基于此,本发明提出了一种尺度自适应的目标检测算法,目的是减少检测窗口的搜索次数,以提高车辆检测算法的实时性并保证准确率。
发明内容
本发明的目的在于提供一种尺度自适应的实时车辆检测方法,通过对ROI区域内的首次车辆检测的输出结果迭代更新下一次检测时的检测窗口位置,从而减少检测窗口的搜索次数,提升检测速度。该方法检测的准度高,实时性好,具有工程实用价值。
本发明详细技术方案如下:
一种尺度自适应的实时车辆检测方法,包括以下步骤:
步骤1,人工选取车辆及非车辆的图片,并分别标记为正、负样本;
步骤2,将任意一个正负样本Si用Haar特征进行表征,生成Haar特征向量Hi
i=1,2,...,n;
步骤2-1,选取Haar特征;
步骤2-2,不同类型、尺度和位置的Haar特征计算数值构成了某个样本的一个多维Haar特征列向量Hi,i=1,2,...,n;
步骤3,采用Adaboost算法对Haar特征向量Hi进行训练,即可训练得到车辆分类器C;
步骤4,通过图像采集装置采集车辆前方的图像;
步骤5,通过分类器C的反馈值调整检测区域范围,实现尺度自适应检测;
步骤5-1,初始感兴趣区域ROI提取,初始感兴趣区域ROI的取值范围由图像采集装置的安装角度确定;
步骤5-2,检测窗口的起始位置选在初始感兴趣区域ROI的左上角处,以该位置作为首次检测车辆的位置;
步骤5-3,用分类器C检测检测窗口所在位置的图片,输出对应的返回值i,i为该图片未通过分类器时所对应的分类器被排除的层数;
步骤5-4,根据分类器被排除的层数i,为检测窗口自适应选取后续检测的位置;
步骤5-5,在对初始感兴趣区域ROI从左上角到右下角按步骤5-2至5-4遍历完一遍后,将检测窗口乘以比例系数k,进行下一次的遍历;
步骤6,通过对步骤5中的检测窗口进行尺度自适应变化及轮询遍历后,检测出一幅感兴趣区域ROI图像中所有存在车辆。
进一步,所述步骤4中图像采集装置为CCD摄像机或CMOS摄像机。
进一步,所述步骤5-4中检测窗口检测的位置确定公式为:
其中:(X,Y,X',Y')为忽略的检测范围,即检测窗口不会完全在这区间内,且满足X≥0,Y≥0,X′≤img_width,Y′≤img_height,img_width、img_height分别表示图像B的宽度和高度;(xLT,yLT,xRD,yRD)为检测窗口的位置,xLT,yLT表示检测窗口左上角的横纵坐标,xRD,yRD表示检测窗口右下角的横纵坐标;L为分类器C的总级数。
本发明的有益效果为:
本发明提出了一种尺度自适应的实时车辆检测方法,该方法通过分类器的输出结果自适应的调整下一检测窗口的位置,实现车辆的实时检测和定位,极大地减少了搜索次数,提高了车辆检测的速度并保证了准确率和鲁棒性。
附图说明
图1为本发明实施方案流程图;
图2为本发明选取的10类Haar特征示意图;
图3为本发明ROI区域及检测窗口与忽略范围图;
图4为车辆检测分类器级联结构示意图。
具体实施方式
下面将结合说明书附图对本发明作进一步的说明。
为使本发明便于理解,对以下几个概念进行说明:
感兴趣区(ROI:Reign of Interest):在图像处理领域,感兴趣区域(ROI)是指从图像中选择的一个局部图像区域,这个区域是图像分析所关注的重点。确定该区域以便进行进一步处理。使用ROI往往可以减少处理时间,增加精度。
步长:即为检测窗口移动的像素个数。
如图1所示,一种尺度自适应的实时车辆检测方法,包括步骤:
步骤1:通过人工选取出大量的车辆及非车辆的图片,分别标记为正负样本,并将所有正负样本都归一化到24x24像素的尺寸。设正负样本数共为n。
步骤2:将任意一个正负样本Si用Haar特征进行表征,生成Haar特征向量Hi(i=1,2,...,n):
步骤2-1:选取如图2所示的10类Haar特征;
步骤2-2:不同类型、尺度和位置的Haar特征计算数值就构成了某个样本的一个多维Haar特征列向量Hi(i=1,2,...,n)。
步骤3:分类器训练:采用Adaboost算法对步骤2中生成的Haar特征向量Hi进行训练,即可训练得到车辆分类器C。
步骤4:图像采集:将图像采集装置(CCD或CMOS摄像机)安装于车辆后视镜下方,调整CMOS摄像机的位置和姿态,以获得本车前方视野合适、画面清晰的图像;CMOS摄像机采集的车辆前方的图像,记为图像A(图3)。
步骤5:自适应尺度检测窗口检测:
步骤5-1:初始感兴趣区域(ROI)提取,由于图像A中上三分之一部分为天空、树木、标识牌或建筑物等干扰信息,而前方车辆只会处于图像A的下三分之二部分,因此选定图像A的下三分之二部分作为初始感兴趣区域以减少后续计算量,将该初始ROI区域图像记为图像B,如图3所示;ROI的取值范围仅为本实施例的合适比例,其余情况下的比例参数视摄像机的安装角度而定;
步骤5-2:检测窗口的起始位置选在图像B的左上角(0,0,win_size,win_size)处,以该位置作为首次检测车辆的位置;为下面叙述方便,将检测窗口的位置统一表示成(xLT,yLT,xRD,yRD),其中:xLT,yLT表示检测窗口左上角的横纵坐标,xRD,yRD表示检测窗口右下角的横纵坐标,win_size的初始值设为24;
步骤5-3:设车辆分类器C共有L级,其结构示意图如图4所示,对于任意位置的检测窗口(xLT,yLT,xRD,yRD),将该窗口内的图片用Haar特征向量Hi表征,然后将向量Hi输入到步骤3得到的分类器C中,如果分类器C输出待判断图片为车辆,为了能更好的把握该图片周边细致特征,将检测窗口以较小步长每次一个像素按照自左而右自上而下的顺序进行移动;若该图片在分类器C的某一级被认定为非车辆,则分类器记录下该级的层数,记为i,进入下一步的迭代;
步骤5-4:在步骤5-3中,若某一检测窗口内的待检图片在前级被排除,则该检测窗口周边的5个像素范围予以忽略,如图3所示的忽略区域,不参与后期的检测,同时检测窗口向右移动6个像素;同理,若某一检测窗口内的待检图片在前级被排除,则该检测窗口周边的4个像素范围予以忽略,同时检测窗口向右移动5个像素;若某一检测窗口内的待检图片在前级被排除,则该检测窗口周边的3个像素范围予以忽略,同时检测窗口向右移动4个像素;若某一检测窗口内的待检图片在最后级被排除,则该检测窗口周边的2个像素范围予以忽略,同时检测窗口向右移动3个像素,其计算公式如下:
其中:(X,Y,X',Y')为忽略的检测范围,即检测窗口不会完全在这区间内,且满足X≥0,Y≥0,X′≤img_width,Y′≤img_height,img_width、img_height分别表示图像B的宽度和高度;
步骤5-5:在对图像B从左上角到右下角按步骤5-2-5-4遍历完一遍后,将检测窗口乘以比例系数k,使之尺寸变为win_size*k(结果取整数),重复步骤5-2-5-4,直到检测窗口大于图像B的宽度或高度的一半后停止遍历。
步骤6:通过对步骤5中的检测窗口进行尺度自适应变化及轮询遍历后,检测出一幅ROI图像中所有存在车辆。
步骤1至步骤6即对传统Adaboost算法改进后,通过检测窗口的尺度自适应变化,实现实时车辆检测的全部过程。
采用上述方法,首先使用C++语言编写尺度自适应车辆检测软件;然后将摄像机安装在汽车上(内部和外部皆可),并在车辆行驶过程中对前方图像进行采集;随后,把拍摄到的原始图像(640x480)输入到车辆检测软件中进行处理;实验共采集多种工况下约50小时的视频,检测的正确率为93%,平均每帧处理时间约为40ms,运行环境为WinXP,CPU的主频为2.4GHz。
综上所述,本发明充分利用传统车辆检测算法中检测窗口搜索次数过多的缺点,采用自适应尺度范围变化的实时车辆检测策略,从而实现了准确、实时的从所提供的输入源图像中检测出车辆的方法。
尽管已经示出和描述了本发明的实施例,本领域的普通技术人员可以理解:在不脱离本发明的原理和宗旨的情况下可以对这些实施例进行多种变化、修改、替换和变型,本发明的范围由权利要求及其等同物限定。

Claims (7)

1.一种尺度自适应的实时车辆检测方法,其特征在于,包括以下步骤:
步骤1,人工选取车辆及非车辆的图片,并分别标记为正、负样本;
步骤2,将任意一个正负样本Si用Haar特征进行表征,生成Haar特征向量Hi,i=1,2,...,n;
步骤3,采用Adaboost算法对Haar特征向量Hi进行训练,即可训练得到车辆分类器C;
步骤4,通过图像采集装置采集车辆前方的图像;
步骤5,通过分类器C的反馈值调整检测区域范围,实现尺度自适应检测;
步骤6,通过对步骤5中的检测窗口进行尺度自适应变化及轮询遍历后,检测出一幅感兴趣区域ROI图像中所有存在车辆。
2.根据权利要求1所述的一种尺度自适应的实时车辆检测方法,其特征在于,所述步骤2具体为:
步骤2-1,选取Haar特征;
步骤2-2,不同类型、尺度和位置的Haar特征计算数值构成了某个样本的一个多维Haar特征列向量Hi,i=1,2,...,n。
3.根据权利要求1所述的一种尺度自适应的实时车辆检测方法,其特征在于,所述步骤4中图像采集装置为CCD摄像机。
4.根据权利要求1所述的一种尺度自适应的实时车辆检测方法,其特征在于,所述步骤4中图像采集装置为CMOS摄像机。
5.根据权利要求1所述的一种尺度自适应的实时车辆检测方法,其特征在于,所述步骤5具体为:
步骤5-1,初始感兴趣区域ROI提取;
步骤5-2,检测窗口的起始位置选在初始感兴趣区域ROI的左上角处,以该位置作为首次检测车辆的位置;
步骤5-3,用分类器C检测检测窗口所在位置的图片,输出对应的返回值i,i为该图片未通过分类器时所对应的分类器被排除的层数;
步骤5-4,根据分类器被排除的层数i,为检测窗口自适应选取后续检测的位置;
步骤5-5,在对初始感兴趣区域ROI从左上角到右下角按步骤5-2至5-4遍历完一遍后,将检测窗口乘以比例系数k,进行下一次的遍历。
6.根据权利要求5所述的一种尺度自适应的实时车辆检测方法,其特征在于,所述步骤5-1中初始感兴趣区域ROI的取值范围由图像采集装置的安装角度确定。
7.根据权利要求5所述的一种尺度自适应的实时车辆检测方法,其特征在于,所述步骤5-4中检测窗口检测的位置确定公式为:
其中:(X,Y,X',Y')为忽略的检测范围,即检测窗口不会完全在这区间内,且满足X≥0,Y≥0,X′≤img_width,Y′≤img_height,img_width、img_height分别表示图像B的宽度和高度;(xLT,yLT,xRD,yRD)为检测窗口的位置,xLT,yLT表示检测窗口左上角的横纵坐标,xRD,yRD表示检测窗口右下角的横纵坐标;L为分类器C的总级数。
CN201711338422.XA 2017-12-14 2017-12-14 一种尺度自适应的实时车辆检测方法 Active CN108133231B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201711338422.XA CN108133231B (zh) 2017-12-14 2017-12-14 一种尺度自适应的实时车辆检测方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201711338422.XA CN108133231B (zh) 2017-12-14 2017-12-14 一种尺度自适应的实时车辆检测方法

Publications (2)

Publication Number Publication Date
CN108133231A true CN108133231A (zh) 2018-06-08
CN108133231B CN108133231B (zh) 2020-02-21

Family

ID=62389399

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201711338422.XA Active CN108133231B (zh) 2017-12-14 2017-12-14 一种尺度自适应的实时车辆检测方法

Country Status (1)

Country Link
CN (1) CN108133231B (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109085166A (zh) * 2018-06-14 2018-12-25 天津大学 基于自调节窗口的塑料气泡检测方法
CN110969065A (zh) * 2018-09-30 2020-04-07 北京四维图新科技股份有限公司 车辆检测方法、装置、前车防撞预警设备及存储介质
CN112907510A (zh) * 2021-01-15 2021-06-04 中国人民解放军国防科技大学 一种表面缺陷检测方法

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20060105272A (ko) * 2005-04-04 2006-10-11 엘지전자 주식회사 아다부스트 알고리즘을 이용한 안구 영상 판단 방법
CN103093250A (zh) * 2013-02-22 2013-05-08 福建师范大学 一种基于新Haar-like特征的Adaboost人脸检测方法
CN105096611A (zh) * 2015-08-17 2015-11-25 深圳市中科车港实业有限公司 一种道路车辆检测系统及方法
CN105488502A (zh) * 2015-11-27 2016-04-13 北京航空航天大学 目标检测方法与装置
CN105809180A (zh) * 2014-12-31 2016-07-27 北京智诺英特科技有限公司 图像处理方法及装置
CN106529530A (zh) * 2016-10-28 2017-03-22 上海大学 一种基于单目视觉的前方车辆检测方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20060105272A (ko) * 2005-04-04 2006-10-11 엘지전자 주식회사 아다부스트 알고리즘을 이용한 안구 영상 판단 방법
CN103093250A (zh) * 2013-02-22 2013-05-08 福建师范大学 一种基于新Haar-like特征的Adaboost人脸检测方法
CN105809180A (zh) * 2014-12-31 2016-07-27 北京智诺英特科技有限公司 图像处理方法及装置
CN105096611A (zh) * 2015-08-17 2015-11-25 深圳市中科车港实业有限公司 一种道路车辆检测系统及方法
CN105488502A (zh) * 2015-11-27 2016-04-13 北京航空航天大学 目标检测方法与装置
CN106529530A (zh) * 2016-10-28 2017-03-22 上海大学 一种基于单目视觉的前方车辆检测方法

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109085166A (zh) * 2018-06-14 2018-12-25 天津大学 基于自调节窗口的塑料气泡检测方法
CN109085166B (zh) * 2018-06-14 2021-09-14 天津大学 基于自调节窗口的塑料气泡检测方法
CN110969065A (zh) * 2018-09-30 2020-04-07 北京四维图新科技股份有限公司 车辆检测方法、装置、前车防撞预警设备及存储介质
CN110969065B (zh) * 2018-09-30 2023-11-28 北京四维图新科技股份有限公司 车辆检测方法、装置、前车防撞预警设备及存储介质
CN112907510A (zh) * 2021-01-15 2021-06-04 中国人民解放军国防科技大学 一种表面缺陷检测方法

Also Published As

Publication number Publication date
CN108133231B (zh) 2020-02-21

Similar Documents

Publication Publication Date Title
CN111695514B (zh) 一种基于深度学习的雾天下车辆检测方法
CN105160309B (zh) 基于图像形态学分割及区域生长的三车道检测方法
CN103489324B (zh) 一种基于无人驾驶的实时动态红绿灯检测识别方法
CN104657735B (zh) 车道线检测方法、系统、车道偏离预警方法及系统
CN110992683A (zh) 一种基于动态图像感知的交叉口盲区预警方法及系统
CN109284669A (zh) 基于Mask RCNN的行人检测方法
CN109101924A (zh) 一种基于机器学习的路面交通标志识别方法
CN111915583B (zh) 复杂场景中基于车载红外热像仪的车辆和行人检测方法
CN103034843B (zh) 一种基于单目视觉的夜间车辆检测方法
CN105404857A (zh) 一种基于红外的夜间智能车前方行人检测方法
WO2024051296A1 (zh) 一种复杂天气下障碍物检测方法及装置
CN112381870B (zh) 一种基于双目视觉的船舶识别与航速测量系统及方法
CN102968646A (zh) 一种基于机器学习的车牌检测方法
CN108133231A (zh) 一种尺度自适应的实时车辆检测方法
CN109949593A (zh) 一种基于路口先验知识的交通信号灯识别方法及系统
CN108960074B (zh) 基于深度学习的小尺寸行人目标检测方法
CN106679633A (zh) 一种车载测距系统及方法
US20240005626A1 (en) Method and apparatus for obstacle detection under complex weather
CN103577809A (zh) 一种基于智能驾驶的地面交通标志实时检测的方法
CN113822221A (zh) 一种基于对抗神经网络和多传感器融合的目标检测方法
CN112666573B (zh) 一种矿区卸载区车后方挡土墙及障碍物的检测方法
CN106407951A (zh) 一种基于单目视觉的夜间前方车辆检测方法
CN111079675A (zh) 基于目标检测与目标跟踪的行驶行为分析方法
CN106886757A (zh) 一种基于先验概率图的多类交通灯检测方法及系统
CN108229447B (zh) 一种基于视频流的远光灯检测方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant