CN107153823B - 一种基于视觉关联双空间的车道线特征提取方法 - Google Patents
一种基于视觉关联双空间的车道线特征提取方法 Download PDFInfo
- Publication number
- CN107153823B CN107153823B CN201710363517.0A CN201710363517A CN107153823B CN 107153823 B CN107153823 B CN 107153823B CN 201710363517 A CN201710363517 A CN 201710363517A CN 107153823 B CN107153823 B CN 107153823B
- Authority
- CN
- China
- Prior art keywords
- blobs
- lane line
- feature
- binary image
- angle
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
- G06V20/588—Recognition of the road, e.g. of lane markings; Recognition of the vehicle driving pattern in relation to the road
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Image Analysis (AREA)
Abstract
本发明属于计算机视觉和智能驾驶环境感知技术领域,特别涉及一种基于视觉的车道线特征提取方法。一种基于视觉关联双空间的车道线特征提取方法,包括以下步骤:S1.获取摄像头视角ROI的二值图像Ic;S2.分析提取二值图像Ic内的斑块特征;S3.对二值图像Ic进行逆透视变换获得俯视视角的二值图像IB;S4.分析提取二值图像IB内的Blobs特征;S5.将二值图像IB、Ic内的Blobs配对,获得双空间关联Blobs特征对;S6.对双空间关联Blobs特征对进行特征提取建立多维特征描述子,并根据各描述特征建立分类决策点;S7.利用多个分类决策点建立Blobs特征分类决策树,完成车道线提取。本发明在车道线提取过中,保证了车道线特征的完整性,提高了车道线特征的描述维度。
Description
技术领域
本发明属于计算机视觉和智能驾驶环境感知技术领域,特别涉及一种基于视觉的车道线特征提取方法。
背景技术
车道线是道路场景中最基本的标志元素,在道路交通系统中起着重要地作用,它不仅约束了车辆运行中的横向位置,而且指示了道路的延伸方向,决定了车辆正确运行的轨迹。因此,无论是在车道偏离预警(Lane Departure Warning,LDW)、车道保持(LaneKeeping Assistance,LKA),自适应巡航(Adaptive Cruise Control,ACC)等低级别的驾驶辅助系统还是在高级别的自动驾驶和无人驾驶,车道线识别都是必不可少的基础功能模块。
现有的车道线识别方法大都已以边界作为车道特征,为了剔除图像中其他干扰边界,往往利用车道宽度及角度等车道模型先验知识进行筛选。由于边界特征维度较低(只是二维特征),因此辨识率较低。当道路空旷时,现有的车道线识别方法可以达到不错的识别效果,而当图像场景中存在大量其他车辆干扰时则很难获得可靠的特征提取。为了提高车道线特征提取的精度,一方面要拓展车道标志特征描述的维度,另一方面在拓展特征描述维度的同时应当尽量选择能够增大车道标志与非车道标志类间差的特征元素。
发明内容
本发明的目的是:为解决车道线识别过程中,车道特征信息维度低,且容易受道路环境干扰造成提取精度差的问题,提供一种具有较强抗干扰能力的车道线识别方法。
本发明的技术方案是:一种基于视觉关联双空间的车道线特征提取方法,包括以下步骤:
S1.通过摄像头获取原始图像,定义摄像头视角为CV-视角,获取CV-视角ROI的二值图像Ic;
S2.分析提取二值图像Ic内的斑块,即Blobs特征;
S3.对二值图像Ic进行逆透视变换获得俯视视角,即BV-视角下的二值图像IB;
S4.分析提取二值图像IB内的Blobs特征;
S5.将二值图像IB、Ic内的Blobs配对,获得双空间关联Blobs特征对;
S6.对双空间关联Blobs特征对进行特征提取建立多维特征描述子,并根据各描述特征建立分类决策点;
S7.利用部分或全部分类决策点建立车道线Blobs特征分类决策树,完成车道线提取。
有益效果:本发明提出了一种具有较强抗干扰能力的车道线识别方法。该方法采用信息维度发更高的斑块特征(Blobs)作为车道特征进行提取,并通过挖掘不同视角下车道Blobs与其他干扰的类间差,提出了基于关联双空间的车道Blobs分类模型,大大提高了车道线特征的描述维度,解决了车道线识别过程中特征信息维度低且容易受道路环境干扰造成提取精度差的问题。
附图说明
图1是本发明的流程示意图;
图2是本发明中二值图像Blobs提取示意图;
图3是本发明中Blob宽度、倾角、最小外接矩形定义示意图;
图4是本发明中车道线Blobs与非车道线Blobs凹凸特性差异示意图;
图5是本发明中分类决策树对Blobs特征进行分类的流程示意图。
具体实施方式
参见附图1,实施例1,一种基于视觉关联双空间的车道线特征提取方法,包括以下步骤:
S1.通过摄像头获取原始图像,定义摄像头视角为CV-视角,获取CV-视角ROI的二值图像Ic;
S2.分析提取二值图像Ic内的斑块(Blobs)特征;
S3.对二值图像Ic进行逆透视变换获得俯视视角(BV-视角)下的二值图像IB;
S4.分析提取俯视视角(BV-视角)下的二值图像IB内的斑块(Blobs)特征;
S5.将二值图像IB、Ic内的斑块配对,获得双空间关联Blobs特征对;
S6.对双空间关联Blobs特征对进行特征提取建立多维特征描述子,并根据各描述特征建立分类决策点;
S7.利用部分或全部分类决策点建立车道线Blobs特征分类决策树,完成车道线提取。
实施例2,步骤S1中,首先将车辆前方L米的区域作为车道线检验ROI区域;其次,利用自适应阈值方法获得ROI区域二值图像Ic;自适应阈值方法利用采样窗口对任一像素的局部灰度分布特性进行分析,从而确定该像素的二值化阈值;给定图像中的像素I(x,y),令采样窗口尺寸为2d+1,d为自然数,则该像素的灰度阈值可以通过利用采样窗口核函数(如高斯核函数)与其领域像素进行卷积获得。
实施例3,步骤S2、S4中,通过像素标记和连通域分析提取Blobs特征;
参见附图2,二值图像Blobs特征提取一般是通过对图像进行连通域分析和像素标记(Pixel Labelling)完成的。连通区域反应像素与其相接邻域关系,常见的邻接关系有两种:四邻接域和八邻接域。选用八邻接域关系,并在此基础上利用Two-Pass方法对二值图像中各像素点逐行进行连通域标记,最终提取出所有相互独立的Blobs特征。
实施例4,步骤S6中的特征描述子包括:宽度特征:
参见附图3,根据道路设计施工标准,车道线宽度一般在30cm左右。由于透视效应,CV-视角图像中车道标线标志一般呈现为宽度随距离增加而递减的梯形,所以车道标志线的宽度很难准确估计,但在BV-视角图像中该值可以根据ρresolution(分辨率)通过计算对应Blob的宽度计算得出,因此BV-视角图像中各车道线标志的宽度可以作为一个强判别条件对Blobs进行筛选。此外,虽然CV-视角图像中车道线标志的真实宽度难以估计,但其在某一距离范围内的宽度是在一定范围内,因此可以作为一个弱判别条件对Blobs进行筛选。在求取Blobs的像素宽度时,首先获得Blob连通区域的最小外接矩形,最小外接矩形的两边长度分别为l1,l2,则该Blob的宽w和长l分别为l1,l2其中的较小边长和较大边长;
定义基于宽度信息的决策节点为:
其中:wCmax和wCmin分别为CV-视角图像内RC(i)的最大和最小宽度门限值;wBmax和wBmin为BV-视角图像内RB(i)的最大和最小宽度门限值,为了弥补车道磨损,逆透视变换误差和测量误差的影响,该边界值定义应相对松弛。
实施例5,步骤S6中的特征描述子包括:长宽比特征:
由于车道线标志为矩形长条状,所以其长宽比应明显满足长方形假设,因此长宽比也可以作为区分Blobs是否为车道线标志的特征。考虑到CV-视角图像中,远处车道线形状发生较大畸变,长宽比严重失真,因此仅对BV-视角图像中对应的Blobs进行该特征的校验;设关联Blobs对中RB(i)的像素长宽分别为wB(i)和lB(i),其长宽比定义基于长宽比特征的决策节点为:
实施例6,步骤S6中的特征描述子包括:倾角特征:
在车道线识别中,车道线在图像内的倾角是其被筛选的重要特征,因此被广泛应用于传统的基于边界的车道线识别算法。由于车道标志也继承了车道方向特性,因此Blobs的倾角,即Blob主轴与图像坐标系x轴的夹角也可用来判断其是否为车道线标志。给定关联Blobs对令其CV-BV空间下对应的倾角为根据车道线在不同视角图像空间中的角度范围,定义基于倾角特征的决策节点为,
其中:αCMax,αCMin分别为CV-视角图像中Blobs倾角上下门限;αBMax,αBMin分别为BV-视角图像中Blobs倾角上下门限;为防止错误删除车道标志,此处对BV和CV视角下的Blobs倾角角度范围定义应相对松弛。
实施例7,步骤S6中的特征描述子包括:凹凸特征:
参见附图4,如上述所说,车道线一般为矩形长条,因此无论在BV和CV视角下,其在形态学上均属于凸多边形。虽然车道线的破损及脏污会造成局部残缺或破坏,相对于其最小外接凸多边形仍旧有良好的填充特性。相反,二值图像中存在的好多诸如箭头,车体,道路污渍等干扰Blobs往往具有较强的凹多边形特性;因此,凸凹特性可以用来对Blobs进行筛选。给定关联Blobs对首先求取其最小外接凸多边形然后求其填充度,即Blobs面积和其最小外接凸多边形的面积之比:
其中,λc(i)、λB(i)分别为CV视角、BV视角下的Blobs填充度,area[.]表示区域面积;
根据上述车道线标志凸凹特性,车道线标志的填充度一般较大,而填充度较小的Blobs则可以判断为干扰噪声,定义凹凸特征的决策节点为,
其中,λcth,λBth为CV视角,BV视角图像中Blobs填充度的门限。
实施例8,如实施例4-7所述,在二值图像中提取得到的任一Blob都可以在关联BV-CV双空间下建立一个具有多维参数的特征描述子;根据公式(1)至(4)可建立4个决策节点:
参见附图5,步骤S7中,本例通过对4个决策点进行级联(也可任选1个、2个或3个决策点)获得分类决策树,完成对车道线Blobs的提取。通过对各决策节点参数进行定义,则可以对二值化图像中提取到的Blobs特征进行分类,从而获得可靠的车道线特征。
Claims (7)
1.一种基于视觉关联双空间的车道线特征提取方法,其特征在于,包括以下步骤:
S1.通过摄像头获取原始图像,定义摄像头视角为CV-视角,获取CV-视角ROI的二值图像Ic;
S2.分析提取二值图像Ic内的斑块,即Blobs特征;
S3.对二值图像Ic进行逆透视变换获得俯视视角,即BV-视角下的二值图像IB;
S4.分析提取二值图像IB内的Blobs特征;
S5.将二值图像IB、Ic内的Blobs配对,获得双空间关联Blobs特征对;
S6.对双空间关联Blobs特征对进行特征提取建立多维特征描述子,并根据各描述特征建立分类决策点;
S7.利用全部或部分分类决策点建立车道线Blobs特征分类决策树,完成车道线提取。
2.如权利要求1所述的一种基于视觉关联双空间的车道线特征提取方法,其特征在于,
步骤S1中,首先将车辆前方L米的区域作为车道线检验ROI区域;其次,利用自适应阈值方法获得ROI区域二值图像Ic。
3.如权利要求1所述的一种基于视觉关联双空间的车道线特征提取方法,其特征在于,步骤S2、S4中,通过像素标记和连通域分析提取Blobs特征。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710363517.0A CN107153823B (zh) | 2017-05-22 | 2017-05-22 | 一种基于视觉关联双空间的车道线特征提取方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710363517.0A CN107153823B (zh) | 2017-05-22 | 2017-05-22 | 一种基于视觉关联双空间的车道线特征提取方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN107153823A CN107153823A (zh) | 2017-09-12 |
CN107153823B true CN107153823B (zh) | 2020-05-12 |
Family
ID=59793320
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201710363517.0A Active CN107153823B (zh) | 2017-05-22 | 2017-05-22 | 一种基于视觉关联双空间的车道线特征提取方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN107153823B (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108090455B (zh) * | 2017-12-27 | 2023-08-22 | 北京纵目安驰智能科技有限公司 | 基于级联机制的车位线顶点定位方法、系统、终端及介质 |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102592114B (zh) * | 2011-12-26 | 2013-07-31 | 河南工业大学 | 复杂路况的车道线特征提取、识别方法 |
US8976040B2 (en) * | 2012-02-16 | 2015-03-10 | Bianca RAY AVALANI | Intelligent driver assist system based on multimodal sensor fusion |
CN102722705B (zh) * | 2012-06-12 | 2014-04-30 | 武汉大学 | 一种基于ransac算法的多车道线检测方法 |
CN105718870B (zh) * | 2016-01-15 | 2019-06-14 | 武汉光庭科技有限公司 | 自动驾驶中基于前向摄像头的道路标线提取方法 |
CN105654064A (zh) * | 2016-01-25 | 2016-06-08 | 北京中科慧眼科技有限公司 | 车道线检测方法和装置及高级驾驶辅助系统 |
CN105539293B (zh) * | 2016-02-03 | 2018-01-09 | 北京中科慧眼科技有限公司 | 车道偏离预警方法和装置及汽车驾驶辅助系统 |
-
2017
- 2017-05-22 CN CN201710363517.0A patent/CN107153823B/zh active Active
Also Published As
Publication number | Publication date |
---|---|
CN107153823A (zh) | 2017-09-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107330376B (zh) | 一种车道线识别方法及系统 | |
Ouma et al. | Pothole detection on asphalt pavements from 2D-colour pothole images using fuzzy c-means clustering and morphological reconstruction | |
CN106651872B (zh) | 基于Prewitt算子的路面裂缝识别方法及系统 | |
CN108280450B (zh) | 一种基于车道线的高速公路路面检测方法 | |
CN105488454B (zh) | 基于单目视觉的前方车辆检测与测距 | |
CN106951879B (zh) | 基于摄像头与毫米波雷达的多特征融合车辆检测方法 | |
CN109657632B (zh) | 一种车道线检测识别方法 | |
Zhang et al. | Object-oriented shadow detection and removal from urban high-resolution remote sensing images | |
Alvarez et al. | Road detection based on illuminant invariance | |
CN105678285B (zh) | 一种自适应的道路鸟瞰图变换方法和道路车道检测方法 | |
CN103049763B (zh) | 一种基于上下文约束的目标识别方法 | |
CN101334836B (zh) | 一种融合色彩、尺寸和纹理特征的车牌定位方法 | |
WO2018023916A1 (zh) | 一种彩色图像去阴影方法和应用 | |
CN107301405A (zh) | 自然场景下的交通标志检测方法 | |
WO2015010451A1 (zh) | 一种从单幅图像检测道路的方法 | |
JP5223675B2 (ja) | 車両検知装置,車両検知方法並びに車両検知プログラム | |
CN104899554A (zh) | 一种基于单目视觉的车辆测距方法 | |
CN107092871B (zh) | 基于多尺度多特征融合的遥感影像建筑物检测方法 | |
CN108171695A (zh) | 一种基于图像处理的高速公路路面检测方法 | |
CN109635733B (zh) | 基于视觉显著性和队列修正的停车场和车辆目标检测方法 | |
CN104778444A (zh) | 道路场景下车辆图像的表观特征分析方法 | |
CN108647664B (zh) | 一种基于环视图像的车道线检测方法 | |
CN106558051A (zh) | 一种改进的从单幅图像检测道路的方法 | |
CN104915642B (zh) | 前方车辆测距方法及装置 | |
CN109886168B (zh) | 一种基于层阶的地面交通标志识别方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
TA01 | Transfer of patent application right |
Effective date of registration: 20180815 Address after: 102206 Beijing Changping District Shahe Town North Street five home area 2 Building 6 level 4 units 637 Applicant after: Beijing Liu Ma Chi Chi Technology Co., Ltd. Address before: 101102 6 floor, 7 Building 7, 28 street, Jingsheng South Street, Tongzhou District, Beijing. Applicant before: Beijing Bei ang Technology Co., Ltd. |
|
TA01 | Transfer of patent application right | ||
GR01 | Patent grant | ||
GR01 | Patent grant |