CN102806913B - 一种车道线偏离检测方法及装置 - Google Patents
一种车道线偏离检测方法及装置 Download PDFInfo
- Publication number
- CN102806913B CN102806913B CN201110144128.1A CN201110144128A CN102806913B CN 102806913 B CN102806913 B CN 102806913B CN 201110144128 A CN201110144128 A CN 201110144128A CN 102806913 B CN102806913 B CN 102806913B
- Authority
- CN
- China
- Prior art keywords
- lane mark
- vehicle
- information
- lane
- camera
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Abstract
本发明涉及一种新型的车道线偏离检测方法及装置,该方法包括:利用设置在车身的多台摄像机进行车道线检测,同时车速传感器采集车辆行驶速度;通过设在车身侧面的摄像机的标定结果和车道线在图像中的位置,获得车辆在车道中的状态信息;进行车道偏离评价,判断得出车辆是否将偏离车道;该装置包括多台摄像机、车速传感器、处理器,所述的多台摄像机设置在车体上,所述的多台摄像机、车速传感器分别与处理器连接。与现有技术相比,本发明具有适用范围广,且对车道线检测和车辆状态检测的精度高、实时性好等优点。
Description
技术领域
本发明涉及一种车道线偏离检测方法及装置,尤其是涉及一种车道线偏离检测方法及装置。
背景技术
车道线偏离检测是指通过车载传感器感知道路线,判断车辆自身在车道线内的自身位置,并预测车辆是否有偏离出车道线的危险。大部分的车道偏离检测系统都采用单个前视摄像机为传感器进行数据采集。
例如:申请号为201010253424.0的中国发明专利公开了一种车道偏移识别方法,所述的方法包括以下步骤:利用摄像装置摄取图像;对摄取的图像进行感兴趣区域分割,截取图像下部的道路信息图像;对所述道路信息图像进行预处理;对车道线进行检测;对车道线进行跟踪;实时检测车辆是否偏离车道线,当偏离车道线时,输出提示信息。其利用装于车内后视镜前方的摄像机摄取图像。
如图3所示,使用单个的摄像机摄取图像会存在如下缺陷:
1.只适应道路模型简单的高速公路。
2.由于传感器单一,感知的范围有限,增加了系统预测的误差风险。
发明内容
本发明的目的就是为了克服上述现有技术存在的缺陷而提供一种适用范围广,且对车道线检测和车辆状态检测的精度高、实时性好的车道线偏离检测方法及装置。
本发明的目的可以通过以下技术方案来实现:一种车道线偏离检测方法,其特征在于,该检测方法包括以下步骤:1)利用设置在车身的多台摄像机进行车道线检测,同时车速传感器采集车辆行驶速度;2)通过设在车身侧面的摄像机的标定结果和车道线在图像中的位置,获得车辆在车道中的状态信息;3)进行车道偏离评价,判断得出车辆是否将偏离车道。
所述的步骤1)利用设置在车身的多台摄像机进行车道线检测包括以下步骤:11)多台摄像机摄取图像;12)分别对各台摄像机摄取的图像进行感知区域分割,截取路面信息图像;13)根据车道线和路面的灰度值差异,处理各路面信息图像分别得出相应的车道线信息;14)对相应的车道线信息进行融合处理,得出最准确的车道线信息。
所述的步骤14)对相应的车道线信息进行融合处理,得出最准确的车道线信息具体为,采用置信度计算,选取最高置信度的车道线信息作为最准确的车道线信息。
所述的采用置信度计算具体包括以下步骤:a)计算出各个摄像机的检测结果置信度Ri=Gi,Gi是灰度值变换的梯度值;b)计算出各个车道线的置信度得分:R=(R0+R1+…….+Rn)/n,其中n为摄像机个数;c)根据置信计算和道路模型,得出最准确的车道线信息。
所述的多台摄像机包括4~8台。
所述的步骤2)中的状态信息包括车辆方向和车辆位置。
所述的步骤3)进行车道偏离评价,判断得出车辆是否将偏离车道包括以下步骤:31)通过某一时刻获取的最准确的车道线信息、车辆位置、车辆方向和车辆行驶速度,计算得出车辆偏离车道的距离及偏离时间;32)判断偏离时间是否小于门限值,如果判断为是则得出车辆将偏离车道,否则得出车辆行驶正常。
一种实施权利要求1所述的车道线偏离检测方法的装置,其特征在于,该装置包括多台摄像机、车速传感器、处理器,所述的多台摄像机设置在车体上,所述的多台摄像机、车速传感器分别与处理器连接。
所述的车体的前身、后身、左侧身、右侧身分别设有至少一台摄像机。
所述的多台摄像机包括4~8台。
与现有技术相比,本发明具有以下优点:
1、通过对多个传感器感知结果的融合分析,本发明能适应更复杂的道路模型。本发明对以下复杂的道路状况下的车道线检出,准确度,实时性优于现有发明:
a.车辆经过人行横道线:
现有的单前视(后视)摄像机系统中,若经过人形横道,由于路面出现多条和车道线特征相同的特征线条,很难判断车辆所在车道和自身位置,而在发明中,车辆后方(前方)安装的摄像机的感知区仍在标准的路面内,系统将放弃前视(后视)摄像机的检测结果,由后视(前视)摄像机判断车道线和车辆状态。
b.车辆转入匝道口:
现有的单摄像机系统中,前视摄像机可对车辆直行或车辆小角度转弯的工况下快速的找出车道线,但是当车辆从直行转入匝道,且转弯角较大时,摄像机并不能立即覆盖车道(感知远景的摄像机的可视角度一般较小)。
2、在车辆状态检测中,通过两侧摄像机感知道路线,提高了预测的准确性和实时性。
在现有的车道线偏离检测系统中,车身附近的车道线并非直接观测所得,而是通过车辆前方所检测出的车道线位置和道路模型预估所得。
根据本发明的安装要求,侧面安装摄像机能近距离,清晰的观测到两侧道路线,而计算出车身和车道线的相对位置,即车辆实时状态。这样,计算结果比传统的预估记过更加准确,更有实时保证。
附图说明
图1为本发明的流程图;
图2为本发明的硬件结构示意图;
图3为传统的单个前视摄像头的检测状态示意图;
图4为本发明的检测状态示意图。
图中3中黑实线表示可检测到的车辆前方的车道线,黑虚线表示预测的车辆两旁的车道线,阴影部分代表摄像头的探测范围;
图4中黑实线表示可检测到的车辆周围的车道线,阴影部分代表摄像头的探测范围。
具体实施方式
下面结合附图和具体实施例对本发明进行详细说明。
实施例
如图1所示,一种车道线偏离检测方法,该检测方法包括以下步骤:
步骤1)利用设置在车身的四台摄像机进行车道线检测,同时车速传感器采集车辆行驶速度。
利用设置在车身的四台摄像机进行车道线检测包括以下步骤:步骤11)多台摄像机摄取图像;步骤12)分别对各台摄像机摄取的图像进行感知区域分割,截取路面信息图像;步骤13)根据车道线和路面的灰度值差异,处理各路面信息图像分别得出相应的车道线信息;步骤14)采用置信度计算,选取最高置信度的车道线信息作为最准确的车道线信息。采用置信度计算具体包括以下步骤:a)计算出各个摄像机的检测结果置信度Ri=Gi,Gi是灰度值变换的梯度值;b)计算出各个车道线的置信度得分:R=(R0+R1+…….+Rn)/n,其中n为摄像机个数;c)根据置信计算和道路模型,得出最准确的车道线信息。
步骤2)通过设在车身侧面的摄像机标定结果和车道线在图像中的位置,获得车辆在车道中的包括车辆方向和车辆位置的状态信息;摄像机标定的定义为:在图像测量过程以及机器视觉应用中,常常会涉及到这样一个概念,那就是利用摄像机所拍摄到的图像来还原空间中的物体。在这里,不妨假设摄像机所拍摄到的图像与三维空间中的物体之间存在以下一种简单的线性关系:[像]=M[物];这里,矩阵M可以看成是摄像机成像的几何模型。M中的参数就是摄像机参数。通常,这些参数是要通过实验与计算来得到的。这个求解参数的过程就称为摄像机标定。
步骤3)进行车道偏离评价,判断得出车辆是否将偏离车道。
进行车道偏离评价,判断得出车辆是否将偏离车道包括以下步骤:31)通过某一时刻获取的最准确的车道线信息、车辆位置、车辆方向和车辆行驶速度,计算得出车辆偏离车道的距离及偏离时间;32)判断偏离时间是否小于门限值,如果判断为是则得出车辆将偏离车道,否则得出车辆行驶正常。
如图2所示,本发明还涉及一种用于实施车道线偏离检测方法的装置,该装置包括四台摄像机、车速传感器、处理器。四台摄像机设置在车体上,车体的前身、后身、左侧身、右侧身分别设有一台摄像机。四台摄像机、车速传感器分别与处理器连接。
设在车体前身的摄像机:安装时使镜头主轴和水平面夹角较小,主要感知区域为车辆前方10米以外。
设在车体后身的摄像机:安装时使镜头主轴和水平面夹角较小,主要感知区域为车辆后方10米以外。
设在车体左右侧身的摄像机:安装时使镜头主轴和水平面夹角较大,主要感知区域为车身附近,5米以内。
车速传感器:实时获得车辆行驶速度,用于车辆状态估计。如图4所示,四个镜头安装在车辆的四周,感知范围覆盖车辆四周。为了对车辆未来状态做出预测,设在车体后身的摄像需要感知车辆行驶前方的路面,而无法感知距离车身附近的路面。设在车体左右侧身的摄像机则可以近距离,清晰的感知车辆两侧的道路线,为车辆状态预测提供依据。本发明同时需要通过车速传感器实时采集车速信号。
Claims (7)
1.一种车道线偏离检测方法,其特征在于,该检测方法包括以下步骤:
1)利用设置在车身的多台摄像机进行车道线检测,同时车速传感器采集车辆行驶速度;
2)通过设在车身侧面的摄像机的标定结果和车道线在图像中的位置,获得车辆在车道中的状态信息;
3)进行车道偏离评价,判断得出车辆是否将偏离车道;
所述的步骤1)利用设置在车身的多台摄像机进行车道线检测包括以下步骤:
11)多台摄像机摄取图像;
12)分别对各台摄像机摄取的图像进行感知区域分割,截取路面信息图像;
13)根据车道线和路面的灰度值差异,处理各路面信息图像分别得出相应的车道线信息;
14)对相应的车道线信息进行融合处理,得出最准确的车道线信息;
所述的步骤14)对相应的车道线信息进行融合处理,得出最准确的车道线信息具体为,采用置信度计算,选取最高置信度的车道线信息作为最准确的车道线信息;
所述的采用置信度计算具体包括以下步骤:
a)计算出各个摄像机的检测结果置信度Ri=Gi,Gi是灰度值变换的梯度值;
b)计算出各个车道线的置信度得分:R=(R0+R1+…….+Rn)/n,其中n为摄像机个数;
c)根据置信计算和道路模型,得出最准确的车道线信息。
2.根据权利要求1所述的一种车道线偏离检测方法,其特征在于,所述的多台摄像机包括4~8台。
3.根据权利要求1所述的一种车道线偏离检测方法,其特征在于,所述的步骤2)中的状态信息包括车辆方向和车辆位置。
4.根据权利要求1所述的一种车道线偏离检测方法,其特征在于,所述的步骤3)进行车道偏离评价,判断得出车辆是否将偏离车道包括以下步骤:
31)通过某一时刻获取的最准确的车道线信息、车辆位置、车辆方向和车辆行驶速度,计算得出车辆偏离车道的距离及偏离时间;
32)判断偏离时间是否小于门限值,如果判断为是则得出车辆将偏离车道,否则得出车辆行驶正常。
5.一种实施权利要求1所述的车道线偏离检测方法的装置,其特征在于,该装置包括多台摄像机、车速传感器、处理器,所述的多台摄像机设置在车体上,所述的多台摄像机、车速传感器分别与处理器连接。
6.根据权利要求5所述的车道线偏离检测方法的装置,其特征在于,所述的车体的前身、后身、左侧身、右侧身分别设有至少一台摄像机。
7.根据权利要求5所述的车道线偏离检测方法的装置,其特征在于,所述的多台摄像机包括4~8台。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201110144128.1A CN102806913B (zh) | 2011-05-31 | 2011-05-31 | 一种车道线偏离检测方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201110144128.1A CN102806913B (zh) | 2011-05-31 | 2011-05-31 | 一种车道线偏离检测方法及装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN102806913A CN102806913A (zh) | 2012-12-05 |
CN102806913B true CN102806913B (zh) | 2015-04-15 |
Family
ID=47230823
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201110144128.1A Expired - Fee Related CN102806913B (zh) | 2011-05-31 | 2011-05-31 | 一种车道线偏离检测方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN102806913B (zh) |
Families Citing this family (21)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103057470B (zh) * | 2012-12-06 | 2015-09-16 | 重庆交通大学 | 一种车辆违章压线预先提示装置及其提示方法 |
CN103136341B (zh) * | 2013-02-04 | 2016-12-28 | 北京航空航天大学 | 一种基于Bézier曲线的车道线重构装置 |
CN106097723B (zh) * | 2013-04-22 | 2018-07-10 | 徐州工程学院 | 基于偏置磁场的车辆压车道实线检测装置的工作方法 |
TW201520994A (zh) * | 2013-11-18 | 2015-06-01 | Chunghwa Telecom Co Ltd | 檢測載具偵測裝置之系統及其方法 |
CN104835324B (zh) * | 2015-05-22 | 2017-04-19 | 吉林大学 | 一种道路偏离监控方法及系统 |
CN106908069A (zh) * | 2015-12-23 | 2017-06-30 | 大陆汽车投资(上海)有限公司 | 基于预测的导航辅助方法 |
US10124730B2 (en) * | 2016-03-17 | 2018-11-13 | Ford Global Technologies, Llc | Vehicle lane boundary position |
CN107817018B (zh) * | 2016-09-12 | 2020-03-03 | 上海沃尔沃汽车研发有限公司 | 车道线偏离报警系统的测试系统和测试方法 |
CN106515582A (zh) * | 2016-10-26 | 2017-03-22 | 深圳市元征科技股份有限公司 | 安全驾驶预警方法及装置 |
CN106696961B (zh) * | 2016-12-09 | 2018-11-20 | 重庆长安汽车股份有限公司 | 高速公路自动驾驶上下匝道控制系统及方法 |
CN107244320B (zh) * | 2017-05-17 | 2019-12-27 | 吉利汽车研究院(宁波)有限公司 | 一种避免车辆碰撞的方法及装置 |
CN109591694B (zh) * | 2017-09-30 | 2021-09-28 | 上海欧菲智能车联科技有限公司 | 车道偏离预警系统、车道偏离预警方法和车辆 |
CN107830869B (zh) * | 2017-11-16 | 2020-12-11 | 百度在线网络技术(北京)有限公司 | 用于车辆的信息输出方法和装置 |
CN109635816B (zh) * | 2018-10-31 | 2021-04-06 | 百度在线网络技术(北京)有限公司 | 车道线生成方法、装置、设备以及存储介质 |
CN109747537A (zh) * | 2019-01-25 | 2019-05-14 | 温州大学 | 一种汽车无人驾驶预警系统 |
CN112133122A (zh) * | 2019-06-25 | 2020-12-25 | 上海擎感智能科技有限公司 | 一种用于自动泊车的停车场 |
CN110362078A (zh) * | 2019-07-05 | 2019-10-22 | 河南护航实业股份有限公司 | 一种基于循迹技术的自动驾驶车 |
CN111401446A (zh) * | 2020-03-16 | 2020-07-10 | 重庆长安汽车股份有限公司 | 单传感器、多传感器车道线合理性检测方法、系统及车辆 |
CN112793571A (zh) * | 2021-01-28 | 2021-05-14 | 北京信息科技大学 | 一种基于fpga系统的车道线识别装置和方法 |
CN113276853B (zh) * | 2021-05-21 | 2022-09-09 | 武汉光庭信息技术股份有限公司 | 一种失效场景下lka控制方法及系统 |
CN115272298B (zh) * | 2022-09-19 | 2022-12-13 | 江苏网进科技股份有限公司 | 基于道路监控的城市路面维护监察方法及系统 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP1602562A1 (en) * | 2004-06-01 | 2005-12-07 | Toyota Jidosha Kabushiki Kaisha | Driving control apparatus and method |
CN1712267A (zh) * | 2004-06-21 | 2005-12-28 | 上海中油企业集团有限公司 | 一种汽车偏离道路的提示方法和装置 |
JP2007122569A (ja) * | 2005-10-31 | 2007-05-17 | Mitsubishi Electric Corp | 車線逸脱防止装置 |
KR20090062135A (ko) * | 2007-12-12 | 2009-06-17 | 현대자동차주식회사 | 차선유지 보조시스템 |
CN201538293U (zh) * | 2009-11-27 | 2010-08-04 | 德尔福电子(苏州)有限公司 | 一种基于后视摄像头的泊车辅助装置 |
WO2010134680A1 (ko) * | 2009-05-19 | 2010-11-25 | 주식회사 이미지넥스트 | 차량 주변 영상을 이용하는 차선 이탈 감지 방법 및 장치 |
CN101916516A (zh) * | 2010-08-13 | 2010-12-15 | 深圳市豪恩汽车电子装备股份有限公司 | 一种车道偏移识别方法 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4349210B2 (ja) * | 2004-06-02 | 2009-10-21 | トヨタ自動車株式会社 | 運転支援装置 |
-
2011
- 2011-05-31 CN CN201110144128.1A patent/CN102806913B/zh not_active Expired - Fee Related
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP1602562A1 (en) * | 2004-06-01 | 2005-12-07 | Toyota Jidosha Kabushiki Kaisha | Driving control apparatus and method |
CN1712267A (zh) * | 2004-06-21 | 2005-12-28 | 上海中油企业集团有限公司 | 一种汽车偏离道路的提示方法和装置 |
JP2007122569A (ja) * | 2005-10-31 | 2007-05-17 | Mitsubishi Electric Corp | 車線逸脱防止装置 |
KR20090062135A (ko) * | 2007-12-12 | 2009-06-17 | 현대자동차주식회사 | 차선유지 보조시스템 |
WO2010134680A1 (ko) * | 2009-05-19 | 2010-11-25 | 주식회사 이미지넥스트 | 차량 주변 영상을 이용하는 차선 이탈 감지 방법 및 장치 |
CN201538293U (zh) * | 2009-11-27 | 2010-08-04 | 德尔福电子(苏州)有限公司 | 一种基于后视摄像头的泊车辅助装置 |
CN101916516A (zh) * | 2010-08-13 | 2010-12-15 | 深圳市豪恩汽车电子装备股份有限公司 | 一种车道偏移识别方法 |
Non-Patent Citations (1)
Title |
---|
基于DSP复杂环境下车辆多车道识别方法研究;黄小云;《燕山大学硕士学位论文》;20100630;7-14 * |
Also Published As
Publication number | Publication date |
---|---|
CN102806913A (zh) | 2012-12-05 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN102806913B (zh) | 一种车道线偏离检测方法及装置 | |
CN105711597B (zh) | 前方局部行驶环境感知系统及方法 | |
US11287523B2 (en) | Method and apparatus for enhanced camera and radar sensor fusion | |
CN107567412B (zh) | 利用汽车相机使用车辆运动数据的对象位置测量 | |
CN108243623B (zh) | 基于双目立体视觉的汽车防碰撞预警方法和系统 | |
CN109800658B (zh) | 基于神经网络的泊车位类型在线识别与定位系统及方法 | |
TWI722355B (zh) | 用於基於障礙物檢測校正高清晰度地圖的系統和方法 | |
CN102765365B (zh) | 基于机器视觉的行人检测方法及行人防撞预警系统 | |
CN103847667B (zh) | 车辆的驾驶辅助控制装置 | |
JP4714104B2 (ja) | 物体傾き検出装置 | |
CN110705458B (zh) | 边界检测方法及装置 | |
WO2003001473A1 (en) | Vision-based collision threat detection system_ | |
CN103176185A (zh) | 用于检测道路障碍物的方法及系统 | |
CN102542843A (zh) | 防止车辆碰撞的预警方法及装置 | |
CN104517281A (zh) | 用于识别车辆的设备和方法 | |
CN110609274A (zh) | 一种测距方法、装置及系统 | |
CN113848545B (zh) | 一种基于视觉和毫米波雷达的融合目标检测和跟踪方法 | |
CN109871787A (zh) | 一种障碍物检测方法及装置 | |
US10554951B2 (en) | Method and apparatus for the autocalibration of a vehicle camera system | |
EP3364336B1 (en) | A method and apparatus for estimating a range of a moving object | |
CN202130447U (zh) | 一种新型的车道线偏离检测装置 | |
KR20170080481A (ko) | 다차선 차량 속도 측정 시스템 | |
JP2018048949A (ja) | 物体識別装置 | |
CN111723778B (zh) | 基于MobileNet-SSD的车辆测距系统及方法 | |
CN114495064A (zh) | 一种基于单目深度估计的车辆周围障碍物预警方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
CP01 | Change in the name or title of a patent holder | ||
CP01 | Change in the name or title of a patent holder |
Address after: 215126 No. 123 Changyang street, Suzhou Industrial Park, Suzhou, Jiangsu. Patentee after: Annex Electronics (Suzhou) Co., Ltd. Address before: 215126 No. 123 Changyang street, Suzhou Industrial Park, Suzhou, Jiangsu. Patentee before: Delphi Electronics (Suzhou) Co., Ltd. |
|
CF01 | Termination of patent right due to non-payment of annual fee | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20150415 Termination date: 20200531 |