CN106184232A - 一种基于驾驶员视角的车道偏离预警控制方法 - Google Patents

一种基于驾驶员视角的车道偏离预警控制方法 Download PDF

Info

Publication number
CN106184232A
CN106184232A CN201610602492.0A CN201610602492A CN106184232A CN 106184232 A CN106184232 A CN 106184232A CN 201610602492 A CN201610602492 A CN 201610602492A CN 106184232 A CN106184232 A CN 106184232A
Authority
CN
China
Prior art keywords
vehicle
driver
departure
lane line
visual angle
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201610602492.0A
Other languages
English (en)
Other versions
CN106184232B (zh
Inventor
王云鹏
周彬
余贵珍
王章宇
冀浩杰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Tage Idriver Technology Co Ltd
Original Assignee
Beihang University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beihang University filed Critical Beihang University
Priority to CN201610602492.0A priority Critical patent/CN106184232B/zh
Publication of CN106184232A publication Critical patent/CN106184232A/zh
Application granted granted Critical
Publication of CN106184232B publication Critical patent/CN106184232B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/10Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to vehicle motion
    • B60W40/114Yaw movement
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W50/16Tactile feedback to the driver, e.g. vibration or force feedback to the driver on the steering wheel or the accelerator pedal
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/143Alarm means

Landscapes

  • Engineering & Computer Science (AREA)
  • Automation & Control Theory (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • Mathematical Physics (AREA)
  • Traffic Control Systems (AREA)

Abstract

本发明公开了一种基于驾驶员视角的车道偏离预警控制方法,采用单目视觉获取车道线图像,运用图像处理技术提取车道线信息,根据车辆偏离时车道线在摄像头中变化情况,构建车道偏离预警模型;本发明利用车辆偏离程度函数可提前判断车辆偏离危险状态,为驾驶员提供更充足的调整时间;本发明可判断车辆偏离方向,为驾驶员提供更准确的预警信息。

Description

一种基于驾驶员视角的车道偏离预警控制方法
技术领域
本发明涉及汽车电子控制技术,特别是涉及汽车高级辅助驾驶中的车道偏离预警的控制方法。
背景技术
近年来,中国汽车工业的迅猛发展使得国内汽车数量有着大幅的增加,为了吸引越多的消费者,各大汽车厂商在车辆的设计制造过程中引入了各种先进技术,来增强车辆的安全性和通过性。包括自适应巡航(ACC-Adaptive Cruise Control)、车道偏移报警系统(LDW-Lane Departure Warning System)、车道保持系统(LKA-Lane Keeping Assist)、前方碰撞预警系统(FCW-Forward Collision Warning)等,其中LDW是最为普及功能之一,其控制简单易实现,且不会影响车辆操纵性,而且可以大大增加行车安全。它可以通过实时判定车辆的行驶位置,对因驾驶员瞌睡、扭头等情况下造成车辆偏离原来行驶发出预警信息,以提醒驾驶员及时纠正车辆方向,保证行车安全。当前已有的车道偏离预警算法有多种,其中大部分方法是利用摄像头作为感知元件,利用车道线识别技术进行车辆位置预判的,这些方法可以分为:基于角度和距离两种,主要有角平分线法、左右车道线倾斜度法、中点距离法,垂线距离法等如Wu在《Applying a Functional Neurofuzzy Network to Real-TimeLane Detection and Front-Vehicle Distance Measurement》一文中使用了车道线同识别区域夹角来计算车辆偏离的方法;Vijay在《Lane Departure Identification forAdvanced Driver Assistance》一文中同样是基于图像识别,在算法上使用了中点距离法来计算车辆偏离程度。
现有的车道偏离预警方法可以为驾驶员提供准确的预警信息,但这些方法只能对车辆危险度进行逐步报警,这就造成了在高速行驶情况下,驾驶员很难对突发重度偏离车辆进行纠正,从而造成严重事故。同时这些方法无法判断车辆出现的偏离方向。
发明内容
本发明的目的是为了解决上述问题,提出一种基于单目视觉获取车道线信息,运用所提出的控制算法,完成车道偏离预警的方法。
本发明给出了一种基于驾驶员视角的车道偏离预警控制方法,包括以下几个步骤:
步骤一:当车辆行驶在道路上时,驾驶员未开启转向灯但车辆偏离当前行驶路线,通过图像识别获取车道线信息,得出车辆偏离程度函数:其中,L1、L2分别为摄像头视角中左侧车道线拟合线同ROI上下边界交点到ROI左右对称轴的距离,L3、L4分别为摄像头视角中右侧车道线拟合线同ROI上下边界交点到ROI左右对称轴的距离,设D1=L2-L1,D2=L4-L3。首先判断D1和D2,如果D1≤0或D2≤0,则表明车辆偏离程度较大,直接给出严重警告(包括声音、警示灯闪烁、方向盘及座椅震动)指令。否则进行步骤二。
步骤二:当D1≥D2时,判定车辆出现右偏离,否则车辆为左偏离。此处以左偏离为例进行说明,执行步骤三;
步骤三:设K0为左侧严重偏离临界值,K1为左侧轻微偏离临界值,K2为右侧轻微偏离临界值,K3为右侧严重偏离度临界值,考虑驾驶员实际驾驶情况,避免因轻微偏离而进行报警,则当K1<K<K2时,判定车辆行驶正常轻度偏离,不会给出警报信息。
当K0<K<K1时,此时车辆处于左偏离状态,需要驾驶员进行相应修正,则给出警报指令(听觉和视觉);
步骤四:在步骤三的基础上,驾驶员进行了方向修正且满足步骤三中K1<K<K2的条件,表示车辆在驾驶员的操作下修正了车辆偏离,则停止发送警示指令;否则如果驾驶员未采取任何措施,且满足K≤K0时,表明车辆偏离程度严重,给出严重警告指令。
步骤五:以上四个步骤将按顺序执行,当车辆发生偏离后驾驶员开启转向灯,则报警终止。
步骤六:如整个过程出现D1≤0或D2≤0时,则直接进入步骤一。
文中所提到的K0、K1、K2、K3均为偏离度阈值。
本发明的优点在于:
1)所构建的车道偏离预警模型,不仅考虑了车辆同每条车道线的位置关系,同时增加了危险识别因子D1和D2,因此可及时有效识别车辆偏离危险状况,为驾驶员提供更充足的调整时间;
2)所提出的车道偏离模型,不仅可以判别车辆危险度同时还可以判定偏离方向;
3)如果驾驶员在转向时开启了转向灯进行有意识的转向行为,则不会触发车道偏离预警系统。
附图说明
图1是ROI区域内车道线图像特征图;
图2是车道偏离预警系统工作流程;
图3是车辆偏离程度曲线图(车道线夹角法);
图4是车辆偏离程度曲线图(车辆距车道线距离法);
图5是车辆偏离程度曲线图(本发明提出的算法)。
具体实施方式
下面将结合附图和实施例对本发明作进一步的详细说明。
图1是本发明中所涉及的摄像头所拍摄道路进行处理后的ROI区域内车道线图像特征图。其中图中两条粗实线为拟合车道线,点划线为ROI区域对称轴,车道线拟合线同ROI区域交点为A(xa,ya)、B(xb,yb)、C(xc,yc)、D(xd,yd)。对称轴同ROI区域交点为S1(x1,y1)、S2(x2,y2)。并设定L1、L2、L3和L4分别为点A、B、C、D到对称轴的距离。
图2是本发明核心为车道偏离预警方法流程图。
本方法用摄像头获取感知信息,主要运用车道线识别算法进行车道线信息提取,获得拟合车道线、对称轴同ROI区域交点坐标,用于后续车道偏离度的计算、判别。
以车辆向右偏离为例进行说明:
首先会判断转向灯是否开启,开启则停止工作,否则将根据获得的车道线信息进行车辆位置实时判断,当D1≤0或D2≤0;车辆航向角偏移过大,行驶有危险,直接进行严重警告;否则将进行进一步判断,在D1≥D2情况下车辆发生向右偏离,根据车道偏离度函数进行偏离程度判别,当K1<K<K2时,车辆处于正常行驶状态,不进行警告;随着车辆右偏推进且满足K2<K<K3时,系统给出初级警告,如果驾驶员仍未采取措施,车辆将继续右移当满足K≥K3,此时车辆已处于危险状况,程序触发严重警告状态,将同时触发警示灯、蜂鸣器及方向盘和座椅震动开关来提醒驾驶员进行修正。整个过程如果驾驶员开启转向灯,则将立刻停止车道偏离检测。当车辆进入邻车道后,系统会根据当前车道进行重新判别。
图3,图4分别是本发明人使用以上提到的学者Wu和Vijay分别提出的算法进行数据提取得到的车辆偏离程度曲线图;
图5是利用本发明对同一个车辆运行数据进行分析得到的车辆偏离程度曲线图,对比三种算法可以看出,本发明提出的算法同样可以很好的对车辆偏离程度进行准确预测。

Claims (1)

1.一种基于驾驶员视角的车道偏离预警控制方法,包括以下几个步骤:
步骤一:当车辆行驶在道路上时,驾驶员未开启转向灯但车辆偏离当前行驶路线,通过图像识别获取车道线信息,得出车辆偏离程度函数:L1、L2分别为摄像头视角中左侧车道线拟合线同ROI上下边界交点到ROI左右对称轴的距离,L3、L4分别为摄像头视角中右侧车道线拟合线同ROI上下边界交点到ROI左右对称轴的距离,设D1=L2-L1,D2=L4-L3,如果D1≤0或D2≤0,给出严重警告指令;
步骤二:当D1≥D2时,判定车辆出现右偏离,否则判断车辆为左偏离;
步骤三:设置K0为左侧严重偏离临界值,K1为左侧轻微偏离临界值,K2为右侧轻微偏离临界值,K3为右侧严重偏离度临界值,当车辆左偏离时,如果K1<K<K2时,判定车辆行驶正常,为轻度偏离,不给出警报信息,当K0<K<K1时,判断车辆处于左偏离状态,驾驶员需要进行相应修正,发出警报指令,当车辆右偏离时,如果K1<K<K2时,判定车辆行驶正常,为轻度偏离,不给出警报信息,当K2<K<K3时,判断车辆处于右偏离状态,驾驶员需要进行相应修正,发出警报指令;
步骤四:当驾驶员进行了方向修正,且车辆偏离程度函数K满足K1<K<K2时,表示车辆在驾驶员的操作下修正了车辆偏离,则停止发送警示指令;否则如果驾驶员未采取任何措施,且满足K≤K0或者K≥K3时,表明车辆偏离程度严重,给出严重警告指令;
步骤五:以上四个步骤按顺序执行,当车辆发生偏离后驾驶员开启转向灯,则报警终止;如果步骤一至步骤五中出现D1≤0或D2≤0时,直接进入步骤一。
CN201610602492.0A 2016-07-27 2016-07-27 一种基于驾驶员视角的车道偏离预警控制方法 Active CN106184232B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610602492.0A CN106184232B (zh) 2016-07-27 2016-07-27 一种基于驾驶员视角的车道偏离预警控制方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610602492.0A CN106184232B (zh) 2016-07-27 2016-07-27 一种基于驾驶员视角的车道偏离预警控制方法

Publications (2)

Publication Number Publication Date
CN106184232A true CN106184232A (zh) 2016-12-07
CN106184232B CN106184232B (zh) 2018-11-16

Family

ID=57496211

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610602492.0A Active CN106184232B (zh) 2016-07-27 2016-07-27 一种基于驾驶员视角的车道偏离预警控制方法

Country Status (1)

Country Link
CN (1) CN106184232B (zh)

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107097796A (zh) * 2017-04-27 2017-08-29 信利光电股份有限公司 一种结合视觉系统的振动装置以及电子设备
CN107719368A (zh) * 2017-09-20 2018-02-23 杭州奥腾电子股份有限公司 一种车道偏离预警系统及其控制方法
CN108216024A (zh) * 2017-12-14 2018-06-29 浙江鼎奕科技发展有限公司 一种车道偏离预警系统及其方法
CN108428355A (zh) * 2018-03-28 2018-08-21 成都信达智胜科技有限公司 一种智能车辆监控方法
CN108639049A (zh) * 2018-05-11 2018-10-12 天津职业技术师范大学 车辆安全控制系统和方法
CN110329255A (zh) * 2019-07-19 2019-10-15 中汽研(天津)汽车工程研究院有限公司 一种基于人机协同策略的车道偏离辅助控制方法
CN110517521A (zh) * 2019-08-06 2019-11-29 北京航空航天大学 一种基于路车融合感知的车道偏离预警方法
CN110509841A (zh) * 2019-08-13 2019-11-29 南京金龙客车制造有限公司 一种针对新能源且具备能量回收功能车辆的安全节能系统的工作方法
CN111169371A (zh) * 2020-01-14 2020-05-19 吉利汽车研究院(宁波)有限公司 一种车辆转向灯的控制方法、装置、电子设备和存储介质
CN112406884A (zh) * 2019-08-20 2021-02-26 北京地平线机器人技术研发有限公司 车辆行驶状态的识别方法和装置、存储介质、电子设备
CN116968765A (zh) * 2023-09-21 2023-10-31 常州星宇车灯股份有限公司 一种具有自适应报警时距的车道偏离报警方法及系统

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6317057B1 (en) * 2000-04-03 2001-11-13 Hyundai Motor Company Method for detecting lane deviation of vehicle
JP4744632B2 (ja) * 2007-03-01 2011-08-10 パイオニア株式会社 車線逸脱防止装置、車線逸脱防止方法、車線逸脱防止プログラム及び記憶媒体
CN202923638U (zh) * 2012-10-31 2013-05-08 惠州市德赛西威汽车电子有限公司 一种车道检测和偏离预警装置
WO2013151266A1 (en) * 2012-04-04 2013-10-10 Movon Corporation Method and system for lane departure warning based on image recognition
CN103496370A (zh) * 2013-10-15 2014-01-08 扬州瑞控汽车电子有限公司 一种车道偏离预警方法
CN104648397A (zh) * 2013-11-19 2015-05-27 沙漠科技股份有限公司 车道偏移警示系统及方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6317057B1 (en) * 2000-04-03 2001-11-13 Hyundai Motor Company Method for detecting lane deviation of vehicle
JP4744632B2 (ja) * 2007-03-01 2011-08-10 パイオニア株式会社 車線逸脱防止装置、車線逸脱防止方法、車線逸脱防止プログラム及び記憶媒体
WO2013151266A1 (en) * 2012-04-04 2013-10-10 Movon Corporation Method and system for lane departure warning based on image recognition
CN202923638U (zh) * 2012-10-31 2013-05-08 惠州市德赛西威汽车电子有限公司 一种车道检测和偏离预警装置
CN103496370A (zh) * 2013-10-15 2014-01-08 扬州瑞控汽车电子有限公司 一种车道偏离预警方法
CN104648397A (zh) * 2013-11-19 2015-05-27 沙漠科技股份有限公司 车道偏移警示系统及方法

Cited By (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107097796B (zh) * 2017-04-27 2019-10-11 信利光电股份有限公司 一种结合视觉系统的振动装置以及电子设备
CN107097796A (zh) * 2017-04-27 2017-08-29 信利光电股份有限公司 一种结合视觉系统的振动装置以及电子设备
CN107719368A (zh) * 2017-09-20 2018-02-23 杭州奥腾电子股份有限公司 一种车道偏离预警系统及其控制方法
CN108216024A (zh) * 2017-12-14 2018-06-29 浙江鼎奕科技发展有限公司 一种车道偏离预警系统及其方法
CN108428355B (zh) * 2018-03-28 2021-11-19 吉林省寰旗科技股份有限公司 一种智能车辆监控方法
CN108428355A (zh) * 2018-03-28 2018-08-21 成都信达智胜科技有限公司 一种智能车辆监控方法
CN108639049A (zh) * 2018-05-11 2018-10-12 天津职业技术师范大学 车辆安全控制系统和方法
CN110329255A (zh) * 2019-07-19 2019-10-15 中汽研(天津)汽车工程研究院有限公司 一种基于人机协同策略的车道偏离辅助控制方法
CN110517521A (zh) * 2019-08-06 2019-11-29 北京航空航天大学 一种基于路车融合感知的车道偏离预警方法
CN110509841A (zh) * 2019-08-13 2019-11-29 南京金龙客车制造有限公司 一种针对新能源且具备能量回收功能车辆的安全节能系统的工作方法
CN112406884A (zh) * 2019-08-20 2021-02-26 北京地平线机器人技术研发有限公司 车辆行驶状态的识别方法和装置、存储介质、电子设备
CN111169371A (zh) * 2020-01-14 2020-05-19 吉利汽车研究院(宁波)有限公司 一种车辆转向灯的控制方法、装置、电子设备和存储介质
CN116968765A (zh) * 2023-09-21 2023-10-31 常州星宇车灯股份有限公司 一种具有自适应报警时距的车道偏离报警方法及系统
CN116968765B (zh) * 2023-09-21 2023-12-05 常州星宇车灯股份有限公司 一种具有自适应报警时距的车道偏离报警方法及系统

Also Published As

Publication number Publication date
CN106184232B (zh) 2018-11-16

Similar Documents

Publication Publication Date Title
CN106184232A (zh) 一种基于驾驶员视角的车道偏离预警控制方法
CN110239535B (zh) 一种基于多传感器融合的弯道主动避撞控制方法
EP3489066B1 (en) Method for controlling vehicle based on condition of driver
JP4614005B2 (ja) 移動軌跡生成装置
US9815460B2 (en) Method and device for safe parking of a vehicle
US10293690B2 (en) Vehicle information projecting system and vehicle information projecting method
US9542606B2 (en) Lane line recognition apparatus
US9669760B2 (en) Warning device
JP5300357B2 (ja) 衝突防止支援装置
JP4885793B2 (ja) 障害物監視装置
JP2019034664A (ja) 制御装置および制御システム
CN112277939B (zh) 一种对于避让前方压线车辆的偏移控制系统及方法
CN111267862B (zh) 一种依赖跟随目标的虚拟车道线构造方法和系统
JP6377942B2 (ja) 運転支援装置
US11364916B2 (en) Vehicle control apparatus that is mounted in vehicle
JP2017151694A (ja) 安全確認診断システム及び安全確認診断方法
US20190180117A1 (en) Roadside object recognition apparatus
JPWO2019065564A1 (ja) 自動運転制御装置及び方法
WO2023029469A1 (zh) 车辆行驶预警方法及装置
JP2015067030A (ja) 運転支援装置
JP5416193B2 (ja) 障害物監視装置
CN111402627B (zh) 一种基于车联网的多工况换道安全预警系统及预警方法
JP7391947B2 (ja) カメラの画像処理デバイスの誤検出を検知するための方法
JP2015221636A (ja) 車線維持支援装置
CN217553799U (zh) 汽车的辅助驾驶设备及汽车

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right

Effective date of registration: 20211123

Address after: 100176 901, 9th floor, building 2, yard 10, KEGU 1st Street, Beijing Economic and Technological Development Zone, Daxing District, Beijing

Patentee after: BEIJING TAGE IDRIVER TECHNOLOGY CO.,LTD.

Address before: 100191 No. 37, Haidian District, Beijing, Xueyuan Road

Patentee before: BEIHANG University

TR01 Transfer of patent right