CN112133154A - 一种基于单目视觉的高级驾驶模拟系统及方法 - Google Patents

一种基于单目视觉的高级驾驶模拟系统及方法 Download PDF

Info

Publication number
CN112133154A
CN112133154A CN202011000804.3A CN202011000804A CN112133154A CN 112133154 A CN112133154 A CN 112133154A CN 202011000804 A CN202011000804 A CN 202011000804A CN 112133154 A CN112133154 A CN 112133154A
Authority
CN
China
Prior art keywords
early warning
warning module
lane departure
driving
control module
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202011000804.3A
Other languages
English (en)
Inventor
赵连花
腾跃
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenyang University of Technology
Original Assignee
Shenyang University of Technology
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenyang University of Technology filed Critical Shenyang University of Technology
Priority to CN202011000804.3A priority Critical patent/CN112133154A/zh
Publication of CN112133154A publication Critical patent/CN112133154A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B9/00—Simulators for teaching or training purposes
    • G09B9/02—Simulators for teaching or training purposes for teaching control of vehicles or other craft
    • G09B9/04—Simulators for teaching or training purposes for teaching control of vehicles or other craft for teaching control of land vehicles

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • Business, Economics & Management (AREA)
  • Physics & Mathematics (AREA)
  • Educational Administration (AREA)
  • Educational Technology (AREA)
  • General Physics & Mathematics (AREA)
  • Traffic Control Systems (AREA)

Abstract

本发明属于汽车驾驶训练教学模拟设备领域，提供了一种基于单目视觉的高级驾驶模拟系统及方法，该系统包括车道偏离预警模块、前向碰撞预警模块、总控模块和驱动控制模块；车道偏离预警模块和前向碰撞预警模块与总控模块连接，总控模块与驱动控制模块连接。通过将车道偏离预警模块系统及前向碰撞预警模块系统与GPS定位等功能结合一体，应用到模拟驾驶装置上，通过语音播报以及显示屏显示路径的方式提示驾驶员及时根据自身意愿进行更改路径，提高驾驶安全性能，更加安全有效、节能环保提高人们的驾驶技能。

Description

一种基于单目视觉的高级驾驶模拟系统及方法
技术领域
本发明属于汽车驾驶训练教学模拟设备领域，涉及一种基于单目视觉的高级驾驶模拟系统及方法。
背景技术
随着汽车在人们日常生活中的普及和应用，会开车并取得驾驶资格已成为当今社会人们生存的基本需求。每年国内有超千万的人在学习驾驶技术，目前在驾驶技术训练过程中遇到的主要问题是人多车少上车实训的时间不够、交通事故频发、油耗成本居高不下。同时，随着汽车工业技术迅猛发展，各种先进驾驶辅助系统(Advanced Driver AssistanceSystem，ADAS)搭载在汽车控制系统中有巨大的市场需求和发展空间。为了更加安全有效、节能环保提高人们的驾驶技能，设计一种基于单目视觉的高级驾驶模拟装置，将车道偏离预警模块系统及前向碰撞预警模块系统与GPS定位等功能结合一体，应用到模拟驾驶装置上，为进行驾驶训练的学员提供更真实的模拟体验环境，为技术升级产业化应用提供实验载体。
发明内容
发明目的：本发明提供一种基于单目视觉的高级驾驶模拟系统及方法，其目的在于解决目前的驾驶技术训练过程中，人多车少，上车实训的时间不够、交通事故频发、油耗成本居高不下方面存在的问题。
技术方案：
一种基于单目视觉的高级驾驶模拟系统，其特征在于：该系统包括车道偏离预警模块、前向碰撞预警模块、总控模块和驱动控制模块；
其中，车道偏离预警模块负责跟踪车道线，并判断是否将要发生车道偏离，进而相应给出报警信号；
前向碰撞预警模块负责检测跟踪各类目标，估计本车与目标之间的纵向距离、横向距离及碰撞时间，并能在距离较近时发出报警信号；
车道偏离预警模块和前向碰撞预警模块与总控模块连接，总控模块与驱动控制模块连接。
一种如上所述的基于单目视觉的高级驾驶模拟方法，其特征在于：该方法采用的车道偏离预警模块采用深度学习分割方法，用来对车道线进行跟踪，并根据车道线在图像中的位置和车道线斜率的变化判断是否将要发生车道偏离功能，并相应给出报警信号；所述的前向碰撞预警模块采用Faster_RCNN深度学习算法，用于估计本车与目标的纵向距离、横向距离、碰撞时间，能让驾驶员始终保持安全距离，并能在距离小于安全距离时发出报警信号。
所述车道偏离预警模块及前向碰撞预警模块系统与GPS定位功能结合一体，应用到模拟驾驶装置上，并设定新的驾驶动作控制指令。
本发明的有益效果：
为了更加安全有效、节能环保提高人们的驾驶技能，设计一种基于单目视觉的高级驾驶模拟装置，将基于单目视觉的车道偏离预警模块系统及前向碰撞预警模块系统应用于汽车驾驶ADAS系统，在提高驾驶安全性能的同时，提升了国内ADAS系统研发水平，在汽车电子领域具有普适性意义，形成我国在该领域的优势地位。
1)制造运行成本低，使用安全方便；
2)计算没有重复，完全在GPU中完成，运行速度快，效率高；
3)能够获得真实可靠的实验数据。
附图说明
图1为本发明所述的装置流程示意图；
图2为车道偏离检测预警流程图；
图3为前向碰撞检测预警流程图。
具体实施方式：
本发明提供了基于单目视觉的车道偏离预警模块系统及前向碰撞预警模块系统。通过将车道偏离预警模块系统及前向碰撞预警模块系统与GPS定位等功能结合一体，应用到模拟驾驶装置上，当检测到车辆存在潜在危险时，会发出警报以及显示屏显示路径的方式，提示驾驶者注意异常的道路情况，及时根据自身意愿进行更改路径，提高驾驶安全性能。
为了达到上述目的，本发明的技术方案包括以下部分：
1)车道偏离预警：对车道线进行跟踪，并根据车道线在图像中的位置和车道线斜率的变化判断是否将要发生车道偏离功能，并相应给出报警信号。车道偏离预警核心算法是车道线检测。通过正确检测本车所在车道，根据本车在车道中的相对位置判断是否会发生车道偏离。在偏离发生时通过语音通知驾驶员，避免事故发生或规范驾驶员的行车习惯。
2)前向碰撞预警：通过估计本车与目标之间的纵向距离、横向距离及碰撞时间，通过语音通知及影相提示给驾驶员，让驾驶员调整驾驶控制，免事故发生或规范驾驶员的行车习惯。前向碰撞预警的核心算法是目标检测、目标跟踪和单目测距。
(1)车道偏离预警
首先，利用深度学习分割方法获得可行驶区域和车道线位置，然后根据目标检测框位置和摄像头标定信息，对车道线进行跟踪，最后根据车道线在图像中的位置和车道线斜率的变化判断是否将要发生车道偏离功能，并相应给出报警信号。具体实施方式见附图2：(anchors:在图像上预设好的不同大小，不同长宽比的参照框)
由(2-1)完成数据采集后进入数据的原始特征提取及网格划分(2-2)建立检查信息的原始特征(2-3)，采用线性整流函数建立注意力提示机制(2-4)，得到特征图像(2-5)，对特征图像进行分类(2-6)，将分类后的图像进行对比分析(2-7)完成图像精准预测(2-8)并做出预警(2-9)。
(2)前向碰撞预警
首先，用Faster_RCNN深度学习算法检测各类目标，包括车辆、行人、非机动车。然后对目标进行跟踪：根据前一帧跟踪框位置以及当前帧图像信息和检测信息，确定目标在当前帧位置。最后根据视频序列判断当前图像深度信息，进行通用障碍物检测。具体实施方式见附图3：(RCNN：基于区域的卷积神经网络)
从图3-1到图3-2，再图3-3，完成车辆、行人、非机动车等目标区域生成，特征提取分类及位置确定检测，检测结果最终输入到一个制定网格框架。整个检测过程没有重复，完全在由计算机自动完成，运行速度高。

Claims (3)

1.一种基于单目视觉的高级驾驶模拟系统，其特征在于：该系统包括车道偏离预警模块、前向碰撞预警模块、总控模块和驱动控制模块；
其中，车道偏离预警模块负责跟踪车道线，并判断是否将要发生车道偏离，进而相应给出报警信号；
前向碰撞预警模块负责检测跟踪各类目标，估计本车与目标之间的纵向距离、横向距离及碰撞时间，并能在距离较近时发出报警信号；
车道偏离预警模块和前向碰撞预警模块与总控模块连接，总控模块与驱动控制模块连接。
2.一种如权利要求1所述的基于单目视觉的高级驾驶模拟方法，其特征在于：该方法采用的车道偏离预警模块采用深度学习分割方法，用来对车道线进行跟踪，并根据车道线在图像中的位置和车道线斜率的变化判断是否将要发生车道偏离功能，并相应给出报警信号；所述的前向碰撞预警模块采用Faster_RCNN深度学习算法，用于估计本车与目标的纵向距离、横向距离、碰撞时间，能让驾驶员始终保持安全距离，并能在距离小于安全距离时发出报警信号。
3.根据权利要求2所述的基于单目视觉的高级驾驶模拟方法，其特征在于：所述车道偏离预警模块及前向碰撞预警模块系统与GPS定位功能结合一体，应用到模拟驾驶装置上，并设定新的驾驶动作控制指令。
CN202011000804.3A 2020-09-22 2020-09-22 一种基于单目视觉的高级驾驶模拟系统及方法 Pending CN112133154A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011000804.3A CN112133154A (zh) 2020-09-22 2020-09-22 一种基于单目视觉的高级驾驶模拟系统及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011000804.3A CN112133154A (zh) 2020-09-22 2020-09-22 一种基于单目视觉的高级驾驶模拟系统及方法

Publications (1)

Publication Number Publication Date
CN112133154A true CN112133154A (zh) 2020-12-25

Family

ID=73843074

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011000804.3A Pending CN112133154A (zh) 2020-09-22 2020-09-22 一种基于单目视觉的高级驾驶模拟系统及方法

Country Status (1)

Country Link
CN (1) CN112133154A (zh)

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102288121A (zh) * 2011-05-12 2011-12-21 电子科技大学 一种基于单目视觉的车道偏离距离测量及预警方法
KR20180012065A (ko) * 2016-07-26 2018-02-05 (주)씨앤에스링크 차선이탈경고기능을 갖는 블랙박스
CN108297879A (zh) * 2017-12-14 2018-07-20 浙江鼎奕科技发展有限公司 一种汽车预警系统
CN108447336A (zh) * 2018-03-30 2018-08-24 武汉理工大学 基于驾驶模拟器和可编程触摸屏的adas开发测试系统
CN108438004A (zh) * 2018-03-05 2018-08-24 长安大学 基于单目视觉的车道偏离预警系统
CN110120167A (zh) * 2019-05-05 2019-08-13 浙江合众新能源汽车有限公司 一种教练车辅助练习系统
CN110517521A (zh) * 2019-08-06 2019-11-29 北京航空航天大学 一种基于路车融合感知的车道偏离预警方法

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102288121A (zh) * 2011-05-12 2011-12-21 电子科技大学 一种基于单目视觉的车道偏离距离测量及预警方法
KR20180012065A (ko) * 2016-07-26 2018-02-05 (주)씨앤에스링크 차선이탈경고기능을 갖는 블랙박스
CN108297879A (zh) * 2017-12-14 2018-07-20 浙江鼎奕科技发展有限公司 一种汽车预警系统
CN108438004A (zh) * 2018-03-05 2018-08-24 长安大学 基于单目视觉的车道偏离预警系统
CN108447336A (zh) * 2018-03-30 2018-08-24 武汉理工大学 基于驾驶模拟器和可编程触摸屏的adas开发测试系统
CN110120167A (zh) * 2019-05-05 2019-08-13 浙江合众新能源汽车有限公司 一种教练车辅助练习系统
CN110517521A (zh) * 2019-08-06 2019-11-29 北京航空航天大学 一种基于路车融合感知的车道偏离预警方法

Similar Documents

Publication Publication Date Title
CN110264783B (zh) 基于车路协同的车辆防碰撞预警系统及方法
CN106919915B (zh) 基于adas系统的地图道路标记及道路质量采集装置及方法
CN112700470B (zh) 一种基于交通视频流的目标检测和轨迹提取方法
EP3533681A2 (en) Method for detecting safety of driving behavior, apparatus and storage medium
CN111243274A (zh) 面向非网联交通个体的道路碰撞预警系统及方法
CN110837800A (zh) 一种面向港口恶劣天气的目标检测和识别的方法
CN104992145A (zh) 一种矩采样车道跟踪检测方法
CN201268230Y (zh) 基于计算机视觉的限速标志信息车辆辅助驾驶系统
CN114333330B (zh) 一种基于路侧边缘全息感知的交叉口事件检测系统
CN109883438B (zh) 车辆导航方法、装置、介质及电子设备
WO2020068636A1 (en) Reducing inconvenience to surrounding road users caused by stopped autonomous vehicles
CN116798272B (zh) 基于车辆通信的道路十字路口盲区车辆预警系统及方法
CN105574502A (zh) 一种自助发卡机违章行为自动检测方法
CN110738081A (zh) 异常路况检测方法及装置
US20230415753A1 (en) On-Vehicle Driving Behavior Modelling
CN112810619A (zh) 基于雷达的辅助驾驶系统前方目标车辆识别方法
CN107564336B (zh) 一种信号交叉口左转冲突预警系统及预警方法
CN113359673B (zh) 一种基于大数据的自动驾驶汽车性能判定系统
CN111427063B (zh) 一种移动装置通行控制方法、装置、设备、系统及介质
CN112133154A (zh) 一种基于单目视觉的高级驾驶模拟系统及方法
CN113570877B (zh) 一种非机动车逆行检测装置及检测方法
CN113147989B (zh) 一种基于物联网的电动车主动刹车系统及方法
CN202771439U (zh) 基于matlab交通标志自动识别装置
CN112163466B (zh) 一种基于uwb的限高高度确定方法、装置和系统
CN112124074A (zh) 基于车辆周边情况实现自动控制车速方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB03 Change of inventor or designer information
CB03 Change of inventor or designer information

Inventor after: Zhao Lianhua

Inventor after: Teng Yue

Inventor before: Zhao Lianhua

Inventor before: Jumping

RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20201225