CN106184206B - 一种基于单目视觉原理的智能化汽车离道预警系统及方法 - Google Patents

一种基于单目视觉原理的智能化汽车离道预警系统及方法 Download PDF

Info

Publication number
CN106184206B
CN106184206B CN201610764263.9A CN201610764263A CN106184206B CN 106184206 B CN106184206 B CN 106184206B CN 201610764263 A CN201610764263 A CN 201610764263A CN 106184206 B CN106184206 B CN 106184206B
Authority
CN
China
Prior art keywords
image
module
alarm
signal
lines
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201610764263.9A
Other languages
English (en)
Other versions
CN106184206A (zh
Inventor
胡强
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Gaohang Intellectual Property Operation Co ltd
Weimar Automobile Technology Group Co ltd
Original Assignee
Wei Ma Automotive Technology Group Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Wei Ma Automotive Technology Group Co Ltd filed Critical Wei Ma Automotive Technology Group Co Ltd
Priority to CN201610764263.9A priority Critical patent/CN106184206B/zh
Publication of CN106184206A publication Critical patent/CN106184206A/zh
Application granted granted Critical
Publication of CN106184206B publication Critical patent/CN106184206B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00—Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • B60W30/10—Path keeping
    • B60W30/12—Lane keeping
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08—Interaction between the driver and the control system
    • B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention

Landscapes

  • Engineering & Computer Science (AREA)
  • Automation & Control Theory (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Human Computer Interaction (AREA)
  • Traffic Control Systems (AREA)
  • Image Analysis (AREA)

Abstract

本发明提供了一种基于单目视觉原理的智能化汽车离道预警系统及方法，涉及汽车技术领域，其特征在于，所述系统包括：内存、内部处理器、外存、外部处理器、总线、中断请求输入模块、串行外设接口、三轴加速器、时序产生模块、探测驱动模块、图像传感器、报警单元和电源单元。本发明具有精确度高、智能化和预警及时准确等优点。

Description

一种基于单目视觉原理的智能化汽车离道预警系统及方法
技术领域
本发明涉及汽车技术领域，特别涉及一种基于单目视觉原理的智能化汽车离道预警系统及方法。
背景技术
随着自动化和微电子技术的高速发展，现代交通辅助工具越来越智能化，GPS导航、兴趣点提示、多功能辅助控制系统、甚至是无人驾驶，从军用交通工具融入普及到家用型交通工具，特别是最普遍的家用轿车，已形成一种不可逆的智能化潮流。
目前有数个国内外汽车生产商已经采用了不同的车道保持辅助系统（例如奥迪Q5、大众高尔夫7代），此类系统均建立在一个数字图像视频处理的基础上，再通过检测车道等信息进行建模和预警。虽然投入商用的系统已经很成熟完善，预警机制的逻辑判断（启动条件、提前预警）考虑较为周全，但几乎都忽略了摄像头因为汽车载客不同和路面铺设而发生倾斜的情况，在算法中加入这个因素的修正对于未来精确控制和辅助车辆行驶具有实际意义。
发明内容
鉴于此，本发明提供了一种基于单目视觉原理的智能化汽车离道预警系统及方法，本发明具有精确度高、智能化、预警及时准确等优点。
本发明采用的技术方案如下：
一种基于单目视觉原理的智能化汽车离道预警系统，其特征在于，所述系统包括：内存、内部处理器、外存、外部处理器、总线、中断请求输入模块、串行外设接口、三轴加速器、时序产生模块、探测驱动模块、图像传感器、报警单元和电源单元；所述内存信号连接于内部处理器；所属内部处理器分别信号连接于外存和总线；所述外存信号连接于外部处理器；所述三轴加速器分别信号连接于中断请求输入模块和串行外设接口；所述中断请求输入模块信号连接于总线；所述串行外设接口信号连接于总线；所述图像传感器分别信号连接于探测驱动模块和总线；所述探测驱动模块信号连接于时序产生模块；所述时序产生模块信号连接于总线；所述报警单元信号连接于总线；所述电源单元信号连接于总线。
所述图像传感器安装于车盘中轴前方，所述传感器的光轴与车盘平行；所述图像传感器信号连接于内存，将拍摄到的图像信息发送到内存中进行存储。
采用上述技术方案，图像传感器安装在车盘中轴前方，其光轴与车盘平行；由于车轴中心距左右分车道有一定距离，根据透视投影的基本原理，摄像头路面投影图像中左右分道线会形成一个角度，这个角度会因车的位置变化而改变，当车处于两条分道线中间，所得图像中两条左右分道线的夹角最大，其斜率一正一负, 当车辆偏移中线时，这个角度会逐渐变小，至离道存在一个最小夹角，但图像中该角度信息小于这个最小夹角的时候，报警机制就会发出警报。
所述内部处理器包括：图像锐化模块、阈值边缘检测模块、光学畸变矫正模块、倾角旋转矫正模块、Hough算法模块、分道线提取模块和预警模块；所述图像锐化模块信号连接于阈值边缘检测模块，用于对图像进行锐化处理，得到原始的灰度图像，将灰度图像发送至阈值边缘检测模块；所述阈值边缘检测模块信号连接于光学畸变矫正模块，用于对灰度图像进行边缘检测，将检测后的图像发送至光学畸变矫正模块；所述光学畸变矫正模块信号连接于倾角旋转矫正模块，用于对接收到的图像信息进行光学畸变矫正，将矫正后的图像发送至倾角旋转矫正模块；所述倾角旋转矫正模块信号连接于Hough算法模块，用于对接收到的图像信息进行倾角校正，将矫正后的他图像发送至Hough算法模块；所述Hough算法模块信号连接于分道线提取模块，用于对接收到的图像进行Hough变换，将变换后的图像发送至分道线提取模块；所述分道线提取模块信号连接于预警模块，用于对接收到的图像进行和分道线提取，并进行警报出发条件判断，将判断结果发送至预警模块；所述预警模块信号连接于总线，用于发出预警指令，将总线传输后触发报警单元进行报警。
采用上述技术方案，图像传感器摄入路面图像数据，存储到板内RAM；通过畸变矫正，保证显示的分车道尽可能实况；接着，通过三轴加速计水平矫正，使得图像x轴与实际路面平行；最后通过阀值分隔、边缘检测以及Hough变换的算法，重新构建出路面图像并建立分道线角度数据传送到预警逻辑状态机。
所述三轴加速器，用于获取汽车行驶过程中在三个坐标轴的数据信息，将数据信息发送至内部处理器；所述时序产生模块，用于产生时间指令；所述探测驱动模块，用于监测系统中各个硬件的驱动是否正常，是否有驱动缺失，将探测结果发送至内部处理器。
一种基于单目视觉原理的智能化汽车离道预警方法，其特征在于，所述方法包括以下步骤：
步骤1：汽车启动，系统初始化，报警单元处于未启用状态，图像传感器开始摄入路面图像数据，存储到内存中；
步骤2：处理器首先对图像进行锐化处理；再通过阀值边缘检测，得到边缘二值图像；然后，通过从三轴加速器获取的数据信息，进行光学畸变矫正和倾角旋转矫正，得到校正后边缘二值图像，对该图像进行Hough算法运算，得到经变换后的参数平面，最后提取该图像的分道线，根据提取出的分道线判断汽车运行状态；
步骤3：若判断结果为，汽车正常行驶在两分道线中间并未打开转向灯，则报警单元切换到启用状态；
步骤4：在报警单元处于启用状态下，如果图像分到夹角小于报警最小夹角，则报警单元进入报警状态，警报立即触发。
采用上述技术方案，图像传感器将摄入的原始灰度图像传入到那内部处理器，最先通过阀值边缘检测，得到边缘二值图像数据；当车出现倾斜后，摄入的图像会出现透视畸变，所以需要通过光学畸变矫正，得到矫正后与实况相符的边缘二值图像数据；这时，安装的陀螺仪会提供相应参数，对图像进行倾角旋转矫正，得到水平边缘二值图像数据；在通过Hough算法转化为参数平面数据，从中提取出分道线；随着车行驶的实况，随时对警报触发条件进行判断，出现离道，警报触发条件满足后，内部处理器立马将预警逻辑相关信息输出，控制触发警报。
所述报警单元共有三种运行状态：未启用、启用和报警; 汽车启动时，警报系统处于未启用状态，当预警启动条件满足时，即车辆正常行驶在两分道线中间并未打开转向灯时，报警单元切换到启用状态；在启用状态下，若车偏离车道，处理器对图像处理的结果中得到分道线角度数据满足离道条件，即图像分道夹角小于警报最小夹角时，则进入报警状态，警报立即触发；同时，警报触发有一个较短的持续缓冲时间，在该时间内汽车重新满足预警启动条件则警报系统重新进入启用状态，如果依旧未检测到满足启用状态的分道线角度则进入未启用状态；如果报警单元在设定时间阈值内所得分道线的角度数据处于安全范围内时，即使有小范围摆动，也认为车未偏离车道，警报不会触发；当汽车转向时，提前打开转向灯，警报系统也将处于未启用状态。
所述阈值边缘检测的方法包括以下步骤：
步骤1：采用隶属度函数将待处理的图像映射为一个模糊矩阵；
步骤2：记图像 具有 个灰度级，图像大小为 ，模糊矩阵的元素 为图像的隶属度函数为：；参数F=2； 与 的形状有关；
步骤3：对 进行非线性变换，得到：
;
步骤4：对 QUOTE 进行逆变换，得到模糊增强后的图像
步骤5：得到图像的边缘为：
。
采用以上技术方案，本发明产生了以下有益效果：
1、精确度高：本发明的预警系统及方法加入三轴加速计对关于镜头倾斜后图像处理的矫正，突破由于广角摄像头的光学特性的非线性变换问题，提升了识别的精确度和准确度。此外，在原始图像上预处理为边缘二值图像后再采用Hough变换算法，鲁棒性和抗干扰性较高，代替现有的DSP视频处理芯片，更快速地实现实时视频处理。
2、智能化：本发明的预警系统和预警方法中的无须人为进行操作，系统自动识别运行状态，根据运行状态自动进行报警，智能化程度高。采用特别的定制算法，保证了最终结果的准确性。
3、预警及时准确：本发明的预警系统和预警方法中的报警单元采用了独特的报警机制，分三个状态：未启用，启用，报警; 车辆刚启动时，警报系统处于未启用状态，一旦满足预警启动条件（车辆正常行驶在两分道线中间并未打开转向灯）后，警报系统切换到启用状态；在启用状态下，如果车偏离车道，图像处理运算得到分道线角度数据满足离道条件（图像分道夹角小于警报最小夹角），则进入报警状态，警报立即触发；警报触发有一个较短的持续缓冲时间，在该时间内汽车重新满足预警启动条件则警报系统重新进入启用状态，如果依旧未检测到满足启用状态的分道线角度则进入未启用状态。如果最近所得分道线的角度数据处于安全范围内时，即使有小范围摆动，但认为车未偏离车道，警报不会触发；或者，车要转向，提前打开转向灯，那么警报系统处于未启用状态。系统自动进行报警状态识别，无须人工进行操作，具备高度的智能化。
附图说明
图1是本发明的一种基于单目视觉原理的智能化汽车离道预警系统及方法的系统结构示意图。
具体实施方式
本说明书中公开的所有特征，或公开的所有方法或过程中的步骤，除了互相排斥的特征和/或步骤以外，均可以以任何方式组合。
本说明书（包括任何附加权利要求、摘要）中公开的任一特征，除非特别叙述，均可被其他等效或具有类似目的的替代特征加以替换。即，除非特别叙述，每个特征只是一系列等效或类似特征中的一个例子而已。
本发明实施例1中提供了种基于单目视觉原理的智能化汽车离道预警系统，系统结构如图1所示：
一种基于单目视觉原理的智能化汽车离道预警系统，其特征在于，所述系统包括：内存、内部处理器、外存、外部处理器、总线、中断请求输入模块、串行外设接口、三轴加速器、时序产生模块、探测驱动模块、图像传感器、报警单元和电源单元；所述内存信号连接于内部处理器；所属内部处理器分别信号连接于外存和总线；所述外存信号连接于外部处理器；所述三轴加速器分别信号连接于中断请求输入模块和串行外设接口；所述中断请求输入模块信号连接于总线；所述串行外设接口信号连接于总线；所述图像传感器分别信号连接于探测驱动模块和总线；所述探测驱动模块信号连接于时序产生模块；所述时序产生模块信号连接于总线；所述报警单元信号连接于总线；所述电源单元信号连接于总线。
所述图像传感器安装于车盘中轴前方，所述传感器的光轴与车盘平行；所述图像传感器信号连接于内存，将拍摄到的图像信息发送到内存中进行存储。
采用上述技术方案，图像传感器安装在车盘中轴前方，其光轴与车盘平行；由于车轴中心距左右分车道有一定距离，根据透视投影的基本原理，摄像头路面投影图像中左右分道线会形成一个角度，这个角度会因车的位置变化而改变，当车处于两条分道线中间，所得图像中两条左右分道线的夹角最大，其斜率一正一负, 当车辆偏移中线时，这个角度会逐渐变小，至离道存在一个最小夹角，但图像中该角度信息小于这个最小夹角的时候，报警机制就会发出警报。
所述内部处理器包括：图像锐化模块、阈值边缘检测模块、光学畸变矫正模块、倾角旋转矫正模块、Hough算法模块、分道线提取模块和预警模块；所述图像锐化模块信号连接于阈值边缘检测模块，用于对图像进行锐化处理，得到原始的灰度图像，将灰度图像发送至阈值边缘检测模块；所述阈值边缘检测模块信号连接于光学畸变矫正模块，用于对灰度图像进行边缘检测，将检测后的图像发送至光学畸变矫正模块；所述光学畸变矫正模块信号连接于倾角旋转矫正模块，用于对接收到的图像信息进行光学畸变矫正，将矫正后的图像发送至倾角旋转矫正模块；所述倾角旋转矫正模块信号连接于Hough算法模块，用于对接收到的图像信息进行倾角校正，将矫正后的他图像发送至Hough算法模块；所述Hough算法模块信号连接于分道线提取模块，用于对接收到的图像进行Hough变换，将变换后的图像发送至分道线提取模块；所述分道线提取模块信号连接于预警模块，用于对接收到的图像进行和分道线提取，并进行警报出发条件判断，将判断结果发送至预警模块；所述预警模块信号连接于总线，用于发出预警指令，将总线传输后触发报警单元进行报警。
采用上述技术方案，图像传感器摄入路面图像数据，存储到板内RAM；通过畸变矫正，保证显示的分车道尽可能实况；接着，通过三轴加速计水平矫正，使得图像x轴与实际路面平行；最后通过阀值分隔、边缘检测以及Hough变换的算法，重新构建出路面图像并建立分道线角度数据传送到预警逻辑状态机。
所述三轴加速器，用于获取汽车行驶过程中在三个坐标轴的数据信息，将数据信息发送至内部处理器；所述时序产生模块，用于产生时间指令；所述探测驱动模块，用于监测系统中各个硬件的驱动是否正常，是否有驱动缺失，将探测结果发送至内部处理器。
本发明实施例2中提供了种基于单目视觉原理的智能化汽车离道预警方法：
一种基于单目视觉原理的智能化汽车离道预警方法，其特征在于，所述方法包括以下步骤：
步骤1：汽车启动，系统初始化，报警单元处于未启用状态，图像传感器开始摄入路面图像数据，存储到内存中；
步骤2：处理器首先对图像进行锐化处理；再通过阀值边缘检测，得到边缘二值图像；然后，通过从三轴加速器获取的数据信息，进行光学畸变矫正和倾角旋转矫正，得到校正后边缘二值图像，对该图像进行Hough算法运算，得到经变换后的参数平面，最后提取该图像的分道线，根据提取出的分道线判断汽车运行状态；
步骤3：若判断结果为，汽车正常行驶在两分道线中间并未打开转向灯，则报警单元切换到启用状态；
步骤4：在报警单元处于启用状态下，如果图像分到夹角小于报警最小夹角，则报警单元进入报警状态，警报立即触发。
采用上述技术方案，图像传感器将摄入的原始灰度图像传入到那内部处理器，最先通过阀值边缘检测，得到边缘二值图像数据；当车出现倾斜后，摄入的图像会出现透视畸变，所以需要通过光学畸变矫正，得到矫正后与实况相符的边缘二值图像数据；这时，安装的陀螺仪会提供相应参数，对图像进行倾角旋转矫正，得到水平边缘二值图像数据；在通过Hough算法转化为参数平面数据，从中提取出分道线；随着车行驶的实况，随时对警报触发条件进行判断，出现离道，警报触发条件满足后，内部处理器立马将预警逻辑相关信息输出，控制触发警报。
所述报警单元共有三种运行状态：未启用、启用和报警; 汽车启动时，警报系统处于未启用状态，当预警启动条件满足时，即车辆正常行驶在两分道线中间并未打开转向灯时，报警单元切换到启用状态；在启用状态下，若车偏离车道，处理器对图像处理的结果中得到分道线角度数据满足离道条件，即图像分道夹角小于警报最小夹角时，则进入报警状态，警报立即触发；同时，警报触发有一个较短的持续缓冲时间，在该时间内汽车重新满足预警启动条件则警报系统重新进入启用状态，如果依旧未检测到满足启用状态的分道线角度则进入未启用状态；如果报警单元在设定时间阈值内所得分道线的角度数据处于安全范围内时，即使有小范围摆动，也认为车未偏离车道，警报不会触发；当汽车转向时，提前打开转向灯，警报系统也将处于未启用状态。
所述阈值边缘检测的方法包括以下步骤：
步骤1：采用隶属度函数将待处理的图像映射为一个模糊矩阵 ；
步骤2：记图像 具有 个灰度级，图像大小为 ，模糊矩阵 的元素 为图像的隶属度函数为：；参数F=2； 与 的形状有关；
步骤3：对 进行非线性变换，得到：
;
步骤4：对进行逆变换，得到模糊增强后的图像
步骤5：得到图像的边缘为：
。
本发明实施例3中提供了种基于单目视觉原理的智能化汽车离道预警系统及方法，系统结构图如图1所示：
一种基于单目视觉原理的智能化汽车离道预警系统，其特征在于，所述系统包括：内存、内部处理器、外存、外部处理器、总线、中断请求输入模块、串行外设接口、三轴加速器、时序产生模块、探测驱动模块、图像传感器、报警单元和电源单元；所述内存信号连接于内部处理器；所属内部处理器分别信号连接于外存和总线；所述外存信号连接于外部处理器；所述三轴加速器分别信号连接于中断请求输入模块和串行外设接口；所述中断请求输入模块信号连接于总线；所述串行外设接口信号连接于总线；所述图像传感器分别信号连接于探测驱动模块和总线；所述探测驱动模块信号连接于时序产生模块；所述时序产生模块信号连接于总线；所述报警单元信号连接于总线；所述电源单元信号连接于总线。
所述图像传感器安装于车盘中轴前方，所述传感器的光轴与车盘平行；所述图像传感器信号连接于内存，将拍摄到的图像信息发送到内存中进行存储。
采用上述技术方案，图像传感器安装在车盘中轴前方，其光轴与车盘平行；由于车轴中心距左右分车道有一定距离，根据透视投影的基本原理，摄像头路面投影图像中左右分道线会形成一个角度，这个角度会因车的位置变化而改变，当车处于两条分道线中间，所得图像中两条左右分道线的夹角最大，其斜率一正一负, 当车辆偏移中线时，这个角度会逐渐变小，至离道存在一个最小夹角，但图像中该角度信息小于这个最小夹角的时候，报警机制就会发出警报。
所述内部处理器包括：图像锐化模块、阈值边缘检测模块、光学畸变矫正模块、倾角旋转矫正模块、Hough算法模块、分道线提取模块和预警模块；所述图像锐化模块信号连接于阈值边缘检测模块，用于对图像进行锐化处理，得到原始的灰度图像，将灰度图像发送至阈值边缘检测模块；所述阈值边缘检测模块信号连接于光学畸变矫正模块，用于对灰度图像进行边缘检测，将检测后的图像发送至光学畸变矫正模块；所述光学畸变矫正模块信号连接于倾角旋转矫正模块，用于对接收到的图像信息进行光学畸变矫正，将矫正后的图像发送至倾角旋转矫正模块；所述倾角旋转矫正模块信号连接于Hough算法模块，用于对接收到的图像信息进行倾角校正，将矫正后的他图像发送至Hough算法模块；所述Hough算法模块信号连接于分道线提取模块，用于对接收到的图像进行Hough变换，将变换后的图像发送至分道线提取模块；所述分道线提取模块信号连接于预警模块，用于对接收到的图像进行和分道线提取，并进行警报出发条件判断，将判断结果发送至预警模块；所述预警模块信号连接于总线，用于发出预警指令，将总线传输后触发报警单元进行报警。
采用上述技术方案，图像传感器摄入路面图像数据，存储到板内RAM；通过畸变矫正，保证显示的分车道尽可能实况；接着，通过三轴加速计水平矫正，使得图像x轴与实际路面平行；最后通过阀值分隔、边缘检测以及Hough变换的算法，重新构建出路面图像并建立分道线角度数据传送到预警逻辑状态机。
所述三轴加速器，用于获取汽车行驶过程中在三个坐标轴的数据信息，将数据信息发送至内部处理器；所述时序产生模块，用于产生时间指令；所述探测驱动模块，用于监测系统中各个硬件的驱动是否正常，是否有驱动缺失，将探测结果发送至内部处理器。
一种基于单目视觉原理的智能化汽车离道预警方法，其特征在于，所述方法包括以下步骤：
步骤1：汽车启动，系统初始化，报警单元处于未启用状态，图像传感器开始摄入路面图像数据，存储到内存中；
步骤2：处理器首先对图像进行锐化处理；再通过阀值边缘检测，得到边缘二值图像；然后，通过从三轴加速器获取的数据信息，进行光学畸变矫正和倾角旋转矫正，得到校正后边缘二值图像，对该图像进行Hough算法运算，得到经变换后的参数平面，最后提取该图像的分道线，根据提取出的分道线判断汽车运行状态；
步骤3：若判断结果为，汽车正常行驶在两分道线中间并未打开转向灯，则报警单元切换到启用状态；
步骤4：在报警单元处于启用状态下，如果图像分到夹角小于报警最小夹角，则报警单元进入报警状态，警报立即触发。
采用上述技术方案，图像传感器将摄入的原始灰度图像传入到那内部处理器，最先通过阀值边缘检测，得到边缘二值图像数据；当车出现倾斜后，摄入的图像会出现透视畸变，所以需要通过光学畸变矫正，得到矫正后与实况相符的边缘二值图像数据；这时，安装的陀螺仪会提供相应参数，对图像进行倾角旋转矫正，得到水平边缘二值图像数据；在通过Hough算法转化为参数平面数据，从中提取出分道线；随着车行驶的实况，随时对警报触发条件进行判断，出现离道，警报触发条件满足后，内部处理器立马将预警逻辑相关信息输出，控制触发警报。
所述报警单元共有三种运行状态：未启用、启用和报警; 汽车启动时，警报系统处于未启用状态，当预警启动条件满足时，即车辆正常行驶在两分道线中间并未打开转向灯时，报警单元切换到启用状态；在启用状态下，若车偏离车道，处理器对图像处理的结果中得到分道线角度数据满足离道条件，即图像分道夹角小于警报最小夹角时，则进入报警状态，警报立即触发；同时，警报触发有一个较短的持续缓冲时间，在该时间内汽车重新满足预警启动条件则警报系统重新进入启用状态，如果依旧未检测到满足启用状态的分道线角度则进入未启用状态；如果报警单元在设定时间阈值内所得分道线的角度数据处于安全范围内时，即使有小范围摆动，也认为车未偏离车道，警报不会触发；当汽车转向时，提前打开转向灯，警报系统也将处于未启用状态。
所述阈值边缘检测的方法包括以下步骤：
步骤1：采用隶属度函数将待处理的图像映射为一个模糊矩阵 ；
步骤2：记图像具有 个灰度级，图像大小为 ，模糊矩阵 的元素 为图像的隶属度函数为：；参数F=2； 与 的形状有关；
步骤3：对 进行非线性变换，得到：
;
步骤4：对 进行逆变换，得到模糊增强后的图像
步骤5：得到图像的边缘为：
。
本发明的预警系统及方法加入三轴加速计对关于镜头倾斜后图像处理的矫正，突破由于广角摄像头的光学特性的非线性变换问题，提升了识别的精确度和准确度。此外，在原始图像上预处理为边缘二值图像后再采用Hough变换算法，鲁棒性和抗干扰性较高，代替现有的DSP视频处理芯片，更快速地实现实时视频处理。
本发明的预警系统和预警方法中的无须人为进行操作，系统自动识别运行状态，根据运行状态自动进行报警，智能化程度高。采用特别的定制算法，保证了最终结果的准确性。
本发明的预警系统和预警方法中的报警单元采用了独特的报警机制，分三个状态：未启用，启用，报警; 车辆刚启动时，警报系统处于未启用状态，一旦满足预警启动条件（车辆正常行驶在两分道线中间并未打开转向灯）后，警报系统切换到启用状态；在启用状态下，如果车偏离车道，图像处理运算得到分道线角度数据满足离道条件（图像分道夹角小于警报最小夹角），则进入报警状态，警报立即触发；警报触发有一个较短的持续缓冲时间，在该时间内汽车重新满足预警启动条件则警报系统重新进入启用状态，如果依旧未检测到满足启用状态的分道线角度则进入未启用状态。如果最近所得分道线的角度数据处于安全范围内时，即使有小范围摆动，但认为车未偏离车道，警报不会触发；或者，车要转向，提前打开转向灯，那么警报系统处于未启用状态。系统自动进行报警状态识别，无须人工进行操作，具备高度的智能化。
本发明并不局限于前述的具体实施方式。本发明扩展到任何在本说明书中披露的新特征或任何新的组合，以及披露的任一新的方法或过程的步骤或任何新的组合。

Claims (6)

1.一种基于单目视觉原理的智能化汽车离道预警系统，其特征在于，所述系统包括：内存、内部处理器、外存、外部处理器、总线、中断请求输入模块、串行外设接口、三轴加速器、时序产生模块、探测驱动模块、图像传感器、报警单元和电源单元；所述内存信号连接于内部处理器；所属内部处理器分别信号连接于外存和总线；所述外存信号连接于外部处理器；所述三轴加速器分别信号连接于中断请求输入模块和串行外设接口；所述中断请求输入模块信号连接于总线；所述串行外设接口信号连接于总线；所述图像传感器分别信号连接于探测驱动模块和总线；所述探测驱动模块信号连接于时序产生模块；所述时序产生模块信号连接于总线；所述报警单元信号连接于总线；所述电源单元信号连接于总线；
所述三轴加速器，用于获取汽车行驶过程中在三个坐标轴的数据信息，将数据信息发送至内部处理器；所述时序产生模块，用于产生时间指令；所述探测驱动模块，用于监测系统中各个硬件的驱动是否正常，是否有驱动缺失，将探测结果发送至内部处理器。
2.如权利要求1所述的基于单目视觉原理的智能化汽车离道预警系统，其特征在于，所述图像传感器安装于车盘中轴前方，所述传感器的光轴与车盘平行；所述图像传感器信号连接于内存，将拍摄到的图像信息发送到内存中进行存储。
3.如权利要求1所述的基于单目视觉原理的智能化汽车离道预警系统，其特征在于，所述内部处理器包括：图像锐化模块、阈值边缘检测模块、光学畸变矫正模块、倾角旋转矫正模块、Hough算法模块、分道线提取模块和预警模块；所述图像锐化模块信号连接于阈值边缘检测模块，用于对图像进行锐化处理，得到原始的灰度图像，将灰度图像发送至阈值边缘检测模块；所述阈值边缘检测模块信号连接于光学畸变矫正模块，用于对灰度图像进行边缘检测，将检测后的图像发送至光学畸变矫正模块；所述光学畸变矫正模块信号连接于倾角旋转矫正模块，用于对接收到的图像信息进行光学畸变矫正，将矫正后的图像发送至倾角旋转矫正模块；所述倾角旋转矫正模块信号连接于Hough算法模块，用于对接收到的图像信息进行倾角校正，将矫正后的他图像发送至Hough算法模块；所述Hough算法模块信号连接于分道线提取模块，用于对接收到的图像进行Hough变换，将变换后的图像发送至分道线提取模块；所述分道线提取模块信号连接于预警模块，用于对接收到的图像进行和分道线提取，并进行警报出发条件判断，将判断结果发送至预警模块；所述预警模块信号连接于总线，用于发出预警指令，将总线传输后触发报警单元进行报警。
4.一种基于权利要去1至3之一所述的基于单目视觉原理的智能化汽车离道预警系统的预警方法，其特征在于，所述方法包括以下步骤：
步骤1：汽车启动，系统初始化，报警单元处于未启用状态，图像传感器开始摄入路面图像数据，存储到内存中；
步骤2：处理器首先对图像进行锐化处理；再通过阀值边缘检测，得到边缘二值图像；然后，通过从三轴加速器获取的数据信息，进行光学畸变矫正和倾角旋转矫正，得到校正后边缘二值图像，对该图像进行Hough算法运算，得到经变换后的参数平面，最后提取该图像的分道线，根据提取出的分道线判断汽车运行状态；
步骤3：若判断结果为，汽车正常行驶在两分道线中间并未打开转向灯，则报警单元切换到启用状态；
步骤4：在报警单元处于启用状态下，如果图像分到夹角小于报警最小夹角，则报警单元进入报警状态，警报立即触发。
5.如权利要求4所述的预警方法，其特征在于，所述报警单元共有三种运行状态：未启用、启用和报警；汽车启动时，警报系统处于未启用状态，当预警启动条件满足时，即车辆正常行驶在两分道线中间并未打开转向灯时，报警单元切换到启用状态；在启用状态下，若车偏离车道，处理器对图像处理的结果中得到分道线角度数据满足离道条件，即图像分道夹角小于警报最小夹角时，则进入报警状态，警报立即触发；同时，警报触发有一个较短的持续缓冲时间，在该时间内汽车重新满足预警启动条件则警报系统重新进入启用状态，如果依旧未检测到满足启用状态的分道线角度则进入未启用状态；如果报警单元在设定时间阈值内所得分道线的角度数据处于安全范围内时，即使有小范围摆动，也认为车未偏离车道，警报不会触发；当汽车转向时，提前打开转向灯，警报系统也将处于未启用状态。
6.如权利要求5所述的预警方法，其特征在于，所述阈值边缘检测的方法包括以下步骤：
步骤1：采用隶属度函数将待处理的图像映射为一个模糊矩阵P；
步骤2：记图像f(x，y)具有L个灰度级，图像大小为M*N，模糊矩阵PM*N的元素P(i，j)为图像的隶属度函数为：μxy＝G(μxy)＝[1+(L-1)-f(x，y)/Fd]-F；参数F＝2；Fd与μxy的形状有关；
步骤3：对μxy进行非线性变换，得到：
μ′xy＝Tr(μxy)＝T1(Tr-1(μxy))，r＝1，2...；
步骤4：对μ′xy进行逆变换，得到模糊增强后的图像f′xy＝G(μ′xy)-1；
步骤5：得到图像的边缘为：
Edge＝[f*(x，y)]M*N。
CN201610764263.9A 2016-08-31 2016-08-31 一种基于单目视觉原理的智能化汽车离道预警系统及方法 Active CN106184206B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610764263.9A CN106184206B (zh) 2016-08-31 2016-08-31 一种基于单目视觉原理的智能化汽车离道预警系统及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610764263.9A CN106184206B (zh) 2016-08-31 2016-08-31 一种基于单目视觉原理的智能化汽车离道预警系统及方法

Publications (2)

Publication Number Publication Date
CN106184206A CN106184206A (zh) 2016-12-07
CN106184206B true CN106184206B (zh) 2018-12-14

Family

ID=58088018

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610764263.9A Active CN106184206B (zh) 2016-08-31 2016-08-31 一种基于单目视觉原理的智能化汽车离道预警系统及方法

Country Status (1)

Country Link
CN (1) CN106184206B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109099818A (zh) * 2018-06-27 2018-12-28 武汉理工大学 便携式微米级高清测距系统
CN109398356B (zh) * 2018-11-23 2021-03-30 奇瑞汽车股份有限公司 车道保持系统及方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102667888A (zh) * 2009-11-27 2012-09-12 丰田自动车株式会社 驾驶辅助装置以及驾驶辅助方法
CN103192828A (zh) * 2012-01-04 2013-07-10 现代摩比斯株式会社 可识别高通车道的车道偏离警告系统及高通车道识别方法
EP2767450A1 (en) * 2011-02-11 2014-08-20 Scania CV AB (publ) Lane departure warning system and a method for a lane departure warning system
CN206086717U (zh) * 2016-08-31 2017-04-12 成都市和平科技有限责任公司 一种基于单目视觉原理的智能化汽车离道预警系统

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102667888A (zh) * 2009-11-27 2012-09-12 丰田自动车株式会社 驾驶辅助装置以及驾驶辅助方法
EP2767450A1 (en) * 2011-02-11 2014-08-20 Scania CV AB (publ) Lane departure warning system and a method for a lane departure warning system
CN103192828A (zh) * 2012-01-04 2013-07-10 现代摩比斯株式会社 可识别高通车道的车道偏离警告系统及高通车道识别方法
CN206086717U (zh) * 2016-08-31 2017-04-12 成都市和平科技有限责任公司 一种基于单目视觉原理的智能化汽车离道预警系统

Also Published As

Publication number Publication date
CN106184206A (zh) 2016-12-07

Similar Documents

Publication Publication Date Title
CN109636924B (zh) 基于现实路况信息三维建模的车载多模式增强现实系统
US20170300763A1 (en) Road feature detection using a vehicle camera system
CN108638999B (zh) 一种基于360度环视输入的防碰撞预警系统及方法
CN104573646B (zh) 基于激光雷达和双目相机的车前行人检测方法及系统
US10402670B2 (en) Parallel scene primitive detection using a surround camera system
WO2017175025A2 (en) Detecting visual information corresponding to an animal
CN107179767B (zh) 驾驶控制装置、驾驶控制方法以及非瞬时性记录介质
CN112349144B (zh) 一种基于单目视觉的车辆碰撞预警方法及系统
WO2020186883A1 (zh) 注视区域检测及神经网络训练的方法、装置和设备
CN108243623A (zh) 基于双目立体视觉的汽车防碰撞预警方法和系统
CN107031623A (zh) 一种基于车载盲区相机的道路预警方法
JP2021195124A (ja) 入力としてグレアを使用する注視判定
CN1640727A (zh) 车载应用程序选择系统和车载应用程序选择装置
CN111231971A (zh) 基于大数据的汽车安全性能分析评价方法及系统
CN112052716B (zh) 识别装置、识别方法及存储介质
CN107187436A (zh) 防止误踩油门的方法和装置
CN104573622A (zh) 人脸检测装置、方法
CN108482367A (zh) 一种基于智能后视镜辅助驾驶的方法、装置及系统
JP6795379B2 (ja) 運転制御装置、運転制御方法及び運転制御プログラム
CN108108680A (zh) 一种基于双目视觉的后方车辆识别与测距方法
CN106184206B (zh) 一种基于单目视觉原理的智能化汽车离道预警系统及方法
KR102349906B1 (ko) 자동차의 블라인드 스팟 모니터링을 위한 학습 방법과 테스팅 방법, 및 이를 이용한 학습 장치와 테스팅 장치
CN108621924A (zh) 一种具有提示功能的后灯控制系统及其控制方法
CN206086717U (zh) 一种基于单目视觉原理的智能化汽车离道预警系统
Onkarappa et al. On-board monocular vision system pose estimation through a dense optical flow

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right

Effective date of registration: 20181102

Address after: 201799 floor 5, C building, 333 National Convention and Exhibition Center, song Ze Avenue, Qingpu District, Shanghai.

Applicant after: Weimar Automobile Technology Group Co.,Ltd.

Address before: 510640 2401, unit 371-1, Zhong Gong education building, five mountain road, Tianhe District, Guangzhou, Guangdong.

Applicant before: GUANGDONG GAOHANG INTELLECTUAL PROPERTY OPERATION Co.,Ltd.

Effective date of registration: 20181102

Address after: 510640 2401, unit 371-1, Zhong Gong education building, five mountain road, Tianhe District, Guangzhou, Guangdong.

Applicant after: GUANGDONG GAOHANG INTELLECTUAL PROPERTY OPERATION Co.,Ltd.

Address before: 610015 D 10, 2-2 building, 2 Gaosheng Road, West first section, Wuhou District first ring road, Chengdu, Sichuan.

Applicant before: CHENGDU PEACE TECHNOLOGY Co.,Ltd.

TA01 Transfer of patent application right
GR01 Patent grant
GR01 Patent grant