CN112937486B - 一种道路积水车载在线监测与驾驶辅助系统及方法 - Google Patents

一种道路积水车载在线监测与驾驶辅助系统及方法 Download PDF

Info

Publication number
CN112937486B
CN112937486B CN202110281787.3A CN202110281787A CN112937486B CN 112937486 B CN112937486 B CN 112937486B CN 202110281787 A CN202110281787 A CN 202110281787A CN 112937486 B CN112937486 B CN 112937486B
Authority
CN
China
Prior art keywords
vehicle
laser
water
driver
camera
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202110281787.3A
Other languages
English (en)
Other versions
CN112937486A (zh
Inventor
王军年
曹宇靖
赵文伯
罗智仁
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Jilin University
Original Assignee
Jilin University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Jilin University filed Critical Jilin University
Priority to CN202110281787.3A priority Critical patent/CN112937486B/zh
Publication of CN112937486A publication Critical patent/CN112937486A/zh
Application granted granted Critical
Publication of CN112937486B publication Critical patent/CN112937486B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R21/00Arrangements or fittings on vehicles for protecting or preventing injuries to occupants or pedestrians in case of accidents or other traffic risks
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q9/00Arrangement or adaptation of signal devices not provided for in one of main groups B60Q1/00 - B60Q7/00, e.g. haptic signalling
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02ATECHNOLOGIES FOR ADAPTATION TO CLIMATE CHANGE
    • Y02A90/00Technologies having an indirect contribution to adaptation to climate change
    • Y02A90/30Assessment of water resources

Landscapes

  • Engineering & Computer Science (AREA)
  • Mechanical Engineering (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Traffic Control Systems (AREA)

Abstract

本发明涉及汽车涉水驾驶安全领域,公开了一种道路积水车载在线监测与驾驶辅助系统,包括两个摄像头、车身倾角传感器、超声波雷达、辅助涉水按键、激光发射器、扬声器、显示屏、车辆控制设备、控制单元和电源。本发明还公开了上述系统的控制方法。步骤一、采集所需信息,包括路况图像、汽车俯仰角、超声波雷达至水面的垂直距离;步骤二、处理信息计算得到激光点处路面水深;步骤三、根据水深信息进行判断并提供建议车速和建议挡位,由所述扬声器向司机播报涉水驾驶安全警示音,由所述显示屏向司机提供驾驶建议提示信息,或由所述车辆控制设备辅助驾驶员控制车辆匀速缓行通过积水路面,提高了积水路面驾驶的安全性。

Description

一种道路积水车载在线监测与驾驶辅助系统及方法
技术领域
本发明涉及汽车涉水驾驶安全领域,具体涉及一种道路积水车载在线监测与驾驶辅助系统及方法。
背景技术
汽车在积水路面中的安全性,一直以来都是人们关注汽车的焦点之一。积水路面多发生于雨水天气下的低洼路面,有时也见于附近有河流、湖泊的地带。汽车淌水时,对车辆驾驶而言,如果车速过高会出现滑水现象导致汽车失稳;对路面行人而言,也会因为轮胎溅水路边行人引起社会公德问题。积水深度较大时,汽车淌水甚至可能导致积水进入发动机排气管,导致发动机熄火。如果水进入气缸,还会直接导致发动机配气机构和缸体缸盖的机械损坏,对发动机造成不可逆的严重损坏。同时,由于积水频繁的波动以及积水的不透明性,司机对于积水路面的信息获取难度较大,看不清地面障碍物或坑洞,导致容易出现操作失误引发汽车事故,甚至影响生命财产安全。因此,在面临积水路面时,汽车会有一定的受损风险,司机也难免会有通过还是等待的心理博弈;在通过时,司机操作的不熟练和心理的紧张,又会使得汽车面临的潜在危险在无形中放大。
现阶段,对于汽车涉水安全问题,基础的技术方案是检测车辆所在位置的水深,并以此为依据采取相应的保护措施。例如,专利CN 209351357 U中,其车辆涉水控制系统包括液位传感器、控制器和制动装置,液位传感器发出涉水深度信号,控制器接收涉水深度信号并在所述涉水深度信号超过所述控制器标定的涉水最大阈值时发出制动信号,制动装置在接收到所述控制器发出的制动信号后进行制动。该专利理论上可以使车辆在受损之前停车,缺点在于仅把汽车所在位置的水深作为考虑因素,忽略了车身姿态等因素,不能预测前方水深,无法给司机预留足够的反应时间,因此,即使危险情况可以被检测发现,但是司机仍然很难提前应对;同时,该方案缺少和司机的交互,司机在驾驶汽车淌水时没有掌握到更多的路况信息或行驶意见。
在此基础上,部分解决方案通过一些方法获取前方路面水深信息,进而可以为司机预留足够的反应时间。例如,在专利CN 109677266 A中,车辆周围积水深度数据可以通过以下方式中的一个或多个获得:通过无线通信从路基装置获得,通过网络从公共服务系统系统获得,通过车辆上设置不同高度的摄像头获得。但是,该专利获取车辆周围积水深度的前两种方法需要交通环境有相应的设施来支撑,第三种方法获取的深度是通过估计的方法,误差较大。例如,在专利CN 111645598 A中,通过车头处的超声波传感器发射两次超声波,以接收到的第一第二回波时长来计算倾斜距离,以水压测深模块检测出的超声波传感器位置处水的深度作为第一水深,控制模块根据特定角度和倾斜距离生成第二深度,再由第一第二水深来计算前方预设距离的涉水深度。该专利的不足之处是超声波频率高,传播近似直线,回波信号弱,且在预设距离内,发出两次超声波信号的时间间隔太短,误差太大,对测量仪器的精密性要求高。再例如,在CN 108621998 A中,通过测量周围预定范围内其他车辆的涉水深度来判断车辆能否安全涉水,其问题在于周围若无参照车辆,则无法预测周围水深。综合以上各专利,均存在对前方水深作有效测量的问题,如周围无参照车辆,仪器测量精度要求高。
双目测距是测量距离的方法之一,这种方法基于视差原理并利用成像设备从不同的位置获取被测物体的两幅图像,通过计算图像对应点间的位置偏差,来获取物体三维几何信息。本发明借助激光高亮度、高聚光和高穿透性特点,并采用双目拍摄水面以下地面激光反射光点测距的方法,对车辆前方水深进行较准确的计算,并据此向司机提供合理的挡位、车速建议。此外,由于不同司机的操作熟练程度不同,对于不熟练的司机,现有方案实际的效果往往会大打折扣,因此,本发明还借助辅助驾驶,在必要时辅助司机完成相应的驾驶操作,避免因经验不足导致的驾驶失误。
发明内容
本发明设计开发了一种道路积水车载在线监测与驾驶辅助系统,本发明的发明目的是帮助解决车内驾驶员行车涉水时因没能准确估计前方道路积水深度而引发事故问题。
所述一种道路积水车载在线监测与驾驶辅助系统,包括:
输入模块,用于采集超声波雷达至水面的垂直距离、俯仰角和前方路况图像;
输出模块,用于向司机提供警示和驾驶建议或执行涉水辅助操作;
处理模块,即控制单元,用于接收所述输入模块提供的初始数据、计算前方水深,并发送控制指令至所述输出模块;
能源模块,即电源,用于提供电力。
所述输入模块包括:
摄像头一、摄像头二,位于风挡玻璃内侧上缘车内后视镜的背面,用于获取同一时刻、不同观测点的路况图像;
超声波雷达,用于检测超声波雷达至水面的垂直距离;
车身倾角传感器,用于检测车辆实时俯仰角度;
辅助涉水按键,用于给驾驶员提供希望系统辅助其安全通过涉水路面的输入接口。
所述输出模块包括:
激光发射器,位于所述摄像头一、所述摄像头二连线的中点位置,用于向前方路面投射一束特定频率的激光,从而在路面形成一个特定颜色的激光点,使得所述摄像头一和所述摄像头二能够对这一激光点所在附近同一路面拍摄获取两张路况图像;
扬声器,用于向司机播报涉水驾驶安全警示音;
显示屏,用于向司机提供驾驶建议提示信息;
车辆控制设备,用于在司机按下所述辅助涉水按键启用辅助驾驶功能且没有踩下汽车油门或刹车时,根据所述控制单元给出的建议实施控制车速及挡位。
所述控制单元的数据输入端分别与所述摄像头一、所述摄像头二、所述超声波雷达、所述车身倾角传感器和所述辅助涉水按键的信号输出端连接;所述控制单元的数据输出端分别与所述激光发射器、所述扬声器和所述显示屏的信号输入端连接。
所述控制单元与所述车辆控制设备经CAN通信线连接,进而控制车辆行驶。
本发明还设计开发了一种道路积水车载在线监测与驾驶辅助系统的控制方法,本方法的发明目的是帮助解决车内驾驶员行车涉水时因没能准确估计道路积水深度而引发事故问题。
所述一种道路积水车载在线监测与驾驶辅助系统的控制方法,包括如下步骤:
步骤一、采集所需信息,包括路况图像、汽车俯仰角、超声波雷达至水面的垂直距离;
步骤二、处理信息计算得到激光点处路面水深;
步骤三、根据水深信息进行判断并提供建议车速和建议挡位,由所述扬声器向司机播报涉水驾驶安全警示音,由所述显示屏向司机提供驾驶建议提示信息,或由所述车辆控制设备辅助驾驶员控制车辆匀速缓行通过积水路面。
所述摄像头一和所述摄像头二对包括所述激光点在内的同一路面同时拍摄获取的两张路况图像均为半径为ρmax的圆形照片一和照片二,照片一中激光点位置与照片中心点连线的长度为ρ1,该线段与水平线的夹角为θx1,照片二中激光点位置与照片中心点连线的长度为ρ2,该线段与水平线的夹角为θx2,规定水平线向右的方向为0度,θx1、θx2以逆时针为正方向,且大于-180度、小于等于180度;所述超声波雷达于拍摄时刻检测超声波雷达至水面的垂直距离h,所述车身倾角传感器于拍摄时刻检测汽车的俯仰角α,规定汽车上坡时俯仰角为负,下坡时俯仰角为正。
所述激光点处路面水深的计算过程为:
第一步计算,
Figure GDA0003741387210000041
Figure GDA0003741387210000042
其中,xB为激光点虚像相对于所述激光发射器的侧向距离,yB为激光点虚像相对于所述激光发射器在汽车向上的方向上的距离,θz1为激光点虚像在所述摄像头一中所占的视锥角度,a为相对于车辆中轴线对称布置的所述摄像头一、所述摄像头二距离的一半,θz1max为所述摄像头一可以拍摄到的最大视锥角度;
第二步计算,
Figure GDA0003741387210000043
Figure GDA0003741387210000051
Figure GDA0003741387210000052
其中,zB为激光点虚像相对于所述激光发射器在汽车前进方向上的距离,θ1为激光在水面的入射角,θ2为激光在水面的折射角,n21取水对于空气的折射率1.33,θ2取锐角;
第三步计算,
Figure GDA0003741387210000053
Figure GDA0003741387210000054
其中,aC为激光在水面的入射点相对于激光点实像的侧向距离,cC为激光在水面的入射点相对于激光点实像在水面纵向方向的距离,Δh含义为所述超声波雷达在汽车向上的方向上距离所述摄像头的距离,Δl含义为所述超声波雷达在汽车前进方向上与所述摄像头的距离;
最后计算得到,
Figure GDA0003741387210000055
其中,H为所述激光点处路面水深。
所述激光点处路面水深H与第一阈值、第二阈值相比较;
如果H≤所述第一阈值,所述的显示屏向司机提示“前方安全”,所述的扬声器不发声,车辆可安全通过;
如果所述第一阈值<H≤所述第二阈值,所述的显示屏、所述的扬声器向司机提示“有积水,请切换至最低挡位低速行驶”,所述的显示屏同时显示前方水深数据,规范驾驶后可安全通过;
如果H>所述第二阈值,所述的显示屏、所述的扬声器向司机提示“危险,禁止通行”,所述的显示屏同时显示前方水深数据,车辆无法安全通过。
所述的车辆控制设备是否执行辅助驾驶功能,由驾驶员是否按下所述的辅助涉水按键来决定;所述辅助驾驶功能为,判断前方水深大于所述第一阈值且不大于所述第二阈值时,控制汽车保持最低挡、低速缓行。
本发明至少具有以下有益效果:
1.本发明借助激光发射器和双目摄像方法,并结合超声波雷达测量方法,可以较准确地检测前方路面水深,为司机预留足够的反应时间,提供更加合理的驾驶建议,有效避免因没能准确估计前方道路积水深度而引发的事故。
2.本发明具备涉水辅助驾驶功能,可以对非熟练驾驶员提供有效的涉水驾驶辅助,防止司机因情绪紧张、经验不足等因素在控制车速及挡位时可能出现的操作失误而引发发动机进水故障,确保人员财产安全。
3.本发明具备语音警示和驾驶建议提示,可以对熟练驾驶员提供有效的驾驶建议辅助,配合驾驶员决策是否涉水通过或涉水渡过时确保安全。
4.本发明较多采用车辆已有设备,新增设备较少且成本低廉,对车辆原有系统改造升级的成本较低、布置方便、工作可靠性高。
附图说明
图1为本发明所述的道路积水车载在线监测与驾驶辅助系统在汽车上的布置位置图。
图2为本发明所述的道路积水车载在线监测与驾驶辅助系统的电路原理图。
图3为计算前方积水水深的各参考点的位置关系图。
图4为摄像头一所拍摄的照片一的近似图像。
图5为拍摄图像在参考坐标系x-y平面上的视图。
图6为摄像头一拍摄区域的立体示意图。
图7为本发明所述的道路积水车载在线监测与驾驶辅助方法软件主程序流程图。
图8为本发明所述的道路积水车载在线监测与驾驶辅助方法中信息收集子程序流程图。
图9为本发明所述的道路积水车载在线监测与驾驶辅助方法中建议提供子程序流程图。
图10为本发明所述的道路积水车载在线监测与驾驶辅助方法中辅助驾驶子程序流程图。
图11为道路积水车载在线监测与驾驶辅助系统组成及工作原理图。
主要部件标号说明:1.摄像头一,2.摄像头二,3.激光发射器,4.超声波雷达,5.车身倾角传感器,6.控制单元,7.扬声器,8.显示屏,9.车辆控制设备,10.电源,11.辅助涉水按键。
具体实施方式
下面结合附图对本发明做进一步的详细说明,以令本领域技术人员参照说明书文字能够据以实施。
如图1所示为道路积水车载在线监测与驾驶辅助系统在汽车上的布置位置图。本发明提供所述的一种道路积水车载在线监测与驾驶辅助系统共分为四大部分:
1.输入模块:
包括摄像头一1、摄像头二2、超声波雷达4、车身倾角传感器5、辅助涉水按键11。
两个摄像头1、2用于采集前方路面的图像,为避免雨水、积水等恶劣环境影响摄像头的工作可靠性,同时为摄像头提供较好的视野,故将摄像头1、2放置于风挡玻璃内侧上缘车内后视镜的背面,摄像头的拍摄方向与车头朝向一致。
超声波雷达4用于检测超声波雷达至水面的垂直距离,且不能在危险来临前被水淹没。超声波雷达4可以直接采用目前多数车辆已有的超声波雷达4,放置于保险杠上,也可以布置于汽车车外后视镜下侧。
车身倾角传感器5实时检测车体倾斜角度,安装在后排地板中央。
辅助涉水按键11是用于给驾驶员提供希望系统辅助其安全通过涉水路面的输入接口,其布置于驾驶室中控仪表台上,默认初始状态始终为不启动,即关闭系统辅助驾驶员涉水通行的功能。
2.处理模块:
包括控制单元6。控制单元6接收所述输入模块提供的初始数据,进行计算处理,并将计算结果和相关指令发送至输出设备。控制单元6安装在车内中控台内部,不影响其他设备进行正常工作;当然也可以在不具备该系统的车辆上通过后期加装,与输出模块的警示器件集成为一个整体装置粘贴固定在中控仪表台外表面上。
3.输出模块:
包括激光发射器3、警示器件扬声器7和显示屏8,以及车辆本身电气系统中的车辆控制设备9。
激光发射器3用于向路面投射一束特定频率的激光,从而在路面形成一个特定颜色的激光点,便于使摄像头一1、摄像头二2对这一反映路面实际位置的同一激光点同时获取两张图像。为使激光能顺利照射到前方路面、摄像头能采集到前方含有激光点的图像,应将激光发射器3与摄像头高度设置为同一高度,可以将激光发射器3放置于两摄像头的中间位置。激光发射器3朝向汽车前方,冲前发射,且与地面成一定交角,确保激光与路面形成交点,具体的角度应根据激光点的位置做出调整。激光点距离车身过远时,由于地面的起伏、水面对光线的削弱,实际效果会较差;激光点距离车身过近时,起不到预测的作用,作为实施例优选,这里选取5m的激光点距离,即应当调整激光发射器3的朝向直至激光点位于车前路面约5m处。
作为警示器件的扬声器7和显示屏8可以在汽车制造总装时嵌入汽车中控仪表上;也可以通过后市场加装,与处理模块作为一个整体装置粘贴固定在汽车中控仪表台外部,不影响驾驶员正常操作,并可以快捷地向驾驶员提供警示信息。
车辆控制设备9为车辆本身电气系统,放置于中控台内部,与本发明所述控制单元CAN通信连接。在司机按下所述辅助涉水按键11启用辅助驾驶功能,且没有踩下油门或刹车时车辆控制设备9根据控制单元6给出的控制指令自动控制汽车电子油门开度、电子液压制动主缸压力和自动变速器挡位,使车辆保持在合适的速度和挡位;在司机踩下油门或刹车时或再次按下辅助涉水按键11时,控制单元6停止控制车辆控制设备9对车辆进行控制干预,系统退出,此时车辆完全由驾驶员实施控制,以避免影响驾驶员操控车辆。
4.能源模块:
包括电源10,用于向上述所有用电设备提供电力,这里可以采用车载12V电源。
系统电路如图2所示,输入模块的摄像头一、摄像头二、车身倾角传感器以及超声波雷达的信号输出端与控制单元的数据输入端经数字信号线相连,并要求上述输入模块的信号获取在系统时钟的控制下实现同步操作,从而便于准确计算前方路面积水水深。控制单元的数据输出端与输出模块的激光发射器、显示屏和扬声器的输入端经数字信号线连接,激光发射器在系统时钟的控制下与输入模块的设备实现同步操作。控制单元的通信接口与输出模块的车辆控制设备经CAN通信线连接,从而实现对系统警示和辅助涉水功能的有效控制。输入模块,控制单元以及输出模块均由车载电源供电。各元件的Vcc端与电源Vcc端相连,各元件的GND端与电源GND端相连。
如图3所示为本发明计算前方积水水深的各参考点的位置关系图,具体计算原理描述如下:
图中设摄像头1所在位置为O1,摄像头2所在位置为O2,激光发射器所在位置为O(O位于O1O2中点),由于水面折射作用,激光发射器在路面上A点形成激光点,路面激光点经水折射后形成的虚像的位置为B,激光发射器发出的激光在水面折射位置为C,A点水深为AD,超声波雷达所在位置为E,检测距离为EF,超声波雷达距离地面的高度为EG。
计算的思路是:第一步,建立拍摄坐标系,确定虚像B在拍摄坐标系的位置;第二步,建立地面坐标系,确定虚像B、激光发射器O在地面坐标系的位置;第三步,依据折射定律,确定实像A在地面坐标系的位置,进而得到A点水深。
第一步,确定虚像B在拍摄坐标系的位置:
以O点为原点,车辆前进的方向为z方向,车辆右侧的方向为x方向,垂直于z、x方向向上的方向为y方向,建立拍摄坐标系。本部分的目标是求出B点在拍摄坐标系中的坐标(xB,yB,zB)。
如图4所示为摄像头一所拍摄的照片一的近似图像,其中O1为图像中心,图像半径为ρmax,B1为激光点在照片一中的位置,可提取出的信息为ρ1max和θx1,θx1逆时针方向为正,且θx1大于-180度、小于等于180度。同理,可由摄像头二所拍摄的照片二得到ρ2max和θx2
如图5所示为拍摄图像在坐标系在x-y平面上的视图,O1、O2分别为两摄像头中心,两摄像头相对于车辆中轴线对称布置,且距离已知,为2a。依据图像处理求出的θx1和θx2,可得O1B和O2B两直线方程为:
Figure GDA0003741387210000101
由此可求出点B在x、y方向的坐标:
Figure GDA0003741387210000102
如图6所示为摄像头一拍摄区域的立体示意图,锥形内的区域为摄像头拍摄到的区域,i方向为摄像头一的拍摄方向,该方向与汽车前进方向一致。θz1max为摄像头一可以拍摄到的最大视锥角度。B至i轴的距离为ρ1',B所在圆形面的半径为ρmax'。图中有这样的几何关系:
Figure GDA0003741387210000103
可得:
Figure GDA0003741387210000104
由于图6中的圆由图4中的圆等比例放大得到,因此
Figure GDA0003741387210000105
依据已经求出的ρ1max,可得
Figure GDA0003741387210000106
向量O1B可表示为(a+x0,y0,z0),取z轴方向向量(0,0,1),则
Figure GDA0003741387210000107
由此可求出点B在z方向上的坐标:
Figure GDA0003741387210000108
至此根据公式(2)和公式(7)可以得到点B的所有坐标。其几何意义为,路面上激光点成的虚像B在拍摄坐标系中的坐标值(xB,yB,zB)。
第二步,确定虚像B、激光发射器O在地面坐标系的位置:
以D点为原点,垂直于水平面向上的方向为b方向,垂直于b方向、与车辆前进方向一致的方向为c方向,垂直于b方向、与车辆右转方向一致的方向为a方向,建立地面坐标系。本部分的目标是求出B点在地面坐标系中的坐标(aB,bB,cB)和O点在地面坐标系中的坐标(aO,bO,cO)。
地面坐标系中的a方向与拍摄坐标系中的x方向一致,b方向与y方向的夹角、c方向与z方向的夹角都是汽车的俯仰角α。地面坐标系中,b=0的平面是水面。
因为布置已确定,故已知超声波雷达在y方向上比摄像头低Δh,即OE在y方向上的投影长为Δh;已知超声波雷达在z方向上比摄像头靠前Δl,即OE在z方向上的投影长为Δl;设超声波雷达至水面的垂直距离为h,即EF长为h;车身倾角传感器测得的俯仰角为α,这里规定汽车上坡时俯仰角为负,下坡时俯仰角为正。由此可得O至水面的距离为
hO=h+Δh·cosα+Δl·sinα (8)
根据已经求出的(xB,yB,zB),可得B至水面的距离为
hB=hO+yB·cosα-zB·sinα (9)
由此可得在地面坐标系中,B的坐标为
(aB,bB,cB)=(0,hB,0) (10)
依据hO,(aB,bB,cB)及(xB,yB,zB),可得O点在地面坐标系的坐标为
Figure GDA0003741387210000111
至此,由式(10)和式(11)我们得到了在地面坐标系中B、O的坐标值。
第三步,确定实像A在地面坐标系的位置:
本部分的计算都在地面坐标系进行。在光线OCA中,设入射角为θ1,出射角为θ2。则在地面坐标系中,向量AC与向量(0,1,0)的所夹的锐角为θ2。本部分的目标是求出A点在地面坐标系中的坐标为(0,bA,0)。
依据已经求出的B(aB,bB,cB)及O(aO,bO,cO),向量OB为(aB-aO,bB-bO,cB-cO),向量OB与向量(0,1,0)的所夹的锐角为θ1,因此
Figure GDA0003741387210000112
由折射定律,
Figure GDA0003741387210000121
Figure GDA0003741387210000122
式中,n21取水对于空气的折射率1.33,θ2取锐角。
直线OB与水平面b=0的交点即为C(aC,0,cC),在a-b平面上,直线OB为
Figure GDA0003741387210000123
代入bC=0,得
Figure GDA0003741387210000124
在b-c平面上,直线OB为
Figure GDA0003741387210000125
代入bC=0,得
Figure GDA0003741387210000126
依据所设的A(0,bA,0)及已经求出的C(aC,0,cC),向量AC为(aC,-bA,cC),向量AC与向量(0,1,0)的所夹的锐角为θ2,θ2已求出,因此
Figure GDA0003741387210000127
解得
Figure GDA0003741387210000128
由式(20)可得A在地面坐标系的坐标值(0,bA,0)。
依据地面坐标系的定义方法,|bA|即为A处水深AD。
至此,根据式(20)可以求出A处水深|bA|,该数值为距离车前
Figure GDA0003741387210000129
的路面处的水深。在本实施例中,由于激光发射器的位置调整至照射到车前5m左右,因此该数值可视为车前方5m处的水深数值。
以上过程可简化为:
Figure GDA0003741387210000131
Figure GDA0003741387210000132
Figure GDA0003741387210000133
Figure GDA0003741387210000134
Figure GDA0003741387210000135
Figure GDA0003741387210000136
Figure GDA0003741387210000137
Figure GDA0003741387210000138
H为激光点处路面的水深。
本发明所述的道路积水车载在线监测与驾驶辅助系统控制单元6中存储有能够完成汽车道路积水车载在线监测与驾驶辅助功能的软件,其软件主程序流程图如图7所示。软件流程步骤如下:数据初始化之后,控制单元产生时间触发信号,通过该信号使输入模块的设备和激光发射器实现同步工作。当时间触发信号产生时,调用信息收集子程序,控制单元接收到所需的信息后,控制单元根据公式(21)至公式(28)计算前方路面A点水深H,并以此为依据,调用建议提供子程序,向司机给出驾驶建议,当司机按下辅助涉水启用辅助驾驶功能时,调用辅助驾驶子程序,车辆控制设备将依据驾驶建议,在必要时辅助司机完成部分驾驶操作。若车辆不处于驾驶状态则停止工作,若车辆处于驾驶状态则重复上述过程直到车辆脱离驾驶状态。
如图8所示为本发明所述的道路积水车载在线监测与驾驶辅助方法中信息收集子程序,当输入模块的设备和激光发射器收到时间触发信号时,各设备开始同步工作。激光发射器向前方路面约5米处的位置发射特定频率的激光,使前方路面约5米处产生特定颜色的激光点;摄像头一、摄像头二同时拍摄前方路面照片,得到两张含有激光点的照片,并提取图像信息,摄像头一返回θx1和ρ1max数据,摄像头二返回θx2和ρ2max数据;车身倾角传感器测量车身俯仰角,返回车身俯仰角α;超声波雷达测量超声波雷达至水面的垂直距离,返回该距离h。以上信息全部返回至控制单元后,之后信息收集子程序结束。
如图9所示为本发明所述的道路积水车载在线监测与驾驶辅助方法中建议提供子程序,对于前方不同类型的路面水深判定阈值会有不同,这里取二分之一保险杠高度及保险杠高度分别作为第一阈值和第二阈值。接收信息收集子程序得到前方水深H后判断,若水深H小于等于第一阈值,则前方可以安全通过,显示屏向司机提示“前方安全”,扬声器不发声;若水深H大于第一阈值二分之一保险杠高度但小于等于第二阈值保险杠高度,则表明前方有一定积水、但低挡位、低车速可安全通过,显示屏、扬声器向司机提示“有积水,请切换至最低挡位低速行驶”,显示屏同时显示前方水深数据;若水深H大于第二阈值,即大于保险杠高度,则判断前方水深危险,有发动机进水危险,故禁止通行,此时显示屏、扬声器向司机提示“危险,禁止通行”,显示屏同时显示前方水深数据。
如图10所示为本发明所述的道路积水车载在线监测与驾驶辅助方法中辅助驾驶子程序,当前方无积水时,车辆控制设备不进行操作;当前方有积水时,若驾驶员正在踩踏油门或刹车,则车辆控制设备不进行操作,防止违背驾驶员意志;若驾驶员未踩踏油门或刹车,则车辆控制设备代替驾驶员控制汽车挡位与速度,当前方水深H不大于第二阈值时,即表明可以安全通过时,发送指令给车辆控制设备9控制汽车保持最低挡、匀速5km/h前进,方向仍由驾驶员控制,当检测前方积水太深危险时,汽车制动停车。期间如果驾驶员一旦任意踩踏制动踏板或加速踏板,辅助涉水功能则退出。
如图11所示为本发明所述的道路积水车载在线监测与驾驶辅助系统组成及工作原理图。其工作原理描述如下:
首先,输入模块的设备和激光发射器在控制单元的时间信号控制下同步工作,激光发射器向两前车轮前方约5米处的路面投射一个激光点,摄像头一、二从汽车的两个位置同时拍摄路面情况、得到两张含有激光点的图片并提取激光点的位置信息,超声波雷达于拍摄时刻检测超声波雷达至水面的垂直距离,车身倾角传感器于拍摄时刻检测汽车的俯仰角度、获取车身姿势;辅助涉水按键实时获取驾驶员需求系统辅助涉水的需求指令。以上信息采集过程结束后,输入设备发送以上信息至控制单元,控制单元对这些信息进行计算、处理,得到激光点处路面的水深信息;最后,控制单元将处理结果发送给输出设备,扬声器向司机播报安全警示音,显示屏向司机显示提供提示界面,以提高司机驾驶的安全性和便捷性。当司机按下辅助涉水按键、启用辅助驾驶功能时,车辆控制设备将在必要时帮助司机控制车速及挡位。系统每通过一次上述流程,即可获得两前车轮前方车前方约5米处某点的水深信息并向司机提供相应的驾驶建议。由于电子设备的运行速度较快,因此可在足够短的时间内多次通过上述流程,使得前后所得的多组数据有较好的连续性,从而可以为司机不间断地提供驾驶建议直至安全通过积水路面。

Claims (4)

1.一种道路积水车载在线监测与驾驶辅助系统,其特征在于,包括:
摄像头一、摄像头二,位于风挡玻璃内侧上缘车内后视镜的背面,用于获取同一时刻、不同观测点的包含激光点的路况图像;
超声波雷达,用于检测超声波雷达至水面的垂直距离;
车身倾角传感器,用于检测车辆实时俯仰角度;
辅助涉水按键,用于给驾驶员提供希望系统辅助其安全通过涉水路面的输入接口;
激光发射器,位于所述摄像头一、所述摄像头二连线的中点位置,用于向前方路面投射一束特定频率的激光,从而在路面形成一个特定颜色的激光点,使得所述摄像头一和所述摄像头二能够对这一激光点所在附近同一路面拍摄获取两张路况图像;
扬声器,用于向司机播报涉水驾驶安全警示音;
显示屏,用于向司机提供驾驶建议提示信息;
车辆控制设备,用于在司机按下所述辅助涉水按键启用辅助驾驶功能且没有踩下汽车油门或刹车时,根据控制单元给出的建议实施控制车速及挡位;
电源,用于提供电力;
控制单元,其内部存储有一种道路积水车载在线监测与驾驶辅助方法,包括:
步骤一、采集所需信息,包括含有激光点的路况图像、汽车俯仰角、超声波雷达至水面的垂直距离;
步骤二、计算激光点虚像相对于摄像头的相对位置,进而计算激光点实像相对于水面的相对位置,得到激光点处路面水深;
步骤三、根据水深信息进行判断并提供建议车速和建议挡位,由所述扬声器向司机播报涉水驾驶安全警示音,由所述显示屏向司机提供驾驶建议提示信息,或由所述车辆控制设备辅助驾驶员控制车辆匀速缓行通过积水路面;
所述步骤一的具体流程为:所述摄像头一和所述摄像头二对包括所述激光点在内的同一路面同时拍摄获取的两张路况图像为半径为ρmax的圆形照片一和照片二,照片一中激光点位置与照片中心点连线的长度为ρ1,该连线与水平线的夹角为θx1,照片二中激光点位置与照片中心点连线的长度为ρ2,该连线与水平线的夹角为θx2,规定水平线向右的方向为0度,θx1、θx2以逆时针为正方向,且大于-180度、小于等于180度;所述超声波雷达于拍摄时刻检测超声波雷达至水面的垂直距离h,所述车身倾角传感器于拍摄时刻检测汽车的俯仰角α,规定汽车上坡时俯仰角为负,下坡时俯仰角为正;
所述步骤二的具体流程为:
第一步计算,
Figure FDA0003756922860000021
Figure FDA0003756922860000022
其中,xB为激光点虚像相对于所述激光发射器的侧向距离,yB为激光点虚像相对于所述激光发射器在汽车向上的方向上的距离,θz1为激光点虚像在所述摄像头一中所占的视锥角度,a为相对于车辆中轴线对称布置的所述摄像头一、所述摄像头二距离的一半,θz1max为所述摄像头一可以拍摄到的最大视锥角度;
第二步计算,
Figure FDA0003756922860000023
Figure FDA0003756922860000024
Figure FDA0003756922860000025
其中,zB为激光点虚像相对于所述激光发射器在汽车前进方向上的距离,θ1为激光在水面的入射角,θ2为激光在水面的折射角,n21取水对于空气的折射率1.33,θ2取锐角;
第三步计算,
Figure FDA0003756922860000026
Figure FDA0003756922860000027
其中,aC为激光在水面的入射点相对于激光点实像的侧向距离,cC为激光在水面的入射点相对于激光点实像在水面纵向方向的距离,Δh含义为所述超声波雷达在汽车向上的方向上距离所述摄像头的距离,Δl含义为所述超声波雷达在汽车前进方向上与所述摄像头的距离;
最后计算得到,
Figure FDA0003756922860000031
其中,H为所述激光点处路面水深。
2.根据权利要求1所述的一种道路积水车载在线监测与驾驶辅助系统,其特征在于,所述控制单元的数据输入端分别与所述摄像头一、所述摄像头二、所述超声波雷达、所述车身倾角传感器和所述辅助涉水按键的信号输出端连接,所述控制单元的数据输出端分别与所述激光发射器、所述扬声器和所述显示屏的信号输入端连接,所述控制单元与所述车辆控制设备经CAN通信线连接。
3.根据权利要求1所述的一种道路积水车载在线监测与驾驶辅助系统,其特征在于,所述激光点处路面水深与第一阈值、第二阈值相比较;
如果所述激光点处路面水深≤所述第一阈值,所述的显示屏向司机提示“前方安全”,所述的扬声器不发声,车辆可安全通过;
如果所述第一阈值<所述激光点处路面水深≤所述第二阈值,所述的显示屏、所述的扬声器向司机提示“有积水,请切换至最低挡位低速行驶”,所述的显示屏同时显示前方水深数据,规范驾驶后可安全通过;
如果所述激光点处路面水深>所述第二阈值,所述的显示屏、所述的扬声器向司机提示“危险,禁止通行”,所述的显示屏同时显示前方水深数据,车辆无法安全通过。
4.根据权利要求3所述的一种道路积水车载在线监测与驾驶辅助系统,其特征在于,由驾驶员是否按下所述的辅助涉水按键,来决定所述的车辆控制设备是否执行辅助驾驶功能;所述辅助驾驶功能为,判断前方水深大于所述第一阈值且不大于所述第二阈值时,控制汽车保持最低挡、低速缓行。
CN202110281787.3A 2021-03-16 2021-03-16 一种道路积水车载在线监测与驾驶辅助系统及方法 Active CN112937486B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110281787.3A CN112937486B (zh) 2021-03-16 2021-03-16 一种道路积水车载在线监测与驾驶辅助系统及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110281787.3A CN112937486B (zh) 2021-03-16 2021-03-16 一种道路积水车载在线监测与驾驶辅助系统及方法

Publications (2)

Publication Number Publication Date
CN112937486A CN112937486A (zh) 2021-06-11
CN112937486B true CN112937486B (zh) 2022-09-02

Family

ID=76230146

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110281787.3A Active CN112937486B (zh) 2021-03-16 2021-03-16 一种道路积水车载在线监测与驾驶辅助系统及方法

Country Status (1)

Country Link
CN (1) CN112937486B (zh)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113879311A (zh) * 2021-09-22 2022-01-04 江西昌河汽车有限责任公司 一种汽车涉水预警装置及其控制方法
CN113859261B (zh) * 2021-09-24 2023-09-15 中国第一汽车股份有限公司 一种涉水模式的信息提示方法、装置、介质及设备
CN114034357A (zh) * 2021-11-08 2022-02-11 上海洛轲智能科技有限公司 一种积水深度检测方法、装置及存储介质
CN114475583A (zh) * 2022-01-13 2022-05-13 北京汽车股份有限公司 一种汽车涉水主动安全的控制系统、控制方法及汽车
CN114419901B (zh) * 2022-01-27 2023-04-28 中国第一汽车股份有限公司 一种积水预警方法、装置、电子设备和存储介质
CN114320075A (zh) * 2022-01-27 2022-04-12 重庆长安汽车股份有限公司 一种自动关闭车窗系统及方法
CN114578371B (zh) * 2022-03-03 2023-04-25 吉林大学 一种汽车前方路面水深探测系统和方法

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09223227A (ja) * 1996-02-15 1997-08-26 Honda Motor Co Ltd 車両用環境認識装置
CN101251379A (zh) * 2008-02-19 2008-08-27 哈尔滨工程大学 一种面向水下运载器的实时双目视觉导引方法
JP2010247829A (ja) * 2010-04-19 2010-11-04 Fujitsu Ten Ltd 車両の運転支援装置
CN108422901A (zh) * 2018-05-10 2018-08-21 吉林大学 一种基于整车综合性能最优的电动轮驱动车辆车轮转矩多目标优化方法
CN110312639A (zh) * 2018-09-26 2019-10-08 深圳市大疆创新科技有限公司 车辆辅助驾驶装置、车辆以及信息处理方法
CN111231833A (zh) * 2020-01-30 2020-06-05 华东交通大学 一种基于全息投影与ar结合的汽车辅助驾驶系统
CN111526332A (zh) * 2020-04-21 2020-08-11 协鑫能源工程有限公司 视频监控系统

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB0407047D0 (en) * 2004-03-29 2004-04-28 Nygaard Jens H S Passenger carrying road vehicle and a strengthening member for a passenger carrying road vehicle
US8126642B2 (en) * 2008-10-24 2012-02-28 Gray & Company, Inc. Control and systems for autonomously driven vehicles
EP2752348A1 (en) * 2013-01-04 2014-07-09 Continental Automotive Systems, Inc. Adaptive emergency brake and steer assist system based on driver focus
CN105741261B (zh) * 2014-12-11 2020-06-09 北京大唐高鸿数据网络技术有限公司 一种基于四摄像头的平面多目标定位方法
KR101714185B1 (ko) * 2015-08-05 2017-03-22 엘지전자 주식회사 차량 운전 보조장치 및 이를 포함하는 차량
CN107117120A (zh) * 2017-06-26 2017-09-01 聊城中通轻型客车有限公司 一种电动汽车用水面高度检测报警装置及控制方法
CN110053624B (zh) * 2018-01-18 2022-09-30 奥迪股份公司 驾驶辅助系统以及方法
US11046271B2 (en) * 2018-10-25 2021-06-29 Toyota Motor North America, Inc. Vehicle drowning sensing system
CN109823298B (zh) * 2018-12-19 2021-06-15 郑州中电新能源汽车有限公司 一种基于双目激光的车辆限高障碍预警系统及预警方法
CN109677323A (zh) * 2019-01-07 2019-04-26 安徽理工大学 一种燃油车涉水预警系统及方法
CN110136114B (zh) * 2019-05-15 2021-03-02 厦门理工学院 一种波面高度测量方法、终端设备及存储介质
CN110763189A (zh) * 2019-10-15 2020-02-07 哈尔滨工程大学 一种基于双目视觉的海浪高程测量实验装置和方法
CN111456876B (zh) * 2020-04-08 2024-04-02 吉林大学 一种汽车发动机智能怠速启停系统及其控制方法
CN111442817A (zh) * 2020-05-13 2020-07-24 浙江机电职业技术学院 非接触结构光双目视觉污水水位测量装置及方法

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09223227A (ja) * 1996-02-15 1997-08-26 Honda Motor Co Ltd 車両用環境認識装置
CN101251379A (zh) * 2008-02-19 2008-08-27 哈尔滨工程大学 一种面向水下运载器的实时双目视觉导引方法
JP2010247829A (ja) * 2010-04-19 2010-11-04 Fujitsu Ten Ltd 車両の運転支援装置
CN108422901A (zh) * 2018-05-10 2018-08-21 吉林大学 一种基于整车综合性能最优的电动轮驱动车辆车轮转矩多目标优化方法
CN110312639A (zh) * 2018-09-26 2019-10-08 深圳市大疆创新科技有限公司 车辆辅助驾驶装置、车辆以及信息处理方法
CN111231833A (zh) * 2020-01-30 2020-06-05 华东交通大学 一种基于全息投影与ar结合的汽车辅助驾驶系统
CN111526332A (zh) * 2020-04-21 2020-08-11 协鑫能源工程有限公司 视频监控系统

Also Published As

Publication number Publication date
CN112937486A (zh) 2021-06-11

Similar Documents

Publication Publication Date Title
CN112937486B (zh) 一种道路积水车载在线监测与驾驶辅助系统及方法
CN110316182B (zh) 一种自动泊车系统及方法
EP2771657B1 (en) Wading apparatus and method
CN103298657B (zh) 用于当离开停车空间时辅助机动车辆驾驶员的方法和装置及机动车辆
US7920070B2 (en) Parking guidance device and method thereof
CN106324618B (zh) 实现基于激光雷达检测车道线系统的方法
CN103523013B (zh) 车道偏离警报装置
KR20080109871A (ko) 주차지원장치 및 주차지원방법
US20060244579A1 (en) Device and method for determining an orientation of a semitrailer or trailer
CN107284444B (zh) 驾驶协助装置及利用该装置的驾驶协助方法
CN101101333A (zh) 用于产生行进车辆的驾驶员辅助信息的设备和方法
CN103562692A (zh) 车辆的车体底部安装的传感器和控制系统
CN101910866A (zh) 用于显示车辆环境的方法和装置
CN109677266B (zh) 用于车辆的涉水状态显示方法
CN109388137A (zh) 驾驶辅助设备和存储介质
CN115320584A (zh) 考虑障碍物预警的车辆远程驾驶辅助方法及远程驾驶系统
CN105539404A (zh) 一种用于泊车的目标检测预警及辅助制动系统
CN104228683A (zh) 用于运行调车和/或泊车用的驾驶员辅助系统的方法
CN110843786A (zh) 用于确定和显示涉水状况的方法和系统及具有该系统的车辆
CN202593376U (zh) 车辆可通过性预判断及辅助系统
CN110053624B (zh) 驾驶辅助系统以及方法
CN113126294B (zh) 一种多层次成像系统
CN116704774A (zh) 基于无人机的车辆超车方法、装置、车辆和存储介质
CN115829387A (zh) 一种驾驶能力评估方法、装置及电子设备
CN112590785B (zh) 一种车辆的刹停方法和系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant