CN113183758A - 一种基于增强现实的辅助驾驶方法及系统 - Google Patents
一种基于增强现实的辅助驾驶方法及系统 Download PDFInfo
- Publication number
- CN113183758A CN113183758A CN202110467406.0A CN202110467406A CN113183758A CN 113183758 A CN113183758 A CN 113183758A CN 202110467406 A CN202110467406 A CN 202110467406A CN 113183758 A CN113183758 A CN 113183758A
- Authority
- CN
- China
- Prior art keywords
- information
- vehicle
- early warning
- driving
- current
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 47
- 230000003190 augmentative effect Effects 0.000 title claims abstract description 12
- 230000008569 process Effects 0.000 claims description 29
- 238000004458 analytical method Methods 0.000 claims description 28
- 238000012545 processing Methods 0.000 claims description 10
- 230000033228 biological regulation Effects 0.000 claims description 9
- 239000002826 coolant Substances 0.000 claims description 7
- 230000008859 change Effects 0.000 claims description 3
- 238000004891 communication Methods 0.000 abstract description 6
- 206010039203 Road traffic accident Diseases 0.000 abstract description 2
- 230000000694 effects Effects 0.000 abstract 1
- 238000005516 engineering process Methods 0.000 description 8
- 238000007405 data analysis Methods 0.000 description 7
- 238000001514 detection method Methods 0.000 description 3
- 239000012141 concentrate Substances 0.000 description 2
- 230000007246 mechanism Effects 0.000 description 2
- 238000013528 artificial neural network Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 230000002708 enhancing effect Effects 0.000 description 1
- 239000000446 fuel Substances 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 230000006698 induction Effects 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 230000001953 sensory effect Effects 0.000 description 1
- 238000012800 visualization Methods 0.000 description 1
Images
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
- B60W50/08—Interaction between the driver and the control system
- B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/014—Head-up displays characterised by optical features comprising information/image processing systems
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/0141—Head-up displays characterised by optical features characterised by the informative content of the display
Landscapes
- Engineering & Computer Science (AREA)
- Transportation (AREA)
- Mechanical Engineering (AREA)
- Automation & Control Theory (AREA)
- Physics & Mathematics (AREA)
- Chemical & Material Sciences (AREA)
- Combustion & Propulsion (AREA)
- Human Computer Interaction (AREA)
- General Physics & Mathematics (AREA)
- Optics & Photonics (AREA)
- Traffic Control Systems (AREA)
Abstract
本发明提供了一种基于增强现实的辅助驾驶方法及系统,通过V2X通信网络获取车辆与车辆V2V(Vehicle‑to‑Vehicle)、车辆与固定设施V2I(Vehicle‑to‑Infrastructure)、车辆与行人V2P(Vehicle‑to‑Pedestrian)、车辆与外部网络V2N(Vehicle‑to‑Network)等信息,结合车载上的图像设备,定位设备,雷达设备提取出各种路况信息,通过抬头显示器把车速、档位、限速导航、路面虚拟导航、偏离提醒、危险提醒等信息,多媒体和设置层面,如,音乐、通话、列表项等显示出来,给与驾驶人员提示,减少低头看车载其他设备的动作,启到辅助驾驶的作用,可以有效减少交通事故发生,提升驾驶体验。
Description
技术领域
本发明涉及汽车辅助驾驶技术领域,尤其涉及一种基于增强现实的辅助驾驶方法及系统。
背景技术
目前广泛使用的车载驾驶辅助装置,如:手机导航,车载导航,都是通过声音或图像向驾驶员表达导航信息、车辆限速信息、监控头位置信息,启到辅助驾驶的作用。遇到道路环境复杂的时候,还需要驾驶员低头看信息,也为驾驶增加了一些危险因素。对于驾驶信息的显示,现有技术通常采用固定的屏幕,有的用声音推送信息给驾驶者,当信息发布出来时,驾驶人员要关注多方信息,无法做到眼睛随时都注视路面,在快速行驶或者路况复杂的道路行驶容易产生事故。部分汽车不能感知到外界信息,在行驶过程中全靠驾驶人员的判断,驾驶人员应对复杂环境或者车速较快时,部分信息的确实可能在一瞬间产生一次事故。
发明内容
为了克服上述技术缺陷,本发明的目的在于提供一种能感知外界信息且能实时显示的不干扰驾驶员驾驶的辅助驾驶方法及系统。
本发明公开了一种基于增强现实的辅助驾驶方法,车辆行驶过程中,包括:获取本车辆的当前配置信息,所述配置信息包括油量、电量、温度、发动机转速、冷却液信息;获取本车辆和第一预设距离内的其他车辆的行驶信息;所述行驶信息包括行驶速度、当前行驶车道和其他车辆距本车辆的当前距离;获取第二预设距离内的固定设施信息;所述固定设施信息包括固定设施距本车辆的当前距离;获取第三预设距离内的行人信息;所述行人信息包括行人的移动速度和行人距本车辆的当前距离;通过网络获取驾驶环境信息;所述驾驶环境信息包括当前行驶路段的行驶规定、实时天气、实时路况拥堵信息;将所述行驶信息、所述固定设施信息、所述行人信息进行分析,形成展示信息,所述展示信息包括基础信息、预警信息和建议信息;将所述展示信息传输至车载抬头显示器进行图像处理后再进行显示。
优选的,所述获取本车辆和第一预设距离内的其他车辆的行驶信息包括:采集第一预设距离内的第一图像,通过图像识别过程以识别所述第一图像中的其他车辆,并识别该其他车辆的当前行驶车道;通过雷达信号获取该其他车辆距本车辆的当前距离和行驶速度。
优选的,所述固定设施包括交通信号灯、隧道、桥梁、大楼、公交站、电线杆;所述获取第二预设距离内的固定设施信息包括:采集第二预设距离内的第二图像,通过图像识别过程以识别所述第二图像中的所述固定设施;通过雷达信号获取该固定设施距本车辆的当前距离;当固定设施为交通信号灯时,还通过图像识别过程判断所述交通信号灯的指示信号。
优选的,所述获取第三预设距离内的行人信息包括:采集第三预设距离内的第三图像,通过图像识别过程以识别所述第三图像中的行人;通过雷达信号或行人所佩戴的电子设备反馈信号获取行人距本车辆的当前距离和移动速度。
优选的,所述预警信息包括:碰撞预警、拥堵预警、闯红灯预警、特殊车道使用预警和车辆防护预警;所述将所述行驶信息、所述固定设施信息、所述行人信息进行分析,形成展示信息包括:结合所述本车辆和第一预设距离内的其他车辆的行驶速度、当前行驶车道和其他车辆距本车辆的当前距离进行分析,以获取所述碰撞预警信息;结合所述本车辆的行驶速度、当前行驶车道和行人的数量、行人的移动速度和行人距本车辆的当前距离进行分析,以形成所述碰撞预警信息;结合所述本车辆的行驶速度、当前行驶车道和实时路况拥堵信息进行分析、以形成所述拥堵预警;结合所述交通信号灯的指示信号、本车辆的行驶速度、当前行驶车道进行分析、以形成所述闯红灯预警;结合所述当前行驶路段的行驶规定和本车辆的当前行驶车道进行分析、以形成所述特殊车道使用预警;对所述当前配置信息进行分析,以形成所述车辆防护预警。
优选的,所述建议信息包括:速度建议、变道建议、转弯建议、优先行驶建议和路线导航建议。
优选的,所述将所述展示信息传输至车载抬头显示器进行图像处理后再进行显示包括:将所述展示信息进行UI排版获取初始展示信息,将所述第一展示信息进行图像增强以获取终级展示信息,在车载抬头显示器显示所述终级展示信息。
本发明还公开了一种基于增强现实的辅助驾驶系统,其特征在于,包括依次连接的信息采集模块、信息分析模块和车载抬头显示器;
通过所述信息采集模块获取本车辆的当前配置信息、本车辆和第一预设距离内的其他车辆的行驶信息、第二预设距离内的固定设施信息和第三预设距离内的行人信息;通过网络获取驾驶环境信息;
所述配置信息包括油量、电量、温度、发动机转速、冷却液信息;所述行驶信息包括行驶速度、当前行驶车道和其他车辆距本车辆的当前距离;所述固定设施信息包括固定设施距本车辆的当前距离;所述行人信息包括行人的移动速度和行人距本车辆的当前距离;所述驾驶环境信息包括当前行驶路段的行驶规定、实时天气、实时路况拥堵信息;
通过所述信息分析模块对所述行驶信息、所述固定设施信息、所述行人信息进行分析,形成展示信息;所述展示信息包括基础信息、预警信息和建议信息;
所述信息分析模块包括基础信息展示单元、预警单元、智能建议单元,通过所述基础信息展示单元分析获取所述基础信息,通过所述预警单元分析获取所述预警信息,通过所述智能建议单元分析获取所述建议信息;所述展示信息传输至所述车载抬头显示器进行图像处理后再进行显示。
优选的,所述信息采集模块包括图像采集单元、雷达单元和传感器单元;
所述图像采集单元采集第一预设距离内的第一图像,通过图像识别过程以识别所述第一图像中的其他车辆,并识别该其他车辆的当前行驶车道;所述图像采集单元还采集第二预设距离内的第二图像,通过图像识别过程以识别所述第二图像中的所述固定设施;当固定设施为交通信号灯时,所述图像采集单元还通过图像识别过程判断所述交通信号灯的指示信号;所述图像采集单元还采集第三预设距离内的第三图像,通过图像识别过程以识别所述第三图像中的行人;
所述雷达单元获取其他车辆距本车辆的当前距离和行驶速度;所述雷达单元还获取固定设施距本车辆的当前距离;所述雷达单元还获取行人距本车辆的当前距离和移动速度;所述传感器单元获取本车辆的当前配置信息。
优选的,所述预警信息包括:碰撞预警、拥堵预警、闯红灯预警、特殊车道使用预警和车辆防护预警;所述预警单元结合所述本车辆和第一预设距离内的其他车辆的行驶速度、当前行驶车道和其他车辆距本车辆的当前距离进行分析,以获取所述碰撞预警信息;结合所述本车辆的行驶速度、当前行驶车道和行人的数量、行人的移动速度和行人距本车辆的当前距离进行分析,以形成所述碰撞预警信息;
所述预警单元结合所述本车辆的行驶速度、当前行驶车道和实时路况拥堵信息进行分析、以形成所述拥堵预警;
所述预警单元结合所述交通信号灯的指示信号、本车辆的行驶速度、当前行驶车道进行分析、以形成所述闯红灯预警;
所述预警单元结合所述当前行驶路段的行驶规定和本车辆的当前行驶车道进行分析、以形成所述特殊车道使用预警;
所述预警单元对所述当前配置信息进行分析,以形成所述车辆防护预警。
采用了上述技术方案后,与现有技术相比,具有以下有益效果:
1.本发明通过V2X通信网络获取车辆与车辆V2V(Vehicle-to-Vehicle)、车辆与固定设施V2I(Vehicle-to-Infrastructure)、车辆与行人V2P(Vehicle-to-Pedestrian)、车辆与外部网络V2N(Vehicle-to-Network)等信息,结合车载上的图像设备,定位设备,雷达设备提取出各种路况信息,通过抬头显示器把车速、档位、限速导航、路面虚拟导航、偏离提醒、危险提醒等信息,多媒体和设置层面,如,音乐、通话、列表项等显示出来,给与驾驶人员提示,减少低头看车载其他设备的动作,启到辅助驾驶的作用,可以有效减少交通事故发生,提升驾驶体验。
附图说明
图1为本发明提供的基于增强现实的辅助驾驶方法流程图;
图2为本发明提供的基于增强现实的辅助驾驶系统的原理结构框图。
具体实施方式
以下结合附图与具体实施例进一步阐述本发明的优点。
这里将详细地对示例性实施例进行说明,其示例表示在附图中。下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本公开相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本公开的一些方面相一致的装置和方法的例子。
在本公开使用的术语是仅仅出于描述特定实施例的目的,而非旨在限制本公开。在本公开和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式,除非上下文清楚地表示其他含义。还应当理解,本文中使用的术语“和/或”是指并包含一个或多个相关联的列出项目的任何或所有可能组合。
应当理解,尽管在本公开可能采用术语第一、第二、第三等来描述各种信息,但这些信息不应限于这些术语。这些术语仅用来将同一类型的信息彼此区分开。例如,在不脱离本公开范围的情况下,第一信息也可以被称为第二信息,类似地,第二信息也可以被称为第一信息。取决于语境,如在此所使用的词语“如果”可以被解释成为“在……时”或“当……时”或“响应于确定”。
在本发明的描述中,需要理解的是,术语“纵向”、“横向”、“上”、“下”、“前”、“后”、“左”、“右”、“竖直”、“水平”、“顶”、“底”“内”、“外”等指示的方位或位置关系为基于附图所示的方位或位置关系,仅是为了便于描述本发明和简化描述,而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作,因此不能理解为对本发明的限制。
在本发明的描述中,除非另有规定和限定,需要说明的是,术语“安装”、“相连”、“连接”应做广义理解,例如,可以是机械连接或电连接,也可以是两个元件内部的连通,可以是直接相连,也可以通过中间媒介间接相连,对于本领域的普通技术人员而言,可以根据具体情况理解上述术语的具体含义。
在后续的描述中,使用用于表示元件的诸如“模块”、“部件”或“单元”的后缀仅为了有利于本发明的说明,其本身并没有特定的意义。因此,“模块”与“部件”可以混合地使用。
参见附图1,本发明公开了一种基于增强现实的辅助驾驶方法,车辆行驶过程中,包括:
S1、获取本车辆的当前配置信息,配置信息包括油量、电量、温度、发动机转速、冷却液信息;
S201、获取本车辆和第一预设距离内的其他车辆的行驶信息;行驶信息包括行驶速度、当前行驶车道和其他车辆距本车辆的当前距离;
S202、获取第二预设距离内的固定设施信息;固定设施信息包括固定设施距本车辆的当前距离;
S201、获取第三预设距离内的行人信息;行人信息包括行人的移动速度和行人距本车辆的当前距离;
S201、通过网络获取驾驶环境信息;驾驶环境信息包括当前行驶路段的行驶规定、实时天气、实时路况拥堵信息;
S3、将行驶信息、固定设施信息、行人信息进行分析,形成展示信息,展示信息包括基础信息、预警信息和建议信息;
S4、将展示信息传输至车载抬头显示器进行图像处理后再进行显示。
V2X,意为vehicle to everything,即车对外界的信息交换。具体的,V2V(Vehicle-to-Vehicle)指车辆与车辆、V2I(Vehicle-to-Infrastructure)指车辆与固定设施、V2P(Vehicle-to-Pedestrian)指车辆与行人、V2N(Vehicle-to-Network)指车辆与外部网络。车联网通过整合全球定位系统(GPS)导航技术、车对车交流技术、无线通信及远程感应技术奠定了新的汽车技术发展方向,实现了手动驾驶和自动驾驶的兼容。
HUD指抬头显示器,又被叫做平行显示系统,是指以驾驶员为中心、盲操作、多功能仪表盘。
本发明通过联合获取本车的多媒体信息、行驶信息、一定距离内的外车的行驶信息、一定距离内的行人的信息、一定距离内的固定建筑物的信息,以全方位的获取本车及本车一定距离内的几乎所有能影响驾驶情况的信息,将上述信息通过进行归纳和分析最后展示在抬头显示器上,使得驾驶员在驾驶的过程中可以不低头看仪表盘、不前后转移视线就可获取驾驶信息及周边的信息,减少驾驶员的注意力分散,加强驾驶安全性,更为驾驶员带来更佳的驾驶体验。
较佳的,根据车辆仪表盘的数据获取本车辆的行驶信息。网络则是通过LTE网络提供给信息给驾驶员。
对于一种优选实施例,获取第一预设距离内的其他车辆的行驶信息可以通过图像识别来判断一定距离内是否存在其他车辆,具体的,通过摄像头采集第一预设距离内的第一图像,通过图像识别过程以识别第一图像中的其他车辆,并识别该其他车辆的当前行驶车道。
再进一步的通过雷达信号获取该其他车辆距本车辆的当前距离和行驶速度。距离通过雷达信号的传播速度和雷达信号的反馈时间来获取;行驶速度则通过获取一定时间段内该其他车辆的行驶距离获取。例如,若T1时刻检测到一其他车辆距本车辆的距离为S1,而T2时刻检测到该其他车辆距本车辆的距离为S2,已知本车辆在T1和T2时刻之间行驶的距离为S3,则该其他车辆的行驶速度v则为
通过及时获取其他车辆的行驶信息,车辆可以及时采取自治措施,例如制动减速,由此可以有效降低碰撞事故的风险。
较佳的,固定设施包括交通信号灯、隧道、桥梁、大楼、公交站、电线杆。对于一种优选实施例,获取第二预设距离内的固定设施信息也可以通过图像识别来判断一定距离内是否存在固定设施,具体的,采集第二预设距离内的第二图像,通过图像识别过程以识别第二图像中的固定设施。
再进一步的通过雷达信号获取该固定设施距本车辆的当前距离。距离获取手段和其他车辆的获取手段类似,此处不再赘述。驾驶员可根据相距的距离信息作出汽车继续行驶还是等待操作。
更佳的,当识别到固定设施为交通信号灯时,还通过图像识别过程判断交通信号灯的指示信号,即判断当前为红灯、绿灯还是黄灯,以给驾驶员更佳全面的信息。
较佳的,对于一种优选实施例,获取第三预设距离内的行人信息也可以通过图像识别来判断一定距离内是否存在行人,具体的,采集第三预设距离内的第三图像,通过图像识别过程以识别第三图像中的行人。
再进一步的通过雷达信号或行人所佩戴的电子设备反馈信号获取行人距本车辆的当前距离和移动速度。距离获取手段和其他车辆的获取手段类似,此处不再赘述。
另外本发明还提供了区别于雷达信号手段的行人信心获取方式,即通过手机,尤其是可穿戴设备,直接得到行人位置信息。
对于上述的图像处理过程,本发明提供一种优选实施例,即对采集的实景照片进行降噪和去模糊处理获取初级处理照片,将相邻两张初级处理照片采用SURF算法进行去重复处理获取终级处理照片,将终级处理照片输入包含通道注意力机制的神经网络进行检测识别,通过此方法获得的识别结果更加精确。
需要说明的是,上述的第一预设距离、第二预设距离和第三预设距离都根据信息的获取广度来设置,当距离越大,信息广度越大,但伴随的噪音更多,可能导致检测结果越不精确。
较佳的,预警信息包括:碰撞预警、拥堵预警、闯红灯预警、特殊车道使用预警和车辆防护预警。
具体的,结合本车辆和第一预设距离内的其他车辆的行驶速度、当前行驶车道和其他车辆距本车辆的当前距离进行分析。可选的,当当前车辆的车速大于同一车道上的其他车辆的车速时,则形成车辆碰撞预警信息。
结合本车辆的行驶速度、当前行驶车道和行人的数量、行人的移动速度和行人距本车辆的当前距离进行分析。可选的,当当前车辆的车速大于行人的移动速度,则形成行人碰撞预警信息。
结合本车辆的行驶速度、当前行驶车道和实时路况拥堵信息进行分析。可选的,当计算获取以当前速度在预设时间内会到达拥堵路段时,则形成拥堵预警。通过获取汽车外界信息来直接获取实时路况拥堵信息,也通过互联网获取比如高德、百度、高速公路运营公司等机构获取实时路况拥堵信息。
结合交通信号灯的指示信号、本车辆的行驶速度、当前行驶车道进行分析。可选的,当识别下一路口的信号灯为红灯,而当前速度将在红灯时间内到达路口时,则形成闯红灯预警。
结合当前行驶路段的行驶规定和本车辆的当前行驶车道进行分析,当分析初车辆位于专用通道时,则形成特殊车道使用预警。
对当前配置信息进行分析,配置信息包括汽车燃油量、电量、发动机转速、冷却液信息、制动系统等实时状态信息,当参数信息低于相应的阈值时,则形成车辆防护预警。
配置信息还包括多媒体信息,如音乐、通话等。
还可通过网络获取当前天气,当遇上雨天、雾天、冰雹天等不适宜驾驶的天气时,则生成天气影响预警。
需要说明的是,上述预警信息的分析获取方式都是其中一实施例,并不被限制于此,也可根据实际可获取的另外的信息和不同的计算分析方法来形成预警信号。通过预警信号实现对道路的行驶的掌握,做好前方行车的注意。
较佳的,建议信息包括:速度建议、变道建议、转弯建议、优先行驶建议和路线导航建议,让驾驶体验更加的流畅。
较佳的,抬头显示器获取展示信息后,将展示信息先进行UI排版获取个性化界面的初始展示信息,再将第一展示信息进行通过现实增强技术进行图像增强以获取终级展示信息,在车载抬头显示器显示终级展示信息,即将图像投影到车辆前挡风玻璃上,通过成像技术,让驾驶人员能平视看到车载驾驶辅助系统提供的信息,方便驾驶人员获取信息,专注于驾驶。该终级展示信息符合驾驶者的感官需求,实现不干扰视线的目的。
参见附图2,本发明还公开了一种基于增强现实的辅助驾驶系统,其特征在于,包括依次连接的信息采集模块、信息分析模块和车载抬头显示器;
通过信息采集模块获取本车辆的当前配置信息、本车辆和第一预设距离内的其他车辆的行驶信息、第二预设距离内的固定设施信息和第三预设距离内的行人信息;通过网络获取驾驶环境信息;
配置信息包括油量、电量、温度、发动机转速、冷却液信息;行驶信息包括行驶速度、当前行驶车道和其他车辆距本车辆的当前距离;固定设施信息包括固定设施距本车辆的当前距离;行人信息包括行人的移动速度和行人距本车辆的当前距离;驾驶环境信息包括当前行驶路段的行驶规定、实时天气、实时路况拥堵信息;
通过信息分析模块对行驶信息、固定设施信息、行人信息进行分析,形成展示信息;展示信息包括基础信息、预警信息和建议信息;
信息分析模块包括基础信息展示单元、预警单元、智能建议单元,通过基础信息展示单元分析获取基础信息,通过预警单元分析获取预警信息,通过智能建议单元分析获取建议信息;展示信息传输至车载抬头显示器进行图像处理后再进行显示。
还进一步包括导航单元和路况分析单元,通过导航单元生成驾驶路线导航信息,具体的,输入目的地后,获取车辆定位信息,通过网络获取到道路状况信息,采用AI技术,对行车路径进行智能规划,绕开拥堵区域,实现快捷到达。通过路况分析单元生成实时的驾驶路线路况信息。
还进一步包括数据分析单元,与信息采集模块连接,分析从V2X通信端口获取的数据,也对通过内部接口对车载设备的数据进行分析,完成图像识别,语音识别,雷达数据分析,传感器数据分析,然后对数据归纳分类,并提供给车载驾驶辅助系统使用。
较佳的,信息采集模块包括图像采集单元、雷达单元和传感器单元。
图像采集单元采集第一预设距离内的第一图像,通过数据分析单元的图像识别过程以识别第一图像中的其他车辆,并识别该其他车辆的当前行驶车道;图像采集单元还采集第二预设距离内的第二图像,通过数据分析单元的图像识别过程以识别第二图像中的固定设施;当固定设施为交通信号灯时,图像采集单元还通过数据分析单元的图像识别过程判断交通信号灯的指示信号;图像采集单元还采集第三预设距离内的第三图像,通过数据分析单元的图像识别过程以识别第三图像中的行人。
雷达单元获取其他车辆距本车辆的当前距离和行驶速度、固定设施距本车辆的当前距离、行人距本车辆的当前距离和移动速度。传感器单元获取本车辆的当前配置信息,如温度、车速、能见度,对环境探测后供驾驶员及车载辅助驾驶系统分析,为智能决策提供依据。
信息采集模块还进一步包括音频采集单元,用于采集行驶过程中的音频等信息,供智能辅助系统分析。
较佳的,预警信息包括:碰撞预警、拥堵预警、闯红灯预警、特殊车道使用预警和车辆防护预警;预警单元结合本车辆和第一预设距离内的其他车辆的行驶速度、当前行驶车道和其他车辆距本车辆的当前距离进行分析,以获取碰撞预警信息;结合本车辆的行驶速度、当前行驶车道和行人的数量、行人的移动速度和行人距本车辆的当前距离进行分析,以形成碰撞预警信息。
预警单元结合本车辆的行驶速度、当前行驶车道和实时路况拥堵信息进行分析、以形成拥堵预警;预警单元结合交通信号灯的指示信号、本车辆的行驶速度、当前行驶车道进行分析、以形成闯红灯预警;预警单元结合当前行驶路段的行驶规定和本车辆的当前行驶车道进行分析、以形成特殊车道使用预警;预警单元对当前配置信息进行分析,以形成车辆防护预警。
本发明通过信息的可视化,减少驾驶员的低头看其他设备的时间,让驾驶员更加的专注,得到的数据更多,提升驾驶体验。
应当注意的是,本发明的实施例有较佳的实施性,且并非对本发明作任何形式的限制,任何熟悉该领域的技术人员可能利用上述揭示的技术内容变更或修饰为等同的有效实施例,但凡未脱离本发明技术方案的内容,依据本发明的技术实质对以上实施例所作的任何修改或等同变化及修饰,均仍属于本发明技术方案的范围内。
Claims (10)
1.一种基于增强现实的辅助驾驶方法,其特征在于,车辆行驶过程中,包括:
获取本车辆的当前配置信息,所述配置信息包括油量、电量、温度、发动机转速、冷却液信息;
获取本车辆和第一预设距离内的其他车辆的行驶信息;所述行驶信息包括行驶速度、当前行驶车道和其他车辆距本车辆的当前距离;
获取第二预设距离内的固定设施信息;所述固定设施信息包括固定设施距本车辆的当前距离;
获取第三预设距离内的行人信息;所述行人信息包括行人的移动速度和行人距本车辆的当前距离;
通过网络获取驾驶环境信息;所述驾驶环境信息包括当前行驶路段的行驶规定、实时天气、实时路况拥堵信息;
将所述行驶信息、所述固定设施信息、所述行人信息进行分析,形成展示信息,所述展示信息包括基础信息、预警信息和建议信息;
将所述展示信息传输至车载抬头显示器进行图像处理后再进行显示。
2.根据权利要求1所述的辅助驾驶方法,其特征在于,所述获取本车辆和第一预设距离内的其他车辆的行驶信息包括:
采集第一预设距离内的第一图像,通过图像识别过程以识别所述第一图像中的其他车辆,并识别该其他车辆的当前行驶车道;
通过雷达信号获取该其他车辆距本车辆的当前距离和行驶速度。
3.根据权利要求1所述的辅助驾驶方法,其特征在于,所述固定设施包括交通信号灯、隧道、桥梁、大楼、公交站、电线杆;所述获取第二预设距离内的固定设施信息包括:
采集第二预设距离内的第二图像,通过图像识别过程以识别所述第二图像中的所述固定设施;
通过雷达信号获取该固定设施距本车辆的当前距离;
当固定设施为交通信号灯时,还通过图像识别过程判断所述交通信号灯的指示信号。
4.根据权利要求1所述的,其特征在于,所述获取第三预设距离内的行人信息包括:
采集第三预设距离内的第三图像,通过图像识别过程以识别所述第三图像中的行人;
通过雷达信号或行人所佩戴的电子设备反馈信号获取行人距本车辆的当前距离和移动速度。
5.根据权利要求1所述的辅助驾驶方法,其特征在于,所述预警信息包括:碰撞预警、拥堵预警、闯红灯预警、特殊车道使用预警和车辆防护预警;
所述将所述行驶信息、所述固定设施信息、所述行人信息进行分析,形成展示信息包括:
结合所述本车辆和第一预设距离内的其他车辆的行驶速度、当前行驶车道和其他车辆距本车辆的当前距离进行分析,以获取所述碰撞预警信息;结合所述本车辆的行驶速度、当前行驶车道和行人的数量、行人的移动速度和行人距本车辆的当前距离进行分析,以形成所述碰撞预警信息;
结合所述本车辆的行驶速度、当前行驶车道和实时路况拥堵信息进行分析、以形成所述拥堵预警;
结合所述交通信号灯的指示信号、本车辆的行驶速度、当前行驶车道进行分析、以形成所述闯红灯预警;
结合所述当前行驶路段的行驶规定和本车辆的当前行驶车道进行分析、以形成所述特殊车道使用预警;
对所述当前配置信息进行分析,以形成所述车辆防护预警。
6.根据权利要求1所述的,其特征在于,所述建议信息包括:速度建议、变道建议、转弯建议、优先行驶建议和路线导航建议。
7.根据权利要求1所述的,其特征在于,所述将所述展示信息传输至车载抬头显示器进行图像处理后再进行显示包括:
将所述展示信息进行UI排版获取初始展示信息,将所述第一展示信息进行图像增强以获取终级展示信息,在车载抬头显示器显示所述终级展示信息。
8.一种基于增强现实的辅助驾驶系统,其特征在于,包括依次连接的信息采集模块、信息分析模块和车载抬头显示器;
通过所述信息采集模块获取本车辆的当前配置信息、本车辆和第一预设距离内的其他车辆的行驶信息、第二预设距离内的固定设施信息和第三预设距离内的行人信息;通过网络获取驾驶环境信息;
所述配置信息包括油量、电量、温度、发动机转速、冷却液信息;所述行驶信息包括行驶速度、当前行驶车道和其他车辆距本车辆的当前距离;所述固定设施信息包括固定设施距本车辆的当前距离;所述行人信息包括行人的移动速度和行人距本车辆的当前距离;所述驾驶环境信息包括当前行驶路段的行驶规定、实时天气、实时路况拥堵信息;
通过所述信息分析模块对所述行驶信息、所述固定设施信息、所述行人信息进行分析,形成展示信息;所述展示信息包括基础信息、预警信息和建议信息;所述信息分析模块包括基础信息展示单元、预警单元、智能建议单元,通过所述基础信息展示单元分析获取所述基础信息,通过所述预警单元分析获取所述预警信息,通过所述智能建议单元分析获取所述建议信息;
所述展示信息传输至所述车载抬头显示器进行图像处理后再进行显示。
9.根据权利要求8所述的辅助驾驶系统,其特征在于,所述信息采集模块包括图像采集单元、雷达单元和传感器单元;
所述图像采集单元采集第一预设距离内的第一图像,通过图像识别过程以识别所述第一图像中的其他车辆,并识别该其他车辆的当前行驶车道;所述图像采集单元还采集第二预设距离内的第二图像,通过图像识别过程以识别所述第二图像中的所述固定设施;当固定设施为交通信号灯时,所述图像采集单元还通过图像识别过程判断所述交通信号灯的指示信号;所述图像采集单元还采集第三预设距离内的第三图像,通过图像识别过程以识别所述第三图像中的行人;
所述雷达单元获取其他车辆距本车辆的当前距离和行驶速度;所述雷达单元还获取固定设施距本车辆的当前距离;所述雷达单元还获取行人距本车辆的当前距离和移动速度;
所述传感器单元获取本车辆的当前配置信息。
10.根据权利要求8所述的辅助驾驶系统,其特征在于,所述预警信息包括:碰撞预警、拥堵预警、闯红灯预警、特殊车道使用预警和车辆防护预警;
所述预警单元结合所述本车辆和第一预设距离内的其他车辆的行驶速度、当前行驶车道和其他车辆距本车辆的当前距离进行分析,以获取所述碰撞预警信息;结合所述本车辆的行驶速度、当前行驶车道和行人的数量、行人的移动速度和行人距本车辆的当前距离进行分析,以形成所述碰撞预警信息;
所述预警单元结合所述本车辆的行驶速度、当前行驶车道和实时路况拥堵信息进行分析、以形成所述拥堵预警;
所述预警单元结合所述交通信号灯的指示信号、本车辆的行驶速度、当前行驶车道进行分析、以形成所述闯红灯预警;
所述预警单元结合所述当前行驶路段的行驶规定和本车辆的当前行驶车道进行分析、以形成所述特殊车道使用预警;
所述预警单元对所述当前配置信息进行分析,以形成所述车辆防护预警。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110467406.0A CN113183758A (zh) | 2021-04-28 | 2021-04-28 | 一种基于增强现实的辅助驾驶方法及系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110467406.0A CN113183758A (zh) | 2021-04-28 | 2021-04-28 | 一种基于增强现实的辅助驾驶方法及系统 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN113183758A true CN113183758A (zh) | 2021-07-30 |
Family
ID=76980326
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110467406.0A Pending CN113183758A (zh) | 2021-04-28 | 2021-04-28 | 一种基于增强现实的辅助驾驶方法及系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113183758A (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115134539A (zh) * | 2022-08-29 | 2022-09-30 | 深圳比特微电子科技有限公司 | 行车指引方法、装置及可读存储介质 |
CN115220227A (zh) * | 2022-04-18 | 2022-10-21 | 长城汽车股份有限公司 | 一种增强现实抬头显示方法、装置及终端设备 |
CN116572837A (zh) * | 2023-04-27 | 2023-08-11 | 江苏泽景汽车电子股份有限公司 | 一种信息显示控制方法及装置、电子设备、存储介质 |
Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105620489A (zh) * | 2015-12-23 | 2016-06-01 | 深圳佑驾创新科技有限公司 | 驾驶辅助系统及车辆实时预警提醒方法 |
US20170253122A1 (en) * | 2016-03-07 | 2017-09-07 | Lg Electronics Inc. | Vehicle control device mounted in vehicle and control method thereof |
CN110619746A (zh) * | 2019-09-27 | 2019-12-27 | 山东浪潮人工智能研究院有限公司 | 一种基于c-v2x技术的智能hud平视显示方法 |
US20200010095A1 (en) * | 2019-08-30 | 2020-01-09 | Lg Electronics Inc. | Method and apparatus for monitoring driving condition of vehicle |
CN110775063A (zh) * | 2019-09-25 | 2020-02-11 | 华为技术有限公司 | 一种车载设备的信息显示方法、装置及车辆 |
CN111601279A (zh) * | 2020-05-14 | 2020-08-28 | 大陆投资(中国)有限公司 | 在车载显示器中显示动态交通态势的方法和车载系统 |
CN111707283A (zh) * | 2020-05-11 | 2020-09-25 | 宁波吉利汽车研究开发有限公司 | 一种基于增强现实技术的导航方法、装置、系统及设备 |
WO2021010517A1 (ko) * | 2019-07-16 | 2021-01-21 | 엘지전자 주식회사 | 차량용 전자 장치 및 그의 동작 방법 |
CN114374619A (zh) * | 2022-01-10 | 2022-04-19 | 昭通亮风台信息科技有限公司 | 车联网流量预测方法、系统、设备及存储介质 |
-
2021
- 2021-04-28 CN CN202110467406.0A patent/CN113183758A/zh active Pending
Patent Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105620489A (zh) * | 2015-12-23 | 2016-06-01 | 深圳佑驾创新科技有限公司 | 驾驶辅助系统及车辆实时预警提醒方法 |
US20170253122A1 (en) * | 2016-03-07 | 2017-09-07 | Lg Electronics Inc. | Vehicle control device mounted in vehicle and control method thereof |
WO2021010517A1 (ko) * | 2019-07-16 | 2021-01-21 | 엘지전자 주식회사 | 차량용 전자 장치 및 그의 동작 방법 |
US20200010095A1 (en) * | 2019-08-30 | 2020-01-09 | Lg Electronics Inc. | Method and apparatus for monitoring driving condition of vehicle |
CN110775063A (zh) * | 2019-09-25 | 2020-02-11 | 华为技术有限公司 | 一种车载设备的信息显示方法、装置及车辆 |
CN110619746A (zh) * | 2019-09-27 | 2019-12-27 | 山东浪潮人工智能研究院有限公司 | 一种基于c-v2x技术的智能hud平视显示方法 |
CN111707283A (zh) * | 2020-05-11 | 2020-09-25 | 宁波吉利汽车研究开发有限公司 | 一种基于增强现实技术的导航方法、装置、系统及设备 |
CN111601279A (zh) * | 2020-05-14 | 2020-08-28 | 大陆投资(中国)有限公司 | 在车载显示器中显示动态交通态势的方法和车载系统 |
CN114374619A (zh) * | 2022-01-10 | 2022-04-19 | 昭通亮风台信息科技有限公司 | 车联网流量预测方法、系统、设备及存储介质 |
Non-Patent Citations (1)
Title |
---|
李海舰等: "急刹预警作用下的车辆时空图特性", 《华南理工大学学报(自然科学版)》 * |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115220227A (zh) * | 2022-04-18 | 2022-10-21 | 长城汽车股份有限公司 | 一种增强现实抬头显示方法、装置及终端设备 |
CN115134539A (zh) * | 2022-08-29 | 2022-09-30 | 深圳比特微电子科技有限公司 | 行车指引方法、装置及可读存储介质 |
CN116572837A (zh) * | 2023-04-27 | 2023-08-11 | 江苏泽景汽车电子股份有限公司 | 一种信息显示控制方法及装置、电子设备、存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11767024B2 (en) | Augmented reality method and apparatus for driving assistance | |
CN111386701B (zh) | 图像处理装置和图像处理方法 | |
US10315664B2 (en) | Automatic driving assistance system, automatic driving assistance method, and computer program | |
US10071745B2 (en) | Automated drive assisting system, automated drive assisting method, and computer program | |
WO2018066711A1 (ja) | 走行支援装置及びコンピュータプログラム | |
US20220289228A1 (en) | Hmi control device, hmi control method, and hmi control program product | |
JP4882285B2 (ja) | 車両用走行支援装置 | |
CN113183758A (zh) | 一种基于增强现实的辅助驾驶方法及系统 | |
JP4752836B2 (ja) | 道路環境情報通知装置及び道路環境情報通知プログラム | |
US20240071012A1 (en) | Ar service platform for providing augmented reality service | |
JP2023010800A (ja) | 表示装置 | |
US20190244515A1 (en) | Augmented reality dsrc data visualization | |
JP4093026B2 (ja) | 道路環境情報通知装置、車載報知装置、情報センタ内装置、及び道路環境情報通知プログラム | |
CN105374221A (zh) | 交通信号灯状态提醒系统及提醒方法 | |
CN113544757B (zh) | 信息处理装置、信息处理方法,以及移动体装置 | |
US20230135641A1 (en) | Superimposed image display device | |
JP2018173862A (ja) | 走行支援装置及びコンピュータプログラム | |
KR102316654B1 (ko) | 운전 안내 장치 및 그 제어 방법 | |
US12008683B2 (en) | Vehicle augmented reality navigational image output device and control methods | |
CN111707283A (zh) | 一种基于增强现实技术的导航方法、装置、系统及设备 | |
CN112017438B (zh) | 一种行车决策生成方法及系统 | |
US11479264B2 (en) | Mobile entity interaction countdown and display | |
CN113165510B (zh) | 显示控制装置、方法和计算机程序 | |
US20230145472A1 (en) | Method for capturing image material for monitoring image-analysing systems, device and vehicle for use in the method and computer program | |
US11390215B2 (en) | Assistance system for a vehicle |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20210730 |
|
RJ01 | Rejection of invention patent application after publication |