CN106503676A - 基于ar增强现实和驾驶细节采集的驾驶辅助系统 - Google Patents

基于ar增强现实和驾驶细节采集的驾驶辅助系统 Download PDF

Info

Publication number
CN106503676A
CN106503676A CN201610962706.5A CN201610962706A CN106503676A CN 106503676 A CN106503676 A CN 106503676A CN 201610962706 A CN201610962706 A CN 201610962706A CN 106503676 A CN106503676 A CN 106503676A
Authority
CN
China
Prior art keywords
vehicle
driver
data
collection
anticipation data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201610962706.5A
Other languages
English (en)
Inventor
童培诚
段会锋
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
DALIAN WENSENTE SOFTWARE TECHNOLOGY Co Ltd
Original Assignee
DALIAN WENSENTE SOFTWARE TECHNOLOGY Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by DALIAN WENSENTE SOFTWARE TECHNOLOGY Co Ltd filed Critical DALIAN WENSENTE SOFTWARE TECHNOLOGY Co Ltd
Priority to CN201610962706.5A priority Critical patent/CN106503676A/zh
Publication of CN106503676A publication Critical patent/CN106503676A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/20—Scenes; Scene-specific elements in augmented reality scenes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Navigation (AREA)
  • Traffic Control Systems (AREA)
  • Control Of Driving Devices And Active Controlling Of Vehicle (AREA)

Abstract

本发明公开了一种基于AR增强现实和驾驶细节采集的驾驶辅助系统，包括：采集驾驶员动作细节的采集单元；根据所述采集部传输的动作细节数据，生成当前车辆I行驶的预判数据的处理单元；获取车辆I位置的定位单元；向外部发送所述的预判数据和车辆I位置信息的通信单元；周边车辆II的通信单元接收所述的预判数据和车辆位置信息，根据所述的车辆位置信息选取其阈值距离范围内的车辆的预判数据；根据所述的预判数据，控制本车的投影单元在车内特定位置投射所述阈值距离范围内预判数据对应的提示信息和对应车辆特征信息，给予当前驾驶者辅助。

Description

基于AR增强现实和驾驶细节采集的驾驶辅助系统
技术领域
本发明涉及一种驾驶辅助系统，尤其涉及一种能够基于驾驶细节采集和AR增强现实的驾驶辅助系统。
背景技术
一直以来，驾驶员对其它车辆的判断都是基于周边车辆的指示灯和驾驶员自身经验来确定，除去驾驶员的注意力和主观因素导致的判断失误导致安全隐患之外，周边车辆没有在动作之前给出相应的指示灯也是一个重要的安全隐患。
在我国的交通事故中，由不当并线造成的剐蹭等轻微事故占有绝大部分比例，单次事故的直接危害虽然较小，但是事故间接造成的拥堵却导致了很大的损失。
AR增强显示技术，能够在人眼的正常视野范围内，通过互联网技术，获得周边目标的信息，并将周边的目标的信息在显示在特定的显示界面上，增加特定范围内的人群交互。
显示界面在现阶段主要是眼镜一类的贴近使用者眼球的显示设备，另一类则手机的显示屏。随着车辆内部投影技术的发展，已经出现将车辆自身参数比如当前速度、档位等信息投影在车辆前风挡上的技术，如果将二者技术融合，将开辟AR技术的新的应用领域。
发明内容
本发明针对以上问题的提出，而研制的一种基于AR增强现实和驾驶细节采集的驾驶辅助系统，包括：
采集驾驶员动作细节的采集单元；
根据所述采集部传输的动作细节数据，生成当前车辆I行驶的预判数据的处理单元；
获取车辆I位置的定位单元；
向外部发送所述的预判数据和车辆I位置信息的通信单元；
周边车辆II的通信单元接收所述的预判数据和车辆位置信息，根据所述的车辆位置信息选取其阈值距离范围内的车辆的预判数据；
根据所述的预判数据，控制本车的投影单元在车内特定位置投射所述阈值距离范围内预判数据对应的提示信息和对应车辆特征信息，给予当前驾驶者辅助。
作为优选的实施方式，所述的采集单元至少包括：分别获取驾驶员眼睛位置变化的第1传感器模块、获取驾驶员右脚姿态的第2传感器模块以及获取驾驶员手臂姿态的第3传感器模块。
更进一步的，所述的第2传感器模块包括分别设置在油门踏板和刹车踏板垂线方向的对射开关I和对射开关II和设置在所述踏板的侧面的对射开关阵列，该阵列包括至少一列成直线排列的多个对射开关III；
工作时，当对射开关I或对射开关II被阻断时，判定驾驶员意图加速和刹车；
对射开关阵列通过检测阵列中对射开关III被阻断的个数和位置，判定驾驶员踩踏踏板的时机。
更进一步的，所述的第3传感器模块为设置在驾驶员上方顶棚的视频监控模块，该模块实时采集驾驶员两臂的视频图像传输至所述的处理单元；
处理单元判定视频图像中手臂的位置或一段时间内手臂位置变化达到设定位置时，给出当前驾驶员转向意图。
更进一步的，所述的第1传感器模块监测驾驶员眼动数据；
所述的处理单元根据该眼动数据，结合所述的转向意图和踩踏踏板的时机，判定当前驾驶员的真实意图，并得到所述车辆的预判数据。
更进一步的，所述的预判数据至少包括：周边车辆是否并线，并根据并线与否，设定多个反应并线紧急程度的等级；前车是否减速，并根据减速与否，设定多个减速紧急程度等级。
附图说明
为了更清楚的说明本发明的实施例或现有技术的技术方案，下面将对实施例或现有技术描述中所需要使用的附图做一简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本发明的系统模块图
具体实施方式
为使本发明的实施例的目的、技术方案和优点更加清楚，下面结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚完整的描述：
如图1所示：一种基于AR增强现实和驾驶细节采集的驾驶辅助系统，主要包括：用于采集驾驶员动作细节的采集单元，作为后续判断流程的动作细节数据。
根据所述采集部传输的动作细节数据，生成当前车辆I行驶的预判数据的处理单元。生成预判数据后，即可向周边车辆发送所述的预判数据，作为周边车辆判定当前车辆进一步动作的可靠依据。
相应的，车辆I上还设有获取当前位置的定位单元，以及向外部发送所述的预判数据和车辆I位置信息的通信单元。
其它车辆，尤其是周边车辆II的通信单元接收所述的预判数据和车辆位置信息，根据所述的车辆位置信息选取其阈值距离范围内的车辆的预判数据，由自身的处理单元，控制本车的投影单元在车内特定位置投射所述阈值距离范围内预判数据对应的提示信息和对应车辆特征信息，给予当前驾驶者辅助。
作为优选的实施方式，所述的预判数据至少包括：周边车辆是否并线，并根据并线与否，设定多个反应并线紧急程度的等级；前车是否减速，并根据减速与否，设定多个减速紧急程度等级。
在屏幕上可以在实体车辆的基础上，显示车辆的预判信息，比如通过虚拟的车辆框架图表示下一阶段的车辆位置，并通过箭头等标志物在车辆风挡或者侧方玻璃上表示车辆的行进方向。
为了能够精确的获知当前车辆的精确的预判数据，作为优选的实施方式，作为所述的采集单元至少包括：分别获取驾驶员眼睛位置变化的第1传感器模块、获取驾驶员右脚姿态的第2传感器模块以及获取驾驶员手臂姿态的第3传感器模块。
更进一步的，考虑到车辆踏板区域的光照条件较差，很难采用视频分析，来获知驾驶员右脚的位置，就很难获得驾驶员意图，成熟的驾驶员在决定踩下刹车之前通常会将右脚放置在刹车位置的上方(同样的，踩下油门区域)，这种情况，尤其在前方车辆动作无法直观判断时，驾驶员会提前采取类似动作，即可作为检测手段。
作为优选的实施方式，所述的第2传感器模块包括分别设置在油门踏板和刹车踏板垂线方向的对射开关I和对射开关II和设置在所述踏板的侧面的对射开关阵列，该阵列包括至少一列成直线排列的多个对射开关III；工作时，当对射开关I或对射开关II被阻断时，判定驾驶员意图加速和刹车；对射开关阵列通过检测阵列中对射开关III被阻断的个数和位置，判定驾驶员踩踏踏板的时机。
比如，当驾驶员的右脚位于刹车踏板上方时，所述的对射开关II被阻断，即发出信号，表明驾驶员意图踩下油门加速行驶，此时，所述的对射开关III继续监测，检测驾驶员右脚是否有踩下的趋势，同时作为可选的方案，油门踩下的幅度也作为车辆加速度的判定数据，输出至其它车辆的通信单元。
同样的，如果直接使用方向盘的转动数据作为车辆转向/并线的数据，往往会错失最佳的判断时机，导致无法给出其它车辆显示和反应时间。
故作为优选的实施方式，第3传感器模块为设置在驾驶员上方顶棚的视频监控模块，该模块实时采集驾驶员两臂的视频图像传输至所述的处理单元；处理单元判定视频图像中手臂的位置或一段时间内手臂位置变化达到设定位置时，给出当前驾驶员转向意图。
通常的，有些方向盘具有一定的旋转虚量，即在小角度转动方向盘时，转向传感器并不输出转向数据，而在虚量范围内，驾驶员通常会产生停顿，等待观察进一步路况(比如等侧方车辆通过时，再做出进一步动作)再实施具体的并线/转向动作。
另一种驾驶转向习惯也广泛存在驾驶员中，即正常直线行驶时，驾驶动作比较懒散，与即将并线的驾驶动作有着明显的区别，故通过采集驾驶员双臂的动作和位置，也可以作为判定，比如当左右臂处于方向盘两侧的3点和9点位置时，即可判定当前驾驶员即将完成转向动作，即可通过上述系统完成向周边车辆的通知。
考虑到，驾驶员在并线过程的最开始，首先需要通过眼睛观察目标车道/弯角位置，观察的同时会伴有转头动作，考虑到车内光影条件变化较大，采集头部的朝向变化较为困难，故为了进一步精确反应驾驶员的驾驶动作，作为优选的实施方式，系统还设有重点监控驾驶员眼部的第1传感器模块监测驾驶员眼动数据；
所述的处理单元根据该眼动数据，结合所述的转向意图和踩踏踏板的时机，判定当前驾驶员的真实意图，并得到所述车辆的预判数据。
以上所述，仅为本发明较佳的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，根据本发明的技术方案及其发明构思加以等同替换或改变，都应涵盖在本发明的保护范围之内。

Claims (6)

1.一种基于AR增强现实和驾驶细节采集的驾驶辅助系统，其特征在于包括：
采集驾驶员动作细节的采集单元；
根据所述采集部传输的动作细节数据，生成当前车辆I行驶的预判数据的处理单元；
获取车辆I位置的定位单元；
向外部发送所述的预判数据和车辆I位置信息的通信单元；
周边车辆II的通信单元接收所述的预判数据和车辆位置信息，根据所述的车辆位置信息选取其阈值距离范围内的车辆的预判数据；
根据所述的预判数据，控制本车的投影单元在车内特定位置投射所述阈值距离范围内预判数据对应的提示信息和对应车辆特征信息，给予当前驾驶者辅助。
2.根据权利要求1所述的基于AR增强现实和驾驶细节采集的驾驶辅助系统，其特征还在于所述的采集单元至少包括：分别获取驾驶员眼睛位置变化的第1传感器模块、获取驾驶员右脚姿态的第2传感器模块以及获取驾驶员手臂姿态的第3传感器模块。
3.根据权利要求2所述的基于AR增强现实和驾驶细节采集的驾驶辅助系统，其特征还在于：所述的第2传感器模块包括分别设置在油门踏板和刹车踏板垂线方向的对射开关I和对射开关II和设置在所述踏板的侧面的对射开关阵列，该阵列包括至少一列成直线排列的多个对射开关III；
工作时，当对射开关I或对射开关II被阻断时，判定驾驶员意图加速和刹车；
对射开关阵列通过检测阵列中对射开关III被阻断的个数和位置，判定驾驶员踩踏踏板的时机。
4.根据权利要求3所述的基于AR增强现实和驾驶细节采集的驾驶辅助系统，其特征还在于所述的第3传感器模块为设置在驾驶员上方顶棚的视频监控模块，该模块实时采集驾驶员两臂的视频图像传输至所述的处理单元；
处理单元判定视频图像中手臂的位置或一段时间内手臂位置变化达到设定位置时，给出当前驾驶员转向意图。
5.根据权利要求4所述的基于AR增强现实和驾驶细节采集的驾驶辅助系统，其特征还在于所述的第1传感器模块监测驾驶员眼动数据；
所述的处理单元根据该眼动数据，结合所述的转向意图和踩踏踏板的时机，判定当前驾驶员的真实意图，并得到所述车辆的预判数据。
6.根据权利要求1或5所述的基于AR增强现实和驾驶细节采集的驾驶辅助系统，其特征还在于所述的预判数据至少包括：
周边车辆是否并线，并根据并线与否，设定多个反应并线紧急程度的等级；
前车是否减速，并根据减速与否，设定多个减速紧急程度等级。
CN201610962706.5A 2016-11-04 2016-11-04 基于ar增强现实和驾驶细节采集的驾驶辅助系统 Pending CN106503676A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610962706.5A CN106503676A (zh) 2016-11-04 2016-11-04 基于ar增强现实和驾驶细节采集的驾驶辅助系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610962706.5A CN106503676A (zh) 2016-11-04 2016-11-04 基于ar增强现实和驾驶细节采集的驾驶辅助系统

Publications (1)

Publication Number Publication Date
CN106503676A true CN106503676A (zh) 2017-03-15

Family

ID=58322612

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610962706.5A Pending CN106503676A (zh) 2016-11-04 2016-11-04 基于ar增强现实和驾驶细节采集的驾驶辅助系统

Country Status (1)

Country Link
CN (1) CN106503676A (zh)

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101540090A (zh) * 2009-04-14 2009-09-23 华南理工大学 基于多元信息融合的驾驶员疲劳监测装置及其监测方法
CN101670815A (zh) * 2009-10-12 2010-03-17 常雪阳 汽车安全与节油操控辅助提示系统及辅助提示方法
CN101674965A (zh) * 2007-05-02 2010-03-17 丰田自动车株式会社 车辆行为控制装置
CN101876751A (zh) * 2009-04-02 2010-11-03 通用汽车环球科技运作公司 在全挡风玻璃平视显示器上的车辆间通讯装置
CN104049927A (zh) * 2013-03-13 2014-09-17 本田技研工业株式会社 用于左转安全提示的增强现实平视显示器（hud）
US20150012179A1 (en) * 2013-07-04 2015-01-08 Fuji Jukogyo Kabushiki Kaisha Driving assist controller for vehicle
CN104670091A (zh) * 2013-12-02 2015-06-03 现代摩比斯株式会社 利用投影单元的增强现实车道变更辅助系统
CN104952249A (zh) * 2015-06-10 2015-09-30 浙江吉利汽车研究院有限公司 基于车联网的驾驶行为纠正方法及装置
CN105197011A (zh) * 2014-06-13 2015-12-30 现代摩比斯株式会社 车辆用驾驶员危险指数管理系统及其方法

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101674965A (zh) * 2007-05-02 2010-03-17 丰田自动车株式会社 车辆行为控制装置
CN101876751A (zh) * 2009-04-02 2010-11-03 通用汽车环球科技运作公司 在全挡风玻璃平视显示器上的车辆间通讯装置
CN101540090A (zh) * 2009-04-14 2009-09-23 华南理工大学 基于多元信息融合的驾驶员疲劳监测装置及其监测方法
CN101670815A (zh) * 2009-10-12 2010-03-17 常雪阳 汽车安全与节油操控辅助提示系统及辅助提示方法
CN104049927A (zh) * 2013-03-13 2014-09-17 本田技研工业株式会社 用于左转安全提示的增强现实平视显示器（hud）
US20150012179A1 (en) * 2013-07-04 2015-01-08 Fuji Jukogyo Kabushiki Kaisha Driving assist controller for vehicle
CN104670091A (zh) * 2013-12-02 2015-06-03 现代摩比斯株式会社 利用投影单元的增强现实车道变更辅助系统
CN105197011A (zh) * 2014-06-13 2015-12-30 现代摩比斯株式会社 车辆用驾驶员危险指数管理系统及其方法
CN104952249A (zh) * 2015-06-10 2015-09-30 浙江吉利汽车研究院有限公司 基于车联网的驾驶行为纠正方法及装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
秦洪武等: "基于MEMS 和GPS 的驾驶行为和车辆状态监测系统设计", 《传感器与微系统》 *

Similar Documents

Publication Publication Date Title
CN105599773B (zh) 一种基于车辆运动姿态的驾驶员状态提示装置及其方法
CN105575150B (zh) 行车安全行为分析方法、预警方法及其装置
CN103646298B (zh) 一种自动驾驶方法及系统
CN108583430B (zh) 一种用于检测和提醒驾驶员分心的驾驶系统及判断方法
CN205810121U (zh) 一种车用信号灯智能提醒装置
CN110472556B (zh) 基于单目视觉的驾驶员注意力状态分析系统和分析方法
JP2000268297A (ja) 安全運転評価装置
CN106143308B (zh) 基于智能后视镜的车道偏离预警系统
CN103732480A (zh) 用于在行车道上车辆的线路引导中辅助驾驶员的方法和设备
CN106394403A (zh) 车辆和控制车辆的装置及方法
CN106494409A (zh) 基于ar增强现实和大数据的车辆控制的驾驶辅助系统
CN110126730A (zh) 车辆变道提醒方法及系统
CN112041201B (zh) 用于控制对车辆特征的访问的方法、系统和介质
CN107972674A (zh) 一种融合导航与智能视觉的驾驶辅助系统及方法
CN212903320U (zh) 一种用于驾驶员状态监测系统测试的虚拟驾驶系统
JP2019043176A (ja) 車載表示装置
CN111009137A (zh) 一种基于摄像头与导航数据融合的区间测速提示方法、系统及汽车
CN105551285A (zh) 一种智能安全辅助驾驶系统
KR101285006B1 (ko) 주변 차량의 운행 정보를 표시하는 자동차 미러 장치 및 그리고 운행 정보 표시 방법
CN110021192A (zh) 车道偏离告警方法、智能告警装置以及车辆
CN108609012B (zh) 车辆变道方法及其车载中控系统
CN107054225A (zh) 车辆显示系统及车辆
CN106335512A (zh) 基于ar增强现实和车辆违章记录查询的驾驶辅助系统
CN112428921B (zh) 连续下坡路段提示方法、装置及车辆
CN106671984A (zh) 基于ar增强现实的驾驶辅助系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20170315