CN116472212A - 用于车辆监测的系统和方法 - Google Patents

用于车辆监测的系统和方法 Download PDF

Info

Publication number
CN116472212A
CN116472212A CN202080107378.5A CN202080107378A CN116472212A CN 116472212 A CN116472212 A CN 116472212A CN 202080107378 A CN202080107378 A CN 202080107378A CN 116472212 A CN116472212 A CN 116472212A
Authority
CN
China
Prior art keywords
vehicle
data
adas
obd
sensor
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202080107378.5A
Other languages
English (en)
Inventor
B·S·苏拉
S·戴伊
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Harman International Industries Inc
Original Assignee
Harman International Industries Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Harman International Industries Inc filed Critical Harman International Industries Inc
Publication of CN116472212A publication Critical patent/CN116472212A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07CTIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C5/00Registering or indicating the working of vehicles
    • G07C5/008Registering or indicating the working of vehicles communicating information to a remotely located station
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/02Ensuring safety in case of control system failures, e.g. by diagnosing, circumventing or fixing failures
    • B60W50/0205Diagnosing or detecting failures; Failure detection models
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/04Monitoring the functioning of the control system
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07CTIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C5/00Registering or indicating the working of vehicles
    • G07C5/08Registering or indicating performance data other than driving, working, idle, or waiting time, with or without registering driving, working, idle or waiting time
    • G07C5/0841Registering performance data
    • G07C5/085Registering performance data using electronic data carriers
    • G07C5/0866Registering performance data using electronic data carriers the electronic data carrier being a digital video recorder in combination with video camera
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/143Alarm means
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/146Display means
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2420/00Indexing codes relating to the type of sensors based on the principle of their operation
    • B60W2420/40Photo, light or radio wave sensitive means, e.g. infrared sensors
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2420/00Indexing codes relating to the type of sensors based on the principle of their operation
    • B60W2420/40Photo, light or radio wave sensitive means, e.g. infrared sensors
    • B60W2420/403Image sensing, e.g. optical camera
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00Input parameters relating to occupants
    • B60W2540/20Direction indicator values
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00Input parameters relating to occupants
    • B60W2540/229Attention level, e.g. attentive to driving, reading or sleeping
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2552/00Input parameters relating to infrastructure
    • B60W2552/05Type of road, e.g. motorways, local streets, paved or unpaved roads
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2556/00Input parameters relating to data
    • B60W2556/45External transmission of data to or from the vehicle
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2556/00Input parameters relating to data
    • B60W2556/45External transmission of data to or from the vehicle
    • B60W2556/50External transmission of data to or from the vehicle of positioning data, e.g. GPS [Global Positioning System] data
    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07CTIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C2205/00Indexing scheme relating to group G07C5/00
    • G07C2205/02Indexing scheme relating to group G07C5/00 using a vehicle scan tool

Landscapes

  • Engineering & Computer Science (AREA)
  • Automation & Control Theory (AREA)
  • Human Computer Interaction (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Traffic Control Systems (AREA)

Abstract

提供了用于高级驾驶员辅助系统(ADAS)的方法和系统。在一个示例中,ADAS包括:车载诊断(OBD)适配器,其被配置为从车辆传感器获得信息;以及车内装置,其通信地连接到OBD适配器并被配置为监测驾驶条件。车内装置被进一步配置为基于来自OBD适配器的第一组数据和来自车内装置的传感器的第二组数据向操作者提供警报。

Description

用于车辆监测的系统和方法
技术领域
本公开涉及用于监测车辆并向车辆操作者提供警报的系统和方法。
背景技术
在现代车辆中使用高级驾驶员辅助系统(ADAS)已经实现改善的车辆操控以及对车辆法律和法规的遵守。通过实现诸如传感器和相机的系统,可以经由生成警报、安全保护以及在一些情况下由ADAS对车辆进行的自动化控制来减少车辆操作期间的人为错误。例如,ADAS可以利用由车内装置(诸如仪表盘相机,例如,行车记录仪)收集的数据来检测如通过车辆挡风玻璃观察到的附近障碍物。行车记录仪可以包括附加记录能力,诸如加速/减速重力、速度、转向角、GPS等,并且可以配置有通信技术,诸如长期演进(LTE)连接。
ADAS的有效性可取决于ADAS对由传感器和相机提供的信息的解释和响应的准确性。例如,ADAS对不断变化的驾驶条件的低容忍度可能限制ADAS诊断需要激活驾驶者警报的情况的能力。此外,ADAS可能依赖于大量消耗计算能力的复杂算法。因此,由ADAS提供的辅助可能基于不完整或不准确的信息,从而导致驾驶者受挫。
发明内容
为了提高ADAS准确地检测驾驶条件和车辆状况并遵守特定于区域的车辆法律和法规的能力,车辆的车载诊断(例如,OBD-II)可与ADAS的传感器和相机结合使用。OBD-II可以快速地提供关于车辆状态和状况的准确数据,而不进一步加重车内计算系统的处理能力和存储资源的负担。数据可以由ADAS算法使用来指导ADAS的执行,从而实现更准确地调整车辆状况并指示可能需要通知操作者的问题。
公开了用于车辆的ADAS的实施方案,所述ADAS包括:车载诊断(OBD)适配器,其被配置为从车辆传感器获得信息;以及车内装置,其通信地链接到OBD适配器并被配置为监测驾驶条件并向操作者提供警报。在一个示例中,OBD适配器为OBD加密狗,并且车内装置为行车记录仪。行车记录仪还适配有处理器,所述处理器具有存储在非暂时性存储器中的计算机可读指令。在被执行时,计算机可读指令致使处理器:从OBD适配器接收第一组数据;从车内装置的传感器接收第二组数据;以及基于第一组数据和第二组数据两者来生成输出。所生成的输出包括警报的激活或消除中的一者,其中警报指示所监测的驾驶条件的改变。
在另一个实施方案中,一种用于ADAS的方法包括:响应于在车内装置的处感器传检测到的驾驶条件的改变,从车内装置的传感器获得第一组数据,第一组数据是基于驾驶条件的改变收集的。响应还包括通过从车内装置向车辆的车载诊断(OBD)系统发送针对车辆信息的请求来查询OBD系统,车辆信息由OBD系统收集并基于第一组数据进行提取以生成第二组数据。此外,在从OBD系统接收到第二组数据后,基于第一组数据和第二组数据的组合生成输出,所述输出包括至少在车内装置处向驾驶者呈现警报。
附图说明
通过参考附图阅读对非限制性实施方案的以下描述,可更好地理解本公开,在附图中:
图1示出了根据本公开的一个或多个实施方案的包括车内通信网络和仪表盘相机(例如,行车记录仪)的车厢的局部视图;
图2示出了根据本公开的一个或多个实施方案的包括高级驾驶员辅助系统(ADAS)和车载诊断系统(OBD-II)的通信网络的框图;
图3A示出了根据本公开的一个或多个实施方案的适配有OBD增强型ADAS的车辆的示例,其中车辆正准备改变车道;
图3B示出了根据本公开的一个或多个实施方案的正改变车道的图3A的车辆;
图4示出了根据本公开的一个或多个实施方案的针对车道偏离警告系统的例程的示例;
图5示出了根据本公开的一个或多个实施方案的针对分心驾驶者警告系统的例程的示例;
图6示出了根据本公开的一个或多个实施方案的适配有OBD增强型ADAS的车辆,其中车辆正在高占用车辆(HOV)车道中行驶;
图7示出了根据本公开的一个或多个实施方案的针对HOV警告系统的例程的示例;
图8示出了根据本公开的一个或多个实施方案的针对前照灯警告系统的第一例程的示例;
图9示出了根据本公开的一个或多个实施方案的针对前照灯警告系统的第二例程的示例;并且
图10示出了根据本公开的一个或多个实施方案的针对停放警告系统的例程的示例。
具体实施方式
以下描述涉及用于车辆的高级驾驶员辅助系统(ADAS)的系统和方法。在一个示例中,由ADAS响应于由ADAS装置(诸如仪表盘相机或行车记录仪)的传感器提供的信号而生成的警报可以通过利用从车辆的车载诊断(OBD)系统获得的数据增强信号来更准确地表示当前驾驶条件。OBD系统可以基于车辆传感器来提供关于车辆的当前状态的信息,所述信息可被用来修改由行车记录仪提供的数据。数据的修改可以允许ADAS向驾驶者提供更有用的通知,并通过改善数据来考虑由车辆传感器检测到的其他条件。使用来自OBD系统的信息可以扩展ADAS的监测能力和评估能力,从而减少人为错误对车辆操作的影响。可以通过OBD数据增强的ADAS警报的示例在下文参考图3A至图10进一步描述。
图1示出了车辆102的车厢100内部的示例性局部视图,驾驶者和/或一个或多个乘客可以坐在车厢中。图1的车辆102可以为包括驱动车轮(未示出)和内燃发动机104的机动车辆。内燃发动机104可以包括一个或多个燃烧室,其可以经由进气通道接收进入空气并经由排气通道排出燃烧气体。车辆102可以为公路汽车以及其他类型的车辆。在一些示例中,车辆102可以包括混合动力推进系统,所述混合动力推进系统包括能量转换装置,所述能量转换装置可操作以从车辆运动和/或发动机吸收能量并将所吸收的能量转换成适合于由能量储存装置储存的能量形式。在又一些示例中,车辆102可以为纯电动车辆,结合燃料电池、太阳能捕获元件和/或用于为车辆提供动力的其他能量储存系统。
如图所示,仪表板106可以包括车辆102的驾驶者可访问的各种显示器和控件,诸如车内界面系统(例如,信息娱乐系统)的仪表盘用户界面108(诸如触摸屏)、音频系统控制面板以及仪表组110。虽然图1示出的示例性系统包括可以经由没有独立控制面板的车内界面系统的用户界面108执行的音频和视觉系统控件,但在其他实施方案中,车辆102可以包括音频和/或视觉系统控制面板。音频系统控件可以包括用于控制经由车辆扬声器系统的扬声器112输出的音频的一个或多个方面的特征。视觉系统控件可以包括用于调节在用户界面108处显示的图像的特征。
仪表组110可以包括各种仪器,诸如燃油表、转速表、速度表和里程表,以及指示器和警告灯。方向盘114可以在仪表组110下方从仪表板106突出。方向盘114可以包括控制车内界面系统的控件116并且还可以包括耦接到方向盘114的转向柱的其他控件,诸如转向指示器、前照灯开关、挡风玻璃雨刮器开关等。
除了图1所描绘的部件,应当理解,仪表板106还可以包括诸如车门和车窗控件、手套箱和/或任何其他合适的元件的部件。
车厢100可以包括用于监测车辆、用户和/或环境的一个或多个传感器。例如,车厢100可以包括一个或多个座椅安装式压力传感器120,其被配置为测量施加到座椅的压力以确定用户的存在。车厢100可以包括一个或多个车门传感器122,其被配置为监测车门活动,诸如车门的打开和/或关闭、车门的锁定、车门的车窗的操作和/或任何其他合适的车门活动事件。可以包括传声器126以接收呈语音命令形式的用户输入,以便使用户能够进行电话呼叫,和/或测量车厢100中的环境噪声。应当理解,图1中所示的传感器的放置是示例性的,并且一个或多个附加的或替代性的传感器可以定位在发动机室中、在车辆102的外表面上和/或在其他合适的位置以提供关于车辆的操作、车辆的环境条件、车辆的用户等的信息。
车厢100的传感器可以通信地耦接到车辆控制器,所述车辆控制器可以包括微处理器单元(MCU)、针对可执行程序/指令的电子存储介质、随机存取存储器、保活存储器、功率控制模块、车身控制模块、网络访问装置(NAD)和数据总线。在一个示例中,数据总线可以为被配置为促进车辆102内的数据通信的控制器局域网(CAN)总线。
可以通过车载诊断(OBD)端口124访问在传感器处收集并存储在控制器的存储器中的信息。更具体地,如图1所示,OBD端口124可以为OBD-II端口124。通过将配件市场装置(例如,插入式远程信息处理技术,诸如加密狗)插入OBD-II端口124,可以获得关于所选择的车辆参数和诊断故障代码(DTC)的数据。应当理解,如图1所示的OBD-II端口124的位置为OBD-II端口124的定位的非限制性示例。在其他示例中,OBD-II端口可以定位在车厢100中的其他地方。
车厢100还可以包括附加的配件市场车内装置,以监控驾驶条件并通过在该装置处实现的高级驾驶员辅助系统(ADAS)向驾驶者提供警报和通知。在一个示例中,车内装置可以为仪表盘相机或行车记录仪128,其可以在出行之前、期间和/或之后储存在车辆102中。行车记录仪128可连接到例如车辆102的挡风玻璃,并且包括广角前置相机,其被配置为记录至少透过挡风玻璃的景象,并且在一些示例中,还记录透过车辆102的其他车窗的景象。作为另一个示例,行车记录仪128可以替代地安装在车辆102的仪表盘上。行车记录仪128的面向车厢的一侧可以配置有用户界面129。由行车记录仪128的相机镜头捕获的景象可以实时显示在用户界面129处以及警报和通知中。在一些示例中,用户界面129可以为适于接收用户界面129处的来自用户的输入的触摸屏。
在一些情况下,行车记录仪128还可以包括带有车厢监测系统(CMS)的集成相机,CMS相机被配置为记录车厢100内的360度景象。然而,在其他示例中,CMS相机可以为未集成到行车记录仪128中的独立相机。在一个示例中,行车记录仪128还可以包括安装在车辆102的后车窗或车辆的后区域中的其他地方的后置相机。后置相机可以提供车辆102后方景象的图像和视频记录。
行车记录仪128还可以具有微控制器单元(MCU),其存储用于操作行车记录仪128的传感器的可执行指令并将从传感器收集的数据存储在非暂时性存储器中。另外地,行车记录仪128可以配置有各种传感器以监测各种车辆操作参数。例如,行车记录仪128可以包括传感器以测量车辆加速/减速、车速、转向角、GPS数据等。可以经由从车厢中的电源插座,诸如从点烟器插座130汲取电力的电力缆线来对行车记录仪128供电。替代地,行车记录仪128可以直接有线连接到车辆102的电气系统中,或者可以由电池供电。
行车记录仪128可以配置有无线通信,诸如Wi-Fi、蓝牙或长期演进(LTE)连接,从而实现行车记录仪128与车辆102的CAN总线通信。此外,在一些示例中,行车记录仪128可以被配置为用于高级驾驶员辅助系统(ADAS)的装置,从而实现监测车辆操作和驾驶条件以向操作者提供警报和通知。例如,ADAS可以包括:前向碰撞警告系统,用于当车辆102在高速度下接近另一车辆时警告操作者;车道偏离警告系统,用于当汽车转到相邻车道中时通知操作者;以及各种其他类型的监测系统。
虽然在行车记录仪中使用ADAS技术可以减少车辆操作期间的人为错误的可能性,但ADAS的准确性可能受到行车记录仪适应环境和操作参数的变化的能力的限制。由于使用复杂算法,因此行车记录仪可能提出繁重的计算需求,在某些示例中,这可能将行车记录仪的处理能力限制到实时的单组数据。因此,对是否基于车辆操作和/或环境条件来保证驾驶者通知的评估可能不准确和/或不一致。
为了至少部分地解决上述问题,发明人在本文中已认识到,通过将由车辆传感器通过车辆的OBD-II端口收集的信息与由ADAS获得的数据组合,可以更准确地评估驾驶条件和车辆操作,从而允许ADAS提供更有效且更可靠的驾驶辅助。例如,配件市场的插入式远程信息处理装置(诸如OBD适配器或加密狗)可以插入OBD-II端口中。加密狗可以适配有无线通信格式,诸如蓝牙、Wi-Fi或LTE连接,从而允许由车辆OBD提供的信息通过车辆控制器CAN总线和加密狗中继到接收装置。因此,加密狗可以与ADAS行车记录仪通信并且ADAS可以使用由车辆OBD通过加密狗提供的传感器数据来增加ADAS的准确性和灵敏度。包括车辆控制器、加密狗和行车记录仪的通信网络将在下文中参考图2进一步描述。
通过在车辆中实现配件市场的OBD增强型ADAS,ADAS准确地检测和诊断需要通知操作员的条件的能力提高,而不进一步加重ADAS的计算能力的负担。此类条件包括识别驾驶者头部定位的改变、道路标志的出现、环境改变(诸如环境光)、停放时车辆的倾斜等。ADAS可以被配置为从OBD数据提取针对特定应用的相关信息以及命令在行车记录仪的用户界面处相应地显示警报。这样,OBD数据提供直接从车辆传感器获得的信息,以指导ADAS算法生成准确地评估车辆状况和/或驾驶条件的输出。输出可以为警报或通知,以警告驾驶者车辆状况/驾驶条件的改变。ADAS在通过OBD数据增强时的提高的有效性在以下参考图3A至图10描述的示例中示出。
车辆通信系统200的框图在图2中示出。通信系统200可以连接车辆102(例如,图1的车辆102)的元件,OBD-II系统和ADAS。OBD-II系统包括OBD-II加密狗(下文称为加密狗)203,其可以接收关于车辆传感器204(诸如检测车辆前照灯、点火装置、转向指示灯等的状态的传感器)的信息。信息可以通过车辆102的CAN总线传输并在加密狗203的CAN收发器处接收。在一个示例中,加密狗可以通过比例积分微分(PID)通信模式与车辆传感器204通信。加密狗203可以插入车辆102中的端口中以允许加密狗203通信地耦接到ADAS的行车记录仪128(例如,图1的行车记录仪128)。传感器信息可以在MCU 206的OBD-II堆栈处进行处理,并经简化以隔离要在行车记录仪128处利用的一组或多组数据。
例如,数据的简化包括提取与由行车记录仪128的传感器检测到的改变相关的数据。作为示例,改变可以为经由行车记录仪128的前置相机传感器236检测到道路标志,该道路标志指示车辆102当前在其中行驶的车道已经变成为高占用车辆(HOV)车道。OBD数据可以在MCU 206处被列入白名单,以仅允许与评估车辆102关于在HOV车道中行驶的确实性相关的数据被中继到ADAS处理器操作系统(OS)210。列入白名单的数据可以包括车辆信息,例如,基于车辆的车辆识别号码(VIN)的品牌、车型和年份(MMY)以及基于MMY的车辆的推进类型(例如,电动、混合电动、ICE)。列入白名单的OBD数据由ADAS在处理器OS 210处接收,并用于修改ADAS的输出,所述输出可以包括视觉警报和/或音频警报,如下文进一步描述的。
在一个示例中,加密狗203可以通过包括通用异步接收器发射器(UART)的有线连接耦接到行车记录仪128的处理器操作系统(OS)210。可以在处理器OS 210的一个或多个模块处处理列入白名单的数据。这些模块可以包括例如用于向云服务器节点212和从云服务器节点传输信息的客户端节点模块214、MCU网络访问装置(NAD)通信模块216和行车记录仪应用程序模块218。
加密狗203与行车记录仪128之间的数据流经由客户端-服务器通信进行,并且可以经由无线链路(诸如LTE连接)发送到云服务器节点212,并存储在云服务器节点212处。例如,行车记录仪128的客户端节点模块214可以接收来自行车记录仪128的传感器的信息和来自加密狗203的OBD数据,并且通过后端发送信息。客户端节点模块214可以包括相关联的服务器URL以相应地对信息进行中继。更具体地,云服务器节点212可以从客户端节点模块214接收数据,所述客户端节点模块可以对已经由处理器OS 210的其他模块处理的数据进行中继。
所存储的数据也可以经由LTE连接访问,例如,由移动装置220访问。移动装置可以与车辆102分离并且可以在车辆102的内侧或外侧(例如,外部)使用。移动装置220可以被配置为经由安装在移动装置220上的应用程序从ADAS接收关于驾驶条件、车辆状态等的通知和警报。应用程序允许移动装置与云服务器节点212通信并访问存储在其处的信息。在一些示例中,指令和/或通知可以由用户在移动装置220处输入并递送到处理器OS 210以供执行。云服务器节点212还可以被配置为存储ADAS可访问的各种数据库以进一步修改ADAS的输出。
行车记录仪处理器OS 210的MCU NAD通信模块216可以从加密狗203接收列入白名单的数据,并将数据发送到行车记录仪应用程序模块218,以用于调制从行车记录仪传感器传输到行车记录仪应用程序模块218的数据。行车记录仪传感器可包括例如惯性测量单元(IMU)230、光(例如,环境光)传感器232、GPS 234、前置相机传感器236和车厢相机传感器238。然而,应当理解,图2中列出的传感器是说明性的,并且行车记录仪可以包括本文未描述的许多其他传感器。
中继到行车记录仪应用程序模块218的行车记录仪传感器信号可以被解析到数据库,诸如ADAS库和车厢监控系统(CMS)库,每个库被配置为存储来自特定传感器的数据。行车记录仪应用程序218可以处理和解释数据并相应地向行车记录仪128的输出装置发送指令。例如,行车记录仪应用程序218可以命令在行车记录仪128的显示器224处呈现视觉警报或通知。
显示器224可以显示图像和/或消息以提供与由行车记录仪传感器和加密狗203提供的信息相关的视觉反馈。例如,显示器224可以实时显示由前置相机传感器检测到的景象。在一些示例中,景象可以被需要驾驶者立即知晓和响应的警报/通知覆盖。在一个示例中,显示器224可以包括触摸屏,所述触摸屏被配置为基于与触摸屏的接触来接收来自用户的输入。此外,行车记录仪输出装置可以包括扬声器226。扬声器226可以被配置为在由行车记录仪应用程序218命令时提供音频警报和通知并且可以被激活作为视觉警报/通知的替代或补充。在一些情况下,扬声器226可以用于在需要针对特定事件提醒驾驶者时发送音频警报。例如,扬声器226可以发送针对前向碰撞警告(FCW)、HOV车道违规、灯开/关警报等的音频警报,如下文进一步描述的。
如图2所示,OBD-II加密狗可以通信耦合到ADAS行车记录仪,以基于OBD数据来调整ADAS能力。OBD数据提供关于车辆状况的准确信息,其可用于调节或校正由行车记录仪传感器收集的信号。这样,可以在不增加ADAS的计算需求和复杂性的情况下提高ADAS对车辆操作的准确性和响应。下面描述可以受益于经OBD数据的增强的ADAS应用的示例。
在OBD增强型ADAS应用在车辆中的第一示例中,OBD数据可用于补充ADAS行车记录仪的车道偏离警告(LDW)系统。LDW系统可以包括使用基于行车记录仪的前向相机的中心聚焦区域的感兴趣区域(ROI)来确定车辆在行驶期间是否正在漂移到相邻车道。在检测到车道偏离时,行车记录仪可以向用户提供警报。然而,在常规系统中,不管用户的意图如何都激活警报。例如,用户可能期望改变车道并选择将车辆导航到相邻车道中,但此类选择未中继到行车记录仪,从而引起用户的不快。此外,行车记录仪可能无法评估在决定执行车道改变时可以与用户相关的附加方面,诸如评估相邻车道中前方车辆的接近度。
当以OBD数据补充时,LDW系统可以仅在车道改变未被指示为有意时激活警报。此外,LDW系统可以被配置为估计相邻车道中的相邻车辆与适配有OBD增强型ADAS的车辆可能有多接近。例如,如图3A所示,第一车辆300(其可以为图1和图2的车辆102的实施方案)可以沿着多车道道路的第一车道302行驶。行车记录仪128的前置相机传感器(例如,安装在图1和图2的车辆102中的行车记录仪128)可以具有位于前置相机传感器的视野中的ROI 304,其在前置相机传感器正前方居中。第二车辆306可能正在第一车辆300前面的第二相邻车道308中行驶。
第一车辆300的驾驶者可能期望移动到第二车道308。驾驶者可以例如通过操纵转向指示器来激活第一车辆300的左转向信号灯310,并开始偏移到第二车道308中。当第一辆车300转向第二车道308中时,行车记录仪128的前置相机传感器检测到车道改变。例如,行车记录仪处理器OS可以包括用于识别道路的车道标记的算法。通过比较ROI 304内车道标记的位置,ADAS可以识别第一车辆300相对于车道标记的对齐偏移。行车记录仪128可以查询由加密狗(例如图2的加密狗203)提供的OBD数据,并确定左转向信号灯310打开,例如,激活。LDW警报因此被消除,例如,在行车记录仪128处减少或抑制视觉和/或音频警报的显示。此外,当检测到车道改变并且ADAS确认左转向信号灯310打开以指示向左侧偏移时,行车记录仪128的ROI 304可以向视野的左侧偏移,如图3B所示。
通过将ROI 304向左侧偏移,第二车辆306(如图3A所示)可以包括在ROI 304中。行车记录仪128可以估计第二车辆306与第一车辆300之间的距离,并且如果针对车道改变,第二车辆306被认为与第一车辆300太靠近,则激活视觉警报和/或音频警报。另外地,仅在行车记录仪在没有激活转向指示器的情况下检测到车道改变的情况下,才激活警告驾驶者车辆正在脱离车道的警报。因此,如果ADAS经由OBD数据确认转向指示器打开,则消除LDW警报,例如,减少警报的显示或将其静音/抑制。因此,ADAS可以提供更有用的警报和通知,同时降低驾驶者可能忽略警告的可能性。
用于利用OBD数据来增强行车记录仪的LDW系统的例程400的示例在图4中示出。例程400可以在诸如图1至图2的车辆102和图3A至图3B的车辆300的车辆中实现,所述车辆包括行车记录仪,诸如图1至图3B的行车记录仪128。车辆例如在原动机诸如发动机或电池的推动的行驶模式下操作。车辆还包括OBD适配器或加密狗,诸如图2的加密狗203。行车记录仪的处理器OS(诸如图2的处理器OS 210)从OBD系统以及从行车记录仪的各种传感器接收信号,并基于所接收到的信号和存储在处理器的存储器上的指令在行车记录仪处提供警报和通知。
在402处,例程包括在车辆被驾驶时检测到车道改变正在发生。车道改变可以由行车记录仪的前置相机传感器检测。例如,如上所述,前置相机可以在其视野的ROI中识别车道标记,并检测到车辆正在改变其相对于车道标记的位置。在检测到车道改变后,例程继续进行到404,以通过行车记录仪与加密狗之间的PID连接查询OBD系统。查询可以包括ADAS从OBD系统请求与所检测到的车道改变相关的信息。
例如,通过请求所检测到的车道改变的相关信息,可以促使加密狗的MCU在406处将OBD数据简化(例如,通过列入白名单),并提取被确定为对修改ADAS的关于LDW警报的输出有用的数据。在一个示例中,有用数据可以包括车辆的转向指示器的状态。转向指示器可以处于打开(例如,左转向信号灯激活或右转向信号灯激活)或关闭模式。
在408处,例程包括确定转向指示器在404处是否打开。转向指示器可以为连接到车辆的转向信号灯的驾驶者激活开关。转向指示器(例如,开关的电路)的状态可由OBD-II系统监测,并且关于转向指示器的状态的连续数据可传输到行车记录仪处理器OS以生成ADAS输出。
如果转向指示器未打开,则例程进行到410以通过激活LDW警报来呈现ADAS的第一输出结果。LDW警报可以包括在行车记录仪的显示屏处显示通知。另外地或替代性地,可以通过行车记录仪的扬声器播报音频通知。此外,在一些示例中,警报可以经由云服务器中继到无线连接的移动装置并且类似地在移动装置处显示/播报。在又一些示例中,也可以在车辆的仪表盘用户界面处显示警报。例程结束。
如果转向指示器打开,则例程继续进行到412以通过消除、抑制LDW警报和/或将其静音使得警报不被显示或播报来呈现ADAS的第二输出结果。在414,例程包括根据经激活的转向指示器调节行车记录仪的前置相机传感器的ROI。例如,如果左转向指示器激活,则ROI在前置相机传感器的视野中向左侧偏移,并且如果右转向指示器激活,则ROI向右侧偏移。
在416处,例程包括确定是否在经调整的ROI中检测到障碍物(例如,另一车辆)。行车记录仪可以包括用于识别诸如当障碍物出现时ROI的改变的算法。经调节的ROI允许识别新车道中的障碍物以及估计车辆与障碍物之间的距离。如果检测到障碍物,则在418处激活FCW并在行车记录仪处对其进行显示/播报,并且在一些示例中,在移动装置和/或车辆的仪表盘用户界面处对其进行显示/播报。如果未检测到障碍物,则在420处消除FCW警报(这可以包括抑制警报/将其静音),并且例程结束。
在另一个示例中,关于转向指示器状态的OBD数据可用于确定驾驶者在驾驶时是否分心。如图5所示,用于增强ADAS的分心驾驶者警告(DDW)系统的例程500可以如上文参考图4的例程400所描述的那样在车辆中实现。例程500也可以在车辆在运输中时进行。
在502处,例程包括检测驾驶者的头部位置的改变。例如,行车记录仪的车厢相机传感器可面向车辆的车厢并监测车厢内的运动。因此,行车记录仪可以包括允许ADAS识别驾驶者的头部何时转动使得驾驶者没有向前看的算法。在检测到驾驶者的头部位置的改变后,ADAS可以在504处针对来自车辆传感器的相关数据来查询OBD系统。
作为示例,查询可以包括针对以下的请求:可与驾驶者的头部位置的所检测到的改变结合使用的数据,其可以包括关于转向指示器的状态的数据。响应于所述请求,加密狗的MCU可以在506处将数据简化,例如通过列入白名单,以提取通过监测转向指示器电路获得的信息并将所提取的信息中继到ADAS。
程序包括在508处基于由OBD系统提供的数据确认转向指示器(例如,右转向或左转向指示器)是否打开。如果转向指示器未打开,则例程进行到510,以便通过在行车记录仪的显示器/扬声器处以及在一些示例中在移动装置和/或车辆的仪表盘用户界面处激活DDW警报来提供ADAS的第一输出结果。如果转向指示器打开,则例程继续进行到512,以便通过消除DDW警报来提供ADAS的第二输出结果。例程结束。
通过将OBD数据与ADAS DDW系统组合使用,当驾驶者头部有意转动时,不激活DDW警报。因此,在驾驶者例如在改变车道时执行盲点检查的情况下,避免对驾驶者的多余警告。在一些示例中,例程400可以与例程500结合使用以进一步改善ADAS。
在OBD增强型ADAS应用在车辆中的第二示例中,OBD数据可用于补充行车记录仪信息以评估车辆的高占用车辆(HOV)确实性。ADAS行车记录仪(诸如图1至图2和图3A至图3B的行车记录仪128)可以包括适配有标志检测能力的前向相机传感器、配置有用于实现脸部检测的车厢监测系统(CMS)的算法的车厢相机传感器,以及GPS。从行车记录仪传感器和系统获得的信息可以与OBD数据结合使用,所述OBD数据包括监测座椅重量、安全带系紧以及车辆信息(诸如基于车辆的VIN的MMY以及基于MMY的车辆的推进系统)。经组合的数据集可以允许行车记录仪识别车辆正在进入HOV车道并评估车辆是否符合地理区域的HOV规则。
例如,如图6所示,车辆600(其可以为图1和图2的车辆102的实施方案)可以沿着车道602诸如高速公路的车道行驶。车辆600包括行车记录仪128和一个或多个乘客604。当车辆600行驶时,标志606可以进入行车记录仪128的前置相机传感器的视野608。标志606可以提供关于车道的分类的信息,例如,车道602是或可能很快变成HOV车道。
行车记录仪的标志检测能力允许ADAS识别车道602的HOV分类,这发起对OBD数据的查询(例如,经由PID机制),以获得车辆信息(例如,MMY),以确定车辆600为电动、混合电动还是内燃发动机(ICE)车辆。行车记录仪可以利用GPS数据来识别车辆300的位置并访问关于HOV车道的使用的区域规则,例如,电动/混合电动车辆是否被允许以及针对合规使用的最小车辆乘载。
行车记录仪还可以利用座椅重量检测、安全带系紧检测和面部检测中的一者或多者来确定车辆600中乘员的数量。例如,行车记录仪128的车厢相机传感器可以计算在车厢相机传感器的视野610中观察到的乘客脸部的数量,并且ADAS可以将脸部的数量与占用座椅(例如,基于重量)和系紧的安全带进行比较,如OBD数据所指示。ADAS可以使用由行车记录仪的传感器/系统提供的信息以及OBD数据来验证车辆在HOV车道602中的行驶,并生成可以作为警报或通知呈现给驾驶者的输出。例如,如果ADAS确定车辆600不符合基于车辆乘载和区域规则的HOV规则,则在行车记录仪处显示和/或播报警报。在一些示例中,也可以在无线链接到行车记录仪的移动装置处激活警报。另外地,可以在车辆的仪表盘用户界面处显示警报。作为替代性输出结果,可以消除警报,这可以包括抑制警报和/或将其静音,例如,不显示或播报。
用于利用OBD数据来增强行车记录仪的HOV验证系统的例程700的示例在图7中示出。例程700可以在诸如图1至图2的车辆102和图6的车辆600的车辆中实现,所述车辆包括行车记录仪,诸如图1至图3B和图6的行车记录仪128。车辆正在操作,例如,在由原动机诸如发动机或电池推动的行驶模式下。车辆还包括OBD适配器或加密狗,诸如图2的加密狗203。行车记录仪的处理器OS(诸如图2的处理器OS 210)从OBD系统以及从行车记录仪的各种传感器接收信号,并基于所接收到的信号和存储在处理器的存储器上的指令在行车记录仪处提供警报和通知。
在702处,例程包括检测指示车辆正在行驶的车道是/将变成HOV车道的标志。例如,标志可以进入行车记录仪的前置相机传感器的视野,如上所述。行车记录仪的标志检测能力可以识别标志指示车道的HOV分类。在704处,标志的检测可以促使ADAS识别车辆的位置,所述位置可以由行车记录仪的GPS提供。在706处,例程包括通过行车记录仪与加密狗之间的PID连接查询OBD数据。
查询OBD数据可以包括发送针对以下的请求:与评估车辆关于HOV车道的使用的确实性相关的数据,例如,车辆是否符合HOV车道规则。此外,所请求的数据还可以包括关于特定于车辆的位置的区域HOV车道规则的信息。在接收到请求后,加密狗的MCU在708处通过例如将数据列入白名单以仅传输相关数据来将OBD数据简化。相关数据可以包括基于车辆VIN的MMY和基于MMY的对车辆推进系统的识别。ADAS还可以指从数据库中提取的区域HOV规则,其可以存储在服务器(诸如图2的云服务器节点212)上。
例程包括在710处基于OBD数据来确认车辆是否是电动车辆(EV)或混合电动车辆(HEV)。如果车辆不是EV/HEV,则例程进行到716以验证车辆乘员的数量是否达到阈值数量,如下面进一步描述的。
如果确认车辆是EV/HEV,则例程继续进行到712以确定EV/HEV是否被允许处于HOV车道中。ADAS可以利用经由GPS数据和从数据库检索的信息的组合获得的区域HOV车道规则和法规。通过参考区域HOV法规,ADAS可以验证占用规则的例外情况是否适用于EV/HEV,例如,无论乘员数量如何,都允许EV/HEV处于HOV车道中。如果允许EV/HEV使用HOV车道,则例程继续进行到714以通过消除HOV警报来输出ADAS的第一结果。消除警报可以包括在无线连接到行车记录仪的移动装置处或在车辆的仪表盘用户界面处抑制HOV警报和/或将其静音(例如,不在行车记录仪处显示和/或播报HOV警报)。
如果针对EV/HEV未验证HOV规则的例外情况,则例程进行到716以确定车辆乘员的数量是否满足阈值。阈值可为允许在HOV车道中存在于车辆中的车辆乘员的最小数量,并且阈值数量可以根据由数据库提供的区域HOV规则而变化。例如,阈值可以为两个或三个乘员,包括驾驶者。行车记录仪可以结合CMS算法利用车厢相机传感器来检测乘员的脸部以及如由OBD系统提供的关于座椅重量和安全带系紧的信息,以确定车辆中乘员的数量。
如果乘员的数量未达到阈值,则例程进行到718以通过激活HOV警报来呈现第二输出结果。HOV警报可以包括在行车记录仪处显示或通过行车记录仪的扬声器播报的消息/通知。在一些示例中,也可以在移动装置和/或仪表盘用户界面处显示/播报警报。警报可以包括在适当时刻(例如,相邻车道中的交通中断时)将车辆移出HOV车道的指令。替代地,如果乘员的数量至少达到阈值,则方法继续进行到720以消除HOV警报。例程结束。
在一些示例中,ADAS还可以适于基于由行车记录仪提供的GPS数据来确定使用HOV是否需要通行费。ADAS可以命令激活提供关于通行费的信息的附加警报。这样,降低驾驶者在无效条件下使用HOV车道的可能性,并且可以向驾驶者通知HOV通行费。
在OBD增强型ADAS应用在车辆中的第三示例中,OBD数据可用于补充行车记录仪信息,以在车辆操作期间和停放车辆时提供前照灯警告。ADAS行车记录仪(诸如图1至图2和图3A至图3B的行车记录仪128)可以包括适配有环境照明传感器以检测环境光的强度的前置相机传感器以及GPS。行车记录仪还可以包括IMU,所述IMU可以为适配有加速度计诸如G传感器的6轴IMU。
ADAS可以使用基于来自前置相机传感器、GPS和IMU的信号的环境照明数据和/或车辆加速度或运动来确定车辆是在运动还是静止。OBD数据可用于确定车辆点火装置的状态,以评估当前车辆状况是否促成前照灯打开或关闭。例如,ADAS可以检测到车辆正在运动、环境光已经消除并且点火装置打开。通过查询如通过加密狗提供的OBD数据,ADAS可以确认前照灯关闭。可以向驾驶者提供警报以打开前照灯。
作为另一示例,ADAS可以基于行车记录仪信号来确定车辆是静止的。通过查询OBD数据,ADAS还可以确认点火装置关闭并且前照灯打开。可以向驾驶者提供警报以关闭前照灯。
用于利用OBD数据来增强ADAS行车记录仪的前照灯警报系统的第一例程800和第二例程900在图8和图9中示出。例程800和900可以在诸如图1和图2的车辆102和图6的车辆600的车辆中实现,所述车辆包括诸如图1至图3B和图6的行车记录仪128的行车记录仪。车辆还包括OBD适配器或加密狗,诸如图2的加密狗203。行车记录仪的处理器OS(诸如图2的处理器OS 210)从OBD系统以及从行车记录仪的各种传感器接收信号,并基于所接收到的信号和存储在处理器的存储器上的指令在行车记录仪处提供警报和通知。
转向图8的第一例程800,在802处,例程包括检测环境光强度的降低。例如,车辆外部的照明变暗由行车记录仪的前置相机的照明传感器检测。环境光强度可以降低阈值量,这促使ADAS在804处查询加密狗。
查询加密狗可以包括发送针对以下的请求:与检测环境照明的改变相关的OBD数据。作为示例,在接收到请求后,加密狗的MCU可以确定哪些数据是相关的并通过在806处将数据列入白名单来将中继到ADAS的数据简化。因此,来自车辆的前照灯传感器的信号可以从OBD数据提取并发送到行车记录仪,并与来自行车记录仪传感器的信息组合使用以修改ADAS的输出。
例程包括在808处确定车辆是否在运输中。例如,ADAS可以查询OBD数据,以基于来自点火传感器的信号来请求关于车辆的点火装置的状态(例如,关闭或打开)的信息。例程还可以利用来自IMU和GPS的信息来补充点火装置状态信号,以进一步确认车辆是否在运动。例如,IMU的G传感器和根据GPS追踪的车辆位置的改变可以验证车辆当前是否正在被驾驶。
如果车辆未在运输中,则例程继续进行到814以通过消除前照灯警报(例如,不显示或播报警报)来呈现ADAS的第一输出结果。如果确认车辆在运动,则例程进行到810以基于OBD数据来确定前照灯是否打开。如果前照灯未打开,则ADAS的第二输出结果在812处通过以下来呈现:激活前照灯警报来通知操作者前照灯关闭并且应该打开。前照灯警报可如上所述显示,例如,在行车记录仪的显示器处显示,或通过行车记录仪的扬声器播报。另外地,可以在移动装置和/或仪表盘用户界面处显示/播报前照灯警报。
如果确认前照灯打开,则例程进行到814以消除前照灯警报,并且例程结束。这样,通过将如由OBD系统检测到的点火装置和前照灯的状态与来自行车记录仪传感器的数据相组合,降低了车辆在前照灯未打开的情况下在黑暗条件下被驾驶的可能性。
在图9的第二例程900中,例程包括在902处检测到车辆处于停放模式。检测停放模式包括经由行车记录仪的IMU和GPS来验证车辆处于静止。在检测到车辆进入停放模式时,ADAS在904处查询加密狗。查询加密狗可以包括发送针对与车辆的停放状态相关的信息的请求。例如,相关信息可以包括用于确认车辆已停放的车辆的变速器状态和点火装置状态,以及车灯(包括前照灯、车内灯、雾灯等)的状态。
加密狗的MCU在906处将OBD数据简化(例如,通过列入白名单),以将相关数据发送到ADAS。在910处,ADAS使用经简化的OBD数据来确定车辆前照灯和/或任何其他灯是否打开。如果基于来自OBD的数据确认任意灯打开,则例程继续进行到912以通过以下提供ADAS的第一输出结果:激活警报来通知操作者车灯打开并且应该关闭。可以如上所述来显示/播报警报。如果灯未打开,则例程进行到914以通过消除警报来呈现ADAS的第二输出结果。例程结束。
通过将OBD数据与来自行车记录仪传感器的信号相组合,最大限度地减少停放车辆以及点火装置关闭后车灯的持续点亮。从而降低灯导致车辆电池电量耗尽的可能性。
在OBD增强型ADAS应用在车辆中的第四示例中,OBD数据可用于补充行车记录仪信息,以在停放车辆时提供车轮角度警告。例如,在一些区域,要求车辆的车轮在斜坡上停放时在特定方向上成角度。不遵守停放规则可能导致产生罚单。为了降低经停放的车辆不符合特定于区域的停放规则的可能性,ADAS可以配置有包括各种区域的停放法律的数据库,所述数据库存储在服务器,诸如图2的云服务器节点212处。然而,其他存储和访问模式也是可能的。通过将从OBD系统中继的车辆信息(诸如变速器模式、点火装置状态和前车轮角度)与从行车记录仪传感器(诸如GPS和IMU)获得的数据相组合,可以在车辆前车轮未根据有关在斜坡上停放的区域规则进行调整时通知操作者。
用于利用OBD数据来增强ADAS行车记录仪的车轮角度警报系统的例程1000在图10中示出。例程1000可以在诸如图1至图2的车辆102和图6的车辆600的车辆中实现,所述车辆包括行车记录仪,诸如图1至图3B和图6的行车记录仪128。车辆还包括OBD适配器或加密狗,诸如图2的加密狗203。行车记录仪的处理器OS(诸如图2的处理器OS 210)从OBD系统以及从行车记录仪的各种传感器接收信号,并基于所接收到的信号和存储在处理器的存储器上的指令在行车记录仪处提供警报和通知。
在1002处,例程包括检测车辆状态被调整为停放模式。ADAS可以基于来自行车记录仪的IMU和GPS的信号来确定车辆已停放,如上文参考图9所述。ADAS还可以通过查询OBD数据以从车辆的变速器模式和点火装置状态获得信息来确认车辆已停放,如上文参考图9所述。
例程进行到1004以确定是否在车辆处检测到倾斜。如果停放在斜坡上,则车辆可能倾斜,并且可以通过行车记录仪的IMU的G传感器来检测倾斜。G传感器可以利用陀螺仪来确定车辆是否相对于参考平面例如水平面成角度,并且当车辆相对于参考平面的角度大于阈值量时,可以认为车辆倾斜。例如,当车辆相对于水平面的角度为10度或更大或某个其他阈值角度时,车辆可能倾斜。
如果车辆不处于倾斜,则例程继续进行到1014以通过消除车轮角度警报来提供第一输出结果,如下面进一步描述的。如果车辆倾斜,则例程进行到1006以查询加密狗,从而请求与车辆倾斜的检测相关的信息。例如,相关数据可以包括来自车辆的车轮角度传感器的信号。在接收到请求后,加密狗的MCU可以在1008处将数据简化以提取车轮角度传感器数据并将所提取的数据中继到ADAS。
在1010处,例程包括从存储在服务器(诸如图2的云服务器节点212)上的数据库请求信息,以确定特定于车辆的位置的停放法律。车辆的位置可以通过GPS确认并用于针对对应的停放法律来搜索数据库。可以通过参考关于在斜坡上停放时车轮定位的区域停放法律、规则和法规来进行验证。
在1012处,例程包括基于OBD数据来验证前车轮是否相对于沿车辆的长度延伸的中心轴线成角度,例如,向左侧或向右侧转向。将前车轮的所检测到的位置与目标方向进行比较,所述目标方向是基于经验证的区域停放法律确定的。如果前车轮角度根据目标方向转向,则例程进行到1014以消除车轮角度警报。消除警报包括不在行车记录仪、移动装置或车辆的仪表盘用户界面处显示和/或播报警报。如果前车轮角度与目标方向不匹配,例如,前车轮未转向或转向相反方向,则通过激活车轮角度警报在1016处呈现ADAS的第二输出结果。激活警报包括在行车记录仪处在视觉上显示警报或发出音频通知的声音。也可以在移动装置和/或车辆的仪表盘用户界面处显示/播报警报。在一些示例中,可以根据轮胎是否在目标方向上在阈值角度范围内成角度来激活警报。例如,如果轮胎未在目标方向上成角度至少30度,则可以激活警报。例程结束。
这样,可以通过利用从车辆传感器和系统获得的信号补充由ADAS装置诸如行车记录仪提供的信息来修改和增强车辆ADAS的输出。通过将OBD适配器或加密狗与行车记录仪配对,例如通信地链接装置,ADAS可以更准确地响应车辆的当前状态和当前的驾驶/操作条件。ADAS可以被配置为经由PID连接来查询加密狗,并使用列入白名单将数据简化,以利用来自车辆传感器的相关数据来持续地更新ADAS。因此,ADAS可以提供更有用且更适当的通知。除可用的警报之外,ADAS与OBD数据的配对还可以允许ADAS仅基于行车记录仪传感器来生成新警报。此外,可以在不添加车辆部件或增加ADAS的计算负担的情况下实现ADAS的增强。利用OBD数据来补充ADAS的技术效果在于,提高ADAS评估驾驶条件的能力的准确性,从而最大限度地减少车辆操作期间的驾驶者错误。
已经出于说明和描述的目的呈现了对实施方案的描述。可鉴于以上描述来执行对实施方案的合适的修改和改变,或者可通过实践方法来获取所述合适的修改和改变。例如,除非另外指出,否则可通过合适的装置和/或装置的组合来执行所描述的方法中的一种或多种方法,所述装置诸如图1至图3B的ADAS行车记录仪128和/或图2的OBD加密狗203。所述方法可通过以下进行:使用一个或多个逻辑装置(例如,处理器)与一个或多个附加硬件元件的组合来执行所存储的指令,所述一个或多个附加硬件元件诸如存储装置、存储器、硬件网络接口/天线、开关、致动器、时钟电路等。还可按照除了在本申请中描述的次序之外的各种次序、并行地和/或同时地执行所描述的方法和相关联的动作。所描述的系统在本质上是示例性的,并且可包括附加元件和/或省略元件。本公开的主题包括所公开的各种系统和配置与其他特征、功能和/或属性的所有新颖和非显而易见的组合和子组合。
本公开还对一种用于车辆的高级驾驶员辅助系统(ADAS)提供支持,所述ADAS包括:车载诊断(OBD)适配器,其被配置为从车辆传感器获得信息;以及车内装置,其通信地链接到OBD适配器并且被配置为监测驾驶条件并向操作者提供警报,所述车内装置包括处理器,其具有存储在非暂时性存储器中的计算机可读指令,所述计算机可读指令在被执行时致使处理器:从OBD适配器接收第一组数据,从车内装置的传感器接收第二组数据,以及基于第一组数据和第二组数据两者来生成输出,其中输出包括警报的激活或消除中的一者,警报指示所监测的驾驶条件的改变。在系统的第一示例中,OBD适配器插入车辆的车厢的端口中,以通过比例积分微分(PID)连接将OBD适配器连接到车内装置,并且其中OBD适配器被配置为通过控制器局域网(CAN)从车辆传感器接收信息。在系统的任选地包括第一示例的第二示例中,警报的激活在车内装置、车辆用户界面和移动装置中的一者或多者处呈现视觉警报和音频警报中的至少一者。在系统的任选地包括第一示例和第二示例的第三示例中,警报的消除包括以下各项中的至少一者:减少、抑制视觉警报和音频警报中的至少一者以及使所述至少一者静音。在系统的任选地包括第一示例至第三示例的第四示例中,车内装置为仪表盘相机(行车记录仪),并且其中行车记录仪的传感器包括前置相机、车厢相机、照明传感器、GPS和惯性测量单元(IMU)中的一者或多者。在系统的任选地包括第一示例至第四示例的第五示例中,处理器包括存储在非暂时性存储器中的附加计算机可读指令,该附加计算机可读指令在被执行时致使处理器:从存储在基于云的服务器处的一个或多个数据库检索信息,所述服务器可通过长期演进(LTE)连接访问,其中一个或多个数据库提供关于车辆和车辆所在区域中的至少一者的信息。在系统的任选地包括第一示例至第五示例的第六示例中,来自一个或多个数据库的信息与第一组数据和第二组数据结合使用以生成输出。在系统的任选地包括第一示例至第六示例的第七示例中,移动装置通过LTE连接通信地耦接到车内装置。在系统的任选地包括第一示例至第七示例的第八示例中,OBD适配器包括微控制器单元(MCU),其被配置为在发送第一组数据之前简化第一组数据,并且其中第一组数据被简化以提取与第二组数据相关的信息。
本公开还对一种用于车辆的高级驾驶员辅助系统(ADAS)的方法提供支持,所述方法包括:响应于在车内装置的传感器处检测到的驾驶条件的改变:从车内装置的传感器获得第一组数据,所述第一组数据是基于驾驶条件的改变而收集的;通过从车内装置向车辆的车载诊断(OBD)系统发送针对车辆信息的请求来查询OBD系统,所述车辆信息由OBD系统收集并基于第一组数据进行提取以生成第二组数据;从OBD系统接收第二组数据;以及基于第一组数据和第二组数据的组合来生成输出,所述输出包括至少在车内装置处向驾驶者呈现警报。在方法的第一示例中,在车内装置的传感器处检测到的改变包括以下各项中的一者或多者:物体在前置相机传感器的视野中的出现、由惯性测量单元(IMU)检测到的车辆的运动的改变、由车厢相机传感器检测到的驾驶者头部的位置的改变,以及由照明传感器检测到的环境光的改变。在方法的任选地包括第一示例的第二示例中,提取车辆信息包括将车辆信息列入白名单以提取与第一组数据相关的信息并将所提取的信息发送到车内装置的处理器。在方法的任选地包括第一示例和第二示例的第三示例中,查询OBD系统包括从车内装置向通信地耦接到控制器局域网(CAN)的OBD适配器发送针对车辆信息的请求,所述CAN被配置为接收来自车辆的传感器的信号,并且其中经由OBD适配器与车内装置之间的比例积分微分(PID)连接来发送请求。在方法的任选地包括第一示例至第三示例的第四示例中,生成输出包括以下各项中的一者:在车内装置处提供警报以及在车内装置处抑制警报。在方法的任选地包括第一示例至第四示例的第五示例中,生成输出包括:当从前置相机传感器获得第一组数据并且从转向指示器传感器获得第二组数据时,确定是否要通知驾驶者车道偏离,并且其中前置相机传感器的感兴趣区域基于第二组数据进行调节。在方法的任选地包括第一示例至第五示例的第六示例中,生成输出包括:当从车厢相机传感器获得第一组数据并且从转向指示器传感器获得第二组数据时,确定是否要通知驾驶者分心驾驶。在方法的任选地包括第一示例至第六示例的第七示例中,生成输出包括:当从前置相机传感器获得第一组数据并且从基于车辆的车辆识别号码提供车辆信息的第一数据库获得第二组数据时,确定是否要通知驾驶者未遵守高占用车辆(HOV)车道,并且其中确定是否要通知驾驶者还包括使用从车厢相机获得的数据以及从存储区域HOV车道规则的第二数据库获得的数据。在方法的任选地包括第一示例至第七示例的第八示例中,生成输出包括:当从照明传感器获得第一组数据并且从前照灯传感器获得第二组数据时,确定是否要将打开车辆前照灯的提示呈现给驾驶者,并且其中提示还基于由车内装置的IMU和GPS提供的信息。在方法的任选地包括第一示例至第八示例的第九示例中,生成输出包括:当从GPS和IMU获得第一组数据并且从前照灯传感器获得第二组数据时,确定是否要将关闭车辆前照灯的提示呈现给驾驶者。在方法的任选地包括第一示例至第九示例的第十示例中,生成输出包括:当从IMU获得第一组数据并且从车轮角度传感器获得第二组数据时,确定是否要将车辆角度警报呈现给驾驶者,并且其中车辆角度警报还基于来自提供区域停放法律的数据库的信息。
如在本申请中使用的,以单数形式叙述并以词“一个”或“一种”开头的元件或步骤应被理解为不排除复数形式的所述元件或步骤,除非声明这种排除。此外,对本公开的“一个实施方案”或“一个示例”的提及不希望被解释为排除也并入有所叙述的特征的附加实施方案的存在。“第一”、“第二”、“第三”等术语仅作为标示使用,并且无意对其对象强加数值要求或特定位置次序。所附权利要求特别指出来自以上公开内容的被视为新颖和非显而易见的主题。

Claims (20)

1.一种用于车辆的高级驾驶员辅助系统(ADAS),所述ADAS包括:
车载诊断(OBD)适配器,所述OBD适配器被配置为从车辆传感器获得信息;以及
车内装置,所述车内装置通信地链接到所述OBD适配器并且被配置为监测驾驶条件并向操作者提供警报,所述车内装置包括处理器,所述处理器具有存储在非暂时性存储器中的计算机可读指令,所述计算机可读指令在被执行时致使所述处理器:
从所述OBD适配器接收第一组数据;
从所述车内装置的传感器接收第二组数据;以及
基于所述第一组数据和所述第二组数据两者来生成输出,其中所述输出包括所述警报的激活或消除中的一者,所述警报指示所监测的驾驶条件的改变。
2.根据权利要求1所述的ADAS,其中所述OBD适配器插入所述车辆的车厢的端口中,以通过比例积分微分(PID)连接将所述OBD适配器连接到所述车内装置,并且其中所述OBD适配器被配置为通过控制器局域网(CAN)从所述车辆传感器接收所述信息。
3.根据权利要求1所述的ADAS,其中所述警报的所述激活在所述车内装置、车辆用户界面和移动装置中的一者或多者处呈现视觉警报和音频警报中的至少一者。
4.根据权利要求3所述的ADAS,其中所述警报的所述消除包括以下各项中的至少一者:减少、抑制所述视觉警报和所述音频警报中的至少一者以及使所述至少一者静音。
5.根据权利要求1所述的ADAS,其中所述车内装置为仪表盘相机(行车记录仪),并且其中所述行车记录仪的所述传感器包括前置相机、车厢相机、照明传感器、GPS和惯性测量单元(IMU)中的一者或多者。
6.根据权利要求1所述的ADAS,其中所述处理器包括存储在非暂时性存储器中的附加计算机可读指令,所述附加计算机可读指令在被执行时致使所述处理器:
从存储在基于云的服务器处的一个或多个数据库检索信息,所述服务器能够经由长期演进(LTE)连接访问,其中所述一个或多个数据库提供关于所述车辆和所述车辆所在区域中的至少一者的信息。
7.根据权利要求6所述的ADAS,其中来自所述一个或多个数据库的所述信息与所述第一组数据和所述第二组数据结合使用以生成所述输出。
8.根据权利要求6所述的ADAS,其中移动装置通过所述LTE连接通信地耦接到所述车内装置。
9.根据权利要求1所述的ADAS,其中所述OBD适配器包括微控制器单元(MCU),所述MCU被配置为在发送所述第一组数据之前简化所述第一组数据,并且其中所述第一组数据被简化以提取与所述第二组数据相关的信息。
10.一种用于车辆的高级驾驶员辅助系统(ADAS)的方法,所述方法包括:
响应于在车内装置的传感器处检测到的驾驶条件的改变:
从所述车内装置的所述传感器获得第一组数据,所述第一组数据是基于驾驶条件的所述改变而收集的;
通过从所述车内装置向所述车辆的车载诊断(OBD)系统发送针对车辆信息的请求来查询所述OBD系统,所述车辆信息由所述OBD系统收集并基于所述第一组数据进行提取以生成第二组数据;
从所述OBD系统接收所述第二组数据;以及
基于所述第一组数据和所述第二组数据的组合生成输出,所述输出包括至少在所述车内装置处向驾驶者呈现警报。
11.根据权利要求10所述的方法,其中在所述车内装置的所述传感器处检测到的所述改变包括以下各项中的一者或多者:物体在前置相机传感器的视野中的出现、由惯性测量单元(IMU)检测到的所述车辆的运动的改变、由车厢相机传感器检测到的驾驶者头部的位置的改变,以及由照明传感器检测到的环境光的改变。
12.根据权利要求10所述的方法,其中提取所述车辆信息包括将所述车辆信息列入白名单以提取与所述第一组数据相关的信息并将所提取的信息发送到所述车内装置的处理器。
13.根据权利要求10所述的方法,其中查询所述OBD系统包括从所述车内装置向通信地耦接到控制器局域网(CAN)的OBD适配器发送针对所述车辆信息的所述请求,所述CAN被配置为接收来自所述车辆的所述传感器的信号,并且其中经由所述OBD适配器与所述车内装置之间的比例积分微分(PID)连接来发送所述请求。
14.根据权利要求10所述的方法,其中生成所述输出包括以下各项中的一者:在所述车内装置处提供警报以及在所述车内装置处抑制所述警报。
15.根据权利要求10所述的方法,其中生成所述输出包括:当从所述前置相机传感器获得所述第一组数据并且从转向指示器传感器获得所述第二组数据时,确定是否要通知驾驶者车道偏离,并且其中所述前置相机传感器的感兴趣区域基于所述第二组数据进行调节。
16.根据权利要求10所述的方法,其中生成所述输出包括:当从所述车厢相机传感器获得所述第一组数据并且从转向指示器传感器获得所述第二组数据时,确定是否要通知驾驶者分心驾驶。
17.根据权利要求10所述的方法,其中生成所述输出包括:当从所述前置相机传感器获得所述第一组数据并且从基于所述车辆的车辆识别号码提供车辆信息的第一数据库获得第二组数据时,确定是否要通知驾驶者未遵守高占用车辆(HOV)车道,并且其中确定是否要通知所述驾驶者还包括使用从所述车厢相机获得的数据以及从存储区域HOV车道规则的第二数据库获得的数据。
18.根据权利要求10所述的方法,其中生成所述输出包括:当从所述照明传感器获得所述第一组数据并且从前照灯传感器获得所述第二组数据时,确定是否要将打开车辆前照灯的提示呈现给驾驶者,并且其中所述提示还基于由所述车内装置的所述IMU和GPS提供的信息。
19.根据权利要求18所述的方法,其中生成所述输出包括:当从所述GPS和所述IMU获得所述第一组数据并且从所述前照灯传感器获得所述第二组数据时,确定是否要将关闭车辆前照灯的提示呈现给所述驾驶者。
20.根据权利要求10所述的方法,其中生成所述输出包括:当从所述IMU获得所述第一组数据并且从车轮角度传感器获得所述第二组数据时,确定是否要将车辆角度警报呈现给驾驶者,并且其中所述车辆角度警报还基于来自提供区域停放法律的数据库的信息。
CN202080107378.5A 2020-12-01 2020-12-01 用于车辆监测的系统和方法 Pending CN116472212A (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/US2020/062736 WO2022119558A1 (en) 2020-12-01 2020-12-01 Systems and methods for vehicle monitoring

Publications (1)

Publication Number Publication Date
CN116472212A true CN116472212A (zh) 2023-07-21

Family

ID=81855048

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202080107378.5A Pending CN116472212A (zh) 2020-12-01 2020-12-01 用于车辆监测的系统和方法

Country Status (4)

Country Link
US (1) US20230415761A1 (zh)
EP (1) EP4255784A1 (zh)
CN (1) CN116472212A (zh)
WO (1) WO2022119558A1 (zh)

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4173083B2 (ja) * 2003-09-12 2008-10-29 日産ディーゼル工業株式会社 覚醒状態判定装置及び覚醒状態判定方法
FR2955729B1 (fr) * 2010-01-22 2012-12-14 Valeo Vision Procede de detection pour un vehicule automobile
US8452771B2 (en) * 2011-01-03 2013-05-28 Honda Motor Co., Ltd. Method for differentiating traffic data obtained from probe vehicles
KR20150022260A (ko) * 2013-08-22 2015-03-04 주식회사 만도 스마트 폰을 이용한 운전자 보조 시스템 및 방법
US10379197B2 (en) * 2017-08-08 2019-08-13 Ford Global Technologies, Llc Dongles for controlling vehicle drive assist systems
US10525881B1 (en) * 2018-12-21 2020-01-07 Robert Bosch Gmbh Wheel orientation warning system

Also Published As

Publication number Publication date
EP4255784A1 (en) 2023-10-11
WO2022119558A1 (en) 2022-06-09
US20230415761A1 (en) 2023-12-28

Similar Documents

Publication Publication Date Title
CN107878460B (zh) 自动驾驶车辆的控制方法和服务器
KR101989102B1 (ko) 차량용 운전 보조 장치 및 그 제어 방법
US10025899B2 (en) Deactivating or disabling various vehicle systems and/or components when vehicle operates in an autonomous mode
KR101959305B1 (ko) 차량
CN109716415B (zh) 车辆控制装置、车辆控制方法以及移动体
KR20180050779A (ko) 차량 및 그 제어방법
KR20190007286A (ko) 차량용 주행 시스템 및 차량
US11873007B2 (en) Information processing apparatus, information processing method, and program
KR101887077B1 (ko) 차량용 전자 디바이스 해킹 테스트 장치
KR102035135B1 (ko) 차량 사고 정보 제공 시스템
CN112534487A (zh) 信息处理设备、移动体、信息处理方法和程序
KR20180080939A (ko) 차량 운전 보조장치 및 이를 포함하는 차량
CN111161551B (zh) 用于检测、警报和响应紧急车辆的设备、系统和方法
KR101768115B1 (ko) 컨트롤 패드, 그를 가지는 차량 및 그 제어 방법
CN113264042B (zh) 隐藏危险情况警示
US11546555B2 (en) Around-view image control device and around-view image processing method therefor
KR20190065043A (ko) 차량의 운행 시스템
CN116472212A (zh) 用于车辆监测的系统和方法
CN113386756A (zh) 车辆追随行驶系统、车辆控制装置、车辆及车辆控制方法
KR20230033160A (ko) 자율주행 차량의 보복 운전 제어 시스템
US11524581B2 (en) Image output device for vehicle displaying timeline of events
JP2022140026A (ja) 画像処理装置、画像処理方法およびプログラム
CN109959385B (zh) 车辆驾驶辅助系统和方法
US20240054897A1 (en) Information processing device, information processing method, program, mobile device, and information processing system
WO2024038759A1 (ja) 情報処理装置、情報処理方法、及び、プログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination