CN113892131B - 利用事件检测的车辆记录系统 - Google Patents

利用事件检测的车辆记录系统 Download PDF

Info

Publication number
CN113892131B
CN113892131B CN202080033430.7A CN202080033430A CN113892131B CN 113892131 B CN113892131 B CN 113892131B CN 202080033430 A CN202080033430 A CN 202080033430A CN 113892131 B CN113892131 B CN 113892131B
Authority
CN
China
Prior art keywords
vehicle
input data
data
criteria
predefined
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202080033430.7A
Other languages
English (en)
Other versions
CN113892131A (zh
Inventor
达朗·舒马赫
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Stoneridge Electronics AB
Original Assignee
Stoneridge Electronics AB
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Stoneridge Electronics AB filed Critical Stoneridge Electronics AB
Publication of CN113892131A publication Critical patent/CN113892131A/zh
Application granted granted Critical
Publication of CN113892131B publication Critical patent/CN113892131B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07CTIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C5/00Registering or indicating the working of vehicles
    • G07C5/08Registering or indicating performance data other than driving, working, idle, or waiting time, with or without registering driving, working, idle or waiting time
    • G07C5/0841Registering performance data
    • G07C5/085Registering performance data using electronic data carriers
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units, or advanced driver assistance systems for ensuring comfort, stability and safety or drive control systems for propelling or retarding the vehicle
    • B60W30/08Active safety systems predicting or avoiding probable or impending collision or attempting to minimise its consequences
    • B60W30/095Predicting travel path or likelihood of collision
    • B60W30/0956Predicting travel path or likelihood of collision the prediction being responsive to traffic or environmental parameters
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/02Neural networks
    • G06N3/08Learning methods
    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07CTIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C5/00Registering or indicating the working of vehicles
    • G07C5/08Registering or indicating performance data other than driving, working, idle, or waiting time, with or without registering driving, working, idle or waiting time
    • G07C5/0808Diagnosing performance data
    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07CTIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C5/00Registering or indicating the working of vehicles
    • G07C5/008Registering or indicating the working of vehicles communicating information to a remotely located station
    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07CTIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C5/00Registering or indicating the working of vehicles
    • G07C5/08Registering or indicating performance data other than driving, working, idle, or waiting time, with or without registering driving, working, idle or waiting time
    • G07C5/0841Registering performance data
    • G07C5/085Registering performance data using electronic data carriers
    • G07C5/0866Registering performance data using electronic data carriers the electronic data carrier being a digital video recorder in combination with video camera

Abstract

根据本公开示例的用于车辆的记录系统包括接近传感器以及至少一个车辆操作传感器,所述接近传感器被配置为获得指示车辆与外部物体之间距离的数据,所述至少一个车辆操作传感器被配置为获得指示驾驶员正如何操作所述车辆的数据。控制器被配置为获得当前监测周期的输入数据,所述输入数据包括来自所述多个接近传感器和所述至少一个车辆操作传感器的数据;利用预测引擎来确定所述输入数据是否满足与潜在的即将发生的车辆事故相对应的标准集;基于所述输入数据满足所述标准集,开始将来自所述当前监测周期和后续监测周期的所述输入数据保存在数据集中;并且基于所述输入数据不满足所述标准集,删除所述当前监测周期的所述输入数据。

Description

利用事件检测的车辆记录系统
相关申请的交叉引用
本申请主张于2019年5月3日提交的第62/842560号美国临时申请的权益,该申请通过本文的引用而并入其整体。
背景技术
本申请涉及车辆监测,更具体地涉及用于基于潜在的即将发生的车辆事故来记录车辆数据集的方法和装置。
保险和其他安全相关成本是商用车队运营商支付的最大成本之一。商用车队运营商有兴趣了解车辆事故,例如车辆意外事故和未遂车辆意外事故、以及导致此类事件的不安全驾驶员行为,这可以为操作不佳的驾驶员提供采取适当行动的机会。然而,记录车辆外部的持续视频馈送可以提供无数小时的连续镜头,这些连续镜头必须经过审查以确定感兴趣的实际相关部分,从而进一步增加成本并降低审查人员的效率。
发明内容
根据本公开示例的用于车辆的记录系统包括多个接近传感器以及至少一个车辆操作传感器,所述接近传感器被配置为获得指示车辆与外部物体之间的距离的数据,所述车辆操作传感器被配置为获得指示驾驶员正如何操作车辆的数据。控制器被配置为获取当前监测周期的输入数据并利用预测引擎来确定输入数据是否满足与潜在的即将发生的车辆事故相对应的标准集,该输入数据包括来自多个接近传感器和至少一个车辆操作传感器的数据。基于输入数据满足标准集,该控制器被配置为开始将来自当前监测周期和后续监测周期的输入数据保存在数据集中。基于输入数据不满足标准集,该控制器被配置为删除当前监测周期的输入数据。
在任一前述实施例的又一实施例中,多个接近传感器包括能够操作以记录车辆外部环境的图像的车辆外部相机,并且作为开始保存输入数据的一部分,控制器被配置为开始将来自车辆外部相机的图像保存在数据集中。
在任一前述实施例的又一实施例中,控制器被配置为基于退出事件的发生完成数据集并且停止向数据集添加输入。
在任一前述实施例的又一实施例中,被满足的标准集基于一个或多个第一参数,退出事件基于与一个或多个第一参数不同的一个或多个第二参数。
在任一前述实施例的又一实施例中,预定义标准集指示车辆与特定一个外部物体之间即将发生的碰撞或碰撞未遂,以及即将发生的翻车或险些翻车中的一个或多个。
在任一前述实施例的又一实施例中,退出事件包括经过预定义时间量以及车辆与特定一个外部物体之间的距离超过预定义距离阈值中的一个或多个。
在任一前述实施例的又一实施例中,控制器被配置为在退出事件之后将数据集提供给后处理引擎,并利用后处理引擎来确定潜在的即将发生的车辆事故是否已发生。
在任一前述实施例的又一实施例中,控制器被配置为基于后处理引擎指示未发生潜在的即将发生的车辆事故来删除数据集。
在任一前述实施例的又一实施例中,控制器被配置为基于后处理引擎指示潜在的即将发生的车辆事故已发生,将数据集传输到审查者以确认车辆事故。基于审查者确认发生了车辆事故,控制器被配置为将数据集保存在数据集储存库中以供将来参考。基于审查者指示未发生车辆事故,控制器被配置为删除数据集并将该数据集用作神经网络的训练数据。
在任一前述实施例的又一实施例中,驾驶员监测系统包括控制器局域网络(CAN)总线,其中控制器被配置为通过CAN总线与多个接近传感器、至少一个车辆操作传感器、或多个接近传感器和至少一个车辆操作传感器进行通信。
在任一前述实施例的又一实施例中,至少一个车辆操作传感器包括加速度传感器、转向角传感器、制动传感器和陀螺仪中的一个或多个。
在任一前述实施例的又一实施例中,多个接近传感器具有以下类型传感器中的一个或多个:激光雷达、无线电雷达、超声波传感器和相机。
在任一前述实施例的又一实施例中,控制器被配置为基于来自车辆乘员的请求开始将来自当前监测周期和后续监测周期的输入数据保存在数据集中。
根据本公开示例的记录车辆数据的方法包括获取当前监测周期的输入数据,该输入数据包括来自多个接近传感器的指示车辆与外部物体之间距离的数据,以及来自至少一个车辆操作传感器的指示驾驶员正如何操作车辆的数据。预测引擎用于确定输入数据是否满足与潜在的即将发生的车辆事故相对应的标准集。基于输入数据满足标准集,开始将来自当前监测周期和后续监测周期的输入数据保存在数据集中。基于输入数据不满足标准集,删除当前监测周期的输入数据。
在任一前述实施例的又一实施例中,开始保存输入数据包括开始保存来自车辆外部相机的车辆外部环境的图像。
任一前述实施例的又一实施例包括基于退出事件的发生完成数据集和停止向数据集添加输入数据。
在任一前述实施例的又一实施例中,被满足的标准集基于一个或多个第一参数,退出事件基于与一个或多个第一参数不同的一个或多个第二参数。
在任一前述实施例的又一实施例中,预定义标准集指示车辆与特定一个外部物体之间即将发生的碰撞或碰撞未遂,以及即将发生的翻车或险些翻车中的一个或多个。
在任一前述实施例的又一实施例中,退出事件包括经过预定义时间量以及车辆与特定一个外部物体之间的距离超过预定义距离阈值中的一个或多个。
在任一前述实施例的又一实施例中,该方法包括在退出事件之后将数据集提供给后处理引擎,并利用后处理引擎来确定潜在的即将发生的车辆事故是否已发生。
在任一前述实施例的又一实施例中,该方法包括基于来自后处理引擎指示未发生潜在的即将发生的车辆事故的指示来删除数据集。
在任一前述实施例的又一实施例中,该方法包括基于后处理引擎指示潜在的即将发生的车辆事故已发生将数据集用作神经网络的训练数据。
在任一前述实施例的又一实施例中,该方法包括基于后处理引擎指示潜在的即将发生的车辆事故已发生,将数据集传输到审查者以确认车辆事故,基于审查者指示确认发生了车辆事故,将数据集保存在数据集储存库中以供将来参考,并基于审查者指示未发生车辆事故而删除数据集。
附图说明
图1示意性地示出了示例车队管理系统。
图2示意性地示出了车辆的示例记录系统的部件。
图3示意性地示出了车辆的示例传感器位置。
图4示意性地示出了可以在图2的记录系统中使用的电子控制器。
图5是记录车辆数据的示例方法的流程图。
前述段落、权利要求或以下说明和附图的实施例、示例和替代方案,包括它们的各个方面或各自的单独特征中的任何一个,可以被独立地或以任何组合的方式被采用。结合一个实施例描述的特征适用于所有实施例,除非这些特征不兼容。
具体实施方式
图1示意性地示出了示例车队管理系统10,示例车队管理系统10包括车辆14A-N的车队12,车辆14A-N能够操作以通过广域网(“WAN”)16(例如因特网)与车队管理者22进行通信。车辆14能够操作以记录和传输数据集23,该数据集23包括指示车辆14与外部物体之间距离的数据,并且包括指示驾驶员正在如何操作车辆14的数据。车辆14A-N能够操作以通过将数据集23传输到车队管理者的计算机20和/或通过将数据集23传输到车队管理服务器18来与车队管理者22进行通信。在图1的示例中,车辆14是卡车,但是可以理解的是可以使用其他商用车辆,例如厢式送货车等。
图2示意性地示出了设置在每个车辆14中的示例车辆记录系统24的部件。在图2的示例中,车辆记录系统24包括可操作地连接到远程信息处理(telematics)模块32的电子控制单元(ECU)30、多个接近传感器34和多个车辆操作传感器36。
远程信息处理模块32包括能够操作以通过WAN 16进行通信和传输数据集23的无线收发器。在一个示例中,远程信息处理模块32被配置为使用预定义的协议标准,例如802.11标准中的一个或多个和/或一种或多种蜂窝标准(例如,GSM、CDMA、LTE等)。
接近传感器34被配置为记录关于车辆14外部环境的数据,该数据指示车辆14与外部物体(例如其他车辆、行人、骑自行车者等)之间的距离。可以使用该数据推断车辆14和外部物体的相对速度。在图2的示例中,接近传感器34包括能够操作以记录车辆外部环境图像的多个外部相机38、无线电探测和测距(“无线电雷达(Radar)”)传感器40、光探测和测距(“激光雷达(Lidar)”)传感器42和超声波传感器44。ECU 30能够操作以基于从接近传感器34接收的数据执行物体检测,以确定车辆14与周围物体的接近程度和/或车辆14正在以多快的速度接近或驶离检测到的物体。
多个车辆操作传感器36能够操作以记录指示驾驶员正在如何操作车辆14的数据。在图2的示例中,车辆操作传感器36包括转向角传感器46、制动传感器48、加速度传感器50和陀螺仪52。转向角传感器46被配置为检测异常转向事件,例如可能表示急转弯(swerving)的快速方向盘角度变化。制动传感器48能够操作以检测传输到车辆制动系统的控制信号。加速度传感器50能够操作以检测车辆14加速度的变化,例如快速加速和/或快速减速(例如,紧急制动事件),并且还能够操作以检测车辆14速度。在一个示例中,加速度传感器50包括车辆14的速度计(未示出)或与车辆14的速度计(未示出)通信。陀螺仪52能够操作以检测车辆倾斜,例如围绕急转弯和/或快速转弯。
在图2的示例中,ECU 30通过车辆数据总线54能够操作地连接到部件32-52,车辆数据总线54可以是例如控制器局域网络(“CAN”)总线。当然,图2仅是一个示例,可以理解的是,除了车辆数据总线54之外,ECU还可以通过其他连接方式连接到部件32-52中的某些部件,也可以理解可以使用其他数量的接近传感器34和车辆操作传感器36(例如,省略超声波传感器44和/或陀螺仪52)。
ECU 30能够操作以检测车辆14外部的物体,并且基于来自接近传感器34的数据,可选地还结合来自车辆操作传感器36的数据来确定车辆14接近这些物体的相对速度。例如,ECU 30可以基于车辆14和外部物体之间的接近速度以及车辆14和外部物体之间的接近距离来预测潜在的即将发生的车辆事故(例如,车辆意外事故,诸如碰撞和翻车、以及此类事故的未遂意外事故)。
图3示意性地示出了示例车辆14和接近传感器34A-F(例如外部相机38)的示例位置。每个接近传感器34A-F具有相关联的检测范围,如图3中的54A-F示意性所示。如图所示,检测范围54D与检测范围54B和54F重叠,检测范围54E与检测范围54C和54F重叠。使用外部相机接近传感器38的示例,接近传感器34A-F可以用于在潜在的即将发生的车辆事故之前车辆14周围环境的视频捕获。当然,图3中所示的接近传感器位置仅是示例,可以理解可以使用其他传感器位置。传感器位置可以结合高级驾驶员辅助系统(ADAS)要求或甚至自动驾驶车辆要求来定义,并且在某些情况下可以由这两种系统使用。在一个示例中,传感器34B-C是来自斯通里奇公司(Stoneridge,Inc.)的MIRROREYE相机监测系统的一部分。
图4示意性地示出了ECU 30的示例实施方式。如图4所示,ECU 30包括能够操作地连接到存储器62和通信接口64的处理器60。处理器60包括一个或多个处理电路,例如微处理器、微控制器、专用集成电路(ASIC)等。通信接口64提供ECU 30和其他部件之间的通信(例如,到车辆数据总线54的有线连接)。
存储器62可以包括一种或多种类型的存储器,例如只读存储器(ROM)、随机存取存储器、高速缓存存储器、闪存设备、光存储设备等。在图4的示例中,存储器62存储多个标准集66、预测引擎68和后处理引擎70。
每个标准集66描述了与潜在的即将发生的车辆事故对应的情况,例如潜在的车辆14意外事故(例如,碰撞或翻车)或车辆事故的未遂意外事故。车辆14的潜在碰撞可以是与另一辆车或非车辆物体(例如,树、建筑物、行人等)的碰撞。标准集66可以包括不同类型的意外事故和未遂意外事故的场景,例如正面碰撞、背面碰撞和/或侧面碰撞。
一个标准集66可以基于附近车辆在预定义距离内尾随车辆14,以及车辆14在预定义时间窗口内经历与预定义减速量对应的紧急制动,从而增加与附近车辆发生背面碰撞的可能性,而包括潜在的即将发生的车辆事故。
在另一示例标准集66中,如果车辆14距离物体(例如,另一辆车)30英尺但仅以每小时5英里的相对速度接近物体,则这不对应于潜在的即将发生的车辆事故。然而,如果车辆14距离物体20英尺并且正朝着物体加速或者正以超过预定义阈值的速度接近物体,这确实对应于潜在的即将发生的车辆事故。如本文所用,“接近物体”是指车辆14和物体的相对运动(例如,车辆14和物体朝向彼此移动,或者车辆14和物体中的一个固定而另一个接近固定的一方)。
在涉及翻车的另一示例标准集66中,潜在的即将发生的车辆事故对应于陀螺仪52指示车辆倾斜角高于预定义阈值,连同加速度传感器50指示车辆14速度超过预定义阈值和转向角传感器46指示超过预定义阈值的方向盘角度。
在另一示例标准集66中,潜在的即将发生的车辆事故对应于以下三种相互关联发生的事件:(1)车辆14通过前置相机检测到其正在跟随的车辆的刹车灯,(2)车辆14的传感器,例如雷达40,指示两辆车之间的距离小于“警告”距离阈值,并且(3)ECU 30确定车辆之间的相对速度高于“警告”速度阈值。
在另一示例标准集66中,潜在的即将发生的车辆事故对应于在车辆14的预定义距离内的附近车辆的快速移动,“快速移动”对应于在车道上穿行的附近车辆,其通过附近车辆方向的快速变化而被检测到。在一个示例中,“快速变化”是基于车辆14和附近车辆之间的距离波动来确定的。可选地,标准集66还可以包括超过速度阈值的车辆之间的相对速度。
预测引擎68从接近传感器34和车辆操作传感器36接收输入数据,并确定给定监测周期的输入数据是否满足任何标准集66。如果ECU 30检测到给定监测周期的数据不满足任何标准集66,则ECU 30可以丢弃数据。然而,如果ECU 30检测到给定监测周期的数据确实满足任一标准集66,表明可能即将发生车辆事故,则ECU 30能够操作以开始将来自当前监测周期和后续监测周期的输入数据保存到数据集中以用于进一步分析(例如,由车队管理者22进行分析)。在一个示例中,预测引擎68包括神经网络并且利用神经网络来确定车辆事故是否即将发生。在另一示例中,预测引擎68使用预定义逻辑,例如若则(if-then)语句和/或梯形逻辑,而不使用神经网络来进行确定。
后处理引擎70接收完整的数据集并分析该数据集以确定即将发生的车辆事故是否已发生。在一个示例中,后处理引擎70利用其自身的神经网络来进行分析,该神经网络与预测引擎68是分开的。在一个示例中,后处理引擎70使用预定义逻辑,例如若则(if-then)语句和/或梯形逻辑,而不使用神经网络来进行确定。
例如,后处理引擎70可以使其检测部分地基于车辆14是否在即将发生的车辆事故被预测要发生之后的预定义时间段内靠边停车(因为这样的靠边停车可能发生在碰撞之后)。
后处理引擎70可以使其确定基于车辆14与其预测碰撞的外部物体之间的距离是否小于预定值以及该距离随后是否增长到超过安全跟随距离阈值。例如,如果车辆14距离物体20英尺,并正以每小时70英里的相对速度接近物体,但距离从未小于5英尺,然后距离开始超过100英尺,则后处理引擎70可以确定既没有发生意外事故也没有发生未遂意外事故。在一个示例中,用于构成未遂意外事故的阈值可以根据车队管理者的偏好进行定制。
作为另一示例,如果陀螺仪52指示车辆14倾斜超过预定义倾斜角度但随后恢复直立,则后处理引擎70可以确定车辆没有翻滚。这是否构成未遂事故可以基于车队管理者的偏好来确定,因为不同的车队对于未遂意外事故的判定可能具有不同的容忍度。
基于来自车辆接近传感器34和车辆操作传感器36的一组输入数据,后处理引擎70确定是否发生了令人感兴趣的事故并且哪些事件的视频应该被保存/传输。例如,附近的车辆在道路上穿梭可能是一个潜在的问题并触发记录。在车辆记录系统24确定已经发生指示事故已经过去的退出条件之后,例如在道路上穿梭的附近车辆已经经过车辆14并且不再“靠近”车辆14,后处理引擎70将输入数据与一组规则或神经网络进行比较,以确定视频是否实际捕捉到感兴趣的事故(例如,意外事故或未遂意外事故)。如果后处理引擎70确定视频捕捉了感兴趣的事故,则后处理引擎70可以触发视频的保存或传输(或保存和传输),如果可能,包括确定为什么该事故是一件令人感兴趣事件背后的推理。
图5是使用车辆记录系统24来记录车辆14数据的示例方法100的流程图。ECU 30从接近传感器34和车辆操作传感器36获得当前监测周期的输入数据(步骤102)。在一个示例中,当前监测周期是指几秒或更短数量级的当前采样周期。ECU 30利用预测引擎68来确定输入数据是否满足与潜在的即将发生的车辆事故相对应的标准集66之一(步骤104)。在一个示例中,步骤104包括预测引擎68利用上述预定义逻辑或可选神经网络。如果没有标准集66被满足(步骤106的“否”),则ECU 30删除当前监测周期的输入数据(步骤107),并继续监测后续监测周期的输入数据(步骤102)。
然而,如果标准集66之一被满足(步骤106的“是”),这构成了“进入条件”,则ECU30开始将来自当前监测周期和用于后续监测周期的输入数据保存到数据集23中(步骤108)。“开始保存”是指ECU 30从短期存储(例如,可以包括RAM存储器的输入缓冲器)中获取来自传感器34、36的数据,并保存数据用于长期存储(例如,存储器62的非RAM部分),其中数据被保存以供审查者(例如,车队管理者22)传输和/或最终下载。保存的数据包括已经被记录并用于检测潜在的即将发生的车辆事故的输入数据,并且还可以可选地包括来自传感器34、36的附加传入数据(例如,直到检测到退出事件)。因此,可以在获得整个数据集之前触发在步骤108中开始保存传感器数据。
在一个示例中,短期存储被新传入的传感器数据(例如,在滚动缓冲器中)自动丢弃和/或覆盖,而长期存储不会被新传入的传感器数据自动丢弃和/或覆盖(例如,直到其被传输和/或下载)。
ECU 30分析当前在数据集23中的输入数据以确定是否发生了“退出事件”,表明令人感兴趣的事件已经过去(步骤110)。一些示例退出事件可以包括经过预定义的时间量、检测到碰撞或检测到两个被认为将要碰撞的物体现在彼此相距预定义的距离。其他示例退出事件可以包括车辆14从预测会与其发生事故的物体转向到不同的道路(例如,在拐角处),或驶入出口坡道,从而结束与附近物体的相互作用。因此,标准集66包括一个或多个第一参数(例如,其他车辆被激活的刹车灯、车辆倾斜角、车辆速度),并且退出事件基于一个或多个第二参数(例如,时间的流逝、物体背离),在一些示例中一个或多个第二参数不同于所述一个或多个第一参数。
如果没有检测到退出事件(步骤110的“否”),则ECU 30继续收集数据并分析不断增长的数据集23以发现退出事件的发生。
如果检测到退出事件(步骤110的“是”),则ECU 30停止向数据集23添加新数据,完成数据集23的保存,并将数据集23提供给后处理引擎70(步骤112)。后处理引擎70分析数据集23以确定车辆事故是否实际发生(步骤114)。在一个示例中,步骤114包括后处理引擎70利用上述预定义逻辑或可选神经网络。如果后处理引擎70确定没有发生事故(步骤114的“否”),则ECU 30删除数据集23(步骤116)。
然而,如果后处理引擎70确定确实发生了车辆事故(步骤114的“是”),则ECU 30将数据集23传输给审查者,例如车队管理者22(步骤118)。审查者分析数据集23以确定事故是否发生(步骤120)。一个示例,这包括审查者仅分析数据集23的图像部分(例如,一系列静止照片或视频馈送)。
如果审查者指示没有发生车辆事故(步骤120的“否”),则数据集23被用作预测引擎68的神经网络和/或后处理引擎70的神经网络的训练数据(步骤122),并且删除数据集23(步骤116)。在一个示例中,预测引擎68和/或后处理引擎70的神经网络可以由审查者(例如,车队管理者22)以空中(over the air)方式训练/更新以反映最新的训练数据。
如果审阅者确实确认事故的发生(步骤120的“是”),则数据集23被保存以供将来参考并且可选地还用作预测引擎68和/或后处理引擎70的神经网络的训练数据(步骤124)(例如,以如上所述的空中方式)。在一个示例中,步骤124包括将数据集23保存在车队管理服务器18中的车辆事故数据集的储存库中,数据集23可用于驾驶员指令,和/或在需要数据集23作为与车辆事故有关的证据的情况下(例如在确定车辆事故中谁有过错时)用作证据。
通过检测车辆接近传感器34和车辆操作传感器36数据有用的最相关时间,ECU 30能够操作以显著减少审查者审查车辆数据所花费的时间。
可以提供的可选特征是其中通过请求ECU 30开始保存来自传感器34、36的数据的数据集,车辆14的乘员(例如,驾驶员)可以基于他们的期望触发数据集的记录。这可以提供不与标准集66之一对应的值得注意的事件的记录(例如,仅涉及第三方车辆而不涉及车辆14的车辆意外事故)和/或可以提供虽然最终会满足一个或多个标准集66,但尚未满足任何标准集66的事件的记录(例如,某人驾驶不规律)。乘员请求的记录可以通过后续的乘员请求和/或通过检测到退出事件而被终止(见步骤110)。
虽然现有技术系统已经提出利用有限持续时间的滚动视频缓冲器,但这规定了严格的最大记录长度。在一个示例中,记录系统24可以实现记录包括视频馈送的数据集,所述视频馈送具有不受这种滚动缓冲器约束的任意时间跨度。此外,根据车队运营商的要求,车辆记录系统24是高度可定制的。例如,某些车队12对于什么构成即将发生的车辆事故可以使用不同的标准。此外,作为另一示例,某些车队12可能希望省略后处理引擎70并直接进行到将数据集23传输给审查者。
尽管已经公开了示例实施例,但是本领域技术人员将认识到某些修改将落入本公开的范围内。为此,应研究以下权利要求书以确定本公开的范围和内容。

Claims (15)

1.一种用于车辆的记录系统,包括:
多个接近传感器,所述多个接近传感器被配置为获得指示车辆和外部物体之间距离的数据;
至少一个车辆操作传感器,所述至少一个车辆操作传感器被配置为获得指示驾驶员正如何操作车辆的数据;和
控制器,所述控制器被配置为:
从随机存储器RAM中获得当前监测周期的输入数据,所述输入数据包括来自所述多个接近传感器和所述至少一个车辆操作传感器的数据;
利用预测引擎来确定所述输入数据是否满足多个预定义标准集中的任意一个预定义标准集,多个预定义标准集中的每一个预定义标准集与各个潜在的即将发生的车辆事故相对应;
基于预测引擎指示所述输入数据满足多个标准集中的一个标准集,开始将来自当前监测周期和后续监测周期的所述输入数据保存在非RAM存储器中的数据集中;
基于所述输入数据不满足多个标准集中的任意一个标准集,从随机存储器RAM中删除所述当前监测周期的所述输入数据;
基于对应于多个标准集中的一个标准集的退出事件的发生,完成并停止将输入数据保存在非RAM存储器中的所述数据集中;
其中:
各个潜在的即将发生的车辆事故中的一个车辆事故是即将发生的车辆翻车,并且为即将到来的车辆翻车设置的标准集包括陀螺仪汽车操作传感器,陀螺仪汽车操作传感器指示高于预定义阈值的车辆倾斜角;或
各个潜在的即将发生的车辆事故中的一个车辆事故是即将发生的与所述外部物体中的特定一个的车辆碰撞,并且即将发生的车辆碰撞的退出事件包括车辆和外部物体中的特定一个外部物体之间的距离的至少一个超过预定义距离阈值,车辆转向远离特定的一个外部物体,并且车辆驶入出口坡道。
2.根据权利要求1所述的记录系统,其中:
所述多个接近传感器包括能够操作以记录所述车辆外部环境的图像的车辆外部相机;并且
作为开始在非RAM存储器中保存所述输入数据的一部分,所述控制器被配置为开始将来自所述车辆外部相机的图像保存在非RAM存储器中的所述数据集中。
3.根据权利要求1所述的记录系统,其中,被满足的所述预定义标准集基于一个或多个第一参数,所述退出事件基于与所述一个或多个第一参数不同的一个或多个第二参数。
4.根据权利要求1所述的记录系统,其中,所述预定义标准集指示以下一项或多项:
所述车辆与所述外部物体中的特定一个外部物体之间即将发生的碰撞或碰撞未遂;和
即将发生的所述车辆翻车或险些翻车。
5.根据权利要求4所述的记录系统,其中,所述退出事件包括以下一项或多项:
经过预定义时间量;和
所述车辆与所述外部物体中的所述特定一个外部物体之间的距离超过预定义距离阈值。
6.根据权利要求1所述的记录系统,其中,所述控制器被配置为,基于后处理引擎指示潜在的即将发生的车辆事故已发生:
将所述数据集传输到审查者以确认所述车辆事故;
基于所述审查者确认发生了所述车辆事故,将所述数据集保存在非RAM存储器中的数据集储存库中以供将来参考;和
基于所述审查者指示未发生所述车辆事故,将所述数据集用作预测引擎的神经网络的训练数据。
7.根据权利要求1所述的记录系统,包括控制器局域网络(CAN)总线,其中所述控制器被配置为通过所述CAN总线与所述多个接近传感器、所述至少一个车辆操作传感器、或所述多个接近传感器和所述至少一个车辆操作传感器进行通信。
8.根据权利要求1所述的记录系统,其中所述至少一个车辆操作传感器包括加速度传感器、转向角传感器、制动传感器和陀螺仪中的一个或多个。
9.根据权利要求1所述的记录系统,其中所述多个接近传感器包括以下类型传感器中的一个或多个:激光雷达、无线电雷达、超声波传感器和相机。
10.根据权利要求1所述的记录系统,其中所述控制器被配置为:
基于来自所述车辆的乘员的请求,开始将来自所述当前监测周期和后续监测周期的所述输入数据保存在非RAM存储器中的数据集中。
11.一种记录车辆数据的方法,所述方法包括:
从随机存储器RAM中获得当前监测周期的输入数据,所述输入数据包括来自多个接近传感器的指示车辆与外部物体之间距离的数据,以及来自至少一个车辆操作传感器的指示驾驶员正如何操作所述车辆的数据;
利用预测引擎来确定所述输入数据是否满足多个预定义标准集中的任意一个预定义标准集,多个预定义标准集中的每一个预定义标准集与各个潜在的即将发生的车辆事故相对应;
基于预测引擎指示所述输入数据满足多个标准集中的一个标准集,开始将来自当前监测周期和后续监测周期的所述输入数据保存在非RAM存储器中的数据集中;以及
基于所述输入数据不满足多个标准集中的任意一个标准集,从随机存储器RAM中删除所述当前监测周期的所述输入数据;
基于对应于多个标准集中的一个标准集的退出事件的发生,完成并停止将输入数据保存在非RAM存储器中的所述数据集中;
其中:
各个潜在的即将发生的车辆事故中的一个车辆事故是即将发生的车辆翻车,并且为即将到来的车辆翻车设置的标准集包括陀螺仪汽车操作传感器,陀螺仪汽车操作传感器指示高于预定义阈值的车辆倾斜角;或
各个潜在的即将发生的车辆事故中的一个车辆事故是即将发生的与所述外部物体中的特定一个的车辆碰撞,并且即将发生的车辆碰撞的退出事件包括车辆和外部物体中的特定一个外部物体之间的距离的至少一个超过预定义距离阈值,车辆转向远离特定的一个外部物体,并且车辆驶入出口坡道。
12.根据权利要求11所述的方法,其中,被满足的所述预定义标准集基于一个或多个第一参数,所述退出事件基于与所述一个或多个第一参数不同的一个或多个第二参数。
13.根据权利要求11所述的方法,其中,所述预定义标准集指示以下一项或多项:
所述车辆与所述外部物体中的特定一个外部物体之间即将发生的碰撞或碰撞未遂;和
即将发生的所述车辆翻车或险些翻车。
14.根据权利要求13所述的方法,其中,所述退出事件包括以下一项或多项:
经过预定义时间量;和
所述车辆与所述外部物体中的所述特定一个外部物体之间的距离超过预定义距离阈值。
15.根据权利要求11所述的方法包括,基于后处理引擎指示所述潜在的即将发生的车辆事故已发生:
将所述数据集传输到审查者以确认车辆事故;
基于所述审查者指示确认发生了所述车辆事故,将所述数据集保存在数据集储存库中以供将来参考;并且
基于所述审查者指示未发生所述车辆事故而删除所述数据集。
CN202080033430.7A 2019-05-03 2020-05-01 利用事件检测的车辆记录系统 Active CN113892131B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201962842560P 2019-05-03 2019-05-03
US62/842,560 2019-05-03
PCT/US2020/030992 WO2020227080A1 (en) 2019-05-03 2020-05-01 Vehicle recording system utilizing event detection

Publications (2)

Publication Number Publication Date
CN113892131A CN113892131A (zh) 2022-01-04
CN113892131B true CN113892131B (zh) 2023-10-24

Family

ID=70779936

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202080033430.7A Active CN113892131B (zh) 2019-05-03 2020-05-01 利用事件检测的车辆记录系统

Country Status (4)

Country Link
US (1) US11699312B2 (zh)
EP (1) EP3963550B1 (zh)
CN (1) CN113892131B (zh)
WO (1) WO2020227080A1 (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115147952A (zh) * 2022-06-07 2022-10-04 中国第一汽车股份有限公司 车辆紧急状态的记录方法、装置及电子设备

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102963361A (zh) * 2011-09-01 2013-03-13 通用汽车环球科技运作有限责任公司 操作车辆安全系统的方法
CN104054118A (zh) * 2012-01-13 2014-09-17 脉冲函数F6有限公司 带有三维惯性传感器的远程信息处理系统
CN104044587A (zh) * 2013-03-14 2014-09-17 通用汽车环球科技运作有限责任公司 用于提高处于自主驾驶模式下的车辆的传感器可视性的系统和方法
CN104442813A (zh) * 2013-09-12 2015-03-25 福特全球技术公司 用于驾驶员控制的车辆的碰撞警告
CN105046879A (zh) * 2015-09-15 2015-11-11 西安邦威电子科技有限公司 一种基于重力感应传感器的车辆危险车祸报警系统及方法
CN107110657A (zh) * 2014-11-19 2017-08-29 罗伯特·博世有限公司 基于gps的经学习的控制事件预测
CN109416873A (zh) * 2016-06-24 2019-03-01 瑞士再保险有限公司 具有自动化风险控制系统的自主或部分自主机动车辆及其相应方法
CN208737551U (zh) * 2018-09-30 2019-04-12 深圳智游者科技有限公司 用于车辆的安全信息记录设备

Family Cites Families (49)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5430432A (en) * 1992-12-14 1995-07-04 Camhi; Elie Automotive warning and recording system
US5815093A (en) * 1996-07-26 1998-09-29 Lextron Systems, Inc. Computerized vehicle log
US5815092A (en) 1997-04-22 1998-09-29 Gregg, Iii; Eugene Stuart Combined speed measuring device detector, speed measuring device and printer for verifying vehicle speed
US7386376B2 (en) * 2002-01-25 2008-06-10 Intelligent Mechatronic Systems, Inc. Vehicle visual and non-visual data recording system
US6940398B2 (en) * 2002-05-28 2005-09-06 Shih-Hsiung Li Method and apparatus for object detection and ranging
US7355628B2 (en) 2002-12-20 2008-04-08 Bendix Commercial Vehicle Systems Llc Method and apparatus of maintaining a video signal through brief interruptions of a related control signal
US20070132773A1 (en) * 2005-12-08 2007-06-14 Smartdrive Systems Inc Multi-stage memory buffer and automatic transfers in vehicle event recording systems
US7804426B2 (en) 2006-05-08 2010-09-28 Drivecam, Inc. System and method for selective review of event data
EP2181415A2 (de) 2007-08-28 2010-05-05 Valeo Schalter und Sensoren GmbH Verfahren und anordnung zur auswertung von helligkeitswerten in sensorbildern bei bildauswertenden umfelderkennungssystemen, insbesondere hinsichtlich einer tag-/nachtunterscheidung
US8466781B2 (en) * 2008-06-27 2013-06-18 Ford Global Technologies, Llc System and method for recording vehicle events and for generating reports corresponding to the recorded vehicle events based on driver status
US8473143B2 (en) 2008-12-02 2013-06-25 Caterpillar Inc. System and method for accident logging in an automated machine
US8553131B2 (en) 2010-06-03 2013-10-08 Bendix Commercial Vehicle Systems Llc Six-axis mount
DE112012002885B4 (de) 2011-07-08 2022-01-27 Bendix Commercial Vehicle Systems Llc Verfahren und Vorrichtung zur bildbasierten Fahrzeugerfassung und Entfernungsmessung
WO2013012926A1 (en) 2011-07-21 2013-01-24 Bendix Commercial Vehicle Systems Llc A vehicular fleet management system and methods of monitoring and improving driver performance in fleet vehicles
US20130204513A1 (en) 2012-02-08 2013-08-08 Bendix Commercial Vehicle Systems Llc Protect information stored in ecu from unintentional writing and overwriting
US9227563B2 (en) 2012-09-14 2016-01-05 Bendix Commercial Vehicle Systems Llc Backward movement indicator apparatus for a vehicle
US9344683B1 (en) 2012-11-28 2016-05-17 Lytx, Inc. Capturing driving risk based on vehicle state and automatic detection of a state of a location
DE112012007197T5 (de) 2012-12-05 2015-08-20 Bendix Commercial Vehicle Systems Llc Verfahren und Vorrichtung zum Aktualisieren von Softwarekomponenten in Koordination mit Betriebsablaufbedingungen eines Motorfahrzeugs
US10796510B2 (en) * 2012-12-20 2020-10-06 Brett I. Walker Apparatus, systems and methods for monitoring vehicular activity
US10037689B2 (en) * 2015-03-24 2018-07-31 Donald Warren Taylor Apparatus and system to manage monitored vehicular flow rate
US9058524B2 (en) 2013-06-28 2015-06-16 Bendix Commercial Vehicle Systems Llc Measuring the range to an object, in an image, using size categorization
US9286695B2 (en) 2014-03-13 2016-03-15 Bendix Commercial Vehicle Systems Llc Systems and methods for tracking points within an encasement
US9437055B2 (en) 2014-08-13 2016-09-06 Bendix Commercial Vehicle Systems Llc Cabin and trailer body movement determination with camera at the back of the cabin
US10055643B2 (en) 2014-09-19 2018-08-21 Bendix Commercial Vehicle Systems Llc Advanced blending of stitched images for 3D object reproduction
US9990550B2 (en) 2014-09-19 2018-06-05 Bendix Commercial Vehicle Systems Llc Wide baseline object detection stereo system
US11069257B2 (en) * 2014-11-13 2021-07-20 Smartdrive Systems, Inc. System and method for detecting a vehicle event and generating review criteria
US20180299284A1 (en) * 2014-12-02 2018-10-18 Kevin Sunlin Wang Method and System For Avoidance of Accidents
US10633091B2 (en) * 2015-01-29 2020-04-28 Scope Technologies Holdings Limited Accident monitoring using remotely operated or autonomous aerial vehicles
US9718405B1 (en) * 2015-03-23 2017-08-01 Rosco, Inc. Collision avoidance and/or pedestrian detection system
EP3073449A1 (en) 2015-03-23 2016-09-28 Continental Automotive GmbH Apparatus and method for recording data associated with a vehicle
US9924085B2 (en) 2015-04-09 2018-03-20 Bendix Commercial Vehicle Systems Llc Apparatus and method for disabling a driver facing camera in a driver monitoring system
US9860445B2 (en) 2015-06-15 2018-01-02 Bendix Commercial Vehicle Systems Llc Dual node composite image system architecture
US9996756B2 (en) 2015-08-31 2018-06-12 Lytx, Inc. Detecting risky driving with machine vision
US9902322B2 (en) 2015-10-30 2018-02-27 Bendix Commercial Vehicle Systems Llc Filling in surround view areas blocked by mirrors or other vehicle parts
US9674414B1 (en) 2015-12-02 2017-06-06 Bendix Commercial Vehicle Systems Llc Camera module having compact camera subassembly insertable into the camera housing
US9925987B1 (en) 2015-12-11 2018-03-27 Lytx, Inc. Driving abnormality detection
US10922559B2 (en) 2016-03-25 2021-02-16 Bendix Commercial Vehicle Systems Llc Automatic surround view homography matrix adjustment, and system and method for calibration thereof
US9896096B2 (en) * 2016-04-11 2018-02-20 David E. Newman Systems and methods for hazard mitigation
US10594934B2 (en) 2016-11-17 2020-03-17 Bendix Commercial Vehicle Systems Llc Vehicle display
US10281924B2 (en) 2016-12-07 2019-05-07 Bendix Commerical Vehicle Systems Llc Vision system for vehicle docking
US10503176B2 (en) 2016-12-30 2019-12-10 Bendix Commercial Vehicle Systems Llc Self-ordering of fleet vehicles in a platoon
US10372123B2 (en) 2016-12-30 2019-08-06 Bendix Commercial Vehicle Systems Llc “V” shaped and wide platoon formations
US10073464B2 (en) 2016-12-30 2018-09-11 Bendix Commercial Vehicle Systems Llc Varying the distance between vehicles in a platoon
US10482767B2 (en) 2016-12-30 2019-11-19 Bendix Commercial Vehicle Systems Llc Detection of extra-platoon vehicle intermediate or adjacent to platoon member vehicles
US20180273051A1 (en) 2017-03-24 2018-09-27 Bendix Commercial Vehicle Sytems LLC Controller and Method of Setting an Intervention Zone in a Lane Departure Warning System
US10067897B1 (en) 2017-05-02 2018-09-04 Bendix Commercial Vehicle Systems Llc System and method for determining the positions of side collision avoidance sensors on a vehicle
US10279808B2 (en) 2017-05-17 2019-05-07 Bendix Commercial Vehicle Systems Llc Adaptive cruise control system with speed based mode
US10783782B1 (en) * 2019-03-08 2020-09-22 International Business Machines Corporation Vehicle management
US11132562B2 (en) * 2019-06-19 2021-09-28 Toyota Motor Engineering & Manufacturing North America, Inc. Camera system to detect unusual circumstances and activities while driving

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102963361A (zh) * 2011-09-01 2013-03-13 通用汽车环球科技运作有限责任公司 操作车辆安全系统的方法
CN104054118A (zh) * 2012-01-13 2014-09-17 脉冲函数F6有限公司 带有三维惯性传感器的远程信息处理系统
CN104044587A (zh) * 2013-03-14 2014-09-17 通用汽车环球科技运作有限责任公司 用于提高处于自主驾驶模式下的车辆的传感器可视性的系统和方法
CN104442813A (zh) * 2013-09-12 2015-03-25 福特全球技术公司 用于驾驶员控制的车辆的碰撞警告
CN107110657A (zh) * 2014-11-19 2017-08-29 罗伯特·博世有限公司 基于gps的经学习的控制事件预测
CN105046879A (zh) * 2015-09-15 2015-11-11 西安邦威电子科技有限公司 一种基于重力感应传感器的车辆危险车祸报警系统及方法
CN109416873A (zh) * 2016-06-24 2019-03-01 瑞士再保险有限公司 具有自动化风险控制系统的自主或部分自主机动车辆及其相应方法
CN208737551U (zh) * 2018-09-30 2019-04-12 深圳智游者科技有限公司 用于车辆的安全信息记录设备

Also Published As

Publication number Publication date
EP3963550A1 (en) 2022-03-09
CN113892131A (zh) 2022-01-04
US11699312B2 (en) 2023-07-11
US20200349779A1 (en) 2020-11-05
WO2020227080A1 (en) 2020-11-12
EP3963550B1 (en) 2023-09-13

Similar Documents

Publication Publication Date Title
US9840254B2 (en) Method and system for adaptive detection and application of horn for an autonomous vehicle
US8620549B2 (en) Vehicle safety systems and methods
US9280857B2 (en) Dynamic uploading protocol
US20150193885A1 (en) Continuous identity monitoring for classifying driving data for driving performance analysis
CN111055840A (zh) 车辆对基础设施(v2i)消息传递系统
US10089869B1 (en) Tracking hit and run perpetrators using V2X communication
US11586210B2 (en) Preemptive logical configuration of vehicle control systems
CN113853640B (zh) 电子控制装置
WO2019106787A1 (ja) 車両制御装置、それを有する車両、および制御方法
CN109712431A (zh) 驾驶辅助装置及驾驶辅助系统
US20210158697A1 (en) Intersection and road monitoring for distracted or unsafe drivers
JP2020052863A (ja) 車両監視装置
CN113022441A (zh) 一种车辆盲区的检测方法、装置、电子设备及存储介质
CN113892131B (zh) 利用事件检测的车辆记录系统
US11724641B2 (en) Hazard condition warning for package delivery operation
CN116279341B (zh) 安全刹车方法和装置、电子设备和存储介质
WO2020230683A1 (ja) 走行情報記録装置、走行情報記録方法及び走行情報記録プログラム
US20170092121A1 (en) Method and System for Determining and Using Property Associations
CN112419783A (zh) 一种车辆辅助驾驶系统、方法和装置
US20230040552A1 (en) System for recording event data of autonomous vehicle
CN114913712A (zh) 用于防止车辆事故的系统和方法
JP6921302B2 (ja) 通知システムおよび通知方法
CN110880250B (zh) 危险预警系统及方法
WO2022206727A1 (zh) 一种驾驶提醒方法及装置
CN113808435B (zh) 用于车辆的辅助装置、相应的方法及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant