CN110992516A - 自主交通工具记录数据的自动收集 - Google Patents

自主交通工具记录数据的自动收集 Download PDF

Info

Publication number
CN110992516A
CN110992516A CN201910920282.XA CN201910920282A CN110992516A CN 110992516 A CN110992516 A CN 110992516A CN 201910920282 A CN201910920282 A CN 201910920282A CN 110992516 A CN110992516 A CN 110992516A
Authority
CN
China
Prior art keywords
data
vehicle
memory device
volatile memory
collected
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910920282.XA
Other languages
English (en)
Inventor
佐藤淳一
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Micron Technology Inc
Original Assignee
Micron Technology Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Micron Technology Inc filed Critical Micron Technology Inc
Publication of CN110992516A publication Critical patent/CN110992516A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07CTIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C5/00Registering or indicating the working of vehicles
    • G07C5/08Registering or indicating performance data other than driving, working, idle, or waiting time, with or without registering driving, working, idle or waiting time
    • G07C5/0841Registering performance data
    • G07C5/085Registering performance data using electronic data carriers
    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07CTIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C5/00Registering or indicating the working of vehicles
    • G07C5/08Registering or indicating performance data other than driving, working, idle, or waiting time, with or without registering driving, working, idle or waiting time
    • G07C5/0841Registering performance data
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0602Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/0626Reducing size or complexity of storage systems
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/02Ensuring safety in case of control system failures, e.g. by diagnosing, circumventing or fixing failures
    • B60W50/0205Diagnosing or detecting failures; Failure detection models
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/02Ensuring safety in case of control system failures, e.g. by diagnosing, circumventing or fixing failures
    • B60W50/0225Failure correction strategy
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/0088Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots characterized by the autonomous decision making process, e.g. artificial intelligence, predefined behaviours
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0602Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/0614Improving the reliability of storage systems
    • G06F3/0619Improving the reliability of storage systems in relation to data integrity, e.g. data losses, bit errors
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0628Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0629Configuration or reconfiguration of storage systems
    • G06F3/0631Configuration or reconfiguration of storage systems by allocating resources to storage systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0628Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0629Configuration or reconfiguration of storage systems
    • G06F3/0635Configuration or reconfiguration of storage systems by changing the path, e.g. traffic rerouting, path reconfiguration
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0668Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/0671In-line storage system
    • G06F3/0673Single storage device
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0668Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/0671In-line storage system
    • G06F3/0673Single storage device
    • G06F3/0679Non-volatile semiconductor memory device, e.g. flash memory, one time programmable memory [OTP]
    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07CTIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C5/00Registering or indicating the working of vehicles
    • G07C5/008Registering or indicating the working of vehicles communicating information to a remotely located station
    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07CTIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C5/00Registering or indicating the working of vehicles
    • G07C5/08Registering or indicating performance data other than driving, working, idle, or waiting time, with or without registering driving, working, idle or waiting time

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Automation & Control Theory (AREA)
  • General Engineering & Computer Science (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Evolutionary Computation (AREA)
  • Artificial Intelligence (AREA)
  • Game Theory and Decision Science (AREA)
  • Medical Informatics (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Computer Security & Cryptography (AREA)
  • Health & Medical Sciences (AREA)
  • Business, Economics & Management (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Traffic Control Systems (AREA)

Abstract

本申请案涉及自主交通工具记录数据的自动收集。一种用于自主交通工具的方法包含:由主机系统控制所述交通工具的至少一个系统;由存储器装置自动收集由所述至少一个系统产生的数据,其中由所述存储器装置独立于所述主机系统的控制而收集所述数据;及将所述数据存储于所述存储器装置中。

Description

自主交通工具记录数据的自动收集
相关申请案
本申请案主张2018年10月3日提出申请且标题为“自主交通工具记录数据的自动收集(AUTOMATIC COLLECTION OF AUTONOMOUS VEHICLE LOGGING DATA)”的序列号为16/150,618的美国专利申请案的申请日期的权益,所述申请案的全部内容如同完全陈述于本文中一般以引用方式并入。
本申请案还涉及佐藤纯一(Junichi Sato)的2018年6月18日提出申请的标题为“响应于事件检测而下载系统存储器数据(Downloading System Memory Data inResponse to Event Detection)”的序列号为16/010,646的美国非临时申请案,所述申请案的全部内容如同完全陈述于本文中一般以引用方式并入。
本申请案还涉及蒙德罗(Mondello)等人的2018年1月25日提出申请的标题为“用于交通工具的交通工具中监测及报告设备(In-Vehicle Monitoring and ReportingApparatus for Vehicle)”的序列号为15/879,954的美国非临时申请案,所述申请案的全部内容如同完全陈述于本文中一般以引用方式并入。
技术领域
本文中所揭示的至少一些实施例一般来说涉及存储器系统,且更特定来说(但不限于)涉及自主交通工具数据的自动收集及存储。
背景技术
自主交通工具通常包含许多传感器来帮助控制自主交通工具。在涉及交通工具的事故、碰撞或接近碰撞的情形中,审阅恰好在事故之前及/或在事故期间记录的传感器数据以帮助可能地确定事故的原因及/或是否可存在交通工具故障可为有益的。
在于事故期间失去电力的情况下,存储于易失性存储器中的交通工具传感器数据可丢失。并且,从自主交通工具收集的传感器数据在所述数据未被压缩时是最有用的。
存储数据的存储器系统包含例如固态驱动器(SSD)等存储系统,且可包含存储数据的一或多个存储器组件。举例来说,存储器系统可包含例如非易失性存储器装置及易失性存储器装置等存储器装置。一般来说,主机系统可控制存储器系统来将数据存储于存储器系统的存储器装置处且检索存储于存储器系统处的数据。
发明内容
在一个方面中,本申请案涉及一种用于自主交通工具的方法,所述方法包括:由主机系统控制所述交通工具的至少一个系统;由存储器装置自动收集由所述至少一个系统产生的数据,其中由所述存储器装置独立于所述主机系统的实时控制而收集所述数据;及将所述数据存储于所述存储器装置中。
在另一方面中,本申请案涉及一种自主交通工具,所述自主交通工具包括:至少一个传感器,其经配置以收集传感器数据;非易失性存储器装置,其经配置以接收数据;至少一个计算装置,其经配置以控制所述交通工具的至少一个操作;及存储器,其存储指令,所述指令经配置以指令所述至少一个计算装置进行以下操作:由所述非易失性存储器装置自动收集由所述交通工具在操作期间产生的第一数据,其中所述第一数据包含传感器数据;及将所述第一数据存储于所述非易失性存储器装置中。
在另一方面中,本申请案涉及一种非暂时性计算机存储媒体,其存储指令,所述指令在于计算装置上执行时致使所述计算装置执行用于自主交通工具的方法,所述方法包括:监测所述交通工具的主机系统与所述交通工具的至少一个系统之间的通信,其中所述主机系统控制所述至少一个系统;由存储器装置收集由所述至少一个系统产生的数据,其中基于监测所述主机系统与所述至少一个系统之间的所述通信而收集所述数据;及将所述经收集数据存储于所述存储器装置中。
附图说明
在附图的各图中以实例而非限制方式图解说明各实施例,其中相似参考指示类似元件。
图1图解说明根据一个实施例的包含自动收集数据的存储器装置的自主交通工具。
图2图解说明根据一个实施例的在操作期间收集数据的交通工具。
图3图解说明根据一个实施例的将数据存储于非易失性存储器中的交通工具。
图4图解说明根据一个实施例的存储从交通工具接收的事件数据的服务器。
图5图解说明根据一个实施例的使用人工神经网络(ANN)模型配置的交通工具的实例。
图6展示根据一个实施例的用以从自主交通工具自动收集且存储数据的方法。
图7展示根据一个实施例的响应于对从交通工具收集的所存储数据的分析而控制及/或配置的自主交通工具。
图8是包含一或多个各种组件及/或子系统的自主交通工具的框图,所述各种组件及/或子系统中的每一者可在各种实施例中经更新以配置交通工具及/或执行与交通工具相关联的其它动作。
图9是根据各种实施例的集中式自主交通工具操作系统的框图。
具体实施方式
在现有自主交通工具中使用的存储器产品不执行对由交通工具的各种系统产生的数据(例如,从交通工具的传感器或处理器获得的数据)的自动记录。而是,现有系统需要主机控制器向存储器装置发送命令以便引起数据的记录。举例来说,现有方法需要主机控制器向存储器装置发出命令(例如,在正常写入操作中使用的命令)。作为另一实例,需要现有系统设计者定义用于存储特定较关键操作数据的数据模式及/或数据地址。
前述情况提出由交通工具产生的大量或特定类型的数据不可用于稍后分析以评估交通工具操作的技术问题。举例来说,在事故或另一不利操作事件的情况下,由交通工具在操作期间收集或产生的数据是不可用的(例如,由于缺少充足数据而无法确定不利事件的原因)。在一些情形中,所述数据是不可用的,因为所述数据存储于易失性存储器中,且存储器的内容由于因不利事件导致的电力丢失而丢失。
本文中所揭示的各种实施例通过提供在不需要主机控制器的任何控制动作或先前设计配置的情况下自身收集由自主交通工具的各种组件产生的数据的存储器装置而解决以上技术问题。举例来说,主机控制器的用户、设计者或程序员不需要知晓特定交通工具状况或采取任何特定动作来致使自动记录在交通工具的操作期间收集的数据。而是,存储器装置经配置以自动收集且存储从交通工具的各种系统获得的数据(在不需要设计者对主机系统的先前配置或编程的情况下)。
在一个实施例中,存储器装置自身收集数据而非依赖于或使用主机控制器来收集数据。举例来说,存储器装置自动存取由传感器或交通工具的其它系统产生的数据。并且,存储器装置可自动收集或接收已由主机控制器发送到交通工具的一或多个其它系统(例如,在正常操作期间或响应于如安全气囊展开等事件而发送)的特定类型的数据。
在一些实施例中,存储器装置自身将重要数据自动收集到交通工具的不同区域(例如,预定物理位置或预定存储组件)中。举例来说,可作为收集及存储数据的部分来将特定数据从易失性存储器复制或传送到非易失性存储器或存储装置。
在一些实施例中,在由存储器装置自动收集记录数据之后,分析数据。基于此分析,可为交通工具确定新配置。举例来说,可基于分析而重新配置交通工具的系统(例如,导航或引擎控制系统)或使其复位。在一个实例中,当汽车位于经销商或其它位置处且正进行维修工作时,特殊工具或其它适当配件可连接到交通工具且用于分析自动收集的数据。
在一些情形中,上文的数据的自动记录可通过使用无线通信(例如,5G或蜂窝式网络)获得来自交通工具的记录数据来补充。举例来说,可将记录数据发射到监测交通工具的操作的中央服务器。中央服务器可收集且分析所记录数据。基于此分析,可配置交通工具的实时操作。
本文中所揭示的至少一些实施例涉及一种用于操作自主交通工具的方法。所述交通工具的一或多个系统由主机系统控制。由存储器装置自动收集数据。所述经收集数据是由所述一或多个系统产生。由存储器装置独立于主机系统的实时控制而收集数据。在收集之后,将数据存储于存储器装置中。
在一个实例中,自主交通工具包含收集传感器数据的一或多个传感器。交通工具的非易失性存储器装置用于接收各种待存储的数据。一或多个计算装置控制交通工具的操作。这些计算装置中的至少一者用于控制非易失性存储器装置自动收集由交通工具在操作期间产生的数据。此数据可包含传感器数据。所述计算装置是(举例来说)存储器装置的控制器,且所述控制器执行存储器装置的固件中的指令。在收集数据之后,存储器装置存储数据(例如,使用非易失性存储器,例如3DXP存储器)。
图1图解说明根据一个实施例的包含自动收集数据的存储器装置180的自主交通工具170。由包含(举例来说)交通工具系统176、183、185的交通工具170的各种系统产生数据。举例来说,传感器178由交通工具系统176及183使用。每一系统可对传感器数据执行处理且接着将数据发射到交通工具的另一组件及/或可将原始传感器数据传递到另一组件。
在一个实例中,经由通信总线174将数据从交通工具系统176发送到主机系统172。主机系统172控制交通工具系统176的各种操作(例如,图像处理与辨识系统)。主机系统172经由总线174向交通工具系统176发送命令。举例来说,命令可用于控制引擎操作或实施操纵控制。
主机系统172还可控制其它系统,例如交通工具系统183及/或交通工具系统185。主机系统172可经由交通工具170的一或多个通信路径(例如,总线174)从这些系统接收回复及/或数据。
在一个实施例中,存储器装置180监测总线174上的通信。存储器装置180可从总线174收集选定数据。在一个实例中,存储器装置180侦听特定预定类型的数据以从总线174提取。所提取数据由存储器装置180存储。
在一个实施例中,存储器装置180将经收集数据存储于预定物理位置186中。物理位置186可对应于交通工具170的物理方位或位置。在其它情形中,物理位置186可对应于特定预定组件或一类型的组件(例如,特定类型的存储器存储媒体)。
在一个实施例中,存储器装置180收集存储于易失性存储器184中的数据。在一个实例中,易失性存储器184由主机系统172使用。举例来说,主机系统172可从交通工具170的各种系统收集数据。此数据可存储于易失性存储器184中。在一些情形中,存储器装置180经配置以在主机系统172不了解及/或不受所述主机系统控制的情况下自动从易失性存储器184提取数据(例如,特定预定类型的数据)。
在一个实施例中,存储器装置180从传感器178收集数据。此收集由存储器装置180独立于主机系统172的任何控制而执行。
在一个实施例中,在由存储器装置180收集数据之后,将数据存储于存储器装置180中。可在稍后时间经由无线接口182将所存储数据发射到服务器188。
在一个实施例中,服务器188分析从存储器装置180接收的经收集数据。基于此分析,可实施或更新交通工具170的一或多个配置。举例来说,服务器188可经由无线接口182向存储器装置180发送关于待在交通工具170中实施的配置的改变的命令。存储器装置180可控制配置改变的实施。
在另一实施例中,基于对经收集数据的分析,服务器188向主机系统172发送通信。在一个实例中,此通信可经由无线接口(未展示)来发送。所述通信可为(举例来说)更新交通工具170的配置的命令。此更新可在主机系统172的控制下实施。
在一个实施例中,经收集数据存储于非易失性存储器装置(例如,存储器装置180)中。在存储之后,从非易失性存储器装置移除数据,且(举例来说)由服务器(例如,云中的服务器)(例如,服务器188)分析数据。
在一个实施例中,使用对所存储数据的分析来识别操作交通工具的软件(例如,在主机系统172上执行以控制导航的软件)的不安全方面或设计。响应于此分析,可针对交通工具执行控制及/或配置动作(例如,经由无线接口182)。在一些情形中,可针对其它交通工具(例如,相同类型及/或使用相同或类似软件的交通工具)执行相同或类似控制及/或配置。在各种实施例中,所述交通工具可为(举例来说)数种类型的自主交通工具(例如,汽车、卡车、飞机、无人机、船只等)中的任一者。
在各种实施例中,经收集数据可由交通工具的数种非易失性存储器系统中的任一者存储(例如,在物理位置186处)。存储器系统的实例是存储系统,例如固态驱动器(SSD)。在一些实施例中,存储器系统是混合存储器/存储系统。一般来说,交通工具可利用包含一或多个存储器装置的存储器系统。存储器装置可包含媒体。所述媒体可为非易失性存储器装置,例如,“负与(negative-and)”(NAND)。
在一个实施例中,使用云服务(有时简单地称为云)来从交通工具接收经收集数据且接着分析数据。举例来说,当激活交通工具的自动紧急制动系统时,将所述制动事件的事件数据(例如,位置)发射到(举例来说)服务器或云服务中的其它计算装置。
在一个实施例中,从交通工具接收且分析由存储器装置180收集的事件数据。举例来说,可对所接收事件数据使用图案辨识。在一个情形中,使用机器学习来辨识图案或数据中的规律。在一些情形中,可从加标签的训练数据训练图案辨识系统(例如,监督式学习)。在其它情形中,当无加标签的数据可用时,可使用其它算法来识别先前未知的图案(例如,无监督学习)。
在一个实施例中,基于交通工具中的制动踏板的测量而检测在交通工具上发生的事件。举例来说,可基于脚的压力或移动的范围与预定阈值的比较而识别事件。在另一实施例中,基于交通工具的减速率而识别事件。举例来说,如果减速率超过预定阈值,那么识别事件(例如,接近碰撞)。在另一实例中,在预定时间段内观测减速率(例如,在所述时间段内将速率求平均)。响应于检测到此事件,下载系统存储器数据。此类事件的检测可触发存储器装置180收集数据。
在一个实施例中,响应于分析事件数据,执行至少一个动作。举例来说,可向交通工具170(例如,从其获得经收集数据)发送通信以配置交通工具的软件及/或停用交通工具或软件的一或多个功能。
在一个实施例中,响应于识别出不安全软件(例如,如基于图案辨识或对经收集数据的其它分析而确定),服务器可执行一或多个动作。举例来说,服务器可向当前交通工具发送通信。在一个情形中,所述通信可致使当前交通工具采取校正动作,例如终止自主导航模式、制动或改变路线,或者更新交通工具的固件(例如,经由空中固件更新)。
在一个实施例中,响应于接收到来自已分析由存储器装置180收集的数据的服务器的通信,交通工具170可关闭其自主驾驶模式、使用备用系统,及/或激活制动系统以停止交通工具。
在另一实施例中,云服务可向服务器或监测其它交通工具的操作状态(例如,中央监测服务)的其它计算装置发送通信。所述通信可(举例来说)识别出软件组件是不安全的。
在一个实施例中,对交通工具是否已经历制动事件及/或牵涉到事故中的确定可基于来自交通工具的一或多个传感器的数据。举例来说,来自交通工具的加速度计的数据可指示交通工具的迅速减速度(例如,减速度超过阈值)。在另一情形中,数据可指示已激活交通工具的紧急系统,例如,安全气囊、紧急制动系统等。在一些实施例中,前述事件中的任一者及/或组合可视为针对其将所下载数据发射到服务器的事件。与前述事件相关联的数据可由存储器装置180收集。
在一个实施例中,当前交通工具上的一或多个传感器(例如,传感器178)用于获得关于在交通工具行进时的制动事件及/或交通工具的环境中的物体的数据。来自传感器的数据及/或基于对传感器数据的分析而产生的数据及/或其它数据可在由存储器装置180自动收集之后(举例来说)无线地(例如,使用3G、4G或5G网络或者其它基于无线电的通信系统)发射到云服务。
在一个实施例中,响应于识别出基于经收集数据而确定的不安全软件,配置交通工具的一或多个动作。举例来说,可向交通工具发送空中固件更新以便更新交通工具的计算装置的固件(例如,此更新致使交通工具避开经识别的不安全功能)。在一个实例中,固件更新交通工具的导航系统。
图2图解说明根据一个实施例的在导航期间使用传感器收集数据的自主交通工具200。举例来说,自主交通工具200在行进期间检测各种物体。交通工具200还检测触发将数据(例如,从系统存储器)下载到非易失性存储器装置的特定事件。在一个实例中,交通工具200检测已发生与物体(例如,另一交通工具)的碰撞的事件。响应于检测到碰撞,交通工具200的计算系统致使将系统存储器数据下载到非易失性存储器装置。进行此动作以准许在碰撞之后分析所下载数据。在一个实例中,前述数据中的任一者可由存储器装置180自动收集。
更特定来说,在一个实施例中,图2图解说明位于交通工具200上以用于收集有关交通工具的操作的信息的车载感测系统。此经收集数据中的任一者可为(举例来说)响应于检测到事件而从系统存储器及/或从其它易失性存储器下载或在交通工具的正常操作期间常规地收集的数据的一部分。举例来说,感测系统可用于收集物体及事件数据以用于发送到云服务来存储以供分析。
在各种实施例中,感测系统可通常包含一或多个传感器220、处理器230、存储器240及通信装置(例如,发射器250)。除物体数据之外,其它数据也可经收集以供发送到云服务。
在各种实施例中,感测系统可包含经配置以收集关于自主交通工具200的操作方面(例如速度、交通工具速度、交通工具加速度、制动力、制动减速度等等)的信息的一或多个传感器220。经配置以收集有关操作驾驶特性的信息的代表性传感器可包含(但不限于)转速计(如交通工具速度传感器或车轮速度传感器)、制动压力传感器、燃料流量传感器、操纵角度传感器等等。
在各种实施例中,感测系统可另外或替代地包含经配置以收集关于自主交通工具200在其中操作的静态环境的信息(例如交通工具周围的物理物体的存在及内容)的一或多个传感器220。物理物体包含(举例来说)标记及交通信号(例如,停止标志、建筑区、限速标志、停止灯)、道路车道划分标志(例如,实线及虚线车道线)等等。经配置以收集此静态操作环境信息的代表性传感器可包含经定位及定向使得其相应视场可捕获各自经配置以收集的相应信息的面向外的相机。举例来说,经配置以捕获周围标记的相机可配置为朝向自主交通工具200的前面或配置于所述自主交通工具的顶部上且定向为面向前(例如,笔直向前或可能地以直到约45度向侧面倾斜),以便在自主交通工具200向前行进时捕获其视场内的路边及头顶标记/交通信号。
作为另一实例,经配置以捕获道路车道划分标志的相机可定位于自主交通工具200的侧面上或偏离其前/后四分之一且可在某种程度上向下定向,以便捕获交通工具自主200的两侧上的道路车道划分标志。用于收集静态操作环境信息的额外代表性传感器可包含经配置以从基站或传递通常可在标记上发现或以其它方式与自主交通工具200的静态操作环境相关的信息的其它发射器接收无线信号的接收器。同样地,全球定位系统(GPS)或其它位置相关传感器可用于收集关于交通工具200在其中操作的静态环境的信息,例如自主交通工具200正在哪条街道上驾驶、所述街道是交通干道(例如,公路)还是其它类型,及所述位置是在城市中还是郊区。
在各种实施例中,感测系统可另外或替代地包含一或多个传感器220,所述传感器经配置以收集关于自主交通工具200在其中操作的动态环境的信息,例如有关移动的物体(例如,其它附近交通工具)的存在(例如,连同此交通工具的位置、行进方向、速率及加速率/减速率)的信息以及有关附近行人的存在的类似信息。经配置以收集此动态操作环境信息的代表性传感器可包含经定位及定向使得其相应视场可捕获各自经配置以收集的相应信息的面向外的相机。举例来说,面向外的相机可围绕自主交通工具200的周界(例如,前面、后面、顶部、侧面及/或四分之一处)定位以捕获例如交通工具辨识算法等图像处理技术可应用到的图像。另外或替代地,一或多个光学传感器(例如,激光雷达、红外)、声波传感器(例如,声呐、超声波)或类似检测传感器可围绕交通工具定位以用于测量动态操作环境信息,例如距离、相对速度、相对加速度及附近有人驾驶交通工具或自主交通工具的运动的类似特性。
在各种实施例中,感测系统可将通常在大多数自主交通工具中发现的那些传感器(例如(但不限于),经配置以用于测量速度、RPM、燃料消耗率及交通工具的操作的其它特性的那些传感器,以及经配置以用于检测接近交通工具的其它交通工具或障碍物的存在的那些传感器)用作传感器220。传感器220可另外或替代地包括安装于自主交通工具200上以用于促进与驾驶方式相关的额外信息的收集的售后市场传感器。
在各种实施例中,交通工具200的感测系统可进一步包括车载处理器230、车载存储器240及车载发射器250。一般来说,在各种实施例中,处理器230可经配置以执行存储于存储器240上的用于处理由传感器200收集的信息以用于交通工具200外的后续发射的指令。在各种实施例中,车载处理器230可另外或替代地经配置以执行存储于存储器240上的用于处理来自两个或多于两个传感器220的信息以产生有关由自主交通工具200检测的物体特性的其它信息的指令。举例来说,在一实施例中,处理器230可处理操作特性(例如制动减速度)、旁边动态环境特性(例如跟随距离)以避开突然出现在道路上的碎片或动物。应认识到,此仅为说明性实例,且所属领域的技术人员将认识到可由处理器处理传感器数据以产生有关由自主交通工具200检测的物体的其它信息的其它方式。
在各种实施例中,处理器230可经配置以预处理来自传感器220的信息以用于经由发射器250进行后续车外发射。预处理活动可包含筛选、组织来自传感器220的信息且将其封装成用于高效无线发射的格式及通信协议中的一者或组合。在此些实施例中,可接着由发射器250实时地或以周期性间隔在交通工具200外发射经预处理信息,其中所述经预处理信息可由附近有人驾驶交通工具或自主交通工具及/或远程服务器接收。应了解,根据稍后描述的各种实施例,发射器250可在经配置以将经预处理信息直接发射到附近有人驾驶交通工具或自主交通工具时利用短程无线信号(例如,Wi-Fi、蓝牙),且发射器250可在将经预处理信息直接发射到远程服务器时利用较长程信号(例如,蜂窝式、卫星)。
在一个实施例中,处理器230可为独立于主机系统而操作以从交通工具200自动收集数据的存储器装置(例如,存储器装置180)的处理器。
如同传感器220,在各种实施例中,处理器230及/或车载发射器250可整体地安装于交通工具200(例如,汽车计算机、连接式交通工具)中,而在其它实施例中,处理器230及/或发射器250可经添加作为售后市场特征。
图3图解说明根据一个实施例的将数据存储于非易失性存储器735中的交通工具711。在一个实施例中,控制系统731用于响应于检测到与交通工具711相关联的事件而下载数据。在一个实例中,控制系统731包含于图1的存储器装置180中,且所下载数据由存储器装置180收集。
交通工具711包含传感器737。控制系统731还控制交通工具的至少一个操作(例如导航及/或制动)。控制系统731包含一或多个处理器733、非易失性存储器735及系统存储器729,所述系统存储器包含易失性存储器727。系统存储器729还可包含(举例来说)存储于其它易失性存储器装置(未展示)中的交通工具711的数据。
易失性存储器727可为(举例来说)动态随机存取存储器装置。易失性存储器727用于存储在交通工具的操作期间由软件使用的数据,例如传感器数据及关于控制系统731的操作状态的数据。传感器数据(举例来说)由传感器737收集。
非易失性存储器735用于在检测到事件之后存储来自易失性存储器727的数据。非易失性存储器735的实例包含3D XPoint存储器及NAND快闪存储器,以及可装卸存储器装置,例如固态磁盘。
交通工具711使用传感器737及控制系统731来检测各种事件,如上文所提及。这些事件可包含(举例来说)交通工具711与物体的碰撞。其它事件可为对系统活动(例如紧急制动系统激活或传感器数据超过阈值)的检测。当检测到事件时,将存储于易失性存储器727中的数据下载到非易失性存储器735。所存储数据的实例包含传感器数据(例如关于加速度、交通工具速度及制动状态的数据)、激光雷达及视频输入、位置数据及控制系统状态(例如指示在事件期间执行的软件的操作状态的程序计数器)。在一些实施例中,在控制系统731检测到事件之后,在特定持续时间(例如少于五秒到十秒)内执行将易失性数据下载到非易失性数据。
在一个实施例中,交通工具711的控制系统731可经配置以从非易失性存储器提取事件数据且分析所述数据。在检测到事件之后,在下载后提取事件数据。举例来说,可将事件数据无线地发射到监测交通工具711的行进及操作的中央服务器。
在一个实施例中,仅下载系统存储器729的预定部分。处理器733可在检测到事件之后确定待下载的预定部分。在另一实施例中,可以基于数据的优先级的次序逐部分地下载来自系统存储器729的数据。优先级可由控制系统731检测的事件的类型确定。
图4图解说明根据一个实施例的存储从交通工具111接收的事件数据的服务器101。在一个实例中,如果检测到交通工具111与物体155的碰撞,那么将事件数据160(例如,存储于图3的易失性存储器727中)从系统存储器729下载到非易失性存储器735。事件数据160可包含例如传感器数据103(从交通工具111的传感器获得)、位置数据163、与紧急制动系统的激活相关的数据或从人工神经网络输出的数据等数据。在操作期间,交通工具711收集关于所检测物体(例如物体155及物体157)的数据。
从非易失性存储器提取事件数据160且通过无线通信网络102传递到服务器101。服务器101分析事件数据160以确定碰撞原因(例如,软件故障)。举例来说,服务器101可使用模拟来确定在交通工具111上执行的软件是否恰当地起作用。服务器101可选择事件数据160的类型(例如传感器数据或控制系统状态)来下载以供分析。无线通信网络102的一个实例是手机网络。
分析服务器101从交通工具111接收的经收集事件数据。举例来说,此分析可包含图案辨识或其它数据分析(例如,确定事件数据与其它数据的相关性)。
响应于识别出软件故障,执行至少一个动作。举例来说,服务器101可向交通工具111发射致使交通工具重新配置软件的通信。
在一个实例中,交通工具可经由到接入点(或基站)105的无线连接115与服务器101通信以提交事件数据。无线连接115可经由无线局域网、蜂窝式通信网络及/或到卫星109的通信链路107或通信气球而做出。
任选地,交通工具111具有自学能力。在道路上的延长时间段之后,交通工具111可使其软件重新配置。在一个实例中,集中式服务器101可由交通工具111的工厂、生厂商或制造商或者自主驾驶的供应商及/或用于交通工具111的高级驾驶员辅助系统来操作。
图5图解说明根据一个实施例的使用人工神经网络(ANN)模型配置的交通工具111的实例。交通工具111包含信息娱乐系统149、通信装置139、一或多个传感器137及计算机131,所述计算机连接到交通工具111的一些控件,例如用于交通工具111的方向的操纵控件141、用于停止交通工具111的制动控件143、用于交通工具111的速度的加速度控件145等。
交通工具111的计算机131包含一或多个处理器133、存储固件(或软件)127的存储器135、ANN模型119及其它数据129。
在一个实例中,响应于来自服务器101的通信而通过空中更新来更新固件127,所述通信是响应于识别出故障软件而发送。替代地及/或另外,可更新交通工具111的各种计算装置或系统的其它固件。
一或多个传感器137可包含可见光相机、红外相机、激光雷达、雷达或声呐系统,及/或外围传感器,所述外围传感器经配置以向计算机131提供传感器输入。在处理器133中执行的固件(或软件)127的模块将传感器输入应用到由模型119界定的ANN以产生对在传感器输入中捕获的事件或物体(例如图像或视频剪辑)进行识别或分类的输出。来自此识别及/或分类的数据可包含于由存储器装置(例如,存储器装置180)收集的数据中且从交通工具发送到服务器101,如上文所论述。
替代地及/或另外,对不安全软件的识别可由固件(或软件)127的自主驾驶模块使用以产生响应。所述响应可为激活及/或调整交通工具控件141、143及145中的一者的命令。在一个实施例中,所述响应是由交通工具执行的动作,其中所述动作已基于来自服务器101的更新命令而配置(例如,更新命令可由服务器101响应于基于对事件数据的分析确定交通工具111的软件出故障而产生)。在一个实施例中,在产生控制响应之前,配置交通工具。在一个实施例中,通过更新交通工具111的固件而执行交通工具的配置。在一个实施例中,交通工具的配置包含更新存储于交通工具111中的计算机模型(例如,ANN模型119)。
在一个实施例中,服务器101存储所接收传感器输入作为用于使用监督式训练模块117对ANN模型119的后续进一步训练或更新的传感器数据的部分。当ANN模型119的经更新版本在服务器101中可用时,交通工具111可使用通信装置139来下载经更新ANN模型119以安装于存储器135中及/或以替换先前安装的ANN模型119。这些动作可响应于确定交通工具111未能恰当地检测物体及/或响应于识别出不安全软件而执行。
在一个实例中,ANN模型119的输出可用于在自主驾驶期间控制(例如,141、143、145)交通工具(例如,111)的加速度、交通工具111的速度,及/或交通工具111的方向。
在一个实例中,从交通工具的传感器获得的数据可为捕获物体的图像,所述捕获使用利用人眼可见的光成像的相机或利用红外光成像的相机或者声呐、雷达或激光雷达系统。在一个实施例中,从交通工具的至少一个传感器获得的图像数据是来自交通工具的经分析的经收集数据的部分。在一些实例中,针对特定交通工具基于传感器及其它经收集数据而配置ANN模型。
图6展示根据一个实施例的用以从自主交通工具(例如,交通工具170、200、711或111)自动收集且存储数据的方法。在框601中,由主机系统控制自主交通工具的一或多个系统。举例来说,所述主机系统可为经由总线174控制交通工具系统176的主机系统172。
在框603中,独立于主机系统而自动收集由交通工具的一或多个系统产生的数据。举例来说,存储器装置180自动收集由交通工具系统176产生的数据。在一个实例中,存储器装置180使用总线174从系统176收集数据。在一个实例中,存储器装置180在主机系统172不了解的情况下收集数据。
在框605中,将已经收集的数据存储于交通工具的存储器装置中。举例来说,所述存储器装置可为交通工具170的存储器装置180。
在一个实施例中,一种用于自主交通工具的方法包含:由主机系统(例如,主机系统172)控制所述交通工具的至少一个系统;由存储器装置(例如,存储器装置180)自动收集由所述至少一个系统产生的数据,其中由所述存储器装置独立于所述主机系统的实时控制而收集所述数据;及将所述数据存储于所述存储器装置中。
在一个实施例中,所述至少一个系统包含所述交通工具的一或多个传感器(例如,传感器178)。
在一个实施例中,所述存储器装置是非易失性存储器装置,且通过将所述数据从易失性存储器装置下载到所述非易失性存储器装置而收集所述数据。
在一个实施例中,由所述交通工具的至少一个系统的软件使用的数据存储于存储器(例如,易失性存储器184或系统存储器729)中,且所述经收集数据包含由所述软件使用的所述数据的至少一部分。
在一个实施例中,所述方法进一步包含监测所述交通工具的至少一个总线(例如,总线174),且自动收集数据包含从所述至少一个总线收集数据。
在一个实施例中,存储所述数据包含将所述数据格式化成预定格式。
在一个实施例中,存储所述数据包含将所述数据存储于预定地址或位置处(例如,存储器装置180的地址处或物理位置186处)。
在一个实施例中,存储所述数据包含将数据从易失性存储器复制或传送到非易失性存储器。
在一个实施例中,所述方法进一步包含:分析所述所存储数据(例如,由服务器188分析);及基于分析所述所存储数据而配置所述交通工具的至少一个系统。
在一个实施例中,所述方法进一步包含:经由无线通信将所述所存储数据发送到服务器,其中所述服务器经配置以分析所述数据;及从所述服务器接收更新所述交通工具的至少一个系统的配置的命令。
在一个实施例中,一种自主交通工具包含:至少一个传感器,其经配置以收集传感器数据;易失性存储器装置,其经配置以接收数据;至少一个计算装置,其经配置以控制所述交通工具的至少一个操作;及存储器,其存储指令,所述指令经配置以指令所述至少一个计算装置进行以下操作:由所述非易失性存储器装置自动收集由所述交通工具在操作期间产生的第一数据,其中所述第一数据包含传感器数据;及将所述第一数据存储于所述非易失性存储器装置中。
在一个实施例中,将所述第一数据从易失性存储器装置下载到所述非易失性存储器装置,且依据监测所述交通工具的至少一个通信总线(例如,总线174)而获得所述第一数据。
在一个实施例中,由软件使用的数据存储于所述至少一个计算系统的系统存储器中,且所述第一数据包含由所述软件使用的所述数据的至少一部分。
在一个实施例中,所述非易失性存储器装置经配置以将所述第一数据提供到经配置以分析所述第一数据的计算装置。
在一个实施例中,一种非暂时性计算机存储媒体存储指令,所述指令在于计算装置上执行时致使所述计算装置执行用于自主交通工具的方法,所述方法包含:监测所述交通工具的主机系统与所述交通工具的至少一个系统之间的通信,其中所述主机系统控制所述至少一个系统;由存储器装置收集由所述至少一个系统产生的数据,其中基于监测所述主机系统与所述至少一个系统之间的所述通信而收集所述数据;及将所述经收集数据存储于所述存储器装置中。
在一个实施例中,所述方法进一步包含基于所述经收集数据而分析在所述交通工具的所述至少一个系统上执行的软件的至少一个功能。
在一个实施例中,存储所述数据包含将所述数据存储于所述交通工具中的预定位置处。
在一个实施例中,存储所述数据包含将所述数据格式化成预定格式。
在一个实施例中,在所述交通工具的操作期间由软件使用的数据存储于存储器中,且所述经收集数据包含由所述软件使用的所述数据的至少一部分。
在一个实施例中,由所述存储器装置独立于所述主机系统而收集所述数据。
图7展示根据一个实施例的响应于对经收集数据的分析而控制及/或配置的自主交通工具303。交通工具303的系统包含显示器装置308或者其它装置、系统或组件。在一个实例中,控制器307包含于存储器装置180中,且控制器307控制从交通工具303的各种系统收集数据。
服务器301可存储(举例来说)由控制器307收集的事件数据160且发送到服务器301。服务器301可使用事件数据160确定交通工具303的软件正不恰当地操作。响应于此确定,服务器301可致使控制器307终止自主导航模式。可响应于此确定而执行其它动作,包含(举例来说)通过更新固件304、更新计算机模型312、更新数据库310中的数据及/或更新训练数据314而配置交通工具303。
控制器307可接收由一或多个传感器306收集的数据。传感器306可(举例来说)安装于自主交通工具303中。传感器306可包含(举例来说)相机、麦克风、及/或运动检测器。传感器的至少一部分可提供与由交通工具303在行进期间新检测的物体相关联的数据。
传感器306可提供各种类型的数据以供由控制器307收集。举例来说,经收集数据可包含来自相机的图像数据及/或来自麦克风的音频数据。
在一个实施例中,控制器307分析来自传感器306的经收集数据。对经收集数据的分析包含将经收集数据中的一些或全部作为一或多个输入提供到计算机模型312。计算机模型312可为(举例来说)通过深度学习训练的人工神经网络。在一个实例中,计算机模型是使用训练数据314训练的机器学习模型。计算机模型312及/或训练数据314可存储(举例来说)于存储器309中。来自计算机模型312的输出可作为物体数据的部分发射到服务器301。
在一个实施例中,存储器309存储数据库310,所述数据库可包含由传感器306收集的数据及/或由通信接口305从计算装置(例如,服务器301)接收的数据。在一个实例中,此通信可用于将经收集数据从传感器306无线地发射到服务器301。所接收数据可包含配置、训练及由控制器307用于配置对显示器装置308或其它组件的控制的其它数据。所接收数据还可用于更新作为计算机模型312存储于存储器309中的机器学习模型的配置。
在一个实施例中,固件304控制(举例来说)控制器307的操作以控制交通工具303的组件。控制器307还可(举例来说)运行固件304以响应于来自服务器301的通信而执行操作。自主交通工具303包含用于存储由控制器307使用的运行时间数据及指令的易失性动态随机存取存储器(DRAM)311。运行时间数据及/或指令可为响应于检测到事件而下载的数据的部分。
本文中所揭示的系统及方法的至少一些实施例可使用由控制器或处理器执行的计算机指令(例如,固件)来实施。在一些实例中,可使用硬件电路来实施固件的功能中的至少一些。固件可最初存储于非易失性存储媒体或另一非易失性装置中,且加载到易失性DRAM及/或处理器中高速缓冲存储器中以供执行。在一个实例中,固件可经配置以控制从交通工具收集数据。
图8是包含一或多个各种组件及/或子系统的自主交通工具(例如,交通工具170)的框图,所述一或多个各种组件及/或子系统中的每一者可在各种实施例中经更新以配置交通工具及/或执行与交通工具相关联的其它动作(例如,响应于识别出软件中的故障或基于由存储器装置180收集的数据的其它数据而执行的配置及/或其它动作)。图8中所图解说明的系统可完全安装于交通工具内。
所述系统包含自主交通工具子系统402。子系统402是图1的交通工具系统176的实例。在所图解说明的实施例中,自主交通工具子系统402包含地图数据库402A、雷达装置402B、激光雷达装置402C、数码相机402D、声呐装置402E、GPS接收器402F及惯性测量单元402G。自主交通工具子系统402的组件中的每一者包括大多数当前自主交通工具中提供的标准组件。在一个实施例中,地图数据库402A存储用于路线规划及导航的多个高清三维地图。雷达装置402B、激光雷达装置402C、数码相机402D、声呐装置402E、GPS接收器402F及惯性测量单元402G可包括此项技术中已知的安装于遍及自主交通工具的各种位置处的各种相应装置。举例来说,这些装置可沿着自主交通工具的周界安装以提供位置感知、碰撞避免及其它标准自主交通工具功能性。
交通工具子系统406另外包含于所述系统内。交通工具子系统406包含各种防抱死制动系统406A、引擎控制单元402B及发射控制单元402C。这些组件可用于响应于由自主交通工具子系统402A产生的流式数据而控制自主交通工具的操作。自主交通工具子系统402与交通工具子系统406之间的标准自主交通工具交互通常是本技术领域中已知的且本文中未详细描述。
系统的处理侧包含一或多个处理器410、短期存储器412、RF系统414、图形处理单元(GPU)416、长期存储装置418及一或多个接口420。
一或多个处理器410可包括中央处理单元、FPGA或支持自主交通工具的操作所需的任何范围的处理装置。存储器412包括DRAM或用于暂时存储处理器410所需的数据的其它适合易失性RAM。RF系统414可包括蜂窝式收发器及/或卫星收发器。长期存储装置418可包括一或多个高容量固态驱动器(SSD)。一般来说,长期存储装置418可用于存储(举例来说)高清地图、路线规划数据及需要永久或半永久存储的任何其它数据。GPU 416可包括用于处理从自主交通工具子系统402A接收的数据的一或多个高吞吐量GPU装置。最后,接口420可包括定位于自主交通工具内的各种显示器单元(例如,仪表盘中屏幕)。
所述系统另外包含执行数据收集(例如,收集从交通工具的传感器获得的用于驾驶交通工具的数据)的报告子系统404。报告子系统404包含连接到总线408且记录在总线408上发射的传感器数据以及在所述总线上发射的任何日志数据的传感器监测器404A。报告子系统404可另外包含一或多个端点以允许系统组件将日志数据直接发射到报告子系统404。
报告子系统404另外包含封装器404B。在一个实施例中,封装器404B从传感器监测器404A或端点检索数据且封装原始数据以供发射到中央系统(图解说明于图9中)。在一些实施例中,封装器404B可经配置而以周期性时间间隔封装数据。替代地或联合前述内容,封装器404B可实时地发射数据且可压缩数据以促进与中央系统的实时通信。
报告子系统404另外包含批处理器404C。在一个实施例中,批处理器404C经配置以在发射之前对所记录数据执行任何处理。举例来说,批处理器404C可在由封装器404B进行封装之前对数据执行压缩操作。在另一实施例中,批处理器404C可经配置以在封装或发射之前筛选所记录数据以移除外来数据。在另一实施例中,批处理器404C可经配置以对所记录数据执行数据清理以使原始数据符合适于由中央系统进一步处理的格式。
所述装置中的每一者经由总线408连接。总线408是图1的总线174的实例。在一个实施例中,总线408可包括控制器区域网络(CAN)总线。在一些实施例中,可使用其它总线类型(例如,FlexRay或MOST总线)。另外,每一子系统可包含一或多个额外总线来处置内部子系统通信(例如,用于较低带宽通信的LIN总线)。
图9是根据各种实施例的集中式自主交通工具操作系统的框图。如所图解说明,所述系统包含若干个自主交通工具502A到502E。在一个实施例中,每一自主交通工具可包括例如图8中所描绘的自主交通工具的自主交通工具。每一自主交通工具502A到502E可经由网络516与中央系统514通信。在一个实施例中,网络516包括全局网络,例如因特网。
在一个实例中,中央系统514使用服务器101或301中的一或多者来实施。在一个实例中,自主交通工具502A到502E中的一或多者是自主交通工具170、200或711。
所述系统另外包含多个客户端装置508A、508B。在所图解说明的实施例中,客户端装置508A、508B可包括任何个人计算装置(例如,膝上型计算机、平板计算机、移动电话等)。客户端装置508A、508B可向中央系统514发出数据请求。在一个实施例中,客户端装置508A、508B发射数据请求以支持移动应用程序或网页数据,如先前所描述。
在一个实施例中,中央系统514包含多个服务器504A。在一个实施例中,服务器504A包括经配置以提供对客户端装置508A、508B的响应的多个前端网页服务器。服务器504A可另外包含经配置以执行各种操作以支持一或多个交通工具的一或多个应用程序服务器。
在一个实施例中,中央系统514另外包含多个模型504B。在一个实施例中,模型504B可存储用于将自主交通工具物体分类的一或多个神经网络。模型504B可另外包含用于预测未来事件的模型。在一些实施例中,模型504B可存储神经网络与其它机器学习模型的组合。
中央系统514另外包含一或多个数据库504C。数据库504C可包含针对交通工具504D、个性504E及原始数据504F的数据库记录。原始数据504F可包括用于存储从传感器接收的原始数据及日志的未结构化数据库,如先前所论述。
本发明包含方法及执行上文所描述的方法的设备,包含执行这些方法的数据处理系统及含有在于数据处理系统上执行时致使所述系统执行这些方法的指令的计算机可读媒体。
上文的交通工具的服务器及/或计算装置可作为一或多个数据处理系统来实施。典型数据处理系统可包含将微处理器与存储器互连的互连件(例如,总线及系统核心逻辑)。微处理器通常耦合到高速缓冲存储器。
互连件将微处理器与存储器互连在一起且还经由I/O控制器将其等互连到输入/输出(I/O)装置。I/O装置可包含显示器装置及/或外围装置,例如鼠标、键盘、调制解调器、网络接口、打印机、扫描仪、摄像机及本技术领域中已知的其它装置。在一个实施例中,当数据处理系统是服务器系统时,I/O装置中的一些(例如打印机、扫描仪、鼠标及/或键盘)是任选的。
互连件可包含通过各种桥接器、控制器及/或适配器彼此连接的一或多个总线。在一个实施例中,I/O控制器包含用于控制USB(通用串行总线)外围装置的USB适配器及/或用于控制IEEE-1394外围装置的IEEE-1394总线适配器。
存储器可包含以下各项中的一或多者:ROM(只读存储器),易失性RAM(随机存取存储器)及非易失性存储器,例如硬驱动器、快闪存储器等。
易失性RAM通常作为持续地需要电力以便刷新或维持存储器中的数据的动态RAM(DRAM)来实施。非易失性存储器通常是磁性硬驱动器、磁光驱动器、光学驱动器(例如,DVDRAM),或甚至在从系统移除电力之后还维持数据的其它类型的存储器系统。非易失性存储器也可为随机存取存储器。
非易失性存储器可为直接耦合到数据处理系统中的其余组件的本地装置。还可使用远离系统的非易失性存储器,例如通过网络接口(例如调制解调器或以太网接口)耦合到数据处理系统的网络存储装置。
在本发明中,将一些功能及操作描述为由软件代码执行或由软件代码引起以简化说明。然而,此类表达还用于规定功能由处理器(例如微处理器)执行代码/指令导致。
替代地或组合地,本文所描述的功能及操作可在具有或不具有软件指令的情况下使用专用电路(例如使用专用集成电路(ASIC)或现场可编程门阵列(FPGA))来实施。实施例可在不具有软件指令的情况下使用硬连线电路或与软件指令组合地使用硬连线电路来实施。因此,技术既不限于硬件电路与软件的任何特定组合,也不限于由数据处理系统执行的指令的任何特定源。
虽然一个实施例可在全功能计算机及计算机系统中实施,但各种实施例能够作为呈各种形式的计算产品来分布且能够被应用而无论用于实际上实现所述分布的机器或计算机可读媒体的特定类型如何。
所揭示的至少一些方面可至少部分地以软件体现。也就是说,可在计算机系统或其它数据处理系统中响应于其处理器(例如微处理器)执行存储器(例如ROM、易失性RAM、非易失性存储器、高速缓冲存储器或远程存储装置)中所含有的指令序列而执行技术。
经执行以实施实施例的例程可作为操作系统或特定应用程序、组件、程序、对象、模块或称为“计算机程序”的指令序列的部分来实施。计算机程序通常包含一或多个指令,所述一或多个指令是在计算机中的各种存储器及存储装置中在各种时间处设定,且在由计算机中的一或多个处理器读取及执行时致使计算机执行操作,所述操作对于执行涉及各种方面的元件是必要的。
机器可读媒体可用于存储软件及数据,所述软件及数据在由数据处理系统执行时致使系统执行各种方法。可执行软件及数据可存储于各种地方,包含(举例来说)ROM、易失性RAM、非易失性存储器及/或高速缓冲存储器。此软件及/或数据的部分可存储于这些存储装置中的任一者中。此外,数据及指令可从集中式服务器或对等网络获得。数据及指令的不同部分可在不同时间及不同通信会话中或相同通信会话中从不同集中式服务器及/或对等网络获得。数据及指令可在执行应用程序之前整体地获得。替代地,数据及指令的部分可在为执行而需要时被动态地(刚好实时地)获得。因此,不要求数据及指令在特定时间实例处整体地在机器可读媒体上。
计算机可读媒体的实例包含(但不限于)非暂时性可记录及非可记录型媒体,例如易失性及非易失性存储器装置、只读存储器(ROM)、随机存取存储器(RAM)、快闪存储器装置、软盘及其它可装卸磁盘、磁盘存储媒体、光学存储媒体(例如,光盘只读存储器(CDROM)、数字多功能磁盘(DVD)等)以及其它。计算机可读媒体可存储指令。
指令还可以用于电、光学、声学或其它形式的经传播信号(例如载波、红外信号、数字信号等)的数字及模拟通信链路体现。然而,经传播信号(例如载波、红外信号、数字信号等)并非有形机器可读媒体且并不经配置以存储指令。
一般来说,机器可读媒体包含提供(即,存储及/或发射)呈可由机器(例如,计算机、网络装置、个人数字助理、制造工具、具有一组一或多个处理器的任何装置等)存取的形式的信息的任何机构。
在各种实施例中,硬连线电路可与软件指令组合地使用以实施技术。因此,技术既不限于硬件电路与软件的任何特定组合,也不限于由数据处理系统执行的指令的任何特定源。
上文说明及图式是说明性的,且不应视为具限制性。描述众多特定细节以提供透彻理解。然而,在特定实例中,未描述众所周知或常规的细节以便避免使说明模糊。本发明中对一个或一实施例的参考不必参考同一实施例;且此些参考意指至少一个。
在前述说明书中,已参考本发明的特定示范性实施例描述了本发明。将显而易见,在不背离如所附权利要求书中所陈述的较宽广精神及范围的情况下,可对本发明做出各种修改。因此,应将本说明书及图式视为具有说明性意义而非限制性意义。

Claims (20)

1.一种用于自主交通工具的方法,所述方法包括:
由主机系统控制所述交通工具的至少一个系统;
由存储器装置自动收集由所述至少一个系统产生的数据,其中由所述存储器装置独立于所述主机系统的实时控制而收集所述数据;及
将所述数据存储于所述存储器装置中。
2.根据权利要求1所述的方法,其中所述至少一个系统包括所述交通工具的一或多个传感器。
3.根据权利要求1所述的方法,其中所述存储器装置是非易失性存储器装置,且其中通过将所述数据从易失性存储器装置下载到所述非易失性存储器装置而收集所述数据。
4.根据权利要求1所述的方法,其中由所述交通工具的至少一个系统的软件使用的数据存储于存储器中,且其中所述经收集数据包括由所述软件使用的所述数据的至少一部分。
5.根据权利要求1所述的方法,其进一步包括监测所述交通工具的至少一个总线,其中自动收集数据包括从所述至少一个总线收集数据。
6.根据权利要求1所述的方法,其中存储所述数据包括将所述数据格式化成预定格式。
7.根据权利要求1所述的方法,其中存储所述数据包括将所述数据存储于预定地址或位置处。
8.根据权利要求1所述的方法,其中存储所述数据包括将数据从易失性存储器复制或传送到非易失性存储器。
9.根据权利要求1所述的方法,其进一步包括:
分析所述所存储数据;及
基于分析所述所存储数据而配置所述交通工具的至少一个系统。
10.根据权利要求1所述的方法,其进一步包括:
经由无线通信将所述所存储数据发送到服务器,其中所述服务器经配置以分析所述数据;及
从所述服务器接收更新所述交通工具的至少一个系统的配置的命令。
11.一种自主交通工具,其包括:
至少一个传感器,其经配置以收集传感器数据;
非易失性存储器装置,其经配置以接收数据;
至少一个计算装置,其经配置以控制所述交通工具的至少一个操作;及
存储器,其存储指令,所述指令经配置以指示所述至少一个计算装置进行以下操作:
由所述非易失性存储器装置自动收集由所述交通工具在操作期间产生的第一数据,其中所述第一数据包含传感器数据;及
将所述第一数据存储于所述非易失性存储器装置中。
12.根据权利要求11所述的自主交通工具,其中将所述第一数据从易失性存储器装置下载到所述非易失性存储器装置,且依据监测所述交通工具的至少一个通信总线而获得所述第一数据。
13.根据权利要求11所述的自主交通工具,其中由软件使用的数据存储于所述至少一个计算装置的系统存储器中,且其中所述第一数据包括由所述软件使用的所述数据的至少一部分。
14.根据权利要求11所述的自主交通工具,其中所述非易失性存储器装置经配置以将所述第一数据提供到经配置以分析所述第一数据的计算装置。
15.一种非暂时性计算机存储媒体,其存储指令,所述指令在于计算装置上执行时致使所述计算装置执行用于自主交通工具的方法,所述方法包括:
监测所述交通工具的主机系统与所述交通工具的至少一个系统之间的通信,其中所述主机系统控制所述至少一个系统;
由存储器装置收集由所述至少一个系统产生的数据,其中基于监测所述主机系统与所述至少一个系统之间的所述通信而收集所述数据;及
将所述经收集数据存储于所述存储器装置中。
16.根据权利要求15所述的非暂时性计算机存储媒体,其中所述方法进一步包括基于所述经收集数据而分析在所述交通工具的所述至少一个系统上执行的软件的至少一个功能。
17.根据权利要求15所述的非暂时性计算机存储媒体,其中存储所述数据包括将所述数据存储于所述交通工具中的预定位置处。
18.根据权利要求15所述的非暂时性计算机存储媒体,其中存储所述数据包括将所述数据格式化成预定格式。
19.根据权利要求15所述的非暂时性计算机存储媒体,其中在所述交通工具的操作期间由软件使用的数据存储于存储器中,且其中所述经收集数据包括由所述软件使用的所述数据的至少一部分。
20.根据权利要求15所述的非暂时性计算机存储媒体,其中由所述存储器装置独立于所述主机系统而收集所述数据。
CN201910920282.XA 2018-10-03 2019-09-26 自主交通工具记录数据的自动收集 Pending CN110992516A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US16/150,618 2018-10-03
US16/150,618 US11670123B2 (en) 2018-10-03 2018-10-03 Automatic collection of autonomous vehicle logging data

Publications (1)

Publication Number Publication Date
CN110992516A true CN110992516A (zh) 2020-04-10

Family

ID=70052339

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910920282.XA Pending CN110992516A (zh) 2018-10-03 2019-09-26 自主交通工具记录数据的自动收集

Country Status (2)

Country Link
US (2) US11670123B2 (zh)
CN (1) CN110992516A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112215982A (zh) * 2020-09-28 2021-01-12 广州航新航空科技股份有限公司 一种直升机数据采集方法、系统、装置及存储介质

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10846955B2 (en) 2018-03-16 2020-11-24 Micron Technology, Inc. Black box data recorder for autonomous driving vehicle
US11094148B2 (en) * 2018-06-18 2021-08-17 Micron Technology, Inc. Downloading system memory data in response to event detection
US11182986B2 (en) 2018-10-10 2021-11-23 Micron Technology, Inc. Real-time selection of data to collect in autonomous vehicle
US11782605B2 (en) 2018-11-29 2023-10-10 Micron Technology, Inc. Wear leveling for non-volatile memory using data write counters
US11373466B2 (en) 2019-01-31 2022-06-28 Micron Technology, Inc. Data recorders of autonomous vehicles
US11410475B2 (en) 2019-01-31 2022-08-09 Micron Technology, Inc. Autonomous vehicle data recorders
CN114116281A (zh) * 2021-11-11 2022-03-01 上汽通用五菱汽车股份有限公司 车辆can数据处理方法、系统、装置及可读存储介质

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102354197A (zh) * 2011-09-20 2012-02-15 大连理工大学 基于虚拟仪器的电动汽车数据采集与管理系统
CN104859649A (zh) * 2014-02-25 2015-08-26 福特全球技术公司 自主驾驶传感系统和方法
CN105322998A (zh) * 2014-06-30 2016-02-10 空中客车运营有限公司 交通工具中的数据采集装置、系统和方法
US20160203656A1 (en) * 2015-01-09 2016-07-14 International Business Machines Corporation Identifying the origins of a vehicular impact and the selective exchange of data pertaining to the impact
CN107077780A (zh) * 2014-10-30 2017-08-18 三菱电机株式会社 车载设备、自动驾驶车辆、自动驾驶辅助系统、自动驾驶监视装置、道路管理装置及自动驾驶信息收集装置
CN108068815A (zh) * 2016-11-14 2018-05-25 百度(美国)有限责任公司 用于自动驾驶车辆的基于规划反馈的决策改进系统
CN108319163A (zh) * 2017-12-25 2018-07-24 武汉柏舟科技有限公司 基于无线专网通信的船载航行数据采集记录装置及方法

Family Cites Families (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE3338113A1 (de) 1983-10-20 1985-05-09 Kienzle Apparate Gmbh, 7730 Villingen-Schwenningen Datenerfassungsgeraet fuer fahrzeuge
US6741168B2 (en) 2001-12-13 2004-05-25 Samsung Electronics Co., Ltd. Method and apparatus for automated collection and transfer of collision information
US6856009B2 (en) 2003-03-11 2005-02-15 Micron Technology, Inc. Techniques for packaging multiple device components
KR100688514B1 (ko) 2005-01-05 2007-03-02 삼성전자주식회사 다른 종류의 mcp를 탑재한 메모리 모듈
JP2006199204A (ja) 2005-01-21 2006-08-03 Sanyo Electric Co Ltd ドライブレコーダ及びドライブレコーダの制御方法
JP4684773B2 (ja) 2005-07-01 2011-05-18 株式会社堀場製作所 ドライビングレコーダ
JP4613741B2 (ja) 2005-08-05 2011-01-19 トヨタ自動車株式会社 車両用データ記録装置
JP4677876B2 (ja) 2005-10-11 2011-04-27 株式会社デンソー 車両診断装置
WO2010048761A1 (zh) 2008-10-31 2010-05-06 深圳市东仪电子有限公司 汽车爆胎检测与防偏系统及其实现方法
CN102456240A (zh) 2010-10-30 2012-05-16 比亚迪股份有限公司 基于can总线的车载记录装置及其存储数据的控制方法
SE537231C2 (sv) 2011-05-23 2015-03-10 BAE Systems Hägglunds Aktiebolag Förfarande och anordning för sökning av fel hos ett fordon
CN102956045A (zh) 2011-08-19 2013-03-06 徐菲 一种基于事件触发的车载监测、记录、提示装置及方法
FR3006768B1 (fr) 2013-06-06 2017-05-26 Continental Automotive France Procede de surveillance d'un organe fonctionnel d'un vehicule automobile
CN203503020U (zh) 2013-08-02 2014-03-26 范青梅 触摸按键高清行车记录仪
JP5810205B1 (ja) 2014-04-11 2015-11-11 松尾アソシエイト株式会社 車両運行管理システム
US9606529B2 (en) * 2014-07-31 2017-03-28 Miq Llc User customization of auto-detected data for analysis
US10553120B2 (en) 2014-09-15 2020-02-04 L3 Technologies, Inc. Fail safe aircraft monitoring and tracking
JP6394561B2 (ja) 2015-10-20 2018-09-26 トヨタ自動車株式会社 車載記録システム及び車載制御装置
US10162558B2 (en) 2015-10-30 2018-12-25 Micron Technology, Inc. Data transfer techniques for multiple devices on a shared bus
CN106202157A (zh) 2016-06-23 2016-12-07 深圳市华域无线技术股份有限公司 基于时间流的视频快速检索方法
US10606767B2 (en) * 2017-05-19 2020-03-31 Samsung Electronics Co., Ltd. Ethernet-attached SSD for automotive applications
CN109215170B (zh) * 2017-07-04 2021-03-02 百度在线网络技术(北京)有限公司 行车数据的存储方法、装置和设备
CN107545064A (zh) 2017-09-07 2018-01-05 深圳市麦道微电子技术有限公司 行车记录装置在文件名编码中加入日期和时间信息的机制
US11022971B2 (en) * 2018-01-16 2021-06-01 Nio Usa, Inc. Event data recordation to identify and resolve anomalies associated with control of driverless vehicles
US10636229B2 (en) * 2018-04-17 2020-04-28 Lyft, Inc. Black box with volatile memory caching
US11182986B2 (en) 2018-10-10 2021-11-23 Micron Technology, Inc. Real-time selection of data to collect in autonomous vehicle

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102354197A (zh) * 2011-09-20 2012-02-15 大连理工大学 基于虚拟仪器的电动汽车数据采集与管理系统
CN104859649A (zh) * 2014-02-25 2015-08-26 福特全球技术公司 自主驾驶传感系统和方法
CN105322998A (zh) * 2014-06-30 2016-02-10 空中客车运营有限公司 交通工具中的数据采集装置、系统和方法
CN107077780A (zh) * 2014-10-30 2017-08-18 三菱电机株式会社 车载设备、自动驾驶车辆、自动驾驶辅助系统、自动驾驶监视装置、道路管理装置及自动驾驶信息收集装置
US20160203656A1 (en) * 2015-01-09 2016-07-14 International Business Machines Corporation Identifying the origins of a vehicular impact and the selective exchange of data pertaining to the impact
CN105785969A (zh) * 2015-01-09 2016-07-20 国际商业机器公司 标识车辆撞击的起源以及关于撞击的数据的选择性交换
CN108068815A (zh) * 2016-11-14 2018-05-25 百度(美国)有限责任公司 用于自动驾驶车辆的基于规划反馈的决策改进系统
CN108319163A (zh) * 2017-12-25 2018-07-24 武汉柏舟科技有限公司 基于无线专网通信的船载航行数据采集记录装置及方法

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112215982A (zh) * 2020-09-28 2021-01-12 广州航新航空科技股份有限公司 一种直升机数据采集方法、系统、装置及存储介质

Also Published As

Publication number Publication date
US20240087380A1 (en) 2024-03-14
US11670123B2 (en) 2023-06-06
US20200111270A1 (en) 2020-04-09

Similar Documents

Publication Publication Date Title
CN111028382B (zh) 自主交通工具中待收集数据的实时选择
US11756353B2 (en) Downloading system memory data in response to event detection
US20240087380A1 (en) Automatic collection of autonomous vehicle logging data
US11891054B2 (en) Vehicle navigation using object data received from other vehicles
US20230041045A1 (en) Determining autonomous vehicle status based on mapping of crowdsourced object data
US11866020B2 (en) Detecting road conditions based on braking event data received from vehicles
US20220024493A1 (en) Sensor Fusion to Determine Reliability of Autonomous Vehicle Operation
CN110462543B (zh) 用于评估自动驾驶车辆的感知要求的基于仿真的方法
WO2020259705A1 (en) Autonomous driving handoff systems and methods
US20210201666A1 (en) Scalable and distributed detection of road anomaly events
US11385991B1 (en) Collision evaluation for log-based simulations
US11803186B2 (en) Road quality based routing
CN112238862A (zh) 用于自主驾驶平台的开放和安全监视系统
US20240184947A1 (en) Attribution of reproducibility results of autonomous vehicle subsystem
JP2023174610A (ja) 運転者支援システムの使用の検出

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination