CN114578802A - 车辆自动驾驶验证系统和方法、车辆自动驾驶系统、车辆和计算机可读存储介质 - Google Patents

车辆自动驾驶验证系统和方法、车辆自动驾驶系统、车辆和计算机可读存储介质 Download PDF

Info

Publication number
CN114578802A
CN114578802A CN202011370142.9A CN202011370142A CN114578802A CN 114578802 A CN114578802 A CN 114578802A CN 202011370142 A CN202011370142 A CN 202011370142A CN 114578802 A CN114578802 A CN 114578802A
Authority
CN
China
Prior art keywords
vehicle
data
module
driving
verification
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202011370142.9A
Other languages
English (en)
Inventor
徐浩
赵诗允
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Robert Bosch GmbH
Original Assignee
Robert Bosch GmbH
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Robert Bosch GmbH filed Critical Robert Bosch GmbH
Priority to CN202011370142.9A priority Critical patent/CN114578802A/zh
Priority to PCT/EP2021/082960 priority patent/WO2022112397A1/en
Publication of CN114578802A publication Critical patent/CN114578802A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0212Control of position or course in two dimensions specially adapted to land vehicles with means for defining a desired trajectory
    • G05D1/0223Control of position or course in two dimensions specially adapted to land vehicles with means for defining a desired trajectory involving speed control of the vehicle
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W60/00Drive control systems specially adapted for autonomous road vehicles
    • B60W60/005Handover processes
    • B60W60/0051Handover processes from occupants to vehicle
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B60W40/09Driving style or behaviour
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/02Ensuring safety in case of control system failures, e.g. by diagnosing, circumventing or fixing failures
    • B60W50/0205Diagnosing or detecting failures; Failure detection models
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/04Monitoring the functioning of the control system
    • B60W50/045Monitoring control system parameters
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/06Improving the dynamic response of the control system, e.g. improving the speed of regulation or avoiding hunting or overshoot
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W60/00Drive control systems specially adapted for autonomous road vehicles
    • B60W60/001Planning or execution of driving tasks
    • B60W60/0013Planning or execution of driving tasks specially adapted for occupant comfort
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W60/00Drive control systems specially adapted for autonomous road vehicles
    • B60W60/001Planning or execution of driving tasks
    • B60W60/0015Planning or execution of driving tasks specially adapted for safety
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W60/00Drive control systems specially adapted for autonomous road vehicles
    • B60W60/005Handover processes
    • B60W60/0053Handover processes from vehicle to occupant
    • B60W60/0054Selection of occupant to assume driving tasks
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01MTESTING STATIC OR DYNAMIC BALANCE OF MACHINES OR STRUCTURES; TESTING OF STRUCTURES OR APPARATUS, NOT OTHERWISE PROVIDED FOR
    • G01M17/00Testing of vehicles
    • G01M17/007Wheeled or endless-tracked vehicles
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0231Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means
    • G05D1/0246Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means using a video camera in combination with image processing means
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/36Preventing errors by testing or debugging software
    • G06F11/3668Software testing
    • G06F11/3672Test management
    • G06F11/3692Test management for test results analysis
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W2050/0001Details of the control system
    • B60W2050/0002Automatic control, details of type of controller or control system architecture
    • B60W2050/0018Method for the design of a control system
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W2050/0062Adapting control system settings
    • B60W2050/0075Automatic parameter input, automatic initialising or calibrating means
    • B60W2050/0083Setting, resetting, calibration
    • B60W2050/0088Adaptive recalibration
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/04Monitoring the functioning of the control system
    • B60W50/045Monitoring control system parameters
    • B60W2050/046Monitoring control system parameters involving external transmission of data to or from the vehicle, e.g. via telemetry, satellite, Global Positioning System [GPS]
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2520/00Input parameters relating to overall vehicle dynamics
    • B60W2520/10Longitudinal speed
    • B60W2520/105Longitudinal acceleration
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00Input parameters relating to occupants
    • B60W2540/10Accelerator pedal position
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00Input parameters relating to occupants
    • B60W2540/12Brake pedal position
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00Input parameters relating to occupants
    • B60W2540/18Steering angle
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00Input parameters relating to occupants
    • B60W2540/20Direction indicator values
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2756/00Output or target parameters relating to data
    • B60W2756/10Involving external transmission of data to or from the vehicle

Landscapes

  • Engineering & Computer Science (AREA)
  • Automation & Control Theory (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • Theoretical Computer Science (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Computer Hardware Design (AREA)
  • Quality & Reliability (AREA)
  • General Engineering & Computer Science (AREA)
  • Mathematical Physics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Multimedia (AREA)
  • Electromagnetism (AREA)
  • Traffic Control Systems (AREA)

Abstract

本发明涉及一种车辆自动驾驶验证系统,包括:自动驾驶模块(1),其包括:数据获取单元(4),其配置为采集车辆运行场景的相关信息和车辆的当前运行状态数据;和预控制单元(5),其配置为处理来自数据获取单元(4)的数据以输出用于自动驾驶车辆的控制数据;驾驶员监控模块(2),其配置为获取驾驶员响应于所述场景对车辆输入的驾驶数据;验证模块(3),其配置为基于驾驶员监控模块(2)的驾驶数据来验证自动驾驶模块(1)的控制数据是否正常。本发明还涉及一种车辆自动驾驶系统、车辆、车辆自动驾驶验证方法以及计算机可读存储介质。本发明通过比较驾驶员行为和系统的请求行为,能够更便捷容易地验证自动驾驶系统的性能。

Description

车辆自动驾驶验证系统和方法、车辆自动驾驶系统、车辆和计 算机可读存储介质
技术领域
本发明涉及一种车辆自动驾驶验证系统和方法,还涉及一种包括该车辆自动驾驶验证系统的车辆自动驾驶系统以及包括该车辆自动驾驶系统的车辆。本发明还涉及一种计算机可读存储介质,其存储有执行该车辆自动驾驶验证方法的指令。
背景技术
随着自动驾驶技术的发展,对驾驶安全性的要求也越来越高。为了测试自动驾驶系统的安全性,通常需要在车辆正式上路之前对其进行实车路试。但随着对自动驾驶技术可靠性的要求提高,往往需要大量时间的路试验证。路试验证需要安装大量的实验设备,提高了开发成本。并且,在某个或某些路段的测试并不能全面反映自动驾驶的性能。
此外,对于车辆的驾驶控制尤其是横向控制例如车道保持系统,并没有成熟的验证方案。目前有些验证方案使用激光雷达来感测路面场景,但是如果车速过高激光雷达的刷新频率受限就无法准确地判断路况。有的验证方案利用GPS结合高精度地图来定位,然而GPS定位同样存在误差。为了实现准确率更高的基准系统,有时会采用人工对采集到的场景信息进行标注,然而这会花费相当多的时间。为此,需要对现有的自动驾驶测试提出改进。
发明内容
为了克服现有技术中的至少一个缺陷,本发明提供了一种以驾驶员的行为作为基准来验证自动驾驶性能的车辆自动驾驶验证系统。
根据本发明的第一方面,提供了一种车辆自动驾驶验证系统,包括:自动驾驶模块,其包括:数据获取单元,其配置为采集车辆运行场景的相关信息和车辆的当前运行状态数据;和预控制单元,其配置为处理来自数据获取单元的数据以输出用于自动驾驶车辆的控制数据;驾驶员监控模块,其配置为获取驾驶员响应于所述场景对车辆输入的驾驶数据;验证模块,其配置为基于驾驶员监控模块的驾驶数据来验证自动驾驶模块的控制数据是否正常。
在一种实施方式中,所述验证模块配置为跟踪自动驾驶模块的控制数据随时间的变化,在所述变化超过阈值或自动驾驶功能触发异常时,验证模块判定自动驾驶模块出现故障,其中,所跟踪的控制数据例如包括车辆中心距车道标志线的距离和/或该距离的变化率、自动驾驶功能的启动和退出。
在一种实施方式中,所述验证模块配置为比较驾驶员监控模块的驾驶数据和自动驾驶模块的控制数据,在所述驾驶数据和所述控制数据的差值超过阈值或所述驾驶数据和所述控制数据的性质不同时,验证模块判定自动驾驶模块出现故障,其中,所比较的数据例如包括转向角、转向扭矩、车辆加速度和/或减速度、转向灯和刹车/油门踏板信号。
在一种实施方式中,所述验证模块配置为将自动驾驶模块的故障数据发送至存储模块例如云端服务器。
在一种实施方式中,车辆自动驾驶验证系统还包括分析模块,其配置为根据验证模块判定的故障数据,并基于自动驾驶模块获取的场景信息以及车辆运行状态数据来分析故障原因,以调整自动驾驶模块的控制数据。
在一种实施方式中,车辆自动驾驶验证系统还包括评估模块,其配置为根据验证模块的验证结果对自动驾驶性能进行评估。
根据本发明的第二方面,提供了一种车辆自动驾驶系统,其包括:前述车辆自动驾驶验证系统;和车辆运动控制单元,其配置为基于自动驾驶模块的控制数据来控制车辆的运行。
根据本发明的第三方面,提供了一种车辆,其包括上述车辆自动驾驶系统。
根据本发明的第四方面,提供了一种车辆自动驾驶验证方法,包括:获取车辆运行场景的相关信息和车辆的当前运行状态数据并进行处理,以产生用于自动驾驶车辆的控制数据,获取驾驶员响应于所述场景对车辆输入的驾驶数据;基于所述驾驶数据来验证所述控制数据是否正常。
在一种实施方式中,车辆自动驾驶验证方法还包括跟踪所述控制数据随时间的变化,在所述变化超过阈值或自动驾驶功能触发异常时,判定自动驾驶出现故障,所跟踪的控制数据例如包括车辆中心距车道标志线的距离和/或该距离的变化率、自动驾驶功能的启动和退出。
在一种实施方式中,基于所述驾驶数据来验证所述控制数据是否正常包括比较驾驶数据和控制数据中的对应数据,在两者的差值超过阈值或两者的性质不同时,判定自动驾驶出现故障,所述数据例如包括转向角、转向扭矩、车辆加速度和/或减速度、转向灯和刹车/油门踏板信号。
在一种实施方式中,车辆自动驾驶验证方法还包括发送自动驾驶的故障数据以进行存储。
在一种实施方式中,车辆自动驾驶验证方法还包括根据验证后的故障数据,并基于获取的场景信息以及车辆运行状态数据来分析故障原因,以调整所述控制数据。
在一种实施方式中,车辆自动驾驶验证方法还包括基于验证结果对自动驾驶性能进行评估。
根据本发明的第五方面,提供了一种存储有计算机指令的计算机可读存储介质,所述计算机指令配置为执行上述车辆自动驾驶验证方法。
本发明的车辆自动驾驶验证系统可以作为单独或额外的电子控制单元安装在车辆中,通过比较驾驶员行为和系统的请求控制行为来验证系统的准确性,能够更便捷容易地验证自动驾驶系统的性能。
附图说明
本文描述的附图仅用于示例性实施例的说明性目的,并不意在限制本发明的范围。
图1是根据本发明一个实施例的车辆自动驾驶验证系统的示意性框图;
图2是根据本发明一个实施例的车辆自动驾驶系统的示意性框图;
图3是根据本发明一个实施例的车辆自动驾驶验证方法的示意性流程图。
具体实施方式
在下文中,将参考附图描述本发明的示例性实施例。
图1示出了根据本发明一个实施例的车辆自动驾驶验证系统的示例性框图。如图1所示,该车辆自动驾驶验证系统包括自动驾驶模块1、驾驶员监控模块2和验证模块3。自动驾驶模块1配置为提供用于部分或完全自动驾驶车辆的控制数据。驾驶员监控模块2配置为获取驾驶员对车辆输入的驾驶数据。验证模块3配置为基于驾驶员监控模块2获取的驾驶数据来验证自动驾驶模块1的控制数据是否运行正常。
自动驾驶模块1包括配置为获取车辆运行数据的数据获取单元4和配置为处理来自数据获取单元4的数据以输出自动驾驶车辆的控制数据的预控制单元5。
数据获取单元4包括用于采集车辆运行场景的相关信息的第一传感器6和用于获取车辆当前运行状态数据的第二传感器7。第一传感器6可以包括相机或摄像头等成像装置,其拍摄车辆所运行的道路以及周围环境以获得场景信息,该场景信息包括但不限于:道路类型,如平路、坡道等;车道标记数据,如标志线清晰、模糊或缺失、分叉、转弯、人行道等;路面状况,比如积水、坑洼、路面印记比如车辙、光线、路面障碍物、路标、车辆、行人等。第二传感器7用于获取车辆的当前运行状态数据,如车辆行驶速度、转向扭矩、转向角、加速度、减速度、车辆中心距离两侧车道标志线的横向距离等,因此第二传感器7可以包括相应的一个或多个传感器,例如,扭矩传感器、角度传感器、加速度或减速度传感器、距离传感器等。
数据获取单元4还可以包括数据处理装置如处理器,以对获取的各种数据进行处理。例如,根据所采集的车辆中心距车道标志线的横向距离Dy,处理器可以计算出该距离随时间的变化率。
预控制单元5包括处理器8,其对来自数据获取单元4的数据根据算法进行处理,从而生成车辆控制模型以提供车辆在下一时间点的预期运行轨迹。为此,预控制单元5向车辆提供用于自动驾驶的各种控制数据,比如车速、转向扭矩、转向角、加速度、减速度等。车辆控制模型可以是控制车辆横向运动的模型,比如控制车辆的转向、变道等,也可以是控制车辆纵向运动的模型,比如控制车辆的加速、减速等。
驾驶员监控模块2监控驾驶员在驾驶车辆时的驾驶行为。驾驶员监控模块2包括一个或多个传感器9来获取这些驾驶行为,例如,驾驶员操纵转向轮的转向力矩和转向角,加速车辆时的车辆加速度或油门开度、制动车辆时的车辆减速度或制动踏板开度、转向灯的打开或关闭、雨刮器的启动或停止等。假定驾驶员对周围环境做出正确的反应,从而将驾驶员的行为用作基准行为。当车辆在道路上行驶时,驾驶员监控模块2与自动驾驶模块1同时运行,但是自动驾驶模块1输出的车辆控制数据并不用来实际控制车辆,而是例如如后面所述与驾驶员监控模块2获取的驾驶行为进行比较,以对自动驾驶性能进行评估。
验证模块3接收自动驾驶模块1输出的车辆控制数据以及驾驶员监控模块2所获取的驾驶员数据,并在各种场景下基于驾驶员监控模块2的输出来判断自动驾驶模块1是否操作正常。
以横向控制车辆为例,这些控制数据包括但不限于车辆中心距左侧或右侧车道标志线的横向距离Dy、该距离的变化率和转向扭矩T等。本领域技术人员可以想到的是,验证模块3还可以对其它车辆控制数据进行验证,比如车辆的加速、减速、报警、车灯、雨刮器等。验证模块3可以利用比较器10比较相应的数据以获得差值。例如,比较器10可以比较驾驶员的转向扭矩和自动驾驶模块1输出的转向扭矩,在两者的差值ΔT超过相应的阈值时,则判定自动驾驶模块1出现故障。此外,验证模块3可以比较自动驾驶模块1的决策行为与驾驶员的驾驶行为是否一致,例如两者的行为类型或行为性质(包括加速、减速、左转弯、右转弯、倒车、开闭车灯、开闭雨刮器等)是否一致,若两者不同,比如驾驶员减速而自动驾驶模块加速,驾驶员向左转向而自动驾驶模块向右转向等,两者的差值超过更大的阈值或者数据性质(比如左或右)不同,则判定自动驾驶模块1出现故障。另外,验证模块3还可以跟踪自动驾驶模块1的控制数据随时间的变化,在所述变化超过阈值或自动驾驶功能触发异常时,判定自动驾驶模块1出现故障。例如,验证模块3跟踪在某个时间点t与下一时间点t+1之间的距离Dy或该距离变化率的变化以获得差值,若该差值出现脉冲式变化或超过预定阈值,则判定自动驾驶模块1出现故障。再如,若自动驾驶模块1的某个或某些或全部功能异常退出或无法启动时,则判定自动驾驶模块1出现故障。
在自动驾驶模块1的输出异常或自动驾驶模块1的输出和驾驶员监控模块2的输出的差别超出相应的阈值时,验证模块3将其标识为故障数据,并将这些故障数据输出至后面描述的存储模块11。例如,验证模块3可以包括发送器16,以将故障数据发送至存储模块11。
表1示例性示出了触发SOTIF(预期功能安全)的几种错误识别场景,其中Dy是指车辆中心距左或右车道标志线的横向距离。SOTIF包括因系统或组件的功能受限导致不能实现预期功能。
表1
Figure BDA0002805873790000061
在表1中列出的前四种场景中,自动驾驶模块1均错误地识别或无法识别车道标志线,从而导致所测量的三种参数:距离Dy、该距离的变化率和转向扭矩T中的至少一个超过相应的阈值,从而判定自动驾驶模块1出现故障。在第五种场景中,由于在坡道上行驶,虽然正确识别到车道标志线,但是因坡道导致车辆路面受阻从而出现不稳定的扭矩,也使得自动驾驶模块1输出的转向扭矩和驾驶员输入的转向扭矩之间的差值大于阈值,从而判定自动驾驶模块1出现故障。在第六种场景中,由于目标检测的不稳定,造成自动驾驶系统不能正确的识别到前方的车辆/障碍物,导致没有及时做出正确的反应,例如加速或制动车辆。此时依据驾驶员的反应作为真值(基准)系统,判断系统是否发生故障。
自动驾驶故障的标准包括以下中的一个或多个:
(a)自动驾驶系统的请求扭矩和驾驶员扭矩之间的差值在连续的若干个周期(例如连续的1-20个软件周期,如10个软件周期)大于预定阈值,例如大于1Nm或2Nm,或者自动驾驶系统的请求力矩曲线与驾驶员扭矩曲线之间的相似度小于预定阈值
(b)车辆中心距左或右车道标志线的横向距离在相邻时间之间的差值大于预定阈值,如大于0.3m
(c)车辆中心距左或右车道标志线的横向距离的变化率大于预定阈值,如大于0.15m/s
(d)自动驾驶系统的请求加速度/减速度和驾驶员踩动加速踏板/制动踏板导致的加速度/减速度之间的差值大于预定阈值
(e)自动驾驶功能失效
(f)自动驾驶功能受到抑制
(g)紧急制动系统激活
(h)自动驾驶功能报错
在判定自动驾驶模块1出现故障的情况下,验证模块3可以将所收集的故障信息输出至存储模块11,该存储模块11可以是本地存储单元,也可以是远端服务器如云端。存储模块11将这些故障标记为“系统故障时间”,并建立数据库存储这些故障数据,以供后续分析故障原因。
对于验证模块3输出的故障数据,分析模块12根据自动驾驶模块1获取的场景信息(如数据获取单元4的第一传感器6采集的图像信息)以及车辆运行状态数据对故障进行分析以确定原因,从而调整自动驾驶模块1的控制数据,例如,在自动驾驶模块1产生的控制数据不完整或不全面时对其进行补充或在这些控制数据不完善时对其进行修正。例如,可以通过人工或机器读取图像信息来校验数据获取单元4输出到预控制单元5的车辆数据是否与图像信息相匹配。校验结果可以反馈(比如通过远程刷写的方式)到预控制单元5的车辆控制模型进行机器学习或深度学习,从而优化车辆控制模型,实现自动驾驶软件的更新。
可选地,自动驾驶系统还包括评估模块13,其根据验证模块3的验证结果对自动驾驶性能进行评估。例如,根据在一定时间段比如100小时、500小时、1000小时、2000小时、3000小时、4000小时、5000小时等内出现不容许的错误扭矩、出现容许范围内的错误扭矩、没有出现错误扭矩,或者根据系统请求扭矩和驾驶员扭矩差值小于2Nm、3Nm、4Nm、5Nm等不同阈值,来对自动驾驶系统的性能进行评级。例如,将自动驾驶系统启动时故障率低于期望值的标记为FP,将场景良好的情况下自动驾驶系统未启动(漏触发)的标记为FN等等。评估模块13的评估结果可以反馈至自动驾驶模块1。
根据本发明实施例的自动驾驶验证系统可以安装在车辆上以对车辆的自动驾驶功能进行验证。从而不需要具体的实车路试,这节省了开发成本,并且省时、省力。
根据本发明的自动驾驶验证系统采用了端对端验证策略,自动驾驶模块1以影子系统(黑盒)的形式在车辆内运行,并且使用驾驶员行为作为基本事实(基准)。通过比较驾驶员行为与系统行为,能够更便捷高效地验证系统性能和安全测量数据。
如上所述,仅仅在驾驶员和系统对于真实场景具有不同的反应时,才提取并在数据库中存储系统故障数据,因此明显减少了再模拟的数据量,降低了数据记录和存储成本,并且消除了对于再模拟所需的不同的传感器数据时间同步的问题。
图2示出了根据本发明一个实施例的车辆自动驾驶系统,其包括上述自动驾驶验证系统,并且还包括车辆运动控制单元14。车辆运动控制单元14包括中央处理器(ECU)15,其接收自动驾驶模块1输出的车辆控制数据来控制车辆运行。在车辆进行自动驾驶验证或完全由驾驶员控制时,车辆运动控制单元14则接收驾驶员的输入来控制车辆。车辆运动控制单元可以对车辆的各种部件进行控制,例如其与车辆的EPS(电子助力转向系统)通信以控制车辆的转向,与车辆的加速踏板和制动踏板通信以控制车辆的加速和减速,与车灯通信以控制其开启或断开,与雨刮器通信以控制其致动或停止,与报警器通信以控制其报警等等。
本发明还涉及配置有上述自动驾驶系统的车辆。
本发明进一步涉及一种车辆自动驾驶验证方法,其基于驾驶员的驾驶行为来验证响应于同一场景自动驾驶的功能是否正常。
图3示出了根据本发明一个实施例的车辆自动驾驶验证方法的流程图。如图3所示,该自动驾驶验证方法包括以下步骤:
S0:开始
S1:获取车辆运行场景的相关信息和和车辆的当前运行状态数据并进行处理,以产生用于自动驾驶车辆的控制数据;
S2:获取驾驶员响应于所述场景对车辆输入的驾驶数据;
S3:根据所述驾驶数据来判定控制数据是否正常?
在步骤S1中,可以通过第一传感器6比如成像装置如相机或摄像头拍摄车辆周围的车辆运行场景,包括如前所述的道路类型、路况、车道标志等信息;还可以通过第二传感器7获取车辆的当前运行状态数据,例如车速、行驶方向、加速度、减速度、扭矩、转向角、距车道标志线距离等。所获取的车辆运行场景数据和车辆的当前运行状态数据被输入至预控制单元5以产生车辆控制模型。该车辆控制模型用来创建车辆在下一时间点的运行轨迹,从而产生自动驾驶控制数据。
在步骤S2中,与步骤S1基本同步地,驾驶员在同一车辆运行场景下控制车辆,从而响应于车辆运行场景对车辆输入驾驶数据,比如转向扭矩、转向角、加速度、减速度等。
在步骤S3中,基于驾驶数据来验证自动驾驶控制数据。例如,自动驾驶控制数据和驾驶员驾驶数据的对应数据可以被输入至比较器以比较两者的差值是否超过预定阈值,例如可以比较自动驾驶请求的转向扭矩和驾驶员输入的转向扭矩,当两者的差值超过预定阈值时,判定自动驾驶出现故障。或者,可以判断自动驾驶控制数据的决策行为与驾驶员的驾驶行为是否一致,例如两者是否均为加速行为、均为减速行为、或具有相同的转向方向等。若两者不同,如一个为加速而另一个为减速,或者一个为左转向而另一个为右转向,则两者的差值超过更大的阈值或两者的数据性质彼此不同,则判定自动驾驶出现故障。
另外,还可以跟踪自动驾驶控制数据自身的变化,例如可以跟踪车辆中心距左或右侧车道标志线的横向距离Dy和该距离的变化率的变化,比较横向距离Dy及其变化率在t时刻与t+1时刻之间的差值是否超过预定阈值,若该差值过大,则判定自动驾驶出现故障。此外,还可以跟踪自动驾驶功能是否触发异常,比如自动驾驶的某个或某些或全部功能是否异常退出、是否无法正常启动等,若自动驾驶功能触发异常,则判定自动驾驶出现故障。
上述自动驾驶验证方法还可以包括步骤S4:将判定为出现自动驾驶故障的相关数据输出至存储单元,例如在本地缓存后发送至远端服务器如云端的数据库。这些相关数据可以包括与该故障相关联的场景数据、自动驾驶控制数据和驾驶员的驾驶数据。
可选地,上述自动驾驶验证方法还可以包括步骤S5:根据采集到的数据对自动驾驶性能进行评估,如通过计算故障率来实现。例如,根据在一定时间段比如100小时、500小时、1000小时、2000小时、3000小时、4000小时、5000小时等内出现不容许的错误扭矩或容许范围内的错误扭矩的次数,或没有出现错误扭矩,或者根据系统请求扭矩和驾驶员扭矩差值大于2Nm、3Nm、4Nm、5Nm等不同阈值的次数,来计算自动驾驶的故障率,以对自动驾驶性能进行评级。例如,将自动驾驶系统启动时故障率低于期望值的标记为FP,将场景良好的情况下自动驾驶系统未启动(漏触发)的标记为FN等等。评估结果可以反馈至自动驾驶控制数据。
上述自动驾驶验证方法还可以包括步骤S6:分析故障数据及可选的评估报告,并基于获取的场景信息和车辆运行状态数据产生校正数据以更新自动驾驶软件。例如,读取自动驾驶故障的相关数据(例如通过专业人员或专业机器(例如包括软硬件、固件)),如车辆运行场景数据和车辆运行状态数据,基于驾驶员的驾驶数据对其进行分析以确定故障原因,以反馈至自动驾驶控制数据对其进行调整如补充或校正,如将驾驶员的驾驶数据作为调整后的自动驾驶控制数据反馈(比如通过远程刷写的方式)至车辆控制模型,以进行机器学习或深度学习,从而优化车辆控制模型,实现自动驾驶软件的更新。
该方法在上述步骤S6之后返回S7,并且可以在车辆运行期间不断地重复进行。
本发明还涉及一种存储有计算机指令的计算机可读存储介质,其包括但不限于硬盘、光存储设备、磁存储设备、只读存储器(ROM)、可编程只读存储器(PROM)、可擦除可编程只读存储器(EPROM)、电可擦除可编程只读存储器(EEPROM)、闪存等。这些计算机指令在被执行时用于实施本文所描述的自动驾驶验证方法。
另外,本领域技术人员可以想到的是,本发明所述的车辆可包括广义上的运输装置,例如卡车、轿车、摩托车、拖车、公交车、火车、电车、飞机、船只、缆绳运输、空中缆车、无人驾驶飞机、航天器或其他类似的人工操作的或无人驾驶的运输装置。
尽管上面参考示例性实施例描述了本发明,但本领域技术人员可以在不脱离本发明精神的范围内做出各种修改。

Claims (15)

1.一种车辆自动驾驶验证系统,包括:
自动驾驶模块(1),其包括:
数据获取单元(4),其配置为采集车辆运行场景的相关信息和车辆的当前运行状态数据;和
预控制单元(5),其配置为处理来自数据获取单元(4)的数据以输出用于自动驾驶车辆的控制数据,
驾驶员监控模块(2),其配置为获取驾驶员响应于所述场景对车辆输入的驾驶数据;和
验证模块(3),其配置为基于驾驶员监控模块(2)的驾驶数据来验证自动驾驶模块(1)的控制数据是否正常。
2.根据权利要求1所述的车辆自动驾驶验证系统,其中,所述验证模块(3)配置为跟踪自动驾驶模块(1)的控制数据随时间的变化,在所述变化超过阈值或自动驾驶功能触发异常时,验证模块(3)判定自动驾驶模块(1)出现故障,其中,所跟踪的控制数据例如包括车辆中心距车道标志线的距离和/或该距离的变化率、自动驾驶功能的启动与退出。
3.根据权利要求1或2所述的车辆自动驾驶验证系统,其中,所述验证模块(3)配置为比较驾驶员监控模块(2)的驾驶数据和自动驾驶模块(1)的控制数据,在所述驾驶数据和所述控制数据的差值超过阈值或所述驾驶数据和所述控制数据的性质不同时,验证模块(3)判定自动驾驶模块(1)出现故障,其中,所比较的数据例如包括转向角、转向扭矩、车辆加速度和/或减速度以及转向灯和刹车/油门踏板信号。
4.根据权利要求1-3中任一项所述的车辆自动驾驶验证系统,其中,所述验证模块(3)配置为将自动驾驶模块(1)的故障数据发送至存储模块(11)例如云端服务器。
5.根据权利要求1-4中任一项所述的车辆自动驾驶验证系统,还包括分析模块(12),其配置为根据验证模块(3)判定的故障数据,并基于自动驾驶模块(1)获取的场景信息和车辆运行状态数据来分析故障原因,以调整自动驾驶模块(1)的控制数据。
6.根据权利要求1-5中任一项所述的车辆自动驾驶验证系统,还包括评估模块(13),其配置为根据验证模块(3)的验证结果对自动驾驶性能进行评估。
7.一种车辆自动驾驶系统,其包括:
根据权利要求1-6中任一项所述的车辆自动驾驶验证系统;和
车辆运动控制单元(14),其配置为基于自动驾驶模块(1)的控制数据来控制车辆的运行。
8.一种车辆,其包括根据权利要求7所述的车辆自动驾驶系统。
9.一种车辆自动驾驶验证方法,包括:
获取车辆运行场景的相关信息和车辆的当前运行状态数据并进行处理,以产生用于自动驾驶车辆的控制数据,
获取驾驶员响应于所述场景对车辆输入的驾驶数据;
基于所述驾驶数据来验证所述控制数据是否正常。
10.根据权利要求9所述的车辆自动驾驶验证方法,其中,还包括跟踪所述控制数据随时间的变化,在所述变化超过阈值或自动驾驶功能触发异常时,判定自动驾驶出现故障,所跟踪的控制数据例如包括车辆中心距车道标志线的距离和/或该距离的变化率、自动驾驶功能的启动与退出。
11.根据权利要求9或10所述的车辆自动驾驶验证方法,其中,基于所述驾驶数据来验证所述控制数据是否正常包括比较驾驶数据和控制数据,在两者的差值超过阈值或两者的性质不同时,判定自动驾驶出现故障,所述数据例如包括转向角、转向扭矩、车辆加速度和/或减速度以及转向灯和刹车/油门踏板信号。
12.根据权利要求9-11中任一项所述的车辆自动驾驶验证方法,还包括发送自动驾驶的故障数据以进行存储。
13.根据权利要求9-12中任一项所述的车辆自动驾驶验证方法,还包括根据验证后的故障数据,并基于获取的场景信息和车辆运行状态数据来分析故障原因,以调整所述控制数据。
14.根据权利要求9-13中任一项所述的车辆自动驾驶验证方法,还包括基于验证结果对自动驾驶性能进行评估。
15.一种存储有计算机指令的计算机可读存储介质,所述计算机指令配置为执行根据权利要求9-14中任一项所述的车辆自动驾驶验证方法。
CN202011370142.9A 2020-11-30 2020-11-30 车辆自动驾驶验证系统和方法、车辆自动驾驶系统、车辆和计算机可读存储介质 Pending CN114578802A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN202011370142.9A CN114578802A (zh) 2020-11-30 2020-11-30 车辆自动驾驶验证系统和方法、车辆自动驾驶系统、车辆和计算机可读存储介质
PCT/EP2021/082960 WO2022112397A1 (en) 2020-11-30 2021-11-25 Vehicle autonomous driving validation system and method, vehicle autonomous driving system, vehicle and computer readable storage medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011370142.9A CN114578802A (zh) 2020-11-30 2020-11-30 车辆自动驾驶验证系统和方法、车辆自动驾驶系统、车辆和计算机可读存储介质

Publications (1)

Publication Number Publication Date
CN114578802A true CN114578802A (zh) 2022-06-03

Family

ID=78825003

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011370142.9A Pending CN114578802A (zh) 2020-11-30 2020-11-30 车辆自动驾驶验证系统和方法、车辆自动驾驶系统、车辆和计算机可读存储介质

Country Status (2)

Country Link
CN (1) CN114578802A (zh)
WO (1) WO2022112397A1 (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115339465A (zh) * 2022-08-12 2022-11-15 重庆长安汽车股份有限公司 自动驾驶事件上云平台的性能监测方法、系统
CN116238544A (zh) * 2023-05-12 2023-06-09 禾多科技(北京)有限公司 一种自动驾驶车辆的行驶控制方法及控制系统
US20230399029A1 (en) * 2022-06-09 2023-12-14 Baidu Usa Llc Operator brake detection for autonomous vehicles

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2624914A (en) * 2022-11-30 2024-06-05 Oxa Autonomy Ltd A computer-implemented method, a transistory or non-transistory computer-readable medium, and an autonomous vehicle

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102016007563A1 (de) * 2016-06-21 2017-02-09 Daimler Ag Verfahren zur Trajektorienplanung
DE102017200180A1 (de) * 2017-01-09 2018-07-12 Bayerische Motoren Werke Aktiengesellschaft Verfahren und Testeinheit zur Bewegungsprognose von Verkehrsteilnehmern bei einer passiv betriebenen Fahrzeugfunktion
DE102019202106A1 (de) * 2019-02-18 2020-08-20 Zf Friedrichshafen Ag Verfahren zum Validieren von automatisierten Funktionen eines Fahrzeugs
DE102019206908B4 (de) * 2019-05-13 2022-02-17 Psa Automobiles Sa Verfahren zum Trainieren wenigstens eines Algorithmus für ein Steuergerät eines Kraftfahrzeugs, Computerprogrammprodukt, Kraftfahrzeug sowie System

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20230399029A1 (en) * 2022-06-09 2023-12-14 Baidu Usa Llc Operator brake detection for autonomous vehicles
CN115339465A (zh) * 2022-08-12 2022-11-15 重庆长安汽车股份有限公司 自动驾驶事件上云平台的性能监测方法、系统
CN116238544A (zh) * 2023-05-12 2023-06-09 禾多科技(北京)有限公司 一种自动驾驶车辆的行驶控制方法及控制系统
CN116238544B (zh) * 2023-05-12 2023-07-14 禾多科技(北京)有限公司 一种自动驾驶车辆的行驶控制方法及控制系统

Also Published As

Publication number Publication date
WO2022112397A1 (en) 2022-06-02

Similar Documents

Publication Publication Date Title
CN114578802A (zh) 车辆自动驾驶验证系统和方法、车辆自动驾驶系统、车辆和计算机可读存储介质
CN110775073B (zh) 用于识别传感器的减退的性能的方法、控制器和存储介质
CN107590768B (zh) 用于对用于运输工具的位置和/或方向的传感器数据进行处理的方法
CN107571868B (zh) 用于执行对车辆的车辆引导的自动干预的方法
CN109421731B (zh) 可信度检验模块、驾驶辅助系统和校准传感器的方法
US11940790B2 (en) Safe hand-off between human driver and autonomous driving system
CN107054360B (zh) 用于自动控制带有侦察车的跟随车的方法和系统
CN109658719B (zh) 用于识别交通指示牌的方法、车辆设备和可信性验证方法以及存储媒介
CN107571866B (zh) 用于分析传感器数据的方法
CN107015550B (zh) 诊断测试执行控制系统和方法
US20190111922A1 (en) In-vehicle traffic assist
US11069161B2 (en) Adaptive sensor fusion
CN110733514B (zh) 用于在车辆事故后释放驾驶辅助功能的方法和设备及存储介质
US11396301B2 (en) Vehicle control apparatus, vehicle control method, and non-transitory computer-readable storage medium storing program
JP2017174244A (ja) 情報提供装置
KR20160137411A (ko) 자동차 모니터링 방법
US11195349B2 (en) External-world recognition system
US20210206392A1 (en) Method and device for operating an automated vehicle
WO2018025632A1 (ja) 撮像装置
CN116901963A (zh) 自动驾驶车辆的制动控制方法、装置、车辆和介质
JP6796679B2 (ja) 車両制御システム及び方法、並びに走行支援サーバ
US20240199072A1 (en) Method for operating an assistance system, and assistance system
US20220266860A1 (en) Control device of vehicle, control method, and program
CN115848412A (zh) 感知融合方法、装置、设备及存储介质
CN112287797A (zh) 一种数据处理方法、装置、电子设备及可读存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination