CN115203062B - 自动驾驶测试系统、方法、电子设备及存储介质 - Google Patents

自动驾驶测试系统、方法、电子设备及存储介质 Download PDF

Info

Publication number
CN115203062B
CN115203062B CN202211118613.6A CN202211118613A CN115203062B CN 115203062 B CN115203062 B CN 115203062B CN 202211118613 A CN202211118613 A CN 202211118613A CN 115203062 B CN115203062 B CN 115203062B
Authority
CN
China
Prior art keywords
vehicle
module
motion
test
simulation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202211118613.6A
Other languages
English (en)
Other versions
CN115203062A (zh
Inventor
王宝宗
戴一凡
成波
王小明
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tsinghua University
Suzhou Automotive Research Institute of Tsinghua University
Original Assignee
Tsinghua University
Suzhou Automotive Research Institute of Tsinghua University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tsinghua University, Suzhou Automotive Research Institute of Tsinghua University filed Critical Tsinghua University
Priority to CN202211118613.6A priority Critical patent/CN115203062B/zh
Publication of CN115203062A publication Critical patent/CN115203062A/zh
Application granted granted Critical
Publication of CN115203062B publication Critical patent/CN115203062B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/36Preventing errors by testing or debugging software
    • G06F11/3668Software testing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F30/00Computer-aided design [CAD]
    • G06F30/20Design optimisation, verification or simulation

Abstract

本申请实施例公开了一种自动驾驶测试系统、方法、电子设备及存储介质。应用于自动化测试领域。包括:交通流生成模块、仿真模块、注入装置和智能测试台架。其中,交通流生成模块用于生成至少一个参考目标的运动轨迹。仿真模块用于根据交通流生成模块传输的至少一个参考目标的运动轨迹和智能测试台架传输的被测试车辆的实时运动数据,生成关于自动驾驶的仿真场景。注入装置用于将仿真场景注入至被测试车辆中,以使得被测试车辆根据仿真场景规划被测试车辆的运动状态。智能测试台架用于感知并测试被测试车辆的运动状态,得到被测试车辆的实时运动数据。本申请实施例可以实现在环测试的系统化,从而提高测试效率。

Description

自动驾驶测试系统、方法、电子设备及存储介质
技术领域
本发明涉及自动化测试领域,具体而言,涉及一种自动驾驶测试系统、方法、电子设备及存储介质。
背景技术
随着自动驾驶技术的迅速发展,高等级自动驾驶汽车已经逐渐走进人们的生活。针对自动驾驶汽车的测试过程,据测算自动驾驶汽车平均需要130万英里的测试里程才能保证系统的安全性。因此传统的场地测试和道路测试已经无法满足自动驾驶汽车的测试需求。
鉴于以上困难,采用在环测试的方式在自动驾驶汽车开发、验证阶段进行测试,不但能够极大的节省时间和成本,亦能够开展一些在实际场地或道路测试上无法实现的危险测试场景,所以在环测试已经成为了自动驾驶汽车测试验证的一个必不可少的环节。目前的在环测试均是基于轴耦合测功机和仿真软件进行联合测试的,该方法的缺点是在测试自动驾驶功能的时候需要增加额外的转向机构来使车轮实现转向功能来达到高等级自动驾驶功能测试的目的。同时,在环测试中使用的各个设备均是独立的,并没有系统化,因此测试时需要人工操作各设备来完成配合,测试效率较低。因此,如何更高效准确的完成测试过程,实现在环测试的系统化成为亟需解决的问题。
发明内容
本发明提供了一种自动驾驶测试系统、方法、电子设备及存储介质。利用交通流生成模块、仿真模块、注入装置和智能测试台架来搭建测试系统,以实现对被测试车辆进行自动化测试的目的。新的自动驾驶测试系统可以实现在环测试的系统化,从而提高测试效率。
第一方面,本发明实施例提供了一种自动驾驶测试系统,该自动驾驶测试系统包括:
交通流生成模块、仿真模块、注入装置和智能测试台架。
交通流生成模块与仿真模块的输入端相连,仿真模块的输出端通过注入装置与被测试车辆相连,智能测试台架的输出端与仿真模块的输入端相连。
其中,交通流生成模块用于生成至少一个参考目标的运动轨迹。
仿真模块用于根据交通流生成模块传输的至少一个参考目标的运动轨迹和智能测试台架传输的被测试车辆的实时运动数据,生成关于自动驾驶的仿真场景。
注入装置用于将仿真场景注入至被测试车辆中,以使得被测试车辆根据仿真场景规划被测试车辆的运动状态。
智能测试台架用于感知并测试被测试车辆的运动状态,得到被测试车辆的实时运动数据。
在一个可选的实施方式中,智能测试台架包括智能测试台架控制单元。
其中,智能测试台架支撑被测试车辆的运动,被测试车辆的车轮驱动智能测试台架中的内置转鼓进行转动。
智能测试台架控制单元用于测试内置转鼓的转动数据。
在一个可选的实施方式中,智能测试台架还包括车辆动力学模块。
车辆动力学模块用于根据内置转鼓的转动数据确定被测试车辆的实时运动数据,并将被测试车辆的实时运动数据传输给仿真模块。
在一个可选的实施方式中,交通流生成模块具体用于获取仿真模块中的被测试车辆的实时运动数据,根据被测试车辆的实时运动数据更新至少一个参考目标的运动轨迹。
在一个可选的实施方式中,交通流生成模块的模块参数根据测试需求调整,模块参数用于调整参考目标的数量或参考目标的运动行为。其中,参考目标的运动行为与参考目标的运动轨迹相关。
在一个可选的实施方式中,注入装置具体用于:将仿真场景以视频数据的方式注入至被测试车辆的摄像头模组中。
在一个可选的实施方式中,自动驾驶测试系统还包括交互显示模块。
交互显示模块与仿真模块相连。
交互显示模块用于显示仿真场景。
第二方面,本发明实施例提供了一种自动驾驶测试方法,该测试方法基于第一方面提供的自动驾驶测试系统,该测试方法包括:
通过仿真模块构建仿真场景,其中,仿真场景包括被测试车辆和至少一个参考目标。
通过交通流生成模块生成至少一个参考目标的运动轨迹,并根据至少一个参考目标的运动轨迹更新仿真场景中的至少一个参考目标的运动状态。
通过智能测试台架获取被测试车辆的实时运动数据,并根据被测试车辆的实时运动数据更新仿真场景中的被测试车辆的运动状态。
通过注入装置将仿真模块中的更新后的仿真场景注入至被测试车辆中,以使得被测试车辆根据更新后的仿真场景规划被测试车辆的运动状态。
本申请实施例第三方面还提供了一种电子设备,包括:存储器和处理器,存储器和处理器耦合。
其中,存储器用于存储一条或多条计算机指令。
处理器用于执行一条或多条计算机指令,以实现上述第二方面所述的自动驾驶测试方法。
本申请实施例第四方面还提供了一种计算机可读存储介质,其上存储有一条或多条计算机指令,其特征在于,该指令被处理器执行以实现上述任意一种技术方案所述的自动驾驶测试方法。
在本申请实施例中,利用交通流生成模块、仿真模块、注入装置和智能测试台架搭建了新的自动驾驶测试系统。在该测试系统中,交通流生成模块用于生成驾驶场景中,其他参考目标的运动轨迹。仿真模块则根据交通流生成模块提供的其他参考目标的运动轨迹以及智能测试台架提供的被测试车辆的运动轨迹,来进行仿真,生成仿真场景。然后注入装置将仿真场景注入到被测试车辆中,供被测试车辆规划未来的运动状态。其中,智能测试台架实现了将被测试车辆的实时运动状态反馈给仿真模块的过程,从而实现了测试闭环。并且交通流生成模块能够提供复杂的驾驶场景,从而可以实现对高等级自动驾驶汽车进行完备功能测试的目的。整个自动驾驶测试系统实现了对被测试车辆进行自动化测试的目的,从而提高测试效率。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单介绍。显而易见地,下面描述中的附图仅仅是本发明的一些实施例。对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本申请实施例提供的自动驾驶测试系统的结构示意图;
图2为本申请实施例提供的一种自动驾驶测试方法的流程示意图;
图3为本申请实施例提供的电子设备的一种结构示意图。
具体实施方式
本发明提供了一种自动驾驶测试系统、方法、电子设备及存储介质。利用交通流生成模块、仿真模块、注入装置和智能测试台架来搭建测试系统,以实现对被测试车辆进行自动化测试的目的。新的自动驾驶测试系统可以实现在环测试的系统化,从而提高测试效率。
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整的描述。显然,所描述的实施例仅仅是本发明的一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有付出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
需要说明的是,本发明实施例及附图中的术语“包括”和“具有”以及它们的任何变形,意图在于覆盖不排他的包含。例如包含的一系列步骤或单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元,而是可选地还包括没有列出的步骤或单元,或可选地还包括对于这些过程、方法、产品或设备固有的其他步骤或单元。
随着自动驾驶技术的迅速发展,高等级自动驾驶汽车已经逐渐走进人们的生活,带有ADAS(Advanced Driving Assistance System,高级驾驶辅助系统)功能的自动驾驶汽车,L1(Level 1,1级)、L2级已经投入量产,同时不少车企开始计划并推进L3和L4级自动驾驶汽车的市场化进程。针对自动驾驶汽车的测试过程,据测算自动驾驶汽车平均需要130万英里的测试里程才能保证系统的安全性。因此传统的场地测试和道路测试已经无法满足自动驾驶汽车的测试需求。这是因为,采用传统的道路测试需要大量的配套设备以及相关经验的技术人员,测试过程中会造成巨大的人力、物力和财力消耗。同时受制于人类的经验和场地原因,传统的道路测试会导致被测功能的重复性较差以及会存在不能测试复杂和危险场景等问题。
鉴于以上困难,采用在环测试方式在自动驾驶汽车开发、验证阶段对自动驾驶汽车进行测试,不但能够极大的节省时间和成本,亦能够开展一些在实际场地或道路测试上无法实现的危险测试场景。所以在环测试已经成为了自动驾驶汽车测试验证的一个必不可少的环节。目前,在环测试有多种方法,从软件在环(SiL)、模型在环(MiL)、硬件在环(HiL),再到整车在环(VIL)。而不同的方法针对自动驾驶研发与测试的不同阶段。
整车级别的自动驾驶功能测试通常是在实验室内通过硬件和仿真软件进行的。现有实验室测试方案是基于轴耦合测功机和仿真软件进行联合测试,该方法的缺点是在测试自动驾驶功能的时候需要增加额外的转向机构来使车轮实现转向功能来达到高等级自动驾驶功能测试的目的。同时以往的系统并没有可以支撑高等级自动驾驶功能测试的复杂场景生成系统,难以对高等级自动驾驶汽车进行完备的功能测试。并且,在环测试中使用的各个设备均是独立的,并没有系统化,因此测试时需要人工操作各设备来完成配合,测试效率较低。因此,如何更高效准确的完成测试过程,实现在环测试的系统化成为亟需解决的问题。
基于上述问题,本申请实施例一种自动驾驶测试系统、方法、电子设备及存储介质。利用交通流生成模块、仿真模块、注入装置和智能测试台架来搭建测试系统,以实现提高被测试车辆的测试效率的目的。新的自动驾驶测试系统可以实现在环测试的系统化。下面将结合具体的实施方式,对本申请实施例所提供的方案进行详细的介绍。
图1为本申请实施例提供的自动驾驶测试系统的结构示意图。如图1所示,该自动驾驶测试系统包括以下几个模块:
交通流生成模块、仿真模块、注入装置、智能测试台架、交互显示模块。其中,智能测试台架对应有智能测试台架控制单元以及车辆动力学模块。
其中,交通流生成模块与仿真模块的一端进行连接,仿真模块的另一端通过注入装置与被测试车辆相连。而被测试车辆则被放置于智能测试台架上。
其中,交通流生成模块用于提供复杂的驾驶场景,生成大规模真实的交通流测试场景用例。其中,交通流生成模块可以为仿真模块提供多个参考目标的运动轨迹。这些参考目标则是在实际驾驶过程中,被测试车辆可能遇到的周围运动物体。比如周围行驶的机动车、路边行人、周围行驶的非机动车等。这些参考目标需要与被测试车辆进行交互,被测试车辆需要根据周围运动物体的运动情况来控制自己的运动状态,规划自己的运动轨迹。比如左转、右转、刹车,加速、减速等。因此,可以控制交通流生成模块中参考目标的个数以及各参考目标的运动行为,来控制测试用例的复杂程度。可以理解的,参考目标的数量越多,各参考目标的运动行为越复杂(运动轨迹越复杂),那么该测试场景就越危险。当需要测试被测试车辆在复杂场景下的安全性能,可以利用交通流生成模块构建更多的动态交互轨迹数据集,不间断的加入用于危险交互的新的参考目标的行驶轨迹。
而仿真模块则与交通流生成模块相互通信,实时获取交通流生成模块提供的参考目标的运动轨迹数据,同时,还需要与智能测试台架通信,获取被测试车辆的实时运动数据。接着就需要根据参考目标的运动轨迹数据和被测试车辆的实时运动数据来对测试场景进行仿真还原,得到关于自动驾驶的仿真测试场景。
其中,交互显示模块与仿真模块连接,可以实时显示仿真场景。这样,测试人员可以通过交互显示模块来观测仿真测试场景中被测试车辆的运动情况,从而判断被测试车辆的安全性。
接着,仿真模块需要通过注入装置将仿真测试场景注入被测试车辆中,被测试车辆就可以根据仿真测试场景来规划和控制被测试车辆的运动。其中,注入装置包括视频注入装置,视频注入装置用于将仿真场景生成的视频数据注入至被测试车辆的摄像头模组中。这样,被测试车辆就可以根据视频数据来判断路况以及周围行驶环境,从而确定后续的行车行为,规划后续的行车轨迹。
示例性的,仿真模块与雷达模块通过网络交换机等介质进行连接,将模拟的交通参与物(参考目标)注入给雷达模块,雷达模块会以物理波形的方式模拟雷达在遇到物体后反射回来的波形,达到对雷达的测试目的。
示例性的,仿真模块与GNSS(Global Navigation Satellite System,全球导航卫星系统)通过网络交换机等介质进行连接,将仿真测试过程中被测车辆的定位信息发送到GNSS系统,车载定位装置从GNSS系统中获取到当前的车辆位置来实现定位目的。仿真模块还可以与V2X(vehicle to everything,车对外界的信息交换)系统电性连接,将实时仿真过程中交通参与物和其他信息通过V2X以5G通讯等方式发送到被测车辆,用来感知路侧设施传输的数据。
当注入装置将仿真测试场景注入被测试车辆后,被测试车辆就需要根据仿真测试场景来规划和控制被测试车辆的运动。示例性的,被测试车辆可以包含智能驾驶感知单元与智能驾驶控制单元。其中智能驾驶感知单元与注入装置电性连接,用来感知仿真测试场景对应的各项数据。智能驾驶控制单元直接控制车辆的加速、减速、转弯等。
而被测试车辆直接放置于智能测试台架上。其中,智能测试台架内置有转鼓,支撑车辆的行驶。并且转鼓的前端两个滚筒与被测车辆前轮直接接触,被测试车辆在行驶的时候,会带动与前轮接触的两个滚筒转动,两个滚筒是随动状态,因此可以支持车轮的随动转向运动。两个滚筒下面的实体托盘会支撑滚筒和车辆,实体托盘下方会放置多颗滚珠来保证实体托盘的转向运动,从而实现车辆前轮转向功能。
而智能测试台架控制单元与智能测试台架电性连接,对智能测试台架进行转动控制、数据采集等操作。即智能测试台架控制单元直接测试内置转鼓的转动数据,并将内置转鼓的转动数据传输给车辆动力学模块。然后车辆动力学模块用于根据内置转鼓的转动数据确定被测试车辆的实时运动数据,并将被测试车辆的实时运动数据传输给仿真模块。具体的,车辆动力学模块根据转鼓的转速以及转向数据进行计算,得到的速度、转向、侧倾角、俯仰角、加速度等数据发送到仿真模块中,供仿真模块更新被测试车辆的运动轨迹,以实现测试的闭环。
基于上述自动驾驶测试系统,整个被测试车辆的测试过程为:首先仿真模块需要构建被测试车辆与交通参与物模型。其中被测试车辆的建模可以基于真实被测车辆的物理参数以及传感器配置进行构建。而交通参与物(行人、机动车、非机动车)的物理模型也会依据真实交通状况进行配置,包含不同类别的行人,不同类别的机动车以及不同类别的非机动车等。然后交通流生成模块基于本申请实施例提供的深度学习神经网络以及运动轨迹生成方法来生成接近真实交通环境的行人、机动车即非机动车模型的运动轨迹。同时可以依据测试要求进行交通流的密度的修改。即可以改变单个交通参与物的运动行为(运动轨迹);同时可以配置行人、机动车、非机动车的数量以及占比等。
接着交通流生成模块将各交通参与物的运动轨迹输入仿真模块,以改变仿真环境中交通参与物的运动状态。然后仿真模块还需要通过车辆动力学模块发送的被测试车辆的实时运动数据,以更新仿真环境中的被测试车辆的运动状态。最后基于更新后的被测试车辆和交通参与物,生成新的测试环境,并通过注入装置将更新后的测试环境数据注入到被测试车辆中,以便被测试车辆规控动作,确定后续的运动行为以及运动轨迹。
在本申请实施例中,利用交通流生成模块、仿真模块、注入装置和智能测试台架搭建了新的自动驾驶测试系统。在该测试系统中,交通流生成模块用于生成驾驶场景中,其他参考目标的运动轨迹。仿真模块则根据交通流生成模块提供的其他参考目标的运动轨迹以及智能测试台架提供的被测试车辆的运动轨迹,来进行仿真,生成仿真场景。然后注入装置将仿真场景注入到被测试车辆中,供被测试车辆规划未来的运动状态。其中,智能测试台架实现了将被测试车辆的实时运动状态反馈给仿真模块的过程,从而实现了测试闭环。并且交通流生成模块能够提供复杂的驾驶场景,从而可以实现对高等级自动驾驶汽车进行完备功能测试的目的。整个自动驾驶测试系统实现了对被测试车辆进行自动化测试的目的,从而提高测试效率。
结合上述应用场景,下面对交通流生成模块进行详细的介绍。其中,交通流生成模块可以根据轨迹生成模型来生成多个参考目标的运动轨迹。其中,该轨迹生成模型从左到右可以包括编码器层(Encoder),卷积池化层(Convolutional Social Pooling)和解码器层(Decoder)。
编码器层用来提供运动轨迹对应的运动特征。示例性的,若参考目标中分为主车和周边车辆,那么主车和周边车辆的历史轨迹需要分别输入到一个LSTMEncoder单元中进行轨迹编码,以提取它们各自在过去一段时间内的历史运动特征。LSTM即长短时记忆网络,作为一种特殊结构的循环神经网络用于提取时空序列特征。示例性的,在本系统中,各个车辆的LSTM参数可共享,且隐状态数目为128,经编码处理后分别输出一个64维的轨迹特征向量。其中,与最下面一个编码单元相连接的车辆代表主车,其余则为周边车辆,周边车辆需要分别输入不同的LSTMEncoder单元进行轨迹编码。
而卷积池化层则用来将编码器层处理生成的多条相对独立的轨迹特征向量进行跨智能体的信息交互融合。具体来讲,周边车辆的轨迹特征向量将按照其在主车周围的空间分布,分别填入到对应的以主车为中心的虚拟三维网格中,从而构成主车的社交信息向量(Social Tensor)。随后,社交信息向量会连续经过3x3卷积,3x1卷积,以及2x1卷积的最大池化操作处理,进一步完成特征压缩,最后得到一个社交上下文向量(social context)。另一方面,编码器层对主车运动轨迹进行编码后得到的轨迹特征向量,将直接经过一个全连接神经网络层(fc 32)处理,得到包含主车动力学特征的轨迹特征向量(vehicledynamics)。然后主车的轨迹特征向量跟社交上下文向量进行拼接操作(concatenation)后会输出一个总的轨迹编码向量(Trajectory Encoding,简称TE)到解码器模块中。
解码器则接收卷积池化层输出的TE向量,首先经过两个Softmax网络层计算得到主车横向(lateral)和纵向(longitudinal)的行为分类预测结果,该行为分类预测结果进一步经过one-hot类别编码后,再与TE向量结合,输入到LSTM解码器单元按时间顺序进行循环解码,每个时刻LSTM输出一个5维向量,对应二维高斯分布的5个参数,描述主车或者周围车辆在未来一段时间内运动轨迹,即各个时刻所生成的轨迹点的二维空间分布。
基于上述轨迹生成模型,利用该轨迹生成模型生成多个参考目标的运动轨迹的流程可以是:
步骤一:获取至少一个参考车辆和目标车辆的历史运动轨迹数据。其中,至少一个参考车辆为驾驶场景中目标车辆的周边车辆。
当对被测试车辆进行测试时,首先获取被测试车辆在一段时间内的历史运动轨迹数据,以及测试场景中被测试车辆周围的周边车辆的历史运动轨迹数据。由于被测试车辆需要复杂的测试场景,因此要利用该生成方法来更新周边车辆的运动轨迹,这样才可以给被测试车辆提供更多的驾驶调整,从而更好的检测被测试车辆的系统安全。因此,在该场景下,需要根据轨迹生成模型逐个输出各周边车辆的运动规划轨迹。可以理解的,轨迹生成模型可以根据参考车辆和目标车辆的历史运动轨迹得到目标车辆的规划运动轨迹,也可以根据参考车辆和目标车辆的历史运动轨迹得到周边车辆的规划运动轨迹。只需要改变轨迹生成模型的输出结构即可。这是因为,可以将周边车辆作为一个“目标车辆”,被测试车辆和其他周边车辆作为“参考车辆”即可。
步骤二:利用编码器层获取目标车辆的第一历史轨迹特征向量和参考车辆对应的第二历史轨迹特征向量。
具体的,编码器层用于提取时空序列特征,目标车辆和参考车辆的历史运动轨迹数据需要分别输入到一个LSTM单元中进行轨迹编码,以提取它们各自在过去一段时间内的历史运动特征。LSTM即长短时记忆网络,作为一种特殊结构的循环神经网络用于提取时空序列特征。示例性的,在本系统中,各个车辆的LSTM参数可共享,且隐状态数目为128,经编码处理后分别输出一个64维的轨迹特征向量。
步骤三:将所有的第二历史轨迹特征向量输入至卷积池化层,利用卷积池化层对所有的第二历史轨迹特征向量进行特征融合,得到目标车辆的社交信息向量。
卷积池化层用来将编码器层处理生成的多条相对独立的轨迹特征向量进行跨智能体的信息交互融合。具体来讲,周边车辆的第二历史轨迹特征向量将按照其在目标车辆周围的空间分布,分别填入到对应的以目标车辆为中心的虚拟三维网格中,从而构成目标车辆的社交信息向量。随后,社交信息向量会连续经过3x3卷积,3x1卷积,以及2x1卷积的最大池化操作处理,进一步完成特征压缩,最后得到压缩后的社交信息向量。
步骤四:将社交信息向量和第一历史轨迹特征向量进行拼接,得到轨迹编码向量。
另一方面,编码器层对主车运动轨迹进行编码后得到的轨迹特征向量,将直接经过一个全连接神经网络层处理,得到包含主车动力学特征的轨迹特征向量。然后主车的轨迹特征向量跟压缩后的社交信息向量进行拼接操作后会输出一个总的轨迹编码向量到解码器模块中。
步骤五:将轨迹编码向量输入至解码器层中,得到目标车辆的运动规划轨迹。
解码器层则接收卷积池化层输出的轨迹编码向量,首先经过两个Softmax网络层计算得到主车横向(lateral)和纵向(longitudinal)的行为分类预测结果,该行为分类预测结果即用来描述目标车辆在未来一段时间内运动规划轨迹,即各个时刻所生成的轨迹点的二维空间分布。可以理解的,改变解码器层的结构,就可以输出周边车辆在未来一段时间内运动规划轨迹。这样,仿真系统可以根据周边车辆在未来一段时间内运动规划轨迹来改变仿真环境,以生成更多更复杂的仿真环境供测试使用。
在本申请实施例中,可以利用轨迹生成模型来得到目标车辆的运动轨迹。首先获取目标车辆以及目标车辆周边的参考车辆的历史运动轨迹数据,然后利用轨迹生成模型根据所有参考车辆的历史运动轨迹数据确定目标车辆对应的社交信息向量。接着根据目标车辆的历史运动轨迹数据确定目标车辆对应的第一历史轨迹特征向量。最后利用轨迹生成模型根据目标车辆对应的社交信息向量和目标车辆对应的轨迹特征向量,生成目标车辆的运动规划轨迹。这样,当对被测试车辆进行测试时,就可以根据轨迹生成模型快速得到被测试车辆周围的多个交通参与物的运动轨迹。这样,就可以变换仿真测试场景中的多个交通参与物的运动状态,以高效且简便的增加测试场景的复杂度。这样就可以解决在环测试系统中复杂场景生成的问题,以对高等级自动驾驶汽车进行更完备的功能测试。
示例性的,步骤二具体的操作,可以是将所有的第二历史轨迹特征向量输入至轨迹生成模型的卷积池化层中,利用卷积池化层对所有的第二历史轨迹特征向量进行特征融合,得到社交信息向量。同时,还可以对社交信息向量进行池化操作,得到特征压缩后的社交信息向量。
将轨迹编码向量输入至解码器层中,得到目标车辆的运动规划轨迹或参考车辆的运动规划轨迹。其中,目标车辆或参考车辆的运动规划轨迹用于描述在预设时间段内,各时刻对应的预测轨迹点的位置。
在本申请实施例中,可以利用轨迹生成模型来得到目标车辆的运动轨迹。首先获取目标车辆以及目标车辆周边的参考车辆的历史运动轨迹数据,然后利用轨迹生成模型根据所有参考车辆的历史运动轨迹数据确定目标车辆对应的社交信息向量。接着根据目标车辆的历史运动轨迹数据确定目标车辆对应的第一历史轨迹特征向量。最后利用轨迹生成模型根据目标车辆对应的社交信息向量和目标车辆对应的轨迹特征向量,生成目标车辆的运动规划轨迹。这样,当对被测试车辆进行测试时,就可以根据轨迹生成模型快速得到被测试车辆周围的多个交通参与物的运动轨迹。这样,就可以变换仿真测试场景中的多个交通参与物的运动状态,以高效且简便的增加测试场景的复杂度。这样就可以解决在环测试系统中复杂场景生成的问题,以对高等级自动驾驶汽车进行更完备的功能测试。
下面对轨迹生成模型的训练过程进行简单介绍,该训练过程包括以下几个步骤:
步骤一:获取车辆行驶样本数据。其中,车辆行驶样本数据包括第一车辆对应的历史运动轨迹数据、第二车辆对应的历史运动轨迹数据以及第二车辆对应的当前运动轨迹数据。
其中,车辆行驶样本数据包括第一车辆对应的历史运动轨迹数据、第二车辆对应的历史运动轨迹数据以及第二车辆对应的当前运动轨迹数据。可以理解的,轨迹生成模型需要根据第一车辆对应的历史运动轨迹数据和第二车辆对应的历史运动轨迹数据来预测第二车辆未来的运动轨迹,得到第二车辆对应的运动规划轨迹。然后得到的第二车辆对应的运动规划轨迹需要与第二车辆对应的当前运动轨迹进行对比,来确定轨迹生成模型的预测结果是否准确,进而调整轨迹生成模型的参数,使得轨迹生成模型的输出结果(预测结果)更精确。
步骤二:将第一车辆对应的历史运动轨迹数据和第二车辆对应的历史运动轨迹数据输入至轨迹生成模型中,通过轨迹生成模型获得第二车辆对应的运动轨迹预测结果。
其中,轨迹生成模型的输入是第二车辆以及第二车辆周边的第一车辆的历史轨迹X=[x(t-h),…,x(t-1),x(t)],t代表时刻,t-1代表t之前1个时刻,t-h代表t之前第h个时刻,x(t)代表输入的t时刻车辆的历史位置,x(t-1)代表输入的t-1时刻车辆的历史位置,x(t-h)代表输入的t-h时刻车辆的历史位置;输出则是第二车辆未来一段时间内生成的轨迹点Y=[y(t +1),…,y(t+f)]的空间概率分布预测,t+1代表t之后1个时刻,t+f代表t之后第f个时刻,y(t+1)代表生成的t+1时刻第二车辆的预测位置,y(t+f)代表生成的t+f时刻第二车辆的预测位置,具体的,公式为:
Figure 423179DEST_PATH_IMAGE001
其中,
Figure 776800DEST_PATH_IMAGE002
表示预测轨迹分布的参数,i为整数,
Figure 76457DEST_PATH_IMAGE003
表示主车行为类别。
步骤三:根据运动轨迹预测结果和当前运动轨迹数据,确定损失值。
示例性的,模型训练的目标损失函数可选择为第二车辆生成轨迹分布的负对数最大似然,即:
Figure 806515DEST_PATH_IMAGE004
为了使上述损失函数值在训练过程中稳步下降,可以选择Adam算法作为模型训练的梯度下降算法。
步骤四:根据损失值调整轨迹生成模型的模型参数。
步骤五:待达到训练条件时,停止轨迹生成模型的训练过程。
其中,训练条件可以是损失值小于预设阈值;或训练次数达到预设次数。
结合上述测试场景的介绍,下面对被测试车辆的测试过程进行介绍:
图2为本申请实施例提供的一种自动驾驶测试方法的流程示意图。如图2所示,该测试方法包括以下几个步骤:
301、通过仿真模块构建仿真场景。
在仿真模块中需要构建被测车辆与交通参与物(参考目标)模型。其中被测试车辆的建模需要基于真实被测车辆的物理参数以及传感器配置来进行构建。而交通参与物可以包括行人、机动车以及非机动车等。各交通参与物的物理模型也需要依据真实交通状况进行配置,包含不同类别的行人,不同类别的机动车以及不同类别的非机动车等。
而仿真模块则与交通流生成模块相互通信,实时获取交通流生成模块提供的参考目标的运动轨迹数据,同时,还需要与智能测试台架通信,获取被测试车辆的实时运动数据。接着就需要根据参考目标的运动轨迹数据和被测试车辆的实时运动数据来对测试场景进行仿真还原,得到关于自动驾驶的仿真测试场景。
302、通过交通流生成模块生成至少一个参考目标的运动轨迹。
其中,交通流生成模块需要基于深度学习神经网络和博弈论等方法确定接近真实交通环境的行人、机动车、非机动车模型的运动轨迹。交通流生成模块可以提供复杂的驾驶场景,生成大规模真实的交通流测试场景用例。其中,可以控制交通流生成模块中参考目标的个数以及各参考目标的运动行为,来控制测试用例的复杂程度。可以理解的,参考目标的数量越多,各参考目标的运动行为越复杂(运动轨迹越复杂),那么该测试场景就越危险。当需要测试被测试车辆在复杂场景下的安全性能,可以利用交通流生成模块构建更多的动态交互轨迹数据集,不间断的加入用于危险交互的新的参考目标的行驶轨迹。
示例性的,交通流的密度可依据测试要求进行修改,单个交通参与物的运动行为可以根据测试要求进行激进风格和保守风格的配置。不仅可以配置参考目标的数量,还可以配置行人、机动车、非机动车的数量占比等。
303、根据至少一个参考目标的运动轨迹更新仿真场景中的至少一个参考目标的运动状态。
当交通流生成模块生成参考目标的运动轨迹后,就可以将参考目标的运动轨迹输入仿真场景中,以更新仿真场景中的参考目标建模的运动状态。可以理解的,交通流生成模块还需要从仿真模块中获取被测试车辆的运动轨迹,然后根据被测试车辆的运动轨迹反向更新参考目标的运动轨迹。
304、通过智能测试台架获取被测试车辆的实时运动数据。
被测试车辆直接放置于智能测试台架上。其中,智能测试台架内置有转鼓,支撑车辆的行驶。并且转鼓的前端两个滚筒与被测车辆前轮直接接触,被测试车辆在行驶的时候,会带动与前轮接触的两个滚筒转动,两个滚筒是随动状态,因此可以支持车轮的随动转向运动。两个滚筒下面的实体托盘会支撑滚筒和车辆,实体托盘下方会放置多颗滚珠来保证实体托盘的转向运动。从而实现车辆前轮转向功能。
而智能测试台架控制单元与智能测试台架电性连接,对智能测试台架进行转动控制、数据采集等操作。即智能测试台架控制单元直接测试内置转鼓的转动数据,并将内置转鼓的转动数据传输给车辆动力学模块。然后车辆动力学模块用于根据内置转鼓的转动数据就可以确定被测试车辆的实时运动数据。
305、根据被测试车辆的实时运动数据更新仿真场景中的被测试车辆的运动状态。
车辆动力学模块将被测试车辆的实时运动数据传输给仿真模块。具体的,车辆动力学模块根据转鼓的转速以及转向数据进行计算,得到的速度、转向、侧倾角、俯仰角、加速度等数据发送到仿真模块中,供仿真模块更新被测试数据的运动轨迹。
306、通过注入装置将仿真模块中的更新后的仿真场景注入至被测试车辆中。
通过注入装置可以将仿真模块中的交通环境以视频场景的方式注入到车辆的摄像头模组中。这样,被测车辆根据接收到的摄像头数据信息,对图像信息进行分析,以提取交通参与物信息。然后被测车辆作出规控动作,带动智能驾驶测试台架运行,以实现测试的闭环。
在本申请实施例中,利用交通流生成模块、仿真模块、注入装置和智能测试台架搭建了新的测试系统。在该测试系统中,交通流生成模块用于生成驾驶场景中,其他参考目标的运动轨迹。仿真模块则根据交通流生成模块提供的其他参考目标的运动轨迹以及智能测试台架提供的被测试车辆的运动轨迹,来进行仿真,生成仿真场景。然后注入装置将仿真场景注入到被测试车辆中,供被测试车辆规划未来的运动状态。其中,智能测试台架实现了将被测试车辆的实时运动状态反馈给仿真模块的过程,从而实现了测试闭环。并且交通流生成模块能够提供复杂的驾驶场景,从而可以实现对高等级自动驾驶汽车进行完备功能测试的目的。整个测试系统实现了对被测试车辆进行自动化测试的目的,从而提高测试效率。
接下来介绍本申请实施例提供的一种电子设备,请参阅图3,图3为本申请实施例提供的电子设备的一种结构示意图。电子设备800具体可以表现为虚拟现实VR设备、手机、平板、笔记本电脑、智能穿戴设备、监控数据处理设备或者雷达数据处理设备等,此处不做限定。其中,电子设备800用于实现图2对应实施例中的方法。具体的,电子设备800包括:接收器801、发射器802、处理器803和存储器804 (其中执行设备800中的处理器803的数量可以一个或多个,图3中以一个处理器为例),其中,处理器803可以包括应用处理器8031和通信处理器8032。在本申请的一些实施例中,接收器801、发射器802、处理器803和存储器804可通过总线或其它方式连接。
存储器804可以包括只读存储器和随机存取存储器,并向处理器803提供指令和数据。存储器804的一部分还可以包括非易失性随机存取存储器(non-volatile randomaccess memory,NVRAM)。存储器804存储有处理器和操作指令、可执行模块或者数据结构,或者它们的子集,或者它们的扩展集,其中,操作指令可包括各种操作指令,用于实现各种操作。
处理器803控制执行设备的操作。具体的应用中,执行设备的各个组件通过总线系统耦合在一起,其中总线系统除包括数据总线之外,还可以包括电源总线、控制总线和状态信号总线等。但是为了清楚说明起见,在图中将各种总线都称为总线系统。
上述本申请实施例揭示的方法可以应用于处理器803中,或者由处理器803实现。处理器803可以是一种集成电路芯片,具有信号的处理能力。在实现过程中,上述方法的各步骤可以通过处理器803中的硬件的集成逻辑电路或者软件形式的指令完成。上述的处理器803可以是通用处理器、数字信号处理器(digital signal processing,DSP)、微处理器或微控制器,还可进一步包括专用集成电路(application specific integratedcircuit,ASIC)、现场可编程门阵列(field-programmable gate array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。该处理器803可以实现或者执行本申请实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。结合本申请实施例所公开的方法的步骤可以直接体现为硬件译码处理器执行完成,或者用译码处理器中的硬件及软件模块组合执行完成。软件模块可以位于随机存储器,闪存、只读存储器,可编程只读存储器或者电可擦写可编程存储器、寄存器等本领域成熟的存储介质中。该存储介质位于存储器804,处理器803读取存储器804中的信息,结合其硬件完成上述方法的步骤。
接收器801可用于接收输入的数字或字符信息,以及产生与执行设备的相关设置以及功能控制有关的信号输入。发射器802可用于通过第一接口输出数字或字符信息;发射器802还可用于通过第一接口向磁盘组发送指令,以修改磁盘组中的数据;发射器802还可以包括显示屏等显示设备。
本申请实施例中,处理器803中的应用处理器8031,用于执行图2对应实施例中的方法。需要说明的是,应用处理器8031执行各个步骤的具体方式,与本申请中图2对应的各个方法实施例基于同一构思,其带来的技术效果与本申请中图2对应的各个方法实施例相同,具体内容可参见本申请前述所示的方法实施例中的叙述,此处不再赘述。
本申请实施例还提供了一种计算机可读存储介质,计算机可读存储介质包括计算机指令,计算机指令在被处理器执行时用于实现本申请实施例中任意一种自动驾驶测试方法的技术方案。
本领域普通技术人员可以理解:附图只是一个实施例的示意图,附图中的模块或流程并不一定是实施本发明所必须的。
本领域普通技术人员可以理解:实施例中的装置中的模块可以按照实施例描述分布于实施例的装置中,也可以进行相应变化位于不同于本实施例的一个或多个装置中。上述实施例的模块可以合并为一个模块,也可以进一步拆分成多个子模块。
最后应说明的是:以上实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明实施例技术方案的精神和范围。

Claims (10)

1.一种自动驾驶测试系统,其特征在于,所述自动驾驶测试系统包括:
交通流生成模块、仿真模块、雷达模块、注入装置和智能测试台架;
所述交通流生成模块与所述仿真模块的输入端相连;所述仿真模块的输出端通过所述注入装置与被测试车辆相连;所述智能测试台架的输出端与所述仿真模块的输入端相连;
其中,所述交通流生成模块用于生成至少一个参考目标的运动轨迹;
所述仿真模块用于根据所述交通流生成模块传输的所述至少一个参考目标的运动轨迹和所述智能测试台架传输的所述被测试车辆的实时运动数据,生成关于自动驾驶的仿真场景;
所述注入装置用于将所述仿真场景注入至所述被测试车辆中,以使得所述被测试车辆根据所述仿真场景规划所述被测试车辆的运动状态;
所述雷达模块用于以物理波形的方式模拟雷达在遇到物体后反射回来的波形,达到对雷达的测试目的;
所述智能测试台架用于感知并测试所述被测试车辆的运动状态,得到所述被测试车辆的实时运动数据;
所述智能测试台架内置有转鼓,所述转鼓的前端两个滚筒与所述被测试车辆前轮直接接触,所述两个滚筒是随动状态,用于支持车轮的随动转向运动;所述两个滚筒下面的实体托盘用于支撑所述两个滚筒和所述被测试车辆;所述实体托盘下方的多颗滚珠用来支持所述实体托盘的转向运动。
2.根据权利要求1所述的自动驾驶测试系统,其特征在于,所述智能测试台架包括智能测试台架控制单元;
其中,所述智能测试台架支撑所述被测试车辆的运动,所述被测试车辆的车轮驱动所述智能测试台架中的内置转鼓进行转动;
所述智能测试台架控制单元用于测试所述内置转鼓的转动数据。
3.根据权利要求2所述的自动驾驶测试系统,其特征在于,所述智能测试台架还包括车辆动力学模块;
所述车辆动力学模块用于根据所述内置转鼓的转动数据确定所述被测试车辆的实时运动数据,并将所述被测试车辆的实时运动数据传输给所述仿真模块。
4.根据权利要求1至3任一项所述的自动驾驶测试系统,其特征在于,所述交通流生成模块具体用于获取所述仿真模块中的所述被测试车辆的实时运动数据,根据所述被测试车辆的实时运动数据更新至少一个参考目标的运动轨迹。
5.根据权利要求4所述的自动驾驶测试系统,其特征在于,所述交通流生成模块的模块参数根据测试需求调整,所述模块参数用于调整所述参考目标的数量或所述参考目标的运动行为;其中,所述参考目标的运动行为与所述参考目标的运动轨迹相关。
6.根据权利要求5所述的自动驾驶测试系统,其特征在于,所述注入装置具体用于:将所述仿真场景以视频数据的方式注入至所述被测试车辆的摄像头模组中。
7.根据权利要求4所述的自动驾驶测试系统,其特征在于,所述自动驾驶测试系统还包括交互显示模块;
所述交互显示模块与所述仿真模块相连;
所述交互显示模块用于显示所述仿真场景。
8.一种自动驾驶测试方法,其特征在于,所述测试方法基于权利要求1至7任一项所述的自动驾驶测试系统,所述测试方法包括:
通过仿真模块构建所述仿真场景,其中,所述仿真场景包括被测试车辆和至少一个参考目标;
通过交通流生成模块生成所述至少一个参考目标的运动轨迹,并根据所述至少一个参考目标的运动轨迹更新所述仿真场景中的所述至少一个参考目标的运动状态;
通过智能测试台架获取所述被测试车辆的实时运动数据,并根据所述被测试车辆的实时运动数据更新所述仿真场景中的所述被测试车辆的运动状态;
通过注入装置将所述仿真模块中的更新后的所述仿真场景注入至所述被测试车辆中,以使得所述被测试车辆根据所述更新后的所述仿真场景规划所述被测试车辆的运动状态;
其中,所述交通流生成模块根据轨迹生成模型来生成多个参考目标的运动轨迹,所述轨迹生成模型包括编码器层、卷积池化层和解码器层;所述编码器层用来提供各所述参考目标的运动轨迹对应的运动特征,所述参考目标包括主车和周边车辆;所述卷积池化层用来将所述编码器层处理生成的多条相对独立的轨迹特征向量进行跨智能体的信息交互融合;所述解码器层接收所述卷积池化层的输出,进行循环解码,输出多个参考目标的运动轨迹。
9.一种电子设备,其特征在于,包括:存储器和处理器、所述存储器和所述处理器耦合;
所述存储器用于存储一条或多条计算机指令;
所述处理器用于执行所述一条或多条计算机指令,以实现如权利要求8所述的自动驾驶测试方法。
10.一种计算机可读存储介质,其上存储有一条或多条计算机指令,其特征在于,该指令被处理器执行以实现如权利要求8所述的自动驾驶测试方法。
CN202211118613.6A 2022-09-15 2022-09-15 自动驾驶测试系统、方法、电子设备及存储介质 Active CN115203062B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202211118613.6A CN115203062B (zh) 2022-09-15 2022-09-15 自动驾驶测试系统、方法、电子设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202211118613.6A CN115203062B (zh) 2022-09-15 2022-09-15 自动驾驶测试系统、方法、电子设备及存储介质

Publications (2)

Publication Number Publication Date
CN115203062A CN115203062A (zh) 2022-10-18
CN115203062B true CN115203062B (zh) 2022-12-09

Family

ID=83572188

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202211118613.6A Active CN115203062B (zh) 2022-09-15 2022-09-15 自动驾驶测试系统、方法、电子设备及存储介质

Country Status (1)

Country Link
CN (1) CN115203062B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116663329B (zh) * 2023-07-26 2024-03-29 安徽深信科创信息技术有限公司 自动驾驶仿真测试场景生成方法、装置、设备及存储介质

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10739775B2 (en) * 2017-10-28 2020-08-11 Tusimple, Inc. System and method for real world autonomous vehicle trajectory simulation
CN111859618B (zh) * 2020-06-16 2024-03-29 长安大学 多端在环的虚实结合交通综合场景仿真测试系统及方法
CN113032285B (zh) * 2021-05-24 2021-08-13 湖北亿咖通科技有限公司 一种高精地图测试方法、装置、电子设备及存储介质

Also Published As

Publication number Publication date
CN115203062A (zh) 2022-10-18

Similar Documents

Publication Publication Date Title
EP3948794B1 (en) Systems and methods for generating synthetic sensor data via machine learning
CN112526893B (zh) 一种智能汽车的测试系统
CN110221546B (zh) 虚实融合的船舶智能控制系统测试平台
US20230351689A1 (en) Systems and Methods for Generating Synthetic Light Detection and Ranging Data via Machine Learning
Manivasagam et al. Lidarsim: Realistic lidar simulation by leveraging the real world
US20230376037A1 (en) Autonomous vehicle simulation system for analyzing motion planners
CN108319259B (zh) 一种测试系统及测试方法
CN109658418A (zh) 场景结构的学习方法、装置及电子设备
US20220153314A1 (en) Systems and methods for generating synthetic motion predictions
JP2022547611A (ja) 道路シーンにおける多様な長期将来軌道のシミュレーション
CN114514524A (zh) 多智能体模拟
CN106023622B (zh) 一种确定红绿灯识别系统识别性能的方法和装置
CN112015164A (zh) 基于数字孪生的智能网联汽车复杂测试场景实现系统
CN115203062B (zh) 自动驾驶测试系统、方法、电子设备及存储介质
CN218332314U (zh) 一种基于智能驾驶域控制器hil仿真测试平台
Yu et al. Autonomous vehicles digital twin: A practical paradigm for autonomous driving system development
CN110793548A (zh) 基于gnss接收机硬件在环的虚实结合的导航仿真测试系统
Wong et al. Testing the safety of self-driving vehicles by simulating perception and prediction
CN109376664A (zh) 机器学习训练方法、装置、服务器和介质
Guvenc et al. Simulation Environment for Safety Assessment of CEAV Deployment in Linden
CN111767630A (zh) 一种应用于智能驾驶的虚拟仿真测试方法及装置
CN111611703B (zh) 基于数字孪生的沙盘推演方法、装置、设备和存储介质
Bai et al. Cyber mobility mirror for enabling cooperative driving automation: A co-simulation platform
CN115617930A (zh) 运动轨迹的生成方法、装置、电子设备及存储介质
CN115236997A (zh) 预测控制方法、装置、设备及计算机可读存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant