CN115391204A - 自动驾驶服务的测试方法、装置、电子设备及存储介质 - Google Patents

自动驾驶服务的测试方法、装置、电子设备及存储介质 Download PDF

Info

Publication number
CN115391204A
CN115391204A CN202211037792.0A CN202211037792A CN115391204A CN 115391204 A CN115391204 A CN 115391204A CN 202211037792 A CN202211037792 A CN 202211037792A CN 115391204 A CN115391204 A CN 115391204A
Authority
CN
China
Prior art keywords
scene
test
automatic driving
data
driving service
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202211037792.0A
Other languages
English (en)
Inventor
阳建军
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Apollo Intelligent Technology Beijing Co Ltd
Original Assignee
Apollo Intelligent Technology Beijing Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Apollo Intelligent Technology Beijing Co Ltd filed Critical Apollo Intelligent Technology Beijing Co Ltd
Priority to CN202211037792.0A priority Critical patent/CN115391204A/zh
Publication of CN115391204A publication Critical patent/CN115391204A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/36Preventing errors by testing or debugging software
    • G06F11/3668Software testing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/30Monitoring
    • G06F11/34Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
    • G06F11/3409Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment for performance assessment

Abstract

本公开提供了一种自动驾驶服务的测试方法、装置、电子设备及存储介质,涉及计算机技术领域,具体涉及大数据、及服务测试等技术领域。具体实现方案为:获取指定场景的场景参数;根据预设的场景参数泛化规则和所述场景参数,控制至少一个从节点执行自动驾驶服务的测试任务,以获得所述测试任务的性能测试数据;根据所述性能测试数据,获得指定场景的性能测试分析结果。

Description

自动驾驶服务的测试方法、装置、电子设备及存储介质
技术领域
本公开涉及计算机技术领域,具体涉及大数据、及服务测试等技术领域。
背景技术
随着科学技术的发展,面向服务架构(Service-Oriented Architecture,SOA)在自动驾驶服务软件系统中的应用越来越广泛。而为了保证软件质量,对基于SOA的自动驾驶服务软件系统的性能测试是不可或缺的一环。
目前,自动驾驶服务的性能测试方案,大多都是将分布式服务系统中的局部拆分出来,单独进行性能分析,得到局部的性能表现。或者,是通过专门的性能测试工具,分析整个服务软件系统的宏观性能表现。
发明内容
本公开提供了一种自动驾驶服务的测试方法、装置、电子设备及存储介质。
根据本公开的一方面,提供了一种自动驾驶服务的测试方法,包括:
获取指定场景的场景参数;
根据预设的场景参数泛化规则和所述场景参数,控制至少一个从节点执行自动驾驶服务的测试任务,以获得所述测试任务的性能测试数据;
根据性能测试数据,获得指定场景的性能测试分析结果。
根据本公开的另一方面,提供了一种自动驾驶服务的测试装置,包括:
获取单元,用于获取指定场景的场景参数;
控制单元,用于根据预设的场景参数泛化规则和所述场景参数,控制至少一个从节点执行自动驾驶服务的测试任务,以获得所述测试任务的性能测试数据;
获得单元,用于根据性能测试数据,获得指定场景的性能测试分析结果。
根据本公开的再一方面,提供了一种自动驾驶服务的测试系统,包括:主控制节点和至少一个从节点;
所述主控制节点,用于执行如上所述的方面和任一可能的实现方式的方法;
至少一个所述从节点,用于基于接收到的所述主控制节点所发送的场景参数,执行所述自动驾驶服务的测试任务,以记录所述测试任务的性能测试数据,并将所述测试任务的性能测试数据返回至所述主控制节点。
根据本公开的再一方面,提供了一种电子设备,包括:
至少一个处理器;以及
与所述至少一个处理器通信连接的存储器;其中,
所述存储器存储有可被所述至少一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够执行如上所述的方面和任一可能的实现方式的方法。
根据本公开的又一方面,提供了一种存储有计算机指令的非瞬时计算机可读存储介质,所述计算机指令用于使所述计算机执行如上所述的方面和任一可能的实现方式的方法。
根据本公开的又一方面,提供了一种计算机程序产品,包括计算机程序,所述计算机程序在被处理器执行时实现如上所述的方面和任一可能的实现方式的方法。
由上述技术方案可知,本公开实施例通过获取指定场景的场景参数,进而可以根据预设的场景参数泛化规则和所述场景参数,控制至少一个从节点执行自动驾驶服务的测试任务,以获得所述测试任务的性能测试数据,使得能够根据性能测试数据,获得指定场景的性能测试分析结果,由于可以基于预设的场景参数泛化规则和所述场景参数,来获得用于分析的性能测试数据,提升了性能测试数据的丰富性,实现了对自动驾驶服务性能的灵活测试,从而保障对自动驾驶服务系统的性能测试分析的可靠性。
应当理解,本部分所描述的内容并非旨在标识本公开的实施例的关键或重要特征,也不用于限制本公开的范围。本公开的其它特征将通过以下的说明书而变得容易理解。
附图说明
附图用于更好地理解本方案,不构成对本公开的限定。其中:
图1是根据本公开第一实施例的示意图;
图2是根据本公开第二实施例的示意图;
图3是根据本公开第二实施例中的自动驾驶服务的测试系统的示意图;
图4是根据本公开第三实施例的示意图;
图5是用来实现本公开实施例的自动驾驶服务的测试方法的电子设备的框图。
具体实施方式
以下结合附图对本公开的示范性实施例做出说明,其中包括本公开实施例的各种细节以助于理解,应当将它们认为仅仅是示范性的。因此,本领域普通技术人员应当认识到,可以对这里描述的实施例做出各种改变和修改,而不会背离本公开的范围和精神。同样,为了清楚和简明,以下的描述中省略了对公知功能和结构的描述。
显然,所描述的实施例是本公开一部分实施例,而不是全部的实施例。基于本公开中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的全部其他实施例,都属于本公开保护的范围。
需要说明的是,本公开实施例中所涉及的终端设备可以包括但不限于手机、个人数字助理(Personal Digital Assistant,PDA)、无线手持设备、平板电脑(TabletComputer)等智能设备;显示设备可以包括但不限于个人电脑、电视等具有显示功能的设备。
另外,本文中术语“和/或”,仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。另外,本文中字符“/”,一般表示前后关联对象是一种“或”的关系。
软件测试是一种用来促进鉴定软件的正确性、完整性、安全性和质量的过程。基于SOA架构的自动驾驶服务系统是复杂的分布式系统,在整个系统中,各种各样的设备相互连接通信,每个设备内部包含不同功能的服务进程。
目前,自动驾驶服务的性能测试方案,大多都是将系统中的局部服务拆分出来,单独进行性能分析,得到局部的性能表现。或者是利用特定的工具,例如,LoadRunner工具,分析整个系统的宏观性能表现。
但是,相关技术中的方案灵活性较低,测试场景较固定,而且仅能得到局部性能情况或宏观性能情况,难以完成系统整体运行的所有局部微观性能情况与整体宏观情况的关联分析。
因此,亟需提供一种自动驾驶服务的测试方法,能够实现对基于SOA的自动驾驶服务性能的灵活测试,以保障对自动驾驶服务系统的性能测试分析的可靠性。
图1是根据本公开第一实施例的示意图,如图1所示。
101、获取指定场景的场景参数。
102、根据预设的场景参数泛化规则和所述场景参数,控制至少一个从节点执行自动驾驶服务的测试任务,以获得所述测试任务的性能测试数据。
103、根据性能测试数据,获得指定场景的性能测试分析结果。
需要说明的是,可以从已有的测试场景库中,获取指定场景的场景参数。指定场景可以包括与自动驾驶服务相关的服务场景,例如,车窗服务、传感器服务、车载空调服务等。
可以理解的是,测试场景库可以是根据实际业务需求预先配置的。根据指定场景,还可以获取该指定场景的测试任务的相关数据。
需要说明的是,场景参数,是指测试指定场景所需的各项参数。场景参数可以包括但不限于处理的数据量大小,数据传输的频率、以及服务类型等多个参数。服务类型可以但不限于数据采集类服务,数据接收类服务,数据处理类服务。
需要说明的是,测试任务可以包括待测试的SOA服务。自动驾驶服务可以是基于SOA的自动驾驶服务系统。根据性能测试分析结果,可以获知自动驾驶服务的性能瓶颈点、系统性能上限、SOA服务之间的性能影响、系统可能存在的潜在风险等。
需要说明的是,101~103的执行主体的部分或全部可以为位于本地终端的应用,或者还可以为设置在位于本地终端的应用中的插件或软件开发工具包(SoftwareDevelopment Kit,SDK)等功能单元,或者还可以为位于网络侧服务器中的处理引擎,或者还可以为位于网络侧的分布式系统,例如,网络侧的测试系统中的处理引擎或者分布式系统等,本实施例对此不进行特别限定。
可以理解的是,所述应用可以是安装在本地终端上的本地程序(nativeApp),或者还可以是本地终端上的浏览器的一个网页程序(webApp),本实施例对此不进行限定。
这样,可以通过获取指定场景的场景参数,进而可以根据预设的场景参数泛化规则和所述场景参数,控制至少一个从节点执行自动驾驶服务的测试任务,以获得所述测试任务的性能测试数据,使得能够根据性能测试数据,获得指定场景的性能测试分析结果,由于可以基于预设的场景参数泛化规则和所述场景参数,来获得用于分析的性能测试数据,提升了性能测试数据的丰富性,实现了对自动驾驶服务性能的灵活测试,从而保障对自动驾驶服务的性能测试分析的可靠性。
可选地,在本实施例的一个可能的实现方式中,在102中,具体可以确定所述场景参数是否达到预设的参数阈值,若所述场景参数未达到预设的参数阈值,则根据场景参数调整规则,调整所述场景参数,以获得调整后的场景参数,进而可以根据所述调整后的场景参数,控制至少一个所述从节点执行所述自动驾驶服务的测试任务,直至所述调整后的场景参数达到所述预设的参数阈值,以获得所述测试任务的性能测试数据。
在该实现方式中,预设的场景参数泛化规则可以包括先判断场景参数是否达到预设的参数阈值,针对未达到预设的参数阈值的场景参数,利用场景参数调整规则,调整该场景参数。
具体地,场景参数调整规则可以是在初始场景参数的基础上按照预设数值进行调整。
例如,场景参数是数据大小,数据大小初始值100兆字节(MB),场景参数调整规则可以是每次调整增加20MB,即每次调整累加20MB。预设的参数阈值可以200MB。当调整后的场景参数达到200MB时,可以终止测试。
在该实现方式的一个具体实现过程中,所述确定所述场景参数是否满足测试终止条件之前,还可以根据所述场景参数,控制至少一个所述从节点执行自动驾驶服务的测试任务。
在该具体实现过程中,该场景参数可以包括初始场景参数和每次调整前的场景参数。
该具体实现过程的一种情况,可以将场景参数分发至每个从节点,控制每个从节点根据场景参数执行自动驾驶服务的测试任务,以获得该场景参数对应的性能测试数据。
该具体实现过程的另一种情况,可以将场景参数分发至部分从节点,控制部分从节点根据场景参数执行自动驾驶服务的测试任务,以获得该场景参数对应的性能测试数据。
可以理解的是,可以在根据初始场景参数,控制至少一个从节点执行自动驾驶服务的测试任务的同时,确定场景参数是否满足测试终止条件,两者执行顺序可以不做具体限定。
可以理解的是,预设的场景参数泛化规则还可以包括用于实现场景参数泛化的其他现有的规则方式,例如,预设的场景参数泛化规则可以是利用预先配置场景参数直接依次替换已用于测试的场景参数。只要能实现上述功能的规则、模块,都可以纳入本方案的保护范围之内,可以在此不再做具体限定。
这样,可以获得指定场景中更多地场景参数对应的性能测试数据,进一步地丰富了性能测试数据,从而进一步地提升了对自动驾驶服务的性能测试分析的可靠性。
在该实现方式的另一个具体实现过程中,首先,具体可以将调整后的场景参数分发至少一个所述从节点,控制至少一个所述从节点基于调整后的场景参数,再执行一次所述自动驾驶服务的测试任务,以获得该调整后的场景参数对应的性能测试数据,即执行的该次测试任务对应的性能测试数据。其次,确定该调整后的场景参数是否达到预设的参数阈值,若该调整后的场景参数未达到预设的参数阈值,则根据场景参数调整规则,调整该调整后的场景参数,以获得新的调整后的场景参数。再次,将新的调整后的场景参数分发至少一个所述从节点,并重复执行上述处理过程,直至调整后的场景参数达到预设的参数阈值。最后,将执行的每次测试任务对应的性能测试数据作为该测试任务的性能测试数据。
可以理解的是,预设的场景参数泛化规则可以包括测试终止条件和场景参数调整规则。测试终止条件可以是场景参数达到预设的参数阈值。
具体地,当场景参数没有满足测试终止条件,即场景参数未达到预设的参数阈值时,则利用场景参数调整规则对场景参数进行调整。根据调整后的场景参数,再控制从节点执行一次测试任务,来获得基于调整后的场景参数的测试任务的性能测试数据。重复上述场景参数判断、调整、以及执行测试任务的过程,直至调整后的场景参数满足测试终止条件,即场景参数达到预设的参数阈值时,终止整个测试,并将每次执行测试任务所获得的性能测试数据作为该测试任务最终的性能测试数据。
可以理解的是,场景参数可以包括多种参数,每种参数对应的场景参数泛化规则可以是相同或者不同的。在每种参数对应的场景参数泛化规则可以是不同的情况下,可以在任一种参数满足该参数对应的测试终止条件时,终止整个测试,或者,还可以在全部参数均满足其对应的测试终止条件时,终止整个测试。
这样,在本实现方式中,可以通过判断场景参数是否达到预设的参数阈值,并利用场景参数调整规则,对未达到预设的参数阈值的场景参数进行调整,基于原有场景参数泛化出更多的场景参数,并利用每次调整后的场景参数,控制至少一个从节点执行自动驾驶服务的测试任务,可以提升执行测试任务的灵活性,可以获得更多地测试任务的性能测试数据,丰富了用于自动驾驶服务性能分析的性能测试数据,从而提升了对自动驾驶服务的性能测试分析的可靠性。
需要说明的是,本实现方式中所提供的获得测试任务的性能测试数据的多种具体实现过程可以相互结合,来实现本实施例的自动驾驶服务的测试方法。详细的描述可以参见本实现方式中的相关内容,此处不再赘述。
可选地,在本实施例的一个可能的实现方式中,在102中,控制至少一个所述从节点执行自动驾驶服务的测试任务的过程中,具体可以,首先,同步启动全部所述从节点执行自动驾驶服务的测试任务。然后,根据全部所述从节点返回的测试任务执行完成信息,同步停止全部所述从节点执行自动驾驶服务的测试任务。最后,接收全部所述从节点发送的所述测试任务的性能测试数据。
在该实现方式的一个具体实现过程中,还可以先将场景参数发送至全部从节点,在接收到全部从节点返回的准备就绪信息后,可以同步启动全部所述从节点基于场景参数执行自动驾驶服务的测试任务。
具体地,当接收到全部从节点返回的测试任务执行完成信息时,可以同步停止全部从节点执行自动驾驶服务的测试任务。
在该实现方式的另一个具体实现过程中,针对任一个从节点,当该节点满足测试任务结束条件时,可以返回测试任务执行完成信息。
在该具体实现过程中,每个从节点在执行测试任务的过程中,可以通过性能日志记录测试任务的性能测试数据。
具体地,该测试任务结束条件可以包括但不限于达到预设的测试时长、全部测试用例执行完成等。
可以理解的是,每个从节点中的测试任务可以具有不同的测试任务结束条件。因此,需要通过同步控制每个从节点停止测试,即在全部节点都满足测试任务结束条件时,停止针对该指定场景的测试,以保证服务测试执行和所获得的性能测试数据的一致性。
可以理解的是,根据业务实现的情况和测试需求,确定发送场景参数的方式。例如,一种发送场景参数的方式是发送部分场景参数至特定的从节点、发送全部场景参数至特定的从节点以外的其他从节点;一种发送场景参数的方式是发送全部场景参数至每个从节点。
这样,在本实现方式中,可以通过控制从节点同步启动或者停止执行自动驾驶服务的测试任务,可以实现测试过程中的场景参数同步、测试启停同步、以及性能测试数据同步,保证了自动驾驶服务测试的一致性。
需要说明的是,本实现方式中所提供的控制从节点执行自动驾驶服务的测试任务的具体实现方式,可以结合前述实现方式中所提供的获得性能测试数据的具体实现过程,来实现本实施例的自动驾驶服务的测试方法。详细的描述可以参见前述实现方式中的相关内容,此处不再赘述。
可选地,在本实施例的一个可能的实现方式中,在104中,所述测试任务的性能测试数据包括资源使用数据和面向服务架构SOA服务性能数据。
在该实现方式中,资源使用数据可以是通用的性能测试数据。资源使用数据可以包括但不限于内存情况数据,CPU情况数据、I/O情况数据等。
在该实现方式中,SOA服务性能数据可以是SOA服务特异性数据。SOA服务性能数据可以包括但不限于队列长度、响应时间等。
在该实现方式的一个具体实现过程中,根据性能测试数据,通过多维度分析,可以获得整个自动驾驶服务系统的性能瓶颈点、系统性能上限、SOA服务之间的性能影响、系统可能存在的潜在风险等。
这样,在本实现方式中,可以通过对所获得的资源使用数据和SOA服务性能数据的分析处理,实现对自动驾驶服务系统的性能的更加全面准确地分析,从而提升了自动驾驶服务测试的有效性和准确性。
本实施例中,可以通过获取指定场景的场景参数,进而可以根据预设的场景参数泛化规则和所述场景参数,控制至少一个从节点执行自动驾驶服务的测试任务,以获得所述测试任务的性能测试数据,使得能够根据性能测试数据,获得指定场景的性能测试分析结果,由于可以基于预设的场景参数泛化规则和所述场景参数,来获得用于分析的性能测试数据,提升了性能测试数据的丰富性,实现了对自动驾驶服务性能的灵活测试,从而保障对自动驾驶服务的性能测试分析的可靠性。
另外,采用本实施例所提供的技术方案,可以通过判断场景参数是否达到预设的参数阈值,并利用场景参数调整规则,对未达到预设的参数阈值的场景参数进行调整,基于原有场景参数泛化出更多的场景参数,并利用每次调整后的场景参数,控制至少一个从节点执行自动驾驶服务的测试任务,可以提升执行测试任务的灵活性,可以获得更多地测试任务的性能测试数据,丰富了用于自动驾驶服务性能分析的性能测试数据,从而提升了对自动驾驶服务的性能测试分析的可靠性。
另外,采用本实施例所提供的技术方案,可以获得指定场景中更多地场景参数对应的性能测试数据,进一步地丰富了性能测试数据,从而进一步地提升了对自动驾驶服务的性能测试分析的可靠性。
另外,采用本实施例所提供的技术方案,可以通过控制从节点同步启动或者停止执行自动驾驶服务的测试任务,可以实现测试过程中的场景参数同步、测试启停同步、以及性能测试数据同步,保证了自动驾驶服务测试的一致性。
另外,采用本实施例所提供的技术方案,可以通过对所获得的资源使用数据和SOA服务性能数据的分析处理,实现对自动驾驶服务系统的性能的更加全面准确地分析,从而提升了自动驾驶服务测试的有效性和准确性。
图2是根据本公开第二实施例的示意图,如图2所示。
现结合具体自动驾驶服务的测试系统和实例,对本公开中的自动驾驶服务的测试方法进行详细说明。
图3是根据本公开第二实施例中的自动驾驶服务的测试系统的示意图,如图3所示。自动驾驶服务的测试系统主控制节点301和多个分布式的从节点302。所述主控制节点301可以包括测试场景库3011、主控制程序3012、以及性能日志分析模块3013。每个从节点均可以包括从控制程序3021、SOA服务3022、以及性能日志记录模块3023。
201、主控制节点获取指定场景的场景参数。
本实施例中,该指定场景的场景参数可以是指定场景的初始场景参数。
具体地,主控制节点可以响应于用户从测试场景库中指定一套基础场景的操作,获取该指定场景的初始场景参数。
具体地,主控制节点可以通过主控制程序加载测试场景库中指定场景和指定场景的场景参数。
202、主控制节点将场景参数分发至各个从节点。
具体地,可以通过主控制节点的主控制程序将场景参数分发给各个从节点。
203、主控制节点同步启动各个从节点的测试任务。
204、各个从节点记录测试任务的性能测试数据。
本实施例中,测试任务可以包括待测试的SOA服务。
具体地,SOA服务可以是被测试的程序,分布式部署在自动驾驶系统的各个设备中,SOA服务可以包括不同的功能服务。
具体地,在接收到各个从节点返回的准备就绪信息后,主控制节点主控制程序可以发起同步启动命令,同步启动各个从节点基于场景参数执行自动驾驶服务的测试任务,即启动所有从节点中待测试的SOA服务,并同时启动性能日志记录模块,以通过性能日志记录模块记录测试任务的性能测试数据。
205、主控制节点根据各个从节点返回的测试任务执行完成信息,同步停止各个从节点执行自动驾驶服务的测试任务。
本实施例中,主控制节点接收到各个从节点,即全部从节点,返回的测试任务执行完成信息时,可以同步停止各个从节点执行自动驾驶服务的测试任务,即可以同步停止各个从节点执行SOA服务的测试。
具体地,针对任一个从节点,当该节点满足测试任务结束条件时,可以返回测试任务执行完成信息。每个从节点在执行SOA服务的测试的过程中,可以通过性能日志模块记录所测试的SOA服务的性能测试数据。
具体地,该测试任务结束条件可以包括但不限于达到预设的测试时长、全部测试用例执行完成等。测试任务结束条件可以是根据指定场景所确定的。
具体地,当所有从节点都满足指定场景设定的测试任务结束条件时,主控制节点的主控制程序发起同步停止命令,停止从节点执行所测试的SOA服务,并同时停止性能日志记录模块记录性能测试数据。
可以理解的是,每个从节点中的测试任务可以具有不同的测试任务结束条件。因此,需要通过主控制节点同步控制每个从节点停止测试,以保证测试的一致性,进而保证了性能测试数据的一致性。
206、主控制节点接收各个从节点发送的测试任务的性能测试数据。
207、主控制节点判断场景参数是否满足测试终止条件。若否则执行208;若是则执行209。
208、主控制节点根据场景参数调整规则,调整场景参数,以获得调整后的场景参数。
在本实施例中,在获得调整后的场景参数后,可以利用调整后的场景参数重复执行202至207,直至调整后的场景参数是否满足测试终止条件。
在本实施例中,各个从节点可以将记录的性能日志回传到主控制节点。主控制节点的主控制程序判断是否达到预设的参数阈值,如果没有达到,则可以对场景参数进行泛化调整,生成新的场景参数。
具体地,预设的场景参数泛化规则可以包括测试终止条件和场景参数调整规则。测试终止条件可以是场景参数达到预设的参数阈值。
例如,指定场景的初始场景参数包括数据大小、数据发送频率等。数据大小初始值为100MB,数据发送频率初始值为4次/秒;场景参数调整规则为数据发送频率每一次调整增加2,测试终止条件为数据发送频率达到20次/秒,即预设的数据发送频率阈值为20次/秒。
209、主控制节点根据性能测试数据,获得指定场景的性能测试分析结果。
在本实施例中,主控制节点启动性能日志分析模块,分析整个自动驾驶SOA服务的整体性能情况。
具体地,性能测试数据可以包括资源使用数据和面向服务架构SOA服务性能数据。
资源使用数据可以是记录进程和整个分布式节点的系统资源使用情况的通用系统数据。资源使用数据可以包括但不限于内存情况数据,CPU情况数据、I/O情况数据等。
SOA服务特异性数据可以是记录特定服务的内部性能细节情况的SOA服务性能数据。SOA服务性能数据以包括但不限于队列长度、响应时间等。
具体地,根据性能测试数据,通过多维度分析,可以获得整个自动驾驶服务系统的性能瓶颈点、系统性能上限、SOA服务之间的性能影响、系统可能存在的潜在风险等。
本方案中,通过主控制节点根据预设的场景参数泛化规则和指定场景的场景参数,控制多个从节点执行SOA服务测试,以获得SOA服务的性能测试数据,进而可以对性能测试数据进行相应分析处理,可以实现对基于SOA服务的自动驾驶系统性能的灵活测试,提升了性能测试数据的丰富性,从而保障对自动驾驶服务系统的性能测试分析的可靠性。
另外,采用本实施例所提供的技术方案,该自动驾驶服务的测试系统包括了一个主控制节点和多个分布式从的节点,在通过主从控制结构完成测试过程中的,可以实现场景同步、启停同步、性能日志同步等功能。
可以理解的是,本公开的测试方法还可以应用于其他分布式服务系统,具体实现方式可以参见上述实施例,在此不在赘述。
需要说明的是,对于前述的各方法实施例,为了简单描述,故将其都表述为一系列的动作组合,但是本领域技术人员应该知悉,本公开并不受所描述的动作顺序的限制,因为依据本公开,某些步骤可以采用其他顺序或者同时进行。其次,本领域技术人员也应该知悉,说明书中所描述的实施例均属于优选实施例,所涉及的动作和模块并不一定是本公开所必须的。
在上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见其他实施例的相关描述。
图4是根据本公开第三实施例的示意图,如图4所示。本实施例的自动驾驶服务的测试装置400可以包括获取单元401、控制单元402、和获得单元403。其中,获取单元401,用于获取指定场景的场景参数;控制单元402,用于根据预设的场景参数泛化规则和所述场景参数,控制至少一个从节点执行自动驾驶服务的测试任务,以获得所述测试任务的性能测试数据;获得单元403,用于根据性能测试数据,获得指定场景的性能测试分析结果。
需要说明的是,本实施例的自动驾驶服务的测试装置的部分或全部可以为位于本地终端的应用,或者还可以为设置在位于本地终端的应用中的插件或软件开发工具包(Software Development Kit,SDK)等功能单元,或者还可以为位于网络侧服务器中的处理引擎,或者还可以为位于网络侧的分布式系统,例如,网络侧的测试系统中的处理引擎或者分布式系统等,本实施例对此不进行特别限定。
可以理解的是,所述应用可以是安装在本地终端上的本地程序(nativeApp),或者还可以是本地终端上的浏览器的一个网页程序(webApp),本实施例对此不进行限定。
可选地,在本实施例的一个可能的实现方式中,所述控制单元402,可以具体用于确定所述场景参数是否达到预设的参数阈值,若所述场景参数未达到预设的参数阈值,则根据场景参数调整规则,调整所述场景参数,以获得调整后的场景参数,根据所述调整后的场景参数,控制至少一个所述从节点执行所述自动驾驶服务的测试任务,直至所述调整后的场景参数达到所述预设的参数阈值,以获得所述测试任务的性能测试数据。
可选地,在本实施例的一个可能的实现方式中,所述控制单元402,可以具体用于根据所述场景参数,控制至少一个所述从节点执行自动驾驶服务的测试任务。
可选地,在本实施例的一个可能的实现方式中,所述控制单元402,可以具体用于同步启动全部所述从节点执行自动驾驶服务的测试任务,根据全部所述从节点返回的测试任务执行完成信息,同步停止全部所述从节点执行自动驾驶服务的测试任务,接收全部所述从节点发送的所述测试任务的性能测试数据。
可选地,在本实施例的一个可能的实现方式中,所述测试任务的性能测试数据可以包括资源使用数据和面向服务架构SOA服务性能数据。
本实施例中,可以通过获取单元来获取指定场景的场景参数,进而控制单元可以根据预设的场景参数泛化规则和所述场景参数,控制至少一个从节点执行自动驾驶服务的测试任务,以获得所述测试任务的性能测试数据,使得获得单元能够根据性能测试数据,获得指定场景的性能测试分析结果,由于可以基于预设的场景参数泛化规则和所述场景参数,来获得用于分析的性能测试数据,提升了性能测试数据的丰富性,实现了对自动驾驶服务性能的灵活测试,从而保障对自动驾驶服务的性能测试分析的可靠性。
另外,采用本实施例所提供的技术方案,可以通过判断场景参数是否达到预设的参数阈值,并利用场景参数调整规则,对未达到预设的参数阈值的场景参数进行调整,基于原有场景参数泛化出更多的场景参数,并利用每次调整后的场景参数,控制至少一个从节点执行自动驾驶服务的测试任务,可以提升执行测试任务的灵活性,可以获得更多地测试任务的性能测试数据,丰富了用于自动驾驶服务性能分析的性能测试数据,从而提升了对自动驾驶服务的性能测试分析的可靠性。
另外,采用本实施例所提供的技术方案,可以获得指定场景中更多地场景参数对应的性能测试数据,进一步地丰富了性能测试数据,从而进一步地提升了对自动驾驶服务的性能测试分析的可靠性。
另外,采用本实施例所提供的技术方案,可以通过控制从节点同步启动或者停止执行自动驾驶服务的测试任务,可以实现测试过程中的场景参数同步、测试启停同步、以及性能测试数据同步,保证了自动驾驶服务测试的一致性。
另外,采用本实施例所提供的技术方案,可以通过对所获得的资源使用数据和SOA服务性能数据的分析处理,实现对自动驾驶服务系统的性能的更加全面准确地分析,从而提升了自动驾驶服务测试的有效性和准确性。
本公开的技术方案中,所涉及的用户个人信息的收集、存储、使用、加工、传输、提供和公开等处理,均符合相关法律法规的规定,且不违背公序良俗。
根据本公开的实施例,本公开还提供了一种电子设备、一种可读存储介质和一种计算机程序产品。
图5示出了可以用来实施本公开的实施例的示例电子设备500的示意性框图。电子设备旨在表示各种形式的数字计算机,诸如,膝上型计算机、台式计算机、工作台、个人数字助理、服务器、刀片式服务器、大型计算机、和其它适合的计算机。电子设备还可以表示各种形式的移动装置,诸如,个人数字处理、蜂窝电话、智能电话、可穿戴设备和其它类似的计算装置。本文所示的部件、它们的连接和关系、以及它们的功能仅仅作为示例,并且不意在限制本文中描述的和/或者要求的本公开的实现。
如图5所示,电子设备500包括计算单元501,其可以根据存储在只读存储器(ROM)502中的计算机程序或者从存储单元508加载到随机访问存储器(RAM)503中的计算机程序,来执行各种适当的动作和处理。在RAM 503中,还可存储电子设备500操作所需的各种程序和数据。计算单元501、ROM 502以及RAM 503通过总线504彼此相连。输入/输出(I/O)接口505也连接至总线504。
电子设备500中的多个部件连接至I/O接口505,包括:输入单元506,例如键盘、鼠标等;输出单元507,例如各种类型的显示器、扬声器等;存储单元508,例如磁盘、光盘等;以及通信单元509,例如网卡、调制解调器、无线通信收发机等。通信单元509允许电子设备500通过诸如因特网的计算机网络和/或各种电信网络与其他设备交换信息/数据。
计算单元501可以是各种具有处理和计算能力的通用和/或专用处理组件。计算单元501的一些示例包括但不限于中央处理单元(CPU)、图形处理单元(GPU)、各种专用的人工智能(AI)计算芯片、各种运行机器学习模型算法的计算单元、数字信号处理器(DSP)、以及任何适当的处理器、控制器、微控制器等。计算单元501执行上文所描述的各个方法和处理,例如自动驾驶服务的测试方法。例如,在一些实施例中,自动驾驶服务的测试方法可被实现为计算机软件程序,其被有形地包含于机器可读介质,例如存储单元508。在一些实施例中,计算机程序的部分或者全部可以经由ROM 502和/或通信单元509而被载入和/或安装到电子设备500上。当计算机程序加载到RAM 503并由计算单元501执行时,可以执行上文描述的自动驾驶服务的测试方法的一个或多个步骤。备选地,在其他实施例中,计算单元501可以通过其他任何适当的方式(例如,借助于固件)而被配置为执行自动驾驶服务的测试方法。
本文中以上描述的系统和技术的各种实施方式可以在数字电子电路系统、集成电路系统、场可编程门阵列(FPGA)、专用集成电路(ASIC)、专用标准产品(ASSP)、芯片上系统的系统(SOC)、复杂可编程逻辑设备(CPLD)、计算机硬件、固件、软件、和/或它们的组合中实现。这些各种实施方式可以包括:实施在一个或者多个计算机程序中,该一个或者多个计算机程序可在包括至少一个可编程处理器的可编程系统上执行和/或解释,该可编程处理器可以是专用或者通用可编程处理器,可以从存储系统、至少一个输入装置、和至少一个输出装置接收数据和指令,并且将数据和指令传输至该存储系统、该至少一个输入装置、和该至少一个输出装置。
用于实施本公开的方法的程序代码可以采用一个或多个编程语言的任何组合来编写。这些程序代码可以提供给通用计算机、专用计算机或其他可编程数据处理装置的处理器或控制器,使得程序代码当由处理器或控制器执行时使流程图和/或框图中所规定的功能/操作被实施。程序代码可以完全在机器上执行、部分地在机器上执行,作为独立软件包部分地在机器上执行且部分地在远程机器上执行或完全在远程机器或服务器上执行。
在本公开的上下文中,机器可读介质可以是有形的介质,其可以包含或存储以供指令执行系统、装置或设备使用或与指令执行系统、装置或设备结合地使用的程序。机器可读介质可以是机器可读信号介质或机器可读储存介质。机器可读介质可以包括但不限于电子的、磁性的、光学的、电磁的、红外的、或半导体系统、装置或设备,或者上述内容的任何合适组合。机器可读存储介质的更具体示例会包括基于一个或多个线的电气连接、便携式计算机盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦除可编程只读存储器(EPROM或快闪存储器)、光纤、便捷式紧凑盘只读存储器(CD-ROM)、光学储存设备、磁储存设备、或上述内容的任何合适组合。
为了提供与用户的交互,可以在计算机上实施此处描述的系统和技术,该计算机具有:用于向用户显示自动驾驶服务的测试装置(例如,CRT(阴极射线管)或者LCD(液晶显示器)监视器);以及键盘和指向装置(例如,鼠标或者轨迹球),用户可以通过该键盘和该指向装置来将输入提供给计算机。其它种类的装置还可以用于提供与用户的交互;例如,提供给用户的反馈可以是任何形式的传感反馈(例如,视觉反馈、听觉反馈、或者触觉反馈);并且可以用任何形式(包括声输入、语音输入或者、触觉输入)来接收来自用户的输入。
可以将此处描述的系统和技术实施在包括后台部件的计算系统(例如,作为数据服务器)、或者包括中间件部件的计算系统(例如,应用服务器)、或者包括前端部件的计算系统(例如,具有图形用户界面或者网络浏览器的用户计算机,用户可以通过该图形用户界面或者该网络浏览器来与此处描述的系统和技术的实施方式交互)、或者包括这种后台部件、中间件部件、或者前端部件的任何组合的计算系统中。可以通过任何形式或者介质的数字数据通信(例如,通信网络)来将系统的部件相互连接。通信网络的示例包括:局域网(LAN)、广域网(WAN)和互联网。
计算机系统可以包括客户端和服务器。客户端和服务器一般远离彼此并且通常通过通信网络进行交互。通过在相应的计算机上运行并且彼此具有客户端-服务器关系的计算机程序来产生客户端和服务器的关系。服务器可以是云服务器,也可以为分布式系统的服务器,或者是结合了区块链的服务器。
应该理解,可以使用上面所示的各种形式的流程,重新排序、增加或删除步骤。例如,本公开中记载的各步骤可以并行地执行也可以顺序地执行也可以不同的次序执行,只要能够实现本公开公开的技术方案所期望的结果,本文在此不进行限制。
上述具体实施方式,并不构成对本公开保护范围的限制。本领域技术人员应该明白的是,根据设计要求和其他因素,可以进行各种修改、组合、子组合和替代。任何在本公开的精神和原则之内所作的修改、等同替换和改进等,均应包含在本公开保护范围之内。

Claims (14)

1.一种自动驾驶服务的测试方法,包括:
获取指定场景的场景参数;
根据预设的场景参数泛化规则和所述场景参数,控制至少一个从节点执行自动驾驶服务的测试任务,以获得所述测试任务的性能测试数据;
根据所述性能测试数据,获得指定场景的性能测试分析结果。
2.根据权利要求1所述的方法,其中,所述根据预设的场景参数泛化规则和所述场景参数,控制至少一个从节点执行自动驾驶服务的测试任务,以获得所述测试任务的性能测试数据,包括:
确定所述场景参数是否达到预设的参数阈值;
若所述场景参数未达到预设的参数阈值,则根据场景参数调整规则,调整所述场景参数,以获得调整后的场景参数;
根据所述调整后的场景参数,控制至少一个所述从节点执行所述自动驾驶服务的测试任务,直至所述调整后的场景参数达到所述预设的参数阈值,以获得所述测试任务的性能测试数据。
3.根据权利要求2所述的方法,其中,所述场景参数包括初始场景参数,所述确定所述场景参数是否满足测试终止条件之前,还包括:
根据所述初始场景参数,控制至少一个所述从节点执行自动驾驶服务的测试任务。
4.根据权利要求1-3中任一项所述的方法,其中,所述控制至少一个所述从节点执行自动驾驶服务的测试任务,包括:
同步启动全部所述从节点执行自动驾驶服务的测试任务;
根据全部所述从节点返回的测试任务执行完成信息,同步停止全部所述从节点执行自动驾驶服务的测试任务;
接收全部所述从节点发送的所述测试任务的性能测试数据。
5.根据权利要求1-4中任一项所述的方法,其中,所述测试任务的性能测试数据包括资源使用数据和面向服务架构SOA服务性能数据。
6.一种自动驾驶服务的测试装置,包括:
获取单元,用于获取指定场景的场景参数;
控制单元,用于根据预设的场景参数泛化规则和所述场景参数,控制至少一个从节点执行自动驾驶服务的测试任务,以获得所述测试任务的性能测试数据;
获得单元,用于根据所述性能测试数据,获得指定场景的性能测试分析结果。
7.根据权利要求6所述的装置,其中,所述控制单元,具体用于:
确定所述场景参数是否达到预设的参数阈值;
若所述场景参数未达到预设的参数阈值,则根据场景参数调整规则,调整所述场景参数,以获得调整后的场景参数;
根据所述调整后的场景参数,控制至少一个所述从节点执行所述自动驾驶服务的测试任务,直至所述调整后的场景参数达到所述预设的参数阈值,以获得所述测试任务的性能测试数据。
8.根据权利要求7所述的装置,其中,所述场景参数包括初始场景参数,所述控制单元,还用于:
根据所述初始场景参数,控制至少一个所述从节点执行自动驾驶服务的测试任务。
9.根据权利要求6-8中任一项所述的装置,其中,所述控制单元,具体用于:
同步启动全部所述从节点执行自动驾驶服务的测试任务;
根据全部所述从节点返回的测试任务执行完成信息,同步停止全部所述从节点执行自动驾驶服务的测试任务;
接收全部所述从节点发送的所述测试任务的性能测试数据。
10.根据权利要求6-9中任一项所述的装置,其中,所述测试任务的性能测试数据包括资源使用数据和面向服务架构SOA服务性能数据。
11.一种自动驾驶服务的测试系统,包括:主控制节点和至少一个从节点;
所述主控制节点,用于执行根据权利要求1-5中任一项所述的方法;
至少一个所述从节点,用于基于接收到的所述主控制节点所发送的场景参数,执行所述自动驾驶服务的测试任务,以记录所述测试任务的性能测试数据,并将所述测试任务的性能测试数据返回至所述主控制节点。
12.一种电子设备,包括:
至少一个处理器;以及
与所述至少一个处理器通信连接的存储器;其中,
所述存储器存储有可被所述至少一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够执行根据权利要求1-5中任一项所述的方法。
13.一种存储有计算机指令的非瞬时计算机可读存储介质,其中,所述计算机指令用于使所述计算机执行根据权利要求1-5中任一项所述的方法。
14.一种计算机程序产品,包括计算机程序,所述计算机程序在被处理器执行时实现根据权利要求1-5中任一项所述的方法。
CN202211037792.0A 2022-08-26 2022-08-26 自动驾驶服务的测试方法、装置、电子设备及存储介质 Pending CN115391204A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202211037792.0A CN115391204A (zh) 2022-08-26 2022-08-26 自动驾驶服务的测试方法、装置、电子设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202211037792.0A CN115391204A (zh) 2022-08-26 2022-08-26 自动驾驶服务的测试方法、装置、电子设备及存储介质

Publications (1)

Publication Number Publication Date
CN115391204A true CN115391204A (zh) 2022-11-25

Family

ID=84123531

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202211037792.0A Pending CN115391204A (zh) 2022-08-26 2022-08-26 自动驾驶服务的测试方法、装置、电子设备及存储介质

Country Status (1)

Country Link
CN (1) CN115391204A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116955208A (zh) * 2023-09-18 2023-10-27 荣耀终端有限公司 测试方法、终端设备、芯片及存储介质

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116955208A (zh) * 2023-09-18 2023-10-27 荣耀终端有限公司 测试方法、终端设备、芯片及存储介质
CN116955208B (zh) * 2023-09-18 2024-03-15 荣耀终端有限公司 测试方法、终端设备、芯片及存储介质

Similar Documents

Publication Publication Date Title
CN109684188B (zh) 测试方法和装置
CN107045475B (zh) 测试方法和装置
CN114021378A (zh) 一种模型仿真方法、装置、电子设备及存储介质
CN115878394A (zh) 内存测试方法、装置、电子设备及存储介质
CN111092767B (zh) 用于调试设备的方法及装置
CN113792341A (zh) 应用程序的隐私合规自动化检测方法、装置、设备及介质
CN114417780B (zh) 状态同步方法、装置、电子设备及存储介质
CN108023905B (zh) 物联网应用系统及方法
CN115391204A (zh) 自动驾驶服务的测试方法、装置、电子设备及存储介质
CN108898229B (zh) 用于构建机器学习建模过程的方法及系统
CN114546830A (zh) 回归测试方法、装置、电子设备及存储介质
CN114374703B (zh) 云手机信息的获取方法、装置、设备以及存储介质
CN116126719A (zh) 接口测试方法、装置、电子设备及存储介质
CN115599438A (zh) 应用程序的发布包的构建方法、装置、设备及介质
CN115328736A (zh) 一种探针部署方法、装置、设备和存储介质
CN114386577A (zh) 用于执行深度学习模型的方法、设备和存储介质
CN114389969A (zh) 客户端的测试方法、装置、电子设备和存储介质
CN114218166A (zh) 数据处理方法、装置、电子设备及可读存储介质
CN114138358A (zh) 应用程序的启动优化方法、装置、设备和存储介质
CN113656268B (zh) 业务服务的性能测试方法、装置、电子设备和存储介质
CN115102850B (zh) 配置比对方法、装置、电子设备及存储介质
CN113641544B (zh) 用于检测应用状态的方法、装置、设备、介质和产品
CN116974940A (zh) 一种接口测试方法、装置、设备及存储介质
CN116991737A (zh) 一种软件测试方法、系统、电子设备及存储介质
CN114117317A (zh) 模型处理方法、装置、设备以及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination