CN116828522A - 一种测试方法、装置、电子设备及计算机可读存储介质 - Google Patents
一种测试方法、装置、电子设备及计算机可读存储介质 Download PDFInfo
- Publication number
- CN116828522A CN116828522A CN202310797075.6A CN202310797075A CN116828522A CN 116828522 A CN116828522 A CN 116828522A CN 202310797075 A CN202310797075 A CN 202310797075A CN 116828522 A CN116828522 A CN 116828522A
- Authority
- CN
- China
- Prior art keywords
- test
- task
- control module
- feedback information
- upgrade
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000012360 testing method Methods 0.000 title claims abstract description 373
- 238000003860 storage Methods 0.000 title claims abstract description 13
- 238000010998 test method Methods 0.000 title claims description 6
- 230000002159 abnormal effect Effects 0.000 claims abstract description 97
- 238000000034 method Methods 0.000 claims abstract description 34
- 230000005856 abnormality Effects 0.000 claims description 20
- 238000004590 computer program Methods 0.000 claims description 17
- 230000001680 brushing effect Effects 0.000 claims description 11
- 238000012795 verification Methods 0.000 claims description 7
- 239000000463 material Substances 0.000 abstract description 8
- 238000013522 software testing Methods 0.000 abstract description 2
- 230000004044 response Effects 0.000 description 19
- 238000004891 communication Methods 0.000 description 6
- 238000005516 engineering process Methods 0.000 description 6
- 238000012545 processing Methods 0.000 description 6
- 238000004088 simulation Methods 0.000 description 5
- 238000010586 diagram Methods 0.000 description 4
- 230000006870 function Effects 0.000 description 4
- 239000000243 solution Substances 0.000 description 4
- 238000011010 flushing procedure Methods 0.000 description 3
- 230000009286 beneficial effect Effects 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 238000002347 injection Methods 0.000 description 2
- 239000007924 injection Substances 0.000 description 2
- 238000007689 inspection Methods 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 230000003247 decreasing effect Effects 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000009826 distribution Methods 0.000 description 1
- 230000005520 electrodynamics Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W24/00—Supervisory, monitoring or testing arrangements
- H04W24/08—Testing, supervising or monitoring using real traffic
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W8/00—Network data management
- H04W8/22—Processing or transfer of terminal data, e.g. status or physical capabilities
- H04W8/24—Transfer of terminal data
- H04W8/245—Transfer of terminal data from a network towards a terminal
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Databases & Information Systems (AREA)
- Debugging And Monitoring (AREA)
Abstract
本申请涉及软件测试技术领域,提供了一种测试方法、装置、电子设备及计算机可读存储介质。该方法可以实现自动化测试,以及,可以生成测试任务对应的测试异常反馈信息,并利用测试异常反馈信息对升级主控模块进行异常情况场景的测试;这样,可以覆盖手动测试在OTA刷写过程中无法覆盖的各种异常场景,同时可以通过对升级主控模块进行测试任务的自动化测试以及自动生成测试任务的测试报告,大大降低人力物力成本和时间成本,并且可以避免出现由于人工操作错误所导致的测试结果错误的问题,从而提高了测试效率和测试报告的准确率。
Description
技术领域
本申请涉及软件测试技术领域,尤其涉及一种测试方法、装置、电子设备及计算机可读存储介质。
背景技术
随着中国新能源汽车行业的飞速发展,大量电子技术被应用到汽车控制中,一辆汽车包含了上百个ECU,汽车的控制器也承载了越来越多的功能,软件对于汽车的重要性将愈发凸显,软件将配合ECU一起定义汽车功能。为了方便汽车的迭代更新,OTA(Over-the-Air Technology,空中下载技术)技术在汽车电动化和智能化发展过程中将被快速普及,以后的每一辆汽车都将会搭载OTA技术。为了保证OTA技术的可靠性和稳定性,最好的方式就是根据OTA技术方案进行完整详细的测试。
目前,针对OTA的测试主要是云端下发测试任务,再通过用户手动点击车载屏幕的方式进行测试,测试结果的判断也是直观的通过屏幕显示的成功和失败来确定。这种方式只能保证正向测试流程没有问题,而针对详细的OTA刷写流程以及流程中的故障注入异常情况等场景则难以通过简单的手动点击车载屏幕的测试方式去实现。因此,亟需一种新的测试方案。
发明内容
有鉴于此,本申请实施例提供了一种测试方法、装置、电子设备及计算机可读存储介质,以解决现有技术中只能保证正向测试流程没有问题,而针对详细的OTA刷写流程以及流程中的故障注入异常情况等场景则难以通过简单的手动点击车载屏幕的测试方式去实现的问题。
本申请实施例的第一方面,提供了一种测试方法,包括:
响应于测试指令,向升级主控模块发送所述测试指令对应的测试任务;
根据所述测试任务,确定所述测试任务对应的测试异常反馈信息,以及,将所述测试异常反馈信息向所述升级主控模块发送;
获取所述升级主控模块返回的任务执行结果;其中,所述任务执行结果为所述升级主控模块基于所述测试任务和所述测试异常反馈信息所确定的;
根据所述任务执行结果,确定所述测试任务的测试报告。
可选的,若所述测试任务为整车信号校验任务;所述根据所述测试任务,确定所述测试任务对应的测试异常反馈信息,包括:
根据所述整车信号校验任务,确定所述整车信号校验任务对应的异常车辆数据;
根据所述异常车辆数据,生成所述测试任务对应的测试异常反馈信息。
可选的,所述将所述测试异常反馈信息向所述升级主控模块发送,包括:
检测到所述升级主控模块响应于所述整车信号校验任务发出整车信号获取信号后,将所述测试异常反馈信息向所述升级主控模块发送。
可选的,所述异常车辆数据为异常车速数据。
可选的,若所述测试任务为升级数据刷写任务;所述根据所述测试任务,确定所述测试任务对应的测试异常反馈信息,包括:
检测到所述升级主控模块响应于所述升级数据刷写任务发出触发事件信号后,截取所述触发事件信号;其中,所述升级数据刷写任务包括刷写流程报文,且所述刷写流程报文与所述触发事件信号具有对应关系;
根据所述触发事件信号,生成所述测试任务对应的测试异常反馈信息。
可选的,所述根据所述触发事件信号,生成所述测试任务对应的测试异常反馈信息,包括:
根据所述触发事件信号,确定所述触发事件信号对应的刷写流程报文;
根据所述触发事件信号对应的刷写流程报文中的系统变量,生成所述测试任务对应的测试异常反馈信息。
可选的,所述根据所述任务执行结果,确定所述测试任务的测试报告,包括:
若所述任务执行结果与所述测试任务对应的预期结果相同,则所述测试任务的测试报告为测试正常报告;
若所述任务执行结果与所述测试任务对应的预期结果不相同,则所述测试任务的测试报告为测试失败报告。
本申请实施例的第二方面,提供了一种测试装置,包括:
任务发送模块,被配置为响应于测试指令,向升级主控模块发送所述测试指令对应的测试任务;
信息发送模块,被配置为根据所述测试任务,确定所述测试任务对应的测试异常反馈信息,以及,将所述测试异常反馈信息向所述升级主控模块发送;
结果获取模块,被配置为获取所述升级主控模块返回的任务执行结果;其中,所述任务执行结果为所述升级主控模块基于所述测试信息和所述测试异常反馈信息所确定的;
报告确定模块,被配置为根据所述任务执行结果,确定所述测试任务的测试报告。
可选的,若所述测试任务为整车信号校验任务;所述信息发送模块,被配置为:
根据所述整车信号校验任务,确定所述整车信号校验任务对应的异常车辆数据;
根据所述异常车辆数据,生成所述测试任务对应的测试异常反馈信息。
可选的,若所述测试任务为整车信号校验任务;所述信息发送模块,被配置为:
检测到所述升级主控模块响应于所述整车信号校验任务发出整车信号获取信号后,将所述测试异常反馈信息向所述升级主控模块发送。
可选的,所述异常车辆数据为异常车速数据。
可选的,若所述测试任务为升级数据刷写任务;所述信息发送模块,被配置为:
检测到所述升级主控模块响应于所述升级数据刷写任务发出触发事件信号后,截取所述触发事件信号;其中,所述升级数据刷写任务包括刷写流程报文,且所述刷写流程报文与所述触发事件信号具有对应关系;
根据所述触发事件信号,生成所述测试任务对应的测试异常反馈信息。
可选的,所述信息发送模块,被配置为:
根据所述触发事件信号,确定所述触发事件信号对应的刷写流程报文;
根据所述触发事件信号对应的刷写流程报文中的系统变量,生成所述测试任务对应的测试异常反馈信息。
可选的,所述报告确定模块,被配置为:
若所述任务执行结果与所述测试任务对应的预期结果相同,则所述测试任务的测试报告为测试正常报告;
若所述任务执行结果与所述测试任务对应的预期结果不相同,则所述测试任务的测试报告为测试失败报告。
本申请实施例的第三方面,提供了一种电子设备,包括存储器、处理器以及存储在存储器中并且可在处理器上运行的计算机程序,该处理器执行计算机程序时实现上述方法的步骤。
本申请实施例的第四方面,提供了一种计算机可读存储介质,该计算机可读存储介质存储有计算机程序,该计算机程序被处理器执行时实现上述方法的步骤。
本申请实施例与现有技术相比存在的有益效果是:本申请实施例在获取到测试指令后,可以先响应于测试指令,向升级主控模块发送所述测试指令对应的测试任务;然后,可以根据所述测试任务,确定所述测试任务对应的测试异常反馈信息,以及,将所述测试异常反馈信息向所述升级主控模块发送;接着,可以获取所述升级主控模块返回的任务执行结果;其中,所述任务执行结果为所述升级主控模块基于所述测试信息和所述测试异常反馈信息所确定的。最后,可以根据所述任务执行结果,确定所述测试任务的测试报告。可见,本实施例中可以实现自动化测试,以及,可以生成测试任务对应的测试异常反馈信息,并利用测试异常反馈信息对升级主控模块进行异常情况场景的测试;这样,本实施例可以覆盖手动测试在OTA刷写过程中无法覆盖的各种异常场景,同时可以通过对升级主控模块进行测试任务的自动化测试以及自动生成测试任务的测试报告,大大降低人力物力成本和时间成本,并且可以避免出现由于人工操作错误所导致的测试结果错误的问题,从而提高了测试效率和测试报告的准确率。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其它的附图。
图1是本申请实施例的应用场景的场景示意图;
图2a是本申请实施例提供的一种测试方法的流程示意图;
图2b是本申请实施例提供的一种测试方法的流程示意图;
图3是本申请实施例提供的一种测试装置的结构示意图;
图4是本申请实施例提供的一种电子设备的结构示意图。
具体实施方式
以下描述中,为了说明而不是为了限定,提出了诸如特定系统结构、技术之类的具体细节,以便透彻理解本申请实施例。然而,本领域的技术人员应当清楚,在没有这些具体细节的其它实施例中也可以实现本申请。在其它情况中,省略对众所周知的系统、装置、电路以及方法的详细说明,以免不必要的细节妨碍本申请的描述。
下面将结合附图详细说明根据本申请实施例的一种测试方法和装置。
图1是本申请实施例的应用场景的场景示意图。该应用场景可以包括终端设备1、2和3、服务器4以及网络5。
终端设备1、2和3可以是硬件,也可以是软件。当终端设备1、2和3为硬件时,其可以是具有显示屏且支持与服务器4通信的各种电子设备,包括但不限于智能手机、平板电脑、膝上型便携计算机和台式计算机等;当终端设备1、2和3为软件时,其可以安装在如上该的电子设备中。终端设备1、2和3可以实现为多个软件或软件模块,也可以实现为单个软件或软件模块,本申请实施例对此不作限制。进一步地,终端设备1、2和3上可以安装有各种应用,例如数据处理应用、即时通信工具、社交平台软件、搜索类应用、购物类应用等。
服务器4可以是提供各种服务的服务器,例如,对与其建立通信连接的终端设备发送的请求进行接收的后台服务器,该后台服务器可以对终端设备发送的请求进行接收和分析等处理,并生成处理结果。服务器4可以是一台服务器,也可以是由若干台服务器组成的服务器集群,或者还可以是一个云计算服务中心,本申请实施例对此不作限制。
需要说明的是,服务器4可以是硬件,也可以是软件。当服务器4为硬件时,其可以是为终端设备1、2和3提供各种服务的各种电子设备。当服务器4为软件时,其可以是为终端设备1、2和3提供各种服务的多个软件或软件模块,也可以是为终端设备1、2和3提供各种服务的单个软件或软件模块,本申请实施例对此不作限制。
网络5可以是采用同轴电缆、双绞线和光纤连接的有线网络,也可以是无需布线就能实现各种通信设备互联的无线网络,例如,蓝牙(Bluetooth)、近场通信(Near FieldCommunication,NFC)、红外(Infrared)等,本申请实施例对此不作限制。
用户可以通过终端设备1、2和3经由网络5与服务器4建立通信连接,以接收或发送信息等。具体地,当用户需要对终端设备1、2和3(例如汽车)中的升级主控模块进行测试时,可以向终端设备1、2和3输出测试指令,终端设备1、2和3可以将测试指令向服务器4发送。服务器4获取测试指令后,服务器4可以先响应于测试指令,向升级主控模块发送所述测试指令对应的测试任务。然后,服务器4可以根据所述测试任务,确定所述测试任务对应的测试异常反馈信息,以及,将所述测试异常反馈信息向所述升级主控模块发送。接着,服务器4可以获取所述升级主控模块返回的任务执行结果;其中,所述任务执行结果为所述升级主控模块基于所述测试信息和所述测试异常反馈信息所确定的。最后,服务器4可以根据所述任务执行结果,确定所述测试任务的测试报告。这样,本实施例中可以实现自动化测试,以及,可以生成测试任务对应的测试异常反馈信息,并利用测试异常反馈信息对升级主控模块进行异常情况场景的测试;这样,本实施例可以覆盖手动测试在OTA刷写过程中无法覆盖的各种异常场景,同时可以通过对升级主控模块进行测试任务的自动化测试以及自动生成测试任务的测试报告,大大降低人力物力成本和时间成本,并且可以避免出现由于人工操作错误所导致的测试结果错误的问题,从而提高了测试效率和测试报告的准确率。
需要说明的是,终端设备1、2和3、服务器4以及网络5的具体类型、数量和组合可以根据应用场景的实际需求进行调整,本申请实施例对此不作限制。
图2a是本申请实施例提供的一种测试方法的流程示意图。图2a的测试方法可以由图1的服务器执行。如图2a所示,该测试方法包括:
S201,响应于测试指令,向升级主控模块发送所述测试指令对应的测试任务。
在本实施例中,测试指令可以理解为用于触发对升级主控模块进行测试的指令。其中,测试指令可以包括测试任务,测试任务可以理解为需要进行测试的测试用例。例如,如图2b所示,假设升级主控模块为汽车上的OTA_Master,测试设备中的自动化测试框架可以响应于测试指令,向升级主控模块OTA_Master发送所述测试指令对应的测试任务(即测试用例)。在一种实现方式中,测试任务可以为整车信号校验任务,整车信号校验任务可以理解为能否对升级主控模块OTA_Master进行OTA升级的前置校验任务;在另一种实现方式中,测试任务可以为升级数据刷写任务,升级数据刷写任务可以理解为对升级主控模块OTA_Master进行OTA升级的任务。
S202,根据所述测试任务,确定所述测试任务对应的测试异常反馈信息,以及,将所述测试异常反馈信息向所述升级主控模块发送。
在本实施例中,为了实现不仅能够进行正向测试,还能够模拟车辆异常信号,使得升级主控模块能够异常响应的自动化测试。在本实施例中,在接收到测试指令后,可以先根据测试指令中的测试任务,确定该测试任务对应的测试异常反馈信息。其中,该测试任务对应的测试异常反馈信息可以理解为该测试任务对应的异常情况下用于对升级主控模块进行测试的反馈信息。
在一种实现方式中,若所述测试任务为整车信号校验任务,则可以先根据所述整车信号校验任务,确定所述整车信号校验任务对应的异常车辆数据。在一种实现方式中,异常车辆数据可以为异常车速数据。然后,可以根据所述异常车辆数据,生成所述测试任务对应的测试异常反馈信息,可以理解的是,该测试异常反馈信息可以包括该异常车辆数据。接着,检测到所述升级主控模块响应于所述整车信号校验任务发出整车信号获取信号后,说明升级主控模块需要获取整车信号,以便升级主控模块可以根据整车信号判断是否可以进行升级认为,此时,可以将所述测试异常反馈信息向所述升级主控模块发送,以便测试升级主控模块是否可以响应于异常反馈信息作出不进行升级的决策。
可以理解的是,异常测试任务有一种是整车信号的异常导致升级条件检查不通过,无法执行升级流程,例如,升级条件要求车速为零,挡位在P档的时候才可以升级,可以通过模拟车速不为零等情况来验证升级条件检查不通过的异常场景。在本实施例中,为了实现整车信号校验任务的异常场景下的自动化测试,首先可以使用CANoe模拟车辆会发送的异常整车信号,然后,可以通过修改面板中整车信息的参数值就可以模拟出车辆信号的异常情况,即得到测试任务对应的测试异常反馈信息。
例如,如图2b所示,在正常情况下,车速为0时升级主控模块才可以进行OTA升级,但是想验证车速在300km/h时,升级主控模块不能够进行OTA升级的测试;可以将测试面板或测试代码中的“ESP_VehicleSpeed”的进度条拉到300,即修改车速,便可以模拟出车速在300km/h时整车的整车信号,即测试任务对应的测试异常反馈信息;在这样的情况下再去调用升级主控模块执行升级命令(即发送启动脚本),这时,升级主控模块OTA_Master向整车系统发送处理整车信息,得到模拟出车速在300km/h时整车的整车信号,即测试任务对应的测试异常反馈信息,此时,升级主控模块OTA_Master应该需要提示升级条件不满足,因此,不能够进行OTA升级。这样,便可以通过模拟出实车很难实现的、各个极端情况下的信号值(即测试异常反馈信息),即可以模拟车辆整车信号,可以随时修改整车信号,能够满足各种极端信号的场景,以及能够保证车辆在各种极端异常条件下的OTA测试,极大的提升了效率,降低了成本。
在一种实现方式中,若所述测试任务为升级数据刷写任务,若检测到升级主控模块响应于所述升级数据刷写任务发出触发事件信号后,可以先截取所述触发事件信号;其中,所述升级数据刷写任务包括刷写流程报文,且该刷写流程报文与该触发事件信号具有对应关系。接着,可以根据所述触发事件信号,生成所述测试任务对应的测试异常反馈信息;具体地,可以根据所述触发事件信号,确定所述触发事件信号对应的刷写流程报文,以及,根据所述触发事件信号对应的刷写流程报文中的系统变量,生成所述测试任务对应的测试异常反馈信息,例如,可以将触发事件信号对应的刷写流程报文中的系统变量变更为异常值,便可以得到测试任务对应的测试异常反馈信息。
可以理解的是,异常测试任务有一种是在升级流程中,升级主控模块可以发送命令报文(即刷写流程报文),正常情况需要想升级主控模块回复正响应报文才可以正常升级,这时,可以模拟向升级主控模块回复负响应或者其他不符合升级要求的指令让升级主控模块中断升级。例如,如图2b所示,升级主控模块OTA master向被刷控制器发送刷写流程报文时,可以模拟每一个ECU(电子控制单元)在OTA刷写过程中可以通过CANoe去监听和接收升级主控模块OTA master发出的刷写流程报文,每收到一个刷写流程报文就会去触发该步骤所对应的事件(即触发事件),通过对不同事件的响应,就可以找到需要操作的报文,即可以根据所述触发事件信号,确定所述触发事件信号对应的刷写流程报文。例如收到“2701”的刷写流程报文,就会去触发“SecurityCheck”的事件的触发事件信号,通过对“SecurityCheck”的事件的触发事件信号进行响应就可以反过来找到“2701”的刷写流程报文;在找到刷写流程报文之后,如果选择回复负响应就会利用错误管理器针对该刷写流程报文进行发送负响应、制造延迟、发送错误帧以及不对该报文进行响应的制造错误操作,在一种实现方式中,可以通过刷写流程报文中的一个系统变量去选择回复正响应还是负相应,比如“2701”就会有一个“SetErrorto2701”的变量,通过修改该变量的值就可以选择是否在“2701”给升级主控模块回复负响应,即返回响应事件。举例来说,在刷写BCM(即车身控制器)时,当收到升级主控模块发送的“1003”的报文后,BCM可以给升级主控模块回复包括NRC的错误的测试异常反馈信息。这样,能够通过事件触发的方式监听刷写流程报文,同时修改对应的响应报文(即刷写流程报文),能够实现负响应、错误响应、不响应、延迟等各种异常场景下的测试。
S203,获取所述升级主控模块返回的任务执行结果。
其中,所述任务执行结果为所述升级主控模块基于所述测试任务和所述测试异常反馈信息所确定的。具体地,在本实施例中,升级主控模块获取到测试任务和测试异常反馈信息后,可以基于测试异常反馈信息作出测试任务对应的任务执行结果,这样,检测设备便可以获取到升级主控模块返回的任务执行结果。
S204,根据所述任务执行结果,确定所述测试任务的测试报告。
具体地,若所述任务执行结果与所述测试任务对应的预期结果相同,则所述测试任务的测试报告为测试正常报告,例如,若所述测试任务为整车信号校验任务,当任务执行结果与整车信号校验任务对应的预期结果均为不进行升级,则可以确定测试任务的测试报告为测试正常报告。若所述任务执行结果与所述测试任务对应的预期结果不相同,则所述测试任务的测试报告为测试失败报告。例如,若所述测试任务为整车信号校验任务,当任务执行结果为进行升级,且整车信号校验任务对应的预期结果为不进行升级,则可以确定测试任务的测试报告为测试失败报告。例如,如图2b所示,自动化测试框架在测试完成后,可以根据所述任务执行结果,确定所述测试任务的测试报告。这样,本实施例可以通过自动化脚本实现测试任务的自动化测试,且自动记录日志、自动生成测试报告,大大降低人力物力成本和时间成本。
本申请实施例与现有技术相比存在的有益效果是:本申请实施例在获取到测试指令后,可以先响应于测试指令,向升级主控模块发送所述测试指令对应的测试任务;然后,可以根据所述测试任务,确定所述测试任务对应的测试异常反馈信息,以及,将所述测试异常反馈信息向所述升级主控模块发送;接着,可以获取所述升级主控模块返回的任务执行结果;其中,所述任务执行结果为所述升级主控模块基于所述测试信息和所述测试异常反馈信息所确定的。最后,可以根据所述任务执行结果,确定所述测试任务的测试报告。可见,本实施例中可以实现自动化测试,以及,可以生成测试任务对应的测试异常反馈信息,并利用测试异常反馈信息对升级主控模块进行异常情况场景的测试;这样,本实施例可以覆盖手动测试在OTA刷写过程中无法覆盖的各种异常场景,同时可以通过对升级主控模块进行测试任务的自动化测试以及自动生成测试任务的测试报告,大大降低人力物力成本和时间成本,并且可以避免出现由于人工操作错误所导致的测试结果错误的问题,从而提高了测试效率和测试报告。也就是说,在通过对整车信号(即整车信号校验任务)的模拟和对响应报文(即测试异常反馈信息)的模拟,可以覆盖手动测试在OTA刷写过程中无法覆盖的各种异常场景,同时通过串联所有用例实现自动化测试和报告生成,大大降低人力物力成本和时间成本。
上述所有可选技术方案,可以采用任意结合形成本申请的可选实施例,在此不再一一赘述。
下述为本申请装置实施例,可以用于执行本申请方法实施例。对于本申请装置实施例中未披露的细节,请参照本申请方法实施例。
图3是本申请实施例提供的一种测试装置的示意图。如图3所示,该测试装置包括:
任务发送模块301,被配置为响应于测试指令,向升级主控模块发送所述测试指令对应的测试任务;
信息发送模块302,被配置为根据所述测试任务,确定所述测试任务对应的测试异常反馈信息,以及,将所述测试异常反馈信息向所述升级主控模块发送;
结果获取模块303,被配置为获取所述升级主控模块返回的任务执行结果;其中,所述任务执行结果为所述升级主控模块基于所述测试信息和所述测试异常反馈信息所确定的;
报告确定模块304,被配置为根据所述任务执行结果,确定所述测试任务的测试报告。
根据本申请实施例提供的技术方案,由于本实施例中可以实现自动化测试,以及,可以生成测试任务对应的测试异常反馈信息,并利用测试异常反馈信息对升级主控模块进行异常情况场景的测试;这样,本实施例可以覆盖手动测试在OTA刷写过程中无法覆盖的各种异常场景,同时可以通过对升级主控模块进行测试任务的自动化测试以及自动生成测试任务的测试报告,大大降低人力物力成本和时间成本,并且可以避免出现由于人工操作错误所导致的测试结果错误的问题,从而提高了测试效率和测试报告。也就是说,在通过对整车信号(即整车信号校验任务)的模拟和对响应报文(即测试异常反馈信息)的模拟,可以覆盖手动测试在OTA刷写过程中无法覆盖的各种异常场景,同时通过串联所有用例实现自动化测试和报告生成,大大降低人力物力成本和时间成本。
在一些实施例中,若所述测试任务为整车信号校验任务;所述信息发送模块302,被配置为:
根据所述整车信号校验任务,确定所述整车信号校验任务对应的异常车辆数据;
根据所述异常车辆数据,生成所述测试任务对应的测试异常反馈信息。
在一些实施例中,若所述测试任务为整车信号校验任务;所述信息发送模块302,被配置为:
检测到所述升级主控模块响应于所述整车信号校验任务发出整车信号获取信号后,将所述测试异常反馈信息向所述升级主控模块发送。
在一些实施例中,所述异常车辆数据为异常车速数据。
在一些实施例中,若所述测试任务为升级数据刷写任务;所述信息发送模块302,被配置为:
检测到所述升级主控模块响应于所述升级数据刷写任务发出触发事件信号后,截取所述触发事件信号;其中,所述升级数据刷写任务包括刷写流程报文,且所述刷写流程报文与所述触发事件信号具有对应关系;
根据所述触发事件信号,生成所述测试任务对应的测试异常反馈信息。
在一些实施例中,所述信息发送模块302,被配置为:
根据所述触发事件信号,确定所述触发事件信号对应的刷写流程报文;
根据所述触发事件信号对应的刷写流程报文中的系统变量,生成所述测试任务对应的测试异常反馈信息。
在一些实施例中,所述报告确定模块304,被配置为:
若所述任务执行结果与所述测试任务对应的预期结果相同,则所述测试任务的测试报告为测试正常报告;
若所述任务执行结果与所述测试任务对应的预期结果不相同,则所述测试任务的测试报告为测试失败报告。
图4是本申请实施例提供的电子设备4的示意图。如图4所示,该实施例的电子设备4包括:处理器401、存储器402以及存储在该存储器402中并且可在处理器401上运行的计算机程序403。处理器401执行计算机程序403时实现上述各个方法实施例中的步骤。或者,处理器401执行计算机程序403时实现上述各装置实施例中各模块/单元的功能。
电子设备4可以是桌上型计算机、笔记本、掌上电脑及云端服务器等电子设备。电子设备4可以包括但不仅限于处理器401和存储器402。本领域技术人员可以理解,图4仅仅是电子设备4的示例,并不构成对电子设备4的限定,可以包括比图示更多或更少的部件,或者不同的部件。
处理器401可以是中央处理单元(Central Processing Unit,CPU),也可以是其它通用处理器、数字信号处理器(Digital Signal Processor,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现场可编程门阵列(Field-Programmable Gate Array,FPGA)或者其它可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。
存储器402可以是电子设备4的内部存储单元,例如,电子设备4的硬盘或内存。存储器402也可以是电子设备4的外部存储设备,例如,电子设备4上配备的插接式硬盘,智能存储卡(Smart Media Card,SMC),安全数字(Secure Digital,SD)卡,闪存卡(Flash Card)等。存储器402还可以既包括电子设备4的内部存储单元也包括外部存储设备。存储器402用于存储计算机程序以及电子设备所需的其它程序和数据。
所属领域的技术人员可以清楚地了解到,为了描述的方便和简洁,仅以上述各功能单元、模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能单元、模块完成,即将装置的内部结构划分成不同的功能单元或模块,以完成以上描述的全部或者部分功能。实施例中的各功能单元、模块可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中,上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
集成的模块/单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读存储介质中。基于这样的理解,本申请实现上述实施例方法中的全部或部分流程,也可以通过计算机程序来指令相关的硬件来完成,计算机程序可以存储在计算机可读存储介质中,该计算机程序在被处理器执行时,可以实现上述各个方法实施例的步骤。计算机程序可以包括计算机程序代码,计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。计算机可读介质可以包括:能够携带计算机程序代码的任何实体或装置、记录介质、U盘、移动硬盘、磁碟、光盘、计算机存储器、只读存储器(Read-Only Memory,ROM)、随机存取存储器(Random Access Memory,RAM)、电载波信号、电信信号以及软件分发介质等。需要说明的是,计算机可读介质包含的内容可以根据司法管辖区内立法和专利实践的要求进行适当的增减,例如,在某些司法管辖区,根据立法和专利实践,计算机可读介质不包括电载波信号和电信信号。
以上实施例仅用以说明本申请的技术方案,而非对其限制;尽管参照前述实施例对本申请进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本申请各实施例技术方案的精神和范围,均应包含在本申请的保护范围之内。
Claims (10)
1.一种测试方法,其特征在于,包括:
响应于测试指令,向升级主控模块发送所述测试指令对应的测试任务;
根据所述测试任务,确定所述测试任务对应的测试异常反馈信息,以及,将所述测试异常反馈信息向所述升级主控模块发送;
获取所述升级主控模块返回的任务执行结果;其中,所述任务执行结果为所述升级主控模块基于所述测试任务和所述测试异常反馈信息所确定的;
根据所述任务执行结果,确定所述测试任务的测试报告。
2.根据权利要求1所述的方法,其特征在于,若所述测试任务为整车信号校验任务;所述根据所述测试任务,确定所述测试任务对应的测试异常反馈信息,包括:
根据所述整车信号校验任务,确定所述整车信号校验任务对应的异常车辆数据;
根据所述异常车辆数据,生成所述测试任务对应的测试异常反馈信息。
3.根据权利要求2所述的方法,其特征在于,所述将所述测试异常反馈信息向所述升级主控模块发送,包括:
检测到所述升级主控模块响应于所述整车信号校验任务发出整车信号获取信号后,将所述测试异常反馈信息向所述升级主控模块发送。
4.根据权利要求2所述的方法,其特征在于,所述异常车辆数据为异常车速数据。
5.根据权利要求1所述的方法,其特征在于,若所述测试任务为升级数据刷写任务;所述根据所述测试任务,确定所述测试任务对应的测试异常反馈信息,包括:
检测到所述升级主控模块响应于所述升级数据刷写任务发出触发事件信号后,截取所述触发事件信号;其中,所述升级数据刷写任务包括刷写流程报文,且所述刷写流程报文与所述触发事件信号具有对应关系;
根据所述触发事件信号,生成所述测试任务对应的测试异常反馈信息。
6.根据权利要求5所述的方法,其特征在于,所述根据所述触发事件信号,生成所述测试任务对应的测试异常反馈信息,包括:
根据所述触发事件信号,确定所述触发事件信号对应的刷写流程报文;
根据所述触发事件信号对应的刷写流程报文中的系统变量,生成所述测试任务对应的测试异常反馈信息。
7.根据权利要求1所述的方法,其特征在于,所述根据所述任务执行结果,确定所述测试任务的测试报告,包括:
若所述任务执行结果与所述测试任务对应的预期结果相同,则所述测试任务的测试报告为测试正常报告;
若所述任务执行结果与所述测试任务对应的预期结果不相同,则所述测试任务的测试报告为测试失败报告。
8.一种测试装置,其特征在于,包括:
任务发送模块,被配置为响应于测试指令,向升级主控模块发送所述测试指令对应的测试任务;
信息发送模块,被配置为根据所述测试任务,确定所述测试任务对应的测试异常反馈信息,以及,将所述测试异常反馈信息向所述升级主控模块发送;
结果获取模块,被配置为获取所述升级主控模块返回的任务执行结果;其中,所述任务执行结果为所述升级主控模块基于所述测试信息和所述测试异常反馈信息所确定的;
报告确定模块,被配置为根据所述任务执行结果,确定所述测试任务的测试报告。
9.一种电子设备,包括存储器、处理器以及存储在所述存储器中并且可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现如权利要求1至7中任一项所述方法的步骤。
10.一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1至7中任一项所述方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310797075.6A CN116828522A (zh) | 2023-06-30 | 2023-06-30 | 一种测试方法、装置、电子设备及计算机可读存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310797075.6A CN116828522A (zh) | 2023-06-30 | 2023-06-30 | 一种测试方法、装置、电子设备及计算机可读存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN116828522A true CN116828522A (zh) | 2023-09-29 |
Family
ID=88118169
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202310797075.6A Pending CN116828522A (zh) | 2023-06-30 | 2023-06-30 | 一种测试方法、装置、电子设备及计算机可读存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN116828522A (zh) |
-
2023
- 2023-06-30 CN CN202310797075.6A patent/CN116828522A/zh active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9569325B2 (en) | Method and system for automated test and result comparison | |
CN112650685B (zh) | 自动化测试方法、装置、电子设备及计算机存储介质 | |
CN111897724B (zh) | 一种适用于云平台的自动化测试方法及装置 | |
US11893331B2 (en) | Device verification method, UVM verification platform, electronic apparatus and storage medium | |
CN112732499A (zh) | 一种基于微服务架构的测试方法、装置及计算机系统 | |
CN111221727A (zh) | 测试方法、装置、电子设备和计算机可读介质 | |
CN113572658A (zh) | 车辆控制信号的测试方法、装置、电子设备及存储介质 | |
CN112882948A (zh) | 一种应用的稳定性测试方法、装置、系统及存储介质 | |
CN110717315B (zh) | 系统数据批量修改方法、装置、存储介质及电子设备 | |
CN115314413B (zh) | 一种can信号测试方法及装置 | |
CN112905445B (zh) | 一种基于日志的测试方法、装置及计算机系统 | |
CN116828522A (zh) | 一种测试方法、装置、电子设备及计算机可读存储介质 | |
CN107247661B (zh) | 支持对应用的安装包进行自动化验证的方法和系统 | |
US11474794B2 (en) | Generating mock services based on log entries | |
CN112084114B (zh) | 用于测试接口的方法和装置 | |
CN110618943B (zh) | 安防服务测试方法、装置、电子设备及可读存储介质 | |
CN112882897A (zh) | 异常场景处理方法、装置、电子设备及存储介质 | |
CN111225075A (zh) | 物联网定向访问业务的配置方法及装置 | |
CN110750452A (zh) | 自动化测试方法及装置 | |
CN115484200B (zh) | 一种埋点测试方法、装置、服务器、存储介质和系统 | |
CN118605446A (zh) | 车辆功能测试方法、装置、设备、介质及产品 | |
CN116107903A (zh) | 一种车端服务化功能测试方法、装置、设备及介质 | |
CN116820957A (zh) | 车辆信号自动测试方法、装置、电子设备及存储介质 | |
CN116233826A (zh) | 一种软件数据的写入方法、装置、电子设备及其存储介质 | |
CN118034243A (zh) | 一种实车的自动化测试方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
TA01 | Transfer of patent application right | ||
TA01 | Transfer of patent application right |
Effective date of registration: 20240118 Address after: No. 13 Xingxiang Road, Zengjia Town, High tech Zone, Shapingba District, Chongqing, 400039 Applicant after: Chongqing Selis Phoenix Intelligent Innovation Technology Co.,Ltd. Address before: 401120 No. 618 Liangjiang Avenue, Longxing Town, Yubei District, Chongqing City Applicant before: Chongqing Celes New Energy Automobile Design Institute Co.,Ltd. |