CN115599652A - 系统性能参数的测试方法、装置、设备及存储介质 - Google Patents
系统性能参数的测试方法、装置、设备及存储介质 Download PDFInfo
- Publication number
- CN115599652A CN115599652A CN202211325141.1A CN202211325141A CN115599652A CN 115599652 A CN115599652 A CN 115599652A CN 202211325141 A CN202211325141 A CN 202211325141A CN 115599652 A CN115599652 A CN 115599652A
- Authority
- CN
- China
- Prior art keywords
- test
- determining
- target
- script
- information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000012360 testing method Methods 0.000 title claims abstract description 582
- 238000000034 method Methods 0.000 title claims abstract description 64
- 238000003860 storage Methods 0.000 title claims abstract description 17
- 238000013515 script Methods 0.000 claims abstract description 133
- 238000012545 processing Methods 0.000 claims description 18
- 230000004044 response Effects 0.000 claims description 11
- 238000013461 design Methods 0.000 description 12
- 238000004590 computer program Methods 0.000 description 11
- 238000010586 diagram Methods 0.000 description 4
- 238000012423 maintenance Methods 0.000 description 3
- 238000010998 test method Methods 0.000 description 3
- 238000009825 accumulation Methods 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 230000002159 abnormal effect Effects 0.000 description 1
- 230000006978 adaptation Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 238000002360 preparation method Methods 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/34—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
- G06F11/3409—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment for performance assessment
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/34—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
- G06F11/3466—Performance evaluation by tracing or monitoring
- G06F11/3495—Performance evaluation by tracing or monitoring for systems
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Computer Hardware Design (AREA)
- Quality & Reliability (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Debugging And Monitoring (AREA)
Abstract
本申请提供一种系统性能参数的测试方法、装置、设备及存储介质。涉及系统测试技术领域。方法包括：获取待测系统的系统信息和登录待测系统的账号信息，系统信息包括待测系统配置的多个测试项目的项目信息；从多个测试项目中确定与账号信息匹配的目标测试项目；确定与目标测试项目对应的多个测试脚本；对于每个测试脚本，确定每个测试脚本对应的多组测试参数；获取待测系统的测试场景，确定与测试场景匹配的测试方式信息；基于测试方式信息和每个测试脚本对应的多组测试参数，对目标测试项目对应的多个测试脚本进行测试，得到目标测试项目的系统性能参数。由于能够自动生成测试数据，并能够确定与测试场景匹配的测试方式信息，因此提高了测试效率。
Description
技术领域
本申请涉及系统测试技术领域，尤其涉及一种系统性能参数的测试方法、装置、设备及存储介质。
背景技术
系统的性能参数测试是保证系统稳定运行的重要环节。一个系统可以运行多个不同的项目。每个项目使用的系统资源不同，系统在运行每个项目时的性能参数也不同。因此，为了确保系统能够稳定运行某一项目，在系统运行该项目之前，需要对系统运行该项目的性能参数进行测试。
现有技术中，系统可以分为多个运行模式运行某一项目，并且运行模式不同，系统的性能参数也不同。为了获取多个运行模式对应的性能参数。在对系统运行某一项目的性能参数进行测试时，需要测试多个测试场景，确定每个测试场景下该系统的性能参数。
然而，发明人发现现有技术至少存在如下技术问题：由于不同的测试场景对应的测试方式不同，在多个测试场景进行切换时，需要通过人工一一调整测试方式，而人工调整测试方式费时费力，从而导致测试效率较低。
发明内容
本申请提供一种系统性能参数的测试方法、装置、设备及存储介质，能够提高系统性能参数的测试效率。
第一方面，本申请提供一种系统性能参数的测试方法，包括：
获取待测系统的系统信息和登录所述待测系统的账号信息，所述系统信息包括所述待测系统配置的多个测试项目的项目信息；
从所述多个测试项目中确定与所述账号信息匹配的目标测试项目；
确定与所述目标测试项目对应的多个测试脚本；
对于每个测试脚本，确定所述每个测试脚本对应的多组测试参数；
获取所述待测系统的测试场景，确定与所述测试场景匹配的测试方式信息，所述测试方式信息包括测试时长、脚本并发数和测试终止条件中的至少一项；
基于所述测试方式信息和所述每个测试脚本对应的多组测试参数，对所述目标测试项目对应的多个测试脚本进行测试，得到所述目标测试项目的系统性能参数。
在一种可能的设计中，所述从所述多个测试项目中确定与所述账号信息匹配的目标测试项目，包括：
确定所述账号信息对应的权限信息，所述权限信息用于表示可测试的测试项目；
基于所述权限信息，从所述多个测试项目中确定与所述账号信息匹配的目标测试项目。
在一种可能的设计中，所述对于每个测试脚本，确定所述每个测试脚本对应的多组测试参数，包括：
确定所述每个测试脚本的预定义规则类型，所述预定义规则类型包括日期类型、数值类型和列表类型中的一个；
基于所述预定义规则类型，生成所述每个测试脚本对应的多组测试参数。
在一种可能的设计中，所述对于每个测试脚本，确定所述每个测试脚本对应的多组测试参数，包括：
确定所述目标测试项目对应的数据库，所述数据库内存储有脚本标识和多组测试参数之间的关联关系；
基于所述每个测试脚本的脚本标识，从所述脚本标识和多组测试参数之间的关联关系中，确定所述每个测试脚本对应的多组测试参数。
在一种可能的设计中，所述获取所述待测系统的测试场景，确定与所述测试场景匹配的测试方式信息，包括：
确定所述待测系统的测试列表，所述测试列表内包括多个测试场景和所述多个测试场景的执行顺序；
按照所述多个测试场景的执行顺序，从所述多个测试场景中选取所述待测系统当前的测试场景；
确定与所述当前的测试场景的场景类型匹配的测试方式信息，所述场景类型包括单一负载场景、阶梯负载场景和混合负载场景中的一个。
在一种可能的设计中，所述确定与所述目标测试项目对应的多个测试脚本之前，所述方法还包括：
基于所述目标测试项目的项目标识，从测试资源数据库中查询与所述项目标识匹配的系统性能参数，所述测试资源数据库中存储有项目标识与系统性能参数之间的关联关系；
若查询失败，则执行所述确定与所述目标测试项目对应的多个测试脚本的步骤。
在一种可能的设计中，所述系统性能参数包括响应时间、每秒事务处理量TPS和资源占用率中的一个或多个；所述方法还包括：
确定所述目标测试项目的目标系统性能参数，所述目标系统性能参数包括目标响应时间、目标每秒事务处理量TPS和目标资源占用率中的一个或多个；
基于所述系统性能参数和所述目标系统性能参数，确定所述目标测试项目的测试结果信息，所述测试结果信息包括达标和未达标。
第二方面，本申请提供一种系统性能参数的测试装置，包括：
获取模块，用于获取待测系统的系统信息和登录所述待测系统的账号信息，所述系统信息包括所述待测系统配置的多个测试项目的项目信息；
第一确定模块，用于从所述多个测试项目中确定与所述账号信息匹配的目标测试项目；
第二确定模块，用于确定与所述目标测试项目对应的多个测试脚本；
第三确定模块，用于对于每个测试脚本，确定所述每个测试脚本对应的多组测试参数；
第四确定模块，用于获取所述待测系统的测试场景，确定与所述测试场景匹配的测试方式信息，所述测试方式信息包括测试时长、脚本并发数和测试终止条件中的至少一项；
测试模块，用于基于所述测试方式信息和所述每个测试脚本对应的多组测试参数，对所述目标测试项目对应的多个测试脚本进行测试，得到所述目标测试项目的系统性能参数。
第三方面，本发明提供一种电子设备，包括：至少一个处理器和存储器；
所述存储器存储计算机执行指令；
所述至少一个处理器执行所述存储器存储的计算机执行指令，使得所述至少一个处理器执行如上第一方面所述的系统性能参数的测试方法。
第四方面，本发明提供一种计算机存储介质，所述计算机存储介质中存储有计算机执行指令，当处理器执行所述计算机执行指令时，实现如上第一方面所述的系统性能参数的测试方法。
第五方面，本申请还提供一种计算机程序产品，所述计算机程序产品包括计算机程序，其存储在计算机可读存储介质中，至少一个处理器可以从计算机可读存储介质读取计算机程序，至少一个处理器执行计算机程序时，实现如上第一方面所述的系统性能参数的测试方法。
本申请提供的系统性能参数的测试方法、装置、设备及存储介质，先确定与账号信息匹配的目标测试项目，然后生成目标测试项目对应的多个测试脚本的多组测试参数，确定与测试场景匹配的测试方式信息，最后，通过多组测试参数和测试方式信息，对目标测试项目进行测试，该测试方法能够自动生成多组测试数据，并能够根据测试场景确定测试方式信息，因此提高了系统性能参数的测试效率。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本申请的实施例，并与说明书一起用于解释本申请的原理。
图1是本发明实施例提供的系统性能参数的测试方法的应用场景示意图；
图2为本申请实施例提供的系统性能参数的测试方法的流程图一；
图3为本申请实施例提供的系统性能参数的测试方法的流程图二；
图4为本申请实施例提供的系统性能参数的测试方法的流程图三；
图5为本申请实施例提供的系统性能参数的测试方法的流程图四；
图6为本申请实施例提供的系统性能参数的测试方法的流程图五；
图7为本申请实施例提供的系统性能参数的测试方法的流程图六；
图8为本申请实施例提供的系统性能参数的测试装置的结构示意图；
图9为本申请实施例提供的电子设备的结构示意图。
通过上述附图，已示出本申请明确的实施例，后文中将有更详细的描述。这些附图和文字描述并不是为了通过任何方式限制本申请构思的范围，而是通过参考特定实施例为本领域技术人员说明本申请的概念。
具体实施方式
这里将详细地对示例性实施例进行说明，其示例表示在附图中。下面的描述涉及附图时，除非另有表示，不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本申请相一致的所有实施方式。相反，它们仅是与如所附权利要求书中所详述的、本申请的一些方面相一致的装置和方法的例子。
本申请的技术方案中，所涉及的图像数据或用户数据等信息的收集、存储、使用、加工、传输、提供和公开等处理，均符合相关法律法规的规定，且不违背公序良俗。
系统的性能参数测试是保证系统稳定运行的重要环节。一个系统可以运行多个不同的项目。每个项目使用的系统资源不同，系统在运行每个项目时的性能参数也不同。示例性的，系统A可以运行项目A、项目B和项目C，项目A、项目B和项目C所占有的系统资源不同。
为了确保系统能够稳定运行某一项目，在系统运行某一项目之前，需要对系统运行该项目的性能参数进行测试。其中，系统运行项目可以分为多个运行模式，例如，单一负载模式，多负载模式等。负载数量代表系统同时处理交易服务的数量。
此时，为了获取多个运行模式对应的性能参数，就需要测试多个测试场景，确定每个测试场景下该系统的性能参数。然而，由于不同的测试场景对应的测试方式不同，在多个测试场景进行切换时，需要通过人工一一调整测试方式，而人工调整测试方式费时费力，从而导致测试效率较低。
针对上述技术问题，本申请提出如下技术构思：先确定与账号信息匹配的目标测试项目，然后生成目标测试项目对应的多个测试脚本的多组测试参数，确定与测试场景匹配的测试方式信息，最后，通过多组测试参数和测试方式信息，对目标测试项目进行测试，该测试方法能够自动生成多组测试数据，并能够根据测试场景确定测试方式信息，因此提高了系统性能参数的测试效率。
图1是本发明实施例提供的系统性能参数的测试方法的应用场景示意图。如图1所示，显示终端101内安装有测试系统，用户可以通过测试系统触发系统性能参数的测试请求。显示终端101接收用户触发的测试请求，将该测试请求通过无线网络传输至服务器102，该测试请求包括用户的账号信息和测试系统的系统标识。服务器102接收测试请求，获取待测系统的系统信息和登录待测系统的账号信息，进而得到目标测试项目的系统性能参数，并将得到目标测试项目的系统性能参数反馈至显示终端101进行显示。
下面以具体地实施例对本申请的技术方案以及本申请的技术方案如何解决上述技术问题进行详细说明。下面这几个具体的实施例可以相互结合，对于相同或相似的概念或过程可能在某些实施例中不再赘述。下面将结合附图，对本申请的实施例进行描述。
本申请实施例提供一种系统性能参数的测试方法。本申请实施例的方法的执行主体可以是服务器。图2为本申请实施例提供的系统性能参数的测试方法的流程图一。如图2所示，该系统性能参数的测试方法包括：
步骤S201、获取待测系统的系统信息和登录待测系统的账号信息，系统信息包括待测系统配置的多个测试项目的项目信息。
在本发明实施例中，系统的资源配置不同，可以配置的测试项目不同。示例性的，资源配置包括内存配置和CPU配置等。
可选的，服务器本地存储有系统标识和系统信息之间的关联关系。服务器可以通过系统标识，从已存储的系统标识和系统信息之间的关联关系中，确定待测系统的系统信息。其中，系统标识用于区分不同的系统。示例性的，系统标识为：系统A。
系统的多个测试项目可以由不同用户来进行测试。用户通过账号信息登录待测系统，向服务器发送登录请求，该登录请求携带账号信息。服务器接收登录请求，获取登录待测系统的账号信息。示例性的，账号信息为用户名、身份证号、工号和系统的注册账号等。
步骤S202、从多个测试项目中确定与账号信息匹配的目标测试项目。
在本发明实施例中，不用的账号信息对应的测试权限不同，服务器内可以存储有账号信息与测试项目之间的关联关系。相应的，本步骤为：通过账号信息，从已存储的账号信息与测试项目之间的关联关系中，确定该账号信息对应的第一测试项目，从多个测试项目中确定与第一测试项目相同的目标测试项目。
步骤S203、确定与目标测试项目对应的多个测试脚本。
在本发明实施例中，测试项目内可以包括多个测试脚本。示例性的，测试项目A包括查询交易对应的测试脚本、信息维护交易对应的测试脚本、删除交易对应的测试脚本等。
可选的，在对待测系统进行测试之前，可以先通过配置管理模块对该测试系统的系统信息进行配置。示例性的，对该测试系统可运行的多个测试项目进行配置。每个测试项目内包括多个测试脚本，用户可以将该测试项目可执行的测试脚本上传至测试系统，完成对该测试项目的配置。此时。服务器可以从测试系统中获取与目标测试项目对应的多个测试脚本。
步骤S204、对于每个测试脚本，确定每个测试脚本对应的多组测试参数。
在本发明实施例中，每个交易的信息不同，对应的测试参数不同，测试脚本通过多组测试参数，完成对多个交易的处理。需要说明的是，对于每个测试脚本，服务器均能生成该测试脚本对应的多组测试参数。也即是，不用人工调整测试参数，就可以完成测试参数准备，进而提高了测试效率。
步骤S205、获取待测系统的测试场景，确定与测试场景匹配的测试方式信息，测试方式信息包括测试时长、脚本并发数和测试终止条件中的至少一项。
在本发明实施例中，测试场景包括单一负载场景、阶梯负载场景和混合负载场景等。通过多个测试场景的测试，得到在模拟正常负载、峰值负载及异常负载条件下的系统性能参数。
步骤S206、基于测试方式信息和每个测试脚本对应的多组测试参数，对目标测试项目对应的多个测试脚本进行测试，得到目标测试项目的系统性能参数。
在本发明实施例中，系统性能参数包括响应时间、每秒事务处理量TPS和资源占用率中的一个或多个。可选的，本步骤为：对于目标测试项目对应的多个测试脚本，按照测试方式信息将每个测试脚本对应的多组测试参数输入测试脚本进行测试，获取该待测系统的运行信息，得到目标测试项目的系统性能参数。
本申请提供的系统性能参数的测试方法，先确定与账号信息匹配的目标测试项目，然后生成目标测试项目对应的多个测试脚本的多组测试参数，确定与测试场景匹配的测试方式信息，最后，通过多组测试参数和测试方式信息，对目标测试项目进行测试，该测试方法能够自动生成多组测试数据，并能够根据测试场景确定测试方式信息，因此提高了系统性能参数的测试效率。
图3为本发明实施例提供的系统性能参数的测试方法的流程图二。在本发明实施例中，在图2提供的实施例的基础上，对S202中从多个测试项目中确定与账号信息匹配的目标测试项目的具体实现方法进行了详细说明。如图3所示，该方法包括：
步骤S301、确定账号信息对应的权限信息，权限信息用于表示可测试的测试项目。
可选的，服务器内可以存储有账号信息与权限信息之间的关联关系。相应的，本步骤为：通过账号信息，从已存储的账号信息与权限信息之间的关联关系中，确定该账号信息对应的权限信息。示例性的，账号信息为用户名：001。确定该001对应的权限信息为测试项目A。
步骤S302、基于权限信息，从多个测试项目中确定与账号信息匹配的目标测试项目。
示例性的，通过测试项目A，从多个测试项目中确定项目A为与账号信息匹配的目标测试项目。
在本发明实施例中，由于通过账号信息，确定与该与账号信息匹配的目标测试项目，从而确保该用户只能对有权限的测试项目进行测试，能够避免测试项目被其他用户删除或更改，因此提高了该测试方法的安全性。
图4为本发明实施例提供的系统性能参数的测试方法的流程图三。在本发明实施例中，在图2提供的实施例的基础上，对S204中对于每个测试脚本，确定每个测试脚本对应的多组测试参数的具体实现方法进行了详细说明。如图4所示，该方法包括：
步骤S401、确定每个测试脚本的预定义规则类型，预定义规则类型包括日期类型、数值类型和列表类型中的一个。
可选的，日期类型包括起始日期和终止日期。可选的，列表类型为多个数值的列表。示例性的，列表类型包括：3、4、5、6、7、8。
步骤S402、基于预定义规则类型，生成每个测试脚本对应的多组测试参数。
可选的，预定义规则类型包括一种。此时可以通过单一维度，生成每个测试脚本对应的多组测试参数。示例性的，日期类型的起始日期为1月1号，终止日期为1月31号，则生成的多组测试参数包括1月1号至1月31号，总共31组测试参数。
可选的，预定义规则类型包括多种。此时可以通过多个维度，生成每个测试脚本对应的多组测试参数。示例性的，日期类型的起始日期为1月1号，终止日期为1月31号，列表类型包括：3、4、5、6、7、8。则生成的多组测试参数包括日期维度和列表类型维度，共186组测试参数。
本发明实施例中，对于每个测试脚本，通过该每个测试脚本的预定义规则类型，生成该测试脚本对应的多组测试参数，与人工调整测试参数相比，提高了生成测试参数的效率，进而提高了该测试方法的整体测试效率。
图5为本发明实施例提供的系统性能参数的测试方法的流程图四。在本发明实施例中，在图2提供的实施例的基础上，对S204中对于每个测试脚本，确定每个测试脚本对应的多组测试参数的具体实现方法进行了详细说明。如图5所示，该方法包括：
步骤S501、确定目标测试项目对应的数据库，数据库内存储有脚本标识和多组测试参数之间的关联关系。
本发明实施例中，不同的测试项目可以对应的同一个数据库，也可以对应不同的数据库。可选的，服务器内存储有项目标识和数据库之间的关联关系。相应的，本步骤为：根据目标测试项目的项目标识，从已存储的项目标识和数据库之间的关联关系中，确定目标测试项目对应的数据库。
步骤S502、基于每个测试脚本的脚本标识，从脚本标识和多组测试参数之间的关联关系中，确定每个测试脚本对应的多组测试参数。
本发明实施例中，对于每个测试脚本，从数据库中能够直接获取该测试脚本对应的多组测试参数，与人工调整测试参数相比，进一步提高了获取测试参数的效率。
图6为本发明实施例提供的系统性能参数的测试方法的流程图五。在本发明实施例中，在图2提供的实施例的基础上，对S205中获取待测系统的测试场景，确定与测试场景匹配的测试方式信息的具体实现方法进行了详细说明。如图6所示，该方法包括：
步骤S601、确定待测系统的测试列表，测试列表内包括多个测试场景和多个测试场景的执行顺序。
可选的，按照多个测试场景的测试方式，确定多个测试场景的执行顺序。测试方式包括立即测试和计划时间测试。相应的，确定多个测试场景的执行顺序的步骤为：对多个测试场景中测试方式为计划时间测试的多个第一测试场景，按照计划时间的先后确定多个第一测试场景的执行顺序；对多个测试场景中测试方式为立即测试的多个第二测试场景，按照多个第二测试场景的添加顺序，确定多个第二测试场景的执行顺序。需要说明的是，若存在计划时间相同的多个第一测试场景，则按照多个第一测试场景的添加顺序，确定多个第一测试场景的执行顺序。
步骤S602、按照多个测试场景的执行顺序，从多个测试场景中选取待测系统当前的测试场景。
可选的，本步骤为：确定多个测试场景中未执行的多个第三测试场景，按照多个测试场景的执行顺序，确定多个第三测试场景中选取排序靠前的测试场景为待测系统当前的测试场景。
步骤S603、确定与当前的测试场景的场景类型匹配的测试方式信息，场景类型包括单一负载场景、阶梯负载场景和混合负载场景中的一个。
可选的，测试方式信息用于表示该测试场景的测试模式。
在一些实施例中，单一负载场景匹配的测试方式信息包括测试时长和脚本并发数。示例性的，测试时长为10分钟，脚本并发数为3。则对于目标测试项目对应的多个测试脚本，按照脚本并发数为3每个测试脚本对应的多组测试参数输入测试脚本进行测试，测试时长为10分钟，获取该待测系统的运行信息，得到目标测试项目的系统性能参数。
在另一些实施例中，阶梯负载场景的测试方式信息包括测试时长、脚本并发数和测试终止条件。脚本并发数包括初始脚本并发数、脚本并发数调整步长和终止脚本并发数。测试终止条件可以包括：响应时间达到预设响应时间、CPU使用率达到预设CPU使用率和TPS(Transaction Per Second，每秒事务处理量)达到预设TPS等。需要说明的是，在本申请实施例中，对预设响应时间、预设CPU使用率和预设TPS的数值不作具体限定。示例性的，在未达到终止条件情况下，将从脚本并发数开始，到达测试时长后，则根据脚本并发数调整步长，逐步增加脚本并发数，继续运行测试时长，直到达到终止脚本并发数，若在执行过程中达到测试终止条件，则测试终止。
在另一些实施例中，混合负载场景的测试方式信息包括测试时长和脚本并发数。其中，测试脚本包括多种类型。脚本并发数包括每个类型的测试脚本的并发数和每个类型的脚本的测试时长。
在本发明实施例中，每个测试场景匹配的测试方式信息不同，得到的系统性能参数也不同。通过多个测试场景的多个测试方式，能够对待测系统的系统性能参数进行全面测试，从而提高了确定的系统性能参数的准确性。
需要说明的是，在得到目标测试项目的系统性能参数之后，可以将测试项目和该测试项目的系统性能参数进行关联存储，得到测试资源数据库。若某一项目重复测试时，可以直接通过测试资源数据库确定该项目的系统性能参数。相应的，图7为本发明实施例提供的系统性能参数的测试方法的流程图六。在本发明实施例中，在图2提供的实施例的基础上，在执行步骤S203确定与目标测试项目对应的多个测试脚本之前，该方法包括：
步骤S701、基于目标测试项目的项目标识，从测试资源数据库中查询与项目标识匹配的系统性能参数，测试资源数据库中存储有项目标识与系统性能参数之间的关联关系。
步骤S702、若查询失败，才执行步骤S202确定与目标测试项目对应的多个测试脚本。
本发明实施例中，在得到目标测试项目的系统性能参数之后，可以将测试项目和该测试项目的系统性能参数进行关联存储，得到测试资源数据库，从而实现了测试资产累积。进而，在对目标测试项目进行测试之前，可以先通过测试资源数据库中查询目标测试项目的系统性能参数，通过测试资产累积确定目标测试项目的系统性能参数，从而能够进一步提高测试系统性能参数的效率。
在本发明实施例中，可以通过系统性能参数，确定该系统性能参数是否达标。其中，确定该系统性能参数是否达标的方法包括以下步骤S207和步骤S208。
步骤S207、确定目标测试项目的目标系统性能参数，目标系统性能参数包括目标响应时间、目标每秒事务处理量TPS和目标资源占用率中的一个或多个。
在本发明实施例中，可以通过实际运行系统的系统性能参数，确定目标系统性能参数。相应的，本步骤为：服务器向生产运维系统发送连接请求。生产运维系统接收连接请求，与服务器建立连接，并将实际运行系统的系统性能参数发送给服务器。服务器通过实际运行系统的系统性能参数，确定目标系统性能参数。
示例性的，系统性能参数包括目标每秒事务处理量。服务器通过实际运行系统的最大每秒事务处理量，通过以下公式一，确定目标测试项目的目标每秒事务处理量。
公式一：
其中，TPStest表示目标每秒事务处理量，TPSprod表示实际运行系统的最大每秒事务处理量，Resprod表示实际运行系统的资源配置，Restest表示待测系统的资源配置，λ表示调节因子，是常数。
步骤S208、基于系统性能参数和目标系统性能参数，确定目标测试项目的测试结果信息，测试结果信息包括达标和未达标。
可选的，本步骤为：若系统性能参数不大于目标系统性能参数，则确定目标测试项目的测试结果信息为达标，若系统性能参数大于目标系统性能参数，则确定目标测试项目的测试结果信息为未达标。
示例性的，系统性能参数包括资源占用率，目标系统性能参数为目标资源占用率。例如，资源占用率为50％，目标资源占用率为60％。此时，系统性能参数不大于目标系统性能参数，则确定目标测试项目的测试结果信息为达标。
图8为本申请实施例提供的系统性能参数的测试装置的结构示意图。如图8所示，该系统性能参数的测试装置，包括：获取模块801、第一确定模块802、第二确定模块803、第三确定模块804、第四确定模块805和测试模块806。
获取模块801，用于获取待测系统的系统信息和登录待测系统的账号信息，系统信息包括待测系统配置的多个测试项目的项目信息；
第一确定模块802，用于从多个测试项目中确定与账号信息匹配的目标测试项目；
第二确定模块803，用于确定与目标测试项目对应的多个测试脚本；
第三确定模块804，用于对于每个测试脚本，确定每个测试脚本对应的多组测试参数；
第四确定模块805，用于获取待测系统的测试场景，确定与测试场景匹配的测试方式信息，测试方式信息包括测试时长、脚本并发数和测试终止条件中的至少一项；
测试模块806，用于基于测试方式信息和每个测试脚本对应的多组测试参数，对目标测试项目对应的多个测试脚本进行测试，得到目标测试项目的系统性能参数。
在一种可能的设计中，第一确定模块802从多个测试项目中确定与账号信息匹配的目标测试项目，具体包括：确定账号信息对应的权限信息，权限信息用于表示可测试的测试项目；基于权限信息，从多个测试项目中确定与账号信息匹配的目标测试项目。
在一种可能的设计中，第三确定模块804对于每个测试脚本，确定每个测试脚本对应的多组测试参数，具体包括：确定每个测试脚本的预定义规则类型，预定义规则类型包括日期类型、数值类型和列表类型中的一个；基于预定义规则类型，生成每个测试脚本对应的多组测试参数。
在一种可能的设计中，第三确定模块804对于每个测试脚本，确定每个测试脚本对应的多组测试参数，具体包括：确定目标测试项目对应的数据库，数据库内存储有脚本标识和多组测试参数之间的关联关系；基于每个测试脚本的脚本标识，从脚本标识和多组测试参数之间的关联关系中，确定每个测试脚本对应的多组测试参数。
在一种可能的设计中，第四确定模块805获取待测系统的测试场景，确定与测试场景匹配的测试方式信息，具体包括：确定待测系统的测试列表，测试列表内包括多个测试场景和多个测试场景的执行顺序；按照多个测试场景的执行顺序，从多个测试场景中选取待测系统当前的测试场景；确定与当前的测试场景的场景类型匹配的测试方式信息，场景类型包括单一负载场景、阶梯负载场景和混合负载场景中的一个。
在一种可能的设计中，装置还包括：查询模块。查询模块，用于基于目标测试项目的项目标识，从测试资源数据库中查询与项目标识匹配的系统性能参数，测试资源数据库中存储有项目标识与系统性能参数之间的关联关系；若查询失败，则确定与目标测试项目对应的多个测试脚本。
在一种可能的设计中，系统性能参数包括响应时间、每秒事务处理量TPS和资源占用率中的一个或多个；装置还包括：第五确定模块。第五确定模块，用于确定目标测试项目的目标系统性能参数，目标系统性能参数包括目标响应时间、目标每秒事务处理量TPS和目标资源占用率中的一个或多个；基于系统性能参数和目标系统性能参数，确定目标测试项目的测试结果信息，测试结果信息包括达标和未达标。
本申请实施例提供的系统性能参数的测试装置，可用于执行上述实施例中系统性能参数的测试方法的技术方案，其实现原理和技术效果类似，在此不再赘述。
需要说明的是，应理解以上装置的各个模块的划分仅仅是一种逻辑功能的划分，实际实现时可以全部或部分集成到一个物理实体上，也可以物理上分开。且这些模块可以全部以软件通过处理元件调用的形式实现；也可以全部以硬件的形式实现；还可以部分模块通过处理元件调用软件的形式实现，部分模块通过硬件的形式实现。例如，获取模块801可以为单独设立的处理元件，也可以集成在上述装置的某一个芯片中实现，此外，也可以以程序代码的形式存储于上述装置的存储器中，由上述装置的某一个处理元件调用并执行以上获取模块801的功能。其它模块的实现与之类似。此外这些模块全部或部分可以集成在一起，也可以独立实现。这里的处理元件可以是一种集成电路，具有信号的处理能力。在实现过程中，上述方法的各步骤或以上各个模块可以通过处理器元件中的硬件的集成逻辑电路或者软件形式的指令完成。
图9为本申请实施例提供的电子设备的结构示意图。如图9所示，该电子设备可以包括：收发器901、处理器902、存储器903。
处理器902执行存储器存储的计算机执行指令，使得处理器902执行上述实施例中的方案。处理器902可以是通用处理器，包括中央处理器CPU、网络处理器(networkprocessor，NP)等；还可以是数字信号处理器DSP、专用集成电路ASIC、现场可编程门阵列FPGA或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。
存储器903通过系统总线与处理器902连接并完成相互间的通信，存储器903用于存储计算机程序指令。
收发器901可以用于获取待运行任务和待运行任务的配置信息。
系统总线可以是外设部件互连标准(peripheral component interconnect，PCI)总线或扩展工业标准结构(extended industry standard architecture，EISA)总线等。系统总线可以分为地址总线、数据总线、控制总线等。为便于表示，图中仅用一条粗线表示，但并不表示仅有一根总线或一种类型的总线。收发器用于实现数据库访问装置与其他计算机(例如客户端、读写库和只读库)之间的通信。存储器可能包含随机存取存储器(randomaccess memory，RAM)，也可能还包括非易失性存储器(non-volatile memory)。
本申请实施例提供的电子设备，可以是上述实施例的服务器。
本申请实施例还提供一种运行指令的芯片，该芯片用于执行上述实施例中系统性能参数的测试方法的技术方案。
本申请实施例还提供一种计算机可读存储介质，该计算机可读存储介质中存储有计算机指令，当该计算机指令在计算机上运行时，使得计算机执行上述实施例系统性能参数的测试方法的技术方案。
本申请实施例还提供一种计算机程序产品，该计算机程序产品包括计算机程序，其存储在计算机可读存储介质中，至少一个处理器可以从计算机可读存储介质读取计算机程序，至少一个处理器执行计算机程序时可实现上述实施例中系统性能参数的测试方法的技术方案。
本领域技术人员在考虑说明书及实践这里公开的发明后，将容易想到本申请的其它实施方案。本申请旨在涵盖本申请的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本申请的一般性原理并包括本申请未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的，本申请的真正范围和精神由下面的权利要求书指出。
应当理解的是，本申请并不局限于上面已经描述并在附图中示出的精确结构，并且可以在不脱离其范围进行各种修改和改变。本申请的范围仅由所附的权利要求书来限制。
Claims (10)
1.一种系统性能参数的测试方法，其特征在于，包括：
获取待测系统的系统信息和登录所述待测系统的账号信息，所述系统信息包括所述待测系统配置的多个测试项目的项目信息；
从所述多个测试项目中确定与所述账号信息匹配的目标测试项目；
确定与所述目标测试项目对应的多个测试脚本；
对于每个测试脚本，确定所述每个测试脚本对应的多组测试参数；
获取所述待测系统的测试场景，确定与所述测试场景匹配的测试方式信息，所述测试方式信息包括测试时长、脚本并发数和测试终止条件中的至少一项；
基于所述测试方式信息和所述每个测试脚本对应的多组测试参数，对所述目标测试项目对应的多个测试脚本进行测试，得到所述目标测试项目的系统性能参数。
2.根据权利要求1所述的方法，其特征在于，所述从所述多个测试项目中确定与所述账号信息匹配的目标测试项目，包括：
确定所述账号信息对应的权限信息，所述权限信息用于表示可测试的测试项目；
基于所述权限信息，从所述多个测试项目中确定与所述账号信息匹配的目标测试项目。
3.根据权利要求1所述的方法，其特征在于，所述对于每个测试脚本，确定所述每个测试脚本对应的多组测试参数，包括：
确定所述每个测试脚本的预定义规则类型，所述预定义规则类型包括日期类型、数值类型和列表类型中的一个；
基于所述预定义规则类型，生成所述每个测试脚本对应的多组测试参数。
4.根据权利要求1所述的方法，其特征在于，所述对于每个测试脚本，确定所述每个测试脚本对应的多组测试参数，包括：
确定所述目标测试项目对应的数据库，所述数据库内存储有脚本标识和多组测试参数之间的关联关系；
基于所述每个测试脚本的脚本标识，从所述脚本标识和多组测试参数之间的关联关系中，确定所述每个测试脚本对应的多组测试参数。
5.根据权利要求1所述的方法，其特征在于，所述获取所述待测系统的测试场景，确定与所述测试场景匹配的测试方式信息，包括：
确定所述待测系统的测试列表，所述测试列表内包括多个测试场景和所述多个测试场景的执行顺序；
按照所述多个测试场景的执行顺序，从所述多个测试场景中选取所述待测系统当前的测试场景；
确定与所述当前的测试场景的场景类型匹配的测试方式信息，所述场景类型包括单一负载场景、阶梯负载场景和混合负载场景中的一个。
6.根据权利要求1所述的方法，其特征在于，所述确定与所述目标测试项目对应的多个测试脚本之前，所述方法还包括：
基于所述目标测试项目的项目标识，从测试资源数据库中查询与所述项目标识匹配的系统性能参数，所述测试资源数据库中存储有项目标识与系统性能参数之间的关联关系；
若查询失败，则执行所述确定与所述目标测试项目对应的多个测试脚本的步骤。
7.根据权利要求1-6任一项所述的方法，其特征在于，所述系统性能参数包括响应时间、每秒事务处理量TPS和资源占用率中的一个或多个；所述方法还包括：
确定所述目标测试项目的目标系统性能参数，所述目标系统性能参数包括目标响应时间、目标每秒事务处理量TPS和目标资源占用率中的一个或多个；
基于所述系统性能参数和所述目标系统性能参数，确定所述目标测试项目的测试结果信息，所述测试结果信息包括达标和未达标。
8.一种系统性能参数的测试装置，其特征在于，包括：
获取模块，用于获取待测系统的系统信息和登录所述待测系统的账号信息，所述系统信息包括所述待测系统配置的多个测试项目的项目信息；
第一确定模块，用于从所述多个测试项目中确定与所述账号信息匹配的目标测试项目；
第二确定模块，用于确定与所述目标测试项目对应的多个测试脚本；
第三确定模块，用于对于每个测试脚本，确定所述每个测试脚本对应的多组测试参数；
第四确定模块，用于获取所述待测系统的测试场景，确定与所述测试场景匹配的测试方式信息，所述测试方式信息包括测试时长、脚本并发数和测试终止条件中的至少一项；
测试模块，用于基于所述测试方式信息和所述每个测试脚本对应的多组测试参数，对所述目标测试项目对应的多个测试脚本进行测试，得到所述目标测试项目的系统性能参数。
9.一种电子设备，其特征在于，包括：处理器，以及与所述处理器通信连接的存储器；
所述存储器存储计算机执行指令；
所述处理器执行所述存储器存储的计算机执行指令，以实现如权利要求1-7中任一项所述的方法。
10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质中存储有计算机执行指令，所述计算机执行指令被处理器执行时用于实现如权利要求1-7中任一项所述的方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202211325141.1A CN115599652A (zh) | 2022-10-27 | 2022-10-27 | 系统性能参数的测试方法、装置、设备及存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202211325141.1A CN115599652A (zh) | 2022-10-27 | 2022-10-27 | 系统性能参数的测试方法、装置、设备及存储介质 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN115599652A true CN115599652A (zh) | 2023-01-13 |
Family
ID=84850039
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202211325141.1A Pending CN115599652A (zh) | 2022-10-27 | 2022-10-27 | 系统性能参数的测试方法、装置、设备及存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN115599652A (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN117192343A (zh) * | 2023-11-08 | 2023-12-08 | 珠海芯业测控有限公司 | 基于辅助系统的芯片测试方法、电子设备及介质 |
-
2022
- 2022-10-27 CN CN202211325141.1A patent/CN115599652A/zh active Pending
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN117192343A (zh) * | 2023-11-08 | 2023-12-08 | 珠海芯业测控有限公司 | 基于辅助系统的芯片测试方法、电子设备及介质 |
| CN117192343B (zh) * | 2023-11-08 | 2024-01-23 | 珠海芯业测控有限公司 | 基于辅助系统的芯片测试方法、电子设备及介质 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN111177005B (zh) | 业务应用的测试方法、装置、服务器和存储介质 | |
| CN110362473B (zh) | 测试环境的优化方法及装置、存储介质、终端 | |
| CN110502442B (zh) | 动态参数校验方法、装置、设备和存储介质 | |
| CN110569159A (zh) | 挡板生成方法、装置、设备及计算机存储介质 | |
| CN115599652A (zh) | 系统性能参数的测试方法、装置、设备及存储介质 | |
| CN111367782B (zh) | 回归测试数据自动生成的方法及装置 | |
| CN109491702B (zh) | 一种优化方案确定方法、装置、终端设备和存储介质 | |
| CN108280024B (zh) | 流量分配策略测试方法、装置及电子设备 | |
| CN112948262A (zh) | 一种系统测试方法、装置、计算机设备和存储介质 | |
| CN113132522A (zh) | 测试方法、装置、服务器及介质 | |
| CN111553668A (zh) | 基于大数据的提现方法、装置、电子设备和介质 | |
| CN111026669A (zh) | 测试日志管理方法、测试日志管理装置及存储介质 | |
| CN114896337A (zh) | 一种数据上链方法、系统、设备和计算机可读存储介质 | |
| US20170124611A1 (en) | Methods for Monitoring and Valuating Transactions for Document Processes | |
| CN114371866A (zh) | 业务系统的版本重构测试方法、装置和设备 | |
| CN113259449A (zh) | 分布式存储方法、装置、设备及存储介质 | |
| CN113850923A (zh) | 考勤统计方法、装置、设备及计算机可读存储介质 | |
| CN111104439B (zh) | 存储数据的比对方法、存储数据的比对装置及存储介质 | |
| CN113742721B (zh) | 漏洞扫描的处理方法、装置、系统、电子装置和存储介质 | |
| CN116561018B (zh) | 一种业务系统造数方法、装置、终端设备及存储介质 | |
| CN115658623A (zh) | 批量数据导入方法及装置、存储介质、计算机设备 | |
| CN110032569B (zh) | 变更数据检查方法、装置、设备及系统 | |
| CN115422073A (zh) | mock服务处理方法、装置、设备及存储介质 | |
| CN117539747A (zh) | 测试方法、装置、电子设备和存储介质 | |
| CN116662162A (zh) | 数据处理方法、装置、设备及存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |