CN116974926A - 测试记录生成方法、系统、终端设备及计算机存储介质 - Google Patents

测试记录生成方法、系统、终端设备及计算机存储介质 Download PDF

Info

Publication number
CN116974926A
CN116974926A CN202310949777.1A CN202310949777A CN116974926A CN 116974926 A CN116974926 A CN 116974926A CN 202310949777 A CN202310949777 A CN 202310949777A CN 116974926 A CN116974926 A CN 116974926A
Authority
CN
China
Prior art keywords
performance index
performance
weight
test record
test data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202310949777.1A
Other languages
English (en)
Inventor
罗伟涌
丛德铭
周鑫
许治华
陈运权
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
China Merchants Bank Co Ltd
Original Assignee
China Merchants Bank Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by China Merchants Bank Co Ltd filed Critical China Merchants Bank Co Ltd
Priority to CN202310949777.1A priority Critical patent/CN116974926A/zh
Publication of CN116974926A publication Critical patent/CN116974926A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/36—Preventing errors by testing or debugging software
    • G06F11/3668—Software testing
    • G06F11/3672—Test management
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/30—Monitoring
    • G06F11/34—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
    • G06F11/3466—Performance evaluation by tracing or monitoring
    • G06F11/3476—Data logging

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Quality & Reliability (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Debugging And Monitoring (AREA)

Abstract

本发明提出一种测试记录生成方法、系统、终端设备及计算机存储介质，应用于数据处理技术领域，测试记录生成方法包括：获取各个性能指标类型，并获取各所述性能指标类型各自对应的权重；获取性能测试数据，并根据所述性能测试数据对各所述权重分别进行更新得到各个整体影响权重，所述性能测试数据包括各所述性能指标类型对应的运行值；对各所述整体影响权重进行排序得到各所述性能指标类型的排序结果，并根据所述排序结果和所述性能测试数据得到目标测试记录。本发明技术方案能够自动对性能测试数据进行分析，并得到格式化的目标测试记录，解决了人工分析性能测试数据耗时较长的技术问题。

Description

测试记录生成方法、系统、终端设备及计算机存储介质
技术领域
本发明涉及数据处理技术领域，尤其涉及一种测试记录生成方法、系统、终端设备及计算机存储介质。
背景技术
随着计算机网络和软件技术的发展，特别是近些年移动互联网设备的接入，对软件系统的性能提出了更高的要求。因此，在软件研发的全生命周期中，软件性能的分析和优化已经成为研发流程中非常重要的一环。
现如今，在通过系统监控工具得到软件性能测试数据后，还需要专业的性能分析人员对软件性能测试数据进行分析和整理，而对于性能分析人员来说，除了要从可视化的图表中分析性能表现外，还需要将软件性能测试数据整理成测试记录，便于形成测试结论，传统的测试数据分析流程如图1所示。由于性能样本数据庞大，故而性能分析人员在整理测试记录时，需要投入大量的时间进行数据分析和数据整理工作，严重影响了工作效率。
发明内容
本发明提出一种测试记录生成方法、系统、终端设备及计算机存储介质，旨在解决人工分析性能测试数据耗时较长的技术问题。
为解决上述问题，本发明提出一种测试记录生成方法，所述测试记录生成方法包括：
获取各个性能指标类型，并获取各所述性能指标类型各自对应的权重；
获取性能测试数据，并根据所述性能测试数据对各所述权重分别进行更新得到各个整体影响权重，所述性能测试数据包括各所述性能指标类型对应的运行值；
对各所述整体影响权重进行排序得到各所述性能指标类型的排序结果，并根据所述排序结果和所述性能测试数据得到目标测试记录。
可选地，所述性能测试数据还包括各个原始测试记录，所述方法还包括：
获取阈值判断类型和各所述性能指标类型各自对应的异常阈值；
所述根据所述性能测试数据对各所述权重分别进行更新得到各个整体影响权重的步骤，包括：
根据各所述原始测试记录中各所述性能指标类型各自对应的运行值和所述阈值判断类型分别确定各所述性能指标类型各自对应的中间值；
根据各所述中间值、各所述权重以及各所述异常阈值更新各所述性能指标类型各自对应的整体影响权重。
可选地，所述根据各所述中间值、各所述权重以及各所述异常阈值更新各所述性能指标类型各自对应的整体影响权重的步骤，包括：
根据所述阈值判断类型获取权重更新公式，并将各所述中间值、各所述权重，以及各所述异常阈值输入至所述权重更新公式得到各所述性能指标类型各自对应的整体影响权重。
在所述对各所述整体影响权重进行排序得到各所述性能指标类型的排序结果的步骤之前，所述方法还包括：
根据预设的关联规则将所述性能测试数据中的各所述性能指标类型与待分析软件进行关联；
所述对各所述整体影响权重进行排序得到各所述性能指标类型的排序结果的步骤，包括：
在各所述性能指标类型与待分析软件进行关联后，对各所述性能指标类型各自对应的整体影响权重进行排序得到各所述性能指标类型的排序结果。
可选地，所述对各所述性能指标类型各自对应的整体影响权重进行排序得到各所述性能指标类型的排序结果的步骤，包括：
获取用户设定的指标记录偏好；
对各所述性能指标类型各自对应的整体影响权重进行排序得到整体权重序列，并根据所述整体权重序列对各所述性能指标类型进行排序得到中间序列；
根据所述指标记录偏好对所述中间序列中的各所述性能指标类型进行排序得到排序结果。
可选地，在所述根据所述排序结果和所述性能测试数据得到目标测试记录的步骤之后，所述测试记录生成方法还包括：
在所述目标测试记录中，标记超过预设的运行阈值的运行值。
可选地，在所述对各所述整体影响权重进行排序得到各所述性能指标类型的排序结果的步骤之前，所述测试记录生成方法还包括：
在各所述性能指标类型中，确定所述整体影响权重低于预设的权重阈值的无效性能指标类型，并对所述无效性能指标类型进行删除处理；
所述对各所述整体影响权重进行排序得到各所述性能指标类型的排序结果的步骤，包括：
根据各所述整体影响权重对所述性能测试数据中进行所述删除处理后的各所述性能指标类型进行排序得到排序结果。
此外，为解决上述问题，本发明提出一种测试记录生成系统，所述测试记录生成系统包括：
第一获取模块，用于获取各个性能指标类型，并获取各所述性能指标类型各自对应的权重；
权重更新模块，用于获取性能测试数据，并根据所述性能测试数据对各所述权重分别进行更新得到各个整体影响权重，所述性能测试数据包括各所述性能指标类型对应的运行值；
测试记录生成模块，用于对各所述整体影响权重进行排序得到各所述性能指标类型的排序结果，并根据所述排序结果和所述性能测试数据得到目标测试记录。
此外，为解决上述问题，本发明还提出一种终端设备，所述终端设备包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的测试记录生成程序，所述测试记录生成程序被所述处理器执行时实现如上所述的测试记录生成方法的步骤。
此外，为解决上述问题，本发明还提出一种存储介质，所述存储介质上存储有测试记录生成程序，所述测试记录生成程序被处理器执行时实现如上所述的测试记录生成方法的步骤。
本发明提出一种测试记录生成方法、系统、终端设备及计算机存储介质，该测试记录生成方法包括：获取各个性能指标类型，并获取各所述性能指标类型各自对应的权重；获取性能测试数据，并根据所述性能测试数据对各所述权重分别进行更新得到各个整体影响权重，所述性能测试数据包括各所述性能指标类型对应的运行值；对各所述整体影响权重进行排序得到各所述性能指标类型的排序结果，并根据所述排序结果和所述性能测试数据得到目标测试记录。
测试记录生成系统首先获取技术人员指定的各个性能指标类型，并获取各个性能指标类型各自对应的权重，然后再获取需要分析的性能测试数据，再根据性能测试数据中的运行值分别对各个权重进行更新，并将更新后的权重作为整体影响权重，其中，性能测试数据包括各个性能指标类型对应的运行值，然后再根据各个整体影响权重对性能测试数据中的各个性能指标类型进行排序得到排序结果，例如，将整体影响权重高的性能指标类型放在较前的位置，而影响权重低的性能指标类型放在靠后的位置，并根据排序结果和性能测试数据得到目标测试记录。
相比传统的人工分析、人工整理性能测试数据的方式来说，本发明通过对性能指标类型设置初始权重，并根据性能测试数据自动更新初始权重并得到整体影响权重的方式，使得测试数据的分析更加准确，此外，本发明还通过整体影响权重对各个性能指标类型进行排序的方式，能够提高技术人员评估测试数据的便利性。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本申请的实施例，并与说明书一起用于解释本申请的原理。
为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，对于本领域普通技术人员而言，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
图1为传统的测试数据分析流程图；
图2是本发明实施例方案涉及的终端设备硬件运行环境的设备结构示意图；
图3为本发明测试记录生成方法第一实施例的流程示意图；
图4为本发明测试记录生成方法一实施例的数据整理流程图；
图5为本发明测试记录生成方法一实施例的另一实施流程示意图；
图6为本发明测试记录生成方法一实施例的测试数据整理前后比对图；
图7为本发明测试记录生成系统一实施例的模块示意图。
具体实施方式
应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明的一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
需要说明，本发明实施例中所有方向性指示(诸如上、下、左、右、前、后……)仅用于解释在某一特定姿态(如附图所示)下各部件之间的相对位置关系、运动情况等，如果该特定姿态发生改变时，则该方向性指示也相应地随之改变。
在本发明中，除非另有明确的规定和限定，术语“连接”、“固定”等应做广义理解，例如，“固定”可以是固定连接，也可以是可拆卸连接，或成一体；可以是机械连接，也可以是电连接；可以是直接相连，也可以通过中间媒介间接相连，可以是两个元件内部的连通或两个元件的相互作用关系，除非另有明确的限定。对于本领域的普通技术人员而言，可以根据具体情况理解上述术语在本发明中的具体含义。
另外，在本发明中如涉及“第一”、“第二”等的描述仅用于描述目的，而不能理解为指示或暗示其相对重要性或者隐含指明所指示的技术特征的数量。由此，限定有“第一”、“第二”的特征可以明示或者隐含地包括至少一个该特征。另外，各个实施例之间的技术方案可以相互结合，但是必须是以本领域普通技术人员能够实现为基础，当技术方案的结合出现相互矛盾或无法实现时应当认为这种技术方案的结合不存在，也不在本发明要求的保护范围之内。
如图2所示，图2是本发明实施例方案涉及的终端设备硬件运行环境的设备结构示意图。
需要说明的是，本发明测试记录生成方法的执行主体为测试记录生成系统，而本发明实施例涉及的终端设备可以是测试记录生成系统执行本发明测试记录生成方法时的数据存储控制终端、PC或者便携计算机等终端。
如图2所示，在终端设备的硬件运行环境中，该终端设备可以包括：处理器1001，例如CPU，网络接口1004，用户接口1003，存储器1005，通信总线1002。其中，通信总线1002用于实现这些组件之间的连接通信。用户接口1003可以包括显示屏(Display)、输入单元比如键盘(Keyboard)，可选用户接口1003还可以包括标准的有线接口、无线接口。网络接口1004可选的可以包括标准的有线接口、无线接口(如WI-FI接口)。存储器1005可以是高速RAM存储器，也可以是稳定的存储器(non-volatile memory)，例如磁盘存储器。存储器1005可选的还可以是独立于前述处理器1001的存储装置。
本领域技术人员可以理解，图2中示出的终端设备结构并不构成对终端设备的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。
如图2所示，作为一种计算机存储介质的存储器1005中可以包括操作系统、网络通信模块、用户接口模块以及测试记录生成程序。
在图2所示的设备中，网络接口1004主要用于连接后台服务器，与后台服务器进行数据通信；用户接口1003主要用于连接客户端(用户端)，与客户端进行数据通信；而处理器1001可以用于调用存储器1005中存储的测试记录生成程序，并执行以下操作：
获取各个性能指标类型，并获取各所述性能指标类型各自对应的权重；
获取性能测试数据，并根据所述性能测试数据对各所述权重分别进行更新得到各个整体影响权重，所述性能测试数据包括各所述性能指标类型对应的运行值；
对各所述整体影响权重进行排序得到各所述性能指标类型的排序结果，并根据所述排序结果和所述性能测试数据得到目标测试记录。
可选地，所述性能测试数据还包括各个原始测试记录，处理器1001可以用于调用存储器1005中存储的测试记录生成程序，并执行以下操作：
获取阈值判断类型和各所述性能指标类型各自对应的异常阈值；
所述根据所述性能测试数据对各所述权重分别进行更新得到各个整体影响权重的步骤，包括：
根据各所述原始测试记录中各所述性能指标类型各自对应的运行值和所述阈值判断类型分别确定各所述性能指标类型各自对应的中间值；
根据各所述中间值、各所述权重以及各所述异常阈值更新各所述性能指标类型各自对应的整体影响权重。
可选地，处理器1001可以用于调用存储器1005中存储的测试记录生成程序，并执行以下操作：
根据所述阈值判断类型获取权重更新公式，并将各所述中间值、各所述权重，以及各所述异常阈值输入至所述权重更新公式得到各所述性能指标类型各自对应的整体影响权重。
可选地，处理器1001可以用于调用存储器1005中存储的测试记录生成程序，并执行以下操作：
根据预设的关联规则将所述性能测试数据中的各所述性能指标类型与待分析软件进行关联；
所述对各所述整体影响权重进行排序得到各所述性能指标类型的排序结果的步骤，包括：
在各所述性能指标类型与待分析软件进行关联后，对各所述性能指标类型各自对应的整体影响权重进行排序得到各所述性能指标类型的排序结果。
可选地，处理器1001可以用于调用存储器1005中存储的测试记录生成程序，并执行以下操作：
获取用户设定的指标记录偏好；
对各所述性能指标类型各自对应的整体影响权重进行排序得到整体权重序列，并根据所述整体权重序列对各所述性能指标类型进行排序得到中间序列；
根据所述指标记录偏好对所述中间序列中的各所述性能指标类型进行排序得到排序结果。
可选地，处理器1001可以用于调用存储器1005中存储的测试记录生成程序，并执行以下操作：
在所述目标测试记录中，标记超过预设的运行阈值的运行值。
可选地，处理器1001可以用于调用存储器1005中存储的测试记录生成程序，并执行以下操作：
在各所述性能指标类型中，确定所述整体影响权重低于预设的权重阈值的无效性能指标类型，并对所述无效性能指标类型进行删除处理；
所述对各所述整体影响权重进行排序得到各所述性能指标类型的排序结果的步骤，包括：
根据各所述整体影响权重对所述性能测试数据中进行所述删除处理后的各所述性能指标类型进行排序得到排序结果。
基于上述的硬件结构，提出本发明测试记录生成方法各个实施例的整体构思。
在本发明实施例中，随着计算机网络和软件技术的发展，特别是近些年移动互联网设备的接入，对软件系统的性能提出了更高的要求。因此，在软件研发的全生命周期中，软件性能的分析和优化已经成为研发流程中非常重要的一环。
现如今，在通过系统监控工具得到软件性能测试数据后，还需要专业的性能分析人员对软件性能测试数据进行分析和整理，而对于性能分析人员来说，除了要从可视化的图表中分析性能表现外，还需要将软件性能测试数据整理成测试记录，便于形成测试结论，传统的测试数据分析流程如图1所示。由于性能样本数据庞大，故而性能分析人员在整理测试记录时，需要投入大量的时间进行数据分析和数据整理工作，严重影响了工作效率。
为解决上述问题，本发明实施例提出一种测试记录生成方法、系统、终端设备及计算机存储介质，该测试记录生成方法包括：获取各个性能指标类型，并获取各所述性能指标类型各自对应的权重；获取性能测试数据，并根据所述性能测试数据对各所述权重分别进行更新得到各个整体影响权重，所述性能测试数据包括各所述性能指标类型对应的运行值；对各所述整体影响权重进行排序得到各所述性能指标类型的排序结果，并根据所述排序结果和所述性能测试数据得到目标测试记录。
测试记录生成系统首先获取技术人员指定的各个性能指标类型，并获取各个性能指标类型各自对应的权重，然后再获取需要分析的性能测试数据，再根据性能测试数据中的运行值分别对各个权重进行更新，并将更新后的权重作为整体影响权重，其中，性能测试数据包括各个性能指标类型对应的运行值，然后再根据各个整体影响权重对性能测试数据中的各个性能指标类型进行排序得到排序结果，例如，将整体影响权重高的性能指标类型放在较前的位置，而影响权重低的性能指标类型放在靠后的位置，并根据排序结果和性能测试数据得到目标测试记录。
相比传统的人工分析、人工整理性能测试数据的方式来说，本发明通过对性能指标类型设置初始权重，并根据性能测试数据自动更新初始权重并得到整体影响权重的方式，使得测试数据的分析更加准确，此外，本发明还通过整体影响权重对各个性能指标类型进行排序的方式，能够提高技术人员评估测试数据的便利性。
基于上述本发明测试记录生成方法的整体构思，提出本发明测试记录生成方法的各个实施例。
请参照图3，图3为本发明测试记录生成方法第一实施例的流程示意图。需要说明的是，虽然在流程图中示出了逻辑顺序，但是在某些情况下，当然可以以不同于此处的顺序执行本发明测试记录生成方法的各个步骤。
在本实施例中，本发明测试记录生成方法包括：
步骤S10：获取各个性能指标类型，并获取各所述性能指标类型各自对应的权重；
在本实施例中，在对性能测试数据进行初次分析整理前，技术人员需要在测试记录生成系统中设置各个性能指标类型，以及，各个性能指标类型各自对应的权重。然后测试记录生成系统可以获取各个性能指标类型以及各个权重，并且在后续对其他性能测试数据进行分析时，可以继承历史分析产生的权重，也可以重新设置权重。
示例性地，假设本次分析为初次分析，并且技术人员设定的性能指标类型为CPU利用率、内存利用率、网络连接数、磁盘利用率，而技术人员设置的权重依次为：0.3,0.2,0.1,0.4.则测试记录生成系统将得到CPU利用率权重0.3，内存利用率0.2，网络连接数0.1以及磁盘利用率0.4的数据。在后续分析中，可以继承历史分析产生的权重，例如，CPU利用率权重仍为0.3，还可以添加新的性能指标类型以及对应的权重。
步骤S20:获取性能测试数据，并根据所述性能测试数据对各所述权重分别进行更新得到各个整体影响权重，所述性能测试数据包括各所述性能指标类型对应的运行值；
在本实施例中，测试人员开启多轮性能测试，而测试记录生成系统可以利用监控工具获取性能测试数据，并根据性能测试数据中，各个指标各自对应的运行值更新各自对应的权重以得到整体影响权重，其中，性能测试数据包括各个性能指标类型，各个性能指标类型各自对应的运行值。
示例性地，假设测试人员开启3轮性能测试，相应的，测试记录生成系统可以利用监控工具获取性能测试产生的3次测试记录，假设3次测试记录分别为记录1，记录2，记录3，并且记录1-3均包括性能指标类型“CPU利用率”以及对应的运行值(假设为20％，30％和40％)，则测试记录生成系统根据运行值20％、30％以及40％更新“CPU利用率”这一性能指标类型的权重，并将更新后的权重作为“CPU利用率”这一性能指标类型的整体影响权重。
步骤S30：对各所述整体影响权重进行排序得到各所述性能指标类型的排序结果，并根据所述排序结果和所述性能测试数据得到目标测试记录。
在本实施例中，在根据性能测试数据确定各个性能指标类型的整体影响权重后，测试记录生成系统将根据各个整体影响权重对各个性能指标类型进行排序得到排序结果，然后将性能测试数据根据排序结果进行整理得到目标测试记录。
示例性地，假设技术人员设定的性能指标类型为CPU利用率、内存利用率、网络连接数、磁盘利用率，而经过权重更新后，CPU利用率的整体影响权重为0.2、内存利用率的整体影响权重为0.3、网络连接数的整体影响权重为0.2、磁盘利用率的整体影响权重为0.3，则测试记录生成系统可以根据整体影响权重大小对上述4个性能指标类型进行排序得到排序结果，例如，排序结果为：内存利用率、磁盘利用率、CPU利用率和网络连接数，然后再将性能测试数据中存储的内存利用率数值、磁盘利用率数值、CPU利用率数值和网络连接数数值与排序结果进行关联，以得到目标测试记录。
在本实施例中，本发明通过对性能指标类型设置初始权重，并根据性能测试数据自动更新初始权重并得到整体影响权重的方式，使得测试数据的分析更加准确，此外，本发明还通过整体影响权重对各个性能指标类型进行排序的方式，能够提高技术人员评估测试数据的便利性。
进一步地，基于上述本发明测试记录生成方法的第一实施例，提出本发明测试记录生成方法的第二实施例。
在一种可行的实施例中，所述性能测试数据还包括各个原始测试记录，所述方法还包括：
步骤S40：获取阈值判断类型和各所述性能指标类型各自对应的异常阈值；
需要说明的是，异常阈值为技术人员设定的性能阈值，该异常阈值可以包括：过高阈值，过低阈值和波动阈值，其中，波动阈值为过高阈值和过低阈值的差值。而阈值判断类型包括：平均值，最大值，最小值，边界值和波动幅度值，其中，边界值为最大值和最小值中的一种，而波动幅度值为最大值和最小值的差值，该阈值判断类型指的是软件性能测试中数据和阈值的比较类型，例如，阈值判断类型为平均值，则是将软件性能测试数据中单个性能指标类型的平均值与过高阈值、过低阈值或者波动阈值进行比较。
在本实施例中，为提高性能测试数据分析的全面性，测试记录生成系统还将获取技术人员设定的阈值判断类型和各个性能指标类型对应的异常阈值，以便后续更新各个性能指标类型的权重。
示例性地，假设技术人员设定的CPU利用率这一性能指标类型的异常阈值中，过高阈值为90％，过低阈值为20％，则波动阈值为70％，然后再获取CPU利用率这一性能指标类型的阈值判断类型，假设阈值判断类型为平均值，则测试记录生成系统将根据性能测试数据计算CPU利用率这一性能指标类型的平均值，并将平均值与过高阈值、过低阈值进行比较，从而根据比较结果更新CPU利用率的权重。
基于此，上述步骤S20：根据所述性能测试数据对各所述权重分别进行更新得到各个整体影响权重，包括：
步骤S201：根据各所述原始测试记录中各所述性能指标类型各自对应的运行值和所述阈值判断类型分别确定各所述性能指标类型各自对应的中间值；
需要说明的是，原始测试记录指的是每轮软件测试得到的测试数据，而中间值包括：平均值，最大值和最小值。
在本实施例中，测试记录生成系统将得到多次测试产生的多个测试数据(每次测试产生一个测试数据)，然后根据每个测试数据中各个性能指标类型各自对应的运行值以及阈值判断类型确定各个性能指标类型对应的平均值和/或最大值和/或最小值。
示例性地，假设测试人员启动3次测试，并且3次测试得到的测试数据依次为：CPU利用率：30％，网络连接数4，CPU利用率：40％，网络连接数3，CPU利用率：50％，网络连接数5，测试记录生成系统将根据CPU利用率的各个运行值(30％，40％和50％)确定CPU利用率这一性能指标类型的中间值。例如，在阈值判断类型为平均值时，中间值为平均值40％，在阈值判断类型为最大值时，中间值为50％，在阈值判断类型为最小值时，阈值判断类型为30％。测试记录生成系统在计算网络连接数这一性能指标类型的中间值的步骤与上述计算CPU利用率中间值的步骤相同，此处不再赘述。
步骤S202：根据各所述中间值、各所述权重以及各所述异常阈值更新各所述性能指标类型各自对应的整体影响权重。
在本实施例中，测试记录生成系统将对各所述中间值和各异常阈值进行比较，即，计算中间值与异常阈值的差值，然后根据该性能指标类型的初始权重(技术人员指定的权重)和差值重新计算该性能指标类型的权重，并将得到的权重记为该性能指标类型的整体影响权重。
示例性地，在阈值判断类型为平均值，且需更新“CPU利用率”这一性能指标类型的权重时，测试记录生成系统将计算平均值与过高阈值的差值，以及平均值与过低阈值的差值，并根据技术人员指定的CPU利用率初始权重和上述两个差值更新CPU利用率这一性能指标类型的权重，即，得到整体影响权重。
可选地，在一种可行的实施例中，上述步骤S202：根据各所述中间值、各所述权重以及各所述异常阈值更新各所述性能指标类型各自对应的整体影响权重，包括：
步骤S2021：根据所述阈值判断类型获取权重更新公式，并将各所述中间值、各所述权重，以及各所述异常阈值输入至所述权重更新公式得到各所述性能指标类型各自对应的整体影响权重。
在本实施例中，技术人员预先在测试记录生成系统中录入整体影响权重的计算公式，并且测试记录生成系统可以根据阈值判断类型在整体影响权重计算公式中确定权重更新公式，然后将性能指标类型对应的中间值，性能指标类型对应的初始权重以及各个异常阈值输入该权重更新公式即可得到该性能指标类型对应的整体影响权重。
示例性地，假设技术人员录入的整体影响权重计算公式如下：
其中，Ei表示整体影响权重，ti为1，表征阈值判断类型为平均值，ti为2，表征阈值判断类型为最大值，ti为3，表征阈值判断类型为最小值，ti为4，表征阈值判断类型为边界值，ti为5，表征阈值判断类型为波动幅度，Wi为初始权重，n为测试次数，avgi为平均值，ai为最大值，bi为最小值，li为过低阈值，hi为过高阈值，fi为波动阈值。
在阈值判断类型为平均值时，测试记录生成系统将把平均值，过高阈值，过低阈值，以及初始权重代入上述ti＝1对应的公式，从而确定性能指标类型的整体影响权重。
可选地，在一种可行的实施例中，在上述步骤S30：对各所述整体影响权重进行排序得到各所述性能指标类型的排序结果之前，所述方法还包括：
步骤S50：根据预设的关联规则将所述性能测试数据中的各所述性能指标类型与待分析软件进行关联；
在本实施例中，测试记录生成系统还将根据预设的关联规则将性能测试数据中的各个性能指标类型与待分析的软件进行关联，即，将性能指标类型与软件进行绑定，从而便于技术人员查看每个软件对应的性能指标类型内容。
需要说明的是，预设的关联规则由技术人员指定。
示例性地，以数据库服务器为例，数据库服务相关性能指标类型有操作系统指标和数据库自身指标两部分组成。操作系统指标有CPU利用率、内存利用率、网络连接数、磁盘利用率等。数据库指标有数据库的每秒查询率、每秒会话数、每秒物理读次数、缓存命中率等。测试记录生成系统可以将CPU利用率、内存利用率、网络连接数、磁盘利用率、每秒查询率、每秒会话数、每秒物理读次数、缓存命中率这些性能指标类型与数据库服务器绑定。
基于此，上述步骤S30：对各所述整体影响权重进行排序得到各所述性能指标类型的排序结果，包括：
步骤S301：在各所述性能指标类型与待分析软件进行关联后，对各所述性能指标类型各自对应的整体影响权重进行排序得到各所述性能指标类型的排序结果。
在本实施例中，测试记录生成系统将根据关联后的各个性能指标类型对应的整体影响权重对各个性能指标类型进行排序得到排序结果，从而提高分析人员的效率。
示例性地，假设服务器A关联的性能指标类型有CPU利用率、缓存命中率，服务器B关联的性能指标类型有CPU利用率，QPS，则测试记录生成系统将根据服务器A中CPU利用率和缓存命中率的整体影响权重对CPU利用率和缓存命中率进行排序得到排序结果。
可选地，在一种可行的实施例中，上述步骤S301：在各所述性能指标类型与待分析软件进行关联后，对各所述性能指标类型各自对应的整体影响权重进行排序得到各所述性能指标类型的排序结果，包括：
步骤S3011：获取用户设定的指标记录偏好；
需要说明的是，指标记录偏好指的是用户设置的影响性能指标类型排序标准的信息。
在本实施例中，测试记录生成系统还将获取用户预先设定的指标排序信息，例如，指标记录偏好可以是用户设定的性能指标类型排列方式(按照权重由小及大，还是由大及小)，还可以是用户特别关注的性能指标类型，例如，用户希望“网络连接数”这一指标展示在目标测试记录中靠前的部分。
步骤S3012：对各所述性能指标类型各自对应的整体影响权重进行排序得到整体权重序列，并根据所述整体权重序列对各所述性能指标类型进行排序得到中间序列；
需要说明的是，在本实施例中，并不限制排序的规则，例如，可以是按照整体影响权重由大到小的顺序对各个性能指标类型进行排序，也可以是按照整体影响权重由小到大的顺序对各个性能指标类型进行排序。
在本实施例中，测试记录生成系统在对待分析软件和性能指标类型进行关联后，再根据关联后各个性能指标类型各自对应的整体影响权重的数值大小对各个整体影响权重进行由大到小或者由小到大地排序得到整体权重序列，并根据整体权重序列对各个性能指标类型进行排序得到中间序列。
示例性地，假设服务器A关联的性能指标类型有CPU利用率、缓存命中率、网络连接数以及每秒查询率，并且上述性能指标类型各自对应的整体影响权重分别为0.3、0.3、0.1和0.4，若测试记录生成系统按照整体影响权重由大到小的顺序对上述4个性能指标类型进行排序，则中间序列为每秒查询率、CPU利用率、缓存命中率和网络连接数，或者，中间序列也可以是每秒查询率、缓存命中率、CPU利用率和网络连接数。
步骤S3013：根据所述指标记录偏好对所述中间序列中的各所述性能指标类型进行排序得到排序结果。
在本实施例中，测试记录生成系统在根据各个整体影响权重对各个性能指标类型进行排序得到中间序列后，还根据用户设置的指标记录偏好得到特定指标信息，并根据特定指标信息对中间序列中的各个性能指标类型进行排序。
需要说明的是，特定指标信息指的是指标记录偏好中存储的指标优先级信息。
示例性地，假设测试记录生成系统得到的中间序列为：每秒查询率、CPU利用率、缓存命中率和网络连接数，而用户的指标记录偏好表征用户希望体现网络连接数量，则测试记录生成系统将网络连接数这一性能指标类型的优先级提高，并对中间序列中的各个性能指标类型进行排序，排序后得到的排序结果可以是网络连接数、每秒查询率、CPU利用率和缓存命中率。
请参照图4，图4为本发明测试记录生成方法一实施例的数据整理流程图，其中，n次测试将得到n个原始测试记录，在对n个原始测试记录进行智能数据分析与整理(即，确定整体影响权重和排序)后，得到n个排序完成的测试记录。
在本实施例中，本发明根据阈值判断类型、各异常阈值、性能测试数据以及权重更新公式更新各个性能指标类型的权重的方式，使得更新后的权重能够表征该性能指标类型对软件性能的影响程度，并且，本发明还通过指标记录偏好和整体影响权重对各个性能指标类型进行排序的方式，能够达到根据用户需求展示性能指标类型的效果。
进一步地，基于上述本发明测试记录生成方法的第一实施例和第二实施例，提出本发明测试记录生成方法的第三实施例。
在本实施例中，在上述步骤S30：根据所述排序结果和所述性能测试数据得到目标测试记录之后，所述测试记录生成方法还包括：
步骤S60：在所述目标测试记录中，标记超过预设的运行阈值的运行值。
在本实施例中，在测试记录生成系统得到目标测试记录后，还可以将目标测试记录中，各个性能指标类型的运行值超过预设的运行阈值的运行值进行标记。
需要说明的是，标记指的是通过标出颜色或者标粗或者圈出的方式，将异常数据突出显示，其中，异常数据为超过运行阈值的运行值。
示例性地，假设技术人员设定CPU利用率的运行阈值为90％，则测试记录生成系统在检测到CPU利用率的运行值大于90％时，将该运行值标红或者标粗，以便技术人员查询。
可选地，在一种可行的实施例中，在上述步骤S30：对各所述整体影响权重进行排序得到各所述性能指标类型的排序结果之前，所述测试记录生成方法还包括：
步骤S70：在各所述性能指标类型中，确定所述整体影响权重低于预设的权重阈值的无效性能指标类型，并对所述无效性能指标类型进行删除处理；
需要说明的是，无效性能指标类型指的是对软件性能影响较小的性能指标类型。
在本实施例中，测试记录生成系统在根据性能测试数据确定各个性能指标类型对应的整体影响权重后，还会将整体影响权重低于预设的权重阈值的性能指标类型确定为无效性能指标类型，并将无效性能指标类型进行删除。
示例性地，假设服务器A关联的性能指标类型有CPU利用率、缓存命中率、网络连接数以及每秒查询率，并且上述性能指标类型各自对应的整体影响权重分别为0.3、0.3、0.1和0.4，在技术人员预设的权重阈值为0.2时，则测试记录生成系统将确定网络连接数为无效性能指标类型(0.1低于0.2)，然后将网络连接数这一性能指标类型删除，则服务器A关联的性能指标类型有CPU利用率、缓存命中率以及每秒查询率。
基于此，上述步骤S30：对各所述整体影响权重进行排序得到各所述性能指标类型的排序结果，包括：
步骤S305：根据各所述整体影响权重对所述性能测试数据中进行所述删除处理后的各所述性能指标类型进行排序得到排序结果。
在本实施例中，测试记录生成系统在删除无效性能指标类型后，再根据剩下的各个性能指标类型对应的整体影响权重对性能测试数据中的各个性能指标类型进行排序得到排序结果。
示例性地，假设服务器B关联的性能指标类型有每秒查询率，每秒会话数，每秒物理读次数和缓存命中率，并且上述4个性能指标类型对应的整体影响权重依次为：0.4、0.1、0.3和0.2，假设权重阈值为0.2，则测试记录生成系统将整体影响权重为0.1的每秒会话数这一性能指标类型删除，并对剩下的每秒查询率、每秒物理读次数和缓存命中率进行排序，排序依据为每秒查询率、每秒物理读次数和缓存命中率各自对应的整体影响权重。
需要理解的是，排序原则还可以是：将同一服务器的指标排列在一起，整体影响权重数值高的性能指标类型的排在前，整体权重数值低的排在后；不同服务器的指标，整体权重高的排在前，整体权重低的排在后。并且对于各次测试产生的各个原始测试记录，还可以横向按照整体影响权重的数值排序，纵向按照测试时间进行排序，从而得到目标测试记录。
请参照图5，图5为本发明测试记录生成方法一实施例的另一实施流程示意图，其中，测试记录生成系统可以获得通过压测得到的性能样本数据，并且可以将对各个性能指标类型配置优先级，配置指标关联性以及设定性能波动阈值，然后将性能样本数据输入已经配置完成的影响权重智能分析算法中，完成自动化格式整理，从而得到目标测试记录。
请参照图6，图6为本发明测试记录生成方法一实施例的测试数据整理前后比对图，其中，图6左侧为测试记录生成系统得到的性能测试数据，图6右侧为测试记录生成系统得到的目标测试记录，并且目标测试记录中超出运行阈值的运行值通过灰色阴影部分标出。
在本实施例中，本发明通过标记超出运行阈值的运行值的方式，能够提高分析人员处理目标测试记录的便利性，而本发明采用的删除整体影响权重较低的性能指标类型，并对保留的性能指标类型进行排序的方式，能够减少测试记录生成系统在智能分析和整理测试记录时的计算量。
此外，本发明还提出一种测试记录生成系统。
请参照图7，所述测试记录生成系统包括：
第一获取模块10，用于获取各个性能指标类型，并获取各所述性能指标类型各自对应的权重；
权重更新模块20，用于获取性能测试数据，并根据所述性能测试数据对各所述权重分别进行更新得到各个整体影响权重，所述性能测试数据包括各所述性能指标类型对应的运行值；
测试记录生成模块30，用于对各所述整体影响权重进行排序得到各所述性能指标类型的排序结果，并根据所述排序结果和所述性能测试数据得到目标测试记录。
可选地，所述性能测试数据还包括各个原始测试记录，所述测试记录生成系统还包括：
第二获取模块，用于获取阈值判断类型和各所述性能指标类型各自对应的异常阈值；
所述权重更新模块20，包括：
中间值计算单元，用于根据各所述原始测试记录中各所述性能指标类型各自对应的运行值和所述阈值判断类型分别确定各所述性能指标类型各自对应的中间值；
整体影响权重确定单元，用于根据各所述中间值、各所述权重以及各所述异常阈值更新各所述性能指标类型各自对应的整体影响权重。
可选地，所述整体影响权重确定单元包括：
公式计算子单元，用于根据所述阈值判断类型获取权重更新公式，并将各所述中间值、各所述权重，以及各所述异常阈值输入至所述权重更新公式得到各所述性能指标类型各自对应的整体影响权重。
可选地，所述测试记录生成系统，还包括：
关联模块，用于根据预设的关联规则将所述性能测试数据中的各所述性能指标类型与待分析软件进行关联；
基于此，所述测试记录生成模块30还用于在各所述性能指标类型与待分析软件进行关联后，对各所述性能指标类型各自对应的整体影响权重进行排序得到各所述性能指标类型的排序结果。
可选地，所述测试记录生成模块30，包括：
用户偏好获取单元，用于获取用户设定的指标记录偏好；
权重排序单元，用于对各所述性能指标类型各自对应的整体影响权重进行排序得到整体权重序列，并根据所述整体权重序列对各所述性能指标类型进行排序得到中间序列；
偏好排序单元，用于根据所述指标记录偏好对所述中间序列中的各所述性能指标类型进行排序得到排序结果。
可选地，所述测试记录生成系统还包括：
记录标记模块，用于在所述目标测试记录中，标记超过预设的运行阈值的运行值。
可选地，所述测试记录生成系统还包括：
指标删除模块，用于在各所述性能指标类型中，确定所述整体影响权重低于预设的权重阈值的无效性能指标类型，并对所述无效性能指标类型进行删除处理；
基于此，所述测试记录生成模块30还用于根据各所述整体影响权重对所述性能测试数据中进行所述删除处理后的各所述性能指标类型进行排序得到排序结果。
其中，上述测试记录生成系统中各个模块的功能实现与上述测试记录生成方法实施例中各步骤相对应，其功能和实现过程在此处不再一一赘述。
此外，本发明还提出一种终端设备，该终端设备包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的测试记录生成程序，所述测试记录生成程序被所述处理器执行时实现如上所述本发明测试记录生成方法的步骤。
本发明终端设备的具体实施例与上述测试记录生成方法各实施例基本相同，在此不作赘述。
此外，本发明还提出一种存储介质，该存储介质上存储有测试记录生成程序，该测试记录生成程序被处理器执行时实现如上所述本发明测试记录生成方法的步骤。
本发明存储介质的具体实施例与上述测试记录生成方法各实施例基本相同，在此不作赘述。
需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
上述本申请实施例序号仅仅为了描述，不代表实施例的优劣。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台终端设备(可以是车载电脑，智能手机，计算机，或者服务器等)执行本申请各个实施例所述的方法。
以上仅为本申请的优选实施例，并非因此限制本申请的专利范围，凡是利用本申请说明书及附图内容所作的等效结构或等效流程变换，或直接或间接运用在其他相关的技术领域，均同理包括在本申请的专利保护范围内。

Claims (10)

1.一种测试记录生成方法，其特征在于，所述测试记录生成方法包括：
获取各个性能指标类型，并获取各所述性能指标类型各自对应的权重；
获取性能测试数据，并根据所述性能测试数据对各所述权重分别进行更新得到各个整体影响权重，所述性能测试数据包括各所述性能指标类型对应的运行值；
对各所述整体影响权重进行排序得到各所述性能指标类型的排序结果，并根据所述排序结果和所述性能测试数据得到目标测试记录。
2.如权利要求1所述的测试记录生成方法，其特征在于，所述性能测试数据还包括各个原始测试记录，在所述根据所述性能测试数据对各所述权重分别进行更新得到各个整体影响权重的步骤之前，所述方法还包括：
获取阈值判断类型和各所述性能指标类型各自对应的异常阈值；
所述根据所述性能测试数据对各所述权重分别进行更新得到各个整体影响权重的步骤，包括：
根据各所述原始测试记录中各所述性能指标类型各自对应的运行值和所述阈值判断类型分别确定各所述性能指标类型各自对应的中间值；
根据各所述中间值、各所述权重以及各所述异常阈值更新各所述性能指标类型各自对应的整体影响权重。
3.如权利要求2所述的测试记录生成方法，其特征在于，所述根据各所述中间值、各所述权重以及各所述异常阈值更新各所述性能指标类型各自对应的整体影响权重的步骤，包括：
根据所述阈值判断类型获取权重更新公式，并将各所述中间值、各所述权重，以及各所述异常阈值输入至所述权重更新公式得到各所述性能指标类型各自对应的整体影响权重。
4.如权利要求1所述的测试记录生成方法，其特征在于，在所述对各所述整体影响权重进行排序得到各所述性能指标类型的排序结果的步骤之前，所述方法还包括：
根据预设的关联规则将所述性能测试数据中的各所述性能指标类型与待分析软件进行关联；
所述对各所述整体影响权重进行排序得到各所述性能指标类型的排序结果的步骤，包括：
在各所述性能指标类型与待分析软件进行关联后，对各所述性能指标类型各自对应的整体影响权重进行排序得到各所述性能指标类型的排序结果。
5.如权利要求4所述的测试记录生成方法，其特征在于，所述对各所述性能指标类型各自对应的整体影响权重进行排序得到各所述性能指标类型的排序结果的步骤，包括：
获取用户设定的指标记录偏好；
对各所述性能指标类型各自对应的整体影响权重进行排序得到整体权重序列，并根据所述整体权重序列对各所述性能指标类型进行排序得到中间序列；
根据所述指标记录偏好对所述中间序列中的各所述性能指标类型进行排序得到排序结果。
6.如权利要求1所述的测试记录生成方法，其特征在于，在所述根据所述排序结果和所述性能测试数据得到目标测试记录的步骤之后，所述测试记录生成方法还包括：
在所述目标测试记录中，标记超过预设的运行阈值的运行值。
7.如权利要求1所述的测试记录生成方法，其特征在于，在所述对各所述整体影响权重进行排序得到各所述性能指标类型的排序结果的步骤之前，所述测试记录生成方法还包括：
在各所述性能指标类型中，确定所述整体影响权重低于预设的权重阈值的无效性能指标类型，并对所述无效性能指标类型进行删除处理；
所述对各所述整体影响权重进行排序得到各所述性能指标类型的排序结果的步骤，包括：
根据各所述整体影响权重对所述性能测试数据中进行所述删除处理后的各所述性能指标类型进行排序得到排序结果。
8.一种测试记录生成系统，其特征在于，所述测试记录生成系统包括：
第一获取模块，用于获取各个性能指标类型，并获取各所述性能指标类型各自对应的权重；
权重更新模块，用于获取性能测试数据，并根据所述性能测试数据对各所述权重分别进行更新得到各个整体影响权重，所述性能测试数据包括各所述性能指标类型对应的运行值；
测试记录生成模块，用于对各所述整体影响权重进行排序得到各所述性能指标类型的排序结果，并根据所述排序结果和所述性能测试数据得到目标测试记录。
9.一种终端设备，其特征在于，所述终端设备包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的测试记录生成程序，所述测试记录生成程序被所述处理器执行时实现如权利要求1至7中任一项所述的测试记录生成方法的步骤。
10.一种存储介质，其特征在于，所述存储介质上存储有测试记录生成程序，所述测试记录生成程序被处理器执行时实现如权利要求1至7中任一项所述的测试记录生成方法的步骤。
CN202310949777.1A 2023-07-28 2023-07-28 测试记录生成方法、系统、终端设备及计算机存储介质 Pending CN116974926A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202310949777.1A CN116974926A (zh) 2023-07-28 2023-07-28 测试记录生成方法、系统、终端设备及计算机存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202310949777.1A CN116974926A (zh) 2023-07-28 2023-07-28 测试记录生成方法、系统、终端设备及计算机存储介质

Publications (1)

Publication Number Publication Date
CN116974926A true CN116974926A (zh) 2023-10-31

Family

ID=88476328

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202310949777.1A Pending CN116974926A (zh) 2023-07-28 2023-07-28 测试记录生成方法、系统、终端设备及计算机存储介质

Country Status (1)

Country Link
CN (1) CN116974926A (zh)

Similar Documents

Publication Publication Date Title
CN107992401B (zh) 性能测试评价方法、装置、终端设备及存储介质
US9317539B2 (en) Time-series database setup automatic generation method, setup automatic generation system and monitoring server
US8930293B2 (en) Prediction apparatus, prediction method, and recording medium
CN110083514B (zh) 软件测试缺陷评估方法、装置、计算机设备及存储介质
WO2021179957A1 (zh) 产品使用质量或性能的判定方法及设备
CN110059068B (zh) 一种分布式存储系统中的数据校验方法及数据校验系统
CN114065223A (zh) 一种基于cvss的多维度软件安全风险评估方法
CN116227240B (zh) 基于综合应力加速试验的产品寿命评价方法、装置及设备
CN114325454A (zh) 一种多特征对电池健康度影响的确定方法、装置、设备及介质
CN111984527A (zh) 软件的性能测试方法、装置、设备和介质
CN109582751B (zh) 一种检索效果的度量方法及服务器
US7797136B2 (en) Metrics to evaluate process objects
CN116974926A (zh) 测试记录生成方法、系统、终端设备及计算机存储介质
CN112328335A (zh) 一种并发请求超时的诊断方法及装置、设备、存储介质
CN113159537B (zh) 电网新技术项目的评估方法、装置和计算机设备
CN117435509B (zh) 接口数据的动态比对方法、动态比对设备和存储介质
CN113077872A (zh) 基于量表测试数据的群体心理状态多指标预测系统及装置
CN111062003A (zh) 样本总体协方差判定方法、装置、设备及存储介质
CN112685295A (zh) 数据分析方法、装置、电子设备及存储介质
CN111882347A (zh) 模型性能的检测方法、装置、计算机设备及存储介质
CN111340349A (zh) 产品可靠性评估方法、装置、计算机设备和存储介质
CN114386525B (zh) 一种评估标准的自适应调整方法、装置、设备和存储介质
CN117555812B (zh) 一种云平台自动化测试方法及系统
US20090089123A1 (en) Method and a Tool for Performance Measurement of a Business Scenario Step Executed by a Single User
CN115080329A (zh) 压力测试数据的监测方法、装置、电子设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination