CN112765005A - 一种性能测试执行方法及系统 - Google Patents
一种性能测试执行方法及系统 Download PDFInfo
- Publication number
- CN112765005A CN112765005A CN202110084651.3A CN202110084651A CN112765005A CN 112765005 A CN112765005 A CN 112765005A CN 202110084651 A CN202110084651 A CN 202110084651A CN 112765005 A CN112765005 A CN 112765005A
- Authority
- CN
- China
- Prior art keywords
- test
- performance
- performance test
- data
- execution
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000011056 performance test Methods 0.000 title claims abstract description 85
- 238000000034 method Methods 0.000 title claims abstract description 32
- 238000012360 testing method Methods 0.000 claims abstract description 125
- 238000002360 preparation method Methods 0.000 claims abstract description 14
- 238000012544 monitoring process Methods 0.000 claims abstract description 6
- 238000013515 script Methods 0.000 claims description 8
- 238000003860 storage Methods 0.000 claims description 6
- 238000011156 evaluation Methods 0.000 claims description 4
- 238000011160 research Methods 0.000 claims description 3
- 238000004590 computer program Methods 0.000 claims description 2
- 238000012552 review Methods 0.000 claims description 2
- 230000007613 environmental effect Effects 0.000 claims 1
- 238000005457 optimization Methods 0.000 abstract description 5
- 238000004458 analytical method Methods 0.000 abstract description 3
- 238000011835 investigation Methods 0.000 abstract description 3
- 238000010586 diagram Methods 0.000 description 3
- 238000007726 management method Methods 0.000 description 3
- 238000013500 data storage Methods 0.000 description 2
- 230000007547 defect Effects 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000012854 evaluation process Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000013522 software testing Methods 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 239000002699 waste material Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/34—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
- G06F11/3409—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment for performance assessment
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/34—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
- G06F11/3452—Performance evaluation by statistical analysis
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/34—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
- G06F11/3466—Performance evaluation by tracing or monitoring
- G06F11/3476—Data logging
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Quality & Reliability (AREA)
- General Physics & Mathematics (AREA)
- Computer Hardware Design (AREA)
- Life Sciences & Earth Sciences (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Bioinformatics & Computational Biology (AREA)
- Evolutionary Biology (AREA)
- Probability & Statistics with Applications (AREA)
- Debugging And Monitoring (AREA)
Abstract
本发明涉及一种性能测试执行方法及系统，统筹集合需求调研、测试准备、执行性能测试、性能调优、性能测试报告的整体流程，实现完整的性能测试管控，能够根据需要手动选择或自动分配执行机进行性能测试，并输出对应的分析结果性能曲线，同时可以实现对服务器资源负载情况的监控，极大地提高了性能测试执行效率，减少企业人力成本负担。
Description
技术领域
本发明涉及软件测试技术领域，尤其涉及一种性能测试执行方法及系统。
背景技术
目前市面上常见的性能测试工具主要有LoadRunner、Jmeter等，这些工具提供了方便，快捷，较全面的性能测试所需的功能，例如常见的HTTP请求性能测试，JDBC请求性能测试，录制脚本，断言，监听器，配置元件等等。使用这些测试工具不仅能用线程组模拟生产用户进行性能测试，还能直观地看出各个性能测试指标的表现情况，因此现有性能测试工具为性能测试提供了很好的装备，也为企业开展性能测试带来了很大的利益。
但是，LoadRunner、Jmeter等测试工具虽功能强大，对于性能测试流程的把控却相对不足，性能测试结果较难全面分析，服务器监控不到位，没有提供执行机的管理与调度，这些缺陷会对专业性能测试团队的工作造成很大的困难，降低了性能测试执行效率，造成企业人力成本浪费，对企业的发展与盈利形成了一定的阻碍。
发明内容
为解决现有技术的不足，本发明提出一种性能测试执行方法及系统，统筹集合需求调研、测试准备、执行性能测试、性能调优、性能测试报告的整体流程，实现完整的性能测试管控，能够根据需要手动选择或自动分配执行机进行性能测试，并输出对应的分析结果性能曲线，同时可以实现对服务器资源负载情况的监控，极大地提高了性能测试执行效率，减少企业人力成本负担。
为实现以上目的，本发明所采用的技术方案包括：
一种性能测试执行方法，其特征在于，包括：
采集测试需求；
根据测试需求进行测试准备；
执行性能测试并存储性能测试结果数据；
根据性能测试结果数据进行性能调优；
输出性能测试报告。
进一步地，所述采集测试需求包括收集统计开发人员反馈的性能测试申请单，所述测试需求包括需求内容、环境信息、数据存量、性能测试指标、网络拓扑图和业务逻辑图。
进一步地，所述测试准备包括：
依据测试需求创建测试方案；
依据测试方案部署测试应用和测试中间件；
准备存量数据和测试数据；
依据测试方案判断测试过程是否涉及挡板程序，如是则准备挡板程序；
准备测试脚本，设置参数化和断言。
进一步地，所述执行性能测试包括：
创建测试环境；
调用测试脚本；
设置测试场景，所述测试场景包括单负载压力测试、混合压力测试或稳定性压力测试；
选择执行机或自动分配执行机进行性能测试，同时监控服务器资源负载；
汇总执行机测试结果和服务器资源负载数据生成性能测试结果数据。
进一步地，所述执行性能测试还包括：
根据选定的性能测试结果数据设置TPS绘制点并生成TPS曲线图；
汇总TPS曲线图生成测试简报。
进一步地，所述性能调优包括统计不达标的接口信息并定位影响性能的具体位置进行针对性调整。
进一步地，所述输出性能测试报告包括将性能测试报告发送至开发人员和项目管理人员进行评审。
本发明还涉及一种性能测试执行系统，其特征在于，包括：
测试需求调研模块，用于收集统计开发人员反馈的性能测试申请单并生成测试需求；
测试准备模块，用于根据测试需求进行测试准备；
测试执行模块，用于执行性能测试并存储性能测试结果数据；
性能调优模块，用于根据性能测试结果数据进行性能调优；
测试报告输出模块，用于生成性能测试报告并将性能测试报告发送至开发人员和项目管理人员进行评审。
本发明还涉及一种计算机可读存储介质，其特征在于，所述存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现上述的方法。
本发明还涉及一种电子设备，其特征在于，包括处理器和存储器；
所述存储器，用于存储存量数据和测试数据；
所述处理器，用于通过调用存量数据和测试数据，执行上述的方法。
本发明的有益效果为：
采用本发明所述性能测试执行方法及系统，统筹集合需求调研、测试准备、执行性能测试、性能调优、性能测试报告的整体流程，实现完整的性能测试管控，能够根据需要手动选择或自动分配执行机进行性能测试，并输出对应的分析结果性能曲线，同时可以实现对服务器资源负载情况的监控，极大地提高了性能测试执行效率，减少企业人力成本负担。
附图说明
图1为本发明性能测试执行方法流程示意图。
图2为本发明性能测试执行系统结构示意图。
具体实施方式
为了更清楚的理解本发明的内容，将结合附图和实施例详细说明。
本发明第一方面涉及一种如图1所示的性能测试执行方法，包括：
收集统计开发人员反馈的性能测试申请单以采集测试需求，所述测试需求包括需求内容、环境信息、数据存量、性能测试指标、网络拓扑图和业务逻辑图等相应内容，开发人员可以根据需要随时填写性能测试申请单并由测试人员根据实际情况安排进行测试需求的采集；
根据测试需求进行测试准备，特别是包括依据测试需求创建测试方案，依据测试方案部署测试应用和测试中间件，准备存量数据和测试数据，依据测试方案判断测试过程是否涉及挡板程序并在需要情况下准备挡板程序，准备测试脚本例如设置参数化和断言，其中，测试方案编写创建完成后优选的应经过评审流程以确保测试的可靠性；
执行性能测试并存储性能测试结果数据，优选的包括：创建测试环境；调用测试脚本，可根据实际情况选择在线编辑请求或者上传jmx脚本；设置测试场景，所述测试场景包括单负载压力测试、混合压力测试或稳定性压力测试，同时可以支持多并发测试场景；选择执行机或自动分配执行机进行性能测试，同时监控服务器资源负载，执行机的选择应遵循指定选择优先的分配方式，当没有指定选择执行机时采用自动分配方式；汇总执行机测试结果和服务器资源负载数据生成性能测试结果数据，特别是，该性能测试结果数据涵盖了每次测试场景运行的结果，且将会被存储保留；根据选定的性能测试结果数据设置TPS绘制点并生成TPS曲线图，汇总TPS曲线图生成测试简报，特别是可以在TPS曲线图中涵盖多条测试结果以在测试简报中呈现对比比较效果；
根据性能测试结果数据进行性能调优，对于存在接口不达标的情况，统计不达标的接口信息并定位影响性能的具体位置，优选的由测试人员与开发人员一起进行针对性调优；
输出性能测试报告，特别是选择在进行性能调优达标后，将生产的性能测试报告发送至开发人员和项目管理人员进行评审。
本发明还涉及一种如图2所示结构的性能测试执行系统，包括：
测试需求调研模块，用于收集统计开发人员反馈的性能测试申请单并生成测试需求；
测试准备模块，用于根据测试需求进行测试准备；
测试执行模块，用于执行性能测试并存储性能测试结果数据；
性能调优模块，用于根据性能测试结果数据进行性能调优；
测试报告输出模块，用于生成性能测试报告并将性能测试报告发送至开发人员和项目管理人员进行评审。
进一步地，本发明还涉及一种存储有执行上述性能测试执行方法的程序的可读存储介质，通过使用该可读存储介质能够执行该程序从而实现上述性能测试执行方法。
进一步地，本发明还涉及一种包括有存储器和处理器的电子设备，所述存储器用于存储执行上述性能测试执行方法所必要的数据，所述处理器用于执行性能测试执行方法。
以上所述仅为本发明较佳的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到的变化或替换等都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应该以权利要求书的保护范围为准。
Claims (10)
1.一种性能测试执行方法，其特征在于，包括：
采集测试需求；
根据测试需求进行测试准备；
执行性能测试并存储性能测试结果数据；
根据性能测试结果数据进行性能调优；
输出性能测试报告。
2.如权利要求1所述的方法，其特征在于，所述采集测试需求包括收集统计开发人员反馈的性能测试申请单，所述测试需求包括需求内容、环境信息、数据存量、性能测试指标、网络拓扑图和业务逻辑图。
3.如权利要求1所述的方法，其特征在于，所述测试准备包括：
依据测试需求创建测试方案；
依据测试方案部署测试应用和测试中间件；
准备存量数据和测试数据；
依据测试方案判断测试过程是否涉及挡板程序，如是则准备挡板程序；
准备测试脚本，设置参数化和断言。
4.如权利要求1所述的方法，其特征在于，所述执行性能测试包括：
创建测试环境；
调用测试脚本；
设置测试场景，所述测试场景包括单负载压力测试、混合压力测试或稳定性压力测试；
选择执行机或自动分配执行机进行性能测试，同时监控服务器资源负载；
汇总执行机测试结果和服务器资源负载数据生成性能测试结果数据。
5.如权利要求4所述的方法，其特征在于，所述执行性能测试还包括：
根据选定的性能测试结果数据设置TPS绘制点并生成TPS曲线图；
汇总TPS曲线图生成测试简报。
6.如权利要求1所述的方法，其特征在于，所述性能调优包括统计不达标的接口信息并定位影响性能的具体位置进行针对性调整。
7.如权利要求1所述的方法，其特征在于，所述输出性能测试报告包括将性能测试报告发送至开发人员和项目管理人员进行评审。
8.一种性能测试执行系统，其特征在于，包括：
测试需求调研模块，用于收集统计开发人员反馈的性能测试申请单并生成测试需求；
测试准备模块，用于根据测试需求进行测试准备；
测试执行模块，用于执行性能测试并存储性能测试结果数据；
性能调优模块，用于根据性能测试结果数据进行性能调优；
测试报告输出模块，用于生成性能测试报告并将性能测试报告发送至开发人员和项目管理人员进行评审。
9.一种计算机可读存储介质，其特征在于，所述存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现权利要求1至7中任一项所述的方法。
10.一种电子设备，其特征在于，包括处理器和存储器；
所述存储器，用于存储存量数据和测试数据；
所述处理器，用于通过调用存量数据和测试数据，执行权利要求1至7中任一项所述的方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110084651.3A CN112765005A (zh) | 2021-01-21 | 2021-01-21 | 一种性能测试执行方法及系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110084651.3A CN112765005A (zh) | 2021-01-21 | 2021-01-21 | 一种性能测试执行方法及系统 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN112765005A true CN112765005A (zh) | 2021-05-07 |
Family
ID=75702524
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202110084651.3A Pending CN112765005A (zh) | 2021-01-21 | 2021-01-21 | 一种性能测试执行方法及系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN112765005A (zh) |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20090199047A1 (en) * | 2008-01-31 | 2009-08-06 | Yahoo! Inc. | Executing software performance test jobs in a clustered system |
| CN111209218A (zh) * | 2020-04-01 | 2020-05-29 | 中电万维信息技术有限责任公司 | 一种基于Jmeter的性能自动化测试方法 |
| CN111984527A (zh) * | 2020-07-10 | 2020-11-24 | 招联消费金融有限公司 | 软件的性能测试方法、装置、设备和介质 |
-
2021
- 2021-01-21 CN CN202110084651.3A patent/CN112765005A/zh active Pending
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20090199047A1 (en) * | 2008-01-31 | 2009-08-06 | Yahoo! Inc. | Executing software performance test jobs in a clustered system |
| CN111209218A (zh) * | 2020-04-01 | 2020-05-29 | 中电万维信息技术有限责任公司 | 一种基于Jmeter的性能自动化测试方法 |
| CN111984527A (zh) * | 2020-07-10 | 2020-11-24 | 招联消费金融有限公司 | 软件的性能测试方法、装置、设备和介质 |
Non-Patent Citations (2)
| Title |
|---|
| 周显明;王勇;: "新一代本币交易系统的综合性能测试实践", 电气自动化, no. 03, 30 May 2017 (2017-05-30), pages 16 - 19 * |
| 李霄;王常洲;田雅;: "计算机应用系统性能测试技术及应用研究", 软件, no. 04, 15 April 2013 (2013-04-15) * |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US7895565B1 (en) | Integrated system and method for validating the functionality and performance of software applications | |
| US8839107B2 (en) | Context based script generation | |
| CN108628748B (zh) | 自动化测试管理方法和自动化测试管理系统 | |
| CN111400186B (zh) | 性能测试方法及系统 | |
| CN108959059B (zh) | 一种测试方法以及测试平台 | |
| CN112597014B (zh) | 基于数据驱动的自动化测试方法、装置、介质及电子设备 | |
| US8234633B2 (en) | Incident simulation support environment and business objects associated with the incident | |
| US20060041539A1 (en) | Method and apparatus for organizing, visualizing and using measured or modeled system statistics | |
| CN110956269B (zh) | 数据模型的生成方法、装置、设备以及计算机存储介质 | |
| CN106933729A (zh) | 一种基于云平台的测试方法和系统 | |
| CN107733735B (zh) | 一种植入于压测宝中的脚本录制系统及方法 | |
| CN103246606A (zh) | Esb平台的性能方法和系统 | |
| CN112148616B (zh) | 一种性能测试管理平台 | |
| CN111694752A (zh) | 应用测试方法、电子设备及存储介质 | |
| CN114398293A (zh) | 接口测试用例生成方法、电子设备和存储介质 | |
| CN112882927A (zh) | 一种接口自动化测试方法、装置、设备及介质 | |
| CN118093380A (zh) | 一种JMeter集群压测方法、系统、设备及介质 | |
| CN114297961A (zh) | 一种芯片测试用例处理方法及相关装置 | |
| CN116955193A (zh) | 接口测试方法、装置、设备及存储介质 | |
| CN116545891A (zh) | 一种基于智能设备的自动化配网测试方法 | |
| CN115248782B (zh) | 一种自动化测试方法、装置及计算机设备 | |
| CN112765005A (zh) | 一种性能测试执行方法及系统 | |
| CN116719735A (zh) | 一种测试用例生成方法及装置 | |
| CN112699022B (zh) | 一种实时高效自动化契约测试的方法及系统 | |
| CN113094266B (zh) | 一种容器数据库的故障测试方法、平台及设备 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |