CN116974927A - 性能自动化测试方法、系统、计算机设备及存储介质 - Google Patents
性能自动化测试方法、系统、计算机设备及存储介质 Download PDFInfo
- Publication number
- CN116974927A CN116974927A CN202310952248.7A CN202310952248A CN116974927A CN 116974927 A CN116974927 A CN 116974927A CN 202310952248 A CN202310952248 A CN 202310952248A CN 116974927 A CN116974927 A CN 116974927A
- Authority
- CN
- China
- Prior art keywords
- test
- preset
- script
- yaml
- test result
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000010998 test method Methods 0.000 title claims description 19
- 238000012360 testing method Methods 0.000 claims abstract description 301
- 238000013515 script Methods 0.000 claims abstract description 108
- 238000010276 construction Methods 0.000 claims abstract description 38
- 238000000034 method Methods 0.000 claims abstract description 21
- 230000001960 triggered effect Effects 0.000 claims abstract description 11
- 238000004458 analytical method Methods 0.000 claims description 22
- 238000009434 installation Methods 0.000 claims description 20
- 238000012544 monitoring process Methods 0.000 claims description 13
- 238000004590 computer program Methods 0.000 claims description 7
- 238000012423 maintenance Methods 0.000 abstract description 8
- 238000013522 software testing Methods 0.000 abstract description 2
- 230000000694 effects Effects 0.000 description 6
- 238000011056 performance test Methods 0.000 description 6
- 238000010606 normalization Methods 0.000 description 5
- 238000004891 communication Methods 0.000 description 4
- 238000010586 diagram Methods 0.000 description 4
- 230000003287 optical effect Effects 0.000 description 3
- 238000012545 processing Methods 0.000 description 3
- 230000006835 compression Effects 0.000 description 2
- 238000007906 compression Methods 0.000 description 2
- 238000013100 final test Methods 0.000 description 2
- 238000003491 array Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 235000019800 disodium phosphate Nutrition 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
Classifications
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management
Landscapes
- Debugging And Monitoring (AREA)
Abstract
本申请实施例属于软件测试技术领域,涉及一种性能自动化测试方法,包括:获取测试项目对应的预设配置信息,以及Taurus对应的预设yaml文件模板,根据所述预设配置信息和所述预设yaml文件模板,自动生成可编辑的yaml配置文件;接收到携带有构建信息的构建指令时,根据所述构建信息在Jenkins中构建测试任务;当所述测试任务触发时,根据执行命令对所述Taurus进行调用,以通过所述yaml配置文件驱动预设的JMeter脚本进行测试,得到测试结果源数据;通过预设的Python脚本对所述测试结果源数据进行解析处理,得到HTML报告,并发布测试结果邮件。本申请还提供一种性能自动化测试系统、计算机设备及存储介质。本申请减少了性能自动化测试过程中的人工维护成本,并且提高了测试效率。
Description
技术领域
本申请涉及软件测试技术领域,尤其涉及一种性能自动化测试方法、系统、计算机设备及存储介质。
背景技术
在软件开发的生命周期中,每个项目都会由一开始快速迭代的状态发展至后来以维护为主的状态,而在对项目进行维护的过程中,需要定期对软件进行性能测试,持续关注软件的性能,以确保其不会随着业务迭代而下降。
目前,针对软件的性能,通过合理地引入自动化测试,可以有效地减少人工维护成本,但现有的自动化测试框架,例如JMeter工具,由于自身较多的组件应用,导致操作难度较大,再如通过Jenkins配置邮件发送报告,操作配置繁琐,使得测试流程过于复杂,不但在减少人工维护成本的方面效果不佳,还降低了测试效率,不利于实现软件的性能自动化测试的常态化。
发明内容
本申请实施例的目的在于提出一种性能自动化测试方法、系统、计算机设备及存储介质,以解决目前软件的性能自动化测试的测试流程较为复杂,测试效率较低的技术问题。
为了解决上述技术问题,本申请实施例提供一种性能自动化测试方法,采用了如下所述的技术方案:
获取测试项目对应的预设配置信息,以及Taurus对应的预设yaml文件模板,根据所述预设配置信息和所述预设yaml文件模板,自动生成可编辑的yaml配置文件;
接收到携带有构建信息的构建指令时,根据所述构建信息在Jenkins中构建测试任务;
当所述测试任务触发时,根据执行命令对所述Taurus进行调用,以通过所述yaml配置文件驱动预设的JMeter脚本进行测试,得到测试结果源数据;
通过预设的Python脚本对所述测试结果源数据进行解析处理,得到HTML报告,并发布测试结果邮件。
进一步的,所述预设配置信息包括JMeter安装路径、项目路径以及测试脚本路径,所述根据所述预设配置信息和所述预设yaml文件模板,自动生成可编辑的yaml配置文件的步骤,具体包括:
通过Python脚本,将所述JMeter安装路径、所述项目路径以及所述测试脚本路径自动填充至所述预设yaml文件模板,得到所述yaml配置文件;
以使得可以通过编辑所述JMeter安装路径、所述项目路径以及所述测试脚本路径,对所述测试项目的测试策略进行更新。
进一步的,所述获取测试项目对应的预设配置信息,以及Taurus对应的预设yaml文件模板,根据所述预设配置信息和所述预设yaml文件模板,自动生成可编辑的yaml配置文件的步骤之前,还包括:
获取预设的脚本规范;
按照所述脚本规范,开发得到所述JMeter脚本。
进一步的,所述JMeter脚本包括事务控制器和资源监控组件,所述事务控制器与所述JMeter脚本中的JMX文件命名一致,所述资源监控组件以Res_CPU和Res_Memory命名。
进一步的,所述数据结果源数据包括JTL结果文件,所述通过预设的Python脚本对所述测试结果源数据进行解析处理,得到HTML报告,并发布测试结果邮件的步骤,具体包括:
通过所述Jenkins向所述Python脚本发送解析命令;
根据所述解析命令调用所述Python脚本对所述JTL结果文件进行解析处理,得到所述HTML报告;
根据所述HTML报告,生成所述测试结果邮件并进行发布。
进一步的,所述HTML报告包括简版HTML报告和完整HTML报告,所述简版HTML报告包括测试结果对应的简化数据,所述完整HTML报告包括测试结果对应的详细数据和图表。
进一步的,所述根据所述HTML报告,生成所述测试结果邮件并进行发布的步骤,具体包括;
读取预先配置的邮件模板,根据所述简版HTML报告和所述邮件模板生成所述测试结果邮件;
将所述测试结果邮件发布至所述测试项目对应的管理者邮箱。
为了解决上述技术问题,本申请实施例还提供一种性能自动化测试系统,采用了如下所述的技术方案:
一种性能自动化测试系统,包括:
配置模块,用于获取测试项目对应的预设配置信息,以及Taurus对应的预设yaml文件模板,根据所述预设配置信息和所述预设yaml文件模板,自动生成可编辑的yaml配置文件;
构建模块,用于接收到携带有构建信息的构建指令时,根据所述构建信息在Jenkins中构建测试任务;
测试模块,用于当所述测试任务触发时,根据执行命令对所述Taurus进行调用,以通过所述yaml配置文件驱动预设的JMeter脚本进行测试,得到测试结果源数据;
解析模块,用于通过预设的Python脚本对所述测试结果源数据进行解析处理,得到HTML报告,并发布测试结果邮件。
为了解决上述技术问题,本申请实施例还提供一种计算机设备,采用了如下所述的技术方案:
一种计算机设备,包括存储器和处理器,所述存储器中存储有计算机程序,所述处理器执行所述计算机程序时实现如上所述的性能自动化测试方法的步骤。
为了解决上述技术问题,本申请实施例还提供一种计算机可读存储介质,采用了如下所述的技术方案:
一种计算机可读存储介质,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现如上所述的性能自动化测试方法的步骤。
与现有技术相比,本申请实施例主要有以下有益效果:
本申请公开的性能自动化测试方法,通过获取测试项目对应的预设配置信息,以及Taurus对应的预设yaml文件模板,根据所述预设配置信息和所述预设yaml文件模板,自动生成可编辑的yaml配置文件;接收到携带有构建信息的构建指令时,根据所述构建信息在Jenkins中构建测试任务;当所述测试任务触发时,根据执行命令对所述Taurus进行调用,以通过所述yaml配置文件驱动预设的JMeter脚本进行测试,得到测试结果源数据;通过预设的Python脚本对所述测试结果源数据进行解析处理,得到HTML报告,并发布测试结果邮件。本申请通过Jenkins+Taurus+Python的测试框架,搭建了持续集成的性能自动化测试平台,从而实现软件的性能自动化测试,与自动化测试的传统方式相比,降低了测试流程的复杂程度,达到了减少人工维护成本的效果,并且提高了测试效率,有利于性能自动化测试的常态化。
附图说明
为了更清楚地说明本申请中的方案,下面将对本申请实施例描述中所需要使用的附图作一个简单介绍,显而易见地,下面描述中的附图是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本申请可以应用于其中的示例性系统架构图;
图2根据本申请的性能自动化测试方法的一个实施例的流程图;
图3是根据本申请的性能自动化测试系统的一个实施例的结构示意图;
图4是根据本申请的计算机设备的一个实施例的结构示意图。
具体实施方式
除非另有定义,本文所使用的所有的技术和科学术语与属于本申请的技术领域的技术人员通常理解的含义相同;本文中在申请的说明书中所使用的术语只是为了描述具体的实施例的目的,不是旨在于限制本申请;本申请的说明书和权利要求书及上述附图说明中的术语“包括”和“具有”以及它们的任何变形,意图在于覆盖不排他的包含。本申请的说明书和权利要求书或上述附图中的术语“第一”、“第二”等是用于区别不同对象,而不是用于描述特定顺序。
在本文中提及“实施例”意味着,结合实施例描述的特定特征、结构或特性可以包含在本申请的至少一个实施例中。在说明书中的各个位置出现该短语并不一定均是指相同的实施例,也不是与其它实施例互斥的独立的或备选的实施例。本领域技术人员显式地和隐式地理解的是,本文所描述的实施例可以与其它实施例相结合。
为了使本技术领域的人员更好地理解本申请方案,下面将结合附图,对本申请实施例中的技术方案进行清楚、完整地描述。
如图1所示,系统架构100可以包括终端设备101、102、103,网络104和服务器105。网络104用以在终端设备101、102、103和服务器105之间提供通信链路的介质。网络104可以包括各种连接类型,例如有线、无线通信链路或者光纤电缆等等。
用户可以使用终端设备101、102、103通过网络104与服务器105交互,以接收或发送消息等。终端设备101、102、103上可以安装有各种通讯客户端应用,例如网页浏览器应用、购物类应用、搜索类应用、即时通信工具、邮箱客户端、社交平台软件等。
终端设备101、102、103可以是具有显示屏并且支持网页浏览的各种电子设备,包括但不限于智能手机、平板电脑、电子书阅读器、MP3播放器(Moving Picture ExpertsGroup Audio Layer III,动态影像专家压缩标准音频层面3)、MP4(Moving PictureExperts Group Audio Layer IV,动态影像专家压缩标准音频层面4)播放器、膝上型便携计算机和台式计算机等等。
服务器105可以是提供各种服务的服务器,例如对终端设备101、102、103上显示的页面提供支持的后台服务器。
需要说明的是,本申请实施例所提供的性能自动化测试方法一般由终端设备执行,相应地,性能自动化测试系统一般设置于终端设备中。
应该理解,图1中的终端设备、网络和服务器的数目仅仅是示意性的。根据实现需要,可以具有任意数目的终端设备、网络和服务器。
继续参考图2,示出了根据本申请的性能自动化测试方法的一个实施例的流程图。所述的性能自动化测试方法,包括以下步骤:
步骤S201,获取测试项目对应的预设配置信息,以及Taurus对应的预设yaml文件模板,根据所述预设配置信息和所述预设yaml文件模板,自动生成可编辑的yaml配置文件;
在本实施例中,性能自动化测试方法运行时,首先可以获取测试项目对应的预设配置信息,以及,Taurus对应的预设yaml文件模板,而后可以根据预设配置信息和预设yaml文件模板,自动生成可编辑的yaml配置文件。具体地,JMeter测试工具一般用于常规的性能测试中,因此测试人员需要掌握JMeter测试工具的基本使用,操作难度较大,而本实施例为了降低操作难度,可以通过脚本获取测试项目对应的预设配置信息,例如测试项目对应的测试用例、测试策略和JMeter环境变量等信息,根据预设配置信息和预设yaml文件模板,即可对Taurus中的yaml文件进行配置,生成可编辑的yaml配置文件,在后续的自动化测试过程中,需要通过Taurus启动JMeter测试工具进行性能测试时,还可以通过编辑yaml配置文件调整测试策略。
需要说明的是,JMeter是一款纯Java的开源项目,既可以用于接口测试也可以用于性能测试,并具备可以实现跨平台运行的高移植性。而Taurus是一个开源自动化框架,用于运行各种开源负载测试工具和功能测试工具,其所支持的开源压测工具中就包括了JMeter。
步骤S202,接收到携带有构建信息的构建指令时,根据所述构建信息在Jenkins中构建测试任务;
在本实施例中,对Taurus的yaml文件进行配置并得到yaml配置文件后,当接收到携带有构建信息的构建指令时,即可根据构建信息在Jenkins中构建测试任务。具体地,Jenkins是一个开源的、提供友好操作界面的持续集成(CI)工具,主要用于持续、自动的构建/测试软件项目,以及监控外部任务的运行。本实施例性能自动化测试方法就需要应用Jenkins+Taurus+Python的测试框架,得到Taurus的yaml配置文件后,当测试人员发送携带有构建信息的构建指令时,根据构建信息在Jenkins中构建测试任务,该构建信息可以包括针对测试任务的一些配置,如General、源码管理、构建触发器、构建环境等,当构建触发器被触发时,即可执行该测试任务。
步骤S203,当所述测试任务触发时,根据执行命令对所述Taurus进行启动,以通过所述yaml配置文件驱动预设的JMeter脚本进行测试,得到测试结果源数据;
在本实施例中,Jenkins中构建的测试任务触发时,即可根据执行命令对Taurus进行调用,以通过yaml配置文件驱动预设的JMeter脚本进行测试,得到测试结果源数据。具体地,预设的JMeter脚本为根据预先设定的脚本规范开发的JMeter脚本,当测试任务触发时,Jenkins就会向Taurus发送执行命令,该执行命令为bzt命令,通过bzt命令启动Taurus,可以使其很容易地运行,使得Taurus根据yaml配置文件可以驱动JMeter脚本进行测试,从而得到最终的测试结果源数据。
步骤S204,通过预设的Python脚本对所述测试结果源数据进行解析处理,得到HTML报告,并发布测试结果邮件。
在本实施例中,通过Jenkins调用Taurus驱动JMeter脚本完成测试并得到测试结果源数据后,即可根据预设的解析流程对测试结果源数据进行解析处理,得到HTML报告。具体地,在得到测试结果源数据后,Jenkins还可以应用到Python脚本对其进行解析处理,从而得到HTML的数据报告,而后发布测试结果邮件,对相关测试人员进行通知,因此,本实施例搭建的测试框架结合了Jenkins、Taurus以及Python,通过该测试框架,避免了原本直接操作JMeter进行性能测试的难度较高的情况。
本申请通过Jenkins+Taurus+Python的测试框架,搭建了持续集成的性能自动化测试平台,从而实现软件的性能自动化测试,与自动化测试的传统方式相比,降低了测试流程的复杂程度,达到了减少人工维护成本的效果,并且提高了测试效率,有利于性能自动化测试的常态化。
在本实施例的一些可选的实现方式中,所述预设配置信息包括JMeter安装路径、项目路径以及测试脚本路径,上述根据所述预设配置信息和所述预设yaml文件模板,自动生成可编辑的yaml配置文件的步骤包括:
通过Python脚本,将所述JMeter安装路径、所述项目路径以及所述测试脚本路径自动填充至所述预设yaml文件模板,得到所述yaml配置文件;
以使得可以通过编辑所述JMeter安装路径、所述项目路径以及所述测试脚本路径,对所述测试项目的测试策略进行更新。
在本实施例中,测试项目对应的预设配置信息包括了JMeter安装路径、项目路径以及测试脚本路径,运行性能自动化测试方法,首先需要通过Python脚本,将JMeter安装路径、项目路径以及测试脚本路径自动填充至预设yaml文件模板,得到yaml配置文件,以使得可以通过编辑JMeter安装路径、项目路径以及测试脚本路径,对测试项目的测试策略进行更新。具体地,预设配置信息包含了测试项目对应的测试用例、测试策略和JMeter环境变量等信息,而其中就包括了JMeter安装路径、项目路径以及测试脚本路径等,作为测试项目对应的基本信息,通过Python脚本,可以将JMeter安装路径、项目路径以及测试脚本路径,填充至Taurus对应的预设yaml文件模板,即可自动生成yaml配置文件,对于yaml配置文件,后续可以根据测试需求修改JMeter安装路径、项目路径以及测试脚本路径,从而对测试项目的测试策略进行调整。
本申请通过配置测试项目对应的JMeter安装路径、项目路径以及测试脚本路径等基本信息,得到配置了测试项目的测试场景所包括的基本信息后的yaml配置文件,使得后续可以通过yaml配置文件驱动JMeter脚本进行性能自动化测试,降低了测试流程的复杂程度,达到了减少人工维护成本的效果,并且提高了测试效率,有利于性能自动化测试的常态化。
在本实施例的一些可选的实现方式中,在上述获取测试项目对应的预设配置信息,以及Taurus对应的预设yaml文件模板,根据所述预设配置信息和所述预设yaml文件模板,自动生成可编辑的yaml配置文件的步骤之前,还包括:
获取预设的脚本规范;
按照所述脚本规范,开发得到所述JMeter脚本。
在本实施例中,在对Taurus的yaml文件进行配置之前,需要获取预设的脚本规范,并按照预设的脚本规范,开发得到预设的JMeter脚本。具体地,脚本规范可以由测试人员提前自定义好,按照该脚本规范所开发的Jmeter脚本,即为后续测试过程中预设的JMeter脚本,使得后续在对测试结果进行解析时更为便捷。
本申请通过应用自定义的脚本规范开发用于后续测试的Jmeter脚本,可以提高最终对于测试结果的解析效率,此外,可以支持服务器的资源率在后续生成的HTML报告上展示。
在本实施例的一些可选的实现方式中,上述JMeter脚本包括事务控制器和资源监控组件,所述事务控制器与所述JMeter脚本中的JMX文件命名一致,所述资源监控组件以Res_CPU和Res_Memory命名。
在本实施例中,按照预设的脚本规范所开发的JMeter脚本,需要包括事务控制器和资源监控组件,其中,事务控制器需要与JMeter脚本中的JMX文件命名一致,资源监控组件需要以Res_CPU和Res_Memory命名。具体地,由于自研Python方法根据Jmeter脚本规范能够高效解析原生JTL结果文件,因此需要保持事务控制器与JMX文件命名一致,此外,资源监控组件以Res_CPU和Res_Memory命名,可以保持对于CPU和内存的监控,自研Python方法根据此命名规范解析原生JTL结果文件,从而得到服务器的CPU和内存利用率。
本申请通过对于预设的JMeter脚本的设置,使得后续测试过程中可以通过编辑Taurus的yaml配置文件调整测试策略,可以很容易地驱动JMeter脚本进行测试,从而降低了测试流程的复杂程度,并且提高了测试效率。
在本实施例的一些可选的实现方式中,所述数据结果源数据包括JTL结果文件,上述通过预设的Python脚本对所述测试结果源数据进行解析处理,得到HTML报告,并发布测试结果邮件的步骤包括:
通过所述Jenkins向所述Python脚本发送解析命令;
根据所述解析命令调用所述Python脚本对所述JTL结果文件进行解析处理,得到所述HTML报告;
根据所述HTML报告,生成所述测试结果邮件并进行发布。
在本实施例中,测试完成得到的数据结果源数据包括JTL结果文件,在得到数据结果源数据后,即可通过Jenkins向预设的Python脚本发送解析命令,并根据解析命令调用该Python脚本对JTL结果文件进行解析处理,得到HTML报告,而后根据HTML报告,生成测试结果邮件并进行发布。具体地,由于JMeter脚本执行性能测试后,所生成的JTL结果文件较大,原生的HTML解析方法耗时非常长,因此可以通过Jenkins调用Python脚本对其进行解析处理,以提高解析效率,从而形成Jenkins+Taurus+Python的测试框架,解析后即可得到HTML的数据报告,根据HTML报告,还可以生成测试结果邮件,并对测试结果邮件进行发布,以将测试结果通知到相关测试人员。
本申请通过Python脚本的应用,对测试结果源数据进行解析,可以提高解析效率,并将测试结果及时通知相关测试人员,减少了等待时间,其主要形成了Jenkins+Taurus+Python的测试框架,使得整体的测试效率得到了提高,有利于性能自动化测试的常态化。
在本实施例的一些可选的实现方式中,上述HTML报告包括简版HTML报告和完整HTML报告,所述简版HTML报告包括测试结果对应的简化数据,所述完整HTML报告包括测试结果对应的详细数据和图表。
在本实施例中,在测试结果源数据解析完成后,得到的HTML报告包括简版HTML报告和完整HTML报告,其中,简版HTML仅包括了测试结果对应的简化数据,而完整HTML报告则包括了测试结果对应的详细数据和图片,展示了详细的测试结果。
本申请通过最终自定义输出的简版HTML报告和完整HTML报告,使得测试结果可以得到多维度的展示,有助于对测试结果进行理解。
在本实施例的一些可选的实现方式中,上述根据所述HTML报告,生成所述测试结果邮件并进行发布的步骤包括;
读取预先配置的邮件模板,根据所述简版HTML报告和所述邮件模板生成所述测试结果邮件;
将所述测试结果邮件发布至所述测试项目对应的管理者邮箱。
在本实施例中,得到测试结果对应的简版HTML报告,即可读取预先配置的邮件模板,并根据简版HTML报告和邮件模板生成测试结果邮件,再将测试结果邮件发布至测试项目对应的管理者邮箱。具体地,测试结果对应的简版HTML报告可以用于邮件发布,通过读取预先配置好的邮件模板,再将简版HTML报告与邮件模板结合,即可生成测试结果邮件,而后将测试结果邮件发布至测试项目对应的管理者邮箱,即相关测试人员的邮箱,使得相关测试人员可以快速了解测试结果。
可选地,可以在发布测试结果邮件后再进一步完善测试结果对应的详细数据和图表,最终生成完整的HTMl报告,通过测试结果邮件提前发布测试结果,有利于提高整个框架的执行效率。
本申请通过对于简版HTML报告的邮件发布,使得测试人员可以便捷地了解测试项目的大致测试结果,有助于测试结果得到第一时间关注,并且可以提高整个框架的执行效率。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,该计算机程序可存储于一计算机可读取存储介质中,该程序在执行时,可包括如上述各方法的实施例的流程。其中,前述的存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory,ROM)等非易失性存储介质,或随机存储记忆体(Random Access Memory,RAM)等。
应该理解的是,虽然附图的流程图中的各个步骤按照箭头的指示依次显示,但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明,这些步骤的执行并没有严格的顺序限制,其可以以其他的顺序执行。而且,附图的流程图中的至少一部分步骤可以包括多个子步骤或者多个阶段,这些子步骤或者阶段并不必然是在同一时刻执行完成,而是可以在不同的时刻执行,其执行顺序也不必然是依次进行,而是可以与其他步骤或者其他步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。
进一步参考图3,作为对上述图2所示方法的实现,本申请提供了一种性能自动化测试系统的一个实施例,该系统实施例与图2所示的方法实施例相对应,该系统具体可以应用于各种电子设备中。
如图3所示,本实施例所述的性能自动化测试系统300包括:配置模块301、构建模块302、测试模块303以及解析模块304。其中:
配置模块301,用于获取测试项目对应的预设配置信息,以及Taurus对应的预设yaml文件模板,根据所述预设配置信息和所述预设yaml文件模板,自动生成可编辑的yaml配置文件;
构建模块302,用于接收到携带有构建信息的构建指令时,根据所述构建信息在Jenkins中构建测试任务;
测试模块303,用于当所述测试任务触发时,根据执行命令对所述Taurus进行调用,以通过所述yaml配置文件驱动预设的JMeter脚本进行测试,得到测试结果源数据;
解析模块304,用于通过预设的Python脚本对所述测试结果源数据进行解析处理,得到HTML报告,并发布测试结果邮件。
本申请提供的性能自动化测试系统,通过Jenkins+Taurus+Python的测试框架,搭建了持续集成的性能自动化测试平台,从而实现软件的性能自动化测试,与自动化测试的传统方式相比,降低了测试流程的复杂程度,达到了减少人工维护成本的效果,并且提高了测试效率,有利于性能自动化测试的常态化。
在本实施例的一些可选的实现方式中,上述预设配置信息包括JMeter安装路径、项目路径以及测试脚本路径,配置模块301还用于:
通过Python脚本,将所述JMeter安装路径、所述项目路径以及所述测试脚本路径自动填充至所述预设yaml文件模板,得到所述yaml配置文件;
以使得可以通过编辑所述JMeter安装路径、所述项目路径以及所述测试脚本路径,对所述测试项目的测试策略进行更新。
本申请提供的性能自动化测试系统,通过配置测试项目对应的JMeter安装路径、项目路径以及测试脚本路径等基本信息,得到配置了测试项目的测试场景所包括的基本信息后的yaml配置文件,使得后续可以通过yaml配置文件驱动JMeter脚本进行性能自动化测试,降低了测试流程的复杂程度,达到了减少人工维护成本的效果,并且提高了测试效率,有利于性能自动化测试的常态化。
在本实施例的一些可选的实现方式中,性能自动化测试系统300还用于:
获取预设的脚本规范;
按照所述脚本规范,开发得到所述JMeter脚本。
本申请提供的性能自动化测试系统,通过应用自定义的脚本规范开发用于后续测试的Jmeter脚本,可以提高最终对于测试结果的解析效率,此外,可以支持服务器的资源率在后续生成的HTML报告上展示。
在本实施例的一些可选的实现方式中,上述JMeter脚本包括事务控制器和资源监控组件,所述事务控制器与所述JMeter脚本中的JMX文件命名一致,所述资源监控组件以Res_CPU和Res_Memory命名。
本申请提供的性能自动化测试系统,通过对于预设的JMeter脚本的设置,使得后续测试过程中可以通过编辑Taurus的yaml配置文件调整测试策略,可以很容易地驱动JMeter脚本进行测试,从而降低了测试流程的复杂程度,并且提高了测试效率。
在本实施例的一些可选的实现方式中,上述数据结果源数据包括JTL结果文件,解析模块304还用于:
通过所述Jenkins向所述Python脚本发送解析命令;
根据所述解析命令调用所述Python脚本对所述JTL结果文件进行解析处理,得到所述HTML报告;
根据所述HTML报告,生成所述测试结果邮件并进行发布。
本申请提供的性能自动化测试系统,通过Python脚本的应用,对测试结果源数据进行解析,可以提高解析效率,并将测试结果及时通知相关测试人员,减少了等待时间,其主要形成了Jenkins+Taurus+Python的测试框架,使得整体的测试效率得到了提高,有利于性能自动化测试的常态化。
在本实施例的一些可选的实现方式中,上述HTML报告包括简版HTML报告和完整HTML报告,所述简版HTML报告包括测试结果对应的简化数据,所述完整HTML报告包括测试结果对应的详细数据和图表。
本申请提供的性能自动化测试系统,通过最终自定义输出的简版HTML报告和完整HTML报告,使得测试结果可以得到多维度的展示,有助于对测试结果进行理解。
在本实施例的一些可选的实现方式中,性能自动化测试系统300还用于:
读取预先配置的邮件模板,根据所述简版HTML报告和所述邮件模板生成所述测试结果邮件;
将所述测试结果邮件发布至所述测试项目对应的管理者邮箱。
本申请提供的性能自动化测试系统,通过对于简版HTML报告的邮件发布,使得测试人员可以便捷地了解测试项目的大致测试结果,有助于测试结果得到第一时间关注,并且可以提高整个框架的执行效率。
为解决上述技术问题,本申请实施例还提供计算机设备。具体请参阅图4,图4为本实施例计算机设备基本结构框图。
所述计算机设备4包括通过系统总线相互通信连接存储器41、处理器42、网络接口43。需要指出的是,图中仅示出了具有组件41-43的计算机设备4,但是应理解的是,并不要求实施所有示出的组件,可以替代的实施更多或者更少的组件。其中,本技术领域技术人员可以理解,这里的计算机设备是一种能够按照事先设定或存储的指令,自动进行数值计算和/或信息处理的设备,其硬件包括但不限于微处理器、专用集成电路(ApplicationSpecific Integrated Circuit,ASIC)、可编程门阵列(Field-Programmable GateArray,FPGA)、数字处理器(Digital Signal Processor,DSP)、嵌入式设备等。
所述计算机设备可以是桌上型计算机、笔记本、掌上电脑及云端服务器等计算设备。所述计算机设备可以与用户通过键盘、鼠标、遥控器、触摸板或声控设备等方式进行人机交互。
所述存储器41至少包括一种类型的可读存储介质,所述可读存储介质包括闪存、硬盘、多媒体卡、卡型存储器(例如,SD或DX存储器等)、随机访问存储器(RAM)、静态随机访问存储器(SRAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、可编程只读存储器(PROM)、磁性存储器、磁盘、光盘等。在一些实施例中,所述存储器41可以是所述计算机设备4的内部存储单元,例如该计算机设备4的硬盘或内存。在另一些实施例中,所述存储器41也可以是所述计算机设备4的外部存储设备,例如该计算机设备4上配备的插接式硬盘,智能存储卡(Smart Media Card,SMC),安全数字(Secure Digital,SD)卡,闪存卡(FlashCard)等。当然,所述存储器41还可以既包括所述计算机设备4的内部存储单元也包括其外部存储设备。本实施例中,所述存储器41通常用于存储安装于所述计算机设备4的操作系统和各类应用软件,例如性能自动化测试方法的程序代码等。此外,所述存储器41还可以用于暂时地存储已经输出或者将要输出的各类数据。
所述处理器42在一些实施例中可以是中央处理器(Central Processing Unit,CPU)、控制器、微控制器、微处理器、或其他数据处理芯片。该处理器42通常用于控制所述计算机设备4的总体操作。本实施例中,所述处理器42用于运行所述存储器41中存储的程序代码或者处理数据,例如运行所述性能自动化测试方法的程序代码。
所述网络接口43可包括无线网络接口或有线网络接口,该网络接口43通常用于在所述计算机设备4与其他电子设备之间建立通信连接。
本申请还提供了另一种实施方式,即提供一种计算机可读存储介质,所述计算机可读存储介质存储有性能自动化测试程序,所述性能自动化测试程序可被至少一个处理器执行,以使所述至少一个处理器执行如上述的性能自动化测试方法的步骤。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端设备(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本申请各个实施例所述的方法。
显然,以上所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例,附图中给出了本申请的较佳实施例,但并不限制本申请的专利范围。本申请可以以许多不同的形式来实现,相反地,提供这些实施例的目的是使对本申请的公开内容的理解更加透彻全面。尽管参照前述实施例对本申请进行了详细的说明,对于本领域的技术人员来而言,其依然可以对前述各具体实施方式所记载的技术方案进行修改,或者对其中部分技术特征进行等效替换。凡是利用本申请说明书及附图内容所做的等效结构,直接或间接运用在其他相关的技术领域,均同理在本申请专利保护范围之内。
Claims (10)
1.一种性能自动化测试方法,其特征在于,包括下述步骤:
获取测试项目对应的预设配置信息,以及Taurus对应的预设yaml文件模板,根据所述预设配置信息和所述预设yaml文件模板,自动生成可编辑的yaml配置文件;
接收到携带有构建信息的构建指令时,根据所述构建信息在Jenkins中构建测试任务;
当所述测试任务触发时,根据执行命令对所述Taurus进行调用,以通过所述yaml配置文件驱动预设的JMeter脚本进行测试,得到测试结果源数据;
通过预设的Python脚本对所述测试结果源数据进行解析处理,得到HTML报告,并发布测试结果邮件。
2.根据权利要求1所述的性能自动化测试方法,其特征在于,所述预设配置信息包括JMeter安装路径、项目路径以及测试脚本路径,所述根据所述预设配置信息和所述预设yaml文件模板,自动生成可编辑的yaml配置文件的步骤,具体包括:
通过Python脚本,将所述JMeter安装路径、所述项目路径以及所述测试脚本路径自动填充至所述预设yaml文件模板,得到所述yaml配置文件;
以使得可以通过编辑所述JMeter安装路径、所述项目路径以及所述测试脚本路径,对所述测试项目的测试策略进行更新。
3.根据权利要求1所述的性能自动化测试方法,其特征在于,所述获取测试项目对应的预设配置信息,以及Taurus对应的预设yaml文件模板,根据所述预设配置信息和所述预设yaml文件模板,自动生成可编辑的yaml配置文件的步骤之前,还包括:
获取预设的脚本规范;
按照所述脚本规范,开发得到所述JMeter脚本。
4.根据权利要求1所述的性能自动化测试方法,其特征在于,所述JMeter脚本包括事务控制器和资源监控组件,所述事务控制器与所述JMeter脚本中的JMX文件命名一致,所述资源监控组件以Res_CPU和Res_Memory命名。
5.根据权利要求1所述的性能自动化测试方法,其特征在于,所述数据结果源数据包括JTL结果文件,所述通过预设的Python脚本对所述测试结果源数据进行解析处理,得到HTML报告,并发布测试结果邮件的步骤,具体包括:
通过所述Jenkins向所述Python脚本发送解析命令;
根据所述解析命令调用所述Python脚本对所述JTL结果文件进行解析处理,得到所述HTML报告;
根据所述HTML报告,生成所述测试结果邮件并进行发布。
6.根据权利要求1至5任一项所述的性能自动化测试方法,其特征在于,所述HTML报告包括简版HTML报告和完整HTML报告,所述简版HTML报告包括测试结果对应的简化数据,所述完整HTML报告包括测试结果对应的详细数据和图表。
7.根据权利要求6所述的性能自动化测试方法,其特征在于,所述根据所述HTML报告,生成所述测试结果邮件并进行发布的步骤,具体包括;
读取预先配置的邮件模板,根据所述简版HTML报告和所述邮件模板生成所述测试结果邮件;
将所述测试结果邮件发布至所述测试项目对应的管理者邮箱。
8.一种性能自动化测试系统,其特征在于,包括:
配置模块,用于获取测试项目对应的预设配置信息,以及Taurus对应的预设yaml文件模板,根据所述预设配置信息和所述预设yaml文件模板,自动生成可编辑的yaml配置文件;
构建模块,用于接收到携带有构建信息的构建指令时,根据所述构建信息在Jenkins中构建测试任务;
测试模块,用于当所述测试任务触发时,根据执行命令对所述Taurus进行调用,以通过所述yaml配置文件驱动预设的JMeter脚本进行测试,得到测试结果源数据;
解析模块,用于通过预设的Python脚本对所述测试结果源数据进行解析处理,得到HTML报告,并发布测试结果邮件。
9.一种计算机设备,其特征在于,包括存储器和处理器,所述存储器中存储有计算机程序,所述处理器执行所述计算机程序时实现如权利要求1至7中任一项所述的性能自动化测试方法的步骤。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现如权利要求1至7中任一项所述的性能自动化测试方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310952248.7A CN116974927A (zh) | 2023-07-31 | 2023-07-31 | 性能自动化测试方法、系统、计算机设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310952248.7A CN116974927A (zh) | 2023-07-31 | 2023-07-31 | 性能自动化测试方法、系统、计算机设备及存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN116974927A true CN116974927A (zh) | 2023-10-31 |
Family
ID=88472681
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202310952248.7A Pending CN116974927A (zh) | 2023-07-31 | 2023-07-31 | 性能自动化测试方法、系统、计算机设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN116974927A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117251382A (zh) * | 2023-11-17 | 2023-12-19 | 北京安锐卓越信息技术股份有限公司 | 一种自动化性能压测周期执行方法及装置 |
-
2023
- 2023-07-31 CN CN202310952248.7A patent/CN116974927A/zh active Pending
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117251382A (zh) * | 2023-11-17 | 2023-12-19 | 北京安锐卓越信息技术股份有限公司 | 一种自动化性能压测周期执行方法及装置 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN113254445B (zh) | 实时数据存储方法、装置、计算机设备及存储介质 | |
CN111782304B (zh) | 分页加载数据逻辑控制方法、装置、计算机设备及介质 | |
CN116974927A (zh) | 性能自动化测试方法、系统、计算机设备及存储介质 | |
CN112860662B (zh) | 自动化生产数据血缘关系建立方法、装置、计算机设备及存储介质 | |
CN117033249A (zh) | 一种测试用例生成方法、装置、计算机设备及存储介质 | |
CN117114618A (zh) | 待办项跟进方法、系统、计算机设备及存储介质 | |
CN114626352B (zh) | 报表自动化生成方法、装置、计算机设备及存储介质 | |
CN116112457A (zh) | 消息通知的方法、装置、计算机设备及存储介质 | |
CN116383787A (zh) | 页面创建方法、装置、计算机设备及存储介质 | |
CN116450723A (zh) | 数据提取方法、装置、计算机设备及存储介质 | |
CN110765610B (zh) | Pdm集成方法、装置、计算机设备及存储介质 | |
CN116108814B (zh) | 甘特图处理方法、装置、计算机设备及存储介质 | |
CN117527561A (zh) | 功能编排方法、装置、计算机设备及存储介质 | |
CN117290019A (zh) | 一种接口调用方法、装置、计算机设备和存储介质 | |
CN116467145A (zh) | 页面性能数据采集方法、装置、计算机设备及存储介质 | |
CN117111957A (zh) | 代码生成方法、装置、计算机设备及存储介质 | |
CN116149665A (zh) | 一种xaml文件修改方法、装置、计算机设备及存储介质 | |
CN117828221A (zh) | 一种基于埋点技术的页面事件统计方法及其相关设备 | |
CN116304431A (zh) | 一种网页自动化方法、装置、计算机设备及存储介质 | |
CN116795882A (zh) | 数据获取方法、装置、计算机设备及存储介质 | |
CN114675813A (zh) | 模板语法的统一方法、装置、计算机设备及存储介质 | |
CN116860644A (zh) | 自动化测试方法、装置、计算机设备及存储介质 | |
CN117806738A (zh) | 基于微链路模型的业务调度方法、装置、设备及存储介质 | |
CN114969482A (zh) | 在线配置接口自动完成请求的方法、及其相关设备 | |
CN116166270A (zh) | 一种xaml文件修正方法、装置、计算机设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |