CN107807877B - 一种代码性能测试的方法和装置 - Google Patents

一种代码性能测试的方法和装置 Download PDF

Info

Publication number
CN107807877B
CN107807877B CN201610811529.0A CN201610811529A CN107807877B CN 107807877 B CN107807877 B CN 107807877B CN 201610811529 A CN201610811529 A CN 201610811529A CN 107807877 B CN107807877 B CN 107807877B
Authority
CN
China
Prior art keywords
test
tested
code
performance
script
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201610811529.0A
Other languages
English (en)
Other versions
CN107807877A (zh
Inventor
王浩龙
郭怡清
侯磊
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Jingdong Century Trading Co Ltd
Beijing Jingdong Shangke Information Technology Co Ltd
Original Assignee
Beijing Jingdong Century Trading Co Ltd
Beijing Jingdong Shangke Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Jingdong Century Trading Co Ltd, Beijing Jingdong Shangke Information Technology Co Ltd filed Critical Beijing Jingdong Century Trading Co Ltd
Priority to CN201610811529.0A priority Critical patent/CN107807877B/zh
Publication of CN107807877A publication Critical patent/CN107807877A/zh
Application granted granted Critical
Publication of CN107807877B publication Critical patent/CN107807877B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/36Preventing errors by testing or debugging software
    • G06F11/3668Software testing

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Quality & Reliability (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Debugging And Monitoring (AREA)

Abstract

本发明提供一种代码性能测试的方法和装置,能实现各环节一站式的全流程自动化,自动智能分析测试结果数据,智能判断性能测试是否满足需求,可以直观地通过图形化界面快速发现不同版本间的性能差异和异常数据,实时通知人员处理,减少人力成本并降低出错风险。本发明的代码性能测试的方法,包括:当满足预定的触发条件,检查被测代码是否有更新,所述被测代码与测试配置文件相关联,所述测试配置文件包括测试参数和被测性能指标,每个被测性能指标对应预设的测试方案;当所述被测代码有更新,则启动对所述被测代码的测试,所述测试包括执行每个被测性能指标对应的测试方案以得到该被测性能指标的测试值;输出所得到的各被测性能指标的测试值。

Description

一种代码性能测试的方法和装置
技术领域
本发明涉及计算机及其软件技术领域,特别地涉及一种代码性能测试的方法和装置。
背景技术
随着互联网电商的高速发展,对后台系统的性能要求越来越高,大型电商系统一旦出现性能问题,不但给用户购物造成不便,而且会造成直接的经济损失,性能问题对整个电商品牌造成的冲击更是无法衡量的,甚至让用户怀疑公司的技术支撑能力,而性能测试作为评估系统性能的有效手段,也上升到了越来越重要的位置。
传统的性能测试需要更新版本、部署环境、准备性能测试程序、性能压测(即性能压力测试)、性能测试结果数据收集、性能测试结果数据分析等,而这其中的每个环节都是孤立的,需要由人工操作,操作完成之后再进行下一个环节的操作,人力参与程度过高,造成人力浪费和人力操作的风险增大,数据分析困难,不能有效直接地反馈版本之间的差异。此外,版本更新、版本部署、性能测试执行过程中配置项非常多,例如版本更新中的容器配置、数据库配置、缓存配置、集群配置等,如果有一处配置出错,分析定位错误就需要花费大量的时间。并且,性能测试结果数据搜集之后,对结果数据进行分析,需要借助相关的生成工具生成曲线图或者图表之后观察数据趋势和异常,结合趋势和异常分析可能存在的性能问题。
综上所述,现有技术存在如下不足:一是版本是否更新、版本构建、应用部署、测试程序调用、测试数据分析及报表生成等,每个环节之间的衔接切换都需要人力操作参与,耗费人力资源;二是生成测试数据过程繁琐,需要切换不同的脚本程序执行;三是不能自动分析压测完成后的数据,并在分析的基础上形成结论,人力参与环节过多,造成每个环节人为出错的风险增大。
可见,亟需一套能在性能测试的全部环节实现自动化的方案。
发明内容
有鉴于此,本发明提供一种代码性能测试的方法和装置,能够实现各环节的一站式的全流程自动化,实现敏捷项目下的版本迭代自动性能测试,并自动智能分析测试结果数据,智能判断性能测试是否满足需求,可以非常直观地通过图形化界面快速发现不同版本之间的性能差异和异常的数据,并实时通知相关人员处理,让测试人员从繁琐复杂的数据分析中解脱出来,减少人力干预成本,并降低人力参与出错的风险,实现项目高效率迭代性能测试。
为实现上述目的,根据本发明的一个方面,提供了一种代码性能测试的方法。
一种代码性能测试的方法,当满足预定的触发条件,检查被测代码是否有更新,所述被测代码与测试配置文件相关联,所述测试配置文件包括测试参数和被测性能指标,每个被测性能指标对应预设的测试方案;当所述被测代码有更新,则启动对所述被测代码的测试,所述测试包括执行每个被测性能指标对应的测试方案以得到该被测性能指标的测试值;输出所得到的各被测性能指标的测试值。
可选地,所述触发条件包括下述之一:周期性时间点;接收到测试指令。
可选地,每个所述测试方案利用对应的脚本来执行。
可选地,所述测试方案在相应的应用服务器上执行。
可选地,所述测试参数包括应用服务器配置参数、数据库配置参数、缓存配置参数、集群配置参数。
可选地,输出所得到的各被测性能指标的测试值包括对所述测试值进行各种对照展示。
可选地,输出所得到的各被测性能指标的测试值包括把得到的测试值与预定的阈值比较,当超出所述阈值时,发出报警消息。
根据本发明的另一方面,提供了一种代码性能测试的装置。
一种代码性能测试的装置,包括:检查模块,用于当满足预定的触发条件,检查被测代码是否有更新,所述被测代码与测试配置文件相关联,所述测试配置文件包括测试参数和被测性能指标,每个被测性能指标对应预设的测试方案;测试模块,用于当所述被测代码有更新时,则启动对所述被测代码的测试,所述测试包括执行每个被测性能指标对应的测试方案以得到该被测性能指标的测试值;输出模块,用于输出所得到的各被测性能指标的测试值。
可选地,所述触发条件包括下述之一:周期性时间点;接收到测试指令。
可选地,每个所述测试方案利用对应的脚本来执行。
可选地,所述测试模块还用于:在相应的应用服务器上执行所述测试方案。
可选地,所述测试参数包括应用服务器配置参数、数据库配置参数、缓存配置参数、集群配置参数。
可选地,所述输出模块还用于:对所述测试值进行各种对照展示。
可选地,所述输出模块还用于:把得到的测试值与预定的阈值比较,当超出所述阈值时,发出报警消息。
根据本发明的再一方面,提供了一种代码性能测试的装置。
一种代码性能测试的装置,包括:存储器和处理器,其中,所述存储器存储指令;所述处理器执行所述指令用于:当满足预定的触发条件,检查被测代码是否有更新,所述被测代码与测试配置文件相关联,所述测试配置文件包括测试参数和被测性能指标,每个被测性能指标对应预设的测试方案;当所述被测代码有更新,则启动对所述被测代码的测试,所述测试包括执行每个被测性能指标对应的测试方案以得到该被测性能指标的测试值;输出所得到的各被测性能指标的测试值。
根据本发明的再一方面,提供了一种电子设备。
一种电子设备,包括:一个或多个处理器;存储装置,用于存储一个或多个程序,当所述一个或多个程序被所述一个或多个处理器执行时,使得所述一个或多个处理器实现代码性能测试的方法。
根据本发明的再一方面,提供了一种计算机可读介质。
一种计算机可读介质,其上存储有计算机程序,所述程序被处理器执行时实现代码性能测试的方法。
根据本发明的技术方案,当满足预定的触发条件,检查被测代码是否有更新,其中,被测代码与测试配置文件相关联,测试配置文件包括测试参数和被测性能指标,每个被测性能指标对应预设的测试方案,当被测代码有更新,则启动对被测代码的测试,测试包括执行每个被测性能指标对应的测试方案以得到该被测性能指标的测试值,最后,输出所得到的各被测性能指标的测试值。使用本发明的技术方案,能够实现版本构建、部署环境、性能压测、性能测试结果数据收集、性能测试结果数据分析、版本性能指标变化、是否满足性能测试需求的一站式各环节的全流程自动化,一键式解决性能测试环境的部署工作。实现敏捷项目下的版本迭代自动性能测试,并自动智能分析测试结果数据,智能判断性能测试是否满足需求,给出性能测试结论,对测试结果数据形成报表,可以非常直观地通过图形化界面快速发现不同版本之间的性能差异和异常的数据,并实时通知相关人员处理,让测试人员从繁琐复杂的数据分析中解脱出来,减少人力干预成本,并降低人力参与出错的风险,实现项目高效率迭代性能测试。
附图说明
附图用于更好地理解本发明,不构成对本发明的不当限定。其中:
图1是根据本发明实施例的代码性能测试的方法的主要步骤示意图;
图2是根据本发明实施例的代码性能测试的初始测试配置的流程示意图;
图3是根据本发明实施例的代码性能压力测试服务的流程示意图;
图4是根据本发明实施例的代码性能测试的测试值分析服务的流程示意图;
图5根据本发明实施例的代码性能测试的装置的主要模块示意图。
具体实施方式
以下结合附图对本发明的示范性实施例做出说明,其中包括本发明实施例的各种细节以助于理解,应当将它们认为仅仅是示范性的。因此,本领域普通技术人员应当认识到,可以对这里描述的实施例做出各种改变和修改,而不会背离本发明的范围和精神。同样,为了清楚和简明,以下的描述中省略了对公知功能和结构的描述。
图1是根据本发明实施例的代码性能测试的方法的主要步骤示意图。
如图1所示,本发明实施例的代码性能测试的方法主要包括如下的步骤S11至步骤S13。
步骤S11:当满足预定的触发条件,检查被测代码是否有更新。
其中,触发条件包括如下的其中之一:周期性时间点以及接收到测试指令。
被测代码与测试配置文件相关联,且测试配置文件主要包括测试参数和被测性能指标,每个被测性能指标对应预设的测试方案,每个测试方案可利用对应的脚本来执行。测试参数具体可以包括:应用服务器配置参数、数据库配置参数、缓存配置参数、集群配置参数。
步骤S12:当被测代码有更新,则启动对被测代码的测试,该测试包括执行每个被测性能指标对应的测试方案以得到该被测性能指标的测试值。
其中,测试方案可以在相应的应用服务器上执行。
步骤S13:输出所得到的各被测性能指标的测试值。
其中,输出所得到的各被测性能指标的测试值可以包括对测试值进行各种对照展示,还可以包括把得到的测试值与预定的阈值比较,并在超出该预定的阈值时,发出报警消息。
下面结合图2、图3、图4进一步详细地介绍本发明实施例的代码性能测试的方法的实施流程。
图2是本发明实施例的代码性能测试的初始测试配置的流程示意图。如图2所示,该初始测试配置的流程主要包括步骤S21至步骤S26。
步骤S21:检查被测代码是否有更新,若是,则执行步骤S22,否则执行步骤S26。
可在满足预定的触发条件时开始检查被测代码是否有更新,该触发条件可以是接收到测试指令,或者,达到一个周期性时间点,例如,每天晚上零点(24:00)检测代码是否有更新。
检查被测代码是否有更新包括检查Git(代码仓库)中的被测代码的主干及分支代码是否更新,还包括检查被测代码的版本号是否更新,例如检查版本的哈希值(hash值)。
步骤S22:根据被测代码生成用于测试的可执行包。
利用Git(代码仓库)从代码服务器获取被测代码,通过版本管理工具(例如maven)将被测代码打包生成用于测试的可执行包。
步骤S23:判断生成可执行包是否成功,若是,则执行步骤S24,否则,执行步骤S26。
步骤S24:生成进行代码性能测试所需的测试配置文件。
生成测试配置文件主要是配置测试参数和配置被测性能指标。其中,测试参数具体可以包括:应用服务器配置参数、数据库配置参数、缓存配置参数、集群配置参数。配置测试参数是根据测试的需要,将可执行包中的应用服务器、数据库、缓存、集群等被测代码的线上配置信息更新为代码性能测试时所需要的配置,然后保存这些配置的参数值。上述测试参数也可以灵活调整,以满足不同时段、不同场景下对测试配置文件的需要。配置被测性能指标可用户需求灵活设置被测性能指标,配置好该指标之后,在后续执行测试方案时将对被测代码中的这些被测性能指标进行测试。应用服务器例如Apache tomcat(一种用于部署应用的web容器(服务程序))。
步骤S25:获取各应用服务器的信息,并将可执行包推送到各个应用服务器进行应用实例部署。
对可执行包形式的被测对象执行代码性能测试主要是在各个应用服务器中执行,多个应用服务器构成集群,并且集群的每个节点为一个应用服务器。通过持续集成工具(例如jenkins)调用linux操作系统后台的shell程序,shell程序首先读取被测系统的集群节点的信息(如所对应的应用服务器(如Apache tomcat),集群节点数、节点IP、节点路径等),然后会通过循环逻辑使用scp命令(linux中的文件传输命令)将可执行包推送到集群的每个节点(应用服务器),并使用SSH(Secure Shell,一种安全协议)登录到应用服务器,停止和重启应用服务以完成应用实例的部署。
步骤S26:发送通知消息。
当被测代码无更新或者生成可执行包的操作失败,将以邮件等形式向相关的测试人员发送通知消息,以便尽快进行人工处理。
完成上述的初始测试配置,也就完成了集群性能测试环境的部署,然后在相应的应用服务器中即可进行性能压测服务,并且性能压测服务只需按照上述的初始测试配置进行,无需人工干预。
图3是根据本发明实施例的代码性能压力测试服务的流程示意图。
如图3所示,本发明实施例的代码性能压力测试服务流程主要包括如下的步骤S31至步骤S34。
步骤S31:通过预先编制的脚本来进行探测测试。
在完成了初始测试配置之后,运行被测代码,并调用shell程序来执行预先编制的脚本(例如所有预存的jmeter测试用例脚本)以进行探测测试,探测测试主要是对所有的接口进行一次测试,根据各个接口测试所得到的返回值可确定各个接口的性能是否满足要求。例如,测试接口A,由于接口A所依赖的应用服务器配置参数、数据库配置参数、缓存配置参数、集群配置参数等测试参数已经在初始测试配置的流程中配置好,那么,执行探测测试时,只需从被测代码所属的系统的服务器上请求该接口A的信息,通过接口A的信息就可以得到A所依赖的上述测试参数的信息,然后执行探测测试,根据返回值确定该接口A的相关代码是否能正常运行,例如接口A的关联网页是否能打开等。
步骤S32:分析探测测试的结果,并根据被测性能指标生成对应的测试方案。
分析探测测试的结果主要包括:在探测测试完成后,把通过探测测试用例的用例名和测试结果按照规则写入到临时文件,对该临时文件进行解析。进行上述解析之后,根据被测性能指标抽取出需要的参数数据,重新生成测试用例脚本,例如,性能压测(性能压力测试)是使用Jmeter(Apache Jmeter,为一种性能压测工具)压测,则测试用例脚本需按照Jmeter压测的规则(比如命令执行格式,以及压测脚本中的线程数、压测时间、压测数据等),生成性能场景,然后根据预先设置的被测性能指标生成对应的测试方案。测试方案具体包括测试脚本和用于执行测试脚本的命令,还可以包括对并发数等被测性能指标的更改等信息。
步骤S33:执行每个被测性能指标对应的测试方案以得到该被测性能指标的测试值。
执行性能测试方案的过程还包括,根据测试方案的执行时间调用一个shell循环脚本对磁盘进行监控,并实时清理大于设定阀值的日志,以防止磁盘空间写满后续测试方案无法正常执行。
步骤S34:将得到的测试值推送到性能分析服务程序所在的物理路径。
得到的每组测试值被实时地重定向到数据文件中,以便在执行完该压力测试之后,将测试值以数据文件的形式推送到测试值分析服务程序所在的物理路径以便进一步地分析处理测试值。
图4是根据本发明实施例的代码性能测试的测试值分析服务的流程示意图。
如图4所示,本发明实施例的代码性能测试的测试值分析服务流程主要包括如下的步骤S41至步骤S42。
步骤S41:保存推送过来的测试值。
具体地,把推送过来的数据文件(其中包含测试值)按照所需要的字段抽取数据,并使用python脚本将抽取的数据存入数据库。
步骤S42:对测试值进行分析预警和对照展示。
对测试值进行分析预警,具体可以包括:设置预定的阈值,并从数据库中抽出测试值的一些指标,例如TPS(系统吞吐量)、响应时间等指标,将测试值与预定的阈值比较,并在超出该预定的阈值时,发出报警消息。超出预定的阈值说明所测代码的性能不满足需求,可通过触动报警邮件等方式发出报警消息,以便通知对应的测试人员尽快处理。
对测试值进行对照展示,主要可通过四个维度进行对照展示,具体分为:混合场景、接口方法、多接口汇总、不同代码版本。其中,通过混合场景对照展示,例如对照展示不同接口或不同测试时间的测试值,以便确定测试值之间数据变化、存在的性能问题等,从而得出被测代码性能的差异。通过接口方法进行对照展示主要是展示测试单条接口数据的测试值。通过多接口汇总对照展示主要是展示多接口汇总的数据的测试值。通过不同代码版本对照展示,主要是展示不同被测代码的版本所得的测试值。测试人员可以根据上述对照展示的结果的变化趋势及异常情况,快速分析出可能存在的性能问题。
通过上述图2、图3、图4中的初始测试配置、压力测试服务、测试值分析服务等流程,实现自动打包被测代码、性能测试环境的自动部署、性能测试自动执行、性能测试结果数据(测试值)的智能分析等整个性能测试过程,测试人员只需配置好测试方案的前置条件,方案执行过程中实现了测试人员的零参与。
图5根据本发明实施例的代码性能测试的装置的主要模块示意图。
如图5所示,本发明实施例的代码性能测试的装置50主要包括:检查模块51、测试模块52、输出模块53。其中,检查模块51用于当满足预定的触发条件,检查被测代码是否有更新,被测代码与测试配置文件相关联,测试配置文件包括测试参数和被测性能指标,每个被测性能指标对应预设的测试方案;测试模块52用于当被测代码有更新时,则启动对被测代码的测试,该测试包括执行每个被测性能指标对应的测试方案以得到该被测性能指标的测试值;输出模块53用于输出所得到的各被测性能指标的测试值。
其中,触发条件包括下述之一:周期性时间点、接收到测试指令。
测试参数可以包括应用服务器配置参数、数据库配置参数、缓存配置参数、集群配置参数。
每个测试方案利用对应的脚本来执行。
测试模块52还可以用于在相应的应用服务器上执行测试方案。
输出模块53还可以用于对测试值进行各种对照展示,以及,用于把得到的测试值与预定的阈值比较,当超出该阈值时,发出报警消息。
本发明实施例的另一种代码性能测试的装置,主要包括:存储器和处理器,其中,存储器存储指令;处理器执行该指令用于:当满足预定的触发条件,检查被测代码是否有更新,被测代码与测试配置文件相关联,测试配置文件包括测试参数和被测性能指标,每个被测性能指标对应预设的测试方案;当被测代码有更新,则启动对被测代码的测试,该测试包括执行每个被测性能指标对应的测试方案以得到该被测性能指标的测试值;输出所得到的各被测性能指标的测试值。
根据本发明实施例的技术方案,当满足预定的触发条件,检查被测代码是否有更新,其中,被测代码与测试配置文件相关联,测试配置文件包括测试参数和被测性能指标,每个被测性能指标对应预设的测试方案,当被测代码有更新,则启动对被测代码的测试,测试包括执行每个被测性能指标对应的测试方案以得到该被测性能指标的测试值,最后,输出所得到的各被测性能指标的测试值。使用本发明实施例的技术方案,能够实现版本构建、部署环境、性能压测、性能测试结果数据收集、性能测试结果数据分析、版本性能指标变化、是否满足性能测试需求的一站式各环节的全流程自动化,一键式解决性能测试环境的部署工作。实现敏捷项目下的版本迭代自动性能测试,并自动智能分析测试结果数据,智能判断性能测试是否满足需求,给出性能测试结论,对测试结果数据形成报表,可以非常直观地通过图形化界面快速发现不同版本之间的性能差异和异常的数据,并实时通知相关人员处理,让测试人员从繁琐复杂的数据分析中解脱出来,减少人力干预成本,并降低人力参与出错的风险,实现项目高效率迭代性能测试。
上述具体实施方式,并不构成对本发明保护范围的限制。本领域技术人员应该明白的是,取决于设计要求和其他因素,可以发生各种各样的修改、组合、子组合和替代。任何在本发明的精神和原则之内所作的修改、等同替换和改进等,均应包含在本发明保护范围之内。

Claims (15)

1.一种代码性能测试的方法,其特征在于,
当满足预定的触发条件,检查被测代码是否有更新,根据被测代码生成用于测试的可执行包后,生成进行代码性能测试所需的测试配置文件,所述被测代码与所述测试配置文件相关联,所述测试配置文件包括测试参数和被测性能指标;所述测试参数包括应用服务器配置参数、数据库配置参数、缓存配置参数、集群配置参数;将所述可执行包推送到各个应用服务器进行应用实例部署;
当所述被测代码有更新,则启动对所述被测代码的测试,所述测试包括:运行所述被测代码,并调用预先编制的测试用例脚本以进行探测测试,解析通过探测测试的测试用例的用例名和测试结果,以根据所述被测性能指标抽取出需要的参数数据,重新生成测试用例脚本,根据重新生成的测试用例脚本生成与所述被测性能指标对应的测试方案,通过执行所述测试方案得到所述被测性能指标的测试值;所述测试方案包括测试脚本、用于执行测试脚本的命令以及对并发数的更改信息,所述并发数为所述被测性能指标之一;
输出所得到的各被测性能指标的测试值,其中,每组测试值被实时地重定向到数据文件中,以推送到测试值分析服务程序所在的物理路径进行分析。
2.根据权利要求1所述的方法,其特征在于,所述触发条件包括下述之一:
周期性时间点;
接收到测试指令。
3.根据权利要求1所述的方法,其特征在于,每个所述测试方案利用对应的脚本来执行。
4.根据权利要求1所述的方法,其特征在于,所述测试方案在相应的应用服务器上执行。
5.根据权利要求1所述的方法,其特征在于,输出所得到的各被测性能指标的测试值包括对所述测试值进行各种对照展示。
6.根据权利要求1所述的方法,其特征在于,输出所得到的各被测性能指标的测试值包括把得到的测试值与预定的阈值比较,当超出所述阈值时,发出报警消息。
7.一种代码性能测试的装置,其特征在于,包括:
检查模块,用于当满足预定的触发条件,检查被测代码是否有更新,根据被测代码生成用于测试的可执行包后,生成进行代码性能测试所需的测试配置文件,所述被测代码与所述测试配置文件相关联,所述测试配置文件包括测试参数和被测性能指标;所述测试参数包括应用服务器配置参数、数据库配置参数、缓存配置参数、集群配置参数;将所述可执行包推送到各个应用服务器进行应用实例部署;
测试模块,用于当所述被测代码有更新时,则启动对所述被测代码的测试,所述测试包括:运行所述被测代码,并调用预先编制的测试用例脚本以进行探测测试,解析通过探测测试的测试用例的用例名和测试结果,以根据所述被测性能指标抽取出需要的参数数据,重新生成测试用例脚本,根据重新生成的测试用例脚本生成与所述被测性能指标对应的测试方案,通过执行所述测试方案得到所述被测性能指标的测试值;所述测试方案包括测试脚本、用于执行测试脚本的命令以及对并发数的更改信息,所述并发数为所述被测性能指标之一;
输出模块,用于输出所得到的各被测性能指标的测试值,其中,每组测试值被实时地重定向到数据文件中,以推送到测试值分析服务程序所在的物理路径进行分析。
8.根据权利要求7所述的装置,其特征在于,所述触发条件包括下述之一:
周期性时间点;
接收到测试指令。
9.根据权利要求7所述的装置,其特征在于,每个所述测试方案利用对应的脚本来执行。
10.根据权利要求7所述的装置,其特征在于,所述测试模块还用于:在相应的应用服务器上执行所述测试方案。
11.根据权利要求7所述的装置,其特征在于,所述输出模块还用于:对所述测试值进行各种对照展示。
12.根据权利要求7所述的装置,其特征在于,所述输出模块还用于:把得到的测试值与预定的阈值比较,当超出所述阈值时,发出报警消息。
13.一种代码性能测试的装置,其特征在于,包括:
存储器和处理器,其中,
所述存储器存储指令;
所述处理器执行所述指令用于:
当满足预定的触发条件,检查被测代码是否有更新,根据被测代码生成用于测试的可执行包后,生成进行代码性能测试所需的测试配置文件,所述被测代码与所述测试配置文件相关联,所述测试配置文件包括测试参数和被测性能指标;所述测试参数包括应用服务器配置参数、数据库配置参数、缓存配置参数、集群配置参数;将所述可执行包推送到各个应用服务器进行应用实例部署;
当所述被测代码有更新,则启动对所述被测代码的测试,所述测试包括:运行所述被测代码,并调用预先编制的测试用例脚本以进行探测测试,解析通过探测测试的测试用例的用例名和测试结果,以根据所述被测性能指标抽取出需要的参数数据,重新生成测试用例脚本,根据重新生成的测试用例脚本生成与所述被测性能指标对应的测试方案,通过执行所述测试方案得到所述被测性能指标的测试值;所述测试方案包括测试脚本、用于执行测试脚本的命令以及对并发数的更改信息,所述并发数为所述被测性能指标之一;
输出所得到的各被测性能指标的测试值,其中,每组测试值被实时地重定向到数据文件中,以推送到测试值分析服务程序所在的物理路径进行分析。
14.一种电子设备,其特征在于,包括:
一个或多个处理器;
存储装置,用于存储一个或多个程序,
当所述一个或多个程序被所述一个或多个处理器执行时,使得所述一个或多个处理器实现如权利要求1-6中任一所述的方法。
15.一种计算机可读介质,其上存储有计算机程序,其特征在于,所述程序被处理器执行时实现如权利要求1-6中任一所述的方法。
CN201610811529.0A 2016-09-08 2016-09-08 一种代码性能测试的方法和装置 Active CN107807877B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610811529.0A CN107807877B (zh) 2016-09-08 2016-09-08 一种代码性能测试的方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610811529.0A CN107807877B (zh) 2016-09-08 2016-09-08 一种代码性能测试的方法和装置

Publications (2)

Publication Number Publication Date
CN107807877A CN107807877A (zh) 2018-03-16
CN107807877B true CN107807877B (zh) 2021-12-07

Family

ID=61576321

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610811529.0A Active CN107807877B (zh) 2016-09-08 2016-09-08 一种代码性能测试的方法和装置

Country Status (1)

Country Link
CN (1) CN107807877B (zh)

Families Citing this family (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108255738A (zh) * 2018-04-09 2018-07-06 平安普惠企业管理有限公司 自动化测试方法、装置、计算机设备及存储介质
CN108737162B (zh) * 2018-04-20 2020-07-10 腾讯科技(深圳)有限公司 测试方法、测试系统及测试设备
CN109240905A (zh) * 2018-07-02 2019-01-18 链家网(北京)科技有限公司 软件测试方法和系统
CN108845949A (zh) * 2018-07-24 2018-11-20 浙江数链科技有限公司 一种性能测试方法及平台
CN109117368A (zh) * 2018-07-27 2019-01-01 平安科技(深圳)有限公司 一种接口测试方法、电子设备及存储介质
CN110806967A (zh) * 2018-08-06 2020-02-18 北京京东尚科信息技术有限公司 一种单元测试方法和装置
CN109446059A (zh) * 2018-09-12 2019-03-08 北京邮电大学 测试模板脚本的生成方法及装置
US11204856B2 (en) 2019-01-18 2021-12-21 International Business Machines Corporation Adaptive performance calibration for code
CN110597721A (zh) * 2019-09-11 2019-12-20 四川长虹电器股份有限公司 一种基于压力测试脚本的自动化接口压力测试的方法
CN113360368B (zh) * 2020-03-06 2023-09-01 北京京东振世信息技术有限公司 一种软件性能测试的方法和装置
CN111309633A (zh) * 2020-03-23 2020-06-19 上海新炬网络信息技术股份有限公司 基于自动化运维的持续性能测试方法
CN112527468A (zh) * 2020-12-23 2021-03-19 上海万向区块链股份公司 一种联盟链一站式自动部署与测试方法及系统
CN112559380A (zh) * 2021-02-19 2021-03-26 鹏城实验室 项目的测试方法、装置及计算机可读存储介质
CN112711521A (zh) * 2021-03-25 2021-04-27 浙江华创视讯科技有限公司 一种自动化性能测试方法及系统
CN113849418B (zh) * 2021-11-30 2022-07-08 阿里云计算有限公司 代码质量调试方法、服务器、用户设备及存储介质

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102799515B (zh) * 2011-05-24 2016-01-20 腾讯科技(深圳)有限公司 应用程序测试方法及装置
US20150026664A1 (en) * 2013-07-17 2015-01-22 International Business Machines Corporation Method and system for automated test case selection
CN103530228B (zh) * 2013-09-27 2016-09-28 西安电子科技大学 一种基于模型的软件测试方法
US9152812B2 (en) * 2013-12-03 2015-10-06 Paypal, Inc. Sensitive data protection during user interface automation testing systems and methods
CN103678130A (zh) * 2013-12-17 2014-03-26 中国联合网络通信集团有限公司 自动化性能测试方法及测试平台
CN104598382B (zh) * 2015-01-30 2018-03-27 北京京东尚科信息技术有限公司 一种测试控制方法和装置
CN104765692B (zh) * 2015-04-29 2018-11-06 北京嘀嘀无限科技发展有限公司 用于自动化测试软件的方法及设备

Also Published As

Publication number Publication date
CN107807877A (zh) 2018-03-16

Similar Documents

Publication Publication Date Title
CN107807877B (zh) 一种代码性能测试的方法和装置
US9672137B1 (en) Shadow test replay service
Mariani et al. Automated identification of failure causes in system logs
US9396094B2 (en) Software test automation systems and methods
Xu et al. POD-Diagnosis: Error diagnosis of sporadic operations on cloud applications
CN107660289B (zh) 自动网络控制
US10185650B1 (en) Testing service with control testing
US20130311977A1 (en) Arrangement and method for model-based testing
US20140143749A1 (en) Affinity recommendation in software lifecycle management
CN107241229B (zh) 一种基于接口测试工具的业务监控方法及装置
GB2492874A (en) Using the differences between screen images to automate the execution of graphical interface applications
CN111078490B (zh) 一种基于操作系统监控分析的服务器安全保障方法及系统
US11822423B2 (en) Structured software delivery and operation automation
US9158639B2 (en) Method and apparatus for correlating input and output messages of system under test
US8601318B2 (en) Method, apparatus and computer program product for rule-based directed problem resolution for servers with scalable proactive monitoring
CN105653455B (zh) 一种程序漏洞的检测方法及检测系统
KR20110025171A (ko) 소프트웨어 문제점을 식별하기 위한 방법, 시스템 및 컴퓨터 프로그램
CN107102938B (zh) 测试脚本的更新方法及装置
CN115576831A (zh) 一种测试案例推荐方法、装置、设备及存储介质
CN115658478A (zh) 测试用例的筛选方法、装置、电子设备及存储介质
US9372746B2 (en) Methods for identifying silent failures in an application and devices thereof
JP5592828B2 (ja) パッチ影響解析装置、方法及びプログラム
CN112596750A (zh) 应用测试方法、装置、电子设备及计算机可读存储介质
CN112069202A (zh) 基于追踪技术的sql性能分析方法、系统、设备及介质
US12093160B1 (en) IoT event detector correctness verification

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant