CN106817265A - 一种应用性能监控方法和装置 - Google Patents
一种应用性能监控方法和装置 Download PDFInfo
- Publication number
- CN106817265A CN106817265A CN201510850272.5A CN201510850272A CN106817265A CN 106817265 A CN106817265 A CN 106817265A CN 201510850272 A CN201510850272 A CN 201510850272A CN 106817265 A CN106817265 A CN 106817265A
- Authority
- CN
- China
- Prior art keywords
- test
- packing
- code block
- installation kit
- performance
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 51
- 238000012544 monitoring process Methods 0.000 title claims abstract description 35
- 238000012360 testing method Methods 0.000 claims abstract description 335
- 238000012856 packing Methods 0.000 claims abstract description 225
- 238000009434 installation Methods 0.000 claims abstract description 96
- 238000011056 performance test Methods 0.000 claims abstract description 86
- 230000001960 triggered effect Effects 0.000 claims abstract description 11
- 238000010835 comparative analysis Methods 0.000 claims description 38
- 230000005540 biological transmission Effects 0.000 claims description 17
- 238000012806 monitoring device Methods 0.000 claims description 6
- 238000012986 modification Methods 0.000 abstract description 16
- 230000004048 modification Effects 0.000 abstract description 16
- 238000013102 re-test Methods 0.000 abstract description 6
- 230000009286 beneficial effect Effects 0.000 abstract description 2
- 238000005259 measurement Methods 0.000 abstract description 2
- 230000002159 abnormal effect Effects 0.000 description 8
- 230000008569 process Effects 0.000 description 8
- 230000008901 benefit Effects 0.000 description 3
- 230000008859 change Effects 0.000 description 3
- 230000009471 action Effects 0.000 description 2
- 238000004590 computer program Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 238000004422 calculation algorithm Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000001035 drying Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 230000009931 harmful effect Effects 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L43/00—Arrangements for monitoring or testing data switching networks
- H04L43/08—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters
- H04L43/0805—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters by checking availability
- H04L43/0817—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters by checking availability by checking functioning
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/34—Network arrangements or protocols for supporting network services or applications involving the movement of software or configuration parameters
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Environmental & Geological Engineering (AREA)
- Data Exchanges In Wide-Area Networks (AREA)
Abstract
本发明公开了一种应用性能监控方法和装置，涉及应用测试技术领域，所述方法包括：对于新提交的针对一应用的代码块，触发用于生成测试安装包的打包任务；其中，所述打包任务包括打包任务编号，所述代码块包括代码块编号；在所述打包任务执行完毕之后，调用至少一个测试接口，对生成的测试安装包进行性能测试；将由性能测试得到的测试结果，与打包任务编号和代码块编号进行关联记录，由此解决了测试人员无法快速知道到底哪次修改的代码块影响了APP的性能，取得了使测试人员可以通过代码块、打包任务编号、测试结果之间的对应关系，可以快速定位哪次修改的代码块影响了APP的性能，避免短时间内大批量的重复测试性能，提高其工作效率的有益效果。
Description
技术领域
本发明涉及应用测试技术领域，特别是涉及一种应用性能监控方法和一种应用性能监控装置。
背景技术
随着智能移动终端的发展，APP(application，应用)也越来越多，而对于很多APP来说，其开发者可能会不断的完善或者修改其功能，比如浏览器APP，开发者可能每隔一段时间就会更新其版本。但是，在APP上线之前，技术人员对APP的代码修改完成之后，需要知道该APP的性能如何，如果该次代码修改，对APP性能的不良影响过大，则可能需要检查该次修改的原因。
目前，APP开发者对于某个版本的APP修改后，对修改后的APP代码打包，提出性能测试需求，然后测试人员对性能测试，然后测试人员将该测试结果给APP开发者，APP开发者基于该测试结果对该次修改进行处理或者不处理。但是如果开发者中间经过很多次代码修改，而在一段时间之后再提出性能测试需求，测试人员将该测试结果给APP开发者。此时如果出现问题，开发者需要将上次修改至本次修改的所有修改版本的APP代码块，全部提供给测试人员，然后测试人员逐个拿出来打包然后进行性能测试，以确定哪次或者哪几次的修改影响了APP的性能。
上述方式中，使测试人员无法快速知道到底哪次修改的代码块影响了APP的性能，影响了测试人员的工作效率，时间成本高。
发明内容
鉴于上述问题，提出了本发明以便提供一种克服上述问题或者至少部分地解决上述问题的应用性能监控方法和相应的应用性能监控装置。
依据本发明的一个方面，提供了一种应用性能监控方法，包括：
对于新提交的针对一应用的代码块，触发用于生成测试安装包的打包任 务；其中，所述打包任务包括打包任务编号，所述代码块包括代码块编号；
在所述打包任务执行完毕之后，调用至少一个测试接口，对生成的测试安装包进行性能测试；
将由性能测试得到的测试结果，与打包任务编号和代码块编号进行关联记录。
优选地，在将由性能测试得到的测试结果，结合打包任务编号和代码块编号进行记录的步骤之后，还包括：
根据所述应用的测试结果的历史记录，对最新记录的测试结果进行对比分析；
当对比分析结果达到第一阈值条件，则发送预警信息至目标对象。
优选地，所述发送预警信息至目标客户端的步骤包括：
基于对比分析结果，生成预警邮件；
调用邮件发送接口，将所述预警邮件发送至目标邮箱账户；
优选地，所述发送预警信息至目标客户端的步骤包括：
基于对比分析结果，生成预警短信；
调用短信发送接口，将所述预警短信发送至目标终端。
优选地，所述对于新提交的针对一应用的代码块，触发用于生成测试安装包的打包任务的步骤，包括：
监控源代码版本控制系统的代码库中是否出现新提交的代码块；
如果源代码版本控制系统的代码库中出现新提交的代码块，则针对所述代码块，触发用于生成测试安装包的打包任务。
优选地，所述在所述打包任务执行完毕之后，调用至少一个测试接口，对生成的测试安装包进行性能测试的步骤，包括：
在所述打包任务执行完毕之后，调用各测试接口，向相应的测试服务器发送测试通知；所述测试通知包括测试安装包的位置信息、打包任务编号、代码块编号；所述测试服务器根据所述测试通知获取测试安装包进行性能测试。
优选地，所述将由性能测试得到的测试结果，结合打包任务编号和代码 块编号进行记录的步骤包括：
将由性能测试得到的测试结果、相应的打包任务编号、相应的代码块编号发送至报告服务器；所述报告服务器将测试结果、打包任务编号、代码块编号关联存储。
根据本发明的另一方面，提供了一种应用性能监控装置，包括：
打包任务触发模块，适于对于新提交的针对一应用的代码块，触发用于生成测试安装包的打包任务；其中，所述打包任务包括打包任务编号，所述代码块包括代码块编号；
测试模块，适于在所述打包任务执行完毕之后，调用至少一个测试接口，对生成的测试安装包进行性能测试；
关联记录模块，适于将由性能测试得到的测试结果，与打包任务编号和代码块编号进行关联记录。
优选地，在关联记录模块之后，还包括：
对比分析模块，适于根据所述应用的测试结果的历史记录，对最新记录的测试结果进行对比分析；
预警模块，适于当对比分析结果达到第一阈值条件，则发送预警信息至目标对象。
优选地，所述预警模块包括：
预警邮件生成子模块，适于基于对比分析结果，生成预警邮件；
预警邮件发送子模块，适于调用邮件发送接口，将所述预警邮件发送至目标邮箱账户；
优选地，所述预警模块包括：
预警短信生成子模块，适于基于对比分析结果，生成预警短信；
预警短信发送子模块，适于调用短信发送接口，将所述预警短信发送至目标终端。
优选地，所述打包任务触发模块包括：
代码库监控子模块，适于监控源代码版本控制系统的代码库中是否出现新提交的代码块；
打包任务触发子模块，适于如果源代码版本控制系统的代码库中出现新提交的代码块，则针对所述代码块，触发用于生成测试安装包的打包任务。
优选地，所述测试模块包括：
测试通知模块，适于在所述打包任务执行完毕之后，调用各测试接口，向相应的测试服务器发送测试通知；所述测试通知包括测试安装包的位置信息、打包任务编号、代码块编号；所述测试服务器根据所述测试通知获取测试安装包进行性能测试。
优选地，所述关联记录模块包括：
结果发送模块，适于将由性能测试得到的测试结果、相应的打包任务编号、相应的代码块编号发送至报告服务器；所述报告服务器将测试结果、打包任务编号、代码块编号关联存储。
根据本发明的另一方面，提供了一种应用性能监控系统，包括：
持续集成服务器、各测试服务器、报告服务器；
所述持续集成服务器包括：
打包任务触发模块，适于对于新提交的针对一应用的代码块，触发用于生成测试安装包的打包任务；其中，所述打包任务包括打包任务编号，所述代码块包括代码块编号；
测试通知模块，适于在所述打包任务执行完毕之后，在所述打包任务执行完毕之后，调用各测试接口，向相应的测试服务器发送测试通知；所述测试通知包括测试安装包的位置信息、打包任务编号、代码块编号；
各个测试服务器包括：
测试模块，适于根据所述测试通知获取测试安装包进行性能测试；
结果发送模块，适于将由性能测试得到的测试结果、相应的打包任务编号、相应的代码块编号发送至报告服务器；
所述报告服务器包括：
关联记录模块，适于将测试结果、打包任务编号、代码块编号关联存储。
优选地，在所述报告服务器中的关联记录模块之后，还包括：
对比分析模块，适于根据所述应用的测试结果的历史记录，对最新记录的测试结果进行对比分析；
预警模块，适于当对比分析结果达到第一阈值条件，则发送预警信息至目标对象。
优选地，所述预警模块包括：
预警邮件生成子模块，适于基于对比分析结果，生成预警邮件；
预警邮件发送子模块，适于调用邮件发送接口，将所述预警邮件发送至目标邮箱账户；
优选地，所述预警模块包括：
预警短信生成子模块，适于基于对比分析结果，生成预警短信；
预警短信发送子模块，适于调用短信发送接口，将所述预警短信发送至目标终端。
优选地，所述打包任务触发模块包括：
代码库监控子模块，适于监控源代码版本控制系统的代码库中是否出现新提交的代码块；
打包任务触发子模块，适于如果源代码版本控制系统的代码库中出现新提交的代码块，则针对所述代码块，触发用于生成测试安装包的打包任务。
根据本发明的另一方面，提供了一种应用性能监控设备，包括：
存储器，加载有多条可执行指令；
处理器，执行所述多条可执行指令；所述多条指令包括执行以下步骤的方法：
对于新提交的针对一应用的代码块，触发用于生成测试安装包的打包任务；其中，所述打包任务包括打包任务编号，所述代码块包括代码块编号；
在所述打包任务执行完毕之后，调用至少一个测试接口，对生成的测试安装包进行性能测试；
将由性能测试得到的测试结果，与打包任务编号和代码块编号进行关联记录。
根据本发明的应用性能监控方法、装置和系统，可以对开发者提交的APP的代码块触发打包任务，然后执行打包任务生成测试安装包后，直接触发对该测试安装包的性能测试，然后以打包任务编号为核心，将代码块编号和测试结果绑定记录，从而，由此解决了目前技术中，使测试人员无法快速知道到底哪次修改的代码块影响了APP的性能，影响了测试人员的工作效率，时间成本高的问题，取得了使测试人员可以通过代码块、打包任务编号、测试结果之间的对应关系，可以快速定位哪次修改的代码块影响了APP的性能，避免了短时间内大批量的重复测试性能，节省测试人员的时间成本，提高其工作效率的有益效果。
上述说明仅是本发明技术方案的概述，为了能够更清楚了解本发明的技术手段，而可依照说明书的内容予以实施，并且为了让本发明的上述和其它目的、特征和优点能够更明显易懂，以下特举本发明的具体实施方式。
附图说明
通过阅读下文优选实施方式的详细描述，各种其他的优点和益处对于本领域普通技术人员将变得清楚明了。附图仅用于示出优选实施方式的目的，而并不认为是对本发明的限制。而且在整个附图中，用相同的参考符号表示相同的部件。在附图中：
图1示出了根据本发明一个实施例的一种应用性能监控方法实施例的步骤流程图；
图2示出了根据本发明一个实施例的一种应用性能监控方法实施例的步骤流程图；
图2A示出了根据本发明一个实施例的一种性能测试结果记录示例图；
图3示出了根据本发明一个实施例的一种应用性能监控方法实施例的步骤流程图；
图4示出了根据本发明一个实施例的一种应用性能监控装置实施例的结构框图；
图5示出了根据本发明一个实施例的一种应用性能监控装置实施例的结构框图；
图6示出了根据本发明一个实施例的一种应用性能监控系统实施例的结 构框图；
图7示出了根据本发明一个实施例的一种应用性能监控设备的结构示意图。
具体实施方式
下面将参照附图更详细地描述本公开的示例性实施例。虽然附图中显示了本公开的示例性实施例，然而应当理解，可以以各种形式实现本公开而不应被这里阐述的实施例所限制。相反，提供这些实施例是为了能够更透彻地理解本公开，并且能够将本公开的范围完整的传达给本领域的技术人员。
实施例二
参照图1，示出了根据本发明一个实施例的一种应用性能监控方法实施例的步骤流程图，具体可以包括如下步骤：
步骤110，对于新提交的针对一应用的代码块，触发用于生成测试安装包的打包任务；其中，所述打包任务包括打包任务编号，所述代码块包括代码块编号；
在本发明实施例中，APP开发者可以使用源代码版本控制系统对APP进行代码修改，其每次修改的代码块结合代码块编号存入代码库中。在本发明实施例中，该源代码版本控制系统可以是SVN(SVN是Subversion的简称，是一个开放源代码的版本控制系统)。当然也可以是其他的源代码版本控制系统，本发明实施例不对其加以限制。
在本发明实施例中，所述APP例如手机浏览器APP，当然也可以是其他APP。
另外，本发明实施例可以基于hudson或jenkins(hudson和Jenkins都是一种开放源码CI(Continuous integration，持续集成)服务器，)。本发明实施例首先设置一个CI服务器，并配置其监控源代码版本控制系统(如SVN)的代码库是否有APP开发者新提交的代码块。
如果监控到开发者向SVN的代码库提交了新的代码块，则触发针对该代码块的打包任务。
然后执行该打包任务，将该代码块打包为一个测试安装包。在本发明实 施例中，该测试安装包如APK(AndroidPackage，安卓安装包)文件。当然，也可以为其他形式的安装包，本发明实施例不对其加以限制。
优选的，所述步骤110包括：
子步骤111，监控源代码版本控制系统的代码库中是否出现新提交的代码块；如果源代码版本控制系统的代码库中出现新提交的代码块，则进入子步骤112。
在实际应用中，以SVN为例，开发者在自己的客户端从SVN服务器上下载APP的代码进行修改，修改后上传到SVN服务器中，SVN服务器将修改后的代码块存储到其代码库中，并为该代码块生成代码块编号。
以Jenkins的CI服务器为例，由于在Jenkins中预先配置了监控的对象为SVN服务器的代码库，那么Jenkins轮询SVN服务器的代码库，发现出现新的代码块编号，则进入子步骤112。
子步骤112，针对所述代码块，触发用于生成测试安装包的打包任务。
Jenkins从上述代码库中提取新出现的代码块编号对应的代码块到其CI服务器中，并触发针对该代码块的打包任务。在实际应用中，触发的每个打包任务，都会为其生成一个唯一的打包任务编号。
Jenkins执行该打包任务，将该代码块生成测试安装包，然后将该测试安装包存入CI服务器的指定目录。
此时，打包任务执行完毕，那么本发明实施例进入步骤120。
步骤120，在所述打包任务执行完毕之后，调用至少一个测试接口，对生成的测试安装包进行性能测试；
在本发明实施例中，对于APP的性能测试，可以采用一个服务器测试其各种性能，那么则预置一个测试接口。也可以不同的测试服务器去测试不同的性能，那么则针对不同的测试服务器设置相应的测试接口。
在本发明实施例中，该测试接口是以虚拟测试脚本的形式存在CI服务器中，由CI服务器的Jenkins的打包进程或者hudson的打包进程在一个打包任务执行完之后，调用该虚拟测试脚本，从而调用至少一个测试接口，去控制测试服务器对上述新提交的代码块进行性能测试。
在实际应用中，打包进程调用测试接口，以romato指令的方式向测试服务器发送测试请求，该测试请求包括该测试安装包在CI服务器中的存储路径，以及打包任务编号、代码块编号等信息。
测试服务器接收到该测试请求后，从测试安装包在CI服务器中的存储路径获取测试安装包到本地，然后对该测试安装包进行测试，将测试结果与打包任务编号和代码块编号发送给报告服务器。
步骤130，将由性能测试得到的测试结果，与打包任务编号和代码块编号进行关联记录。
对于APP的测试安装包的性能测试，比如对于浏览器，其性能测试项可包括：标准支持测试，JavaScript速度测试，启动速度测试、加载速度测试，CPU和内存占用测试等等。
对于各项测试都会有一份测试结果，那么可以在该APP之下，将上述测试结果按照前述的打包任务编号和代码块编号进行记录。
在本申请实施例中，报告服务器接收测试服务器发送的测试结果、打包任务编号、代码块编号，然后进行记录。当然，可按照时间序列进行记录。对于不同的性能测试结果，可以将相同的性能的测试结果作为一组，按时间序列进行记录。因此，可以得到多组性能的历史记录。
根据本发明的应用性能监控方法、装置和系统，可以对开发者提交的APP的代码块触发打包任务，然后执行打包任务生成测试安装包后，直接触发对该测试安装包的性能测试，然后以打包任务编号为核心，将代码块编号和测试结果绑定记录，从而解决了目前技术中，使测试人员无法快速知道到底哪次修改的代码块影响了APP的性能，影响了测试人员的工作效率，时间成本高的问题，使测试人员可以通过代码块、打包任务编号、测试结果之间的对应关系，可以快速定位哪次修改的代码块影响了APP的性能，避免了短时间内大批量的重复测试性能，节省测试人员的时间成本，提高其工作效率。
实施例二
参照图2，示出了根据本发明一个实施例的一种应用性能监控方法实施例的步骤流程图，具体可以包括如下步骤：
步骤210，对于新提交的针对一应用的代码块，触发用于生成测试安装包的打包任务；其中，所述打包任务包括打包任务编号，所述代码块包括代码块编号；
步骤220，在所述打包任务执行完毕之后，调用至少一个测试接口，对生成的测试安装包进行性能测试；
步骤230，将由性能测试得到的测试结果，与打包任务编号和代码块编号进行关联记录。
步骤240，根据所述应用的测试结果的历史记录，对最新记录的测试结果进行对比分析；
步骤250，当对比分析结果达到第一阈值条件，则发送预警信息至目标对象。
在本申请实施例中，由于性能测试结果，与打包任务编号和代码块编号进行关联记录，因此得到了一系列性能测试结果的历史记录，那么在出现新的测试结果后，将新的测试结果与各历史记录进行对比分析，当对比分析结果达到第一阈值条件，则说明性能出现异常，则可发生预警信息至目标对象。其中，该目标对象比如技术人员的邮箱账户，手机等。
在本发明实施例中，可以对性能的测试结果按性能分组进行记录。如图2A，其为对一种性能测试结果的记录示例，图2A横轴为时间轴，纵轴为性能指标轴。其对于某个APP的性能A的测试结果的记录。其中2015.11.01对应的性能测试结果值为75，相应的“1:1”表示打包任务编号为1，代码块编号为1。2015.11.02对应的性能测试结果值为85，相应的“3:2”表示打包任务编号为3，代码块编号为2。2015.11.02对应的性能测试结果值为85，相应的“3:2”表示打包任务编号为3，代码块编号为2。2015.11.03对应的性能测试结果值为70，相应的“4:3”表示打包任务编号为4，代码块编号为3。2015.11.04对应的性能测试结果值为75，相应的“7:4”表示打包任务编号为7，代码块编号为4。2015.11.05对应的性能测试结果值为70，相应的 “10:5”表示打包任务编号为10，代码块编号为5。2015.11.06对应的性能测试结果值为40，相应的“17:6”表示打包任务编号为17，代码块编号为6。其中，前5个性能测试结果为历史记录，第6个点为新记录的性能测试结果。
在本发明实施例中，对于图2A的示例，可以设置第一阈值条件为，最新的点与前一个点的差值超过阈值，比如15。那么前5个点之间的差值小于阈值，当第2、3、4、5个点的记录出现时，并不会触发发送预警信息至目标对象的过程。而第6个点与第5个点的差值为30，超过阈值15，说明变化巨大，则触发发送预警信息至目标对象。
当然，对于历史记录，还可以采用其他方式设置第一阈值条件，比如类似图2A中，计算新的记录点之前N个记录点的方差，然后计算前N个点与新的记录点的方差，如果两个方差之间的差值超过阈值，则说明新的测试结果出现异常，则触发发送预警信息至目标对象。
当然，如图2A仅是一种测试结果记录示例，具体的测试结果记录形式本发明实施例不对其加以限制。
在本发明实施例中，可以基于最新记录的测试结果和历史测试结果生成预警信息，在预警信息说明哪个测试结果记录出现异常。当然可以只获取一段时间内的历史测试结果放入预警信息中。
那么技术人员可以根据出现异常的测试结果记录中的打包编号、代码块编号快速的找到代码库中的相应代码块，去分析产生异常的原因，不用测试人员再逐个将代码块从代码库中获取到，然后打包，再测试，并人工记录每次测试结果的过程，降低测试人员的工作量，提高测试效率。
在本发明实施例中，所述目标对象包括技术人员的邮箱账户和/或手机号码等。
可以理解，可以预先将技术人员的邮箱账户和/或手机号码配置到报告服务器中。
优选的，所述步骤250包括：
步骤A11，基于对比分析结果，生成预警邮件；
步骤A12，调用邮件发送接口，将所述预警邮件发送至目标邮箱账户；
可以理解，当对邮箱账户时，触发发送预警信息至目标对象的过程可以为，基于最新记录的测试结果和历史测试结果生成预警信息生成测试如图2A的测试曲线图，然后将该测试曲线图和出现异常的测试结果记录点生成预警邮件，然后调用邮件接口将该预警邮件发送至配置好的邮箱账户中。
和/或优选的，所述步骤250包括：
步骤A13，基于对比分析结果，生成预警短信；
步骤A14，调用短信发送接口，将所述预警短信发送至目标终端。
对于手机号码，可以将最新记录的测试结果和历史测试结果生成预警信息，以及出现异常的测试结果记录点，生成文本形式的预警短信，然后调用短信接口向手机号码所在终端发送短信。
当然，本发明实施例中，对于发送预警信息至目标对象，还可以采用其他方式，本发明实施例不对其加以限制。
根据本发明的应用性能监控方法、装置和系统，可以对开发者提交的APP的代码块触发打包任务，然后执行打包任务生成测试安装包后，直接触发对该测试安装包的性能测试，然后以打包任务编号为核心，将代码块编号和测试结果绑定记录，从而解决了目前技术中，使测试人员无法快速知道到底哪次修改的代码块影响了APP的性能，影响了测试人员的工作效率，时间成本高的问题，使测试人员可以通过代码块、打包任务编号、测试结果之间的对应关系，可以快速定位哪次修改的代码块影响了APP的性能，避免了短时间内大批量的重复测试性能，节省测试人员的时间成本，提高其工作效率。并且，本发明实施例可以及时监控新的代码块对应的测试安装包的异常情况，从而可以及时的通知相关技术人员处理，避免技术人员在不知道其开发的代码块出现异常的情况下，继续在该代码块的基础上进一步开发，避免浪费工作时间，节省成本。
实施例三
参照图3，示出了根据本发明一个实施例的一种应用性能监控方法实施例的步骤流程图，具体可以包括如下步骤：
步骤310，由打包服务器对于新提交的针对一应用的代码块，触发用于生成测试安装包的打包任务；其中，所述打包任务包括打包任务编号，所述代码块包括代码块编号；
在本发明实施例中，打包服务器可以为前述的CI服务器，其可以监控SVN等源代码版本控制系的代码库。当打包服务器监控到代码库中出现新提交的一应用的代码块，则触发用于生成测试安装包的打包任务。所述打包任务包括打包任务编号，所述代码块包括代码块编号。
步骤320，在所述打包任务执行完毕之后，调用各测试接口，向相应的测试服务器发送测试通知；所述测试通知包括测试安装包的位置信息、打包任务编号、代码块编号；
打包服务器执行该打包任务，生成了测试安装包后存储到指定的存储路径中。然后调用各测试接口，向相应的测试服务器发送测试通知。通过该测试通知将测试安装包的存储路径、打包任务编号、代码块编号发送与测试接口对应的测试服务器。
步骤330，各测试服务器根据所述测试通知获取测试安装包进行性能测试。
各测试服务器则根据测试通知从打包服务器提取测试安装包到本地，然后进行性能测试。
步骤340，各测试服务器将由性能测试得到的测试结果、相应的打包任务编号、相应的代码块编号发送至报告服务器；
各测试服务器得到测试结果后，将测试结果、打包任务编号、代码块编号发送给报告服务器。
步骤350，报告服务器将测试结果、打包任务编号、代码块编号关联存储。
步骤360，报告服务器根据所述应用的测试结果的历史记录，对最新记录的测试结果进行对比分析；
步骤370，报告当对比分析结果达到第一阈值条件，则发送预警信息至目标对象。
根据本发明的应用性能监控方法、装置和系统，可以对开发者提交的APP的代码块触发打包任务，然后执行打包任务生成测试安装包后，直接触发对该测试安装包的性能测试，然后以打包任务编号为核心，将代码块编号和测试结果绑定记录，从而解决了目前技术中，使测试人员无法快速知道到底哪次修改的代码块影响了APP的性能，影响了测试人员的工作效率，时间成本高的问题，使测试人员可以通过代码块、打包任务编号、测试结果之间的对应关系，可以快速定位哪次修改的代码块影响了APP的性能，避免了短时间内大批量的重复测试性能，节省测试人员的时间成本，提高其工作效率。并且，本发明实施例可以及时监控新的代码块对应的测试安装包的异常情况，从而可以及时的通知相关技术人员处理，避免技术人员在不知道其开发的代码块出现异常的情况下，继续在该代码块的基础上进一步开发，避免浪费工作时间，节省成本。再者，本发明实施例采用不同的测试服务器独立测试相应的性能，测试速度快，节省测试的整体时间。
对于方法实施例，为了简单描述，故将其都表述为一系列的动作组合，但是本领域技术人员应该知悉，本发明实施例并不受所描述的动作顺序的限制，因为依据本发明实施例，某些步骤可以采用其他顺序或者同时进行。其次，本领域技术人员也应该知悉，说明书中所描述的实施例均属于优选实施例，所涉及的动作并不一定是本发明实施例所必须的。
实施例四
参照图4，示出了根据本发明一个实施例的一种应用性能监控装置实施例的结构框图，具体可以包括如下模块：
打包任务触发模块410，适于对于新提交的针对一应用的代码块，触发用于生成测试安装包的打包任务；其中，所述打包任务包括打包任务编号，所述代码块包括代码块编号；
测试模块420，适于在所述打包任务执行完毕之后，调用至少一个测试接口，对生成的测试安装包进行性能测试；
关联记录模块430，适于将由性能测试得到的测试结果，与打包任务编号和代码块编号进行关联记录。
优选的，所述打包任务触发模块410包括：
代码库监控子模块，适于监控源代码版本控制系统的代码库中是否出现新提交的代码块；
打包任务触发子模块，适于如果源代码版本控制系统的代码库中出现新提交的代码块，则针对所述代码块，触发用于生成测试安装包的打包任务。
实施例五
参照图5，示出了根据本发明一个实施例的一种应用性能监控装置实施例的结构框图，具体可以包括如下模块：
打包任务触发模块510，适于对于新提交的针对一应用的代码块，触发用于生成测试安装包的打包任务；其中，所述打包任务包括打包任务编号，所述代码块包括代码块编号；
测试模块520，适于在所述打包任务执行完毕之后，调用至少一个测试接口，对生成的测试安装包进行性能测试；
关联记录模块530，适于将由性能测试得到的测试结果，与打包任务编号和代码块编号进行关联记录。
对比分析模块540，适于根据所述应用的测试结果的历史记录，对最新记录的测试结果进行对比分析；
预警模块550，适于当对比分析结果达到第一阈值条件，则发送预警信息至目标对象。
优选的，所述预警模块550包括：
预警邮件生成子模块，适于基于对比分析结果，生成预警邮件；
预警邮件发送子模块，适于调用邮件发送接口，将所述预警邮件发送至目标邮箱账户；
和/或优选的，所述预警模块550包括：
预警短信生成子模块，适于基于对比分析结果，生成预警短信；
预警短信发送子模块，适于调用短信发送接口，将所述预警短信发送至目标终端。
实施例六
参照图6，示出了根据本发明一个实施例的一种应用性能监控系统实施例的结构框图，具体可以包括如下模块：
持续集成服务器610、各测试服务器620、报告服务器630；
所述持续集成服务器610包括：
打包任务触发模块611，适于对于新提交的针对一应用的代码块，触发用于生成测试安装包的打包任务；其中，所述打包任务包括打包任务编号，所述代码块包括代码块编号；
测试通知模块612，适于在所述打包任务执行完毕之后，在所述打包任务执行完毕之后，调用各测试接口，向相应的测试服务器发送测试通知；所述测试通知包括测试安装包的位置信息、打包任务编号、代码块编号；
各个测试服务器620包括：
测试模块621，适于根据所述测试通知获取测试安装包进行性能测试；
结果发送模块622，适于将由性能测试得到的测试结果、相应的打包任务编号、相应的代码块编号发送至报告服务器；
所述报告服务器630包括：
关联记录模块631，适于将测试结果、打包任务编号、代码块编号关联存储。
优选的，在所述报告服务器630中的关联记录模块631之后，还包括：
对比分析模块，适于根据所述应用的测试结果的历史记录，对最新记录的测试结果进行对比分析；
预警模块，适于当对比分析结果达到第一阈值条件，则发送预警信息至目标对象。
优选的，所述预警模块包括：
预警邮件生成子模块，适于基于对比分析结果，生成预警邮件；
预警邮件发送子模块，适于调用邮件发送接口，将所述预警邮件发送至目标邮箱账户；
优选的，所述预警模块包括：
预警短信生成子模块，适于基于对比分析结果，生成预警短信；
预警短信发送子模块，适于调用短信发送接口，将所述预警短信发送至目标终端。
优选的，所述打包任务触发模块包括：
代码库监控子模块，适于监控源代码版本控制系统的代码库中是否出现新提交的代码块；
打包任务触发子模块，适于如果源代码版本控制系统的代码库中出现新提交的代码块，则针对所述代码块，触发用于生成测试安装包的打包任务。
实施例七
参照图7，示出了本发明实施例六的一种应用性能监控设备的结构示意图，所述设备700具体可以包括：
存储器710，加载有多条可执行指令；
处理器720，执行所述多条可执行指令；所述多条指令包括执行以下步骤的方法：
对于新提交的针对一应用的代码块，触发用于生成测试安装包的打包任务；其中，所述打包任务包括打包任务编号，所述代码块包括代码块编号；
在所述打包任务执行完毕之后，调用至少一个测试接口，对生成的测试安装包进行性能测试；
将由性能测试得到的测试结果，与打包任务编号和代码块编号进行关联记录。
优选地，本发明实施例的多条可执行指令还可包括前述各个步骤的方法，本发明实施例不对其加以限定。
对于装置实施例而言，由于其与方法实施例基本相似，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。
在此提供的算法和显示不与任何特定计算机、虚拟系统或者其它设备固有相关。各种通用系统也可以与基于在此的示教一起使用。根据上面的描述，构造这类系统所要求的结构是显而易见的。此外，本发明也不针对任何特定编程语言。应当明白，可以利用各种编程语言实现在此描述的本发明的内容，并且上面对特定语言所做的描述是为了披露本发明的最佳实施方式。
在此处所提供的说明书中，说明了大量具体细节。然而，能够理解，本发明的实施例可以在没有这些具体细节的情况下实践。在一些实例中，并未详细示出公知的方法、结构和技术，以便不模糊对本说明书的理解。
类似地，应当理解，为了精简本公开并帮助理解各个发明方面中的一个或多个，在上面对本发明的示例性实施例的描述中，本发明的各个特征有时被一起分组到单个实施例、图、或者对其的描述中。然而，并不应将该公开的方法解释成反映如下意图：即所要求保护的本发明要求比在每个权利要求中所明确记载的特征更多的特征。更确切地说，如下面的权利要求书所反映的那样，发明方面在于少于前面公开的单个实施例的所有特征。因此，遵循具体实施方式的权利要求书由此明确地并入该具体实施方式，其中每个权利要求本身都作为本发明的单独实施例。
本领域那些技术人员可以理解，可以对实施例中的设备中的模块进行自适应性地改变并且把它们设置在与该实施例不同的一个或多个设备中。可以把实施例中的模块或单元或组件组合成一个模块或单元或组件，以及此外可以把它们分成多个子模块或子单元或子组件。除了这样的特征和/或过程或者单元中的至少一些是相互排斥之外，可以采用任何组合对本说明书(包括伴随的权利要求、摘要和附图)中公开的所有特征以及如此公开的任何方法或者设备的所有过程或单元进行组合。除非另外明确陈述，本说明书(包括伴随的权利要求、摘要和附图)中公开的每个特征可以由提供相同、等同或相似目的的替代特征来代替。
此外，本领域的技术人员能够理解，尽管在此所述的一些实施例包括其它实施例中所包括的某些特征而不是其它特征，但是不同实施例的特征的组合意味着处于本发明的范围之内并且形成不同的实施例。例如，在下面的权利要求书中，所要求保护的实施例的任意之一都可以以任意的组合方式来使用。
本发明的各个部件实施例可以以硬件实现，或者以在一个或者多个处理器上运行的软件模块实现，或者以它们的组合实现。本领域的技术人员应当理解，可以在实践中使用微处理器或者数字信号处理器(DSP)来实现根据 本发明实施例的应用性能监控设备中的一些或者全部部件的一些或者全部功能。本发明还可以实现为用于执行这里所描述的方法的一部分或者全部的设备或者装置程序(例如，计算机程序和计算机程序产品)。这样的实现本发明的程序可以存储在计算机可读介质上，或者可以具有一个或者多个信号的形式。这样的信号可以从因特网网站上下载得到，或者在载体信号上提供，或者以任何其他形式提供。
应该注意的是上述实施例对本发明进行说明而不是对本发明进行限制，并且本领域技术人员在不脱离所附权利要求的范围的情况下可设计出替换实施例。在权利要求中，不应将位于括号之间的任何参考符号构造成对权利要求的限制。单词“包含”不排除存在未列在权利要求中的元件或步骤。位于元件之前的单词“一”或“一个”不排除存在多个这样的元件。本发明可以借助于包括有若干不同元件的硬件以及借助于适当编程的计算机来实现。在列举了若干装置的单元权利要求中，这些装置中的若干个可以是通过同一个硬件项来具体体现。单词第一、第二、以及第三等的使用不表示任何顺序。可将这些单词解释为名称。
A1、一种应用性能监控方法，包括：
对于新提交的针对一应用的代码块，触发用于生成测试安装包的打包任务；其中，所述打包任务包括打包任务编号，所述代码块包括代码块编号；
在所述打包任务执行完毕之后，调用至少一个测试接口，对生成的测试安装包进行性能测试；
将由性能测试得到的测试结果，与打包任务编号和代码块编号进行关联记录。
A2、如权利要求A1所述的方法，其特征在于，在将由性能测试得到的测试结果，结合打包任务编号和代码块编号进行记录的步骤之后，还包括：
根据所述应用的测试结果的历史记录，对最新记录的测试结果进行对比分析；
当对比分析结果达到第一阈值条件，则发送预警信息至目标对象。
A3、根据权利要求A2所述的方法，其特征在于，所述发送预警信息至 目标客户端的步骤包括：
基于对比分析结果，生成预警邮件；
调用邮件发送接口，将所述预警邮件发送至目标邮箱账户；
A4、根据权利要求A2所述的方法，其特征在于，所述发送预警信息至目标客户端的步骤包括：
基于对比分析结果，生成预警短信；
调用短信发送接口，将所述预警短信发送至目标终端。
A5、根据权利要求A1-A4其中之一所述的方法，其特征在于，所述对于新提交的针对一应用的代码块，触发用于生成测试安装包的打包任务的步骤，包括：
监控源代码版本控制系统的代码库中是否出现新提交的代码块；
如果源代码版本控制系统的代码库中出现新提交的代码块，则针对所述代码块，触发用于生成测试安装包的打包任务。
A6、根据权利要求A1-A4其中之一所述的方法，其特征在于，所述在所述打包任务执行完毕之后，调用至少一个测试接口，对生成的测试安装包进行性能测试的步骤，包括：
在所述打包任务执行完毕之后，调用各测试接口，向相应的测试服务器发送测试通知；所述测试通知包括测试安装包的位置信息、打包任务编号、代码块编号；所述测试服务器根据所述测试通知获取测试安装包进行性能测试。
A7、根据权利要求A1-A4其中之一所述的方法，其特征在于，所述将由性能测试得到的测试结果，结合打包任务编号和代码块编号进行记录的步骤包括：
将由性能测试得到的测试结果、相应的打包任务编号、相应的代码块编号发送至报告服务器；所述报告服务器将测试结果、打包任务编号、代码块编号关联存储。
B8、一种应用性能监控装置，包括：
打包任务触发模块，适于对于新提交的针对一应用的代码块，触发用于 生成测试安装包的打包任务；其中，所述打包任务包括打包任务编号，所述代码块包括代码块编号；
测试模块，适于在所述打包任务执行完毕之后，调用至少一个测试接口，对生成的测试安装包进行性能测试；
关联记录模块，适于将由性能测试得到的测试结果，与打包任务编号和代码块编号进行关联记录。
B9、如权利要求B8所述的装置，其特征在于，在关联记录模块之后，还包括：
对比分析模块，适于根据所述应用的测试结果的历史记录，对最新记录的测试结果进行对比分析；
预警模块，适于当对比分析结果达到第一阈值条件，则发送预警信息至目标对象。
B10、根据权利要求B9所述的装置，其特征在于，所述预警模块包括：
预警邮件生成子模块，适于基于对比分析结果，生成预警邮件；
预警邮件发送子模块，适于调用邮件发送接口，将所述预警邮件发送至目标邮箱账户；
B11、根据权利要求B9所述的装置，其特征在于，所述预警模块包括：
预警短信生成子模块，适于基于对比分析结果，生成预警短信；
预警短信发送子模块，适于调用短信发送接口，将所述预警短信发送至目标终端。
B12、根据权利要求B8-B12其中之一所述的装置，其特征在于，所述打包任务触发模块包括：
代码库监控子模块，适于监控源代码版本控制系统的代码库中是否出现新提交的代码块；
打包任务触发子模块，适于如果源代码版本控制系统的代码库中出现新提交的代码块，则针对所述代码块，触发用于生成测试安装包的打包任务。
B13、根据权利要求B8-B12其中之一所述的装置，其特征在于，所述测试模块包括：
测试通知模块，适于在所述打包任务执行完毕之后，调用各测试接口，向相应的测试服务器发送测试通知；所述测试通知包括测试安装包的位置信息、打包任务编号、代码块编号；所述测试服务器根据所述测试通知获取测试安装包进行性能测试。
B14、根据权利要求B8-B12其中之一所述的装置，其特征在于，所述关联记录模块包括：
结果发送模块，适于将由性能测试得到的测试结果、相应的打包任务编号、相应的代码块编号发送至报告服务器；所述报告服务器将测试结果、打包任务编号、代码块编号关联存储。
C15、一种应用性能监控系统，包括：
持续集成服务器、各测试服务器、报告服务器；
所述持续集成服务器包括：
打包任务触发模块，适于对于新提交的针对一应用的代码块，触发用于生成测试安装包的打包任务；其中，所述打包任务包括打包任务编号，所述代码块包括代码块编号；
测试通知模块，适于在所述打包任务执行完毕之后，在所述打包任务执行完毕之后，调用各测试接口，向相应的测试服务器发送测试通知；所述测试通知包括测试安装包的位置信息、打包任务编号、代码块编号；
各个测试服务器包括：
测试模块，适于根据所述测试通知获取测试安装包进行性能测试；
结果发送模块，适于将由性能测试得到的测试结果、相应的打包任务编号、相应的代码块编号发送至报告服务器；
所述报告服务器包括：
关联记录模块，适于将测试结果、打包任务编号、代码块编号关联存储。
C16、根据权利要求C15所述的系统，其特征在于，在所述报告服务器中的关联记录模块之后，还包括：
对比分析模块，适于根据所述应用的测试结果的历史记录，对最新记录的测试结果进行对比分析；
预警模块，适于当对比分析结果达到第一阈值条件，则发送预警信息至目标对象。
C17、根据权利要求C16所述的系统，其特征在于，所述预警模块包括：
预警邮件生成子模块，适于基于对比分析结果，生成预警邮件；
预警邮件发送子模块，适于调用邮件发送接口，将所述预警邮件发送至目标邮箱账户；
C18、根据权利要求C16所述的系统，其特征在于，所述预警模块包括：
预警短信生成子模块，适于基于对比分析结果，生成预警短信；
预警短信发送子模块，适于调用短信发送接口，将所述预警短信发送至目标终端。
C19、根据权利要求C15-C18其中之一所述的系统，其特征在于，所述打包任务触发模块包括：
代码库监控子模块，适于监控源代码版本控制系统的代码库中是否出现新提交的代码块；
打包任务触发子模块，适于如果源代码版本控制系统的代码库中出现新提交的代码块，则针对所述代码块，触发用于生成测试安装包的打包任务。
D20、一种应用性能监控设备，包括：
存储器，加载有多条可执行指令；
处理器，执行所述多条可执行指令；所述多条指令包括执行以下步骤的方法：
对于新提交的针对一应用的代码块，触发用于生成测试安装包的打包任务；其中，所述打包任务包括打包任务编号，所述代码块包括代码块编号；
在所述打包任务执行完毕之后，调用至少一个测试接口，对生成的测试安装包进行性能测试；
将由性能测试得到的测试结果，与打包任务编号和代码块编号进行关联记录。
Claims (10)
1.一种应用性能监控方法，包括：
对于新提交的针对一应用的代码块，触发用于生成测试安装包的打包任务；其中，所述打包任务包括打包任务编号，所述代码块包括代码块编号；
在所述打包任务执行完毕之后，调用至少一个测试接口，对生成的测试安装包进行性能测试；
将由性能测试得到的测试结果，与打包任务编号和代码块编号进行关联记录。
2.如权利要求1所述的方法，其特征在于，在将由性能测试得到的测试结果，结合打包任务编号和代码块编号进行记录的步骤之后，还包括：
根据所述应用的测试结果的历史记录，对最新记录的测试结果进行对比分析；
当对比分析结果达到第一阈值条件，则发送预警信息至目标对象。
3.根据权利要求2所述的方法，其特征在于，所述发送预警信息至目标客户端的步骤包括：
基于对比分析结果，生成预警邮件；
调用邮件发送接口，将所述预警邮件发送至目标邮箱账户。
4.根据权利要求2所述的方法，其特征在于，所述发送预警信息至目标客户端的步骤包括：
基于对比分析结果，生成预警短信；
调用短信发送接口，将所述预警短信发送至目标终端。
5.根据权利要求1-4其中之一所述的方法，其特征在于，所述对于新提交的针对一应用的代码块，触发用于生成测试安装包的打包任务的步骤，包括：
监控源代码版本控制系统的代码库中是否出现新提交的代码块；
如果源代码版本控制系统的代码库中出现新提交的代码块，则针对所述代码块，触发用于生成测试安装包的打包任务。
6.根据权利要求1-4其中之一所述的方法，其特征在于，所述在所述打包任务执行完毕之后，调用至少一个测试接口，对生成的测试安装包进行 性能测试的步骤，包括：
在所述打包任务执行完毕之后，调用各测试接口，向相应的测试服务器发送测试通知；所述测试通知包括测试安装包的位置信息、打包任务编号、代码块编号；所述测试服务器根据所述测试通知获取测试安装包进行性能测试。
7.根据权利要求1-4其中之一所述的方法，其特征在于，所述将由性能测试得到的测试结果，结合打包任务编号和代码块编号进行记录的步骤包括：
将由性能测试得到的测试结果、相应的打包任务编号、相应的代码块编号发送至报告服务器；所述报告服务器将测试结果、打包任务编号、代码块编号关联存储。
8.一种应用性能监控装置，包括：
打包任务触发模块，适于对于新提交的针对一应用的代码块，触发用于生成测试安装包的打包任务；其中，所述打包任务包括打包任务编号，所述代码块包括代码块编号；
测试模块，适于在所述打包任务执行完毕之后，调用至少一个测试接口，对生成的测试安装包进行性能测试；
关联记录模块，适于将由性能测试得到的测试结果，与打包任务编号和代码块编号进行关联记录。
9.一种应用性能监控系统，包括：
持续集成服务器、各测试服务器、报告服务器；
所述持续集成服务器包括：
打包任务触发模块，适于对于新提交的针对一应用的代码块，触发用于生成测试安装包的打包任务；其中，所述打包任务包括打包任务编号，所述代码块包括代码块编号；
测试通知模块，适于在所述打包任务执行完毕之后，在所述打包任务执行完毕之后，调用各测试接口，向相应的测试服务器发送测试通知；所述测试通知包括测试安装包的位置信息、打包任务编号、代码块编号；
各个测试服务器包括：
测试模块，适于根据所述测试通知获取测试安装包进行性能测试；
结果发送模块，适于将由性能测试得到的测试结果、相应的打包任务编号、相应的代码块编号发送至报告服务器；
所述报告服务器包括：
关联记录模块，适于将测试结果、打包任务编号、代码块编号关联存储。
10.一种应用性能监控设备，包括：
存储器，加载有多条可执行指令；
处理器，执行所述多条可执行指令；所述多条指令包括执行以下步骤的方法：
对于新提交的针对一应用的代码块，触发用于生成测试安装包的打包任务；其中，所述打包任务包括打包任务编号，所述代码块包括代码块编号；
在所述打包任务执行完毕之后，调用至少一个测试接口，对生成的测试安装包进行性能测试；
将由性能测试得到的测试结果，与打包任务编号和代码块编号进行关联记录。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201510850272.5A CN106817265A (zh) | 2015-11-27 | 2015-11-27 | 一种应用性能监控方法和装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201510850272.5A CN106817265A (zh) | 2015-11-27 | 2015-11-27 | 一种应用性能监控方法和装置 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN106817265A true CN106817265A (zh) | 2017-06-09 |
Family
ID=59155501
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201510850272.5A Pending CN106817265A (zh) | 2015-11-27 | 2015-11-27 | 一种应用性能监控方法和装置 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN106817265A (zh) |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN109783128A (zh) * | 2018-12-13 | 2019-05-21 | 平安普惠企业管理有限公司 | 代码改动通知方法、设备、存储介质及装置 |
| CN110716851A (zh) * | 2018-07-12 | 2020-01-21 | 北京奇虎科技有限公司 | 一种测试方法和装置 |
| CN111984341A (zh) * | 2020-08-31 | 2020-11-24 | 卫宁健康科技集团股份有限公司 | 项目监测方法、装置、电子设备和存储介质 |
| CN112363927A (zh) * | 2020-11-10 | 2021-02-12 | 广州品唯软件有限公司 | 代码测试方法、装置、计算机设备、存储介质 |
-
2015
- 2015-11-27 CN CN201510850272.5A patent/CN106817265A/zh active Pending
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110716851A (zh) * | 2018-07-12 | 2020-01-21 | 北京奇虎科技有限公司 | 一种测试方法和装置 |
| CN109783128A (zh) * | 2018-12-13 | 2019-05-21 | 平安普惠企业管理有限公司 | 代码改动通知方法、设备、存储介质及装置 |
| CN111984341A (zh) * | 2020-08-31 | 2020-11-24 | 卫宁健康科技集团股份有限公司 | 项目监测方法、装置、电子设备和存储介质 |
| CN111984341B (zh) * | 2020-08-31 | 2021-06-22 | 卫宁健康科技集团股份有限公司 | 项目监测方法、装置、电子设备和存储介质 |
| CN112363927A (zh) * | 2020-11-10 | 2021-02-12 | 广州品唯软件有限公司 | 代码测试方法、装置、计算机设备、存储介质 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US9256517B1 (en) | Display of aggregated stack traces in a source code viewer | |
| CN106817265A (zh) | 一种应用性能监控方法和装置 | |
| US10241897B2 (en) | Identifying test gaps using code execution paths | |
| US8707275B2 (en) | Simulation environment for distributed programs | |
| US20190114436A1 (en) | Method for automatically detecting security vulnerability based on hybrid fuzzing, and apparatus thereof | |
| US10664385B1 (en) | Debugging in an actor-based system | |
| US20150026664A1 (en) | Method and system for automated test case selection | |
| CN105550104B (zh) | 应用程序性能测试方法及装置 | |
| CN105357030B (zh) | 一种测试平台上的终端设备的离线恢复方法、装置和系统 | |
| CN107392018B (zh) | 应用程序脱壳方法及装置 | |
| US20170351597A1 (en) | Identifying and isolating library code in software applications | |
| US9141363B2 (en) | Application construction for execution on diverse computing infrastructures | |
| CN103595770A (zh) | Sdk实现文件下载的方法与装置 | |
| CN107145365A (zh) | 生成应用程序安装包的方法、加载应用程序的方法及装置 | |
| CN103595769A (zh) | Sdk实现文件上传的方法与装置 | |
| US11573885B1 (en) | System and method for test selection according to test impact analytics | |
| CN109407646B (zh) | 车辆故障数据的获取方法、装置、存储介质和管理服务器 | |
| US9710360B2 (en) | Optimizing error parsing in an integrated development environment | |
| CN108322524A (zh) | 一种负载均衡设备会话保持测试方法及装置 | |
| CN105630545A (zh) | 浏览器启动方法及装置 | |
| CN107977304B (zh) | 一种系统调试方法和装置 | |
| CN110968507B (zh) | 覆盖率统计方法及装置 | |
| US11036624B2 (en) | Self healing software utilizing regression test fingerprints | |
| CN114020513A (zh) | 一种处理日志信息的方法和装置 | |
| US9792202B2 (en) | Identifying a configuration element value as a potential cause of a testing operation failure |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20170609 |
|
| WD01 | Invention patent application deemed withdrawn after publication |