CN110825643A - 一种监控测试任务执行情况的方法 - Google Patents
一种监控测试任务执行情况的方法 Download PDFInfo
- Publication number
- CN110825643A CN110825643A CN201911092244.6A CN201911092244A CN110825643A CN 110825643 A CN110825643 A CN 110825643A CN 201911092244 A CN201911092244 A CN 201911092244A CN 110825643 A CN110825643 A CN 110825643A
- Authority
- CN
- China
- Prior art keywords
- test
- task
- abnormal
- execution
- initialization
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000012360 testing method Methods 0.000 title claims abstract description 99
- 238000000034 method Methods 0.000 title claims abstract description 35
- 238000012544 monitoring process Methods 0.000 title claims abstract description 17
- 230000002159 abnormal effect Effects 0.000 claims abstract description 28
- 230000008569 process Effects 0.000 claims abstract description 16
- 238000013515 script Methods 0.000 claims abstract description 14
- 108700041286 delta Proteins 0.000 claims description 6
- 238000009826 distribution Methods 0.000 claims description 6
- 238000004422 calculation algorithm Methods 0.000 claims description 3
- 238000009827 uniform distribution Methods 0.000 claims description 3
- 230000009286 beneficial effect Effects 0.000 abstract description 5
- 230000005856 abnormality Effects 0.000 abstract description 4
- 239000002699 waste material Substances 0.000 abstract description 4
- 238000005259 measurement Methods 0.000 description 8
- 230000006870 function Effects 0.000 description 5
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 230000007246 mechanism Effects 0.000 description 3
- 230000000007 visual effect Effects 0.000 description 3
- 230000002547 anomalous effect Effects 0.000 description 2
- 230000007547 defect Effects 0.000 description 2
- 230000000737 periodic effect Effects 0.000 description 2
- 238000013480 data collection Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 230000000977 initiatory effect Effects 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000000750 progressive effect Effects 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
- 238000013522 software testing Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/36—Preventing errors by testing or debugging software
- G06F11/3668—Software testing
- G06F11/3672—Test management
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/36—Preventing errors by testing or debugging software
- G06F11/3668—Software testing
- G06F11/3672—Test management
- G06F11/3688—Test management for test execution, e.g. scheduling of test suites
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/36—Preventing errors by testing or debugging software
- G06F11/3668—Software testing
- G06F11/3672—Test management
- G06F11/3692—Test management for test results analysis
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Computer Hardware Design (AREA)
- Quality & Reliability (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Debugging And Monitoring (AREA)
Abstract
本发明公开了一种监控测试任务执行情况的方法，所述监控测试任务执行情况的方法包括以下步骤：S1、开始执行所选测试任务，向执行部件完成测试指令，执行部件完成测试系统初始化操作；S2、初始化模板完成后，获取测试任务脚本，启动脚本，捕获网络数据，并写入临时文件；S3、读取任务，将读取到的任务与系统备份任务列表进行对比，在对比的过程中检测异常事件；S4、对检测到的异常数据进行收集，并将收集到的异常数据上传到服务器的终端。本发明可以对测试任务执行情况进行监控和控制，收集测试过程中的异常信息，为测试结果的分析提供了有益的参考数据，减少了由于异常导致的测试时间浪费，提高了测试效率。
Description
技术领域
本发明涉及软件测试系统技术领域，尤其涉及一种监控测试任务执行情况的方法。
背景技术
测试执行是软件测试过程中的关键的阶段，测试相关人员执行项目覆盖范围内的测试用例发现缺陷，验证软件功能是否符合需求，评估软件的安全性，易用性，可靠性，适用性。同时测试执行的阶段也是最难控制的，测试执行进度较大程度的影响已制定的测试计划和执行测试计划。
运用有效直观的方法去监控测试执行进度的状态，以及清晰指导测试执行的进度之后，在项目管理上面应该如何采取有效的措施解决问题成为的关注的重点。
发明内容
本发明的目的是为了解决现有技术中存在的缺点，而提出的一种监控测试任务执行情况的方法，其可以对测试任务执行情况进行监控和控制，收集测试过程中的异常信息，为测试结果的分析提供了有益的参考数据，减少了由于异常导致的测试时间浪费，提高了测试效率；可以快速方便地整合多种主流测试工具软件的函数/脚本，形成直观、形象的框架语言，能够大大降低测试工具、操作系统的偶合度，提高测试框架的可复用性，利用分布式执行机制，合理地利用空闲资源，大幅提升测试效率并降低测试风险。
为了实现上述目的，本发明采用了如下技术方案：
一种监控测试任务执行情况的方法，所述监控测试任务执行情况的方法包括以下步骤：
S1、开始执行所选测试任务，向执行部件完成测试指令，执行部件完成测试系统初始化操作；
S2、初始化模板完成后，获取测试任务脚本，启动脚本，捕获网络数据，并写入临时文件；
S3、读取任务，将读取到的任务与系统备份任务列表进行对比，在对比的过程中检测异常事件；
S4、对检测到的异常数据进行收集，并将收集到的异常数据上传到服务器的终端；
S5、输出当前测试任务的执行状态。
优选地，所述步骤S2中，若初始化模板未完成，则继续执行所述步骤S1,直至模板初始化完成。
优选地，所述步骤S3中，检测到异常事件后，停止读取任务和对比。
优选地，所述步骤S5中，输出当前测试的任务状态后，算法周期结束，重新采集输出模板。
优选地，所述步骤S4中，异常数据的分布由泊松到达过程确定：
S41、先确定平均到达间隔λ的值；
S42、确定一次测试周期T中的异常数n；
S43、产生一个独立同服从均匀分布U[0，1]的伪随机数序列u1，u2，...，un；
S44、产生到达时间间隔伪随机序列Δ1，Δ2，...，Δn；
S45、确定异常时刻t1，t2，...，tn为ti＝t0+Δ1+Δ2+...+Δi。
优选地，所述步骤S4设置输出结果样式为文本、图片和声音。
本发明具有以下有益效果：
1、可以对测试任务执行情况进行监控和控制，收集测试过程中的异常信息，为测试结果的分析提供了有益的参考数据，减少了由于异常导致的测试时间浪费，提高了测试效率；
2、可以快速方便地整合多种主流测试工具软件的函数/脚本，形成直观、形象的框架语言，能够大大降低测试工具、操作系统的偶合度，提高测试框架的可复用性，利用分布式执行机制，合理地利用空闲资源，大幅提升测试效率并降低测试风险。
附图说明
图1为本发明提出的一种监控测试任务执行情况的方法的流程图；
图2为本发明提出的一种监控测试任务执行情况的方法的系统框图。
具体实施方式
为使本发明的上述目的、特征和优点能够更加明显易懂，下面结合附图对本发明的具体实施方式做详细的说明。在下面的描述中阐述了很多具体细节以便于充分理解本发明。但是本发明能够以很多不同于在此描述的其它方式来实施，本领域技术人员可以在不违背本发明内涵的情况下做类似改进，因此本发明不受下面公开的具体实施的限制。
需要说明的是，当元件被称为“固定于”另一个元件，它可以直接在另一个元件上或者也可以存在居中的元件。当一个元件被认为是“连接”另一个元件，它可以是直接连接到另一个元件或者可能同时存在居中元件。本文所使用的术语“垂直的”、“水平的”、“左”、“右”以及类似的表述只是为了说明的目的，并不表示是唯一的实施方式。
除非另有定义，本文所使用的所有的技术和科学术语与属于本发明的技术领域的技术人员通常理解的含义相同。本文中在本发明的说明书中所使用的术语只是为了描述具体的实施例的目的，不是旨在于限制本发明。本文所使用的术语“及/或”包括一个或多个相关的所列项目的任意的和所有的组合。
参照图1-2，一种监控测试任务执行情况的方法，所述监控测试任务执行情况的方法包括以下步骤：
S1、开始执行所选测试任务，向执行部件完成测试指令，执行部件完成测试系统初始化操作；
S2、初始化模板完成后，获取测试任务脚本，启动脚本，捕获网络数据，并写入临时文件,临时文件为预先设置好测试所用参数：所述参数包括源、目的IP地址，测试指标项；确定主动测量包在时间上的分布，即确定在一次测量中异常数据的分布；在源节点、目的节点之间进行主动式发包测量，得到主动测量的测试结果，若初始化模板未完成，则继续执行所述步骤S1,直至模板初始化完成；
S3、读取任务，将读取到的任务与系统备份任务列表进行对比，在对比的过程中检测异常事件,检测到异常事件后，停止读取任务和对比，在监测有效期范围内，根据测试任务脚本发起周期性的、从源节点到目的节点的主动发包测试，并将测试结果保存至数据库；同时在用户端网络出口节点上执行一次被动测量，得到被动测量的测试结果并保存至数据库；
S4、对检测到的异常数据进行收集，并将收集到的异常数据上传到服务器的终端，待测的测试指标名称，源节点IP地址、目的节点IP地址；根据任务脚本中要求的测试周期要求，产生一个测试周期中的测试时刻；生成测试任务表，并存放至数据库中；
异常数据的分布由泊松到达过程确定：
S41、先确定平均到达间隔λ的值；
S42、确定一次测试周期T中的异常数n；
S43、产生一个独立同服从均匀分布U[0，1]的伪随机数序列u1，u2，...，un；
S44、产生到达时间间隔伪随机序列Δ1，Δ2，...，Δn；
S45、确定异常时刻t1，t2，...，tn为ti＝t0+Δ1+Δ2+...+Δi；
设置输出结果样式为文本、图片和声音；
采用泊松到达过程来确定异常数据的分布是因为：测试的目的是为了测出监控执行异常的情况，而监控执行异常情况的计数过程符合泊松过程的特征：监控执行异常的随机事件在不相交的时间区间是独立发生的，而且在充分小的时间区间上最多只发生一次。使用泊松到达过程的主动测量包相当于对监测过程作了一个渐进无偏的泊松抽样，它不会倾向于诱发同步，能够用来准确地收集周期行为的测量样本。
S5、输出当前测试任务的执行状态，输出当前测试的任务状态后，算法周期结束，重新采集输出模板。
需要说明的是，在整个系统中，监控控制模块通过控制消息控制测试任务模块允许，测试任务模块生成相关测试脚本或函数，然后通过数据收集模块收集测试数据，并与系统备份的数据库模块进行对比。
本发明中，可以对测试任务执行情况进行监控和控制，收集测试过程中的异常信息，为测试结果的分析提供了有益的参考数据，减少了由于异常导致的测试时间浪费，提高了测试效率，可以快速方便地整合多种主流测试工具软件的函数/脚本，形成直观、形象的框架语言，能够大大降低测试工具、操作系统的偶合度，提高测试框架的可复用性，利用分布式执行机制，合理地利用空闲资源，大幅提升测试效率并降低测试风险。
以上所述，仅为本发明较佳的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，根据本发明的技术方案及其发明构思加以等同替换或改变，都应涵盖在本发明的保护范围之内。
Claims (6)
1.一种监控测试任务执行情况的方法，其特征在于，所述监控测试任务执行情况的方法包括以下步骤：
S1、开始执行所选测试任务，向执行部件完成测试指令，执行部件完成测试系统初始化操作；
S2、初始化模板完成后，获取测试任务脚本，启动脚本，捕获网络数据，并写入临时文件；
S3、读取任务，将读取到的任务与系统备份任务列表进行对比，在对比的过程中检测异常事件；
S4、对检测到的异常数据进行收集，并将收集到的异常数据上传到服务器的终端；
S5、输出当前测试任务的执行状态。
2.根据权利要求1所述的一种监控测试任务执行情况的方法，其特征在于，所述步骤S2中，若初始化模板未完成，则继续执行所述步骤S1,直至模板初始化完成。
3.根据权利要求1所述的一种监控测试任务执行情况的方法，其特征在于，所述步骤S3中，检测到异常事件后，停止读取任务和对比。
4.根据权利要求1所述的一种监控测试任务执行情况的方法，其特征在于，所述步骤S5中，输出当前测试的任务状态后，算法周期结束，重新采集输出模板。
5.根据权利要求1所述的一种监控测试任务执行情况的方法，其特征在于，所述步骤S4中，异常数据的分布由泊松到达过程确定：
S41、先确定平均到达间隔λ的值；
S42、确定一次测试周期T中的异常数n；
S43、产生一个独立同服从均匀分布U[0，1]的伪随机数序列u1，u2，...，un；
S44、产生到达时间间隔伪随机序列Δ1，Δ2，...，Δn；
S45、确定异常时刻t1，t2，...，tn为ti＝t0+Δ1+Δ2+...+Δi。
6.根据权利要求4所述的一种监控测试任务执行情况的方法，其特征在于，所述步骤S4设置输出结果样式为文本、图片和声音。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201911092244.6A CN110825643A (zh) | 2019-11-11 | 2019-11-11 | 一种监控测试任务执行情况的方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201911092244.6A CN110825643A (zh) | 2019-11-11 | 2019-11-11 | 一种监控测试任务执行情况的方法 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN110825643A true CN110825643A (zh) | 2020-02-21 |
Family
ID=69553853
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201911092244.6A Pending CN110825643A (zh) | 2019-11-11 | 2019-11-11 | 一种监控测试任务执行情况的方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN110825643A (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN115826980A (zh) * | 2022-10-10 | 2023-03-21 | 中科三清科技有限公司 | 数据处理方法、装置、存储介质及电子设备 |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN1905497A (zh) * | 2006-07-31 | 2007-01-31 | 西安西电捷通无线网络通信有限公司 | 一种端到端服务等级协议的评估方法和评估装置 |
| CN101052020A (zh) * | 2007-05-21 | 2007-10-10 | 中兴通讯股份有限公司 | 一种自动化测试执行过程的监控方法和系统 |
| US20150100832A1 (en) * | 2013-10-04 | 2015-04-09 | Unisys Corporation | Method and system for selecting and executing test scripts |
| CN107894950A (zh) * | 2017-10-30 | 2018-04-10 | 北京奇虎科技有限公司 | 一种设备检测方法、装置、服务器及存储介质 |
| CN109697165A (zh) * | 2018-12-20 | 2019-04-30 | 广东电网有限责任公司 | 一种软件自动化安全测试方法、装置及存储介质 |
| US20190303274A1 (en) * | 2018-03-30 | 2019-10-03 | Atlassian Pty Ltd | Systems and methods for monitoring performance of applications |
-
2019
- 2019-11-11 CN CN201911092244.6A patent/CN110825643A/zh active Pending
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN1905497A (zh) * | 2006-07-31 | 2007-01-31 | 西安西电捷通无线网络通信有限公司 | 一种端到端服务等级协议的评估方法和评估装置 |
| CN101052020A (zh) * | 2007-05-21 | 2007-10-10 | 中兴通讯股份有限公司 | 一种自动化测试执行过程的监控方法和系统 |
| US20150100832A1 (en) * | 2013-10-04 | 2015-04-09 | Unisys Corporation | Method and system for selecting and executing test scripts |
| CN107894950A (zh) * | 2017-10-30 | 2018-04-10 | 北京奇虎科技有限公司 | 一种设备检测方法、装置、服务器及存储介质 |
| US20190303274A1 (en) * | 2018-03-30 | 2019-10-03 | Atlassian Pty Ltd | Systems and methods for monitoring performance of applications |
| CN109697165A (zh) * | 2018-12-20 | 2019-04-30 | 广东电网有限责任公司 | 一种软件自动化安全测试方法、装置及存储介质 |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN115826980A (zh) * | 2022-10-10 | 2023-03-21 | 中科三清科技有限公司 | 数据处理方法、装置、存储介质及电子设备 |
| CN115826980B (zh) * | 2022-10-10 | 2023-07-21 | 中科三清科技有限公司 | 数据处理方法、装置、存储介质及电子设备 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN107038107B (zh) | 一种获取应用卡顿信息的方法及装置 | |
| CN106874159A (zh) | 一种集群式自动化测试方法 | |
| CN110244991B (zh) | 一种微服务依赖分析方法及装置 | |
| CN110750458A (zh) | 大数据平台测试方法、装置、可读存储介质及电子设备 | |
| KR20070080313A (ko) | 클라이언트 단말로 제공되는 서비스 성능 분석 방법 및시스템 | |
| CN107168844B (zh) | 一种性能监控的方法及装置 | |
| US9043652B2 (en) | User-coordinated resource recovery | |
| CN110674034A (zh) | 一种健康检查方法、装置及电子设备和存储介质 | |
| CN110825643A (zh) | 一种监控测试任务执行情况的方法 | |
| CN113342608B (zh) | 流式计算引擎任务的监控方法及装置 | |
| CN112306870A (zh) | 一种基于直播app的数据处理方法和装置 | |
| Jiang et al. | An industrial case study on speeding up user acceptance testing by mining execution logs | |
| CN111368104A (zh) | 信息处理方法、装置及设备 | |
| US9542250B2 (en) | Distributed maintenance mode control | |
| CN109684220A (zh) | 一种基于事件回放的浏览器兼容性分析方法 | |
| CN111181796A (zh) | 一种基于能动器的区块链共识协议测试方法及系统 | |
| CN114817035A (zh) | 一种软件测试方法、装置、设备及介质 | |
| CN111190806B (zh) | 一种语音交互设备的日志处理方法和装置 | |
| WO2016026403A1 (zh) | 安全服务的审核处理方法及装置 | |
| CN108390790B (zh) | 路由设备故障诊断方法及装置 | |
| CN103678375A (zh) | 测试状态呈现及异常索引系统与方法 | |
| Falai et al. | Quantitative evaluation of distributed algorithms using the neko framework: The nekostat extension | |
| CN113138872A (zh) | 数据库系统的异常处理装置及方法 | |
| CN112699015B (zh) | 日志输出方法、装置、服务器及计算机可读存储介质 | |
| CN108549691B (zh) | 一种数据库会话跟踪及分析方法及其装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20200221 |