CN102184137A - 一种无人值守的智能的自动化回归测试方法 - Google Patents

一种无人值守的智能的自动化回归测试方法 Download PDF

Info

Publication number
CN102184137A
CN102184137A CN2011101249605A CN201110124960A CN102184137A CN 102184137 A CN102184137 A CN 102184137A CN 2011101249605 A CN2011101249605 A CN 2011101249605A CN 201110124960 A CN201110124960 A CN 201110124960A CN 102184137 A CN102184137 A CN 102184137A
Authority
CN
China
Prior art keywords
scene
script
executing
configuration file
walkthrough
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN2011101249605A
Other languages
English (en)
Inventor
程宝君
刘俊红
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Inspur Group Shandong General Software Co Ltd
Original Assignee
Inspur Group Shandong General Software Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Inspur Group Shandong General Software Co Ltd filed Critical Inspur Group Shandong General Software Co Ltd
Priority to CN2011101249605A priority Critical patent/CN102184137A/zh
Publication of CN102184137A publication Critical patent/CN102184137A/zh
Pending legal-status Critical Current

Links

Images

Abstract

本发明公开了一种无人值守的智能的自动化回归测试方法，属于自动化测试领域。该方法包括以下内容：以业务测试场景为单位组织脚本形成测试场景脚本，主脚本是对多个测试场景脚本调用的罗列；场景之间的关系通过场景关系表的场景依赖项体现；场景脚本运行结果记录在配置文件中；场景脚本运行前检查场景关系表里的依赖的场景的运行结果；场景脚本执行前检查程序状态；主脚本对场景脚本的调用进行封装增加异常捕获和处理；一个场景脚本执行结束后都会回写配置文件中的运行结果；不管一个场景脚本执行结果如何都可以执行下一个场景脚本的走查。与现有技术相比，本发明的测试方法具有人工投入少、执行效率高等特点。

Description

一种无人值守的智能的自动化回归测试方法
 
技术领域
本发明涉及自动化测试领域，具体地说是一种无人值守的智能的自动化回归测试方法。
背景技术
现有技术中，自动化回归测试时，脚本的回归走查就是场景脚本的罗列，所有场景脚本依次执行，这时当其中一个场景脚本走查发生了异常（比如程序发生变动或是出现错误）时，整个脚本走查就停止，必须由测试人员分析异常原因，然后处理完异常后在进行后续的走查。进行后续脚本走查的时候还需要根据测试用例分析哪些脚本可以走查。简单来说就是有人值守的非智能的自动化回归测试。其结构框图如附图1所示。
上述测试的走查模式存在以下不足：过程脚本走查中必须投入很大的人工工作量用于监控脚本走查情况和出现异常后由人来判断和处理，以及选择场景进行后续走查。
发明内容
本发明的技术任务是针对上述现有技术的不足，提供一种无人值守的智能的自动化回归测试方法。该方法一方面降低了自动化回归测试中的人工投入的工作量，同时提高自动化测试的执行效率；并且还有应用范围广泛应用成本低廉的特点。
本发明的技术任务是按以下方式实现的：一种无人值守的智能的自动化回归测试方法，其特点是：
1)    以业务场景为单位组织脚本形成场景脚本，主脚本是对多个场景脚本调用的罗列；
2)    场景之间的关系通过场景关系表的场景依赖项体现；
3)    场景脚本运行结果记录在配置文件中；
4)    场景脚本运行前检查场景关系表里的依赖的场景的运行结果，当依赖场景运行通过再运行此场景；
5)    场景脚本执行前检查程序状态，当程序不可用时将程序恢复可用状态；
6)    主脚本对场景脚本的调用进行封装增加异常捕获和处理，当脚本走查发生异常时，异常捕获处理单元可以捕获、记录并处理相关异常信息；
7)    一个场景脚本执行结束后都会回写配置文件中的运行结果；
8)      不管一个场景脚本执行结果如何都可以执行下一个场景脚本的走查。
进一步的，还可以设置日志文件，可以将测试过程的所有情况都记录在日志文件中。
更进一步的，步骤3中所述记录场景运行结果的配置文件和场景关系表的记录是对应的，可以根据场景关系表生成。
本发明无人值守的智能的自动化回归测试方法的特点如下：
1、无人值守
l       以业务场景为单位组织脚本形成场景脚本，主脚本是对多个场景脚本调用的罗列。这样结构是实现当一个场景脚本异常时能够走查另外一个场景脚本的前提。
l       主脚本对场景脚本的调用进行了封装增加异常捕获和异常处理。当脚本走查发生异常时，异常处理单元可以捕获并记录相关异常信息，同时也保证了发生异常时整个脚本走查不会中断。
l       场景脚本真正执行前还要首先检查程序状态，当程序不可用时根据场景关系表里的本场景的重置选项将被测程序重置。例如：当上一个场景脚本执行发生了异常，导致了当前程序不可用，这时可以结束程序，然后用重置选项如执行此场景的用户、岗位、日期、口令等。重新登陆程序，然后执行当前场景。所以不管前一个场景执行结果如何下一个需要执行的场景脚本都会被执行。
2、智能走查
l       配置文件和场景关系表的记录是对应的，可以根据场景关系表生成。
l       场景之间的关系通过场景关系表的场景依赖项体现。当一个场景执行结束后不管有没有异常都会回写配置文件。
l       场景运行前检查场景关系表里的依赖的场景的运行结果，当依赖场景运行通过再运行此场景。
根据以上3项特点实现了脚本的智能走查。
3、结果分析
l       所有的过程都会记录在一个日志文件中；总体的执行结果保存于配置文件中，而异常信息会生成一个异常图片文件和一个异常文本文件。
l       所有场景脚本执行完成后测试人员需要根据配置文件了解整体运行结果，然后还需要研究异常图片和文字信息以及日志看是异常的中断是程序错误、程序变动还是脚本的问题，根据情况登记问题或是修改脚本。
本发明的无人值守的智能的自动化回归测试方法与现有技术相比具有以下突出的有益效果：
（一）通过异常捕获和处理单元以及程序重置方法，实现了真正的无人值守，降低了自动化回归测试中的人工投入的工作量。
（二）通过使用场景关系表的依赖项，实现了智能的自动化走查，提高了自动化测试的执行效率。
（三）包含总体运行结果；异常图片、文本信息；执行日志的结果展示方式便于后续分析处理。
（四）本发明创建了一个公共的经过封装的脚本调用方法，而没有在每个场景脚本乃至功能脚本中进行异常处理，所以应用本发明的方法投入工作量很少，只需要增加场景关系表以及修改主脚本调用场景脚本的方法就行了。
（五）本方法是一种通用方法，而且场景脚本的颗粒度可以由此方法的使用者根据被测程序的情况来确定。
（六）本方法是一种通用的脚本实现方法，不局限于某一个自动化脚本工具，应用范围非常广。
附图说明
附图1是现有技术中自动化测试方法结构框图；
附图2是本发明无人值守的智能的自动化回归测试方法的结构框图；
附图3是图2所示方法的控制流程图。
具体实施方式
参照说明书附图以具体实施例对本发明的无人值守的智能的自动化回归测试方法作以下详细地说明。
实施例：
如附图2所示，本发明的无人值守的智能的自动化回归测试方法包含以下内容：
1）、以业务场景为单位组织脚本形成场景脚本，主脚本是对多个场景脚本调用的罗列。
2）、场景之间的关系通过场景关系表的场景依赖项体现。
3）、场景运行结果记录在配置文件中，这个配置文件和场景关系表的记录是对应的，可以根据场景关系表生成。
4）、场景运行前检查场景关系表里的依赖的场景的运行结果，当依赖场景运行通过再运行此场景。
5）、场景运行前检查程序状态，当程序不可用时将程序恢复可用状态。
6）、主脚本对场景脚本的调用进行封装增加异常捕获和异常处理。当脚本走查发生异常时，异常处理单元可以捕获并记录相关异常信息。
7）、一个场景脚本执行结束后都会回写配置文件中的运行结果。
8）、不管一个场景执行结果如何都可以执行下一个场景脚本的走查。
9）、所有过程的情况都会记录在一个日志文件中。
如附图3所示本发明测试方法的控制流程如下：
每个业务场景执行前首先检查配置文件中本场景脚本的运行状态，如果是未运行再进行下一步操作，否者退出当前场景的执行。下一步根据场景关系表中的依赖项检查本场景的依赖场景的运行状态如果是运行成功再执行本场景。然后真正调用本场景之前还会检查当前被测程序的可用性，如果不可用将程序按照场景关系表中的重置选项将程序重置为可用状态。此时才真正开始用被封装的调用方法调用场景脚本。被封装的调用方法里同时包含了异常捕获模块，当被调用的场景执行过程中发生异常的时候就会被异常捕获模块捕获到并交给异常处理模块进行处理，异常处理模块首先会在配置文件中将此场景脚本的运行状态修改为运行失败，然后会捕获当前异常的图片信息，然后获取当前异常的异常文字信息，这个文字信息包含了程序报错的详细文字信息和脚本异常的信息形成整体的异常文本文件。然后再关闭报错或异常窗口，并关闭当前场景打开的功能。不管此场景脚本的执行结果如何，系统都会执行下一个场景脚本。而且所有过程的结果都会记录在一个日志文件中。
本发明测试方法已经在申请人的公司的ERP软件产品的测试过程中进行了应用，试应用方式如下：
1.  该产品的自动化测试就是一个主脚本调用多个场景脚本的结构。这方面不需要作任何修改。
2.  增加了脚本依赖关系表，记录场景脚本间的依赖关系，以及场景重置的条件（包括用户、日期、岗位、口令）。
3.  开发了符合此方法的包含运行条件判断，程序重置，异常捕获、处理等的公共的封装过的脚本调用函数MyCallScript。
4.  主脚本调用业务场景脚本的时候使用MyCallScript。
应用后能够真正实现无人值守的智能的自动化回归测试，可以晚上下班后跑上脚本，然后第二天上班时分析脚本走查的结果（配置文件，异常信息，日志等）并据此进行相关后续处理（登记问题，修改脚本）。充分利用了时间和机器资源，提高了自动化测试效率，缩短了程序测试周期。

Claims (3)

1.一种无人值守的智能的自动化回归测试方法，其特征在于：包括以下内容：
以业务场景为单位组织脚本形成场景脚本，主脚本是对多个场景脚本调用的罗列； 
场景之间的关系通过场景关系表的场景依赖项体现；
场景脚本运行结果记录在配置文件中；
场景脚本运行前检查场景关系表里的依赖的场景的运行结果，当依赖场景运行通过再运行此场景；
场景脚本执行前检查程序状态，当程序不可用时将程序恢复可用状态；
主脚本对场景脚本的调用进行封装增加异常捕获和处理，当脚本走查发生异常时，异常捕获处理单元可以捕获、记录并处理相关异常信息；
一个场景脚本执行结束后都会回写配置文件中的运行结果；
不管一个场景脚本执行结果如何都可以执行下一个场景脚本的走查。
2.根据权利要求1所述的无人值守的智能的自动化回归测试方法，其特征在于，设有日志文件，测试过程的所有情况都记录在日志文件中。
3.根据权利要求1或2所述的无人值守的智能的自动化回归测试方法，其特征在于，步骤3中所述记录场景运行结果的配置文件和场景关系表的记录是对应的，可以根据场景关系表生成。
CN2011101249605A 2011-05-16 2011-05-16 一种无人值守的智能的自动化回归测试方法 Pending CN102184137A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN2011101249605A CN102184137A (zh) 2011-05-16 2011-05-16 一种无人值守的智能的自动化回归测试方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN2011101249605A CN102184137A (zh) 2011-05-16 2011-05-16 一种无人值守的智能的自动化回归测试方法

Publications (1)

Publication Number Publication Date
CN102184137A true CN102184137A (zh) 2011-09-14

Family

ID=44570317

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2011101249605A Pending CN102184137A (zh) 2011-05-16 2011-05-16 一种无人值守的智能的自动化回归测试方法

Country Status (1)

Country Link
CN (1) CN102184137A (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102799526A (zh) * 2012-07-10 2012-11-28 浪潮集团山东通用软件有限公司 一种分布式智能调度方法
CN103729286A (zh) * 2012-10-10 2014-04-16 上海斐讯数据通信技术有限公司 用于嵌入式设备的自动化测试平台
CN107577591A (zh) * 2016-07-05 2018-01-12 中兴通讯股份有限公司 一种自动化测试异常保护的方法、装置及系统
CN110109820A (zh) * 2019-03-19 2019-08-09 深圳壹账通智能科技有限公司 回归测试用例确定方法、装置、计算机设备及存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS62138935A (ja) * 1985-12-11 1987-06-22 Hitachi Ltd データ処理方法
EP1113367A1 (en) * 1999-12-28 2001-07-04 GE Medical Systems Global Technology Company LLC Automated regression testing of workstation software
US20030126506A1 (en) * 2001-12-31 2003-07-03 Frank Lin Program testing system and method
CN101303664A (zh) * 2008-06-19 2008-11-12 腾讯科技（深圳）有限公司 一种专业快速测试装置和方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS62138935A (ja) * 1985-12-11 1987-06-22 Hitachi Ltd データ処理方法
EP1113367A1 (en) * 1999-12-28 2001-07-04 GE Medical Systems Global Technology Company LLC Automated regression testing of workstation software
US20030126506A1 (en) * 2001-12-31 2003-07-03 Frank Lin Program testing system and method
CN101303664A (zh) * 2008-06-19 2008-11-12 腾讯科技（深圳）有限公司 一种专业快速测试装置和方法

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102799526A (zh) * 2012-07-10 2012-11-28 浪潮集团山东通用软件有限公司 一种分布式智能调度方法
CN103729286A (zh) * 2012-10-10 2014-04-16 上海斐讯数据通信技术有限公司 用于嵌入式设备的自动化测试平台
CN103729286B (zh) * 2012-10-10 2017-10-03 上海斐讯数据通信技术有限公司 用于嵌入式设备的自动化测试平台
CN107577591A (zh) * 2016-07-05 2018-01-12 中兴通讯股份有限公司 一种自动化测试异常保护的方法、装置及系统
CN110109820A (zh) * 2019-03-19 2019-08-09 深圳壹账通智能科技有限公司 回归测试用例确定方法、装置、计算机设备及存储介质
WO2020186810A1 (zh) * 2019-03-19 2020-09-24 深圳壹账通智能科技有限公司 回归测试用例确定方法、装置、计算机设备及存储介质

Similar Documents

Publication Publication Date Title
CN102141962B (zh) 一种安全性分布式测试框架系统及其测试方法
CN110768872B (zh) 巡检方法、系统、装置、计算机设备和存储介质
CN111756582B (zh) 基于nfv日志告警的业务链监控方法
US20090183143A1 (en) Method and apparatus for generating test cases of software system
CN110232014A (zh) 业务流程自动化测试方法、装置、控制器及介质
CN103049371A (zh) Android应用程序测试方法和测试装置
CN101930399A (zh) 一种对软件测试进行记录的方法
CN107526676B (zh) 一种跨系统测试方法及装置
WO2008018035A2 (en) Methods and products for determining and visualizin ic behaviour
US20160274997A1 (en) End user monitoring to automate issue tracking
CN106682036A (zh) 一种数据交换系统及其交换方法
CN102937932A (zh) 集成异构测试工具的自动化测试装置及方法
CN103631713A (zh) Erp软件自动化测试系统及方法
CN107045475B (zh) 测试方法和装置
CN109408341A (zh) 分布式存储系统性能监控方法、装置、设备及可读存储介质
CN115686540B (zh) 基于鸿蒙系统的rpa控制方法及系统
CN102184137A (zh) 一种无人值守的智能的自动化回归测试方法
CN101216766A (zh) 原子操作封装装置和方法
CN104572428A (zh) 基于windows操作系统下的复杂控件测试方法
CN110489317A (zh) 基于工作流的云系统任务运行故障诊断方法与系统
CN107783879B (zh) 一种用于分析工作流执行路径的方法与设备
CN106529304B (zh) 一种安卓应用并发漏洞检测系统
CN111475412A (zh) 软件测试方法、装置、电子设备和计算机可读存储介质
CN105550103A (zh) 一种基于自定义测试脚本的自动化测试方法
CN111970151A (zh) 虚拟及容器网络的流量故障定位方法及系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20110914