CN101814052A - 一种自动化测试的方法 - Google Patents
一种自动化测试的方法 Download PDFInfo
- Publication number
- CN101814052A CN101814052A CN201010105987A CN201010105987A CN101814052A CN 101814052 A CN101814052 A CN 101814052A CN 201010105987 A CN201010105987 A CN 201010105987A CN 201010105987 A CN201010105987 A CN 201010105987A CN 101814052 A CN101814052 A CN 101814052A
- Authority
- CN
- China
- Prior art keywords
- test
- data
- value
- result
- automatic test
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Debugging And Monitoring (AREA)
Abstract
本发明公开了一种自动化测试的方法,包括1)分析被测程序,选择合适的自动化测试工具;2)测试工具获取目标测试对象有效数据信息,则直接增加数据验证点进行数据校验,不能识别目标测试对象,则需要编制自动化测试脚本,将查询结果或关键数据区域导出到存储装置,即实际值;3)根据测试用例设计出目标程序的正确数据结果,使用相同存储装置,即期望值;4)编制自动化测试脚本,用来对比期望值和实际值,若完全相同则测试通过,目标程序数据信息正确;若有不一致的数据,自动记录错误数据,包括数据位置和数据值,返回测试未通过的结果;5)编制测试脚本,按照所需格式,运行时将自动整理测试结果形成测试报告。该方法是在使用自动化测试工具对目标程序中的查询结果或关键数据区域进行数据验证却无法识别测试对象时的解决方案。
Description
技术领域
本发明涉及自动化软件测试技术领域,尤指一种自动化数据校验方法。
背景技术
目前主流的自动化测试工具,均带有数据验证的功能,基本分为数据验证点,图像验证点,数据库验证点几类。在我们的日常测试工作中,最常用还是数据验证点。但是验证点的使用是以测试工具能够识别测试对象为前提的,如果目标程序不能被识别,或者识别出的结果没有有效的数据信息,这个验证点的增加是无效的,而如果使用自定义函数,或者虚拟对象来做验证点,比较麻烦,不直观,效果非常不好。举例来说,如果某个大型应用程序中的各种查询功能均统一使用了某个OCX控件,而我们使用的测试工具虽然能够识别到该控件,但是识别出的该控件的各种属性都为空,通过其他方法也无法有效的获取数据信息。这就造成对于查询结果的验证无法通过自动化测试来进行,虽然有精确详细的测试用例,也只能靠人工逐一对比,无疑增加了测试成本,降低了测试效率。
发明内容
本发明的目的是提供一种自动化测试的方法,
本发明的目的是按以下方式实现的,改变直接利用测试工具进行数据校验的思路,先利用目标程序(如查询结果)中的另存为或导出功能,将目标测试对象的数据信息放在单独的存储装置中,比如文本或数据表,形成实际值,然后与人工手动设计好的相同格式的期望值进行对比,同时返回对比结果,形成测试报告。
包括以下步骤:
1)分析被测程序,选择合适的自动化测试工具;
2)测试工具获取目标测试对象有效数据信息,则直接增加数据验证点进行数据校验,不能识别目标测试对象,则需要编制自动化测试脚本,将查询结果或关键数据区域导出到存储装置,即实际值;
3)根据测试用例设计出目标程序的正确数据结果,使用相同存储装置,即期望值;
4)编制自动化测试脚本,用来对比期望值和实际值,若完全相同则测试通过,目标程序数据信息正确;若有不一致的数据,自动记录错误数据,包括数据位置和数据值,返回测试未通过的结果;
5)编制测试脚本,按照所需格式,运行时将自动整理测试结果形成测试报告。
该测试方法依赖于自动化测试工具,但不限制于某种测试工具。
数据验证点的增加使用测试工具自动生成或自己设计测试脚本来完成,最大区别在于所使用的测试工具能否识别目标测试对象。
期望值和实际值的对比结果将直接显示在测试工具的控制台,或通过编制测试脚本生成数据校验测试报告,内容包括校验是否通过,未通过时,期望值数据单元和实际值数据单元的所在位置、数值,以便于后期跟踪检查。
期望值的生成需要手动参与,提前根据测试用例制定的,实际值是通过运行自动化测试脚本自动生成。
本发明的优异效果是:我们可以编制脚本,自动化的将查询结果导出到独立的存储装置,通过对比存储装置中的期望值与实际值来完成对查询结果或关键数据区域的数据性验证,从而深层挖掘自动化测试的潜力,完善了自动化测试的数据校验的机制,使自动化测试更加智能有效,也能够更大程度的代替人工测试,提高测试效率。
附图说明
图1是本发明方法的结构示意图;
图2是本发明方法的流程图。
具体实施方式
参照附图对本发明的方法作以下详细的说明。
包括以下步骤:
1、分析被测程序,选择合适的自动化测试工具。
2、如果测试工具不能识别目标测试对象,则需要编制自动化测试脚本,将查询结果或关键数据区域导出到存储装置,即实际值。
3、根据测试用例设计出目标程序的正确数据结果,使用相同存储装置,即期望值。
4、编制自动化测试脚本,用来对比期望值和实际值,若完全相同则测试通过,目标程序数据信息正确;若有不一致的数据,自动记录错误数据,包括数据位置和数据值,返回测试未通过的结果。
5、编制测试脚本,按照所需格式,运行时将自动整理测试结果形成测试报告。
步骤3是通过人工手动预置的,依据测试用例完成,期望值与实际值格式相同。
步骤2,3,4均是通过运行测试脚本自动完成,测试结果可以显示在测试工具的控制台,也可以自动整理,形成测试报告。
步骤4的测试结果,如果是未通过的,我们可以在自动化脚本中设置提示信息,通过邮件等多种方式提醒测试人员采取相关的操作,如暂停测试或登记问题等。
数据对比方法简述:
以EXCEL工作簿为例,脚本工具使用java的jxl包,在脚本中自定义函数,首先读入文件A,B即实际值和期望值,然后定义实际值文件的数据原始字节流并获取实际值工作簿数据流,之后获取实际值目标工作表数据,同时包括该工作表所有数据的列数和行数,分别定义数组获取实际值和期望值的数据值,并按照行数和列数进行每个数据单元的循环对比,同时返回对比结果,生成测试报告,包括,验证点名称,测试结果,错误数据位置,错误数据值,正确数据位置,正确数据值等。
在大型ERP软件中,数据查询是业务的重中之重,也是软件测试需要关注的重点和难点,对于查询的自动化测试来讲,主要就是数据校验不好做,如果需要对财务查询中的科目余额表进行查询,查询控件使用OCX控件,尝试使用各种自动化测试工具均不能识别表中的金额数据,现将科目余额表导出,形成单独的科目余额表文档,然后使用自动化测试工具对比科目余额表(期望值),和科目余额表(实际值),如果各个科目的金额相同,则返回校验通过结果;如果因为程序计算错误,某个科目的金额和正确的期望值有差别,则返回该科目在表格中所处的位置,以及该科目的错误金额和正确金额,便于查找、统计并登记问题
综上,本发明可以完善自动化测试的数据校验机制,使我们的自动化测试更加的智能有效,不但可以有效提高测试精确度,而且还可以充分的利用现有的测试用例,提高测试效率进而降低测试成本,对比脚本的可重用性也很高,设计好一个脚本,可以应用到使用相同控件的整个产品中。
上述仅以优选实施里对本发明进行说明,非因此即局限本发明的权利范围,因此,在不脱离本发明的思想的情况下,凡运用本发明说明书及附图内容所为的等效变化,均理同包含于本发明的权利要求范围内。
Claims (5)
1.一种自动化测试的方法,其特征在于,包括以下步骤:
1)分析被测程序,选择合适的自动化测试工具;
2)测试工具获取目标测试对象有效数据信息,则直接增加数据验证点进行数据校验,不能识别目标测试对象,则需要编制自动化测试脚本,将查询结果或关键数据区域导出到存储装置,即实际值;
3)根据测试用例设计出目标程序的正确数据结果,使用相同存储装置,即期望值;
4)编制自动化测试脚本,用来对比期望值和实际值,若完全相同则测试通过,目标程序数据信息正确;若有不一致的数据,自动记录错误数据,包括数据位置和数据值,返回测试未通过的结果;
5)编制测试脚本,按照所需格式,运行时将自动整理测试结果形成测试报告。
2.根据权利要求1所述的方法,其特征在于,该测试方法依赖于自动化测试工具,但不限制于某种测试工具。
3.根据权利要求1所述的方法,其特征在于,数据验证点的增加使用测试工具自动生成或自己设计测试脚本来完成,最大区别在于所使用的测试工具能否识别目标测试对象。
4.根据权利要求1所述的方法,其特征在于,期望值和实际值的对比结果将直接显示在测试工具的控制台,或通过编制测试脚本生成数据校验测试报告,内容包括校验是否通过,未通过时,期望值数据单元和实际值数据单元的所在位置、数值,以便于后期跟踪检查。
5.根据权利要求1所述的方法,其特征在于,期望值的生成需要手动参与,提前根据测试用例制定的,实际值是通过运行自动化测试脚本自动生成。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201010105987A CN101814052A (zh) | 2010-02-04 | 2010-02-04 | 一种自动化测试的方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201010105987A CN101814052A (zh) | 2010-02-04 | 2010-02-04 | 一种自动化测试的方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN101814052A true CN101814052A (zh) | 2010-08-25 |
Family
ID=42621312
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201010105987A Pending CN101814052A (zh) | 2010-02-04 | 2010-02-04 | 一种自动化测试的方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN101814052A (zh) |
Cited By (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102331971A (zh) * | 2011-09-01 | 2012-01-25 | 北京用友政务软件有限公司 | 一种基于qtp的自动化测试方法及系统 |
CN102799515A (zh) * | 2011-05-24 | 2012-11-28 | 腾讯科技(深圳)有限公司 | 应用程序测试方法及装置 |
CN103942138A (zh) * | 2013-01-23 | 2014-07-23 | 纽海信息技术(上海)有限公司 | 测试方法及装置 |
CN104572446A (zh) * | 2014-12-17 | 2015-04-29 | 北京京东尚科信息技术有限公司 | 一种自动化测试方法及系统 |
CN105930276A (zh) * | 2016-06-30 | 2016-09-07 | 乐视控股(北京)有限公司 | 一种识别测试用例失败原因的方法及装置 |
CN106776324A (zh) * | 2016-12-19 | 2017-05-31 | 广州酷狗计算机科技有限公司 | 接口测试方法及装置 |
CN107357735A (zh) * | 2017-07-20 | 2017-11-17 | 万帮充电设备有限公司 | 折扣测试方法及装置 |
CN108628748A (zh) * | 2018-05-09 | 2018-10-09 | 平安普惠企业管理有限公司 | 自动化测试管理方法和自动化测试管理系统 |
CN110519293A (zh) * | 2019-09-10 | 2019-11-29 | 北京锐安科技有限公司 | 一种报文测试方法、装置、设备及存储介质 |
CN110543424A (zh) * | 2019-09-06 | 2019-12-06 | 安徽航天信息有限公司 | 一种用于电子税务平台的测试方法及装置 |
CN112749080A (zh) * | 2019-10-31 | 2021-05-04 | 北京国双科技有限公司 | 目标程序的测试方法及装置、存储介质、电子设备 |
-
2010
- 2010-02-04 CN CN201010105987A patent/CN101814052A/zh active Pending
Cited By (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102799515A (zh) * | 2011-05-24 | 2012-11-28 | 腾讯科技(深圳)有限公司 | 应用程序测试方法及装置 |
CN102799515B (zh) * | 2011-05-24 | 2016-01-20 | 腾讯科技(深圳)有限公司 | 应用程序测试方法及装置 |
CN102331971B (zh) * | 2011-09-01 | 2014-03-26 | 北京用友政务软件有限公司 | 一种基于qtp的自动化测试方法及系统 |
CN102331971A (zh) * | 2011-09-01 | 2012-01-25 | 北京用友政务软件有限公司 | 一种基于qtp的自动化测试方法及系统 |
CN103942138A (zh) * | 2013-01-23 | 2014-07-23 | 纽海信息技术(上海)有限公司 | 测试方法及装置 |
CN104572446B (zh) * | 2014-12-17 | 2018-03-30 | 北京京东尚科信息技术有限公司 | 一种自动化测试方法及系统 |
CN104572446A (zh) * | 2014-12-17 | 2015-04-29 | 北京京东尚科信息技术有限公司 | 一种自动化测试方法及系统 |
CN105930276A (zh) * | 2016-06-30 | 2016-09-07 | 乐视控股(北京)有限公司 | 一种识别测试用例失败原因的方法及装置 |
WO2018000607A1 (zh) * | 2016-06-30 | 2018-01-04 | 乐视控股(北京)有限公司 | 一种识别测试用例失败原因的方法及电子设备 |
CN106776324A (zh) * | 2016-12-19 | 2017-05-31 | 广州酷狗计算机科技有限公司 | 接口测试方法及装置 |
CN107357735A (zh) * | 2017-07-20 | 2017-11-17 | 万帮充电设备有限公司 | 折扣测试方法及装置 |
CN108628748A (zh) * | 2018-05-09 | 2018-10-09 | 平安普惠企业管理有限公司 | 自动化测试管理方法和自动化测试管理系统 |
CN108628748B (zh) * | 2018-05-09 | 2023-11-03 | 新疆北斗同创信息科技有限公司 | 自动化测试管理方法和自动化测试管理系统 |
CN110543424A (zh) * | 2019-09-06 | 2019-12-06 | 安徽航天信息有限公司 | 一种用于电子税务平台的测试方法及装置 |
CN110543424B (zh) * | 2019-09-06 | 2023-05-05 | 安徽航天信息有限公司 | 一种用于电子税务平台的测试方法及装置 |
CN110519293A (zh) * | 2019-09-10 | 2019-11-29 | 北京锐安科技有限公司 | 一种报文测试方法、装置、设备及存储介质 |
CN112749080A (zh) * | 2019-10-31 | 2021-05-04 | 北京国双科技有限公司 | 目标程序的测试方法及装置、存储介质、电子设备 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN101814052A (zh) | 一种自动化测试的方法 | |
CN102831052B (zh) | 测试用例自动化生成装置及方法 | |
US8421796B2 (en) | Visualization for multidimensional data | |
CN101719095A (zh) | 一种回归测试的管理方法及装置 | |
CN110162516B (zh) | 一种基于海量数据处理的数据治理的方法及系统 | |
CN104407973A (zh) | 一种自动化单元测试的实现方法及装置 | |
CN103019937A (zh) | 一种人机交互界面遍历测试方法 | |
CN104182335A (zh) | 软件测试方法和装置 | |
KR20150041050A (ko) | 문서 참조 템플릿들의 생성 및 관리를 위한 소프트웨어 툴 | |
CN100561445C (zh) | 一种根据程序内容自动生成测试数据集的方法和装置 | |
CN101221503A (zh) | 软件测试方法及装置 | |
CN106991196A (zh) | 一种通用的数据追溯方法及系统 | |
CN104657274B (zh) | 软件界面测试方法及装置 | |
CN103488482A (zh) | 一种生成测试用例的方法和装置 | |
CN103970662B (zh) | 一种gui软件输入边界值获取方法和系统 | |
CN101996380A (zh) | 一种查找错账的方法、装置及系统 | |
US10509717B1 (en) | System, method, and computer program for automatically testing software applications including dynamic web pages | |
CN110297761A (zh) | 返回数据的获取方法、装置、计算机设备及存储介质 | |
CN108664471A (zh) | 文字识别纠错方法、装置、设备及计算机可读存储介质 | |
Gandhi et al. | Green supply chain management practices and its impact on business performance | |
CN106327100A (zh) | 一种变更清单生成方法及装置 | |
CN115576950A (zh) | 一种基于json配置文件的报表生成方法 | |
CN104461864A (zh) | 一种基于Eclipse插件的Java源代码缺陷检测方法及其系统 | |
CN106201859A (zh) | 一种回归测试方法及系统 | |
CN104035862A (zh) | 闭包测试方法和装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C02 | Deemed withdrawal of patent application after publication (patent law 2001) | ||
WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20100825 |