CN105930274B - 一种自动化测试方法及系统 - Google Patents
一种自动化测试方法及系统 Download PDFInfo
- Publication number
- CN105930274B CN105930274B CN201610290779.4A CN201610290779A CN105930274B CN 105930274 B CN105930274 B CN 105930274B CN 201610290779 A CN201610290779 A CN 201610290779A CN 105930274 B CN105930274 B CN 105930274B
- Authority
- CN
- China
- Prior art keywords
- test
- data
- instruction
- tester
- row
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/36—Preventing errors by testing or debugging software
- G06F11/3668—Software testing
- G06F11/3672—Test management
- G06F11/3688—Test management for test execution, e.g. scheduling of test suites
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/21—Design, administration or maintenance of databases
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- Computer Hardware Design (AREA)
- Quality & Reliability (AREA)
- Debugging And Monitoring (AREA)
Abstract
本发明公开了一种自动化测试方法及系统,其中,该方法包括:接收测试人员配置的测试指令;根据所述测试指令执行相应的测试程序,进行测试数据处理、测试,获取测试结果。本发明的自动化测试方法及系统,可以包含测试数据生成、批量作业监控、数据扫描、数据核对四大部分的一体化测试,通过执行相应的测试程序,获得相应的测试结果,实现批量数据加工功能的自动化测试。
Description
技术领域
本发明涉及数据库领域,尤指一种自动化测试方法及系统。
背景技术
目前,传统的数据测试一般采取手工埋数、等价类的手工测试方法,测试覆盖率低,只能在工作时间进行测试,且不能及时发现严重缺陷,缺陷逃逸情况普遍。
现有技术中,通常是利用一些测试工具进行数据测试和分析,而本领域中并没有一套完整的批量加工功能自动化测试工具,只有零散的一些命令,如Oracle数据库有Minus命令,可以比对目标数据和源数据等。
发明内容
为克服现有数据测试领域存在的不足,解决以上批量加工功能的测试不便问题,本发明设计了本批量加工功能自动化测试工具。
具体的,本发明提出了一种自动化测试方法及系统。该数据测试工具以常用的Excel与测试人员进行友好交互,测试人员仅须在Excel中完成配置及指定预期测试结果,该工具就能完成丰富测试数据的生成、测试环境的实时监控、待测数据加工逻辑的精确完整验证,并以Excel的形式展示给测试人员。本工具可以使用命令行进行调用,即测试人员可以定时执行该工具。同时本工具是跨平台的,可以对来自不同数据源的数据进行监控比对,如数据文件、Oracle及Mysql数据库、HDFS、MongoDB大数据系统。
本发明提出的自动化测试方法包括:接收测试人员配置的测试指令;根据所述测试指令执行相应的测试程序,进行测试数据处理、测试,获取测试结果。
进一步的,测试指令包括:跨平台数据监控比对指令、测试数据文件生成指令、批量作业监控指令、数据扫描指令、表结构核对指令、数据核对指令、列维度数据映射逻辑验证指令或表维度数据映射逻辑验证指令。
进一步的,当所述测试指令为跨平台数据监控比对指令时,配置监控比对的数据源,根据该跨平台数据监控比对指令访问对应的文件、Oracle及Mysql数据库、HDFS、MongoDB大数据系统,获取监控比对结果。
进一步的,当所述测试指令为测试数据文件生成指令时,根据待测系统中存储的测试数据文件,按需求修改测试数据文件的关键字段,包括日期、机构、或文件类型、编码格式等,并生成新的测试数据文件。
进一步的,在所述生成测试数据文件的同时,通过创建空文件或自定义包含正常值、特殊字符、边界值、错误值、非空、超长数据、主键冲突在内的业务数据文件,验证待测系统的健壮性,获取待测系统的测试结果。
进一步的,当所述测试指令为批量作业监控指令时,根据测试人员配置的扫描批量作业的结构化查询语句,检测批量作业状态和批量作业日志,获取批量作业测试结果,并将反复或一次性执行获取的批量作业测试结果导入测试报告。
进一步的,当所述测试指令为数据扫描指令时,根据测试人员配置的信息自动拼接生成结构化查询语句,执行该结构化查询语句检测空表、空列、各枚举值占比、数据区域分布、特征值,获取数据扫描测试结果。
进一步的,当所述测试指令为表结构核对指令时,根据测试人员录入的预期表结构或根据表与表、列与列的对应关系,自动检测表结构,获取表结构核对结果。
进一步的,当所述测试指令为数据核对指令时,根据测试人员配置的预期目标表表名、列名、数据值,查找是否存在对应的数据,并记录数据条数,生成测试数据情况及目标表的数据值测试结果。
进一步的,当所述测试指令为列维度数据映射逻辑验证指令时,根据测试人员输入的目标表和源表的列和列映射关系,自动拼接生成结构化查询语句进行列维度数据映射逻辑验证,获取列维度数据映射逻辑验证结果。
进一步的,当所述测试指令为表维度数据映射逻辑验证指令时,根据目标表与源表的映射关系,自动拼接生成结构化查询语句进行表维度数据映射逻辑验证,获取表维度数据映射逻辑验证结果。
本发明提出的自动化测试系统用于执行上述自动化测试方法,其中,该系统包括:指令接收模块,用于接收测试人员配置的测试指令;测试模块,用于根据所述测试指令执行相应的测试程序,进行测试数据处理、测试,获取测试结果。
本发明的自动化测试方法及系统,可以包含测试数据生成、批量作业监控、数据扫描、数据核对四大部分的一体化测试,通过执行相应的测试程序,获得相应的测试结果,实现批量功能的自动化测试。
附图说明
此处所说明的附图用来提供对本发明的进一步理解,构成本申请的一部分,并不构成对本发明的限定。在附图中:
图1为本发明一实施例的自动化测试方法流程图。
图2为本发明一实施例的自动化测试系统结构示意图。
图3为本发明第一具体实施例的测试人员配置的监控比对数据源的表格样例图。
图4为本发明第二具体实施例的生成测试数据文件的主配置界面的表格样例图。
图5为本发明第二具体实施例的生成特殊测试数据文件的配置界面的表格样例图。
图6为本发明第三具体实施例的批量作业监控的配置界面的表格样例图。
图7为本发明第三具体实施例的测试报告的表格样例图。
图8为本发明第四具体实施例的数据扫描的配置界面的表格样例图。
图9为本发明第四具体实施例的测试结果表格样例图。
图10为本发明第五具体实施例的测试人员录入的预期表结构信息的表格样例图。
图11为本发明第五具体实施例的测试结果的表格样例图。
图12为本发明第六具体实施例的预期结果表内容的配置界面的表格样例图。
图13为本发明第七具体实施例的测试人员输入的目标表和源表的列和列映射关系的表格样例图。
图14为本发明第七具体实施例的测试结果的表格样例图。
图15为本发明第八具体实施例的测试人员输入的目标表和源表的列和列映射关系的表格样例图。
具体实施方式
以下配合图示及本发明的较佳实施例,进一步阐述本发明为达成预定发明目的所采取的技术手段。
图1为本发明一实施例的自动化测试方法流程图。如图1所示,该方法包括:
步骤S101,接收测试人员配置的测试指令;
步骤S102,根据所述测试指令执行相应的测试程序,进行测试数据处理、测试,获取测试结果。
基于同一发明构思,本发明实施例中还提供了一种执行上述自动化测试方法的自动化测试系统,如图2所示,为本发明一实施例的自动化测试系统结构示意图。其中,该系统包括:
指令接收模块100,用于接收测试人员配置的测试指令;
测试模块200,用于根据所述测试指令执行相应的测试程序,进行测试数据处理、测试,获取测试结果。
其中,测试人员配置的测试指令包括:1.跨平台数据监控比对指令、2.测试数据文件生成指令、3.批量作业监控指令、4.数据扫描指令、5.表结构核对指令、6.数据核对指令、7.列维度数据映射逻辑验证指令、8.表维度数据映射逻辑验证指令。
1.当测试人员输入跨平台数据监控比对指令时,由测试系统配置监控比对的数据源,根据该跨平台数据监控比对指令访问对应的文件、Oracle及Mysql数据库、HDFS、MongoDB大数据系统,获取监控比对结果。
在一具体实施例中,参考图3所示,为测试人员配置的监控比对数据源的表格样例图。
2.当测试人员输入测试数据文件生成指令时,根据待测系统中存储的测试数据文件,按需求修改测试数据文件的关键字段,包括日期、机构、或文件类型、编码格式等,并生成新的测试数据文件。
在一具体实施例中,主配置界面可以参考图4所示,测试人员点击“启动造数”按钮,测试系统就开始生成测试数据文件。
在所述生成测试数据文件的同时,通过创建空文件或自定义包含正常值、特殊字符、边界值、错误值、非空、超长数据、主键冲突在内的业务数据文件,验证待测系统的健壮性,获取待测系统的测试结果。
在一具体实施例中,生成特殊测试数据的配置界面可以参考图5所示。
3.当测试人员输入批量作业监控指令时,根据测试人员配置的扫描批量作业的结构化查询语句,检测批量作业状态和批量作业日志,获取批量作业测试结果,并将反复或一次性执行获取的批量作业测试结果导入测试报告。
在一具体实施例中,参考图6所示,测试人员可以配置扫描JOB(批量作用)的SQL(结构化查询语句),并点击按钮开始检测。当扫描到有数据时,测试系统会弹出提示框进行提示。
参考图7所示,为一测试报告的表格样例图。
4.当测试人员输入数据扫描指令时,根据测试人员配置的信息自动拼接生成SQL,执行该SQL检测空表、空列、各枚举值占比、数据区域分布、特征值,获取数据扫描测试结果。
在一具体实施例中,参考图8所示,为数据扫描的配置界面的表格样例图,可以由测试人员按需求进行配置。测试结果可以参考图9所示。
5.当测试人员输入表结构核对指令时,根据测试人员录入的预期表结构或根据表与表、列与列的对应关系,自动检测表结构,获取表结构核对结果。
在一具体实施例中,参考图10所示,为测试人员录入的预期表结构信息的表格样例图。对应的,测试结果可以参考图11所示。
6.当测试人员输入数据核对指令时,根据测试人员配置的预期目标表表名、列名、数据值,查找是否存在对应的数据,并记录数据条数,生成测试数据情况及目标表的数据值测试结果。
在一具体实施例中,参考图12所示,为预期结果表内容的配置界面的表格样例图,可以由测试人员按需求进行配置。注:数据值可以是EXCEL函数。
7.当测试人员输入列维度数据映射逻辑验证指令时,根据测试人员输入的目标表和源表的列和列映射关系,自动拼接生成SQL进行列维度数据映射逻辑验证,获取列维度数据映射逻辑验证结果。该功能类似开发设计文档中的数据映射表。
在一具体实施例中,参考图13所示,为测试人员输入的目标表和源表的列和列映射关系的表格样例图。测试结果可以参考图14所示。
8.当测试人员输入表维度数据映射逻辑验证指令时,根据目标表与源表的映射关系,自动拼接生成SQL进行表维度数据映射逻辑验证,获取表维度数据映射逻辑验证结果。
在一具体实施例中,参考图15所示,为测试人员输入的目标表和源表的列和列映射关系的表格样例图。
本发明的自动化测试方法及系统,可以包含测试数据生成、批量作业监控、数据扫描、数据核对四大部分的一体化测试,通过执行相应的测试程序,获得相应的测试结果,实现批量功能的自动化测试。
以上所述的具体实施例,对本发明的目的、技术方案和有益效果进行了进一步详细说明,所应理解的是,以上所述仅为本发明的具体实施例而已,并不用于限定本发明的保护范围,凡在本发明的精神和原则之内,所做的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。
Claims (9)
1.一种自动化测试方法,其特征在于,该方法包括:
接收测试人员配置的测试指令;
根据所述测试指令执行相应的测试程序,进行测试数据处理、测试,获取测试结果;
所述测试指令包括:跨平台数据监控比对指令、测试数据文件生成指令、批量作业监控指令、数据扫描指令、表结构核对指令、数据核对指令、列维度数据映射逻辑验证指令或表维度数据映射逻辑验证指令;
当所述测试指令为测试数据文件生成指令时,根据待测系统中存储的测试数据文件,按需求修改测试数据文件的关键字段,包括日期、机构、或文件类型、编码格式,并生成新的测试数据文件;
在生成测试数据文件的同时,通过创建空文件或自定义包含正常值、特殊字符、边界值、错误值、非空、超长数据、主键冲突在内的业务数据文件,验证待测系统的健壮性,获取待测系统的测试结果。
2.根据权利要求1所述的自动化测试方法,其特征在于,当所述测试指令为跨平台数据监控比对指令时,配置监控比对的数据源,根据该跨平台数据监控比对指令访问对应的文件、Oracle及Mysql数据库、HDFS、MongoDB大数据系统,获取监控比对结果。
3.根据权利要求1所述的自动化测试方法,其特征在于,当所述测试指令为批量作业监控指令时,根据测试人员配置的扫描批量作业的结构化查询语句,检测批量作业状态和批量作业日志,获取批量作业测试结果,并将反复或一次性执行获取的批量作业测试结果导入测试报告。
4.根据权利要求1所述的自动化测试方法,其特征在于,当所述测试指令为数据扫描指令时,根据测试人员配置的信息自动拼接生成结构化查询语句,执行该结构化查询语句检测空表、空列、各枚举值占比、数据区域分布、特征值,获取数据扫描测试结果。
5.根据权利要求1所述的自动化测试方法,其特征在于,当所述测试指令为表结构核对指令时,根据测试人员录入的预期表结构或根据表与表、列与列的对应关系,自动检测表结构,获取表结构核对结果。
6.根据权利要求1所述的自动化测试方法,其特征在于,当所述测试指令为数据核对指令时,根据测试人员配置的预期目标表表名、列名、数据值,查找是否存在对应的数据,并记录数据条数,生成测试数据情况及目标表的数据值测试结果。
7.根据权利要求1所述的自动化测试方法,其特征在于,当所述测试指令为列维度数据映射逻辑验证指令时,根据测试人员输入的目标表和源表的列和列映射关系,自动拼接生成结构化查询语句进行列维度数据映射逻辑验证,获取列维度数据映射逻辑验证结果。
8.根据权利要求1所述的自动化测试方法,其特征在于,当所述测试指令为表维度数据映射逻辑验证指令时,根据目标表与源表的映射关系,自动拼接生成结构化查询语句进行表维度数据映射逻辑验证,获取表维度数据映射逻辑验证结果。
9.一种执行权利要求1所述的自动化测试方法的自动化测试系统,其特征在于,该系统包括:
指令接收模块,用于接收测试人员配置的测试指令;
测试模块,用于根据所述测试指令执行相应的测试程序,进行测试数据处理、测试,获取测试结果。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610290779.4A CN105930274B (zh) | 2016-05-05 | 2016-05-05 | 一种自动化测试方法及系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610290779.4A CN105930274B (zh) | 2016-05-05 | 2016-05-05 | 一种自动化测试方法及系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN105930274A CN105930274A (zh) | 2016-09-07 |
CN105930274B true CN105930274B (zh) | 2018-09-07 |
Family
ID=56834251
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201610290779.4A Active CN105930274B (zh) | 2016-05-05 | 2016-05-05 | 一种自动化测试方法及系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN105930274B (zh) |
Families Citing this family (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106649121B (zh) * | 2016-12-28 | 2019-08-13 | 中国银联股份有限公司 | 一种测试结果分析方法及装置 |
CN107391372A (zh) * | 2017-07-19 | 2017-11-24 | 中国银行股份有限公司 | 一种数据加工功能测试方法及系统 |
CN107729243B (zh) * | 2017-10-12 | 2020-06-16 | 上海携程金融信息服务有限公司 | 应用编程接口自动化测试方法、系统、设备及存储介质 |
CN107943692B (zh) * | 2017-11-17 | 2021-08-17 | 中国银行股份有限公司 | 一种批量原表下传的自动测试方法及装置 |
CN108089982B (zh) * | 2017-12-08 | 2020-12-01 | 北京小度信息科技有限公司 | 测试方法、装置、电子设备及计算机可读存储介质 |
CN108363663B (zh) * | 2018-02-02 | 2021-05-11 | 浙江德景电子科技有限公司 | 一种智能pos终端送检银行卡检测中心认证的应用 |
CN110275818B (zh) * | 2018-03-13 | 2024-04-30 | 龙芯中科技术股份有限公司 | 硅后验证方法、装置及存储介质 |
CN108920377B (zh) * | 2018-07-16 | 2022-03-04 | 杭州安恒信息技术股份有限公司 | 一种日志回放测试方法、系统、装置及可读存储介质 |
CN109344074B (zh) * | 2018-10-19 | 2022-06-03 | 中国银行股份有限公司 | 一种跨平台自动化测试方法及系统 |
CN110059002B (zh) * | 2019-03-16 | 2023-02-03 | 平安普惠企业管理有限公司 | 测试数据的生成方法、测试设备、存储介质及装置 |
CN111078572B (zh) * | 2019-12-23 | 2023-08-11 | 北京同有飞骥科技股份有限公司 | 自动化交互的测试方法及系统 |
CN111651363B (zh) * | 2020-06-29 | 2024-07-02 | 平安银行股份有限公司 | 测试数据获取方法、装置、电子设备及介质 |
CN112988608B (zh) * | 2021-05-19 | 2021-08-31 | 腾讯科技(深圳)有限公司 | 数据测试方法、装置、计算机设备及存储介质 |
CN115827452B (zh) * | 2022-11-29 | 2023-11-10 | 广发银行股份有限公司 | 一种数据加工类型测试系统、方法、存储介质及设备 |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1787000A (zh) * | 2005-11-15 | 2006-06-14 | 中国工商银行股份有限公司 | 批量作业集中管理和调度的系统及方法 |
CN101770423A (zh) * | 2009-12-25 | 2010-07-07 | 中兴通讯股份有限公司 | 一种测试数据生成方法及测试系统 |
CN202084026U (zh) * | 2011-06-10 | 2011-12-21 | 中国工商银行股份有限公司 | 一种主机批量作业数据监控系统 |
CN102508758A (zh) * | 2011-12-01 | 2012-06-20 | 北京航天测控技术有限公司 | 一种双总线并行测试实现方法 |
CN102591775A (zh) * | 2011-12-30 | 2012-07-18 | 苏州汉清投资管理有限公司 | 一种实现软件自动测试的系统 |
CN103391225A (zh) * | 2013-07-26 | 2013-11-13 | 大连飞创信息技术有限公司 | 期货与证券行业测试用例并行自动化测试系统 |
CN103530209A (zh) * | 2013-09-17 | 2014-01-22 | 福建升腾资讯有限公司 | 一种密码键盘自动化测试方法 |
CN103970121A (zh) * | 2014-04-02 | 2014-08-06 | 航天东方红卫星有限公司 | 一种分布式卫星自动化测试框架系统 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20060195681A1 (en) * | 2004-12-06 | 2006-08-31 | Arm Limited | Test program instruction generation |
-
2016
- 2016-05-05 CN CN201610290779.4A patent/CN105930274B/zh active Active
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1787000A (zh) * | 2005-11-15 | 2006-06-14 | 中国工商银行股份有限公司 | 批量作业集中管理和调度的系统及方法 |
CN101770423A (zh) * | 2009-12-25 | 2010-07-07 | 中兴通讯股份有限公司 | 一种测试数据生成方法及测试系统 |
CN202084026U (zh) * | 2011-06-10 | 2011-12-21 | 中国工商银行股份有限公司 | 一种主机批量作业数据监控系统 |
CN102508758A (zh) * | 2011-12-01 | 2012-06-20 | 北京航天测控技术有限公司 | 一种双总线并行测试实现方法 |
CN102591775A (zh) * | 2011-12-30 | 2012-07-18 | 苏州汉清投资管理有限公司 | 一种实现软件自动测试的系统 |
CN103391225A (zh) * | 2013-07-26 | 2013-11-13 | 大连飞创信息技术有限公司 | 期货与证券行业测试用例并行自动化测试系统 |
CN103530209A (zh) * | 2013-09-17 | 2014-01-22 | 福建升腾资讯有限公司 | 一种密码键盘自动化测试方法 |
CN103970121A (zh) * | 2014-04-02 | 2014-08-06 | 航天东方红卫星有限公司 | 一种分布式卫星自动化测试框架系统 |
Also Published As
Publication number | Publication date |
---|---|
CN105930274A (zh) | 2016-09-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN105930274B (zh) | 一种自动化测试方法及系统 | |
CN106845579B (zh) | 提高产品质量检验正确性的信息化控制方法及控制系统 | |
CN109614313A (zh) | 自动化测试方法、装置及计算机可读存储介质 | |
Ahmad et al. | A Review on Software Testing and Its Methodology | |
CN108830554B (zh) | 基于任务模型的数据成果信息质量智能检测方法和系统 | |
CN106355375B (zh) | 一种物料自动确认方法 | |
CN202736027U (zh) | 等保测评中操作系统安全的自动测评系统 | |
Alenazi et al. | A novel approach to tracing safety requirements and state-based design models | |
Matalonga et al. | Matching context aware software testing design techniques to ISO/IEC/IEEE 29119 | |
Vanciu et al. | Hidden dependencies in software systems | |
Zhao et al. | Research on international standardization of software quality and software testing | |
CN115952081A (zh) | 一种软件测试方法、装置、存储介质及设备 | |
Wang et al. | Detecting SQL vulnerability attack based on the dynamic and static analysis technology | |
CN103593228A (zh) | 一种实用的测试仪器程控命令仿真器及其使用方法 | |
Bhatt | A survey of effective and efficient software testing technique and analysis | |
CN104536880A (zh) | 基于符号执行的gui程序测试用例扩增方法 | |
Silva et al. | Towards making safety-critical systems safer: learning from mistakes | |
CN107885607A (zh) | 一种基于嵌入式系统软件多视图事故模型及其建模方法 | |
CN102866902B (zh) | 复杂环境下的开发对象版本自动检查方法及系统 | |
CN104076715A (zh) | 汽车尾箱锁功能检测设备 | |
CN114546845B (zh) | 一种功能安全软件工具链的鉴定方法 | |
CN117540894B (zh) | 生成检验计划的方法、设备及存储介质 | |
CN109358564A (zh) | 一种检测组态软件的方法及装置、计算机可读存储介质 | |
Diebelis et al. | Software self-testing | |
CN204065730U (zh) | 一种汽车尾箱锁功能检测设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |