CN118331843B - 分层数据自动化测试方法、装置、设备及存储介质 - Google Patents
分层数据自动化测试方法、装置、设备及存储介质 Download PDFInfo
- Publication number
- CN118331843B CN118331843B CN202311766452.6A CN202311766452A CN118331843B CN 118331843 B CN118331843 B CN 118331843B CN 202311766452 A CN202311766452 A CN 202311766452A CN 118331843 B CN118331843 B CN 118331843B
- Authority
- CN
- China
- Prior art keywords
- data
- queried
- data layer
- test
- layer
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000010998 test method Methods 0.000 title claims description 23
- 238000012360 testing method Methods 0.000 claims abstract description 135
- 238000000034 method Methods 0.000 claims abstract description 33
- 230000002159 abnormal effect Effects 0.000 claims description 48
- 230000008439 repair process Effects 0.000 claims description 14
- 238000012545 processing Methods 0.000 claims description 13
- 238000004458 analytical method Methods 0.000 claims description 5
- 238000004140 cleaning Methods 0.000 claims description 5
- 230000002776 aggregation Effects 0.000 claims description 3
- 238000004220 aggregation Methods 0.000 claims description 3
- 239000008186 active pharmaceutical agent Substances 0.000 description 19
- 230000008569 process Effects 0.000 description 10
- 238000004891 communication Methods 0.000 description 6
- 238000010586 diagram Methods 0.000 description 6
- 238000007405 data analysis Methods 0.000 description 5
- 230000006870 function Effects 0.000 description 4
- 238000004364 calculation method Methods 0.000 description 2
- 238000007689 inspection Methods 0.000 description 2
- 230000010354 integration Effects 0.000 description 2
- 238000012544 monitoring process Methods 0.000 description 2
- 238000013024 troubleshooting Methods 0.000 description 2
- 238000012795 verification Methods 0.000 description 2
- 230000002547 anomalous effect Effects 0.000 description 1
- 238000007418 data mining Methods 0.000 description 1
- 238000013524 data verification Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000012217 deletion Methods 0.000 description 1
- 230000037430 deletion Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000008030 elimination Effects 0.000 description 1
- 238000003379 elimination reaction Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 238000007726 management method Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
Classifications
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management
Landscapes
- Debugging And Monitoring (AREA)
Abstract
本发明涉及数据测试领域,公开了一种分层数据自动化测试方法、装置、设备及存储介质,该方法包括:在接收到测试指令时,根据测试指令确定待查询数据层;获取待查询数据层对应的目标服务接口;调用目标服务接口并获取待查询数据层的返回数据;根据返回数据获得待查询数据层的测试结果。由于本发明中在确定待查询数据层后通过对应的目标服务接口获得返回数据,相较现有技术中需要人工编写不同的查询语句获得测试结果,能够由测试指令确定待查询的数据层,并基于不同的目标服务接口直接获取查询数据,实现了数据层的自动化测试,提升了数据检验的速率。
Description
技术领域
本发明涉及数据测试技术领域,尤其涉及一种分层数据自动化测试方法、装置、设备及存储介质。
背景技术
在大数据应用中,数据的一致性对于数据分析和决策非常重要,传统的进行数据测试的方式主要依靠测试人员通过分别编写不同数据分层的结构化查询语言(StructuredQuery Language Query Statement,SQL)查询不同层的数据,并人工对查询结果进行数据一致性校验。然而,随着数据规模和复杂性的增加,人工验证存在着效率低下且出错高的缺点,因此如何有效地验证不同数据层之间的数据一致性成为一个亟待解决的问题。
上述内容仅用于辅助理解本发明的技术方案,并不代表承认上述内容是相关技术。
发明内容
本发明的主要目的在于提供了一种分层数据自动化测试方法、装置、设备及存储介质,旨在解决在大数据分层中,现有的对不同数据层进行数据分析检验时需要人工进行比对,检验效率低下且准确率较低的技术问题。
为实现上述目的,本发明提供了一种分层数据自动化测试方法,所述方法包括以下步骤:
在接收到测试指令时,根据所述测试指令确定待查询数据层;
获取所述待查询数据层对应的目标服务接口;
调用所述目标服务接口并获取所述待查询数据层的返回数据;
根据所述返回数据获得所述待查询数据层的测试结果。
可选地,所述获取所述待查询数据层对应的目标服务接口之前,包括:
获取待测系统的各个数据层;
根据所述各个数据层确定对应所述各个数据层的查询语句;
基于所述查询语句生成所述各个数据层对应的服务接口;
相应地,所述获取所述待查询数据层对应的目标服务接口,包括:
在所述各个数据层对应的服务接口中,获取所述待查询数据层对应的目标服务接口。
可选地,所述调用所述目标服务接口并获取所述待查询数据层的返回数据,包括:
在调用所述目标服务接口时,执行所述目标服务接口的查询语句;
返回所述查询语句的执行结果,获得所述待查询数据层的返回数据。
可选地,所述根据所述返回数据获得所述待查询数据层的测试结果,包括:
将各所述待查询数据层对应的返回数据进行对比;
根据对比结果判断各所述待查询数据层是否存在数据差异;
根据差异判断结果生成所述待测系统中所述待查询数据层的测试报告。
可选地,所述根据对比结果判断各所述待查询数据层是否存在数据差异,包括:
在获取到所述对比结果时,对各所述待查询数据层对应的返回数据进行字段提取;
根据所述返回数据中各字段的名称和/或数据,判断各所述待查询数据层是否存数据差异。
可选地,所述根据差异判断结果生成所述待测系统中所述待查询数据层的测试报告之后,包括:
获取所述测试报告中的异常数据项;
根据所述异常数据项进行故障定位,并生成异常告警信息;
将所述异常告警信息推送至用户端。
可选地,所述将所述异常告警信息推送至用户端之后,包括:
在所述用户端根据所述异常告警信息进行故障修复后,根据所述故障定位确定待查验数据层;
对所述待查验数据层进行数据测试,判断所述异常数据项是否完成故障修复。
此外,为实现上述目的,本发明还提出一种分层数据自动化测试装置,该装置包括:
指令接收模块,用于在接收到测试指令时,根据所述测试指令确定待查询数据层;
接口获取模块,用于获取所述待查询数据层对应的目标服务接口;
接口调用模块,用于调用所述目标服务接口并获取所述待查询数据层的返回数据;
结果生成模块,用于根据所述返回数据获得所述待查询数据层的测试结果。
此外,为实现上述目的,本发明还提出一种分层数据自动化测试设备,所述设备包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的分层数据自动化测试程序,所述分层数据自动化测试程序配置为实现如上文所述的分层数据自动化测试方法的步骤。
此外,为实现上述目的,本发明还提出一种存储介质,所述存储介质上存储分层数据自动化测试程序,所述分层数据自动化测试程序被处理器执行时实现如上文所述的分层数据自动化测试方法的步骤。
本发明通过在接收到测试指令时,根据所述测试指令确定待查询数据层;获取所述待查询数据层对应的目标服务接口;调用所述目标服务接口并获取所述待查询数据层的返回数据;根据所述返回数据获得所述待查询数据层的测试结果。由于本发明中在确定待查询数据层后通过对应的目标服务接口获得返回数据,相较现有方式中需要人工编写不同的查询语句获得测试结果,能够由测试指令确定待查询的数据层,并基于不同的目标服务接口直接获取查询数据,实现了数据层的自动化测试,提升了数据检验的速率。
附图说明
图1为本发明实施例方案涉及的硬件运行环境的分层数据自动化测试设备结构示意图;
图2为本发明分层数据自动化测试方法第一实施例的流程示意图;
图3为本发明分层数据自动化测试方法第二实施例的流程示意图;
图4为本发明分层数据自动化测试方法的全流程架构图;
图5为本发明分层数据自动化测试方法第三实施例的流程示意图;
图6为本发明分层数据自动化测试装置第一实施例的结构框图。
本发明目的的实现、功能特点及优点将结合实施例,参照附图做进一步说明。
具体实施方式
应当理解,此处所描述的具体实施例仅用以解释本发明,并不用于限定本发明。
参照图1,图1为本发明实施例方案涉及的硬件运行环境的分层数据自动化测试设备结构示意图。
如图1所示,该分层数据自动化测试设备可以包括:处理器1001,例如中央处理器(Central Processing Unit,CPU),通信总线1002、用户接口1003,网络接口1004,存储器1005。其中,通信总线1002用于实现这些组件之间的连接通信。用户接口1003可以包括显示屏(Display)、输入单元比如键盘(Keyboard),可选用户接口1003还可以包括标准的有线接口、无线接口。网络接口1004可选的可以包括标准的有线接口、无线接口(如无线保真(Wireless-Fidelity,WI-FI)接口)。存储器1005可以是高速的随机存取存储器(RandomAccess Memory,RAM),也可以是稳定的非易失性存储器(Non-Volatile Memory,NVM),例如磁盘存储器。存储器1005可选的还可以是独立于前述处理器1001的存储装置。
本领域技术人员可以理解,图1中示出的结构并不构成对分层数据自动化测试设备的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
如图1所示,作为一种存储介质的存储器1005中可以包括操作系统、网络通信模块、用户接口模块以及分层数据自动化测试程序。
在图1所示的分层数据自动化测试设备中,网络接口1004主要用于与网络服务器进行数据通信;用户接口1003主要用于与用户进行数据交互;本发明分层数据自动化测试设备中的处理器1001、存储器1005可以设置在分层数据自动化测试设备中,所述分层数据自动化测试设备通过处理器1001调用存储器1005中存储的分层数据自动化测试程序,并执行本发明实施例提供的分层数据自动化测试方法。
本发明实施例提供了一种分层数据自动化测试方法,参照图2,图2为本发明分层数据自动化测试方法第一实施例的流程示意图。
本实施例中,所述分层数据自动化测试方法包括以下步骤:
步骤S10:在接收到测试指令时,根据所述测试指令确定待查询数据层。
需要说明的是,在大数据应用中,数据的一致性和正确性对于数据分析和决策非常重要。大数据分层可以为将大规模的数据集按照不同的层次进行分类和组织的过程,通过分层可以更好地管理和处理大数据,以便更有效地提取有用的信息和知识。
需要说明的是,本实施例方法可以应用在需要对大数据系统中不同的数据层间的数据进行验证和评估的场景中,本实施例方法的执行主体可以是具有数据处理、网络通信以及程序运行功能的计算服务设备,例如个人电脑、大数据分析装置等,还可以是具有相同或是相似功能的能够实现本发明分层数据自动化测试方法的其他电子设备,本实施例对此不加以限制。此处选用上述分层数据自动化测试设备(以下简称测试设备)为例对本发明分层数据自动化测试方法的各项实施例进行说明。
应该理解的是,该测试指令可以包括当前测试需求中确定的测试的目标和范围以及待测试的数据库即被测系统数据库,通过测试指令可以确定需要进行测试的数据层的数量和位置。该测试指令可以是由测试人员实时发起的,也可以是预先设置由测试平台自动发起的指令。
应该理解的是,在大数据应用中,按照不同的功能和用途,可以将数据进行分层存储和管理。具体的数据层可以包括以下几个示例:
原始数据层:存储原始采集的数据,未经处理和清洗的数据;
清洗数据层:存储经过清洗和预处理的数据,去除了无效或错误数据;
聚合数据层:存储根据业务需求进行聚合计算后的数据,如求和、平均值等;
分析数据层:存储用于数据分析和挖掘的数据,提供给数据科学家和分析师使用;
结果数据层:存储分析结果、计算结果或决策结果的数据。
应该理解的是,待查询数据层可以是当前测试需求确定的被测系统数据库中的任意一个或多个数据层,该任意数量的数据层可以是上述示例中的一个或多个,例如当前测试需求需要对数据库A进行数据一致性测试,数据库A中包含有原始数据层和清洗数据层,则数据库A为被测系统数据库,待查询数据层可以为原始数据层和清洗数据层。
在具体实现中,测试设备在接收到测试指令时,可以对测试指令进行分析,明确当前测试需求中的测试目标和范围,确定被测系统数据库以和待查询数据层。
步骤S20:获取所述待查询数据层对应的目标服务接口。
应该理解的是,为了直接获取待查询数据层的数据,可以预先定义有被测系统数据库中对待查询数据层的查询SQL,将查询SQL发布为应用程序接口(ApplicationProgramming Interface,API),使得可以通过API调用方式直接获取数据。因此,步骤S20之前,包括:
步骤S001:获取待测系统的各个数据层。
应该理解的是,该待测系统可以为包含有被测系统数据库的大数据系统,其中各个数据层可以为被测系统数据库中的各个数据层,例如上述举例的原始数据层、清洗数据层、聚合数据层、分析数据层以及结果数据层等。
在具体实现中,可以先确定待测系统中的全部数据层,也可以是确定当前测试需求中涉及到的被测系统数据库中的部分数据层。
步骤S002:根据所述各个数据层确定对应所述各个数据层的查询语句。
应该理解的是,该各个数据层的查询语句可以是由测试人员预先针对被测系统数据库编写的查询SQL,还可以是基于网络上获取的数据库一般查询语句进行改进获得的查询SQL,该查询SQL中可以包含对应数据层的处理逻辑。
步骤S003:基于所述查询语句生成所述各个数据层对应的服务接口。
应该理解的是,可以设计并实现一个API编排发布系统,用于将不同数据层的查询SQL直接发布为API,并确保API可以被外部系统调用。该API编排发布系统可以提供API的注册、创建、修改和删除等管理功能。
在具体实现中,API编排发布系统可以将编写的不数据层的查询SQL通过API注册方式,发布为可以被该待测系统外进行调用的服务接口API。
因此,步骤S20,包括:
步骤S200:在所述各个数据层对应的服务接口中,获取所述待查询数据层对应的目标服务接口。
应该理解的是,由于待测系统中各个数据层都可以基于API进行服务接口调用,因此在确定当前测试需求需要用到的待查询数据层后,可以直接调用待查询数据层对应的目标服务接口API。
步骤S30:调用所述目标服务接口并获取所述待查询数据层的返回数据。
应该理解的是,该返回数据可以为执该目标服务接口对应的查询SQL所获得的结果数据,该返回数据可以为对不同数据层的SQL查询结果。
步骤S40:根据所述返回数据获得所述待查询数据层的测试结果。
应该理解的是,在获取到不同数据层的SQL查询结果后,可以基于当前测试需求对查询结果进行分析。例如当前测试需求是判断不同数据层的数据一致性,则可以对不同的数据层的SQL查询结果进行对比。
本实施例通过在接收到测试指令时,根据所述测试指令确定待查询数据层;获取所述待查询数据层对应的目标服务接口;调用所述目标服务接口并获取所述待查询数据层的返回数据;根据所述返回数据获得所述待查询数据层的测试结果。由于本实施例在确定待查询数据层后通过对应的目标服务接口获得返回数据,相较现有方式中需要人工编写不同的查询语句,能够由测试指令确定待查询的数据层,并基于不同的目标服务接口直接获取查询数据,实现了数据层的自动化测试,提升了数据检验的速率。
参考图3,图3为本发明分层数据自动化测试方法第二实施例的流程示意图。
基于上述实施例,为了对通过调用目标服务接口获得各待查询数据层的返回结果的过程进行进一步说明,步骤S30,包括:
步骤S301:在调用所述目标服务接口时,执行所述目标服务接口的查询语句。
步骤S302:返回所述查询语句的执行结果,获得所述待查询数据层的返回数据。
应该理解的是,对目标服务接口进行调用,即可获得该目标服务接口下的查询SQL,执行该查询SQL即可以获取被测系统数据库中待查询数据层的查询结果即执行结果,进而可以获得不同的待查询数据层的返回数据。
进一步地,在获取到返回数据后,可以验证各待查询数据层数据处理的准确性和一致性,因此,步骤S40,包括:
步骤S401:将各所述待查询数据层对应的返回数据进行对比。
步骤S402:根据对比结果判断各所述待查询数据层是否存在数据差异。
可以理解的是,可以将各带待查询数据层对应的返回数据进行字段级对比,进而获得字段级对比结果。
具体地,在获取到所述对比结果时,对各所述待查询数据层对应的返回数据进行字段提取;根据所述返回数据中各字段的名称和/或数据,判断各所述待查询数据层是否存数据差异。
步骤S403:根据差异判断结果生成所述待测系统中所述待查询数据层的测试报告。
在具体实现中,在对待查询数据层的返回数据进行了分析对比后,可以获得待查询数据层的返回数据与预期数据的差异判断结果,以及各个待查询数据层的返回数据之间的差异判断结果,进而识别待查询数据层之间的差异和问题,生成相应的测试报告,其中该测试报告中可以记录有测试过程、结果和发现的异常情况。
此外,可以参考图4对本发明通过API编排发布系统实现对数据层之间数据处理的准确性和一致性测试的方法进行说明,图4为本发明分层数据自动化测试方法的全流程架构图。
在图4中,可以将本发明分层数据自动化测试方法分为测试平台、API编排发布系统以及被测系统数据库该三个执行模块。
图4中,测试平台中在接收到测试指令时,开始执行接口测试用例,该接口测试用例可以包括从基于当前测试需求构建的当前测试集中获取的请求数据;向API编排发布系统发布的API服务中调用包含待查询数据层对应的目标服务接口,即调用不同数据层SQL的API(可以预先编写被测系统数据库中不同数据层的查询语句SQL,并将其发布为可被调用的API服务);接着通过执行该目标服务接口下的查询SQL对被测系统数据库进行数据查询,获得并返回查询SQL的执行结果,即可以返回不同待查询数据层的SQL查询结果(返回数据);再对比不同待查询数据层的返回数据获得字段级对比结果,并可以对其中数据差异比对结果进行可视化,能够便于测试人员直观地获知测试结果。
本实施例中在调用所述目标服务接口时,执行所述目标服务接口的查询语句;返回所述查询语句的执行结果,获得所述待查询数据层的返回数据;将各所述待查询数据层对应的返回数据进行对比;在获取到所述对比结果时,对各所述待查询数据层对应的返回数据进行字段提取;根据所述返回数据中各字段的名称和/或数据,判断各所述待查询数据层是否存数据差异;根据差异判断结果生成所述待测系统中所述待查询数据层的测试报告。由于本实施例中将各个待查询数据层的返回数据进行字段级对比,能够对数据处理的准确性和一致性进行验证,且相较于现有方式中人工验证存在的效率低下且出错率高的缺点,本实施例中可以调用两个不同数据层的API,获取查询SQL返回的结果数据,进而对获取的结果数据进行差异性比较,实现了分层数据的测试自动化。
参考图5,图5为本发明分层数据自动化测试方法第三实施例的流程示意图。
基于上述实施例,考虑到在发现数据层之间存在差异或数据一致性问题时,可以进行故障排除并修复数据源或数据处理流程,因此,步骤S403之后,还包括:
步骤S501:获取所述测试报告中的异常数据项。
应该理解的是,可以对待测系统进行实时监控,获得自动化测试的日志信息,包括错误日志和异常情况等全流程记录信息,进而生成测试报告。并通过对待测系统的监控和日志记录,检查待测系统中的异常情况,获得异常数据项。
应该理解的是,该异常数据项可以是在数据准确性和一致性的验证中,各待查询数据层的返回数据中存在差异的字段。
步骤S502:根据所述异常数据项进行故障定位,并生成异常告警信息。
应该理解的是,通过上述测试报告中自动化测试的全流程记录信息,可以对异常数据项进行故障定位,确定该异常数据项所对应的待查询数据层以及其所在被测系统数据库中的具体位置,生成异常告警信息。
步骤S503:将所述异常告警信息推送至用户端。
在具体实现中,在生成了包含异常数据项的故障位置的异常告警信息后,可以根据该具体位置判断该异常数据项的故障严重等级,并可以基于不同的故障严重等级确定向用户端推送该异常告警信息的间隔时间。
进一步地,还可以首先由异常数据项及其故障位置判断当前故障严重等级,并生成相应等级的异常告警信息,该不同的故障严重等级可以设置有不同的推送间隔,例如:若故障严重等级分为高、中、低三个等级,可以设置高等级对应的推送间隔时间为实时推送,设置中等级对应的推送间隔时间为12小时,设置低等级对应的推送时间为一天。使得用户端在接收到该异常告警信息时可以初步确定系统的故障严重程度。
应该理解的是,考虑到测试人员在接收到异常告警信息后可以采取相应的措施进行修复,例如软件调整、数据处理、系统配置等,因此步骤S503之后,还包括:
步骤S601:在所述用户端根据所述异常告警信息进行故障修复后,根据所述故障定位确定待查验数据层。
步骤S602:对所述待查验数据层进行数据测试,判断所述异常数据项是否完成故障修复。
应该理解的是,在测试人员采取措施进行故障修复后,为了确保故障已经得到解决,可以根据上述故障定位确定该异常项所属的数据层即待查验数据层,对该待查验数据层进行相应的测试和验证。
需要说明的是,在测试人员修复故障后,可以继续进行对待测系统的实时监控,以确保故障不再出现,并还可以向测试人员即时反馈故障修复情况。
应该理解的是,在待查询数据层之间存在差异或数据一致性问题时,可以进行故障排除并修复数据源或数据处理流程。并为了确保故障得到解决,可以再次运行测试以验证修复的效果。
还需说明的是,由于本发明分层数据自动化测试方法可以融入至持续集成(Continuous Integration,CI)的流程中,能够使得测试过程更加高效;且由于可以基于当前测试需求重复执行测试,能够提早发现系统问题进行故障修复,进一步提高了数据质量和决策准确性。
本实施例通过在根据差异判断结果生成所述待查询数据层的测试报告之后获取所述测试报告中的异常数据项;根据所述异常数据项进行故障定位,并生成异常告警信息;将所述异常告警信息推送至用户端;能够使测试人员及时获取测试的结果信息以便于进行相应的故障排除处理,提升了故障决策的效率。并在所述用户端根据所述异常告警信息进行故障修复后,根据所述故障定位确定待查验数据层;对所述待查验数据层进行数据测试,判断所述异常数据项是否完成故障修复,进一步提高了测试过程的效率以及待测系统的数据质量。
此外,为实现上述目的,本发明还提出一种计算机可读存储介质,所述计算机可读存储介质上存储有分层数据自动化测试程序,所述分层数据自动化测试程序被处理器执行时实现如上文所述的分层数据自动化测试方法的步骤。
参考图6,图6为本发明分层数据自动化测试装置第一实施例的结构框图。
如图6所示,本发明实施例提出的分层数据自动化测试装置包括:
指令接收模块601,用于在接收到测试指令时,根据所述测试指令确定待查询数据层;
接口获取模块602,用于获取所述待查询数据层对应的目标服务接口;
接口调用模块603,用于调用所述目标服务接口并获取所述待查询数据层的返回数据;
结果生成模块604,用于根据所述返回数据获得所述待查询数据层的测试结果。
进一步地,所述接口获取模块602,还用于获取待测系统的各个数据层;根据所述各个数据层确定对应所述各个数据层的查询语句;基于所述查询语句生成所述各个数据层对应的服务接口。
本实施例通过在接收到测试指令时,根据所述测试指令确定待查询数据层;获取所述待查询数据层对应的目标服务接口;调用所述目标服务接口并获取所述待查询数据层的返回数据;根据所述返回数据获得所述待查询数据层的测试结果。由于本实施例在确定待查询数据层后通过对应的目标服务接口获得返回数据,相较现有方式中需要人工编写不同的查询语句,能够由测试指令确定待查询的数据层,并基于不同的目标服务接口直接获取查询数据,实现了数据层的自动化测试,提升了数据检验的速率。
基于本发明上述分层数据自动化测试装置第一实施例,提出本发明分层数据自动化测试装置第二实施例。
在本实施例中,接口调用模块603,用于在调用所述目标服务接口时,执行所述目标服务接口的查询语句;返回所述查询语句的执行结果,获得所述待查询数据层的返回数据。
结果生成模块604,用于将各所述待查询数据层对应的返回数据进行对比;根据对比结果判断各所述待查询数据层是否存在数据差异;根据差异判断结果生成所述待测系统中所述待查询数据层的测试报告。
进一步地,所述结果生成模块604,还用于在获取到所述对比结果时,对各所述待查询数据层对应的返回数据进行字段提取;根据所述返回数据中各字段的名称和/或数据,判断各所述待查询数据层是否存数据差异。
进一步地,所述结果生成模块604,还用于获取所述测试报告中的异常数据项;根据所述异常数据项进行故障定位,并生成异常告警信息;将所述异常告警信息推送至用户端。
进一步地,所述结果生成模块604,还用于在所述用户端根据所述异常告警信息进行故障修复后,根据所述故障定位确定待查验数据层;对所述待查验数据层进行数据测试,判断所述异常数据项是否完成故障修复。
本发明分层数据自动化测试装置其他实施例或具体实现方式可参照上述各方法实施例,此处不再赘述。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者系统不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者系统所固有的要素。在没有更多限制的情况下,由语句“包括一个……限定”的要素,并不排除在包括该要素的过程、方法、物品或者系统中还存在另外的相同要素。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如只读存储器/随机存取存储器、磁碟、光盘)中,包括若干指令用以使得一台终端设备(可以是手机,计算机,服务器,空调器或者网络设备等)执行本发明各个实施例所述的方法。
以上仅为本发明的优选实施例,并非因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本发明的专利保护范围内。
Claims (6)
1.一种分层数据自动化测试方法,其特征在于,所述方法应用于测试平台,所述方法包括:
在接收到测试指令时,根据所述测试指令确定待查询数据层,所述待查询数据层包括:原始数据层、清洗数据层、聚合数据层、分析数据层以及结果数据层;
从API编排发布系统发布的API服务中获取所述待查询数据层对应的目标服务接口,其中,所述API服务为基于预先编写的对应各所述待查询数据层的查询语句所生成的可调用接口;
调用所述目标服务接口,以使所述API编排发布系统执行所述目标服务接口对应的查询语句对被测系统数据库进行数据查询;
接收所述API编排发布系统发送的所述待查询数据层的返回数据,所述待查询数据层的返回数据为所述API编排发布系统从所述被测系统数据库接收的对应所述查询语句的执行结果;
将不同待查询数据层对应的返回数据进行对比,并在获取到对比结果时,对各所述返回数据进行字段提取;
根据各所述返回数据中各字段的名称和/或数据,判断不同待查询数据层是否存数据差异;
根据差异判断结果生成所述待查询数据层的测试报告。
2.如权利要求1所述的分层数据自动化测试方法,其特征在于,所述根据差异判断结果生成所述待查询数据层的测试报告之后,包括:
获取所述测试报告中的异常数据项;
根据所述异常数据项进行故障定位,并生成异常告警信息;
将所述异常告警信息推送至用户端。
3.如权利要求2所述的分层数据自动化测试方法,其特征在于,所述将所述异常告警信息推送至用户端之后,包括:
在所述用户端根据所述异常告警信息进行故障修复后,根据所述故障定位确定待查验数据层;
对所述待查验数据层进行数据测试,判断所述异常数据项是否完成故障修复。
4.一种分层数据自动化测试装置,其特征在于,所述装置应用于测试平台,所述装置包括:
指令接收模块,用于在接收到测试指令时,根据所述测试指令确定待查询数据层,所述待查询数据层包括:原始数据层、清洗数据层、聚合数据层、分析数据层以及结果数据层;
接口获取模块,用于从API编排发布系统发布的API服务中获取所述待查询数据层对应的目标服务接口,其中,所述API服务为基于预先编写的对应各所述待查询数据层的查询语句所生成的可调用接口;
接口调用模块,用于调用所述目标服务接口,以使所述API编排发布系统执行所述目标服务接口对应的查询语句对被测系统数据库进行数据查询;
所述接口调用模块,还用于接收所述API编排发布系统发送的所述待查询数据层的返回数据,所述待查询数据层的返回数据为所述API编排发布系统从所述被测系统数据库接收的对应所述查询语句的执行结果;
结果生成模块,用于将不同待查询数据层对应的返回数据进行对比,并在获取到对比结果时,对各所述返回数据进行字段提取;根据各所述返回数据中各字段的名称和/或数据,判断不同待查询数据层是否存数据差异;根据差异判断结果生成所述待查询数据层的测试报告。
5.一种分层数据自动化测试设备,其特征在于,所述分层数据自动化测试设备包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的分层数据自动化测试程序,所述分层数据自动化测试程序被所述处理器执行时实现如权利要求1至3中任一项所述的分层数据自动化测试方法的步骤。
6.一种存储介质,其特征在于,所述存储介质上存储有分层数据自动化测试程序,所述分层数据自动化测试程序被处理器执行时实现如权利要求1至3中任一项所述的分层数据自动化测试方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202311766452.6A CN118331843B (zh) | 2023-12-21 | 2023-12-21 | 分层数据自动化测试方法、装置、设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202311766452.6A CN118331843B (zh) | 2023-12-21 | 2023-12-21 | 分层数据自动化测试方法、装置、设备及存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN118331843A CN118331843A (zh) | 2024-07-12 |
CN118331843B true CN118331843B (zh) | 2024-08-06 |
Family
ID=91779482
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202311766452.6A Active CN118331843B (zh) | 2023-12-21 | 2023-12-21 | 分层数据自动化测试方法、装置、设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN118331843B (zh) |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110083540A (zh) * | 2019-04-29 | 2019-08-02 | 北京口袋时尚科技有限公司 | 接口测试方法及装置 |
CN111538672A (zh) * | 2020-05-29 | 2020-08-14 | 平安普惠企业管理有限公司 | 测试案例分层测试方法、计算机设备及计算机可读存储介质 |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111310007B (zh) * | 2020-02-11 | 2023-07-07 | 北京达佳互联信息技术有限公司 | 网页接口查询方法、装置、电子设备及存储介质 |
CN115168416A (zh) * | 2022-06-27 | 2022-10-11 | 度小满科技(北京)有限公司 | 数据缓存方法、装置、存储介质及电子装置 |
CN115858351A (zh) * | 2022-11-28 | 2023-03-28 | 中能融合智慧科技有限公司 | 一种数据测试方法和系统 |
-
2023
- 2023-12-21 CN CN202311766452.6A patent/CN118331843B/zh active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110083540A (zh) * | 2019-04-29 | 2019-08-02 | 北京口袋时尚科技有限公司 | 接口测试方法及装置 |
CN111538672A (zh) * | 2020-05-29 | 2020-08-14 | 平安普惠企业管理有限公司 | 测试案例分层测试方法、计算机设备及计算机可读存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN118331843A (zh) | 2024-07-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20210049092A1 (en) | Analyzing software test failures using natural language processing and machine learning | |
CN111736875B (zh) | 版本更新监控方法、装置、设备及计算机存储介质 | |
CN109284269B (zh) | 异常日志分析方法、装置、存储介质及服务器 | |
CN110178121B (zh) | 一种数据库的检测方法及其终端 | |
US20170068612A1 (en) | Method of Detecting False Test Alarms Using Test Step Failure Analysis | |
CN112965871A (zh) | 车辆故障提示信息获取方法、装置及存储介质 | |
US9075911B2 (en) | System and method for usage pattern analysis and simulation | |
CN110088744B (zh) | 一种数据库维护方法及其系统 | |
JP6141471B2 (ja) | システムの可用性を解析するための方法、装置、当該装置を含むシステム、並びに、上記方法を実施するためのコンピュータプログラム | |
CN111240994A (zh) | 漏洞处理方法、装置、电子设备及可读存储介质 | |
US20200117587A1 (en) | Log File Analysis | |
US20180143897A1 (en) | Determining idle testing periods | |
CN114924990A (zh) | 一种异常场景测试方法及电子设备 | |
CN115952081A (zh) | 一种软件测试方法、装置、存储介质及设备 | |
CN118331843B (zh) | 分层数据自动化测试方法、装置、设备及存储介质 | |
CN113282496B (zh) | 接口自动测试方法、装置、设备及存储介质 | |
CN113127324B (zh) | 测试报告自动化生成方法、装置、计算机设备及存储介质 | |
CN113238901A (zh) | 多设备的自动化测试方法及装置、存储介质、计算机设备 | |
Zhao et al. | How to Manage Change-Induced Incidents? Lessons from the Study of Incident Life Cycle | |
CN114428715A (zh) | 一种日志处理方法、装置、系统及存储介质 | |
Wang et al. | Empirical study on the correlation between software structural modifications and its fault-proneness | |
JP2007052756A (ja) | ワイヤレスデバイスの不具合診断に適用する学習型診断データベース | |
CN113037550B (zh) | 一种服务故障监控方法、系统及计算机可读存储介质 | |
Jayapal et al. | Automation of Trace Analysis | |
Rehman | Quantifying Flaky Tests to Detect Test Instabilities |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |