CN110781070A - 大数据测试验证方法、装置、计算机设备及存储介质 - Google Patents
大数据测试验证方法、装置、计算机设备及存储介质 Download PDFInfo
- Publication number
- CN110781070A CN110781070A CN201910842164.1A CN201910842164A CN110781070A CN 110781070 A CN110781070 A CN 110781070A CN 201910842164 A CN201910842164 A CN 201910842164A CN 110781070 A CN110781070 A CN 110781070A
- Authority
- CN
- China
- Prior art keywords
- test
- result
- matching
- query
- interface
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/36—Preventing errors by testing or debugging software
- G06F11/3668—Software testing
- G06F11/3672—Test management
- G06F11/3692—Test management for test results analysis
Abstract
本发明公开了大数据测试验证方法、装置、计算机设备及存储介质,该方法包括:获取客户端发送的执行指令,执行指令包括测试需求表,测试需求表包括测试接口和执行逻辑;基于测试接口,获取测试接口对应的目标表;调用接口执行脚本,按照执行逻辑对每一测试接口进行调用判断,获取接口调用结果;若接口调用结果为响应成功,则获取测试接口携带的查询字段;基于测试接口中的查询字段,从目标表中获取与查询字段对应的查询结果;按照测试需求表中的匹配方式,对查询结果和测试需求表中的预期结果进行匹配,获取匹配结果。采用该方法以实现对预期结果和测试结果进行自动化比对验证,提高大数据测试验证效率。
Description
技术领域
本发明涉及数据处理领域,尤其涉及一种大数据测试验证方法、装置、计算机设备及存储介质。
背景技术
在现有测试系统进行测试后,需要从远程数据库中众多的数据表查找出测试结果,然后开发人员再对测试结果与存储在本地服务器的预期结果做检查验证,判断测试过程是否正确。这一检查验证过程操作繁琐,且花费时间。特别是当测试系统对大数据进行测试时,开发人员进行检查验证的工作量巨大,不仅耗时长且人工成本较高,但检查验证任务却是确保项目准确不可少的步骤,因此,如何提高大数据测试验证的效率成为一个亟待解决的问题。
发明内容
本发明实施例提供一种大数据测试验证方法、装置、计算机设备及存储介质,以解决大数据测试时存在的查检验证效率低的问题。
一种大数据测试验证方法,包括:
获取客户端发送的执行指令,所述执行指令包括测试需求表,所述测试需求表包括测试接口和执行逻辑;
基于所述测试接口,获取所述测试接口对应的目标表;
调用接口执行脚本,按照所述执行逻辑对每一测试接口进行调用判断,获取接口调用结果;
若所述接口调用结果为响应成功,则获取所述测试接口携带的查询字段,
基于所述测试接口中的查询字段,从所述目标表中获取与所述查询字段对应的查询结果;
按照所述测试需求表中的匹配方式,对所述查询结果和所述测试需求表中的预期结果进行匹配,获取匹配结果。
一种大数据测试验证装置,包括:
执行指令获取模块,用于获取客户端发送的执行指令,所述执行指令包括测试需求表,所述测试需求表包括测试接口和执行逻辑;
目标表获取模块,用于基于所述测试接口,获取所述测试接口对应的目标表;
接口调用结果获取模块,用于调用接口执行脚本,按照所述执行逻辑对每一测试接口进行调用判断,获取接口调用结果;
查询字段获取模块,用于若所述接口调用结果为响应成功,则获取所述测试接口携带的查询字段;
查询结果获取模块,用于基于所述测试接口中的查询字段,从所述目标表中获取与所述查询字段对应的查询结果;
匹配结果获取模块,用于按照所述测试需求表中的匹配方式,对所述查询结果和所述测试需求表中的预期结果进行匹配,获取匹配结果。
一种计算机设备,包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现上述大数据测试验证方法的步骤。
一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,所述计算机程序被处理器执行时实现上述大数据测试验证方法的步骤。
上述大数据测试验证方法、装置、计算机设备及存储介质,获取客户端发送的执行指令,以开始对测试结果进行验证,基于所述测试接口,获取所述测试接口对应的目标表,减少人工查询步骤,加快大数据测试验证的速度;调用接口执行脚本,按照所述执行逻辑对每一测试接口进行调用判断,以确定测试过程中实际调用的测试接口;若所述接口调用结果为响应成功,则获取所述测试接口携带的查询字段,基于所述测试接口中的查询字段,从所述目标表中获取与所述查询字段对应的查询结果,以便后续查询结果与预期结果进行匹配,实现自动化验证,加快大数据测试验证速度;按照所述测试需求表中的匹配方式,对所述查询结果和所述测试需求表中的预期结果进行匹配,获取匹配结果,设定不同的匹配方式,确保可自动化对大数据测试结果进行验证,提高验证效率。
附图说明
为了更清楚地说明本发明实施例的技术方案,下面将对本发明实施例的描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1是本发明一实施例中大数据测试验证方法的一应用环境示意图;
图2是本发明一实施例中大数据测试验证方法的一流程图;
图3是本发明一实施例中大数据测试验证方法的另一流程图;
图4是本发明一实施例中大数据测试验证方法的另一流程图;
图5是本发明一实施例中大数据测试验证方法的另一流程图;
图6是本发明一实施例中大数据测试验证方法的另一流程图;
图7是本发明一实施例中大数据测试验证方法的另一流程图;
图8是本发明一实施例中大数据测试验证方法的另一流程图;
图9是本发明一实施例中大数据测试验证装置的一原理框图;
图10是本发明一实施例中计算机设备的一示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本发明实施例提供的大数据测试验证方法,该大数据测试验证方法可应用如图1所示的应用环境中。具体地,该大数据测试验证方法应用在大数据测试验证系统中,该大数据测试验证系统包括如图1所示的客户端和服务器,客户端与服务器通过网络进行通信,用于实现对预期结果和测试结果进行自动化比对验证,提高大数据测试验证效率。其中,客户端又称为用户端,是指与服务器相对应,为客户提供本地服务的程序。客户端可安装在但不限于各种个人计算机、笔记本电脑、智能手机、平板电脑和便携式可穿戴设备上。服务器可以用独立的服务器或者是多个服务器组成的服务器集群来实现。
在一实施例中,如图2所示,提供一种大数据测试验证方法,以该方法应用在图1中的服务器为例进行说明,包括如下步骤:
S201:获取客户端发送的执行指令,执行指令包括测试需求表,测试需求表包括测试接口和执行逻辑。
其中,执行指令是指对测试后得到的测试结果进行检查验证的指令,以便验证测试是否正确。测试需求表是指记录了测试信息和测试ID对应的预期结果的表,以判断测试结果是否正确。该测试需求表具体可以包括但不限于本实施例提及的测试ID、测试接口、执行逻辑、查询字段和每一测试ID对应的预期结果的表。其中,测试ID指测试项目的标识,可以是测试项目的名称,如新用户注册项目、申请贷款项目和贷款审批结果项目。测试需求指对测试项目对应的数据是否满足规定进行测试的需求,如对新用户注册账号进行测试时,设置了新用户注册账号应满足长度不超过10,不能为汉字的规定,则该新用户注册账号的测试需求为长度不超过10和不能为汉字。测试接口是测试过程中调用的接口。执行逻辑是指测试过程中调用测试接口的逻辑。测试结果是指开发人员对测试ID进行测试后生成的结果。预期结果是指开发人员预先设定的对测试ID进行测试所能达到的结果。查询字段是指与测试接口对应的字段,以查找测试结果。
具体地,大数据测试验证系统中设置有执行比对检查的操作键,开发人员点击该操作键,则触发执行指令对测试结果与预期结果进行比对验证。可以理解地,开发人员预先在一张表中填写需要进行测试的测试ID、测试接口、执行逻辑、查询字段和每一测试ID对应的预期结果,形成测试需求表。为了方便后续维护测试ID,本实施例将一个测试ID和该测试ID对应的预期结果维护在测试需求表中的一个sheet页中。每个测试ID对应的sheet页中会标注测试结果和预期结果的匹配方式。
S202:基于测试接口,获取测试接口对应的目标表。
其中,目标表是指存储所有项目对应的测试结果的表。具体地,服务器先调用测试接口对测试数据进行测试,然后将测试数据、对应的测试结果和对应的至少一个测试接口关联存储在目标表中。可以理解地,在测试过程中,由于测试数据较多,一般将存储有测试结果的目标表存储在远程数据库中,避免测试数据太多而影响客户端的运行速度。根据测试接口,可以快速获取对应的目标表,减少人工查询步骤,加快大数据测试验证的速度。在本实施例中,将同一测试ID的测试数据、对应的测试接口和对应的测试结果存储在同一页sheet页,以便于后续的测试结果出错时,根据该测试ID进行开始确定测试结果的位置并进行修改。
S203:调用接口执行脚本,按照执行逻辑对每一测试接口进行调用判断,获取接口调用结果。
其中,接口执行脚本是指预先编写的对测试过程中的测试接口进行远程调用的脚本,以便调用测试接口进行测试。接口调用结果是指对测试接口进行调用的结果,可以理解地,接口调用结果包括响应成功和响应不成功。
具体地,由于执行逻辑中可能存在if(a or b)then c之类的判断语句,则需要确定测试过程中实际调用的测试接口,因此,当执行指令开始执行时,服务器就会启动接口执行脚本,按照测试需求表中的执行逻辑对每一测试接口进行调用判断,在以确定测试过程中实际调用的测试接口。在本实施例中,接口执行脚本按照执行逻辑对每一测试接口进行http请求调用,以获取接口调用结果,根据该接口调用结果判断测试过程是否调用了该测试接口;若接口调用结果为响应成功,则测试过程调用了该测试接口;若接口调用结果为响应不成功,则测试过程没有调用该测试接口,以实现自动化大数据测试验证。
S204:若接口调用结果为响应成功,则获取测试接口携带的查询字段。
具体地,若接口调用结果为响应成功,即说明测试需求表中的测试接口进行http请求调用响应成功,说明该测试接口为测试过程中实际调用的测试接口,此时,服务器获取测试接口对应的查询字段。可以理解地,查询字段可以根据实际情况编写,包括但不限于条件语句形成的查询字段、查询语句形成的查询字段或者两者嵌套形成的查询字段。如“select*,1as(whereleft(字段名字,1)like'%[^0-9]%'))from数据表名字”,“select*,0as(where left(字段名字,1)like'not%[^0-9]%'))from数据表名字”,或者“select用户名字段from数据表名字where注册时间字段='2018'”。
S205:基于测试接口中的查询字段,从目标表中获取与查询字段对应的查询结果。
具体地,在获取到测试接口携带的查询字段后,服务器基于查询字段,从目标表中获取与查询字段对应的查询信息,在获取查询信息后,按照预设的处理规则对查询信息进行处理,形成固定格式的查询结果,以便后续查询结果与预期结果进行匹配,实现自动化验证,加快大数据测试验证速度。
S206:按照测试需求表中的匹配方式,对查询结果和测试需求表中的预期结果进行匹配,获取匹配结果。
其中,匹配方式是预先设定的匹配验证方法。由于不同项目中的数据存在较大差别,为了更好地对查询结果与预期结果进行匹配,设定不同的匹配方式,确保可自动化对大数据测试结果进行验证。具体地,在获取查询结果后,服务器按照测试需求表中标注的匹配方式对查询结果和预期结果进行匹配,获取二者的匹配结果,以判断大数据测试过程是否准确。其中,匹配结果指比较查询结果和预期结果是否一致的结果。
本实施例所提供的大数据测试验证方法中,获取客户端发送的执行指令,以开始对测试结果进行验证,基于测试接口,获取测试接口对应的目标表,减少人工查询步骤,加快大数据测试验证的速度;调用接口执行脚本,按照执行逻辑对每一测试接口进行调用判断,以确定测试过程中实际调用的测试接口;若接口调用结果为响应成功,则获取测试接口携带的查询字段,基于测试接口中的查询字段,从目标表中获取与查询字段对应的查询结果,以便后续查询结果与预期结果进行匹配,实现自动化验证,加快大数据测试验证速度;按照测试需求表中的匹配方式,对查询结果和测试需求表中的预期结果进行匹配,获取匹配结果,设定不同的匹配方式,确保可自动化对大数据测试结果进行验证,提高验证效率。
在一实施例中,如图3所示,步骤S203,即调用接口执行脚本,按照执行逻辑对每一测试接口进行调用判断,获取接口调用结果,包括:
S301:调用接口执行脚本读取测试需求表,获取接口列表,接口列表包括至少两个测试接口和执行逻辑。
具体地,服务器调用接口执行脚本读取测试需求表,以快速获取测试需求表中的接口列表,该接口列表包括至少两个测试接口和执行逻辑,以便接口执行脚本解析执行逻辑中的关键字,确定测试过程中调用到的至少两个测试接口和对应的调用顺序。该执行逻辑是指在测试过程中的调用至少两个测试接口进行执行的逻辑,可以理解为至少两个测试接口之间的调用顺序。例如,执行逻辑可以是先调用接口a,如果接口a调用成功才调用接口b,否则调用接口c。具体地,执行逻辑中的关键字中的关键字包括但不限于if、and、or和then。
S302:依据执行逻辑,依序对每一测试接口进行远程接口调用判断,获取接口调用结果。
具体地,在获取到接口列表后,接口执行脚本依据执行逻辑对每一测试接口进行http请求调用,以获取测试过程中实际调用的测试接口,,提高大数据测试结果的验证效率,有助于依据测试过程中调用到的至少两个测试接口和对应的调用顺序,实现自动化测试验证。具体地,接口调用结果包括响应成功和响应失败,若响应成功说明测试过程调用了该测试接口;若响应失败说明测试过程中没有调用该测试接口。此外的响应失败包括在预设等待期内没有接收到响应信息,或者虽然在预设等待期内接收到响应信息但响应信息为失败两种情况。其中,http请求是指从客户端到服务器端的请求消息,http请求包括:对资源的请求方法、资源的标识符及使用的协议。
本实施例所提供的大数据测试验证方法中,调用接口执行脚本读取测试需求表,以快速获取测试需求表中的接口列表,依据执行逻辑,依序对每一测试接口进行远程接口调用判断,获取接口调用结果,以快速确定测试过程中中实际调用的测试接口,以便进行后续的大数据测试结果检查验证,提高大数据测试结果的验证效率。
在一实施例中,测试接口包括数据库标识和表标识。如图4所示,步骤S202,即基于测试接口,获取测试接口对应的目标表,包括:
S401:基于数据库标识获取与数据库标识对应的目标数据库。
其中,数据库标识指用于辨识数据库的标识,该数据库标识具体是指存储有测试结果的数据库对应的标识,以便查找需要的数据库,加快自动化测试的速度。
具体地,在获取测试需求表后,服务器根据测试接口携带的数据库标识,获取与该数据库标识对应的目标数据库。目标数据库指与测试接口携带的数据库标识对应的数据库。本实施例中,服务器通过数据库标识,可以快速地定位到目标数据库,减少后续步骤获取目标表的处理量。
S402:基于表标识遍历目标数据库,从目标数据库中获取与表标识对应的目标表。
其中,表标识是指存储有测试结果的表对应的标识,以便方便查找需要的目标表。
具体地,在获取测试需求表后,服务器根据测试接口携带的表标识,遍历目标数据库,从目标数据库中获取与表标识对应的目标表。即通过表标识遍历目标数据库,从而快速定位到目标表,提高获取目标表的速度。
本实施例所提供的大数据测试验证方法中,服务器基于数据库标识以快速获取与数据库标识对应的目标数据库,然后基于表标识从目标数据库中获取与表标识对应的目标表,其过程无需人工干预,可由服务器根据测试接口携带的数据库标识获取对应的目标数据库和表标识获取对应的目标表,可以快速定位到目标表,实现了自动获取目标表的功能,简化操作流程,提高后续对大数据测试结果进行查验验证的效率。
在一实施例中,如图5所示,步骤S205,即基于测试接口中的查询字段,从目标表中获取与查询字段对应的查询结果,包括:
S501:基于测试接口中的查询字段,从目标表中获取与查询字段对应的查询信息。
其中,查询信息是指根据查询字段从目标表中获取到的信息。本实施例中,预先在测试需求表中设置与每一测试接口的预期结果对应的字段作为查询字段,该查询字段具体包括但不限于字符和字符串。相应地,服务器基于任一测试接口的查询字段,查询该测试接口对应的目标表中相对应的查询信息,以加快自动化测试的速度。本实施例中可采用模糊匹配算法,根据查询字段快速查询获取相应的查询信息,利用模糊匹配算法进行查询匹配,有助于提高对大数据测试结果进行检查验证的效率。
S502:基于测试接口中的处理规则对查询信息进行处理,获取查询结果。
其中,处理规则是指用于对查询信息进行处理的规则,以便后续将查询结果和测试需求表中的预期结果进行匹配,该处理规则包括但不限于拼接处理规则和拆分处理规则等。例如,拼接处理规则可以将不同列的[{“c”}、{“b”}]和[{“a”}{“c”}]拼接成同一个列[{“c”,{“b”,“a”}],例如,c表示身份证,b表示名字,a表示姓氏,则根据身份证将名字和姓氏拼接为同一个列;拆分处理规则与拼接处理规则相反地,拆分处理规则将同一个列[{“c”,{“b”,“a”}]拆分为不同列的[{“c”}、{“b”}]和[{“a”}{“c”}],例如,c表示身份证,b表示名字,a表示姓氏,则根据身份证将名字和姓氏拆分为不同的列;可以理解地,设置处理规则对查询信息进行处理,有利于后续将查询结果与测试需求表中的预期结果进行快速匹配。
可以理解地,采用模糊匹配算法根据查询字段快速查询对应的查询信息,在查询信息数量较多时,若直接对查询结果和测试需求表中的预期结果进行一一匹配,使得大数据测试验证的时间拖延,因此,可对获得查询结果根据测试接口中的处理规则进行处理,以提取查询信息中的关键字符,形成预先设定的格式字符串,即提取查询信息中的关键字符,形成与预期结果相对应的格式字符串,例如,格式字符串可以是{“flag”:“1”,“message”:“success”}这样的字符串,将获得的格式字符串作为查询结果,提高后续将查询结果和测试需求表中的预期结果进行匹配的效率。
本实施例所提供的大数据测试验证方法,基于测试接口中的查询字段,从目标表中获取与查询字段对应的查询信息,以提高对大数据测试结果进行检查验证的效率,基于测试接口中的处理规则对查询信息进行处理,获取查询结果,提高后续将查询结果和测试需求表中的预期结果进行匹配的效率。
在一实施例中,如图6所示,步骤S206,即按照测试需求表中的匹配方式,对查询结果和测试需求表中的预期结果进行匹配,获取匹配结果,包括:
S601:当匹配方式为乱序匹配时,则对测试需求表中的预期结果和查询结果进行内容匹配,获取匹配结果。
其中,乱序匹配指测试结果与预期结果的内容一致,但是顺序不一致,例如,预期结果:{“flag”:“1”,“message”:“success”},匹配方式为乱序匹配,则表示接口返回值为{“message”:“success”,“flag”:“1”}也表示测试成功。
具体地,当测试需求表中标注的匹配方式为乱序匹配时,则直接对预期结果和查询结果进行内容匹配,获取匹配结果。由于执行逻辑可能包括or的选择关系,即按照执行逻辑调用测试接口进行测试时,可以选择调用测试接口f或者测试接口g,而使得测试结果的查询结果的内容存在顺序上不同,此时,采用乱序匹配对测试需求表中的预期结果和查询结果进行内容匹配,获取匹配结果。
采用乱序匹配对测试需求表中的预期结果和查询结果进行内容匹配,若查询结果和预期结果在内容上是一致的,则匹配结果为匹配成功;若查询结果和预期结果在内容上是不一致的,则匹配结果为匹配失败。如测试需求表中的预期结果为{“flag”:“1”,“message”:“success”},标注的匹配方式为乱序匹配,则查询结果只需要包含“flag”:“1”和“message”:“success”对应的内容,则二者的匹配结果为匹配成功,即乱序匹配只要求预期结果中的字符与查询结果中的字符进行匹配时是完全一致的,而字符的顺序不做要求,以快速获取匹配结果。
S602:若当匹配方式不为乱序匹配时,则对测试需求表中的预期结果和查询结果进行顺序和内容匹配,获取匹配结果。
具体地,当测试需求表中标注的匹配方式不为乱序匹配,则需要分别对查询结果与预期结果的内容和顺序进行匹配,所述匹配方式包括但不限于完全匹配和部分匹配。
其中,完全匹配指测试结果的顺序和内容与预期结果完全一样。部分匹配指测试结果的内容为预期结果的一部分,但是顺序要与预期结果相同。例如,预期结果:{“flag”:“1”,“message”:“success”},如果匹配方式为完全匹配,则测试结果只能是{“flag”:“1”,“message”:“success”};如果匹配方式为部分匹配,则测试结果只要包含字段flag和message且顺序必须是先flag再message,且flag和message对应的值分别为1和success。
以匹配方式为完全匹配为例,当查询结果和预期结果的内容一致,且查询结果和预期结果的顺序一致时,则匹配结果为匹配成功;若查询结果和预期结果的内容不一致,和/或,查询结果和预期结果的顺序不一致,则匹配结果为匹配失败。例如,测试需求表中标注的匹配方式为完全匹配,预期结果为{“flag”:“1”,“message”:“success”},则只有当查询结果的内容为{“flag”:“1”,“message”:“success”}时,才能匹配成功。若查询内容不为{“flag”:“1”,“message”:“success”},或者查询结果为{“message”:“success”,“flag”:“1”}在顺序上和预期结果不一致,则匹配结果为匹配失败。
本实施例所提供的大数据测试验证方法中,当匹配方式为乱序匹配时,则对测试需求表中的预期结果和查询结果进行内容匹配,获取匹配结果。若当匹配方式不为乱序匹配时,则对测试需求表中的预期结果和查询结果进行顺序和内容匹配,获取匹配结果,依据执行逻辑采用乱序匹配和不为乱序匹配的匹配方式,确保可实现自动化对大数据测试结果进行验证,提高工作效率。
在一实施例中,如图7所示,查询结果包括至少一个查询字段和查询字段对应的查询属性值,查询字段对应一第一顺序序列;预期结果包括预期字段与预期字段对应的的预期属性值,至少一个预期字段对应一第二顺序序列。
相应地,步骤S602,即若当匹配方式不为乱序匹配时,则对测试需求表中的预期结果和查询结果进行顺序和内容匹配,获取匹配结果,包括:
S701:对第一顺序序列和第二顺序序列进行匹配,获得顺序匹配结果。
其中,第一顺序序列是指查询字段对应的顺序的序列,查询属性值是指查询字段对应的属性值,例如,查询字段为flag、message和identity,查询属性值为1、success和XXX,则第一顺序序列为{“flag”,“message”,“identity”},查询结果为{“flag”:“1”,“message”:“success”,“identity”:“XXX”}。第二顺序序列是指预期字段的顺序的序列,预期属性值是预期字段对应的属性值,例如,预期字段为flag和message,预期属性值为1和success,则第二顺序序列为{“flag”,“message”},预期结果为{“flag”:“1”,“message”:“success”}。
具体地,采用匹配算法对第一顺序序列和第二顺序序列,以快速获得顺序匹配结果,例如,采用正则匹配算法依次对第一顺序序列和第二顺序序列的字符进行匹配,以快速获得顺序匹配结果,提高验证效率。顺序匹配结果为错误时,可以确定匹配结果为错误,以提高验证效率,顺序匹配结果为准确时,需要对查询属性值和预期属性值进行匹配。在本实施例中,匹配方式为完全匹配,则第一顺序序列和第二顺序序列的字符存在不同,顺序匹配结果为错误;第一顺序序列和第二顺序序列的字符完全一致,则顺序匹配结果为准确。若匹配方式为部分匹配,则依次对对第一顺序序列和第二顺序序列进行匹配,只要保证第一顺序序列和第二顺序序列中相同字符的先后顺序一致,则顺序匹配结果为准确,例如,第二顺序序列为{“flag”,“identity”,“message”},第一顺序序列为{“flag”,“message”},则顺序匹配结果为准确,第二顺序序列为{“identity”,“message”,“flag”},第一顺序序列为{“flag”,“message”},则顺序匹配结果为错误。
S702:若顺序匹配结果为顺序相同,则基于查询字段对应的查询属性值和与查询字段相匹配的预期字段对应的预期属性值进行匹配处理。
具体地,在顺序匹配结果为顺序相同时,利用匹配算法依次按照第一顺序序列和第二顺序序列对查询字段对应的查询属性值和与查询字段相匹配的预期字段对应的预期属性值进行匹配处理,以判断匹配结果是否准确。例如,第二顺序序列为{“flag”,“identity”,“message”},第一顺序序列为{“flag”,“message”},则采用匹配算法首先对查询字段和预期字段的flag对应的属性值进行匹配,然后对查询字段和预期字段的message对应的属性值进行匹配。
S703:若所有查询属性值均与预期属性值相匹配,则获取匹配成功的匹配结果。
具体地,在查询属性值和预期属性值相匹配时,则匹配结果为匹配成功,将匹配成功的匹配结果生成匹配成功链接发送给客户端,实现对测试结果进行自动化验证,极大地简化了测试结果验证步骤。
S704:若存在至少一个查询属性值与预期属性值不相匹配,则获取匹配失败的匹配结果。
具体地,在查询属性值和预期属性值不相匹配时,则匹配结果为匹配失败,将匹配失败的匹配结果生成匹配失败链接发送给客户端,以便后续对测试结果进行检查,实现对测试结果进行自动化验证,加快对测试结果的验证速度。
本实施例所提供的大数据测试验证方法中,对第一顺序序列和第二顺序序列进行匹配,在顺序匹配结果为错误,可以确定匹配结果为错误,提高验证效率,在顺序匹配结果为顺序相同,则基于查询字段对应的查询属性值和与查询字段相匹配的预期字段对应的预期属性值进行匹配处理,以判断匹配结果是否准确;若所有查询属性值均与预期属性值相匹配,则获取匹配成功的匹配结果,若存在至少一个查询属性值与预期属性值不相匹配,则获取匹配失败的匹配结果,以实现对测试结果进行自动化验证,加快对测试结果的验证速度。
在一实施例中,如图8所示,在步骤S206之后,即在按照测试需求表中的匹配方式,对查询结果和测试需求表中的预期结果进行匹配,获取匹配结果之后,大数据测试验证方法还包括:
S801:若匹配结果为匹配成功,则发送测试成功通知信息给对应的客户端。
具体地,若匹配结果为匹配成功,则发送测试成功通知信息给对应的客户端,使得开发人员在客户端可以及时获知测试情况。其中,测试成功通知信息指用于通知开发人员,说明目标表中的数据测试成功的信息。
S802:若匹配结果为匹配失败,则生成查询链接,并基于查询链接生成测试失败通知信息,发送给对应的客户端。
具体地,若匹配结果为匹配失败,则生成查询链接。其中,查询链接指根据匹配失败的查询信息所在的位置生成的链接。在生成查询链接后,服务器基于查询链接生成测试失败通知信息,发送给对应的客户端,使得开发人员根据查询链接快速确定匹配失败的查询信息的位置。其中,测试失败通知信息指用于通知开发人员,说明目标表中的数据测试失败且包含查询链接的信息,以便开发人员根据查询链接快速定位匹配失败的查询信息。
本实施例所提供的大数据测试验证方法,若匹配结果为匹配成功,则服务器发送测试成功通知信息给对应的客户端,使得开发人员在客户端能及时获知测试结果;若匹配结果为匹配失败,则生成查询链接,并基于查询链接生成测试失败通知信息发送给客户端,使得开发人员根据查询链接快速确定匹配失败的查询信息的位置。
应理解,上述实施例中各步骤的序号的大小并不意味着执行顺序的先后,各过程的执行顺序应以其功能和内在逻辑确定,而不应对本发明实施例的实施过程构成任何限定。
在一实施例中,提供一种大数据测试验证装置,该大数据测试验证装置与上述实施例中大数据测试验证方法一一对应。如图9所示,该大数据测试验证装置包括执行指令获取模块901、目标表获取模块902、接口调用结果获取模块903、查询字段获取模块904、查询结果获取模块905和匹配结果获取模块906。各功能模块详细说明如下:
执行指令获取模块901,用于获取客户端发送的执行指令,执行指令包括测试需求表,测试需求表包括测试接口和执行逻辑。
目标表获取模块902,用于基于测试接口,获取测试接口对应的目标表。
接口调用结果获取模块903,用于调用接口执行脚本,按照执行逻辑对每一测试接口进行调用判断,获取接口调用结果。
查询字段获取模块904,用于若接口调用结果为响应成功,则获取测试接口携带的查询字段。
查询结果获取模块905,用于基于测试接口中的查询字段,从目标表中获取与查询字段对应的查询结果。
匹配结果获取模块906,用于按照测试需求表中的匹配方式,对查询结果和测试需求表中的预期结果进行匹配,获取匹配结果。
优选地,接口调用结果获取模块903,包括:
接口列表获取单元,用于调用接口执行脚本读取测试需求表,获取接口列表,接口列表包括至少两个测试接口和执行逻辑。
接口调用结果获取单元,用于依据执行逻辑,依序对每一测试接口进行远程接口调用判断,获取接口调用结果。
优选地,测试接口包括数据库标识和表标识。目标表获取模块902,包括:目标数据库获取单元和目标数据库遍历单元。
目标数据库获取单元,用于基于数据库标识获取与数据库标识对应的目标数据库。
目标数据库遍历单元,用于基于表标识遍历目标数据库,从目标数据库中获取与表标识对应的目标表。
优选地,查询结果获取模块905,包括:查询信息获取单元和查询信息处理单元。
查询信息获取单元,用于基于测试接口中的查询字段,从目标表中获取与查询字段对应的查询信息。
查询信息处理单元,用于基于测试接口中的处理规则对查询信息进行处理,获取查询结果。
优选地,匹配结果获取模块906,包括:第一匹配单元和第二匹配单元。
第一匹配单元,用于当匹配方式为乱序匹配时,则对测试需求表中的预期结果和查询结果进行内容匹配,获取匹配结果。
第二匹配单元,用于若当匹配方式不为乱序匹配时,则对测试需求表中的预期结果和查询结果进行顺序和内容匹配,获取匹配结果。
优选地,查询结果包括至少一个查询字段和每一查询字段对应的查询属性值,至少一个查询字段对应一第一顺序序列;预期结果包括至少一个预期字段和预期字段对应的的预期属性值,至少一个预期字段对应一第二顺序序列;
第二匹配单元,包括:顺序匹配结果获取子单元、属性值匹配处理子单元、匹配成功子单元和匹配失败子单元。
顺序匹配结果获取子单元,用于对第一顺序序列和第二顺序序列进行匹配,获得顺序匹配结果;
属性值匹配处理子单元,用于若顺序匹配结果为顺序相同,则基于查询字段对应的查询属性值和与查询字段相匹配的预期字段对应的预期属性值进行匹配处理;
匹配成功子单元,用于若所有查询属性值均与预期属性值相匹配,则获取匹配成功的匹配结果;
匹配失败子单元,用于若存在至少一个查询属性值与预期属性值不相匹配,则获取匹配失败的匹配结果。
优选地,在匹配结果获取模块906之后,大数据测试验证装置还包括:匹配成功模块和匹配失败模块。
匹配成功模块,用于若匹配结果为匹配成功,则发送测试成功通知信息给对应的客户端。
匹配失败模块,用于若匹配结果为匹配失败,则生成查询链接,并基于查询链接生成测试失败通知信息,发送给对应的客户端。
关于大数据测试验证装置的具体限定可以参见上文中对于大数据测试验证方法的限定,在此不再赘述。上述大数据测试验证装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中,也可以以软件形式存储于计算机设备中的存储器中,以便于处理器调用执行以上各个模块对应的操作。
在一个实施例中,提供了一种计算机设备,该计算机设备可以是服务器,其内部结构图可以如图10所示。该计算机设备包括通过系统总线连接的处理器、存储器、网络接口和数据库。其中,该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统、计算机程序和数据库。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的数据库用于存储执行上述大数据测试验证方法中采用或者生成的数据,如目标表。该计算机设备的网络接口用于与外部的终端通过网络连接通信。该计算机程序被处理器执行时以实现一种大数据测试验证方法。
在一个实施例中,提供了一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,处理器执行计算机程序时实现上述实施例中大数据测试验证方法的步骤,例如图2所示的步骤S201-S206,或者图3至图8中所示的步骤,为避免重复,这里不再赘述。或者,处理器执行计算机程序时实现大数据测试验证装置这一实施例中的各模块/单元的功能,例如图9所示的执行指令获取模块901、目标表获取模块902、接口调用结果获取模块903、查询字段获取模块904、查询结果获取模块905和匹配结果获取模块906的功能,为避免重复,这里不再赘述。
在一实施例中,提供一计算机可读存储介质,该计算机可读存储介质上存储有计算机程序,该计算机程序被处理器执行时实现上述实施例中大数据测试验证方法的步骤,例如图2所示的步骤S201-S206,或者图3至图8中所示的步骤,为避免重复,这里不再赘述。或者,处理器执行计算机程序时实现大数据测试验证装置这一实施例中的各模块/单元的功能,例如图9所示的执行指令获取模块901、目标表获取模块902、接口调用结果获取模块903、查询字段获取模块904、查询结果获取模块905和匹配结果获取模块906的功能,为避免重复,这里不再赘述。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的计算机程序可存储于一非易失性计算机可读取存储介质中,该计算机程序在执行时,可包括如上述各方法的实施例的流程。其中,本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用,均可包括非易失性和/或易失性存储器。非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM)或者外部高速缓冲存储器。作为说明而非局限,RAM以多种形式可得,诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDRSDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink)DRAM(SLDRAM)、存储器总线(Rambus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)等。
所属领域的技术人员可以清楚地了解到,为了描述的方便和简洁,仅以上述各功能单元、模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能单元、模块完成,即将所述装置的内部结构划分成不同的功能单元或模块,以完成以上描述的全部或者部分功能。
以上所述实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围,均应包含在本发明的保护范围之内。
Claims (10)
1.一种大数据测试验证方法,其特征在于,包括:
获取客户端发送的执行指令,所述执行指令包括测试需求表,所述测试需求表包括测试接口和执行逻辑;
基于所述测试接口,获取所述测试接口对应的目标表;
调用接口执行脚本,按照所述执行逻辑对每一测试接口进行调用判断,获取接口调用结果;
若所述接口调用结果为响应成功,则获取所述测试接口携带的查询字段;
基于所述测试接口中的查询字段,从所述目标表中获取与所述查询字段对应的查询结果;
按照所述测试需求表中的匹配方式,对所述查询结果和所述测试需求表中的预期结果进行匹配,获取匹配结果。
2.如权利要求1所述的大数据测试验证方法,其特征在于,所述调用接口执行脚本,按照所述执行逻辑对每一测试接口进行调用判断,获取接口调用结果,包括:
调用接口执行脚本读取所述测试需求表,获取接口列表,所述接口列表包括至少两个所述测试接口和执行逻辑;
依据所述执行逻辑,依序对每一所述测试接口进行远程接口调用判断,获取接口调用结果。
3.如权利要求1所述的大数据测试验证方法,其特征在于,所述测试接口包括数据库标识和表标识;
所述基于所述测试接口,获取所述测试接口对应的目标表,包括:
基于所述数据库标识获取与所述数据库标识对应的目标数据库;
基于所述表标识遍历所述目标数据库,从所述目标数据库中获取与所述表标识对应的目标表。
4.如权利要求1所述的大数据测试验证方法,其特征在于,所述基于所述测试接口中的查询字段,从所述目标表中获取与所述查询字段对应的查询结果,包括:
基于所述测试接口中的查询字段,从所述目标表中获取与所述查询字段对应的查询信息;
基于所述测试接口中的处理规则对所述查询信息进行处理,获取查询结果。
5.如权利要求1所述的大数据测试验证方法,其特征在于,所述按照所述测试需求表中的匹配方式,对所述查询结果和所述测试需求表中的预期结果进行匹配,获取匹配结果,包括:
当所述匹配方式为乱序匹配时,则对所述测试需求表中的预期结果和所述查询结果进行内容匹配,获取匹配结果;
若当所述匹配方式不为乱序匹配时,则对所述测试需求表中的预期结果和所述查询结果进行顺序和内容匹配,获取匹配结果。
6.如权利要求5所述的大数据测试验证方法,其特征在于,所述查询结果包括至少一个查询字段和每一所述查询字段对应的查询属性值,至少一个所述查询字段对应一第一顺序序列;所述预期结果包括至少一个预期字段和所述预期字段对应的的预期属性值,至少一个所述预期字段对应一第二顺序序列;
所述若当所述匹配方式不为乱序匹配时,则对所述测试需求表中的预期结果和所述查询结果进行顺序和内容匹配,获取匹配结果,包括:
对所述第一顺序序列和所述第二顺序序列进行匹配,获得顺序匹配结果;
若所述顺序匹配结果为顺序相同,则基于所述查询字段对应的查询属性值和与所述查询字段相匹配的所述预期字段对应的预期属性值进行匹配处理;
若所有所述查询属性值均与所述预期属性值相匹配,则获取匹配成功的匹配结果;
若存在至少一个所述查询属性值与所述预期属性值不相匹配,则获取匹配失败的匹配结果。
7.如权利要求1所述的大数据测试验证方法,其特征在于,在所述按照所述测试需求表中的匹配方式,对所述查询结果和所述测试需求表中的预期结果进行匹配,获取匹配结果之后,所述大数据测试验证方法还包括:
若所述匹配结果为匹配成功,则发送测试成功通知信息给对应的客户端;
若所述匹配结果为匹配失败,则生成查询链接,并基于所述查询链接生成测试失败通知信息,发送给对应的客户端。
8.一种大数据测试验证装置,其特征在于,包括:
执行指令获取模块,用于获取客户端发送的执行指令,所述执行指令包括测试需求表,所述测试需求表包括测试接口和执行逻辑;
目标表获取模块,用于基于所述测试接口,获取所述测试接口对应的目标表;
接口调用结果获取模块,用于调用接口执行脚本,按照所述执行逻辑对每一测试接口进行调用判断,获取接口调用结果;
查询字段获取模块,用于若所述接口调用结果为响应成功,则获取所述测试接口携带的查询字段;
查询结果获取模块,用于基于所述测试接口中的查询字段,从所述目标表中获取与所述查询字段对应的查询结果;
匹配结果获取模块,用于按照所述测试需求表中的匹配方式,对所述查询结果和所述测试需求表中的预期结果进行匹配,获取匹配结果。
9.一种计算机设备,包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现如权利要求1至7任一项所述大数据测试验证方法的步骤。
10.一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1至7任一项所述大数据测试验证方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910842164.1A CN110781070A (zh) | 2019-09-06 | 2019-09-06 | 大数据测试验证方法、装置、计算机设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910842164.1A CN110781070A (zh) | 2019-09-06 | 2019-09-06 | 大数据测试验证方法、装置、计算机设备及存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN110781070A true CN110781070A (zh) | 2020-02-11 |
Family
ID=69384055
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910842164.1A Pending CN110781070A (zh) | 2019-09-06 | 2019-09-06 | 大数据测试验证方法、装置、计算机设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN110781070A (zh) |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111488273A (zh) * | 2020-03-18 | 2020-08-04 | Oppo(重庆)智能科技有限公司 | 测试验证方法、测试验证装置、存储介质与电子设备 |
CN111813653A (zh) * | 2020-05-28 | 2020-10-23 | 杭州览众数据科技有限公司 | 一种字段内容相关的数据异常测试方法及自动化测试工具 |
CN112765146A (zh) * | 2021-01-26 | 2021-05-07 | 四川新网银行股份有限公司 | 一种用户画像标签数据质量的监控方法 |
CN112949231A (zh) * | 2021-02-26 | 2021-06-11 | 浪潮电子信息产业股份有限公司 | 一种基于uvm验证平台的模块验证系统、方法及设备 |
CN112948195A (zh) * | 2021-03-31 | 2021-06-11 | 建信金融科技有限责任公司 | 接口测试的方法、装置、电子设备和存储介质 |
CN113923134A (zh) * | 2021-10-08 | 2022-01-11 | 广州博冠信息科技有限公司 | 一种接口测试方法和装置 |
CN114116866A (zh) * | 2021-11-22 | 2022-03-01 | 广州新科佳都科技有限公司 | 一种数据获取方法、装置、终端设备及存储介质 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103049379A (zh) * | 2012-12-19 | 2013-04-17 | 中国铁道科学研究院 | 一种系统测试的方法 |
US20140359581A1 (en) * | 2013-05-29 | 2014-12-04 | Sap Ag | Database code testing framework |
CN105373469A (zh) * | 2014-08-25 | 2016-03-02 | 广东金赋信息科技有限公司 | 一种基于接口的软件自动化测试方法 |
CN108804548A (zh) * | 2018-05-21 | 2018-11-13 | 上海陆家嘴国际金融资产交易市场股份有限公司 | 测试数据查询方法、装置、计算机设备和存储介质 |
CN109446071A (zh) * | 2018-09-26 | 2019-03-08 | 深圳壹账通智能科技有限公司 | 接口测试方法、接口测试装置、电子设备及存储介质 |
CN109634846A (zh) * | 2018-11-16 | 2019-04-16 | 武汉达梦数据库有限公司 | 一种etl软件测试方法和装置 |
CN110096434A (zh) * | 2019-03-28 | 2019-08-06 | 咪咕文化科技有限公司 | 一种接口测试方法及装置 |
-
2019
- 2019-09-06 CN CN201910842164.1A patent/CN110781070A/zh active Pending
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103049379A (zh) * | 2012-12-19 | 2013-04-17 | 中国铁道科学研究院 | 一种系统测试的方法 |
US20140359581A1 (en) * | 2013-05-29 | 2014-12-04 | Sap Ag | Database code testing framework |
CN105373469A (zh) * | 2014-08-25 | 2016-03-02 | 广东金赋信息科技有限公司 | 一种基于接口的软件自动化测试方法 |
CN108804548A (zh) * | 2018-05-21 | 2018-11-13 | 上海陆家嘴国际金融资产交易市场股份有限公司 | 测试数据查询方法、装置、计算机设备和存储介质 |
CN109446071A (zh) * | 2018-09-26 | 2019-03-08 | 深圳壹账通智能科技有限公司 | 接口测试方法、接口测试装置、电子设备及存储介质 |
CN109634846A (zh) * | 2018-11-16 | 2019-04-16 | 武汉达梦数据库有限公司 | 一种etl软件测试方法和装置 |
CN110096434A (zh) * | 2019-03-28 | 2019-08-06 | 咪咕文化科技有限公司 | 一种接口测试方法及装置 |
Cited By (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111488273A (zh) * | 2020-03-18 | 2020-08-04 | Oppo(重庆)智能科技有限公司 | 测试验证方法、测试验证装置、存储介质与电子设备 |
CN111813653A (zh) * | 2020-05-28 | 2020-10-23 | 杭州览众数据科技有限公司 | 一种字段内容相关的数据异常测试方法及自动化测试工具 |
CN111813653B (zh) * | 2020-05-28 | 2023-07-04 | 杭州览众数据科技有限公司 | 一种字段内容相关的数据异常测试方法及自动化测试工具 |
CN112765146A (zh) * | 2021-01-26 | 2021-05-07 | 四川新网银行股份有限公司 | 一种用户画像标签数据质量的监控方法 |
CN112765146B (zh) * | 2021-01-26 | 2022-10-21 | 四川新网银行股份有限公司 | 一种用户画像标签数据质量的监控方法 |
CN112949231A (zh) * | 2021-02-26 | 2021-06-11 | 浪潮电子信息产业股份有限公司 | 一种基于uvm验证平台的模块验证系统、方法及设备 |
CN112949231B (zh) * | 2021-02-26 | 2023-01-24 | 浪潮电子信息产业股份有限公司 | 一种基于uvm验证平台的模块验证系统、方法及设备 |
CN112948195A (zh) * | 2021-03-31 | 2021-06-11 | 建信金融科技有限责任公司 | 接口测试的方法、装置、电子设备和存储介质 |
CN113923134A (zh) * | 2021-10-08 | 2022-01-11 | 广州博冠信息科技有限公司 | 一种接口测试方法和装置 |
CN114116866A (zh) * | 2021-11-22 | 2022-03-01 | 广州新科佳都科技有限公司 | 一种数据获取方法、装置、终端设备及存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110781070A (zh) | 大数据测试验证方法、装置、计算机设备及存储介质 | |
CN109474578B (zh) | 报文消息校验方法、装置、计算机设备和存储介质 | |
CN108255730B (zh) | 软件接口测试方法、测试设备、存储介质及装置 | |
WO2021042914A1 (zh) | 测试数据生成方法、装置、计算机设备和存储介质 | |
CN107656874B (zh) | 一种接口测试方法、装置、模拟挡板及系统 | |
CN111191281A (zh) | 数据脱敏处理方法、装置、计算机设备及存储介质 | |
CN107241315B (zh) | 银行网关接口的接入方法、装置及计算机可读存储介质 | |
CN110908778B (zh) | 任务部署方法、系统和存储介质 | |
CN108400978B (zh) | 漏洞检测方法、装置、计算机设备和存储介质 | |
CN109726134B (zh) | 接口测试方法和系统 | |
CN109684873B (zh) | 数据访问控制方法、装置、计算机设备和存储介质 | |
CN111460356A (zh) | 一种自动登录方法、装置、介质和设备 | |
CN108966159B (zh) | 短信撤回方法、系统、计算机设备和存储介质 | |
CN105373417A (zh) | 一种云计算下虚拟机管理的方法及系统 | |
CN110750443A (zh) | 网页测试的方法、装置、计算机设备及存储介质 | |
CN112612706A (zh) | 自动化测试方法、计算机设备及存储介质 | |
CN108650123B (zh) | 故障信息记录方法、装置、设备和存储介质 | |
CN108345508B (zh) | 接口调用测试方法和装置 | |
CN114003432A (zh) | 参数校验方法、装置、计算机设备和存储介质 | |
CN112685311A (zh) | 测试脚本自动生成方法、装置、计算机设备及存储介质 | |
WO2019019955A1 (zh) | 手势测试方法、装置、计算机设备和存储介质 | |
CN105743725A (zh) | 一种测试应用程序的方法和装置 | |
CN112181822A (zh) | 一种测试方法和应用程序的启动耗时测试方法 | |
CN112446723A (zh) | 确定用户邀请关系的方法、计算机可读存储介质和设备 | |
CN111339170A (zh) | 数据处理方法、装置、计算机设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |