CN115543816A - 软件回归测试结果验证方法、装置、设备及存储介质 - Google Patents

软件回归测试结果验证方法、装置、设备及存储介质 Download PDF

Info

Publication number
CN115543816A
CN115543816A CN202211250425.9A CN202211250425A CN115543816A CN 115543816 A CN115543816 A CN 115543816A CN 202211250425 A CN202211250425 A CN 202211250425A CN 115543816 A CN115543816 A CN 115543816A
Authority
CN
China
Prior art keywords
test
test result
historical
data
regression
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202211250425.9A
Other languages
English (en)
Inventor
方海波
鲁阳
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhejiang Geely Holding Group Co Ltd
Zhejiang Zeekr Intelligent Technology Co Ltd
Original Assignee
Zhejiang Geely Holding Group Co Ltd
Zhejiang Zeekr Intelligent Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhejiang Geely Holding Group Co Ltd, Zhejiang Zeekr Intelligent Technology Co Ltd filed Critical Zhejiang Geely Holding Group Co Ltd
Priority to CN202211250425.9A priority Critical patent/CN115543816A/zh
Publication of CN115543816A publication Critical patent/CN115543816A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/36Preventing errors by testing or debugging software
    • G06F11/3668Software testing
    • G06F11/3672Test management
    • G06F11/3692Test management for test results analysis
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/36Preventing errors by testing or debugging software
    • G06F11/3668Software testing
    • G06F11/3672Test management
    • G06F11/3688Test management for test execution, e.g. scheduling of test suites

Abstract

本发明涉及软件开发技术领域,公开了一种软件回归测试结果验证方法、装置、设备及存储介质,该方法包括:获取对目标软件进行回归测试的当前测试结果数据;将当前测试结果数据与目标软件的历史测试结果数据进行对比;根据对比结果确定目标软件回归测试结果的验证结果。本发明通过当前测试结果数据与历史测试结果数据的对比结果确定目标软件回归测试的验证结果,不需要人工添加回归测试的期望结果,实现了对回归测试结果的全面验证,在提高验证效率的同时提高了验证准确度。

Description

软件回归测试结果验证方法、装置、设备及存储介质
技术领域
本发明涉及软件开发技术领域,尤其涉及一种软件回归测试结果验证方法、装置、设备及存储介质。
背景技术
在软件版本迭代的过程中,为了保证软件迭代前后功能的一致性,会对软件进行回归测试,需要针对不同的业务流程编写不同的测试用例,并对生成的测试结果进行验证以判断软件的业务流程是否正确,目前一般通过人工添加期望结果对测试用例的测试结果进行验证,只会针对测试结果中某几个特定的字段进行验证,验证效率和准确度低。
上述内容仅用于辅助理解本发明的技术方案,并不代表承认上述内容是现有技术。
发明内容
本发明的主要目的在于提供了一种软件回归测试结果验证方法、装置、设备及存储介质,旨在解决现有技术对软件回归测试结果的验证效率和准确度低的技术问题。
为实现上述目的,本发明提供了一种软件回归测试结果验证方法,所述方法包括以下步骤:
获取对目标软件进行回归测试的当前测试结果数据;
将所述当前测试结果数据与所述目标软件的历史测试结果数据进行对比;
根据对比结果确定所述目标软件回归测试结果的验证结果。
可选地,所述获取对目标软件进行回归测试的当前测试结果数据,包括:
获取通过预设测试数据和预设测试用例对目标软件进行回归测试的初始测试结果数据;
获取所述测试用例的用例标识和所述测试用例中各测试步骤的步骤标识;
读取所述初始测试结果数据中的字段数据,并根据所述用例标识、所述步骤标识和所述字段数据确定所述初始测试结果数据中各当前测试值对应的测试标识信息;
根据所述当前测试值和对应的测试标识信息确定当前测试结果数据。
可选地,所述将所述当前测试结果数据与所述目标软件的历史测试结果数据进行对比,包括:
从所述当前测试结果数据中提取测试标识信息和所述测试标识信息对应的当前测试值;
根据所述测试标识信息从所述历史测试结果数据中提取历史测试值;
将所述当前测试值与所述历史测试值进行对比。
可选地,所述将所述当前测试值与所述历史测试值进行对比,包括:
确定所述当前测试值的所述历史测试值的数据类型,并判断所述数据类型是否为标准类型;
在所述数据类型为标准类型时,将所述当前测试值与所述历史测试值进行对比。
可选地,所述判断所述数据类型是否为标准类型之后,还包括:
在所述数据类型不为标准类型时,根据所述标准类型将所述当前测试值处理为当前标准测试值,根据所述标准类型将历史测试值处理为历史标准测试值;
将所述当前标准测试值与所述历史标准测试值进行对比。
可选地,所述获取对目标软件进行回归测试的当前测试结果数据之前,还包括:
获取通过预设测试数据和预设测试用例对目标软件进行回归测试的若干历史初始测试结果数据;
根据各历史初始测试结果数据中的测试标识信息将各历史初始测试结果数据中对应的历史初始测试值进行对比;
根据对比结果将各历史初始测试结果数据中的噪声结果数据过滤,并整合过滤后的各历史初始测试结果数据获得历史测试结果数据。
可选地,所述根据对比结果确定所述目标软件回归测试结果的验证结果,包括:
在对比结果符合预设验证逻辑时,确定所述目标软件回归测试结果的验证结果为验证通过;以及
在对比结果不符合预设验证逻辑时,确定所述验证结果为验证不通过,并将当前测试值标定为待复核值。
此外,为实现上述目的,本发明还提出一种软件回归测试结果验证装置,所述装置包括:
获取模块,用于获取对目标软件进行回归测试的当前测试结果数据;
对比模块,用于将所述当前测试结果数据与所述目标软件的历史测试结果数据进行对比;
确定模块,用于根据对比结果确定所述目标软件回归测试结果的验证结果。
此外,为实现上述目的,本发明还提出一种软件回归测试结果验证设备,所述设备包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的软件回归测试结果验证程序,所述软件回归测试结果验证程序配置为实现如上文所述的软件回归测试结果验证方法的步骤。
此外,为实现上述目的,本发明还提出一种存储介质,所述存储介质上存储有软件回归测试结果验证程序,所述软件回归测试结果验证程序被处理器执行时实现如上文所述的软件回归测试结果验证方法的步骤。
本发明获取对目标软件进行回归测试的当前测试结果数据;将所述当前测试结果数据与所述目标软件的历史测试结果数据进行对比;根据对比结果确定所述目标软件回归测试结果的验证结果。本发明通过当前测试结果数据与历史测试结果数据的对比结果确定目标软件回归测试的验证结果,不需要人工添加回归测试的期望结果,实现了对回归测试结果的全面验证,在提高验证效率的同时提高了验证准确度。
附图说明
图1是本发明实施例方案涉及的硬件运行环境的软件回归测试结果验证设备的结构示意图;
图2为本发明软件回归测试结果验证方法第一实施例的流程示意图;
图3为本发明软件回归测试结果验证方法第二实施例的流程示意图;
图4为本发明软件回归测试结果验证方法第三实施例的流程示意图;
图5为本发明软件回归测试结果验证装置第一实施例的结构框图。
本发明目的的实现、功能特点及优点将结合实施例,参照附图做进一步说明。
具体实施方式
应当理解,此处所描述的具体实施例仅用以解释本发明,并不用于限定本发明。
参照图1,图1为本发明实施例方案涉及的硬件运行环境的软件回归测试结果验证设备结构示意图。
如图1所示,该软件回归测试结果验证设备可以包括:处理器1001,例如中央处理器(Central Processing Unit,CPU),通信总线1002、用户接口1003,网络接口1004,存储器1005。其中,通信总线1002用于实现这些组件之间的连接通信。用户接口1003可以包括显示屏(Display)、输入单元比如键盘(Keyboard),可选用户接口1003还可以包括标准的有线接口、无线接口。网络接口1004可选的可以包括标准的有线接口、无线接口(如无线保真(Wireless-Fidelity,WI-FI)接口)。存储器1005可以是高速的随机存取存储器(RandomAccess Memory,RAM),也可以是稳定的非易失性存储器(Non-Volatile Memory,NVM),例如磁盘存储器。存储器1005可选的还可以是独立于前述处理器1001的存储装置。
本领域技术人员可以理解,图1中示出的结构并不构成对软件回归测试结果验证设备的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
如图1所示,作为一种存储介质的存储器1005中可以包括操作系统、网络通信模块、用户接口模块以及软件回归测试结果验证程序。
在图1所示的软件回归测试结果验证设备中,网络接口1004主要用于与网络服务器进行数据通信;用户接口1003主要用于与用户进行数据交互;本发明软件回归测试结果验证设备中的处理器1001、存储器1005可以设置在软件回归测试结果验证设备中,所述软件回归测试结果验证设备通过处理器1001调用存储器1005中存储的软件回归测试结果验证程序,并执行本发明实施例提供的软件回归测试结果验证方法。
在软件开发的过程中,使用测试用例对软件进行回归测试是一种非常有效且快速的测试方式,但是在编写测试用例的时候,还需要对测试结果进行验证来判断软件中的业务流程是否正确,测试人员会在测试用例中手动增加期望结果来对测试结果进行验证,但是一般只会针对测试结果中某几个特定的字段来添加期望值,无法对测试结果进行全面验证,导致存在字段无法验证的问题,而且手动添加期望值验证需要耗费大量的人工成本,导致测试结果的验证效率低。
基于此,本发明实施例提供了一种软件回归测试结果验证方法,参照图2,图2为本发明软件回归测试结果验证方法第一实施例的流程示意图。
本实施例中,所述软件回归测试结果验证方法包括以下步骤:
步骤S10:获取对目标软件进行回归测试的当前测试结果数据。
需要说明的是,本实施例的执行主体可以是一种具有数据处理、网络通信以及程序运行功能的计算服务设备,例如平板电脑、个人电脑、手机等,或者是一种能够实现上述功能的电子设备、软件回归测试结果验证设备等。以下以软件回归测试结果验证设备(简称验证设备)为例,对本实施例及下述各实施例进行举例说明。
可以理解的是,目标软件可以是需要对回归测试结果进行验证的软件;回归测试可以是修改了目标软件中的旧代码后,重新对目标软件进行测试以确认修改没有引入新的错误或导致其他代码产生错误的测试;当前测试结果数据可以是通过测试用例对目标软件的当前软件版本中对应的业务流程进行测试获得的测试结果的集合;当前测试结果数据包括通过测试用例对相应的业务流程进行回归测试后返回的测试值;目标软件中不同的业务流程对应不同的测试用例;当前测试结果数据对应目标软件可以是待验证的最新版本的目标软件,也可以是旧版本的目标软件,本实施例在此不做限制。
步骤S20:将所述当前测试结果数据与所述目标软件的历史测试结果数据进行对比。
可以理解的是,历史测试结果数据可以是通过测试用例对目标软件的历史软件版本中对应的业务流程进行测试获得的测试结果的集合;将当前测试结果数据与所述目标软件的历史测试结果数据进行对比可以是获取当前测试结果数据中对业务流程进行回归测试返回的当前测试值,根据业务流程从历史测试结果数据中读取对应的历史测试值,将当前测试值与历史测试值进行对比。
步骤S30:根据对比结果确定所述目标软件回归测试结果的验证结果。
可以理解的是,根据对比结果确定所述目标软件回归测试结果的验证结果可以是根据对比结果确定当前测试结果数据与历史测试结果数据之间的相同数据和差异数据,根据相同数据和差异数据确定目标软件回归测试结果的验证结果;目标软件中某些业务流程返回的结果与历史软件版本中该业务流程返回的结果相同或符合预设关系,因此可通过对比结果确定该业务流程的验证结果,在所有业务流程验证完成后,即获得目标软件回归测试的验证结果。
在具体实现中,例如目标软件的最新版本为A4.0,历史版本为A1.0、A2.0和A3.0,通过不同的测试用例对A4.0中对应的业务流程进行测试,获取各业务流程返回的测试值获得当前测试结果数据,并获取对A2.0和A3.0中业务流程进行测试获得的历史测试结果数据,将当前测试结果数据中的测试值与历史测试结果数据中对应的测试值进行对比,根据对比结果确定当前测试结果数据与历史测试结果数据之间的相同数据和差异数据,根据相同数据和差异数据确定目标软件回归测试的测试结果。
进一步地,为了提高软件回归测试结果的验证效率,所述步骤S10,包括:获取通过预设测试数据和预设测试用例对目标软件进行回归测试的初始测试结果数据;获取所述测试用例的用例标识和所述测试用例中各测试步骤的步骤标识;读取所述初始测试结果数据中的字段数据,并根据所述用例标识、所述步骤标识和所述字段数据确定所述初始测试结果数据中各当前测试值对应的测试标识信息;根据所述当前测试值和对应的测试标识信息确定当前测试结果数据。
可以理解的是,预设测试数据可以是预先确定的对目标软件进行测试的数据;预设测试用例可以是预先设定对目标软件中各业务流程进行回归测试的测试用例;初始测试结果数据可以是通过预设测试数据对目标软件进行测试的过程中测试用例返回的测试结果的集合;用例标识可以是能够唯一表示测试用例的标识,例如用例标识包括测试用例的编号、测试用例的身份识别号、测试用例Id或其他能够唯一表示测试用例的标识符号;步骤标识可以是能够唯一表示测试用例中各测试步骤的标识,例如步骤标识包括步骤编号、步骤身份识别号、步骤id或其他能够唯一表示测试用例中测试步骤的标识符号;字段数据可以是初始测试结果数据中的字段的集合,每个字段有对应的当前测试值;测试标识信息包括用例标识、步骤标识和字段,测试标识信息可以用来标识当前测试值;根据所述当前测试值和对应的测试标识信息确定当前测试结果数据可以是将当前测试值与对应的测试标识信息对应存储获得当前测试结果数据。
在具体实施中,例如测试用例的测试标识为C001,测试用例中某一测试步骤的步骤标识为B005,执行测试用例C001,在执行C001的过程中保存测试用例中每一个测试步骤返回的测试结果,假设在执行到测试步骤B005时,返回的测试结果为:字段:address、测试值:1,则根据用例标识、步骤标识和字段确定的测试标识信息可以是C001B005address,将C001B005address与测试值1对应存储,获得的测试结果为C001B005address-1,所有测试步骤返回的测试结果组成当前测试结果数据;测试标识信息和测试结果的还可以用其他形式的数据表示,本实施例在此不作限制。
进一步地,为了提高目标软件回归测试结果的验证效率,所述步骤S30,包括:在对比结果符合预设验证逻辑时,确定所述目标软件回归测试结果的验证结果为验证通过;以及在对比结果不符合预设验证逻辑时,确定所述验证结果为验证不通过,并将当前测试值标定为待复核值。
可以理解的是,预设验证逻辑可以是预先设定的当前测试结果数据与历史测试结果之间需要符合的逻辑,例如预设验证逻辑为当前测试结果数据中特定的测试值大于历史测试结果数据中对应的测试值、当前测试结果数据中特定的测试值小于历史测试结果数据中对应的测试值、当前测试结果数据中特定的测试值等于历史测试结果数据中对应的测试值或其他验证逻辑,可根据具体场景设定,本实施例在此不作限制;待复核值可以是需要重新校验是否符合预设验证逻辑的值。
本实施例获取对目标软件进行回归测试的当前测试结果数据;将所述当前测试结果数据与所述目标软件的历史测试结果数据进行对比;根据对比结果确定所述目标软件回归测试结果的验证结果。本实施例通过当前测试结果数据与历史测试结果数据的对比结果确定目标软件回归测试的验证结果,不需要人工添加回归测试的期望结果,实现了对回归测试结果的全面验证,在提高验证效率的同时提高了验证准确度。
参考图3,图3为本发明软件回归测试结果验证方法第二实施例的流程示意图。
基于上述第一实施例,在本实施例中,所述步骤S20包括:
步骤S201:从所述当前测试结果数据中提取测试标识信息和所述测试标识信息对应的当前测试值。
可以理解的是,当前测试结果数据中测试标识信息与当前测试值对应存储。
步骤S202:根据所述测试标识信息从所述历史测试结果数据中提取历史测试值。
可以理解的是,历史测试结果数据中测试标识信息与历史测试值对应存储。
步骤S203:将所述当前测试值与所述历史测试值进行对比。
在具体实施中,验证设备从当前测试结果数据中提取测试标识信息和对应的当前测试值,根据测试标识信息从历史测试结果数据中提取历史测试值,将当前测试值与历史测试进行对比。
进一步地,为了提高验证效率,所述步骤S303,包括:确定所述当前测试值的所述历史测试值的数据类型,并判断所述数据类型是否为标准类型;在所述数据类型为标准类型时,将所述当前测试值与所述历史测试值进行对比。
可以理解的是,标准类型可以是预先设定的用于进行数据对比的数据类型,例如标准类型为数字、字符串或经过格式化提取获得的格式为[key,value]的类型等;在数据类型为标准类型时,直接将当前测试值与历史测试值进行对比。
进一步地,为了提高验证效率,所述判断所述数据类型是否为标准类型之后,还包括:在所述数据类型不为标准类型时,根据所述标准类型将所述当前测试值处理为当前标准测试值,根据所述标准类型将历史测试值处理为历史标准测试值;将所述当前标准测试值与所述历史标准测试值进行对比。
可以理解的是,数据类型还可以是列表数据、json对象数据等。
在具体实施中,例如:遍历当前测试结果数据中的测试结果,并从遍历到的测试结果中读取测试标识信息和测试标识信息对应的当前测试值,根据测试标识信息从历史测试结果数据中读取对应的历史测试值,确定当前测试值和历史测试值的数据类型,假设数据类型为数字、字符串等标准类型时,直接将当前测试值与历史测试值对比;假设数据类型为json对象,则将json对象格式化提取[key,value]列表,列表中value对应的值即为当前标准测试值和历史标准测试值,将当前标准测试值与历史标准测试值进行对比;假设数据类型为列表数据,如果列表内为数字或字符串,则直接将当前测试值与历史测试值对比;如果列表内为json对象,则按照上述方式json对象格式化提取[key,value]列表,将提取后的当前标准测试值与历史标准测试值进行对比。
本实施例从所述当前测试结果数据中提取测试标识信息和所述测试标识信息对应的当前测试值;根据所述测试标识信息从所述历史测试结果数据中提取历史测试值;将所述当前测试值与所述历史测试值进行对比。本实施例根据测试标识信息将当前测试值与历史测试值进行对比,实现了对回归测试结果的全面验证,提高了目标软件回归测试结果的验证准确度。
参考图4,图4为本发明软件回归测试结果验证方法第三实施例的流程示意图。
基于上述各实施例,在本实施例中,所述步骤S10之前,所述方法还包括:
步骤S01:获取通过预设测试数据和预设测试用例对目标软件进行回归测试的若干历史初始测试结果数据。
可以理解的是,若干历史初始测试结果数据可以是对目标软件的若干个历史版本进行回归测试获得的初始测试结果数据;例如目标软件的历史版本有V2.0和V3.0,则若干历史初始测试结果数据包括对V2.0版本的目标软件进行回归测试获得的初始测试数据和对V3.0版本的目标软件进行回归测试获得的初始测试数据。
步骤S02:根据各历史初始测试结果数据中的测试标识信息将各历史初始测试结果数据中对应的历史初始测试值进行对比;
步骤S03:根据对比结果将各历史初始测试结果数据中的噪声结果数据过滤,并整合过滤后的各历史初始测试结果数据获得历史测试结果数据。
可以理解的是,噪声结果数据可以是不断发生变化的数据,例如噪声结果数据可以是时间戳、自增加id、随时数等类型的数据;在本实施例中对目标软件进行回归测试的目的是为了确保软件版本更新后,某些特定业务流程的功能不变,即进行回归测试时返回的测试值不变,因此需要将变化的噪声结果数据过滤。
在具体实现中,获取对各历史版本的目标软件进行回归测试的历史初始测试结果数据,根据测试标识信息将各历史初始测试结果数据中对应的历史测试值进行对比,在对比结果为对应的历史测试值不一致时(例如历史测试值时间戳字段、自增加id字段、随时数字段),判定其为噪声结果数据,将其过滤;将噪声结果数据过滤后,从若干数据中选取一个作为历史测试结果数据。
在具体实施中,例如根据目标软件的业务功能,针对不同的业务流程设置对应的测试用例,执行测试用例,在执行测试用例的过程中,保存测试用例中每一个测试步骤返回的测试值,根据测试用例id、步骤id和字段确定测试标识信息,将测试标识信息和测试值对应存储至数据库,更新软件版本,重新执行测试用例,保存测试用例中每一个测试步骤返回的测试值,并将测试标识信息与测试值对应存储至数据库,获得各历史版本对应的历史初始测试结果数据,通过分析相同测试用例id,相同测试步骤id和相同字段下的测试值,将噪声结果数据过滤,将过滤后的距离当前时刻最近的软件版本对应的数据确定后历史测试结果数据;通过上述测试用例对待测试版本的目标软件进行回归测试,获得当前测试结果数据,根据测试标识信息将当前测试值与历史测试值进行对比,判断当前测试值和历史测试值是否为数字、字符串等标准类型的数据,若是,则将当前测试值与历史测试值进行对比,判断当前测试值与历史测试值是否相等,若是,则将对比结果添加至自动结果比对列表,若否,则将对比结果添加至人工结果比对列表;若数据类型不为数据、字符串等标准类型的数据,则判定是否为json对象的数据,若是,则对其进行格式化处理,获得[key,value]列表,继续进行后续的对比;若不是json对象的数据,则判断其是否为列表数据,若是且列表内为数字或字符串等类型的数据,则将当前测试值与历史测试值对比,若为json对象的数据,则对其进行格式化处理,获得[key,value]列表继续进行后续的对比,即在本实施例中最终对比的是数字、字符串等标准类型的数据,若数据类型为其他类型,需要先转换为标准类型的数据再进行对比,以提高验证准确度。
本实施例获取通过预设测试数据和预设测试用例对目标软件进行回归测试的若干历史初始测试结果数据;根据各历史初始测试结果数据中的测试标识信息将各历史初始测试结果数据中对应的历史初始测试值进行对比;根据对比结果将各历史初始测试结果数据中的噪声结果数据过滤,并整合过滤后的各历史初始测试结果数据获得历史测试结果数据。本实施例根据若干历史初始测试结果数据中对应历史初始测试值的对比结果将噪声结果数据过滤,整合过滤后的各历史测试结果数据获得历史测试结果数据,能够将噪声数据过滤,降低了需要对比的数据量,提高了回归测试结果的验证效率。
此外,本发明实施例还提出一种存储介质,所述存储介质上存储有软件回归测试结果验证程序,所述软件回归测试结果验证程序被处理器执行时实现如上文所述的软件回归测试结果验证方法的步骤。
参照图5,图5为本发明软件回归测试结果验证装置第一实施例的结构框图。
如图5所示,本发明实施例提出的软件回归测试结果验证装置包括:
获取模块10,获取对目标软件进行回归测试的当前测试结果数据;
对比模块20,将所述当前测试结果数据与所述目标软件的历史测试结果数据进行对比;
确定模块30,根据对比结果确定所述目标软件回归测试结果的验证结果。
本实施例获取对目标软件进行回归测试的当前测试结果数据;将所述当前测试结果数据与所述目标软件的历史测试结果数据进行对比;根据对比结果确定所述目标软件回归测试结果的验证结果。本实施例通过当前测试结果数据与历史测试结果数据的对比结果确定目标软件回归测试的验证结果,不需要人工添加回归测试的期望结果,实现了对回归测试结果的全面验证,在提高验证效率的同时提高了验证准确度。
基于本发明上述软件回归测试结果验证装置第一实施例,提出本发明软件回归测试结果验证装置的第二实施例。
在本实施例中,所述获取模块10,还用于获取通过预设测试数据和预设测试用例对目标软件进行回归测试的初始测试结果数据;获取所述测试用例的用例标识和所述测试用例中各测试步骤的步骤标识;读取所述初始测试结果数据中的字段数据,并根据所述用例标识、所述步骤标识和所述字段数据确定所述初始测试结果数据中各当前测试值对应的测试标识信息;根据所述当前测试值和对应的测试标识信息确定当前测试结果数据。
所述对比模块20,还用于从所述当前测试结果数据中提取测试标识信息和所述测试标识信息对应的当前测试值;根据所述测试标识信息从所述历史测试结果数据中提取历史测试值;将所述当前测试值与所述历史测试值进行对比。
所述对比模块20,还用于确定所述当前测试值的所述历史测试值的数据类型,并判断所述数据类型是否为标准类型;在所述数据类型为标准类型时,将所述当前测试值与所述历史测试值进行对比。
所述对比模块20,还用于在所述数据类型不为标准类型时,根据所述标准类型将所述当前测试值处理为当前标准测试值,根据所述标准类型将历史测试值处理为历史标准测试值;将所述当前标准测试值与所述历史标准测试值进行对比。
所述获取模块10,还用于获取通过预设测试数据和预设测试用例对目标软件进行回归测试的若干历史初始测试结果数据;根据各历史初始测试结果数据中的测试标识信息将各历史初始测试结果数据中对应的历史初始测试值进行对比;根据对比结果将各历史初始测试结果数据中的噪声结果数据过滤,并整合过滤后的各历史初始测试结果数据获得历史测试结果数据。
所述确定模块30,还用于在对比结果符合预设验证逻辑时,确定所述目标软件回归测试结果的验证结果为验证通过;以及在对比结果不符合预设验证逻辑时,确定所述验证结果为验证不通过,并将当前测试值标定为待复核值。
本发明软件回归测试结果验证装置的其他实施例或具体实现方式可参照上述各方法实施例,此处不再赘述。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者系统不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者系统所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者系统中还存在另外的相同要素。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如只读存储器/随机存取存储器、磁碟、光盘)中,包括若干指令用以使得一台终端设备(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本发明各个实施例所述的方法。
以上仅为本发明的优选实施例,并非因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本发明的专利保护范围内。

Claims (10)

1.一种软件回归测试结果验证方法,其特征在于,所述方法包括:
获取对目标软件进行回归测试的当前测试结果数据;
将所述当前测试结果数据与所述目标软件的历史测试结果数据进行对比;
根据对比结果确定所述目标软件回归测试结果的验证结果。
2.如权利要求1所述的方法,其特征在于,所述获取对目标软件进行回归测试的当前测试结果数据,包括:
获取通过预设测试数据和预设测试用例对目标软件进行回归测试的初始测试结果数据;
获取所述测试用例的用例标识和所述测试用例中各测试步骤的步骤标识;
读取所述初始测试结果数据中的字段数据,并根据所述用例标识、所述步骤标识和所述字段数据确定所述初始测试结果数据中各当前测试值对应的测试标识信息;
根据所述当前测试值和对应的测试标识信息确定当前测试结果数据。
3.如权利要求1或2所述的方法,其特征在于,所述将所述当前测试结果数据与所述目标软件的历史测试结果数据进行对比,包括:
从所述当前测试结果数据中提取测试标识信息和所述测试标识信息对应的当前测试值;
根据所述测试标识信息从所述历史测试结果数据中提取历史测试值;
将所述当前测试值与所述历史测试值进行对比。
4.如权利要求3所述的方法,其特征在于,所述将所述当前测试值与所述历史测试值进行对比,包括:
确定所述当前测试值的所述历史测试值的数据类型,并判断所述数据类型是否为标准类型;
在所述数据类型为标准类型时,将所述当前测试值与所述历史测试值进行对比。
5.如权利要求4所述的方法,其特征在于,所述判断所述数据类型是否为标准类型之后,还包括:
在所述数据类型不为标准类型时,根据所述标准类型将所述当前测试值处理为当前标准测试值,根据所述标准类型将历史测试值处理为历史标准测试值;
将所述当前标准测试值与所述历史标准测试值进行对比。
6.如权利要求1或2所述的方法,其特征在于,所述获取对目标软件进行回归测试的当前测试结果数据之前,还包括:
获取通过预设测试数据和预设测试用例对目标软件进行回归测试的若干历史初始测试结果数据;
根据各历史初始测试结果数据中的测试标识信息将各历史初始测试结果数据中对应的历史初始测试值进行对比;
根据对比结果将各历史初始测试结果数据中的噪声结果数据过滤,并整合过滤后的各历史初始测试结果数据获得历史测试结果数据。
7.如权利要求1或2所述的方法,其特征在于,所述根据对比结果确定所述目标软件回归测试结果的验证结果,包括:
在对比结果符合预设验证逻辑时,确定所述目标软件回归测试结果的验证结果为验证通过;以及
在对比结果不符合预设验证逻辑时,确定所述验证结果为验证不通过,并将当前测试值标定为待复核值。
8.一种软件回归测试结果验证装置,其特征在于,所述装置包括:
获取模块,用于获取对目标软件进行回归测试的当前测试结果数据;
对比模块,用于将所述当前测试结果数据与所述目标软件的历史测试结果数据进行对比;
确定模块,用于根据对比结果确定所述目标软件回归测试结果的验证结果。
9.一种软件回归测试结果验证设备,其特征在于,所述设备包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的软件回归测试结果验证程序,所述软件回归测试结果验证程序配置为实现如权利要求1至7中任一项所述的软件回归测试结果验证方法的步骤。
10.一种存储介质,其特征在于,所述存储介质上存储有软件回归测试结果验证程序,所述软件回归测试结果验证程序被处理器执行时实现如权利要求1至7任一项所述的软件回归测试结果验证方法的步骤。
CN202211250425.9A 2022-10-09 2022-10-09 软件回归测试结果验证方法、装置、设备及存储介质 Pending CN115543816A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202211250425.9A CN115543816A (zh) 2022-10-09 2022-10-09 软件回归测试结果验证方法、装置、设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202211250425.9A CN115543816A (zh) 2022-10-09 2022-10-09 软件回归测试结果验证方法、装置、设备及存储介质

Publications (1)

Publication Number Publication Date
CN115543816A true CN115543816A (zh) 2022-12-30

Family

ID=84734091

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202211250425.9A Pending CN115543816A (zh) 2022-10-09 2022-10-09 软件回归测试结果验证方法、装置、设备及存储介质

Country Status (1)

Country Link
CN (1) CN115543816A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117009112A (zh) * 2023-08-31 2023-11-07 深圳市小赢信息技术有限责任公司 业务处理方法、装置、智能设备和存储介质

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117009112A (zh) * 2023-08-31 2023-11-07 深圳市小赢信息技术有限责任公司 业务处理方法、装置、智能设备和存储介质

Similar Documents

Publication Publication Date Title
CN108491321B (zh) 测试用例范围确定方法、装置及存储介质
CN112580047B (zh) 工业恶意代码标记方法、设备、存储介质及装置
CN115543816A (zh) 软件回归测试结果验证方法、装置、设备及存储介质
CN109543409B (zh) 用于检测恶意应用及训练检测模型的方法、装置及设备
CN114756466A (zh) 一种测试用例获取方法、装置及存储介质
CN112433935A (zh) 测试方法、装置、电子设备及存储介质
CN117493188A (zh) 接口测试方法及装置、电子设备及存储介质
CN109684205B (zh) 系统测试方法、装置、电子设备及存储介质
CN109542496B (zh) 增量代码确定方法、装置及系统
CN111651500A (zh) 用户身份识别方法、电子设备及存储介质
CN110941814B (zh) 行为验证兼容方法、设备、存储介质及装置
CN114416596A (zh) 一种测试应用的方法、装置、计算机设备及存储介质
CN115146581A (zh) 项目管理方法、缺陷分析方法、相关设备及可读存储介质
CN111459817B (zh) 一种程序执行码的检验方法及装置
CN107992749A (zh) 一种检测补丁包冲突的方法及装置
CN112015645A (zh) web系统的功能测试方法、装置和电子设备
CN109508203B (zh) 版本一致性确定方法、装置及系统
CN108200060B (zh) 基于web子系统的单点登录验证方法、服务器及存储介质
CN112698883A (zh) 一种配置数据处理方法、装置、终端和存储介质
CN111931161A (zh) 基于risc-v处理器的芯片验证方法、设备及存储介质
CN112541182B (zh) 内核vfs层系统修复方法、装置、设备及存储介质
CN114860549B (zh) 埋点数据校验方法、装置、设备和存储介质
CN115374488B (zh) 车载终端程序校验方法及装置
CN114648784B (zh) 指纹库预匹配的指纹验证方法、装置、设备及存储介质
CN116932414B (zh) 界面测试用例的生成方法、设备及计算机可读存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination