CN114490406A - 测试覆盖项管理方法、装置、设备及介质 - Google Patents
测试覆盖项管理方法、装置、设备及介质 Download PDFInfo
- Publication number
- CN114490406A CN114490406A CN202210124272.7A CN202210124272A CN114490406A CN 114490406 A CN114490406 A CN 114490406A CN 202210124272 A CN202210124272 A CN 202210124272A CN 114490406 A CN114490406 A CN 114490406A
- Authority
- CN
- China
- Prior art keywords
- item
- test coverage
- target entity
- test
- input
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/36—Preventing errors by testing or debugging software
- G06F11/3668—Software testing
- G06F11/3672—Test management
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/36—Preventing errors by testing or debugging software
- G06F11/3668—Software testing
- G06F11/3672—Test management
- G06F11/3684—Test management for test design, e.g. generating new test cases
Abstract
本发明公开了一种测试覆盖项管理方法、装置、设备及介质,该方法通过确定目标应用系统、目标应用系统对应的各个被测目标实体以及各个被测目标实体的输入输出项,进而针对各个被测目标实体,确定被测目标实体的输入输出项对应的等价类,根据等价类进一步确定被测目标实体对应的测试覆盖项,实现了应用系统的测试覆盖项的准确确定,为应用系统的测试用例是否充分提供了判断依据,并且,所确定出的测试覆盖项还可以作为测试用例的选取依据,保证了应用系统的测试用例的充分性,解决了现有技术中缺乏准确判断测试用例是否充分的依据,以及测试用例的设计不充分的技术问题。
Description
技术领域
本发明涉及测试技术领域,尤其涉及一种测试覆盖项管理方法、装置、设备及介质。
背景技术
目前的测试设计是由测试人员根据有限的需求书、设计说明书等文档、根据有限的专家经验,整理出测试用例,然而,由于输入条件(需求书、设计说明书等文档)有限,测试团队面临“测试设计不充分”的问题,评估系统测试的测试设计是否充分,成为了业界难题,测试设计的充分性无法有效保障。理论上,问题的原因是测试团队缺乏有效的测试依据,实际上也因为测试团队缺乏有效的测试范围确认技术和机制。为解决系统测试中,测试设计充分的问题,目前的技术方案有两个方向。方向一,业务需求度量。通过补充、完善业务产品/业务规则/业务风险,然后度量、统计测试用例的覆盖率来评估测试设计是否充分。方向二,测试用例度量。通过不断评审、补充测试用例,通过测试用例的多少来评估测试设计是否充分。
然而,在业务需求度量方法中,由于业务需求的主体是业务部门,业务人员的关注点更多的是业务产品,而且业务产品的整理、划分目前也缺乏标准化的、企业级的资产体系,更多的依赖于业务人员自身。另一方面,许多在业务人员应知应会的规则,在业务需求中没有体现,但是对于计算机工作人员来说恰恰是重要的基础知识。因此从业务需求度量的角度来评估系统测试的充分性实际效果有限。
在测试用例度量的方法中,若实践中需求书或设计说明书不完整,则会导致测试用例设计无法一蹴而就。并且,测试用例设计粒度难以统一,大粒度可为流程化用例、小粒度可为某个控件字体验证;测试用例涉及测试数据,以及各种输入的排列组合,更多依赖于测试人员个人风格,人员变动后,维护成本高;测试用例设计基本是枚举形式,动辄好几百,好几千条用例,项目组相关评审、确认效率低下;测试用例无法标准化,而且测试用例的度量单位为个数,缺乏对比验证,测试用例是否充分,缺乏理论依据。
发明内容
本发明提供了一种测试覆盖项管理方法、装置、设备及介质,实现测试覆盖项的准确确定,为测试用例是否充分提供了判断依据,并且,可以作为测试用例的选取依据,保证测试用例的充分性。
根据本发明的一方面,提供了一种测试覆盖项管理方法,该方法包括:
确定目标应用系统以及所述目标应用系统对应的各被测目标实体;
确定各所述被测目标实体的输入输出项;
针对各所述被测目标实体,确定所述被测目标实体的输入输出项对应的等价类,基于所述等价类确定所述被测目标实体对应的测试覆盖项。
可选的,所述等价类包括有效等价类和无效等价类,所述确定所述被测目标实体的输入输出项对应的等价类,包括:
确定所述被测目标实体的输入输出项的属性;
基于所述输入输出项的属性确定所述输入输出项的有效等价类以及无效等价类。
可选的,所述方法还包括:
基于所述输入输出项对应的等价类,确定所述输入输出项的边界值点;
所述基于所述等价类确定所述被测目标实体对应的测试覆盖项,包括:
基于所述等价类以及所述边界值点确定所述被测目标实体对应的测试覆盖项。
可选的,所述方法还包括:
在预设界面上展示所述目标应用系统、各所述被测目标实体、各所述被测目标实体的输入输出项以及各所述被测目标实体对应的测试覆盖项;
获取用户在所述预设界面上选择的测试覆盖项,基于所述用户选择的测试覆盖项生成对应的测试用例。
可选的,所述方法还包括:
生成所述测试覆盖项对应的覆盖项编号以及覆盖项名称;
基于所述覆盖项编号、所述覆盖项名称、所述测试覆盖项的所属应用系统、所述测试覆盖项的所属目标实体、所述测试覆盖项的所属输入输出项以及所述测试覆盖项的状态,生成所述测试覆盖项的属性信息。
可选的,所述方法还包括:
在检测到用户对所述测试覆盖项进行修改时,将所述测试覆盖项的状态更新为已修改;或者,
在检测到用户删除所述测试覆盖项时,将所述测试覆盖项的状态更新为已废止。
可选的,所述方法还包括:
分别获取所述被测目标实体在各设定时段内的测试覆盖项的数量;
基于各所述设定时段内的测试覆盖项的数量确定所述被测目标实体的覆盖项变化趋势信息;
基于所述覆盖项变化趋势信息判断所述被测目标实体的测试覆盖项是否满足预设充分条件。
根据本发明的另一方面,提供了一种测试覆盖项管理装置,所述装置包括:
实体确定模块,用于确定目标应用系统以及所述目标应用系统对应的各被测目标实体;
输入输出确定模块,用于确定各所述被测目标实体的输入输出项;
覆盖项确定模块,用于针对各所述被测目标实体,确定所述被测目标实体的输入输出项对应的等价类,基于所述等价类确定所述被测目标实体对应的测试覆盖项。
根据本发明的另一方面,提供了一种电子设备,所述电子设备包括:
至少一个处理器;以及
与所述至少一个处理器通信连接的存储器;其中,
所述存储器存储有可被所述至少一个处理器执行的计算机程序,所述计算机程序被所述至少一个处理器执行,以使所述至少一个处理器能够执行本发明任一实施例所述的测试覆盖项管理方法。
根据本发明的另一方面,提供了一种计算机可读存储介质,所述计算机可读存储介质存储有计算机指令,所述计算机指令用于使处理器执行时实现本发明任一实施例所述的测试覆盖项管理方法。
本发明实施例的技术方案,通过确定目标应用系统、目标应用系统对应的各个被测目标实体以及各个被测目标实体的输入输出项,进而针对各个被测目标实体,确定被测目标实体的输入输出项对应的等价类,根据等价类进一步确定被测目标实体对应的测试覆盖项,实现了应用系统的测试覆盖项的准确确定,为应用系统的测试用例是否充分提供了判断依据,并且,所确定出的测试覆盖项还可以作为测试用例的选取依据,保证了应用系统的测试用例的充分性,解决了现有技术中缺乏准确判断测试用例是否充分的依据,以及测试用例的设计不充分的技术问题。
应当理解,本部分所描述的内容并非旨在标识本发明的实施例的关键或重要特征,也不用于限制本发明的范围。本发明的其它特征将通过以下的说明书而变得容易理解。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1A为本发明实施例一提供的一种测试覆盖项管理方法的流程示意图;
图1B为本发明实施例一提供的一种层级化显示示意图;
图1C为本发明实施例一提供的一种被测目标实体的输入输出项以及测试覆盖项;
图2为本发明实施例二提供的一种测试覆盖项管理方法的流程示意图;
图3A为本发明实施例三提供的一种测试覆盖项管理方法的流程示意图;
图3B为本发明实施例三提供的一种被测目标实体的覆盖项变化趋势信息;
图4为本发明实施例四提供的一种测试覆盖项管理装置的结构示意图;
图5为本发明实施例五提供的一种电子设备的结构示意图。
具体实施方式
为了使本技术领域的人员更好地理解本发明方案,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分的实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本发明保护的范围。
需要说明的是,本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
实施例一
图1A为本发明实施例一提供的一种测试覆盖项管理方法的流程示意图,本实施例可适用于针对应用系统中的各个被测目标实体,生成对应的测试覆盖项,以评估应用系统的测试用例是否充分,或,为测试用例的选取提供依据的情况,该方法可以由测试覆盖项管理装置来执行,该测试覆盖项管理装置可以采用硬件和/或软件的形式实现,该测试覆盖项管理装置可配置于诸如手机、电脑、平板等电子设备中。如图1A所示,该方法包括:
S110、确定目标应用系统以及所述目标应用系统对应的各被测目标实体。
其中,目标应用系统可以是需要进行测试的业务系统。具体的,目标应用系统可以是诸如银行应用系统、数据分析系统、视频推送系统或信息查询系统等业务系统。
示例性的,以银行应用系统为例,目标应用系统可以是为用户提供业务服务的计算机应用程序,一般通过人机交互,或机器与机器交互的方式提供服务,有明显的输入操作和输出操作;目标应用系统包括但不限于个人网银系统、企业网银系统、个人掌银系统、企业掌银系统以及理财管理系统。
在本实施例中,目标应用系统对应的各被测目标实体可以是目标应用系统中的各个业务服务项。示例性的,以目标应用系统为银行应用系统为例,银行应用系统对应的被测目标实体可以指银行应用系统中的交易,如转账、余额查询、代发工资、理财产品购买、交易查询、生成电子票据等。
具体的,本实施例可以在确定出目标应用系统后,根据目标应用系统所包含的业务服务项,确定该目标应用系统对应的各被测目标实体。即,可以直接将目标应用系统所包含的业务服务项确定为各被测目标实体。
S120、确定各所述被测目标实体的输入输出项。
其中,被测目标实体的输入输出项可以是该被测目标实体对应的业务服务的输入、输出信息,即包括业务服务项的输入项和输出项。被测目标实体的输入项和输出项的数量分别可以为至少一个。
示例性的,以被测目标实体为转账为例,输入输出项中的输入项可以包括转入方信息、转出方信息以及转账金额信息;输入输出项中的输出项可以包括金额变动信息以及交易明细信息。输入输出项中的输入项、输出项之间可以具备关联关系,通过关联关系构建被测目标实体对应的业务服务。
具体的,本实施例在确定出目标应用系统对应的各被测目标实体后,针对每一个被测目标实体,均确定出各被测目标实体的输入输出项,以进一步针对每一个输入输出项构建测试覆盖项。
S130、针对各所述被测目标实体,确定所述被测目标实体的输入输出项对应的等价类,基于所述等价类确定所述被测目标实体对应的测试覆盖项。
在本实施例中,输入输出项对应的等价类可以是从输入输出项的大量数据里划分的各个范围,每个范围内的数据的测试效果是等价的。即,划分出的各个范围为各个等价类。
具体的,为了避免对目标应用系统中各个被测目标实体的输入输出项的全部数据的穷举测试,本实施例可以针对各个输入输出项,从输入输出项的数据区间中划分各个范围,将各个范围作为输入输出项的等价类。示例性的,以输入输出项为转账金额信息为例,可以划分出的等价类包括:小数位小于等于2的正数、小数位大于2的正数、负数、0、字符、字母以及汉字。又例如,以输入输出项为转出方信息为例,可以划分出的等价类包括:中文名、英文名、数字、以及中文英文组合名。
在本实施例中,确定出被测目标实体的每一个输入输出项对应的等价类,进而基于各个输入输出项对应的等价类,构成该被测目标实体的测试覆盖项。其中,在该被测目标实体中,一个输入项或一个输出项可以视为一系列关联的测试覆盖项的集合,如,对于输入项Ii,其包含m个测试覆盖项,则可以表示为Ii=Ω(Ii-1,Ii-2,……,Ii-m)。
在构建出各被测目标实体对应的测试覆盖项后,还可以根据测试覆盖项确定测试用例,如,从每一个测试覆盖项(等价类)或部分测试覆盖项中选取代表数据,代表该测试覆盖项的整个范围内数据的测试结果。
示例性的,所述方法还包括:在预设界面上展示所述目标应用系统、各所述被测目标实体、各所述被测目标实体的输入输出项以及各所述被测目标实体对应的测试覆盖项;获取用户在所述预设界面上选择的测试覆盖项,基于所述用户选择的测试覆盖项生成对应的测试用例。
其中,目标应用系统、各被测目标实体、各被测目标实体的输入输出项以及各被测目标实体对应的测试覆盖项可以以层级的方式显示于预设界面上。如图1B所示,展示了一种层级化显示示意图,第一个层级为目标应用系统,第二个层级为该目标应用系统中的各被测目标实体,第三个层级为各被测目标实体的输入输出项,第四个层级为各输入输出项对应的等价类。
进一步的,可以获取用户在预设界面上选择的测试覆盖项,根据用户选择的测试覆盖项生成被测目标实体对应的测试用例。当然,生成的测试用例也可以在预设界面上进行展示。
具体的,可以在用户选择的测试覆盖项中随机选择代表数据,将该代表数据按照预先设置的关联关系进行串联,形成测试用例;其中,关联关系可以是输入输出项之间的关联关系。示例性的,如图1C所示,展示了一种被测目标实体的输入输出项以及测试覆盖项,在该被测目标实体中,各输入项与输入项之间可以通过关联关系进行串联,生成测试用例,例如,Φ(O1-8,O2-3,……,On-4)=Fk(I1-6,I2-13,……,Im-9),其中,Fk表示关联关系,O1-8,O2-3,……,On-4表示各输出项,I1-6,I2-13,……,Im-9表示各输入项。
当然,本实施例也可以在确定出被测目标实体对应的测试覆盖项后,从每一个测试覆盖项中随机选择代表数据,根据各代表数据生成测试用例。
在该示例中,通过显示目标应用系统、各被测目标实体、各被测目标实体的输入输出项以及各被测目标实体对应的测试覆盖项,便于用户快速获取到各测试覆盖项所属的输入输出项、所属的被测目标实体以及所属的目标应用系统,形成了一套可追溯、等粒度、全覆盖的测试覆盖项推导方法。
与“业务需求”相比,“测试覆盖项”由测试人员自己维护,层次化、标准化的结构可以最大削弱测试人员的差异性;与“测试用例”相比,由于等价类/边界值本身是高度收敛的,“测试覆盖项”粒度一致,层次化的组织方式更便于维护。并且,因为目标应用系统、被测目标实体、输入输出项、以及测试覆盖项是标准化的层级关系,类似与文章目录,理论上等价于思维导图,可以通过现有工具直接进行可视化输出,便于评审和维护。
本实施例的技术方案,通过确定目标应用系统、目标应用系统对应的各个被测目标实体以及各个被测目标实体的输入输出项,进而针对各个被测目标实体,确定被测目标实体的输入输出项对应的等价类,根据等价类进一步确定被测目标实体对应的测试覆盖项,实现了应用系统的测试覆盖项的准确确定,为应用系统的测试用例是否充分提供了判断依据,并且,所确定出的测试覆盖项还可以作为测试用例的选取依据,保证了应用系统的测试用例的充分性,解决了现有技术中缺乏准确判断测试用例是否充分的依据,以及测试用例的设计不充分的技术问题。
实施例二
图2为本发明实施例二提供的一种测试覆盖项管理方法的流程示意图,本实施例在上述各实施例的基础上,可选的,所述等价类包括有效等价类和无效等价类,所述确定所述被测目标实体的输入输出项对应的等价类,包括:确定所述被测目标实体的输入输出项的属性;基于所述输入输出项的属性确定所述输入输出项的有效等价类以及无效等价类。如图2所示,该方法包括:
S210、确定目标应用系统以及所述目标应用系统对应的各被测目标实体,并确定各所述被测目标实体的输入输出项。
S220、针对各所述被测目标实体,确定所述被测目标实体的输入输出项的属性,基于所述输入输出项的属性确定所述输入输出项的有效等价类以及无效等价类。
其中,有效等价类可以是符合输入输出项的取值规则的等价类,无效等价类可以是不符合输入输出项的取值规则的等价类。示例性的,以转账金额信息为例,小于0可以是无效等价类,0~5万、5万~100万、以及100万以上可以是有效等价类;若转账金额具备上限(如5万),则0~5万是有效等价类,小于0、5万~100万、以及100万以上可以是无效等价类。
在本实施例中,具体的,可以先获取输入输出项的属性,如,输入或输出的文本类型、输入或输出的限制规则等;进一步的,根据被测目标实体的属性,确定出输入输出项的有效等价类以及无效等价类,基于各输入输出的有效等价类以及无效等价类,构成被测目标实体的测试覆盖项。
S230、基于所述等价类确定所述被测目标实体对应的测试覆盖项。
在一种可选的实施方式中,所述方法还包括:基于所述输入输出项对应的等价类,确定所述输入输出项的边界值点;所述基于所述等价类确定所述被测目标实体对应的测试覆盖项,包括:基于所述等价类以及所述边界值点确定所述被测目标实体对应的测试覆盖项。
其中,边界值点可以是各等价类中的边界值。沿用上例,边界值点可以是0、5万、100万等。具体的,可以直接根据各等价类的边界值确定边界值点,进而将各输入输出项的边界值点、等价类确定为测试覆盖项。
在该可选的实施方式中,通过等价类确定边界值点,并将等价类和边界值点确定为测试覆盖项,进一步提高了测试覆盖项的充分性,实现了对数据范围的边界的测试,提高了测试质量。并且,可以使得测试覆盖项的粒度一致,由于等价类/边界值本身是高度收敛的,同一个被测目标实体的测试覆盖项,由于人员差异造成的度量数据,理论上不会有数量级的差异。
本实施例的技术方案,通过确定被测目标实体的输入输出项的属性,进而根据输入输出项的属性确定输入输出项的有效等价类以及无效等价类,根据各输入输出项的有效等价类以及无效等价类确定被测目标实体对应的测试覆盖项,实现了应用系统的测试覆盖项的准确确定,为应用系统的测试用例是否充分提供了判断依据,并且,所确定出的测试覆盖项还可以作为测试用例的选取依据,保证了应用系统的测试用例的充分性,解决了现有技术中缺乏准确判断测试用例是否充分的依据,以及测试用例的设计不充分的技术问题。
实施例三
图3A为本发明实施例三提供的一种测试覆盖项管理方法的流程示意图,本实施例在上述各实施例的基础上,可选的,所述方法还包括:生成所述测试覆盖项对应的覆盖项编号以及覆盖项名称;基于所述覆盖项编号、所述覆盖项名称、所述测试覆盖项的所属应用系统、所述测试覆盖项的所属目标实体、所述测试覆盖项的所属输入输出项以及所述测试覆盖项的状态,生成所述测试覆盖项的属性信息。如图3A所示,该方法包括:
S310、确定目标应用系统以及所述目标应用系统对应的各被测目标实体,并确定各所述被测目标实体的输入输出项。
S320、针对各所述被测目标实体,确定所述被测目标实体的输入输出项对应的等价类,基于所述等价类确定所述被测目标实体对应的测试覆盖项。
S330、生成所述测试覆盖项对应的覆盖项编号以及覆盖项名称,基于所述覆盖项编号、所述覆盖项名称、所述测试覆盖项的所属应用系统、所述测试覆盖项的所属目标实体、所述测试覆盖项的所属输入输出项以及所述测试覆盖项的状态,生成所述测试覆盖项的属性信息。
其中,覆盖项编号可以是测试覆盖项的唯一标识,用于保证测试覆盖项的唯一性,避免测试覆盖项重复。覆盖项名称可以是测试覆盖项的语言描述信息,可以采用精简逻辑语言表示覆盖项名称。具体的,本实施例可以在生成测试覆盖项的同时,一并生成各测试覆盖项对应的覆盖项编号和覆盖项名称;还可以在生成测试覆盖项之后,生成各测试覆盖项对应的覆盖项编号和覆盖项名称。
在本实施例中,测试覆盖项的所属输入输出项可以是测试覆盖项对应的输入输出项,测试覆盖项的所属目标实体可以是测试覆盖项的所属输入输出项对应的被测目标实体,测试覆盖项的所属应用系统可以是测试覆盖项的所属目标实体对应的目标应用系统。
测试覆盖项的状态还可以是测试覆盖项的当前使用状态,包括但不限于已新建、已修改和已废止。其中,已新建表示测试覆盖项已创建,可以被正常使用,已修改表示测试覆盖项被修改,为可用状态,已废止表示测试覆盖项已被删除,为不可用状态。
具体的,对于测试覆盖项的更新包括新增、修改、删除。对于第一次添加的测试覆盖项,该测试覆盖项的状态为已新建,为可用状态;对于由于业务规则、系统实现发生变化,需要修改的测试覆盖项,负责人员修改完成后,该测试覆盖项的状态为已修改,为可用状态;对于由于业务规则、系统实现发生变化,不再适用的测试覆盖项,负责人员进行删除操作后,该测试覆盖项的状态为已废止,为不可用状态。
即,可选的,本实施例提供的测试覆盖项管理方法,还包括:在检测到用户对所述测试覆盖项进行修改时,将所述测试覆盖项的状态更新为已修改;或者,在检测到用户删除所述测试覆盖项时,将所述测试覆盖项的状态更新为已废止。
进一步的,在本实施例中,可以根据覆盖项编号、覆盖项名称、测试覆盖项的所属应用系统、测试覆盖项的所属目标实体、测试覆盖项的所属输入输出项以及测试覆盖项的状态,生成测试覆盖项的属性信息,以便于对各个测试覆盖项进行标准化管理。
可选的,测试覆盖项的属性信息还可以包括测试覆盖项的划分规则、测试覆盖项的维护时间以及测试覆盖项的负责人员信息。其中,测试覆盖项的划分规则可以是针对某一输入输出项所采用的划分等价类的规则。例如,对于输入输出项为转账金额信息,按照录入栏位要素属性可以确定出测试覆盖项包括小数小于等于2的正数、小数位大于2的正数、负数、0、字符、字母、汉字等;按照与账户余额比较可分析得到的测试覆盖项包括金额小于账户余额、金额等于账户余额、金额大于账户余额等。测试覆盖项的维护时间可以是测试覆盖项的最新生成或更新时间。测试覆盖项的负责人员信息可以是该测试覆盖项的负责测试人员信息,一个测试覆盖项可以仅由一名测试人员负责。
在一种可选的实施方式中,本实施例提供的测试覆盖项管理方法,还可以包括:分别获取所述被测目标实体在各设定时段内的测试覆盖项的数量;基于各所述设定时段内的测试覆盖项的数量确定所述被测目标实体的覆盖项变化趋势信息;基于所述覆盖项变化趋势信息判断所述被测目标实体的测试覆盖项是否满足预设充分条件。
具体的,可以根据各测试覆盖项的属性信息中的维护时间,周期性的统计被测目标实体在各设定时段内的测试覆盖项的数量;进一步的,根据各设定时段内测试覆盖项的数量,确定测试覆盖项的数量变化趋势,即被测目标实体的覆盖项变化趋势信息;根据该覆盖项变化趋势信息判断被测目标实体的测试覆盖项是否满足预设充分条件。其中,预设充分条件可以是斜率小于预设斜率阈值,或者,增长数量小于预设数量阈值,或者,增长比例小于预设比例阈值。
示例性的,如图3B所示,展示了一种被测目标实体的覆盖项变化趋势信息,纵轴为各设定时段内测试覆盖项的数量,横轴为各设定时段,由图可知,在2020年3月,该被测目标实体的测试覆盖项增长数量较少,测试覆盖项满足预设充分条件,该被测目标实体的测试覆盖项可以作为判断测试用例是否充分的度量指标。
在该可选的实施方式中,通过获取各设定时段内测试覆盖项的数量,基于各设定时段内测试覆盖项的数量确定被测目标实体的覆盖项变化趋势信息,进而判断被测目标实体的测试覆盖项是否满足预设充分条件,实现了测试覆盖项的充分性的判断,进一步的确保了测试覆盖项的充分性。通过增加时间趋势维度的统计,在约定的数量范围内,理论上可以通过数学方式确认测试覆盖项的数量达到收敛要求,可以作为后续测试设计充分性的度量依据。
本实施例的技术方案,通过生成测试覆盖项对应的覆盖项编号以及覆盖项名称,基于测试覆盖项对应的覆盖项编号、覆盖项名称、测试覆盖项的所属应用系统、测试覆盖项的所属目标实体、测试覆盖项的所属输入输出项以及测试覆盖项的状态,生成测试覆盖项的属性信息,实现了对各测试覆盖项的标准化管理。
实施例四
图4为本发明实施例四提供的一种测试覆盖项管理装置的结构示意图。如图4所示,该装置包括:实体确定模块410、输入输出确定模块420以及覆盖项确定模块430。
实体确定模块410,用于确定目标应用系统以及所述目标应用系统对应的各被测目标实体;
输入输出确定模块420,用于确定各所述被测目标实体的输入输出项;
覆盖项确定模块430,用于针对各所述被测目标实体,确定所述被测目标实体的输入输出项对应的等价类,基于所述等价类确定所述被测目标实体对应的测试覆盖项。
可选的,所述等价类包括有效等价类和无效等价类,所述覆盖项确定模块430包括等价类确定单元,所述等价类确定单元,用于确定所述被测目标实体的输入输出项的属性,基于所述输入输出项的属性确定所述输入输出项的有效等价类以及无效等价类。
可选的,所述装置还包括边界值确定模块,所述边界值确定模块,用于基于所述输入输出项对应的等价类,确定所述输入输出项的边界值点;相应的,所述覆盖项确定模块包括覆盖项确定单元,所述覆盖项确定单元,用于基于所述等价类以及所述边界值点确定所述被测目标实体对应的测试覆盖项。
可选的,所述装置还包括界面显示模块和测试用例生成模块;其中,所述界面显示模块,用于在预设界面上展示所述目标应用系统、各所述被测目标实体、各所述被测目标实体的输入输出项以及各所述被测目标实体对应的测试覆盖项;所述测试用例生成模块,用于获取用户在所述预设界面上选择的测试覆盖项,基于所述用户选择的测试覆盖项生成对应的测试用例。
可选的,所述装置还包括属性生成模块,所述属性生成模块,用于生成所述测试覆盖项对应的覆盖项编号以及覆盖项名称,基于所述覆盖项编号、所述覆盖项名称、所述测试覆盖项的所属应用系统、所述测试覆盖项的所属目标实体、所述测试覆盖项的所属输入输出项以及所述测试覆盖项的状态,生成所述测试覆盖项的属性信息。
可选的,所述装置还包括状态修改模块,所述状态修改模块,用于在检测到用户对所述测试覆盖项进行修改时,将所述测试覆盖项的状态更新为已修改;或者,在检测到用户删除所述测试覆盖项时,将所述测试覆盖项的状态更新为已废止。
可选的,所述装置还包括数量统计模块,所述数量统计模块,用于分别获取所述被测目标实体在各设定时段内的测试覆盖项的数量,基于各所述设定时段内的测试覆盖项的数量确定所述被测目标实体的覆盖项变化趋势信息,基于所述覆盖项变化趋势信息判断所述被测目标实体的测试覆盖项是否满足预设充分条件。
在本实施例中,通过实体确定模块,确定目标应用系统、目标应用系统对应的各个被测目标实体,通过输入输出确定模块,确定各个被测目标实体的输入输出项,进而通过覆盖项确定模块,针对各个被测目标实体,确定被测目标实体的输入输出项对应的等价类,根据等价类进一步确定被测目标实体对应的测试覆盖项,实现了应用系统的测试覆盖项的准确确定,为应用系统的测试用例是否充分提供了判断依据,并且,所确定出的测试覆盖项还可以作为测试用例的选取依据,保证了应用系统的测试用例的充分性,解决了现有技术中缺乏准确判断测试用例是否充分的依据,以及测试用例的设计不充分的技术问题。
本发明实施例所提供的测试覆盖项管理装置可执行本发明任意实施例所提供的测试覆盖项管理方法,具备执行方法相应的功能模块和有益效果。
实施例五
图5为本发明实施例五提供的一种电子设备的结构示意图,图5示出了可以用来实施本发明的实施例的电子设备10的结构示意图。电子设备旨在表示各种形式的数字计算机,诸如,膝上型计算机、台式计算机、工作台、个人数字助理、服务器、刀片式服务器、大型计算机、和其它适合的计算机。电子设备还可以表示各种形式的移动装置,诸如,个人数字处理、蜂窝电话、智能电话、可穿戴设备(如头盔、眼镜、手表等)和其它类似的计算装置。本文所示的部件、它们的连接和关系、以及它们的功能仅仅作为示例,并且不意在限制本文中描述的和/或者要求的本发明的实现。
如图5所示,电子设备10包括至少一个处理器11,以及与至少一个处理器11通信连接的存储器,如只读存储器(ROM)12、随机访问存储器(RAM)13等,其中,存储器存储有可被至少一个处理器执行的计算机程序,处理器11可以根据存储在只读存储器(ROM)12中的计算机程序或者从存储单元18加载到随机访问存储器(RAM)13中的计算机程序,来执行各种适当的动作和处理。在RAM 13中,还可存储电子设备10操作所需的各种程序和数据。处理器11、ROM 12以及RAM 13通过总线14彼此相连。输入/输出(I/O)接口15也连接至总线14。
电子设备10中的多个部件连接至I/O接口15,包括:输入单元16,例如键盘、鼠标等;输出单元17,例如各种类型的显示器、扬声器等;存储单元18,例如磁盘、光盘等;以及通信单元19,例如网卡、调制解调器、无线通信收发机等。通信单元19允许电子设备10通过诸如因特网的计算机网络和/或各种电信网络与其他设备交换信息/数据。
处理器11可以是各种具有处理和计算能力的通用和/或专用处理组件。处理器11的一些示例包括但不限于中央处理单元(CPU)、图形处理单元(GPU)、各种专用的人工智能(AI)计算芯片、各种运行机器学习模型算法的处理器、数字信号处理器(DSP)、以及任何适当的处理器、控制器、微控制器等。处理器11执行上文所描述的各个方法和处理,例如测试覆盖项管理方法。
在一些实施例中,测试覆盖项管理方法可被实现为计算机程序,其被有形地包含于计算机可读存储介质,例如存储单元18。在一些实施例中,计算机程序的部分或者全部可以经由ROM 12和/或通信单元19而被载入和/或安装到电子设备10上。当计算机程序加载到RAM 13并由处理器11执行时,可以执行上文描述的测试覆盖项管理方法的一个或多个步骤。备选地,在其他实施例中,处理器11可以通过其他任何适当的方式(例如,借助于固件)而被配置为执行测试覆盖项管理方法。
本文中以上描述的系统和技术的各种实施方式可以在数字电子电路系统、集成电路系统、场可编程门阵列(FPGA)、专用集成电路(ASIC)、专用标准产品(ASSP)、芯片上系统的系统(SOC)、负载可编程逻辑设备(CPLD)、计算机硬件、固件、软件、和/或它们的组合中实现。这些各种实施方式可以包括:实施在一个或者多个计算机程序中,该一个或者多个计算机程序可在包括至少一个可编程处理器的可编程系统上执行和/或解释,该可编程处理器可以是专用或者通用可编程处理器,可以从存储系统、至少一个输入装置、和至少一个输出装置接收数据和指令,并且将数据和指令传输至该存储系统、该至少一个输入装置、和该至少一个输出装置。
用于实施本发明的方法的计算机程序可以采用一个或多个编程语言的任何组合来编写。这些计算机程序可以提供给通用计算机、专用计算机或其他可编程数据处理装置的处理器,使得计算机程序当由处理器执行时使流程图和/或框图中所规定的功能/操作被实施。计算机程序可以完全在机器上执行、部分地在机器上执行,作为独立软件包部分地在机器上执行且部分地在远程机器上执行或完全在远程机器或服务器上执行。
在本发明的上下文中,计算机可读存储介质可以是有形的介质,其可以包含或存储以供指令执行系统、装置或设备使用或与指令执行系统、装置或设备结合地使用的计算机程序。计算机可读存储介质可以包括但不限于电子的、磁性的、光学的、电磁的、红外的、或半导体系统、装置或设备,或者上述内容的任何合适组合。备选地,计算机可读存储介质可以是机器可读信号介质。机器可读存储介质的更具体示例会包括基于一个或多个线的电气连接、便携式计算机盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦除可编程只读存储器(EPROM或快闪存储器)、光纤、便捷式紧凑盘只读存储器(CD-ROM)、光学储存设备、磁储存设备、或上述内容的任何合适组合。
为了提供与用户的交互,可以在电子设备上实施此处描述的系统和技术,该电子设备具有:用于向用户显示信息的显示装置(例如,CRT(阴极射线管)或者LCD(液晶显示器)监视器);以及键盘和指向装置(例如,鼠标或者轨迹球),用户可以通过该键盘和该指向装置来将输入提供给电子设备。其它种类的装置还可以用于提供与用户的交互;例如,提供给用户的反馈可以是任何形式的传感反馈(例如,视觉反馈、听觉反馈、或者触觉反馈);并且可以用任何形式(包括声输入、语音输入或者、触觉输入)来接收来自用户的输入。
可以将此处描述的系统和技术实施在包括后台部件的计算系统(例如,作为数据服务器)、或者包括中间件部件的计算系统(例如,应用服务器)、或者包括前端部件的计算系统(例如,具有图形用户界面或者网络浏览器的用户计算机,用户可以通过该图形用户界面或者该网络浏览器来与此处描述的系统和技术的实施方式交互)、或者包括这种后台部件、中间件部件、或者前端部件的任何组合的计算系统中。可以通过任何形式或者介质的数字数据通信(例如,通信网络)来将系统的部件相互连接。通信网络的示例包括:局域网(LAN)、广域网(WAN)、区块链网络和互联网。
计算系统可以包括客户端和服务器。客户端和服务器一般远离彼此并且通常通过通信网络进行交互。通过在相应的计算机上运行并且彼此具有客户端-服务器关系的计算机程序来产生客户端和服务器的关系。服务器可以是云服务器,又称为云计算服务器或云主机,是云计算服务体系中的一项主机产品,以解决了传统物理主机与VPS服务中,存在的管理难度大,业务扩展性弱的缺陷。
应该理解,可以使用上面所示的各种形式的流程,重新排序、增加或删除步骤。例如,本发明中记载的各步骤可以并行地执行也可以顺序地执行也可以不同的次序执行,只要能够实现本发明的技术方案所期望的结果,本文在此不进行限制。
上述具体实施方式,并不构成对本发明保护范围的限制。本领域技术人员应该明白的是,根据设计要求和其他因素,可以进行各种修改、组合、子组合和替代。任何在本发明的精神和原则之内所作的修改、等同替换和改进等,均应包含在本发明保护范围之内。
Claims (10)
1.一种测试覆盖项管理方法,其特征在于,包括:
确定目标应用系统以及所述目标应用系统对应的各被测目标实体;
确定各所述被测目标实体的输入输出项;
针对各所述被测目标实体,确定所述被测目标实体的输入输出项对应的等价类,基于所述等价类确定所述被测目标实体对应的测试覆盖项。
2.根据权利要求1所述的方法,其特征在于,所述等价类包括有效等价类和无效等价类,所述确定所述被测目标实体的输入输出项对应的等价类,包括:
确定所述被测目标实体的输入输出项的属性;
基于所述输入输出项的属性确定所述输入输出项的有效等价类以及无效等价类。
3.根据权利要求1所述的方法,其特征在于,所述方法还包括:
基于所述输入输出项对应的等价类,确定所述输入输出项的边界值点;
所述基于所述等价类确定所述被测目标实体对应的测试覆盖项,包括:
基于所述等价类以及所述边界值点确定所述被测目标实体对应的测试覆盖项。
4.根据权利要求1所述的方法,其特征在于,所述方法还包括:
在预设界面上展示所述目标应用系统、各所述被测目标实体、各所述被测目标实体的输入输出项以及各所述被测目标实体对应的测试覆盖项;
获取用户在所述预设界面上选择的测试覆盖项,基于所述用户选择的测试覆盖项生成对应的测试用例。
5.根据权利要求1所述的方法,其特征在于,所述方法还包括:
生成所述测试覆盖项对应的覆盖项编号以及覆盖项名称;
基于所述覆盖项编号、所述覆盖项名称、所述测试覆盖项的所属应用系统、所述测试覆盖项的所属目标实体、所述测试覆盖项的所属输入输出项以及所述测试覆盖项的状态,生成所述测试覆盖项的属性信息。
6.根据权利要求5所述的方法,其特征在于,所述方法还包括:
在检测到用户对所述测试覆盖项进行修改时,将所述测试覆盖项的状态更新为已修改;或者,
在检测到用户删除所述测试覆盖项时,将所述测试覆盖项的状态更新为已废止。
7.根据权利要求6所述的方法,其特征在于,所述方法还包括:
分别获取所述被测目标实体在各设定时段内的测试覆盖项的数量;
基于各所述设定时段内的测试覆盖项的数量确定所述被测目标实体的覆盖项变化趋势信息;
基于所述覆盖项变化趋势信息判断所述被测目标实体的测试覆盖项是否满足预设充分条件。
8.一种测试覆盖项管理装置,其特征在于,包括:
实体确定模块,用于确定目标应用系统以及所述目标应用系统对应的各被测目标实体;
输入输出确定模块,用于确定各所述被测目标实体的输入输出项;
覆盖项确定模块,用于针对各所述被测目标实体,确定所述被测目标实体的输入输出项对应的等价类,基于所述等价类确定所述被测目标实体对应的测试覆盖项。
9.一种电子设备,其特征在于,所述电子设备包括:
至少一个处理器;以及
与所述至少一个处理器通信连接的存储器;其中,
所述存储器存储有可被所述至少一个处理器执行的计算机程序,所述计算机程序被所述至少一个处理器执行,以使所述至少一个处理器能够执行权利要求1-7中任一项所述的测试覆盖项管理方法。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有计算机指令,所述计算机指令用于使处理器执行时实现权利要求1-7中任一项所述的测试覆盖项管理方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210124272.7A CN114490406A (zh) | 2022-02-10 | 2022-02-10 | 测试覆盖项管理方法、装置、设备及介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210124272.7A CN114490406A (zh) | 2022-02-10 | 2022-02-10 | 测试覆盖项管理方法、装置、设备及介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN114490406A true CN114490406A (zh) | 2022-05-13 |
Family
ID=81478865
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210124272.7A Pending CN114490406A (zh) | 2022-02-10 | 2022-02-10 | 测试覆盖项管理方法、装置、设备及介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114490406A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116627974A (zh) * | 2023-05-25 | 2023-08-22 | 成都融见软件科技有限公司 | 一种覆盖率存储系统 |
-
2022
- 2022-02-10 CN CN202210124272.7A patent/CN114490406A/zh active Pending
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116627974A (zh) * | 2023-05-25 | 2023-08-22 | 成都融见软件科技有限公司 | 一种覆盖率存储系统 |
CN116627974B (zh) * | 2023-05-25 | 2024-02-09 | 成都融见软件科技有限公司 | 一种覆盖率存储系统 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
TWI690884B (zh) | 異常轉帳偵測方法、裝置、存儲介質、電子設備及產品 | |
CN110268409A (zh) | 用于电力欺诈检测的新型非参数统计行为识别生态系统 | |
CN114490406A (zh) | 测试覆盖项管理方法、装置、设备及介质 | |
CN113505990A (zh) | 企业风险评估的方法、装置、电子设备和存储介质 | |
CN109359946A (zh) | 工程审计方法和系统 | |
CN115730284A (zh) | 一种报表数据的权限控制方法、装置、设备及存储介质 | |
CN114881521A (zh) | 业务评估方法、装置、电子设备以及存储介质 | |
US20220067460A1 (en) | Variance Characterization Based on Feature Contribution | |
CN108537654B (zh) | 客户关系网络图的渲染方法、装置、终端设备及介质 | |
CN112800294B (zh) | 数据展示图表的处理方法、装置、设备和介质 | |
CN114297510A (zh) | 一种产品推荐方法、装置、电子设备及介质 | |
CN117455684A (zh) | 一种数据处理方法、装置、电子设备、存储介质及产品 | |
US20230385820A1 (en) | Methods and Systems for Predicting Cash Flow | |
CN114493544A (zh) | 一种研发项目的管理系统 | |
CN114219208A (zh) | 小微企业的授信处理方法、装置及电子设备 | |
CN115271505A (zh) | 一种运维指标的统计方法、装置、平台及存储介质 | |
CN115829771A (zh) | 一种财务核算方法、装置、电子设备及存储介质 | |
CN115511470A (zh) | 评价指标数据生成方法、装置、电子设备和存储介质 | |
CN114721942A (zh) | 一种测试数据的生成方法、装置、设备及存储介质 | |
US20200302539A1 (en) | Project-based and enterprise group-based risk management method, computer, and non-transitory computer-readable storage medium | |
CN114677187A (zh) | 一种发票开具方法、装置、系统、电子设备、介质及产品 | |
CN115860969A (zh) | 物资结算方法、装置、电子设备以及存储介质 | |
CN117668363A (zh) | 一种推荐方法、装置、设备及介质 | |
CN117632741A (zh) | 回归测试用例库的确定方法、装置、电子设备及存储介质 | |
CN114926002A (zh) | 客户亲密度判定方法、装置、设备、介质和程序产品 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |