CN117609086A - 一种测试内容的确定方法、装置、电子设备及存储介质 - Google Patents
一种测试内容的确定方法、装置、电子设备及存储介质 Download PDFInfo
- Publication number
- CN117609086A CN117609086A CN202311658644.5A CN202311658644A CN117609086A CN 117609086 A CN117609086 A CN 117609086A CN 202311658644 A CN202311658644 A CN 202311658644A CN 117609086 A CN117609086 A CN 117609086A
- Authority
- CN
- China
- Prior art keywords
- test
- function
- test content
- content
- determining
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000012360 testing method Methods 0.000 title claims abstract description 502
- 238000000034 method Methods 0.000 title claims abstract description 57
- 238000013101 initial test Methods 0.000 claims abstract description 130
- 230000006870 function Effects 0.000 claims description 228
- 230000007547 defect Effects 0.000 claims description 109
- 230000000153 supplemental effect Effects 0.000 claims description 60
- 230000000903 blocking effect Effects 0.000 claims description 29
- 230000007488 abnormal function Effects 0.000 claims description 23
- 238000004590 computer program Methods 0.000 claims description 17
- 230000002159 abnormal effect Effects 0.000 claims description 13
- 230000008569 process Effects 0.000 description 12
- 238000004891 communication Methods 0.000 description 8
- 238000012545 processing Methods 0.000 description 6
- 238000013522 software testing Methods 0.000 description 6
- 238000011161 development Methods 0.000 description 5
- 238000010586 diagram Methods 0.000 description 5
- 230000004048 modification Effects 0.000 description 5
- 238000012986 modification Methods 0.000 description 5
- 230000008901 benefit Effects 0.000 description 4
- 238000009472 formulation Methods 0.000 description 4
- 239000000203 mixture Substances 0.000 description 4
- 238000011990 functional testing Methods 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 238000012216 screening Methods 0.000 description 3
- 230000000694 effects Effects 0.000 description 2
- 230000010354 integration Effects 0.000 description 2
- 230000003993 interaction Effects 0.000 description 2
- 239000000047 product Substances 0.000 description 2
- 230000001502 supplementing effect Effects 0.000 description 2
- 230000002776 aggregation Effects 0.000 description 1
- 238000004220 aggregation Methods 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 238000013473 artificial intelligence Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 230000002950 deficient Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 230000000414 obstructive effect Effects 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 230000002265 prevention Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000001953 sensory effect Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 239000013589 supplement Substances 0.000 description 1
- 238000010998 test method Methods 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/36—Preventing errors by testing or debugging software
- G06F11/3668—Software testing
- G06F11/3672—Test management
- G06F11/3676—Test management for coverage analysis
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/36—Preventing errors by testing or debugging software
- G06F11/3668—Software testing
- G06F11/3672—Test management
- G06F11/3684—Test management for test design, e.g. generating new test cases
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02P—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
- Y02P90/00—Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
- Y02P90/30—Computing systems specially adapted for manufacturing
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Computer Hardware Design (AREA)
- Quality & Reliability (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Debugging And Monitoring (AREA)
Abstract
本发明公开了一种测试内容的确定方法、装置、电子设备及存储介质,涉及测试技术领域,该方法包括:确定待测试功能、待测试功能的初始测试内容和历史测试数据;基于历史测试数据和初始测试内容,确定待测试功能的补充测试内容;基于补充测试内容和初始测试内容,确定目标测试内容,其中,目标测试内容为补充测试内容与初始测试内容之和。本发明的技术方案,可以对待测试功能的历史测试数据进行分析和处理,并结合初始测试内容确定待测试功能的补充测试内容,补充测试内容为历史测试数据中存在但初始测试内容中不存在的风险测试项,能够制定完整的测试内容,提升待测试功能的测试的全面性。
Description
技术领域
本发明涉及测试技术领域,尤其涉及一种测试内容的确定方法、装置、电子设备及存储介质。
背景技术
随着软件产业的快速发展和传播,软件产品的安全问题受到越来越多的关注,软件的风险测试与软件产品的安全性息息相关,属于软件测试技术领域的重点问题之一。
目前,软件风险测试方法是基于风险测试标准确定风险测试内容,并使用风险测试内容对软件应用进行测试,以评估软件测试的风险情况。但是,风险测试标准是立足于测试本身的,不会对软件测试的历史风险因素进行分析和处理,符合风险测试标准而实用性有限的风险项无法被监测,风险测试内容的全面性较差,严重影响软件风险的测试准确度。
发明内容
本发明提供了一种测试内容的确定方法、装置、电子设备及存储介质,旨在结合历史风险数据制定完整且全面的测试内容,提升待测试功能的测试的全面性。
根据本发明的一方面,提供了一种测试内容的确定方法,该方法包括:
确定待测试功能、待测试功能的初始测试内容和历史测试数据;
基于历史测试数据和初始测试内容,确定待测试功能的补充测试内容;
基于补充测试内容和初始测试内容,确定目标测试内容,其中,目标测试内容为补充测试内容与初始测试内容之和。
可选的,初始测试内容为基于待测试功能的测试内容制定规则确定的测试内容,历史测试数据为历史测试资源库中待测试功能对应的测试内容。
可选的,基于历史测试数据和初始测试内容,确定待测试功能的补充测试内容,包括:基于历史测试数据和初始测试内容,确定第一补充测试内容、第二补充测试内容和第三补充测试内容;基于第一补充测试内容、第二补充测试内容和第三补充测试内容,确定补充测试内容。
可选的,基于历史测试数据和初始测试内容,确定第一补充测试内容,包括:确定待测试功能是否为缺陷功能,其中,缺陷功能为历史测试数据中缺陷数大于或者等于预设缺陷值的功能;若待测试功能为缺陷功能,则基于待测试功能的缺陷生成时间确定第一补充测试内容。
可选的,基于待测试功能的缺陷生成时间确定第一补充测试内容,包括:基于缺陷生成时间,确定待测试功能是否为中间缺陷功能,其中,中间缺陷功能为历史测试工作中存在的缺陷功能的待测试功能;若待测试功能为中间缺陷功能,则基于缺陷功能对应的测试场景和初始测试内容确定第一补充测试内容,其中,第一补充测试内容为初始测试内容中未包含的中间缺陷功能对应的测试场景;若待测试功能不为中间缺陷功能,则基于缺陷功能的生成因素确定中间测试场景,并基于中间测试场景和初始测试内容确定第一补充测试内容,其中,第一补充测试内容为初始测试内容中未包含的中间测试场景。
可选的,基于历史测试数据和初始测试内容,确定第二补充测试内容,包括:确定待测试功能是否为异常功能,其中,异常功能为历史测试数据中用户反馈的异常结果的数量大于或者等于预设异常值的功能;若待测试功能为异常功能,则基于异常功能对应的测试场景和初始测试内容确定第二补充测试内容,其中,第二补充测试内容为初始测试内容中未包含的异常功能对应的测试场景。
可选的,基于历史测试数据和初始测试内容,确定第三补充测试内容,包括:基于历史测试数据,确定阻塞参数;基于阻塞参数对应的测试场景和初始测试内容,确定第三补充测试内容,其中,第三补充测试内容为初始测试内容中未包含的阻塞参数对应的测试场景。
根据本发明的另一方面,提供了一种测试内容的确定装置,测试内容的确定装置用于实现本发明任一实施例中的测试内容的确定方法,该装置包括:
获取模块,用于确定待测试功能、待测试功能的初始测试内容和历史测试数据;
确定模块,用于基于历史测试数据和初始测试内容,确定待测试功能的补充测试内容;
执行模块,用于基于补充测试内容和初始测试内容,确定目标测试内容,其中,目标测试内容为补充测试内容与初始测试内容之和。
根据本发明的另一方面,提供了一种电子设备,该电子设备包括:
至少一个处理器;以及与至少一个处理器通信连接的存储器;
其中,存储器存储有可被至少一个处理器执行的计算机程序,计算机程序被至少一个处理器执行,以使至少一个处理器能够执行本发明任一实施例所述的测试内容的确定方法。
根据本发明的另一方面,提供了一种计算机可读存储介质,该计算机可读存储介质存储有计算机指令,计算机指令用于使处理器执行时实现本发明任一实施例所述的测试内容的确定方法。
本发明实施例的技术方案,通过确定待测试功能、待测试功能的初始测试内容和历史测试数据;基于历史测试数据和初始测试内容,确定待测试功能的补充测试内容;基于补充测试内容和初始测试内容,确定目标测试内容,其中,目标测试内容为补充测试内容与初始测试内容之和。本发明可以对待测试功能的历史测试数据进行分析和处理,并结合初始测试内容确定待测试功能的补充测试内容,补充测试内容为历史测试数据中存在但初始测试内容中不存在的风险测试项,以制定完整的测试内容,提升待测试功能的测试的全面性。解决了以立足于测试本身的风险测试标准确定测试内容,无法对软件测试的历史风险因素进行分析和处理,一些符合风险测试标准但实用性有限或者用户使用不满意的风险项无法被监测,风险测试内容的全面性较差,严重影响软件风险的测试准确度等问题。
应当理解,本部分所描述的内容并非旨在标识本发明的实施例的关键或重要特征,也不用于限制本发明的范围。本发明的其它特征将通过以下的说明书而变得容易理解。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明实施例一提供的一种测试内容的确定方法的流程示意图;
图2是本发明实施例二提供的一种测试内容的确定方法的流程示意图;
图3是本发明实施例三提供的一种测试内容的确定装置的结构示意图;
图4是本发明实施例四提供的一种电子设备的结构示意图。
具体实施方式
为了使本技术领域的人员更好地理解本发明方案,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分的实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本发明保护的范围。
需要说明的是,本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
实施例一
图1是本发明实施例一提供的一种测试内容的确定方法的流程示意图,本实施例可适用于基于历史风险数据补充待测软件应用/系统/功能的测试内容、结合历史风险数据确定待测软件应用/系统/功能的测试内容等情况,该方法可以由本发明提供的测试内容的确定装置来执行,该装置可以采用硬件和/或软件的形式实现,在一个具体的实施例中,该装置可以集成在电子设备中。以下实施例将以该装置集成在电子设备中为例进行说明,参考图1,该方法具体包括如下步骤:
S101、确定待测试功能、待测试功能的初始测试内容和历史测试数据。
其中,待测试功能可以理解为软件应用/系统中需要进行测试的功能,以银行系统为例,待测试功能包括登录、转账、余额查询、注册、更改关联信息等,初始测试内容可以理解为根据风险测试标准和测试人员的测试经验制定的测试内容,历史测试数据可以理解为历史测试资源库中待测试功能对应的测试内容,历史测试资源库可以理解为预设时间段内或者测试工作全生命周期内各待测试功能的测试用例、测试反馈信息等组成的资源集,本实施例对此不进行限定。
具体的,确定待测试功能、待测试功能的初始测试内容和历史测试数据可以理解为确定待测试功能的具体内容(例如,待测试功能是什么)、根据待测试功能的具体内容和风险测试标准确定初始测试内容、以及根据待测试功能的具体内容从历史测试资源库进行匹配,筛选出历史测试资源库中待测试功能对应的测试用例、测试反馈信息等历史测试数据。
这样设置的好处在于可以确定待测试功能全面的测试信息。
S102、基于历史测试数据和初始测试内容,确定待测试功能的补充测试内容。
其中,初始测试内容为基于待测试功能的测试内容制定规则确定的测试内容,测试内容制定规则可以理解为风险测试标准,补充测试内容可以理解为历史测试数据中未被初始测试内容覆盖的测试内容。
具体的,不同待测试功能的侧重点、覆盖项、功能实现途径和目的不同,因此,不同的待测试功能的测试内容制定规则/风险测试标准不同,初始测试内容可以理解为根据待测试功能的测试内容指令规则确定的对待测试功能的风险进行测试的测试场景、测试用例等内容。
示例性的,假设历史测试数据包括内容1、内容2和内容3,初始测试内容包括内容1、内容2和内容4,则补充测试内容为内容3。
这样设置的好处在于可以基于历史测试数据(主要是历史风险数据)对初始测试内容进行检测,筛选出初始测试内容中未包含的测试内容,以便补充待测试功能的风险测试内容。
S103、基于补充测试内容和初始测试内容,确定目标测试内容。
其中,目标测试内容为补充测试内容与初始测试内容之和。
示例性的,假设初始测试内容包括内容1、内容2和内容4,补充测试内容为内容3,则目标测试内容为内容1、内容2、内容3和内容4。
这样设置的好处在于可以将历史经验引入软件应用/系统的风险测试过程,保证待测试功能的风险测试的全面性。
本实施例的技术方案,通过确定待测试功能、待测试功能的初始测试内容和历史测试数据;基于历史测试数据和初始测试内容,确定待测试功能的补充测试内容;基于补充测试内容和初始测试内容,确定目标测试内容,其中,目标测试内容为补充测试内容与初始测试内容之和。本发明可以对待测试功能的历史测试数据进行分析和处理,并结合初始测试内容确定待测试功能的补充测试内容,补充测试内容为历史测试数据中存在但初始测试内容中不存在的风险测试项,以制定完整的测试内容,提升待测试功能的测试的全面性。解决了以立足于测试本身的风险测试标准确定测试内容,无法对软件测试的历史风险因素进行分析和处理,一些符合风险测试标准但实用性有限或者用户使用不满意的风险项无法被监测,风险测试内容的全面性较差,严重影响软件风险的测试准确度等问题。
实施例二
图2是本发明实施例二提供的一种测试内容的确定方法的流程示意图,本实施例可适用于基于历史风险数据补充待测软件应用/系统/功能的测试内容、结合历史风险数据确定待测软件应用/系统/功能的测试内容等情况,该方法可以由本发明提供的测试内容的确定装置来执行,该装置可以采用硬件和/或软件的形式实现,在一个具体的实施例中,该装置可以集成在电子设备中。以下实施例将以该装置集成在电子设备中为例进行说明,参考图2,该方法具体包括如下步骤:
S201、确定待测试功能、待测试功能的初始测试内容和历史测试数据。
本实施例中,待测试功能可以理解为软件应用/系统中需要进行测试的功能,以银行系统为例,待测试功能包括登录、转账、余额查询、注册、更改关联信息等,初始测试内容可以理解为根据风险测试标准和测试人员的测试经验制定的测试内容,历史测试数据可以理解为历史测试资源库中待测试功能对应的测试内容,历史测试资源库可以理解为预设时间段内或者测试工作全生命周期内各待测试功能的测试用例、测试反馈信息等组成的资源集,本实施例对此不进行限定。
具体的,确定待测试功能、待测试功能的初始测试内容和历史测试数据可以理解为确定待测试功能的具体内容、根据待测试功能的具体内容和风险测试标准确定初始测试内容、以及根据待测试功能的具体内容从历史测试资源库进行匹配,筛选出历史测试资源库中待测试功能对应的测试用例、测试反馈信息等历史测试数据。
进一步的,初始测试内容为基于待测试功能的测试内容制定规则确定的测试内容,测试内容制定规则可以理解为风险测试标准。不同待测试功能的侧重点、覆盖项、功能实现途径和目的不同,因此,不同的待测试功能的测试内容制定规则/风险测试标准不同,初始测试内容可以理解为根据待测试功能的测试内容指令规则确定的对待测试功能的风险进行测试的测试场景、测试用例等内容。
S202、基于历史测试数据和初始测试内容,确定第一补充测试内容、第二补充测试内容和第三补充测试内容。
历史测试数据中主要包括缺陷性数据、投诉性数据和阻塞性数据三类风险数据。缺陷性数据用于表示待测试功能是历史测试中存在很多缺陷的功能,根据“缺陷聚集性”理论可知,历史上的缺陷重灾区功能在当前版本测试过程中仍需要重点关注。投诉性数据用于表示待测试功能是客户投诉较多的功能,如果客户投诉的问题比较多,说明待测试功能之前的测试存在测试不充分的情况,需要在当前版本重点关注。阻塞性数据用于表示待测试功能会产生阻塞问题,阻塞性情况会导致测试进度受阻,因此,需要在当前测试过程中重点关注。
其中,历史测试数据中包含待测试功能的缺陷性数据、投诉性数据和阻塞性数据,第一补充测试内容可以理解为初始测试内容中未包含的缺陷性测试内容,第二补充测试内容可以理解为初始测试内容中未包含的投诉性测试内容,第三补充测试内容可以理解为初始测试内容中未包含的阻塞性测试内容。具体的,基于历史测试数据和初始测试内容确定第一补充测试内容、第二补充测试内容和第三补充测试内容可以理解为从历史测试数据中筛选出初始测试内容中未覆盖(包含)的待测试功能的缺陷性数据、投诉性数据和阻塞性数据。
S203、基于第一补充测试内容、第二补充测试内容和第三补充测试内容,确定补充测试内容。
其中,补充测试内容为第一补充测试内容、第二补充测试内容和第三补充测试内容之和。
示例性的,假设第一补充测试内容为测试场景1和测试场景3,第二补充测试内容为测试场景2和测试场景5,第三补充测试内容为测试场景4、测试场景6和测试场景7,则补充测试内容为测试场景1、测试场景2、测试场景3、测试场景4、测试场景5、测试场景6和测试场景7。
值得注意的是确定第一补充测试内容、第二补充测试内容和第三补充测试内容之前,会先对待测试功能进行检测,只有当待测试功能存在历史风险时才构建待测试功能的补充测试内容,若待测试功能没有历史风险则不需要构建补充测试内容。以缺陷性数据为例,若待测试功能不为缺陷功能或者初始测试内容中包含缺陷功能的测试场景,则不需要构建第一补充测试内容或者第一补充测试内容为空。
基于历史测试数据和初始测试内容,确定第一补充测试内容,包括:确定待测试功能是否为缺陷功能,其中,缺陷功能为历史测试数据中缺陷数大于或者等于预设缺陷值的功能;若待测试功能为缺陷功能,则基于待测试功能的缺陷生成时间确定第一补充测试内容。
其中,预设缺陷值可以理解为衡量待测试功能是否为缺陷功能的依据,若待测试功能的缺陷数小于预设缺陷值,则认为待测试功能不为缺陷功能,不需要补充缺陷测试场景;若待测试功能的缺陷数大于或者等于预设缺陷值,则认为待测试功能为缺陷功能,需要进一步确定是否补充缺陷测试场景,即需要基于待测试功能的缺陷生成时间确定第一补充测试内容。
预设缺陷值一般为历史测试数据中总缺陷数与功能数的商(即系统缺陷平均数),缺陷生成时间可以理解为权限产生的时间,用于判断缺陷是否为当前测试过程中产生的新缺陷,以确定缺陷对应的测试场景和测试用例的添加方式。具体的,若缺陷为当前测试过程产生的缺陷,则需要测试人员分析测试场景和编写测试用例,若缺陷为开发提测基础版本已经出现的缺陷,则直接调用开发提测基础版本使用的测试场景和测试用例。这样设置的好处在于可以缩短测试用例和测试场景的确定时间。
在一实施方式中,基于待测试功能的缺陷生成时间确定第一补充测试内容,包括:基于缺陷生成时间,确定待测试功能是否为中间缺陷功能,其中,中间缺陷功能为历史测试工作中存在的缺陷功能的待测试功能;若待测试功能为中间缺陷功能,则基于缺陷功能对应的测试场景和初始测试内容确定第一补充测试内容,其中,第一补充测试内容为初始测试内容中未包含的中间缺陷功能对应的测试场景;若待测试功能不为中间缺陷功能,则基于缺陷功能的生成因素确定中间测试场景,并基于中间测试场景和初始测试内容确定第一补充测试内容,其中,第一补充测试内容为初始测试内容中未包含的中间测试场景。
其中,中间缺陷功能表示待测试功能在之前的测试过程中以出现过该缺陷,该缺陷有已经编写好的测试用例和测试场景,直接添加即可。
具体的,当待测试功能不为中间缺陷功能时,需要分析该缺陷的产生原因是否与基础版本的修改相关,即是否因开发修改了基础版本导致缺陷无法收敛,若是,则需要对引起缺陷的因素(缺陷功能的生成因素)进行分析,并根据该因素增加测试场景(中间测试场景)。
基于中间测试场景和初始测试内容确定第一补充测试内容可以理解为将初始测试内容中未包含的中间测试场景确定为第一补充测试内容。
进一步的,若待测试功能既不是开发提测基础版本就出现的缺陷,也不是因开发修改了基础版本导致的缺陷,则引入探索式测试方法对该功能开展探索式测试,以确定该功能的缺陷测试场景。
基于历史测试数据和初始测试内容,确定第二补充测试内容,包括:确定待测试功能是否为异常功能,其中,异常功能为历史测试数据中用户反馈的异常结果的数量大于或者等于预设异常值的功能;若待测试功能为异常功能,则基于异常功能对应的测试场景和初始测试内容确定第二补充测试内容,其中,第二补充测试内容为初始测试内容中未包含的异常功能对应的测试场景。
其中,异常功能可以理解为被客户投诉较多的功能,异常结果可以理解为用户的投诉性信息,预设异常值可以理解为异常结果的评判标准,当待测试功能的历史测试数据中的异常结果大于或者等于预设异常值时,认为待测试功能是被客户投诉比较多的功能,需要针对性补充待测试功能被投诉的问题对应的测试场景。
具体的,基于异常功能对应的测试场景和初始测试内容确定第二补充测试内容可以理解为将初始测试内容中未包含的异常功能对应的测试场景确定为第二补充测试内容。
示例性的,若待测试功能为被客户投诉较多的功能,则分析出客户投诉的问题和投诉问题对应的投诉场景,进一步判断投诉场景在测试阶段是否被覆盖(初始测试内容中是否包含投诉场景),并确定测试阶段未覆盖的投诉场景为第二补充测试内容(即追溯遗漏的测试场景),以丰富投诉性问题的测试场景。
基于历史测试数据和初始测试内容,确定第三补充测试内容,包括:基于历史测试数据,确定阻塞参数;基于阻塞参数对应的测试场景和初始测试内容,确定第三补充测试内容,其中,第三补充测试内容为初始测试内容中未包含的阻塞参数对应的测试场景。
其中,阻塞参数可以理解为造成阻塞的因素。具体的,基于阻塞参数对应的测试场景和初始测试内容确定第三补充测试内容可以理解为将初始测试内容中未包含的阻塞参数的测试方式确定为第三补充测试内容。
示例性的,若待测试功能会产生阻塞问题,将对阻塞问题进行分析,确定造成阻塞问题的原因(即阻塞参数),并对每个阻塞参数的阻塞场景制定防控措施,防止同样的问题在新的项目和功能中再次发生,防止悲剧再度重演,第三补充测试内容可以理解为阻塞参数的阻塞场景和各阻塞场景的防控措施。
本发明提出了软件测试的三类历史风险,分别是历史测试就存在很多缺陷的功能、被客户投诉问题比较多的功能以及会导致阻塞测试活动的情况和问题,本发明能够根据每类不同的历史风险类别快速得到软件测试风险应对策略,同时将其对应的测试场景、测试用例、应对措施等信息补充至软件测试内容,以丰富软件测试的资源库,提升软件测试的全面性。
S204、基于补充测试内容和初始测试内容,确定目标测试内容。
其中,目标测试内容为补充测试内容与初始测试内容之和。
示例性的,假设初始测试内容包括测试场景1和测试场景4,补充测试内容包括测试场景2、测试场景3、测试场景5和测试场景6,则目标测试内容为测试场景1、测试场景2、测试场景3、测试场景4、测试场景5和测试场景6。
本实施例的技术方案,通过确定待测试功能、待测试功能的初始测试内容和历史测试数据;基于历史测试数据和初始测试内容,确定第一补充测试内容、第二补充测试内容和第三补充测试内容;基于第一补充测试内容、第二补充测试内容和第三补充测试内容,确定补充测试内容;基于补充测试内容和初始测试内容,确定目标测试内容,其中,目标测试内容为补充测试内容与初始测试内容之和。本发明可以对待测试功能的历史测试数据进行分析和处理,并结合初始测试内容确定待测试功能的补充测试内容,补充测试内容为历史测试数据中存在但初始测试内容中不存在的风险测试项,以制定完整的测试内容,提升待测试功能的测试的全面性。解决了以立足于测试本身的风险测试标准确定测试内容,无法对软件测试的历史风险因素进行分析和处理,一些符合风险测试标准但实用性有限或者用户使用不满意的风险项无法被监测,风险测试内容的全面性较差,严重影响软件风险的测试准确度等问题。
实施例三
图3是本发明实施例三提供的一种测试内容的确定装置的结构示意图。如图3所示,该装置包括:获取模块301、确定模块302和执行模块303。
获取模块301,用于确定待测试功能、待测试功能的初始测试内容和历史测试数据。
确定模块302,用于基于历史测试数据和初始测试内容,确定待测试功能的补充测试内容。
执行模块303,用于基于补充测试内容和初始测试内容,确定目标测试内容,其中,目标测试内容为补充测试内容与初始测试内容之和。
可选的,初始测试内容为基于待测试功能的测试内容制定规则确定的测试内容,历史测试数据为历史测试资源库中待测试功能对应的测试内容。
可选的,确定模块302,具体用于基于历史测试数据和初始测试内容,确定第一补充测试内容、第二补充测试内容和第三补充测试内容;基于第一补充测试内容、第二补充测试内容和第三补充测试内容,确定补充测试内容。
可选的,确定模块302,具体用于确定待测试功能是否为缺陷功能,其中,缺陷功能为历史测试数据中缺陷数大于或者等于预设缺陷值的功能;若待测试功能为缺陷功能,则基于待测试功能的缺陷生成时间确定第一补充测试内容。
可选的,确定模块302,具体用于基于缺陷生成时间,确定待测试功能是否为中间缺陷功能,其中,中间缺陷功能为历史测试工作中存在的缺陷功能的待测试功能;若待测试功能为中间缺陷功能,则基于缺陷功能对应的测试场景和初始测试内容确定第一补充测试内容,其中,第一补充测试内容为初始测试内容中未包含的中间缺陷功能对应的测试场景;若待测试功能不为中间缺陷功能,则基于缺陷功能的生成因素确定中间测试场景,并基于中间测试场景和初始测试内容确定第一补充测试内容,其中,第一补充测试内容为初始测试内容中未包含的中间测试场景。
可选的,确定模块302,具体用于确定待测试功能是否为异常功能,其中,异常功能为历史测试数据中用户反馈的异常结果的数量大于或者等于预设异常值的功能;若待测试功能为异常功能,则基于异常功能对应的测试场景和初始测试内容确定第二补充测试内容,其中,第二补充测试内容为初始测试内容中未包含的异常功能对应的测试场景。
可选的,确定模块302,具体用于基于历史测试数据,确定阻塞参数;基于阻塞参数对应的测试场景和初始测试内容,确定第三补充测试内容,其中,第三补充测试内容为初始测试内容中未包含的阻塞参数对应的测试场景。
本发明实施例所提供的测试内容的确定装置可执行本发明任意实施例所提供的测试内容的确定方法,具备执行方法相应的功能模块和有益效果。
实施例四
图4是本发明实施例四提供的一种电子设备的结构示意图。电子设备旨在表示各种形式的数字计算机,诸如,膝上型计算机、台式计算机、工作台、个人数字助理、服务器、刀片式服务器、大型计算机和其它适合的计算机。电子设备还可以表示各种形式的移动装置,诸如,个人数字处理、蜂窝电话、智能电话、可穿戴设备(如头盔、眼镜、手表等)和其它类似的计算装置。本文所示的部件、它们的连接和关系以及它们的功能仅仅作为示例,并且不意在限制本文中描述的和/或者要求的本发明的实现。
如图4所示,电子设备10包括至少一个处理器11,以及与至少一个处理器11通信连接的存储器,如只读存储器(ROM)12、随机存取存储器(也称随机访问存储器,RandomAccess Memory,RAM)13等,其中,存储器存储有可被至少一个处理器执行的计算机程序,处理器11可以根据存储在只读存储器(Read Only Memory,ROM)12中的计算机程序或者从存储单元18加载到随机存取存储器(RAM)13中的计算机程序,来执行各种适当的动作和处理。在RAM 13中,还可存储电子设备10操作所需的各种程序和数据。处理器11、ROM 12以及RAM13通过总线14彼此相连。输入/输出(I/O)接口15也连接至总线14。
电子设备10中的多个部件连接至I/O接口15,包括:输入单元16,例如键盘、鼠标等;输出单元17,例如各种类型的显示器、扬声器等;存储单元18,例如磁盘、光盘等;以及通信单元19,例如网卡、调制解调器、无线通信收发机等。通信单元19允许电子设备10通过诸如因特网的计算机网络和/或各种电信网络与其他设备交换信息/数据。
处理器11可以是各种具有处理和计算能力的通用和/或专用处理组件。处理器11的一些示例包括但不限于中央处理单元(CPU)、图形处理单元(GPU)、各种专用的人工智能(AI)计算芯片、各种运行机器学习模型算法的处理器、数字信号处理器(DSP)以及任何适当的处理器、控制器、微控制器等。处理器11执行上文所描述的各个方法和处理,例如测试内容的确定方法。
在一些实施例中,测试内容的确定方法可被实现为计算机程序,其被有形地包含于计算机可读存储介质,例如存储单元18。在一些实施例中,计算机程序的部分或者全部可以经由ROM 12和/或通信单元19而被载入和/或安装到电子设备10上。当计算机程序加载到RAM 13并由处理器11执行时,可以执行上文描述的测试内容的确定方法的一个或多个步骤。备选地,在其他实施例中,处理器11可以通过其他任何适当的方式(例如,借助于固件)而被配置为执行测试内容的确定方法。
本文中以上描述的系统和技术的各种实施方式可以在数字电子电路系统、集成电路系统、场可编程门阵列(FPGA)、专用集成电路(ASIC)、专用标准产品(ASSP)、芯片上系统的系统(SOC)、负载可编程逻辑设备(CPLD)、计算机硬件、固件、软件和/或它们的组合中实现。这些各种实施方式可以包括:实施在一个或者多个计算机程序中,该一个或者多个计算机程序可在包括至少一个可编程处理器的可编程系统上执行和/或解释,该可编程处理器可以是专用或者通用可编程处理器,可以从存储系统、至少一个输入装置和至少一个输出装置接收数据和指令,并且将数据和指令传输至该存储系统、该至少一个输入装置和该至少一个输出装置。
用于实施本发明的方法的计算机程序可以采用一个或多个编程语言的任何组合来编写。这些计算机程序可以提供给通用计算机、专用计算机或其他可编程数据处理装置的处理器,使得计算机程序当由处理器执行时使流程图和/或框图中所规定的功能/操作被实施。计算机程序可以完全在机器上执行、部分地在机器上执行,作为独立软件包部分地在机器上执行且部分地在远程机器上执行或完全在远程机器或服务器上执行。
在本发明的上下文中,计算机可读存储介质可以是有形的介质,其可以包含或存储以供指令执行系统、装置或设备使用或与指令执行系统、装置或设备结合地使用的计算机程序。计算机可读存储介质可以包括但不限于电子的、磁性的、光学的、电磁的、红外的或半导体系统、装置或设备,或者上述内容的任何合适组合。备选地,计算机可读存储介质可以是机器可读信号介质。机器可读存储介质的更具体示例会包括基于一个或多个线的电气连接、便携式计算机盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦除可编程只读存储器(EPROM或快闪存储器)、光纤、便捷式紧凑盘只读存储器(CD-ROM)、光学储存设备、磁储存设备或上述内容的任何合适组合。
为了提供与用户的交互,可以在电子设备上实施此处描述的系统和技术,该电子设备具有:用于向用户显示信息的显示装置(例如,CRT(阴极射线管)或者LCD(液晶显示器)监视器);以及键盘和指向装置(例如,鼠标或者轨迹球),用户可以通过该键盘和该指向装置来将输入提供给电子设备。其它种类的装置还可以用于提供与用户的交互;例如,提供给用户的反馈可以是任何形式的传感反馈(例如,视觉反馈、听觉反馈或者触觉反馈);并且可以用任何形式(包括声输入、语音输入或者、触觉输入)来接收来自用户的输入。
可以将此处描述的系统和技术实施在包括后台部件的计算系统(例如,作为数据服务器)或者包括中间件部件的计算系统(例如,应用服务器)或者包括前端部件的计算系统(例如,具有图形用户界面或者网络浏览器的用户计算机,用户可以通过该图形用户界面或者该网络浏览器来与此处描述的系统和技术的实施方式交互)或者包括这种后台部件、中间件部件或者前端部件的任何组合的计算系统中。可以通过任何形式或者介质的数字数据通信(例如,通信网络)来将系统的部件相互连接。通信网络的示例包括:局域网(LAN)、广域网(WAN)、区块链网络和互联网。
计算系统可以包括客户端和服务器。客户端和服务器一般远离彼此并且通常通过通信网络进行交互。通过在相应的计算机上运行并且彼此具有客户端-服务器关系的计算机程序来产生客户端和服务器的关系。服务器可以是云服务器,又称为云计算服务器或云主机,是云计算服务体系中的一项主机产品,以解决了传统物理主机与VPS服务中,存在的管理难度大,业务扩展性弱的缺陷。
应该理解,可以使用上面所示的各种形式的流程,重新排序、增加或删除步骤。例如,本发明中记载的各步骤可以并行地执行也可以顺序地执行也可以不同的次序执行,只要能够实现本发明的技术方案所期望的结果,本文在此不进行限制。
上述具体实施方式,并不构成对本发明保护范围的限制。本领域技术人员应该明白的是,根据设计要求和其他因素,可以进行各种修改、组合、子组合和替代。任何在本发明的精神和原则之内所作的修改、等同替换和改进等,均应包含在本发明保护范围之内。
Claims (10)
1.一种测试内容的确定方法,其特征在于,包括:
确定待测试功能、所述待测试功能的初始测试内容和历史测试数据;
基于所述历史测试数据和所述初始测试内容,确定所述待测试功能的补充测试内容;
基于所述补充测试内容和所述初始测试内容,确定目标测试内容,其中,所述目标测试内容为所述补充测试内容与所述初始测试内容之和。
2.根据权利要求1所述的方法,其特征在于,所述初始测试内容为基于所述待测试功能的测试内容制定规则确定的测试内容,所述历史测试数据为历史测试资源库中所述待测试功能对应的测试内容。
3.根据权利要求1所述的方法,其特征在于,所述基于所述历史测试数据和所述初始测试内容,确定所述待测试功能的补充测试内容,包括:
基于所述历史测试数据和所述初始测试内容,确定第一补充测试内容、第二补充测试内容和第三补充测试内容;
基于所述第一补充测试内容、所述第二补充测试内容和所述第三补充测试内容,确定所述补充测试内容。
4.根据权利要求3所述的方法,其特征在于,所述基于所述历史测试数据和所述初始测试内容,确定第一补充测试内容,包括:
确定所述待测试功能是否为缺陷功能,其中,所述缺陷功能为所述历史测试数据中缺陷数大于或者等于预设缺陷值的功能;
若所述待测试功能为所述缺陷功能,则基于所述待测试功能的缺陷生成时间确定所述第一补充测试内容。
5.根据权利要求4所述的方法,其特征在于,所述基于所述待测试功能的缺陷生成时间确定所述第一补充测试内容,包括:
基于所述缺陷生成时间,确定所述待测试功能是否为中间缺陷功能,其中,所述中间缺陷功能为历史测试工作中存在的所述缺陷功能的待测试功能;
若所述待测试功能为所述中间缺陷功能,则基于所述缺陷功能对应的测试场景和所述初始测试内容确定所述第一补充测试内容,其中,所述第一补充测试内容为所述初始测试内容中未包含的所述中间缺陷功能对应的测试场景;
若所述待测试功能不为所述中间缺陷功能,则基于所述缺陷功能的生成因素确定中间测试场景,并基于所述中间测试场景和所述初始测试内容确定所述第一补充测试内容,其中,所述第一补充测试内容为所述初始测试内容中未包含的所述中间测试场景。
6.根据权利要求3所述的方法,其特征在于,所述基于所述历史测试数据和所述初始测试内容,确定第二补充测试内容,包括:
确定所述待测试功能是否为异常功能,其中,所述异常功能为所述历史测试数据中用户反馈的异常结果的数量大于或者等于预设异常值的功能;
若所述待测试功能为所述异常功能,则基于所述异常功能对应的测试场景和所述初始测试内容确定所述第二补充测试内容,其中,所述第二补充测试内容为所述初始测试内容中未包含的所述异常功能对应的测试场景。
7.根据权利要求3所述的方法,其特征在于,所述基于所述历史测试数据和所述初始测试内容,确定第三补充测试内容,包括:
基于所述历史测试数据,确定阻塞参数;
基于所述阻塞参数对应的测试场景和所述初始测试内容,确定所述第三补充测试内容,其中,所述第三补充测试内容为所述初始测试内容中未包含的所述阻塞参数对应的测试场景。
8.一种测试内容的确定装置,其特征在于,包括:
获取模块,用于确定待测试功能、所述待测试功能的初始测试内容和历史测试数据;
确定模块,用于基于所述历史测试数据和所述初始测试内容,确定所述待测试功能的补充测试内容;
执行模块,用于基于所述补充测试内容和所述初始测试内容,确定目标测试内容,其中,所述目标测试内容为所述补充测试内容与所述初始测试内容之和。
9.一种电子设备,其特征在于,所述电子设备包括:
至少一个处理器;以及与所述至少一个处理器通信连接的存储器;
其中,所述存储器存储有可被所述至少一个处理器执行的计算机程序,所述计算机程序被所述至少一个处理器执行,以使所述至少一个处理器能够执行权利要求1至7中任一所述的测试内容的确定方法。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有计算机指令,所述计算机指令用于使处理器执行时实现权利要求1至7中任一所述的测试内容的确定方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202311658644.5A CN117609086A (zh) | 2023-12-05 | 2023-12-05 | 一种测试内容的确定方法、装置、电子设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202311658644.5A CN117609086A (zh) | 2023-12-05 | 2023-12-05 | 一种测试内容的确定方法、装置、电子设备及存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN117609086A true CN117609086A (zh) | 2024-02-27 |
Family
ID=89953377
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202311658644.5A Pending CN117609086A (zh) | 2023-12-05 | 2023-12-05 | 一种测试内容的确定方法、装置、电子设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN117609086A (zh) |
-
2023
- 2023-12-05 CN CN202311658644.5A patent/CN117609086A/zh active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN113127305B (zh) | 异常检测方法及装置 | |
CN116226644A (zh) | 设备故障类型的确定方法、装置、电子设备及存储介质 | |
CN117609086A (zh) | 一种测试内容的确定方法、装置、电子设备及存储介质 | |
CN115576827A (zh) | 业务流程软件的性能测试方法、装置、设备及存储介质 | |
CN115437961A (zh) | 数据处理方法、装置、电子设备及存储介质 | |
CN116467161A (zh) | 一种应用的测试方法、装置、电子设备及存储介质 | |
CN115098405B (zh) | 软件产品的测评方法、装置、电子设备及存储介质 | |
CN117632741A (zh) | 回归测试用例库的确定方法、装置、电子设备及存储介质 | |
CN117632748A (zh) | 冒烟测试用例的确定方法、装置、电子设备及存储介质 | |
CN116150031A (zh) | 一种程序性能测试预警方法、装置、设备及存储介质 | |
CN116225390A (zh) | 一种软件开发文件的入库方法、装置、设备及介质 | |
CN117609064A (zh) | 单元测试方法、装置、电子设备及存储介质 | |
CN117609993A (zh) | 一种指标分析方法、装置、设备及存储介质 | |
CN116431505A (zh) | 一种回归测试方法、装置、电子设备、存储介质及产品 | |
CN117670236A (zh) | 一种基于移动端的待办流程审批方法、装置、设备及介质 | |
CN118132351A (zh) | 一种磁盘阵列性能测试方法、装置、设备及介质 | |
CN116991737A (zh) | 一种软件测试方法、系统、电子设备及存储介质 | |
CN115934553A (zh) | 一种软件资产质量验证的方法及装置 | |
CN116089499A (zh) | 基于kafka数据量的数据统计方法、装置及介质 | |
CN117271348A (zh) | 软件测试用例管理方法、装置及电子设备 | |
CN118171802A (zh) | 停电事件分析方法、装置、电子设备及存储介质 | |
CN117455684A (zh) | 一种数据处理方法、装置、电子设备、存储介质及产品 | |
CN115599689A (zh) | 一种测试逻辑的显示方法、装置、设备及存储介质 | |
CN115309578A (zh) | 微服务链路的异常定位方法、装置、设备及存储介质 | |
CN117453747A (zh) | 一种数据质量检测方法、装置、电子设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |