CN112052162B - 回归测试案例的选定方法、装置 - Google Patents

回归测试案例的选定方法、装置 Download PDF

Info

Publication number
CN112052162B
CN112052162B CN202010816521.XA CN202010816521A CN112052162B CN 112052162 B CN112052162 B CN 112052162B CN 202010816521 A CN202010816521 A CN 202010816521A CN 112052162 B CN112052162 B CN 112052162B
Authority
CN
China
Prior art keywords
test case
test
attribute
historical
current
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010816521.XA
Other languages
English (en)
Other versions
CN112052162A (zh
Inventor
张吉
罗玲
朱捷
刘晶
赵翔
李友军
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nari Technology Co Ltd
NARI Nanjing Control System Co Ltd
Original Assignee
Nari Technology Co Ltd
NARI Nanjing Control System Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nari Technology Co Ltd, NARI Nanjing Control System Co Ltd filed Critical Nari Technology Co Ltd
Priority to CN202010816521.XA priority Critical patent/CN112052162B/zh
Publication of CN112052162A publication Critical patent/CN112052162A/zh
Application granted granted Critical
Publication of CN112052162B publication Critical patent/CN112052162B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/36Preventing errors by testing or debugging software
    • G06F11/3668Software testing
    • G06F11/3672Test management
    • G06F11/3688Test management for test execution, e.g. scheduling of test suites
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/36Preventing errors by testing or debugging software
    • G06F11/3668Software testing
    • G06F11/3672Test management
    • G06F11/3684Test management for test design, e.g. generating new test cases

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Quality & Reliability (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

本发明公开了一种回归测试案例的选定方法、装置,所述方法包括:依据预设的测试案例属性,记录历史测试案例库中历史测试案例的属性测试数值;基于当前测试案例的类型,采用多参考量综合计算当前测试案例的属性数值,并且分配属性权重;所述参考量采用以下至少一种方式计算得到:需求分析、模块功能交互、历史测试案例模块问题分析、冒烟测试;依据属性权重和属性数值,计算当前测试案例与历史测试案例之间的匹配度;按照匹配度选定当前测试案例,并进行优先级排序。采用上述技术方案,可以实现全面地、动态地对测试案例优先级进行甄别,提升测试案例的利用率和覆盖率。

Description

回归测试案例的选定方法、装置
技术领域
本发明涉及软件测试领域,尤其涉及回归测试案例的选定方法、装置。
背景技术
随着信息技术的不断发展,软件产品的质量变得越来越重要。
现有技术中,通常采用回归测试案例进行软件测试。特别是电力信息系统规模庞大,有许多业务应用软件系统需要自行开发和测试,回归测试是保证软件质量的重要手段。
然而,存在的问题有回归测试面临测试案例较多、优先级难以排序等难题,造成测试工作量大、测试周期长,同时通过单一方面对测试案例进行分析,未综合考虑各种因素,整体回归测试效率提升不显著。
发明内容
发明目的:本发明旨在提供一种回归测试案例的选定方法、装置,实现全面地、动态地对测试案例优先级进行甄别,提升测试案例的利用率和覆盖率。
技术方案:本发明提供一种回归测试案例的选定方法,包括:依据预设的测试案例属性,记录历史测试案例库中历史测试案例的属性测试数值;基于当前测试案例的类型,采用多参考量综合计算当前测试案例的属性数值,并且分配属性权重;所述参考量采用以下至少一种方式计算得到:需求分析、模块功能交互、历史测试案例模块问题分析、冒烟测试;依据属性权重和属性数值,计算当前测试案例与历史测试案例之间的匹配度;按照匹配度选定当前测试案例,并进行优先级排序。
具体的,所述预设的测试案例属性包括以下至少一种:应用模块、录波参数、打印信息参数、液晶显示参数。
具体的,所述历史测试案例为用于基线版本软件测试的测试案例。
具体的,所述需求分析包括:确定测试的目标功能;应用当前测试案例,分析目标功能的输入和输出;分析全局输入和输出。
具体的,所述模块功能交互包括:应用当前测试案例,按照与电力二次设备的应用模块修改的关联程度,分配属性权重。
具体的,所述历史测试案例模块问题分析包括:对历史测试案例的模块问题进行分类,采用测试案例区间判别法定位模块问题所属测试案例类别;应用当前测试案例,将模块问题与当前测试案例进行关联,结合模块问题严重等级和当前测试案例产生的缺陷计数分配属性权重。
具体的,所述冒烟测试包括:对用于新功能的当前测试案例分配最低的属性权重;在应用当前测试案例过程中,若验证当前测试案例的有效性后,提升分配的属性权重。
具体的,采用以下公式算当前测试案例与历史测试案例之间的匹配度:
Figure BDA0002632928220000021
其中,n表示历史测试案例库中历史测试案例的数量,i表示第i个历史测试案例,n+1表示当前测试案例,m表示测试案例属性的数量,j表示第j个属性,A(i,j)表示第i个案例的第j个属性的数值,δ(j)表示第j个属性的权重,S(n+1,i)表示当前测试案例与第i个历史测试案例之间的匹配度。
具体的,按照匹配度由高至低选定预设数量的当前测试案例,并进行优先级排序;将选定的当前测试案例录入历史测试案例库。
本发明还提供一种回归测试案例的选定装置,包括:记录单元、测试单元、匹配单元、选定单元,其中:所述记录单元,用于依据预设的测试案例属性,记录历史测试案例库中历史测试案例的属性测试数值;所述测试单元,用于基于当前测试案例的类型,采用多参考量综合计算当前测试案例的属性数值,并且分配属性权重;所述参考量采用以下至少一种方式计算得到:需求分析、模块功能交互、历史测试案例模块问题分析、冒烟测试;所述匹配单元,用于依据属性权重和属性数值,计算当前测试案例与历史测试案例之间的匹配度;所述选定单元,用于按照匹配度选定当前测试案例,并进行优先级排序。
有益效果:与现有技术相比,本发明具有如下显著优点:将需求分析、模块功能交互、历史测试案例模块问题分析、冒烟测试综合进行测试评价,对各个测试案例属性分配权重,实现全面地对测试案例优先级的甄别,提升测试案例的利用率和覆盖率,减少测试工作量,缩短测试周期,提升回归测试效率。
附图说明
图1为本发明提供的回归测试案例的选定方法的流程示意图。
具体实施方式
下面结合附图对本发明的技术方案作进一步说明。
参阅图1,其为本发明提供的回归测试案例的选定方法的流程示意图,其中包括具体步骤。
步骤1,依据预设的测试案例属性,记录历史测试案例库中历史测试案例的属性测试数值。
在具体实施中,历史测试案例库是当完成相应的软件基线版本时所形成的,是用于对基线版本软件测试的所有测试案例。测试案例属性包括应用模块、录波参数、打印信息参数、液晶显示参数等,在测试案例进行回归测试后,每项测试案例属性都对应有测试数值,测试数值是可以体现应用软件功能、效率以及稳定性等指标的重要参数。通过测试案例属性的数值,可以评价该测试案例某项属性在回归测试中表现的优劣。
步骤2,基于当前测试案例的类型,采用多参考量综合计算当前测试案例的属性数值,并且分配属性权重。
本发明实施例中,所述参考量采用以下至少一种方式计算得到:需求分析、模块功能交互、历史测试案例模块问题分析、冒烟测试。
在具体实施中,采用多参考因素对当前测试案例进行评价,相比现有技术中的回归测试评价标准大多是假设缺陷严重程度相同或者测试成本相同,具有片面性,或者未考虑在回归测试中未被满足的测试需求集在不断变化,相应的测试案例的优先级也应当动态调整,本发明实施例可以实现全面地、动态地对测试案例优先级进行甄别,提升测试案例的利用率和覆盖率。
本发明实施例中,所述需求分析包括:确定测试的目标功能;应用当前测试案例,分析目标功能的输入和输出;分析全局输入和输出。
在具体实施中,需求分析可以按照相关应用软件需求规格说明书明确测试对象,也即明确测试的目标,从单个独立的功能着手,处理单个独立的功能的输入和输出,分析其业务流程从而扩展到全局的输入和输出。需求分析是从全局分析,细化原始需求、挖掘客户的隐性需求。在需求分析过程中,如果某项测试案例属性的需求程度较高,则分配的属性权重也相应的较高。
本发明实施例中,所述模块功能交互包括:应用当前测试案例,按照与电力二次设备的应用模块修改的关联程度,分配属性权重。
在具体实施中,模块功能交互分析是建立电力二次设备采用分层架构之上,电力二次设备采用面向对象思想设计,以元件来封装应用模块的操作及数据,元件既是功能划分的单位又是代码重用的单位。电力二次设备的应用模块可分为事件记录、录波、横向/纵向显示人机接口、网络103通信、IEC61850通信、串口/网络打印等提供信号交换分配、事件驱动等模块。按照与电力二次设备的应用模块修改的关联程度,分配属性权重,关联程度越高,分配的属性权重也相应的较高。
本发明实施例中,所述历史测试案例模块问题分析包括:对历史测试案例的模块问题进行分类,采用测试案例区间判别法定位模块问题所属测试案例类别;应用当前测试案例,将模块问题与当前测试案例进行关联,结合模块问题严重等级和当前测试案例产生的缺陷计数分配属性权重。
在具体实施中,结合历史测试案例库中的模块问题统计数据,确定测试结果中的各类模块问题,将模块问题与测试案例进行关联,如果当前测试案例产生的模块问题较多且严重等级较高,表明该测试案例的利用率和覆盖率较高,分配的属性权重也可以相应的较高。
本发明实施例中,所述冒烟测试包括:对用于新功能的当前测试案例分配最低的属性权重;在应用当前测试案例过程中,若验证当前测试案例的有效性后,提升分配的属性权重。
在具体实施中,结合冒烟测试技术路线,对应用软件的新增功能验证的当前测试案例进行权重评价,对测试案例每个属性赋予不同的权重,并且可以提升核心属性的属性权重。基于冒烟测试对增量式当前测试案例的选择原则,因为新增的当前测试案例在测试开始之前,无法确定其有效性,所以将新增的当前测试案例选择历史测试案例库的模块统计加权降至最低,新增的当前测试案例在测试过程中,通过验证其有效性后,不断提升该当前测试案例相应的属性权重。
步骤3,依据属性权重和属性数值,可以计算当前测试案例与历史测试案例之间的匹配度。
本发明实施例中,采用以下公式算当前测试案例与历史测试案例之间的匹配度:
Figure BDA0002632928220000041
其中,n表示历史测试案例库中历史测试案例的数量,i表示第i个历史测试案例,n+1表示当前测试案例,m表示测试案例属性的数量,j表示第j个属性,A(i,j)表示第i个案例的第j个属性的数值,δ(j)表示第j个属性的权重,S(n+1,i)表示当前测试案例与第i个历史测试案例之间的匹配度。
步骤4,按照匹配度选定当前测试案例,并进行优先级排序。
本发明实施例中,按照匹配度由高至低选定预设数量的当前测试案例,并进行优先级排序;将选定的当前测试案例录入历史测试案例库。
在具体实施中,匹配度越高的当前测试案例则优先级越高,将优先级较高的当前测试案例录入历史测试案例库,录入的数量为预设数量,即可以由用户根据实际应用场景进行相应的设定。
在具体实施中,通过计算当前测试案例与历史测试案例之间的匹配度,动态设定当前测试案例的优先级排序,在后续的回归测试中可以应用优先级较高(也是与待测案例匹配度较高)的案例,而不是随机应用,这样可以有更大可能更快找到在当前测试案例中最合适的案例,从而减少测试工作量,缩短测试周期,提升回归测试效率。
本发明实施例中还提供一种回归测试案例的选定装置,包括:记录单元、测试单元、匹配单元、选定单元,其中:
所述记录单元,用于依据预设的测试案例属性,记录历史测试案例库中历史测试案例的属性测试数值;
所述测试单元,用于基于当前测试案例的类型,采用多参考量综合计算当前测试案例的属性数值,并且分配属性权重;所述参考量采用以下至少一种方式计算得到:需求分析、模块功能交互、历史测试案例模块问题分析、冒烟测试;
所述匹配单元,用于依据属性权重和属性数值,计算当前测试案例与历史测试案例之间的匹配度;
所述选定单元,用于按照匹配度选定当前测试案例,并进行优先级排序。
本发明实施例中,所述预设的测试案例属性包括以下至少一种:应用模块、录波参数、打印信息参数、液晶显示参数。
本发明实施例中,所述历史测试案例为用于基线版本软件测试的测试案例。
本发明实施例中,所述测试单元,用于进行需求分析,包括:确定测试的目标功能;应用当前测试案例,分析目标功能的输入和输出;分析全局输入和输出。
本发明实施例中,所述测试单元,用于进行模块功能交互,包括:应用当前测试案例,按照与电力二次设备的应用模块修改的关联程度,分配属性权重。
本发明实施例中,所述测试单元,用于进行历史测试案例模块问题分析,包括:对历史测试案例的模块问题进行分类,采用测试案例区间判别法定位模块问题所属测试案例类别;应用当前测试案例,将模块问题与当前测试案例进行关联,结合模块问题严重等级和当前测试案例产生的缺陷计数分配属性权重。
本发明实施例中,所述测试单元,用于进行冒烟测试,包括:对用于新功能的当前测试案例分配最低的属性权重;在应用当前测试案例过程中,若验证当前测试案例的有效性后,提升分配的属性权重。
本发明实施例中,所述匹配单元,用于采用以下公式算当前测试案例与历史测试案例之间的匹配度:
Figure BDA0002632928220000061
其中,n表示历史测试案例库中历史测试案例的数量,i表示第i个历史测试案例,n+1表示当前测试案例,m表示测试案例属性的数量,j表示第j个属性,A(i,j)表示第i个案例的第j个属性的数值,δ(j)表示第j个属性的权重,S(n+1,i)表示当前测试案例与第i个历史测试案例之间的匹配度。
本发明实施例中,所述选定单元,用于按照匹配度由高至低选定预设数量的当前测试案例,并进行优先级排序;将选定的当前测试案例录入历史测试案例库。

Claims (9)

1.一种回归测试案例的选定方法,其特征在于,包括:
依据预设的测试案例属性,记录历史测试案例库中历史测试案例的属性测试数值;
基于当前测试案例的类型,采用多参考量综合计算当前测试案例的属性数值,并且分配属性权重;所述参考量采用以下至少一种方式计算得到:需求分析、模块功能交互、历史测试案例模块问题分析、冒烟测试;
依据属性权重和属性数值,计算当前测试案例与历史测试案例之间的匹配度;采用以下公式算当前测试案例与历史测试案例之间的匹配度:
Figure FDA0003704926150000011
其中,n表示历史测试案例库中历史测试案例的数量,i表示第i个历史测试案例,n+1表示当前测试案例,m表示测试案例属性的数量,j表示第j个属性,A(i,j)表示第i个案例的第j个属性的数值,δ(j)表示第j个属性的权重,S(n+1,i)表示当前测试案例与第i个历史测试案例之间的匹配度;
按照匹配度选定当前测试案例,并进行优先级排序。
2.根据权利要求1所述的回归测试案例的选定方法,其特征在于,所述预设的测试案例属性包括以下至少一种:应用模块、录波参数、打印信息参数、液晶显示参数。
3.根据权利要求2所述的回归测试案例的选定方法,其特征在于,所述历史测试案例为用于基线版本软件测试的测试案例。
4.根据权利要求3所述的回归测试案例的选定方法,其特征在于,所述需求分析包括:
确定测试的目标功能;应用当前测试案例,分析目标功能的输入和输出;分析全局输入和输出。
5.根据权利要求3所述的回归测试案例的选定方法,其特征在于,所述模块功能交互包括:应用当前测试案例,按照与电力二次设备的应用模块修改的关联程度,分配属性权重。
6.根据权利要求3所述的回归测试案例的选定方法,其特征在于,所述历史测试案例模块问题分析包括:对历史测试案例的模块问题进行分类,采用测试案例区间判别法定位模块问题所属测试案例类别;应用当前测试案例,将模块问题与当前测试案例进行关联,结合模块问题严重等级和当前测试案例产生的缺陷计数分配属性权重。
7.根据权利要求3所述的回归测试案例的选定方法,其特征在于,所述冒烟测试包括:对用于新功能的当前测试案例分配最低的属性权重;在应用当前测试案例过程中,若验证当前测试案例的有效性后,提升分配的属性权重。
8.根据权利要求3所述的回归测试案例的选定方法,其特征在于,所述按照匹配度选定当前测试案例,并进行优先级排序,包括:
按照匹配度由高至低选定预设数量的当前测试案例,并进行优先级排序;
将选定的当前测试案例录入历史测试案例库。
9.一种回归测试案例的选定装置,其特征在于,包括:记录单元、测试单元、匹配单元、选定单元,其中:
所述记录单元,用于依据预设的测试案例属性,记录历史测试案例库中历史测试案例的属性测试数值;
所述测试单元,用于基于当前测试案例的类型,采用多参考量综合计算当前测试案例的属性数值,并且分配属性权重;所述参考量采用以下至少一种方式计算得到:需求分析、模块功能交互、历史测试案例模块问题分析、冒烟测试;
所述匹配单元,用于依据属性权重和属性数值,计算当前测试案例与历史测试案例之间的匹配度;采用以下公式算当前测试案例与历史测试案例之间的匹配度:
Figure FDA0003704926150000021
其中,n表示历史测试案例库中历史测试案例的数量,i表示第i个历史测试案例,n+1表示当前测试案例,m表示测试案例属性的数量,j表示第j个属性,A(i,j)表示第i个案例的第j个属性的数值,δ(j)表示第j个属性的权重,S(n+1,i)表示当前测试案例与第i个历史测试案例之间的匹配度;
所述选定单元,用于按照匹配度选定当前测试案例,并进行优先级排序。
CN202010816521.XA 2020-08-14 2020-08-14 回归测试案例的选定方法、装置 Active CN112052162B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010816521.XA CN112052162B (zh) 2020-08-14 2020-08-14 回归测试案例的选定方法、装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010816521.XA CN112052162B (zh) 2020-08-14 2020-08-14 回归测试案例的选定方法、装置

Publications (2)

Publication Number Publication Date
CN112052162A CN112052162A (zh) 2020-12-08
CN112052162B true CN112052162B (zh) 2022-09-23

Family

ID=73599032

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010816521.XA Active CN112052162B (zh) 2020-08-14 2020-08-14 回归测试案例的选定方法、装置

Country Status (1)

Country Link
CN (1) CN112052162B (zh)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109344048A (zh) * 2018-08-17 2019-02-15 中国平安人寿保险股份有限公司 一种测试方法、存储介质和服务器
CN109800169A (zh) * 2019-01-24 2019-05-24 拉扎斯网络科技(上海)有限公司 测试用例的获取方法、装置、可读存储介质和电子设备

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109344048A (zh) * 2018-08-17 2019-02-15 中国平安人寿保险股份有限公司 一种测试方法、存储介质和服务器
CN109800169A (zh) * 2019-01-24 2019-05-24 拉扎斯网络科技(上海)有限公司 测试用例的获取方法、装置、可读存储介质和电子设备

Also Published As

Publication number Publication date
CN112052162A (zh) 2020-12-08

Similar Documents

Publication Publication Date Title
CN106886485B (zh) 系统容量分析预测方法及装置
CN112100219B (zh) 基于数据库查询处理的报表生成方法、装置、设备和介质
CN106803799B (zh) 一种性能测试方法和装置
CN105095059A (zh) 一种自动化测试的方法和装置
CN107360026B (zh) 分布式消息中间件性能预测与建模方法
CN111105628A (zh) 一种停车场画像构建方法和装置
CN108268373A (zh) 自动化测试用例管理方法、装置、设备及存储介质
CN101430660A (zh) 一种软件性能测试时基于tps的压力模型分析方法
CN105868956A (zh) 一种数据处理方法及装置
KR20220115357A (ko) 어텐션 메커니즘 기반의 미래 수요 예측 데이터 생성방법 및 장치
CN115576834A (zh) 支撑故障还原的软件测试复用方法、系统、终端及介质
CN112052162B (zh) 回归测试案例的选定方法、装置
CN113742227A (zh) 一种软件测试过程的控制方法、装置、设备和介质
CN107844496B (zh) 统计信息输出方法及装置
CN112948262A (zh) 一种系统测试方法、装置、计算机设备和存储介质
LU505740B1 (en) Data monitoring method and system
CN111177640A (zh) 一种数据中心运维工作绩效评价系统
CN113743692B (zh) 业务风险评估方法、装置、计算机设备和存储介质
US20150149239A1 (en) Technology Element Risk Analysis
CN110399298A (zh) 一种测试方法及装置
CN112035366A (zh) 一种测试案例生成方法、装置及设备
CN117610970B (zh) 一种数据迁移工作的智能评估方法及系统
CN117453493B (zh) 大规模多数据中心的gpu算力集群监控方法及系统
CN116882724B (zh) 一种业务流程优化方案的生成方法、装置、设备及介质
CN113610644B (zh) 一种系统交易筛选方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant