CN110674044B - 功能自动化测试的覆盖率获取方法、系统、设备及介质 - Google Patents

Abstract

本发明公开了一种功能自动化测试的覆盖率获取方法、系统、设备及介质，所述覆盖率获取方法包括：获取一功能测试在一预设测试范围内所有测试用例的第一数量；获取所述预设测试范围内所有自动化用例的第二数量；获取自动化用例与测试用例的对应关系；根据所述对应关系对所述第二数量进行修正；根据修正后的第二数量和所述第一数量计算得到自动化用例的覆盖率。本发明有效避免由于测试用例与自动化用例单位不统一或测试范围不全导致的覆盖率计算误差，进而减少由于覆盖率不全导致的测试遗漏，进而提高功能测试的质量。

Description

功能自动化测试的覆盖率获取方法、系统、设备及介质

技术领域

本发明属于计算功能自动化覆盖率的统计领域，特别涉及一种功能自动化测试的覆盖率获取方法、系统、设备及介质。

背景技术

现有的自动化覆盖率统计，一般是停留在单元测试阶段统计行覆盖和语句覆盖，但在功能测试，没有一种有效的统计方式。一般地，会认为可以通过公式去计算覆盖率：自动化覆盖率＝自动化用例个数/测试用例个数，但这种计算方式不准确：原因之一是，自动化用例个数，跟测试用例个数单位不统一，自动化用例和测试用例可能是多对多的关系，即1个自动用例可能验证了多个测试用例包含的验证点，而1个测试用例的验证点也可能分布在多个自动化用例里面实现了其验证；另外一个原因是，测试用例个数并不是每次测试都是一样的，如果没有制定测试用例的范围，那么这些用例可能包含一些过期无效的用例，例如功能的迭代导致某些用例无效的情况，这种时候，计算出来的自动化覆盖率也是不准确的。

发明内容

本发明要解决的技术问题是为了克服现有技术中功能自动化覆盖率统计准确率低的缺陷，提供一种功能自动化测试的覆盖率获取方法、系统、设备及介质。

本发明是通过下述技术方案来解决上述技术问题：

一种功能自动化测试的覆盖率获取方法，所述覆盖率获取方法包括：

获取一功能测试在一预设测试范围内所有测试用例的第一数量；

获取所述预设测试范围内所有自动化用例的第二数量；

获取自动化用例与测试用例的对应关系；

根据所述对应关系对所述第二数量进行修正；

根据修正后的第二数量和所述第一数量计算得到自动化用例的覆盖率。

较佳地，所述对应关系包括1个自动化用例对应验证1个或多个测试用例，和/或，1个测试用例的验证点对应分布于1个或多个自动化用例中；

所述根据所述对应关系对所述第二数量进行修正的步骤具体包括：

根据所述对应关系获取自动化用例与测试用例的比例关系；

根据所述比例关系对所述第二数量进行修正。

较佳地，每个测试用例和每个自动化用例均包含有唯一识别号，所述获取自动化用例与测试用例的对应关系的步骤具体包括：

基于所述唯一识别号获取所述对应关系。

较佳地，所述获取一功能测试在一预设测试范围内所有测试用例的第一数量的步骤具体包括：

基于所述唯一识别号对所述测试用例进行去重处理；

根据去重处理后的测试用例获取所述第一数量；

所述获取所述预设测试范围内所有自动化用例的第二数量的步骤具体包括：

基于所述唯一识别号对所述自动化用例进行去重处理；

根据去重处理后的自动化用例获取所述第二数量；

和/或，所述根据修正后的第二数量和所述第一数量计算得到自动化用例的覆盖率的步骤之后，所述覆盖率获取方法还包括：

显示所述覆盖率。

一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现上述的功能自动化测试的覆盖率获取方法。

一种计算机可读存储介质，其上存储有计算机程序，所述程序被处理器执行时实现上述的功能自动化测试的覆盖率获取方法的步骤。

一种功能自动化测试的覆盖率获取系统，所述覆盖率获取系统包括数据获取模块、对应关系获取模块、数据修正模块和覆盖率计算模块；

所述数据获取模块用于获取一功能测试在一预设测试范围内所有测试用例的第一数量；

所述数据获取模块还用于获取所述预设测试范围内所有自动化用例的第二数量；

所述对应关系获取模块用于获取自动化用例与测试用例的对应关系；

所述数据修正模块用于根据所述对应关系对所述第二数量进行修正；

所述覆盖率计算模块用于根据修正后的第二数量和所述第一数量计算得到自动化用例的覆盖率。

较佳地，所述对应关系包括1个自动化用例对应验证1个或多个测试用例，和/或，1个测试用例的验证点对应分布于1个或多个自动化用例中；

所述数据修正模块用于根据所述对应关系获取自动化用例与测试用例的比例关系，并根据所述比例关系对所述第二数量进行修正。

较佳地，每个测试用例和每个自动化用例均包含有唯一识别号；

所述对应关系获取模块用于基于所述唯一识别号获取所述对应关系。

较佳地，所述数据获取模块包括去重单元；

所述去重单元用于基于所述唯一识别号对所述测试用例进行去重处理；

所述数据获取模块用于根据去重处理后的测试用例获取所述第一数量；

所述去重单元还用于基于所述唯一识别号对所述自动化用例进行去重处理；

所述数据获取模块还用于根据去重处理后的自动化用例获取所述第二数量；

和/或，所述覆盖率获取系统还包括显示模块，所述显示模块用于显示所述覆盖率。

本发明的积极进步效果在于：本发明有效避免由于测试用例与自动化用例单位不统一或测试范围不全导致的覆盖率计算误差，进而减少由于覆盖率不全导致的测试遗漏，进而提高功能测试的质量。

附图说明

图1为本发明实施例1的功能自动化测试的覆盖率获取方法的流程图。

图2为本发明实施例1的功能自动化测试的覆盖率获取方法中步骤40的流程图。

图3为本发明实施例1的功能自动化测试的覆盖率获取方法中步骤10的流程图。

图4为本发明实施例1的功能自动化测试的覆盖率获取方法中步骤20的流程图。

图5为本发明实施例2的电子设备的结构示意图。

图6为本发明实施例4的功能自动化测试的覆盖率获取系统的模块示意图。

具体实施方式

下面通过实施例的方式进一步说明本发明，但并不因此将本发明限制在所述的实施例范围之中。

实施例1

一种功能自动化测试的覆盖率获取方法，如图1所示，所述覆盖率获取方法包括：

步骤10、获取一功能测试在一预设测试范围内所有测试用例的第一数量；

步骤20、获取预设测试范围内所有自动化用例的第二数量；

步骤30、获取自动化用例与测试用例的对应关系；

步骤40、根据对应关系对第二数量进行修正；

步骤50、根据修正后的第二数量和第一数量计算得到自动化用例的覆盖率。

需要说明的是，所述的测试用例是为某个特殊目标而编制的一组测试输入、执行条件以及预期结果，以便测试某个程序路径或核实是否满足某个特定需求，所述的自动化用例，是自动化测试中的脚本。自动化测试是把以人为驱动的测试行为转化为机器执行的一种过程，具体地，自动化用例是指测试用例转化为机器执行的脚本。

其中，所述对应关系包括1个自动化用例对应验证1个或多个测试用例，和/或，1个测试用例的验证点对应分布于1个或多个自动化用例中，如图2所示，步骤40具体包括：

步骤401、根据对应关系获取自动化用例与测试用例的比例关系；

步骤402、根据比例关系对第二数量进行修正。

本实施例中，每个测试用例和每个自动化用例均包含有唯一识别号，自动化用例的唯一识别号关联对应的测试用例的唯一识别号，步骤30具体包括：

基于所述唯一识别号获取所述对应关系。

进一步的，本实施例中，如图3所示，步骤10具体包括：

步骤101、基于唯一识别号对测试用例进行去重处理；

步骤102、根据去重处理后的测试用例获取第一数量；

如图4所示，步骤20具体包括：

步骤201、基于唯一识别号对自动化用例进行去重处理；

步骤202、根据去重处理后的自动化用例获取第二数量；

另外，参见图1，步骤50之后，所述覆盖率获取方法还包括：

步骤60、显示覆盖率。

本实施例中，通过对自动化用例的数量的修正，有效避免由于测试用例与自动化用例单位不统一导致的覆盖率计算误差，进而减少由于覆盖率不全导致的测试遗漏，进而提高功能测试的质量。

实施例2

一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现实施例1所述的功能自动化测试的覆盖率获取方法。

图5为本实施例提供的一种电子设备的结构示意图。图5示出了适于用来实现本发明实施方式的示例性电子设备90的框图。图5显示的电子设备90仅仅是一个示例，不应对本发明实施例的功能和使用范围带来任何限制。

如图5所示，电子设备90可以以通用计算设备的形式表现，例如其可以为服务器设备。电子设备90的组件可以包括但不限于：至少一个处理器91、至少一个存储器92、连接不同系统组件(包括存储器92和处理器91)的总线93。

总线93包括数据总线、地址总线和控制总线。

存储器92可以包括易失性存储器，例如随机存取存储器(RAM)921和/或高速缓存存储器922，还可以进一步包括只读存储器(ROM)923。

存储器92还可以包括具有一组(至少一个)程序模块924的程序工具925，这样的程序模块924包括但不限于：操作系统、一个或者多个应用程序、其它程序模块以及程序数据，这些示例中的每一个或某种组合中可能包括网络环境的实现。

处理器91通过运行存储在存储器92中的计算机程序，从而执行各种功能应用以及数据处理。

电子设备90也可以与一个或多个外部设备94(例如键盘、指向设备等)通信。这种通信可以通过输入/输出(I/O)接口95进行。并且，电子设备90还可以通过网络适配器96与一个或者多个网络(例如局域网(LAN)，广域网(WAN)和/或公共网络，例如因特网)通信。网络适配器96通过总线93与电子设备90的其它模块通信。应当明白，尽管图中未示出，可以结合电子设备90使用其它硬件和/或软件模块，包括但不限于：微代码、设备驱动器、冗余处理器、外部磁盘驱动阵列、RAID(磁盘阵列)系统、磁带驱动器以及数据备份存储系统等。

应当注意，尽管在上文详细描述中提及了电子设备的若干单元/模块或子单元/模块，但是这种划分仅仅是示例性的并非强制性的。实际上，根据本申请的实施方式，上文描述的两个或更多单元/模块的特征和功能可以在一个单元/模块中具体化。反之，上文描述的一个单元/模块的特征和功能可以进一步划分为由多个单元/模块来具体化。

实施例3

一种计算机可读存储介质，其上存储有计算机程序，所述程序被处理器执行时实现实施例1所述的功能自动化测试的覆盖率获取方法的步骤。

其中，可读存储介质可以采用的更具体可以包括但不限于：便携式盘、硬盘、随机存取存储器、只读存储器、可擦拭可编程只读存储器、光存储器件、磁存储器件或上述的任意合适的组合。

在可能的实施方式中，本发明还可以实现为一种程序产品的形式，其包括程序代码，当所述程序产品在终端设备上运行时，所述程序代码用于使所述终端设备执行实现实施例1所述的功能自动化测试的覆盖率获取方法的步骤。

其中，可以以一种或多种程序设计语言的任意组合来编写用于执行本发明的程序代码，所述程序代码可以完全地在用户设备上执行、部分地在用户设备上执行、作为一个独立的软件包执行、部分在用户设备上部分在远程设备上执行或完全在远程设备上执行。

实施例4

一种功能自动化测试的覆盖率获取系统，如图6所示，所述覆盖率获取系统包括数据获取模块1、对应关系获取模块2、数据修正模块3和覆盖率计算模块4；

所述数据获取模块1用于获取一功能测试在一预设测试范围内所有测试用例的第一数量；

所述数据获取模块1还用于获取所述预设测试范围内所有自动化用例的第二数量；

所述对应关系获取模块2用于获取自动化用例与测试用例的对应关系；

所述数据修正模块3用于根据所述对应关系对所述第二数量进行修正；

所述覆盖率计算模块4用于根据修正后的第二数量和所述第一数量计算得到自动化用例的覆盖率。

需要说明的是，所述的测试用例是为某个特殊目标而编制的一组测试输入、执行条件以及预期结果，以便测试某个程序路径或核实是否满足某个特定需求，所述的自动化用例，是自动化测试中的脚本。自动化测试是把以人为驱动的测试行为转化为机器执行的一种过程，具体地，自动化用例是指测试用例转化为机器执行的脚本。

其中，所述对应关系包括1个自动化用例对应验证1个或多个测试用例，和/或，1个测试用例的验证点对应分布于1个或多个自动化用例中；

所述数据修正模块3用于根据所述对应关系获取自动化用例与测试用例的比例关系，并根据所述比例关系对所述第二数量进行修正。

本实施例中，每个测试用例和每个自动化用例均包含有唯一识别号，自动化用例的唯一识别号关联对应的测试用例的唯一识别号；

所述对应关系获取模块2用于基于所述唯一识别号获取所述对应关系。

进一步的，参见图6，所述数据获取模块1包括去重单元11；

所述去重单元11用于基于所述唯一识别号对所述测试用例进行去重处理；

所述数据获取模块1用于根据去重处理后的测试用例获取所述第一数量；

所述去重单元11还用于基于所述唯一识别号对所述自动化用例进行去重处理；

所述数据获取模块1还用于根据去重处理后的自动化用例获取所述第二数量；

另外，参见图6，所述覆盖率获取系统还包括显示模块5，所述显示模块5用于显示所述覆盖率。

本实施例中，通过对自动化用例的数量的修正，有效避免由于测试用例与自动化用例单位不统一导致的覆盖率计算误差，进而减少由于覆盖率不全导致的测试遗漏，进而提高功能测试的质量。

虽然以上描述了本发明的具体实施方式，但是本领域的技术人员应当理解，这仅是举例说明，本发明的保护范围是由所附权利要求书限定的。本领域的技术人员在不背离本发明的原理和实质的前提下，可以对这些实施方式做出多种变更或修改，但这些变更和修改均落入本发明的保护范围。

Claims (6)

1.一种功能自动化测试的覆盖率获取方法，其特征在于，所述覆盖率获取方法包括：

获取一功能测试在一预设测试范围内所有测试用例的第一数量；

获取所述预设测试范围内所有自动化用例的第二数量；

获取自动化用例与测试用例的对应关系；

根据所述对应关系对所述第二数量进行修正；

根据修正后的第二数量和所述第一数量计算得到自动化用例的覆盖率；

每个测试用例和每个自动化用例均包含有唯一识别号，所述获取自动化用例与测试用例的对应关系的步骤具体包括：

基于所述唯一识别号获取所述对应关系；

所述获取一功能测试在一预设测试范围内所有测试用例的第一数量的步骤具体包括：

基于所述唯一识别号对所述测试用例进行去重处理；

根据去重处理后的测试用例获取所述第一数量；

所述获取所述预设测试范围内所有自动化用例的第二数量的步骤具体包括：

基于所述唯一识别号对所述自动化用例进行去重处理；

根据去重处理后的自动化用例获取所述第二数量；

所述对应关系包括1个自动化用例对应验证1个或多个测试用例，和/或，1个测试用例的验证点对应分布于1个或多个自动化用例中；

所述根据所述对应关系对所述第二数量进行修正的步骤具体包括：

根据所述对应关系获取自动化用例与测试用例的比例关系；

根据所述比例关系对所述第二数量进行修正。

2.如权利要求1所述的功能自动化测试的覆盖率获取方法，其特征在于，所述根据修正后的第二数量和所述第一数量计算得到自动化用例的覆盖率的步骤之后，所述覆盖率获取方法还包括：

显示所述覆盖率。

3.一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现权利要求1至2任一项所述的功能自动化测试的覆盖率获取方法。

4.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述程序被处理器执行时实现权利要求1至2任一项所述的功能自动化测试的覆盖率获取方法的步骤。

5.一种功能自动化测试的覆盖率获取系统，其特征在于，所述覆盖率获取系统包括数据获取模块、对应关系获取模块、数据修正模块和覆盖率计算模块；

所述数据获取模块用于获取一功能测试在一预设测试范围内所有测试用例的第一数量；

所述数据获取模块还用于获取所述预设测试范围内所有自动化用例的第二数量；

所述对应关系获取模块用于获取自动化用例与测试用例的对应关系；

所述数据修正模块用于根据所述对应关系对所述第二数量进行修正；

所述覆盖率计算模块用于根据修正后的第二数量和所述第一数量计算得到自动化用例的覆盖率；

每个测试用例和每个自动化用例均包含有唯一识别号；

所述对应关系获取模块用于基于所述唯一识别号获取所述对应关系；

所述数据获取模块包括去重单元；

所述去重单元用于基于所述唯一识别号对所述测试用例进行去重处理；

所述数据获取模块用于根据去重处理后的测试用例获取所述第一数量；

所述去重单元还用于基于所述唯一识别号对所述自动化用例进行去重处理；

所述数据获取模块还用于根据去重处理后的自动化用例获取所述第二数量；

所述对应关系包括1个自动化用例对应验证1个或多个测试用例，和/或，1个测试用例的验证点对应分布于1个或多个自动化用例中；

所述数据修正模块用于根据所述对应关系获取自动化用例与测试用例的比例关系，并根据所述比例关系对所述第二数量进行修正。

6.如权利要求5所述的功能自动化测试的覆盖率获取系统，其特征在于，所述覆盖率获取系统还包括显示模块，所述显示模块用于显示所述覆盖率。