CN102521134B - 一种基于大型机的测试信息检测方法及装置 - Google Patents

Abstract

本发明提供一种基于大型机的测试信息检测方法及装置，该方法包括：获取包含程序版本信息、程序安装信息及程序测试信息的测试信息；将所述测试信息进行格式转换；根据所述测试信息的测试时间、程序最新版本的发布时间及统计时间检测格式转换后的所述测试信息的程序测试覆盖率；将所述测试覆盖率输出给终端用户。本发明实施例的有益效果在于，本发明可以根据程序的安装信息和测试信息，简单快速地识别出测试过程中未被测试覆盖的程序，有助于提高测试效率和测试覆盖率，从而提高软件质量。

Description

一种基于大型机的测试信息检测方法及装置

技术领域

本发明是关于大型机测试技术，特别是关于一种基于大型机的测试信息检测方法及装置。

背景技术

随着大型机的发展和应用规模的不断扩大，应用版本的测试规模越来越大，测试复杂度也越来越高。每个版本测试周期大约需要测试近5000个程序，涉及功能点几十万个。在测试过程中，随着补丁版本的不断发布，很多程序需要不断修改，所以需要回归测试的程序数量远远高于整个测试周期中发布修改的程序数量。现有的程序测试工作主要是先通过测试人员编写测试案例，然后通过测试人员发起交易的方式进行，这种测试方式的一个主要盲点是测试人员并不清楚交易与程序的对应关系，容易造成被测试程序的遗漏，即一些需要被测试的程序未被测试，降低了程序的可靠性。

举例来说，交易A可以实现两种交易行为，一是进行账户余额查询，二是进行账户转账操作。对应调用的程序可能也会有所不同，第一种行为对应的程序流程是程序a-＞程序b-＞程序c，而第二种行为对应的程序流程为程序a-＞程序d-＞程序e。如果版本修改了程序c和程序d，那么就意味着测试人员不能只是简单发起一次交易A就认为测试通过，而是需要确认两种交易行为都已经测试通过后才可以结束对交易A的测试。

还有一种情况更是增加了测试的复杂度，仍以交易A为例。假设t日发布了测试版本修改了程序c和程序d，测试人员在t+1日完成了交易A的两种交易行为测试，测试完成。但是在t+2日又发布了程序d的修改版本，如果在此之后不再对最新版本的程序d进行测试，那么就意味着程序d未被测试覆盖。

程序的测试覆盖率是衡量测试质量的一个重要指标，如何简单快速地发现测试过程中未被测试覆盖的程序，使测试人员在了解了相关信息后可及时调整测试案例或设计新的测试案例，以达到覆盖需要被测程序的目的，提高系统的可靠性，是测试过程中一个亟需解决的问题。

发明内容

本发明提供一种基于大型机的测试信息检测方法及装置，以提高测试效率和测试覆盖率。

为了实现上述目的，本发明提供一种基于大型机的测试信息检测方法，该方法包括：获取包含程序版本信息、程序安装信息及程序测试信息的测试信息；将所述测试信息进行格式转换；根据所述测试信息的测试时间、程序最新版本的发布时间及统计时间检测格式转换后的所述测试信息的程序测试覆盖率；将所述测试覆盖率输出给终端用户。

进一步地，所述程序版本信息包括：程序版本号、发布时间及发布内容。

进一步地，所述的程序安装信息包括：程序名、安装环境及安装时间。

进一步地，所述的程序测试信息包括：测试时间，测试环境，程序被调用次数。

进一步地，将所述测试信息进行格式转换，包括：将程序版本信息、程序安装信息及程序测试信息分别转化为可识别模式。

进一步地，所述的程序测试覆盖率包括：测试覆盖率及回归测试覆盖率。

进一步地，所述的测试覆盖率为：

进一步地，所述的回归测试覆盖率为：

为了实现上述目的，本发明还提供一种基于大型机的测试信息检测装置，该装置包括：信息获取单元：用于获取包含程序版本信息、程序安装信息及程序测试信息的测试信息；格式转换单元，用于将所述测试信息进行格式转换；覆盖率检测单元，用于根据所述测试信息的测试时间、程序最新版本的发布时间及统计时间检测格式转换后的所述测试信息的程序测试覆盖率；输出单元，用于将所述测试覆盖率输出给终端用户。

进一步地，所述的程序版本信息包括：程序版本号、发布时间及发布内容。

进一步地，所述的程序安装信息包括：程序名、安装环境及安装时间。

进一步地，所述的程序测试信息包括：测试时间，测试环境，程序被调用次数。

进一步地，所述的格式转换单元包括：版本信息转化模块，用于将程序版本信息转化为可识别模式；安装信息转化模块，用于将程序安装信息转化为可识别模式；测试信息转化模块，用于将程序测试信息分别转化为可识别模式。

进一步地，所述的程序测试覆盖率包括：测试覆盖率及回归测试覆盖率。

进一步地，所述的测试覆盖率为：

进一步地，所述的回归测试覆盖率为：

本发明实施例的有益效果在于，本发明可以根据程序的安装信息和测试信息，简单快速地识别出测试过程中未被测试覆盖的程序，有助于提高测试效率和测试覆盖率，从而提高软件质量；另外，本发明支持测试覆盖率统计的例行化，实现以天为单位的统计结果汇报；本发明同时支持测试覆盖率统计的实时性，实现率统计分析结果的实时汇报，进一步提高了信息反馈的时效性，促进测试效率的提高。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。在附图中：

图1为本发明实施例基于大型机的测试信息检测装置结构示意图；

图2为本发明实施例基于大型机的测试信息检测方法流程图。

具体实施方式

为使本发明实施例的目的、技术方案和优点更加清楚明白，下面结合附图对本发明实施例做进一步详细说明。在此，本发明的示意性实施例及其说明用于解释本发明，但并不作为对本发明的限定。

本发明的主要目的在于提供一种基于大型机的测试信息检测方法及装置，以便准确及时地了解程序测试情况的详细数据和信息，有效指导测试人员的案例编写工作、功能测试和回归测试工作，确保测试质量和效率，提高系统的可靠性。

为了更清楚的描述本发明，这里简单解释一下本发明涉及到的相关概念：

程序测试，是指对于新发布或修改的程序，需要通过输入不同的数据条件，测试其各个功能模块是否实现预设目标，程序执行的性能是否达到设定的标准。

回归测试，也属于程序测试，针对的对象是最新版本的程序，也就是说我们把程序第一次发版后经过的测试成为程序测试，而后每次发布新的版本再进行的测试都称之为回归测试。

程序测试覆盖率，包含了测试覆盖率以及回归测试覆盖率。测试覆盖率，指的是所有通过测试的程序数量占所有发布的程序总量的百分比。而回归测试覆盖率，指的是所有通过回归测试的程序数量占所有发布的程序总量的百分比。举例说明：程序A的发布日期为t日和t+2日，程序B的发布日期为t日，程序A和B均在t+1日进行了测试，那么通过程序测试的程序数量为2(程序A和程序B)，而通过回归测试的程序数量则为1(程序B)，因为程序A的最新版本(t+2日版本)并没有得到测试，所以不能算入回归测试覆盖范围上。因此可以看出，回归测试覆盖率才是真正决定测试质量的关键指标。

如图1所示，本发明提供一种基于大型机的测试信息检测装置，该装置包括：信息获取单元101，格式转换单元102，覆盖率检测单元103及输出单元104。

信息获取单元101用于获取包含程序版本信息、程序安装信息及程序测试信息的测试信息，包括各个测试环境的测试信息。信息获取单元101包含有多个测试信息收集引擎(AGENT)，部署于所有测试环境，信息收集引擎可以用于收集各个测试环境的程序测试信息，包括测试时间，测试环境，程序被调用次数等。

格式转换单元102用于将所述测试信息进行格式转换，如图1所示，格式转换单元102包括：版本信息转化模块106，安装信息转化模块107及测试信息转化模块108。

版本信息转化模块106用于将程序版本信息转化为覆盖率检测单元103可识别的模式。

程序版本信息一般会记录于版本信息管理系统中，或者用其他数据存储方式保存，包含了所有应用版本的发布信息，包括程序版本的发布信息、每个版本所包含的程序名、程序的版本号、程序实体、发布时间等信息。信息获取单元101可以从版本信息管理系统或其他数据存储器中获取程序版本信息。版本信息转化模块106对程序版本信息中相关的数据进行数据提取(相关的数据主要包括程序的版本号、程序名、发布时间等)，并将相关数据转化为本系统可识别的模式，供后续覆盖率检测单元103进行继续分析。

安装信息转化模块107用于将程序安装信息转化为覆盖率检测单元103可识别的模式。

程序安装信息一般会记录于版本信息管理系统中，或者用其他数据存储方式保存，程序安装信息主要包括：程序安装的环境、安装时间、安装过程记录等信息。信息获取单元101可以从版本信息管理系统或其他数据存储器中获取程序安装信息。安装信息转化模块107对其中的相关数据进行数据提取(相关的数据主要包括程序名、安装环境、安装时间)，并将相关数据转化为本系统可识别的模式，供后续覆盖率检测单元103进行继续分析。

测试信息转化模块108用于将程序测试信息分别转化为覆盖率检测单元103可识别的模式。

测试信息转化模块108，将信息获取单元101获取的程序测试信息转化为覆盖率检测单元103可识别的模式。程序测试信息主要内容包括：测试时间，测试环境，程序被调用次数等。测试信息转化模块108以信息获取单元101中的信息收集引擎收集到的数据为数据源，对程序测试信息中相关的数据进行数据提取(相关的数据包括程序名、测试环境、测试时间等)，并将相关数据转化为本系统可识别的模式，供后续覆盖率检测单元103进行继续分析。

覆盖率检测单元103为测试信息检测装置的核心数据处理单元，用于接收版本信息转化模块106，安装信息转化模块107及测试信息转化模块108传递的数据，进行分析统计，根据所述测试信息的测试时间、程序最新版本的发布时间及统计时间检测格式转换后的所述测试信息的程序测试覆盖率，序测试覆盖率包括：测试覆盖率及回归测试覆盖率。覆盖率检测单元103得到程序测试覆盖率及程序回归测试覆盖率，并将分析结果传递给输出单元104进行结果展示。输出单元104可以为显示器，为终端用户提供了展示界面。将之前分析得到的各类覆盖率数据以及未覆盖的程序清单展示给终端用户，并可支持用户进行简单的查询。

覆盖率检测单元103进行分析检测的原理如下：假设以当前时间为统计时间点，对于某一个参测程序来说，如果其测试时间小于统计时间点，那么该程序可以认为已经被测试覆盖，无需考虑最新版本的发布时间，可计入测试覆盖率的分子。而如果该程序的测试时间小于统计时间点并且大于程序最新版本的发布时间，那么该程序可以认为已经被回归测试覆盖，可计入回归测试覆盖率的分子。所有覆盖率的分母均为从版本测试周期开始截至统计时间点之间，所有发布过版本的程序个数，重复多次发版的程序将被计入且只能被计入一次。

核心统计方法如下：

假设当前系统时间为Current_T

测试覆盖率为：

回归测试覆盖率为：

K_i(a，t，e)表示已测试程序的信息，其中a：表示已测试程序的程序名；t：表示已测试程序的测试时间；e：表示已测试程序的测试环境。V_i(A，T，E)表示需要测试程序的安装信息，其中A：表示需要测试程序的程序名；T：表示需要测试程序的安装时间；E：表示需要测试程序的安装环境。

所述的装置还包括：数据存储模块105，与所述的覆盖率检测单元103相连接，用于存储格式转化后的程序版本信息、程序安装信息及程序测试信息，还可以用于存储检测到的测试覆盖率及回归测试覆盖率。

如图2所示，本发明提供一种基于大型机的测试信息检测方法，该方法包括：

步骤S201：获取包含程序版本信息、程序安装信息及程序测试信息的测试信息。

程序版本信息包括：程序版本号、发布时间及发布内容，程序安装信息包括：程序名、安装环境及安装时间，程序测试信息包括：测试时间，测试环境，程序被调用次数。程序版本信息及程序安装信息一般会记录于版本信息管理系统中，或者用其他数据存储方式保存。多个测试信息收集引擎(AGENT)部署于所有测试环境，可以用于收集各个测试环境的程序测试信息，包括测试时间，测试环境，程序被调用次数等。

步骤S202：将所述测试信息进行格式转换。将程序版本信息、程序安装信息及程序测试信息分别转化为可识别模式。

程序版本信息一般会记录于版本信息管理系统中，或者用其他数据存储方式保存，包含了所有应用版本的发布信息，包括程序版本的发布信息、每个版本所包含的程序名、程序的版本号、程序实体、发布时间等信息。步骤S202包括：对程序版本信息中相关的数据进行数据提取(相关的数据主要包括程序的版本号、程序名、发布时间等)，并将相关数据转化为本系统可识别的模式，供后续覆盖率检测单元103进行继续分析。

程序安装信息一般会记录于版本信息管理系统中，或者用其他数据存储方式保存，程序安装信息主要包括：程序安装的环境、安装时间、安装过程记录等信息。步骤S202还包括：对其中的相关数据进行数据提取(相关的数据主要包括程序名、安装环境、安装时间)，并将相关数据转化为本系统可识别的模式，供后续覆盖率检测单元103进行继续分析。

步骤S202还包括：对程序测试信息中相关的数据进行数据提取(相关的数据包括程序名、测试环境、测试时间等)，并将相关数据转化为本系统可识别的模式，供后续覆盖率检测单元103进行继续分析。

步骤S203：根据所述测试信息的测试时间、程序最新版本的发布时间及统计时间检测格式转换后的所述测试信息的程序测试覆盖率。序测试覆盖率包括：测试覆盖率及回归测试覆盖率。

在步骤S203中进行分析统计的原理如下：假设以当前时间为统计时间点，对于某一个参测程序来说，如果其测试时间小于统计时间点，那么该程序可以认为已经被测试覆盖，无需考虑最新版本的发布时间，可计入测试覆盖率的分子。而如果该程序的测试时间小于统计时间点并且大于程序最新版本的发布时间，那么该程序可以认为已经被回归测试覆盖，可计入回归测试覆盖率的分子。所有覆盖率的分母均为从版本测试周期开始截至统计时间点之间，所有发布过版本的程序个数，重复多次发版的程序将被计入且只能被计入一次。

核心统计方法如下：

假设当前系统时间为Current_T

测试覆盖率为：

回归测试覆盖率为：

K_i(a，t，e)表示已测试程序的信息，其中a：表示已测试程序的程序名；t：表示已测试程序的测试时间；e：表示已测试程序的测试环境。V_i(A，T，E)表示需要测试程序的安装信息，其中A：表示需要测试程序的程序名；T：表示需要测试程序的安装时间；E：表示需要测试程序的安装环境。

步骤S204：将所述测试覆盖率输出给终端用户。在步骤S204之后，需要将测试覆盖率传递给终端用户进行结果展示。将之前分析得到的各类覆盖率数据以及未覆盖的程序清单展示给终端用户，并可支持用户进行简单的查询。

在步骤S203之后，还需要将转化后的程序版本信息、程序安装信息及程序测试信息及检测到的程序测试覆盖率进行分类，并存储到数据库表中。

本发明实施例的有益效果在于，本发明可以根据程序的安装信息和测试信息，简单快速地识别出测试过程中未被测试覆盖的程序，有助于提高测试效率和测试覆盖率，从而提高软件质量；另外，本发明支持测试覆盖率统计的例行化，实现以天为单位的统计结果汇报；本发明同时支持测试覆盖率统计的实时性，实现率统计分析结果的实时汇报，进一步提高了信息反馈的时效性，促进测试效率的提高。

以上所述的具体实施例，对本发明的目的、技术方案和有益效果进行了进一步详细说明，所应理解的是，以上所述仅为本发明的具体实施例而已，并不用于限定本发明的保护范围，凡在本发明的精神和原则之内，所做的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (13)

1.一种基于大型机的测试信息检测方法，其特征在于，所述的方法包括：

获取包含程序版本信息、程序安装信息及程序测试信息的测试信息；

将所述测试信息进行格式转换；

根据所述测试信息的测试时间、程序最新版本的发布时间及统计时间检测格式转换后的所述测试信息的程序测试覆盖率；

将所述程序测试覆盖率输出给终端用户；

其中，所述的程序测试覆盖率包括：测试覆盖率及回归测试覆盖率，所述的回归测试覆盖率为：

其中，Current_T为当前系统时间，K_i(a,t,e)表示已测试程序的信息，其中a：表示已测试程序的程序名；t：表示已测试程序的测试时间；e：表示已测试程序的测试环境；V_i(A，T，E)表示需要测试程序的安装信息，其中A:表示需要测试程序的程序名；T：表示需要测试程序的安装时间；E：表示需要测试程序的安装环境。

2.根据权利要求1所述的方法，其特征在于，所述的程序版本信息包括：程序版本号、发布时间及发布内容。

3.根据权利要求1所述的方法，其特征在于，所述的程序安装信息包括：程序名、安装环境及安装时间。

4.根据权利要求1所述的方法，其特征在于，所述的程序测试信息包括：测试时间，测试环境，程序被调用次数。

5.根据权利要求1所述的方法，其特征在于，将所述测试信息进行格式转换，包括：将程序版本信息、程序安装信息及程序测试信息分别转化为可识别模式。

6.根据权利要求1所述的方法，其特征在于，所述的测试覆盖率为：

其中，Current_T为当前系统时间，K_i(a,t,e)表示已测试程序的信息，其中a：表示已测试程序的程序名；t：表示已测试程序的测试时间；e：表示已测试程序的测试环境；V_i(A，T，E)表示需要测试程序的安装信息，其中A:表示需要测试程序的程序名；T：表示需要测试程序的安装时间；E：表示需要测试程序的安装环境。

7.一种基于大型机的测试信息检测装置，其特征在于，所述的装置包括：

信息获取单元：用于获取包含程序版本信息、程序安装信息及程序测试信息的测试信息；

格式转换单元，用于将所述测试信息进行格式转换；

覆盖率检测单元，用于根据所述测试信息的测试时间、程序最新版本的发布时间及统计时间检测格式转换后的所述测试信息的程序测试覆盖率；

输出单元，用于将所述程序测试覆盖率输出给终端用户；

其中，所述的程序测试覆盖率包括：测试覆盖率及回归测试覆盖率，所述的回归测试覆盖率为：

其中，Current_T为当前系统时间，K_i(a,t,e)表示已测试程序的信息，其中a：表示已测试程序的程序名；t：表示已测试程序的测试时间；e：表示已测试程序的测试环境；V_i(A，T，E)表示需要测试程序的安装信息，其中A:表示需要测试程序的程序名；T：表示需要测试程序的安装时间；E：表示需要测试程序的安装环境。

8.根据权利要求7所述的装置，其特征在于，所述的装置还包括：数据存储模块，与所述的覆盖率检测单元相连接，用于存储格式转化后的程序版本信息、程序安装信息及程序测试信息。

9.根据权利要求7所述的装置，其特征在于，所述的程序版本信息包括：程序版本号、发布时间及发布内容。

10.根据权利要求7所述的装置，其特征在于，所述的程序安装信息包括：程序名、安装环境及安装时间。

11.根据权利要求7所述的装置，其特征在于，所述的程序测试信息包括：测试时间，测试环境，程序被调用次数。

12.根据权利要求7所述的装置，其特征在于，所述的格式转换单元包括：

版本信息转化模块，用于将程序版本信息转化为可识别模式；

安装信息转化模块，用于将程序安装信息转化为可识别模式；

测试信息转化模块，用于将程序测试信息分别转化为可识别模式。

13.根据权利要求7所述的装置，其特征在于，所述的测试覆盖率为：

其中，Current_T为当前系统时间，K_i(a,t,e)表示已测试程序的信息，其中a：表示已测试程序的程序名；t：表示已测试程序的测试时间；e：表示已测试程序的测试环境；V_i(A，T，E)表示需要测试程序的安装信息，其中A:表示需要测试程序的程序名；T：表示需要测试程序的安装时间；E：表示需要测试程序的安装环境。