CN113010433A

CN113010433A - 一种持续集成测试方法、系统及相关设备

Info

Publication number: CN113010433A
Application number: CN202110352452.6A
Authority: CN
Inventors: 唐荣军
Original assignee: Ruiling Wireless Communication Technology Shenzhen Co ltd
Current assignee: Ruiling wireless Co.,Ltd.
Priority date: 2021-03-31
Filing date: 2021-03-31
Publication date: 2021-06-22

Abstract

本发明实施例提供了一种持续集成测试方法、系统及相关设备，基于软件代码改动对功能特性的影响关系，自动选择合理的测试用例，提高持续集成测试效率。本发明实施例方法包括：当被测试程序发生代码改动时，确定受代码改动影响的目标功能特性；根据功能特性与测试用例的映射关系查询所述目标功能特性对应的第一类测试用例，并将第一类测试用例中的测试用例加入测试集合；调用所述测试集合中的测试用例对代码改动之后的被测试程序进行测试。

Description

一种持续集成测试方法、系统及相关设备

技术领域

本发明涉及软件测试技术领域，尤其涉及一种持续集成测试方法、系统及相关设备。

背景技术

保证软件质量的同时缩短软件交付周期，正成为一个普遍的市场需求，实现这一需求的一个关键环节，就是持续集成测试。持续集成包括持续构建与持续测试两个主要环节，一个成功的持续集成测试要求快速的测试反馈，因而在持续集成测试过程中，测试用例的选择非常重要。

相关技术中，先通过测试用例的历史信息来计算该测试用例的风险值(测试用例检测到的缺陷越多，则风险值越高)，然后优先运行风险值更高的测试用例，而忽视了软件源代码的改动对选用测试用例的影响。例如，测试用例A对应的软件源代码是A1,测试用例B对应的软件源代码是B1，现在源代码B1发生了改动而源代码A1并没有改动，如果测试用例A的风险值比B要高，测试用例A被选择优先执行。显然，由于源代码A1并没有改动，测试用例A是没有必要执行的，如此会造成测试时间的浪费，测试效率低。

有鉴于此，有必要提出一种新的持续集成测试方法。

发明内容

本发明实施例提供了一种持续集成测试方法、系统及相关设备，基于软件代码改动对功能特性的影响关系，自动选择合理的测试用例，提高持续集成测试效率。

本发明实施例第一方面提供了一种持续集成测试方法，可包括：

当被测试程序发生代码改动时，确定受代码改动影响的目标功能特性；

根据功能特性与测试用例的映射关系查询所述目标功能特性对应的第一类测试用例，并将第一类测试用例中的测试用例加入测试集合；

调用所述测试集合中的测试用例对代码改动之后的被测试程序进行测试。

可选的，作为一种可能的实施方式，本发明实施例中的持续集成测试方法，还可以包括：

根据功能特性与使用场景的映射关系查询所述目标功能特性对应的目标使用场景；

根据使用场景与测试用例的映射关系查询所述目标使用场景对应的第二类测试用例，并将所述第二类测试用例中的测试用例加入所述测试集合。

可选的，作为一种可能的实施方式，本发明实施例中，调用所述测试集合中的测试用例对代码改动之后的被测试程序进行测试，可包括：

设置第一类测试用例和第二类测试用例的优先级，所述第一类测试用例的优先级高于所述第二类测试用例的优先级；

根据优先级顺序依次调用所述第一类测试用例和第二类测试用例对代码改动之后的被测试程序进行测试。

可选的，作为一种可能的实施方式，若执行所述第一类测试用例和第二类测试用例所需的时间之和T1小于预设测试时间T2，在调用所述测试集合中的测试用例之前，还可以包括：

在数据库中随机抽取除所述第一类测试用例和第二类测试用例之外的第三类测试用例；所述第三类测试用例的优先级低于所述第二类测试用例的优先级，且执行所述第三类测试用例的时间小于(T2-T1)；

将所述第三类测试用例中的测试用例加入所述测试集合。

可选的，作为一种可能的实施方式，本发明实施例中，所述确定受代码改动影响的目标功能特性，包括：

调用脚本程序对代码改动之后的被测试程序进行比对扫描，识别出被改动的函数；

根据函数与功能特性的映射关系查询所述被改动的函数对应的目标功能特性。

根据函数与组件的映射关系查询所述被改动的函数对应的目标组件；

根据组件与功能特性的映射关系查询所述目标组件对应的目标功能特性。

本发明实施例第二方面提供了一种持续集成测试装置，可包括：

检测模块、第一查询模块和调用模块；

所述检测模块，当被测试程序发生代码改动时，确定受代码改动影响的目标功能特性；

所述第一查询模块，根据功能特性与测试用例的映射关系查询所述目标功能特性对应的第一类测试用例，并将第一类测试用例中的测试用例加入测试集合；

调用模块，调用所述测试集合中的测试用例对代码改动之后的被测试程序进行测试。

可选的，作为一种可能的实施方式，本申请中的持续集成测试设备还可以包括：

第二查询模块，根据功能特性与使用场景的映射关系查询所述目标功能特性对应的目标使用场景；

第三查询模块，根据使用场景与测试用例的映射关系查询所述目标使用场景对应的第二类测试用例，并将所述第二类测试用例中的测试用例加入测试集合。

可选的，作为一种可能的实施方式，本申请中的调用模块可以用于：

可选的，作为一种可能的实施方式，若执行所述第一类测试用例和第二类测试用例所需的时间之和T1小于预设测试时间T2，本申请中的持续集成测试设备还可以包括：

第四查询模块，在数据库中随机抽取除所述第一类测试用例和第二类测试用例之外的第三类测试用例；所述第三类测试用例的优先级低于所述第二类测试用例的优先级，且执行所述第三类测试用例的时间小于(T2-T1)；将所述第三类测试用例中的测试用例加入所述测试集合。

可选的，作为一种可能的实施方式，本申请中的检测模块可以用于：

本发明实施例第三方面提供了一种持续集成测试设备，所述持续集成测试设备包括处理器，所述处理器用于执行存储器中存储的计算机程序时实现如第一方面及第一方面中任意一种可能的实施方式中的步骤。

本发明实施例第四方面提供了一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现如第一方面及第一方面中任意一种可能的实施方式中的步骤。

从以上技术方案可以看出，本发明实施例具有以下优点：

应用本申请实施例中所提供的技术方案，在持续集成测试的黑盒测试过程中，当被测试程序发生代码改动之后，可以先确定受代码改动影响的目标功能特性，然后查询目标功能特性对应的第一类测试用例，并将第一类测试用例中的测试用例加入测试集合，调用测试集合中的测试用例对代码改动之后的被测试程序进行测试。相对于相关技术，本申请基于软件代码改动对功能特性的影响关系，自动选择合理的测试用例，提高持续集成测试效率。

附图说明

图1为本发明实施例中一种持续集成测试方法的一个实施例示意图；

图2为本发明实施例中一种持续集成测试方法的另一个实施例示意图；

图3为本发明实施例中一种持续集成测试装置的一个实施例示意图；

图4为本发明实施例中一种持续集成测试设备的一个实施例示意图。

具体实施方式

为了使本技术领域的人员更好地理解本发明方案，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分的实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于本发明保护的范围。

本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”、“第四”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的术语在适当情况下可以互换，以便这里描述的实施例能够以除了在这里图示或描述的内容以外的顺序实施。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。

持续集成测试过程中，测试用例的选择非常重要。如果运行大量的测试用例，质量固然能够得到保证，但总的测试时间会被拉长，从而导致测试反馈周期过长；如果运行过少的测试用例，虽然测试反馈周期缩短了，但测试质量又得不到保证。因此，选择一个合适的测试用例集，既要保证质量，又要保证足够短的测试反馈时间，就成了一个非常有挑战性的问题。本申请在黑盒测试阶段，基于软件代码改动对功能特性的影响关系，自动选择合理的测试用例，提高持续集成测试效率。

为了便于理解，下面对本发明实施例中的具体流程进行描述，请参阅图1，本发明实施例中持续集成测试方法的一个实施例可包括：

S101、当被测试程序发生代码改动时，确定受代码改动影响的目标功能特性。

在持续集成测试的黑盒测试过程中，当被测试程序发生代码改动时，需要先确定受代码改动影响的目标功能特性。

示例性的，当被测试程序发生代码改动时，持续集成测试设备可以调用脚本程序对代码改动之后的被测试程序进行比对扫描，识别出被改动的函数；根据函数与功能特性的映射关系查询被改动的函数对应的目标功能特性。可选的，当被测试程序发生代码改动时，用户还可以根据改动的函数人工标定受影响的目标功能特性。

可选的，作为一种可能的实施方式，当某一功能特性比较复杂时，可以被拆分为多个组件。在识别出被改动的函数之后，持续集成测试设备可以先根据函数与组件的映射关系查询被改动的函数对应的目标组件，然后根据组件与功能特性的映射关系查询目标组件对应的目标功能特性。

S102、根据功能特性与测试用例的映射关系查询目标功能特性对应的第一类测试用例，并将第一类测试用例中的测试用例加入测试集合。

实际应用中，可以根据工程实践预先设置功能特性与测试用例的映射关系。在确定受代码改动影响的目标功能特性之后，持续集成测试设备可以根据功能特性与测试用例的映射关系查询目标功能特性对应的第一类测试用例，并将第一类测试用例中的测试用例加入测试集合。可以理解的是，测试集合中包括但不限于第一类测试用例中的测试用例。

需要理解的是，第一类测试用例是一个或多个测试用例的集合；测试集合是指，代码改动之后，下一次持续集成测试需要执行的所有测试用例形成的集合。

S103、调用测试集合中的测试用例对代码改动之后的被测试程序进行测试。

在确定第一类测试用例之后，可以调用测试集合中的测试用例对代码改动之后的被测试程序进行测试。

请参阅图2，本申请中持续集成测试方法的另一个实施例可包括：

S201、当被测试程序发生代码改动时，确定受代码改动影响的目标功能特性。

S202、根据功能特性与测试用例的映射关系查询目标功能特性对应的第一类测试用例，并将第一类测试用例中的测试用例加入测试集合。

本实施例中步骤S201至S202中描述的内容以上述图1所示的实施例中步骤S101至S102中描述的内容类似，此处不再赘述。

S203、根据功能特性与使用场景的映射关系查询目标功能特性对应的目标使用场景。

申请人注意到，实际应用中软件程序的功能特性可以在多种使用场景中发挥作用。例如，手机具有播放声音的特性，可能有如下使用场景：use case 1、使用蓝牙耳机播放声音；use case 2、用户使用免提播放声音；use case 3、用户先用免提播放声音，中途又切换到蓝牙耳机。为了提高测试的准确性，需要对多种使用场景分别设置测试用例。

在确定目标功能特性之后，持续集成测试设备可以根据功能特性与使用场景的映射关系查询目标功能特性对应的目标使用场景。

示例性的，如下表1所示的功能特性与使用场景的映射关系表，当功能特性1为目标功能特性时，可以确定目标使用场景为Use Case 1。

ID	功能特性	Use case编号
			1	功能特性1	Use Case 1
2	功能特性2	Use Case 1
			3	功能特性3	Use Case 2
4	功能特性4	Use Case 2
			5	功能特性5	Use Case 2

表1

S204、根据使用场景与测试用例的映射关系查询目标使用场景对应的第二类测试用例，并将第二类测试用例中的测试用例加入测试集合。

实际应用中，可以根据工程实践预先设置使用场景与测试用例的映射关系。在确定受代码改动影响的使用场景之后，持续集成测试设备可以根据使用场景与测试用例的映射关系查询目标使用场景对应的第二类测试用例，并将第二类测试用例中的测试用例加入测试集合。

示例性的，如下表2所示的使用场景与使用场景的映射关系表，当由表1确定目标使用场景为Use Case 1时，可以进一步确定第二类测试用例为测试用例41与测试用例43。

ID	Use Case编号	测试用例编号
			1	Use Case 1	测试用例41，测试用例43
2	Use Case 2	测试用例42，测试用例47
			3	Use Case 3	测试用例44

表2

S205、调用测试集合中的测试用例对代码改动之后的被测试程序进行测试。

在确定测试集合之后，持续集成测试设备可以调用所述测试集合中的测试用例对代码改动之后的被测试程序进行测试。

可选的，当测试集合中包含第一类测试用例和第二类测试用例时，调用测试集合中的测试用例对代码改动之后的被测试程序进行测试，可以包括：设置第一类测试用例和第二类测试用例的优先级，所述第一类测试用例的优先级高于所述第二类测试用例的优先级；根据优先级顺序依次调用所述第一类测试用例和第二类测试用例对代码改动之后的被测试程序进行测试。

可选的，作为一种可能的实施方式，在上述步骤S205之前，若执行所述第一类测试用例和第二类测试用例所需的时间之和T1小于预设测试时间T2，为了不浪费测试时间，可以在调用所述测试集合中的测试用例之前，还可以：在数据库中随机抽取除所述第一类测试用例和第二类测试用例之外的第三类测试用例，使得执行所述第三类测试用例的时间小于(T2-T1)。其中，第三类测试用例的优先级低于所述第二类测试用例的优先级，并将所述第三类测试用例中的测试用例加入测试集合。

请参阅图3，本申请还提供了一种持续集成测试设备，可包括检测模块301、第一查询模块302和调用模块303；

所述检测模块301，当被测试程序发生代码改动时，确定受代码改动影响的目标功能特性；

所述第一查询模块302，根据功能特性与测试用例的映射关系查询所述目标功能特性对应的第一类测试用例，并将第一类测试用例中的测试用例加入测试集合；

调用模块303，调用所述测试集合中的测试用例对代码改动之后的被测试程序进行测试。

所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的设备和模块的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。

上面从模块化功能实体的角度对本发明实施例中的网图表编辑器进行了描述，请参阅图4，下面从硬件处理的角度对本发明实施例中的持续集成测试设备进行描述：

该持续集成测试设备1可以包括处理器10、存储器11、通信接口12和通信总线13。处理器10、存储器11、通信接口12均通过通信总线13完成相互间的通信。处理器10执行计算机程序时实现上述图1所示的持续集成测试方法实施例中的步骤，例如图1所示的步骤101至103。或者，处理器执行计算机程序时实现上述各装置实施例中各模块或单元的功能。

本发明的一些实施例中，处理器具体用于实现如下步骤：

在一种可能的实现方式中，存储器11可包括存储程序区和存储数据区，其中，存储程序区可存储操作系统，以及至少一个功能(比如屏幕截取功能、图片对比功能)所需的应用程序等；存储数据区可存储使用过程中所创建的数据，如图片数据、位置数据等。

此外，存储器11可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件或其他易失性固态存储器件。

通信接口12可以为通信模块的接口，用于与其他设备或者系统连接。

当然，需要说明的是，图4所示的结构并不构成对本申请实施例中持续集成测试设备的限定，在实际应用中持续集成测试设备可以包括比图4所示的更多或更少的部件，或者组合某些部件。

相应于上面的方法实施例，本申请实施例还提供了一种计算机可读存储介质，计算机可读存储介质上存储有计算机程序，计算机程序被处理器执行时实现上述界面元素定位方法的步骤。

本说明书中各个实施例采用递进的方式描述，每个实施例重点说明的都是与其它实施例的不同之处，各个实施例之间相同或相似部分互相参见即可。

专业人员还可以进一步意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、计算机软件或者二者的结合来实现，为了清楚地说明硬件和软件的可互换性，在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本申请的范围。

结合本文中所公开的实施例描述的方法或算法的步骤可以直接用硬件、处理器执行的软件模块，或者二者的结合来实施。软件模块可以置于随机存储器(RAM)、内存、只读存储器(ROM)、电可编程ROM、电可擦除可编程ROM、寄存器、硬盘、可移动磁盘、CD-ROM、或技术领域内所公知的任意其它形式的存储介质中。

以上所述，以上实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。

Claims

1.一种持续集成测试方法，其特征在于，包括：

2.根据权利要求1所述的方法，其特征在于，在调用所述测试集合中的测试用例之前，所述方法还包括：

3.根据权利要求2所述的方法，其特征在于，调用所述测试集合中的测试用例对代码改动之后的被测试程序进行测试，包括：

4.根据权利要求3所述的方法，其特征在于，若执行所述第一类测试用例和第二类测试用例所需的时间之和T1小于预设测试时间T2，在调用所述测试集合中的测试用例之前，所述方法还包括：

将所述第三类测试用例中的测试用例加入所述测试集合。

5.根据权利要求1至4中任一项所述的方法，其特征在于，所述确定受代码改动影响的目标功能特性，包括：

6.根据权利要求1至4中任一项所述的方法，其特征在于，所述确定受代码改动影响的目标功能特性，包括：

7.一种持续集成测试装置，其特征在于，包括检测模块、第一查询模块和调用模块；

8.根据权利要求7所述的装置，其特征在于，还包括：

9.一种持续集成测试设备，其特征在于，包括：

存储器，用于存储计算机程序；

处理器，用于执行所述计算机程序以实现如权利要求1至6任意一项所述持续集成测试方法的步骤。

10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现如权利要求1至6任意一项所述持续集成测试方法的步骤。