CN101188844A - 一种业务自动化的测试系统及其测试方法 - Google Patents

Abstract

本发明公开了一种业务自动化的测试系统及其测试方法，用于实现业务终端对基站系统进行自动化业务测试，其中该方法包括：测试用例设置步骤，用于通过客户端设置测试用例；测试用例调度步骤，用于通过测试用例调度服务器执行测试用例，将测试项发送给测试项调度服务器执行；测试项调度步骤，用于通过测试项调度服务器执行测试项，将关键字发送给关键字调度服务器执行；关键字调度步骤，用于通过关键字调度服务器执行关键字，将操作原语发送给终端控制器执行；业务测试步骤，用于通过终端控制器执行操作原语，完成业务终端对基站系统的自动化业务测试。本发明不会造成测试遗漏，使得测试更充分，提高了测试效率。

Description

一种业务自动化的测试系统及其测试方法

技术领域

本发明涉及通讯测试领域，特别是涉及一种业务自动化的测试系统及其测试方法。

背景技术

运营商为了赢得更多的用户，提高对网络的使用率，获取最大化的利益，不断的搜集挖掘用户的新需求，同时不断开发及引导用户的潜在需求，而这些新的需求都会转嫁给设备提供商的；针对运营商的这些需求，设备提供商需要做快速的反应，及时的满足运营商的需求，这样才能赢得运营商的信任，才能开拓更大的市场。

需求的不断更新意味着通讯设备的版本的功能不断的增加及更新，版本的修改牵一发而动全身，一个小的改动可能引起一系列的变动，怎样保证不断更新的版本的稳定及所有功能的正常一直以来是设备提供商面临的一个重大问题。为了保证版本的稳定和功能的正常，随着版本越来越庞大，功能越来越多，版本更新越来越频繁，测试验证时间越来越短，所以需要增加大量的测试人员和相应的测试设备，即便如此，由于测试人员的失误，往往导致版本的测试功能遗漏及测试不充分，使软件的故障遗漏出去。

测试人员进行业务测试时，除了会造成版本测试功能遗漏及测试不充分之外，还由于测试人员的测试工作简单重复，也使得测试效率低下。

发明内容

本发明所要解决的技术问题在于提供一种业务自动化的测试系统及其测试方法，用于解决现有技术中业务测试遗漏、不充分、测试效率低的问题。

为了实现上述目的，本发明提供了一种业务自动化的测试系统，用于实现业务终端对基站系统进行自动化业务测试，其特征在于，该测试系统包括：客户端、测试用例调度服务器、测试项调度服务器、关键字调度服务器、终端控制器；

所述测试用例调度服务器执行所述客户端设置的测试用例，根据调度将测试项发送给所述测试项调度服务器执行；

所述测试项调度服务器执行所述测试项，根据调度将关键字发送给所述关键字调度服务器执行；

所述关键字调度服务器执行所述关键字，根据调度将操作原语发送给所述终端控制器执行；

所述终端控制器执行所述操作原语，完成所述业务终端对所述基站系统的自动化业务测试。

所述的业务自动化的测试系统，其中，

所述关键字调度服务器还根据所述操作原语的执行结果及逻辑关系调度下一个操作原语，或返回所述关键字的执行结果至所述测试项调度服务器；和/或

所述测试项调度服务器还根据所述关键字的执行结果及逻辑关系调度下一个关键字，或返回所述测试项的执行结果至所述测试用例调度服务器；和/或

所述测试用例调度服务器还根据所述测试项的执行结果及逻辑关系调度下一个测试项，或返回所述测试用例是否执行成功的信息至所述客户端。

所述的业务自动化的测试系统，其中，所述终端控制器通过串口命令对所述业务终端进行控制。

所述的业务自动化的测试系统，其中，所述测试项/所述关键字/所述操作原语是以脚本形式实现，且以库的形式存在。

所述的业务自动化的测试系统，其中，所述业务包括语音业务、数据业务、补充业务、切换业务中的一项或多项。

为了实现上述目的，本发明还提供了一种利用所述测试系统实现业务自动化的测试方法，用于实现业务终端对基站系统进行自动化业务测试，其特征在于，该测试方法包括：

测试用例设置步骤，用于通过所述客户端设置测试用例；

测试用例调度步骤，用于通过所述测试用例调度服务器执行所述测试用例，根据调度将测试项发送给所述测试项调度服务器执行；

测试项调度步骤，用于通过所述测试项调度服务器执行所述测试项，根据调度将关键字发送给所述关键字调度服务器执行；

关键字调度步骤，用于通过所述关键字调度服务器执行所述关键字，根据调度将操作原语发送给所述终端控制器执行；

业务测试步骤，用于通过所述终端控制器执行所述操作原语，完成所述业务终端对所述基站系统的自动化业务测试。

所述的业务自动化的测试方法，其中，

所述测试项调度步骤中，进一步包括：所述测试项调度服务器通过所述测试项的接口，对所述测试项进行调用的步骤；

所述关键字调度步骤中，进一步包括：所述关键字调度服务器通过所述关键字的接口，对所述关键字进行调用的步骤；

业务测试步骤中，进一步包括：所述终端控制器通过所述操作原语的接口，对所述操作原语进行调用的步骤。

所述的业务自动化的测试方法，其中，所述测试用例调度步骤中，进一步包括：

所述测试用例调度服务器根据所述测试项的执行结果及逻辑关系调度下一个测试项，或直接返回所述测试用例是否执行成功的信息至所述客户端的步骤。

所述的业务自动化的测试方法，其中，所述测试项调度步骤中，进一步包括：

所述测试项调度服务器根据所述关键字的执行结果及逻辑关系调度下一个关键字，或返回所述测试项的执行结果至所述测试用例调度服务器的步骤。

所述的业务自动化的测试方法，其中，所述关键字调度步骤中，进一步包括：

所述关键字调度服务器根据所述操作原语的执行结果及逻辑关系调度下一个操作原语，或返回所述关键字的执行结果至所述测试项调度服务器的步骤。

本发明的有益技术效果：

本发明提供了一种业务自动化测试系统，模拟测试人员利用终端对系统所提供的各种业务进行测试，不会造成测试遗漏，使得测试更充分，避免人工重复简单的测试，大大提高了测试效率。

以下结合附图和具体实施例对本发明进行详细描述，但不作为对本发明的限定。

附图说明

图1为本发明的自动化测试系统整体框图；

图2为本发明的自动化测试系统的执行流程图。

具体实施方式

下面结合附图和具体实施方式对本发明的技术方案作进一步更详细的描述。

如图1所示，为本发明的自动化测试系统整体框图。整个自动化测试系统10用于被测试系统20进行自动化业务测试，自动化测试系统10主要包括：客户端101、测试用例调度服务器102、测试项调度服务器103、关键字调度服务器104、终端控制器105、业务终端106等几部分。被测试系统20为基站系统，主要包括基站收发信机BTS(Base Transceiver Station)201、基站控制器BSC(Base Station Control)202。

客户端101，负责测试用例的编写、测试用例顺序的调整、测试用例是否执行、测试用例的开始执行和停止等；

测试用例调度服务器102，负责调度测试用例，把测试项发送给测试项调度服务器103；根据测试项的返回结果，再根据逻辑关系调度下一个测试项，或者直接返回测试用例是否执行成功的信息给客户端101。

测试项调度服务器103，负责执行和调度测试项，根据逻辑关系把关键字发送给关键字调度服务器104进行执行；根据关键字返回的结果，再根据逻辑关系调度下一个关键字；或者返回测试项的执行结果至测试用例调度服务器102；

关键字调度服务器104，负责执行关键字，根据逻辑关系把操作原语发送给终端控制器105进行执行；根据操作原语返回的结果，再根据逻辑关系调度下一个操作原语，或者返回关键字的执行结果至测试项调度服务器103；

测试用例调度服务器102对测试用例的执行调度与关键字调度服务器104对关键字的执行调度是类似的。

终端控制器105，用于在执行操作原语时，直接通过串口命令对业务终端106进行控制和监控。

业务终端106，可以是手机终端，利用手机所提供的标准串口与计算机可以通讯。

自动化测试的过程也是对测试系统的操作原语、关键字、测试项等库的不断更新、不断完善的过程，自动化测试系统的测试过程其实就是自动化测试用例设计的过程。

在自动化测试系统10中，将用户对业务终端106的操作和对业务终端106的信息的查看封装成对业务终端106的一些操作原语，这些原语完成对业务终端106的最基本的操作和监控；例如，对业务终端106的按键操作、对业务终端106的呼叫操作、对业务终端106所处状态的查询、判断业务终端106是否收到或发送某条信令；

同时，还把操作原语封装成粒度大一些同时功能比较独立的一个关键字，例如，业务终端106完成一次主被叫的呼叫功能，首先是完成对主叫的起呼，同时需要判断被叫是否收到振铃来判断被叫是否寻呼成功；为了测试人员使用更简单方便，把关键字封装成在测试用例中经常使用的，功能独立并且可以在多个测试用例中共享的测试项；测试项的粒度可大可小，可以是单个关键字的封装，也可以是多个关键字的封装；例如，对多个业务终端106的多次循环呼叫，数据业务的一次完整数据下载过程的控制等。

在自动化测试系统10中，操作原语、关键字和测试项都以脚本的形式实现，可以方便增加操作原语、关键字和测试项之间的逻辑关系；其中操作原语、关键字、测试项对外提供入参和出参，测试人员只需要了解其接口就可以进行调用，而不用知道其内部是怎么实现的。

在自动化测试系统10中，操作原语、关键字和测试项都是开放式的，可以在以后使用中不断进行扩充和维护，都是以脚本的形式实现，在被测系统20的版本升级变动或者有新的测试用例时，可以修改或者增加相应的脚本，而自动化测试工具不做任何的修改；

另外，操作原语、关键字和测试项都以库的形式存在，在测试过程中，可以根据新的需求不断对库进行添加和更新。

对于新的需要自动化实现的测试用例，首先对这些测试用例进行分析，把其中功能类似的功能模块提取出来作为测试项的原始需求，尽量复用已经实现的测试项，对于新增的测试项，考虑其最大的复用性；同样对于新增的测试项，使用已有的或者新增的关键字来完成封装。

自动化测试系统10可以测试的业务内容主要与控制终端有关，使用不同的业务终端106，同时开发基于此业务终端106的驱动，就可以对此类业务进行测试，以CDMA系统为例进行说明，自动化测试系统10可以测试以下几种业务：

1)语音业务，完成语音的起呼、保持、挂断等操作，同时对终端所处的状态、使用的频点、信道等信息进行实时监控；

2)数据业务，完成数据业务的PPP建链、数据业务FTP的上传下载、ping包等业务，对数据速率的监控；

3)补充业务，完成系统提供的各种补充业务，如三方通话、呼叫等待等；

4)切换业务，可以监控终端的激活集、候选集、临界集等的变化，判断终端是否切换成功。

如图2所示，为本发明的自动化测试系统的执行流程图。

下面以补充业务中的无条件呼叫转移业务的自动化测试为例来说明自动化测试系统的实施，无条件呼叫转移业务的测试用例是按如下方式设计的：

a1)首先激活授权手机的无条件呼叫转移补充业务，其中呼叫转移到第二方手机；

a2)第三方手机呼叫授权手机，授权手机没有收到振铃消息；

a3)第二方手机收到振铃消息，说明呼叫转移成功；

a4)授权手机去激活无条件呼叫转移补充业务；

a5)第三方手机呼叫授权手机，授权手机收到振铃消息，说明没有呼叫转移；

a6)第二方手机没有收到振铃消息，所以再次证明授权手机去激活成功；

将上面的测试用例设置成自动化测试用例后的形式如下：

b1)授权手机模拟按键操作，去激活无条件呼叫转移补充业务；

b2)第三方手机呼叫授权手机；

b3)检测授权手机是否收到振铃的信令，如果收到，则测试用例失败，不用往下继续。

b4)检测第二方手机是否收到振铃的信令，如果收到，则接听手机并保持一段时间，如果没有收到振铃的叮咚信令，则测试用例失败，不用往下继续；如果步骤b3)不成立而步骤b4)成立，则说明呼叫转移成功；

b5)挂断第三方手机和第二方手机；

b6)授权手机模拟按键操作，去激活无条件呼叫转移补充业务；

b7)第三方手机呼叫授权手机；

b8)检测授权手机是否收到振铃的信令，如果未收到，则测试用例失败，不用往下继续。

b9)检测第二方手机是否收到振铃的信令，如果收到，则测试用例失败，说明去激活失败；如果步骤b3)成立而步骤b4)不成立，则说明去激活呼叫转移成功；

b10)挂断授权手机和第二方手机的呼叫，本测试用例完成。

其中，上述无条件转移呼叫是一个测试用例，同时本身也是一个不可拆分的测试项，其中模拟按键、语音呼叫、手机挂断、判断是否收到振铃消息都是关键字。

自动化测试系统10具体的执行过程是描述了一次的调度过程，上述的无条件呼叫前传业务是多次关键字的调度过程：

步骤S201，客户端101把测试用例发送给测试用例调度服务器102，测试用例调度服务器102对测试用例进行调度，把测试项发送给测试项调度服务器103；

步骤S202，测试项调度服务器103对测试项进行执行和调度，根据逻辑关系把关键字发送给关键字调度服务器104进行执行；

步骤S203，关键字调度服务器104执行关键字，根据逻辑关系把操作原语发送给终端控制器105进行执行；

步骤S204，终端控制器105对操作原语进行执行；终端控制器105把执行的结果返回给关键字调度服务器104；

步骤S205，关键字调度服务器104根据操作原语返回的结果，再根据逻辑关系调度下一个操作原语，或者返回关键字的执行结果；

步骤S206，测试项调度服务器103根据关键字返回的结果，再根据逻辑关系调度下一个关键字，或者返回测试项的执行结果；

步骤S207，测试用例调度服务器102根据测试项的返回结果，再根据逻辑关系调度下一个测试项，或者直接返回测试用例是否执行成功给客户端101。

本发明提供了一种业务自动化测试系统，模拟测试人员利用终端对系统提供的各种业务进行测试，实现了在无线通信系统领域中对基站系统进行业务测试，不会造成测试遗漏，使得测试更充分，避免了人工重复简单的测试，大大提高了测试效率。

当然，本发明还可有其他多种实施例，在不背离本发明精神及其实质的情况下，熟悉本领域的技术人员当可根据本发明作出各种相应的改变和变形，但这些相应的改变和变形都应属于本发明所附的权利要求的保护范围。

Claims (10)

1.一种业务自动化的测试系统，用于实现业务终端对基站系统进行自动化业务测试，其特征在于，该测试系统包括：客户端、测试用例调度服务器、测试项调度服务器、关键字调度服务器、终端控制器；

所述测试用例调度服务器执行所述客户端设置的测试用例，根据调度将测试项发送给所述测试项调度服务器执行；

所述测试项调度服务器执行所述测试项，根据调度将关键字发送给所述关键字调度服务器执行；

所述关键字调度服务器执行所述关键字，根据调度将操作原语发送给所述终端控制器执行；

所述终端控制器执行所述操作原语，完成所述业务终端对所述基站系统的自动化业务测试。

2.根据权利要求1所述的业务自动化的测试系统，其特征在于，

所述关键字调度服务器还根据所述操作原语的执行结果及逻辑关系调度下一个操作原语，或返回所述关键字的执行结果至所述测试项调度服务器；和/或

所述测试项调度服务器还根据所述关键字的执行结果及逻辑关系调度下一个关键字，或返回所述测试项的执行结果至所述测试用例调度服务器；和/或

所述测试用例调度服务器还根据所述测试项的执行结果及逻辑关系调度下一个测试项，或返回所述测试用例是否执行成功的信息至所述客户端。

3.根据权利要求1所述的业务自动化的测试系统，其特征在于，所述终端控制器通过串口命令对所述业务终端进行控制。

4.根据权利要求1、2或3所述的业务自动化的测试系统，其特征在于，所述测试项/所述关键字/所述操作原语是以脚本形式实现，且以库的形式存在。

5.根据权利要求1、2或3所述的业务自动化的测试系统，其特征在于，所述业务包括语音业务、数据业务、补充业务、切换业务中的一项或多项。

6.一种利用权利要求1、2或3所述测试系统实现业务自动化的测试方法，用于实现业务终端对基站系统进行自动化业务测试，其特征在于，包括：

测试用例设置步骤，用于通过所述客户端设置测试用例；

测试用例调度步骤，用于通过所述测试用例调度服务器执行所述测试用例，根据调度将测试项发送给所述测试项调度服务器执行；

测试项调度步骤，用于通过所述测试项调度服务器执行所述测试项，根据调度将关键字发送给所述关键字调度服务器执行；

关键字调度步骤，用于通过所述关键字调度服务器执行所述关键字，根据调度将操作原语发送给所述终端控制器执行；

业务测试步骤，用于通过所述终端控制器执行所述操作原语，完成所述业务终端对所述基站系统的自动化业务测试。

7.根据权利要求6所述的业务自动化的测试方法，其特征在于，

所述测试项调度步骤中，进一步包括：所述测试项调度服务器通过所述测试项的接口，对所述测试项进行调用的步骤；

所述关键字调度步骤中，进一步包括：所述关键字调度服务器通过所述关键字的接口，对所述关键字进行调用的步骤；

业务测试步骤中，进一步包括：所述终端控制器通过所述操作原语的接口，对所述操作原语进行调用的步骤。

8.根据权利要求6或7所述的业务自动化的测试方法，其特征在于，所述测试用例调度步骤中，进一步包括：

所述测试用例调度服务器根据所述测试项的执行结果及逻辑关系调度下一个测试项，或直接返回所述测试用例是否执行成功的信息至所述客户端的步骤。

9.根据权利要求8所述的业务自动化的测试方法，其特征在于，所述测试项调度步骤中，进一步包括：

所述测试项调度服务器根据所述关键字的执行结果及逻辑关系调度下一个关键字，或返回所述测试项的执行结果至所述测试用例调度服务器的步骤。

10.根据权利要求6、7或9所述的业务自动化的测试方法，其特征在于，所述关键字调度步骤中，进一步包括：

所述关键字调度服务器根据所述操作原语的执行结果及逻辑关系调度下一个操作原语，或返回所述关键字的执行结果至所述测试项调度服务器的步骤。

Images