CN106095677B - 基于Robot Framework实现的RESTful Webservice接口自动化测试方法 - Google Patents

Abstract

本发明涉及一种基于Robot Framework实现的RESTful Webservice接口自动化测试方法，该方法通过Robot Framework测试框架粘合测试用例、测试库及被测试系统，实现RESTful Webservice接口的自动化测试，具体包括以下步骤：1)设计测试用例，每条测试用例中包含测试数据、期望结果和一个或多个用户关键字；2)在Robot Framework测试框架中，根据测试用例对关键字进行逐层调用，最终通过用于交互的Python库关键字实现与被测试系统的交互，所述交互包括向被测试系统发送HTTP request和接收被测试系统的返回值；3)定义用于检查的Python库关键字，通过所定义的Python库关键字对返回值进行检查，实现自动化测试。与现有技术相比，本发明具有减少工作量、测试可信度高等优点。

Description

基于Robot Framework实现的RESTful Webservice接口自动 化测试方法

技术领域

本发明属于软件测试技术领域，涉及一种自动化测试方法，尤其是涉及一种基于Robot Framework实现的RESTful Webservice接口自动化测试方法。

背景技术

随着IT环境的不断变化，数据备份与恢复系统的功能也越来越复杂，测试一个功能不断增多的备份与恢复系统成为一项庞大的工程，怎样使用更少的人力、更快的完成测试更是一个巨大的挑战。

传统的测试方法是使用手工测试的方式，通过WEB界面操作产品进行测试。业界流行的自动化测试工具，比如QTP等，不适用于页面频繁变更的产品。由于现有技术中没有找到合适的自动测试方法，导致每次程序的修改都需要大量的人员采用手工的方式进行回归测试，效率低、可信度差。

Robot Framework是一款python编写的功能自动化测试框架，具备良好的可扩展性，支持关键字驱动，可以同时测试多种类型的客户端或者接口，可以进行分布式测试执行，主要用于轮次很多的验收测试和验收测试驱动开发(ATDD)。Robot Framework是开源软件，由Nokia Siemens Networks开发并提供支持。

RESTful是一种软件架构风格，提供了一组设计原则和约束，RESTful的每一个URI代表一种资源，RESTful是客户端和服务器之间传递URI这种资源的某种表现层。RESTfulWebservice使用标准的HTTP方法(GET/PUT/POST/DELETE)来抽象所有Web系统的服务。客户端通过四个HTTP动词对服务器端资源进行操作，实现"表现层状态转化"：GET用来获取资源，POST用来新建资源(也可以用于更新资源)，PUT用来更新资源，DELETE用来删除资源。RESTful直接基于http，不再需要任何别的诸如消息协议等，HTTP动词操作面向资源，一目了然，具有自解释性；数据描述简单，一般以xml、json做数据交换。

现有技术中还未有针对RESTful Webservice接口的自动化测试的研究。

发明内容

本发明的目的就是为了克服上述现有技术存在的缺陷而提供一种减少工作量、测试可信度高的基于Robot Framework实现的RESTful Webservice接口自动化测试方法。

本发明的目的可以通过以下技术方案来实现：

一种基于Robot Framework实现的RESTful Webservice接口自动化测试方法，该方法通过Robot Framework测试框架粘合测试用例、测试库及被测试系统，实现RESTfulWebservice接口的自动化测试，具体包括以下步骤：

1)设计测试用例，每条测试用例中包含测试数据、期望结果和一个或多个用户关键字；

2)在Robot Framework测试框架中，根据测试用例对关键字进行逐层调用，最终通过用于交互的Python库关键字实现与被测试系统的交互，所述交互包括向被测试系统发送HTTP request和接收被测试系统的返回值；

3)定义用于检查的Python库关键字，通过所定义的Python库关键字对返回值进行检查，实现自动化测试。

所述步骤1)中，设计测试用例时，每条测试用例中包含完整且正确的期望结果。

所述Robot Framework测试框架粘合测试用例前，将测试用例拆解为表格的形式，表格中的每一行仅包含一个用户关键字及该用户关键字对应的期望结果。

所述步骤2)中，对关键字进行逐层调用具体为：用户关键字调用用户关键字或内建关键字或Python库关键字，用户关键字或内建关键字或Python库关键字调用Python库关键字。

所述步骤2)中，通过Python库关键字实现与被测试系统的交互时，将多个Python库关键字组成的Py文件添加至Robot Framework测试框架中的一个资源文件中，测试用例通过加载所述资源文件实现对Python库关键字的调用。

所述步骤2)中，与被测试系统的交互具体是通过测试工具实现。

所述步骤2)中，所述HTTP request的获取步骤具体为：

将协议、IP、端口、接口名称封装为URI，利用URI、用户名、密码构造可用的HTTPrequest header，将URI、HTTP request header、HTTP请求方法、接口、超时时间、重连时间封装为HTTP request。

所述步骤3)中，通过用于检查的Python库关键字对返回值进行检查具体为：

所述测试用例包括正常流测试用例和异常流测试用例，当测试用例为正常流测试用例时，若返回值中不包含异常且返回值与期望结果一致，则判定为成功，否则判定为失败；当测试用例为异常流测试用例时，若返回值中包含异常且错误提示信息与期望结果一致，则判定为成功，否则判定为失败。

与现有技术相比，本发明具有以下优点：

1、提升了回归测试效率。在未引入该测试方法前，执行备份恢复系统的回归测试需要花费50人*天的工作量，引入该方法后，同样的工作只需要5人*天，使用更少的人力、更快地完成RESTful Webservice接口的自动化回归测试工作。

2、减少了测试人员的工作量。测试可以自动执行，测试人员可以利用这个时间做其他事情。

3、增加了测试的可信度。自动测试有预设的预期结果，可以做到每测试一次都进行完整的比较，而手工测试可能会出现疏忽或者遗漏的情况。

4、本发明定义了python库关键字进行被测试系统的返回结果的检查，可以准确快速地获得测试结果，提高了自动化测试效率。

5、本发明的数据仅加载在测试用例中，将数据与流程分离，简单易学、实现效率高。

附图说明

图1为本发明的自动化测试框架图；

图2为本发明的自动化测试流程图；

图3为本发明的逻辑判断流程图；

图4为本发明的加载成功的Python库文件。

具体实施方式

下面结合附图和具体实施例对本发明进行详细说明。本实施例以本发明技术方案为前提进行实施，给出了详细的实施方式和具体的操作过程，但本发明的保护范围不限于下述的实施例。

如图1-图2所示，本实施例提供一种基于Robot Framework实现的RESTfulWebservice接口自动化测试方法，该方法通过Robot Framework测试框架粘合测试用例、测试库及被测试系统，测试库调用测试工具或者直接与被测系统交互，实现RESTfulWebservice接口的自动化测试，使用更少的人力、更快的完成RESTful Webservice接口的自动化回归测试工作。该方法具体包括以下步骤：

1)设计测试用例，每条测试用例中包含测试数据、期望结果和一个或多个用户关键字。设计测试用例时，确保测试用例的结果检查范围及内容是正确并且完整的。

将测试用例拆解为表格的形式，粘合入Robot Framework测试框架中，表格中的每一行仅包含一个用户关键字及该用户关键字对应的期望结果，一个用户关键字对应一个操作步骤。由此，测试用例转化成多个用户关键字及参数。

2)在Robot Framework测试框架中，根据测试用例对关键字进行逐层调用，最终通过用于交互的Python库关键字实现与被测试系统的交互，所述交互包括向被测试系统发送HTTP request和接收被测试系统的返回值。

利用Python实现用于交互的python库关键字具体包括：

get_login_headers(self)：用于构造登陆后的HTTP request的header，每次HTTPrequest发送都需要消息头，当消息头为空时，该函数封装uri并模拟登陆，伪造一个已经登陆成功的header。

get_from_svc(self,url,param)：利用url及para构造URI，利用Tornado里面的HTTPClient模拟发送方法为get的http Request。利用httpclient.fetch获取httpresponse。当请求执行失败时，异常退出，用例执行失败，当请求执行成功时，返回httpresponse(返回值)。

post_to_svc(self,url,param)：利用url及para构造URI，利用Tornado里面的HTTPClient模拟发送方法为post的http Request。利用httpclient.fetch获取httpresponse。当请求执行失败时，异常退出，用例执行失败，当请求执行成功时，返回httpresponse。

put_to_svc(self,url,param)：利用url及para构造URI，利用Tornado里面的HTTPClient模拟发送方法为put的http Request。利用httpclient.fetch获取httpresponse。当请求执行失败时，异常退出，用例执行失败，当请求执行成功时，返回httpresponse。

delete_to_svc(self,url,param)：利用url及para构造URI，利用Tornado里面的HTTPClient模拟发送方法为delete的http Request。利用httpclient.fetch获取httpresponse。当请求执行失败时，异常退出，用例执行失败，当请求执行成功时，返回httpresponse。

对关键字进行逐层调用具体为：用户关键字调用用户关键字或内建关键字或Python库关键字，用户关键字或内建关键字或Python库关键字调用Python库关键字，如图2所示。

通过Python库关键字实现与被测试系统的交互时，将多个Python库关键字组成的Py文件作为一个Library添加至Robot Framework测试框架中的一个资源文件中，测试用例通过加载所述资源文件实现对Python库关键字的调用。所有需要用到该库的用例只要加载了这个资源文件，就可以使用该文件中的所有关键字。

如图3所示，步骤2)中，HTTP request的获取步骤具体为：

将协议、IP、端口、接口名称封装为URI，利用URI、用户名、密码构造可用的HTTPrequest header，将URI、HTTP request header、HTTP请求方法、接口、超时时间、重连时间封装为HTTP request。

接收被测试系统的返回值前首先进行初次判断，判断整个测试用例是否可以执行(包含关键字及被测系统的执行)，如果可以执行，则返回被测系统的返回值，如果不可以执行，则整条用例执行失败。

3)在所述资源文件下定义用于检查的Python库关键字，调用Python库中的方法，通过用于检查的Python库关键字对返回值进行检查，即进行二次判断，实现自动化测试，具体为：

所述测试用例包括正常流测试用例和异常流测试用例，当测试用例为正常流测试用例时，若返回值中不包含异常且返回值与期望结果一致，则判定为成功，否则判定为失败；当测试用例为异常流测试用例时，若返回值中包含异常且错误提示信息与期望结果一致，则判定为成功，否则判定为失败。

定义的用于检查的Python库关键字如下：

get_notcontain，用于判断get_from_svc方法的返回值是否包含异常，当包含异常时，用例执行失败。未包含异常时，该关键字执行成功，并将返回值定义为全局变量。

get_contain，用于判断get_from_svc方法的返回值是否与期望结果一致。一致则用例执行成功，否则用例执行失败。

put_notcontain，用于判断put_to_svc方法的返回值是否包含异常，当包含异常时，用例执行失败。未包含异常时，该关键字执行成功，并将返回值定义为全局变量。

put_contain，用于判断put_to_svc方法的返回值是否与期望结果一致。一致则用例执行成功，否则用例执行失败。

post_notcontain，用于判断post_to_svc方法的返回值是否包含异常，当包含异常时，用例执行失败。未包含异常时，该关键字执行成功，并将返回值定义为全局变量。

post_contain，用于判断post_to_svc方法的返回值是否与期望结果一致。一致则用例执行成功，否则用例执行失败。

delete_notcontain，用于判断delete_to_svc方法的返回值是否包含异常，当包含异常时，用例执行失败。

delete_contain，用于判断delete_to_svc方法的返回值是否与期望结果一致。一致则用例执行成功，否则用例执行失败。

使用到的内建关键字如下：

should not contain：作用是用来比较某变量是否包含了指定的字符串，如果包含则用例执行结果为失败。

Set Global variable：作用是将某个变量设置为全局变量，，该变量的生命周期为当前这个tastcase。

should contain：作用是用来比较是否包含了定义的值，如果不包含则用例执行结果为失败。

Run Keyword And Continue On Failure，当一个关键字执行失败的时候，继续执行下一个关键字。

Evaluate：获取Python库关键字的返回值并赋值给另一个变量。

Sleep：等待。

基于上述方法，以测试是否可以根据客户端ID获取到该客户端的详细信息为例，具体流程如下：

1、在服务器A上搭建被测系统。

2、在服务器B上搭建Robot Framework环境，安装Python2.7.3版本，安装ride。

3、根据本发明实现步骤完成py文件中的get_from_svc，并将该文件作为一个库文件加载至Robot Framework中的资源文件resouce.txt中。

4、定义关键字get_contain,调用get_from_svc,传入ID、接口、ip、port、protocol及预期结果等变量并获取返回值进行比较。

5、定义一个关键字“获取指定客户端信息实现”,加载资源resouce.txt，调用关键字get_contain。

6、完成测试用例，调用关键字“获取指定客户端信息实现”，传入实际的客户端ID，控制台IP、端口等参数以及期望结果。

7、运行该用例。

Claims (7)

1.一种基于Robot Framework实现的RESTful Webservice接口自动化测试方法，其特征在于，该方法通过Robot Framework测试框架粘合测试用例、测试库及被测试系统，实现RESTful Webservice接口的自动化测试，具体包括以下步骤：

1)设计测试用例，每条测试用例中包含测试数据、期望结果和一个或多个用户关键字；

2)在Robot Framework测试框架中，根据测试用例对关键字进行逐层调用，最终通过用于交互的Python库关键字实现与被测试系统的交互，所述交互包括向被测试系统发送HTTPrequest和接收被测试系统的返回值；

3)定义用于检查的Python库关键字，通过所定义的Python库关键字对返回值进行检查，实现自动化测试；

所述步骤2)中，对关键字进行逐层调用具体为：用户关键字调用用户关键字或内建关键字或Python库关键字，用户关键字或内建关键字或Python库关键字调用Python库关键字。

2.根据权利要求1所述的基于Robot Framework实现的RESTful Webservice接口自动化测试方法，其特征在于，所述步骤1)中，设计测试用例时，每条测试用例中包含完整且正确的期望结果。

3.根据权利要求1所述的基于Robot Framework实现的RESTful Webservice接口自动化测试方法，其特征在于，所述Robot Framework测试框架粘合测试用例前，将测试用例拆解为表格的形式，表格中的每一行仅包含一个用户关键字及该用户关键字对应的期望结果。

4.根据权利要求1所述的基于Robot Framework实现的RESTful Webservice接口自动化测试方法，其特征在于，所述步骤2)中，通过Python库关键字实现与被测试系统的交互时，将多个Python库关键字组成的Py文件添加至Robot Framework测试框架中的一个资源文件中，测试用例通过加载所述资源文件实现对Python库关键字的调用。

5.根据权利要求1所述的基于Robot Framework实现的RESTful Webservice接口自动化测试方法，其特征在于，所述步骤2)中，与被测试系统的交互具体是通过测试工具实现。

6.根据权利要求1所述的基于Robot Framework实现的RESTful Webservice接口自动化测试方法，其特征在于，所述步骤2)中，所述HTTP request的获取步骤具体为：

将协议、IP、端口、接口名称封装为URI，利用URI、用户名、密码构造可用的HTTPrequest header，将URI、HTTP request header、HTTP请求方法、接口、超时时间、重连时间封装为HTTP request。

7.根据权利要求1所述的基于Robot Framework实现的RESTful Webservice接口自动化测试方法，其特征在于，所述步骤3)中，通过用于检查的Python库关键字对返回值进行检查具体为：

所述测试用例包括正常流测试用例和异常流测试用例，当测试用例为正常流测试用例时，若返回值中不包含异常且返回值与期望结果一致，则判定为成功，否则判定为失败；当测试用例为异常流测试用例时，若返回值中包含异常且错误提示信息与期望结果一致，则判定为成功，否则判定为失败。