CN107465572A - 智能终端测试方法、装置及系统 - Google Patents

Abstract

本发明提供了一种智能终端测试方法、装置及系统，涉及智能终端测试的技术领域，该方法包括当接收到执行测试的命令时，建立测试用例；通过测试用例向智能终端发送测试指令，以使智能终端执行测试指令；接收智能终端返回的执行结果，并将执行结果发送至服务器，以使服务器回填测试结果；接收服务器返回的测试结果，将测试结果展示给用户。本发明实施例提供的智能终端测试方法、装置及系统，在对智能终端进行测试的过程中，不需要人为地去分析和判断，使得测试过程更加简单和灵活，有助于提高智能终端的测试质量和测试效率。

Description

智能终端测试方法、装置及系统

技术领域

本发明涉及智能终端测试的技术领域，尤其是涉及一种智能终端测试方法、装置及系统。

背景技术

随着自动化技术的不断发展，智能终端，如手机，机顶盒，智能电视一体机等，已经得到了广泛的应用。与传统的机电设备相比，目前，越来越多的智能终端选择搭载安卓系统进行开发，以安装多种软件来丰富智能终端的功能。但是随着软件应用和功能的增多，就需要对智能终端的各个应用或者功能进行逐个测试，以使智能终端能够正常运行。

现有技术中，对智能终端的测试，大多以人为驱动操作为准，例如，模拟鼠标，或手势等对界面进行操作，在测试过程中，需要人工对各个软件和应用进行逐个测试，同时，对测试人员也有一定的技能要求，导致智能终端的测试质量不高，很难做到对内容和智能终端型号的全面覆盖，降低了智能终端的测试效率。

发明内容

有鉴于此，本发明的目的在于提供一种智能终端测试方法、装置及系统，以缓解了现有的智能终端测试方式导致的智能终端测试质量不高和覆盖不全面的技术问题。

第一方面，本发明实施例提供了一种智能终端测试方法，应用于智能终端自动化测试的客户端，智能终端与客户端通过底层ADB连接，包括：当执行测试任务时，建立测试用例；根据测试用例向智能终端发送测试指令，以使智能终端执行测试指令；其中，测试指令包括操作命令和/或控制指令；接收智能终端返回的执行测试指令的执行结果，并将执行结果发送至服务器，以使服务器回填测试结果；接收服务器返回的测试结果，将测试结果展示给用户。

结合第一方面，本发明实施例提供了第一方面的第一种可能的实施方式，其中，上述方法还包括：接收用户输入的配置信息，根据配置信息进行配置，以与服务器建立通信，其中，配置信息包括：服务器的IP地址信息、WCF端口号和Socket端口号。

结合第一方面，本发明实施例提供了第一方面的第二种可能的实施方式，其中，上述当执行测试任务时，建立测试用例包括：接收执行测试的命令，根据所述命令发起测试任务；从命令中提取被测应用的包名；根据包名建立与被测应用对应的用例。

结合第一方面，本发明实施例提供了第一方面的第三种可能的实施方式，其中，上述接收服务器返回的测试结果，将测试结果展示给用户包括：提取测试结果中包含的测试结果标识，根据测试结果标识判断测试结果是否合格；如果是，将测试结果标记为测试合格；如果否，将测试结果标记为测试不合格；将标记后的测试结果展示给用户。

结合第一方面，本发明实施例提供了第一方面的第四种可能的实施方式，其中，在接收所述执行测试的命令之前，上述方法还包括：对客户端进行功能定制，该功能定制包括：针对自动化测试受阻因素进行功能定制；增加的遥控器键值和页面操作的API定制。

结合第一方面的第四种可能的实施方式，本发明实施例提供了第一方面的第五种可能的实施方式，其中，对智能终端进行适配，以使智能终端进行有效的测试；增加支持Launch操作功能，允许使用Launch操作多次启动应用；增加守护进程，以启动心跳程序，按照预先设定的时间间隔向智能终端下发心跳包，以检测智能终端的连接状态是否正常；在捕获到引擎启动异常时，允许再次进行启动引擎的操作，当再次启动引擎的操作超过预先设定的重启次数时，终止当前测试流程；自动跳过软件安装安全提示页面在测试用例添加页面元素属性，以缩短XPath的路径层次。

第二方面，本发明实施例还提供一种智能终端测试装置，设置于智能终端自动化测试的客户端，智能终端与客户端通过底层ADB连接，包括：用例建立模块，用于当执行测试任务时，建立测试用例；指令发送模块，用于根据测试用例向智能终端发送测试指令，以使智能终端执行测试指令；其中，测试指令包括操作命令和/或控制指令；结果返回模块，用于接收智能终端返回的执行测试指令的执行结果，并将执行结果发送至服务器，以使服务器回填测试结果；结果展示模块，用于接收服务器返回的测试结果，将测试结果展示给用户。

结合第二方面，本发明实施例提供了第二方面的第一种可能的实施方式，其中，上述装置还包括：信息配置模块，用于接收用户输入的配置信息，根据配置信息进行配置，以与服务器建立通信，其中，配置信息包括：服务器的IP地址信息、WCF端口号和Socket端口号。

结合第二方面，本发明实施例提供了第二方面的第二种可能的实施方式，其中，上述用例建立模块还用于：接收执行测试的命令，根据所述命令发起测试任务；从命令中提取被测应用的包名，根据包名建立与被测应用对应的用例。

第三方面，本发明实施例还提供一种智能终端测试系统，该系统包括智能终端、客户端和服务器；客户端设置有上述第二方面所述的智能终端测试装置；智能终端与客户端通过底层ADB连接；客户端与服务器网络连接，其中，客户端的数量为一个或者多个，每个客户端对应一个智能终端。

本发明实施例带来了以下有益效果：

本发明实施例提供的智能终端测试方法、装置及系统，能够在执行测试任务时，建立测试用例，通过该测试用例向智能终端发送测试指令，以使智能终端执行该测试指令进行测试，当测试完成后，将智能终端返回的执行结果发送至服务器回填测试结果，并将测试结果展示给用户，使用户根据测试结果直接得出智能终端的功能和应用是否能够正常运行，整个测试过程不需要人为地去分析和判断，使得测试过程更加简单和灵活，有助于提高智能终端的测试质量和测试效率。

本发明的其他特征和优点将在随后的说明书中阐述，并且，部分地从说明书中变得显而易见，或者通过实施本发明而了解。本发明的目的和其他优点在说明书、权利要求书以及附图中所特别指出的结构来实现和获得。

为使本发明的上述目的、特征和优点能更明显易懂，下文特举较佳实施例，并配合所附附图，作详细说明如下。

附图说明

为了更清楚地说明本发明具体实施方式或现有技术中的技术方案，下面将对具体实施方式或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施方式，对于本领域技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为本发明实施例提供的一种智能终端测试方法的流程图；

图2为本发明实施例提供的另一种智能终端测试方法的流程图；

图3为本发明实施例提供的一种智能终端测试装置的结构示意图；

图4为本发明实施例提供的另一种智能终端测试装置的结构示意图；

图5为本发明实施例提供的一种智能终端测试系统的结构框图。

具体实施方式

为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合附图对本发明的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

为便于对本实施例进行理解，首先对本发明实施例所公开的一种智能终端测试方法进行详细介绍。

实施例一：

本发明实施例提供的智能终端测试方法，应用于智能终端自动化测试的客户端，该智能终端与客户端通过底层ADB(Android Debug Bridge，安卓调试桥)连接，图1示出了一种智能终端测试方法的流程图，如图1所示，该方法包括以下步骤：

步骤S102，当执行测试任务时，建立测试用例；

优选地，本发明实施例中的智能终端包括智能手机，机顶盒，智能电视一体机等安装有安卓应用系统的智能终端。

具体实现时，在执行测试任务时，可以由测试人员在客户端输入测试的命令，根据测试的命令执行测试任务。考虑到智能终端的功能和应用比较多，因此，对应不同应用的测试，该执行测试的命令可以是相应的用例，该用例包括执行的内容和步骤等，同时，在该用例中可以包含当前待测试的应用的包名，使得客户端接收到该执行测试的命令时，可以从该命令中提取被测应用的包名，并根据该包名建立与被测应用对应的用例。

通常，在对智能终端测试之前，需要在客户端上预先搭建一个系统，例如，win7系统，并且，在客户端中可以预先安装程序客户端agent，并进行环境配置，以满足测试的环境条件，当执行一个测试计划或者任务时，会建立一个唯一的会话，通过ADB命令检查智能终端的连接状态、自动安装执行驱动、应用，启动应用，agent通过会话发测试指令给智能终端，执行元素定位和解析agent发来的测试命令等。

步骤S104，根据测试用例向智能终端发送测试指令，以使智能终端执行测试指令；

其中，测试指令包括操作命令和/或控制指令，例如，遥控器的操作命令，或者，对智能终端的应用程序进行控制等等，智能终端接收到该测试指令后，可以执行操作命令和/或控制指令，进行测试，并将执行结果返回至客户端。

步骤S106，接收智能终端返回的执行测试指令的执行结果，并将执行结果发送至服务器，以使服务器回填测试结果；

具体实现时，由于智能终端的功能和应用比较多，因此，需要通过一个后台服务器对每个应用进行管理，通常，对于智能终端的多个应用，服务器会将不同的应用放在不同的项目中，一个项目对应一个应用的测试，每个应用(每个项目)都有一个单独的数据库，以使服务器对每个项目进行管理，当客户端接收到智能终端返回的执行结果后，会将该执行结果发送至服务器，以使服务器根据数据库中存储的当前应用的数据回填测试结果，服务器将测试结果回填到客户端正在执行的测试任务中。

步骤S108，接收服务器返回的测试结果，将测试结果展示给用户。

具体实现时，为了便于客户端对测试结果进行识别和展示，服务器可以对测试结果进行标记，使的客户端能够提取测试结果中包含的测试结果标识，根据测试结果标识判断测试结果是否合格；如果是，将测试结果标记为测试合格；如果否，将测试结果标记为测试不合格；并将标记后的测试结果展示给用户。

本发明实施例提供的智能终端测试方法，能够在执行测试任务时，建立测试用例，通过该测试用例向智能终端发送测试指令，以使智能终端执行该测试指令进行测试，当测试完成后，将智能终端返回的执行结果发送至服务器回填测试结果，并将测试结果展示给用户，使用户根据测试结果直接得出智能终端的功能和应用是否能够正常运行，整个测试过程不需要人为地去分析和判断，使得测试过程更加简单和灵活，有助于提高智能终端的测试质量和测试效率。

实施例二：

为了使客户端能够与服务器建立通信，需要在客户端上进行配置，因此，在上述实施例一的基础上，本发明实施例还提供了另一种智能终端测试方法的流程图，如图2所示，包括以下步骤：

步骤S101，接收用户输入的配置信息，根据配置信息进行配置，以与服务器建立通信；

优选地，服务器上通常搭建的是windows 2008server R2系统，并且安装有SQLserver 2008系统和程序服务器端、配置工具等，以便于测试人员对客户端进行配置，因此，对应于服务器搭建的系统，上述配置信息包括：服务器的IP地址信息、WCF端口号和Socket端口号。

其中，WCF端口号一般为8008，是客户端本身与服务器进行通信的端口，例如，测试人员能够登录客户端，编写步骤，用例，业务，计划，以及添加修改环境，添加修改计划等；Socket端口号一般为2012，是客户端上预先搭建的系统(例如，win7系统)与服务器进行通信的端口。

步骤S102～步骤S108的实现过程与上述实施例一种的实现过程一致，因此，可以参考实施例一所述的对应的过程，本发明实施例对此不进行赘述。

下面以上述智能终端为机顶盒为例进行说明，考虑到在对机顶盒进行应用测试时，存在诸多因权限和网络等问题导致自动化测试受阻的情况，因此，本发明实施例提供的方法中，在接收执行测试的命令之前，上述方法还包括：对客户端进行功能定制，功能定制包括：针对自动化测试受阻因素进行功能定制；增加的遥控器键值和页面操作的API(Application Programming Interface，应用程序编程接口)定制。

具体地，针对自动化测试受阻因素进行功能定制包括以下中的一种或多种：(1)对智能终端进行适配，以使智能终端能进行有效的自动化测试；以上述智能终端为机顶盒为例，机顶盒的系统为安卓系统，通常，适配的方式是，在机顶盒中安装如下安装包：Appium引擎启动安装包，设置安装包,解锁安装包和输入法安装包等。对机顶盒进行设置，使机顶盒能够调起应用进行测试。(2)增加支持Launch操作功能，允许使用所述Launch操作多次启动应用，以缓解智能终端无法连接到服务器的问题。(3)增加守护进程，以启动心跳程序，按照预先设定的时间间隔向智能终端下发心跳包，以检测智能终端的连接状态是否正常；(4)在捕获到引擎启动异常时，允许在再次进行启动引擎的操作，当再次启动引擎的操作超过预先设定的重启次数时(例如，10次)，终止当前测试流程；(5)自动跳过软件安装安全提示页面；通常，安全提示页面是由于特殊设备安全验证导致，其原因是启动引擎需要安装部署指定插件。解决办法是可以通过引擎端忽略组件安装，替换修改后的脚本文件，同时替换智能终端自动化依赖组件，具体操作可以参考现有材料的相关技术，本发明实施例对此不进行限制；(6)在测试用例添加页面元素属性，以缩短XPath的路径层次；

其中，上述在测试用例添加页面元素属性，以缩短XPath(位置路径)的路径层次，可以减少路径出错几率，使得路径变得简单易维护。

同样，以上述智能终端为机顶盒为例进行说明，添加元素属性可以在机顶盒的app上对应的页面位置添加，在客户端捕捉元素的时候就能看到带有相关属性的Xpath。例如：在应用首页推荐、点播TextView增加ContentDescription属性，该属性可通过动态绑定推荐、点播值。<TextView ContentDescription＝“动态绑定值”/>取值范围：推荐、点播。

进一步，以上述智能终端为机顶盒为例进行说明，上述增加的遥控器键值和页面操作的API定制包括：增加遥控器键值API和页面操作API，以对遥控器键值和页面自动化测试进行校验。表1示出了一种遥控器键值API的校验表，具体地，在进行遥控器键值校验时，可以根据表1所示的名称、描述、参数以及引擎类型进行用例编写，以对遥控器的键值进行校验。

表1

表2示出了一种页面操作的校验表，具体地，在进行页面操作校验时，可以根据表2所示的名称、描述、参数以及引擎类型进行用例编写，以对页面操作进行校验。

表2

应当理解，上述表1和表2示出的仅仅是本发明实施例的一种优选的遥控器键值和页面操作的校验表，而不是唯一的设定方式，针对不同的机顶盒和实际需求，上述表1和表2所示的内容还可以有其他的设定方式，具体以实际使用情况为准，本发明实施例对此不进行限制。

本发明实施例提供的智能终端测试方法，在对智能终端进行测试之前，通过对客户端和服务器进行设置，进而使客户端与服务器建立通信，使得客户端在接收到执行测试的命令时，能够有效地对智能终端的应用进行测试，使测试过程更加简单和灵活，有助于提高智能终端的测试质量和测试效率。

实施例三：

在上述实施例的基础上，本发明实施例还提供了一种智能终端测试装置，该装置设置于智能终端自动化测试的客户端，智能终端与客户端通过底层ADB连接，如图3所示的一种智能终端测试装置的结构示意图，该装置包括：用例建立模块10、指令发送模块20、结果返回模块30和结果展示模块40，各个结构的功能如下：

用例建立模块10，用于当执行测试任务时，建立测试用例；

指令发送模块20，用于根据测试用例向智能终端发送测试指令，以使智能终端执行测试指令；其中，测试指令包括操作命令和/或控制指令；

结果返回模块30，用于接收智能终端返回的执行结果，并将执行结果发送至服务器，以使服务器回填测试结果；

结果展示模块40，用于接收服务器返回的执行测试指令的测试结果，将测试结果展示给用户。

本发明实施例提供的智能终端测试装置，能够在执行测试任务时，建立测试用例，通过该测试用例向智能终端发送测试指令，以使智能终端执行该测试指令进行测试，当测试完成后，将智能终端返回的执行结果发送至服务器回填测试结果，并将测试结果展示给用户，使用户根据测试结果直接得出智能终端的功能和应用是否能够正常运行，整个测试过程不需要人为地去分析和判断，使得测试过程更加简单和灵活，有助于提高智能终端的测试质量和测试效率。

优选地，图4示出了另一种智能终端测试装置的结构示意图，除图3所示的结构外，上述装置还包括：信息配置模块50，用于接收用户输入的配置信息，根据配置信息进行配置，以与服务器建立通信，其中，配置信息包括：服务器的IP地址信息、WCF端口号和Socket端口号。

进一步，上述用例建立模块10还用于：接收执行测试的命令，根据所述命令发起测试任务；从命令中提取被测应用的包名，根据包名建立与被测应用对应的用例。

本发明实施例提供的智能终端测试装置，与上述实施例提供的智能终端测试方法具有相同的技术特征，所以也能解决相同的技术问题，达到相同的技术效果。

实施例四：

为了便于对本发明实施例进行理解，在上述实施例的基础上，本发明还提供了一种智能终端测试系统，如图5所示的一种智能终端测试系统的结构框图，该系统包括智能终端、客户端和服务器100；其中，客户端设置有上述实施例三所述的智能终端测试装置。

优选地，智能终端与客户端通过底层ADB连接；客户端与服务器网络连接，其中，客户端的数量为一个或者多个，如图5所示的客户端1、客户端2，以及客户端N等，每个客户端对应一个智能终端，因此，智能终端也有智能终端1、智能终端2以及智能终端N等。

具体实现时，上述系统可以分为前端和后台，前段包括智能终端和客户端，后台包括服务器，测试人员可以在后台进行用户管理和项目管理，同时，还可以登录前端(客户端)，进行对象管理、步骤管理、用例管理、测试环境管理，以及客户端Agent管理等等，以便对智能终端的应用进行测试。

本发明实施例所提供的智能终端测试系统的计算机程序产品，包括存储了程序代码的计算机可读存储介质，所述程序代码包括的指令可用于执行前面方法实施例中所述的方法，具体实现可参见方法实施例，在此不再赘述。

所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的系统和装置的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。

所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。

最后应说明的是：以上实施例，仅为本发明的具体实施方式，用以说明本发明的技术方案，而非对其限制，本发明的保护范围并不局限于此，尽管参照前述实施例对本发明进行了详细的说明，本领域技术人员应当理解：任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，其依然可以对前述实施例所记载的技术方案进行修改或可轻易想到变化，或者对其中部分技术特征进行等同替换；而这些修改、变化或者替换，并不使相应技术方案的本质脱离本发明实施例技术方案的精神和范围，都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应以权利要求的保护范围为准。

Claims (10)

1.一种智能终端测试方法，其特征在于，应用于智能终端自动化测试的客户端，所述智能终端与所述客户端通过底层ADB连接，包括：

当执行测试任务时，建立测试用例；

根据所述测试用例向所述智能终端发送测试指令，以使所述智能终端执行所述测试指令；其中，所述测试指令包括操作命令和/或控制指令；

接收所述智能终端返回的执行所述测试指令的执行结果，并将所述执行结果发送至服务器，以使所述服务器回填测试结果；

接收所述服务器返回的所述测试结果，将所述测试结果展示给用户。

2.根据权利要求1所述的方法，其特征在于，所述方法还包括：

接收用户输入的配置信息，根据所述配置信息进行配置，以与所述服务器建立通信，其中，所述配置信息包括：所述服务器的IP地址信息、WCF端口号和Socket端口号。

3.根据权利要求1所述的方法，其特征在于，所述当执行测试任务时，建立测试用例包括：

接收执行测试的命令，根据所述命令发起测试任务；

从所述命令中提取被测应用的包名，根据所述包名建立与所述被测应用对应的用例。

4.根据权利要求1所述的方法，其特征在于，所述接收所述服务器返回的所述测试结果，将所述测试结果展示给用户包括：

提取所述测试结果中包含的测试结果标识，根据所述测试结果标识判断所述测试结果是否合格；

如果是，将所述测试结果标记为测试合格；

如果否，将所述测试结果标记为测试不合格；

将标记后的所述测试结果展示给用户。

5.根据权利要求1所述的方法，其特征在于，在接收所述执行测试的命令之前，所述方法还包括：

对所述客户端进行功能定制，所述功能定制包括：

针对自动化测试受阻因素进行功能定制；

增加的遥控器键值和页面操作的API定制。

6.根据权利要求5所述的方法，其特征在于，所述针对自动化测试受阻因素进行功能定制包括一下中的一种或多种：

对所述智能终端进行适配，以使所述智能终端进行有效的测试；

增加支持Launch操作功能，允许使用所述Launch操作多次启动应用；

增加守护进程，以启动心跳程序，按照预先设定的时间间隔向所述智能终端下发心跳包，以检测所述智能终端的连接状态是否正常；

在捕获到引擎启动异常时，允许再次进行启动所述引擎的操作，当再次启动所述引擎的操作超过预先设定的重启次数时，终止当前测试流程；

自动跳过软件安装安全提示页面；

在所述测试用例添加页面元素属性，以缩短XPath的路径层次。

7.一种智能终端测试装置，其特征在于，设置于智能终端自动化测试的客户端，所述智能终端与所述客户端通过底层ADB连接，包括：

用例建立模块，用于当执行测试任务时，建立测试用例；

指令发送模块，用于根据所述测试用例向所述智能终端发送测试指令，以使所述智能终端执行所述测试指令；其中，所述测试指令包括操作命令和/或控制指令；

结果返回模块，用于接收所述智能终端返回的执行所述测试指令的执行结果，并将所述执行结果发送至服务器，以使所述服务器回填测试结果；

结果展示模块，用于接收所述服务器返回的所述测试结果，将所述测试结果展示给用户。

8.根据权利要求7所述的装置，其特征在于，所述装置还包括：

信息配置模块，用于接收用户输入的配置信息，根据所述配置信息进行配置，以与所述服务器建立通信，其中，所述配置信息包括：所述服务器的IP地址信息、WCF端口号和Socket端口号。

9.根据权利要求7所述的装置，其特征在于，所述用例建立模块还用于：接收执行测试的命令，根据所述命令发起测试任务；从所述命令中提取被测应用的包名，根据所述包名建立与所述被测应用对应的用例。

10.一种智能终端测试系统，其特征在于，所述系统包括智能终端、客户端和服务器；所述客户端设置有权利要求7～9任一项所述的智能终端测试装置；

所述智能终端与所述客户端通过底层ADB连接；

所述客户端与所述服务器网络连接，其中，所述客户端的数量为一个或者多个，每个所述客户端对应一个所述智能终端。