CN105095078A - 一种系统自动化测试设备、方法和计算设备 - Google Patents

Abstract

一种系统自动化测试设备、方法和计算设备，本发明公开了一种自动化系统测试设备，该设备包括：测试脚本模块，存储测试脚本，测试脚本适于在运行过程中执行多个事件动作，其中多个事件动作包括在移动终端的输入事件动作、点击事件动作、获取事件控件动作、滑动事件动作中的至少一个；数据配置模块，为测试脚本配置测试运行参数，并划分测试场景；资源部署模块，根据测试场景将测试数据文件发送给移动终端；应用安装模块，在测试脚本运行过程中，指示移动终端安装自动化测试应用；屏幕录制模块，在测试脚本运行过程中，录制移动终端操作系统中执行多个事件动作的测试界面，以及截取操作系统测试出错步骤的界面。本发明还公开了包含该自动化系统测试设备的计算设备以及相应的自动化系统测试方法。

Description

一种系统自动化测试设备、方法和计算设备

技术领域

本发明涉及系统应用领域，特别涉及一种系统自动化测试设备、方法和计算设备。

背景技术

随着硬件性能的提升和成本的降低，智能手机已经非常普及。特别是对于诸如安卓这样的开源系统，手机厂商和第三方公司开发了大量定制系统(即ROM)。在系统发布之前，需要对系统的性能、稳定性等方面进行一系列测试。但是，这些手机系统的版本更新速度很快，往往一个月甚至十几天即有新版本发布。现有的手工测试需要耗费大量人力，在时间上难以满足这种系统测试需求，而现有的自动化测试方法存在编写脚本速度慢、测试结果不易判断、测试报告不易获取等问题。

因此，需要一种能够简化脚本编写、提高系统自动化测试效率的新方案。

发明内容

为此，本发明提供一种系统自动化测试设备和方法，以力图解决或者至少缓解上面存在的问题。

根据本发明的一个方面，提供一种系统自动化测试设备，该设备驻留在计算设备中，计算设备适于与移动终端连接并测试移动终端的操作系统，所述系统测试设备包括：测试脚本模块，适于存储测试脚本，测试脚本适于在运行过程中执行多个事件动作，其中多个事件动作包括在移动终端的输入事件动作、点击事件动作、获取事件控件动作、滑动事件动作中的至少一个；数据配置模块，适于为测试脚本配置测试运行参数，并划分测试场景；资源部署模块，适于根据测试场景将测试数据文件发送给移动终端；应用安装模块，适于在测试脚本运行过程中，指示移动终端安装自动化测试应用；屏幕录制模块，适于在测试脚本运行过程中，录制移动终端操作系统中执行多个事件动作的测试界面，以及截取操作系统测试出错步骤的界面。

可选地，在根据本发明的自动化系统测试设备中，测试运行参数包括：测试次数和测试时间，测试场景包括单场景测试、复合场景测试。

可选地，在根据本发明的自动化系统测试设备中，测试数据文件包括测试脚本、自动化测试应用、测试文件、配置参数文件。

可选地，在根据本发明的自动化系统测试设备中，还包括：日志管理模块，适于输出移动终端操作系统的测试报告。

可选地，在根据本发明的自动化系统测试设备中，测试脚本模块还适于：在移动终端操作系统测试过程中出错时，中止测试。

根据本发明的一个方面，提供一种自动化系统测试方法，该方法适于在计算设备中执行，计算设备适于与移动终端连接并测试移动终端的操作系统，系统测试方法包括：运行测试脚本，测试脚本适于在运行过程中执行多个事件动作，其中多个事件动作包括在移动终端的输入事件动作、点击事件动作、获取事件控件动作、滑动事件动作中的至少一个；为测试脚本配置测试运行参数，并划分测试场景；根据测试场景将测试数据文件发送给移动终端；在测试脚本运行过程中，指示移动终端安装自动化测试应用；录制移动终端操作系统中执行多个事件动作的测试界面，以及截取操作系统测试出错步骤的界面。

可选地，在根据本发明的自动化系统测试方法中，测试运行参数包括：测试次数和测试时间，测试场景包括单场景测试、复合场景测试。

可选地，在根据本发明的自动化系统测试方法中，测试数据文件包括测试脚本、自动化测试应用、测试文件、配置参数文件。

可选地，在根据本发明的自动化系统测试方法中，在移动终端操作系统测试过程中出错时，中止测试。

根据本发明的一个方面，提供一种计算设备，包括如上所述的自动化系统测试设备。

根据本发明的技术方案，通过配置测试数据文件，实现测试脚本与测试数据分离，达到数据驱动测试的目的。同时，设置测试出错中断，方便用户在测试出错时随时中断，提高操作系统的测试效率。

附图说明

为了实现上述以及相关目的，本文结合下面的描述和附图来描述某些说明性方面，这些方面指示了可以实践本文所公开的原理的各种方式，并且所有方面及其等效方面旨在落入所要求保护的主题的范围内。通过结合附图阅读下面的详细描述，本公开的上述以及其它目的、特征和优势将变得更加明显。遍及本公开，相同的附图标记通常指代相同的部件或元素。

图1示出了根据本发明的自动化系统测试设备的示例计算设备100的结构框图；

图2示出了根据本发明一个实施例的自动化系统测试设备200的结构图；以及

图3示出了根据本发明一个实施例的自动化系统测试方法300的流程图。

具体实施方式

下面将参照附图更详细地描述本公开的示例性实施例。虽然附图中显示了本公开的示例性实施例，然而应当理解，可以以各种形式实现本公开而不应被这里阐述的实施例所限制。相反，提供这些实施例是为了能够更透彻地理解本公开，并且能够将本公开的范围完整的传达给本领域的技术人员。

本发明的自动化系统测试设备驻留在计算设备中，图1布置为实现根据本发明的自动化系统测试设备的示例计算设备100的框图。在基本的配置102中，计算设备100典型地包括系统存储器106和一个或者多个处理器104。存储器总线108可以用于在处理器104和系统存储器106之间的通信。

取决于期望的配置，处理器104可以是任何类型的处理，包括但不限于：微处理器((μP)、微控制器(μC)、数字信息处理器(DSP)或者它们的任何组合。处理器104可以包括诸如一级高速缓存110和二级高速缓存112之类的一个或者多个级别的高速缓存、处理器核心114和寄存器116。示例的处理器核心114可以包括运算逻辑单元(ALU)、浮点数单元(FPU)、数字信号处理核心(DSP核心)或者它们的任何组合。示例的存储器控制器118可以与处理器104一起使用，或者在一些实现中，存储器控制器118可以是处理器104的一个内部部分。

取决于期望的配置，系统存储器106可以是任意类型的存储器，包括但不限于：易失性存储器(诸如RAM)、非易失性存储器(诸如ROM、闪存等)或者它们的任何组合。系统存储器106可以包括操作系统120、一个或者多个应用122以及程序数据124。应用122可以包括被配置为自动化系统测试设备200。程序数据124可以包括可用于如此处所述的测试数据和测试资源。在一些实施方式中，应用122可以布置为在操作系统上利用程序数据124进行操作。

计算设备100还可以包括有助于从各种接口设备(例如，输出设备142、外设接口144和通信设备146)到基本配置102经由总线/接口控制器130的通信的接口总线140。示例的输出设备142包括图形处理单元148和音频处理单元150。它们可以被配置为有助于经由一个或者多个A/V端口152与诸如显示器或者扬声器之类的各种外部设备进行通信。示例外设接口144可以包括串行接口控制器154和并行接口控制器156，它们可以被配置为有助于经由一个或者多个I/O端口158和诸如输入设备(例如，键盘、鼠标、笔、语音输入设备、触摸输入设备)或者其他外设(例如打印机、扫描仪等)之类的外部设备进行通信。示例的通信设备146可以包括网络控制器160，其可以被布置为便于经由一个或者多个通信端口164与一个或者多个其他计算设备162通过网络通信链路的通信。

网络通信链路可以是通信介质的一个示例。通信介质通常可以体现为在诸如载波或者其他传输机制之类的调制数据信号中的计算机可读指令、数据结构、程序模块，并且可以包括任何信息递送介质。“调制数据信号”可以这样的信号，它的数据集中的一个或者多个或者它的改变可以在信号中编码信息的方式进行。作为非限制性的示例，通信介质可以包括诸如有线网络或者专线网络之类的有线介质，以及诸如声音、射频(RF)、微波、红外(IR)或者其它无线介质在内的各种无线介质。这里使用的术语计算机可读介质可以包括存储介质和通信介质二者。

计算设备100可以实现为小尺寸便携(或者移动)电子设备的一部分，这些电子设备可以是诸如蜂窝电话、个人数字助理(PDA)、个人媒体播放器设备、无线网络浏览设备、个人头戴设备、应用专用设备、或者可以包括上面任何功能的混合设备。计算设备100还可以实现为包括桌面计算机和笔记本计算机配置的个人计算机。

图2示出了根据本发明一个实施例的自动化系统测试设备200的示意图。如图2所示，自动化系统测试设备200包括测试脚本模块210、数据配置模块220、屏幕录制模块230、资源部署模块240和应用安装模块250。

移动终端例如手机、平板电脑在出厂之前会对操作系统进行测试，例如测试发送和接收短信、发送和接收邮件等传输性能，通过计算设备与待测试操作系统的移动终端连接，测试操作系统的性能。

目前，安卓系统是应用最广泛的，以下以安卓系统为例描述本发明的技术方案。首先，针对安卓系统设计相应的测试用例，并通过Auto工具编写用于测试操作系统的测试脚本。通过在计算设备中运行测试脚本，测试与计算设备如PC端连接的移动终端操作系统。

测试脚本存储在测试脚本模块210中，测试脚本包括执行移动终端操作界面上的多个事件动作，其中多个事件动作包括在移动终端的输入事件动作、点击事件动作、获取事件控件动作、滑动事件动作，例如，测试在电话薄添加联系人的操作，自动输入要添加的联系人的名称，并点击添加联系人按钮，保存联系人，滑动查看联系人文本框中的内容。

通过数据配置模块220为测试脚本配置测试运行参数。其中测试运行参数中包括多个参数，例如测试次数(runCounts)和测试时间(runTimes)，以及表示测试数据文件数量的参数如phoneNumb、videoTime。测试脚本可以直接从数据配置模块220的文件中获取各参数值，实现测试脚本与测试数据分离，达到数据驱动测试的目的。

完成上述部署，对测试场景进行分类，测试场景分为单场景测试和复合场景测试，按照测试类别可以划分为功能测试、压力测试、冒烟测试等；按照测试类型可以分为平均故障间隔时间(MTBF)测试、场景测试、基本功能测试、耗电量测试等，工作人员根据实际需求选择合适的测试场景。

在计算终端执行测试脚本过程中，根据不同的测试场景，经由资源部署模块240把相应的测试数据文件发送到待测试的移动终端。测试数据文件一般包括对应测试场景的测试脚本、自动化测试应用、测试文件、测试运行参数文件，例如，进行音乐播放测试，测试脚本对应测试音乐的脚本文件，自动化测试应用对应测试音乐的应用，测试文件对应测试需要的音乐，测试运行参数文件用于设置测试次数、测试时间等，将上述文件发送到移动终端，以便进行后续测试。

计算设备端经由应用安装模块250向移动终端发送指示，调用adb命令指示移动终端安装上述自动化测试应用。自动化测试应用通过文件读写的方式修改测试数据参数文件中的参数值，通过调用shell命令方式执行自动化测试脚本。

测试脚本在移动终端中执行时，本发明的屏幕录制模块230录制移动终端操作系统执行多个事件动作的测试界面，例如，电话薄联系人添加过程中，对点击添加联系人、保存联系人、滑动查看联系人内容等动作进行屏幕录制，供测试人员后期进行回放查看。如果在测试过程中，某个步骤出现错误，可以允许测试人员选择中止测试，同时，屏幕录制模块230截取操作系统出错步骤的界面，并保存，直到测试结束。

测试结束后，经由日志管理模块自动输出移动终端操作系统的测试报告，测试报告为log文件，工作人员对log文件进行摘取、整理，以便客观的评价操作系统性能，寻找操作错误点达到提高系统整体性能的目的。

根据本发明的技术方案，通过配置测试数据文件，实现测试脚本与测试数据分离，达到数据驱动测试的目的。同时，设置测试出错中断，方便用户在测试出错时随时中断，提高操作系统的测试效率。

图3示出了根据本发明一个示例性实施例的自动化系统测试方法300的流程图。如图3所示，本实施方法适于在计算设备中执行，通过与移动终端连接测试移动终端的操作系统，该自动化测试方法始于步骤S310。

用户根据安卓系统的设计相应的测试用例，并据测试用例编写测试脚本。在步骤S310中，测试脚本在运行过程中执行多个事件动作，其中多个事件动作包括在移动终端的输入事件动作、点击事件动作、获取事件控件动作、滑动事件动作中的至少一个。

随后，在步骤S320中，为测试脚本配置测试运行参数，并划分测试场景。其中，测试运行参数包括：测试次数和测试时间，测试场景包括单场景测试、复合场景测试。

随后，在步骤S330中，将测试数据文件发送给移动终端，并指示移动终端安装自动化测试应用。其中，测试数据文件包括测试脚本、自动化测试应用、测试文件、测试运行参数文件。

在进行测试时，录制移动终端操作系统中执行多个事件动作的测试界面。如果测试过程中某个步骤出错，截取操作系统测试出错步骤的界面，同时，可以允许测试人员选择中止测试。

随后，在步骤S340中，输出移动终端操作系统的测试报告，以便客观地评价操作系统性能，寻找操作错误点达到提高系统整体性能的目的。

根据本发明的技术方案，通过配置测试数据文件，实现测试脚本与测试数据分离，达到数据驱动测试的目的。同时，设置测试出错中断，方便用户在测试出错时随时中断，提高操作系统的测试效率。

在此处所提供的说明书中，说明了大量具体细节。然而，能够理解，本发明的实施例可以在没有这些具体细节的情况下被实践。在一些实例中，并未详细示出公知的方法、结构和技术，以便不模糊对本说明书的理解。

类似地，应当理解，为了精简本公开并帮助理解各个发明方面中的一个或多个，在上面对本发明的示例性实施例的描述中，本发明的各个特征有时被一起分组到单个实施例、图、或者对其的描述中。然而，并不应将该公开的方法解释成反映如下意图：即所要求保护的本发明要求比在每个权利要求中所明确记载的特征更多特征。更确切地说，如下面的权利要求书所反映的那样，发明方面在于少于前面公开的单个实施例的所有特征。因此，遵循具体实施方式的权利要求书由此明确地并入该具体实施方式，其中每个权利要求本身都作为本发明的单独实施例。

本领域那些技术人员应当理解在本文所公开的示例中的设备的模块或单元或组件可以布置在如该实施例中所描述的设备中，或者可替换地可以定位在与该示例中的设备不同的一个或多个设备中。前述示例中的模块可以组合为一个模块或者此外可以分成多个子模块。

本领域那些技术人员可以理解，可以对实施例中的设备中的模块进行自适应性地改变并且把它们设置在与该实施例不同的一个或多个设备中。可以把实施例中的模块或单元或组件组合成一个模块或单元或组件，以及此外可以把它们分成多个子模块或子单元或子组件。除了这样的特征和/或过程或者单元中的至少一些是相互排斥之外，可以采用任何组合对本说明书(包括伴随的权利要求、摘要和附图)中公开的所有特征以及如此公开的任何方法或者设备的所有过程或单元进行组合。除非另外明确陈述，本说明书(包括伴随的权利要求、摘要和附图)中公开的每个特征可以由提供相同、等同或相似目的的替代特征来代替。

此外，本领域的技术人员能够理解，尽管在此所述的一些实施例包括其它实施例中所包括的某些特征而不是其它特征，但是不同实施例的特征的组合意味着处于本发明的范围之内并且形成不同的实施例。例如，在下面的权利要求书中，所要求保护的实施例的任意之一都可以以任意的组合方式来使用。

此外，所述实施例中的一些在此被描述成可以由计算机系统的处理器或者由执行所述功能的其它装置实施的方法或方法元素的组合。因此，具有用于实施所述方法或方法元素的必要指令的处理器形成用于实施该方法或方法元素的装置。此外，装置实施例的在此所述的元素是如下装置的例子：该装置用于实施由为了实施该发明的目的的元素所执行的功能。

如在此所使用的那样，除非另行规定，使用序数词“第一”、“第二”、“第三”等等来描述普通对象仅仅表示涉及类似对象的不同实例，并且并不意图暗示这样被描述的对象必须具有时间上、空间上、排序方面或者以任意其它方式的给定顺序。

尽管根据有限数量的实施例描述了本发明，但是受益于上面的描述，本技术领域内的技术人员明白，在由此描述的本发明的范围内，可以设想其它实施例。此外，应当注意，本说明书中使用的语言主要是为了可读性和教导的目的而选择的，而不是为了解释或者限定本发明的主题而选择的。因此，在不偏离所附权利要求书的范围和精神的情况下，对于本技术领域的普通技术人员来说许多修改和变更都是显而易见的。对于本发明的范围，对本发明所做的公开是说明性的，而非限制性的，本发明的范围由所附权利要求书限定。

Claims (10)

1.一种自动化系统测试设备，该设备驻留在计算设备中，计算设备适于与移动终端连接并测试移动终端的操作系统，所述系统测试设备包括：

测试脚本模块，适于存储测试脚本，所述测试脚本适于在运行过程中执行多个事件动作，其中所述多个事件动作包括在移动终端的输入事件动作、点击事件动作、获取事件控件动作、滑动事件动作中的至少一个；

数据配置模块，适于为所述测试脚本配置测试运行参数，并划分测试场景；

资源部署模块，适于根据测试场景将测试数据文件发送给移动终端；

应用安装模块，适于在测试脚本运行过程中，指示移动终端安装自动化测试应用；

屏幕录制模块，适于在测试脚本运行过程中，录制移动终端操作系统中执行多个事件动作的测试界面，以及截取操作系统测试出错步骤的界面。

2.根据权利要求1所述的系统测试设备，其中所述测试运行参数包括：测试次数和测试时间，所述测试场景包括单场景测试、复合场景测试。

3.根据权利要求1所述的系统测试设备，其中所述测试数据文件包括测试脚本、自动化测试应用、测试文件、测试运行参数文件。

4.根据权利要求1所述的系统测试设备，其中还包括：

日志管理模块，适于输出移动终端操作系统的测试报告。

5.根据权利要求1所述的系统测试设备，其中所述测试脚本模块还适于：在移动终端操作系统测试过程中出错时，中止测试。

6.一种自动化系统测试方法，该方法适于在计算设备中执行，计算设备适于与移动终端连接测试移动终端的操作系统，所述系统测试方法包括：

运行测试脚本，所述测试脚本适于在运行过程中执行多个事件动作，其中多个事件动作包括在移动终端的输入事件动作、点击事件动作、获取事件控件动作、滑动事件动作中的至少一个；

为所述测试脚本配置测试运行参数，并划分测试场景；

根据测试场景将测试数据文件发送给移动终端；

在测试脚本运行过程中，指示移动终端安装所述自动化测试应用；

录制移动终端操作系统中执行多个事件动作的测试界面，以及截取操作系统测试出错步骤的界面。

7.根据权利要求6所述的系统测试方法，其中所述测试运行参数包括：测试次数和测试时间，所述测试场景包括单场景测试、复合场景测试。

8.根据权利要求6所述的系统测试方法，其中所述测试数据文件包括测试脚本、自动化测试应用、测试文件、测试运行参数文件。

9.根据权利要求6所述的方法，其中还包括：

在移动终端操作系统测试过程中出错时，中止测试。

10.一种计算设备，包括如权利要求1-5中任一项所述的自动化系统测试设备。