CN104765686B - 测试应用程序的方法及装置 - Google Patents

Abstract

本公开是关于测试应用程序的方法及装置。用以帮助用户简单、快捷的测试应用程序。方法包括：启动并执行测试应用程序的测试用例；在执行所述测试用例的过程中实时生成日志，根据所述日志的内容控制所述测试用例的执行流程。本公开技术方案通过在执行测试用例的过程中实时生成日志，根据日志的内容控制测试用例的执行流程。从而使编写的测试用例可以适用于任何的操作系统，使测试人员可以写出很精准的测试用例，并且可以简单、快捷的测试应用程序，提高了测试效率。

Description

测试应用程序的方法及装置

技术领域

本公开涉及互联网技术领域，尤其涉及测试应用程序的方法及装置。

背景技术

目前，随着互联网电视的普及，互联网电视上的应用也开始活跃。随着应用的增加，应用的测试工作也面临大的压力，为了提高测试人员的效率，自动化测试是手工测试的一个强大补充，每次新版本出来，如果能够对所有的测试用例自动做一次回归测试，对应用的质量、测试人员的测试效率，都是会有比较大的提高。

目前已知的自动化测试方案包括：基于随机事件的测试、基于界面元素的测试。基于随机事件的测试，是随机发送一组事件序列，测试应用程序的表现是否正常。这种自动化测试主要用于压力测试，不太适合细粒度的用例测试。基于界面元素的测试，每个测试用例都是一组事件序列，我们根据控件的元素来判断用例结果的正确性。这种测试方法不适合所有的应用，比如Android手机系统，如果不是用Java写的应用，是没有办法获取到应用的界面元素的，并且这种用例对测试人员的要求也比较高，需要了解一部分待测试程序的实现方式。

发明内容

为克服相关技术中存在的问题，本公开实施例提供一种测试应用程序的方法及装置，用以帮助用户简单、快捷的测试应用程序。

根据本公开实施例的第一方面，提供一种测试应用程序的方法，包括：

启动并执行测试应用程序的测试用例；

在执行所述测试用例的过程中实时生成日志，根据所述日志的内容控制所述测试用例的执行流程。

在一个实施例中，所述启动并执行测试应用程序的测试用例，可包括：启动测试应用程序的测试用例，执行所述测试用例中的测试步骤；

所述在执行所述测试用例的过程中实时生成日志，根据所述日志的内容控制所述测试用例的执行流程，可包括：在每执行一个测试步骤完毕时，生成该测试步骤的日志，根据所述日志的内容确定下一个要执行的测试步骤。

在一个实施例中，所述根据所述日志的内容确定下一个要执行的测试步骤，包括：判断所述日志的内容是否满足测试用例中一个步骤的执行条件，当满足时，确定该个测试步骤为下一个测试步骤。

在一个实施例中，所述在每执行一个测试步骤完毕时，生成该测试步骤的日志，根据所述日志的内容确定下一个要执行的测试步骤，可包括：

在每执行一个按键事件完毕时，生成该按键事件的日志，判断所述日志的内容是否满足测试用例中一个按键事件的执行条件，当满足时，确定该个按键事件为下一个按键事件。

在一个实施例中，在所述在执行所述测试用例的过程中实时生成日志，根据所述日志的内容控制所述测试用例的执行流程之后，所述方法还包括：

显示所述测试用例的执行结果。

根据本公开实施例的第二方面，提供一种测试应用程序的装置，包括：

启动模块，用于启动并执行测试应用程序的测试用例；

控制模块，用于在执行所述测试用例的过程中实时生成日志，根据所述日志的内容控制所述测试用例的执行流程。

在一个实施例中，所述启动模块，可包括：

启动子模块，用于启动测试应用程序的测试用例，执行所述测试用例中的测试步骤；

所述控制模块，可包括：

控制子模块，用于在每执行一个测试步骤完毕时，生成该测试步骤的日志，根据所述日志的内容确定下一个要执行的测试步骤。

在一个实施例中，

所述控制子模块，还用于判断所述日志的内容是否满足测试用例中一个步骤的执行条件，当满足时，确定该个测试步骤为下一个测试步骤。

在一个实施例中，

所述控制子模块，还用于在每执行一个按键事件完毕时，生成该按键事件的日志，判断所述日志的内容是否满足测试用例中一个按键事件的执行条件，当满足时，确定该个按键事件为下一个按键事件。

在一个实施例中，所述装置还可包括：

显示模块，用于显示所述测试用例的执行结果。

根据本公开实施例的第三方面，提供一种测试应用程序的装置，包括：

处理器；

用于存储处理器可执行指令的存储器；

其中，所述处理器被配置为：

启动并执行测试应用程序的测试用例；

在执行所述测试用例的过程中实时生成日志，根据所述日志的内容控制所述测试用例的执行流程。

本公开的实施例提供的技术方案可以包括以下有益效果：

上述技术方案，通过在执行测试用例的过程中实时生成日志，根据日志的内容控制测试用例的执行流程。从而使编写的测试用例可以适用于任何的操作系统，使测试人员可以写出很精准的测试用例，并且可以简单、快捷的测试应用程序，提高了测试效率。

应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本公开。

附图说明

此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本公开的实施例，并与说明书一起用于解释本公开的原理。

图1是根据一示例性实施例示出的测试应用程序的方法的流程图。

图2是根据一示例性实施例示出的另一种测试应用程序的方法的流程图。

图3是根据一示例性实施例示出的另一种测试应用程序的方法的流程图。

图4是根据一示例性实施例示出的另一种测试应用程序的方法的流程图。

图5是根据一示例性实施例一示出的测试应用程序的方法的流程图。

图6是根据一示例性实施例二示出的测试应用程序的方法的流程图。

图7是根据一示例性实施例示出的测试应用程序的装置的框图。

图8是根据一示例性实施例示出的另一种测试应用程序的装置的框图。

图9是根据一示例性实施例示出的另一种测试应用程序的装置的框图。

图10是根据一示例性实施例示出的适用于测试应用程序的装置的框图。

具体实施方式

这里将详细地对示例性实施例进行说明，其示例表示在附图中。下面的描述涉及附图时，除非另有表示，不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本公开相一致的所有实施方式。相反，它们仅是与如所附权利要求书中所详述的、本公开的一些方面相一致的装置和方法的例子。

本公开实施例提供了一种测试应用程序的方法，该方法可用于测试各种操作系统如IOS、Android系统的应用程序，该应用程序不仅适用于Java编写的应用程序，也适用于用C++编写的应用程序，如图1所示，该方法包括步骤S101-S102：

在步骤S101中，启动并执行测试应用程序的测试用例。

测试用例是为某个特殊目标(比如应用程序)而编制的一组测试输入、执行条件以及预期结果，以便测试某个应用程序路径或核实是否满足某个特定需求。本步骤中，为了测试某应用程序，启动并执行测试该应用程序的测试用例。

在步骤S102中，在执行测试用例的过程中实时生成日志，根据日志的内容控制测试用例的执行流程。

本公开是基于日志反馈的测试框架的测试方法，在执行测试用例的过程中，每个测试步骤会生成日志，根据日志的具体内容来决定测试用例的执行流程。

本公开实施例的上述方法，通过在执行测试用例的过程中实时生成日志，根据日志的内容控制测试用例的执行流程。从而使编写的测试用例可以适用于任何的操作系统，使测试人员可以写出很精准的测试用例，并且可以简单、快捷的测试应用程序，提高了测试效率。

在一个实施例中，如图2所示，

步骤S101可实施为步骤S201：

在步骤S201中，启动测试应用程序的测试用例，执行测试用例中的测试步骤。

此时，步骤S102可实施为步骤S202：

在步骤S202中，在每执行一个测试步骤完毕时，生成该测试步骤的日志，根据日志的内容确定下一个要执行的测试步骤。

在一个实施例中，步骤S202中的“根据日志的内容确定下一个要执行的测试步骤”还可以实施为如下步骤A:

步骤A，判断日志的内容是否满足测试用例中一个步骤的执行条件，当满足时，确定该个测试步骤为下一个测试步骤。

在一个实施例中，当测试步骤为按键事件时，接收输入的按键事件，如图3所示，步骤S202可实施为步骤S301：

在步骤S301中，

在每执行一个按键事件完毕时，生成该按键事件的日志，判断日志的内容是否满足测试用例中一个按键事件的执行条件，当满足时，确定该个按键事件为下一个按键事件。

在一个实施例中，如图4所示，在步骤S102之后，上述方法还可包括步骤S103：

在步骤S103中，显示测试用例的执行结果。

在该步骤中，执行完测试用例后，显示测试用例的执行结果，与预期结果进行对比，确定是否与预期结果相符，从而可以判断该应用程序是否符合需求。

测试终端设备的应用程序时，比如，测试小米盒子的在线视频应用程序时，从应用程序的首页开始，依次按下ENTER(进入首页推荐影片的详情)、ENTER(进入播放页面)，那么ENTER-ENTER的按键序列即为测试在线视频播放主页第一个推荐视频的测试用例。但单纯的按键序列是不能满足复杂的测试用例的，拿上面的在线视频应用程序测试用例来说，ENTER进入首页推荐影片的详情，我们需要等待详情数据的加载，完成之后才能再次ENTER进入，因此第二个ENTER之前需要等待一个时间，则测试用例可改为：ENTER-SLEEP(time)-ENTER，然而，这种等待时间的方式并不好，因为等待的时间是因网络状况而定的，过长则会增加测试用例的执行时间，过短则可能导致网络状况不好的情况下，详情还未加载出来就触发了第二个ENTER，测试用例就失败了。而本公开的核心并不是抽象按键序列，是基于日志反馈的测试框架，在每个按键按下之后，我们可以等待一个相关的日志文本，根据日志文本的内容，来决定下一个按键的触发，下面以具体实施例来说明本公开实施例提供的上述技术方案。

实施例一

实施例一利用本公开实施例提供的测试应用程序的方法，来测试终端设备的应用程序，终端设备例如可以是电视、机顶盒、智能盒子等设备，应用程序可以是视频、工具、交友等各种应用程序。例如，测试终端设备的在线视频应用程序，其应用场景为，将智能盒子的遥控器按键“左”、“右”、“上”、“下”、“确定”、“返回”、“菜单”、“主页”分别映射为：“LEFT”，“RIGHT”、“UP”、“DOWN”、“ENTER”、“BACK”、“MENU”、“HOME”。如图5所示，终端设备接下来进行如下操作:

在步骤S501中，终端设备启动测试在线视频应用程序的测试用例。

在步骤S502中，执行测试用例中的测试步骤。

在步骤S503中，执行按键事件“ENTER”，生成该按键事件“ENTER”的日志“详情加载完成”，当“详情加载完成”的条件满足时，确定执行下一个按键事件“ENTER”。

具体的测试用例为：

ENTER

WAIT(“详情加载完成”)

ENTER，

在实施例一中，通过在执行测试用例的过程中实时生成日志，根据日志的内容确定出下一个要执行的按键事件。从而可以根据日志的内容来了解应用实际运行过程中的情况，使测试人员可以写出很精准的测试用例，并且可以简单、快捷的测试应用程序，提高了测试效率。

实施例一为在线视频应用的首页的视频只有一个或者播放第一个视频时的测试用例，当有两个视频源甚至多个视频源时，可以选择视频源，这时可通过实施例二来实现。

实施例二利用本公开实施例提供的测试应用程序的方法，来测试终端设备的应用程序，当视频源有两个甚至多个时，以选择第二个视频源为例，如图6所示，终端设备接下来进行如下操作:

在步骤S601中，终端设备启动测试在线视频应用程序的测试用例。

在步骤S602中，执行按键事件“ENTER”，生成该按键事件“ENTER”的日志“详情加载完成”，当“详情加载完成”的条件满足时，确定执行下一个按键事件“ENTER”。

在步骤S603中，该第二个按键事件“ENTER”生成的日志为“播放源的按键大于1”，根据该日志内容确定触发“RIGHT”按键事件。

具体的测试用例为：

在实施例二中，通过在执行测试用例的过程中实时生成日志，根据日志的内容确定出下一个要执行的按键事件。从而可以根据日志的内容来了解应用实际运行过程中的情况，使测试人员可以写出很精准的测试用例，并且可以简单、快捷的测试应用程序，提高了测试效率。

对应本公开实施例提供的上述测试应用程序的方法，本公开实施例还提供一种测试应用程序的装置，如图7所示，该测试应用程序的装置包括：

启动模块71，用于启动并执行测试应用程序的测试用例；

控制模块72，用于在执行测试用例的过程中实时生成日志，根据日志的内容控制测试用例的执行流程。

在一个实施例中，如图8所示，启动模块71，可包括：

启动子模块81，用于启动测试应用程序的测试用例，执行测试用例中的测试步骤；

控制模块72，可包括：

控制子模块82，用于在每执行一个测试步骤完毕时，生成该测试步骤的日志，根据日志的内容确定下一个要执行的测试步骤。

在一个实施例中，控制子模块82，还用于判断日志的内容是否满足测试用例中一个步骤的执行条件，当满足时，确定该个测试步骤为下一个测试步骤。

在一个实施例中，控制子模块82还用于在每执行一个按键事件完毕时，生成该按键事件的日志，判断日志的内容是否满足测试用例中一个按键事件的执行条件，当满足时，确定该个按键事件为下一个按键事件。

在一个实施例中，如图9所示，上述装置还可包括：

显示模块73，用于显示测试用例的执行结果。

本公开实施例的上述装置，通过在执行测试用例的过程中实时生成日志，根据日志的内容控制测试用例的执行流程。从而使编写的测试用例可以适用于任何的操作系统，使测试人员可以写出很精准的测试用例，并且可以简单、快捷的测试应用程序，提高了测试效率。

图10是根据一示例性实施例示出的一种测试应用程序的装置1200的框图，该装置适用于终端设备。例如，装置1200可以是移动电话，计算机，数字广播终端，消息收发设备，游戏控制台，平板设备，医疗设备，健身设备，个人数字助理等。

参照图10，装置1200可以包括以下一个或多个组件：处理组件1202，存储器1204，电源组件1206，多媒体组件1208，音频组件1210，输入/输出(I/O)的接口1212，传感器组件1214，以及通信组件1216。

处理组件1202通常控制装置1200的整体操作，诸如与显示，电话呼叫，数据通信，相机操作和记录操作相关联的操作。处理元件1202可以包括一个或多个处理器1220来执行指令，以完成上述的方法的全部或部分步骤。此外，处理组件1202可以包括一个或多个模块，便于处理组件1202和其他组件之间的交互。例如，处理部件1202可以包括多媒体模块，以方便多媒体组件1208和处理组件1202之间的交互。

存储器1204被配置为存储各种类型的数据以支持在设备1200的操作。这些数据的示例包括用于在装置1200上操作的任何应用程序或方法的指令，联系人数据，电话簿数据，消息，图片，视频等。存储器1204可以由任何类型的易失性或非易失性存储设备或者它们的组合实现，如静态随机存取存储器(SRAM)，电可擦除可编程只读存储器(EEPROM)，可擦除可编程只读存储器(EPROM)，可编程只读存储器(PROM)，只读存储器(ROM)，磁存储器，快闪存储器，磁盘或光盘。

电力组件1206为装置1200的各种组件提供电力。电力组件1206可以包括电源管理系统，一个或多个电源，及其他与为装置1200生成、管理和分配电力相关联的组件。

多媒体组件1208包括在所述装置1200和用户之间的提供一个输出接口的屏幕。在一些实施例中，屏幕可以包括液晶显示器(LCD)和触摸面板(TP)。如果屏幕包括触摸面板，屏幕可以被实现为触摸屏，以接收来自用户的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、滑动和触摸面板上的手势。所述触摸传感器可以不仅感测触摸或滑动动作的边界，而且还检测与所述触摸或滑动操作相关的持续时间和压力。在一些实施例中，多媒体组件1208包括一个前置摄像头和/或后置摄像头。当设备1200处于操作模式，如拍摄模式或视频模式时，前置摄像头和/或后置摄像头可以接收外部的多媒体数据。每个前置摄像头和后置摄像头可以是一个固定的光学透镜系统或具有焦距和光学变焦能力。

音频组件1210被配置为输出和/或输入音频信号。例如，音频组件1210包括一个麦克风(MIC)，当装置1200处于操作模式，如呼叫模式、记录模式和语音识别模式时，麦克风被配置为接收外部音频信号。所接收的音频信号可以被进一步存储在存储器1204或经由通信组件1216发送。在一些实施例中，音频组件1210还包括一个扬声器，用于输出音频信号。

I/O接口1212为处理组件1202和外围接口模块之间提供接口，上述外围接口模块可以是键盘，点击轮，按钮等。这些按钮可包括但不限于：主页按钮、音量按钮、启动按钮和锁定按钮。

传感器组件1214包括一个或多个传感器，用于为装置1200提供各个方面的状态评估。例如，传感器组件1214可以检测到设备1200的打开/关闭状态，组件的相对定位，例如所述组件为装置1200的显示器和小键盘，传感器组件1214还可以检测装置1200或装置1200一个组件的位置改变，用户与装置1200接触的存在或不存在，装置1200方位或加速/减速和装置1200的温度变化。传感器组件1214可以包括接近传感器，被配置用来在没有任何的物理接触时检测附近物体的存在。传感器组件1214还可以包括光传感器，如CMOS或CCD图像传感器，用于在成像应用中使用。在一些实施例中，该传感器组件1214还可以包括加速度传感器，陀螺仪传感器，磁传感器，压力传感器或温度传感器。

通信组件1216被配置为便于装置1200和其他设备之间有线或无线方式的通信。装置1200可以接入基于通信标准的无线网络，如WiFi，2G或3G，或它们的组合。在一个示例性实施例中，通信部件1216经由广播信道接收来自外部广播管理系统的广播信号或广播相关信息。在一个示例性实施例中，所述通信部件1216还包括近场通信(NFC)模块，以促进短程通信。例如，在NFC模块可基于射频识别(RFID)技术，红外数据协会(IrDA)技术，超宽带(UWB)技术，蓝牙(BT)技术和其他技术来实现。

在示例性实施例中，装置1200可以被一个或多个应用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、控制器、微控制器、微处理器或其他电子元件实现，用于执行上述方法。

在示例性实施例中，还提供了一种包括指令的非临时性计算机可读存储介质，例如包括指令的存储器1204，上述指令可由装置1200的处理器820执行以完成上述方法。例如，所述非临时性计算机可读存储介质可以是ROM、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。

一种测试应用程序的装置，包括：

处理器；

用于存储处理器可执行指令的存储器；

其中，所述处理器被配置为：

启动并执行测试应用程序的测试用例；

在执行所述测试用例的过程中实时生成日志，根据所述日志的内容控制所述测试用例的执行流程。

所述处理器还被配置为：

所述启动并执行测试应用程序的测试用例，可包括：启动测试应用程序的测试用例，执行所述测试用例中的测试步骤；

所述在执行所述测试用例的过程中实时生成日志，根据所述日志的内容控制所述测试用例的执行流程，可包括：在每执行一个测试步骤完毕时，生成该测试步骤的日志，根据所述日志的内容确定下一个要执行的测试步骤。

所述处理器还被配置为：

所述根据所述日志的内容确定下一个要执行的测试步骤，包括：判断所述日志的内容是否满足测试用例中一个步骤的执行条件，当满足时，确定该个测试步骤为下一个测试步骤。

所述处理器还被配置为：

在每执行一个测试步骤完毕时，生成该测试步骤的日志，根据所述日志的内容确定下一个要执行的测试步骤，可包括：

在每执行一个按键事件完毕时，生成该按键事件的日志，判断所述日志的内容是否满足测试用例中一个按键事件的执行条件，当满足时，确定该个按键事件为下一个按键事件。

所述处理器还被配置为：

在所述在执行所述测试用例的过程中实时生成日志，根据所述日志的内容控制所述测试用例的执行流程之后，所述方法还包括：

显示所述测试用例的执行结果。

一种非临时性计算机可读存储介质，当所述存储介质中的指令由移动终端的处理器执行时，使得移动终端能够执行一种测试应用程序的方法，所述方法包括：

启动并执行测试应用程序的测试用例；

在执行所述测试用例的过程中实时生成日志，根据所述日志的内容控制所述测试用例的执行流程。

在一个实施例中，

所述启动并执行测试应用程序的测试用例，可包括：启动测试应用程序的测试用例，执行所述测试用例中的测试步骤；

所述在执行所述测试用例的过程中实时生成日志，根据所述日志的内容控制所述测试用例的执行流程，可包括：在每执行一个测试步骤完毕时，生成该测试步骤的日志，根据所述日志的内容确定下一个要执行的测试步骤。

在一个实施例中，

所述根据所述日志的内容确定下一个要执行的测试步骤，包括：判断所述日志的内容是否满足测试用例中一个步骤的执行条件，当满足时，确定该个测试步骤为下一个测试步骤。

在一个实施例中，在每执行一个测试步骤完毕时，生成该测试步骤的日志，根据所述日志的内容确定下一个要执行的测试步骤，可包括：

在每执行一个按键事件完毕时，生成该按键事件的日志，判断所述日志的内容是否满足测试用例中一个按键事件的执行条件，当满足时，确定该个按键事件为下一个按键事件。

在一个实施例中，在所述在执行所述测试用例的过程中实时生成日志，根据所述日志的内容控制所述测试用例的执行流程之后，所述方法还包括：

显示所述测试用例的执行结果。

本领域技术人员在考虑说明书及实践这里公开的公开后，将容易想到本公开的其它实施方案。本申请旨在涵盖本公开的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的，本公开的真正范围和精神由下面的权利要求指出。

应当理解的是，本公开并不局限于上面已经描述并在附图中示出的精确结构，并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求来限制。

Claims (7)

1.一种测试应用程序的方法，其特征在于，包括：

启动测试应用程序的测试用例，执行所述测试用例中的测试步骤；

在每执行一个测试步骤完毕时，生成该测试步骤的日志，判断所述日志的内容是否满足测试用例中一个步骤的执行条件，当满足时，确定该个测试步骤为下一个测试步骤。

2.如权利要求1所述的方法，其特征在于，所述在每执行一个测试步骤完毕时，生成该测试步骤的日志，根据所述日志的内容确定下一个要执行的测试步骤，包括：

在每执行一个按键事件完毕时，生成该按键事件的日志，判断所述日志的内容是否满足测试用例中一个按键事件的执行条件，当满足时，确定该个按键事件为下一个按键事件。

3.如权利要求1或2中任一项所述的方法，其特征在于，所述方法还包括：

显示所述测试用例的执行结果。

4.一种测试应用程序的装置，其特征在于，包括：

启动模块，用于启动并执行测试应用程序的测试用例；

控制模块，用于在执行所述测试用例的过程中实时生成日志，根据所述日志的内容控制所述测试用例的执行流程；

所述启动模块，包括：

启动子模块，用于启动测试应用程序的测试用例，执行所述测试用例中的测试步骤；

所述控制模块，包括：

控制子模块，用于在每执行一个测试步骤完毕时，生成该测试步骤的日志，根据所述日志的内容确定下一个要执行的测试步骤；

所述控制子模块，还用于判断所述日志的内容是否满足测试用例中一个步骤的执行条件，当满足时，确定该个测试步骤为下一个测试步骤。

5.如权利要求4所述的装置，其特征在于，

所述控制子模块，还用于在每执行一个按键事件完毕时，生成该按键事件的日志，判断所述日志的内容是否满足测试用例中一个按键事件的执行条件，当满足时，确定该个按键事件为下一个按键事件。

6.如权利要求4或5所述的装置，其特征在于，所述装置还包括：

显示模块，用于显示所述测试用例的执行结果。

7.一种测试应用程序的装置，其特征在于，包括：

处理器；

用于存储处理器可执行指令的存储器；

其中，所述处理器被配置为：

启动测试应用程序的测试用例，执行所述测试用例中的测试步骤；

在每执行一个测试步骤完毕时，生成该测试步骤的日志，判断所述日志的内容是否满足测试用例中一个步骤的执行条件，当满足时，确定该个测试步骤为下一个测试步骤。