CN106649128A - 一种自动控制终端运行的方法 - Google Patents

Abstract

本发明提供一种自动控制终端运行的方法，该方法包括：在与外部终端进行连接时响应于外部终端的运行信息；基于所述运行信息从控制数据库中读取本次运行的数据文件并使所述终端进入工作，外部终端界面显示工作信息；根据所述数据文件中规定的手势特征确定界面的当前手势，以进行外部终端界面的手势操作，所述手势特征至少包括手势类型、手势内容及界面操作位置。本发明能够在安装过程中实现终端装机流程操作的自动化。

Description

一种自动控制终端运行的方法

技术领域

本发明涉及计算机技术领域，特别涉及一种自动控制终端运行的方法。

背景技术

智能手机，是指像个人电脑一样，具有独立的操作系统，独立的运行空间，可以由用户自行安装软件、游戏、导航等第三方服务商提供的程序，并可以通过移动通讯网络来实现无线网络接入终端类型的总称。随着近几年智能手机业的飞速发展，出现了以操作系统为平台，以App为载体的商业运作模式，而现阶段手机App的安装主要还是依赖人工以手动方式逐个安装，且每个App都需要一系列的操作之后才能完成安装，这样非常浪费时间。同时，由于Android智能手机的碎片化日益严重，App适配问题也日趋严重，这也极大地影响了用户体验。

在中国专利：基于控件自动化遍历解决手机App机型适配问题的方法(CN201510373883.5)中，公开了一种采用预装有Android系统的智能手机、预装有Linux系统的电脑以及数据线，然后通过六个步骤实现支持纯控件App自动化遍历适配测试、支持HTML型应用测试、支持混合型应用自动化遍历测试，但是并未解决批量手机App如何以静默的方式实现快速安装与卸载的问题。

在现阶段，没有一个非常好的方法解决上述提到的问题。

发明内容

本发明技术方案解决的技术问题为，如何在安装过程中实现终端安装操作的自动化。

为了解决上述技术问题，本发明技术方案提供了一种自动控制终端运行的方法，包括：

在与外部终端进行连接时响应于外部终端的运行信息；

基于所述运行信息从控制数据库中读取本次运行的数据文件并使所述终端进入工作，外部终端界面显示工作信息；

根据所述数据文件中规定的手势特征确定界面的当前手势，以进行外部终端界面的手势操作，所述手势特征至少包括手势类型、手势内容及界面操作位置。

可选的，所述自动控制终端运行的方法还包括：

获取外部终端的接口信息；

基于所述接口信息与所述终端建立连接，并接收所述终端传输的运行信息。

可选的，所述获取外部终端的接口信息包括：检测至少一个接口以获取接口连接时得到的终端之PID信息及VID信息。

可选的，所述自动控制终端运行的方法还包括：响应于所述运行信息以推送本次运行的应用安装程序包至所述终端。

可选的，所述自动控制终端运行的方法还包括：

构建所述控制数据库；

创建数据规范，所述规范包括：控件标识、手势标识、手势输入标识及手势的界面位置标识；

根据所述数据规范从待运行的应用流程提取所述数据规范的元素，以形成所述数据文件。

可选的，所述控件标识包括工作界面中目标控件的类型，所述手势标识包括调用特定控件下所适用的手势类型，所述手势输入标识包括调用特定控件下手势输入内容的指向信息，手势的界面位置标识包括手势操作进行的界面位置。

可选的，所述控件对应本次运行对象。

可选的，所述手势类型包括：单击、双击、滑动、拖拽及勾选，所述手势内容包括：所述手势类型下输入的界面内容及实感信息，所述实感信息包括压力值信息；

所述界面操作位置由数据文件中的以下信息中的至少一种信息确定：界面元素的类型、资源ID、图片位置坐标以及运行文案关键词。

可选的，所述规范还包括：界面窗口标识、窗口标签标识、控件码标识、错误标识、注释标识及测试源数据；

所述界面窗口标识包括：窗口选择代码；

所述窗口标签标识包括：目标窗口中标签页选择代码；

所述控件码标识包括：相应控件的动作标识码；

所述错误标识包括：记录中需添加验证点的名称；

所述注释标识包括：记录注释；

所述测试源数据包括：自动运行的输入数据。

可选的，在与外部终端进行连接时响应于外部终端的运行信息包括：

在与外部终端进行连接时基于所接收终端的运行信息获取终端的硬件或系统识别信息；

推送屏幕终端触控模块的配置文件至终端以获取执行权限，所推送的配置文件对应所述硬件或系统识别信息且至少具有一种，所述配置文件规定了本次运行中手势操作的类型、手势内容及界面操作位置。

可选的，所述推送屏幕终端触控模块的配置文件至终端包括：

将所述配置文件转发至终端以供终端读取；

根据终端类型读取配置文件中的第一触控数据及第二触控数据，所述第一触控数据的手势内容包括所述界面内容，所述第二触控数据的手势内容包括所述实感信息，所述第一触控数据发送至应用层以处理，所述第二触控数据发送至驱动层及操作层以处理。

可选的，所述推送屏幕终端触控模块的配置文件至终端包括：基于所述数据文件中规定的请求获取所述配置文件的信息推送所述配置文件。

可选的，所述自动控制终端运行的方法还包括：基于本次运行数据文件规定的手势特征传递参数至所述配置文件以实现手势控制。

可选的，所述当前手势为点亮手势，所述手势特征包括：滑动手势类型、界面位移内容、界面原点及本次点亮时刻，所述数据文件中规定了点亮规则，所述终端根据所述点亮规则确定所述手势特征。

可选的，所述点亮规则对应于运行阶段而不同。

可选的，所述运行阶段包括：安装、卸载、设置终端界面的显示。

可选的，所述界面位移内容为无位移内容。

可选的，所述点亮规则包括多个点亮时刻，每个点亮时刻之间的间隔时间小于所述终端预设的休眠时间。

本发明技术方案能够在与外部终端连接时自动运行数据文件，并通过数据文件中的手势特征确定、执行当前的手势操作，以实现终端自动运行过程中手势控制的自动化，从而实现终端自我运行，提高数据处理的高效性及便利性。

本发明技术方案还能够根据创建的数据规范获得运行流程及手势控制的标识数据，从而在运行过程中适于读取及运行，并且，上述标识数据可以更新构建，与用户所需安装的数据流程相一致，从而实现数据的交互处理，提高数据处理的效率。

本发明技术方案还解决了将配置文件传输至外部终端以控制外部终端进行自动手势控制运行的方案，特别的，还讲配置文件中的手势数据进行区分，以更好地模拟手动的手势操作，提高了手势操作的准确度及界面模拟的真实性。

附图说明

通过阅读参照以下附图对非限制性实施例所作的详细描述，本发明的其他特征、目的和优点将会变得更明显：

图1为本发明技术方案一种自动控制终端运行的方法流程示意图；

图2为本发明技术方案一种智能装置的结构示意图；

图3为本发明技术方案另一种自动控制终端运行的方法流程示意图；

图4为本发明技术方案又一种自动控制终端运行的方法流程示意图；

图5为本发明技术方案提供的一种推送配置文件的方法流程示意图；

图6为本发明技术方案再一种自动控制终端运行的方法流程示意图；

图7为本发明技术方案提供一种自动控制终端运行的方法流程示意图。

具体实施方式

为了更好的使本发明的技术方案清晰的表示出来，下面结合附图对本发明作进一步说明。

相较于用户手动控制终端运行，终端的自动运行在安装批量程序、卸载程序、清理垃圾等应用场景下是必要的，也是具有明显优势的。首先自动化的终端控制可以提高安装、卸载、清理程序、系统等的效率，使用户可以减少系统性的操作而更加专注于终端的使用，提高用户的体验度。其次，自动化的终端控制还可以提高系统对于终端应用等系统的体系化管理，使终端的系统数据及安装文件能够在整个终端用户群中得到复用，并及时统计出使用数据，能够使系统自动化过程得到良性的数据反馈，有助于自动化控制的数据交互。

在系统控制终端进行安装、卸载、清理程序等过程中，由于运行的动作和用例是完全设计好的，运行期望的结果也是完全可以预料的，将终端自动运行，可以极大提高运行效率，缩短回归测试时间，从而可以运行更多更繁琐的应用及测试。同时，也满足了对于大量用户终端的同时控制测试。再有，自动控制终端运行可以更好地利用资源，将繁琐的任务自动化，从而提高安装、整理数据的准确性和测试人员的积极性。但是，在自动运行过程中，总有些运行情况是不适合于自动运行的，其必须借助于终端用户的手势操作，仅适合于人工操作。比如，在安装过程中，需要对一些安装规则进行类别选择，对一些安装条件进行认可等。但由于运行程式具有一致性和可重复性，只要基于一般的运行规则，便可对上述运行时机进行确认并模拟用户的手势操作，从而更进一步地实现终端控制的自动化程序。本发明技术方案基于上述发明想法及构思，提供了如下实施例来说明本发明技术方案，但需要说明的是，下列实施例仅是对本发明技术方案的具体实施方式进行举例，并非限定本发明技术方案的技术范围。

实施例一

如图1所示的一种自动控制终端运行的方法，具体包括如下步骤：

步骤S100，在与外部终端进行连接时响应于外部终端的运行信息；

步骤S101，基于所述运行信息从控制数据库中读取本次运行的数据文件并使所述终端进入工作，外部终端界面显示工作信息；

步骤S102，根据所述数据文件中规定的手势特征确定界面的当前手势，以进行外部终端界面的手势操作，所述手势特征至少包括手势类型、手势内容及界面操作位置。

本实施例的应用场景可以参考图2，图2显示的是利用一种智能装置自动控制终端安装应用的结构示意图，该智能装置可集成应用本实施例的上述流程步骤的，该智能装置包括USB接口11、处理模块12及通信桥接模块13。所述USB接口11适于与外部终端链接。所述外部终端可以是手机、平板电脑等手持设备。智能装置在与外部终端连接成功时，外部终端会发出所述运行信息至智能装置。所述运行信息可以是指确认接受所述智能装置对该外部终端进行自动控制的许可信息，该运行信息可以是经过智能装置在与外部终端连接成功时发送请求控制信息至外部终端而外部终端响应并反馈所述运行信息、或者外部终端迅速接收有关所述智能装置可控数据文件并安装上述可控数据文件以许可智能终端进行自动控制终端运行的有关操作。上述反馈的运行信息及安装认可可以通过用户的手势操作进行输入。

根据步骤S100，智能装置通过USB接口11与外部终端连接成功后，将外部终端的运行信息发送至所述处理模块12；具体地，所述USB即为“通串线”，是一个外部总线标准，用于规范电脑与外部设备的连接和通讯，是应用在PC领域的接口技术，USB接口支持设备的即插即用和热插拔功能；所述运行信息指所述USB端口上有USB线接入时，会有信号产生，系统可以据此判断是否有外部设备接入，并进行下一步操作。

根据步骤S101，所述处理模块12适于响应所述运行信息，查询控制数据库以获取本次运行的数据文件，所述数据文件包括：任务信息、安装规则及外部终端的程序安装任务队列中的应用文件。所述任务信息即启动所述智能装置执行安装任务的指令，例如，不同OS系统、版本、性能、存储空间、显示大小等因素，配置应用是否推送到手机，实现智能安装应用；所述安装规则即在具体安装App时的操作规则，例如，本领域技术人员理解，在根据应用安装规则，在不同手机上选择安装或不安装软件，安装完毕后，删除推送到手机端的应用文件，减少垃圾文件。所述处理模块12是整个所述智能装置的核心部件，用于控制所述智能装置的功能实现，例如，响应所述USB在连接成功时的运行信息，识别连接的所述外部终端的属性，通过查询数据库以获取与所述外部终端匹配的任务信息及安装规则，然后调用所述外部终端的程序安装任务队列中的应用并发送给所述通信桥接模块13。所述通信桥接模块13适于接收所述任务信息、安装规则及调用数据，并将所述任务信息、安装规则及调用数据通过所述USB接口进行传输，所述任务队列基于所述任务信息被获取。具体地，本领域技术人员理解，所述通信桥接模块13用在Android OS、IOS等通用手机系统中，起调试桥的作用。例如，通过所述通信桥接模块13，我们可以在Eclipse中方便通过DDMS来调试Android程序，实现debug工具功能，所述通信桥接模块13的工作方式比较特殊，采用监听Socket TCP5037等端口的方式让IDE和Qemu通讯，默认情况下通信桥接模块13会daemon相关的网络端口，所以当我们运行Eclipse时通信桥接模块13进程就会自动运行。优选地，现有技术的通信桥接模块可使用的手机设备有限(只有GOOGLE注册手机)，将可用手机设备的语言进行添加，使接口扩大到适用其他非GOOGLE注册手机；所述任务信息即由所述处理模块12通过信号通道传输到所述通信桥接模块13，执行任务的指令；所述安装规则即指在所述外部终端安装App时所适用的规则，所述处理器12会根据所述外部终端不同，选择不同的安装规则，例如，在不同的所述外部终端上选择安装或不安装某些软件；所述应用存储在所述智能装置的存储区域；所述任务队列包含一系列待安装的App，所述任务队列基于所述任务信息被获取。

不仅如此，在智能装置通过处理模块12从控制数据库中读取数据文件并通过通信桥接模块13传输至外部终端并控制终端进入安装应用程序后，终端的界面会不断地显示安装应用程序过程中的应用信息。其中应用信息还包括了需要进行手势操作以进行特定选择、从而进行持续工作的界面信息(即上述工作信息)，例如：请确认是否同意进行操作的界面信息、请选择一般安装还是自定义安装、请输入应用安装的用户名、密码等。现有技术中，用户不得不对上述需要进行手势操作的界面信息进行用户输入操作。

根据步骤S102，本实施例的可以对上述显示的需要进行手势操作的工作信息进行自动化处理，而不需要用户进行手动输入。由于控制数据库中的数据文件规定了与安装应用程序列表过程中有关的手势特征，即手势类型、手势内容及界面操作位置等能够确定当前终端界面的当前操作手势的信息，智能装置能够基于数据文件中有关手势特征的约定，对控制终端自动安装程序过程中的工作信息进行自动确认及手势操作。

特别的，根据步骤S102，本实施例的数据文件不仅规定了任务信息、安装规则及应用程序文件等自动控制终端进行程序安装的数据，还包括了执行程序安装过程中若急需外部手势操作以确定安装工作信息时的手势特征，所述手势特征可以适于智能装置模拟手势输入。进一步的，本实施例中，所述手势特征可以包括：手势类型、手势内容及界面操作位置，手势类型可以是单击、双击、滑动等界面手势操作类型，所述手势内容可以是手势操作所确定或执行的界面上的工作信息，比如“是”、“否”、用户名、密码等，所述界面操作位置可以是终端界面上的具体操作的屏幕区域或者数据库中记录的有关有效执行的屏幕操作的界面坐标范围。

更为具体的，在其他实施例中，所述手势特征的定义可以是：

所述手势类型包括：单击、双击、滑动、拖拽及勾选；

所述手势内容包括：所述手势类型下输入的界面内容及实感信息，所述实感信息包括压力值信息；

所述界面操作位置由数据文件中的以下信息中的至少一种信息确定：界面元素的类型、资源ID、图片位置坐标以及运行文案关键词。

在数据文件中至少规定了上述手势特征，则在具体执行步骤S102时，可以根据检测到或者预定的手势时刻，根据上述数据文件中的手势特征，在终端界面显示需要输入手势操作的工作信息，根据手势类型、手势内容及界面操作位置等手势特征确定手势操作类型、确定执行的界面内容及执行手势操作的界面区域，从而实现模拟手势操作。

本实施例中，所述应用安装程序可以集成于数据文件中进行传输，在其他实施例中，应用安装程序也可以独立于所述数据文件进行配置。比如，应用安装程序集成于数据包，采用数据包的数据传输形式进行数据沟通。在此种情况下，智能装置在响应于外部移动终端的运行信息时，可直接通过处理模块12及通信桥接模块13推送本次运行的应用安装程序包至所述终端。

实施例二

根据本发明技术方案的实施例一，本实施例提供了一种自动控制终端运行的方法，结合图3，具体包括如下步骤：

步骤S200，获取外部终端的接口信息；

步骤S201，基于所述接口信息与所述终端建立连接，并接收所述终端传输的运行信息；

步骤S202～步骤S204，分别与步骤S100～S102对应一致。

本实施例相较于实施例一还给出了智能设备与外部终端进行连接时，接口检测匹配的具体步骤过程。所述接口信息实际为USB端口连接时USB端口获取到相对设备上USB接口的PID信息(即产品识别码)及VID信息(即供应商ID)。

根据步骤S200，智能装置在于外部终端进行连接时，首先获取外部终端的接口信息，也即上述PID信息及VID信息；

根据步骤S201，智能装置根据USB接口端的PID信息及VID信息与所述终端建立连接，并接收所述终端传输上述运行信息。

实施例三

本实施例基于实施例一，进一步给出了一种自动控制终端运行的方法，如图4所示，具体包括如下步骤：

步骤S300，构建所述控制数据库；

步骤S301，创建数据规范，所述规范包括：控件标识、手势标识、手势输入标识及手势的界面位置标识；

步骤S302，根据所述数据规范从待运行的应用流程提取所述数据规范的元素，以形成所述数据文件；

步骤S303～S305，分别与步骤S100～S102对应一致。

本实施例给出了如何建立控制数据库及获取所述数据文件的具体技术手段。

由于控制数据库在本发明技术方案中非常重要，其建立了控制外部终端手势特征与工作信息中有关控件、界面信息、界面位置等关系的特征量的数据库。进一步的，在上述步骤中，所述控件标识包括工作界面中目标控件的类型，所述手势标识包括调用特定控件下所适用的手势类型，所述手势输入标识包括调用特定控件下手势输入内容的指向信息，手势的界面位置标识包括手势操作进行的界面位置。更为具体的，所述控件对应本次运行的终端应用对象。

除了上述信息外，在其他实施例中，所述规范还包括：界面窗口标识、窗口标签标识、控件码标识、错误标识、注释标识及测试源数据；其中：

所述界面窗口标识包括：窗口选择代码；

所述窗口标签标识包括：目标窗口中标签页选择代码；

所述控件码标识包括：相应控件的动作标识码；

所述错误标识包括：记录中需添加验证点的名称；

所述注释标识包括：记录注释；

所述测试源数据包括：自动运行的输入数据。

本实施例中的控件可以是所述应用程序的组成部分，也可以是一种应用程序。

在本实施例中，智能装置在与外部终端进行连接时，都可以根据外部终端的特定运行过程，或者特定应用程序的安装流程进行独属于该终端数据规范的创建以构建控制数据库中的数据规范，然后再形成数据文件。由于，每一个终端自动运行或安装的应用程序可以不同，所以对应于每一个外部终端，其所构建的控制数据库及创建的数据规范都是具有独特性的，从而形成与每一个外部终端对应的独特的数据文件，也就是说，针对每一个外部终端的自动控制过程，智能装置中都会形成与该外部终端运行、安装等过程相适应的控制数据库、数据规范及数据文件，这是显著区别于现有技术的。

根据步骤S300～S302，可以基于外部终端运行或安装的应用程序中的一个或多个控件，形成外部终端的控制数据库及数据规范，从而形成所述数据文件，数据文件中的手势类型、手势内容及界面操作位置等手势特征可以基于控件标识、手势标识、手势输入标识及手势的界面位置标识等规范从应用程序中的相关数据中获取得到，对于可选项，则基于预定的一般规则，进行选取确定。本实施例所指元素，指的是提取的可作为手势类型、手势内容及界面操作位置等手势特征的数据量。

实施例四

不同于实施例一，本实施例提供了一种自动控制终端运行的方法，给出了触控手势下压力触控与触摸触控形成的手势操作时如何自动运行控制的流程方法，参考图5，具体包括如下步骤：

步骤S400，在与外部终端进行连接时响应于外部终端的运行信息，其中，在与外部终端进行连接时基于所接收终端的运行信息获取终端的硬件或系统识别信息，然后再推送屏幕终端触控模块的配置文件至终端以获取执行权限，所推送的配置文件对应所述硬件或系统识别信息且至少具有一种，所述配置文件规定了本次运行中手势操作的类型、手势内容及界面操作位置。

步骤S401，基于所述运行信息从控制数据库中读取本次运行的数据文件并使所述终端进入工作，外部终端界面显示工作信息；

步骤S402，根据所述数据文件中规定的手势特征确定界面的当前手势，以进行外部终端界面的手势操作，所述手势特征至少包括手势类型、手势内容及界面操作位置。

在本实施例中，上述配置文件本质上是外部终端与智能装置之间关于手势操作类型、手势操作内容及界面操作位置的通信文件，用以进一步规定与外部终端本次运行时的手势操作的手势特征，并获得外部终端的执行权限。

进一步的，如图6所示，所述推送屏幕终端触控模块的配置文件至终端包括：

步骤S500，将所述配置文件转发至终端以供终端读取；

步骤S501，根据终端类型读取配置文件中的第一触控数据及第二触控数据，所述第一触控数据的手势内容包括所述界面内容，所述第二触控数据的手势内容包括所述实感信息，所述第一触控数据发送至应用层以处理，所述第二触控数据发送至驱动层及操作层以处理。

在上述步骤中，由于考虑到手势操作的触控方式可以是多样的，包括触摸手势及按压手势(需要压力值)，在模拟手势操作时，本实施例考虑到触控方式的不同，因此在配置文件中设置了第一触控数据及第二触控数据。其中，第一触控数据中包括可执行触摸手势的界面内容包括界面UI元素，比如界面元素的类型、资源ID、图片位置坐标以及运行文案关键词中的至少一种，可以通过执行时的判断流程去获取，具体在模拟层获得，界面内容自带属性，可以使用触摸手势中点击(包括双击、单击、滑动及拖动等操作，本质上都是点击)的操作类型去执行界面内容之元素。第二触控数据中包括执行按压手势所需的实感信息，实感信息还包括压力信息，压力信息用于终端的底层驱动，若在触摸手势中，点击被终端系统屏蔽，造成静默点击被过滤，则可退而求其次地选择利用第二触控数据模拟实体按压操作，也就是执行按压手势。

根据步骤S501，所述根据终端类型读取配置文件中的第一触控数据及第二触控数据包括：

若终端类型为安卓系统，则所述配置文件可以基于jar包被读取；

若终端类型为其他终端系统，则配置文件可以基于与该终端系统相适配的可执行程序读取配置文件；

若读取第一触控数据，则终端读取后直接可在应用层执行；

若读取第二触控数据，则转发第二触控数据中的屏幕界面坐标至驱动层，压力值至操作层，压力值可采用终端的默认数据进行输入。

本实施例的配置文件还可以适于确定设备的手势类型，以便数据文件在终端运行时在外部终端的合理执行，具体来说，在智能装置与外部终端连接并模拟点击文件(比如，可执行程序-配置文件)时，终端运行时读取配置文件设定执行模拟类型，可通过智能设备来自动运行操作，并根据终端类型确定配置文件中可执行的数据为第一触控数据或第二触控数据，从而区分底层驱动手势(按压操作)或模拟界面手势(触摸操作)，并转发至驱动层。

具体的，在其他实施例中，步骤S400的步骤中，涉及的以下技术特征还可以集成于步骤S402中进行执行：

在与外部终端进行连接时基于所接收终端的运行信息获取终端的硬件或系统识别信息，然后再推送屏幕终端触控模块的配置文件至终端以获取执行权限，所推送的配置文件对应所述硬件或系统识别信息且至少具有一种，所述配置文件规定了本次运行中手势操作的类型、手势内容及界面操作位置。具体的，所述推送屏幕终端触控模块的配置文件至终端包括：基于所述数据文件中规定的请求获取所述配置文件的信息推送所述配置文件。也就是说，所述数据文件依据与所述配置文件的请求与被请求关系规定所述手势特征，并将请求得到的配置文件确定界面的当前手势。更为具体的，在其他实施例中，所述的自动控制终端运行的方法还包括：基于本次运行数据文件规定的手势特征传递参数至所述配置文件以实现手势控制。

在一则提供了“模拟手”方案的应用例中，实现了自动控制终端运行的方法，可以在手机软件的自动安装时，模拟人手在手机屏幕上的点击操作，即实现“模拟手”。简单来说，本应用例适用于安卓手机，在上述智能装置通过ADB(安卓连接调试桥，即上述通信桥接模块13的具体实例)自动传输数据至外部终端并自动安装应用时，有些手机上会存在许可、提示等弹窗，非常影响批量安装应用体验。为了实现全自动化安装、卸载等过程，本应用例通过上述自动控制终端运行的方法，组织和封装仿真点击、滑动等基本操作，实现“模拟人工手”操作屏幕，彻底解放安装的人力成本。包括如下步骤：

实施例一的相关技术流程，及步骤：

a1)根据终端UI界面元素的类型、资源ID、图片位置坐标以及关键文案等查找需要仿真操作的区域或对象；

b1)经自主研发固件，封装了基本操作类型：点击按钮、勾选类型控件、界面元素文案、类型等；

c1)可实现操作有：直接单击、相对单击、滑动、拖拽以及勾选等行为方式。

上述封装数据即形成实施例中的所述数据文件中的手势特征。

以上方法在通用的品牌机型基本没有问题，但是在一些国内手机厂商私有定制的安卓系统上，该系统可能不支持本实施例所基于的自动控制流程(具体可以用：自动化测试框架uiautomator实现)或做了特殊过滤功能，屏蔽了自动控制流程的部分点击功能，从而，需要针对这些特殊机型做到适配，因此，又开发了以下兼容方式：

实施例四的相关技术流程，及步骤：

a2)DroidTouch方式，该方法是一种NDK(Native Development Kit)开发的技术，详见如下：准对不同的手机CPU(即所述外部终端处理器)，启用对应的DroidTouch(即包括推送所述配置文件)；

b2)通过adb命令push，推送DroidTouch到手机端；

c2)装机的智能设备设置DroidTouch 0755可执行权限，并运行；

d2)Jar包(模拟点击)通过tcp/ip协议，主动请求作为客户端连接DroidTouch；

e2)Jar包通知DroidTouch可操作范围和具体位置；

f2)Jar包本身会封装基本查找元素类型，通过传参的方式给到DroidTouch；方便操控DroidTouch；

g2)DroidTouch根据手机屏幕挂在在设备上的挂载点，绕过手机的JVM(JavaVirtual Machine)，直接从驱动层直接将仿真操作数据转发到手机设备上。从而避开了国内厂商定制的OS系统。

实施例六

基于实施例一，本实施例还提供了一种自动控制终端运行的方法，结合他图7，具体包括如下步骤：

步骤S600～S601，与S100～S101一致；

步骤S602，根据所述数据文件中规定的手势特征确定界面的当前手势，以进行外部终端界面的手势操作，若所述当前手势为点亮手势，所述手势特征包括：滑动手势类型、界面位移内容、界面原点及本次点亮时刻，所述数据文件中规定了点亮规则，所述终端根据所述点亮规则确定所述手势特征。

进一步的，根据步骤S602，所述点亮规则对应于运行阶段而不同。所述运行阶段至少包括：安装、卸载、设置终端界面的显示。

本实施例中，所述点亮手势用于保持终端安装、运行等情况时的屏幕常亮，若所述当前手势为点亮手势，手势的界面位移内容不发生位移，即为无位移内容。也就是说，在步骤S602的流程步骤中，依据手势特征预设的点亮时刻，基于点亮操作时确定的界面原点，以无位移内容进行手势操作，手势操作的类型可以预先确定、也可以随机确定。更进一步的，所述点亮规则包括多个点亮时刻，每个点亮时刻之间的间隔时间小于所述终端预设的休眠时间。点亮规则可以根据终端休眠的时间进行确定，防止终端在安装等运行状态时进入休眠。

在又一则提供了“模拟点亮”方案的应用例中，实现了自动控制终端运行的方法，可以基于自动化测试框架，完成点亮屏幕，包括：

实施例六的相关技术流程，及：

a3)智能装置通过Google提供的安卓UI界面的自动化测试框架uiautomator在连接外部手机时控制外部手机的运行安装并仿真点击操作，控制操作频率，实现模拟点亮屏幕；

b3)当手机通过USB连接到上述智能装置后，智能装置固件监听USB接口，然后连接外部手机，推送自定义jar包(即模拟点击程序包)到手机端；

c3)启动自动化测试框架，调用自主研发的jar包；

d3)在手机端运行的jar包，可根据智能装置自定义的阶段(安装、卸载、设置手机桌面等)采用不同的点亮屏幕策略；

e3)一般策略是通过点击屏幕原点(0，0)，短暂且无位移滑动屏幕，屏幕短暂点亮，并间隔一定时间用于实际界面的操作。

如此往复操纵，持续点亮手机屏幕，整个点亮屏幕期间由上述智能装置实现整体运行控制。

以上对本发明的具体实施例进行了描述。需要理解的是，本发明并不局限于上述特定实施方式，本领域技术人员可以在权利要求的范围内做出各种变形或修改，这并不影响本发明的实质内容。

Claims (18)

1.一种自动控制终端运行的方法，其特征在于，包括：

在与外部终端进行连接时响应于外部终端的运行信息；

基于所述运行信息从控制数据库中读取本次运行的数据文件并使所述终端进入工作，外部终端界面显示工作信息；

根据所述数据文件中规定的手势特征确定界面的当前手势，以进行外部终端界面的手势操作，所述手势特征至少包括手势类型、手势内容及界面操作位置。

2.如权利要求1所述的自动控制终端运行的方法，其特征在于，还包括：

获取外部终端的接口信息；

基于所述接口信息与所述终端建立连接，并接收所述终端传输的运行信息。

3.如权利要求2所述的自动控制终端运行的方法，其特征在于，所述获取外部终端的接口信息包括：检测至少一个接口以获取接口连接时得到的终端之PID信息及VID信息。

4.如权利要求1所述的自动控制终端运行的方法，其特征在于，还包括：响应于所述运行信息以推送本次运行的应用安装程序包至所述终端。

5.如权利要求1所述的自动控制终端运行的方法，其特征在于，还包括：

构建所述控制数据库；

创建数据规范，所述规范包括：控件标识、手势标识、手势输入标识及手势的界面位置标识；

根据所述数据规范从待运行的应用流程提取所述数据规范的元素，以形成所述数据文件。

6.如权利要求5所述的自动控制终端运行的方法，其特征在于，所述控件标识包括工作界面中目标控件的类型，所述手势标识包括调用特定控件下所适用的手势类型，所述手势输入标识包括调用特定控件下手势输入内容的指向信息，手势的界面位置标识包括手势操作进行的界面位置。

7.如权利要求5或6所述的自动控制终端运行的方法，其特征在于，所述控件对应本次运行对象。

8.如权利要求1至6任一项所述的自动控制终端运行的方法，其特征在于，所述手势类型包括：单击、双击、滑动、拖拽及勾选，所述手势内容包括：所述手势类型下输入的界面内容及实感信息，所述实感信息包括压力值信息；

所述界面操作位置由数据文件中的以下信息中的至少一种信息确定：界面元素的类型、资源ID、图片位置坐标以及运行文案关键词。

9.如权利要求5所述的自动控制终端运行的方法，其特征在于，所述规范还包括：界面窗口标识、窗口标签标识、控件码标识、错误标识、注释标识及测试源数据；

所述界面窗口标识包括：窗口选择代码；

所述窗口标签标识包括：目标窗口中标签页选择代码；

所述控件码标识包括：相应控件的动作标识码；

所述错误标识包括：记录中需添加验证点的名称；

所述注释标识包括：记录注释；

所述测试源数据包括：自动运行的输入数据。

10.如权利要求1所述的自动控制终端运行的方法，其特征在于，在与外部终端进行连接时响应于外部终端的运行信息包括：

在与外部终端进行连接时基于所接收终端的运行信息获取终端的硬件或系统识别信息；

推送屏幕终端触控模块的配置文件至终端以获取执行权限，所推送的配置文件对应所述硬件或系统识别信息且至少具有一种，所述配置文件规定了本次运行中手势操作的类型、手势内容及界面操作位置。

11.如权利要求10所述的自动控制终端运行的方法，其特征在于，所述推送屏幕终端触控模块的配置文件至终端包括：

将所述配置文件转发至终端以供终端读取；

根据终端类型读取配置文件中的第一触控数据及第二触控数据，所述第一触控数据的手势内容包括所述界面内容，所述第二触控数据的手势内容包括所述实感信息，所述第一触控数据发送至应用层以处理，所述第二触控数据发送至驱动层及操作层以处理。

12.如权利要求10所述的自动控制终端运行的方法，其特征在于，所述推送屏幕终端触控模块的配置文件至终端包括：基于所述数据文件中规定的请求获取所述配置文件的信息推送所述配置文件。

13.如权利要求10所述的自动控制终端运行的方法，其特征在于，还包括：基于本次运行数据文件规定的手势特征传递参数至所述配置文件以实现手势控制。

14.如权利要求1所述的自动控制终端运行的方法，其特征在于，所述当前手势为点亮手势，所述手势特征包括：滑动手势类型、界面位移内容、界面原点及本次点亮时刻，所述数据文件中规定了点亮规则，所述终端根据所述点亮规则确定所述手势特征。

15.如权利要求14所述的自动控制终端运行的方法，其特征在于，所述点亮规则对应于运行阶段而不同。

16.如权利要求15所述的自动控制终端运行的方法，其特征在于，所述运行阶段包括：安装、卸载、设置终端界面的显示。

17.如权利要求14所述的自动控制终端运行的方法，其特征在于，所述界面位移内容为无位移内容。

18.如权利要求14所述的自动控制终端运行的方法，其特征在于，所述点亮规则包括多个点亮时刻，每个点亮时刻之间的间隔时间小于所述终端预设的休眠时间。