CN113709243B - 设备远程控制方法及装置、电子设备和存储介质 - Google Patents

Abstract

本公开是关于一种设备远程控制方法及装置、电子设备以及计算机可读存储介质，涉及计算机技术领域，可以应用于对目标设备进行远程控制的场景。该方法包括：获取生成的模拟控制指令，通过模拟控制指令在目标设备安装并启动目标程序；模拟控制指令通过模拟集成开发环境针对目标设备发送的数据控制指令得到；建立与目标设备之间的端口映射连接；端口映射连接包括本地端口与目标设备端口之间的映射关系；基于目标程序与端口映射连接对目标设备进行远程控制。本公开无需依赖预先安装在目标设备的集成开发环境与第三方工具即可实现对目标设备的远程控制。

Description

设备远程控制方法及装置、电子设备和存储介质

技术领域

本公开涉及计算机技术领域，具体而言，涉及一种设备远程控制方法、设备远程控制装置、电子设备以及计算机可读存储介质。

背景技术

目前业界在远程控制iOS设备的方案中，影响范围比较广的是基于脸书(Facebook)已放弃维护的移动端测试框架(WebDriverAgent，WDA)开源框架，该框架是在iOS设备中安装一个服务器程序(server app)，运行并监听对于设备指定端口的请求指令，通过解析指令调用设备系统私有库方法完成模拟触控等行为。

在该框架的基础上衍生出了很多远程控制框架，将WebDriverAgent开源框架为基础，拓展了远程控制端(一般安装在电脑上)，通过电脑远程控制端产生控制指令，发送到iOS设备的server app中进行控制。

需要说明的是，在上述背景技术部分公开的信息仅用于加强对本公开的背景的理解，因此可以包括不构成对本领域普通技术人员已知的现有技术的信息。

发明内容

本公开的目的在于提供一种设备远程控制方法、设备远程控制装置、电子设备以及计算机可读存储介质，进而至少在一定程度上克服现有的设备远程控制方案依赖于预先安装在目标设备中的集成开发环境和第三方工具的问题。

本公开的其他特性和优点将通过下面的详细描述变得显然，或部分地通过本发明的实践而习得。

根据本公开的第一方面，提供一种设备远程控制方法，包括：获取生成的模拟控制指令，通过模拟控制指令在目标设备安装并启动目标程序；模拟控制指令通过模拟集成开发环境针对目标设备发送的数据控制指令得到；建立与目标设备之间的端口映射连接；端口映射连接包括本地端口与目标设备端口之间的映射关系；基于目标程序与端口映射连接对目标设备进行远程控制。

在本公开的一种示例性实施方案中，通过模拟控制指令在目标设备安装并启动目标程序，包括：与目标设备的设备连接服务建立设备通信连接，获取设备通信连接的设备连接端口；通过设备连接端口向目标设备发送模拟控制指令，根据模拟控制指令与目标设备建立文件服务连接；通过文件服务连接向目标设备发送程序安装包；基于程序安装包在目标设备安装目标程序，并启动目标程序。

在本公开的一种示例性实施方案中，启动目标程序，包括：通过设备连接端口与目标设备建立第一通信通道与第二通信通道；通过第一通信通道向目标设备发送会话建立命令，以初始化集成开发环境；执行目标模式配置操作；通过第二通信通道获取文件日志，根据文件日志确定目标设备是否完成目标模式配置操作；如果目标设备完成目标模式配置操作，则以目标模式启动目标程序。

在本公开的一种示例性实施方案中，执行目标模式配置操作，包括：获取目标设备的目录访问服务，通过目录访问服务向目标程序的应用目录路径发送目标模式配置文件；与目标设备建立进程控制连接，通过进程控制连接获取处理标识符；通过第一通信通道向目标设备发送运行授权命令，执行与目标模式对应的文件配置操作，以在目标设备配置目标模式。

在本公开的一种示例性实施方案中，以目标模式启动目标程序，包括：向目标设备发送模式运行指令；根据模式运行指令在目标模式下启动目标程序，以开启设备指定端口；通过设备指定端口向目标设备发送远程控制指令。

在本公开的一种示例性实施方案中，建立与目标设备之间的端口映射连接，包括：建立第一连接服务，通过第一连接服务发送连接数据包；根据连接数据包与目标设备的指定端口建立端口连接；建立第二连接服务，通过第二连接服务监听本地端口，以确定是否存在候选通信连接；如果存在候选通信连接，则获取候选通信连接的候选通信数据；将候选通信数据通过候选通信连接映射到目标设备端口，以建立端口映射连接。

在本公开的一种示例性实施方案中，将候选通信数据通过候选通信连接映射到目标设备端口，以建立端口映射连接，包括：将候选通信数据通过本地端口发送至端口映射服务；通过端口映射服务将候选通信数据通过第一连接服务与端口连接发送至目标设备端口；由目标设备端口通过端口连接与第一连接服务将回调数据返回至第一连接服务；由第一连接服务通过本地端口返回候选通信数据，以建立端口映射连接。

在本公开的一种示例性实施方案中，基于目标程序与端口映射连接对目标设备进行远程控制，包括：通过端口映射连接获取目标设备的设备数据；根据设备数据并通过目标程序创建针对目标设备的远程控制指令；将远程控制指令通过端口映射连接发送至目标设备，以对目标设备进行远程控制。

根据本公开的第二方面，提供一种设备远程控制装置，包括：程序启动模块，用于获取生成的模拟控制指令，通过模拟控制指令在目标设备安装并启动目标程序；模拟控制指令通过模拟集成开发环境针对目标设备发送的数据控制指令得到；端口映射模块，用于建立与目标设备之间的端口映射连接；端口映射连接包括本地端口与目标设备端口之间的映射关系；远程控制模块，用于基于目标程序与端口映射连接对目标设备进行远程控制。

在本公开的一种示例性实施方案中，程序启动模块包括程序启动单元，用于与目标设备的设备连接服务建立设备通信连接，获取设备通信连接的设备连接端口；通过设备连接端口向目标设备发送模拟控制指令，根据模拟控制指令与目标设备建立文件服务连接；通过文件服务连接向目标设备发送程序安装包；基于程序安装包在目标设备安装目标程序，并启动目标程序。

在本公开的一种示例性实施方案中，程序启动单元包括程序启动子单元，用于通过设备连接端口与目标设备建立第一通信通道与第二通信通道；通过第一通信通道向目标设备发送会话建立命令，以初始化集成开发环境；执行目标模式配置操作；通过第二通信通道获取文件日志，根据文件日志确定目标设备是否完成目标模式配置操作；如果目标设备完成目标模式配置操作，则以目标模式启动目标程序。

在本公开的一种示例性实施方案中，程序启动子单元包括模式配置子单元，用于获取目标设备的目录访问服务，通过目录访问服务向目标程序的应用目录路径发送目标模式配置文件；与目标设备建立进程控制连接，通过进程控制连接获取处理标识符；通过第一通信通道向目标设备发送运行授权命令，执行与目标模式对应的文件配置操作，以在目标设备配置目标模式。

在本公开的一种示例性实施方案中，程序启动子单元包括启动子单元，用于向目标设备发送模式运行指令；根据模式运行指令在目标模式下启动目标程序，以开启设备指定端口；通过设备指定端口向目标设备发送远程控制指令。

在本公开的一种示例性实施方案中，端口映射模块包括端口映射单元，用于建立第一连接服务，通过第一连接服务发送连接数据包；根据连接数据包与目标设备的指定端口建立端口连接；建立第二连接服务，通过第二连接服务监听本地端口，以确定是否存在候选通信连接；如果存在候选通信连接，则获取候选通信连接的候选通信数据；将候选通信数据通过候选通信连接映射到目标设备端口，以建立端口映射连接。

在本公开的一种示例性实施方案中，端口映射单元包括端口映射子单元，用于将候选通信数据通过本地端口发送至端口映射服务；通过端口映射服务将候选通信数据通过第一连接服务与端口连接发送至目标设备端口；由目标设备端口通过端口连接与第一连接服务将回调数据返回至第一连接服务；由第一连接服务通过本地端口返回候选通信数据，以建立端口映射连接。

在本公开的一种示例性实施方案中，远程控制模块包括远程控制单元，用于通过端口映射连接获取目标设备的设备数据；根据设备数据并通过目标程序创建针对目标设备的远程控制指令；将远程控制指令通过端口映射连接发送至目标设备，以对目标设备进行远程控制。

根据本公开的第三方面，提供一种电子设备，包括：处理器；以及存储器，所述存储器上存储有计算机可读指令，所述计算机可读指令被所述处理器执行时实现根据上述任意一项所述的设备远程控制方法。

根据本公开的第四方面，提供一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现根据上述任意一项所述的设备远程控制方法。

本公开提供的技术方案可以包括以下有益效果：

本公开的示例性实施例中的设备远程控制方法，获取生成的模拟控制指令，通过模拟控制指令在目标设备安装并启动目标程序；模拟控制指令通过模拟集成开发环境针对目标设备发送的数据控制指令得到；建立与目标设备之间的端口映射连接；端口映射连接包括本地端口与目标设备端口之间的映射关系；基于目标程序与端口映射连接对目标设备进行远程控制。本公开的设备远程控制方法，可以基于安装的目标程序与创建的端口映射连接直接向目标设备发送远程控制指令，以对目标设备进行远程控制，不依赖于额外的集成开发环境与第三方框架，且无需额外的操作，提高远程操作效率。

应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本公开。

附图说明

此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本公开的实施例，并与说明书一起用于解释本公开的原理。显而易见地，下面描述中的附图仅仅是本公开的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。在附图中：

图1示意性示出了目前采用移动端测试框架对设备进行远程控制方法的流程图；

图2示意性示出了根据本公开的示例性实施方式的设备远程控制方法的流程图；

图3示意性示出了根据本公开的示例性实施方式的远程安装目标程序的流程图；

图4示意性示出了根据本公开的示例性实施方式的远程以目标模式启动目标程序的流程图；

图5示意性示出了根据本公开的示例性实施方式的建立端口映射的流程图；

图6示意性示出了根据本公开的示例性实施方式的端口数据映射时序图；

图7示意性示出了根据本公开的示例性实施方式的对目标设备进行远程控制的系统架构图；

图8示意性示出了根据本公开的示例性实施方式的设备远程控制装置的方框图；

图9示意性示出了根据本公开一示例性实施例的电子设备的框图；

图10示意性示出了根据本公开一示例性实施例的计算机可读存储介质的示意图。

具体实施方式

现在将参考附图更全面地描述示例实施例。然而，示例实施例能够以多种形式实施，且不应被理解为限于在此阐述的实施例；相反，提供这些实施例使得本公开将全面和完整，并将示例实施例的构思全面地传达给本领域的技术人员。在图中相同的附图标记表示相同或类似的部分，因而将省略对它们的重复描述。

此外，所描述的特征、结构或特性可以以任何合适的方式结合在一个或更多实施例中。在下面的描述中，提供许多具体细节从而给出对本公开的实施例的充分理解。然而，本领域技术人员将意识到，可以实践本公开的技术方案而没有所述特定细节中的一个或更多，或者可以采用其它的方法、组元、装置、步骤等。在其它情况下，不详细示出或描述公知结构、方法、装置、实现、材料或者操作以避免模糊本公开的各方面。

附图中所示的方框图仅仅是功能实体，不一定必须与物理上独立的实体相对应。即，可以采用软件形式来实现这些功能实体，或在一个或多个软件硬化的模块中实现这些功能实体或功能实体的一部分，或在不同网络和/或处理器装置和/或微控制器装置中实现这些功能实体。

在本文中，需要理解的是，所涉及的术语，比如，远程控制可以是指不通过直接接触iOS设备而去操作设备；例如，不滑动设备屏幕的情况下，通过一定方式模拟滑动手势来控制屏幕滑动，类似于电脑的远程桌面。Xcode可以是macOS系统下，苹果公司向开发人员提供的集成开发环境(Integrated Development Environment，IDE)。端口映射可以是网络地址转化的一种，功能是将本机端口地址的访问转换为外部端口地址的访问。守护进程(Daemon)，可以是运行在后台的一种特殊进程，独立于控制终端并且周期性地执行某种任务或等待处理某些发生的事件。XCTestManager可以是iOS设备上用于以Test模式运行app的管理类。lockdown服务可以是iOS设备上的系统服务，用于协调macOS进程与iOS其他服务之间的通信。usbmuxd服务可以是macOS系统提供的一种服务，用于与iOS设备的lockdown服务进行通信。此外，附图中的任何元素数量均用于示例而非限制，以及任何命名都仅用于区分，而不具有任何限制含义。

目前，基于已有的远程控制框架对目标设备实现远程控制，具体的流程如图1所示，在步骤S110中，通过Xcode，在被控制iOS设备上安装server app。在步骤S120中，通过Xcode，以Test模式运行该server app。在步骤S130中，对于不可直接通过无线通信技术(wifi)地址访问设备端口的设备，由于无法给设备端口发送数据从而进行控制需要另外通过一些端口映射方案，把iOS设备端口映射到远程控制端的本地端口，例如使用iproxy命令行工具。在步骤S140中，在远程控制端中，产生需要的控制命令，经由端口映射发送到iOS设备中，以进行远程控制。

以Airtest为例子，进行完整的iOS设备远程控制流程需要以下步骤：

(1)Xcode安装server app到iOS设备上并以Test模式运行；(2)使用iproxy工具进行端口转发，命令行终端执行下面两条命令。1)brew install libimobiledevice；2)iproxy 8100 8100。(3)打开Airtest IDE，手动输入服务地址后，点击Connect。(4)远程端创建对iOS设备的控制指令，开始远程控制。

从上述整体流程中可见，现有技术中的设备远程实现流程需要用到系统集成开发环境Xcode和第三方端口映射工具，远程控制框架本身不负责安装、启动server app和执行端口映射，导致实现iOS设备远程控制还需要很多前置条件，十分影响使用体验；对于没有安装Xcode、irpoxy工具的用户来说，还需要花费额外的时间去安装，需要耗费额外的精力，远程控制流程成本极高。

基于此，在本示例实施例中，首先提供了一种设备远程控制方法，可以利用服务器来实现本公开的设备远程控制方法，也可以利用终端设备来实现本公开所述的方法，其中，本公开中描述的终端可以包括诸如手机、平板电脑、笔记本电脑、掌上电脑、个人数字助理(Personal Digital Assistant，PDA)等移动终端，以及诸如台式计算机等固定终端。图1示意性示出了根据本公开的一些实施例的设备远程控制方法流程的示意图。参考图2，该设备远程控制方法可以包括以下步骤：

步骤S210，获取生成的模拟控制指令，通过模拟控制指令在目标设备安装并启动目标程序；模拟控制指令通过模拟集成开发环境针对目标设备发送的数据控制指令得到。

在本公开的一些示例性实施方式中，模拟控制指令可以是远程控制端通过模拟集成开发环境Xcode针对目标设备的数据控制指令得到的。目标设备可以是被远程控制的设备(即被控制设备)，例如，目标设备可以包括iOS设备以及其他运行其他系统的终端设备。数据控制指令可以是远程操作目标设备的控制指令。目标程序可以是移动端测试框架在目标设备中安装的server app，运行并监听设备指定端口的请求指令，通过解析指令调用设备系统私有库方法完成模拟触控等行为。

以远程控制iOS设备为例，Xcode使用的MobileDevice库，该库内部是调用了macOS系统的usbmuxd服务，通过该服务向连接的iOS设备的lockdown服务发送指令，进而进行安装、启动server app等操作。在对目标设备进行远程控制时，为了模拟Xcode对目标设备发送的数据控制指令，需要先确定Xcode通过usbmuxd服务向目标设备发送具体的控制指令。举例而言，可以通过第三方监听工具确定Xcode向目标设备发送的数据控制指令。

举例而言，以socat工具监听usbmuxd服务为例进行说明，使用socat通道监听usbmuxd服务，打印usbmuxd通道传输的数据进行观察。socat执行监听和打印的命令如下：

brew install socat

sudo mv/var/run/usbmuxd/var/run/usbmuxx

sudo socat-t100-x-v UNIX-LISTEN:/var/run/usbmuxd,mode＝777,reuseaddr,fork UNIX-CONNECT:/var/run/usbmuxx

上述命令的含义为：安装socat工具。将系统的usbmuxd服务进行重命名，得到usbmuxx；其中，对usbmuxd服务进行重命名是为了防止后续使用破坏usbmuxd服务。正式启动socat工具，以打印传输的数据。

通过上述方式获取到Xcode针对目标设备发送的数据控制指令之后，可以基于上述数据控制指令生成模拟控制指令，通过模拟控制指令，可以模拟Xcode传输同样的数据指令，实现安装目标程序并启动目标程序的操作。

步骤S220，建立与目标设备之间的端口映射连接；端口映射连接包括本地端口与目标设备端口之间的映射关系。

在本公开的一些示例性实施方式中，端口映射连接可以是远程控制端的本地端口与目标设备端口之间的映射关系，将针对远程控制端的本地端口的访问转换为外部端口地址的访问。本地端口可以是远程控制端的传输端口。目标设备端口可以是目标设备上的传输端口。

远程控制端在目标设备安装并启动目标程序后，可以建立与目标设备之间的端口映射连接。以远程控制iOS设备为例，远程控制端可以通过监听本地端口，将本地端口的控制指令数据经由usbmuxd服务与lockdown服务传输到iOS设备端口，实现iOS设备端口数据和本地端口数据之间的映射。

步骤S230，基于目标程序与端口映射连接对目标设备进行远程控制。

在本公开的一些示例性实施方式中，远程控制可以是远程控制端对目标设备进行的远程控制操作。

远程控制端在目标设备在安装并启动目标程序，以及建立与目标设备之间的端口设备连接后，可以基于目标程序与端口映射连接对目标设备进行远程控制。例如，通过端口映射，将远程控制端的控制指令传输到iOS设备中已启动的server app进行解析，实现远程控制。

根据本示例实施例中的设备远程控制方法，可以基于安装的目标程序与创建的端口映射连接直接向目标设备发送远程控制指令，以对目标设备进行远程控制，不依赖于额外的集成开发环境与第三方框架，且无需额外的操作，提高远程操作效率。

下面，将对本示例实施例中的设备远程控制方法进行进一步的说明。

在本公开的一种示例性实施方案中，与目标设备的设备连接服务建立设备通信连接，获取设备通信连接的设备连接端口；通过设备连接端口向目标设备发送模拟控制指令，根据模拟控制指令与目标设备建立文件服务连接；通过文件服务连接向目标设备发送程序安装包；基于程序安装包在目标设备安装目标程序，并启动目标程序。

其中，设备连接服务可以是提供与目标设备之间建立连接的服务，例如，设备连接服务可以是lockdown服务。设备连接端口可以是用于提供设备连接服务的连接端口。文件服务连接可以是与向目标设备传输文件的服务之间建立的连接，例如，文件服务连接可以是与com.apple.afc服务之间的连接。程序安装包可以是目标程序对应的软件安装包，包括软件安装的所有文件。

为了解决现有技术中对目标设备进行远程控制前，需要在目标设备中预先安装server app的问题，本公开可以通过远程控制端远程安装server app。参考图3，图3示意性示出了根据本公开的示例性实施方式的远程安装目标程序的流程图。在步骤S310中，与设备连接服务建立连接。具体的，远程控制端可以与目标设备的设备连接服务建立设备通信连接，获取到设备通信连接的设备连接端口。例如，与设备的lockdown服务建立连接，获取到lockdown连接的设备连接端口。在步骤S320中，通过文件服务连接传输程序安装包至目标设备。远程安装端可以通过设备连接端口发送命令，与目标设备的com.apple.afc服务建立连接(即文件服务连接)，向目标设备传输server app安装包。在步骤S330中，安装程序安装包，以完成安装过程。远程安装端可以与目标设备的com.apple.mobile.installation_proxy服务建立连接执行安装指令，以对程序安装包进行安装。

在本公开的一种示例性实施方案中，通过设备连接端口与目标设备建立第一通信通道与第二通信通道；通过第一通信通道向目标设备发送会话建立命令，以初始化集成开发环境；执行目标模式配置操作；通过第二通信通道获取文件日志，根据文件日志确定目标设备是否完成目标模式配置操作；如果目标设备完成目标模式配置操作，则以目标模式启动目标程序。

其中，通信通道可以是远程控制端与目标设备之间的通信通道。第一通信通道可以是用于建立初始化IDE命令，以模拟初始化IDE的通信通道。第二通信通道可以是与目标设备建立通信连接，以发送启动命令的通信通道。会话建立命令可以是用于控制远程控制端与目标设备之间的建立会话的命令。目标模式配置操作可以是在目标设备中配置目标模式的操作。文件日志可以是目标设备返回的日志，通过文件日志可以判断目标设备中的目标模式是否配置完成。目标模式可以是运行目标程序所采用的模式，例如，目标模式可以是Test模式。

远程控制端在启动目标程序之前，可以与目标设备之间建立连接。参考图4，图4示意性示出了根据本公开的示例性实施方式的远程以目标模式启动目标程序的流程图。在步骤S401中，远程控制端可以与目标设备的设备连接服务建立连接。在步骤S402中，建立第一通信通道T1。远程控制端可以通过设备连接端口，向目标设备的XCTestManager守护进程接口(dtxproxy:XCTestManager_IDEInterface:XCTestManager_DaemonConnectionInterface)协议建立第一通信通道T1。在步骤S403中，建立第二通信通道T2。远程控制端可以通过设备连接端口，向目标设备的XCTestManager守护进程接口(dtxproxy:XCTestManager_IDEInterface:XCTestManager_DaemonConnectionInterface)协议建立第二通信通道T2。

在步骤S405中，T1模拟Xcode发送初始化IDE命令。远程控制端可以通过第一通信通道T1向目标设备发送会话建立命令，以初始化集成开发环境。即发送_IDE_initiateControlSessionWithProtocolVersion:命令立会话，模拟初始化Xcode IDE。在步骤S406中，判断初始化IDE是否成功。在初始化Xcode IDE成功完成之后，远程控制端可以执行目标模式配置操作。

通过第二通信通道获取文件日志，根据文件日志确定目标设备是否完成目标模式配置操作。具体的，远程控制端可以通过监听T2端口的_XCT_logDebugMessage:方法，得到目标设备传输回来的Debug日志，通过Debug日志判断Test模式是否已经配置完成。如果目标设备完成目标模式配置操作，则以目标模式启动目标程序。在步骤S407中，T2与目标程序建立会话。具体的，远程控制端可以通过T2端口向目标设备发送_IDE_initiateSessionWithIdentifier:forClient:atPath:protocolVersion:命令，与目标设备中的app建立会话，以在步骤S408中，启动目标程序。

在本公开的一种示例性实施方案中，获取目标设备的目录访问服务，通过目录访问服务向目标程序的应用目录路径发送目标模式配置文件；与目标设备建立进程控制连接，通过进程控制连接获取处理标识符；通过第一通信通道向目标设备发送运行授权命令，执行与目标模式对应的文件配置操作，以在目标设备配置目标模式。

其中，目录访问服务可以是访问目标程序对应目录的服务。目标模式配置文件可以是用于在目标设备中配置目标模式所需的文件。进程控制连接可以是远程控制端与目标设备之间的进程控制服务之间的连接，可以标记为P1。处理标识符可以用于标记当前操作。运行授权命令可以是授权目标模式的控制权限。文件配置操作可以是基于目标模式配置文件进行的用于构建目标模式的配置操作。

继续参考图4，在步骤S404中，传输目标模式配置文件。远程控制端可以获取目标设备的目录访问服务，通过目录访问服务向目标程序的应用目录路径发送目标模式配置文件。例如，远程控制端可以通过com.apple.mobile.house_arrest应用目录访问服务向app应用目录的/tmp路径下传输以.xctestconfiguration结尾的Test运行模式配置文件。远程控制端可以与目标设备com.apple.instruments.server.services.processcontrol进程控制服务建立进程控制连接P1，并向进程控制连接P1发送processIdentifierForBundleIdentifier:获取处理标识符，该标识符标记当次操作，如果能获取到则说明流程正常。然后，向进程控制连接P1发送launchSuspendedProcessWithDevicePath:bundleIdentifier:environment:argu ments:options:命令，在参数中指定以Test模式启动app，并通过监听outputReceived:fromProcess:atTime:方法获取设备返回的应用运行日志。

在步骤S409中，判断目标程序是否启动成功。如果目标程序启动成功，则在步骤S410中，获取目标模式控制权限。远程控制端可以通过第一通信通道向目标设备发送运行授权命令，执行与目标模式对应的文件配置操作。具体的，远程控制端可以向T1通道发送_IDE_authorizeTestSessionWithProcessID:命令授权Test模式运行控制权限，开始执行.xctestconfiguration Test运行模式配置文件相关配置，以配置目标模式。

在本公开的一种示例性实施方案中，向目标设备发送模式运行指令；根据模式运行指令在目标模式下启动目标程序，以开启设备指定端口；通过设备指定端口向目标设备发送远程控制指令。

其中，模式运行指令可以是以目标模式运行目标程序的指令。设备指定端口可以是目标设备的指定端口，设备指定端口可以用于帮助目标设备接收远程控制端的远程控制指令。远程控制指令可以是远程控制端用于控制目标设备所采用的指令。

在步骤S411中，执行目标模式。第二通信通道T2监听到已经完成Test配置，远程控制端可以向目标设备发送模式运行指令，即向目标设备发送_IDE_startExecutingTestPlanWithProtocolVersion:命令，开始执行Test模式下的代码，开启一个server监听设备指定端口，远程控制端可以通过设备指定端口发送远程控制指令，目标设备可以通过设备指定端口接收远程控制指令。在步骤S412中，目标模式配置完成则启动目标程序。进程控制连接P1获取到运行日志的启动成功标志信息后，即可进入端口映射阶段。

在本公开的一种示例性实施方案中，建立第一连接服务，通过第一连接服务发送连接数据包；根据连接数据包与目标设备的指定端口建立端口连接；建立第二连接服务，通过第二连接服务监听本地端口，以确定是否存在候选通信连接；如果存在候选通信连接，则获取候选通信连接的候选通信数据；将候选通信数据通过候选通信连接映射到目标设备端口，以建立端口映射连接。

其中，第一连接服务可以是远程控制端的设备系统与目标设备之间建立的连接服务。连接数据包可以是用于指示远程控制端的设备系统与目标设备的指定端口建立连接的数据包。第二连接服务可以是远程控制端与本地系统之间连接服务。本地端口可以是远程控制端的端口。候选通信连接可以是对本地端口的新的访问连接，如远程控制指令，可以记为Sn。候选通信数据可以是通过候选通信连接发送的通信数据。目标设备端口可以是目标设备上的端口。端口映射连接可以是远程控制端的端口与目标设备的端口之间的映射连接。

参考图5，图5示意性示出了根据本公开的示例性实施方式的建立端口映射的流程图。在步骤S501中，建立第一连接服务S1。远程控制端可以与系统usbmuxd服务建立socket连接S1，即建立第一连接服务S1，负责与usbmuxd服务发送与接收数据。在步骤S502中，向第一连接服务S1发送连接数据包。远程控制端可以通过S1向usbmuxd服务发送Connect命令数据包，usbmuxd根据数据包中指定的设备，向设备lockdown服务发送数据。在步骤S503中，S1根据命令，与设备的端口创建通道C1。目标设备的lockdown服务接收到Connect命令数据包之后，与Connect命令数据包中指定的端口建立端口连接C1，后续S1的数据可以通过端口连接C1发送到目标设备。

在步骤S504中，创建第二连接服务S2，监听本地端口。创建第二连接服务，即scoket连接S2，监听本地端口，以监听对本地端口的其他socket连接。在步骤S505中，判断本地端口是否创建新的候选通信通道。在步骤S506中，如果存在候选通信连接，则拦截Sn的数据发送到S1通道。获取候选通信连接的候选通信数据，将候选通信数据通过候选通信连接映射到目标设备端口，以建立端口映射连接。

在本公开的一种示例性实施方案中，将候选通信数据通过本地端口发送至端口映射服务；通过端口映射服务将候选通信数据通过第一连接服务与端口连接发送至目标设备端口；由目标设备端口通过端口连接与第一连接服务将回调数据返回至第一连接服务；由第一连接服务通过本地端口返回候选通信数据，以建立端口映射连接。其中，端口映射服务可以是用于建立远程控制端的本地端口与目标设备的设备端口之间的映射的服务。

继续参考图5，在步骤S507中，S1将数据通过C1发送至设备，设备回调通过C1发送回S1。监听到对本地端口有新的访问连接Sn时，获取Sn发送的数据，将该数据通过第一连接服务S1经由端口连接C1发送到设备端口上。在步骤S508中，将S1中的回调数据发送回Sn。设备端口的回调通过C1、S1发送回远程控制端，再通过远程控制端返回给Sn，达到端口数据映射目的。在步骤S509中，端口映射完成。端口映射建立完成后，即可通过访问本地端口的形式向设备发送远程控制命令，设备的server接收到发送给设备端口的命令后，就可以调用内置的代码执行控制屏幕，达到远程控制的目的。

参考图6，图6示意性示出了根据本公开的示例性实施方式的端口数据映射时序图。在图6中，请求端通过Sn通道发送控制指令至本地端口，本地端口将Sn数据发送至端口映射服务，端口映射服务接收到Sn数据后，可以将Sn数据发送至S1通道，usbmuxd服务在接收到Sn数据后，可以将Sn数据发送至C1通道，设备的lockdown服务在接收到Sn数据后，可以将Sn数据发送至设备端口；设备端口接收到Sn数据后，将返回相应的回调数据至设备的lockdown服务，通过设备的lockdown服务发送至远程映射端系统的usbmuxd服务，usbmuxd服务将回调数据返回至端口映射服务，端口映射服务将回调数据返回至本地端口，最终将回调数据返回至请求端，至此，整个端口映射连接过程结束。

在本公开的一种示例性实施方案中，通过端口映射连接获取目标设备的设备数据；根据设备数据并通过目标程序创建针对目标设备的远程控制指令；将远程控制指令通过端口映射连接发送至目标设备，以对目标设备进行远程控制。

其中，设备数据可以是目标设备中的相关数据，设备数据可以包括当前设备的设备状态数据，还可以包括针对目标设备的操作控制数据等。远程控制指令可以是远程控制端远程操作目标设备所对应的控制指令。

参考图7，图7示意性示出了根据本公开的示例性实施方式的对目标设备进行远程控制的系统架构图。例如，远程控制端可以通过端口映射向目标设备(如iOS设备)serverapp请求设备屏幕截图展示在远程控制端，远程控制端通过获取输入设备(如键盘、鼠标等)对设备屏幕截图的点击、滑动、输入等触控操作，创建对应的远程控制指令，通过端口映射发送到目标设备上，实现对目标设备的控制。

需要说明的是，本公开所使用的术语“第一”、“第二”等，仅是为了区分不同的通信通道、不同的连接服务等，并不应对本公开造成任何限制。

综上所述，本公开的设备远程控制方法，获取生成的模拟控制指令，通过模拟控制指令在目标设备安装并启动目标程序；模拟控制指令通过模拟集成开发环境针对目标设备发送的数据控制指令得到；建立与目标设备之间的端口映射连接；端口映射连接包括本地端口与目标设备端口之间的映射关系；基于目标程序与端口映射连接对目标设备进行远程控制。本公开的设备远程控制方法，可以基于安装的目标程序与创建的端口映射连接直接向目标设备发送远程控制指令，以对目标设备进行远程控制，不依赖于额外的集成开发环境与第三方框架，且无需额外的操作，提高远程操作效率。

需要说明的是，尽管在附图中以特定顺序描述了本发明中方法的各个步骤，但是，这并非要求或者暗示必须按照该特定顺序来执行这些步骤，或是必须执行全部所示的步骤才能实现期望的结果。附加的或备选的，可以省略某些步骤，将多个步骤合并为一个步骤执行，以及/或者将一个步骤分解为多个步骤执行等。

此外，在本示例实施例中，还提供了一种设备远程控制装置。参考图8，该设备远程控制装置800可以包括：程序启动模块810、端口映射模块820以及远程控制模块830。

具体的，程序启动模块810，用于获取生成的模拟控制指令，通过模拟控制指令在目标设备安装并启动目标程序；模拟控制指令通过模拟集成开发环境针对目标设备发送的数据控制指令得到；端口映射模块820，用于建立与目标设备之间的端口映射连接；端口映射连接包括本地端口与目标设备端口之间的映射关系；远程控制模块830，用于基于目标程序与端口映射连接对目标设备进行远程控制。

在本公开的一种示例性实施方案中，程序启动模块包括程序启动单元，用于与目标设备的设备连接服务建立设备通信连接，获取设备通信连接的设备连接端口；通过设备连接端口向目标设备发送模拟控制指令，根据模拟控制指令与目标设备建立文件服务连接；通过文件服务连接向目标设备发送程序安装包；基于程序安装包在目标设备安装目标程序，并启动目标程序。

在本公开的一种示例性实施方案中，程序启动单元包括程序启动子单元，用于通过设备连接端口与目标设备建立第一通信通道与第二通信通道；通过第一通信通道向目标设备发送会话建立命令，以初始化集成开发环境；执行目标模式配置操作；通过第二通信通道获取文件日志，根据文件日志确定目标设备是否完成目标模式配置操作；如果目标设备完成目标模式配置操作，则以目标模式启动目标程序。

在本公开的一种示例性实施方案中，程序启动子单元包括模式配置子单元，用于获取目标设备的目录访问服务，通过目录访问服务向目标程序的应用目录路径发送目标模式配置文件；与目标设备建立进程控制连接，通过进程控制连接获取处理标识符；通过第一通信通道向目标设备发送运行授权命令，执行与目标模式对应的文件配置操作，以在目标设备配置目标模式。

在本公开的一种示例性实施方案中，程序启动子单元包括启动子单元，用于向目标设备发送模式运行指令；根据模式运行指令在目标模式下启动目标程序，以开启设备指定端口；通过设备指定端口向目标设备发送远程控制指令。

在本公开的一种示例性实施方案中，端口映射模块包括端口映射单元，用于建立第一连接服务，通过第一连接服务发送连接数据包；根据连接数据包与目标设备的指定端口建立端口连接；建立第二连接服务，通过第二连接服务监听本地端口，以确定是否存在候选通信连接；如果存在候选通信连接，则获取候选通信连接的候选通信数据；将候选通信数据通过候选通信连接映射到目标设备端口，以建立端口映射连接。

在本公开的一种示例性实施方案中，端口映射单元包括端口映射子单元，用于将候选通信数据通过本地端口发送至端口映射服务；通过端口映射服务将候选通信数据通过第一连接服务与端口连接发送至目标设备端口；由目标设备端口通过端口连接与第一连接服务将回调数据返回至第一连接服务；由第一连接服务通过本地端口返回候选通信数据，以建立端口映射连接。

在本公开的一种示例性实施方案中，远程控制模块包括远程控制单元，用于通过端口映射连接获取目标设备的设备数据；根据设备数据并通过目标程序创建针对目标设备的远程控制指令；将远程控制指令通过端口映射连接发送至目标设备，以对目标设备进行远程控制。

上述中各设备远程控制装置的虚拟模块的具体细节已经在对应的设备远程控制方法中进行了详细的描述，因此此处不再赘述。

应当注意，尽管在上文详细描述中提及了设备远程控制装置的若干模块或者单元，但是这种划分并非强制性的。实际上，根据本公开的实施方式，上文描述的两个或更多模块或者单元的特征和功能可以在一个模块或者单元中具体化。反之，上文描述的一个模块或者单元的特征和功能可以进一步划分为由多个模块或者单元来具体化。

此外，在本公开的示例性实施例中，还提供了一种能够实现上述方法的电子设备。

所属技术领域的技术人员能够理解，本发明的各个方面可以实现为系统、方法或程序产品。因此，本发明的各个方面可以具体实现为以下形式，即：完全的硬件实施例、完全的软件实施例(包括固件、微代码等)，或硬件和软件方面结合的实施例，这里可以统称为“电路”、“模块”或“系统”。

下面参考图9来描述根据本发明的这种实施例的电子设备900。图9显示的电子设备900仅仅是一个示例，不应对本发明实施例的功能和使用范围带来任何限制。

如图9所示，电子设备900以通用计算设备的形式表现。电子设备900的组件可以包括但不限于：上述至少一个处理单元910、上述至少一个存储单元920、连接不同系统组件(包括存储单元920和处理单元910)的总线930、显示单元940。

其中，所述存储单元存储有程序代码，所述程序代码可以被所述处理单元910执行，使得所述处理单元910执行本说明书上述“示例性方法”部分中描述的根据本发明各种示例性实施例的步骤。

存储单元920可以包括易失性存储单元形式的可读介质，例如随机存取存储单元(RAM)921和/或高速缓存存储单元922，还可以进一步包括只读存储单元(ROM)923。

存储单元920可以包括具有一组(至少一个)程序模块925的程序/实用工具924，这样的程序模块925包括但不限于：操作系统、一个或者多个应用程序、其它程序模块以及程序数据，这些示例中的每一个或某种组合中可能包括网络环境的实现。

总线930可以表示几类总线结构中的一种或多种，包括存储单元总线或者存储单元控制器、外围总线、图形加速端口、处理单元或者使用多种总线结构中的任意总线结构的局域总线。

电子设备900也可以与一个或多个外部设备970(例如键盘、指向设备、蓝牙设备等)通信，还可与一个或者多个使得用户能与该电子设备900交互的设备通信，和/或与使得该电子设备900能与一个或多个其它计算设备进行通信的任何设备(例如路由器、调制解调器等等)通信。这种通信可以通过输入/输出(I/O)接口950进行。并且，电子设备900还可以通过网络适配器960与一个或者多个网络(例如局域网(LAN)，广域网(WAN)和/或公共网络，例如因特网)通信。如图所示，网络适配器960通过总线930与电子设备900的其它模块通信。应当明白，尽管图中未示出，可以结合电子设备900使用其它硬件和/或软件模块，包括但不限于：微代码、设备驱动器、冗余处理单元、外部磁盘驱动阵列、RAID系统、磁带驱动器以及数据备份存储系统等。

通过以上的实施例的描述，本领域的技术人员易于理解，这里描述的示例实施例可以通过软件实现，也可以通过软件结合必要的硬件的方式来实现。因此，根据本公开实施例的技术方案可以以软件产品的形式体现出来，该软件产品可以存储在一个非易失性存储介质(可以是CD-ROM，U盘，移动硬盘等)中或网络上，包括若干指令以使得一台计算设备(可以是个人计算机、服务器、终端装置、或者网络设备等)执行根据本公开实施例的方法。

在本公开的示例性实施例中，还提供了一种计算机可读存储介质，其上存储有能够实现本说明书上述方法的程序产品。在一些可能的实施例中，本发明的各个方面还可以实现为一种程序产品的形式，其包括程序代码，当所述程序产品在终端设备上运行时，所述程序代码用于使所述终端设备执行本说明书上述“示例性方法”部分中描述的根据本发明各种示例性实施例的步骤。

参考图10所示，描述了根据本发明的实施例的用于实现上述方法的程序产品1000，其可以采用便携式紧凑盘只读存储器(CD-ROM)并包括程序代码，并可以在终端设备，例如个人电脑上运行。然而，本发明的程序产品不限于此，在本文件中，可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。

所述程序产品可以采用一个或多个可读介质的任意组合。可读介质可以是可读信号介质或者可读存储介质。可读存储介质例如可以为但不限于电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。可读存储介质的更具体的例子(非穷举的列表)包括：具有一个或多个导线的电连接、便携式盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。

计算机可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了可读程序代码。这种传播的数据信号可以采用多种形式，包括但不限于电磁信号、光信号或上述的任意合适的组合。可读信号介质还可以是可读存储介质以外的任何可读介质，该可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。

可读介质上包含的程序代码可以用任何适当的介质传输，包括但不限于无线、有线、光缆、RF等等，或者上述的任意合适的组合。

可以以一种或多种程序设计语言的任意组合来编写用于执行本发明操作的程序代码，所述程序设计语言包括面向对象的程序设计语言—诸如Java、C++等，还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算设备上执行、部分地在用户设备上执行、作为一个独立的软件包执行、部分在用户计算设备上部分在远程计算设备上执行、或者完全在远程计算设备或服务器上执行。在涉及远程计算设备的情形中，远程计算设备可以通过任意种类的网络，包括局域网(LAN)或广域网(WAN)，连接到用户计算设备，或者，可以连接到外部计算设备(例如利用因特网服务提供商来通过因特网连接)。

此外，上述附图仅是根据本发明示例性实施例的方法所包括的处理的示意性说明，而不是限制目的。易于理解，上述附图所示的处理并不表明或限制这些处理的时间顺序。另外，也易于理解，这些处理可以是例如在多个模块中同步或异步执行的。

本领域技术人员在考虑说明书及实践这里公开的发明后，将容易想到本公开的其他实施例。本申请旨在涵盖本公开的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的，本公开的真正范围和精神由权利要求指出。

应当理解的是，本公开并不局限于上面已经描述并在附图中示出的精确结构，并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求来限。

Claims (10)

1.一种设备远程控制方法，其特征在于，应用于远程控制端，包括：

获取生成的模拟控制指令，通过所述模拟控制指令在目标设备安装并启动目标程序；所述模拟控制指令通过模拟集成开发环境针对所述目标设备发送的数据控制指令得到；

建立与所述目标设备之间的端口映射连接；所述端口映射连接包括本地端口与目标设备端口之间的映射关系；

基于所述目标程序与所述端口映射连接针对所述目标设备进行远程控制；

所述建立与所述目标设备之间的端口映射连接，包括：

建立第一连接服务，通过所述第一连接服务发送连接数据包；

根据所述连接数据包与所述目标设备的指定端口建立端口连接；

建立第二连接服务，通过所述第二连接服务监听本地端口，以确定是否存在候选通信连接；

如果存在所述候选通信连接，则获取所述候选通信连接的候选通信数据；

将所述候选通信数据通过所述候选通信连接映射到所述目标设备端口，以建立所述端口映射连接。

2.根据权利要求1所述的方法，其特征在于，所述通过所述模拟控制指令在目标设备安装并启动目标程序，包括：

与所述目标设备的设备连接服务建立设备通信连接，获取所述设备通信连接的设备连接端口；

通过所述设备连接端口向所述目标设备发送模拟控制指令，根据所述模拟控制指令与所述目标设备建立文件服务连接；

通过所述文件服务连接向所述目标设备发送程序安装包；

基于所述程序安装包在所述目标设备安装所述目标程序，并启动所述目标程序。

3.根据权利要求2所述的方法，其特征在于，所述启动所述目标程序，包括：

通过所述设备连接端口与所述目标设备建立第一通信通道与第二通信通道；

通过所述第一通信通道向所述目标设备发送会话建立命令，以初始化所述集成开发环境；

执行目标模式配置操作；

通过所述第二通信通道获取文件日志，根据所述文件日志确定所述目标设备是否完成所述目标模式配置操作；

如果所述目标设备完成所述目标模式配置操作，则以所述目标模式启动所述目标程序。

4.根据权利要求3所述的方法，其特征在于，所述执行目标模式配置操作，包括：

获取所述目标设备的目录访问服务，通过所述目录访问服务向目标程序的应用目录路径发送目标模式配置文件；

与所述目标设备建立进程控制连接，通过所述进程控制连接获取处理标识符；

通过所述第一通信通道向所述目标设备发送运行授权命令，执行与所述目标模式对应的文件配置操作，以在所述目标设备配置所述目标模式。

5.根据权利要求3所述的方法，其特征在于，所述以所述目标模式启动所述目标程序，包括：

向所述目标设备发送模式运行指令；

根据所述模式运行指令在所述目标模式下启动所述目标程序，以开启设备指定端口；

通过所述设备指定端口向所述目标设备发送远程控制指令。

6.根据权利要求1所述的方法，其特征在于，所述将所述候选通信数据通过所述候选通信连接映射到所述目标设备端口，以建立所述端口映射连接，包括：

将所述候选通信数据通过所述本地端口发送至端口映射服务；

通过所述端口映射服务将所述候选通信数据通过所述第一连接服务与所述端口连接发送至所述目标设备端口；

由所述目标设备端口通过所述端口连接与所述第一连接服务将回调数据返回至所述第一连接服务；

由所述第一连接服务通过所述本地端口返回所述候选通信数据，以建立所述端口映射连接。

7.根据权利要求1所述的方法，其特征在于，所述基于所述目标程序与所述端口映射连接针对所述目标设备进行远程控制，包括：

通过所述端口映射连接获取所述目标设备的设备数据；

根据所述设备数据并通过所述目标程序创建针对所述目标设备的远程控制指令；

将所述远程控制指令通过所述端口映射连接发送至所述目标设备，以对所述目标设备进行远程控制。

8.一种设备远程控制装置，其特征在于，包括：

程序启动模块，用于获取生成的模拟控制指令，通过所述模拟控制指令在目标设备安装并启动目标程序；所述模拟控制指令通过模拟集成开发环境针对所述目标设备发送的数据控制指令得到；

端口映射模块，用于建立与所述目标设备之间的端口映射连接；所述端口映射连接包括本地端口与目标设备端口之间的映射关系；

远程控制模块，用于基于所述目标程序与所述端口映射连接针对所述目标设备进行远程控制；

所述端口映射模块，还用于建立第一连接服务，通过所述第一连接服务发送连接数据包；

根据所述连接数据包与所述目标设备的指定端口建立端口连接；

建立第二连接服务，通过所述第二连接服务监听本地端口，以确定是否存在候选通信连接；

如果存在所述候选通信连接，则获取所述候选通信连接的候选通信数据；

将所述候选通信数据通过所述候选通信连接映射到所述目标设备端口，以建立所述端口映射连接。

9.一种电子设备，其特征在于，包括：

处理器；以及

存储器，所述存储器上存储有计算机可读指令，所述计算机可读指令被所述处理器执行时实现根据权利要求1至7中任一项所述的设备远程控制方法。

10.一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现根据权利要求1至7中任一项所述的设备远程控制方法。