CN114327201B - 云手机操控方法、装置及计算机设备 - Google Patents

Abstract

本申请公开了一种云手机操控方法、装置及计算机设备，涉及云手机技术领域，可解决云手机操控效果不佳的技术问题。包括：响应于用户在终端设备所登录的云手机中，对待操控应用所展示应用操控页面的触控操作，获取触控操作对应的第一触控事件数据，待操控应用为云手机中运行的任一云手机应用；基于与云手机服务器之间的TCP协议通信连接，将终端设备上的第一触控事件数据发送给云手机服务器，以供云手机服务器判断第一触控事件数据是否发生传输异常，并在判定发生传输异常时，将第一触控事件数据优化处理为第二触控事件数据，利用第二触控事件数据操控云手机中的待操控应用，以使操控结果与触控操作匹配。本申请适用于对粘包触控数据的优化处理。

Description

云手机操控方法、装置及计算机设备

技术领域

本申请涉及云手机技术领域，尤其涉及到一种云手机操控方法、装置及计算机设备。

背景技术

云手机是将云计算技术运用于网络终端服务，通过云服务器实现云服务的虚拟手机，通过远程实时控制云手机，能够实现应用的云端运行。用户可在终端设备上通过登录云手机客户端接入云手机，通过触控终端设备的屏幕，向云手机内核同步触控数据，进一步实现对云手机的操控。

然而目前在向云手机内核同步触控数据时，未考虑网络波动的场景。若网络条件不好，将会出现触控数据丢失或者粘包，导致操控卡顿/触控加速度计算异常，进而引发操控效果不佳。

发明内容

有鉴于此，本申请提供了一种云手机操控方法、装置及计算机设备，主要目的在于解决目前在向云手机内核同步触控数据时，在网络波动的场景下，容易操控卡顿/触控加速度计算异常，进而引发操控效果不佳的技术问题。

根据本申请的一个方面，提供了一种云手机操控方法，应用于云手机客户端，所述云手机客户端安装于终端设备上，该方法包括：

响应于用户在终端设备所登录的云手机中，对待操控应用所展示应用操控页面的触控操作，获取所述触控操作对应的第一触控事件数据，其中，所述待操控应用为所述云手机中运行的任一云手机应用；

基于与云手机服务器之间的TCP协议通信连接，将所述终端设备上的第一触控事件数据发送给所述云手机服务器，以供所述云手机服务器判断所述第一触控事件数据是否发生传输异常，并在判定发生传输异常时，将所述第一触控事件数据优化处理为第二触控事件数据，利用所述第二触控事件数据操控所述云手机中的所述待操控应用，以使操控结果与所述触控操作匹配。

根据本申请的另一个方面，提供了一种云手机操控方法，应用于云手机服务器，该方法包括：

基于与云手机客户端之间的TCP协议通信连接，接收所述云手机客户端发送的第一触控事件数据，并生成所述第一触控事件数据对应的接收事件数据，其中，所述第一触控事件数据是所述云手机客户端响应于用户在终端设备所登录的云手机中，对待操控应用所展示应用操控页面的触控操作获取的，所述待操控应用为所述云手机中运行的任一云手机应用；

根据所述接收事件数据判断所述第一触控事件数据是否发生传输异常；

若是，则将所述第一触控事件数据优化处理为第二触控事件数据，并根据所述第二触控事件数据操控所述云手机中的所述待操控应用，以使操控结果与所述触控操作匹配。

根据本申请的又一个方面，提供了一种云手机操控装置，应用于云手机客户端，所述云手机客户端安装于终端设备上，该装置包括：

获取模块，用于响应于用户在终端设备所登录的云手机中，对待操控应用所展示应用操控页面的触控操作，获取所述触控操作对应的第一触控事件数据，其中，所述待操控应用为所述云手机中运行的任一云手机应用；

发送模块，用于基于与云手机服务器之间的TCP协议通信连接，将所述终端设备上的第一触控事件数据发送给所述云手机服务器，以供所述云手机服务器判断所述第一触控事件数据是否发生传输异常，并在判定发生传输异常时，将所述第一触控事件数据优化处理为第二触控事件数据，利用所述第二触控事件数据操控所述云手机中的所述待操控应用，以使操控结果与所述触控操作匹配。

根据本申请的再一个方面，提供了一种云手机操控装置，应用于云手机服务器，该装置包括：

接收模块，用于接收模块，用于基于与云手机客户端之间的TCP协议通信连接，接收所述云手机客户端发送的第一触控事件数据，并生成所述第一触控事件数据对应的接收事件数据，其中，所述第一触控事件数据是所述手机客户端响应于用户在终端设备所登录的云手机中，对待操控应用所展示应用操控页面的触控操作获取的，所述待操控应用为所述云手机中运行的任一云手机应用；

判断模块，用于根据所述接收事件数据判断所述第一触控事件数据是否发生传输异常；

第一操控模块，用于若第一触控事件数据传输异常，则将所述第一触控事件数据优化处理为第二触控事件数据，并根据所述第二触控事件数据操控所述云手机中的所述待操控应用，以使操控结果与所述触控操作匹配。

依据本申请再一个方面，所述装置还包括：

第二操控模块，用于若第一触控事件数据未传输异常，则根据所述第一触控事件数据操控所述云手机中的所述待操控应用，以使操控结果与所述触控操作匹配。

依据本申请再一个方面，提供了一种存储介质，其上存储有计算机程序，所述程序被处理器执行时实现上述可应用于云手机客户端侧的云手机操控方法。

依据本申请再一个方面，提供了一种客户端设备，包括存储介质、处理器及存储在存储介质上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现上述可应用于云手机客户端侧的云手机操控方法。

依据本申请再一个方面，提供了一种存储介质，其上存储有计算机程序，所述程序被处理器执行时实现上述可应用于云手机服务器侧的云手机操控方法。

依据本申请再一个方面，提供了一种服务器设备，包括存储介质、处理器及存储在存储介质上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现上述可应用于云手机服务器侧的云手机操控方法。

依据本申请再一个方面，提供了一种云手机操控系统，包括上述客户端设备和服务器设备。

借由上述技术方案，本申请提供的一种云手机操控方法、装置及计算机设备，与目前现有技术相比，本申请可基于TCP协议实现云手机客户端与云手机服务器之间的触控事件数据的传输，在判定触控事件数据的传输异常时，云手机服务器可利用触控优化模块对触控事件数据进行优化处理，进而依据优化处理后的触控事件数据实现对待操控应用的模拟操控，且使模拟操控结果与用户在待操控应用所展示应用操控页面的触控操作匹配。本申请中的技术方案，在现有方案的基础上，增加了触控优化功能，可基于触控产生的时间点和加速度进行二次优化处理，为用户营造良好的触控体验，有效缓解了网络条件不好时，触控点丢失或者粘包，导致的操控卡顿/加速度计算异常情况。

上述说明仅是本申请技术方案的概述，为了能够更清楚了解本申请的技术手段，而可依照说明书的内容予以实施，并且为了让本申请的上述和其它目的、特征和优点能够更明显易懂，以下特举本申请的具体实施方式。

附图说明

图1示出了本申请实施例提供的一种云手机操控方法的流程示意图；

图2示出了本申请实施例提供的另一种云手机操控方法的流程示意图；

图3示出了本申请实施例提供的一种云手机操控实例的时序图；

图4示出了本申请实施例提供的一种云手机操控装置的结构示意图；

图5示出了本申请实施例提供的另一种云手机操控装置的结构示意图；

图6示出了本申请实施例提供的一种云手机操控系统的系统架构示意图。

具体实施方式

下文中将参考附图并结合实施例来详细说明本申请。需要说明的是，在不冲突的情况下，本申请中的实施例及实施例中的特征可以相互组合。

针对目前在向云手机内核同步触控数据时，在网络波动的场景下，容易出现操控卡顿/触控加速度计算异常，进而引发操控效果不佳的技术问题，本实施例提供了一种云手机操控方法，可应用于云手机客户端，如图1所示，该方法包括：

101、响应于用户在终端设备上的云手机登陆操作，在终端设备上显示所登陆云手机中待操控应用对应的应用操控界面。

在具体的应用场景中，用户可在终端设备上进行云手机登陆操作，即通过登录云手机客户端接入云手机，云手机客户端在接收到用户的登录信息后，可首先对登录信息进行验证，在验证通过后，进一步在终端设备上显示待操控应用对应的应用操控界面，从而可以让用户通过终端设备来操控在云手机服务器上的虚拟云手机。其中，终端设备可以包括但不限于手机、个人数字助理(PersonalDigitalAssistant，PDA)、无线手持设备、平板电脑(TabletComputer)等具备触控功能的智能设备。

102、响应于用户在终端设备所登录的云手机中，对待操控应用所展示应用操控页面的触控操作，获取触控操作对应的第一触控事件数据。

其中，第一触控事件数据包括触控轨迹中各个触控点与第一个触控点的触控时间间隔，以及各个触控点的第一触控坐标，待操控应用为云手机中运行的任一云手机应用。

在具体的应用场景中，当用户在应用操控界面上进行触控操作，云手机客户端可获取所在终端设备上的第一触控事件数据。该触控操作可包括用户在应用操控界面上方的悬空操作手势、用户在应用操控界面上的接触操作手势等。其中，悬空操作手势，可以是指用户在终端设备的图像传感器的采集范围之内，在终端设备的屏幕所显示的应用操控界面上方的悬空滑动轨迹。悬空滑动轨迹可以包括但不限于由若干个连续滑动事件对应的若干个停留点(触控点)组成的直线或任意形状的曲线，本实施例对此不进行特别限定。接触操作手势，可以为用户利用鼠标或键盘等外部输入设备控制光标所进行的触发操作，或者还可以为用户利用手指或输入笔等触控输入设备所进行的触碰操作，具体可指用户在终端设备的屏幕所显示的应用操控界面上的接触滑动轨迹。通常，终端设备可以根据屏幕是否具有可触控的特性，分成两种类型，一种类型是触控式终端设备，另一种类型是非触控式终端设备。具体地，具体可以检测用户在触控式终端设备的触控屏所显示的应用操控界面上的接触滑动轨迹。接触滑动轨迹可以包括但不限于由若干个连续触摸事件对应的若干个触摸点组成的直线或任意形状的曲线，本实施例对此不进行特别限定。

其中，触控事件可以包括但不限于具有多个触控点的移动事件。具体地，终端设备上的第一触控坐标可以为绝对坐标，或者还可以为相对坐标，本实施例中不进行特别限定。本申请中，为了后续计算的简便，终端设备上的触控事件的坐标可以采用百分比形式的相对坐标，例如，终端设备处于竖直放置状态，将终端设备的屏幕的左下角的坐标设置为(0,0)，那么，终端设备的屏幕的右下角的坐标则可以记为(1,0)，终端设备的屏幕的左上角的坐标则可以记为(1,0)，终端设备的屏幕的右上角的坐标则可以记为(1,1)。在具体的应用场景中，终端设备上的移动事件对应的触控轨迹包括多个连续的触控点，每个触控点具有不同的第一触控坐标。

在具体的应用场景中，可在云手机客户端新增触控采集模块，当用户在应用操控界面上进行触控操作，产生触控轨迹时，云手机客户端可通过触控采集模块采集触控轨迹对应的第一触控事件数据。在进行第一触控事件数据采集时，如图3所示，可按照各个触控点的生成时间按序进行采集，具体可识别当前采集的触控点是否为触控轨迹的第一个触控点，若是，则采集并标记第一个触控点的触控时间戳和第一触控坐标，对于第一个触控点之后的各个触控点，同样采集触控时间戳和第一触控坐标，此外，还根据各个触控点的触控时间戳和第一个触控点的触控时间戳，计算触控轨迹中第一个触控点之后的各个触控点与第一个触控点的触控时间间隔。进一步的，可将获取得到的触控轨迹中各个触控点与第一个触控点的触控时间间隔，以及各个触控点的第一触控坐标作为第一触控事件数据。相应的，实施例步骤102具体可以包括：响应于用户基于应用操控界面的触控操作，采集触控操作对应触控轨迹中各个触控点产生的触控时间戳以及第一触控坐标；根据触控时间戳计算触控轨迹中第一个触控点之后的各个触控点与第一个触控点的触控时间间隔；将触控时间间隔以及第一触控坐标，作为第一触控事件数据。

103、基于与云手机服务器之间的TCP协议通信连接，将终端设备上的第一触控事件数据发送给云手机服务器，以供云手机服务器判断第一触控事件数据是否发生传输异常，并在判定发生传输异常时，将第一触控事件数据优化处理为第二触控事件数据，利用第二触控事件数据操控云手机中的待操控应用，以使操控结果与触控操作匹配。

在具体的应用场景中，为了保证传输数据不发生丢失，可使用TCP协议实现云手机客户端与云手机服务器之间的通信连接。对于本实施例，可基于与云手机服务器之间的TCP协议通信连接，将终端设备上的第一触控事件数据发送给云手机服务器，以便云手机服务器对第一触控事件数据首先进行传输异常判断，并在传输异常时对第一触控事件数据进行优化处理，得到较为准确的第二触控事件数据。进而云手机服务器可利用未发生传输异常的第一触控事件数据，或发生传输异常时优化得到的第二触控事件数据生成操控轨迹，并利用操控轨迹对待操控应用进行操控。

需要说明的是，上述可应用于云手机客户端侧的云手机操控方法，是在客户端侧描述具体的云手机操控过程，而为了完整说明本实施例的具体实施方式，提供了另一种可应用于云手机服务器侧的云手机操控方法，以便说明在服务器侧的云手机操控过程，如图2所示，该方法包括：

201、基于与云手机客户端之间的TCP协议通信连接，接收云手机客户端发送的第一触控事件数据，并生成第一触控事件数据对应的接收事件数据。

其中，第一触控事件数据是云手机客户端响应于用户在终端设备所登录的云手机中，对待操控应用所展示应用操控页面的触控操作获取的，待操控应用为云手机中运行的任一云手机应用。

对于本实施例，鉴于云手机客户端和云手机服务器之间是基于TCP协议传输第一触控事件数据，根据TCP协议的传输特点，当网络条件不好，存在大量丢包时，如果触控基于TCP协议进行传输，丢掉的包在网络恢复时会重新传输，即同一时刻可能会收到多个触控点的触控数据，所以不会产生触控信息丢失的问题。为了避免基于TCP协议传输在网络恢复时同一时刻收到多个触控点的触控数据，并依据触控数据进行触控模拟时导致触控效果不佳的问题，在本申请中，当云手机服务器在接收第一触控事件数据时，针对第一触控事件数据中的每个触控点，都会生成接收时间戳，以便基于接收时间戳生成第一触控事件数据对应的接收事件数据，并利用接收事件数据进行第一触控事件数据传输异常的判定。相应的，在生成接收事件数据时，实施例步骤具体可以包括：采集第一触控事件数据中各个触控点的接收时间戳；根据接收时间戳计算触控轨迹中第一个触控点之后的各个触控点与第一个触控点的接收时间间隔；将接收时间间隔作为接收事件数据。

202、根据接收事件数据判断第一触控事件数据是否发生传输异常。

其中，第一触控事件数据包括触控轨迹中各个触控点与第一个触控点的触控时间间隔，接收事件数据包括触控轨迹中各个触控点与第一个触控点的接收时间间隔。

对于本实施例，可以第一触控事件数据中传输到的第一触控点为标准传输的基础上，进行对后续触控点异常的判定，即可将触控轨迹中各个触控点与第一个触控点的接收时间间隔，与对应云手机客户端计算得到的相同触控点的触控时间间隔进行对比，若接收时间间隔远远大于相同触控点的触控时间间隔，即同一触控点对应接收时间间隔与触控时间间隔的时间差大于预设阈值，则可判定发生了丢包，即第一触控事件数据发生传输异常。相应的，实施例步骤202具体可以包括：计算同一触控点对应接收时间间隔与触控时间间隔的时间差；若确定时间差大于预设阈值，则判断第一触控事件数据发生传输异常；若确定时间差小于或等于预设阈值，则判断第一触控事件数据未发生传输异常。

203、若判断第一触控事件数据发生传输异常，则将第一触控事件数据优化处理为第二触控事件数据，并根据第二触控事件数据操控云手机中的待操控应用，以使操控结果与触控操作匹配。

其中，第一触控事件数据在包括触控轨迹中各个触控点与第一个触控点的触控时间间隔之外，还包括各个触控点的第一触控坐标。

对于本实施例，为使最终对待操控应用的操控结果与用户在应用操控界面的操作适配，避免出现操控结果的延迟，可基于触控轨迹中传输异常触控点与第一个触控点的触控时间间隔，以及传输异常触控点的第一触控坐标，计算传输异常触控点处的触控加速度，进而根据触控加速度以及对应与第一个触控点的接收时间间隔，重新计算发生传输异常的触控点的第二触控坐标，从而得到第二触控事件数据，以便利用优化后的第二触控事件数据实现对待操控应用的操控。作为一种优选方式，在对第一触控事件数据进行优化处理，得到第二触控事件数据时，实施例步骤203具体可以包括：将第一触控事件数据中传输异常的触控点标记为目标触控点；根据目标触控点与第一个触控点的触控时间间隔，以及目标触控点的第一触控坐标，计算目标触控点处的触控加速度；基于触控加速度和目标触控点与第一个触控点的接收时间间隔，计算目标触控点的第二触控坐标，利用第二触控坐标更新目标触控点在第一触控事件数据中的第一触控坐标，得到第二触控事件数据。

相应的，在根据第二触控事件数据对待操控应用进行操控时，可根据第二触控事件数据中各个触控点的第二触控坐标，拟合生成第一操控轨迹，进一步利用第一操控轨迹实现对待操控应用的操控。相应的，作为一种优选方式，实施例步骤203具体可以包括：根据第二触控事件数据生成第一操控轨迹，并将第一操控轨迹发送至输入管理器进行触控同步，实现在终端设备上对待操控应用的触控模拟。

204、若判断第一触控事件数据未发生传输异常，则根据第一触控事件数据操控云手机中的待操控应用，以使操控结果与触控操作匹配。

在具体的应用场景中，若判断第一触控事件数据未发生传输异常，即未受到网络传输的影响，故不需要执行实施例步骤203中的优化处理操作，可直接根据第一触控事件数据中各个触控点的第一触控坐标，拟合生成第二操控轨迹，进一步利用第二操控轨迹实现对待操控应用的操控。相应的，作为一种可选方式，在根据第一触控事件数据，对待操控应用进行操控时，作为一种优选方式，实施例步骤204具体可以包括：将第一触控事件数据发送至输入管理器进行触控同步，实现在终端设备上对待操控应用的触控模拟。

本实施例提供的可应用于云手机服务器侧的云手机操控方法，可在接收到云手机服务器发送的第一触控事件数据后，调用触控优化模块判定第一触控事件数据是否传输异常，并在判定传输异常时，云手机服务器可利用触控优化模块对第一触控事件数据进行优化处理，进一步得到与用户操作相对吻合的第二触控事件数据，并基于第二触控事件数据及时准确地对待操控应用进行模拟操控，且使模拟操控结果与用户在待操控应用所展示应用操控页面的触控操作匹配。本申请中的技术方案，在现有方案的基础上，增加了触控优化功能，可基于触控产生的时间点和加速度进行二次优化处理，为用户营造良好的触控体验，有效缓解了网络条件不好时，触控点丢失或者粘包，导致的操控卡顿/加速度计算异常情况。

进一步的，作为图1所示方法的具体表现，本申请实施例提供了一种可应用于云手机客户端侧的云手机操控装置，如图4所示，该装置包括：获取模块31、发送模块32。

获取模块31，可用于响应于用户在终端设备所登录的云手机中，对待操控应用所展示应用操控页面的触控操作，获取触控操作对应的第一触控事件数据，其中，待操控应用为云手机中运行的任一云手机应用；

发送模块32，可用于基于与云手机服务器之间的TCP协议通信连接，将终端设备上的第一触控事件数据发送给云手机服务器，以供云手机服务器判断第一触控事件数据是否发生传输异常，并在判定发生传输异常时，将第一触控事件数据优化处理为第二触控事件数据，利用第二触控事件数据操控云手机中的待操控应用，以使操控结果与触控操作匹配。

在具体的应用场景中，第一触控事件数据包括触控轨迹中各个触控点与第一个触控点的触控时间间隔，以及各个触控点的第一触控坐标；在响应于用户在终端设备所登录的云手机中，对待操控应用所展示应用操控页面的触控操作，获取第一触控事件数据时，获取模块31，具体可用于响应于用户基于应用操控界面的触控操作，采集触控操作对应触控轨迹中各个触控点产生的触控时间戳以及第一触控坐标；根据触控时间戳计算触控轨迹中第一个触控点之后的各个触控点与第一个触控点的触控时间间隔；将触控时间间隔以及第一触控坐标，作为第一触控事件数据。

在具体的应用场景中，如图4所示，该装置还包括：显示模块33；

显示模块33，可用于响应于用户在终端设备上的云手机登陆操作，在终端设备上显示所登陆云手机中待操控应用对应的应用操控界面。

需要说明的是，本实施例提供的一种可应用于云手机客户端侧的云手机操控装置所涉及各功能单元的其它相应描述，可以参考图1中的对应描述，在此不再赘述。

进一步的，作为图2所示方法的具体实现，本申请实施例提供了一种可应用于云手机服务器侧的云手机操控装置，如图5所示，该装置包括：接收模块41、判断模块42、第一操控模块43、第二操控模块44。

接收模块41，可用于基于与云手机客户端之间的TCP协议通信连接，接收云手机客户端发送的第一触控事件数据，并生成第一触控事件数据对应的接收事件数据，其中，第一触控事件数据是云手机客户端响应于用户在终端设备所登录的云手机中，对待操控应用所展示应用操控页面的触控操作获取的，待操控应用为云手机中运行的任一云手机应用；

判断模块42，可用于根据接收事件数据判断第一触控事件数据是否发生传输异常；

第一操控模块43，可用于若第一触控事件数据发生传输异常，则将第一触控事件数据优化处理为第二触控事件数据，并根据第二触控事件数据操控云手机中的待操控应用，以使操控结果与触控操作匹配；

第二操控模块44，可用于若第一触控事件数据未发生传输异常，则根据第一触控事件数据操控云手机中的待操控应用，以使操控结果与触控操作匹配。

在具体的应用场景中，在生成第一触控事件数据对应的接收事件数据时，接收模块41，具体可用于采集第一触控事件数据中各个触控点的接收时间戳；根据接收时间戳计算触控轨迹中第一个触控点之后的各个触控点与第一个触控点的接收时间间隔；将接收时间间隔作为接收事件数据。

在具体的应用场景中，第一触控事件数据包括触控轨迹中各个触控点与第一个触控点的触控时间间隔，接收事件数据包括触控轨迹中各个触控点与第一个触控点的接收时间间隔；在根据接收事件数据判断第一触控事件数据是否发生传输异常时，判断模块42，具体可用于计算同一触控点对应接收时间间隔与触控时间间隔的时间差；若确定时间差大于预设阈值，则判断第一触控事件数据发生传输异常；若确定时间差小于或等于预设阈值，则判断第一触控事件数据未发生传输异常。

在具体的应用场景中，第一触控事件数据还包括各个触控点的第一触控坐标；在对第一触控事件数据进行优化处理，得到第二触控事件数据时，第一操控模块43，具体可用于将第一触控事件数据中传输异常的触控点标记为目标触控点；根据目标触控点与第一个触控点的触控时间间隔，以及目标触控点的第一触控坐标，计算目标触控点处的触控加速度；基于触控加速度和目标触控点与第一个触控点的接收时间间隔，计算目标触控点的第二触控坐标，利用第二触控坐标更新目标触控点在第一触控事件数据中的第一触控坐标，得到第二触控事件数据。

在具体的应用场景中，在根据第二触控事件数据，对待操控应用进行操控时，第一操控模块43，可用于根据第二触控事件数据生成第一操控轨迹，并将第一操控轨迹发送至输入管理器进行触控同步，实现在终端设备上对待操控应用的触控模拟。

在具体的应用场景中，在根据第一触控事件数据，对待操控应用进行操控时，第二操控模块44，具体可用于根据第一触控事件数据生成第二操控轨迹，并将第二操控轨迹发送至输入管理器进行触控同步，实现在终端设备上对待操控应用的触控模拟。

需要说明的是，本实施例提供的一种可应用于云手机服务器侧的云手机操控装置所涉及各功能单元的其它相应描述，可以参考图2中的对应描述，在此不再赘述。

基于上述如图1所示方法，相应的，本申请实施例还提供了一种存储介质，其上存储有计算机程序，该程序被处理器执行时实现上述如图1所示的云手机操控方法。基于上述如图2所示方法，本申请实施例还提供了另一种存储介质，其上存储有计算机程序，该程序被处理器执行时实现上述如图2所示的云手机操控方法。

基于这样的理解，本申请的技术方案可以以软件产品的形式体现出来，该软件产品可以存储在一个非易失性存储介质(可以是CD-ROM，U盘，移动硬盘等)中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本申请各个实施场景的云手机操控方法。

基于上述如图1所示的方法，以及图4所示的虚拟装置实施例，为了实现上述目的，本申请实施例还提供了一种客户端设备，具体可以为个人计算机、平板电脑、智能手机、智能手表、智能手环、POS设备或其他网络设备等，该客户端设备包括存储介质和处理器；存储介质，用于存储计算机程序；处理器，用于执行计算机程序以实现上述如图1所示的云手机操控方法。

基于上述如图2所示的方法，以及图5所示的虚拟装置实施例，为了实现上述目的，本申请实施例还提供了一种服务器设备，具体可以为个人计算机、服务器、网络设备等，该服务器设备包括存储介质和处理器；存储介质，用于存储计算机程序；处理器，用于执行计算机程序以实现上述如图2所示的云手机操控方法。

可选的，上述两种实体设备都还可以包括用户接口、网络接口、摄像头、射频(Radio Frequency，RF)电路，传感器、音频电路、WI-FI模块等等。用户接口可以包括显示屏(Display)、输入单元比如键盘(Keyboard)等，可选用户接口还可以包括USB接口、读卡器接口等。网络接口可选的可以包括标准的有线接口、无线接口(如WI-FI接口)等。

本领域技术人员可以理解，本实施例提供的一种客户端设备和服务器设备的实体设备结构并不构成对这两种实体设备的限定，可以包括更多或更少的部件，或者组合某些部件，或者不同的部件布置。

存储介质中还可以包括操作系统、网络通信模块。操作系统是管理上述两个实体设备硬件和软件资源的程序，支持信息处理程序以及其它软件和/或程序的运行。网络通信模块用于实现存储介质内部各组件之间的通信，以及与信息处理实体设备中其它硬件和软件之间通信。

基于上述内容，进一步的，本申请实施例还提供了一种云手机操控系统，如图6所示，该系统包括客户端设备51、服务器设备52；

其中，客户端设备51可用于执行如图1所示的方法，服务器设备52可用于执行如图2所示的方法。

具体的，客户端设备51，可用于响应于用户在终端设备所登录的云手机中，对待操控应用所展示应用操控页面的触控操作，获取触控操作对应的第一触控事件数据，其中，待操控应用为云手机中运行的任一云手机应用；基于与云手机服务器之间的TCP协议通信连接，将终端设备上的第一触控事件数据发送给云手机服务器，以供云手机服务器判断第一触控事件数据是否发生传输异常，并在判定发生传输异常时，将第一触控事件数据优化处理为第二触控事件数据，利用第二触控事件数据操控云手机中的待操控应用，以使操控结果与触控操作匹配。

服务器设备52，可用于基于与云手机客户端之间的TCP协议通信连接，接收客户端设备51发送的第一触控事件数据，并生成第一触控事件数据对应的接收事件数据，其中，第一触控事件数据是云手机客户端响应于用户在终端设备所登录的云手机中，对待操控应用所展示应用操控页面的触控操作获取的，待操控应用为云手机中运行的任一云手机应用；根据接收事件数据判断第一触控事件数据是否发生传输异常；若是，则将第一触控事件数据优化处理为第二触控事件数据，并根据第二触控事件数据操控云手机中的待操控应用，以使操控结果与触控操作匹配；若否，则根据第一触控事件数据操控云手机中的待操控应用，以使操控结果与触控操作匹配。

通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到本申请可以借助软件加必要的通用硬件平台的方式来实现，也可以通过硬件实现。通过应用本申请的技术方案，与目前现有技术相比，本申请可在接收到云手机服务器发送的第一触控事件数据后，调用触控优化模块判定第一触控事件数据是否传输异常，并在判定传输异常时，云手机服务器可利用触控优化模块对第一触控事件数据进行优化处理，进一步得到与用户操作相对吻合的第二触控事件数据，并基于第二触控事件数据及时准确地对待操控应用进行模拟操控，且使模拟操控结果与用户在待操控应用所展示应用操控页面的触控操作匹配。本申请中的技术方案，在现有方案的基础上，增加了触控优化功能，可基于触控产生的时间点和加速度进行二次优化处理，为用户营造良好的触控体验，有效缓解了网络条件不好时，触控点丢失或者粘包，导致的操控卡顿/加速度计算异常情况。

本领域技术人员可以理解附图只是一个优选实施场景的示意图，附图中的模块或流程并不一定是实施本申请所必须的。本领域技术人员可以理解实施场景中的装置中的模块可以按照实施场景描述进行分布于实施场景的装置中，也可以进行相应变化位于不同于本实施场景的一个或多个装置中。上述实施场景的模块可以合并为一个模块，也可以进一步拆分成多个子模块。

上述本申请序号仅仅为了描述，不代表实施场景的优劣。以上公开的仅为本申请的几个具体实施场景，但是，本申请并非局限于此，任何本领域的技术人员能思之的变化都应落入本申请的保护范围。

Claims (15)

1.一种云手机操控方法，其特征在于，应用于云手机客户端，所述云手机客户端安装于终端设备上，该方法包括：

响应于用户在终端设备所登录的云手机中，对待操控应用所展示应用操控页面的触控操作，获取所述触控操作对应的第一触控事件数据，其中，所述待操控应用为所述云手机中运行的任一云手机应用；

基于与云手机服务器之间的TCP协议通信连接，将所述终端设备上的第一触控事件数据发送给所述云手机服务器，以供所述云手机服务器判断所述第一触控事件数据是否发生传输异常，并在判定发生传输异常时，将所述第一触控事件数据优化处理为第二触控事件数据，利用所述第二触控事件数据操控所述云手机中的所述待操控应用，以使操控结果与所述触控操作匹配；

所述第一触控事件数据包括各个触控点的第一触控坐标；

在判断所述第一触控事件数据发生传输异常时，将所述第一触控事件数据优化处理为第二触控事件数据，包括：

将所述第一触控事件数据中传输异常的触控点标记为目标触控点；

根据所述目标触控点与第一个触控点的触控时间间隔，以及所述目标触控点的第一触控坐标，计算所述目标触控点处的触控加速度；

基于所述触控加速度和所述目标触控点与所述第一个触控点的接收时间间隔，计算所述目标触控点的第二触控坐标，利用所述第二触控坐标更新所述目标触控点在所述第一触控事件数据中的第一触控坐标，得到第二触控事件数据。

2.根据权利要求1所述的方法，其特征在于，所述第一触控事件数据包括触控轨迹中各个触控点与第一个触控点的触控时间间隔，以及各个所述触控点的第一触控坐标；

所述响应于用户在终端设备所登录的云手机中，对待操控应用所展示应用操控页面的触控操作，获取所述触控操作对应的第一触控事件数据，包括：

响应于用户基于应用操控界面的触控操作，采集所述触控操作对应触控轨迹中各个触控点产生的触控时间戳以及第一触控坐标；

根据触控时间戳计算所述触控轨迹中第一个触控点之后的各个触控点与所述第一个触控点的触控时间间隔；

将所述触控时间间隔以及所述第一触控坐标，作为所述第一触控事件数据。

3.根据权利要求1所述的方法，其特征在于，所述在响应于用户在终端设备所登录的云手机中，对待操控应用所展示应用操控页面的触控操作之前，还包括：

响应于用户在终端设备上的云手机登陆操作，在所述终端设备上显示所登陆云手机中待操控应用对应的应用操控界面。

4.一种云手机操控方法，其特征在于，应用于云手机服务器，该方法包括：

基于与云手机客户端之间的TCP协议通信连接，接收所述云手机客户端发送的第一触控事件数据，并生成所述第一触控事件数据对应的接收事件数据，其中，所述第一触控事件数据是所述云手机客户端响应于用户在终端设备所登录的云手机中，对待操控应用所展示应用操控页面的触控操作获取的，所述待操控应用为所述云手机中运行的任一云手机应用；

根据所述接收事件数据判断所述第一触控事件数据是否发生传输异常；

若是，则将所述第一触控事件数据优化处理为第二触控事件数据，并根据所述第二触控事件数据操控所述云手机中的所述待操控应用，以使操控结果与所述触控操作匹配；

所述第一触控事件数据包括各个触控点的第一触控坐标；

若判断所述第一触控事件数据发生传输异常，则将所述第一触控事件数据优化处理为第二触控事件数据，包括：

将所述第一触控事件数据中传输异常的触控点标记为目标触控点；

根据所述目标触控点与第一个触控点的触控时间间隔，以及所述目标触控点的第一触控坐标，计算所述目标触控点处的触控加速度；

基于所述触控加速度和所述目标触控点与所述第一个触控点的接收时间间隔，计算所述目标触控点的第二触控坐标，利用所述第二触控坐标更新所述目标触控点在所述第一触控事件数据中的第一触控坐标，得到第二触控事件数据。

5.根据权利要求4所述的方法，其特征在于，所述生成所述第一触控事件数据对应的接收事件数据，包括：

采集所述第一触控事件数据中各个触控点的接收时间戳；

根据接收时间戳计算触控轨迹中第一个触控点之后的各个触控点与所述第一个触控点的接收时间间隔；

将所述接收时间间隔作为所述接收事件数据。

6.根据权利要求4所述的方法，其特征在于，所述第一触控事件数据包括触控轨迹中各个触控点与第一个触控点的触控时间间隔，所述接收事件数据包括触控轨迹中各个触控点与第一个触控点的接收时间间隔；

所述根据所述接收事件数据判断所述第一触控事件数据是否发生传输异常，包括：

计算同一触控点对应所述接收时间间隔与所述触控时间间隔的时间差；

若确定所述时间差大于预设阈值，则判断所述第一触控事件数据发生传输异常；

若确定所述时间差小于或等于所述预设阈值，则判断所述第一触控事件数据未发生传输异常。

7.根据权利要求4所述的方法，其特征在于，所述根据所述第二触控事件数据操控所述云手机中的所述待操控应用，包括：

根据所述第二触控事件数据生成第一操控轨迹，并将所述第一操控轨迹发送至输入管理器进行触控同步，实现在所述终端设备上对所述待操控应用的触控模拟。

8.根据权利要求4所述的方法，其特征在于，所述根据所述第一触控事件数据操控所述云手机中的所述待操控应用，包括：

根据所述第一触控事件数据生成第二操控轨迹，并将所述第二操控轨迹发送至输入管理器进行触控同步，实现在所述终端设备上对所述待操控应用的触控模拟。

9.一种云手机操控装置，其特征在于，应用于云手机客户端，所述云手机客户端安装于终端设备上，该装置包括：

获取模块，用于响应于用户在终端设备所登录的云手机中，对待操控应用所展示应用操控页面的触控操作，获取所述触控操作对应的第一触控事件数据，其中，所述待操控应用为所述云手机中运行的任一云手机应用；

发送模块，用于基于与云手机服务器之间的TCP协议通信连接，将所述终端设备上的第一触控事件数据发送给所述云手机服务器，以供所述云手机服务器判断所述第一触控事件数据是否发生传输异常，并在判定发生传输异常时，将所述第一触控事件数据优化处理为第二触控事件数据，利用所述第二触控事件数据操控所述云手机中的所述待操控应用，以使操控结果与所述触控操作匹配；

所述第一触控事件数据包括各个触控点的第一触控坐标；

所述云手机服务器在判断所述第一触控事件数据发生传输异常时，具体用于：

将所述第一触控事件数据中传输异常的触控点标记为目标触控点；

根据所述目标触控点与第一个触控点的触控时间间隔，以及所述目标触控点的第一触控坐标，计算所述目标触控点处的触控加速度；

基于所述触控加速度和所述目标触控点与所述第一个触控点的接收时间间隔，计算所述目标触控点的第二触控坐标，利用所述第二触控坐标更新所述目标触控点在所述第一触控事件数据中的第一触控坐标，得到第二触控事件数据。

10.一种云手机操控装置，其特征在于，应用于云手机服务器，该装置包括：

接收模块，用于基于与云手机客户端之间的TCP协议通信连接，接收所述云手机客户端发送的第一触控事件数据，并生成所述第一触控事件数据对应的接收事件数据，其中，所述第一触控事件数据是所述云手机客户端响应于用户在终端设备所登录的云手机中，对待操控应用所展示应用操控页面的触控操作获取的，所述待操控应用为所述云手机中运行的任一云手机应用；

判断模块，用于根据所述接收事件数据判断所述第一触控事件数据是否发生传输异常；

第一操控模块，用于若是，则将所述第一触控事件数据优化处理为第二触控事件数据，并根据所述第二触控事件数据操控所述云手机中的所述待操控应用，以使操控结果与所述触控操作匹配；

所述第一触控事件数据包括各个触控点的第一触控坐标；

所述第一操控模块具体可用于：

将所述第一触控事件数据中传输异常的触控点标记为目标触控点；

根据所述目标触控点与第一个触控点的触控时间间隔，以及所述目标触控点的第一触控坐标，计算所述目标触控点处的触控加速度；

基于所述触控加速度和所述目标触控点与所述第一个触控点的接收时间间隔，计算所述目标触控点的第二触控坐标，利用所述第二触控坐标更新所述目标触控点在所述第一触控事件数据中的第一触控坐标，得到第二触控事件数据。

11.一种存储介质，其上存储有计算机程序，其特征在于，所述程序被处理器执行时实现权利要求1至3中任一项所述的云手机操控方法。

12.一种客户端设备，包括存储介质、处理器及存储在存储介质上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述程序时实现权利要求1至3中任一项所述的云手机操控方法。

13.一种存储介质，其上存储有计算机程序，其特征在于，所述程序被处理器执行时实现权利要求4至8中任一项所述的云手机操控方法。

14.一种服务器设备，包括存储介质、处理器及存储在存储介质上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述程序时实现权利要求4至8中任一项所述的云手机操控方法。

15.一种云手机操控系统，其特征在于，包括：如权利要求12所述的客户端设备和如权利要求14所述的服务器设备。