CN106572139B - 多终端控制方法、终端、服务器和系统 - Google Patents

Abstract

本申请实施例提供了一种多终端控制方法、终端、服务器和系统，以对多个终端进行控制。所述的方法包括：控制终端在网页中显示选择的各待控制终端的显示画面；在所述网页中选择一个待控制终端进行操作生成相应的操作指令；将所述操作指令发送给服务器，以通过所述服务器将所述操作指令转化为目的操作事件转发给主控机和跟随机来执行相同的操作，其中，所述服务器依据所述操作指令将选择的待控制终端设置为主控机，将除主控机之外的待控制终端设置为跟随机；在所述网页中对所述显示画面进行更新，显示所述主控机和跟随机执行相同操作对应的操作界面。通过网页基于服务器实现对主控机和跟随机的共同控制和查看，防止资源浪费，节省时间提高操作效率。

Description

多终端控制方法、终端、服务器和系统

技术领域

本申请涉及终端技术领域，特别是涉及一种多终端控制方法、一种控制终端、一种主控机、一种服务器、一种跟随机以及一种多终端控制系统。

背景技术

随着终端技术的发展，越来越多的用户通过移动终端执行各种操作，如浏览网页、观看视频，拍摄照片等，丰富了用户的生活。

用户可以拥有多个移动终端，如多个智能手机、平板电脑、智能手表等，每个移动终端均可以执行相应的操作。但是各个移动终端之间彼此是独立的，一个用户也只能分别操作各移动终端，在操作一个移动终端时，其他移动终端通常是闲置的，造成资源的浪费。

因此，目前需要本领域技术人员迫切解决的一个技术问题就是：提供一种多终端控制方法、终端、服务器和系统，以同时对多个终端进行控制。

发明内容

本申请实施例所要解决的技术问题是提供一种多终端控制方法，以同时对多个终端进行控制。

相应的，本申请实施例还提供了一种控制终端、一种主控机、一种服务器、一种跟随机以及一种多终端控制系统，用以保证上述方法的实现及应用。

为了解决上述问题，本申请实施例公开了一种多终端控制方法，包括：控制终端在网页中显示选择的各待控制终端的显示画面；在所述网页中选择一个待控制终端进行操作生成相应的操作指令；将所述操作指令发送给服务器，以通过所述服务器将所述操作指令转化为目的操作事件转发给主控机和跟随机来执行相同的操作，其中，所述服务器依据所述操作指令将选择的待控制终端设置为主控机，将除主控机之外的待控制终端设置为跟随机；在所述网页中对所述显示画面进行更新，显示所述主控机和跟随机执行相同操作对应的操作界面。

本申请实施例还公开了一种多终端控制方法，包括：在移动终端的网页中显示所述移动终端的显示画面，和选择的待控制终端的显示画面，其中，所述移动终端被服务器设置为主控机，所述选择的待控制终端被服务器设置为跟随机；捕获所述主控机上的源操作事件；将所述源操作事件发送给所述服务器，以通过所述服务器将所述源操作事件转化的目的操作事件转发给各跟随机来执行相同的操作；在所述网页中对所述显示画面进行更新，显示所述主控机和跟随机执行相同操作对应的操作界面。

本申请实施例还公开了一种多终端控制方法，包括：移动终端作为主控机与局域网中选定的移动终端建立连接，以将局域网中选定的移动终端设置为跟随机；捕获所述主控机上的源操作事件；将所述源操作事件通过局域网发送给所述跟随机，以使所述跟随机与所述主控机执行相同的操作，显示执行相同操作对应的操作界面。

本申请实施例还公开了一种多终端控制方法，包括：服务器依据网页的反馈确定选择的待控制终端，其中，所述待控制终端包括主控机和/或跟随机；接收所述待控制终端发送的显示画面，将所述显示画面反馈给所述网页；接收操作数据，依据所述操作数据确定目的操作事件，其中，所述操作数据包括操作指令或源操作事件；将所述目的操作事件发送给所述跟随机，以使所述主控机和跟随机中执行相同的操作；接收所述主控机和跟随机反馈更新的显示画面，其中，所述更新的显示画面为所述主控机和跟随机执行相同操作对应的操作页面；将更新的显示画面反馈给所述网页，以使所述网页显示所述主控机和跟随机执行相同操作对应的操作页面。

本申请实施例还公开了一种多终端控制方法，包括：跟随机接收操作事件，其中，所述操作事件包括源操作事件或目的操作事件；依据所述操作事件执行与主控机相同的操作，显示与所述主控机执行相同操作对应的操作界面。

本申请实施例还公开了一种控制终端，包括：网页显示模块，用于在网页中显示选择的各待控制终端的显示画面；以及在所述网页中对所述显示画面进行更新，显示所述主控机和跟随机执行相同操作对应的操作界面；指令生成模块，用于在所述网页中选择一个待控制终端进行操作生成相应的操作指令；指令发送模块，用于将所述操作指令发送给服务器，以通过所述服务器将所述操作指令转化为目的操作事件转发给主控机和跟随机来执行相同的操作，其中，所述服务器依据所述操作指令将选择的待控制终端设置为主控机，将除主控机之外的待控制终端设置为跟随机。

本申请实施例还公开了一种主控机，包括：第一显示模块，用于在移动终端的网页中显示所述移动终端的显示画面，和选择的待控制终端的显示画面，其中，所述移动终端被服务器设置为主控机，所述选择的待控制终端被服务器设置为跟随机；以及，在所述网页中对所述显示画面进行更新，显示所述主控机和跟随机执行相同操作对应的操作界面；第一捕获模块，用于捕获所述主控机上的源操作事件；第一发送模块，用于将所述源操作事件发送给所述服务器，以通过所述服务器将所述源操作事件转化的目的操作事件转发给各跟随机来执行相同的操作。

本申请实施例还公开了一种主控机，包括：第二跟随机配置模块，用于与局域网中选定的移动终端建立连接，以将局域网中选定的移动终端设置为跟随机；第二捕获模块，用于捕获所述主控机上的源操作事件；第三发送模块，用于将所述源操作事件通过局域网发送给所述跟随机，以使所述跟随机与所述主控机执行相同的操作，显示执行相同操作对应的操作界面。

本申请实施例还公开了一种服务器，包括：配置模块，用于服务器依据网页的反馈确定选择的待控制终端，其中，所述待控制终端包括主控机和/或跟随机；画面处理模块，用于接收所述待控制终端发送的显示画面，将所述显示画面反馈给所述网页；以及，接收所述主控机和跟随机反馈更新的显示画面，其中，所述更新的显示画面为所述主控机和跟随机执行相同操作对应的操作页面；将更新的显示画面反馈给所述网页，以使所述网页显示所述主控机和跟随机执行相同操作对应的操作页面；操作处理模块，用于接收操作数据，依据所述操作数据确定目的操作事件，其中，所述操作数据包括操作指令或源操作事件；将所述目的操作事件发送给所述跟随机，以使所述主控机和跟随机中执行相同的操作。

本申请实施例还公开了一种跟随机，包括：接收模块，用于接收操作事件，其中，所述操作事件包括源操作事件或目的操作事件；操作处理模块，用于依据所述操作事件执行与主控机相同的操作，显示与所述主控机执行相同操作对应的操作界面。

本申请实施例还公开了一种多终端控制系统，包括：主控机和跟随机；其中，所述跟随机包括如本申请任一实施例所述的跟随机；所述主控机包括第一主控机，所述第一主控机包括如本申请任一实施例所述的主控机。

与现有技术相比，本申请实施例包括以下优点：

在本申请实施例中，服务器控制终端的反馈确定主控机和跟随机，控制终端在网页上生成控制指令，基于控制指令生成主控机和跟随机对应的目的操作事件，从而使主控机和跟随机执行相同操作，各自显示执行相同操作对应的操作界面，在网页上对主控机和跟随机执行相同操作对应的操作界面进行显示，从而通过网页基于服务器实现对主控机和跟随机的共同控制，防止资源浪费，并在网页上查看主控机和跟随机的显示画面，节省时间提高操作效率。

主控机和服务器交互确定跟随机，主控机通过服务器将操作事件发给跟随机，从而使主控机和跟随机执行相同操作，各自显示执行相同操作对应的操作界面，在网页上对主控机和跟随机执行相同操作对应的操作界面进行显示，从而通过网页基于服务器实现对主控机和跟随机的共同控制，防止资源浪费，并在网页上查看主控机和跟随机的显示画面，节省时间提高操作效率。

主控机基于局域网直接配置跟随机，从而将自身的源操作事件发送给跟随机，跟随机依据该源操作事件执行与主控机相同的操作，节省资源。相应的在主控机和跟随机的屏幕即可显示执行相同操作对应的操作界面，用户可以直接通过主控机和跟随机的屏幕查看操作界面，节省操作时间并提高操作效率。

通过服务器使得采用第三方的控制终端和Leader均可以实现多终端控制，且Leader和Follower会直接显示在网页上供用户观看。

附图说明

图1是本申请的第一种多终端控制方法实施例的步骤流程图；

图2是本申请的第一种多终端控制方法优选实施例的步骤流程图；

图3是本申请实施例中多终端控制的第一种应用场景示意图；

图4是本申请实施例中多终端控制的第二种应用场景示意图；

图5是本申请的第二种多终端控制方法实施例的步骤流程图；

图6是本申请的第二种多终端控制方法优选实施例的步骤流程图；

图7是本申请实施例中多终端控制的第三种应用场景示意图；

图8是本申请实施例中多终端控制的第四种应用场景示意图；

图9是本申请的第三种多终端控制方法实施例的步骤流程图；

图10是本申请实施例中多终端控制的第五种应用场景示意图；

图11是本申请的第三种多终端控制方法优选实施例的步骤流程图；

图12是本申请实施例中多终端控制的第六种应用场景示意图；

图13是本申请的一种多终端控制方法中服务器侧实施例的步骤流程图；

图14是本申请的另一种多终端控制方法中服务器侧实施例的步骤流程图；

图15是本申请的一种多终端控制方法中Follower侧实施例的步骤流程图；

图16是本申请的多终端控制方法中Follower侧的第一种优选实施例的步骤流程图；

图17是本申请的多终端控制方法中Follower侧的第二种优选实施例的步骤流程图；

图18是本申请实施例中基于控制终端的多终端控制方法交互示意图；

图19是本申请实施例中基于Leader的多终端控制方法交互示意图；

图20是本申请一种控制终端实施例的结构框图；

图21A、B是本申请第一种主控机实施例的结构框图；

图22A、B是本申请第二种主控机实施例的结构框图；

图23A、B是本申请一种服务器实施例的结构框图；

图24A、B是本申请一种跟随机实施例的结构框图；

图25是本申请一个多终端控制系统实施例的结构框图。

具体实施方式

为使本申请的上述目的、特征和优点能够更加明显易懂，下面结合附图和具体实施方式对本申请作进一步详细的说明。

用户可以拥有多个移动终端，如多个智能手机、平板电脑、智能手表等，每个移动终端均可以执行相应的操作。但是各个移动终端之间彼此是独立的，一个用户也只能分别操作各移动终端，在操作一个移动终端时，其他移动终端通常是闲置的，造成资源的浪费。考虑到上述技术问题，本申请实施例提出一种多终端控制方法、终端、服务器和系统，以对多个移动终端进行控制。

在进行多终端控制时，需要同时控制的各个移动终端可能位于本地，也可能位于远程，因此本申请实施例在进行多终端控制时，可以基于局域网进行控制，也可以基于互联网实现控制，可以在某个移动终端上直接对其他移动终端进行控制，也可以采用PC(Personal Computer，个人计算机)等控制终端对多个移动终端进行控制。其中，移动终端指的是移动中使用的计算机设备，本申请实施例中可以将进行多终端控制的移动终端称为待控制终端。控制终端是不包括需要控制的移动终端的计算机设备，如台式电脑，笔记本电脑，智能电视，当然也可以是平板电脑等移动终端，但是该移动终端不是需要进行控制的移动终端，即非待控制终端。下面基于各个实施例详细论述多终端的控制实现步骤。

实施例一

本实施例基于PC机等控制终端通过互联网对多个移动终端进行控制，其中，移动终端可以位于控制终端的本地，也可以位于远程。

参照图1，示出了本申请的第一种多终端控制方法实施例的步骤流程图，具体可以包括如下步骤：

步骤102，控制终端在网页中显示选择的各待控制终端的显示画面。

用户若要采用PC机等控制终端实现对多个移动终端的控制，可以首先在控制终端中打开网页确定要控制的移动终端，即待控制终端。从而服务器可以获知待控制终端，获取待控制终端的显示画面反馈给网页，控制终端在渲染网页后，即可在网页中显示选择的各待控制终端的显示画面，即各待控制终端屏幕显示的内容，从而用户在控制终端开启的网页中可以直接看到所要控制的每个待控制终端的显示画面，还可以采用该网页对待控制终端进行控制。

步骤104，在所述网页中选择一个待控制终端进行操作生成相应的操作指令。

用户可以基于网页对待控制终端进行控制，即在网页中选择任意一个待控制终端，通过鼠标、键盘等外置设备控制光标等指示标识对选中的待控制终端进行控制，可以采用指示标识选择待控制终端屏幕上的内容来进行操作，基于指示标识在待控制终端屏幕上的操作生成相应操作指令。如在网页渲染时即标识出待控制终端的显示画面中屏幕上可控制元素，指示标识选中相应的元素即生成操作指令；又如基于指示标识在网页中选中的位置生成操作指令，由服务器基于所述位置确定所述操作指令对应要在待控制终端屏幕上执行的操作。

步骤106，将相应的操作指令发送给服务器，以通过所述服务器将所述操作指令转化为目的操作事件转发给主控机和跟随机来执行相同的操作。

将生成的操作指令发送给服务器，服务器在接收到操作指令后，可以基于操作指令确定出用户在网页中选中的待控制终端，将该待控制终端设置为主控机，将除主控机之外的其他待控制终端设置为跟随机。例如基于上述选中的元素操作指令中标识有网页中选中的待控制终端，由于基于位置确定出待控制终端以及在其屏幕上执行的操作。服务器还将操作指令转化成目的操作事件，即需要在主控机和跟随机上执行的操作事件，例如打开某一指定应用程序，又如启动指定应用程序中某一功能等。然后将目的操作事件分别转发给主控机和每个跟随机，使得主控机和跟随机依据该目的操作事件执行相应的操作，从而基于网页生成的操作指令，可以使主控机和跟随机来执行相同的操作，显示该操作对应的操作界面。

步骤108，在所述网页中对所述显示画面进行更新，显示所述主控机和跟随机执行相同操作对应的操作界面。

主控机和跟随机来执行相同的操作，同时会将操作执行过程中以及执行完毕后屏幕上显示的操作界面发送给服务器，服务器接收到该操作界面后更新网页中各待控制终端的显示画面，从而在控制终端的网页上可以显示出主控机和跟随机执行相同操作的操作界面，从而同时控制多个移动终端，不会出现一个移动终端使用，其他移动终端均闲置而造成资源浪费的问题，更加合理的使用移动终端。

例如，主控机和跟随机均开启微信的朋友圈，从而可以在网页中同时查看主控机和跟随机的朋友圈，当主控机和跟随机采用不同账号登录微信时，就可以在一个网页中同时查看多个账号的朋友群中消息，使用非常方便，也同时查看各种消息，节省时间。

另外，在直接采用主控机执行操作的过程中，也可以预先在控制终端中开启网页选择待控制终端，即选择要操作的主控机和跟随机告知服务器。之后用户直接操作一个待控制终端，该待控制终端即为主控机，服务器接收到该待控制终端发送的源操作事件之后，会将该待控制终端设备为主控机，其他待控制终端设置为跟随机，从而将从主控机和跟随机上获取的各帧显示画面均发送服务器，已转给控制终端的网页进行显示。通常控制终端的屏幕尺寸较大，因此可以在操作主控机的同时，从控制终端的大尺寸屏幕上直接观看主控机和跟随机上的操作界面，使用非常方便。

综上，服务器控制终端的反馈确定主控机和跟随机，控制终端在网页上生成控制指令，基于控制指令生成主控机和跟随机对应的目的操作事件，从而使主控机和跟随机执行相同操作，各自显示执行相同操作对应的操作界面，在网页上对主控机和跟随机执行相同操作对应的操作界面进行显示，从而通过网页基于服务器实现对主控机和跟随机的共同控制，防止资源浪费，并在网页上查看主控机和跟随机的显示画面，节省时间提高操作效率。

参照图2，示出了本申请的第一种多终端控制方法优选实施例的步骤流程图，具体可以包括如下步骤：

步骤202，控制终端在网页中显示服务器反馈的至少一个指定用户注册的各移动终端。

步骤204，从注册的各移动终端选择至少两个待控制终端，将选择的各待控制终端发送给所述服务器，以使所述服务器执行所述主控机和跟随机的配置。

用户要对多个移动终端同时进行控制，可以在多终端控制系统的服务器中注册各个移动终端，使得服务器能够获知移动终端的名称、标识、MAC地址，IP地址等各种信息，从而能够实现与移动终端进行消息交互，能够从移动终端获取显示画面等消息，也可以转发目的操作事件给移动终端。

用户使用控制终端实现多终端控制，可以对自己注册的移动终端进行控制，也可以对其他关联用户注册的移动终端进行控制，关联用户可以包括建立好友、从属等关系的注册用户，因此可以将该用户即使用用户和/或其各关联用户作为指定用户。然后打开本地浏览器发送网页请求给服务器，服务器基于该网页请求反馈网页数据，本地浏览器对网页数据进行渲染显示相应的网页，在该网页中显示指定用户注册的各个移动终端。其中，若请求了关联用户的移动终端，服务器可以先获取关联用户的确认再反馈，若未得到关联用户确认则不反馈该关联用户的移动终端。然后在网页中选择至少两个注册的移动终端作为待控制终端。将对待控制终端的选取消息发送给服务器，服务器基于该选取消息确定选择的待控制终端。

然后服务器可以告知各待控制终端需要被控制的事件，各待控制终端获知需要被控制后，将自身屏幕上的显示画面以帧为单位获取并输出，将各帧显示画面传送给服务器，服务器基于该显示画面生成网页数据发送给控制终端。因此，网页数据包括选择的各待控制终端的帧显示画面，所述帧显示画面是所述服务器从各所述待控制终端中获取后转发的。

步骤206，接收网页数据。

步骤208，对所述网页数据进行渲染，在所述网页中显示各所述待控制终端的帧显示画面。

控制终端的浏览器在选择外待控制终端后，可以依据服务器发送的网页数据进行网页跳转或刷新等，基于该网页数据重新对网页进行渲染，从而在网页中能够显示各个待控制终端的帧显示画面，使得通过网页即可看到各待控制图像屏幕上显示的内容。

步骤210，从所述网页中选择任一个待控制终端，在选择的待控制终端的显示画面上进行操作。

步骤212，依据所述操作生成操作指令。

从网页中选出待控制终端到网页初始显示待控制终端的显示画面的过程中，还没有确定主控机和跟随机。此后，用户可以基于网页实现对待控制终端的控制，因此，首先从网页中选取任意一个待控制终端，在该待控制终端的显示画面上进行操作，例如执行点击该待控制终端的显示画面上的某个按钮的操作，又如执行在该待控制终端的显示画面上滑动的操作等，以使待控制终端接收到目标操作时间后执行相应的点击、滑动等事件完成终端的控制。基于网页上的操作生成相应的操作指令。

步骤214，将相应的操作指令发送给服务器。

将操作指令发送给服务器，服务器基于该操作指令确定用户在网页上选中的待控制终端配置为主控机，其他待控制终端配置为跟随机。然后将操作指令为分别与主控机和各待控制终端匹配的目的操作事件，将相应的操作事件转发给主控机和各待控制终端，使得主控机和各待控制终端执行该目的操作事件对应的操作，如打开微信的朋友圈。主控机和各待控制终端执行操作的过程中将各自屏幕的各帧显示画面给服务器，该显示画面包括主控机或待控制终端执行操作对应操作界面，服务器依据该显示画面对控制终端的网页中显示的显示画面进行更新，即将更新的显示画面反馈给浏览器。

步骤216，对网页中的显示画面进行更新，显示所述主控机和跟随机执行相同操作对应的操作界面。

依据服务器反馈的主控机和跟随机执行相同操作对应得到的操作界面，对网页当前所显示主控机和跟随机的显示画面进行更新，从而在网页中显示主控机和跟随机依据目的操作时间执行相同操作对应的各帧操作界面。从而控制主控机和跟随机执行相同的操作，并将操作执行过程和结果的屏幕显示画面显示在网页中供用户观看。可以同时操作多个移动终端防止造成资源的浪费，且一次查看多个移动终端的显示内容，节省操作时间。

上述通过第三方的控制终端在网页上实现对多个移动终端的控制和查看，具体可以应用于多种场景中。

本申请的一种示例场景如图3所示，移动终端均不在用户本地即都位于远程。用户在网页中选择远程的移动终端为待控制终端后，选定的待控制终端的屏幕能够在网页的页面里逐一显示，如图3所示，选定6个待控制终端，则网页上可以同时展示6个待控制终端屏幕的显示画面。然后在网页中操作任意一台待控制终端，服务器会将操作的待控制终端配置为主控机(Leader)，将其他待控制终端配置为跟随机(Follower)。将网页中操作生成操作指定发送给服务器，服务器将该操作指令转化成目的操作事件转发给Leader和Follower，则Leader和Follower会执行同一目的操作事件对应的操作，并逐帧获取自身屏幕的显示画面通过服务器反馈的控制终端上的网页，相应，网页中会依据操作显示即Leader和Follower执行该操作对应的显示画面。

本申请的另一种示例场景如图4所示，用户使用控制终端，移动终端均位于控制终端的本地，控制终端连接多个移动终端，控制终端本地浏览器打开网页后，选择已经连接的移动终端作为待控制终端，相应各待控制终端的屏幕的显示画面能够在该网页的页面里逐一显示，如图3所示，选定6个待控制终端，则网页上可以同时展示6个待控制终端屏幕的显示画面。然后在网页中操作任意一台待控制终端，服务器会将操作的待控制终端配置为主控机(Leader)，将其他待控制终端配置为跟随机(Follower)。将网页中操作生成操作指定发送给服务器，服务器将该操作指令转化成目的操作事件转发给Leader和Follower，则Leader和Follower会执行同一目的操作事件对应的操作，并逐帧获取自身屏幕的显示画面通过服务器反馈的控制终端上的网页，相应，网页中会依据操作显示即Leader和Follower执行该操作对应的显示画面。

上述各示例中，用户在网页中对待控制终端进行控制，依据用户的控制确定Leader和Follower，因此Leader和Follower可以随时切换，例如用户原本操作一台待控制设备为Leader，后续检测到操作指令为操作网页中的另一台待控制设备，则服务器可以重新将后选定的待控制设备配置为Leader，而之前的Leader更新为Follower。

通过第三方的控制终端在网页上实现对多个移动终端的控制和查看时，待控制终端可以部署在控制终端的本地，也可以部署在控制终端的远程，操作均由网页生成操作指令，通过服务器转化为Leader和Follower能够识别的目的操作事件进行分发，注入到相应的Leader和Follower。

实施例二

本实施例由主控机直接执行操作对应事件，以通过服务器实现事件分发以控制各跟随机为主进行论述，其中，移动终端可以位于控制终端的本地，也可以位于远程。

参照图5，示出了本申请的第二种多终端控制方法实施例的步骤流程图，具体可以包括如下步骤：

步骤502，在移动终端的网页中显示所述移动终端的显示画面，和选择的待控制终端的显示画面。

用户可以直接操作本地的一台移动终端实现多终端控制。先在控制终端中打开网页确定要控制的移动终端，即待控制终端。则服务器接收到该移动终端的请求后会将该移动终端配置为主控机Leader，选择的待控制终端设置为跟随机Follower。服务器从Leader和Follower中获取各自的显示画面反馈给网页。主控机渲染网页后，即可在网页中显示Leader和Follower的显示画面，即Leader和Follower屏幕显示的内容，从而用户在Leader开启的网页中可以直接看到Leader和Follower的显示画面，还可以采用该网页对Follower进行控制。

步骤504，捕获所述主控机上的源操作事件。

用户可以直接操作Leader，使得各Follower跟随Leader执行相同的操作。由于还需要通过网页显示Leader和Follower的显示画面，因此该网页可以在移动终端中以浮层等形式呈现，避免影响Leader上的操作。用户在Leader上执行操作对应捕获Leader上的点击、滑屏、按键等源操作事件。

步骤506，将所述源操作事件发送给所述服务器，以通过所述服务器将所述源操作事件转化的目的操作事件转发给各跟随机来执行相同的操作。

将源操作事件发送给服务器，服务器在接收到源操作事件后，可以将源操作事件转化为目的操作事件，即需要在Follower上执行的操作事件，例如打开某一指定应用程序，又如启动指定应用程序中某一功能等。然后将目的操作事件分别转发给每个Follower，使得Follower依据该目的操作事件，执行与Leader相同的操作，显示该操作对应的操作界面。

步骤508，在所述网页中对所述显示画面进行更新，显示所述主控机和跟随机执行相同操作对应的操作界面。

Leader和Follower执行相同的操作，同时会将操作执行过程中以及执行完毕后屏幕上显示的操作界面发送给服务器，服务器接收到该操作界面后更新网页中Leader和Follower的显示画面，从而在控制终端的网页上可以显示出Leader和Follower执行相同操作的操作界面，从而同时控制多个移动终端，不会出现一个移动终端使用，其他移动终端均闲置而造成资源浪费的问题，更加合理的使用移动终端。

例如，Leader和Follower均开启微信的朋友圈，从而可以在网页中同时查看Leader和Follower的朋友圈，当Leader和Follower采用不同账号登录微信时，就可以在一个网页中同时查看多个账号的朋友群中消息，使用非常方便，也同时查看各种消息，节省时间。

上述主控机可以直接开启网页显示其他跟随机的操作界面，其中，主控机的屏幕尺寸通常有一定的限制，因此上述方案可以在采用平板电脑等屏幕尺寸较大的移动终端作为主控机时实施。而对于屏幕较小的主控机，机壳采用上述实施例一部分所描述的：在控制终端的网页上选择待控制终端，以及显示待控制终端(主控机和跟随机)上的显示画面，而直接操作主控机捕获源操作事件反馈给服务器，服务器此时对于显示画面的更新直接反馈给控制终端的网页，从而便于用户查看。

综上，主控机和服务器交互确定跟随机，主控机通过服务器将操作事件发给跟随机，从而使主控机和跟随机执行相同操作，各自显示执行相同操作对应的操作界面，在网页上对主控机和跟随机执行相同操作对应的操作界面进行显示，从而通过网页基于服务器实现对主控机和跟随机的共同控制，防止资源浪费，并在网页上查看主控机和跟随机的显示画面，节省时间提高操作效率。

参照图6，示出了本申请的第二种多终端控制方法优选实施例的步骤流程图，具体可以包括如下步骤：

步骤602，在移动终端中打开网页，在网页中显示服务器反馈的至少一个指定用户注册的其他移动终端。

步骤604，从注册的其他移动终端选择待控制终端，将选择的各待控制终端发送给服务器以使所述服务器执行所述主控机和跟随机的配置。

用户要对多个移动终端同时进行控制，可以在多终端控制系统的服务器中注册各个移动终端，使得服务器能够获知移动终端的名称、标识、MAC地址，IP地址等各种信息，从而能够实现与移动终端进行消息交互，能够从移动终端获取显示画面等消息，也可以转发目的操作事件给移动终端。

用户使用本地的移动终端即Leader，可以向服务器请求至少一个指定用户注册的移动终端，该指定用户包括所述移动终端对应使用用户，和/或，指定用户的关联用户，如建立好友、从属等关系的注册用户。服务器基于其你去反馈网页数据后，本地浏览器对网页数据进行渲染显示相应的网页，在该网页中显示该用户注册的各个移动终端。然后在网页中选择注册的移动终端作为待控制终端即Follower。将对待控制终端的选取消息发送给服务器，服务器基于该选取消息确定选择的待控制终端。然后服务器会将该移动终端配置为Leader，将选择的待控制终端配置为Follower。

步骤606，与局域网中其他移动终端建立连接，将局域网中其他移动终端设置为跟随机。

本申请一个优选实施例中，与Leader部署在同一个局域网内的移动终端，还可以通过局域网直接连接、控制，而不必通过服务器转发控制。Leader可以获取个局域网内的移动终端，然后与该移动终端建立连接，将给移动终端配置为自身的Follower，具体配置方式在实施例三中详细描述。

步骤608，将所述主控机的帧显示画面发送给服务器。

对于通过服务器转发控制的Follower，服务器可以告知各Follower需要被控制的事件，各Follower获知需要被控制后，将自身屏幕上的显示画面以帧为单位获取并输出，将各帧显示画面传送给服务器，相应的Leader也会将屏幕上的显示画面以帧为单位发送给服务器，服务器基于Leader和Follower显示画面生成网页数据发送给控制终端。因此，网页数据包括Leader的帧显示画面和Follower的帧显示画面，所述帧显示画面是所述服务器从各所述待控制终端中获取后转发的。

步骤610，接收网页数据。

步骤612，对所述网页数据进行渲染，在所述网页中显示各所述移动终端的显示画面，和选择的待控制终端的帧显示画面。

Leader的浏览器依据服务器发送的网页数据进行网页跳转或刷新等，基于该网页数据重新对网页进行渲染，从而在网页中能够显示Leader和Follower的帧显示画面，使得通过网页即可看到Leader和Follower屏幕上显示的内容。

步骤614，捕获所述主控机上的源操作事件。

步骤616，将源操作事件发送给所述服务器和局域网内的跟随机。

完成Leader和Follower的配置后，可以直接操作Leader，相应捕获Leader上的源操作事件。在具有通过服务器转发控制的Follower时，将源操作事件发送给服务器，以由服务器将源操作事件转化的目的操作事件转发给Follower。在具有局域网连接的Follower时，通过局域网将源操作事件发送给相应的Follower，Follower自己对源操作事件进行处理得到自己能够识别的目的操作事件。

本发明一个优选实施例中，Leader将所述源操作事件存储到第一缓冲队列中；从所述第一缓冲队列中按照顺序获取源操作事件，依据所述源操作事件执行相应的操作。

Leader可以配置第一缓冲队列，采用该第一缓冲队列存储捕获的源操作事件，然后按照顺序获取源操作事件发送给服务器或局域网的Follower。相应的，也按照获取的顺序在Leader执行相应的操作。

步骤618，在所述网页中对所述显示画面进行更新，显示所述主控机和跟随机执行相同操作对应的操作界面。

Leader在执行操作过程中，将屏幕上的显示画面以帧为单位发送给服务器。服务器也会接收到Follower发送的执行操作过程的各帧显示画面，然后基于Leader和Follower发送显示画面对网页的显示画面进行更新。网页相应基于服务器的数据对显示的Leader和Follower的显示画面进行更新，显示Leader和Follower执行相同操作对应的操作界面。

通过Leader在网页上实现对多个移动终端的控制和查看，具体可以应用于多种场景中。

本申请的一种示例场景如图7所示，用户直接在本地使用Leader，在网页中选择本地的移动终端作为Follower，服务器相应会配置Leader和Follower，如选定5个Follower，则网页上可以同时展示Leader和Follower总共6个移动终端屏幕的显示画面。用户在Leader上指向的操作，会通过服务器转发给各Follower，从而Follower执行和Leader上相同的操作，对应服务器可以接收到Leader和Follower会执行同一目的操作事件对应的操作的显示画面，Leader的网页上就可以展示Leader和Follower执行相同操作对应的操作界面。

本申请的另一种示例场景如图8所示，用户直接在本地使用Leader，在网页中选择远程的移动终端作为Follower，，服务器相应会配置Leader和Follower，如选定5个Follower，则网页上可以同时展示Leader和Follower总共6个移动终端屏幕的显示画面。用户在Leader上指向的操作，会通过服务器转发给各Follower，从而Follower执行和Leader上相同的操作，对应服务器可以接收到Leader和Follower会执行同一目的操作事件对应的操作的显示画面，Leader的网页上就可以展示Leader和Follower执行相同操作对应的操作界面。

在本地通过Leader直接实现多终端控制，可以通过服务器对本地或远程的Follower进行操作事件的转发等控制，并且能够在Leader上查看Leader和Follower的画面，使用非常方便。

实施例三

本实施例由主控机直接执行操作对应事件，以基于局域网实现对跟随机的控制为主进行论述。当然，跟随机也可以位于远端通过服务器分发事件实现控制。

参照图9，示出了本申请的第三种多终端控制方法实施例的步骤流程图，具体可以包括如下步骤：

步骤902，移动终端作为主控机与局域网中选定的移动终端建立连接，以将局域网中选定的移动终端设置为跟随机。

用户可以直接操作本地的一台移动终端实现多终端控制，该移动终端即为Leader。Leader获取局域网中的移动终端，与局域网中选定的移动终端建立连接，该选定的移动终端即为Follower。

步骤904，捕获所述主控机上的源操作事件。

用户可以直接操作Leader，使得各Follower跟随Leader执行相同的操作。因此，用户在Leader上执行操作对应捕获Leader上的点击、滑屏、按键等源操作事件。

步骤906，将所述源操作事件通过局域网发送给所述跟随机，以使所述跟随机与所述主控机执行相同的操作，显示执行相同操作对应的操作界面。

Leader通过局域网将源操作事件发送给相应的Follower，Follower自己对源操作事件进行处理得到自己能够识别的目的操作事件。然后Follower基于目的操作事件与Leader执行相同的操作，显示执行相同操作对应的操作界面。由于局域网连接的Follower位于Leader本地，用户可以直接查看Follower的屏幕，因此可以不将Follower的显示画面传送给Leader，因此无需服务器生成相应的网页给用户查看，节省了网络资源和Leader的资源。

通过Leader通过局域网对Leader进行控制的一种示例如图10所示。

用户直接在本地使用Leader，通过WLAN(Wireless Local Area Networks，无线局域网)连接本地的6个Follower。在Leader中捕获的源操作事件会分别通过WLAN发送给各个Follower，从而Follower执行与Leader相同的操作，显示该相同操作对应的操作界面。通过WLAN控制的Follower位于本地，用户可以直接查看屏幕。

用户在本地可以控制局域网内的Follower时，若远程也具有移动终端可以作为Follower，也可以通过服务器进行控制，即Leader可以同时对本地和远程的Follower进行控制，具体过程如下：

参照图11，示出了本申请的第三种多终端控制方法优选实施例的步骤流程图，具体可以包括如下步骤：

步骤1102，移动终端作为主控机获取局域网的设备列表。

步骤1104，从所述设备列表中选择的移动终端，与选定的移动终端建立连接。

步骤1106，将所述主控机的地址配置信息发送给选定的移动终端，以使所述选定的移动终端依据所述地址配置信息建立与所述主控机的跟随连接。

用户可以直接操作本地的一台移动终端实现多终端控制，该移动终端即为Leader。Leader获取局域网的设备列表，该设备列表中存储有局域网中连接的各个移动终端，从设备列表中选择的移动终端，与选定的移动终端建立连接。然后Leader将自身的地址配置信息发送给选定的移动终端，如地址配置信息为Leader网络地址相关数据，如IP地址，选定的移动终端在自己的终端内设置该地址配置信息，如在Leader和选定的移动终端内均运行有多终端控制的脚本，可以基于该脚本进行地址配置信息的配置，从而将自己配置为Leader的Follower，使得Leader和Follower建立跟随连接。所谓跟随连接即Leader可以将自己的操作注入到Follower执行相同的操作。

步骤1108，所述主控机中打开网页，在网页中显示服务器反馈的至少一个指定用户注册的其他移动终端。

步骤1111，从注册的其他移动终端选择待控制终端，将选择的待控制终端发送给服务器，以使所述服务器将所述待控制终端配置为跟随机。

步骤1112，在所述网页中显示所述主控机的显示画面，和所述跟随机显示画面。

若远侧也存在移动终端可以进行控制，Leader也可以基于网页通过服务器设置跟随机，具体过程与上述实施例二基本一致，因此不在赘述。

步骤1114，捕获所述主控机上的源操作事件。

步骤1116，将所述源操作事件通过局域网发送给所述跟随机，以及发送给所述服务器。

完成Leader和Follower的配置后，可以直接操作Leader，相应捕获Leader上的点击、滑屏、按键等源操作事件。在具有通过服务器转发控制的Follower时，将源操作事件发送给服务器，以由服务器将源操作事件转化的目的操作事件转发给Follower。在具有局域网连接的Follower时，通过局域网将源操作事件发送给相应的Follower，Follower自己对源操作事件进行处理得到自己能够识别的目的操作事件。

本发明一个优选实施例中，Leader将所述源操作事件存储到第一缓冲队列中；从所述第一缓冲队列中按照顺序获取源操作事件，依据所述源操作事件执行相应的操作。Leader可以配置第一缓冲队列，采用该第一缓冲队列存储捕获的源操作事件，然后按照顺序获取源操作事件发送给服务器或局域网的Follower。相应的，也按照获取的顺序在Leader执行相应的操作。

针对局域网连接的Follower，Follower自己对源操作事件进行处理得到自己能够识别的目的操作事件。然后Follower基于目的操作事件与Leader执行相同的操作，显示执行相同操作对应的操作界面。由于局域网连接的Follower位于Leader本地，用户可以直接查看Follower的屏幕，因此可以不将Follower的显示画面传送给Leader，因此无需服务器生成相应的网页给用户查看。

步骤1118，在所述网页中对所述显示画面进行更新，显示所述主控机和跟随机执行相同操作对应的操作界面。

Leader在执行操作过程中，将屏幕上的显示画面以帧为单位发送给服务器。针对服务器转发控制的Follower，服务器也会接收到Follower发送的执行操作过程的各帧显示画面，然后基于Leader和Follower发送显示画面对网页的显示画面进行更新。网页相应基于服务器的数据对显示的Leader和Follower的显示画面进行更新，显示Leader和Follower执行相同操作对应的操作界面。

通过Leader通过局域网对Follower进行控制，以及通过服务器转发控制Follower的一种示例如图12所示。

用户直接在本地使用Leader，通过WLAN(Wireless Local Area Networks，无线局域网)连接本地的3个Follower，通过服务器连接远程的3个Follower。在Leader中捕获的源操作事件会分别通过WLAN和服务器发送给各个Follower，从而Follower执行与Leader相同的操作，显示该相同操作对应的操作界面。通过WLAN控制的Follower位于本地，用户可以直接查看屏幕，而通过服务器连接的远程Follower无法直接查看屏幕，因此可以在Leader开启的网页中远程Follower的显示画面。

在本地通过Leader直接实现多终端控制，可以直接通过局域网设置Follower并进行控制，直接查看Follower的屏幕，操作简单、节省资源。

实施例四

本实施例描述在多终端控制中，服务器侧的操作步骤。

参照图13，示出了本申请的一种多终端控制方法中服务器侧实施例的步骤流程图，具体可以包括如下步骤：

步骤1302，服务器依据网页的反馈确定选择的待控制终端，其中，所述待控制终端包括主控机和/或跟随机。

对于通过服务器转发控制的方式，用户可以在控制终端中请求网页进行Leader和Follower的配置，也可以在主控机Leader上请求网页进行Leader和Follower的配置，服务器反馈相应的网页数据后，控制终端或Leader可以在该网页中选择待控制终端反馈给服务器。

当控制终端内开启的网页反馈待控制终端后，服务器可以配置上述待控制终端，告知其将要被控制的消息，但是还未确定Leader和Follower。当由作为Leader的移动终端开启的网页反馈待控制终端时，服务器将该移动终端配置为Leader，将选择的待控制终端配置为Follower。

步骤1304，接收所述待控制终端发送的显示画面，将所述显示画面反馈给所述网页。

待控制终端获知要进行控制的消息后，可以获取自身屏幕上的显示画面，将显示画面发送给服务器，服务器对该显示画面处理，反馈给相应的网页，使得开启网页的控制终端或Leader能够显示每个待控制终端的显示画面。

当然，对于Leader直接与服务器交互选择Follower的方式中，Leader也会将自身屏幕的显示画面发送给服务器，从而网页中既会显示Follower的显示画面，也会显示Leader的显示画面。

步骤1306，接收操作数据，依据所述操作数据确定目的操作事件，其中，所述操作数据包括操作指令或源操作事件。

控制终端在网页上选择待控制终端进行操作生成操作指令，将操作指令作为操作数据发送给服务器。或Leader捕获自身上的源操作事件作为操作数据发送给服务器。因此所述操作数据包括操作指令或源操作事件，服务器在接收到操作数据后，基于操作指令或源操作事件进行转化，得到目的操作事件。

步骤1308，将所述目的操作事件发送给所述跟随机，以使所述主控机和跟随机中执行相同的操作。

对于控制终端执行控制的方式中，服务器将操作指令转化为分别与Leader、Follower匹配的目的操作事件，然后将目的操作事件发送给Leader、Follower，从而Leader、Follower执行相同的操作，各自的屏幕上也会显示执行相同对应的操作界面。

对于Leader执行控制的方式中，服务器将源操作事件转化为与Follower匹配的目的操作事件，然后将目的操作事件发送给Follower，从而Leader、Follower执行相同的操作，各自的屏幕上也会显示执行相同对应的操作界面。

步骤1310，接收所述主控机和跟随机反馈更新的显示画面，其中，所述更新的显示画面为所述主控机和跟随机执行相同操作对应的操作页面。

步骤1312，将更新的显示画面反馈给所述网页，以使所述网页显示所述主控机和跟随机执行相同操作对应的操作页面。

无论采用控制终端还是Leader执行控制，Leader和Follower都会将各自屏幕上的显示画面以帧为单位发送给服务器，服务器对应接收Leader和Follower的显示画面，然后对控制终端或Leader开启的网页中的显示画面进行更新，从而在网页中可以看到Leader和Follower执行相同操作对应的操作页面。

在上述过程中，对于在控制终端中启动网页，且在Leader上直接操作的技术方案，服务器对于待控制终端的确定，Leader和Follower上显示画面的转发均是与控制终端的网页交互，而源操作事件是直接在Leader上接收的。即操作是与Leader交互，而网页位于控制终端上。

通过服务器使得采用第三方的控制终端和Leader均可以实现多终端控制，且Leader和Follower会直接显示在网页上供用户观看。

参照图14，示出了本申请的另一种多终端控制方法中服务器侧实施例的步骤流程图，具体可以包括如下步骤：

步骤1402，依据网页请求反馈网页数据。

步骤1404，基于待控制终端的选择消息。

用户通过控制终端或Leader上的浏览器发送网页请求后，服务器可以反馈相应的网页数据，控制终端或Leader基于网页数据开启网页，显示该用户注册的各个移动终端。然后选择注册的移动终端反馈给服务器。服务器相应接收到对待控制终端的选择消息。

当为控制终端执行控制时，执行步骤1406；当为Leader执行控制时，执行步骤1420。

步骤1406，依据选择消息确定选择的待控制终端。

步骤1408，接收各待控制终端反馈的显示画面。

步骤1410，依据各待控制终端的显示画面生成网页数据反馈给控制终端的网页进行显示，以在控制终端上显示各待控制终端的显示画面。

步骤1412，接收控制终端反馈的操作指令。

步骤1414，依据操作指令确定Leader和Follower。

步骤1416，依据Leader和Follower的终端信息对所述操作指令进行转化，生成与Leader或Follower匹配的目的操作事件。

步骤1418，将所述目的操作事件分别分发给Leader和Follower。

控制终端执行控制时，服务器接收控制终端反馈的选择消息，基于该选择消息确定用户选择的待控制终端，然后给各待控制终端发送需要控制的消息，各个待控制终端会将屏幕上的显示画面发送给服务器。服务器生成包含所有待控制终端的显示画面的网页数据发送给控制终端，从而控制终端的网页上能够显示所有待控制终端的显示画面。

从网页中选取任意一个待控制终端，在该待控制终端的显示画面上进行操作，例如执行点击该待控制终端的显示画面上的某个按钮的操作，又如执行在该待控制终端的显示画面上滑动的操作等，以使待控制终端接收到目标操作时间后执行相应的点击、滑动等事件完成终端的控制。基于网页上的操作生成相应的操作指令。控制终端将操作指令发送给服务器，服务器基于该操作指令确定用户在网页上选中的待控制终端配置为主控机Leader，其他待控制终端配置为跟随机Follower。

然后服务器获取数据库中存储的Leader和Follower的终端信息，如屏幕大小、分辨率、事件设备、操作系统等，依据该终端信息对所述操作指令进行转化，分别生成与Leader匹配的目的操作事件，以及与Follower匹配的目的操作事件。然后将所述目的操作事件分别分发给Leader和Follower，使得Leader和Follower基于相同的操作事件执行相同的操作，显示该相同操作对应操作界面。

步骤1420，依据选择消息将选择的待控制终端配置为Follower，将发送选择消息的移动终端配置为Leader。

步骤1422，接收Leader和Follower反馈的显示画面。

步骤1424，依据显示画面生成网页数据反馈给Leader的网页进行显示，以在Leader上显示Leader和Follower的显示画面。

步骤1426，接收Leader反馈的源操作事件。

步骤1428，依据Follower的终端信息对所述操作指令进行转化，生成与Follower匹配的目的操作事件。

步骤1430，将所述目的操作事件分别分发给Follower。

Leader执行控制，用户使用的移动终端作为Leader，服务器接收移动终端反馈的选择消息，将选择的待控制终端配置为Follower，将发送选择消息的移动终端配置为Leader。服务器通知各个Follower需要控制的消息。Leader和Follower会将各自屏幕的显示画面发送给服务器。服务器将Leader和Follower的显示画面生成页面数据反馈给Leader，从而Leader的网页上能够显示Leader和Follower的显示画面。

Leader完成Follower的配置后，可以直接操作Leader，相应捕获Leader上的源操作事件，将源操作事件发送给服务器。服务器获取数据库中存储的Follower的终端信息，如屏幕大小、分辨率、事件设备、操作系统等，依据该终端信息对所述操作指令进行转化，分别生成与Follower匹配的目的操作事件。然后将所述目的操作事件分别分发给各Follower，使得Leader和Follower基于相同的操作事件执行相同的操作，显示该相同操作对应操作界面。

本申请一个优选实施例中，将所述操作数据存储到第二缓冲队列中；从所述第二缓冲队列中按照顺序获取操作数据。服务器中还配置有第二缓冲队列，采用该第二缓冲队列用户对操作数据进行存储保证操作的执行顺序，从而服务器在获取操作数据后先存储到第二缓冲队列中，然后从所述第二缓冲队列中按照顺序获取操作数据，再将操作数据的转化为相应的目的操作事件进行分发，从而通过第二缓冲队列保证目的操作事件的有序转发。

步骤1432，接收Leader和Follower更新的显示画面，所述更新的显示画面包括Leader和Follower各自执行相同操作对应的操作页面。

步骤1434，将更新的显示画面反馈给对应网页以进行显示画面的更新。

Leader和Follower依据操作事件执行相同的操作，并显示该相同操作对应的操作界面，将Leader在执行操作过程中，将屏幕上的显示画面以帧为单位发送给服务器。服务器也会接收到Follower发送的执行操作过程的各帧显示画面，然后基于Leader和Follower发送显示画面对网页的显示画面进行更新。网页相应基于服务器的数据对显示的Leader和Follower的显示画面进行更新，显示Leader和Follower执行相同操作对应的操作界面。

本申请实施例中，Leader和Follower支持各种品牌、多款的移动终端，服务器会执行移动终端的管理，从而处理目的操作事件时根据移动终端的属性即终端信息进行动态匹配，给转发前会依据属性如屏幕大小、分辨率、事件设备等进行匹配确定目的操作事件再转发。

实施例五

本实施例描述在多终端控制中，Follower侧的操作步骤。

参照图15，示出了本申请的一种多终端控制方法中Follower侧实施例的步骤流程图，具体可以包括如下步骤：

步骤1502，跟随机接收操作事件，其中，所述操作事件包括源操作事件或目的操作事件。

步骤1504，依据所述操作事件执行与主控机相同的操作，显示与所述主控机执行相同操作对应的操作界面。

控制终端或Leader可以通过网页告知服务器所选择的Follower，从而由服务器通过该移动终端为Follower。或者Leader直接将局域网中的移动终端配置为Follower。移动终端获知自身为Follower之后，可以接收操作事件，该操作事件包括服务器转化后分发的目的操作事件，或者Leader通过局域网发送的源操作事件。

若为目的操作事件，则Follower执行该目的操作事件对应的操作，该操作为与Leader相同的操作，从而Follower的屏幕上会显示和Leader执行相同操作对应的操作界面。若为源操作事件，则Follower会将源操作事件转化为自身能够识别，即与该Follower匹配的目的操作事件，然后执行该目的操作事件对应的操作，该操作为与Leader相同的操作，从而Follower的屏幕上会显示和Leader执行相同操作对应的操作界面。

可见Follower由多种配置方式，不同配置方式对应控制过程也存在区别，例如，一个示例中Follower由服务器配置，另一个示例中Follower由Leader基于局域网进行配置。

1、服务器配置Follower

参照图16，示出了本申请的多终端控制方法中Follower侧的第一种优选实施例的步骤流程图，具体可以包括如下步骤：

步骤1602，Follower接收服务器告知需要控制的消息。

步骤1604，Follower获取本机的帧显示画面，将所述显示画面发送给服务器。

步骤1606，接收服务器发送的目的操作事件。

步骤1608，执行所述目的操作事件执行与Leader相同的操作对应的操作，并显示与Leader执行相同操作对应的显示界面。

步骤1610，获取各与Leader执行相同操作对应的显示界面对应各帧显示画面，将显示画面发送给服务器进行更新。

服务器确定待控制终端是会通知相应的待控制终端，待控制终端包括Follower，即Follower接收服务器告知需要控制的消息。Follower会逐帧获取本机的显示画面，将所述显示画面发送给服务器。使得服务器可以在网页中添加该Follower的显示画面。

Follower接收服务器发送的目的操作事件，执行所述目的操作事件执行与Leader相同的操作对应的操作，并显示与Leader执行相同操作对应的显示界面，该过程中获取各与Leader执行相同操作对应的显示界面对应各帧显示画面，将显示画面发送给服务器进行更新。

2、局域网配置Follower

参照图17，示出了本申请的多终端控制方法中Follower侧的第二种优选实施例的步骤流程图，具体可以包括如下步骤：

步骤1702，Follower接收所述Leader发送的地址配置信息。

步骤1704，将所述地址配置信息设置为跟随地址，与所述Leader建立跟随连接。

步骤1706，接收所述主控机发送的源操作事件。

步骤1708，按照所述跟随机的终端信息对源操作事件进行转化，生成与所述跟随机匹配的目的操作事件。

步骤1710，执行所述目的操作事件执行与Leader相同的操作对应的操作，并显示与Leader执行相同操作对应的显示界面。

Leader通过局域网直接配置Follower时，Follower可以直接接收所述Leader发送的地址配置信息，将所述地址配置信息设置为跟随地址，与所述Leader建立跟随连接。例如，Follower内均运行有多终端控制的脚本，可以基于该脚本进行地址配置信息的配置，将所述地址配置信息设置为跟随地址，从而将自己配置为Leader的Follower，使得Leader和Follower建立跟随连接。所谓跟随连接即Leader可以将自己的操作注入到Follower执行相同的操作。

Follower接收所述主控机发送的源操作事件，按照自己的终端信息对源操作事件进行转化，生成与自己的终端属性匹配的目的操作事件。然后执行所述目的操作事件执行与Leader相同的操作对应的操作，并显示与Leader执行相同操作对应的显示界面。此时，Follower位于Leader的本地，即用户可以直接观看到Follower屏幕上显示的操作界面，因此可以不传输给Leader。当然，也可以将自身的显示界面发送给Leader，本申请实施例对此不做限定。

本实施例中，将所述操作事件存储到第三缓冲队列中；从所述第三缓冲队列中按照顺序获取操作事件。

Follower上配置有第三缓冲队列，在获取到操作事件之后可以将操作事件存储到第三缓冲队列中，从所述第三缓冲队列中按照顺序获取操作事件，防止操作事件执行顺序错乱。

基于上述各实施例可见，本申请实施例在移动终端和服务器中均配置有缓冲队列，其中移动终端作为Leader配置有第一缓冲队列，移动终端作为Follower配置有第三缓冲队列，服务器配置有第二缓冲队列。即本申请实施例采用了双缓冲消息队列，Leader和Follower均配置有缓冲队列来管理事件队列，服务器也配置有缓冲队列来保证事件有序转发，从而在捕获Leader的操作事件并远程注入到Follower上时，能够保证操作事件数据完整性和一致性。

实施例六

在上述各实施例的基础上，本实施例结合各端整体论述多终端控制方法。

1、控制终端的控制

参照图18，示出了本申请实施例中基于控制终端的多终端控制方法交互示意图，具体可以包括如下步骤：

1802，控制终端在网页中选择待控制终端，发送给服务器。

1804，服务器确定待控制终端。

1806，通知待控制终端需要控制的消息。

1808，待控制终端反馈自身的显示画面给服务器。

1810，服务器基于显示画面生成页面数据发送给控制终端。

1812，控制终端的网页显示各待控制终端的显示画面。

1814，控制终端在网页上的操作生成操作指令发送给服务器。

1816，服务器基于操作指令确定Leader和Follower。

1818，服务器将操作指令转化为目的操作事件，发送给Leader和Follower。

1820，Leader和Follower执行目的操作事件对应操作，显示执行相同操作对应的操作界面。

1822，Leader和Follower执行操作过程中，获取屏幕上显示执行相同操作对应操作界面的显示画面发送给服务器。

1824，服务器采用Leader和Follower执行相同操作对应操作界面生成更新的显示画面，发送给控制终端。

1826，控制终端对网页的显示画面进行更新。

2、Leader的控制

Leader的控制包括基于局域网和基于服务器两个控制方式，结合上述两种方法论述控制过程。

参照图19，示出了本申请实施例中基于Leader的多终端控制方法交互示意图，具体可以包括如下步骤：

1902，Leader选择局域网中移动终端(即Follower1)发送地址配置信息。

1904，移动终端作为Leader通过网页告知服务器选择的Follower2。

1906，Follower1将地址配置信息配置为跟随地址。

1908，服务器确定Follower并通知Follower2。

1910，服务器接收Leader和Follower2反馈自身的显示画面。

1912、服务器基于显示画面生成页面数据发送给Leader。

1914，Leader的网页显示Leader和Follower2的显示画面。

1916，Leader捕获源操作事件发送给服务器和Follower1。

1918，服务器将源操作事件转化为目的操作事件，发送给Follower2。

1920，Follower1将源操作事件转化为目的操作事件。

1922，Leader、Follower1和Follower2执行目的操作事件对应操作，显示执行相同操作对应的操作界面。

1924，服务器接收Leader和Follower2在执行操作过程中逐帧获取的执行相同操作对应操作界面。

1926，服务器采用Leader和Follower2执行相同操作对应操作界面生成更新的显示画面，发送给控制终端。

1928，Leader对网页的显示画面进行更新。

本发明实施例实现了远程操作多个移动终端，并实现对各个移动终端上操作的可视化。同样的操作在多个移动终端(Leader和Follower)上同时进行，节省了操作时间，并且通过网页显示并监控Leader和Follower屏幕的变化。

本申请上述实施例的各多终端控制方法可以应用于上述多种应用场景中，且上述应用场景也可以在多种不同的应用领域使用，如用户使用的应用领域，测试领域等。在测试领域中，多终端控制系统可以作为测试的基础平台，测试人员在PC机等控制终端中对Leader和Follower上安装的应用进行测试，且Leader和Follower可以由系统提供，从而降低测试方的成本。例如对于新开发应用程序的测试中，系统提供的Leader和Follower可以包括各种操作系统，各种设备型号等，通过PC机上发送操作指令，可以同时控制Leader和Follower执行操作并观察操作界面，从而确定应用在各终端中的使用情况，提高测试效率的同时降低测试成本。

Leader和Follower的屏幕输出可以采用BufferQueue技术，获取Leader和Follower屏幕信息及变化。并且本申请实施例自定义了通信协议和消息双缓冲机制，保证操作事件传输的实时性、连续性和准确性。

需要说明的是，对于方法实施例，为了简单描述，故将其都表述为一系列的动作组合，但是本领域技术人员应该知悉，本申请实施例并不受所描述的动作顺序的限制，因为依据本申请实施例，某些步骤可以采用其他顺序或者同时进行。其次，本领域技术人员也应该知悉，说明书中所描述的实施例均属于优选实施例，所涉及的动作并不一定是本申请实施例所必须的。

实施例七

在上述实施例的基础上，本实施例还公开了一种控制终端。

参照图20，示出了本申请一种控制终端实施例的结构框图，具体可以包括如下模块：

网页显示模块2002，用于在网页中显示选择的各待控制终端的显示画面；以及在所述网页中对所述显示画面进行更新，显示所述主控机和跟随机执行相同操作对应的操作界面。

指令生成模块2004，用于在所述网页中选择一个待控制终端进行操作生成相应的操作指令。

指令发送模块2006，用于将所述操作指令发送给服务器，以通过所述服务器将所述操作指令转化为目的操作事件转发给主控机和跟随机来执行相同的操作，其中，所述服务器依据所述操作指令将选择的待控制终端设置为主控机，将除主控机之外的待控制终端设置为跟随机。

其中，所述网页显示模块2002，用于接收网页数据，其中，所述网页数据包括选择的各待控制终端的帧显示画面，所述帧显示画面是所述服务器从各所述待控制终端中获取后转发的；对所述网页数据进行渲染，在所述网页中显示各所述待控制终端的帧显示画面。

所述指令生成模块2004，用于从所述网页中选择任一个待控制终端，在选择的待控制终端的显示画面上进行操作；依据所述操作生成操作指令。

所述网页显示模块2002，还用于在网页中显示服务器反馈的至少一个指定用户注册的各移动终端；从注册的各移动终端选择至少两个待控制终端，将选择的各待控制终端发送给所述服务器，以使所述服务器执行所述主控机和跟随机的配置。

综上，服务器控制终端的反馈确定主控机和跟随机，控制终端在网页上生成控制指令，基于控制指令生成主控机和跟随机对应的目的操作事件，从而使主控机和跟随机执行相同操作，各自显示执行相同操作对应的操作界面，在网页上对主控机和跟随机执行相同操作对应的操作界面进行显示，从而通过网页基于服务器实现对主控机和跟随机的共同控制，防止资源浪费，并在网页上查看主控机和跟随机的显示画面，节省时间提高操作效率。

通过第三方的控制终端在网页上实现对多个移动终端的控制和查看时，待控制终端可以部署在控制终端的本地，也可以部署在控制终端的远程，操作均由网页生成操作指令，通过服务器转化为Leader和Follower能够识别的目的操作事件进行分发，注入到相应的Leader和Follower。

实施例八

在上述实施例的基础上，本实施例还公开了一种主控机。

参照图21A，示出了本申请第一种主控机实施例的结构框图，具体可以包括如下模块：

第一显示模块2102，用于在移动终端的网页中显示所述移动终端的显示画面，和选择的待控制终端的显示画面，其中，所述移动终端被服务器设置为主控机，所述选择的待控制终端被服务器设置为跟随机；以及，在所述网页中对所述显示画面进行更新，显示所述主控机和跟随机执行相同操作对应的操作界面。

第一捕获模块2104，用于捕获所述主控机上的源操作事件。

第一发送模块2106，用于将所述源操作事件发送给所述服务器，以通过所述服务器将所述源操作事件转化的目的操作事件转发给各跟随机来执行相同的操作。

综上，主控机和服务器交互确定跟随机，主控机通过服务器将操作事件发给跟随机，从而使主控机和跟随机执行相同操作，各自显示执行相同操作对应的操作界面，在网页上对主控机和跟随机执行相同操作对应的操作界面进行显示，从而通过网页基于服务器实现对主控机和跟随机的共同控制，防止资源浪费，并在网页上查看主控机和跟随机的显示画面，节省时间提高操作效率。

参照图21B，示出了本申请第一种主控机优选实施例的结构框图，具体可以包括如下模块：

第一显示模块2102，用于在移动终端的网页中显示所述移动终端的显示画面，和选择的待控制终端的显示画面，其中，所述移动终端被服务器设置为主控机，所述选择的待控制终端被服务器设置为跟随机；以及，在所述网页中对所述显示画面进行更新，显示所述主控机和跟随机执行相同操作对应的操作界面。

第一跟随机配置模块2108，用于与局域网中其他移动终端建立连接，将局域网中其他移动终端设置为跟随机。

第一捕获模块2104，用于捕获所述主控机上的源操作事件。

第一缓冲模块2110，用于所述主控机将所述源操作事件存储到第一缓冲队列中；从所述第一缓冲队列中按照顺序获取源操作事件，依据所述源操作事件执行相应的操作。

第一发送模块2106，用于将所述源操作事件发送给所述服务器，以通过所述服务器将所述源操作事件转化的目的操作事件转发给各跟随机来执行相同的操作。

第二发送模块2112，用于将所述源操作事件通过局域网发送给所述跟随机，以使所述跟随机与所述主控机执行相同的操作，显示执行相同操作对应的操作界面。

其中，第一显示模块2102，用于接收网页数据，其中，所述网页数据包括所述移动终端的帧显示画面，和选择的待控制终端的帧显示画面，所述帧显示画面是所述服务器从移动终端和待控制终端中获取后转发的；对所述网页数据进行渲染，在所述网页中显示各所述移动终端的显示画面，和选择的待控制终端的帧显示画面。

所述第一显示模块2102，还用于在移动终端中打开网页，在网页中显示服务器反馈的至少一个指定用户注册的其他移动终端；从注册的其他移动终端选择待控制终端，将选择的各待控制终端发送给服务器以使所述服务器执行所述主控机和跟随机的配置。

所述第一发送模块2106，还用于将所述主控机的帧显示画面发送给服务器，其中，所述帧显示画面包括：基于源操作事件执行操作对应的操作界面。

在本地通过Leader直接实现多终端控制，可以通过服务器对本地或远程的Follower进行操作事件的转发等控制，并且能够在Leader上查看Leader和Follower的画面，使用非常方便。

实施例九

在上述实施例的基础上，本实施例还公开了一种主控机。

参照图22A，示出了本申请第二种主控机实施例的结构框图，具体可以包括如下模块：

第二跟随机配置模块2202，用于与局域网中选定的移动终端建立连接，以将局域网中选定的移动终端设置为跟随机。

第二捕获模块2204，用于捕获所述主控机上的源操作事件。

第三发送模块2206，用于将所述源操作事件通过局域网发送给所述跟随机，以使所述跟随机与所述主控机执行相同的操作，显示执行相同操作对应的操作界面。

综上，主控机基于局域网直接配置跟随机，从而将自身的源操作事件发送给跟随机，跟随机依据该源操作事件执行与主控机相同的操作，节省资源。相应的在主控机和跟随机的屏幕即可显示执行相同操作对应的操作界面，用户可以直接通过主控机和跟随机的屏幕查看操作界面，节省操作时间并提高操作效率。

参照图22B，示出了本申请第二种主控机优选实施例的结构框图，具体可以包括如下模块：

第二跟随机配置模块2202，用于与局域网中选定的移动终端建立连接，以将局域网中选定的移动终端设置为跟随机。

第二显示模块2208，用于所述主控机中打开网页，在网页中显示服务器反馈的至少一个指定用户注册的其他移动终端；以及，在所述网页中显示所述主控机的显示画面，和所述跟随机显示画面。

第二捕获模块2204，用于捕获所述主控机上的源操作事件。

第二缓冲模块2210，用于所述主控机将所述源操作事件存储到第一缓冲队列中；从所述第一缓冲队列中按照顺序获取源操作事件，依据所述源操作事件执行相应的操作。

第三发送模块2206，用于将所述源操作事件通过局域网发送给所述跟随机，以使所述跟随机与所述主控机执行相同的操作，显示执行相同操作对应的操作界面。

第四发送模块2212，用于从注册的其他移动终端选择待控制终端，将选择的待控制终端发送给服务器，以使所述服务器将所述待控制终端配置为跟随机。

其中，第二跟随机配置模块2202，用于移动终端作为主控机获取局域网的设备列表；从所述设备列表中选择的移动终端，与选定的移动终端建立连接；将所述主控机的地址配置信息发送给选定的移动终端，以使所述选定的移动终端依据所述地址配置信息建立与所述主控机的跟随连接。

所述第四发送模块2212，还用于将所述源操作事件发送给所述服务器，以通过所述服务器将所述源操作事件转化的目的操作事件转发给各跟随机来执行相同的操作；所述第二显示模块2208，还用于在所述网页中对所述显示画面进行更新，显示所述主控机和跟随机执行相同操作对应的操作界面。

所述第四发送模块2212，还用于将所述主控机的显示画面发送给服务器，其中，所述显示画面包括：基于源操作事件执行操作对应的操作界面。

在本地通过Leader直接实现多终端控制，可以直接通过局域网设置Follower并进行控制，直接查看Follower的屏幕，操作简单、节省资源。

实施例十

在上述实施例的基础上，本实施例还公开了一种服务器。

参照图23A，示出了本申请一种服务器实施例的结构框图，具体可以包括如下模块：

配置模块2302，用于服务器依据网页的反馈确定选择的待控制终端，其中，所述待控制终端包括主控机和/或跟随机。

画面处理模块2304，用于接收所述待控制终端发送的显示画面，将所述显示画面反馈给所述网页；以及，接收所述主控机和跟随机反馈更新的显示画面，其中，所述更新的显示画面为所述主控机和跟随机执行相同操作对应的操作页面；将更新的显示画面反馈给所述网页，以使所述网页显示所述主控机和跟随机执行相同操作对应的操作页面。

操作处理模块2306，用于接收操作数据，依据所述操作数据确定目的操作事件，其中，所述操作数据包括操作指令或源操作事件；将所述目的操作事件发送给所述跟随机，以使所述主控机和跟随机中执行相同的操作。

通过服务器使得采用第三方的控制终端和Leader均可以实现多终端控制，且Leader和Follower会直接显示在网页上供用户观看。

参照图23B，示出了本申请另一种服务器实施例的结构框图，具体可以包括如下模块：

配置模块2302，用于服务器依据网页的反馈确定选择的待控制终端，其中，所述待控制终端包括主控机和/或跟随机。

画面处理模块2304，用于接收所述待控制终端发送的显示画面，将所述显示画面反馈给所述网页；以及，接收所述主控机和跟随机反馈更新的显示画面，其中，所述更新的显示画面为所述主控机和跟随机执行相同操作对应的操作页面；将更新的显示画面反馈给所述网页，以使所述网页显示所述主控机和跟随机执行相同操作对应的操作页面。

操作处理模块2306，用于接收操作数据，依据所述操作数据确定目的操作事件，其中，所述操作数据包括操作指令或源操作事件；将所述目的操作事件发送给所述跟随机，以使所述主控机和跟随机中执行相同的操作。

第三缓冲模块2308，用于将所述操作数据存储到第二缓冲队列中；从所述第二缓冲队列中按照顺序获取操作数据。

其中，所述配置模块2302，还用于当所述网页由移动终端打开时，所述服务器将所述移动终端配置为主控机，将选择的待控制终端配置为跟随机；当所述网页由非移动终端打开时，依据所述操作数据确定所述网页中选择的待控制终端，将所述网页中选择的待控制终端配置为主控机，将其他待控制终端配置为跟随机。

所述操作处理模块2306，用于当所述操作数据为操作指令时，依据所述主控机和跟随机的终端信息对所述操作指令进行转化，生成与所述主控机或跟随机匹配的目的操作事件；当所述操作数据为源操作事件时，依据所述跟随机的终端信息对源操作事件进行转化，生成与所述跟随机匹配的目的操作事件。

本申请实施例中，Leader和Follower支持各种品牌、多款的移动终端，服务器会执行移动终端的管理，从而处理目的操作事件时根据移动终端的属性即终端信息进行动态匹配，给转发前会依据属性如屏幕大小、分辨率、事件设备等进行匹配确定目的操作事件再转发。

实施例十一

在上述实施例的基础上，本实施例还公开了一种跟随机。

参照图24A，示出了本申请一种跟随机实施例的结构框图，具体可以包括如下模块：

接收模块2402，用于接收操作事件，其中，所述操作事件包括源操作事件或目的操作事件。

操作处理模块2404，用于依据所述操作事件执行与主控机相同的操作，显示与所述主控机执行相同操作对应的操作界面。

参照图24B，示出了本申请另一种跟随机实施例的结构框图，具体可以包括如下模块：

接收模块2402，用于接收操作事件，其中，所述操作事件包括源操作事件或目的操作事件。

操作处理模块2404，用于依据所述操作事件执行与主控机相同的操作，显示与所述主控机执行相同操作对应的操作界面。

画面处理模块2406，用于由服务器配置跟随机时，获取本机的显示画面，其中所述显示画面包括与所述主控机执行相同操作对应的操作界面；将所述显示画面发送给服务器，以通过所述服务器将跟随机的显示画面和主控机的显示画面反馈给网页进行显示。

转化模块2408，用于由主控机配置跟随机时，按照所述跟随机的终端信息对源操作事件进行转化，生成与所述跟随机匹配的目的操作事件。

跟随配置模块2410，用于由主控机配置跟随机时，接收所述主控机发送的地址配置信息；将所述地址配置信息设置为跟随地址，与所述主控机建立跟随连接。

第四缓冲模块2412，用于将所述操作事件存储到第三缓冲队列中；从所述第三缓冲队列中按照顺序获取操作事件。

其中，所述接收模块2402，用于由服务器配置跟随机时，接收所述服务器发送的目的操作事件；由主控机配置跟随机时，接收所述主控机发送的源操作事件。

实施例十二

在上述实施例的基础上，本申请实施例公开了一种多终端控制系统，如图25所示。

所述多终端控制系统，包括：控制终端、服务器、主控机和跟随机。

其中，所述控制终端包括：如上述实施例七所述的控制终端，因此不再赘述。

所述服务器包括如上述实施例十所述的服务器，因此不再赘述。

所述跟随机包括如上述实施例十一所述的跟随机，因此不再赘述。

所述主控机包括第一主控机，和/或第二主控机，其中，所述第一主控机包括如上述实施例九所述的主控机，因此不再赘述；所述第二主控机包括如上述实施例八所述的主控机，因此不再赘述。

基于上述各实施例可见，本申请实施例在移动终端和服务器中均配置有缓冲队列，其中移动终端作为Leader配置有第一缓冲队列，移动终端作为Follower配置有第三缓冲队列，服务器配置有第二缓冲队列。即本申请实施例采用了双缓冲消息队列，Leader和Follower均配置有缓冲队列来管理事件队列，服务器也配置有缓冲队列来保证事件有序转发，从而在捕获Leader的操作事件并远程注入到Follower上时，能够保证操作事件数据完整性和一致性。

本发明实施例实现了远程操作多个移动终端，并实现对各个移动终端上操作的可视化。同样的操作在多个移动终端(Leader和Follower)上同时进行，节省了操作时间，并且通过网页显示并监控Leader和Follower屏幕的变化。

Leader和Follower的屏幕输出可以采用BufferQueue技术，获取Leader和Follower屏幕信息及变化。并且本申请实施例自定义了通信协议和消息双缓冲机制，保证操作事件传输的实时性、连续性和准确性。

对于装置实施例而言，由于其与方法实施例基本相似，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。

本说明书中的各个实施例均采用递进的方式描述，每个实施例重点说明的都是与其他实施例的不同之处，各个实施例之间相同相似的部分互相参见即可。

本领域内的技术人员应明白，本申请实施例的实施例可提供为方法、装置、或计算机程序产品。因此，本申请实施例可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本申请实施例可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。

在一个典型的配置中，所述计算机设备包括一个或多个处理器(CPU)、输入/输出接口、网络接口和内存。内存可能包括计算机可读介质中的非永久性存储器，随机存取存储器(RAM)和/或非易失性内存等形式，如只读存储器(ROM)或闪存(flash RAM)。内存是计算机可读介质的示例。计算机可读介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括，但不限于相变内存(PRAM)、静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、快闪记忆体或其他内存技术、只读光盘只读存储器(CD-ROM)、数字多功能光盘(DVD)或其他光学存储、磁盒式磁带，磁带磁磁盘存储或其他磁性存储设备或任何其他非传输介质，可用于存储可以被计算设备访问的信息。按照本文中的界定，计算机可读介质不包括非持续性的电脑可读媒体(transitory media)，如调制的数据信号和载波。

本申请实施例是参照根据本申请实施例的方法、终端设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理终端设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理终端设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。

这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理终端设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。

这些计算机程序指令也可装载到计算机或其他可编程数据处理终端设备上，使得在计算机或其他可编程终端设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程终端设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。

尽管已描述了本申请实施例的优选实施例，但本领域内的技术人员一旦得知了基本创造性概念，则可对这些实施例做出另外的变更和修改。所以，所附权利要求意欲解释为包括优选实施例以及落入本申请实施例范围的所有变更和修改。

最后，还需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者终端设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者终端设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者终端设备中还存在另外的相同要素。

以上对本申请所提供的一种多终端控制方法、一种控制终端、一种主控机、一种服务器、一种跟随机以及一种多终端控制系统，进行了详细介绍，本文中应用了具体个例对本申请的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本申请的方法及其核心思想；同时，对于本领域的一般技术人员，依据本申请的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本申请的限制。

Claims (53)

1.一种多终端控制方法，其特征在于，包括：

控制终端在网页中显示选择的各待控制终端的显示画面；

在所述网页中选择一个待控制终端进行操作生成相应的操作指令；

将所述操作指令发送给服务器，以通过所述服务器将所述操作指令转化为目的操作事件转发给主控机和跟随机来执行相同的操作，其中，所述服务器依据所述操作指令将选择的待控制终端设置为主控机，将除主控机之外的待控制终端设置为跟随机，且所述主控机和跟随机依据该目的操作事件执行相应的操作并显示该操作对应的操作界面；

在所述网页中对所述显示画面进行更新，显示所述主控机和跟随机执行相同操作对应的操作界面。

2.根据权利要求1所述的方法，其特征在于，在网页中显示选择的至少两个待控制终端的显示画面，包括：

接收网页数据，其中，所述网页数据包括选择的各待控制终端的帧显示画面，所述帧显示画面是所述服务器从各所述待控制终端中获取后转发的；

对所述网页数据进行渲染，在所述网页中显示各所述待控制终端的帧显示画面。

3.根据权利要求1所述的方法，其特征在于，所述在所述网页中选取一个待控制终端进行操作生成相应的操作指令，包括：

从所述网页中选择任一个待控制终端，在选择的待控制终端的显示画面上进行操作；

依据所述操作生成操作指令。

4.根据权利要求1所述的方法，其特征在于，在网页中显示选择的至少两个待控制终端的显示画面之前，还包括：

在网页中显示服务器反馈的至少一个指定用户注册的各移动终端；

从注册的各移动终端选择至少两个待控制终端，将选择的各待控制终端发送给所述服务器，以使所述服务器执行所述主控机和跟随机的配置。

5.一种多终端控制方法，其特征在于，包括：

在移动终端的网页中显示所述移动终端的显示画面，和选择的待控制终端的显示画面，其中，所述移动终端被服务器设置为主控机，所述选择的待控制终端被服务器设置为跟随机；

在所述主控机上执行操作，并捕获所述主控机上操作对应的源操作事件；

将所述源操作事件发送给所述服务器，以通过所述服务器将所述源操作事件转化的目的操作事件转发给各跟随机来执行相同的操作；

在所述网页中对所述显示画面进行更新，显示所述主控机和跟随机执行相同操作对应的操作界面。

6.根据权利要求5所述的方法，其特征在于，在移动终端的网页中显示所述移动终端的显示画面，和选择的待控制终端的显示画面，包括：

接收网页数据，其中，所述网页数据包括所述移动终端的帧显示画面，和选择的待控制终端的帧显示画面，所述帧显示画面是所述服务器从移动终端和待控制终端中获取后转发的；

对所述网页数据进行渲染，在所述网页中显示各所述移动终端的显示画面，和选择的待控制终端的帧显示画面。

7.根据权利要求5所述的方法，其特征在于，在移动终端中打开网页显示所述移动终端的显示画面，和选择的待控制终端的显示画面之前，还包括：

在移动终端中打开网页，在网页中显示服务器反馈的至少一个指定用户注册的其他移动终端；

从注册的其他移动终端选择待控制终端，将选择的各待控制终端发送给服务器以使所述服务器执行所述主控机和跟随机的配置。

8.根据权利要求5所述的方法，其特征在于，捕获所述主控机上的源操作事件之后，还包括：

所述主控机将所述源操作事件存储到第一缓冲队列中；

从所述第一缓冲队列中按照顺序获取源操作事件，依据所述源操作事件执行相应的操作。

9.根据权利要求5所述的方法，其特征在于，还包括：

将所述主控机的帧显示画面发送给服务器，其中，所述帧显示画面包括：基于源操作事件执行操作对应的操作界面。

10.根据权利要求5所述的方法，其特征在于，捕获所述主控机上的源操作事件之前，还包括：

与局域网中其他移动终端建立连接，将局域网中其他移动终端设置为跟随机；

捕获所述主控机上的源操作事件之后，还包括：

将所述源操作事件通过局域网发送给所述跟随机，以使所述跟随机与所述主控机执行相同的操作，显示执行相同操作对应的操作界面。

11.一种多终端控制方法，其特征在于，包括：

移动终端作为主控机与局域网中选定的移动终端建立连接，以将局域网中选定的移动终端设置为跟随机；

在所述主控机上执行操作，并捕获所述主控机上操作对应的源操作事件；

将所述源操作事件通过局域网发送给所述跟随机，以使所述跟随机与所述主控机执行相同的操作，显示执行相同操作对应的操作界面；

在主控机打开网页，在所述网页中显示所述主控机的显示画面，和所述跟随机显示画面。

12.根据权利要求11所述的方法，其特征在于，移动终端作为主控机与局域网中选定的移动终端建立连接，以将局域网中选定的移动终端设置为跟随机，包括：

移动终端作为主控机获取局域网的设备列表；

从所述设备列表中选择的移动终端，与选定的移动终端建立连接；

将所述主控机的地址配置信息发送给选定的移动终端，以使所述选定的移动终端依据所述地址配置信息建立与所述主控机的跟随连接。

13.根据权利要求11所述的方法，其特征在于，捕获所述主控机上的源操作事件之后，还包括：

所述主控机将所述源操作事件存储到第一缓冲队列中；

从所述第一缓冲队列中按照顺序获取源操作事件，依据所述源操作事件执行相应的操作。

14.根据权利要求11所述的方法，其特征在于，还包括：

在网页中显示服务器反馈的至少一个指定用户注册的其他移动终端；

从注册的其他移动终端选择待控制终端，将选择的待控制终端发送给服务器，以使所述服务器将所述待控制终端配置为跟随机。

15.根据权利要求14所述的方法，其特征在于，捕获所述主控机上的源操作事件之后，还包括：

将所述源操作事件发送给所述服务器，以通过所述服务器将所述源操作事件转化的目的操作事件转发给各跟随机来执行相同的操作；

在所述网页中对所述显示画面进行更新，显示所述主控机和跟随机执行相同操作对应的操作界面。

16.根据权利要求15所述的方法，其特征在于，还包括：

将所述主控机的显示画面发送给服务器，其中，所述显示画面包括：基于源操作事件执行操作对应的操作界面。

17.一种多终端控制方法，其特征在于，包括：

服务器依据网页的反馈确定选择的待控制终端，其中，所述待控制终端包括主控机和跟随机；

接收所述待控制终端发送的显示画面，将所述显示画面反馈给所述网页；

接收到控制终端的操作指令的情况下，依据所述操作指令确定目的操作事件，将所述目的操作事件发送给所述主控机和跟随机，以使所述主控机和跟随机中执行相同的操作；

接收到主控机的源操作事件的情况下，依据所述源操作事件确定目的操作事件，将所述目的操作事件发送给所述跟随机，以使所述跟随机执行与所述主控机相同的操作；

接收所述主控机和跟随机反馈更新的显示画面，其中，所述更新的显示画面为所述主控机和跟随机执行相同操作对应的操作页面；

将更新的显示画面反馈给所述网页，以使所述网页显示所述主控机和跟随机执行相同操作对应的操作页面。

18.根据权利要求17所述的方法，其特征在于，还包括：

当所述网页由移动终端打开时，所述服务器将所述移动终端配置为主控机，将选择的待控制终端配置为跟随机；

当所述网页由非移动终端打开时，依据操作数据确定所述网页中选择的待控制终端，将所述网页中选择的待控制终端配置为主控机，将其他待控制终端配置为跟随机。

19.根据权利要求17所述的方法，其特征在于，

所述依据所述操作指令确定目的操作事件，包括：

依据所述主控机和跟随机的终端信息对所述操作指令进行转化，生成与所述主控机或跟随机匹配的目的操作事件；

所述依据所述源操作事件确定目的操作事件，包括：

依据所述跟随机的终端信息对源操作事件进行转化，生成与所述跟随机匹配的目的操作事件。

20.根据权利要求17或19所述的方法，其特征在于，还包括：

将操作数据存储到第二缓冲队列中；

从所述第二缓冲队列中按照顺序获取操作数据，所述操作数据包括操作指令和/或源操作事件。

21.一种多终端控制方法，其特征在于，应用于测试领域，包括：

跟随机接收操作事件，其中，所述操作事件包括源操作事件或目的操作事件；所述目的操作事件为服务器对操作指令或源操作事件进行转化得到的；所述操作指令从控制终端接收，以使主控机和跟随机来执行相同的操作；所述源操作事件为主控机上执行操作对应的源操作事件；所述跟随机和主控机通过局域网或互联网连接；

依据所述操作事件执行与主控机相同的操作，显示与所述主控机执行相同操作对应的操作界面；

由服务器配置跟随机时，跟随机将显示画面发送给服务器，以通过所述服务器将跟随机的显示画面和主控机的显示画面反馈给网页进行显示，所述显示画面包括与所述主控机执行相同操作对应的操作界面。

22.根据权利要求21所述的方法，其特征在于，跟随机接收操作事件，包括：

由服务器配置跟随机时，跟随机接收所述服务器发送的目的操作事件；

由主控机配置跟随机时，跟随机接收所述主控机发送的源操作事件。

23.根据权利要求22所述的方法，其特征在于，由主控机配置跟随机时，所述的方法还包括：

按照所述跟随机的终端信息对源操作事件进行转化，生成与所述跟随机匹配的目的操作事件。

24.根据权利要求22所述的方法，其特征在于，由主控机配置跟随机时，还包括：

接收所述主控机发送的地址配置信息；

将所述地址配置信息设置为跟随地址，与所述主控机建立跟随连接。

25.根据权利要求22所述的方法，其特征在于，依据所述操作事件执行与主控机相同的操作之前，还包括：

将所述操作事件存储到第三缓冲队列中；

从所述第三缓冲队列中按照顺序获取操作事件。

26.一种控制终端，其特征在于，包括：

网页显示模块，用于在网页中显示选择的各待控制终端的显示画面；以及在所述网页中对所述显示画面进行更新，显示主控机和跟随机执行相同操作对应的操作界面；

指令生成模块，用于在所述网页中选择一个待控制终端进行操作生成相应的操作指令；

指令发送模块，用于将所述操作指令发送给服务器，以通过所述服务器将所述操作指令转化为目的操作事件转发给主控机和跟随机来执行相同的操作，其中，所述服务器依据所述操作指令将选择的待控制终端设置为主控机，将除主控机之外的待控制终端设置为跟随机，且所述主控机和跟随机依据该目的操作事件执行相应的操作并显示该操作对应的操作界面。

27.根据权利要求26所述的控制终端，其特征在于，

所述网页显示模块，用于接收网页数据，其中，所述网页数据包括选择的各待控制终端的帧显示画面，所述帧显示画面是所述服务器从各所述待控制终端中获取后转发的；对所述网页数据进行渲染，在所述网页中显示各所述待控制终端的帧显示画面。

28.根据权利要求26所述的控制终端，其特征在于，

所述指令生成模块，用于从所述网页中选择任一个待控制终端，在选择的待控制终端的显示画面上进行操作；依据所述操作生成操作指令。

29.根据权利要求26所述的控制终端，其特征在于，

所述网页显示模块，还用于在网页中显示服务器反馈的至少一个指定用户注册的各移动终端；从注册的各移动终端选择至少两个待控制终端，将选择的各待控制终端发送给所述服务器，以使所述服务器执行所述主控机和跟随机的配置。

30.一种主控机，其特征在于，包括：

第一显示模块，用于在移动终端的网页中显示所述移动终端的显示画面，和选择的待控制终端的显示画面，其中，所述移动终端被服务器设置为主控机，所述选择的待控制终端被服务器设置为跟随机；以及，在所述网页中对所述显示画面进行更新，显示所述主控机和跟随机执行相同操作对应的操作界面；

第一捕获模块，用于在所述主控机上执行操作，并捕获所述主控机上操作对应的源操作事件；

第一发送模块，用于将所述源操作事件发送给所述服务器，以通过所述服务器将所述源操作事件转化的目的操作事件转发给各跟随机来执行相同的操作。

31.根据权利要求30所述的主控机，其特征在于，

第一显示模块，用于接收网页数据，其中，所述网页数据包括所述移动终端的帧显示画面，和选择的待控制终端的帧显示画面，所述帧显示画面是所述服务器从移动终端和待控制终端中获取后转发的；对所述网页数据进行渲染，在所述网页中显示各所述移动终端的显示画面，和选择的待控制终端的帧显示画面。

32.根据权利要求30所述的主控机，其特征在于，

所述第一显示模块，还用于在移动终端中打开网页，在网页中显示服务器反馈的至少一个指定用户注册的其他移动终端；从注册的其他移动终端选择待控制终端，将选择的各待控制终端发送给服务器以使所述服务器执行所述主控机和跟随机的配置。

33.根据权利要求30所述的主控机，其特征在于，还包括：

第一缓冲模块，用于所述主控机将所述源操作事件存储到第一缓冲队列中；从所述第一缓冲队列中按照顺序获取源操作事件，依据所述源操作事件执行相应的操作。

34.根据权利要求30所述的主控机，其特征在于，

所述第一发送模块，还用于将所述主控机的帧显示画面发送给服务器，其中，所述帧显示画面包括：基于源操作事件执行操作对应的操作界面。

35.根据权利要求30所述的主控机，其特征在于，还包括：

第一跟随机配置模块，用于与局域网中其他移动终端建立连接，将局域网中其他移动终端设置为跟随机；

第二发送模块，用于将所述源操作事件通过局域网发送给所述跟随机，以使所述跟随机与所述主控机执行相同的操作，显示执行相同操作对应的操作界面。

36.一种主控机，其特征在于，包括：

第二跟随机配置模块，用于与局域网中选定的移动终端建立连接，以将局域网中选定的移动终端设置为跟随机；

第二捕获模块，用于在所述主控机上执行操作，并捕获所述主控机上操作对应的源操作事件；

第三发送模块，用于将所述源操作事件通过局域网发送给所述跟随机，以使所述跟随机与所述主控机执行相同的操作，显示执行相同操作对应的操作界面；

第二显示模块，用于在主控机打开网页，在所述网页中显示所述主控机的显示画面，和所述跟随机显示画面。

37.根据权利要求36所述的主控机，其特征在于，

第二跟随机配置模块，用于移动终端作为主控机获取局域网的设备列表；从所述设备列表中选择的移动终端，与选定的移动终端建立连接；将所述主控机的地址配置信息发送给选定的移动终端，以使所述选定的移动终端依据所述地址配置信息建立与所述主控机的跟随连接。

38.根据权利要求36所述的主控机，其特征在于，还包括：

第二缓冲模块，用于所述主控机将所述源操作事件存储到第一缓冲队列中；从所述第一缓冲队列中按照顺序获取源操作事件，依据所述源操作事件执行相应的操作。

39.根据权利要求36所述的主控机，其特征在于，

第二显示模块，还用于在网页中显示服务器反馈的至少一个指定用户注册的其他移动终端；

第四发送模块，用于从注册的其他移动终端选择待控制终端，将选择的待控制终端发送给服务器，以使所述服务器将所述待控制终端配置为跟随机。

40.根据权利要求39所述的主控机，其特征在于，

所述第四发送模块，还用于将所述源操作事件发送给所述服务器，以通过所述服务器将所述源操作事件转化的目的操作事件转发给各跟随机来执行相同的操作；

所述第二显示模块，还用于在所述网页中对所述显示画面进行更新，显示所述主控机和跟随机执行相同操作对应的操作界面。

41.根据权利要求40所述的主控机，其特征在于，

所述第四发送模块，还用于将所述主控机的显示画面发送给服务器，其中，所述显示画面包括：基于源操作事件执行操作对应的操作界面。

42.一种服务器，其特征在于，包括：

配置模块，用于服务器依据网页的反馈确定选择的待控制终端，其中，所述待控制终端包括主控机和跟随机；

画面处理模块，用于接收所述待控制终端发送的显示画面，将所述显示画面反馈给所述网页；以及，接收所述主控机和跟随机反馈更新的显示画面，其中，所述更新的显示画面为所述主控机和跟随机执行相同操作对应的操作页面；将更新的显示画面反馈给所述网页，以使所述网页显示所述主控机和跟随机执行相同操作对应的操作页面；

操作处理模块，用于接收到控制终端的操作指令的情况下，依据所述操作指令确定目的操作事件，将所述目的操作事件发送给所述主控机和跟随机，以使所述主控机和跟随机中执行相同的操作；接收到主控机的源操作事件的情况下，依据所述源操作事件确定目的操作事件，将所述目的操作事件发送给所述跟随机，以使所述跟随机执行与所述主控机相同的操作。

43.根据权利要求42所述的服务器，其特征在于，

所述配置模块，还用于当所述网页由移动终端打开时，所述服务器将所述移动终端配置为主控机，将选择的待控制终端配置为跟随机；当所述网页由非移动终端打开时，依据操作数据确定所述网页中选择的待控制终端，将所述网页中选择的待控制终端配置为主控机，将其他待控制终端配置为跟随机。

44.根据权利要求42所述的服务器，其特征在于，

所述操作处理模块，用于依据所述主控机和跟随机的终端信息对所述操作指令进行转化，生成与所述主控机或跟随机匹配的目的操作事件；和/或，依据所述跟随机的终端信息对源操作事件进行转化，生成与所述跟随机匹配的目的操作事件。

45.根据权利要求42或44所述的服务器，其特征在于，还包括：

第三缓冲模块，用于将操作数据存储到第二缓冲队列中；从所述第二缓冲队列中按照顺序获取操作数据，所述操作数据包括操作指令和/或源操作事件。

46.一种跟随机，其特征在于，应用于测试领域，包括：

接收模块，用于接收操作事件，其中，所述操作事件包括源操作事件或目的操作事件；所述目的操作事件为服务器对操作指令或源操作事件进行转化得到的；所述操作指令从控制终端接收，以使主控机和跟随机来执行相同的操作；所述源操作事件为主控机上执行操作对应的源操作事件；所述跟随机和主控机通过局域网或互联网连接；

操作处理模块，用于依据所述操作事件执行与主控机相同的操作，显示与所述主控机执行相同操作对应的操作界面；

画面处理模块，用于由服务器配置跟随机时，获取本机的显示画面，其中所述显示画面包括与所述主控机执行相同操作对应的操作界面；将所述显示画面发送给服务器，以通过所述服务器将跟随机的显示画面和主控机的显示画面反馈给网页进行显示。

47.根据权利要求46所述的跟随机，其特征在于，

所述接收模块，用于由服务器配置跟随机时，接收所述服务器发送的目的操作事件；由主控机配置跟随机时，接收所述主控机发送的源操作事件。

48.根据权利要求47所述的跟随机，其特征在于，还包括：

转化模块，用于由主控机配置跟随机时，按照所述跟随机的终端信息对源操作事件进行转化，生成与所述跟随机匹配的目的操作事件。

49.根据权利要求47所述的跟随机，其特征在于，还包括：

跟随配置模块，用于由主控机配置跟随机时，接收所述主控机发送的地址配置信息；将所述地址配置信息设置为跟随地址，与所述主控机建立跟随连接。

50.根据权利要求47所述的跟随机，其特征在于，还包括：

第四缓冲模块，用于将所述操作事件存储到第三缓冲队列中；从所述第三缓冲队列中按照顺序获取操作事件。

51.一种多终端控制系统，包括：主控机和跟随机；

其中，所述跟随机包括如上述权利要求46-50任一所述的跟随机；

所述主控机包括第一主控机，所述第一主控机包括如上述权利要求36-38任一所述的主控机。

52.根据权利要求51所述的系统，其特征在于，还包括：服务器；

所述服务器包括如上述权利要求42-45任一所述的服务器；

所述第一主控机还包括如上述权利要求39-41任一所述的主控机；

所述主控机还包括：第二主控机，所述第二主控机包括如上述权利要求30-35任一所述的主控机。

53.根据权利要求52所述的系统，其特征在于，还包括：控制终端；

所述控制终端包括：如上述权利要求26-29任一所述的控制终端。

Images