CN104777993A - 利用移动终端触摸屏操控多屏适配器的方法及装置 - Google Patents

Abstract

本发明公开了一种移动终端触摸屏操控多屏适配器的方法及装置，其中方法包括：移动终端接收多屏适配器所显示的图形界面的属性值；移动终端根据所述属性值，在触摸屏上同步显示所述图形界面；移动终端基于所述触摸屏上显示的所述图形界面，远程操控多屏适配器。或者包括：多屏适配器将所显示的图形界面的属性值提供给移动终端；多屏适配器接收移动终端基于触摸屏上同步显示的所述图形界面发来的远程操控指令，所述触摸屏上同步显示的所述图形界面是根据所述属性值进行显示；多屏适配器执行所述远程操控指令。本发明具有实时性好，操控方便快捷的优点，并且通用性强，价格较低，具有很强的实用价值。

Description

利用移动终端触摸屏操控多屏适配器的方法及装置

技术领域

本发明涉及通信技术领域，尤其涉及利用移动终端触摸屏操控多屏适配器的方法及装置。

背景技术

当今，移动终端得到了很大的普及，但是它的屏幕太小，可以利用多屏适配器来无线连接移动终端和电视机，从而“扩展其屏幕”，获得良好的用户体验。但是，如何通过移动终端来远程操控多屏适配器，是必须解决的问题。目前解决远程操控的较好方法，是将空中鼠标、小键盘和重力感应器等集成到传统的遥控器上。但是，集成空中鼠标、小键盘和重力感应器等，不便于用户使用，并且会导致价格偏高。

发明内容

本发明实施例提供一种一种利用移动终端触摸屏操控多屏适配器的方法，用以便于用户使用，并降低价格，该方法包括：

移动终端接收多屏适配器所显示的图形界面的属性值；

移动终端根据所述属性值，在触摸屏上同步显示所述图形界面；

移动终端基于所述触摸屏上显示的所述图形界面，远程操控多屏适配器。

一个实施例中，移动终端接收多屏适配器所显示的图形界面的属性值，包括：移动终端接收所述图形界面的窗口视图属性及关联资源文件；

所述方法还包括：移动终端存储关联资源文件中的可移植网络图形格式PNG和/或联合图像专家组格式JPEG文件。

一个实施例中，移动终端根据所述属性值，在触摸屏上同步显示所述图形界面，包括：移动终端基于所述属性值，根据触摸屏窗口和多屏适配器窗口的像素比值进行缩放，在触摸屏上绘制或更新所述图形界面的窗口视图；

移动终端基于所述触摸屏上显示的所述图形界面，远程操控所述多屏适配器，包括：移动终端接收用户在所述触摸屏上对所述图形界面的触控指令，根据所述触控指令生成触控点击事件，在根据触摸屏窗口和多屏适配器窗口的像素比值对触控点击事件进行缩放后，向多屏适配器发送触控点击事件。

一个实施例中，若所述图形界面的窗口视图只显示大小和位置，则所述触控指令在所述触摸屏上的触控位置，在多屏适配器所显示的图形界面对应位置显示一触控位置提示图标，所述触控位置提示图标随用户触控手势移动而移动；

移动终端根据所述触控指令向多屏适配器发送触控点击事件，包括：移动终端在用户触控手势结束时，向多屏适配器发送触控点击事件。

本发明实施例还提供一种利用移动终端触摸屏操控多屏适配器的方法，用以便于用户使用，并降低价格，该方法包括：

多屏适配器将所显示的图形界面的属性值提供给移动终端；

多屏适配器接收移动终端基于触摸屏上同步显示的所述图形界面发来的远程操控指令，所述触摸屏上同步显示的所述图形界面是根据所述属性值进行显示；

多屏适配器执行所述远程操控指令。

一个实施例中，多屏适配器将所显示的图形界面的属性值提供给移动终端之前，还包括：多屏适配器在所述图形界面的窗口视图初始化或发生变化时，从窗口顶级视图递归遍历整个视图树，找出显示相关属性数据，根据所述显示相关属性数据生成可扩展标记语言XML文件和关联的资源文件；

多屏适配器将所显示的图形界面的属性值提供给移动终端，包括：多屏适配器将所述XML文件和关联的资源文件提供给移动终端。

一个实施例中，多屏适配器接收移动终端基于触摸屏上同步显示的所述图形界面发来的远程操控指令，包括：

多屏适配器接收移动终端根据用户在所述触摸屏上对所述图形界面的触控指令发来的触控点击事件；

多屏适配器执行所述远程操控指令，包括：多屏适配器将所述触控点击事件注入窗口管理系统，摸拟触控操作。

一个实施例中，若所述图形界面的窗口视图只显示大小和位置，则所述触控指令在所述触摸屏上的触控位置，在多屏适配器所显示的图形界面对应位置显示一触控位置提示图标，所述触控位置提示图标随用户触控手势移动而移动；

多屏适配器接收所述触控点击事件，包括：多屏适配器在用户触控手势结束时，接收移动终端发来的所述触控点击事件。

本发明实施例还提供一种利用移动终端触摸屏操控多屏适配器的装置，用以便于用户使用，并降低价格，该装置包括：

接收模块，用于接收多屏适配器所显示的图形界面的属性值；

显示模块，用于根据所述属性值，在移动终端触摸屏上同步显示所述图形界面；

操控模块，用于基于所述触摸屏上显示的所述图形界面，远程操控多屏适配器。

一个实施例中，所述接收模块具体用于：

接收所述图形界面的窗口视图属性及关联资源文件；

所述的装置还包括：

存储模块，用于存储关联资源文件中的PNG和/或JPEG文件。

一个实施例中，所述显示模块具体用于：

基于所述属性值，根据触摸屏窗口和多屏适配器窗口的像素比值进行缩放，在触摸屏上绘制或更新所述图形界面的窗口视图；

所述操控模块包括：

接收单元，用于接收用户在所述触摸屏上对所述图形界面的触控指令；

发送单元，用于根据所述触控指令生成触控点击事件，在根据触摸屏窗口和多屏适配器窗口的像素比值对触控点击事件进行缩放后，向多屏适配器发送触控点击事件。

一个实施例中，若所述图形界面的窗口视图只显示大小和位置，则所述触控指令在所述触摸屏上的触控位置，在多屏适配器所显示的图形界面对应位置显示一触控位置提示图标，所述触控位置提示图标随用户触控手势移动而移动；

所述发送单元具体用于在用户触控手势结束时，向多屏适配器发送触控点击事件。

本发明实施例还提供一种利用移动终端触摸屏操控多屏适配器的装置，用以便于用户使用，并降低价格，该装置包括：

提供模块，用于将多屏显示器所显示的图形界面的属性值提供给移动终端；

接收模块，用于接收移动终端基于触摸屏上同步显示的所述图形界面发来的对多屏显示器的远程操控指令，所述触摸屏上同步显示的所述图形界面是根据所述属性值进行显示；

执行模块，用于执行所述远程操控指令。

一个实施例中，所述的装置还包括：

生成模块，用于在所述图形界面的窗口视图初始化或发生变化时，从窗口顶级视图递归遍历整个视图树，找出显示相关属性数据，根据所述显示相关属性数据生成可扩展标记语言XML文件和关联的资源文件；

所述提供模块具体用于：将所述XML文件和关联的资源文件提供给移动终端。

一个实施例中，所述的装置还包括：

显示模块，用于在所述图形界面的窗口视图只显示大小和位置时，对于所述触控指令在所述触摸屏上的触控位置，在多屏适配器所显示的图形界面对应位置显示一触控位置提示图标，所述触控位置提示图标随用户触控手势移动而移动；

所述接收模块具体用于：在用户触控手势结束时，接收移动终端发来的所述触控点击事件；

所述执行模块具体用于将所述触控点击事件注入窗口管理系统，摸拟触控操作。

本发明实施例提出的利用移动终端触摸屏来远程操控多屏适配器的方法及装置，具有实时性好，操控方便快捷的优点，并且通用性强，价格较低，具有很强的实用价值。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。在附图中：

图1为本发明实施例中一种利用移动终端触摸屏操控多屏适配器的方法流程图；

图2为本发明实施例中另一利用移动终端触摸屏操控多屏适配器的方法流程图；

图3为本发明实施例中图形界面属性值传送处理过程示意图；

图4为本发明实施例中移动终端摸拟多屏适配器端触控操作的过程示意图；

图5为本发明实施例中利用移动终端触摸屏操控多屏适配器的方法的一个示例图；

图6为本发明实施例中利用移动终端触摸屏操控多屏适配器的装置的结构示意图；

图7为本发明实施例中利用移动终端触摸屏操控多屏适配器的装置的具体实例图；

图8为本发明实施例中利用移动终端触摸屏操控多屏适配器的装置的具体实例图；

图9为本发明实施例中利用移动终端触摸屏操控多屏适配器的装置的结构示意图；

图10为本发明实施例中利用移动终端触摸屏操控多屏适配器的装置的具体实例图；

图11为本发明实施例中利用移动终端触摸屏操控多屏适配器的装置的具体实例图。

具体实施方式

为使本发明实施例的目的、技术方案和优点更加清楚明白，下面结合附图对本发明实施例做进一步详细说明。在此，本发明的示意性实施例及其说明用于解释本发明，但并不作为对本发明的限定。

发明人考虑到，现有技术中空中鼠标功能上虽然跟触控类似，但是，一方面目前的空中鼠标操作上没有真实的鼠标方便，另一方面，触控操作方式比鼠标更便利，可以双手操作，支持多点触摸等；并且，目前智能电视和机顶盒绝大多数基于Android（安卓）系统，Android应用都是为触控操作而设计的，这样，使用空中鼠标就面临着很大的局限；因而在本发明实施例中考虑利用移动终端触摸屏来远程操控多屏适配器，这样可以获得类似于移动终端上触控操作的体验。某些应用场景，如游戏，利用目前的技术，很难解决使用上的问题。如果使用触摸屏远程操控，就跟应用的设计很契合，问题就随之解决了。另外，因为移动终端设备现在已经很普及，所以，这样可以节省集成空中鼠标、小键盘和重力感应器等的额外开销。

具体实施时，可以通过多屏适配器把图形界面发送到移动终端，然后由移动终端基于此图形界面远程操控多屏适配器。在本发明实施例中，多屏适配器传递给移动终端的可以是通常的位图，还可以是图形界面的属性值。属性值通常是字符描述，所以数据量小得多，传输速度快。本发明实施例中移动设备模拟多屏适配器触摸屏来操控多屏适配器，简单快捷，即使如游戏这样的实时频繁操控要求也能满足。

图1为本发明实施例中一种利用移动终端触摸屏操控多屏适配器的方法流程图。如图1所示，其处理过程可以包括：

步骤101、移动终端接收多屏适配器所显示的图形界面的属性值；

步骤102、移动终端根据所述属性值，在触摸屏上同步显示所述图形界面；

步骤103、移动终端基于所述触摸屏上显示的所述图形界面，远程操控多屏适配器。

图2为本发明实施例中另一利用移动终端触摸屏操控多屏适配器的方法流程图。如图2所示，其处理过程可以包括：

步骤201、多屏适配器将所显示的图形界面的属性值提供给移动终端；

步骤202、多屏适配器接收移动终端基于触摸屏上同步显示的所述图形界面发来的远程操控指令，所述触摸屏上同步显示的所述图形界面是根据所述属性值进行显示；

步骤203、多屏适配器执行所述远程操控指令。

具体实施时，本发明实施例中是利用移动终端的触摸屏来远程操控多屏适配器。触控操作和图形界面是紧密结合在一起的，可以将多屏适配器上的图形界面在移动终端上同步显示，然后用户基于传递过来的图形界面远程操控多屏适配器。通常，一张位图需要约1M的数据量，并且需要不断的实时更新，即使采用压缩算法，对网络带宽和CPU处理能力都有不小的压力，很难做到实时性。将多屏适配器上的图形界面位图传递到移动终端会影响操控效果，因此，在本发明实施例中可以将多屏适配器所显示的图形界面的属性值传递给移动终端，通常，这样只需要10B到100KB的数据量。这就极大减小了数据传输量，从而达到实时效果，满足了用户体验。

具体实施时，多屏适配器将所显示的图形界面的属性值提供给移动终端，可以包括：多屏适配器将所述图形界面的窗口视图属性及关联资源文件提供给移动终端。移动终端接收多屏适配器所显示的图形界面的属性值，可以包括：移动终端接收所述图形界面的窗口视图属性及关联资源文件。

具体的，多屏适配器将所显示的图形界面的属性值提供给移动终端之前，还可以包括：多屏适配器在所述图形界面的窗口视图初始化或发生变化时，从窗口顶级视图递归遍历整个视图树，找出显示相关属性数据，根据所述显示相关属性数据生成XML（ExtensibleMarkup Language，可扩展标记语言）文件和关联的资源文件；多屏适配器将所显示的图形界面的属性值提供给移动终端，可以包括：多屏适配器将所述XML文件和关联的资源文件提供给移动终端。

具体实施时，移动终端接收所述图形界面的窗口视图属性及关联资源文件之后，还可以包括：移动终端存储关联资源文件中的PNG（Portable Network Graphic Format，可移植网络图形格式）和/或JPEG（Joint Photographic Experts GROUP，联合图像专家组格式）文件。如此实施是考虑到，关联资源文件中的PNG和JPEG等文件占有相对大的开销，但这些文件具有复用性，传送到移动终端后缓存下来，下次可以直接使用，这样进一步减小了数据传输开销。

具体实施时，移动终端根据所述属性值，在触摸屏上同步显示所述图形界面，可以包括：移动终端基于所述属性值，根据触摸屏窗口和多屏适配器窗口的像素比值进行缩放，在触摸屏上绘制或更新所述图形界面的窗口视图。

下面举一例说明多屏适配器端的图形界面属性值传送到移动终端处理的详细过程。图3为图形界面属性值传送处理过程示意图。如图3所示，处理过程可以包括：

多屏适配器上的窗口视图初始化时，从窗口顶级视图递归遍历整个视图树，找出显示相关属性数据，如大小、位置、图片、文字和颜色等，并把这些显示相关属性数据初始化为一个XML文件和关联的资源文件（如PNG或JPEG等），XML文件可以通过一个文件链接关联这些资源文件；同理，当窗口视图局部发生变化时，如大小或位置等，也会用这些变化的显示相关属性数据生成XML文件和关联的资源文件。某些单位（如dp，屏幕密度无关像素）会转换成像素单位；

多屏适配器将XML文件和关联的资源文件发送到移动终端；

移动终端接收到XML文件和关联的资源文件；

移动终端基于这些文件，先根据移动终端触摸屏窗口和多屏适配器端窗口像素比值进行缩放，然后在触摸屏上绘制或更新窗口视图。

具体实施时，移动终端基于所述触摸屏上显示的所述图形界面，远程操控所述多屏适配器，可以包括：移动终端接收用户在所述触摸屏上对所述图形界面的触控指令；移动终端根据所述触控指令向多屏适配器发送触控点击事件。具体的，移动终端可以根据所述触控指令生成触控点击事件，在根据触摸屏窗口和多屏适配器窗口的像素比值对触控点击事件进行缩放后，向多屏适配器发送触控点击事件。多屏适配器接收移动终端基于触摸屏上同步显示的所述图形界面发来的远程操控指令，可以包括：多屏适配器接收移动终端根据用户在所述触摸屏上对所述图形界面的触控指令发来的触控点击事件；多屏适配器执行所述远程操控指令，包括：多屏适配器将所述触控点击事件注入窗口管理系统，摸拟触控操作。具体的，多屏适配器接收的触控点击事件可以是移动终端根据触摸屏窗口和多屏适配器窗口的像素比值进行缩放后的触控点击事件。

具体实施时，某些视图无法用属性完全描述，这些视图只能显示大小和位置，却无内容。此时，可以采用移动终端触控结合多屏适配器屏幕图标提示定位：用户在移动终端的屏幕上触摸一个估计点，这个点在多屏适配器端会有一个对应位置的图标提示（类似于鼠标指针，但不是模拟鼠标），移动手指，图标提示也相应移动，直到移动到需要操作的视图位置，此时抬起手指，移动终端会发送一组touch事件（touch down、touch up）给多屏适配器端，模拟一个触控点击事件。这种操作方法，比触摸屏模拟鼠标的操控方式要简单快捷，因为，鼠标是相对移动，触控是绝对位置。设想一个触摸屏游戏的场景，用户经常需要短时间内操控屏幕的不同位置，此时可以双手来操控，而如果利用鼠标需要在屏幕的不同位置上下左右全屏幕移动，是很不方便的。而且，触摸屏模拟鼠标需要在屏幕上滑动较大的距离，过多的滑动，体验也较差。

基于此，具体的，若所述图形界面的窗口视图只显示大小和位置，则所述触控指令在所述触摸屏上的触控位置，在多屏适配器所显示的图形界面对应位置显示一触控位置提示图标，所述触控位置提示图标随用户触控手势移动而移动。移动终端根据所述触控指令向多屏适配器发送触控点击事件，可以包括：移动终端在用户触控手势结束时，向多屏适配器发送触控点击事件。多屏适配器接收所述触控点击事件，可以包括：多屏适配器在用户触控手势结束时，接收移动终端发来的所述触控点击事件。

下面举一例说明移动终端摸拟多屏适配器端触控操作的详细过程。图4为移动终端摸拟多屏适配器端触控操作的过程示意图。如图4所示，处理过程可以包括：

基于适配器同步到移动端的窗口视图（在一例中还可以基于适配器端的触控位置提示），用户操作移动终端上的窗口视图；

移动终端根据多屏适配器和移动终端上的窗口的像素比例对触控点击事件进行缩放处理，这样可以准确模拟多屏适配器上的触控输入；

触控点击事件被移动终端传送到多屏适配器端；

多屏适配器端接收到触控点击事件；

触控点击事件被注入到多屏适配器的窗口管理系统，模拟真实的触控操作。

具体实施时，WebView等控件内嵌了视图树，可以用类似本发明实施例的方法处理；用户在根据多屏适配器显示的触控位置提示图标来定位的过程中，会有一个短距离的滑动。对于这个滑动事件，这里只是模拟了一个触控点击事件发送到多屏适配器。真实的应用场景中有滑动手势，应区别开来。本发明实施例中依据是滑动的距离，手势滑动的距离要大。这个距离参数用户可修改。另外，在多屏适配器上的触控位置提示图标可以只在触控操作时才需要显示，其它时间不显示。

图5为本发明实施例中利用移动终端触摸屏操控多屏适配器的方法的一个示例图。如图5所示，本发明实施例中利用移动终端触摸屏操控多屏适配器的方法可以包括：多屏适配器进行窗口视图属性数据处理，处理后发送给移动终端；移动终端接收到窗口视图属性数据后进行绘制；移动终端在用户触控操作发生后，向多屏适配器发送触控数据；多屏适配器接收到触控数据后，注入窗口管理系统。

基于同一发明构思，本发明实施例中还提供了一种利用移动终端触摸屏操控多屏适配器的装置，如下面的实施例所述。由于该装置解决问题的原理与利用移动终端触摸屏操控多屏适配器的方法相似，因此该装置的实施可以参见利用移动终端触摸屏操控多屏适配器的方法的实施，重复之处不再赘述。

图6为本发明实施例中利用移动终端触摸屏操控多屏适配器的装置的结构示意图。如图6所示，本发明实施例中利用移动终端触摸屏操控多屏适配器的装置可以包括：

接收模块601，用于接收多屏适配器所显示的图形界面的属性值；

显示模块602，用于根据所述属性值，在移动终端触摸屏上同步显示所述图形界面；

操控模块603，用于基于所述触摸屏上显示的所述图形界面，远程操控多屏适配器。

具体实施时，所述接收模块601具体可以用于：

接收所述图形界面的窗口视图属性及关联资源文件。

图7为本发明实施例中利用移动终端触摸屏操控多屏适配器的装置的具体实例图。如图7所示，具体实施时，图6所示装置还可以包括：

存储模块701，用于存储关联资源文件中的PNG和/或JPEG文件。

具体实施时，所述显示模块602具体可以用于：

基于所述属性值，根据触摸屏窗口和多屏适配器窗口的像素比值进行缩放，在触摸屏上绘制或更新所述图形界面的窗口视图。

图8为本发明实施例中利用移动终端触摸屏操控多屏适配器的装置的具体实例图。如图8所示，具体实施时，图6中操控模块603可以包括：

接收单元801，用于接收用户在所述触摸屏上对所述图形界面的触控指令；

发送单元802，用于根据所述触控指令生成触控点击事件，在根据触摸屏窗口和多屏适配器窗口的像素比值对触控点击事件进行缩放后，向多屏适配器发送触控点击事件。

具体实施时，若所述图形界面的窗口视图只显示大小和位置，则所述触控指令在所述触摸屏上的触控位置，在多屏适配器所显示的图形界面对应位置显示一触控位置提示图标，所述触控位置提示图标随用户触控手势移动而移动；

所述发送单元802具体用于在用户触控手势结束时，向多屏适配器发送触控点击事件。

图9为本发明实施例中利用移动终端触摸屏操控多屏适配器的装置的结构示意图。如图9所示，本发明实施例中利用移动终端触摸屏操控多屏适配器的装置可以包括：

提供模块901，用于将多屏显示器所显示的图形界面的属性值提供给移动终端；

接收模块902，用于接收移动终端基于触摸屏上同步显示的所述图形界面发来的对多屏显示器的远程操控指令，所述触摸屏上同步显示的所述图形界面是根据所述属性值进行显示；

执行模块903，用于执行所述远程操控指令。

具体实施时，所述提供模块901具体可以用于：

将所述图形界面的窗口视图属性及关联资源文件提供给移动终端。

图10为本发明实施例中利用移动终端触摸屏操控多屏适配器的装置的具体实例图。如图10所示，具体实施时，图9所示装置还可以包括：

生成模块1001，用于在所述图形界面的窗口视图初始化或发生变化时，从窗口顶级视图递归遍历整个视图树，找出显示相关属性数据，根据所述显示相关属性数据生成可扩展标记语言XML文件和关联的资源文件；

所述提供模块901具体可以用于：将所述XML文件和关联的资源文件提供给移动终端。

图11为本发明实施例中利用移动终端触摸屏操控多屏适配器的装置的具体实例图。如图11所示，具体实施时，图9所示装置还可以包括：

显示模块1101，用于在所述图形界面的窗口视图只显示大小和位置时，对于所述触控指令在所述触摸屏上的触控位置，在多屏适配器所显示的图形界面对应位置显示一触控位置提示图标，所述触控位置提示图标随用户触控手势移动而移动；

所述接收模块902具体可以用于：在用户触控手势结束时，接收移动终端发来的所述触控点击事件；

所述执行模块903具体可以用于将所述触控点击事件注入窗口管理系统，摸拟触控操作。

综上所述，本发明实施例提出的利用移动终端触摸屏来远程操控多屏适配器的方法及装置，具有实时性好，操控方便快捷的优点，并且通用性强，价格较低，具有很强的实用价值。

本领域内的技术人员应明白，本发明的实施例可提供为方法、系统、或计算机程序产品。因此，本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质（包括但不限于磁盘存储器、CD-ROM、光学存储器等）上实施的计算机程序产品的形式。

本发明是参照根据本发明实施例的方法、设备（系统）、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。

这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。

这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。

以上所述的具体实施例，对本发明的目的、技术方案和有益效果进行了进一步详细说明，所应理解的是，以上所述仅为本发明的具体实施例而已，并不用于限定本发明的保护范围，凡在本发明的精神和原则之内，所做的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (15)

1.一种利用移动终端触摸屏操控多屏适配器的方法，其特征在于，包括：

移动终端接收多屏适配器所显示的图形界面的属性值；

移动终端根据所述属性值，在触摸屏上同步显示所述图形界面；

移动终端基于所述触摸屏上显示的所述图形界面，远程操控多屏适配器。

2.如权利要求1所述的方法，其特征在于，移动终端接收多屏适配器所显示的图形界面的属性值，包括：移动终端接收所述图形界面的窗口视图属性及关联资源文件；

所述方法还包括：移动终端存储关联资源文件中的可移植网络图形格式PNG和/或联合图像专家组格式JPEG文件。

3.如权利要求1所述的方法，其特征在于，移动终端根据所述属性值，在触摸屏上同步显示所述图形界面，包括：移动终端基于所述属性值，根据触摸屏窗口和多屏适配器窗口的像素比值进行缩放，在触摸屏上绘制或更新所述图形界面的窗口视图；

移动终端基于所述触摸屏上显示的所述图形界面，远程操控所述多屏适配器，包括：移动终端接收用户在所述触摸屏上对所述图形界面的触控指令，根据所述触控指令生成触控点击事件，在根据触摸屏窗口和多屏适配器窗口的像素比值对触控点击事件进行缩放后，向多屏适配器发送触控点击事件。

4.如权利要求3所述的方法，其特征在于，若所述图形界面的窗口视图只显示大小和位置，则所述触控指令在所述触摸屏上的触控位置，在多屏适配器所显示的图形界面对应位置显示一触控位置提示图标，所述触控位置提示图标随用户触控手势移动而移动；

移动终端根据所述触控指令向多屏适配器发送触控点击事件，包括：移动终端在用户触控手势结束时，向多屏适配器发送触控点击事件。

5.一种利用移动终端触摸屏操控多屏适配器的方法，其特征在于，包括：

多屏适配器将所显示的图形界面的属性值提供给移动终端；

多屏适配器接收移动终端基于触摸屏上同步显示的所述图形界面发来的远程操控指令，所述触摸屏上同步显示的所述图形界面是根据所述属性值进行显示；

多屏适配器执行所述远程操控指令。

6.如权利要求5所述的方法，其特征在于，多屏适配器将所显示的图形界面的属性值提供给移动终端之前，还包括：多屏适配器在所述图形界面的窗口视图初始化或发生变化时，从窗口顶级视图递归遍历整个视图树，找出显示相关属性数据，根据所述显示相关属性数据生成可扩展标记语言XML文件和关联的资源文件；

多屏适配器将所显示的图形界面的属性值提供给移动终端，包括：多屏适配器将所述XML文件和关联的资源文件提供给移动终端。

7.如权利要求5所述的方法，其特征在于，多屏适配器接收移动终端基于触摸屏上同步显示的所述图形界面发来的远程操控指令，包括：

多屏适配器接收移动终端根据用户在所述触摸屏上对所述图形界面的触控指令发来的触控点击事件；

多屏适配器执行所述远程操控指令，包括：多屏适配器将所述触控点击事件注入窗口管理系统，摸拟触控操作。

8.如权利要求7所述的方法，其特征在于，若所述图形界面的窗口视图只显示大小和位置，则所述触控指令在所述触摸屏上的触控位置，在多屏适配器所显示的图形界面对应位置显示一触控位置提示图标，所述触控位置提示图标随用户触控手势移动而移动；

多屏适配器接收所述触控点击事件，包括：多屏适配器在用户触控手势结束时，接收移动终端发来的所述触控点击事件。

9.一种利用移动终端触摸屏操控多屏适配器的装置，其特征在于，包括：

接收模块，用于接收多屏适配器所显示的图形界面的属性值；

显示模块，用于根据所述属性值，在移动终端触摸屏上同步显示所述图形界面；

操控模块，用于基于所述触摸屏上显示的所述图形界面，远程操控多屏适配器。

10.如权利要求9所述的装置，其特征在于，所述接收模块具体用于：

接收所述图形界面的窗口视图属性及关联资源文件；

所述装置还包括：

存储模块，用于存储关联资源文件中的PNG和/或JPEG文件。

11.如权利要求9所述的装置，其特征在于，所述显示模块具体用于：

基于所述属性值，根据触摸屏窗口和多屏适配器窗口的像素比值进行缩放，在触摸屏上绘制或更新所述图形界面的窗口视图；

所述操控模块包括：

接收单元，用于接收用户在所述触摸屏上对所述图形界面的触控指令；

发送单元，用于根据所述触控指令生成触控点击事件，在根据触摸屏窗口和多屏适配器窗口的像素比值对触控点击事件进行缩放后，向多屏适配器发送触控点击事件。

12.如权利要求11所述的装置，其特征在于，若所述图形界面的窗口视图只显示大小和位置，则所述触控指令在所述触摸屏上的触控位置，在多屏适配器所显示的图形界面对应位置显示一触控位置提示图标，所述触控位置提示图标随用户触控手势移动而移动；

所述发送单元具体用于在用户触控手势结束时，向多屏适配器发送触控点击事件。

13.一种利用移动终端触摸屏操控多屏适配器的装置，其特征在于，包括：

提供模块，用于将多屏显示器所显示的图形界面的属性值提供给移动终端；

接收模块，用于接收移动终端基于触摸屏上同步显示的所述图形界面发来的对多屏显示器的远程操控指令，所述触摸屏上同步显示的所述图形界面是根据所述属性值进行显示；

执行模块，用于执行所述远程操控指令。

14.如权利要求13所述的装置，其特征在于，还包括：

生成模块，用于在所述图形界面的窗口视图初始化或发生变化时，从窗口顶级视图递归遍历整个视图树，找出显示相关属性数据，根据所述显示相关属性数据生成可扩展标记语言XML文件和关联的资源文件；

所述提供模块具体用于：将所述XML文件和关联的资源文件提供给移动终端。

15.如权利要求13所述的装置，其特征在于，还包括：

显示模块，用于在所述图形界面的窗口视图只显示大小和位置时，对于所述触控指令在所述触摸屏上的触控位置，在多屏适配器所显示的图形界面对应位置显示一触控位置提示图标，所述触控位置提示图标随用户触控手势移动而移动；

所述接收模块具体用于：在用户触控手势结束时，接收移动终端发来的所述触控点击事件；

所述执行模块具体用于将所述触控点击事件注入窗口管理系统，摸拟触控操作。