CN102118397A - 一种基于手机的远程会议通信方法和系统 - Google Patents

Abstract

本发明提供一种基于手机的远程会议通信系统，包括：一个或者多个手机和VPN服务器，其中，该一个或者多个手机连接VPN服务器，会议组织者选择其中一个手机作为被访问手机，在被访问手机上运行远程会议所需进行的应用程序；其它手机通过发送远程控制命令来获得被访问手机的屏幕内容信息，通过发送控制信息来修改应用程序的内容，实现网络会议的功能。

Description

一种基于手机的远程会议通信方法和系统

技术领域

本申请涉及移动终端设备的远程访问技术，更具体地，本发明涉及一种基于手机的远程会议通信方法和系统。其中，本发明所涉及的移动通信终端设备包括但不限于手持电话、智能电话、便携式娱乐设备等。

背景技术

随着诸如手机的移动通信终端的性能的提高，越来越多的移动应用在移动通信终端上涌现出来，使得移动通信终端不仅仅是一个语音通信的工具。同时，各类专用于手机的移动办公应用程序的出现，手机开始作为类似于笔记本的办公设备，更多的应用于企业的日常工作中，使得越来越多的企业为其员工配备各种智能手机，安装各种日常的办公软件，来用于移动办公。在现代企业中，手机发展的趋势将会慢慢取代传统的笔记本电脑，成为企业的基本办公设备；并且由于手机的移动性使用，使得手机成为企业IT部门需要远程管理、远程支持和远程维护的一项重要办公设备。

例如，当企业员工的手机在出差时出现故障，企业的IT部门需要对员工提供有效的支持，或者企业员工之间需要进行互相支持和管理。另外，由于手机不同于笔记本的通信功能，如何使用手机进行远程演示，使得手机远程协助和控制成为一个迫切的需求。此外，在企业中，在手机性能高度提高的情况下，手机不仅可以进行各类音视频通信，如何通过手机有效的进行内部网络会议也成为一个新的需求。

在现有技术中，远程管理是网络通信的一种特殊方式，远程管理是将用户正在使用的终端设备变成要在其上登录的某一远程主机的仿真远程终端。利用远程登录，用户可以通过自己使用的终端设备和其登录的远程设备相连，进而管理、维护和控制该远程设备的硬件资源、软件资源以及数据资源。

随着3G时代的到来，使用手机进行日程办公和网络访问变得更加方便和快捷。对于PC机，它们互相之间进行远程登录和维护的技术已经成熟，对于PC机，其设备和外设的参数和型号标准化，不存在实质的差别，可以进行直接的网络远程控制，并且远程协助和网络会议等应用所需要使用远程控制技术也已经较为成熟。

但是，对于企业的手机应用方面，由于手机的外观、屏幕大小、键盘分布、分辨率、是否触摸都不同，如何有效的对企业的各种手机进行统一的维护，日益变为一个重要的挑战。目前，在手机领域并没有一个有效的远程控制技术，如果照搬计算机之间的远程管理技术，在手机上则会遇到以下几个严重的问题：1)、无法在移动网络中定位手机；2)、在公网上无法保护用户的隐私；3)、难以处理不同手机间的适配问题；4)、无法在移动网络中有效传输数据。

发明内容

为克服现有技术中的上述缺陷，本发明提供一种基于手机的远程会议通信方法和系统。

根据本发明的一个方面，提供了一种基于手机的远程会议通信方法，包括：步骤10)、所有参加会议的手机都连接VPN服务器，会议组织者选择其中一个手机作为被访问手机，在被访问手机上运行远程会议所需进行的应用程序；步骤20)、其它手机通过发送远程控制命令来获得被访问手机的屏幕内容信息，通过发送控制信息来修改应用程序的内容，实现网络会议的功能。

根据本发明的另一个方面，提供一种基于手机的远程会议通信系统，包括：一个或者多个手机和VPN服务器，其中，该一个或者多个手机连接VPN服务器，会议组织者选择其中一个手机作为被访问手机，在被访问手机上运行远程会议所需进行的应用程序；其它手机通过发送远程控制命令来获得被访问手机的屏幕内容信息，通过发送控制信息来修改应用程序的内容，实现网络会议的功能。

本申请的系统和方法可以实现手机远程控制的技术，这项技术可以用于手机远程协助和基于手机的网络会议，实现一个有效的手机远程控制技术，提供高效的客户服务和技术支持。通过手机远程控制技术，能够有效的对企业员工的手机进行技术支持，降低维护成本。通过手机远程控制技术，可以实现基于手机的远程网络会议，提高企业的工作效率。

附图说明

图1为根据本发明的远程控制系统中PC端对手机端控制的流程图；

图2为根据本发明的远程控制系统中手机端相互控制的流程图；

图3示出Nokia手机端根据键盘列表在界面上生成虚拟键盘的示意图。

如图所示，为了能明确实现本发明的实施例的结构或者方法，在图中标注了特定的流程和应用设备，但这仅为示意需要，并非意图将本发明限定在该特定程序和环境中，根据具体需要，本领域的普通技术人员可以将这些环境进行调整、修改，所进行的调整和修改仍然包括在后附的权利要求的范围中。

具体实施方式

下面结合附图和具体实施例对本发明提供的一种基于手机的远程会议通信方法和系统进行详细描述。

在以下的描述中，将描述本发明的多个不同的方面，然而，对于本领域内的普通技术人员而言，可以仅仅利用本发明的一些或者全部结构或者流程来实施本发明。为了解释的明确性而言，阐述了特定的数目、配置和顺序，但是很明显，在没有这些特定细节的情况下也可以实施本发明。在其他情况下，为了不混淆本发明，对于一些众所周知的特征将不再进行详细阐述。

总的来说，本发明的一个实施例提供一种移动通信终端的远程控制系统和方法，包括：步骤10)、利用虚拟专用网(VPN)技术来定位一个或者多个移动通信终端；步骤20)、在一个或者多个移动通信终端上通过键盘映射和匹配来进行远程控制服务。移动通信终端包括但不限于手持电话、智能电话、便携式娱乐设备等，该移动通信终端的操作系统包括诸如塞班、安卓的各种嵌入式操作系统。

具体地，在步骤10)中，基于诸如L2TP、PPTP或者IPSec的VPN协议，在手机上布置VPN的客户端。该一个或者多个手机客户端和作为服务器的PC机组成的局域网在公网上共享一个独立的IP地址，VPN的服务器或者路由器在这个IP地址上监听VPN连接，VPN的服务器或者路由器运行的VPN协议必须与手机客户端一致。

具体地，用来协助手机远程管理的PC机通过局域网启动PC上的客户端，连接公网上的VPN服务器或者路由器。连接VPN服务器后，该PC获得了一个虚拟局域网的IP地址，该IP地址就是该一个或者多个手机客户端和作为服务器的PC机组成的局域网在公网上共享的IP地址。其中，设置VPN的服务器或者路由器运行的VPN协议与PC机以及手机客户端的VPN协议一致。

进一步，在手机上，启动手机上的VPN客户端，通过移动网络(诸如GPRS或者3G)连接到公网上的VPN服务器或者路由器。连接VPN服务器后，手机获得了一个虚拟局域网的IP地址，该IP地址就是该一个或者多个手机客户端和作为服务器的PC机组成的局域网在公网上共享的IP地址。从而，用于控制手机的PC和手机就位于一个虚拟的局域网内，PC就可以通过虚拟局域网访问到该一个或者多个手机。

在步骤20)中，在手机上或者手机之间进行远程控制服务。具体地，手机上启动远程控制服务程序，该远程控制服务程序监听一个特定端口。该特定端口根据协议的不同来设定，使用空闲的端口号进行。由于用于控制的PC和手机位于一个虚拟局域网中，因此用于控制的PC可以访问到手机的端口。用于控制的PC向这个端口发送特定的远程控制命令，从而实现远程控制的功能。

其中，远程控制服务程序可以实现的功能包括：通过使用相应手机平台上Socket编程接口，绑定和侦听特定的端口；解析来自端口的远程控制命令，执行相应的远程控制命令。

其中，远程控制命令包括：手机发送屏幕内容；手机执行键盘和点击命令，点击命令主要用于触摸屏的手机。其中，首先双方协商屏幕内容的格式和按键的格式。

其中，PC发送协商请求给手机端；手机端运行远程控制服务程序，将自身的屏幕大小、分辨率等信息返回给PC机，PC机将手机端的屏幕格式和键盘格式进行协商和匹配定义；之后，在手机端的屏幕内容发生变化时或者定时扫描发现帧内容不同时，手机端将其屏幕内容发送给PC机；PC机根据屏幕内容做出键盘控制和点击控制的响应，将用于控制手机端的键盘控制或者点击事件发送给该手机端，手机端执行相应的事件处理；PC机将帧缓存更新请求发送给手机端，手机端将屏幕响应返回给PC机，从而实现PC机对手机端的远程控制服务。

其中，远程控制服务程序包括：在协议协商完成之后，实现对屏幕缓存的访问功能，将手机屏幕内容发送到用于控制的PC上；在PC机上实现手机的模拟按键和点击命令，将控制命令转换为真正的手机上的按键和点击；协议交换，协商相应的格式。

手机上远程控制服务程序，包括：绑定上述特定的端口并监听；如果接收到消息，解析这个消息；其中，如果是访问手机发送的屏幕内容，则访问屏幕缓存(Framebuffer)，将手机屏幕内容发送给用于控制的PC；如命令手机执行键盘和点击命令，将控制命令转换为真正的手机上的按键和点击命令，进而在手机上执行。

其中，PC端发送协商请求，格式如下：

字节数	类型	描述
			1	U8	命令类型(negotiation)

手机端返回的内容诸如手机端的分辨率、像素的格式以及像素的深度等。

字节数	类型	描述
			1	U8	命令类型(server info)
1	U8	每像素位数
			1	U8	深度
1	U8	大小字节标志
			2	U16	手机屏幕宽度
2	U16	手机屏幕高度
			1	U8	采用的帧缓存的格式(如RGB，RGBA等)
1	U8	采用的压缩算法

为了减少网络传输的数据量，手机端每次传送的屏幕内容只是传送当前屏幕与上次传送的屏幕内容不相同的区域，同时传输前需要先用压缩算法压缩。

其中，屏幕内容格式如下所示。

字节数	类型	描述
			1	U8	命令类型(Framebuffer update)
2	U8	矩形个数
			1	U8	Padding
2	U16	宽度
			2	U16	高度
2	U16	x-轴的位置
			2	U16	y-轴的位置
4	U32	后续屏幕内容的长度

不定		实际的屏幕内容数据
			....	.....	.....
2	U16	宽度
			2	U16	高度
2	U16	x-轴的位置
			2	U16	y-轴的位置
4	U32	后续屏幕内容的长度
			不定		实际的屏幕内容数据

“矩形个数”指明包含有多少个被修改过的矩形。每个矩形内部的数据包括：高度、宽度、x和y的位置以及屏幕内容长度及屏幕的数据。另外，由于传输可能出现网络错误，有时候需要从PC端直接发起一个请求，要求手机端传回帧缓存的内容。其格式如下：

字节数	类型	描述
			1	U8	命令类型(Framebuffer update request)
2	U16	宽度
			2	U16	高度
2	U16	x-轴的位置
			2	U16	y-轴的位置

键盘及点击事件处理由一个手机端产生，并且由PC发送给另一个手机端，或者由PC机产生，发送给手机端。其中，键盘事件的格式如下：

字节数	类型	描述
			1	U8	命令类型(key event)
1	U8	按键状态：按下或者松开
			4	U32	按键的值

鼠标事件的格式如下：

字节数	类型	描述
			1	U8	命令类型(point event)
1	U8	按键状态：按下或者松开，滑动
			2	U16	X位置
2	U16	Y位置

手机间的互相控制，在帧缓存的处理上与PC端控制手机类似。主要的困难是如何处理不同手机平台间的键盘映射以及键盘手机对触摸屏手机的控制。下面以nokia键盘版手机控制android触摸屏手机为例，说明如何实现手机间的相互控制。但可以理解，本发明的映射和相互控制可以包括键盘类移动通信终端和触摸屏类移动通信终端。

该控制方法包括：定义一个平台独立的按键格式，平台独立的按键格式包括目前所有平台手机的按键，并对这些按键进行编码；在手机相互控制时，协商完毕后，增加一个键盘布局协商的阶段用于手机的相互控制，如图2所示。

其中，一个手机端对另一个手机端进行远程控制时，第一手机端将自身的屏幕和键盘格式发送给PC机，PC将这些格式定义保存后，发送协商请求给第二手机端；第二手机端运行远程控制服务程序，将自身的屏幕大小、分辨率等信息返回给PC机；第一手机端将键盘布局命令发送给PC机，第二手机端将支持的键盘列表返回给PC机，PC机将第一手机端和第二手机端的屏幕格式和键盘格式进行协商和匹配定义，在第一手机端生成一个虚拟键盘；之后，在第二手机端的屏幕内容发生变化时或者定时扫描发现帧内容不同时，第二手机端将其屏幕内容发送给PC机；PC机将这些屏幕内容发送给第一手机端，第一手机端根据屏幕内容做出键盘控制和点击控制的响应并且发送给PC机；PC机将第一手机端用于控制第二手机端的键盘控制或者点击事件发送给该第二手机端，第二手机端执行相应的事件处理；PC机将帧缓存更新请求发送给第二手机端，第二手机端将屏幕响应返回给PC机并且传送给第一手机端，从而实现第一手机端对第二手机端的远程控制服务。

其中，Android手机端返回它所支持的所有键盘列表，Nokia手机端根据键盘列表在界面上生成一个虚拟键盘。如下表，示出键盘的定义：

Nokia手机端发送键盘布局命令，格式如下：

字节数	类型	描述
			1	U8	键盘布局命令(key event layout)

Android手机端则返回它所支持的所有键盘列表，格式如下：

字节数	类型	描述
			1	U8	键盘列表key list
2	U16	Key numbers

1	U8	Padding
			4	U32	0x0100
4	U32	0x0101
			4	U32	0x0102
4	U32	0x0103
			4	U32	0x0104
4	U32	0x0105
			4	U32	0x0106
4	U32	0x0107
			4	U32	0x0108
4	U32	0x0109

Nokia手机端根据键盘列表在界面上生成一个虚拟键盘，如图3所示。Nokia端屏幕的上半部用于显示Android端屏幕内容，底部则是虚拟键盘的按钮，用户通过把按压这些按钮来控制Android端。对于触摸事件的模拟，通过ANDROID_KEY_UP，ANDROID_KEY_DOWN，ANDROID_KEY_LEFT，ANDROID_KEY_RIGHT以及ANDROID_KEY_OK键来模拟对触摸屏的控制。

对触摸屏按压的控制包括：在nokia端上半部分(显示Android端屏幕内容的部分)，在屏幕生成虚拟的光标(叠加在android屏幕内容上)，通过按上下左右这四个按钮来移动虚拟光标，当用户压下ANDROID_OK键的时候，Nokia端获取虚拟光标的位置，然后，生成一个鼠标按压的事件发送给android端。发送的格式如下：

字节数	类型	描述
			1	U8	命令类型(point event)
1	U8	按键状态：按下
			2	U16	X位置
2	U16	Y位置

对触摸屏滑动的控制包括：当用户长按”上下左右”或者双击，Nokia端取得当前虚拟光标的位置，发送一个鼠标滑动的命令给Android系统。发送的格式如下：

字节数	类型	描述
			1	U8	命令类型(point event)
1	U8	按键状态：滑动
			2	U16	X位置
2	U16	Y位置

以上描述了手机远程控制技术的实现，但以上实现并不是一个有效优化的实现，它未考虑如何保护用户的隐私，通过以下的一些优化措施来改进。远程控制技术的优化实现包括：保护用户的隐私，所有的数据传输都需要加密。

另外，优化的手段包括：在手机服务程序启动时，弹出一个可供用户设置的界面，界面中列出了当前运行的所有程序，由用户决定那些程序允许远程控制。在手机服务程序解析命令前，如果当前前台运行的程序是用户设置的不允许远程控制的程序，则不执行相应的命令。

另外，由于传统的2G的GPRS网络传输速度较慢，从而使传送屏幕内容成为瓶颈，影响用户的体验。在2G网络上要采取的优化：手机上获取屏幕内容信息后，降低屏幕内容的色彩值。例如，如果屏幕颜色为32位(真彩色)，则转换16为(增强色)后传送，从而减少传送的数据量。

手机上缓存上次的屏幕内容，在传送前比较当前屏幕和上次屏幕内容的差异，只传送差异内容。PC端获得后，根据差异内容和上次接收到的屏幕内容算出当前屏幕内容。所有的传送内容均采用压缩技术。

在另一个实施例中，远程协助可以直接使用上述远程控制技术来实现。当企业的员工需要远程协助的时候，员工首先连接到VPN服务器，然后通知企业的IT部门，告诉手机的虚拟局域网的IP地址。接着，企业的IT部门也连接到VPN服务器。最后，员工打开手机上的远程服务程序，企业的IT部门就可以对企业员工的手机进行远程协助。对于和上述远程控制服务程序相同的或者相似的技术实现，此处不再赘述。

在又一个实施例中，网络会议也可以使用上述远程控制技术来实现，实现的步骤如下：所有参加会议的手机都连接VPN服务器；会议组织者选择一个手机，在上面运行远程服务程序，然后这个手机上可以运行诸如PPT、白板这样的程序；其它手机就可以通过发送远程控制命令来获得PPT或者白板的屏幕内容信息，还可以通过发送按键等控制信息来修改PPT或者白板的内容，从而实现网络会议的功能。对于和上述远程控制服务程序相同的或者相似的技术实现，此此实施例中将不再赘述。

以上虽然能够实现网络会议的功能，但是在实际中有可能出现用户体验不好的情况。因为各个手机的分辨率很有可能不同，从而导致屏幕内容在不同手机上的显示效果不好。不同手机间的屏幕适配问题采取的解决办法：增加一个代理服务器，该服务器也连入VPN网络。当手机连入VPN网络时，同时将自己的分辨率提交给代理服务器。代理服务器记录下每个手机的分辨率同时分配一个唯一的ID给各个手机。如果是被控制手机连入VPN网络，还需要告诉代理服务器该手机是被控制手机。其他手机对被控制手机的访问都要通过代理服务器转发，被控制手机不是直接将屏幕内容发给其他手机，而是发给代理服务器。

之后，代理服务器收到被控制手机的屏幕内容后，将当前的被控制手机的屏幕内容根据其他手机的分辨率格式定义生成相应的屏幕内容，并与手机的ID号关联起来。

其他手机要访问被控制手机的屏幕内容时，提交自己的ID号给代理服务器，然后，代理服务器根据这个ID号查找到相应的分辨率下生成的屏幕内容发送给该手机。从而实现一个有效的手机远程控制技术，能够有效的对企业员工的手机进行技术支持，降低维护成本，实现基于手机的远程网络会议，提高企业的工作效率。

其中，被访问手机上启动远程控制服务程序，通过使用相应手机平台上Socket编程接口，绑定和侦听特定的端口；解析来自端口的远程控制命令，执行相应的远程控制命令；用于控制的PC向该端口发送特定的远程控制命令，实现远程控制。其他手机端将自身的屏幕和键盘格式发送给VPN服务器，VPN服务器将这些格式定义保存后，发送协商请求给被访问手机端；被访问手机端运行远程控制服务程序，将自身的屏幕大小、分辨率等信息返回给VPN服务器；其他手机端将键盘布局命令发送给VPN服务器，被访问手机端将支持的键盘列表返回给VPN服务器，VPN服务器将手机端的屏幕格式和键盘格式进行协商和匹配定义，其他手机端根据键盘列表在界面上生成一个虚拟键盘；在被访问手机端的屏幕内容发生变化时或者定时扫描发现帧内容不同时，被访问手机端将其屏幕内容发送给VPN服务器；VPN服务器将这些屏幕内容发送给其他手机端，其他手机端根据屏幕内容做出键盘控制和点击控制的响应并且发送给VPN服务器；VPN服务器将其他手机端用于控制被访问手机端的键盘控制或者点击事件发送给该被访问手机端，被访问手机端执行相应的事件处理。

其中，其它手机端绑定特定的端口并监听；如果接收到消息，解析这个消息；其中，如果是被访问手机发送的屏幕内容，则访问屏幕缓存，将手机屏幕内容发送给VPN服务器；如命令手机执行键盘和点击命令，将控制命令转换为真正的手机上的按键和点击命令，在手机上执行。其中，手机端每次仅传送当前屏幕与上次传送的屏幕内容不相同的区域；传输前需要先用压缩算法压缩。

对于其他手机端根据屏幕内容做出键盘控制和点击控制的响应并且发送给VPN服务器；其中对于触摸事件的模拟，通过ANDROID_KEY_UP，ANDROID_KEY_DOWN，ANDROID_KEY_LEFT，ANDROID_KEY_RIGHT以及ANDROID_KEY_OK键来模拟对触摸屏的控制。对于触摸屏按压的控制，其中在第一手机端上半部分的屏幕生成虚拟的光标，通过按上下左右这四个按钮来移动虚拟光标，当用户压下ANDROID_OK键的时候，第一手机端获取虚拟光标的位置，生成鼠标按压的事件发送给第二手机端。对触摸屏滑动的控制包括：当用户长按”上下左右”或者双击，第一手机端取得当前虚拟光标的位置，发送一个鼠标滑动的命令给第二手机端。

本发明的又一个实施例提供一种移动通信终端的远程控制系统，该系统包括一个或者多个移动通信终端和服务器。其中，一个或者多个移动通信终端和服务器利用虚拟专用网(VPN)技术来定位在所组成的局域网在公网上共享的IP地址下。一个或者多个移动通信终端通过服务器基于键盘映射和匹配来进行远程控制服务。移动通信终端包括但不限于手持电话、智能电话、便携式娱乐设备等，该移动通信终端的操作系统包括诸如塞班、安卓的各种嵌入式操作系统。

具体地，基于诸如L2TP、PPTP或者IPSec的VPN协议，在手机上布置VPN的客户端。该一个或者多个手机客户端和作为服务器的PC机组成的局域网在公网上共享一个独立的IP地址，VPN的服务器或者路由器在这个IP地址上监听VPN连接，VPN的服务器或者路由器运行的VPN协议必须与手机客户端一致。

具体地，用来协助手机远程管理的PC机用于通过局域网启动PC上的客户端，连接公网上的VPN服务器或者路由器。连接VPN服务器后，该PC获得了一个虚拟局域网的IP地址，该IP地址就是该一个或者多个手机客户端和作为服务器的PC机组成的局域网在公网上共享的IP地址。其中，设置VPN的服务器或者路由器运行的VPN协议与PC机以及手机客户端的VPN协议一致。

进一步，在手机上，启动手机上的VPN客户端，通过移动网络(诸如GPRS或者3G)连接到公网上的VPN服务器或者路由器。连接VPN服务器后，手机获得了一个虚拟局域网的IP地址，该IP地址就是该一个或者多个手机客户端和作为服务器的PC机组成的局域网在公网上共享的IP地址。从而，用于控制手机的PC和手机就位于一个虚拟的局域网内，PC就可以通过虚拟局域网访问到该一个或者多个手机。

服务器用于在手机上或者手机之间进行远程控制服务。具体地，手机上启动远程控制服务程序，该远程控制服务程序监听一个特定端口。该特定端口根据协议的不同来设定，使用空闲的端口号进行。由于用于控制的PC和手机位于一个虚拟局域网中，因此用于控制的PC可以访问到手机的端口。用于控制的PC向这个端口发送特定的远程控制命令，从而实现远程控制的功能。

其中，远程控制服务程序可以实现的功能包括：通过使用相应手机平台上Socket编程接口，绑定和侦听特定的端口；解析来自端口的远程控制命令，执行相应的远程控制命令。

其中，远程控制命令包括：手机发送屏幕内容；手机执行键盘和点击命令，点击命令主要用于触摸屏的手机。其中，首先双方协商屏幕内容的格式和按键的格式。

其中，PC发送协商请求给手机端；手机端运行远程控制服务程序，将自身的屏幕大小、分辨率等信息返回给PC机，PC机将手机端的屏幕格式和键盘格式进行协商和匹配定义；之后，在手机端的屏幕内容发生变化时或者定时扫描发现帧内容不同时，手机端将其屏幕内容发送给PC机；PC机根据屏幕内容做出键盘控制和点击控制的响应，将用于控制手机端的键盘控制或者点击事件发送给该手机端，手机端执行相应的事件处理；PC机将帧缓存更新请求发送给手机端，手机端将屏幕响应返回给PC机，从而实现PC机对手机端的远程控制服务。

其中，远程控制服务程序包括：在协议协商完成之后，实现对屏幕缓存的访问功能，将手机屏幕内容发送到用于控制的PC上；在PC机上实现手机的模拟按键和点击命令，将控制命令转换为真正的手机上的按键和点击；协议交换，协商相应的格式。

手机上远程控制服务程序，包括：绑定上述特定的端口并监听；如果接收到消息，解析这个消息；其中，如果是访问手机发送的屏幕内容，则访问屏幕缓存(Framebuffer)，将手机屏幕内容发送给用于控制的PC；如命令手机执行键盘和点击命令，将控制命令转换为真正的手机上的按键和点击命令，进而在手机上执行。

其中，PC端发送协商请求，格式如上所述。手机端返回的内容诸如手机端的分辨率、像素的格式以及像素的深度等，格式如上所述。为了减少网络传输的数据量，手机端每次传送的屏幕内容只是传送当前屏幕与上次传送的屏幕内容不相同的区域，同时传输前需要先用压缩算法压缩。其中，屏幕内容格式同样如上所述。

另外，由于传输可能出现网络错误，有时候需要从PC端直接发起一个请求，要求手机端传回帧缓存的内容。键盘及点击事件处理由一个手机端产生，并且由PC发送给另一个手机端，或者由PC机产生，发送给手机端。

手机间的互相控制，在帧缓存的处理上与PC端控制手机类似。主要的困难是如何处理不同手机平台间的键盘映射以及键盘手机对触摸屏手机的控制。下面以nokia键盘版手机控制android触摸屏手机为例，说明如何实现手机间的相互控制。但可以理解，本发明的映射和相互控制可以包括键盘类移动通信终端和触摸屏类移动通信终端。

该控制包括：定义一个平台独立的按键格式，平台独立的按键格式包括目前所有平台手机的按键，并对这些按键进行编码；在手机相互控制时，协商完毕后，增加一个键盘布局协商的阶段用于手机的相互控制，如图2所示。

其中，一个手机端对另一个手机端进行远程控制时，第一手机端将自身的屏幕和键盘格式发送给PC机，PC将这些格式定义保存后，发送协商请求给第二手机端；第二手机端运行远程控制服务程序，将自身的屏幕大小、分辨率等信息返回给PC机；第一手机端将键盘布局命令发送给PC机，第二手机端将支持的键盘列表返回给PC机，PC机将第一手机端和第二手机端的屏幕格式和键盘格式进行协商和匹配定义，在第一手机端生成一个虚拟键盘；之后，在第二手机端的屏幕内容发生变化时或者定时扫描发现帧内容不同时，第二手机端将其屏幕内容发送给PC机；PC机将这些屏幕内容发送给第一手机端，第一手机端根据屏幕内容做出键盘控制和点击控制的响应并且发送给PC机；PC机将第一手机端用于控制第二手机端的键盘控制或者点击事件发送给该第二手机端，第二手机端执行相应的事件处理；PC机将帧缓存更新请求发送给第二手机端，第二手机端将屏幕响应返回给PC机并且传送给第一手机端，从而实现第一手机端对第二手机端的远程控制服务。

其中，Android手机端返回它所支持的所有键盘列表，Nokia手机端根据键盘列表在界面上生成一个虚拟键盘。Nokia手机端发送键盘布局命令。Android手机端则返回它所支持的所有键盘列表。Nokia手机端根据键盘列表在界面上生成一个虚拟键盘，如图3所示。Nokia端屏幕的上半部用于显示Android端屏幕内容，底部则是虚拟键盘的按钮，用户通过把按压这些按钮来控制Android端。对于触摸事件的模拟，通过ANDROID_KEY_UP，ANDROID_KEY_DOWN，ANDROID_KEY_LEFT，ANDROID_KEY_RIGHT以及ANDROID_KEY_OK键来模拟对触摸屏的控制。

对触摸屏按压的控制包括：在nokia端上半部分(显示Android端屏幕内容的部分)，在屏幕生成虚拟的光标(叠加在android屏幕内容上)，通过按上下左右这四个按钮来移动虚拟光标，当用户压下ANDROID_OK键的时候，Nokia端获取虚拟光标的位置，然后，生成一个鼠标按压的事件发送给android端。

对触摸屏滑动的控制包括：当用户长按”上下左右”或者双击，Nokia端取得当前虚拟光标的位置，发送一个鼠标滑动的命令给Android系统。以上描述了手机远程控制技术的实现，但以上实现并不是一个有效优化的实现，它未考虑如何保护用户的隐私，通过以下的一些优化措施来改进。远程控制技术的优化实现包括：保护用户的隐私，所有的数据传输都需要加密。

另外，优化的手段包括：在手机服务程序启动时，弹出一个可供用户设置的界面，界面中列出了当前运行的所有程序，由用户决定那些程序允许远程控制。在手机服务程序解析命令前，如果当前前台运行的程序是用户设置的不允许远程控制的程序，则不执行相应的命令。

另外，由于传统的2G的GPRS网络传输速度较慢，从而使传送屏幕内容成为瓶颈，影响用户的体验。在2G网络上要采取的优化：手机上获取屏幕内容信息后，降低屏幕内容的色彩值。例如，如果屏幕颜色为32位(真彩色)，则转换16为(增强色)后传送，从而减少传送的数据量。

手机上缓存上次的屏幕内容，在传送前比较当前屏幕和上次屏幕内容的差异，只传送差异内容。PC端获得后，根据差异内容和上次接收到的屏幕内容算出当前屏幕内容。所有的传送内容均采用压缩技术。

最后应说明的是，以上实施例仅用以描述本发明的技术方案而不是对本技术方法进行限制，本发明在应用上可以延伸为其他的修改、变化、应用和实施例，并且因此认为所有这样的修改、变化、应用、实施例都在本发明的精神和教导范围内。

Claims (18)

1.一种基于手机的远程会议通信方法，包括：

步骤10)、所有参加会议的手机都连接VPN服务器，会议组织者选择其中一个手机作为被访问手机，在被访问手机上运行远程会议所需进行的应用程序；

步骤20)、其它手机通过发送远程控制命令来获得被访问手机的屏幕内容信息，通过发送控制信息来修改应用程序的内容，实现网络会议的功能。

2.权利要求1所述的方法，其中，步骤10)还包括不同手机间的屏幕适配：

增加一个代理服务器，该服务器也连入VPN网络，当手机连入VPN网络时，将自己的分辨率提交给代理服务器，代理服务器记录下每个手机的分辨率并且分配一个唯一的ID给各个手机；

如果是被访问手机连入VPN网络，告诉代理服务器该手机是被访问手机；其他手机对被访问手机的访问都要通过代理服务器转发，被访问手机将屏幕内容发给代理服务器；

代理服务器收到被访问手机的屏幕内容后，将当前的被访问手机的屏幕内容根据其他手机的分辨率格式定义生成相应的屏幕内容，并与手机的ID号关联起来。

3.权利要求2所述的方法，其中，步骤20)还包括：

其他手机要访问被访问手机的屏幕内容时，提交ID号给代理服务器；

代理服务器根据ID号查找到相应的分辨率下生成的屏幕内容发送给该其他手机。

4.权利要求1所述的方法，其中，步骤10)中，基于诸如L2TP、PPTP或者IPSec的VPN协议，在所有手机上布置VPN的客户端；该一个或者多个手机端在公网上共享一个独立的IP地址，VPN的服务器或者路由器在该IP地址上监听VPN连接。

5.权利要求1所述的方法，其中，步骤10)中，被访问手机通过使用相应手机平台上Socket编程接口，绑定和侦听特定的端口；解析来自端口的远程控制命令，执行相应的远程控制命令；用于控制的PC向该端口发送特定的远程控制命令，实现远程控制。

6.权利要求4所述的方法，其中，步骤20)进一步包括：

步骤210)、其他手机端将自身的屏幕和键盘格式发送给VPN服务器，VPN服务器将这些格式定义保存后，发送协商请求给被访问手机端；被访问手机端运行远程控制服务程序，将自身的屏幕大小、分辨率等信息返回给VPN服务器；

步骤220)、其他手机端将键盘布局命令发送给VPN服务器，被访问手机端将支持的键盘列表返回给VPN服务器，VPN服务器将手机端的屏幕格式和键盘格式进行协商和匹配定义，其他手机端根据键盘列表在界面上生成一个虚拟键盘；

步骤230)、在被访问手机端的屏幕内容发生变化时或者定时扫描发现帧内容不同时，被访问手机端将其屏幕内容发送给VPN服务器；VPN服务器将这些屏幕内容发送给其他手机端，其他手机端根据屏幕内容做出键盘控制和点击控制的响应并且发送给VPN服务器；

步骤240)、VPN服务器将其他手机端用于控制被访问手机端的键盘控制或者点击事件发送给该被访问手机端，被访问手机端执行相应的事件处理。

7.权利要求6所述的方法，其中，步骤210)还包括：其它手机端绑定特定的端口并监听；解析所接收到的消息；其中，如果是被访问手机发送的屏幕内容，则访问屏幕缓存，将手机屏幕内容发送给VPN服务器；如命令手机执行键盘和点击命令，将控制命令转换为真正手机上的按键和点击命令，在手机上执行。

8.权利要求6所述的方法，其中，步骤230)还包括：手机端每次仅传送当前屏幕与上次传送的屏幕内容不相同的区域；传输前需要先用压缩算法压缩。

9.权利要求6所述的方法，其中，步骤240)还包括：对于触摸事件的模拟，通过ANDROID_KEY_UP，ANDROID_KEY_DOWN，ANDROID_KEY_LEFT，ANDROID_KEY_RIGHT以及ANDROID_KEY_OK键来模拟对触摸屏的控制。

10.权利要求6所述的方法，其中，步骤240)还包括：对于触摸屏按压的控制，其中在其他手机端上半部分的屏幕生成虚拟的光标，通过按上下左右这四个按钮来移动虚拟光标，当用户压下ANDROID_OK键的时候，其他手机端获取虚拟光标的位置，生成鼠标按压的事件发送给被访问手机端。

11.权利要求6所述的方法，其中，步骤240)还包括：对触摸屏滑动的控制包括：当用户长按”上下左右”或者双击，其他手机端取得当前虚拟光标的位置，发送一个鼠标滑动的命令给被访问手机端。

12.权利要求1-11的其中一个所述的方法，其中，在被访问手机服务程序启动时，弹出一个可供用户设置的界面，界面中列出了当前运行的所有程序，由用户决定那些程序允许远程控制。

13.权利要求1-11的其中一个所述的方法，其中，对于2G网络，手机上获取屏幕内容信息后，降低屏幕内容的色彩值后传送。

14.权利要求1-11的其中一个所述的方法，其中，该方法应用于包括但不限于手持电话、智能电话、便携式娱乐设备等，该手机的操作系统包括诸如塞班、安卓的各种嵌入式操作系统。

15.一种基于手机的远程会议通信系统，包括：一个或者多个手机和VPN服务器，其中，该一个或者多个手机连接VPN服务器，会议组织者选择其中一个手机作为被访问手机，在被访问手机上运行远程会议所需进行的应用程序；其它手机通过发送远程控制命令来获得被访问手机的屏幕内容信息，通过发送控制信息来修改应用程序的内容，实现网络会议的功能。

16.权利要求15所述的系统，还包括用于不同手机间的屏幕适配的代理服务器，该代理服务器也连入VPN网络；当手机连入VPN网络时，将自己的分辨率提交给代理服务器，代理服务器记录下每个手机的分辨率并且分配一个唯一的ID给各个手机；如果是被访问手机连入VPN网络，告诉代理服务器该手机是被访问手机；其他手机对被访问手机的访问都要通过代理服务器转发，被访问手机将屏幕内容发给代理服务器；代理服务器收到被访问手机的屏幕内容后，将当前的被访问手机的屏幕内容根据其他手机的分辨率格式定义生成相应的屏幕内容，并与手机的ID号关联起来。

17.权利要求15所述的系统，其中，其他手机要访问被访问手机的屏幕内容时，提交ID号给代理服务器；代理服务器根据ID号查找到相应的分辨率下生成的屏幕内容发送给该其他手机。

18.权利要求15所述的系统，其中，其他手机端将自身的屏幕和键盘格式发送给VPN服务器，VPN服务器将这些格式定义保存后，发送协商请求给被访问手机端；被访问手机端运行远程控制服务程序，将自身的屏幕大小、分辨率等信息返回给VPN服务器；

其他手机端将键盘布局命令发送给VPN服务器，被访问手机端将支持的键盘列表返回给VPN服务器，VPN服务器将手机端的屏幕格式和键盘格式进行协商和匹配定义，其他手机端根据键盘列表在界面上生成一个虚拟键盘；

在被访问手机端的屏幕内容发生变化时或者定时扫描发现帧内容不同时，被访问手机端将其屏幕内容发送给VPN服务器；VPN服务器将这些屏幕内容发送给其他手机端，其他手机端根据屏幕内容做出键盘控制和点击控制的响应并且发送给VPN服务器；

VPN服务器将其他手机端用于控制被访问手机端的键盘控制或者点击事件发送给该被访问手机端，被访问手机端执行相应的事件处理。

Images