CN101980143A - 单台物理投影仪上同时显示多个计算机桌面的方法 - Google Patents
单台物理投影仪上同时显示多个计算机桌面的方法 Download PDFInfo
- Publication number
- CN101980143A CN101980143A CN 201010518550 CN201010518550A CN101980143A CN 101980143 A CN101980143 A CN 101980143A CN 201010518550 CN201010518550 CN 201010518550 CN 201010518550 A CN201010518550 A CN 201010518550A CN 101980143 A CN101980143 A CN 101980143A
- Authority
- CN
- China
- Prior art keywords
- desktop
- projection
- control system
- desktop projection
- computer
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Controls And Circuits For Display Device (AREA)
Abstract
本发明是在网络(包括有线和无线)环境下在单台物理投影仪上同时显示多个计算机桌面的方法。用户“计算机桌面”通过安装在其上的“桌面投影客户端控制系统”将其整个桌面图像优化后发送到网络上的“桌面投影服务器控制系统”上，后者可选择若干已接入的“计算机桌面”窗口同时显示在物理投影仪上。“桌面投影服务器控制系统”以多用户模式来管理多个用户连接，并有效方便地控制和管理物理投影仪及其桌面投影窗口。本发明可支持各种计算机设备(包括支持图形终端的智能手持设备)的桌面投影。本发明有效地支持多个计算机桌面在同一个物理投影仪上同时显示的实际应用，可广泛运用到课堂教学、会议研讨等多种投影仪演示场景。
Description
【技术领域】
本发明属于计算机(及手持终端)显示器与投影显示设备技术领域，特别涉及在网络环境下多台计算机桌面同时使用同一个物理投影仪投影显示的控制系统与方法。
【背景技术】
目前常见的投影仪系统的功能一般仅支持在一段时间内只能显示一个计算机桌面，而许多实际应用场景迫切需要投影仪系统能够同时支持多个计算机桌面的投影显示。例如教学培训场景中，教师可以通过让多个学生的计算机桌面同时显示在同一个投影仪上，从而很容易展示多个学生对同一个问题的不同解决方法以及进一步进行比较讨论，因此本发明所要解决的问题具有很高的实用价值。
当前针对多个计算机桌面在物理投影仪上的显示的研究目前成果比较少，主要有2个代表性的研究论文：
论文1(1.Kenji Tsunashima，Tetsuro Shida，etc.Compact Programmable Network DisplaySystem for Portable Projectors.IEEE Transactions on Consumer Electronics，Vol.55，No.2，MAY 2009)研究了网络环境下基于VNC和XWindow组合技术的多个计算机桌面同时显示在一个物理投影仪上，该论文给出的系统结构过于复杂，同时由于采用了从投影仪端去连接用户计算机的方式因此并不能支持用户计算机存在私有IP网络的实际场景。
论文2(2.Tor-Magne Stien Hagen，Espen Skjelnes Johnsen，etc.Liberating the Desktop.First International Conference on Advances in Computer-Human Interaction，2008.p89-94)研究了网络环境下基于位图的多个计算机桌面同时显示在一个物理投影仪上，该论文给出的系统结构简单，所提出的方法固定且不具有扩展性，由于在客户端和服务器之间进行图像传输时，对不同类型的图像均采用单一不可变的处理方法，导致传输效率很难提高；由于其使用的压缩算法、客户端刷新频率等均是预先指定值，并不能满足网络环境多样化及软硬件性能不同的应用场合，使得该系统的使用受到了很大的局限；当需要频繁切换待投影的多个计算机桌面时将耗费大量的网络连接资源。另外该论文对硬件设备及网络带宽要求很高，也很难满足多个计算机桌面同时显示的具体实际需求和各种不同场合的应用等。
【发明内容】
本发明目的是为了解决上述现有技术存在的问题，提供一种支持在单台物理投影仪上同时显示多个计算机桌面的方法。
该方法涉及的硬件和控制模块包括：待投影用户计算机、安装在待投影用户计算机上的桌面投影客户端控制系统、桌面投影控制服务器硬件平台、安装在桌面投影控制服务器硬件平台上的桌面投影服务器控制系统、桌面投影服务器遥控器硬件平台、安装在桌面投影服务器遥控器硬件平台上的桌面投影服务器遥控系统、物理投影仪以及网络通信系统，该方法的具体实现步骤如下：
第1、启动核心系统的硬件运行环境，包括桌面投影控制服务器硬件平台、桌面投影服务器遥控器硬件平台、网络通信系统及物理投影仪，网络通信系统开始监听网络连接；
第2、运行安装在桌面投影控制服务器硬件平台上的桌面投影服务器控制系统，并与本地的“网络通讯系统”实现本地连接，并包括如下：
第2.1、从本地网络通讯系统中接收数据包，并对数据包头部信息解析，确认数据包为桌面图像流数据还是命令数据，并送交相应功能模块进一步处理；
第2.2、远程计算机桌面投影用户身份认证；
第2.3、与各个桌面投影客户端控制系统单独就“计算机桌面投影协议”进行协商；
第2.4、接收各个桌面投影客户端控制系统发来的计算机桌面图像流；
第2.5、处理及优化计算机桌面图像流，生成相应投影窗口，每个投影窗口代表一个用户计算机桌面，因此每个投影窗口对应一个已连接的计算机桌面图像流；投影窗口的状态包括投影状态和不投影状态。
第2.5、为各个桌面投影客户端控制系统的“计算机桌面”图像流生成桌面缩略图；
第2.6、接收并响应远程的桌面投影服务器遥控系统发来的鼠标和键盘指令；
第2.7、根据本地具体功能配置和管理员设置，对于所有的投影窗口，若该投影窗口的状态为投影状态，则在“物理投影仪”上显示该投影窗口，从而实现显示指定的各个待投影用户计算机的桌面；管理员可以动态设置，使得多个投影窗口同时投影显示。
第3、运行安装在桌面投影服务器遥控器硬件平台上的桌面投影服务器遥控系统，并包括如下：
第3.1、网络连接并登录到远程的桌面投影服务器控制系统；
第3.2、监控本地桌面投影服务器遥控器硬件平台上的鼠标和键盘事件；
第3.3、将本地新产生的鼠标和键盘事件，根据功能设置，若属于操控投影服务器遥控系统的事件则及时发送到桌面投影服务器遥控系统；
第3.4、将本地新产生的鼠标和键盘事件，根据功能设置，若属于操控物理投影仪的事件则及时转化为控制指令，并以红外信号方式及时发送给物理投影仪，从而控制物理投影仪相关功能。
自此，通过桌面投影服务器遥控系统即可控制远程的物理投影仪和远程的桌面投影服务器控制系统。
第4、启动各待投影用户计算机，然后独立运行安装在各个待投影用户计算机上的桌面投影客户端控制系统，并与本地的“网络通讯系统”实现本地连接。并包括如下：
第4.1、从本地网络通讯系统中接收数据包，并对数据包头部信息解析，并送交相应功能模块进一步处理；
第4.2、网络连接并登录到远程的桌面投影服务器控制系统；
第4.3、与远程的桌面投影服务器控制系统就“计算机桌面投影协议”进行协商；
第4.4、进行本地图形操作系统桌面的图像捕捉；
第4.5、本地桌面图像优化处理，生成桌面图像流；
第4.6、根据“计算机桌面投影协议”，若需本地生成桌面缩略图，则在本地生成桌面缩略图；
第4.7、根据“计算机桌面投影协议”，定期发送本地桌面图像流及缩略图。
本发明所涉及的具体内容及所述术语的含义是：
(1)待投影用户计算机：用户在“待投影的计算机”上(例如Windows XP、Windows2003、Linux、Solaris等)运行若干任意程序(包括网页浏览、视频以及文档演示等)。
(2)桌面投影客户端控制系统：作为软件(以后台软件方式)运行在待投影的用户计算机上。该软件不限于某一特定的操作系统，针对不同的图形操作系统，可以有不同的技术方案。对于常见的操作系统，如Windows、Linux等，在内核态驱动程序中捕捉桌面图像，在用户态程序中进行图像压缩和传递。该软件同样可由JAVA等跨平台的方法实现。
桌面投影客户端控制系统包括“网络连接和登录”、“协议协商”、“桌面图像捕捉”、“图像压缩”、“桌面图像信息流队列”、“桌面图像信息流传送”、“缩略图生成”、“操作封装与解析”、“数据收发”等模块。
“网络连接和登录”模块：根据用户输入的“投影控制服务器”的网络地址和监听端口，向该服务器发出连接请求；与某指定“投影控制服务器”建立TCP连接之后，使用用户名和密码尝试登录。
“协议协商”模块：成功登录到某指定“投影控制服务器”之后，该服务器向“投影控制客户端系统”发送协议协商请求，包括“桌面图像信息”流的传递频率、“计算机桌面图像”捕捉质量、“投影仪桌面网络通讯系统”所使用的网络协议等。
“桌面图像捕捉”模块：根据“协议协商”模块获得的“桌面图像信息”流传递频率，每隔一定的时间，“桌面图像捕捉”模块捕获桌面的图像信息存入一个数据区。该模块的实现针对不同的图形操作系统有不同的版本。对于Windows系列操作系统，GDI图像处理库可以满足大部分场合的桌面图像捕捉。但是由于“待投影的计算机设备”使用硬件加速，很多操作系统提供的API函数不能捕捉到视频流的图像信息，需要直接访问显卡驱动程序的方法。
“图像压缩”模块：为了提高压缩率，该模块首先将“桌面图像捕捉”模块得到的32位位图数据信息转化为24位位图信息，具体的实现方法为抛弃32位位图数据中表示ALPHA通道的一个字节。然后根据“协议协商”模块获得的“计算机桌面图像质量”参数，选择特定的压缩算法。这里的压缩算法支持有损压缩和无损压缩。可以是第三方的压缩函数库，也可以是独立开发的压缩算法。“图像压缩”模块将压缩后的数据包存入下述“桌面图像信息流队列”中。
“桌面图像信息流队列”模块：该模块维护一个“计算机桌面图像”的压缩包的队列，队列数据来源是“图像压缩”模块，数据出口是“桌面图像信息流传送”模块。“桌面图像信息流队列”模块保持“图像压缩”模块和“桌面图像信息流传送”模块对该队列的互斥访问和同步控制。为了减少投影延时，增加流畅度，当该队列拥挤时，“图像压缩”模块等待；当该队列空闲时，“桌面图像信息传送”模块等待。
“桌面图像信息传送”模块：该模块与本地的“投影仪桌面网络通讯系统”协同工作。每隔一定时间，从“桌面图像信息队列”中取出一个压缩包，对其进行进一步的封装。如果数据包较大，则分成几个较小的数据包进行传送。每个小数据包的头部记录该数据包的标识、大小、全包大小、以及该包在全包中的偏移量。“桌面图像信息传送”模块将数据包交给“投影仪桌面网络通讯系统”，传送至指定的“投影控制服务器”。
“操作封装与解析”模块：负责将命令或者图像数据报文封装成统一格式。
“数据收发”模块：负责将封装后的数据报文传送至指定的“投影控制服务器系统”。
“缩略图生成”模块：“投影控制客户端系统”中支持本地计算机桌面图像缩略图的生成，对于已连接但暂时不投影的用户，其“投影控制客户端系统”向“投影控制服务器”直接发送数据量较小的桌面缩略图，大大降低了网络流量的消耗。
(3)桌面投影控制服务器硬件平台：该硬件平台既可以由任意一台通用计算机(例如PC机)来承担，也可采用专用的嵌入式系统(例如ARM硬件平台)来承担，上述无论哪种计算设备都需要有能力与一台物理投影仪相连接，其连接既可以是有线RS232电缆也可以是网络方式。本发明的实施例1中的“投影控制服务器”基于ARM9进行开发，使用了S3C2440微处理器、SD卡，通过VGA转接板与物理投影仪相连接，其桌面的内容直接显示与投影仪屏幕上。
(4)桌面投影服务器控制系统：通过网络(包括无线网络和有线网络)桌面投影服务器控制系统将通过“网络通讯系统”与桌面投影客户端控制系统进行通信，桌面投影服务器控制系统负责对来自桌面投影客户端控制系统的用户进行认证、与若干“投影控制客户端系统”就用户的“桌面图像信息”捕捉、解压缩及优化、和网络传递的协议协商，接收若干“投影控制客户端系统”的“桌面图像信息”，维护当前网络中已登录用户的列表，显示已登录用户的缩略图，以及控制若干“计算机桌面”的显示等。
桌面投影服务器控制系统由“请求监听”“用户认证”、“协议协商”、“已登录用户列表”、“桌面图像缩略图”、“投影仪工作模式控制”、“桌面图像信息”流接收、“桌面图像信息流队列”、“图像解压缩和优化”、“数据收发”、“操作封装与解析”、“系统命令”、“物理投影仪控制”、“投影控制”、“投影窗口布局”等功能模块构成。
“请求监听”模块：“投影控制服务器”启动后，在指定的TCP端口监听用户请求，维护一个请求队列，该队列中每一个用户都与“投影控制服务器”建立一条TCP连接。根据投影仪使用情况，管理员可以设定请求队列的上限值，以此来合理地管理投影仪资源的使用，减少竞争和等候。
“用户认证”模块：对请求队列中的用户，如果用户使用指定的用户名和密码尝试登录，“用户认证”模块从本地“用户信息文件”中查找用户名和密码，如果匹配则登录成功，继续从该文件中查找该用户对应的初始权限，根据不同的权限值对用户提供不同的服务。此处的“权限”指的是不同的“桌面图像信息”流传递频率、图像质量、投影窗口大小、投影位置等，通过这些参数，“投影控制服务器”逻辑上定义了一个用户对投影仪资源的使用程度，即该用户对投影仪使用的优先权。如果用户名和密码不匹配，则登录失败，向用户反馈失败信息。
“计算机桌面投影协议”协商模块：当某一用户通过认证之后，“协商模块”通过网络与指定桌面投影客户端控制系统进行有关“桌面图像信息”的协议协商，包括“桌面图像信息”流的传递频率、“计算机桌面图像”捕捉质量、“网络通讯系统”所使用的网络协议等。
“已登录用户列表”模块：对于所有已经与桌面投影服务器控制系统建立连接并登录成功的用户，桌面投影服务器控制系统维护一个列表，记录每个用户的用户名、网络地址、“桌面图像信息”流传递频率、图像质量等信息。
“桌面图像缩略图”模块：对于“已登录用户列表”中每一个用户，桌面投影服务器控制系统为其维护一幅实时的“桌面图像缩略图”。该模块从下述“图像解压缩和优化”模块中取出处理后的“桌面图像信息”进行显示。该缩略图的刷新频率、图像质量等参数由“协议协商”模块获得。“桌面图像缩略图”模块是多个缩略图的集合，该集合中的元素随着“已登录用户列表中”用户的增加和减少而变化。
“投影仪工作模式控制”模块：桌面投影服务器控制系统可以指定当前“物理投影仪”的工作模式为以下两种模式之一：“演讲模式”或者“讨论模式”。“演讲模式”下，任意时刻最多允许一个用户使用投影仪，为该用户分配全部的“物理投影仪”区域进行投影。当有一个用户正在演讲时，其他所有用户的投影仪使用申请均被拒绝。“讨论模式”下，同一时刻可以有1个或者多个用户同时使用“物理投影仪”。管理员可以从“已登录用户列表中”选择指定的用户，为其分配投影窗口，则该用户计算机的桌面内容按比例缩放显示到“物理投影仪”的某个区域中。
“桌面图像信息流接收”模块：该模块和“网络通讯系统”协同工作，从指定的桌面投影客户端控制系统接收“桌面图像信息”原始数据包。由于桌面投影客户端控制系统在传送数据包时可能分段传送，“桌面图像信息流接收”模块在接收到一个数据包时首先进行拆包，根据其头部的参数，陆续接收到一个完整的“计算机桌面图像信息”压缩数据包，并将该数据包存入“桌面图像信息流队列”中。
“桌面图像信息流队列”模块：该模块维护一个“桌面图像信息”数据包的队列，队列的数据来源为“桌面图像信息流接收”模块，数据出口为“图像解压缩和优化”模块。为了保证桌面投影服务器控制系统的工作效率，该模块需要保持“桌面图像信息流接收”模块和“图像解压缩和优化”模块的互斥访问和同步。当队列拥挤时，“桌面图像信息流接收”模块需要等待；队列空闲时，“图像解压缩和优化”模块等待。
“图像解压缩和优化”模块：该模块从上述“桌面图像信息流”队列中取出原始数据包，使用与桌面投影客户端控制系匹配的图像压缩算法对数据包进行解压缩。然后将得到的24位位图的数据信息还原为32位位图数据信息，并对该位图进行滤波处理，得到质量较高的桌面图像。
“数据收发”模块：负责从“网络通讯系统”中获取数据包。
“操作封装与解析”模块：负责将命令封装成统一格式的报文和将某一数据包解析获得相应的命令或者图像数据。
“系统命令”模块：负责解析来自桌面投影服务器遥控系统的命令，并触发相应操作。
“投影控制”模块：管理员通过该模块从“已登录用户列表”中选择一个或多个用户，为其分配投影窗口进行投影。对于指定用户，管理员可以通过“投影控制”模块对其进行暂停、继续投影等操作。针对不同的投影仪工作模式，“投影控制”模块执行不同的控制策略。“演讲模式”下只允许一个用户使用投影仪；“讨论模式”下，“投影控制”模块维护一个当前所有参加讨论的用户的队列。
“投影窗口布局”模块：管理员通过该模块对用户的投影窗口进行大小、位置的调整。既可以自由地移动，也可以实现平铺、水平对齐、垂直对齐等窗口布局。该模块的设计使得投影仪资源得到充分利用，并且可以根据实际需要获得用户满意的投影效果。
(5)网络通信系统是运行于用户计算机和桌面投影控制服务器的后台进程，它可以作为一个独立的进程，也可以作为桌面投影客户端控制系统或桌面投影服务器控制系统的一个子模块。该系统对于来自上层应用程序的“桌面图像信息”数据包有着特殊的处理方式，包括对不同标识的数据包采用不同的优先级等。该系统所使用的网络协议由上述“投影控制客户端系统”和“投影控制服务器”的“协议协商”模块确定。该系统包括“网络连接”、“网络优化”、“网络通信”三个模块。
“网络连接”模块：负责与另一个“网络通讯系统”建立连接；
“网络优化”模块：负责对封装后的“控制包”和“图像包”根据其头部的标识进行优先级分配；
“网络通信”模块：负责将数据传输和接收。
(6)桌面投影服务器遥控器硬件平台：负责运行桌面投影服务器遥控系统。该硬件平台既可以由任意一台通用计算机(例如PC机)来承担，也可采用专用的嵌入式系统(例如ARM硬件平台)来承担。当采用专用的嵌入式系统方式时，包括“嵌入式微处理器”、“电源”、“存储器”、“触摸屏”、“USB”、“无线网卡”、“红外设备”(即红外发生器)等单元。
其中，“无线网卡”负责与桌面投影控制服务器硬件平台建立网络连接；“红外设备”向物理投影仪发送红外信号以实现对物理投影仪的开关等控制。
(7)桌面投影服务器遥控系统：实现对桌面投影服务器控制系统的远程控制和对“物理投影仪”的红外控制。该系统的使用者为投影仪管理员，投影仪管理员通过操纵桌面投影服务器遥控系统来远程控制物理投影仪和桌面投影服务器控制系统的各项功能(例如选择哪些已连接桌面窗口显示在物理投影仪上等前述桌面投影服务器控制系统的功能)。
(6)物理投影仪：“物理投影仪”指实际的“投影仪”设备。桌面投影服务器控制系统对所连接的“物理投影仪”不做任何特殊要求，市场上常规“物理投影仪”即可，同时也支持高端“物理投影仪”。
本发明的优点和积极效果：
相对于传统的只允许一个计算机使用投影仪的情况，本发明具有以下优势：
在教师授课和会议场景下，本发明满足了多个使用者需要在同一台投影仪上完成讨论的需求；
使用嵌入式设备作为桌面投影服务器控制系统的运行平台，使得投影仪不再需要与PC机绑定，嵌入式设备的专用性使其能够满足桌面投影服务器控制系统的需求；
桌面投影服务器控制系统则独立于任何待投影的用户计算机操作系统，只有桌面投影客户端控制系统需要根据不同的待投影的用户计算机操作系统给出相应软件版本，桌面投影客户端控制系统与桌面投影服务器控制系统只需传递位图图像信息从而本发明中的桌面投影服务器控制系统端可以投影显示任何用户计算机桌面，实现了支持不同计算机硬件平台及操作系统图形桌面下的多个桌面同时投影显示问题；
本发明中的“桌面投影控制协议”模式具有可扩展性，可以支持多种图像流压缩优化处理方法，既可以支持现有公开协议的，也可以支持专用协议的；
本发明中的“桌面投影控制协议”协商，桌面投影客户端控制系统与桌面投影服务器控制系统双方均可以随时发起针对此次连接的“计算机桌面投影协议”具体参数重新设定，此后双方按照此协议约定进行待投影用户计算机桌面图像网络传递和操作控制。从而可以根据网络负载等实际情况实时改变图像捕捉、图像优化、网络传输等策略，以最大限度满足用户对图像质量和流畅度的要求；
本发明不但可以支持多个用户计算机桌面在单个物理服务器的同时投影显示，而且对于用户计算机桌面的运行程序类型没有任何约束，可包括常见的网页浏览、幻灯片演示、视频播放等各种桌面场景；
本发明中桌面投影服务器控制系统的投影控制功能支持动态地从所有已连接用户中选择若干将其计算机桌面内容显示到投影仪上，从而减少不必要的网络流量浪费；
本发明中桌面投影服务器控制系统动态支持已连接用户计算机桌面的缩略图实时生成和显示。一方面极大地方便投影仪管理员动态查看用户计算机桌面实时内容，从而决定是否将其显示到投影仪上；另一方面对于已连接但其计算机桌面暂时不需投影的用户，其桌面投影客户端控制系统仅需要将数据量很小的桌面缩略图传送至桌面投影服务器控制系统端，因此可以大大降低网络流量浪费；
本发明中桌面投影服务器控制系统支持动态地“投影窗口布局”功能。大大方便了投影仪管理员对投影窗口进行大小、位置调整等有效管理，使得投影仪资源得到充分利用，并且可以根据实际需要获得用户满意的投影效果。
本发明中的“投影控制服务器遥控器”可以对桌面投影服务器控制系统进行远程控制，使得管理员对直接连接于“物理投影仪”的桌面投影服务器控制系统进行方便地管理。
【附图说明】
图1是本发明的物理架构示意图，从该图可以容易看出本发明所适用的场景，各种用户计算机设备10均可以通过网络将自己的计算机桌面传送到桌面投影服务器控制系统20上，而管理员可以通过遥控器30来管理这些投影窗口，并决定是否显示这些投影窗口和在物理投影仪50上显示的位置。
图2是采用专用嵌入式实现的桌面投影控制服务器硬件平台和桌面投影服务器遥控器硬件平台的整体硬件结构图，本图完整给出采用专用嵌入式系统而非采用普通PC机的桌面投影控制服务器和桌面投影服务器遥控器的硬件结构。
图3是“投影控制服务器遥控器系统”工作流程图，该系统功能一部分是通过红外设备控制物理投影仪，另一部分功能是模拟桌面投影控制服务器系统的鼠标和键盘操作，从而实现对桌面投影控制服务器系统的远程遥控。
图4是本发明的逻辑架构图，该图完整给出桌面投影客户端控制系统、桌面投影服务器控制系统、桌面投影服务器遥控系统和网络通信系统内部逻辑功能模块和之间的关系；
图5是用户连接和登录过程图，桌面投影客户端控制系统向桌面投影服务器控制系统发起连接请求并就用户身份进行认证，桌面投影服务器控制系统只为合法用户提供计算机桌面投影服务；
图6是“计算机桌面投影协议”协商流程图，桌面投影客户端控制系统与桌面投影服务器控制系统在已连接情况下可以动态地发起“计算机桌面投影协议”的协商；
图7是应用实例1的工作流程图，从中可以看出桌面投影客户端控制系统和桌面投影服务器控制系统中的主要处理流程；
图8是应用实例1中图像传递和接收部分流程图，从中可以看出桌面投影客户端控制系统和桌面投影服务器控制系统中就计算机桌面图像的主要处理流程；
图9是应用实例1中数据包的实例图，桌面投影客户端控制系统与桌面投影服务器控制系统所传递的任何数据被封装为一个数据包，其包含头部信息和具体数据；
图10是应用实例1“演讲模式”的物理拓扑图，演讲模式下，只有一个用户计算机桌面被投影到物理投影仪上；
图11是应用实例1“讨论模式”的物理拓扑图，讨论模式下，可以有多个用户计算机桌面同时投影到同一个物理投影仪上。
【具体实施方式】
本发明提供了一种在单台物理投影仪上同时显示多个计算机桌面的方法，该方法涉及的硬件和控制模块包括待投影用户计算机、安装在待投影用户计算机上的桌面投影客户端控制系统、桌面投影控制服务器硬件平台、安装在桌面投影控制服务器硬件平台上的桌面投影服务器控制系统、桌面投影服务器遥控器硬件平台、安装在桌面投影服务器遥控器硬件平台上的桌面投影服务器遥控系统、物理投影仪以及网络通信系统，该方法的具体实现步骤如下：
第1、启动核心系统的硬件运行环境，包括桌面投影控制服务器硬件平台、桌面投影服务器遥控器硬件平台、网络通信系统及物理投影仪，网络通信系统开始监听网络连接；
第2、运行安装在桌面投影控制服务器硬件平台上的桌面投影服务器控制系统，并与本地的“网络通讯系统”实现本地连接，并包括如下：
第2.1、从本地网络通讯系统中接收数据包，并对数据包头部信息解析，确认数据包为桌面图像流数据还是命令数据，并送交相应功能模块进一步处理；
第2.2、远程计算机桌面投影用户身份认证；
第2.3、与各个桌面投影客户端控制系统单独就“计算机桌面投影协议”进行协商；
第2.4、接收各个桌面投影客户端控制系统发来的计算机桌面图像流；
第2.5、处理及优化计算机桌面图像流，生成相应投影窗口，每个投影窗口代表一个用户计算机桌面，因此每个投影窗口对应一个已连接的计算机桌面图像流；投影窗口的状态包括投影状态和不投影状态。
第2.5、为各个桌面投影客户端控制系统的“计算机桌面”图像流生成桌面缩略图；
第2.6、接收并响应远程的桌面投影服务器遥控系统发来的鼠标和键盘指令；
第2.7、根据本地具体功能配置和管理员设置，对于所有的投影窗口，若该投影窗口的状态为投影状态，则在“物理投影仪”上显示该投影窗口，从而实现显示指定的各个待投影用户计算机的桌面；管理员可以动态设置，使得多个投影窗口同时投影显示。
第3、运行安装在桌面投影服务器遥控器硬件平台上的桌面投影服务器遥控系统，并包括如下：
第3.1、网络连接并登录到远程的桌面投影服务器控制系统；
第3.2、监控本地桌面投影服务器遥控器硬件平台上的鼠标和键盘事件；
第3.3、将本地新产生的鼠标和键盘事件，根据功能设置，若属于操控投影服务器遥控系统的事件则及时发送到桌面投影服务器遥控系统；
第3.4、将本地新产生的鼠标和键盘事件，根据功能设置，若属于操控物理投影仪的事件则及时转化为控制指令，并以红外信号方式及时发送给物理投影仪，从而控制物理投影仪相关功能。
自此，通过桌面投影服务器遥控系统即可控制远程的物理投影仪和远程的桌面投影服务器控制系统。
第4、启动各待投影用户计算机，然后独立运行安装在各个待投影用户计算机上的桌面投影客户端控制系统，并与本地的“网络通讯系统”实现本地连接。并包括如下：
第4.1、从本地网络通讯系统中接收数据包，并对数据包头部信息解析，并送交相应功能模块进一步处理；
第4.2、网络连接并登录到远程的桌面投影服务器控制系统；
第4.3、与远程的桌面投影服务器控制系统就“计算机桌面投影协议”进行协商；
第4.4、进行本地图形操作系统桌面的图像捕捉；
第4.5、本地桌面图像优化处理，生成桌面图像流；
第4.6、根据“计算机桌面投影协议”，若需本地生成桌面缩略图，则在本地生成桌面缩略图；
第4.7、根据“计算机桌面投影协议”，定期发送本地桌面图像流及缩略图。
本发明第2.3及4.3步所述的“计算机桌面投影协议”包含待投影用户计算机桌面图像捕捉频率、计算机桌面图像优化协议具体版本号、计算机桌面投影图像质量、及图像传递控制参数；“计算机桌面投影协议”采用版本号方式管理，多个版本可以在本系统内并存，并支持未来新的“计算机桌面投影协议”；“计算机桌面投影协议”的协商是指桌面投影客户端控制系统和桌面投影服务器控制系统双方在用户登录后均可以任意时刻发起针对本次连接的“计算机桌面投影协议”具体参数重新设定，此后双方按照新的协议约定进行待投影用户计算机桌面图像捕捉、处理、网络传递和操作控制。
本发明所述的桌面投影客户端控制系统中具备支持用户身份登录认证请求；用户信息可被记录在本地参数文件中，该系统可根据此信息连接指定的桌面投影服务器控制系统，若连接成功则向桌面投影服务器控制系统提请进行用户身份认证请求，若请求通过，则成功登陆到桌面投影服务器控制系统。同时具备支持根据与桌面投影服务器控制系统“计算机桌面投影协议”协商约定结果在本地进行约定频率的图像捕捉，包括支持视频播放场景下桌面图像；在本地生成桌面图像缩略图；优化及压缩桌面图像，从而形成桌面图像流；并约定频率发送给远程的桌面投影服务器控制系统。
本发明所述的桌面投影控制服务器硬件平台既可以由任意一台通用计算机来承担，也可采用专用的嵌入式系统来承担，上述无论哪种计算设备都需要有能力与一台物理投影仪相连接，其连接方式既可以是有线电缆也可以是网络方式。
本发明所述的桌面投影服务器遥控器硬件平台既可以由任意一台通用计算机来承担，也可采用专用的嵌入式系统来承担，但需有无线网卡或有线网卡，从而远程操控桌面投影服务器控制系统；若带有红外设备即红外信号发生器则可支持对物理投影仪的操控。
本发明所述的桌面投影服务器控制系统中具备支持用户管理和用户身份认证，采用多用户模式来管理多个桌面投影客户端控制系统的连接，用户信息既可以直接采用桌面投影服务器控制系统所在的操作系统用户，也可以使用桌面投影服务器控制系统内自定义的用户；桌面投影客户端控制系统必须使用合法用户身份并通过桌面投影服务器控制系统认证后方可以与桌面投影服务器控制系统进行桌面投影通信；桌面投影服务器控制系统中支持对所有已登录的用户列表的维护，并记录每个桌面投影客户端控制系统的用户名、网络地址和“桌面图像信息”流传递频率能参数；桌面投影服务器控制系统中支持动态关闭已登录用户的连接。具备支持与多个已连接的桌面投影客户端控制系统进行各自的“计算机桌面投影协议”的协商工作，桌面投影服务器控制系统既可以主动发起协议协商，也可以被动应答协议协商；桌面投影服务器控制系统同时支持多个版本的“计算机桌面投影协议”，与不同的桌面投影客户端控制系统可以采用不同版本的“计算机桌面投影协议”。还应当具备支持对“桌面图像信息”流进行解压缩及优化处理，并支持无损和有损图像恢复，从而在桌面投影服务器控制系统端重新生成网络上待投影计算机桌面的桌面投影窗口；桌面投影服务器控制系统对各个桌面投影窗口可实时生成对应的缩略图，并可显示缩略图。具备支持对桌面投影窗口的布局，包括桌面投影窗口大小的调整、桌面投影窗口位置的移动、桌面投影窗口的平铺、桌面投影窗口的层叠操作；桌面投影服务器控制系统中具备支持从多个已连接的用户计算机桌面中选择若干建立桌面投影窗口并显示在物理投影仪上，同时该功能也支持桌面投影窗口内容的实时显示、暂停与继续操作。
为能进一步了解本发明的技术内容、特点及功效，兹列举以下应用实例，并配合附图详细说明如下：
应用实例1
在传统的教学场景中，往往是教师在讲台上使用幻灯片演示课程内容，学生被动地接收，当学生对教授内容有任何疑问时，不能及时表达并得到解答。特别是在计算机课程中，每个学生都在使用自己的电脑进行练习，当练习过程中遇到疑惑需要老师解决时只能等待老师走到身边进行解答，多个同学之间也很难就一个问题进行交流。
在应用实例1中，教师可以通过让多个学生的计算机桌面同时显示在同一个物理投影仪上，从而很容易展示多个学生对同一个问题的不同解决方法以及进一步进行比较讨论。
传统的教师讲课学生听讲的模式下，教师与学生之间的互动很少。
图4是本发明的完整逻辑框图。
图7展示应用实例1的工作流程。
第一、启动硬件运行环境和各服务器软件系统
首先，桌面投影控制服务器硬件平台启动。实施例1使用基于ARM9的开发板，使用S3C2440微处理器、SD存储卡、VGA转接板等。根据使用的“物理投影仪”的不同，桌面投影控制服务器硬件平台与投影仪连接方式不同。对于普通的有线投影仪，通过RS232线缆连接；对于高端的网络投影仪，通过无线网络IEEE 802.11b/g连接。
步骤11：桌面投影控制服务器硬件平台启动。
其次，桌面投影控制服务器硬件平台上的“网络通讯系统”启动。这里的“网络通讯系统”可以作为一个独立的进程，也可以作为桌面投影服务器控制系统的一子模块。实施例1中将其作为桌面投影服务器控制系统的一个子模块。当桌面投影服务器控制系统的进程启动时，“网络通讯系统”在监听预设的TCP端口，等待来自桌面投影客户端控制系统的连接请求。
步骤21：桌面投影服务器控制系统启动。
步骤22：桌面投影服务器控制系统端的“网络通讯系统”启动。
步骤23：桌面投影服务器遥控器硬件平台启动和运行在其上的桌面投影服务器遥控系统启动。
步骤24：桌面投影服务器遥控系统和桌面投影服务器控制系统建立连接并进行登录。
登录成功之后，桌面投影服务器遥控系统中触摸板上指定区域的鼠标和键盘的消息将被映射到桌面投影服务器控制系统从而实现前者对后者的远程控制，也可以通过红外设备来操纵物理投影仪。桌面投影服务器遥控系统的使用者为投影仪管理员，投影仪管理员通过操纵桌面投影服务器遥控系统来远程控制物理投影仪和桌面投影服务器控制系统的各项功能(例如选择列出桌面投影服务器控制系统上已登录用户的功能)，本案例中教师操控着桌面投影服务器遥控器硬件平台和其上的桌面投影服务器遥控系统，他维护者物理投影仪具体显示哪些学生的计算机桌面。
第二、独立运行安装在各个待投影用户计算机上的桌面投影客户端控制系统
启动待投影用户计算机以及其上的桌面投影客户端控制系统软件。本案例中，教师和每个学生的计算机(即待投影用户计算机)都启动(这些计算机都有可能将他们的计算机桌面投影到投影仪上)，并启动运行于他们各自计算机中的桌面投影客户端控制系统软件。每个参与演示过程的用户计算机的操作系统可不尽相同，运行对应的桌面投影客户端控制系统或基于Java的跨平台桌面投影客户端控制系统均可，这些桌面投影客户端控制系统实现原理相同(详见前述发明内容)，只是针对不同操作系统的桌面图像捕捉略有不同。
步骤31：待投影用户计算机启动。
步骤32：桌面投影客户端控制系统启动。
然后，教师和学生的个人计算机根据指定的IP地址和端口号与教室内的“服务器”建立TCP连接。不同计算机之间的连接方式取决于教室内的布线方式，可以通过以太网或者无线网络相互连接。实质上，教室内的所有计算机，包括“服务器主机”构成一个小型的局域网，这样的环境保证了“投影控制客户端系统”与“投影控制服务器”之间图像信息传递的效率，增强了多个用户之间交流的效果。
步骤33：各用户(教师和学生)计算机网络连接到远程的桌面投影服务器控制系统。
第三、通过操控桌面投影服务器控制系统来实现单台物理投影仪上同时显示多个计算机桌面
所有想要参与演示的教师和/或学生使用自己的用户名和密码登录到教室内的桌面投影服务器控制系统。在桌面投影服务器控制系统上有一个用户信息文件，记录了用户的密码和权限。当桌面投影服务器控制系统接收到登录请求时，在用户信息文件中查找用户名和密码，如果匹配，则返回该用户的权限。这个权限决定了该用户的桌面图像捕捉频率、图像质量、和传递效率等。用户通过认证之后，桌面投影服务器控制系统便与桌面投影客户端控制系统进行协议协商，对上述参数进行约定。之后的一切有关图像的操作均按照约定的协议进行。
步骤41：桌面投影服务器控制系统对远程计算机桌面投影用户身份认证
步骤42：桌面投影服务器控制系统与各个桌面投影客户端控制系统单独就“计算机桌面投影协议”进行协商
每当有用户登录，桌面投影服务器控制系统就会在“已登录用户列表中”记录该用户的基本信息，并为之显示一幅缩略图。该缩略图的刷新频率和画面质量由上述协议协商结果决定。表1显示了“已登录用户列表”的一种实现方式。
表1“已登录用户列表”实例
| 用户名 | IP地址 | 刷新频率 | 实时网速 | 当前状态 | 缩略图 |
| 用户1 | 192.168.0.2 | 30次/秒 | 500kb/s | 讨论 | 缩略图1 |
| 用户2 | 192.168.0.3 | 25次/秒 | 300kb/s | 讨论 | 缩略图2 |
| 用户3 | 192.168.0.4 | 20次/秒 | 100kb/s | 未使用 | 缩略图3 |
| ... | ... | ... | ... | ... | ... |
步骤43：刷新“已登录用户列表”，显示缩略图。
根据课堂内容，在教室讲课阶段，管理员可以将桌面投影服务器控制系统工作模式设置为“演讲模式”。在这种模式下，教师用户独自使用投影仪，为其分配全部的投影仪屏幕。图10显示了“演讲模式”的一个实例。
在学生讨论阶段，管理员可以将桌面投影服务器控制系统工作模式设置为“讨论模式”。在这种模式下，多个用户(包括学生和教师)同时登录到桌面投影服务器控制系统中，管理员(本案例中为教师)通过设置桌面投影服务器控制系统的“已登录用户列表”每一行用户的当前状态，该状态决定每个已连接到桌面投影服务器控制系统的用户计算机桌面窗口显示或不显示；对于投影状态的用户计算机桌面窗口，管理员可以采用鼠标选中拖拽的方法移动指定的用户计算机桌面窗口，这些操作结果会显示在物理投影仪上，因此实现了将指定的用户计算机桌面窗口投影到物理投影仪的指定区域。在物理投影仪上，同时有多个用户计算机桌面窗口(多个计算机桌面窗口之间位置和叠放顺序均可任意)，教师和学生之间可以自由的讨论课堂内容。比如计算机课程上，学生A将自己的练习程序的运行结果投影到屏幕上，学生B可以看到，判断出错的原因，为其解释。或者，学生B可以将正确的解决方法投影到“物理投影仪”的另一块区域，学生A通过将自己的程序代码和学生B比较，可以很直观地找到出错的位置，并加以改正。
需要说明的是，这里桌面投影服务器控制系统还可以接入更多的学生，这样就形成了课堂上多人讨论的场景。如图11所示。讨论过程中，“投影控制服务器”维护一个讨论组，所有用户可以申请加入或退出讨论组，桌面投影服务器控制系统端相应的操作是为该用户分配投影窗口或者剥夺其投影窗口。
另外，讨论过程中，管理员(本案例中即指教师)通过桌面投影服务器遥控系统远程控制桌面投影服务器控制系统(即控制其的键盘和鼠标)可以自由安排所有投影窗口的布局，调整其大小和位置，已达到最好的讨论效果。例如，当前有2个学生正在讨论，则为其分配较大的投影窗口，且置于“物理投影仪”的中心位置，而讨论组中的其他用户则可以暂时缩小投影窗口，或者隐藏其投影窗口，以保证正在讨论的同学占有最多的“物理投影仪”资源。
步骤44：“演讲模式”下，管理员从“已登录用户列表”中选择一个用户，为其分配全部的“物理投影仪”屏幕，显示其计算机桌面的内容。
步骤45：“讨论模式”下，管理员从“已登录用户列表”中选择多个用户，分别为其分配一个投影窗口，用以显示其计算机桌面的内容。
步骤46：讨论过程中，管理员调整讨论组中各个用户的投影窗口的布局。
第四、桌面投影客户端控制系统与桌面投影服务器控制系统之间“桌面位图图像信息”的传递
图8中的步骤641-642-651-652-661-662显示了桌面投影客户端控制系统和桌面投影服务器控制系统之间图像传递的过程。
首先，桌面投影客户端控制系统初始化镜像显卡的驱动，包括分辨率的设置、注册表的更新等内容。初始化之后，该驱动程序将一虚拟显卡镜像到真实的显卡，将真实显卡的每一帧(即“桌面位图图像信息”)的拷贝保存于一块内存中。这里的每一帧就是该计算机桌面的显示内容。为了在用户态程序可以获得该帧的信息，在此驱动程序中将保存每一帧图像信息的内存映射到用户进程空间。
步骤51：桌面投影客户端控制系统系统初始化镜像显卡驱动。
步骤52：桌面投影客户端控制系统捕捉计算机桌面生成“桌面位图图像信息”。
其次，桌面投影客户端控制系统根据其和桌面投影服务器控制系统协商得到的参数，每隔一定时间从前述共享内存中取出一帧数据。在Windows XP操作系统下，这里的一帧是32位位图格式，为了增大压缩比，首先将该帧数据转化成24位位图数据。然后将24位位图数据区使用指定的压缩算法(本例中采用JPEG算法)进行压缩，压缩后的数据包保存于本地的图像流队列中。
接着，桌面投影客户端控制系统的“桌面图像信息传送”模块每隔一定时间从本地的图像流队列中取出一个压缩包，准备将其交给本地“网络通讯系统”传送至指定的“投影控制服务器”。如果压缩包数据量较大，将其分段为几个较小的数据包。每个包添加一个头部，记录该包的标识、大小、在总包中的偏移量等信息。图9所示是一个数据包的结构。分段之后，依次将每个数据包传送至桌面投影服务器控制系统。
步骤53：压缩“桌面位图图像信息”，存入到本地的图像流队列。
步骤54：将数据包分段发送至桌面投影服务器控制系统。
桌面投影服务器控制系统的接收端，每当接收到一个数据包，拆包后，检查其标识、大小和在总包中的偏移量等信息，根据偏移量，陆续接收到一个完整的图像压缩包。然后将该压缩包存入本地的图像流队列中。
桌面投影服务器控制系统的“图像解压缩和优化模块”每隔一定时间从本地的图像流队列中取出一个压缩包，使用和桌面投影客户端控制系统匹配的压缩算法进行解压，并将解压得到的24位位图的帧信息转化成32位位图的帧信息。最后对该帧进行滤波等优化。最终将优化后的帧数据输出到指定的投影窗口中，并生成缩略图。桌面投影客户端控制系统和桌面投影服务器控制系统之间的协议协商可以提高帧刷新的频率，提升用户体验。
步骤55：桌面投影服务器控制系统接收到数据包。
步骤56：解压收到的数据包并优化处理，输出到指定的投影窗口中，若该投影窗口状态为投影状态，则该投影窗口最新变化将及时显示到物理投影仪上。
Claims (10)
1.单台物理投影仪上同时显示多个计算机桌面的方法，其特征在于，该方法涉及的硬件和控制模块包括待投影用户计算机、安装在待投影用户计算机上的桌面投影客户端控制系统、桌面投影控制服务器硬件平台、安装在桌面投影控制服务器硬件平台上的桌面投影服务器控制系统、桌面投影服务器遥控器硬件平台、安装在桌面投影服务器遥控器硬件平台上的桌面投影服务器遥控系统、物理投影仪以及网络通信系统，该方法的具体实现步骤如下：
第1、启动核心系统的硬件运行环境，包括桌面投影控制服务器硬件平台、桌面投影服务器遥控器硬件平台、网络通信系统及物理投影仪，网络通信系统开始监听网络连接；
第2、运行安装在桌面投影控制服务器硬件平台上的桌面投影服务器控制系统，并与本地的“网络通讯系统”实现本地连接，并包括如下：
第2.1、从本地网络通讯系统中接收数据包，并对数据包头部信息解析，确认数据包为桌面图像流数据还是命令数据，并送交相应功能模块进一步处理；
第2.2、远程计算机桌面投影用户身份认证；
第2.3、与各个桌面投影客户端控制系统单独就“计算机桌面投影协议”进行协商；
第2.4、接收各个桌面投影客户端控制系统发来的计算机桌面图像流；
第2.5、处理及优化计算机桌面图像流，生成相应投影窗口，每个投影窗口代表一个用户计算机桌面，因此每个投影窗口对应一个已连接的计算机桌面图像流；投影窗口的状态包括投影状态和不投影状态；
第2.5、为各个桌面投影客户端控制系统的“计算机桌面”图像流生成桌面缩略图；
第2.6、接收并响应远程的桌面投影服务器遥控系统发来的鼠标和键盘指令；
第2.7、根据本地具体功能配置和管理员设置，对于所有的投影窗口，若该投影窗口的状态为投影状态，则在“物理投影仪”上显示该投影窗口，从而实现显示指定的各个待投影用户计算机的桌面；管理员可以动态设置，使得多个投影窗口同时投影显示；
第3、运行安装在桌面投影服务器遥控器硬件平台上的桌面投影服务器遥控系统，并包括如下：
第3.1、网络连接并登录到远程的桌面投影服务器控制系统；
第3.2、监控本地桌面投影服务器遥控器硬件平台上的鼠标和键盘事件；
第3.3、将本地新产生的鼠标和键盘事件，根据功能设置，若属于操控投影服务器遥控系统的事件则及时发送到桌面投影服务器遥控系统；
第3.4、将本地新产生的鼠标和键盘事件，根据功能设置，若属于操控物理投影仪的事件则及时转化为控制指令，并以红外信号方式及时发送给物理投影仪，从而控制物理投影仪相关功能；
自此，通过桌面投影服务器遥控系统即可控制远程的物理投影仪和远程的桌面投影服务器控制系统；
第4、启动各待投影用户计算机，然后独立运行安装在各个待投影用户计算机上的桌面投影客户端控制系统，并与本地的“网络通讯系统”实现本地连接，并包括如下：
第4.1、从本地网络通讯系统中接收数据包，并对数据包头部信息解析，并送交相应功能模块进一步处理；
第4.2、网络连接并登录到远程的桌面投影服务器控制系统；
第4.3、与远程的桌面投影服务器控制系统就“计算机桌面投影协议”进行协商；
第4.4、进行本地图形操作系统桌面的图像捕捉；
第4.5、本地桌面图像优化处理，生成桌面图像流；
第4.6、根据“计算机桌面投影协议”，若需本地生成桌面缩略图，则在本地生成桌面缩略图；
第4.7、根据“计算机桌面投影协议”，定期发送本地桌面图像流及缩略图。
2.根据权利要求1所述的方法，其特征在于，第2.3及4.3步所述的“计算机桌面投影协议”包含待投影用户计算机桌面图像捕捉频率、计算机桌面图像优化协议具体版本号、计算机桌面投影图像质量、及图像传递控制参数；“计算机桌面投影协议”采用版本号方式管理，多个版本可以在本系统内并存，并支持未来新的“计算机桌面投影协议”；“计算机桌面投影协议”的协商是指桌面投影客户端控制系统和桌面投影服务器控制系统双方在用户登录后均可以任意时刻发起针对本次连接的“计算机桌面投影协议”具体参数重新设定，此后双方按照新的协议约定进行待投影用户计算机桌面图像捕捉、处理、网络传递和操作控制。
3.根据权利要求1所述的方法，其特征在于，桌面投影客户端控制系统中具备支持用户身份登录认证请求；用户信息可被记录在本地参数文件中，该系统可根据此信息连接指定的桌面投影服务器控制系统，若连接成功则向桌面投影服务器控制系统提请进行用户身份认证请求，若请求通过，则成功登陆到桌面投影服务器控制系统。
4.根据权利要求1所述的方法，其特征在于，桌面投影客户端控制系统中具备支持根据与桌面投影服务器控制系统“计算机桌面投影协议”协商约定结果在本地进行约定频率的图像捕捉，包括支持视频播放场景下桌面图像；在本地生成桌面图像缩略图；优化及压缩桌面图像，从而形成桌面图像流；并约定频率发送给远程的桌面投影服务器控制系统。
5.根据权利要求1所述的方法，其特征在于，桌面投影控制服务器硬件平台既可以由任意一台通用计算机来承担，也可采用专用的嵌入式系统来承担，上述无论哪种计算设备都需要有能力与一台物理投影仪相连接，其连接方式既可以是有线电缆也可以是网络方式。
6.根据权利要求1所述的方法，其特征在于，桌面投影服务器遥控器硬件平台既可以由任意一台通用计算机来承担，也可采用专用的嵌入式系统来承担，但需有无线网卡或有线网卡，从而远程操控桌面投影服务器控制系统；若带有红外设备即红外信号发生器，则可支持对物理投影仪的操控；桌面投影服务器遥控系统实现对桌面投影服务器控制系统中的鼠标和键盘操纵控制：当桌面投影服务器遥控系统捕获到鼠标消息时，获得当前鼠标的位置，然后根据本地屏幕分辨率和桌面投影服务器控制系统端屏幕分辨率的比例，计算鼠标在后者屏幕上的相对位置，并将该鼠标消息类型和鼠标相对位置通过网络发送至桌面投影服务器控制系统，接收到命令后，在指定的屏幕位置触发相同的鼠标事件；当桌面投影服务器遥控系统捕获到键盘输入时，捕获键盘输入值，并将该键盘消息类型和键盘输入值通过网络发送至桌面投影服务器控制系统，接收到命令后，触发相同的鼠标事件。
7.根据权利要求1所述的方法，其特征在于，桌面投影服务器控制系统中具备支持用户管理和用户身份认证，采用多用户模式来管理多个桌面投影客户端控制系统的连接，用户信息既可以直接采用桌面投影服务器控制系统所在的操作系统用户，也可以使用桌面投影服务器控制系统内自定义的用户；桌面投影客户端控制系统必须使用合法用户身份并通过桌面投影服务器控制系统认证后方可以与桌面投影服务器控制系统进行桌面投影通信；桌面投影服务器控制系统中支持对所有已登录的用户列表的维护，并记录每个桌面投影客户端控制系统的用户名、网络地址、“桌面图像信息”图像质量和“桌面图像信息”流传递频率性能参数；桌面投影服务器控制系统中支持动态关闭已登录用户的连接。
8.根据权利要求1所述的方法，其特征在于，桌面投影服务器控制系统中具备支持与多个已连接的桌面投影客户端控制系统进行各自的“计算机桌面投影协议”的协商工作，桌面投影服务器控制系统既可以主动发起协议协商，也可以被动应答协议协商；桌面投影服务器控制系统同时支持多个版本的“计算机桌面投影协议”，与不同的桌面投影客户端控制系统可以采用不同版本的“计算机桌面投影协议”。
9.根据权利要求1所述的方法，其特征在于，桌面投影服务器控制系统中具备支持对“桌面图像信息”流进行解压缩及优化处理，并支持无损和有损图像恢复，从而在桌面投影服务器控制系统端重新生成网络上待投影计算机桌面的桌面投影窗口；桌面投影服务器控制系统对各个桌面投影窗口可实时生成对应的缩略图，并可显示缩略图。
10.根据权利要求1所述的方法，其特征在于，桌面投影服务器控制系统中具备支持对桌面投影窗口的布局，包括桌面投影窗口大小的调整、桌面投影窗口位置的移动、桌面投影窗口的平铺、桌面投影窗口的层叠操作；桌面投影服务器控制系统中具备支持从多个已连接的用户计算机桌面中选择若干建立桌面投影窗口并显示在物理投影仪上，同时该功能也支持桌面投影窗口内容的实时显示、暂停与继续操作。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN2010105185504A CN101980143B (zh) | 2010-10-26 | 2010-10-26 | 单台物理投影仪上同时显示多个计算机桌面的方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN2010105185504A CN101980143B (zh) | 2010-10-26 | 2010-10-26 | 单台物理投影仪上同时显示多个计算机桌面的方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN101980143A true CN101980143A (zh) | 2011-02-23 |
| CN101980143B CN101980143B (zh) | 2012-02-01 |
Family
ID=43600648
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN2010105185504A Expired - Fee Related CN101980143B (zh) | 2010-10-26 | 2010-10-26 | 单台物理投影仪上同时显示多个计算机桌面的方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN101980143B (zh) |
Cited By (22)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103220481A (zh) * | 2011-11-04 | 2013-07-24 | 株式会社理光 | 图像显示装置以及图像显示方法 |
| CN103248849A (zh) * | 2012-02-09 | 2013-08-14 | 株式会社理光 | 图像显示装置和图像显示方法 |
| CN103605491A (zh) * | 2013-11-08 | 2014-02-26 | 天脉聚源(北京)传媒科技有限公司 | 一种远程控制显示设备的方法、移动终端及系统 |
| CN103873268A (zh) * | 2012-12-10 | 2014-06-18 | 北京棣南新宇科技有限公司 | 数据播放的处理系统、控制播放的操控器及其相关设备 |
| WO2014183659A1 (zh) * | 2013-12-06 | 2014-11-20 | 中兴通讯股份有限公司 | 一种智能微型投影的多源控制方法及装置 |
| CN105653019A (zh) * | 2015-06-19 | 2016-06-08 | 宇龙计算机通信科技(深圳)有限公司 | 一种投影方法及系统 |
| CN105706142A (zh) * | 2013-10-25 | 2016-06-22 | 可可株式会社 | 基于信道的内容广播方法及系统 |
| CN106383640A (zh) * | 2016-08-31 | 2017-02-08 | 刘志强 | 一种投影方法 |
| CN106921841A (zh) * | 2017-03-07 | 2017-07-04 | 北京小米移动软件有限公司 | 屏幕投影方法及装置 |
| CN107209657A (zh) * | 2015-02-13 | 2017-09-26 | 松下知识产权经营株式会社 | 再现装置以及输出装置 |
| CN107346119A (zh) * | 2017-08-24 | 2017-11-14 | 苏睿 | 协同控制方法、装置及系统 |
| CN107846466A (zh) * | 2017-11-15 | 2018-03-27 | 中国联合网络通信集团有限公司 | 云终端外部设备的映射方法、服务器、云终端及系统 |
| CN108012167A (zh) * | 2016-11-02 | 2018-05-08 | 澜至电子科技（成都）有限公司 | 投影服务、请求方法及装置 |
| CN108154731A (zh) * | 2018-01-12 | 2018-06-12 | 王馨卉 | 一种高中生理科用教学系统 |
| CN108491174A (zh) * | 2018-02-01 | 2018-09-04 | 西安万像电子科技有限公司 | 画面传输方法、装置及系统 |
| CN109379332A (zh) * | 2018-09-08 | 2019-02-22 | 北京爱视界科技有限公司 | 多屏互动显示方法 |
| CN109416583A (zh) * | 2016-07-05 | 2019-03-01 | 索尼公司 | 信息处理装置、信息处理方法及程序 |
| CN109522070A (zh) * | 2018-10-29 | 2019-03-26 | 联想(北京)有限公司 | 显示处理方法和系统 |
| CN109640002A (zh) * | 2018-12-03 | 2019-04-16 | 厦门商集网络科技有限责任公司 | 一种多功能网络矩阵演示系统及用于网络矩阵演示的设备 |
| CN111698448A (zh) * | 2011-09-14 | 2020-09-22 | 巴可有限公司 | 会议用电子工具和方法 |
| CN111953915A (zh) * | 2019-05-16 | 2020-11-17 | 鸿富锦精密工业(武汉)有限公司 | 视频墙控制装置及方法 |
| CN112297842A (zh) * | 2019-07-31 | 2021-02-02 | 宝马股份公司 | 具有多种显示模式的自动驾驶车辆 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US6547396B1 (en) * | 2001-12-27 | 2003-04-15 | Infocus Corporation | Stereographic projection system |
| US6725219B2 (en) * | 2001-03-13 | 2004-04-20 | Seiko Epson Corporation | Internet presentation system |
| JP2005228018A (ja) * | 2004-02-13 | 2005-08-25 | Hitachi Ltd | ネットワーク端末システム |
| CN1940824A (zh) * | 2005-09-30 | 2007-04-04 | 钟巨航 | 操作计算机的方法与装置 |
-
2010
- 2010-10-26 CN CN2010105185504A patent/CN101980143B/zh not_active Expired - Fee Related
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US6725219B2 (en) * | 2001-03-13 | 2004-04-20 | Seiko Epson Corporation | Internet presentation system |
| US6547396B1 (en) * | 2001-12-27 | 2003-04-15 | Infocus Corporation | Stereographic projection system |
| JP2005228018A (ja) * | 2004-02-13 | 2005-08-25 | Hitachi Ltd | ネットワーク端末システム |
| CN1940824A (zh) * | 2005-09-30 | 2007-04-04 | 钟巨航 | 操作计算机的方法与装置 |
Cited By (34)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN111698448A (zh) * | 2011-09-14 | 2020-09-22 | 巴可有限公司 | 会议用电子工具和方法 |
| CN103220481A (zh) * | 2011-11-04 | 2013-07-24 | 株式会社理光 | 图像显示装置以及图像显示方法 |
| CN103248849A (zh) * | 2012-02-09 | 2013-08-14 | 株式会社理光 | 图像显示装置和图像显示方法 |
| CN103248849B (zh) * | 2012-02-09 | 2016-03-30 | 株式会社理光 | 图像显示装置和图像显示方法 |
| CN103873268B (zh) * | 2012-12-10 | 2017-02-15 | 北京棣南新宇科技有限公司 | 数据播放的处理系统、控制播放的操控器及其相关设备 |
| CN103873268A (zh) * | 2012-12-10 | 2014-06-18 | 北京棣南新宇科技有限公司 | 数据播放的处理系统、控制播放的操控器及其相关设备 |
| US10212488B2 (en) | 2013-10-25 | 2019-02-19 | Kakao Corp. | Channel-based method and system for relaying contents |
| CN105706142A (zh) * | 2013-10-25 | 2016-06-22 | 可可株式会社 | 基于信道的内容广播方法及系统 |
| CN105706142B (zh) * | 2013-10-25 | 2022-09-13 | 可可株式会社 | 基于信道的内容广播方法及系统 |
| CN103605491A (zh) * | 2013-11-08 | 2014-02-26 | 天脉聚源(北京)传媒科技有限公司 | 一种远程控制显示设备的方法、移动终端及系统 |
| CN104702870A (zh) * | 2013-12-06 | 2015-06-10 | 中兴通讯股份有限公司 | 一种智能微型投影的多源控制方法及装置 |
| US9749604B2 (en) | 2013-12-06 | 2017-08-29 | Zte Corporation | Method and device for multi-source control of intelligent miniature projector |
| WO2014183659A1 (zh) * | 2013-12-06 | 2014-11-20 | 中兴通讯股份有限公司 | 一种智能微型投影的多源控制方法及装置 |
| CN107209657A (zh) * | 2015-02-13 | 2017-09-26 | 松下知识产权经营株式会社 | 再现装置以及输出装置 |
| CN107209657B (zh) * | 2015-02-13 | 2021-12-24 | 松下知识产权经营株式会社 | 再现装置以及输出装置 |
| CN105653019A (zh) * | 2015-06-19 | 2016-06-08 | 宇龙计算机通信科技(深圳)有限公司 | 一种投影方法及系统 |
| CN105653019B (zh) * | 2015-06-19 | 2018-09-07 | 宇龙计算机通信科技(深圳)有限公司 | 一种投影方法及系统 |
| CN109416583B (zh) * | 2016-07-05 | 2022-06-03 | 索尼公司 | 信息处理装置、信息处理方法及程序 |
| CN109416583A (zh) * | 2016-07-05 | 2019-03-01 | 索尼公司 | 信息处理装置、信息处理方法及程序 |
| CN106383640A (zh) * | 2016-08-31 | 2017-02-08 | 刘志强 | 一种投影方法 |
| CN108012167A (zh) * | 2016-11-02 | 2018-05-08 | 澜至电子科技（成都）有限公司 | 投影服务、请求方法及装置 |
| CN106921841B (zh) * | 2017-03-07 | 2019-12-13 | 北京小米移动软件有限公司 | 屏幕投影方法及装置 |
| CN106921841A (zh) * | 2017-03-07 | 2017-07-04 | 北京小米移动软件有限公司 | 屏幕投影方法及装置 |
| CN107346119A (zh) * | 2017-08-24 | 2017-11-14 | 苏睿 | 协同控制方法、装置及系统 |
| CN107846466A (zh) * | 2017-11-15 | 2018-03-27 | 中国联合网络通信集团有限公司 | 云终端外部设备的映射方法、服务器、云终端及系统 |
| CN108154731A (zh) * | 2018-01-12 | 2018-06-12 | 王馨卉 | 一种高中生理科用教学系统 |
| CN108491174A (zh) * | 2018-02-01 | 2018-09-04 | 西安万像电子科技有限公司 | 画面传输方法、装置及系统 |
| CN109379332A (zh) * | 2018-09-08 | 2019-02-22 | 北京爱视界科技有限公司 | 多屏互动显示方法 |
| CN109522070A (zh) * | 2018-10-29 | 2019-03-26 | 联想(北京)有限公司 | 显示处理方法和系统 |
| CN109522070B (zh) * | 2018-10-29 | 2021-07-16 | 联想(北京)有限公司 | 显示处理方法和系统 |
| CN109640002A (zh) * | 2018-12-03 | 2019-04-16 | 厦门商集网络科技有限责任公司 | 一种多功能网络矩阵演示系统及用于网络矩阵演示的设备 |
| US20220246083A1 (en) * | 2019-05-16 | 2022-08-04 | Hong Fu Jin Precision Industry (Wuhan) Co., Ltd. | Electronic device and video wall control method |
| CN111953915A (zh) * | 2019-05-16 | 2020-11-17 | 鸿富锦精密工业(武汉)有限公司 | 视频墙控制装置及方法 |
| CN112297842A (zh) * | 2019-07-31 | 2021-02-02 | 宝马股份公司 | 具有多种显示模式的自动驾驶车辆 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN101980143B (zh) | 2012-02-01 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN101980143B (zh) | 单台物理投影仪上同时显示多个计算机桌面的方法 | |
| CA2892614C (en) | System and method for managing several mobile devices simultaneously | |
| CN103685186B (zh) | 云教育系统及终端、云服务器和教育用资源数据交互方法 | |
| CN102646031A (zh) | 一种移动终端控制大屏幕显示内容的方法 | |
| CN1304969C (zh) | 图像显示系统、方法，投影机及其控制方法 | |
| CN102866848B (zh) | 基于wifi的云教室智能教鞭的控制方法 | |
| CN104331243A (zh) | 基于缩略图重构的移动终端与大屏显示互动控制方法 | |
| CN104008678A (zh) | 课堂教学多媒体信息实时采集与加密的智能网络终端及工作方法 | |
| CN103595759B (zh) | 基于云端的桌面展示方法 | |
| CN102084333A (zh) | 远程可视化系统的显示配置方法 | |
| CN102223370A (zh) | 开放型实验室综合管理系统 | |
| CN106648670B (zh) | 云教室同屏共控系统和方法 | |
| CN201859429U (zh) | 同时显示多计算机桌面的投影仪控制系统 | |
| CN102118397B (zh) | 一种基于手机的远程会议通信方法和系统 | |
| CN104980475B (zh) | 显示内容的同步呈现方法和装置 | |
| CN110297584A (zh) | 面向幼教的沉浸式交互cave教室 | |
| Nan et al. | Multimedia learning platform development and implementation based on cloud environment | |
| WO2019184057A1 (zh) | 一种学生终端和课堂互动答题系统 | |
| CN108353075A (zh) | 多网络镜像系统和方法 | |
| CN105812900A (zh) | 一种无线同屏反向控制方法及控制设备 | |
| CN101477753A (zh) | 基于多种控制方式的交互式多媒体演示系统和方法 | |
| CN104656597A (zh) | 一种用于展厅远程控制的中央控制系统 | |
| Dai et al. | Cloud-Edge computing technology-based internet of things system for smart classroom environment | |
| CN105376201B (zh) | 一种多媒体信息交互系统及交互方法 | |
| CN109299054A (zh) | 一种数据统计方法及终端设备 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| C14 | Grant of patent or utility model | ||
| GR01 | Patent grant | ||
| CF01 | Termination of patent right due to non-payment of annual fee | ||
| CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20120201 Termination date: 20161026 |