CN108965217B - 一种基于c/s架构的多屏幕多媒体交互系统 - Google Patents

Abstract

本发明提供一种基于C/S架构的多屏幕多媒体交互系统，该系统包括一服务端和至少一客户端。所述客户端包括用户交互界面和消息通信模块，其中用户交互界面对用户的操作进行响应，消息通信模块用于与服务端通信。所述服务端至少与一显示屏连接，且该服务端包括消息通信模块、客户端管理模块、屏幕管理模块、多媒体管理模块、远程操作控制管理模块，其中消息通信模块用于与客户端通信，客户端管理模块管理已连接的客户端，屏幕管理模块管理屏幕信息，多媒体管理模块管理多媒体资源的运行情况，远程操作控制管理模块用于客户端对服务端进行控制。该系统允许多人多机在演示时进行协同合作，具备更高的灵活性。

Description

一种基于C/S架构的多屏幕多媒体交互系统

技术领域

本发明涉及多媒体显示技术领域，尤其涉及一种基于C/S架构的多屏幕多媒体交互系统。

背景技术

随着计算机技术的发展，在会议交流、产品展示时，多屏幕环境下的多媒体演示变得越来越重要。在会议交流时，可能会需要两人或多人来将各自的想法意见在显示屏上展示出来，而这些显示屏只由这一台电脑控制，就需要在展示的时候，多次更换使用电脑的人员，这会影响到会议交流的效率。

因此，面对着不同的多媒体演示场景和多媒体硬件环境，有必要构建一个适用于各个场景和硬件环境的多媒体交互系统，使不同场景下的多媒体演示内容更加丰富、方式更加多样化。

发明内容

本发明的目的在于提供一种基于C/S架构的多屏幕多媒体交互系统，该系统使用了一种基于C/S架构上的多客户端和一个服务端的通信方式，能够适用于各种各样的多媒体硬件环境。

为达上述目的，本发明所采用的技术方案为：

一种基于C/S架构的多屏幕多媒体交互系统，包括一服务端和至少一客户端；所述客户端包括用户交互界面和消息通信模块，且该客户端通过IP地址和端口直接访问服务端；所述服务端包括消息通信模块、客户端管理模块、屏幕管理模块、多媒体管理模块和远程操作控制管理模块，且该服务端至少与一显示屏连接；

所述用户交互界面用于对用户的使用操作进行响应，并向所述客户端的消息通信模块发送对应的消息指令；

所述客户端的消息通信模块基于socket接口，根据上述消息指令向服务端发送连接请求，接收所述屏幕管理模块和多媒体管理模块的当前状态信息的变化，并向服务端发送消息指令；

所述服务端的消息通信模块基于socket接口，接收来自于客户端的连接请求及消息指令，并根据消息指令的类型，将所述消息指令转发给所述客户端管理模块、屏幕管理模块、多媒体管理模块和远程操作控制管理模块进行相应处理，接收相应的处理结果并发送给客户端；

所述客户端管理模块用于管理多个客户端的连接状态，每一个连接到服务端的客户端都被分配一个权限，其中一个作为主客户端，其余作为从客户端；

所述屏幕管理模块用于基于当前安装有服务端的计算机显示设备情况，完成屏幕的虚拟划分与设定；

所述多媒体管理模块用于完成多媒体资源的控制操作，且所有多媒体资源都被赋予一个唯一标识符；

所述远程操作控制管理模块用于将主客户端的远程操作控制消息指令转换为服务端的消息指令，并在服务端执行，使主客户端临时对服务端进行控制。

进一步地，所述消息指令包括与客户端管理模块对应的操作权限管理消息指令、与屏幕管理模块对应的屏幕配置消息指令、与多媒体管理模块对应的多媒体控制消息指令和文件管理消息指令以及与远程操作控制管理模块对应的远程操作控制消息指令；且所述客户端和服务端的消息通信模块均使用TCP协议。

进一步地，所述主客户端比从客户端拥有更高的权限；且所述服务端默认第一个接入的客户端为主客户端，其他接入的从客户端如果要对服务端资源进行控制，则向服务端提出成为主客户端的申请，服务端接到申请后，通知当前主客户端进行确认，当前主客户端完成确认后，提出申请的从客户端成为主客户端，原主客户端成为从客户端。

进一步地，当所述服务端接入的客户端数量超过两个时，所述服务端的消息通信模块接收各客户端发送的消息指令，但只对主客户端的所有消息指令及从客户端的操作权限管理消息指令进行处理，并将处理后生成的提示信息指令分发给所有已接入的客户端。

进一步地，当至少有一个已接入的客户端，且有新的客户端接入时，所述服务端的消息通信模块将所述屏幕管理模块和多媒体管理模块的当前状态信息转换为反馈信息发送给该新的客户端，以使该新的客户端与其他已接入的客户端进行信息同步。

更进一步地，所述屏幕管理模块和多媒体管理模块的当前状态信息包括分屏的所有划分区域的编号、位置和大小，已加载的多媒体资源的所在分屏编号以及多媒体资源的文件信息；且所述屏幕管理模块和多媒体管理模块的当前状态信息在服务端启动后开始记录。

进一步地，所述屏幕管理模块根据显示屏的大小和位置虚拟划分屏幕，且所述客户端能够发送屏幕配置消息指令更改屏幕管理模块的屏幕划分状态。

进一步地，所有多媒体资源都使用标识符区分和管理，已打开的多媒体资源使用字典(Dictionary)维护，打开多媒体资源将其添加到字典中，关闭多媒体资源将其从字典中删除。

进一步地，所述多媒体管理模块包括以下操作：

(1)多媒体资源加载：在选择的一个分屏中加载并打开待播放的多媒体资源，并获得窗口对象标识号；

(2)多媒体资源控制：控制多媒体资源窗口在分屏间移动；

(3)多媒体资源关闭：将多媒体资源窗口从分屏移除并关闭多媒体资源；

(4)文件上传：将客户端的文件上传到服务端。

进一步地，客户端能够远程控制服务端的多媒体资源的播放、停止以及服务端的鼠标、键盘。

本发明的有益效果在于：

(1)允许多人多机在演示时进行协同合作，具备更高的灵活性；

(2)多客户端之间明确的权限控制，促使多人合作有条不紊的进行；

(3)服务端和客户端之间的通信原语定义明确，消息指令具有较强、较容易拓展的特点；

(4)采用字典来维护用户表和多媒体资源列表，不仅有利于本发明系统对多媒体资源的维护，还有利于提升工作效率；

(5)本发明系统的结构层次比较清晰，模块之间的耦合性低，使得本发明系统在以后更容易修改升级。

附图说明

图1是本发明提供的一种基于C/S架构的多屏幕多媒体交互系统的功能模块图；

图2是本发明客户端的界面示意图；

图3是本发明屏幕管理模块界面示意图；

图4是本发明的文件上传界面示意图；

图5是本发明硬件环境示意图。

具体实施方式

为使本发明的上述特征和优点能更明显易懂，下文特举实施例，并配合所附图作详细说明如下。

本发明提供一种基于C/S架构的多屏幕多媒体交互系统，请参考图1，该系统包括一服务端和至少一客户端；其中所述客户端通过IP地址和端口直接访问服务端；所述服务端至少与一显示屏连接；

所述客户端用于与用户进行交互，根据用户的使用操作，向服务端发送对应的消息指令。所述客户端包括用户交互界面和消息通信模块。

所述用户交互界面用于对用户的使用操作进行响应，并向所述消息通信模块发送对应的消息指令。

所述消息通信模块基于socket接口，根据上述消息指令向服务端发送连接请求，接收服务端状态的变化，并向服务端发送控制消息指令；其中所述服务端状态包括服务端的屏幕管理模块和多媒体管理模块的当前状态信息。所述消息通信模块还用于从服务端接收消息，其中以发送消息为主。且该消息通信模块使用TCP协议。

所述服务端用于接收来自客户端的消息指令，进行相应的资源配置、展示环境配置、资源调度展示等操作。所述服务端包括消息通信模块、客户端管理模块、屏幕管理模块、多媒体管理模块和远程操作控制管理模块。

所述消息通信模块基于socket接口，接收来自于客户端的连接请求，与客户端进行通信，并接收来自客户端的消息指令，对消息指令进行解析。所述消息通信模块还用于向客户端发送消息，其中以接收消息为主。其它四个模块(客户端管理模块、屏幕管理模块、多媒体管理模块、远程操作控制管理模块)与消息通信模块之间互相提供功能和调用，消息通信模块根据消息指令的类型，将消息指令转发给对应的模块进行处理，处理结束后，将处理结果转发给消息通信模块，经由消息通信模块发送给客户端。且该消息通信模块使用TCP协议。

所述客户端管理模块用于管理多客户端连接状态，每一个连接到服务端的客户端都会被分配一个权限，其中一个作为主客户端，其余作为从客户端。且主客户端比从客户端拥有更高的权限。

所述屏幕管理模块用于基于当前安装有服务端的计算机显示设备情况，完成屏幕的虚拟划分与设定。在一般情况下，屏幕管理模块按显示屏的大小和位置来划分屏幕，该屏幕为虚拟划分所得。客户端能够发送屏幕配置消息指令来更改屏幕管理模块的屏幕划分状态。

所述多媒体管理模块用于完成多媒体资源的控制操作，所有多媒体资源都被赋予一个唯一标识符，服务端在接收到客户端发来的加载、控制和关闭多媒体资源的消息指令后，完成相应的具体操作。

所述远程操作控制管理模块用于接收并识别主客户端鼠标、键盘的远程操作控制消息指令，并将其转换为服务端鼠标、键盘的消息指令，在服务端执行，使得主客户端可以临时对服务端进行控制。

所述客户端和服务端的消息通信模块均使用自定义的消息指令。所述消息指令是指经过预定义的消息结构，且根据用户的使用操作，赋予消息结构中各个参数不同的值。消息指令可分为与客户端管理模块对应的操作权限管理消息指令、与屏幕管理模块对应的屏幕配置消息指令、与多媒体管理模块对应的多媒体控制消息指令和文件管理消息指令以及与远程操作控制管理模块对应的远程操作控制消息指令。

所述操作权限管理消息指令包括：

主从客户端申请指令：其参数包括客户端的标识符；其功能是某一客户端向服务端申请成为主客户端，申请结果将以提示信息指令返回；

所述屏幕配置消息指令包括：

(1)屏幕信息请求指令：其参数包括各个屏幕的大小及位置；其功能是更改服务端当前屏幕的划分；

(2)屏幕信息应答指令：其参数包括屏幕的数量、各个屏幕的大小及位置；其功能是在服务端屏幕的划分产生变化的时候通知客户端产生变化后的情况。

所述多媒体控制消息指令包括：

(1)多媒体启动请求指令：其参数包括多媒体资源标识符、多媒体类型、多媒体资源的文件信息、目标屏幕编号；其功能是将用户标识的多媒体资源在服务端上打开到指定的屏幕上。

(2)多媒体启动应答指令：其参数包括多媒体资源标识符、多媒体启动结果；其功能是服务端向客户端回应标识的多媒体资源的启动结果；

(3)多媒体停止请求指令：其参数包括多媒体资源标识符；其功能是关闭标识的多媒体资源；

(4)屏幕内多媒体停止请求指令：其参数包括屏幕编号；其功能是关闭所有在该屏幕打开的多媒体资源；

(5)多媒体停止应答指令：其参数包括多媒体资源标识符、请求结果；其功能是通知客户端多媒体资源是否成功关闭；

(6)移动多媒体指令：其参数包括多媒体资源标识符、目标屏幕编号；其功能是将标识的多媒体资源从当前屏幕移动到目标屏幕上；

(7)隐藏多媒体指令：其参数包括多媒体资源标识符；其功能是将标识的多媒体资源隐藏；

(8)提示信息指令：其参数包括错误信息；其功能是通知用户之前操作产生的提示信息；

(9)屏幕交换指令：其参数包括源屏幕编号、目标屏幕编号；其功能是将标识的两个屏幕上的所有多媒体资源交换位置；

(10)多媒体资源控制指令：其参数包括多媒体资源标识符、多媒体资源操作类型；其功能是控制多媒体资源的播放、停止、前进、后退。

其中所述多媒体资源标识符为GUID，具有唯一性。

所述文件管理消息指令包括：

(1)文件列表请求指令：其参数包括文件路径；其功能是客户端向服务端请求获取文件路径的信息；

(2)文件列表应答指令：其参数包括文件路径、文件目录信息、文件信息；其功能是服务端向客户端回应文件路径的信息，包括路径下的所有目录和所有文件；

(3)文件上传准备请求指令：其参数包括文件标识符、文件名、文件长度、目标路径；其功能是客户端向服务端请求上传某一文件；

(4)文件上传准备应答指令：其参数包括文件标识符、请求结果、提示信息；其功能是服务端向客户端回应是否允许上传某一文件，并提示用户原因；

(5)文件上传请求指令：其参数包括文件标识符、文件数据；其功能是将客户端中的某一文件上传到服务端中；

(6)文件上传应答指令：其参数包括文件标识符、上传进度、请求结果；其功能是服务端通知客户端标识的文件的上传进度和文件是否上传成功。

所述远程操作控制消息指令包括：

(1)键盘操作指令：其参数包括按键、按键状态、组合键状态；其功能是当某一客户端控制服务端时，响应键盘操作；

(2)鼠标移动指令：其参数包括横向移动距离、纵向移动距离；其功能是当某一客户端控制服务端时，响应鼠标移动操作；

(3)鼠标点击指令：其参数包括鼠标按键类型、鼠标按键状态；其功能是当某一客户端控制服务端时，响应鼠标点击操作。

在所述服务端的客户端管理模块中，服务端会默认第一个接入的客户端为主客户端，其他接入的从客户端如果需要对服务端资源进行控制，需要向服务端提出成为主客户端申请。服务端接到申请后，会通知当前主客户端进行确认，当前主客户端完成确认后，提出申请的从客户端成为主客户端，原主客户端成为从客户端。

当所述服务端接入的客户端数量超过两个时，所述服务端的消息通信模块接收各客户端发送的消息指令，但只对主客户端的所有消息指令及从客户端的操作权限管理消息指令进行处理，经过处理生成提示信息指令，并将该提示信息指令分发给所有已接入的客户端。在至少一个已接入的客户端的情况下，当有新的客户端接入时，该客户端与其他已接入的客户端进行信息同步，即所述消息通信模块将屏幕管理模块和多媒体管理模块的当前状态信息转换为反馈信息发送给该客户端；其中所述当前状态信息包括分屏的所有划分区域的编号、位置和大小，已加载的多媒体资源的所在分屏编号以及多媒体资源的文件信息。

所述服务端对客户端加以甄别，把其中之一客户端作为主客户端，其余作为从客户端。主客户端与从客户端有着操作权限的区别。服务端采用字典来维护已连接的客户端；其主客户端与从客户端的操作权限的区别在于：

(1)只有主客户端拥有对服务端的直接操作控制权；

(2)从客户端对服务端进行操作控制前，需要得到主客户端的许可，主客户端许可后，当前主客户端变为从客户端，当前从客户端变为主客户端；

(3)当前没有客户端连接时，发起连接的客户端直接作为主客户端，并对服务端具有操作控制权；

(4)在当前已有主客户端连接时，新连接的客户端作为从客户端；

(5)主客户端可以主动将权限移交给从客户端，移交权限后，该主客户端降为从客户端。

在所述服务端的屏幕管理模块中，客户端可以设置服务端的分屏情况，通过消息指令对服务端的显示区域进行再划分，可以将显示区域划分成一个或任意多个分屏，为服务端的多媒体演示提供帮助。

所述显示区域为由一个或多个显示屏组成的区域，对用户来说是可见的。所述分屏的数量至少为1。所述分屏划分出来的屏幕为虚拟屏幕；所述分屏按序编号，当分屏修改后，分屏中的多媒体资源移动至对应编号的分屏中。若不存在对应编号，默认将该多媒体资源移动至第1号分屏并隐藏该多媒体资源。

所述屏幕管理模块和多媒体管理模块的当前状态信息将被记录，具体记录信息包括：分屏的所有划分区域的编号、位置和大小，已加载的多媒体资源的所在分屏编号以及多媒体文件的文件信息。

在所述服务端的多媒体管理模块中，所有多媒体资源都使用标识符来区分和管理，已打开的多媒体资源使用字典来维护，打开多媒体资源将其添加到字典中，关闭多媒体资源将其从字典中删除。所述服务端的多媒体管理模块主要操作包括：

(1)多媒体资源加载：在选择的一个分屏中加载待播放的多媒体资源，打开所述待播放的多媒体资源，并获得窗口对象标识号；

(2)多媒体资源控制：控制多媒体资源窗口在分屏间移动；

(3)多媒体资源关闭：将多媒体资源窗口从分屏移除，并关闭多媒体资源；

(4)文件上传：将客户端的文件上传到服务端。

打开或关闭多媒体资源都将使得服务端的多媒体资源列表发生变化，服务端将新产生的多媒体资源列表经消息通信模块分发给所有已连接的客户端，使客户端的多媒体资源列表与服务端的多媒体资源列表保持同步；新的客户端接入后，服务端将现有多媒体资源列表发送给新接入客户端，使多媒体资源列表保持同步。

在所述服务端的远程操作控制管理模块中，客户端可以通过远程控制服务端的多媒体资源的播放、停止，可以控制服务端的鼠标、键盘。所述服务端的远程操作控制管理模块主要包括以下功能：

(1)远程控制多媒体播放功能：通过远程操作控制消息指令控制多媒体资源的播放控制，播放控制可以同时应用于一个或多个多媒体资源，因此可以在不同屏幕完成同步播放。

所述播放控制包括开始播放、停止播放、进度前进、进度后退；所述多媒体资源包括PPT、视频等可播放类多媒体资源；所述同步播放指在播放相同或相似的多媒体资源时，使它们的画面处于相同或相似的状态。

(2)客户端资源上传功能：通过文件管理消息指令中的文件上传部分将客户端中的多媒体资源上传到服务端。

客户端向服务端发送文件上传请求指令，经过服务端应答后，服务端和客户端打开文件上传通道，客户端开始上传文件，上传文件成功后，服务端和客户端关闭上传通道。其中一个客户端成功上传资源后，所有连接到该服务端的客户端，都能够使用或打开该多媒体资源。

(3)客户端键鼠操作指定显示屏功能：用于给予客户端更加直接的方式来控制服务端，在选定需要控制的显示屏之后，可以直接控制服务端的键盘和鼠标；所述选定的显示屏为进行分屏划分后的虚拟屏幕。所述控制键盘和鼠标为使用win32API进行的模拟操作，在大多数情况下，与真实使用键盘和鼠标的操作相同。

请参考图2，该图是本发明客户端的界面示意图。以下操作都在客户端上操作，操作的结果会影响到服务端。

一、客户管理

1.要使用本发明系统首先需要登录，登录步骤为：

(1)输入预先获取的用户名和密码；

(2)点击登录，连接上服务端之后，将收到连接成功的提示，接下来可以继续下达其它消息指令。

2.申请控制权限的步骤为：

(1)点击“申请控制权限”；

(2)等待当前拥有控制权限的客户端应答是否同意让出控制权限；

(3)若获得控制权限，可以对服务端下达消息指令；其中只有一个客户端连接服务端时，该客户端默认获得控制权限。同一时刻，最多只有一个客户端拥有控制权限。拥有控制权限的客户端断开连接时，此时，其余客户端可以申请控制权限，最先申请的客户端将获得控制权限。当有多个客户端连接服务端时，第一个连接的客户端获得控制权限，其余客户端没有控制权限。

二、多媒体资源控制

多媒体资源包括Word文档、Excel文档、PPT文档、图片、视频(格式不限)等。打开多媒体资源、移动多媒体资源、交换分屏、关闭多媒体资源等实际操作都只在服务端进行，用户使用客户端界面上的功能将会把消息指令发送给服务端。

1.打开多媒体资源的具体步骤为：

(1)点击界面中的一个分屏，比如“分屏1”；

(2)点击“打开多媒体资源”，弹出文件选择对话框，选择要打开的多媒体文件；

(3)通过文件系统，调用API函数将需要的文件打开，并得到被打开文件的窗口对象标识号，该标识号存于字典中，用以调用该窗口的相关操作；

(4)打开的多媒体资源将在分屏1中显示，如果是PPT文档或视频，将会直接在分屏1中开始播放；并且“多媒体资源列表”中以横向列表的方式显示，显示的是所有已打开的多媒体资源的名称。

2.移动多媒体资源的具体步骤有两种方式：

(1)点击“多媒体资源列表”中的选项来选择需要移动的多媒体资源，点击需要移动到的分屏，再点击“移动多媒体资源”就可以将打开的多媒体资源窗口从一个分屏移动到另一个分屏。

(2)点击“多媒体资源列表”中的选项来选择需要移动的多媒体资源，摁住左键，拖拽向界面中的分屏，就可以将拖拽的多媒体资源从之前的分屏移动到目标分屏。

其中当一个分屏中已经有一个打开的多媒体资源时，再次在该分屏中打开多媒体资源时，之前打开的多媒体资源窗口将被隐藏，新打开的多媒体资源将被显示。

3.交换分屏的具体步骤为：

(1)点击选择“分屏”中的两个分屏；

(2)点击“交换分屏”，隶属于这两个分屏的多媒体资源将会被交换位置。

其中交换的多媒体资源包括隐藏的多媒体资源。

4.关闭多媒体资源的具体步骤有两种方式：

(1)点击“多媒体资源列表”中的选项来选择需要关闭的多媒体资源，或者点击选择一个分屏以关闭分屏中的所有多媒体资源(包括隐藏的多媒体资源)，再点击“关闭多媒体资源”，可以将多媒体资源关闭。

(2)点击“多媒体资源列表”中的选项来选择需要关闭的多媒体资源，摁住左键，拖拽向“关闭多媒体资源”，就可以将拖拽的多媒体资源关闭。

三、远程管理

1.远程设置分屏

分屏可以从客户端进行修改，可以修改分屏的数量、大小、位置等。

其中修改分屏的步骤为：

(1)鼠标右键点击分屏区，选择修改分屏信息，弹出对话框，如图3所示。

(2)显示的分屏列表可以通过右键来增加分屏和删除分屏，列表中显示了分屏的位置信息和分屏的宽度及高度的数值(即分屏的大小)，修改数值即可。

(3)点击“确认”，即确认分屏的修改，客户端向服务端发送屏幕信息请求指令，收到服务端返回的修改完成的应答。

分屏修改后，各个分屏内的多媒体资源也会作出相应的调整。

2.远程控制多媒体资源播放

客户端可以控制服务端的多媒体资源的播放状态，包括“播放”、“停止”、“后退”、“前进”。

多媒体资源播放控制的具体步骤有两种方式：

(1)当打开的多媒体资源为PPT、视频时，打开的多媒体资源将处于播放状态，可以被多媒体资源播放栏控制；

(2)点击“多媒体资源列表”中的选项来选择需要控制的多媒体资源，或者点击选择一个或多个分屏来选择多个分屏中的可播放多媒体资源；

其中多媒体资源播放栏显示的是多媒体资源播放控制功能“播放”、“停止”、“后退”、“前进”，点击即可对在(2)中选中的多媒体资源进行播放控制，使多媒体资源开始播放、停止、后退和前进。若同时选中多个多媒体资源，可以使它们同步播放。

所述PPT、视频等多媒体资源为可播放多媒体资源。不可播放多媒体资源如文档、图片等将不会受多媒体资源播放控制的影响。在播放多媒体资源时，被隐藏的多媒体资源将会保持隐藏状态，不会被播放。在选中分屏时，该分屏所包含的隐藏的多媒体资源不会被播放。多媒体资源播放控制可以作用于单个多媒体资源或多个多媒体资源，可以完成多个多媒体资源同步播放。

3.客户端资源上传

客户端可以将本地文件(包括但不限于多媒体资源)上传到服务端，达到共享的目的。图4是本发明的文件上传界面示意图。且上传资源的步骤为：

(1)点击客户端界面的“上传资源”；

(2)点击“本地文件”右侧的“浏览”，通过文件系统，选择需要上传的文件；

(3)点击“上传目录”右侧的“浏览”，通过文件系统，选择服务端的目标目录；

点击“确定”，开始上传，上传完成之后，会得到提示。

4.客户端键盘、鼠标操作指定显示屏

客户端可以控制服务端的键盘和鼠标，其步骤为：

(1)在所有分屏中选择一个分屏；

(2)点击“远程控制”，等待服务端处理；

(3)弹出窗口，窗口内显示该分屏的图像，在该窗口内的鼠标操作等同于服务端进行鼠标操作，在该窗口内的键盘操作等同于服务端进行键盘操作，即开始对服务端的鼠标、键盘进行控制。

请参考图5，硬件环境的服务端使用一台主机，有多台显示设备(包括显示屏、投影仪等)，硬件环境的核心在于使用了支持多台显示设备的Matrox的M9188显卡，该显卡为8端口显卡，即使用一块显卡就可以连接最多8台显示设备。

硬件环境的客户端使用一台笔记本电脑，且本发明系统具有至少一个客户端，网络使用一般的家用路由器搭建配置。

以上实施仅用以说明本发明的技术方案而非对其进行限制，本领域的普通技术人员可以对本发明的技术方案进行修改或者等同替换，而不脱离本发明的精神和范围，本发明的保护范围应以权利要求书所述为准。

Claims (10)

1.一种基于C/S架构的多屏幕多媒体交互系统，包括一服务端和至少一客户端；所述客户端包括用户交互界面和消息通信模块，且该客户端通过IP地址和端口直接访问服务端；所述服务端包括消息通信模块、客户端管理模块、屏幕管理模块、多媒体管理模块和远程操作控制管理模块，且该服务端至少与一显示屏连接；

所述用户交互界面用于对用户的使用操作进行响应，并向所述客户端的消息通信模块发送对应的消息指令；

所述客户端的消息通信模块基于socket接口，根据上述消息指令向服务端发送连接请求，接收所述屏幕管理模块和多媒体管理模块的当前状态信息的变化，并向服务端发送消息指令；

所述服务端的消息通信模块基于socket接口，接收来自于客户端的连接请求及消息指令，并根据消息指令的类型，将所述消息指令转发给所述客户端管理模块、屏幕管理模块、多媒体管理模块和远程操作控制管理模块进行相应处理，接收相应的处理结果并发送给客户端；

所述客户端管理模块用于管理多个客户端的连接状态，每一个连接到服务端的客户端都被分配一个权限，其中一个作为主客户端，其余作为从客户端；

所述屏幕管理模块用于基于当前安装有服务端的计算机显示设备情况，完成屏幕的虚拟划分与设定；

所述多媒体管理模块用于完成多媒体资源的控制操作，且所有多媒体资源都被赋予一个唯一标识符；

所述远程操作控制管理模块用于将主客户端的远程操作控制消息指令转换为服务端的消息指令，并在服务端执行，使主客户端临时对服务端进行控制；

其中，所述消息指令包括与客户端管理模块对应的操作权限管理消息指令、与屏幕管理模块对应的屏幕配置消息指令、与多媒体管理模块对应的多媒体控制消息指令和文件管理消息指令以及与远程操作控制管理模块对应的远程操作控制消息指令；

所述操作权限管理消息指令包括主从客户端申请指令，其参数包括客户端的标识符，其功能是当一客户端向服务端申请成为主客户端，申请结果将以提示信息指令返回；

所述屏幕配置消息指令包括：

(1)屏幕信息请求指令：其参数包括各个屏幕的大小及位置，用于更改服务端当前屏幕的划分；

(2)屏幕信息应答指令：其参数包括屏幕的数量、各个屏幕的大小及位置；用于在服务端屏幕的划分产生变化的时候通知客户端产生变化后的情况；

所述多媒体控制消息指令包括：

(1)多媒体启动请求指令：其参数包括多媒体资源标识符、多媒体类型、多媒体资源的文件信息、目标屏幕编号；用于将用户标识的多媒体资源在服务端上打开到指定的屏幕上；

(2)多媒体启动应答指令：其参数包括多媒体资源标识符、多媒体启动结果；用于服务端向客户端回应标识的多媒体资源的启动结果；

(3)多媒体停止请求指令：其参数包括多媒体资源标识符；用于关闭标识的多媒体资源；

(4)屏幕内多媒体停止请求指令：其参数包括屏幕编号；用于关闭所有在该屏幕打开的多媒体资源；

(5)多媒体停止应答指令：其参数包括多媒体资源标识符、请求结果；用于通知客户端多媒体资源是否成功关闭；

(6)移动多媒体指令：其参数包括多媒体资源标识符、目标屏幕编号；用于将标识的多媒体资源从当前屏幕移动到目标屏幕上；

(7)隐藏多媒体指令：其参数包括多媒体资源标识符；用于将标识的多媒体资源隐藏；

(8)提示信息指令：其参数包括错误信息；用于通知用户之前操作产生的提示信息；

(9)屏幕交换指令：其参数包括源屏幕编号、目标屏幕编号；用于将标识的两个屏幕上的所有多媒体资源交换位置；

(10)多媒体资源控制指令：其参数包括多媒体资源标识符、多媒体资源操作类型；用于控制多媒体资源的播放、停止、前进、后退；

所述文件管理消息指令包括：

(1)文件列表请求指令：其参数包括文件路径；用于客户端向服务端请求获取文件路径的信息；

(2)文件列表应答指令：其参数包括文件路径、文件目录信息、文件信息；用于服务端向客户端回应文件路径的信息，包括路径下的所有目录和所有文件；

(3)文件上传准备请求指令：其参数包括文件标识符、文件名、文件长度、目标路径；用于客户端向服务端请求上传某一文件；

(4)文件上传准备应答指令：其参数包括文件标识符、请求结果、提示信息；用于服务端向客户端回应是否允许上传某一文件，并提示用户原因；

(5)文件上传请求指令：其参数包括文件标识符、文件数据；用于将客户端中的文件上传到服务端中；

(6)文件上传应答指令：其参数包括文件标识符、上传进度、请求结果；用于服务端通知客户端标识的文件的上传进度和文件是否上传成功。

2.如权利要求1所述的系统，其特征在于，所述客户端和服务端的消息通信模块均使用TCP协议。

3.如权利要求1所述的系统，其特征在于，所述主客户端比从客户端拥有更高的权限；且所述服务端默认第一个接入的客户端为主客户端，其他接入的从客户端如果要对服务端资源进行控制，则向服务端提出成为主客户端的申请，服务端接到申请后，通知当前主客户端进行确认，当前主客户端完成确认后，提出申请的从客户端成为主客户端，原主客户端成为从客户端。

4.如权利要求1所述的系统，其特征在于，当所述服务端接入的客户端数量超过两个时，所述服务端的消息通信模块接收各客户端发送的消息指令，但只对主客户端的所有消息指令及从客户端的操作权限管理消息指令进行处理，并将处理后生成的提示信息指令分发给所有已接入的客户端。

5.如权利要求1所述的系统，其特征在于，当至少有一个已接入的客户端，且有新的客户端接入时，所述服务端的消息通信模块将所述屏幕管理模块和多媒体管理模块的当前状态信息转换为反馈信息发送给该新的客户端，以使该新的客户端与其他已接入的客户端进行信息同步。

6.如权利要求1或5所述的系统，其特征在于，所述屏幕管理模块和多媒体管理模块的当前状态信息包括分屏的所有划分区域的编号、位置和大小，已加载的多媒体资源的所在分屏编号以及多媒体资源的文件信息；且所述屏幕管理模块和多媒体管理模块的当前状态信息在服务端启动后开始记录。

7.如权利要求1所述的系统，其特征在于，所述屏幕管理模块根据显示屏的大小和位置虚拟划分屏幕，且所述客户端能够发送屏幕配置消息指令更改屏幕管理模块的屏幕划分状态。

8.如权利要求1所述的系统，其特征在于，所有多媒体资源都使用标识符区分和管理，已打开的多媒体资源使用字典维护，打开多媒体资源将其添加到字典中，关闭多媒体资源将其从字典中删除。

9.如权利要求1所述的系统，其特征在于，所述多媒体管理模块包括以下操作：

(1)多媒体资源加载：在选择的一个分屏中加载并打开待播放的多媒体资源，并获得窗口对象标识号；

(2)多媒体资源控制：控制多媒体资源窗口在分屏间移动；

(3)多媒体资源关闭：将多媒体资源窗口从分屏移除并关闭多媒体资源；

(4)文件上传：将客户端的文件上传到服务端。

10.如权利要求1所述的系统，其特征在于，客户端能够远程控制服务端的多媒体资源的播放、停止以及服务端的鼠标、键盘。

Images