CN102902501A - 文件多屏扩展显示的方法 - Google Patents

Abstract

本发明涉及一种文件多屏扩展显示的方法，特别是涉及一种基于网络视频会议的视频文件多屏扩展显示的方法。本发明所述的方法，主要步骤为：首先设置多个网卡连接多个显示设备；获取每个显示设备的特征信息并存储在存储单元中；根据当前所连接的显示设备数量判断是否激活文件扩展显示菜单项；接收到用户的扩展指令后，根据指令要求，将文件显示框架进行剖离，重绘主显示窗口，构建扩展显示窗口；最后在主显示设备上显示主显示窗口，在扩展设备中显示扩展显示窗口。本发明的有益效果为，实现了支持多种文件多屏扩展显示的方法，特别是视频会议系统屏幕扩展的无损视频、多媒体、电子白板、屏幕共享等信息的显示。本发明尤其适用于网络视频会议系统。

Description

文件多屏扩展显示的方法

技术领域

本发明涉及一种文件多屏扩展显示的方法，特别是涉及一种基于网络视频会议的视频文件多屏扩展显示的方法。

背景技术

视频会议系统是基于网络支撑人们跨越空间进行的实时信息交流，并能开展协同工作的应用系统。它通过接入视频采集设备、音频采集设备将视频、音频数据进行实时传输，实现各协同人员远距离的真实、直观的音视频交流。同时利用多媒体技术的支持，视频会议系统可以协同用户处理工作中的相关信息，如：电子白板交互、文档共享、屏幕共享、媒体共享、远程控制、应用程序共享等，从而构建了一个多人共享的虚拟工作空间——网络会议室。

视频会议系统技术的发展，逐步形成了软件视频会议系统和硬件视频会议系统。同时更多的实体会议室经过装修安装网络视频会议室终端、摄像机、麦克风、音箱、显示设备等，将实体会议室升级成为可以进行远程会议召开的网络视频会议室。在网络会议室中，用户通常希望将更多的信息同时呈现在显示设备中，如：用户在会议中讲解文档时，希望同时能清晰地看到电子白板和视频；用户会议中可能希望同时清晰的看到共享的多媒体、视频信息、电子白板等。此时一个显示设备已无法满足用户要求，多个显示设备的同时显示技术则被应用到视频会议系统中。

现有应用在视频会议系统中的多屏显示技术主要方法为如申请号为200610157801.4的中国专利申请，介绍了多屏显示拼接控制器（又称大屏幕显示），其主要是将视频会议系统接入一个其他的多屏显示拼接控制器设备将视频会议画面输出在多个显示器中。其实现技术的装置本身与视频会议系统无关。

大屏幕显示的技术关键在于获取视频输入的显示信息，然后根据屏幕的输出进行切割，将屏幕输出画面切割成多个画面并利用相同的同步技术将图像同步显示在显示设备上。从而可以将一个图像显示在多个显示设备中，而多个显示设备经过物理的拼接形成一个大屏幕，从而实现大屏显示。大屏显示技术是将屏幕切割为多个图像分别显示在多个显示器，然后将显示设备物理组装在一起形成大屏。

在视频会议系统应用中，其缺点主要在于：大屏显示技术并非专门针对视频会议系统，而无法将视频会议系统中特定的部分扩展显示；同时大屏显示技术涉及对屏幕图像切割由显示设备物理拼接，因此对物理显示设备要求较高，通常需要无边的显示器，从而成本较高；另外大屏显示技术在切割图像时，无法识别关键图像，极大可能将一个关键图像切割成多个图像从而在拼接时无法完全对接形成部分关键图像模糊（如：电子白板中的文字切割后，拼接无法完全识别等）。大屏显示技术将图像切割后，显示设备需物理组合在一起才能查看完整图像，无法应用到环境受限的会议室中，因此带来较大不便。

发明内容

本发明所要解决的技术问题，就是针对现有网络视频会议的视频文件扩展显示技术的不足，提出一种文件多屏扩展显示的方法。

本发明解决上述技术问题所采用的技术方案是：文件多屏扩展显示的方法，其特征在于，包括以下步骤：

a.设置多个网卡连接多个显示设备；

b.获取每个显示设备的特征信息并存储在存储单元中；

c.判断显示设备数量是否大于1，若是，则进入步骤d，若否，则在该显示设备上正常显示文件；

d.将一台显示设备作为主显示设备显示文件内容，其它显示设备作为扩展显示设备备用；

e.激活文件扩展显示菜单项，接收扩展显示指令；

f.根据指令要求，将文件显示框架进行剖离，重绘主显示窗口，构建扩展显示窗口；

g.在主显示设备上显示主显示窗口，在扩展设备中显示扩展显示窗口。

具体的，所述特征信息包括分辨率和设备标识。

具体的，步骤b还包括以下步骤：

b1.对显示设备进行标识，按自然数对其依次进行编号；

b2.根据编号逐个获取显示卡及显示设备的特征信息，并分别获取各个显示设备屏幕的左上角开始坐标和右下角结束坐标；

b3.将所有显示设备按编号进行存储备用。

具体的，所述显示设备按编号进行存储的存储方式为：数组存储方式、队列存储方式和链表存储方式中的一种或者多种。

具体的，获取各个显示设备左上角开始坐标和右下角结束坐标的计算方式为：

定义开始坐标为S，结束坐标为E，分辨率长为L、宽为W，

则： $S_n=(\underset{i=0}{\overset{n-1}{\mathrm{\Σ}}}L,0),$ $E_n=(\underset{i=0}{\overset{n}{\mathrm{\Σ}}}L,W_n).$

具体的，步骤f还包括以下步骤：

f1.检测是否有可用的扩展显示设备,若是，则进入步骤f2，若否，则提示用户无法进行扩展显示操作；

f2.检测用户是否指定扩展显示设备，若是，则进入步骤f3，若否，则进入步骤f4；

f3.检测该用户指定的扩展显示设备是否存在，若是，则进入步骤f6，若否，则提示用户无可用扩展屏，无法进行扩展显示；

f4.检测是否有空余扩展显示设备，若是，则进入步骤f6，若否，则进入步骤f5；

f5.检测是否存在可替换的已用扩展屏，若是，则进入步骤f6，若否，则提示用户无可用扩展屏，无法进行扩展显示；

f6.获取扩展显示设备信息，包括分辨率、左上角开始坐标和右下角结束坐标；

f7.根据扩展显示设备分辨率，绘制扩展窗口；

f8.根据获得的扩展显示设备屏幕左上角开始坐标和右下角结束坐标，将扩展显示内容显示在扩展显示设备窗口中。

具体的，步骤f7中所述绘制扩展窗口的大小与扩展显示设备的分辨率相同。

具体的，步骤f7中所述绘制扩展窗口的大小为用户指定的分辨率。

具体的，步骤f8中所述将扩展显示内容显示在扩展显示设备窗口中为显示在扩展显示设备中用户指定的坐标位置。

具体的，所述扩展显示菜单项包括：电子白板扩展显示、单路视频扩展显示、多路视频扩展显示、屏幕共享扩展显示和多媒体共享扩展显示中的一种或者多种。

本发明的有益效果为，实现了支持多种文件多屏扩展显示的方法，特别是视频会议系统屏幕扩展的无损视频、多媒体、电子白板、屏幕共享等信息的显示。

附图说明

图1为显示设备信息存储块示意图；

图2为本发明的实施例的流程图；

图3为实施例中根据用户指令进行具体扩展显示的流程图。

具体实施方式

下面结合附图和实施例，详细描述本发明的技术方案：

本发明所述的文件多屏扩展显示的方法，主要步骤为：首先设置多个网卡连接多个显示设备，网卡用于识别每一个不同的计算机显示设备；获取每个显示设备的特征信息并存储在存储单元中；当用户开始执行文件显示任务后，判断当前所连接的显示设备数量是否大于1，若是，则将一台显示设备作为主显示设备显示文件内容，其它显示设备作为扩展显示设备备用，并同时激活文件扩展显示菜单项，接收扩展显示指令，若否，则在该显示设备上正常显示文件；接收到用户的扩展指令后，根据指令要求，将文件显示框架进行剖离，重绘主显示窗口，构建扩展显示窗口；最后在主显示设备上显示主显示窗口，在扩展设备中显示扩展显示窗口。

一种优选的方案是，所述特征信息包括分辨率和设备标识。分辨率作为显示设备的性能标示，设备标识用于区别不同的显示设备，因此采用分辨率和设备标识作为显示设备的特征信息是一种可行的方案选择。

一种具体的获取每个显示设备的特征信息并存储在存储单元中主要步骤为：首先对显示设备进行标识，按自然数对其依次进行编号，进行标示编号的目的在于能够系统化的管理所有的显示设备，为更灵活的使用每个显示设备做好准备；然后根据编号逐个获取显示卡及显示设备的特征信息，并分别获取各个显示设备左上角开始坐标和右下角结束坐标，该步骤的目的是为扩展显示做准备；最后将所有显示设备按编号进行存储备用，具体的显示设备信息存储在存储单元中的模式如图1所示。

一种优选的方案为，所述显示设备按编号进行存储的存储方式为：数组存储方式、队列存储方式和链表存储方式中的一种或者多种。

一种具体的方案为，获取各个显示设备左上角开始坐标和右下角结束坐标的计算方式为：

定义开始坐标为S，结束坐标为E，分辨率长为L、宽为W，

则： $S_n=(\underset{i=0}{\overset{n-1}{\mathrm{\Σ}}}L,0),$ $E_n=(\underset{i=0}{\overset{n}{\mathrm{\Σ}}}L,W_n).$

一种具体的根据用户指令进行扩展显示的步骤为：当接收到扩展显示指令后，首先检测是否有可用的扩展显示设备,若是，则继续检测用户是否指定扩展显示设备，若否，则提示用户无法进行扩展显示操作；当检测到用户指定了扩展显示设备时，继续检测该用户指定的扩展显示设备是否存在，若存在，则进行扩展显示，若不存在，则提示用户无可用扩展屏，无法进行扩展显示；若用户未指定扩展显示设备，则检测是否有空余扩展显示设备，若有空余扩展显示设备，则进行扩展显示，若无，则检测是否存在可替换的已用扩展屏，若存在，则进行扩展显示，若没有，则提示用户无可用扩展屏，无法进行扩展显示。扩展显示的具体步骤为：首先获取扩展显示设备信息，包括分辨率、左上角开始坐标和右下角结束坐标；然后根据扩展显示设备分辨率，绘制扩展窗口；最后根据获得的扩展显示设备屏幕左上角开始坐标和右下角结束坐标，将扩展显示内容显示在扩展显示设备窗口中。

一种具体的方案是，所述绘制扩展窗口的大小与扩展显示设备的分辨率相同。本方案的目的是提供与显示设备分辨率相同的扩展窗口显示，优点是实现方式简单易行。

一种优选的方案是，所述绘制扩展窗口的大小为用户指定的分辨率。本方案的目的在于为提供用户更多的可控性，使用户能根据实际情况更灵活的选择扩展显示的窗口大小，优点是实用性较强，用户可通过如键盘等输入设备输入分辨率。

一种优选的方案是，所述将扩展显示内容显示在扩展显示设备窗口中为显示在扩展显示设备中用户指定的坐标位置。本方案为用户提供一种精确定位的显示方式，用户可采用键盘等输入设备输入坐标，扩展显示窗口将以用户输入的坐标为中心点进行显示。

一种具体的方案是，所述扩展显示菜单项包括：电子白板扩展显示、单路视频扩展显示、多路视频扩展显示、屏幕共享扩展显示和多媒体共享扩展显示中的一种或者多种。

为了更好的说明本发明的原理，下面采用视频会议系统作为实施例详细的说明本发明的工作原理：

实施例：

如图2所示，本例中采用的扩展显示设备为扩展显示屏，本例所述的视频会议系统的工作步骤为：

1.启动视频会议系统；

2.初始化系统的显示卡及已连接的计算机输出设备；

3.获取输出设备各项信息（包括分辨率、输出设备标识等），将输出设备信息存储在存储单元中；

4.判断输出设备数量，初始化用户操作项。当显示输出设备多于一个时，激活用户多屏扩展显示菜单项（包括：视频单路扩展显示、视频多路扩展显示、白板扩展显示、媒体扩展显示、屏幕共享扩展显示等）；

5.接收屏幕扩展指令；

6.根据指令要求，将视频会议系统框架进行剖离，重绘主窗口，构建扩展窗口，在主显示屏上显示主窗口，在扩展屏中显示扩展窗口。

如图3所示，电子白板扩展显示主要实现了电子白板功能从主框架中剖离，将电子白板重新绘制一个窗体显示在扩展屏幕中。用户可以在扩展屏幕中独立完成电子白板、文档共享的所有功能。

单路视频扩展显示实现了用户指定的一路视频或正在显示的第一路视频从主窗体中剖离出来，并独立显示在扩展屏幕中。主窗体不再显示已扩展的视频。

多路视频扩展显示实现将用户指定的多路视频或全部视频扩展到扩展屏中显示，扩展屏显示方式为视频会议支持的一分屏、二分屏、四分屏、六分屏、八分屏、九分屏、十分屏、十三分屏、十六分屏、二十五分屏、三十六分屏等。

屏幕共享扩展显示是将屏幕共享的内容剖离出来，扩展显示在扩展屏中。主窗体不再显示屏幕共享的内容。

多媒体共享扩展显示是将多媒体共享的内容剖离出来，扩展显示在扩展屏中，扩展屏显示多媒体播放的内容，而主窗体不再显示多媒体共享内容。

一种具体的实现扩展显示的方案的流程如下：

6.1系统接收用户扩展显示指令；

6.2检测是否有可用的扩展显示屏，当用户指定扩展屏显示时，检测该扩展屏是否存在，当未指定扩展屏时，检测是否有空余扩展屏，无空余扩展屏时，检测是否存在可替换的已用扩展屏；

6.3不存在可用扩展屏时，提示用户无可用扩展屏，无法进行扩展显示；

6.4存在扩展屏时，根据用户操作指令要求，将扩展部分功能进行剖离，重绘并显示主窗口；

6.5获取扩展屏窗口信息，包括分辨率、起点坐标和终点坐标；

6.6根据扩展屏分辨率，绘制扩展窗口（扩展窗口大小与扩展屏分辨率相同，或按用户要求进行等比缩小或使用用户指定的分辨率），扩展窗口内容显示为用户指令确定的扩展内容；

6.7根据屏幕的起点坐标和终点坐标计算，将扩展窗口显示在窗口中（默认显示在屏幕中间，可根据用户需求进行靠左、靠右、靠顶部、靠底部、居中等方式显示，也可有用户指定的坐标显示）。

下面以电子白板屏幕扩展为例详细的说明具体的扩展流程：首先用户发起电子白板屏幕扩展命令；系统接收到电子白板屏幕扩展命令后，读取电子白板扩展标识wbeFlag（值为true：表示已扩展，值为false：表示未扩展），如果wbeFlag为true，则返回用户提示：“电子白板已屏幕扩展！”，如果wbeFlag为false，则获取扩展屏。

获取扩展屏的具体方法为：首先从内存中获取保存的扩展屏信息（通常按链表或队列方式排序），然后捕获下一个空闲屏幕，扩展屏幕的扩展数据存储在内存中，通常以键值对的方式存储，也可以其他方式存储，目的是标明扩展屏幕是否已显示有扩展显示内容，当该屏幕未显示扩展显示内容时，扩展内容存储空信息，表示该扩展屏处于闲置状态。捕获空闲扩展屏是依次顺序获取下一个状态为空的扩展屏。若无法取到空闲状态扩展屏时，则返回第一个扩展屏。上述获取扩展屏的步骤也可以根据用户需求，由用户指定扩展屏的方式替换，其主要步骤为：获取用户指令后，将扩展屏扩展数据从内存中取出，以列表或其他方式返回到用户界面，供用户选择；用户选择指定扩展屏；系统接收扩展屏，确认扩展屏可用。

当选择好扩展显示用的扩展屏后：首先清空扩展屏显示内容。清空扩展屏显示内容中包括两类，一类是扩展屏为空闲状态，即未显示任何内容，则不对扩展屏进行任何操作即可；二类是扩展屏显示了内容，则需清空该功能扩展，其步骤包括：首先根据扩展屏标识，从上述获取扩展屏的方法中获取已扩展的功能编号；然后更新该项功能对应的标识flag，（如：电子白板的标识是wbeFlag）；最后销毁扩展屏显示的该项功能的功能模块（内存中销毁，取消显示）。然后更新电子白板扩展标识wbeFlag为true。判断当前布局中是否显示了电子白板，若未显示则不更新视图。若显示了电子白板，则更新视图布局，将布局模式更换显示为视频（默认为视频，也可以显示为其他已开启的显示内容或不可操作区域）。接着获取显示扩展屏的分辨率，构建电子白板副窗体，将电子白板功能构建一个新的窗体，大小与扩展屏分辨率相同（用户也可以通过输入扩展功能区域大小，将电子白板功能窗体显示为指定的大小）。最后获取扩展屏幕起点坐标和终点坐标，将扩展窗口显示在屏幕中央（也可以由用户指定分辨率或从左上角、右上角、左下角、右下角等开始显示）。在完成扩展显示后持续更新扩展屏扩展数据存储数据，将该扩展屏的扩展内容进行更新。

其它扩展显示如视频单路扩展显示、视频多路扩展显示、媒体扩展显示和屏幕共享扩展显示等其实现方式与上述电子白板扩展显示同理，在此不再赘述。同时应当理解上述的实施例只是为了更详细的说明本发明的工作原理，而并非是对本发明的限制，应当理解在未脱离本发明技术方案的范围内将本发明用于视频会议系统以外的系统，只要是本领域内的技术人员易于想到的，都是在本发明的保护范围内。

Claims (10)

1.文件多屏扩展显示的方法，其特征在于，包括以下步骤：

a.设置多个网卡连接多个显示设备；

b.获取每个显示设备的特征信息并存储在存储单元中；

c.判断显示设备数量是否大于1，若是，则进入步骤d，若否，则在该显示设备上正常显示文件；

d.将一台显示设备作为主显示设备显示文件内容，其它显示设备作为扩展显示设备备用；

e.激活文件扩展显示菜单项，接收扩展显示指令；

f.根据指令要求，将文件显示框架进行剖离，重绘主显示窗口，构建扩展显示窗口；

g.在主显示设备上显示主显示窗口，在扩展设备中显示扩展显示窗口。

2.根据权利要求1所述的文件多屏扩展显示的方法，其特征在于，所述特征信息包括分辨率和设备标识。

3.根据权利要求1所述的文件多屏扩展显示的方法，其特征在于，步骤b还包括以下步骤：

b1.对显示设备进行标识，按自然数对其依次进行编号；

b2.根据编号逐个获取显示卡及显示设备的特征信息，并分别获取各个显示设备屏幕的左上角开始坐标和右下角结束坐标；

b3.将所有显示设备按编号进行存储备用。

4.根据权利要求3所述的文件多屏扩展显示的方法，其特征在于，所述显示设备按编号进行存储的存储方式为：数组存储方式、队列存储方式和链表存储方式中的一种或者多种。

5.根据权利要求3所述的文件多屏扩展显示的方法，其特征在于，获取各个显示设备左上角开始坐标和右下角结束坐标的计算方式为：

定义开始坐标为S，结束坐标为E，分辨率长为L、宽为W，

则： $S_n=(\underset{i=0}{\overset{n-1}{\mathrm{\Σ}}}L,0),$ $E_n=(\underset{i=0}{\overset{n}{\mathrm{\Σ}}}L,W_n).$

6.根据权利要求5所述的文件多屏扩展显示的方法，其特征在于，步骤f还包括以下步骤：

f1.检测是否有可用的扩展显示设备,若是，则进入步骤f2，若否，则提示用户无法进行扩展显示操作；

f2.检测用户是否指定扩展显示设备，若是，则进入步骤f3，若否，则进入步骤f4；

f3.检测该用户指定的扩展显示设备是否存在，若是，则进入步骤f6，若否，则提示用户无可用扩展屏，无法进行扩展显示；

f4.检测是否有空余扩展显示设备，若是，则进入步骤f6，若否，则进入步骤f5；

f5.检测是否存在可替换的已用扩展屏，若是，则进入步骤f6，若否，则提示用户无可用扩展屏，无法进行扩展显示；

f6.获取扩展显示设备信息，包括分辨率、左上角开始坐标和右下角结束坐标；

f7.根据扩展显示设备分辨率，绘制扩展窗口；

f8.根据获得的扩展显示设备屏幕左上角开始坐标和右下角结束坐标，将扩展显示内容显示在扩展显示设备窗口中。

7.根据权利要求6所述的文件多屏扩展显示的方法，其特征在于，步骤f7中所述绘制扩展窗口的大小与扩展显示设备的分辨率相同。

8.根据权利要求6所述的文件多屏扩展显示的方法，其特征在于，步骤f7中所述绘制扩展窗口的大小为用户指定的分辨率。

9.根据权利要求6所述的文件多屏扩展显示的方法，其特征在于，步骤f8中所述将扩展显示内容显示在扩展显示设备窗口中为显示在扩展显示设备中用户指定的坐标位置。

10.根据权利要求1～9任意一项所述的文件多屏扩展显示的方法，其特征在于，所述扩展显示菜单项包括：电子白板扩展显示、单路视频扩展显示、多路视频扩展显示、屏幕共享扩展显示和多媒体共享扩展显示中的一种或者多种。

Images