CN114595409A - 共享屏幕内容中的超链接被会议参与者直接点击打开的方法 - Google Patents

Abstract

本发明公开了共享屏幕内容中的超链接被会议参与者直接点击打开的方法，包括演讲者设备端发送处理、观众设备端接收处理。本发明的有益效果是：当在线会议的演讲者分享屏幕的内容中，出现超链接的时候，该会议的其他观众，能够在他们接收端设备的App屏幕上，可以直接点击超链接，来打开浏览器进入相应的超链接指向的网址，能够极大的提高会议的效率；不仅仅适合在线会议App应用，也适合网上视频直播系统，比如在线培训，在线大会，在线教学等等，解决了当下远程会议中常见的一个“点击超链接”的问题，极大的提高了生产效率。

Description

共享屏幕内容中的超链接被会议参与者直接点击打开的方法

技术领域

本发明涉及一种针对超链的方法，具体为共享屏幕内容中的超链接被会议参与者直接点击打开的方法，属于计算机应用软件技术领域。

背景技术

在线会议的形式被广泛地用在开会和远程上课等场景以提高效率。此类在线会议App，常常都有个“共享屏幕”的功能。也就是说，当演讲者需要把它的设备中的多媒体文件内容，实时分享给参会的观众时，他就需要使用这个功能。

但是这里有一个问题，假如屏幕共享的内容中，出现了“超链接”信息，那么会议的参与观众，是无法点击上超链接直接进入相应的网站了解更多信息，这通常会导致一些不方便。

通过调查研究，目前发现了两种现有的技术来解决这个问题：

1)在观众端的设备，会议软件App将共享屏幕的内容，实时截图下来，然后对图片的内容进行OCR识别，将文字以及字符转换成Text文本格式，针对超链接的字符进行进一步的处理。但是这种技术，有几个问题：

a)识别出来的超链接字符，还需要手动选择，然后拷贝到浏览器中才能打开，造成使用不便。

b)如果遇到网络质量差的情况，接收端的观众设备软件App中的共享桌面内容会非常模糊。这会导致文字或者字符识别错误。

c)对于嵌入式的超链接，是完全失效的。

2)微软的Teams软件，提供了一种相近的解决方案，产品功能叫做 PowerPointLive模式。

a)但是它只是解决了特定的PowerPoint文件共享问题，没法做到通用的解决方式。比如其他应用程序类型的文件(例如PDF，Word，浏览器网页等)屏幕共享时的问题，仍旧没有解决。

b)此外，在该模式下，它的做法是将演讲者的PowerPoint(PPT)文件上传到服务器，并同时要发送到每个观众端的设备中，然后进行同步演示控制。在实际使用中发现，如果文件较大，需要预先准备的时间较久。而且在演示过程中，性能也很差，尤其是在PPT换页或者动画切换过程中同步等待时间较久，相比当下流行的“共享屏幕”高效低延时的技术实现方式(采用视频流式传输)，用户体验较差。

c)此方案无法运用于网上视频直播系统的观众端(通常是浏览器)。

发明内容

本发明的目的就在于为了解决问题而提供共享屏幕内容中的超链接被会议参与者直接点击打开的方法。

本发明通过以下技术方案来实现上述目的：共享屏幕内容中的超链接被会议参与者直接点击打开的方法，包括以下步骤

步骤一、演讲者设备端发送处理，使用计算机技术，在演讲者设备端将要共享的文档内容页面中，提取超链接原始信息的元数据，获取超链接位置信息，然后随着共享屏幕内容的视频流，一起发送到云服务器；

步骤二、观众设备端接收处理，当观众设备端从云服务器收到演讲者设备端发来的额外元数据后，提取超链接信息，然后在随之一起接收到的共享屏幕视频层上，且在相应的超链接位置上，添加“可点击”的标识(比如是手型指针图标)，以提醒观众该超链接是可以点击的。

作为本发明再进一步的方案：所述步骤一中，演讲者设备端具体包括：

文件打开模块，其用于需要共享的文档在未打开的情况下，调用相应的应用程序用于将文档打开；

采集模块，其与所述文件打开模块的输出端进行传输连接，且其用于实时采集相应共享文档的显示数据；

编码模块，其与所述采集模块的输出端进行传输连接，且其用于对相应共享文档的视频进行实时视频编码，以生成视频流数据包；

读入模块，其用于将已打开的需要共享的文档内容进行同步读入；

解析模块，其与所述读入模块的输出端进行传输连接，且其根据共享文件的格式不同，调用相应的文件内容解析器进行解析；

提取模块，其与所述解析模块的输出端进行传输连接，且其用于对相应共享文档内容中的超链接元数据进行提取；

数据获取模块，其分别与所述采集模块和提取模块的输出端进行传输连接，且其用于获取实时同步的超链接位置信息，并生成超链接信息数据包；

数据传输模块，其分别与所述编码模块和数据获取模块进行传输连接，共享屏幕数据包封装，并实时同步传输。

作为本发明再进一步的方案：所述步骤一中，共享的文档格式类型包括常见的pptx、xlsx、pdf、docx，其中，pptx、xlsx、docx文件可以使用 Open XML规范来解析；WEB网页可以使用HTML规范来解析，也可以扩展到将来新出现的计算机文档格式。

作为本发明再进一步的方案：所述提取模块中，提取的元数据至少包括：

超链接网址，如类似http(s)的URL地址；

超链接网址对应的显示文本字符信息或者其他对象信息，比如图片。

作为本发明再进一步的方案：所述数据获取模块中，在获取实时同步的超链接位置信息时，对于演讲者不同的换页方式，具体包括以下同步措施：

①演讲者使用“整页”切换的方式浏览并共享其文档时，只需要实时同步地记录当前页面中的每个超链接、所在共享屏幕的相对位置坐标即可，因为在“整页”浏览/换页模式下，每个超链接所在的相对位置不会改变，接收端观众收到后，可以直接在视频上的相对位置，叠加相应的“手型指针图标”标识以便告知观众，该处为可点击超链接；

②演讲者的文档以上下滚动模式共享给观众时，使用现有的计算机视觉中的对象检测和目标跟踪技术，由于已经获取了超链接的元数据信息，基于该数据作为对象，进行跟踪，获取实时位置流，随超链接网址和视频一起发送给观众接收端进行显示。

作为本发明再进一步的方案：所述步骤二中，观众设备端具体包括：

分离模块，其用于从云服务器中共享屏幕数据包，并对数据包进行分离；

视频流获取模块，其与所述分离模块的输出端进行传输连接，且其用于获取所分离出的视频流数据包；

解码模块，其与所述视频流获取模块的输出端进行传输连接，且其用于对数据包进行解析，以获得文档中的视频数据；

超链接获取模块，其与所述分离模块的输出端进行传输连接，且其用于获取所分离出的超链接数据包；

分析模块，其与所述超链接获取模块的输出端进行传输连接，且其用以分析超链接信息数据并实时同步获取它在共享屏幕中的位置以及相应的超链接URL地址；

合成模块，其分别与所述解码模块和分析模块的输出端进行传输连接，并在共享屏幕视频帧上，叠加可点击的超链接标识。

本发明的有益效果是：

1、当在线会议的演讲者分享屏幕的内容中，出现超链接的时候，该会议的其他观众，能够在他们接收端设备的App屏幕上，可以直接点击超链接，来打开浏览器进入相应的超链接指向的网址，能够极大的提高会议的效率；

2、不仅仅适合在线会议App应用，也适合网上视频直播系统，比如在线培训，在线大会，在线教学等等，解决了当下在线远程实时会议中常见的一个“无法点击超链接”的问题，极大的提高了会议参与方的生产效率。

附图说明

图1为本发明整体框架结构示意图；

图2为本发明演讲者设备端框架结构示意图；

图3为本发明观众设备端框架结构示意图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

实施例一

请参阅图1和图2，共享屏幕内容中的超链接被会议参与者直接点击打开的方法，包括：

演讲者设备端发送处理，使用计算机技术，在演讲者设备端将要共享的文档内容页面中，提取超链接原始信息的元数据，获取超链接位置信息，然后随着共享屏幕内容的视频流，一起发送到云服务器的。

在本发明实施例中，所述演讲者设备端具体包括：

文件打开模块，其用于需要共享的文档在未打开的情况下，调用相应的应用程序用于将文档打开；

采集模块，其与所述文件打开模块的输出端进行传输连接，且其用于实时采集相应共享文档的显示数据；

编码模块，其与所述采集模块的输出端进行传输连接，且其用于对相应共享文档的视频进行实时视频编码，以生成视频流数据包；

读入模块，其用于将已打开的需要共享的文档内容进行同步读入；

解析模块，其与所述读入模块的输出端进行传输连接，且其根据共享文件的格式不同，调用相应的文件内容解析器进行解析；

提取模块，其与所述解析模块的输出端进行传输连接，且其用于对相应共享文档内容中的超链接元数据进行提取；

数据获取模块，其分别与所述采集模块和提取模块的输出端进行传输连接，且其用于获取实时同步的超链接位置信息，并生成超链接信息数据包；

数据传输模块，其分别与所述编码模块和数据获取模块进行传输连接，共享屏幕数据包封装，并实时同步传输。

在本发明实施例中，所述共享的文档格式类型包括常见的pptx、xlsx、 pdf、docx，其中，pptx、xlsx、docx文件可以使用Open XML规范来解析； WEB网页可以使用HTML规范来解析，也可以扩展到将来新出现的计算机文档格式。

在本发明实施例中，所述提取模块中，提取的元数据至少包括：

超链接网址，如类似http(s)的URL地址；

超链接网址对应的显示文本字符信息或者其他对象信息，比如图片。

在本发明实施例中，所述数据获取模块中，在获取实时同步的超链接位置信息时，对于演讲者不同的换页方式，具体包括以下同步措施：

①演讲者使用“整页”切换的方式浏览并共享其文档时，只需要实时同步地记录当前页面中的每个超链接、所在共享屏幕的相对位置坐标即可，因为在“整页”浏览/换页模式下，每个超链接所在的相对位置不会改变，接收端观众收到后，可以直接在视频上的相对位置，叠加相应的“手型指针图标”标识以便告知观众，该处为可点击超链接；

②演讲者的文档以上下滚动模式共享给观众时，使用现有的计算机视觉中的对象检测和目标跟踪技术，由于已经获取了超链接的元数据信息，基于该数据作为对象，进行跟踪，获取实时位置流，随超链接网址和视频一起发送给观众接收端进行显示。

实施例二

请参阅图1和图3，共享屏幕内容中的超链接被会议参与者直接点击打开的方法，包括：

观众设备端接收处理，当观众设备端从云服务器收到演讲者设备端发来的额外元数据后，提取超链接信息，然后在随之一起接收到的共享屏幕视频层上，且在相应的超链接位置上，添加“可点击”的标识(比如是手型指针图标)，以提醒观众该超链接是可以点击的。

在本发明实施例中，所述观众设备端具体包括：

分离模块，其用于从云服务器中共享屏幕数据包，并对数据包进行分离；

视频流获取模块，其与所述分离模块的输出端进行传输连接，且其用于获取所分离出的视频流数据包；

解码模块，其与所述视频流获取模块的输出端进行传输连接，且其用于对数据包进行解析，以获得文档中的视频数据；

超链接获取模块，其与所述分离模块的输出端进行传输连接，且其用于获取所分离出的超链接数据包；

分析模块，其与所述超链接获取模块的输出端进行传输连接，且其用以分析超链接信息数据并实时同步获取它在共享屏幕中的位置以及相应的超链接URL地址；

合成模块，其分别与所述解码模块和分析模块的输出端进行传输连接，并在共享屏幕视频帧上，叠加可点击的超链接标识。

工作原理：从会议的其他参与者的角度来看，在线会议APP能够直接将共享内容的链接，变成可直接点击的链接，以方便会议的观看者，直接进入相应的网址。

对于本领域技术人员而言，显然本发明不限于上述示范性实施例的细节，而且在不背离本发明的精神或基本特征的情况下，能够以其他的具体形式实现本发明。因此，无论从哪一点来看，均应将实施例看作是示范性的，而且是非限制性的，本发明的范围由所附权利要求而不是上述说明限定，因此旨在将落在权利要求的等同要件的含义和范围内的所有变化囊括在本发明内。不应将权利要求中的任何附图标记视为限制所涉及的权利要求。

此外，应当理解，虽然本说明书按照实施方式加以描述，但并非每个实施方式仅包含一个独立的技术方案，说明书的这种叙述方式仅仅是为清楚起见，本领域技术人员应当将说明书作为一个整体，各实施例中的技术方案也可以经适当组合，形成本领域技术人员可以理解的其他实施方式。

Claims (6)

1.共享屏幕内容中的超链接被会议参与者直接点击打开的方法，其特征在于：包括以下步骤

步骤一、演讲者设备端发送处理，使用计算机技术，在演讲者设备端将要共享的文档内容页面中，提取超链接原始信息的元数据，获取超链接位置信息，然后随着共享屏幕内容的视频流，一起发送到云服务器；

步骤二、观众设备端接收处理，当观众设备端从云服务器收到演讲者设备端发来的额外元数据后，提取超链接信息，然后在随之一起接收到的共享屏幕视频层上，且在相应的超链接位置上，添加“可点击”的标识(比如是手型指针图标)，以提醒观众该超链接是可以点击的。

2.根据权利要求1所述的共享屏幕内容中的超链接被会议参与者直接点击打开的方法，其特征在于：所述步骤一中，演讲者设备端具体包括：

文件打开模块，其用于需要共享的文档在未打开的情况下，调用相应的应用程序用于将文档打开；

采集模块，其与所述文件打开模块的输出端进行传输连接，且其用于实时采集相应共享文档的显示数据；

编码模块，其与所述采集模块的输出端进行传输连接，且其用于对相应共享文档的视频进行实时视频编码，以生成视频流数据包；

读入模块，其用于将已打开的需要共享的文档内容进行同步读入；

解析模块，其与所述读入模块的输出端进行传输连接，且其根据共享文件的格式不同，调用相应的文件内容解析器进行解析；

提取模块，其与所述解析模块的输出端进行传输连接，且其用于对相应共享文档内容中的超链接元数据进行提取；

数据获取模块，其分别与所述采集模块和提取模块的输出端进行传输连接，且其用于获取实时同步的超链接位置信息，并生成超链接信息数据包；

数据传输模块，其分别与所述编码模块和数据获取模块进行传输连接，共享屏幕数据包封装，并实时同步传输。

3.根据权利要求1所述的共享屏幕内容中的超链接被会议参与者直接点击打开的方法，其特征在于：所述步骤一中，共享的文档格式类型包括常见的pptx、xlsx、pdf、docx，其中，pptx、xlsx、docx文件可以使用Open XML规范来解析；WEB网页可以使用HTML规范来解析，也可以扩展到将来新出现的计算机文档格式。

4.根据权利要求2所述的共享屏幕内容中的超链接被会议参与者直接点击打开的方法，其特征在于：所述提取模块中，提取的元数据至少包括：

超链接网址，如类似http(s)的URL地址；

超链接网址对应的显示文本字符信息或者其他对象信息，比如图片。

5.根据权利要求2所述的共享屏幕内容中的超链接被会议参与者直接点击打开的方法，其特征在于：所述数据获取模块中，在获取实时同步的超链接位置信息时，对于演讲者不同的换页方式，具体包括以下同步措施：

①演讲者使用“整页”切换的方式浏览并共享其文档时，只需要实时同步地记录当前页面中的每个超链接、所在共享屏幕的相对位置坐标即可，因为在“整页”浏览/换页模式下，每个超链接所在的相对位置不会改变，接收端观众收到后，可以直接在视频上的相对位置，叠加相应的“手型指针图标”标识以便告知观众，该处为可点击超链接；

②演讲者的文档以上下滚动模式共享给观众时，使用现有的计算机视觉中的对象检测和目标跟踪技术，由于已经获取了超链接的元数据信息，基于该数据作为对象，进行跟踪，获取实时位置流，随超链接网址和视频一起发送给观众接收端进行显示。

6.根据权利要求1所述的共享屏幕内容中的超链接被会议参与者直接点击打开的方法，其特征在于：所述步骤二中，观众设备端具体包括：

分离模块，其用于从云服务器中共享屏幕数据包，并对数据包进行分离；

视频流获取模块，其与所述分离模块的输出端进行传输连接，且其用于获取所分离出的视频流数据包；

解码模块，其与所述视频流获取模块的输出端进行传输连接，且其用于对数据包进行解析，以获得文档中的视频数据；

超链接获取模块，其与所述分离模块的输出端进行传输连接，且其用于获取所分离出的超链接数据包；

分析模块，其与所述超链接获取模块的输出端进行传输连接，且其用以分析超链接信息数据并实时同步获取它在共享屏幕中的位置以及相应的超链接URL地址；

合成模块，其分别与所述解码模块和分析模块的输出端进行传输连接，并在共享屏幕视频帧上，叠加可点击的超链接标识。

Images