CN110996039B - 电子白板共享方法、系统和计算机可读存储介质 - Google Patents

电子白板共享方法、系统和计算机可读存储介质 Download PDF

Info

Publication number
CN110996039B
CN110996039B CN201911195838.XA CN201911195838A CN110996039B CN 110996039 B CN110996039 B CN 110996039B CN 201911195838 A CN201911195838 A CN 201911195838A CN 110996039 B CN110996039 B CN 110996039B
Authority
CN
China
Prior art keywords
whiteboard
terminal
electronic whiteboard
streaming media
media message
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201911195838.XA
Other languages
English (en)
Other versions
CN110996039A (zh
Inventor
孙俊伟
王克彦
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhejiang Huachuang Video Signal Technology Co Ltd
Original Assignee
Zhejiang Huachuang Video Signal Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhejiang Huachuang Video Signal Technology Co Ltd filed Critical Zhejiang Huachuang Video Signal Technology Co Ltd
Priority to CN201911195838.XA priority Critical patent/CN110996039B/zh
Publication of CN110996039A publication Critical patent/CN110996039A/zh
Application granted granted Critical
Publication of CN110996039B publication Critical patent/CN110996039B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/15Conference systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/40Support for services or applications
    • H04L65/403Arrangements for multi-party communication, e.g. for conferences
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/50Network services
    • H04L67/60Scheduling or organising the servicing of application requests, e.g. requests for application data transmissions using the analysis and optimisation of the required network resources

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Multimedia (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本申请提供了一种电子白板共享方法、系统和计算机可读存储介质,其中,该方法包括:服务器获取第一电子白板终端发送的第一流媒体报文,其中,第一流媒体报文中携带有白板控制流数据;服务器将第一流媒体报文发送给第二电子白板终端,以供第二电子白板终端根据白板控制流数据进行白板演示。通过本发明,解决了相关技术中共享白板业务的适用范围存在局限性的技术问题,实现了兼容电子白板终端进行白板共享,避免了信令拥堵,且在无需新建电子白板服务子系统的前提下,还实现了传统的视频会议终端与大屏电子白板终端在白板演示业务上的互通兼容。

Description

电子白板共享方法、系统和计算机可读存储介质
技术领域
本申请涉及视频会议领域,特别是涉及一种电子白板共享方法、系统和计算机可读存储介质。
背景技术
视频会议系统包含了多点控制单元(Multi Control Unit,简称为MCU)及软、硬终端等各类参与设备。视频会议终端采集图像、声音,并经过编码发送给MCU。MCU则根据会议要求将多个视频会议终端发送的图像进行融合或不进行融合,声音混音或不混音后发送给各个参与终端,从而实现多方与会人的音视频通话。随着大屏电子白板硬件的成熟和普及,电子白板设备和视频会议终端一体化的需求被强烈提出。就是说,一个大屏设备既有电子白板功能,又集成了摄像头、麦克风、扬声器等硬件,从而又能成为视频会议系统的终端,称其为电子白板终端。随之而来的,就是协同白板的需求,即在多个电子白板终端之间共享内容的同时,还能多方批注。
视频会议信令服务往往是一个中心服务,用于传输视频会议终端与MCU之间的信令协议。在相关技术中,电子白板终端的白板描述数据可以通过视频会议信令服务发送给其他的参与终端。这种方式可以适用于简单的白板业务以及小型会议场景。然而,研究人员发现一旦引入大型会议如千人会议,白板描述数据在视频会议信令服务中交换会导致信令拥堵,进而导致会议控制操作延时、视频会议终端心跳超时掉线等问题。此外,随着电子白板业务复杂化,电子白板还可以绘制图像甚至直接插入图片,这些都是二进制数据,无法在视频会议信令服务中传输,使得共享电子白板业务的适用范围存在局限性。
发明内容
基于此,本申请提供一种电子白板共享方法、系统和计算机可读存储介质,用以解决相关技术中共享白板业务的适用范围存在局限性的问题。
第一方面,本申请提供了一种电子白板共享方法,所述方法包括:
服务器获取第一电子白板终端发送的第一流媒体报文,其中,所述第一流媒体报文中携带有白板控制流数据;
所述服务器将所述第一流媒体报文发送给第二电子白板终端,以供所述第二电子白板终端根据所述白板控制流数据进行白板演示。
在其中一些实施例中,所述方法还包括:
所述第二电子白板终端发送白板控制流数据请求消息至所述服务器。
在其中一些实施例中,所述服务器获取第一电子白板终端发送的第一流媒体报文包括:
所述服务器判断是否接收到所述第二电子白板终端发送的白板控制流数据请求消息;
所述服务器在判断到接收到所述第二电子白板终端发送的所述白板控制流数据请求消息的情况下,所述服务器获取所述第一电子白板终端发送的所述第一流媒体报文。
在其中一些实施例中,在判断到接收到所述第二电子白板终端发送的所述白板控制流数据请求消息的情况下,所述服务器获取所述第一电子白板终端发送的所述第一流媒体报文包括:
所述服务器在判断到接收到所述第二电子白板终端发送的所述白板控制流数据请求消息的情况下,生成白板控制流数据获取消息;
所述服务器将所述白板控制流数据获取消息发送给所述第一电子白板终端,以指示所述第一电子白板终端发送所述第一流媒体报文;
所述服务器获取所述第一电子白板终端发送的所述第一流媒体报文。
在其中一些实施例中,所述白板控制流数据包括:所述第一电子白板终端的全量白板描述数据和增量白板描述数据。
在其中一些实施例中,在所述服务器将所述第一流媒体报文发送给第二电子白板终端之前,所述方法还包括:
所述第一电子白板终端接收所述服务器发送的白板控制流数据获取消息;
所述第一电子白板终端根据所述服务器发送的白板控制流数据获取消息,生成全量白板描述数据;
所述第一电子白板终端将所述全量白板描述数据转换成所述第一流媒体报文;
所述第一电子白板终端发送所述第一流媒体报文至所述服务器。
在其中一些实施例中,在所述第一电子白板终端发送所述第一流媒体报文至所述服务器之后,所述方法还包括:
所述第一电子白板终端将增量白板描述数据转换成所述第一流媒体报文;
所述第一电子白板终端发送所述第一流媒体报文至所述服务器。
在其中一些实施例中,在所述服务器将所述第一流媒体报文发送给第二电子白板终端之后,所述方法还包括:
所述第二电子白板终端接收所述第一流媒体报文;
所述第二电子白板终端解析所述第一流媒体报文中的所述白板控制流数据;
所述第二电子白板终端根据所述白板控制流数据进行白板演示。
在其中一些实施例中,所述方法还包括:
所述服务器接收视频会议终端发送的演示流数据请求消息;
所述服务器将第二流媒体报文发送给所述视频会议终端,其中,所述第二流媒体报文中携带有演示流数据。
在其中一些实施例中,所述方法还包括:
所述第一电子白板终端接收演示流数据获取消息;
所述第一电子白板终端根据所述演示流数据获取消息生成所述演示流数据;
所述第一电子白板终端将所述演示流数据转换成所述第二流媒体报文;
所述第一电子白板终端发送所述第二流媒体报文至所述服务器。
在其中一些实施例中,所述方法还包括:
所述服务器获取第一电子白板终端发送的第二流媒体报文,其中,所述第二流媒体报文中携带有演示流数据;
所述服务器将所述第二流媒体报文发送给视频会议终端,以供所述视频会议终端根据所述第二流媒体报文携带的演示流数据进行视频演示。
第二方面,本申请提供一种电子白板共享系统,所述系统包括:服务器、第一电子白板终端和第二电子白板终端,其中,
所述服务器,用于获取第一电子白板终端发送的第一流媒体报文,以及将所述第一流媒体报文发送给第二电子白板终端,以供所述第二电子白板终端根据所述第一流媒体报文中携带的白板控制流数据进行白板演示。
在其中一些实施例中,所述系统还包括:视频会议终端,其中,
所述服务器,还用于将携带有演示流数据的第二流媒体报文发送给所述视频会议终端。
第三方面,本申请提供一种计算机可读存储介质,该存储介质存储有计算机程序,所述计算机程序被处理器执行时实现上述的电子白板共享方法。
本申请提供的电子白板共享方法、系统和计算机可读存储介质,通过服务器获取第一电子白板终端发送的第一流媒体报文,其中,第一流媒体报文中携带有白板控制流数据;服务器将第一流媒体报文发送给第二电子白板终端,以供第二电子白板终端根据白板控制流数据进行白板演示的方式,解决了相关技术中共享白板业务的适用范围存在局限性的技术问题,实现了兼容电子白板终端进行白板共享,避免了信令拥堵。
本申请的一个或多个实施例的细节在以下附图和描述中提出,以使本申请的其他特征、目的和优点更加简明易懂。
附图说明
为了更清楚地说明本申请实施例或相关技术中的技术方案,下面将对实施例描述中所需要使用的附图作简要介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1是根据本申请实施例的一种电子白板共享方法的流程图;
图2是根据本申请实施例的一种电子白板共享系统的结构示意图;
图3是根据本申请实施例的另一种电子白板共享系统的结构示意图;
图4是根据本申请优选实施例的一种电子白板共享系统的结构示意图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本申请进行进一步详细说明。应当理解,此处描述的具体实施例仅仅用以解释本申请,并不用于限定本申请。基于本申请中的实例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实例,都属于本申请保护的范围。
在本实施例中提供了一种电子白板共享方法。如图1所示,为根据本申请实施例的一种电子白板共享方法的流程图,该流程包括如下步骤:
步骤S102,服务器获取第一电子白板终端发送的第一流媒体报文,其中,第一流媒体报文中携带有白板控制流数据。
步骤S104,服务器将第一流媒体报文发送给第二电子白板终端,以供第二电子白板终端根据白板控制流数据进行白板演示。
在本实施例中,服务器优选为视频会议服务器。视频会议服务器获取第一电子白板终端发送的携带有白板控制流数据的第一流媒体报文,并将第一流媒体报文发送给第二电子白板终端,以供第二电子白板终端根据白板控制流数据进行白板演示,实现了通过流媒体传输通道发送白板控制流数据。采用上述方式,一方面,白板控制流数据不再经过视频会议信令服务发送,避免了信令拥堵、会议控制时延升高或者终端掉线的问题;另一方面,通过流媒体传输通道可以发送图片或者其他二进制的流媒体数据,也解决了通过视频会议信令服务不能发送流媒体数据的局限性问题,兼容了电子白板终端的多种类型数据的传递,也实现了电子白板终端之间的共享,且在无需新建电子白板服务子系统的前提下,还实现了传统的视频会议终端与大屏电子白板终端在白板演示业务上的互通兼容。
需要说明的是,在本实施例中的第二电子白板终端包括:加入视频会议的一个或者多个电子白板终端。
可选的,在本实施例中,在第一电子白板终端进行电子白板共享之前,第一电子白板终端可以向视频会议服务器发出一个共享电子白板的请求消息,以使视频会议服务器确定第一电子白板终端为待共享电子白板的终端。
可选的,在本实施例中,电子白板控制流数据可以通过视频会议服务器的MCU媒体节点传输,并且MCU媒体节点可以分布式部署,从而更好地支持高并发大型会议。
在相关技术的融合了电子白板终端的视频会议系统中,通常使用白板子系统进行白板数据传输。这种方式需要白板子系统和视频会议系统之间不断同步会议信息和在会与会人信息;电子白板终端上的应用程序需要了解视频会议系统的与会人信息,导致视频会议业务和电子白板业务的深度耦合:会议信息稍微有同步不及时,则可能导致电子白板画面不同步等异常问题出现;同时白板子系统的引入,也增加了系统的故障点,一旦白板服务端故障,共享白板业务即无法开展。
在本实施例中,不再使用白板子系统来进行白板数据传输,减少了系统整体故障点,提高了系统可用性,还节约了服务成本;在本实施例中也不再额外使用白板服务,减少了服务端口开放数量,提升了系统安全性。在本实施例中,电子白板业务与视频会议业务得到比较彻底的隔离,电子白板业务不需要理解视频会议业务,视频会议服务器业务也不需要理解电子白板业务,而是可以通过在电子白板终端中植入会议客户端模块(优选为应用程序),通过会议客户端模块的控制,将电子白板终端的白板控制流数据发送给视频会议服务器,由视频会议服务器进行相应的转发;或者通过会议客户端模块接收并解析电子白板终端接收到的白板控制流数据,从而实现电子白板业务。由此可见,本实施例中的电子白板业务和视频会议业务实现了业务低耦合,提高了系统稳定性。
由于视频会议中可能同时存在电子白板终端和视频会议终端,并且电子白板终端可以不具备展示演示流的功能,在这种情况下,电子白板终端只需要请求白板控制流数据;视频会议终端可以不具备电子白板功能,在这种情况下,视频会议终端只需要请求演示流数据。因此,视频会议服务器需要判断加入视频会议中的各个终端的类型。
在本实施例中,视频会议服务器通过白板控制流数据请求消息和控制流数据请求消息来判断视频会议中各个终端的类型,例如,在电子白板终端加入视频会议后,可以通过向视频会议服务器发送白板控制流数据请求消息的方式来告知视频会议服务器自身的终端类型,视频会议服务器在接收到电子白板终端发送的白板控制流数据请求消息后,判断对应的终端类型为电子白板终端,并在视频会议服务器接收到其他电子白板终端发送的白板控制流数据后,视频会议服务器将这些白板控制流数据转发给该电子白板终端。又例如,在视频会议终端加入视频会议后,可以通过向视频会议服务器发送演示流数据请求消息的方式来告知视频会议服务器自身的终端类型,视频会议服务器在接收到视频会议终端发送的演示流数据请求消息后,判断对应的终端类型为视频会议终端,并在视频会议服务器接收到其他电子白板终端或者视频会议终端发送的演示流数据后,视频会议服务器将这些演示流数据转发给该视频会议终端。
对于视频会议终端而言,如果视频会议中的其他终端均为电子白板终端,则视频会议终端并无必要发送演示流数据,从而节省传输资源;同样地,对于电子白板终端而言,如何视频会议中的其他终端均为视频会议终端,则电子白板终端也并无必要发送白板控制流数据,从而节省传输资源。为了能够达到上述目的,在本实施例中,视频会议系统中的电子白板终端和视频会议终端均响应于视频会议服务器发送的数据获取消息来发送对应的数据流。
例如,在加入视频会议的终端中除第一电子白板终端以外还存在其他的电子白板终端的情况下,视频会议服务器向第一电子白板终端发送白板控制流数据获取消息,第一电子白板终端根据白板控制流数据获取消息来生成并发送携带有白板控制流数据的第一流媒体报文至视频会议服务器。
又例如,在加入视频会议的终端中存在其他的视频会议终端的情况下,视频会议服务器向第一电子白板终端发送演示流数据获取消息,第一电子白板终端根据演示流数据获取消息来生成并发送携带有演示流数据的第二流媒体报文至视频会议服务器。
再例如,在加入视频会议的终端中除第一视频会议终端以外还存在其他的视频会议终端的情况下,视频会议服务器向第一视频会议终端发送演示流数据获取消息,视频会议终端根据演示流数据获取消息来生成并发送携带有演示流数据的第二流媒体报文至视频会议服务器。
在本实施例中,由于白板控制流数据并非流媒体数据,为了实现在流媒体传输通道中传输白板控制流数据,可以将白板控制流数据模拟为流媒体数据的方式来实现,例如,第一电子白板终端生成白板控制流数据;第一电子白板终端将白板控制流数据转换成第一流媒体报文;第一电子白板终端发送第一流媒体报文至视频会议服务器。
可选的,本实施例中的第一流媒体报文至少包括下列字段:时间戳(timestamp)、有效负载(payload)、序列号(sequence),其中,有效负载字段用于携带白板控制流数据。
在本实施例中,电子白板终端可以通过下列的方式来生成第二流媒体报文:第一电子白板终端接收演示流数据获取消息;第一电子白板终端根据演示流数据获取消息生成演示流数据;第一电子白板终端将演示流数据转换成第二流媒体报文;第一电子白板终端发送第二流媒体报文至视频会议服务器。
可选的,本实施例中的第二流媒体报文至少包括下列字段:时间戳(timestamp)、有效负载(payload)、序列号(sequence),其中,有效负载字段用于携带演示流数据。
通过本发明的实施例,第一电子白板终端不仅可以输出演示流数据,还可以输出白板控制流数据,以实现对其他电子白板终端和视频会议终端的兼容。
可选地,电子白板终端通过对电子白板画面进行截图,并根据截图生成截图视频的方式得到演示流数据。
在本实施例中,视频会议服务器在接收到第一电子白板终端发送的第一流媒体报文后,可以将第一流媒体报文传输给请求了白板控制流数据的终端;视频会议服务器在接收到第一电子白板终端和/或视频会议终端发送的第二流媒体报文后,可以将第二流媒体报文传输给请求了演示流数据的终端。通过上述的方式,不仅实现了在视频会议中同时兼容电子白板终端和视频会议终端,还节约了传输资源,实现了白板控制流数据和演示流数据的按需传输。
在本实施例中,在视频会议服务器将第一流媒体报文发送给第二电子白板终端之后,第二电子白板终端接收第一流媒体报文;第二电子白板终端解析第一流媒体报文中的白板控制流数据;第二电子白板终端根据白板控制流数据进行白板演示。通过上述的方式,在第二电子白板终端中将第一流媒体报文重新解析为白板控制流数据,使得第二电子白板终端可以根据白板控制流数据进行白板演示。
需要说明的是,在本实施例中的电子白板终端是指支持电子白板展示的终端,视频会议终端是指支持演示画面展示的终端。如果一个终端既支持电子白板展示,又支持视频会议终端,则该终端既属于电子白板终端,也属于视频会议终端。
在本实施例中,还可以利用全量白板控制流数据和增量白板控制流数据进一步减少在视频会议的各个通道中传输的数据量,节约传输资源。
例如,在视频会议服务器将第一流媒体报文发送给第二电子白板终端之前,第一电子白板终端接收视频会议服务器发送的白板控制流数据获取消息;第一电子白板终端根据视频会议服务器发送的白板控制流数据获取消息,生成全量白板描述数据;第一电子白板终端将全量白板描述数据转换成第一流媒体报文;第一电子白板终端发送第一流媒体报文至视频会议服务器。
通过上述方式,在视频会议中增加了新的电子白板终端或者第一电子白板终端首次发送白板控制流数据的情况下,视频会议服务器将会发送白板控制流数据获取消息给第一电子白板终端;第一电子白板终端根据该白板控制流数据获取消息,生成并发送全量白板描述数据,以使得其他电子白板终端根据该全量白板描述数据进行完整的白板演示。
在此之后,在第一电子白板终端没有收到新的白板控制流获取消息的情况下,第一电子白板终端将增量白板描述数据转换成第一流媒体报文;第一电子白板终端发送第一流媒体报文至视频会议服务器。第一电子白板终端通过上述方式发送增量白板描述数据至其他的电子白板终端,其他电子白板终端在已经获得全量白板描述数据之后,根据该增量白板描述数据就能够实现后续白板演示。
此外,第一电子白板终端还可以以一定时间间隔,或者在网络环境波动较大的情况下,再次生成并发送全量白板描述数据,以避免其他电子白板终端因网络环境波动或者其他原因导致的白板描述数据缺失、白板演示画面不同步的问题。
与此同时,第一电子白板终端还可以以一定时间间隔,或者在网络环境波动较稳定的情况下,再次发送增量白板描述数据,以便于电子白板终端更新白板控制流数据。
其中,全量白板描述数据和增量白板描述数据均为二进制压缩数据,且均包括白板的时间戳及版本号、白板内容的撤销和重做以及白板的模式、分页、图片、文字、色彩、画线等信息。
在本实施例中,白板控制流是由电子白板终端的电子白板本地交互软件(WBA)产生的数据。白板控制流数据通过媒体传输通道传输,该白板控制流数据的传输是按照预设规则确定的。例如,白板控制流的同步信源标识符(SSRC)为:终端ID或会议ID×10+7,也就是说终端或会议的7号流为白板控制流数据。视频会议的演示流是指演示方终端(可以是电子白板终端,也可以是视频会议终端)发送的演示画面视频码流,演示流数据也是通过媒体传输通道传输,且该演示流数据的传输也是按照预设规则确定的。例如,演示流的同步信源标识符(SSRC)为:终端ID或会议ID×10+1,也就是说终端或会议的1号流为演示流数据。将白板控制流数据和演示流数据在流媒体传输通道中传输,并且预先配置同步信源标识符规则,有利于电子白板终端和视频会议终端根据同步信源标识符请求相应的流媒体数据。
另外,在本实施例中的电子白板终端可以是视频会议专用的电子白板终端,也可以通过在传统的电子白板终端中增加软件客户端以实现视频会议相关的功能。
例如,在传统的电子白板终端中增加视频会议客户端软件,利用该视频会议客户端软件调用电子白板本地交互软件提供的相应接口来实现相关的功能。
这些接口包括但不限于:
StartPresentation接口:用于开始演示,开始共享白板,该接口使用isSponsor字段描述是否为发起方;
StopPresentation接口:用于结束演示,结束共享白板;
GetDeltaFrame接口:用于获取本地修改的增量的白板描述数据;其中,视频会议客户端软件可以间隔一定时间(如500ms)向电子白板本地交互软件获取;
GetKeyFrame接口:用于获取全量的白板描述数据,包含由发起方维护白板修改版本号,视频会议客户端软件按需获取,也可一个较大间隔(如1分钟)向电子白板本地交互软件获取一次,避免增量数据丢失后补全;
SetFrame接口:用于向白板设置增量、全量白板描述数据,以便更新电子白板内容;全量数据可根据修改版本号去重。
例如,在传统的电子白板终端中增加视频会议客户端软件,利用该视频会议客户端软件调用运行在MCU信令节点上的信令服务提供的相应接口来实现相关的功能。这些接口包括但不限于:
StartPresentation接口:用于开始演示;例如可以使用接口参数type=3表示为白板演示,使用接口参数clientID表达是发起方还是接收方;
StopPresentation接口:用于结束演示;
RequestVideoSSRCs/RequestStreams接口:用于支持白板功能的终端向MCU请求白板控制流;
ForceIFrame接口:支持白板功能的接收方终端向MCU第一次发起对白板控制流的RequestVideoSSRCs/RequestStreams请求时,MCU可以生成一个ForceIFrame给发送方,发送方则调用GetKeyFrame获取全量白板描述数据发送给MCU,MCU再转发给接收方终端。
通过上述接口,本实施例可以实现的功能包括:原有演示流继续使用,内容替换为电子白板本地交互软件的画面输出截图视频编码码流。新增白板控制流,通过视频会议媒体通道接口发送和接收;视频会议客户端软件从电子白板本地交互软件获取到白板控制流数据后,模拟添加流媒体参数如timestamp、payload、sequence等后通过媒体传输接口发送到媒体服务。若终端支持白板,则使用白板控制流通过电子白板本地交互软件进行白板内容展现,否则使用演示流通过播放器展现。只要有终端请求了白板控制流,媒体服务即向其转发所有除了该终端以外其他终端发送的白板控制流数据,从而实现电子白板多方批注功能。
在本实施例中还提供了一种电子白板共享系统,该系统用于实现上述实施例及优选实施方式,已经进行过说明的不再赘述。
如图2所示,为根据本申请实施例的一种电子白板共享系统的结构示意图,该系统包括:服务器210、第一电子白板终端220和第二电子白板终端230,其中,
服务器210,用于获取第一电子白板终端220发送的第一流媒体报文,以及将第一流媒体报文发送给第二电子白板终端230,以供第二电子白板终端230根据第一流媒体报文中携带的白板控制流数据进行白板演示。
在一个实施例中,第二电子白板终端230还用于发送白板控制流数据请求消息至服务器210。
在一个实施例中,服务器210还用于判断是否接收到第二电子白板终端230发送的白板控制流数据请求消息,在判断到接收到第二电子白板终端230发送的白板控制流数据请求消息的情况下,获取第一电子白板终端210发送的第一流媒体报文。
在一个实施例中,服务器210还用于在判断到接收到第二电子白板终端230发送的白板控制流数据请求消息的情况下,生成白板控制流数据获取消息,并将白板控制流数据获取消息发送给第一电子白板终端220,以指示第一电子白板终端220发送白板控制流数据,再获取第一电子白板终端220发送的第一流媒体报文。
在一个实施例中,白板控制流数据包括:第一电子白板终端的全量白板描述数据和增量白板描述数据。
在一个实施例中,第一电子白板终端220还用于接收服务器210发送的白板控制流数据获取消息,并根据服务器210发送的白板控制流数据获取消息,生成全量白板描述数据,再将全量白板描述数据转换成第一流媒体报文,然后发送第一流媒体报文至服务器210。
在一个实施例中,第一电子白板终端220还用于将增量白板描述数据转换成第一流媒体报文,并发送第一流媒体报文至服务器210。
在一个实施例中,第二电子白板终端230用于接收第一流媒体报文,并解析第一流媒体报文中的白板控制流数据,再根据白板控制流数据进行白板演示。
在另一个实施例中,如图3所示,为根据本申请另一个实施例的一种电子白板共享系统的结构示意图,该系统还包括,视频会议终端240,其中,服务器210接收视频会议终端240发送的演示流数据请求消息;服务器210将第二流媒体报文发送给视频会议终端240,其中,第二流媒体报文中携带有演示流数据。
在一个实施例中,第一电子白板终端220还用于生成白板控制流数据,并将白板控制流数据转换成第一流媒体报文,再发送第一流媒体报文至服务器210。
在一个实施例中,第一电子白板终端220还用于根据演示流数据请求消息生成演示流数据,并将演示流数据转换成所述第二流媒体报文,再发送第二流媒体报文至服务器。
在一个实施例中,服务器210还用于:获取第一电子白板终端220发送的第二流媒体报文,其中,第二流媒体报文中携带有演示流数据;以及将第二流媒体报文发送给视频会议终端240,以供视频会议终端240根据第二流媒体报文携带的演示流数据进行视频演示。
图4是根据本发明优选实施例的电子白板共享系统的结构示意图,该系统用于实现上述实施例及优选实施方式,已经进行过说明的不再赘述。
如图4所示,该电子白板共享系统包括:第一电子白板终端220、第二电子白板终端230、服务器210和视频会议终端240。其中,第一电子白板终端220和第二电子白板终端230均包括:视频会议客户端软件和电子白板本地交互软件;服务器210包括MCU信令节点和MCU媒体节点;视频会议终端240包括但不限于:硬终端和软终端,其中,软终端包括但不限于:个人电脑(PC)软终端、移动操作系统(例如安卓或iOS)软终端。
另外,结合上述实施例中的电子白板共享方法,本申请实施例可提供一种计算机可读存储介质来实现。该计算机可读存储介质上存储有计算机程序指令;该计算机程序指令被处理器执行时实现上述实施例中的任意一种电子白板共享方法。
以上实施例的各技术特征可以进行任意的组合,为使描述简洁,未对上述实施例中的各个技术特征所有可能的组合都进行描述,然而,只要这些技术特征的组合不存在矛盾,都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本申请的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对本申请专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本申请构思的前提下,还可以做出若干变形和改进,这些都属于本申请的保护范围。因此,本申请专利的保护范围应以所附权利要求为准。

Claims (12)

1.一种电子白板共享方法,其特征在于,所述方法包括:
服务器获取第一电子白板终端发送的第一流媒体报文和第二流媒体报文,其中,所述第一流媒体报文中携带有白板控制流数据,所述第二流媒体报文中携带有演示流数据;
所述服务器将所述第一流媒体报文发送给第二电子白板终端,以供所述第二电子白板终端根据所述白板控制流数据进行白板演示,以及将所述第二流媒体报文发送给视频会议终端,以供所述视频会议终端根据所述第二流媒体报文携带的演示流数据进行视频演示。
2.根据权利要求1所述的一种电子白板共享方法,其特征在于,所述方法还包括:
所述第二电子白板终端发送白板控制流数据请求消息至所述服务器。
3.根据权利要求1所述的一种电子白板共享方法,其特征在于,所述服务器获取第一电子白板终端发送的第一流媒体报文包括:
所述服务器判断是否接收到所述第二电子白板终端发送的白板控制流数据请求消息;
所述服务器在判断到接收到所述第二电子白板终端发送的所述白板控制流数据请求消息的情况下,所述服务器获取所述第一电子白板终端发送的所述第一流媒体报文。
4.根据权利要求3所述的一种电子白板共享方法,其特征在于,在判断到接收到所述第二电子白板终端发送的所述白板控制流数据请求消息的情况下,所述服务器获取所述第一电子白板终端发送的所述第一流媒体报文包括:
所述服务器在判断到接收到所述第二电子白板终端发送的所述白板控制流数据请求消息的情况下,生成白板控制流数据获取消息;
所述服务器将所述白板控制流数据获取消息发送给所述第一电子白板终端,以指示所述第一电子白板终端发送所述第一流媒体报文;
所述服务器获取所述第一电子白板终端发送的所述第一流媒体报文。
5.根据权利要求1所述的一种电子白板共享方法,其特征在于,所述白板控制流数据包括:所述第一电子白板终端的全量白板描述数据和增量白板描述数据。
6.根据权利要求1所述的一种电子白板共享方法,其特征在于,在所述服务器将所述第一流媒体报文发送给第二电子白板终端之前,所述方法还包括:
所述第一电子白板终端接收所述服务器发送的白板控制流数据获取消息;
所述第一电子白板终端根据所述服务器发送的白板控制流数据获取消息,生成全量白板描述数据;
所述第一电子白板终端将所述全量白板描述数据转换成所述第一流媒体报文;
所述第一电子白板终端发送所述第一流媒体报文至所述服务器。
7.根据权利要求6所述的一种电子白板共享方法,其特征在于,在所述第一电子白板终端发送所述第一流媒体报文至所述服务器之后,所述方法还包括:
所述第一电子白板终端将增量白板描述数据转换成所述第一流媒体报文;
所述第一电子白板终端发送所述第一流媒体报文至所述服务器。
8.根据权利要求1至7中任一项所述的一种电子白板共享方法,其特征在于,在所述服务器将所述第一流媒体报文发送给第二电子白板终端之后,所述方法还包括:
所述第二电子白板终端接收所述第一流媒体报文;
所述第二电子白板终端解析所述第一流媒体报文中的所述白板控制流数据;
所述第二电子白板终端根据所述白板控制流数据进行白板演示。
9.根据权利要求1所述的一种电子白板共享方法,其特征在于,所述方法还包括:
所述服务器接收视频会议终端发送的演示流数据请求消息;
所述服务器将第二流媒体报文发送给所述视频会议终端,其中,所述第二流媒体报文中携带有演示流数据。
10.根据权利要求9所述的一种电子白板共享方法,其特征在于,所述方法还包括:
所述第一电子白板终端接收演示流数据获取消息;
所述第一电子白板终端根据所述演示流数据获取消息生成所述演示流数据;
所述第一电子白板终端将所述演示流数据转换成所述第二流媒体报文;
所述第一电子白板终端发送所述第二流媒体报文至所述服务器。
11.一种电子白板共享系统,其特征在于,所述系统包括:服务器、视频会议终端、第一电子白板终端和第二电子白板终端,其中,
所述服务器,用于获取所述第一电子白板终端发送的第一流媒体报文和第二流媒体报文,其中,所述第一流媒体报文中携带有白板控制流数据,所述第二流媒体报文中携带有演示流数据;
所述服务器,还用于将所述第一流媒体报文发送给所述第二电子白板终端,以供所述第二电子白板终端根据所述白板控制流数据进行白板演示,以及将所述第二流媒体报文发送给视频会议终端,以供所述视频会议终端根据所述第二流媒体报文携带的演示流数据进行视频演示。
12.一种计算机可读存储介质,所述存储介质存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1至10中任一项所述的电子白板共享方法。
CN201911195838.XA 2019-11-28 2019-11-28 电子白板共享方法、系统和计算机可读存储介质 Active CN110996039B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201911195838.XA CN110996039B (zh) 2019-11-28 2019-11-28 电子白板共享方法、系统和计算机可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911195838.XA CN110996039B (zh) 2019-11-28 2019-11-28 电子白板共享方法、系统和计算机可读存储介质

Publications (2)

Publication Number Publication Date
CN110996039A CN110996039A (zh) 2020-04-10
CN110996039B true CN110996039B (zh) 2022-01-04

Family

ID=70088064

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911195838.XA Active CN110996039B (zh) 2019-11-28 2019-11-28 电子白板共享方法、系统和计算机可读存储介质

Country Status (1)

Country Link
CN (1) CN110996039B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112783905A (zh) * 2020-12-25 2021-05-11 广州朗国电子科技有限公司 基于电子白板共享屏幕的数据更新方法、系统及存储介质
CN114125526B (zh) * 2021-12-24 2024-03-15 北京淳中科技股份有限公司 一种屏幕镜像方法及装置

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102801770A (zh) * 2012-03-06 2012-11-28 东南大学 一种实现音视频分开传输的Web视频会议的方法
CN108965786A (zh) * 2018-07-25 2018-12-07 深圳市异度信息产业有限公司 一种电子白板内容共享方法及装置
CN110392275A (zh) * 2019-07-17 2019-10-29 视联动力信息技术股份有限公司 一种文稿演示的共享方法、装置及视联网软终端
CN110446002A (zh) * 2019-07-30 2019-11-12 视联动力信息技术股份有限公司 一种视频会议的处理方法、系统及装置和存储介质
CN110445759A (zh) * 2019-07-08 2019-11-12 视联动力信息技术股份有限公司 一种电子白板共享方法和装置

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101621388A (zh) * 2008-07-02 2010-01-06 世纪搏众教育科技(北京)有限责任公司 一种视音频与非视音频混合数据的网络播送方法
US20150052208A1 (en) * 2013-08-14 2015-02-19 Avaya Inc. Invocation of sequenced applications based on dynamic parameters
CN105306861B (zh) * 2015-10-15 2017-03-01 深圳市鹰硕技术有限公司 一种网络教学录播方法及系统

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102801770A (zh) * 2012-03-06 2012-11-28 东南大学 一种实现音视频分开传输的Web视频会议的方法
CN108965786A (zh) * 2018-07-25 2018-12-07 深圳市异度信息产业有限公司 一种电子白板内容共享方法及装置
CN110445759A (zh) * 2019-07-08 2019-11-12 视联动力信息技术股份有限公司 一种电子白板共享方法和装置
CN110392275A (zh) * 2019-07-17 2019-10-29 视联动力信息技术股份有限公司 一种文稿演示的共享方法、装置及视联网软终端
CN110446002A (zh) * 2019-07-30 2019-11-12 视联动力信息技术股份有限公司 一种视频会议的处理方法、系统及装置和存储介质

Also Published As

Publication number Publication date
CN110996039A (zh) 2020-04-10

Similar Documents

Publication Publication Date Title
US9525847B2 (en) Media negotiation method, device, and system for multi-stream conference
US8830294B2 (en) Method and system for video conference control, videoconferencing network equipment, and videoconferencing site
EP3926917A1 (en) Data transmission method, device and computer storage medium
US7996540B2 (en) Method and system for replacing media stream in a communication process of a terminal
JP2015080210A (ja) 会議セッションの現在状況に対する、会議システムのリアルタイム適合システム及び方法
CN112929595B (zh) 一种网络会议融合系统及方法
CN110996039B (zh) 电子白板共享方法、系统和计算机可读存储介质
CN113923470A (zh) 直播流处理方法及装置
CN114546308A (zh) 应用界面投屏方法、装置、设备以及存储介质
WO2015003532A1 (zh) 多媒体会议的建立方法、装置及系统
CN111092898A (zh) 报文传输方法及相关设备
US9438857B2 (en) Video conferencing system and multi-way video conference switching method
WO2013166762A1 (zh) 个人网设备组网方法及系统
WO2014177082A1 (zh) 一种视频会议中处理视频的方法及终端
US11290685B2 (en) Call processing method and gateway
US9013537B2 (en) Method, device, and network systems for controlling multiple auxiliary streams
JP5579660B2 (ja) 多地点接続テレビ会議装置
CN114125362A (zh) 会议加入方法、装置、会议平台及计算机可读存储介质
CN113726534A (zh) 会议控制方法、装置、电子设备及存储介质
US11102451B2 (en) Videoconferencing server for providing multi-screen videoconferencing by using a plurality of videoconferencing terminals and method therefor
KR20170071251A (ko) 회의 서비스를 제공하는 다중 접속 제어 장치
CN101616186B (zh) 基于ip多媒体子系统的远程协助实现方法、装置及系统
CN112019791A (zh) 基于教育考试的多方音视频通话方法及系统
CN112839197B (zh) 图像码流处理方法、装置、系统及存储介质
US20220247801A1 (en) Systems and methods for video conferencing and collaboration

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant