CN112672089A - 会议控制及与会方法、装置、服务器、终端及存储介质 - Google Patents

会议控制及与会方法、装置、服务器、终端及存储介质 Download PDF

Info

Publication number
CN112672089A
CN112672089A CN201910984798.0A CN201910984798A CN112672089A CN 112672089 A CN112672089 A CN 112672089A CN 201910984798 A CN201910984798 A CN 201910984798A CN 112672089 A CN112672089 A CN 112672089A
Authority
CN
China
Prior art keywords
dimensional resource
conference
dimensional
code stream
identification information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201910984798.0A
Other languages
English (en)
Other versions
CN112672089B (zh
Inventor
郝志坚
屠要峰
朱景升
官丹
梅君君
赵志东
陈俊
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
ZTE Corp
Original Assignee
ZTE Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ZTE Corp filed Critical ZTE Corp
Priority to CN201910984798.0A priority Critical patent/CN112672089B/zh
Priority to US17/622,011 priority patent/US11838338B2/en
Priority to PCT/CN2020/113811 priority patent/WO2021073313A1/zh
Publication of CN112672089A publication Critical patent/CN112672089A/zh
Application granted granted Critical
Publication of CN112672089B publication Critical patent/CN112672089B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/40Support for services or applications
    • H04L65/403Arrangements for multi-party communication, e.g. for conferences
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/194Transmission of image signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/15Conference systems

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本发明实施例提供一种会议控制及与会方法、装置、服务器、终端及存储介质,在服务器侧,可以获取当前会议的会议码流;当从会议码流中提取到三维资源识别信息时,根据三维资源识别信息在预设的三维资源库中进行三维资源匹配,将匹配到的目标三维资源发送给与会端的三维资源处理终端;与会端的三维资源处理终端接收到目标三维资源后,即可将接收到的目标三维资源进行展示;因此实现了在会议过程中进行三维资源的动态匹配调用显示,相对相关技术中只能显示二位画面方案,丰富了会议显示效果,可在很大程度上提升用户体验满意度,且可进一步扩展会议适用的场景,应用场景广,实用价值和市场空间大。

Description

会议控制及与会方法、装置、服务器、终端及存储介质
技术领域
本发明涉及通信技术领域,尤其涉及一种会议控制及与会方法、装置、服务器、终端及存储介质。
背景技术
为了满足异地会议的需求,支持远程会议的电话会议、视频会议技术已经得到的日益广泛的应用。尤其是视频会议技术,两个或多个不同地点的与会用于(也即参会用户),通过摄像设备、通信设备、视频播放设备和网络,进行视频会议,达到近似于面对面交谈的会议。由于视频会议系统利用局端设备和终端设备,实现多点之间的视频通话,已经在企业、事业单位和政府机关得到广泛应用。但是,目前的视频会议与会者都只能通过会议终端在屏幕中看到对应的二维视频画面,会议显示效果单一,不利于提升用户体验满意度。
发明内容
本发明实施例提供的一种会议控制及与会方法、装置、服务器、终端及存储介质,解决相关技术中的视频会议显示效果单一,不利于提升用户体验满意度。
为解决上述技术问题,本发明实施例提供一种会议控制方法,包括:
获取当前会议的会议码流;
当从所述会议码流中提取到三维资源识别信息时,根据所述三维资源识别信息在预设的三维资源库中进行三维资源匹配;
在从所述三维资源库中匹配到所述三维资源识别信息对应的目标三维资源时,将所述目标三维资源发送给与会端的三维资源处理终端。
为了解决上述问题,本发明实施例还提供了一种与会方法,包括:
接收会议服务器发送的目标三维资源,所述目标三维资源为所述会议服务器根据从当前的会议码流中提取到三维资源识别信息在预设的三维资源库中所匹配到的三维资源;
将所述目标三维资源进行展示。
为了解决上述问题,本发明实施例还提供了一种会议控制装置,其特征在于,包括:
码流获取模块,用于获取当前会议的会议码流;
控制模块,用于当从所述会议码流中提取到三维资源识别信息时,根据所述三维资源识别信息在预设的三维资源库中进行三维资源匹配,以及用于在从所述三维资源库中匹配到所述三维资源识别信息对应的目标三维资源时,将所述目标三维资源发送给与会端的三维资源处理终端。
为了解决上述问题,本发明实施例还提供了一种与会装置,包括:
资源接收模块,用于接收会议服务器发送的目标三维资源,所述目标三维资源为所述会议服务器根据从当前的会议码流中提取到三维资源识别信息在预设的三维资源库中所匹配到的三维资源;
资源展示模块,用于将目标三维资源进行展示。
为了解决上述问题,本发明实施例还提供了一种会议服务器,包括第一处理器、第一存储器和第一通信总线;
所述第一通信总线用于将所述第一处理器和第一存储器连接;
所述第一处理器用于执行所述第一存储器中存储的第一计算机程序,以实现如上所述的会议控制方法的步骤。
为了解决上述问题,本发明实施例还提供了一种与会终端,包括第二处理器、第二存储器和第二通信总线;
所述第二通信总线用于将所述第二处理器和第二存储器连接;
所述第二处理器用于执行所述第二存储器中存储的第二计算机程序,以实现如上所述的与会方法的步骤。
为了解决上述问题,本发明实施例还提供了一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有第一计算机程序,所述第一计算机程序可被第一处理器执行,以实现如上所述的会议控制方法的步骤;
或,
所述计算机可读存储介质存储有第二计算机程序,所述第二计算机程序可被第二处理器执行,以实现如上所述的与会方法的步骤。
有益效果
根据本发明实施例提供的会议控制及与会方法、装置、服务器、终端及存储介质,在服务器侧,可以获取当前会议的会议码流;当从会议码流中提取到三维资源识别信息时,根据三维资源识别信息在预设的三维资源库中进行三维资源匹配,将匹配到的目标三维资源发送给与会端的三维资源处理终端;与会端的三维资源处理终端接收到目标三维资源后,可将接收到的目标三维资源进行展示;也即实现了在会议过程中进行三维资源的动态匹配调用显示,相对相关技术中只能显示二位画面方案,丰富了会议显示效果,可在很大程度上提升用户体验满意度,且可进一步扩展会议适用的场景,应用场景广,实用价值和市场空间大。
本发明其他特征和相应的有益效果在说明书的后面部分进行阐述说明,且应当理解,至少部分有益效果从本发明说明书中的记载变的显而易见。
附图说明
图1为本发明实施例一的会议控制方法流程示意图;
图2为本发明实施例一的三维资源上传过程流程示意图;
图3为本发明实施例一的资源上传界面示意图;
图4为本发明实施例一的三维资源定制过程流程示意图;
图5为本发明实施例一的会议制定界面示意图;
图6为本发明实施例一的三维资源同步流程示意图;
图7为本发明实施例一的与会方法流程示意图;
图8为本发明实施例一的三维资源编辑流程示意图;
图9为本发明实施例一的三维资源同步发起流程示意图;
图10为本发明实施例二的会议控制装置结构示意图;
图11为本发明实施例二的与会装置结构示意图;
图12为本发明实施例二的会议控制流程示意图;
图13为本发明实施例三的会议服务器结构示意图;
图14为本发明实施例三的与会终端结构示意图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,下面通过具体实施方式结合附图对本发明实施例作进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
实施例一:
本实施例提供的会议控制方法,可以在服务器侧预先设置用于存储、维护三维资源的三维资源库;该三维资源库中存储的三维资源可以根据需求被调用。且可选地,本实施例中,三维资源库中的三维资源可以支持动态更新。三维资源库中的三维资源则可以根据需求灵活设定。本实施例中的三维资源可以包括但不限于各位三维模型资源。
在本实施例中,在会议服务器侧,在会议过程中可以获取当前会议的会议码流;当从会议码流中提取到三维资源识别信息时,根据三维资源识别信息在上述预设的三维资源库中进行三维资源匹配,将匹配到的目标三维资源发送给与会端的三维资源处理终端;会端的三维资源处理终端接收到目标三维资源后,即可将接收到的目标三维资源进行展示,实现了在会议过程中进行三维资源的动态匹配调用显示,相对相关技术中只能显示二位画面方案,丰富了会议显示效果,可在很大程度上提升用户体验满意度,且可进一步扩展会议适用的场景,应用场景广,实用价值和市场空间大。
本实施例提供的会议控制方法请参见图1所示,包括:
S101:获取当前会议的会议码流。
应当理解的是,本实施例中的会议可以是点对点会议,点对多点会议或者多点对多点会议。且本实施例中的会议可以包括但不限于各种工作会议、培训会议、教育会议。
在本实施例中,会议码流包括音频码流,根据具体应用场景需求还可包括视频码流,例如一些应用场景中,会议码流可以包括音频码流和主视频码流;在另一些应用场景中,会议码流可以包括音频码流、主视频码流和辅视频码流。会议码流具体包括的内容可以根据具体应用场景灵活确定。
应当理解的是,本实施例中的会议码流包括当前与会端(也即参加会议的各方)发送的会议码流。且在本实施例中,S101可以为会议服务器执行。
S102:当从会议码流中提取到三维资源识别信息时,根据三维资源识别信息在预设的三维资源库中进行三维资源匹配。
在本实施例中,对于S101中获取到的会议码流,可以监测该会议码流中是否存在三维资源识别信息。本实施例中的三维资源识别信息可以包括任意能唯一标识一个三维资源的各种信息。例如,一些应用场景中,三维资源识别信息可包括但不限于各种文字信息(可以包括各种汉字、符号、数字、英文等中的至少一种)、声码信息和图片信息中的至少一种。
在本实施例中,可以将三维资源识别信息携带在会议码流中,这样可以在会议过程中将三维资源识别信息灵活的随着会议码流发到会议服务器侧而不需要更改会议控制流程或增加专门的步骤,通用性好,易实现,成本低。且应当理解是,在本实施例中,对于三维资源识别信息在会议码流中具体携带的方式则可以灵活设定。
例如,在一种示例中,三维资源识别信息包括文字信息时,与会端可以通过各种输入方式输入相应的文字信息并经输入的文字信息携带在会议码流中发送到服务器侧。当三维资源识别信息包括声码信息时,与会端用户可以通过语音或播放具有该声码信息的音频文件或视频文件,从而实现在会议码流中携带三维资源识别信息。当三维资源识别信息包括图片信息时,与会端用户可以通过播放相应的图片、视频文件或具有该图片信息的文档等,从而实现在会议码流中携带该维资源识别信息。
例如,在一种应用场景,当前会议的会议码流包括主视频码流、辅视频码流和音频码流时,三维资源识别信息包括文字信息和图片信息中的至少一种时,从会议码流中提取三维资源识别信息可包括但不限于:从主视频码流、辅视频码流和音频码流中的至少一路码流中提取三维资源识别信息;
三维资源识别信息包括声码信息时,从会议码流中提取三维资源识别信息包括:从音频码流中提取三维资源识别信息。
S103:在从三维资源库中匹配到三维资源识别信息对应的目标三维资源时,将目标三维资源发送给与会端的三维资源处理终端。
在本实施例中,与会端侧的终端可以包括能对三维资源进行显示处理的三维资源处理终端,例如可以包括但不限于增强现实(Augmented Reality,AR)终端。会议服务器在执行S103过程中匹配到目标三维资源时,将匹配到的目标三维资源时分发给各与会端的三维资源处理终端,以供各三维资源处理终端进行三维资源展示,从而使得与会者可以看到更逼真的三维显示效果,提升会议内容的丰富性以及显示效果。
例如,在一应用场景中,在会议的会场存在管理三维资源处理终端时,会议服务器可将目标三维资源发给管理三维资源处理终端,并通过管理三维资源处理终端下发目标三维资源给会场的各与会端的三维资源处理终端。可选地,管理三维资源处理终端将目标三维资源下发给下面的各与会端的三维资源处理终端时,可以指示这些与会端的三维资源处理终端将三维资源在指示的统一坐标系内的指示位置进行显示(这种情况下各与会者看到的显示出的三维资源相同),也可以指示这些与会端的三维资源处理终端将三维资源在自身的坐标系内的相应位置进行显示(这种情况下与会者看到的是自身的三维资源处理终端各自按照各自的坐标系显示的三维资源)。
在本实施例中,会议控制方法还包括:
会议会服务器还可将接收到的会议码流发给与会端的视频终端,从而可同时实现音频会议或视频会议。应当理解的时,在一些示例中,三维资源处理终端和视频终端可为两个相互独立的物理终端,也可为一个物理终端。
在本实施例的一些示例中,还可包括向会议服务器侧上传三维资源的过程,请参见图2所示,包括:“
S201:接收三维资源上传请求。
本实施例中可以为会议服务器接受三维资源上传请求。在一些应用示例中,会议服务器可以提供相应的上传管理界面,以供用户在该上传管理界面进行三维资源的上传。
S202:将三维资源上传请求所请求上传的资源按设定的分类结构存储到三维资源库中。
本实施例中,对于用户上传的三维资源,可以分类存储,也可以不分类随机存储。
可选地,为了提升安全管理性,对于用户上传的三维资源可以对其进行安全校验,只有在校验成功时才对其进行存储;或者对上传三维资源的用户进行权限校验,只有在该用户具备相应权限时才能进行三维资源的上传。
例如,一种示例的资源上传界面参见图3所示,该上传界面上包括资源分类—标签—三维资源的默认识别信息。用户在上传三维资源时,可以确定待上传的三维资源所属的类别(例如机械模型),该类别下的标签(例如汽车)以及待上传的三维资源的默认识别信息(可以设置,也可不设置,例如选择为空),确定好之后可以点击上传按钮将三维资源上传到对应的三维资源库中相应位置。可选地,在本实施例中,会议服务器还可提供三维资源查询入口以供用户进行三维资源的查询。一种示例的三维资源查询入口请参见图3所示。
可选地,在本实施例中,在上述S101获取当前的会议码流之前,还可包括对会议进行以下图4所示的三维资源定制过程:
S401:接收三维资源定制请求。
在本实施例中,会议服务器侧接收到的三维资源定制请求中可包括所需定制的三维资源的指示信息。例如一种示例中用户可以通过图4所示的界面提供的三维资源查询接口查询到需要定制的三维资源然后点击选中从而下发三维资源定制请求给会议服务器。
在本实施例的一些示例中,当当前需要定制的三维资源在三维资源库中当前不存在时,可以从其他终端或资源库中调取相应的三维资源。
S402:从三维资源库中选择出三维资源定制请求所请求的目标三维资源。
S403:为选择出的目标三维资源设置三维资源识别信息(应当理解的时,在本实施例中,不管目标三维资源当前是否设置有三维资源识别信息,都可以直接为该目标三维资源设置相应的三维资源识别信息,因此在本实施例中,一个三维资源可以对应设置有一个三维资源识别信息,也可设置两个或两个以上的三维资源识别信息),或在目标三维资源当前配置有三维资源识别信息时,直接提取三维资源识别信息,此次设置的或提起的三维资源识别信息需在后续会议过程中在会议码流中携带。
例如,一种示例的会议制定界面请参见图5所示,用户选择选择三维资源搜索方式,以及选择采用三维资源的默认识别码或自定义识别码作为三维资源识别信息,且可选择相应的识别码类型,例如文字、图片、声码(可包括但不限于语音指令)等。
可选地,在本实施例的一种示例中,将目标三维资源发送给与会端的三维资源处理终端之后,还可包括:
接收到会议的与会端发送的三维资源同步请求时,将三维资源同步请求所请求同步的三维资源发送给会议的至少一个与会端的三维资源处理终端。
可选地,在本实施例的一些示例中,将目标三维资源发给与会端的三维资源处理终端,可支持或允许三维资源处理终端对接收到的目标三维资源进行展示的同时,还可支持对其进行编辑处理,该编辑处理可包括但不限于缩小、放大、增加内容、删除内容、更改背景颜色、更改显示位置等中的至少一种。
在本实施例中一些应用示例中,三维资源同步请求所请求同步的三维资源可以包括三维资源处理终端处理之后的目标三维资源,也可以包括三维资源处理终端想要分享的新三维资源。
在本实施例中,会议服务器接收到会议的与会端发送的三维资源同步请求时,可以将三维资源同步请求所请求同步的三维资源发送给会议的所有与会端的三维资源处理终端,或发给三维资源同步请求所指定的三维资源处理终端。
在本实施例的一些示例中,可以设置在某些会议模式下(例如支持人模式)才支持三维资源处理终端发起三维资源的同步。在另一些会议模式下(例如会场模式)则不允许三维资源处理终端发起三维资源的同步。
在本实施例的一些示例中,可以仅针对具有设定权限的与会端才允许其进行三维资源的同步。此时,请参见图6所示,在本示例中,将三维资源同步请求所请求同步的三维资源发送给会议的至少一个与会端的三维资源处理终端之前,还可包括:
S601:会议服务器确定发送三维资源同步请求的与会端当前是否具有设定的权限(例如主持人权限)。
S602:在确定发送三维资源同步请求的与会端当前具有设定的权限时,才将三维资源同步请求所请求同步的三维资源发送给会议的至少一个与会端的三维资源处理终端。
本实施例还提供了一种与会端的与会方法,请参见图7所示,包括:
S701:与会端接收会议服务器发送的目标三维资源。
该目标三维资源为会议服务器根据从当前的会议码流中提取到三维资源识别信息在预设的三维资源库中所匹配到的三维资源,具体匹配过程可参见但不限于上述示例过程。
S702:将获取到的目标三维资源进行展示;例如进行显示。
可选地,与会端的三维资源处理终端将目标三维资源进行展示的方式可包括但不限于以下方式中的任意一种:
方式一:将三维资源在指示的统一坐标系内的指示位置进行显示;
方式二:将三维资源在自身的坐标系内的相应位置进行显示。
可选地,在本实施例的一些示例中,请参见图8所示,与会方法还可包括以下示例的三维资源编辑过程:
S801:接收三维资源编辑指令。
与会端的三维资源处理终端可以接收用户发送的三维资源编辑指令,该三维资源编辑指令可以为放大、缩小、增加内容、删除内容、更改背景颜色、更改显示位置等中的至少一种。
S802:根据三维资源编辑指令对三维资源进行编辑处理。
可选地,在本实施例的一些示例中,请参见图9所示,与会方法还可包括以下示例的三维资源同步请求过程:
S901:接收三维资源同步指令。
与会端的三维资源处理终端可以接收用户发送的三维资源编辑指令。
S902:根据三维资源同步指令向会议服务器发送将编辑处理后的三维资源同步给至少一个其他与会端的三维资源同步请求。也可发送用于请求需要分享的新的三维资源的三维资源同步请求给会议服务器。
为了便于理解,本实施例下面再结合具体的应用场景对本实施例提供的会议控制方法进行以下总结说明:
本实施例提供的会议控制方法可应用于融合视频终端和三维资源处理终端的会议服务器,该会议服务器可负责存储、管理和调度三维资源;且本实施例中可为每个三维资源匹配三维资源识别信息。会议开始后,该会议服务器会实时监测辅流内容(也可监测主流内容等),当有检测到三维资源识别信息(可以是声码、图片、文字等)后,会议服务器会获取并分发三维资源到各分会场的与会端。本实施例提供的方法还包含推送三维资源和放置三维资源位置的策略,以及各会场对三维资源操作的交互方式。在大数据时代,本实施例提供的会议控制方法还可以应用在学校或培训机构的教学上,也可以用在公司的会议、宣传或产品展览现场,应用场景广,实用价值和市场空间非常大。
在本实施例中,会议服务器对于与会端的三维资源处理终端(下面以AR终端为示例),会议服务器可根据辅流(或主流)来识别向AR终端发送具体的三维资源(例如增强模型),且可在会议服务器侧渲染模型,发送模型数据;对于与会端的视频终端,还是可正常发送音频和主、辅码流,原有功能不受影响。同时提供一套对模型管理的系统,方便进行模型的上传和使用。
在本实施例中,提出了一种可识别会议码流内容而非摄像头识别实物来匹配三维资源,识别效率高。可以用原会议码流中已有的内容(如文字、图片、声音等)作为三维资源识别信息,这样就无需更改原文件就可以做到对三维资源的匹配和显示。打破了目前常见的AR应用通过摄像头采集具体的实物来匹配三维模型的通常做法。在大数据时代,更加流行的还是电子数据,所以一种针对数字识别的增强现实技术会更加具有市场价值。
可选地,在本实施例中,可针对每个会场设置一个具有“管理”角色的AR终端(也即管理AR终端),该管理AR终端有权限调整三维资源在本会场的显示位置,会议服务器会将三维资源分别通过各会场的管理AR终端发送至参会的每个AR设备上。
1、统一位置显示:管理AR终端指示本会场内所有的AR设备统一以指定的目标物的坐标系作统一坐标系,将三维资源放置到该坐标系内的指定位置,参会人员看到的是同一个三维模型。
2、独立位置显示:管理AR终端指示本会场内所有的AR设备分别以各自的坐标系作参考,三维资源显示在AR设备前方,参会人员只能看到属于自己的三维模型。
可选地,在本实施例中,除了每个会场有个“管理”角色的AR设备外,整场会议里还可设置至少一个具有“主持人”角色的AR设备,“主持人”角色的AR设备可同时具有“管理”角色的权限。
1、主持人模式:佩戴“主持人”角色AR设备的参会人员可对三维资源的操作可实时发送至会议服务器,然后会议服务器会将三维资源的状态变化同步至各会场其他参会人员的AR设备上。在主持人模式下,可设置其他各会场参会人员无操作三维资源的权限。当然可选地还可设置各会场有权限屏蔽系统同步的模型状态,进入会场模式。
2、会场模式:各会场参会人员可以操作三维模型(该模型可以是显示在统一位置的,也可以是独立显示在每个AR设备里的),这种模式下对三维模型的操控不上传至会议服务器,也就不会同步至其它会场。
如果在会场模式下想把三维模型的状态(包括尺寸、旋转角度、缩放大小等属性)同步给其他参会人员,可以申请“主持人”角色,只有拿到“主持人”权限的AR设备可以将三维模型的状态上传给会议服务器,再由会议服务器将三维模型的状态同步给其他参会人员。
可选地,在一些示例中,默认主会场中的某个AR设备具有“主持人”角色,非主持人角色的AR设备可以向当前具有主持人角色的AR设备申请成为主持人角色。待当前具有“主持人”角色的AR设备同意后,该AR设备成为新的“主持人”,原“主持人”角色的AR设备不再具有“主持人”权限。
实施例二:
本实施例提供了一种会议控制装置,该会议控制装置可应用于会议服务器中,请参见图10所示,包括:
码流获取模块1001,用于获取当前会议的会议码流,具体获取过程请参见上述实施例所示,在此不再赘述。
控制模块1002,用于当从会议码流中提取到三维资源识别信息时,根据三维资源识别信息在预设的三维资源库中进行三维资源匹配,以及用于在从三维资源库中匹配到三维资源识别信息对应的目标三维资源时,将目标三维资源发送给与会端的三维资源处理终端。具体的匹配控制过程请参见上述实施例所示,在此也不再赘述。
请参见图10所示,会议控制装置还可包括:
三维资源终端管理模块1003:用于包含三维资源终端的接入、三维资源终端的角色管理、三维资源终端三维资源状态的同步等。
资源上传模块1006:用于支持将制作好的三维资源放在会议服务器平台,在进行三维资源定制时选择相应的三维资源,具体的上传和查询过程请参见撒上述实施例所示,在此不再赘述。
资源定制模块1005:在预订会议时选择需要使用的三维,具体的定制过程请参见上述各实施例所示,在此不再赘述。
渲染模块1004:在会议服务器端进行三维资源渲染。
资源同步模块1007:用于根据需求将三维资源同步给会议的至少一个与会端的三维资源处理终端,具体的同步过程请参见上述实施例所示,在此也不再赘述。
资源交互模块1000:用于和三维资源处理终端进行资源的交互,比如旋转、缩放编辑交互,当然这些编辑操作也可在三维资源处理终端本地处理。
请参见图10所示,会议控制装置还可包括视频会议系统侧的功能模块,可包括但不限于:
视频终端管理模块1008:用于传统视频终端的接入。
主流处理模块1009:处理主视频码流,做解码、编码、合成等处理。
辅流处理模块1010:处理辅视频码流,将辅视频码流转给其它终端。
音频处理模块1011:处理音频码流,做解码、混音、编码等处理。
码流传输模块1012:用于音频、主辅视频的码流发送和接收。
本实施例还提供了一种与会装置,该与会装置可应用于个各种会议终端中,包括三维资源处理终端,请参见图11所示,包括:
资源接收模块1101,用于接收会议服务器发送的目标三维资源,目标三维资源为会议服务器根据从当前的会议码流中提取到三维资源识别信息在预设的三维资源库中所匹配到的三维资源;具体接收处理过程请参见上述实施例所示,在此不再赘述。
资源展示模块1102,用于将目标三维资源进行展示。具体展示处理过程请参见上述实施例所示,在此不再赘述。
资源传输模块1103:用于三维资源的数据发送和接收。
终端业务模块1104:用于进行三维资源终端的管理和控制。
请参见图11所示,该与会装置还可包括但不限于:
主流控制模块1105:用于处理主视频码流,接收码流解码显示到屏幕;采集主视频,进行编码,发送给码流传输模块。
辅流控制模块1106:用于处理辅视频码流,接收辅视频解码显示到屏幕;采集辅视频,进行编码,发送给码流传输模块。
音频处理模块1108:用于处理音频码流,接收音频解码,输出到扬声器;采集声音,进行编码,发送给码流传输模块。
码流传输模块1107:用于音频、主辅视频的码流发送和接收。
终端业务模块1109:用于进行视频终端管理和控制。
基于上述示例的装置,本实施例中提供了一个示例的完整的会议控制过程,包括会议预定、识别码(也即三维资源识别信息)和三维模型资源进行匹配、会议过程中会议服务器对识别码的识别和三维模型资源的显示流程。当会议服务器识别到当前会议流(例如辅流)内容中包含识别码时,会议服务器会获取跟该识别码匹配的三维模型资源,并将该三维资源分发至每个参会人员的AR终端(例如AR眼镜)上进行显示。请参见图12所示,包括:
S1201:通过会议服务器的会议管理系统进行预定会议。
S1202:在会议服务器的会议管理界面,定制本次会议所需的三维资源,使用默认识别码或自定义的识别码,然后转至S1204。
S1203:在三维资源库中当前没有需要定制的资源时,从终端的IP地址和路径获取相应的三维资源到三维资源库中,然后进行定制,然后转至S1204。
S1204:会议过程中,将识别码潜入待分享文件中,会议开始后,会议服务器对当前的辅流(例如分享的视频文件、文档文件、音频文件等)进行检测。
S1205:检测到对应的识别码时,则从三维资源库中匹配出相应的目标三维资源分发给与会端的AR终端。
实施例三:
本实施例还提供了一种会议服务器,参见图13所示,其包括第一处理器1301、第一存储器1302以及第一通信总线1303;
第一通信总线1303用于实现第一处理器1301与第一存储器1302之间的通信连接;
一种示例中,第一处理器1301可用于执行第一存储器1302中存储的第一计算机程序,以实现如上各实施例中的会议控制方法的步骤。
本实施例还提供了一种与会终端,参见图14所示,其包括第二处理器1401、第二存储器1402以及第二通信总线1403;
第二通信总线1403用于实现第二处理器1401与第二存储器1402之间的通信连接;
一种示例中,第二处理器1401可用于执行第二存储器1402中存储的第二计算机程序,以实现如上各实施例中的与会方法的步骤。
本实施例还提供了一种计算机可读存储介质,该计算机可读存储介质包括在用于存储信息(诸如计算机可读指令、数据结构、计算机程序模块或其他数据)的任何方法或技术中实施的易失性或非易失性、可移除或不可移除的介质。计算机可读存储介质包括但不限于RAM(Random Access Memory,随机存取存储器),ROM(Read-Only Memory,只读存储器),EEPROM(Electrically Erasable Programmable read only memory,带电可擦可编程只读存储器)、闪存或其他存储器技术、CD-ROM(Compact Disc Read-Only Memory,光盘只读存储器),数字多功能盘(DVD)或其他光盘存储、磁盒、磁带、磁盘存储或其他磁存储装置、或者可以用于存储期望的信息并且可以被计算机访问的任何其他的介质。
在一种示例中,本实施例中的计算机可读存储介质可用于存储第一计算机程序,该第一计算机程序可被一个或者多个第一处理器执行,以实现如上各实施例中的会议控制方法的步骤。
在一种示例中,本实施例中的计算机可读存储介质可可用于存储第二计算机程序,该第二计算机程序可被一个或者多个第二处理器执行,以实现如上各实施例中的与会方法的步骤。
本实施例还提供了一种第一计算机程序(或称计算机软件),该第一计算机程序可以分布在计算机可读介质上,由可计算装置来执行,以实现如上各实施例所示的会议控制方法的至少一个步骤;并且在某些情况下,可以采用不同于上述实施例所描述的顺序执行所示出或描述的至少一个步骤。
本实施例还提供了一种第二计算机程序(或称计算机软件),该第二计算机程序可以分布在计算机可读介质上,由可计算装置来执行,以实现如上各实施例所示的与会方法的至少一个步骤;并且在某些情况下,可以采用不同于上述实施例所描述的顺序执行所示出或描述的至少一个步骤。
本实施例还提供了一种第一计算机程序产品,包括计算机可读装置,该计算机可读装置上存储有如上所示的计算机程序。本实施例中该计算机可读装置可包括如上所示的计算机可读存储介质。
可见,本领域的技术人员应该明白,上文中所公开方法中的全部或某些步骤、系统、装置中的功能模块/单元可以被实施为软件(可以用计算装置可执行的计算机程序代码来实现)、固件、硬件及其适当的组合。在硬件实施方式中,在以上描述中提及的功能模块/单元之间的划分不一定对应于物理组件的划分;例如,一个物理组件可以具有多个功能,或者一个功能或步骤可以由若干物理组件合作执行。某些物理组件或所有物理组件可以被实施为由处理器,如中央处理器、数字信号处理器或微处理器执行的软件,或者被实施为硬件,或者被实施为集成电路,如专用集成电路。
此外,本领域普通技术人员公知的是,通信介质通常包含计算机可读指令、数据结构、计算机程序模块或者诸如载波或其他传输机制之类的调制数据信号中的其他数据,并且可包括任何信息递送介质。所以,本发明不限制于任何特定的硬件和软件结合。
以上内容是结合具体的实施方式对本发明实施例所作的进一步详细说明,不能认定本发明的具体实施只局限于这些说明。对于本发明所属技术领域的普通技术人员来说,在不脱离本发明构思的前提下,还可以做出若干简单推演或替换,都应当视为属于本发明的保护范围。

Claims (18)

1.一种会议控制方法,包括:
获取当前会议的会议码流;
当从所述会议码流中提取到三维资源识别信息时,根据所述三维资源识别信息在预设的三维资源库中进行三维资源匹配;
在从所述三维资源库中匹配到所述三维资源识别信息对应的目标三维资源时,将所述目标三维资源发送给与会端的三维资源处理终端。
2.如权利要求1所述的会议控制方法,其特征在于,所述会议控制方法还包括:
将所述会议码流发给所述与会端的视频终端,所述会议码流包括主视频码流、辅视频码流和音频码流。
3.如权利要求1所述的会议控制方法,其特征在于,所述获取当前的会议码流之前,还包括:
接收三维资源定制请求;
从所述三维资源库中选择出所述三维资源定制请求所请求的目标三维资源;
为选择出的所述目标三维资源设置三维资源识别信息,或在所述目标三维资源当前配置有三维资源识别信息时,提取所述三维资源识别信息;所述三维资源识别信息在所述会议过程中在会议码流中携带。
4.如权利要求1-3任一项所述的会议控制方法,其特征在于,所述三维资源识别信息包括文字信息、声码信息和图片信息中的至少一种。
5.如权利要求4所述的会议控制方法,其特征在于,所述会议码流包括主视频码流、辅视频码流和音频码流;
所述三维资源识别信息包括文字信息和图片信息中的至少一种时,从会议码流中提取三维资源识别信息包括:从所述主视频码流、辅视频码流和音频码流中的至少一路码流中提取三维资源识别信息;
所述三维资源识别信息包括声码信息时,从会议码流中提取三维资源识别信息包括:从所述音频码流中提取三维资源识别信息。
6.如权利要求1-3任一项所述的会议控制方法,其特征在于,所述会议控制方法还包括:
接收三维资源上传请求;
将所述三维资源上传请求所请求上传的资源按设定的分类结构存储到所述三维资源库中。
7.如权利要求1-3任一项所述的会议控制方法,其特征在于,将所述目标三维资源发送给与会端的三维资源处理终端包括:
在所述会议的会场存在管理三维资源处理终端时,将所述目标三维资源发给所述管理三维资源处理终端,并通过所述管理三维资源处理终端下发所述目标三维资源给所述会场的各与会端的三维资源处理终端。
8.如权利要求1-3任一项所述的会议控制方法,其特征在于,将所述目标三维资源发送给与会端的三维资源处理终端之后,还包括:
接收到所述会议的与会端发送的三维资源同步请求时,将所述三维资源同步请求所请求同步的三维资源发送给所述会议的至少一个与会端的三维资源处理终端。
9.如权利要求8所述的会议控制方法,其特征在于,接收到所述会议的与会端发送的三维资源同步请求时,将所述三维资源同步请求所请求同步的三维资源发送给所述会议的至少一个与会端的三维资源处理终端之前,还包括:
确定发送所述三维资源同步请求的与会端当前具有设定的权限时,将所述三维资源同步请求所请求同步的三维资源发送给所述会议的至少一个与会端的三维资源处理终端。
10.一种与会方法,包括:
接收会议服务器发送的目标三维资源,所述目标三维资源为所述会议服务器根据从当前的会议码流中提取到三维资源识别信息在预设的三维资源库中所匹配到的三维资源;
将所述目标三维资源进行展示。
11.如权利要求10所述的与会方法,其特征在于,所述与会方法还包括:
接收三维资源编辑指令;
根据所述三维资源编辑指令对所述三维资源进行编辑处理。
12.如权利要求11所述的与会方法,其特征在于,根据所述三维资源编辑指令对所述三维资源进行编辑处理后,还包括:
接收三维资源同步指令;
根据所述三维资源同步指令向所述会议服务器发送将编辑处理后的三维资源同步给至少一个其他与会端的三维资源同步请求。
13.如权利要求10-12任一项所述的与会方法,其特征在于,将所述目标三维资源进行展示包括:
将所述三维资源在指示的统一坐标系内的指示位置进行显示;
或,
将所述三维资源在自身的坐标系内的相应位置进行显示。
14.一种会议控制装置,其特征在于,包括:
码流获取模块,用于获取当前会议的会议码流;
控制模块,用于当从所述会议码流中提取到三维资源识别信息时,根据所述三维资源识别信息在预设的三维资源库中进行三维资源匹配,以及用于在从所述三维资源库中匹配到所述三维资源识别信息对应的目标三维资源时,将所述目标三维资源发送给与会端的三维资源处理终端。
15.一种与会装置,其特征在于,包括:
资源接收模块,用于接收会议服务器发送的目标三维资源,所述目标三维资源为所述会议服务器根据从当前的会议码流中提取到三维资源识别信息在预设的三维资源库中所匹配到的三维资源;
资源展示模块,用于将目标三维资源进行展示。
16.一种会议服务器,其特征在于,包括第一处理器、第一存储器和第一通信总线;
所述第一通信总线用于将所述第一处理器和第一存储器连接;
所述第一处理器用于执行所述第一存储器中存储的第一计算机程序,以实现如权利要求1-9任一项所述的会议控制方法的步骤。
17.一种与会终端,其特征在于,包括第二处理器、第二存储器和第二通信总线;
所述第二通信总线用于将所述第二处理器和第二存储器连接;
所述第二处理器用于执行所述第二存储器中存储的第二计算机程序,以实现如权利要求10-13任一项所述的与会方法的步骤。
18.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有第一计算机程序,所述第一计算机程序可被第一处理器执行,以实现如权利要求1-9任一项所述的会议控制方法的步骤;
或,
所述计算机可读存储介质存储有第二计算机程序,所述第二计算机程序可被第二处理器执行,以实现如权利要求10-13任一项所述的与会方法的步骤。
CN201910984798.0A 2019-10-16 2019-10-16 会议控制及与会方法、装置、服务器、终端及存储介质 Active CN112672089B (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN201910984798.0A CN112672089B (zh) 2019-10-16 2019-10-16 会议控制及与会方法、装置、服务器、终端及存储介质
US17/622,011 US11838338B2 (en) 2019-10-16 2020-09-07 Method and device for conference control and conference participation, server, terminal, and storage medium
PCT/CN2020/113811 WO2021073313A1 (zh) 2019-10-16 2020-09-07 会议控制及与会方法、装置、服务器、终端及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910984798.0A CN112672089B (zh) 2019-10-16 2019-10-16 会议控制及与会方法、装置、服务器、终端及存储介质

Publications (2)

Publication Number Publication Date
CN112672089A true CN112672089A (zh) 2021-04-16
CN112672089B CN112672089B (zh) 2024-02-06

Family

ID=75400637

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910984798.0A Active CN112672089B (zh) 2019-10-16 2019-10-16 会议控制及与会方法、装置、服务器、终端及存储介质

Country Status (3)

Country Link
US (1) US11838338B2 (zh)
CN (1) CN112672089B (zh)
WO (1) WO2021073313A1 (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114025147A (zh) * 2021-11-01 2022-02-08 华中师范大学 Vr教学的数据传输方法、系统、电子设备及存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120206561A1 (en) * 2011-02-16 2012-08-16 Hon Hai Precision Industry Co., Ltd. Remote conference management system and method employing the same
CN104639777A (zh) * 2013-11-14 2015-05-20 中兴通讯股份有限公司 一种会议控制方法、装置及会议系统
CN107845142A (zh) * 2016-09-20 2018-03-27 星播网(深圳)信息有限公司 一种网络三维虚拟广告的自动生成及互动方法和系统
CN110012257A (zh) * 2019-02-21 2019-07-12 百度在线网络技术(北京)有限公司 通话方法、装置及终端

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20120060549A (ko) * 2010-12-02 2012-06-12 전자부품연구원 사용자 단말 및 이를 이용한 영상 통화 방법
CN102413184B (zh) * 2011-11-24 2014-05-14 迈普通信技术股份有限公司 分布式架构中协议栈的实现方法和装置
CN103634563A (zh) 2012-08-24 2014-03-12 中兴通讯股份有限公司 视频会议显示方法及装置
US9998705B2 (en) * 2013-08-09 2018-06-12 Samsung Electronics Co., Ltd. Hybrid visual communication
US9826001B2 (en) * 2015-10-13 2017-11-21 International Business Machines Corporation Real-time synchronous communication with persons appearing in image and video files
CN105791390A (zh) 2016-01-21 2016-07-20 华为技术有限公司 数据传输方法、装置及系统
CN105933637A (zh) * 2016-04-26 2016-09-07 上海与德通讯技术有限公司 一种视频通信的方法及系统
US10375354B2 (en) * 2018-01-05 2019-08-06 Facebook, Inc. Video communication using subtractive filtering
CN110022329B (zh) * 2018-01-08 2022-03-11 腾讯科技(深圳)有限公司 文件传输方法、装置、计算机可读存储介质及计算机设备
CN111953922B (zh) * 2019-05-16 2022-05-27 南宁富联富桂精密工业有限公司 视频会议的人脸辨识方法、服务器及计算机可读存储介质

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120206561A1 (en) * 2011-02-16 2012-08-16 Hon Hai Precision Industry Co., Ltd. Remote conference management system and method employing the same
CN104639777A (zh) * 2013-11-14 2015-05-20 中兴通讯股份有限公司 一种会议控制方法、装置及会议系统
CN107845142A (zh) * 2016-09-20 2018-03-27 星播网(深圳)信息有限公司 一种网络三维虚拟广告的自动生成及互动方法和系统
CN110012257A (zh) * 2019-02-21 2019-07-12 百度在线网络技术(北京)有限公司 通话方法、装置及终端

Also Published As

Publication number Publication date
US11838338B2 (en) 2023-12-05
WO2021073313A1 (zh) 2021-04-22
US20220303319A1 (en) 2022-09-22
CN112672089B (zh) 2024-02-06

Similar Documents

Publication Publication Date Title
CN110597774B (zh) 一种文件分享方法、系统、装置、计算设备及终端设备
EP2348671B1 (en) Conference terminal, conference server, conference system and method for data processing
EP2940940B1 (en) Methods for sending and receiving video short message, apparatus and handheld electronic device thereof
CN104038722B (zh) 一种视频会议的内容交互方法及系统
US9584835B2 (en) System and method for broadcasting interactive content
EP2685715A1 (en) Method and device for managing video resources in video conference
CN111741324B (zh) 录制回放方法、装置和电子设备
US6724918B1 (en) System and method for indexing, accessing and retrieving audio/video with concurrent sketch activity
CN109348161A (zh) 显示标注信息方法和电子设备
US11689749B1 (en) Centralized streaming video composition
EP2579588B1 (en) Collaborative meeting systems that enable parallel multi-user input to mark up screens
US20230017859A1 (en) Meeting control method and apparatus, device, and medium
US20070011232A1 (en) User interface for starting presentations in a meeting
CN106792237B (zh) 一种消息显示方法和系统
CN112672089B (zh) 会议控制及与会方法、装置、服务器、终端及存储介质
CN116542633A (zh) 一种基于bim的建筑工程协同办公系统
CN110996118A (zh) 一种封面合成方法、装置、服务器以及存储介质
US11812084B2 (en) Method and device for content recording and streaming
CN103294193A (zh) 多终端互动的方法、装置和系统
CN112601110B (zh) 用于内容记录和分享的方法和设备
CN116980391A (zh) 文件传输方法、装置、电子设备和存储介质
CN116882370B (zh) 一种内容处理方法、装置、电子设备及存储介质
CN117876559B (zh) 基于云渲染的虚拟场景双模式运行方法、系统及存储介质
CN114025185B (zh) 一种视频回放方法、装置、电子设备及存储介质
CN115048069A (zh) 云会议内容共享方法、装置、电子设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant