CN105100677A - 用于视频会议呈现的方法、装置和系统 - Google Patents

用于视频会议呈现的方法、装置和系统 Download PDF

Info

Publication number
CN105100677A
CN105100677A CN201410216238.8A CN201410216238A CN105100677A CN 105100677 A CN105100677 A CN 105100677A CN 201410216238 A CN201410216238 A CN 201410216238A CN 105100677 A CN105100677 A CN 105100677A
Authority
CN
China
Prior art keywords
video content
video
sending endpoint
grade
viewing area
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201410216238.8A
Other languages
English (en)
Inventor
李颖
简旭颖
汤畅
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huawei Technologies Co Ltd
Original Assignee
Huawei Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huawei Technologies Co Ltd filed Critical Huawei Technologies Co Ltd
Priority to CN201410216238.8A priority Critical patent/CN105100677A/zh
Priority to JP2016568500A priority patent/JP2017523632A/ja
Priority to EP15795805.9A priority patent/EP3139597A4/en
Priority to KR1020167035023A priority patent/KR20170007419A/ko
Priority to PCT/CN2015/073481 priority patent/WO2015176569A1/zh
Publication of CN105100677A publication Critical patent/CN105100677A/zh
Priority to US15/355,481 priority patent/US20170070704A1/en
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/15Conference systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/141Systems for two-way working between two video terminals, e.g. videophone
    • H04N7/147Communication arrangements, e.g. identifying the communication as a video-communication, intermediate storage of the signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/485End-user interface for client configuration
    • H04N21/4858End-user interface for client configuration for modifying screen layout parameters, e.g. fonts, size of the windows
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/141Systems for two-way working between two video terminals, e.g. videophone
    • H04N7/142Constructional details of the terminal equipment, e.g. arrangements of the camera and the display
    • H04N7/144Constructional details of the terminal equipment, e.g. arrangements of the camera and the display camera and display on the same optical axis, e.g. optically multiplexing the camera and display for eye to eye contact

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Telephonic Communication Services (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本发明实施例提供了一种用于视频会议呈现的方法、装置和系统。该方法包括:接收至少一个发送端点的视频流;根据每个发送端点的视频流,对视频内容进行等级划分,以确定每个发送端点对应的视频内容等级,其中,该至少一个发送端点对应的视频内容等级包括多个视频内容等级;确定用于指示该多个视频内容等级中每个视频内容等级对应的显示区域的视频布局,视频内容等级与显示区域一一对应;根据多个视频内容等级中每一个视频内容等级对应的视频内容以及视频布局,确定多个显示区域中每一个显示区域对应的待呈现视频内容。本发明实施例能够使得显示区域的信息显示更为合理,避免用户手动去选择调整,让会议更加高效。

Description

用于视频会议呈现的方法、装置和系统
技术领域
本发明涉及通信领域,并且更具体地,涉及一种用于视频会议呈现的方法、装置和系统。
背景技术
在目前的各类多点视频通讯中,视频会议中视频图像的组成都基本是以摄像头拍摄区域为基本单位,进行视频图像的拼接处理或者直接传输发送给会场屏幕,所以在各个会场屏幕上看到的内容,通常都是要么看到1个摄像头拍摄的画面,要么就是多个摄像头拍摄组合的画面效果。这样带来的问题是,会议中信息的冗余呈现,以及会议焦点人物信息和非焦点人物信息会分散在屏幕的不同区域,没有在屏幕上进行信息焦点的布局区分,每个屏幕区域都可能会出现会议当前的焦点人物信息,这样带来的沟通的焦点不断变化,非焦点信息甚至占据了屏幕的中间区域等,这样会影响沟通效果。
观看内容的控制方式上,通常有以下的常见的方式:声控切换和非声控切换(手动切换)机制。在声控切换的机制下,让屏幕图像的频繁无序切换,屏幕区域没有焦点区分;在非声控的机制下,每个会场都需要有专人来随时切换屏幕内容实时满足观看的需要,所以观看画面的效率不是很高,特别是在偏讨论和协作的会议,会议的焦点变化比较快,所以有时候甚至出现一些极端的观看效果情况,例如发言人和材料并没有合理的出现,“只闻其声不见其人”的效果。
发明内容
本发明实施例提供了一种用于视频会议呈现的方法、装置和系统,能够使得显示区域的信息显示更为合理,避免用户手动去选择调整,让会议更加高效。
第一方面,提供了一种用于视频会议呈现的方法,包括:
接收至少一个发送端点中每个发送端点的视频流;
根据所述每个发送端点的视频流,对所述每个发送端点的视频流中的视频内容进行等级划分,以确定所述每个发送端点对应的视频内容等级,其中,所述至少一个发送端点对应的视频内容等级包括多个视频内容等级;
确定视频布局,所述视频布局用于指示所述多个视频内容等级中每个视频内容等级对应的显示区域,其中,所述显示区域是包含于接收端点的多个显示区域中的显示区域,所述视频内容等级与所述显示区域一一对应;
根据所述多个视频内容等级中每一个视频内容等级对应的视频内容以及所述视频布局,确定所述多个显示区域中每一个显示区域对应的待呈现视频内容,以便于通过所述多个显示区域中每个显示区域呈现对应的待呈现视频内容,其中,不同的显示区域对应的待呈现视频内容包括不同的视频内容等级对应的视频内容。
结合第一方面,在第一方面的第一种可能的实现方式中,所述方法由控制设备执行,所述方法还包括:
向所述接收端点发送所述多个显示区域中每个显示区域对应的待呈现视频内容以及指示信息,其中,所述指示信息用于指示所述显示区域与所述待呈现视频内容的对应关系,以便于所述接收端点通过所述多个显示区域中每个显示区域呈现对应的待呈现视频内容。
结合第一方面,在第一方面的第二种可能的实现方式中,所述方法由所述接收端点执行,所述方法还包括:
所述接收端点通过所述多个显示区域中每个显示区域呈现对应的待呈现视频内容。
结合第一方面或第一方面的第一种或第二种可能的实现方式,在第一方面的第三种可能的实现方式中,所述方法还包括:接收所述至少一个发送端点中全部或部分发送端点的事件信息;
所述根据所述每个发送端点的视频流,对所述每个发送端点的视频流中的视频内容进行等级划分,包括:
根据所述全部或部分发送端点的事件信息以及根据所述全部或部分发送端点的视频流,对所述全部或部分发送端点的视频流中的视频内容进行等级划分。
结合第一方面的第三种可能的实现方式,在第一方面的第四种可能的实现方式中,所述至少一个发送端点中全部或部分发送端点的事件信息用于表明所述全部或部分发送端点的参与人事件;
所述根据所述全部或部分发送端点的事件信息以及根据所述全部或部分发送端点的视频流,对所述全部或部分发送端点的视频流中的视频内容进行等级划分,包括:
以人为单位对所述全部或部分发送端点的视频流进行视频分割,以得到所述全部或部分发送端点的各个参与人的视频内容;
根据所述全部或部分发送端点的参与人事件,对所述全部或部分端点的各个参与人的视频内容进行等级划分,以确定所述各个参与人的视频内容的视频内容等级。
结合第一方面的第四种可能的实现方式,在第一方面的第五种可能的实现方式中,所述至少一个发送端点中全部或部分发送端点的事件信息用于表明所述全部或部分发送端点的主讲人事件、协作人事件、发言者事件或者材料分享者事件。
结合第一方面的第三种至第五种中任一种可能的实现方式,在第一方面的第六种可能的实现方式中,所述至少一个发送端点中全部或部分发送端点的事件信息用于表明所述全部或部分发送端点需要分享数据文档,所述全部或部分发送端点的视频流包括数据文档;
所述根据所述全部或部分发送端点的事件信息以及根据所述全部或部分发送端点的视频流,对所述全部或部分发送端点的视频流中的视频内容进行等级划分,包括:
根据所述事件信息,分割出所述全部或部分发送端点的视频流中的数据文档,以及对所述全部或部分发送端点的分割出的数据文档进行等级划分,以确定所述数据文档的视频内容等级。
结合第一方面的第三种至第六种中任一种可能的实现方式,在第一方面的第七种可能的实现方式中,所述根据所述全部或部分发送端点的事件信息以及根据所述全部或部分发送端点的视频流,对所述全部或部分发送端点的视频流中的视频内容进行等级划分之后,所述方法还包括:
若所述全部或部分发送端点中的任一发送端点的事件信息发生变化,动态调整全部或部分发送端点对应的视频内容等级。
结合第一方面或第一方面的第一种或第二种可能的实现方式,在第一方面的第八种可能的实现方式中,根据所述每个发送端点的视频流,对所述每个发送端点的视频流中的视频内容进行等级划分,包括:
对所述至少一个发送端点中全部或部分发送端点的视频流中的视频内容进行事件判断,并在事件判断后对所述全部或部分发送端点的视频流中的视频内容进行等级划分。
结合第一方面的第八种可能的实现方式,在第一方面的第九种可能的实现方式中,所述对所述至少一个发送端点中全部或部分发送端点的视频流中的视频内容进行事件判断,并在事件判断后对所述全部或部分发送端点的视频流中的视频内容进行等级划分,包括:
以人为单位对所述全部或部分发送端点的视频流进行视频分割,以得到所述全部或部分发送端点的各个参与人的视频内容;
对所述各个参与人的视频内容进行事件判断,并在事件判断后对所述各个参与人的视频内容进行等级划分,以确定所述各个参与人的视频内容的视频内容等级。
结合第一方面的第九种可能的实现方式,在第一方面的第十种可能的实现方式中,所述对所述各个参与人的视频内容进行事件判断,包括:
将所述参与人的视频内容判断为主讲人的视频内容、协作人的视频内容、发言者的视频内容或者材料分享者的视频内容。
结合第一方面的第八种至第十种中任一种可能的实现方式,在第一方面的第十一种可能的实现方式中,所述对所述至少一个发送端点中全部或部分发送端点的视频流中的视频内容进行事件判断,并在事件判断后对所述全部或部分发送端点的视频流中的视频内容进行等级划分,包括:
对所述全部或部分发送端点的视频流进行视频分割,确定所述全部或部分发送端点中的视频流存在数据文档;
对所述全部或部分发送端点分割后的视频流中的数据文档进行等级划分,以确定所述数据文档的视频内容等级。
结合第一方面或第一方面的第一种至第十一种中任一种可能的实现方式,在第一方面的第十二种可能的实现方式中,所述对所述每个发送端点的视频流中的视频内容进行等级划分,包括:
对所述每个发送端点的视频流中的视频内容进行等级划分;其中,所述每个发送端点所对应的视频内容等级与其他发送端点所对应的视频内容等级不重叠。
结合第一方面或第一方面的第一种至第十二种中任一种可能的实现方式,在第一方面的第十三种可能的实现方式中,所述确定多个显示区域中每一个显示区域对应的待呈现视频内容,包括:
根据所述多个视频内容等级中每一个视频内容等级对应的视频内容以及所述视频布局,生成全部或部分显示区域对应的待呈现视频内容,其中,通过尺寸变换和/或颜色标记的方式设置所述全部或部分显示区域对应的待呈现视频内容中的全部或部分内容。
第二方面,提供了一种用于视频会议呈现的装置,包括:
接收单元,用于接收至少一个发送端点中每个发送端点的视频流;
第一确定单元,用于根据所述每个发送端点的视频流,对所述每个发送端点的视频流中的视频内容进行等级划分,以确定所述每个发送端点对应的视频内容等级,其中,所述至少一个发送端点对应的视频内容等级包括多个视频内容等级;
第二确定单元,用于确定视频布局,所述视频布局用于指示所述多个视频内容等级中每个视频内容等级对应的显示区域,其中,所述显示区域是包含于接收端点的多个显示区域中的显示区域,所述视频内容等级与所述显示区域一一对应;
第三确定单元,用于根据所述多个视频内容等级中每一个视频内容等级对应的视频内容以及所述视频布局,确定所述多个显示区域中每一个显示区域对应的待呈现视频内容,以便于通过所述多个显示区域中每个显示区域呈现对应的待呈现视频内容,其中,不同的显示区域对应的待呈现视频内容包括不同的视频内容等级对应的视频内容。
结合第二方面,在第二方面的第一种可能的实现方式中,所述装置为控制设备,所述装置还包括:
发送单元,用于向所述接收端点发送所述多个显示区域中每个显示区域对应的待呈现视频内容以及指示信息,其中,所述指示信息用于指示所述显示区域与所述待呈现视频内容的对应关系,以便于所述接收端点通过所述多个显示区域中每个显示区域呈现对应的待呈现视频内容。
结合第二方面,在第二方面的第二种可能的实现方式中,所述装置为所述接收端点,所述装置还包括:
呈现单元,用于通过所述多个显示区域中每个显示区域呈现对应的待呈现视频内容。
结合第二方面或第二方面的第一种或第二种可能的实现方式,在第二方面的第三种可能的实现方式中,所述接收单元还用于:接收所述至少一个发送端点中全部或部分发送端点的事件信息;
所述第一确定单元具体用于:根据所述全部或部分发送端点的事件信息以及根据所述全部或部分发送端点的视频流,对所述全部或部分发送端点的视频流中的视频内容进行等级划分。
结合第二方面的第三种可能的实现方式,在第二方面的第四种可能的实现方式中,所述至少一个发送端点中全部或部分发送端点的事件信息用于表明所述全部或部分发送端点的参与人事件;
所述第一确定单元具体用于:
以人为单位对所述全部或部分发送端点的视频流进行视频分割,以得到所述全部或部分发送端点的各个参与人的视频内容;
根据所述全部或部分发送端点的参与人事件,对所述全部或部分端点的各个参与人的视频内容进行等级划分,以确定所述各个参与人的视频内容的视频内容等级。
结合第二方面的第四种可能的实现方式,在第二方面的第五种可能的实现方式中,所述至少一个发送端点中全部或部分发送端点的事件信息用于表明所述全部或部分发送端点的主讲人事件、协作人事件、发言者事件或者材料分享者事件。
结合第二方面的第三种至第五种中任一种可能的实现方式,在第二方面的第六种可能的实现方式中,所述至少一个发送端点中全部或部分发送端点的事件信息用于表明所述全部或部分发送端点需要分享数据文档,所述全部或部分发送端点的视频流包括数据文档;
所述第一确定单元具体用于:
根据所述事件信息,分割出所述全部或部分发送端点的视频流中的数据文档,以及对所述全部或部分发送端点的分割出的数据文档进行等级划分,以确定所述数据文档的视频内容等级。
结合第二方面的第三种至第六种中任一种可能的实现方式,在第二方面的第七种可能的实现方式中,在根据所述全部或部分发送端点的事件信息以及根据所述全部或部分发送端点的视频流,对所述全部或部分发送端点的视频流中的视频内容进行等级划分之后,所述第一确定单元还用于:
若所述全部或部分发送端点中的任一发送端点的事件信息发生变化,动态调整全部或部分发送端点对应的视频内容等级。
结合第二方面或第二方面的第一种或第二种可能的实现方式,在第二方面的第八种可能的实现方式中,所述第一确定单元具体用于:
对所述至少一个发送端点中全部或部分发送端点的视频流中的视频内容进行事件判断,并在事件判断后对所述全部或部分发送端点的视频流中的视频内容进行等级划分。
结合第二方面的第八种可能的实现方式,在第二方面的第九种可能的实现方式中,所述第一确定单元具体用于:
以人为单位对所述全部或部分发送端点的视频流进行视频分割,以得到所述全部或部分发送端点的各个参与人的视频内容;
对所述各个参与人的视频内容进行事件判断,并在事件判断后对所述各个参与人的视频内容进行等级划分,以确定所述各个参与人的视频内容的视频内容等级。
结合第二方面的第九种可能的实现方式,在第二方面的第十种可能的实现方式中,所述第一确定单元具体用于:
将所述参与人的视频内容判断为主讲人的视频内容、协作人的视频内容、发言者的视频内容或者材料分享者的视频内容。
结合第二方面的第八种至第十种中任一种可能的实现方式,在第二方面的第十一种可能的实现方式中,所述第一确定单元具体用于:
对所述全部或部分发送端点的视频流进行视频分割,确定所述全部或部分发送端点中的视频流存在数据文档;
对所述全部或部分发送端点分割后的视频流中的数据文档进行等级划分,以确定所述数据文档的视频内容等级。
结合第二方面或第二方面的第一种至第十一种中任一种可能的实现方式,在第二方面的第十二种可能的实现方式中,所述第一确定单元具体用于:
对所述每个发送端点的视频流中的视频内容进行等级划分;其中,所述每个发送端点所对应的视频内容等级与其他发送端点所对应的视频内容等级不重叠。
结合第二方面或第二方面的第一种至第十二种中任一种可能的实现方式,在第二方面的第十三种可能的实现方式中,所述第三确定单元具体用于:
根据所述多个视频内容等级中每一个视频内容等级对应的视频内容以及所述视频布局,生成全部或部分显示区域对应的待呈现视频内容,其中,通过尺寸变换和/或颜色标记的方式设置所述全部或部分显示区域对应的待呈现视频内容中的全部或部分内容。
第三方面,提供了一种用于视频会议呈现的系统,包括第二方面或第二方面的任一种可能的实现方式中的用于视频会议呈现的装置以及包括至少一个发送端点;其中,所述至少一个发送端点中的每一个端点用于向所述装置发送视频流。
因此,在本发明实施例中,在接收到至少一个发送端点中每个发送端点的视频流之后,对每一个发送端点的视频流中的视频内容进行等级的划分以得到至少一个发送端点对应的多个视频内容等级,并确定视频布局,该视频布局指示该多个视频内容等级中每个视频内容等级在接收端点的多个显示区域中所对应的显示区域,根据该多个视频内容等级中每一个视频内容等级对应的视频内容以及视频布局,确定该多个显示区域中每一个显示区域对应的待呈现视频内容,从而可以通过该多个显示区域中每个显示区域呈现对应的待呈现视频内容,其中,不同的显示区域对应的待呈现视频内容包括不同的视频内容等级对应的视频内容,从而可以使得显示区域的信息显示更为合理,避免用户手动去选择调整,可以提高视频会议体验,用户无需任何操作,用户就聚焦会议本身,让会议更加高效。
附图说明
为了更清楚地说明本发明实施例的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是根据本发明实施例的用于视频会议呈现的方法的示意性流程图。
图2是根据本发明另一实施例对各个视频会场对应的端点的视频流进行等级划分的示意性图以及视频内容的视觉表达方式设置的示意性图。
图3a-图3c示出的现有主流终端形态下的显示设备的显示区域的划分图。
图4是根据本发明另一实施例的用于视频会议呈现的装置的示意性框图。
图5是根据本发明另一实施例的用于视频会议呈现的装置的示意性框图。
图6是根据本发明另一实施例的用于视频会议呈现的装置的示意性框图。
图7是根据本发明另一实施例的用于视频会议呈现的装置的示意性框图。
图8是根据本发明另一实施例的用于视频会议呈现的系统的示意性框图。
图9是根据本发明另一实施例的端点的示意性框图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本发明实施例中所述的控制设备可以称作为视频会议系统中心控制设备,即多点控制单元(MultipleControlUnit,MCU)。本发明实施例中的不同端点可以出现在多点视讯的不同空间中,可以将各个地点/位置/参与人/会议室统称为端点,其中一个端点可以对应于一个或多个终端设备,例如,一个会议室可以有多个终端设备,终端设备包括但不限于3屏终端,单屏终端,桌面电脑,Pad和Phone等。
本发明实施例中提到的接收端点也可以实现发送端点的功能,本发明实施例中的发送端点也可以实现接收端点的功能,本发明实施例仅仅为了描述的方便,进行了发送端点和接收端点的区分。
本发明实施例可以用于各类多点视频会议中,例如,网真(Telepresence)会议,视讯会议,电话会议,以及多种不同的视频会议中。
图1是根据本发明实施例的用于视频会议呈现的方法100的示意性流程图,该方法100由用于视频会议呈现的装置实现。如图1所示,该方法100包括:
S110,接收至少一个发送端点中每个发送端点的视频流;
S120,根据该每个发送端点的视频流,对该每个发送端点的视频流中的视频内容进行等级划分,以确定该每个发送端点对应的视频内容等级,其中,该至少一个发送端点对应的视频内容等级包括多个视频内容等级;
S130,确定视频布局,该视频布局用于指示该多个视频内容等级中每个视频内容等级对应的显示区域,其中,该显示区域是包含于接收端点的多个显示区域中的显示区域,该视频内容等级与该显示区域一一对应;
S140,根据该多个视频内容等级中每一个视频内容等级对应的视频内容以及该视频布局,确定该多个显示区域中每一个显示区域对应的待呈现视频内容,以便于通过该多个显示区域中每个显示区域呈现对应的待呈现视频内容,其中,不同的显示区域对应的待呈现视频内容包括不同的视频内容等级对应的视频内容。
在本发明实施例中,用于视频会议呈现的装置在接收到至少一个发送端点中每个发送端点的视频流之后,可以对每一个发送端点的视频流中的视频内容进行等级的划分,以此来确定每一个发送端点对应的视频内容等级,其中,每一个发送端点对应的视频内容等级包括一个或多个视频内容等级,但是该至少一个发送端点对应的视频内容等级包括多个视频内容等级;用于视频会议呈现的装置可以确定视频布局,该视频布局用于指示该多个视频内容等级中每个视频内容等级对应的显示区域,其中,该显示区域是包含于接收端点的多个显示区域中的显示区域,该视频内容等级与该显示区域一一对应;然后,用于视频会议呈现的装置可以根据该多个视频内容等级中每一个视频内容等级对应的视频内容以及该视频布局,确定该多个显示区域中每一个显示区域对应的待呈现视频内容,以便于通过该多个显示区域中每个显示区域呈现对应的待呈现视频内容,其中,不同的显示区域对应的待呈现视频内容包括不同的视频内容等级对应的视频内容。
因此,在本发明实施例中,在接收到至少一个发送端点中每个发送端点的视频流之后,对每一个发送端点的视频流中的视频内容进行等级的划分以得到至少一个发送端点对应的多个视频内容等级,并确定视频布局,该视频布局指示该多个视频内容等级中每个视频内容等级在接收端点的多个显示区域中所对应的显示区域,根据该多个视频内容等级中每一个视频内容等级对应的视频内容以及视频布局,确定该多个显示区域中每一个显示区域对应的待呈现视频内容,从而可以通过该多个显示区域中每个显示区域呈现对应的待呈现视频内容,其中,不同的显示区域对应的待呈现视频内容包括不同的视频内容等级对应的视频内容,从而可以使得显示区域的信息显示更为合理,避免用户手动去选择调整,可以提高视频会议体验,用户无需任何操作,用户就聚焦会议本身,让会议更加高效。
并且进一步地,在视频内容等级划分时,可以使得焦点信息对应的视频内容等级高于非焦点信息对应的视频内容等级,由于不同的显示区域对应的待呈现视频内容包括不同的视频内容等级对应的视频内容,从而可以使得焦点信息和非焦点信息分散在显示设备的不同的显示区域上,视频会议中的焦点信息可以清晰自动的呈现出来,非焦点信息可以合理辅助呈现,从而可以进一步提高显示区域的信息显示的合理性。
应理解,在本发明实施例中,每个发送端点的对应的视频内容等级可以是一个视频内容等级也可以是多个视频内容等级。
应理解,在本发明实施例中,不同的发送端点的对应的视频内容等级可以重叠,也可以不重叠。也就是说,如果不同的发送端点的对应的视频内容等级是重叠的,则表明接收端点的一个显示区域中可以显示不止一个发送端点的视频内容;如果不同的发送端点的对应的视频内容等级是不重叠的,可以表明接收端点的一个显示区域中只显示一个发送端点的视频内容。
应理解,在本发明实施例中,一个视频内容等级对应的视频内容还可以再进行分割为多类视频内容,一个显示区域还可以划分为多个显示子区域,每个显示子区域可以对应于一类视频内容。其中,一个视频内容等级对应的视频内容可以按照视频内容的重要性进行细化为多类视频内容,按照将再细化的视频内容进行显示子区域的分配。
应理解,在本发明实施例中,一个显示区域可以为连续的区域,也可以为不连续的区域。例如,可以将显示设备的中间区域设置为一个显示区域,将中间区域的左右两边设置为另一个显示区域,则此时,该另一个显示区域为不连续的区域。
还应理解,在本发明实施例中,在接收端点处存在多个终端的显示设备呈现相同的视频流时,可以将用于呈现相同的视频流的显示区域称作为一个显示区域。
在本发明实施例,用于视频会议呈现的方法100可以由控制设备来实现,也可以由显示视频会议的接收端点来实现,即用于视频会议呈现的装置可以为控制设备,也可以是显示视频会议的接收端点。
在用于视频会议呈现的方法100由控制设备来实现时,该方法100还可以包括:
向该接收端点发送该多个显示区域中每个显示区域对应的待呈现视频内容以及指示信息,其中,该指示信息用于指示该显示区域与该待呈现视频内容的对应关系,以便于该接收端点通过该多个显示区域中每个显示区域呈现对应的待呈现视频内容。
也就是说,控制设备在确定接收端点的多个显示区域中每一个显示区域对应的待呈现视频内容后,可以将每一个显示区域对应的待呈现视频内容发送给接收端点,同时向接收端点发送指示信息,该指示信息用于指示该显示区域与该待呈现视频内容的对应关系;其中,可以同时发送每一个发送端点对应的待呈现视频内容与指示信息,例如,可以将每一个显示区域对应的待呈现视频内容与指示信息进行统一压缩发送,例如,可以将显示区域的标识与待呈现视频内容进行统一压缩发送;当然也可以不同时发送每一个发送端点对应的待呈现视频内容与指示信息;该指示信息可以是隐式信息,也可以是显示信息。
在用于视频会议呈现的方法100由控制设备来实现时,该方法100还可以包括:
该接收端点通过该多个显示区域中每个显示区域呈现对应的待呈现视频内容。
也就是说,发送端点可以直接将视频流发送给接收端点,或者通过其他设备发送给接收端点,接收端点在通过至少一个发送端点中每个发送端点的视频流确定自身的多个显示区域中每一个显示区域对应的待呈现视频内容后,可以直接通过该多个显示区域中每个显示区域呈现对应的待呈现视频内容。
可选地,在本发明实施例中,S120中根据该每个发送端点的视频流,对该每个发送端点的视频流中的视频内容进行等级划分,可以包括:
对该至少一个发送端点中全部或部分发送端点的视频流中的视频内容进行事件判断,并在事件判断后对该全部或部分发送端点的视频流中的视频内容进行等级划分。
具体地说,用于视频会议呈现的装置在接收到该至少一个发送端点中全部或部分发送端点的视频流之后,可以以人为单位对该全部或部分发送端点的视频流进行视频分割,以得到该全部或部分发送端点的各个参与人的视频内容;对该各个参与人的视频内容进行事件判断,例如,将该参与人的视频内容判断为主讲人的视频内容、协作人的视频内容、发言者的视频内容或者材料分享者的视频内容等;并在事件判断后对该各个参与人的视频内容进行等级划分,以确定该各个参与人的视频内容的视频内容等级,例如,将主讲人的视频内容确定为具有最高视频内容等级的视频内容等。
具体地,在本发明实施例中,对该各个参与人的视频内容进行事件判断可以根据各个参与人的特征进行事件判断,例如,参与人的面部特征或者行为特征进行判断该参与人是属于主讲人、协作人还是材料分享者等。
在本发明实施例中,用于视频会议呈现的装置在接收到至少一个发送端点中全部或部分发送端点的视频流之后,可以对该全部或部分发送端点的视频流进行视频分割,在对分割后的视频流进行事件判断确定该全部或部分发送端点中的视频流存在数据文档时,可以对该全部或部分发送端点分割后的视频流中的数据文档进行等级划分,以确定该数据文档的视频内容等级。例如,可以将数据文档确定为为具有最高视频内容等级的视频内容等。其中,该数据文档可以是PPT、word、图像等文件。
应理解,在本发明实施例中,各个发送端点发送给用于视频会议呈现的装置的视频流还可以是不需分割的视频流,则用于视频会议呈现的装置可以直接根据该不需分割的视频流进行事件判断,并进行视频内容等级的确定。其中,该不需分割的视频流可以是各个发送端点对该视频流已经进行了分割,或者该视频流本身不需要分割,例如,在进行拍摄时,通过不同的摄像头对不同的人物进行拍摄,不同的人物对应的视频内容在一路视频流中相互独立,不需分割。
可选地,在本发明实施例中,上述至少一个发送端点中全部或部分发送端点还可以向用于视频会议呈现的装置发送事件信息,则用于视频会议呈现的装置可以接收该至少一个发送端点中全部或部分发送端点的事件信息;然后可以根据该全部或部分发送端点的事件信息以及根据该全部或部分发送端点的视频流,对该全部或部分发送端点的视频流中的视频内容进行等级划分。
在本发明实施例中,上述至少一个发送端点中全部或部分发送端点的事件信息可以用于表明该全部或部分发送端点的参与人事件;则此时,用于视频会议呈现的装置可以以人为单位对该全部或部分发送端点的视频流进行视频分割,以得到该全部或部分发送端点的各个参与人的视频内容;并根据该全部或部分发送端点的参与人事件,对该全部或部分端点的各个参与人的视频内容进行等级划分,以确定该各个参与人的视频内容的视频内容等级。可选地,该至少一个发送端点中全部或部分发送端点的事件信息用于表明该全部或部分发送端点的主讲人事件、协作人事件、发言者事件或者材料分享者事件。
具体地说,由于视频会议的重点是人与人的交流,特别是某发送端点所在的会场的参与人较为重要时,可以以人为单位对该发送端点的视频流进行视频分割;然后根据该某发送端点的事件信息,对该发送端点的分割出的各个参与人的视频内容进行等级划分,例如,该某发送端点发出的事件信息用于表明主讲人事件,则可以将该主讲人对应的视频内容进行等级划分,例如,将该主讲人对应的视频内容为确定具有较高视频内容等级的视频内容,并可以将其他参与人具有较低视频内容等级的视频内容。具体地,发送端点发出的事件信息可以表明特定参与人的位置,则可以根据该参与人的位置,从多个参与人的视频内容中确定出该特定参与人的视频内容,然后对该特定参与人的视频内容进行等级划分,同时也可以对除该特定参与人之外对应的视频内容进行等级划分;或者,发送端点发出的事件信息可以表明特定参与人的编号,则可以根据该特定参与人的编号确定出该参与人的行为特征,并根据该参与人的行为特征从多个参与人的视频内容中确定出该特定参与人的视频内容,然后对该特定参与人的视频内容进行等级划分。
应理解,在本发明实施例中,各个发送端点发送给用于视频会议呈现的装置的视频流还可以是不需分割的视频流,则用于视频会议呈现的装置可以直接根据该不需分割的视频流以及事件信息,进行视频内容等级的确定。其中,该不需分割的视频流可以是各个发送端点对该视频流已经进行了分割,或者该视频流本身不需要分割,例如,在进行拍摄时,通过不同的摄像头对不同的人物进行拍摄,不同的人物对应的视频内容在一路视频流中相互独立,不需分割。
在本发明实施例中,上述至少一个发送端点中全部或部分发送端点的事件信息可以用于表明该全部或部分发送端点需要分享数据文档,该全部或部分发送端点的视频流包括数据文档;则此时,可以根据该事件信息,分割出该全部或部分发送端点的视频流中的数据文档,以及对该全部或部分发送端点的分割出的数据文档进行等级划分,以确定该数据文档的视频内容等级。其中,该数据文档可以是PPT、word、图像等文件。
在本发明实施中,在根据该全部或部分发送端点的事件信息以及根据该全部或部分发送端点的视频流,对该全部或部分发送端点的视频流中的视频内容进行等级划分之后,该方法100还可以包括:
若该全部或部分发送端点中的任一发送端点的事件信息发生变化,动态调整全部或部分发送端点对应的视频内容等级。
具体地说,在发送端点的事件信息变化时,用于视频会议呈现的装置可以重新对每个发送端点的视频流进行视频内容等级划分,根据重新确定的视频内容等级对应的视频内容,确定接收端点的多个显示区域中每一个显示区域对应的待呈现内容,其中,事件信息的变化可以用于表明视频会议主会场的变化,可以用于表明发言者的变化,也可以用于表明协作者的变化等。
在本发明实施例中,S140中确定多个显示区域中每一个显示区域对应的待呈现视频内容,可以包括:
根据该多个视频内容等级中每一个视频内容等级对应的视频内容以及该视频布局,生成全部或部分显示区域对应的待呈现视频内容,其中,通过尺寸变换和/或颜色标记的方式设置该全部或部分显示区域对应的待呈现视频内容中的全部或部分内容。
具体地说,如果一个视频内容等级包括的视频内容存在于至少一个发送端点发送的多个视频流中,则需要对根据该一个视频内容等级对应的全部视频内容重新进行视频生成,由此得到该视频内容等级对应的显示区域的待呈现视频内容。并且可选地,如果需要向接收端点的用户凸显生成的待呈现视频内容中的视频信息,则可以通过尺寸变换和/或颜色标记的视觉表达方式设置该待呈现视频内容中的视频信息。当然,也可以通过其他方式进行设置,例如,通过动画显示等。
因此,在本发明实施例中,在接收到至少一个发送端点中每个发送端点的视频流之后,对每一个发送端点的视频流中的视频内容进行等级的划分以得到至少一个发送端点对应的多个视频内容等级,并确定视频布局,该视频布局指示该多个视频内容等级中每个视频内容等级在接收端点的多个显示区域中所对应的显示区域,根据该多个视频内容等级中每一个视频内容等级对应的视频内容以及视频布局,确定该多个显示区域中每一个显示区域对应的待呈现视频内容,从而可以通过该多个显示区域中每个显示区域呈现对应的待呈现视频内容,其中,不同的显示区域对应的待呈现视频内容包括不同的视频内容等级对应的视频内容,从而可以使得显示区域的信息显示更为合理,避免用户手动去选择调整,可以提高视频会议体验,用户无需任何操作,用户就聚焦会议本身,让会议更加高效。
并且进一步地,在视频内容等级划分时,可以使得焦点信息对应的视频内容等级高于非焦点信息对应的视频内容等级,由于不同的显示区域对应的待呈现视频内容包括不同的视频内容等级对应的视频内容,从而可以使得焦点信息和非焦点信息分散在显示设备的不同的显示区域上,视频会议中的焦点信息可以清晰自动的呈现出来,非焦点信息可以合理辅助呈现,从而可以进一步提高显示区域的信息显示的合理性。
在本发明实施例中,对某一个发送端点的视频流中的视频内容进行等级划分的时候可以分为两个等级,即重要信息对应的等级和辅助信息对应的等级。具体,将哪些信息划分为重要信息,哪些信息划分为辅助信息,以下将结合表1进行举例说明。
表1
会议中的观看信息 视频内容等级
(1)当前议题演讲人; 重要信息
(2)当前议题材料; 重要信息
(3)参与当前议题的发言人,提问人,协作讨论的人; 重要信息
(4)其他与会人(未发言\演讲\讨论的其他人); 辅助信息
(5)其他的材料内容; 辅助信息
应理解,以上表格只是举例说明,不应对本发明构成任何限定,本发明实施例还可以有其他的划分方式。例如,以上表格的视频内容等级包括重要信息和辅助信息两个等级,还可以划分为三个甚至更多的等级,例如,可以将发言人,提问人,协作讨论的人划分人次重要信息(重要性高于辅助信息)。
以下结合表格2描述在多个视频会场的情况下,对于各个会场的视频等级的划分以及各个等级对应的视频内容生成的视频流的视觉表达方式的设置,其中,每个会场的视频等级可以包括两个等级(重要信息对应的等级和辅助信息对应的等级),表格2中主会场是指主讲人所在的会场,辅会场是指其他非主讲人所在的所有会场。
表2
应理解,以上表格2只是举例说明,不应对本发明构成任何限定,本发明实施例还可以有其他的划分方式和视频信息的视觉表达方式,可以根据具体情况而定。
以上结合表2描述了如何根据事件信息对各个视频会场对应的端点的视频流进行划分以及如何对各个等级对应的待呈先视频内容进行视觉表达方式的设置,以下将结合图2描述接收端点的为3屏终端情况下的各个等级划分以及各个等级对应的待呈先视频内容所具有的内容。
在图2中,A处显示的是在主会场对应的端点的在未分享材料的情况下的视频内容,其中,中间区域是主会场对应的端点的主讲人(重要信息)对应的区域,两边的区域是主会场对应的端点的非主讲人(辅助信息)对应的区域,可以看到在非主讲人对应的区域中,将某一参与人进行了标记,表明该参与人为发言者,如果有多个发言者,可以将多个发言者进行突出;B处显示的是在主会场对应的端点的在分享材料的情况下的视频内容,其中,中间区域是主会场对应的端点的主讲人和分享的材料(重要信息)对应的区域,两边的区域是主会场对应的端点的非主讲人(辅助信息)对应的区域;C处显示的是在辅会场对应的端点的在未分享材料的情况下的视频内容,其中,中间区域是辅会场对应的端点的主讲人(重要信息)对应的区域,两边的区域是辅会场对应的端点的非主讲人(辅助信息)对应的区域,可以看到在中间区域中的主讲人的尺寸大于主会场的中间区域的主讲人,即通过尺寸放大的方式凸现中间区域主讲人;D处显示的是在辅会场对应的端点的分享材料的情况下的视频内容,其中,中间区域是辅会场对应的端点的主讲人(重要信息)对应的区域,两边的区域是辅会场对应的端点的非主讲人(辅助信息)对应的区域,可以看到在中间区域中的主讲人的尺寸大于主会场的中间区域的主讲人,即通过尺寸放大的方式凸现中间区域主讲人;E处显示的是在主讲人(或辅会场)对应的端点的分享材料且协作人情况下的视频内容,其中,中间区域是主讲人、协作人和分享的材料(重要信息)对应的区域(如果相继有多个参与协作的人的时候,依次类推增加。根据通常的协作讨论会议,在一定的时间段,参与协作的人不会太多,基本可以完整显示。如果确实出现很多人参与协作的极端情况,可以采取先进先出的原则来显示参与协作讨论的人),两边的区域是主会场(或辅会场)对应的端点的非主讲人(辅助信息)对应的区域。
应理解,显示设备的显示图像可以包括以上A、B、C、D和E处中的一处或多处图像。例如,可以包括A处和B处的图像,A处的图像和B处的图像所占的显示区域不重叠,即A处的重要信息和辅助信息占用两个显示区域,B处的重要信息和辅助信息占用另两处显示区域。
图3a-图3c示出的现有主流终端形态下的显示设备的显示区域的划分图。
图3a是3屏显示设备的各个显示区域的划分。其中,可以将3屏显示设备划分为4个显示区域,即显示区域A,a,B和b,不同的显示区域可以显示不同视频内容等级对应的待呈现视频内容;例如,显示区域A可以显示主会场对应的端点的重要信息,显示区域a可以显示辅会场对应的端点的重要信息,显示区域B可以显示主会场对应的端点的辅助信息,显示区域b可以显示辅会场对应的端点的辅助信息。
图3b是单屏显示设备的显示区域的划分。其中,可以将该单屏显示设备划分为2个显示区域,即显示区域A和a;该显示设备可以用于两个会场进行视频会议的情况下,即可以只需要播放对方视频会议的画面;其中,显示区域A可以显示对方会场对应的端点的重要信息,显示区域a可以显示对方会场对应的端点的辅助信息。
图3c是各种终端的显示设备的显示区域划分效果图。其中。a1处为台式机的显示区域划分,a2处为笔记本的显示区域划分,a3是平板电脑的显示区域划分,a4处是手机的显示区域划分,a5处会议终端(meetingconcierge)的显示区域划分。
应理解,在本发明实施例中,发送端点还可以向控制设备发送音频流,以及控制设备向接收端点发送音频流,具体实现可以参考现有技术,在此不再赘述。
因此,在本发明实施例中,在接收到至少一个发送端点中每个发送端点的视频流之后,对每一个发送端点的视频流中的视频内容进行等级的划分以得到至少一个发送端点对应的多个视频内容等级,并确定视频布局,该视频布局指示该多个视频内容等级中每个视频内容等级在接收端点的多个显示区域中所对应的显示区域,根据该多个视频内容等级中每一个视频内容等级对应的视频内容以及视频布局,确定该多个显示区域中每一个显示区域对应的待呈现视频内容,从而可以通过该多个显示区域中每个显示区域呈现对应的待呈现视频内容,其中,不同的显示区域对应的待呈现视频内容包括不同的视频内容等级对应的视频内容,从而可以使得显示区域的信息显示更为合理,避免用户手动去选择调整,可以提高视频会议体验,用户无需任何操作,用户就聚焦会议本身,让会议更加高效。
并且进一步地,在视频内容等级划分时,可以使得焦点信息对应的视频内容等级高于非焦点信息对应的视频内容等级,由于不同的显示区域对应的待呈现视频内容包括不同的视频内容等级对应的视频内容,从而可以使得焦点信息和非焦点信息分散在显示设备的不同的显示区域上,视频会议中的焦点信息可以清晰自动的呈现出来,非焦点信息可以合理辅助呈现,从而可以进一步提高显示区域的信息显示的合理性。
图4是根据本发明实施例的用于视频会议呈现的装置300的示意性框图。如图4所示,该装置200包括:
接收单元210,用于接收至少一个发送端点中每个发送端点的视频流;
第一确定单元220,用于根据所述每个发送端点的视频流,对所述每个发送端点的视频流中的视频内容进行等级划分,以确定所述每个发送端点对应的视频内容等级,其中,所述至少一个发送端点对应的视频内容等级包括多个视频内容等级;
第二确定单元230,用于确定视频布局,所述视频布局用于指示所述多个视频内容等级中每个视频内容等级对应的显示区域,其中,所述显示区域是包含于接收端点的多个显示区域中的显示区域,所述视频内容等级与所述显示区域一一对应;
第三确定单元240,用于根据所述多个视频内容等级中每一个视频内容等级对应的视频内容以及所述视频布局,确定所述多个显示区域中每一个显示区域对应的待呈现视频内容,以便于通过所述多个显示区域中每个显示区域呈现对应的待呈现视频内容,其中,不同的显示区域对应的待呈现视频内容包括不同的视频内容等级对应的视频内容。
可选地,在本发明实施例中,所述装置300为控制设备,如图5所示,所述装置200还包括:
发送单元250,用于向所述接收端点发送所述多个显示区域中每个显示区域对应的待呈现视频内容以及指示信息,其中,所述指示信息用于指示所述显示区域与所述待呈现视频内容的对应关系,以便于所述接收端点通过所述多个显示区域中每个显示区域呈现对应的待呈现视频内容。
可选地,在本发明实施例中,所述装置200为所述接收端点,如图6所示,所述装置200还包括:
呈现单元260,用于通过所述多个显示区域中每个显示区域呈现对应的待呈现视频内容。
可选地,在本发明实施例中,所述接收单元210还用于:接收所述至少一个发送端点中全部或部分发送端点的事件信息。所述第一确定单元220具体用于:根据所述全部或部分发送端点的事件信息以及根据所述全部或部分发送端点的视频流,对所述全部或部分发送端点的视频流中的视频内容进行等级划分。
可选地,所述至少一个发送端点中全部或部分发送端点的事件信息用于表明所述全部或部分发送端点的参与人事件。所述第一确定单元320具体用于:以人为单位对所述全部或部分发送端点的视频流进行视频分割,以得到所述全部或部分发送端点的各个参与人的视频内容;根据所述全部或部分发送端点的参与人事件,对所述全部或部分端点的各个参与人的视频内容进行等级划分,以确定所述各个参与人的视频内容的视频内容等级。
可选地,所述至少一个发送端点中全部或部分发送端点的事件信息用于表明所述全部或部分发送端点的主讲人事件、协作人事件、发言者事件或者材料分享者事件。
可选地,所述至少一个发送端点中全部或部分发送端点的事件信息用于表明所述全部或部分发送端点需要分享数据文档,所述全部或部分发送端点的视频流包括数据文档;所述第一确定单元220具体用于:根据所述事件信息,分割出所述全部或部分发送端点的视频流中的数据文档,以及对所述全部或部分发送端点的分割出的数据文档进行等级划分,以确定所述数据文档的视频内容等级。
可选地,在根据所述全部或部分发送端点的事件信息以及根据所述全部或部分发送端点的视频流,对所述全部或部分发送端点的视频流中的视频内容进行等级划分之后,所述第一确定单元220还用于:若所述全部或部分发送端点中的任一发送端点的事件信息发生变化,动态调整全部或部分发送端点对应的视频内容等级。
可选地,所述第一确定单元220具体用于:对所述至少一个发送端点中全部或部分发送端点的视频流中的视频内容进行事件判断,并在事件判断后对所述全部或部分发送端点的视频流中的视频内容进行等级划分。
可选地,所述第一确定单元220具体用于:以人为单位对所述全部或部分发送端点的视频流进行视频分割,以得到所述全部或部分发送端点的各个参与人的视频内容;对所述各个参与人的视频内容进行事件判断,并在事件判断后对所述各个参与人的视频内容进行等级划分,以确定所述各个参与人的视频内容的视频内容等级。
可选地,所述第一确定单元220具体用于:将所述参与人的视频内容判断为主讲人的视频内容、协作人的视频内容、发言者的视频内容或者材料分享者的视频内容。
可选地,所述第一确定单元220具体用于:对所述全部或部分发送端点的视频流进行视频分割,确定所述全部或部分发送端点中的视频流存在数据文档;对所述全部或部分发送端点分割后的视频流中的数据文档进行等级划分,以确定所述数据文档的视频内容等级。
可选地,所述第一确定单元220具体用于:对所述每个发送端点的视频流中的视频内容进行等级划分;其中,所述每个发送端点所对应的视频内容等级与其他发送端点所对应的视频内容等级不重叠。
可选地,所述第三确定单元240具体用于:根据所述多个视频内容等级中每一个视频内容等级对应的视频内容以及所述视频布局,生成全部或部分显示区域对应的待呈现视频内容,其中,通过尺寸变换和/或颜色标记的方式设置所述全部或部分显示区域对应的待呈现视频内容中的全部或部分内容。
应理解,在本发明实施例中,第一确定单元220还可以实现视频流的解码功能,即可以对接收单元210接收到的视频流中的视频内容进行划分等级划分之前,可以对接收单元接收到的视频流进行解码;第三确定单元240可以每一个视频内容等级对应的视频内容进行编码并发送给接收端点,即可以实现编码功能。
还应理解,在本发明实施例中,用于视频会议呈现的装置200还可以包括音频编解码单元,用于对接收到的端点的音频进行编解码。
还应理解,用于视频会议呈现的装置200可以对应于方法100中的用于视频会议呈现的装置200,用于实现方法100中的相应功能,为了简洁,在此不再赘述。
因此,在本发明实施例中,在接收到至少一个发送端点中每个发送端点的视频流之后,对每一个发送端点的视频流中的视频内容进行等级的划分以得到至少一个发送端点对应的多个视频内容等级,并确定视频布局,该视频布局指示该多个视频内容等级中每个视频内容等级在接收端点的多个显示区域中所对应的显示区域,根据该多个视频内容等级中每一个视频内容等级对应的视频内容以及视频布局,确定该多个显示区域中每一个显示区域对应的待呈现视频内容,从而可以通过该多个显示区域中每个显示区域呈现对应的待呈现视频内容,其中,不同的显示区域对应的待呈现视频内容包括不同的视频内容等级对应的视频内容,从而可以使得显示区域的信息显示更为合理,避免用户手动去选择调整,可以提高视频会议体验,用户无需任何操作,用户就聚焦会议本身,让会议更加高效。
并且进一步地,在视频内容等级划分时,可以使得焦点信息对应的视频内容等级高于非焦点信息对应的视频内容等级,由于不同的显示区域对应的待呈现视频内容包括不同的视频内容等级对应的视频内容,从而可以使得焦点信息和非焦点信息分散在显示设备的不同的显示区域上,视频会议中的焦点信息可以清晰自动的呈现出来,非焦点信息可以合理辅助呈现,从而可以进一步提高显示区域的信息显示的合理性。
图7是根据本发明实施例的用于视频会议呈现的装置300的示意性框图。如图7所示,该用于视频会议呈现的装置300包括收发器310、处理器320、存储器330和总线340,收发器310用于实现与端点之间的通信连接,所述总线340用于实现所述控制设备的内部部件之间的连接通信,所述存储器330用于存储程序代码,所述处理器320用于调用所述存储器330存储的程序代码,执行以下操作:
通过收发器310接收至少一个发送端点中每个发送端点的视频流;
根据所述每个发送端点的视频流,对所述每个发送端点的视频流中的视频内容进行等级划分,以确定所述每个发送端点对应的视频内容等级,其中,所述至少一个发送端点对应的视频内容等级包括多个视频内容等级;
确定视频布局,所述视频布局用于指示所述多个视频内容等级中每个视频内容等级对应的显示区域,其中,所述显示区域是包含于接收端点的多个显示区域中的显示区域,所述视频内容等级与所述显示区域一一对应;
根据所述多个视频内容等级中每一个视频内容等级对应的视频内容以及所述视频布局,确定所述多个显示区域中每一个显示区域对应的待呈现视频内容,以便于通过所述多个显示区域中每个显示区域呈现对应的待呈现视频内容,其中,不同的显示区域对应的待呈现视频内容包括不同的视频内容等级对应的视频内容。
可选地,所述装置300控制设备,所述处理器320用于调用所述存储器330存储的程序代码,还执行以下操作:
通过收发器310向所述接收端点发送所述多个显示区域中每个显示区域对应的待呈现视频内容以及指示信息,其中,所述指示信息用于指示所述显示区域与所述待呈现视频内容的对应关系,以便于所述接收端点通过所述多个显示区域中每个显示区域呈现对应的待呈现视频内容。
可选地,所述装置300为所述接收端点,所述处理器320用于调用所述存储器330存储的程序代码,还执行以下操作:通过所述多个显示区域中每个显示区域呈现对应的待呈现视频内容。
所述处理器320用于调用所述存储器330存储的程序代码,具体执行以下操作:
通过收发器310接收所述至少一个发送端点中全部或部分发送端点的事件信息;
根据所述全部或部分发送端点的事件信息以及根据所述全部或部分发送端点的视频流,对所述全部或部分发送端点的视频流中的视频内容进行等级划分。
可选地,所述至少一个发送端点中全部或部分发送端点的事件信息用于表明所述全部或部分发送端点的参与人事件;所述处理器320用于调用所述存储器330存储的程序代码,具体执行以下操作:
以人为单位对所述全部或部分发送端点的视频流进行视频分割,以得到所述全部或部分发送端点的各个参与人的视频内容;
根据所述全部或部分发送端点的参与人事件,对所述全部或部分端点的各个参与人的视频内容进行等级划分,以确定所述各个参与人的视频内容的视频内容等级。
可选地,所述至少一个发送端点中全部或部分发送端点的事件信息用于表明所述全部或部分发送端点的主讲人事件、协作人事件、发言者事件或者材料分享者事件。
可选地,所述至少一个发送端点中全部或部分发送端点的事件信息用于表明所述全部或部分发送端点需要分享数据文档,所述全部或部分发送端点的视频流包括数据文档。所述处理器320用于调用所述存储器330存储的程序代码,具体执行以下操作:根据所述事件信息,分割出所述全部或部分发送端点的视频流中的数据文档,以及对所述全部或部分发送端点的分割出的数据文档进行等级划分,以确定所述数据文档的视频内容等级。
可选地,所述处理器320用于调用所述存储器330存储的程序代码,具体执行以下操作:根据所述全部或部分发送端点的事件信息以及根据所述全部或部分发送端点的视频流,对所述全部或部分发送端点的视频流中的视频内容进行等级划分之后,若所述全部或部分发送端点中的任一发送端点的事件信息发生变化,动态调整全部或部分发送端点对应的视频内容等级。
可选地,所述处理器320用于调用所述存储器330存储的程序代码,具体执行以下操作:对所述至少一个发送端点中全部或部分发送端点的视频流中的视频内容进行事件判断,并在事件判断后对所述全部或部分发送端点的视频流中的视频内容进行等级划分。
所述处理器320用于调用所述存储器330存储的程序代码,具体执行以下操作:以人为单位对所述全部或部分发送端点的视频流进行视频分割,以得到所述全部或部分发送端点的各个参与人的视频内容;
对所述各个参与人的视频内容进行事件判断,并在事件判断后对所述各个参与人的视频内容进行等级划分,以确定所述各个参与人的视频内容的视频内容等级。
所述处理器320用于调用所述存储器330存储的程序代码,具体执行以下操作:将所述参与人的视频内容判断为主讲人的视频内容、协作人的视频内容、发言者的视频内容或者材料分享者的视频内容。
所述处理器320用于调用所述存储器330存储的程序代码,具体执行以下操作:对所述全部或部分发送端点的视频流进行视频分割,确定所述全部或部分发送端点中的视频流存在数据文档;
对所述全部或部分发送端点分割后的视频流中的数据文档进行等级划分,以确定所述数据文档的视频内容等级。
所述处理器320用于调用所述存储器330存储的程序代码,具体执行以下操作:对所述每个发送端点的视频流中的视频内容进行等级划分;其中,所述每个发送端点所对应的视频内容等级与其他发送端点所对应的视频内容等级不重叠。
所述处理器320用于调用所述存储器330存储的程序代码,具体执行以下操作:根据所述多个视频内容等级中每一个视频内容等级对应的视频内容以及所述视频布局,生成全部或部分显示区域对应的待呈现视频内容,其中,通过尺寸变换和/或颜色标记的方式设置所述全部或部分显示区域对应的待呈现视频内容中的全部或部分内容。
应理解,在本发明实施例,用于视频会议呈现的装置300的处理器可以实现视频流的编解码功能,或者用于视频会议呈现的装置300还可以包括编码器和解码器用于分别实现视频流的编码和解码。
还应理解,用于视频会议呈现的装置300可以对应于方法100中的用于视频会议呈现的装置,用于实现方法100中的相应功能,为了简洁,在此不再赘述。
因此,在本发明实施例中,在接收到至少一个发送端点中每个发送端点的视频流之后,对每一个发送端点的视频流中的视频内容进行等级的划分以得到至少一个发送端点对应的多个视频内容等级,并确定视频布局,该视频布局指示该多个视频内容等级中每个视频内容等级在接收端点的多个显示区域中所对应的显示区域,根据该多个视频内容等级中每一个视频内容等级对应的视频内容以及视频布局,确定该多个显示区域中每一个显示区域对应的待呈现视频内容,从而可以通过该多个显示区域中每个显示区域呈现对应的待呈现视频内容,其中,不同的显示区域对应的待呈现视频内容包括不同的视频内容等级对应的视频内容,从而可以使得显示区域的信息显示更为合理,避免用户手动去选择调整,可以提高视频会议体验,用户无需任何操作,用户就聚焦会议本身,让会议更加高效。
并且进一步地,在视频内容等级划分时,可以使得焦点信息对应的视频内容等级高于非焦点信息对应的视频内容等级,由于不同的显示区域对应的待呈现视频内容包括不同的视频内容等级对应的视频内容,从而可以使得焦点信息和非焦点信息分散在显示设备的不同的显示区域上,视频会议中的焦点信息可以清晰自动的呈现出来,非焦点信息可以合理辅助呈现,从而可以进一步提高显示区域的信息显示的合理性。
图8是根据本发明实施例的用于视频会议呈现的系统,如图8所示,该系统可以包括用于视频会议呈现的装置410和至少一个发送端点420。其中。用于视频会议呈现的装置410可以对应与上述用于视频会议呈现的装置200或300,为了简洁,在此不再赘述。
应理解,至少一个发送端点中的任一发送端点也可以即为发送端点,也为接收端点,也就是说即可以向用于视频会议呈现的装置410发送视频流,也可以接收用于视频会议呈现的装置410发送的由其他发送端点发送的视频流确定的待呈现视频内容,具体实现的操作可以参考上文的描述。
应理解,虽然图8中示出了多个发送端点,但是本发明中的发送端点可以是一个,也可以是多个。图8中的用于视频会议呈现的装置410本身也可以是发送端点或接收端点。
图9是根据本发明实施例的端点500的示意性框图。如图9所示,该端点500可以包括总线510、收发器520,处理器530和存储器540。
可选地,如图9所示,端点500可以包括摄像头550、录音设备560等。其中,摄像头550和录音设备560可以分别进行拍摄视频和录制音频,处理器530调用存储器存储的程序代码对摄像头拍摄的视频进行编码和对录音设备录制的音频进行编码得到编码后的音视频,并将编解码器得到的音视频通过收发器520发送至用于视频会议呈现的装置410(可以为控制设备,也可以为接收端点),则此时端点500可以作为上文提到的发送端点。
可选地,如图9所示,端点500可以包括麦克风570和显示设备580等。处理器530可以通过收发器520接收用于视频会议呈现的装置410发送的音视频流,进行解码,然后将视频流通过显示设备580呈现在相应的显示区域,以及将音频通过麦克风570输出。应理解,端点500还可以包括编码器和解码器,即处理器不实现编解码功能,由编码器或解码器实现编码或解码。则此时端点500可以作为上文提到的接收端点。可选地,该端点500可以接收发送端点发送的视频流,进行解码,确定每一个显示区域对应的待呈现视频内容(具体参考方法100所述),然后将待呈现视频内容通过显示设备580呈现在相应的显示区域,以及将音频通过麦克风570输出。
因此,在本发明实施例中,在接收到至少一个发送端点中每个发送端点的视频流之后,对每一个发送端点的视频流中的视频内容进行等级的划分以得到至少一个发送端点对应的多个视频内容等级,并确定视频布局,该视频布局指示该多个视频内容等级中每个视频内容等级在接收端点的多个显示区域中所对应的显示区域,根据该多个视频内容等级中每一个视频内容等级对应的视频内容以及视频布局,确定该多个显示区域中每一个显示区域对应的待呈现视频内容,从而可以通过该多个显示区域中每个显示区域呈现对应的待呈现视频内容,其中,不同的显示区域对应的待呈现视频内容包括不同的视频内容等级对应的视频内容,从而可以使得显示区域的信息显示更为合理,避免用户手动去选择调整,可以提高视频会议体验,用户无需任何操作,用户就聚焦会议本身,让会议更加高效。
并且进一步地,在视频内容等级划分时,可以使得焦点信息对应的视频内容等级高于非焦点信息对应的视频内容等级,由于不同的显示区域对应的待呈现视频内容包括不同的视频内容等级对应的视频内容,从而可以使得焦点信息和非焦点信息分散在显示设备的不同的显示区域上,视频会议中的焦点信息可以清晰自动的呈现出来,非焦点信息可以合理辅助呈现,从而可以进一步提高显示区域的信息显示的合理性。
本领域普通技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本发明的范围。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统、装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在本申请所提供的几个实施例中,应该理解到,所揭露的系统、装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-OnlyMemory)、随机存取存储器(RAM,RandomAccessMemory)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述,仅为本发明的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应所述以权利要求的保护范围为准。

Claims (29)

1.一种用于视频会议呈现的方法,其特征在于,包括:
接收至少一个发送端点中每个发送端点的视频流;
根据所述每个发送端点的视频流,对所述每个发送端点的视频流中的视频内容进行等级划分,以确定所述每个发送端点对应的视频内容等级,其中,所述至少一个发送端点对应的视频内容等级包括多个视频内容等级;
确定视频布局,所述视频布局用于指示所述多个视频内容等级中每个视频内容等级对应的显示区域,其中,所述显示区域是包含于接收端点的多个显示区域中的显示区域,所述视频内容等级与所述显示区域一一对应;
根据所述多个视频内容等级中每一个视频内容等级对应的视频内容以及所述视频布局,确定所述多个显示区域中每一个显示区域对应的待呈现视频内容,以便于通过所述多个显示区域中每个显示区域呈现对应的待呈现视频内容,其中,不同的显示区域对应的待呈现视频内容包括不同的视频内容等级对应的视频内容。
2.根据权利要求1所述的方法,其特征在于,所述方法由控制设备执行,所述方法还包括:
向所述接收端点发送所述多个显示区域中每个显示区域对应的待呈现视频内容以及指示信息,其中,所述指示信息用于指示所述显示区域与所述待呈现视频内容的对应关系,以便于所述接收端点通过所述多个显示区域中每个显示区域呈现对应的待呈现视频内容。
3.根据权利要求1所述的方法,其特征在于,所述方法由所述接收端点执行,所述方法还包括:
所述接收端点通过所述多个显示区域中每个显示区域呈现对应的待呈现视频内容。
4.根据权利要求1至3中任一项所述的方法,其特征在于,所述方法还包括:接收所述至少一个发送端点中全部或部分发送端点的事件信息;
所述根据所述每个发送端点的视频流,对所述每个发送端点的视频流中的视频内容进行等级划分,包括:
根据所述全部或部分发送端点的事件信息以及根据所述全部或部分发送端点的视频流,对所述全部或部分发送端点的视频流中的视频内容进行等级划分。
5.根据权利要求4所述的方法,其特征在于,所述至少一个发送端点中全部或部分发送端点的事件信息用于表明所述全部或部分发送端点的参与人事件;
所述根据所述全部或部分发送端点的事件信息以及根据所述全部或部分发送端点的视频流,对所述全部或部分发送端点的视频流中的视频内容进行等级划分,包括:
以人为单位对所述全部或部分发送端点的视频流进行视频分割,以得到所述全部或部分发送端点的各个参与人的视频内容;
根据所述全部或部分发送端点的参与人事件,对所述全部或部分端点的各个参与人的视频内容进行等级划分,以确定所述各个参与人的视频内容的视频内容等级。
6.根据权利要求5所述的方法,其特征在于,所述至少一个发送端点中全部或部分发送端点的事件信息用于表明所述全部或部分发送端点的主讲人事件、协作人事件、发言者事件或者材料分享者事件。
7.根据权利要求4至6中任一项所述的方法,其特征在于,所述至少一个发送端点中全部或部分发送端点的事件信息用于表明所述全部或部分发送端点需要分享数据文档,所述全部或部分发送端点的视频流包括数据文档;
所述根据所述全部或部分发送端点的事件信息以及根据所述全部或部分发送端点的视频流,对所述全部或部分发送端点的视频流中的视频内容进行等级划分,包括:
根据所述事件信息,分割出所述全部或部分发送端点的视频流中的数据文档,以及对所述全部或部分发送端点的分割出的数据文档进行等级划分,以确定所述数据文档的视频内容等级。
8.根据权利要求4至7中任一项所述的方法,其特征在于,所述根据所述全部或部分发送端点的事件信息以及根据所述全部或部分发送端点的视频流,对所述全部或部分发送端点的视频流中的视频内容进行等级划分之后,所述方法还包括:
若所述全部或部分发送端点中的任一发送端点的事件信息发生变化,动态调整全部或部分发送端点对应的视频内容等级。
9.根据权利要求1至3中任一项所述的方法,其特征在于,根据所述每个发送端点的视频流,对所述每个发送端点的视频流中的视频内容进行等级划分,包括:
对所述至少一个发送端点中全部或部分发送端点的视频流中的视频内容进行事件判断,并在事件判断后对所述全部或部分发送端点的视频流中的视频内容进行等级划分。
10.根据权利要求9所述的方法,其特征在于,所述对所述至少一个发送端点中全部或部分发送端点的视频流中的视频内容进行事件判断,并在事件判断后对所述全部或部分发送端点的视频流中的视频内容进行等级划分,包括:
以人为单位对所述全部或部分发送端点的视频流进行视频分割,以得到所述全部或部分发送端点的各个参与人的视频内容;
对所述各个参与人的视频内容进行事件判断,并在事件判断后对所述各个参与人的视频内容进行等级划分,以确定所述各个参与人的视频内容的视频内容等级。
11.根据权利要求10所述的方法,其特征在于,所述对所述各个参与人的视频内容进行事件判断,包括:
将所述参与人的视频内容判断为主讲人的视频内容、协作人的视频内容、发言者的视频内容或者材料分享者的视频内容。
12.根据权利要求9至11中任一项所述的方法,其特征在于,所述对所述至少一个发送端点中全部或部分发送端点的视频流中的视频内容进行事件判断,并在事件判断后对所述全部或部分发送端点的视频流中的视频内容进行等级划分,包括:
对所述全部或部分发送端点的视频流进行视频分割,确定所述全部或部分发送端点中的视频流存在数据文档;
对所述全部或部分发送端点分割后的视频流中的数据文档进行等级划分,以确定所述数据文档的视频内容等级。
13.根据权利要求1至12中任一项所述的方法,其特征在于,所述对所述每个发送端点的视频流中的视频内容进行等级划分,包括:
对所述每个发送端点的视频流中的视频内容进行等级划分;其中,所述每个发送端点所对应的视频内容等级与其他发送端点所对应的视频内容等级不重叠。
14.根据权利要求1至13中任一项所述的方法,其特征在于,所述确定多个显示区域中每一个显示区域对应的待呈现视频内容,包括:
根据所述多个视频内容等级中每一个视频内容等级对应的视频内容以及所述视频布局,生成全部或部分显示区域对应的待呈现视频内容,其中,通过尺寸变换和/或颜色标记的方式设置所述全部或部分显示区域对应的待呈现视频内容中的全部或部分内容。
15.一种用于视频会议呈现的装置,其特征在于,包括:
接收单元,用于接收至少一个发送端点中每个发送端点的视频流;
第一确定单元,用于根据所述每个发送端点的视频流,对所述每个发送端点的视频流中的视频内容进行等级划分,以确定所述每个发送端点对应的视频内容等级,其中,所述至少一个发送端点对应的视频内容等级包括多个视频内容等级;
第二确定单元,用于确定视频布局,所述视频布局用于指示所述多个视频内容等级中每个视频内容等级对应的显示区域,其中,所述显示区域是包含于接收端点的多个显示区域中的显示区域,所述视频内容等级与所述显示区域一一对应;
第三确定单元,用于根据所述多个视频内容等级中每一个视频内容等级对应的视频内容以及所述视频布局,确定所述多个显示区域中每一个显示区域对应的待呈现视频内容,以便于通过所述多个显示区域中每个显示区域呈现对应的待呈现视频内容,其中,不同的显示区域对应的待呈现视频内容包括不同的视频内容等级对应的视频内容。
16.根据权利要求15所述的方法,其特征在于,所述装置为控制设备,所述装置还包括:
发送单元,用于向所述接收端点发送所述多个显示区域中每个显示区域对应的待呈现视频内容以及指示信息,其中,所述指示信息用于指示所述显示区域与所述待呈现视频内容的对应关系,以便于所述接收端点通过所述多个显示区域中每个显示区域呈现对应的待呈现视频内容。
17.根据权利要求15所述的方法,其特征在于,所述装置为所述接收端点,所述装置还包括:
呈现单元,用于通过所述多个显示区域中每个显示区域呈现对应的待呈现视频内容。
18.根据权利要求15至17中任一项所述的方法,其特征在于,
所述接收单元还用于:接收所述至少一个发送端点中全部或部分发送端点的事件信息;
所述第一确定单元具体用于:根据所述全部或部分发送端点的事件信息以及根据所述全部或部分发送端点的视频流,对所述全部或部分发送端点的视频流中的视频内容进行等级划分。
19.根据权利要求18所述的方法,其特征在于,所述至少一个发送端点中全部或部分发送端点的事件信息用于表明所述全部或部分发送端点的参与人事件;
所述第一确定单元具体用于:
以人为单位对所述全部或部分发送端点的视频流进行视频分割,以得到所述全部或部分发送端点的各个参与人的视频内容;
根据所述全部或部分发送端点的参与人事件,对所述全部或部分端点的各个参与人的视频内容进行等级划分,以确定所述各个参与人的视频内容的视频内容等级。
20.根据权利要求19所述的方法,其特征在于,所述至少一个发送端点中全部或部分发送端点的事件信息用于表明所述全部或部分发送端点的主讲人事件、协作人事件、发言者事件或者材料分享者事件。
21.根据权利要求18至20中任一项所述的方法,其特征在于,所述至少一个发送端点中全部或部分发送端点的事件信息用于表明所述全部或部分发送端点需要分享数据文档,所述全部或部分发送端点的视频流包括数据文档;
所述第一确定单元具体用于:
根据所述事件信息,分割出所述全部或部分发送端点的视频流中的数据文档,以及对所述全部或部分发送端点的分割出的数据文档进行等级划分,以确定所述数据文档的视频内容等级。
22.根据权利要求18至21中任一项所述的方法,其特征在于,在根据所述全部或部分发送端点的事件信息以及根据所述全部或部分发送端点的视频流,对所述全部或部分发送端点的视频流中的视频内容进行等级划分之后,所述第一确定单元还用于:
若所述全部或部分发送端点中的任一发送端点的事件信息发生变化,动态调整全部或部分发送端点对应的视频内容等级。
23.根据权利要求15至17中任一项所述的方法,其特征在于,所述第一确定单元具体用于:
对所述至少一个发送端点中全部或部分发送端点的视频流中的视频内容进行事件判断,并在事件判断后对所述全部或部分发送端点的视频流中的视频内容进行等级划分。
24.根据权利要求23所述的方法,其特征在于,所述第一确定单元具体用于:
以人为单位对所述全部或部分发送端点的视频流进行视频分割,以得到所述全部或部分发送端点的各个参与人的视频内容;
对所述各个参与人的视频内容进行事件判断,并在事件判断后对所述各个参与人的视频内容进行等级划分,以确定所述各个参与人的视频内容的视频内容等级。
25.根据权利要求24所述的方法,其特征在于,所述第一确定单元具体用于:
将所述参与人的视频内容判断为主讲人的视频内容、协作人的视频内容、发言者的视频内容或者材料分享者的视频内容。
26.根据权利要求23至25中任一项所述的方法,其特征在于,所述第一确定单元具体用于:
对所述全部或部分发送端点的视频流进行视频分割,确定所述全部或部分发送端点中的视频流存在数据文档;
对所述全部或部分发送端点分割后的视频流中的数据文档进行等级划分,以确定所述数据文档的视频内容等级。
27.根据权利要求15至26中任一项所述的方法,其特征在于,所述第一确定单元具体用于:
对所述每个发送端点的视频流中的视频内容进行等级划分;其中,所述每个发送端点所对应的视频内容等级与其他发送端点所对应的视频内容等级不重叠。
28.根据权利要求15至27中任一项所述的方法,其特征在于,所述第三确定单元具体用于:
根据所述多个视频内容等级中每一个视频内容等级对应的视频内容以及所述视频布局,生成全部或部分显示区域对应的待呈现视频内容,其中,通过尺寸变换和/或颜色标记的方式设置所述全部或部分显示区域对应的待呈现视频内容中的全部或部分内容。
29.一种用于视频会议呈现的系统,其特征在于,包括如权利要求15至28中任一项所述的装置以及包括至少一个发送端点;其中,所述至少一个发送端点中的每一个端点用于向所述装置发送视频流。
CN201410216238.8A 2014-05-21 2014-05-21 用于视频会议呈现的方法、装置和系统 Pending CN105100677A (zh)

Priority Applications (6)

Application Number Priority Date Filing Date Title
CN201410216238.8A CN105100677A (zh) 2014-05-21 2014-05-21 用于视频会议呈现的方法、装置和系统
JP2016568500A JP2017523632A (ja) 2014-05-21 2015-03-02 映像でのプレゼンテーションのための方法、装置、およびシステム
EP15795805.9A EP3139597A4 (en) 2014-05-21 2015-03-02 Method, device, and system for presenting video conference
KR1020167035023A KR20170007419A (ko) 2014-05-21 2015-03-02 비디오 회의를 제시하기 위한 방법, 디바이스 및 시스템
PCT/CN2015/073481 WO2015176569A1 (zh) 2014-05-21 2015-03-02 用于视频会议呈现的方法、装置和系统
US15/355,481 US20170070704A1 (en) 2014-05-21 2016-11-18 Method, apparatus, and system for presentation in video

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410216238.8A CN105100677A (zh) 2014-05-21 2014-05-21 用于视频会议呈现的方法、装置和系统

Publications (1)

Publication Number Publication Date
CN105100677A true CN105100677A (zh) 2015-11-25

Family

ID=54553394

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410216238.8A Pending CN105100677A (zh) 2014-05-21 2014-05-21 用于视频会议呈现的方法、装置和系统

Country Status (6)

Country Link
US (1) US20170070704A1 (zh)
EP (1) EP3139597A4 (zh)
JP (1) JP2017523632A (zh)
KR (1) KR20170007419A (zh)
CN (1) CN105100677A (zh)
WO (1) WO2015176569A1 (zh)

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106231233A (zh) * 2016-08-05 2016-12-14 北京邮电大学 一种基于权值的实时融屏方法
CN107302711A (zh) * 2017-08-08 2017-10-27 西安万像电子科技有限公司 媒体资源的处理系统
CN108965929A (zh) * 2017-05-23 2018-12-07 华为技术有限公司 一种视频信息的呈现方法和装置
CN109669658A (zh) * 2018-12-29 2019-04-23 联想(北京)有限公司 一种显示方法、装置及显示系统
CN109819194A (zh) * 2017-11-22 2019-05-28 重庆晋才富熙科技有限公司 远程终端与实体主会场录播设备的实时互动开会系统
CN110944143A (zh) * 2018-09-25 2020-03-31 京瓷办公信息系统株式会社 视频会议装置以及视频会议方法
CN112153323A (zh) * 2020-09-27 2020-12-29 北京百度网讯科技有限公司 远程会议的同声传译方法、装置、电子设备和存储介质
CN112312062A (zh) * 2020-10-30 2021-02-02 上海境腾信息科技有限公司 多人会议记录回放的3d展示方法、存储介质及终端设备
CN112584084A (zh) * 2020-12-08 2021-03-30 广州虎牙科技有限公司 一种视频播放方法、装置、计算机设备和存储介质
CN112822496A (zh) * 2021-01-28 2021-05-18 浙江大华技术股份有限公司 一种视频分析方法及装置
CN113923498A (zh) * 2021-09-30 2022-01-11 联想(北京)有限公司 一种处理方法及装置

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10075672B2 (en) * 2016-12-20 2018-09-11 Facebook, Inc. Optimizing video conferencing using contextual information
KR20220061763A (ko) * 2020-11-06 2022-05-13 삼성전자주식회사 화상 회의를 제공하는 전자 장치 및 화상 회의를 제공하는 방법
US11528304B2 (en) 2020-12-10 2022-12-13 Cisco Technology, Inc. Integration of video in presentation content within an online meeting
CN115474073B (zh) * 2021-06-11 2023-12-12 上海赛连信息科技有限公司 一种智能切换画面布局的方法和装置
KR20240008607A (ko) * 2022-07-12 2024-01-19 한화비전 주식회사 복수의 영상을 적응적으로 배치할 수 있는 영상 모니터링 장치

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1551632A (zh) * 2003-05-16 2004-12-01 ������������ʽ���� 向视频会议的消极参加者传递所制作内容的方法和系统
CN101827244A (zh) * 2009-03-04 2010-09-08 原声通信公司 虚拟分布式多点控制单元
CN102638672A (zh) * 2011-02-09 2012-08-15 宝利通公司 用于多流多站点远程呈现会议系统的自动视频布局
CN103155548A (zh) * 2010-10-14 2013-06-12 斯凯普公司 对用户接口进行控制来自动对焦地显示呼叫参与者
US20130293667A1 (en) * 2012-05-07 2013-11-07 Cellco Partnership D/B/A Verizon Wireless Method and apparatus for dynamic sharing of desktop content
US20140063177A1 (en) * 2012-09-04 2014-03-06 Cisco Technology, Inc. Generating and Rendering Synthesized Views with Multiple Video Streams in Telepresence Video Conference Sessions

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003299051A (ja) * 2002-03-29 2003-10-17 Matsushita Electric Ind Co Ltd 情報出力装置および情報出力方法
JP4414708B2 (ja) * 2003-09-19 2010-02-10 株式会社リコー 動画表示用パーソナルコンピュータ、データ表示システム、動画表示方法、動画表示プログラムおよび記録媒体
JP2005244744A (ja) * 2004-02-27 2005-09-08 Hitachi Software Eng Co Ltd テレビ会議装置
JP2005328484A (ja) * 2004-05-17 2005-11-24 Sony Corp テレビ会議システム、情報処理装置及び情報処理方法並びにプログラム
JP4862645B2 (ja) * 2006-12-19 2012-01-25 ヤマハ株式会社 ビデオ会議装置
US8542266B2 (en) * 2007-05-21 2013-09-24 Polycom, Inc. Method and system for adapting a CP layout according to interaction between conferees
JP2009100193A (ja) * 2007-10-16 2009-05-07 Yamaha Corp 選択支援装置および選択支援システム
US8643695B2 (en) * 2009-03-04 2014-02-04 Lifesize Communications, Inc. Videoconferencing endpoint extension
US8711198B2 (en) * 2009-06-04 2014-04-29 Hewlett-Packard Development Company, L.P. Video conference
CN101662611A (zh) * 2009-09-08 2010-03-03 上海华平信息技术股份有限公司 视频会议系统中的模板显示方法
KR101636716B1 (ko) * 2009-12-24 2016-07-06 삼성전자주식회사 발언자를 구별하는 영상 회의 장치 및 방법
US8395653B2 (en) * 2010-05-18 2013-03-12 Polycom, Inc. Videoconferencing endpoint having multiple voice-tracking cameras
CN102572370B (zh) * 2011-01-04 2014-06-11 华为终端有限公司 视频会议的控制方法和会议终端
CN102611872B (zh) * 2011-01-19 2014-07-02 株式会社理光 基于感兴趣区域动态检测的场景影像转换系统和方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1551632A (zh) * 2003-05-16 2004-12-01 ������������ʽ���� 向视频会议的消极参加者传递所制作内容的方法和系统
CN101827244A (zh) * 2009-03-04 2010-09-08 原声通信公司 虚拟分布式多点控制单元
CN103155548A (zh) * 2010-10-14 2013-06-12 斯凯普公司 对用户接口进行控制来自动对焦地显示呼叫参与者
CN102638672A (zh) * 2011-02-09 2012-08-15 宝利通公司 用于多流多站点远程呈现会议系统的自动视频布局
US20130293667A1 (en) * 2012-05-07 2013-11-07 Cellco Partnership D/B/A Verizon Wireless Method and apparatus for dynamic sharing of desktop content
US20140063177A1 (en) * 2012-09-04 2014-03-06 Cisco Technology, Inc. Generating and Rendering Synthesized Views with Multiple Video Streams in Telepresence Video Conference Sessions

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106231233A (zh) * 2016-08-05 2016-12-14 北京邮电大学 一种基于权值的实时融屏方法
CN106231233B (zh) * 2016-08-05 2019-12-20 北京邮电大学 一种基于权值的实时融屏方法
CN108965929B (zh) * 2017-05-23 2021-10-15 华为技术有限公司 一种视频信息的呈现方法、呈现视频信息的客户端和装置
CN108965929A (zh) * 2017-05-23 2018-12-07 华为技术有限公司 一种视频信息的呈现方法和装置
CN107302711A (zh) * 2017-08-08 2017-10-27 西安万像电子科技有限公司 媒体资源的处理系统
CN107302711B (zh) * 2017-08-08 2020-12-11 西安万像电子科技有限公司 媒体资源的处理系统
CN109819194A (zh) * 2017-11-22 2019-05-28 重庆晋才富熙科技有限公司 远程终端与实体主会场录播设备的实时互动开会系统
CN110944143A (zh) * 2018-09-25 2020-03-31 京瓷办公信息系统株式会社 视频会议装置以及视频会议方法
CN109669658A (zh) * 2018-12-29 2019-04-23 联想(北京)有限公司 一种显示方法、装置及显示系统
CN112153323A (zh) * 2020-09-27 2020-12-29 北京百度网讯科技有限公司 远程会议的同声传译方法、装置、电子设备和存储介质
CN112312062A (zh) * 2020-10-30 2021-02-02 上海境腾信息科技有限公司 多人会议记录回放的3d展示方法、存储介质及终端设备
CN112584084A (zh) * 2020-12-08 2021-03-30 广州虎牙科技有限公司 一种视频播放方法、装置、计算机设备和存储介质
CN112584084B (zh) * 2020-12-08 2023-09-05 广州虎牙科技有限公司 一种视频播放方法、装置、计算机设备和存储介质
CN112822496A (zh) * 2021-01-28 2021-05-18 浙江大华技术股份有限公司 一种视频分析方法及装置
CN113923498A (zh) * 2021-09-30 2022-01-11 联想(北京)有限公司 一种处理方法及装置

Also Published As

Publication number Publication date
WO2015176569A1 (zh) 2015-11-26
JP2017523632A (ja) 2017-08-17
US20170070704A1 (en) 2017-03-09
EP3139597A1 (en) 2017-03-08
KR20170007419A (ko) 2017-01-18
EP3139597A4 (en) 2017-05-17

Similar Documents

Publication Publication Date Title
CN105100677A (zh) 用于视频会议呈现的方法、装置和系统
US10321093B2 (en) Automated layouts optimized for multi-screen and multi-camera videoconferencing calls
CN102572356B (zh) 记录会议的方法和会议系统
US9462227B2 (en) Automatic video layouts for multi-stream multi-site presence conferencing system
CA2874715C (en) Dynamic video and sound adjustment in a video conference
CN103155548A (zh) 对用户接口进行控制来自动对焦地显示呼叫参与者
US20110157299A1 (en) Apparatus and method of video conference to distinguish speaker from participants
US20140022402A1 (en) Method and apparatus for automatic capture of multimedia information
CN116584090A (zh) 视频流操作
CN109314761B (zh) 用于媒体通信的方法和系统
CN101631225A (zh) 会议表决的方法、装置及系统
CN104144315A (zh) 一种多点视频会议的显示方法及多点视频会议系统
CN114531564B (zh) 处理方法及电子设备
CN111131616B (zh) 基于智能终端的音频共享方法及相关装置
CN105611219A (zh) 视频会议的处理方法及装置
US11637991B2 (en) Video conferencing systems featuring multiple spatial interaction modes
US20120200661A1 (en) Reserved Space in a Videoconference Layout
CN104735390A (zh) 浸入式会议中视频、音频布局方法与装置
JP6500366B2 (ja) 管理装置、端末装置、伝送システム、伝送方法およびプログラム
CN114048500A (zh) 一种多场景自适应匹配的无纸质化会议执行方法及系统
EP3588988B1 (en) Selective presentation of ambient audio content for spatial audio presentation
US11798561B2 (en) Method, apparatus, and non-transitory computer readable medium for processing audio of virtual meeting room
TWI807504B (zh) 虛擬會議室之音訊處理方法、裝置及存儲介質
KR20180105594A (ko) 영상 회의 서비스를 위한 다지점 접속 제어 장치 및 방법
CN104219400A (zh) 用于控制音频会议的方法和装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20151125