CN104144315B - 一种多点视频会议的显示方法及多点视频会议系统 - Google Patents
一种多点视频会议的显示方法及多点视频会议系统 Download PDFInfo
- Publication number
- CN104144315B CN104144315B CN201310168185.2A CN201310168185A CN104144315B CN 104144315 B CN104144315 B CN 104144315B CN 201310168185 A CN201310168185 A CN 201310168185A CN 104144315 B CN104144315 B CN 104144315B
- Authority
- CN
- China
- Prior art keywords
- end points
- switch
- multipoint videoconference
- instruction
- conferencing endpoints
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Landscapes
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Telephonic Communication Services (AREA)
Abstract
本发明实施例公开了一种多点视频会议的显示方法及多点视频会议系统,用于提高会议真实感和提高用户体验。本发明实施例包括:切换器和若干个多点视频会议端点,若干个多点视频会议端点通过切换器建立连接,多点视频会议端点,用于向切换器上传视频图像和指令信息;切换器,用于处理若干个多点视频会议端点上传的视频图像,根据各多点视频会议端点上传的指令信息,控制多点视频会议端点中显示的图像的切换;多点视频会议端点,还用于根据切换器的控制指令进行图像显示。
Description
技术领域
本发明涉及通信技术领域,尤其是涉及在多点视频通讯中会场分级的多会场融合显示方法及多点视频会议系统。
背景技术
视频会议(Video Conference)也可以称为电视会议,是利用视频技术和设备通过传输信道在两个或多个地点的用户终端之间举行会议,实时传送声音、图像的通信方式。它同时还可以附加静止图像、文件、传真等信号的传送。参加电视会议的人,可以通过电视发表意见,同时观察对方的形象、动作、表情等,并能出示实物、图纸、文件等实拍的电视图像或者显示在黑板、白板上写的字和画的图,使在不同地点参加会议的人感到如同和对方进行“面对面”的交谈,在效果上可以代替现场举行的会议。
多点视频会议是点对点视频会议的自然延伸。多点视频会议通常包括多点视频桥,该多点视频桥对来自多个视频会议端点的视频信号进行组合以提供显示给所有会议参与者,并可由所有会议参与者共享的单个输出视频信号。通常情况下,会议参与者应当能够看到其他端点处的所有会议参与者,所述端点也称为会议端点,统一指出现在多点视讯中在不同空间中的各个地点/位置/会议参与者/会议室等。
在对现有技术的研究和实践过程中,本发明的发明人发现,有时因会场过多可能需要用户手动频繁切换观看图像,带来沉重的操作负担,这些情况都会破坏会场效果,影响会议真实感,导致用户体验差。
发明内容
本发明实施例提供了一种多点视频会议的显示方法及多点视频会议系统,用于提高会议真实感和提高用户体验。
有鉴于此,本发明第一方面提供一种多点视频会议系统,其特征在于,包括切换器和若干个多点视频会议端点,所述若干个多点视频会议端点通过所述切换器建立连接,
所述多点视频会议端点,用于向所述切换器上传视频图像和指令信息;
所述切换器,用于处理所述若干个多点视频会议端点上传的视频图像,根据各多点视频会议端点上传的指令信息,控制多点视频会议端点中显示的图像的切换;
所述多点视频会议端点,还用于根据所述切换器的控制指令进行图像显示。
在第一种可能的实现方式中,所述多点视频会议端点包括第一显示装置、第二显示装置、摄像装置、声音定位录入装置和会议控制装置,其中,所述摄像装置分别与会议参与者坐席和所述第二显示装置相对设置;
所述第一显示装置,用于根据参与多点视频会议的会议端点中除本会议端点外其他会议端点中摄像装置拍摄到的视频图像,经过所述切换器处理切换发出的指令进行显示;
所述第二显示装置,用于根据所述声音定位录入装置或所述会议控制装置发出经过所述切换器处理后发出的控制指令进行显示;
所述声音定位录入装置,用于定位本会议端点中发言的会议参与者的位置,生成相应的控制指令至所述摄像装置,录入该发言会议参与者的语音信息并输出至所述切换器;
所述摄像装置,用于根据所述声音定位录入装置或所述会议控制装置发出的控制指令,拍摄其对准区域的图像并输出至所述切换器;
所述会议控制装置,用于接收会议端点中会议参与者直接输入的控制指令并输出至所述切换器。
结合第一方面的第一种可能的实现方式,在第二种可能的实现方式中,若所述多点视频会议端点为主叫会议端点,则所述第一显示装置用于根据主叫会议端点呼叫的被叫会议端点中摄像装置拍摄到的视频图像,经过切换器处理切换发出的指令进行显示;
所述第二显示装置,用于根据所述会议控制装置发出的经过切换器处理切换发出的指令,显示所述主叫会议端点上传的会议材料。
结合第一方面的第一种可能的实现方式,在第三种可能的实现方式中,若所述多点视频会议端点为被叫会议端点,则所述第一显示装置用于根据主叫会议端点中摄像装置拍摄到的视频图像,经过切换器处理切换发出的指令进行显示;
所述第二显示装置,用于根据所述声音定位录入装置发出的经过切换器处理切换发出的指令,显示参与多点视频会议的会议端点中除本会议端点和主叫会议端点外,其他会议端点有会议参与者发言的图像;
所述第二显示装置,还用于若所述本会议端点中有会议参与者发言,则根据所述会议控制装置发出的经过切换器处理切换发出的指令进行显示。
结合第一方面的第一种或第二种或第三种可能的实现方式,在第四种可能的实现方式中,所述切换器还用于:
当若干个多点视频会议端点通过切换器建立连接后,控制以发出第一指令或第二指令所在的多点视频会议端点为主叫会议端点,多点视频会议系统中其他会议端点为被叫会议端点,所述第一指令指示当首个会议参与者激活会议控制装置后,通过会议控制装置呼叫所需观看的多点视频会议端点的图像,该发出呼叫的会议端点自动成为主叫会议端点,所述第二指令指示当会议参与者激活会议控制装置后,通过会议控制装置激活上传数据材料,所述多点视频会议端点自动获得主叫权成为主叫会议端点。
结合第一方面的第四种可能的实现方式,在第五种可能的实现方式中,所述切换器,还用于接收到各多点视频会议端点上传的多个独立图像,且没有接收到所述第二指令或第三指令时,进行图像合并和处理,输出至各多点视频会议端点,所述第三指令指示被叫会议端点中声音定位录入装置被激活,当声音定位录入装置覆盖范围内,会议参与者持续发言,声音定位录入装置对应的摄像装置所获得的图像上传到所述切换器,所述切换器将该图像发送到其他被叫会议端点第二显示装置中显示。
本发明第二方面提供一种多点视频会议的显示方法,应用于如上所述的多点视频会议系统,所述多点视频会议系统包括切换器和若干个多点视频会议端点,所述若干个多点视频会议端点通过所述切换器建立连接,所述方法包括:
所述多点视频会议端点向所述切换器上传视频图像和指令信息;
所述切换器处理所述若干个多点视频会议端点上传的视频图像,根据各多点视频会议端点上传的指令信息,控制多点视频会议端点中显示的图像的切换;
所述多点视频会议端点根据所述切换器的控制指令进行图像显示。
在第一种可能的实现方式中,所述多点视频会议端点向所述切换器上传视频图像和指令信息包括:
所述多点视频会议端点中的声音定位录入装置,定位本会议端点中发言的会议参与者的位置,生成相应的控制指令至所述摄像装置,录入该发言会议参与者的语音信息;
所述多点视频会议端点中的摄像装置,根据所述声音定位录入装置或所述会议控制装置发出的控制指令,拍摄其对准区域的图像;
所述声音定位录入装置将所录入的该发言的会议参与者的语音信息与所述摄像装置拍摄到的图像共同传输并输出至所述切换器。
结合第二方面的第一种可能的实现方式,在第二种可能的实现方式中,若所述多点视频会议端点为主叫会议端点,则所述多点视频会议端点根据所述切换器的控制指令进行图像显示,包括:
所述多点视频会议端点中的第一显示装置,根据主叫会议端点呼叫的被叫会议端点中摄像装置拍摄到的视频图像,经过切换器处理切换发出的指令进行显示;
所述多点视频会议端点中的第二显示装置,用于根据所述多点视频会议端点中所述会议控制装置发出的经过切换器处理切换发出的指令,显示所述主叫会议端点上传的会议材料。
结合第二方面的第一种可能的实现方式,在第三种可能的实现方式中,若所述多点视频会议端点为被叫会议端点,则所述多点视频会议端点根据所述切换器的控制指令进行图像显示,包括:
所述多点视频会议端点中的第一显示装置,根据主叫会议端点中摄像装置拍摄到的视频图像,经过切换器处理切换发出的指令进行显示;
所述多点视频会议端点中的第二显示装置,根据所述声音定位录入装置发出的经过切换器处理切换发出的指令,显示参与多点视频会议的会议端点中除本会议端点和主叫会议端点外,其他会议端点有会议参与者发言的图像;若所述本会议端点中有会议参与者发言,则根据所述多点视频会议端点中的会议控制装置发出的经过切换器处理切换发出的指令进行显示。
结合第二方面的第一种或第二种或第三种可能的实现方式,在第四种可能的实现方式中,所述方法还包括:
当若干个多点视频会议端点通过切换器建立连接后,所述切换器控制以发出第一指令或第二指令所在的多点视频会议端点为主叫会议端点,多点视频会议系统中其他会议端点为被叫会议端点,所述第一指令指示当首个会议参与者激活会议控制装置后,通过会议控制装置呼叫所需观看的多点视频会议端点的图像,该发出呼叫的会议端点自动成为主叫会议端点,所述第二指令指示当会议参与者激活会议控制装置后,通过会议控制装置激活上传数据材料,所述多点视频会议端点自动获得主叫权成为主叫会议端点。
结合第二方面的第四种可能的实现方式,在第五种可能的实现方式中,所述方法还包括:
所述切换器接收到各多点视频会议端点上传的多个独立图像,且没有接收到所述第二指令或第三指令时,进行图像合并和处理,输出至各多点视频会议端点,所述第三指令指示被叫会议端点中声音定位录入装置被激活,当声音定位录入装置覆盖范围内,会议参与者持续发言,声音定位录入装置对应的摄像装置所获得的图像上传到所述切换器,所述切换器将该图像发送到其他被叫会议端点第二显示装置中显示。
从以上技术方案可以看出,本发明实施例提供的多点视频会议的显示方法及多点视频会议系统,具有以下优点:通过切换器处理若干个多点视频会议端点上传的视频图像,根据各多点视频会议端点上传的指令信息,控制多点视频会议端点中显示的图像的切换,以减轻会议参与者的操作量,提高会议真实感和用户体验;进一步地,基于各会议参与者的声音状况进行图像摄取和声音获取,并在各会议终端进行显示,能够保持会议体验的完整性。
附图说明
为了更清楚地说明本发明实施例的技术方案,下面将对实施例描述所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的一种多点视频会议系统的结构示意图;
图2为本发明实施例提供的一种多点视频会议系统中多点视频会议端点的结构示意图;
图3为本发明实施例提供的一种多点视频会议系统应用场景示意图;
图4为本发明实施例提供的一种多点视频会议系统的图像摄取的示意图;
图5为本发明实施例提供的多点视频会议系统应用场景另一示意图;
图6为本发明实施例提供的一种多点视频会议的显示方法的流程示意图。
具体实施方式
本发明实施例提供了一种多点视频会议的显示方法及多点视频会议系统,用于提高会议真实感和提高用户体验。
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其它实施例,都属于本发明保护的范围。
以下分别进行详细说明。
请参考图1,图1为本发明实施例提供的一种多点视频会议系统的结构示意图,其中,所述多点视频会议系统可包括:切换器200和若干个多点视频会议端点100,若干个多点视频会议端点100通过所述切换器200建立连接,
所述多点视频会议端点100,用于向所述切换器200上传视频图像和指令信息;
所述切换器200,用于处理所述若干个多点视频会议端点100上传的视频图像,根据各多点视频会议端点100上传的指令信息,控制多点视频会议端点100中显示的图像的切换;
所述多点视频会议端点100,还用于根据所述切换器200的控制指令进行图像显示。
由上述可知,本发明实施例提供的一种多点视频会议系统,通过切换器200处理若干个多点视频会议端点100上传的视频图像,根据各多点视频会议端点100上传的指令信息,控制多点视频会议端点100中显示的图像的切换,以减轻会议参与者的操作量,提高会议真实感和用户体验。
请结合参考图2,图2为本发明实施例提供的一种多点视频会议系统中多点视频会议端点100的结构示意图,在本发明实施例中,所述多点视频会议端点100可以包括第一显示装置101、第二显示装置102、摄像装置103、声音定位录入装置104和会议控制装置105,其中,所述摄像装置103分别与会议参与者坐席106和所述第二显示装置102相对设置;
优选地,如图2所示,所述会议参与者坐席106设置在所述第二显示装置102两边,所述摄像装置103可具体包括三个摄像头,分别对准所述第二显示装置102和所述第二显示装置102两边的会议参与者坐席106;另外,所述第一显示装置101设置于所述第二显示装置102对面;所述声音定位录入装置104和会议控制装置105设置于所述会议参与者坐席106附近,以便对会议参与者进行声音定位录入和接收会议参与者发出的控制命令。
其中,所述第一显示装置101,用于根据参与多点视频会议的会议端点中除本会议端点外其他会议端点中摄像装置103拍摄到的视频图像,经过所述切换器200处理切换发出的指令进行显示;
也就是以提供本会议端点中的会议参与者通过本会议端点的第一显示装置101观看其他会议端点中摄像装置103拍摄到的视频图像,又因为该摄像装置103分别与所处会议端点中的参与者坐席106和第二显示装置102相对设置,因此本会议端点中的会议参与者通过本会议端点的第一显示装置101观看其他会议端点中的参与者坐席106和第二显示装置102显示的图像;
所述第二显示装置102,用于根据所述声音定位录入装置104或所述会议控制装置105发出经过所述切换器200处理后发出的控制指令进行显示;
所述声音定位录入装置104,用于定位本会议端点中发言的会议参与者的位置,生成相应的控制指令至所述摄像装置103,录入该发言会议参与者的语音信息并输出至所述切换器200;
所述摄像装置103,用于根据所述声音定位录入装置104或所述会议控制装置105发出的控制指令,拍摄其对准区域的图像并输出至所述切换器200;
可以理解的是,本发明实施方式中,所述摄像装置103分别与所处会议端点中的参与者坐席106和第二显示装置102相对设置,因此摄像装置103是将拍摄到的参与者坐席106和第二显示装置102显示的图像输出至所述切换器200。
所述会议控制装置105,用于接收会议端点中会议参与者直接输入的控制指令并输出至所述切换器200。
本发明实施例中,多点视频会议系统可以包括切换器200和若干个多点视频会议端点100,其中,所述若干个多点视频会议端点100中可以具体包括一个主叫会议端点A和若干个被叫会议端点;可以理解的是,在视频会议中主动发起呼叫以及数据材料共享的会场可以定义为主叫会议端点A,与主叫会议端点A相对,除主叫会议端点A以外的会议端点可以定义为被叫会议端点;
在本发明一种可实施方式中,若所述多点视频会议端点100为主叫会议端点A,则所述第一显示装置101用于根据主叫会议端点A呼叫的被叫会议端点中摄像装置103拍摄到的视频图像,经过切换器200处理切换发出的指令进行显示;
所述第二显示装置102,用于根据所述会议控制装置105发出的经过切换器200处理切换发出的指令,显示所述主叫会议端点A上传的会议材料。
在本发明另一种可实施方式中,若所述多点视频会议端点100为被叫会议端点,则所述第一显示装置101用于根据主叫会议端点A中摄像装置103拍摄到的视频图像,经过切换器200处理切换发出的指令进行显示;
所述第二显示装置102,用于根据所述声音定位录入装置104发出的经过切换器200处理切换发出的指令,显示参与多点视频会议的会议端点中除本会议端点和主叫会议端点A外,其他会议端点有会议参与者发言的图像;
所述第二显示装置102,还用于若所述本会议端点中有会议参与者发言,则根据所述会议控制装置105发出的经过切换器200处理切换发出的指令进行显示。
本发明实施方式中,所述切换器200还可以用于:
当若干个多点视频会议端点100通过切换器200建立连接后,控制以发出第一指令或第二指令所在的多点视频会议端点100为主叫会议端点A,多点视频会议系统中其他会议端点为被叫会议端点;其中,所述第一指令指示当首个会议参与者激活会议控制装置105后,通过会议控制装置105呼叫所需观看的多点视频会议端点100的图像,该发出呼叫的会议端点自动成为主叫会议端点A;所述第二指令指示当会议参与者激活会议控制装置105后,通过会议控制装置105激活上传数据材料,所述多点视频会议端点100自动获得主叫权成为主叫会议端点A。
也就是说,所述多点视频会议系统中,可以先通过切换器200识别各多点视频会议端点100的属性,对会议端点类型进行分级,其后再进行指令的获取或图像的切换显示。
所述切换器200,还用于接收到各多点视频会议端点100上传的多个独立图像,且确定出没有接收到所述第二指令或第三指令时,进行图像合并和处理,输出至各多点视频会议端点100;其中,所述第三指令指示被叫会议端点中声音定位录入装置104被激活,当声音定位录入装置104覆盖范围内,会议参与者持续发言,声音定位录入装置104对应的摄像装置103所获得的图像上传到切换器200,切换器200将该图像发送到其他被叫会议端点第二显示装置102中显示。
也就是说,所述多点视频会议系统中,通过声音定位录入装置104和摄像装置103,基于各会议参与者的声音状况进行图像摄取和声音获取,并在各会议终端进行显示。
由上述可知,本发明实施例提供的多点视频会议系统,通过切换器200处理若干个多点视频会议端点100上传的视频图像,根据各多点视频会议端点100上传的指令信息,控制多点视频会议端点100中显示的图像的切换,以减轻会议参与者的操作量,提高会议真实感和用户体验;进一步地,基于各会议参与者的声音状况,通过声音定位录入装置104和摄像装置103进行图像摄取和声音获取,在多点视频会议系统中保证每个会议终端看到发言人的前提下,减少画面的频繁变化,能够保持会议体验的完整性。
为了更好地理解本发明技术方案,以下以一具体应用场景对所述多点视频会议系统进行分析说明;在该应用场景下,所述多点视频会议系统包括切换器200、主叫会议端点A、被叫会议端点B和被叫会议端点C,可参考图3,图3为该应用场景提供的一种多点视频会议系统的结构示意图;
其中,主叫会议端点A、被叫会议端点B和被叫会议端点C通过所述切换器200建立连接,通过所述切换器200进行指令的发送传递,图像的上传、合并、切换和分发等,所述切换器200处理主叫会议端点A、被叫会议端点B和被叫会议端点C上传的视频图像,根据各端点上传的指令信息,使用多种图像处理方法来控制各端点中多个图像的切换和显示;另可以理解的是,所述主叫会议端点A、被叫会议端点B和被叫会议端点C均可以包括第一显示装置101、第二显示装置102、摄像装置103、声音定位录入装置104、会议控制装置105和会议参与者坐席106。
在该应用场景下,所述主叫会议端点A、被叫会议端点B和被叫会议端点C中,所述第一显示装置101是由多个或一个大尺寸显示器组建的装置,其大小不低于第一预设定的尺寸,以保证摄像装置103拍摄的图像在本第一显示装置101显像时得到接近与真实透视比例人物大小的视觉感受,以及得到完整的第二显示装置102的显示区域。
所述摄像装置103由三个摄像头组成,分别对准所述第二显示装置102和所述第二显示装置102两边的会议参与者坐席106,根据声音定位录入装置104或会议控制装置105发出的控制指令,拍摄指定区域的图像,并将图像上传至切换器200的广角摄像装置。
所述声音定位录入装置104由多个或一个收音装置与声音定位装置组成。通过声音定位装置定位本会议端点中的会议参与者的发声方向,生成指令至摄像装置103,并录入该发声位的语音信息,与摄像装置103拍摄的图像共同传输至切换器200中。
所述会议控制装置105,包括但不限于使用可视化的可触摸的多点控制器,实体按键控制器或其他形式。通过该控制器对各多点视频会议端点100中的沟通需求进行控制,包括但不限于:多点视频会议端点100的切换,文档的演示等。
请一并参考图4,图4为本发明实施例提供的多点视频会议系统的图像摄取的示意图,当若干个多点视频会议端点100通过切换器200建立连接后,切换器200控制以发出第一指令或第二指令所在的多点视频会议端点为主叫会议端点A,多点视频会议系统中其他会议端点(即会议端点B和会议端点C)为被叫会议端点,所述第一指令指示当首个会议参与者激活会议控制装置105后,通过会议控制装置105呼叫所需观看的多点视频会议端点100的图像,该发出呼叫的会议端点自动成为主叫会议端点A,所述第二指令指示当会议参与者激活会议控制装置105后,通过会议控制装置105激活上传数据材料,所述多点视频会议端点100自动获得主叫权成为主叫会议端点A。
该应用场景下,针对所述多点视频会议系统的图像摄取与呈现机制,可以具体分析如下:
请参考图4中a1部分,所述第二显示装置102与所述第一显示装置101相对设置,所述摄像装置103分别与会议参与者坐席106和所述第二显示装置102相对设置,所述摄像装置103设置在所述第一显示装置101上方;也就是说各会议端点中的摄像装置103分别拍摄会议端点现场对应的会议参与者坐席106上的一位或多位会议参与者的独立图像、和第二显示装置102显示的图像,各独立的图像被上传至切换器200后,再进行合并。
请参考图4中a2部分,所述切换器200接收到各多点视频会议端点100上传的多个独立图像后,若没有接收到所述第二指令或所述第三指令时,切换器200可使用多种现有图像处理方法对图像进行合并和处理,包括但不限于:各会议端点(主叫会议端点A、被叫会议端点B和被叫会议端点C)中,摄像装置103拍摄图像后,切换器200基于重叠区的图像拼接技术进行视频的合成与处理,同时所述切换器200基于色度键/深度键对各独立图像进行调整,合成一致效果的跨多显示器联合显示技术,处理后的图像经由数字图像处理部件处理后转换成模拟信号输出至各多点视频会议端点100中。其中,若由系统统一分发播放的内容,则被叫会议端点统一显示观看主叫会议端点A的会议现场;可以理解的是,本发明实施方式中,所述第三指令指示被叫会议端点中声音定位录入装置104被激活,当声音定位录入装置覆盖范围内,会议参与者持续发言,声音定位录入装置104对应的摄像装置103所获得的图像上传到切换器200,切换器200将该图像发送到其他被叫会议端点第二显示装置102中显示。
请参考图4中a3部分,所述被叫会议端点B接收到所述切换器200发送的来自主叫会议端点A经由处理的模拟信号,将信号发送至第一显示装置101或第二显示装置102上,被叫会议端点B中的第一显示装置101将信号转化为图像呈现给被叫会议端点B中的各会议参与者。
可参考图5,图5为本发明实施例提供的一种多点视频会议系统的具体应用场景示意图,并结合参考图3和图4,当所有会议端点的布置和准备完成后,当主叫会议端点A的会议控制装置105发出了第一指令或第二指令至切换器200,切换器200根据指令要求将对应被叫会议端点B中摄像装置103拍摄到的图像显示于主叫会议端点A的第一显示装置101处;同时将主叫会议端点A中摄像装置103所获图像上传到切换器200,切换器200将该图像在所有被叫会议端点(包括被叫会议端点B和被叫会议端点C)的第一显示装置101中显示。
当被叫会议端点C发出了第三指令至切换器200后,切换器200将第三指令下发至除主叫会议端点A外的其他被叫会议端点(被叫会议端点B),将第三指令中所控制的声音定位录入装置104所获得的语音信息,及其对应的摄像装置103所获得的图像,上传到切换器200,并在其他被叫会议端点(被叫会议端点B)的第二大显示装置102中显示;而有会议参与者发言的被叫会议端点C,用户可以向本会议端点所述会议控制装置105输入的指令,该指令输入经过切换器200处理切换后得到的图像,发送至其二大显示装置102进行显示,此处不作具体限定。
由上述可知,本发明实施例提供的多点视频会议系统,可以先通过切换器200识别各多点视频会议端点100的属性,对会议端点类型进行分级;其后,通过切换器200处理若干个多点视频会议端点100上传的视频图像,根据各多点视频会议端点100上传的指令信息,控制多点视频会议端点100中显示的图像的切换,以减轻会议参与者的操作量,提高会议真实感和用户体验;进一步地,基于各会议参与者的声音状况,通过声音定位录入装置104和摄像装置103进行图像摄取和声音获取,在多点视频会议系统中保证每个会议终端看到发言人的前提下,减少画面的频繁变化,能够保持会议体验的完整性;在引入数据材料和引入更多会议端点时,也保证各会议端点有与双方会议一致的会议体验。
为便于更好的实施本发明实施例提供的多点视频会议系统,本发明实施例还提供一种基于上述多点视频会议系统的显示方法。其中名词的含义与上述多点视频会议系统中相同,具体实现细节可以参考系统实施例中的说明。
请参考图6,图6为本发明实施例提供的一种多点视频会议的显示方法的流程示意图,所述多点视频会议的显示方法应用于如上述实施例所述的多点视频会议系统,所述多点视频会议系统包括切换器200和若干个多点视频会议端点100,若干个多点视频会议端点100通过所述切换器200建立连接,所述方法包括:
S101、所述多点视频会议端点100向所述切换器200上传视频图像和指令信息;
S102、所述切换器200处理所述若干个多点视频会议端点100上传的视频图像,根据各多点视频会议端点100上传的指令信息,控制多点视频会议端点100中显示的图像的切换;
S103、所述多点视频会议端点100根据所述切换器200的控制指令进行图像显示。
由上述可知,本发明实施例提供的一种多点视频会议的显示方法,通过切换器200处理若干个多点视频会议端点100上传的视频图像,根据各多点视频会议端点100上传的指令信息,控制多点视频会议端点100中显示的图像的切换,以减轻会议参与者的操作量,提高会议真实感和用户体验。
以下实施例中,可结合参考上述实施例所述的多点视频会议系统和图2,其中,所述多点视频会议端点100包括第一显示装置101、第二显示装置102、摄像装置103、声音定位录入装置104和会议控制装置105;所述摄像装置103分别与会议参与者坐席106和所述第二显示装置102相对设置,所述会议参与者坐席106设置在所述第二显示装置102两边,所述摄像装置103可具体包括三个摄像头,分别对准所述第二显示装置102和所述第二显示装置102两边的会议参与者坐席106;另外,所述第一显示装置101设置于所述第二显示装置102对面;所述声音定位录入装置104和会议控制装置105设置于所述会议参与者坐席106附近,以便对会议参与者进行声音定位录入和接收会议参与者发出的控制命令。
在该实施方式中,所述多点视频会议端点100向所述切换器200上传视频图像和指令信息(步骤S101)可以包括:
所述多点视频会议端点100中的声音定位录入装置104,定位本会议端点中发言的会议参与者的位置,生成相应的控制指令至所述摄像装置103,录入该发言的会议参与者的语音信息;
所述多点视频会议端点100中的摄像装置103,根据所述声音定位录入装置104或所述会议控制装置105发出的控制指令,拍摄其对准区域的图像;
所述声音定位录入装置104将所录入的该发言的会议参与者的语音信息与所述摄像装置103拍摄到的图像共同传输并输出至所述切换器200。
其后,所述多点视频会议端点100中,所述第一显示装置101和所述第二显示装置102根据所述切换器200发出的命令进行显示,可具体的,所述第一显示装置101根据参与多点视频会议的会议端点中除本会议端点外其他会议端点中摄像装置103拍摄到的视频图像,经过所述切换器200处理切换发出的指令进行显示;所述第二显示装置102根据所述声音定位录入装置104或所述会议控制装置105发出经过所述切换器200处理后发出的控制指令进行显示。
本发明实施例中,多点视频会议系统可以包括切换器200和若干个多点视频会议端点100,其中,所述若干个多点视频会议端点100中可以具体包括一个主叫会议端点A和若干个被叫会议端点;可以理解的是,在视频会议中主动发起呼叫以及数据材料共享的会场可以定义为主叫会议端点A,与主叫会议端点A相对,除主叫会议端点A以外的会议端点可以定义为被叫会议端点;
在本发明一种可实施方式中,若所述多点视频会议端点100为主叫会议端点A,则所述多点视频会议端点100根据所述切换器200的控制指令进行图像显示(步骤S103),可以包括:
所述多点视频会议端点100中的第一显示装置101,根据主叫会议端点A呼叫的被叫会议端点中摄像装置103拍摄到的视频图像,经过切换器200处理切换发出的指令进行显示;
所述多点视频会议端点100中的第二显示装置102,用于根据所述多点视频会议端点100中所述会议控制装置105发出的经过切换器200处理切换发出的指令,显示所述主叫会议端点A上传的会议材料。
在本发明另一种可实施方式中,若所述多点视频会议端点100为被叫会议端点,则所述多点视频会议端点100根据所述切换器200的控制指令进行图像显示(步骤S103),可以包括:
所述多点视频会议端点100中的第一显示装置101,根据主叫会议端点A中摄像装置103拍摄到的视频图像,经过切换器200处理切换发出的指令进行显示;
所述多点视频会议端点100中的第二显示装置102,根据所述声音定位录入装置104发出的经过切换器200处理切换发出的指令,显示参与多点视频会议的会议端点中除本会议端点和主叫会议端点A外,其他会议端点有会议参与者发言的图像;若所述本会议端点中有会议参与者发言,则根据所述多点视频会议端点100中的会议控制装置105发出的经过切换器200处理切换发出的指令进行显示。
进一步地,所述多点视频会议的显示方法还可以包括:
当若干个多点视频会议端点100通过切换器200建立连接后,所述切换器200控制以发出第一指令或第二指令所在的多点视频会议端点100为主叫会议端点A,多点视频会议系统中其他会议端点为被叫会议端点;其中,所述第一指令指示当首个会议参与者激活会议控制装置105后,通过会议控制装置105呼叫所需观看的多点视频会议端点100的图像,该发出呼叫的会议端点自动成为主叫会议端点A;所述第二指令指示当会议参与者激活会议控制装置105后,通过会议控制装置105激活上传数据材料,所述多点视频会议端点100自动获得主叫权成为主叫会议端点A。
更进一步地,所述切换器200处理所述若干个多点视频会议端点100上传的视频图像,根据各多点视频会议端点100上传的指令信息,控制多点视频会议端点100中显示的图像的切换(步骤S102),可以包括:
所述切换器200接收到各多点视频会议端点100上传的多个独立图像,且确定没有接收到所述第二指令或第三指令时,进行图像合并和处理,输出至各多点视频会议端点100;其中,所述第三指令指示被叫会议端点中声音定位录入装置104被激活,当声音定位录入装置104覆盖范围内,会议参与者持续发言,声音定位录入装置104对应的摄像装置103所获得的图像上传到切换器200,切换器200将该图像发送到其他被叫会议端点第二显示装置102中显示。
可以理解的是,所述多点视频会议的显示方法用于上述实施例所述的多点视频会议系统,所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的多点视频会议的显示方法的各步骤的具体工作过程,可以参考前述方法实施例中的对应过程和应用场景,在此不再具体描述。
由上述可知,本发明实施例提供的多点视频会议的显示方法,可以先通过切换器200识别各多点视频会议端点100的属性,对会议端点类型进行分级;其后,通过切换器200处理若干个多点视频会议端点100上传的视频图像,根据各多点视频会议端点100上传的指令信息,控制多点视频会议端点100中显示的图像的切换,以减轻会议参与者的操作量,提高会议真实感和用户体验;进一步地,基于各会议参与者的声音状况,通过声音定位录入装置104和摄像装置103进行图像摄取和声音获取,在多点视频会议系统中保证每个会议终端看到发言人的前提下,减少画面的频繁变化,能够保持会议体验的完整性;在引入数据材料和引入更多会议端点时,也保证各会议端点有与双方会议一致的会议体验。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统,装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在本申请所提供的几个实施例中,应该理解到,所揭露的系统,装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-OnlyMemory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
以上对本发明所提供的一种多点视频会议的显示方法及多点视频会议系统进行了详细介绍,对于本领域的一般技术人员,依据本发明实施例的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本发明的限制。
Claims (10)
1.一种多点视频会议系统,其特征在于,包括切换器和若干个多点视频会议端点,所述若干个多点视频会议端点通过所述切换器建立连接,
所述多点视频会议端点,用于向所述切换器上传视频图像和指令信息;
所述切换器,用于处理所述若干个多点视频会议端点上传的视频图像,根据各多点视频会议端点上传的指令信息,控制多点视频会议端点中显示的图像的切换;
所述多点视频会议端点,还用于根据所述切换器的控制指令进行图像显示;
其中,所述多点视频会议端点包括第一显示装置、第二显示装置、摄像装置、声音定位录入装置和会议控制装置,所述摄像装置分别与会议参与者坐席和所述第二显示装置相对设置;
所述第一显示装置,用于根据参与多点视频会议的会议端点中除本会议端点外其他会议端点中摄像装置拍摄到的视频图像,经过所述切换器处理切换发出的指令进行显示;
所述第二显示装置,用于根据所述声音定位录入装置或所述会议控制装置发出经过所述切换器处理后发出的控制指令进行显示;
所述声音定位录入装置,用于定位本会议端点中发言的会议参与者的位置,生成相应的控制指令至所述摄像装置,录入该发言会议参与者的语音信息并输出至所述切换器;
所述摄像装置,用于根据所述声音定位录入装置或所述会议控制装置发出的控制指令,拍摄其对准区域的图像并输出至所述切换器;
所述会议控制装置,用于接收会议端点中会议参与者直接输入的控制指令并输出至所述切换器。
2.根据权利要求1所述的多点视频会议系统,其特征在于:若所述多点视频会议端点为主叫会议端点,则所述第一显示装置用于根据主叫会议端点呼叫的被叫会议端点中摄像装置拍摄到的视频图像,经过切换器处理切换发出的指令进行显示;
所述第二显示装置,用于根据所述会议控制装置发出的经过切换器处理切换发出的指令,显示所述主叫会议端点上传的会议材料。
3.根据权利要求1所述的多点视频会议系统,其特征在于:若所述多点视频会议端点为被叫会议端点,则所述第一显示装置用于根据主叫会议端点中摄像装置拍摄到的视频图像,经过切换器处理切换发出的指令进行显示;
所述第二显示装置,用于根据所述声音定位录入装置发出的经过切换器处理切换发出的指令,显示参与多点视频会议的会议端点中除本会议端点和主叫会议端点外,其他会议端点有会议参与者发言的图像;
所述第二显示装置,还用于若所述本会议端点中有会议参与者发言,则根据所述会议控制装置发出的经过切换器处理切换发出的指令进行显示。
4.根据权利要求1至3任一项所述的多点视频会议系统,其特征在于,所述切换器还用于:
当若干个多点视频会议端点通过切换器建立连接后,控制以发出第一指令或第二指令所在的多点视频会议端点为主叫会议端点,多点视频会议系统中其他会议端点为被叫会议端点,所述第一指令指示当首个会议参与者激活会议控制装置后,通过会议控制装置呼叫所需观看的多点视频会议端点的图像,该发出呼叫的会议端点自动成为主叫会议端点,所述第二指令指示当会议参与者激活会议控制装置后,通过会议控制装置激活上传数据材料,所述多点视频会议端点自动获得主叫权成为主叫会议端点。
5.根据权利要求4所述的多点视频会议系统,其特征在于,所述切换器,还用于接收到各多点视频会议端点上传的多个独立图像,且没有接收到所述第二指令或第三指令时,进行图像合并和处理,输出至各多点视频会议端点,所述第三指令指示被叫会议端点中声音定位录入装置被激活,当声音定位录入装置覆盖范围内,会议参与者持续发言,声音定位录入装置对应的摄像装置所获得的图像上传到所述切换器,所述切换器将该图像发送到其他被叫会议端点第二显示装置中显示。
6.一种多点视频会议的显示方法,其特征在于,应用于如权利要求1所述的多点视频会议系统,所述多点视频会议系统包括切换器和若干个多点视频会议端点,所述若干个多点视频会议端点通过所述切换器建立连接,所述方法包括:
所述多点视频会议端点向所述切换器上传视频图像和指令信息;
所述切换器处理所述若干个多点视频会议端点上传的视频图像,根据各多点视频会议端点上传的指令信息,控制多点视频会议端点中显示的图像的切换;
所述多点视频会议端点根据所述切换器的控制指令进行图像显示;
其中,所述多点视频会议端点包括第一显示装置、第二显示装置、摄像装置、声音定位录入装置和会议控制装置,所述摄像装置分别与会议参与者坐席和所述第二显示装置相对设置;
所述多点视频会议端点向所述切换器上传视频图像和指令信息包括:
所述多点视频会议端点中的所述声音定位录入装置,定位本会议端点中发言的会议参与者的位置,生成相应的控制指令至所述摄像装置,录入该发言会议参与者的语音信息;
所述多点视频会议端点中的所述摄像装置,根据所述声音定位录入装置或所述会议控制装置发出的控制指令,拍摄其对准区域的图像;
所述声音定位录入装置将所录入的该发言的会议参与者的语音信息与所述摄像装置拍摄到的图像共同传输并输出至所述切换器;
所述方法,还包括:
所述会议控制装置接收会议端点中会议参与者直接输入的控制指令并输出至所述切换器;
所述第一显示装置根据参与多点视频会议的会议端点中除本会议端点外其他会议端点中摄像装置拍摄到的视频图像,经过所述切换器处理切换发出的指令进行显示;
所述第二显示装置根据所述声音定位录入装置或所述会议控制装置发出经过所述切换器处理后发出的控制指令进行显示。
7.根据权利要求6所述的方法,其特征在于,若所述多点视频会议端点为主叫会议端点,则所述多点视频会议端点根据所述切换器的控制指令进行图像显示,包括:
所述多点视频会议端点中的第一显示装置,根据主叫会议端点呼叫的被叫会议端点中摄像装置拍摄到的视频图像,经过切换器处理切换发出的指令进行显示;
所述多点视频会议端点中的第二显示装置,用于根据所述多点视频会议端点中所述会议控制装置发出的经过切换器处理切换发出的指令,显示所述主叫会议端点上传的会议材料。
8.根据权利要求6所述的方法,其特征在于,若所述多点视频会议端点为被叫会议端点,则所述多点视频会议端点根据所述切换器的控制指令进行图像显示,包括:
所述多点视频会议端点中的第一显示装置,根据主叫会议端点中摄像装置拍摄到的视频图像,经过切换器处理切换发出的指令进行显示;
所述多点视频会议端点中的第二显示装置,根据所述声音定位录入装置发出的经过切换器处理切换发出的指令,显示参与多点视频会议的会议端点中除本会议端点和主叫会议端点外,其他会议端点有会议参与者发言的图像;若所述本会议端点中有会议参与者发言,则根据所述多点视频会议端点中的会议控制装置发出的经过切换器处理切换发出的指令进行显示。
9.根据权利要求6至8任一项所述的方法,其特征在于,所述方法还包括:
当若干个多点视频会议端点通过切换器建立连接后,所述切换器控制以发出第一指令或第二指令所在的多点视频会议端点为主叫会议端点,多点视频会议系统中其他会议端点为被叫会议端点,所述第一指令指示当首个会议参与者激活会议控制装置后,通过会议控制装置呼叫所需观看的多点视频会议端点的图像,该发出呼叫的会议端点自动成为主叫会议端点,所述第二指令指示当会议参与者激活会议控制装置后,通过会议控制装置激活上传数据材料,所述多点视频会议端点自动获得主叫权成为主叫会议端点。
10.根据权利要求9所述的方法,其特征在于,所述方法还包括:
所述切换器接收到各多点视频会议端点上传的多个独立图像,且没有接收到所述第二指令或第三指令时,进行图像合并和处理,输出至各多点视频会议端点,所述第三指令指示被叫会议端点中声音定位录入装置被激活,当声音定位录入装置覆盖范围内,会议参与者持续发言,声音定位录入装置对应的摄像装置所获得的图像上传到所述切换器,所述切换器将该图像发送到其他被叫会议端点第二显示装置中显示。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201310168185.2A CN104144315B (zh) | 2013-05-06 | 2013-05-06 | 一种多点视频会议的显示方法及多点视频会议系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201310168185.2A CN104144315B (zh) | 2013-05-06 | 2013-05-06 | 一种多点视频会议的显示方法及多点视频会议系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN104144315A CN104144315A (zh) | 2014-11-12 |
CN104144315B true CN104144315B (zh) | 2017-12-29 |
Family
ID=51853376
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201310168185.2A Active CN104144315B (zh) | 2013-05-06 | 2013-05-06 | 一种多点视频会议的显示方法及多点视频会议系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN104144315B (zh) |
Families Citing this family (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106851173A (zh) * | 2015-12-07 | 2017-06-13 | 北京航天长峰科技工业集团有限公司 | 一种跨网络的多方视频会议系统实现方法 |
CN105812717A (zh) * | 2016-04-21 | 2016-07-27 | 邦彦技术股份有限公司 | 多媒体会议控制方法及服务器 |
CN107332818B (zh) * | 2017-05-18 | 2020-10-30 | 西安万像电子科技有限公司 | 媒体数据的处理方法、装置和系统、存储介质及处理器 |
CN107124578A (zh) * | 2017-06-13 | 2017-09-01 | 成都全云科技有限公司 | 智能多位高清视频会议系统 |
JP7152191B2 (ja) * | 2018-05-30 | 2022-10-12 | シャープ株式会社 | 操作支援装置、操作支援システム、及び操作支援方法 |
CN110858883A (zh) * | 2018-08-24 | 2020-03-03 | 深圳市冠旭电子股份有限公司 | 一种智能音箱及智能音箱使用的方法 |
CN111586337B (zh) * | 2019-02-18 | 2022-01-25 | 阿里巴巴集团控股有限公司 | 音视频会议系统、控制方法、设备及存储介质 |
US20230007127A1 (en) * | 2019-12-13 | 2023-01-05 | Sony Group Corporation | Telepresence system |
CN111314625B (zh) * | 2020-02-19 | 2021-05-18 | 北京仁光科技有限公司 | 多信号源安全传输方法 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1917622A (zh) * | 2005-08-18 | 2007-02-21 | 北京德瑞塔时代网络技术有限公司 | 一种广播级宽带视频会议的声像传输系统及方法 |
CN101534413A (zh) * | 2009-04-14 | 2009-09-16 | 深圳华为通信技术有限公司 | 一种远程呈现的系统、装置和方法 |
CN102638672A (zh) * | 2011-02-09 | 2012-08-15 | 宝利通公司 | 用于多流多站点远程呈现会议系统的自动视频布局 |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20060066586A1 (en) * | 2004-09-27 | 2006-03-30 | Gally Brian J | Touchscreens for displays |
US8797377B2 (en) * | 2008-02-14 | 2014-08-05 | Cisco Technology, Inc. | Method and system for videoconference configuration |
-
2013
- 2013-05-06 CN CN201310168185.2A patent/CN104144315B/zh active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1917622A (zh) * | 2005-08-18 | 2007-02-21 | 北京德瑞塔时代网络技术有限公司 | 一种广播级宽带视频会议的声像传输系统及方法 |
CN101534413A (zh) * | 2009-04-14 | 2009-09-16 | 深圳华为通信技术有限公司 | 一种远程呈现的系统、装置和方法 |
CN102638672A (zh) * | 2011-02-09 | 2012-08-15 | 宝利通公司 | 用于多流多站点远程呈现会议系统的自动视频布局 |
Also Published As
Publication number | Publication date |
---|---|
CN104144315A (zh) | 2014-11-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN104144315B (zh) | 一种多点视频会议的显示方法及多点视频会议系统 | |
US10750124B2 (en) | Methods and system for simulated 3D videoconferencing | |
DE102015100911B4 (de) | Verbesserte Kommunikation zwischen entfernten Teilnehmern/Teilnehmerinnen mittels erweiterter und virtueller Realität | |
US9641585B2 (en) | Automated video editing based on activity in video conference | |
US8259155B2 (en) | Providing perspective-dependent views to video conference participants | |
US8300078B2 (en) | Computer-processor based interface for telepresence system, method and computer program product | |
CN101534413B (zh) | 一种远程呈现的系统、装置和方法 | |
CN109788236A (zh) | 音视频会议控制方法、装置、设备以及存储介质 | |
US20090244257A1 (en) | Virtual round-table videoconference | |
US11076127B1 (en) | System and method for automatically framing conversations in a meeting or a video conference | |
WO2018214746A1 (zh) | 一种视频会议实现方法、装置、系统及计算机存储介质 | |
CN107135207A (zh) | 一种全景会议直播方法及系统 | |
TW201235958A (en) | Remote conference management system and management method thereof | |
US20090146915A1 (en) | Multiple view display device | |
CN104380720B (zh) | 视频会议处理方法及设备 | |
CN102098443A (zh) | 一种摄像设备、通信系统和相应的图像处理方法 | |
JP4055539B2 (ja) | 双方向コミュニケーションシステム | |
US20230239436A1 (en) | Enhanced virtual and/or augmented communications interface | |
CN104349111A (zh) | 视频会议会场创建方法及系统 | |
EP4106326A1 (en) | Multi-camera automatic framing | |
WO2016206471A1 (zh) | 多媒体业务处理方法、系统及装置 | |
EP4002389A1 (en) | Operating room control and communication system | |
Kauff et al. | Virtual team user environments-a step from tele-cubicles towards distributed tele-collaboration in mediated workspaces | |
WO2013060295A1 (zh) | 一种视频处理方法和系统 | |
JP2011066745A (ja) | 端末装置、通信方法および通信システム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |