CN103051865B - 画面控制的方法及终端、视频会议装置 - Google Patents

画面控制的方法及终端、视频会议装置 Download PDF

Info

Publication number
CN103051865B
CN103051865B CN201210586124.3A CN201210586124A CN103051865B CN 103051865 B CN103051865 B CN 103051865B CN 201210586124 A CN201210586124 A CN 201210586124A CN 103051865 B CN103051865 B CN 103051865B
Authority
CN
China
Prior art keywords
sprite
video source
terminal
video
instruction
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201210586124.3A
Other languages
English (en)
Other versions
CN103051865A (zh
Inventor
马卫军
胡云
刘胜余
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huawei Technologies Co Ltd
Original Assignee
Huawei Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huawei Technologies Co Ltd filed Critical Huawei Technologies Co Ltd
Priority to CN201210586124.3A priority Critical patent/CN103051865B/zh
Publication of CN103051865A publication Critical patent/CN103051865A/zh
Priority to EP13867121.9A priority patent/EP2924987A4/en
Priority to PCT/CN2013/081259 priority patent/WO2014101428A1/zh
Priority to US14/754,197 priority patent/US9485465B2/en
Application granted granted Critical
Publication of CN103051865B publication Critical patent/CN103051865B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/15Conference systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/141Systems for two-way working between two video terminals, e.g. videophone
    • H04N7/147Communication arrangements, e.g. identifying the communication as a video-communication, intermediate storage of the signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/15Conference systems
    • H04N7/152Multipoint control units therefor

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Telephonic Communication Services (AREA)

Abstract

本发明提供一种画面控制的方法及终端、视频会议装置,其中,所述方法包括:在第一终端的多个画面上分别显示视频会议中的一个以上终端对应的视频时,第一终端接收用于替换多个画面中子画面的视频源的第一指令,第一指令包括:至少一个子画面的相对位置信息和用于指示至少一个子画面中新的视频源的指示信息;向视频会议装置发送包含第一指令的请求消息,使视频会议装置采用新的视频源替换至少一个子画面中当前的视频源,至少一个子画面为相对位置信息对应的至少一个子画面;接收视频会议装置发送的新的视频源对应的视频流,在新的视频源对应的子画面上显示新的视频源。上述方法解决了现有技术中多个画面视频源修改方式操作复杂、易用性差的问题。

Description

画面控制的方法及终端、视频会议装置
技术领域
本发明实施例涉及通信技术,尤其涉及一种画面控制的方法及终端、视频会议装置。
背景技术
多个画面是视频会议业务的一个基本功能,是指视频会议中与会者能够在终端上观看到多个与会者的视频画面。如图1所示,其中,终端A、B、C、D在同一个视频会议中,终端D可以在自己侧观看终端A、B、C发送的视频多个画面的情景。
多个画面有多种布局形式,但通常都包含一个较大的子画面(如图1中的子画面1)和多个相对较小的子画面(如图1中的子画面2、子画面3)。
其中,每个子画面对应的视频源(即子画面显示视频会议装置中哪一个终端的视频)是可以设置的,如图1所示,终端D上多个画面中的子画面1、子画面2、子画面3对应的视频源分别是终端A、B、C;会议中终端D可以对子画面的视频源进行修改。
当前的视频会议装置包括会议应用服务器(ApplicationServer,简称AS)和多点控制单元(MultipointControlUnit,简称MCU)。在MCU合成多个画面的视频会议装置中,如图2所示,MCU在会议AS的控制下将多路视频流按终端设置的多个画面形式进行合成后再发给终端,该终端只接收到一路合成后的视频流,因此终端无法感知多个画面的信息(比如子画面数、各子画面的排列位置、相对大小等)。
当终端修改各子画面对应的视频源时,终端只能通过视频会议装置提供的会议管理接口来修改/设置子画面对应的视频源。例如,终端D通过web浏览器访问视频会议装置的会议管理平台,输入登录帐号/密码或会议号(Identity,简称ID)/会议密码,鉴权通过后进入会议管理平台,进而打开多个画面控制界面,查看当前的多个画面;此时,终端D可在多个画面控制界面中选择子画面1,并设置视频源为终端B;选择子画面2,并设置视频源为终端A,提交操作;使得视频会议装置执行操作请求,视频会议装置的MCU根据指定的多个画面形式合成多个画面,发送至终端D,以使该终端D上显示修改后的多个画面。
上述多个画面中的视频源修改的方式操作复杂,易用性差。
发明内容
有鉴于此,本发明实施例提供一种画面控制的方法及终端、视频会议装置,用以解决现有技术中多个画面视频源修改方式操作复杂、易用性差的问题。
第一方面,提供了一种画面控制的方法,包括:
在第一终端的多个画面上分别显示视频会议中的一个以上终端分别对应的视频时,所述第一终端接收用于替换所述多个画面中至少一个子画面的视频源的第一指令,所述第一指令包括:至少一个子画面的相对位置信息,和用于指示所述至少一个子画面中新的视频源的指示信息,所述新的视频源是预先配置的;
向视频会议装置发送包含有所述第一指令的请求消息,以使所述视频会议装置采用新的视频源替换至少一个子画面中当前的视频源,所述至少一个子画面为与所述相对位置信息对应的至少一个子画面;
接收所述视频会议装置发送的所述新的视频源对应的视频流,在所述新的视频源对应的子画面上显示所述新的视频源。
结合第一方面,在第一种可能的实现方式中,所述视频会议装置采用新的视频源替换至少一个子画面中当前的视频源,所述至少一个子画面为与所述相对位置信息对应的至少一个子画面,包括:
所述视频会议装置根据预存的所述第一终端上的多个画面的信息,和所述至少一个子画面的相对位置信息,确定所述至少一个子画面的标识,并采用所述新的视频源替换与所述标识对应的子画面中当前的视频源。
结合第一方面,在第二种可能的实现方式中,所述第一终端接收用于替换所述多个画面中至少一个子画面的视频源的第一指令的步骤之前,还包括:
所述第一终端接收所述视频会议装置发送的多个画面的信息,所述多个画面的信息包括:多个画面中所有子画面的标识、与所述标识对应的子画面在所述多个画面中的排列位置,与所述标识对应的子画面的相对大小。
结合第一方面及第二种可能的实现方式,在第三种可能的实现方式中,所述第一终端接收用于替换所述多个画面中至少一个子画面的视频源的第一指令的步骤之后,还包括:
所述第一终端根据所述排列位置和所述相对大小,确定所述多个画面中每一子画面的坐标值范围;根据所述相对位置信息确定所述相对位置信息属于哪一个标识对应的子画面的坐标值范围,得到所述至少一个子画面的标识;
相应地,所述请求消息包括:所述至少一个子画面的标识和所述指示信息,则所述视频会议装置采用新的视频源替换至少一个子画面中当前的视频源,包括:
所述请求消息包括:所述至少一个子画面的标识和所述指示信息,则所述视频会议装置采用所述新的视频源替换与所述标识对应的子画面中当前的视频源。
结合第一方面及上述可能的实现方式,在第四种可能的实现方式中,所述第一终端接收用于替换所述多个画面中至少一个子画面的视频源的第一指令,具体为:
所述第一终端中预设有多个画面中对应的操作类型,若所述第一终端接收到用户接口传输的所述多个画面中对应的操作类型的信息,则所述第一终端得到所述第一指令中的指示信息;以及
所述第一终端得到所述指示信息之后,捕捉所述多个画面中的外部设备对应的焦点的相对位置信息,所述对应焦点的相对位置信息为所述至少一个子画面的相对位置信息。
第二方面,提供了一种画面控制的方法,包括:
视频会议装置接收第一终端发送的包含有第一指令的请求消息,所述第一终端的多个画面上分别显示视频会议中的一个以上终端分别对应的视频时,所述请求消息为所述第一终端接收用于替换所述多个画面中至少一个子画面的视频源的第一指令之后发送的,所述第一指令包括:至少一个子画面的相对位置信息,和用于指示所述至少一个子画面中新的视频源的指示信息;所述新的视频源是预先配置的;
采用所述新的视频源替换至少一个子画面中当前的视频源,所述至少一个子画面为与所述相对位置信息对应的至少一个子画面;
向所述第一终端发送所述新的视频源对应的视频流,以使所述第一终端在所述新的视频源对应的子画面上显示所述新的视频源。
结合第二方面,在第一种可能的实现方式中,所述视频会议装置接收第一终端发送的包含有第一指令的请求消息的步骤之前,还包括:
所述视频会议装置向所述第一终端发送所述多个画面的信息,所述多个画面的信息包括:多个画面中所有子画面的标识、与所述标识对应的子画面在所述多个画面中的排列位置,与所述标识对应的子画面的相对大小。
第三方面,提供了一种终端,所述终端的多个画面上分别显示视频会议中的一个以上终端分别对应的视频,所述终端包括:
接收单元,用于接收用于替换所述多个画面中至少一个子画面的视频源的第一指令,所述第一指令包括:至少一个子画面的相对位置信息,和用于指示所述至少一个子画面中新的视频源的指示信息,所述新的视频源是预先配置的;
发送单元,用于在所述接收单元接收所述第一指令之后,向视频会议装置发送包含有所述第一指令的请求消息,以使所述视频会议装置采用新的视频源替换至少一个子画面中当前的视频源,所述至少一个子画面为与所述相对位置信息对应的至少一个子画面;
所述接收单元,还用于在所述发送单元发送所述请求消息之后,接收所述视频会议装置发送的所述新的视频源对应的视频流,在所述新的视频源对应的子画面上显示所述新的视频源。
结合第三方面,在第一种可能的实现方式中,所述发送单元,具体用于
在所述接收单元接收所述第一指令之后,向视频会议装置发送包含有所述第一指令的请求消息,以使所述视频会议装置根据预存的所述第一终端上的多个画面的信息,和所述至少一个子画面的相对位置信息,确定所述至少一个子画面的标识,并采用所述新的视频源替换与所述标识对应的子画面中当前的视频源。
结合第三方面,在第二种可能的实现方式中,所述接收单元,还用于
在接收所述第一指令之前,接收所述视频会议装置发送的多个画面的信息,所述多个画面的信息包括:多个画面中所有子画面的标识、与所述标识对应的子画面在所述多个画面中的排列位置,与所述标识对应的子画面的相对大小。
结合第三方面及第二种可能的实现方式,在第三种可能的实现方式中,所述终端还包括:确定单元,
所述确定单元,用于在所述接收单元接收所述第一指令之后,根据所述排列位置和所述相对大小,确定所述多个画面中每一子画面的坐标值范围;根据所述相对位置信息确定所述相对位置信息属于哪一个标识对应的子画面的坐标值范围,得到所述至少一个子画面的标识;
所述发送单元,具体用于
在所述确定单元得到所述至少一个子画面的标识之后,向视频会议装置发送包含有所述第一指令的请求消息,所述请求消息包括:至少一个子画面的标识和所述指示信息,以使所述视频会议装置采用所述新的视频源替换与所述标识对应的子画面中当前的视频源。
第四方面,提供了一种视频会议装置,包括:
接收单元,用于接收第一终端发送的包含有第一指令的请求消息,所述第一终端的多个画面上分别显示视频会议中的一个以上终端分别对应的视频时,所述请求消息为所述第一终端接收用于替换所述多个画面中至少一个子画面的视频源的第一指令之后发送的,所述第一指令包括:至少一个子画面的相对位置信息,和用于指示所述至少一个子画面中新的视频源的指示信息;所述新的视频源是预先配置的;
替换单元,用于在所述接收单元接收所述请求消息之后,采用所述新的视频源替换至少一个子画面中当前的视频源,所述至少一个子画面为与所述相对位置信息对应的至少一个子画面;
发送单元,用于在所述替换单元采用所述新的视频源替换之后,向所述第一终端发送所述新的视频源对应的视频流,以使所述第一终端在所述新的视频源对应的子画面上显示所述新的视频源。
结合第四方面,在第一种可能的实现方式中,所述发送单元,还用于
在所述接收单元接收所述请求消息之前,向所述第一终端发送所述多个画面的信息,所述多个画面的信息包括:多个画面中所有子画面的标识、与所述标识对应的子画面在所述多个画面中的排列位置,与所述标识对应的子画面的相对大小。
第五方面,提供了一种会议系统,包括:终端和视频会议装置;
其中,所述终端的多个画面上分别显示视频会议中的一个以上终端分别对应的视频时,接收用于替换所述多个画面中至少一个子画面的视频源的第一指令,所述第一指令包括:至少一个子画面的相对位置信息,和用于指示所述至少一个子画面中新的视频源的指示信息,所述新的视频源是预先配置的;
所述终端向所述视频会议装置发送包含有所述第一指令的请求消息;
所述视频会议装置在接收所述请求消息之后,采用新的视频源替换至少一个子画面中当前的视频源,所述至少一个子画面为与所述相对位置信息对应的至少一个子画面,以及向所述终端发送所述新的视频源对应的视频流;
所述终端接收所述视频会议装置发送的所述新的视频源对应的视频流之后,在所述新的视频源对应的子画面上显示所述新的视频源。
结合第五方面,在第一种可能的实现方式中,所述视频会议装置在接收所述请求消息之后,采用新的视频源替换至少一个子画面中当前的视频源,所述至少一个子画面为与所述相对位置信息对应的至少一个子画面,具体为:
所述视频会议装置在接收所述请求消息之后,根据预存的所述第一终端上的多个画面的信息,和所述至少一个子画面的相对位置信息,确定所述至少一个子画面的标识,并采用所述新的视频源替换与所述标识对应的子画面中当前的视频源。
结合第五方面,在第二种可能的实现方式中,所述终端接收所述第一指令之前,接收所述视频会议装置发送的多个画面的信息,所述多个画面的信息包括:多个画面中所有子画面的标识、与所述标识对应的子画面在所述多个画面中的排列位置,与所述标识对应的子画面的相对大小。
结合第五方面及第二种可能的实现方式,在第三种可能的实现方式中,所述终端接收所述第一指令之后,根据所述排列位置和所述相对大小,确定所述多个画面中每一子画面的坐标值范围;根据所述相对位置信息确定所述相对位置信息属于哪一个标识对应的子画面的坐标值范围,得到所述至少一个子画面的标识;
相应地,所述请求消息包括:所述至少一个子画面的标识和所述指示信息;
所述视频会议装置采用新的视频源替换至少一个子画面中当前的视频源,具体为,
所述视频会议装置采用所述新的视频源替换与所述标识对应的子画面中当前的视频源。
由上述技术方案可知,本发明实施例的画面控制的方法及终端、视频会议装置,通过第一终端接收用于替换所述多个画面中至少一个子画面的视频源的第一指令,进而向视频会议装置发送包含有所述第一指令的请求消息,使得所述视频会议装置采用新的视频源替换至少一个子画面中当前的视频源,所述至少一个子画面为与所述相对位置信息对应的至少一个子画面,进而终端接收所述视频会议装置发送的所述新的视频源对应的视频流,在所述新的视频源对应的子画面上显示所述新的视频源,由此,可以解决现有技术中多个画面视频源修改方式操作复杂、易用性差的问题。
附图说明
为了更清楚地说明本发明的技术方案,下面将对实施例中所需要使用的附图作一简单地介绍,显而易见地:下面附图只是本发明的一些实施例的附图,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得同样能实现本发明技术方案的其它附图。
图1为当前视频会议装置中多个画面的场景图;
图2为当前视频会议装置中多个画面的形成示意图;
图3A为本发明一实施例提供的画面控制的方法的流程示意图;
图3B为本发明一实施例提供的画面控制的方法的流程示意图;
图4A为本发明一实施例提供的画面控制的方法的流程示意图;
图4B为本发明一实施例提供的画面控制的方法的流程示意图;
图5为本发明一实施例提供的画面控制的方法的流程示意图;
图6为本发明一实施例提供的终端的结构示意图;
图7为本发明一实施例提供的视频会议装置的结构示意图;
图8为本发明一实施例提供的会议系统的结构示意图;
图9为本发明另一实施例提供的终端的结构示意图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明的技术方案进行清楚、完整地描述。显然,下述的各个实施例都只是本发明一部分的实施例。基于本发明下述的各个实施例,本领域普通技术人员即使没有作出创造性劳动,也可以通过等效变换部分甚至全部的技术特征,而获得能够解决本发明技术问题,实现本发明技术效果的其它实施例,而这些变换而来的各个实施例显然并不脱离本发明所公开的范围。
为描述方便,下述在某些地方将终端上显示的多个画面中较大的子画面称为主画面,多个画面中较小的子画面称为辅画面。
图3A为本发明一实施例提供的画面控制的方法的流程示意图,如图3所示,本实施例中的画面控制的方法如下所述。
301、在第一终端的多个画面上分别显示视频会议中的一个以上终端分别对应的视频时,所述第一终端接收用于替换所述多个画面中至少一个子画面的视频源的第一指令,所述第一指令包括:至少一个子画面的相对位置信息,和用于指示所述至少一个子画面中新的视频源的指示信息,所述新的视频源是预先配置的。
举例来说,第一终端上的多个画面中显示视频会议中的一个以上终端分别对应的视频,该一个以上的终端可以包括第一终端。也就是说,处于视频会议中的第一终端还可以显示自己的视频。
在本实施例中,第一终端上仅能够获取的是待更换视频源的至少一个子画面的相对位置信息,例如,更换视频源的一个子画面位于多个画面的左上角,或者,更换视频源的一个子画面位于多个画面的右下角等;但是第一终端是无法获知上述更换视频源的子画面具体是多个画面中的哪一个子画面,以及该子画面的排列位置等信息。
另外,本实施例中,将第一终端上显示的多个子画面组成的整个画面称为多个画面,结合图1所示,图1右侧的终端D上显示多个画面包括:子画面1、子画面2、子画面3,以及子画面对应的视频源为终端A、子画面2对应的视频源为终端B,子画面3对应的视频源为终端C等。
302、第一终端向视频会议装置发送包含有所述第一指令的请求消息,以使所述视频会议装置采用新的视频源替换至少一个子画面中当前的视频源,所述至少一个子画面为与所述相对位置信息对应的至少一个子画面。
在一种可能的应用场景中,步骤302可具体为:第一终端向视频会议装置发送包含有所述第一指令的请求消息,以使视频会议装置根据预存的所述第一终端上的多个画面的信息,和所述至少一个子画面的相对位置信息,确定所述至少一个子画面的标识,并采用所述新的视频源替换与所述标识对应的子画面中当前的视频源。
举例来说,子画面的标识可为子画面的编号,如子画面1、子画面2等。
应理解,在本实施例中,第一终端上仅显示多个画面,但是对多个画面的信息终端是无法获知的,举例来说,多个画面的信息可包括:子画面的标识,与标识对应的子画面在多个画面中的排列位置、与标识对应的子画面的相对大小等。
在其他实施例中,多个画面的信息可包括:子画面的数量、子画面标识,与标识对应的子画面在多个画面中的排列位置、与标识对应的子画面的相对大小及与标识对应的子画面中当前的视频源等。
需说明的是,子画面在多个画面中的排列位置可为子画面在多个画面中的相对排列位置,本实施例为与上述步骤301中的相对位置进行区分,采用排列位置进行描述。
303、第一终端接收所述视频会议装置发送的所述新的视频源对应的视频流,在所述新的视频源对应的子画面上显示所述新的视频源。
可选地,在其他实施例中,第一终端还可接收所述视频会议装置发送的操作成功响应。
举例来说,在一种可选的实现场景中,上述步骤301中的“第一终端接收用于替换所述多个画面中至少一个子画面的视频源的第一指令”,可具体表现为:
所述第一终端预设有多个画面中对应的操作类型(比如切换子画面视频源的触屏滑动操作、增加新的子画面的快捷键操作/菜单操作、更换多个画面中某一子画面视频源的双击操作等),若所述第一终端接收到用户接口传输的所述多个画面中对应的操作类型的信息/响应,则所述第一终端得到所述第一指令中的指示信息;以及
所述第一终端得到所述指示信息之后,捕捉所述多个画面中的外部设备对应的焦点的相对位置信息,所述对应焦点的相对位置信息为所述至少一个子画面的相对位置信息。
举例来说,与会者/用户在第一终端上的多个画面中进行双击操作,第一终端可接收到用户接口传输的所述多个画面中对应的一个替换子画面视频源的操作类型所配置的指示信息,所述指示信息包括:用于指示当前子画面(及当前辅画面)对应的视频源与所述多个画面中主画面对应的视频源替换的指示信息;
所述第一终端得到所述指示信息之后,捕捉子画面中的外部设备(如鼠标)对应的焦点的相对位置信息,所述对应焦点的相对位置信息为所述至少一个子画面的相对位置信息,即得到所述第一指令中的当前子画面的相对位置信息。
特别地,上述举例的是第一终端先获取指示信息,再获取当前子画面的相对位置信息;在另一场景中,第一终端还可先获取当前子画面的相对位置信息,再获取指示信息等,本实施例不对该处的顺序进行限定,其根据实际需要进行设置。
上述第一终端中预设的操作类型还可包括:拖拽、单击等,本实施例不对操作类型进行限定,其他能够实现操作类型均可设置。
由上述实施例可知,本实施例的画面控制的方法,通过第一终端接收用于替换所述多个画面中至少一个子画面的视频源的第一指令,进而向视频会议装置发送包含有所述第一指令的请求消息,使得所述视频会议装置采用新的视频源替换至少一个子画面中当前的视频源,所述至少一个子画面为与所述相对位置信息对应的至少一个子画面,进而终端接收所述视频会议装置发送的所述新的视频源对应的视频流,在所述新的视频源对应的子画面上显示所述新的视频源,由此,可以解决现有技术中多个画面视频源修改方式操作复杂、易用性差的问题。
图3B为本发明一实施例提供的画面控制的方法的流程示意图,如图3B所示,本实施例中的画面控制的方法如下所述。
终端A、B、C、D在视频会议中,终端D在终端侧观看终端A、B、C发送的视频,其中终端A对应的视频为主画面,终端B、C分别对应视频为辅助画面。
311、终端D通过鼠标双击多个画面中的某一子画面中的一个位置。
312、终端D接收到用户接口传输的所述多个画面中对应的外部设备双击某一个子画面的操作类型的信息,则终端D得到指示信息,所述指示信息包括:用于指示当前子画面对应的视频源与所述所画面布局中主画面(即另一子画面)对应的视频源切换的指示信息。
313、终端D得到上述的指示信息之后,捕捉多个画面的子画面中外部设备对应的焦点(如鼠标所在的点)的相对位置信息(X,Y),所述对应的焦点的相对位置信息为当前子画面的相对位置信息,即得到当前子画面的相对位置信息。
具体地,终端D捕捉外部设备(如鼠标)双击操作类型之后,该鼠标的焦点在多个画面显示的视频窗口中的相对位置信息(X,Y),如图中左侧的左上角的(X,Y)。
本实施例中,双击操作类型表示终端D需要将该子画面中播放的视频源切换到主画面中播放,主画面对应的视频源在当前子画面中播放。
314、终端D给视频会议装置中的会议AS发送请求消息,如SIP(SessionInitiationProtocol)INFO(INFO是SIP的一个消息类型),所述请求消息包括:步骤312中的指示信息、步骤313中获取的当前子画面的相对位置信息(X,Y)。
315、视频会议装置中的会议AS接收所述请求消息之后,根据待更换视频源的当前子画面的相对位置信息(X,Y)和视频会议装置中存储的终端D上显示的多个画面的信息确定待更换视频源的子画面的标识(子画面2)、当前的主画面对应的视频源的信息,以及与标识对应的当前子画面对应的视频源的信息。
也就是说,会议AS处理终端D发送的请求消息,根据终端D当前的多个画面的信息和当前子画面的相对位置信息(X,Y)计算操作对象即确定是对哪一个子画面进行操作。
举例来说,会议AS根据终端D当前的多个画面信息(如子画面的标识,与标识对应的子画面在多个画面中的排列位置,与标识对应的子画面的相对大小以及与标识对应的子画面中当前的视频源等),以及请求消息中的相对位置信息(X,Y),判断鼠标的焦点位于哪个子画面,该子画面即是操作对象,图3B中显示的为子画面2。
316、会议AS给MCU发送切换消息,所述切换消息用于指示MCU将终端D当前观看的主画面视频源切换为被操作对象(子画面2)播放的视频源(终端B),以及将操作对象(子画面2)的视频源切换为主画面播放的视频源。
317、MCU接收上述的切换消息之后,将被操作对象(子画面2)对应的视频源切换为主画面原来的视频源(终端A),以及将主画面原来的视频源(终端A)替换操作对象(子画面2)原来的视频源(终端B)。
也就是说,视频会议装置的MCU根据所述指示信息采用新的视频源替换所述标识对应的子画面中的视频源。
318、MCU给会议AS返回所述切换消息的视频切换操作中的成功响应,以及将所述新的视频源对应的视频流发送终端D。
319、会议AS在接收所述视频切换操作成功响应之后,向终端D返回操作成功响应。
320、终端D接收会议AS发送的操作成功响应,以及接收所述新的视频源对应的视频流,并在所述新的视频源对应的子画面上显示所述新的视频源,如观看的主画面对应视频为终端B;子画面2对应的视频为终端A。
应理解,视频会议中的各终端均可通过双击(或滑动、拖拽、菜单选择等)操作多个画面中的视频窗口时,终端确定操作类型,并捕捉外部设备双击焦点在视频窗口中的相对位置信息(X,Y),然后向会议AS发携带操作类型和外部设备操作焦点的相对位置信息等参数的请求消息,进而会议AS收到请求消息后根据操作焦点的相对位置信息和终端上当前的多个画面信息进行计算,判断出被操作对象(如图中的子画面2),并获取被操作对象当前的视频源(如终端B),然后给MCU发送切换消息,以根据采用新的视频源替换所述标识对应的子画面中的视频源。
由此,使得终端切换多个画面中的各子画面对应的视频源的方式简单,进而可以解决现有技术中多个画面视频源修改方式操作复杂、易用性差的问题。
本实施例中多个画面是由视频会议装置的MCU合成的,终端A、B、C、D并不感知多个画面信息,如子画面标识,与标识对应的子画面在多个画面中的排列位置等;进而直接在终端D上对视频画面进行操作(比如双击、滑动、拖拽、菜单选择等)时需要终端D和视频会议装置配合才能决定操作对象。
图4A为本发明一实施例提供的画面控制的方法的流程示意图,如图4A所示,本实施例中的画面控制的方法如下所述。
401、在第一终端的多个画面上分别显示视频会议中的一个以上终端分别对应的视频时,第一终端接收所述视频会议装置发送的多个画面的信息,所述多个画面的信息包括:子画面的标识,与所述标识对应的子画面在所述多个画面中的排列位置、与所述标识对应的子画面的相对大小等。
在其他实施例中,多个画面的信息还可包括:子画面的数量、子画面标识,与所述标识对应的子画面在多个画面中的排列位置、与所述标识对应的子画面的相对大小,及与所述标识对应的子画面中当前的视频源等。本实施例仅为举例说明。
402、所述第一终端接收用于替换所述多个画面中至少一个子画面的视频源的第一指令,所述第一指令包括:至少一个子画面的相对位置信息,和用于指示所述至少一个子画面中新的视频源的指示信息,所述新的视频源是预先配置的。
403、所述第一终端根据所述排列位置和所述相对大小,确定所述多个画面中每一子画面的坐标值范围;根据所述相对位置信息确定所述相对位置信息属于哪一个标识对应的子画面的坐标值范围,得到所述至少一个子画面的标识。
在其他实施例中,若多个画面的信息中包括:与标识对应的子画面中当前的视频源的信息,则该步骤403中第一终端还可根据子画面的标识确定该子画面对应的视频源。
404、第一终端向视频会议装置发送包含有所述第一指令的请求消息,以使所述视频会议装置采用新的视频源替换至少一个子画面中当前的视频源,所述至少一个子画面为与所述相对位置信息对应的至少一个子画面。
具体地,在可选的实现过程中,所述请求消息包括:所述至少一个子画面的标识和所述指示信息。相应地,所述视频会议装置可采用所述新的视频源替换与所述标识对应的子画面中当前的视频源
在其他实施例中,上述的请求消息还可包括:与子画面的标识对应的视频源。
405、第一终端接收所述视频会议装置发送的所述新的视频源对应的视频流,在所述新的视频源对应的子画面上显示所述新的视频源。
在优选实施例中,第一终端还可接收视频会议装置发送的操作成功响应。
本实施例中的画面控制的方法,使得终端切换多个画面中的各子画面对应的视频源的方式简单,进而可以解决现有技术中多个画面视频源修改方式操作复杂、易用性差的问题。
举例来说,步骤301或步骤402中的“第一终端接收用于替换所述多个画面中至少一个子画面的视频源的第一指令,所述第一指令包括:至少一个子画面的相对位置信息,和用于指示所述至少一个子画面中新的视频源的指示信息”,若第一指令为用于切换多个画面中两个子画面的视频源的第一指令,则第一指令可以包括如下几种可能的信息:
第一:所述第一终端接收用于替换所述多个画面中两个视频源的第一指令,所述第一指令包括:第一子画面的相对位置信息,用于指示第一子画面对应的视频源和第二子画面对应的视频源切换的指示信息,所述第一指令还包括第二子画面的标识;
也就是说,第一指令中的相对位置信息为第一子画面的相对位置信息,第一指令中的指示信息为用于指示第一子画面对应的视频源和第二子画面对应的视频源切换的指示信息,所述第一指令还包括第二子画面的标识;
第二:所述第一终端接收用于替换所述多个画面中两个视频源的第一指令,所述第一指令包括:第一子画面的相对位置信息,第二子画面的相对位置信息,用于指示所述第一子画面对应的新的视频源的指示信息,和用于指示所述第二子画面对应的新的视频源的指示信息;
也就是说,第一指令中的相对位置信息包括:第一子画面的相对位置信息,和第二子画面的相对位置信息;所述指示信息包括:用于指示所述第一子画面对应的新的视频源的指示信息,和用于指示所述第二子画面对应的新的视频源的指示信息;
第三:所述第一终端接收用于替换所述多个画面中两个视频源的第一指令,所述第一指令包括:第一子画面的相对位置信息,第二子画面的相对位置信息,用于指示所述第一子画面对应的、所述第二子画面对应的新的视频源的指示信息;
也就是说,所述第一指令中的相对位置信息包括:第一子画面的相对位置信息和第二子画面的相对位置信息,所述指示信息包括:用于指示所述第一子画面对应的所述第二子画面对应的新的视频源的指示信息。
图4B为本发明一实施例提供的画面控制的方法的流程示意图,如图4B所示,本实施例中的画面控制的方法如下所述。
终端A、B、C、D在视频会议中,终端D在终端侧观看终端A、B、C的视频,其中终端A对应的视频为主画面,终端B、C分别对应的视频为辅助画面。
411、视频会议装置的会议AS向终端D发送会话内消息,会话内消息中携带多个画面的信息,多个画面的信息包括:子画面标识,与标识对应的子画面在多个画面中的排列位置、与标识对应的子画面的相对大小等。
可以理解的是,当多个画面的信息发生改变时,比如子画面3变为子画面4时,会议AS可重新向终端发上述的包括多个画面的信息的会话内消息。
412、终端D保存接收的上述的多个画面的信息。
413、终端D通过鼠标双击多个画面中的一子画面中的某一个位置。
414、终端D接收到用户接口传输的所述多个画面中对应的外部设备双击某一个子画面的操作类型,则终端D得到指示信息,所述指示信息包括:用于指示当前子画面对应的视频源与所述所画面布局中主画面(子画面1)对应的视频源切换的指示信息。
415、终端D得到上述的指示信息之后,捕捉多个画面的子画面中外部设备的焦点(如鼠标所在的点)的相对位置信息(X,Y),则得到当前子画面的相对位置信息。
也就是说,终端D捕捉外部设备双击操作类型之后,该外部设备对应的焦点在多个画面的视频窗口中的相对位置信息(X,Y)。
本例中,本实施例中,双击操作类型表示终端D需要将该子画面中播放的视频源切换到主画面中播放,主画面对应的视频源在当前子画面中播放。
416、第一终端在触发第一指令之后,根据所述多个画面的信息,和步骤415中捕捉的多个画面的子画面中外部设备对应的焦点(如鼠标所在的点)的相对位置信息(X,Y)确定子画面的标识,如子画面2。
417、终端D向视频会议装置的会议AS发送请求消息,如SIPINFO,请求消息携带上述步骤414中的指示信息和步骤416中的子画面的标识如子画面2。
在其他实施例中,该处的请求消息还可以是用户数据包协议(UserDatagramProtocol,简称UDP),传输控制协议(TransmissionControlProtocol,简称TCP),超文本传输协议(Hypertexttransferprotocol,简称HTTP),简单对象访问协议(SOAP)等承载的请求消息。
418、会议AS接收请求消息之后,获取当前的主画面对应的视频源的信息,以及获取当前子画面2对应的视频源的信息。
在一种可选的实现方式中,上述步骤416中,第一终端可以根据保存的多个画面的信息确定子画面的标识对应的视频源,以及主画面对应的视频源的信息,进而在步骤417中,请求消息可包括:子画面的标识对应的视频源,以及主画面对应的视频源的信息等内容,进而在步骤418中,会议AS在接收第二请求消息之后,不再获取视频源的信息。
419、会议AS向MCU发切换消息,所述切换消息用于指示MCU将终端D当前观看的主画面视频源切换为子画面2播放的视频源,以及将子画面2的视频源切换为主画面播放的视频源。
420、MCU接收切换消息之后,将子画面2对应的视频源切换为主画面原来的视频源(终端A),以及将主画面原来的视频源(终端A)切换子画面2原来的视频源(终端B),并向会议AS返回所述切换消息的视频切换操作成功响应;以及
将所述新的视频源对应的视频流发送终端D。
421、会议AS在接收所述视频切换操作成功响应之后,向终端D返回操作成功响应。
422、终端D接收会议AS发送的操作成功响应,以及接收所述新的视频源对应的视频流,在所述新的视频源对应的子画面上显示所述新的视频源(如图4B中,显示视频源切换后的多个画面,观看的主画面视频为用户B;子画面2的视频为用户A)。
本实施例中,使用多个画面时会议AS可给终端D发送多个画面的信息,终端将该多个画面的信息保存在本地。当终端D上外部设备双击(或拖拽、菜单选择等)视频画面时,终端确定操作类型,并捕捉外部设备双击焦点在视频窗口中的相对位置信息(X,Y),并根据相对位置信息和保存的多个画面的信息计算被操作对象(如子画面2);然后给会议AS发送携带操作类型和被操作对象的请求消息,会议AS可获取被操作对象当前的视频源,然后给MCU发送切换消息,以根据采用新的视频源替换所述标识对应的子画面中的视频源。
由此,上述方法允许终端直接在多个画面的视频窗口上进行简单操作(比如通过鼠标或触摸屏点击、拖拽、菜单选择等)实现子画面视频源的切换,使得终端切换多个画面中的各子画面对应的视频源的方式简单,进而可以解决现有技术中多个画面视频源修改方式操作复杂、容易误操作,且易用性差的问题。
图5为本发明一实施例提供的画面控制的方法的流程示意图,如图5所示,本实施例中的画面控制的方法如下所述。
501、视频会议装置接收第一终端发送的包含有第一指令的请求消息,所述第一终端的多个画面上分别显示视频会议中的一个以上终端分别对应的视频时,所述请求消息为所述第一终端接收用于替换所述多个画面中至少一个子画面的视频源的第一指令之后发送的,所述第一指令包括:至少一个子画面的相对位置信息,和用于指示所述至少一个子画面中新的视频源的指示信息;所述新的视频源是预先配置的;
502、视频会议装置采用所述新的视频源替换至少一个子画面中当前的视频源,所述至少一个子画面为与所述相对位置信息对应的至少一个子画面;
503、视频会议装置向所述第一终端发送所述新的视频源对应的视频流,以使所述第一终端在所述新的视频源对应的子画面上显示所述新的视频源。
举例来说,在一种可选的实现场景中,上述的步骤502可具体为:
在所述请求消息包括:所述至少一个子画面的相对位置信息和所述指示信息时,所述视频会议装置根据所述至少一个子画面的相对位置信息确定所述至少一个子画面的标识,并采用所述指示信息中指示的新的视频源替换与所述标识对应的子画面中当前的视频源。
在另一种可选的实现场景中,步骤501之前,上述的画面控制的方法还可包括如下的图中未示出的步骤500:
500、所述视频会议装置向所述第一终端发送所述多个画面的信息,所述多个画面的信息包括:子画面的标识,与所述标识对应的子画面在所述多个画面中的排列位置,与所述标识对应的子画面的相对大小。
相应地,上述的骤502可具体为:
在所述请求消息包括:所述至少一个子画面的标识,和所述指示信息时,所述视频会议装置采用所述指示信息中指示的新的视频源替换与所述标识对应的子画面中当前的视频源;
其中,所述至少一个子画面的标识为所述第一终端根据接收的所述多个画面的信息和所述至少一个子画面的相对位置信息确定的至少一个子画面的标识。
当然,在其他实施例中,上述的多个画面的信息可包括:子画面的数量、子画面的标识,与标识对应的子画面在多个画面中的排列位置、与标识对应的子画面的相对大小,以及与标识对应的子画面中当前的视频源等信息。
本实施例中的画面控制的方法,使得终端切换多个画面中的各子画面对应的视频源的方式简单,进而可以解决现有技术中多个画面视频源修改方式操作复杂、易用性差的问题。
根据本发明的另一方面,本发明还提供一种终端,如图6所示,所述终端处于视频会议中,且该终端上的多个画面显示所述视频会议中的一个以上终端分别对应的视频,本实施例中的终端包括:接收单元61和发送单元62;
其中,接收单元61用于接收用于替换所述多个画面中至少一个子画面的视频源的第一指令,所述第一指令包括:至少一个子画面的相对位置信息,和用于指示所述至少一个子画面中新的视频源的指示信息,所述新的视频源是预先配置的;
发送单元62用于在所述接收单元61接收所述第一指令之后,向视频会议装置发送包含有所述第一指令的请求消息,以使所述视频会议装置采用新的视频源替换至少一个子画面中当前的视频源,所述至少一个子画面为与所述相对位置信息对应的至少一个子画面;
接收单元61还用于在所述发送单元62发送所述请求消息之后,接收所述视频会议装置发送的所述新的视频源对应的视频流,在所述新的视频源对应的子画面上显示所述新的视频源。
在一种应用场景中,上述的发送单元62可具体用于,在所述接收单元61接收所述第一指令之后,向视频会议装置发送包含有所述第一指令的请求消息,以使所述视频会议装置根据预存的所述第一终端上的多个画面的信息,和所述至少一个子画面的相对位置信息,确定所述至少一个子画面的标识,并采用所述新的视频源替换与所述标识对应的子画面中当前的视频源。
在另一应用场景中,接收单元61还用于,在接收所述第一指令之前,接收所述视频会议装置发送的多个画面的信息,所述多个画面的信息包括:多个画面中所有子画面的标识、与所述标识对应的子画面在所述多个画面中的排列位置,与所述标识对应的子画面的相对大小。
此时,终端还可包括图中未示出的确定单元63;该确定单元63用于在所述接收单元61接收所述第一指令之后,根据所述排列位置和所述相对大小,确定所述多个画面中每一子画面的坐标值范围;根据所述相对位置信息确定所述相对位置信息属于哪一个标识对应的子画面的坐标值范围,得到所述至少一个子画面的标识;
相应地,所述发送单元62具体用于,在所述确定单元63得到所述至少一个子画面的标识之后,向视频会议装置发送包含有所述第一指令的请求消息,所述请求消息包括:至少一个子画面的标识和所述指示信息,以使所述视频会议装置采用所述新的视频源替换与所述标识对应的子画面中当前的视频源。
上述终端使得切换多个画面中的各子画面对应的视频源的方式简单,可以解决现有技术中多个画面视频源修改方式操作复杂、易用性差的问题。
根据本发明的另一方面,本发明还提供一种视频会议装置,如图7所示,本实施例中的视频会议装置包括:接收单元71、替换单元72、发送单元73;
其中,接收单元71,用于接收第一终端发送的包含有第一指令的请求消息,所述第一终端的多个画面上分别显示视频会议中的一个以上终端分别对应的视频时,所述请求消息为所述第一终端接收用于替换所述多个画面中至少一个子画面的视频源的第一指令之后发送的,所述第一指令包括:至少一个子画面的相对位置信息,和用于指示所述至少一个子画面中新的视频源的指示信息;所述新的视频源是预先配置的;
替换单元72用于在所述接收单元71接收所述请求消息之后,采用所述新的视频源替换至少一个子画面中当前的视频源,所述至少一个子画面为与所述相对位置信息对应的至少一个子画面;
发送单元73用于在所述替换单元72采用新的视频源替换之后,向所述第一终端发送所述新的视频源对应的视频流,以使所述第一终端在所述新的视频源对应的子画面上显示所述新的视频源。
在一种可选的实现方式中,上述的发送单元73还用于,在所述接收单元71接收所述请求消息之前,向所述第一终端发送所述多个画面的信息,所述多个画面的信息包括:多个画面中所有子画面的标识、与所述标识对应的子画面在所述多个画面中的排列位置,与所述标识对应的子画面的相对大小。
相应地,所述替换单元72具体用于,在所述接收单元71接收所述请求消息之后,所述请求消息包括:所述指示信息,和所述第一终端根据接收的所述多个画面的信息和所述至少一个子画面的相对位置信息确定的至少一个子画面的标识;采用所述指示信息中指示的新的视频源替换与所述标识对应的子画面中当前的视频源。
上述视频会议装置和终端结合,可以使得终端切换多个画面中的各子画面对应的视频源的方式简单,进而解决现有技术中多个画面视频源修改方式操作复杂、易用性差的问题。
需要说明的是,以上终端和视频会议装置的实施例中,各功能单元的划分仅是举例说明,实际应用中可以根据需要,例如相应硬件的配置要求或者软件的实现的便利考虑,而将上述功能分配由不同的功能单元完成,即将所述终端的内部结构划分成不同的功能单元,以完成以上描述的全部或者部分功能。而且,实际应用中,本实施例中的相应的功能单元可以是由相应的硬件实现,也可以由相应的硬件执行相应的软件完成,例如,前述的发送单元,可以是具有执行前述发送单元功能的硬件,例如发射器,也可以是能够执行相应计算机程序从而完成前述功能的一般处理器或者其他硬件设备;再如,前述的接收单元,可以是具有执行前述接收单元功能的硬件,例如接收器,也可以是能够执行相应计算机程序从而完成前述功能的一般处理器或者其他硬件设备;(本说明书提供的各个实施例都可应用上述描述原则)。
根据本发明的另一方面,本发明还提供一种会议系统,如图8所示,所述会议系统包括:终端81和视频会议装置82;
其中,所述终端81所述终端的多个画面上分别显示视频会议中的一个以上终端分别对应的视频时,接收用于替换所述多个画面中至少一个子画面的视频源的第一指令,所述第一指令包括:至少一个子画面的相对位置信息,和用于指示所述至少一个子画面中新的视频源的指示信息,所述新的视频源是预先配置的;
所述终端81向所述视频会议装置82发送包含有所述第一指令的请求消息;
所述视频会议装置82在接收所述请求消息之后,采用新的视频源替换至少一个子画面中当前的视频源,所述至少一个子画面为与所述相对位置信息对应的至少一个子画面,以及向所述终端发送所述新的视频源对应的视频流;
所述终端81接收所述视频会议装置82发送的所述新的视频源对应的视频流之后,在所述新的视频源对应的子画面上显示所述新的视频源。
在一种可选的实现场景中,所述视频会议装置82在接收所述终端81发送的请求消息之后,采用新的视频源替换至少一个子画面中当前的视频源,所述至少一个子画面为与所述相对位置信息对应的至少一个子画面,具体为:
所述视频会议装置82在接收所述请求消息之后,根据预存的所述第一终端上的多个画面的信息,和所述至少一个子画面的相对位置信息,确定所述至少一个子画面的标识,并采用所述新的视频源替换与所述标识对应的子画面中当前的视频源。
在另一种可选的实现场景中,所述终端81接收所述第一指令之前,接收所述视频会议装置82发送的多个画面的信息,所述多个画面的信息包括:多个画面中所有子画面的标识、与所述标识对应的子画面在所述多个画面中的排列位置,与所述标识对应的子画面的相对大小。
相应地,所述终端接收所述第一指令之后,根据所述排列位置和所述相对大小,确定所述多个画面中每一子画面的坐标值范围;根据所述相对位置信息确定所述相对位置信息属于哪一个标识对应的子画面的坐标值范围,得到所述至少一个子画面的标识。
相应地,所述请求消息包括:所述至少一个子画面的标识和所述指示信息;
所述视频会议装置采用新的视频源替换至少一个子画面中当前的视频源,具体为,
所述视频会议装置采用所述新的视频源替换与所述标识对应的子画面中当前的视频源。
上述的会议系统中的视频会议装置和终端交互,可以使得终端切换多个画面中的各子画面对应的视频源的方式简单,进而解决现有技术中多个画面视频源修改方式操作复杂、易用性差的问题。
根据本发明的另一方面,本发明还提供一种终端,所述终端可以是电脑、PDA、智能手机等。
如图9所示,本实施例中的终端可包括处理器91、收发模块92、存储器93、外部设备94、显示设备95;其中,外部设备94可以包括:鼠标、摄像头、键盘等设备。
具体地,上述的处理器91与收发模块92、存储器93、显示设备95耦合,并通过用户接口连接外部设备94。
其中,终端的处理器91是终端的控制中心,利用各种接口和线路连接整个终端的各个部分,通过运行或执行存储在存储器93内的软件程序和/或模块,以及调用存储在存储器93内的数据,执行终端的各种功能和处理数据,从而对终端进行整体监控。
可选的,处理器91可包括一个或多个处理单元;优选的,处理器91可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器91中。
收发模块92可用于收发信息或通话过程中,信号的接收和发送。
存储器93可用于存储软件程序以及模块,处理器91通过运行存储在存储器93的软件程序以及模块,从而执行终端的各种功能应用以及数据处理。存储器93可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图象播放功能等)等;存储数据区可存储根据终端的使用所创建的数据(比如音频数据等)等。此外,存储器93可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
特别地,存储器93中存储有处理器91所执行的程序例程的信息,以使处理器用于控制程序例程的执行,如上的画面控制方法的实现。
外部设备94可用于接收输入的数字或字符信息,以及产生与终端的用户设置以及功能控制有关的键信号输入。具体地,外部设备94可包括触控面板、鼠标、键盘、摄像头等。
显示设备95可用于显示由用户输入的信息或提供给用户的信息以及视频会议装置发送的视频流的多个画面。显示设备95可包括显示面板,可选的,可以采用液晶显示器(LiquidCrystalDisplay,简称LCD)、有机发光二极管(OrganicLight-EmittingDiode,简称OLED)等形式来配置显示面板。
本领域普通技术人员可以理解:实现上述各方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成。前述的程序可以存储于一计算机可读取存储介质中。该程序在执行时,执行包括上述各方法实施例的步骤;而前述的存储介质包括:ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质。
最后应说明的是:以上各实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述各实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分或者全部技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的范围。

Claims (17)

1.一种画面控制的方法,其特征在于,包括:
在第一终端的多个画面上分别显示视频会议中的一个以上终端分别对应的视频时,所述第一终端接收用于替换所述多个画面中至少一个子画面的视频源的第一指令,所述第一指令包括:至少一个子画面的相对位置信息,和用于指示所述至少一个子画面中新的视频源的指示信息,所述新的视频源是所述第一终端预先配置的;
向视频会议装置发送包含有所述第一指令的请求消息,以使所述视频会议装置采用所述新的视频源替换至少一个子画面中当前的视频源,所述至少一个子画面为与所述相对位置信息对应的子画面;
接收所述视频会议装置发送的所述新的视频源对应的视频流,在所述新的视频源对应的子画面上显示所述新的视频源。
2.根据权利要求1所述的方法,其特征在于,所述视频会议装置采用新的视频源替换至少一个子画面中当前的视频源,所述至少一个子画面为与所述相对位置信息对应的子画面,包括:
所述视频会议装置根据预存的所述第一终端上的多个画面的信息,和所述至少一个子画面的相对位置信息,确定所述至少一个子画面的标识,并采用所述新的视频源替换与所述标识对应的子画面中当前的视频源。
3.根据权利要求1所述的方法,其特征在于,所述第一终端接收用于替换所述多个画面中至少一个子画面的视频源的第一指令的步骤之前,还包括:
所述第一终端接收所述视频会议装置发送的多个画面的信息,所述多个画面的信息包括:多个画面中所有子画面的标识、与所述标识对应的子画面在所述多个画面中的排列位置,与所述标识对应的子画面的相对大小。
4.根据权利要求3所述的方法,其特征在于,所述第一终端接收用于替换所述多个画面中至少一个子画面的视频源的第一指令的步骤之后,还包括:
所述第一终端根据所述排列位置和所述相对大小,确定所述多个画面中每一子画面的坐标值范围;根据所述相对位置信息确定所述相对位置信息属于哪一个标识对应的子画面的坐标值范围,得到所述至少一个子画面的标识;
相应地,所述请求消息包括:所述至少一个子画面的标识和所述指示信息,则所述视频会议装置采用新的视频源替换至少一个子画面中当前的视频源,包括:
所述视频会议装置采用所述新的视频源替换与所述标识对应的子画面中当前的视频源。
5.根据权利要求1至4任一所述的方法,其特征在于,所述第一终端接收用于替换所述多个画面中至少一个子画面的视频源的第一指令,具体为:
所述第一终端中预设有多个画面中对应的操作类型,若所述第一终端接收到用户接口传输的所述多个画面中对应的操作类型的信息,则所述第一终端得到所述第一指令中的指示信息;以及
所述第一终端得到所述指示信息之后,捕捉所述多个画面中的外部设备对应的焦点的相对位置信息,所述对应焦点的相对位置信息为所述至少一个子画面的相对位置信息。
6.一种画面控制的方法,其特征在于,包括:
视频会议装置接收第一终端发送的包含有第一指令的请求消息,所述第一终端的多个画面上分别显示视频会议中的一个以上终端分别对应的视频时,所述请求消息为所述第一终端接收用于替换所述多个画面中至少一个子画面的视频源的第一指令之后发送的,所述第一指令包括:至少一个子画面的相对位置信息,和用于指示所述至少一个子画面中新的视频源的指示信息;所述新的视频源是预先配置的;
采用所述新的视频源替换至少一个子画面中当前的视频源,所述至少一个子画面为与所述相对位置信息对应的至少一个子画面;
向所述第一终端发送所述新的视频源对应的视频流,以使所述第一终端在所述新的视频源对应的子画面上显示所述新的视频源。
7.根据权利要求6所述的方法,其特征在于,所述视频会议装置接收第一终端发送的包含有第一指令的请求消息的步骤之前,还包括:
所述视频会议装置向所述第一终端发送所述多个画面的信息,所述多个画面的信息包括:多个画面中所有子画面的标识、与所述标识对应的子画面在所述多个画面中的排列位置,与所述标识对应的子画面的相对大小。
8.一种用于画面控制的终端,其特征在于,所述终端的多个画面上分别显示视频会议中的一个以上终端分别对应的视频,所述终端包括:
接收单元,用于接收用于替换所述多个画面中至少一个子画面的视频源的第一指令,所述第一指令包括:至少一个子画面的相对位置信息,和用于指示所述至少一个子画面中新的视频源的指示信息,所述新的视频源是预先配置的;
发送单元,用于在所述接收单元接收所述第一指令之后,向视频会议装置发送包含有所述第一指令的请求消息,以使所述视频会议装置采用新的视频源替换至少一个子画面中当前的视频源,所述至少一个子画面为与所述相对位置信息对应的至少一个子画面;
所述接收单元,还用于在所述发送单元发送所述请求消息之后,接收所述视频会议装置发送的所述新的视频源对应的视频流,在所述新的视频源对应的子画面上显示所述新的视频源。
9.根据权利要求8所述的终端,其特征在于,所述发送单元,具体用于
在所述接收单元接收所述第一指令之后,向视频会议装置发送包含有所述第一指令的请求消息,以使所述视频会议装置根据预存的第一终端上的多个画面的信息,和所述至少一个子画面的相对位置信息,确定所述至少一个子画面的标识,并采用所述新的视频源替换与所述标识对应的子画面中当前的视频源。
10.根据权利要求8所述的终端,其特征在于,所述接收单元,还用于
在接收所述第一指令之前,接收所述视频会议装置发送的多个画面的信息,所述多个画面的信息包括:多个画面中所有子画面的标识、与所述标识对应的子画面在所述多个画面中的排列位置,与所述标识对应的子画面的相对大小。
11.根据权利要求10所述的终端,其特征在于,所述终端还包括:确定单元,
所述确定单元,用于在所述接收单元接收所述第一指令之后,根据所述排列位置和所述相对大小,确定所述多个画面中每一子画面的坐标值范围;根据所述相对位置信息确定所述相对位置信息属于哪一个标识对应的子画面的坐标值范围,得到所述至少一个子画面的标识;
所述发送单元,具体用于
在所述确定单元得到所述至少一个子画面的标识之后,向视频会议装置发送包含有所述第一指令的请求消息,所述请求消息包括:至少一个子画面的标识和所述指示信息,以使所述视频会议装置采用所述新的视频源替换与所述标识对应的子画面中当前的视频源。
12.一种视频会议装置,其特征在于,包括:
接收单元,用于接收第一终端发送的包含有第一指令的请求消息,所述第一终端的多个画面上分别显示视频会议中的一个以上终端分别对应的视频时,所述请求消息为所述第一终端接收用于替换所述多个画面中至少一个子画面的视频源的第一指令之后发送的,所述第一指令包括:至少一个子画面的相对位置信息,和用于指示所述至少一个子画面中新的视频源的指示信息;所述新的视频源是预先配置的;
替换单元,用于在所述接收单元接收所述请求消息之后,采用所述新的视频源替换至少一个子画面中当前的视频源,所述至少一个子画面为与所述相对位置信息对应的至少一个子画面;
发送单元,用于在所述替换单元采用所述新的视频源替换之后,向所述第一终端发送所述新的视频源对应的视频流,以使所述第一终端在所述新的视频源对应的子画面上显示所述新的视频源。
13.根据权利要求12所述的视频会议装置,其特征在于,所述发送单元,还用于
在所述接收单元接收所述请求消息之前,向所述第一终端发送所述多个画面的信息,所述多个画面的信息包括:多个画面中所有子画面的标识、与所述标识对应的子画面在所述多个画面中的排列位置,与所述标识对应的子画面的相对大小。
14.一种会议系统,其特征在于,包括:终端和视频会议装置;
其中,所述终端的多个画面上分别显示视频会议中的一个以上终端分别对应的视频时,接收用于替换所述多个画面中至少一个子画面的视频源的第一指令,所述第一指令包括:至少一个子画面的相对位置信息,和用于指示所述至少一个子画面中新的视频源的指示信息,所述新的视频源是预先配置的;
所述终端向所述视频会议装置发送包含有所述第一指令的请求消息;
所述视频会议装置在接收所述请求消息之后,采用新的视频源替换至少一个子画面中当前的视频源,所述至少一个子画面为与所述相对位置信息对应的至少一个子画面,以及向所述终端发送所述新的视频源对应的视频流;
所述终端接收所述视频会议装置发送的所述新的视频源对应的视频流之后,在所述新的视频源对应的子画面上显示所述新的视频源。
15.根据权利要求14所述的系统,其特征在于,所述视频会议装置在接收所述请求消息之后,采用新的视频源替换至少一个子画面中当前的视频源,所述至少一个子画面为与所述相对位置信息对应的至少一个子画面,具体为:
所述视频会议装置在接收所述请求消息之后,根据预存的第一终端上的多个画面的信息,和所述至少一个子画面的相对位置信息,确定所述至少一个子画面的标识,并采用所述新的视频源替换与所述标识对应的子画面中当前的视频源。
16.根据权利要求14所述的系统,其特征在于,所述终端接收所述第一指令之前,接收所述视频会议装置发送的多个画面的信息,所述多个画面的信息包括:多个画面中所有子画面的标识、与所述标识对应的子画面在所述多个画面中的排列位置,与所述标识对应的子画面的相对大小。
17.根据权利要求16所述的系统,其特征在于,所述终端接收所述第一指令之后,根据所述排列位置和所述相对大小,确定所述多个画面中每一子画面的坐标值范围;根据所述相对位置信息确定所述相对位置信息属于哪一个标识对应的子画面的坐标值范围,得到所述至少一个子画面的标识;
相应地,所述请求消息包括:所述至少一个子画面的标识和所述指示信息;
所述视频会议装置采用新的视频源替换至少一个子画面中当前的视频源,具体为,
所述视频会议装置采用所述新的视频源替换与所述标识对应的子画面中当前的视频源。
CN201210586124.3A 2012-12-28 2012-12-28 画面控制的方法及终端、视频会议装置 Active CN103051865B (zh)

Priority Applications (4)

Application Number Priority Date Filing Date Title
CN201210586124.3A CN103051865B (zh) 2012-12-28 2012-12-28 画面控制的方法及终端、视频会议装置
EP13867121.9A EP2924987A4 (en) 2012-12-28 2013-08-12 PICTURE CONTROL PROCEDURE AND END UNIT, VIDEO CONFERENCE DEVICE
PCT/CN2013/081259 WO2014101428A1 (zh) 2012-12-28 2013-08-12 画面控制的方法及终端、视频会议装置
US14/754,197 US9485465B2 (en) 2012-12-28 2015-06-29 Picture control method, terminal, and video conferencing apparatus

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201210586124.3A CN103051865B (zh) 2012-12-28 2012-12-28 画面控制的方法及终端、视频会议装置

Publications (2)

Publication Number Publication Date
CN103051865A CN103051865A (zh) 2013-04-17
CN103051865B true CN103051865B (zh) 2016-03-30

Family

ID=48064353

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201210586124.3A Active CN103051865B (zh) 2012-12-28 2012-12-28 画面控制的方法及终端、视频会议装置

Country Status (4)

Country Link
US (1) US9485465B2 (zh)
EP (1) EP2924987A4 (zh)
CN (1) CN103051865B (zh)
WO (1) WO2014101428A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107872683A (zh) * 2017-11-21 2018-04-03 广州视源电子科技股份有限公司 一种视频数据处理方法、装置、设备及存储介质

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103051865B (zh) 2012-12-28 2016-03-30 华为技术有限公司 画面控制的方法及终端、视频会议装置
CN106162046A (zh) * 2015-04-24 2016-11-23 中兴通讯股份有限公司 一种视频会议图像呈现方法及其装置
WO2017126740A1 (ko) * 2016-01-22 2017-07-27 삼성전자 주식회사 단말 장치, 원격 제어 시스템 및 제어 방법
CN108124117A (zh) * 2016-11-28 2018-06-05 南宁富桂精密工业有限公司 画面控制方法及用户终端
CN106937119B (zh) * 2017-03-07 2019-12-03 杭州当虹科技股份有限公司 一种多画面信号播放方法
CN109246449A (zh) * 2017-07-11 2019-01-18 中国移动通信集团重庆有限公司 视频流分发方法、装置、设备及计算机存储介质
US10582159B2 (en) * 2017-11-06 2020-03-03 Blue Jeans Network, Inc. System and methods for aggregated meeting joining for video conferences with built in resilience to allow for a common meeting experience
CN110636242B (zh) * 2018-06-22 2023-02-17 中兴通讯股份有限公司 一种视频会议中画面切换方法、终端及mcu
CN111263097B (zh) * 2019-09-19 2024-01-02 华为技术有限公司 媒体数据传输方法及相关设备
CN112040168A (zh) * 2020-09-04 2020-12-04 苏州科达科技股份有限公司 台标处理方法、电子设备及存储介质
CN112218031A (zh) * 2020-09-17 2021-01-12 江苏怀业信息技术股份有限公司 视频会议数据的传输方法和系统
CN113114976B (zh) * 2021-04-21 2024-06-07 海南视联通信技术有限公司 一种视频画面的调整方法和装置
CN113727149B (zh) * 2021-08-31 2023-06-30 京东方科技集团股份有限公司 显示控制方法和装置、视频处理装置、显示系统
JP2023043372A (ja) * 2021-09-16 2023-03-29 セイコーエプソン株式会社 画像表示方法、及び、プロジェクター

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN2805011Y (zh) * 2004-11-09 2006-08-09 道宏无线系统股份有限公司 多频道实时影音输出显示控制装置
CN101291398A (zh) * 2008-06-02 2008-10-22 深圳华为通信技术有限公司 一种多画面设置方法及设备
CN102457702A (zh) * 2010-10-29 2012-05-16 华为终端有限公司 多画面处理方法、装置及系统

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7362349B2 (en) * 2002-07-10 2008-04-22 Seiko Epson Corporation Multi-participant conference system with controllable content delivery using a client monitor back-channel
US7830409B2 (en) * 2005-03-25 2010-11-09 Cherng-Daw Hwang Split screen video in a multimedia communication system
US7797383B2 (en) * 2006-06-21 2010-09-14 Cisco Technology, Inc. Techniques for managing multi-window video conference displays
NO331338B1 (no) * 2009-06-24 2011-11-28 Cisco Systems Int Sarl Fremgangsmate og anordning for endring av en videokonferanse-layout
CN102215375B (zh) * 2011-06-24 2018-04-27 中兴通讯股份有限公司 多媒体会议中多画面的子画面的视频源的选择方法及装置
WO2013019638A1 (en) * 2011-07-29 2013-02-07 Cisco Technology, Inc. Method, computer- readable storage medium, and apparatus for modifying the layout used by a video composing unit to generate a composite video signal
CN103051865B (zh) * 2012-12-28 2016-03-30 华为技术有限公司 画面控制的方法及终端、视频会议装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN2805011Y (zh) * 2004-11-09 2006-08-09 道宏无线系统股份有限公司 多频道实时影音输出显示控制装置
CN101291398A (zh) * 2008-06-02 2008-10-22 深圳华为通信技术有限公司 一种多画面设置方法及设备
CN102457702A (zh) * 2010-10-29 2012-05-16 华为终端有限公司 多画面处理方法、装置及系统

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107872683A (zh) * 2017-11-21 2018-04-03 广州视源电子科技股份有限公司 一种视频数据处理方法、装置、设备及存储介质

Also Published As

Publication number Publication date
US9485465B2 (en) 2016-11-01
EP2924987A4 (en) 2016-02-17
WO2014101428A1 (zh) 2014-07-03
CN103051865A (zh) 2013-04-17
US20150304609A1 (en) 2015-10-22
EP2924987A1 (en) 2015-09-30

Similar Documents

Publication Publication Date Title
CN103051865B (zh) 画面控制的方法及终端、视频会议装置
JP7263442B2 (ja) モバイルアプリケーションのリアルタイム遠隔制御のためのシステムおよび方法
US10061467B2 (en) Presenting a message in a communication session
CN110515573B (zh) 投屏方法、装置、系统和计算机设备
US11271803B2 (en) Method and apparatus for extending service capabilities in a communication network
US11188188B2 (en) System and method of providing automated customer service with augmented reality and social media integration
US8380487B2 (en) Language translation of selected content in a web conference
KR20180003645A (ko) 컨택 센터를 위한 플로우 디자이너
US20080196038A1 (en) Utilizing a first managed process to host at least a second managed process
US20150130836A1 (en) Adapting content to augmented reality virtual objects
CN102884537A (zh) 用于设备定位和通信的方法
CN108632633A (zh) 一种网络直播的数据处理方法和装置
CN108632632A (zh) 一种网络直播的数据处理方法和装置
CN111880695A (zh) 一种屏幕共享方法、装置、设备及存储介质
CN104272254A (zh) 用户界面web服务
US20170185422A1 (en) Method and system for generating and controlling composite user interface control
CN112274910A (zh) 虚拟按键配置方法、虚拟按键方法及相关装置
CN109844709A (zh) 使图像动画化以指示图像可平移
US20110119585A1 (en) Apparatus and method for playback of flash-based video on mobile web browser
CN107038201A (zh) 个人主页的显示方法、装置、终端及服务器
CN113569089A (zh) 信息处理方法、装置、服务器、设备、系统及存储介质
CN117201723A (zh) 用于会议中显示参会成员的方法、装置、电子设备和介质
US20160127441A1 (en) Application level audio connection and streaming
CN107209782B (zh) 交互式操作的方法以及应用该方法的传送机器、接收机器与交互式操作系统
CN105573688A (zh) 基于图像捕获的多屏幕互操作方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant