CN112887653B - 一种信息处理方法和信息处理装置 - Google Patents
一种信息处理方法和信息处理装置 Download PDFInfo
- Publication number
- CN112887653B CN112887653B CN202110097939.4A CN202110097939A CN112887653B CN 112887653 B CN112887653 B CN 112887653B CN 202110097939 A CN202110097939 A CN 202110097939A CN 112887653 B CN112887653 B CN 112887653B
- Authority
- CN
- China
- Prior art keywords
- video data
- data stream
- target
- image acquisition
- target object
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/14—Systems for two-way working
- H04N7/15—Conference systems
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/14—Systems for two-way working
- H04N7/15—Conference systems
- H04N7/155—Conference systems involving storage of or access to video conference sessions
Abstract
本申请实施例公开了一种信息处理方法,该方法包括:获得会议设备的第一图像采集模组所采集的与参考对象关联的第一视频数据流;获得第二图像采集模组所采集的与目标对象关联的第二视频数据流;将第一视频数据流和第二视频数据流合成一路目标视频数据流,并将目标视频数据流发送至目标设备,以使目标设备输出目标视频数据流时在同一界面中展示第一视频数据流对应的画面和第二视频数据流对应的画面。本申请的实施例同时还公开了一种信息处理装置。
Description
技术领域
本申请涉及但不限于信息技术领域,尤其涉及一种信息处理方法和信息处理装置。
背景技术
在多图像采集模组如多摄像的会议场景中,工作人员只能手动用摄像头的遥控器控制各个摄像头分别进行图像采集,进而将各个摄像头采集到的图像单独分发至共享设备。可见,目前亟需提供一种多摄像头的会议场景下,智能化地进行图像采集和图像共享的方案。
发明内容
本申请实施例期望提供一种信息处理方法和信息处理装置。
本申请的技术方案是这样实现的:
一种信息处理方法,所述方法包括:
获得会议设备的第一图像采集模组所采集的与参考对象关联的第一视频数据流;
获得第二图像采集模组所采集的与目标对象关联的第二视频数据流;
将所述第一视频数据流和所述第二视频数据流合成一路目标视频数据流,并将所述目标视频数据流发送至目标设备,以使所述目标设备输出所述目标视频数据流时在同一界面中展示所述第一视频数据流对应的画面和所述第二视频数据流对应的画面。
一种信息处理装置,所述信息处理装置包括:
获得模组,用于获得会议设备的第一图像采集模组所采集的与参考对象关联的第一视频数据流;
所述获得模组,用于获得第二图像采集模组所采集的与目标对象关联的第二视频数据流;
处理模组,用于将所述第一视频数据流和所述第二视频数据流合成一路目标视频数据流;
发送模组,用于将所述目标视频数据流发送至目标设备,以使所述目标设备输出所述目标视频数据流时在同一界面中展示所述第一视频数据流对应的画面和所述第二视频数据流对应的画面。
一种电子设备,所述电子设备包括:处理器、存储器和通信总线;
所述通信总线用于实现处理器和存储器之间的通信连接;
所述处理器用于执行存储器中存储的信息处理程序,以实现上述的信息处理方法的步骤。
一种计算机存储介质,所述计算机存储介质存储有一个或者多个程序,所述一个或者多个程序可被一个或者多个处理器执行,以实现如上述的信息处理方法的步骤。
本申请实施例所提供的信息处理方法和信息处理装置,通过获得会议设备的第一图像采集模组所采集的与参考对象关联的第一视频数据流;获得第二图像采集模组所采集的与目标对象关联的第二视频数据流;将第一视频数据流和第二视频数据流合成一路目标视频数据流,并将目标视频数据流发送至目标设备,以使目标设备输出目标视频数据流时在同一界面中展示第一视频数据流对应的画面和第二视频数据流对应的画面;可见,在多图像采集模组拍摄的会议场景下,获得会议设备的第一图像采集模组对参考对象进行拍摄得到的第一视频数据流,获得第二图像模组对目标对象进行拍摄得到的第二视频数据流,进一步地,针对第一图像采集模组和第二图像采集模组各有侧重地拍摄得到的视频数据流进行合成,最终得到一路目标视频数据流,并发送至目标设备即分享设备,如此,实现了将会议场景下的各个图像采集模组针对性地采集的不同视频数据流合成一路,并提供给分享设备,从而便于分享设备的观看者在同一呈现界面中观看具有不同关注点的各个画面。
附图说明
图1为本申请的实施例提供的一种可选的信息处理方法的流程示意图;
图2为本申请的实施例提供的一种可选的信息处理方法的流程示意图;
图3为本申请的实施例提供的一种会议场景的示意图;
图4为本申请的实施例提供的一种会议设备的第一图像采集模组所采集的图像的示意图;
图5为本申请的实施例提供的一种显示画面中不同视频数据流对应的渲染坐标范围的示意图;
图6为本申请的实施例提供的一种可选的信息处理方法的流程示意图;
图7为本申请的实施例提供的一种可选的信息处理方法的流程示意图;
图8为本申请的实施例提供的一种信息处理装置的结构示意图;
图9为本申请的实施例提供的一种会议设备的结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述。
除非另有定义,本文所使用的所有的技术和科学术语与属于本申请的技术领域的技术人员通常理解的含义相同。本文中所使用的术语只是为了描述本申请实施例的目的,不是旨在限制本申请。
对本申请实施例进行进一步详细说明之前,对本申请实施例中涉及的名词和术语进行说明,本申请实施例中涉及的名词和术语适用于如下的解释。
本申请的实施例提供一种信息处理方法,该信息处理方法可以应用于会议设备;该信息处理方法还可以应用于会议系统,会议系统可以包括会议设备和多个图像采集模组。参照图1所示,该方法包括以下步骤:
步骤101、获得会议设备的第一图像采集模组所采集的与参考对象关联的第一视频数据流。
步骤102、获得第二图像采集模组所采集的与目标对象关联的第二视频数据流。
本申请实施例中,会议设备为具有计算能力的设备,会议设备具有第一图像采集模组。与会议设备同时存在于会议场景中的第二图像采集模组的数量为至少一个。第一图像采集模组和第二图像采集模组都可以是摄像头。每一第二图像采集模组通过网络与会议设备连接,会议设备可以对自带的第一图像采集模组,以及与会议设备连接的每一第二图像采集模组的配置参数进行设置。会议设备还可以对第一图像采集模组采集的第一视频数据流,以及每一第二图像采集模组采集的第二视频数据流进行分析和处理。
第一图像采集模组的拍摄对象为参考对象,和第二图像采集模组的拍摄对象为目标对象都属于会议场景中的对象。在一种情况下,参考对象与目标对象之间的关系包括目标对象为参考对象中的部分对象的关系。在另一种情况下,参考对象与目标对象之间的关系包括目标对象与参考对象是不同的对象的关系。
本申请实施例中,第一图像采集模组和第二图像采集模组的拍摄角度范围、拍摄距离范围等的拍摄配置参数可以根据实际需求进行配置。在一种可实现的场景下,第一图像采集模组的拍摄角度范围大于任一第二图像采集模组的拍摄角度范围,例如,第一图像采集模组的拍摄角度范围为全景范围,任一第二图像采集模组的拍摄角度范围为局部范围。
步骤103、将第一视频数据流和第二视频数据流合成一路目标视频数据流,并将目标视频数据流发送至目标设备,以使目标设备输出目标视频数据流时在同一界面中展示第一视频数据流对应的画面和第二视频数据流对应的画面。
在信息处理方法应用于会议设备的情况下,会议设备通过自身的第一图像采集模组针对参考对象进行拍摄,得到第一视频数据流。会议设备还可以在第二图像采集模组针对目标对象进行拍摄,得到第二视频数据流的情况下,接收到第二图像采集模组发送的第二视频数据流。进一步地,会议设备将第一视频数据流和第二视频数据流转换为统一特定格式的视频帧数据流,再对转换得到的特定格式的视频帧数据流进行渲染处理,最终合成一路目标视频数据流。会议设备还可以将目标视频数据流分享至目标设备,进而,在目标设备输出目标视频数据流时在同一界面中展示第一视频数据流对应的画面和第二视频数据流对应的画面,确保观看者可以同时观看针对参考对象拍摄的画面,以及针对每一目标对象拍摄的画面,为会议场景提供了更加丰富灵活的多媒体信息展示效果。
在信息处理方法应用于会议系统的情况下,通过会议设备调用第一图像采集模组拍摄第一视频数据流,通过第二图像采集模组拍摄第二视频数据流,进而通过会议设备将第一视频数据流和第二视频数据流转换为统一特定格式的视频帧数据流,再对转换得到的特定格式的视频帧数据流进行渲染处理,最终合成一路目标视频数据流。可见,会议设备作为会议系统的控制核心设备,能够在多摄像头的会议场景下,基于自身的处理功能,实现智能化图像采集和图像共享的方案。
本申请实施例中,目标设备可以是会议场景中的设备,即会议系统的组成设备之一。目标设备也可以是远程设备,能与会议设备连接,进而接收来自于会议设备的目标视频数据流。目标设备包括但不限于智能手机、平板电脑、智能电视、智能摄像机、智能投影机、服务器、膝上型便携计算机和台式计算机等。
本申请实施例提供的信息处理方法,通过获得会议设备的第一图像采集模组所采集的与参考对象关联的第一视频数据流;获得第二图像采集模组所采集的与目标对象关联的第二视频数据流;将第一视频数据流和第二视频数据流合成一路目标视频数据流,并将目标视频数据流发送至目标设备,以使目标设备输出目标视频数据流时在同一界面中展示第一视频数据流对应的画面和第二视频数据流对应的画面;可见,在多图像采集模组拍摄的会议场景下,获得会议设备的第一图像采集模组对参考对象进行拍摄得到的第一视频数据流,获得第二图像模组对目标对象进行拍摄得到的第二视频数据流,进一步地,针对第一图像采集模组和第二图像采集模组各有侧重地拍摄得到的视频数据流进行合成,最终得到一路目标视频数据流,并发送至目标设备即分享设备,如此,实现了将会议场景下的各个图像采集模组针对性地采集的不同视频数据流合成一路,并提供给分享设备,从而便于分享设备的观看者在同一呈现界面中观看具有不同关注点的各个画面。
本申请的实施例提供一种信息处理方法,该信息处理方法可以应用于会议设备;该信息处理方法还可以应用于会议系统,会议系统可以包括会议设备和多个图像采集模组。这里,以信息处理方法应用于会议设备为例进行说明,参照图2所示,该方法包括以下步骤:
步骤201、分析会议设备的第一图像采集模组所采集的图像,以确定图像中的目标对象。
其中,目标对象是图像中与参考对象之间满足差异条件的对象。
在图3所示的会议场景中,会议设备31、摆放的第二图像采集模组32、悬挂的第二图像采集模组33以及白板34均属于会议系统的组成设备。在参会人员到达会议场地,会议开始后,结合图3和图4所示,会议设备通过自身的第一图像采集模组采集会议场景中的图像,第一图像采集模组可以是拍摄角度为360度的摄像头鱼眼摄像头,该图像可以是全景图像或者广角图像。参见图4所示,会议设备的第一图像采集模组所采集的图像包括6个区域,其中,41所指的区域、42所指的区域、44所指的区域以及45所指的区域分别为不同的参会者对应的区域,43所指的区域为背景为窗户的部分空位对应的区域,46所指的区域为白板对应的区域。其中,46所指的区域中还包括站在白板前的参会者。进一步地,会议设备分析自身所采集的图像,确定出会议场景中的目标对象和参考对象,进而控制自身的第一图像采集模组针对参考对象进行拍摄以得到第一视频数据流;会议设备还可以控制第二图像采集模组针对目标对象进行拍摄以得到第二视频数据流,并获得第二图像采集模组拍摄的第二视频数据流。
这里,参考对象与目标对象之间的关系包括目标对象与参考对象是不同的对象的关系。
在一种可实现的场景中,会议设备分析自身的第一图像采集模组所采集的至少一帧图像,以确定至少一帧图像中的目标对象,同时也确定至少一帧图像包括的所有对象中与目标对象之间满足差异条件的对象为参考对象。
本申请实施例中,步骤201分析会议设备的第一图像采集模组所采集的图像,以确定图像中的目标对象,可以通过如下任一种方式实现:
方式一、如果所采集的图像的数量为一帧,分析图像包括的各个对象的属性特征,确定各个对象中属性特征符合目标属性特征的对象为目标对象。
其中,差异条件包括目标对象与参考对象具有不同的属性特征的条件。
这里,目标属性特征包括但不限于如下至少一种特征:形状特征、可书写特征和可播放多媒体信息特征。
示例性的,会议设备通过第一图像采集模组采集到会议场景中的一帧图像,分析该图像包括的会议场景中的各个对象的属性特征,确定所有对象中属性特征为矩形且可书写的对象如白板为目标对象。
示例性的,会议设备通过第一图像采集模组采集到会议场景中的一帧图像,分析该图像包括的会议场景中的各个对象的属性特征,确定所有对象中属性特征为可播放多媒体信息的对象如投影幕布为目标对象。
在方式一对应的实际应用场景中,会议设备确定出目标对象是图像包括的多个对象中属性特征符合目标属性特征的对象,参考对象包括图像中除了目标对象以外的剩余对象。参照图4所示,会议设备通过第一图像采集模组采集到会议场景下的一帧全景图像,该全景图像中包括5位参会者关联的局部图像和背景为窗户的部分空位的局部图像。会议设备分析全景图像包括的会议场景中的各个对象的属性特征,确定所有对象中属性特征为矩形且可书写的对象如白板为目标对象,其他对象为参考对象即与白板无关其他4为参会者以及空位都是参考对象。
方式二、如果所采集的图像的数量为多帧,分析多帧图像中的至少部分图像,确定至少部分图像中展示的内容发生变化的对象为目标对象。
其中,差异条件包括目标对象为内容的展示方且参考对象为内容的观看方的条件。
示例性的,会议设备通过第一图像采集模组采集到会议场景中的多帧图像,分析多帧图像中的至少部分图像,确定至少部分图像中展示内容发生变化的对象如白板/投影屏幕/显示器为目标对象。
在方式二对应的实际应用场景中,会议设备确定出目标对象是多帧图像包括的所有对象中展示的内容发生变化的对象,参考对象包括目标对象的内容的观看方。会议设备通过第一图像采集模组采集到会议场景下的多帧全景图像,多帧全景图像中包括图4所示的一帧全景图像,这一帧全景图像中包括5位参会者关联的局部图像和背景为窗户的部分空位的局部图像。会议设备分析多帧全景图像中的至少部分图像,确定至少部分图像中展示的内容发生变化的对象如白板为目标对象,其他对象中白板的观看方即其他4为参会者为参考对象,从而将与目标对象展示内容时不是观看方的对象如空位排除。
方式三、分析图像包括的各个对象的行为特征,确定各个对象中行为特征符合目标行为特征的对象为目标对象。
其中,差异条件包括目标对象与参考对象具有不同的行为特征的条件。
这里,目标对象与参考对象都是具有行为特征的对象,只是目标对象与参考对象所呈现的行为特征存在差异。
示例性的,会议设备通过第一图像采集模组采集到会议场景中的至少一帧图像,分析至少一帧图像包括的会议场景中的各个对象的行为特征,确定行为特征符合目标行为特征如站立姿态的对象为目标对象,坐姿的对象为参考对象。
进一步地,不同的行为特征的条件包括目标对象对图像中的目标物品执行目标操作。
示例性的,会议设备通过第一图像采集模组采集到会议场景中的至少一帧图像,分析至少一帧图像包括的会议场景中的各个对象的行为特征,确定行为特征符合目标行为特征如手持话筒和/或PPT演示笔的对象为目标对象,具有其他行为特征的对象为参考对象。
当然,会议设备执行步骤201分析会议设备的第一图像采集模组所采集的图像,以确定图像中的目标对象时,还可以通过方式一与方式三结合,或者方式二与方式三结合,确定出图像中的不同的目标对象。
示例性的,在方式一与方式三结合,或者方式二与方式三结合的场景下,会议设备可以确定出白板、手持话筒的对象都是目标对象,目标对象可以看做是会议场景中的特别关注对象。
步骤202、获得会议设备的第一图像采集模组所采集的与参考对象关联的第一视频数据流。
步骤203、获得第二图像采集模组所采集的与目标对象关联的第二视频数据流。
这里,在会议设备确定出会议场景中的目标对象与参考对象的情况下,控制第一图像采集模组针对确定出的参考对象进行拍摄,得到与参考对象关联的第一视频数据流;控制第二图像采集模组针对确定出的目标对象进行拍摄,得到与目标对象关联的第二视频数据流。
在确定出的目标对象为多个的场景下,会议设备还可以配置不同的第二图像采集模组的机位,确保每一目标对象对应一个第二图像采集模组,进而控制每一第二图像采集模组对特定的目标对象进行拍摄,得到与每一目标对象关联的第二视频数据流。
示例性的,在会议设备确定出目标对象包括演讲者与白板的场景中,会议设备控制第一机位的第二图像采集模组针对演讲者进行拍摄,得到与演讲者关联的第二视频数据流;会议设备控制第二机位的第二图像采集模组针对白板进行拍摄,得到与白板关联的第二视频数据流。这里,在会议设备确定出目标对象、参考对象的场景下,控制不同的图像采集模组对上述对象进行拍摄的过程中,应理解为对上述对象所在的区域进行拍摄,拍摄内容会涉及与上述对象有关的其他因素。例如,白板的书写者,演讲者所座的椅子等。
步骤204、将第一视频数据流和第二视频数据流转换为特定格式的视频帧数据。
这里,会议设备在获得第一视频数据流和第二视频数据流的情况下,将第一视频数据流和第二视频数据流解码转换为统一特定格式的视频帧数据。
步骤205、基于任一视频数据流对应的特定格式的视频帧数据的分辨率,为任一视频流对应的特定格式的视频帧数据设置渲染坐标范围。
其中,与不同视频数据流对应的视频帧数据的渲染坐标范围之间无重叠。
步骤206、基于各个视频数据流对应的视频帧数据的渲染坐标范围,同步地对各个视频数据流对应的视频帧数据进行渲染,得到目标视频数据流。
在一种可实现的场景下,会议设备在获得特定格式的第一视频帧数据A、第二视频帧数据B以及第二视频帧数据C后,基于第一视频帧数据A的分辨率、第二视频帧数据B的分辨率、第二视频帧数据C的分辨率以及待输出界面的显示画面的尺寸,分别为第一视频帧数据A、第二视频帧数据B以及第二视频帧数据C设置相对于输出界面的显示画面的渲染坐标范围。
示例性的,结合图5所示,为第一视频帧数据A设置相对于显示画面的第一渲染坐标范围51,为第二视频帧数据B设置相对于显示画面的第二渲染坐标范围52,为第二视频帧数据C设置相对于显示画面的第三渲染坐标范围53,确保第一渲染坐标范围、第二渲染坐标范围以及第三渲染坐标范围均位于显示画面之内且三者之间无重叠。如此,以确保基于第一渲染坐标范围、第二渲染坐标范围以及第三渲染坐标范围,同步地渲染绘制与第一视频帧数据A对应的图像、第二视频帧数据B对应的图像以及第二视频帧数据C对应的图像随时间不断变化,实现了多个视频数据流在目标设备的同一输出界面的分区域的同步播放。
本申请的实施例提供一种信息处理方法,该信息处理方法可以应用于会议设备;该信息处理方法还可以应用于会议系统,会议系统可以包括会议设备和多个图像采集模组。这里,以信息处理方法应用于会议设备为例进行说明,参照图6所示,该方法包括以下步骤:
步骤301、获得会议设备的第一图像采集模组所采集的与参考对象关联的第一视频数据流。
步骤302、分析第一视频数据流中的图像,以确定图像中的目标对象。
其中,参考对象包括目标对象和剩余对象。
会议设备通过自身的第一图像采集模组针对参考对象进行拍摄,得到第一时段的第一视频数据流;进一步地,会议设备继续调用第一图像采集模组针对参考对象进行拍摄,实时获得第一时段之后的第一视频数据流。
会议设备分析第一时段的第一视频数据流中的图像,确定出图像中的目标对象。在一种可实现的场景中,一旦会议设备分析确定出图像中的目标对象,即特别关注对象,则触发会议设备控制第二图像采集模组针对确定出的目标对象进行拍摄,以得到第二视频数据流。
可以理解的,会议设备对第一图像采集模组实时采集的第一视频数据进行分析,一旦确定目标对象,则触发目标对象对应的第二图像采集模组对目标对象进行拍摄;会议设备基于第一视频数据中不同时刻的图像所确定的目标对象,调用与目标对象对应的第二图像采集模组进行拍摄,以得到具有不同时间戳的第二视频数据流,从而,在后续将多路视频数据流和成一路时,基于时间戳进行视频数据流的合成,确保输出的视频数据流在播放的过程中,同一呈现界面中的画面是同步的。
本申请实施例中,步骤302分析第一视频数据流中的图像,以确定图像中的目标对象,可以通过如下任一种方式实现:
方式一、如果所采集的图像的数量为一帧,分析图像包括的各个对象的属性特征,确定各个对象中属性特征符合目标属性特征的对象为目标对象。
其中,差异条件包括目标对象与参考对象具有不同的属性特征的条件。
这里,目标属性特征包括但不限于如下至少一种特征:形状特征、可书写特征和可播放多媒体信息特征。
方式二、如果所采集的图像的数量为多帧,分析多帧图像中的至少部分图像,确定至少部分图像中展示的内容发生变化的对象为目标对象。
其中,差异条件包括目标对象为内容的展示方且参考对象为内容的观看方的条件。
方式三、分析图像包括的各个对象的行为特征,确定各个对象中行为特征符合目标行为特征的对象为目标对象。
其中,差异条件包括目标对象与参考对象具有不同的行为特征的条件。
这里,目标对象与参考对象都是具有行为特征的对象,只是目标对象与参考对象所呈现的行为特征存在差异。
进一步地,不同的行为特征的条件包括目标对象对图像中的目标物品执行目标操作。
步骤303、获得第二图像采集模组所采集的与目标对象关联的第二视频数据流。
步骤304、将第一视频数据流和第二视频数据流转换为特定格式的视频帧数据。
步骤305、基于任一视频数据流对应的特定格式的视频帧数据的分辨率,为任一视频流对应的特定格式的视频帧数据设置渲染坐标范围。
步骤306、基于各个视频数据流对应的视频帧数据的渲染坐标范围,同步地对各个视频数据流对应的视频帧数据进行渲染,得到目标视频数据流。
本申请的实施例提供一种信息处理方法,该信息处理方法可以应用于会议设备;该信息处理方法还可以应用于会议系统,会议系统可以包括会议设备和多个图像采集模组。这里,以信息处理方法应用于会议设备为例进行说明,参照图7所示,该方法包括以下步骤401-403以及步骤405-408;或者步骤401、步骤404-408:
步骤401、获得会议设备的第一图像采集模组所采集的与参考对象关联的第一视频数据流。
步骤402、如果目标对象为具有行为特征的对象,获得会议设备的音频模组所采集的目标对象的音频信息。
步骤403、基于音频信息确定会议场景中目标对象所处的位置,并控制第二图像采集模组调整至与位置对应的拍摄角度和/或拍摄焦距。
本申请实施例中,会议设备基于音频信息确定会议场景中目标对象所处的位置,进而控制第二图像采集模组调整至与位置对应的拍摄角度和/或拍摄焦距,灵活调整第二图像采集模组的拍摄参数。也就是说,会议设备在控制第二图像采集模组对目标对象进行拍摄之前,先将拍摄角度和拍摄焦距等拍摄参数调整至最佳参数,提高拍摄内容的清晰度。
步骤404、如果目标对象为具有目标属性特征的对象或具有行为特征的对象,获得第一图像采集模组所确定的会议场景中目标对象所处的位置,并控制第二图像采集模组调整至与位置对应的拍摄角度和/或拍摄焦距。
本申请实施例中,会议设备的第一图像采集模组还可以是深度(Time of flight,TOF)摄像头或者结构光摄像头。示例性的,会议设备通过TOF摄像头可以确定白板的位置、演讲者的位置,进而会议设备基于确定的目标对象所处的位置,灵活控制第二图像采集模组调整至与位置对应的拍摄角度和/或拍摄焦距,提高拍摄内容的清晰度。
步骤405、获得第二图像采集模组所采集的与目标对象关联的第二视频数据流。
步骤406、将第一视频数据流和第二视频数据流转换为特定格式的视频帧数据。
步骤407、基于任一视频数据流对应的特定格式的视频帧数据的分辨率,为所述任一视频流对应的特定格式的视频帧数据设置渲染坐标范围。
其中,与不同视频数据流对应的视频帧数据的渲染坐标范围之间无重叠。
步骤408、基于各个视频数据流对应的视频帧数据的渲染坐标范围,同步地对各个视频数据流对应的视频帧数据进行渲染,得到目标视频数据流。
由上述可知,本申请提供的信息处理方法,通过会议设备实现多机位摄像头的智能控制,会议设备通过自身的第一图像采集模组如摄像头和音频模组如麦克风等多种感应设备,对会议场景进行智能判断,自动分配好每个摄像头的机位和功能,进行差异化的捕捉,将多个摄像头的内容进行捕捉后,传输到本地的会议设备上,通过会议设备的视频采集虚拟中间件将多路的视频流进行处理和合并,最终输出一路完整的多机位内容。
本申请的实施例提供一种信息处理装置,该信息处理装置可以应用于图1、2、6、7对应的实施例提供的一种信息处理方法中,参照图8所示,该信息处理装置8包括:
获得模组801,用于获得会议设备的第一图像采集模组所采集的与参考对象关联的第一视频数据流;
获得模组801,还用于获得第二图像采集模组所采集的与目标对象关联的第二视频数据流;
处理模组802,用于将第一视频数据流和第二视频数据流合成一路目标视频数据流;
发送模组803,用于将目标视频数据流发送至目标设备,以使目标设备输出目标视频数据流时在同一界面中展示第一视频数据流对应的画面和第二视频数据流对应的画面。
在本申请其他实施例中,处理模组802,还用于分析第一图像采集模组所采集的图像,以确定图像中的目标对象;其中,目标对象是图像中与参考对象之间满足差异条件的对象。
在本申请其他实施例中,处理模组802,还用于分析第一视频数据流中的图像,以确定图像中的目标对象;其中,参考对象包括目标对象和剩余对象。
在本申请其他实施例中,处理模组802,还用于如果所采集的图像的数量为一帧,分析图像包括的各个对象的属性特征,确定各个对象中属性特征符合目标属性特征的对象为目标对象;其中,差异条件包括目标对象与参考对象具有不同的属性特征的条件。
在本申请其他实施例中,处理模组802,还用于如果所采集的图像的数量为多帧,分析多帧图像中的至少部分图像,确定至少部分图像中展示的内容发生变化的对象为目标对象;其中,差异条件包括目标对象为内容的展示方且参考对象为内容的观看方的条件。
在本申请其他实施例中,处理模组802,还用于分析图像包括的各个对象的行为特征,确定各个对象中行为特征符合目标行为特征的对象为目标对象;其中,差异条件包括目标对象与参考对象具有不同的行为特征的条件。
在本申请其他实施例中,不同的行为特征的条件包括目标对象对图像中的目标物品执行目标操作。
在本申请其他实施例中,获得模组801,还用于如果目标对象为具有行为特征的对象,获得会议设备的音频模组所采集的目标对象的音频信息;处理模组802,还用于基于音频信息确定会议场景中目标对象所处的位置,并控制第二图像采集模组调整至与位置对应的拍摄角度和/或拍摄焦距。
在本申请其他实施例中,获得模组801,还用于如果目标对象为具有目标属性特征的对象或具有行为特征的对象,获得第一图像采集模组所确定的会议场景中目标对象所处的位置;处理模组802,还用于控制第二图像采集模组调整至与位置对应的拍摄角度和/或拍摄焦距。
在本申请其他实施例中,处理模组802,还用于将第一视频数据流和第二视频数据流转换为特定格式的视频帧数据;基于任一视频数据流对应的特定格式的视频帧数据的分辨率,为任一视频流对应的特定格式的视频帧数据设置渲染坐标范围;其中,与不同视频数据流对应的视频帧数据的渲染坐标范围之间无重叠;基于各个视频数据流对应的视频帧数据的渲染坐标范围,同步地对各个视频数据流对应的视频帧数据进行渲染,得到目标视频数据流。
本申请实施例所提供的信息处理装置,通过获得会议设备的第一图像采集模组所采集的与参考对象关联的第一视频数据流;获得第二图像采集模组所采集的与目标对象关联的第二视频数据流;将第一视频数据流和第二视频数据流合成一路目标视频数据流,并将目标视频数据流发送至目标设备,以使目标设备输出目标视频数据流时在同一界面中展示第一视频数据流对应的画面和第二视频数据流对应的画面;可见,在多图像采集模组拍摄的会议场景下,获得会议设备的第一图像采集模组对参考对象进行拍摄得到的第一视频数据流,获得第二图像模组对目标对象进行拍摄得到的第二视频数据流,进一步地,针对第一图像采集模组和第二图像采集模组各有侧重地拍摄得到的视频数据流进行合成,最终得到一路目标视频数据流,并发送至目标设备即分享设备,如此,实现了将会议场景下的各个图像采集模组针对性地采集的不同视频数据流合成一路,并提供给分享设备,从而便于分享设备的观看者在同一呈现界面中观看具有不同关注点的各个画面。
本申请的实施例提供一种会议设备,该会议设备可以应用于图1、2、6、7对应的实施例提供的一种信息处理方法中,参照图9所示,该会议设备9(图9中的会议设备9对应于图3中的会议设备31)包括:处理器901、存储器902和通信总线903,其中:
通信总线903用于实现处理器901和存储器902之间的通信连接。
处理器901用于执行存储器902中存储的信息处理程序,以实现以下步骤:
获得会议设备的第一图像采集模组所采集的与参考对象关联的第一视频数据流;
获得第二图像采集模组所采集的与目标对象关联的第二视频数据流;
将第一视频数据流和第二视频数据流合成一路目标视频数据流,并将目标视频数据流发送至目标设备,以使目标设备输出目标视频数据流时在同一界面中展示第一视频数据流对应的画面和第二视频数据流对应的画面。
在本申请的其他实施例中,处理器901用于执行存储器902中存储的信息处理程序,以实现以下步骤:
分析第一图像采集模组所采集的图像,以确定图像中的目标对象;其中,目标对象是图像中与参考对象之间满足差异条件的对象。
在本申请的其他实施例中,处理器901用于执行存储器902中存储的信息处理程序,以实现以下步骤:
分析第一视频数据流中的图像,以确定图像中的目标对象;其中,参考对象包括目标对象和剩余对象。
在本申请的其他实施例中,处理器901用于执行存储器902中存储的信息处理程序,以实现以下步骤:
如果所采集的图像的数量为一帧,分析图像包括的各个对象的属性特征,确定各个对象中属性特征符合目标属性特征的对象为目标对象;其中,差异条件包括目标对象与参考对象具有不同的属性特征的条件;如果所采集的图像的数量为多帧,分析多帧图像中的至少部分图像,确定至少部分图像中展示的内容发生变化的对象为目标对象;其中,差异条件包括目标对象为内容的展示方且参考对象为内容的观看方的条件。
在本申请的其他实施例中,处理器901用于执行存储器902中存储的信息处理程序,以实现以下步骤:
分析图像包括的各个对象的行为特征,确定各个对象中行为特征符合目标行为特征的对象为目标对象;其中,差异条件包括目标对象与参考对象具有不同的行为特征的条件。
在本申请的其他实施例中,不同的行为特征的条件包括目标对象对图像中的目标物品执行目标操作。
在本申请的其他实施例中,处理器901用于执行存储器902中存储的信息处理程序,以实现以下步骤:
如果目标对象为具有行为特征的对象,获得会议设备的音频模组所采集的目标对象的音频信息;基于音频信息确定会议场景中目标对象所处的位置,并控制第二图像采集模组调整至与位置对应的拍摄角度和/或拍摄焦距。
在本申请的其他实施例中,处理器901用于执行存储器902中存储的信息处理程序,以实现以下步骤:
如果目标对象为具有目标属性特征的对象或具有行为特征的对象,获得第一图像采集模组所确定的会议场景中目标对象所处的位置,并控制第二图像采集模组调整至与位置对应的拍摄角度和/或拍摄焦距。
在本申请的其他实施例中,处理器901用于执行存储器902中存储的信息处理程序,以实现以下步骤:
将第一视频数据流和第二视频数据流转换为特定格式的视频帧数据;
基于任一视频数据流对应的特定格式的视频帧数据的分辨率,为任一视频流对应的特定格式的视频帧数据设置渲染坐标范围;其中,与不同视频数据流对应的视频帧数据的渲染坐标范围之间无重叠;
基于各个视频数据流对应的视频帧数据的渲染坐标范围,同步地对各个视频数据流对应的视频帧数据进行渲染,得到目标视频数据流。
作为示例,处理器可以是一种集成电路芯片,具有信号的处理能力,例如通用处理器、数字信号处理器(DSP,Digital Signal Processor),或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等,其中,通用处理器可以是微处理器或者任何常规的处理器等。
本申请实施例所提供的会议设备,通过获得会议设备的第一图像采集模组所采集的与参考对象关联的第一视频数据流;获得第二图像采集模组所采集的与目标对象关联的第二视频数据流;将第一视频数据流和第二视频数据流合成一路目标视频数据流,并将目标视频数据流发送至目标设备,以使目标设备输出目标视频数据流时在同一界面中展示第一视频数据流对应的画面和第二视频数据流对应的画面;可见,在多图像采集模组拍摄的会议场景下,获得会议设备的第一图像采集模组对参考对象进行拍摄得到的第一视频数据流,获得第二图像模组对目标对象进行拍摄得到的第二视频数据流,进一步地,针对第一图像采集模组和第二图像采集模组各有侧重地拍摄得到的视频数据流进行合成,最终得到一路目标视频数据流,并发送至目标设备即分享设备,如此,实现了将会议场景下的各个图像采集模组针对性地采集的不同视频数据流合成一路,并提供给分享设备,从而便于分享设备的观看者在同一呈现界面中观看具有不同关注点的各个画面。
本申请的实施例提供一种计算机可读存储介质,该计算机可读存储介质存储有一个或者多个程序,该一个或者多个程序可被一个或者多个处理器执行,以实现如图1、2、6、7对应的实施例提供的信息处理方法中的实现过程,此处不再赘述。
本申请实施例所提供的计算机可读存储介质,通过获得会议设备的第一图像采集模组所采集的与参考对象关联的第一视频数据流;获得第二图像采集模组所采集的与目标对象关联的第二视频数据流;将第一视频数据流和第二视频数据流合成一路目标视频数据流,并将目标视频数据流发送至目标设备,以使目标设备输出目标视频数据流时在同一界面中展示第一视频数据流对应的画面和第二视频数据流对应的画面;可见,在多图像采集模组拍摄的会议场景下,获得会议设备的第一图像采集模组对参考对象进行拍摄得到的第一视频数据流,获得第二图像模组对目标对象进行拍摄得到的第二视频数据流,进一步地,针对第一图像采集模组和第二图像采集模组各有侧重地拍摄得到的视频数据流进行合成,最终得到一路目标视频数据流,并发送至目标设备即分享设备,如此,实现了将会议场景下的各个图像采集模组针对性地采集的不同视频数据流合成一路,并提供给分享设备,从而便于分享设备的观看者在同一呈现界面中观看具有不同关注点的各个画面
本领域内的技术人员应明白,本申请的实施例可提供为方法、系统、或计算机程序产品。因此,本申请可采用硬件实施例、软件实施例、或结合软件和硬件方面的实施例的形式。而且,本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器和光学存储器等)上实施的计算机程序产品的形式。
本申请是参照根据本申请实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
以上所述,仅为本申请的较佳实施例而已,并非用于限定本申请的保护范围。
Claims (9)
1.一种信息处理方法,所述方法包括:
获得会议设备的第一图像采集模组所采集的与参考对象关联的第一视频数据流;
获得第二图像采集模组所采集的与目标对象关联的第二视频数据流;
将所述第一视频数据流和所述第二视频数据流合成一路目标视频数据流,并将所述目标视频数据流发送至目标设备,以使所述目标设备输出所述目标视频数据流时在同一界面中展示所述第一视频数据流对应的画面和所述第二视频数据流对应的画面;
其中,所述目标对象是所述图像中与所述参考对象之间满足差异条件的对象;所述方法还包括以下至少一种:
如果所述第一图像采集设备所采集的所述图像的数量为一帧,分析所述图像包括的各个对象的属性特征,确定所述各个对象中属性特征符合目标属性特征的对象为所述目标对象;其中,所述差异条件包括所述目标对象与所述参考对象具有不同的属性特征的条件;
如果所述第一图像采集设备所采集的所述图像的数量为多帧,分析多帧所述图像中的至少部分图像,确定所述至少部分图像中展示的内容发生变化的对象为所述目标对象;其中,所述差异条件包括所述目标对象为所述内容的展示方且所述参考对象为所述内容的观看方的条件。
2.根据权利要求1所述的方法,所述方法还包括:
分析所述第一视频数据流中的图像,以确定所述图像中的所述目标对象;其中,参考对象包括所述目标对象和剩余对象。
3.根据权利要求1或2所述的方法,所述方法还包括:
分析所述图像包括的各个对象的行为特征,确定所述各个对象中行为特征符合目标行为特征的对象为所述目标对象;其中,所述差异条件包括所述目标对象与所述参考对象具有不同的行为特征的条件。
4.根据权利要求3所述的方法,所述不同的行为特征的条件包括目标对象对所述图像中的目标物品执行目标操作。
5.根据权利要求1所述的方法,所述获得第二图像采集模组所采集的与目标对象关联的第二视频数据流之前,所述方法包括:
如果所述目标对象为具有行为特征的对象,获得所述会议设备的音频模组所采集的所述目标对象的音频信息;基于所述音频信息确定会议场景中所述目标对象所处的位置,并控制所述第二图像采集模组调整至与所述位置对应的拍摄角度和/或拍摄焦距。
6.根据权利要求1所述的方法,所述获得第二图像采集模组所采集的与目标对象关联的第二视频数据流之前,所述方法包括:
如果所述目标对象为具有目标属性特征的对象或具有行为特征的对象,获得所述第一图像采集模组所确定的会议场景中所述目标对象所处的位置,并控制所述第二图像采集模组调整至与所述位置对应的拍摄角度和/或拍摄焦距。
7.根据权利要求1所述的方法,所述将所述第一视频数据流和所述第二视频数据流合成一路目标视频数据流,包括:
将所述第一视频数据流和所述第二视频数据流转换为特定格式的视频帧数据;
基于任一视频数据流对应的特定格式的视频帧数据的分辨率,为所述任一视频流对应的特定格式的视频帧数据设置渲染坐标范围;其中,与不同视频数据流对应的视频帧数据的渲染坐标范围之间无重叠;
基于各个视频数据流对应的视频帧数据的渲染坐标范围,同步地对所述各个视频数据流对应的视频帧数据进行渲染,得到所述目标视频数据流。
8.一种信息处理装置,所述信息处理装置包括:
获得模组,用于获得会议设备的第一图像采集模组所采集的与参考对象关联的第一视频数据流;
所述获得模组,用于获得第二图像采集模组所采集的与目标对象关联的第二视频数据流;其中,所述目标对象是所述图像中与所述参考对象之间满足差异条件的对象;
处理模组,用于将所述第一视频数据流和所述第二视频数据流合成一路目标视频数据流;
发送模组,用于将所述目标视频数据流发送至目标设备,以使所述目标设备输出所述目标视频数据流时在同一界面中展示所述第一视频数据流对应的画面和所述第二视频数据流对应的画面;
所述处理模组,还用于如果所述第一图像采集设备所采集的所述图像的数量为一帧,分析所述图像包括的各个对象的属性特征,确定所述各个对象中属性特征符合目标属性特征的对象为所述目标对象;其中,所述差异条件包括所述目标对象与所述参考对象具有不同的属性特征的条件;
如果所述第一图像采集设备所采集的所述图像的数量为多帧,分析多帧所述图像中的至少部分图像,确定所述至少部分图像中展示的内容发生变化的对象为所述目标对象;其中,所述差异条件包括所述目标对象为所述内容的展示方且所述参考对象为所述内容的观看方的条件。
9.一种信息处理方法,所述方法包括:
获得会议设备的第一图像采集模组所采集的与参考对象关联的第一视频数据流;
获得第二图像采集模组所采集的与目标对象关联的第二视频数据流;
将所述第一视频数据流和所述第二视频数据流合成一路目标视频数据流,并将所述目标视频数据流发送至目标设备,以使所述目标设备输出所述目标视频数据流时在同一界面中展示所述第一视频数据流对应的画面和所述第二视频数据流对应的画面;
其中,所述目标对象是所述图像中与所述参考对象之间满足差异条件的对象;所述方法还包括:
分析所述第一图像采集模组所采集的图像,确定所述图像包括的各个对象中行为特征符合目标行为特征的对象为所述目标对象;其中,所述差异条件包括所述目标对象与所述参考对象具有不同的行为特征的条件。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110097939.4A CN112887653B (zh) | 2021-01-25 | 2021-01-25 | 一种信息处理方法和信息处理装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110097939.4A CN112887653B (zh) | 2021-01-25 | 2021-01-25 | 一种信息处理方法和信息处理装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN112887653A CN112887653A (zh) | 2021-06-01 |
CN112887653B true CN112887653B (zh) | 2022-10-21 |
Family
ID=76051077
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110097939.4A Active CN112887653B (zh) | 2021-01-25 | 2021-01-25 | 一种信息处理方法和信息处理装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112887653B (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117793279A (zh) * | 2022-09-20 | 2024-03-29 | 腾讯科技(深圳)有限公司 | 数据处理方法、装置、电子设备及存储介质 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6295322B1 (en) * | 1998-07-09 | 2001-09-25 | North Shore Laboratories, Inc. | Processing apparatus for synthetically extending the bandwidth of a spatially-sampled video image |
CN104380720A (zh) * | 2013-04-27 | 2015-02-25 | 华为技术有限公司 | 视频会议处理方法及设备 |
CN106251334A (zh) * | 2016-07-18 | 2016-12-21 | 华为技术有限公司 | 一种摄像机参数调整方法、导播摄像机及系统 |
CN109889765A (zh) * | 2019-03-27 | 2019-06-14 | 联想(北京)有限公司 | 视频处理方法、视频处理装置和会议系统 |
CN110213599A (zh) * | 2019-04-16 | 2019-09-06 | 腾讯科技(深圳)有限公司 | 一种附加信息处理的方法、设备及存储介质 |
-
2021
- 2021-01-25 CN CN202110097939.4A patent/CN112887653B/zh active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6295322B1 (en) * | 1998-07-09 | 2001-09-25 | North Shore Laboratories, Inc. | Processing apparatus for synthetically extending the bandwidth of a spatially-sampled video image |
CN104380720A (zh) * | 2013-04-27 | 2015-02-25 | 华为技术有限公司 | 视频会议处理方法及设备 |
CN106251334A (zh) * | 2016-07-18 | 2016-12-21 | 华为技术有限公司 | 一种摄像机参数调整方法、导播摄像机及系统 |
CN109889765A (zh) * | 2019-03-27 | 2019-06-14 | 联想(北京)有限公司 | 视频处理方法、视频处理装置和会议系统 |
CN110213599A (zh) * | 2019-04-16 | 2019-09-06 | 腾讯科技(深圳)有限公司 | 一种附加信息处理的方法、设备及存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN112887653A (zh) | 2021-06-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9774896B2 (en) | Network synchronized camera settings | |
US9270941B1 (en) | Smart video conferencing system | |
CN102761702B (zh) | 用于移动通信设备中的图像重叠的方法以及成像系统 | |
WO2017113734A1 (zh) | 一种视频的多点同屏播放方法及系统 | |
US8749607B2 (en) | Face equalization in video conferencing | |
US9852764B2 (en) | System and method for providing and interacting with coordinated presentations | |
KR101961015B1 (ko) | 가상 스튜디오 연동 스마트 증강현실 서비스 시스템 및 방법 | |
CN105072314A (zh) | 一种可自动跟踪目标的虚拟演播室实现方法 | |
KR20160128366A (ko) | 이동 단말의 촬영 방법 및 이동 단말 | |
JP2019030007A (ja) | 複数のカメラを用いて映像を取得するための電子装置及びこれを用いた映像処理方法 | |
CN113115110B (zh) | 视频合成方法、装置、存储介质与电子设备 | |
US10334204B2 (en) | News production system with integrated display | |
JP5317630B2 (ja) | 画像配信装置、方法及びプログラム | |
CN112887653B (zh) | 一种信息处理方法和信息处理装置 | |
CN110730340A (zh) | 基于镜头变换的虚拟观众席展示方法、系统及存储介质 | |
JP7424076B2 (ja) | 画像処理装置、画像処理システム、撮像装置、画像処理方法およびプログラム | |
WO2023236656A1 (zh) | 互动画面的渲染方法、装置、设备、存储介质及程序产品 | |
TWI739585B (zh) | 全視角會議攝影裝置 | |
CN112887655B (zh) | 一种信息处理方法和信息处理装置 | |
KR20180092411A (ko) | 다원 방송 송출 방법 및 장치 | |
KR20170059310A (ko) | 텔레 프레젠스 영상 송신 장치, 텔레 프레젠스 영상 수신 장치 및 텔레 프레젠스 영상 제공 시스템 | |
CN115225915A (zh) | 直播录设备、直播录系统及直播录方法 | |
WO2019144076A1 (en) | Panoramic picture in picture video | |
CN114827477B (zh) | 延时摄影的方法、装置、电子设备及介质 | |
CN114461165B (zh) | 虚实相机画面同步方法、装置及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |