CN112929684B - 视频叠加信息更新方法、装置、电子设备及存储介质 - Google Patents

Abstract

本发明提供的一种视频叠加信息更新方法、装置、电子设备及存储介质，方法包括：当监听到视频叠加信息调整通知，获取当前互动环节的业务需求信息；其中，视频叠加信息为全部主播成员在主播端的直播界面上的视频画面布局信息；当前互动环节为全部主播成员参与同一互动事件中的任意一个互动环节；全部主播成员在不同互动环节对应不同视频画面布局；根据当前互动环节的业务需求信息更新全部主播成员已存在的视频画面布局信息。本申请可以根据变化后的互动场景的业务需求信息来更新此时已存在的视频叠加信息，从而实现调整各主播成员视频画面的大小和位置的目的，满足当前业务需求。

Description

视频叠加信息更新方法、装置、电子设备及存储介质

技术领域

本发明涉及直播技术领域，具体而言，涉及一种视频叠加信息更新方法、装置、电子设备及存储介质。

背景技术

随着互联网技术的发展，网络直播间的互动性媒体广播形式得到了不断的发展和广泛的普及,在主播进行直播的过程中，经常会和其他主播进行互动，互动时通常会把多个主播的视频图层合并成一个画面，观众可以同时看到所有主播的直播画面。

然而，目前的视频图层叠加方式是通过固定模板将多个主播的视频图层叠加到主播直播画面上，无法随着互动场景的变换而动态更新每个主播对应的视频图层的位置、大小，满足不了观众的多样化需求。

发明内容

有鉴于此，本发明的目的在于提供一种视频叠加信息更新方法、装置、电子设备及存储介质，用以随着互动场景的变换而动态更新每个主播对应的视频图层的位置、大小，满足观众的多样化需求。

为了实现上述目的，本发明实施例采用的技术方案如下：

第一方面，本发明提供一种视频叠加信息更新方法，应用与主播端；所述方法包括：当监听到视频叠加信息调整通知，获取当前互动环节的业务需求信息；其中，所述视频叠加信息为所述全部主播成员在所述主播端的直播界面上的视频画面布局信息；所述当前互动环节为所述全部主播成员参与同一互动事件中的任意一个互动环节；所述全部主播成员在不同互动环节对应不同视频画面布局；根据所述当前互动环节的业务需求信息更新所述全部主播成员已存在的视频画面布局信息。

可选地，根据所述当前互动环节的业务需求信息更新所述全部主播成员已存在的视频画面布局信息,包括：获取所述全部主播成员各自对应的视频流以及所述业务需求信息中包含的所述全部主播成员的身份信息和位置信息；根据所述视频流、所述身份信息和所述位置信息确定所述每个所述主播成员在所述当前互动环节中的目标视频画面布局信息；根据所述目标视频画面布局信息更新所述已存在的视频画面布局信息。

可选地，根据所述视频流、所述身份信息和位置信息确定所述每个所述主播成员在所述当前互动环节中的目标视频画面布局信息，包括：根据所述主播端的视频流分辨率、所述身份信息和位置信息设置每个所述主播成员对应的画布位置、画布尺寸以及每个所述主播成员的视频画面的叠加权重系数；根据所述主播端的摄像头分辨率，将全部所述视频流进行裁剪，获得每个所述主播成员对应的预设尺寸视频画面；根据的画布位置、画布位置尺寸、预设尺寸视频画面以及所述叠加权重系数确定每个所述主播成员对应的目标视频画面布局信息。

可选地，根据所述目标视频画面布局信息更新所述全部主播成员已存在的视频画面布局信息；根据每个主播成员对应的图层标识符和目标视频画面布局信息更新所述主播成员对应的已存在视频画面布局信息。

可选地，所述主播成员包括所述主播端对应的第一主播成员以及与所述第一主播成员互动的第二主播成员，还包括：当监听到视频叠加信息删除通知，将所述第二主播成员对应的所述视频画面进行删除。

可选地，所述方法还包括：将更新后的全部所述视频画面布局信息发送至云服务器，以使所述云服务器将所述视频画面布局信息叠加至所述主播端的视频流中生成混合流视频，并将所述混合流视频发送至内容分发服务器。

可选地，所述方法还包括：接收视频流地址询问请求；发送本地视频流信息，以使其他主播端获得所述本地视频流信息后更新所述全部主播成员的视频画面布局信息；所述其他主播端为与所述主播端参与所述互动环节的主播端。

第二方面，本发明提供一种视频叠加信息更新装置，包括：获取模块，用于当监听到视频叠加信息调整通知，获取目标互动事件中全部主播成员的当前互动环节的业务需求信息；其中，所述视频叠加信息为所述全部主播成员的视频画面布局信息；所述全部主播成员在不同互动环节对应不同视频画面布局；更新模块，用于根据所述当前互动环节的业务需求信息更新所述全部主播成员已存在的视频画面布局信息。

第三方面，本发明提供一种电子设备，包括处理器和存储器，所述存储器存储有能够被所述处理器处理的计算机程序，所述处理器可执行所述计算机程序以实现第一方面所述的视频叠加信息更新方法。

第四方面，本发明提供一种存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现如第一方面所述的视频叠加信息更新方法。

本发明实施例提供的一种视频叠加信息更新方法、装置、电子设备及存储介质，方法包括：当监听到视频叠加信息调整通知，获取当前互动环节的业务需求信息；其中，视频叠加信息为全部主播成员在主播端的直播界面上的视频画面布局信息；当前互动环节为全部主播成员参与同一互动事件中的任意一个互动环节；全部主播成员在不同互动环节对应不同视频画面布局；根据当前互动环节的业务需求信息更新全部主播成员已存在的视频画面布局信息。与现有技术的区别在于，现有技术使用固定合成模板来布局各个主播成员的视频画面，导致在不同互动场景中的各主播成员的视频画面的大小和位置无法调整，无法满足场景业务需求，而本申请为了解决这种问题，通过主播端的监听是否有来自服务器的视频叠加信息调整指令，若有，则说明此时互动场景发生变化，那么为了满足变化后的互动场景业务需求，主播端可以根据变化后的互动场景的业务需求信息来更新此时已存在的视频叠加信息，从而实现调整各主播成员视频画面的大小和位置的目的，满足当前业务需求。

为使本发明的上述目的、特征和优点能更明显易懂，下文特举较佳实施例，并配合所附附图，作详细说明如下。

附图说明

为了更清楚地说明本发明实施例的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，应当理解，以下附图仅示出了本发明的某些实施例，因此不应被看作是对范围的限定，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他相关的附图。

图1示出了本发明实施例的一种应用环境示意图；

图2A示出了本发明实施例提供的第一种场景示意图；

图2B示出了本发明实施例提供的第二种场景示意图；

图3示出了本发明实施例提供的一种电子设备的方框示意图；

图4示出了本发明实施例提供的一种视频叠加信息更新方法的流程示意图；

图5示出了本发明实施例提供的另一种视频叠加信息更新方法的流程示意图之一；

图6示出了本发明实施例提供的第三种场景示意图；

图7示出了本发明实施例提供的另一种视频叠加信息更新方法的流程示意图之二；

图8示出了本发明实施例提供的另一种视频叠加信息更新方法的流程示意图之三；

图9示出了本发明实施例提供的步骤S42的流程示意图；

图10示出了本发明实施例提供的步骤S42-3的流程示意图；

图11为本发明实施例提供的一种视频叠加信息更新装置的功能模块图。

图标：第一主播端-102；服务器-104；第二主播端-106；电子设备-300；视频叠加信息更新装置-301；存储器-302；处理器-303；通信单元-304；获取模块-3011；更新模块-3012。

具体实施方式

下面将结合本发明实施例中附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。通常在此处附图中描述和示出的本发明实施例的组件可以以各种不同的配置来布置和设计。

因此，以下对在附图中提供的本发明的实施例的详细描述并非旨在限制要求保护的本发明的范围，而是仅仅表示本发明的选定实施例。基于本发明的实施例，本领域技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例，都属于本发明保护的范围。

需要说明的是，术语“第一”和“第二”等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。

网络直播间的互动性媒体广播形式得到了不断的发展和广泛的普及,在主播进行直播的过程中，为了提升直播的趣味性，可以使多个主播在直播过程中进行连麦PK。例如，主播成员在直播游戏的时候，可以使用连麦玩法与其他主播连麦，以提升直播间氛围。

在主播互动过程中，通常会把多个主播的视频图层合并成一个画面，观众可以同时看到所有主播的直播画面。然而，目前的视频图层叠加方式是通过固定模板将多个主播的视频图层叠加到主播直播画面上，无法随着互动场景的变换而动态更新每个主播对应的视频图层的位置、大小，满足不了观众的多样化需求。

为了解决上述技术问题，本发明实施例提供了一种视频叠加信息更新方法，该方法可以应用于第一主播成员的主播端，下文的“本机”也表示第一主播成员的主播端,如无特殊说明，在适用本实施方式后，均会以第一主播成员的主播端的视角对本发明进行说明，该方法可以在互动场景发生变化之后，及时更新全部主播成员的视频画面布局信息，以使更新后的主播视频画面满足当前场景业务需求。

基于此，首先介绍本发明实施例中的视频叠加信息更新方法的应用环境，请参见图1，图1示出了本发明实施例的一种应用环境示意图，图1中包括第一主播成员对应的第一主播端102，第二主播成员对应的第二主播端106、服务器104，服务器104与第一主播端102和第二主播端106之间通过网络连接。其中，第二主播端106可以有多个。

第一主播成员和第二主播成员可以共同参与同一互动事件，互动事件可以是多个主播端的通过直播连麦进行的互动事件。举例而言，互动事件可以是多个网络主播在直播连麦时进行各类网络游戏，如多个网络主播进行的多人在线战术竞技游戏，还可以是多个网络主播进行某一休闲益智类竞赛活动，如多个网络主播同时进行的棋牌类游戏、数字游戏、文字游戏等。需要说明的是，多个网络主播通过直播连麦进行的各种互动事件均属于本公开所要保护的范围，本公开对目标互动事件的具体类型不作任何特殊限定。

在参与互动事件的过程中，第一主播端102通过服务器104即可接收到其他共同直播的第二主播端106的视频流，并根据本机和第二主播端106的视频流计算全部主播成员视频画面布局，即各个主播成员在本机直播界面上的位置以及尺寸大小，进而在本机的直播界面对应显示全部主播成员的视频画面。例如，参见图2A，图2A示出了本发明实施例提供的第一种场景示意图，在直播界面中显示出了主播1至主播4的视频画面，可以看出，在互动事件的环节1(round1)中，主播1和主播2的视频画面位于屏幕中间位置，主播3和主播4位于屏幕的边角位置，而且，主播1和主播2的视频画面的尺寸大于主播3和主播4的视频画面的尺寸。

当同一互动事件中的互动环节发生变化后，第一主播端102可以根据变化后的场景需求动态调整直播界面中各个主播成员的视频画面布局，使得调整后的各个主播成员的视频画面满足业务需求，例如，在图2A的基础上，参见图2B，图2B示出了本发明实施例提供的第二种场景示意图，当互动事件进行到环节2(round2)，由于互动环节不同，各个主播成员对应的视频画面布局也有所不同，例如，在PK类场景中，本场获胜者可以继续接收其他PK选手的挑战继续下一场PK，本场失败者不再参与下一场PK，此时则需要更换每一场PK的主播成员的视频布局，突出显示PK成员，未参加PK的成员处于观战状态，因此，当互动场次发生变化，即可根据变化后的互动环节的业务需求重新确定各个主播成员对应的视频画面布局，形成如图2B所示的布局效果图。

需要说明的是，在图2A和图2B所示的场景示意图中显示的视频画面均可以理解为视频流上叠加的视频图层，可以理解，图2A和图2B所示的视频图层仅为示意，直播界面上还可包括比图2A和图2B中所示更多或者更少的与互动事件有关的其他图层部件。

为了实现上述效果，请参考图3，图3示出了本发明实施例提供的一种电子设备的方框示意图，该电子设备300可以是图1中的第一主播端102或者第二主播端106，本实施例的视频图叠加信息可以应用于该电子设备300。在一些可能的实施例中，电子设备300可以是，但不限于，智能手机、个人电脑(personalcomputer，简称PC)、平板电脑、个人数字助理(personaldigitalassistant，简称PDA)、移动上网设备(mobileInternetdevice，简称MID)等。

如图3所示，电子设备300可以包括视频叠加信息更新装置301、存储器302、处理器303、通信单元304。所述存储器302、处理器303、通信单元304各元件相互之间直接或间接地电性连接，以实现数据的传输或交互。例如，这些元件相互之间可通过一条或多条通讯总线或信号线实现电性连接。

其中，所述存储器302可以是，但不限于，随机存取存储器(RandomAccessMemory，RAM)，只读存储器(ReadOnlyMemory，ROM)，可编程只读存储器(ProgrammableRead-OnlyMemory，PROM)，可擦除只读存储器(ErasableProgrammableRead-OnlyMemory，EPROM)，电可擦除只读存储器(ElectricErasableProgrammableRead-OnlyMemory，EEPROM)等。

其中，存储器302用于存储程序或者数据。所述处理器303可以是一种集成电路芯片，具有信号的处理能力。上述的处理器可以是通用处理器，包括中央处理器(CentralProcessingUnit，CPU)、网络处理器(NetworkProcessor，NP)等；还可以是数字信号处理器(DSP))、专用集成电路(ASIC)、现成可编程门阵列(FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。可以实现或者执行本发明实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。

所述通信单元304用于通过网络建立服务器与电子设备200之间的通信连接，并用于通过网络收发其他主播端的视频流数据以及调整视频画面布局的通知信息等。

所述电子设备300可以安装多个直播客户端，例如直播软件以及其它应用程序、软件开发工具包(SoftwareDevelopmentKit，简称SDK)。其中，直播客户端用于设置在电子设备300以及观众端中支持实现直播业务，具体来说，电子设备300中的直播客户端用于在主播用户侧进行采集形成直播流，通过服务器传输到观众端中的直播客户端，在直播观众终端中直播客户端的直播窗口播放。在本发明实施例中，SDK可以用于计算各个主播成员的视频画面的位置和大小、删除主播成员的视频画面以及将视频画面布局信息推送到云端实现视频画面布局信息与视频流合成的目的。

可以理解，图3所示的结构仅为示意，所述电子设备300还可包括比图3中所示更多或者更少的组件，或者具有与图3所示不同的配置。图3中所示的各组件可以采用硬件、软件或其组合实现。

基于上述图1所示的应用环境以及图3所示的电子设备300的实现架构，为了实现图2A及图2B所示的直播效果，下面以第一主播成员的主播第一主播端的视角对本发明进行说明，请参阅图4，图4为本实施例所提供的视频叠加信息更新方法的流程示意图，由图1所示的第一主播端102执行，下面对图4所示的流程示意图进行详细阐述。

S41、当监听到视频叠加信息调整通知，获取当前互动环节的业务需求信息。

在一些可能的实施例中，上述的视频叠加信息为全部主播成员在主播端的直播界面上的视频画面布局信息；上述的当前互动环节为全部主播成员参与同一互动事件中的任意一个互动环节，例如，图2A和图2B所示的“round1”和“round2”，所,全部主播成员在不同互动环节对应不同视频画面布局。

例如，参见图2A，在round1，主播1和主播2的视频画面位于屏幕中间位置，主播3和主播4位于屏幕的边角位置且主播3的视频画面叠加在主播2的视频画面上，主播4的视频画面叠加在主播1的视频画面上，主播1和主播2的视频画面的尺寸大于主播3和主播4的视频画面的尺寸。继续参见图2B，互动事件的环节进行到round2，此时，主播1和主播3的视频画面位于屏幕中间位置，主播2和主播4位于屏幕的边角位置且主播4的视频画面叠加在主播3的视频画面上且主播4的视频画面叠加在主播3的视频画面上，主播2的视频画面叠加在主播1的视频画面上，主播1和主播3的视频画面的尺寸大于主播2和主播4的视频画面的尺寸。

S42、根据当前互动环节的业务需求信息更新全部主播成员已存在的视频画面布局信息。

在一些可能的实施例中，根据实际的场景需求，全部主播成员在不同互动环节对应不同视频画面布局，因此，当主播端获得调整通知，表明互动事件中的互动场景发生变化，例如互动场次发生改变，此时可以根据当前互动环节的业务需求信息更新全部主播成员的视频画面布局信息。

例如，继续参见图2A和图2B，假设图2A是上一场次中主播1至主播4的视频画面布局，各个主播成员对应的视频画面布局信息为已存在的视频画面布局信息，当互动场次发生变化，即可根据变化后的互动环节的业务需求重新确定各个主播成员对应的视频画面布局，形成如图2B所示的布局效果图。

本发明实施例提供的视频叠加信息更新方法，与现有技术的区别在于，现有技术使用固定合成模板来布局各个主播成员的视频画面，导致在不同互动场景中的各主播成员的视频画面的大小和位置无法调整，无法满足场景业务需求，而本申请为了解决这种问题，通过主播端的监听是否有来自服务器的视频叠加信息调整指令，若有，则说明此时互动场景发生变化，那么为了满足变化后的互动场景业务需求，主播端可以根据变化后的互动场景的业务需求信息来更新此时已存在的视频叠加信息，从而实现调整各主播成员视频画面的大小和位置的目的，满足当前业务需求。

可选地，在主播端结束当前互动事件后，为了能够恢复主播端的正常直播画面，下面在图4的基础上，给出一种可能的实现方式，参见图5，图5示出了本发明实施例提供的另一种视频叠加信息更新方法的流程示意图之一，该方法还包括：

S43、当监听到视频叠加信息删除通知，将第二主播成员对应的视频画面进行删除。

在一些可能的实施例中，本机的主播成员在结束互动事件之后，服务器会提醒主播端的应用程序删除视频流中第二主播成员的视频画面，此时本机可以将全部第二主播成员的视频画面删除，使本机的直播界面恢复成正常直播的画面。在一种可能的实现方式中，本机可以通过SDK的removeLayers接口,把互动事件中的视频画面布局图层全部删除，恢复正常直播画面。

例如，继续参见图2B，假设该直播界面是主播1的主播端的界面，那么在主播1结束互动事件后，会收到删除视频叠加信息的通知，此时，主播1的主播端可以通过SDK的removeLayers接口,把主播2至主播4的视频画面的布局图层全部删除，恢复正常直播画面，最终展现的效果图如图6所示，图6示出了本发明实施例提供的第三种场景示意图，可以看出，在图6中的直播界面中，仅仅显示主播1的直播画面，而主播2至主播4的视频画面不在出现。

可选地，为了将变更后的各个主播成员的视频画面布局信息同步到观众端，下面在图4的基础上，给出一种可能的实现方式，参见图7，图7示出了本发明实施例提供的另一种视频叠加信息更新方法的流程示意图之二，该方法还包括：

S44、将更新后的全部视频画面布局信息发送至云服务器，以使云服务器将视频画面布局信息叠加至主播端的视频流中生成混合流视频，并将混合流视频发送至内容分发网络。

在一些可能的是实施例中，为了使观众端同步视频画面布局信息的更新，主播端可以通过SDK图层编辑相关接口与直播客户端通信，直播客户端将更新后的各个主播成员的视频画面布局信息提交到云端，云端获取到更新后的视频画面布局信息后进行视频图层绘制合成，生成混合流视频，混合流视频中叠加有更新后的视频画面布局信息，进而，云端将混合流视频上传到内容分发网络(ContentDeliveryNetwork，简称CDN)，进而观众端可从CDN厂商获取编码后的混合流视频数据，进行视频播放。观众端获取到编码后的混合流视频数据，对编码后的混合流视频数据进行解码，即可查看到变更后的视频换面布局的视频界面，在本实施例中，所述观众端，指的是与直播平台服务器对应的观众用户所使用的用户终端。对于本机而言，观众端可以为进入本机的直播间的用户端。

可选地，继续参见图1，对于第一主播端而言，其可以获取其他第二主播端的视频流信息进行视频叠加信息更新，那么进入第一主播端的直播间的观众端可以实时获得变更后的视频画面布局信息，那么对于第二主播端而言，其也可以根据变化的场景来动态调整其他主播成员的视频画面布局，那么为了使得进入第二主播端的直播间的观众端也能够获得变更后的视频画面布局信息，下面在图1的基础上，给出一种可能的实现方式，参见图8，图8示出了本发明实施例提供的另一种视频叠加信息更新方法的流程示意图之三，该方法还包括：

S45、接收视频流地址询问请求。

S46、发送本地视频流信息，以使其他主播端获得本地视频流信息可以更新全部主播成员的视频画面布局信息。

可以理解的是，上述接收视频流地址询问请求的终端可以是图1所示的第一主播端102，第一主播端102可以接收可以由直播服务器发送，或者云端服务器发送的视频流地址询问请求，进而可以将本地视频流信息发送给直播服务器或者云端服务器，并由直播服务器或者云端服务器发送给其他主播端，其他主播端可以为图1中的第二主播端106，第二主播端106获得第一主播端102的本地视频流后，可以通过执行步骤S41至步骤S42来动态调整全部主播成员的视频画面布局信息，以使使得进入第二主播端的直播间的观众端也能够获得变更后的视频画面布局信息。

可选地，为了动态调整已存在的视频画面布局信息，需要根据当前互动环节的业务配置信息来确定各个主播成员的目标视频布局信息，例如，可以根据在当前互动环节中各个主播成员的身份信息和位置信息来确定各主播成员视频画面的位置和尺寸，实现主从分明的效果，下面给出一种可能的实现方式，参见图9，图9示出了本发明实施例提供的步骤S42的流程示意图，步骤S42可以包括：

S42-1、获取全部主播成员各自对应的视频流以及业务需求信息中包含的全部主播成员的身份信息和位置信息。

例如，继续参见图2A和图2B，假设当前进行的互动事件为双人PK事件，在round1执行完毕后，主播1是胜方，主播2是败方，那么按照业务配置规则：在本场次中，上一场次的胜方继续执行PK任务，败方不再执行PK任务，上一场次未执行PK任务的其他主播人员执行本场次PK任务，那么可以确定本场次主播1与主播3或者主播4是PK人员，而主播2为观战人员，基于此，可以布局主播1至主播4的视频画面的大小和位置，实现主次分明的效果。

S42-3、根据视频流、身份信息和位置信息确定每个主播成员在当前互动环节中的目标视频画面布局信息。

例如，继续参见图2B，假设当前互动环节为round2，其中主播1与主播3或者主播4是PK人员，而主播2为观战人员，基于此，可以将主播1与主播3(或者主播4)的视频画面的位置布局在直播界面中间，将主播2和主播4(或者主播3)的视频画面布局在直播界面的边角位置，实现主次分明的效果。

S42-5、根据目标视频画面布局信息更新已存在的视频画面布局信息。

可以理解的是，通过确定的目标视频换面布局信息来更新已存在的视频画面布局信息，从而实现动态调整视频画面的位置和大小的目的，还能实现互动环节中主次分明的效果。

可选地，为了准确计算各个主播成员的视频画面的位置和尺寸，下面给出一种可能的实现方式，参见图10，图10示出了本发明实施例提供的步骤S42-3的流程示意图，步骤S42-3可以包括：

S42-3-1、根据主播端的视频流分辨率、身份信息和位置信息设置每个主播成员对应的画布位置、画布位置尺寸以及每个主播成员的视频画面的叠加权重系数。

在一些可能的实施例中，主播端的视频流分辨率可以通过主播端设置的图层管理器获得。根据业务配置信息中身份信息和位置信息可确定各主播成员的视频图层的位置和尺寸。

可以理解的是，上述的叠加权重系数指得是各主播成员的视频图层的叠加层级，由图2A可以看出，尺寸小的视频画面可以叠加在尺寸大的视频画面上，起到主次分明的效果，上述的叠加权重系数决定各个视频画面的叠加层级，例如，图2A中的主播1和主播3的叠加权重系数均为m，主播2和主播3的叠加权重系数为n,那么m>n,从而实现主播2的视频图层可以叠加到主播1的视频图层，主播4的视频图层可以叠加到直播3的视频图层上。

S42-3-3、根据主播端的摄像头分辨率，将全部视频流进行裁剪，获得每个主播成员对应的预设尺寸的视频画面。

在一些可能的实施例中，主播端的摄像头分辨率可以通过主播端设置的图层管理器获得。由于各个主播成员采集视频数据的终端设备不同，可以是智能手机、平板电脑、摄像机等设备，由于各种终端设备采集视频的尺寸(例如宽高比为16：9或者9：16等)可能不符合规定宽高比(例如宽高比为8：9)裁剪为8：9宽高比的视频尺寸。

S42-3-5、根据的画布位置、画布尺寸、预设尺寸视频画面以及叠加权重系数确定每个主播成员对应的目标视频画面布局信息。

在一种可能的实施例中，可以将上述画布位置、画布位置尺寸、预设尺寸视频画面以及叠加权重系数信息全部输出给SDK的addLayers接口调用绘制画布的程序，从而确定各个主播成员的视频画面布局信息。在本发明实施例中，调用的程序可以是：“hyExt.stream.addLayers({layerName,offsetX,offsetY,streamWidth,streamHeight,weight,param:{url,uid,x,y,width,height},})”，其中，其中streamWidth，streamHeight为画布尺寸，offsetX和offsetY为画布的位置坐标，width,height，为裁剪之后视频分辨率的大小，x,y为视频裁剪后的坐标，weight代表图层叠加的层级。

可选地，在实际场景需求中，一些主播成员在互动环节变化后依然可以以保持原互动环节中的视频画面布局信息，例如图2A和图2B中的主播1，此时为了避免不必要的更新内存，下面给出一种可能的实现方式，即：

根据每个主播成员对应的图层标识符和目标视频画面布局信息更新所述主播成员对应的已存在视频画面布局信息。

在一些可能的实施例中，主播端可以通过SDK的addLayers去确定每个主播成员的视频画面布局信息，在需要更新视频画面布局信息时，可以通过SDK的updateLayers重新计算每个主播成员的视频画面布局信息，updateLayers的addLayers的调用参数与基本一致，唯一的区别就是updateLayers增加了layerId参数，layerId是一个关联对应主播成员的唯一的图层标识符，需要更新某个主播成员的视频画面布局信息时，可以通过layerId，来定向更新对应的主播成员的视频图层。

为了执行上述实施例及各个可能的方式中的相应步骤，下面给出一种视频叠加信息更新装置的实现方式，可选地，该视频叠加信息更新装置可以如上述图3所示的器件结构。进一步地，请参阅图11，图11为本发明实施例提供的一种视频叠加信息更新装置的功能模块图。需要说明的是，本实施例所提供的视频叠加信息更新装置301，其基本原理及产生的技术效果和上述实施例相同，为简要描述，本实施例部分未提及之处，可参考上述的实施例中相应内容。该视频叠加信息更新装置包括：

获取模块3011，用于当监听到视频叠加信息调整通知，获取当前互动环节的业务需求信息；其中，视频叠加信息为全部主播成员在主播端的直播界面上的视频画面布局信息；当前互动环节为全部主播成员参与同一互动事件中的任意一个互动环节；全部主播成员在不同互动环节对应不同视频画面布局；

更新模块3012，用于根据当前互动环节的业务需求信息更新全部主播成员已存在的视频画面布局信息。

可选地，更新模块3012，具体用于：获取全部主播成员各自对应的视频流以及业务需求信息中包含的全部主播成员的身份信息和位置信息；根据视频流、身份信息和位置信息确定每个主播成员在当前互动环节中的目标视频画面布局信息；根据目标视频画面布局信息更新已存在的视频画面布局信息。

可选地，更新模块3012，还具体用于：根据主播端的视频流分辨率、身份信息和位置信息设置每个主播成员对应的画布位置、画布尺寸以及每个主播成员的视频画面的叠加权重系数；根据主播端的摄像头分辨率，将全部视频流进行裁剪，获得每个主播成员对应的预设尺寸视频画面；根据的画布位置、画布位置尺寸、预设尺寸视频画面以及叠加权重系数确定每个主播成员对应的目标视频画面布局信息。

可选地，更新模块3012，还具体用于：根据每个主播成员对应的图层标识符和目标视频画面布局信息更新主播成员对应的已存在视频画面布局信息。

可选地，主播成员包括主播端对应的第一主播成员以及与第一主播成员互动的第二主播成员，还包括：删除模块，用于当监听到视频叠加信息删除通知，将第二主播成员对应的视频画面进行删除。

可选地，还包括：发送模块，用于将更新后的全部视频画面布局信息发送至云服务器，以使云服务器将视频画面布局信息叠加至主播端的视频流中生成混合流视频，并将混合流视频发送至内容分发服务器。

可选地，还包括：接收模块，用于接收直播服务器发送的视频流地址询问请求；发送模块，用于向直播服务器发送本地视频流信息，以使直播服务器将本地视频流信息发送给第二主播成员所在的主播端。

在一些可能的实施例中，上述视频叠加信息更新装置301可以包括至少一个可以软件或固件(firmware)的形式存储于存储器302中或固化在电子设备300的操作系统(operatingsystem，OS)中的软件功能模块。处理器303用于执行存储器302中存储的可执行模块，例如视频图层叠加装置301所包括的软件功能模块及计算机程序等。

在本申请所提供的几个实施例中，应该理解到，所揭露的装置和方法，也可以通过其它的方式实现。以上所描述的装置实施例仅仅是示意性的，例如，附图中的流程图和框图显示了根据本发明的多个实施例的装置、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上，流程图或框图中的每个方框可以代表一个模块、程序段或代码的一部分，所述模块、程序段或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意，在有些作为替换的实现方式中，方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如，两个连续的方框实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这依所涉及的功能而定。也要注意的是，框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合，可以用执行规定的功能或动作的专用的基于硬件的系统来实现，或者可以用专用硬件与计算机指令的组合来实现。

另外，在本发明各个实施例中的各功能模块可以集成在一起形成一个独立的部分，也可以是各个模块单独存在，也可以两个或两个以上模块集成形成一个独立的部分。

所述功能如果以软件功能模块的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-OnlyMemory)、随机存取存储器(RAM，RandomAccessMemory)、磁碟或者光盘等各种可以存储程序代码的介质。

以上所述仅为本发明的优选实施例而已，并不用于限制本发明，对于本领域的技术人员来说，本发明可以有各种更改和变化。凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (8)

1.一种视频叠加信息更新方法，其特征在于，应用与主播端；所述方法包括：

当监听到视频叠加信息调整通知，获取当前互动环节的业务需求信息；

其中，所述视频叠加信息为全部主播成员在所述主播端的直播界面上的视频画面布局信息；所述当前互动环节为所述全部主播成员参与同一互动事件中的任意一个互动环节；所述全部主播成员在不同互动环节对应不同视频画面布局；

根据所述当前互动环节的业务需求信息更新所述全部主播成员已存在的视频画面布局信息，包括：

获取所述全部主播成员各自对应的视频流以及所述业务需求信息中包含的所述全部主播成员的身份信息和位置信息；

根据所述视频流、所述身份信息和所述位置信息确定每个所述主播成员在所述当前互动环节中的目标视频画面布局信息；

根据所述目标视频画面布局信息更新所述已存在的视频画面布局信息；

根据所述视频流、所述身份信息和位置信息确定所述每个所述主播成员在所述当前互动环节中的目标视频画面布局信息，包括：

根据所述主播端的视频流分辨率、所述身份信息和位置信息设置每个所述主播成员对应的画布位置、画布尺寸以及每个所述主播成员的视频画面的叠加权重系数；

根据所述主播端的摄像头分辨率，将全部所述视频流进行裁剪，获得每个所述主播成员对应的预设尺寸视频画面；

根据的画布位置、画布位置尺寸、预设尺寸视频画面以及所述叠加权重系数确定每个所述主播成员对应的目标视频画面布局信息，其中，叠加权重系数表征视频画面的层级关系，叠加权重系数小的视频画面叠加到叠加权重系数大的视频画面上。

2.根据权利要求1所述的视频叠加信息更新方法，其特征在于，根据所述目标视频画面布局信息更新所述全部主播成员已存在的视频画面布局信息；

根据每个主播成员对应的图层标识符和目标视频画面布局信息更新所述主播成员对应的已存在视频画面布局信息。

3.根据权利要求1所述的视频叠加信息更新方法，其特征在于，所述主播成员包括所述主播端对应的第一主播成员以及与所述第一主播成员互动的第二主播成员，还包括：

当监听到视频叠加信息删除通知，将所述第二主播成员对应的所述视频画面进行删除。

4.根据权利要求1所述的视频叠加信息更新方法，其特征在于，还包括：

将更新后的全部所述视频画面布局信息发送至云服务器，以使所述云服务器将所述视频画面布局信息叠加至所述主播端的视频流中生成混合流视频，并将所述混合流视频发送至内容分发服务器。

5.根据权利要求1所述的视频叠加信息更新方法，其特征在于，还包括：

接收视频流地址询问请求；

发送本地视频流信息，以使其他主播端获得所述本地视频流信息后更新所述全部主播成员的视频画面布局信息；所述其他主播端为与所述主播端参与所述互动环节的主播端。

6.一种视频叠加信息更新装置，其特征在于，包括：

获取模块，用于当监听到视频叠加信息调整通知，获取目标互动事件中全部主播成员的当前互动环节的业务需求信息；

其中，所述视频叠加信息为所述全部主播成员的视频画面布局信息；所述全部主播成员在不同互动环节对应不同视频画面布局；

更新模块，用于根据所述当前互动环节的业务需求信息更新所述全部主播成员已存在的视频画面布局信息，包括：取所述全部主播成员各自对应的视频流以及所述业务需求信息中包含的所述全部主播成员的身份信息和位置信息；根据所述视频流、所述身份信息和所述位置信息确定每个所述主播成员在所述当前互动环节中的目标视频画面布局信息；根据所述目标视频画面布局信息更新所述已存在的视频画面布局信息；

更新模块，具体用于根据所述主播端的视频流分辨率、所述身份信息和位置信息设置每个所述主播成员对应的画布位置、画布尺寸以及每个所述主播成员的视频画面的叠加权重系数；根据所述主播端的摄像头分辨率，将全部所述视频流进行裁剪，获得每个所述主播成员对应的预设尺寸视频画面；根据的画布位置、画布位置尺寸、预设尺寸视频画面以及所述叠加权重系数确定每个所述主播成员对应的目标视频画面布局信息；其中，叠加权重系数表征视频画面的层级关系，叠加权重系数小的视频画面叠加到叠加权重系数大的视频画面上。

7.一种电子设备，其特征在于，包括处理器和存储器，所述存储器存储有能够被所述处理器处理的计算机程序，所述处理器可执行所述计算机程序以实现权利要求1-5任一所述的视频叠加信息更新方法。

8.一种存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1-5中任一项所述的视频叠加信息更新方法。