CN110536151A - 虚拟礼物特效的合成方法和装置、直播系统 - Google Patents

虚拟礼物特效的合成方法和装置、直播系统 Download PDF

Info

Publication number
CN110536151A
CN110536151A CN201910859947.0A CN201910859947A CN110536151A CN 110536151 A CN110536151 A CN 110536151A CN 201910859947 A CN201910859947 A CN 201910859947A CN 110536151 A CN110536151 A CN 110536151A
Authority
CN
China
Prior art keywords
special efficacy
present
live video
layer
target
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201910859947.0A
Other languages
English (en)
Other versions
CN110536151B (zh
Inventor
杨克敏
陈杰
欧燕雄
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangzhou Cubesili Information Technology Co Ltd
Original Assignee
Guangzhou Huaduo Network Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangzhou Huaduo Network Technology Co Ltd filed Critical Guangzhou Huaduo Network Technology Co Ltd
Priority to CN201910859947.0A priority Critical patent/CN110536151B/zh
Publication of CN110536151A publication Critical patent/CN110536151A/zh
Priority to PCT/CN2020/112943 priority patent/WO2021047430A1/zh
Application granted granted Critical
Publication of CN110536151B publication Critical patent/CN110536151B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/2187—Live feed
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440218—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by transcoding between formats or standards, e.g. from MPEG-2 to MPEG-4
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4788—Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/485—End-user interface for client configuration

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Databases & Information Systems (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本申请实施例提供虚拟礼物特效的合成方法和装置、直播系统、设备和存储介质，涉及直播技术领域，该合成方法通过接收直播视频流数据和目标特效礼物，从直播视频流数据中获取直播视频和目标特效礼物的合成位置信息；将直播视频分割为前景图像层和背景图像层，并根据目标特效礼物生成至少一个虚拟礼物特效层；根据合成位置信息将各虚拟礼物特效层与前景图像层和背景图像层按照顺序进行合成并展示。本技术方案实现了根据人物轮廓等所得到的合成位置信息将目标特效礼物合成到直播视频的当前视频帧图像的既定的目标位置上，不影响视频中主播的展示，提高虚拟礼物特效的展示效果。

Description

虚拟礼物特效的合成方法和装置、直播系统
技术领域
本申请实施例涉及直播技术领域，具体而言，涉及一种虚拟礼物特效的合成方法和装置、直播系统，还涉及一种计算机设备和存储介质。
背景技术
随着网络技术发展，实时视频交流如网络直播、视频聊天室等成为一种越来越流行的娱乐方式。在实时视频交流过程中，可以通过赠送礼物展示特效的方式增加用户之间的互动性。
例如，在直播场景中，主播用户在直播间进行直播，观众用户在观众客户端观看主播的直播过程。为了增加主播用户和观众用户之间的互动性，观众用户可以选择特定的目标特效礼物赠送给主播，将目标特效礼物按照所对应的娱乐模板添加到主播画面的特定位置，展示相对应的特效。
现有的礼物特效的展示方法是直接将特效礼物在视频上进行展示，虚拟礼物会遮挡直播视频中的主播图像，影响观众观看直播内容和特效展示，使得直播整体效果差。
发明内容
本申请的目的旨在至少解决上述技术缺陷之一，特别是特效礼物遮挡主播影响观看和展示效果的问题。
第一方面，本申请实施例提供一种虚拟礼物特效的合成方法，包括以下步骤：
接收直播视频流数据和目标特效礼物，从所述直播视频流数据中获取直播视频和所述目标特效礼物的合成位置信息；其中，所述合成位置信息包括基于主播客户端对所述直播视频进行识别得到的目标特效礼物合成在所述直播视频上的目标位置；
将所述直播视频分割为前景图像层和背景图像层，并根据目标特效礼物生成至少一个虚拟礼物特效层；
根据所述合成位置信息将各所述虚拟礼物特效层与所述前景图像层和背景图像层按照顺序进行合成并展示。
在一实施例中，所述根据所述合成位置信息将各所述虚拟礼物特效层与所述前景图像层和背景图像层按照顺序进行合成并展示的步骤包括：
根据目标特效礼物标识确定各所述虚拟礼物特效层与所述前景图像层和背景图像层的优先级；
根据所述合成位置信息将各所述虚拟礼物特效层与所述前景图像层和背景图像层按照所述优先级由高到低进行合成，得到特效帧图像；
将所述特效帧图像渲染到特效展示区域进行展示。
在一实施例中，所述将所述特效帧图像渲染到特效展示区域进行展示的步骤包括：
在直播窗口上设置特效展示区域；
在播放直播视频的过程中，在所述特效展示区域同步渲染所述特效帧图像。
在一实施例中，对所述直播视频分割为前景图像层和背景图像层的步骤包括：
从所述直播视频中获取当前视频帧图像；
将所述当前视频帧图像分割为前景区域和背景区域；其中，所述前景区域所在图层为前景图像层；所述背景区域所在图层为背景图像层。
在一实施例中，所述前景图像层包括直播视频中的人物区域，所述背景图像层包括直播视频中除人物区域外的背景区域。
在一实施例中，所述基于主播客户端对所述直播视频进行识别得到的目标特效礼物合成在所述直播视频上的目标位置的步骤包括：
获取所述直播视频的当前视频帧图像，提取所述当前视频帧图像中的人物轮廓关键点；
根据所述人物轮廓关键点确定所述特征区域在所述当前视频帧图像上对应的目标位置，以在所述目标位置对所述目标特效礼物进行合成。
在一实施例中，所述目标特效礼物为三维显示形式的特效礼物。
在一实施例中，所述合成位置信息包括：人脸信息、人体轮廓信息、手势信息和人体骨骼信息中的至少一者。
第二方面，本申请实施例提供一种虚拟礼物特效的合成方法，包括以下步骤：
接收主播客户端发送的直播视频流数据；其中，所述直播视频流数据中包括直播视频和目标特效礼物的合成位置信息；
将所述直播视频流数据转发至观众客户端；其中，所述观众客户端将所述直播视频分割为前景图像层和背景图像层，并根据目标特效礼物生成至少一个虚拟礼物特效层；根据所述合成位置信息将各所述虚拟礼物特效层与所述前景图像层和背景图像层按照顺序进行合成并展示。
在一实施例中，所述接收主播客户端发送的直播视频流数据之前，还包括以下步骤：
接收观众客户端发送的虚拟礼物的赠送指令，并向主播客户端发送所述赠送指令；其中，所述主播客户端根据所述赠送指令获取目标特效礼物标识；根据所述目标特效礼物标识查找得到目标特效礼物，确定所述目标特效礼物所对应的特征区域；根据所述特征区域确定所述目标特效礼物在所述直播视频上的合成位置信息。
第三方面，本申请实施例提供一种虚拟礼物特效的合成装置，包括：
信息获取模块，用于接收直播视频流数据和目标特效礼物，从所述直播视频流数据中获取直播视频和所述目标特效礼物的合成位置信息；其中，所述合成位置信息包括基于主播客户端对所述直播视频进行识别得到的目标特效礼物合成在所述直播视频上的目标位置；
图像层生成模块，用于将所述直播视频分割为前景图像层和背景图像层，并根据目标特效礼物生成至少一个虚拟礼物特效层；
特效展示模块，用于根据所述合成位置信息将各所述虚拟礼物特效层与所述前景图像层和背景图像层按照顺序进行合成并展示。
第四方面，本申请实施例提供一种虚拟礼物特效的合成装置，包括：
视频流接收模块，用于接收主播客户端发送的直播视频流数据；其中，所述直播视频流数据中包括直播视频和目标特效礼物的合成位置信息；
视频流转发模块，用于将所述直播视频流数据转发至观众客户端；其中，所述观众客户端将所述直播视频分割为前景图像层和背景图像层，并根据目标特效礼物生成至少一个虚拟礼物特效层；根据所述合成位置信息将各所述虚拟礼物特效层与所述前景图像层和背景图像层按照顺序进行合成并展示。
第五方面，本申请实施例提供一种直播系统，包括：主播客户端、观众客户端和服务器；
所述主播客户端经所述服务器与所述观众客户端通过网络进行通信连接；
所述服务器，用于接收所述观众客户端发送的虚拟礼物的赠送指令，并向主播客户端发送所述赠送指令；
所述主播客户端，用于接收所述赠送指令并获取目标特效礼物标识；根据所述目标特效礼物标识查找得到目标特效礼物，确定所述目标特效礼物所对应的特征区域；根据所述特征区域确定所述目标特效礼物在所述直播视频上的合成位置信息；将所述合成位置信息和所述直播视频编码成直播视频流数据发送至服务器；
所述服务器，还用于将所述直播视频流数据转发至所述观众客户端；
所述观众客户端，用于接收所述直播视频流数据和目标特效礼物，从所述直播视频流数据中获取直播视频和所述目标特效礼物的合成位置信息；将所述直播视频分割为前景图像层和背景图像层，并根据目标特效礼物生成至少一个虚拟礼物特效层；根据所述合成位置信息将各所述虚拟礼物特效层与所述前景图像层和背景图像层按照顺序进行合成并展示。
第六方面，本申请实施例提供一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现如上述任一实施例所述的虚拟礼物特效的合成方法的步骤。
第七方面，本申请实施例提供一种包含计算机可执行指令的存储介质，所述计算机可执行指令在由计算机处理器执行时用于执行如上述任一实施例所述虚拟礼物特效的合成方法的步骤。
上述实施例提供的虚拟礼物特效的合成方法和装置、直播系统、设备和存储介质，通过观众客户端接收直播视频流数据和目标特效礼物，从直播视频流数据中获取直播视频和目标特效礼物的合成位置信息；将直播视频分割为前景图像层和背景图像层，并根据目标特效礼物生成至少一个虚拟礼物特效层；根据合成位置信息将各虚拟礼物特效层与前景图像层和背景图像层按照顺序进行合成并展示。本实施例中观众客户端根据合成位置信息将目标特效礼物所对应的至少一个虚拟礼物特效层和当前视频帧图像的前景图像层和背景图像层按照顺序进行合成并展示，实现了根据人物轮廓等所得到的合成位置信息将目标特效礼物合成到既定的目标位置上，让目标特效礼物的某些特效层会遮挡视频中的主播人物，某些特效层不遮挡视频中的主播人物，以实现虚拟礼物与主播人物相结合的特效效果，又不影响视频中主播的展示，同时提高了虚拟礼物特效的展示效果。
同时，相对于传统技术通过主播客户端或服务器直接将目标特效礼物合成到直播视频，再发送至各观众客户端以在观众客户端的视频区域播放虚拟礼物特效，该方案利用主播客户端在直播视频外将合成位置信息进行编码封装，在观众客户端解码得到合成位置信息，便于对虚拟礼物的效果展示进行二次编辑，以使得目标特效礼物的特效并非仅局限于视频区域，而是可以跨视频区域进行展示，从而提高特效展示的效果。
本申请附加的方面和优点将在下面的描述中部分给出，这些将从下面的描述中变得明显，或通过本申请的实践了解到。
附图说明
本申请上述的和/或附加的方面和优点从下面结合附图对实施例的描述中将变得明显和容易理解，其中：
图1是一实施例提供的虚拟礼物特效的合成方法的系统框架示意图；
图2是一实施例提供的直播系统的结构示意图；
图3是一实施例提供的一种虚拟礼物特效的合成方法的流程图；
图4是一种直播技术中虚拟礼物的合成效果图；
图5是一实施例提供的虚拟礼物合成的效果图；
图6是一实施例提供的目标特效礼物的合成展示方法的流程图；
图7是一实施例提供的目标特效礼物所对应的目标位置识别方法的流程图；
图8是一实施例提供的虚拟礼物特效的合成方法的另一流程图；
图9是一实施例提供的虚拟礼物赠送过程的时序图；
图10是一实施例提供的虚拟礼物特效的合成装置的结构示意图；
图11是一实施例提供的虚拟礼物特效的合成装置的另一结构示意图。
具体实施方式
下面详细描述本申请的实施例，所述实施例的示例在附图中示出，其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的，仅用于解释本申请，而不能解释为对本申请的限制。
本技术领域技术人员可以理解，除非特意声明，这里使用的单数形式“一”、“一个”、“所述”和“该”也可包括复数形式。应该进一步理解的是，本申请的说明书中使用的措辞“包括”是指存在所述特征、整数、步骤、操作、元件和/或组件，但是并不排除存在或添加一个或多个其他特征、整数、步骤、操作、元件、组件和/或它们的组。应该理解，当我们称元件被“连接”或“耦接”到另一元件时，它可以直接连接或耦接到其他元件，或者也可以存在中间元件。此外，这里使用的“连接”或“耦接”可以包括无线连接或无线耦接。这里使用的措辞“和/或”包括一个或更多个相关联的列出项的全部或任一单元和全部组合。
本领域技术人员应当理解，本申请所称的“客户端”、“应用”、“应用程序”以及类似表述的概念，是业内技术人员所公知的相同概念，是指由一系列计算机指令及相关数据资源有机构造的适于电子运行的计算机软件。除非特别指定，这种命名本身不受编程语言种类、级别，也不受其赖以运行的操作系统或平台所限制。理所当然地，此类概念也不受任何形式的终端所限制。
本技术领域技术人员可以理解，除非另外定义，这里使用的所有术语(包括技术术语和科学术语)，具有与本申请所属领域中的普通技术人员的一般理解相同的意义。还应该理解的是，诸如通用字典中定义的那些术语，应该被理解为具有与现有技术的上下文中的意义一致的意义，并且除非像这里一样被特定定义，否则不会用理想化或过于正式的含义来解释。
为了更好地阐释本申请的技术方案，下面示出本方案的虚拟礼物特效的合成方法所可以适用的应用环境。如图1所示，图1是一实施例提供的虚拟礼物特效的合成方法的系统框架示意图，该系统框架可以包括服务端和客户端。位于服务端上的直播平台中可以包括多个虚拟直播间和服务器等，各个虚拟直播间对应播放不同的直播内容。客户端包括观众客户端和主播客户端，通常而言，主播通过主播客户端进行直播，观众通过观众客户端选择进入某一虚拟直播间观看主播进行直播。观众客户端和主播客户端可以通过安装在终端设备上的直播应用程序(Application，APP)进入直播平台。
在本实施例中，终端设备可以为智能手机、平板电脑、电子阅读器、台式电脑或笔记本电脑等终端，对此并不做限定。服务器是用于为终端设备提供后台服务的后台服务器，可以用独立服务器或多个服务器组成的服务器集群来实现。
本实施例提供的虚拟礼物特效的合成方法适用于在直播过程中赠送虚拟礼物并对虚拟礼物特效进行渲染展示的情况，可以是观众通过观众客户端向目标主播赠送虚拟礼物，以在目标主播所处主播客户端和多个观众客户端合成虚拟礼物的特效，也可以是主播通过主播客户端向另一主播赠送虚拟礼物，以在赠送虚拟礼物的主播和接受虚拟礼物的主播所处的主播客户端以及多个观众客户端合成出虚拟礼物的特效等。
下面以观众客户端向目标主播赠送虚拟礼物，在观众客户端合成出礼物特效为例，对本方案进行示例性说明。
图2是一实施例提供的直播系统的结构示意图，如图2所示，该直播系统200包括：主播客户端210、观众客户端230和服务器220。主播客户端210经服务器220与观众客户端230通过网络进行通信连接。
在本实施例中，主播客户端可以是安装于计算机电脑上的主播客户端，也可以是安装于移动终端，如手机或平板电脑上的主播客户端；同理，观众客户端可以是安装于计算机电脑上的观众客户端，也可以是安装于移动终端，如手机或平板电脑上的观众客户端。
所述服务器220，用于接收所述观众客户端230发送的虚拟礼物的赠送指令，并向主播客户端210发送所述赠送指令；
所述主播客户端210，用于接收所述赠送指令并获取目标特效礼物标识；根据所述目标特效礼物标识查找得到目标特效礼物，确定所述目标特效礼物所对应的特征区域；根据所述特征区域确定所述目标特效礼物在所述直播视频上的合成位置信息；将所述合成位置信息和所述直播视频编码成直播视频流数据发送至服务器；
所述服务器220，还用于将所述直播视频流数据转发至所述观众客户端230；
所述观众客户端230，用于接收所述直播视频流数据和目标特效礼物，从所述直播视频流数据中获取直播视频和所述目标特效礼物的合成位置信息；将所述直播视频分割为前景图像层和背景图像层，并根据目标特效礼物生成至少一个虚拟礼物特效层；根据所述合成位置信息将各所述虚拟礼物特效层与所述前景图像层和背景图像层按照顺序进行合成并展示。
图3是一实施例提供的一种虚拟礼物特效的合成方法的流程图，该虚拟礼物特效的合成方法执行于客户端，如观众客户端。本实施例以观众客户端为例进行说明。
具体的，如图3所示，该虚拟礼物特效的合成方法可以包括以下步骤：
S110、接收直播视频流数据和目标特效礼物，从所述直播视频流数据中获取直播视频和所述目标特效礼物的合成位置信息。
其中，所述合成位置信息可以包括基于主播客户端对所述直播视频进行识别得到的目标特效礼物合成在所述直播视频上的目标位置。
在实施例中，用户通过观众客户端向服务器发送虚拟礼物的赠送指令。主播客户端接收端服务器转发的赠送指令，获取直播视频和目标特效礼物所对应的特征区域。可选的，特征区域可以是主播客户端根据赠送指令进行识别得到的，也可以是服务器接收到赠送指令进行识别得到再转发给主播客户端。本实施例以主播客户端根据赠送指令识别目标特效礼物所对应的特征区域为例进行说明。
主播客户端接收到观众客户端发送的虚拟礼物的赠送指令时，获取目标主播所在直播间的直播视频，从该直播视频中提取当前视频帧图像，根据目标特效礼物对当前视频帧图像进行处理，以提取出用于对目标特效礼物进行合成的相关信息，如目标特效礼物的特征区域在当前视频帧图像的合成位置信息。根据合成位置信息，可以将目标特效礼物合成到当前视频帧图像的目标位置，其中，目标特效礼物的特征区域与当前视频帧图像的目标位置一一对应。
可选的，合成位置信息可以包括：人脸信息、人体轮廓信息、手势信息和人体骨骼信息中的至少一者。在实施例中，合成位置信息可以由一个或多个人物轮廓关键点来表示，其中，每个人物轮廓关键点在当前视频帧图像中有唯一的坐标值，根据人物轮廓关键点的一个或多个坐标值可以得到目标特效礼物添加在当前视频帧图像的目标位置。
进一步的，主播观众端识别到合成位置信息后，将合成位置信息与直播视频进行编码打包形成直播视频流数据，使得合成位置信息能够跟随直播视频一起经服务器转发到观众客户端。
观众客户端接收到直播视频流数据后进行解码，得到合成位置信息和直播视频，并从直播视频中获取当前视频帧图像。需要说明的是，主播客户端用于识别合成位置信息所对应的当前视频帧图像和观众客户端从直播视频中获取的当前视频帧图像是同一帧图像，其展示在主播客户端和观众客户端的分辨率、尺寸和颜色等可以不同。
其中，目标特效礼物可以是二维显示形式的特效礼物，也可以是三维显示形式的特效礼物，即三维特效礼物。在本实施例中，该目标特效礼物优选为三维特效礼物，通过三维特效礼物营造出立体特效，增强现实感受，提高虚拟礼物特效的展示效果。
S120、将所述直播视频分割为前景图像层和背景图像层，并根据目标特效礼物生成至少一个虚拟礼物特效层。
具体的，从直播视频中获取当前视频帧图像；将当前视频帧图像分割为前景区域和背景区域；其中，所述前景区域所在图层为前景图像层；所述背景区域所在图层为背景图像层。
在实施例中，观众客户端从直播视频中获取当前视频帧图像，其中，当前视频帧图像可以一帧视频帧图像，也可以是多帧视频帧图像。
进一步的，对当前视频帧图像进行背景分割处理。可以利用现有算法对当前视频帧图像的各像素值进行对比，将当前视频帧图像分割为前景区域和背景区域，如将像素值大于某一阈值的像素点的集合所对应的区域作为前景区域，将像素值小于某一阈值的像素点的集合所对应的区域作为背景区域。在实施例中，前景区域和背景区域分别位于不同的图像层，其中，前景区域所在的图像层为前景图像层，背景区域所在的图像层为背景图像层。
在一实施例中，前景图像层可以包括直播视频中的主播人物区域，背景图像层可以包括直播视频中除主播人物区域外的背景区域。另外，在实施例中，可以对目标特效礼物进行拆分，生成目标特效礼物所对应的一个或多个虚拟礼物特效层，例如，“面具”礼物只有一个虚拟礼物特效层，“雪花”礼物可以包括多个虚拟礼物特效层，如第一片雪花在虚拟礼物特效层A，第二片雪花在虚拟礼物特效层B，第三片和第四片雪花在虚拟礼物特效层C等。
观众客户端获取到当前视频帧图像的前景图像层、背景图像层以及目标特效礼物所对应的一个或多个虚拟礼物特效层。可选的，可以将其进行相应的处理并缓存起来。
S130、根据所述合成位置信息将各所述虚拟礼物特效层与所述前景图像层和背景图像层按照顺序进行合成并展示。
示例性的，合成位置信息包括人物轮廓关键点的位置A(50,50)，B(55,60)，C(70,100)，各图层包括前景图像层a、背景图像层b、虚拟礼物特效层c、虚拟礼物特效层d和虚拟礼物特效层e，各图层的合成顺序为b、c、a、d和e，且c对应A的位置，d对应B的位置，e对应C的位置。
首先，将背景图像层b设置于底层，随后根据A位置将虚拟礼物特效层c与前景图像层a进行合成，接着根据B位置将虚拟礼物特效层d进行合成，最后根据C位置将虚拟礼物特效层e进行合成，以使得目标特效礼物中各部分均添加在当前视频帧图像所对应的目标位置上后，对合成目标特效礼物的当前视频帧图像进行展示。
如图4所示，图4是一种直播技术中虚拟礼物的合成效果图，在该技术中，尤其是在大特效礼物展示过程中，虚拟礼物直接添加到直播视频上，使得虚拟礼物和直播视频画面重叠，遮挡主播人物，影响用户观看；而采用本申请的技术后，可以避免遮挡主播人物，可以得到更好的特效展示效果。
图5是一实施例提供的虚拟礼物合成的效果图，如图5所示，根据主播的人体背部轮廓信息，将主播人物所在前景图像层设置在“天使翅膀”所在特效层的上面，遮挡“天使翅膀”的设定区域，达到将“天使翅膀”添加到主播人物的背部的效果，根据主播的脸部轮廓信息，将“面具”所在特效层设置在主播人物所在前景图像层之上，遮挡主播人物的脸部设定区域，达到将“面具”添加到主播人物眼睛上的效果，使得目标特效礼物能够根据人体轮廓特征合成到直播视频的当前视频帧图像的目标位置，得到更好的特效展示效果。
本实施例提供的虚拟礼物特效的合成方法，通过接收直播视频流数据和目标特效礼物，从直播视频流数据中获取直播视频和目标特效礼物的合成位置信息；其中，合成位置信息包括基于主播客户端对直播视频进行识别得到的目标特效礼物合成在直播视频上的目标位置；将直播视频分割为前景图像层和背景图像层，并根据目标特效礼物生成至少一个虚拟礼物特效层；根据合成位置信息将各虚拟礼物特效层与前景图像层和背景图像层按照顺序进行合成并展示。本实施例中观众客户端根据合成位置信息，将目标特效礼物所对应的至少一个虚拟礼物特效层和当前视频帧图像的前景图像层以及背景图像层按照顺序进行合成并展示，实现了根据人物轮廓等所得到的合成位置信息将目标特效礼物合成到既定的目标位置上，避免了目标特效礼物直接显示在视频区域遮挡主播人物而影响直播效果，同时还提高了虚拟礼物特效的展示效果。
同时，相对于传统技术通过主播客户端或服务器直接将目标特效礼物合成到直播视频，再发送至各观众客户端以在观众客户端的视频区域播放虚拟礼物特效，该方案利用主播客户端在直播视频外将合成位置信息进行编码封装，在观众客户端解码得到合成位置信息，便于对虚拟礼物的效果展示进行二次编辑，以使得目标特效礼物的特效并非仅局限于视频区域，而是可以跨视频区域进行展示，从而提高特效展示的效果。
为了使本技术方案更为清晰，更为便于理解，下面对本技术方案中的各个步骤的具体的实现过程和方式加以详细的描述。
图6是一实施例提供的目标特效礼物的合成展示方法的流程图，如图6所示，在一实施例中，步骤S130中的根据所述合成位置信息将各所述虚拟礼物特效层与所述前景图像层和背景图像层按照顺序进行合成并展示，可以包括以下步骤：
S1301、根据目标特效礼物标识确定各所述虚拟礼物特效层与所述前景图像层和背景图像层的优先级。
在实施例中，预先设定目标特效礼物中各虚拟礼物特效层与前景图像层和背景图像层的优先级，在对虚拟礼物特效进行合成时，按照该优先级由高到低或由低到高依次进行合成。
可选的，目标特效礼物的标识携带有目标特效礼物所对应的各虚拟礼物特效层与前景图像层和背景图像层之间的合成顺序。合成位置信息可以对应于一个或多个虚拟礼物特效层合成在前景图像层或背景图像层上的目标位置。
S1302、根据所述合成位置信息将各所述虚拟礼物特效层与所述前景图像层和背景图像层按照所述优先级由高到低进行合成，得到特效帧图像。
示例性的，目标特效礼物的标识为01，对应的虚拟礼物有天使翅膀、羽毛001、羽毛002等。相对应的，天使翅膀、羽毛001、羽毛002和主播(即前景图像层)所在特效层分别为特效层A、特效层B、特效层C和特效层D。为了便于说明和解释，前景图像层和背景图像层可以理解为特效层。
该目标特效礼物所对应的特效是：天使翅膀添加在主播的后背；羽毛001添加到主播的手臂，遮挡主播手臂相对应区域；羽毛002位于主播的肩膀，且一半被主播遮挡，另一半未被主播遮挡。
相对应的，预配置各特效层的优先级，在本实施例中，特效层的优先级越高其位置越靠近底层，其中，各特效层的优先级由高到低为：特效层C、特效层A、特效层D和特效层B。按照优先级由高到低依次合成，即:将主播所在特效层D设于羽毛001所对应的特效层C和天使翅膀所对应的特效层A之上，以使得产生主播后背产生天使翅膀、且主播遮挡一般羽毛002的效果，之后，将羽毛001所对应的特效层合成，以产生羽毛001遮挡主播手臂的效果。
还需要说明的是，在各个特效层中，在物象之外的区域呈透明或半透明状态，如在天使翅膀的特效层中，除了天使翅膀之外的区域呈透明状态，以使得位于天使翅膀的特效层之下的其他特效物象能够透过该区域显示出来。
S1303、将所述特效帧图像渲染到特效展示区域进行展示。
其中，特效展示区域区别于视频区域，视频区域用于播放直播视频的区域，特效展示区域用于渲染出特效帧图像，可选的，特效展示区域设置于视频区域之上，其面积可以大于视频区域，也可以等于或小于视频区域。
进一步的，步骤S1303中的将所述特效帧图像渲染到特效展示区域进行展示的步骤，可以包括以下步骤：
S201、在直播窗口上设置特效展示区域。
直播窗口是指直播应用处于开启状态下对应的窗口，处于最大化状态是可以占据整个终端设备屏幕。在本实施例中，在直播窗口上设置特效展示区域，特效展示区域设置于视频区域之上，特效展示区域大于视频区域，使得目标特效礼物所对应的特效能够能放大渲染出来，提高特效展示的效果。
S202、在播放直播视频的过程中，在所述特效展示区域同步渲染所述特效帧图像。
在本实施例中，图像帧图像的特效展示和直播视频播放占用不同的线程，以使得其中一线程在播放直播视频过程中，另一线程能够将特效帧图像同步渲染到特效展示区域，以达到视频播放和特效展示同步进行，提高了特效的展示效果。
需要说明的是，将特效礼物所对应的特效层中被主播人物遮挡的区域透明化，以使得跨视频区域的特效展示而不影响视频区域正常的视频播放。
图7是一实施例提供的目标特效礼物所对应的目标位置识别方法的流程图，如图7所示，在一实施例中，步骤S110中的基于主播客户端对所述直播视频进行识别得到的目标特效礼物合成在所述直播视频上的目标位置，可以包括以下步骤：
S1101、获取所述直播视频的当前视频帧图像，提取所述当前视频帧图像中的人物轮廓关键点。
其中，当前视频帧图像可以是一帧，也可以是多帧。
当接收观众客户端发送的虚拟礼物的赠送指令，主播客户端获取目标直播所在直播间的直播视频的一帧或多帧当前视频帧图像。在当前视频帧图像为多帧时，该多帧的当前视频帧图像可以为连接帧视频图像，也可以是隔帧视频图像。
在实施例中，主播客户端对当前视频帧图像进行预处理，如图像格式转换、滤波去燥、二值化处理等，提取经过预处理后的当前视频帧图像的人物轮廓，再根据轮廓通过算法运算得到人物轮廓关键点。一般而言，需要将当前视频帧图像转换为位图图像。位图是由像素(Pixel)组成的，像素是位图最小的信息单元，存储在图像栅格中，每个像素都具有特定的位置和颜色值，像素的位置可以根据图像的大小用坐标值(x,y)来表示。
需要说明的是，当前视频帧图像的人物轮廓关键点的提取方式可以通过现有的工具和算法来实现，如OpenCV、HOG和OTSU算法等，当然还可以通过其他方式提取当前视频帧图像的人物轮廓关键点。
不同人物轮廓关键点的集合对应不同的人体信息。例如，识别出当前视频帧图像的人脸部位，提取人脸部位的轮廓关键点，在一实施例中，人脸信息可以包括106个轮廓关键点，每个轮廓关键点对应人脸的某一部位，每个轮廓关键点对应唯一的坐标值，表示该轮廓关键点在当前视频帧图像中的位置。同理，身体轮廓包括59个轮廓关键点，每个轮廓关键点对应人身体各部位的边缘轮廓，人体骨骼包括22个轮廓关键点，每个轮廓关键点对应人体骨骼关节点，每个轮廓关键点的坐标值表示在当前视频帧图像中的位置。
S1102、根据所述人物轮廓关键点确定所述特征区域在所述当前视频帧图像上对应的目标位置，以在所述目标位置对所述目标特效礼物进行合成。
其中，目标特效礼物对应的特征区域与在当前视频帧图像的目标位置相对应。例如，目标特效礼物“天使翅膀”的特征区域为“背部”，从提取出来的人物轮廓关键点识别出属于“背部”特征的轮廓关键点，并确定为目标轮廓点，根据这些目标轮廓点在当前视频帧图像上的坐标值，确定目标特效礼物所在当前视频帧图像上进行合成的目标位置，其中，目标位置可以是目标轮廓点的坐标值的集合，也可以是目标轮廓点连线所形成的区域。
本方案所涉及的目标特效礼物所对应的目标位置识别方法可以应用于主播客户端和服务器，本实施例以主播客户端为例进行说明。相对于传统技术通过主播客户端或服务器直接将目标特效礼物合成到直播视频，再发送至各观众客户端以在观众客户端的视频区域播放虚拟礼物特效，本实施例利用主播客户端在直播视频外将合成位置信息进行编码封装，在观众客户端解码得到合成位置信息，便于对虚拟礼物的效果展示进行二次编辑，以使得目标特效礼物的特效并非仅局限于视频区域，而是可以跨视频区域进行展示，从而提高特效展示的效果。
图8是一实施例提供的虚拟礼物特效的合成方法的另一流程图，该虚拟礼物特效的合成方法应用于服务端，可以由服务器来执行。
具体的，如图8所示，该虚拟礼物特效的合成方法可以包括以下步骤：
S510、接收主播客户端发送的直播视频流数据。
其中，所述直播视频流数据中包括直播视频和目标特效礼物的合成位置信息。
服务器接收到虚拟礼物的赠送指令，将该赠送指令转发至主播客户端后，获取主播客户端发送的直播视频流数据。其中，直播视频流数据是由主播观众端识别到合成位置信息后，将合成位置信息与直播视频进行编码打包形成，以使得合成位置信息能够跟随直播视频一起发送至服务器。
S520、将所述直播视频流数据转发至观众客户端。
其中，所述观众客户端将所述直播视频分割为前景图像层和背景图像层，并根据目标特效礼物生成至少一个虚拟礼物特效层；根据所述合成位置信息将各所述虚拟礼物特效层与所述前景图像层和背景图像层按照顺序进行合成并展示。
在实施例中，服务器将主播客户端发送的直播视频流数据转发到观众客户端。观众客户端解码该直播视频流数据得到直播视频和合成位置信息。
进一步的，观众客户端从直播视频中获取当前视频帧图像，对当前视频帧图像进行背景分割处理。可选的，可以利用现有算法对当前视频帧图像的各像素值进行对比，将当前视频帧图像分割为前景区域和背景区域，如将像素值大于某一阈值的像素点的集合所对应的区域作为前景区域，将像素值小于某一阈值的像素点的集合所对应的区域作为背景区域。在实施例中，前景区域和背景区域分别位于不同的图像层，其中，前景区域所在的图像层为前景图像层，背景区域所在的图像层为背景图像层。
在一实施例中，前景图像层可以包括直播视频中的主播人物区域，背景图像层可以包括直播视频中除主播人物区域外的背景区域。另外，在实施例中，可以对目标特效礼物进行拆分，生成目标特效礼物所对应的一个或多个虚拟礼物特效层，例如，“面具”礼物只有一个虚拟礼物特效层，“雪花”礼物可以包括多个虚拟礼物特效层，如第一片雪花在虚拟礼物特效层A，第二片雪花在虚拟礼物特效层B，第三片和第四片雪花在虚拟礼物特效层C等。
观众客户端获取到当前视频帧图像的前景图像层、背景图像层以及目标特效礼物所对应的一个或多个虚拟礼物特效层。按照前景图像层、背景图像层以及目标特效礼物所对应的一个或多个虚拟礼物特效层的优先级，将上述特效层和前景图像层、背景图像层进行合成得到特效帧图像。可选的，还可以在直播窗口上设置特效展示区域，特效展示区域设置于视频区域之上，特效展示区域大于视频区域，使得目标特效礼物所对应的特效在特效展示区域能够被放大渲染出来，提高特效展示的效果。
本实施例提供的虚拟礼物特效的合成方法，应用于服务端，通过接收主播客户端发送的直播视频流数据；其中，直播视频流数据中包括直播视频和目标特效礼物的合成位置信息；将直播视频流数据转发至观众客户端；其中，观众客户端将直播视频分割为前景图像层和背景图像层，并根据目标特效礼物生成至少一个虚拟礼物特效层；根据合成位置信息将各虚拟礼物特效层与前景图像层和背景图像层按照顺序进行合成并展示。本实施例中观众客户端根据合成位置信息将目标特效礼物所对应的至少一个虚拟礼物特效层和当前视频帧图像的前景图像层和背景图像层按照顺序进行合成并展示，实现了根据人物轮廓等所得到的合成位置信息将目标特效礼物合成到既定的目标位置上，避免了目标特效礼物直接显示在视频区域遮挡主播人物而影响直播效果，提高了虚拟礼物特效的展示效果。
同时，相对于传统技术通过主播客户端或服务器直接将目标特效礼物合成到直播视频，再发送至各观众客户端以在观众客户端的视频区域播放虚拟礼物特效，该方案利用主播客户端在直播视频外将合成位置信息进行编码封装，在观众客户端解码得到合成位置信息，便于对虚拟礼物的效果展示进行二次编辑，以使得目标特效礼物的特效并非仅局限于视频区域，而是可以跨视频区域进行展示，从而提高虚拟礼物特效展示的效果。
在一实施例中，在步骤S510的接收主播客户端发送的直播视频流数据之前，还可以包括以下步骤：
S500、接收观众客户端发送的虚拟礼物的赠送指令，并向主播客户端发送所述赠送指令。
其中，所述主播客户端根据所述赠送指令获取目标特效礼物标识；根据所述目标特效礼物标识查找得到目标特效礼物，确定所述目标特效礼物所对应的特征区域；根据所述特征区域确定所述目标特效礼物在所述直播视频上的合成位置信息。
在本实施例中，主播客户端接收到观众客户端发送的虚拟礼物的赠送指令时，获取目标主播所在直播间的直播视频，从该直播视频中提取当前视频帧图像，根据目标特效礼物对当前视频帧图像进行处理，以提取出用于对目标特效礼物进行合成的相关信息，如目标特效礼物的特征区域在当前视频帧图像的合成位置信息。根据合成位置信息，可以将目标特效礼物合成到当前视频帧图像的目标位置，其中，目标特效礼物的特征区域与当前视频帧图像的目标位置一一对应。
为了更清楚地阐释本申请的技术方案，将结合若干场景下的示例，进一步进行说明。
场景一：参考图9，图9是一实施例提供的虚拟礼物赠送过程的时序图；该示例中，观众向主播赠送三维特效礼物“天使翅膀”，对应标识为ID1648，则其主要流程可以如下：
S11、观众客户端发出送礼请求到礼物业务服务器。
观众用户W通过观众客户端发出送礼请求到礼物业务服务器，其中，虚拟礼物为ID1648。
S12、礼物业务服务器进行业务处理。
礼物业务服务器收到送礼请求后，做相应的业务处理(如扣费等)。
S13、礼物业务服务器广播送礼信息。
将观众用户W向主播赠送ID1648礼物的送礼信息广播到频道内的所有用户，包括主播客户端和观众客户端。
S14、主播客户端收到送礼信息后，查询该虚拟礼物，识别合成位置信息。
主播客户端收到送礼信息的广播后，根据虚拟礼物ID1648，查询礼物配置得到该虚拟礼物为三维特效礼物(如AI(Artificial Intelligence)礼物)，需要识别的合成位置信息包括人脸和背部，则主播客户端启动进行人脸识别和背景分割识别。
S15、主播客户端将合成位置信息打包到直播视频流进行传输。
主播客户端将人脸识别和背景分割识别所得到的合成位置信息(可以为AI信息)打包到直播视频流中，跟流一直传输到服务器。
S16、服务器转发该直播视频流。
服务器将包含有合成位置信息的直播视频流传输至观众客户端。
S17、观众客户端获取合成位置信息，进行虚拟礼物合成并展示。
观众客户端从直播视频流中解码得到合成位置信息，将合成位置信息与虚拟礼物相结合，播放出天使翅膀特效：主播背后生长书天使翅膀。
场景二：观众向主播赠送三维特效礼物“宠物小鸟”，对应标识为ID1649，则其主要流程可以如下：
S21、观众客户端发出送礼请求到礼物业务服务器。
观众用户Q通过观众客户端发出送礼请求到礼物业务服务器，其中，虚拟礼物为ID1649。
S22、礼物业务服务器进行业务处理；
礼物业务服务器收到送礼请求后，做相应的业务处理(如扣费等)。
S23、礼物业务服务器广播送礼信息。
将观众用户Q向主播赠送ID1649礼物的送礼信息广播到频道内的所有用户，包括主播客户端和观众客户端。
S24、主播客户端收到送礼信息后，查询该虚拟礼物，识别合成位置信息。
主播客户端收到送礼信息的广播后，根据虚拟礼物ID1649，查询礼物配置得到该虚拟礼物为三维特效礼物(如AI(Artificial Intelligence)礼物)，需要识别的合成位置信息包括人脸和人体轮廓，则主播客户端启动进行人脸识别和人体轮廓识别。
S25、主播客户端将合成位置信息打包到直播视频流进行传输。
主播客户端将人脸识别和人体轮廓识别所得到的合成位置信息(可以为AI信息)打包到直播视频流中，跟流一直传输到服务器。
S26、服务器转发该直播视频流。
服务器将包含有合成位置信息的直播视频流传输至观众客户端。
S27、观众客户端获取合成位置信息，进行虚拟礼物合成并展示。
观众客户端从直播视频流中解码得到合成位置信息，将合成位置信息与虚拟礼物相结合，播放出“宠物小鸟”特效：小鸟从视频外区域飞到主播肩膀上。
以上示例仅用于辅助阐述本申请技术方案，其涉及的图示内容及具体流程不构成对本申请技术方案的使用场景的限定。
下面对虚拟礼物特效的合成装置的相关实施例进行详细阐述。
图10是一实施例提供的虚拟礼物特效的合成装置的结构示意图，该虚拟礼物特效的合成装置应用于客户端，如观众客户端。如图10所示，该虚拟礼物特效的展示装置100可以包括：信息获取模块110、图像层生成模块120和特效展示模块130。
其中，信息获取模块110，用于接收直播视频流数据和目标特效礼物，从所述直播视频流数据中获取直播视频和所述目标特效礼物的合成位置信息；其中，所述合成位置信息包括基于主播客户端对所述直播视频进行识别得到的目标特效礼物合成在所述直播视频上的目标位置；
图像层分割模块120，用于将所述直播视频分割为前景图像层和背景图像层，并根据目标特效礼物生成至少一个虚拟礼物特效层；
特效展示模块130，用于根据所述合成位置信息将各所述虚拟礼物特效层与所述前景图像层和背景图像层按照顺序进行合成并展示。
本实施例提供的虚拟礼物特效的合成装置，通过信息获取模块110接收直播视频流数据和目标特效礼物，从直播视频流数据中获取直播视频和目标特效礼物的合成位置信息；其中，合成位置信息包括基于主播客户端对直播视频进行识别得到的目标特效礼物合成在直播视频上的目标位置；图像层分割模块120将直播视频分割为前景图像层和背景图像层，并根据目标特效礼物生成至少一个虚拟礼物特效层；特效展示模块130根据合成位置信息将各虚拟礼物特效层与前景图像层和背景图像层按照顺序进行合成并展示。本实施例中观众客户端根据合成位置信息将目标特效礼物所对应的至少一个虚拟礼物特效层和当前视频帧图像的前景图像层和背景图像层按照顺序进行合成并展示，实现了根据人物轮廓等所得到的合成位置信息将目标特效礼物合成到直播视频中当前视频帧图像的既定的目标位置上，让目标特效礼物的某些特效层会挡视频中的主播，某些特效层不挡视频中的主播，以实现各种与视频中人相结合的特效效果，又不影响视频中主播的展示，还提高了虚拟礼物特效的展示效果。
在一实施例中，特效展示模块130包括：优先级确定单元、特效帧合成单元以及特效帧渲染单元；
其中，优先级确定单元，用于根据目标特效礼物标识确定各所述虚拟礼物特效层与所述前景图像层和背景图像层的优先级；特效帧合成单元，用于根据所述合成位置信息将各所述虚拟礼物特效层与所述前景图像层和背景图像层按照所述优先级由高到低进行合成，得到特效帧图像；特效帧渲染单元，用于将所述特效帧图像渲染到特效展示区域进行展示。
在一实施例中，特效帧渲染单元包括：特效展示区域设置子单元和特效帧同步渲染子单元；
其中，特效展示区域设置子单元，用于在直播窗口上设置特效展示区域；特效帧同步渲染子单元，用于在播放直播视频的过程中，在所述特效展示区域同步渲染所述特效帧图像。
在一实施例中，图像层分割模块120包括：视频帧获取单元和图像层分割单元；
其中，视频帧获取单元，用于从所述直播视频中获取当前视频帧图像；图像层分割单元，用于将所述当前视频帧图像分割为前景区域和背景区域；其中，所述前景区域所在图层为前景图像层；所述背景区域所在图层为背景图像层。
在一实施例中，所述前景图像层包括直播视频中的人物区域，所述背景图像层包括直播视频中除人物区域外的背景区域。
在一实施例中，信息获取模块110包括：轮廓关键点提取单元和目标位置确定单元；
其中，轮廓关键点提取单元，用于获取所述直播视频的当前视频帧图像，提取所述当前视频帧图像中的人物轮廓关键点；目标位置确定单元，用于根据所述人物轮廓关键点确定所述特征区域在所述当前视频帧图像上对应的目标位置，以在所述目标位置对所述目标特效礼物进行合成。
在一实施例中，所述目标特效礼物为三维显示形式的特效礼物。
在一实施例中，所述合成位置信息包括：人脸信息、人体轮廓信息、手势信息和人体骨骼信息中的至少一者。
图11是一实施例提供的虚拟礼物特效的合成装置的另一结构示意图，该虚拟礼物特效的合成装置应用于服务端，如服务器。如图11所示，该虚拟礼物特效的合成装置500可以包括：视频流接收模块510和视频流转发模块520。
其中，视频流接收模块510，用于接收主播客户端发送的直播视频流数据；其中，所述直播视频流数据中包括直播视频和目标特效礼物的合成位置信息；视频流转发模块520，用于将所述直播视频流数据转发至观众客户端；其中，所述观众客户端将所述直播视频分割为前景图像层和背景图像层，并根据目标特效礼物生成至少一个虚拟礼物特效层；根据所述合成位置信息将各所述虚拟礼物特效层与所述前景图像层和背景图像层按照顺序进行合成并展示。
在一实施例中，虚拟礼物特效的合成装置，还可以包括赠送指令接收模块；
其中，赠送指令接收模块，用于接收观众客户端发送的虚拟礼物的赠送指令，并向主播客户端发送所述赠送指令；其中，所述主播客户端根据所述赠送指令获取目标特效礼物标识；根据所述目标特效礼物标识查找得到目标特效礼物，确定所述目标特效礼物所对应的特征区域；根据所述特征区域确定所述目标特效礼物在所述直播视频上的合成位置信息。
上述提供的虚拟礼物特效的合成装置可用于执行上述任意实施例提供的虚拟礼物特效的合成方法，具备相应的功能和有益效果。
上述提供的直播系统可用于执行上述任意实施例提供的虚拟礼物特效的合成方法，具备相应的功能和有益效果。
本申请实施例还提供一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时，实现如上述任一实施例中的虚拟礼物特效的合成方法。
可选的，该计算机设备可以为移动终端、平板电脑、计算机电脑或服务器等。上述提供的计算机设备执行上述任一实施例提供的虚拟礼物特效的合成方法时，具有相应的功能和有益效果。
本申请实施例还提供一种包含计算机可执行指令的存储介质，所述计算机可执行指令在由计算机处理器执行时用于执行一种虚拟礼物特效的合成方法，包括：
接收直播视频流数据和目标特效礼物，从所述直播视频流数据中获取直播视频和所述目标特效礼物的合成位置信息；其中，所述合成位置信息包括基于主播客户端对所述直播视频进行识别得到的目标特效礼物合成在所述直播视频上的目标位置；
将所述直播视频分割为前景图像层和背景图像层，并根据目标特效礼物生成至少一个虚拟礼物特效层；
根据所述合成位置信息将各所述虚拟礼物特效层与所述前景图像层和背景图像层按照顺序进行合成并展示。
或者，所述计算机可执行指令在由计算机处理器执行时用于执行一种虚拟礼物特效的合成方法，包括：
接收主播客户端发送的直播视频流数据；其中，所述直播视频流数据中包括直播视频和目标特效礼物的合成位置信息；
将所述直播视频流数据转发至观众客户端；其中，所述观众客户端将所述直播视频分割为前景图像层和背景图像层，并根据目标特效礼物生成至少一个虚拟礼物特效层；根据所述合成位置信息将各所述虚拟礼物特效层与所述前景图像层和背景图像层按照顺序进行合成并展示。
当然，本申请实施例所提供的一种包含计算机可执行指令的存储介质,其计算机可执行指令不限于如上所述的虚拟礼物特效的合成方法操作，还可以执行本申请任意实施例所提供的虚拟礼物特效的合成方法中的相关操作，且具备相应的功能和有益效果。
通过以上关于实施方式的描述，所属领域的技术人员可以清楚地了解到，本申请可借助软件及必需的通用硬件来实现，当然也可以通过硬件实现，但很多情况下前者是更佳的实施方式。基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在计算机可读存储介质中，如计算机的软盘、只读存储器(Read-Only Memory,ROM)、随机存取存储器(RandomAccess Memory,RAM)、闪存(FLASH)、硬盘或光盘等，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本申请任意实施例所述的虚拟礼物特效的合成方法。
应该理解的是，虽然附图的流程图中的各个步骤按照箭头的指示依次显示，但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明，这些步骤的执行并没有严格的顺序限制，其可以以其他的顺序执行。而且，附图的流程图中的至少一部分步骤可以包括多个子步骤或者多个阶段，这些子步骤或者阶段并不必然是在同一时刻执行完成，而是可以在不同的时刻执行，其执行顺序也不必然是依次进行，而是可以与其他步骤或者其他步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。
以上所述仅是本申请的部分实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本申请原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也应视为本申请的保护范围。

Claims (15)

1.一种虚拟礼物特效的合成方法，其特征在于，包括以下步骤：
接收直播视频流数据和目标特效礼物，从所述直播视频流数据中获取直播视频和所述目标特效礼物的合成位置信息；其中，所述合成位置信息包括基于主播客户端对所述直播视频进行识别得到的目标特效礼物合成在所述直播视频上的目标位置；
将所述直播视频分割为前景图像层和背景图像层，并根据目标特效礼物生成至少一个虚拟礼物特效层；
根据所述合成位置信息将各所述虚拟礼物特效层与所述前景图像层和背景图像层按照顺序进行合成并展示。
2.根据权利要求1所述的虚拟礼物特效的合成方法，其特征在于，所述根据所述合成位置信息将各所述虚拟礼物特效层与所述前景图像层和背景图像层按照顺序进行合成并展示的步骤包括：
根据目标特效礼物标识确定各所述虚拟礼物特效层与所述前景图像层和背景图像层的优先级；
根据所述合成位置信息将各所述虚拟礼物特效层与所述前景图像层和背景图像层按照所述优先级由高到低进行合成，得到特效帧图像；
将所述特效帧图像渲染到特效展示区域进行展示。
3.根据权利要求2所述的虚拟礼物特效的合成方法，其特征在于，所述将所述特效帧图像渲染到特效展示区域进行展示的步骤包括：
在直播窗口上设置特效展示区域；
在播放直播视频的过程中，在所述特效展示区域同步渲染所述特效帧图像。
4.根据权利要求1所述的虚拟礼物特效的合成方法，其特征在于，对所述直播视频分割为前景图像层和背景图像层的步骤包括：
从所述直播视频中获取当前视频帧图像；
将所述当前视频帧图像分割为前景区域和背景区域；其中，所述前景区域所在图层为前景图像层；所述背景区域所在图层为背景图像层。
5.根据权利要求1所述的虚拟礼物特效的合成方法，其特征在于，所述前景图像层包括直播视频中的人物区域，所述背景图像层包括直播视频中除人物区域外的背景区域。
6.根据权利要求1所述的虚拟礼物特效的合成方法，其特征在于，所述基于主播客户端对所述直播视频进行识别得到的目标特效礼物合成在所述直播视频上的目标位置的步骤包括：
获取所述直播视频的当前视频帧图像，提取所述当前视频帧图像中的人物轮廓关键点；
根据所述人物轮廓关键点确定所述特征区域在所述当前视频帧图像上对应的目标位置，以在所述目标位置对所述目标特效礼物进行合成。
7.根据权利要求1至6任一项所述的虚拟礼物特效的合成方法，其特征在于，所述目标特效礼物为三维显示形式的特效礼物。
8.根据权利要求1至6任一项所述的虚拟礼物特效的合成方法，其特征在于，所述合成位置信息包括：人脸信息、人体轮廓信息、手势信息和人体骨骼信息中的至少一者。
9.一种虚拟礼物特效的合成方法，其特征在于，包括以下步骤：
接收主播客户端发送的直播视频流数据；其中，所述直播视频流数据中包括直播视频和目标特效礼物的合成位置信息；
将所述直播视频流数据转发至观众客户端；其中，所述观众客户端将所述直播视频分割为前景图像层和背景图像层，并根据目标特效礼物生成至少一个虚拟礼物特效层；根据所述合成位置信息将各所述虚拟礼物特效层与所述前景图像层和背景图像层按照顺序进行合成并展示。
10.根据权利要求9所述的虚拟礼物特效的合成方法，其特征在于，所述接收主播客户端发送的直播视频流数据之前，还包括以下步骤：
接收观众客户端发送的虚拟礼物的赠送指令，并向主播客户端发送所述赠送指令；其中，所述主播客户端根据所述赠送指令获取目标特效礼物标识；根据所述目标特效礼物标识查找得到目标特效礼物，确定所述目标特效礼物所对应的特征区域；根据所述特征区域确定所述目标特效礼物在所述直播视频上的合成位置信息。
11.一种虚拟礼物特效的合成装置，其特征在于，包括：
信息获取模块，用于接收直播视频流数据和目标特效礼物，从所述直播视频流数据中获取直播视频和所述目标特效礼物的合成位置信息；其中，所述合成位置信息包括基于主播客户端对所述直播视频进行识别得到的目标特效礼物合成在所述直播视频上的目标位置；
图像层生成模块，用于将所述直播视频分割为前景图像层和背景图像层，并根据目标特效礼物生成至少一个虚拟礼物特效层；
特效展示模块，用于根据所述合成位置信息将各所述虚拟礼物特效层与所述前景图像层和背景图像层按照顺序进行合成并展示。
12.一种虚拟礼物特效的合成装置，其特征在于，包括：
视频流接收模块，用于接收主播客户端发送的直播视频流数据；其中，所述直播视频流数据中包括直播视频和目标特效礼物的合成位置信息；
视频流转发模块，用于将所述直播视频流数据转发至观众客户端；其中，所述观众客户端将所述直播视频分割为前景图像层和背景图像层，并根据目标特效礼物生成至少一个虚拟礼物特效层；根据所述合成位置信息将各所述虚拟礼物特效层与所述前景图像层和背景图像层按照顺序进行合成并展示。
13.一种直播系统，其特征在于，包括：主播客户端、观众客户端和服务器；
所述主播客户端经所述服务器与所述观众客户端通过网络进行通信连接；
所述服务器，用于接收所述观众客户端发送的虚拟礼物的赠送指令，并向主播客户端发送所述赠送指令；
所述主播客户端，用于接收所述赠送指令并获取目标特效礼物标识；根据所述目标特效礼物标识查找得到目标特效礼物，确定所述目标特效礼物所对应的特征区域；根据所述特征区域确定所述目标特效礼物在所述直播视频上的合成位置信息；将所述合成位置信息和所述直播视频编码成直播视频流数据发送至服务器；
所述服务器，还用于将所述直播视频流数据转发至所述观众客户端；
所述观众客户端，用于接收所述直播视频流数据和目标特效礼物，从所述直播视频流数据中获取直播视频和所述目标特效礼物的合成位置信息；将所述直播视频分割为前景图像层和背景图像层，并根据目标特效礼物生成至少一个虚拟礼物特效层；根据所述合成位置信息将各所述虚拟礼物特效层与所述前景图像层和背景图像层按照顺序进行合成并展示。
14.一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述程序时实现如权利要求1-10任一项所述的虚拟礼物特效的合成方法的步骤。
15.一种包含计算机可执行指令的存储介质，其特征在于，所述计算机可执行指令在由计算机处理器执行时用于执行如权利要求1-10任一项所述虚拟礼物特效的合成方法的步骤。
CN201910859947.0A 2019-09-11 2019-09-11 虚拟礼物特效的合成方法和装置、直播系统 Active CN110536151B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201910859947.0A CN110536151B (zh) 2019-09-11 2019-09-11 虚拟礼物特效的合成方法和装置、直播系统
PCT/CN2020/112943 WO2021047430A1 (zh) 2019-09-11 2020-09-02 虚拟礼物特效的合成方法和装置、直播系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910859947.0A CN110536151B (zh) 2019-09-11 2019-09-11 虚拟礼物特效的合成方法和装置、直播系统

Publications (2)

Publication Number Publication Date
CN110536151A true CN110536151A (zh) 2019-12-03
CN110536151B CN110536151B (zh) 2021-11-19

Family

ID=68668414

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910859947.0A Active CN110536151B (zh) 2019-09-11 2019-09-11 虚拟礼物特效的合成方法和装置、直播系统

Country Status (2)

Country Link
CN (1) CN110536151B (zh)
WO (1) WO2021047430A1 (zh)

Cited By (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111083513A (zh) * 2019-12-25 2020-04-28 广州酷狗计算机科技有限公司 直播画面处理方法、装置、终端及计算机可读存储介质
CN111541932A (zh) * 2020-04-30 2020-08-14 广州华多网络科技有限公司 直播间的用户形象展示方法、装置、设备及存储介质
CN111565337A (zh) * 2020-04-26 2020-08-21 华为技术有限公司 图像处理方法、装置和电子设备
CN111586319A (zh) * 2020-05-27 2020-08-25 北京百度网讯科技有限公司 视频的处理方法和装置
WO2021047430A1 (zh) * 2019-09-11 2021-03-18 广州华多网络科技有限公司 虚拟礼物特效的合成方法和装置、直播系统
WO2021047420A1 (zh) * 2019-09-11 2021-03-18 广州华多网络科技有限公司 虚拟礼物特效的渲染方法和装置、直播系统
WO2021047419A1 (zh) * 2019-09-12 2021-03-18 广州华多网络科技有限公司 直播交互方法、直播系统、电子设备及存储介质
CN112544070A (zh) * 2020-03-02 2021-03-23 深圳市大疆创新科技有限公司 视频的处理方法和装置
CN112954459A (zh) * 2021-03-04 2021-06-11 网易（杭州）网络有限公司 一种视频数据的处理方法和装置
CN113038228A (zh) * 2021-02-25 2021-06-25 广州方硅信息技术有限公司 虚拟礼物传输、请求方法及其装置、设备与介质
CN113139913A (zh) * 2021-03-09 2021-07-20 杭州电子科技大学 一种面向人物肖像的新视图修正生成方法
CN113196785A (zh) * 2021-03-15 2021-07-30 百果园技术(新加坡)有限公司 直播视频交互方法、装置、设备及存储介质
CN113256361A (zh) * 2020-02-10 2021-08-13 阿里巴巴集团控股有限公司 商品发布方法及图像处理方法、装置、设备和存储介质
CN113315924A (zh) * 2020-02-27 2021-08-27 北京字节跳动网络技术有限公司 图像特效处理方法及装置
CN113360034A (zh) * 2021-05-20 2021-09-07 广州博冠信息科技有限公司 画面显示方法、装置、计算机设备及存储介质
CN113382275A (zh) * 2021-06-07 2021-09-10 广州博冠信息科技有限公司 直播数据的生成方法、装置、存储介质及电子设备
WO2021190489A1 (zh) * 2020-03-25 2021-09-30 华为技术有限公司 一种显示时间的方法及电子设备
CN114466218A (zh) * 2022-02-18 2022-05-10 广州方硅信息技术有限公司 直播视频人物跟踪方法、装置、设备及存储介质
CN114501041A (zh) * 2021-04-06 2022-05-13 北京字节跳动网络技术有限公司 特效显示方法、装置、设备、存储介质及产品
CN115379250A (zh) * 2022-07-22 2022-11-22 广州博冠信息科技有限公司 视频处理方法、装置、计算机设备及存储介质
WO2023020239A1 (zh) * 2021-08-16 2023-02-23 北京字跳网络技术有限公司 特效生成方法、装置、电子设备及存储介质

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113160244B (zh) * 2021-03-24 2024-03-15 北京达佳互联信息技术有限公司 视频处理方法、装置、电子设备及存储介质
CN113691796B (zh) * 2021-08-16 2023-06-02 福建凯米网络科技有限公司 通过二维模拟的三维场景互动方法及计算机可读存储介质
CN113793410A (zh) * 2021-08-31 2021-12-14 北京达佳互联信息技术有限公司 视频处理方法、装置、电子设备及存储介质
CN113873272B (zh) * 2021-09-09 2023-12-15 北京都是科技有限公司 一种控制直播视频的背景图像的方法、装置及存储介质
CN113822970A (zh) * 2021-09-23 2021-12-21 广州博冠信息科技有限公司 直播控制方法、装置、存储介质与电子设备
CN113873314A (zh) * 2021-09-30 2021-12-31 北京有竹居网络技术有限公司 直播互动方法、装置、可读介质及电子设备
CN114143568B (zh) * 2021-11-15 2024-02-09 上海盛付通电子支付服务有限公司 一种用于确定增强现实直播图像的方法与设备
CN114125488A (zh) * 2021-12-09 2022-03-01 小象(广州)商务有限公司 一种直播中的虚拟礼物展示方法及系统
CN114363647B (zh) * 2021-12-30 2024-01-16 北京快来文化传播集团有限公司 直播互动方法、设备和计算机可读存储介质
CN114390362B (zh) * 2022-01-05 2024-04-05 武汉斗鱼鱼乐网络科技有限公司 直播间的交互信息处理方法、直播客户端、及直播服务器
CN114489905A (zh) * 2022-01-27 2022-05-13 广州方硅信息技术有限公司 直播间活动数据处理方法及其装置、设备、介质、产品
CN114554240A (zh) * 2022-02-25 2022-05-27 广州博冠信息科技有限公司 直播中的交互方法及装置、存储介质、电子设备
CN115484472B (zh) * 2022-09-23 2024-05-28 广州方硅信息技术有限公司 直播间特效播放及处理方法、装置、电子设备和存储介质
CN116193153B (zh) * 2023-04-19 2023-06-30 世优（北京）科技有限公司 直播数据的发送方法、装置及系统

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150296248A1 (en) * 2012-11-26 2015-10-15 Sony Corporation Transmitting apparatus, transmitting method, receiving apparatus, receiving method, and receiving display method
CN106658035A (zh) * 2016-12-09 2017-05-10 武汉斗鱼网络科技有限公司 一种特效礼物动态展示方法及装置
CN107680157A (zh) * 2017-09-08 2018-02-09 广州华多网络科技有限公司 一种基于直播的互动方法及直播系统、电子设备
CN107820132A (zh) * 2017-11-21 2018-03-20 广州华多网络科技有限公司 直播互动方法、装置及系统
CN108134964A (zh) * 2017-11-22 2018-06-08 上海掌门科技有限公司 视频直播道具叠加方法、计算机设备及存储介质

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107343220B (zh) * 2016-08-19 2019-12-31 北京市商汤科技开发有限公司 数据处理方法、装置和终端设备
US20190190970A1 (en) * 2017-12-18 2019-06-20 Facebook, Inc. Systems and methods for providing device-based feedback
CN108391153B (zh) * 2018-01-29 2020-10-16 北京潘达互娱科技有限公司 虚拟礼物显示方法、装置及电子设备
CN110493630B (zh) * 2019-09-11 2020-12-01 广州华多网络科技有限公司 虚拟礼物特效的处理方法和装置、直播系统
CN110475150B (zh) * 2019-09-11 2021-10-08 广州方硅信息技术有限公司 虚拟礼物特效的渲染方法和装置、直播系统
CN110536151B (zh) * 2019-09-11 2021-11-19 广州方硅信息技术有限公司 虚拟礼物特效的合成方法和装置、直播系统
CN110557649B (zh) * 2019-09-12 2021-12-28 广州方硅信息技术有限公司 直播交互方法、直播系统、电子设备及存储介质
CN110784730B (zh) * 2019-10-31 2022-03-08 广州方硅信息技术有限公司 直播视频数据的传输方法、装置、设备和存储介质

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150296248A1 (en) * 2012-11-26 2015-10-15 Sony Corporation Transmitting apparatus, transmitting method, receiving apparatus, receiving method, and receiving display method
CN106658035A (zh) * 2016-12-09 2017-05-10 武汉斗鱼网络科技有限公司 一种特效礼物动态展示方法及装置
CN107680157A (zh) * 2017-09-08 2018-02-09 广州华多网络科技有限公司 一种基于直播的互动方法及直播系统、电子设备
CN107820132A (zh) * 2017-11-21 2018-03-20 广州华多网络科技有限公司 直播互动方法、装置及系统
CN108134964A (zh) * 2017-11-22 2018-06-08 上海掌门科技有限公司 视频直播道具叠加方法、计算机设备及存储介质

Cited By (37)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021047430A1 (zh) * 2019-09-11 2021-03-18 广州华多网络科技有限公司 虚拟礼物特效的合成方法和装置、直播系统
WO2021047420A1 (zh) * 2019-09-11 2021-03-18 广州华多网络科技有限公司 虚拟礼物特效的渲染方法和装置、直播系统
WO2021047419A1 (zh) * 2019-09-12 2021-03-18 广州华多网络科技有限公司 直播交互方法、直播系统、电子设备及存储介质
CN111083513A (zh) * 2019-12-25 2020-04-28 广州酷狗计算机科技有限公司 直播画面处理方法、装置、终端及计算机可读存储介质
CN111083513B (zh) * 2019-12-25 2022-02-22 广州酷狗计算机科技有限公司 直播画面处理方法、装置、终端及计算机可读存储介质
CN113256361A (zh) * 2020-02-10 2021-08-13 阿里巴巴集团控股有限公司 商品发布方法及图像处理方法、装置、设备和存储介质
CN113315924A (zh) * 2020-02-27 2021-08-27 北京字节跳动网络技术有限公司 图像特效处理方法及装置
CN112544070A (zh) * 2020-03-02 2021-03-23 深圳市大疆创新科技有限公司 视频的处理方法和装置
WO2021174389A1 (zh) * 2020-03-02 2021-09-10 深圳市大疆创新科技有限公司 视频的处理方法和装置
CN113515327A (zh) * 2020-03-25 2021-10-19 华为技术有限公司 一种显示时间的方法及电子设备
WO2021190489A1 (zh) * 2020-03-25 2021-09-30 华为技术有限公司 一种显示时间的方法及电子设备
CN111565337A (zh) * 2020-04-26 2020-08-21 华为技术有限公司 图像处理方法、装置和电子设备
WO2021218430A1 (zh) * 2020-04-26 2021-11-04 荣耀终端有限公司 图像处理方法、装置和电子设备
CN111541932A (zh) * 2020-04-30 2020-08-14 广州华多网络科技有限公司 直播间的用户形象展示方法、装置、设备及存储介质
CN111586319B (zh) * 2020-05-27 2024-04-09 北京百度网讯科技有限公司 视频的处理方法和装置
EP3826309A3 (en) * 2020-05-27 2021-08-04 Beijing Baidu Netcom Science And Technology Co., Ltd. Method and apparatus for processing video
US11700417B2 (en) 2020-05-27 2023-07-11 Beijing Baidu Netcom Science And Technology Co., Ltd. Method and apparatus for processing video
CN111586319A (zh) * 2020-05-27 2020-08-25 北京百度网讯科技有限公司 视频的处理方法和装置
CN113038228A (zh) * 2021-02-25 2021-06-25 广州方硅信息技术有限公司 虚拟礼物传输、请求方法及其装置、设备与介质
CN113038228B (zh) * 2021-02-25 2023-05-30 广州方硅信息技术有限公司 虚拟礼物传输、请求方法及其装置、设备与介质
CN112954459A (zh) * 2021-03-04 2021-06-11 网易（杭州）网络有限公司 一种视频数据的处理方法和装置
CN113139913B (zh) * 2021-03-09 2024-04-05 杭州电子科技大学 一种面向人物肖像的新视图修正生成方法
CN113139913A (zh) * 2021-03-09 2021-07-20 杭州电子科技大学 一种面向人物肖像的新视图修正生成方法
CN113196785A (zh) * 2021-03-15 2021-07-30 百果园技术(新加坡)有限公司 直播视频交互方法、装置、设备及存储介质
CN113196785B (zh) * 2021-03-15 2024-03-26 百果园技术(新加坡)有限公司 直播视频交互方法、装置、设备及存储介质
WO2022193070A1 (zh) * 2021-03-15 2022-09-22 百果园技术(新加坡)有限公司 直播视频交互方法、装置、设备及存储介质
CN114501041A (zh) * 2021-04-06 2022-05-13 北京字节跳动网络技术有限公司 特效显示方法、装置、设备、存储介质及产品
WO2022213979A1 (zh) * 2021-04-06 2022-10-13 北京字节跳动网络技术有限公司 特效显示方法、装置、设备、存储介质及产品
CN113360034A (zh) * 2021-05-20 2021-09-07 广州博冠信息科技有限公司 画面显示方法、装置、计算机设备及存储介质
WO2022257480A1 (zh) * 2021-06-07 2022-12-15 广州博冠信息科技有限公司 直播数据的生成方法、装置、存储介质及电子设备
CN113382275B (zh) * 2021-06-07 2023-03-07 广州博冠信息科技有限公司 直播数据的生成方法、装置、存储介质及电子设备
CN113382275A (zh) * 2021-06-07 2021-09-10 广州博冠信息科技有限公司 直播数据的生成方法、装置、存储介质及电子设备
WO2023020239A1 (zh) * 2021-08-16 2023-02-23 北京字跳网络技术有限公司 特效生成方法、装置、电子设备及存储介质
CN114466218A (zh) * 2022-02-18 2022-05-10 广州方硅信息技术有限公司 直播视频人物跟踪方法、装置、设备及存储介质
CN114466218B (zh) * 2022-02-18 2024-04-23 广州方硅信息技术有限公司 直播视频人物跟踪方法、装置、设备及存储介质
CN115379250A (zh) * 2022-07-22 2022-11-22 广州博冠信息科技有限公司 视频处理方法、装置、计算机设备及存储介质
CN115379250B (zh) * 2022-07-22 2024-06-11 广州博冠信息科技有限公司 视频处理方法、装置、计算机设备及存储介质

Also Published As

Publication number Publication date
CN110536151B (zh) 2021-11-19
WO2021047430A1 (zh) 2021-03-18

Similar Documents

Publication Publication Date Title
CN110536151A (zh) 虚拟礼物特效的合成方法和装置、直播系统
CN110475150A (zh) 虚拟礼物特效的渲染方法和装置、直播系统
CN110493630A (zh) 虚拟礼物特效的处理方法和装置、直播系统
WO2020211385A1 (zh) 图像特效处理方法、装置及视频直播终端
CN108010037B (zh) 图像处理方法、装置及存储介质
CN106713988A (zh) 一种对虚拟场景直播进行美颜处理的方法及系统
CN106789991A (zh) 一种基于虚拟场景的多人互动方法及系统
CN106792246A (zh) 一种融合式虚拟场景互动的方法及系统
US20100033484A1 (en) Personal-oriented multimedia studio platform apparatus and method for authorization 3d content
CN110784730B (zh) 直播视频数据的传输方法、装置、设备和存储介质
CN110809173B (zh) 基于智能手机ar增强现实的虚拟直播方法及系统
CN105142000B (zh) 基于电视播放内容的信息推送方法及系统
CN106331880A (zh) 一种信息处理方法及系统
KR20080082759A (ko) 네트워크를 통한 가상 스튜디오 구현 시스템 및 그 방법
US11151747B2 (en) Creating video augmented reality using set-top box
CN108259806A (zh) 一种视频通信方法、设备和终端
CN110213640A (zh) 虚拟物品的生成方法、装置及设备
CN108320331B (zh) 一种生成用户场景的增强现实视频信息的方法与设备
CN106454554A (zh) 一种氛围光电视时间同步方法和氛围光电视
KR101373631B1 (ko) 실시간 크로마키 합성 시스템 및 방법
CN107135407B (zh) 一种钢琴视频教学中的同步方法及系统
CN116684663A (zh) 视频生成方法及装置
CN116962742A (zh) 网络直播的视频图像数据传输方法、装置及直播系统
CN116420351A (zh) 提供虚拟会议中的发送参与者的3d表示
JP4929848B2 (ja) 映像データの伝送システムとその方法、送信処理装置とその方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right

Effective date of registration: 20210108

Address after: 511442 3108, 79 Wanbo 2nd Road, Nancun Town, Panyu District, Guangzhou City, Guangdong Province

Applicant after: GUANGZHOU CUBESILI INFORMATION TECHNOLOGY Co.,Ltd.

Address before: 511442 29 floor, block B-1, Wanda Plaza, Huambo business district, Panyu District, Guangzhou, Guangdong.

Applicant before: GUANGZHOU HUADUO NETWORK TECHNOLOGY Co.,Ltd.

TA01 Transfer of patent application right
GR01 Patent grant
GR01 Patent grant