CN114501065A - 基于面部拼图的虚拟礼物互动方法、系统及计算机设备 - Google Patents

基于面部拼图的虚拟礼物互动方法、系统及计算机设备 Download PDF

Info

Publication number
CN114501065A
CN114501065A CN202210128980.8A CN202210128980A CN114501065A CN 114501065 A CN114501065 A CN 114501065A CN 202210128980 A CN202210128980 A CN 202210128980A CN 114501065 A CN114501065 A CN 114501065A
Authority
CN
China
Prior art keywords
facial
image
organ
face
live broadcast
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202210128980.8A
Other languages
English (en)
Inventor
张保磊
袁小明
何丽燕
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangzhou Cubesili Information Technology Co Ltd
Original Assignee
Guangzhou Cubesili Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangzhou Cubesili Information Technology Co Ltd filed Critical Guangzhou Cubesili Information Technology Co Ltd
Priority to CN202210128980.8A priority Critical patent/CN114501065A/zh
Publication of CN114501065A publication Critical patent/CN114501065A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/23424Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving splicing one content stream with another content stream, e.g. for inserting or substituting an advertisement
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21Server components or server architectures
    • H04N21/218Source of audio or video content, e.g. local disk arrays
    • H04N21/2187Live feed
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/478Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4784Supplemental services, e.g. displaying phone caller identification, shopping application receiving rewards
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/478Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4788Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/265Mixing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/272Means for inserting a foreground image in a background image, i.e. inlay, outlay

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本申请涉及网络直播技术领域,提出一种基于面部拼图的虚拟礼物互动方法、系统及计算机设备,该方法包括:服务器响应于虚拟礼物互动请求,获取第一视频流数据和第一面部图像;其中,第一面部图像为根据各个面部器官图像在第二面部图像中的显示区域,将各个面部器官图像添加至第二面部图像上得到的;服务器定位各帧第一视频画面中的面部区域,将面部区域内的视频画面替换为第一面部图像,得到包括若干帧第二视频画面的第二视频流数据,发送第二视频流数据至第一直播间内的客户端;第一直播间内的客户端将第二视频流数据输出至直播间界面中。相对于现有技术,本申请提升了虚拟礼物互动的趣味性,改善了观众的虚拟礼物赠送体验。

Description

基于面部拼图的虚拟礼物互动方法、系统及计算机设备
技术领域
本申请实施例涉及网络直播技术领域,尤其涉及一种基于面部拼图的虚拟礼物互动方法、系统及计算机设备。
背景技术
随着网络技术和流媒体技术的不断发展,越来越多的观众进入网络直播间,参与网络直播互动,观众与主播进行网络直播互动的方式包括但不限于关注主播、公屏发言以及赠送虚拟礼物等。
对于赠送虚拟礼物来说,直播间界面中显示有虚拟礼物栏组件,观众可以通过打开虚拟礼物栏组件,浏览其中呈现的多种虚拟礼物,并选择某一虚拟礼物赠送至主播,之后,该观众所在的直播间内会显示出该虚拟礼物以及该虚拟礼物的赠送提示等。
由于上述虚拟礼物均是预先设定好的虚拟礼物,因而,对于观众而言,其无法自主地对虚拟礼物的展示样式进行设定,并且,所赠送的虚拟礼物与主播之间的交互性也较差,故会影响观众的虚拟礼物赠送体验,难以增强虚拟礼物互动的趣味性,无法促进网络直播互动行为的产生。
发明内容
本申请实施例提供了一种基于面部拼图的虚拟礼物互动方法、系统及计算机设备,可以解决虚拟礼物赠送体验较差,虚拟礼物互动趣味性较低的技术问题,该技术方案如下:
第一方面,本申请实施例提供了一种基于面部拼图的虚拟礼物互动方法,包括步骤:
服务器响应于虚拟礼物互动请求,获取第一直播间标识、所述第一直播间标识对应的第一视频流数据和第一面部图像;其中,所述第一视频流数据中包括若干帧第一视频画面;所述第一面部图像为根据各个面部器官图像在第二面部图像中的显示区域,将各个所述面部器官图像添加至所述第二面部图像上得到的;所述第二面部图像为未显示面部器官的面部轮廓图像;各个所述面部器官图像在所述第二面部图像中的显示区域为当前用户与面部拼图面板进行面部拼图交互后确定的;
所述服务器定位各帧所述第一视频画面中的面部区域,将所述面部区域内的视频画面替换为所述第一面部图像,得到包括若干帧第二视频画面的第二视频流数据,发送所述第二视频流数据至所述第一直播间标识对应的第一直播间内的客户端;
所述第一直播间内的客户端接收所述第二视频流数据,将所述第二视频流数据输出至直播间界面中。
第二方面,本申请实施例提供了一种基于面部拼图的虚拟礼物互动系统,包括:服务器和客户端;
所述服务器用于响应于虚拟礼物互动请求,获取第一直播间标识、所述第一直播间标识对应的第一视频流数据和第一面部图像;其中,所述第一视频流数据中包括若干帧第一视频画面;所述第一面部图像为根据各个面部器官图像在第二面部图像中的显示区域,将各个所述面部器官图像添加至所述第二面部图像上得到的;所述第二面部图像为未显示面部器官的面部轮廓图像;各个所述面部器官图像在所述第二面部图像中的显示区域为当前用户与面部拼图面板进行面部拼图交互后确定的;
所述服务器用于定位各帧所述第一视频画面中的面部区域,将所述面部区域内的视频画面替换为所述第一面部图像,得到包括若干帧第二视频画面的第二视频流数据,发送所述第二视频流数据至所述第一直播间标识对应的第一直播间内的客户端;
所述第一直播间内的客户端用于接收所述第二视频流数据,将所述第二视频流数据输出至直播间界面中。
第三方面,本申请实施例提供了一种基于面部拼图的虚拟礼物互动装置,包括:
第一获取单元,用于服务器响应于虚拟礼物互动请求,获取第一直播间标识、所述第一直播间标识对应的第一视频流数据和第一面部图像;其中,所述第一视频流数据中包括若干帧第一视频画面;所述第一面部图像为根据各个面部器官图像在第二面部图像中的显示区域,将各个所述面部器官图像添加至所述第二面部图像上得到的;所述第二面部图像为未显示面部器官的面部轮廓图像;各个所述面部器官图像在所述第二面部图像中的显示区域为当前用户与面部拼图面板进行面部拼图交互后确定的;
第一替换单元,用于所述服务器定位各帧所述第一视频画面中的面部区域,将所述面部区域内的视频画面替换为所述第一面部图像,得到包括若干帧第二视频画面的第二视频流数据,发送所述第二视频流数据至所述第一直播间标识对应的第一直播间内的客户端;
第一输出单元,用于所述第一直播间内的客户端接收所述第二视频流数据,将所述第二视频流数据输出至直播间界面中。
第四方面,本申请实施例提供了一种计算机设备,处理器、存储器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现如第一方面所述方法的步骤。
第五方面,本申请实施例提供了一种计算机可读存储介质,该计算机可读存储介质存储有计算机程序,该计算机程序被处理器执行时实现如第一方面所述方法的步骤。
在本申请实施例中,服务器响应于虚拟礼物互动请求,获取第一直播间标识、第一直播间标识对应的第一视频流数据和第一面部图像;其中,第一视频流数据中包括若干帧第一视频画面;第一面部图像为根据各个面部器官图像在第二面部图像中的显示区域,将各个面部器官图像添加至第二面部图像上得到的;第二面部图像为未显示面部器官的面部轮廓图像;各个面部器官图像在第二面部图像中的显示区域为当前用户与面部拼图面板进行面部拼图交互后确定的;服务器定位各帧第一视频画面中的面部区域,将面部区域内的视频画面替换为第一面部图像,得到包括若干帧第二视频画面的第二视频流数据,发送第二视频流数据至第一直播间标识对应的第一直播间内的客户端;第一直播间内的客户端接收第二视频流数据,将第二视频流数据输出至直播间界面中。本申请实施例中当前用户可以通过与面部拼图面板进行面部拼图交互,确认各个面部器官图像在第二面部图像中的显示区域,从而实现将各个面部器官图像添加至第二面部图像上得到第一面部图像,进而达成自定义虚拟礼物展示样式的目的,之后在服务器响应于虚拟礼物互动请求时,将面部区域内的视频画面替换为第一面部图像,再将得到的包括若干帧第二视频画面的第二视频流数据输出至直播间界面中,从而改变了直播间界面中显示的当前主播的样貌,增强了虚拟礼物与主播之间的交互性,提升了虚拟礼物互动的趣味性,进而改善观众的虚拟礼物赠送体验,有效促进网络直播互动行为的产生。
为了更好地理解和实施,下面结合附图详细说明本申请的技术方案。
附图说明
图1为本申请实施例提供的基于面部拼图的虚拟礼物互动方法的应用场景示意图;
图2为本申请实施例提供的虚拟礼物栏在直播间界面中的显示示意图;
图3为本申请第一实施例提供的基于面部拼图的虚拟礼物互动方法的流程示意图;
图4为本申请实施例提供的面部拼图面板在直播间界面中的显示示意图;
图5为本申请第一实施例提供的基于面部拼图的虚拟礼物互动方法中S101的流程示意图;
图6为本申请实施例提供的基于面部拼图的虚拟礼物互动方法的另一应用场景示意图;
图7为本申请实施例提供的第二视频画面在直播间界面中的显示示意图;
图8为本申请第一实施例提供的基于面部拼图的虚拟礼物互动方法的另一流程示意图;
图9为本申请第一实施例提供的基于面部拼图的虚拟礼物互动方法中S107的流程示意图;
图10为本申请第二实施例提供的基于面部拼图的虚拟礼物互动方法的流程示意图;
图11为本申请实施例提供的虚拟礼物栏在直播间界面中的另一显示示意图;
图12为本申请第二实施例提供的基于面部拼图的虚拟礼物互动方法中S201的流程示意图;
图13为本申请实施例提供的面部拼图面板在直播间界面中的另一显示示意图;
图14为本申请第三实施例提供的基于面部拼图的虚拟礼物互动系统的结构示意图;
图15为本申请第四实施例提供的基于面部拼图的虚拟礼物互动装置的结构示意图;
图16为本申请第五实施例提供的计算机设备的结构示意图。
具体实施方式
这里将详细地对示例性实施例进行说明,其示例表示在附图中。下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本申请相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本申请的一些方面相一致的装置和方法的例子。
在本申请使用的术语是仅仅出于描述特定实施例的目的,而非旨在限制本申请。在本申请和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式,除非上下文清楚地表示其他含义。还应当理解,本文中使用的术语“和/或”是指并包含一个或多个相关联的列出项目的任何或所有可能组合。
应当理解,尽管在本申请可能采用术语第一、第二、第三等来描述各种信息,但这些信息不应限于这些术语。这些术语仅用来将同一类型的信息彼此区分开。例如,在不脱离本申请范围的情况下,第一信息也可以被称为第二信息,类似地,第二信息也可以被称为第一信息。取决于语境,如在此所使用的词语“如果”/“若”可以被解释成为“在……时”或“当……时”或“响应于确定”。
本领域技术人员可以理解,本申请所使用的“客户端”、“终端”、“终端设备”既包括无线信号接收器的设备,其仅具备无发射能力的无线信号接收器的设备,又包括接收和发射硬件的设备,其具有能够在双向通信链路上,进行双向通信的接收和发射硬件的设备。这种设备可以包括:蜂窝或其他诸如个人计算机、平板电脑之类的通信设备,其具有单线路显示器或多线路显示器或没有多线路显示器的蜂窝或其他通信设备;PCS(PersonalCommunications Service,个人通信系统),其可以组合语音、数据处理、传真和/或数据通信能力;PDA(Personal Digital Assistant,个人数字助理),其可以包括射频接收器、寻呼机、互联网/内联网访问、网络浏览器、记事本、日历和/或GPS(GlobalPositioningSystem,全球定位系统)接收器;常规膝上型和/或掌上型计算机或其他设备,其具有和/或包括射频接收器的常规膝上型和/或掌上型计算机或其他设备。这里所使用的“客户端”、“终端”、“终端设备”可以是便携式、可运输、安装在交通工具(航空、海运和/或陆地)中的,或者适合于和/或配置为在本地运行,和/或以分布形式,运行在地球和/或空间的任何其他位置运行。这里所使用的“客户端”、“终端”、“终端设备”还可以是通信终端、上网终端、音乐/视频播放终端,例如可以是PDA、MID(Mobile Internet Device,移动互联网设备)和/或具有音乐/视频播放功能的移动电话,也可以是智能电视、机顶盒等设备。
本申请所称的“服务器”、“客户端”、“服务节点”等名称所指向的硬件,本质上是具备个人计算机等效能力的计算机设备,为具有中央处理器(包括运算器和控制器)、存储器、输入设备以及输出设备等冯诺依曼原理所揭示的必要构件的硬件装置,计算机程序存储于其存储器中,中央处理器将存储在外存中的程序调入内存中运行,执行程序中的指令,与输入输出设备交互,借此完成特定的功能。
需要指出的是,本申请所称的“服务器”这一概念,同理也可扩展到适用于服务器机群的情况。依据本领域技术人员所理解的网络部署原理,所述各服务器应是逻辑上的划分,在物理空间上,这些服务器既可以是互相独立但可通过接口调用的,也可以是集成到一台物理计算机或一套计算机机群的。本领域技术人员应当理解这一变通,而不应以此约束本申请的网络部署方式的实施方式。
请参阅图1,图1为本申请实施例提供的基于面部拼图的虚拟礼物互动方法的应用场景示意图,该应用场景包括本申请实施例提供的主播客户端101、服务器102和观众客户端103,主播客户端101与观众客户端103通过服务器102进行交互。
本申请实施例提出的客户端包括该主播客户端101和该观众客户端103。
需要指出的是,在现有技术中会存在对“客户端”这一概念的多种理解,例如:可以将其理解为安装在计算机设备中的应用程序,或者,也可以将其理解为相对应于服务器的硬件设备。
在本申请实施例中,所称的“客户端”是指相对应于服务器的硬件设备,更具体来说,是指计算机设备,例如:智能手机、智能交互平板以及个人计算机等。
在客户端为智能手机、智能交互平板等移动设备时,用户可以在客户端上安装匹配的移动端应用程序,也可以在客户端上访问Web端应用程序。
在客户端为个人计算机(PC机)等非移动设备时,用户可以在客户端上安装匹配的PC端应用程序,同样也可以在客户端上访问Web端应用程序。
其中,移动端应用程序是指可安装在移动设备中的应用程序,PC端应用程序是指可安装在非移动设备中的应用程序,Web端应用程序是指需通过浏览器访问的应用程序。
具体地,Web端应用程序依据客户端类型的差异,又可以分为移动版本和PC版本,两者的页面布局方式以及可提供的服务器支持可能存在差别。
在本申请实施例中,提供至用户的直播应用程序的类型分为移动端直播应用程序、PC端直播应用程序和Web端直播应用程序。用户可以依据其采用客户端的类型不同,自主选择其参与网络直播的方式。
本申请依据采用客户端的用户身份的不同,可以将客户端分为主播客户端101和观众客户端103。
其中,主播客户端101是指发送网络直播视频的一端,通常来说是网络直播中主播(即,直播主播用户)所采用的客户端。
观众客户端103是指接收和观看网络直播视频的一端,通常来说是网络直播中观看视频的观众(即,直播观众用户)所采用的客户端。
主播客户端101和观众客户端103所指向的硬件,本质上是指计算机设备,具体地,如图1所示,其可以是智能手机、智能交互平板和个人计算机等类型的计算机设备。主播客户端101和观众客户端103均可以通过公知的网络接入方式接入互联网,与服务器102建立数据通信链路。
服务器102作为一个业务服务器,其可以负责进一步连接起相关音频数据服务器、视频流服务器以及其他提供相关支持的服务器等,以此构成逻辑上相关联的服务机群,来为相关的终端设备,例如图1中所示的主播客户端101和观众客户端103提供服务。
本申请实施例中,主播客户端101与观众客户端103可以加入同一个直播间(即直播频道),上述的直播间是指依靠互联网技术实现的一种聊天室,通常具备音视频播控功能。主播用户通过主播客户端101在直播间内进行直播,观众客户端103的观众可以登录服务器102进入直播间观看上直播。
在直播间内,主播与观众之间可通过语音、视频、文字等公知的线上交互方式来实现互动,一般是主播以音视频流的形式为观众用户表演节目,并且在互动过程中还可产生经济交易行为。当然,直播间的应用形态并不局限于在线娱乐,也可推广到其他相关场景中,例如视频会议场景、产品推介销售场景以及其他任何需要类似互动的场景中。
具体地,观众观看直播的过程如下:观众可以点击访问安装在观众客户端103上的直播应用程序,并选择进入任意一个直播间,触发观众客户端103为该观众加载直播间界面,该直播间界面内包括若干交互组件,例如:视频窗口、虚拟礼物栏以及公屏等,通过加载这些交互组件可以使观众在直播间内观看直播,并进行多种线上互动,线上互动的方式包括但不限于赠送虚拟礼物以及公屏发言等。
请参阅图2,图2为本申请实施例提供的虚拟礼物栏在直播间界面中的显示示意图。可以看到,虚拟礼物栏21中显示有若干虚拟礼物22,观众可以浏览虚拟礼物栏21中的虚拟礼物22,并可以选择任意一个虚拟礼物赠送至主播。
由于上述虚拟礼物22均是预先设定好的虚拟礼物,因而,在观众赠送某一虚拟礼物22后,其在直播间界面中的展示样式也是固定的,观众无法对于进行自主地设定,这将导致虚拟礼物活动的趣味性较弱,降低观众的虚拟礼物赠送体验。
基于上述,本申请实施例提供了一种基于面部拼图的虚拟礼物互动方法。请参阅图3,图3为本申请第一实施例提供的基于面部拼图的虚拟礼物互动方法的流程示意图,该方法包括如下步骤:
S101:服务器响应于虚拟礼物互动请求,获取第一直播间标识、第一直播间标识对应的第一视频流数据和第一面部图像;其中,第一视频流数据中包括若干帧第一视频画面;第一面部图像为根据各个面部器官图像在第二面部图像中的显示区域,将各个面部器官图像添加至第二面部图像上得到的;第二面部图像为未显示面部器官的面部轮廓图像;各个面部器官图像在第二面部图像中的显示区域为当前用户与面部拼图面板进行面部拼图交互后确定的。
S102:服务器定位各帧第一视频画面中的面部区域,将面部区域内的视频画面替换为第一面部图像,得到包括若干帧第二视频画面的第二视频流数据,发送第二视频流数据至第一直播间标识对应的第一直播间内的客户端。
S103:第一直播间内的客户端接收第二视频流数据,将第二视频流数据输出至直播间界面中。
在本实施例中,是从客户端和服务器两个执行主体对基于面部拼图的虚拟礼物互动方法进行描述的。其中,客户端包括主播客户端和观众客户端。
关于步骤S101,服务器响应于虚拟礼物互动请求,获取第一直播间标识、第一直播间标识对应的第一视频流数据和第一面部图像。
其中,该虚拟礼物互动请求为服务器响应于虚拟礼物赠送请求,确定待赠送的虚拟礼物为面部拼图虚拟礼物时生成的。
具体地,服务器可以通过解析该虚拟礼物赠送请求,获取虚拟礼物标识,根据该虚拟礼物标识判断待赠送的虚拟礼物是否为面部拼图虚拟礼物。
该面部拼图虚拟礼物为一种可以由观众自定义其展示样式的虚拟礼物,该面部拼图虚拟礼物的展示样式取决于观众如何拼接主播的面部器官图像。
该第一直播间标识为第一直播间对应的直播间标识,该第一直播间为当前用户所进入的直播间,当前用户为参与网络直播互动的观众。
第一直播间标识对应的第一视频流数据为当前主播对应的主播客户端采集并上传至服务器的视频流数据,当前主播为创建该第一直播间的主播。其中,第一视频流数据中包括若干帧第一视频画面。
第一面部图像为根据各个面部器官图像在第二面部图像中的显示区域,将各个面部器官图像添加至第二面部图像上得到的。
其中,第二面部图像为未显示面部器官的面部轮廓图像,各个面部器官图像在第二面部图像中的显示区域为当前用户与面部拼图面板进行面部拼图交互后确定的。
请参阅图4,图4为本申请实施例提供的面部拼图面板在直播间界面中的显示示意图。可以看到图4中的面部拼图面板41中显示有第二面部图像42,第二面部图像42中未显示有面部器官,仅展示出了当前主播的面部轮廓。当前用户通过与面部拼图面板41交互,可进行面部器官图像的拼接,确定各个面部器官图像在第二面部图像42中的显示区域。
关于当前用户具体如何与面部拼图面板进行面部拼图交互,以及如何确定各个面部器官图像在第二面部图像中的显示区域将第二实施例中阐述。
下面将详细说明服务器如何获取到该第一面部图像,请参阅图5,S101服务器响应于虚拟礼物互动请求,获取第一直播间标识、第一直播间标识对应的第一视频流数据和第一面部图像的步骤,包括:
S1011:流媒体服务器响应于业务服务器发送的虚拟礼物互动请求,获取第一面部图像链接;其中,虚拟礼物互动请求为业务服务器响应于虚拟礼物赠送请求,确定待赠送的虚拟礼物为面部拼图虚拟礼物时生成的。
S1012:流媒体服务器根据第一面部图像链接,发送第一图像获取请求至文件服务器。
S1013:文件服务器响应于第一图像获取请求,获取第一面部图像链接,并调取第一面部图像链接对应的第一面部图像,发送第一面部图像至流媒体服务器。
在本实施例中,该服务器是指服务器集群,该服务器集群具体包括流媒体服务器、业务服务器以及文件服务器等。其中,流媒体服务器负责提供与流媒体数据相关的服务,业务服务器负责提供与业务逻辑相关的服务,文件服务器负责提供与文件管理相关的服务。
请参阅图6,图6为本申请实施例提供的基于面部拼图的虚拟礼物互动方法的另一应用场景示意图。可以看到,图6中服务器集群包括流媒体服务器1021、业务服务器1022以及文件服务器1023,流媒体服务器1021、业务服务器1022以及文件服务器1023之间可以进行数据交互。
关于步骤S1011~S1013,业务服务器响应于客户端发送的虚拟礼物赠送请求,获取虚拟礼物标识,根据该虚拟礼物标识确定待赠送的虚拟礼物是否为面部拼图虚拟礼物,若确定待赠送的虚拟礼物为面部拼图虚拟礼物,业务服务器发送虚拟礼物互动请求至流媒体服务器。
流媒体服务器响应于业务服务器发送的虚拟礼物互动请求,获取第一面部图像链接。
其中,第一面部图像链接用于调取第一面部图像。
在一个可选的实施例中,第一面部图像链接可以是指第一面部图像对应的图像标识,在另一个可选的实施例中,第一面部图像链接可以是指第一面部图像对应的存储地址。
流媒体服务器根据第一面部图像链接,发送第一图像获取请求至文件服务器,文件服务器响应于第一图像获取请求,获取第一面部图像链接,并调取第一面部图像链接对应的第一面部图像,发送第一面部图像至流媒体服务器。
在本实施例中,通过建立起流媒体服务器、业务服务器以及文件服务器之间的服务集群架构,能够分布式、解耦合地进行各种数据处理,提高网络直播互动的响应速度,提升用户的直播互动体验。
关于步骤S102,服务器定位各帧第一视频画面中的面部区域,将面部区域内的视频画面替换为第一面部图像,得到包括若干帧第二视频画面的第二视频流数据,发送第二视频流数据至第一直播间标识对应的第一直播间内的客户端。
服务器可以通过现有的人脸识别网络,定位各帧第一视频画面中的面部区域。其中,第一视频画面中的面部区域基于面部的显示尺寸以及面部的显示位置确定。
服务器将面部区域内的视频画面替换为第一面部图像。具体的替换方式可以是服务器将第一面部图像覆盖在第一视频画面中的面部区域上。
之后,服务器得到包括若干帧第二视频画面的第二视频流数据,发送第二视频流数据至第一直播间标识对应的第一直播间内的客户端。
其中,第一直播间内的客户端包括第一直播间内的主播客户端和观众客户端。
关于步骤S103,第一直播间内的客户端接收第二视频流数据,将第二视频流数据输出至直播间界面中。
请参阅图7,图7为本申请实施例提供的第二视频画面在直播间界面中的显示示意图。图7所示的直播间界面中显示有第二视频画面71,第二视频画面71中显示有第一面部图像72。可以看到,第一面部图像72中各个面部器官的显示位置、显示尺寸以及显示方向发生了一定程度的改变,这也即是当前用户自定义的面部拼图虚拟礼物的展示样式,是其通过与面部拼图面板进行面部拼图交互后确定的。
由于第二视频流数据会发送至第一直播间内的所有客户端中,因此,第一直播间内的主播和观众均可以看到当前用户送出的该面部拼图虚拟礼物。
本申请实施例中当前用户可以通过与面部拼图面板进行面部拼图交互,确认各个面部器官图像在第二面部图像中的显示区域,从而实现将各个面部器官图像添加至第二面部图像上得到第一面部图像,进而达成自定义虚拟礼物展示样式的目的,之后在服务器响应于虚拟礼物互动请求时,将面部区域内的视频画面替换为第一面部图像,再将得到的包括若干帧第二视频画面的第二视频流数据输出至直播间界面中,从而改变了直播间界面中显示的当前主播的样貌,增强了虚拟礼物与主播之间的交互性,提升了虚拟礼物互动的趣味性,进而改善观众的虚拟礼物赠送体验,有效促进网络直播互动行为的产生。
由上述实施例可以了解到,为使当前用户能够进行面部拼图交互,需要先获取到当前主播的面部器官图像以及未显示面部器官的面部轮廓图像,具体地,在一个可选的实施例中,请参阅图8,图8为本申请第一实施例提供的基于面部拼图的虚拟礼物互动方法的另一流程示意图,步骤S101之前,包括步骤:
S104:服务器响应于虚拟礼物配置请求,获取第一直播间标识和第一直播间标识对应的主播面部图像。
S105:服务器定位主播面部图像中各个面部器官的显示位置和显示尺寸,根据各个面部器官的显示位置和显示尺寸,截取主播面部图像,得到各个面部器官图像。
S106:服务器擦除主播面部图像中显示的各个面部器官,得到第二面部图像。
S107:服务器保存第一直播间标识、第一直播间标识对应的各个面部器官图像和第一直播间标识对应的第二面部图像。
关于步骤S104,服务器响应于虚拟礼物配置请求,解析该虚拟礼物配置请求,获取第一直播间标识和第一直播间标识对应的主播面部图像。
其中,主播面部图像为当前主播上传的主播面部图像,或者,主播面部图像为从第一视频流数据中抓取的主播面部图像。
关于步骤S105,服务器定位主播面部图像中各个面部器官的显示位置和显示尺寸,根据各个面部器官的显示位置和显示尺寸,截取主播面部图像,得到各个面部器官图像。
具体地,在一个可选的实施例中,服务器可以对主播面部图像进行灰度化处理,得到灰度化处理后的主播面部图像。之后,服务器将灰度化处理后的主播面部图像输入至预训练好的面部器官定位网络,得到各个面部器官在主播面部图像中的显示位置和显示尺寸。
其中,面部器官定位网络是根据已标注面部器官显示位置和面部器官显示尺寸的面部训练图像训练得到的。关于网络训练方法、损失函数以及优化函数在此不进行限定。
在一个可选的实施例中,服务器除了对主播面部图像进行灰度化处理之外,还可以进行其他预处理操作,例如:调整主播面部图像的对比度,以突出主播面部图像中显示的面部器官,使得获取到的各个面部器官在主播面部图像中的显示位置和显示尺寸更为准确。
关于步骤S106,服务器擦除主播面部图像中显示的各个面部器官,得到第二面部图像。
请参阅图4,图4中的第二面部图像42,即为擦除面部器官后的主播面部图像,其仅展示了当前主播的面部轮廓。
关于步骤S107,服务器保存第一直播间标识、第一直播间标识对应的各个面部器官图像和第一直播间标识对应的第二面部图像。
各个面部器官图像以及第二面部图像需与第一直播间标识对应,从而在观众赠送面部拼图虚拟礼物时,能够根据观众所在的直播间,确认获取哪一直播间标识对应的各个面部器官图像和第二面部图像。
下面详细说明服务器如何进行各个面部器官图像和第二面部图像的保存。
请参阅图6,图6中的文件服务器1023负责提供与文件管理相关的服务器,因此,可以将第一直播间标识对应的各个面部器官图像和第一直播间标识对应的第二面部图像保存的文件服务器中,在使用时从文件服务器调取。
在一个可选的实施例中,请参阅图9,步骤S107包括:
S1071:业务服务器将各个面部器官图像和第二面部图像发送至文件服务器。
S1072:文件服务器接收并保存各个面部器官图像和第二面部图像,返回各个面部器官图像对应的面部器官图像链接和第二面部图像对应的第二面部图像链接至业务服务器。
S1073:业务服务器接收并保存第一直播间标识对应的各个面部器官图像链接和第一直播间标识对应的第二面部图像链接。
业务服务器将第一直播间标识对应的各个面部器官图像和第一直播间标识对应的第二面部图像发送至文件服务器,文件服务器接收并保存第一直播间标识对应的各个面部器官图像和第一直播间标识对应的第二面部图像,返回各个面部器官图像对应的面部器官图像链接和第二面部图像对应的第二面部图像链接至业务服务器。
其中,面部器官图像链接可以是指面部器官图像对应的图像标识,也可以是指面部器官图像对应的存储地址。
第二面部图像链接可以是指第二面部图像对应的图像标识,也可以是指第二面部图像对应的存储地址。
之后,业务服务器接收并保存第一直播间标识对应的各个面部器官图像链接和第一直播间标识对应的第二面部图像链接。若业务服务器需要使用第一直播间标识对应的各个面部器官图像和第一直播间标识对应的第二面部图像,则可以通过第一直播间标识对应的各个面部器官图像链接和第一直播间标识对应的第二面部图像链接,与文件服务器交互进行调取。
在本实施例中,通过文件服务器进行图像的存储管理,可以减少客户端与服务器之间的数据传输量,并且提高图像的调取速度,进而改善用户的直播互动体验。
请参阅图10,图10为本申请第二实施例提供的基于面部拼图的虚拟礼物互动方法的流程示意图,包括如下步骤:
S201:观众客户端响应于面部拼图请求,获取第一直播间标识、第一直播间标识对应的各个面部器官图像、第一直播间标识对应的第二面部图像以及面部拼图面板数据。
S202:观众客户端根据各个面部器官图像、第二面部图像和面部拼图面板数据,将呈现有各个面部器官图像和第二面部图像的面部拼图面板显示在直播间界面中。
S203:观众客户端响应于面部拼图交互指令,获取当前用户确定的各个面部器官图像在第二面部图像中的显示区域。
S204:观众客户端根据各个面部器官图像在第二面部图像中的显示区域,将各个面部器官图像添加至第二面部图像上,得到并保存第一面部图像。
S205:服务器响应于虚拟礼物互动请求,获取第一直播间标识、第一直播间标识对应的第一视频流数据和第一面部图像;其中,第一视频流数据中包括若干帧第一视频画面;第一面部图像为根据各个面部器官图像在第二面部图像中的显示区域,将各个面部器官图像添加至第二面部图像上得到的;第二面部图像为未显示面部器官的面部轮廓图像;各个面部器官图像在第二面部图像中的显示区域为当前用户与面部拼图面板进行面部拼图交互后确定的。
S206:服务器定位各帧第一视频画面中的面部区域,将面部区域内的视频画面替换为第一面部图像,得到包括若干帧第二视频画面的第二视频流数据,发送第二视频流数据至第一直播间标识对应的第一直播间内的客户端。
S207:第一直播间内的客户端接收第二视频流数据,将第二视频流数据输出至直播间界面中。
步骤S205~S207与步骤S101~S103相同,具体可以参见第一实施例,下面详细对步骤S201~S204进行说明。
关于步骤S201,观众客户端响应于面部拼图请求,获取第一直播间标识、第一直播间标识对应的各个面部器官图像、第一直播间标识对应的第二面部图像以及面部拼图面板数据。
在本实施例汇总,该观众客户端为当前用户对应的观众客户端。
关于面部器官图像以及第二面部图像的解释可以参见第一实施例。面部拼图面板数据用于在直播间界面中显示面部拼图面板并实现面部拼图功能。
下面将先说明何时会触发观众客户端生成面部拼图请求。
具体地,在S201之前,包括步骤:观众客户端响应于虚拟礼物栏显示请求,获取虚拟礼物栏数据,根据虚拟礼物栏数据,显示虚拟礼物栏在直播间界面中;观众客户端获取当前用户选中的虚拟礼物,若当前用户选中的虚拟礼物为面部拼图虚拟礼物,生成面部拼图请求。
其中,虚拟礼物栏中至少显示有面部拼图虚拟礼物。
虚拟礼物栏数据包括虚拟礼物栏显示数据和虚拟礼物栏功能数据。虚拟礼物栏显示数据用于确定虚拟礼物栏在直播间界面中的显示样式、显示尺寸以及显示位置等。虚拟礼物栏功能数据用于实现虚拟礼物的展示、浏览以及赠送等功能。
请参阅图11,图11为本申请实施例提供的虚拟礼物栏在直播间界面中的另一显示示意图。可以看到,虚拟礼物栏111中显示有面部拼图虚拟礼物112。当前用户点击该面部拼图虚拟礼物112,即可触发观众客户端生成面部拼图请求。
下面说明观众客户端如何获取第一直播间标识对应的各个面部器官图像、第一直播间标识对应的第二面部图像。
若观众客户端已经保存了第一直播间标识对应的各个面部器官图像、第一直播间标识对应的第二面部图像,则直接获取即可。
若观众客户端未保存第一直播间标识对应的各个面部器官图像、第一直播间标识对应的第二面部图像,则可以通过图像链接从文件服务器调取。具体地,请参阅图12,S201包括步骤:
S2011:观众客户端获取各个面部器官图像对应的面部器官图像链接和第二面部图像对应的第二面部图像链接;其中,各个面部器官图像链接和第二面部图像链接为根据第一直播间标识从业务服务器获取到的。
S2012:观众客户端根据各个面部器官图像对应的面部器官图像链接和第二面部图像对应的第二面部图像链接,发送第二图像获取请求至文件服务器。
S2013:文件服务器响应于第二图像获取请求,获取各个面部器官图像链接和第二面部图像链接,调取各个面部器官图像链接对应的面部器官图像和第二面部图像连接对应的第二面部图像,发送各个面部器官图像和第二面部图像至观众客户端。
观众客户端从业务服务器获取第一直播间标识对应的各个面部器官图像链接和第一直播间标识对应的第二面部图像链接。之后,观众客户端根据各个面部器官图像对应的面部器官图像链接和第二面部图像对应的第二面部图像链接,生成第二图像获取请求,发送第二图像获取请求至文件服务器。文件服务器响应于第二图像获取请求,解析该第二图像获取请求,获取到各个面部器官图像链接和第二面部图像链接,调取各个面部器官图像链接对应的面部器官图像和第二面部图像连接对应的第二面部图像,发送各个面部器官图像和第二面部图像至观众客户端。
关于步骤S202,观众客户端根据各个面部器官图像、第二面部图像和面部拼图面板数据,将呈现有各个面部器官图像和第二面部图像的面部拼图面板显示在直播间界面中。
可以理解的是,在本实施例中,面部拼图面板中显示的各个面部器官图像相当于控件,当前用户可以与面部器官图像交互,移动、缩放或旋转面部器官图像。
请参阅图4,图4所示的面部拼图面板41中除了显示有第二面部图像42外,还显示有若干个面部器官图像43。
当前用户可以选中任意一个面部器官图像43,并点击区域A中的任意位置,将该面部器官图像43拼接在第二面部图像42中,区域A为第二面部图像42在面部拼图面板41中的显示区域。
当前用户也可以拖拽任意一个面部器官图像43,将该面部器官图像43拼接至第二面部图像42中。
之后,当前用户可以调整面部器官图像43的显示尺寸以及旋转角度。
请参阅图13,图13为本申请实施例提供的面部拼图面板在直播间界面中的另一显示示意图。图13中,面部器官图像43移动至了显示区域A中,该面部器官图像43为眼部图像。同样的,显示区域A为第二面部图像42在面部拼图面板41中的显示区域。
在一个可选的实施例中,观众客户端获取第二面部图像的已显示时长,若第二面部图像的已显示时长达到预设的第一显示时长,取消呈现在面部拼图面板中的第二面部图像。
也就是说,在第二面部图像的已显示时长达到预设的第一显示时长,将不继续在面部拼图面板中呈现第二面部图像,此时,用户只能在没有面部轮廓的提示下,进行面部器官图像的拼接。
关于步骤S203,观众客户端响应于面部拼图交互指令,获取当前用户确定的各个面部器官图像在第二面部图像中的显示区域。
该显示区域是基于各个面部器官图像在第二面部图像中的显示位置、显示尺寸以及旋转角度确定。
具体地,观众客户端响应于各个面部器官图像对应的面部拼图交互指令,获取当前用户确定的各个面部器官图像在第二面部图像中的显示位置、显示尺寸以及旋转角度,根据各个面部器官图像在第二面部图像中的显示位置、显示尺寸以及旋转角度,获取各个面部器官图像在第二面部图像中的显示区域。
在一个可选的实施例中,当前用户在将上一幅面部器官图像移动至第二面部图像中(若第二面部图像被取消呈现,则可以理解为移动至第二面图像在面部拼图面板的显示区域A中),并调节好其显示尺寸以及旋转角度后,会触发观众客户端发出上一幅面部器官图像对应的面部拼图交互指令,观众客户端响应于上一幅面部器官图像对应的面部拼图交互指令,获取当前用户确定的上一幅面部器官图像在第二面部图像中的显示位置、显示尺寸以及旋转角度,在本实施例中,上一幅面部器官图像会持续显示在面部拼图面板中,接下来当前用户可以立即设定下一幅面部器官图像的显示位置、显示尺寸以及旋转角度,进而触发观众客户端发出下一幅面部器官图像对应的面部拼图交互指令,重复上述步骤,直至当前用户确定好最后一幅面部器官图像的显示位置、显示尺寸以及旋转角度,触发观众客户端发出最后一幅面部器官图像对应的面部拼图交互指令,得到各个面部器官图像在第二面部图像中的显示位置、显示尺寸以及旋转角度,从而使得观众客户端可以根据各个面部器官图像在第二面部图像中的显示位置、显示尺寸以及旋转角度,获取各个面部器官图像在第二面部图像中的显示区域。
在本实施例中,用户在拼接面部器官图像时,能够看到已拼接好的面部器官图像,降低了用户进行面部器官图像拼接的难度。
在另一个可选的实施例中,观众客户端在响应于上一幅面部器官图像对应的面部拼图交互指令之后,获取上一幅面部器官图像的已拼接时长,若上一幅面部器官图像的已时长达到预设的第一拼接时长,取消呈现在面部拼图面板中的上一幅面部器官图像,并再开始响应于下一幅面部器官图像对应的面部拼图交互指令,直至确定各个面部器官图像在第二面部图像中的显示位置、显示尺寸以及旋转角度。
具体地,当前用户在将上一幅面部器官图像移动至第二面部图像中(若第二面部图像被取消显示,则可以理解为移动至第二面图像在面部拼图面板的显示区域A中),并调节好其显示尺寸以及旋转角度后,会触发观众客户端发出上一幅面部器官图像对应的面部拼图交互指令,观众客户端响应于上一幅面部器官图像对应的面部拼图交互指令,不仅获取当前用户确定的上一幅面部器官图像在第二面部图像中的显示位置、显示尺寸以及旋转角度,还要获取上一幅面部器官图像的已拼接时长,若上一幅面部器官图像的已拼接时长达到预设的第一拼接时长,取消呈现在面部拼图面板中的上一幅面部器官图像,并开始响应于下一幅面部器官图像对应的面部拼图交互指令,直至确定各个面部器官图像在第二面部图像中的显示位置、显示尺寸以及旋转角度,从而使得观众客户端根据各个面部器官图像在第二面部图像中的显示位置、显示尺寸以及旋转角度,获取各个面部器官图像在第二面部图像中的显示区域。
在本实施例中,用户在拼接面部器官图像时,无法看到已拼接好的面部器官图像,从而提高了用户进行面部图像拼接的难度,提升了面部拼图互动的趣味性,改善用户的虚拟礼物赠送体验。
下面将进一步说明用户在拼接面部器官图像,如何对用户操作进行控制,具体地,S203之前,包括步骤:观众客户端获取第二面部图像在面部拼图面板中的显示区域,也即前述的显示区域A,观众客户端响应于当前用户对面部器官图像的移动指令,获取面部器官图像在面部拼图面板中的第一显示位置;若第一显示位置位于第二面部图像在面部拼图面板中的显示区域之外,限制观众客户端移动面部器官图像至第一显示位置处。
在本实施例中,当前用户无法将任意一个面部器官图像移动至第二面部图像在面部拼图面板中的显示区域之外,从而能够在一定程度上保证面部拼图虚拟礼物的展示效果。
在一个可选的实施例中,观众客户端获取已拼接的面部器官图像在面部拼图面板中的显示区域和当前面部器官图像在面部拼图面板中的第一显示区域,若当前面部器官图像在面部拼图面板中的第一显示区域与任意一个已拼接的面部器官图像在面部拼图面板中的显示区域重叠,限制观众客户端拼接该当前面部器官图像至第一显示区域中,从而防止面部器官图像重叠,保证面部拼图虚拟礼物的展示效果。
请参阅图13,图13中还显示有确定控件44和重置控件45。当前用户可以在每确定一幅面部器官图像的显示位置、显示尺寸以及旋转角度之后,点击确定控件44,触发观众客户端生成该面部器官图像对应的面部拼图交互指令。当前用户也可以通过点击重置控件45,重新确认面部器官图像的显示位置、显示尺寸以及旋转角度。
在一个可选的实施例中,S203获取当前用户确定的各个面部器官图像在第二面部图像中的显示区域之后,包括步骤:观众客户端显示虚拟礼物赠送控件在面部拼图面板中;观众客户端响应于对虚拟礼物赠送控件的触发指令,获取第一直播间标识和第一面部图像,根据第一直播间标识和第一面部图像,生成并发送虚拟礼物赠送请求至服务器。
在本实施例中,在观众客户端获取到当前用户确定的各个面部器官图像在第二面部图像中的显示区域之后,会在面部拼图面板中显示虚拟礼物赠送控件,从而便于当前用户送出该面部拼图虚拟礼物,若当前用户与虚拟礼物赠送控件交互,则会触发观众客户端生成对虚拟礼物赠送控件的触发指令,观众客户端响应于对虚拟礼物赠送控件的触发指令,获取第一直播间标识和第一面部图像,根据第一直播间标识和第一面部图像,生成并发送虚拟礼物赠送请求至服务器。
可以理解的是,观众客户端在获取到当前用户确定的各个面部器官图像在第二面部图像中的显示区域之后,即可以根据各个面部器官图像在第二面部图像中的显示区域,将各个面部器官图像添加在第二面部图像上,得到第一面部图像。该步骤的执行与步骤S204的执行可以是并行的。
关于S204,观众客户端根据各个面部器官图像在第二面部图像中的显示区域,将各个面部器官图像添加至第二面部图像上,得到并保存第一面部图像。
各个面部器官图像在添加至第二面部图像之前,需要对其显示尺寸以及旋转角度调整,以使得其能与对应的显示区域匹配。
下面将具体说明观众客户端如何保存第一面部图像。S204中得到并保存第一面部图像,包括步骤:观众客户端发送第一面部图像至文件服务器;文件服务器接收并保存第一面部图像,返回第一面部图像对应的第一面部图像链接至观众客户端;观众客户端接收并保存第一面部图像对应的第一面部图像链接。
若观众客户端将第一面部图像保存至文件服务器,获取到第一面部图像对应的第一面部图像链接,那么,观众客户端在响应于对虚拟礼物赠送控件的触发指令时,则会获取第一直播间标识和第一面部图像链接,根据第一直播间标识和第一面部图像链接,生成并发送虚拟礼物赠送请求至服务器。
在一个可选的实施例中,服务器会生成面部拼图榜单,以进一步提高用户的虚拟礼物赠送体验,促进直播互动行为的产生,具体地:
服务器获取各个用户标识对应的第一面部图像以及第一直播间标识对应的主播面部图像,计算各个用户标识对应的第一面部图像与主播面部图像之间的相似度信息。
其中,用户标识对应的用户已赠送面部拼图虚拟礼物至当前主播;
该相似度信息可以通过将各个用户标识对应的第一面部图像与主播面部图像输入至预训练好的相似度计算网络得到。关于具体的相似度计算方式在此不进行限定。
之后,服务器根据各个用户标识对应的第一面部图像与主播面部图像之间的相似度信息,获取各个用户标识对应的榜单排名信息。
在服务器响应于面部拼图榜单显示指令时,获取目标用户标识,发送各个用户标识对应的榜单排名信息至目标用户标识对应的客户端。
该目标用户标识对应的用户可以为主播,也可以为观众,主播和观众均可以查看面部拼图榜单。
之后,目标用户标识对应的客户端接收各个用户标识对应的榜单排名信息,将呈现有各个用户标识对应的榜单排名信息的面部拼图榜单显示在直播间界面中。
在本实施例中,通过该面部拼图榜单可以直观地了解到各个用户的面部拼图结果,从而能够进一步促进直播互动行为的产生,使更多用户参与赠送面部拼图虚拟礼物,提高直播互动体验。
请参阅图14,图14为本申请第三实施例提供的基于面部拼图的虚拟礼物互动系统的结构示意图,该系统14包括:服务器141和客户端142;
所述服务器141用于响应于虚拟礼物互动请求,获取第一直播间标识、所述第一直播间标识对应的第一视频流数据和第一面部图像;其中,所述第一视频流数据中包括若干帧第一视频画面;所述第一面部图像为根据各个面部器官图像在第二面部图像中的显示区域,将各个所述面部器官图像添加至所述第二面部图像上得到的;所述第二面部图像为未显示面部器官的面部轮廓图像;各个所述面部器官图像在所述第二面部图像中的显示区域为当前用户与面部拼图面板进行面部拼图交互后确定的;
所述服务器141用于定位各帧所述第一视频画面中的面部区域,将所述面部区域内的视频画面替换为所述第一面部图像,得到包括若干帧第二视频画面的第二视频流数据,发送所述第二视频流数据至所述第一直播间标识对应的第一直播间内的客户端142;
所述第一直播间内的客户端142用于接收所述第二视频流数据,将所述第二视频流数据输出至直播间界面中。
上述实施例提供的基于面部拼图的虚拟礼物互动系统与基于面部拼图的虚拟礼物互动方法属于同一构思,其体现实现过程详见方法实施例,这里不再赘述。
请参阅图15,为本申请第四实施例提供的基于面部拼图的虚拟礼物互动装置的结构示意图。该装置可以通过软件、硬件或两者的结合实现成为计算机设备的全部或一部分。该装置15包括:
第一获取单元151,用于服务器响应于虚拟礼物互动请求,获取第一直播间标识、所述第一直播间标识对应的第一视频流数据和第一面部图像;其中,所述第一视频流数据中包括若干帧第一视频画面;所述第一面部图像为根据各个面部器官图像在第二面部图像中的显示区域,将各个所述面部器官图像添加至所述第二面部图像上得到的;所述第二面部图像为未显示面部器官的面部轮廓图像;各个所述面部器官图像在所述第二面部图像中的显示区域为当前用户与面部拼图面板进行面部拼图交互后确定的;
第一替换单元152,用于所述服务器定位各帧所述第一视频画面中的面部区域,将所述面部区域内的视频画面替换为所述第一面部图像,得到包括若干帧第二视频画面的第二视频流数据,发送所述第二视频流数据至所述第一直播间标识对应的第一直播间内的客户端;
第一输出单元153,用于所述第一直播间内的客户端接收所述第二视频流数据,将所述第二视频流数据输出至直播间界面中。
需要说明的是,上述实施例提供的基于面部拼图的虚拟礼物互动装置在执行基于面部拼图的虚拟礼物互动方法时,仅以上述各功能模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能模块完成,即将设备的内部结构划分为不同的功能模块,以完成以上描述的全部或者部分功能。另外,上述实施例提供的基于面部拼图的虚拟礼物互动装置与基于面部拼图的虚拟礼物互动方法属于同一构思,其体现实现过程详见方法实施例,这里不再赘述。
请参阅图16,为本申请第五实施例提供的计算机设备的结构示意图。如图16所示,该计算机设备16可以包括:处理器160、存储器161以及存储在该存储器161并可以在该处理器160上运行的计算机程序162,例如:基于面部拼图的虚拟礼物互动程序;该处理器160执行该计算机程序162时实现上述第一实施例至第二实施例中的步骤。
其中,该处理器160可以包括一个或多个处理核心。处理器160利用各种接口和线路连接计算机设备16内的各个部分,通过运行或执行存储在存储器161内的指令、程序、代码集或指令集,以及调用存储器161内的数据,执行计算机设备16的各种功能和处理数据,可选的,处理器160可以采用数字信号处理(Digital Signal Processing,DSP)、现场可编程门阵列(Field-Programmable Gate Array,FPGA)、可编程逻辑阵列(Programble LogicArray,PLA)中的至少一个硬件形式来实现。处理器160可集成中央处理器(CentralProcessing Unit,CPU)、图像处理器(Graphics Processing Unit,GPU)和调制解调器等中的一种或几种的组合。其中,CPU主要处理操作系统、用户界面和应用程序等;GPU用于负责触摸显示屏所需要显示的内容的渲染和绘制;调制解调器用于处理无线通信。可以理解的是,上述调制解调器也可以不集成到处理器160中,单独通过一块芯片进行实现。
其中,存储器161可以包括随机存储器(Random Access Memory,RAM),也可以包括只读存储器(Read-Only Memory)。可选的,该存储器161包括非瞬时性计算机可读介质(non-transitory computer-readable storage medium)。存储器161可用于存储指令、程序、代码、代码集或指令集。存储器161可包括存储程序区和存储数据区,其中,存储程序区可存储用于实现操作系统的指令、用于至少一个功能的指令(比如触控指令等)、用于实现上述各个方法实施例的指令等;存储数据区可存储上面各个方法实施例中涉及到的数据等。存储器161可选的还可以是至少一个位于远离前述处理器160的存储装置。
本申请实施例还提供了一种计算机存储介质,该计算机存储介质可以存储有多条指令,该指令适用于由处理器加载并执行上述实施例的方法步骤,具体执行过程可以参见上述实施例的具体说明,在此不进行赘述。
所属领域的技术人员可以清楚地了解到,为了描述的方便和简洁,仅以上述各功能单元、模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能单元、模块完成,即将装置的内部结构划分成不同的功能单元或模块,以完成以上描述的全部或者部分功能。实施例中的各功能单元、模块可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中,上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。另外,各功能单元、模块的具体名称也只是为了便于相互区分,并不用于限制本申请的保护范围。上述系统中单元、模块的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述或记载的部分,可以参见其它实施例的相关描述。
本领域普通技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本发明的范围。
在本发明所提供的实施例中,应该理解到,所揭露的装置/终端设备和方法,可以通过其它的方式实现。例如,以上所描述的装置/终端设备实施例仅是示意性的,例如,模块或单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通讯连接可以是通过一些接口,装置或单元的间接耦合或通讯连接,可以是电性,机械或其它的形式。
作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
集成的模块/单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明实现上述实施例方法中的全部或部分流程,也可以通过计算机程序来指令相关的硬件来完成,计算机程序可存储于一计算机可读存储介质中,该计算机程序在被处理器执行时,可实现上述各个方法实施例的步骤。其中,计算机程序包括计算机程序代码,计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。
本发明并不局限于上述实施方式,如果对本发明的各种改动或变形不脱离本发明的精神和范围,倘若这些改动和变形属于本发明的权利要求和等同技术范围之内,则本发明也意图包含这些改动和变形。

Claims (20)

1.一种基于面部拼图的虚拟礼物互动方法,其特征在于,所述方法包括步骤:
服务器响应于虚拟礼物互动请求,获取第一直播间标识、所述第一直播间标识对应的第一视频流数据和第一面部图像;其中,所述第一视频流数据中包括若干帧第一视频画面;所述第一面部图像为根据各个面部器官图像在第二面部图像中的显示区域,将各个所述面部器官图像添加至所述第二面部图像上得到的;所述第二面部图像为未显示面部器官的面部轮廓图像;各个所述面部器官图像在所述第二面部图像中的显示区域为当前用户与面部拼图面板进行面部拼图交互后确定的;
所述服务器定位各帧所述第一视频画面中的面部区域,将所述面部区域内的视频画面替换为所述第一面部图像,得到包括若干帧第二视频画面的第二视频流数据,发送所述第二视频流数据至所述第一直播间标识对应的第一直播间内的客户端;
所述第一直播间内的客户端接收所述第二视频流数据,将所述第二视频流数据输出至直播间界面中。
2.根据权利要求1所述的基于面部拼图的虚拟礼物互动方法,其特征在于,所述服务器响应于虚拟礼物互动请求,获取第一直播间标识、所述第一直播间标识对应的第一视频流数据和第一面部图像的步骤,包括:
流媒体服务器响应于业务服务器发送的所述虚拟礼物互动请求,获取第一面部图像链接;其中,所述虚拟礼物互动请求为所述业务服务器响应于虚拟礼物赠送请求,确定待赠送的虚拟礼物为面部拼图虚拟礼物时生成的;
所述流媒体服务器根据所述第一面部图像链接,发送第一图像获取请求至文件服务器;
所述文件服务器响应于所述第一图像获取请求,获取所述第一面部图像链接,并调取所述第一面部图像链接对应的所述第一面部图像,发送所述第一面部图像至所述流媒体服务器。
3.根据权利要求1所述的基于面部拼图的虚拟礼物互动方法,其特征在于,所述服务器响应于虚拟礼物互动请求之前,包括步骤:
所述服务器响应于虚拟礼物配置请求,获取所述第一直播间标识和所述第一直播间标识对应的主播面部图像;
所述服务器定位所述主播面部图像中各个所述面部器官的显示位置和显示尺寸,根据各个所述面部器官的显示位置和显示尺寸,截取所述主播面部图像,得到各个所述面部器官图像;
所述服务器擦除所述主播面部图像中显示的各个所述面部器官,得到所述第二面部图像;
所述服务器保存所述第一直播间标识、所述第一直播间标识对应的各个所述面部器官图像和所述第一直播间标识对应的所述第二面部图像。
4.根据权利要求3所述的基于面部拼图的虚拟礼物互动方法,其特征在于,所述服务器定位所述主播面部图像中各个所述面部器官的显示位置和显示尺寸,包括步骤:
所述服务器对所述主播面部图像进行灰度化处理,得到灰度化处理后的主播面部图像;
所述服务器将所述灰度化处理后的主播面部图像输入至预训练好的面部器官定位网络,得到各个所述面部器官在所述主播面部图像中的显示位置和显示尺寸;其中,所述面部器官定位网络是根据已标注面部器官显示位置和面部器官显示尺寸的面部训练图像训练得到的。
5.根据权利要求3所述的基于面部拼图的虚拟礼物互动方法,其特征在于:所述主播面部图像为当前主播上传的主播面部图像,或,所述主播面部图像为从所述第一视频流数据中抓取的主播面部图像。
6.根据权利要求3所述的基于面部拼图的虚拟礼物互动方法,其特征在于,所述服务器保存所述第一直播间标识、所述第一直播间标识对应的所述面部器官图像和所述第一直播间标识对应的所述第二面部图像,包括步骤:
业务服务器将各个所述面部器官图像和所述第二面部图像发送至文件服务器;
所述文件服务器接收并保存各个所述面部器官图像和所述第二面部图像,返回各个所述面部器官图像对应的面部器官图像链接和所述第二面部图像对应的第二面部图像链接至所述业务服务器;
所述业务服务器接收并保存所述第一直播间标识对应的各个所述面部器官图像链接和所述第一直播间标识对应的所述第二面部图像链接。
7.根据权利要求1至6任意一项所述的基于面部拼图的虚拟礼物互动方法,其特征在于,所述服务器响应于虚拟礼物互动请求之前,包括步骤:
观众客户端响应于面部拼图请求,获取所述第一直播间标识、所述第一直播间标识对应的各个所述面部器官图像、所述第一直播间标识对应的所述第二面部图像以及面部拼图面板数据;
所述观众客户端根据各个所述面部器官图像、所述第二面部图像和所述面部拼图面板数据,将呈现有各个所述面部器官图像和所述第二面部图像的所述面部拼图面板显示在所述直播间界面中;
所述观众客户端响应于面部拼图交互指令,获取所述当前用户确定的各个所述面部器官图像在所述第二面部图像中的显示区域;
所述观众客户端根据各个所述面部器官图像在所述第二面部图像中的显示区域,将各个所述面部器官图像添加至所述第二面部图像上,得到并保存所述第一面部图像。
8.根据权利要求7所述的基于面部拼图的虚拟礼物互动方法,其特征在于,所述观众客户端响应于面部拼图请求之前,包括步骤:
所述观众客户端响应于虚拟礼物栏显示请求,获取虚拟礼物栏数据,根据所述虚拟礼物栏数据,显示虚拟礼物栏在所述直播间界面中;其中,所述虚拟礼物栏中至少显示有面部拼图虚拟礼物;
所述观众客户端获取所述当前用户选中的虚拟礼物,若所述当前用户选中的虚拟礼物为所述面部拼图虚拟礼物,生成所述面部拼图请求。
9.根据权利要求7所述的基于面部拼图的虚拟礼物互动方法,其特征在于,所述获取所述第一直播间标识、所述第一直播间标识对应的各个所述面部器官图像、所述第一直播间标识对应的所述第二面部图像以及面部拼图面板数据的步骤,包括:
所述观众客户端获取各个所述面部器官图像对应的面部器官图像链接和所述第二面部图像对应的第二面部图像链接;其中,各个所述面部器官图像链接和所述第二面部图像链接为根据所述第一直播间标识从业务服务器获取到的;
所述观众客户端根据各个所述面部器官图像对应的面部器官图像链接和所述第二面部图像对应的第二面部图像链接,发送第二图像获取请求至文件服务器;
所述文件服务器响应于所述第二图像获取请求,获取各个所述面部器官图像链接和所述第二面部图像链接,调取各个所述面部器官图像链接对应的所述面部器官图像和所述第二面部图像连接对应的所述第二面部图像,发送各个所述面部器官图像和所述第二面部图像至所述观众客户端。
10.根据权利要求7所述的基于面部拼图的虚拟礼物互动方法,其特征在于,所述获取所述当前用户确定的各个所述面部器官图像在所述第二面部图像中的显示区域之后,包括步骤:
所述观众客户端显示虚拟礼物赠送控件在所述面部拼图面板中;
所述观众客户端响应于对所述虚拟礼物赠送控件的触发指令,获取所述第一直播间标识和所述第一面部图像,根据所述第一直播间标识和所述第一面部图像,生成并发送虚拟礼物赠送请求至所述服务器。
11.根据权利要求7所述的基于面部拼图的虚拟礼物互动方法,其特征在于,所述得到并保存所述第一面部图像,包括步骤:
所述观众客户端发送所述第一面部图像至文件服务器;
所述文件服务器接收并保存所述第一面部图像,返回所述第一面部图像对应的第一面部图像链接至所述观众客户端;
所述观众客户端接收并保存所述第一面部图像对应的第一面部图像链接。
12.根据权利要求7所述的基于面部拼图的虚拟礼物互动方法,其特征在于,所述观众客户端响应于面部拼图交互指令,获取所述当前用户确定的各个所述面部器官图像在所述第二面部图像中的显示区域,包括步骤:
所述观众客户端响应于各个所述面部器官图像对应的面部拼图交互指令,获取所述当前用户确定的各个所述面部器官图像在所述第二面部图像中的显示位置、显示尺寸以及旋转角度;
所述观众客户端根据各个所述面部器官图像在所述第二面部图像中的显示位置、显示尺寸以及旋转角度,获取各个所述面部器官图像在所述第二面部图像中的显示区域。
13.根据权利要求12所述的基于面部拼图的虚拟礼物互动方法,其特征在于,所述观众客户端响应于各个所述面部器官图像对应的面部拼图交互指令,获取所述当前用户确定的各个所述面部器官图像在所述第二面部图像中的显示位置、显示尺寸以及旋转角度,包括步骤:
所述观众客户端在响应于上一幅所述面部器官图像对应的面部拼图交互指令之后,获取上一幅所述面部器官图像的已拼接时长,若上一幅所述面部器官图像的已时长达到预设的第一拼接时长,取消呈现在所述面部拼图面板中的上一幅所述面部器官图像,并开始响应于下一幅所述面部器官图像对应的面部拼图交互指令,直至确定各个所述面部器官图像在所述第二面部图像中的显示位置、显示尺寸以及旋转角度。
14.根据权利要求12所述的基于面部拼图的虚拟礼物互动方法,其特征在于,所述观众客户端响应于各个所述面部器官图像对应的面部拼图交互指令之前,包括步骤:
所述观众客户端获取所述第二面部图像在所述面部拼图面板中的显示区域;
所述观众客户端响应于所述当前用户对所述面部器官图像的移动指令,获取所述面部器官图像在所述面部拼图面板中的第一显示位置;
若所述第一显示位置位于所述第二面图像在所述面部拼图面板中的显示区域之外,限制所述观众客户端移动所述面部器官图像至所述第一显示位置处。
15.根据权利要求7所述的基于面部拼图的虚拟礼物互动方法,其特征在于,所述将呈现有各个所述面部器官图像和所述第二面部图像的所述面部拼图面板显示在所述直播间界面中之后,包括步骤:
所述观众客户端获取所述第二面部图像的已显示时长,若所述第二面部图像的已显示时长达到预设的第一显示时长,取消呈现在所述面部拼图面板中的所述第二面部图像。
16.根据权利要求1至6任意一项所述的基于面部拼图的虚拟礼物互动方法,其特征在于,所述方法还包括步骤:
所述服务器获取各个用户标识对应的第一面部图像以及所述第一直播间标识对应的主播面部图像,计算各个所述用户标识对应的第一面部图像与所述主播面部图像之间的相似度信息;其中,所述用户标识对应的用户已赠送面部拼图虚拟礼物至当前主播;
所述服务器根据各个所述用户标识对应的第一面部图像与所述主播面部图像之间的相似度信息,获取各个所述用户标识对应的榜单排名信息;
所述服务器响应于面部拼图榜单显示指令,获取目标用户标识,发送各个所述用户标识对应的榜单排名信息至所述目标用户标识对应的客户端;
所述目标用户标识对应的客户端接收各个所述用户标识对应的榜单排名信息,将呈现有各个所述用户标识对应的榜单排名信息的面部拼图榜单显示在所述直播间界面中。
17.一种基于面部拼图的虚拟礼物互动系统,其特征在于,包括:服务器和客户端;
所述服务器用于响应于虚拟礼物互动请求,获取第一直播间标识、所述第一直播间标识对应的第一视频流数据和第一面部图像;其中,所述第一视频流数据中包括若干帧第一视频画面;所述第一面部图像为根据各个面部器官图像在第二面部图像中的显示区域,将各个所述面部器官图像添加至所述第二面部图像上得到的;所述第二面部图像为未显示面部器官的面部轮廓图像;各个所述面部器官图像在所述第二面部图像中的显示区域为当前用户与面部拼图面板进行面部拼图交互后确定的;
所述服务器用于定位各帧所述第一视频画面中的面部区域,将所述面部区域内的视频画面替换为所述第一面部图像,得到包括若干帧第二视频画面的第二视频流数据,发送所述第二视频流数据至所述第一直播间标识对应的第一直播间内的客户端;
所述第一直播间内的客户端用于接收所述第二视频流数据,将所述第二视频流数据输出至直播间界面中。
18.一种基于面部拼图的虚拟礼物互动装置,其特征在于,包括:
第一获取单元,用于服务器响应于虚拟礼物互动请求,获取第一直播间标识、所述第一直播间标识对应的第一视频流数据和第一面部图像;其中,所述第一视频流数据中包括若干帧第一视频画面;所述第一面部图像为根据各个面部器官图像在第二面部图像中的显示区域,将各个所述面部器官图像添加至所述第二面部图像上得到的;所述第二面部图像为未显示面部器官的面部轮廓图像;各个所述面部器官图像在所述第二面部图像中的显示区域为当前用户与面部拼图面板进行面部拼图交互后确定的;
第一替换单元,用于所述服务器定位各帧所述第一视频画面中的面部区域,将所述面部区域内的视频画面替换为所述第一面部图像,得到包括若干帧第二视频画面的第二视频流数据,发送所述第二视频流数据至所述第一直播间标识对应的第一直播间内的客户端;
第一输出单元,用于所述第一直播间内的客户端接收所述第二视频流数据,将所述第二视频流数据输出至直播间界面中。
19.一种计算机设备,包括:处理器、存储器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现如权利要求1至16任意一项所述方法的步骤。
20.一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1至16任意一项所述方法的步骤。
CN202210128980.8A 2022-02-11 2022-02-11 基于面部拼图的虚拟礼物互动方法、系统及计算机设备 Pending CN114501065A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210128980.8A CN114501065A (zh) 2022-02-11 2022-02-11 基于面部拼图的虚拟礼物互动方法、系统及计算机设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210128980.8A CN114501065A (zh) 2022-02-11 2022-02-11 基于面部拼图的虚拟礼物互动方法、系统及计算机设备

Publications (1)

Publication Number Publication Date
CN114501065A true CN114501065A (zh) 2022-05-13

Family

ID=81481122

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210128980.8A Pending CN114501065A (zh) 2022-02-11 2022-02-11 基于面部拼图的虚拟礼物互动方法、系统及计算机设备

Country Status (1)

Country Link
CN (1) CN114501065A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023241719A1 (zh) * 2022-06-17 2023-12-21 北京字跳网络技术有限公司 基于虚拟礼物的交互方法及相关设备

Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106341696A (zh) * 2016-09-28 2017-01-18 北京奇虎科技有限公司 一种直播视频流处理方法和装置
CN106447604A (zh) * 2016-09-30 2017-02-22 北京奇虎科技有限公司 一种变换视频中面部画面的方法和装置
CN106534757A (zh) * 2016-11-22 2017-03-22 北京金山安全软件有限公司 人脸交换方法、装置、主播终端及观众终端
CN108681719A (zh) * 2018-05-21 2018-10-19 北京微播视界科技有限公司 视频图像处理方法及装置
CN109672830A (zh) * 2018-12-24 2019-04-23 北京达佳互联信息技术有限公司 图像处理方法、装置、电子设备及存储介质
CN110335199A (zh) * 2019-07-17 2019-10-15 上海骏聿数码科技有限公司 一种图像处理方法、装置、电子设备及存储介质
CN110418155A (zh) * 2019-08-08 2019-11-05 腾讯科技(深圳)有限公司 直播互动方法、装置、计算机可读存储介质和计算机设备
CN110766777A (zh) * 2019-10-31 2020-02-07 北京字节跳动网络技术有限公司 虚拟形象的生成方法、装置、电子设备及存储介质
CN110889381A (zh) * 2019-11-29 2020-03-17 广州华多网络科技有限公司 换脸方法、装置、电子设备及存储介质
CN111200747A (zh) * 2018-10-31 2020-05-26 百度在线网络技术(北京)有限公司 基于虚拟形象的直播方法和装置
CN112164135A (zh) * 2020-09-30 2021-01-01 山西智优利民健康管理咨询有限公司 一种虚拟人物形象的构建装置和方法
CN112561786A (zh) * 2020-12-22 2021-03-26 作业帮教育科技(北京)有限公司 基于图像卡通化的在线直播方法、装置和电子设备
CN113938696A (zh) * 2021-10-13 2022-01-14 广州方硅信息技术有限公司 基于自定义虚拟礼物的直播互动方法、系统及计算机设备

Patent Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106341696A (zh) * 2016-09-28 2017-01-18 北京奇虎科技有限公司 一种直播视频流处理方法和装置
CN106447604A (zh) * 2016-09-30 2017-02-22 北京奇虎科技有限公司 一种变换视频中面部画面的方法和装置
CN106534757A (zh) * 2016-11-22 2017-03-22 北京金山安全软件有限公司 人脸交换方法、装置、主播终端及观众终端
CN108681719A (zh) * 2018-05-21 2018-10-19 北京微播视界科技有限公司 视频图像处理方法及装置
CN111200747A (zh) * 2018-10-31 2020-05-26 百度在线网络技术(北京)有限公司 基于虚拟形象的直播方法和装置
CN109672830A (zh) * 2018-12-24 2019-04-23 北京达佳互联信息技术有限公司 图像处理方法、装置、电子设备及存储介质
CN110335199A (zh) * 2019-07-17 2019-10-15 上海骏聿数码科技有限公司 一种图像处理方法、装置、电子设备及存储介质
CN110418155A (zh) * 2019-08-08 2019-11-05 腾讯科技(深圳)有限公司 直播互动方法、装置、计算机可读存储介质和计算机设备
CN110766777A (zh) * 2019-10-31 2020-02-07 北京字节跳动网络技术有限公司 虚拟形象的生成方法、装置、电子设备及存储介质
CN110889381A (zh) * 2019-11-29 2020-03-17 广州华多网络科技有限公司 换脸方法、装置、电子设备及存储介质
CN112164135A (zh) * 2020-09-30 2021-01-01 山西智优利民健康管理咨询有限公司 一种虚拟人物形象的构建装置和方法
CN112561786A (zh) * 2020-12-22 2021-03-26 作业帮教育科技(北京)有限公司 基于图像卡通化的在线直播方法、装置和电子设备
CN113938696A (zh) * 2021-10-13 2022-01-14 广州方硅信息技术有限公司 基于自定义虚拟礼物的直播互动方法、系统及计算机设备

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023241719A1 (zh) * 2022-06-17 2023-12-21 北京字跳网络技术有限公司 基于虚拟礼物的交互方法及相关设备

Similar Documents

Publication Publication Date Title
CN108174272B (zh) 直播中互动信息展示的方法、装置、存储介质及电子设备
JP2009518103A (ja) ユーザがモバイル機器によって大画面ゲームをプレイできるようにするための方法およびシステム
CN113840154A (zh) 基于虚拟礼物的直播互动方法、系统及计算机设备
CN113573083A (zh) 连麦直播互动方法、装置及计算机设备
CN113453030A (zh) 直播中的音频交互方法、装置、计算机设备及存储介质
CN113596504A (zh) 直播间虚拟礼物赠送方法、装置及计算机设备
CN113965813A (zh) 直播间内的视频播放方法、系统及计算机设备
KR102408778B1 (ko) 인터넷 전화 기반 통화 중에 컨텐츠를 공유하는 방법, 시스템, 및 컴퓨터 프로그램
CN113824984A (zh) 虚拟礼物流水的显示方法、系统、装置及计算机设备
CN113824976A (zh) 直播间内的进场秀显示方法、装置及计算机设备
CN113938696A (zh) 基于自定义虚拟礼物的直播互动方法、系统及计算机设备
CN114501065A (zh) 基于面部拼图的虚拟礼物互动方法、系统及计算机设备
CN114125480A (zh) 直播合唱互动方法、系统、装置及计算机设备
CN113573105A (zh) 基于霸屏虚拟礼物的直播互动方法及计算机设备
CN113411622B (zh) 直播界面的加载方法、装置、客户端及存储介质
CN114095772B (zh) 连麦直播下的虚拟对象展示方法、系统及计算机设备
CN115134621A (zh) 基于主副画面显示的直播对战互动方法、装置及电子设备
CN114760520A (zh) 直播中小视频拍摄互动方法、装置、设备及存储介质
CN115065838A (zh) 直播间封面交互方法、系统、装置及电子设备
CN114760502A (zh) 直播间进场秀合并播放方法、装置及计算机设备
CN113573117A (zh) 视频直播方法、装置及计算机设备
CN114666672A (zh) 由观众发起的直播对战互动方法、系统及计算机设备
CN114222151A (zh) 开播交互动画的显示方法、装置及计算机设备
CN113891162A (zh) 直播间加载方法、装置及计算机设备
CN114513679B (zh) 基于音频预播放的直播间推荐方法、系统及计算机设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination