CN117097914A - 直播画面中主播形象的处理方法及装置 - Google Patents

直播画面中主播形象的处理方法及装置 Download PDF

Info

Publication number
CN117097914A
CN117097914A CN202210521408.8A CN202210521408A CN117097914A CN 117097914 A CN117097914 A CN 117097914A CN 202210521408 A CN202210521408 A CN 202210521408A CN 117097914 A CN117097914 A CN 117097914A
Authority
CN
China
Prior art keywords
target
virtual image
avatar
anchor
instruction
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202210521408.8A
Other languages
English (en)
Inventor
于盛晨
刘宏伟
覃保锟
况梓林
万成
张南凯
王钧敏
池海
盛亦来
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Bilibili Technology Co Ltd
Original Assignee
Shanghai Bilibili Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Bilibili Technology Co Ltd filed Critical Shanghai Bilibili Technology Co Ltd
Priority to CN202210521408.8A priority Critical patent/CN117097914A/zh
Publication of CN117097914A publication Critical patent/CN117097914A/zh
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21Server components or server architectures
    • H04N21/218Source of audio or video content, e.g. local disk arrays
    • H04N21/2187Live feed
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/235Processing of additional data, e.g. scrambling of additional data or processing content descriptors
    • H04N21/2355Processing of additional data, e.g. scrambling of additional data or processing content descriptors involving reformatting operations of additional data, e.g. HTML pages
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • H04N21/4355Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream involving reformatting operations of additional data, e.g. HTML pages on a television screen
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213Monitoring of end-user related data

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Social Psychology (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本申请提供直播画面中主播形象的处理方法及装置,其中直播画面中主播形象的处理方法包括:若确定虚拟形象功能开启,则可以获取目标主播设定的目标虚拟形象,然后在采集到的直播画面中识别目标主播的设定遮挡部位,在设定遮挡部位处展示目标虚拟形象,在直播过程中通过目标虚拟形象遮挡目标主播的设定遮挡部位;在直播过程中还可以接收针对目标虚拟形象的互动指令,将互动指令对应的互动内容展示在目标虚拟形象的设定区域。如此,目标虚拟形象除了可以遮挡目标主播的真实形象之外,还可以提供互动功能,目标虚拟形象上可以展示不同的互动内容,丰富了目标虚拟形象的形态,提高了目标虚拟形象的趣味性和互动性。

Description

直播画面中主播形象的处理方法及装置
技术领域
本申请涉及直播技术领域,特别涉及一种直播画面中主播形象的处理方法。本申请同时涉及一种直播画面中主播形象的处理装置,一种计算设备,以及一种计算机可读存储介质。
背景技术
随着计算机技术和互联网技术的不断发展与进步,直播作为一种新兴的信息传播方式受到越来越多人的关注,在进行直播时,主播可以通过自身的主播端采集视频数据,之后将所采集的视频数据上传至服务器,以通过服务器将所上传的视频数据推送给用户观看。
现有技术中,有些主播在直播过程中并不想露出真实形象,因而主播可以选择一个虚拟形象来遮挡自身的真实形象,生成遮挡主播形象的视频数据,通过网络推送给各个用户观看。
然而,上述过程中,主播选择某个虚拟形象后,在整个直播过程中始终采用该虚拟形象来遮挡主播的真实形象,虚拟形象的形态较为单一,趣味性较差,影响用户观看直播的体验。
发明内容
有鉴于此,本申请实施例提供了一种直播画面中主播形象的处理方法。本申请同时涉及一种直播画面中主播形象的处理装置,一种计算设备,以及一种计算机可读存储介质,以解决现有技术中存在的虚拟形象的形态较为单一,趣味性较差,影响用户观看体验的技术问题。
根据本申请实施例的第一方面,提供了一种直播画面中主播形象的处理方法,包括:
在虚拟形象功能开启的情况下,获取目标主播设定的目标虚拟形象;
在采集到的直播画面中识别目标主播的设定遮挡部位,在设定遮挡部位处展示目标虚拟形象;
接收针对目标虚拟形象的互动指令,将互动指令对应的互动内容展示在目标虚拟形象的设定区域。
根据本申请实施例的第二方面,提供了一种直播画面中主播形象的处理装置,包括:
获取模块,被配置为在虚拟形象功能开启的情况下,获取目标主播设定的目标虚拟形象;
虚拟形象展示模块,被配置为在采集到的直播画面中识别目标主播的设定遮挡部位,在设定遮挡部位处展示目标虚拟形象;
互动内容展示模块,被配置为接收针对目标虚拟形象的互动指令,将互动指令对应的互动内容展示在目标虚拟形象的设定区域。
根据本申请实施例的第三方面,提供了一种计算设备,包括:
存储器和处理器;
存储器用于存储计算机可执行指令,处理器用于执行计算机可执行指令,以实现上述的直播画面中主播形象的处理方法的步骤。
根据本申请实施例的第四方面,提供了一种计算机可读存储介质,其存储有计算机可执行指令,该计算机可执行指令被处理器执行时实现上述的直播画面中主播形象的处理方法的步骤。
本申请提供的直播画面中主播形象的处理方法,主播可以通过主播端预先设定遮挡自身形象的目标虚拟形象,在开播后若确定虚拟形象功能开启,则可以获取目标主播设定的目标虚拟形象,然后在采集到的直播画面中识别目标主播的设定遮挡部位,在设定遮挡部位处展示目标虚拟形象,在直播过程中通过目标虚拟形象遮挡目标主播的设定遮挡部位;在直播过程中还可以接收针对目标虚拟形象的互动指令,将互动指令对应的互动内容展示在目标虚拟形象的设定区域。这种情况下,目标虚拟形象除了可以遮挡目标主播的真实形象之外,还可以提供互动功能,在目标虚拟形象的设定区域展示相应的互动内容,也即直播过程中目标虚拟形象上可以展示不同的互动内容,既丰富了目标虚拟形象的形态,又提高了目标虚拟形象的趣味性和互动性,保证了用户观看直播的体验。
附图说明
图1是本申请一实施例提供的一种直播画面中主播形象的处理方法的流程图;
图2是本申请一实施例提供的一种应用于真实头像遮挡场景下的直播画面中主播形象的处理方法的处理流程图;
图3a是本申请一实施例提供的一种虚拟头像设置界面的示意图;
图3b是本申请一实施例提供的第一种直播画面的展示示意图;
图3c是本申请一实施例提供的第二种直播画面的展示示意图;
图3d是本申请一实施例提供的第三种直播画面的展示示意图;
图3e是本申请一实施例提供的第四种直播画面的展示示意图;
图3f是本申请一实施例提供的第五种直播画面的展示示意图;
图3g是本申请一实施例提供的第六种直播画面的展示示意图;
图3h是本申请一实施例提供的第七种直播画面的展示示意图;
图3i是本申请一实施例提供的第八种直播画面的展示示意图;
图3j是本申请一实施例提供的第九种直播画面的展示示意图;
图4是本申请一实施例提供的一种直播画面中主播形象的处理装置的结构示意图;
图5是本申请一实施例提供的一种计算设备的结构框图。
具体实施方式
在下面的描述中阐述了很多具体细节以便于充分理解本申请。但是本申请能够以很多不同于在此描述的其它方式来实施,本领域技术人员可以在不违背本申请内涵的情况下做类似推广,因此本申请不受下面公开的具体实施的限制。
在本申请一个或多个实施例中使用的术语是仅仅出于描述特定实施例的目的,而非旨在限制本申请一个或多个实施例。在本申请一个或多个实施例和所附权利要求书中所使用的单数形式的“一种”和“该”也旨在包括多数形式,除非上下文清楚地表示其他含义。还应当理解,本申请一个或多个实施例中使用的术语“和/或”是指并包含一个或多个相关联的列出项目的任何或所有可能组合。
应当理解,尽管在本申请一个或多个实施例中可能采用术语第一、第二等来描述各种信息,但这些信息不应限于这些术语。这些术语仅用来将同一类型的信息彼此区分开。例如,在不脱离本申请一个或多个实施例范围的情况下,第一也可以被称为第二,类似地,第二也可以被称为第一。取决于语境,如在此所使用的词语“如果”可以被解释成为“在……时”或“当……时”或“响应于确定”。
blendshape:形状融合变形,它是利用一系列相同拓扑结构的网格作为目标,将不同位置的顶点进行融合,并形成新的网格,通常会用在三维角色面部的表情制作上。它其实是单个网格变形以实现许多预定义形状和任何数量之间组合的技术,例如单个网格是默认形状的基本形状(例如无表情的面),并且基本形状的其他形状用于混合/变形,是不同的表达(笑、皱眉、闭合眼皮),这些被统称为混合形状或变形目标。
需要说明的是,现有虚拟形象(如3D虚拟头像)仅根据预设模板显示虚拟形态,不涉及其他变化,形式比较单一。在虚拟形象上进行功能增加和优化,使其能根据主播或者观众的操作实时进行形态的变化,可以提高直播互动性和趣味性。因而,本申请实施例中可以在直播过程中基于接收到的互动指令优化虚拟形象,面部通过贴图和blendshape驱动映射主播表情的能力,并配置自定义挂件、自定义表情包、弹幕触发、自定义文字编辑等能力,实现在虚拟形象的预定区域根据主播的操作或者观众的行为显示相应的自定义内容。
实际应用中,本申请提供的直播画面中主播形象的处理方法可以应用于主播端,也即由主播端基于接收到的互动指令(主播触发或者直播间用户触发),将相应的互动内容展示在目标虚拟形象的设定区域,合成仅包括主播虚拟形象的直播流,推送给服务器,通过服务器推送给各个用户端进行观看。或者,本申请提供的直播画面中主播形象的处理方法还可以应用于服务器,也即主播端向服务器推送展示的直播流,服务器基于接收到的互动指令(主播触发或者直播间用户触发),将相应的互动内容展示在目标虚拟形象的设定区域,合成仅包括主播虚拟形象的直播流,推送给各个用户端进行观看。
在本申请中,提供了一种直播画面中主播形象的处理方法,本申请同时涉及一种直播画面中主播形象的处理装置,一种计算设备,以及一种计算机可读存储介质,在下面的实施例中逐一进行详细说明。
图1示出了根据本申请一实施例提供的一种直播画面中主播形象的处理方法的流程图,以应用于主播端为例进行说明,具体包括以下步骤:
步骤102:在虚拟形象功能开启的情况下,获取目标主播设定的目标虚拟形象。
具体的,虚拟形象功能是指在直播过程中使用虚拟形象遮挡主播真实形象的功能;目标主播为当前主播端对应的主播;目标虚拟形象是指目标主播在开播前设定的虚拟形象。其中,虚拟形象是指预先通过模型制作的、区别于真实主播的形象,针对需要遮挡的部位的不同,虚拟形象可以对应有虚拟头像、上半身虚拟形象、下半身虚拟形象、全身虚拟形象或通用虚拟形象等多种类型,如虚拟形象可以为全身卡通形象、多种形态的虚拟头像(卡通头像、小电视形态头像、水桶形态头像、水杯形态头像、球形头像、碗状头像……)、多种形态的虚拟服装(裙子、短裤、长裤、衬衣……)等。另外,虚拟形象可以基于二维模型或三维模型制作获得,也即虚拟形象可以为二维形象或三维形象。
实际应用中,目标主播在开播之前,主播端上可以显示有功能设置界面,该功能设置界面中包括有虚拟形象功能对应的开启控件,若主播打开该开启控件,则表示虚拟形象功能开启,后续主播开播后,在直播过程中可以使用目标主播设定的目标虚拟形象遮挡主播的真实形象;若主播未打开该开启控件,则表示虚拟形象功能未开启,后续在直播过程中直接展示主播的真实形象。
需要说明的是,主播端在检测到虚拟形象功能开启的情况下,说明目标主播不想在直播过程中露出真实形象,因而此时主播端可以获取目标主播在开播之前设定的目标虚拟形象,后续可以通过该虚拟形象遮挡目标主播的真实形象。
本实施例一个可选的实施方式中,在开播之前,主播端可以向目标主播展示虚拟形象的设置界面,以供目标主播设定自身的虚拟形象,也即获取目标主播设定的目标虚拟形象之前,还可以包括:
展示虚拟形象设置界面,其中,虚拟形象设置界面包括至少一个待选虚拟形象;
根据接收到的选择操作,从至少一个待选虚拟形象中确定目标主播设定的目标虚拟形象。
实际应用中,虚拟形象设置界面可以由虚拟形象功能的开启控件触发,也即目标主播在功能设置界面中开启虚拟形象功能后,可以触发展示虚拟形象设置界面,该虚拟形象设置界面可以覆盖功能设置界面,也可以以弹窗形式展示在功能设置界面中的某个区域,或者功能设置界面和虚拟形象设置界面可以为同一页面,在功能设置界面中虚拟形象功能未开启的情况下,至少一个待选虚拟形象不可操作(如显示为灰色,不可选择),在功能设置界面中虚拟形象功能开启的情况下,至少一个待选虚拟形象转换为可操作(如正常显示,可选择)。
需要说明的是,虚拟形象设置界面可以包括有至少一个待选虚拟形象,主播可以从各个待选虚拟形象中选择自己喜欢的虚拟形象,从而确定出目标主播预先设定的目标虚拟形象。如此,主播端可以预先向主播提供多种虚拟形象的选择,使得目标主播可以基于实际的直播场景和自身喜好进行选择,从而适应多种不同的直播场景,适应性较强,且提高了主播体验。
本实施例一个可选的实施方式中,在开播前,主播选定某个虚拟形象后,还可以对该虚拟形象进行自定义设置,也即根据接收到的选择操作,从至少一个待选虚拟形象中确定目标主播设定的目标虚拟形象,具体实现过程可以包括如下步骤:
将选择操作所指示的虚拟形象作为初始虚拟形象;
接收针对初始虚拟形象的设置指令,获取设置指令中的自定义参数;
根据自定义参数,对初始虚拟形象进行处理,获得目标虚拟形象。
具体的,设置指令是指主播发起的、针对选定的虚拟形象进行编辑的指令,该设置指令中可以携带有主播设置的自定义参数,该自定义参数是指针对选定的虚拟形象进行编辑的参数。
实际应用中,目标主播在虚拟形象设置界面中的各个虚拟形象中选择某个作为初始虚拟形象后,虚拟形象设置界面中可以展示针对该初始虚拟形象的多个设置快捷键,主播可以通过点击相应的设置快捷键,触发对应的设置指令。其中,该设置指令可以包括自定义内容设置指令、挂件设置指令、外观设置指令、五官设置指令中的至少一种,也即在主播选定初始虚拟形象后,主播端可以向主播提供自定义内容设置、挂件设置、外观设置、五官设置等功能,主播可以基于自身的需求,对初始虚拟形象进行设置。
示例的,设置指令为在初始虚拟形象的眼睛上添加眼镜挂件,该设置指令中携带的自定义参数为眼镜图片和初始虚拟形象中眼睛的位置,此时可以根据该自定义参数,在初始虚拟形象的眼睛处设置该眼镜,获得目标虚拟形象。
另外,获得目标虚拟形象后,可以进行预览,以观看效果,便于主播基于当前的效果,更改目标虚拟形象。
本申请实施例中,目标主播从各个待选虚拟形象中选择初始虚拟形象后,可以直接通过确认控件,将该初始虚拟形象作为其设定的目标虚拟形象。或者,目标主播从各个待选虚拟形象中选择初始虚拟形象后,还可以进一步针对选择的初始虚拟形象进行设置,基于自定义参数对初始虚拟形象进行处理,获得目标虚拟形象。如此,在开播之前提供了初始虚拟形象的设置功能,使得目标主播可以基于实际的直播场景和自身喜好进行选择,对提供的初始虚拟形象进行自定义编辑,提高了虚拟形象的可操作性,使得能够适应多种不同的直播场景,适应性较强,且提高了主播体验。
进一步地,目标主播在功能设置界面中开启虚拟形象功能后,还可以根据目标主播的主播标识(如主播账号),获取目标主播之前配置的历史虚拟形象,直接将该历史虚拟形象作为目标主播设定的目标虚拟形象。如此,可以自动获取目标主播之前设置的历史虚拟形象,避免了目标主播多次重复设置相同的虚拟形象,减少冗余操作,节省处理资源,提高主播体验。
实际应用中,目标主播还可以对展示的历史虚拟形象进行再编辑,修改历史虚拟形象的自定义参数(如去除/切换表情、挂件等);或者,目标主播也可以重新从各个待选虚拟形象中选择初始虚拟形象,并进行设置,本申请对此不进行限制。
步骤104:在采集到的直播画面中识别目标主播的设定遮挡部位,在设定遮挡部位处展示目标虚拟形象。
具体的,设定遮挡部位为目标主播不想露出真实形象的部位,如设定遮挡部位可以为头部、上半身、下半身或全身等。
实际应用中,虚拟形象可以为头部虚拟形象、上半身虚拟形象、下半身虚拟形象、全身虚拟形象或通用虚拟形象等多种类型,目标主播设定的目标虚拟形象的类型可以决定目标主播的设定遮挡部位。也即,主播端中预先存储有虚拟形象类型和遮挡部位之间的对应关系,一个虚拟形象类型可以对应至少一个遮挡部位,主播端获取到目标主播设定的目标虚拟形象后,可以确定该目标虚拟形象的类型,进而确定出对应的遮挡部位。
需要说明的是,若基于目标虚拟形象的类型确定出的遮挡部位为一个,则可以将该遮挡部位作为设定遮挡部位;若基于目标虚拟形象的类型确定出的遮挡部位为一个以上,则目标主播在设置该目标虚拟形象时,主播端还可以同步提醒主播设置有对应的遮挡部位,此时可以获取目标主播在开播前预先配置的设定遮挡部位。
示例的,假设目标虚拟形象为小电视形态的头套,该目标虚拟形象的类型为头部虚拟形象,进而可以确定出对应的设定遮挡部位为目标主播的头部。另外,假设目标虚拟形象为云朵,该目标虚拟形象的类型为通用虚拟形象,对应的遮挡部位为目标主播的任意部位(云朵可以用于遮挡目标主播的任意部位),因而在开播之前目标主播选择云朵作为目标虚拟形象时,会提醒主播配置对应的遮挡位置,假设目标主播配置为上半身,也即此时可以确定出设定遮挡位置为目标主播的上半身。
本申请实施例中,可以在采集到的直播画面中识别目标主播的设定遮挡部位,在设定遮挡部位处展示目标主播设定的目标虚拟形象,从而通过目标虚拟形象遮挡目标主播的设定遮挡部位,满足主播不想露出设定遮挡部位的真实形象的需求,提高主播体验。
本实施例一个可选的实施方式中,目标虚拟形象可以基于三维模型生成,即目标虚拟形象为三维形象,此时目标虚拟形象可以随着目标主播的转动而转动,也即在设定遮挡部位处展示目标虚拟形象,具体实现过程可以包括如下步骤:
识别直播画面中目标主播的设定遮挡部位的转动角度;
根据转动角度,确定目标虚拟形象的展示角度;
根据展示角度,在设定遮挡部位处展示目标虚拟形象。
需要说明的是,目标虚拟形象为三维形象时,目标虚拟形象为三维立体形象,此时目标虚拟形象可以随着目标主播的转动而转动。因而,实际应用中,可以识别直播画面中目标主播的设定遮挡部位的转动角度,然后根据该转动角度,确定目标虚拟形象的展示角度,根据该展示角度,在设定遮挡部位处展示目标虚拟形象。
具体实现时,可以直接将识别到的转动角度作为目标虚拟形象的展示角度,也可以基于预先设定的对应关系,确定识别到的转动角度对应的展示角度。
作为一种示例,设定遮挡部位为目标主播的头部,此时可以识别直播画面中目标主播的头部转动角度,假设识别到的头部转动角度为向左转动45度,直接将头部转动角度作为目标虚拟形象的展示角度,此时可以将目标虚拟形象也向左转动45度在该设定遮挡部位处进行展示。
本申请实施例中,目标虚拟形象可以为三维形象,在设定遮挡位置处展示目标虚拟形象时,目标虚拟形象可以随着目标主播的设定遮挡部位的转动而转动,使得直播过程中展示的目标虚拟形象更贴合目标主播的真实动作,提高真实性和展示效果,进而提高了用户体验。
本实施例一个可选的实施方式中,在采集到的直播画面中识别目标主播的设定遮挡部位之后,还可以包括:
若未识别到设定遮挡部位,则对直播画面进行模糊处理。
具体的,模糊处理可以为虚化直播画面、对直播画面进行打码等处理。
实际应用中,目标虚拟形象可以为虚拟头像,设定遮挡部位为目标主播的头部,当目标主播快速转头时,主播端可能无法识别到目标主播的头部,此时可以对当前帧的直播画面进行模糊处理。
本申请实施例中,在采集到的直播画面中识别目标主播的设定遮挡部位,若未识别到设定遮挡部位,说明设定遮挡部位跟踪失败,此时可以对直播画面进行模糊处理,避免目标主播的设定遮挡部位的真实形象暴露,保护目标主播的隐私,提高主播体验感。
步骤106:接收针对目标虚拟形象的互动指令,将互动指令对应的互动内容展示在目标虚拟形象的设定区域。
具体的,互动指令可以是指针对目标虚拟形象进行编辑、从而在直播中进行互动的指令,如互动指令可以包括直播间信息展示指令、自定义内容展示指令、挂件添加指令、外观切换指令、表情展示指令、五官设置指令、主播面部表情同步指令中的至少一种,也即在直播过程中主播端可以提供直播间信息展示、自定义内容展示、挂件添加、外观切换、表情展示、五官设置、主播面部表情同步等多种功能,以供针对目标虚拟形象进行互动。
需要说明的是,该互动指令可以由主播触发,也可以由观看直播的用户触发。一种可能的实现方式中,目标主播的主播端界面上可以显示有多个互动控件,目标主播可以触发某个互动控件,从而发起对应的互动指令,以将相应的互动内容展示在目标虚拟形象的设定区域,以和直播间的用户进行互动。
另一种可能的实现方式中,目标主播可以在直播过程中指定互动用户,或者配置直播间榜单的前K名用户作为互动用户,互动用户的观看界面中可以展示有互动控件,互动用户通过触发互动控件,可以发起互动指令,从而将相应的互动内容展示在目标虚拟形象的设定区域,以和目标主播以及直播间的其他观众互动。
又一种可能的实现方式中,直播过程中可以提供多个点播内容,直播间的各个用户可以通过购买某个点播内容触发互动指令,此时互动内容为用户购买的点播内容,可以将该点播内容展示在目标虚拟形象的设定区域,以和目标主播以及直播间的其他观众互动。
实际应用中,互动控件可以通过快捷键形式实现。具体的,主播端可以提供快捷键设置控件,按下后出现快捷键设置菜单,该菜单中为目前所绑定的快捷键,各个快捷键可以发起对应的互动指令,可以在这个列表中进行替换与删除,从而修改快捷键,全局快捷键监听打开状态下就算目标主播的焦点不在程序内,快捷键应该依旧有效。并且,如果设置的快捷键存在冲突,点下确定时可以弹出提示,重新设置。快捷键设置完毕后,直播过程中在设定遮挡部位处展示有目标虚拟形象,主播可以通过设置的快捷键,快速发起互动指令,或者快速指定具备互动权限的用户,又或者快速发布点播内容以供用户选择等。
另外,主播端除了提供快捷键设置功能外,还可以提供系统设置,如分辨率设置、背景设置等。
再者,如果目标虚拟形象的设定区域有互动内容未展示完毕,则该互动指令指示的互动内容可以排队等待,在未展示完的互动内容展示完毕后,再展示该互动指令指示的互动内容。
本申请实施例中,目标虚拟形象除了可以遮挡目标主播的真实形象之外,还可以提供互动功能,在目标虚拟形象的设定区域展示相应的互动内容,也即直播过程中目标虚拟形象上可以展示不同的互动内容,既丰富了目标虚拟形象的形态,又提高了目标虚拟形象的趣味性和互动性,保证了用户观看直播的体验。
本实施例一个可选的实施方式中,互动指令包括直播间信息展示指令,此时将互动指令对应的互动内容展示在目标虚拟形象的设定区域,具体实现过程可以包括如下步骤:
确定互动指令对应的目标信息类型和第一设定展示位置;
获取目标信息类型的直播间信息;
在目标虚拟形象的第一设定展示位置展示目标信息类型的直播间信息。
具体的,直播间信息可以为由直播间用户行为引发的信息,该直播间信息可以包括直播间相关的、多种不同类型的信息,如直播间信息可以包括直播间互动信息和/或直播间通知信息,直播间互动信息可以包括弹幕信息和礼物信息等,直播间通知信息可以包括关注信息、留言信息和游戏信息等。
实际应用中,目标信息类型是指想要添加在目标虚拟形象上的信息类型,第一设定展示位置可以为目标虚拟形象中添加互动内容的位置,如目标虚拟形象为虚拟头像时,第一设定展示位置可以为脸部区域;目标虚拟形象为上半身虚拟形象时,第一设定展示位置可以为胸前区域。
需要说明的是,互动指令为直播间信息展示指令时,该互动指令表示要把直播间信息展示在目标虚拟形象的设定区域,该互动指令中应该携带有要展示的直播间信息的目标信息类型以及在目标虚拟形象中的第一设定展示位置。具体的,快捷键接入直播间功能默认开启,直播界面中可以展示有“直播间信息”快捷键,主播或者具备互动权限的用户可以点击该快捷键,从弹起的参数列表中选择目标信息类型和第一设定展示位置,从而触发互动指令,主播端接收到该互动指令时,可以获取其中携带的目标信息类型和第一设定展示位置,然后主播端可以从服务器中获取目标信息类型的直播间信息,之后在目标虚拟形象的第一设定展示位置展示目标信息类型的直播间信息,合成直播流推送给服务器,以供用户观看。
另外,如果目标虚拟形象的第一设定展示位置当前展示有直播间信息,则该目标信息类型的直播间信息可以排队等待,在当前展示的直播间信息展示完毕后,再展示该目标信息类型的直播间信息。
本申请实施例中,可以在直播过程中,基于接收到的互动指令,在目标虚拟形象的第一设定展示位置展示目标信息类型的直播间信息,丰富了目标虚拟形象的形态,提高了目标虚拟形象的趣味性和互动性,保证了用户观看直播的体验。
本实施例一个可选的实施方式中,互动指令包括自定义内容展示指令,该自定义内容包括文字、图片和视频中的至少一种,此时将互动指令对应的互动内容展示在目标虚拟形象的设定区域,具体实现过程可以如下:
获取互动指令中携带的自定义内容和第二设定展示位置;
在目标虚拟形象的第二设定展示位置展示自定义内容。
其中,第二设定展示位置可以和第一设定展示位置相同或不同。一种可能的实现方式中,为了区别直播间信息和自定义内容,第一设定展示位置和第二设定展示位置可以不同,以目标虚拟形象为虚拟头像为例,第一设定展示位置可以为头顶区域,第二设定展示位置可以为脸部区域。另一种可能的实现方式中,第一设定展示位置和第二设定展示位置也可以设置的相同,如均为脸部区域。
需要说明的是,主播可以编辑自定义内容以展示在目标虚拟形象的第二设定展示位置,与直播间的用户进行互动。实际应用中,直播界面中可以展示有“自定义内容”快捷键,主播或者具备互动权限的用户可以点击该快捷键,在弹起的输入框中输入或上传自定义内容(若自定义内容为文字,则可以在输入框中输入;若自定义内容为图片或视频,则可以基于输入框中设置的上传控件,上传要展示的图片或视频),从而触发互动指令,主播端接收到该互动指令时,可以获取其中携带的自定义内容和第二设定展示位置,然后在目标虚拟形象的第二设定展示位置展示该自定义内容,合成直播流推送给服务器,以供用户观看。
另外,主播可以向用户提供点播内容,某个用户购买某个点播内容后,会触发相应的互动指令,此时互动指令中携带的自定义内容为该点播内容,主播端可以将该点播内容展示在目标虚拟形象的第二设定展示位置中,合成直播流推送给服务器,以供用户观看。
本申请实施例中,可以在直播过程中,基于接收到的互动指令,在目标虚拟形象的第二设定展示位置展示主播端的自定义内容,丰富了目标虚拟形象的形态,提高了目标虚拟形象的趣味性和互动性,保证了用户观看直播的体验。
本实施例一个可选的实施方式中,互动内容包括直播间信息和自定义内容,直播间信息对应第一设定展示位置,自定义内容对应第二设定展示位置;此时,将互动指令对应的互动内容展示在目标虚拟形象的设定区域,具体实现过程可以如下:
在第一设定展示位置和第二设定展示位置相同的情况下,根据设定展示规则,确定直播间信息和自定义内容的展示顺序;
根据展示顺序,依次在目标虚拟形象的第一设定展示位置展示直播间信息和自定义内容。
其中,设定展示规则是指直播间信息和自定义内容的展示策略,如设定展示规则可以为按照优先级从高至低依次展示直播间信息和自定义内容,也即需要预先为直播间信息和自定义内容分配优先级;或者设定展示规则还可以为按照时间先后顺序依次展示直播间信息和自定义内容,也即需要预先为直播间信息和自定义内容配置展示时间。
示例的,可以将直播间信息的优先级设置为高,将自定义内容的优先级设置为低,此时可以先在目标虚拟形象的第一设定展示位置展示直播间信息,直播间信息展示完毕后,再在第一设定位置展示自定义内容。
需要说明的是,在第一设定展示位置和第二设定展示位置相同的情况下,说明直播间信息和自定义内容要展示在目标虚拟形象的同一个位置,此时可以根据设定展示规则,确定直播间信息和自定义内容的展示顺序,根据展示顺序,依次在目标虚拟形象的第一设定展示位置展示直播间信息和自定义内容,避免了不同信息产生冲突,提高了互动效果。
本实施例一个可选的实施方式中,互动指令包括挂件添加指令,此时将互动指令对应的互动内容展示在目标虚拟形象的设定区域,具体实现过程可以包括如下步骤:
获取互动指令中携带的待添加挂件和挂件添加位置;
在目标虚拟形象的挂件添加位置处添加待添加挂件。
需要说明的是,可以结合热点、话题、主题、节日等制作各种挂件,以供主播或用户选择,主播可以自定义添加想要展示的挂件,并且针对目标虚拟形象的不同位置(如头顶、耳部、眼部)可以添加不同的挂件。因而,互动指令为挂件添加指令时,该互动指令表示要在目标虚拟形象的设定区域添加挂件,该互动指令中应该携带有待添加挂件和挂件添加位置。
实际应用中,直播界面中可以展示有“挂件添加”快捷键,主播或者具备互动权限的用户可以点击该快捷键,在弹起的挂件选择列表中选择所需添加的挂件,该挂件选择列表可以按照挂架的添加位置分类,当选择某个待添加挂件后,自动获取所属的位置分类作为挂件添加位置,将选择的待添加挂件以及对应的挂件添加位置携带在互动指令中,主播端接收到该互动指令时,可以获取其中携带的待添加挂件和挂件添加位置,然后在目标虚拟形象的挂件添加位置处添加该待添加挂件,合成直播流推送给服务器,以供用户观看。
其中,在目标虚拟形象的挂件添加位置处添加待添加挂件时,若该挂件添加位置处已经添加有其他挂件,此时可以先去除该其他挂件,然后再在该挂件添加位置处添加该待添加挂件。
本申请实施例中,可以在直播过程中,基于接收到的互动指令,在目标虚拟形象的挂件添加位置处添加待添加挂件,主播或者具备互动权限的用户可以自定义添加想要展示的挂件,让目标虚拟形象更加个性化,丰富了目标虚拟形象的形态,提高了目标虚拟形象的趣味性和互动性,保证了用户观看直播的体验。
本实施例一个可选的实施方式中,互动指令包括外观切换指令,此时将互动指令对应的互动内容展示在目标虚拟形象的设定区域,具体实现过程可以包括如下步骤:
获取互动指令中携带的待展示外观;
将目标虚拟形象的当前外观切换为待展示外观。
具体的,待展示外观是指切换后要展示的外观,互动指令中可以直接携带待展示外观的形象,也可以携带待展示外观的标识,后续主播端可以基于该标识查找对应的待展示外观的形象,以切换当前外观。
需要说明的是,直播界面中可以展示有“外观切换”快捷键,主播或者具备互动权限的用户可以点击该快捷键,在弹起的外观选择列表中选择切换后的待展示外观,该外观选择列表中包括的各个外观为本地内容,无需从服务器中下载,鼠标移动到某个外观上可以选择使用这个外观作为待展示外观,选择待展示外观后,自动关闭对应菜单,当前外观切换为该待展示外观。其中,在切换外观时,可以将目标虚拟形象内置的外观贴图美术素材切换为待展示外观的贴图素材。
本申请实施例中,可以在直播过程中,基于接收到的互动指令,将目标虚拟形象的当前外观切换为选择的待展示外观,主播或者具备互动权限的用户可以在直播过程中随时自定义目标虚拟形象的外观,让目标虚拟形象更加个性化,丰富了目标虚拟形象的形态,提高了目标虚拟形象的趣味性和互动性,保证了用户观看直播的体验。
本实施例一个可选的实施方式中,设定遮挡部位为头部,互动指令为设定表情展示指令时,将互动指令对应的互动内容展示在目标虚拟形象的设定区域,具体实现过程可以包括如下步骤:
获取互动指令中携带的待展示表情,其中,待展示表情为从服务器下载的表情列表中的任一个表情;
将目标虚拟形象的脸部区域中展示的当前表情替换为待展示表情。
具体的,表情列表中可以包括有官方预先设置的多个夸张或搞笑的表情以供选择,该表情可以包括二维平面表情,也可以包括三维立体表情,可以包括静态表情,也可以包括动态表情。
需要说明的是,设定遮挡部位为头部,互动指令为设定表情展示指令时,目标虚拟形象为虚拟头像,要在虚拟头像中展示表情,那么展示区域是固定的,即人脸区域,因而互动指令中仅需携带待展示表情,无需携带待展示位置。
实际应用中,直播界面中可以展示有“表情设定”快捷键,主播或者具备互动权限的用户可以点击该快捷键,在弹起的表情选择列表中选择所需设定的待展示表情,将选择的待展示表情携带在互动指令中,主播端接收到该互动指令时,可以获取其中携带的待展示表情,然后在目标虚拟形象的人脸位置处添加该待展示表情,合成直播流推送给服务器,以供用户观看。
其中,在目标虚拟形象的人脸位置处添加待展示表情时,若该人脸位置处已经添加有其他表情,此时可以先去除该其他表情,然后再在该人脸位置处添加该待展示表情。
本申请实施例中,可以在直播过程中,基于接收到的互动指令,在目标虚拟形象的人脸位置处添加待展示表情,主播或者具备互动权限的用户可以自定义添加想要展示的表情,让目标虚拟形象更加个性化,丰富了目标虚拟形象的形态,提高了目标虚拟形象的趣味性和互动性,保证了用户观看直播的体验。
本实施例一个可选的实施方式中,设定遮挡部位为头部,互动指令包括五官设置指令时,将互动指令对应的互动内容展示在目标虚拟形象的设定区域,具体实现过程可以包括如下步骤:
获取互动指令中携带的设定五官;
将目标虚拟形象的脸部区域中展示的当前五官替换为设定五官。
具体的,该设定五官为从本地存储或者服务器下载的五官列表中被选择的一组五官,五官列表中包括可供选择的多组五官,每组五官可以至少五官中的至少一个,如仅包括眼睛,或者包括眉毛、眼睛和嘴巴等。也即,可以预先设定多种五官形状,如圆形眼睛、长直眉毛、小嘴巴;方形眼睛、弯眉毛、微小嘴巴等。
需要说明的是,设定遮挡部位为头部,互动指令为五官设置指令时,目标虚拟形象为虚拟头像,要在虚拟头像中展示五官,那么展示区域是固定的,即人脸区域,因而互动指令中仅需携带设定五官,无需携带对应的待展示位置。
实际应用中,直播界面中可以展示有“五官设定”快捷键,主播或者具备互动权限的用户可以点击该快捷键,在弹起的五官选择列表中选择所需展示的五官,将选择的设定五官携带在互动指令中,主播端接收到该互动指令时,可以获取其中携带的设定五官,然后在目标虚拟形象的人脸位置处添加该设定五官,即选择设定五官后,会将目标虚拟形象的五官样式切换成对应的设定五官,切换后界面不会隐藏,可以来回切换点击,以查看效果,点击退出控件或者窗口左上缩小控件返回主界面。
其中,在目标虚拟形象的人脸位置处添加设定五官时,若该人脸位置处已经添加有其他五官,此时可以先去除该其他五官,然后再在该人脸位置处添加该设定五官。
本申请实施例中,可以在直播过程中,基于接收到的互动指令,在目标虚拟形象的人脸位置处添加设定五官,主播或者具备互动权限的用户可以自定义添加想要展示的五官,让目标虚拟形象更加个性化,丰富了目标虚拟形象的形态,提高了目标虚拟形象的趣味性和互动性,保证了用户观看直播的体验。
本实施例一个可选的实施方式中,互动指令还包括主播面部表情同步指令,此时将互动指令对应的互动内容展示在目标虚拟形象的设定区域,具体实现过程可以包括如下步骤:
识别直播画面中目标主播的当前面部表情;
根据当前面部表情,对目标虚拟形象的设定五官进行处理,在目标虚拟形象中展示处理后的五官。
需要说明的是,目标虚拟形象的人脸区域展示有设定的五官,展示的五官不会变化,为了使得展示的五官更加生动,可以通过面捕技术,识别直播画面中目标主播的当前面部表情,根据当前面部表情,对目标虚拟形象当前展示的设定五官进行处理,在目标虚拟形象中展示处理后的五官。也即是,目标虚拟形象默认可以同步真人的基础表情,如睁眼、闭眼、张嘴、闭嘴、微笑、大笑、生气等。
实际应用中,针对每种五官,可以预先设定有各种面部表情对应的同步表情,因而识别出直播画面中目标主播的当前面部表情后,可以获取目标虚拟形象中当前展示的五官,基于该当前展示的五官,确定对应的同步表情集合,从该同步表情集合中获取当前面部表情对应的同步表情,在目标虚拟形象的人脸位置处展示该同步表情。
另外,还可以针对各种面部表情设置对应的情绪内容,该情绪内容可以为文字、图片或视频,还可以包括相应的情绪音频,如面部表情为悲伤,对应的情绪内容可以为设置的悲伤文字、下雨图片、下雨视频以及悲伤的背景音乐。在识别到目标主播的当前面部表情,确定该当前面部表情对应的情绪内容,在目标虚拟形象中将当前展示的内容替换为该情绪内容。
示例的,假设包括两种五官,五官A:直眉毛、圆眼睛、直线型嘴巴,五官B:直眉毛、方眼睛、直线型嘴巴,每组五官对应的同步表情集合,该同步表情集合中可以包括睁眼、闭眼、张嘴、闭嘴、微笑、大笑、生气等对应的同步表情。
本申请实施例中,可以识别直播画面中目标主播的当前面部表情,根据当前面部表情,对目标虚拟形象的设定五官进行处理,在目标虚拟形象中展示处理后的五官。如此,目标虚拟形象的五官可以随着目标主播的面部表情变化而变化,使得直播过程中展示的目标虚拟形象更贴合目标主播的真实动作,提高真实性和展示效果,进而提高了用户体验。
本实施例一个可选的实施方式中,互动指令可以为多种不同的互动指令,各个不同的互动指令之间可能具备优先级的关系,因而在基于快捷键触发某些互动指令时,还需要判断当前是否存在优先级更高的互动指令正在执行,也即接收针对目标虚拟形象的互动指令,具体实现过程可以包括:
检测到设定触发操作的情况下,确定设定触发操作对应的目标互动指令;
确定目标虚拟形象的设定区域当前是否展示有目标内容,其中,目标内容为优先级高于目标互动指令的内容;
若是,则确定设定触发操作无效,不触发目标互动指令。
需要说明的是,设定触发操作可以为触发某个互动指令的操作,如点击快捷键列表中的某个快捷键的操作。
示例的,检测到点击了“自定义内容”快捷键或“表情设定”快捷键,若目标虚拟形象当前没有显示直播间信息,则确定触发对应的互动指令,否则按键无效。另外,互动指令为主播面部表情同步指令时,只有当没有直播间信息显示、且无自定义内容、设定表情展示时才可以被触发。
需要说明的是,检测到设定触发操作的情况下,可以先确定设定触发操作对应的目标互动指令,并确定目标虚拟形象的设定区域当前是否正在展示与该互动指令相冲突、且优先级更高的目标内容,若是,则可以确定该设定触发操作无效,不触发对应的目标互动指令,从而避免多种不同的互动指令产生冲突,保证互动性和用户体验。
本申请提供的直播画面中主播形象的处理方法,主播可以通过主播端预先设定遮挡自身形象的目标虚拟形象,在开播后,主播端若确定虚拟形象功能开启,则可以获取目标主播设定的目标虚拟形象,然后在采集到的直播画面中识别目标主播的设定遮挡部位,在设定遮挡部位处展示目标虚拟形象,在直播过程中通过目标虚拟形象遮挡目标主播的设定遮挡部位;在直播过程中,主播端还可以接收针对目标虚拟形象的互动指令,将互动指令对应的互动内容展示在目标虚拟形象的设定区域。这种情况下,目标虚拟形象除了可以遮挡目标主播的真实形象之外,还可以提供互动功能,在目标虚拟形象的设定区域展示相应的互动内容,也即直播过程中目标虚拟形象上可以展示不同的互动内容,既丰富了目标虚拟形象的形态,又提高了目标虚拟形象的趣味性和互动性,保证了用户观看直播的体验。
下述结合附图2,以本申请提供的直播画面中主播形象的处理方法在真实头像遮挡场景下的应用为例,对直播画面中主播形象的处理方法进行进一步说明。其中,图2示出了本申请一实施例提供的一种应用于真实头像遮挡场景下的直播画面中主播形象的处理方法的处理流程图,以应用于主播端为例进行说明,具体包括以下步骤:
步骤202:开播之前展示虚拟头像设置界面,其中,虚拟头像设置界面包括至少一个待选虚拟头像。
示例的,图3a是本申请一实施例提供的一种虚拟头像设置界面的示意图,如图3a所示,待选虚拟头像包括小电视形态头像、水桶形态头像和球形头像。
步骤204:将选择操作所指示的虚拟头像作为初始虚拟头像;接收针对初始虚拟头像的设置指令,获取设置指令中的自定义参数;根据自定义参数,对初始虚拟头像进行处理,获得目标虚拟头像。
其中,目标虚拟头像为三维头像。该目标虚拟头像用于在直播过程中遮挡目标主播的头部,也即直播画面中目标主播的头部始终被目标虚拟头像遮挡,避免目标主播的真实样貌暴露。
示例的,如图3a所示,假设主播选择了小电视形态头像,此时小电视形态头像下面可以弹出设置框,该设置框包括设置外观、设置五官、设置挂件、自定义内容等。假设用户点击了设置挂件,此时可以弹出多个待选挂件(耳朵挂件1、眼镜挂件1和下巴挂件1),如图3a所示,假设用户选择了耳朵挂件1,此时自定义参数为耳朵挂件1,在该小电视形态头像的头顶添加耳朵挂件1,即可获得目标虚拟头像,在预览区域中可以展示获得的目标虚拟头像,如果用户不满意,可以去除或切换该五官,或者继续进行其他设置。
步骤206:开播之后在头部遮挡功能开启的情况下,获取目标主播设定的目标虚拟头像。
步骤208:在采集到的直播画面中识别目标主播的头部,并识别直播画面中目标主播的头部转动角度;根据头部转动角度,确定目标虚拟头像的展示角度;根据展示角度,在目标主播的头部位置展示目标虚拟头像。
示例的,图3b是本申请一实施例提供的第一种直播画面的展示示意图,如图3b所示,目标主播的头部向左偏移,此时可以设置直播画面中小电视形态头像也向左偏移。
需要说明的是,若未识别到识别目标主播的头部,则对直播画面进行模糊处理。若识别到目标主播的头部,则使用目标虚拟头像遮挡目标主播的头部。
步骤210:接收针对目标虚拟头像的直播间信息展示指令,确定直播间信息展示指令对应的目标信息类型和第一设定展示位置;获取目标信息类型的直播间信息;在目标虚拟头像的第一设定展示位置展示目标信息类型的直播间信息。
示例的,图3c是本申请一实施例提供的第二种直播画面的展示示意图,如图3c所示,直播画面中展示有直播间信息快捷键,主播点击该直播间信息快捷键后,可以在弹出的类型列表中(弹幕信息、礼物信息、关注信息、留言信息和游戏信息)选择弹幕信息,并在候选展示位置(脸部区域和头顶区域)处选择脸部区域,之后可以在小电视形态头像的脸部区域实时展示当前获取到的“弹幕信息XXXX”。展示弹幕信息后,直播间信息快捷键弹出的列表可以自动收回,也可以不收回,便于目标主播随时切换,在主播点击除列表外的任意位置时再收回。
步骤212:接收针对目标虚拟头像的自定义内容展示指令,获取自定义内容展示指令中携带的自定义内容和第二设定展示位置;在目标虚拟头像的第二设定展示位置展示自定义内容。
其中,自定义内容包括文字、图片和视频中的至少一种。
示例的,图3d是本申请一实施例提供的第三种直播画面的展示示意图,如图3d所示,直播画面中展示有自定义内容快捷键,主播点击该自定义内容快捷键后,可以弹出的输入框,该输入框中可以输入文字,且可以通过上传控件上传图片或视频。假设用户输入了“感谢XXX”,并在候选展示位置处(脸部区域和头顶区域)选择头顶区域,之后可以在小电视形态头像的头顶区域展示自定义内容“感谢XXX”。展示自定义内容后,输入框可以自动收回,也可以不收回,便于目标主播随时切换内容,在主播点击除输入框外的任意位置时再收回。
步骤214:接收针对目标虚拟头像的挂件添加指令,获取挂件添加指令中携带的待添加挂件和挂件添加位置;在目标虚拟头像的挂件添加位置处添加待添加挂件。
示例的,图3e是本申请一实施例提供的第四种直播画面的展示示意图,如图3e所示,直播画面中展示有添加挂件快捷键,主播点击该添加挂件快捷键后,可以在弹出的挂件列表中(头部挂件、耳朵挂件、眼睛挂件和下巴挂件)选择眼睛挂件(眼镜挂件1和眼镜挂件2)中的眼镜挂件1,此时可以在小电视形态头像的眼睛上展示该眼镜挂件1。展示眼镜挂件1后,挂件列表可以自动收回,也可以不收回,便于目标主播随时切换,在主播点击除挂件列表外的任意位置时再收回。
步骤216:接收针对目标虚拟头像的外观切换指令,获取外观切换指令中携带的待展示外观;将目标虚拟头像的当前外观切换为待展示外观。
示例的,图3f是本申请一实施例提供的第五种直播画面的展示示意图,如图3f所示,直播画面中展示有外观切换快捷键,主播点击该外观切换快捷键后,可以在弹出的外观列表中(外观1和外观2)选择外观2(当前为外观1),此时可以将小电视形态头像的外观由外观1切换为外观2。切换外观后,外观列表可以自动收回,也可以不收回,便于目标主播随时切换,在主播点击除外观列表外的任意位置时再收回。
步骤218:接收针对目标虚拟头像的设定表情展示指令,获取设定表情展示指令中携带的待展示表情;将目标虚拟头像的脸部区域中展示的当前表情替换为待展示表情。
其中,待展示表情为从服务器下载的表情列表中的任一个表情。
示例的,图3g是本申请一实施例提供的第六种直播画面的展示示意图,如图3g所示,直播画面中展示有表情展示快捷键,主播点击该表情展示快捷键后,可以在弹出的表情列表中(表情1和表情2)选择表情1,此时可以将小电视形态头像的脸部区域当前展示的五官切换为表情1。切换表情后,表情列表可以自动收回,也可以不收回,便于目标主播随时切换,在主播点击除表情列表外的任意位置时再收回。
步骤220:接收针对目标虚拟头像的五官设置指令,获取五官设置指令中携带的设定五官;将目标虚拟头像的脸部区域中展示的当前五官替换为设定五官。
示例的,图3h是本申请一实施例提供的第七种直播画面的展示示意图,如图3h所示,直播画面中展示有五官设置快捷键,主播点击该五官设置快捷键后,可以在弹出的五官列表中(五官A和五官B)选择五官A,此时可以将小电视形态头像的脸部区域当前展示的五官(五官B)切换为五官A。五官切换后,五官列表可以自动收回,也可以不收回,便于目标主播随时切换,在主播点击除五官列表外的任意位置时再收回。
步骤222:接收针对目标虚拟头像的主播面部表情同步指令,识别直播画面中目标主播的当前面部表情;根据当前面部表情,对目标虚拟头像的设定五官进行处理,在目标虚拟头像中展示处理后的五官。
示例的,图3i是本申请一实施例提供的第八种直播画面的展示示意图,如图3i所示,直播画面中展示有主播的面部表情同步快捷键,主播点击该主播的面部表情同步快捷键后,可以识别直播画面中目标主播的当前面部表情,假设为哭泣,此时可以将当前五官A同步为对应的哭泣表情,如图3i。
另一示例,图3j是本申请一实施例提供的第九种直播画面的展示示意图,如图3j所示,直播画面中展示有主播面部表情同步快捷键,主播点击该主播面部表情同步快捷键后,可以识别直播画面中目标主播的当前面部表情,假设为哭泣,此时可以确定哭泣对应的情绪内容下雨图片,将小电视形态头像的当前五官A替换为对应的下雨图片。
需要说明的是,本申请实施例中对上述步骤210-步骤222的执行顺序并不进行限定,接收到哪个互动指令,则执行相应的步骤。
另外,直播过程中,直播画面上可以展示有预设的各个快捷键(直播间信息快捷键、自定义内容快捷键、添加挂件快捷键、外观切换快捷键、表情展示快捷键、五官设置快捷键、面部表情同步快捷键),主播或者具备互动权限的用户需要进行哪种互动,触发相应的快捷键,即可发起对应的互动指令,在目标虚拟头像中展示对应的互动内容,如图3b-3j所示。
本申请提供的直播画面中主播形象的处理方法,主播可以通过主播端预先设定遮挡自身头部的目标虚拟头像,在开播后主播端若确定头部遮挡功能开启,则可以获取目标主播设定的目标虚拟头像,然后在采集到的直播画面中识别目标主播的头部,在该头部展示目标虚拟头像,在直播过程中通过目标虚拟头像遮挡目标主播的真实头象;在直播过程中,主播端还可以接收针对目标虚拟头像的互动指令,将互动指令对应的互动内容展示在目标虚拟头像的设定区域。这种情况下,目标虚拟头像除了可以遮挡目标主播的真实头像之外,还可以提供互动功能,在目标虚拟头像的设定区域展示相应的互动内容,也即直播过程中目标虚拟头像上可以展示不同的互动内容,既丰富了目标虚拟头像的形态,又提高了目标虚拟头像的趣味性和互动性,保证了用户观看直播的体验。
与上述方法实施例相对应,本申请还提供了直播画面中主播形象的处理装置实施例,图4示出了本申请一实施例提供的一种直播画面中主播形象的处理装置的结构示意图,如图4所示,该装置包括:
获取模块402,被配置为在虚拟形象功能开启的情况下,获取目标主播设定的目标虚拟形象;
虚拟形象展示模块404,被配置为在采集到的直播画面中识别目标主播的设定遮挡部位,在设定遮挡部位处展示目标虚拟形象;
互动内容展示模块406,被配置为接收针对目标虚拟形象的互动指令,将互动指令对应的互动内容展示在目标虚拟形象的设定区域。
本申请提供的直播画面中主播形象的处理装置,主播可以通过主播端预先设定遮挡自身形象的目标虚拟形象,在开播后若确定虚拟形象功能开启,则可以获取目标主播设定的目标虚拟形象,然后在采集到的直播画面中识别目标主播的设定遮挡部位,在设定遮挡部位处展示目标虚拟形象,在直播过程中通过目标虚拟形象遮挡目标主播的设定遮挡部位;在直播过程中还可以接收针对目标虚拟形象的互动指令,将互动指令对应的互动内容展示在目标虚拟形象的设定区域。这种情况下,目标虚拟形象除了可以遮挡目标主播的真实形象之外,还可以提供互动功能,在目标虚拟形象的设定区域展示相应的互动内容,也即直播过程中目标虚拟形象上可以展示不同的互动内容,既丰富了目标虚拟形象的形态,又提高了目标虚拟形象的趣味性和互动性,保证了用户观看直播的体验。
可选地,该装置还包括处理模块,被配置为:
若未识别到设定遮挡部位,则对直播画面进行模糊处理。
可选地,互动指令包括直播间信息展示指令;互动内容展示模块406,进一步被配置为:
确定互动指令对应的目标信息类型和第一设定展示位置;
获取目标信息类型的直播间信息;
在目标虚拟形象的第一设定展示位置展示目标信息类型的直播间信息。
可选地,互动指令包括自定义内容展示指令,自定义内容包括文字、图片和视频中的至少一种;互动内容展示模块406,进一步被配置为:
获取互动指令中携带的自定义内容和第二设定展示位置;
在目标虚拟形象的第二设定展示位置展示自定义内容。
可选地,互动内容包括直播间信息和自定义内容,直播间信息对应第一设定展示位置,自定义内容对应第二设定展示位置;互动内容展示模块406,进一步被配置为:
在第一设定展示位置和第二设定展示位置相同的情况下,根据设定展示规则,确定直播间信息和自定义内容的展示顺序;
根据展示顺序,依次在目标虚拟形象的第一设定展示位置展示直播间信息和自定义内容。
可选地,互动指令包括挂件添加指令;互动内容展示模块406,进一步被配置为:
获取互动指令中携带的待添加挂件和挂件添加位置;
在目标虚拟形象的挂件添加位置处添加待添加挂件。
可选地,互动指令包括外观切换指令;互动内容展示模块406,进一步被配置为:
获取互动指令中携带的待展示外观;
将目标虚拟形象的当前外观切换为待展示外观。
可选地,设定遮挡部位为头部,互动指令包括设定表情展示指令;互动内容展示模块406,进一步被配置为:
获取互动指令中携带的待展示表情,其中,待展示表情为从服务器下载的表情列表中的任一个表情;
将目标虚拟形象的脸部区域中展示的当前表情替换为待展示表情。
可选地,设定遮挡部位为头部,互动指令包括五官设置指令;互动内容展示模块406,进一步被配置为:
获取互动指令中携带的设定五官;
将目标虚拟形象的脸部区域中展示的当前五官替换为设定五官。
可选地,互动指令还包括主播面部表情同步指令;互动内容展示模块406,进一步被配置为:
识别直播画面中目标主播的当前面部表情;
根据当前面部表情,对目标虚拟形象的设定五官进行处理,在目标虚拟形象中展示处理后的五官。
可选地,目标虚拟形象基于三维模型生成;虚拟形象展示模块404,进一步被配置为:
识别直播画面中目标主播的设定遮挡部位的转动角度;
根据转动角度,确定目标虚拟形象的展示角度;
根据展示角度,在设定遮挡部位处展示目标虚拟形象。
可选地,互动内容展示模块406,进一步被配置为:
检测到设定触发操作的情况下,确定设定触发操作对应的目标互动指令;
确定目标虚拟形象的设定区域当前是否展示有目标内容,其中,目标内容为优先级高于目标互动指令的内容;
若是,则确定设定触发操作无效,不触发目标互动指令。
可选地,该装置还包括设置模块,被配置为:
展示虚拟形象设置界面,其中,虚拟形象设置界面包括至少一个待选虚拟形象;
根据接收到的选择操作,从至少一个待选虚拟形象中确定目标主播设定的目标虚拟形象。
可选地,设置模块,进一步被配置为:
将选择操作所指示的虚拟形象作为初始虚拟形象;
接收针对初始虚拟形象的设置指令,获取设置指令中的自定义参数;
根据自定义参数,对初始虚拟形象进行处理,获得目标虚拟形象。
上述为本实施例的一种直播画面中主播形象的处理装置的示意性方案。需要说明的是,该直播画面中主播形象的处理装置的技术方案与上述的直播画面中主播形象的处理方法的技术方案属于同一构思,直播画面中主播形象的处理装置的技术方案未详细描述的细节内容,均可以参见上述直播画面中主播形象的处理方法的技术方案的描述。
图5示出了根据本申请一实施例提供的一种计算设备的结构框图。该计算设备500的部件包括但不限于存储器510和处理器520。处理器520与存储器 510通过总线530相连接,数据库550用于保存数据。
计算设备500还包括接入设备540,接入设备540使得计算设备500能够经由一个或多个网络560通信。这些网络的示例包括公用交换电话网(PSTN,Public SwitchedTelephone Network)、局域网(LAN,Local Area Network)、广域网 (WAN,Wide AreaNetwork)、个域网(PAN,Personal Area Network)或诸如因特网的通信网络的组合。接入设备540可以包括有线或无线的任何类型的网络接口(例如,网络接口卡(NIC,NetworkInterface Controller))中的一个或多个,诸如IEEE802.11无线局域网(WLAN,WirelessLocal Area Networks)无线接口、全球微波互联接入(Wi-MAX,WorldwideInteroperability for Microwave Access)接口、以太网接口、通用串行总线(USB,Universal Serial Bus)接口、蜂窝网络接口、蓝牙接口、近场通信(NFC,Near FieldCommunication)接口,等等。
在本申请的一个实施例中,计算设备500的上述部件以及图5中未示出的其他部件也可以彼此相连接,例如通过总线。应当理解,图5所示的计算设备结构框图仅仅是出于示例的目的,而不是对本申请范围的限制。本领域技术人员可以根据需要,增添或替换其他部件。
计算设备500可以是任何类型的静止或移动计算设备,包括移动计算机或移动计算设备(例如,平板计算机、个人数字助理、膝上型计算机、笔记本计算机、上网本等)、移动电话(例如,智能手机)、可佩戴的计算设备(例如,智能手表、智能眼镜等)或其他类型的移动设备,或者诸如台式计算机或PC的静止计算设备。计算设备500还可以是移动式或静止式的服务器。
其中,处理器520用于执行如下计算机可执行指令,以实现上述的直播画面中主播形象的处理方法的步骤。
上述为本实施例的一种计算设备的示意性方案。需要说明的是,该计算设备的技术方案与上述的直播画面中主播形象的处理方法的技术方案属于同一构思,计算设备的技术方案未详细描述的细节内容,均可以参见上述直播画面中主播形象的处理方法的技术方案的描述。
本申请一实施例还提供一种计算机可读存储介质,其存储有计算机可执行指令,该计算机可执行指令被处理器执行时以用于实现上述的直播画面中主播形象的处理方法的步骤。
上述为本实施例的一种计算机可读存储介质的示意性方案。需要说明的是,该存储介质的技术方案与上述的直播画面中主播形象的处理方法的技术方案属于同一构思,存储介质的技术方案未详细描述的细节内容,均可以参见上述直播画面中主播形象的处理方法的技术方案的描述。
上述对本申请特定实施例进行了描述。其它实施例在所附权利要求书的范围内。在一些情况下,在权利要求书中记载的动作或步骤可以按照不同于实施例中的顺序来执行并且仍然可以实现期望的结果。另外,在附图中描绘的过程不一定要求示出的特定顺序或者连续顺序才能实现期望的结果。在某些实施方式中,多任务处理和并行处理也是可以的或者可能是有利的。
计算机指令包括计算机程序代码,计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。计算机可读介质可以包括:能够携带计算机程序代码的任何实体或装置、记录介质、U盘、移动硬盘、磁碟、光盘、计算机存储器、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、电载波信号、电信信号以及软件分发介质等。
需要说明的是,对于前述的各方法实施例,为了简便描述,故将其都表述为一系列的动作组合,但是本领域技术人员应该知悉,本申请并不受所描述的动作顺序的限制,因为依据本申请,某些步骤可以采用其它顺序或者同时进行。其次,本领域技术人员也应该知悉,说明书中所描述的实施例均属于优选实施例,所涉及的动作和模块并不一定都是本申请所必须的。
在上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见其它实施例的相关描述。
以上公开的本申请优选实施例只是用于帮助阐述本申请。可选实施例并没有详尽叙述所有的细节,也不限制该发明仅为所述的具体实施方式。显然,根据本申请的内容,可作很多的修改和变化。本申请选取并具体描述这些实施例,是为了更好地解释本申请的原理和实际应用,从而使所属技术领域技术人员能很好地理解和利用本申请。本申请仅受权利要求书及其全部范围和等效物的限制。

Claims (17)

1.一种直播画面中主播形象的处理方法,其特征在于,包括:
在虚拟形象功能开启的情况下,获取目标主播设定的目标虚拟形象;
在采集到的直播画面中识别所述目标主播的设定遮挡部位,在所述设定遮挡部位处展示所述目标虚拟形象;
接收针对所述目标虚拟形象的互动指令,将所述互动指令对应的互动内容展示在所述目标虚拟形象的设定区域。
2.根据权利要求1所述的直播画面中主播形象的处理方法,其特征在于,所述在采集到的直播画面中识别所述目标主播的设定遮挡部位之后,还包括:
若未识别到所述设定遮挡部位,则对所述直播画面进行模糊处理。
3.根据权利要求1所述的直播画面中主播形象的处理方法,其特征在于,所述互动指令包括直播间信息展示指令;
所述将所述互动指令对应的互动内容展示在所述目标虚拟形象的设定区域,包括:
确定所述互动指令对应的目标信息类型和第一设定展示位置;
获取所述目标信息类型的直播间信息;
在所述目标虚拟形象的所述第一设定展示位置展示所述目标信息类型的直播间信息。
4.根据权利要求1所述的直播画面中主播形象的处理方法,其特征在于,所述互动指令包括自定义内容展示指令,所述自定义内容包括文字、图片和视频中的至少一种;
所述将所述互动指令对应的互动内容展示在所述目标虚拟形象的设定区域,包括:
获取所述互动指令中携带的自定义内容和第二设定展示位置;
在所述目标虚拟形象的所述第二设定展示位置展示所述自定义内容。
5.根据权利要求1所述的直播画面中主播形象的处理方法,其特征在于,所述互动内容包括直播间信息和自定义内容,所述直播间信息对应第一设定展示位置,所述自定义内容对应第二设定展示位置;
所述将所述互动指令对应的互动内容展示在所述目标虚拟形象的设定区域,包括:
在所述第一设定展示位置和所述第二设定展示位置相同的情况下,根据设定展示规则,确定所述直播间信息和所述自定义内容的展示顺序;
根据所述展示顺序,依次在所述目标虚拟形象的第一设定展示位置展示所述直播间信息和所述自定义内容。
6.根据权利要求1-5任一项所述的直播画面中主播形象的处理方法,其特征在于,所述互动指令包括挂件添加指令;
所述将所述互动指令对应的互动内容展示在所述目标虚拟形象的设定区域,包括:
获取所述互动指令中携带的待添加挂件和挂件添加位置;
在所述目标虚拟形象的所述挂件添加位置处添加所述待添加挂件。
7.根据权利要求1-5任一项所述的直播画面中主播形象的处理方法,其特征在于,所述互动指令包括外观切换指令;
所述将所述互动指令对应的互动内容展示在所述目标虚拟形象的设定区域,包括:
获取所述互动指令中携带的待展示外观;
将所述目标虚拟形象的当前外观切换为所述待展示外观。
8.根据权利要求1-5任一项所述的直播画面中主播形象的处理方法,其特征在于,所述设定遮挡部位为头部,所述互动指令包括设定表情展示指令;
所述将所述互动指令对应的互动内容展示在所述目标虚拟形象的设定区域,包括:
获取所述互动指令中携带的待展示表情,其中,所述待展示表情为从服务器下载的表情列表中的任一个表情;
将所述目标虚拟形象的脸部区域中展示的当前表情替换为所述待展示表情。
9.根据权利要求1-5任一项所述的直播画面中主播形象的处理方法,其特征在于,所述设定遮挡部位为头部,所述互动指令包括五官设置指令;
所述将所述互动指令对应的互动内容展示在所述目标虚拟形象的设定区域,包括:
获取所述互动指令中携带的设定五官;
将所述目标虚拟形象的脸部区域中展示的当前五官替换为所述设定五官。
10.根据权利要求9所述的直播画面中主播形象的处理方法,其特征在于,所述互动指令还包括主播面部表情同步指令;
所述将所述互动指令对应的互动内容展示在所述目标虚拟形象的设定区域,包括:
识别所述直播画面中所述目标主播的当前面部表情;
根据所述当前面部表情,对所述目标虚拟形象的所述设定五官进行处理,在所述目标虚拟形象中展示处理后的五官。
11.根据权利要求1-5任一项所述的直播画面中主播形象的处理方法,其特征在于,所述目标虚拟形象基于三维模型生成;
所述在所述设定遮挡部位处展示所述目标虚拟形象,包括:
识别所述直播画面中所述目标主播的设定遮挡部位的转动角度;
根据所述转动部角度,确定所述目标虚拟形象的展示角度;
根据所述展示角度,在所述设定遮挡部位处展示所述目标虚拟形象。
12.根据权利要求1-5任一项所述的直播画面中主播形象的处理方法,其特征在于,所述接收针对所述目标虚拟形象的互动指令,包括:
检测到设定触发操作的情况下,确定所述设定触发操作对应的目标互动指令;
确定所述目标虚拟形象的设定区域当前是否展示有目标内容,其中,所述目标内容为优先级高于所述目标互动指令的内容;
若是,则确定所述设定触发操作无效,不触发所述目标互动指令。
13.根据权利要求1-5任一项所述的直播画面中主播形象的处理方法,其特征在于,所述获取目标主播设定的目标虚拟形象之前,还包括:
展示虚拟形象设置界面,其中,所述虚拟形象设置界面包括至少一个待选虚拟形象;
根据接收到的选择操作,从所述至少一个待选虚拟形象中确定所述目标主播设定的目标虚拟形象。
14.根据权利要求13所述的直播画面中主播形象的处理方法,其特征在于,所述根据接收到的选择操作,从所述至少一个待选虚拟形象中确定所述目标主播设定的目标虚拟形象,包括:
将所述选择操作所指示的虚拟形象作为初始虚拟形象;
接收针对所述初始虚拟形象的设置指令,获取所述设置指令中的自定义参数;
根据所述自定义参数,对所述初始虚拟形象进行处理,获得所述目标虚拟形象。
15.一种直播画面中主播形象的处理装置,其特征在于,包括:
获取模块,被配置为在虚拟形象功能开启的情况下,获取目标主播设定的目标虚拟形象;
虚拟形象展示模块,被配置为在采集到的直播画面中识别所述目标主播的设定遮挡部位,在所述设定遮挡部位处展示所述目标虚拟形象;
互动内容展示模块,被配置为接收针对所述目标虚拟形象的互动指令,将所述互动指令对应的互动内容展示在所述目标虚拟形象的设定区域。
16.一种计算设备,其特征在于,包括:
存储器和处理器;
所述存储器用于存储计算机可执行指令,所述处理器用于执行所述计算机可执行指令,以实现上述权利要求1-14任一项所述的直播画面中主播形象的处理方法的步骤。
17.一种计算机可读存储介质,其特征在于,其存储有计算机可执行指令,该计算机可执行指令被处理器执行时实现上述权利要求1-14任一项所述的直播画面中主播形象的处理方法的步骤。
CN202210521408.8A 2022-05-13 2022-05-13 直播画面中主播形象的处理方法及装置 Pending CN117097914A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210521408.8A CN117097914A (zh) 2022-05-13 2022-05-13 直播画面中主播形象的处理方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210521408.8A CN117097914A (zh) 2022-05-13 2022-05-13 直播画面中主播形象的处理方法及装置

Publications (1)

Publication Number Publication Date
CN117097914A true CN117097914A (zh) 2023-11-21

Family

ID=88774071

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210521408.8A Pending CN117097914A (zh) 2022-05-13 2022-05-13 直播画面中主播形象的处理方法及装置

Country Status (1)

Country Link
CN (1) CN117097914A (zh)

Similar Documents

Publication Publication Date Title
US9747495B2 (en) Systems and methods for creating and distributing modifiable animated video messages
CN111541950B (zh) 表情的生成方法、装置、电子设备及存储介质
CN113287118A (zh) 用于面部再现的系统和方法
CN111935504A (zh) 视频制作方法、装置、设备及存储介质
CN109218630B (zh) 一种多媒体信息处理方法及装置、终端、存储介质
CN111314730A (zh) 视频直播的虚拟资源寻找方法、装置、设备及存储介质
US11394888B2 (en) Personalized videos
US11558561B2 (en) Personalized videos featuring multiple persons
CN112396679A (zh) 虚拟对象显示方法及装置、电子设备、介质
US20220385808A1 (en) Selfie setup and stock videos creation
CN113766168A (zh) 一种互动处理方法、装置、终端及介质
CN112905074A (zh) 交互界面展示方法、交互界面生成方法、装置及电子设备
CN113760161A (zh) 数据生成、图像处理方法、装置、设备及存储介质
CN111510769B (zh) 视频图像处理方法、装置及电子设备
CN114669059A (zh) 一种生成游戏角色的表情的方法
US20240163527A1 (en) Video generation method and apparatus, computer device, and storage medium
CN115362475A (zh) 用于默认自我形象的全局配置接口
CN117097914A (zh) 直播画面中主播形象的处理方法及装置
CN115562480A (zh) 用于增强现实的方法及装置
CN115619902A (zh) 一种图像处理方法、装置、设备及介质
CN114286077A (zh) 一种虚拟现实设备及vr场景图像显示方法
CN114241132B (zh) 场景内容展示控制方法、装置、计算机设备及存储介质
US20240080504A1 (en) Live stream processing method and apparatus
US20230326161A1 (en) Data processing method and apparatus, electronic device, computer-readable storage medium, and computer program product
CN115623227A (zh) 直播视频拍照的方法、装置、设备和计算机可读存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination