CN110933452B - 萌脸礼物显示方法、装置及存储介质 - Google Patents

萌脸礼物显示方法、装置及存储介质 Download PDF

Info

Publication number
CN110933452B
CN110933452B CN201911216392.4A CN201911216392A CN110933452B CN 110933452 B CN110933452 B CN 110933452B CN 201911216392 A CN201911216392 A CN 201911216392A CN 110933452 B CN110933452 B CN 110933452B
Authority
CN
China
Prior art keywords
face
image
angle
detection result
adjustment information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201911216392.4A
Other languages
English (en)
Other versions
CN110933452A (zh
Inventor
汤伯超
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangzhou Kugou Computer Technology Co Ltd
Original Assignee
Guangzhou Kugou Computer Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangzhou Kugou Computer Technology Co Ltd filed Critical Guangzhou Kugou Computer Technology Co Ltd
Priority to CN201911216392.4A priority Critical patent/CN110933452B/zh
Publication of CN110933452A publication Critical patent/CN110933452A/zh
Application granted granted Critical
Publication of CN110933452B publication Critical patent/CN110933452B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21Server components or server architectures
    • H04N21/218Source of audio or video content, e.g. local disk arrays
    • H04N21/2187Live feed
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213Monitoring of end-user related data
    • H04N21/44218Detecting physical presence or behaviour of the user, e.g. using sensors to detect if the user is leaving the room or changes his face expression during a TV program
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/478Supplemental services, e.g. displaying phone caller identification, shopping application
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/485End-user interface for client configuration

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Social Psychology (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Image Processing (AREA)
  • Image Analysis (AREA)

Abstract

本申请公开了一种萌脸礼物显示方法、装置及存储介质,涉及信息处理技术领域。在本申请实施例中,当第一图像的人脸状态检测结果不满足预设条件时,可以该人脸状态检测结果显示位姿调整信息,以提示主播调整自身位姿。之后,根据调整位姿后采集到的第二图像中的人脸图像来显示萌脸礼物,这样,萌脸礼物与人脸图像可以更贴合,显示效果更好。

Description

萌脸礼物显示方法、装置及存储介质
技术领域
本申请涉及信息处理技术领域,特别涉及一种萌脸礼物显示方法、装置及存储介质。
背景技术
当前,随着互联网技术的发展,在直播间中观看主播的直播视频逐渐成为人们日常生活中非常喜欢的活动。在观看直播的过程中,观众可以通过观众客户端向主播赠送萌脸礼物,例如,胡须、嘴唇、猫耳朵等。主播客户端在接收到观众赠送的萌脸礼物之后,可以结合采集到的主播的人脸图像来对萌脸礼物进行显示。
发明内容
本申请实施例提供了一种萌脸礼物显示方法、装置及计算机可读存储介质,可以使得萌脸礼物与人脸图像更为贴合,提升显示效果。所述技术方案如下:
第一方面,提供了一种萌脸礼物显示方法,所述方法包括:
根据当前采集的主播的第一图像,获取人脸状态检测结果;
如果根据所述人脸状态检测结果确定所述第一图像不满足预设条件,则根据所述人脸状态检测结果,显示或播放位姿调整信息,所述位姿调整信息用于提示所述主播调整当前位姿;
根据调整位姿后采集到的第二图像中的人脸图像显示萌脸礼物。
可选地,所述人脸状态检测结果包括人脸识别结果;
所述获取人脸状态检测结果之后,还包括:
如果所述人脸识别结果指示所述第一图像中不包含人脸图像,则确定所述第一图像不满足所述预设条件;
所述根据所述人脸状态检测结果,显示位姿调整信息,包括:
根据所述人脸识别结果,显示第一调整信息,所述第一调整信息用于提示所述主播所述第一图像中不包含人脸图像,以指示所述主播对当前位姿进行调整。
可选地,所述人脸状态检测结果包括人脸识别结果和人脸角度检测结果;
所述获取人脸状态检测结果之后,还包括:
如果所述人脸识别结果指示所述第一图像中包含人脸图像,则根据所述人脸角度检测结果判断人脸角度是否异常;
如果所述人脸角度异常,则确定所述第一图像不满足所述预设条件;
所述根据所述人脸状态检测结果,显示位姿调整信息,包括:
根据所述人脸角度检测结果,显示第二调整信息,所述第二调整信息用于提示所述主播调整人脸的方向。
可选地,所述人脸角度检测结果包括人脸俯仰角、人脸偏航角和人脸翻滚角;
所述根据所述人脸角度检测结果判断人脸角度是否异常,包括:
判断所述人脸俯仰角的绝对值、所述人脸偏航角的绝对值和所述人脸翻滚角的绝对值中是否存在大于预设角度阈值的绝对值;
如果所述人脸俯仰角的绝对值、所述人脸偏航角的绝对值和所述人脸翻滚角的绝对值中存在大于所述预设角度阈值的绝对值,则确定所述人脸角度异常。
可选地,所述人脸状态检测结果包括人脸识别结果和人脸位置检测结果;
所述获取人脸状态检测结果之后,还包括:
如果所述人脸识别结果指示所述第一图像中包含人脸图像,则根据所述人脸位置检测结果判断人脸位置是否异常;
如果所述人脸位置异常,则确定所述第一图像不满足所述预设条件;
所述根据所述人脸状态检测结果,显示位姿调整信息,包括:
根据所述人脸位置检测结果,显示第三调整信息,所述第三调整信息用于提示所述主播按照指定偏移量调整人脸位置。
可选地,所述人脸位置检测结果包括人脸指定部位在所述第一图像中的位置坐标;
所述根据所述人脸位置检测结果判断人脸位置是否异常,包括:
判断所述人脸指定部位在所述第一图像中的位置坐标是否处于预设图像区域内;
如果所述人脸指定部位在所述第一图像中的位置坐标不处于所述预设图像区域内,则确定所述人脸位置异常。
可选地,所述第二图像是指满足所述预设条件的图像,或者,所述第二图像是指根据所述第一图像显示或播放预设次数的位姿调整信息之后采集到的图像。
第二方面,提供了一种萌脸礼物显示装置,所述装置包括:
获取模块,用于根据当前采集的主播的第一图像,获取人脸状态检测结果;
提示模块,用于如果根据所述人脸状态检测结果确定所述第一图像不满足预设条件,则根据所述人脸状态检测结果,显示或播放位姿调整信息,所述位姿调整信息用于提示所述主播调整当前位姿;
显示模块,用于根据调整位姿后采集到的第二图像中的人脸图像显示萌脸礼物。
可选地,所述人脸状态检测结果包括人脸识别结果;
所述装置还包括:
第一确定模块,用于如果所述人脸识别结果指示所述第一图像中不包含人脸图像,则确定所述第一图像不满足所述预设条件;
所述显示模块具体用于:
根据所述人脸识别结果,显示第一调整信息,所述第一调整信息用于提示所述主播所述第一图像中不包含人脸图像,以指示所述主播对当前位姿进行调整。
可选地,所述人脸状态检测结果包括人脸识别结果和人脸角度检测结果;
所述装置还包括:
第一判断模块,用于如果所述人脸识别结果指示所述第一图像中包含人脸图像,则根据所述人脸角度检测结果判断人脸角度是否异常;
第二确定模块,用于如果所述人脸角度异常,则确定所述第一图像不满足所述预设条件;
所述显示模块具体用于:
根据所述人脸角度检测结果,显示第二调整信息,所述第二调整信息用于提示所述主播调整人脸的方向。
可选地,所述人脸角度检测结果包括人脸俯仰角、人脸偏航角和人脸翻滚角;
所述第一判断模块具体用于:
判断所述人脸俯仰角的绝对值、所述人脸偏航角的绝对值和所述人脸翻滚角的绝对值中是否存在大于预设角度阈值的绝对值;
如果所述人脸俯仰角的绝对值、所述人脸偏航角的绝对值和所述人脸翻滚角的绝对值中存在大于所述预设角度阈值的绝对值,则确定所述人脸角度异常。
可选地,所述人脸状态检测结果包括人脸识别结果和人脸位置检测结果;
所述装置还包括:
第二判断模块,用于如果所述人脸识别结果指示所述第一图像中包含人脸图像,则根据所述人脸位置检测结果判断人脸位置是否异常;
第三确定模块,用于如果所述人脸位置异常,则确定所述第一图像不满足所述预设条件;
所述显示模块具体用于:
根据所述人脸位置检测结果,显示第三调整信息,所述第三调整信息用于提示所述主播按照指定偏移量调整人脸位置。
可选地,所述人脸位置检测结果包括人脸指定部位在所述第一图像中的位置坐标;
所述第二判断模块具体用于:
判断所述人脸指定部位在所述第一图像中的位置坐标是否处于预设图像区域内;
如果所述人脸指定部位在所述第一图像中的位置坐标不处于所述预设图像区域内,则确定所述人脸位置异常。
可选地,所述第二图像是指满足所述预设条件的图像,或者,所述第二图像是指根据所述第一图像显示或播放预设次数的位姿调整信息之后采集到的图像。
第三方面,提供了一种萌脸礼物显示装置,所述装置包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的程序代码,所述处理器执行所述程序代码时实现上述第一方面所述的萌脸礼物显示方法。
第四方面,提供了一种计算机可读存储介质,所述计算机可读存储介质上存储有指令,所述指令被处理器执行时实现上述第一方面所述的任一项方法的步骤。
本申请实施例提供的技术方案带来的有益效果至少包括:
在本申请实施例中,当第一图像的人脸状态检测结果不满足预设条件时,可以该人脸状态检测结果显示位姿调整信息,以提示主播调整自身位姿。之后,根据调整位姿后采集到的第二图像中的人脸图像来显示萌脸礼物,这样,萌脸礼物与人脸图像可以更贴合,显示效果更好。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本申请实施例提供的一种萌脸礼物显示方法所涉及的系统架构图;
图2是本申请实施例提供的一种萌脸礼物显示方法的流程图;
图3是本申请实施例提供的一种人脸角度的示意图;
图4是本申请实施例提供的一种萌脸礼物显示装置的结构示意图;
图5是本申请实施例提供的一种用于显示萌脸礼物的终端的结构示意图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚,下面将结合附图对本发明实施方式作进一步地详细描述。
在对本申请实施例进行详细的解释说明之前,先对本申请实施例涉及的应用场景予以介绍。
当前,在直播过程中,观众在看到喜欢的主播或喜欢的表演的时候,可以通过观众客户端向主播赠送礼物。其中,礼物可以包括诸如虚拟游艇、虚拟鲜花之类的普通礼物,还可以包括诸如猫耳朵、嘴唇之类与脸部图像有关的萌脸礼物。主播客户端在接收到萌脸礼物之后,可以根据采集到的人脸图像来显示萌脸礼物。例如,当萌脸礼物为猫耳朵时,可以根据人脸图像所在的位置,将猫耳朵显示在头部合适的位置。其中,在显示萌脸礼物时,如果采集到的主播的图像中不包含有人脸,或者是采集主播的图像中人脸没有正对摄像头,或者是人脸不在图像中间区域,则根据人脸图像来显示萌脸礼物时,会影响萌脸礼物的显示效果。基于此,本申请实施例提出了一种萌脸礼物显示方法,可以根据人脸状态检测结果来生成位姿调整信息以提示主播进行位姿调整,之后,根据调整位姿后采集到的图像中的人脸图像来显示萌脸礼物,以此来改善萌脸礼物的显示效果。
接下来对本申请实施例提供的萌脸礼物显示方法所涉及的系统架构进行介绍。如图1所示,该系统中可以包括主播客户端101、服务器102和观众客户端103。其中,主播客户端101和观众客户端103可以通过服务器102进行通信。
需要说明的是,主播客户端101可以采集直播视频数据,并将采集到的直播视频数据发送至服务器102。服务器102可以将接收到的直播视频数据发送至与主播客户端对应的主播处于同一直播间的观众的观众客户端103。
观众客户端103在接收到服务器发送的直播视频数据之后,可以播放直播视频以供观众观看。观众在观看直播视频的过程中,可以通过观众客户端103向服务器102发送赠送请求,该赠送请求中可以携带有所要赠送的萌脸礼物的礼物标识。服务器102在接收到该赠送请求之后,可以向主播客户端101发送该礼物标识所标识的萌脸礼物。主播客户端101在接收到服务器102发送的萌脸礼物之后,可以通过本申请实施例提供的萌脸礼物显示方法来显示接收到的萌脸礼物。
其中,主播客户端和观众客户端可以为安装有直播应用的智能手机、平板电脑、笔记本电脑、台式电脑等终端。服务器102可以为一个单独的服务器,也可以是指服务器集群,本申请实施例对此不做具体限定。
接下来对本申请实施例提供的萌脸礼物显示方法进行详细的解释说明。
图2是本申请实施例提供的一种萌脸礼物显示方法的流程图。该方法可以应用于图1所示的系统中的主播客户端中,参见图2,该方法包括以下步骤:
步骤201:根据当前采集的主播的第一图像,获取人脸状态检测结果。
在本申请实施例中,主播客户端在开播并且打开摄像头后,即可以对实时采集到的图像进行人脸识别,从而得到每个时刻采集到的图像的人脸识别状态结果。
当主播客户端接收到萌脸礼物的显示命令时,可以根据当前采集的主播的第一图像,获取人脸状态检测结果。
其中,人脸状态检测结果可以包括人脸识别结果,除此之外,该人脸状态检测结果还可以包括人脸角度检测结果和人脸位置识别结果中的至少一种。
需要说明的是,人脸识别结果可以用于指示是否从相应图像中识别出了人脸,也即,用于指示相应图像中是否存在人脸。示例性地,人脸识别结果可以包括第一标志符或第二标志符。其中,第一标志符用于指示图像中不包含有人脸,第二标志符用于指示图像中包含人脸。
人脸角度检测结果可以包括人脸俯仰角、人脸偏航角和人脸翻滚角。其中,以头部中心为原点,以指向人的右手方向为X轴,以指向头顶的方向为Y轴,以指向人脸所朝向的方向为Z轴。人脸俯仰角是指头部以X轴为轴的旋转角度,人脸偏航角是指以Y轴为轴的旋转角度,人脸翻滚角是指以Z轴为轴的旋转角度。
图3是本申请实施例示出的人脸俯仰角、人脸偏航角和人脸翻滚角的示意图。如图3所示,头部以X轴为轴旋转的角度为人脸俯仰角,也即,仰头和低头所产生的角度为人脸俯仰角。头部以Y轴为轴的旋转角度为人脸偏航角,也即,头部左转或右转的角度为人脸偏航角。头部以Z轴为轴的转动角度为人脸翻滚角,也即,头部左歪或右歪的角度为人脸翻滚角。
另外,需要说明的是,在本申请实施例中,人脸俯仰角、人脸偏航角和人脸翻滚角可以均为带符号的角度。其中,人脸俯仰角为正表示头部低下,人脸俯仰角为负表示头部仰起。人脸偏航角为正表示头部右转,人脸偏航角为负表示头部左转。人脸翻滚角为正表示头部右歪,人脸翻滚角为负表示头部左外。
人脸位置检测结果可以包括人脸指定部位在图像中的位置坐标。其中,人脸指定部位可以是指鼻子、眼睛、嘴唇。当人脸指定部位为鼻子时,鼻子在图像中的位置坐标可以是指鼻子的鼻头在图像中的位置坐标,当人脸指定部位为眼睛时,眼睛在图像中的位置坐标可以是指左眼中心点和右眼中心点的连线的中点的位置坐标。当人脸指定部位为嘴唇时,嘴唇在图像中的位置坐标可以是指嘴唇的中心点在图像中的位置坐标。
步骤202:根据人脸状态检测结果判断第一图像是否满足预设条件。
在获取到第一图像的人脸状态检测结果之后,主播客户端可以根据该人脸状态检测结果来判断第一图像是否满足预设条件。
其中,主播客户端首先可以根据人脸识别结果判断第一图像中是否包含有人脸图像。如果第一图像中包含有人脸图像,则第一图像不满足预设条件。
需要说明的是,由前述步骤201中的介绍可知,人脸识别结果可以包括第一标志符或第二标志符。其中,第一标志符用于指示图像中不包含有人脸,第二标志符用于指示图像中包含人脸。基于此,如果第一图像的人脸识别结果包括第一标志符,则可以确定第一图像中包含有人脸图像。如果第一图像的人脸识别结果中包括第二标志符,则可以确定第一图像中不包含有人脸图像。
如果根据人脸识别结果确定第一图像中包含有人脸图像,且第一图像的人脸状态检测结果中包含有人脸角度检测结果但不包括人脸位置检测结果,则接下来主播客户端可以进一步的根据人脸角度检测结果来判断人脸角度是否异常。
其中,如前所述,人脸角度检测结果包括人脸俯仰角、人脸偏航角和人脸横滚角。并且,上述各个角度均为带符号的角度。基于此,主播客户端可以判断人脸俯仰角的绝对值、人脸偏航角的绝对值和人脸翻滚角的绝对值中是否存在大于预设角度阈值的角度的绝对值;如果人脸俯仰角的绝对值、人脸偏航角的绝对值和人脸翻滚角的绝对值中存在大于预设角度阈值的绝对值,则确定人脸角度异常。
需要说明的是,预设角度阈值可以为一个数值,也即是,可以将人脸角度检测结果包括的人脸俯仰角、人脸偏航角和人脸翻滚角中的每个角度的绝对值与该数值进行比较,如果存在大于该数值的绝对值,则说明人脸角度异常。
可选地,主播客户端中也可以存储有三个不同的角度阈值。其中,第一角度阈值是用于判定人脸俯仰角是否异常的阈值,第二角度阈值是用于判定人脸偏航角是否异常的阈值,第三角度阈值是用于判定人脸翻滚角是否异常的阈值。基于此,主播客户端可以将人脸角度检测结果中的各个角度的绝对值与对应的角度阈值进行比较,如果某个角度的绝对值大于对应的角度阈值,则可以确定人脸角度异常。
需要说明的是,上述用于判定人脸角度异常的角度阈值是指能够保证人脸清楚端正的显示的最大偏转角度。也即,如果上述三个人脸的角度超过角度阈值,则人脸中的某些部位将无法清楚显示或者是人脸倾斜较为严重不端正,影响显示效果。
如果根据人脸角度检测结果确定人脸角度异常,则主播客户端可以确定第一图像不满足预设条件。
可选地,如果根据人脸识别结果确定第一图像中包含有人脸图像,且第一图像的人脸状态检测结果中包括人脸位置检测结果但不包括人脸角度检测结果,则接下来主播客户端可以进一步的根据人脸位置检测结果来判断人脸位置是否异常。
其中,如前所述,人脸位置检测结果包括人脸指定部位在第一图像中的位置坐标。基于此,主播客户端可以判断人脸指定部位在第一图像中的位置坐标是否处于预设图像区域内,如果人脸指定部位在第一图像中的位置坐标不处于预设图像区域内,则可以确定人脸位置异常。
其中,预设图像区域可以是第一图像中位于中间部位的区域。并且,根据人脸指定部位的不同,预设图像区域可以不同。例如,当人脸指定部位为鼻子时,预设图像区域可以是以第一图像的中心为中心、指定长度和指定宽度的矩形区域。当人脸指定部位为眼睛时,则预设图像区域相较于人脸指定部位为鼻子时的区域偏上一点。当人脸指定部位为嘴唇时,则预设图像区域相较于人脸指定部位为鼻子时的区域偏下一点。在此基础上,如果人脸指定部位在第一图像中的位置坐标位于预设图像区域内,则可以保证人脸位于第一图像的画面中央,否则可以认为人脸偏离第一图像的画面中央,人脸位置异常。也即,通过将人脸指定部位在第一图像中的位置坐标与预设图像区域进行比较,可以判定人脸是否位于图像中央。
可选地,如果根据人脸识别结果确定第一图像中包含有人脸图像,且第一图像的人脸状态检测结果中同时包括人脸角度检测结果和人脸位置检测结果,则主播客户端可以参考前述方法,根据人脸角度检测结果判断人脸角度是否异常,并根据人脸位置检测结果来判断人脸位置是否异常。如果人脸角度异常和/或人脸位置异常,则主播客户端可以确定第一图像不满足预设条件。
步骤203:如果第一图像不满足预设条件,则根据人脸状态检测结果,显示或播放位姿调整信息。
由步骤202中的介绍可知,第一图像不满足预设条件可以包括第一图像中不包含有人脸图像、人脸角度异常、人脸位置异常以及人脸角度和人脸位置均异常四种情况。根据这四种不同的情况,主播客户端可以采用不同的方式来生成并显示位姿调整信息。
第一种情况:如果通过人脸识别结果确定第一图像中不包含人脸图像,从而确定得到第一图像不满足预设条件,则主播客户端可以显示或播放第一调整信息,第一调整信息用于提示主播第一图像中不包含人脸图像,进而指示主播对当前位姿进行调整。
也就是说,当根据人脸识别结果确定第一图像中不包含人脸图像时,可以通过第一调整信息来提示主播调整位姿,从而保证第一图像中能够包含有人脸图像,以便后续显示萌脸礼物。示例性地,第一调整信息可以为“当前图像中未检测到人脸,请调整位姿,以保证人脸位于图像区域内”。
其中,主播客户端在生成第一调整信息之后,可以直接将第一调整信息显示在当前的直播界面内,也可以根据第一调整信息生成语音信息,进而播放该语音信息来进行提示。
第二种情况:如果通过人脸角度检测结果确定人脸角度异常,从而确定得到第一图像不满足预设条件,则主播客户端可以根据人脸角度检测结果,显示或播放第二调整信息,第二调整信息用于提示主播调整人脸方向。
其中,由前述介绍可知,人脸角度检测结果包括人脸俯仰角、人脸偏航角和人脸翻滚角。如果这三个角度中的任一个角度的绝对值大于预设角度阈值或者是大于其自身对应的预设角度阈值,均可以认为人脸角度异常。基于此,主播客户端可以获取三个角度中绝对值大于预设角度阈值的异常角度,并获取异常角度中绝对值最大的最大角度值,根据该最大角度值生成第二调整信息。
示例性地,主播客户端可以根据最大角度值来确定人脸旋转的方向,进而根据该最大角度值生成用于提醒主播如何旋转人脸的第二调整信息,以提醒主播端正人脸姿态。
例如,当最大角度值为人脸俯仰角时,主播客户端可以根据人脸俯仰角的正负来确定主播此时是头部扬起过大角度还是头部低下过大角度。如果人脸俯仰角为负,则可以确定是头部扬起过大角度,此时,主播客户端可以生成用于提示主播低头的第二调整信息。示例性地,第二调整信息可以为“当前人脸角度异常,请低头”。如果人脸俯仰角为正,则可以确定是头部低下过大角度,此时,主播客户端可以生成用于提示主播抬头的第二调整信息。例如,第二调整信息可以为“当前人脸角度异常,请抬头”。
当最大角度值为人脸偏航角时,主播客户端可以根据人脸偏航角的正负来确定主播此时是头部右转角度过大还是左转角度过大。其中,如果人脸偏航角为正,则说明是头部右转角度过大,此时,主播客户端可以生成用于提示主播头部左转的第二调整信息。例如,第二调整信息可以为“当前人脸角度异常,请头部左转”。如果人脸偏航角为负,则说明头部左转角度过大,此时,主播客户端可以生成用于提示主播头部右转的第二调整信息。例如,第二调整信息可以为“当前人脸角度异常,请头部右转”。
当最大角度值为人脸翻滚角时,主播客户端可以根据人脸翻滚角的正负来确定主播此时是头部右歪角度过大还是左歪角度过大。其中,如果人脸翻滚角为正,则说明是头部右歪角度过大,此时,主播客户端可以生成用于提示主播头部向左倾斜的第二调整信息。例如,第二调整信息可以为“当前人脸角度异常,请头部向左倾斜”。如果人脸翻滚角为负,则说明头部左歪角度过大,此时,主播客户端可以生成用于提示主播头部向右倾斜的第二调整信息。例如,第二调整信息可以为“当前人脸角度异常,请头部向右倾斜”。
在根据最大角度值生成第二调整信息之后,主播客户端可以显示或播放该第二调整信息,以对主播进行提示。
可选地,在一种可能的实现方式中,主播客户端在获取三个角度中绝对值大于预设角度阈值的异常角度值之后,还可以根据异常角度值的绝对值按照从大到小的顺序对异常角度值进行排序,之后,主播客户端可以按照异常角度值的顺序,依次生成对应的提醒信息,然后依次显示或播放来提醒主播。在这种情况下,第二调整信息可以包括一个或多个提醒信息。
可选地,在一种可能的情况中,第二调整信息中还可以包括异常角度值,以提醒主播按照该异常角度值来调整位姿。例如,第二调整信息可以为“当前头部上扬角度为x,上扬角度过大,请低头”。
第三种情况:如果通过人脸位置检测结果确定人脸位置异常,从而确定得到第一图像不满足预设条件,则主播客户端可以根据人脸位置检测结果,显示或播放第三调整信息,第三调整信息用于提示主播按照指定偏移量调整人脸位置。
其中,由前述介绍可知,人脸位置检测结果包括人脸指定部位在第一图像中的位置坐标。如果人脸指定部位在第一图像中的位置坐标不位于预设图像区域,则可以认为人脸角度异常。基于此,主播客户端可以根据人脸指定部位在第一图像中的位置坐标确定人脸指定部位位于预设图像区域的哪个方向,将这个方向称为第一方向。与此同时,主播客户端还可以确定人脸指定部位的位置坐标与预设图像区域的中心点的水平距离和/或垂直距离,将该水平距离和/或垂直距离作为指定偏移量。之后,主播客户端可以根据水平距离和/或垂直距离生成用于指示主播向预设图像区域的第二方向移动的第三调整信息。例如,第三调整信息可以为“当前人脸位置异常,请向第二方向移动指定偏移量”。
示例性地,假设人脸指定部位位于预设图像区域的左方,且人脸指定部位到预设图像区域的中心点的水平距离为a,则主播客户端可以生成用于提示主播向右移动距离a的第三调整信息。
第四种情况:如果通过人脸角度检测结果确定人脸角度异常,通过人脸位置检测结果确定人脸位置异常,从而确定得到第一图像不满足预设条件,则主播客户端可以首先根据人脸角度检测结果生成第二调整信息,并显示或播放第二调整信息,之后,可以根据人脸位置检测结果生成第三调整信息,显示或播放第三调整信息。也即,在人脸角度和人脸位置均异常的情况下,可以优先提醒人脸角度异常。
其中,根据人脸角度检测结果生成第二调整信息的实现方式可以参考第二种情况,根据人脸位置检测结果生成第三调整信息的实现方式可以参考第三种情况。
步骤204:根据调整位姿后采集到的第二图像中的人脸图像显示萌脸礼物。
需要说明的是,主播客户端在显示或播放位姿调整信息之后,主播可以根据位姿调整信息的指示对自身的位置和/或姿态进行调整。相应地,主播客户端可以继续实时的对采集到的图像进行人脸识别,从而得到人脸状态检测结果,进而根据人脸状态检测结果继续通过前述步骤来检测采集到的图像是否满足预设条件,直到采集到的图像满足预设条件时,或者直到检测图像是否满足预设条件的次数达到预设次数时,或者直到显示或播放预设次数的位姿调整信息之后,可以将满足预设条件的图像或者是达到预设次数时采集到的图像作为调整位姿后的第二图像,并根据该调整位姿后的第二图像显示萌脸礼物。
其中,主播客户端根据调整位姿后的第二图像中的人脸图像来显示萌脸礼物的实现方式可以参考相关技术,本申请实施例在此不再赘述。
在本申请实施例中,当第一图像中未检测到人脸时,可以提示主播调整位姿,以便正常显示人脸,当第一图像中检测到人脸时,但是人脸角度和/或人脸位置异常时,可以根据人脸角度和/或人脸位置来提醒主播进行相应的位姿调整,以便主播可以及时调整人脸角度和位置,这样,根据调整位姿后采集到的第二图像中的人脸图像来显示萌脸礼物,可以使得萌脸礼物与人脸图像更为贴合,显示效果更好。
接下来对本申请实施例提供的萌脸礼物显示装置进行介绍。
图4是本申请实施例提供的一种萌脸礼物显示装置的流程图。该装置400包括:
获取模块401,用于根据当前采集的主播的第一图像,获取人脸状态检测结果;
提示模块402,用于如果根据人脸状态检测结果确定第一图像不满足预设条件,则根据人脸状态检测结果,显示或播放位姿调整信息,位姿调整信息用于提示主播调整当前位姿;
显示模块403,用于根据调整位姿后采集到的第二图像中的人脸图像显示萌脸礼物。
可选地,人脸状态检测结果包括人脸识别结果;
该装置400还包括:
第一确定模块,用于如果人脸识别结果指示第一图像中不包含人脸图像,则确定第一图像不满足预设条件;
显示模块403具体用于:
根据人脸识别结果,显示第一调整信息,第一调整信息用于提示主播第一图像中不包含人脸图像,以指示主播对当前位姿进行调整。
可选地,人脸状态检测结果包括人脸识别结果和人脸角度检测结果;
该装置400还包括:
第一判断模块,用于如果人脸识别结果指示第一图像中包含人脸图像,则根据人脸角度检测结果判断人脸角度是否异常;
第二确定模块,用于如果人脸角度异常,则确定第一图像不满足预设条件;
显示模块403具体用于:
根据人脸角度检测结果,显示第二调整信息,第二调整信息用于提示主播调整人脸的方向。
可选地,人脸角度检测结果包括人脸俯仰角、人脸偏航角和人脸翻滚角;
第一判断模块具体用于:
判断人脸俯仰角的绝对值、人脸偏航角的绝对值和人脸翻滚角的绝对值中是否存在大于预设角度阈值的绝对值;
如果人脸俯仰角的绝对值、人脸偏航角的绝对值和人脸翻滚角的绝对值中存在大于预设角度阈值的绝对值,则确定人脸角度异常。
可选地,人脸状态检测结果包括人脸识别结果和人脸位置检测结果;
该装置400还包括:
第二判断模块,用于如果人脸识别结果指示第一图像中包含人脸图像,则根据人脸位置检测结果判断人脸位置是否异常;
第三确定模块,用于如果人脸位置异常,则确定第一图像不满足预设条件;
显示模块403具体用于:
根据人脸位置检测结果,显示第三调整信息,第三调整信息用于提示主播按照指定偏移量调整人脸位置。
可选地,人脸位置检测结果包括人脸指定部位在第一图像中的位置坐标;
第二判断模块具体用于:
判断人脸指定部位在第一图像中的位置坐标是否处于预设图像区域内;
如果人脸指定部位在第一图像中的位置坐标不处于预设图像区域内,则确定人脸位置异常。
可选地,第二图像是指满足预设条件的图像,或者,第二图像是指根据第一图像显示或播放预设次数的位姿调整信息之后采集到的图像。
综上所述,在本申请实施例中,当第一图像中未检测到人脸时,可以提示主播调整位姿,以便正常显示人脸,当第一图像中检测到人脸时,但是人脸角度和/或人脸位置异常时,可以根据人脸角度和/或人脸位置来提醒主播进行相应的位姿调整,以便主播可以及时调整人脸角度和位置,这样,根据调整位姿后采集到的第二图像中的人脸图像来显示萌脸礼物,可以使得萌脸礼物与人脸图像更为贴合,显示效果更好。
图5是根据一示例性实施例示出的一种用于推送媒体内容的终端500的结构框图。其中,该终端500可以是笔记本电脑、台式电脑、智能手机或平板电脑等。
通常,终端500包括有:处理器501和存储器502。
处理器501可以包括一个或多个处理核心,比如4核心处理器、8核心处理器等。处理器501可以采用DSP(Digital Signal Processing,数字信号处理)、FPGA(Field-Programmable Gate Array,现场可编程门阵列)、PLA(Programmable Logic Array,可编程逻辑阵列)中的至少一种硬件形式来实现。处理器501也可以包括主处理器和协处理器,主处理器是用于对在唤醒状态下的数据进行处理的处理器,也称CPU(Central ProcessingUnit,中央处理器);协处理器是用于对在待机状态下的数据进行处理的低功耗处理器。在一些实施例中,处理器501可以在集成有GPU(Graphics Processing Unit,图像处理器),GPU用于负责显示屏所需要显示的内容的渲染和绘制。一些实施例中,处理器501还可以包括AI(Artificial Intelligence,人工智能)处理器,该AI处理器用于处理有关机器学习的计算操作。
存储器502可以包括一个或多个计算机可读存储介质,该计算机可读存储介质可以是非暂态的。存储器502还可包括高速随机存取存储器,以及非易失性存储器,比如一个或多个磁盘存储设备、闪存存储设备。在一些实施例中,存储器502中的非暂态的计算机可读存储介质用于存储至少一个指令,其中,,该至少一个指令用于被处理器501所执行以实现本申请中方法实施例提供的萌脸礼物显示方法。
在一些实施例中,终端500还可选包括有:外围设备接口503和至少一个外围设备。处理器501、存储器502和外围设备接口503之间可以通过总线或信号线相连。各个外围设备可以通过总线、信号线或电路板与外围设备接口503相连。具体地,外围设备包括:射频电路504、触摸显示屏505、摄像头506、音频电路507、定位组件508和电源509中的至少一种。
外围设备接口503可被用于将I/O(Input/Output,输入/输出)相关的至少一个外围设备连接到处理器501和存储器502。在一些实施例中,处理器501、存储器502和外围设备接口503被集成在同一芯片或电路板上;在一些其他实施例中,处理器501、存储器502和外围设备接口503中的任意一个或两个可以在单独的芯片或电路板上实现,本实施例对此不加以限定。
射频电路504用于接收和发射RF(Radio Frequency,射频)信号,也称电磁信号。射频电路504通过电磁信号与通信网络以及其他通信设备进行通信。射频电路504将电信号转换为电磁信号进行发送,或者,将接收到的电磁信号转换为电信号。可选地,射频电路504包括:天线系统、RF收发器、一个或多个放大器、调谐器、振荡器、数字信号处理器、编解码芯片组、用户身份模块卡等等。射频电路504可以通过至少一种无线通信协议来与其它终端进行通信。该无线通信协议包括但不限于:万维网、城域网、内联网、各代移动通信网络(2G、3G、4G及5G)、无线局域网和/或WiFi(Wireless Fidelity,无线保真)网络。在一些实施例中,射频电路504还可以包括NFC(Near Field Communication,近距离无线通信)有关的电路,本申请对此不加以限定。
显示屏505用于显示UI(User Interface,用户界面)。该UI可以包括图形、文本、图标、视频及其它们的任意组合。当显示屏505是触摸显示屏时,显示屏505还具有采集在显示屏505的表面或表面上方的触摸信号的能力。该触摸信号可以作为控制信号输入至处理器501进行处理。此时,显示屏505还可以用于提供虚拟按钮和/或虚拟键盘,也称软按钮和/或软键盘。在一些实施例中,显示屏505可以为一个,设置终端500的前面板;在另一些实施例中,显示屏505可以为至少两个,分别设置在终端500的不同表面或呈折叠设计;在再一些实施例中,显示屏505可以是柔性显示屏,设置在终端500的弯曲表面上或折叠面上。甚至,显示屏505还可以设置成非矩形的不规则图形,也即异形屏。显示屏505可以采用LCD(LiquidCrystal Display,液晶显示屏)、OLED(Organic Light-Emitting Diode,有机发光二极管)等材质制备。需要说明的是,在本申请实施例中,当该终端500为横屏终端时,该终端500的显示屏的宽高比大于1,例如,该终端500的显示屏的宽高比可以为16:9或4:3。当该终端500为竖屏终端时,则该终端500的显示屏的宽高比小于1,例如,该终端500的显示屏的宽高比可以为9:18或3:4等。
摄像头组件506用于采集图像或视频。可选地,摄像头组件506包括前置摄像头和后置摄像头。通常,前置摄像头设置在终端的前面板,后置摄像头设置在终端的背面。在一些实施例中,后置摄像头为至少两个,分别为主摄像头、景深摄像头、广角摄像头、长焦摄像头中的任意一种,以实现主摄像头和景深摄像头融合实现背景虚化功能、主摄像头和广角摄像头融合实现全景拍摄以及VR(Virtual Reality,虚拟现实)拍摄功能或者其它融合拍摄功能。在一些实施例中,摄像头组件506还可以包括闪光灯。闪光灯可以是单色温闪光灯,也可以是双色温闪光灯。双色温闪光灯是指暖光闪光灯和冷光闪光灯的组合,可以用于不同色温下的光线补偿。
音频电路507可以包括麦克风和扬声器。麦克风用于采集用户及环境的声波,并将声波转换为电信号输入至处理器501进行处理,或者输入至射频电路504以实现语音通信。出于立体声采集或降噪的目的,麦克风可以为多个,分别设置在终端500的不同部位。麦克风还可以是阵列麦克风或全向采集型麦克风。扬声器则用于将来自处理器501或射频电路504的电信号转换为声波。扬声器可以是传统的薄膜扬声器,也可以是压电陶瓷扬声器。当扬声器是压电陶瓷扬声器时,不仅可以将电信号转换为人类可听见的声波,也可以将电信号转换为人类听不见的声波以进行测距等用途。在一些实施例中,音频电路507还可以包括耳机插孔。
定位组件508用于定位终端500的当前地理位置,以实现导航或LBS(LocationBased Service,基于位置的服务)。定位组件508可以是基于美国的GPS(GlobalPositioning System,全球定位系统)、中国的北斗系统或欧盟的伽利略系统的定位组件。
电源509用于为终端500中的各个组件进行供电。电源509可以是交流电、直流电、一次性电池或可充电电池。当电源509包括可充电电池时,该可充电电池可以是有线充电电池或无线充电电池。有线充电电池是通过有线线路充电的电池,无线充电电池是通过无线线圈充电的电池。该可充电电池还可以用于支持快充技术。
在一些实施例中,终端500还包括有一个或多个传感器66。该一个或多个传感器66包括但不限于:加速度传感器511、陀螺仪传感器512、压力传感器513、指纹传感器514、光学传感器515以及接近传感器516。
加速度传感器511可以检测以终端500建立的坐标系的三个坐标轴上的加速度大小。比如,加速度传感器511可以用于检测重力加速度在三个坐标轴上的分量。处理器501可以根据加速度传感器511采集的重力加速度信号,控制触摸显示屏505以横向视图或纵向视图进行用户界面的显示。加速度传感器511还可以用于游戏或者用户的运动数据的采集。
陀螺仪传感器512可以检测终端500的机体方向及转动角度,陀螺仪传感器512可以与加速度传感器511协同采集用户对终端500的3D动作。处理器501根据陀螺仪传感器512采集的数据,可以实现如下功能:动作感应(比如根据用户的倾斜操作来改变UI)、拍摄时的图像稳定、游戏控制以及惯性导航。
压力传感器513可以设置在终端500的侧边框和/或触摸显示屏505的下层。当压力传感器513设置在终端500的侧边框时,可以检测用户对终端500的握持信号,由处理器501根据压力传感器513采集的握持信号进行左右手识别或快捷操作。当压力传感器513设置在触摸显示屏505的下层时,由处理器501根据用户对触摸显示屏505的压力操作,实现对UI界面上的可操作性控件进行控制。可操作性控件包括按钮控件、滚动条控件、图标控件、菜单控件中的至少一种。
指纹传感器514用于采集用户的指纹,由处理器501根据指纹传感器514采集到的指纹识别用户的身份,或者,由指纹传感器514根据采集到的指纹识别用户的身份。在识别出用户的身份为可信身份时,由处理器501授权该用户执行相关的敏感操作,该敏感操作包括解锁屏幕、查看加密信息、下载软件、支付及更改设置等。指纹传感器514可以被设置终端500的正面、背面或侧面。当终端500上设置有物理按键或厂商Logo时,指纹传感器514可以与物理按键或厂商Logo集成在一起。
光学传感器515用于采集环境光强度。在一个实施例中,处理器501可以根据光学传感器515采集的环境光强度,控制触摸显示屏505的显示亮度。具体地,当环境光强度较高时,调高触摸显示屏505的显示亮度;当环境光强度较低时,调低触摸显示屏505的显示亮度。在另一个实施例中,处理器501还可以根据光学传感器515采集的环境光强度,动态调整摄像头组件506的拍摄参数。
接近传感器516,也称距离传感器,通常设置在终端500的前面板。接近传感器516用于采集用户与终端500的正面之间的距离。在一个实施例中,当接近传感器516检测到用户与终端500的正面之间的距离逐渐变小时,由处理器501控制触摸显示屏505从亮屏状态切换为息屏状态;当接近传感器516检测到用户与终端500的正面之间的距离逐渐变大时,由处理器501控制触摸显示屏505从息屏状态切换为亮屏状态。
也即是,本申请实施例不仅提供了一种终端,包括处理器和用于存储处理器可执行指令的存储器,其中,处理器被配置为执行图2所示的萌脸礼物显示方法,而且,本申请实施例还提供了一种计算机可读存储介质,该存储介质内存储有计算机程序,该计算机程序被处理器执行时可以实现图2所示的萌脸礼物显示方法。
本申请实施例还提供了一种包含指令的计算机程序产品,当其在计算机上运行时,使得计算机执行上述图2所示实施例提供的萌脸礼物显示方法。
本领域普通技术人员可以理解实现上述实施例的全部或部分步骤可以通过硬件来完成,也可以通过程序来指令相关的硬件完成,所述的程序可以存储于一种计算机可读存储介质中,上述提到的存储介质可以是只读存储器,磁盘或光盘等。
以上所述仅为本申请的可选实施例,并不用以限制本申请,凡在本申请的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本申请的保护范围之内。

Claims (13)

1.一种萌脸礼物显示方法,其特征在于,所述方法包括:
根据当前采集的主播的第一图像,获取人脸状态检测结果,所述人脸状态检测结果包括人脸识别结果和人脸位置检测结果;
如果所述人脸识别结果指示所述第一图像中包含人脸图像,则根据所述人脸位置检测结果判断人脸位置是否异常;
如果所述人脸位置异常,则确定所述第一图像不满足预设条件;
根据所述人脸位置检测结果,显示第三调整信息,所述第三调整信息用于提示所述主播按照指定偏移量调整人脸位置;
根据调整位姿后采集到的第二图像中的人脸图像显示萌脸礼物。
2.根据权利要求1所述的方法,其特征在于,所述获取人脸状态检测结果之后,还包括:
如果所述人脸识别结果指示所述第一图像中不包含人脸图像,则确定所述第一图像不满足所述预设条件;
所述根据所述人脸状态检测结果,显示位姿调整信息,包括:
根据所述人脸识别结果,显示第一调整信息,所述第一调整信息用于提示所述主播所述第一图像中不包含人脸图像,以指示所述主播对当前位姿进行调整。
3.根据权利要求1所述的方法,其特征在于,所述人脸状态检测结果还包括人脸角度检测结果;
所述获取人脸状态检测结果之后,还包括:
如果所述人脸识别结果指示所述第一图像中包含人脸图像,则根据所述人脸角度检测结果判断人脸角度是否异常;
如果所述人脸角度异常,则确定所述第一图像不满足所述预设条件;
所述根据所述人脸状态检测结果,显示位姿调整信息,包括:
根据所述人脸角度检测结果,显示第二调整信息,所述第二调整信息用于提示所述主播调整人脸的方向。
4.根据权利要求3所述的方法,其特征在于,所述人脸角度检测结果包括人脸俯仰角、人脸偏航角和人脸翻滚角;
所述根据所述人脸角度检测结果判断人脸角度是否异常,包括:
判断所述人脸俯仰角的绝对值、所述人脸偏航角的绝对值和所述人脸翻滚角的绝对值中是否存在大于预设角度阈值的绝对值;
如果所述人脸俯仰角的绝对值、所述人脸偏航角的绝对值和所述人脸翻滚角的绝对值中存在大于所述预设角度阈值的绝对值,则确定所述人脸角度异常。
5.根据权利要求1所述的方法,其特征在于,所述人脸位置检测结果包括人脸指定部位在所述第一图像中的位置坐标;
所述根据所述人脸位置检测结果判断人脸位置是否异常,包括:
判断所述人脸指定部位在所述第一图像中的位置坐标是否处于预设图像区域内;
如果所述人脸指定部位在所述第一图像中的位置坐标不处于所述预设图像区域内,则确定所述人脸位置异常。
6.根据权利要求1-5任一所述的方法,其特征在于,所述第二图像是指满足所述预设条件的图像,或者,所述第二图像是指根据所述第一图像显示或播放预设次数的位姿调整信息之后采集到的图像。
7.一种萌脸礼物显示装置,其特征在于,所述装置包括:
获取模块,用于根据当前采集的主播的第一图像,获取人脸状态检测结果,所述人脸状态检测结果包括人脸识别结果和人脸位置检测结果;
提示模块,用于如果根据所述人脸状态检测结果确定所述第一图像不满足预设条件,则根据所述人脸状态检测结果,显示或播放位姿调整信息,所述位姿调整信息用于提示所述主播调整当前位姿;
显示模块,用于根据调整位姿后采集到的第二图像中的人脸图像显示萌脸礼物,
其中,所述装置还包括:
第二判断模块,用于如果所述人脸识别结果指示所述第一图像中包含人脸图像,则根据所述人脸位置检测结果判断人脸位置是否异常;
第三确定模块,用于如果所述人脸位置异常,则确定所述第一图像不满足所述预设条件;
所述显示模块具体用于:
根据所述人脸位置检测结果,显示第三调整信息,所述第三调整信息用于提示所述主播按照指定偏移量调整人脸位置。
8.根据权利要求7所述的装置,其特征在于,所述装置还包括:
第一确定模块,用于如果所述人脸识别结果指示所述第一图像中不包含人脸图像,则确定所述第一图像不满足所述预设条件;
所述显示模块具体用于:
根据所述人脸识别结果,显示第一调整信息,所述第一调整信息用于提示所述主播所述第一图像中不包含人脸图像,以指示所述主播对当前位姿进行调整。
9.根据权利要求7所述的装置,其特征在于,所述人脸状态检测结果包括人脸识别结果和人脸角度检测结果;
所述装置还包括:
第一判断模块,用于如果所述人脸识别结果指示所述第一图像中包含人脸图像,则根据所述人脸角度检测结果判断人脸角度是否异常;
第二确定模块,用于如果所述人脸角度异常,则确定所述第一图像不满足所述预设条件;
所述显示模块具体用于:
根据所述人脸角度检测结果,显示第二调整信息,所述第二调整信息用于提示所述主播调整人脸的方向。
10.根据权利要求9所述的装置,其特征在于,所述人脸角度检测结果包括人脸俯仰角、人脸偏航角和人脸翻滚角;
所述第一判断模块具体用于:
判断所述人脸俯仰角的绝对值、所述人脸偏航角的绝对值和所述人脸翻滚角的绝对值中是否存在大于预设角度阈值的绝对值;
如果所述人脸俯仰角的绝对值、所述人脸偏航角的绝对值和所述人脸翻滚角的绝对值中存在大于所述预设角度阈值的绝对值,则确定所述人脸角度异常。
11.根据权利要求7所述的装置,其特征在于,所述人脸位置检测结果包括人脸指定部位在所述第一图像中的位置坐标;
所述第二判断模块具体用于:
判断所述人脸指定部位在所述第一图像中的位置坐标是否处于预设图像区域内;
如果所述人脸指定部位在所述第一图像中的位置坐标不处于所述预设图像区域内,则确定所述人脸位置异常。
12.根据权利要求7-11任一所述的装置,其特征在于,所述第二图像是指满足所述预设条件的图像,或者,所述第二图像是指根据所述第一图像显示或播放预设次数的位姿调整信息之后采集到的图像。
13.一种计算机可读存储介质,其特征在于,所述存储介质上存储有指令,其特征在于,所述指令被处理器执行时实现权利要求1-6所述的任一项方法的步骤。
CN201911216392.4A 2019-12-02 2019-12-02 萌脸礼物显示方法、装置及存储介质 Active CN110933452B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201911216392.4A CN110933452B (zh) 2019-12-02 2019-12-02 萌脸礼物显示方法、装置及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911216392.4A CN110933452B (zh) 2019-12-02 2019-12-02 萌脸礼物显示方法、装置及存储介质

Publications (2)

Publication Number Publication Date
CN110933452A CN110933452A (zh) 2020-03-27
CN110933452B true CN110933452B (zh) 2021-12-03

Family

ID=69847196

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911216392.4A Active CN110933452B (zh) 2019-12-02 2019-12-02 萌脸礼物显示方法、装置及存储介质

Country Status (1)

Country Link
CN (1) CN110933452B (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111683263B (zh) * 2020-06-08 2022-06-03 腾讯科技(深圳)有限公司 直播指导方法、装置、设备及计算机可读存储介质
CN112198963A (zh) * 2020-10-19 2021-01-08 深圳市太和世纪文化创意有限公司 一种沉浸式隧道型多媒体交互展示方法、设备及存储介质
CN113453034B (zh) * 2021-06-29 2023-07-25 上海商汤智能科技有限公司 数据展示方法、装置、电子设备以及计算机可读存储介质
CN113507621A (zh) * 2021-07-07 2021-10-15 上海商汤智能科技有限公司 直播方法、装置、系统、计算机设备以及存储介质
CN114827730B (zh) * 2022-04-19 2024-05-31 咪咕文化科技有限公司 视频封面选取方法、装置、设备及存储介质

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104182741A (zh) * 2014-09-15 2014-12-03 联想(北京)有限公司 一种图像采集提示方法、装置及电子设备
CN106231434A (zh) * 2016-07-25 2016-12-14 武汉斗鱼网络科技有限公司 一种基于人脸检测的直播互动特效实现方法及系统
CN106341720A (zh) * 2016-08-18 2017-01-18 北京奇虎科技有限公司 一种在视频直播中添加脸部特效的方法及装置
CN107277632A (zh) * 2017-05-12 2017-10-20 武汉斗鱼网络科技有限公司 一种展示虚拟礼物动画的方法和设备
WO2019052292A1 (en) * 2017-09-12 2019-03-21 Guangdong Oppo Mobile Telecommunications Corp., Ltd. UNLOCKING CONTROL METHODS AND RELATED PRODUCTS
CN109961055A (zh) * 2019-03-29 2019-07-02 广州市百果园信息技术有限公司 人脸关键点检测方法、装置、设备及存储介质
CN110191369A (zh) * 2019-06-06 2019-08-30 广州酷狗计算机科技有限公司 图像截取方法、装置、设备及存储介质

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106658035A (zh) * 2016-12-09 2017-05-10 武汉斗鱼网络科技有限公司 一种特效礼物动态展示方法及装置
CN106774936B (zh) * 2017-01-10 2020-01-07 上海木木机器人技术有限公司 人机交互方法及系统
CN113177437A (zh) * 2017-06-13 2021-07-27 阿里巴巴集团控股有限公司 一种人脸识别方法和装置
CN109151540B (zh) * 2017-06-28 2021-11-09 武汉斗鱼网络科技有限公司 视频图像的交互处理方法及装置
CN107493515B (zh) * 2017-08-30 2021-01-01 香港乐蜜有限公司 一种基于直播的事件提醒方法及装置
CN107679497B (zh) * 2017-10-11 2023-06-27 山东新睿信息科技有限公司 视频面部贴图特效处理方法及生成系统
CN108596089A (zh) * 2018-04-24 2018-09-28 北京达佳互联信息技术有限公司 人脸姿态检测方法、装置、计算机设备及存储介质
CN110418155B (zh) * 2019-08-08 2022-12-16 腾讯科技(深圳)有限公司 直播互动方法、装置、计算机可读存储介质和计算机设备

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104182741A (zh) * 2014-09-15 2014-12-03 联想(北京)有限公司 一种图像采集提示方法、装置及电子设备
CN106231434A (zh) * 2016-07-25 2016-12-14 武汉斗鱼网络科技有限公司 一种基于人脸检测的直播互动特效实现方法及系统
CN106341720A (zh) * 2016-08-18 2017-01-18 北京奇虎科技有限公司 一种在视频直播中添加脸部特效的方法及装置
CN107277632A (zh) * 2017-05-12 2017-10-20 武汉斗鱼网络科技有限公司 一种展示虚拟礼物动画的方法和设备
WO2019052292A1 (en) * 2017-09-12 2019-03-21 Guangdong Oppo Mobile Telecommunications Corp., Ltd. UNLOCKING CONTROL METHODS AND RELATED PRODUCTS
CN109961055A (zh) * 2019-03-29 2019-07-02 广州市百果园信息技术有限公司 人脸关键点检测方法、装置、设备及存储介质
CN110191369A (zh) * 2019-06-06 2019-08-30 广州酷狗计算机科技有限公司 图像截取方法、装置、设备及存储介质

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
人脸图像的自适应美化与渲染研究;梁凌宇;《中国博士学位论文全文数据库(电子期刊)》;20141105;全文 *

Also Published As

Publication number Publication date
CN110933452A (zh) 2020-03-27

Similar Documents

Publication Publication Date Title
CN110933452B (zh) 萌脸礼物显示方法、装置及存储介质
CN110971930B (zh) 虚拟形象直播的方法、装置、终端及存储介质
CN110488977B (zh) 虚拟现实显示方法、装置、系统及存储介质
CN108803896B (zh) 控制屏幕的方法、装置、终端及存储介质
CN110830811B (zh) 直播互动方法及装置、系统、终端、存储介质
CN111372126B (zh) 视频播放方法、装置及存储介质
CN111028144B (zh) 视频换脸方法及装置、存储介质
CN109302632B (zh) 获取直播视频画面的方法、装置、终端及存储介质
CN110933468A (zh) 播放方法、装置、电子设备及介质
CN112965683A (zh) 调节音量的方法、装置、电子设备及介质
CN109634688B (zh) 会话界面的显示方法、装置、终端及存储介质
CN108848405B (zh) 图像处理方法和装置
CN110956580A (zh) 图像换脸的方法、装置、计算机设备以及存储介质
CN112565806A (zh) 虚拟礼物赠送方法、装置、计算机设备及介质
CN112135191A (zh) 视频编辑方法、装置、终端及存储介质
CN112130945A (zh) 礼物赠送方法、装置、设备及存储介质
CN109831817B (zh) 终端控制方法、装置、终端及存储介质
CN110769120A (zh) 进行消息提醒的方法、装置、设备及存储介质
CN110933454B (zh) 处理直播萌脸礼物的方法、装置、设备及存储介质
CN112419143A (zh) 图像处理方法、特效参数设置方法、装置、设备及介质
CN112381729A (zh) 图像处理方法、装置、终端及存储介质
CN109819308B (zh) 虚拟资源获取方法、装置、终端、服务器及存储介质
CN115904079A (zh) 显示设备调整方法、装置、终端及存储介质
CN112967261B (zh) 图像融合方法、装置、设备及存储介质
CN111669611B (zh) 图像处理方法、装置、终端及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant