CN116016971A - 直播特效的观看视角处理方法、装置、电子设备和介质 - Google Patents
直播特效的观看视角处理方法、装置、电子设备和介质 Download PDFInfo
- Publication number
- CN116016971A CN116016971A CN202211725451.2A CN202211725451A CN116016971A CN 116016971 A CN116016971 A CN 116016971A CN 202211725451 A CN202211725451 A CN 202211725451A CN 116016971 A CN116016971 A CN 116016971A
- Authority
- CN
- China
- Prior art keywords
- viewing angle
- face
- special effect
- preset
- terminal
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
本申请涉及网络直播技术领域,提供了一种直播特效的观看视角处理方法、装置、电子设备和存储介质。本申请能够提升对直播间三维特效的展示稳定性。该方法包括:直播间播放三维特效时,通过终端的摄像头进行人脸检测,在检测到人脸时,根据人脸的倾斜角度与终端的陀螺仪数据控制对三维特效的观看视角,在未检测到人脸时,以预设观看视角展示该三维特效。
Description
技术领域
本申请涉及网络直播技术领域,特别是涉及一种直播特效的观看视角处理方法、装置、电子设备和计算机可读存储介质。
背景技术
随着直播技术的发展,直播间中可供观众和主播进行互动的方式越来越多,在直播间中播放特效便是其中一种方式。例如,观众进入直播间后可以通过送礼等方式与主播进行互动,检测到观众送礼后可在直播间中播放相应的礼物特效,该些直播间的特效可以三维特效呈现。
基于目前的技术,在直播间为用户呈现三维特效时,会使得用户容易因为对终端的操作不当而丢失对三维特效的观看视角,导致对直播间三维特效的展示稳定性不足的技术问题。
发明内容
基于此,有必要针对上述技术问题,提供一种直播特效的观看视角处理方法、装置、电子设备和计算机可读存储介质。
第一方面,本申请提供了一种直播特效的观看视角处理方法。应用于终端。所述方法包括:
直播间播放三维特效时,通过所述终端的摄像头进行人脸检测;
检测到人脸时,根据所述人脸的倾斜角度与所述终端的陀螺仪数据,控制对所述三维特效的观看视角;
未检测到人脸时,以预设观看视角展示所述三维特效。
第二方面,本申请提供了一种直播特效的观看视角处理装置。应用于终端。所述装置包括:
人脸检测模块,用于直播间播放三维特效时,通过所述终端的摄像头进行人脸检测;
视角控制模块,用于检测到人脸时,根据所述人脸的倾斜角度与所述终端的陀螺仪数据,控制对所述三维特效的观看视角;
预设展示模块,用于未检测到人脸时,以预设观看视角展示所述三维特效。
第三方面,本申请提供了一种电子设备。所述电子设备包括存储器和处理器,所述存储器存储有计算机程序,所述处理器执行所述计算机程序时实现以下步骤:
直播间播放三维特效时,通过所述终端的摄像头进行人脸检测;检测到人脸时,根据所述人脸的倾斜角度与所述终端的陀螺仪数据,控制对所述三维特效的观看视角;未检测到人脸时,以预设观看视角展示所述三维特效。
第四方面,本申请提供了一种计算机可读存储介质。所述计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现以下步骤:
直播间播放三维特效时,通过所述终端的摄像头进行人脸检测;检测到人脸时,根据所述人脸的倾斜角度与所述终端的陀螺仪数据,控制对所述三维特效的观看视角;未检测到人脸时,以预设观看视角展示所述三维特效。
上述直播特效的观看视角处理方法、装置、电子设备和存储介质,直播间播放三维特效时,通过终端的摄像头进行人脸检测,在检测到人脸时,根据人脸的倾斜角度与终端的陀螺仪数据控制对三维特效的观看视角,在未检测到人脸时,以预设观看视角展示该三维特效。该方案对三维特效的观看视角的控制需要人脸保持在摄像头的检测范围内,只有检测到人脸时才根据人脸的倾斜角度和终端的陀螺仪数据控制对三维特效的观看视角,而人脸离开摄像头的检测范围时将以预设观看视角展示三维特效,由此可以避免用户对终端的操作不当而丢失对三维特效的观看视角,提升对直播间三维特效的展示稳定性,可应用于元宇宙直播场景下用户与三维特效的交互处理中,进而提升元宇宙直播场景中用户与三维特效的交互稳定性。
附图说明
图1为本申请实施例中直播特效的观看视角处理方法的应用场景图;
图2为本申请实施例中直播特效的观看视角处理方法的流程示意图;
图3为本申请实施例中控制对三维特效的观看视角的步骤的流程示意图;
图4为本申请具体实施例中控制对三维特效的观看视角的步骤的流程示意图;
图5为本申请实施例中语音切换观看视角的步骤的流程示意图;
图6为本申请实施例中直播特效的观看视角处理装置的结构框图;
图7为本申请实施例中电子设备的内部结构图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本申请进行进一步详细说明。应当理解,此处描述的具体实施例仅仅用以解释本申请,并不用于限定本申请。
本申请实施例提供的直播特效的观看视角处理方法,可以应用于如图1所示的应用场景中,该应用场景可以包括终端和服务器,其中,终端可以具体包括直播间的主播端和多个观众端(如观众端1、观众端2等等),主播端和多个观众端各自以通过互联网与服务器进行通信,服务器为直播间的主播端和多个观众端提供直播相关服务。其中,终端可以但不限于是各种个人计算机、笔记本电脑、智能手机、平板电脑;服务器可以用独立的服务器或者是多个服务器组成的服务器集群来实现。其中,该应用场景可以是元宇宙直播场景,服务器可以为直播间的主播和观众创建独立的元宇宙场景,搭建出一个与现实世界并行的虚拟空间,通过利用科技手段进行链接与创造出一个现实世界映射与交互的虚拟世界,可以在该虚拟空间中进行三维特效的播放、展示主播和观众的人物形象等,主播和观众的人物形象还可以在该虚拟空间中进行自由的虚拟互动,同时主播可以同虚拟观众用户之间进行互动,虚拟观众用户之间也可以进行互动。具体的,直播间的主播和观众可以通过如手机等终端完成人机交互,实现基本的控制操作,如手势移动切换,选择退出等,终端可以接收并显示服务器发送的如直播视频流、直播特效等直播数据,终端为元宇宙场景显示信息,同时为主播和观众提供元宇宙信息。
其中,对于元宇宙直播场景,主播或者表演嘉宾可以在绿幕影棚上进行开播,绿幕影棚的舞台上会放置有摄影灯,麦克风,摄像机,舞台上放置的摄像机拍摄出来的直播视频可以实时将视频流推到现场的抠像服务器,抠像服务器可以将人物跟绿幕背景分离,扣出人物,现有技术上可以通过软件扣绿跟硬件扣绿的方式将人像扣出来,处理好的人物视频流可以进行VR全景合成,需要将人物定位到预先准备的场景背景的合适的坐标位置,这个场景可以是一个二维的背景,也可以是一个三维的背景场景。当观众通过VR设备进行播放时,VR直播中的视频主要是一个全景的视频,可以包括180度和360度两种视频,当收到对应度视频后会将视频直播流渲染在一个透明半球(180度)或者球(360度)或者1/4球体的内面,并在合适的位置放置虚拟摄像机进行画面显示,而在该元宇宙直播场景中还可以在直播间中播放三维特效以供用户进行观看,提升元宇宙直播场景中的直播体验。
在包含但不限于是元宇宙直播场景中,基于本申请提供的直播特效的观看视角处理方法,终端可以在直播间播放三维特效时,基于对用户的人脸检测及陀螺仪数据实现对三维特效的观看视角的控制,从而为用户稳定地展示直播间三维特效,使其应用于元宇宙直播场景下用户与三维特效的交互处理中,提升元宇宙直播场景中用户与三维特效的交互稳定性。
以下基于如图1所示的应用环境,结合各实施例及相应附图,对本申请的直播特效的观看视角处理方法进行说明。
在一个实施例中,如图2所示,提供了一种直播特效的观看视角处理方法,该方法可以由如图1所示的终端执行,该方法可以包括以下步骤:
步骤S201,直播间播放三维特效时,通过终端的摄像头进行人脸检测。
步骤S202,检测到人脸时,根据人脸的倾斜角度与终端的陀螺仪数据,控制对三维特效的观看视角。
步骤S203,未检测到人脸时,以预设观看视角展示三维特效。
具体的,三维特效可以是三维礼物特效,具体可以是在直播间中一观众为主播赠送特定的三维礼物时,在直播间播放的对应的三维礼物特效。其中,该三维特效可以在各端进行播放,终端在直播间中播放三维特效时,包括主播和各观众在内的直播间用户可以以不同的观看视角观看该三维特效,而用户对三维特效的观看视角为该三维特效所在的三维空间中虚拟摄像机的视角,用户可以通过对终端的移动改变对三维特效的观看视角,如从正向观看该三维特效变化为从侧向观看该三维特效等等。
本实施例中,直播间播放三维特效时,并不直接根据终端的陀螺仪数据控制对三维特效的观看视角,若像现有技术应用在3D模型或游戏中的直接根据陀螺仪数据控制对三维特效的观看视角,则容易使得用户因为对终端的操作不当而导致对三维特效的观看视角发生丢失,极大地影响了三维特效的展示效果。
因此,在步骤S201中,直播间播放三维特效时,终端可以提示用户将其人脸保持在该终端的摄像头的拍摄范围内,并通过该摄像头进行实时的人脸检测,同时还可以开启该终端的陀螺仪服务,实时获取陀螺仪数据。
在步骤S202中,在检测到该用户的人脸的情况下,终端可以根据人脸检测的检测结果获取该用户的人脸的倾斜角度,还获取陀螺仪数据,根据该人脸的倾斜角度及陀螺仪数据控制对三维特效的观看视角。其中,人脸的倾斜角度是指该用户的人脸相对于该终端的摄像头的拍摄平面的倾斜角度,具体可以包括多个预设方向上的倾斜角度,该多个预设方向可以包括左方向、右方向、上方向和下方向,即可以具体获取该用户的人脸分别在左方向、右方向、上方向和下方向的倾斜角度,然后根据该倾斜角度和陀螺仪数据控制对三维特效的观看视角,这样可以在人脸保持在摄像头的拍摄范围内时才使得对三维特效的观看视角发生跟随陀螺仪数据的变化,即此时用户可以对终端进行旋转变化对三维特效的观看视角,而在实际应用中,终端可以通过前置摄像头拍摄用户人脸,由此可以使得人脸在关注终端的屏幕所显示的三维特效时才发生跟随陀螺仪数据的观看视角的变化,防止用户丢失对三维特效的观看视角。
在步骤S203中,在未检测到该用户的人脸的情况下,终端可以直接以预设观看视角展示三维特效,该预设观看视角可以是预先设定的对该三维特效的初始观看视角,即一旦检测到用户的人脸离开摄像头的拍摄范围,终端可以直接将当前观看视角切换回初始观看视角,防止用户丢失对三维特效的观看视角。具体的,对三维特效的观看视角的切换可以通过动画的方式进行,当检测到用户的人脸离开摄像头的拍摄范围时,终端可以将当前观看视角通过动画并按照一定的预设速度移动到初始观看视角,回归到初始观看视角后,若再次检测到该用户的人脸,则可以将当前的陀螺仪数据作为起始数据重新按照前述步骤S202中根据人脸的倾斜角度与终端的陀螺仪数据控制对三维特效的观看视角。
在具体实现中,终端在直播间刚开始播放三维特效时,可以以前述的初始观看视角进行三维特效的展示,此时的观看视角是固定的且不可移动的,而当检测的到人脸时,可以根据人脸的倾斜角度与终端的陀螺仪数据控制对三维特效的观看视角,而当未检测到人脸或者人脸丢失时,终端可以继续或重新以初始观看视角进行三维特效的展示,达到防止用户丢失对三维特效的观看视角的效果。
本实施例的直播特效的观看视角处理方法,直播间播放三维特效时,通过终端的摄像头进行人脸检测,在检测到人脸时,根据人脸的倾斜角度与终端的陀螺仪数据控制对三维特效的观看视角,在未检测到人脸时,以预设观看视角展示该三维特效。该方案对三维特效的观看视角的控制需要人脸保持在摄像头的检测范围内,只有检测到人脸时才根据人脸的倾斜角度和终端的陀螺仪数据控制对三维特效的观看视角,而人脸离开摄像头的检测范围时将以预设观看视角展示三维特效,由此可以避免用户对终端的操作不当而丢失对三维特效的观看视角,提升对直播间三维特效的展示稳定性,可应用于元宇宙直播场景下用户与三维特效的交互处理中,进而提升元宇宙直播场景中用户与三维特效的交互稳定性。
在一些实施例中,步骤S202中的根据人脸的倾斜角度与终端的陀螺仪数据,控制对三维特效的观看视角,可以包括:
获取人脸在多个预设方向上的倾斜角度;若人脸在多个预设方向上的倾斜角度均小于或等于预设倾斜角度阈值,则根据终端的陀螺仪数据,控制对三维特效的观看视角。
本实施例中,如前所述的,多个预设方向可以包括左方向、右方向、上方向和下方向,终端在检测到人脸时可以获取该人脸分别在左方向、右方向、上方向和下方向上的倾斜角度,然后分别判断该些倾斜角度是否小于或等于相应方向上的预设倾斜角度阈值。其中,可以为每个预设方向设置相同或不同的倾斜角度阈值。不失一般性地,设每个预设方向上的预设倾斜角度阈值均为A°,若终端判断该人脸分别在左方向、右方向、上方向和下方向上的倾斜角度均小于或等于A°,则终端根据陀螺仪数据控制对三维特效的观看视角,即此时启动的是陀螺仪模式,用户可以旋转终端且人脸一直保持在摄像头的检测范围内,终端根据陀螺仪传递的陀螺仪数据(如在X、Y和Z轴的数据)对虚拟摄像机做欧拉角旋转,实现根据陀螺仪数据对三维特效的观看视角的控制,达到通过终端的陀螺仪控制观看视角的效果,且可以防止用户丢失观看视角。
在另外一些实施例中,如图3所示,步骤S202中的根据人脸的倾斜角度与终端的陀螺仪数据,控制对三维特效的观看视角,可以包括:
步骤S301,获取人脸在多个预设方向上的倾斜角度。
步骤S302,若多个预设方向中存在至少一个目标方向,则根据人脸在目标方向上的倾斜角度以及终端的陀螺仪数据,控制对三维特效的观看视角。
本实施例中,多个预设方向可以包括左方向、右方向、上方向和下方向,终端在检测到人脸时可以获取该人脸分别在左方向、右方向、上方向和下方向上的倾斜角度,然后分别将该些倾斜角度与相应方向上的预设倾斜角度阈值进行比较,设每个预设方向上的预设倾斜角度阈值均为A°,若终端检测到该人脸在一预设方向上的倾斜角度大于A°,则终端可将该预设方向确定为目标方向,即目标方向为多个预设方向中对应该人脸的倾斜角度大于预设倾斜角度阈值的预设方向,然后根据该人脸在该目标方向上的倾斜角度以及终端的陀螺仪数据,控制对三维特效的观看视角。基于本实施例的方案,可以在人脸保持在摄像头的拍摄范围内的情况下,通过人脸在该目标方向上的倾斜角度与陀螺仪的结合,实现对观看视角的精细化控制。
进一步的,在其中一个实施例中,如图4所示,步骤S302中的根据人脸在目标方向上的倾斜角度以及终端的陀螺仪数据,控制对三维特效的观看视角,具体包括:
步骤S401,确定多个旋转轴中目标方向对应的目标旋转轴。
本步骤中,旋转轴是指观看视角的旋转轴,可以包括X、Y和Z轴,旋转轴可以对应于前述的预设方向,如X轴可以对应前述的左方向和右方向,Y轴可以对应于前述的上方向和下方向等。具体的,在确定目标方向后,终端可以进一步确定多个旋转轴中与该目标方向对应的旋转轴作为目标旋转轴。
步骤S402,根据人脸在目标方向上的倾斜角度以及目标旋转轴对应的陀螺仪数据,得到观看视角在目标旋转轴对应的观看视角变化信息。
具体的,如目标方向为右方向,可以根据人脸在右方向上的倾斜角度以及X轴对应的陀螺仪数据,得到观看视角在X轴对应的观看视角变化信息,该观看角度变化信息是指指示观看视角在X轴发生相应变化的信息,具体可以是该观看视角在X轴对应的旋转角度。如目标方向为上方向,可以根据人脸在上方向上的倾斜角度以及Y轴对应的陀螺仪数据,得到观看视角在Y轴对应的观看视角变化信息,具体可以是该观看视角在Y轴对应的旋转角度。
步骤S403,根据多个旋转轴中其他旋转轴对应的陀螺仪数据,得到观看视角在其他旋转轴对应的观看视角变化信息。
本步骤中,其他旋转轴是指多个旋转轴中除目标旋转轴外的旋转轴,如目标旋转轴为X轴,则Y轴和Z轴为其他旋转轴。具体的,如目标旋转轴为X轴,根据Y轴和Z轴对应的陀螺仪数据,得到观看视角在Y轴和Z轴对应的观看视角变化信息,具体可以是该观看视角在Y轴和Z轴对应的旋转角度。
步骤S404,根据观看视角在目标旋转轴对应的观看视角变化信息以及在其他旋转轴对应的观看视角变化信息,控制对三维特效的观看视角。
本步骤中,终端可以根据步骤S402得到的观看视角在目标旋转轴X轴对应的旋转角度以及在步骤S403得到的观看视角在其他旋转轴Y轴和Z轴对应的旋转角度,控制对三维特效的观看视角发生变化,达到结合人脸和陀螺仪对观看视角的精细化控制的效果。
进一步的,作为一个实施例,步骤S402中的根据人脸在目标方向上的倾斜角度以及目标旋转轴对应的陀螺仪数据,得到观看视角在目标旋转轴对应的观看视角变化信息,具体包括:
目标方向属于正向类方向时,根据目标旋转轴对应的陀螺仪数据与人脸在所述目标方向上的倾斜角度之和,得到观看视角在目标旋转轴对应的观看视角变化信息;目标方向属于负向类方向时,根据目标旋转轴对应的陀螺仪数据与人脸在目标方向上的倾斜角度之差,得到观看视角在目标旋转轴对应的观看视角变化信息。
本实施例中,具体的,正向类方向是指使观看视角在相应轴上产生正向转动的方向,负向类方向是指使观看视角在相应轴上产生负向转动的方向,示例性的,目标方向为右方向和下方向时属于正向类方向,目标方向为左方向和上方向时属于负向类方向,其中,目标方向属于正向类方向时,终端根据该目标旋转轴对应的陀螺仪数据与人脸在该目标方向上的倾斜角度之和,得到观看视角在目标旋转轴对应的观看视角变化信息,相应的,目标方向属于负向类方向时,终端根据该目标旋转轴对应的陀螺仪数据与人脸在该目标方向上的倾斜角度之差,得到观看视角在目标旋转轴对应的观看视角变化信息。作为具体示例,设陀螺仪数据为旋转角度,若该陀螺仪数据为旋转弧度,则可以通过弧度与角度的换算公式获得对应的旋转角度,若目标方向为右方向,此时用户的人脸向右倾斜为右侧脸,终端获得的观看视角在X轴的旋转角度=陀螺仪在X轴的旋转角度+人脸在右方向的倾斜角度,而对于Y轴和Z轴则直接用陀螺仪在Y轴和Z轴的旋转角度;若目标方向为左方向,此时用户的人脸向左倾斜为左侧脸,终端获得的观看视角在X轴的旋转角度=陀螺仪在X轴的旋转角度-人脸在左方向的倾斜角度,而对于Y轴和Z轴则直接用陀螺仪在Y轴和Z轴的旋转角度;若目标方向为上方向,此时用户的人脸向上倾斜为抬头,终端获得的观看视角在Y轴的旋转角度=陀螺仪在Y轴的旋转角度-人脸在上方向的倾斜角度,而对于X轴和Z轴则直接用陀螺仪在X轴和Z轴的旋转角度;若目标方向为下方向,此时用户的人脸向下倾斜为低头,终端获得的观看视角在Y轴的旋转角度=陀螺仪在Y轴的旋转角度+人脸在下方向的倾斜角度,而对于X轴和Z轴则直接用陀螺仪在X轴和Z轴的旋转角度。由此,本实施例的方案可以实现结合人脸和陀螺仪对观看视角的精细化控制。
在一些实施例中,如图5所示,本申请的方法还可以包括以下步骤:
步骤S501,检测到人脸时,接收用户输入的观看视角切换语音。
步骤S502,根据观看视角切换语音中包含的预设控制关键字,对当前观看视角进行切换。
本实施例是终端可以在检测到用户的人脸时,供用户通过输入语音实现对观看视角的切换,进一步丰富用户对观看视角的控制方式,防止用户丢失观看视角。具体的,终端检测到人脸时,可以接收用户输入的观看视角切换语音。其中,观看视角切换语音是指用于指示终端对当前观看视角进行切换的语音,该观看视角切换语音需要包含预设控制关键字,终端接收到用户输入的观看视角切换语音后,可以识别观看视角切换语音对应的文本,根据该文本判断该观看视角切换语音中是否包含有预设控制关键字,预设控制关键字是指预设的用于指示对观看视角进行控制的关键字,若该观看视角切换语音中包含有预设控制关键字,则终端根据该观看视角切换语音中包含的预设控制关键字,对当前观看视角进行切换。
进一步的,在一个实施例中,步骤S502具体可以包括:
若观看视角控制语音中包含第一预设控制关键字,则从多个预设观看视角中随机选取第一目标观看视角,将当前观看视角切换为第一目标观看视角;若观看视角控制语音中包含第二预设控制关键字,则将当前观看视角切换为初始观看视角;若观看视角控制语音中包含第三预设控制关键字,则根据第三预设控制关键字对应的旋转轴以及对应的预设观看视角变化信息,将当前观看视角切换至对应的第二目标观看视角。
本实施例的方案,可以根据观看视角控制语音中包含的不同的预设控制关键字,实现对观看视角的随机切换、视角回归和特定轴转动,进一步丰富用户对观看视角的控制方式,且便于用户对观看视角的控制,防止用户丢失观看视角。具体的,若观看视角控制语音中包含第一预设控制关键字,该第一预设控制关键字可以是“换个角度”等,用于指示终端进行视角切换的关键字,对此,可以为三维特效预设多个观看视角(即多个预设观看视角),当用户输入“换个角度”等第一预设控制关键字时,终端可以从该多个预设观看视角中随机选取一个预设观看视角作为第一目标观看视角,然后将当前观看视角切换为第一目标观看视角,如前所述,可以通过动画将当前观看视角移动至第一目标观看视角;若观看视角控制语音中包含第二预设控制关键字,该第二预设控制关键字可以是“回到起点”等,用于指示终端进行视角回归的关键字,对此,可以为三维特效预设一个初始观看视角,当用户输入“回到起点”等第二预设控制关键字时,终端可以将当前观看视角切换为初始观看视角,具体可以通过动画将当前观看视角移动至初始观看视角。若观看视角控制语音中包含第三预设控制关键字,该第三预设关键字可以是“向右”、“向左”、“向下”和“向上”等,用于指示终端进行在特定旋转轴转动的视角切换的关键字,对此,第三预设控制关键字的数量可以是多个,可以为每一第三预设控制关键字设置对应的旋转轴以及对应的预设观看视角变化信息,该预设观看视角变化信息可以是预设量的旋转角度△B°,作为一个示例,当用户输入“向右”时,终端可以确定对应的X轴以及预设量的旋转角度△B°,然后在X轴当前的旋转角度的基础上加上预设量的旋转角度△B°得到对应的第二目标观看视角,将当前观看视角切换至该对应的第二目标观看视角,作为另一示例,当用户输入“向左,终端可以确定对应的X轴以及预设量的旋转角度△B°,然后在X轴当前的旋转角度的基础上减去预设量的旋转角度△B°得到对应的第二目标观看视角,将当前观看视角切换至该对应的第二目标观看视角,具体也可以通过动画将当前观看视角移动至第二目标观看视角。
在一些实施例中,本申请的方法还可以包括以下步骤:当前观看视角发生切换时,过滤人脸检测的检测结果以及陀螺仪数据。
本实施例中,可以在将当前观看视角切换至下一观看视角时,过滤掉人脸检测的检测结果以及陀螺仪数据,即此时不执行观看视角的控制直至观看视角切换结束,这样可以使得观看视角的切换控制更加稳定可靠。具体的,终端可以在切换观看视角的动画移动过程中,过滤掉人脸检测的检测结果以及陀螺仪数据,当动画移动结束后,再重新获取陀螺仪数据,以当前的陀螺仪数据作为观看视角当前对应的位置,此时终端在人脸处于摄像头的摄像范围内时再旋转,观看视角再跟随转动。
应该理解的是,虽然如上所述的各实施例所涉及的流程图中的各个步骤按照箭头的指示依次显示,但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明,这些步骤的执行并没有严格的顺序限制,这些步骤可以以其它的顺序执行。而且,如上所述的各实施例所涉及的流程图中的至少一部分步骤可以包括多个步骤或者多个阶段,这些步骤或者阶段并不必然是在同一时刻执行完成,而是可以在不同的时刻执行,这些步骤或者阶段的执行顺序也不必然是依次进行,而是可以与其它步骤或者其它步骤中的步骤或者阶段的至少一部分轮流或者交替地执行。
基于同样的发明构思,本申请实施例还提供了一种用于实现上述所涉及的直播特效的观看视角处理方法的直播特效的观看视角处理装置。该装置所提供的解决问题的实现方案与上述方法中所记载的实现方案相似,故下面所提供的一个或多个直播特效的观看视角处理装置实施例中的具体限定可以参见上文中对于直播特效的观看视角处理方法的限定,在此不再赘述。
在一个实施例中,如图6所示,提供了一种直播特效的观看视角处理装置,该装置600可以应用于终端,该装置600可以包括:
人脸检测模块601,用于直播间播放三维特效时,通过所述终端的摄像头进行人脸检测;
视角控制模块602,用于检测到人脸时,根据所述人脸的倾斜角度与所述终端的陀螺仪数据,控制对所述三维特效的观看视角;
预设展示模块603,用于未检测到人脸时,以预设观看视角展示所述三维特效。
在一个实施例中,视角控制模块602,用于获取所述人脸在多个预设方向上的倾斜角度;若所述人脸在多个预设方向上的倾斜角度均小于或等于预设倾斜角度阈值,则根据所述终端的陀螺仪数据,控制对所述三维特效的观看视角。
在一个实施例中,视角控制模块602,用于获取所述人脸在多个预设方向上的倾斜角度;若所述多个预设方向中存在至少一个目标方向,则根据所述人脸在所述目标方向上的倾斜角度以及所述终端的陀螺仪数据,控制对所述三维特效的观看视角;其中,所述目标方向为所述多个预设方向中对应所述人脸的倾斜角度大于预设倾斜角度阈值的预设方向。
在一个实施例中,视角控制模块602,进一步用于确定多个旋转轴中所述目标方向对应的目标旋转轴;根据所述人脸在所述目标方向上的倾斜角度以及所述目标旋转轴对应的陀螺仪数据,得到所述观看视角在目标旋转轴对应的观看视角变化信息;根据所述多个旋转轴中其他旋转轴对应的陀螺仪数据,得到所述观看视角在所述其他旋转轴对应的观看视角变化信息;其中,所述其他旋转轴为所述多个旋转轴中除所述目标旋转轴外的旋转轴;根据所述观看视角在目标旋转轴对应的观看视角变化信息以及在所述其他旋转轴对应的观看视角变化信息,控制对所述三维特效的观看视角。
在一个实施例中,视角控制模块602,再进一步用于所述目标方向属于正向类方向时,根据所述目标旋转轴对应的陀螺仪数据与所述人脸在所述目标方向上的倾斜角度之和,得到所述观看视角在目标旋转轴对应的观看视角变化信息;所述目标方向属于负向类方向时,根据所述目标旋转轴对应的陀螺仪数据与所述人脸在所述目标方向上的倾斜角度之差,得到所述观看视角在目标旋转轴对应的观看视角变化信息。
在一个实施例中,该装置600还可以包括:语音控制模块,用于检测到人脸时,接收用户输入的观看视角切换语音;根据所述观看视角切换语音中包含的预设控制关键字,对当前观看视角进行切换。
在一个实施例中,语音控制模块,进一步用于若所述观看视角控制语音中包含第一预设控制关键字,则从多个预设观看视角中随机选取第一目标观看视角,将当前观看视角切换为所述第一目标观看视角;若所述观看视角控制语音中包含第二预设控制关键字,则将当前观看视角切换为初始观看视角;若所述观看视角控制语音中包含第三预设控制关键字,则根据所述第三预设控制关键字对应的旋转轴以及对应的预设观看视角变化信息,将当前观看视角切换至对应的第二目标观看视角。
在一个实施例中,该装置600还可以包括:数据过滤模块,用于当前观看视角发生切换时,过滤所述人脸检测的检测结果以及所述陀螺仪数据。
上述直播特效的观看视角处理装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于电子设备中的处理器中,也可以以软件形式存储于电子设备中的存储器中,以便于处理器调用执行以上各个模块对应的操作。
在一个实施例中,提供了一种电子设备,该电子设备可以是终端,其内部结构图可以如图7所示。该电子设备包括通过系统总线连接的处理器、存储器、通信接口、显示屏和输入装置。其中,该电子设备的处理器用于提供计算和控制能力。该电子设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统和计算机程序。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该电子设备的通信接口用于与外部的设备进行有线或无线方式的通信,无线方式可通过WIFI、移动蜂窝网络、NFC(近场通信)或其他技术实现。该计算机程序被处理器执行时以实现一种直播特效的观看视角处理方法。该电子设备的显示屏可以是液晶显示屏或者电子墨水显示屏,该电子设备的输入装置可以是显示屏上覆盖的触摸层,也可以是电子设备外壳上设置的按键、轨迹球或触控板,还可以是外接的键盘、触控板或鼠标等。
本领域技术人员可以理解,图7中示出的结构,仅仅是与本申请方案相关的部分结构的框图,并不构成对本申请方案所应用于其上的电子设备的限定,具体的电子设备可以包括比图中所示更多或更少的部件,或者组合某些部件,或者具有不同的部件布置。
在一个实施例中,还提供了一种电子设备,包括存储器和处理器,存储器中存储有计算机程序,该处理器执行计算机程序时实现上述各方法实施例中的步骤。
在一个实施例中,提供了一种计算机可读存储介质,其上存储有计算机程序,该计算机程序被处理器执行时实现上述各方法实施例中的步骤。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的计算机程序可存储于一非易失性计算机可读取存储介质中,该计算机程序在执行时,可包括如上述各方法的实施例的流程。其中,本申请所提供的各实施例中所使用的对存储器、数据库或其它介质的任何引用,均可包括非易失性和易失性存储器中的至少一种。非易失性存储器可包括只读存储器(Read-OnlyMemory,ROM)、磁带、软盘、闪存、光存储器、高密度嵌入式非易失性存储器、阻变存储器(ReRAM)、磁变存储器(MagnetoresistiveRandomAccessMemory,MRAM)、铁电存储器(FerroelectricRandomAccessMemory,FRAM)、相变存储器(PhaseChange Memory,PCM)、石墨烯存储器等。易失性存储器可包括随机存取存储器(RandomAccessMemory,RAM)或外部高速缓冲存储器等。作为说明而非局限,RAM可以是多种形式,比如静态随机存取存储器(StaticRandomAccess Memory,SRAM)或动态随机存取存储器(DynamicRandomAccessMemory,DRAM)等。本申请所提供的各实施例中所涉及的数据库可包括关系型数据库和非关系型数据库中至少一种。非关系型数据库可包括基于区块链的分布式数据库等,不限于此。本申请所提供的各实施例中所涉及的处理器可为通用处理器、中央处理器、图形处理器、数字信号处理器、可编程逻辑器、基于量子计算的数据处理逻辑器等,不限于此。
需要说明的是,本申请所涉及的用户信息(包括但不限于用户设备信息、用户个人信息等)和数据(包括但不限于用于分析的数据、存储的数据、展示的数据等),均为经用户授权或者经过各方充分授权的信息和数据。
以上实施例的各技术特征可以进行任意的组合,为使描述简洁,未对上述实施例中的各个技术特征所有可能的组合都进行描述,然而,只要这些技术特征的组合不存在矛盾,都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本申请的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对本申请专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本申请构思的前提下,还可以做出若干变形和改进,这些都属于本申请的保护范围。因此,本申请的保护范围应以所附权利要求为准。
Claims (11)
1.一种直播特效的观看视角处理方法,其特征在于,应用于终端,所述方法包括:
直播间播放三维特效时,通过所述终端的摄像头进行人脸检测;
检测到人脸时,根据所述人脸的倾斜角度与所述终端的陀螺仪数据,控制对所述三维特效的观看视角;
未检测到人脸时,以预设观看视角展示所述三维特效。
2.根据权利要求1所述的方法,其特征在于,所述根据所述人脸的倾斜角度与所述终端的陀螺仪数据,控制对所述三维特效的观看视角,包括:
获取所述人脸在多个预设方向上的倾斜角度;
若所述人脸在多个预设方向上的倾斜角度均小于或等于预设倾斜角度阈值,则根据所述终端的陀螺仪数据,控制对所述三维特效的观看视角。
3.根据权利要求1所述的方法,其特征在于,所述根据所述人脸的倾斜角度与所述终端的陀螺仪数据,控制对所述三维特效的观看视角,包括:
获取所述人脸在多个预设方向上的倾斜角度;
若所述多个预设方向中存在至少一个目标方向,则根据所述人脸在所述目标方向上的倾斜角度以及所述终端的陀螺仪数据,控制对所述三维特效的观看视角;其中,所述目标方向为所述多个预设方向中对应所述人脸的倾斜角度大于预设倾斜角度阈值的预设方向。
4.根据权利要求3所述的方法,其特征在于,所述根据所述人脸在所述目标方向上的倾斜角度以及所述终端的陀螺仪数据,控制对所述三维特效的观看视角,包括:
确定多个旋转轴中所述目标方向对应的目标旋转轴;
根据所述人脸在所述目标方向上的倾斜角度以及所述目标旋转轴对应的陀螺仪数据,得到所述观看视角在目标旋转轴对应的观看视角变化信息;
根据所述多个旋转轴中其他旋转轴对应的陀螺仪数据,得到所述观看视角在所述其他旋转轴对应的观看视角变化信息;其中,所述其他旋转轴为所述多个旋转轴中除所述目标旋转轴外的旋转轴;
根据所述观看视角在目标旋转轴对应的观看视角变化信息以及在所述其他旋转轴对应的观看视角变化信息,控制对所述三维特效的观看视角。
5.根据权利要求4所述的方法,其特征在于,所述根据所述人脸在所述目标方向上的倾斜角度以及所述目标旋转轴对应的陀螺仪数据,得到所述观看视角在目标旋转轴对应的观看视角变化信息,包括:
所述目标方向属于正向类方向时,根据所述目标旋转轴对应的陀螺仪数据与所述人脸在所述目标方向上的倾斜角度之和,得到所述观看视角在目标旋转轴对应的观看视角变化信息;
所述目标方向属于负向类方向时,根据所述目标旋转轴对应的陀螺仪数据与所述人脸在所述目标方向上的倾斜角度之差,得到所述观看视角在目标旋转轴对应的观看视角变化信息。
6.根据权利要求1至5任一项所述的方法,其特征在于,所述方法还包括:
检测到人脸时,接收用户输入的观看视角切换语音;
根据所述观看视角切换语音中包含的预设控制关键字,对当前观看视角进行切换。
7.根据权利要求6所述的方法,其特征在于,所述根据所述观看视角切换语音中包含的预设控制关键字,对当前观看视角进行切换,包括:
若所述观看视角控制语音中包含第一预设控制关键字,则从多个预设观看视角中随机选取第一目标观看视角,将当前观看视角切换为所述第一目标观看视角;
若所述观看视角控制语音中包含第二预设控制关键字,则将当前观看视角切换为初始观看视角;
若所述观看视角控制语音中包含第三预设控制关键字,则根据所述第三预设控制关键字对应的旋转轴以及对应的预设观看视角变化信息,将当前观看视角切换至对应的第二目标观看视角。
8.根据权利要求6所述的方法,其特征在于,所述方法还包括:
当前观看视角发生切换时,过滤所述人脸检测的检测结果以及所述陀螺仪数据。
9.一种直播特效的观看视角处理装置,其特征在于,应用于终端,所述装置包括:
人脸检测模块,用于直播间播放三维特效时,通过所述终端的摄像头进行人脸检测;
视角控制模块,用于检测到人脸时,根据所述人脸的倾斜角度与所述终端的陀螺仪数据,控制对所述三维特效的观看视角;
预设展示模块,用于未检测到人脸时,以预设观看视角展示所述三维特效。
10.一种电子设备,包括存储器和处理器,所述存储器存储有计算机程序,其特征在于,所述处理器执行所述计算机程序时实现权利要求1至8中任一项所述的方法的步骤。
11.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1至8中任一项所述的方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211725451.2A CN116016971A (zh) | 2022-12-30 | 2022-12-30 | 直播特效的观看视角处理方法、装置、电子设备和介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211725451.2A CN116016971A (zh) | 2022-12-30 | 2022-12-30 | 直播特效的观看视角处理方法、装置、电子设备和介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN116016971A true CN116016971A (zh) | 2023-04-25 |
Family
ID=86026560
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202211725451.2A Pending CN116016971A (zh) | 2022-12-30 | 2022-12-30 | 直播特效的观看视角处理方法、装置、电子设备和介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN116016971A (zh) |
-
2022
- 2022-12-30 CN CN202211725451.2A patent/CN116016971A/zh active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN112256127B (zh) | 球形视频编辑 | |
CN106803966B (zh) | 一种多人网络直播方法、装置及其电子设备 | |
US20170154468A1 (en) | Method and electronic apparatus for constructing virtual reality scene model | |
CN111970532B (zh) | 视频播放方法、装置及设备 | |
US11563915B2 (en) | Media content presentation | |
JP2024050721A (ja) | 情報処理装置、情報処理方法およびコンピュータプログラム | |
CN109729372B (zh) | 直播间切换方法、装置、终端、服务器及存储介质 | |
CN106331877A (zh) | 弹幕播放方法及装置 | |
CN104243961A (zh) | 多视角影像的显示系统及方法 | |
WO2018000608A1 (zh) | 一种虚拟现实系统中分享全景影像的方法和电子设备 | |
CN107295393B (zh) | 媒体播放中的附加媒体展示方法及装置以及计算设备和计算机可读存储介质 | |
CN112019907A (zh) | 直播画面分流方法、计算机设备及可读存储介质 | |
CN112261433A (zh) | 虚拟礼物的发送方法、显示方法、装置、终端及存储介质 | |
CN114097248A (zh) | 一种视频流处理方法、装置、设备及介质 | |
CN114615513A (zh) | 视频数据生成方法、装置、电子设备及存储介质 | |
CN115002359A (zh) | 视频处理方法、装置、电子设备及存储介质 | |
WO2024055967A1 (zh) | 视频处理方法、装置、计算机设备和存储介质 | |
CN113115108A (zh) | 一种视频处理方法及计算设备 | |
US20230347240A1 (en) | Display method and apparatus of scene picture, terminal, and storage medium | |
CN112019906A (zh) | 直播方法、计算机设备及可读存储介质 | |
CN116744065A (zh) | 视频播放方法、装置 | |
CN116016971A (zh) | 直播特效的观看视角处理方法、装置、电子设备和介质 | |
WO2023020120A1 (zh) | 动作效果的显示方法、装置、设备、介质及程序产品 | |
CN116017082A (zh) | 一种信息处理方法和电子设备 | |
CN116112617A (zh) | 演播画面的处理方法、装置、电子设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |