CN116389842A - 虚拟特效播放方法、装置、电子设备及可读存储介质 - Google Patents

Abstract

本申请涉及网络直播领域，提供了一种虚拟特效播放方法、装置、电子设备及计算机可读存储介质；所述方法包括：获取客户端的虚拟特效播放的业务场景；根据所述业务场景从数据库中加载3D虚拟特效模型及其预制脚本；其中，所述预制脚本为所述3D虚拟特效模型预配置触控能力；将所述预制脚本绑定到所述3D虚拟特效模型，并调用播放器播放所述3D虚拟特效模型；在播放过程中，基于所述预制脚本控制所述3D虚拟特效模型的画面渲染过程；该技术方案，在播放3D虚拟特效过程中，用户可以与3D虚拟特效进行实时互动，提升虚拟特效播放的交互性，特别是在应用于VR设备中，可以获得炫酷的播放效果。

Description

虚拟特效播放方法、装置、电子设备及可读存储介质

技术领域

本申请涉及网络直播技术领域，特别是涉及一种虚拟特效播放方法、装置、电子设备及计算机可读存储介质。

背景技术

随着元宇宙技术的发展，在直播领域也得到越来越多的应用，基于元宇宙搭建的虚拟空间，各种虚拟资源在直播间中展示，可供主播和观众可以进行更加沉浸式的虚拟互动。

但是，目前在直播领域中，主流的虚拟播放器主要为二维平面的播放器，当需要在直播间展示虚拟资源时，比如赠送虚拟礼物、入场秀和虚拟形象等，通常是利用mp4播放器、svga播放器等，这类播放器一般功能比较单一，随着直播技术的不断发展，用户对于虚拟特效的展现需求也是越来越高，而基于目前的技术所提供的虚拟礼物特效播放技术，主要用于播放二维平面动效，立体感和交互性较弱，影响了直播间的虚拟特效的播放效果。

发明内容

基于此，有必要针对上述技术问题之一，提供一种虚拟特效播放方法、装置、电子设备及计算机可读存储介质，提升虚拟特效播放的交互性，提高3D播放效果。

第一方面，本申请提供了一种虚拟特效播放方法，所述方法包括：

一种虚拟特效播放方法，包括：

获取客户端的虚拟特效播放的业务场景；

根据所述业务场景从数据库中加载3D虚拟特效模型及其预制脚本；其中，所述预制脚本为所述3D虚拟特效模型预配置触控能力；

将所述预制脚本绑定到所述3D虚拟特效模型，并调用播放器播放所述3D虚拟特效模型；

在播放过程中，基于所述预制脚本控制所述3D虚拟特效模型的画面渲染过程。

在一个实施例中，所述的虚拟特效播放方法，还包括：

基于3D建模制作3D虚拟特效模型；

编辑所述3D虚拟特效模型的模型动作，并在所述3D虚拟特效模型上添加触控附加能力；

根据所述模型动作和附加能力生成预制脚本，并导出所述3D虚拟特效模型和预制脚本存储在数据库中。

在一个实施例中，所述基于3D建模制作3D虚拟特效模型，包括：

根据虚拟特效构建3D虚拟特效模型，并制作所述3D虚拟特效模型相应的模型素材；获取虚拟特效使用的音乐资源，将音乐资源匹配到所述3D虚拟特效模型中。

在一个实施例中，所述编辑所述3D虚拟特效模型的模型动作，并在所述3D虚拟特效模型上添加触控附加能力，包括：

根据所述3D虚拟特效模型需要展示的动作编辑骨骼节点对应的代码脚本，以及编辑相应的代码脚本将所述3D虚拟特效模型与音乐资源进行绑定；

在所述3D虚拟特效模型的骨骼节点上设置一个设定半径的透明球体，在所述设定半径内设置响应触摸点击事件的功能；

通过代码脚本配置基于状态数据控制所述3D虚拟特效模型的功能。

在一个实施例中，基于所述预制脚本控制所述3D虚拟特效模型的画面渲染过程，包括：

将所述透明球体的半径范围实时通知客户端，并根据所述半径范围在客户端界面绘制出对应的点击区域；

当检测到用户点击所述点击区域时，将发生的点击事件所对应的触控指令通知播放器执行相应的播放逻辑。

在一个实施例中，在根据所述模型动作和附加能力生成预制脚本之后，还包括：

根据所述3D虚拟特效模型的动作类型将对应的代码脚本进行分类保存；

按照动作类型分别为每一种展示动作的脚本绑定唯一的脚本ID并添加描述信息。

在一个实施例中，将所述预制脚本绑定到所述3D虚拟特效模型，包括：

获取加载的预制脚本的脚本ID和3D虚拟特效模型的模型ID；

若所述脚本ID与模型ID相匹配，则将所述预制脚本绑定到3D虚拟特效模型。

在一个实施例中，在调用播放器播放所述3D虚拟特效模型之前，还包括：

若所述播放器的运行设备为平面设备，获取当前网络状态，并根据所述网络状态选择所述播放器的分辨率；

若所述播放器的运行设备为VR设备，获取当前网络状态以及运行设备的性能参数，并根据所述网络状态以及性能参数选择所述播放器的播放角度。

在一个实施例中，所述虚拟特效为直播间VR直播场景下的礼物特效；

所述调用播放器播放所述3D虚拟特效模型，包括：

启动主播客户端的播放器加载所述3D虚拟特效模型的画面内容；在主播客户端将对应的礼物特效渲染图层与主播视频流推送到各个观众客户端；

或者

启动观众客户端的播放器加载所述3D虚拟特效模型的画面内容，若所述礼物特效是平面礼物，则在空间平面上渲染礼物特效的画面内容，若所述礼物特效是立体礼物，则在立体空间上渲染画面内容。

在一个实施例中，所述的虚拟特效播放方法，还包括：

若所述礼物特效是平面礼物，通过VR设备的手柄的起点开始发射一条有限长度的射线，在礼物特效与所述射线形成夹角时，确认赠送该礼物特效；

若所述礼物特效是立体礼物，通过VR设备发射射线选择礼物特效，并通过手柄的抓取按键抓取礼物特效，确认赠送该礼物特效。

在一个实施例中，所述虚拟特效为直播间VR直播场景下的礼物特效；

所述调用播放器播放所述3D虚拟特效模型，包括：

读取礼物播放队列的礼物特效放入到播放器的等待队列；

从等待队列中依次读取特效礼物开始进行渲染；

打开点击区域并进行倒计时播放礼物特效，以及在礼物特效播放完成后，清除点击区域；

向所述礼物播放队列和等待队列发送完成播放的通知消息。

第二方面，本申请提供了一种虚拟特效播放装置，包括：

场景获取模块，用于获取客户端的虚拟特效播放的业务场景；

模型选择模块，用于根据所述业务场景从数据库中加载3D虚拟特效模型及其预制脚本；其中，所述预制脚本为所述3D虚拟特效模型预配置触控能力；

特效播放模块，用于将所述预制脚本绑定到所述3D虚拟特效模型，并调用播放器播放所述3D虚拟特效模型；

渲染控制模块，用于在播放过程中，基于所述预制脚本控制所述3D虚拟特效模型的画面渲染过程。

第三方面，本申请提供了一种电子设备，包括存储器和处理器，所述存储器存储有计算机程序，所述处理器执行所述计算机程序时实现所述虚拟特效播放方法的步骤。

第四方面，本申请提供了一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现所述虚拟特效播放方法的步骤。

上述虚拟特效播放方法、装置、电子设备及计算机可读存储介质，首先利用预制脚本为3D虚拟特效模型预配置触控能力，客户端运行时，通过获取客户端的虚拟特效播放的业务场景，根据业务场景从数据库中加载3D虚拟特效模型及其预制脚本，并将预制脚本绑定到3D虚拟特效模型；在播放虚拟特效时，调用播放器播放3D虚拟特效模型，并且在播放过程中，根据预制脚本获取用户输入的触控指令，通知播放器进行对应的动作呈现；该技术方案，针对于客户端播放3D虚拟特效的需求，通过预先制作脚本为3D虚拟特效配置相应的触控能力，并在客户端播放时，利用绑定的3D虚拟特效及预制脚本，从而为用户与3D虚拟特效播放互动提供了交互机控制方案，在播放3D虚拟特效过程中，用户可以与3D虚拟特效进行实时互动，提升虚拟特效播放的交互性，特别是在应用于VR设备中，可以获得炫酷的播放效果。

另外，在播放直播间的虚拟特效时，可以丰富虚拟特效表现形式，提高虚拟特效的层次感、空间感和立体感，使得直播过程中具有更加生动的表现效果，特别是应用于元宇宙直播场景下的虚拟特效播放，丰富元宇宙直播中虚拟礼物、进场秀以及虚拟形象的样式促进元宇宙直播中主播和观众的互动。

附图说明

图1为本申请实施例中虚拟特效播放方法的应用场景图；

图2是一个实施例的虚拟特效播放方法流程图；

图3是一个示例的播放器与触摸层交互时序图；

图4是一个示例的虚拟特效播放的整体流程图；

图5是一个平面礼物选择示例图；

图6是一个立体礼物选择示例图；

图7是一个示例的礼物特效播放逻辑图；

图8是一个示例的进场秀效果对比图；

图9是一个实施例的虚拟特效播放装置结构示意图；

图10为一个示例的电子设备的内部结构图。

具体实施方式

为了使本申请的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本申请进行进一步详细说明。应当理解，此处描述的具体实施例仅仅用以解释本申请，并不用于限定本申请。

本申请实施例提供的虚拟特效播放方法，可以应用于如图1所示的应用场景中，该应用场景可以包括终端和服务器，其中，终端可以具体包括直播间的主播端和多个观众端(如观众端1、观众端2，……)，主播端和多个观众端分别可以通过互联网与服务器进行通信，服务器可以为直播间的主播端和多个观众端提供直播相关服务。其中，终端可以但不限于是智能手机、平板电脑和头戴式虚拟现实设备等；服务器可以用独立的服务器或者是多个服务器组成的服务器集群来实现。其中，该应用场景可以是元宇宙直播场景，服务器可以为直播间的主播和观众创建独立的元宇宙场景，搭建出一个与现实世界并行的虚拟空间，通过利用科技手段进行链接与创造出一个现实世界映射与交互的虚拟世界，可以在该虚拟空间中展示如人物、动物等各种三维的虚拟形象，主播和观众在该虚拟空间中可以与三维的虚拟形象进行自由的互动，例如在元宇宙场景下，当用户带上VR设备时，眼睛会看到三维的视觉的画面内容，获得更多更为丰富的立体交互及3D特效渲染效果。

具体的，直播间的用户可以通过如手机、头戴式虚拟现实设备(如VR设备)等终端完成人机交互，实现基本的控制操作，如手势移动切换，选择退出等，终端可以接收并显示服务器发送的如直播视频流、虚拟礼物等数据，为元宇宙场景显示信息，同时为用户提供元宇宙信息。在包含但不限于是元宇宙直播场景中，基于本申请提供的虚拟特效播放方法，终端可以通过头戴式虚拟现实设备在虚拟现实直播间中播放3D虚拟特效模型，观众可以在观众端通过头戴式虚拟现实设备发出虚拟礼物赠送请求，终端可以在虚拟现实直播间中播放该虚拟特效的3D虚拟特效模型，在播放过程中，主播或者观众可以通过终端上的触控设备、传感器(比如穿戴设备的手柄、VR设备传感器)等输入触控动作，对3D虚拟特效模型播放状态进行控制，使得播放具有更生动的表现效果，特别是在元宇宙直播场景下的虚拟特效播放中，丰富元宇宙直播中虚拟特效的呈现样式及其特效的播放形式，有利于促进元宇宙直播中主播和观众的互动。

本申请的技术方案，特别适应于头戴式虚拟现实设备上，如VR设备，当用户带上VR设备时，在视觉中可以看到一个完全3D空间视觉，并可以结合穿戴设备的手柄、传感器、摄像头等进行触控，获得更为丰富的交互及3D特效渲染效果。

以下基于如图1所示的应用环境，结合各实施例及相应附图，对本申请的虚拟特效播放方法进行说明。

在一个实施例中，如图2所示，图2是一个实施例的虚拟特效播放方法流程图，可以包括以下步骤：

步骤S10，获取客户端的虚拟特效播放的业务场景。

此步骤中，首先确定客户端上展示的业务场景，例如在视频直播间中，业务场景可以包括：礼物特效播放、进场秀、IM聊天界面、个人主页界面等等。

对于业务场景，针对不同用户类型可以设置不同的权限；例如，对于特权用户，可以使用多种特效播放功能；对于非特权用户，使用基础特效播放功能。

步骤S20，根据所述业务场景从数据库中加载3D虚拟特效模型及其预制脚本；其中，所述预制脚本为所述3D虚拟特效模型预配置触控能力。

具体的，根据业务场景从预先存储3D虚拟特效模型及其预制脚本的数据库中，选择相应要播放的3D虚拟特效模型及预制脚本，预制脚本预先为3D虚拟特效模型预配置触控能力，可以实现在播放器播放3D模型时执行特定的模型动作和控制功能。

在利用播放器播放3D虚拟特效模型过程中，可以运行预制脚本来对3D虚拟特效模型进行触控操作，由于数据库中存储有各种3D虚拟特效模型以及预制脚本，不同预制脚本配置不同的控制模式，因此客户端根据需求选择3D虚拟特效模型之后，加载相应的预制脚本到客户端本地，例如，虚拟人物模型的走路、站立、举手、说话、跳舞等，以及角色模型的跳、飞等。

如上述的3D虚拟特效模型和预制脚本，其是通过预先制作并存储在数据库中，下面就3D虚拟特效模型和预制脚本的制作进行实施例阐述。

为了便于提高预制脚本的复用效率，可以通过一个管理系统来管理3D虚拟特效模型和预制脚本的制作及存储过程；在一个实施例中，预制脚本的制作及存储过程可以包括如下步骤：

(1)基于3D建模制作3D虚拟特效模型。

作为一个实施例，对于3D虚拟特效模型的制作，可以包括如下：

根据虚拟特效构建3D虚拟特效模型，并制作所述3D虚拟特效模型相应的模型素材；获取虚拟特效使用的音乐资源，将音乐资源匹配到所述3D虚拟特效模型中。

具体的，在可以由美术设计师来设计3D虚拟特效模型及相关素材；由音乐创作者创作所需的音频资源，然后将3D虚拟特效模型、相关素材及音乐资源上传到管理系统。

示例性的，3D虚拟特效模型可以由设计人员按照一定的规范进行设计(规范的设计可以保持动作脚本的复用性)，设计3D虚拟特效模型的骨骼关节，骨骼关节需要标识运动的精细程度，一般情况下，越高精度的3D虚拟特效模型骨骼关节数量跟面数设计越精细，另外，3D虚拟特效模型还需要声音资源、背景音乐和表情音乐等，比如，虚拟形象的说话的声音资源包，这些声音资源包也可以由音乐制作人提前制作跟录制。

(2)编辑所述3D虚拟特效模型的模型动作。

具体的，可以由设计师设置好路径，并利用动效编辑器来编辑播放时的模型动作。预制脚本制作的内容主要是模型动作与声音，模型动作与声音主要是通过代码脚本进行控制绑定，比如人物虚拟形象的模型动作，走路、站立、举手、说话、跳舞等，对于模型的骨骼关节及音乐素材也进行对应的代码脚本编写。

作为一种实施例，编辑模型动作的过程可以如下：由设计师根据所述3D虚拟特效模型需要展示的动作编辑骨骼节点对应的代码脚本，以及编辑相应的代码脚本将所述3D虚拟特效模型与音乐资源进行绑定。

(3)在所述3D虚拟特效模型上添加触控附加能力。

此处所指的触控附加能力主要是指触摸能力和脚本控制能力，包括触摸、结合加速度传感器、速度、计步器、方向传感器、陀螺仪、光线、声音等传感器等产生的数据的脚本控制能力。

作为一个实施例，在添加触摸能力时，可以在3D虚拟特效模型的骨骼节点上设置一个设定半径的透明球体，在所述设定半径内设置响应触摸点击事件的功能；通过代码脚本配置基于状态数据控制所述3D虚拟特效模型的功能。

具体的，通过自身透明且有一定的半径的球体，当在该半径范围内被触摸时，实时通知终端设备点击区域位置，终端设备被告知点击区域后，在界面绘制出对应的点击视图，用户可以通过点击视图并通知到播放器执行对应的点击事件。

(4)根据所述模型动作和附加能力生成预制脚本，并导出所述3D虚拟特效模型和预制脚本存储在数据库中。

具体的，通过前面步骤(2)和(3)利用动效编辑器编辑了模型动作和添加附件能力的代码脚本之后，将模型动作和附加能力的代码脚本生成预制脚本，然后将3D虚拟特效模型和预制脚本一并导出，然后存储在数据库中。

作为实施例，优选的，在将3D虚拟特效模型和预制脚本导出之前，还可以在动效编辑器上对所述3D虚拟特效模型进行模型动作的预览，检验模型动作效果，在确认后再导出存储。

另外，作为实施例，在制作预制脚本时，还可以由开发人员直接编写3D虚拟特效模型的模型动作和附加能力的代码脚本，然后直接导出为预制脚本上传至管理系统进行应用。

在一个实施例中，基于前述的管理系统基础上，在导出预制脚本之后，还可以根据所述3D虚拟特效模型的动作类型将对应的代码脚本进行分类保存；按照动作类型分别为每一种展示动作的脚本绑定唯一的脚本ID并添加描述信息。

具体的，为了便于对预制脚本进行复用和管理，针对于各种类型的模型动作，需要对不同的脚本进行统一管理，绑定脚本唯一的模型ID标识，添加预制脚本的描述信息，如名字、动作含义等，对预制脚本进行场景、动作、时间、物体等等类别进行分类，然后按分类存储在数据库中；后续需要使用时可以直接从数据库中搜索模型ID。

通过预制脚本的统一管理，能够在后续开发3D虚拟特效模型的相同动作时，便于直接复用，从而提升了预制脚本制作的效率。

步骤S30，将所述预制脚本绑定到所述3D虚拟特效模型，并调用播放器播放所述3D虚拟特效模型。

此步骤中，下载所需要播放的3D虚拟特效模型，同时将下载的将预制脚本绑定到3D虚拟特效模型上，然后调用客户端上的播放器，使用的播放器可以是3D播放器或常规的3D渲染引擎，开始播放3D虚拟特效模型并进行相应的模型动作呈现和相应的控制功能。

具体的，在下载3D虚拟特效模型对应代码脚本所附带的图片素材、音乐资源以及预制脚本之后，控制3D虚拟特效模型按预制脚本指令进行对应的动作呈现；例如：以虚拟人物模型为例，根据预制脚本可以控制虚拟人物模型进行走路的动作，指定模型进行运动的骨骼，方向移动，移动的坐标以及移动时间等。

通过预制脚本绑定到3D虚拟特效模型的绑定关系，预制脚本可以预先给3D虚拟特效模型定义了触控能力，包括在播放过程中展示特定指定动作能力、音频播放能力等等；对于不同权限的用户可以匹配不同的预制脚本从而获得不同级别的触控能力；例如，在直播间中，具有进场秀特权的用户，可以具备预制脚本的所有能力，同时还可以关联预制脚本的能力与用户的成长等级，根据成长等级的高低来解锁预制脚本的权限。

在一个实施例中，在将预制脚本绑定到3D虚拟特效模型时，首先进行模型匹配检查；具体的，首先获取加载的预制脚本的脚本ID和3D虚拟特效模型的模型ID；判断脚本ID与模型ID是否相匹配，如是匹配，则将所述预制脚本绑定到3D虚拟特效模型。

上述实施例中，客户端在下载到预制脚本之后，判断模型动作对应的预制脚本的脚本ID是否与当前3D虚拟特效模型的模型ID是否相匹配，从而在客户端播放特效之前进行匹配检查，避免在播放时出现所使用的模型动作与3D虚拟特效模型不一致的情况。

由于在元宇宙直播场景下，观众用户可能会在不同的终端设备上观看直播，如移动端设备、PC端设备、VR设备，因此不同终端设备上观看及交互有所差异；据此，本申请的虚拟特效播放方法，在调用播放器播放所述3D虚拟特效模型之前，还可以包括如下：

(1)若所述播放器的运行设备为平面设备，获取当前网络状态，并根据所述网络状态选择所述播放器的分辨率。

例如，当观众通过移动手机端、PC端、平板等设备进行播放时，可以根据网络情况，选择1920*1080，1280*720等不同的分辨率的尺寸进行特效渲染，若用户没有选择，则可以设定根据网络情况、设备的性能(内存、CPU、GPU)、及选择历史、运营的情况等，选择1920*1080，1280*720等不同分辨率去渲染特效尺寸。

(2)若所述播放器的运行设备为VR设备，获取当前网络状态以及运行设备的性能参数，并根据所述网络状态以及性能参数选择所述播放器的播放角度；其中，播放角度包括360°、180°或90°；对应的，播放器通过一个全景球体、半球体或1/4球体播放所述3D虚拟特效模型的画面内容。

例如，当观众通过VR设备进行特效播放时，根据网络情况，选择360度的全景播放特效，或者180度、90度的播放特效，若用户没有选择，则根据网络情况、设备的性能(内存、CPU、GPU)、选择历史、运营的情况等，选择360度、180度、90度的播放特效，此时观众端对应的特效是对应通过一个球体、半球体、1/4球体去进行播放特效。

步骤S40，在播放过程中，基于所述预制脚本控制所述3D虚拟特效模型的画面渲染过程。

此步骤中，在播放器播放3D虚拟特效模型过程中，利用所绑定的预制脚本的模型动作和附加能力，控制3D虚拟特效模型进行对应的动作来渲染相关画面内容，并且可以执行相应的触控功能。

在一个实施例中，利用预制脚本所配置的触摸能力，当用户对3D虚拟特效模型进行触摸操作时，则播放器处理逻辑可以如下：

将所述透明球体的半径范围实时通知客户端，并根据所述半径范围在客户端界面绘制出对应的点击区域；当检测到用户点击所述点击区域时，将发生的点击事件所对应的触控指令通知播放器执行相应的播放逻辑。

具体的，在元宇宙场景下，点击过程由播放器、触摸层和客户端界面交互完成，通过3D虚拟特效模型的骨骼节点上的透明球体，当被点击时实时通知客户端点击区域的位置，客户端被告知点击区域后，在客户端界面绘制出对应的点击视图，用户可以通过点击视图，由客户端界面通知到播放器执行对应的点击事件。

参考图3所示，图3是一个示例的播放器与触摸层交互时序图；具体可以包括如下：

s101，播放器读取3D虚拟特效模型，并创建若干个透明球体；

s102，播放器通过JS通讯方式将透明球体的中心位置和半径实时传送给触摸层；

s103，触摸层根据中心位置和半径绘制出视图；

s104，触摸层在视图上设置点击事件；

s105，播放器通过JS通讯方式再次将透明球体的中心位置和半径实时传送给触摸层；

s106，触摸层根据新的中心位置移动视图；

s107，用户通过客户端界面点击视图在触摸层产生点击事件；

s108，触摸层通过JS通讯方式将被点击透明球体id传递给播放器；

s109，播放器根据具体被点击的透明球体，执行相应的点击事件响应逻辑。

上述实施例的技术方案，通过在播放过程中，利用透明球体创建的视图接收触摸点击事件，使得3D虚拟特效模型在播放过程中具备了触摸能力，从而可以提高3D虚拟特效模型播放效果。

在一个实施例中，根据预制脚本所添加的加速度传感器、速度、计步器、方向传感器、陀螺仪、光线、声音等传感器数据的脚本控制能力；在播放器播放3D虚拟特效模型的过程中，利用数据接口读取这些传感器数据，可以实现对3D虚拟特效模型播放视角、特效内容进行控制，比如，用户可以通过预制脚本来从不同视觉角度观看3D虚拟特效模型的渲染画面，添加太阳光线特效等。

综合上述各实施例的技术方案，参考图4所示，图4是一个示例的虚拟特效播放的整体流程图，基于该技术方案，可以设计一种3D特效播放器，应用于各种虚拟特效播放场景中，特别是元宇宙场景下，针对于客户端播放3D虚拟特效的需求，通过预先制作脚本为3D虚拟特效配置相应的触控能力，并在客户端播放时，利用绑定的3D虚拟特效及预制脚本，从而为用户与3D虚拟特效播放互动提供了交互机控制方案，在播放3D虚拟特效过程中，用户可以与3D虚拟特效进行实时互动，提升虚拟特效播放的交互性，特别是在应用于VR设备中，可以获得更加炫酷的播放效果。

为了更加清晰本申请技术方案，下面结合在网络直播间上赠送虚拟礼物的应用场景，对于在元宇宙场景下的虚拟特效播放方案。

直播间的特效播放场景包括：礼物特效播放、进场秀、IM聊天界面、个人主页界面等外露入口，下面就礼物特效播放和进场秀两者场景进行举例。

一、在礼物特效播放场景下：

在VR直播场景下，礼物特效的选择及赠送交互方式包括平面礼物与立体礼物，其中：

(1)若所述礼物特效是平面礼物，通过VR设备的手柄的起点开始发射一条有限长度的射线，在礼物特效与所述射线形成夹角时，确认赠送该礼物特效。

具体的，参考图5所示，图5是一个平面礼物选择示例图，通过射线发射点击为主，在VR手柄的起点开始发射一条有限长度的射线，一般射线长度不超过球体的半径，当礼物栏所在礼物格子的平面与手柄发射所射线有夹角(面与线不平行、有夹角则认为线与面相交)，用户在点击确认操作，确认赠送该礼物特效。

(2)若所述礼物特效是立体礼物，通过VR设备发射射线选择礼物特效，并通过手柄的抓取按键抓取礼物特效，确认赠送该礼物特效。

具体的，参考图6所示，图6是一个立体礼物选择示例图，通过VR手柄抓取或者模拟人手的方式进行交互，当发射射线选择礼物栏的礼物特效后，按手柄的抓取按键，将对应立体的礼物抓取到手柄位置；通过调整立体礼物的坐标到手柄坐标的合适位置，通过模拟人手拿着礼物特效的方式，将整个礼物展示柜抓取过来，同理，调整礼物特效的展示柜的坐标到手柄合适的坐标位置，当手柄射线与对应礼物相交时，按抓取按键抓取礼物，使用另外个手柄进行点击确认，确认后赠送出该立体礼物特效。

在一个实施例中，对于礼物特效赠送之后，在客户端上，礼物特效的下载及播放逻辑，可以包括如下：

s201，读取礼物播放队列的礼物特效放入到播放器的等待队列；

s202，从等待队列中依次读取特效礼物开始进行渲染；

s203，打开点击区域并进行倒计时播放礼物特效，以及在礼物特效播放完成后，清除点击区域；

s204，向所述礼物播放队列和等待队列发送完成播放的通知消息。

具体的，参考图7所示，图7是一个示例的礼物特效播放逻辑图，在原有逻辑中：首先从编辑器导出资源，下发到资源服务器，配置礼物列表，然后通过用户进行送礼，送礼后下载文件，如果文件下载完，则添加到大礼物队列，否则加入到下载队列，直至下载完毕。

在新增逻辑中：调用播放器，礼物特效加入到等待队列，判断渲染引擎是否准备完毕，在准备完毕后调用播放器的JS代码，传入资源包；然后通过播放器播放特效，播放器通过网页视图webview播放，渲染引擎打开点击区域并倒计时播放特效，当倒计时到达时隐藏特效，播放完成后通知网页视图webview清除点击区域，并通知播放器，播放器再分别通知大礼物队列和等待队列。

上述实施例的技术方案，在原有赠送礼物的播放逻辑上增加了特效播放器的处理逻辑，从而使得在播放3D虚拟特效过程中，用户可以与3D虚拟特效进行实时互动，具有更好的用户体验。

在一个实施例中，在调用播放器播放3D虚拟特效模型时，直播间需要进行主播视频流与礼物特效画面内容的推流，为了实现了3D虚拟特效模型的模型动作与视频画面同步，本实施例针对于直播间内的客户端收到礼物广播后，在进行礼物特效画面的渲染时提供如下同步方案，具体包括如下：

(1)启动主播客户端的播放器加载所述3D虚拟特效模型的画面内容；在主播客户端将对应的礼物特效渲染图层与主播视频流推送到各个观众客户端。

具体的，如果要实现礼物特效与直播画面的实时同步，则采取推流同步方案，即当收到礼物特效广播时，在主播客户端将对应的礼物特效渲染层与主播视频流一起推送到各个观众客户端，此时观众客户端看到的视频画面与礼物特效实时同步。

(2)启动观众客户端的播放器加载所述3D虚拟特效模型的画面内容，若所述礼物特效是平面礼物，则在空间平面上渲染礼物特效的画面内容，若所述礼物特效是立体礼物，则在立体空间上渲染画面内容。

具体的，如果不要求礼物特效与直播音视频画面的实时同步，对于平面礼物，则在合适的平面通过执行程序脚本，在球体合适的空间平面渲染礼物特效，对于立体礼物，则在球体中心附近，通过执行程序脚本在球体合适的立体空间渲染3D的特效及音效，在渲染时，礼物特效渲染位置不遮挡主播的人体位置。

进一步的，在进行礼物特效画面的渲染之后，如果礼物特效播放成功，则向直播服务器上报3D虚拟特效模型对应的模型ID、播放对应预制脚本成功的通知信息，如果播放失败，则上报3D虚拟特效模型对应的模型ID播放失败的原因，便于形成告警及问题修复。

综合上述实施例的技术方案，在播放直播间的虚拟特效时，可以丰富虚拟特效表现形式，提高虚拟特效的层次感、空间感和立体感，使得直播过程中具有更加生动的表现效果，特别是应用于元宇宙直播场景下的虚拟特效播放，丰富元宇宙直播中虚拟礼物、进场秀以及虚拟形象的样式促进元宇宙直播中主播和观众的互动。

二、在进场秀播放场景下：

例如，特权用户进入直播间、IM聊天界面、个人主页等界面时，向直播服务器获取当前特权用户uid下的进场秀模型id跟对应的成长等级，下载3D虚拟特效模型及其音频资源、预制脚本等；直播服务器会向当前用户所在的直播间、IM聊天界面的用户发送广播消息，非特权用户收到广播消息后，根据直播服务器下发的模型ID与成长等级，下载对应的3D虚拟特效模型及其音频资源、预制脚本等。

对于进场秀的效果，参考图8所示，图8是一个示例的进场秀效果对比图，图中左侧是常规方式的进场秀效果图，右侧则是采用本申请实施例提供的虚拟特效播放方法所呈现的进场秀效果；从对比可以看出，图中的模型为一条“飞龙”，飞龙可以通过3D模式进行动作，并在可以与用户进行交互，用户可以通过触摸能力来使得“飞龙”呈现出更加炫酷的交互效果。

应该理解的是，虽然如上所述的各实施例所涉及的流程图中的各个步骤按照箭头的指示依次显示，但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明，这些步骤的执行并没有严格的顺序限制，这些步骤可以以其它的顺序执行。而且，如上所述的各实施例所涉及的流程图中的至少一部分步骤可以包括多个步骤或者多个阶段，这些步骤或者阶段并不必然是在同一时刻执行完成，而是可以在不同的时刻执行，这些步骤或者阶段的执行顺序也不必然是依次进行，而是可以与其它步骤或者其它步骤中的步骤或者阶段的至少一部分轮流或者交替地执行。

基于同样的发明构思，本申请实施例还提供了一种用于实现上述所涉及的虚拟特效播放方法的虚拟特效播放装置。该装置所提供的解决问题的实现方案与上述方法中所记载的实现方案相似，故下面所提供的一个或多个虚拟特效播放装置实施例中的具体限定可以参见上文中对于虚拟特效播放方法的限定，在此不再赘述。

在一个实施例中，如图9所示，图9是一个实施例的虚拟特效播放装置结构示意图，可以包括如下：

场景获取模块10，用于获取客户端的虚拟特效播放的业务场景；

模型选择模块20，用于根据所述业务场景从数据库中加载3D虚拟特效模型及其预制脚本；其中，所述预制脚本为所述3D虚拟特效模型预配置触控能力；

特效播放模块30，用于将所述预制脚本绑定到所述3D虚拟特效模型，并调用播放器播放所述3D虚拟特效模型；

渲染控制模块40，用于在播放过程中，基于所述预制脚本控制所述3D虚拟特效模型的画面渲染过程。

上述虚拟特效播放装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于电子设备中的处理器中，也可以以软件形式存储于电子设备中的存储器中，以便于处理器调用执行以上各个模块对应的操作。

本实施例的虚拟特效播放装置可执行本申请的实施例所提供的一种虚拟特效播放方法，其实现原理相类似，本申请各实施例中的虚拟特效播放装置中的各模块所执行的动作是与本申请各实施例中的虚拟特效播放方法中的步骤相对应的，对于虚拟特效播放装置的各模块的详细功能描述具体可以参见前文中所示的对应的虚拟特效播放方法中的描述，此处不再赘述。

本申请提供了一种电子设备，该电子设备可以是终端，其内部结构图可以如图10所示。该电子设备包括通过系统总线连接的处理器、存储器、通信接口、显示屏和输入装置。其中，该电子设备的处理器用于提供计算和控制能力。该电子设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统和计算机程序。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该电子设备的通信接口用于与外部的设备进行有线或无线方式的通信，无线方式可通过WIFI、移动蜂窝网络、NFC(近场通信)或其他技术实现。该计算机程序被处理器执行时以实现一种虚拟特效播放方法。该电子设备的显示屏可以是液晶显示屏或者电子墨水显示屏，该电子设备的输入装置可以是显示屏上覆盖的触摸层，也可以是电子设备外壳上设置的按键、轨迹球或触控板，还可以是外接的键盘、触控板或鼠标等。

本领域技术人员可以理解，图10中示出的结构，仅仅是与本申请方案相关的部分结构的框图，并不构成对本申请方案所应用于其上的电子设备的限定，具体的电子设备可以包括比图中所示更多或更少的部件，或者组合某些部件，或者具有不同的部件布置。

本申请还提供了一种计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现上述各虚拟特效播放方法实施例中的步骤。

本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，所述的计算机程序可存储于一非易失性计算机可读取存储介质中，该计算机程序在执行时，可包括如上述各方法的实施例的流程。其中，本申请所提供的各实施例中所使用的对存储器、数据库或其它介质的任何引用，均可包括非易失性和易失性存储器中的至少一种。非易失性存储器可包括只读存储器(Read-OnlyMemory，ROM)、磁带、软盘、闪存、光存储器、高密度嵌入式非易失性存储器、阻变存储器(ReRAM)、磁变存储器(Magnetoresistive Random Access Memory，MRAM)、铁电存储器(Ferroelectric Random Access Memory，FRAM)、相变存储器(Phase Change Memory，PCM)、石墨烯存储器等。易失性存储器可包括随机存取存储器(Random Access Memory，RAM)或外部高速缓冲存储器等。作为说明而非局限，RAM可以是多种形式，比如静态随机存取存储器(Static Random Access Memory，SRAM)或动态随机存取存储器(Dynamic RandomAccess Memory，DRAM)等。本申请所提供的各实施例中所涉及的数据库可包括关系型数据库和非关系型数据库中至少一种。非关系型数据库可包括基于区块链的分布式数据库等，不限于此。本申请所提供的各实施例中所涉及的处理器可为通用处理器、中央处理器、图形处理器、数字信号处理器、可编程逻辑器、基于量子计算的数据处理逻辑器等，不限于此。

需要说明的是，本申请所涉及的用户信息(包括但不限于用户设备信息、用户个人信息等)和数据(包括但不限于用于分析的数据、存储的数据、展示的数据等)，均为经用户授权或者经过各方充分授权的信息和数据。

以上实施例的各技术特征可以进行任意的组合，为使描述简洁，未对上述实施例中的各个技术特征所有可能的组合都进行描述，然而，只要这些技术特征的组合不存在矛盾，都应当认为是本说明书记载的范围。

以上所述实施例仅表达了本申请的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对本申请专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本申请构思的前提下，还可以做出若干变形和改进，这些都属于本申请的保护范围。因此，本申请的保护范围应以所附权利要求为准。

Claims (14)

1.一种虚拟特效播放方法，其特征在于，包括：

获取客户端的虚拟特效播放的业务场景；

根据所述业务场景从数据库中加载3D虚拟特效模型及其预制脚本；其中，所述预制脚本为所述3D虚拟特效模型预配置触控能力；

将所述预制脚本绑定到所述3D虚拟特效模型，并调用播放器播放所述3D虚拟特效模型；

在播放过程中，基于所述预制脚本控制所述3D虚拟特效模型的画面渲染过程。

2.根据权利要求1所述的虚拟特效播放方法，其特征在于，还包括：

基于3D建模制作3D虚拟特效模型；

编辑所述3D虚拟特效模型的模型动作，并在所述3D虚拟特效模型上添加触控附加能力；

根据所述模型动作和附加能力生成预制脚本，并导出所述3D虚拟特效模型和预制脚本存储在数据库中。

3.根据权利要求2所述的虚拟特效播放方法，其特征在于，所述基于3D建模制作3D虚拟特效模型，包括：

根据虚拟特效构建3D虚拟特效模型，并制作所述3D虚拟特效模型相应的模型素材；

获取虚拟特效使用的音乐资源，将音乐资源匹配到所述3D虚拟特效模型中。

4.根据权利要求3所述的虚拟特效播放方法，其特征在于，所述编辑所述3D虚拟特效模型的模型动作，并在所述3D虚拟特效模型上添加触控附加能力，包括：

根据所述3D虚拟特效模型需要展示的动作编辑骨骼节点对应的代码脚本，以及编辑相应的代码脚本将所述3D虚拟特效模型与音乐资源进行绑定；

在所述3D虚拟特效模型的骨骼节点上设置一个设定半径的透明球体，在所述设定半径内设置响应触摸点击事件的功能；

通过代码脚本配置基于状态数据控制所述3D虚拟特效模型的功能。

5.根据权利要求4所述的虚拟特效播放方法，其特征在于，基于所述预制脚本控制所述3D虚拟特效模型的画面渲染过程，包括：

将所述透明球体的半径范围实时通知客户端，并根据所述半径范围在客户端界面绘制出对应的点击区域；

当检测到用户点击所述点击区域时，将发生的点击事件所对应的触控指令通知播放器执行相应的播放逻辑。

6.根据权利要求2所述的虚拟特效播放方法，其特征在于，在根据所述模型动作和附加能力生成预制脚本之后，还包括：

根据所述3D虚拟特效模型的动作类型将对应的代码脚本进行分类保存；

按照动作类型分别为每一种展示动作的脚本绑定唯一的脚本ID并添加描述信息。

7.根据权利要求6所述的虚拟特效播放方法，其特征在于，将所述预制脚本绑定到所述3D虚拟特效模型，包括：

获取加载的预制脚本的脚本ID和3D虚拟特效模型的模型ID；

若所述脚本ID与模型ID相匹配，则将所述预制脚本绑定到3D虚拟特效模型。

8.根据权利要求1所述的虚拟特效播放方法，其特征在于，在调用播放器播放所述3D虚拟特效模型之前，还包括：

若所述播放器的运行设备为平面设备，获取当前网络状态，并根据所述网络状态选择所述播放器的分辨率；

若所述播放器的运行设备为VR设备，获取当前网络状态以及运行设备的性能参数，并根据所述网络状态以及性能参数选择所述播放器的播放角度。

9.根据权利要求1所述的虚拟特效播放方法，其特征在于，所述虚拟特效为直播间VR直播场景下的礼物特效；

所述调用播放器播放所述3D虚拟特效模型，包括：

启动主播客户端的播放器加载所述3D虚拟特效模型的画面内容；在主播客户端将对应的礼物特效渲染图层与主播视频流推送到各个观众客户端；

或者

启动观众客户端的播放器加载所述3D虚拟特效模型的画面内容，若所述礼物特效是平面礼物，则在空间平面上渲染礼物特效的画面内容，若所述礼物特效是立体礼物，则在立体空间上渲染画面内容。

10.根据权利要求9所述的虚拟特效播放方法，其特征在于，还包括：

若所述礼物特效是平面礼物，通过VR设备的手柄的起点开始发射一条有限长度的射线，在礼物特效与所述射线形成夹角时，确认赠送该礼物特效；

若所述礼物特效是立体礼物，通过VR设备发射射线选择礼物特效，并通过手柄的抓取按键抓取礼物特效，确认赠送该礼物特效。

11.根据权利要求10所述的虚拟特效播放方法，其特征在于，所述虚拟特效为直播间VR直播场景下的礼物特效；

所述调用播放器播放所述3D虚拟特效模型，包括：

读取礼物播放队列的礼物特效放入到播放器的等待队列；

从等待队列中依次读取特效礼物开始进行渲染；

打开点击区域并进行倒计时播放礼物特效，以及在礼物特效播放完成后，清除点击区域；

向所述礼物播放队列和等待队列发送完成播放的通知消息。

12.一种虚拟特效播放装置，其特征在于，包括：

场景获取模块，用于获取客户端的虚拟特效播放的业务场景；

模型选择模块，用于根据所述业务场景从数据库中加载3D虚拟特效模型及其预制脚本；其中，所述预制脚本为所述3D虚拟特效模型预配置触控能力；

特效播放模块，用于将所述预制脚本绑定到所述3D虚拟特效模型，并调用播放器播放所述3D虚拟特效模型；

渲染控制模块，用于在播放过程中，基于所述预制脚本控制所述3D虚拟特效模型的画面渲染过程。

13.一种电子设备，包括存储器和处理器，所述存储器存储有计算机程序，其特征在于，所述处理器执行所述计算机程序时实现权利要求1至11中任一项所述的虚拟特效播放方法的步骤。

14.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现权利要求1至11中任一项所述的虚拟特效播放方法的步骤。

Images