CN113784160A - 视频数据生成方法、装置、电子设备及可读存储介质 - Google Patents
视频数据生成方法、装置、电子设备及可读存储介质 Download PDFInfo
- Publication number
- CN113784160A CN113784160A CN202111057035.5A CN202111057035A CN113784160A CN 113784160 A CN113784160 A CN 113784160A CN 202111057035 A CN202111057035 A CN 202111057035A CN 113784160 A CN113784160 A CN 113784160A
- Authority
- CN
- China
- Prior art keywords
- information
- video data
- virtual
- virtual object
- state
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 67
- 230000000875 corresponding effect Effects 0.000 claims abstract description 69
- 238000009877 rendering Methods 0.000 claims description 18
- 230000007704 transition Effects 0.000 claims description 14
- 238000004590 computer program Methods 0.000 claims description 11
- 230000006870 function Effects 0.000 claims description 10
- 230000000007 visual effect Effects 0.000 claims description 10
- 230000001276 controlling effect Effects 0.000 claims description 5
- 238000010586 diagram Methods 0.000 description 12
- 230000009471 action Effects 0.000 description 9
- 239000011521 glass Substances 0.000 description 8
- 230000008859 change Effects 0.000 description 6
- 230000008569 process Effects 0.000 description 6
- 238000012545 processing Methods 0.000 description 6
- 238000005516 engineering process Methods 0.000 description 5
- 238000004891 communication Methods 0.000 description 4
- 230000008901 benefit Effects 0.000 description 3
- 238000006243 chemical reaction Methods 0.000 description 3
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 230000008921 facial expression Effects 0.000 description 3
- 230000003190 augmentative effect Effects 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 230000004927 fusion Effects 0.000 description 2
- 230000003993 interaction Effects 0.000 description 2
- 230000002452 interceptive effect Effects 0.000 description 2
- 206010044565 Tremor Diseases 0.000 description 1
- 238000013473 artificial intelligence Methods 0.000 description 1
- 230000001815 facial effect Effects 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000004080 punching Methods 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/21—Server components or server architectures
- H04N21/218—Source of audio or video content, e.g. local disk arrays
- H04N21/2187—Live feed
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
- H04N21/4781—Games
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/81—Monomedia components thereof
- H04N21/816—Monomedia components thereof involving special video data, e.g 3D video
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- Databases & Information Systems (AREA)
- Computer Graphics (AREA)
- Geometry (AREA)
- Software Systems (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Processing Or Creating Images (AREA)
Abstract
本公开提供了一种视频数据生成方法、装置、电子设备及存储介质，该视频数据生成方法包括：获取所述虚拟形象的第一控制信息，驱动所述虚拟形象做出第一相应动作；若所述第一控制信息和/或所述第一相应动作符合第一预设条件，调取与所述第一预设条件匹配的虚拟对象到所述3D场景中，并与所述虚拟形象特定部位绑定；获取所述虚拟形象的第二控制信息，若所述第二控制信息符合第二预设条件，驱动所述虚拟对象从第一状态转变为第二状态；基于所述3D场景信息生成视频数据。本申请实施例，能够提升视频数据的丰富性。
Description
技术领域
本公开涉及计算机技术领域，具体而言，涉及一种视频数据生成方法、装置、电子设备和存储介质。
背景技术
随着计算机技术与网络技术的发展，视频直播成为一种热门的交互方式。越来越多的用户选择通过直播平台来观看视频直播，比如游戏直播、新闻直播等。为了提升直播效果，出现了虚拟偶像代替主播进行视频直播的方式。
虚拟偶像的一种形态是对演员(中之人)动作捕捉获取控制信号，驱动游戏引擎中的虚拟形象动作，同时获取演员声音，将演员声音与虚拟形象画面融合，生成视频数据。然而，现有技术中，直播视频中只存在虚拟形象，缺少与虚拟形象互动的其他对象，导致视频数据较为单调。
发明内容
本公开实施例至少提供一种视频数据生成方法、装置、电子设备及存储介质。
第一方面，本公开实施例提供了一种视频数据生成方法，应用于电子设备，所述电子设备用于运行3D渲染环境，所述3D渲染环境中包含3D场景信息，所述3D场景信息用于渲染后生成3D场景，所述3D场景信息包含至少一个虚拟形象信息，所述虚拟形象信息用于渲染后生成虚拟形象，所述虚拟形象通过动作捕捉设备捕捉的控制信息驱动，所述方法包括：
获取所述虚拟形象的第一控制信息，驱动所述虚拟形象做出第一相应动作；
若所述第一控制信息和/或所述第一相应动作符合第一预设条件，调取与所述第一预设条件匹配的虚拟对象到所述3D场景中，并与所述虚拟形象特定部位绑定；
获取所述虚拟形象的第二控制信息，若所述第二控制信息符合第二预设条件，驱动所述虚拟对象从第一状态转变为第二状态；
基于所述3D场景信息生成视频数据。
本公开实施例中，在生成的视频数据中，不仅包含虚拟形象还包括与虚拟形象特定部位绑定的虚拟对象，且虚拟对象的状态还可以发生改变，如此，使得所生成的视频数据多样化，提升了视频数据的丰富性。
根据第一方面，在一种可能的实施方式中，所述获取所述虚拟形象的第二控制信息，若所述第二控制信息符合第二预设条件，驱动所述虚拟对象从第一状态转变为第二状态，包括：
获取所述虚拟形象的第二控制信息，驱动所述虚拟形象做出第二相应动作，所述第二相应动作与所述特定部位关联；
若所述第二控制信息和/或所述第二相应动作符合所述第二预设条件，驱动所述虚拟对象从所述第一状态转变为所述第二状态，且所述第一状态转变为第二状态与所述第二相应动作匹配。
本公开实施例中，基于第二控制信息驱动所述虚拟形象做出第二相应动作，且第二相应动作与虚拟对象的状态改变相匹配，如此可以提升生成的视频数据的趣味性。
根据第一方面，在一种可能的实施方式中，所述第二相应动作与所述特定部位关联是指，所述第二相应动作由所述特定部位做出。
本公开实施例中，由于第二相应动作由特定部位做出，可以提升第二动作与虚拟对象之间的适配性。
根据第一方面，在一种可能的实施方式中，所述特定部位包括多个。
根据第一方面，在一种可能的实施方式中，所述虚拟对象转变为所述第二状态，所述虚拟对象与所述特定部位解除绑定。
本公开实施例中，在虚拟对象转变为所述第二状态下，所述虚拟对象与所述特定部位解除绑定，如此，可以避免因特定部位与虚拟对象继续绑定，而引发的不协调画面产生。
根据第一方面，在一种可能的实施方式中，所述驱动所述虚拟对象从第一状态转变为第二状态，且所述第一状态转变为第二状态与所述第二相应动作匹配，包括：
驱动所述虚拟对象形态从第一形态转变为第二形态，且所述第一形态转变为第二形态与所述第二相应动作匹配。
根据第一方面，在一种可能的实施方式中，所述基于所述3D场景信息生成视频数据，包括：
获取虚拟镜头的镜头信息，所述虚拟镜头用于捕获所述3D场景的图像信息；
基于所述镜头信息以及所述3D场景信息生所述视频数据。
本公开实施例中，通过获取虚拟镜头的镜头信息，实现了从3D场景到2D画面的转换，保证了视频数据的生成效率。
根据第一方面，在一种可能的实施方式中，所述基于所述镜头信息以及所述3D场景信息生所述视频数据，包括：
确定所述虚拟对象的待展示面以及所述待展示面的朝向信息；
基于所述待展示面的朝向信息，控制所述虚拟镜头转动，使得所述虚拟镜头的视角方位始终朝向所述待展示面；
基于所述虚拟镜头的转动信息以及所述3D场景信息，生成所述生所述视频数据。
本公开实施例中，通过镜头旋转使得生成的视频数据中的虚拟对象的待展示面始终朝向观众，提升了视频数据的观赏性。
根据第一方面，在一种可能的实施方式中，所述基于所述镜头信息以及所述3D场景信息生所述视频数据，包括：
确定所述虚拟对象的待展示面以及所述待展示面的朝向信息；
基于所述待展示面的朝向信息，从多个虚拟镜头中确定视角方位朝向所述待展示面的至少一个目标虚拟镜头；
基于所述至少一个目标虚拟镜头的镜头信息以及所述3D场景信息，生成所述视频数据。
本公开实施例中，通过获取朝向待展示面的多个镜头所捕获的内容，来生成相应的视频数据，使得生成的视频数据中的虚拟对象的待展示面始终朝向观众，提升了视频数据的观赏性。
根据第一方面，在一种可能的实施方式中，所述基于所述3D场景信息生成视频数据之后，所述方法还包括：
获取音频数据，并将所述视频数据与所述音频数据融合生成直播视频流；
将所述直播视频流发送至目标平台，使得所述目标平台基于所述直播视频流进行视频直播。
本公开实施例中，通过将所述视频数据生成直播视频流，并将直播视频流发送至目标平台，实现了视频直播，进而可以更好的和观众进行互动。
根据第一方面，在一种可能的实施方式中，所述基于所述3D场景信息生成视频数据之后，所述方法还包括：
将所述视频数据发送至具有立体展示功能的电子设备中进行播放。
第二方面，本公开实施例提供了一种视频数据生成装置，包括：
第一驱动模块，用于获取所述虚拟形象的第一控制信息，驱动所述虚拟形象做出第一相应动作；
对象调取模块，用于若所述第一控制信息和/或所述第一相应动作符合第一预设条件，调取与所述第一预设条件匹配的虚拟对象到所述3D场景中，并与所述虚拟形象特定部位绑定；
第二驱动模块，用于获取所述虚拟形象的第二控制信息，若所述第二控制信息符合第二预设条件，驱动所述虚拟对象从第一状态转变为第二状态；
视频生成模块，用于基于所述3D场景信息生成视频数据。
根据第二方面，在一种可能的实施方式中，第二驱动模块具体用于：
获取所述虚拟形象的第二控制信息，驱动所述虚拟形象做出第二相应动作，所述第二相应动作与所述特定部位关联；
若所述第二控制信息和/或所述第二相应动作符合所述第二预设条件，驱动所述虚拟对象从所述第一状态转变为所述第二状态，且所述第一状态转变为第二状态与所述第二相应动作匹配。
根据第二方面，在一种可能的实施方式中，所述第二相应动作与所述特定部位关联是指，所述第二相应动作由所述特定部位做出。
根据第二方面，在一种可能的实施方式中，所述特定部位包括多个。
根据第二方面，在一种可能的实施方式中，所述虚拟对象转变为所述第二状态，所述虚拟对象与所述特定部位解除绑定。
根据第二方面，在一种可能的实施方式中，所述第二驱动模块具体用于：
驱动所述虚拟对象形态从第一形态转变为第二形态，且所述第一形态转变为第二形态与所述第二相应动作匹配。
根据第二方面，在一种可能的实施方式中，所述视频生成模块具体用于：
获取虚拟镜头的镜头信息，所述虚拟镜头用于捕获所述3D场景的图像信息；
基于所述镜头信息以及所述3D场景信息生所述视频数据。
根据第二方面，在一种可能的实施方式中，所述视频生成模块具体用于：
确定所述虚拟对象的待展示面以及所述待展示面的朝向信息；
基于所述待展示面的朝向信息，控制所述虚拟镜头转动，使得所述虚拟镜头的视角方位始终朝向所述待展示面；
基于所述虚拟镜头的转动信息以及所述3D场景信息，生成所述生所述视频数据。
根据第二方面，在一种可能的实施方式中，所述视频生成模块具体用于：
确定所述虚拟对象的待展示面以及所述待展示面的朝向信息；
基于所述待展示面的朝向信息，从多个虚拟镜头中确定视角方位朝向所述待展示面的至少一个目标虚拟镜头；
基于所述至少一个目标虚拟镜头的镜头信息以及所述3D场景信息，生成所述视频数据。
根据第二方面，在一种可能的实施方式中，所述视频数据为直播视频流，所述装置还包括：
数据融合模块，获取音频数据，并将所述视频数据与所述音频数据融合生成直播视频流；
视频发送模块，用于将所述直播视频流发送至目标平台，使得所述目标平台基于所述直播视频流进行视频直播。
根据第二方面，在一种可能的实施方式中，所述视频发送模块还用于：
将所述视频数据发送至具有立体展示功能的电子设备中进行播放。
第三方面，本公开实施例提供了一种电子设备，包括：处理器、存储器和总线，所述存储器存储有所述处理器可执行的机器可读指令，当电子设备运行时，所述处理器与所述存储器之间通过总线通信，所述机器可读指令被所述处理器执行时执行如第一方面所述的视频数据生成方法。
第四方面，本公开实施例提供了一种计算机可读存储介质，该计算机可读存储介质上存储有计算机程序，该计算机程序被处理器运行时执行如第一方面所述的视频数据生成方法。
为使本公开的上述目的、特征和优点能更明显易懂，下文特举较佳实施例，并配合所附附图，作详细说明如下。
附图说明
为了更清楚地说明本公开实施例的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，此处的附图被并入说明书中并构成本说明书中的一部分，这些附图示出了符合本公开的实施例，并与说明书一起用于说明本公开的技术方案。应当理解，以下附图仅示出了本公开的某些实施例，因此不应被看作是对范围的限定，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他相关的附图。
图1示出了本公开实施例所提供的一种视频数据生成方法的执行主体的示意图；
图2示出了本公开实施例所提供的一种视频数据生成方法的流程图；
图3示出了本公开实施例所提供的一种虚拟形象及虚拟对象处于第一状态的示意图；
图4示出了本公开实施例所提供的一种虚拟形象及虚拟对象处于第二状态的示意图；
图5示出了本公开实施例所提供的另一种视频数据生成方法的流程图；
图6示出了本公开实施例所提供一种发送视频数据的架构示意图；
图7示出了本公开实施例所提供的一种基于3D场景信息生成视频数据的方法流程图；
图8示出了本公开实施例所提供的一种基于3D场景信息及镜头信息生成视频数据的方法流程图；
图9示出了本公开实施例所提供的一种虚拟对象的待展示面的示意图；
图10示出了本公开实施例所提供的另一种基于3D场景信息及镜头信息生成视频数据的方法流程图；
图11示出了本公开实施例所提供的一种视频数据生成装置的结构示意图；
图12示出了本公开实施例所提供的另一种视频数据生成装置的结构示意图；
图13示出了本公开实施例所提供的一种电子设备的示意图。
具体实施方式
为使本公开实施例的目的、技术方案和优点更加清楚，下面将结合本公开实施例中附图，对本公开实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本公开一部分实施例，而不是全部的实施例。通常在此处附图中描述和示出的本公开实施例的组件可以以各种不同的配置来布置和设计。因此，以下对在附图中提供的本公开的实施例的详细描述并非旨在限制要求保护的本公开的范围，而是仅仅表示本公开的选定实施例。基于本公开的实施例，本领域技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例，都属于本公开保护的范围。
应注意到：相似的标号和字母在下面的附图中表示类似项，因此，一旦某一项在一个附图中被定义，则在随后的附图中不需要对其进行进一步定义和解释。
本文中术语“和/或”，仅仅是描述一种关联关系，表示可以存在三种关系，例如，A和/或B，可以表示：单独存在A，同时存在A和B，单独存在B这三种情况。另外，本文中术语“至少一种”表示多种中的任意一种或多种中的至少两种的任意组合，例如，包括A、B、C中的至少一种，可以表示包括从A、B和C构成的集合中选择的任意一个或多个元素。
随着计算机技术与网络技术的发展，视频直播成为一种热门的交互方式。越来越多的用户选择通过直播平台来观看视频直播，比如游戏直播、新闻直播等。为了提升直播效果，使得直播多样化，出现了虚拟偶像代替真实主播进行视频直播的方式。
虚拟偶像的一种形态是对演员(中之人)动作捕捉获取控制信号，驱动游戏引擎中的虚拟形象动作，同时获取演员声音，将演员声音与虚拟形象画面融合，生成视频数据。
经研究发现，现有技术中，直播视频中只存在虚拟形象，缺少与虚拟形象互动的其他对象，导致视频数据较为单调。
本公开提供了一种视频数据生成方法，应用于电子设备，所述电子设备用于运行3D渲染环境，所述3D渲染环境中包含3D场景信息，所述3D场景信息用于渲染后生成3D场景，所述3D场景信息包含至少一个虚拟形象信息，所述虚拟形象信息用于渲染后生成虚拟形象，所述虚拟形象通过动作捕捉设备捕捉的控制信息驱动，所述方法包括：
获取所述虚拟形象的第一控制信息，驱动所述虚拟形象做出第一相应动作；若所述第一控制信息和/或所述第一相应动作符合第一预设条件，调取与所述第一预设条件匹配的虚拟对象到所述3D场景中，并与所述虚拟形象特定部位绑定；获取所述虚拟形象的第二控制信息，若所述第二控制信息符合第二预设条件，驱动所述虚拟对象从第一状态转变为第二状态；基于所述3D场景信息生成视频数据。
其中，3D渲染环境是运行于电子设备中的3D游戏引擎，能够基于待渲染数据生成基于一个或者多个视角的影像信息。虚拟形象是存在于游戏引擎中的形象模型，能够在渲染后生成相应的虚拟形象。虚拟形象可以包括虚拟人物形象、虚拟动物形象、虚拟卡通形象等，在此不做限定。
动作捕捉设备包括穿在身体上的肢体动作捕捉设备(如衣服)、戴在手上的手部动作捕捉设备(如手套)、面部动作捕捉设备(如摄像头)以及声音捕捉设备(比如麦克风、喉麦等)。
本公开实施例中，在生成的视频数据中，不仅包含虚拟形象还包括与虚拟形象特定部位绑定的虚拟对象，且虚拟对象的状态还可以发生改变，如此，使得所生成的视频数据多样化，提升了视频数据的丰富性。
请参阅图1，为本公开实施例所提供的视频数据生成方法的执行主体的示意图，该方法的执行主体为电子设备100，其中电子设备100可以包括终端和服务器。例如，该方法可应用于终端中，终端可以是图1中所示智能手机10、台式计算机20、笔记本电脑30等，还可以是图1中未示出的智能音箱、智能手表、平板电脑等，并不限定。该方法还可应用于服务器40，或者可应用于由终端和服务器40所组成的实施环境中。服务器40可以是独立的物理服务器，也可以是多个物理服务器构成的服务器集群或者分布式系统，还可以是提供云服务、云数据库、云计算、云存储、大数据和人工智能平台等基础云计算服务的云服务器。
在另一些实施方式中，电子设备100还可以包括AR(Augmented Reality，增强现实)设备、VR(Virtual Reality，虚拟现实)设备、MR(Mixed Reality，混合现实)设备等。比如，AR设备可以是具有AR功能的手机或平板电脑，也可以是AR眼镜，在此不做限定。
需要说明的是，在一些实施方式中，服务器40可以通网络50分别与智能手机10、台式计算机20及笔记本电脑30进行通信。网络50可以包括各种连接类型，例如有线、无线通信链路或者光纤电缆等等。
本公开实施方式中，该视频数据生成方法应用于电子设备(比如图1中的服务器40)，所述电子设备用于运行3D渲染环境，所述3D渲染环境中包含3D场景信息，所述3D场景信息用于渲染后生成3D场景，所述3D场景信息包含至少一个虚拟形象信息，所述虚拟形象信息用于渲染后生成虚拟形象，所述虚拟形象通过动作捕捉设备捕捉的控制信息驱动。在一些可能的实现方式中，该视频数据生成方法可以通过处理器调用存储器中存储的计算机可读指令的方式来实现。
其中，3D场景信息可以运行于计算机CPU(Central Processing Uni，中央处理器)、GPU(Graphics Processing Unit，图形处理器)以及存储器中，其包含网格化的模型信息以及和贴图纹理信息。相应地，作为示例，虚拟形象数据和虚拟对象数据包含但不限于网格化的模型数据、体素数据及贴图纹理数据或者其组合。其中，网格包括但不限于三角形网格、四边形网格、其他多边形网格或者其组合。本公开实施例中，网格为三角形网格。
参见图2所示，为本公开实施例提供的视频数据生成方法的流程图，该视频数据生成方法包括以下S101～S104：
S101，获取所述虚拟形象的第一控制信息，驱动所述虚拟形象做出第一相应动作。
示例性地，第一控制信息由动作者(中之人)产生，可以实时采集动作者的动作数据以及声音数据，进而获取第一控制信息。例如，可以通过摄像头来捕捉动作者的面部表情信息以及身体动作信息，还可以通过麦克风来采集动作者的声音信息。在获取到第一控制信息之后，即可基于该第一控制信息驱动虚拟形象做出第一相应动作。
其中，第一相应动作是指虚拟形象做出的动作与第一控制信息一致或者相符合。比如，若获取到蹦跳的第一控制信息，则驱动虚拟形象做出蹦跳的第一相应动作；若获取到开心大笑的面部表情的第一控制信息，则驱动虚拟形象做出开心大笑的第一相应动作；若获取到包括说话的面部表情以及说话内容的音频的第一控制信息，则驱动虚拟形象嘴部动作并发生相应的声音。
S102，若所述第一控制信息和/或所述第一相应动作符合第一预设条件，调取与所述第一预设条件匹配的虚拟对象到所述3D场景中，并与所述虚拟形象特定部位绑定。
其中，第一预设条件可以根据虚拟对象的不同而预先设定。比如，若虚拟对象为扇子，则第一预设条件可以与扇子相关的第一控制信息和/或第一相应动作。
需要说明的是，判断是否符合第一预设条件的第一控制信息不仅包含第一控制信息，还包含基于第一控制信息驱动生成第一相应动作过程中产生的中间的数据信息，此处不做限定。此外，调取的虚拟对象数据包含网格化的模型数据及贴图纹理数据。
请参阅图3，为本公开实施例所提供的一种虚拟形象及虚拟对象处于第一状态的示意图，3D场景中包含虚拟形象A及虚拟对象B，本公开实施例中，虚拟对象B为扇子，将虚拟对象B调取到3D场景中后，可将虚拟对象B与虚拟形象A特定部位(手部)绑定；若虚拟对象为眼镜，则特定部位可以是头部。
在一些实施方式中，特定部位还可以是多个，比如，在虚拟对象B为雨伞的情况下，则需要将虚拟对象B与虚拟形象的两个手部(左手和右手)进行绑定。
可以理解，本公开实施例中的绑定是指虚拟对象B与虚拟形象A特定部位之间的实体位置绑定，其他实施例中，绑定还可以是指虚拟对象B与虚拟形象A特定部位之间的特定关系绑定。比如，在虚拟对象B为小鸟的情况下，可将小鸟与虚拟形象A的手指部位进行控制关系绑定，也即，通过手指的变化可以控制小鸟的飞行方向及飞行高度。
S103，获取所述虚拟形象的第二控制信息，若所述第二控制信息符合第二预设条件，驱动所述虚拟对象从第一状态转变为第二状态。
示例性地，第二控制信息与第一控制信息类似，也可以由动作者(中之人)产生，可以实时采集动作者的动作数据以及声音数据，进而获取第二控制信息。此外，第二控制信息还可以由遥控器等具有控制功能的设备产生。第二预设条件与第一预设条件类似，也可以根据虚拟对象的不同而具体设定。
示例性地，参见图4所示，在一些实施方式中，第二控制信息还驱动所述虚拟形象做出第二相应动作，所述第二相应动作与所述特定部位关联，若所述第二控制信息和/或所述第二相应动作符合所述第二预设条件，驱动所述虚拟对象从所述第一状态转变为所述第二状态，且所述第一状态转变为第二状态与所述第二相应动作匹配。
例如，以虚拟对象为扇子为例进行说明，若获取到手势变化的第二控制信息，则驱动虚拟形象做出第二相应动作，其中，第二相应动作是指从图3中的手部蜷缩(握拳)的动作变为伸出剪刀手势的动作。本实施例中，与虚拟对象B绑定的特定部位为虚拟形象A的手部，而第二动作也是由手部做出。因此，在一些实施方式中，所述第二相应动作与所述特定部位关联是指，所述第二相应动作由所述特定部位做出。
其中，驱动所述虚拟对象从第一状态转变为第二状态，可以是虚拟对象位置的变化，也可以是虚拟对象形态的变化。在一些实施方式中，可以驱动所述虚拟对象形态从第一形态转变为第二形态，且所述第一形态转变为第二形态与所述第二相应动作匹配。
具体地，第一状态转变为第二状态与所述第二相应动作匹配是指，第一状态转变为第二状态的转变过程与第二动作的变换过程存在预设的关联关系。例如，扇子的形态由图3中的闭合状态转变为图4中的开启状态，与之匹配的是虚拟形象的手部动作由蜷缩的形式变为伸开的方式，二者之间的变化过程均是由紧缩状态变为舒展状态的过程。
在一些实施方式中，所述虚拟对象转变为所述第二状态，所述虚拟对象与所述特定部位解除绑定。其中，解除绑定可以是指虚拟对象与特定部位分离，也可以是虚拟对象消失。例如，在虚拟对象为眼镜的情况下，虚拟对象由第一状态(戴上眼镜)转变为所述第二状态(摘下眼镜)后，可以将眼镜与头部解除绑定，此时，眼镜可以消失或者放置于其他位置，当然，也可以将眼镜与其他部位继续绑定，此处不做限定。
S104，基于所述3D场景信息生成视频数据。
其中，视频数据包括多张视频帧。可以理解，基于所述3D场景信息所生成视频数据，可以在本地展示，也可以形成录播视频，还可以形成直播视频流，用于直播。例如，若电子设备自带显示屏或者外接有显示装置，可以将生成的视频数据在本地进行播放。
参见图5所示，为本公开实施例提供的另一种视频数据生成方法的流程图，与图2中的方法不同的是，在步骤S104之后还包括以下步骤S105～S106：
S105，获取音频数据，并将所述视频数据与所述音频数据融合生成直播视频流。
S106，将所述直播视频流发送至目标平台，使得所述目标平台基于所述直播视频流进行视频直播。
示例性地，参见图6所示，视频数据为直播视频流，如此，可以实时地将视频数据发送至目标平台(如抖音平台或者B站)200，目标平台200再将视频数据发送至用户设备端300进行视频直播。
在另一些实施方式中，在得到视频数据后，还可以将视频数据发送至具有立体展示功能的电子设备中进行播放。本实施方式中，所述视频数据包括多路具有特定视觉特征(比如同朝向、特定距离)的视频数据。其中，具有立体展示功能的电子设备包括但不限于AR(Augment Reality，增强现实)设备、VR(Virtual Reality，虚拟现实)设备及MR(MixedReality，混合现实)设备等。
下面结合具体实施例对上述步骤S104进行详细说明。
可以理解，由于3D场景信息是立体场景，而视频数据为由2D的多帧图像帧组成，因此需要确定不同视角下的3D场景所形成的图像信息，因此，在一些实施方式中，参见图7所示，针对上述步骤S104，在基于所述3D场景信息生成视频数据时，可以包括以下S1041～S1042：
S1041，获取虚拟镜头的镜头信息，所述虚拟镜头用于捕获所述3D场景的图像信息。
S1042，基于所述镜头信息以及所述3D场景信息生所述视频数据。
示例性地，可以通过多个虚拟镜头从不同的视角来捕获所述3D场景的图像信息。其中，镜头信息包括虚拟镜头位置信息、镜头朝向信息及视角大小信息等。如此，基于所述镜头信息以及所述3D场景信息，即可生所述视频数据。
参见图8所示，在一些实施方式中，针对上述步骤S1042，在基于所述镜头信息以及所述3D场景信息生所述视频数据时，可以包括以下S10421～S10423：
S10421，确定所述虚拟对象的待展示面以及所述待展示面的朝向信息。
S10422，基于所述待展示面的朝向信息，控制所述虚拟镜头转动，使得所述虚拟镜头的视角方位始终朝向所述待展示面。
S10423，基于所述虚拟镜头的转动信息以及所述3D场景信息，生成所述生所述视频数据。
示例性地，参见图9所示，可以先确定虚拟对象B的待展示面B1，然后基于所述待展示面的朝向信息，控制所述虚拟镜头转动，使得所述虚拟镜头的视角方位始终朝向所述待展示面B1，如此，使得生成的视频数据中的虚拟对象B的待展示面B1始终朝向观众，可以方便用户清楚了解虚拟对象的展示信息。本实施方式中，待展示面B1为扇子的正面，也即有图案的一面。
参见图10所示，在另一些实施方式中，针对上述步骤S1042，在基于所述镜头信息以及所述3D场景信息生所述视频数据时，可以包括以下S1042a～S1042c：
S1042a，确定所述虚拟对象的待展示面以及所述待展示面的朝向信息。
S1042b，基于所述待展示面的朝向信息，从多个虚拟镜头中确定视角方位朝向所述待展示面的至少一个目标虚拟镜头。
S1042c，基于所述至少一个目标虚拟镜头的镜头信息以及所述3D场景信息，生成所述视频数据。
示例性地，还可以从多个虚拟镜头中选取视角方位朝向待展示面B1的目标虚拟镜头，如此，也可以使得生成的视频数据中的虚拟对象的待展示面始终朝向观众。
本领域技术人员可以理解，在具体实施方式的上述方法中，各步骤的撰写顺序并不意味着严格的执行顺序而对实施过程构成任何限定，各步骤的具体执行顺序应当以其功能和可能的内在逻辑确定。
基于同一技术构思，本公开实施例中还提供了与视频数据生成方法对应的视频数据生成装置，由于本公开实施例中的装置解决问题的原理与本公开实施例上述视频数据生成方法相似，因此装置的实施可以参见方法的实施，重复之处不再赘述。
参照图11所示，为本公开实施例提供的一种视频数据生成装置500的示意图，所述装置包括：
第一驱动模块501，用于获取所述虚拟形象的第一控制信息，驱动所述虚拟形象做出第一相应动作；
对象调取模块502，用于若所述第一控制信息和/或所述第一相应动作符合第一预设条件，调取与所述第一预设条件匹配的虚拟对象到所述3D场景中，并与所述虚拟形象特定部位绑定；
第二驱动模块503，用于获取所述虚拟形象的第二控制信息，若所述第二控制信息符合第二预设条件，驱动所述虚拟对象从第一状态转变为第二状态；
视频生成模块504，用于基于所述3D场景信息生成视频数据。
在一种可能的实施方式中，第二驱动模块503具体用于：
获取所述虚拟形象的第二控制信息，驱动所述虚拟形象做出第二相应动作，所述第二相应动作与所述特定部位关联；
若所述第二控制信息和/或所述第二相应动作符合所述第二预设条件，驱动所述虚拟对象从所述第一状态转变为所述第二状态，且所述第一状态转变为第二状态与所述第二相应动作匹配。
在一种可能的实施方式中，所述第二相应动作与所述特定部位关联是指，所述第二相应动作由所述特定部位做出。
在一种可能的实施方式中，所述特定部位包括多个。
在一种可能的实施方式中，所述虚拟对象转变为所述第二状态，所述虚拟对象与所述特定部位解除绑定。
在一种可能的实施方式中，所述第二驱动模块503具体用于：
驱动所述虚拟对象形态从第一形态转变为第二形态，且所述第一形态转变为第二形态与所述第二相应动作匹配。
在一种可能的实施方式中，所述视频生成模块504具体用于：
获取虚拟镜头的镜头信息，所述虚拟镜头用于捕获所述3D场景的图像信息；
基于所述镜头信息以及所述3D场景信息生所述视频数据。
在一种可能的实施方式中，所述视频生成模块504具体用于：
确定所述虚拟对象的待展示面以及所述待展示面的朝向信息；
基于所述待展示面的朝向信息，控制所述虚拟镜头转动，使得所述虚拟镜头的视角方位始终朝向所述待展示面；
基于所述虚拟镜头的转动信息以及所述3D场景信息，生成所述生所述视频数据。
在一种可能的实施方式中，所述视频生成模块504具体用于：
确定所述虚拟对象的待展示面以及所述待展示面的朝向信息；
基于所述待展示面的朝向信息，从多个虚拟镜头中确定视角方位朝向所述待展示面的至少一个目标虚拟镜头；
基于所述至少一个目标虚拟镜头的镜头信息以及所述3D场景信息，生成所述视频数据。
参见图12所示，在一种可能的实施方式中，所述视频数据为直播视频流，所述装置还包括：
数据融合模块505，获取音频数据，并将所述视频数据与所述音频数据融合生成直播视频流；
视频发送模块506，用于将所述直播视频流发送至目标平台，使得所述目标平台基于所述直播视频流进行视频直播。
在一种可能的实施方式中，所述视频发送模块506还用于：
将所述视频数据发送至具有立体展示功能的电子设备中进行播放。
关于装置中的各模块的处理流程、以及各模块之间的交互流程的描述可以参照上述方法实施例中的相关说明，这里不再详述。
基于同一技术构思，本公开实施例还提供了一种电子设备。参照图13所示，为本公开实施例提供的电子设备700的结构示意图，包括处理器701、存储器702、和总线703。其中，存储器702用于存储执行指令，包括内存7021和外部存储器7022；这里的内存7021也称内存储器，用于暂时存放处理器701中的运算数据，以及与硬盘等外部存储器7022交换的数据，处理器701通过内存7021与外部存储器7022进行数据交换。
本申请实施例中，存储器702具体用于存储执行本申请方案的应用程序代码，并由处理器701来控制执行。也即，当电子设备700运行时，处理器701与存储器702之间通过总线703通信，使得处理器701执行存储器702中存储的应用程序代码，进而执行前述任一实施例中所述的方法。
其中，存储器702可以是，但不限于，随机存取存储器(Random Access Memory，RAM)，只读存储器(Read Only Memory，ROM)，可编程只读存储器(Programmable Read－Only Memory，PROM)，可擦除只读存储器(Erasable Programmable Read－Only Memory，EPROM)，电可擦除只读存储器(Electric Erasable Programmable Read－Only Memory，EEPROM)等。
处理器701可能是一种集成电路芯片，具有信号的处理能力。上述的处理器可以是通用处理器，包括中央处理器(Central Processing Unit，CPU)、网络处理器(NetworkProcessor，NP)等；还可以是数字信号处理器(DSP)、专用集成电路(ASIC)、现场可编程门阵列(FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。可以实现或者执行本发明实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
可以理解的是，本申请实施例示意的结构并不构成对电子设备700的具体限定。在本申请另一些实施例中，电子设备700可以包括比图示更多或更少的部件，或者组合某些部件，或者拆分某些部件，或者不同的部件布置。图示的部件可以以硬件，软件或软件和硬件的组合实现。
本公开实施例还提供一种计算机可读存储介质，该计算机可读存储介质上存储有计算机程序，该计算机程序被处理器运行时执行上述方法实施例中的视频数据生成方法的步骤。其中，该存储介质可以是易失性或非易失的计算机可读取存储介质。
本公开实施例还提供一种计算机程序产品，该计算机程序产品承载有程序代码，所述程序代码包括的指令可用于执行上述方法实施例中的视频数据生成方法的步骤，具体可参见上述方法实施例，在此不再赘述。
其中，上述计算机程序产品可以具体通过硬件、软件或其结合的方式实现。在一个可选实施例中，所述计算机程序产品具体体现为计算机存储介质，在另一个可选实施例中，计算机程序产品具体体现为软件产品，例如软件开发包(Software Development Kit，SDK)等等。
所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的系统和装置的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。在本公开所提供的几个实施例中，应该理解到，所揭露的系统、装置和方法，可以通过其它的方式实现。以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，又例如，多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些通信接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外，在本公开各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个处理器可执行的非易失的计算机可读取存储介质中。基于这样的理解，本公开的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本公开各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(Read-OnlyMemory，ROM)、随机存取存储器(Random Access Memory，RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
最后应说明的是：以上所述实施例，仅为本公开的具体实施方式，用以说明本公开的技术方案，而非对其限制，本公开的保护范围并不局限于此，尽管参照前述实施例对本公开进行了详细的说明，本领域的普通技术人员应当理解：任何熟悉本技术领域的技术人员在本公开揭露的技术范围内，其依然可以对前述实施例所记载的技术方案进行修改或可轻易想到变化，或者对其中部分技术特征进行等同替换；而这些修改、变化或者替换，并不使相应技术方案的本质脱离本公开实施例技术方案的精神和范围，都应涵盖在本公开的保护范围之内。因此，本公开的保护范围应所述以权利要求的保护范围为准。
Claims (14)
1.一种视频数据生成方法，其特征在于，应用于电子设备，所述电子设备用于运行3D渲染环境，所述3D渲染环境中包含3D场景信息，所述3D场景信息用于渲染后生成3D场景，所述3D场景信息包含至少一个虚拟形象信息，所述虚拟形象信息用于渲染后生成虚拟形象，所述虚拟形象通过动作捕捉设备捕捉的控制信息驱动，所述方法包括：
获取所述虚拟形象的第一控制信息，驱动所述虚拟形象做出第一相应动作；
若所述第一控制信息和/或所述第一相应动作符合第一预设条件，调取与所述第一预设条件匹配的虚拟对象到所述3D场景中，并与所述虚拟形象特定部位绑定；
获取所述虚拟形象的第二控制信息，若所述第二控制信息符合第二预设条件，驱动所述虚拟对象从第一状态转变为第二状态；
基于所述3D场景信息生成视频数据。
2.根据权利要求1所述的方法，其特征在于，所述获取所述虚拟形象的第二控制信息，若所述第二控制信息符合第二预设条件，驱动所述虚拟对象从第一状态转变为第二状态，包括：
获取所述虚拟形象的第二控制信息，驱动所述虚拟形象做出第二相应动作，所述第二相应动作与所述特定部位关联；
若所述第二控制信息和/或所述第二相应动作符合所述第二预设条件，驱动所述虚拟对象从所述第一状态转变为所述第二状态，且所述第一状态转变为第二状态与所述第二相应动作匹配。
3.根据权利要求2所述的方法，其特征在于，所述第二相应动作与所述特定部位关联是指，所述第二相应动作由所述特定部位做出。
4.根据权利要求1所述的方法，其特征在于，所述特定部位包括多个。
5.根据权利要求1所述的方法，其特征在于，所述虚拟对象转变为所述第二状态，所述虚拟对象与所述特定部位解除绑定。
6.根据权利要求1所述的方法，其特征在于，所述驱动所述虚拟对象从第一状态转变为第二状态，且所述第一状态转变为第二状态与所述第二相应动作匹配，包括：
驱动所述虚拟对象形态从第一形态转变为第二形态，且所述第一形态转变为第二形态与所述第二相应动作匹配。
7.根据权利要求1所述的方法，其特征在于，所述基于所述3D场景信息生成视频数据，包括：
获取虚拟镜头的镜头信息，所述虚拟镜头用于捕获所述3D场景的图像信息；
基于所述镜头信息以及所述3D场景信息生所述视频数据。
8.根据权利要求7所述的方法，其特征在于，所述基于所述镜头信息以及所述3D场景信息生所述视频数据，包括：
确定所述虚拟对象的待展示面以及所述待展示面的朝向信息；
基于所述待展示面的朝向信息，控制所述虚拟镜头转动，使得所述虚拟镜头的视角方位始终朝向所述待展示面；
基于所述虚拟镜头的转动信息以及所述3D场景信息，生成所述生所述视频数据。
9.根据权利要求7所述的方法，其特征在于，所述基于所述镜头信息以及所述3D场景信息生所述视频数据，包括：
确定所述虚拟对象的待展示面以及所述待展示面的朝向信息；
基于所述待展示面的朝向信息，从多个虚拟镜头中确定视角方位朝向所述待展示面的至少一个目标虚拟镜头；
基于所述至少一个目标虚拟镜头的镜头信息以及所述3D场景信息，生成所述视频数据。
10.根据权利要求1所述的方法，其特征在于，所述基于所述3D场景信息生成视频数据之后，所述方法还包括：
获取音频数据，并将所述视频数据与所述音频数据融合生成直播视频流；
将所述直播视频流发送至目标平台，使得所述目标平台基于所述直播视频流进行视频直播。
11.根据权利要求1所述的方法，其特征在于，所述基于所述3D场景信息生成视频数据之后，所述方法还包括：
将所述视频数据发送至具有立体展示功能的电子设备中进行播放。
12.一种视频数据生成装置，其特征在于，包括：
第一驱动模块，用于获取所述虚拟形象的第一控制信息，驱动所述虚拟形象做出第一相应动作；
对象调取模块，用于若所述第一控制信息和/或所述第一相应动作符合第一预设条件，调取与所述第一预设条件匹配的虚拟对象到所述3D场景中，并与所述虚拟形象特定部位绑定；
第二驱动模块，用于获取所述虚拟形象的第二控制信息，若所述第二控制信息符合第二预设条件，驱动所述虚拟对象从第一状态转变为第二状态；
视频生成模块，用于基于所述3D场景信息生成视频数据。
13.一种电子设备，其特征在于，包括：处理器、存储器和总线，所述存储器存储有所述处理器可执行的机器可读指令，当电子设备运行时，所述处理器与所述存储器之间通过总线通信，所述机器可读指令被所述处理器执行时执行如权利要求1-11任一所述的视频数据生成方法。
14.一种计算机可读存储介质，其特征在于，该计算机可读存储介质上存储有计算机程序，该计算机程序被处理器运行时执行如权利要求1-11任一所述的视频数据生成方法。
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202111057035.5A CN113784160A (zh) | 2021-09-09 | 2021-09-09 | 视频数据生成方法、装置、电子设备及可读存储介质 |
| PCT/CN2022/113282 WO2023035897A1 (zh) | 2021-09-09 | 2022-08-18 | 视频数据生成方法、装置、电子设备及可读存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202111057035.5A CN113784160A (zh) | 2021-09-09 | 2021-09-09 | 视频数据生成方法、装置、电子设备及可读存储介质 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN113784160A true CN113784160A (zh) | 2021-12-10 |
Family
ID=78842112
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202111057035.5A Pending CN113784160A (zh) | 2021-09-09 | 2021-09-09 | 视频数据生成方法、装置、电子设备及可读存储介质 |
Country Status (2)
| Country | Link |
|---|---|
| CN (1) | CN113784160A (zh) |
| WO (1) | WO2023035897A1 (zh) |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN114356090A (zh) * | 2021-12-31 | 2022-04-15 | 北京字跳网络技术有限公司 | 一种控制方法、装置、计算机设备及存储介质 |
| CN114630173A (zh) * | 2022-03-03 | 2022-06-14 | 北京字跳网络技术有限公司 | 虚拟对象的驱动方法、装置、电子设备及可读存储介质 |
| CN115242980A (zh) * | 2022-07-22 | 2022-10-25 | 中国平安人寿保险股份有限公司 | 视频生成方法和装置、视频播放方法和装置及存储介质 |
| WO2023035897A1 (zh) * | 2021-09-09 | 2023-03-16 | 北京字跳网络技术有限公司 | 视频数据生成方法、装置、电子设备及可读存储介质 |
Citations (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103413353A (zh) * | 2013-07-31 | 2013-11-27 | 天脉聚源(北京)传媒科技有限公司 | 一种资源展示方法、装置和终端 |
| CN105425955A (zh) * | 2015-11-06 | 2016-03-23 | 中国矿业大学 | 多用户沉浸式全互动虚拟现实工程培训系统 |
| CN105828045A (zh) * | 2016-05-12 | 2016-08-03 | 浙江宇视科技有限公司 | 一种利用空间信息实现目标追踪的方法及装置 |
| CN107895399A (zh) * | 2017-10-26 | 2018-04-10 | 广州市雷军游乐设备有限公司 | 一种全方位视角切换方法、装置、终端设备及存储介质 |
| CN108632632A (zh) * | 2018-04-28 | 2018-10-09 | 网易（杭州）网络有限公司 | 一种网络直播的数据处理方法和装置 |
| US20190073830A1 (en) * | 2017-09-04 | 2019-03-07 | Colopl, Inc. | Program for providing virtual space by head mount display, method and information processing apparatus for executing the program |
| WO2020221186A1 (zh) * | 2019-04-30 | 2020-11-05 | 广州虎牙信息科技有限公司 | 一种虚拟形象控制方法、装置、电子设备及存储介质 |
| CN112870707A (zh) * | 2021-03-19 | 2021-06-01 | 腾讯科技（深圳）有限公司 | 虚拟场景中的虚拟物体展示方法、计算机设备及存储介质 |
| CN113327309A (zh) * | 2021-05-27 | 2021-08-31 | 百度在线网络技术（北京）有限公司 | 视频播放方法和装置 |
| CN113332704A (zh) * | 2021-06-28 | 2021-09-03 | 北京字跳网络技术有限公司 | 一种控制方法、装置以及计算机存储介质 |
Family Cites Families (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20140214629A1 (en) * | 2013-01-31 | 2014-07-31 | Hewlett-Packard Development Company, L.P. | Interaction in a virtual reality environment |
| CN109922354B9 (zh) * | 2019-03-29 | 2020-08-21 | 广州虎牙信息科技有限公司 | 直播互动方法、装置、直播系统及电子设备 |
| CN110991327A (zh) * | 2019-11-29 | 2020-04-10 | 深圳市商汤科技有限公司 | 交互方法及装置、电子设备和存储介质 |
| CN113784160A (zh) * | 2021-09-09 | 2021-12-10 | 北京字跳网络技术有限公司 | 视频数据生成方法、装置、电子设备及可读存储介质 |
-
2021
- 2021-09-09 CN CN202111057035.5A patent/CN113784160A/zh active Pending
-
2022
- 2022-08-18 WO PCT/CN2022/113282 patent/WO2023035897A1/zh unknown
Patent Citations (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103413353A (zh) * | 2013-07-31 | 2013-11-27 | 天脉聚源(北京)传媒科技有限公司 | 一种资源展示方法、装置和终端 |
| CN105425955A (zh) * | 2015-11-06 | 2016-03-23 | 中国矿业大学 | 多用户沉浸式全互动虚拟现实工程培训系统 |
| CN105828045A (zh) * | 2016-05-12 | 2016-08-03 | 浙江宇视科技有限公司 | 一种利用空间信息实现目标追踪的方法及装置 |
| US20190073830A1 (en) * | 2017-09-04 | 2019-03-07 | Colopl, Inc. | Program for providing virtual space by head mount display, method and information processing apparatus for executing the program |
| CN107895399A (zh) * | 2017-10-26 | 2018-04-10 | 广州市雷军游乐设备有限公司 | 一种全方位视角切换方法、装置、终端设备及存储介质 |
| CN108632632A (zh) * | 2018-04-28 | 2018-10-09 | 网易（杭州）网络有限公司 | 一种网络直播的数据处理方法和装置 |
| WO2020221186A1 (zh) * | 2019-04-30 | 2020-11-05 | 广州虎牙信息科技有限公司 | 一种虚拟形象控制方法、装置、电子设备及存储介质 |
| CN112870707A (zh) * | 2021-03-19 | 2021-06-01 | 腾讯科技（深圳）有限公司 | 虚拟场景中的虚拟物体展示方法、计算机设备及存储介质 |
| CN113327309A (zh) * | 2021-05-27 | 2021-08-31 | 百度在线网络技术（北京）有限公司 | 视频播放方法和装置 |
| CN113332704A (zh) * | 2021-06-28 | 2021-09-03 | 北京字跳网络技术有限公司 | 一种控制方法、装置以及计算机存储介质 |
Non-Patent Citations (1)
| Title |
|---|
| 贺振兴等, 郑州：河南科学技术出版社 * |
Cited By (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2023035897A1 (zh) * | 2021-09-09 | 2023-03-16 | 北京字跳网络技术有限公司 | 视频数据生成方法、装置、电子设备及可读存储介质 |
| CN114356090A (zh) * | 2021-12-31 | 2022-04-15 | 北京字跳网络技术有限公司 | 一种控制方法、装置、计算机设备及存储介质 |
| CN114356090B (zh) * | 2021-12-31 | 2023-11-07 | 北京字跳网络技术有限公司 | 一种控制方法、装置、计算机设备及存储介质 |
| CN114630173A (zh) * | 2022-03-03 | 2022-06-14 | 北京字跳网络技术有限公司 | 虚拟对象的驱动方法、装置、电子设备及可读存储介质 |
| CN115242980A (zh) * | 2022-07-22 | 2022-10-25 | 中国平安人寿保险股份有限公司 | 视频生成方法和装置、视频播放方法和装置及存储介质 |
| CN115242980B (zh) * | 2022-07-22 | 2024-02-20 | 中国平安人寿保险股份有限公司 | 视频生成方法和装置、视频播放方法和装置及存储介质 |
Also Published As
| Publication number | Publication date |
|---|---|
| WO2023035897A1 (zh) | 2023-03-16 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN113784160A (zh) | 视频数据生成方法、装置、电子设备及可读存储介质 | |
| TW202220438A (zh) | 擴增實境場景下的展示方法、電子設備及電腦可讀儲存介質 | |
| WO2023071443A1 (zh) | 虚拟对象控制方法、装置、电子设备及可读存储介质 | |
| US10516870B2 (en) | Information processing device, information processing method, and program | |
| JP6232423B2 (ja) | 情報処理装置、描画装置、方法及びプログラム | |
| CN111080759B (zh) | 一种分镜效果的实现方法、装置及相关产品 | |
| CN106730815B (zh) | 一种易实现的体感互动方法及系统 | |
| CN113852838B (zh) | 视频数据生成方法、装置、电子设备及可读存储介质 | |
| CN114900678B (zh) | 一种vr端端云结合的虚拟演唱会渲染方法及系统 | |
| CN111862348B (zh) | 视频显示方法、视频生成方法、装置、设备及存储介质 | |
| CN114615513B (zh) | 视频数据生成方法、装置、电子设备及存储介质 | |
| CN113709543B (zh) | 基于虚拟现实的视频处理方法、装置、电子设备和介质 | |
| CN114401442B (zh) | 视频直播及特效控制方法、装置、电子设备及存储介质 | |
| CN114095744B (zh) | 视频直播方法、装置、电子设备及可读存储介质 | |
| CN114745598A (zh) | 视频数据展示方法、装置、电子设备及存储介质 | |
| JP2019087226A (ja) | 情報処理装置、情報処理システムおよび表情画像出力方法 | |
| CN114984585A (zh) | 一种生成游戏角色的实时表情图片的方法 | |
| CN112714305A (zh) | 展示方法、装置、设备和计算机可读存储介质 | |
| CN114630173A (zh) | 虚拟对象的驱动方法、装置、电子设备及可读存储介质 | |
| KR102200239B1 (ko) | 실시간 cg 영상 방송 서비스 시스템 | |
| JP6609078B1 (ja) | コンテンツ配信システム、コンテンツ配信方法、およびコンテンツ配信プログラム | |
| WO2020194973A1 (ja) | コンテンツ配信システム、コンテンツ配信方法、およびコンテンツ配信プログラム | |
| CN116958344A (zh) | 虚拟形象的动画生成方法、装置、计算机设备及存储介质 | |
| CN114625468B (zh) | 增强现实画面的展示方法、装置、计算机设备及存储介质 | |
| JP7344084B2 (ja) | コンテンツ配信システム、コンテンツ配信方法、およびコンテンツ配信プログラム |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20211210 |
|
| RJ01 | Rejection of invention patent application after publication |