CN114697703A - 视频数据生成方法、装置、电子设备及存储介质 - Google Patents
视频数据生成方法、装置、电子设备及存储介质 Download PDFInfo
- Publication number
- CN114697703A CN114697703A CN202210339165.6A CN202210339165A CN114697703A CN 114697703 A CN114697703 A CN 114697703A CN 202210339165 A CN202210339165 A CN 202210339165A CN 114697703 A CN114697703 A CN 114697703A
- Authority
- CN
- China
- Prior art keywords
- client
- data
- video data
- video
- determining
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 70
- 239000000463 material Substances 0.000 claims abstract description 187
- 238000009877 rendering Methods 0.000 claims abstract description 54
- 230000006978 adaptation Effects 0.000 claims description 14
- 230000004927 fusion Effects 0.000 claims description 11
- 230000008569 process Effects 0.000 claims description 11
- 238000004590 computer program Methods 0.000 claims description 10
- 239000012634 fragment Substances 0.000 claims description 6
- 230000004044 response Effects 0.000 abstract description 8
- 230000003993 interaction Effects 0.000 abstract description 7
- 230000000694 effects Effects 0.000 description 15
- 238000010586 diagram Methods 0.000 description 13
- 238000012545 processing Methods 0.000 description 9
- 230000006854 communication Effects 0.000 description 6
- 238000004891 communication Methods 0.000 description 5
- 238000005516 engineering process Methods 0.000 description 4
- 230000006870 function Effects 0.000 description 4
- 230000003190 augmentative effect Effects 0.000 description 3
- 230000009286 beneficial effect Effects 0.000 description 3
- 230000008901 benefit Effects 0.000 description 3
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 230000009471 action Effects 0.000 description 2
- 239000013077 target material Substances 0.000 description 2
- 238000013473 artificial intelligence Methods 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 239000000126 substance Substances 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/235—Processing of additional data, e.g. scrambling of additional data or processing content descriptors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/488—Data services, e.g. news ticker
- H04N21/4882—Data services, e.g. news ticker for displaying messages, e.g. warnings, reminders
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/81—Monomedia components thereof
- H04N21/8146—Monomedia components thereof involving graphical data, e.g. 3D object, 2D graphics
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
- H04N5/265—Mixing
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computer Graphics (AREA)
- Databases & Information Systems (AREA)
- Human Computer Interaction (AREA)
- User Interface Of Digital Computer (AREA)
- Information Transfer Between Computers (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
- Processing Or Creating Images (AREA)
Abstract
本公开提供了一种视频数据生成方法、装置、电子设备及存储介质,该方法包括:响应于第一客户端发送的针对第一素材片段的第一触发指令,从所述第一客户端获取现实场景视频;基于所述第一触发指令,确定与所述第一素材片段对应的第一3D数据;基于所述现实场景视频以及所述第一3D数据,渲染生成第一视频数据,并将所述第一视频数据发送至所述第一客户端进行展示。本公开实施例,在服务端实现上述视频数据生成方法,如此,可以提升对用户触发操作的响应速度,进而提升用户的交互体验。
Description
技术领域
本公开涉及计算机技术领域,具体而言,涉及一种视频数据生成方法、视频数据生成装置、电子设备以及计算机可读存储介质。
背景技术
随着多媒体技术的发展,各类短视频软件层出不穷,由于视频内容具有多样性以及趣味性等特点,使得观看或者制作各类短视频逐渐成为一种热门的休闲娱乐方式。
短视频是由至少一个视频素材经渲染后生成的,目前,视频素材通常需要下载至客户端,并在客户端渲染后供用户进行操作。然而,由于客户端的运算能力有限,导致对用户的操作响应较慢,进而影响用户的使用体验。
发明内容
本公开实施例至少提供一种视频数据生成方法、视频数据生成装置、电子设备以及计算机可读存储介质,可以使得生成的视频数据内容的展示效果更加丰富,进而利于提升用户的观赏体验。
本公开实施例提供了一种视频数据生成方法,包括:
响应于第一客户端发送的针对第一素材片段的第一触发指令,从所述第一客户端获取现实场景视频;
基于所述第一触发指令,确定与所述第一素材片段对应的第一3D数据;
基于所述现实场景视频以及所述第一3D数据,渲染生成第一视频数据,并将所述第一视频数据发送至所述第一客户端进行展示。
本公开实施例中,由于第一3D数据是存储于服务端的,并在服务端完成上述视频数据生成的步骤,也即,无需将与第一素材片段对应的第一3D数据下载到客户端进行处理,如此,可以提升对用户触发操作的响应效率,进而提升用户的交互体验。
此外,将从第一客户端获取到的现实场景视频与第一素材片段对应的第一3D数据进行融合,使得生成的视频数据的内容的展示效果更加丰富,也即,可以呈现出虚实结合的效果,进而利于提升用户的观赏体验。
一种可选的实施方式中,在接收到所述第一客户端发送的针对多个第一素材片段的融合指令的情况下,所述方法还包括:
基于所述融合指令,确定与所述多个第一素材片段分别对应的第一3D数据;
基于所述现实场景视频以及多个第一3D数据,渲染生成第二视频数据,并将所述第二视频数据发送至所述第一客户端进行展示。
本公开实施例中,在接收到第一客户端发送的针对多个第一素材片段的融合指令的情况下,基于现实场景视频以及多个第一3D数据,渲染生成第二视频数据,也即,还可以根据用户需求将多个第一素材片段进行融合,以实现视频制作的乐趣,进而提升用户的观看体验。
一种可选的实施方式中,所述基于所述现实场景视频以及多个第一3D数据,渲染生成第二视频数据,包括:
在渲染生成所述第二视频数据的过程中,针对每个第一3D数据,基于所述现实场景视频以及所述第一3D数据,生成预览画面,并将每个预览画面分别发送至所述第一客户端进行展示。
本公开实施例中,在渲染生成第二视频数据的过程中,还针对每个第一3D数据,生成预览画面,并将每个预览画面发送至第一客户端进行展示,如此,可以减少用户等待展示视频数据的焦急感,有利于提升用户的使用体验。
一种可选的实施方式中,在预设时间段内接收到多个第一触发指令的情况下,所述方法还包括:
基于所述多个第一触发指令的数量,确定第一素材片段的第一数量,其中,每个第一触发指令对应一个第一素材片段;
获取所述第一客户端能够展示的第一素材片段的第二数量,所述第二数量由所述第一客户端的屏幕尺寸以及所述第一素材片段对应的画面展示尺寸确定;
在所述第一数量大于所述第二数量的情况下,所述基于所述第一触发指令,确定与所述第一素材片段对应的第一3D数据,包括:
从多个第一素材片段中确定与所述第二数量相同数量的多个目标第一素材片段,并确定与每个目标第一素材片段分别对应的目标第一3D数据;
所述基于所述现实场景视频以及所述第一3D数据,渲染生成第一视频数据,并将所述第一视频数据发送至所述第一客户端进行展示,包括:
基于所述现实场景视频以及每个目标第一3D数据,分别渲染生成多个目标第一视频数据,并将所述多个目标第一视频数据发送至所述第一客户端分别进行展示。
本公开实施例中,由于第一客户端的屏幕尺寸以及第一客户端能够展示的素材片段的个数存在限制,因此,若第一数量大于第二数量,则确定与第二数量相同的多个目标第一素材片段对应的目标第一3D数据,并基于现实场景视频以及每个目标第一3D数据,渲染生成多个目标第一视频数据,以减少无效渲染的情况发生,也即,可以无需对每个第一素材片段对应的第一3D数据进行渲染,如此,有利于节约系统资源。
一种可选的实施方式中,所述从多个第一素材片段中确定与所述第二数量相同数量的多个目标第一素材片段,包括:
基于所述多个第一触发指令生成的时间顺序,从所述多个第一素材片段中确定与所述第二数量相同数量的多个目标第一素材片段;或者,
基于所述多个第一素材片段之间的关联性,从所述多个第一素材片段中确定与所述第二数量相同数量的多个目标第一素材片段。
本公开实施例中,可以基于多个第一触发指令生成的时间顺序,确定多个目标第一素材片段,如此可以达到先触发先渲染展示的效果,另外,还可以基于多个第一素材片段之间的关联性,确定多个目标第一素材片段,如此,可以提高多个目标第一素材片段之间的关联性以及完整性。
一种可选的实施方式中,所述方法还包括:
接收第二客户端发送的针对第二素材片段的第二触发指令;
基于所述第二触发指令,确定与所述第二素材片段对应的第二3D数据;
确定所述第一3D数据与所述第二3D数据之间的相似度;
在所述相似度符合第一预设条件的情况下,将所述第一视频数据发送至所述第二客户端进行展示。
本公开实施例中,若第一3D数据与所述第二3D数据之间的相似度符合第一预设条件,则将第一视频数据发送至第二客户端进行展示,也即,若第一3D数据与所述第二3D数据之间的相似度符合第一预设条件,则无需对第二3D数据进行渲染,有利于节约资源。
一种可选的实施方式中,所述方法还包括:
判断所述现实场景视频与所述第二素材片段之间的适配度是否符合第二预设条件;
在所述适配度符合所述第二预设条件的情况下,向所述第二客户端发送提示信息,所述提示信息用于提示所述第二客户端的用户是否将所述现实场景视频与所述第二素材片段进行融合。
本公开实施例中,若现实场景视频与第二素材片段之间的适配度符合第二预设条件,向第二客户端发送提示信息,以提示第二客户端的用户是否将第一客户端发送至服务端的现实场景视频与第二素材片段进行融合,也即,向第二客户端的用户推荐适配的现实场景视频,如此,有利于提升第二客户端的用户的使用体验。
本公开实施例还提供一种视频数据生成装置,所述装置包括:
获取模块,用于响应于第一客户端发送的针对第一素材片段的第一触发指令,从所述第一客户端获取现实场景视频;
确定模块,用于基于所述第一触发指令,确定与所述第一素材片段对应的第一3D数据;
渲染模块,用于基于所述现实场景视频以及所述第一3D数据,渲染生成第一视频数据,并将所述第一视频数据发送至所述第一客户端进行展示。
一种可选的实施方式中,所述确定模块还用于:
在接收到所述第一客户端发送的针对多个第一素材片段的融合指令的情况下,基于所述融合指令,确定与所述多个第一素材片段分别对应的第一3D数据;
基于所述现实场景视频以及多个第一3D数据,渲染生成第二视频数据,并将所述第二视频数据发送至所述第一客户端进行展示。
一种可选的实施方式中,所述渲染模块具体用于:
在渲染生成所述第二视频数据的过程中,针对每个第一3D数据,基于所述现实场景视频以及所述第一3D数据,生成预览画面,并将每个预览画面分别发送至所述第一客户端进行展示。
一种可选的实施方式中,所述确定模块还用于:
基于所述多个第一触发指令的数量,确定第一素材片段的第一数量,其中,每个第一触发指令对应一个第一素材片段;
获取所述第一客户端能够展示的第一素材片段的第二数量,所述第二数量由所述第一客户端的屏幕尺寸以及所述第一素材片段对应的画面展示尺寸确定;
在所述第一数量大于所述第二数量的情况下,从多个第一素材片段中确定与所述第二数量相同数量的多个目标第一素材片段,并确定与每个目标第一素材片段分别对应的目标第一3D数据;
所述渲染模块具体用于:
基于所述现实场景视频以及每个目标第一3D数据,分别渲染生成多个目标第一视频数据,并将所述多个目标第一视频数据发送至所述第一客户端分别进行展示。
一种可选的实施方式中,所述确定模块具体用于:
基于所述多个第一触发指令生成的时间顺序,从所述多个第一素材片段中确定与所述第二数量相同数量的多个目标第一素材片段;或者,
基于所述多个第一素材片段之间的关联性,从所述多个第一素材片段中确定与所述第二数量相同数量的多个目标第一素材片段。
一种可选的实施方式中,所述获取模块还用于:
接收第二客户端发送的针对第二素材片段的第二触发指令;
所述确定模块还用于:
基于所述第二触发指令,确定与所述第二素材片段对应的第二3D数据;
确定所述第一3D数据与所述第二3D数据之间的相似度;
所述渲染模块还用于:
在所述相似度符合第一预设条件的情况下,将所述第一视频数据发送至所述第二客户端进行展示。
一种可选的实施方式中,所述装置还包括判断模块以及提示模块,所述判断模块用于:
判断所述现实场景视频与所述第二素材片段之间的适配度是否符合第二预设条件;
所述提示模块用于:
在所述适配度符合所述第二预设条件的情况下,向所述第二客户端发送提示信息,所述提示信息用于提示所述第二客户端的用户是否将所述现实场景视频与所述第二素材片段进行融合。
本公开实施例还提供一种电子设备,包括:处理器、存储器和总线,所述存储器存储有所述处理器可执行的机器可读指令,当电子设备运行时,所述处理器与所述存储器之间通过总线通信,所述机器可读指令被所述处理器执行时执行上述视频数据生成方法。
本公开实施例还提供一种计算机可读存储介质,该计算机可读存储介质上存储有计算机程序,该计算机程序被处理器运行时执行上述视频数据生成方法。
关于上述视频数据生成装置、电子设备、及计算机可读存储介质的效果描述参见上述视频数据生成方法的说明,这里不再赘述。
为使本公开的上述目的、特征和优点能更明显易懂,下文特举较佳实施例,并配合所附附图,作详细说明如下。
附图说明
为了更清楚地说明本公开实施例的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,此处的附图被并入说明书中并构成本说明书中的一部分,这些附图示出了符合本公开的实施例,并与说明书一起用于说明本公开的技术方案。应当理解,以下附图仅示出了本公开的某些实施例,因此不应被看作是对范围的限定,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他相关的附图。
图1示出了本公开实施例所提供的一种视频数据生成方法的执行主体与第一客户端的通信示意图;
图2为本公开实施例所提供的一种视频数据生成方法的流程图;
图3为本公开实施例所提供的一种展示第一素材片段的界面示意图;
图4为本公开实施例所提供的一种展示多个目标第一视频数据方法的流程图;
图5为本公开实施例所提供的一种第一客户端展示多个目标第一视频数据的界面示意图;
图6为本公开实施例所提供的一种将第一视频数据发送至第二客户端方法的流程图;
图7为本公开实施例所提供的一种向第二客户端发送提示信息方法的流程图;
图8为本公开实施例所提供的一种展示提示信息的界面示意图;
图9为本公开实施例所提供的一种视频数据生成装置的结构示意图;
图10为本公开实施例所提供的另一种视频数据生成装置的结构示意图;
图11为本公开实施例所提供的一种电子设备的示意图。
具体实施方式
为使本公开实施例的目的、技术方案和优点更加清楚,下面将结合本公开实施例中附图,对本公开实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本公开一部分实施例,而不是全部的实施例。通常在此处附图中描述和示出的本公开实施例的组件可以以各种不同的配置来布置和设计。因此,以下对在附图中提供的本公开的实施例的详细描述并非旨在限制要求保护的本公开的范围,而是仅仅表示本公开的选定实施例。基于本公开的实施例,本领域技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例,都属于本公开保护的范围。
应注意到:相似的标号和字母在下面的附图中表示类似项,因此,一旦某一项在一个附图中被定义,则在随后的附图中不需要对其进行进一步定义和解释。
本文中术语“和/或”,仅仅是描述一种关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。另外,本文中术语“至少一种”表示多种中的任意一种或多种中的至少两种的任意组合,例如,包括A、B、C中的至少一种,可以表示包括从A、B和C构成的集合中选择的任意一个或多个元素。
通常情况下,用户在观看一些短视频的过程中,若需要对短视频进行操作,例如,将多个短视频进行剪辑处理后融合为一个视频,则需要将多个视频素材先下载至客户端,然后在客户端进行相关处理。然而,由于客户端的运算能力有限,例如,若客户端需要处理的数据量较大或者客户端的设备性能较低,会对处理速度产生影响,从而降低对于用户的操作响应速度,进而影响用户的使用体验。
基于上述研究,本公开实施例提供了一种视频数据生成方法,该方法包括:响应于第一客户端发送的针对第一素材片段的第一触发指令,从所述第一客户端获取现实场景视频;基于所述第一触发指令,确定与所述第一素材片段对应的第一3D数据;基于所述现实场景视频以及所述第一3D数据,渲染生成第一视频数据,并将所述第一视频数据发送至所述第一客户端进行展示。
本公开实施例中,由于第一3D数据是存储于服务端的,并在服务端完成上述生成视频数据的步骤,也即,无需将与第一素材片段对应的第一3D数据下载到客户端进行处理,如此,可以提升对用户触发操作的响应速度,进而提升用户的交互体验。
此外,将从第一客户端获取到的现实场景视频与第一素材片段对应的第一3D数据进行融合,使得生成的视频数据的内容的展示效果更加丰富,也即,可以呈现出虚实结合的效果,进而利于提升用户的观赏体验。
请参阅图1,为本公开实施例所提供的一种视频数据生成方法的执行主体与第一客户端交互的示意图,如图1中所示,该方法的执行主体为电子设备,电子设备包括服务端10,其中,服务端10可以是独立的物理服务端,也可以是多个物理服务端构成的服务端集群或者分布式系统,还可以是提供云服务、云数据库、云计算、云存储、大数据和人工智能平台等基础云计算服务的云服务端。
在另一些可选的实施方式中,该视频数据生成方法可以通过处理器调用存储器中存储的计算机可读指令的方式来实现。
需要说明的是,本公开实施例中的视频数据生成方法的实施过程中涉及到服务端与第一客户端之间的通信过程,请再次参见图1,第一客户端又可以称为终端,其中,终端可以是图1中示出的智能手机20、台式计算机30或者笔记本电脑40等,还可以是图1中为示出的平板电脑、智能音箱、智能手表等,并不限定。
在一种可选的实施方式中,第一客户端还可以包括AR(Augmented Reality,增强现实)设备、VR(Virtual Reality,虚拟现实)设备、MR(Mixed Reality,混合现实)设备等。比如,AR设备可以是具有AR功能的手机或平板电脑,也可以是AR眼镜,在此不做限定。
需要说明的是,在一些实施方式中,服务端10可以通过网络50分别与智能手机20、台式计算机30及笔记本电脑40进行通信。网络50可以包括各种连接类型,例如有线、无线通信链路或者光纤电缆等等。
请参阅图2,图2为本公开实施例所提供的一种视频数据生成方法的流程图。如图2所示,本公开实施例提供的一种视频数据生成方法包括以下S101~S103:
S101,响应于第一客户端发送的针对第一素材片段的第一触发指令,从所述第一客户端获取现实场景视频。
可以理解,所述第一素材片段可以是视频片段、音频片段、图像、特效片段等。
本实施方式中,所述第一素材片段包含预设的虚拟对象以及所述虚拟对象所执行的动作信息,其中,所述虚拟对象是由3D渲染环境中的虚拟对象信息经渲染后生成,需要说明的是,所述虚拟对象信息是存在于服务端的,并在服务端渲染后生成虚拟对象。所述3D渲染环境可以是3D引擎,能够基于待渲染数据生成基于一个或者多个视角的影像信息。
可选的,虚拟对象可以包括虚拟人物形象、虚拟动物形象、虚拟卡通形象等,在此不做限定。所述虚拟对象的数量可以是一个,还可以是多个,在此不做限定。
在一些实施方式中,第一素材片段还可以包括所述虚拟对象所处的3D场景内容。其中,所述3D场景内容基于3D场景信息渲染后生成,也即,3D场景信息存在于服务端,渲染后生成3D场景内容。
示例性地,虚拟对象的一种形态是对演员(中之人)动作捕捉获取控制信息,驱动3D引擎中的虚拟对象执行动作,同时获取演员的声音,将演员声音与虚拟对象的动作画面进行融合,生成所述第一素材片段。可选的,还可以将演员声音、虚拟对象的动作画面以及3D场景信息进行融合,如此,可以使得第一素材片段中包括3D场景的内容,以提升第一素材片段的展示效果。
可以理解,所述第一触发指令可以是用户在第一客户端的展示界面上执行第一素材片段的触发操作所产生的,示例性地,请参见图3,为本公开实施例所提供的一种展示第一素材片段的界面示意图。如图3中所示,用户在第一客户端的展示界面60中点击第一素材片段A的“添加”图标,如此,即可生成所述第一触发指令。
需要说明的是,图3所示出的产生第一触发指令的过程仅是示意性的,在其他实施方式中,该第一触发指令还可以是通过其他方式产生的,例如,还可以是用户在展示界面60中长按展示出的第一素材片段,即可产生第一触发指令,在此不做限定。
所述现实场景视频是由用户通过第一客户端的摄像装置实时采集到的现实场景图像生成的视频,可以实时反映用户当前所处环境的环境信息,例如,道路、行人、风景、车辆等。
在一些实施方式中,在第一客户端的显示界面中展示出第一素材片段时,第一客户端可以自动开启摄像装置的摄像功能,以采集当前所处环境的环境信息。
需要说明的是,为了提升对于用户的操作响应的效率,上述内容中的针对3D场景信息的渲染任务,以及针对虚拟对象信息的渲染任务均是在服务端完成的,客户端只是展示服务端渲染好的素材片段。
S102,基于所述第一触发指令,确定与所述第一素材片段对应的第一3D数据。
在一些实施方式中,所述第一3D数据中的至少部分数据可以渲染生成所述第一素材片段。
在另一些实施方式中,所述第一3D数据还可以是能够与现实场景视频融合,生成视频数据的3D数据。也即,所述第一3D数据与所述第一素材片段之间的对应关系,并不局限于上述对第一3D数据的至少部分数据渲染后能够得到第一素材片段的关系,还可以是其他对应关系。例如,第一素材片段为虚拟对象跳舞的视频片段,而与所述第一素材片段对应的第一3D数据可以是能够应用于该视频片段的特效数据。
由于本公开实施例的执行主体为服务端,并且,所述服务端存储有多个第一素材片段所对应的多个第一3D数据,因此,在服务端接收到第一触发指令的情况下,需要根据第一触发指令的指令内容,从多个第一3D数据中确定与所述第一触发指令对应的第一3D数据。
S103,基于所述现实场景视频以及所述第一3D数据,渲染生成第一视频数据,并将所述第一视频数据发送至所述第一客户端进行展示。
可以理解,将所述第一视频数据发送至第一客户端中展示出的画面为增强现实AR画面,其中,增强现实AR画面的内容中包括现实场景视频的内容以及当前所展示的第一素材片段的内容。
其中,增强现实(Augmented Reality,AR)技术是一种将虚拟信息与真实场景巧妙融合的技术,广泛运用了多媒体、三维建模、实时跟踪及注册、智能交互、传感等多种技术手段,将计算机生成的文字、图像、三维模型、音乐、视频等虚拟信息模拟仿真后,应用到真实场景中,两种信息互为补充,从而实现对真实场景的“增强”。
示例性地,若第一素材片段中是虚拟对象跳舞的视频片段,现实场景视频中所展示的为海景,则在展示第一视频数据时,就会展示出虚拟对象在海景中进行舞蹈表演的画面内容,如此,可以将第一素材片段与真实场景相结合,以呈现出虚实结合的效果,进而提升用户的观看体验。
本公开实施例中,由于第一3D数据是存储于服务端的,并在服务端完成上述生成视频数据的步骤,也即,无需将与第一素材片段对应的第一3D数据下载到客户端进行处理,如此,可以提升对用户触发操作的响应效率,进而提升用户的交互体验。
此外,将从第一客户端获取到的现实场景视频与第一素材片段对应的第一3D数据进行融合,使得生成的视频数据的内容的展示效果更加丰富,也即,可以呈现出虚实结合的效果,进而利于提升用户的观赏体验。
可以理解,上述内容中的第一触发指令对应一个第一素材片段,在接收到第一客户端发送的针对多个第一素材片段的融合指令的情况下,还可以基于所述融合指令,确定与所述多个第一素材片段分别对应的第一3D数据,然后,基于所述现实场景视频以及多个第一3D数据,渲染生成第二视频数据,并将所述第二视频数据发送至所述第一客户端进行展示。
示例性地,请再次参见图3,如图3中所示,用户还可以在第一客户端的展示界面60中分别点击第一素材片段A的“添加”图标、第一素材片段B的“添加”图标以及第一素材片段C的“添加”图标,如此,即可生成三个第一触发指令。然后,服务端根据这三个第一触发指令,分别确定第一素材片段A对应的第一3D数据A1、第一素材片段B对应的第一3D数据B1、以及第一素材片段C对应的第一3D数据C1,并基于现实场景视频、第一3D数据A1、第一3D数据B1、以及第一3D数据C1,渲染生成第二视频数据,进而将第二视频数据发送至第一客户端,然后,第一客户端可以根据所述第二视频数据的内容在展示界面中会展示包括第一素材片段A、B、C的内容以及现实场景视频的内容。也即,还可以根据用户需求将多个第一素材片段进行融合,以实现视频制作的乐趣,进而提升用户的观看体验。
可选的,在渲染生成所述第二视频数据的过程中,可以针对每个第一3D数据,基于所述现实场景视频以及所述第一3D数据,生成预览画面,并将每个预览画面分别发送至第一客户端进行展示,如此,可以减轻用户等待第二视频数据展示的焦急感,有利于提升用户的使用体验。
可以理解,若服务端在预设时间段内接收到多个第一触发指令的情况下,第一客户端的屏幕所能够展示的视频数据的存在限制,无法全部进行展示,因此,在一些实施方式中,请参见图4,为本公开实施例所提供的一种展示多个目标第一视频数据方法的流程图,如图4中所示,包括以下S401~S404:
S401,在预设时间段内接收到多个第一触发指令的情况下,基于所述多个第一触发指令的数量,确定第一素材片段的第一数量,其中,每个第一触发指令对应一个第一素材片段。
其中,所述预设时间段是小于时间段阈值的,如此,可以达到“同时”接收多个第一触发指令的效果,例如,所述时间段阈值可以是2秒、3秒或者5秒等,在此不做限定。
可以理解,由于一个第一触发指令对应一个第一素材片段,因此,可以基于多个第一触发指令的数量确定第一素材片段的第一数量。
S402,获取所述第一客户端能够展示的第一素材片段的第二数量,所述第二数量由所述第一客户端的屏幕尺寸以及所述第一素材片段对应的画面展示尺寸确定。
本实施方式中,可以认为每个第一素材片段所对应的画面展示尺寸均是相同的,如此,即可根据第一客户端的屏幕尺寸以及第一素材片段对应的画面展示尺寸确定第二数量,例如第一客户端的屏幕尺寸为6寸,每个第一素材片段对应的画面展示尺寸为1.5寸,则所述第一客户端能够展示的第一素材片段的第二数量即为四个。
在其他实施方式中,每个第一素材片段所对应的画面展示尺寸也可以是不同的,例如,横屏画面展示尺寸与竖屏画面展示尺寸是不同的,在此种情况下,可以首先确定每个第一素材片段分别对应的画面展示尺寸,并为每个第一素材片段确定适配的展示位置,然后,根据第一客户端的屏幕尺寸,确定所述第二数量。
S403,在所述第一数量大于所述第二数量的情况下,从多个第一素材片段中确定与所述第二数量相同数量的多个目标第一素材片段,并确定与每个目标第一素材片段分别对应的目标第一3D数据。
可选的,在所述第一数量不大于所述第二数量的情况下,则可以确定与第一数量的多个第一素材片段对应的第一3D数据,然后,基于现实场景视频以及每个第一3D数据,分别渲染生成多个第一视频数据,并将多个第一视频数据发送至所述第一客户端分别进行展示。
S404,基于所述现实场景视频以及每个目标第一3D数据,分别渲染生成多个目标第一视频数据,并将所述多个目标第一视频数据发送至所述第一客户端分别进行展示。
可以理解,若第一数量大于第二数量,也即,若当前接收到的第一触发指令的数量大于第一客户端所能够展示的第一素材片段的最大数量,则从多个第一素材片段中确定出与第二数量相同数量的目标第一素材片段,并确定与每个目标第一素材片段对应的目标第一3D数据,然后,基于现实场景视频以及每个目标第一3D数据,分别渲染生成多个目标第一视频数据,并发送至第一客户端进行展示。
示例性地,请参见图5,为本公开实施例所提供的一种第一客户端展示多个目标第一视频数据的界面示意图。如图5中所示,第一客户端的展示界面10中包括第一素材片段A的缩略图标A1、第一素材片段B的缩略图标B1、第一素材片段C的缩略图标C1以及第一素材片段D的缩略图标D1,以及与每个第一素材片段对应的目标第一视频数据的展示画面,包括与第一素材片段A对应的展示画面01、与第一素材片段B对应的展示画面02、与第一素材片段C对应的展示画面03以及与第一素材片段D对应的展示画面04。
本实施方式中,由于第一客户端的屏幕尺寸以及第一客户端能够展示的素材片段的个数存在限制,因此,若第一数量大于第二数量,则确定与第二数量相同的多个目标第一素材片段对应的目标第一3D数据,并基于现实场景视频以及每个目标第一3D数据,渲染生成多个目标第一视频数据,也即,可以无需对每个第一素材片段对应的第一3D数据进行渲染,以减少无效渲染的情况发生,如此,有利于节约系统资源。
可选的,在从多个第一素材片段中确定与所述第二数量相同数量的多个目标第一素材片段时,可以基于所述多个第一触发指令生成的时间顺序进行确定,也即,用户基于第一客户端确定多个第一素材片段的时间是不同的,如此可以达到先触发先渲染展示的效果。
在另一些可选的实施方式中,还可以基于所述多个第一素材片段之间的关联性进行确定,例如,可以根据多个第一素材片段的内容自动确定的。具体地,可以根据多个素材片段中的虚拟对象以及所述虚拟对象的表演内容之间的关联性进行确定。
具体地,请再次参见图5,以现实场景视频为海景视频以及第一素材片段A、B、C以及D为例进行说明,如图5所示,第一素材片段A、B、C以及D中所展示出的虚拟对象均为同一虚拟对象,其中,第一素材片段A中的虚拟对象的表演内容为虚拟对象在演唱歌曲的第一段,第一素材片段B中的虚拟对象的表演内容为虚拟对象在演唱歌曲的第二段,第一素材片段C中的虚拟对象的表演内容为虚拟对象在演唱歌曲的第三段、以及第一素材片段D中的虚拟对象的表演内容为谢幕阶段,因此,根据表演内容可以从多个第一素材片段中确定出目标第一素材片段A、B、C以及D。如此,可以提高多个目标第一素材片段之间的关联性以及完整性。
可以理解,若确定基于其他客户端发送的触发指令所确定的其他3D数据与基于第一客户端发送的第一触发指令所确定的第一3D数据之间的相似度符合预设条件,也即,在其他3D数据与第一3D数据相似的情况下,可以将第一视频数据发送至其他客户端。请参见图6,为本公开实施例所提供的一种将第一视频数据发送至第二客户端方法的流程图。如图6中所示,包括以下S601~S604:
S601,接收第二客户端发送的针对第二素材片段的第二触发指令。
其中,本实施方式中的第二客户端的具体说明请参见步骤S101中的针对第一客户端的描述内容,在此不做限定。这里的第二客户端只是用于说明第二客户端与上述实施例中的第一客户端不是同一个。
并且,关于所述第二素材片段的具体说明请参见步骤S101中的关于第一素材片段的说明,在此不做赘述。其中,第二素材片段只是为了便于区分,其内容与第一素材片段的内容是相同的。
S602,基于所述第二触发指令,确定与所述第二素材片段对应的第二3D数据。
其中,步骤S602所描述的内容与步骤S102所描述的内容类似,在此不再赘述。
S603,确定所述第一3D数据与所述第二3D数据之间的相似度。
S604,在所述相似度符合第一预设条件的情况下,将所述第一视频数据发送至所述第二客户端进行展示。
其中,所述第一预设条件可以根据实际需求进行设置,比如,相似度符合第一预设条件可以是相似度大于90%,还可以是相似度大于92%等,在此不做限定。
可以理解,在确定第二3D数据后,可以确定第一3D数据与第二3D数据之间的相似度,具体的,可以根据第一3D数据的内容和第二3D数据的内容确定所述相似度,若相似度符合第一预设条件,则将第一视频数据发送至第二客户端,也即,无需对第二3D数据进行渲染,如此,有利于节约资源。
请参见图7,为本公开实施例所提供的一种向第二客户端发送提示信息方法的流程图。如图7中所示,所述向第二客户端发送提示信息方法包括以下S701~S702:
S701,判断所述现实场景视频与所述第二素材片段之间的适配度是否符合第二预设条件。
S702,在所述适配度符合所述第二预设条件的情况下,向所述第二客户端发送提示信息,所述提示信息用于提示所述第二客户端的用户是否将所述现实场景视频与所述第二素材片段进行融合。
其中,所述现实场景视频为第一客户端上传至服务端的,因此,服务端在接收到第二触发指令的情况下,可以判断现实场景视频与第二素材片段之间的适配度是否符合第二预设条件,若符合,则认为现实场景视频与第二素材片段适配,进而可以向第二客户端发送提示信息。
示例性地,请参见图8,为本公开实施例所提供的一种展示提示信息的界面示意图,如图8中所示,可以在第二客户端的显示屏幕中展示一个提示弹窗界面,该弹窗界面中可以包括展示现实场景视频的窗口以及“是否需要使用现实场景视频”的提示信息的窗口,也即,向第二客户端的用户推荐并展示适配的现实场景视频,并且,用户还可以根据弹窗中的选项图标进行选择,如此,有利于提升第二客户端的用户的使用体验。
需要说明的是,上述提示信息的内容仅是示意性的,在其他实施方式中,提示信息中还可以包括其他内容,例如,“是否添加现实场景视频”,或者“已为您匹配合适的现实场景视频,是否添加?”等,在此不做限定。此外,弹窗中的选项图标也是示意性的。
本领域技术人员可以理解,在具体实施方式的上述方法中,各步骤的撰写顺序并不意味着严格的执行顺序而对实施过程构成任何限定,各步骤的具体执行顺序应当以其功能和可能的内在逻辑确定。
基于同一发明构思,本公开实施例中还提供了与视频数据生成方法对应的视频数据生成装置,由于本公开实施例中的装置解决问题的原理与本公开实施例上述视频数据生成方法相似,因此装置的实施可以参阅方法的实施,重复之处不再赘述。
请参阅图9,为本公开实施例提供的一种视频数据生成装置的结构示意图,所述视频数据生成装置1000包括:获取模块1010、确定模块1020以及渲染模块1030;其中,
获取模块1010,用于响应于第一客户端发送的针对第一素材片段的第一触发指令,从所述第一客户端获取现实场景视频;
确定模块1020,用于基于所述第一触发指令,确定与所述第一素材片段对应的第一3D数据;
渲染模块1030,用于基于所述现实场景视频以及所述第一3D数据,渲染生成第一视频数据,并将所述第一视频数据发送至所述第一客户端进行展示。
一种可选的实施方式中,所述确定模块1020还用于:
在接收到所述第一客户端发送的针对多个第一素材片段的融合指令的情况下,基于所述融合指令,确定与所述多个第一素材片段分别对应的第一3D数据;
基于所述现实场景视频以及多个第一3D数据,渲染生成第二视频数据,并将所述第二视频数据发送至所述第一客户端进行展示。
一种可选的实施方式中,所述渲染模块1030具体用于:
在渲染生成所述第二视频数据的过程中,针对每个第一3D数据,基于所述现实场景视频以及所述第一3D数据,生成预览画面,并将每个预览画面分别发送至所述第一客户端进行展示。
一种可选的实施方式中,所述确定模块1020还用于:
基于所述多个第一触发指令的数量,确定第一素材片段的第一数量,其中,每个第一触发指令对应一个第一素材片段;
获取所述第一客户端能够展示的第一素材片段的第二数量,所述第二数量由所述第一客户端的屏幕尺寸以及所述第一素材片段对应的画面展示尺寸确定;
在所述第一数量大于所述第二数量的情况下,从多个第一素材片段中确定与所述第二数量相同数量的多个目标第一素材片段,并确定与每个目标第一素材片段分别对应的目标第一3D数据;
所述渲染模块1030具体用于:
基于所述现实场景视频以及每个目标第一3D数据,分别渲染生成多个目标第一视频数据,并将所述多个目标第一视频数据发送至所述第一客户端分别进行展示。
一种可选的实施方式中,所述确定模块1020具体用于:
基于所述多个第一触发指令生成的时间顺序,从所述多个第一素材片段中确定与所述第二数量相同数量的多个目标第一素材片段;或者,
基于所述多个第一素材片段之间的关联性,从所述多个第一素材片段中确定与所述第二数量相同数量的多个目标第一素材片段。
一种可选的实施方式中,所述获取模块1010还用于:
接收第二客户端发送的针对第二素材片段的第二触发指令;
所述确定模块1020还用于:
基于所述第二触发指令,确定与所述第二素材片段对应的第二3D数据;
确定所述第一3D数据与所述第二3D数据之间的相似度;
所述渲染模块1030还用于:
在所述相似度符合第一预设条件的情况下,将所述第一视频数据发送至所述第二客户端进行展示。
请参见图10,为本公开实施例所提供的另一种视频数据生成装置的结构示意图,所述视频数据生成装置1000还包括判断模块1040以及提示模块1050,所述判断模块1040用于:
判断所述现实场景视频与所述第二素材片段之间的适配度是否符合第二预设条件;
所述提示模块1050用于:
在所述适配度符合所述第二预设条件的情况下,向所述第二客户端发送提示信息,所述提示信息用于提示所述第二客户端的用户是否将所述现实场景视频与所述第二素材片段进行融合。
关于装置中的各模块的处理流程、以及各模块之间的交互流程的描述可以参照上述方法实施例中的相关说明,这里不再详述。
基于同一技术构思,本公开实施例还提供了一种电子设备。参照图11所示,为本公开实施例提供的电子设备1100的结构示意图,包括处理器1101、存储器1102、和总线1103。其中,存储器1102用于存储执行指令,包括内存11021和外部存储器11022;这里的内存11021也称内存储器,用于暂时存放处理器1101中的运算数据,以及与硬盘等外部存储器11022交换的数据,处理器1101通过内存11021与外部存储器11022进行数据交换。
本申请实施例中,存储器1102具体用于存储执行本申请方案的应用程序代码,并由处理器1101来控制执行。也即,当电子设备1100运行时,处理器1101与存储器1102之间通过总线1103通信,使得处理器1101执行存储器1102中存储的应用程序代码,进而执行前述任一实施例中的方法。
处理器1101可能是一种集成电路芯片,具有信号的处理能力。上述的处理器可以是通用处理器,包括中央处理器(Central Processing Unit,CPU)、网络处理器(NetworkProcessor,NP)等;还可以是数字信号处理器(DSP)、专用集成电路(ASIC)、现场可编程门阵列(FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。可以实现或者执行本公开实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
其中,存储器1102可以是,但不限于,随机存取存储器(Random Access Memory,RAM),只读存储器(Read Only Memory,ROM),可编程只读存储器(Programmable Read-Only Memory,PROM),可擦除只读存储器(Erasable Programmable Read-Only Memory,EPROM),电可擦除只读存储器(Electric Erasable Programmable Read-Only Memory,EEPROM)等。
可以理解的是,本申请实施例示意的结构并不构成对电子设备800的具体限定。在本申请另一些实施例中,电子设备1100可以包括比图示更多或更少的部件,或者组合某些部件,或者拆分某些部件,或者不同的部件布置。图示的部件可以以硬件,软件或软件和硬件的组合实现。
本公开实施例还提供一种计算机可读存储介质,该计算机可读存储介质上存储有计算机程序,该计算机程序被处理器运行时执行上述方法实施例中所述的视频数据生成方法的步骤。其中,该存储介质可以是易失性或非易失的计算机可读取存储介质。
本公开实施例还提供一种计算机程序产品,该计算机程序产品承载有程序代码,所述程序代码包括的指令可用于执行上述方法实施例中所述的视频数据生成方法的步骤,具体可参阅上述方法实施例,在此不再赘述。
其中,上述计算机程序产品可以具体通过硬件、软件或其结合的方式实现。在一个可选实施例中,所述计算机程序产品具体体现为计算机存储介质,在另一个可选实施例中,计算机程序产品具体体现为软件产品,例如软件开发包(Software Development Kit,SDK)等等。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统和终端的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。在本公开所提供的几个实施例中,应该理解到,所揭露的系统、终端和方法,可以通过其它的方式实现。以上所描述的终端实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,又例如,多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些通信接口,或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本公开各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个处理器可执行的非易失的计算机可读取存储介质中。基于这样的理解,本公开的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台电子设备(可以是个人计算机,服务端,或者网络设备等)执行本公开各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(Read-OnlyMemory,ROM)、随机存取存储器(Random Access Memory,RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
最后应说明的是:以上所述实施例,仅为本公开的具体实施方式,用以说明本公开的技术方案,而非对其限制,本公开的保护范围并不局限于此,尽管参照前述实施例对本公开进行了详细的说明,本领域的普通技术人员应当理解:任何熟悉本技术领域的技术人员在本公开揭露的技术范围内,其依然可以对前述实施例所记载的技术方案进行修改或可轻易想到变化,或者对其中部分技术特征进行等同替换;而这些修改、变化或者替换,并不使相应技术方案的本质脱离本公开实施例技术方案的精神和范围,都应涵盖在本公开的保护范围之内。因此,本公开的保护范围应所述以权利要求的保护范围为准。
Claims (10)
1.一种视频数据生成方法,其特征在于,包括:
响应于第一客户端发送的针对第一素材片段的第一触发指令,从所述第一客户端获取现实场景视频;
基于所述第一触发指令,确定与所述第一素材片段对应的第一3D数据;
基于所述现实场景视频以及所述第一3D数据,渲染生成第一视频数据,并将所述第一视频数据发送至所述第一客户端进行展示。
2.根据权利要求1所述的方法,其特征在于,在接收到所述第一客户端发送的针对多个第一素材片段的融合指令的情况下,所述方法还包括:
基于所述融合指令,确定与所述多个第一素材片段分别对应的第一3D数据;
基于所述现实场景视频以及多个第一3D数据,渲染生成第二视频数据,并将所述第二视频数据发送至所述第一客户端进行展示。
3.根据权利要求2所述的方法,其特征在于,所述基于所述现实场景视频以及多个第一3D数据,渲染生成第二视频数据,包括:
在渲染生成所述第二视频数据的过程中,针对每个第一3D数据,基于所述现实场景视频以及所述第一3D数据,生成预览画面,并将每个预览画面分别发送至所述第一客户端进行展示。
4.根据权利要求1所述的方法,其特征在于,在预设时间段内接收到多个第一触发指令的情况下,所述方法还包括:
基于所述多个第一触发指令的数量,确定第一素材片段的第一数量,其中,每个第一触发指令对应一个第一素材片段;
获取所述第一客户端能够展示的第一素材片段的第二数量,所述第二数量由所述第一客户端的屏幕尺寸以及所述第一素材片段对应的画面展示尺寸确定;
在所述第一数量大于所述第二数量的情况下,所述基于所述第一触发指令,确定与所述第一素材片段对应的第一3D数据,包括:
从多个第一素材片段中确定与所述第二数量相同数量的多个目标第一素材片段,并确定与每个目标第一素材片段分别对应的目标第一3D数据;
所述基于所述现实场景视频以及所述第一3D数据,渲染生成第一视频数据,并将所述第一视频数据发送至所述第一客户端进行展示,包括:
基于所述现实场景视频以及每个目标第一3D数据,分别渲染生成多个目标第一视频数据,并将所述多个目标第一视频数据发送至所述第一客户端分别进行展示。
5.根据权利要求4所述的方法,其特征在于,所述从多个第一素材片段中确定与所述第二数量相同数量的多个目标第一素材片段,包括:
基于所述多个第一触发指令生成的时间顺序,从所述多个第一素材片段中确定与所述第二数量相同数量的多个目标第一素材片段;或者,
基于所述多个第一素材片段之间的关联性,从所述多个第一素材片段中确定与所述第二数量相同数量的多个目标第一素材片段。
6.根据权利要求1所述的方法,其特征在于,所述方法还包括:
接收第二客户端发送的针对第二素材片段的第二触发指令;
基于所述第二触发指令,确定与所述第二素材片段对应的第二3D数据;
确定所述第一3D数据与所述第二3D数据之间的相似度;
在所述相似度符合第一预设条件的情况下,将所述第一视频数据发送至所述第二客户端进行展示。
7.根据权利要求6所述的方法,其特征在于,所述方法还包括:
判断所述现实场景视频与所述第二素材片段之间的适配度是否符合第二预设条件;
在所述适配度符合所述第二预设条件的情况下,向所述第二客户端发送提示信息,所述提示信息用于提示所述第二客户端的用户是否将所述现实场景视频与所述第二素材片段进行融合。
8.一种视频数据生成装置,其特征在于,包括:
获取模块,用于响应于第一客户端发送的针对第一素材片段的第一触发指令,从所述第一客户端获取现实场景视频;
确定模块,用于基于所述第一触发指令,确定与所述第一素材片段对应的第一3D数据;
渲染模块,用于基于所述现实场景视频以及所述第一3D数据,渲染生成第一视频数据,并将所述第一视频数据发送至所述第一客户端进行展示。
9.一种电子设备,其特征在于,包括:处理器、存储器和总线,所述存储器存储有所述处理器可执行的机器可读指令,当所述电子设备运行时,所述处理器与所述存储器之间通过所述总线通信,所述机器可读指令被所述处理器执行时执行如权利要求1至7任意一项所述的视频数据生成方法。
10.一种计算机可读存储介质,其特征在于,该计算机可读存储介质上存储有计算机程序,该计算机程序被处理器运行时执行如权利要求1至7任意一项所述的视频数据生成方法。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210339165.6A CN114697703B (zh) | 2022-04-01 | 2022-04-01 | 视频数据生成方法、装置、电子设备及存储介质 |
PCT/CN2023/084310 WO2023185809A1 (zh) | 2022-04-01 | 2023-03-28 | 视频数据生成方法、装置、电子设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210339165.6A CN114697703B (zh) | 2022-04-01 | 2022-04-01 | 视频数据生成方法、装置、电子设备及存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN114697703A true CN114697703A (zh) | 2022-07-01 |
CN114697703B CN114697703B (zh) | 2024-03-22 |
Family
ID=82141592
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210339165.6A Active CN114697703B (zh) | 2022-04-01 | 2022-04-01 | 视频数据生成方法、装置、电子设备及存储介质 |
Country Status (2)
Country | Link |
---|---|
CN (1) | CN114697703B (zh) |
WO (1) | WO2023185809A1 (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115174993A (zh) * | 2022-08-09 | 2022-10-11 | 北京字跳网络技术有限公司 | 用于视频制作的方法、装置、设备和存储介质 |
WO2023185809A1 (zh) * | 2022-04-01 | 2023-10-05 | 北京字跳网络技术有限公司 | 视频数据生成方法、装置、电子设备及存储介质 |
Citations (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106331645A (zh) * | 2016-09-08 | 2017-01-11 | 北京美吉克科技发展有限公司 | 利用虚拟镜头实现vr全景视频后期编辑的方法和系统 |
US10497180B1 (en) * | 2018-07-03 | 2019-12-03 | Ooo “Ai-Eksp” | System and method for display of augmented reality |
CN111163323A (zh) * | 2019-09-30 | 2020-05-15 | 广州市伟为科技有限公司 | 在线视频创作系统及方法 |
CN111510645A (zh) * | 2020-04-27 | 2020-08-07 | 北京字节跳动网络技术有限公司 | 视频处理方法、装置、计算机可读介质和电子设备 |
CN111541914A (zh) * | 2020-05-14 | 2020-08-14 | 腾讯科技(深圳)有限公司 | 一种视频处理方法及存储介质 |
CN111625100A (zh) * | 2020-06-03 | 2020-09-04 | 浙江商汤科技开发有限公司 | 图画内容的呈现方法、装置、计算机设备及存储介质 |
CN112070906A (zh) * | 2020-08-31 | 2020-12-11 | 北京市商汤科技开发有限公司 | 一种增强现实系统及增强现实数据的生成方法、装置 |
CN112291590A (zh) * | 2020-10-30 | 2021-01-29 | 北京字节跳动网络技术有限公司 | 视频处理方法及设备 |
CN112569599A (zh) * | 2020-12-24 | 2021-03-30 | 腾讯科技(深圳)有限公司 | 虚拟场景中虚拟对象的控制方法、装置及电子设备 |
US11030814B1 (en) * | 2019-01-15 | 2021-06-08 | Facebook, Inc. | Data sterilization for post-capture editing of artificial reality effects |
CN113521758A (zh) * | 2021-08-04 | 2021-10-22 | 北京字跳网络技术有限公司 | 信息交互方法及装置、电子设备、存储介质 |
CN113747199A (zh) * | 2021-08-23 | 2021-12-03 | 北京达佳互联信息技术有限公司 | 视频编辑方法、装置、电子设备、存储介质及程序产品 |
CN113794846A (zh) * | 2021-09-22 | 2021-12-14 | 苏州聚慧邦信息科技有限公司 | 一种视频云剪辑方法、装置及云剪辑服务器 |
CN113850746A (zh) * | 2021-09-29 | 2021-12-28 | 北京字跳网络技术有限公司 | 图像处理方法、装置、电子设备及存储介质 |
CN113891140A (zh) * | 2021-09-30 | 2022-01-04 | 北京市商汤科技开发有限公司 | 一种素材编辑方法、装置、设备及存储介质 |
CN114125183A (zh) * | 2020-09-01 | 2022-03-01 | 华为技术有限公司 | 图像处理方法、移动终端及存储介质 |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11321931B2 (en) * | 2020-03-31 | 2022-05-03 | Home Box Office, Inc. | Creating cloud-hosted, streamed augmented reality experiences with low perceived latency |
CN111862348B (zh) * | 2020-07-30 | 2024-04-30 | 深圳市腾讯计算机系统有限公司 | 视频显示方法、视频生成方法、装置、设备及存储介质 |
CN112316424B (zh) * | 2021-01-06 | 2021-03-26 | 腾讯科技(深圳)有限公司 | 一种游戏数据处理方法、装置及存储介质 |
CN114697703B (zh) * | 2022-04-01 | 2024-03-22 | 北京字跳网络技术有限公司 | 视频数据生成方法、装置、电子设备及存储介质 |
-
2022
- 2022-04-01 CN CN202210339165.6A patent/CN114697703B/zh active Active
-
2023
- 2023-03-28 WO PCT/CN2023/084310 patent/WO2023185809A1/zh unknown
Patent Citations (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106331645A (zh) * | 2016-09-08 | 2017-01-11 | 北京美吉克科技发展有限公司 | 利用虚拟镜头实现vr全景视频后期编辑的方法和系统 |
US10497180B1 (en) * | 2018-07-03 | 2019-12-03 | Ooo “Ai-Eksp” | System and method for display of augmented reality |
US11030814B1 (en) * | 2019-01-15 | 2021-06-08 | Facebook, Inc. | Data sterilization for post-capture editing of artificial reality effects |
CN111163323A (zh) * | 2019-09-30 | 2020-05-15 | 广州市伟为科技有限公司 | 在线视频创作系统及方法 |
CN111510645A (zh) * | 2020-04-27 | 2020-08-07 | 北京字节跳动网络技术有限公司 | 视频处理方法、装置、计算机可读介质和电子设备 |
CN111541914A (zh) * | 2020-05-14 | 2020-08-14 | 腾讯科技(深圳)有限公司 | 一种视频处理方法及存储介质 |
CN111625100A (zh) * | 2020-06-03 | 2020-09-04 | 浙江商汤科技开发有限公司 | 图画内容的呈现方法、装置、计算机设备及存储介质 |
CN112070906A (zh) * | 2020-08-31 | 2020-12-11 | 北京市商汤科技开发有限公司 | 一种增强现实系统及增强现实数据的生成方法、装置 |
CN114125183A (zh) * | 2020-09-01 | 2022-03-01 | 华为技术有限公司 | 图像处理方法、移动终端及存储介质 |
CN112291590A (zh) * | 2020-10-30 | 2021-01-29 | 北京字节跳动网络技术有限公司 | 视频处理方法及设备 |
CN112569599A (zh) * | 2020-12-24 | 2021-03-30 | 腾讯科技(深圳)有限公司 | 虚拟场景中虚拟对象的控制方法、装置及电子设备 |
CN113521758A (zh) * | 2021-08-04 | 2021-10-22 | 北京字跳网络技术有限公司 | 信息交互方法及装置、电子设备、存储介质 |
CN113747199A (zh) * | 2021-08-23 | 2021-12-03 | 北京达佳互联信息技术有限公司 | 视频编辑方法、装置、电子设备、存储介质及程序产品 |
CN113794846A (zh) * | 2021-09-22 | 2021-12-14 | 苏州聚慧邦信息科技有限公司 | 一种视频云剪辑方法、装置及云剪辑服务器 |
CN113850746A (zh) * | 2021-09-29 | 2021-12-28 | 北京字跳网络技术有限公司 | 图像处理方法、装置、电子设备及存储介质 |
CN113891140A (zh) * | 2021-09-30 | 2022-01-04 | 北京市商汤科技开发有限公司 | 一种素材编辑方法、装置、设备及存储介质 |
Non-Patent Citations (2)
Title |
---|
A. K. PAUL ET AL.: "Multiclass object recognition using smart phone and cloud computing for augmented reality and video surveillance applications", 《2013 INTERNATIONAL CONFERENCE ON INFORMATICS, ELECTRONICS AND VISION (ICIEV)》, pages 1 - 6 * |
郭嘉: "流媒体高效网络传输关键问题研究", 《中国优秀硕士学位论文全文数据库信息科技辑(月刊)》, no. 2021 * |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2023185809A1 (zh) * | 2022-04-01 | 2023-10-05 | 北京字跳网络技术有限公司 | 视频数据生成方法、装置、电子设备及存储介质 |
CN115174993A (zh) * | 2022-08-09 | 2022-10-11 | 北京字跳网络技术有限公司 | 用于视频制作的方法、装置、设备和存储介质 |
CN115174993B (zh) * | 2022-08-09 | 2024-02-13 | 北京字跳网络技术有限公司 | 用于视频制作的方法、装置、设备和存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN114697703B (zh) | 2024-03-22 |
WO2023185809A1 (zh) | 2023-10-05 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN113905251A (zh) | 虚拟对象控制方法、装置、电子设备及可读存储介质 | |
CN114697703B (zh) | 视频数据生成方法、装置、电子设备及存储介质 | |
EP3913924B1 (en) | 360-degree panoramic video playing method, apparatus, and system | |
CN113766296B (zh) | 直播画面的展示方法和装置 | |
CN112070906A (zh) | 一种增强现实系统及增强现实数据的生成方法、装置 | |
TW202304212A (zh) | 直播方法、系統、電腦設備及電腦可讀儲存媒體 | |
CN112868224B (zh) | 捕获和编辑动态深度图像的方法、装置和存储介质 | |
CN114615513B (zh) | 视频数据生成方法、装置、电子设备及存储介质 | |
CN109743584B (zh) | 全景视频合成方法、服务器、终端设备及存储介质 | |
CN112423022A (zh) | 视频生成及显示方法、装置、设备、介质 | |
CN114095744B (zh) | 视频直播方法、装置、电子设备及可读存储介质 | |
CN112218108B (zh) | 直播渲染方法、装置、电子设备及存储介质 | |
CN114745598A (zh) | 视频数据展示方法、装置、电子设备及存储介质 | |
CN113965773A (zh) | 直播展示方法和装置、存储介质及电子设备 | |
CN114598823B (zh) | 特效视频生成方法、装置、电子设备及存储介质 | |
CN114531553B (zh) | 生成特效视频的方法、装置、电子设备及存储介质 | |
CN110647374A (zh) | 全息展示窗的交互方法、装置以及电子设备 | |
CN113115108A (zh) | 一种视频处理方法及计算设备 | |
WO2023179292A1 (zh) | 虚拟道具的驱动方法、装置、电子设备及可读存储介质 | |
CN111667313A (zh) | 广告展示方法、装置、客户端设备及存储介质 | |
CN116112617A (zh) | 演播画面的处理方法、装置、电子设备及存储介质 | |
CN113031846B (zh) | 用于展示任务的描述信息的方法、装置及电子设备 | |
CN114004953A (zh) | 现实增强画面的实现方法、系统及云端服务器 | |
CN111754635A (zh) | 纹理融合方法及装置、电子设备和存储介质 | |
CN112037341A (zh) | 基于Web前端处理VR全景交互功能的方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |