CN118175382A - 一种素材视频生成方法、装置、设备及存储介质 - Google Patents
一种素材视频生成方法、装置、设备及存储介质 Download PDFInfo
- Publication number
- CN118175382A CN118175382A CN202410130079.3A CN202410130079A CN118175382A CN 118175382 A CN118175382 A CN 118175382A CN 202410130079 A CN202410130079 A CN 202410130079A CN 118175382 A CN118175382 A CN 118175382A
- Authority
- CN
- China
- Prior art keywords
- type video
- video
- animation
- identification
- animation type
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 239000000463 material Substances 0.000 title claims abstract description 110
- 238000000034 method Methods 0.000 title claims abstract description 64
- 238000012545 processing Methods 0.000 claims abstract description 37
- 230000001133 acceleration Effects 0.000 claims description 23
- 230000033228 biological regulation Effects 0.000 claims description 11
- 238000004364 calculation method Methods 0.000 claims description 5
- 230000030279 gene silencing Effects 0.000 claims description 5
- 230000000694 effects Effects 0.000 description 18
- 239000002609 medium Substances 0.000 description 14
- 230000008569 process Effects 0.000 description 8
- 238000010586 diagram Methods 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 4
- 230000006870 function Effects 0.000 description 4
- 230000009467 reduction Effects 0.000 description 4
- 230000001105 regulatory effect Effects 0.000 description 4
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 239000012120 mounting media Substances 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000008707 rearrangement Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
- H04N21/44016—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving splicing one content stream with another content stream, e.g. for substituting a video clip
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
- H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
- H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
- H04N21/4781—Games
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/85—Assembly of content; Generation of multimedia applications
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Processing Or Creating Images (AREA)
Abstract
本申请实施例公开了一种素材视频生成方法、装置、设备及存储介质,包括:获取待处理的真人类型视频和动画类型视频,并在数据库中查询所述动画类型视频的标识时间点,所述标识时间点用于表示所述动画类型视频中图标出现的时间点;根据所述标识时间点和所述动画类型视频的开始时间计算得到所述动画类型视频的非标识时长,根据所述非标识时长和所述真人类型视频的时长确定播放速度调节策略,根据所述播放速度调节策略对所述动画类型视频进行播放速度调节,生成待叠加动画类型视频,对所述真人类型视频和所述待叠加动画类型视频进行叠加处理,生成素材视频,提高了生成素材视频的效率。
Description
技术领域
本申请实施例涉及计算机技术领域,尤其涉及一种素材视频生成方法、装置、设备及存储介质。
背景技术
随着互联网技术的发展,大量的视频充斥着人们的生活,人们对于视频形式和视频内容的要求也越来越高,真人类型的素材视频备受青睐,因此用户在进行视频投放之前,会对真人类型的素材视频与其它类型的素材视频进行叠加拼接处理,从而提高视频的新颖性。
现有技术中,通常通过人工选择真人类型的素材视频和其它类型的素材视频,并分别对每个视频进行剪辑处理,将处理后的各视频进行叠加拼接,生成真人类型素材视频。但是该种方式,人工生成素材视频的效率相对较低,需要改进。
发明内容
本申请实施例提供一种素材视频生成方法、装置、设备及存储介质,解决了人工生成素材视频效率低的问题,提高了生成素材视频的效率。
在第一方面,本申请实施例提供了一种素材视频生成方法,包括:
获取待处理的真人类型视频和动画类型视频,并在数据库中查询所述动画类型视频的标识时间点,所述标识时间点用于表示所述动画类型视频中图标出现的时间点;
根据所述标识时间点和所述动画类型视频的开始时间计算得到所述动画类型视频的非标识时长;
根据所述非标识时长和所述真人类型视频的时长确定播放速度调节策略,根据所述播放速度调节策略对所述动画类型视频进行播放速度调节,生成待叠加动画类型视频;
对所述真人类型视频和所述待叠加动画类型视频进行叠加处理,生成素材视频。
可选的,在所述根据所述非标识时长和所述真人类型视频的时长确定播放速度调节策略之前,还包括:
计算所述非标识时长和所述真人类型视频的时长之间的差值,并根据所述差值判断叠加拼接时间点的位置;
在所述叠加拼接时间点的位置与所述动画类型视频的起始时间点位置不同的情况下,在所述叠加时间点开始对所述真人类型视频和所述动画类型视频进行叠加处理,生成素材视频;
相应的,所述根据所述非标识时长和所述真人类型视频的时长确定播放速度调节策略,包括:
在所述叠加拼接时间点的位置与所述动画类型视频的起始时间点位置相同的情况下,通过比较所述非标识时长和所述真人类型视频的时长确定所述播放速度调节策略。
可选的,所述通过比较所述非标识时长和所述真人类型视频的时长确定所述播放速度调节策略,包括:
在所述非标识时长大于所述真人类型视频的时长的情况下,确定所述播放速度调节策略为加速策略;
在所述非标识时长小于所述真人类型视频的时长的情况下,确定所述播放速度调节策略为减速策略。
可选的,根据所述播放速度调节策略对所述动画类型视频进行播放速度调节,生成待叠加动画类型视频,包括:
在所述播放速度调节策略为加速策略的情况下,对所述动画类型视频进行加速处理,生成待叠加动画类型视频,使所述待叠加动画类型视频的非标识时长与所述真人类型视频的时长之间的差值在预设范围内;
在所述播放速度调节策略为减速策略的情况下,对所述动画类型视频进行减速处理,生成待叠加动画类型视频,使所述待叠加动画类型视频的非标识时长与所述真人类型视频的时长之间的差值在预设范围内。
可选的,在所述在数据库中所述查询所述动画类型视频的标识时间点之前,还包括:
将所述动画类型视频按帧拆分成图片,依次识别每个图片中是否存在标识图标,并确定出现所述标识图标的标识时间点,将所述标识时间点存储在所述数据库中。
可选的,在所述获取真人类型视频和动画类型视频之前,包括:
在数据库中查询具有相同尺寸和相同语言的真人类型视频和动画类型视频,并基于查找结果分别选择真人类型视频和动画类型视频作为待处理的视频。
可选的,在所述生成素材视频之后,还包括:
判断所述素材视频中动画类型视频的声音类型,所述声音类型包括音乐模式类型或语言模式类型;
在所述声音类型为音乐模式类型的情况下,对所述动画类型视频进行调音处理,使所述动画类型视频的音量小于所述真人类型视频的音量;
在所述声音类型为语言模式类型的情况下,对所述动画类型视频进行消音处理。
在第二方面,本申请实施例提供了一种素材视频生成装置,包括:
视频获取模块,用于获取待处理的真人类型视频和动画类型视频;
查询模块,用于在数据库中查询所述动画类型视频的标识时间点,所述标识时间点用于表示所述动画类型视频中图标出现的时间点;
时长计算模块,用于根据所述标识时间点和所述动画类型视频的开始时间计算非标识时长;
策略确定模块,用于根据所述非标识时长和所述真人类型视频的时长确定播放速度调节策略;
速度调节模块,用于根据所述播放速度调节策略对所述动画类型视频进行播放速度调节,生成待叠加动画类型视频;
叠加模块,用于对所述真人类型视频和所述待叠加动画类型视频进行叠加处理,生成素材视频。
在第三方面,本申请实施例提供了一种素材视频生成设备,所述设备包括:一个或多个处理器;存储装置,配置为存储一个或多个程序,当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现第一方面所述的素材视频生成方法。
在第四方面,本申请实施例提供了一种包含计算机可执行指令的存储介质,所述计算机可执行指令在由计算机处理器执行时用于执行如第一方面所述的素材视频生成方法。
本申请实施例通过获取待处理的真人类型视频和动画类型视频,并在数据库中查询动画类型视频的标识时间点,标识时间点用于表示动画类型视频中图标出现的时间点,根据标识时间点和动画类型视频的开始时间计算得到动画类型视频的非标识时长;根据非标识时长和真人类型视频的时长确定播放速度调节策略,根据播放速度调节策略对动画类型视频进行播放速度调节,生成待叠加动画类型视频,对真人类型视频和待叠加动画类型视频进行叠加处理,生成素材视频。能够通过查询标识点确定非标识时长,避免标识时长对叠加效果的影响,基于非标识时长进行播放速度调节,能够使待叠加动画类型视频时长与真人类型视频时长更接近,从而提高素材视频的播放效果,通过设置播放速度调节策略,并通过对比非标识时长和真人类型动画时长,采用相应的速度调节策略进行调节,能够快速生成待叠加的动画类型视频,从而提高了对动画类型视频的调节效率,进一步提供了素材视频的生成效率。
附图说明
图1是本申请实施例提供的一种素材视频生成方法的流程图;
图2是本申请实施例提供的另一种素材视频生成方法的流程图;
图3是本申请实施例提供的一种播放速度调节策略的确定方法;
图4是本申请实施例提供的一种素材视频的音频调节方法;
图5是本申请实施例提供的一种素材视频生成装置的结构示意图;
图6是本申请实施例提供的一种素材视频生成设备的结构示意图。
具体实施方式
为了使本申请的目的、技术方案和优点更加清楚,下面结合附图对本申请具体实施例作进一步的详细描述。可以理解的是,此处所描述的具体实施例仅仅用于解释本申请,而非对本申请的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与本申请相关的部分而非全部内容。在更加详细地讨论示例性实施例之前应当提到的是,一些示例性实施例被描述成作为流程图描绘的处理或方法。虽然流程图将各项操作(或步骤)描述成顺序的处理,但是其中的许多操作可以被并行地、并发地或者同时实施。此外,各项操作的顺序可以被重新安排。当其操作完成时所述处理可以被终止,但是还可以具有未包括在附图中的附加步骤。所述处理可以对应于方法、函数、规程、子例程、子程序等等。
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚地描述,显然,所描述的实施例是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员获得的所有其他实施例,都属于本申请保护的范围。
本申请的说明书和权利要求书中的术语“第一”、“第二”等是用于区别类似的对象,而不用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施,且“第一”、“第二”等所区分的对象通常为一类,并不限定对象的个数,例如第一对象可以是一个,也可以是多个。此外,说明书以及权利要求中“和/或”表示所连接对象的至少其中之一,字符“/”,一般表示前后关联对象是一种“或”的关系。
下面结合附图,通过具体的实施例及其应用场景对本申请实施例提供的素材视频生成方法、装置、设备及介质进行详细地说明。
本申请实施例可应用游戏讲解视频的叠加场景,将真人类型视频和游戏的动画视频快速进行叠加处理并生成讲解类型素材视频。基于该应用场景,可以理解的是,本方案的执行主体为服务器。本实施例中提供的素材视频生成方法可以由素材视频生成设备执行,该素材视频生成设备可以通过软件和/或硬件的方式实现,该素材视频生成设备可以是两个或多个物理实体构成,也可以是一个物理实体构成。一般而言,该素材视频生成设备可以是电脑、手机或平板等。
图1是本申请实施例提供的一种素材视频生成方法的流程图,如图1所示,包括:
步骤S101、获取待处理的真人类型视频和动画类型视频,并在数据库中查询所述动画类型视频的标识时间点,所述标识时间点用于表示所述动画类型视频中图标出现的时间点。
在一个实施例中,真人类型视频可以是由真人录制的视频或通过真人直播产生的视频。动画类型视频可以是将通过绘画或插图的方式创建的游戏背景和角色进行组合生成的动画视频。其中真人类型视频可以是对动画类型视频的视频内容进行讲解的视频。待处理的视频可以是未经过任何编辑处理的视频。动画类型视频中的图标可以用于表示动画类型视频的下载方式、游戏名称或作者等,在视频的末尾进行展示,如视频结尾的3-5秒用于展示该图标。可选的,该图标还可以包括安卓商店图标或苹果APP商店图标等。可选的,标识时间点用于表示动画类型视频中图标出现的时间点,即图标开始出现的某一时刻。本申请实施例在获取待处理的真人类型视频和动画类型视频之后,在数据库中查询与该动画类型视频对应的标识时间点。
步骤S102、根据所述标识时间点和所述动画类型视频的开始时间计算得到所述动画类型视频的非标识时长。
动画类型视频的开始时间即动画类型视频的第0秒。非标识时长可以是动画类型视频中标识时间点之前的视频时长。在一个实施例中,可通过查询得到的标识时间点与动画类型视频的开始时间进行差值计算,得到动画类型视频的非标识时长。示例性的,若标识时间点为第10秒,第0秒开始播放动画类型视频,则动画类型视频的非标识时长为10秒。
步骤S103、根据所述非标识时长和所述真人类型视频的时长确定播放速度调节策略,根据所述播放速度调节策略对所述动画类型视频进行播放速度调节,生成待叠加动画类型视频。
真人类型视频中不存在图标,因此真人类型视频的全部时长即为真人类型视频的非标识时长。由于真人类型视频用于对动画类型视频进行讲解,因此为了保证叠加后素材视频的效果,需要使动画类型视频的非标识时长与真人类型视频的时长相同或使差值控制在合理的范围内。其中可通过对动画类型视频进行速度调节的方式控制动画类型视频的时长。播放速度调节策略可以是用于指示视频速度调节的方法,该速度调节策略可以包括加速策略或减速策略等。待叠加动画类型视频可以是对待处理的动画类型视频进行加速或减速处理后得到的动画类型视频。本申请实施例在计算非标时长后,确定动画类型的非标识时长和真人类型视频时长之间的大小关系,并根据该大小关系对动画类型视频进行调节,生成待叠加动画类型视频,使待叠加动画类型视频的时长和真人类型视频的时长之间的差值控制在合理的范围内,从而保证叠加后的素材视频效果更佳。
步骤S104、对所述真人类型视频和所述待叠加动画类型视频进行叠加处理,生成素材视频。
叠加处理可以是真人类型视频和待叠加动画类型视频叠加在同一画面中,其中可将真人类型视频叠加在动画类型视频的右下角或又上角,使视频观看者能够在观看到真人类型视频的讲解画面的同时,不影响观看动画类型视频的效果。其中可以采用FFmpeg(FastForward Mpeg)技术进行叠加处理。素材视频为进行叠加处理后待投放至视频播放平台的视频。本申请实施例通过FFmpeg技术将真人类型视频叠加在待叠加动画类型视频的相应位置,生成素材视频。
上述通过获取待处理的真人类型视频和动画类型视频,并在数据库中查询动画类型视频的标识时间点,标识时间点用于表示动画类型视频中图标出现的时间点,根据标识时间点和动画类型视频的开始时间计算得到动画类型视频的非标识时长,根据非标识时长和真人类型视频的时长确定播放速度调节策略,根据播放速度调节策略对动画类型视频进行播放速度调节,生成待叠加动画类型视频,对真人类型视频和待叠加动画类型视频进行叠加处理,生成素材视频。能够通过查询标识点确定非标识时长,避免标识时长对叠加效果的影响,基于非标识时长进行播放速度调节,能够使待叠加动画类型视频时长与真人类型视频时长更接近,从而提高素材视频的播放效果,通过设置播放速度调节策略,并通过对比非标识时长和真人类型动画时长,采用相应的速度调节策略进行调节,能够快速生成待叠加的动画类型视频,从而提高了对动画类型视频的调节效率,进一步提供了素材视频的生成效率。
在一个实施例中,在所述在数据库中所述查询所述动画类型视频的标识时间点之前,还包括:
将所述动画类型视频按帧拆分成图片,依次识别每个图片中是否存在标识图标,并确定出现所述标识图标的标识时间点,将所述标识时间点存储在所述数据库中。
由于视频是由连续的多帧图片组成的,因此在获取动画类型视频后,将动画类型视频按帧拆分成多张连续的图片,并依次识别每张图片上是否存在图标,直到识别到首次出现图标的图片,并确定在动画类型视频出现该图片的时间带点,将该时间点和获取到的动画类型视频的对应关系存储在数据库中,可在获取动画类型视频后快速确定对应的标识时间点。示例性的,若获取到的动画类型视频的总时长为15秒,可将该视频按照拆分成300张图片,并对该300张图片进行依次识别,如识别到第240张图片以后的图片中均存在图标,则可确定动画类型视频中出现第240张图片的时间点即为标识时间点。
上述,通过将动画类型按帧拆分图片,并依次识别图片的方式确定标识时间点,能够精准确定标识时间点,从而提高计算非标识时长的准确性,避免影响素材视频的生成效果。
在一个实施例中,在所述获取真人类型视频和动画类型视频之前,包括:
在数据库中查询具有相同尺寸和相同语言的真人类型视频和动画类型视频,并基于查找结果分别选择真人类型视频和动画类型视频作为待处理的视频。
分别确定数据库中动画类型视频和真人类型视频的尺寸和语言,查找相同语言和相同尺寸的动画类型视频和真人类型视频,并将其中的一个动画类型视频和一个真人类型视频进行组合,生成一组具有相同尺寸和相同语言的待处理视频。在一个实施例中,还可将查找到的真人类型视频与具有相同尺寸、相同语言的动画类型视频进行自由组合,同时获取多组待处理的视频。示例性的,若真人类型视频的尺寸为512*384,语言为中文,则在数据库中差值尺寸为512*384的动画类型视频,得到的查找结果分别为“①尺寸:512*384,语言:汉语”、“②尺寸:512*384,语言:汉语”、“③尺寸:512*384,语言:法语”、“④尺寸:512*384,语言:英语”、“⑤尺寸:512*384,语言:德语”、“⑥尺寸:512*384,语言:汉语”,在该查询结果中查找语言为汉语的视频,分别为“①尺寸:512*384,语言:汉语”、“②尺寸:512*384,语言:汉语”和“⑥尺寸:512*384,语言:汉语”。则可将数据库中所有尺寸为512*384,语言为汉语的真人类型视频与查询得到的动画类型视频①②⑥进行自由组合,生成多组待处理的视频。其中查找相同尺寸的动画类型视频与查找相同语言的动画类型视频的顺序可根据实际需求确定,在此不做限定。
在一个实施例中,在查找到与真人类型视频具有相同尺寸和相同语言的动画类型视频后,对比真人类型视频的时长和动画类型视频总时长,若两种类型视频的时长差在预设范围内,则将该真人类型视频和动画类型视频组合成待处理的视频。若两种类型视频的时长差不在预设的范围内,则不进行组合。
上述,通过在数据中查找具有相同语言和相同尺寸的真人类型视频和动画类型视频,并对真人类型视频和动画类型视频进行自由组合,同时生成多组待处理的视频,能够实现素材视频的组合创新,且能够保证素材视频的生成效率。
图2是本申请实施例提供的另一种素材视频生成方法的流程图,如图2所示,包括:
步骤S201、计算所述非标识时长和所述真人类型视频的时长之间的差值,并根据所述差值判断叠加拼接时间点的位置。
在一个实施例中,叠加拼接时间点的位置用于表示开始进行叠加的位置。如在动画类型视频播放3S后开始叠加真人类型视频,则动画类型视频的第3S处即为叠加拼接时间点的位置。在得到非标识时长后,将非标识时长与真人类型视频时长进行差值计算,若差值大于预先设置的调整阈值,则认为动画类型视频的非标识时长与真人类型视频时长相差较大,动画类型视频提前播放或延迟播放,此时叠加拼接时间点的位置与动画类型视频的起始时间点的位置不同。其中调整阈值是用于判断动画类型视频是否进行速度调整的标准值。示例性的,若预先设置的调整阈值为5S,非标识时长与真人类型视频时长的差值为7S,差值大于预先设置的调整阈值,则认为真人类型视频是对动画类型视频7S以后的部分片段进行讲解,因此叠加拼接时间点的位置的第7S处。若差值小于预设的调整阈值,则认为动画类型视频的非标识时长与真人类型视频时长相差较小,则认为真人类型视频是对动画类型视频进行全程讲解,此时叠加拼接时间点的位置与动画类型视频的起始时间点的位置相同。
步骤S202、在所述叠加拼接时间点的位置与所述动画类型视频的起始时间点位置不同的情况下,在所述叠加时间点开始对所述真人类型视频和所述动画类型视频进行叠加处理,生成素材视频。
若动画类型视频的非标识时长大于真人类型视频时长,则根据差值在动画类型视频播放一定时间后开始叠加真人类型视频,生成素材视频。示例性的,若差值为7,则认为动画类型视频的非标识时长比真人类型视频的时长多7S,在动画类型视频播放7S后开始叠加真人类型视频,并确定动画类型视频的第7S为叠加拼接时间点的位置。相应的,若动画类型视频的非标识时长小于真人类型视频时长,则根据差值在真人类型视频播放一定时间后开始叠加动画类型视频,生成素材视频。
步骤S203、在所述叠加拼接时间点的位置与所述动画类型视频的起始时间点位置相同的情况下,通过比较所述非标识时长和所述真人类型视频的时长确定所述播放速度调节策略。
由于叠加拼接时间点的位置与动画类型视频的起始时间点位置相同的情况下,非标识时长与真人类型视频时长的差值小于预设的调整阈值,则通过对比比较非标识时长和真人类型视频的时长的大小确定对动画类型视频采用加速策略调节或减速策略调节。
可选的,在非标识时长大于真人类型视频的时长的情况下,确定播放速度调节策略为加速策略。在非标识时长小于真人类型视频的时长的情况下,确定播放速度调节策略为减速策略。
步骤S204、根据所述播放速度调节策略对所述动画类型视频进行播放速度调节,生成待叠加动画类型视频,对所述真人类型视频和所述待叠加动画类型视频进行叠加处理,生成素材视频。
在速度调节策略后根据该速度调节策略对动画类型视频的播放速度进行调节,将真人类型视频叠加至动画类型视频的相应位置处,生成素材视频。
上述,通过计算非标识时长和真人类型视频的时长之间的差值,并根据差值判断叠加拼接时间点的位置,在叠加拼接时间点的位置与动画类型视频的起始时间点位置不同的情况下,在叠加时间点开始对真人类型视频和动画类型视频进行叠加处理,生成素材视频,在叠加拼接时间点的位置与动画类型视频的起始时间点位置相同的情况下,通过比较非标识时长和真人类型视频的时长确定播放速度调节策略。能够通过根据的视频长度采用不同的叠加方法,能够适用于多种不同时长视频之间的叠加,通过非标识时长和真人类型视频时长的大小关系确定相应的播放速度调整策略,使待叠加动画类型视频与真人类型视频时长相同,从而保证了叠加后素材视频的播放效果。
图3是本申请实施例提供的一种播放速度调节策略的确定方法,如图3所示,包括:
步骤S301、在所述播放速度调节策略为加速策略的情况下,对所述动画类型视频进行加速处理,生成待叠加动画类型视频,使所述待叠加动画类型视频的非标识时长与所述真人类型视频的时长之间的差值在预设范围内。
预设范围用于表示非标识时长与真人类型视频的时长之间的差值不影响播放效果的范围,如1S。若非标识时长与真人类型视频的时长之间的差值小于或等于1S,则不会影响生成的素材视频的播放效果。若确定播放速度调节策略为加速策略,则可非标识时长与真人类型视频时长的差值确定加速的倍数使生成的待叠加动画视频的时长与真人类型视频的时长控制在预设范围内。加速处理是通过设置一定的加速倍数使动画类型视频的播放速度加快,其中差值越大,加速的倍数越高,反之,差值越小,加速的倍数越小。
步骤S302、在所述播放速度调节策略为减速策略的情况下,对所述动画类型视频进行减速处理,生成待叠加动画类型视频,使所述待叠加动画类型视频的非标识时长与所述真人类型视频的时长之间的差值在预设范围内。
若确定播放速度调节策略为加速策略,则可非标识时长与真人类型视频时长的差值确定减速的倍数使生成的待叠加动画视频的时长与真人类型视频的时长控制在预设范围内。减速处理是通过设置一定的减速倍数使动画类型视频的播放速度加快,其中差值越大,减速的倍数越高,反之,差值越小,减速的倍数越小。
上述,通过在播放速度调节策略为加速策略的情况下,对动画类型视频进行加速处理,生成待叠加动画类型视频,使待叠加动画类型视频的非标识时长与真人类型视频的时长之间的差值在预设范围内;在播放速度调节策略为减速策略的情况下,对动画类型视频进行减速处理,生成待叠加动画类型视频,使待叠加动画类型视频的非标识时长与真人类型视频的时长之间的差值在预设范围内,避免了观众肉眼可见的时长差,保证了素材视频的播放效果。
图4是本申请实施例提供的一种素材视频的音频调节方法,如图4所示,包括:
步骤S401、判断所述素材视频中动画类型视频的声音类型,所述声音类型包括音乐模式类型或语言模式类型。
在一个实施例中,由于不同声音类型的动画类型视频会影响素材视频的播放效果,因此需要根据不同的声音类型对素材视频中动画类型视频的声音进行处理。声音类型可以包括游戏特效类型,可选的,声音类型还可以包括音乐模式类型或语言模式类型。其中音乐模式类型是指动画类型视频中的背景音乐,用于更形象的展示动画类型视频的内容,语言模式类型是指动画类型视频中根据展示的内容自动生成视频描述语言。
步骤S402、在所述声音类型为音乐模式类型的情况下,对所述动画类型视频进行调音处理,使所述动画类型视频的音量小于所述真人类型视频的音量。
调音处理是指将动画类型视频的音量调大或调下。在声音类型为音乐模式类型的情况下,由于真人类型视频的声音都是录制或直播生成的真人语言,因此为了能够清晰的听到真人类型视频中的讲解内容,可通过FFmpeg技术将动画类型视频中背景音乐的音量降低,使动画类型视频中背景音乐的声音小于真人类型视频中真人讲解的声音。既能够保证动画类型视频中音乐效果,又能够清晰的听到真人类型视频中的讲解内容。
步骤S403、在所述声音类型为语言模式类型的情况下,对所述动画类型视频进行消音处理。
消音处理是指将动画类型视频中的声音消除,只保留真人类型视频中的声音。在声音类型为语言模式类型的情况下,避免动画类型中的语言与真人类型视频中的语音混淆,无法清晰的听到真人类型视频中的讲解内容,因此在动画类型视频的声音类型为语言模式类型时,通过FFmpeg技术对动画类型视频进行消音。
上述,通过判断素材视频中动画类型视频的声音类型,并根据声音类型进行相应的音频处理,能够在保证动画类型视频中音乐效果,又能够清晰的听到真人类型视频中的讲解内容,还能够避免动画类型中的语言与真人类型视频中的语音混淆,提升了用户的体验感。
图5是本申请实施例提供的一种素材视频生成装置的结构示意图,如图5所示,包括:
视频获取模块51,用于获取待处理的真人类型视频和动画类型视频;
查询模块52,用于在数据库中查询所述动画类型视频的标识时间点,所述标识时间点用于表示所述动画类型视频中图标出现的时间点;
时长计算模块53,用于根据所述标识时间点和所述动画类型视频的开始时间计算非标识时长;
策略确定模块54,用于根据所述非标识时长和所述真人类型视频的时长确定播放速度调节策略;
速度调节模块55,用于根据所述播放速度调节策略对所述动画类型视频进行播放速度调节,生成待叠加动画类型视频;
叠加模块56,用于对所述真人类型视频和所述待叠加动画类型视频进行叠加处理,生成素材视频。
本申请实施例通过获取待处理的真人类型视频和动画类型视频,并在数据库中查询动画类型视频的标识时间点,标识时间点用于表示动画类型视频中图标出现的时间点,根据标识时间点和动画类型视频的开始时间计算得到动画类型视频的非标识时长;根据非标识时长和真人类型视频的时长确定播放速度调节策略,根据播放速度调节策略对动画类型视频进行播放速度调节,生成待叠加动画类型视频,对真人类型视频和待叠加动画类型视频进行叠加处理,生成素材视频。能够通过查询标识点确定非标识时长,避免标识时长对叠加效果的影响,基于非标识时长进行播放速度调节,能够使待叠加动画类型视频时长与真人类型视频时长更接近,从而提高素材视频的播放效果,通过设置播放速度调节策略,并通过对比非标识时长和真人类型动画时长,采用相应的速度调节策略进行调节,能够快速生成待叠加的动画类型视频,从而提高了对动画类型视频的调节效率,进一步提供了素材视频的生成效率。
在一个可能的实施例中,素材视频生成装置还包括位置判断模块,该位置判断模块用于计算所述非标识时长和所述真人类型视频的时长之间的差值,并根据所述差值判断叠加拼接时间点的位置;
叠加模块56,用于在所述叠加拼接时间点的位置与所述动画类型视频的起始时间点位置不同的情况下,在所述叠加时间点开始对所述真人类型视频和所述动画类型视频进行叠加处理,生成素材视频;
策略确定模块54,具体用于在所述叠加拼接时间点的位置与所述动画类型视频的起始时间点位置相同的情况下,通过比较所述非标识时长和所述真人类型视频的时长确定所述播放速度调节策略。
在一个可能的实施例中,策略确定模块54,具体用于在所述非标识时长大于所述真人类型视频的时长的情况下,确定所述播放速度调节策略为加速策略;
在所述非标识时长小于所述真人类型视频的时长的情况下,确定所述播放速度调节策略为减速策略。
在一个可能的实施例中,速度调节模块55,具体用于在所述播放速度调节策略为加速策略的情况下,对所述动画类型视频进行加速处理,生成待叠加动画类型视频,使所述待叠加动画类型视频的非标识时长与所述真人类型视频的时长之间的差值在预设范围内;
在所述播放速度调节策略为减速策略的情况下,对所述动画类型视频进行减速处理,生成待叠加动画类型视频,使所述待叠加动画类型视频的非标识时长与所述真人类型视频的时长之间的差值在预设范围内。
在一个可能的实施例中,素材视频生成装置还包括标识点确定模块,该标识点确定模块用于将所述动画类型视频按帧拆分成图片,依次识别每个图片中是否存在标识图标,并确定出现所述标识图标的标识时间点,将所述标识时间点存储在所述数据库中。
在一个可能的实施例中,查询模块52还用于在数据库中查询具有相同尺寸和相同语言的真人类型视频和动画类型视频,并基于查找结果分别选择真人类型视频和动画类型视频作为待处理的视频。
在一个可能的实施例中,素材视频生成装置还包括声音类型判断模块和音频处理模块,该声音类型判断模块用于判断所述素材视频中动画类型视频的声音类型,所述声音类型包括音乐模式类型或语言模式类型;
音频处理模块用于在所述声音类型为音乐模式类型的情况下,对所述动画类型视频进行调音处理,使所述动画类型视频的音量小于所述真人类型视频的音量;
音频处理模块还用于在所述声音类型为语言模式类型的情况下,对所述动画类型视频进行消音处理。
本申请实施例还提供了一种素材视频生成设备,该素材视频生成设备可集成本申请实施例提供的一种素材视频生成装置。图6是本申请实施例提供的一种素材视频生成设备的结构示意图。参考图6,该素材视频生成设备包括:输入装置63、输出装置64、存储器62以及一个或多个处理器61;存储器62,用于存储一个或多个程序;当一个或多个程序被一个或多个处理器61执行,使得一个或多个处理器61实现如上述实施例提供的素材视频生成方法。其中输入装置63、输出装置64、存储器62和处理器61可以通过总线或者其他方式连接,图6中以通过总线连接为例。
存储器62作为一种计算设备可读存储介质,可用于存储软件程序、计算机可执行程序以及模块,如本申请任意实施例提供的素材视频生成方法对应的程序指令/模块。存储器62可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序;存储数据区可存储根据设备的使用所创建的数据等。此外,存储器62可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他非易失性固态存储器件。在一些实例中,存储器62可进一步包括相对于处理器61远程设置的存储器,这些远程存储器可以通过网络连接至设备。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
输入装置63可用于接收输入的数字或字符信息,以及产生与设备的用户设置以及功能控制有关的键信号输入。输出装置64可包括显示屏等显示设备。
处理器61通过运行存储在存储器62中的软件程序、指令以及模块,从而执行设备的各种功能应用以及数据处理,即实现上述的素材视频生成方法。
上述提供的素材视频生成装置、设备和计算机可用于执行上述任意实施例提供的素材视频生成方法,具备相应的功能和有益效果。
本申请实施例还提供一种存储计算机可执行指令的存储介质,上述计算机可执行指令在由计算机处理器执行时用于执行如上述实施例提供的素材视频生成方法,该基于素材视频生成方法包括:
获取待处理的真人类型视频和动画类型视频,并在数据库中查询所述动画类型视频的标识时间点,所述标识时间点用于表示所述动画类型视频中图标出现的时间点;
根据所述标识时间点和所述动画类型视频的开始时间计算得到所述动画类型视频的非标识时长;
根据所述非标识时长和所述真人类型视频的时长确定播放速度调节策略,根据所述播放速度调节策略对所述动画类型视频进行播放速度调节,生成待叠加动画类型视频;
对所述真人类型视频和所述待叠加动画类型视频进行叠加处理,生成素材视频。
存储介质——任何的各种类型的存储器设备或存储设备。术语“存储介质”旨在包括:安装介质,例如CD-ROM、软盘或磁带装置;计算机系统存储器或随机存取存储器,诸如DRAM、DDR RAM、SRAM、EDO RAM,兰巴斯(Rambus)RAM等;非易失性存储器,诸如闪存、磁介质(例如硬盘或光存储);寄存器或其它相似类型的存储器元件等。存储介质可以还包括其它类型的存储器或其组合。另外,存储介质可以位于程序在其中被执行的第一计算机系统中,或者可以位于不同的第二计算机系统中,第二计算机系统通过网络(诸如因特网)连接到第一计算机系统。第二计算机系统可以提供程序指令给第一计算机用于执行。术语“存储介质”可以包括可以驻留在不同位置中(例如在通过网络连接的不同计算机系统中)的两个或更多存储介质。存储介质可以存储可由一个或多个处理器执行的程序指令(例如具体实现为计算机程序)。
当然,本申请实施例所提供的一种包含计算机可执行指令的存储介质,其计算机可执行指令不限于如上所述的素材视频生成方法,还可以执行本申请任意实施例所提供的素材视频生成方法中的相关操作。
上述实施例中提供的基于素材视频生成装置、设备和存储介质可执行本申请任意实施例所提供的素材视频生成方法,未在上述实施例中详尽描述的技术细节,可参见本申请任意实施例所提供的素材视频生成方法。
上述仅为本申请的较佳实施例及所运用的技术原理。本申请不限于这里所述的特定实施例,对本领域技术人员来说能够进行的各种明显变化、重新调整及替代均不会脱离本申请的保护范围。因此,虽然通过以上实施例对本申请进行了较为详细的说明,但是本申请不仅仅限于以上实施例,在不脱离本申请构思的情况下,还可以包括更多其他等效实施例,而本申请的范围由权利要求的范围决定。
Claims (10)
1.一种素材视频生成方法,其特征在于,包括:
获取待处理的真人类型视频和动画类型视频,并在数据库中查询所述动画类型视频的标识时间点,所述标识时间点用于表示所述动画类型视频中图标出现的时间点;
根据所述标识时间点和所述动画类型视频的开始时间计算得到所述动画类型视频的非标识时长;
根据所述非标识时长和所述真人类型视频的时长确定播放速度调节策略,根据所述播放速度调节策略对所述动画类型视频进行播放速度调节,生成待叠加动画类型视频;
对所述真人类型视频和所述待叠加动画类型视频进行叠加处理,生成素材视频。
2.根据权利要求1所述的素材视频生成方法,其特征在于,在所述根据所述非标识时长和所述真人类型视频的时长确定播放速度调节策略之前,还包括:
计算所述非标识时长和所述真人类型视频的时长之间的差值,并根据所述差值判断叠加拼接时间点的位置;
在所述叠加拼接时间点的位置与所述动画类型视频的起始时间点位置不同的情况下,在所述叠加时间点开始对所述真人类型视频和所述动画类型视频进行叠加处理,生成素材视频;
相应的,所述根据所述非标识时长和所述真人类型视频的时长确定播放速度调节策略,包括:
在所述叠加拼接时间点的位置与所述动画类型视频的起始时间点位置相同的情况下,通过比较所述非标识时长和所述真人类型视频的时长确定所述播放速度调节策略。
3.根据权利要求2所述的素材视频生成方法,其特征在于,所述通过比较所述非标识时长和所述真人类型视频的时长确定所述播放速度调节策略,包括:
在所述非标识时长大于所述真人类型视频的时长的情况下,确定所述播放速度调节策略为加速策略;
在所述非标识时长小于所述真人类型视频的时长的情况下,确定所述播放速度调节策略为减速策略。
4.根据权利要求3所述的素材视频生成方法,其特征在于,根据所述播放速度调节策略对所述动画类型视频进行播放速度调节,生成待叠加动画类型视频,包括:
在所述播放速度调节策略为加速策略的情况下,对所述动画类型视频进行加速处理,生成待叠加动画类型视频,使所述待叠加动画类型视频的非标识时长与所述真人类型视频的时长之间的差值在预设范围内;
在所述播放速度调节策略为减速策略的情况下,对所述动画类型视频进行减速处理,生成待叠加动画类型视频,使所述待叠加动画类型视频的非标识时长与所述真人类型视频的时长之间的差值在预设范围内。
5.根据权利要求1所述的素材视频生成方法,其特征在于,在所述在数据库中所述查询所述动画类型视频的标识时间点之前,还包括:
将所述动画类型视频按帧拆分成图片,依次识别每个图片中是否存在标识图标,并确定出现所述标识图标的标识时间点,将所述标识时间点存储在所述数据库中。
6.根据权利要求1所述的素材视频生成方法,其特征在于,在所述获取真人类型视频和动画类型视频之前,包括:
在数据库中查询具有相同尺寸和相同语言的真人类型视频和动画类型视频,并基于查找结果分别选择真人类型视频和动画类型视频作为待处理的视频。
7.根据权利要求1-6所述的素材视频生成方法,其特征在于,在所述生成素材视频之后,还包括:
判断所述素材视频中动画类型视频的声音类型,所述声音类型包括音乐模式类型或语言模式类型;
在所述声音类型为音乐模式类型的情况下,对所述动画类型视频进行调音处理,使所述动画类型视频的音量小于所述真人类型视频的音量;
在所述声音类型为语言模式类型的情况下,对所述动画类型视频进行消音处理。
8.一种素材视频生成装置,其特征在于,包括:
视频获取模块,用于获取待处理的真人类型视频和动画类型视频;
查询模块,用于在数据库中查询所述动画类型视频的标识时间点,所述标识时间点用于表示所述动画类型视频中图标出现的时间点;
时长计算模块,用于根据所述标识时间点和所述动画类型视频的开始时间计算非标识时长;
策略确定模块,用于根据所述非标识时长和所述真人类型视频的时长确定播放速度调节策略;
速度调节模块,用于根据所述播放速度调节策略对所述动画类型视频进行播放速度调节,生成待叠加动画类型视频;
叠加模块,用于对所述真人类型视频和所述待叠加动画类型视频进行叠加处理,生成素材视频。
9.一种素材视频生成设备,所述设备包括:一个或多个处理器;存储装置,用于存储一个或多个程序,当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如权利要求1-7中任一项所述的素材视频生成方法。
10.一种存储计算机可执行指令的存储介质,所述计算机可执行指令在由计算机处理器执行时用于执行如权利要求1-7中任一项所述的一种素材视频生成方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202410130079.3A CN118175382A (zh) | 2024-01-30 | 2024-01-30 | 一种素材视频生成方法、装置、设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202410130079.3A CN118175382A (zh) | 2024-01-30 | 2024-01-30 | 一种素材视频生成方法、装置、设备及存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN118175382A true CN118175382A (zh) | 2024-06-11 |
Family
ID=91355432
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202410130079.3A Pending CN118175382A (zh) | 2024-01-30 | 2024-01-30 | 一种素材视频生成方法、装置、设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN118175382A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN118413702A (zh) * | 2024-06-28 | 2024-07-30 | 杭州海康威视数字技术股份有限公司 | 多设备同步视图动画方法及装置 |
-
2024
- 2024-01-30 CN CN202410130079.3A patent/CN118175382A/zh active Pending
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN118413702A (zh) * | 2024-06-28 | 2024-07-30 | 杭州海康威视数字技术股份有限公司 | 多设备同步视图动画方法及装置 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109089154B (zh) | 一种视频提取方法、装置、设备及介质 | |
CN111970577B (zh) | 字幕编辑方法、装置和电子设备 | |
CN109089127B (zh) | 一种视频拼接方法、装置、设备及介质 | |
CN108259971A (zh) | 字幕添加方法、装置、服务器及存储介质 | |
CN109640129B (zh) | 视频推荐方法、装置,客户端设备、服务器及存储介质 | |
US20120210227A1 (en) | Systems and Methods for Performing Geotagging During Video Playback | |
CN118175382A (zh) | 一种素材视频生成方法、装置、设备及存储介质 | |
CN107450874B (zh) | 一种多媒体数据双屏播放方法及系统 | |
CN110958470A (zh) | 一种多媒体内容处理方法、装置、介质和电子设备 | |
CN112437337A (zh) | 一种直播实时字幕的实现方法、系统及设备 | |
CN112711954A (zh) | 翻译方法、装置、电子设备和存储介质 | |
KR101789221B1 (ko) | 동영상 제공 장치, 동영상 제공 방법, 및 컴퓨터 프로그램 | |
US11665406B2 (en) | Verbal queries relative to video content | |
CN113613059A (zh) | 一种短播视频处理方法、装置及设备 | |
CN111698261B (zh) | 基于流媒体的视频播放方法、装置、设备及存储介质 | |
CN106205656A (zh) | 一种文件播放位置的定位方法及装置 | |
US20230412891A1 (en) | Video processing method, electronic device and medium | |
US8942980B2 (en) | Method of navigating in a sound content | |
CN111586492A (zh) | 视频播放方法、装置、客户端设备及存储介质 | |
CN114582348A (zh) | 语音播放系统、方法、装置及设备 | |
CN104994434A (zh) | 一种视频播放方法及装置 | |
US10657202B2 (en) | Cognitive presentation system and method | |
KR101832464B1 (ko) | 동영상 제공 장치, 동영상 제공 방법, 및 컴퓨터 프로그램 | |
CN104301776A (zh) | 一种信息处理的方法、数字电视设备及可穿戴设备 | |
CN112714254B (zh) | 一种视频台词显示方法、装置、电子设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |