CN114885212A - 一种视频生成方法、装置、存储介质及电子设备 - Google Patents

一种视频生成方法、装置、存储介质及电子设备 Download PDF

Info

Publication number
CN114885212A
CN114885212A CN202210530186.6A CN202210530186A CN114885212A CN 114885212 A CN114885212 A CN 114885212A CN 202210530186 A CN202210530186 A CN 202210530186A CN 114885212 A CN114885212 A CN 114885212A
Authority
CN
China
Prior art keywords
video
image
materials
undetermined
determining
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202210530186.6A
Other languages
English (en)
Other versions
CN114885212B (zh
Inventor
周高磊
朱凯
王保
陈文石
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Sankuai Online Technology Co Ltd
Original Assignee
Beijing Sankuai Online Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Sankuai Online Technology Co Ltd filed Critical Beijing Sankuai Online Technology Co Ltd
Priority to CN202210530186.6A priority Critical patent/CN114885212B/zh
Publication of CN114885212A publication Critical patent/CN114885212A/zh
Application granted granted Critical
Publication of CN114885212B publication Critical patent/CN114885212B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44016—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving splicing one content stream with another content stream, e.g. for substituting a video clip
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/4722—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting additional data associated with the content

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

在本说明书提供的视频生成方法中，首先确定各待生成视频的主题和各视频素材的素材标签，随后在各视频素材中挑选出素材标签与待生成视频的主题相匹配的视频素材作为待定素材，并确定各待定素材的素材质量；从各待定素材中，根据素材质量选取满足指定条件的待定素材，作为可用素材，采用可用素材来生成视频。本方法在生成视频时，可全程由电子设备自动完成，无需使用人力生成视频，同时，本方法在挑选用于生成视频的可用素材时，会经过多重筛选，最终将符合主题且质量较高的视频素材挑选出来用于生成视频；在采用本方法生成视频时，既能够保证生成视频的效率，又能够保证生成出的每个视频的质量，可以应对在生成视频时遇到的各种需求。

Description

一种视频生成方法、装置、存储介质及电子设备
技术领域
本说明书涉及互联网技术领域，尤其涉及一种视频生成方法、装置、存储介质及电子设备。
背景技术
近年来，短视频因为完美地契合了人们快节奏的生活方式与碎片化的娱乐时间，而迅速积累了大量的用户。由于短视频通常时长较短，且需要依靠丰富的内容来吸引用户，因此，时常会出现需要大量生成短视频的需求。然而，如果生成的视频质量不足，用户不愿观看，或无法及时生成视频，只会导致成本的浪费，因此，生成视频的方法是非常关键的。
现有技术的生成视频的方法，主要是在素材库中人工挑选可用的素材，并剪辑、制作出视频，由于用户观看视频的偏好会受到各种因素的影响，主流喜好变化较快，因此在生成视频时，通常需要高频次批量生成多种不同主题的视频，其巨大的工作量全部由人工来完成几乎是不可能的；而如果想要提升视频的生成速度，就必然会导致素材的挑选环节或剪辑环节被迫加速而使得视频质量大幅下降。
可以看出，通过现有的视频生成方法很难既保质又保量地完成视频的生成。
发明内容
本说明书提供一种视频生成方法、装置、存储介质及电子设备，以至少部分的解决现有技术存在的上述问题。
本说明书采用下述技术方案：
本说明书提供了一种视频生成方法，包括：
确定待生成视频的主题以及各视频素材的素材标签；
从各视频素材中，选择所述素材标签与所述主题相匹配的视频素材，作为待定素材；
确定各待定素材的素材质量；
根据所述素材质量从各待定素材中选择满足指定条件的待定素材，作为可用素材；
采用所述可用素材生成视频。
可选的，从各视频素材中，选择所述素材标签与所述主题相匹配的视频素材，作为待定素材，具体包括：
针对每个视频素材，根据预设的所述主题与所述素材标签之间对应关系，判断该视频素材的素材标签是否与所述主题相对应；
若该视频素材的素材标签与所述主题相对应，则将该视频素材作为待定素材。
可选的，确定各待定素材的素材质量，具体包括：
确定各待定素材的静态属性、热度、与所述主题的相关程度；
针对每个待定素材，根据该待定素材的静态属性、热度、与所述主题的相关程度确定该素材的素材质量。
可选的，确定各待定素材的静态属性，具体包括：
根据各待定素材的主体、构图、色彩、清晰度中的至少一种确定各待定素材的静态属性。
可选的，所述可用素材包括图像素材、非图像素材，其中，非图像素材包括音频素材和文本素材中的至少一种；
采用所述可用素材生成视频，具体包括：
针对每个图像素材，根据所述待生成视频的预估时长和该图像素材的素材质量确定该图像素材在所述待生成视频中出现的预估时间段；
根据该图像素材，确定该图像素材在所述待生成视频中出现的预估时间段内采用的与该图像素材对应的非图像素材；
采用所述图像素材与所述非图像素材生成视频。
可选的，根据所述待生成视频的预估时长和该图像素材的素材质量确定该图像素材在所述待生成视频中出现的预估时间段，具体包括：
根据所述待生成视频的预估时长和视频模板中预先划分的各预估时间段确定所述待生成视频的各预估时间段；
针对每个图像素材，根据该图像素材的素材质量确定该图像素材在所述待生成视频的各预估时间段中出现的预估时间段；
采用所述图像素材与所述非图像素材生成视频，具体包括：
针对所述待生成视频中的每个预估时间段，确定所述视频模板中预先设定的该预估时间段内采用的视频特效；
根据预先设定的该预估时间段内采用的视频特效对该预估时间段内采用的图像素材与非图像进行处理；
采用经过处理后的各图像素材与各非图像素材生成视频。
可选的，所述方法还包括：
针对每个预估时间段内出现的图像素材，确定该图像素材的主体内容所在的区域；
根据该图像素材的主体内容所在的区域确定与该主体内容所在的区域对应的视频动效；
采用确定出的对应的视频动效处理该图像素材。
本说明书提供的一种视频生成装置，所述装置包括：
主题标签确定模块，确定待生成视频的主题以及各视频素材的素材标签；
待定素材选择模块，从各视频素材中，选择所述素材标签与所述主题相匹配的视频素材，作为待定素材；
素材质量确定模块，确定各待定素材的素材质量；
可用素材选择模块，根据所述素材质量从各待定素材中选择满足指定条件的待定素材，作为可用素材；
视频生成模块，采用所述可用素材生成视频。
本说明书提供了一种计算机可读存储介质，所述存储介质存储有计算机程序，所述计算机程序被处理器执行时实现上述视频生成方法。
本说明书提供了一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现上述视频生成方法。
本说明书采用的上述至少一个技术方案能够达到以下有益效果：
在本说明书提供的视频生成方法中，首先确定各待生成视频的主题和各视频素材的素材标签，随后在各视频素材中挑选出素材标签与待生成视频的主题相匹配的视频素材作为待定素材，并确定各待定素材的素材质量；从各待定素材中，根据素材质量选取满足指定条件的待定素材，作为可用素材，采用可用素材来生成视频。本方法在生成视频时，可全程由电子设备自动完成，无需使用人力生成视频，同时，本方法在挑选用于生成视频的可用素材时，会经过多重筛选，最终将符合主题且质量较高的视频素材挑选出来用于生成视频；在采用本方法生成视频时，既能够保证生成视频的效率，又能够保证生成出的每个视频的质量，可以应对在生成视频时遇到的各种需求。
附图说明
此处所说明的附图用来提供对本说明书的进一步理解，构成本说明书的一部分，本说明书的示意性实施例及其说明用于解释本说明书，并不构成对本说明书的不当限定。在附图中：
图1为本说明书中一种视频生成方法的流程示意图；
图2为本说明书中采用视频动效处理图像素材的一种实施例的示意图；
图3为本说明书提供的一种视频生成装置的示意图；
图4为本说明书提供的对应于图1的电子设备示意图。
具体实施方式
人们在观看短视频时，总是会频繁地改变观看的视频的类型，一方面，人们对于视频类型的喜好会不停地变化，时间、地点的改变以及潮流的更迭都会对人们当前的喜好产生影响；另一方面，长时间观看同一类型的视频会产生审美疲劳，会下意识地寻找其它类型的视频进行观看。由此，在短时间内大量生成不同类型的视频是目前生成视频的主要需求。
然而，现有的依靠人工生成视频的方法很难满足这一需求。在这种方法中，无论是素材的挑选还是剪辑都十分依赖人的历史经验，当需要生成的不同主题的视频数量过多时，由人工逐一为每个视频挑选素材并进行剪辑的视频生成效率太低，无法及时产出视频；再者，随着视频数量的上升，越来越大的素材量会导致人工挑选素材时考虑不周，无法找出最优素材，同时，人力成本和时间成本也会同步增加，不但视频的质量可能会下降，生成视频的成本可能也会过高。
本说明书提供了一种无需人力生成视频，自动进行视频生成的方法，以解决上述技术问题。
为使本说明书的目的、技术方案和优点更加清楚，下面将结合本说明书具体实施例及相应的附图对本说明书技术方案进行清楚、完整地描述。显然，所描述的实施例仅是本说明书一部分实施例，而不是全部的实施例。基于本说明书中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
以下结合附图，详细说明本说明书各实施例提供的技术方案。
图1为本说明书中一种视频生成方法的流程示意图，具体包括以下步骤：
S100：确定待生成视频的主题以及各视频素材的素材标签。
本说明书所提供的视频生成方法中的所有步骤均可由任意具有计算功能的电子设备来实现，例如服务器、终端等设备。
在生成视频前，首先需要为每个待生成视频设定一个主题，用于表征该视频的核心内容，在生成该视频时进行的所有步骤均会围绕该主题来完成。在为待生成视频挑选合适的视频素材前，需要先确定各视频素材的素材标签，以对视频素材进行初步的筛选。
S102：从各视频素材中，选择所述素材标签与所述主题相匹配的视频素材，作为待定素材。
以待生成视频的主题为基础，在视频素材中挑选出素材标签与待生成视频的主题相匹配的视频素材来作为待定素材，用于后续步骤之中。其中，每个视频素材可以拥有一个或多个的素材标签，只要该视频素材中存在至少一个与待生成视频的主题相匹配的素材标签，即可将该视频素材作为待定素材。同时，素材标签的种类也可以有多种，例如该视频素材的归属品类、关联商户、关联话题、收录榜单、素材关键词等。
S104：确定各待定素材的素材质量。
为了保证最终生成的视频质量足够好，需要对确定出的各待定素材进行进一步的筛选，而筛选的依据便是各待定素材的素材质量。在此步骤中确定出各待定素材的素材质量，以在后续步骤中使用。
S106：根据所述素材质量从各待定素材中选择满足指定条件的待定素材，作为可用素材。
根据步骤S104中确定出的各待定素材的素材质量，从各待定素材中选择满足指定条件的待定素材，作为可用素材。其中，指定条件可以为素材质量大于指定阈值，或选择素材质量最高的前若干个待定素材，作为可用素材。
S108：采用所述可用素材生成视频。
采用步骤S106中确定出的可用素材，由电子设备自动对可用素材进行剪辑，生成最终的视频。值得一提的是，在可用素材的数量较多时，无需使用到每一个可用素材，可根据待生成视频的时长以及具体需求来使用其中一部分的可用素材生成最终的视频即可。
本说明书所提供的视频生成方法在生成视频时，全程均可由任何具有计算功能的电子设备自动完成，无需任何人力生成视频，确保了生成视频的速度；同时，通过检测视频素材的素材标签与待生成的主题是否相匹配，以及待定素材的素材质量是否足够高的两层筛选来确保最终用于生成视频的可用素材的质量足够优秀，以保证能够生成出高质量的视频。采用本说明书提供的视频生成方法可同时兼顾生成视频的效率与质量，有效解决了现有方法中仅依靠人力生成视频时存在的问题。
在步骤S102中，可以有多种方法判断各视频素材的素材标签是否与待生成视频的主题相匹配，例如，可预先设定待生成视频的主题与各素材标签之间的对应关系，针对每个视频素材，根据预设的所述主题与所述素材标签之间对应关系，判断该视频素材的素材标签是否与所述主题相对应；若该视频素材的素材标签与所述主题相对应，则将该视频素材作为待定素材。
具体的，可预先确定出用于体现视频内容的关键词，关键词的数量可根据实际需求进行设定，本说明书在此不做限制。针对每个关键词，确定出若干个与该关键词具有对应关系的素材标签；同时，可根据待生成视频的主题与各关键词的词向量以及该主题与各关键词之间的文本相似度等信息，确定出该主题与各关键词之间的相关系数，将与该主题之间的相关系数大于预设阈值的关键词作为与该主题相关的关键词。此时，若一个素材标签和至少一个与该主题相关的关键词之间具有对应关系，则可认为该素材标签与待生成视频的主题具有对应关系，可将具有该素材标签的视频素材作为待定素材。
例如，若待生成视频的主题被设定为美食，则可根据美食与各关键词之间的相关系数确定出与主题美食相关的关键词，假设与主题美食之间相关系数大于预设阈值的关键词包括饮料、甜品、快餐等关键词。此时，与关键词饮料相对应的素材标签可包括奶茶、咖啡等素材标签，与关键词甜品相对应的素材标签可包括面包、蛋糕、冰淇淋等素材标签，与关键词快餐相对应的素材标签可包括炸鸡、汉堡等素材标签，上述与各关键词相关的素材标签均可认为是与主题美食相对应的素材标签，当一个视频素材带有上述素材标签时，即可将该视频素材作为待定素材。
在步骤S104中，可根据具体的需求来采用不同的方法确定各素材的素材质量，本说明书在此给出一种确定素材质量的方法，具体如下：确定各待定素材的静态属性、热度、与所述主题的相关程度；针对每个待定素材，根据该待定素材的静态属性、热度、与所述主题的相关程度确定该素材的素材质量。
其中，待定素材的静态属性可根据该待定素材的主体、构图、色彩、清晰度中的至少一种确定各待定素材的静态属性。其中，待定素材的主体可以是待定素材的前景或中景。根据主体判断待定素材的静态属性的方法可以有多种，例如，可根据待定素材中的主体内容确定该主体内容的类型，并在预设的各类型的主体内容的边缘轮廓中确定出该类型的主体内容的边缘轮廓，作为预估边缘轮廓，利用训练好的模型检测该待定素材中主体的边缘轮廓，并将检测到的主体的边缘轮廓与预估边缘轮廓进行对比，判断该待定素材的主体内容是否完整，并以此对该待定素材的主体进行评分。若该待定素材的主体内容存在被遮挡，或仅有部分主体处于待定素材内的情况，则对该待定素材的主体评分就会低，反之，该待定素材的主体内容越完整，则对该待定素材的主体评分就越高。
根据构图判断待定素材的静态属性的方法同样由多种，例如，可确定一个待定素材的景深以及该待定素材中主体部分的拍摄距离，以此判断该待定素材的景深是否合理，若该待定素材中主体部分的拍摄距离在该待定素材的景深范围内，则可认为该待定素材的景深合理；同时，一个待定素材中主体越清楚，则可认为该待定素材的景深越优秀，静态属性也就越好；或者，可根据该待定素材中存在的元素种类与数量来判断该待定素材的特征是否足够丰富，若一个待定素材中存在的元素种类与数量越多，则该待定素材的图像丰富度越高，静态属性越好。可根据一个待定素材的景深和/或图像丰富度对该图像的构图进行评分，若该待定素材的景深越优秀、图像丰富度越高，则该待定素材的构图评分也就越高。
色彩部分的判断依据可包括该待定素材与色彩相关的若干属性，例如对比度、饱和度、阴影和高光等属性是否在合理的指定范围内，并以此对该待定素材色彩进行评分，当该待定素材的色彩属性在合理的指定范围内时，该待定素材的各色彩属性越接近指定最佳阈值，则该待定素材的色彩评分就越高，静态属性也越好；其中，指定范围可根据需求进行设定。
清晰度是一个指定素材能否让人在观看时感到足够清晰的直接表现，一个指定素材清晰度越高，则该待定素材的清晰度评分就越高，静态属性也就越好，反之，若一个指定素材的清晰度很低，则该指定素材的静态属性就会变差。
根据待定素材的主体、构图、色彩、清晰度中的至少一种确定各待定素材的静态属性，具体的，可对一个待定素材的主体评分、构图评分、色彩评分、清晰度评分中的至少一种进行加权或累加，得到该待定素材的静态属性。
待定素材的热度也可通过多种方法得到，例如，可根据指定时间段内的历史数据中该待定素材的使用率、曝光率、互动率等信息来判断该待定素材的热度。其中，使用率指该待定素材在与其相对应的主题的视频中的出现的概率，曝光率指包含该待定素材的视频在所有视频中的曝光占比，互动率指用户与包含该待定素材的视频进行互动的概率，其中，互动可包括点击、点赞、转发、收藏等，每种互动的互动率可单独进行统计，也可综合统计所有互动加在一起的互动率；一个待定素材的使用率、曝光率、互动率越高，则表明该素材的热度越高。根据一个待定素材的使用率、曝光率、互动率等信息判断该待定素材的热度的方法可以有多种，例如，可直接将该待定素材的使用率、曝光率、互动率的和值作为该待定素材的热度；又或者，可对该待定素材的使用率、曝光率、互动率进行加权，得到该待定素材的热度。
待定素材与主题的相关程度可表征该待定素材与待生成视频的匹配度的高低，相关程度越高则表明该待定素材越贴合待生成视频的主题，该待定素材越适合出现在该主题的待生成视频中。其中，待定素材与主体的相关程度可采用预先训练好的模型来确定。
在确定了各待定素材的静态属性、热度、以及与主题的相关程度后，确定各待定素材的素材质量的方法也有多种，例如，可针对每个待定素材，对该待定素材的静态属性、热度、与主题的相关程度进行加权，得到该待定素材的素材质量。
在本说明书提供的视频生成方法中，从各待定素材中挑选出的可用素材不仅可包括图像素材，还可包括非图像素材，例如音频素材、文本素材等。而在生成视频时，为了保证视频的质量以及用户的体验，最重要的一点便是要保证视频的音画同步，即在同一时刻，视频中出现的图像、音频以及文本需要是对应的，描述同一内容的。具体的，可针对每个图像素材，根据所述待生成视频的预估时长和该图像素材的素材质量确定该图像素材在所述待生成视频中出现的预估时间段；根据该图像素材，确定该图像素材在所述待生成视频中出现的预估时间段内采用的与该图像素材对应的非图像素材；采用所述图像素材与所述非图像素材生成视频。
每个待生成视频都存在预估时长，在生成视频时，可根据该预估时长分配每个图像素材在视频中出现的预估时间段，随后即可根据每个预估时间段内出现的图像素材，生成与该图像素材所描述的内容相匹配的音频内容与文本内容,作为该预估时间段内出现的音频和文本。
但是，如果在生成每一个新视频时，都按上述方法重新根据待生成视频的预估时长来为图像素材分配预估时间段，会显得有些繁琐，因此，为了进一步提高生成视频的效率，可采用预先设置好的视频模板来生成视频。具体的，可根据所述待生成视频的预估时长和视频模板中预先划分的各预估时间段确定所述待生成视频的各预估时间段；针对每个图像素材，根据该图像素材的素材质量确定该图像素材在所述待生成视频的各预估时间段中出现的预估时间段；针对所述待生成视频中的每个预估时间段，确定所述视频模板中预先设定的该预估时间段内采用的视频特效；根据预先设定的该预估时间段内采用的视频特效对该预估时间段内采用的图像素材与非图像进行处理；采用经过处理后的各图像素材与各非图像素材生成视频。
针对每个不同的视频预估时长，都存在着多个不同的视频模板。每个视频模板中，都存在着预先划分好的应用于视频中的预估时间段，以及每个预估时间段中将要使用的视频特效。在采用视频模板生成视频时，由于视频中的各预估时间段都是预先划分好的，因此在根据待生成视频的预估时长和图像素材的素材质量确定图像素材在待生成视频中出现的预估时间段，无需重新划分预估时间段，只需确定每个图像素材将要应用于哪一个预先划分好的预估时间段内即可。具体的确定方法可根据需求进行设置，本说明书中仅给出一种实施例：在确定各图像素材在待生成视频中出现的预估时间段时，可根据各图像素材的素材质量的高低对各图像素材进行排序，素材质量越高，排序越靠前；根据各图像素材的排序确定各图像素材在待生成视频中出现的预估时间段，排序越靠前的图像素材，在待生成视频中出现的预估时间段就越靠前。
在确定好各图像素材在待生成视频中出现的预估时间段，以及各预估时间段内采用的音频素材以及文本素材后，可针对每个预估时间段，采用视频模板中预先设置的该预估时间段内将要应用的特效来处理该预估时间段内出现的图像素材和非图像素材，最后采用经过特效处理后的图像素材和非图像素材来生成视频。由此，即可更进一步地提升生成视频的质量与效率。
应用视频模板来生成视频虽然能够更加方便、快速地生成高质量视频，但由于视频模板需要能够让每个视频去使用，因此无法针对单个视频做出更细地处理，换句话说，采用视频模板生成的视频质量存在一定的上限。因此，可在此基础上，单独为每个视频增加一些动效，来使该视频的主题更加突出，提高视频的质量。具体的，针对每个预估时间段内出现的图像素材，确定该图像素材的主体内容所在的区域；根据该图像素材的主体内容所在的区域确定与该主体内容所在的区域对应的视频动效；采用确定出的对应的视频动效处理该图像素材。
其中，视频动效的种类有很多种，例如对视频中的图像素材进行缩放、平移等操作。在为一个预估时间段内出现的图像素材施加动效前，可先将该图像素材划分为若干区域，并确定该图像素材的主体内容所在的区域，根据主体内容所在的区域不同，采用不同的视频动效来处理该图像素材。其中，将图像素材划分为若干区域的划分方式可根据需求进行设定；处理图像素材的方法可以有多种，例如，可以该图像素材的主体所在的区域的中心点为原点，根据指定比例与指定步长改变图像素材上的每一个像素点的位置。
以图2为例，图2为一个主体为花的图像素材，首先以九宫格的形式将该图像素材划分为九个区域，该图像素材的主体内容所在的区域为图像中央的区域5，因此，为突出该图像素材的主体，可以区域5为中心，进行放大。具体的，可以区域5的中心为原点，确定该图像素材上任一像素点的坐标为(x1,y1)，根据具体的放大程度确定指定比例γ，并将一个像素点的坐标(x1,y1)与指定比例γ的乘积作为经过处理后该像素点的坐标(x2,y2)，具体可表示为x2＝γx1，y2＝γy1。此时，即可得到经过动效处理后的图像素材。
以上是本说明书提供的视频生成方法，基于同样的思路，本说明书还提供了相应的视频生成装置，如图3所示。
图3为本说明书提供的一种视频生成装置示意图，具体包括：
主题标签确定模块200，确定待生成视频的主题以及各视频素材的素材标签；
待定素材选择模块202，从各视频素材中，选择所述素材标签与所述主题相匹配的视频素材，作为待定素材；
素材质量确定模块204，确定各待定素材的素材质量；
可用素材选择模块206，根据所述素材质量从各待定素材中选择满足指定条件的待定素材，作为可用素材；
视频生成模块208，采用所述可用素材生成视频。
在一可选的实施例：
所述待定素材选择模块202，具体用于针对每个视频素材，根据预设的所述主题与所述素材标签之间对应关系，判断该视频素材的素材标签是否与所述主题相对应；若该视频素材的素材标签与所述主题相对应，则将该视频素材作为待定素材。
在一可选的实施例：
所述素材质量确定模块204，具体用于确定各待定素材的静态属性、热度、与所述主题的相关程度；针对每个待定素材，根据该待定素材的静态属性、热度、与所述主题的相关程度确定该素材的素材质量。
在一可选的实施例：
所述素材质量确定模块204，具体用于根据各待定素材的主体、构图、色彩、清晰度中的至少一种确定各待定素材的静态属性。
在一可选的实施例：
所述可用素材包括图像素材、非图像素材，其中，非图像素材包括音频素材和文本素材中的至少一种；
所述视频生成模块208，具体用于针对每个图像素材，根据所述待生成视频的预估时长和该图像素材的素材质量确定该图像素材在所述待生成视频中出现的预估时间段；根据该图像素材，确定该图像素材在所述待生成视频中出现的预估时间段内采用的与该图像素材对应的非图像素材；采用所述图像素材与所述非图像素材生成视频。
在一可选的实施例：
所述视频生成模块208，具体用于根据所述待生成视频的预估时长和视频模板中预先划分的各预估时间段确定所述待生成视频的各预估时间段；针对每个图像素材，根据该图像素材的素材质量确定该图像素材在所述待生成视频的各预估时间段中出现的预估时间段；针对所述待生成视频中的每个预估时间段，确定所述视频模板中预先设定的该预估时间段内采用的视频特效；根据预先设定的该预估时间段内采用的视频特效对该预估时间段内采用的图像素材与非图像进行处理；采用经过处理后的各图像素材与各非图像素材生成视频。
在一可选的实施例：
所述装置还包括动效模块210，所述动效模块210，具体用于针对每个预估时间段内出现的图像素材，确定该图像素材的主体内容所在的区域；根据该图像素材的主体内容所在的区域确定与该主体内容所在的区域对应的视频动效；采用确定出的对应的视频动效处理该图像素材。
本说明书还提供了一种计算机可读存储介质，该存储介质存储有计算机程序，计算机程序可用于执行上述图1提供的视频生成方法。
本说明书还提供了图4所示的电子设备的示意结构图。如图4所述，在硬件层面，该电子设备包括处理器、内部总线、网络接口、内存以及非易失性存储器，当然还可能包括其他业务所需要的硬件。处理器从非易失性存储器中读取对应的计算机程序到内存中然后运行，以实现上述图1所述的视频生成方法。当然，除了软件实现方式之外，本说明书并不排除其他实现方式，比如逻辑器件抑或软硬件结合的方式等等，也就是说以下处理流程的执行主体并不限定于各个逻辑单元，也可以是硬件或逻辑器件。
在20世纪90年代，对于一个技术的改进可以很明显地区分是硬件上的改进(例如，对二极管、晶体管、开关等电路结构的改进)还是软件上的改进(对于方法流程的改进)。然而，随着技术的发展，当今的很多方法流程的改进已经可以视为硬件电路结构的直接改进。设计人员几乎都通过将改进的方法流程编程到硬件电路中来得到相应的硬件电路结构。因此，不能说一个方法流程的改进就不能用硬件实体模块来实现。例如，可编程逻辑器件(Programmable Logic Device,PLD)(例如现场可编程门阵列(Field Programmable GateArray，FPGA))就是这样一种集成电路，其逻辑功能由用户对器件编程来确定。由设计人员自行编程来把一个数字系统“集成”在一片PLD上，而不需要请芯片制造厂商来设计和制作专用的集成电路芯片。而且，如今，取代手工地制作集成电路芯片，这种编程也多半改用“逻辑编译器(logic compiler)”软件来实现，它与程序开发撰写时所用的软件编译器相类似，而要编译之前的原始代码也得用特定的编程语言来撰写，此称之为硬件描述语言(Hardware Description Language，HDL)，而HDL也并非仅有一种，而是有许多种，如ABEL(Advanced Boolean Expression Language)、AHDL(Altera Hardware DescriptionLanguage)、Confluence、CUPL(Cornell University Programming Language)、HDCal、JHDL(Java Hardware Description Language)、Lava、Lola、MyHDL、PALASM、RHDL(RubyHardware Description Language)等，目前最普遍使用的是VHDL(Very-High-SpeedIntegrated Circuit Hardware Description Language)与Verilog。本领域技术人员也应该清楚，只需要将方法流程用上述几种硬件描述语言稍作逻辑编程并编程到集成电路中，就可以很容易得到实现该逻辑方法流程的硬件电路。
控制器可以按任何适当的方式实现，例如，控制器可以采取例如微处理器或处理器以及存储可由该(微)处理器执行的计算机可读程序代码(例如软件或固件)的计算机可读介质、逻辑门、开关、专用集成电路(Application Specific Integrated Circuit，ASIC)、可编程逻辑控制器和嵌入微控制器的形式，控制器的例子包括但不限于以下微控制器：ARC 625D、Atmel AT91SAM、Microchip PIC18F26K20以及Silicone Labs C8051F320，存储器控制器还可以被实现为存储器的控制逻辑的一部分。本领域技术人员也知道，除了以纯计算机可读程序代码方式实现控制器以外，完全可以通过将方法步骤进行逻辑编程来使得控制器以逻辑门、开关、专用集成电路、可编程逻辑控制器和嵌入微控制器等的形式来实现相同功能。因此这种控制器可以被认为是一种硬件部件，而对其内包括的用于实现各种功能的装置也可以视为硬件部件内的结构。或者甚至，可以将用于实现各种功能的装置视为既可以是实现方法的软件模块又可以是硬件部件内的结构。
上述实施例阐明的系统、装置、模块或单元，具体可以由计算机芯片或实体实现，或者由具有某种功能的产品来实现。一种典型的实现设备为计算机。具体的，计算机例如可以为个人计算机、膝上型计算机、蜂窝电话、相机电话、智能电话、个人数字助理、媒体播放器、导航设备、电子邮件设备、游戏控制台、平板计算机、可穿戴设备或者这些设备中的任何设备的组合。
为了描述的方便，描述以上装置时以功能分为各种单元分别描述。当然，在实施本说明书时可以把各单元的功能在同一个或多个软件和/或硬件中实现。
本领域内的技术人员应明白，本发明的实施例可提供为方法、系统、或计算机程序产品。因此，本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
在一个典型的配置中，计算设备包括一个或多个处理器(CPU)、输入/输出接口、网络接口和内存。
内存可能包括计算机可读介质中的非永久性存储器，随机存取存储器(RAM)和/或非易失性内存等形式，如只读存储器(ROM)或闪存(flash RAM)。内存是计算机可读介质的示例。
计算机可读介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括，但不限于相变内存(PRAM)、静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、快闪记忆体或其他内存技术、只读光盘只读存储器(CD-ROM)、数字多功能光盘(DVD)或其他光学存储、磁盒式磁带，磁带磁磁盘存储或其他磁性存储设备或任何其他非传输介质，可用于存储可以被计算设备访问的信息。按照本文中的界定，计算机可读介质不包括暂存电脑可读媒体(transitory media)，如调制的数据信号和载波。
还需要说明的是，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、商品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、商品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、商品或者设备中还存在另外的相同要素。
本领域技术人员应明白，本说明书的实施例可提供为方法、系统或计算机程序产品。因此，本说明书可采用完全硬件实施例、完全软件实施例或结合软件和硬件方面的实施例的形式。而且，本说明书可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本说明书可以在由计算机执行的计算机可执行指令的一般上下文中描述，例如程序模块。一般地，程序模块包括执行特定任务或实现特定抽象数据类型的例程、程序、对象、组件、数据结构等等。也可以在分布式计算环境中实践本说明书，在这些分布式计算环境中，由通过通信网络而被连接的远程处理设备来执行任务。在分布式计算环境中，程序模块可以位于包括存储设备在内的本地和远程计算机存储介质中。
本说明书中的各个实施例均采用递进的方式描述，各个实施例之间相同相似的部分互相参见即可，每个实施例重点说明的都是与其他实施例的不同之处。尤其，对于系统实施例而言，由于其基本相似于方法实施例，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。
以上所述仅为本说明书的实施例而已，并不用于限制本说明书。对于本领域技术人员来说，本说明书可以有各种更改和变化。凡在本说明书的精神和原理之内所作的任何修改、等同替换、改进等，均应包含在本申请的权利要求范围之内。

Claims (10)

1.一种视频生成方法，其特征在于，包括：
确定待生成视频的主题以及各视频素材的素材标签；
从各视频素材中，选择所述素材标签与所述主题相匹配的视频素材，作为待定素材；
确定各待定素材的素材质量；
根据所述素材质量从各待定素材中选择满足指定条件的待定素材，作为可用素材；
采用所述可用素材生成视频。
2.如权利要求1所述的方法，其特征在于，从各视频素材中，选择所述素材标签与所述主题相匹配的视频素材，作为待定素材，具体包括：
针对每个视频素材，根据预设的所述主题与所述素材标签之间对应关系，判断该视频素材的素材标签是否与所述主题相对应；
若该视频素材的素材标签与所述主题相对应，则将该视频素材作为待定素材。
3.如权利要求1所述的方法，其特征在于，确定各待定素材的素材质量，具体包括：
确定各待定素材的静态属性、热度、与所述主题的相关程度；
针对每个待定素材，根据该待定素材的静态属性、热度、与所述主题的相关程度确定该素材的素材质量。
4.如权利要求3所述的方法，其特征在于，确定各待定素材的静态属性，具体包括：
根据各待定素材的主体、构图、色彩、清晰度中的至少一种确定各待定素材的静态属性。
5.如权利要求1所述的方法，其特征在于，所述可用素材包括图像素材、非图像素材，其中，非图像素材包括音频素材和文本素材中的至少一种；
采用所述可用素材生成视频，具体包括：
针对每个图像素材，根据所述待生成视频的预估时长和该图像素材的素材质量确定该图像素材在所述待生成视频中出现的预估时间段；
根据该图像素材，确定该图像素材在所述待生成视频中出现的预估时间段内采用的与该图像素材对应的非图像素材；
采用所述图像素材与所述非图像素材生成视频。
6.如权利要求5所述的方法，其特征在于，根据所述待生成视频的预估时长和该图像素材的素材质量确定该图像素材在所述待生成视频中出现的预估时间段，具体包括：
根据所述待生成视频的预估时长和视频模板中预先划分的各预估时间段确定所述待生成视频的各预估时间段；
针对每个图像素材，根据该图像素材的素材质量确定该图像素材在所述待生成视频的各预估时间段中出现的预估时间段；
采用所述图像素材与所述非图像素材生成视频，具体包括：
针对所述待生成视频中的每个预估时间段，确定所述视频模板中预先设定的该预估时间段内采用的视频特效；
根据预先设定的该预估时间段内采用的视频特效对该预估时间段内采用的图像素材与非图像进行处理；
采用经过处理后的各图像素材与各非图像素材生成视频。
7.如权利要求5所述的方法，其特征在于，所述方法还包括：
针对每个预估时间段内出现的图像素材，确定该图像素材的主体内容所在的区域；
根据该图像素材的主体内容所在的区域确定与该主体内容所在的区域对应的视频动效；
采用确定出的对应的视频动效处理该图像素材。
8.一种视频生成装置，其特征在于，包括：
主题标签确定模块，确定待生成视频的主题以及各视频素材的素材标签；
待定素材选择模块，从各视频素材中，选择所述素材标签与所述主题相匹配的视频素材，作为待定素材；
素材质量确定模块，确定各待定素材的素材质量；
可用素材选择模块，根据所述素材质量从各待定素材中选择满足指定条件的待定素材，作为可用素材；
视频生成模块，采用所述可用素材生成视频。
9.一种计算机可读存储介质，其特征在于，所述存储介质存储有计算机程序，所述计算机程序被处理器执行时实现上述权利要求1～7任一项所述的方法。
10.一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述程序时实现上述权利要求1～7任一项所述的方法。
CN202210530186.6A 2022-05-16 2022-05-16 一种视频生成方法、装置、存储介质及电子设备 Active CN114885212B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210530186.6A CN114885212B (zh) 2022-05-16 2022-05-16 一种视频生成方法、装置、存储介质及电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210530186.6A CN114885212B (zh) 2022-05-16 2022-05-16 一种视频生成方法、装置、存储介质及电子设备

Publications (2)

Publication Number Publication Date
CN114885212A true CN114885212A (zh) 2022-08-09
CN114885212B CN114885212B (zh) 2024-02-23

Family

ID=82675117

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210530186.6A Active CN114885212B (zh) 2022-05-16 2022-05-16 一种视频生成方法、装置、存储介质及电子设备

Country Status (1)

Country Link
CN (1) CN114885212B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115474093A (zh) * 2022-11-02 2022-12-13 深圳市云积分科技有限公司 视频要素重要度的计算方法及装置、存储介质、电子设备

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108549655A (zh) * 2018-03-09 2018-09-18 阿里巴巴集团控股有限公司 一种影视作品的制作方法、装置及设备
CN111866585A (zh) * 2020-06-22 2020-10-30 北京美摄网络科技有限公司 一种视频处理方法及装置
CN113094552A (zh) * 2021-03-19 2021-07-09 北京达佳互联信息技术有限公司 视频模板的搜索方法、装置、服务器及可读存储介质
WO2021169459A1 (zh) * 2020-02-27 2021-09-02 北京百度网讯科技有限公司 短视频的生成方法、平台、电子设备及存储介质

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108549655A (zh) * 2018-03-09 2018-09-18 阿里巴巴集团控股有限公司 一种影视作品的制作方法、装置及设备
WO2021169459A1 (zh) * 2020-02-27 2021-09-02 北京百度网讯科技有限公司 短视频的生成方法、平台、电子设备及存储介质
CN111866585A (zh) * 2020-06-22 2020-10-30 北京美摄网络科技有限公司 一种视频处理方法及装置
CN113094552A (zh) * 2021-03-19 2021-07-09 北京达佳互联信息技术有限公司 视频模板的搜索方法、装置、服务器及可读存储介质

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115474093A (zh) * 2022-11-02 2022-12-13 深圳市云积分科技有限公司 视频要素重要度的计算方法及装置、存储介质、电子设备

Also Published As

Publication number Publication date
CN114885212B (zh) 2024-02-23

Similar Documents

Publication Publication Date Title
US9374411B1 (en) Content recommendations using deep data
CN110121110B (zh) 视频质量评估方法、设备、视频处理设备及介质
CN111279709B (zh) 提供视频推荐
CN110198491B (zh) 一种视频分享方法及装置
US10721519B2 (en) Automatic generation of network pages from extracted media content
CN113704513B (zh) 一种模型训练的方法、信息展示的方法以及装置
CN111144974B (zh) 一种信息展示方法及装置
US11973991B2 (en) Partial loading of media based on context
CN111984821A (zh) 确定视频动态封面的方法、装置、存储介质及电子设备
CN112598467A (zh) 商品推荐模型的训练方法、商品推荐方法以及装置
CN112199582A (zh) 一种内容推荐方法、装置、设备及介质
CN114885212A (zh) 一种视频生成方法、装置、存储介质及电子设备
CN112966577B (zh) 一种模型训练以及信息提供的方法及装置
WO2019154096A1 (zh) 一种信息分享的方法及装置
CN112492382B (zh) 视频帧提取方法、装置、电子设备和存储介质
CN110727629A (zh) 有声电子书的播放方法、电子设备及计算机存储介质
CN110647685A (zh) 一种信息推荐方法、装置及设备
CN111787409A (zh) 影视评论数据处理方法及装置
CN107066471A (zh) 一种信息动态显示的方法及装置
KR20210136122A (ko) 비디오 타임 앵커
CN113204637B (zh) 一种文本处理的方法、装置、存储介质及电子设备
CN113344590A (zh) 一种模型训练以及投诉率预估的方法及装置
CN112860941A (zh) 一种封面推荐方法、装置、设备及介质
CN111046232A (zh) 一种视频分类方法、装置及系统
CN110008358A (zh) 一种资源信息展示方法和系统、客户端及服务端

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant