CN114222196A - 一种剧情解说短视频的生成方法、装置及电子设备 - Google Patents
一种剧情解说短视频的生成方法、装置及电子设备 Download PDFInfo
- Publication number
- CN114222196A CN114222196A CN202210004240.3A CN202210004240A CN114222196A CN 114222196 A CN114222196 A CN 114222196A CN 202210004240 A CN202210004240 A CN 202210004240A CN 114222196 A CN114222196 A CN 114222196A
- Authority
- CN
- China
- Prior art keywords
- video
- text
- narration
- video segment
- sentence
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 46
- 238000012545 processing Methods 0.000 claims abstract description 46
- 238000004458 analytical method Methods 0.000 claims abstract description 28
- 238000003860 storage Methods 0.000 claims description 16
- 238000004590 computer program Methods 0.000 claims description 8
- 230000002194 synthesizing effect Effects 0.000 claims description 4
- 238000010586 diagram Methods 0.000 description 16
- 238000004519 manufacturing process Methods 0.000 description 9
- 230000006870 function Effects 0.000 description 8
- 238000004891 communication Methods 0.000 description 6
- 230000005540 biological transmission Effects 0.000 description 4
- 238000010923 batch production Methods 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 230000008569 process Effects 0.000 description 3
- 230000000694 effects Effects 0.000 description 2
- 239000000835 fiber Substances 0.000 description 2
- 239000000463 material Substances 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000001902 propagating effect Effects 0.000 description 2
- RYGMFSIKBFXOCR-UHFFFAOYSA-N Copper Chemical compound [Cu] RYGMFSIKBFXOCR-UHFFFAOYSA-N 0.000 description 1
- 230000009471 action Effects 0.000 description 1
- 230000002457 bidirectional effect Effects 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 230000002860 competitive effect Effects 0.000 description 1
- 229910052802 copper Inorganic materials 0.000 description 1
- 239000010949 copper Substances 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000014509 gene expression Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000003062 neural network model Methods 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000003238 somatosensory effect Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 238000003786 synthesis reaction Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/85—Assembly of content; Generation of multimedia applications
- H04N21/854—Content authoring
- H04N21/8549—Creating video summaries, e.g. movie trailer
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
- H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
- H04N21/44016—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving splicing one content stream with another content stream, e.g. for substituting a video clip
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
- H04N21/845—Structuring of content, e.g. decomposing content into time segments
- H04N21/8456—Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Databases & Information Systems (AREA)
- Computer Security & Cryptography (AREA)
- Television Signal Processing For Recording (AREA)
Abstract
本公开公开了一种剧情解说短视频的生成方法、装置及电子设备。该方法包括：获取目标长视频和所述目标长视频的剧情解说文本；其中，所述剧情解说文本包括至少一个解说语句；将所述目标长视频进行镜头分镜处理，得到多个视频片段；对所述解说语句进行特征解析处理，得到所述解说语句的文本特征；对所述视频片段进行特征解析处理，得到所述视频片段的视频特征；根据所述文本特征和所述视频特征，确定与所述剧情解说文本的所述解说语句匹配的视频片段，作为目标视频片段；根据所述剧情解说文本和所述目标视频片段，生成剧情解说短视频。
Description
技术领域
本公开涉及视频技术领域，更具体地，涉及一种剧情解说短视频的生成方法、一种剧情解说短视频的生成装置、一种电子设备、及一种计算机可读存储介质。
背景技术
随着科技的飞速发展，短视频消费需求日益增长，长视频“由长变短”已经成为一种趋势。
剧情解说短视频作为一种颇受用户欢迎的短视频样式，其人工剪辑过程一般包括剧本创作、素材查找、素材合成、配音、配乐、特效、滤镜、标题文案等步骤，制作周期大约为一周。
在现有技术中，将长视频剪辑为剧情解说类的短视频的创作完全依赖人工，且存在效率低、成本高，导致精品内容极度稀缺的问题。
发明内容
本公开的一个目的是提供一种自动生成剧情解说短视频的新技术方案。
根据本公开的第一方面，提供了一种剧情解说短视频的生成方法，包括：
获取目标长视频和所述目标长视频的剧情解说文本；其中，所述剧情解说文本包括至少一个解说语句；
将所述目标长视频进行镜头分镜处理，得到多个视频片段；
对所述解说语句进行特征解析处理，得到所述解说语句的文本特征；对所述视频片段进行特征解析处理，得到所述视频片段的视频特征；
根据所述文本特征和所述视频特征，确定与所述剧情解说文本的所述解说语句匹配的视频片段，作为目标视频片段；
根据所述剧情解说文本和所述目标视频片段，生成剧情解说短视频。
可选的，根据所述文本特征和所述视频特征，所述确定与所述剧情解说文本的所述解说语句匹配的视频片段，作为目标视频片段，包括：
遍历所述视频片段，根据所述解析语句的所述文本特征和当前遍历的视频片段的视频特征，确定表示所述当前遍历的视频片段与所述解说语句之间相似度的最终相似度得分；
在遍历结束的情况下，根据所述最终相似度得分，确定与所述解说语句匹配的所述目标视频片段。
可选的，所述文本特征包括表示所述解析语句的关键信息的第一文本标签；所述视频特征包括表示所述视频片段的关键信息的第二文本标签；
所述根据所述解析语句的所述文本特征和当前遍历的视频片段的视频特征，确定表示所述当前遍历的视频片段与所述解说语句之间相似度的最终相似度得分，包括：
根据所述解说语句的第一文本标签和所述当前遍历的视频片段的第二文本标签，确定所述当前遍历的视频片段与所述解说语句之间的第一相似度得分；
根据所述第一相似度得分确定所述当前遍历的视频片段与所述解说语句之间的所述最终相似度得分。
可选的，所述关键信息包括角色信息，所述对所述视频片段进行特征解析处理，得到所述视频片段的视频特征，包括：
获取所述目标视频的演员表和角色关系；
提取所述视频片段中的人物信息；
将所述人物信息与所述演员表、所述角色人物关系进行匹配，得到所述视频片段中的角色信息。
可选的，所述文本特征还包括表示所述解说语句的内容的第一特征向量；所述视频特征还包括表示所述视频片段的内容的第二特征向量；
所述根据所述解析语句的所述文本特征和当前遍历的视频片段的视频特征，确定表示所述当前遍历的视频片段与所述解说语句之间相似度的目标得分，还包括：
根据所述解说语句的第一特征向量和所述当前遍历的视频片段的第二特征向量，确定所述当前遍历的视频片段与所述解说语句之间的第二相似度得分；
根据所述第二相似度得分确定所述当前遍历的视频片段与所述解说语句之间的所述最终相似度得分。
可选的，所述根据所述剧情解说文本和所述目标视频片段，生成剧情解说短视频，包括：
将所述剧情解说文本的所述解说语句转换为对应的解说语音；
将所述解说语音与所述目标视频片段进行合成处理，得到所述剧情解说短视频。
可选的，所述根据所述剧情解说文本和所述目标视频片段，生成剧情解说短视频，还包括：
根据所述解说语音的时长，对对应的目标视频片段进行变速处理，以使所述解说语音的时长与对应的目标视频片段的播放时长相同。
可选的，所述根据所述剧情解说文本和所述目标视频片段，生成剧情解说短视频，还包括：
抹除所述目标视频片段中的字幕；
将所述解说语句作为字幕添加至对应的目标视频片段中。
根据本公开的第二方面，提供了一种剧情解说短视频的生成装置，包括：
获取模块，用于获取目标长视频和所述目标长视频的剧情解说文本；其中，所述剧情解说文本包括至少一个解说语句；
分镜模块，用于将所述目标长视频进行镜头分镜处理，得到多个视频片段；
特征解析模块，用于对所述解说语句进行特征解析处理，得到所述解说语句的文本特征；对所述视频片段进行特征解析处理，得到所述视频片段的视频特征；
匹配模块，用于根据所述文本特征和所述视频特征，确定与所述剧情解说文本的所述解说语句匹配的视频片段，作为目标视频片段；
生成模块，用于根据所述剧情解说文本和所述目标视频片段，生成剧情解说短视频。
根据本公开的第三方面，提供了一种电子设备，包括：
根据本公开第二方面所述的装置；或者，
处理器和存储器，所述存储器用于存储指令，所述指令用于控制所述处理器执行根据本公开第一方面所述的方法。
根据本公开的第四方面，提供了一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序在被处理器执行时实现如本公开第一方面所述的方法。
通过本实施例的方法，将目标长视频进行镜头分镜处理得到多个视频片段，对解说语句进行特征解析处理，得到解说语句的文本特征；对视频片段进行特征解析处理，得到视频片段的视频特征；并根据文本特征和视频特征，确定与剧情解说文本的解说语句匹配的视频片段，作为目标视频片段；再根据剧情解说文本和目标视频片段，自动生成剧情解说短视频，无需用户对目标长视频进行手工剪辑，可以提升剧情解说短视频的生产效率，实现剧情解说短视频生产的自动化和批量化，提升文娱产业的生产力。
通过以下参照附图对本公开的示例性实施例的详细描述，本公开的其它特征及其优点将会变得清楚。
附图说明
被结合在说明书中并构成说明书的一部分的附图示出了本公开的实施例，并且连同其说明一起用于解释本公开的原理。
图1是显示可用于实现本公开的实施例的电子设备的硬件配置的例子的框图。
图2示出了本公开的实施例的剧情解说短视频的生成方法的应用场景的示意图。
图3示出了本公开的实施例的剧情解说短视频的生成方法的流程示意图。
图4示出了本公开的实施例的剧情解说短视频的生成装置的框图。
图5示出了本公开的实施例的电子设备的一个例子的框图。
具体实施方式
现在将参照附图来详细描述本公开的各种示例性实施例。应注意到：除非另外具体说明，否则在这些实施例中阐述的部件和步骤的相对布置、数字表达式和数值不限制本公开的范围。
以下对至少一个示例性实施例的描述实际上仅仅是说明性的，决不作为对本公开及其应用或使用的任何限制。
对于相关领域普通技术人员已知的技术、方法和设备可能不作详细讨论，但在适当情况下，所述技术、方法和设备应当被视为说明书的一部分。
在这里示出和讨论的所有例子中，任何具体值应被解释为仅仅是示例性的，而不是作为限制。因此，示例性实施例的其它例子可以具有不同的值。
应注意到：相似的标号和字母在下面的附图中表示类似项，因此，一旦某一项在一个附图中被定义，则在随后的附图中不需要对其进行进一步讨论。
<硬件配置>
图1是示出可以实现本公开的实施例的电子设备1000的硬件配置的框图。
电子设备1000可以是便携式电脑、台式计算机、手机、平板电脑、音箱、耳机等。如图1所示，电子设备1000可以包括处理器1100、存储器1200、接口装置1300、通信装置1400、显示装置1500、输入装置1600、扬声器1700、麦克风1800等等。其中，处理器1100可以是中央处理器CPU、微处理器MCU等。存储器1200例如包括ROM(只读存储器)、RAM(随机存取存储器)、诸如硬盘的非易失性存储器等。接口装置1300例如包括USB接口、耳机接口等。通信装置1400例如能够进行有线或无线通信，具体地可以包括Wifi通信、蓝牙通信、2G/3G/4G/5G通信等。显示装置1500例如是液晶显示屏、触摸显示屏等。输入装置1600例如可以包括触摸屏、键盘、体感输入等。用户可以通过扬声器1700和麦克风1800输入/输出语音信息。
图1所示的电子设备仅仅是说明性的并且决不意味着对本公开、其应用或使用的任何限制。应用于本公开的实施例中，电子设备1000的所述存储器1200用于存储指令，所述指令用于控制所述处理器1100进行操作以执行本公开实施例提供的任意一项剧情解说短视频的生成方法。本领域技术人员应当理解，尽管在图1中对电子设备1000示出了多个装置，但是，本公开可以仅涉及其中的部分装置，例如，电子设备1000只涉及处理器1100和存储装置1200。技术人员可以根据本公开所公开方案设计指令。指令如何控制处理器进行操作，这是本领域公知，故在此不再详细描述。
<应用场景>
图2为本公开实施例的剧情解说短视频的生成方法的应用场景的示意图。
本实施例的剧情解说短视频的生成方法具体可以应用于短视频生成场景中。
如图2所示，电子设备中可以提供多个长视频，供用户从中选取目标长视频。电子设备还可以提供编辑窗口，供用户通过编辑窗口编辑目标长视频的剧情解说文本。电子设备将目标长视频进行镜头分镜处理得到n(其中，n为正整数)个视频片段，将剧情解说文本拆分为k(其中，k为正整数)个解说语句；再确定与剧情解说文本的每个解说语句匹配目标视频片段，即得到k个目标视频片段。电子设备再将对应同一解说语句的解说语音和目标视频片段进行合成处理，得到合成的视频片段；并按照解说语句在剧情解说文本中的顺序，将合成的视频片段进行拼接处理，得到剧情解说短视频。
这样，可以根据目标长视频和剧情解说文本，自动生成剧情解说短视频，无需用户对目标长视频进行手工剪辑，可以提升剧情解说短视频的生产效率，实现剧情解说短视频生产的自动化和批量化，提升文娱产业的生产力。
<方法实施例>
在本实施例中，提供一种剧情解说短视频的生成方法。该剧情解说短视频的生成方法可以是由电子设备实施。该电子设备可以是如图1所示的电子设备1000。
根据图3所示，本实施例的剧情解说短视频的生成方法可以包括如下步骤S1000～S5000：
步骤S1000，获取目标长视频和目标长视频的剧情解说文本。
其中，剧情解说文本包括至少一个解说语句。
在本公开的一个实施例中，执行本实施例方法的电子设备中可以是预先存储有多个长视频，用户根据自身实际需求，从多个长视频中选择需要制作成剧情解说的短视频的一个或多个，作为目标长视频。
在本公开的另一个实施例中，可以是执行本实施例方法的电子设备展示多个长视频的名称和下载按钮，用户根据自身实际需求，从多个长视频的名称中选择需要制作成剧情解说的短视频的一个或多个，并点击该下载按钮，触发电子设备从网络中下载用户所选中的名称所对应的长视频，作为目标长视频。
在本公开的再一个实施例中，还可以是用户根据自身实际需求，直接将在其他电子设备中所选取的目标长视频，通过网络或数据线传输至执行本实施例方法的电子设备中，以使该电子设备获取目标长视频。
在本公开的一个实施例中，执行本实施例方法的电子设备可以提供编辑窗口，用户可以根据应用场景或具体需求，通过该编辑窗口自行编辑该目标长视频的剧情解说文本。
在本公开的另一个实施例中，可以是执行本实施例的电子设备获取该目标长视频的剧情介绍，并根据该剧情介绍生成该目标长视频的剧情解说文本。
步骤S2000，将目标长视频进行镜头分镜处理，得到多个视频片段。
在本实施例中，可以是将目标长视频中相邻的两帧视频图像进行比较，根据比较结果将目标长视频分解为多个视频片段。
在一个例子中，可以是在相邻的两帧视频图像中存在差异的像素点的数量超过预设的数量阈值的情况下，将相邻的两帧视频图像划分至不同的视频片段中，在相邻的两帧视频图像中存在差异的像素点的数量小于或等于数量阈值的情况下，将相邻的两帧视频图像划分至同一视频片段中。其中，数量阈值可以是预先根据应用场景或具体需求所设定的，例如，该数量阈值可以是500。
在另一个例子中，在相邻的两帧视频图像中存在差异的像素点相对于总像素点的比例超过预设的比例阈值的情况下，将存在差异的像素点划分至不同的视频片段中，在相邻的两帧视频图像中存在差异的像素点相对于总像素点的比例小于或等于比例阈值的情况下，将存在差异的像素点划分至同一视频片段中。其中，比例阈值可以是预先根据应用场景或具体需求所设定的，例如，该比例阈值可以是10％。
步骤S3000，对解说语句进行特征解析处理，得到解说语句的文本特征；对视频片段进行特征解析处理，得到视频片段的视频特征。
在本公开的第一个实施例中，文本特征可以包括表示解析语句的关键信息的第一文本标签，视频特征可以包括表示视频片段的关键信息的第二文本标签。
在本实施例的基础上，解析语句的关键信息可以包括命名实体、文本分类、指代消解和关系三元组。其中，命名实体可以包括人名(角色名称)、地点、事件、物品等。文本分类表示该解说语句所属的类别，例如可以包括事件描述、台词描述、或心理描述等类别。关系三元组可以包括人物(即角色)、事件、对象三元组。
例如，在该解说语句为“AA(男主角的名字)在公园中散步”，那么，命名实体可以包括AA、公园、散步，文本分类为事件描述，关系三元组可以包括AA、公园、散步。
在本实施例中，视频片段的关键信息可以包括角色信息、对白文本、场景、动作、物体。
在关键信息包括角色信息的情况下，对视频片段进行特征解析处理，得到视频片段的视频特征，可以包括如下所示的步骤S3100～S3300：
步骤S3100，获取目标视频的演员表和角色关系。
本实施例中，演员表可以反映出人物与角色之间的关系，角色关系可以是反映各角色之间关系，例如，角色关系可以包括父子、父女、母子、母女、夫妻、朋友等。
目标视频的演员表和角色人物关系，可以是由用户自行设定的，也可以是从网络中获取的。
步骤S3200，提取当前遍历的视频片段中的人物信息。
当前遍历的视频片段中的人物信息，可以是饰演其中任意角色的人物的信息。具体的，可以是通过人脸识别、人体检测与跟踪等方式，来提取当前遍历的视频片段中的人物信息。
步骤S3300，将人物信息与演员表、角色人物关系进行匹配，得到当前遍历的视频片段中的角色信息。
在本实施例中，通过将人物信息与演员表、角色人物关系进行匹配，可以使得当前遍历的视频片段中的角色信息，与解说语句中所出现的角色名称进行匹配。
在本公开的另一个实施例中，文本特征可以包括表示解析语句的内容的第一提特征向量，视频特征可以包括表示视频片段的内容的第二特征向量。
在一个例子中，对解说语句进行特征解析处理，得到解说语句的文本特征，可以是基于BERT(Bidirectional Encoder)模型，根据该解说语句，得到表示该解说语句的内容的第一特征向量。
在另一个例子中，对解说语句进行特征解析处理，得到解说语句的文本特征，还可以是基于BERT模型，根据该解说语句的第一文本标签，得到表示该解说语句的内容的第一特征向量。
在本实施例中，对视频片段进行特征解析处理，得到视频片段的视频特征，可以是基于视频理解网络模型，如TimeSformer，来提取当前遍历的视频片段中的三维卷积特征，当前遍历的视频片段的第二特征向量。
步骤S4000，根据文本特征和视频特征，确定与剧情解说文本的解说语句匹配的视频片段，作为目标视频片段。
在本实施例中，可以是确定与剧情解说文本的每一解说语句一一对应的目标视频片段。可以是在解说语句的内容与目标视频片段的内容匹配的情况下，确定目标视频片段与解说语句匹配。
在本公开的一个实施例中，可以是对于剧情解说文本中的任一个解说语句，确定与该解说语句匹配的目标视频片段。具体的，确定与该解说语句匹配的目标视频片段，可以包括如下所示的步骤S4100～S4200：
步骤S4100，遍历视频片段，根据解析语句的文本特征和当前遍历的视频片段的视频特征，确定表示当前遍历的视频片段与该解说语句之间相似度的最终相似度得分。
在本实施例中，可以是确定目标长视频的每个视频片段与该解说语句之间的最终相似度得分。
步骤S4110，根据解说语句的第一文本标签和当前遍历的视频片段的第二文本标签，确定当前遍历的视频片段与该解说语句之间的第一相似度得分。
在本公开的一个实施例中，可以是预先建立表示标签之间是否匹配的关系表。第一文本标签和第二文本标签中均可以包括多个标签，通过查找该关系表，可以确定第一文本标签和第二文本标签中匹配的标签，并基于每个标签的权重，对第一文本标签和第二文本标签中匹配的标签进行加权求和，并将该和作为当前遍历的视频片段与该解说语句之间的第一相似度得分。
步骤S4120，根据第一相似度得分确定当前遍历的视频片段与该解说语句之间的最终相似度得分。
在本实施例中，可以是将当前遍历的视频片段与该解说语句之间的第一相似度得分，直接作为当前遍历的视频片段与该解说语句之间的最终相似度得分。
在本公开的第二个实施例中，确定当前遍历的视频片段与该解说语句之间的最终相似度得分，可以包括如下所示的步骤S4130～S4140：
步骤S4130，根据解说语句的第一特征向量和当前遍历的第二特征向量，确定当前遍历的视频片段与该解说语句之间的第二相似度得分。
在本公开的一个实施例中，可以是计算解说语句的第一特征向量和当前遍历的第二特征向量的余弦相似度，作为当前遍历的视频片段与该解说语句之间的第二相似度得分。
在本公开的另一个实施例中，可以是基于预设的神经网络模型，根据解说语句的第一特征向量和当前遍历的第二特征向量，确定当前遍历的视频片段与该解说语句之间的第二相似度得分。
步骤S4140，根据第二相似度得分确定当前遍历的视频片段与该解说语句之间的最终相似度得分。
在本实施例中，可以是将当前遍历的视频片段与该解说语句之间的第二相似度得分，直接作为当前遍历的视频片段与该解说语句之间的最终相似度得分。
在本公开的第三个实施例中，确定当前遍历的视频片段与该解说语句之间的最终相似度得分，可以包括前述第一实施例的步骤S4110，以及前述第二实施例的步骤S4130，并根据当前遍历的视频片段与该解说语句之间的第一相似度得分和第二相似度得分，得到当前遍历的视频片段与该解说语句之间的最终相似度得分。
在本实施例中，根据第一相似度得分和第二相似度得分，得到当前遍历的视频片段与该解说语句之间的最终相似度得分，可以是基于预设的权重，对第一相似度得分和第二相似度得分进行加权求和，得到当前遍历的视频片段与该解说语句之间的最终相似度得分。
步骤S4200，根据最终相似度得分，确定与该解说语句匹配的目标视频片段。
在本实施例中，可以是从目标长视频的视频片段中，选取与该解说语句之间的最终相似度得分最高的视频片段，作为与该解说语句匹配的目标视频片段。
进一步地，可以是对于每个解说语句，确定与每个解说语句之间的最终相似度得分最高的视频片段，得到与每个解说语句匹配的目标视频片段。
步骤S5000，根据剧情解说文本和目标视频片段，生成剧情解说短视频。
在本公开的一个实施例中，根据剧情解说文本和目标视频片段，生成剧情解说短视频，可以包括如下所示的步骤S5100～S5200：
步骤S5100，将剧情解说文本的解说语句转换为对应的解说语音。
步骤S5200，将解说语音与目标视频片段进行合成处理，得到剧情解说短视频。
在本实施例中，可以是将对应同一解说语句的解说语音和目标视频片段进行合成处理，得到合成的视频片段；并按照解说语句在剧情解说文本中的顺序，将合成的视频片段进行拼接处理，得到剧情解说短视频。
在本公开的一个实施例中，根据剧情解说文本和目标视频片段，生成剧情解说短视频，还可以包括：根据解说语音的时长，对对应的目标视频片段进行变速处理，以使解说语音的时长与对应的目标视频片段的时长相同。
在本实施例中，对于任一解说语音所对应的目标视频片段，可以是与该解说语音所对应的解说语句匹配的目标视频片段。
具体的，在解说语音的时长大于对应的目标视频片段的时长的情况下，可以是对目标视频片段进行压缩处理，在解说语音的时长小于对应的目标视频片段的时长的情况下，可以是对目标视频片段进行延长处理，使得解说语音的时长与对应的目标视频片段的时长相同。
在本公开的一个实施例中，根据剧情解说文本和目标视频片段，生成剧情解说短视频，还可以包括：抹除目标视频片段中的字幕；并将解说语句作为字幕添加至对应的目标视频片段中。
进一步地，该方法还可以包括：为剧情解说短视频搭配对应的背景音乐。具体的，可以是将剧情解说短视频与预先选定的背景音乐进一步进行合成处理。
再进一步地，该方法还可以包括：为剧情解说短视频搭加入特效和/或滤镜。
通过本实施例的方法，将目标长视频进行镜头分镜处理得到多个视频片段，对解说语句进行特征解析处理，得到解说语句的文本特征；对视频片段进行特征解析处理，得到视频片段的视频特征；并根据文本特征和视频特征，确定与剧情解说文本的解说语句匹配的视频片段，作为目标视频片段；再根据剧情解说文本和目标视频片段，自动生成剧情解说短视频，无需用户对目标长视频进行手工剪辑，可以提升剧情解说短视频的生产效率，实现剧情解说短视频生产的自动化和批量化，提升文娱产业的生产力。
<装置实施例>
在本实施例中，提供一种剧情解说短视频的生成装置4000，如图4所示，包括获取模块4100、分镜模块4200、特征解析模块4300、匹配模块4400和生成模块4500。所述获取模块4100用于获取目标长视频和所述目标长视频的剧情解说文本；其中，所述剧情解说文本包括至少一个解说语句；所述分镜模块4200用于将所述目标长视频进行镜头分镜处理，得到多个视频片段；所述特征解析模块4300用于对所述解说语句进行特征解析处理，得到所述解说语句的文本特征；对所述视频片段进行特征解析处理，得到所述视频片段的视频特征；所述匹配模块4300用于根据所述文本特征和所述视频特征，确定与所述剧情解说文本的所述解说语句匹配的视频片段，作为目标视频片段；所述生成模块4400用于根据所述剧情解说文本和所述目标视频片段，生成剧情解说短视频。
在本公开的一个实施例中，所述匹配模块4400还用于：
遍历所述视频片段，根据所述解析语句的所述文本特征和当前遍历的视频片段的视频特征，确定表示所述当前遍历的视频片段与所述解说语句之间相似度的最终相似度得分；
在遍历结束的情况下，根据所述最终相似度得分，确定与所述解说语句匹配的所述目标视频片段。
在本公开的一个实施例中，所述文本特征包括表示所述解析语句的关键信息的第一文本标签；所述视频特征包括表示所述视频片段的关键信息的第二文本标签；
所述根据所述解析语句的所述文本特征和当前遍历的视频片段的视频特征，确定表示所述当前遍历的视频片段与所述解说语句之间相似度的最终相似度得分，包括：
根据所述解说语句的第一文本标签和所述当前遍历的视频片段的第二文本标签，确定所述当前遍历的视频片段与所述解说语句之间的第一相似度得分；
根据所述第一相似度得分确定所述当前遍历的视频片段与所述解说语句之间的所述最终相似度得分。
在本公开的一个实施例中，所述关键信息包括角色信息，所述对所述视频片段进行特征解析处理，得到所述视频片段的视频特征，包括：
获取所述目标视频的演员表和角色关系；
提取所述视频片段中的人物信息；
将所述人物信息与所述演员表、所述角色人物关系进行匹配，得到所述视频片段中的角色信息。
在本公开的一个实施例中，所述文本特征还包括表示所述解说语句的内容的第一特征向量；所述视频特征还包括表示所述视频片段的内容的第二特征向量；
所述根据所述解析语句的所述文本特征和当前遍历的视频片段的视频特征，确定表示所述当前遍历的视频片段与所述解说语句之间相似度的目标得分，还包括：
根据所述解说语句的第一特征向量和所述当前遍历的视频片段的第二特征向量，确定所述当前遍历的视频片段与所述解说语句之间的第二相似度得分；
根据所述第二相似度得分确定所述当前遍历的视频片段与所述解说语句之间的所述最终相似度得分。
在本公开的一个实施例中，所述生成模块4500还用于：
将所述剧情解说文本的所述解说语句转换为对应的解说语音；
将所述解说语音与所述目标视频片段进行合成处理，得到所述剧情解说短视频。
在本公开的一个实施例中，所述生成模块4500还用于：
根据所述解说语音的时长，对对应的目标视频片段进行变速处理，以使所述解说语音的时长与对应的目标视频片段的播放时长相同。
在本公开的一个实施例中，所述生成模块4500还用于：
抹除所述目标视频片段中的字幕；
将所述解说语句作为字幕添加至对应的目标视频片段中。
本领域技术人员应当明白，可以通过各种方式来实现剧情解说短视频的生成装置4000。例如，可以通过指令配置处理器来实现剧情解说短视频的生成装置4000。例如，可以将指令存储在ROM中，并且当启动设备时，将指令从ROM读取到可编程器件中来实现剧情解说短视频的生成装置4000。例如，可以将剧情解说短视频的生成装置4000固化到专用器件(例如ASIC)中。可以将剧情解说短视频的生成装置4000分成相互独立的单元，或者可以将它们合并在一起实现。剧情解说短视频的生成装置4000可以通过上述各种实现方式中的一种来实现，或者可以通过上述各种实现方式中的两种或更多种方式的组合来实现。
在本实施例中，剧情解说短视频的生成装置4000可以具有多种实现形式，例如，剧情解说短视频的生成装置4000可以是任何的提供剧情解说短视频的生成服务的软件产品或者应用程序中运行的功能模块，或者是这些软件产品或者应用程序的外设嵌入件、插件、补丁件等，还可以是这些软件产品或者应用程序本身。
<电子设备>
在本实施例中，还提供一种电子设备5000。该电子设备5000可以是图1所示的电子设备1000。
在一方面，该电子设备5000可以包括前述的剧情解说短视频的生成装置4000，用于实施本公开任意实施例的剧情解说短视频的生成方法。
在另一方面，如图5所示，电子设备5000还可以包括处理器5100和存储器5200，该存储器5200用于存储可执行的指令；该处理器5100用于根据指令的控制运行电子设备5000执行根据本公开任意实施例的剧情解说短视频的生成方法。
在本实施例中，该电子设备5000可以是手机、平板电脑、掌上电脑、台式机、笔记本电脑等设备。例如，电子设备5000可以是具有剧情解说短视频的生成功能的电子产品。
<计算机可读存储介质>
在本实施例中，还提供一种计算机可读存储介质，其上存储有计算机程序，计算机程序在被处理器执行时实现如本公开任意实施例的剧情解说短视频的生成方法。
本公开可以是系统、方法和/或计算机程序产品。计算机程序产品可以包括计算机可读存储介质，其上载有用于使处理器实现本公开的各个方面的计算机可读程序指令。
计算机可读存储介质可以是可以保持和存储由指令执行设备使用的指令的有形设备。计算机可读存储介质例如可以是――但不限于――电存储设备、磁存储设备、光存储设备、电磁存储设备、半导体存储设备或者上述的任意合适的组合。计算机可读存储介质的更具体的例子(非穷举的列表)包括：便携式计算机盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、静态随机存取存储器(SRAM)、便携式压缩盘只读存储器(CD-ROM)、数字多功能盘(DVD)、记忆棒、软盘、机械编码设备、例如其上存储有指令的打孔卡或凹槽内凸起结构、以及上述的任意合适的组合。这里所使用的计算机可读存储介质不被解释为瞬时信号本身，诸如无线电波或者其他自由传播的电磁波、通过波导或其他传输媒介传播的电磁波(例如，通过光纤电缆的光脉冲)、或者通过电线传输的电信号。
这里所描述的计算机可读程序指令可以从计算机可读存储介质下载到各个计算/处理设备，或者通过网络、例如因特网、局域网、广域网和/或无线网下载到外部计算机或外部存储设备。网络可以包括铜传输电缆、光纤传输、无线传输、路由器、防火墙、交换机、网关计算机和/或边缘服务器。每个计算/处理设备中的网络适配卡或者网络接口从网络接收计算机可读程序指令，并转发该计算机可读程序指令，以供存储在各个计算/处理设备中的计算机可读存储介质中。
用于执行本公开操作的计算机程序指令可以是汇编指令、指令集架构(ISA)指令、机器指令、机器相关指令、微代码、固件指令、状态设置数据、或者以一种或多种编程语言的任意组合编写的源代码或目标代码，所述编程语言包括面向对象的编程语言—诸如Smalltalk、C++等，以及常规的过程式编程语言—诸如“C”语言或类似的编程语言。计算机可读程序指令可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中，远程计算机可以通过任意种类的网络—包括局域网(LAN)或广域网(WAN)—连接到用户计算机，或者，可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。在一些实施例中，通过利用计算机可读程序指令的状态信息来个性化定制电子电路，例如可编程逻辑电路、现场可编程门阵列(FPGA)或可编程逻辑阵列(PLA)，该电子电路可以执行计算机可读程序指令，从而实现本公开的各个方面。
这里参照根据本公开实施例的方法、装置(系统)和计算机程序产品的流程图和/或框图描述了本公开的各个方面。应当理解，流程图和/或框图的每个方框以及流程图和/或框图中各方框的组合，都可以由计算机可读程序指令实现。
这些计算机可读程序指令可以提供给通用计算机、专用计算机或其它可编程数据处理装置的处理器，从而生产出一种机器，使得这些指令在通过计算机或其它可编程数据处理装置的处理器执行时，产生了实现流程图和/或框图中的一个或多个方框中规定的功能/动作的装置。也可以把这些计算机可读程序指令存储在计算机可读存储介质中，这些指令使得计算机、可编程数据处理装置和/或其他设备以特定方式工作，从而，存储有指令的计算机可读介质则包括一个制造品，其包括实现流程图和/或框图中的一个或多个方框中规定的功能/动作的各个方面的指令。
也可以把计算机可读程序指令加载到计算机、其它可编程数据处理装置、或其它设备上，使得在计算机、其它可编程数据处理装置或其它设备上执行一系列操作步骤，以产生计算机实现的过程，从而使得在计算机、其它可编程数据处理装置、或其它设备上执行的指令实现流程图和/或框图中的一个或多个方框中规定的功能/动作。
附图中的流程图和框图显示了根据本公开的多个实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上，流程图或框图中的每个方框可以代表一个模块、程序段或指令的一部分，所述模块、程序段或指令的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。在有些作为替换的实现中，方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如，两个连续的方框实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这依所涉及的功能而定。也要注意的是，框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合，可以用执行规定的功能或动作的专用的基于硬件的系统来实现，或者可以用专用硬件与计算机指令的组合来实现。对于本领域技术人员来说公知的是，通过硬件方式实现、通过软件方式实现以及通过软件和硬件结合的方式实现都是等价的。
以上已经描述了本公开的各实施例，上述说明是示例性的，并非穷尽性的，并且也不限于所披露的各实施例。在不偏离所说明的各实施例的范围和精神的情况下，对于本技术领域的普通技术人员来说许多修改和变更都是显而易见的。本文中所用术语的选择，旨在最好地解释各实施例的原理、实际应用或对市场中的技术改进，或者使本技术领域的其它普通技术人员能理解本文披露的各实施例。本公开的范围由所附权利要求来限定。
Claims (11)
1.一种剧情解说短视频的生成方法，包括：
获取目标长视频和所述目标长视频的剧情解说文本；其中，所述剧情解说文本包括至少一个解说语句；
将所述目标长视频进行镜头分镜处理，得到多个视频片段；
对所述解说语句进行特征解析处理，得到所述解说语句的文本特征；对所述视频片段进行特征解析处理，得到所述视频片段的视频特征；
根据所述文本特征和所述视频特征，确定与所述剧情解说文本的所述解说语句匹配的视频片段，作为目标视频片段；
根据所述剧情解说文本和所述目标视频片段，生成剧情解说短视频。
2.根据权利要求1所述的方法，所述根据所述文本特征和所述视频特征，确定与所述剧情解说文本的所述解说语句匹配的视频片段，作为目标视频片段，包括：
遍历所述视频片段，根据所述解析语句的所述文本特征和当前遍历的视频片段的视频特征，确定表示所述当前遍历的视频片段与所述解说语句之间相似度的最终相似度得分；
在遍历结束的情况下，根据所述最终相似度得分，确定与所述解说语句匹配的所述目标视频片段。
3.根据权利要求2所述的方法，所述文本特征包括表示所述解析语句的关键信息的第一文本标签；所述视频特征包括表示所述视频片段的关键信息的第二文本标签；
所述根据所述解析语句的所述文本特征和当前遍历的视频片段的视频特征，确定表示所述当前遍历的视频片段与所述解说语句之间相似度的最终相似度得分，包括：
根据所述解说语句的第一文本标签和所述当前遍历的视频片段的第二文本标签，确定所述当前遍历的视频片段与所述解说语句之间的第一相似度得分；
根据所述第一相似度得分确定所述当前遍历的视频片段与所述解说语句之间的所述最终相似度得分。
4.根据权利要求3所述的方法，所述关键信息包括角色信息，所述对所述视频片段进行特征解析处理，得到所述视频片段的视频特征，包括：
获取所述目标视频的演员表和角色关系；
提取所述视频片段中的人物信息；
将所述人物信息与所述演员表、所述角色人物关系进行匹配，得到所述视频片段中的角色信息。
5.根据权利要求2或3所述的方法，所述文本特征还包括表示所述解说语句的内容的第一特征向量；所述视频特征还包括表示所述视频片段的内容的第二特征向量；
所述根据所述解析语句的所述文本特征和当前遍历的视频片段的视频特征，确定表示所述当前遍历的视频片段与所述解说语句之间相似度的目标得分，还包括：
根据所述解说语句的第一特征向量和所述当前遍历的视频片段的第二特征向量，确定所述当前遍历的视频片段与所述解说语句之间的第二相似度得分；
根据所述第二相似度得分确定所述当前遍历的视频片段与所述解说语句之间的所述最终相似度得分。
6.根据权利要求1所述的方法，所述根据所述剧情解说文本和所述目标视频片段，生成剧情解说短视频，包括：
将所述剧情解说文本的所述解说语句转换为对应的解说语音；
将所述解说语音与所述目标视频片段进行合成处理，得到所述剧情解说短视频。
7.根据权利要求6所述的方法，所述根据所述剧情解说文本和所述目标视频片段，生成剧情解说短视频，还包括：
根据所述解说语音的时长，对对应的目标视频片段进行变速处理，以使所述解说语音的时长与对应的目标视频片段的播放时长相同。
8.根据权利要求6所述的方法，所述根据所述剧情解说文本和所述目标视频片段，生成剧情解说短视频，还包括：
抹除所述目标视频片段中的字幕；
将所述解说语句作为字幕添加至对应的目标视频片段中。
9.一种剧情解说短视频的生成装置，包括：
获取模块，用于获取目标长视频和所述目标长视频的剧情解说文本；其中，所述剧情解说文本包括至少一个解说语句；
分镜模块，用于将所述目标长视频进行镜头分镜处理，得到多个视频片段；
特征解析模块，用于对所述解说语句进行特征解析处理，得到所述解说语句的文本特征；对所述视频片段进行特征解析处理，得到所述视频片段的视频特征；
匹配模块，用于根据所述文本特征和所述视频特征，确定与所述剧情解说文本的所述解说语句匹配的视频片段，作为目标视频片段；
生成模块，用于根据所述剧情解说文本和所述目标视频片段，生成剧情解说短视频。
10.一种电子设备，其中，包括：
根据权利要求9所述的装置；或者，
处理器和存储器，所述存储器用于存储指令，所述指令用于控制所述处理器执行根据权利要求1至8中任一项所述的方法。
11.一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序在被处理器执行时实现如权利要求1至8中任一项所述的方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210004240.3A CN114222196B (zh) | 2022-01-04 | 2022-01-04 | 一种剧情解说短视频的生成方法、装置及电子设备 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210004240.3A CN114222196B (zh) | 2022-01-04 | 2022-01-04 | 一种剧情解说短视频的生成方法、装置及电子设备 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN114222196A true CN114222196A (zh) | 2022-03-22 |
| CN114222196B CN114222196B (zh) | 2024-09-10 |
Family
ID=80707758
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202210004240.3A Active CN114222196B (zh) | 2022-01-04 | 2022-01-04 | 一种剧情解说短视频的生成方法、装置及电子设备 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN114222196B (zh) |
Cited By (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN114860994A (zh) * | 2022-04-21 | 2022-08-05 | 北京奇艺世纪科技有限公司 | 视频和剧情文本的对齐方法、装置、设备及存储介质 |
| CN115022705A (zh) * | 2022-05-24 | 2022-09-06 | 咪咕文化科技有限公司 | 一种视频播放方法、装置及设备 |
| CN115086783A (zh) * | 2022-06-28 | 2022-09-20 | 北京奇艺世纪科技有限公司 | 一种视频生成方法、装置及电子设备 |
| CN115942005A (zh) * | 2022-12-23 | 2023-04-07 | 北京有竹居网络技术有限公司 | 用于生成解说视频的方法、装置、设备和存储介质 |
| CN116916089A (zh) * | 2023-06-14 | 2023-10-20 | 西南交通大学 | 一种融合人声特征与人脸特征的智能视频剪辑方法 |
| CN117240983A (zh) * | 2023-11-16 | 2023-12-15 | 湖南快乐阳光互动娱乐传媒有限公司 | 一种自动生成有声剧的方法及装置 |
| CN117544822A (zh) * | 2024-01-09 | 2024-02-09 | 杭州任性智能科技有限公司 | 一种视频剪辑自动化方法和系统 |
| CN118042248A (zh) * | 2024-04-11 | 2024-05-14 | 深圳市捷易科技有限公司 | 视频生成方法、装置、设备及可读存储介质 |
| CN118400575A (zh) * | 2024-06-24 | 2024-07-26 | 湖南快乐阳光互动娱乐传媒有限公司 | 视频处理方法及相关装置 |
Citations (15)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2018136900A (ja) * | 2017-02-24 | 2018-08-30 | 東芝情報システム株式会社 | 文章解析装置及び文章解析プログラム |
| CN108833969A (zh) * | 2018-06-28 | 2018-11-16 | 腾讯科技（深圳）有限公司 | 一种直播流的剪辑方法、装置以及设备 |
| CN109218835A (zh) * | 2018-09-30 | 2019-01-15 | 百度在线网络技术（北京）有限公司 | 精华视频的生成方法、装置、设备及存储介质 |
| CN110113677A (zh) * | 2018-02-01 | 2019-08-09 | 阿里巴巴集团控股有限公司 | 视频主题的生成方法和装置 |
| CN110381359A (zh) * | 2019-06-26 | 2019-10-25 | 北京奇艺世纪科技有限公司 | 一种视频处理方法、装置、计算机设备及存储介质 |
| CN110929098A (zh) * | 2019-11-14 | 2020-03-27 | 腾讯科技（深圳）有限公司 | 视频数据的处理方法、装置、电子设备及存储介质 |
| CN111107444A (zh) * | 2019-12-27 | 2020-05-05 | 咪咕文化科技有限公司 | 用户评论生成方法、电子设备及存储介质 |
| CN111711855A (zh) * | 2020-05-27 | 2020-09-25 | 北京奇艺世纪科技有限公司 | 视频生成方法及装置 |
| CN111800671A (zh) * | 2019-04-08 | 2020-10-20 | 百度时代网络技术（北京）有限公司 | 用于对齐段落和视频的方法和装置 |
| CN112562719A (zh) * | 2020-11-30 | 2021-03-26 | 清华珠三角研究院 | 合成语音与原始视频匹配方法、系统、装置及存储介质 |
| WO2021136334A1 (zh) * | 2019-12-31 | 2021-07-08 | 阿里巴巴集团控股有限公司 | 视频生成方法和装置、电子设备以及计算机可读存储介质 |
| CN113613065A (zh) * | 2021-08-02 | 2021-11-05 | 北京百度网讯科技有限公司 | 视频编辑方法、装置、电子设备以及存储介质 |
| CN113630630A (zh) * | 2021-08-09 | 2021-11-09 | 咪咕数字传媒有限公司 | 一种视频解说配音信息的处理方法、装置及设备 |
| US20210349940A1 (en) * | 2019-06-17 | 2021-11-11 | Tencent Technology (Shenzhen) Company Limited | Video clip positioning method and apparatus, computer device, and storage medium |
| CN113821690A (zh) * | 2021-11-23 | 2021-12-21 | 阿里巴巴达摩院(杭州)科技有限公司 | 数据处理方法、装置、电子设备和存储介质 |
-
2022
- 2022-01-04 CN CN202210004240.3A patent/CN114222196B/zh active Active
Patent Citations (15)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2018136900A (ja) * | 2017-02-24 | 2018-08-30 | 東芝情報システム株式会社 | 文章解析装置及び文章解析プログラム |
| CN110113677A (zh) * | 2018-02-01 | 2019-08-09 | 阿里巴巴集团控股有限公司 | 视频主题的生成方法和装置 |
| CN108833969A (zh) * | 2018-06-28 | 2018-11-16 | 腾讯科技（深圳）有限公司 | 一种直播流的剪辑方法、装置以及设备 |
| CN109218835A (zh) * | 2018-09-30 | 2019-01-15 | 百度在线网络技术（北京）有限公司 | 精华视频的生成方法、装置、设备及存储介质 |
| CN111800671A (zh) * | 2019-04-08 | 2020-10-20 | 百度时代网络技术（北京）有限公司 | 用于对齐段落和视频的方法和装置 |
| US20210349940A1 (en) * | 2019-06-17 | 2021-11-11 | Tencent Technology (Shenzhen) Company Limited | Video clip positioning method and apparatus, computer device, and storage medium |
| CN110381359A (zh) * | 2019-06-26 | 2019-10-25 | 北京奇艺世纪科技有限公司 | 一种视频处理方法、装置、计算机设备及存储介质 |
| CN110929098A (zh) * | 2019-11-14 | 2020-03-27 | 腾讯科技（深圳）有限公司 | 视频数据的处理方法、装置、电子设备及存储介质 |
| CN111107444A (zh) * | 2019-12-27 | 2020-05-05 | 咪咕文化科技有限公司 | 用户评论生成方法、电子设备及存储介质 |
| WO2021136334A1 (zh) * | 2019-12-31 | 2021-07-08 | 阿里巴巴集团控股有限公司 | 视频生成方法和装置、电子设备以及计算机可读存储介质 |
| CN111711855A (zh) * | 2020-05-27 | 2020-09-25 | 北京奇艺世纪科技有限公司 | 视频生成方法及装置 |
| CN112562719A (zh) * | 2020-11-30 | 2021-03-26 | 清华珠三角研究院 | 合成语音与原始视频匹配方法、系统、装置及存储介质 |
| CN113613065A (zh) * | 2021-08-02 | 2021-11-05 | 北京百度网讯科技有限公司 | 视频编辑方法、装置、电子设备以及存储介质 |
| CN113630630A (zh) * | 2021-08-09 | 2021-11-09 | 咪咕数字传媒有限公司 | 一种视频解说配音信息的处理方法、装置及设备 |
| CN113821690A (zh) * | 2021-11-23 | 2021-12-21 | 阿里巴巴达摩院(杭州)科技有限公司 | 数据处理方法、装置、电子设备和存储介质 |
Non-Patent Citations (5)
| Title |
|---|
| AI全自动剪辑软件: "AI全自动剪辑软件最新版第二课：视频加文案进行批量自动剪辑", Retrieved from the Internet <URL:https://www.bilibili.com/video/av507923181/> * |
| 万彩办公大师: "如何制作电影解说短视频？用AI智能生成视频软件一步到位！", HTTPS://ZHUANLAN.ZHIHU.COM/P/375935989?UTM_ID=0 * |
| 安叔软件: "AI全自动视频批量剪辑软件使用教程-影视解说自动剪辑教程", Retrieved from the Internet <URL:https://www.bilibili.com/video/av545668387/> * |
| 自媒体自学网: "AI全自动剪辑视频软件：3分钟完成剪辑师24小时的视频剪辑创作！", HTTPS://ZHUANLAN.ZHIHU.COM/P/108606456?UTM_SOURCE=WECHATMESSAGE_ARTICLE_BOTTOM, pages 1 - 3 * |
| 自媒体自学网: "AI全自动剪辑视频软件：3分钟完成剪辑师24小时的视频剪辑创作！", pages 1 - 3, Retrieved from the Internet <URL:https://zhuanlan.zhihu.com/p/108606456?utm_source=wechatmessage_article_bottom> * |
Cited By (13)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN114860994A (zh) * | 2022-04-21 | 2022-08-05 | 北京奇艺世纪科技有限公司 | 视频和剧情文本的对齐方法、装置、设备及存储介质 |
| CN115022705A (zh) * | 2022-05-24 | 2022-09-06 | 咪咕文化科技有限公司 | 一种视频播放方法、装置及设备 |
| CN115086783A (zh) * | 2022-06-28 | 2022-09-20 | 北京奇艺世纪科技有限公司 | 一种视频生成方法、装置及电子设备 |
| CN115086783B (zh) * | 2022-06-28 | 2023-10-27 | 北京奇艺世纪科技有限公司 | 一种视频生成方法、装置及电子设备 |
| CN115942005A (zh) * | 2022-12-23 | 2023-04-07 | 北京有竹居网络技术有限公司 | 用于生成解说视频的方法、装置、设备和存储介质 |
| CN116916089A (zh) * | 2023-06-14 | 2023-10-20 | 西南交通大学 | 一种融合人声特征与人脸特征的智能视频剪辑方法 |
| CN117240983A (zh) * | 2023-11-16 | 2023-12-15 | 湖南快乐阳光互动娱乐传媒有限公司 | 一种自动生成有声剧的方法及装置 |
| CN117240983B (zh) * | 2023-11-16 | 2024-01-26 | 湖南快乐阳光互动娱乐传媒有限公司 | 一种自动生成有声剧的方法及装置 |
| CN117544822A (zh) * | 2024-01-09 | 2024-02-09 | 杭州任性智能科技有限公司 | 一种视频剪辑自动化方法和系统 |
| CN117544822B (zh) * | 2024-01-09 | 2024-03-26 | 杭州任性智能科技有限公司 | 一种视频剪辑自动化方法和系统 |
| CN118042248A (zh) * | 2024-04-11 | 2024-05-14 | 深圳市捷易科技有限公司 | 视频生成方法、装置、设备及可读存储介质 |
| CN118042248B (zh) * | 2024-04-11 | 2024-07-05 | 深圳市捷易科技有限公司 | 视频生成方法、装置、设备及可读存储介质 |
| CN118400575A (zh) * | 2024-06-24 | 2024-07-26 | 湖南快乐阳光互动娱乐传媒有限公司 | 视频处理方法及相关装置 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN114222196B (zh) | 2024-09-10 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN114222196B (zh) | 一种剧情解说短视频的生成方法、装置及电子设备 | |
| CN109688463B (zh) | 一种剪辑视频生成方法、装置、终端设备及存储介质 | |
| US20210082394A1 (en) | Method, apparatus, device and computer storage medium for generating speech packet | |
| EP3979658A1 (en) | Processing method, processing device, electronic device, and storage medium | |
| US11710510B2 (en) | Video generation method and apparatus, electronic device, and computer readable medium | |
| US9361714B2 (en) | Enhanced video description | |
| WO2021248835A1 (zh) | 视频处理方法及装置、电子设备、存储介质和计算机程序 | |
| CN110781349A (zh) | 用于短视频生成的方法、设备、客户端装置及电子设备 | |
| CN110121105B (zh) | 剪辑视频生成方法及装置 | |
| CN109815448B (zh) | 幻灯片生成方法及装置 | |
| CN112287168A (zh) | 用于生成视频的方法和装置 | |
| WO2017004384A1 (en) | User created textbook | |
| CN113038175B (zh) | 视频处理方法、装置、电子设备及计算机可读存储介质 | |
| CN112672202B (zh) | 弹幕处理方法、设备和存储介质 | |
| JP2018005011A (ja) | プレゼンテーション支援装置、プレゼンテーション支援システム、プレゼンテーション支援方法及びプレゼンテーション支援プログラム | |
| US11195426B2 (en) | System and method for automatic creation of step-by-step interactive guide using wearable devices | |
| CN115942039B (zh) | 视频生成方法、装置、电子设备和存储介质 | |
| CN116528015A (zh) | 数字人视频的生成方法、装置、电子设备和存储介质 | |
| CN111104545A (zh) | 背景音乐的配置方法、设备、客户端装置及电子设备 | |
| CN113221514A (zh) | 文本处理方法、装置、电子设备和存储介质 | |
| CN111428613A (zh) | 数据处理方法、装置、设备和存储介质 | |
| CN112037821A (zh) | 语音情感的视觉化表示方法、装置及计算机存储介质 | |
| CN112216275B (zh) | 一种语音信息的处理方法、装置及电子设备 | |
| CN114697760B (zh) | 一种处理方法、装置、电子设备及介质 | |
| KR102231163B1 (ko) | 영상 편집을 위한 전자 장치 및 그 동작 방법 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| TA01 | Transfer of patent application right | ||
| TA01 | Transfer of patent application right |
Effective date of registration: 20240308 Address after: 51 Belarusian Pasha Road, Singapore, Lai Zan Da Building 1 # 03-06, Postal Code 189554 Applicant after: Alibaba Innovation Co. Country or region after: Singapore Address before: Room 01, 45th Floor, AXA Building, 8 Shanton Road, Singapore Applicant before: Alibaba Singapore Holdings Ltd. Country or region before: Singapore |
|
| TA01 | Transfer of patent application right | ||
| TA01 | Transfer of patent application right |
Effective date of registration: 20240621 Address after: Room 201, No. 9 Fengxiang East Street, Yangsong Town, Huairou District, Beijing Applicant after: Youku Culture Technology (Beijing) Co.,Ltd. Country or region after: China Address before: 51 Belarusian Pasha Road, Singapore, Lai Zan Da Building 1 # 03-06, Postal Code 189554 Applicant before: Alibaba Innovation Co. Country or region before: Singapore |
|
| GR01 | Patent grant | ||
| GR01 | Patent grant |