CN107360383A - 一种自动生成视频的方法及系统 - Google Patents

一种自动生成视频的方法及系统 Download PDF

Info

Publication number
CN107360383A
CN107360383A CN201710619740.7A CN201710619740A CN107360383A CN 107360383 A CN107360383 A CN 107360383A CN 201710619740 A CN201710619740 A CN 201710619740A CN 107360383 A CN107360383 A CN 107360383A
Authority
CN
China
Prior art keywords
video
scene
automatically generating
packet
video material
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201710619740.7A
Other languages
English (en)
Other versions
CN107360383B (zh
Inventor
陆丹峰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Best Technology Co Ltd
Original Assignee
Beijing Best Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Best Technology Co Ltd filed Critical Beijing Best Technology Co Ltd
Priority to CN201710619740.7A priority Critical patent/CN107360383B/zh
Publication of CN107360383A publication Critical patent/CN107360383A/zh
Application granted granted Critical
Publication of CN107360383B publication Critical patent/CN107360383B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/265—Mixing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/272—Means for inserting a foreground image in a background image, i.e. inlay, outlay

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Management Or Editing Of Information On Record Carriers (AREA)
  • Television Signal Processing For Recording (AREA)
  • Studio Circuits (AREA)

Abstract

本发明涉及一种自动生成视频的方法及系统，所述自动生成视频的系统包括：素材进行排序分组模块，用于对视频素材进行排序分组；场景分配模块，用于对排序分组完毕的视频素材进行模板场景分配；匹配音乐节奏模块，用于使场景匹配音乐节奏；及渲染模块，用于视频渲染自动生成视频。本发明通过对视频素材进行排序分组、模板场景分配、使场景匹配音乐节奏以及视频渲染，更加自动化的生成视频，另外，在模板场景分配中，将版式适用以及预设场景的平均分配问题考虑进来，使素材和模板的能够更好地实现融合匹配。

Description

一种自动生成视频的方法及系统
技术领域
本发明涉及视频制作技术领域，具体涉及一种自动生成视频的方法及系统。
背景技术
现有的视频制作，绝大部分以人工手工制作为主。或虽有自动化视频制作的工具，也均是对固定的视频模板中固定素材的简单替换，一方面模板缺乏灵活性，另一方面缺乏对用户素材的分析以更好的实现素材和模板的融合匹配。
发明内容
本发明的目的在于提供一种自动生成视频的方法及系统，用以解决现有自动化视频制作工具缺乏灵活性及不能更好实现素材和模板的融合匹配问题。
为实现上述目的，本发明公开了一种自动生成视频的方法，所述自动生成视频的方法适于在计算设备中执行，其包括：对视频素材进行排序分组；对排序分组完毕的视频素材进行模板场景分配；使场景匹配音乐节奏；及进行视频渲染自动生成视频；其中，所述视频素材包括图片、视频和文字。
本发明公开的上述一种自动生成视频的方法，所述视频素材的排序分组方法包括通过综合分析视频素材的拍摄时间、拍摄地点、色调和内容主题中的一个或多个因素对所述视频素材进行排序分组。
本发明公开的上述一种自动生成视频的方法，所述视频素材的模板场景分配方法包括：根据版式为排序分组完毕的所有视频素材分配适合展示的场景；将排序分组完毕的同组视频素材放在连续的场景中；及平均使用和分布模板场景的所有预设场景。
本发明公开的上述一种自动生成视频的方法，所述视频素材的模板场景分配中，在根据版式为排序分组完毕的所有视频素材分配适合展示的场景的情况下，优先分配模板场景中出现频率较低的场景。
本发明公开的上述一种自动生成视频的方法，所述使场景匹配音乐节奏的方法包括：解析音乐；确定音乐的拍速和重音；及将分配生成的每个场景的转场时间点契合到音乐的重音点上。
本发明公开的上述一种自动生成视频的方法，所述自动生成视频的方法还包括：对视频素材进行预处理，在对视频素材进行排序分组之前，基于视频素材的人脸识别结果对视频素材进行预剪裁。
本发明公开的上述一种自动生成视频的系统，所述自动生成视频的系统包括：素材进行排序分组模块，用于对视频素材进行排序分组；场景分配模块，用于对排序分组完毕的视频素材进行模板场景分配；匹配音乐节奏模块，用于使场景匹配音乐节奏；及渲染模块，用于视频渲染自动生成视频。
本发明公开的上述一种自动生成视频的系统，所述自动生成视频的系统还包括：预处理模块，用于在对视频素材进行排序分组之前基于视频素材的人脸识别结果对视频素材进行预剪裁。
本发明具有如下优点：
本发明一种自动生成视频的方法及方法，通过对视频素材进行排序分组、模板场景分配、使场景匹配音乐节奏以及视频渲染，更加自动化的生成视频，另外，在模板场景分配中，将版式适用以及预设场景的平均分配问题考虑进来，使素材和模板的能够更好地实现融合匹配。
附图说明
图1为本发明公开的一种自动生成视频的系统的结构框图。
图2为本发明公开的一种自动生成视频的方法的流程图。
具体实施方式
以下实施例用于说明本发明，但不用来限制本发明的范围。
实施例1
参考图1，本实施例公开的一种自动生成视频的系统包括：预处理模块01，用于在对视频素材进行排序分组之前基于视频素材的人脸识别结果对视频素材进行预剪裁；素材进行排序分组模块02，用于对视频素材进行排序分组；场景分配模块03，用于对排序分组完毕的视频素材进行模板场景分配；匹配音乐节奏模块04，用于使场景匹配音乐节奏；及渲染模块05，用于视频渲染自动生成视频。
参考图2，本实施例公开的一种自动生成视频的方法适于在计算设备中执行，其包括：对视频素材进行预处理，对图片进行人脸识别(使用现有开源算法技术)，基于视频素材的人脸识别结果对视频素材进行预剪裁；对视频素材进行排序分组；对排序分组完毕的视频素材进行模板场景分配；使场景匹配音乐节奏；及进行视频渲染自动生成视频；其中，所述视频素材包括图片和视频。
进一步地，上述视频素材的排序分组方法包括通过综合分析视频素材的拍摄时间、拍摄地点、色调和内容主题(例如人物、风景等)中的一个或多个因素对所述视频素材进行排序分组，例如，按照拍摄时间进行排序，或按照色调由冷至暖或由暖至冷排序；相同时间段或相同地点拍摄的分成一组，或相同色调的分成一组，或相同内容(都是人物或都是风景等)的分成一组，或者使用上述几种分组和排序方式综合使用。
进一步地，上述视频素材的模板场景分配方法包括：根据版式为排序分组完毕的所有视频素材分配适合展示的场景，这样，所有的视频素材都分配到的场景都是最合适该素材进行展示的，比如横版照片分配到横版照片预设的场景，竖版照片分配到竖版照片预设的场景，连续多张横版的分配到能展示多张横版照片的场景；将排序分组完毕的同组视频素材放在连续的场景中；及平均使用和分布模板场景的所有预设场景，即，在根据版式为排序分组完毕的所有视频素材分配适合展示的场景的情况下，优先分配模板场景中出现频率较低的场景。
进一步地，上述使场景匹配音乐节奏的方法包括：解析音乐；确定音乐的拍速(BPM)和重音；及将分配生成的每个场景的转场时间点契合到音乐的重音点上，这样会让整个视频更契合视频的节奏以达到最好的效果。
通过上面的步骤自动化生成视频，用户在观看效果后，还可以对素材裁剪、排序等进行调整；系统会记录用户的调整。
模板化的视频制作，模板会有主题，会有适配不同素材的场景。用户上传素材(图片/视频/文字等)，本发明会对素材进行排序分组，并自动分配场景给到不同的素材(或素材组)并确定该场景的时长，然后系统渲染这些场景生成视频。
虽然，上文中已经用一般性说明及具体实施例对本发明作了详尽的描述，但在本发明基础上，可以对之作一些修改或改进，这对本领域技术人员而言是显而易见的。因此，在不偏离本发明精神的基础上所做的这些修改或改进，均属于本发明要求保护的范围。

Claims (8)

1.一种自动生成视频的方法，其特征在于，所述自动生成视频的方法适于在计算设备中执行，其包括：
对视频素材进行排序分组；
对排序分组完毕的视频素材进行模板场景分配；
使场景匹配音乐节奏；及
进行视频渲染自动生成视频；
其中，所述视频素材包括图片、视频和文字。
2.如权利要求1所述的一种自动生成视频的方法，其特征在于，所述视频素材的排序分组方法包括通过综合分析视频素材的拍摄时间、拍摄地点、色调和内容主题中的一个或多个因素对所述视频素材进行排序分组。
3.如权利要求1所述的一种自动生成视频的方法，其特征在于，所述视频素材的模板场景分配方法包括：
根据版式为排序分组完毕的所有视频素材分配适合展示的场景；
将排序分组完毕的同组视频素材放在连续的场景中；及
平均使用和分布模板场景的所有预设场景。
4.如权利要求1所述的一种自动生成视频的方法，其特征在于，所述视频素材的模板场景分配中，在根据版式为排序分组完毕的所有视频素材分配适合展示的场景的情况下，优先分配模板场景中出现频率较低的场景。
5.如权利要求1所述的一种自动生成视频的方法，其特征在于，所述使场景匹配音乐节奏的方法包括：
解析音乐；
确定音乐的拍速和重音；及
将分配生成的每个场景的转场时间点契合到音乐的重音点上。
6.如权利要求1所述的一种自动生成视频的方法，其特征在于，所述自动生成视频的方法还包括：对视频素材进行预处理，在对视频素材进行排序分组之前，基于视频素材的人脸识别结果对视频素材进行预剪裁。
7.一种自动生成视频的系统，其特征在于，所述自动生成视频的系统包括：
素材进行排序分组模块，用于对视频素材进行排序分组；
场景分配模块，用于对排序分组完毕的视频素材进行模板场景分配；
匹配音乐节奏模块，用于使场景匹配音乐节奏；及
渲染模块，用于视频渲染自动生成视频。
8.如权利要求7所述的一种自动生成视频的系统，其特征在于，所述自动生成视频的系统还包括：
预处理模块，用于在对视频素材进行排序分组之前基于视频素材的人脸识别结果对视频素材进行预剪裁。
CN201710619740.7A 2017-07-26 2017-07-26 一种自动生成视频的方法及系统 Active CN107360383B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710619740.7A CN107360383B (zh) 2017-07-26 2017-07-26 一种自动生成视频的方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710619740.7A CN107360383B (zh) 2017-07-26 2017-07-26 一种自动生成视频的方法及系统

Publications (2)

Publication Number Publication Date
CN107360383A true CN107360383A (zh) 2017-11-17
CN107360383B CN107360383B (zh) 2019-07-30

Family

ID=60286186

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710619740.7A Active CN107360383B (zh) 2017-07-26 2017-07-26 一种自动生成视频的方法及系统

Country Status (1)

Country Link
CN (1) CN107360383B (zh)

Cited By (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108229420A (zh) * 2018-01-22 2018-06-29 维沃移动通信有限公司 一种人脸识别方法、移动终端
CN108540849A (zh) * 2018-03-20 2018-09-14 厦门星罗网络科技有限公司 视频相册的生成方法及装置
CN109120875A (zh) * 2018-09-27 2019-01-01 乐蜜有限公司 视频渲染方法及装置
CN109360436A (zh) * 2018-11-02 2019-02-19 Oppo广东移动通信有限公司 一种视频生成方法、终端及存储介质
CN110445992A (zh) * 2019-08-16 2019-11-12 深圳特蓝图科技有限公司 一种基于xml的视频剪辑合成方法
CN110460908A (zh) * 2019-08-30 2019-11-15 上海互盾信息科技有限公司 一种生成视频时每帧图片的生成方法
CN110545476A (zh) * 2019-09-23 2019-12-06 广州酷狗计算机科技有限公司 视频合成的方法、装置、计算机设备及存储介质
CN110557688A (zh) * 2018-06-04 2019-12-10 上海临境文化传播有限公司 一种数字视频制作方法
CN110602550A (zh) * 2019-08-09 2019-12-20 咪咕动漫有限公司 一种视频处理方法、电子设备及存储介质
CN110798737A (zh) * 2019-11-29 2020-02-14 北京达佳互联信息技术有限公司 视音频合成方法、终端和存储介质
CN111757175A (zh) * 2020-06-08 2020-10-09 维沃移动通信有限公司 视频处理方法及装置
CN112035685A (zh) * 2020-08-17 2020-12-04 中移（杭州）信息技术有限公司 相册视频生成方法、电子设备和存储介质
WO2021008394A1 (zh) * 2019-07-15 2021-01-21 北京字节跳动网络技术有限公司 视频处理方法、装置、电子设备及存储介质
WO2021042933A1 (zh) * 2019-09-06 2021-03-11 Oppo广东移动通信有限公司 处理方法、处理装置、电子装置和存储介质
CN113240457A (zh) * 2021-04-25 2021-08-10 秒影工场(北京)科技有限公司 一种商业短视频跨账户智能批量投放的方法
CN113420244A (zh) * 2020-07-20 2021-09-21 阿里巴巴集团控股有限公司 动效模板生成方法、图片动态展示方法、装置及电子设备
CN113838490A (zh) * 2020-06-24 2021-12-24 华为技术有限公司 视频合成方法、装置、电子设备及存储介质

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070097266A1 (en) * 2005-11-02 2007-05-03 Apple Computer, Inc. Spatial and temporal alignment of video sequences
US20120204201A1 (en) * 2011-02-03 2012-08-09 Bby Solutions, Inc. Personalized best channel selection device and method
CN103402100A (zh) * 2013-08-23 2013-11-20 北京奇艺世纪科技有限公司 一种视频处理方法及移动终端
CN103785174A (zh) * 2014-02-26 2014-05-14 北京智明星通科技有限公司 一种游戏同一屏幕显示万人的方法和系统
CN104333767A (zh) * 2014-10-10 2015-02-04 厦门雅迅网络股份有限公司 一种车载视频监控系统多通道优先级控制方法及系统
CN104978758A (zh) * 2015-06-29 2015-10-14 世优（北京）科技有限公司 基于用户创作的图像的动画视频生成方法和装置
CN105915818A (zh) * 2016-05-10 2016-08-31 网易（杭州）网络有限公司 一种视频处理方法和装置

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070097266A1 (en) * 2005-11-02 2007-05-03 Apple Computer, Inc. Spatial and temporal alignment of video sequences
US20120204201A1 (en) * 2011-02-03 2012-08-09 Bby Solutions, Inc. Personalized best channel selection device and method
CN103402100A (zh) * 2013-08-23 2013-11-20 北京奇艺世纪科技有限公司 一种视频处理方法及移动终端
CN103785174A (zh) * 2014-02-26 2014-05-14 北京智明星通科技有限公司 一种游戏同一屏幕显示万人的方法和系统
CN104333767A (zh) * 2014-10-10 2015-02-04 厦门雅迅网络股份有限公司 一种车载视频监控系统多通道优先级控制方法及系统
CN104978758A (zh) * 2015-06-29 2015-10-14 世优（北京）科技有限公司 基于用户创作的图像的动画视频生成方法和装置
CN105915818A (zh) * 2016-05-10 2016-08-31 网易（杭州）网络有限公司 一种视频处理方法和装置

Cited By (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108229420A (zh) * 2018-01-22 2018-06-29 维沃移动通信有限公司 一种人脸识别方法、移动终端
CN108540849A (zh) * 2018-03-20 2018-09-14 厦门星罗网络科技有限公司 视频相册的生成方法及装置
CN110557688A (zh) * 2018-06-04 2019-12-10 上海临境文化传播有限公司 一种数字视频制作方法
CN109120875A (zh) * 2018-09-27 2019-01-01 乐蜜有限公司 视频渲染方法及装置
CN109360436A (zh) * 2018-11-02 2019-02-19 Oppo广东移动通信有限公司 一种视频生成方法、终端及存储介质
CN109360436B (zh) * 2018-11-02 2021-01-08 Oppo广东移动通信有限公司 一种视频生成方法、终端及存储介质
GB2600309B (en) * 2019-07-15 2024-01-31 Beijing Bytedance Network Tech Co Ltd Video processing method and apparatus, and electronic device and storage medium
WO2021008394A1 (zh) * 2019-07-15 2021-01-21 北京字节跳动网络技术有限公司 视频处理方法、装置、电子设备及存储介质
GB2600309A (en) * 2019-07-15 2022-04-27 Beijing Bytedance Network Tech Co Ltd Video processing method and apparatus, and electronic device and storage medium
US11978485B2 (en) 2019-07-15 2024-05-07 Beijing Bytedance Network Technology Co., Ltd. Video processing method and apparatus, and electronic device and storage medium
CN110602550A (zh) * 2019-08-09 2019-12-20 咪咕动漫有限公司 一种视频处理方法、电子设备及存储介质
CN110445992A (zh) * 2019-08-16 2019-11-12 深圳特蓝图科技有限公司 一种基于xml的视频剪辑合成方法
CN110460908A (zh) * 2019-08-30 2019-11-15 上海互盾信息科技有限公司 一种生成视频时每帧图片的生成方法
WO2021042933A1 (zh) * 2019-09-06 2021-03-11 Oppo广东移动通信有限公司 处理方法、处理装置、电子装置和存储介质
CN110545476A (zh) * 2019-09-23 2019-12-06 广州酷狗计算机科技有限公司 视频合成的方法、装置、计算机设备及存储介质
CN110798737A (zh) * 2019-11-29 2020-02-14 北京达佳互联信息技术有限公司 视音频合成方法、终端和存储介质
CN111757175A (zh) * 2020-06-08 2020-10-09 维沃移动通信有限公司 视频处理方法及装置
CN113838490A (zh) * 2020-06-24 2021-12-24 华为技术有限公司 视频合成方法、装置、电子设备及存储介质
WO2021258814A1 (zh) * 2020-06-24 2021-12-30 华为技术有限公司 视频合成方法、装置、电子设备及存储介质
CN113838490B (zh) * 2020-06-24 2022-11-11 华为技术有限公司 视频合成方法、装置、电子设备及存储介质
CN113420244A (zh) * 2020-07-20 2021-09-21 阿里巴巴集团控股有限公司 动效模板生成方法、图片动态展示方法、装置及电子设备
CN112035685A (zh) * 2020-08-17 2020-12-04 中移（杭州）信息技术有限公司 相册视频生成方法、电子设备和存储介质
CN113240457A (zh) * 2021-04-25 2021-08-10 秒影工场(北京)科技有限公司 一种商业短视频跨账户智能批量投放的方法

Also Published As

Publication number Publication date
CN107360383B (zh) 2019-07-30

Similar Documents

Publication Publication Date Title
CN107360383A (zh) 一种自动生成视频的方法及系统
CN102752540B (zh) 一种基于人脸识别技术的自动编目方法
CN101141603B (zh) 用于产生音乐与图像同步的动画的脚本的方法和设备
CN104284216B (zh) 一种生成视频精华剪辑的方法及其系统
CN110532426A (zh) 一种基于模板抽取多媒体素材生成视频的方法及系统
CN110139159A (zh) 视频素材的处理方法、装置及存储介质
CN108391062A (zh) 视频制作方法及系统
CN107222795B (zh) 一种多特征融合的视频摘要生成方法
US10242712B2 (en) Video synchronization based on audio
CN110415723B (zh) 音频分段的方法、装置、服务器及计算机可读存储介质
CN108766413B (zh) 语音合成方法及系统
WO2018050021A1 (zh) 虚拟现实场景调节方法、装置及存储介质
CN105323594A (zh) 在线直播榜单生成方法及装置
CN106302579A (zh) 一种任务的分发方法及服务器
CN110032352A (zh) 一种展示内容生成方法及装置
CN108090664A (zh) 一种工作流适配调度方法、装置、设备和存储介质
CN104699696A (zh) 文件推荐方法和装置
CN104320670A (zh) 一种网络视频的摘要信息提取方法及系统
CN110688496A (zh) 一种多媒体文件处理的方法及装置
CN110099284A (zh) 一种快捷发言的生成方法、装置及服务器
CN106327297A (zh) 一种提供虚拟礼物推荐信息的方法和装置
CN116150110B (zh) 基于ai深度学习的自动化数字教材建模系统
CN109088999A (zh) 一种播放回铃音的方法、装置及计算机可读存储介质
CN112004137A (zh) 一种智能视频创作方法及装置
CN110297927A (zh) 文章发布方法、装置、设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant