CN111246122A - 一种多张照片合成视频的方法和装置 - Google Patents
一种多张照片合成视频的方法和装置 Download PDFInfo
- Publication number
- CN111246122A CN111246122A CN202010040661.2A CN202010040661A CN111246122A CN 111246122 A CN111246122 A CN 111246122A CN 202010040661 A CN202010040661 A CN 202010040661A CN 111246122 A CN111246122 A CN 111246122A
- Authority
- CN
- China
- Prior art keywords
- video
- frame
- picture
- texture
- template
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
- 230000002194 synthesizing effect Effects 0.000 title claims abstract description 29
- 238000000034 method Methods 0.000 title claims abstract description 16
- 238000006243 chemical reaction Methods 0.000 claims abstract description 12
- 239000000463 material Substances 0.000 claims description 7
- 230000015572 biosynthetic process Effects 0.000 claims description 4
- 238000003786 synthesis reaction Methods 0.000 claims description 4
- 239000002131 composite material Substances 0.000 claims description 2
- 230000000694 effects Effects 0.000 abstract description 6
- 238000013508 migration Methods 0.000 abstract 1
- 230000005012 migration Effects 0.000 abstract 1
- 238000009877 rendering Methods 0.000 description 7
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000007547 defect Effects 0.000 description 1
- 230000008034 disappearance Effects 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T13/00—Animation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Processing Or Creating Images (AREA)
- Editing Of Facsimile Originals (AREA)
Abstract
本发明公开了一种多张照片合成视频的方法和装置，通过对模板视频和模板配置文件的处理，将多张照片合成视频，不同的平台可以统一使用同一模板的配置文件，只需要提取编写一次模板配置，节省了平台迁移的时间成本，方便批量创造不同视频的动画和转换效果。
Description
技术领域
本发明涉及图片合成视频技术领域，尤其是涉及一种多张照片合成视频的方法和装置。
背景技术
随着移动互联网以及移动手机的快速发展，手机用户拍摄、编辑、制作个性化视频以及在社交平台上分享视频的需求越来越多样化，各种基于使用多张照片合成视频的应用也越来越多。但是，目前的现有技术，合成视频的方法和算法单调，仅仅是把简单的用户一维静态图展示在视频中，视频中缺少必要的图片动画以及图片彼此之间的转化切换。如果在现有的技术方案上，在视频中添加图片动画以及转化切换，会导致繁琐，算法重复，用户合成的视频风格不仅单调，场景单一，图片之间的契合不流畅，且适用性较低，针对不同内容的照片，效果较差。
发明内容
针对现有的技术缺陷，本发明的实施例提供一种多张照片合成视频的方法和装置，可以批量的创造不同视频动画和转换的效果，适用性强，满足用户个性化和多样化的需求。
本发明提供一种多张照片合成视频的方法，该方法包括：
解析素材视频的序列帧，读取数据配置文件，按照播放速度逐帧读取视频帧，得到每一帧动画的图片，分别提取RGB通道和Alpha通道得到两张PNG图片；
所述每一帧图片对应的两张PNG图片，左右拼接在一起，生成新的序列帧，所述新的序列帧生成的模板视频；
读取所述模板视频，获得预留的图片底层的转换动画信息，得到XML配置文件数据。
进一步的，所述动画包括，图片出现以及消失的时间，每个时间节点图片的旋转与缩放信息，图片的动画路径和贝塞尔控制点，通过配置关键帧的信息，使用贝塞尔曲线插值获得中间帧的信息。
基于OpenGL处理得到视频帧的纹理，得到模板视频帧纹理。
用户上传需要合成的照片，获取带合成照片纹理，并按照顺序排列，将照片纹理与模板视频帧纹理合成根据所述动画信息和XML配置文件数据，进行常规混合处理，生成视频帧纹理，并根据解码序号，进行编码合成视频。
进一步的，每一帧合成画面由两个图层混合，顶层图层对应的是模板视频帧纹理，底层图层对应的图像是用户选择的照片纹理
优选的，本发明公布一种多张照片合成视频的装置，该装置包括：
解析模块：解析素材视频的序列帧，读取数据配置文件，按照播放速度逐帧读取视频帧，得到每一帧动画的图片，分别提取RGB通道和Alpha通道得到两张PNG图片。
合并模块：用于所述每一帧图片对应的两张PNG图片，左右拼接在一起，生成新的序列帧，所述新的序列帧生成的模板视频。
数据采集模块：用于读取所述模板视频，获得预留的图片底层的转换动画信息，得到XML配置文件数据。
进一步的，所述动画包括，图片出现以及消失的时间，每个时间节点图片的旋转与缩放信息，图片的动画路径和贝塞尔控制点，通过配置关键帧的信息，使用贝塞尔曲线插值获得中间帧的信息。
纹理采集模块：基于OpenGL处理得到视频帧的纹理，得到模板视频帧纹理。
合成视频模块：用户上传需要合成的图片，获取带合成图片纹理，并按照顺序排列，将图片纹理与模板视频帧纹理合成根据所述动画信息和XML配置文件数据，进行常规混合处理，生成视频帧纹理，并根据解码序号，进行编码合成视频。
本发明公开一种多张照片合成视频的方法和装置，引入了模板配置文件和模板视频，模板配置文件与模板视频一一对应。模板配置文件中定义了生成照片视频中对应帧应该选取哪一张用户选择的照片作为生成视频的底层图层，还定义了这张底图的摆放位置、缩放比率、透明度等渲染这张照片所需的信息。模板视频包含了生成照片视频需要的所有顶层图层。通过模板配置文件渲染出底层图层，模板视频获取顶层图层，合成底层图层和顶层图片最终渲染出照片视频中的每一帧图像。该方案节省内存空间，可以批量创造不同视频动画和转换效果的视频。
附图说明
图1示出了本发明的一种多张照片合成视频的方法流程图；
图2示出了本发明的一种多张照片合成视频的装置流程图。
具体实施方式
本发明提供一种多张照片合成视频的方法，参照图1，对本发明实施方法做详细说明。
步骤S1：解析素材视频的序列帧，读取数据配置文件，按照播放速度逐帧读取视频帧，得到每一帧动画的图片，分别提取RGB通道和Alpha通道得到两张PNG图片。
步骤S2：所述每一帧图片对应的两张PNG图片，左右拼接在一起，生成新的序列帧，所述新的序列帧生成的模板视频。
上述解码图片的拼接，是为了保留用户素材视频中的Alpha通道。
步骤S3：读取所述模板视频，获得预留的图片底层的转换动画信息，得到XML配置文件数据。
步骤S4：基于OpenGL处理得到视频帧的纹理，得到模板视频帧纹理。
步骤S5：用户上传需要合成的照片，获取带合成照片纹理，并按照顺序排列，将照片纹理与模板视频帧纹理合成根据所述动画信息和XML配置文件数据，进行常规混合处理，生成视频帧纹理，并根据解码序号，进行编码合成视频。
进一步的，每一帧画面由两个图层合成，顶层图层对应的是模板视频帧纹理，底层图层对应的图像是用户选择的照片纹理。
如步骤S3所述动画包括，图片出现以及消失的时间，每个时间节点图片的旋转与缩放信息，图片的动画路径和贝塞尔控制点，通过配置关键帧的信息，使用贝塞尔曲线插值获得中间帧的信息。
通过视频序列帧以及After Effect软件Bodymovin插件导出的Json文件，确定视频中的预留图片层的转换动画信息，包括图片出现以及消失的时间，每个时间点图片的旋转与缩放信息。
优选的，如图2所示，本发明公布一种多张照片合成视频的装置，该装置包括：
解析模块：用于解析素材视频的序列帧，读取数据配置文件，按照播放速度逐帧读取视频帧，得到每一帧动画的图片，分别提取RGB通道和Alpha通道得到两张PNG图片。
合并模块：用于所述每一帧图片对应的两张PNG图片，左右拼接在一起，生成新的序列帧，所述新的序列帧生成的模板视频。
数据采集模块：用于读取所述模板视频，获得预留的图片底层的转换动画信息，得到XML配置文件数据。
进一步的，所述动画包括，图片出现以及消失的时间，每个时间节点图片的旋转与缩放信息，图片的动画路径和贝塞尔控制点，通过配置关键帧的信息，使用贝塞尔曲线插值获得中间帧的信息。
纹理采集模块：基于OpenGL处理得到视频帧的纹理，得到模板视频帧纹理。
合成视频模块：用户上传需要合成的照片，获取带合成照片纹理，并按照顺序排列，将照片纹理与模板视频帧纹理合成根据所述动画信息和XML配置文件数据，进行常规混合处理，生成视频帧纹理，并根据解码序号，进行编码合成视频。
将上述视频渲染到屏幕或通过移动平台的视频写入到API保存视频到用户设备中。
本视频合成技术中，模板视频，模板配置文件和上述装置框架，把生成的视频的每一帧画面由两个图层合成，顶层图层对应的图像就是模板视频帧，底层图层对应的图像是用户选择的照片。
本发明公开一种多张照片合成视频的方法和装置，引入了模板配置文件和模板视频，模板配置文件与模板视频一一对应。模板配置文件中定义了生成照片视频中对应帧应该选取哪一张用户选择的照片作为生成视频的底层图层，还定义了这张底图的摆放位置、缩放比率、透明度等渲染这张照片所需的信息。模板视频包含了生成照片视频需要的所有顶层图层。通过模板配置文件渲染出底层图层，模板视频获取顶层图层，合成底层图层和顶层图片最终渲染出照片视频中的每一帧图像。该方案节省内存空间，可以批量创造不同视频动画和转换效果的视频。
以上对本公开的实施例进行了描述。但是，这些实施例仅仅是为了说明的目的，而并非为了限制本公开的范围。尽管在以上分别描述了各实施例，但是这并不意味着各个实施例中的措施不能有利地结合使用。本公开的范围由所附权利要求及其等同物限定。不脱离本公开的范围，本领域技术人员可以做出多种替代和修改，这些替代和修改都应落在本公开的范围之内。
Claims (4)
1.一种多张照片合成视频的方法，该方法包括：
解析素材视频的序列帧，读取数据配置文件，按照播放速度逐帧读取视频帧，得到每一帧动画的图片，分别提取RGB通道和Alpha通道得到两张PNG图片；
所述每一帧图片对应的两张PNG图片，左右拼接在一起，生成新的序列帧，所述新的序列帧生成的模板视频；
读取所述模板视频，获得预留的图片底层的转换动画信息，得到XML配置文件数据；
基于OpenGL处理得到视频帧的纹理，得到模板视频帧纹理；
用户上传需要合成的照片，获取带合成照片纹理，并按照顺序排列，将照片纹理与模板视频帧纹理合成根据所述动画信息和XML配置文件数据，进行常规混合处理，生成视频帧纹理，并根据解码序号，进行编码合成视频。
2.如权利要求1所述一种多张照片合成视频的方法，其特征在于，所述动画包括，图片出现以及消失的时间，每个时间节点图片的旋转与缩放信息，图片的动画路径和贝塞尔控制点，通过配置关键帧的信息，使用贝塞尔曲线插值获得中间帧的信息。
3.如权利要求1所述一种多张照片合成视频的方法，其特征在于，所述合成视频中，每一帧的画面由两个图层合成，顶层图层对应的是模板视频帧纹理，底层图层对应的图像是用户选择的照片纹理。
4.一种多张照片合成视频的装置，该装置包括：
解析模块：用于解析素材视频的序列帧，读取数据配置文件，按照播放速度逐帧读取视频帧，得到每一帧动画的图片，分别提取RGB通道和Alpha通道得到两张PNG图片；
合并模块：用于所述每一帧图片对应的两张PNG图片，左右拼接在一起，生成新的序列帧，所述新的序列帧生成的模板视频；
数据采集模块：用于读取所述模板视频，获得预留的图片底层的转换动画信息，得到XML配置文件数据；
纹理采集模块：基于OpenGL处理得到视频帧的纹理，得到模板视频帧纹理。
合成视频模块：用户上传需要合成的图片，获取带合成图片纹理，并按照顺序排列，将图片纹理与模板视频帧纹理合成根据所述动画信息和XML配置文件数据，进行常规混合处理，生成视频帧纹理，并根据解码序号，进行编码合成视频。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010040661.2A CN111246122A (zh) | 2020-01-15 | 2020-01-15 | 一种多张照片合成视频的方法和装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010040661.2A CN111246122A (zh) | 2020-01-15 | 2020-01-15 | 一种多张照片合成视频的方法和装置 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN111246122A true CN111246122A (zh) | 2020-06-05 |
Family
ID=70865439
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202010040661.2A Withdrawn CN111246122A (zh) | 2020-01-15 | 2020-01-15 | 一种多张照片合成视频的方法和装置 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN111246122A (zh) |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112132932A (zh) * | 2020-09-02 | 2020-12-25 | 苏州好玩友网络科技有限公司 | 序列图自动生成方法及装置 |
| CN112995536A (zh) * | 2021-02-04 | 2021-06-18 | 上海哔哩哔哩科技有限公司 | 视频合成方法及系统 |
| CN113316019A (zh) * | 2021-05-26 | 2021-08-27 | 北京搜房科技发展有限公司 | 视频合成方法及装置 |
| CN114900736A (zh) * | 2022-03-28 | 2022-08-12 | 网易（杭州）网络有限公司 | 视频生成方法、装置和电子设备 |
-
2020
- 2020-01-15 CN CN202010040661.2A patent/CN111246122A/zh not_active Withdrawn
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112132932A (zh) * | 2020-09-02 | 2020-12-25 | 苏州好玩友网络科技有限公司 | 序列图自动生成方法及装置 |
| CN112995536A (zh) * | 2021-02-04 | 2021-06-18 | 上海哔哩哔哩科技有限公司 | 视频合成方法及系统 |
| CN113316019A (zh) * | 2021-05-26 | 2021-08-27 | 北京搜房科技发展有限公司 | 视频合成方法及装置 |
| CN113316019B (zh) * | 2021-05-26 | 2022-04-26 | 北京搜房科技发展有限公司 | 视频合成方法及装置 |
| CN114900736A (zh) * | 2022-03-28 | 2022-08-12 | 网易（杭州）网络有限公司 | 视频生成方法、装置和电子设备 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN111246122A (zh) | 一种多张照片合成视频的方法和装置 | |
| US10008238B2 (en) | System and method for incorporating digital footage into a digital cinematographic template | |
| CN106611435B (zh) | 动画处理方法和装置 | |
| CN110266971B (zh) | 一种短视频制作方法和系统 | |
| CN110290425A (zh) | 一种视频处理方法、装置及存储介质 | |
| CN111899155B (zh) | 视频处理方法、装置、计算机设备及存储介质 | |
| JP5289586B2 (ja) | 動的なイメージコラージュ | |
| CN111899322B (zh) | 视频处理方法、动画渲染sdk和设备及计算机存储介质 | |
| CN111161392B (zh) | 一种视频的生成方法、装置及计算机系统 | |
| KR20040054416A (ko) | 정지영상 이미지 처리방법 | |
| CN109874048B (zh) | 视频窗口组件半透明显示方法、装置以及计算机设备 | |
| CN107610207A (zh) | 一种生成gif图片的方法、装置及系统 | |
| CN112073794B (zh) | 动画处理方法、装置、计算机可读存储介质和计算机设备 | |
| CN113225606B (zh) | 视频弹幕处理方法及装置 | |
| CN107767437B (zh) | 一种多层混合异步渲染方法 | |
| CN113115097A (zh) | 视频播放方法、装置、电子设备和存储介质 | |
| CN103312981A (zh) | 一种多照片合成拍照方法及拍照装置 | |
| CN102572219A (zh) | 移动终端及其图像处理方法 | |
| CN114598937A (zh) | 动画视频生成、播放方法及装置 | |
| KR100882250B1 (ko) | 동적인 가상 이미지를 합성하기 위한 방법 | |
| JP2010533918A (ja) | グラフィックデータ提供方法及びグラフィックデータ表示方法 | |
| CN111064986B (zh) | 带透明度的动画数据发送方法、播放方法和计算机设备 | |
| JP2009258918A (ja) | 画像表示プログラム、画像表示装置及びアバター提供システム | |
| JP2012134775A (ja) | 画像処理装置、撮像装置、および画像処理プログラム | |
| CN109285197B (zh) | 一种gif图像处理方法和移动终端 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| WW01 | Invention patent application withdrawn after publication | ||
| WW01 | Invention patent application withdrawn after publication |
Application publication date: 20200605 |