CN112015927B - 多媒体文件编辑方法、装置、电子设备和存储介质 - Google Patents
多媒体文件编辑方法、装置、电子设备和存储介质 Download PDFInfo
- Publication number
- CN112015927B CN112015927B CN202011054377.7A CN202011054377A CN112015927B CN 112015927 B CN112015927 B CN 112015927B CN 202011054377 A CN202011054377 A CN 202011054377A CN 112015927 B CN112015927 B CN 112015927B
- Authority
- CN
- China
- Prior art keywords
- linked list
- editing
- file
- operation information
- track
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 83
- 238000009877 rendering Methods 0.000 claims abstract description 32
- 230000002194 synthesizing effect Effects 0.000 claims abstract description 24
- 238000012545 processing Methods 0.000 claims description 36
- 230000015654 memory Effects 0.000 claims description 19
- 230000015572 biosynthetic process Effects 0.000 claims description 16
- 238000003786 synthesis reaction Methods 0.000 claims description 16
- 230000007704 transition Effects 0.000 claims description 4
- 238000011161 development Methods 0.000 abstract description 8
- 238000012423 maintenance Methods 0.000 abstract description 8
- 230000009286 beneficial effect Effects 0.000 abstract 1
- 230000008569 process Effects 0.000 description 25
- 238000010586 diagram Methods 0.000 description 15
- 238000004590 computer program Methods 0.000 description 8
- 230000000694 effects Effects 0.000 description 8
- 238000004891 communication Methods 0.000 description 7
- 230000008520 organization Effects 0.000 description 5
- 238000005516 engineering process Methods 0.000 description 4
- 230000006870 function Effects 0.000 description 4
- 230000002349 favourable effect Effects 0.000 description 3
- 230000003993 interaction Effects 0.000 description 3
- 238000011835 investigation Methods 0.000 description 3
- 238000013507 mapping Methods 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 230000002457 bidirectional effect Effects 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 239000000203 mixture Substances 0.000 description 2
- 238000012360 testing method Methods 0.000 description 2
- 238000004458 analytical method Methods 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 239000002131 composite material Substances 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 238000007620 mathematical function Methods 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000004806 packaging method and process Methods 0.000 description 1
- 230000001953 sensory effect Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/40—Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
- G06F16/44—Browsing; Visualisation therefor
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/40—Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
- G06F16/45—Clustering; Classification
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/40—Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
- G06F16/48—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/44—Arrangements for executing specific programs
- G06F9/451—Execution arrangements for user interfaces
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- Databases & Information Systems (AREA)
- Data Mining & Analysis (AREA)
- Multimedia (AREA)
- Software Systems (AREA)
- Library & Information Science (AREA)
- Human Computer Interaction (AREA)
- Television Signal Processing For Recording (AREA)
- Management Or Editing Of Information On Record Carriers (AREA)
Abstract
本申请公开了多媒体文件编辑方法、多媒体文件编辑装置、电子设备和存储介质，涉及计算机技术领域。具体实现方案为：多媒体文件编辑方法包括：获取多个编辑轨道中每个编辑轨道分别对应的操作信息，其中，操作信息用于编辑多媒体文件；针对每个编辑轨道，根据编辑轨道对应的操作信息生成与编辑轨道对应的链表，每条链表包括按照时间顺序排列的一个或多个节点，每个节点包括用于编辑多媒体文件的操作信息；针对每条链表，根据链表的节点中的操作信息，对多媒体文件进行渲染，得到与链表对应的中间文件；以及将多个中间文件进行合成，生成目标文件。采用链表的数据结构将用于合成多媒体文件的数据进行抽象管理，利于开发维护，且结构简单。
Description
技术领域
本申请实施例涉及计算机技术领域，具体涉及云计算技术领域，尤其涉及多媒体文件编辑方法、多媒体文件编辑装置、电子设备和存储介质。
背景技术
随着计算机技术的不断发展，多媒体数据也在不断的增长。例如，音频、视频或照片等多媒体数据越来越多。同时，人们对于多媒体数据的展示效果也有了更多方面的要求。例如，人们希望制作出丰富多彩的视频，制作出画质清晰的视频，或者制作出好听的音频等等。
目前，可以采用相关技术将多媒体数据和操作处理相关信息进行整合，从而生成用户想要制作的多媒体文件，但是，采用相关技术制作多媒体文件的处理效率低，速度慢。
发明内容
提供了一种多媒体文件编辑方法、多媒体文件编辑装置、电子设备和存储介质。
根据第一方面，提供了一种多媒体文件编辑方法，包括：获取多个编辑轨道中每个编辑轨道分别对应的操作信息，其中，所述操作信息用于编辑多媒体文件；针对每个所述编辑轨道，根据所述编辑轨道对应的操作信息生成与所述编辑轨道对应的链表，得到多条链表，其中，每条所述链表包括按照时间顺序排列的一个或多个节点，每个所述节点包括用于编辑所述多媒体文件的操作信息；针对每条所述链表，根据所述链表的节点中的操作信息，对所述多媒体文件进行渲染，得到与所述链表对应的中间文件；以及将多个所述中间文件进行合成，生成目标文件。
根据第二方面，提供了一种多媒体文件编辑装置，包括：获取模块、第一生成模块、渲染模块和合成模块。
获取模块用于获取多个编辑轨道中每个编辑轨道分别对应的操作信息，其中，所述操作信息用于编辑多媒体文件；
第一生成模块用于针对每个所述编辑轨道，根据所述编辑轨道对应的操作信息生成与所述编辑轨道对应的链表，得到多条链表，其中，每条所述链表包括按照时间顺序排列的一个或多个节点，每个所述节点包括用于编辑所述多媒体文件的操作信息；
渲染模块用于针对每条所述链表，根据所述链表的节点中的操作信息，对所述多媒体文件进行渲染，得到与所述链表对应的中间文件；以及
合成模块用于将多个所述中间文件进行合成，生成目标文件。
根据第三方面，提供了一种电子设备，包括：至少一个处理器；以及与上述至少一个处理器通信连接的存储器；其中，上述存储器存储有可被上述至少一个处理器执行的指令，上述指令被上述至少一个处理器执行，以使上述至少一个处理器能够执行本申请上述的方法。
根据第四方面，提供了一种存储有计算机指令的非瞬时计算机可读存储介质，上述计算机指令用于使上述计算机执行本申请上述的方法。
根据第五方面，提供了一种计算机程序产品，包括计算机程序，所述计算机程序在被处理器执行时实现上述方法。
本申请的实施例采用链表的数据结构将合成多媒体文件的数据进行抽象管理，将用于编辑多媒体文件的操作信息记录在链表的节点中，在时域上，每条链表的节点按照时间顺序组合排列，利于开发维护，且结构简单，可以针对每一个节点进行渲染处理操作，不同轨道产出一个中间文件来进行组织合并，错误率低，可以进行多进程多媒体文件合成，速度快，提高了多媒体文件的处理效率。
应当理解，本部分所描述的内容并非旨在标识本公开的实施例的关键或重要特征，也不用于限制本公开的范围。本公开的其它特征将通过以下的说明书而变得容易理解。
附图说明
附图用于更好地理解本方案，不构成对本申请的限定。其中：
图1示意性示出了根据本公开实施例的可以应用多媒体文件编辑方法及装置的示例性系统架构；
图2示意性示出了根据本公开实施例的多媒体文件编辑方法的流程图；
图3示意性示出了根据本公开实施例的在客户端显示的多媒体文件编辑界面的示意图；
图4示意性示出了根据本公开实施例的链表的示意图；
图5示意性示出了根据本公开实施例的多条链表之间关联的示意图；
图6示意性示出了根据本公开实施例的与背景文件对应的链表的节点通过第三指针指向与编辑轨道对应的链表的头节点的示意图；
图7示意性示出了根据本公开另一实施例的多条链表之间关联的示意图；
图8示意性示出了根据本公开另一实施例的多媒体文件编辑方法的流程图；
图9示意性示出了根据本公开另一实施例的多媒体文件编辑方法的流程图；
图10示意性示出了根据本公开实施例的多媒体文件编辑装置的框图；以及
图11示意性示出了根据本公开实施例的适于实现多媒体文件编辑方法的电子设备的框图。
具体实施方式
以下结合附图对本申请的示范性实施例做出说明，其中包括本申请实施例的各种细节以助于理解，应当将它们认为仅仅是示范性的。因此，本领域普通技术人员应当认识到，可以对这里描述的实施例做出各种改变和修改，而不会背离本申请的范围和精神。同样，为了清楚和简明，以下的描述中省略了对公知功能和结构的描述。
在本申请的实施例中，主要涉及如下技术术语。
时间轴，用于表达信号、对象在时域空间内的一个关联关系。常用于描述主体和行为和时间维度的顺序关联关系。
时域，是描述数学函数或物理信号对时间的关系。例如一个信号的时域波形可以表达信号随着时间的变化。
命令行，简称CMD，全称是Command Line，是非可视化状态下输入命令来执行一些操作。
Ffmpeg，全称是Fast forward mpeg，是一种音视频转码的框架，主要用于多媒体文件的编码、解码和转封装。
链表，英文全称是Link List，是一种存储数据结构，以数据节点为单元、以指针为核心要素连接在一起的数据结构为链表。
二维链表，也可以称之为双向链表，英文全称是Two-dimension，是一种基于链表的存储数据结构，链表是一维的，二维链表是类矩阵的多条链表在空域以头节点相连组合成的二维度的链表数据结构。
在视频编辑过程中，如果将视频文件、音频文件、字幕文件和贴图文件与操作信息进行整合，一般通过生成一条冗长的转码指令来进行视频转码。
在这种情况下，如果视频编辑、增加特效和处理操作繁多和复杂，生成的单条转码指令会特别长。
从开发角度，过长的转码指令容错率低、转码指令文本过大，无法透彻理解转码指令。从维护角度，单条庞大体积的转码指令如果出现错误，FFmpeg的现有错误提示无法准确指向错误坐标，需要拆分转码指令解决定位问题。
从运行角度，单条庞大、冗余的转码指令，会将整个视频编辑的效果用一个进程在一段不间断的时间内持续运行去编码合成，这期间如果发生进程中断、或者其他操作系统级别的问题导致进程中断，将会丢失当前转码进度；因为整个过程集中在一个进程中，无法提供进度无法检查具体转码合成进度，无步骤拆分。同时因为在转码过程中不停的写入最终的编码多媒体文件，所以这个媒体文件将是不完整的媒体文件，最终导致合成结果其实是错误的结果。
从测试排查角度，视频编辑最终合成转码编辑的过程中，需要中间产出文件去检查是否是哪个步骤转码中间结果有误，可以更加方便的定位排查。从迭代维护、软件工程角度分析，现有的整条转码指令是String字符串；因为FFmpeg其实是一个基于空域组织的结构，但是String字符串是基于时域去组织的，这种情况下会导致拼接庞大的转码指令过程产生矛盾、随着转码指令String字符串越长，拼接过程就越难以维护，缺乏逻辑性，后期迭代几乎无法维护。这种架构的最终容错性也比较差，不适用于复杂的视频特效编辑场景。
图1示意性示出了根据本公开实施例的可以应用多媒体文件编辑方法及装置的示例性系统架构。
需要注意的是，图1所示仅为可以应用本公开实施例的系统架构的示例，以帮助本领域技术人员理解本公开的技术内容，但并不意味着本公开实施例不可以用于其他设备、系统、环境或场景。例如，在另一实施例中，应用多媒体文件编辑方法及装置的示例性系统架构可以仅包括终端设备，但终端设备可以无需与服务器进行交互，即可实现本公开实施例提供的多媒体文件编辑方法及装置。
如图1所示，根据该实施例的系统架构100可以包括终端设备101、102、103，网络104和服务器105。网络104用以在终端设备101、102、103和服务器105之间提供通信链路的介质。网络104可以包括各种连接类型，例如有线和/或无线通信链路等等。
用户可以使用终端设备101、102、103通过网络104与服务器105交互，以接收或发送消息等。终端设备101、102、103上可以安装有各种通讯客户端应用，例如视频编辑应用、音频编辑应用、邮箱客户端和/或社交平台软件等(仅为示例)。
终端设备101、102、103可以是具有显示屏并且支持网页浏览的各种电子设备，包括但不限于智能手机、平板电脑、膝上型便携计算机和台式计算机等等。
服务器105可以是提供各种服务的服务器，例如对用户利用终端设备101、102、103进行视频编辑的内容提供编码或转码的云端服务器(仅为示例)。云端服务器可以对接收到的用户请求等数据进行分析等处理，并将处理结果(例如根据用户请求获取或生成的信息、或数据等)反馈给终端设备。
需要说明的是，本申请实施例所提供的多媒体文件编辑方法一般可以由服务器105执行。相应地，本申请实施例所提供的多媒体文件编辑装置一般可以设置于服务器105中。本申请实施例所提供的多媒体文件编辑方法也可以由不同于服务器105且能够与终端设备101、102、103和/或服务器105通信的服务器或服务器集群执行。相应地，本申请实施例所提供的多媒体文件编辑装置也可以设置于不同于服务器105且能够与终端设备101、102、103和/或服务器105通信的服务器或服务器集群中。
例如，用户使用终端设备101、102、103编辑视频文件，然后将操作信息发送给服务器105，由服务器105对操作信息进行处理，执行本申请实施例的多媒体文件编辑方法。或者由能够与终端设备101、102、103和/或服务器105通信的服务器或服务器集群对操作信息进行处理，并最终生成目标文件。
或者，本申请实施例所提供的多媒体文件编辑方法也可以由终端设备101、102、或103执行。相应地，本申请实施例所提供的多媒体文件编辑装置也可以设置于终端设备101、102、或103中。
应该理解，图1中的终端设备、网络和服务器的数目仅仅是示意性的。根据实现需要，可以具有任意数目的终端设备、网络和服务器。
图2示意性示出了根据本公开实施例的多媒体文件编辑方法的流程图。
如图2所示，该方法200包括操作S210～S240。
在操作S210，获取多个编辑轨道中每个编辑轨道分别对应的操作信息，其中，操作信息用于编辑多媒体文件。
在操作S220，针对每个编辑轨道，根据编辑轨道对应的操作信息生成与编辑轨道对应的链表，得到多条链表，其中，每条链表包括按照时间顺序排列的一个或多个节点，每个节点包括用于编辑多媒体文件的操作信息。
在操作S230，针对每条链表，根据链表的节点中的操作信息，对多媒体文件进行渲染，得到与链表对应的中间文件。
在操作S240，将多个中间文件进行合成，生成目标文件。
本申请的实施例采用链表的数据结构将用于合成多媒体文件的数据进行抽象管理，将用于编辑多媒体文件的操作信息记录在链表的节点中，在时域上，每条链表的节点按照时间顺序组合排列，利于开发维护，且结构简单，可以针对每一个节点进行渲染处理操作，不同编辑轨道产出一个中间文件来进行组织合并，错误率低，可以进行多进程多媒体文件合成，速度快，提高了多媒体文件的处理效率。
根据本申请的实施例，编辑轨道用于用户编辑多媒体文件，编辑轨道的类型不做限定，上述多个编辑轨道的类型相同或不同。例如，编辑轨道的类型包括以下至少之一：视频轨道、音频轨道、字幕轨道、贴图轨道。上述编辑轨道的类型仅是示例性实施例，但不限于此，还可以包括本领域已知类型的编辑轨道，只要能够用于用户编辑多媒体文件即可。
根据本申请的实施例，可以实现对不同类型的多媒体文件进行处理，相比于仅能实现一种类型的多媒体文件而言，扩展了多媒体文件的编辑功能。
根据本申请的实施例，操作信息包括以下至少之一：滤镜信息、转场信息、倍速信息、裁剪信息、旋转信息、图像亮度信息、图像色度信息、图像饱和度信息、图像展示尺寸、图像展示时长、图像展示坐标。上述操作信息的类型仅是示例性实施例，但不限于此，还可以包括本领域已知的操作信息，只要能够用于用户编辑多媒体文件即可。
根据本申请的实施例，每个编辑轨道分别对应的操作信息用于编辑多媒体文件。多媒体文件的类型包括但不限于：视频文件、音频文件、字幕文件、贴图文件。
图3示意性示出了根据本公开实施例的在客户端显示的多媒体文件编辑界面的示意图。
如图3所示，在该编辑界面中包括多个用于提供多媒体文件的组件，例如，包括视频组件301、音频组件302、字幕组件303、贴图组件304，用户可以通过这些组件选择不同的多媒体文件，包括但不限于视频文件、音频文件、字幕文件、贴图文件等等。
同时，在该编辑界面中，可以包括不同类型的编辑轨道，例如，包括视频轨道、音频轨道、字幕轨道、贴图轨道。每种类型的编辑轨道可以包括一个或多个，多个编辑轨道中可以包括一个主轨道和多个副轨道。例如，如图3所示，在一种实施例中，可以包括视频轨道305、主音频轨道306、副音频轨道307、字幕轨道308。用户可以在每个轨道上编辑与轨道类型对应的一个或多个多媒体文件。例如，在视频轨道上可以编辑视频文件，在音频轨道上可以编辑音频文件，在字幕轨道上可以编辑字幕文件。
根据本申请的实施例，在轨道的上方可以设置一条时间轴309，用于在编辑不同轨道上的多媒体文件时作为时间信息进行参照使用。
根据本申请的实施例，该编辑界面中还可以包括用于预览合成的目标文件的窗口310和合成组件311。用户可以操作合成组件311对编辑好的多媒体文件进行合成。
根据本申请的实施例，上述编辑界面仅是示例性实施例，不能对本申请进行不适当的限定。
根据本申请的实施例，在操作S210中，获取多个编辑轨道中每个编辑轨道分别对应的操作信息包括：获取用户基于时间轴在多个编辑轨道中，对多个多媒体文件分别进行编辑得到的操作信息，其中，每个编辑轨道对应一个或多个多媒体文件，每个多媒体文件具有对应的操作信息。
根据本申请的实施例，例如，视频轨道可以对应第一视频文件和第二视频文件，第一视频文件对应倍速信息、裁剪信息、旋转信息、图像展示尺寸、图像展示时长、图像展示坐标等操作信息；第二视频文件对应滤镜信息、倍速信息、图像展示尺寸、图像展示时长、图像展示坐标等操作信息。
图4示意性示出了根据本公开实施例的链表的示意图。
如图4所示，该链表包括按照时间顺序排列的3个节点，即Video-0-0，Video-0-1，Video-0-2，其中，Video表示视频文件。每个节点包括用于编辑多媒体文件的操作信息，例如，Video-0-0包括操作1、操作2、操作3和操作4。根据本申请的实施例，按照时间顺序排列的节点中的操作信息可以依次被执行。
根据本申请的实施例，每个节点可以对应一个多媒体文件，每个节点包括用于编辑一个多媒体文件的操作信息。
根据本申请的实施例，链表还可以包括头节点，头节点包括编辑轨道类型和编辑轨道标识；头节点通过第一指针与按照时间顺序排列的一个或多个节点关联；头节点通过第二指针与其它链表的头节点关联。
图5示意性示出了根据本公开实施例的多条链表之间关联的示意图。
根据本申请的实施例，每条链表可以对应于一个编辑轨道，如图5所示，链表501可以对应于主视频轨道，链表502可以对应于副视频轨道，链表503可以对应于音频轨道。
根据本申请的实施例，链表501包括头节点Video-0，包括节点Video-0-0，Video-0-1，Video-0-2。链表502包括头节点Video-1，包括节点Video-1-0，Video-1-1，Video-1-2。链表503包括头节点Audio-0，包括节点Audio-0-0，Audio-0-1，Audio-0-2，其中，Audio表示音频文件。每个头节点通过第一指针与按照时间顺序排列的一个或多个节点关联，每个头节点通过第二指针与其它链表的头节点关联。头节点中的编辑轨道类型包括Video和Audio，头节点中的编辑轨道标识包括Video-0、Video-1和Audio-0。
根据本申请的实施例，每条链表中的节点数量不做限定，节点数量可以与编辑轨道中的多媒体文件数量相同。需要说明的是，为了视图的简洁，链表501中的其他节点，以及链表502和链表503中的节点对应的操作信息没有示出。
根据本申请的实施例，在合成目标文件之后，还可以根据多媒体文件的播放时长生成背景文件；生成与背景文件对应的链表，其中，与背景文件对应的链表的节点中包括背景文件的播放时长；以及根据与背景文件对应的链表的节点中的播放时长，对背景文件进行渲染。
根据本申请的实施例，背景文件可以是根据多媒体文件合成的最终时长生成的纯色背景，基于背景文件进行覆盖转码，可以兼容两端视频之间的留白空隙，使得两端视频素材之间可以不用相邻。例如，在一次视频编辑过程中，包括3个视频文件，最后1个视频文件播放完成时一共需要3分钟，那么背景文件的时长可以为3分钟，或者比3分钟大一些。
根据本申请的实施例，与背景文件对应的链表的节点通过第三指针指向与编辑轨道对应的链表的头节点。
根据本申请的实施例，与背景文件对应的链表可以设置在与编辑轨道对应的链表之前，即与背景文件对应的链表可以作为第一个链表。
图6示意性示出了根据本公开实施例的与背景文件对应的链表的节点通过第三指针指向与编辑轨道对应的链表的头节点的示意图。
如图6所示，Video-bg代表背景视频的链表，与背景文件对应的链表600可以只包括一个节点，该节点通过第三指针601指向与编辑轨道对应的链表的头节点，例如，通过第三指针601指向头节点Video-0。
根据本申请的实施例，链表的类型包括但不限于音频类别的链表、视频类别的链表，还可以包括字幕类别的链表和贴图类别的链表。
图7示意性示出了根据本公开另一实施例的多条链表之间关联的示意图。
如图7所示，Video-bg代表背景视频的链表，Video代表视频类别的链表、Audio代表音频类别的链表、Subtitle代表字幕类别的链表、Watermark代表贴图类别的链表。
其中，视频类别的链表包括Video-0和Video-1，Video-0可以表示主轨道视频链表，Video-1可以表示副轨道视频链表。音频类别的链表包括Audio-0，字幕类别的链表包括Subtitle-0，贴图类别的链表包括Watermark-0和Watermark-1。Watermark-0可以表示主轨道贴图链表，Watermark-1可以表示副轨道贴图链表。
根据本申请的实施例，不同链表之间通过指针关联，不同链表之间可以按照执行时间顺序进行排列。
根据本申请的实施例，图7所示的链表结构可以称之为二维链表结构，二维链表一端可以指向链表中的节点，另一端可以指向其他链表。二维链表结构为双向链表，方便做查找操作，比如对上一个链表或者节点的产出依赖处理
根据本申请的实施例，二维链表结构的第一个链表为背景视频的链表，可以基于视频最大时长计算出背景视频的时长。
根据本申请的实施例，二维链表结构从上向下每条链表可以组织一套转码指令进行合成。
根据本申请的实施例，针对每条链表，根据链表的节点中的操作信息，对多媒体文件进行渲染包括：针对每条链表，生成与链表的节点中的操作信息对应的转码指令；以及根据转码指令对多媒体文件进行渲染，得到与链表对应的中间文件。
根据本申请的实施例，由于每条链表具有对应的转码指令，单条链表可以对应于一条轨道，可以解决相关技术中过长的转码指令导致容错率低、转码指令文本过大的问题。
根据本申请的实施例，从开发角度，可以避免过长的转码指令容错率低、转码指令文本过大，无法透彻理解转码指令。从维护角度，可以避免单条庞大体积的转码指令如果出现错误，FFmpeg的现有错误提示无法准确指向错误坐标，需要拆分转码指令解决定位问题。
根据本申请的实施例，上一条转码指令CMD的产出可以作为下一条转码指令CMD的输入媒资参与合成。本申请进行中间文件合成的实施例并不限于此。
根据本申请的实施例，链表的节点同时包含了对多媒体文件的具体特效和处理属性；每个链表为双向链表，方便做查找操作，比如对上一个链表或者节点的产出依赖处理，通过依次对链表内每个节点进行处理，例如视频转场、滤镜、特效、剪辑、缩放、旋转和分辨率等操作处理，实现多媒体文件的渲染。
根据本申请的实施例，将多个中间文件进行合成，生成目标文件包括：生成用于合成多个中间文件的转码指令；以及根据用于合成多个中间文件的转码指令，将多个中间文件进行合成，以生成目标文件。
根据本申请的实施例，中间文件可以是关于视频的编码文件、关于音频的编码文件和关于字幕的编码文件。最终可以将关于视频的编码文件、关于音频的编码文件，关于字幕的编码文件进行合成，生成视频文件。
图8示意性示出了根据本公开另一实施例的多媒体文件编辑方法的流程图。
如图8所示，该方法800包括操作S810～S840。
在操作S810，在针对每条链表，根据链表的节点中的操作信息，对多媒体文件进行渲染，以及根据与背景文件对应的链表的节点中的播放时长，对背景文件进行渲染之前，确定与编辑轨道对应的链表和与背景文件对应的链表的类别。
在操作S820，根据确定的链表类别将所有的链表进行分类。
在操作S830，并行处理不同类别的链表，得到与类别对应的中间文件。
在操作S840，将与类别对应的中间文件进行合成，生成目标文件。
根据本申请的实施例，可以根据编辑轨道的类型确定链表的类别，编辑轨道的类型包括视频轨道，音频轨道，字幕轨道和贴图轨道。根据本申请的实施例，背景文件可以是视频文件，因此，与背景文件对应的链表的类别可以是视频。
根据本申请的实施例，不同类别的链表包括以下至少两种：音频类别的链表、视频类别的链表和字幕类别的链表。在处理过程中，最终按照视频、音频、字幕三大类进行划分，使得迭代起来更加方便。
根据本申请的实施例，并行处理不同类别的链表包括：并行处理音频类别的链表、视频类别的链表和字幕类别的链表中的至少两种。
根据本申请的实施例，可以将所有的链表进行分类，每种类型下的链表可以包括一个或多个链表。例如，视频类型下的链表可以包括2个，音频类型下的链表可以包括3个，字幕类型下的链表可以包括1个，贴图类型下的链表可以包括2个。
根据本申请的实施例，可以同时并行处理不同类别的链表。例如，在处理视频类型下的链表的同时，还可以处理音频类型下的链表、字幕类型下的链表和贴图类型下的链表。
根据本申请的实施例，在处理每一类别的链表时，可以将同一类别下的链表按照时间顺序利用链表的头节点进行关联，然后按照指针的指向顺序处理每一个链表，上一个链表的输出结果可以作为下一个链表的输入。
根据本申请的实施例，可以得到多个中间文件，每个中间文件可以对应于一种类别的链表，最后将所有与类别对应的中间文件进行合成。
根据本申请的实施例，通过将链表进行分类，然后并行处理不同类别的链表，从运行角度，可以提高转码效率，可以避免单条庞大、冗余的转码指令。本申请实施例可以通过多个进程并行处理不同类别的链表，即使发生某个进程中断、或者其他操作系统级别的问题导致进程中断，不影响其他进程处理，也可以较快的找到中断位置。避免了将整个多媒体文件编辑的效果用一个进程在一段不间断的时间内持续运行去编码合成。
根据本申请的实施例，从测试排查角度，媒体文件编辑最终合成转码编辑的过程中，需要中间产出文件去检查是否是哪个步骤转码中间结果有误，本申请的实施例可以更加方便的定位排查。
图9示意性示出了根据本公开另一实施例的多媒体文件编辑方法的流程图。
如图9所示，该方法900包括操作S910～S950。
在操作S910，获取基于时间轴输入的操作信息。用户可以在编辑轨道上编辑多媒体文件，每个编辑轨道对应一个或多个多媒体文件，每个多媒体文件具有对应的操作信息。根据本申请的实施例，获取的操作信息可以与编辑轨道关联。
在操作S920，根据空域维度将操作信息拆分为Audio(音频轨操作信息)、Video-Bg(背景视频操作信息)、Video(视频轨操作信息)、Watermark(贴图轨操作信息)、Subtitle(字幕轨操作信息)五大分类。需要说明的是，该分类仅仅是示意性的，也可以采用其他分类方式。
在操作S930，将背景视频与视频轨对应的视频文件中的视频流合并处理；将音频轨对应的音频与视频轨对应的视频文件中的音频流合并处理；将视频轨对应的视频文件中的图片与贴图轨对应的贴图文件合并处理。
根据本申请的实施例，可以对每条轨道，进行时域维度的处理。在处理视频链表时忽略音频流，产出视频流的最终视频中间结果，视频链表的音频流单独作为Audio音频轨道链表的输入产出最终音频中间文件。多条字幕链表可以合成一条字幕中间文件。
在操作S940，视频链表转码结果和贴图链表转码结果合并成视频转码结果。视频链表的音频流的转码结果和音频链表的转码结果合并成音频转码结果。
在操作S950，最终将视频、音频、字幕三大类的转码结果进行合成，产出最终媒体文件。
根据本申请的实施例，通过将链表进行分类，然后并行处理不同类别的链表，从运行角度，可以提高转码效率，可以避免单条庞大、冗余的转码指令。本申请实施例可以通过多个进程并行处理不同类别的链表，即使发生某个进程中断、或者其他操作系统级别的问题导致进程中断，不影响其他进程处理，也可以较快的找到中断位置。避免了将整个多媒体文件编辑的效果用一个进程在一段不间断的时间内持续运行去编码合成。
图10示意性示出了根据本公开实施例的多媒体文件编辑装置的框图。
如图10所示，多媒体文件编辑装置1000包括：获取模块1010、第一生成模块1020、渲染模块1030和合成模块1040。
获取模块1010用于获取多个编辑轨道中每个编辑轨道分别对应的操作信息，其中，操作信息用于编辑多媒体文件。
第一生成模块1020用于针对每个编辑轨道，根据编辑轨道对应的操作信息生成与编辑轨道对应的链表，得到多条链表，其中，每条链表包括按照时间顺序排列的一个或多个节点，每个节点包括用于编辑多媒体文件的操作信息。
渲染模块1030用于针对每条链表，根据链表的节点中的操作信息，对多媒体文件进行渲染，得到与链表对应的中间文件。
合成模块1040用于将多个中间文件进行合成，生成目标文件。
本申请的实施例采用链表的数据结构将合成多媒体文件的数据进行抽象管理，将用于编辑多媒体文件的操作信息记录在链表的节点中，在时域上，每条链表的节点按照时间顺序组合排列，利于开发维护，且结构简单，可以针对每一个节点进行渲染处理操作，不同轨道产出一个中间文件来进行组织合并，错误率低，可以进行多进程多媒体文件合成，速度快，提高了多媒体文件的处理效率。
根据本申请的实施例，获取模块1010用于获取用户基于时间轴在多个编辑轨道中，对多个多媒体文件分别进行编辑得到的操作信息，其中，每个编辑轨道对应一个或多个多媒体文件，每个多媒体文件具有对应的操作信息。
根据本申请的实施例，每个节点对应一个多媒体文件，每个节点包括用于编辑一个多媒体文件的操作信息。
根据本申请的实施例，链表还包括头节点，头节点包括编辑轨道类型和编辑轨道标识；头节点通过第一指针与按照时间顺序排列的一个或多个节点关联；头节点通过第二指针与其它链表的头节点关联。
根据本申请的实施例，多媒体文件编辑装置1000还包括：第二生成模块和第三生成模块。
第二生成模块，用于根据多媒体文件的播放时长生成背景文件。
第三生成模块，用于生成与背景文件对应的链表，其中，与背景文件对应的链表的节点中包括背景文件的播放时长。
渲染模块1030还用于根据与背景文件对应的链表的节点中的播放时长，对背景文件进行渲染。
根据本申请的实施例，与背景文件对应的链表的节点通过第三指针指向与编辑轨道对应的链表的头节点。
根据本申请的实施例，多媒体文件编辑装置1000还包括：确定模块、分类模块和处理模块。
确定模块，用于在针对每条链表，根据链表的节点中的操作信息，对多媒体文件进行渲染，以及根据与背景文件对应的链表的节点中的播放时长，对背景文件进行渲染之前，确定与编辑轨道对应的链表和与背景文件对应的链表的类别。
分类模块，用于根据确定的链表类别将所有的链表进行分类。
处理模块，用于并行处理不同类别的链表，得到与类别对应的中间文件。
合成模块1040还用于将与类别对应的中间文件进行合成，生成目标文件。
根据本申请的实施例，不同类别的链表包括以下至少两种：音频类别的链表、视频类别的链表和字幕类别的链表。
根据本申请的实施例，处理模块用于：并行处理音频类别的链表、视频类别的链表和字幕类别的链表中的至少两种。
根据本申请的实施例，渲染模块包括：第一生成单元和渲染单元
第一生成单元，用于针对每条链表，生成与链表的节点中的操作信息对应的转码指令。
渲染单元，用于根据转码指令对多媒体文件进行渲染，得到与链表对应的中间文件。
根据本申请的实施例，合成模块1040包括：第二生成单元和合成单元。
第二生成单元，用于生成用于合成多个中间文件的转码指令。
合成单元，用于根据用于合成多个中间文件的转码指令，将多个中间文件进行合成，以生成目标文件。
根据本申请的实施例，编辑轨道的类型包括以下至少之一：视频轨道、音频轨道、字幕轨道、贴图轨道。
根据本申请的实施例，操作信息包括以下至少之一：滤镜信息、转场信息、倍速信息、裁剪信息、旋转信息、图像亮度信息、图像色度信息、图像饱和度信息、图像展示尺寸、图像展示时长、图像展示坐标。
根据本申请的实施例，本申请还提供了一种电子设备和一种可读存储介质。
图11示意性示出了根据本公开实施例的适于实现多媒体文件编辑方法的电子设备的框图。
如图11所示，是执行本申请实施例的方法的电子设备的框图。电子设备旨在表示各种形式的数字计算机，诸如，膝上型计算机、台式计算机、工作台、个人数字助理、服务器、刀片式服务器、大型计算机、和其它适合的计算机。电子设备还可以表示各种形式的移动装置，诸如，个人数字处理、蜂窝电话、智能电话、可穿戴设备和其它类似的计算装置。本文所示的部件、它们的连接和关系、以及它们的功能仅仅作为示例，并且不意在限制本文中描述的和/或者要求的本申请的实现。
如图11所示，该电子设备1100包括：一个或多个处理器1101、存储器1102，以及用于连接各部件的接口，包括高速接口和低速接口。各个部件利用不同的总线互相连接，并且可以被安装在公共主板上或者根据需要以其它方式安装。处理器可以对在电子设备内执行的指令进行处理，包括存储在存储器中或者存储器上以在外部输入/输出装置(诸如，耦合至接口的显示设备)上显示GUI的图形信息的指令。在其它实施方式中，若需要，可以将多个处理器和/或多条总线与多个存储器和多个存储器一起使用。同样，可以连接多个电子设备，各个设备提供部分必要的操作(例如，作为服务器阵列、一组刀片式服务器、或者多处理器系统)。图11中以一个处理器1101为例。
存储器1102即为本申请所提供的非瞬时计算机可读存储介质。其中，所述存储器存储有可由至少一个处理器执行的指令，以使所述至少一个处理器执行本申请所提供的方法。本申请的非瞬时计算机可读存储介质存储计算机指令，该计算机指令用于使计算机执行本申请所提供的方法。
存储器1102作为一种非瞬时计算机可读存储介质，可用于存储非瞬时软件程序、非瞬时计算机可执行程序以及模块，如本申请实施例中的方法对应的程序指令/模块(例如，附图10所示的获取模块1010、第一生成模块1020、渲染模块1030和合成模块1040)。处理器1101通过运行存储在存储器1102中的非瞬时软件程序、指令以及模块，从而执行服务器的各种功能应用以及数据处理，即实现上述方法实施例中的方法。
存储器1102可以包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需要的应用程序；存储数据区可存储根据上述方法的电子设备的使用所创建的数据等。此外，存储器1102可以包括高速随机存取存储器，还可以包括非瞬时存储器，例如至少一个磁盘存储器件、闪存器件、或其他非瞬时固态存储器件。在一些实施例中，存储器1102可选包括相对于处理器1101远程设置的存储器，这些远程存储器可以通过网络连接至电子设备。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
电子设备还可以包括：输入装置1103和输出装置1104。处理器1101、存储器1102、输入装置1103和输出装置1104可以通过总线或者其他方式连接，图11中以通过总线连接为例。
输入装置1103可接收输入的数字或字符信息，以及产生与电子设备的用户设置以及功能控制有关的键信号输入，例如触摸屏、小键盘、鼠标、轨迹板、触摸板、指示杆、一个或者多个鼠标按钮、轨迹球、操纵杆等输入装置。输出装置1104可以包括显示设备、辅助照明装置(例如，LED)和触觉反馈装置(例如，振动电机)等。该显示设备可以包括但不限于，液晶显示器(LCD)、发光二极管(LED)显示器和等离子体显示器。在一些实施方式中，显示设备可以是触摸屏。
此处描述的系统和技术的各种实施方式可以在数字电子电路系统、集成电路系统、专用ASIC(专用集成电路)、计算机硬件、固件、软件、和/或它们的组合中实现。这些各种实施方式可以包括：实施在一个或者多个计算机程序中，该一个或者多个计算机程序可在包括至少一个可编程处理器的可编程系统上执行和/或解释，该可编程处理器可以是专用或者通用可编程处理器，可以从存储系统、至少一个输入装置、和至少一个输出装置接收数据和指令，并且将数据和指令传输至该存储系统、该至少一个输入装置、和该至少一个输出装置。
根据本公开的实施例，还提供了一种计算机程序产品，该计算机程序产品包括计算机程序，所述计算机程序在被处理器执行时可以实现上述任意实施例的方法。
这些计算程序(也称作程序、软件、软件应用、或者代码)包括可编程处理器的机器指令，并且可以利用高级过程和/或面向对象的编程语言、和/或汇编/机器语言来实施这些计算程序。如本文使用的，术语“机器可读介质”和“计算机可读介质”指的是用于将机器指令和/或数据提供给可编程处理器的任何计算机程序产品、设备、和/或装置(例如，磁盘、光盘、存储器、可编程逻辑装置(PLD))，包括，接收作为机器可读信号的机器指令的机器可读介质。术语“机器可读信号”指的是用于将机器指令和/或数据提供给可编程处理器的任何信号。
为了提供与用户的交互，可以在计算机上实施此处描述的系统和技术，该计算机具有：用于向用户显示信息的显示装置(例如，CRT(阴极射线管)或者LCD(液晶显示器)监视器)；以及键盘和指向装置(例如，鼠标或者轨迹球)，用户可以通过该键盘和该指向装置来将输入提供给计算机。其它种类的装置还可以用于提供与用户的交互；例如，提供给用户的反馈可以是任何形式的传感反馈(例如，视觉反馈、听觉反馈、或者触觉反馈)；并且可以用任何形式(包括声输入、语音输入或者、触觉输入)来接收来自用户的输入。
可以将此处描述的系统和技术实施在包括后台部件的计算系统(例如，作为数据服务器)、或者包括中间件部件的计算系统(例如，应用服务器)、或者包括前端部件的计算系统(例如，具有图形用户界面或者网络浏览器的用户计算机，用户可以通过该图形用户界面或者该网络浏览器来与此处描述的系统和技术的实施方式交互)、或者包括这种后台部件、中间件部件、或者前端部件的任何组合的计算系统中。可以通过任何形式或者介质的数字数据通信(例如，通信网络)来将系统的部件相互连接。通信网络的示例包括：局域网(LAN)、广域网(WAN)和互联网。
计算机系统可以包括客户端和服务器。客户端和服务器一般远离彼此并且通常通过通信网络进行交互。通过在相应的计算机上运行并且彼此具有客户端-服务器关系的计算机程序来产生客户端和服务器的关系。
根据本申请实施例的技术方案，采用链表的数据结构将合成多媒体文件的数据进行抽象管理，将用于编辑多媒体文件的操作信息记录在链表的节点中，在时域上，每条链表的节点按照时间顺序组合排列，利于开发维护，且结构简单，可以针对每一个节点进行渲染处理操作，不同轨道产出一个中间文件来进行组织合并，错误率低，可以进行多进程多媒体文件合成，速度快，提高了多媒体文件的处理效率。
应该理解，可以使用上面所示的各种形式的流程，重新排序、增加或删除步骤。例如，本发申请中记载的各步骤可以并行地执行也可以顺序地执行也可以不同的次序执行，只要能够实现本申请公开的技术方案所期望的结果，本文在此不进行限制。
上述具体实施方式，并不构成对本申请保护范围的限制。本领域技术人员应该明白的是，根据设计要求和其他因素，可以进行各种修改、组合、子组合和替代。任何在本申请的精神和原则之内所作的修改、等同替换和改进等，均应包含在本申请保护范围之内。
Claims (17)
1.一种多媒体文件编辑方法，包括：
获取多个编辑轨道中每个编辑轨道分别对应的操作信息，其中，所述操作信息用于编辑多媒体文件；
针对每个所述编辑轨道，根据所述编辑轨道对应的操作信息生成与所述编辑轨道对应的链表，得到多条链表，其中，每条所述链表包括按照时间顺序排列的一个或多个节点，每个所述节点包括用于编辑所述多媒体文件的操作信息；
针对每条所述链表，根据所述链表的节点中的操作信息，对所述多媒体文件进行渲染，得到与所述链表对应的中间文件；根据所述多媒体文件的播放时长生成背景文件；
生成与所述背景文件对应的链表，其中，所述与所述背景文件对应的链表的节点中包括所述背景文件的播放时长；
根据与所述背景文件对应的链表的节点中的播放时长，对所述背景文件进行渲染；
在所述针对每条所述链表，根据所述链表的节点中的操作信息，对所述多媒体文件进行渲染，以及所述根据与所述背景文件对应的链表的节点中的播放时长，对所述背景文件进行渲染之前，确定所述与所述编辑轨道对应的链表和所述与所述背景文件对应的链表的类别；
根据确定的链表类别将所有的链表进行分类；
并行处理不同类别的链表，得到与类别对应的中间文件；以及
将多个所述中间文件进行合成，生成目标文件。
2.根据权利要求1所述的方法，其中，所述获取多个编辑轨道中每个编辑轨道分别对应的操作信息包括：
获取用户基于时间轴在所述多个编辑轨道中，对多个多媒体文件分别进行编辑得到的操作信息，其中，每个所述编辑轨道对应一个或多个所述多媒体文件，每个所述多媒体文件具有对应的操作信息。
3.根据权利要求1或2所述的方法，其中，每个所述节点对应一个所述多媒体文件，每个所述节点包括用于编辑一个所述多媒体文件的操作信息。
4.根据权利要求1所述的方法，其中，所述链表还包括头节点，所述头节点包括编辑轨道类型和编辑轨道标识；
所述头节点通过第一指针与所述按照时间顺序排列的一个或多个节点关联；
所述头节点通过第二指针与其它链表的头节点关联。
5.根据权利要求1所述的方法，其中，所述与所述背景文件对应的链表的节点通过第三指针指向与所述编辑轨道对应的链表的头节点。
6.根据权利要求1所述的方法，其中，所述不同类别的链表包括以下至少两种：音频类别的链表、视频类别的链表和字幕类别的链表。
7.根据权利要求6所述的方法，其中，所述并行处理不同类别的链表包括：
并行处理所述音频类别的链表、所述视频类别的链表和所述字幕类别的链表中的至少两种。
8.根据权利要求1所述的方法，其中，所述针对每条所述链表，根据所述链表的节点中的操作信息，对所述多媒体文件进行渲染包括：
针对每条所述链表，生成与所述链表的节点中的操作信息对应的转码指令；以及
根据所述转码指令对所述多媒体文件进行渲染，得到与所述链表对应的中间文件。
9.根据权利要求1所述的方法，其中，所述将多个所述中间文件进行合成，生成目标文件包括：
生成用于合成多个所述中间文件的转码指令；以及
根据所述用于合成多个所述中间文件的转码指令，将多个所述中间文件进行合成，以生成所述目标文件。
10.根据权利要求1所述的方法，其中，所述编辑轨道的类型包括以下至少之一：视频轨道、音频轨道、字幕轨道、贴图轨道。
11.根据权利要求1所述的方法，其中，所述操作信息包括以下至少之一：滤镜信息、转场信息、倍速信息、裁剪信息、旋转信息、图像亮度信息、图像色度信息、图像饱和度信息、图像展示尺寸、图像展示时长、图像展示坐标。
12.一种多媒体文件编辑装置，包括：
获取模块，用于获取多个编辑轨道中每个编辑轨道分别对应的操作信息，其中，所述操作信息用于编辑多媒体文件；
第一生成模块，用于针对每个所述编辑轨道，根据所述编辑轨道对应的操作信息生成与所述编辑轨道对应的链表，得到多条链表，其中，每条所述链表包括按照时间顺序排列的一个或多个节点，每个所述节点包括用于编辑所述多媒体文件的操作信息；
第二生成模块，用于根据所述多媒体文件的播放时长生成背景文件；
第三生成模块，用于生成与所述背景文件对应的链表，其中，所述与所述背景文件对应的链表的节点中包括所述背景文件的播放时长；
渲染模块，用于针对每条所述链表，根据所述链表的节点中的操作信息，对所述多媒体文件进行渲染，得到与所述链表对应的中间文件，还用于根据与所述背景文件对应的链表的节点中的播放时长，对所述背景文件进行渲染；确定模块，用于在所述针对每条链表，根据所述链表的节点中的操作信息，对所述多媒体文件进行渲染，以及所述根据与所述背景文件对应的链表的节点中的播放时长，对所述背景文件进行渲染之前，确定所述与所述编辑轨道对应的链表和所述与背景文件对应的链表的类别；
分类模块，用于根据确定的链表类别将所有的链表进行分类；
处理模块，用于并行处理不同类别的链表，得到与类别对应的中间文件；以及
合成模块，用于将多个所述中间文件进行合成，生成目标文件。
13.根据权利要求12所述的装置，其中，所述获取模块用于获取用户基于时间轴在所述多个编辑轨道中，对多个多媒体文件分别进行编辑得到的操作信息，其中，每个所述编辑轨道对应一个或多个所述多媒体文件，每个所述多媒体文件具有对应的操作信息。
14.根据权利要求12或13所述的装置，其中，每个所述节点对应一个所述多媒体文件，每个所述节点包括用于编辑一个所述多媒体文件的操作信息。
15.根据权利要求12所述的装置，其中，所述链表还包括头节点，所述头节点包括编辑轨道类型和编辑轨道标识；
所述头节点通过第一指针与所述按照时间顺序排列的一个或多个节点关联；
所述头节点通过第二指针与其它链表的头节点关联。
16. 一种电子设备，包括：
至少一个处理器；以及
与所述至少一个处理器通信连接的存储器；其中，
所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行权利要求1-11中任一项所述的方法。
17.一种存储有计算机指令的非瞬时计算机可读存储介质，其中，所述计算机指令用于使所述计算机执行权利要求1-11中任一项所述的方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202011054377.7A CN112015927B (zh) | 2020-09-29 | 2020-09-29 | 多媒体文件编辑方法、装置、电子设备和存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202011054377.7A CN112015927B (zh) | 2020-09-29 | 2020-09-29 | 多媒体文件编辑方法、装置、电子设备和存储介质 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN112015927A CN112015927A (zh) | 2020-12-01 |
| CN112015927B true CN112015927B (zh) | 2023-08-15 |
Family
ID=73528260
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202011054377.7A Active CN112015927B (zh) | 2020-09-29 | 2020-09-29 | 多媒体文件编辑方法、装置、电子设备和存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN112015927B (zh) |
Families Citing this family (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112584061B (zh) * | 2020-12-24 | 2023-08-01 | 咪咕文化科技有限公司 | 多媒体通用模板生成方法、电子设备及存储介质 |
| CN113905255B (zh) * | 2021-09-28 | 2022-08-02 | 腾讯科技（深圳）有限公司 | 媒体数据的编辑方法、媒体数据的封装方法及相关设备 |
| CN117956100A (zh) * | 2022-10-21 | 2024-04-30 | 北京字跳网络技术有限公司 | 多媒体数据处理方法、装置、设备及介质 |
Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US6182200B1 (en) * | 1997-09-24 | 2001-01-30 | Sony Corporation | Dense edit re-recording to reduce file fragmentation |
| CN1692441A (zh) * | 2002-12-09 | 2005-11-02 | 索尼株式会社 | 数据编辑方法和数据编辑设备 |
| CN105336348A (zh) * | 2015-11-16 | 2016-02-17 | 合一网络技术(北京)有限公司 | 视频编辑中多音频轨道的处理系统及方法 |
| CN108449651A (zh) * | 2018-05-24 | 2018-08-24 | 腾讯科技（深圳）有限公司 | 字幕添加方法及装置 |
| CN110166652A (zh) * | 2019-05-28 | 2019-08-23 | 成都依能科技股份有限公司 | 多轨道音视频同步编辑方法 |
| CN110351563A (zh) * | 2018-04-03 | 2019-10-18 | 联发科技（新加坡）私人有限公司 | 用于编解码视频数据的方法及装置 |
| CN111246289A (zh) * | 2020-03-09 | 2020-06-05 | Oppo广东移动通信有限公司 | 视频生成方法及装置、电子设备、存储介质 |
Family Cites Families (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR101518294B1 (ko) * | 2013-05-07 | 2015-05-07 | 주식회사 인코렙 | 멀티 트랙 미디어 파일이 기록된 기록 매체, 멀티 트랙 미디어 파일 편집 방법, 및 멀티 트랙 미디어 파일 편집 장치 |
-
2020
- 2020-09-29 CN CN202011054377.7A patent/CN112015927B/zh active Active
Patent Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US6182200B1 (en) * | 1997-09-24 | 2001-01-30 | Sony Corporation | Dense edit re-recording to reduce file fragmentation |
| CN1692441A (zh) * | 2002-12-09 | 2005-11-02 | 索尼株式会社 | 数据编辑方法和数据编辑设备 |
| CN105336348A (zh) * | 2015-11-16 | 2016-02-17 | 合一网络技术(北京)有限公司 | 视频编辑中多音频轨道的处理系统及方法 |
| CN110351563A (zh) * | 2018-04-03 | 2019-10-18 | 联发科技（新加坡）私人有限公司 | 用于编解码视频数据的方法及装置 |
| CN108449651A (zh) * | 2018-05-24 | 2018-08-24 | 腾讯科技（深圳）有限公司 | 字幕添加方法及装置 |
| CN110166652A (zh) * | 2019-05-28 | 2019-08-23 | 成都依能科技股份有限公司 | 多轨道音视频同步编辑方法 |
| CN111246289A (zh) * | 2020-03-09 | 2020-06-05 | Oppo广东移动通信有限公司 | 视频生成方法及装置、电子设备、存储介质 |
Non-Patent Citations (1)
| Title |
|---|
| 申闫春 ; 曹莉 ; 温转萍 ; .基于面向对象层次模型的网络课件开发平台.计算机工程与设计.2007,(22),全文. * |
Also Published As
| Publication number | Publication date |
|---|---|
| CN112015927A (zh) | 2020-12-01 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN112287128B (zh) | 多媒体文件编辑方法、装置、电子设备和存储介质 | |
| CN112015927B (zh) | 多媒体文件编辑方法、装置、电子设备和存储介质 | |
| US20060236219A1 (en) | Media timeline processing infrastructure | |
| US20060242550A1 (en) | Media timeline sorting | |
| EP3902280A1 (en) | Short video generation method and platform, electronic device, and storage medium | |
| US20110119587A1 (en) | Data model and player platform for rich interactive narratives | |
| JP2022033689A (ja) | ページのテーマを決定するための方法、装置、電子機器、コンピュータ可読記憶媒体及びコンピュータプログラム | |
| CN110784753B (zh) | 互动视频播放方法及装置、存储介质、电子设备 | |
| CN116457881A (zh) | 用于音频和视频合成的文本驱动编辑器 | |
| CN113778419B (zh) | 多媒体数据的生成方法、装置、可读介质及电子设备 | |
| US7941739B1 (en) | Timeline source | |
| KR102013947B1 (ko) | 오픈 시나리오 생성 방법 | |
| US10783319B2 (en) | Methods and systems of creation and review of media annotations | |
| US7934159B1 (en) | Media timeline | |
| KR101720635B1 (ko) | 웹 기반의 3d 영상 컨텐츠 제작 방법 및 이를 운영하는 서버 | |
| CN111541905B (zh) | 一种直播方法、装置、计算机设备和存储介质 | |
| US8120610B1 (en) | Methods and apparatus for using aliases to display logic | |
| US20150128040A1 (en) | Generating custom sequences of video streams | |
| CN113711575A (zh) | 用于基于表现即时组装视频剪辑的系统和方法 | |
| CN113542802B (zh) | 视频的转场方法和装置 | |
| US20210392394A1 (en) | Method and apparatus for processing video, electronic device and storage medium | |
| US20110018889A1 (en) | Media processing comparison system and techniques | |
| KR102545040B1 (ko) | 비디오 재생 방법, 장치, 전자 기기, 저장 매체 및 컴퓨터 프로그램 제품 | |
| CN113347465B (zh) | 一种视频生成方法、装置、电子设备及存储介质 | |
| CN111045674A (zh) | 一种播放器的交互方法和装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |