视频编辑中多音频轨道的处理系统及方法
技术领域
本发明涉及视频编辑中的声音处理,尤其涉及视频编辑中多音频轨道的处理系统及方法。
背景技术
多媒体内容不断增长的可用性产生用户欣赏音乐并且与音乐交互的新的方式。这些可能性面临着开发用于在这样的活动中辅助使用者的工具的挑战。
多轨格式可由每个声音对象(SO)或对象的群组(轨组;stem)的分离的并时间对准的信号(亦称为单音轨(ST))组成。根据一种定义,轨组为混合中出于再混合使用的目的而单独保存的个别成分。
在音乐产生的传统程序中,多个单音轨以复杂的方式组合成混合信号(mixturesignal;MS),随后将该MS传递至最终使用者。数字音频技术的持续进化,例如,基于参数对象的音频的新的音频格式的开发在更大程度上实现与音乐的交互。使用者存取多轨录音并且可主动地控制混合程序。
可以诸多方式使用以多轨格式发布的音乐或音频作品。使用者可控制不同轨的混合参数,因此强调选定的轨而衰减其他轨。一个或多个轨可为无声的,也就是静音。诸如回音、混响、失真、合声等的音效可应用于选定轨而不影响其他轨。可从多轨格式摘录一个或多个轨,并且该所摘录的一个或多个轨可用于另一音乐作品或另一形式的音频作品中,诸如,音频书籍、演讲、播客等。
视频编辑软件中需要处理多个轨道的音频信息,如需要加入一个原声的轨道,一个配乐的轨道。分别对这两个轨道进行编辑最终合成一个音频输出。
多个音频轨道构成一个音频编辑模块,即多音轨模块。而一个单一的音轨又由多段音频文件拼接而成,这些音频文件可以在音轨的任意位置添加,每个音频文件是由单音频模块构成。但是现有的多音轨合成效果往往不好。
发明内容
为了解决上述技术问题,提高多音轨的合成效果,本发明提供了一种视频编辑中多音频轨道的处理系统及方法,多个音频轨道各自编辑,多音频混合输出,最终会生成一个多音轨模块,达到多音频轨道协同工作的效果。本发明提供的一种视频编辑中多音频轨道的处理系统包括:
单音频文件处理模块,用于加载单个音频文件,解析所加载的音频文件的音频信息,并对所述音频文件进行编辑;
单音轨处理模块,用于加载多个单音频文件处理模块处理后的音频文件,对所述音频文件进行编辑,并根据编辑后的音频文件形成单个音轨;所述对所述音频文件进行编辑包括对加载的音频文件进行保存、增加、删除和排序;
多音轨处理模块,用于将从多个单音轨处理模块形成的音轨中分别获取的音频帧输入到混音器中混合为一个音频输出。多音轨处理模块首先生成一个混音器,所述混音器可以为软件混音器也可以为硬件混音器。
进一步地,所述单音频文件处理模块中的对所述音频文件进行编辑包括:
生成解码器,保存所述解码器的开始时间和结束时间,并根据所述解码器的开始时间和结束时间对所述音频文件进行剪切;
导出所述音频文件的输出音频帧接口;
导出控制所述音频文件开始结束的接口。
进一步地,所述单音频文件处理模块中的所述音频信息包括音频文件的开始时间、结束时间、音频参数信息和音频类型。
进一步地,所述单音轨处理模块中对所述音频文件进行编辑,并根据编辑后的音频文件形成单个音轨包括:
记录所加载的音频文件的开始时间,并根据所述开始时间添加相应的音频文件;
对加载的音频文件排序;
通过移动所述解码器的开始时间和结束时间对相应的音频文件进行剪切;
删除加载的音频文件;
导出控制所述单个音轨开始结束的接口;
导出所述单个音轨的输出音频帧接口。
进一步地,所述多音轨处理模块还用于计算输出的音频帧的当前时间戳;分别调整每个音轨的音量。
本发明还提供了一种视频编辑中多音频轨道的处理方法,包括:
S1、加载单个音频文件,解析该音频文件的音频信息,并对所述音频文件进行编辑;
S2、加载多个步骤S1处理后的音频文件,对所述音频文件进行编辑,并根据编辑后的音频文件形成单个音轨;所述对所述音频文件进行编辑包括对加载的音频文件进行保存、增加、删除和排序;
S3、将从多个步骤S2形成的音轨中分别获取的音频帧输入到混音器中混合为一个音频输出。
进一步地,步骤S1中的对所述音频文件进行编辑包括:
生成解码器,保存所述解码器的开始时间和结束时间,并根据所述解码器的开始时间和结束时间对所述音频文件进行剪切;
导出所述音频文件的输出音频帧接口;
导出控制所述音频文件开始结束的接口。
进一步地,步骤S1中的所述音频信息包括音频文件的开始时间、结束时间、音频参数信息和音频类型。
进一步地,步骤S2中的对所述音频文件进行编辑,并根据编辑后的音频文件形成单个音轨包括:
记录所加载的音频文件的开始时间,并根据所述开始时间添加相应的音频文件;
对加载的音频文件排序;
通过移动所述解码器的开始时间和结束时间对相应的音频文件进行剪切;
删除加载的音频文件;
导出控制所述单个音轨开始结束的接口;
导出所述单个音轨的输出音频帧接口。
进一步地,步骤S3中还包括:
计算输出的音频帧的当前时间戳;
分别调整每个音轨的音量。
鉴于在视频编辑软件中,音频编辑模块中支持添加多个音频轨道,本发明在每个音频轨道中输入不同的音频效果文件,最终将多个音频轨道的输入混合成一个音频输出。本发明首先对单个的音频文件进行加载编辑,添加一条音轨,然后在该音轨中做添加,删除,剪切,排序等操作,最终获取想要的一条音轨,然后用同样的方法添加所需要的几条音轨,在编辑过程中可以支持任意位置,随时播放已编辑的音频。最终的多个音轨会经过混音器保存成一个音频输出,采用本发明的方案,能够有效提高多音轨的合成效果。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案和优点,下面将对实施例或现有技术描述中所需要使用的附图作简单的介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其它附图。
图1是本发明提供的视频编辑中多音频轨道的处理系统的单音频文件处理模块的功能示意图;
图2是本发明提供的视频编辑中多音频轨道的处理系统的单音轨处理模块的功能示意图;
图3是本发明提供的视频编辑中多音频轨道的处理系统的多音轨处理模块的功能示意图;
图4是本发明提供的视频编辑中多音频轨道的处理方法的程序流程图;
图5是本发明提供的视频编辑中多音频轨道的处理方法的实现流程图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例,都属于本发明保护的范围。
实施例:
本发明提供了一种视频编辑中多音频轨道的处理系统,包括:单音频文件处理模块、单音轨处理模块和多音轨处理模块,其中:
单音频文件处理模块,用于加载单个音频文件,解析所加载的音频文件的音频信息,并对所述音频文件进行编辑;图1是单音频文件处理模块的功能示意图。
该模块实现单一音频文件的加载,信息保存,编辑处理等效果。
在单音频文件处理模块中加载一个音频文件,解析出基本的音频信息,生成一个解码器。在将该音频文件加入到一个音轨中时会记录该音频在音轨中的开始时间和结束时间,以获取音频帧的时间戳。该模块还会保存一个解码器的开始结束时间,这个时间实现音频文件的剪切功能。该模块会导出一个输出音频帧的接口,该接口根据音频文件的实际结束时间和解码器时间决定是否添加静音帧。该模块还会导出控制开始结束的接口。该模块在得到调整音量的消息后会生成一个音频filter来调整音量大小。
单音轨处理模块,用于加载多个单音频文件处理模块处理后的音频文件,对所述音频文件进行编辑,并根据编辑后的音频文件形成单个音轨;所述对所述音频文件进行编辑包括对加载的音频文件进行保存、增加、删除和排序;图2是单音轨模块的功能示意图。加载多个单音频文件处理模块处理后的音频文件是指加载多个单音频文件处理模块编辑后的文件。
单音轨处理模块,对多个音频文件进行处理。该模块实现加载多个音频文件,并形成单个音轨,对该音轨的信息保存,增加,删除,排序等编辑处理。
在单音轨处理模块中通过记录每个音频文件的开始时间可以在任意位置添加音频文件,可以音频对文件排序,通过移动解码器的开始结束时间可以实现对该文件进行剪切的功能。可以删除不需要的音频文件。以上的编辑功能是通过一个链表来实现的音频轨。该音频轨可以支持单一音频文件的循环播放处理。该模块通过在文件链表上截取部分节点实现在编辑的过程中点击时间轴的任意位置进行播放。该模块导出开始结束的控制接口,导出输出音频帧的接口以便添加到混音器中进行混音。单个音轨也叫单音轨。
多音轨处理模块,用于将从多个单音轨处理模块形成的音轨中分别获取的音频帧输入到混音器中混合为一个音频输出。图3是多音轨处理模块的功能示意图。
多音轨模块由多个音频轨道组成,每个模块单独编辑处理。多个音轨的音频通过该模块的处理,可以达到音频混合的效果,用于播放或者保存等输出。
多音轨模块是由多个单音轨组成,每个单音轨表示一个类型的输入音频,在该模块中先生成一个混音器,然后在每个音频轨中分别获取音频帧,输入到混音器中,最终由混音器输出一个混合后的音频帧信息,计算当前时间戳,用于播放或者输出。该模块也可以支持只保存多个音轨中的其中的几个,可以分别调整每个音轨的音量。
本文提供一种多个音频轨道各自编辑,实现多音频混合输出的方法,最终会生成一个多音轨模块。本发明方法的程序流程图如图4所示。
如图5所示,本发明提供了一种视频编辑中多音频轨道的处理方法,包括:
S1、加载单个音频文件,解析该音频文件的音频信息,并对所述音频文件进行编辑;
S2、加载多个步骤S1处理后的音频文件,对所述音频文件进行编辑,并根据编辑后的音频文件形成单个音轨;所述对所述音频文件进行编辑包括对加载的音频文件进行保存、增加、删除和排序;
S3、将从多个步骤S2形成的音轨中分别获取的音频帧输入到混音器中混合为一个音频输出。
本发明在每个音频轨道中输入不同的音频效果文件,最终将多个音频轨道的输入混合成一个音频输出。本发明首先对单个的音频文件进行加载编辑,添加一条音轨,然后在该音轨中做添加,删除,剪切,排序等操作,最终获取想要的一条音轨,然后用同样的方法添加所需要的几条音轨,在编辑过程中可以支持任意位置,随时播放已编辑的音频。最终的多个音轨会经过混音器保存成一个音频输出,采用本发明的方案,能够有效提高多音轨的合成效果。
以上所述是本发明的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也视为本发明的保护范围。