CN102867514A - 一种混音方法和混音装置 - Google Patents
一种混音方法和混音装置 Download PDFInfo
- Publication number
- CN102867514A CN102867514A CN2011101900507A CN201110190050A CN102867514A CN 102867514 A CN102867514 A CN 102867514A CN 2011101900507 A CN2011101900507 A CN 2011101900507A CN 201110190050 A CN201110190050 A CN 201110190050A CN 102867514 A CN102867514 A CN 102867514A
- Authority
- CN
- China
- Prior art keywords
- sound
- data stream
- binary data
- sound material
- voice data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Stereophonic System (AREA)
Abstract
本发明公开了一种混音方法,包括:将获取的音频数据转换为用作混音的声音素材;根据转换所得的至少一个声音素材进行混音处理。本发明还提供了一种混音装置,通过本发明,解决了现有技术中只能使用内置的声音素材进行混音的缺陷,提供高了用户体验度。
Description
技术领域
本发明涉及混音技术,特别是指一种混音方法和混音装置。
背景技术
混音:将对白、音乐、音效等多种音源予以混合的处理过程,又称为再录音。
目前,混音器有两种,一种是软件类型的混音器,一种是硬件类型的混音器。软件类型的混音器的混音输入可以是数字音频文件和线路输入音频信号,输出则为数字音频文件,而硬件类型的混音器的混音输入则为不同线路的模拟音频信号,输出依然为模拟信号。由于原理不同,软件类型的混音器和硬件类型的混音器的应用也大不相同,前者主要用于音频处理,后者主要用于音响设置。本发明讨论的是软件类型的混音器。
现有的软件类型的混音器,主要是通过排列内置的数字音频文件、例如乐器声音素材等进行混音乐曲的创建。混音乐曲可以保存到混音器指定的目录中,以供回放。
目前,软件类型的混音器存在以下不足:混音只能通过手动排列声音素材的方式来实现,用户只能使用混音器内置的声音素材进行混音编辑,造成用户体验不佳。
另外,现有软件类型的混音器是通过Adobe Flash Media Server来存储用户的音频信息,用户只有通过访问该Adobe Flash Media Server才能实现该音频信息的回放,并且,在录音过程中,Adobe Flash Media Server是实时接收并存储麦克风接收到的音频数据的,因此,其对用户的网络要求非常严格,如果录制过程中网络不稳定,将无法完成录音,这严重影响用户体验,造成用户流失严重。
发明内容
有鉴于此,本发明的主要目的在于提供一种混音方法和混音装置,以解决现有技术中只能使用混音器内置的声音素材进行混音编辑的缺陷。
为达到上述目的,本发明的技术方案是这样实现的:
本发明提供了一种混音方法,该方法包括:
将获取的音频数据转换为用作混音的声音素材;
根据转换所得的至少一个声音素材进行混音处理。
其中,所述将获取的音频数据转换为用作混音的声音素材,具体为:
步骤a、选择声音素材的类别;
步骤b、对获取的音频数据的二进制数据流进行遍历分析,记录符合转换条件的数据对应的采样音量值和采样时间点,并将所述采样音量值和采样时间点存入临时转换数组中;
步骤c、遍历所述临时转换数组,根据读取的采样时间点在建立的临时二进制数据流中写入对应采样音量值的所选声音素材类别的二进制数据流,生成声音素材。
该方法进一步包括:重复执行步骤a至步骤c,生成不同类别的声音素材。
所述根据转换所得的至少一个声音素材进行混音处理,包括:
将转换所得的至少两个声音素材进行混音处理;或者,
将转换所得的至少一个声音素材与获取的音频数据和/或内置声音素材进行混音处理。
所述根据转换所得的至少一个声音素材进行混音处理,具体为:
从参与混音处理的声音素材和/或音频数据中选择最长时间长度的声音素材或音频数据的二进制数据流,并建立临时二进制数据流,所述临时二进制数据流的时间长度与所述最长时间长度相同;
遍历所述最长时间长度的二进制数据流,并顺序读取其他需要混合的声音素材和/或音频数据的二进制数据流,将所述其他声音素材和/或音频数据的二进制数据流的浮点值与所述最长时间长度的二进制数据流的浮点值进行顺序合并后写入具有最长时间长度的临时二进制数据流中;
将写入后的临时二进制数据流编译为目标音频格式。
本发明还提供了一种混音装置,该装置包括:
转换模块,用于将获取的音频数据转换为用作混音的声音素材;
混音模块,用于根据转换所得的至少一个声音素材进行混音处理。
所述转换模块进一步用于执行以下操作:
步骤a、选择声音素材的类别;
步骤b、对获取的音频数据的二进制数据流进行遍历分析,记录符合转换条件的数据对应的采样音量值和采样时间点,并将所述采样音量值和采样时间点存入临时转换数组中;
步骤c、遍历所述临时转换数组,根据读取的采样时间点在建立的临时二进制数据流中写入对应采样音量值的所选声音素材类别的二进制数据流,生成声音素材。
所述转换模块进一步用于,重复执行步骤a~步骤c,生成不同类别的声音素材。
所述混音模块进一步用于,将转换所得的至少两个声音素材进行混音处理;或者,将转换所得的至少一个声音素材与所述获取的音频数据和/或内置声音素材进行混音处理。
所述混音模块进一步用于,从参与混音处理的声音素材和/或音频数据中选择最长时间长度的声音素材或音频数据的二进制数据流,并建立临时二进制数据流,所述临时二进制数据流的时间长度与所述最长时间长度相同;
遍历所述最长时间长度的二进制数据流,并顺序读取其他需要混合的声音素材和/或音频数据的二进制数据流,将所述其他声音素材和/或音频数据的二进制数据流的浮点值与所述最长时间长度的二进制数据流的浮点值进行顺序合并后写入具有最长时间长度的临时二进制数据流中;
将写入后的临时二进制数据流编译为目标音频格式。
采用本发明混音方法和装置,可以将获取的音频数据转换为声音素材后进行混音,还可以直接将获取的音频数据用作混音,解决了现有技术中只能使用内置的声音素材进行混音的缺陷。
另外,在混音时,对于参与混音处理的声音素材和/或音频数据,本发明自动选择最长时间长度的二进制数据流,将其他声音素材和/或音频数据的二进制数据流的浮点值与该最长时间长度的二进制数据流的浮点值进行顺序合并,不需要用户手动排列各声音素材来实现混音,提高了用户体验度。
附图说明
图1为本发明混音方法的流程图;
图2为本发明混音装置的结构图。
具体实施方式
本发明混音方法的基本思想是:由客户端采集音频数据,并转换为用作混音的声音素材,将该转换得到的声音素材与采集的音频数据和/或客户端内置的声音素材进行混音处理,得到混音后的音频数据,上传到服务器,以供回放。
其中,在客户端完成的混音过程如图1所示,包括如下步骤:
步骤101,将获取的音频数据转换为用作混音的声音素材。
获取音频数据时,较佳地,本发明客户端利用Aodbe Flash的特性,获取麦克风输入的声音采样。具体的:Aodbe Flash中为麦克风对象提供了SampleDataEvent.SAMPLE_DATA事件来获取用户音频数据。在录音启动后,该事件将监听麦克风对象的输入,当监听到有声音变化时,接收用户提供的音频信息的浮点值二进制数据流。该二进制数据流即为录音数据二进制数据流。
此种获取音频数据的方法,在录音时依据Aodbe Flash的特性,不需要借助服务器即可实现音频数据的获取,减少了对服务器的请求次数,降低了服务器负担,从而节省了服务器成本。
为了解决现有技术中用户只能使用混音器内置的声音素材进行混音编辑的问题,本发明可以将上述获取的音频数据转换为用作混音的声音素材,具体的:
步骤a、选择声音素材的类别,例如乐器声音,乐器声音还可以细分为小提琴、钢琴、吉他等类别。这里选取的声音素材的类别,即是需要将获取的音频数据转换成的声音素材的类别。
步骤b、对获取的音频数据的二进制数据流进行遍历分析,记录符合转换条件的数据对应的采样音量值和采样时间点,并将采样音量值和采样时间点存入临时转换数组中。其中,在遍历二进制数据流时,检测数据对应的采样音量值,根据采样音量值来判断对应的数据是否满足转换条件,较佳地,可以判断采样音量值是否大于预设的音量阈值(不同的声音素材类别对应不同的音量阈值),如果是,则判定对应的数据满足转换条件。对于满足转换条件的数据,将对应的采样音量值和采样时间点存入一个临时转换数组。遍历完成后,该临时转换数组中包含了一组或多组采样音量值和采样时间点。
步骤c、遍历所述临时转换数组,根据读取的采样时间点在建立的临时二进制数据流中写入对应采样音量值的所选声音素材类别的二进制数据流,生成声音素材。
例如,所选的声音素材类别为钢琴,那么遍历临时转换数组,依次读取采样时间点,根据采样时间点在建立的临时二进制数据流中对应的位置,写入对应采样音量值的钢琴声音的二进制数据流,则遍历临时转换数组完成后,建立的临时二进制数据流中的数据就是由获取的音频数据转换得到的类别为钢琴的声音素材。
如此,就完成了获取的音频数据到用作混音的声音素材的转换,转换得到的声音素材可以用作混音;另外,获取的音频数据也可以用作混音,具体的混音处理如步骤102所述。
步骤102,根据转换所得的至少一个声音素材进行混音处理。
根据转换所得的至少一个声音素材进行混音处理,包括:将转换所得的至少两个声音素材进行混音处理;或者,将转换所得的至少一个声音素材与获取的音频数据和/或内置的声音素材进行混音处理。由此可见,与现有技术相比,本发明混音的声音素材并不仅限于内置的声音素材,还可以是获取的音频数据、以及根据获取的音频数据转换得到的声音素材。
具体的,混音处理的过程为:
从参与混音处理的声音素材和/或音频数据中选择最长时间长度的声音素材或音频数据的二进制数据流,并建立临时二进制数据流,临时二进制数据流的时间长度与所述最长时间长度相同。该临时二进制数据流,即混音得到的音频数据的二进制数据流的时间长度与所述的最长时间长度相同。假设参与混音处理的声音素材和/或音频数据有:获取的音频数据1、由音频数据1转换得到的声音素材2和内置的声音素材3,假设声音素材3为最长时间长度10分钟,声音素材2为9分钟,音频数据1为8分钟,那么,临时二进制数据流的时间长度为10分钟。
遍历选择的最长时间长度的二进制数据流,并顺序读取其他需要混合的声音素材和/或音频数据的二进制数据流,将所述其他声音素材和/或音频数据的二进制数据流的浮点值与所述总的二进制数据流的浮点值进行顺序合并后写入具有最长时间长度的临时二进制数据流中。例如,遍历声音素材3的二进制数据流,同时顺序读取音频数据1和声音素材2的二进制数据流(也可以先读取声音素材2,再读取音频数据1的二进制数据流),将声音素材3的二进制数据流的第一浮点值与音频数据1和声音素材2的第一浮点值进行合并,写入临时二进制数据流中,作为临时二进制数据流的第一浮点值;然后将声音素材3的二进制数据流的第二浮点值与音频数据1和声音素材2的第二浮点值进行合并,写入临时二进制数据流中,作为临时二进制数据流的第二浮点值;依此类推,直到合并完毕,最终得到长度10分钟的混音后的音频数据的二进制数据流。
然后,将写入后的临时二进制数据流编译为目标音频格式。例如可以对照WAV文件的编码格式编码为WAV格式的二进制数据流,然后,采用MP3文件的LAME编码算法将WAV格式的二进制数据流编码为MP3格式的二进制数据流。当然,根据需要,也可以编码为其他格式的二进制数据流,例如Ogg等。
需要指出的是,在将转换所得的至少两个声音素材进行混音处理时,这两个声音素材可以是由同一个音频数据转换得到的,也可以是由不同的音频数据转换得到的。
由此可见,采用本发明的转换处理和混音处理,可以将获取的音频数据转换为声音素材后进行混音,还可以直接将获取的音频数据用作混音,解决现有技术中只能使用内置的声音素材进行混音的缺陷。
另外,在混音时,对于参与混音处理的声音素材和/或音频数据,本发明自动选择最长时间长度的二进制数据流作为总的二进制数据流,将其他声音素材和/或音频数据的二进制数据流的浮点值与该总的二进制数据流的浮点值进行顺序合并,不需要用户手动排列各声音素材来实现混音,提高了用户体验度。
客户端完成混音后,将得到的音频数据上传到服务器,以供回放。由此可见,本发明实施例提供的混音方法只在完成混音后向服务器请求保存混音后的音频文件,在录音时不与服务器通信,保证了请求服务器的次数最小,降低了服务器的负担,如此,服务器的访问压力减小,从而可以有更多的带宽提供给音频数据的回放,能够支持海量访问,提高了系统兼容性。
为了实现上述方法,本发明提供了一种混音装置,该混音装置可以应用于客户端中,如图2所示,包括:
转换模块10,用于将获取的音频数据转换为用作混音的声音素材;
混音模块20,用于根据转换所得的至少一个声音素材进行混音处理。
转换模块10进一步用于执行以下操作:
步骤a、选择声音素材的类别;
步骤b、对获取的音频数据的二进制数据流进行遍历分析,记录符合转换条件的数据对应的采样音量值和采样时间点,并将采样音量值和采样时间点存入临时转换数组中;
步骤c、遍历临时转换数组,根据读取的采样时间点在建立的临时二进制数据流中写入对应采样音量值的所选声音素材类别的二进制数据流,生成声音素材。
转换模块10进一步用于,重复执行步骤a~步骤c,生成不同类别的声音素材。
混音模块20进一步用于,将转换所得的至少两个声音素材进行混音处理;或者,将转换所得的至少一个声音素材与获取的音频数据和/或内置声音素材进行混音处理。
混音模块20进一步用于,从参与混音处理的声音素材和/或音频数据中选择最长时间长度的声音素材或音频数据的二进制数据流,并建立临时二进制数据流,临时二进制数据流的时间长度与最长时间长度相同;
遍历最长时间长度的二进制数据流,并顺序读取其他需要混合的声音素材和/或音频数据的二进制数据流,将其他声音素材和/或音频数据的二进制数据流的浮点值与最长时间长度的二进制数据流的浮点值进行顺序合并后写入具有最长时间长度的临时二进制数据流中;
将写入后的临时二进制数据流编译为目标音频格式。
以上所述,仅为本发明的较佳实施例而已,并非用于限定本发明的保护范围。
Claims (10)
1.一种混音方法,其特征在于,该方法包括:
将获取的音频数据转换为用作混音的声音素材;
根据转换所得的至少一个声音素材进行混音处理。
2.根据权利要求1所述混音方法,其特征在于,所述将获取的音频数据转换为用作混音的声音素材,具体为:
步骤a、选择声音素材的类别;
步骤b、对获取的音频数据的二进制数据流进行遍历分析,记录符合转换条件的数据对应的采样音量值和采样时间点,并将所述采样音量值和采样时间点存入临时转换数组中;
步骤c、遍历所述临时转换数组,根据读取的采样时间点在建立的临时二进制数据流中写入对应采样音量值的所选声音素材类别的二进制数据流,生成声音素材。
3.根据权利要求2所述混音方法,其特征在于,该方法进一步包括:重复执行步骤a至步骤c,生成不同类别的声音素材。
4.根据权利要求1、2或3所述混音方法,其特征在于,所述根据转换所得的至少一个声音素材进行混音处理,包括:
将转换所得的至少两个声音素材进行混音处理;或者,
将转换所得的至少一个声音素材与获取的音频数据和/或内置声音素材进行混音处理。
5.根据权利要求4所述混音方法,其特征在于,所述根据转换所得的至少一个声音素材进行混音处理,具体为:
从参与混音处理的声音素材和/或音频数据中选择最长时间长度的声音素材或音频数据的二进制数据流,并建立临时二进制数据流,所述临时二进制数据流的时间长度与所述最长时间长度相同;
遍历所述最长时间长度的二进制数据流,并顺序读取其他需要混合的声音素材和/或音频数据的二进制数据流,将所述其他声音素材和/或音频数据的二进制数据流的浮点值与所述最长时间长度的二进制数据流的浮点值进行顺序合并后写入具有最长时间长度的临时二进制数据流中;
将写入后的临时二进制数据流编译为目标音频格式。
6.一种混音装置,其特征在于,该装置包括:
转换模块,用于将获取的音频数据转换为用作混音的声音素材;
混音模块,用于根据转换所得的至少一个声音素材进行混音处理。
7.根据权利要求6所述混音装置,其特征在于,所述转换模块进一步用于执行以下操作:
步骤a、选择声音素材的类别;
步骤b、对获取的音频数据的二进制数据流进行遍历分析,记录符合转换条件的数据对应的采样音量值和采样时间点,并将所述采样音量值和采样时间点存入临时转换数组中;
步骤c、遍历所述临时转换数组,根据读取的采样时间点在建立的临时二进制数据流中写入对应采样音量值的所选声音素材类别的二进制数据流,生成声音素材。
8.根据权利要求7所述混音装置,其特征在于,所述转换模块进一步用于,重复执行步骤a~步骤c,生成不同类别的声音素材。
9.根据权利要求6、7或8所述混音装置,其特征在于,所述混音模块进一步用于,将转换所得的至少两个声音素材进行混音处理;或者,将转换所得的至少一个声音素材与所述获取的音频数据和/或内置声音素材进行混音处理。
10.根据权利要求9所述混音装置,其特征在于,
所述混音模块进一步用于,从参与混音处理的声音素材和/或音频数据中选择最长时间长度的声音素材或音频数据的二进制数据流,并建立临时二进制数据流,所述临时二进制数据流的时间长度与所述最长时间长度相同;
遍历所述最长时间长度的二进制数据流,并顺序读取其他需要混合的声音素材和/或音频数据的二进制数据流,将所述其他声音素材和/或音频数据的二进制数据流的浮点值与所述最长时间长度的二进制数据流的浮点值进行顺序合并后写入具有最长时间长度的临时二进制数据流中;
将写入后的临时二进制数据流编译为目标音频格式。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201110190050.7A CN102867514B (zh) | 2011-07-07 | 2011-07-07 | 一种混音方法和混音装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201110190050.7A CN102867514B (zh) | 2011-07-07 | 2011-07-07 | 一种混音方法和混音装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN102867514A true CN102867514A (zh) | 2013-01-09 |
CN102867514B CN102867514B (zh) | 2016-04-13 |
Family
ID=47446338
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201110190050.7A Active CN102867514B (zh) | 2011-07-07 | 2011-07-07 | 一种混音方法和混音装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN102867514B (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105045578A (zh) * | 2015-06-29 | 2015-11-11 | 广州酷狗计算机科技有限公司 | 音频合成方法及装置 |
CN107506409A (zh) * | 2017-08-09 | 2017-12-22 | 浪潮金融信息技术有限公司 | 一种多音频数据的处理方法 |
CN113342306A (zh) * | 2021-06-18 | 2021-09-03 | 广州市保伦电子有限公司 | 一种2路音频混合方法及处理终端 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5496962A (en) * | 1994-05-31 | 1996-03-05 | Meier; Sidney K. | System for real-time music composition and synthesis |
CN1326303A (zh) * | 2000-05-25 | 2001-12-12 | 雅马哈株式会社 | 具有音乐合成能力的便携式通信终端装置 |
CN101282497A (zh) * | 2008-06-02 | 2008-10-08 | 刘家伟 | 多路音频任意交换、混音的装置 |
CN102005206A (zh) * | 2010-11-16 | 2011-04-06 | 上海华平信息技术股份有限公司 | 多路音频的混音方法 |
-
2011
- 2011-07-07 CN CN201110190050.7A patent/CN102867514B/zh active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5496962A (en) * | 1994-05-31 | 1996-03-05 | Meier; Sidney K. | System for real-time music composition and synthesis |
CN1326303A (zh) * | 2000-05-25 | 2001-12-12 | 雅马哈株式会社 | 具有音乐合成能力的便携式通信终端装置 |
CN101282497A (zh) * | 2008-06-02 | 2008-10-08 | 刘家伟 | 多路音频任意交换、混音的装置 |
CN102005206A (zh) * | 2010-11-16 | 2011-04-06 | 上海华平信息技术股份有限公司 | 多路音频的混音方法 |
Non-Patent Citations (1)
Title |
---|
王强: "电脑制作follow me(3)像大师一样的混音(1)", 《音响技术》 * |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105045578A (zh) * | 2015-06-29 | 2015-11-11 | 广州酷狗计算机科技有限公司 | 音频合成方法及装置 |
CN107506409A (zh) * | 2017-08-09 | 2017-12-22 | 浪潮金融信息技术有限公司 | 一种多音频数据的处理方法 |
CN113342306A (zh) * | 2021-06-18 | 2021-09-03 | 广州市保伦电子有限公司 | 一种2路音频混合方法及处理终端 |
CN113342306B (zh) * | 2021-06-18 | 2022-10-11 | 广州市保伦电子有限公司 | 一种2路音频混合方法及处理终端 |
Also Published As
Publication number | Publication date |
---|---|
CN102867514B (zh) | 2016-04-13 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US7698008B2 (en) | Content-based audio comparisons | |
CN101996627B (zh) | 语音处理装置、语音处理方法和程序 | |
US20110112672A1 (en) | Systems and Methods of Constructing a Library of Audio Segments of a Song and an Interface for Generating a User-Defined Rendition of the Song | |
CN102610267B (zh) | 一种改善播放系统音频播放质量的方法 | |
CN103021401A (zh) | 基于互联网的多人异步合唱混音合成方法及合成系统 | |
CN108206027A (zh) | 一种音频质量评价方法及系统 | |
CN103915086A (zh) | 信息处理的方法、装置和系统 | |
CN109068163A (zh) | 一种音视频合成系统及其合成方法 | |
US20050188819A1 (en) | Music synthesis system | |
WO2006069248A2 (en) | Audio fidelity meter | |
CN107591167A (zh) | 一种实现车载多媒体音频兼容性自动检测的方法及系统 | |
CN108053696A (zh) | 一种根据阅读内容进行声音播放的方法、装置和终端设备 | |
CN102867514B (zh) | 一种混音方法和混音装置 | |
CN113066454A (zh) | 自定义音色的midi音乐编辑播放方法、装置、系统及介质 | |
US6839675B2 (en) | Real-time monitoring system for codec-effect sampling during digital processing of a sound source | |
CN112420015A (zh) | 一种音频合成方法、装置、设备及计算机可读存储介质 | |
CN101154175A (zh) | 一种结合语音识别的音频测试方法及系统 | |
CN105340003A (zh) | 语音合成字典创建装置以及语音合成字典创建方法 | |
CN109243472A (zh) | 一种音频处理方法及音频处理系统 | |
CN104269174B (zh) | 一种音频信号的处理方法及装置 | |
Koenig et al. | Forensic authenticity analyses of the metadata in re-encoded WAV files | |
CN2909452Y (zh) | 用于再现接收的音乐内容的电子音乐装置 | |
CN115132183B (zh) | 音频识别模型的训练方法、装置、设备、介质及程序产品 | |
CN112750422B (zh) | 一种歌声合成方法、装置及设备 | |
CN113347553B (zh) | 音频输出方法、音频输出装置及多媒体服务器 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant |