CN103021401A - 基于互联网的多人异步合唱混音合成方法及合成系统 - Google Patents
基于互联网的多人异步合唱混音合成方法及合成系统 Download PDFInfo
- Publication number
- CN103021401A CN103021401A CN2012105502486A CN201210550248A CN103021401A CN 103021401 A CN103021401 A CN 103021401A CN 2012105502486 A CN2012105502486 A CN 2012105502486A CN 201210550248 A CN201210550248 A CN 201210550248A CN 103021401 A CN103021401 A CN 103021401A
- Authority
- CN
- China
- Prior art keywords
- chorus
- database
- audio
- recorded audio
- background server
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Electrophonic Musical Instruments (AREA)
- Telephonic Communication Services (AREA)
Abstract
本发明涉及一种基于互联网的多人异步合唱混音合成方法及合成系统，所述的合成方法包括：1)一手持移动终端向系统后台服务器发送某首歌曲的合唱公告信息；2)系统后台服务器将合唱公告信息发送给与其相连的手持移动终端，建立合唱数据库；3)手持移动终端通过库号访问合唱数据库；4)系统后台服务器在收到录音音频时，实时对其进行音质处理，生成合唱混音；5)将一个或多个合唱混音存入合唱数据库中，并将合唱数据库的当前状态分别发送至手持移动终端和Web服务器进行更新；所述的合成系统包括系统后台服务器、Web服务器和多个手持移动终端。与现有技术相比，本发明具有合唱作品音质效果好、噪音少、充分发挥网络互动性等优点。
Description
技术领域
本发明涉及一种互联网技术，尤其是涉及一种基于互联网的多人异步合唱混音合成方法及合成系统。
背景技术
在基于互联网的手持移动终端应用中，网络卡拉ok有着良好的应用前景。但是，目前的卡拉ok大都仅限于独唱，无法将多人异步录音的音频变为混音合成的合唱作品，也就无法让网络卡拉ok最充分的发挥网络的社群性与互动性。究其原因，主要有二大技术瓶颈：
混音合成中的难点。多人异步录制的音频会存在环境噪音问题、音量不平衡问题、人声音质不佳等问题，这些问题在混音合成的过程中都需要实时解决，目前的已知技术或系统无法解决此问题，因此也就无法达到良好的应用效果。
合唱混音时伴奏部分叠置过多导致的音量平衡及过载问题。由于要将大量的多人异步录音混音合成为合唱作品，因此会产生录音伴奏叠置过多导致的伴奏音量平衡及过载问题，目前的已知技术或系统无法解决此问题。
发明内容
本发明的目的就是为了克服上述现有技术存在的缺陷而提供一种合唱作品音质效果好、噪音少、充分发挥网络互动性的基于互联网的多人异步合唱混音合成方法及合成系统。
本发明的目的可以通过以下技术方案来实现：
一种基于互联网的多人异步合唱混音合成方法，包括以下步骤：
1)一手持移动终端选择歌曲数据库中的某首歌曲，并向系统后台服务器发送该歌曲的合唱公告信息；
2)系统后台服务器将接收到的合唱公告信息发送给与其相连的所有手持移动 终端，同时建立与该歌曲相对应的具有相应库号的合唱数据库；
3)接收到合唱公告信息的手持移动终端通过库号访问系统后台服务器中相应的合唱数据库，获取该合唱数据库的当前状态，录制并上传与该合唱数据库相关的录音音频；
4)系统后台服务器在收到与一个合唱数据库相关联的录音音频时，实时对该录音音频进行音质处理后保存入相关联的合唱数据库，同时将该录音音频与之前接收到的录音音频进行自动混音合成，生成一个或多个合唱混音；
5)系统后台服务器将一个或多个合唱混音存入合唱数据库中，并将合唱数据库的当前状态发送至手持移动终端和Web服务器进行更新。
所述的合唱数据库的当前状态包括参与合唱的人数和目前合唱数据库合唱混音结果。
所述的手持移动终端录制录音音频时采用经正弦波发生器产生的伴奏。
所述的步骤4)中的音质处理包括以下步骤：
41)对录音音频进行分析，在对录音音频进行音频处理时，根据分析结果而采用不用的处理参数；
42)对录音音频进行剪切，使合唱混音中的每个声部对齐；
43)对录音音频进行音量平衡与压缩处理，使合唱混音中的每个声部音量都是均衡的；
44)对录音音频进行波形反相处理，抵消录音音频中的伴奏；
45)对录音音频进行降噪处理，消除录音音频中的环境噪声以及进一步消除伴奏；
46)对录音音频进行EQ量化处理，改善音质；
47)对录音音频进行混响处理，提高听觉效果。
一种基于互联网的多人异步合唱混音合成系统，包括系统后台服务器、Web服务器和多个手持移动终端，所述的多个手持移动终端均与系统后台服务器连接，所述的Web服务器与系统后台服务器连接。
所述的手持移动终端为可发送合唱公告信息、可查询系统后台服务器中合唱数据库的当前状态、可播放目前合唱数据库合唱混音结果、可录制并上传与该合唱数据库相关的录音音频的手持移动终端。
所述的系统后台服务器中存储有歌曲数据库，该歌曲数据库的歌曲列表可显示 在手持移动终端中。
所述的手持移动终端包括平板计算机、笔记本计算机或智能手机。
与现有技术相比，本发明具有以下优点：
(1)本发明通过降噪、压缩、EQ量化及混响等处理，使混音合成的合唱作品具有较好的音质效果，解决了多人异步录音中的环境噪音、多人异步录音中音量不平衡等问题；
(2)本发明采用特殊制作的伴奏，该伴奏能通过波形反相处理将其抵消，解决了多人合唱混音时伴奏部分叠置过多导致的音量平衡及过载问题；
(3)本发明可将多个异步的音频转化为混音合唱音频，可充分发挥网络的社群性与互动性。
附图说明
图1为本发明的结构示意图；
图2为本发明系统的结构示意图。
具体实施方式
下面结合附图和具体实施例对本发明进行详细说明。
实施例
如图1所示，一种基于互联网的多人异步合唱混音合成方法，包括以下步骤：
1)一手持移动终端选择歌曲数据库中的某首歌曲，并向系统后台服务器发送该歌曲的合唱公告信息；
2)系统后台服务器将接收到的合唱公告信息发送给与其相连的所有手持移动终端，同时建立与该歌曲相对应的具有相应库号的合唱数据库；
3)接收到合唱公告信息的手持移动终端通过库号访问系统后台服务器中相应的合唱数据库，获取该合唱数据库的当前状态，通过手持移动终端上的预录音界面进行录制并上传与该合唱数据库相关的录音音频；
所述的合唱数据库的当前状态包括参与合唱的人数和目前合唱数据库合唱混音结果；所述的预录音界面是指具有包括导唱、录音、回放、上传和社交网分享等功能的界面；所述的手持移动终端录制录音音频时采用经波形方式制作的伴奏，该伴奏在混音合成时可利用反相处理将其抵消。
4)系统后台服务器在收到与一个合唱数据库相关联的录音音频时，实时对该录音音频通过分析后进行音质处理后保存入相关联的合唱数据库，同时将该录音音频与之前接收到的录音音频进行自动混音合成，生成一个或多个合唱混音；
所述的音质处理包括分析、剪切、音量平衡与压缩、波形反相、降噪、EQ量化和混响，可通过特定的算法处理多人异步录音中的环境噪音问题、多人异步录音中音量不平衡问题、合唱混音时伴奏部分叠置过多导致的音量平衡及过载问题，修缮录音的人声音质等。
音质处理的具体步骤为：
41)对录音音频进行分析，在对录音音频进行音频处理时，根据分析结果而采用不用的处理参数；
42)对录音音频进行剪切，使合唱混音中的每个声部对齐；
43)对录音音频进行音量平衡与压缩处理，使合唱混音中的每个声部音量都是均衡的；
44)对录音音频进行波形反相处理，抵消录音音频中的伴奏；
45)对录音音频进行降噪处理，消除录音音频中的环境噪声以及进一步消除伴奏；
46)对录音音频进行EQ量化处理，改善音质；
47)对录音音频进行混响处理，提高听觉效果
5)系统后台服务器将一个或多个合唱混音存入合唱数据库中，并将合唱数据库的当前状态发送至手持移动终端和Web服务器进行更新。
如图2所示，一种基于互联网的多人异步合唱混音合成系统，包括系统后台服务器1、Web服务器3和多个手持移动终端2，所述的多个手持移动终端2均与系统后台服务器1连接，所述的Web服务器3与系统后台服务器1连接。
所述的系统后台服务器1中存储有歌曲数据库，该歌曲数据库的歌曲列表可显示在手持移动终端2中，手持移动终端2选择歌曲数据库中的某首歌曲后，系统后台服务器1从歌曲数据库中将该歌曲的对应伴奏发送给手持移动终端2。所述的手持移动终端2为可发送合唱公告信息、可查询系统后台服务器中合唱数据库的当前状态、可播放目前合唱数据库合唱混音结果、可录制并上传与该合唱数据库相关的录音音频的手持移动终端。所述的手持移动终端2为平板计算机、笔记本计算机、智能手机、iPhone/iPad/iPod或其他手持式移动终端。
Claims (8)
1.一种基于互联网的多人异步合唱混音合成方法，其特征在于，包括以下步骤：
1)一手持移动终端选择歌曲数据库中的某首歌曲，并向系统后台服务器发送该歌曲的合唱公告信息；
2)系统后台服务器将接收到的合唱公告信息发送给与其相连的所有手持移动终端，同时建立与该歌曲相对应的具有相应库号的合唱数据库；
3)接收到合唱公告信息的手持移动终端通过库号访问系统后台服务器中相应的合唱数据库，获取该合唱数据库的当前状态，录制并上传与该合唱数据库相关的录音音频；
4)系统后台服务器在收到与一个合唱数据库相关联的录音音频时，实时对该录音音频进行音质处理后保存入相关联的合唱数据库，同时将该录音音频与之前接收到的录音音频进行自动混音合成，生成一个或多个合唱混音；
5)系统后台服务器将一个或多个合唱混音存入合唱数据库中，并将合唱数据库的当前状态分别发送至手持移动终端和Web服务器进行更新。
2.根据权利要求1所述的一种基于互联网的多人异步合唱混音合成方法，其特征在于，所述的合唱数据库的当前状态包括参与合唱的人数和目前合唱数据库合唱混音结果。
3.根据权利要求1所述的一种基于互联网的多人异步合唱混音合成方法，其特征在于，所述的手持移动终端录制录音音频时采用的是由正弦波发生器产生的伴奏。
4.根据权利要求1所述的一种基于互联网的多人异步合唱混音合成方法，其特征在于，所述的步骤4)中的音质处理包括以下步骤：
41)对录音音频进行分析，在对录音音频进行音频处理时，根据分析结果而采用不用的处理参数；
42)对录音音频进行剪切，使合唱混音中的每个声部对齐；
43)对录音音频进行音量平衡与压缩处理，使合唱混音中的每个声部音量都是均衡的；
44)对录音音频进行波形反相处理，抵消录音音频中的伴奏；
45)对录音音频进行降噪处理，消除录音音频中的环境噪声以及进一步消除伴奏；
46)对录音音频进行EQ量化处理，改善音质；
47)对录音音频进行混响处理，提高听觉效果。
5.一种如权利要求1所述的基于互联网的多人异步合唱混音合成系统，其特征在于，包括系统后台服务器、Web服务器和多个手持移动终端，所述的多个手持移动终端均与系统后台服务器连接，所述的Web服务器与系统后台服务器连接。
6.根据权利要求5所述的基于互联网的多人异步合唱混音合成系统，其特征在于，所述的手持移动终端为可发送合唱公告信息、可查询系统后台服务器中合唱数据库的当前状态、可播放目前合唱数据库合唱混音结果、可录制并上传与该合唱数据库相关的录音音频的手持移动终端。
7.根据权利要求5所述的基于互联网的多人异步合唱混音合成系统，其特征在于，所述的系统后台服务器中存储有歌曲数据库。
8.根据权利要求5所述的基于互联网的多人异步合唱混音合成系统，其特征在于，所述的手持移动终端包括平板计算机、笔记本计算机或智能手机。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201210550248.6A CN103021401B (zh) | 2012-12-17 | 2012-12-17 | 基于互联网的多人异步合唱混音合成方法及合成系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201210550248.6A CN103021401B (zh) | 2012-12-17 | 2012-12-17 | 基于互联网的多人异步合唱混音合成方法及合成系统 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN103021401A true CN103021401A (zh) | 2013-04-03 |
| CN103021401B CN103021401B (zh) | 2015-01-07 |
Family
ID=47969934
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201210550248.6A Active CN103021401B (zh) | 2012-12-17 | 2012-12-17 | 基于互联网的多人异步合唱混音合成方法及合成系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN103021401B (zh) |
Cited By (12)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103220425A (zh) * | 2013-04-10 | 2013-07-24 | 广东欧珀移动通信有限公司 | 一种基于多个移动终端的录音方法及系统 |
| CN104506588A (zh) * | 2014-12-09 | 2015-04-08 | 广东欧珀移动通信有限公司 | 一种实现乐队的移动排练的方法及装置 |
| EP3007163A4 (en) * | 2013-05-30 | 2016-12-21 | Xiaomi Inc | ASYNCHRONOUS CHORUS METHOD AND DEVICE |
| CN106601220A (zh) * | 2016-12-08 | 2017-04-26 | 天脉聚源(北京)传媒科技有限公司 | 一种录制多人轮唱的方法及装置 |
| CN107591149A (zh) * | 2017-09-18 | 2018-01-16 | 腾讯音乐娱乐科技（深圳）有限公司 | 音频合成方法、装置及存储介质 |
| CN108109652A (zh) * | 2017-12-27 | 2018-06-01 | 北京酷我科技有限公司 | 一种k歌合唱录音的方法 |
| CN109151552A (zh) * | 2018-09-26 | 2019-01-04 | 传线网络科技（上海）有限公司 | 多媒体内容的合成方法及装置 |
| CN109195048A (zh) * | 2018-09-03 | 2019-01-11 | 中科探索创新（北京）科技院 | 一种个性化不失真优化录制耳机 |
| CN112533037A (zh) * | 2019-09-19 | 2021-03-19 | 聚好看科技股份有限公司 | 连麦合唱作品的生成方法和显示设备 |
| WO2021052115A1 (zh) * | 2019-09-19 | 2021-03-25 | 聚好看科技股份有限公司 | 演唱作品的生成方法、发布方法和显示设备 |
| CN112581924A (zh) * | 2019-09-30 | 2021-03-30 | 广州艾美网络科技有限公司 | 基于点唱设备的音频处理方法、装置、存储介质及设备 |
| CN113077771A (zh) * | 2021-06-04 | 2021-07-06 | 杭州网易云音乐科技有限公司 | 异步合唱混音方法及装置、存储介质和电子设备 |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2003323186A (ja) * | 2002-05-02 | 2003-11-14 | Yamaha Corp | カラオケシステム、携帯通信端末及びプログラム |
| CN101251995A (zh) * | 2008-02-18 | 2008-08-27 | 王逸驰 | 一种通过midi信息控制音频整体音效并且便于后期修改和补救的方法 |
| CN101764994A (zh) * | 2010-01-11 | 2010-06-30 | 中国联合网络通信集团有限公司 | 基于因特网协议电视网络的远程卡拉ok实现方法及系统 |
| CN102158745A (zh) * | 2011-02-18 | 2011-08-17 | 深圳创维数字技术股份有限公司 | 卡拉ok业务的实现方法、终端、服务器端及系统 |
| CN102456340A (zh) * | 2010-10-19 | 2012-05-16 | 盛大计算机（上海）有限公司 | 基于互联网的卡拉ok对唱方法及系统 |
| CN102568460A (zh) * | 2010-12-28 | 2012-07-11 | 张泽铭 | 联网多人异步合唱影音作品系统及实施方法 |
-
2012
- 2012-12-17 CN CN201210550248.6A patent/CN103021401B/zh active Active
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2003323186A (ja) * | 2002-05-02 | 2003-11-14 | Yamaha Corp | カラオケシステム、携帯通信端末及びプログラム |
| CN101251995A (zh) * | 2008-02-18 | 2008-08-27 | 王逸驰 | 一种通过midi信息控制音频整体音效并且便于后期修改和补救的方法 |
| CN101764994A (zh) * | 2010-01-11 | 2010-06-30 | 中国联合网络通信集团有限公司 | 基于因特网协议电视网络的远程卡拉ok实现方法及系统 |
| CN102456340A (zh) * | 2010-10-19 | 2012-05-16 | 盛大计算机（上海）有限公司 | 基于互联网的卡拉ok对唱方法及系统 |
| CN102568460A (zh) * | 2010-12-28 | 2012-07-11 | 张泽铭 | 联网多人异步合唱影音作品系统及实施方法 |
| CN102158745A (zh) * | 2011-02-18 | 2011-08-17 | 深圳创维数字技术股份有限公司 | 卡拉ok业务的实现方法、终端、服务器端及系统 |
Cited By (17)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103220425B (zh) * | 2013-04-10 | 2016-01-20 | 广东欧珀移动通信有限公司 | 一种基于多个移动终端的录音方法及系统 |
| CN103220425A (zh) * | 2013-04-10 | 2013-07-24 | 广东欧珀移动通信有限公司 | 一种基于多个移动终端的录音方法及系统 |
| EP3007163A4 (en) * | 2013-05-30 | 2016-12-21 | Xiaomi Inc | ASYNCHRONOUS CHORUS METHOD AND DEVICE |
| RU2635835C2 (ru) * | 2013-05-30 | 2017-11-16 | Сяоми Инк. | Способ и устройство для асинхронного хорового исполнения |
| CN104506588A (zh) * | 2014-12-09 | 2015-04-08 | 广东欧珀移动通信有限公司 | 一种实现乐队的移动排练的方法及装置 |
| CN104506588B (zh) * | 2014-12-09 | 2018-01-19 | 广东欧珀移动通信有限公司 | 一种实现乐队的移动排练的方法及装置 |
| CN106601220A (zh) * | 2016-12-08 | 2017-04-26 | 天脉聚源(北京)传媒科技有限公司 | 一种录制多人轮唱的方法及装置 |
| CN107591149B (zh) * | 2017-09-18 | 2021-09-28 | 腾讯音乐娱乐科技（深圳）有限公司 | 音频合成方法、装置及存储介质 |
| CN107591149A (zh) * | 2017-09-18 | 2018-01-16 | 腾讯音乐娱乐科技（深圳）有限公司 | 音频合成方法、装置及存储介质 |
| CN108109652A (zh) * | 2017-12-27 | 2018-06-01 | 北京酷我科技有限公司 | 一种k歌合唱录音的方法 |
| CN109195048A (zh) * | 2018-09-03 | 2019-01-11 | 中科探索创新（北京）科技院 | 一种个性化不失真优化录制耳机 |
| CN109151552A (zh) * | 2018-09-26 | 2019-01-04 | 传线网络科技（上海）有限公司 | 多媒体内容的合成方法及装置 |
| CN112533037A (zh) * | 2019-09-19 | 2021-03-19 | 聚好看科技股份有限公司 | 连麦合唱作品的生成方法和显示设备 |
| WO2021052115A1 (zh) * | 2019-09-19 | 2021-03-25 | 聚好看科技股份有限公司 | 演唱作品的生成方法、发布方法和显示设备 |
| CN112533037B (zh) * | 2019-09-19 | 2022-02-11 | 聚好看科技股份有限公司 | 连麦合唱作品的生成方法和显示设备 |
| CN112581924A (zh) * | 2019-09-30 | 2021-03-30 | 广州艾美网络科技有限公司 | 基于点唱设备的音频处理方法、装置、存储介质及设备 |
| CN113077771A (zh) * | 2021-06-04 | 2021-07-06 | 杭州网易云音乐科技有限公司 | 异步合唱混音方法及装置、存储介质和电子设备 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN103021401B (zh) | 2015-01-07 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN103021401B (zh) | 基于互联网的多人异步合唱混音合成方法及合成系统 | |
| US10074351B2 (en) | Karaoke processing method and system | |
| CN108831437B (zh) | 一种歌声生成方法、装置、终端和存储介质 | |
| CN101764994B (zh) | 基于因特网协议电视网络的远程卡拉ok实现方法及系统 | |
| CN103635962B (zh) | 声音识别系统、识别字典登记系统以及声学模型标识符序列生成装置 | |
| CN107591149A (zh) | 音频合成方法、装置及存储介质 | |
| CN104123938A (zh) | 语音控制系统、电子装置及语音控制方法 | |
| CN102543096B (zh) | 对媒体文件播放过程中场景噪声进行抑制的方法与装置 | |
| CN105808710A (zh) | 一种远程 k 歌终端、远程k 歌系统及远程k 歌方法 | |
| CN106469557B (zh) | 伴奏音乐的提供方法和装置 | |
| CN103474055A (zh) | 一种手机ktv解决方案 | |
| CN106898339B (zh) | 一种歌曲的合唱方法及终端 | |
| CN104657438A (zh) | 信息处理方法及电子设备 | |
| CN103915086A (zh) | 信息处理的方法、装置和系统 | |
| CN109509472A (zh) | 基于语音平台识别背景音乐的方法、装置及系统 | |
| CN103903625A (zh) | 音频的混音方法和装置 | |
| CN108573393A (zh) | 评论信息处理方法、装置、服务器及存储介质 | |
| CN107770235A (zh) | 一种斗歌服务实现方法及系统 | |
| CN101930732B (zh) | 基于用户输入语音的乐曲生成方法及装置、智能终端 | |
| KR101813704B1 (ko) | 사용자 음색 분석 장치 및 음색 분석 방법 | |
| CN105575400A (zh) | 一种获取歌曲信息的方法、终端、服务器和系统 | |
| CN103383854A (zh) | 一种车载端 | |
| CN110970032A (zh) | 一种音箱语音交互控制的方法及装置 | |
| CN110096612A (zh) | 语音日志的在线音频分析数据的获取方法及系统 | |
| CN112927666B (zh) | 音频处理方法、装置、电子设备及存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| C14 | Grant of patent or utility model | ||
| GR01 | Patent grant | ||
| TR01 | Transfer of patent right | ||
| TR01 | Transfer of patent right |
Effective date of registration: 20181214 Address after: Room 3519, 3rd floor, 2879 Longteng Avenue, Xuhui District, Shanghai 200050 Patentee after: MENGXIANG QIANGYIN CULTURE COMMUNICATION (SHANGHAI) CO.,LTD. Address before: Room 103, Building 3, 39 Guoquan Road, Shanghai, 2003 Patentee before: Shanghai Wenxin Information Technology Co.,Ltd. Effective date of registration: 20181214 Address after: Room 103, Building 3, 39 Guoquan Road, Shanghai, 2003 Patentee after: Shanghai Wenxin Information Technology Co.,Ltd. Address before: 200031 Fenyang Road 20 Xuhui District, Shanghai Patentee before: Shanghai Conservatory of Music |