CN113611266B - 适用于多人k歌的音频同步方法、装置及存储介质 - Google Patents
适用于多人k歌的音频同步方法、装置及存储介质 Download PDFInfo
- Publication number
- CN113611266B CN113611266B CN202110770930.5A CN202110770930A CN113611266B CN 113611266 B CN113611266 B CN 113611266B CN 202110770930 A CN202110770930 A CN 202110770930A CN 113611266 B CN113611266 B CN 113611266B
- Authority
- CN
- China
- Prior art keywords
- audio
- information
- audio information
- microphones
- microphone
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 38
- 230000006870 function Effects 0.000 claims description 26
- 230000005540 biological transmission Effects 0.000 claims description 23
- 238000012545 processing Methods 0.000 claims description 22
- 238000012546 transfer Methods 0.000 claims description 10
- 230000005764 inhibitory process Effects 0.000 claims description 9
- 230000003321 amplification Effects 0.000 claims description 6
- 238000004364 calculation method Methods 0.000 claims description 6
- 238000003199 nucleic acid amplification method Methods 0.000 claims description 6
- 238000004590 computer program Methods 0.000 claims description 4
- 238000001914 filtration Methods 0.000 claims description 4
- 230000001360 synchronised effect Effects 0.000 claims description 3
- 239000004973 liquid crystal related substance Substances 0.000 claims 6
- 241001342895 Chorus Species 0.000 description 12
- HAORKNGNJCEJBX-UHFFFAOYSA-N cyprodinil Chemical compound N=1C(C)=CC(C2CC2)=NC=1NC1=CC=CC=C1 HAORKNGNJCEJBX-UHFFFAOYSA-N 0.000 description 11
- 230000008569 process Effects 0.000 description 11
- 230000008859 change Effects 0.000 description 8
- 238000010586 diagram Methods 0.000 description 6
- 230000004044 response Effects 0.000 description 6
- 238000004891 communication Methods 0.000 description 3
- 230000000694 effects Effects 0.000 description 3
- 230000007613 environmental effect Effects 0.000 description 3
- 238000001514 detection method Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000000926 separation method Methods 0.000 description 2
- 238000004458 analytical method Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000002708 enhancing effect Effects 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
- G10H1/00—Details of electrophonic musical instruments
- G10H1/0008—Associated control or indicating means
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
- G10H1/00—Details of electrophonic musical instruments
- G10H1/0033—Recording/reproducing or transmission of music for electrophonic musical instruments
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
- G10H1/00—Details of electrophonic musical instruments
- G10H1/36—Accompaniment arrangements
- G10H1/361—Recording/reproducing of accompaniment for use with an external source, e.g. karaoke systems
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W56/00—Synchronisation arrangements
Abstract
本发明提供一种适用于多人K歌的音频同步方法、装置及存储介质，在执行本方法的步骤前，预先设置多组扬声器和麦克风，每一组扬声器和麦克风对应一个歌唱人员，包括以下步骤：通过多个扬声器对多个歌唱人员同步播放伴奏信息；每个麦克风获取音频生成第一音频信息；将每个麦克风得到的第一音频信息发送至其他麦克风形成其他麦克风的第二音频信息；每个麦克风将采集的第一音频信息、接收到的第二音频信息以及伴奏信息进行混音处理后得到播放音频通过对应的扬声器播放。本发明提供的技术方案，能够在多个人进行K歌时通过扬声器同时播放伴奏和每个人的歌声，使得每个人基于扬声器听到的音频是多个人合唱的歌声，实用性较强。
Description
技术领域
本发明涉及音频数据传输技术领域，尤其涉及一种适用于多人K歌的音频同步方法、装置及存储介质。
背景技术
随着科学技术和音乐文化的迅速发展，K歌(唱歌)的方式越来越多样化。基于移动终端进行K歌的方式具有方便、易操作的优点，最受大家青睐。在K歌的过程中，可能会存在多个人合唱的情况。在现有技术方案中，通过以下方式进行合唱音频的同步，包括：
1)移动终端+真无线耳机：
移动终端由蓝牙协议与两只耳机相连，移动终端通过蓝牙协议连接其中一只耳机，该耳机通过蓝牙协议连接另一只耳机。在两只耳机都收到了当前要播放的音乐内容之后，两只耳机同步播放当前要播放的音乐。
2)两个移动终端：
在两个移动终端之间建立数据连接，通过数据连接在两个移动终端之间传输要播放的音频，在两个移动终端都具备了要播放的内容之后，两个移动终端同步播放当前要播放的音乐。
在以上的2种K歌、合唱方式中，都会将伴奏的音频、音乐内容对多个歌唱人员进行播放，但是并无法将不同人员之间的歌声进行相互的反馈、返送，实用性较差。
发明内容
本发明实施例提供一种适用于多人K歌的音频同步方法、装置及存储介质，能够在多个人进行K歌时通过扬声器同时播放伴奏和每个人的歌声，使得每个人基于扬声器听到的音频是多个人合唱的歌声，实用性较强。
本发明实施例的第一方面，提供一种适用于多人K歌的音频同步方法，在执行本方法的步骤前，预先设置多组扬声器和麦克风，每一组扬声器和麦克风对应一个歌唱人员，包括：
通过多个扬声器对多个歌唱人员同步播放伴奏信息；
每个麦克风获取音频生成第一音频信息；
将每个麦克风得到的第一音频信息发送至其他麦克风形成其他麦克风的第二音频信息；
每个麦克风将采集的第一音频信息、接收到的第二音频信息以及伴奏信息进行混音处理后得到播放音频通过对应的扬声器播放。
可选地，在第一方面的一种可能实现方式中，每个麦克风将采集的第一音频信息、接收到的第二音频信息以及伴奏信息进行混音处理后通过对应的扬声器播放包括：
对所述第一音频信息、第二音频信息以及伴奏信息进行混音得到播放音频；
对所述播放音频进行声反馈抑制处理和扩音处理以使扬声器对所述播放音频播放。
可选地，在第一方面的一种可能实现方式中，每个麦克风将采集的第一音频信息、接收到的第二音频信息以及伴奏信息进行混音处理后得到播放音频通过对应的扬声器播放包括：
预先设置最大延迟时间；
获取当前接收的第二音频信息的传输延迟，将所述传输延迟与最大延迟时间比对；
若传输延迟大于最大延迟时间，则在最大延迟时间后播放接收到的第二音频信息。
可选地，在第一方面的一种可能实现方式中，将每个麦克风得到的第一音频信息发送至其他麦克风形成其他麦克风的第二音频信息包括：
获取调整函数，所述调整函数用于对任意两组扬声器和麦克风之间的第二音频信息进行调整；
基于所述调整函数对当前时刻接收到的第二音频信息调整得到调整后的第二音频信息。
可选地，在第一方面的一种可能实现方式中，所述获取调整函数包括：
任意一个扬声器播放白噪声信号；
其他组的麦克风对白噪声信号录制；
对录制的白噪声信号与播放的白噪声信号进行互相关计算及低通滤波，得到任意两组设备之间的传递函数；
将第二音频信息经过传递函数后的初始幅度调整系数为1。
可选地，在第一方面的一种可能实现方式中，通过以下步骤对初始幅度调整系数调整，包括：
基于声反馈信息获取任意两组设备之间的距离信息，所述距离信息包括先前时刻距离和当前时刻距离；
通过以下公式计算幅度调整系数，包括：
其中，A为先前时刻距离，B为当前时刻距离。
可选地，在第一方面的一种可能实现方式中，每个麦克风获取音频生成第一音频信息包括：
接收每个麦克风所对应的音频特征；
提取所述音频中与音频特征对应的音频信息作为第一音频信息。
本发明实施例的第二方面，提供一种适用于多人K歌的音频同步装置，预先设置多组扬声器和麦克风，每一组扬声器和麦克风对应一个歌唱人员，包括：
同步播放模块，用于通过多个扬声器对多个歌唱人员同步播放伴奏信息；
生成模块，用于使每个麦克风获取音频生成第一音频信息；
发送模块，用于将每个麦克风得到的第一音频信息发送至其他麦克风形成其他麦克风的第二音频信息；
混音模块，用于对每个麦克风将采集的第一音频信息、接收到的第二音频信息以及伴奏信息进行混音处理后得到播放音频通过对应的扬声器播放。
可选地，在第二方面的一种可能实现方式中，所述混音模块还用于执行以下步骤，包括：
对所述第一音频信息、第二音频信息以及伴奏信息进行混音得到播放音频；
对所述播放音频进行声反馈抑制处理和扩音处理以使扬声器对所述播放音频播放。
可选地，在第二方面的一种可能实现方式中，所述混音模块还用于执行以下步骤，包括：
预先设置最大延迟时间；
获取当前接收的第二音频信息的传输延迟，将所述传输延迟与最大延迟时间比对；
若传输延迟大于最大延迟时间，则在最大延迟时间后播放接收到的第二音频信息。
可选地，在第二方面的一种可能实现方式中，所述生成模块还用于执行以下步骤，包括：
接收每个麦克风所对应的音频特征；
提取所述音频中与音频特征对应的音频信息作为第一音频信息。
本发明实施例的第三方面，提供一种可读存储介质，所述可读存储介质中存储有计算机程序，所述计算机程序被处理器执行时用于实现本发明第一方面及第一方面各种可能设计的所述方法。
本发明提供的一种适用于多人K歌的音频同步方法、装置及存储介质，能够在多个人进行K歌时通过每个人对应的麦克风采集各自的人声，然后将各自的人声发送至其他人的麦克风处，最后将所有人的人声与伴奏混音得到播放的音频，以此实现多个人同时K歌、合唱的目的和效果。并且在人声互相发送的过程中，会对人声的数据进行检测，避免出现丢包的情况出现回音，保障办发明提供的技术方案的稳定性。
附图说明
图1为适用于多人K歌的音频同步方法的第一种实施方式的流程图；
图2为本发明实施例中声音信息、数据传输的其中一种实施方式示意图；
图3为声反馈回路特征的测量阶段的示意图；
图4为声反馈回路特征的跟踪阶段的示意图；
图5为适用于多人K歌的音频同步装置的第一种实施方式的结构图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”“第四”等(如果存在)是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。
应当理解，在本发明的各种实施例中，各过程的序号的大小并不意味着执行顺序的先后，各过程的执行顺序应以其功能和内在逻辑确定，而不应对本发明实施例的实施过程构成任何限定。
应当理解，在本发明中，“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
应当理解，在本发明中，“多个”是指两个或两个以上。“和/或”仅仅是一种描述关联对象的关联关系，表示可以存在三种关系，例如，和/或B，可以表示：单独存在A，同时存在A和B，单独存在B这三种情况。字符“/”一般表示前后关联对象是一种“或”的关系。“包含A、B和C”、“包含A、B、C”是指A、B、C三者都包含，“包含A、B或C”是指包含A、B、C三者之一，“包含A、B和/或C”是指包含A、B、C三者中任1个或任2个或3个。
应当理解，在本发明中，“与A对应的B”、“与A相对应的B”、“A与B
相对应”或者“B与A相对应”，表示B与A相关联，根据A可以确定B。根据A确定B并不意味着仅仅根据A确定B，还可以根据A和/或其他信息确定B。A与B的匹配，是A与B的相似度大于或等于预设的阈值。
取决于语境，如在此所使用的“若”可以被解释成为“在……时”或“当……时”或“响应于确定”或“响应于检测”。
下面以具体地实施例对本发明的技术方案进行详细说明。下面这几个具体的实施例可以相互结合，对于相同或相似的概念或过程可能在某些实施例不再赘述。
本发明提供一种适用于多人K歌的音频同步方法，在执行本方法的步骤前，预先设置多组扬声器和麦克风，每一组扬声器和麦克风对应一个歌唱人员。
在一个可能的实施方式中，包括多个移动终端，每个移动终端分别具有一组扬声器和麦克风，每个歌唱人员可以持有一个移动终端同时进行K歌。
在一个可能的实施方式中，包括1个移动终端，该1个移动终端连接有多个一体耳机、蓝牙耳机等等，每个一体耳机、蓝牙耳机对应一个歌唱人员，通过1个移动终端和多个一体耳机、蓝牙耳机实现多个歌唱人员同时进行K歌。
如图1所示其流程图，本发明包括以下步骤：
步骤S110、通过多个扬声器对多个歌唱人员同步播放伴奏信息。在同步播放伴奏信息的过程中，可以是基于一个终端同时对扬声器进行控制，也可以是基于多个终端分别对扬声器进行控制，但是不管是怎样的控制方式，都需要控制扬声器同步播放伴奏信息。
步骤S120、每个麦克风获取音频生成第一音频信息。由于每个麦克风会离持有其的歌唱人员较近，所以其更容易获取相应歌唱人员的人声，该第一音频信息中主要是相应歌唱人员的人声。
步骤S130、将每个麦克风得到的第一音频信息发送至其他麦克风形成其他麦克风的第二音频信息。在多个歌唱人员同时歌唱的情况下，需要将每个歌唱人员的歌声发送至其他麦克风处形成第二音频信息。
步骤S140、每个麦克风将采集的第一音频信息、接收到的第二音频信息以及伴奏信息进行混音处理后得到播放音频通过对应的扬声器播放。在每个麦克风都得到其他麦克风采集的歌声后，会对所有歌唱人员的歌声与伴奏信息进行处理得到播放音频，该播放音频为合唱的音频，通过每个扬声器对合唱的音频进行播放以使每个歌唱人员都能够听到合唱的歌声。
在一个可能的实施方式中，如图2所示为2个歌唱用户同时歌唱的声音信息、数据传输示意图，包括歌唱用户A和歌唱用户B，歌唱用户A和歌唱用户B处分别设置有一组麦克风和扬声器，此时的终端可以是2个终端，也可以是1个终端，即图中的终端A和终端B可以是相同的、也可以是不同的。通过麦克风分别采集相应的人声后进行录音缓存得到第一音频信息，在得到第一音频信息后将第一音频信息缓存发送至其他终端，与此同时，缓存接收其他终端发送的第二音频信息，当出现丢包情况时，引入丢包隐藏(差错隐藏)处理，对丢失的包进行预测。并根据丢包隐藏的情况对第一音频信息、第二音频信息、伴奏信息进行混音和声反馈抑制处理得到播放音频。
进一步的，每个麦克风将采集的第一音频信息、接收到的第二音频信息以及伴奏信息进行混音处理后通过对应的扬声器播放包括：
对所述第一音频信息、第二音频信息以及伴奏信息进行混音得到播放音频；
对所述播放音频进行声反馈抑制处理和扩音处理以使扬声器对所述播放音频播放。
在一种可能的实施方式中，如图3所示，预先对移动终端进行配置，在未进行扬声/K歌时，需要先对移动终端进行配置，此时移动终端的扬声器没有播放歌声或者音乐。首先，使用移动终端扬声器主动播放多种声反馈探测信号、记录移动终端麦克风记录这些信号，通过分析计算得到回声功率、频率响应、环境混音脉冲响应。将所获得的计算结果保存为声反馈回路特征，根据声反馈回路特征对播放音频进行声反馈抑制处理。
在一种可能的实施方式中，如图4所示，在扬声/K歌的过程中，移动终端所处的环境可能会发生变化，本发明能够根据移动终端所处的环境变化进而改变声反馈回路特征，使得移动终端能够自动的适应环境环境变化而改变声反馈回路特征，即在移动终端所处的环境信息、位置信息发生改变时，其中环境信息、位置信息包括移动终端的姿态、位置以及移动速度，基于环境信息、位置信息改变回声功率、频率响应以及环境混音的脉冲响应。
进一步的，步骤S140包括：
预先设置最大延迟时间。在实际的K歌过程中，人耳对声音的分辨是具有时间性的，如果两个声音的间隔足够短，此时人耳听到的为同一个声音，所以对于本发明中设置的最大延迟时间可以是根据人耳对声音的分辨间隔来得到的。
获取当前接收的第二音频信息的传输延迟，将所述传输延迟与最大延迟时间比对。通过将接收到他麦克风发送的第二音频信息的传输延迟与最大延迟比对，可以判断是否可能会出现K歌、合唱不同步的情况。
若传输延迟大于最大延迟时间，则在最大延迟时间后播放接收到的第二音频信息。当传输延迟大于最大延迟时间时，此时已经可能会出现合唱不同步的情况，所以先将接收到的其他麦克风发送的第二音频信息进行播放，以避免出现K歌、合唱不同步的情况。
进一步的，将每个麦克风得到的第一音频信息发送至其他麦克风形成其他麦克风的第二音频信息包括：
获取调整函数，所述调整函数用于对任意两组扬声器和麦克风之间的第二音频信息进行调整；
基于所述调整函数对当前时刻接收到的第二音频信息调整得到调整后的第二音频信息。在对第二音频信息调整后进行人声增强处理，对第一音频信息、所有的第二音频信息以及伴奏分别进行声反馈抑制处理，最后增强扩音音效后放音。
进一步的，所述获取调整函数包括：
任意一个扬声器播放白噪声信号；
其他组的麦克风对白噪声信号录制；
对录制的白噪声信号与播放的白噪声信号进行互相关计算及低通滤波，得到任意两组设备之间的传递函数；
将第二音频信息经过传递函数后的初始幅度调整系数为1。
进一步的，通过以下步骤对初始幅度调整系数调整，包括：
基于声反馈信息获取任意两组设备之间的距离信息，所述距离信息包括先前时刻距离和当前时刻距离。其中声反馈信息可以是上述的声反馈回路特征。声反馈信息也可以是对声反馈回路特征进行处理得到的，因为声反馈回路特征包括了环境变化、不同终端间影响的变化，所以声反馈回路特征也可以是去除了环境变化，只保留了不同终端间影响的变化。
通过以下公式计算幅度调整系数，包括：
其中，A为先前时刻距离，B为当前时刻距离。
本发明提供的技术方案，可以根据声反馈信息中的位置信息变化关系，计算出终端之间距离的变化，调整经过传递函数后的幅度调整系数。终端间距离变近，幅度调大，终端间距离变远，幅度调小。进一步的，步骤S120包括：
接收每个麦克风所对应的音频特征。音频特征可以是音色，因为每个人的音色都不相同，所以可以根据音色对音频的归属进行区分。
提取所述音频中与音频特征对应的音频信息作为第一音频信息。例如说歌唱用户对应麦克风A，则对麦克风A在K歌时录制的歌声(音频信息)进行处理，提取音频信息中具有A相应音色特征的第一音频信息，该第一音频信息默认为是持有该麦克风的歌唱用户的歌声。
本发明提供的同步过程至少包含以下特征：
1)每个终端分别下载伴奏，播放时只同步播放开始时间。
2)当前终端在采集声音后，直接将采集到的声音发送到其他终端，以缩短延迟时间。
3)当前终端在接收其他终端发送来的声音时，设置一个最大延迟时间，该时间作为传输丢包的判决门限，即所有传输延迟大于该门限的数据均被认为是丢包。当前终端在等待这个时间后就开始播放接收到的人声，当数据丢失时，引入丢包隐藏(差错隐藏)处理，对丢失的包进行预测。
4)当前终端接收到的其他终端的声音在当前终端播放时，其音效是由当前终端进行控制。
本发明还提供一种适用于多人K歌的音频同步装置，预先设置多组扬声器和麦克风，每一组扬声器和麦克风对应一个歌唱人员，如图5所示其结构示意图，包括：
同步播放模块，用于通过多个扬声器对多个歌唱人员同步播放伴奏信息；
生成模块，用于使每个麦克风获取音频生成第一音频信息；
发送模块，用于将每个麦克风得到的第一音频信息发送至其他麦克风形成其他麦克风的第二音频信息；
混音模块，用于对每个麦克风将采集的第一音频信息、接收到的第二音频信息以及伴奏信息进行混音处理后得到播放音频通过对应的扬声器播放。
在一个实施例中，所述混音模块还用于执行以下步骤，包括：
对所述第一音频信息、第二音频信息以及伴奏信息进行混音得到播放音频；
对所述播放音频进行声反馈抑制处理和扩音处理以使扬声器对所述播放音频播放。
在一个实施例中，所述混音模块还用于执行以下步骤，包括：
预先设置最大延迟时间；
获取当前接收的第二音频信息的传输延迟，将所述传输延迟与最大延迟时间比对；
若传输延迟大于最大延迟时间，则在最大延迟时间后播放接收到的第二音频信息。
在一个实施例中，所述生成模块还用于执行以下步骤，包括：
接收每个麦克风所对应的音频特征；
提取所述音频中与音频特征对应的音频信息作为第一音频信息。
其中，可读存储介质可以是计算机存储介质，也可以是通信介质。通信介质包括便于从一个地方向另一个地方传送计算机程序的任何介质。计算机存储介质可以是通用或专用计算机能够存取的任何可用介质。例如，可读存储介质耦合至处理器，从而使处理器能够从该可读存储介质读取信息，且可向该可读存储介质写入信息。当然，可读存储介质也可以是处理器的组成部分。处理器和可读存储介质可以位于专用集成电路(ApplicationSpecific Integrated Circuits，简称：ASIC)中。另外，该ASIC可以位于用户设备中。当然，处理器和可读存储介质也可以作为分立组件存在于通信设备中。可读存储介质可以是只读存储器(ROM)、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。
本发明还提供一种程序产品，该程序产品包括执行指令，该执行指令存储在可读存储介质中。设备的至少一个处理器可以从可读存储介质读取该执行指令，至少一个处理器执行该执行指令使得设备实施上述的各种实施方式提供的方法。
在上述终端或者服务器的实施例中，应理解，处理器可以是中央处理单元(英文：Central Processing Unit，简称：CPU)，还可以是其他通用处理器、数字信号处理器(英文：Digital Signal Processor，简称：DSP)、专用集成电路(英文：Application SpecificIntegrated Circuit，简称：ASIC)等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。结合本发明所公开的方法的步骤可以直接体现为硬件处理器执行完成，或者用处理器中的硬件及软件模块组合执行完成。
最后应说明的是：以上各实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述各实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分或者全部技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的范围。
Claims (7)
1.一种适用于多人K歌的音频同步方法，在执行本方法的步骤前，预先设置多组扬声器和麦克风，每一组扬声器和麦克风对应一个歌唱人员，其特征在于，包括以下步骤：
通过多个扬声器对多个歌唱人员同步播放伴奏信息；
每个麦克风获取音频生成第一音频信息；
将每个麦克风得到的第一音频信息发送至其他麦克风形成其他麦克风的第二音频信息；
每个麦克风将采集的第一音频信息、接收到的第二音频信息以及伴奏信息进行混音处理后得到播放音频通过对应的扬声器播放；
将每个麦克风得到的第一音频信息发送至其他麦克风形成其他麦克风的第二音频信息包括：
获取调整函数，所述调整函数用于对任意两组扬声器和麦克风之间的第二音频信息进行调整；
基于所述调整函数对当前时刻接收到的第二音频信息调整得到调整后的第二音频信息；
其中，
所述获取调整函数包括：
任意一个扬声器播放白噪声信号；
其他组的麦克风对白噪声信号录制；
对录制的白噪声信号与播放的白噪声信号进行互相关计算及低通滤波，得到任意两组设备之间的传递函数；
将第二音频信息经过传递函数后的初始幅度调整系数为1；
通过以下步骤对初始幅度调整系数调整，包括：
基于声反馈信息获取任意两组设备之间的距离信息，所述距离信息包括先前时刻距离和当前时刻距离；
通过以下公式计算幅度调整系数，包括：
其中，A为先前时刻距离，B为当前时刻距离。
2.根据权利要求1所述的适用于多人K歌的音频同步方法，其特征在于，
每个麦克风将采集的第一音频信息、接收到的第二音频信息以及伴奏信息进行混音处理后通过对应的扬声器播放包括：
对所述第一音频信息、第二音频信息以及伴奏信息进行混音得到播放音频；
对所述播放音频进行声反馈抑制处理和扩音处理以使扬声器对所述播放音频播放。
3.根据权利要求1所述的适用于多人K歌的音频同步方法，其特征在于，
每个麦克风将采集的第一音频信息、接收到的第二音频信息以及伴奏信息进行混音处理后得到播放音频通过对应的扬声器播放包括：
预先设置最大延迟时间；
获取当前接收的第二音频信息的传输延迟，将所述传输延迟与最大延迟时间比对；
若传输延迟大于最大延迟时间，则在最大延迟时间后播放接收到的第二音频信息。
4.根据权利要求1所述的适用于多人K歌的音频同步方法，其特征在于，
每个麦克风获取音频生成第一音频信息包括：
接收每个麦克风所对应的音频特征；
提取所述音频中与音频特征对应的音频信息作为第一音频信息。
5.一种适用于多人K歌的音频同步装置，预先设置多组扬声器和麦克风，每一组扬声器和麦克风对应一个歌唱人员，其特征在于，包括：
同步播放模块，用于通过多个扬声器对多个歌唱人员同步播放伴奏信息；
生成模块，用于使每个麦克风获取音频生成第一音频信息；
发送模块，用于将每个麦克风得到的第一音频信息发送至其他麦克风形成其他麦克风的第二音频信息；
混音模块，用于对每个麦克风将采集的第一音频信息、接收到的第二音频信息以及伴奏信息进行混音处理后得到播放音频通过对应的扬声器播放；
其中，
将每个麦克风得到的第一音频信息发送至其他麦克风形成其他麦克风的第二音频信息包括：
获取调整函数，所述调整函数用于对任意两组扬声器和麦克风之间的第二音频信息进行调整；
基于所述调整函数对当前时刻接收到的第二音频信息调整得到调整后的第二音频信息；
其中，
所述获取调整函数包括：
任意一个扬声器播放白噪声信号；
其他组的麦克风对白噪声信号录制；
对录制的白噪声信号与播放的白噪声信号进行互相关计算及低通滤波，得到任意两组设备之间的传递函数；
将第二音频信息经过传递函数后的初始幅度调整系数为1；
通过以下步骤对初始幅度调整系数调整，包括：
基于声反馈信息获取任意两组设备之间的距离信息，所述距离信息包括先前时刻距离和当前时刻距离；
通过以下公式计算幅度调整系数，包括：
其中，A为先前时刻距离，B为当前时刻距离。
6.根据权利要求5所述的适用于多人K歌的音频同步装置，其特征在于，
所述混音模块还用于执行以下步骤，包括：
对所述第一音频信息、第二音频信息以及伴奏信息进行混音得到播放音频；
对所述播放音频进行声反馈抑制处理和扩音处理以使扬声器对所述播放音频播放。
7.一种可读存储介质，其特征在于，所述可读存储介质中存储有计算机程序，所述计算机程序被处理器执行时用于实现权利要求1至4任一所述的方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110770930.5A CN113611266B (zh) | 2021-07-08 | 2021-07-08 | 适用于多人k歌的音频同步方法、装置及存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110770930.5A CN113611266B (zh) | 2021-07-08 | 2021-07-08 | 适用于多人k歌的音频同步方法、装置及存储介质 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN113611266A CN113611266A (zh) | 2021-11-05 |
| CN113611266B true CN113611266B (zh) | 2023-10-31 |
Family
ID=78304163
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202110770930.5A Active CN113611266B (zh) | 2021-07-08 | 2021-07-08 | 适用于多人k歌的音频同步方法、装置及存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN113611266B (zh) |
Citations (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CA1182922A (en) * | 1982-08-06 | 1985-02-19 | Henry G. Kellett | Apparatus and method for articulatory speech recognition |
| CN1126010A (zh) * | 1994-06-23 | 1996-07-03 | Ntt移动通信网株式会社 | 用于接收码分多址信号的方法和装置 |
| CA2464025A1 (en) * | 2003-04-10 | 2004-10-10 | Gennum Corporation | System and method for transmitting audio via a serial data port in a hearing instrument |
| CN101212588A (zh) * | 2006-12-29 | 2008-07-02 | 明基电通股份有限公司 | 可同步播放视频信号及音频信号的音像播放系统及其方法 |
| CN102843467A (zh) * | 2012-08-13 | 2012-12-26 | 北京小米科技有限责任公司 | 一种实时采集和播放音频信号的方法、移动终端及系统 |
| JP2015136105A (ja) * | 2013-12-27 | 2015-07-27 | ジーエヌ リザウンド エー／エスＧｎ Ｒｅｓｏｕｎｄ Ａ／Ｓ | フィードバック抑制 |
| CN109785819A (zh) * | 2018-12-22 | 2019-05-21 | 深圳唐恩科技有限公司 | 多个麦克风的关联方法、存储介质、麦克风及唱歌系统 |
| CN110070848A (zh) * | 2019-03-11 | 2019-07-30 | 深圳趣唱科技有限公司 | 基于自带音响麦克风的线上k歌方法、系统及存储介质 |
| CN110430104A (zh) * | 2019-09-18 | 2019-11-08 | 北京云中融信网络科技有限公司 | 音频传输延迟的测试方法、装置、存储介质和电子设备 |
| CN111352605A (zh) * | 2018-12-20 | 2020-06-30 | 海信视像科技股份有限公司 | 一种音频播放、发送的方法及装置 |
| CN111600808A (zh) * | 2020-05-21 | 2020-08-28 | 深圳市极点信息科技有限公司 | 一种用于即时通讯的信息处理方法和装置 |
-
2021
- 2021-07-08 CN CN202110770930.5A patent/CN113611266B/zh active Active
Patent Citations (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CA1182922A (en) * | 1982-08-06 | 1985-02-19 | Henry G. Kellett | Apparatus and method for articulatory speech recognition |
| CN1126010A (zh) * | 1994-06-23 | 1996-07-03 | Ntt移动通信网株式会社 | 用于接收码分多址信号的方法和装置 |
| CA2464025A1 (en) * | 2003-04-10 | 2004-10-10 | Gennum Corporation | System and method for transmitting audio via a serial data port in a hearing instrument |
| CN101212588A (zh) * | 2006-12-29 | 2008-07-02 | 明基电通股份有限公司 | 可同步播放视频信号及音频信号的音像播放系统及其方法 |
| CN102843467A (zh) * | 2012-08-13 | 2012-12-26 | 北京小米科技有限责任公司 | 一种实时采集和播放音频信号的方法、移动终端及系统 |
| JP2015136105A (ja) * | 2013-12-27 | 2015-07-27 | ジーエヌ リザウンド エー／エスＧｎ Ｒｅｓｏｕｎｄ Ａ／Ｓ | フィードバック抑制 |
| CN111352605A (zh) * | 2018-12-20 | 2020-06-30 | 海信视像科技股份有限公司 | 一种音频播放、发送的方法及装置 |
| CN109785819A (zh) * | 2018-12-22 | 2019-05-21 | 深圳唐恩科技有限公司 | 多个麦克风的关联方法、存储介质、麦克风及唱歌系统 |
| CN110070848A (zh) * | 2019-03-11 | 2019-07-30 | 深圳趣唱科技有限公司 | 基于自带音响麦克风的线上k歌方法、系统及存储介质 |
| CN110430104A (zh) * | 2019-09-18 | 2019-11-08 | 北京云中融信网络科技有限公司 | 音频传输延迟的测试方法、装置、存储介质和电子设备 |
| CN111600808A (zh) * | 2020-05-21 | 2020-08-28 | 深圳市极点信息科技有限公司 | 一种用于即时通讯的信息处理方法和装置 |
Non-Patent Citations (1)
| Title |
|---|
| 多元动态数据的传递函数模型及应用;汪远征;徐雅静;;统计与决策(第13期);全文 * |
Also Published As
| Publication number | Publication date |
|---|---|
| CN113611266A (zh) | 2021-11-05 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN110741435B (zh) | 音频信号处理的方法、系统和介质 | |
| CN106302997B (zh) | 一种输出控制方法、电子设备及系统 | |
| KR101987473B1 (ko) | 온라인 노래방 서비스의 반주 및 가창 음성 간 동기화 시스템 및 이를 수행하기 위한 장치 | |
| JP2010538571A (ja) | オーディオ信号のデコーディング方法及び装置 | |
| JP2008096483A (ja) | 音響出力制御装置、音響出力制御方法 | |
| WO2014106375A1 (zh) | 信息处理的方法、装置和系统 | |
| WO2023221559A1 (zh) | K歌音频处理方法、装置及计算机可读存储介质 | |
| CN108510997A (zh) | 电子设备及应用于电子设备的回声消除方法 | |
| CN110996238A (zh) | 双耳同步信号处理助听系统及方法 | |
| CN113611266B (zh) | 适用于多人k歌的音频同步方法、装置及存储介质 | |
| WO2019002179A1 (en) | HYBRID AUDIO SIGNAL SYNCHRONIZATION BASED ON CROSS CORRELATION AND ATTACK ANALYSIS | |
| CN108712218A (zh) | 一种检测模拟对讲设备近距离通话啸叫可能性的方法 | |
| WO2023061330A1 (zh) | 音频合成方法、装置、设备及计算机可读存储介质 | |
| EP1784049A1 (en) | A method and system for sound reproduction, and a program product | |
| CN113270082A (zh) | 一种车载ktv控制方法及装置、以及车载智能网联终端 | |
| CN112581924A (zh) | 基于点唱设备的音频处理方法、装置、存储介质及设备 | |
| CN113611272B (zh) | 基于多移动终端的扬声方法、装置及存储介质 | |
| JP3554649B2 (ja) | 音声処理装置とその音量レベル調整方法 | |
| US20210125594A1 (en) | Wireless midi headset | |
| WO2013189318A1 (zh) | 一种数据处理方法、装置、物联网服务平台及终端 | |
| CN113612881B (zh) | 基于单移动终端的扬声方法、装置及存储介质 | |
| CN113891152A (zh) | 音频播放控制方法及其装置、设备、介质、产品 | |
| CN113611271B (zh) | 适用于移动终端的数字音量扩增方法、装置及存储介质 | |
| KR20090054583A (ko) | 휴대용 단말기에서 스테레오 효과를 제공하기 위한 장치 및방법 | |
| JP4422656B2 (ja) | ネットワークを用いた遠隔多地点合奏システム |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |