CN108335701A - 一种进行声音降噪的方法及设备 - Google Patents

Abstract

本发明公开了一种进行声音降噪的方法及设备，用以解决现有技术中终端在进行声音采集时如果外界有多种噪音扬声器也会将这些噪音一起采集，导致采集的效果比较差的问题。本发明实施例中，终端在确定有应用占用第一音频通路以及有应用占用第二音频通路时，终端根据第一音频数据的采样率，对第二音频通路上需要通过DSP处理的音频数据进行重采样，然后将重采样后的音频数据和第一音频通路的音频数据发送至DSP进行降噪处理。由于终端通过DSP根据第一音频通路的音频数据与第二音频通路的音频数据进行降噪处理，能够消除或降低第二音频通路的音频数据对第一音频通路的音频数据造成的干扰，从而使终端采集到声音的效果更优越。

Description

一种进行声音降噪的方法及设备

技术领域

本发明涉及音频处理技术领域，特别涉及一种进行声音降噪的方法及设备。

背景技术

噪声是声波的频率、强弱变化无规律、杂乱无章的声音；从生理学角度：凡是妨碍人们正常休息、学习和工作的声音，以及对人们要听的声音产生干扰的声音都属于噪声；从这个意义上来讲，噪声的来源很多，如，街道上的汽车声、安静的图书馆里的说话声、建筑工地的机器声、以及邻居电视机过大的声音等都属于噪声。

一般人们用分贝(dB)来测量噪声的强度，用信噪比(S/N)来衡量噪声对有用信号的影响程度。噪声的可能来源有飞机、汽车、工厂、建筑工地、日常生活等。

随着科技的发展，手机、对讲器等终端的功能也越来越丰富，用户在使用这些终端进行声音采集时(比如录像、对讲等)，如果外界有多种噪音(比如此时终端有来电，终端的扬声器会播放来电铃声)，此时扬声器也会将这些噪音一起采集，这样会导致采集的效果比较差。

综上所述，目前终端在进行声音采集时如果外界有多种噪音扬声器也会将这些噪音一起采集，导致采集的效果比较差。

发明内容

本发明提供一种进行声音降噪的方法及设备，用以解决现有技术中终端在进行声音采集时如果外界有多种噪音扬声器也会将这些噪音一起采集，导致采集的效果比较差的问题。

本发明实施例提供一种进行声音降噪的方法，该方法包括：

终端确定有应用占用与麦克风连接的第一音频通路以及有应用占用与扬声器连接的第二音频通路，其中占用所述第一音频通路的应用与占用所述第二音频通路的应用不同；

所述终端根据所述第一音频通路对应的采样率，对所述第二音频通路上需要通过数字信号处理DSP处理的音频数据进行重采样；

所述终端将重采样得到的音频数据与所述第一音频通路上的音频数据通过DSP进行降噪处理。

本发明实施例提供一种进行声音降噪的设备，该设备包括：

至少一个处理单元以及至少一个存储单元，其中，所述存储单元存储有程序，当所述程序被所述处理单元执行时，使得所述处理单元执行下列过程：

确定有应用占用与麦克风连接的第一音频通路以及有应用占用与扬声器连接的第二音频通路，其中占用所述第一音频通路的应用与占用所述第二音频通路的应用不同；

根据所述第一音频通路对应的采样率，对所述第二音频通路上需要通过DSP处理的音频数据进行重采样；

将重采样得到的音频数据与所述第一音频通路上的音频数据通过DSP进行降噪处理。

本发明实施例提供一种进行声音降噪的设备，该设备包括：

确定模块，用于确定有应用占用与麦克风连接的第一音频通路以及有应用占用与扬声器连接的第二音频通路，其中占用所述第一音频通路的应用与占用所述第二音频通路的应用不同；

重采样模块，用于根据所述第一音频通路对应的采样率，对所述第二音频通路上需要通过DSP处理的音频数据进行重采样；

处理模块，用于将重采样得到的音频数据与所述第一音频通路上的音频数据通过DSP进行降噪处理。

本发明实施例中，终端在确定有应用占用与麦克风连接的第一音频通路以及有应用占用与扬声器连接的第二音频通路时，终端根据第一音频数据的采样率，对第二音频通路上需要通过DSP处理的音频数据进行重采样，然后将重采样后的音频数据和第一音频通路的音频数据发送至DSP进行降噪处理。由于终端通过DSP根据第一音频通路的音频数据与第二音频通路的音频数据进行降噪处理，能够消除或降低第二音频通路的音频数据对第一音频通路的音频数据造成的干扰，从而使终端采集到声音的效果更优越。

附图说明

为了更清楚地说明本发明实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简要介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域的普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。

图1为本发明实施例实现多条音频通路降噪示意图；

图2为本发明实施例一种进行声音降噪的方法；

图3为本发明实施例对来电铃声的降噪方法示意图；

图4为本发明实施例一种实现重采样的方案；

图5为本发明实施例一种进行声音降噪的方法的完整流程图；

图6为本发明实施例第一种进行声音降噪的设备；

图7为本发明实施例第二种进行声音降噪的设备。

具体实施方式

如图1所示，本发明实施例中多条音频通路的示意图：

图1中可见，对讲占用一路音频通道，录音占用一路音频通路，录像占用一路音频通路，来电铃声占用一路音频通路；且对讲、录像和录音是与麦克风连接的音频通路，定义为第一音频通路，来电铃声是与扬声器连接的音频通路，定义为第二音频通路；这样可以给不同的应用分配不同的音频通路，从而实现同时进行对讲、录音、录像等功能。

终端含有至少一个MIC(Microphone，麦克风)，CODEC(编译码器)将MIC收到的音频数据处理后传输给DSP(Digital Signal Processing，数字信号处理)，然后由DSP根据应用类型和调试参数之间的关系对音频数据进行调试；调试完成后，DSP将调试后的音频数据通过虚拟声卡发送给音频分析模块。

如果当前应用需要占用音频通道，DSP判断是否有未占用的音频通路，如果有，DSP就会记录下当前应用与音频通路之间的对应关系；

CODEC会对MIC接收到的音频数据进行编码，然后发送给DSP，DSP根据之前记录的应用与音频通路之间的对应关系，确定MIC接收到的编码后的音频数据对应的应用；

DSP根据应用与调试参数之间的对应关系，对音频数据进行调试；

DSP将调试后的音频数据发送给对应的音频分析模块；

由音频分析模块对收到的音频数据进行音频处理。

图1中，当录音、录像、对讲同时进行时，有来电铃声响起，为了保证录音、录像、对讲收到的音频数据不受到来电铃声的影响，那么需要对来电铃声的音频数据进行降噪。

为了使本发明的目的、技术方案和优点更加清楚，下面将结合附图对本发明作进一步地详细描述，显然，所描述的实施例仅仅是本发明一部份实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例，都属于本发明保护的范围。

如图2所示，本发明实施例提供一种进行声音降噪的方法，该方法包括：

步骤200、终端确定有应用占用与麦克风连接的第一音频通路以及有应用占用与扬声器连接的第二音频通路，其中占用所述第一音频通路的应用与占用所述第二音频通路的应用不同；

步骤201、所述终端根据所述第一音频通路对应的采样率，对所述第二音频通路上需要通过数字信号处理DSP处理的音频数据进行重采样；

步骤202、所述终端将重采样得到的音频数据与所述第一音频通路上的音频数据通过DSP进行降噪处理。

本发明实施例中，终端在确定有应用占用与麦克风连接的第一音频通路以及有应用占用与扬声器连接的第二音频通路时，终端根据第一音频数据的采样率，对第二音频通路上需要通过DSP处理的音频数据进行重采样，然后将重采样后的音频数据和第一音频通路的音频数据发送至DSP进行降噪处理。由于终端通过DSP根据第一音频通路的音频数据与第二音频通路的音频数据进行降噪处理，能够消除或降低第二音频通路的音频数据对第一音频通路的音频数据造成的干扰，从而使终端采集到声音的效果更优越。

上述，重采样的方案可以采用下列算法中的至少一个：

Nearest neighbor interpolation(最邻近内插法)、Bilinear interpolation(双线性内插法)和Cubic convolution interpolation(三次卷积法内插)等。

其中，第二音频通路对应的音频数据就是指需要消除的音频通路对应的音频数据；

如图1所示，对讲时来电铃声响起，那么来电铃声相对对讲就是需要消除的音频数据，来电铃声对应第二音频通路的音频数据；

类似的，录音的同时来电铃声响起，那么来电铃声相对录音就是需要消除的音频数据，来电铃声对应第二音频通路的音频数据；

相应的，录像的同时来电铃声响起，那么来电铃声相对录像就是需要消除的音频数据，来电铃声对应第二音频通路的音频数据。

除了来电铃声，针对扬声器输出的任何声音都可以进行消除处理，比如扬声器播放的音乐等。

在具体实施中，为了消除与扬声器连接的第二音频通路的音频数据，与麦克风连接的第一音频通路的音频数据的处理方式具体如下；

所述终端根据所述第一音频通路对应的采样率，对所述第二音频通路上需要通过DSP处理的音频数据进行重采样。

具体的，所述终端对第二音频通路上通过混频器输出的音频数据进行复制；

所述终端根据所述第一音频通路对应的采样率，将复制得到的一路音频数据进行重采样后输入到DSP。

如图3所示，图中输出字符串指的是：没有进行进行重采样时，输出到扬声器中的音频数据；

图3中输入字符串指的是：没有进行重采样时，输入到DSP中的音频数据。

图3中麦克风1、麦克风2、麦克风3分别对应不同的音频通路，麦克风1与对讲这个应用的音频通路连接在一起；麦克风2与录像这个应用的音频数据连接在一起，麦克风3与录音这个应用的音频通路连接在一起；

也就是说对讲的音频数据由麦克风1接收，录像的音频数据由麦克风2接收，录音的音频数据由麦克风3接收。

具体实现的时候，对讲与录像是与不同的麦克风连接，从而可以使对讲与录像收到的音频数据不完全相同，这样降噪效果更明显。

在实施中，也可以一个音频通路连接多个麦克风。

图3中来电铃声对应的第二音频通路是与扬声器相连的音频通路，由于来电铃声的音频数据对录音、录像和对讲的音频数据来说是噪音，所以需要消除来电铃声的音频数据；

图3中可见来电铃声是通过扬声器播放出来的，并且终端在收到来电后首先进行解码，然后将解码后的音频数据发送至混音器，最后由混频器将音频数据复制，一路音频数据直接发送至扬声器，另一路复制后的音频数据进行重采样后发送给DSP进行降噪。

而为了在DSP中将第一音频通路对应的第二音频通路的音频数据消除，需要将第一音频通路对应的第二音频通路的音频数据进行重采样，使第一音频通路对应的第二音频通路的音频数据的采样率与第一音频通路的采样率相同。

具体的，所述终端根据下列方式确定所述第一音频通路对应的采样率：

所述终端根据应用和采样率的对应关系，确定占用所述第一音频通路的应用对应的采样率；

所述终端将确定的采样率作为所述第一音频通路对应的采样率。

如图4所示，是一种实现重采样的方案，以消除来电铃声音频数据为例：

设来电铃声的音频频率为44.1K，录音的音频频率为16K，录像的音频频率为48K，对讲的音频频率为8K；

为了消除来电铃声对录音、录像、对讲的影响，将收集到的来电铃声的音频数据分别重采样作为参考信号发送给对讲、录像、录音对应的音频通路；

由于DSP实现降噪要求原始信号与参考信号的频率相同，所以需要将来电铃声的44.1K的频率重采样成16K发送给DSP实现录音对来电铃声的降噪；

将来电铃声的44.1K的频率重采样成48K发送给DSP实现录像对来电铃声的降噪；

将来电铃声的44.1K的频率重采样成8K发送给DSP实现对讲对来电铃声的降噪。

具体的，重采样后的音频数据作为原始信号(第一音频通路对应的音频数据)的参考信号发送至DSP，DSP中降噪算法可以将参考信号消除，从而可以得到清晰的语音数据。

在具体实践中，所述终端将重采样得到的音频数据与对应的第一音频通路上的音频数据通过DSP进行降噪处理之后，还需要根据第一音频通路与第一音频通路占用的应用类型对应的参数对第一音频通路的音频数据进行转换，也就是说：

针对任意一条第一音频通路，所述终端通过所述DSP确定占用所述第一音频通路的应用所属的应用类型对应的参数；

所述终端根据所述参数，通过所述DSP对降噪处理后的音频数据进行转换。

上述，调试指的是对收到的编码后的音频数据，根据不同应用需要转换参数，包括采样率，声道数，位宽等对音频通路的音频数据进行调试。

例如，对讲的调试参数：音质是1级；

录音的调试参数：音质是2级；

录像的调试参数：音质是3级；

音频数据分别是1、2、3、4对应音频通路1、2、3、4，音频通路1、2、3、4分别对应对讲、录像、录音和通话；

那么，DSP收到音频数据1后对它的调试就是对音频数据1音质定为1级，；DSP收到音频数据2后对它的调试就是对音频数据2音质定为2级，；DSP收到音频数据3后对它的调试就是对音频数据3音质定为3级。

如图5所示，以保留与麦克风连接的第一音频通路的音频数据，消除与扬声器连接的第二音频通路的音频数据为例，介绍本发明实施例一种进行声音降噪的方法：

步骤500、终端确定有应用占用与麦克风连接的第一音频通路时，与扬声器连接的第二音频通路中有音频数据；

步骤501、终端确定占用第一音频通路的应用对应的采样率；

步骤502、终端对与扬声器连接的第二音频通路通过混频器输出的音频数据进行复制；

步骤503、终端对复制后的音频数据进行重采样；

步骤504、终端通过DSP对重采样后的音频数据和与麦克风连接的第一音频通路的音频数据根据降噪算法进行降噪处理；

步骤505、终端根据应用与调试参数的对应关系，确定占用第一音频通路的应用对应的调试参数；

步骤506、终端根据确定的调试参数对收到的音频数据进行调试。

基于同一发明构思，本发明实施例中还提供了一种进行声音降噪的设备，由于该设备解决问题的原理与本发明实施例一种进行声音降噪的方法相似，因此该设备的实施可以参见方法的实施，重复之处不再赘述。

如图6所示，本发明实施例提供一种进行声音降噪的设备，该设备包括：

至少一个处理单元600以及至少一个存储单元601，其中，所述存储单元存储有程序，当所述程序被所述处理单元执行时，使得所述处理单元执行下列过程：

确定有应用占用与麦克风连接的第一音频通路以及有应用占用与扬声器连接的第二音频通路，其中占用所述第一音频通路的应用与占用所述第二音频通路的应用不同；

根据所述第一音频通路对应的采样率，对所述第二音频通路上需要通过DSP处理的音频数据进行重采样；

将重采样得到的音频数据与所述第一音频通路上的音频数据通过DSP进行降噪处理。

所述处理单元600具体用于：

对所述第二音频通路上需要通过DSP处理的音频数据进行复制；

根据所述第一音频通路的采样率，将复制得到的音频数据进行重采样。

可选的，所述处理单元600根据下列方式确定所述第一音频通路对应的采样率：

根据应用和采样率的对应关系，确定占用所述第一音频通路的应用对应的采样率；

将确定的采样率作为所述第一音频通路对应的采样率。

可选的，所述处理单元600还用于：

确定占用所述第一音频通路的应用所属的应用类型对应的调试参数；

根据所述调试参数，通过所述DSP对降噪处理后的音频数据进行调试。

可选的，与麦克风连接的第一音频通路的应用包括下列中的部分或全部：

录像、录音和对讲。

如图7所示，本发明实施例提供一种进行声音降噪的设备，该设备包括：

确定模块700，用于确定有应用占用与麦克风连接的第一音频通路以及有应用占用与扬声器连接的第二音频通路，其中占用所述第一音频通路的应用与占用所述第二音频通路的应用不同；

重采样模块701，用于根据所述第一音频通路对应的采样率，对所述第二音频通路上需要通过DSP处理的音频数据进行重采样；

处理模块702，用于将重采样得到的音频数据与所述第一音频通路上的音频数据通过DSP进行降噪处理。

可选的，所述处理模块702具体用于：

对所述第二音频通路上需要通过DSP处理的音频数据进行复制；

根据所述第一音频通路的采样率，将复制得到的音频数据进行重采样。

可选的，所述处理模块702根据下列方式确定所述第一音频通路对应的采样率：

根据应用和采样率的对应关系，确定占用所述第一音频通路的应用对应的采样率；

将确定的采样率作为所述第一音频通路对应的采样率。

可选的，所述处理模块702还用于：

确定占用所述第一音频通路的应用所属的应用类型对应的调试参数；

根据所述调试参数，通过所述DSP对降噪处理后的音频数据进行调试。

可选的，与麦克风连接的第一音频通路的应用包括下列中的部分或全部：

录像、录音和对讲。

以上参照示出根据本申请实施例的方法、装置(系统)和/或计算机程序产品的框图和/或流程图描述本申请。应理解，可以通过计算机程序指令来实现框图和/或流程图示图的一个块以及框图和/或流程图示图的块的组合。可以将这些计算机程序指令提供给通用计算机、专用计算机的处理器和/或其它可编程数据处理装置，以产生机器，使得经由计算机处理器和/或其它可编程数据处理装置执行的指令创建用于实现框图和/或流程图块中所指定的功能/动作的方法。

相应地，还可以用硬件和/或软件(包括固件、驻留软件、微码等)来实施本申请。更进一步地，本申请可以采取计算机可使用或计算机可读存储介质上的计算机程序产品的形式，其具有在介质中实现的计算机可使用或计算机可读程序代码，以由指令执行系统来使用或结合指令执行系统而使用。在本申请上下文中，计算机可使用或计算机可读介质可以是任意介质，其可以包含、存储、通信、传输、或传送程序，以由指令执行系统、装置或设备使用，或结合指令执行系统、装置或设备使用。

显然，本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样，倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。

Claims (11)

1.一种进行声音降噪的方法，其特征在于，该方法包括：

终端确定有应用占用与麦克风连接的第一音频通路以及有应用占用与扬声器连接的第二音频通路，其中占用所述第一音频通路的应用与占用所述第二音频通路的应用不同；

所述终端根据所述第一音频通路对应的采样率，对所述第二音频通路上需要通过数字信号处理DSP处理的音频数据进行重采样；

所述终端将重采样得到的音频数据与所述第一音频通路上的音频数据通过DSP进行降噪处理。

2.如权利要求1所述的方法，其特征在于，所述终端根据所述第一音频通路对应的采样率，对所述第二音频通路上需要通过DSP处理的音频数据进行重采样，包括：

所述终端对所述第二音频通路上需要通过DSP处理的音频数据进行复制；

所述终端根据所述第一音频通路的采样率，将复制得到的音频数据进行重采样。

3.如权利要求1或2所述的方法，其特征在于，所述终端根据下列方式确定所述第一音频通路对应的采样率：

所述终端根据应用和采样率的对应关系，确定占用所述第一音频通路的应用对应的采样率；

所述终端将确定的采样率作为所述第一音频通路对应的采样率。

4.如权利要求3所述的方法，其特征在于，所述终端将重采样得到的音频数据与对应的第一音频通路上的音频数据通过DSP进行降噪处理之后，还包括：

所述终端确定占用所述第一音频通路的应用所属的应用类型对应的调试参数；

所述终端根据所述调试参数，通过所述DSP对降噪处理后的音频数据进行调试。

5.如权利要求1所述的方法，其特征在于，与麦克风连接的第一音频通路的应用包括下列中的部分或全部：

录像、录音和对讲。

6.一种进行声音降噪的设备，其特征在于，该设备包括：

至少一个处理单元以及至少一个存储单元，其中，所述存储单元存储有程序，当所述程序被所述处理单元执行时，使得所述处理单元执行下列过程：

确定有应用占用与麦克风连接的第一音频通路以及有应用占用与扬声器连接的第二音频通路，其中占用所述第一音频通路的应用与占用所述第二音频通路的应用不同；

根据所述第一音频通路对应的采样率，对所述第二音频通路上需要通过DSP处理的音频数据进行重采样；

将重采样得到的音频数据与所述第一音频通路上的音频数据通过DSP进行降噪处理。

7.如权利要求6所述的设备，其特征在于，所述处理单元具体用于：

对所述第二音频通路上需要通过DSP处理的音频数据进行复制；

根据所述第一音频通路的采样率，将复制得到的音频数据进行重采样。

8.如权利要求6或7所述的设备，其特征在于，所述处理单元根据下列方式确定所述第一音频通路对应的采样率：

根据应用和采样率的对应关系，确定占用所述第一音频通路的应用对应的采样率；

将确定的采样率作为所述第一音频通路对应的采样率。

9.如权利要求8所述的设备，其特征在于，所述处理单元还用于：

确定占用所述第一音频通路的应用所属的应用类型对应的调试参数；

根据所述调试参数，通过所述DSP对降噪处理后的音频数据进行调试。

10.如权利要求6所述的设备，其特征在于，与麦克风连接的第一音频通路的应用包括下列中的部分或全部：

录像、录音和对讲。

11.一种进行声音降噪的设备，其特征在于，该设备包括：

确定模块，用于确定有应用占用与麦克风连接的第一音频通路以及有应用占用与扬声器连接的第二音频通路，其中占用所述第一音频通路的应用与占用所述第二音频通路的应用不同；

重采样模块，用于根据所述第一音频通路对应的采样率，对所述第二音频通路上需要通过DSP处理的音频数据进行重采样；

处理模块，用于将重采样得到的音频数据与所述第一音频通路上的音频数据通过DSP进行降噪处理。