CN115206278A - 一种声音降噪的方法和装置 - Google Patents
一种声音降噪的方法和装置 Download PDFInfo
- Publication number
- CN115206278A CN115206278A CN202210640682.7A CN202210640682A CN115206278A CN 115206278 A CN115206278 A CN 115206278A CN 202210640682 A CN202210640682 A CN 202210640682A CN 115206278 A CN115206278 A CN 115206278A
- Authority
- CN
- China
- Prior art keywords
- filter
- noise reduction
- earphone
- adjusting
- parameters
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 131
- 230000009467 reduction Effects 0.000 claims abstract description 145
- 238000001914 filtration Methods 0.000 claims abstract description 107
- 238000004422 calculation algorithm Methods 0.000 claims abstract description 73
- 230000003044 adaptive effect Effects 0.000 claims abstract description 62
- 210000000613 ear canal Anatomy 0.000 claims abstract description 37
- 238000004891 communication Methods 0.000 claims description 43
- 230000006870 function Effects 0.000 claims description 33
- 230000002159 abnormal effect Effects 0.000 claims description 24
- 230000004044 response Effects 0.000 claims description 20
- 238000004590 computer program Methods 0.000 claims description 18
- 230000005534 acoustic noise Effects 0.000 claims description 13
- 238000012545 processing Methods 0.000 description 57
- 230000008569 process Effects 0.000 description 29
- 230000005236 sound signal Effects 0.000 description 22
- 238000010586 diagram Methods 0.000 description 18
- 230000036544 posture Effects 0.000 description 13
- 230000007613 environmental effect Effects 0.000 description 12
- 238000009795 derivation Methods 0.000 description 10
- 238000012546 transfer Methods 0.000 description 10
- 230000000694 effects Effects 0.000 description 7
- 238000005516 engineering process Methods 0.000 description 7
- 230000003287 optical effect Effects 0.000 description 5
- 230000014509 gene expression Effects 0.000 description 4
- 210000003454 tympanic membrane Anatomy 0.000 description 4
- 230000006978 adaptation Effects 0.000 description 3
- 238000004364 calculation method Methods 0.000 description 3
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 238000001514 detection method Methods 0.000 description 3
- 238000001228 spectrum Methods 0.000 description 3
- 229920001621 AMOLED Polymers 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 2
- 230000001413 cellular effect Effects 0.000 description 2
- 238000013461 design Methods 0.000 description 2
- 238000005457 optimization Methods 0.000 description 2
- 230000008447 perception Effects 0.000 description 2
- 238000009877 rendering Methods 0.000 description 2
- 230000001360 synchronised effect Effects 0.000 description 2
- 230000001133 acceleration Effects 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 238000013528 artificial neural network Methods 0.000 description 1
- 230000003190 augmentative effect Effects 0.000 description 1
- 210000000988 bone and bone Anatomy 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000004927 fusion Effects 0.000 description 1
- 238000011478 gradient descent method Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 238000007781 pre-processing Methods 0.000 description 1
- 238000013139 quantization Methods 0.000 description 1
- 239000002096 quantum dot Substances 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000035807 sensation Effects 0.000 description 1
- 230000011664 signaling Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10K—SOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
- G10K11/00—Methods or devices for transmitting, conducting or directing sound in general; Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
- G10K11/16—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
- G10K11/175—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound
- G10K11/178—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase
- G10K11/1785—Methods, e.g. algorithms; Devices
- G10K11/17853—Methods, e.g. algorithms; Devices of the filter
- G10K11/17854—Methods, e.g. algorithms; Devices of the filter the filter being an adaptive filter
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10K—SOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
- G10K11/00—Methods or devices for transmitting, conducting or directing sound in general; Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
- G10K11/16—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
- G10K11/175—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound
- G10K11/178—Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase
- G10K11/1787—General system configurations
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R1/00—Details of transducers, loudspeakers or microphones
- H04R1/10—Earpieces; Attachments therefor ; Earphones; Monophonic headphones
- H04R1/1083—Reduction of ambient noise
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10K—SOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
- G10K2210/00—Details of active noise control [ANC] covered by G10K11/178 but not provided for in any of its subgroups
- G10K2210/10—Applications
- G10K2210/108—Communication systems, e.g. where useful sound is kept and noise is cancelled
- G10K2210/1081—Earphones, e.g. for telephones, ear protectors or headsets
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R2460/00—Details of hearing devices, i.e. of ear- or headphones covered by H04R1/10 or H04R5/033 but not provided for in any of their subgroups, or of hearing aids covered by H04R25/00 but not provided for in any of its subgroups
- H04R2460/01—Hearing devices using active noise cancellation
Landscapes
- Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Acoustics & Sound (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Soundproofing, Sound Blocking, And Sound Damping (AREA)
Abstract
一种声音降噪的方法和装置,应用于音频技术领域。该方法包括:通过第一麦克风采集参考信号,参考信号用于表征当前外部环境的声音;通过第二麦克风采集误差信号,误差信号用于表征佩戴耳机的用户耳道内部环境的声音;然后对参考信号和误差信号进行分析,使用自适应算法调节滤波器(包括第一滤波器和第二滤波器),确定滤波参数,并利用滤波参数进行降噪。本申请实施例的声音降噪方法,基于当前耳道情况进行滤波参数的自适应调整,能够动态调整滤波参数,提升主动降噪的体验。
Description
技术领域
本申请涉及音频技术领域,并且具体地,涉及一种声音降噪的方法和装置。
背景技术
随着耳机技术的发展,用户对耳机的降噪诉求也越来越高。当前耳机可以通过主动降噪(activenoisecontrol,ANC)功能对耳机的噪声进行消除。例如,通过预先设定多组降噪参数,实现不同场景下的降噪。但是现有的降噪模式存在一定局限性,预先设定的降噪参数无法满足用户的降噪需求,影响降噪体检。例如,在用户佩戴耳机后如果重新调整耳机佩戴姿势,预设的参数无法适配调整佩戴后的耳道情况。因此,亟需提出一种声音降噪的方法提升降噪体验。
发明内容
有鉴于此,本申请提供了一种声音降噪的方法、装置、电子设备、计算机可读存储介质和计算机程序产品,通过自适应调整降噪参数,能够动态识别耳道情况并实现自适应降噪,极大提升用户的听感体验,从而提升用户主动降噪的体验。
第一方面,提供了一种声音降噪的方法,所述方法应用于耳机,所述耳机包括第一麦克风和第二麦克风,所述方法包括:
通过所述第一麦克风采集参考信号,所述参考信号用于表征当前外部环境的声音;
通过所述第二麦克风采集误差信号,所述误差信号用于表征佩戴耳机的用户耳道内部环境的声音;
获取滤波参数,所述滤波参数是根据所述参考信号和所述误差信号确定的,所述滤波参数包括第一滤波参数和第二滤波参数,所述第一滤波参数是通过自适应调节算法调节第一滤波器获得的,所述第二滤波参数通过自适应调节算法调节第二滤波器获得的,所述第一滤波器包括一个或多个二阶无限长脉冲响应滤波器,所述第二滤波器是有限长脉冲响应滤波器;
基于所述滤波参数进行声音降噪。
上述方法可以由耳机或耳机中的芯片执行。基于上述方案,通过获取参考信号以及误差信号,然后对参考信号和误差信号进行分析,使用自适应算法调节滤波器(包括第一滤波器和第二滤波器),确定滤波参数,并利用滤波参数进行降噪。相比于现有技术中需要播放提示音识别耳道情况的技术,本申请实施例的声音降噪方法不需要播放校准音频,就可以动态识别出耳道情况,并基于当前耳道情况进行滤波参数的自适应调整,提升主动降噪的体验。
一方面,在用户调整耳机的佩戴姿势后,本申请实施例的声音降噪方法针对调整佩戴姿势后的耳道情况进行分析,对滤波参数进行自适应调整,然后基于得到的滤波参数进行降噪,能够为用户提供最佳的降噪体验。另一方面,即使外界噪声发生变化,针对不同的频谱特性,采用本申请实施例的方法同样能够实现滤波参数的动态调整,极大提升了用户的听感体验。
上述滤波参数可以是耳机自己确定的,也可以是耳机从电子设备处获取的。如果是从电子设备获取的,则该电子设备与耳机已建立通信连接。
在一种可能的实现方式中,所述方法还包括:
向电子设备发送所述参考信号以及所述误差信号;
其中,所述获取滤波参数,包括:
接收来自电子设备的所述滤波参数。
因此,耳机也可以接收电子设备(比如终端)发送的滤波参数,以实现降噪功能。
可选地,所述方法还包括:
向电子设备发送其他耳机工作时的相关信息,以辅助电子设备计算所述滤波参数。
其中,耳机工作时的相关信息包括但不限于以下中的一项或多项:工作模式、风噪情况、用户耳道情况、用户佩戴时的泄露情况等。
工作模式指耳机当前工作于哪种模式,比如,ANC模式。
风噪情况指是否存在风噪和/或啸叫等异常环境噪声。
用户耳道情况指耳机识别出的佩戴耳机的用户耳道大小。
用户佩戴时的泄露情况可以理解为:在佩戴耳机后,由于个体耳道的差异、佩戴姿势不同或耳机自身的结构等因素,导致的不同程度的声音外泄或者泄露(即环境噪声泄露到耳道中)的情况。
可选地,所述第一滤波参数是通过聚类算法AP、递归最小二乘法RLS、梯度下降算法或高斯牛顿法调节所述第一滤波器获得的;和/或,
可选地,所述第二滤波参数是通过最小均方根算法LMS、聚类算法AP或递归最小二乘法RLS调节所述第二滤波器获得的。
应理解,此处列举的自适应调节算法只是示例性说明,本申请实施例并不限于此。
在一种可能的实现方式中,在获取所述滤波参数之前,所述方法还包括:
检测是否存在异常噪声,所述异常噪声包括风噪和/或啸叫;
在不存在所述异常噪声时,获取所述滤波参数。
本申请实施例在判断不存在风噪和啸叫等异常环境噪声时,才基于自适应滤波参数进行降噪,以便减少风噪和啸叫对参数调整的影响。
在一种可能的实现方式中,所述方法还包括:
在存在所述异常噪声时,使用预设降噪参数进行降噪处理。因此,如果检测到风噪和啸叫,可以使用预设降噪参数(比如,耳机中预先设定有一组针对风噪状态对应的降噪参数)对风噪和啸叫等异常环境噪声进行降噪处理。
在一种可能的实现方式中,所述方法还包括:
根据所述第一滤波器的步长与所述第二滤波器的步长,确定调节档位,所述调节档位用于调整耳机的降噪速度。
滤波器的步长值可以影响滤波器收敛的速度。本申请实施例基于滤波器的步长,还提供了供用户选择耳机的降噪速度的调节档位(或者说调节等级)。调节档位可以包括多个档位,每个档位对应的调节速度不同。比如,用户通过耳机应用(application,APP)或耳机设置选择耳机的调节档位,从而可以选择更快速或者更平稳的模式进行适配,以便满足用户的调节需求。
本申请实施例对耳机的ANC模式的入口不作限定。比如,对于具备ANC模式的耳机,ANC模式可以默认一直开启,在耳机运行后,ANC模式可以一直自动运行。又比如,用户可以自主选择何时开启ANC模式或者切换到ANC模式。
在一种可能的实现方式中,所述方法还包括:
检测所述耳机是否已入耳;在检测到所述耳机已入耳的情况下,所述耳机工作于主动降噪ANC模式;或者,
接收第一指令,所述第一指令用于控制所述耳机工作于ANC模式。
第二方面,提供了一种声音降噪的方法,应用于电子设备,所述电子设备与耳机建立通信连接,所述方法包括:
显示第一界面,所述第一界面用于设置所述耳机的功能,所述第一界面包括调节档位的控件;
检测到对所述调节档位的控件的操作;
响应于对所述调节档位的控件的操作,显示第二界面,所述第二界面中包括调节档位的选项。
上述方法可以由终端设备或终端设备中的芯片执行。基于上述方案,本申请实施例基于滤波器的步长,还提供了供用户选择耳机的降噪速度的调节档位(或者说调节等级)。调节档位可以包括多个档位,每个档位对应的调节速度不同。比如,用户通过耳机应用(application,APP)或耳机设置选择耳机的调节档位,从而可以选择更快速或者更平稳的模式进行适配,以便满足用户的调节需求。
在一种可能的实现方式中,所述调节档位用于调整耳机的降噪速度,所述调节档位是根据所述第一滤波器的步长与所述第二滤波器的步长确定的。
在一种可能的实现方式中,所述方法还包括:
接收所述耳机发送的参考信号和误差信号;
根据所述误差信号和所述参考信号确定滤波器参数,所述滤波参数包括第一滤波参数和第二滤波参数,所述第一滤波参数是通过自适应调节算法调节第一滤波器获得的,所述第二滤波参数通过自适应调节算法调节第二滤波器获得的,所述第一滤波器包括一个或多个二阶无限长脉冲响应滤波器,所述第二滤波器是有限长脉冲响应滤波器;
向所述耳机发送所述滤波参数。
也就是说,电子设备也可以向耳机发送的滤波参数,以实现降噪功能。
可选地,所述方法还包括:
接收耳机发送的其他耳机工作时的相关信息。
其中,耳机工作时的相关信息包括但不限于以下中的一项或多项:工作模式、风噪情况、用户耳道情况、用户佩戴时的泄露情况等。
工作模式指耳机当前工作于哪种模式,比如,ANC模式。
风噪情况指是否存在风噪和/或啸叫等异常环境噪声。
用户耳道情况指耳机识别出的佩戴耳机的用户耳道大小。
用户佩戴时的泄露情况可以理解为:在佩戴耳机后,由于个体耳道的差异、佩戴姿势不同或耳机自身的结构等因素,导致的不同程度的声音外泄或者泄露的情况。
也就是说,除了接收耳机发送的参考信号和误差信号外,还可以接收其他耳机工作时的相关信息,以辅助电子设备计算所述滤波参数。
第三方面,提供了一种声音降噪的装置,包括用于执行第一方面中任一种方法的单元。该装置可以是耳机,也可以是耳机内的芯片。该装置包括第一麦克风、第二麦克风和处理单元。可选地,该装置还包括通信单元。
当该装置是耳机时,该处理单元可以是处理器,该通信单元可以是通信接口;该耳机还可以包括存储器,该存储器用于存储计算机程序代码,当该处理器执行该存储器所存储的计算机程序代码时,使得该耳机执行第一方面中的任一种方法。
当该装置是耳机内的芯片时,该处理单元可以是芯片内部的逻辑处理单元,该通信单元可以是输出接口、管脚或电路等;该芯片还可以包括存储器,该存储器可以是该芯片内的存储器(例如,寄存器、缓存等),也可以是位于该芯片外部的存储器(例如,只读存储器、随机存取存储器等);该存储器用于存储计算机程序代码,当该处理器执行该存储器所存储的计算机程序代码时,使得该芯片执行第一方面的任一种方法。
第四方面,提供了一种声音降噪的装置,包括用于执行第二方面中任一种方法的单元。该装置可以是终端(或者终端设备),也可以是终端(或者终端设备)内的芯片。该装置包括输入单元、显示单元和处理单元。
当该装置是终端时,该处理单元可以是处理器,该输入单元可以是通信接口,该显示单元可以是图形处理模块和屏幕;该终端还可以包括存储器,该存储器用于存储计算机程序代码,当该处理器执行该存储器所存储的计算机程序代码时,使得该终端执行第二方面中的任一种方法。
当该装置是终端内的芯片时,该处理单元可以是芯片内部的逻辑处理单元,该输入单元可以是输出接口、管脚或电路等,该显示单元可以是芯片内部的图形处理单元;该芯片还可以包括存储器,该存储器可以是该芯片内的存储器(例如,寄存器、缓存等),也可以是位于该芯片外部的存储器(例如,只读存储器、随机存取存储器等);该存储器用于存储计算机程序代码,当该处理器执行该存储器所存储的计算机程序代码时,使得该芯片执行第二方面的任一种方法。
第五方面,提供了一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序代码,当所述计算机程序代码被声音降噪的装置运行时,使得该装置执行第一方面中的任一种方法。
第六方面,提供了一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序代码,当所述计算机程序代码被声音降噪的装置运行时,使得该装置执行第二方面中的任一种方法。
第七方面,提供了一种计算机程序产品,所述计算机程序产品包括:计算机程序代码,当所述计算机程序代码被声音降噪的装置运行时,使得该装置执行第一方面中的任一种方法。
第八方面,提供了一种计算机程序产品,所述计算机程序产品包括:计算机程序代码,当所述计算机程序代码被声音降噪的装置运行时,使得该装置执行第二方面中的任一种方法。
附图说明
图1是本申请实施例的应用场景的一个示例图;
图2是耳机与电子设备通信的一个示例图;
图3是一种适用于本申请的电子设备的硬件系统的示意图;
图4是一种适用于本申请的电子设备的软件系统的示意图;
图5是本申请实施例的声音降噪方法的示意性流程图;
图6是本申请实施例的声音降噪方法的另一个示意性流程图;
图7是本申请实施例的一个降噪原理示例图;
图8是本申请实施例的多个二阶IIR滤波器级联的一个示意性框图;
图9是本申请实施例的FIR滤波器的推导过程的一个示意性框图;
图10是本申请实施例的调节档位的一个界面示例图;
图11是本申请实施例的声音降噪的装置的一个示意性框图;
图12是本申请实施例的声音降噪的装置的另一个示意性框图。
具体实施方式
下面将结合附图,对本申请实施例中的技术方案进行描述。
本申请实施例提供的声音降噪的方法应用于耳机。耳机包括适配于左耳的左耳机以及适配于右耳的右耳机。本申请实施例对耳机的佩戴形态不作限定。比如,可以是头戴式耳机、耳挂式耳机、颈挂式耳机或者耳塞式耳。耳塞式耳机可以包括入耳式耳机(或称作耳道式耳机)或者半入耳式耳机。
本申请实施例的耳机可以具备主动降噪ANC功能,也可以不具备,对此不作具体限定。示例性地,当耳机采用ANC模式时,能够减弱耳机用户对当前外部环境的声音以及佩戴所述耳机的用户耳道内部的环境声音的感知。
可以理解,本申请实施例对耳机是有线耳机还是无线耳机也不作具体限定。
为便于理解,以下结合图1中的耳机100进行说明。
图1示出了本申请实施例的应用场景的一个示例图。如图1所示,耳机100包括多个麦克风(包括:参考麦克风101、误差麦克风102和通话麦克风103),扬声器104。
参考麦克风101也可称作前馈(feedforward,FF)麦克风。参考麦克风101设置于耳机100的外侧,用于实时采集外界环境的声音,比如,可以采集外部噪声。
误差麦克风102也可称作后馈(feedback,FB)麦克风。误差麦克风102设置于耳机内侧,更靠近于人耳鼓膜,用于采集佩戴耳机后靠近耳朵鼓膜的声音。
一般来讲,为了便于描述,可以将参考麦克风101采集的信号称作参考信号,将误差麦克风102采集的信号称作误差信号。
通话麦克风103可以位于耳机100的外侧,可以用于采集通话信号,相比于参考麦克风101而言,通话麦克风103更靠近用户的嘴部。
扬声器104用于播放下行音频信号,以使得音频信号进入用户的耳道。
在一种可能的实现方式中,扬声器104用于播放经过滤波参数进行降噪后的声音信号。
可选地,耳机100中还可以包括处理器105。处理器105用于处理下行音频信号和/或麦克风采集的信号,比如,执行ANC处理等。
作为一种可能的实现方式,处理器105可以包括降噪处理单元106和主控单元107。
在一些可能的实施例中,所述处理器105用于根据所述参考信号和所述误差信号确定滤波参数,所述滤波参数包括第一滤波参数和第二滤波参数,所述第一滤波参数是通过自适应调节算法调节第一滤波器获得的,所述第二滤波参数通过自适应调节算法调节第二滤波器获得的,所述第一滤波器包括一个或多个二阶无限长脉冲响应滤波器,所述第二滤波器是有限长脉冲响应滤波器。
或者,所述处理器105用于从电子设备处接收所述滤波参数。所述滤波参数是电子设备确定的。
降噪处理单元106用于根据控制命令对下行音频信号以及麦克风采集的信号进行处理,比如,ANC处理等。降噪处理单元106例如可以包括编译码(coder-decoder,CODEC)芯片或者高保真(high-fidelity,HiFi)芯片等。可选地,降噪处理单元106还可以包括DSP。在一些可能的实施例中,在本申请实施例中,降噪处理单元106用于基于自动调节的降噪参数进行降噪处理。
主控单元107用于用户针对耳机操作产生控制命令或者接收来自终端设备的控制命令等。主控单元107可以是ARM处理芯片、数字信号处理器(digital signal processor,DSP)、微控制单元(microcontrollerunit,MCU)、片上系统(systemonchip,SoC)或者中央处理器(centralprocessingunit,CPU)中的一项或多项实现。
可选地,耳机100还可包括存储器。存储器用于存储处理器105执行的程序或者指令。处理器105根据存储器存储的程序或者指令执行ANC处理等。存储器可以包括随机存取存储器(randomaccess memory,RAM)、只读存储器(read-only memory,ROM)、可编程只读存储器(programmable ROM,PROM)、可擦除可编程只读存储器(erasable PROM,EPROM)、电可擦除可编程只读存储器(electrically EPROM,EEPROM)、闪存寄存器、硬盘、移动硬盘或者本领域熟知的任何其他形式的存储介质中的一个或多个。
可选地,耳机100中还可以包括无线通信单元,用于与电子设备(比如终端)建立通信连接。无线通信单元可以是集成至少一个通信处理模块的一个或多个器件。比如,耳机100的无线通信单元为蓝牙(bluetooth,BT)模块,终端的通信模块也为蓝牙,则耳机100可与终端设备通过蓝牙连接。
在一些可能的实现方式中,耳机100可以通过无线通信单元向电子设备发送通过参考麦克风采集的参考信号。
在一些可能的实现方式中,耳机100可以通过无线通信单元向电子设备发送通过误差麦克风采集的误差信号。
可以理解,耳机包括左耳机和右耳机,且左耳机与右耳机采用的结构是类似的。为了便于理解,图1中是以耳机100为例进行说明。
还可以理解,图1中的耳机100的结构只是示例性说明。在一些实施例中,耳机100可以包括比图1所示的耳机100更多或更少的部件,或者组合某些部件,或者拆分某些部件,或者不同的部件布置。图1中所示的部件可以以硬件,软件,或者软件和硬件的组合实现。
如图1所示,用户在佩戴耳机100后,可以基于自身需求随时调整耳机100的佩戴姿势。本申请对用户调整耳机的时机不作限定,可以是用户在初始佩戴后重新调整耳机的佩戴姿势,也可能是使用过程中对耳机的佩戴姿势进行调整。
应理解,图1中的场景只是示意性说明本申请的一个应用场景,这并不对本申请实施例构成限定,本申请并不限于此。
还应理解,本申请实施例对参考麦克风101、误差麦克风102的数量均不作限定。参考麦克风101可以包括一个或多个麦克风。误差麦克风102可以包括一个或多个麦克风。
本申请实施例涉及的耳机可与电子设备建立通信连接,连接方式可以是有线连接(比如,通过将耳机线插入电子设备的音频接口实现连接),也可以是无线连接(比如,通过WiFi、蓝牙方式、红外技术、超宽带技术或无线高保真技术与电子设备连接),对此不作限定。
图2示出了耳机100与电子设备200之间通信的一个示例图。比如,电子设备200将音频数据发送至耳机100中进行播放。又比如,电子设备200向耳机100发送控制信令等。耳机100与电子设备200可以通过连接协议实现数据传输。
一种可能的实现方式,耳机100侧支持对信号进行处理,比如,对采集的声音信号进行降噪。
又一种可能的实现方式,在耳机100与电子设备200建立连接后,耳机100将待处理的信号或数据发送到电子设备200,电子设备200将处理后的信号或数据发送到耳机100。
示例性地,电子设备200向耳机100发送滤波参数,所述滤波参数包括第一滤波参数和第二滤波参数,所述第一滤波参数是通过自适应调节算法调节第一滤波器获得的,所述第二滤波参数通过自适应调节算法调节第二滤波器获得的,所述第一滤波器包括一个或多个二阶无限长脉冲响应滤波器,所述第二滤波器是有限长脉冲响应滤波器。
可选地,电子设备200可以是各种音源设备。该电子设备200例如可以为手机、平板电脑、多媒体播放设备、电子书阅读器、个人计算机、个人数字助理(personaldigitalassistant,PDA)、智能手表、智能手环、录音机等。本申请对电子设备的具体形式不作限制。
图3是一种适用于本申请的电子设备的硬件系统。
电子设备200可以是手机、智慧屏、平板电脑、可穿戴电子设备、车载电子设备、增强现实(augmented reality,AR)设备、虚拟现实(virtual reality,VR)设备、笔记本电脑、超级移动个人计算机(ultra-mobile personal computer,UMPC)、上网本、个人数字助理(personal digital assistant,PDA)、投影仪等等,本申请实施例对电子设备200的具体类型不作任何限制。
电子设备200可以包括处理器110,外部存储器接口120,内部存储器121,通用串行总线(universal serial bus,USB)接口130,充电管理模块140,电源管理模块141,电池142,天线1,天线2,移动通信模块150,无线通信模块160,音频模块170,扬声器170A,受话器170B,麦克风170C,耳机接口170D,传感器模块180,按键190,马达191,指示器192,摄像头193,显示屏194,以及用户标识模块(subscriber identification module,SIM)卡接口195等。其中传感器模块180可以包括压力传感器180A,陀螺仪传感器180B,气压传感器180C,磁传感器180D,加速度传感器180E,距离传感器180F,接近光传感器180G,指纹传感器180H,温度传感器180J,触摸传感器180K,环境光传感器180L,骨传导传感器180M等。
需要说明的是,图3所示的结构并不构成对电子设备200的具体限定。在本申请另一些实施例中,电子设备200可以包括比图3所示的部件更多或更少的部件,或者,电子设备200可以包括图3所示的部件中某些部件的组合,或者,电子设备200可以包括图3所示的部件中某些部件的子部件。图3示的部件可以以硬件、软件、或软件和硬件的组合实现。
处理器110可以包括一个或多个处理单元。例如,处理器110可以包括以下处理单元中的至少一个:应用处理器(application processor,AP)、调制解调处理器、图形处理器(graphics processing unit,GPU)、图像信号处理器(image signal processor,ISP)、控制器、视频编解码器、数字信号处理器(digital signal processor,DSP)、基带处理器、神经网络处理器(neural-network processing unit,NPU)。其中,不同的处理单元可以是独立的器件,也可以是集成的器件。
控制器可以根据指令操作码和时序信号,产生操作控制信号,完成取指令和执行指令的控制。
处理器110中还可以设置存储器,用于存储指令和数据。在一些实施例中,处理器110中的存储器为高速缓冲存储器。该存储器可以保存处理器110刚用过或循环使用的指令或数据。如果处理器110需要再次使用该指令或数据,可从所述存储器中直接调用,避免了重复存取,减少了处理器110的等待时间,因而提高了系统的效率。
在一些实施例中,所述无线通信模块160用于接收耳机发送的参考信号和误差信号。
在一些实施例中,所述处理器110用于根据所述误差信号和所述参考信号确定滤波器参数,所述滤波参数包括第一滤波参数和第二滤波参数,所述第一滤波参数是通过自适应调节算法调节第一滤波器获得的,所述第二滤波参数通过自适应调节算法调节第二滤波器获得的,所述第一滤波器包括一个或多个二阶无限长脉冲响应滤波器,所述第二滤波器是有限长脉冲响应滤波器。
在一些实施例中,所述无线通信模块160还用于向所述耳机发送所述滤波参数。
图3所示的各模块间的连接关系只是示意性说明,并不构成对电子设备200的各模块间的连接关系的限定。可选地,电子设备200的各模块也可以采用上述实施例中多种连接方式的组合。
电子设备200可以通过GPU、显示屏194以及应用处理器实现显示功能。GPU为图像处理的微处理器,连接显示屏194和应用处理器。GPU用于执行数学和几何计算,用于图形渲染。处理器110可包括一个或多个GPU,其执行程序指令以生成或改变显示信息。
显示屏194可以用于显示图像或视频。显示屏194包括显示面板。显示面板可以采用液晶显示屏(liquid crystal display,LCD)、有机发光二极管(organic light-emitting diode,OLED)、有源矩阵有机发光二极体(active-matrix organic light-emitting diode,AMOLED)、柔性发光二极管(flex light-emitting diode,FLED)、迷你发光二极管(mini light-emitting diode,Mini LED)、微型发光二极管(micro light-emitting diode,Micro LED)、微型OLED(Micro OLED)或量子点发光二极管(quantum dotlight emitting diodes,QLED)。在一些实施例中,电子设备200可以包括1个或N个显示屏194,N为大于1的正整数。
在一些实施例中,显示屏194用于显示第一界面,所述第一界面用于设置所述耳机的功能,所述第一界面包括调节档位的控件。
在一些实施例中,在检测到对调节档位的控件的操作时,显示屏194还用于显示第二界面,所述第二界面中包括调节档位的选项。所述调节档位用于调整耳机的降噪速度,所述调节档位是根据第一滤波器的步长与第二滤波器的步长确定的。
电子设备200可以通过ISP、摄像头193、视频编解码器、GPU、显示屏194以及应用处理器等实现拍摄功能。
ISP用于处理摄像头193反馈的数据。例如,拍照时,打开快门,光线通过镜头被传递到摄像头感光元件上,光信号转换为电信号,摄像头感光元件将所述电信号传递给ISP处理,转化为肉眼可见的图像。ISP可以对图像的噪点、亮度和色彩进行算法优化,ISP还可以优化拍摄场景的曝光和色温等参数。在一些实施例中,ISP可以设置在摄像头193中。
摄像头193用于捕获静态图像或视频。物体通过镜头生成光学图像投射到感光元件。感光元件可以是电荷耦合器件(charge coupled device,CCD)或互补金属氧化物半导体(complementary metal-oxide-semiconductor,CMOS)光电晶体管。感光元件把光信号转换成电信号,之后将电信号传递给ISP转换成数字图像信号。ISP将数字图像信号输出到DSP加工处理。DSP将数字图像信号转换成标准的红绿蓝(red green blue,RGB),YUV等格式的图像信号。在一些实施例中,电子设备200可以包括1个或N个摄像头193,N为大于1的正整数。
数字信号处理器用于处理数字信号,除了可以处理数字图像信号,还可以处理其他数字信号。例如,当电子设备200在频点选择时,数字信号处理器用于对频点能量进行傅里叶变换等。
电子设备200可以通过音频模块170、扬声器170A、受话器170B、麦克风170C、耳机接口170D以及应用处理器等实现音频功能,例如,音乐播放和录音。
音频模块170用于将数字音频信息转换成模拟音频信号输出,也可以用于将模拟音频输入转换为数字音频信号。音频模块170还可以用于对音频信号编码和解码。在一些实施例中,音频模块170或者音频模块170的部分功能模块可以设置于处理器110中。
扬声器170A,也称为喇叭,用于将音频电信号转换为声音信号。电子设备200可以通过扬声器170A收听音乐或免提通话。
受话器170B,也称为听筒,用于将音频电信号转换成声音信号。当用户使用电子设备200接听电话或语音信息时,可以通过将受话器170B靠近耳朵接听语音。
麦克风170C,也称为话筒或传声器,用于将声音信号转换为电信号。当用户拨打电话或发送语音信息时,可以通过靠近麦克风170C发声将声音信号输入麦克风170C。
耳机接口170D用于连接有线耳机。耳机接口170D可以是USB接口130,也可以是3.5mm的开放移动电子设备200平台(open mobile terminal platform,OMTP)标准接口,美国蜂窝电信工业协会(cellular telecommunications industry association of theUSA,CTIA)标准接口。
按键190包括开机键和音量键。按键190可以是机械按键,也可以是触摸式按键。电子设备200可以接收按键输入信号,实现于案件输入信号相关的功能。
马达191可以产生振动。马达191可以用于来电提示,也可以用于触摸反馈。马达191可以对作用于不同应用程序的触摸操作产生不同的振动反馈效果。对于作用于显示屏194的不同区域的触摸操作,马达191也可产生不同的振动反馈效果。不同的应用场景(例如,时间提醒、接收信息、闹钟和游戏)可以对应不同的振动反馈效果。触摸振动反馈效果还可以支持自定义。
上文详细描述了电子设备200的硬件系统,下面介绍电子设备200的软件系统。软件系统可以采用分层架构、事件驱动架构、微核架构、微服务架构或云架构,本申请实施例以分层架构为例,示例性地描述电子设备200的软件系统。
如图4所示,采用分层架构的软件系统分成若干个层,每一层都有清晰的角色和分工。层与层之间通过软件接口通信。在一些实施例中,软件系统可以分为四层,从上至下分别为应用程序层、应用程序框架层、安卓运行时(Android Runtime)和系统库、以及内核层。
应用程序层可以包括相机、图库、日历、通话、地图、导航、WLAN、蓝牙、音乐、视频、短信息等应用程序。
应用程序框架层为应用程序层的应用程序提供应用程序编程接口(applicationprogramming interface,API)和编程框架。应用程序框架层可以包括一些预定义的函数。
例如,应用程序框架层包括窗口管理器、内容提供器、视图系统、电话管理器、资源管理器和通知管理器。
窗口管理器用于管理窗口程序。窗口管理器可以获取显示屏大小,判断是否有状态栏、锁定屏幕和截取屏幕。
内容提供器用来存放和获取数据,并使这些数据可以被应用程序访问。所述数据可以包括视频、图像、音频、拨打和接听的电话、浏览历史和书签、以及电话簿。
视图系统包括可视控件,例如显示文字的控件和显示图片的控件。视图系统可用于构建应用程序。显示界面可以由一个或多个视图组成,例如,包括短信通知图标的显示界面,可以包括显示文字的视图以及显示图片的视图。
电话管理器用于提供电子设备200的通信功能,例如通话状态(接通或挂断)的管理。
资源管理器为应用程序提供各种资源,比如本地化字符串、图标、图片、布局文件和视频文件。
通知管理器使应用程序可以在状态栏中显示通知信息,可以用于传达告知类型的消息,可以短暂停留后自动消失,无需用户交互。比如通知管理器被用于下载完成告知和消息提醒。通知管理器还可以管理以图表或者滚动条文本形式出现在系统顶部状态栏的通知,例如后台运行的应用程序的通知。通知管理器还可以管理以对话窗口形式出现在屏幕上的通知,例如在状态栏提示文本信息、发出提示音、电子设备振动以及指示灯闪烁。
Android Runtime包括核心库和虚拟机。Android runtime负责安卓系统的调度和管理。
核心库包含两部分:一部分是java语言需要调用的功能函数,另一部分是安卓的核心库。
应用程序层和应用程序框架层运行在虚拟机中。虚拟机将应用程序层和应用程序框架层的java文件执行为二进制文件。虚拟机用于执行对象生命周期的管理、堆栈管理、线程管理、安全和异常的管理、以及垃圾回收等功能。
系统库可以包括多个功能模块,例如:表面管理器(surface manager),媒体库(Media Libraries),三维图形处理库(例如:针对嵌入式系统的开放图形库(opengraphics library for embedded systems,OpenGL ES)和2D图形引擎(例如:skia图形库(skia graphics library,SGL))。
表面管理器用于对显示子系统进行管理,并且为多个应用程序提供了2D图层和3D图层的融合。
媒体库支持多种音频格式的回放和录制、多种视频格式回放和录制以及静态图像文件。媒体库可以支持多种音视频编码格式,例如:MPEG4、H.264、动态图像专家组音频层面3(moving picture experts group audio layer III,MP3)、高级音频编码(advancedaudio coding,AAC)、自适应多码率(adaptive multi-rate,AMR)、联合图像专家组(jointphotographic experts group,JPG)和便携式网络图形(portable network graphics,PNG)。
三维图形处理库可以用于实现三维图形绘图、图像渲染、合成和图层处理。
二维图形引擎是2D绘图的绘图引擎。
内核层是硬件和软件之间的层。内核层可以包括显示驱动、摄像头驱动、音频驱动和传感器驱动等驱动模块。
需要说明的是,上述仅是以图3对电子设备的结构进行举例说明,以图4对电子设备的软件架构进行举例说明,本申请实施例对此不作具体限定。
在图1的场景中,在用户调整耳机的佩戴姿势后,需要针对调整后的耳道情况重新调整降噪参数。
另外,随着外界环境发生变化,外部噪声也会影响耳机的用户体验。在外界噪声变化时,也会存在根据当前环境自适应调整降噪参数的需求。但是目前通常是预设几组固定的降噪参数供选择,无法基于实际情况动态调整降噪参数。
有鉴于此,本申请实施例提供了一种声音降噪的方法,通过自适应调整降噪参数,能够结合当前的耳道情况或外界噪声的不同频谱特性动态调整降噪参数,提升用户的降噪体验,增强用户的听感。
以下结合图5-图10详细描述本申请实施例的声音降噪的方法。
参考图5,图5示出了本申请实施例的声音降噪的方法的示意性流程图。可以理解,图5中的方法可适用于耳机中,比如应用于图1所示的场景中的耳机100。图5中的方法包括以下步骤:
步骤501,耳机佩戴或者进入主动降噪ANC模式(或ANC功能)。
ANC模式是指耳机的一种降噪模式。当打开或切换至ANC模式后,可以有效降低外界关键的噪音,使得用户免受外界环境音干扰。比如,在地铁等比较嘈杂的环境中,开启ANC模式可有效提升用户的主动降噪体验。
本申请实施例对耳机的ANC模式的入口不作限定。比如,对于具备ANC模式的耳机,ANC模式可以默认一直开启,在耳机运行后,ANC模式可以一直自动运行。又比如,用户可以自主选择何时开启ANC模式或者切换到ANC模式。
作为一种实现方式,可以检测耳机是否已入耳(即佩戴到耳道中);在检测到耳机已入耳的情况下,如果耳机支持ANC模式,则耳机工作于ANC模式。
作为一种实现方式,可以向耳机发送第一指令(相应的,耳机接收第一指令),所述第一指令用于控制所述耳机工作于ANC模式。本申请实施例对第一指令的形式不作具体限定。
一种实现方式,第一指令是电子设备发送给耳机的指令,用于指示耳机打开或切换至ANC模式。
又一种实现方式,第一指令是用户通过操作耳机发出的指令,以便控制耳机打开或切换至ANC模式。例如,耳机具有开启ANC模式的按钮或按键,用户佩戴耳机后按下开启ANC模式的按键(即第一指令),耳机进入ANC模式。
步骤502,对耳道情况进行初步识别。
当耳机在佩戴或切换为ANC模式时,会播放相应的提示音对耳道情况(或者说耳道的信息)进行初步识别。
作为一种可能的实现方式,当用户佩戴耳机后,耳机会发出佩戴提示音,判断用户是否佩戴好耳机以及识别当前的耳道情况。
作为一种可能的实现方式,当用户佩戴耳机后,耳机自动开启主动降噪模式,并播放ANC提示音,进行耳道初步识别。
一般而言,耳机的主动降噪的参数是预先设定好的,通常会预先设定多组参数,不同的耳道情况设定有对应的默认降噪参数,比如深度降噪、轻度降噪以及风噪状态分别对应固定的降噪参数。对耳道情况进行初步识别的目的在于识别当前耳道情况。在识别到当前耳道情况后,可以获得该耳道情况默认的降噪参数。
步骤503,利用默认的降噪参数进行降噪。
默认的降噪参数即预先设定的一组降噪参数。使用当前耳道情况默认的降噪参数可以进行初步降噪。默认的降噪参数可以理解为初始化的一组降噪参数。
可选地,步骤504,判断是否存在异常噪声。
可选地,异常噪声包括风噪和/或啸叫。
啸叫是指由于声源与扩音设备之间因距离过近等问题导致能力发生自激而产生的噪声。啸叫是一种回授音。
风噪是由于耳机表面的气流处于湍急状态,导致耳机的麦克风附近的空气湍流而产生的。
一种实现方式,可以使用风噪检测方法(比如相关性方法)对音频信号进行风噪识别。
一种实现方式,可以使用陷波器算法对音频信号进行啸叫识别。比如,可以利用现有啸叫检测模型对音频信号进行检测,以获得啸叫属性。
如果检测到风噪和啸叫,可以使用预设降噪参数(比如,耳机中预先设定有一组针对风噪状态对应的降噪参数)对风噪和啸叫等异常环境噪声进行降噪处理。
如果检测到不存在风噪和啸叫,则执行步骤505。
本申请实施例在判断不存在风噪和啸叫等异常环境噪声时,才基于自适应滤波参数进行降噪,以便减少风噪和啸叫对参数调整的影响。
步骤505,基于自适应滤波参数进行降噪,所述自适应滤波参数是自动调节的。
如果存在步骤502-503,则可以将耳道情况默认的一组降噪参数作为初始降噪参数,再利用该初始降噪参数采用本申请实施例的降噪方法进行迭代优化,获得自适应滤波参数,这样迭代优化的效率会更高。当然,也可以不需要步骤502-503,即直接根据自动调节的自适应滤波参数进行降噪,以达到降噪效果。换句话说,步骤502-503可以是可选步骤。
在本申请实施例中,可以通过自适应滤波参数进行降噪,且自适应滤波参数是自动调节的。
步骤505中的自适应滤波参数是自动调节获得的。以下结合图6详细描述自适应滤波参数的确定过程。
步骤506,播放经过降噪处理后的声音信号。
例如,通过图1中的扬声器104播放经过降噪处理后的声音信号。
从用户的听觉来讲,扬声器播放的经过降噪处理后的声音信号,几乎可以抵消用户佩戴耳机时原本能听到的环境噪声。即使用户在佩戴耳机中调整了耳机的佩戴姿势,也能获得较好的听感。
图6是根据本申请实施例的声音降噪的方法的另一示意性流程图。应理解,图6中的方法可以与图5中的方法组合使用,也可以独立使用,本申请实施例对此不作具体限定。如图6所示,所述方法包括以下步骤:
步骤601,通过第一麦克风采集参考信号,所述参考信号用于表征当前外部环境的声音。
第一麦克风用于采集参考信号。示例性地,第一麦克风可以是前文提到的参考麦克风,亦称作FF麦克风。
步骤602,通过第二麦克风采集误差信号,所述误差信号用于表征佩戴耳机的用户耳道内部环境的声音。
示例性地,第二麦克风可以是前文提到的误差麦克风,亦可称作FB麦克风。
所述误差信号用于表征佩戴耳机的用户耳道内部环境的声音,具体可以理解为:在用户的耳朵佩戴上耳机之后,可以耳机可能播放的声音、耳机采用的降噪算法(比如耳机的初始降噪,或者本申请实施例的自适应降噪算法)、人体耳朵环境等因素对环境声音的综合声音感知。
一种实现方式,第二麦克风用于采集经过耳机降噪处理后的噪声残差信号(即佩戴耳机后靠近耳朵鼓膜处的声音信号)。
为便于理解所述误差信号的定义,以下结合示例进行描述。
示例性地,假设耳机播放音频但未启动降噪算法,那么所述误差信号可以理解为:第二麦克风采集到的环境声音结合耳机麦克风播放声音以及人体耳朵环境的综合声音体现。
示例性地,假设耳机播放音频且启动降噪算法,那么所述误差信号可以理解为:第二麦克风采集到的环境声音结合耳机麦克风播放经过降噪算法处理后的声音以及人体耳朵环境的综合声音体现。
示例性地,假设耳机未播放音频且未启动降噪算法,那么所述误差信号可以理解为:第二麦克风采集到的环境声音结合人体耳朵环境的综合声音体现。
应理解,上述关于误差信号的示例只是示例性描述,本申请实施例并不限于此。
还应理解,参考信号和误差信号具体的信号分量与环境相关,受到的影响因素较多,因此难以用量化概念详细描述,但是对于本领域技术人员而言,参考信号与误差信号是清楚的概念。
还应理解,参考信号与误差信号的术语只是示例性描述,但不排除未来可以命名为其他术语或名称的可能。当然,无论术语的命名如何变更,其信号的本质应符合上述关于参考信号与误差信号的解释。
步骤603,获取滤波参数,所述滤波参数是根据所述参考信号和所述误差信号确定的。所述滤波参数包括第一滤波参数和第二滤波参数。其中,所述第一滤波参数是通过自适应调节算法调节所述第一滤波器获得的,所述第二滤波参数通过自适应调节算法调节所述第二滤波器获得的。所述第一滤波器包括一个或多个二阶无限长脉冲响应(infiniteimpulse response,IIR)滤波器,所述第二滤波器是有限长脉冲响应(finite impulseresponse,FIR)滤波器。
在一种实现方式中,通过对采集到的参考信号和误差信号进行分析,然后基于自适应调节算法对滤波器(包括第一滤波器和第二滤波器)进行自动调节,将算法收敛后得到的参数作为滤波参数。
本申请实施例对第一滤波器所包含的二阶IIR滤波器的个数不作限定。第一滤波器可以由一个或多个级联的二阶IIR滤波器组成。
一种实现方式,通过采用自动调节算法对第一滤波器进行自动调节,在第一滤波器收敛后可以得到第一滤波参数。
示例性地,IIR滤波器的传递函数可表示为该传递函数中的系数a1、a2、b0、b1、b2可作为第一滤波参数。第一滤波器包括多个级联的IIR滤波器,则第一滤波参数包括多组滤波参数,每组滤波参数可以由a1、a2、b0、b1、b2这5个参数组成。
本申请实施例对调节第一滤波器的更新算法不作具体限定。比如,可以采用聚类(affinity propagation,AP)算法、递归最小二乘法(recursive least squares,RLS)、梯度下降法或高斯-牛顿法等自适应调节算法,对第一滤波器的滤波参数进行更新。应理解,此处列举的自适应调节算法只是示例性说明,本申请实施例并不限于此。
在滤波参数更新完后,可以对第一滤波器的稳定性进行判断。本申请实施例对第一滤波器的稳定性的判断方式不作限定。比如,可以采用奈奎斯特法判定稳定性。
本申请实施例对第二滤波器的长度不作限定。第二滤波器可以由不限制长度的FIR滤波器组成。FIR滤波器可以是时域滤波器或频率滤波器,本申请对此不作具体限定。示例性地,第二滤波器可由w0(k),w1(k),…,wN(k)组成。N表示第二滤波器的长度。第二滤波参数包括w0(k),w1(k),…,wN(k)中每个w(k)的参数。
一种实现方式,通过采用自动调节算法对第二滤波器进行自动调节,在第二滤波器收敛后可以得到第二滤波参数。
本申请实施例对调节第二滤波器的更新算法不作具体限定。比如,可以采用聚类AP算法、递归最小二乘法RLS、最小均方根算法(least mean square,LMS)等自适应调节算法,对第二滤波器的滤波参数进行更新。应理解,此处列举的自适应调节算法只是示例性说明,本申请实施例并不限于此。
需要说明的是,在本申请实施例中,第一滤波器和第二滤波器之间不需要互相转换。换句话说,本申请实施例是针对第一滤波器和第二滤波器分别进行计算的,即基于自适应调节算法进行第一滤波器的调节,得到第一滤波参数,以及,基于自适应调节算法进行第二滤波器的调节,得到第二滤波参数;在得到第一滤波参数和第二滤波参数后,再利用第一滤波参数和第二滤波参数共同实现降噪滤波。
可选地,作为一种实现方式,所述方法还包括:向电子设备发送所述参考信号和所述误差信号;其中,步骤603包括:接收电子设备发送的所述滤波参数。
也就是说,本申请实施例提及的滤波参数的确定过程可以在耳机侧完成,也可以在与耳机建立连接的电子设备侧完成,对此不作具体限定。
作为一种实现方式,耳机在获得参考信号和误差信号后,可以将参考信号和误差信号发送给电子设备。电子设备在获得参考信号和误差信号,根据所述参考信号和所述误差信号确定滤波参数;并将滤波参数发送给耳机。
也就是说,在耳机与电子设备支持数据传输时(或者说已经建立通信连接),耳机可以将相关的数据或信号发送到电子设备上,由电子设备进行数据处理,具体即根据所述参考信号和所述误差信号计算滤波参数。电子设备再将计算好的滤波参数发送到耳机,由耳机基于滤波参数进行降噪。
需要说明的是,电子设备确定滤波参数的过程与耳机确定滤波参数的过程类似,本质都在于基于参考信号和误差信号,通过自适应调节算法调节第一滤波器和第二滤波器,不同之处在于电子设备确定滤波参数时需要先从耳机处获得参考信号和误差信号。
在向电子设备发送参考信号和误差信号时,耳机也可以将其他与耳机工作时相关的信息发送给电子设备,以辅助电子设备确定滤波参数。
可选地,作为一种实现方式,所述方法还包括:
接收耳机发送的其他耳机工作时的相关信息。
其中,耳机工作时的相关信息包括但不限于以下中的一项或多项:工作模式、风噪情况、用户耳道情况、用户佩戴时的泄露情况等。
工作模式指耳机当前工作于哪种模式,比如,ANC模式。
风噪情况指是否存在风噪和和/或啸叫等异常环境噪声。
用户耳道情况指耳机识别出的佩戴耳机的用户耳道大小。
用户佩戴时的泄露情况可以理解为:在佩戴耳机后,由于个体耳道的差异、佩戴姿势不同或耳机自身的结构等因素,导致的不同程度的声音外泄或者泄露的情况。用户佩戴时的泄露情况也可以指环境噪声在用户耳道中的泄露程度。
也就是说,除了接收耳机发送的参考信号和误差信号外,还可以接收其他耳机工作时的相关信息,以辅助电子设备计算所述滤波参数。
可以理解,上述关于耳机工作时的相关信息的描述仅是示例性描述,本申请实施例并不限于此。
步骤604,利用所述滤波参数进行声音降噪。
利用滤波参数进行声音降噪是指:利用第一滤波参数和第二滤波参数共同对音频信号进行降噪处理。经过第一滤波参数和第二滤波参数进行降噪后的声音信号,声音质量得到显著提升。
在本申请实施例中,通过获取参考信号以及误差信号,然后对参考信号和误差信号进行分析,使用自适应算法调节滤波器(包括第一滤波器和第二滤波器),确定滤波参数,并利用滤波参数进行降噪。相比于现有技术中需要播放提示音识别耳道情况的技术,本申请实施例的声音降噪方法不需要播放校准音频,就可以动态识别出耳道情况,并基于当前耳道情况进行滤波参数的自适应调整,提升主动降噪的体验。一方面,在用户调整耳机的佩戴姿势(如图1中所示的场景)后,本申请实施例的声音降噪方法针对调整佩戴姿势后的耳道情况进行分析,对滤波参数进行自适应调整,然后基于得到的滤波参数进行降噪,能够为用户提供最佳的降噪体验。另一方面,即使外界噪声发生变化,针对不同的频谱特性,采用本申请实施例的方法同样能够实现滤波参数的动态调整,极大提升了用户的听感体验。
为便于理解,以下结合图7进行描述本申请实施例的降噪原理。
参考图7,图7中示出了耳机自适应降噪系统的原理框图。可以理解,图7中涉及的耳机可以适用于图1或图2中的应用场景。图7中的耳机包括参考麦克风101、误差麦克风102、通话麦克风103以及扬声器104。应理解,图7中的耳机仅是简化示意结构,本申请实施例并不限于此。还应理解,图7中的耳机的结构描述可以参考图1处的介绍,为了简洁,此处不再赘述。
如图7所示,耳机可通过参考麦克风101采集参考信号x(n),通过误差麦克风102采集误差信号e(n),然后将参考信号x(n)和误差信号e(n)输入到自适应降噪系统进行分析。系统稳定后输出的抗干扰信号y(n)是可以获取的,可通过扬声器104进行播放。
具体地,在参数更新过程中,采集的参考信号x(n)通过处理,得到x′(n);x′(n)和误差信号e(n)输入到自适应调节算法更新参数,调节滤波器W输出抗干扰信号y(n),抗干扰信号y(n)通过次级通道传递函数S处理,得到y′(n),y′(n)与干扰信号d(n)进行做加运算。其中,S具体是指从扬声器104到降噪点(或者说人耳靠近鼓膜处,或者说误差麦克风102处)的传递函数。是对S的粗略估计,也可称作次级通道模型。在滤波器参数更新过程中,可以使用估计真实的物理通路S。通过自适应调节算法不断调整滤波器W的参数(或者说系数)来削减残差,直到滤波器W收敛。本领域技术人员基于图7中的原理图可以设计耳机降噪系统。
需要说明的是,图7中的滤波器W包括第一滤波器(此处记作W1)和第二滤波器(此处记作W2)。也就是说,不论是W1还是W2,其滤波器参数的更新均适用图7中的自适应降噪系统,即均是基于参考信号和误差信号进行分析,利用自适应调节算法对滤波器调整,以获得滤波器收敛后的参数。
示例性地,W1由多个级联的IIR滤波器组成。对于W1的参数更新过程,y(n)采用以下计算公式计算:y(n)=x(n)*h(n),其中,h(n)为多个IIR滤波器级联的滤波器函数。
其中,x(n)经过离散化可以表示为x(k)。y(n)经过离散化可以表示为y(k)。d(n)经过离散化可以表示为d(k)。误差信号e(n)经过离散化可以表示为e(k)。e(k)理论上可表示为:e(k)=d(k)+y(k)*s(k)。此处的s(k)即为上文的次级通道传递函数S,其解释可以参考上文的描述。
示例性地,IIR滤波器差分方程可以表示为如下公式:
其中,y(k)表示输出序列,x(k)表示输入序列,aj,bj表示滤波器系数,N表示滤波器的阶数,M表示滤波器的阶数。在本申请实施例中,M=N=2,即均为二阶IIR滤波器。
举例来说,可以将y(k)换种方式表示:
y(k)=θT(k)φ′(k)
θ(k)=[-a1(k)-a2(k)...-aN(k)b0(k)b1(k)...bM(k)]T
φ(k)=[y(k-1)y(k-2)...y(k-N)x(k)x(k-1)...x(k-M)]T
应理解,以上关于IIR滤波器的表示方式只是示例性描述,并不对本申请实施例构成限定。本领域技术人员可以获知IIR滤波器的其他表示方式。
本申请实施例利用自适应调节算法对IIR滤波器进行调节,以获得IIR滤波器参数。
图8还示出了F个二阶IIR滤波器级联的示意框图。比如,F可以是大于或等于1的整数。图8中示出了每个IIR滤波器的传递函数H的中间推导过程。在图8中,x(k)为输入信号,y(k)为当前输出信号。图8中示出了F个二阶IIR滤波器的传递函数,分别为:HK1(z),…,HKf(z)。图8中还示出了各个滤波器的中间推导过程。
应理解,图8中的推导过程仅是示例描述,本申请实施例并不限于此。
本申请实施例对图8中的F个二阶IIR滤波器的自适应调节算法不作具体限定。假设采用高斯-牛顿法对图8中的F个二阶IIR滤波器进行调节,可采用以下过程更新参数:
e(k)=d(k)-θT(k)φ(k)
其中,μ表示步长。在参数更新过程中,通过调节步长μ可以改变二阶IIR滤波器的收敛速度。在二阶IIR滤波器收敛后,可以获得滤波参数a1、a2、b0、b1、b2。
示例性地,W2由不限制长度的FIR滤波器组成。对于W2的参数更新过程,y(n)采用以下公式计算:y(n)=w(n)*x(n);其中,w(n)是FIR滤波器参数,x(n)是采集的参考信号,e(n)是采集的误差信号。
图9示出了FIR滤波器的推导过程的一个示意框图。在图9中,FIR滤波器由w0(k),w1(k),…,wN(k)组成。w0(k),w1(k),…,wN(k)分别由图9中所示的加法器、乘法器以及延迟单元连接获取。x(k)为输入信号,y(k)为输出信号,d(k)为干扰信号(或者说期望输出),e(k)表示误差信号。
应理解,图9中示出的推导过程仅是示例描述,本申请实施例并不限于此。
本申请实施例对图9中的FIR滤波器的自适应调节算法不作具体限定。假设采用LMS算法对图9中的FIR滤波器进行调节,可采用以下公式更新参数:
e(k)=d(k)+wT(k)*x(k)
w(k+1)=w(k)-μ*e(k)*r(k)
其中,r(k)=x(k)*s(k),此处的s(k)即为上文的次级通道传递函数S,其解释可以参考上文的描述。μ表示滤波器的步长。在参数更新过程中,通过调节步长μ可以改变FIR滤波器的收敛速度。
应理解,以上关于LMS算法的表示方式只是示例性描述,并不对本申请实施例构成限定。本领域技术人员可以获知LMS算法的其他表达公式。
因此,基于上述两部分滤波器,通过自适应调节算法调节滤波器,以获得滤波参数,基于滤波参数可以实现自适应降噪。
在本申请实施例中,每个滤波器的收敛速度可以通过调节滤波器的步长进行调整。可选地,滤波器的步长(包括第一滤波器的步长以及第二滤波器的步长)可以设定默认值,该默认值在异常场景(比如风噪、啸叫等)中进行改变。示例性地,在风噪、啸叫等异常场景中,第一滤波器的步长与第二滤波器的步长的取值可以修改为0,即不更新滤波器的参数。这是因为,在风噪、啸叫等异常场景中,通常滤波器参数或者滤波器的整体增益会进行人为强制修改,因此对滤波器参数进行更新是没有意义的。
应理解,第一滤波器和第二滤波器在收敛后对应有各自的步长值,本申请实施例第一滤波器的步长的取值和第二滤波器的步长的取值是否相同不作具体限定。
可选地,本申请实施例基于滤波器的步长,还提供了供用户选择耳机的降噪速度的调节档位(或者说调节等级)。滤波器的步长值可以影响滤波器收敛的速度。调节档位是基于滤波器的步长值确定的。调节档位可以包括多个档位,每个档位对应的调节速度不同。比如,用户通过耳机应用(application,APP)或耳机设置选择耳机的调节档位,从而可以选择更快速或者更平稳的模式进行适配,以便满足用户的调节需求。
可选地,作为一种实现方式,所述方法还包括:根据第一滤波器的步长和第二滤波器的步长,确定不同的调节档位。
示例性地,可以参照以下表格确定不同的档位:
表1
档位 | 第一滤波器的步长 | 第二滤波器的步长 |
快 | 取值A | 取值B |
中 | 取值C | 取值D |
慢 | 取值E | 取值F |
在表1中,每个档位对应不同的步长值。比如,如果用户选择快档位,那么第一滤波器的步长取值A,第二滤波器的步长取值B。
应理解,上述表1中只是示出了设置三个档位的示例说明,但是本申请实施例并不限于此。比如,可以基于步长值设置更多的调节档位供用户选择。
上述调节档位对应的步长值可以是耳机确定的,也可以是与耳机建立通信连接的电子设备确定的。
一种实现方式,如果滤波参数是耳机确定的,则调节档位对应的步长值是耳机确定的。耳机可以将调节档位以及调节档位对应的步长值发送给电子设备,以便电子设备呈现调节档位的界面。
另一种实现方式,如果滤波参数是电子设备确定的,则调节档位对应的步长值,是电子设备基于所述第一滤波器的步长与所述第二滤波器的步长确定的。
用户为耳机选择调节档位可以在电子设备侧实现。该电子设备(比如图2中的电子设备200)与耳机建立通信连接。作为一种可能的实现方式,电子设备可以提供耳机设置的界面,供用户选择调节档位。示例性地,调节档位可以是用户通过APP控制界面进行人工设置,然后通过无线通信链路(比如蓝牙模块)发送给耳机,以使耳机基于相应的调节档位进行滤波器调整。
可选地,电子设备包括显示单元,所述显示单元用于显示第一界面,第一界面用于设置耳机的功能,所述第一界面包括调节档位的控件;检测到对所述调节档位的控件的操作(比如,用户点击图10中(1)的选项902);响应于对所述调节档位的控件的操作,所述显示单元用于显示第二界面,所述第二界面中包括调节档位的选项。当用户选择调节档位的选项后,可以变更耳机的调节速度。
图10提供了本申请实施例的调节档位的一个界面示例图。假设耳机已与手机建立通信连接,用户可以在手机端进入耳机的设置界面901(对应第一界面)。如图10中(1)的界面示例,在耳机设置列表中,可以增加“调节档位”的选项902(或者说是调节档位的控件)。用户在点击“调节档位”的选项902后,手机进入图10中(2)所示的界面,或者,进入图10中(3)所示的界面。
如图10中(2)所示,界面中显示有档位盘903,该档位盘903可以包含多个档位,比如,N个档位。每个档位分别对应一组步长值,每组步长值由第一滤波器的步长和第二滤波器的步长组成。用户通过滑动旋钮904,可以选择不同的档位。
可以理解,图10中(2)所示的档位可以圆盘形式显示,也可以以条状形态显示,也可以通过其他形态显示,本申请实施例对此不作限定。
还可以理解,图10中(2)所示的各个档位之间的间隔可以是相同的,也可以是不同的。或者说,档位盘903上分布的多个档位可以是不均匀分布的。
还可以理解,本申请实施例对如何进入耳机的设置界面901(或者说第一界面)的入口不作限定。比如,可以通过耳机应用APP进入耳机的设置界面901。又比如,可以通过手机自带的设置功能进入耳机的设置界面901。
如图10中(3)所述,界面中示出的快、中、慢三个档位选项。每个档位选项分别对应一组步长值,每组步长值由第一滤波器的步长和第二滤波器的步长组成。如果用户选择快档位,那么会快速适配自适应滤波参数,达到快速降噪的目的。如果用户选择中档位,那么会平稳适配自适应滤波参数。如果用户选择慢档位,那么会稳健适配自适应滤波参数,能够节省计算功耗。可以理解,快、中、慢三个档位选项也可以替换为其他代表降噪速度的等级索引,表现形式可以是数字符号或图形,图10中(3)示出的文字仅是便于理解,本申请实施例并不限于此。
因此,通过设置调节档位,可以使得用户按照选取选择调节速度,给用户提供更丰富的选择。
可以理解,图10中的示例只是便于本领域技术人员进行理解,并不对本申请实施例的保护范围构成限定。
上文结合图1至图10,详细描述了本申请实施例提供的一种声音降噪的方法。下面将结合图11和图12详细描述本申请的装置实施例。
应理解,本申请实施例的声音降噪的装置可以执行前述本申请实施例的各种声音的方法的实施例,即以下各种产品的具体工作过程,可以参考前述方法实施例中的对应过程。
图11是本申请实施例的声音降噪的装置1100的一个示意性框图。如图11所示,该装置1100包括:第一麦克风1101,第二麦克风1102,处理单元1103。可选地,所述装置1100还包括通信单元1104。
应理解,装置1100可以执行图5至图9的声音降噪的方法。在一种可能的示例中,装置1100可以是耳机。
在一种可能的示例中,所述第一麦克风1101用于采集参考信号,所述参考信号用于表征当前外部环境的声音;
所述第二麦克风1102用于采集误差信号,所述误差信号用于表征佩戴耳机的用户耳道内部环境的声音;
所述处理单元1103用于获取滤波参数,所述滤波参数是根据所述参考信号和所述误差信号确定的,所述滤波参数包括第一滤波参数和第二滤波参数,所述第一滤波参数是通过自适应调节算法调节第一滤波器获得的,所述第二滤波参数通过自适应调节算法调节第二滤波器获得的,所述第一滤波器包括一个或多个二阶无限长脉冲响应滤波器,所述第二滤波器是有限长脉冲响应滤波器;还用于基于所述滤波参数进行声音降噪。
可选地,作为一种可能的实现方式,所述通信单元1104用于向电子设备发送所述参考信号以及所述误差信号;
所述处理单元1103用于获取滤波参数,包括:
通过所述通信单元1104接收来自电子设备的所述滤波参数。
可选地,作为一种可能的实现方式,所述通信单元1104还用于向电子设备发送其他耳机工作时的相关信息,其中,耳机工作时的相关信息包括但不限于以下中的一项或多项:工作模式、风噪情况、用户耳道情况、用户佩戴时的泄露情况。
可选地,作为一种可能的实现方式,所述第一滤波参数是通过聚类算法AP、递归最小二乘法RLS、梯度下降算法或高斯牛顿法调节所述第一滤波器获得的;和/或,
所述第二滤波参数是通过最小均方根算法LMS、聚类算法AP或递归最小二乘法RLS调节所述第二滤波器获得的。
可选地,作为一种可能的实现方式,所述处理单元1103还用于在获取所述滤波参数之前,检测是否存在异常噪声,所述异常噪声包括风噪和/或啸叫;在不存在所述异常噪声时,获取所述滤波参数。
可选地,作为一种可能的实现方式,所述处理单元1103还用于在存在所述异常噪声时,使用预设降噪参数进行降噪处理。
可选地,作为一种可能的实现方式,所述处理单元1103还用于根据所述第一滤波器的步长与所述第二滤波器的步长,确定调节档位,所述调节档位用于调整耳机的降噪速度。
可选地,作为一种可能的实现方式,所述处理单元1103还用于检测所述耳机是否已入耳;在检测到所述耳机已入耳的情况下,控制所述装置1100工作于主动降噪ANC模式;或者,
通过所述通信单元1104接收第一指令,所述第一指令用于控制所述耳机工作于ANC模式。
应理解,上述装置1100以功能单元的形式体现。这里的术语“单元”可以通过软件和/或硬件的形式实现,本申请实施例对此不作具体限定。
例如,“单元”可以是实现上述功能的软件程序、硬件电路或者二者结合。所述硬件电路可能包括(applicationspecificintegratedcircuit,ASIC)应用特定集成电路、电子电路、执行一个或多个软件或固件程序的处理器(例如共享处理器、专有处理器或组处理器等)和存储器、集成逻辑电路,和/或其他可以提供上述功能的合适器件。在一个简单的实施例中,本领域的技术人员可以想到装置1100可以采用图1所示的耳机100的形式。比如,第一麦克风1101可以是图1中耳机100的参考麦克风101;第二麦克风1102可以是图1中耳机100的误差麦克风102;处理单元1103可以是图1中耳机100的处理器105;通信单元1104可以是耳机100中的无线通信单元。
图12是本申请实施例的声音降噪的装置1200的示意性框图。如图12所示,该装置1200包括:显示单元1201,以及,处理单元1202。可选地,所述装置1200还包括通信单元1203。
应理解,装置1200可以与装置1100建立通信连接。在建立通信连接后,可以执行本申请实施例的声音降噪的方法。在一种可能的示例中,装置1200可以是电子设备。
在一种可能的示例中,所述显示单元1201用于显示第一界面,所述第一界面用于设置所述耳机的功能,所述第一界面包括调节档位的控件;
所述处理单元1202用于检测到对所述调节档位的控件的操作;
响应于对所述调节档位的控件的操作,调用所述显示单元1201显示第二界面,所述第二界面中包括调节档位的选项。
在一种可能的实现方式中,所述调节档位用于调整耳机的降噪速度,所述调节档位是根据所述第一滤波器的步长与所述第二滤波器的步长确定的。
可选地,作为一种可能的实现方式,所述通信单元1203用于:接收所述耳机发送的参考信号和误差信号;
所述处理单元1202用于根据所述误差信号和所述参考信号确定滤波器参数,所述滤波参数包括第一滤波参数和第二滤波参数,所述第一滤波参数是通过自适应调节算法调节第一滤波器获得的,所述第二滤波参数通过自适应调节算法调节第二滤波器获得的,所述第一滤波器包括一个或多个二阶无限长脉冲响应滤波器,所述第二滤波器是有限长脉冲响应滤波器;
调用所述通信单元1203向所述耳机发送所述滤波参数。
可选地,作为一种可能的实现方式,所述通信单元1203还用于:接收耳机发送的其他耳机工作时的相关信息。
应理解,上述装置1200以功能单元的形式体现。这里的术语“单元”可以通过软件和/或硬件的形式实现,本申请实施例对此不作具体限定。
例如,“单元”可以是实现上述功能的软件程序、硬件电路或者二者结合。所述硬件电路可能包括(applicationspecificintegratedcircuit,ASIC)应用特定集成电路、电子电路、执行一个或多个软件或固件程序的处理器(例如共享处理器、专有处理器或组处理器等)和存储器、集成逻辑电路,和/或其他可以提供上述功能的合适器件。在一个简单的实施例中,本领域的技术人员可以想到装置1200可以采用图4所示的形式。
由上可知,本申请实施例提供的声音降噪的方法,通过获取参考信号以及误差信号,然后对参考信号和误差信号进行分析,使用自适应算法调节滤波器(包括第一滤波器和第二滤波器),确定滤波参数,能够基于当前耳道情况进行滤波参数的自适应调整,提升主动降噪的体验。
本申请还提供了一种计算机程序产品,该计算机程序产品被处理器执行时实现本申请中任一方法实施例所述的方法。
该计算机程序产品可以存储在存储器中,经过预处理、编译、汇编和链接等处理过程最终被转换为能够被处理器执行的可执行目标文件。
本申请还提供了一种计算机可读存储介质,其上存储有计算机程序,该计算机程序被计算机执行时实现本申请中任一方法实施例所述的方法。该计算机程序可以是高级语言程序,也可以是可执行目标程序。
该计算机可读存储介质可以是易失性存储器或非易失性存储器,或者,可以同时包括易失性存储器和非易失性存储器。其中,非易失性存储器可以是只读存储器(read-only memory,ROM)、可编程只读存储器(programmable ROM,PROM)、可擦除可编程只读存储器(erasable PROM,EPROM)、电可擦除可编程只读存储器(electrically EPROM,EEPROM)或闪存。易失性存储器可以是随机存取存储器(random access memory,RAM),其用作外部高速缓存。通过示例性但不是限制性说明,许多形式的RAM可用,例如静态随机存取存储器(static RAM,SRAM)、动态随机存取存储器(dynamic RAM,DRAM)、同步动态随机存取存储器(synchronous DRAM,SDRAM)、双倍数据速率同步动态随机存取存储器(double data rateSDRAM,DDR SDRAM)、增强型同步动态随机存取存储器(enhanced SDRAM,ESDRAM)、同步连接动态随机存取存储器(synchlink DRAM,SLDRAM)和直接内存总线随机存取存储器(directrambus RAM,DR RAM)。
本领域普通技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本申请的范围。
本领域的技术人员可以清楚地了解到,为了描述的方便和简洁,上述描述的装置和设备的具体工作过程以及产生的技术效果,可以参考前述方法实施例中对应的过程和技术效果,在此不再赘述。
在本申请所提供的几个实施例中,应该理解到,所揭露的系统、装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器ROM、随机存取存储器RAM、磁碟或者光盘等各种可以存储程序代码的介质。
应理解,在本申请的各种实施例中,各过程的序号的大小并不意味着执行顺序的先后,各过程的执行顺序应以其功能和内在逻辑确定,而不应对本申请的实施例的实施过程构成任何限定。
本申请实施例中出现的术语(或者说编号)“第一”、“第二”、…等,仅用于描述目的,即只是为了区分不同的对象,比如,不同的“麦克风”等,并不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”、…等的特征可以明示或者隐含地包括一个或者更多个特征。在本申请实施例的描述中,“至少一个(项)”是指一个或多个。“多个”的含义是两个或两个以上。“以下至少一个(项)”或其类似表达,是指这些项中的任意组合,包括单个(项)或复数个(项)的任意组合。
另外,本文中术语“系统”和“网络”在本文中常被可互换使用。本文中的术语“和/或”,仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。另外,本文中字符“/”,一般表示前后关联对象是一种“或”的关系。
例如,本申请实施例中出现的类似于“项目包括如下中至少一种:A,B,以及C”表述的含义,如无特别说明,通常是指该项目可以为如下中任一个:A;B;C;A和B;A和C;B和C;A,B和C;A和A;A,A和A;A,A和B;A,A和C,A,B和B;A,C和C;B和B,B,B和B,B,B和C,C和C;C,C和C,以及其他A,B和C的组合。以上是以A,B和C共3个元素进行举例来说明该项目的可选用条目,当表达为“项目包括如下中至少一种:A,B,……,以及X”时,即表达中具有更多元素时,那么该项目可以适用的条目也可以按照前述规则获得。
总之,以上所述仅为本申请技术方案的较佳实施例而已,并非用于限定本申请的保护范围。凡在本申请的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本申请的保护范围之内。
Claims (12)
1.一种声音降噪的方法,其特征在于,所述方法应用于耳机,所述耳机包括第一麦克风和第二麦克风,所述方法包括:
通过所述第一麦克风采集参考信号,所述参考信号用于表征当前外部环境的声音;
通过所述第二麦克风采集误差信号,所述误差信号用于表征佩戴耳机的用户耳道内部环境的声音;
获取滤波参数,所述滤波参数是根据所述参考信号和所述误差信号确定的,所述滤波参数包括第一滤波参数和第二滤波参数,所述第一滤波参数是通过自适应调节算法调节第一滤波器获得的,所述第二滤波参数通过自适应调节算法调节第二滤波器获得的,所述第一滤波器包括一个或多个二阶无限长脉冲响应滤波器,所述第二滤波器是有限长脉冲响应滤波器;
基于所述滤波参数进行声音降噪。
2.根据权利要求1所述的方法,其特征在于,所述方法还包括:
向电子设备发送所述参考信号以及所述误差信号;
其中,所述获取滤波参数,包括:
接收来自电子设备的所述滤波参数。
3.根据权利要求1或2所述的方法,其特征在于,所述第一滤波参数是通过聚类算法AP、递归最小二乘法RLS、梯度下降算法或高斯牛顿法调节所述第一滤波器获得的;和/或,
所述第二滤波参数是通过最小均方根算法LMS、聚类算法AP或递归最小二乘法RLS调节所述第二滤波器获得的。
4.根据权利要求1至3中任一项所述的方法,其特征在于,在获取所述滤波参数之前,所述方法还包括:
检测是否存在异常噪声,所述异常噪声包括风噪和/或啸叫;
在不存在所述异常噪声时,获取所述滤波参数。
5.根据权利要求4所述的方法,其特征在于,所述方法还包括:
在存在所述异常噪声时,使用预设降噪参数进行降噪处理。
6.根据权利要求1至5中任一项所述的方法,其特征在于,所述方法还包括:
根据所述第一滤波器的步长与所述第二滤波器的步长,确定调节档位,所述调节档位用于调整耳机的降噪速度。
7.根据权利要求1至6中任一项所述的方法,其特征在于,所述方法还包括:
检测所述耳机是否已入耳;在检测到所述耳机已入耳的情况下,所述耳机工作于主动降噪ANC模式;或者,
接收第一指令,所述第一指令用于控制所述耳机工作于ANC模式。
8.一种声音降噪的方法,其特征在于,应用于电子设备,所述电子设备与耳机建立通信连接,所述方法包括:
显示第一界面,所述第一界面用于设置所述耳机的功能,所述第一界面包括调节档位的控件;
检测到对所述调节档位的控件的操作;
响应于对所述调节档位的控件的操作,显示第二界面,所述第二界面中包括调节档位的选项。
9.根据权利要求8所述的方法,其特征在于,所述方法还包括:
接收所述耳机发送的参考信号和误差信号;
根据所述误差信号和所述参考信号确定滤波器参数,所述滤波参数包括第一滤波参数和第二滤波参数,所述第一滤波参数是通过自适应调节算法调节第一滤波器获得的,所述第二滤波参数通过自适应调节算法调节第二滤波器获得的,所述第一滤波器包括一个或多个二阶无限长脉冲响应滤波器,所述第二滤波器是有限长脉冲响应滤波器;
向所述耳机发送所述滤波参数。
10.一种声音降噪的装置,其特征在于,包括处理器和存储器,所述处理器和所述存储器耦合,所述存储器用于存储计算机程序,当所述计算机程序被所述处理器执行时,使得所述装置执行权利要求1至7中任一项所述的方法,或者,使得所述装置执行权利要求8至9中任一项所述的方法。
11.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有计算机程序,当所述计算机程序被处理器执行时,使得所述处理器执行权利要求1至7中任一项所述的方法,或者,使得所述处理器执行权利要求8至9中任一项所述的方法。
12.一种芯片,其特征在于,包括处理器,当所述处理器执行指令时,所述处理器执行如权利要求1至7中任一项所述的方法,或者,所述处理器执行如权利要求8至9中任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210640682.7A CN115206278A (zh) | 2022-06-08 | 2022-06-08 | 一种声音降噪的方法和装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210640682.7A CN115206278A (zh) | 2022-06-08 | 2022-06-08 | 一种声音降噪的方法和装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN115206278A true CN115206278A (zh) | 2022-10-18 |
Family
ID=83575492
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210640682.7A Pending CN115206278A (zh) | 2022-06-08 | 2022-06-08 | 一种声音降噪的方法和装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN115206278A (zh) |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107666637A (zh) * | 2016-07-28 | 2018-02-06 | 骅讯电子企业股份有限公司 | 自调式主动噪声消除方法、系统及耳机装置 |
CN112468918A (zh) * | 2020-11-13 | 2021-03-09 | 北京安声浩朗科技有限公司 | 主动降噪方法、装置、电子设备以及主动降噪耳机 |
CN112562624A (zh) * | 2020-11-30 | 2021-03-26 | 深圳百灵声学有限公司 | 主动降噪滤波器设计方法、降噪方法、系统及电子设备 |
CN113676803A (zh) * | 2020-05-14 | 2021-11-19 | 华为技术有限公司 | 一种主动降噪方法及装置 |
CN113873378A (zh) * | 2020-06-30 | 2021-12-31 | 华为技术有限公司 | 一种耳机噪声处理方法、装置及耳机 |
-
2022
- 2022-06-08 CN CN202210640682.7A patent/CN115206278A/zh active Pending
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107666637A (zh) * | 2016-07-28 | 2018-02-06 | 骅讯电子企业股份有限公司 | 自调式主动噪声消除方法、系统及耳机装置 |
CN113676803A (zh) * | 2020-05-14 | 2021-11-19 | 华为技术有限公司 | 一种主动降噪方法及装置 |
CN113676804A (zh) * | 2020-05-14 | 2021-11-19 | 华为技术有限公司 | 一种主动降噪方法及装置 |
CN113873378A (zh) * | 2020-06-30 | 2021-12-31 | 华为技术有限公司 | 一种耳机噪声处理方法、装置及耳机 |
CN112468918A (zh) * | 2020-11-13 | 2021-03-09 | 北京安声浩朗科技有限公司 | 主动降噪方法、装置、电子设备以及主动降噪耳机 |
CN112562624A (zh) * | 2020-11-30 | 2021-03-26 | 深圳百灵声学有限公司 | 主动降噪滤波器设计方法、降噪方法、系统及电子设备 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN113873378B (zh) | 一种耳机噪声处理方法、装置及耳机 | |
CN113676804B (zh) | 一种主动降噪方法及装置 | |
US20230164475A1 (en) | Mode Control Method and Apparatus, and Terminal Device | |
WO2021083128A1 (zh) | 一种声音处理方法及其装置 | |
CN114727212B (zh) | 音频的处理方法及电子设备 | |
WO2021227696A1 (zh) | 一种主动降噪方法及装置 | |
CN114157945B (zh) | 一种数据处理方法及相关装置 | |
CN113228710B (zh) | 听力装置中的声源分离及相关方法 | |
CN114422935B (zh) | 音频处理方法、终端及计算机可读存储介质 | |
WO2022267468A1 (zh) | 一种声音处理方法及其装置 | |
US20230162718A1 (en) | Echo filtering method, electronic device, and computer-readable storage medium | |
CN116668892B (zh) | 音频信号的处理方法、电子设备及可读存储介质 | |
CN116095595B (zh) | 音频处理方法和装置 | |
CN115623121B (zh) | 一种通话方法、电子设备、芯片系统及存储介质 | |
CN115206278A (zh) | 一种声音降噪的方法和装置 | |
CN114449393A (zh) | 一种声音增强方法、耳机控制方法、装置及耳机 | |
CN116405589B (zh) | 声音处理方法及相关装置 | |
WO2024027259A1 (zh) | 信号处理方法及装置、设备控制方法及装置 | |
CN117153181B (zh) | 语音降噪方法、设备及存储介质 | |
WO2024016229A1 (zh) | 音频处理方法及电子设备 | |
WO2024046416A1 (zh) | 一种音量调节方法、电子设备及系统 | |
WO2024046182A1 (zh) | 一种音频播放方法、系统及相关装置 | |
CN117153181A (zh) | 语音降噪方法、设备及存储介质 | |
CN117692845A (zh) | 声场校准方法、电子设备及系统 | |
CN117676002A (zh) | 音频处理方法及电子设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |