CN104303227B - 通过结合有源噪音消除及感知噪音补偿改善声音重现的感知质量的装置和方法 - Google Patents

通过结合有源噪音消除及感知噪音补偿改善声音重现的感知质量的装置和方法 Download PDF

Info

Publication number
CN104303227B
CN104303227B CN201380017033.0A CN201380017033A CN104303227B CN 104303227 B CN104303227 B CN 104303227B CN 201380017033 A CN201380017033 A CN 201380017033A CN 104303227 B CN104303227 B CN 104303227B
Authority
CN
China
Prior art keywords
noise
signal
microphone
environmental
audio signal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201380017033.0A
Other languages
English (en)
Other versions
CN104303227A (zh
Inventor
克里斯蒂安·乌勒
于尔根·赫勒
安德烈亚斯·沃尔瑟
费利克斯·弗莱施曼
帕特里克·甘普
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fraunhofer Gesellschaft zur Forderung der Angewandten Forschung eV
Original Assignee
Fraunhofer Gesellschaft zur Forderung der Angewandten Forschung eV
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fraunhofer Gesellschaft zur Forderung der Angewandten Forschung eV filed Critical Fraunhofer Gesellschaft zur Forderung der Angewandten Forschung eV
Publication of CN104303227A publication Critical patent/CN104303227A/zh
Application granted granted Critical
Publication of CN104303227B publication Critical patent/CN104303227B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10KSOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
    • G10K11/00Methods or devices for transmitting, conducting or directing sound in general; Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
    • G10K11/16Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
    • G10K11/175Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound
    • G10K11/178Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10KSOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
    • G10K11/00Methods or devices for transmitting, conducting or directing sound in general; Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
    • G10K11/16Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
    • G10K11/175Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound
    • G10K11/178Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase
    • G10K11/1781Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase characterised by the analysis of input or output signals, e.g. frequency range, modes, transfer functions
    • G10K11/17821Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase characterised by the analysis of input or output signals, e.g. frequency range, modes, transfer functions characterised by the analysis of the input signals only
    • G10K11/17823Reference signals, e.g. ambient acoustic environment
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10KSOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
    • G10K11/00Methods or devices for transmitting, conducting or directing sound in general; Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
    • G10K11/16Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
    • G10K11/175Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound
    • G10K11/178Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase
    • G10K11/1783Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase handling or detecting of non-standard events or conditions, e.g. changing operating modes under specific operating conditions
    • G10K11/17837Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase handling or detecting of non-standard events or conditions, e.g. changing operating modes under specific operating conditions by retaining part of the ambient acoustic environment, e.g. speech or alarm signals that the user needs to hear
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10KSOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
    • G10K11/00Methods or devices for transmitting, conducting or directing sound in general; Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
    • G10K11/16Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
    • G10K11/175Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound
    • G10K11/178Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase
    • G10K11/1785Methods, e.g. algorithms; Devices
    • G10K11/17853Methods, e.g. algorithms; Devices of the filter
    • G10K11/17854Methods, e.g. algorithms; Devices of the filter the filter being an adaptive filter
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10KSOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
    • G10K11/00Methods or devices for transmitting, conducting or directing sound in general; Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
    • G10K11/16Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
    • G10K11/175Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound
    • G10K11/178Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase
    • G10K11/1785Methods, e.g. algorithms; Devices
    • G10K11/17857Geometric disposition, e.g. placement of microphones
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10KSOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
    • G10K11/00Methods or devices for transmitting, conducting or directing sound in general; Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
    • G10K11/16Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
    • G10K11/175Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound
    • G10K11/178Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase
    • G10K11/1787General system configurations
    • G10K11/17879General system configurations using both a reference signal and an error signal
    • G10K11/17881General system configurations using both a reference signal and an error signal the reference signal being an acoustic signal, e.g. recorded with a microphone
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10KSOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
    • G10K11/00Methods or devices for transmitting, conducting or directing sound in general; Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
    • G10K11/16Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
    • G10K11/175Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound
    • G10K11/178Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase
    • G10K11/1787General system configurations
    • G10K11/17885General system configurations additionally using a desired external signal, e.g. pass-through audio such as music or speech
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00Circuits for transducers, loudspeakers or microphones
    • H04R3/002Damping circuit arrangements for transducers, e.g. motional feedback circuits
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10KSOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
    • G10K11/00Methods or devices for transmitting, conducting or directing sound in general; Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10KSOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
    • G10K2210/00Details of active noise control [ANC] covered by G10K11/178 but not provided for in any of its subgroups
    • G10K2210/10Applications
    • G10K2210/108Communication systems, e.g. where useful sound is kept and noise is cancelled
    • G10K2210/1081Earphones, e.g. for telephones, ear protectors or headsets
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10KSOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
    • G10K2210/00Details of active noise control [ANC] covered by G10K11/178 but not provided for in any of its subgroups
    • G10K2210/30Means
    • G10K2210/301Computational
    • G10K2210/3014Adaptive noise equalizers [ANE], i.e. where part of the unwanted sound is retained
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10KSOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
    • G10K2210/00Details of active noise control [ANC] covered by G10K11/178 but not provided for in any of its subgroups
    • G10K2210/50Miscellaneous
    • G10K2210/509Hybrid, i.e. combining different technologies, e.g. passive and active
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2460/00Details of hearing devices, i.e. of ear- or headphones covered by H04R1/10 or H04R5/033 but not provided for in any of their subgroups, or of hearing aids covered by H04R25/00 but not provided for in any of its subgroups
    • H04R2460/01Hearing devices using active noise cancellation

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • General Health & Medical Sciences (AREA)
  • Signal Processing (AREA)
  • Soundproofing, Sound Blocking, And Sound Damping (AREA)
  • Circuit For Audible Band Transducer (AREA)
  • Headphones And Earphones (AREA)

Abstract

提供了一种用于改善音频输出信号的声音重现的感知质量的装置。所述装置包括用于基于环境音频信号生成噪音消除信号的有源噪音消除单元(110),其中环境音频信号包括噪音信号部分,所述噪音信号部分由记录环境噪音引起。而且,所述装置包括用于根据环境噪音及噪音消除信号确定残余噪音特征的残余噪音特征估计器(120)。此外,所述装置包括用于基于音频目标信号及基于残余噪音特征生成噪音补偿信号的感知噪音补偿单元(130)。而且,所述装置包括用于合成噪音消除信号及噪音补偿信号以得到音频输出信号的合成器(140)。

Description

通过结合有源噪音消除及感知噪音补偿改善声音重现的感知 质量的装置和方法
技术领域
本发明涉及音频信号处理,尤其涉及一种通过结合有源噪音消除及感知噪音补偿以改善声音重现的感知质量的装置和方法,例如,通过改善耳机上的声音重现的感知质量。
背景技术
音频信号处理变得越来越重要。在许多倾听场景中,例如,在车内,音频信号在嘈杂的环境中呈现,因此,它们的音质及清晰度受到影响。一种减小环境噪音对倾听体验的影响的方法是有源噪音消除(有源噪音控制),例如,参见文献[1]和文献[2]。ANC(有源噪音消除)在接收器侧不同程度地减小干扰噪音。通常地,低频噪音分量比高频分量能够更成功地被消除,稳定噪音比不稳定噪音能够更好地被消除,纯音比随机噪音能够更好地被消除。
有源噪音消除是一种基于声干涉原理抑制声学噪音的技术,使用干扰噪音的倒相副本消除干扰噪音的基本思想在1936年的Paul Lueg的专利中被首次描述,参见文献[7]。
文献[1]和文献[2]对ANC的原理进行了总结。使用换能器测量通过噪音源(主要源)发出的声场。这个参考信号用于生成输入次级扬声器的次级信号。如果通过次级源发出的声波(所谓的“抗噪音”)与噪音的声波正好为异相,噪音由于扬声器后且与噪音源相对的区域中的相消性干扰而被消除,形成“静音区”。理想地,平面波换能器既用于麦克风也用于扬声器。
尽管通过延迟和主噪音的测量可以生成抗噪音,但是经常自适应地计算抗噪音以处理噪音与反声(anti-sound)换能器之间的声道中的可能变化。这种实施方式基于自适应滤波器,通过使用最小均方(LMS)算法、滤波-X LMS(FXLMS)算法、有漏洞的(leaky)FXLMS算法或其他优化算法对误差信号进行最小化而计算自适应滤波器的滤波系数。
ANC可以实施为前馈控制或反馈控制。
图3示出前馈结构的ANC实现的框图。噪音源310发出主噪音320。主噪音320被参考麦克风330记录为环境音频信号d(t)。该环境音频信号输入自适应滤波器340。自适应滤波器用于对环境音频信号d(t)进行滤波以得到滤波后的信号。该滤波后的信号用于控制扬声器350。
如前所述,图3所示的结构为前馈结构。在前馈结构中,参考麦克风可被例如布置为使得主噪音在到达次级源之前被采集,如图3所示。
经常地,在次级源之后安装第二麦克风以测量残余噪音信号。在这种结构中,第二麦克风表现为残余噪音麦克风或误差麦克风。这种结构在图4中示出。
图4示出具有附加误差麦克风460的前馈结构的ANC实现的框图。自适应算法使用参考麦克风信号计算用于生成抗噪音的滤波系数,以便最小化残余噪音。
图5示出反馈结构的ANC实现的框图。如图5所示,反馈结构的实施方式使用仅仅一个麦克风来测量误差并生成次级信号。文献[8]中描述用于耳机应用的反馈ANC系统。
消除的效果取决于噪音源和次级源的声场重叠的精确性。在实际中,干扰噪音信号无法完全消除。ANC尤其适用于低频噪音信号分量及稳定信号,但不能消除高频及不稳定噪音信号分量。
感知噪音补偿(PNC)是一种使用心理声学知识对干扰噪音的感知效果进行补偿的信号处理方法。PNC背后的基础原理是应用时变均衡,从而放大被干扰噪音掩盖的输入音频信号的谱分量。其主要思想已被称为,例如,噪音补偿(例如参见文献[3]),掩盖补偿(例如参见文献[4]),噪音环境中的声音均衡(例如参见文献[5])或动态声音控制(例如参见文献[6])。
感知噪音补偿对音频信号进行处理,以便在环境噪音中所呈现的音频信号的音色及响度被感知为类似或接近于在安静环境中所呈现的未经处理的音频信号的音色及响度。由于部分或全部掩蔽效应,加性(additive)噪音导致期望信号的响度的降低。产生的感觉被称为部分响度。由于人类听觉系统内的频率选择性处理,干扰噪音影响期望信号的感知谱平衡,从而影响其音色。
例如,PNC的基本原理已被应用于文献[3]中。最近的发展已经在例如文献[9]、[10]、[11]及文献[6]中描述。这种方法的基本原理是将时变谱权重因子应用到期望信号,以便恢复对响度及音色的感觉。
PNC的谱加权方法将输入音频信号划分成M个频带,优选地根据具有临界频带的带宽的感知激励频率标度(例如Bark标度或ERB标度)进行划分。使用时变增益因子gm[k]对得到的子带信号sm[k]进行衡量,时变增益因子gm[k]具有子带指数m=1…M和时间指数k。计算增益,以便噪音中的处理后的信号的部分特定响度N’(例如,在每个听觉频带处引起的响度)等于安静环境中的未被处理的音频信号的特定响度或其一部分β,如等式(1)所示,其中em[k]作为加性噪音的子带信号:
βN'q[m,k]=N'p[m,k] (1)
其中,
N'q[m,k]=f(sm[k])
为安静环境中的响度,以及其中
N'p[m,k]=f(gm[k]sm[k],em[k])
为噪音e[k]中的处理后的信号的部分响度。
当信号s[k]与掩蔽信号e[k]同时出现时,响度模型计算信号s[k]的部分特定响度N'[m,k]。
可以使用部分响度的模型计算增益gm[k],例如参见文献[10]。
下面参考部分响度的计算模型。当信号s[k]与掩蔽信号e[k]同时出现时,响度模型计算信号s[k]的部分特定响度N’(sm[k]+em[k]):
N'[m,k]=f(sm[k],em[k]) (2)
部分响度的感知模型的特定实施方式如图6所示。它从文献[12]和文献[13]中介绍的模型得到,并且是Fletcher、Munson及Zwicker借鉴早期的研究并进行一些修改得到的。例如,在文献[14]中描述了过去开发的用于计算特定响度的可选方法。
在频域使用短时傅里叶变换(STFT,例如,具有21ms的帧长度,50%的重叠和汉宁窗函数)对输入信号进行处理。模仿人类听觉系统的频率分辨率及时间分辨率,通过对谱系数进行分组得到子带信号。穿过外耳和中耳的传递通过固定滤波器模拟。此外,可以选择性地并入重现系统的传递函数,但本文为了简便忽略重现系统的传递函数。
图7示出模拟穿过外耳及中耳的路径的传递函数。
计算以等效矩形带宽(ERB)标度或Bark标度间隔的听觉滤波带的激励函数。
图8示出作为频带的感知激励间隔的示例的听觉滤波频带的简化间隔。
除了因STFT的窗口产生的时间积分之外,还可以在在起音(attack)及衰减的期间使用具有不同时间常数的递归积分。根据文献[12]中的等式(17)-(20),从干扰噪音和感兴趣(激励)信号的激励能级计算特定部分响度(例如,在听觉滤波带的每一个中唤起的部分响度)。这些等式覆盖了4种情况:信号在噪音中的听阈之上或不在听阈之上,混合信号的激励少于100dB SPL或不少于100dB SPL。如果没有干扰信号被输入模型,例如e[k]=0,则结果等于激励s[k]的总响度N[k],并应预示等响曲线(ELC)中所表示的信息,如图9所示。此处,图9示出来自文献[15]的等响曲线ISO226-2003。
模型的输出的示例如图10及图11所示。
图10示例性地示出频带4的特定部分响度,其中噪音激励的函数的范围为0到100dB。
图11示出噪音激励为40dB的噪音中的特定部分响度。
美国专利7,050,966(参见文献[16])描述了一种用于提高噪音中的语音的清晰度的方法,并提及了ANC和PNC的结合,但是,并未给出如何可以有利地结合ANC和PNC的启示。
发明内容
本发明的目的在于提供用于改善声音重现的感知质量的改进思想。通过用于改善声音重现的感知质量的装置、耳机、方法及计算机程序,本发明的目的得以实现。
提供一种用于改善音频输出信号的声音重现的感知质量的装置。所述装置包括用于基于环境音频信号生成噪音消除信号的有源噪音消除单元,其中,所述环境音频信号包括噪音信号部分,所述噪音信号部分由记录环境噪音引起。而且,所述装置包括用于根据所述环境噪音及所述噪音消除信号确定残余噪音特征的残余噪音特征估计器。此外,所述装置包括用于基于音频目标信号(期望信号)及基于所述残余噪音特征生成噪音补偿信号的感知噪音补偿单元。而且,所述装置包括用于合成所述噪音消除信号及所述噪音补偿信号以得到音频输出信号的合成器。
根据本发明,提供用于重现音频信号,以便在环境噪音中所呈现的重现的音频信号的音色、响度及清晰度类似或接近于在安静环境中所呈现的未被处理的音频信号的音色、响度及清晰度的思想。所提出的思想包含有源噪音消除及感知噪音补偿的结合。有源噪音消除用于尽可能多地消除干扰噪音信号,感知噪音补偿用于补偿残余噪音分量。通过使用相同的换能器可以有效地实现二者的结合。
本发明的实施例基于这种思想,通过考虑心理声学研究成果对期望音频信号s[k]进行处理。由此,随后通过考虑感知噪音补偿的心理声学研究成果对期望音频信号s[k]进行处理补偿残余噪音分量e[k]的不利感知效果。
实施例基于ANC仅可以部分地物理地消除干扰噪音的发现。ANC是不完善的,因此一些残余噪音残留在倾听者的耳朵入口,如图12中的根据现有技术的声音重现系统的示例性实现的示意图中所示。
根据实施例,所述残余噪音特征估计器可用于确定所述残余噪音特征,以便所述残余噪音特征指示仅重现所述噪音消除信号时保留的所述环境噪音的噪音部分的特征。
在进一步的实施例中,所述残余噪音特征估计器可被布置为接收所述环境音频信号。所述残余噪音特征估计器可被布置为从所述有源噪音消除单元接收所述噪音消除信号的信息,其中,所述残余噪音特征估计器用于基于所述环境音频信号及基于所述噪音消除信号的信息确定所述残余噪音特征。例如,残留噪音估计可指示仅重现所述噪音消除信号时保留的所述环境噪音的噪音部分。
根据另一实施例,所述残余噪音特征估计器可被布置为从所述有源噪音消除单元接收所述噪音消除信号作为所述噪音消除信号的信息。所述残余噪音特征估计器可用于基于所述环境音频信号及基于所述噪音消除信号确定所述残留噪音估计。
根据进一步的实施例,所述残余噪音特征估计器可用于通过将所述环境音频信号和所述噪音消除信号相加以确定所述残留噪音估计。
在另一实施例中,所述装置还包括至少一个扬声器及至少一个麦克风。所述麦克风可用于记录所述环境音频信号,所述扬声器可用于输出所述音频输出信号,其中,所述麦克风及所述扬声器可被布置为实施前馈结构。
根据另一实施例,所述残余噪音特征估计器可被布置为接收所述环境音频信号,其中,所述残余噪音特征估计器可被布置为从所述感知噪音补偿单元接收所述噪音补偿信号的信息。所述残余噪音特征估计器可用于基于所述环境音频信号及基于所述噪音补偿信号确定残留噪音估计作为所述残余噪音特征。例如,所述残留噪音估计可指示仅重现所述噪音消除信号时保留的所述环境噪音的噪音部分。
在另一实施例中,所述残余噪音特征估计器可被布置为从所述感知噪音补偿单元接收所述噪音补偿信号作为所述噪音补偿信号的信息。所述残余噪音特征估计器可用于基于所述环境音频信号及基于所述噪音补偿信号确定所述残留噪音估计。
根据进一步的实施例,所述残余噪音特征估计器可用于通过从所述环境音频信号中减去所述噪音补偿信号的标度分量以确定所述残留噪音估计。
在另一实施例中,所述装置还可包括至少一个扬声器及至少一个麦克风。所述麦克风可用于记录所述环境音频信号,所述扬声器可用于输出所述音频输出信号,所述麦克风及所述扬声器可被布置为实施反馈结构。
根据另一实施例,所述装置还可包括用于检测不应被补偿的所述环境音频信号的信号部分(例如,语音或警报声)的源分离单元。
在进一步的实施例中,所述源分离单元可用于从环境音频信号中移除所述不应被补偿的所述环境音频信号的信号部分。
根据实施例,提供了一种耳机。所述耳机包括两个耳塞,根据前述实施例的任一个所述的用于改善声音重现的感知质量的装置,以及至少一个用于记录所述环境音频信号的麦克风。在这种情况下,提供用于在噪音环境中的耳机上重现音频信号的思想。
在实施例中,提供了一种用于改善音频输出信号的声音重现的感知质量的方法。所述方法包括:
基于环境音频信号生成噪音消除信号,其中所述环境音频信号包括噪音信号部分,所述噪音信号部分由记录环境噪音引起。
根据所述环境噪音及所述噪音消除信号确定残余噪音特征。
基于音频目标信号及基于所述残余噪音特征生成噪音补偿信号,以及
合成所述噪音消除信号及所述噪音补偿信号以得到音频输出信号。
此外,还提供了一种计算机程序,当所述计算机程序在计算机或信号处理器上运行时,实施前述的方法。
附图说明
下面结合附图详细讨论本发明的实施例,其中:
图1为根据实施例的用于改善声音重现的感知质量的装置;
图2示出根据实施例的耳机;
图3为前馈结构的有源噪音消除实现的框图;
图4为具有附加误差麦克风的前馈结构的有源噪音消除实现的框图;
图5为反馈结构的有源噪音消除实现的框图;
图6为部分响度的感知模型的框图;
图7为穿过外耳及中耳的传递函数的示例;
图8为听觉滤波带的简化间隔;
图9为等响曲线;
图10为频带4和范围从0到100dB的噪音激励的函数的示例性特定部分响度;
图11为具有40dB的噪音激励的噪音中的特定部分响度;
图12为根据现有技术的具有前馈结构的噪音消除的声音重现系统的示例性实现的框图;
图13为根据现有技术的具有感知噪音补偿的声音重现系统的框图;
图14为根据实施例的具有ANC和PNC的声音重现系统的示例性实现的框图,其中使用主噪音传感器估计残余噪音的特征;
图15为根据进一步的实施例的具有ANC和PNC的声音重现系统的可选实现的框图,其中使用残余噪音传感器估计残余噪音的特征;
图16为根据另一实施例的具有ANC和PNC的声音重现系统的示例性实现的框图,其中使用主噪音传感器估计残余噪音的特征;
图17为根据进一步的实施例的具有ANC和PNC的声音重现系统的可选实现的框图,其中使用残余噪音传感器估计残余噪音的特征;
图18为根据进一步的实施例的用于改善声音重现的感知质量的装置,其中该装置包括源分离单元;
图19示出根据实施例的包括两个根据图16的实施例的用于改善声音重现的感知质量的装置的耳机;
图20示出根据实施例的包括两个根据图17的实施例的用于改善声音重现的感知质量的装置的耳机;
图21示出根据实施例的用于将耳机中的传递及ANC处理建模为线性时不变系统的测试布置;
图22示出根据实施例的对应于图21的测试布置的模型化的LTI系统;
图23示出根据实施例的描述旨在将耳机中的传递及ANC处理建模为线性时不变系统的步骤的流程图。
具体实施方式
图1示出根据实施例的用于改善音频输出信号的声音重现的感知质量的装置。该装置包括用于基于环境音频信号生成噪音消除信号的有源噪音消除单元110。环境音频信号包括噪音信号部分,其中噪音信号部分由记录环境噪音引起。而且,该装置包括用于根据环境噪音和噪音消除信号确定残余噪音特征的残余噪音特征估计器120。此外,该装置包括用于基于音频目标信号及基于残余噪音特征生成噪音补偿信号的感知噪音补偿单元130。此外,该装置包括用于合成噪音消除信号及噪音补偿信号以得到音频输出信号的合成器140。在这种情况下,环境噪音可以为在环境中(例如,记录麦克风的环境、扬声器的环境或收听者感知到发出的声波的环境)出现的任何一种噪音。
用于改善音频输出信号的声音重现的感知质量的装置的实施例是基于ANC只能够部分地物理地消除干扰噪音的发现。ANC是不完善的,因此一些残余噪音遗留在倾听者的耳朵入口,如图12中示出的根据现有技术的示例性实施方式的示意图中所示。
为了克服这个缺点,根据一些实施例,残余噪音特征估计器120可用于确定残余噪音特征,以便残余噪音特征指示仅重现噪音消除信号时(例如,例如通过扬声器重现噪音消除信号时)保留的环境噪音的噪音部分的特征。
根据前述实施例的装置可用于耳机中。图2示出根据这种实施例的相应的耳机。
耳机包括两个耳塞241、242。耳机241可以例如包括至少一个麦克风261和根据前述实施例中的一个的用于改善声音重现的感知质量的装置251。在图2所示的耳机的实施例中,用于改善声音重现的感知质量的装置251可以集成在耳塞241中。耳塞241的扬声器可以重现用于改善声音重现的感知质量的装置251的音频输出信号。同样地,耳塞242可以例如包括至少一个麦克风262和根据前述实施例中的一个的用于改善声音重现的感知质量的装置252。在图2所示的耳机的实施例中,用于改善声音重现的感知质量的装置252可集成在耳塞242中。耳塞242的扬声器可重现用于改善声音重现的感知质量的装置252的音频输出信号。此外,图2示出佩戴耳机的收听者280。
耳机实施ANC。在实施例中,图2所示的耳机安装有一个或多个麦克风,用于测量环境噪音和/或耳朵入口处的残余噪音。麦克风信号用于生成用于消除噪音的次级信号。此外,进行PNC处理,PNC处理通过将时变且信号有关的频谱权重(滤波器)应用到期望输入信号以补偿残余噪音信号,从而改善感知到的音质。用于计算滤波器的PNC处理所需要的残余噪音特征的估计从麦克风信号得到。
存在ANC的实现的不同结构。这些结构的区别特征是噪音传感器在处理链中的位置,导致两种基本控制结构,即前馈结构和反馈结构。上面已经描述ANC实现的技术背景。
在通过图12所示的现有技术中,干扰噪音没有被完全消除。通过使用PNC(基于心理声学的信号处理方法),可以在重现的音频信号的质量上补偿残余噪音的不利效果。PNC应用时变均衡,以便放大输入信号的被干扰噪音掩蔽的频谱分量。这典型地通过使用谱加权方法实现,谱加权方法中,通过考虑心理声学知识以及期望信号(音频目标信号)和干扰噪音的特征计算子带增益。上面已经提供关于PNC实现的更多技术背景。图13中描述根据现有技术的具有PNC的声音重现系统。
图14及图15示出根据实施例的声音重现系统。两种实现都包括用于估计残余噪音特征的装置,称作残余噪音特征估计器(RNCE)。两种实现之间的不同之处在于用于ANC的控制结构(前馈结构及反馈结构)。
图14示出根据实施例的装置,特别地示出前馈结构中的PNC与ANC的结合。RNCE基于不具有用于测量残余噪音的专用麦克风的主噪音传感器。图14的实施例的装置包括可分别与图1的实施例中的有源噪音消除单元110,残余噪音特征估计器120,感知噪音补偿单元130及合成器140相对应的有源噪音消除单元1410,残余噪音特征估计器1420,感知噪音补偿单元1430及合成器1440,。
图14的实施例的装置还包括扬声器1450及麦克风1405。麦克风1405用于记录环境噪音信号。此外,扬声器1450用于输出音频输出信号。在图14的实施例中,麦克风和扬声器被布置为实施前馈结构。前馈结构可例如表示麦克风和扬声器的布置,其中麦克风不接收由扬声器发出的声波。
图15示出利用用于测量残余噪音的专用麦克风的反馈结构的实现。特别地,图15示出用于改善声音重现的感知质量的装置,其中该装置又包括可分别与图1的实施例中的有源噪音消除单元110,残余噪音特征估计器120,感知噪音补偿单元130及合成器140相对应的有源噪音消除单元1510,残余噪音特征估计器1520,感知噪音补偿单元1530及合成器1540。
如图14的实施例,图15的实施例的装置还包括扬声器1550及麦克风1505。麦克风1505用于记录环境噪音信号。此外,扬声器1550用于输出音频输出信号。与图14相反,图15中,麦克风和扬声器被布置为实施反馈结构。反馈结构可例如表示麦克风和扬声器的布置,其中麦克风接收由扬声器发出的声波。
图16示出比图14描述更多细节的根据实施例的装置。图16的实施例的装置包括有源噪音消除单元1610,残余噪音特征估计器1620,感知噪音补偿单元1630及合成器1640,麦克风1605及扬声器1650。麦克风1605及扬声器1650实施前馈结构。
图16的实施例中,残余噪音特征估计器1620被布置为从有源噪音消除单元1610接收噪音消除信号的信息。这由箭头1660指示。残余噪音特征估计器1620用于确定残留噪音估计作为残余噪音特征。残留噪音估计可例如指示仅重现噪音消除信号(不是噪音消除信号,也可以是PNC产生的信号)时保留的环境噪音的噪音部分。
由于图16实施前馈结构,环境音频信号可例如只包括噪音信号分量。残余噪音特征估计器1620可从有源噪音消除单元1610接收噪音消除信号并可例如将噪音消除信号(抗噪音)与环境音频信号相加。然后产生的信号可作为表示仅重现噪音消除信号时保留的环境噪音的噪音估计。
图17示出比图15描述更多细节的根据实施例的装置。图17的实施例的装置包括有源噪音消除单元1710,残余噪音特征估计器1720,感知噪音补偿单元1730及合成器1740,麦克风1705及扬声器1750。麦克风1705及扬声器1750实施反馈结构。
图17的实施例中,残余噪音特征估计器1720被布置为从感知噪音补偿单元1730接收噪音补偿信号的信息。这由箭头1770指示。残余噪音特征估计器1720可用于确定残留噪音估计作为残余噪音特征,残留噪音估计可例如指示仅重现噪音消除信号(不是噪音消除信号,也可以是PNC产生的信号)时保留的环境噪音的噪音部分。
由于图17实施反馈结构,表示了麦克风的环境中记录的声波的环境音频信号还包括噪音补偿信号。残余噪音特征估计器1720可从感知噪音补偿单元1730接收噪音补偿信号并可从环境音频信号中减去接收到的噪音补偿信号的标度分量。例如,可通过使用预定的标度因子对接收到的噪音补偿信号标量确定接收到的噪音补偿信号的标度分量。然后产生的信号可作为表示仅重现噪音消除信号时保留的环境噪音的噪音估计。例如,预定的标度因子可以是扬声器处发出的信号的平均信号能级和麦克风处记录的信号的平均信号能级之间的信号能级差。
结合ANC和PNC的一些优点是:
●改善音质:额外地补偿残余噪音是对ANC的改进,反之亦然,在PNC之前的低频噪音分量的消除保证了低回报水平下的收听体验。
●成本效益高的实现:ANC及PNC可使用相同的换能器(麦克风及扬声器)。RNCE可从噪音传感器(例如,残余噪音传感器)或从考虑ANC抑制特征的主噪音传感器中获取。
可以使用两种不同的方式来获取噪音估计。这两种方式依赖于ANC实现的结构。
●如果ANC实现以用于测量残余噪音的麦克风为特征,噪音估计从这个传感器获取且进入传感器的期望信号的串音需要被抑制。
●如果ANC在只具有一个用于感测主噪音的麦克风的前馈结构中实现,噪音估计可以使用耳机中的传递(包括由耳机的被动吸收和ANC引起的外部噪音的机械倾倒)的模型从这个传感器获取。
通常地,噪音估计可以包括:
1.进入麦克风的音乐回放的串音的消除。
2.穿过耳塞的外部噪音的传递函数/衰减的建模及ANC处理。
3.可选地,信号分析,信号分析可能与源分离处理结合,以避免期望被耳机佩戴者感知到的某些外部声音(例如,语音或警报声)的补偿/标记。
为了实现对串音的抑制,PNC使用随噪音子带能级的增加而单调递增的子带增益值对期望信号标量。如果音乐回放被麦克风采集到并与噪音估计相加,产生的反馈可潜在地导致相应的子带信号的过补偿及过分放大。因此,进入麦克风的音乐回放的串音需要得到抑制。
环境噪音在到达耳朵入口之前,被耳塞的被动衰减及ANC处理减弱。通过函数fHP模拟耳机中的传递,见等式(3):
e[k]=fHP(d[k]) (3)
其中d[k]表示外部噪音以及其中e[k]表示噪音估计。
传递可被建模为线性时不变(LTI)系统或非线性系统。这种系统识别方法使用输入及输出信号的一系列测量及确定模型参数,以便最小化输出测量与预测输出之间的误差测量。
在第一情况(建模为LTI系统)中,通过它的脉冲响应或量值(magnitude)传递函数描述系统。
图21示出根据实施例的用于将耳机中的传递及ANC处理建模为线性时不变系统的测试布置。在图21中,测试信号输入第一扬声器2110。该测试信号应具有宽的频谱。作为响应,第一扬声器2110输出被布置在耳机的耳塞242上的第一麦克风2120记录为第一记录音频信号的声波。第一记录音频信号记录尚未穿过耳塞242的声波。此外,尚未执行ANC处理。
测试信号可以被看作是第一LTI系统的激励信号。此外,第一记录音频信号可以被看作是第一LTI系统的输出信号。在实施例中,基于测试信号及基于第一记录音频信号计算第一LTI系统的脉冲响应作为第一脉冲响应。为了实现这个目的,测试信号应该具有宽的频谱。此外,第一脉冲响应被转换到频域,例如,通过进行STFT(短时傅里叶变换),以获取第一频率响应。在可选实施例中,基于测试信号及第一记录音频信号的频域表示直接确定第一频率响应。
此外,为了获取第二记录麦克风信号,第二麦克风2130记录已经穿过耳塞242并且已经进行ANC之后的声波。为了进行ANC,使用耳塞242的耳塞扬声器272输出用于消除来自于第一扬声器的声波的所谓的“抗噪音”。
再者,测试信号可以被看作是另一第二LTI系统的激励信号。第二记录麦克风信号可以被看作是第二LTI系统的输出信号。根据实施例,基于测试信号及基于第二记录音频信号计算第二LTI系统的脉冲响应作为第二脉冲响应。此外,第二脉冲响应被转换到频域以获取第二频率响应。在可选实施例中,基于测试信号及第一记录音频信号的频域表示直接确定第二频率响应。
参考图22对此进行更详细地解释。第二LTI系统2220可以被看作包括两个LTI系统,即已经关于图21描述的第一LTI系统2210及第三LTI系统2230。第一LTI系统2210接收(由第一扬声器2110输出的)测试信号作为激励信号。此外,第一LTI系统2210输出(由第一麦克风2120记录的)第一记录音频信号。第三LTI系统2230接收第一记录音频信号作为激励信号并输出(由第二麦克风记录的)第二记录音频信号。
为了对ANC及穿过耳塞的声波的传递的影响进行建模,确定第三LTI系统2230。在实施例中,基于第一LTI系统2210的第一频率响应及基于第二LTI系统2220的第二频率响应计算第三LTI系统2230的频率响应作为第三频率响应。
在实施例中,第二LTI系统2220的第二频率响应除以第一LTI系统2210的第一频率响应得到第三LTI系统2230的第三频率响应。
图23示出根据实施例的将耳机中的传递及ANC处理建模为线性时不变系统的步骤的流程图。
在步骤2310中,将测试信号输入第一扬声器。第一扬声器响应于测试信号输出声波。
在步骤2320中,布置于耳机的耳塞上的第一麦克风记录声波以得到第一记录音频信号。
在步骤2330中,基于作为第一LTI系统的激励信号的测试信号及基于作为第一LTI系统的输出信号的第一记录音频信号确定第一LTI系统的第一频率响应。
在步骤2340中,在声波已经穿过耳塞之后并且已经进行了ANC之后,第二麦克风记录第二记录音频信号。
在步骤2350中,基于作为第二LTI系统的激励信号的测试信号及基于作为第二LTI系统的输出信号的第二记录音频信号确定第二LTI系统的第二频率响应。
在步骤2360中,基于第一LTI系统的第一频率响应及基于第二LTI系统的第二频率响应确定第三LTI系统的第三频率响应。
在可选实施例中,不确定LTI系统的第一脉冲响应和第一频率响应以及LTI系统的第二脉冲响应和第二频率响应。相反地,基于作为第三LTI系统的激励信号的第一记录音频信号及基于作为第三LTI系统的输出信号的第二记录音频信号确定第三LTI系统的频率响应。
在实施例中,第三频率响应可以从频域转换到时域以获取第三LTI系统的脉冲响应。
在一些实施例中,反映ANC及声波在耳塞中的传递的效果的第三LTI系统的频率响应和/或脉冲响应对于残余噪音特征估计器是可用的。在一些实施例中,残余噪音特征估计器可确定第三LTI系统的频率响应和/或脉冲响应。
残余噪音特征估计器可使用第三LTI系统的频率响应和/或脉冲响应确定环境音频信号的残余噪音特征。例如,残余噪音特征估计器可将环境音频信号的频域表示与第三LTI系统的频率响应相乘以确定残余噪音特征。环境音频信号的频域表示可例如通过对环境音频信号的时域表示进行傅里叶变换而得到。在可选实施例中,噪音特征估计器可确定环境音频信号的时域表示和第三LTI系统的脉冲响应的卷积。
存在用于非线性系统的识别的多种方式,例如,伏尔特拉级数或人工神经网络(ANN)或马尔科夫链。
例如,通过接收图21及图22的第一记录音频信号作为输入信号以及接收图21及图22的第二记录信号作为输出信号,训练人工神经网络(ANN)。
如果ANC在只具有一个用于感测主噪音的麦克风的前馈结构中实现,由于抗噪音是已知的,因此可以将噪音及抗噪音相加得到噪音估计。
谱包络从短时傅里叶变换(STFT)或可选的频率变换或滤波器组后的噪音估计的时间信号得到。使用用于近似传递路径的回归方法(例如,使用ANN),噪音估计可被实施为直接估计谱包络,优选地使用从噪音测量中提取的特征(例如,从主噪音传感器中得到的,在频域中计算的)直接估计谱包络。
可选地,通过平滑子带包络信号的轨迹(例如沿时间轴平滑),以及通过平滑谱包络(例如沿频率轴平滑),对得到的噪音估计进行后处理。
为了不对语义上有意义的声音(例如语音或报警声)进行补偿,进行智能信号分析。通过应用源分离处理或通过检测语义上有意义的声音的存在并在肯定检测的情况下对噪音估计进行处理,麦克风信号被划分成被补偿的环境噪音及从噪音估计中排除的语义上有意义的声音。
在后者的情况下,执行噪音估计的操作,以便如果声音被检测为需要呈现给收听者,噪音估计暂停,从而PNC和ANC失效。在捕获了不应被补偿的外部声音的麦克风信号中不更新噪声估计。
图18示出根据实施例的相应装置。图18的实施例的装置包括可分别与图1的实施例中的有源噪音消除单元110,残余噪音特征估计器120,感知噪音补偿单元130及合成器140相对应的有源噪音消除单元1810,残余噪音特征估计器1820,感知噪音补偿单元1830及合成器1840。该装置还包括用于检测不应被补偿的环境音频信号的信号部分的源分离单元1805。源分离单元1805还用于从环境音频信号中移除不应被补偿的环境音频信号的信号部分。
图19示出包括根据图16的实施例的用于改善声音重现的感知质量的装置的根据实施例的耳机。如图2,耳塞241包括麦克风261及用于改善声音重现的感知质量的装置251。图19还示出耳塞241的扬声器271。附图标记291表示耳塞241的内侧291。耳塞241的内侧291是与图19中所示的佩戴耳机的收听者280的耳朵281相接触的耳塞侧。在图19的实施例中,麦克风261被布置为使得耳塞241的扬声器271位于麦克风261与耳塞241的内侧291之间。因此,图19的耳塞241实现了图16的前馈结构。同样地,耳塞242包括用于改善声音重现的感知质量的另一装置252及布置为使得耳塞242的扬声器272位于麦克风262与耳塞242的内侧292之间的另一麦克风262。耳塞242的内侧292是耳塞242的与图19中所示的佩戴耳机的收听者280的耳朵282相接触的侧。因此,图19的耳塞242也实现了图16的前馈结构。
图20示出包括根据图17的实施例的用于改善声音重现的感知质量的装置的根据实施例的耳机。如图2,耳塞241包括麦克风261及用于改善声音重现的感知质量的装置251。图20还示出耳塞241的扬声器271。附图标记291表示耳塞241的内侧291。耳塞241的内侧291是与图20中所示的佩戴耳机的收听者280的耳朵281相接触的耳塞侧。在图20的实施例中,麦克风261被布置为使得耳塞241的麦克风261位于扬声器271与耳塞241的内侧291之间。因此,图20的耳塞241实现了图17的反馈结构。同样地,耳塞242包括用于改善声音重现的感知质量的另一装置252及布置为使得耳塞242的麦克风262位于扬声器272与耳塞242的内侧292之间的另一麦克风262。耳塞242的内侧292是耳塞242的与图20中所示的佩戴耳机的收听者280的耳朵282相接触的侧。因此,图20的耳塞242也实现了图17的反馈结构。
根据其他实施例的耳机可以包括多于两个的麦克风,例如,4个麦克风。例如,每个耳塞可以包括两个麦克风,其中一个为参考麦克风,另一个为附加误差麦克风。附加误差麦克风用于改进ANC,如图4中所提及的。
尽管已经在装置的情况下描述了一些方面,明显地,这些方面也表示相应的方法的描述,其中块或装置对应于方法步骤或方法步骤的特征。类似地,在方法步骤的情况中描述的方面也表示相应的装置的相应块或项或特征的描述。
本发明的分解信号可存在数字存储介质上或可在传输介质上传输,例如在无线传输介质或有线传输介质如互连网上传输。
根据某些实施需求,本发明的实施例可以在硬件或软件中实施。可以使用其上存储有电可读控制信号的数字存储介质,例如软盘、DVD、CD、ROM、PROM、EPROM、EEPROM或闪存,操作实现,电可读控制信号与可编程计算机系统协作(或者能够与可编程计算机系统协作)从而执行各个方法。
根据本发明的一些实施例包括具有电可读控制信号的非暂时性数据载体,电可读控制信号能够与可编程计算机系统协作从而执行本文描述的方法中的一个。
一般地,本发明的方法可被实施为具有程序代码的计算机程序产品,当计算机程序产品在计算机上运行时,程序代码用于执行方法中的一个。程序代码可以例如存储在机器可读载体上。
其他实施例包括存储在机器可读载体上的用于执行本文描述的方法中的一个的计算机程序。
换句话说,本发明的方法的实施例因此是具有程序代码的计算机程序,当计算机程序在计算机上运行时,程序代码用于执行本文描述的方法中的一个。
本发明的方法的另一个实施例因此是包括其上存储的用于执行本文描述的方法中的一个的计算机程序的数据载体(或数字存储介质或计算机可读介质)。
本发明的方法的另一个实施例因此是表示用于执行本文描述的方法汇总的一个的计算机程序的数据流或信号序列。数据流或信号序列可例如被配置为通过数据通信连接传输,例如通过互联网传输。
进一步的实施例包括用于或者适于操作本文描述的方法中的一个的处理装置,例如计算机或可编程逻辑装置。
进一步的实施例包括其上安装有用于执行本文描述的方法种的一个的计算机程序的计算机。
在一些实施例中,可编程逻辑装置(例如现场可编程门阵列)可用于执行本文描述的方法的一些或所有功能。在一些实施例中,现场可编程门阵列可与微处理器合作以执行本文描述的方法中的一个。一般地,优选地通过任何硬件装置执行方法。
上面描述的实施例仅仅是本发明的原理的说明。应当理解的是,本文描述的细节和布置的修改和变化对于本领域的其他技术人员是明显的。因此,本发明仅由所附的权利要求的范围限制,而不被通过本文的实施例的描述和说明示出的特定细节限制。
参考文献
[1]S.J.Elliott和P.A.Nelson,“Active noise control”,IEEE信号处理杂志,12-35页,1993
[2]S.M.Kuo和D.R.Morgan,“Active noise control:A tutorial review”,IEEE学报,87卷,943-973页,1999
[3]E.Zwickler和K.Deuter,“美国专利4,868,881:Method and system ofbackground noise suppression in an audio circuit particularly for carradios”,1989
[4]W.N.House,“Aspect of the vehicle listening environment”,第87次AES会议的报告,1989
[5]M.Tzur和A.A.Goldin,“Sound equalization in a noisy environment”,第110次AES会议的报告,2001
[6]M.Christoph,“Dynamic sound control algorithms in automobiles”,Speech and Audio processing in Adverse Environments,施普林格,2008
[7]P.Lueg,“美国专利2,043,416:Process of silencing soundoscillations”,1936
[8]S.M.Kuo,S.Mitra和W.-S.GAN,“Active noise control system forheadphone applications”,IEEE控制系统技术汇刊,14卷,331-335页,2006。
[9]B.Sauert和P.Vary,“Near end listening enhancement:Speechingintelligibility improvement in noisy environments”,ICASSP学报,2006
[10]A.Seefeldt,“Loudness domain signal processing”,第123次AES会议的报告,2007
[11]J.W.Shin和N.S.Kim,“Perceptual reinforcement of speech signalbased on partial specific loudness”,IEEE信号处理快报,14卷,887-890页,2007
[12]B.C.J.Moore,B.R.Glasberg和T.Baer,“A model for the prediction ofthresholds,loudness and partial loudness”,听觉工程学协会会刊,45卷,224-240页,1997
[13]B.R.Glasberg和B.C.J.Moore,“Development and evaluation of a modelfor predicting the audibility of time-varying sounds in the presence ofbackground sounds”,听觉工程学协会会刊,53卷,906-918页,2005
[14]E.Zwicker,H.Fastl,U.Widmann,K.Kurakata,S.Kuwano和S.Namba,“Programfor calculating loudness according to DIN 45631(ISO 532b)”,日本声学协会会刊,12卷,1991
[15]Y.Suzuki,“Precise and full-range determination of 2-dimensionalequal loudness contours”,Tech.Rep.,AIST,2003
[16]T.Schneider,D.Coode,R.L.Brennan,和P.Olijnyk,“Soundintelligibility enhancement using a psychoacoustic model and an oversampledfilterbank”,2006

Claims (15)

1.一种用于改善音频输出信号的声音重现的感知质量的装置,包括:
有源噪音消除单元(110;1410;1510;1610;1710;1810),用于使用环境音频信号作为输入生成噪音消除信号,其中,所述环境音频信号包括噪音信号部分,
残余噪音特征估计器(120;1420;1520;1620;1720;1820),用于使用所述环境音频信号及使用所述噪音消除信号确定残留噪音估计,
感知噪音补偿单元(130;1430;1530;1630;1730;1830),用于基于音频目标信号及所述残留噪音估计生成噪音补偿信号,及
合成器(140;1440;1540;1640;1740;1840),用于合成所述噪音消除信号及所述噪音补偿信号以得到音频输出信号,
其中,所述残余噪音特征估计器(120;1420;1620;1820)用于接收所述环境音频信号,
其中,所述残余噪音特征估计器(120;1420;1620;1820)用于从所述有源噪音消除单元(110;1410;1610;1810)接收所述噪音消除信号。
2.根据权利要求1所述的装置,其中,所述残余噪音特征估计器(120;1420;1620;1820)用于通过将所述环境音频信号和所述噪音消除信号相加来确定所述残留噪音估计。
3.根据权利要求1或2所述的装置,
其中,所述装置还包括至少一个扬声器(1450;1650)及至少一个麦克风(1405;1605),
其中,所述麦克风(1405;1605)用于记录所述环境音频信号,
其中,所述扬声器(1450;1650)用于输出所述音频输出信号,以及
其中,所述麦克风(1405;1605)及所述扬声器(1450;1650)用于实现前馈结构。
4.根据权利要求1或2所述的装置,其中,所述装置还包括用于检测不应被补偿的所述环境音频信号的信号部分的源分离单元(1805)。
5.根据权利要求4所述的装置,其中所述源分离单元(1805)用于从所述环境音频信号中移除所述不应被补偿的所述环境音频信号的信号部分。
6.一种用于改善音频输出信号的声音重现的感知质量的装置,包括:
有源噪音消除单元(110;1410;1510;1610;1710;1810),用于使用环境音频信号作为输入生成噪音消除信号,其中,所述环境音频信号包括噪音信号部分,
残余噪音特征估计器(120;1420;1520;1620;1720;1820),用于接收所述环境音频信号,用于从感知噪音补偿单元(130;1530;1730;1830)接收噪音补偿信号,以及用于基于所述环境音频信号及基于所述噪音补偿信号确定残留噪音估计,
所述感知噪音补偿单元(130;1430;1530;1630;1730;1830),用于基于音频目标信号及所述残留噪音估计生成所述噪音补偿信号,及
合成器(140;1440;1540;1640;1740;1840),用于合成所述噪音消除信号及所述噪音补偿信号以得到音频输出信号,
其中,所述残余噪音特征估计器(120;1520;1720;1820)用于通过从所述环境音频信号中减去所述噪音补偿信号的标度分量来确定所述残留噪音估计,以及
其中,所述残余噪音特征估计器(120;1520;1720;1820)用于通过预定的标度因子对接收到的噪音补偿信号以确定所述噪音补偿信号的标度分量,其中所述预定的标度因子指示扬声器(1550;1750)处发出的发出信号的平均信号能级和麦克风(1505;1705)处记录的所述发出信号的平均信号能级之间的信号能级差。
7.根据权利要求6所述的装置,
其中,所述装置还包括扬声器(1550;1750)及麦克风(1505;1705),
其中,所述麦克风(1505;1705)用于记录所述环境音频信号,
其中,所述扬声器(1550;1750)用于输出所述音频输出信号,以及
其中,所述麦克风(1505;1705)及所述扬声器(1550;1750)用于实现反馈结构。
8.根据权利要求6或7所述的装置,其中,所述装置还包括用于检测不应被补偿的所述环境音频信号的信号部分的源分离单元(1805)。
9.根据权利要求8所述的装置,其中所述源分离单元(1805)用于从所述环境音频信号中移除所述不应被补偿的所述环境音频信号的信号部分。
10.一种耳机,包括两个耳塞(241,242),其中,所述耳塞(241,242)中的每一个包括:
根据权利要求1或6所述的用于改善声音重现的感知质量的装置(251,252),
扬声器(271,272),以及
至少一个麦克风(261,262),用于记录所述环境音频信号。
11.根据权利要求10所述的耳机,其中,所述耳塞(241,242)的扬声器(271,272)中的每一个布置在所述耳塞(241,242)的一个麦克风(261,262)和所述耳塞(241,242)的内侧(291,292)之间。
12.根据权利要求11所述的耳机,其中,所述耳塞(241,242)的麦克风(261,262)中的每一个布置在所述耳塞(241,242)的一个扬声器(271,272)和所述耳塞(241,242)的内侧(291,292)之间。
13.一种用于改善音频输出信号的声音重现的感知质量的方法,包括:
使用环境音频信号作为输入生成噪音消除信号,其中所述环境音频信号包括噪音信号部分,
使用所述环境音频信号及使用所述噪音消除信号确定残留噪音估计,
基于音频目标信号及所述残留噪音估计生成噪音补偿信号,以及
合成所述噪音消除信号及所述噪音补偿信号以得到音频输出信号。
14.一种用于改善音频输出信号的声音重现的感知质量的方法,包括:
使用环境音频信号作为输入生成噪音消除信号,其中所述环境音频信号包括噪音信号部分,
基于所述环境音频信号及基于噪音补偿信号确定残留噪音估计,
基于音频目标信号及所述残留噪音估计生成所述噪音补偿信号,以及
合成所述噪音消除信号及所述噪音补偿信号以得到音频输出信号,
其中,基于所述环境音频信号及基于所述噪音补偿信号进行确定所述残留噪音估计,
其中,通过从所述环境音频信号中减去所述噪音补偿信号的标度分量确定所述残留噪音估计,
其中,通过预定的标度因子对接收到的噪音补偿信号标量以确定所述噪音补偿信号的标度分量,其中所述预定的标度因子指示扬声器处发出的发出信号的平均信号能级和麦克风处记录的所述发出信号的平均信号能级之间的信号能级差。
15.一种计算机可读介质,包括计算机程序,当所述计算机程序在计算机或信号处理器上运行时,用于执行根据权利要求13或14所述的方法。
CN201380017033.0A 2012-03-26 2013-03-25 通过结合有源噪音消除及感知噪音补偿改善声音重现的感知质量的装置和方法 Active CN104303227B (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201261615446P 2012-03-26 2012-03-26
US61/615,446 2012-03-26
EP121696082 2012-05-25
EP12169608.2A EP2645362A1 (en) 2012-03-26 2012-05-25 Apparatus and method for improving the perceived quality of sound reproduction by combining active noise cancellation and perceptual noise compensation
PCT/EP2013/056314 WO2013144099A1 (en) 2012-03-26 2013-03-25 Apparatus and method for improving the perceived quality of sound reproduction by combining active noise cancellation and perceptual noise compensation

Publications (2)

Publication Number Publication Date
CN104303227A CN104303227A (zh) 2015-01-21
CN104303227B true CN104303227B (zh) 2018-05-18

Family

ID=46168282

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201380017033.0A Active CN104303227B (zh) 2012-03-26 2013-03-25 通过结合有源噪音消除及感知噪音补偿改善声音重现的感知质量的装置和方法

Country Status (12)

Country Link
US (1) US9706296B2 (zh)
EP (2) EP2645362A1 (zh)
JP (1) JP6111319B2 (zh)
KR (1) KR101798120B1 (zh)
CN (1) CN104303227B (zh)
AU (1) AU2013241928B2 (zh)
BR (1) BR112014023850B1 (zh)
CA (1) CA2868376C (zh)
ES (1) ES2882133T3 (zh)
MX (1) MX342589B (zh)
RU (1) RU2626987C2 (zh)
WO (1) WO2013144099A1 (zh)

Families Citing this family (42)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2761892B1 (en) * 2011-09-27 2020-07-15 Starkey Laboratories, Inc. Methods and apparatus for reducing ambient noise based on annoyance perception and modeling for hearing-impaired listeners
US9837066B2 (en) * 2013-07-28 2017-12-05 Light Speed Aviation, Inc. System and method for adaptive active noise reduction
TWI511579B (zh) * 2013-09-30 2015-12-01 C Media Electronics Inc 具主動噪音消除功能之耳機及其自動校正方法
US20150139435A1 (en) * 2013-11-17 2015-05-21 Ben Forrest Accoustic masking system and method for enabling hipaa compliance in treatment setting
US9503803B2 (en) * 2014-03-26 2016-11-22 Bose Corporation Collaboratively processing audio between headset and source to mask distracting noise
CN105530569A (zh) 2014-09-30 2016-04-27 杜比实验室特许公司 耳机混合主动噪声消除和噪声补偿
CN104616662A (zh) * 2015-01-27 2015-05-13 中国科学院理化技术研究所 主动降噪方法及装置
WO2016178309A1 (ja) * 2015-05-07 2016-11-10 パナソニックIpマネジメント株式会社 信号処理装置、信号処理方法、プログラム、レンジフード装置
JP6468353B2 (ja) * 2015-05-14 2019-02-13 富士通株式会社 空調機、センサユニット、並びに、空調機の制御システム及び制御方法
US9590580B1 (en) * 2015-09-13 2017-03-07 Guoguang Electric Company Limited Loudness-based audio-signal compensation
US9978357B2 (en) 2016-01-06 2018-05-22 Plantronics, Inc. Headphones with active noise cancellation adverse effect reduction
US11551654B2 (en) 2016-02-02 2023-01-10 Nut Shell LLC Systems and methods for constructing noise reducing surfaces
CN105719657A (zh) * 2016-02-23 2016-06-29 惠州市德赛西威汽车电子股份有限公司 基于单麦克风的人声提取方法及装置
EP3468514B1 (en) * 2016-06-14 2021-05-26 Dolby Laboratories Licensing Corporation Media-compensated pass-through and mode-switching
CN107666637B (zh) * 2016-07-28 2020-04-03 骅讯电子企业股份有限公司 自调式主动噪声消除方法、系统及耳机装置
US11620974B2 (en) 2017-03-15 2023-04-04 Chinook Acoustics, Inc. Systems and methods for acoustic absorption
WO2018226418A1 (en) 2017-06-07 2018-12-13 iZotope, Inc. Systems and methods for identifying and remediating sound masking
US10360892B2 (en) 2017-06-07 2019-07-23 Bose Corporation Spectral optimization of audio masking waveforms
US11087776B2 (en) * 2017-10-30 2021-08-10 Bose Corporation Compressive hear-through in personal acoustic devices
US11416742B2 (en) 2017-11-24 2022-08-16 Electronics And Telecommunications Research Institute Audio signal encoding method and apparatus and audio signal decoding method and apparatus using psychoacoustic-based weighted error function
CN108022591B (zh) * 2017-12-30 2021-03-16 北京百度网讯科技有限公司 车内环境中语音识别的处理方法、装置和电子设备
WO2019136475A1 (en) * 2018-01-08 2019-07-11 Avnera Corporation Voice isolation system
CN110022513B (zh) * 2018-01-10 2021-11-26 郑州宇通客车股份有限公司 一种车辆内声品质主动控制方法及系统
JP7325445B2 (ja) * 2018-04-27 2023-08-14 ドルビー ラボラトリーズ ライセンシング コーポレイション ギャップ信頼度を用いた背景雑音推定
CN110718237B (zh) 2018-07-12 2023-08-18 阿里巴巴集团控股有限公司 串音数据检测方法和电子设备
GB2575814B (en) * 2018-07-23 2020-12-09 Dyson Technology Ltd A wearable air purifier
GB2575813B (en) * 2018-07-23 2020-12-09 Dyson Technology Ltd A wearable air purifier
GB2575815B (en) * 2018-07-23 2020-12-09 Dyson Technology Ltd A wearable air purifier
CN108810747A (zh) * 2018-07-27 2018-11-13 歌尔科技有限公司 一种音质优化方法、系统、耳机及存储介质
CN111081213B (zh) * 2018-10-19 2022-12-09 比亚迪股份有限公司 新能源车及其主动声音系统和主动声音控制方法
DE102019200954A1 (de) * 2019-01-25 2020-07-30 Sonova Ag Signalverarbeitungseinrichtung, System und Verfahren zur Verarbeitung von Audiosignalen
US10985951B2 (en) 2019-03-15 2021-04-20 The Research Foundation for the State University Integrating Volterra series model and deep neural networks to equalize nonlinear power amplifiers
DE102019001966B4 (de) * 2019-03-21 2023-05-25 Dräger Safety AG & Co. KGaA Vorrichtung, System und Verfahren zur Audiosignalverarbeitung
US10714073B1 (en) * 2019-04-30 2020-07-14 Synaptics Incorporated Wind noise suppression for active noise cancelling systems and methods
CN110198374A (zh) * 2019-05-30 2019-09-03 深圳市趣创科技有限公司 一种基于纠错学习规则的手机语音降噪方法及装置
WO2021054973A1 (en) * 2019-09-20 2021-03-25 Hewlett-Packard Development Company, L.P. Noise generator
CN116305886A (zh) * 2019-10-31 2023-06-23 佳禾智能科技股份有限公司 基于神经网络滤波器的自适应前馈式主动降噪方法、计算机可读存储介质、电子设备
US11817114B2 (en) * 2019-12-09 2023-11-14 Dolby Laboratories Licensing Corporation Content and environmentally aware environmental noise compensation
CN111161699B (zh) * 2019-12-30 2023-04-28 广州心与潮信息科技有限公司 一种环境噪音的掩蔽方法、装置及设备
CN111356047A (zh) * 2020-03-06 2020-06-30 苏州车萝卜汽车电子科技有限公司 一种音频共享系统及方法
JP7461815B2 (ja) 2020-07-03 2024-04-04 アルプスアルパイン株式会社 音声秘匿システム
KR102473131B1 (ko) * 2021-01-20 2022-12-01 강태천 노이즈 감쇠 기능 및 공간 효과 구현 기능을 제공하는 음향 처리 시스템

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1770685A1 (en) * 2005-10-03 2007-04-04 Maysound ApS A system for providing a reduction of audiable noise perception for a human user

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US2043416A (en) 1933-01-27 1936-06-09 Lueg Paul Process of silencing sound oscillations
DE3730763A1 (de) 1987-09-12 1989-03-30 Blaupunkt Werke Gmbh Schaltung zur stoergeraeuschkompensation
JPH0612088A (ja) * 1992-06-27 1994-01-21 Sango Co Ltd 能動型騒音低減装置
DE69424419T2 (de) 1993-06-23 2001-01-04 Noise Cancellation Tech Aktive lärmunterdrückungsanordnung mit variabler verstärkung und verbesserter restlärmmessung
CA2354755A1 (en) * 2001-08-07 2003-02-07 Dspfactory Ltd. Sound intelligibilty enhancement using a psychoacoustic model and an oversampled filterbank
KR101089165B1 (ko) * 2003-07-28 2011-12-05 코닌클리케 필립스 일렉트로닉스 엔.브이. 오디오 조절 장치, 방법 및 컴퓨터 프로그램 제품
EP1833163B1 (en) * 2004-07-20 2019-12-18 Harman Becker Automotive Systems GmbH Audio enhancement system and method
US20060262938A1 (en) * 2005-05-18 2006-11-23 Gauger Daniel M Jr Adapted audio response
WO2007028250A2 (en) 2005-09-09 2007-03-15 Mcmaster University Method and device for binaural signal enhancement
US7742746B2 (en) * 2007-04-30 2010-06-22 Qualcomm Incorporated Automatic volume and dynamic range adjustment for mobile audio devices
JP4591557B2 (ja) 2008-06-16 2010-12-01 ソニー株式会社 音声信号処理装置、音声信号処理方法および音声信号処理プログラム
US8538749B2 (en) * 2008-07-18 2013-09-17 Qualcomm Incorporated Systems, methods, apparatus, and computer program products for enhanced intelligibility
US9202455B2 (en) 2008-11-24 2015-12-01 Qualcomm Incorporated Systems, methods, apparatus, and computer program products for enhanced active noise cancellation
EP2284831B1 (en) * 2009-07-30 2012-03-21 Nxp B.V. Method and device for active noise reduction using perceptual masking
US20110251704A1 (en) * 2010-04-09 2011-10-13 Martin Walsh Adaptive environmental noise compensation for audio playback
US9053697B2 (en) * 2010-06-01 2015-06-09 Qualcomm Incorporated Systems, methods, devices, apparatus, and computer program products for audio equalization
US9135907B2 (en) * 2010-06-17 2015-09-15 Dolby Laboratories Licensing Corporation Method and apparatus for reducing the effect of environmental noise on listeners
US9275621B2 (en) * 2010-06-21 2016-03-01 Nokia Technologies Oy Apparatus, method and computer program for adjustable noise cancellation
US20120155667A1 (en) * 2010-12-16 2012-06-21 Nair Vijayakumaran V Adaptive noise cancellation
US8718291B2 (en) * 2011-01-05 2014-05-06 Cambridge Silicon Radio Limited ANC for BT headphones

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1770685A1 (en) * 2005-10-03 2007-04-04 Maysound ApS A system for providing a reduction of audiable noise perception for a human user

Also Published As

Publication number Publication date
KR20140131367A (ko) 2014-11-12
EP2831871B1 (en) 2021-06-30
KR101798120B1 (ko) 2017-12-12
WO2013144099A1 (en) 2013-10-03
EP2645362A1 (en) 2013-10-02
US9706296B2 (en) 2017-07-11
RU2626987C2 (ru) 2017-08-02
BR112014023850A2 (pt) 2017-08-22
AU2013241928A1 (en) 2014-11-13
CA2868376C (en) 2017-12-12
BR112014023850B1 (pt) 2021-12-07
AU2013241928B2 (en) 2015-08-20
JP6111319B2 (ja) 2017-04-05
MX2014011556A (es) 2014-11-14
EP2831871A1 (en) 2015-02-04
JP2015515202A (ja) 2015-05-21
CA2868376A1 (en) 2013-10-03
CN104303227A (zh) 2015-01-21
RU2014143021A (ru) 2016-05-20
ES2882133T3 (es) 2021-12-01
MX342589B (es) 2016-10-05
US20150003625A1 (en) 2015-01-01

Similar Documents

Publication Publication Date Title
CN104303227B (zh) 通过结合有源噪音消除及感知噪音补偿改善声音重现的感知质量的装置和方法
US9414158B2 (en) Single-channel, binaural and multi-channel dereverberation
CN105409247B (zh) 用于音频信号处理的多声道直接-周围分解的装置及方法
EP2422342B1 (en) Method, apparatus and computer-readable medium for automatic control of active noise cancellation
US20080137874A1 (en) Audio enhancement system and method
WO2011094232A1 (en) Adaptive noise reduction using level cues
US9343073B1 (en) Robust noise suppression system in adverse echo conditions
JPH11149292A (ja) 反雑音を発生させることによって空間の雑音を減衰させる方法及び装置
Belyi et al. Integrated psychoacoustic active noise control and masking
US20140244245A1 (en) Method for soundproofing an audio signal by an algorithm with a variable spectral gain and a dynamically modulatable hardness
US11514882B2 (en) Feedforward active noise control
CN115735362A (zh) 语音活动检测
WO2022240346A1 (en) Voice optimization in noisy environments
US10798479B2 (en) Determination of effects of physical activity on electrical load devices
Munir et al. Psychoacoustically motivated active noise control at remote locations
CN113593518A (zh) 一种啸叫抑制方法、装置、入耳式耳机及存储介质
JP5998357B2 (ja) 車載用音響再生装置
JP2015070292A (ja) 集音・放音装置及び集音・放音プログラム
KR102663259B1 (ko) 피드백 보상을 이용한 능동적 노이즈 제어
JP2012187995A (ja) 車載用音響再生装置
Koskimies Real-time noise filtering with adaptive filters in heavy equipment soundscape
CN117714956A (zh) 确定听力仪器的声学特性
Pandey et al. Adaptive gain processing to improve feedback cancellation in digital hearing aids
Sharma et al. ENHANCEMENT OF SPEECH SIGNALS FOR HEARING AID DEVICES USING KALMAN FILTER AND ADAPTIVE FILTERS
Hussain et al. Adaptive Speech Enhancement using Diverse Processing in Non-linearly Distributed Sub-bands

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant