CN102792373A - 噪音抑制装置 - Google Patents
噪音抑制装置 Download PDFInfo
- Publication number
- CN102792373A CN102792373A CN2010800652452A CN201080065245A CN102792373A CN 102792373 A CN102792373 A CN 102792373A CN 2010800652452 A CN2010800652452 A CN 2010800652452A CN 201080065245 A CN201080065245 A CN 201080065245A CN 102792373 A CN102792373 A CN 102792373A
- Authority
- CN
- China
- Prior art keywords
- mrow
- power spectrum
- noise suppression
- spectrum
- noise
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000001629 suppression Effects 0.000 title claims abstract description 113
- 238000001228 spectrum Methods 0.000 claims abstract description 219
- 238000000034 method Methods 0.000 claims description 33
- 238000011156 evaluation Methods 0.000 claims description 28
- 238000006243 chemical reaction Methods 0.000 claims description 18
- 238000012545 processing Methods 0.000 description 14
- 230000003595 spectral effect Effects 0.000 description 14
- 238000004364 calculation method Methods 0.000 description 11
- 230000005236 sound signal Effects 0.000 description 8
- 238000010586 diagram Methods 0.000 description 5
- 230000000694 effects Effects 0.000 description 4
- 238000007796 conventional method Methods 0.000 description 3
- 230000006866 deterioration Effects 0.000 description 3
- 101000822695 Clostridium perfringens (strain 13 / Type A) Small, acid-soluble spore protein C1 Proteins 0.000 description 2
- 101000655262 Clostridium perfringens (strain 13 / Type A) Small, acid-soluble spore protein C2 Proteins 0.000 description 2
- 101000655256 Paraclostridium bifermentans Small, acid-soluble spore protein alpha Proteins 0.000 description 2
- 101000655264 Paraclostridium bifermentans Small, acid-soluble spore protein beta Proteins 0.000 description 2
- 238000004458 analytical method Methods 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 238000005070 sampling Methods 0.000 description 2
- 238000012935 Averaging Methods 0.000 description 1
- 230000005534 acoustic noise Effects 0.000 description 1
- 230000003321 amplification Effects 0.000 description 1
- 230000005611 electricity Effects 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000005389 magnetism Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 238000003199 nucleic acid amplification method Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000000926 separation method Methods 0.000 description 1
- 238000007619 statistical method Methods 0.000 description 1
- 238000011410 subtraction method Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
- G10L21/0208—Noise filtering
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
- G10L21/0208—Noise filtering
- G10L21/0216—Noise filtering characterised by the method used for estimating noise
- G10L2021/02161—Number of inputs available containing the signal or the noise to be suppressed
- G10L2021/02163—Only one microphone
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
- G10L21/0208—Noise filtering
- G10L21/0216—Noise filtering characterised by the method used for estimating noise
- G10L21/0232—Processing in the frequency domain
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
- G10L25/78—Detection of presence or absence of voice signals
Landscapes
- Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- Quality & Reliability (AREA)
- Signal Processing (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Computational Linguistics (AREA)
- Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- Multimedia (AREA)
- Noise Elimination (AREA)
- Compression, Expansion, Code Conversion, And Decoders (AREA)
- Soundproofing, Sound Blocking, And Sound Damping (AREA)
Abstract
频带分离部(5)对时间/频率变换部(2)所变换的多个功率谱进行频带分割而汇总到子带,频带代表分量生成部(6)将子带内的多个功率谱中的具有最大值的功率谱设为代表功率谱。噪音抑制量生成部(7)使用代表功率谱和噪音谱来计算子带的噪音抑制量,噪音抑制部(9)根据噪音抑制量来抑制功率谱的振幅。
Description
技术领域
本发明涉及一种对重叠于声音信号的噪音进行抑制的噪音抑制装置。
背景技术
噪音抑制装置主要输入在声音信号中重叠了噪音的时域的信号而作为输入信号,将该输入信号变换为作为频域的信号的功率谱之后,从输入信号的功率谱推定噪音的平均的功率谱,并从输入信号的功率谱减去所推定的噪音的功率谱而得到进行了噪音抑制的输入信号的功率谱,将其恢复为原来的时域的信号,从而进行噪音抑制处理。
作为这种以往的噪音抑制装置,例如公开了专利文献1。在专利文献1公开的噪音抑制装置中,以非专利文献1公开的技术为基础,在噪音谱推定和抑制量的计算时求出输入信号的多个功率谱分量的平均值,从得到的一个平均值进行噪音谱推定和抑制量计算,并将它们共同地应用于多个功率谱分量中。
专利文献1:日本专利4172530号公报(第8~12页、图2)
非专利文献1:Y.Ephraim,D.Malah,“Speech EnhancementUsing a Minimum Mean-Square Error Short-Time SpectralAmplitude Estimator”,IEEE Trans.ASSP,Vol.32,No.6,pp.1109-1121,Dec.1984
发明内容
以往的噪音抑制装置如以上那样构成,因此存在下面所述的课题。
在以往的噪音抑制装置中,在用于噪音抑制的抑制量计算中,需要对输入信号的每个功率谱分量进行贝塞尔函数等复杂的计算,处理量非常大。因此在专利文献1公开的以往的噪音抑制装置中,通过将多个谱分量进行汇总而平均化,并将平均化的谱分量作为各谱分量的代表谱分量进行计算,从而进行处理量的削减。然而,在该方法中,即使谱分量中存在振幅大的分量(即,认为是声音分量),通过进行平均化,声音分量会被处理得过小,其结果,声音信号被抑制而使声音的湮灭感增大,具有音质变差的课题。
本发明是为了解决上述课题而作出的,其目的在于提供一种能够以少的处理量进行高品质的噪音抑制的噪音抑制装置。
本发明的噪音抑制装置具备代表分量生成部,该代表分量生成部将时间/频率变换部所变换的多个功率谱汇总到1组,优先选择该组内的多个功率谱中的值大的功率谱而设为代表功率谱,噪音抑制量生成部使用代表功率谱来计算噪音抑制量。
根据本发明,使用代表功率谱来计算噪音抑制量,因此处理量较少也可以,并且,在该代表功率谱中使用组内的值大的功率谱,因此在噪音抑制量计算时输入信号的声音分量不会被评价得过小,其结果不会抑制声音信号而能够进行高品质的噪音抑制。
附图说明
图1是表示与本发明的实施方式1有关的噪音抑制装置的结构的框图。
图2是表示频带分离部的功率谱的频带分割的一个例子的图。
图3示意性地示出频带代表分量生成部的处理效果,图3的(a)是输入信号的功率谱的图,图3的(b)是以子带(Subband)内的功率谱的平均值为代表的情况(以往方法),图3的(c)是以子带内的功率谱的最大值为代表的情况(本发明)。
图4是表示噪音抑制量生成部的详细结构的框图。
具体实施方式
下面,为了更详细地说明本发明,根据附图说明用于实施本发明的方式。
实施方式1.
图1所示的噪音抑制装置具备:输入端子1、时间/频率变换部2、声音相似度推定部3、噪音谱推定部4、频带分离部5、频带代表分量生成部(代表分量生成部)6、噪音抑制量生成部7、频带复用部8、噪音抑制部9、频率/时间变换部10、以及输出端子11。
作为该噪音抑制装置的输入,使用如下信号,即,该信号是对通过麦克风(未图示)等取入的声音以及音乐等进行A/D(模拟/数字)变换之后以规定的采样频率(例如,8kHz)进行采样、并且分割为帧单位(例如,10ms)的信号。
下面,根据图1说明与实施方式1有关的噪音抑制装置的动作原理。
输入端子1接受如上所述的信号,并作为输入信号y(t)而输出到时间/频率变换部2。
时间/频率变换部2对分割为帧单位的输入信号y(t)进行加窗处理,并对于该加窗后的信号y(n,t),使用例如256点的FFT(FastFourier Transform:快速傅立叶变换)将时间轴上的信号变换为频率上的信号(谱),计算出输入信号的功率谱Y(n,k)和相位谱P(n,k)。这里,n表示帧编号,k表示谱编号,t表示离散时间编号。以下,只要不需要特别地表示,就指当前帧的输入信号,在该信号表示谱的情况下省略帧编号。
所得到的功率谱分别输出到声音相似度推定部3、噪音谱推定部4、频带分离部5以及噪音抑制部9。另外,所得到的相位谱输出到频率/时间变换部10。此外,作为加窗处理,例如能够使用汉宁窗、梯形窗等的公知的方案。另外,时间/频率变换部2在进行加窗处理时,根据需要还实施零填充处理。FFT是公知的方案,因此省略说明。
声音相似度推定部3使用从时间/频率变换部2输入的输入信号的功率谱,计算出声音相似度评价值来作为当前帧的输入信号的形态“是否像声音”的程度,其中,所述声音相似度评价值例如是在声音的可能性高的情况下取大的值、在声音的可能性低的情况下取小的值这样的声音相似度评价值。
作为声音相似度评价值的计算方法,能够分别单独或者组合使用例如通过对输入信号的功率谱进行傅立叶变换而得到的自相关系数的最大值、从功率谱的总和得到的输入信号能量、输入信号的全频带SN比(信噪比)、以及表示功率谱的变动状态的谱熵等公知的方案。在此为了简化说明,只示出单独使用了能够通过当前帧的输入信号的功率谱来计算的自相关系数的最大值的情况。自相关系数c(τ)能够如下式(1)那样求出。
c(τ)=F [Y(n,k)](1)
这里,τ表示延迟(延迟时间),F[]表示傅立叶变换。在该傅立叶变换中,能够与在时间/频率变换部2中所使用的FFT相同地使用例如256点的FFT。上式(1)的自相关系数的计算方法是公知的方案,因此省略说明。
声音相似度推定部3接下来通过将所得到的自相关系数c(τ)除以c(0)而在0~1的范围内进行标准化,例如在存在声音的基频的可能性高的16<τ<120的范围内搜寻自相关系数的最大值,并将所得到的最大值作为声音相似度评价值VAD而输出到噪音谱推定部4。
噪音谱推定部4使用输入信号的功率谱Y(k)和声音相似度评价值VAD来推定包含在输入信号中的平均的噪音谱。具体地说,噪音谱推定部4参照作为声音相似度推定部3的输出的声音相似度评价值VAD,在当前帧的输入信号的形态为噪音的可能性高的情况下(即,是声音的可能性低的情况下),使用当前帧的输入信号的功率谱Y(n,k),来更新噪音谱推定部4所存储的前1帧的噪音谱N(n-1,k),并将更新了的噪音谱输出到噪音抑制量生成部7。
噪音谱推定部4例如按照下式(2),在声音相似度评价值VAD为规定的阈值(例如0.2)以下的情况下,将输入信号的功率谱反映到噪音谱,从而实施噪音谱的更新。在声音相似度评价值VAD超过阈值0.2的情况下,认为当前帧的输入信号是声音的可能性高,因此不进行噪音谱的更新,而将前1帧的噪音谱原样地用作当前帧的噪音谱。
其中,0≤k<K
这里,n为帧编号,k为谱编号,K为FFT点数的一半的值,N(n-1,k)为更新前的噪音谱,Y(n,k)是判断为噪音的可能性高的当前帧的噪音谱,N~(n,k)是更新后的噪音谱。在此由于电子申请的关系,将上式(2)中的“~”(颚化符号(tilde))记载为“~”,但是在以后的说明中省略更新后的噪音谱的颚化符号。另外,α(k)是取0~1的值的规定的更新速度系数,可以设定为比较接近0的值。但是,有时优选随着频率变高而使更新速度系数变大,因此还能够根据噪音的种类等而适当调整更新速度系数。
而且,噪音谱推定部4为了在接下来的更新处理中使用当前帧的噪音谱N(n,k)而将当前帧的噪音谱N(n,k)进行存储。作为存储单元,使用例如以半导体存储器、硬盘等为代表的电或者磁的能够随时读出以及写入的存储单元。
频带分离部5将输入信号的功率谱Y(k)分割为非均匀的频率频带,并针对每个子带进行分组。图2中示出输入信号的功率谱Y(k)的频带分割的一个例子。在图2的例子中,将输入信号的功率谱Y(k)的低频带至高频带分割为19个非均匀的频率频带,并将各组设为子带。具体地说,在子带编号z=10的情况下,第k=35~40个的谱分量属于该子带。此外,图2的子带称为临界频带,与人的听觉特性的匹配性高。该临界频带的子带编号的单位是Bark(巴克)。关于临界频带的详细内容,可以参照E.ツヴガ一著《心理音響学》(西村書店,1992年8月)。
此外,在图2的例子中示出了以临界频带进行频带分割的例子,但是不限于此,例如既可以是随着成为低频带而使频带以2的幂乘变窄的倍频带分割,也可以是将全部的频带分割为例如由4个谱分量构成的子带那样的均等分割。另外,为了提高特定的频率频带(低频带、作为声音的重要部分的基频频带、或者共振峰分量分布的可能性高的频带)的精度,也可以以更细的单位进行分割,通过以细小的单位进行分割,能够抑制后述的噪音抑制特性变差。频带分离部5在如以上那样实施了分割处理之后,将分组了的每个子带编号z的功率谱Y(z,k)输出到频带代表分量生成部6。
频带代表分量生成部6使用从频带分离部5输入的每个子带的功率谱Y(z,k),生成代表各子带的代表功率谱Yd(z)并输出到噪音抑制量生成部7。作为代表功率谱Yd(z)的生成方法,例如如下式(3)那样,在各子带内依次比较功率谱Y(k)的大小,将值最大的功率谱Y(k)设为代表功率谱Yd(z)。但是,在声音相似度推定部3所输出的声音相似度评价值VAD为规定的阈值(例如,0.2)以下的情况下,并非是选择值最大的功率谱Y(k)作为代表功率谱Yd(z)的方法,而是切换到例如专利文献1那样的算出子带内的全部功率谱Y(k)的平均值来设为代表功率谱Yd(z)的方法。
其中,z=0,…,18
图3是示意性地示出了本实施方式1的频带代表分量生成部6的处理效果的图。图3的(a)是绘出混入了噪音的输入信号在某个时刻下的功率谱的图,纵轴表示功率谱的大小(振幅),横轴表示频率。另外,实线表示输入信号的功率谱分量,虚线表示噪音谱的包络线,单点划线表示子带的边界。而且,为了使图简单,关于子带示出对频率频带进行了均等分割的例子。
图3的(b)示出在从图3的(a)所示的输入信号通过以往的方法求出各子带内的功率谱的平均值并设为代表功率谱的情况下的结果。在该方法中,推测为声音分量的功率谱的大小变小,因此在后述的噪音抑制量生成部7中声音分量被评价得过小,其结果,声音信号被抑制而使声音的湮灭感增大,导致声音变差。
另一方面,图3的(c)示出频带代表分量生成部6从图3的(a)所示的输入信号计算出代表功率谱的情况下的结果。在图3的例子中,在输入信号中存在声音信号,因此声音相似度评价值VAD比起阈值0.2足够大。因此,频带代表分量生成部6根据上式(3)求出代表功率谱。根据图3的(c),与图3的(b)的以往的方法相比,保存推测为声音分量的功率谱,在后级的噪音抑制量生成部7中声音分量不会被评价得过小,声音信号也不会被抑制。因此,能够实现高品质的噪音抑制。
此外,在图3中例示出对子带进行了均等分割的情况,但是例如如图2的表那样以临界频带宽度进行了非均等分割的情况下当然也起到相同的效果。
在图3中,例示出声音相似度评价值VAD大、且在输入信号中存在声音信号的情况,但是除此之外例如在声音相似度评价值VAD小、且认为当前帧的输入信号是噪音的可能性高的情况下,即使存在具有大的值的功率谱存在,其是噪音的可能性也高,因此也可以切换到以往的利用平均值的计算方法来生成代表功率谱。通过求出子带内的功率谱的平均值,噪音的可能性高的大的值的功率谱的振幅变小,因此能够抑制错误的代表功率谱的生成。
此外,在输入信号中重叠的噪音小的情况等噪音的影响少的情况下,也可以采用如下方法:频带代表分量生成部6不进行与声音相似度评价值VAD相应的代表功率谱计算方法的切换,而始终将具有最大值的功率谱设为代表功率谱。
噪音抑制量生成部7使用从频带代表分量生成部6输入的代表功率谱Yd(z)和从噪音谱推定部4输入的噪音谱N(n,k),按照预先准备的规定的运算式来生成每个子带的噪音抑制量G(z),并输出到频带复用部8。在后面叙述该噪音抑制量G(z)的运算式的导出方法。
频带复用部8将噪音抑制量生成部7所求出的每个子带的噪音抑制量G(z)针对属于各子带的每个谱进行复用,展开到每个谱的噪音抑制量G(k)中。具体地说,通过向属于同一子带编号z的谱编号k的噪音抑制量G(k)的值复制该子带编号z的噪音抑制量G(z)的值来进行。噪音抑制量生成部7将所得到的每个谱的噪音抑制量G(k)输出到噪音抑制部9。
噪音抑制部9使用从时间/频率变换部2输入的输入信号的功率谱Y(k)和从噪音抑制量生成部7输入的每个谱的噪音抑制量G(k),根据下式(4)来生成进行了噪音抑制的输入信号的功率谱Y^(k),并输出到频率/时间变换部10。由于电子申请的关系,将上式(4)中的“^”(hat symbol:帽子符号)记载为“^”,在此后示出的式子的说明中也记载为“^”。
其中,k=0,…,K
这里,K是FFT点数的一半的值。
频率/时间变换部10使用从噪音抑制部9输入的进行了噪音抑制的输入信号的功率谱Y^(k)和从时间/频率变换部2输入的相位谱P(k),通过逆快速傅立叶变换(逆FFT)从频域的谱变换为时域的信号,并与在频率/时间变换部10的内部存储的前帧的信号进行重叠处理之后,作为进行了噪音抑制的输入信号y^(t)而输出到输出端子11。输出端子11输出该进行了噪音抑制的输入信号y^(t)。
接着,使用图4说明噪音抑制量生成部7的运算方法。图4所示的噪音抑制量生成部7具备事后SNR(信噪比)推定部71、事前SNR推定部72、噪音抑制量计算部73、以及延迟部74。下面根据在T.Lotter、P.Vary、“Speech Enhancement by MAP Spectral AmplitudeEstimation Using a Super-Gaussian Speech Model”(EURASIPJournal on Applied Signal Processing,Vol.2005,No.7,pp.1110-1126,July 2005)中记载的运算方法(最大事后概率法:Maximum APosteriori;MAP法),说明噪音抑制量的运算方法。
事后SNR推定部71使用从频带代表分量生成部6输入的代表功率谱Yd(z)和从噪音谱推定部4输入的噪音谱N(k),根据下式(5)推定每个子带的事后SNR(a posteriori SNR)γ^(n,z)。但是,噪音谱N(z)为了与子带对应起来而例如设为按照下式(6)求出的每个子带的平均值。
其中,z=0,…,18
其中,z=0,…,18
事前SNR推定部72使用从事后SNR推定部71输入的每个子带的事后SNRγ^(n,z)和通过后述的延迟部74而得到的前帧的噪音抑制量G(n-1,z),根据下式(7)递归地推定事前SNR(a priori SNR)ξ^(n,k)。此外,事前SNR推定部72在内部存储器等存储单元中存储前帧的事后SNRγ^(n-1,z),用于当前帧中的计算。
这里,α是具有0<α<1的值的规定的遗忘系数(oblivioncoefficient),能够选择α=0.98而作为优选的值,但也可以根据所输入的声音以及噪音的形态而适当地进行调整。
噪音抑制量计算部73使用从事前SNR推定部72输入的事前SNRξ^(n,z)和从事后SNR推定部71输入的事后SNRγ^(n,z),根据下式(8)计算每个子带的噪音抑制量G(z,n)而输出到频带复用部8,并且也输出到延迟部74。
其中,
这里,v以及μ是规定的系数,在与上述的最大事后概率法相关的文献中例示出v=0.126、μ=1.74而作为优选的值。当然也可以是该值以外的值,可以根据输入信号以及噪音的形态而适当地进行调整。
延迟部74在内部保持后述的噪音抑制量计算部73所输出的前帧的每个子带的噪音抑制量G(n-1,z),并发送给事前SNR推定部72以便应用于上式(7)的当前帧的计算。
通过以上,根据本实施方式1,噪音抑制装置构成为具备:时间/频率变换部2,将从输入端子1输入的时域的输入信号变换为作为频域的信号的功率谱和相位谱;噪音谱推定部4,推定重叠在输入信号中的噪音谱;频带分离部5,将时间/频率变换部2进行了变换的多个功率谱汇总到子带;频带代表分量生成部6,将子带内的多个功率谱中的具有最大值的功率谱设为代表功率谱;噪音抑制量生成部7,使用代表功率谱和噪音谱来计算出子带的噪音抑制量;频带复用部8,将每个子带的噪音抑制量针对每个谱进行变换;噪音抑制部9,针对每个谱,根据噪音抑制量来抑制功率谱的振幅;以及频率/时间变换部10,将相位谱和由噪音抑制部9进行了振幅抑制的功率谱变换为时域的信号而从输出端子11输出。因此,使用代表功率谱来计算噪音抑制量,因此能够降低处理量。另外,在该代表功率谱中使用组内的值大的功率谱,因此在噪音抑制量计算时输入信号的声音分量不会被评价得过小,其结果,不会抑制声音信号而能够进行高品质的噪音抑制。
另外,根据本实施方式1,噪音抑制装置构成为具备计算表示输入信号是否像声音的程度的声音相似度评价值的声音相似度推定部3,频带代表分量生成部6根据声音相似度评价值,在输入信号的声音相似度的程度高的情况下将子带内的具有最大值的功率谱设为代表功率谱,在该输入信号的声音相似度的程度低的情况下求出子带内的多个功率谱的平均值而生成代表功率谱。因此,能够抑制错误的代表功率谱的生成,能够实现高品质的噪音抑制。
此外,在上述实施方式1中,在事后SNR推定部71中构成为为了使噪音谱与每个子带对应起来而根据式(6)来求出平均值,但是不限于此,例如也可以构成为使生成代表功率谱Yd(z)时所选择的与值最大的功率谱Y(k)的谱编号k相对应的噪音谱N(k)对应起来。在该结构的情况下,特别是在频带分割宽度窄的情况下,事后SNR的推定精度得到提高,能够进行更高品质的噪音抑制。
另外,在上述实施方式1中,在频带复用部8中构成为将每个子带的噪音抑制量G(z)复制到属于同一子带的每个谱的噪音抑制量G(k)中从而进行展开,但是不限于此,例如也可以使用相邻的子带的噪音抑制量G(z-1)、G(z+1),如下式(9)那样求出加权平均。
根据该式(9)求出的左边的值表示属于子带编号z的每个谱的噪音抑制量G(k),谱编号k表示从图2的表中的f1(z)到f2(z)为止进行变化。另外,右边表示对子带编号z的分量进行0.5的加权、对相邻的子带编号z-1、z+1的分量分别进行0.25的加权,而且表示权重对应于从谱编号k的f1(z)至f2(z)的变化而连续地变化。L表示属于子带编号z的谱编号k的个数。通过这样取加权平均,特别是在频带分割宽度宽的情况下噪音抑制量G(k)的频率方向的变化稳定,能够进行更高品质的噪音抑制。
另外,在上述实施方式1中,频带代表分量生成部6在生成代表功率谱时选择了值最大的功率谱,但是不限于此,例如,也可以设在子带的边界附近存在值最大的功率谱,优先选择属于子带的中央附近的频率、且值第2大的功率谱,或者在使用上式(3)的功率谱搜寻时在检测出超过了规定的阈值的功率谱的时刻结束搜寻而设为代表功率谱。
通过优先选择属于子带中央附近的频率的功率谱,具有在频带分割宽度宽的情况下事后SNR的推定精度得到提高的效果。另外,通过在能够检测出超过了规定的阈值的功率谱的时刻结束搜寻,具有能够削减代表功率谱搜寻所需的处理量的效果。
另外,在本实施方式1的声音相似度推定部3中,设为使用输入信号的自相关系数的最大值作为声音相似度评价值的结构,但是不限于此,例如,除了上述的谱熵等公知的方案之外,也可以设为将作为对时域的输入信号进行分析而得到的结果的线性预测残差功率等组合使用的结构。
实施方式2.
在上述实施方式1中,在频带代表分量生成部6中将在同一子带内值最大的功率谱选择为代表功率谱,但是例如也可以在同一子带内按照值从大到小的顺序重新排列功率谱,并从值大的功率谱附加大的权重来求出加权平均,将其值作为代表功率谱。
另外,例如,也可以使用中位数(median)等的统计性方案,将中央值设为代表功率谱。
通过以上,根据本实施方式2,频带代表分量生成部6构成为将从子带内的多个功率谱中的值大的功率谱依次附加大的权重而求出的加权平均,设为代表功率谱。因此,在高噪音时声音相似度评价值的分析精度下降,或在声音分量和噪音分量的识别困难时能够稳定地进行代表功率谱的生成,能够进行高品质的噪音抑制。
另外,代替加权平均而使用中位线等的统计性方案也能够得到相同的效果。
实施方式3.
在上述实施方式1中,在频带代表分量生成部6中构成为进行切换控制,以使在声音相似度评价值超过阈值时将同一子带内的具有最大值的功率谱选择为代表功率谱,另一方面如果小于阈值则从同一子带内的各功率谱求出平均值而生成具有该平均值的代表功率谱,但是例如也可以如下式(10)那样,以声音相似度评价值VAD为加权系数,将最大值与平均值的加权和设为代表功率谱。
其中,0≤VAD≤1
在该式(10)中,能够根据声音相似度评价值VAD,连续地切换最大值与平均值。在输入信号为声音的可能性高的情况下,声音相似度评价值VAD变大,因此代表功率谱在最大值的情况下的权重变大。另一方面,在噪音的可能性高的情况下、声音相似度评价值VAD变小,因此平均值的情况下的权重变大。
如以上那样,根据本实施方式3,频带代表分量生成部6构成为将声音相似度评价值用于加权系数而计算出子带内的多个功率谱的最大值与平均值的加权和,并设为代表功率谱。因此,在声音分量与噪音分量的识别困难时也能够稳定地进行代表功率谱的生成,能够进行高品质的噪音抑制。
实施方式4.
在上述实施方式1中,在频带代表分量生成部6中根据声音相似度评价值进行全子带的代表功率谱生成的切换控制,但是也可以针对每个子带进行切换控制。例如,频带代表分量生成部6计算子带内的功率谱的方差,在方差超过规定的阈值的情况下,判断为该子带包括声音分量,切换到选择最大值作为代表功率谱的方法。另一方面,在方差小于或等于规定的阈值的情况下,切换到计算平均值作为代表功率谱的方法。
此外,方差是用于检测子带内的功率谱的值的变动状态的一个方法,除了方差以外,只要是能够检测变动状态的方法就可以使用其它的分析方法。
通过以上,根据本实施方式4,频带代表分量生成部6构成为针对每个子带切换代表功率谱的生成方法,因此能够进一步提高代表功率谱的生成精度,能够进行更高品质的噪音抑制。
在以上的全部的实施方式1~4中,作为噪音抑制量生成部7的噪音抑制的方法而使用了最大事后概率法(MAP法),但是不限于该方法,能够将其它的方法应用于噪音抑制量生成部7。例如,有在非专利文献1中详细叙述的最小均方误差短时间谱振幅法、或者S.F.Boll、“Suppression of Acoustic Noise in Speech Using Spectral Subtraction”(IEEE Trans.on ASSP,Vol.27,No.2,pp.113-120,Apr.1979)中详细叙述的谱减法等。
另外,在以上的实施方式1~4中,如图2所示那样作为频带分离部5的频带分割的例子而说明了窄带电话(0~4000Hz)的情况,但是噪音抑制装置的噪音抑制对象不限于窄带电话声音,例如也可以是0~8000Hz等的宽带电话声音或者音响信号。
另外,在上述实施方式1~4中,进行了噪音抑制的输入信号y^(t)以数字数据形式送出到声音编码装置、声音识别装置、声音储存装置、免提通话装置等各种声音音响处理装置,但是实施方式1~4的噪音抑制装置也能够单独或者与上述的其它装置一起通过DSP(数字信号处理器)而实现,或作为软件程序来执行而实现。程序既可以存储在执行软件程序的计算机的存储装置中,也可以是通过CD-ROM等存储介质来分发的形式。另外,还能够通过网络来提供程序。另外,还能够在输出端子11的后级对进行了噪音抑制的输入信号y^(t)进行D/A(数字/模拟)变换,并由放大装置放大而从扬声器等直接作为声音信号而输出。
产业上的可利用性
如以上那样,与本发明有关的噪音抑制装置以少的处理量进行高品质的噪音抑制,因此适合用于导入了声音通信、声音储存、声音识别系统的汽车导航、便携式电话、对讲机等声音通信系统、免提通话系统、TV会议系统、监视系统等的音质改善、以及声音识别系统的识别率的提高。
Claims (7)
1.一种噪音抑制装置,具备:
时间/频率变换部,将时域的输入信号变换为作为频域的信号的功率谱和相位谱;
噪音谱推定部,推定重叠于所述输入信号的噪音谱;
噪音抑制量生成部,使用所述功率谱和所述噪音谱来计算噪音抑制量;
噪音抑制部,根据所述噪音抑制量来抑制所述功率谱的振幅;以及
频率/时间变换部,将所述相位谱和由所述噪音抑制部进行了振幅抑制的所述功率谱变换为时域的信号,
所述噪音抑制装置的特征在于,
具备代表分量生成部,该代表分量生成部将所述时间/频率变换部所变换的多个功率谱汇总为1组,优先选择该组内的所述多个功率谱中的值大的功率谱而设为代表功率谱,
所述噪音抑制量生成部使用所述代表功率谱来计算出噪音抑制量。
2.根据权利要求1所述的噪音抑制装置,其特征在于,
具备声音相似度推定部,该声音相似度推定部计算表示输入信号是否像声音的程度的声音相似度评价值,
代表分量生成部生成基于所述声音相似度评价值的代表功率谱。
3.根据权利要求2所述的噪音抑制装置,其特征在于,
代表分量生成部根据声音相似度评价值,在输入信号的声音相似度的程度高的情况下优先选择组内的值大的功率谱而生成代表功率谱,在该输入信号的声音相似度的程度低的情况下求出该组内的多个功率谱的平均值而生成代表功率谱。
4.根据权利要求1所述的噪音抑制装置,其特征在于,
代表功率谱是组内的多个功率谱中的具有最大值的功率谱。
5.根据权利要求1所述的噪音抑制装置,其特征在于,
代表功率谱是从组内的多个功率谱中的值大的功率谱起依次附加大的权重而求出的加权平均。
6.根据权利要求2所述的噪音抑制装置,其特征在于,
代表功率谱是将声音相似度评价值用于加权系数的、组内的多个功率谱的最大值与平均值的加权和。
7.根据权利要求1所述的噪音抑制装置,其特征在于,
代表分量生成部针对每个组切换代表功率谱的生成方法。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/JP2010/001649 WO2011111091A1 (ja) | 2010-03-09 | 2010-03-09 | 雑音抑圧装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN102792373A true CN102792373A (zh) | 2012-11-21 |
CN102792373B CN102792373B (zh) | 2014-05-07 |
Family
ID=44562942
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201080065245.2A Active CN102792373B (zh) | 2010-03-09 | 2010-03-09 | 噪音抑制装置 |
Country Status (5)
Country | Link |
---|---|
US (1) | US8989403B2 (zh) |
EP (1) | EP2546831B1 (zh) |
JP (1) | JP5528538B2 (zh) |
CN (1) | CN102792373B (zh) |
WO (1) | WO2011111091A1 (zh) |
Cited By (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105812995A (zh) * | 2016-03-09 | 2016-07-27 | 西安航空学院 | 一种噪音滤除方法和装置 |
CN106332266A (zh) * | 2016-08-23 | 2017-01-11 | 哈尔滨海能达科技有限公司 | 一种数据处理的方法及相关设备 |
CN106356072A (zh) * | 2016-09-26 | 2017-01-25 | 郑州云海信息技术有限公司 | 一种电子降噪方法及其系统 |
CN106653045A (zh) * | 2015-11-02 | 2017-05-10 | It魔力有限公司 | 从音频信号提取诊断信号的方法及诊断装置 |
CN106899869A (zh) * | 2015-12-25 | 2017-06-27 | 小米科技有限责任公司 | 调整电子设备音量的方法、装置及系统 |
CN107393533A (zh) * | 2017-07-28 | 2017-11-24 | 韦德永 | 一种通过语音控制跑步机的装置 |
CN107430847A (zh) * | 2015-03-24 | 2017-12-01 | 三菱电机株式会社 | 有源振动噪声控制装置 |
CN112309413A (zh) * | 2019-07-31 | 2021-02-02 | 株式会社电装天 | 降噪装置 |
CN114974288A (zh) * | 2022-05-12 | 2022-08-30 | 安克创新科技股份有限公司 | 风噪检测方法、装置及设备 |
Families Citing this family (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103109320B (zh) | 2010-09-21 | 2015-08-05 | 三菱电机株式会社 | 噪声抑制装置 |
US9368097B2 (en) * | 2011-11-02 | 2016-06-14 | Mitsubishi Electric Corporation | Noise suppression device |
JP2013137361A (ja) * | 2011-12-28 | 2013-07-11 | Pioneer Electronic Corp | ノイズレベル推定装置、ノイズ低減装置及びノイズレベル推定方法 |
JP2013148724A (ja) * | 2012-01-19 | 2013-08-01 | Sony Corp | 雑音抑圧装置、雑音抑圧方法およびプログラム |
JP6361156B2 (ja) * | 2014-02-10 | 2018-07-25 | 沖電気工業株式会社 | 雑音推定装置、方法及びプログラム |
WO2015130283A1 (en) * | 2014-02-27 | 2015-09-03 | Nuance Communications, Inc. | Methods and apparatus for adaptive gain control in a communication system |
US10149047B2 (en) * | 2014-06-18 | 2018-12-04 | Cirrus Logic Inc. | Multi-aural MMSE analysis techniques for clarifying audio signals |
JP6501259B2 (ja) * | 2015-08-04 | 2019-04-17 | 本田技研工業株式会社 | 音声処理装置及び音声処理方法 |
CN106571146B (zh) | 2015-10-13 | 2019-10-15 | 阿里巴巴集团控股有限公司 | 噪音信号确定方法、语音去噪方法及装置 |
JP6186040B2 (ja) * | 2016-04-28 | 2017-08-23 | パイオニア株式会社 | ノイズレベル推定装置、ノイズ低減装置及びノイズレベル推定方法 |
EP3324407A1 (en) * | 2016-11-17 | 2018-05-23 | Fraunhofer Gesellschaft zur Förderung der Angewand | Apparatus and method for decomposing an audio signal using a ratio as a separation characteristic |
EP3324406A1 (en) | 2016-11-17 | 2018-05-23 | Fraunhofer Gesellschaft zur Förderung der Angewand | Apparatus and method for decomposing an audio signal using a variable threshold |
JP6892598B2 (ja) * | 2017-06-16 | 2021-06-23 | アイコム株式会社 | ノイズ抑圧回路、ノイズ抑圧方法、および、プログラム |
GB2580057A (en) * | 2018-12-20 | 2020-07-15 | Nokia Technologies Oy | Apparatus, methods and computer programs for controlling noise reduction |
EP4060662A4 (en) * | 2019-12-13 | 2023-03-08 | Mitsubishi Electric Corporation | INFORMATION PROCESSING DEVICE, DETECTION METHOD AND DETECTION PROGRAM |
CN112309418B (zh) * | 2020-10-30 | 2023-06-27 | 出门问问(苏州)信息科技有限公司 | 一种抑制风噪声的方法及装置 |
CN115881146A (zh) * | 2021-08-05 | 2023-03-31 | 哈曼国际工业有限公司 | 用于动态语音增强的方法及系统 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5479560A (en) * | 1992-10-30 | 1995-12-26 | Technology Research Association Of Medical And Welfare Apparatus | Formant detecting device and speech processing apparatus |
CN1300417A (zh) * | 1999-04-19 | 2001-06-20 | 摩托罗拉公司 | 使用外部语音活动检测的噪声抑制 |
JP2004272129A (ja) * | 2003-03-12 | 2004-09-30 | Clarion Co Ltd | 音源選択方法及び音源選択装置 |
US20070156399A1 (en) * | 2005-12-29 | 2007-07-05 | Fujitsu Limited | Noise reducer, noise reducing method, and recording medium |
CN101079266A (zh) * | 2006-05-23 | 2007-11-28 | 中兴通讯股份有限公司 | 基于多统计模型和最小均方误差实现背景噪声抑制的方法 |
US20100056063A1 (en) * | 2008-08-29 | 2010-03-04 | Kabushiki Kaisha Toshiba | Signal correction device |
Family Cites Families (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH04172530A (ja) | 1990-11-06 | 1992-06-19 | Kobe Nippon Denki Software Kk | 画面データ入力方式 |
US6766292B1 (en) * | 2000-03-28 | 2004-07-20 | Tellabs Operations, Inc. | Relative noise ratio weighting techniques for adaptive noise cancellation |
JP2002140100A (ja) * | 2000-11-02 | 2002-05-17 | Matsushita Electric Ind Co Ltd | 騒音抑圧装置 |
EP2239733B1 (en) | 2001-03-28 | 2019-08-21 | Mitsubishi Denki Kabushiki Kaisha | Noise suppression method |
EP1253581B1 (en) * | 2001-04-27 | 2004-06-30 | CSEM Centre Suisse d'Electronique et de Microtechnique S.A. - Recherche et Développement | Method and system for speech enhancement in a noisy environment |
JP4533126B2 (ja) * | 2004-12-24 | 2010-09-01 | 日本電信電話株式会社 | 近接音分離収音方法、近接音分離収音装置、近接音分離収音プログラム、記録媒体 |
DE602006008481D1 (de) * | 2005-05-17 | 2009-09-24 | Univ Waseda | Rauschunterdrückungsverfahren und -vorrichtungen |
KR100927897B1 (ko) | 2005-09-02 | 2009-11-23 | 닛본 덴끼 가부시끼가이샤 | 잡음억제방법과 장치, 및 컴퓨터프로그램 |
JP5018193B2 (ja) * | 2007-04-06 | 2012-09-05 | ヤマハ株式会社 | 雑音抑圧装置およびプログラム |
JP5483000B2 (ja) * | 2007-09-19 | 2014-05-07 | 日本電気株式会社 | 雑音抑圧装置、その方法及びプログラム |
EP2362389B1 (en) * | 2008-11-04 | 2014-03-26 | Mitsubishi Electric Corporation | Noise suppressor |
-
2010
- 2010-03-09 EP EP10847326.5A patent/EP2546831B1/en active Active
- 2010-03-09 CN CN201080065245.2A patent/CN102792373B/zh active Active
- 2010-03-09 JP JP2012504136A patent/JP5528538B2/ja active Active
- 2010-03-09 WO PCT/JP2010/001649 patent/WO2011111091A1/ja active Application Filing
- 2010-03-09 US US13/581,544 patent/US8989403B2/en not_active Expired - Fee Related
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5479560A (en) * | 1992-10-30 | 1995-12-26 | Technology Research Association Of Medical And Welfare Apparatus | Formant detecting device and speech processing apparatus |
CN1300417A (zh) * | 1999-04-19 | 2001-06-20 | 摩托罗拉公司 | 使用外部语音活动检测的噪声抑制 |
JP2004272129A (ja) * | 2003-03-12 | 2004-09-30 | Clarion Co Ltd | 音源選択方法及び音源選択装置 |
US20070156399A1 (en) * | 2005-12-29 | 2007-07-05 | Fujitsu Limited | Noise reducer, noise reducing method, and recording medium |
CN101079266A (zh) * | 2006-05-23 | 2007-11-28 | 中兴通讯股份有限公司 | 基于多统计模型和最小均方误差实现背景噪声抑制的方法 |
US20100056063A1 (en) * | 2008-08-29 | 2010-03-04 | Kabushiki Kaisha Toshiba | Signal correction device |
Cited By (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107430847A (zh) * | 2015-03-24 | 2017-12-01 | 三菱电机株式会社 | 有源振动噪声控制装置 |
CN106653045A (zh) * | 2015-11-02 | 2017-05-10 | It魔力有限公司 | 从音频信号提取诊断信号的方法及诊断装置 |
CN106899869A (zh) * | 2015-12-25 | 2017-06-27 | 小米科技有限责任公司 | 调整电子设备音量的方法、装置及系统 |
CN105812995A (zh) * | 2016-03-09 | 2016-07-27 | 西安航空学院 | 一种噪音滤除方法和装置 |
CN105812995B (zh) * | 2016-03-09 | 2018-11-09 | 西安航空学院 | 一种噪音滤除方法和装置 |
CN106332266A (zh) * | 2016-08-23 | 2017-01-11 | 哈尔滨海能达科技有限公司 | 一种数据处理的方法及相关设备 |
CN106332266B (zh) * | 2016-08-23 | 2019-11-19 | 哈尔滨海能达科技有限公司 | 一种数据处理的方法及相关设备 |
CN106356072A (zh) * | 2016-09-26 | 2017-01-25 | 郑州云海信息技术有限公司 | 一种电子降噪方法及其系统 |
CN107393533A (zh) * | 2017-07-28 | 2017-11-24 | 韦德永 | 一种通过语音控制跑步机的装置 |
CN112309413A (zh) * | 2019-07-31 | 2021-02-02 | 株式会社电装天 | 降噪装置 |
CN114974288A (zh) * | 2022-05-12 | 2022-08-30 | 安克创新科技股份有限公司 | 风噪检测方法、装置及设备 |
Also Published As
Publication number | Publication date |
---|---|
EP2546831A4 (en) | 2014-04-30 |
US8989403B2 (en) | 2015-03-24 |
US20130003987A1 (en) | 2013-01-03 |
EP2546831B1 (en) | 2020-01-15 |
CN102792373B (zh) | 2014-05-07 |
WO2011111091A1 (ja) | 2011-09-15 |
JP5528538B2 (ja) | 2014-06-25 |
EP2546831A1 (en) | 2013-01-16 |
JPWO2011111091A1 (ja) | 2013-06-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN102792373B (zh) | 噪音抑制装置 | |
JP5127754B2 (ja) | 信号処理装置 | |
CN103718241B (zh) | 噪音抑制装置 | |
EP2151822B1 (en) | Apparatus and method for processing and audio signal for speech enhancement using a feature extraction | |
CN103109320B (zh) | 噪声抑制装置 | |
JP4520732B2 (ja) | 雑音低減装置、および低減方法 | |
CN104067339B (zh) | 噪音抑制装置 | |
US8880396B1 (en) | Spectrum reconstruction for automatic speech recognition | |
CN102356427B (zh) | 噪声抑制装置 | |
EP2265039B1 (en) | Hearing aid | |
Kim et al. | Nonlinear enhancement of onset for robust speech recognition. | |
US20100067710A1 (en) | Noise spectrum tracking in noisy acoustical signals | |
EP3074975B1 (en) | Method of operating a hearing aid system and a hearing aid system | |
JP2013534651A (ja) | 計算聴覚シーン解析に基づくモノラルノイズ抑制 | |
JP2012189907A (ja) | 音声判別装置、音声判別方法および音声判別プログラム | |
JP4448464B2 (ja) | 雑音低減方法、装置、プログラム及び記録媒体 | |
JP5443547B2 (ja) | 信号処理装置 | |
JP2014021307A (ja) | 音声信号復元装置および音声信号復元方法 | |
Rao et al. | Speech enhancement using sub-band cross-correlation compensated Wiener filter combined with harmonic regeneration | |
JP2006178333A (ja) | 近接音分離収音方法、近接音分離収音装置、近接音分離収音プログラム、記録媒体 | |
Saleem et al. | Machine Learning Approach for Improving the Intelligibility of Noisy Speech | |
JP2017009657A (ja) | 音声強調装置、および音声強調方法 | |
WO2020039597A1 (ja) | 信号処理装置、音声通話端末、信号処理方法および信号処理プログラム | |
Upadhyay et al. | A perceptually motivated stationary wavelet packet filter-bank utilizing improved spectral over-subtraction algorithm for enhancing speech in non-stationary environments | |
Cheikh-Rouhou et al. | DUAL-CHANNEL NOISE REDUCTION FOR A VERY SMALL MICROPHONE ARRANGEMENT |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant |