JP2010193451A - 残響抑圧装置及び残響抑圧方法 - Google Patents
残響抑圧装置及び残響抑圧方法 Download PDFInfo
- Publication number
- JP2010193451A JP2010193451A JP2010029501A JP2010029501A JP2010193451A JP 2010193451 A JP2010193451 A JP 2010193451A JP 2010029501 A JP2010029501 A JP 2010029501A JP 2010029501 A JP2010029501 A JP 2010029501A JP 2010193451 A JP2010193451 A JP 2010193451A
- Authority
- JP
- Japan
- Prior art keywords
- dereverberation
- delay
- sound source
- sound
- source direction
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims description 48
- 238000012545 processing Methods 0.000 claims abstract description 68
- 230000003111 delayed effect Effects 0.000 claims abstract description 11
- 230000001629 suppression Effects 0.000 claims description 46
- 230000005236 sound signal Effects 0.000 claims description 3
- 230000004044 response Effects 0.000 description 19
- 230000008569 process Effects 0.000 description 16
- 235000006679 Mentha X verticillata Nutrition 0.000 description 12
- 235000002899 Mentha suaveolens Nutrition 0.000 description 12
- 235000001636 Mentha x rotundifolia Nutrition 0.000 description 12
- 239000011159 matrix material Substances 0.000 description 12
- 238000010586 diagram Methods 0.000 description 11
- 238000004364 calculation method Methods 0.000 description 10
- 238000011156 evaluation Methods 0.000 description 10
- 238000002474 experimental method Methods 0.000 description 10
- 230000005540 biological transmission Effects 0.000 description 7
- 230000003044 adaptive effect Effects 0.000 description 5
- 238000006243 chemical reaction Methods 0.000 description 5
- 230000006870 function Effects 0.000 description 5
- 238000005259 measurement Methods 0.000 description 5
- 238000012546 transfer Methods 0.000 description 5
- 230000007423 decrease Effects 0.000 description 4
- 238000001914 filtration Methods 0.000 description 4
- 239000013598 vector Substances 0.000 description 4
- 238000007796 conventional method Methods 0.000 description 2
- 238000013461 design Methods 0.000 description 2
- 230000009467 reduction Effects 0.000 description 2
- 230000002087 whitening effect Effects 0.000 description 2
- 230000008859 change Effects 0.000 description 1
- 238000002939 conjugate gradient method Methods 0.000 description 1
- 238000005034 decoration Methods 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 238000009472 formulation Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 238000010606 normalization Methods 0.000 description 1
- 238000007781 pre-processing Methods 0.000 description 1
- 230000000644 propagated effect Effects 0.000 description 1
- 230000002441 reversible effect Effects 0.000 description 1
- 238000002945 steepest descent method Methods 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
- 238000000844 transformation Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R27/00—Public address systems
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R1/00—Details of transducers, loudspeakers or microphones
- H04R1/20—Arrangements for obtaining desired frequency or directional characteristics
- H04R1/32—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only
- H04R1/40—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers
- H04R1/406—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers microphones
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R2227/00—Details of public address [PA] systems covered by H04R27/00 but not provided for in any of its subgroups
- H04R2227/009—Signal processing in [PA] systems to enhance the speech intelligibility
Landscapes
- Health & Medical Sciences (AREA)
- Otolaryngology (AREA)
- Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Acoustics & Sound (AREA)
- Signal Processing (AREA)
- Circuit For Audible Band Transducer (AREA)
- Obtaining Desirable Characteristics In Audible-Bandwidth Transducers (AREA)
Abstract
【解決手段】複数の音響信号のうち少なくとも一つの音響信号を所定の遅延時間だけ遅らせた遅延付加済信号を生成する遅延付加手段41と、前記遅延付加済信号を用いて残響抑圧処理を行う残響抑圧処理手段23jと、を備える。これにより、代表チャネル以外の入力信号に遅延を付加することにより、予め決定した代表チャネルを、音響信号が最初に到達するチャネルに設定することができる。
【選択図】図4
Description
チャネル選択部(CS)22jは、A/D変換部14から入力された音声信号xj(jは1からLまでの整数)から、数チャネルを選択する。各チャネル選択部22jは、選択したチャネルを残響抑圧処理部(DM)23j(jは1からLまでの整数)へ出力する。
残響抑圧処理部(DM)23jは、入力された信号に残響抑圧処理を行い、残響抑圧された信号yj(jは1からNまでの整数)をRAM16に出力し、当該残響抑圧された信号yjをRAM16に保存する。
図2に示すように、各チャネル選択部22jはN個の入力から、所定の個数のチャネルを選択し、選択したチャネルを残響抑圧処理部23jに出力する。
H =[h1,…, hN]T ...(04)
hj=[hj(0) ,…, hj(L−1)]T ...(06)
(a)音源は白色信号(音声などの有色音源は、白色化処理を加えることで利用可能)
(b)音源から発せられた音が最初に到達するチャネル(初期到達チャネル) は既知
フィルタ処理部62は、入力された信号x(k)に逆フィルタH(k)をかけ、逆フィルタを掛けた信号y(k)を逆フィルタ算出部63に出力し、RAM16に書きこむ。
フィルタ算出部63は、チャネル選択部22jまたは遅延付加部41(但し、遅延付加部41がある場合に限る)から入力された信号x(k)と、逆フィルタ処理部62から入力された信号y(k)から、次のステップの逆フィルタH(k+1)を算出し、逆フィルタ処理部62に出力する。
J′(k)=−R(k)(D−R(k)H(k)) ...(11)
RDAIF(Real−time DAIF)はDAIFに対して以下の2つの仮定を置くことで、上式(11)の行列演算をベクトル演算に変更し、使用メモリと演算量を大幅に低減した手法である。RDAIFでは、下記式(12)と(13)の仮定を設ける。
R(k)H(k)=E{x(k)xT(k)}H(k)≒E{x(k)yT(k)} ...(13)
伝達系のインパルス応答の利用時には、実測したインパルス応答を2048サンプル(667[ms])で切り出した波形を用いた。図8bは、伝達系のインパルス応答波形の初期部の拡大図である。図8bは、横軸が時間、縦軸が振幅であり、濃淡を変えて全8チャネルの波形を重ねて表示したものである。どのチャネルも500[ms]程度で収束する波形となっている。
評価値は、残響抑圧処理前と処理後のLD5の比を残響抑圧量(Reverberation Reduction Rate、以下、RRRと称する) [dB]として、次式で定義する。
次に、設計した残響抑圧フィルタの評価の手順として、元のインパルス応答gに設計した残響抑圧フィルタhを畳み込む(ステップ S103)。次に、元のインパルス応答gと残響抑圧されたインパルス応答の畳み込みg*hを用いて、それぞれ正規化した初期反射エネルギーLD5を算出し、残響抑圧量RRRを算出する(ステップ S104)。
図12は、チャネルの組み合わせと残響抑圧量の関係を示している。横軸はマイクロホンのチャネルの組み合わせの通し番号、縦軸はRRRである。なお通し番号は,残響抑圧量(縦軸の値)が大きい順に並べている。図中の水平破線は、全8チャネルを利用した場合(従来法)の性能である。図12より、チャネルの組み合わせによって、FFT−CG−SBM121では12[dB]以上、RDAIF122では4[dB]以上の差があることがわかる。
本実施例では、最も離れたマイクロホン間の距離を伝播するのに要する時間よりも長い時間を遅延時間に設定する。遅延時間の算出方法は以下の通りである。マイクは直径0.3[m]の円状に配置されているため、最大マイク間距離は0.3[m]である。音速が約300[m/s]であることを考慮すると、最大マイク間距離を音が伝搬するのにかかる時間は、0.3[m]/300[m/s]=0.001[s]=1[ms]より、約1[ms]である。マイク間で信号の開始時刻が同時にならないようにするために、1[ms]に微小な遅延時間0.5[ms]を加えて、代表信号以外の2つの信号のうち1つの信号に与える遅延時間を1.5[ms]とする。また、残ったもう1つの信号に与える遅延時間をその2倍の3[ms]とする。なお、理論上は、初期到達チャネル以外の2つの信号に与える遅延時間は同じ遅延時間でも良い。
残響抑圧処理部143は、遅延付加部142から入力された遅延付加済信号に逆フィルタをかけて残響を抑圧した残響抑圧信号を算出し、当該残響抑圧信号をRAM16に出力し、当該残響抑圧信号をRAM16に保存する。
遅延付加部142は、設定する遅延時間tを、以下の式(17)から算出する。
(1)θが不明の時には、マイク間の距離が最大になるように、上式(17)のθを0度に設定する。
(2)θの範囲がθ≧θminというように限定される場合には、上式(17)のθをθminに設定する。
(3)音の到来方向を、音源方向推定部141が推定できる場合には、上式(17)のθを推定された角度θestに設定する。
12 電子制御ユニット
13 ROM
14 A/D変換部
15 演算処理部
16 RAM
221、22j、22L チャネル選択部(信号選択手段)
231、23j、23L 残響抑圧処理部(残響抑圧処理手段)
41 遅延付加部(遅延付加手段)
62 逆フィルタ処理部
63 逆フィルタ算出部
141 音源方向推定部(音源方向推定手段)
142 遅延付加部(遅延付加手段)
143 残響抑圧処理部(残響抑圧処理手段)
151 基準マイクロホン
152 対象マイクロホン
153 音源
Claims (5)
- 複数の音響信号のうち少なくとも一つの音響信号を所定の遅延時間だけ遅らせた遅延付加済信号を生成する遅延付加手段と、
前記遅延付加済信号を用いて残響抑圧処理を行う残響抑圧処理手段と、
を備えることを特徴とする残響抑圧装置。 - 音響信号を収集する複数の集音装置を有し、
前記遅延付加手段は、前記集音装置の間の距離に基づいて前記遅延時間を算出することを特徴とする請求項1に記載の残響抑圧装置。 - 音源方向を推定する音源方向推定手段を更に備え、
前記遅延付加手段は、前記音源方向推定手段によって推定された音源方向に基づいて前記遅延時間を算出することを特徴とする請求項1に記載の残響抑圧装置。 - 音響信号を収集する複数の集音装置と、
音源方向を推定する音源方向推定手段と、
を更に備え、
前記遅延付加手段は、前記集音装置の間の距離と、前記音源方向推定手段によって推定された音源方向とに基づいて前記遅延時間を算出することを特徴とする請求項1に記載の残響抑圧装置。 - 音響信号が入力される複数の音響信号入力手順と、
前記複数の音響信号入力手順のうち少なくとも一つの前記音響信号入力手順に入力される音響信号を所定の遅延時間だけ遅らせた遅延付加済信号を生成する遅延付加手順と、
前記遅延付加済信号を用いて残響抑圧処理を行う残響フィルタ処理手順と、
を有することを特徴とする残響抑圧方法。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US15235509P | 2009-02-13 | 2009-02-13 | |
US61/152,355 | 2009-02-13 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2010193451A true JP2010193451A (ja) | 2010-09-02 |
JP5530741B2 JP5530741B2 (ja) | 2014-06-25 |
Family
ID=42559923
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2010029500A Expired - Fee Related JP5620689B2 (ja) | 2009-02-13 | 2010-02-12 | 残響抑圧装置及び残響抑圧方法 |
JP2010029501A Expired - Fee Related JP5530741B2 (ja) | 2009-02-13 | 2010-02-12 | 残響抑圧装置及び残響抑圧方法 |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2010029500A Expired - Fee Related JP5620689B2 (ja) | 2009-02-13 | 2010-02-12 | 残響抑圧装置及び残響抑圧方法 |
Country Status (2)
Country | Link |
---|---|
US (1) | US8867754B2 (ja) |
JP (2) | JP5620689B2 (ja) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2010282193A (ja) * | 2009-06-04 | 2010-12-16 | Honda Motor Co Ltd | 残響抑圧装置、及び残響抑圧方法 |
JP2014502109A (ja) * | 2010-12-03 | 2014-01-23 | フラウンホッファー−ゲゼルシャフト ツァ フェルダールング デァ アンゲヴァンテン フォアシュンク エー.ファオ | 到来方向推定から幾何学的な情報の抽出による音取得 |
Families Citing this family (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9406310B2 (en) * | 2012-01-06 | 2016-08-02 | Nissan North America, Inc. | Vehicle voice interface system calibration method |
US10032461B2 (en) | 2013-02-26 | 2018-07-24 | Koninklijke Philips N.V. | Method and apparatus for generating a speech signal |
US9520140B2 (en) | 2013-04-10 | 2016-12-13 | Dolby Laboratories Licensing Corporation | Speech dereverberation methods, devices and systems |
JP5841986B2 (ja) * | 2013-09-26 | 2016-01-13 | 本田技研工業株式会社 | 音声処理装置、音声処理方法、及び音声処理プログラム |
US9390723B1 (en) * | 2014-12-11 | 2016-07-12 | Amazon Technologies, Inc. | Efficient dereverberation in networked audio systems |
US9881630B2 (en) * | 2015-12-30 | 2018-01-30 | Google Llc | Acoustic keystroke transient canceler for speech communication terminals using a semi-blind adaptive filter model |
JP6703460B2 (ja) * | 2016-08-25 | 2020-06-03 | 本田技研工業株式会社 | 音声処理装置、音声処理方法及び音声処理プログラム |
JP6536550B2 (ja) * | 2016-12-08 | 2019-07-03 | トヨタ自動車株式会社 | ボルト軸力測定装置及びボルト軸力測定方法 |
US11843910B2 (en) * | 2018-11-12 | 2023-12-12 | Nippon Telegraph And Telephone Corporation | Sound-source signal estimate apparatus, sound-source signal estimate method, and program |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH09140000A (ja) * | 1995-11-15 | 1997-05-27 | Nippon Telegr & Teleph Corp <Ntt> | 会議用拡聴器 |
JP2008292845A (ja) * | 2007-05-25 | 2008-12-04 | Nippon Telegr & Teleph Corp <Ntt> | 残響除去装置、残響除去方法、残響除去プログラム、および、その記録媒体 |
Family Cites Families (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US4087633A (en) * | 1977-07-18 | 1978-05-02 | Bell Telephone Laboratories, Incorporated | Dereverberation system |
US4131760A (en) * | 1977-12-07 | 1978-12-26 | Bell Telephone Laboratories, Incorporated | Multiple microphone dereverberation system |
US5774562A (en) * | 1996-03-25 | 1998-06-30 | Nippon Telegraph And Telephone Corp. | Method and apparatus for dereverberation |
JPH09261133A (ja) | 1996-03-25 | 1997-10-03 | Nippon Telegr & Teleph Corp <Ntt> | 残響抑圧方法および装置 |
JP3688934B2 (ja) * | 1999-04-16 | 2005-08-31 | アルパイン株式会社 | マイクロホンシステム |
JP2003099100A (ja) * | 2001-09-21 | 2003-04-04 | Matsushita Electric Ind Co Ltd | 音声認識装置およびその方法 |
JP2004133403A (ja) | 2002-09-20 | 2004-04-30 | Kobe Steel Ltd | 音声信号処理装置 |
EP1993320B1 (en) * | 2006-03-03 | 2015-01-07 | Nippon Telegraph And Telephone Corporation | Reverberation removal device, reverberation removal method, reverberation removal program, and recording medium |
-
2010
- 2010-02-12 JP JP2010029500A patent/JP5620689B2/ja not_active Expired - Fee Related
- 2010-02-12 US US12/704,582 patent/US8867754B2/en active Active
- 2010-02-12 JP JP2010029501A patent/JP5530741B2/ja not_active Expired - Fee Related
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH09140000A (ja) * | 1995-11-15 | 1997-05-27 | Nippon Telegr & Teleph Corp <Ntt> | 会議用拡聴器 |
JP2008292845A (ja) * | 2007-05-25 | 2008-12-04 | Nippon Telegr & Teleph Corp <Ntt> | 残響除去装置、残響除去方法、残響除去プログラム、および、その記録媒体 |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2010282193A (ja) * | 2009-06-04 | 2010-12-16 | Honda Motor Co Ltd | 残響抑圧装置、及び残響抑圧方法 |
JP2014502109A (ja) * | 2010-12-03 | 2014-01-23 | フラウンホッファー−ゲゼルシャフト ツァ フェルダールング デァ アンゲヴァンテン フォアシュンク エー.ファオ | 到来方向推定から幾何学的な情報の抽出による音取得 |
US9396731B2 (en) | 2010-12-03 | 2016-07-19 | Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. | Sound acquisition via the extraction of geometrical information from direction of arrival estimates |
US10109282B2 (en) | 2010-12-03 | 2018-10-23 | Friedrich-Alexander-Universitaet Erlangen-Nuernberg | Apparatus and method for geometry-based spatial audio coding |
Also Published As
Publication number | Publication date |
---|---|
JP5620689B2 (ja) | 2014-11-05 |
US8867754B2 (en) | 2014-10-21 |
JP5530741B2 (ja) | 2014-06-25 |
US20100208904A1 (en) | 2010-08-19 |
JP2010191425A (ja) | 2010-09-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5530741B2 (ja) | 残響抑圧装置及び残響抑圧方法 | |
JP3940662B2 (ja) | 音響信号処理方法及び音響信号処理装置及び音声認識装置 | |
CN108141656B (zh) | 用于麦克风的数字信号处理的方法和装置 | |
KR101456866B1 (ko) | 혼합 사운드로부터 목표 음원 신호를 추출하는 방법 및장치 | |
JP6196320B2 (ja) | 複数の瞬間到来方向推定を用いるインフォ−ムド空間フィルタリングのフィルタおよび方法 | |
DK2916321T3 (en) | Processing a noisy audio signal to estimate target and noise spectral variations | |
JP6584930B2 (ja) | 情報処理装置、情報処理方法およびプログラム | |
KR101340215B1 (ko) | 멀티채널 신호의 반향 제거를 위한 시스템, 방법, 장치 및 컴퓨터 판독가능 매체 | |
CN110211602B (zh) | 智能语音增强通信方法及装置 | |
CN108293170B (zh) | 波束成形应用中的自适应无相位失真幅度响应均衡的方法及装置 | |
JP5785674B2 (ja) | デュアルマイクに基づく音声残響低減方法及びその装置 | |
WO2013009949A1 (en) | Microphone array processing system | |
JP4724054B2 (ja) | 特定方向収音装置、特定方向収音プログラム、記録媒体 | |
JP2001309483A (ja) | 収音方法および収音装置 | |
JP4886616B2 (ja) | 収音装置、収音方法、その方法を用いた収音プログラム、および記録媒体 | |
Firoozabadi et al. | Combination of nested microphone array and subband processing for multiple simultaneous speaker localization | |
Kodrasi et al. | Instrumental and perceptual evaluation of dereverberation techniques based on robust acoustic multichannel equalization | |
JP4173469B2 (ja) | 信号抽出方法、信号抽出装置、拡声装置、送話装置、受信装置、信号抽出プログラム、これを記録した記録媒体 | |
JP4933975B2 (ja) | 信号抽出装置、その方法、およびそのプログラム | |
JP2018170617A (ja) | 収音装置、プログラム及び方法 | |
JP6221463B2 (ja) | 音声信号処理装置及びプログラム | |
Uppaluru | Blind deconvolution and adaptive algorithms for de-reverberation | |
Amerineni | Multi Channel Sub Band Wiener Beamformer | |
Kimura et al. | DIFFUSION MODEL-BASED MIMO SPEECH DENOISING AND DEREVERBERATION | |
Yerramsetty | Microphone Array Wiener Beamformer and Speaker Localization With emphasis on WOLA Filter Bank |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20121127 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20130821 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20130910 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20131011 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20140401 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20140421 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5530741 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
LAPS | Cancellation because of no payment of annual fees |