JP6265903B2 - 信号雑音減衰 - Google Patents
信号雑音減衰 Download PDFInfo
- Publication number
- JP6265903B2 JP6265903B2 JP2014536387A JP2014536387A JP6265903B2 JP 6265903 B2 JP6265903 B2 JP 6265903B2 JP 2014536387 A JP2014536387 A JP 2014536387A JP 2014536387 A JP2014536387 A JP 2014536387A JP 6265903 B2 JP6265903 B2 JP 6265903B2
- Authority
- JP
- Japan
- Prior art keywords
- signal
- noise
- codebook
- sensor
- candidates
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000005236 sound signal Effects 0.000 claims description 62
- 238000005259 measurement Methods 0.000 claims description 41
- 238000013507 mapping Methods 0.000 claims description 33
- 238000000034 method Methods 0.000 claims description 23
- 230000004044 response Effects 0.000 claims description 13
- 239000002131 composite material Substances 0.000 claims description 7
- 210000000988 bone and bone Anatomy 0.000 claims description 6
- 238000001514 detection method Methods 0.000 claims description 6
- 238000004590 computer program Methods 0.000 claims 2
- 238000013016 damping Methods 0.000 claims 1
- 238000012545 processing Methods 0.000 description 25
- 238000013459 approach Methods 0.000 description 18
- 230000002829 reductive effect Effects 0.000 description 13
- 238000012549 training Methods 0.000 description 11
- 230000006870 function Effects 0.000 description 10
- 230000003595 spectral effect Effects 0.000 description 8
- 239000013598 vector Substances 0.000 description 8
- 230000009467 reduction Effects 0.000 description 7
- 238000007476 Maximum Likelihood Methods 0.000 description 6
- 230000002238 attenuated effect Effects 0.000 description 6
- 230000008569 process Effects 0.000 description 6
- 230000011218 segmentation Effects 0.000 description 4
- 230000000007 visual effect Effects 0.000 description 4
- 238000005192 partition Methods 0.000 description 3
- 230000003068 static effect Effects 0.000 description 3
- 238000004891 communication Methods 0.000 description 2
- 230000007423 decrease Effects 0.000 description 2
- 230000001419 dependent effect Effects 0.000 description 2
- 238000001914 filtration Methods 0.000 description 2
- 238000012805 post-processing Methods 0.000 description 2
- 239000000654 additive Substances 0.000 description 1
- 230000000996 additive effect Effects 0.000 description 1
- 230000015556 catabolic process Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000006731 degradation reaction Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 230000001939 inductive effect Effects 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 230000000670 limiting effect Effects 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 230000008520 organization Effects 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 238000009531 respiratory rate measurement Methods 0.000 description 1
- 238000011524 similarity measure Methods 0.000 description 1
- 230000001629 suppression Effects 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 210000001519 tissue Anatomy 0.000 description 1
- 238000005406 washing Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
- G10L21/0316—Speech enhancement, e.g. noise reduction or echo cancellation by changing the amplitude
- G10L21/0364—Speech enhancement, e.g. noise reduction or echo cancellation by changing the amplitude for improving intelligibility
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
- G10L21/0208—Noise filtering
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
- G10L21/0208—Noise filtering
- G10L21/0216—Noise filtering characterised by the method used for estimating noise
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
- G10L21/0208—Noise filtering
- G10L2021/02085—Periodic noise
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
- G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
- G10L21/0208—Noise filtering
- G10L21/0216—Noise filtering characterised by the method used for estimating noise
- G10L2021/02161—Number of inputs available containing the signal or the noise to be suppressed
- G10L2021/02165—Two microphones, one receiving mainly the noise signal and the other one mainly the speech signal
Landscapes
- Engineering & Computer Science (AREA)
- Computational Linguistics (AREA)
- Quality & Reliability (AREA)
- Signal Processing (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- Multimedia (AREA)
- Circuit For Audible Band Transducer (AREA)
- Noise Elimination (AREA)
- Tone Control, Compression And Expansion, Limiting Amplitude (AREA)
- Soundproofing, Sound Blocking, And Sound Damping (AREA)
Description
y(n)=x(n)+w(n)
であり、ここで、y(n)、x(n)、及びw(n)は、それぞれ、サンプルされた雑音を含む音声(入力オーディオ信号)、クリーンな音声(所望音声信号成分)、及び雑音(雑音信号成分)を表す。
Py(ω)=Px(ω)+Pw(ω)
である。
Pna(ω)=Py(ω)H(ω)
であり、ここで、ウィーナーフィルタは、
c1=(1+η)c0
c2=(1−η)c0
ここで、ηは、小さい定数である。次いで、アルゴリズムは、以下のように、訓練ベクトルを2つの区画X1及びX2に分割する。
rk∈Rjiffzk∈Zj 1≦k≦L、1≦j≦Nd
次いで、前述のように、得られるマッピングが適用され得る。
Claims (15)
- 環境に関する第1の信号を受信するための受信機であって、前記第1の信号が、前記環境内の所望の発信源からの信号に対応する所望信号成分と、前記環境内の雑音に対応する雑音信号成分とを備える、受信機と、
前記所望信号成分に関する複数の所望信号候補を備える第1のコードブックであって、各所望信号候補が、可能な所望信号成分を表す第1のコードブックと、
前記雑音信号成分に関する複数の雑音信号候補を備える第2のコードブックであって、各所望信号候補が、可能な雑音信号成分を表す第2のコードブックと、
前記環境の測定値を提供するセンサ信号を受信するための入力部であって、前記センサ信号が、前記環境内の前記所望の発信源又は前記雑音の測定値を表す、入力部と、
前記第1の信号を時間セグメントにセグメント化するためのセグメント化器と、
雑音減衰器と、
を備える雑音減衰装置であって、
前記雑音減衰器が、各時間セグメントごとに、
−前記第1のコードブックのコードブックエントリの第1のグループの所望信号候補と前記第2のコードブックのコードブックエントリの第2のグループの雑音信号候補との各対に関して、複合信号を生成することによって、複数の推定信号候補を生成するステップと、
−前記推定信号候補から、前記時間セグメント内の前記第1の信号に関する信号候補を生成するステップと、
−前記信号候補に応じて、前記時間セグメント内の前記第1の信号の雑音を減衰するステップと、を行い、
前記雑音減衰器が、前記センサ信号に応じて、コードブックエントリの部分集合を選択することによって、前記第1のグループ及び前記第2のグループの少なくとも1つを生成する、
雑音減衰装置。 - 前記センサ信号は、前記所望の発信源の測定値を表し、前記雑音減衰器は、前記第1のコードブックからコードブックエントリの部分集合を選択することによって前記第1のグループを生成する、請求項1に記載の雑音減衰装置。
- 前記第1の信号はオーディオ信号であり、前記所望の発信源はオーディオ源であり、前記所望信号成分は音声信号であり、前記センサ信号は骨伝導マイクロホン信号である、請求項2に記載の雑音減衰装置。
- 前記センサ信号は、前記所望の発信源の表現を提供するが、これは、前記所望信号成分ほど正確ではない、請求項2に記載の雑音減衰装置。
- 前記センサ信号は、前記雑音の測定値を表し、前記雑音減衰器は、前記第2のコードブックからコードブックエントリの部分集合を選択することによって前記第2のグループを生成する、請求項1に記載の雑音減衰装置。
- 前記センサ信号は、機械的振動検出信号である、請求項5に記載の雑音減衰装置。
- 前記センサ信号は、加速度計信号である、請求項5に記載の雑音減衰装置。
- 複数のセンサ信号候補と、前記第1のコードブック及び前記第2のコードブックの少なくとも一方のコードブックエントリとの間のマッピングを生成するためのマップ作成器をさらに備え、前記雑音減衰器は、前記マッピングに応じてコードブックエントリの前記部分集合を選択する、請求項1に記載の雑音減衰装置。
- 前記雑音減衰器は、前記複数のセンサ信号候補それぞれと前記センサ信号との間の距離尺度に応じて、前記複数のセンサ信号候補から第1のセンサ信号候補を選択し、前記第1の信号候補に関するマッピングに応じて、前記部分集合を生成する、請求項8に記載の雑音減衰装置。
- 前記マップ作成器は、前記第1の信号を生じる入力センサと、前記センサ信号を生じるセンサとからの同時測定に基づいて前記マッピングを生成する、請求項8に記載の雑音減衰装置。
- 前記マップ作成器は、前記センサ信号候補と、前記第1のコードブック及び前記第2のコードブックの少なくとも一方の前記コードブックエントリとの間の差異尺度に基づいて前記マッピングを生成する、請求項8に記載の雑音減衰装置。
- 前記第1の信号は、第1のマイクロホンからのマイクロホン信号であり、前記センサ信号は、前記第1のマイクロホンから離れた第2のマイクロホンからのマイクロホン信号である、請求項1に記載の雑音減衰装置。
- 前記第1の信号はオーディオ信号であり、前記センサ信号は非オーディオセンサからのものである、請求項1に記載の雑音減衰装置。
- 環境に関する第1の信号を受信機により受信するステップであって、前記第1の信号が、前記環境内の所望の発信源からの信号に対応する所望信号成分と、前記環境内の雑音に対応する雑音信号成分とを備える、ステップと、
前記所望信号成分に関する複数の所望信号候補を備える第1のコードブックを提供するステップであって、各所望信号候補が、可能な所望信号成分を表す、ステップと、
前記雑音信号成分に関する複数の雑音信号候補を備える第2のコードブックを提供するステップであって、各所望信号候補が、可能な雑音信号成分を表す、ステップと、
前記環境の測定値を提供するセンサ信号を入力部により受信するステップであって、前記センサ信号が、前記環境内の前記所望の発信源又は前記雑音の測定値を表す、ステップと、
前記第1の信号を時間セグメントにセグメント化するステップと、
各時間セグメントごとに、
−前記第1のコードブックのコードブックエントリの第1のグループの所望信号候補と前記第2のコードブックのコードブックエントリの第2のグループの雑音信号候補との各対に関して、複合信号を生成することによって、複数の推定信号候補を生成するステップと、
−前記推定信号候補から、前記時間セグメント内の前記第1の信号に関する信号候補を生成するステップと、
−前記信号候補に応じて、前記時間セグメント内の前記第1の信号の雑音を減衰するステップと、
を行うステップと、
前記センサ信号に応じて、コードブックエントリの部分集合を選択することによって、前記第1のグループ及び前記第2のグループの少なくとも1つを生成するステップと、
を含む雑音減衰の方法。 - コンピュータプログラムコード手段を備えるコンピュータプログラムであって、前記プログラムがコンピュータ上で実行されるときに、請求項14に記載の全てのステップを行う、コンピュータプログラム。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201161548998P | 2011-10-19 | 2011-10-19 | |
US61/548,998 | 2011-10-19 | ||
PCT/IB2012/055628 WO2013057659A2 (en) | 2011-10-19 | 2012-10-16 | Signal noise attenuation |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2014532890A JP2014532890A (ja) | 2014-12-08 |
JP6265903B2 true JP6265903B2 (ja) | 2018-01-24 |
Family
ID=47324231
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014536387A Active JP6265903B2 (ja) | 2011-10-19 | 2012-10-16 | 信号雑音減衰 |
Country Status (8)
Country | Link |
---|---|
US (1) | US9659574B2 (ja) |
EP (1) | EP2745293B1 (ja) |
JP (1) | JP6265903B2 (ja) |
CN (1) | CN103890843B (ja) |
BR (1) | BR112014009338B1 (ja) |
IN (1) | IN2014CN02539A (ja) |
RU (1) | RU2611973C2 (ja) |
WO (1) | WO2013057659A2 (ja) |
Families Citing this family (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
BR112014009647B1 (pt) | 2011-10-24 | 2021-11-03 | Koninklijke Philips N.V. | Aparelho de atenuação do ruído e método de atenuação do ruído |
US20130163781A1 (en) * | 2011-12-22 | 2013-06-27 | Broadcom Corporation | Breathing noise suppression for audio signals |
US10013975B2 (en) * | 2014-02-27 | 2018-07-03 | Qualcomm Incorporated | Systems and methods for speaker dictionary based speech modeling |
US10176809B1 (en) * | 2016-09-29 | 2019-01-08 | Amazon Technologies, Inc. | Customized compression and decompression of audio data |
US20210065731A1 (en) * | 2019-08-29 | 2021-03-04 | Sony Interactive Entertainment Inc. | Noise cancellation using artificial intelligence (ai) |
Family Cites Families (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
SU1840043A1 (ru) * | 1985-02-04 | 2006-07-20 | Воронежский научно-исследовательский институт связи | Устройство поиска широкополосных сигналов |
TW271524B (ja) * | 1994-08-05 | 1996-03-01 | Qualcomm Inc | |
US6782360B1 (en) * | 1999-09-22 | 2004-08-24 | Mindspeed Technologies, Inc. | Gain quantization for a CELP speech coder |
US7478043B1 (en) * | 2002-06-05 | 2009-01-13 | Verizon Corporate Services Group, Inc. | Estimation of speech spectral parameters in the presence of noise |
US7885420B2 (en) * | 2003-02-21 | 2011-02-08 | Qnx Software Systems Co. | Wind noise suppression system |
US7895036B2 (en) * | 2003-02-21 | 2011-02-22 | Qnx Software Systems Co. | System for suppressing wind noise |
JP2006078657A (ja) * | 2004-09-08 | 2006-03-23 | Matsushita Electric Ind Co Ltd | 音声符号化装置、音声復号化装置、及び音声符号化復号化システム |
US8255207B2 (en) * | 2005-12-28 | 2012-08-28 | Voiceage Corporation | Method and device for efficient frame erasure concealment in speech codecs |
EP1918910B1 (en) * | 2006-10-31 | 2009-03-11 | Harman Becker Automotive Systems GmbH | Model-based enhancement of speech signals |
KR101449433B1 (ko) * | 2007-11-30 | 2014-10-13 | 삼성전자주식회사 | 마이크로폰을 통해 입력된 사운드 신호로부터 잡음을제거하는 방법 및 장치 |
CN103229517B (zh) | 2010-11-24 | 2017-04-19 | 皇家飞利浦电子股份有限公司 | 包括多个音频传感器的设备及其操作方法 |
EP2458586A1 (en) | 2010-11-24 | 2012-05-30 | Koninklijke Philips Electronics N.V. | System and method for producing an audio signal |
-
2012
- 2012-10-16 BR BR112014009338-5A patent/BR112014009338B1/pt active IP Right Grant
- 2012-10-16 RU RU2014119924A patent/RU2611973C2/ru active
- 2012-10-16 WO PCT/IB2012/055628 patent/WO2013057659A2/en active Application Filing
- 2012-10-16 US US14/347,685 patent/US9659574B2/en active Active
- 2012-10-16 EP EP12798391.4A patent/EP2745293B1/en active Active
- 2012-10-16 JP JP2014536387A patent/JP6265903B2/ja active Active
- 2012-10-16 IN IN2539CHN2014 patent/IN2014CN02539A/en unknown
- 2012-10-16 CN CN201280051123.7A patent/CN103890843B/zh active Active
Also Published As
Publication number | Publication date |
---|---|
JP2014532890A (ja) | 2014-12-08 |
BR112014009338B1 (pt) | 2021-08-24 |
CN103890843A (zh) | 2014-06-25 |
US9659574B2 (en) | 2017-05-23 |
IN2014CN02539A (ja) | 2015-08-07 |
CN103890843B (zh) | 2017-01-18 |
EP2745293B1 (en) | 2015-09-16 |
WO2013057659A3 (en) | 2013-07-11 |
BR112014009338A2 (pt) | 2017-04-18 |
RU2611973C2 (ru) | 2017-03-01 |
US20140249810A1 (en) | 2014-09-04 |
EP2745293A2 (en) | 2014-06-25 |
RU2014119924A (ru) | 2015-11-27 |
WO2013057659A2 (en) | 2013-04-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7158806B2 (ja) | オーディオ認識方法、ターゲットオーディオを位置決める方法、それらの装置、およびデバイスとコンピュータプログラム | |
KR101934636B1 (ko) | 심화신경망 기반의 잡음 및 에코의 통합 제거 방법 및 장치 | |
CN111418010B (zh) | 一种多麦克风降噪方法、装置及终端设备 | |
Parchami et al. | Recent developments in speech enhancement in the short-time Fourier transform domain | |
CN107910011B (zh) | 一种语音降噪方法、装置、服务器及存储介质 | |
JP6636633B2 (ja) | 音響信号を向上させるための音響信号処理装置および方法 | |
JP5608678B2 (ja) | パーティクルフィルタリングを利用した音源位置の推定 | |
RU2648604C2 (ru) | Способ и аппаратура для генерации сигнала речи | |
JP7324753B2 (ja) | 修正された一般化固有値ビームフォーマーを用いた音声信号のボイス強調 | |
JP2017530409A (ja) | ランニング範囲正規化を利用したニューラルネットワーク音声活動検出 | |
JP2005244968A (ja) | モバイル・デバイス上のマルチセンサによるスピーチ改良のための方法および装置 | |
JP2014502468A (ja) | オーディオ信号生成システム及び方法 | |
JP6265903B2 (ja) | 信号雑音減衰 | |
CN113795881A (zh) | 使用线索的聚类的语音增强 | |
CN112309417A (zh) | 风噪抑制的音频信号处理方法、装置、系统和可读介质 | |
Martín-Doñas et al. | Dual-channel DNN-based speech enhancement for smartphones | |
JP6190373B2 (ja) | オーディオ信号ノイズ減衰 | |
Kodrasi et al. | Single-channel Late Reverberation Power Spectral Density Estimation Using Denoising Autoencoders. | |
Kim et al. | Attentive pooling-based weighted sum of spectral decay rates for blind estimation of reverberation time | |
CN116758930A (zh) | 语音增强方法、装置、电子设备及存储介质 | |
Athanasopoulos et al. | Acoustic localization enhanced with phase information from modified STFT magnitude | |
Mosayyebpour | Robust single-channel speech enhancement and speaker localization in adverse environments | |
Hsu et al. | A non-uniformly distributed three-microphone array for speech enhancement in directional and diffuse noise field | |
Kandagatla et al. | Analysis of statistical estimators and neural network approaches for speech enhancement |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20151013 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20161122 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20161206 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20170306 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170529 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20170707 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20171020 |
|
A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20171030 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20171120 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6265903 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |