JP2009522942A - 発話改善のためにマイク間レベル差を用いるシステム及び方法 - Google Patents

発話改善のためにマイク間レベル差を用いるシステム及び方法 Download PDF

Info

Publication number
JP2009522942A
JP2009522942A JP2008549606A JP2008549606A JP2009522942A JP 2009522942 A JP2009522942 A JP 2009522942A JP 2008549606 A JP2008549606 A JP 2008549606A JP 2008549606 A JP2008549606 A JP 2008549606A JP 2009522942 A JP2009522942 A JP 2009522942A
Authority
JP
Japan
Prior art keywords
estimate
acoustic signal
microphone
primary
filter
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2008549606A
Other languages
English (en)
Other versions
JP5007442B2 (ja
Inventor
アヴェンダノ,カーロス
サントス,ピーター
Original Assignee
オーディエンス,インコーポレイテッド
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by オーディエンス,インコーポレイテッド filed Critical オーディエンス,インコーポレイテッド
Publication of JP2009522942A publication Critical patent/JP2009522942A/ja
Application granted granted Critical
Publication of JP5007442B2 publication Critical patent/JP5007442B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00Circuits for transducers, loudspeakers or microphones
    • H04R3/002Damping circuit arrangements for transducers, e.g. motional feedback circuits
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00Circuits for transducers, loudspeakers or microphones
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02Speech enhancement, e.g. noise reduction or echo cancellation
    • G10L21/0208Noise filtering
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00Details of transducers, loudspeakers or microphones
    • H04R1/20Arrangements for obtaining desired frequency or directional characteristics
    • H04R1/32Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only
    • H04R1/40Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers
    • H04R1/406Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers microphones
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00Circuits for transducers, loudspeakers or microphones
    • H04R3/005Circuits for transducers, loudspeakers or microphones for combining the signals of two or more microphones
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2410/00Microphones
    • H04R2410/01Noise reduction using microphones having different directional characteristics
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2430/00Signal processing covered by H04R, not provided for in its groups
    • H04R2430/20Processing of the output signals of the acoustic transducers of an array for obtaining a desired directivity characteristic
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2499/00Aspects covered by H04R or H04S not otherwise provided for in their subgroups
    • H04R2499/10General applications
    • H04R2499/11Transducers incorporated or for use in hand-held devices, e.g. mobile phones, PDA's, camera's

Landscapes

  • Engineering & Computer Science (AREA)
  • Acoustics & Sound (AREA)
  • Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • Otolaryngology (AREA)
  • Multimedia (AREA)
  • Quality & Reliability (AREA)
  • Computational Linguistics (AREA)
  • Human Computer Interaction (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • General Health & Medical Sciences (AREA)
  • Circuit For Audible Band Transducer (AREA)
  • Telephone Function (AREA)
  • Obtaining Desirable Characteristics In Audible-Bandwidth Transducers (AREA)
  • Control Of Amplification And Gain Control (AREA)

Abstract

雑音を減じ、発話を改善するように、マイク間レベル差を用いるシステム及び方法を提供している。例示としての実施形態において、一次マイク及び二次マイクにより受信される音響信号のエネルギー推定が、マイク間レベル差(ILD)を決定するように、決定される。一次マイク音響信号にみに基づく雑音推定と組み合わされたこのILDは、フィルタ推定が導き出されるようにする。一部の実施形態においては、その導き出されるフィルタ推定は平滑化されることが可能である。フィルタ推定は、その場合、発話推定を生成するように、一次マイクから音響信号に適用される。

Description

今日、悪い環境下で行われた発話記録における背景雑音を低減する多くの方法がある。1つのそのような方法は、オーディオ装置において2つ又はそれ以上のマイクを用いることである。それらのマイクは、位置決めされて、そのオーディオ装置がマイク信号間の差異を決定することを可能にする。例えば、それらのマイクの空間的距離のために、発話ソースからそれらのマイクに信号が到達する時間の差が、発話ソースを位置決めするように利用されることが可能である。一旦、位置決めされると、それらの信号は、異なる方向からもたらされる雑音を抑制するように空間的にフィルタリングされることが可能である。
リニアアレイのマイクを用いるビームフォーミング技術は、ソースの方向において“音響ビーム”を生成することが可能であり、それ故、空間フィルタとして用いられることが可能である。この方法は、しかしながら、多くの不利点を有する。第1に、発話ソースの方向を指定する必要がある。しかしながら、曖昧な又は不適切な情報をもたらす可能性がある残響等の因子のために、時間遅延を評価することは困難である。第2に、適切な空間フィルタリングを得るために必要なセンサの数は、一般に、多い(例えば、2つ以上)。更に、マイクアレイが小さい装置、例えば、携帯電話において用いられる場合、ビームフォーミングは、そのアレイのマイク間の距離が波長に比べて小さいために、低周波数においてより困難である。
マイクの空間分離及び指向性は、到達時間差ばかりでなく、一部のアプリケーションにおいて時間差に比べて容易に特定されることが可能であるマイク間レベル差(ILD)を与える。それ故、雑音抑制及び発話改善のためにILDを用いるシステム及び方法に対する要請が存在している。
本発明の実施形態は、雑音抑制及び発話改善に関連する、上記の課題を克服する又は実質的に緩和することができる。一般に、雑音を軽減し、発話を改善するように、マイク間レベル差(ILD)を用いるシステム及び方法が提供される。例示としての実施形態においては、ILDはエネルギーレベル差に基づいている。
例示としての実施形態においては、一次マイク及び二次マイクから受信される音響信号のエネルギー推定は、各々の時間フレームについて蝸牛(cochlea)周波数分析器の各々のチャネルについて決定される。そのエネルギー推定は、前フレームのエネルギー推定及び現音響信号に基づくことが可能である。それらのエネルギー推定に基づいて、ILDは演算されることが可能である。
ILD情報は、発話が存在する可能性がある時間−周波数成分を決定し、一次マイク音響信号から雑音推定を導き出すように用いられる。エネルギー及び雑音推定は、フィルタ推定が導き出されることを可能にする。一実施形態においては、一次マイクからの音響信号の雑音推定は、一次マイク信号の現エネルギー推定及び前フレームの雑音推定の最小統計値に基づいて決定される。一部の実施形態においては、導き出されるフィルタ推定は、音響アーティファクトを低減するように平滑化されることが可能である。
フィルタ推定は、その場合、発話推定を生成するように一次マイクからの音響信号の蝸牛表現に適用される。発話推定は、その場合、出力についての時間領域に変換される。その変換は、発話推定に対して逆周波数変換を適用することにより実行される。
本発明は、背景雑音及び遠視野分散を減じるように、発話により支配される時間周波数領域を特定するようにマイク間レベル差を記録して用いるシステム及び方法を例示として提供する。本発明の実施形態は、携帯電話、ヘッドセット及び会議システムのような音声を受信する何れかの通信装置において実行されることが可能であるが、それらに限定されるものではない。有利であることに、例示としての実施形態は、従来技術のマイクアレイが適切に機能しない小さい装置において、改善された雑音抑制を与えることができる。本発明の実施形態については、携帯電話の機能に関連して説明している一方、本発明は、何れかの通信装置において実行されることが可能である。
図1a及び1bを参照するに、本発明の実施形態が実行される環境について示している。ユーザは、通信装置104に対して音声(発話)ソース102を与える。通信装置104は、少なくとも2つのマイクであって、音声ソース102に関連する一次マイクと、一次マイク106から遠く距離を置いて位置付けられている二次マイク108とを有する。例示としての実施形態においては、それらのマイク106及び108は無指向性マイクである。代替の実施形態は、マイク又は音響センサの他の方式を用いることが可能である。
マイク106及び108は発話ソース102からの音声情報を受け入れる一方、マイク106及び108はまた、雑音110を受け取る。雑音110は信号位置からもたらされるように示されている一方、雑音は発話と異なる1つ又はそれ以上の位置からの何れかの音声を有する可能性があり、残響及びエコーを有する可能性がある。
本発明の実施形態は、レベル差がどのように得られるかに依存することのない2つのマイク106及び108間のレベル差(例えば、エネルギー差)を利用する。図1aにおいては、一次マイク106は、二次マイク108に比べて、発話ソース102にかなり近いため、強度レベルは、発話/音声セグメント中により大きいエネルギーレベルをもたらす一次マイクについて、より高い。図1bにおいては、一次マイクの指向性応答は発話ソース102の方向で最も高く、二次マイク108の指向性応答は、発話ソース102の方向で最も低いため、発話ソース102の方向で、レベル差は最も高く、他の場所では、より低い。
そのレベル差は、その場合、時間−周波数領域における発話及び雑音を区別するように用いられることが可能である。更なる実施形態においては、発話を区別するように、エネルギーレベル差及び時間遅延の組み合わせを用いることが可能である。バイノーラルキュー(binaural cue)復号化に基づいて、発話信号抽出又は発話改善が実行されることが可能である。
ここで、図2を参照するに、例示としての通信装置104を詳細に示している。例示としての通信装置104は、処理器202と、一次マイク106と、二次マイク108と、音声処理エンジン204と、出力装置206と、を有する音声受信装置である。通信装置104は、通信装置104の動作のために必要であるが、雑音抑制又は発話改善に関係しない、更なる構成要素を有することが可能である。音声処理エンジン204については、下で、図3に関連付けて更に詳細に説明する。
上記のように、一次マイク106及び二次マイク108はそれぞれ、それらの間のエネルギーレベル差を可能にするように、距離を置いて離れている。それらのマイク106及び108は音響受信装置又はセンサの何れかの種類を有することが可能であり、無指向性である、一方向性である、又は他の方向特性又は極性パターンを有することが可能である。一旦、マイク106及び108により受信されると、音響信号は、一部の実施形態に従って、アナログ/ディジタル変換器(図示せず)によりディジタル信号に変換される。音響信号を区別するように、一次マイク106により受信される音響信号は、ここでは、一次音響信号と呼ばれ、二次マイク108により受信される音響信号は、ここでは、二次音響信号と呼ばれる。
出力装置206は、ユーザに音声出力を与える何れかの装置である。例えば、出力装置206は、ヘッドセット又はハンドセットのイヤホーン、若しくは会議装置におけるスピーカであることが可能である。
図3は、本発明の一実施形態に従って、例示としての音声処理エンジン204の詳細なブロック図である。一実施形態においては、一次マイク106及び二次マイク108(図2)から受信された音響信号(即ち、X及びX)は、ディジタル信号に変換され、周波数分析モジュール302に転送される。一実施形態においては、周波数分析モジュール302は、音響信号を取り込み、フィルタバンクを用いて無指向性の実行(即ち、無指向性領域)を模倣する。代替として、短時間フーリエ変換(STFT)、サブバンドフィルタバンド、変調された複雑な重ね合わせ変換、ウェーブレット等のような他のフィルタバンクが、周波数分析及び周波数合成のために用いられることが可能である。殆どの音声(例えば、音響信号)は複雑であり、2つ以上の周波数を有するため、音響信号におけるサブバンドの分析は、個々の周波数がフレーム(即ち、所定の時間期間)において、複雑な音響信号の状態で存在する。一実施形態においては、フレームは4msecの長さである。
一旦、周波数が決定されると、信号は、時間間隔の間、エネルギーレベル推定を演算するエネルギーモジュール304に送出される。そのエネルギーレベル推定は、無指向性チャネルの帯域幅及び音響信号に基づくことが可能である。例示としてのエネルギーモジュール304は、一部の実施形態においては、数学的に表されることが可能である構成要素である。それ故、一次マイク106において受信される音響信号のエネルギーレベルは、一実施形態においては、次式により近似されることが可能であり、
(t,ω)=λ|X(t,ω)|+(1−λ)E(t−1,ω)
ここで、λは平均化時間定数を決定する0と1との間の数であり、X(t,ω)は平均化時間定数における一次マイク106の音響信号であり、ωは周波数を表し、tは時間を表す。図示しているように、一次マイク106の現エネルギーレベルE(t,ω)は、一次マイク106の前エネルギーレベルE(t−1,ω)の前エネルギーレベルに依存する。一部の他の実施形態においては、λの値は、異なる周波数チャネルについて異なることが可能である。好ましい時定数T(例えば、4msec)及びサンプリング周波数f(例えば、16kHz)が与えられる場合、λの値は、次式のように近似されることが可能である。
λ=1−e−1/Tfs
二次マイク108から受信された音響信号のエネルギーレベルは、同様の例示としての次式により近似されることが可能であり、
(t,ω)=λ|X(t、ω)|+(1−λ)E(t−1,ω)
ここで、X(t、ω)は無指向性領域における二次マイク108の音響信号である。一次マイク106についてのエネルギーレベルの演算と同様に、二次マイク108のエネルギーレベルE(t,ω)は、二次マイク108の前エネルギーレベルE(t−1,ω)に依存する。
演算されたエネルギーレベルが与えられる場合、マイク間のレベル差(ILD)は、ILDモジュール306により決定されることが可能である。一実施形態においては、ILDモジュール306は次式のように数学的に近似されることが可能であり、
ILD(t、ω)=[1−2(E(t,ω)E(t,ω))/(E (t,ω)+E (t,ω)) ]*sign(E(t,ω)−E(t,ω))
ここで、Eは一次マイク106のエネルギーレベルであり、Eは一次マイク108のエネルギーレベルであり、それらの両方は、エネルギーモジュール304から得られる。この式は、−1と1との間の境界付けられた結果を与える。例えば、Eが0になるとき、ILDは1になり、Eが0になるとき、ILDは−1になる。従って、発話が一次マイクに近接していて、雑音が存在しない、即ち、ILD=1であるが、更なる雑音が付加されるとき、ILDは変化する。更に、更なる雑音がマイク106及び108の両方により取り込まれるとき、発話を雑音から区別することはより困難になる。
上記の式は、ILD(t,ω)=(E(t,ω)/E(t,ω)のようなエネルギーレベルの比により演算されるILDに亘って好ましく、ここで、一次マイクのエネルギーレベルがより小さくなるとき、ILDは境界付けられていず、無限大になる。
代替の実施形態においては、ILDは次式により近似されることが可能である。
ILD(t、ω)=(E(t,ω)−E(t,ω))/(E(t,ω)+E(t,ω))
ここで、ILDの演算はまた、−1と1との間で境界付けられる。それ故、この代替のILDの演算は、本発明の一実施形態において用いられることが可能である。
本発明の例示としての実施形態に従って、ウィーナ(Wiener)フィルタが、雑音を抑制する/発話を改善するように用いられる。しかしながら、ウィーナフィルタ推定を導き出すように、特定の入力が必要である。それらの入力は、雑音のパワースペクトル密度及びソース信号のパワースペクトル密度を有する。従って、雑音推定モジュール308は、音響信号の雑音推定を決定するように与えられることが可能である。
例示としての実施形態に従って、雑音推定モジュール308は、マイク信号における雑音成分を推定するように試みる。例示としての実施形態においては、ノイズ推定は、一次マイク106により受信された音響信号のみに基づくものである。例示としての雑音推定モジュール308は、本発明の一実施形態に従う次式により数学的に近似される成分である。
N(t,ω)=λ(t、ω)E(t,ω)+(1−λ(t,ω))min[N(t−1,ω),E(t,ω)]
図示しているように、この実施形態における雑音推定は、一次マイク106の現エネルギー推定E(t,ω)及び前時間フレームの雑音推定N(t−1,ω)の最小統計値に基づくものである。従って、雑音推定は、効率的に且つ低いレイテンシで実行される。
上記式におけるλ(t,ω)は、次式のように、ILDモジュール306により近似されたILDから導き出される。
Figure 2009522942
即ち、一次マイク106における発話が、発話が予測される上記の閾値(例えば、閾値=0.5)より小さいとき、λは小さく、それ故、雑音推定は雑音に密接に従う。しかしながら、ILDが増加し始めるとき(例えば、発話が検出されるため)、λは増加する。その結果、雑音推定モジュール308は雑音推定処理の速度を低下させ、発話エネルギーは、最終的な雑音推定に対してあまり寄与しない。それ故、本発明の例示としての実施形態は、雑音推定を決定するように、最小統計値及び音声アクティビティ検出の組み合わせを用いることが可能である。
フィルタモジュールは、その場合、雑音推定に基づいて、フィルタ推定を導き出す。一実施形態においては、フィルタはウィーナフィルタである。代替の実施形態は他のフィルタを検討することが可能である。従って、ウィーナフィルタによる近似が、一実施形態に従って、次式のように行われることが可能であり、
W=(P/(P+P))α
ここで、Pは発話のパワースペクトル密度であり、Pは雑音のパワースペクトル密度である。一実施形態に従って、Pは雑音推定、即ち、雑音推定モジュール308により演算されるN(t,ω)である。例示としての実施形態においては、P=E(t,ω)−βN(t,ω)であり、ここで、E(t,ω)はエネルギーモジュール304からの一次マイク106のエネルギー推定であり、N(t,ω)は雑音推定モジュール308により与えられる雑音推定である。雑音推定は各々のフレームにより変化するため、フィルタ推定がまた、各々のフレームにより変化する。
βは、ILDの関数である過減算項である。βは、雑音推定モジュール308の最小統計値の偏りを補正し、知覚重みを成す。時定数は異なるため、その偏りは、純粋雑音の部分と雑音及び発話の部分との間で異なる。従って、一部の実施形態においては、βは経験的に決定される(例えば、大きいILDにおいては2乃至3dB、そして小さいILDにおいては6乃至9dBである)。
上記の実施形態のウィーナフィルタについての式におけるαは、雑音推定を更に抑制する係数である。αは何れかの正の値であることが可能である。一実施形態においては、非線形伸長が、αを2に設定することにより得られる。例示としての実施形態に従って、主部であるW=(P/(P+P))が所定の値(例えば、1であるWの最大有効値から12dB下回る)あるとき、αは経験的に決定される。
ウィーナフィルタ推定は迅速に変化する(一のフレームから次のフレームに)ことが可能であり、そして雑音推定及び発話推定は各々のフレーム間でかなり変化することが可能であるため、現状のままのウィーナフィルタの適用はアーティファクト(例えば、不連続性、短いとぎれ、過渡状態等)をもたらす可能性がある。それ故、光学フィルタ平滑化モジュール312が、フレームの機能として音響信号に適用されるウィーナフィルタ推定を平滑化するように備えられる。一実施形態においては、そのフィルタ平滑化モジュール312は、次式のように数学的に近似され、
M(t,ω)=λ(t,ω)W(t,ω)+(1−λ(t,ω))M(t−1,ω)
ここで、λはウィーナフィルタ推定及び一次マイク推定Eの関数である。
図示しているように、フィルタ平滑化モジュール312は、時間(t)において、時間(t−1)における前フレームからの平滑化されたウィーナフィルタ推定の値を用いて、ウィーナフィルタ推定を平滑化する。音響信号の迅速な変化に対する迅速な応答を可能にするように、フィルタ平滑化モジュール312は、迅速に変化する信号においてはより少ない平滑化を、ゆっくり変化する信号においてはかなり平滑化を実行する。このことは、時間に対するEの重み付けされた一次導関数に従ってλの値を変化させることにより達成される。その一次導関数が大きく、そしてエネルギー変化が大きい場合、λは大きい値に設定される。その導関数が小さい場合、λはより小さい値に設定される。
フィルタ平滑化モジュール312による平滑化の後、一次音響信号は、発話を推定するように、平滑化されたウィーナフィルタ推定により乗算される。上記のウィーナフィルタの実施形態においては、発話推定は、S(t,ω)=X(t,ω)*M(t,ω)により近似され、ここで、Xは一次マイク106からの音響信号である。例示としての実施形態においては、発話推定はマーキングモジュール314において行われる。
次に、発話推定は、無指向性領域からの時間領域に戻るように変換される。その変換は、発話推定S(t,ω)を取り込むことと、周波数合成モジュール316において無指向性チャネルの逆周波数とこの発話推定を乗算することと、を有する。
図3の音声処理エンジン204のシステムアーキテクチャは例示であることに留意する必要がある。代替の実施形態は、より多い構成要素、より少ない構成要素又は同等の構成要素を有し、本発明の実施形態の範囲内に尚もあることが可能である。音声処理エンジン208の種々のモジュールは信号モジュールに組み込まれることが可能である、例えば、周波数分析モジュール302及びエネルギーモジュール304の機能は、単独のモジュールに組み込まれることが可能である、更に、ILDモジュール306の機能は、エネルギーモジュール304のみの機能と組み合わされる、又は周波数分析モジュール302と組み合わされることが可能である。更なる実施例として、フィルタモジュール310の機能は、フィルタ平滑化モジュール312の機能と組み合わされることが可能である。
ここで、図4を参照するに、例示としての、マイク間レベル差を用いるノイズ抑制方法のフロー図が示されている。ステップ402において、音声信号は、一次マイク106及び二次マイク108(図2)により受信される。例示としての実施形態においては、音響信号は、処理のためにディジタル形式に変換される。
周波数分析が、その場合、ステップ404において、周波数分析モジュール302(図3)により音響信号に関して実行される。一実施形態においては、周波数分析モジュール302は、複雑な音響信号に存在する個々の周波数を決定するように、フィルタバンクを用いる。
ステップ406においては、一次マイク106及び二次マイク108の両方において受信される音響信号についてのエネルギー推定が演算される。一実施形態においては、それらのエネルギー推定は、エネルギーモジュール304(図3)により決定される。例示としてのエネルギーモジュール304は、現エネルギー推定を決定するように、現音響信号と演算された前エネルギー推定とを用いる。
一旦、エネルギー推定が演算されると、マイク間レベル差(ILD)がステップ408において演算される。一実施形態においては、ILDは、一次音響信号及び二次音響信号の両方のエネルギー推定に基づいて演算される。例示としての実施形態においては、ILDはILDモジュール306(図3)により演算される。
演算されたILDに基づいて、雑音が、ステップ410において推定される。本発明の実施形態に従って、雑音推定は、一次マイク106において受信された音響信号に基づいている。雑音推定は、一次マイクからの音響信号の現エネルギー推定及び演算された前雑音推定に基づくことが可能である。雑音推定の決定においては、本発明の例示としての実施形態に従って、雑音推定は、ILDが増加するとき、凍結される又は速度を落とされる。
ステップ412において、フィルタ推定は、フィルタモジュール310(図3)により演算される。一実施形態においては、音声処理エンジン204(図3)において用いられるフィルタはウィーナフィルタである。一旦、フィルタ推定が決定されると、そのフィルタ推定は、ステップ414において平滑化される。平滑化は、音声アーティファクトを生成する可能性がある速い変動を抑制する。平滑化されたフィルタ推定は、発話推定を生成するように、ステップ416において、一次マイク106からの音響信号に適用される。
ステップ418において、発話推定が時間領域に戻るように変換される。例示としての変換技術は、発話推定に無指向性チャネルの逆周波数を適用する。一旦、発話推定が変換されると、音声信号は、ここで、ステップ420において、ユーザに対して出力されることが可能である。一部の実施形態においては、ディジタル音響信号は、出力のためにアナログ信号に変換される。その出力は、スピーカ、イヤホーン又は他の小さい装置を介するものである。
上記のモジュールは、記憶媒体に記憶されている命令を有することが可能である。それらの命令は、処理器202(図2)により検索及び実行されることが可能である。命令の一部の実施例には、ソフトウェア、プログラムコード及びファームウェアがある。記憶媒体の一部の実施例には、メモリ装置及び集積回路がある。命令は、本発明の実施形態に従って動作するように処理器202を指令するように、処理器により実行されるときに機能する。当業者は、命令、処理器及び記憶媒体に精通している。
本発明については、上で、例示としての実施形態を参照して詳述している。当業者は、種々の変形が行われることが可能であり、本発明の広汎な範囲から逸脱することなく、他の実施形態を用いることが可能であることが理解できる。従って、例示としての実施形態の上記の及び他の変形は、本発明により網羅されるように意図されている。
本発明の実施形態が実行されることが可能である環境を示す図である。 本発明の実施形態が実行されることが可能である環境を示す図である。 本発明の実施形態を実行する例示としての通信装置のブロック図である。 例示としての音声処理エンジンのブロック図である。 発話を改善するようにマイク間レベル差を用いる例示としての方法のフロー図である。

Claims (20)

  1. 発話を改善する方法であって:
    一次マイクにおいて一次音響信号を、そして二次マイクにおいて二次音響信号を受信する段階;
    フレーム中のフィルタ推定と、前記一次音響信号の雑音推定に基づく前記フィルタ推定と、前記一次音響信号のエネルギー推定と、前記一次音響信号及び前記二次音響信号に基づくマイク間レベル差と、を決定する段階;並びに
    発話推定を生成するように、前記一次音響信号に前記フィルタ推定を適用する段階;
    を有する方法。
  2. 請求項1に記載の方法であって、前記フレーム中に前記音響信号の各々についてエネルギー推定を決定する段階を更に有する、方法。
  3. 請求項2に記載の方法であって、前記一次音響信号の前記エネルギー推定は、式E(t,ω)=λ|X(t、ω)|+(1−λ)E(t−1,ω)として近似される、方法。
  4. 請求項2に記載の方法であって、前記二次音響信号の前記エネルギー推定は、式E(t,ω)=λ|X(t、ω)|+(1−λ)E(t−1,ω)として近似される、方法。
  5. 請求項2に記載の方法であって、前記フレームについて前記マイク間レベルを決定するように前記エネルギー推定を用いる段階を更に有する、方法。
  6. 請求項5に記載の方法であって、前記マイク間レベル差は、式ILD(t、ω)=[1−2(E(t,ω)E(t,ω))/(E (t,ω)+E (t,ω)) ]*sign(E(t,ω)−E(t,ω))により近似される、方法。
  7. 請求項5に記載の方法であって、前記マイク間レベル差は、式ILD(t、ω)=(E(t,ω)−E(t,ω))/(E(t,ω)+E(t,ω))により近似される、方法。
  8. 請求項1に記載の方法であって、前記ノイズ推定は、前記一次音響信号のエネルギー推定及び前記マイク間レベル差に基づく、方法。
  9. 請求項8に記載の方法であって、前記マイク間レベル差は、式N(t,ω)=λ(t、ω)E(t,ω)+(1−λ(t、ω))min[N(t−1,ω),E(t,ω)]として近似される、方法。
  10. 請求項1に記載の方法であって、前記一次音響信号に前記フィルタ推定を適用する前に前記フィルタ推定を平滑化する段階を更に有する、方法。
  11. 請求項10に記載の方法であって、前記マイク間レベル差は、式M(t,ω)=λ(t、ω)W(t、ω)+(1−λ(t,ω))M(t−1,ω)として近似される、方法。
  12. 請求項1に記載の方法であって、時間領域に前記発話推定を変換する段階を更に有する、方法。
  13. 請求項1に記載の方法であって、ユーザに前記発話推定を出力する段階を更に有する、方法。
  14. 請求項1に記載の方法であって、前記フィルタ推定はウィーナフィルタに基づく、方法。
  15. 装置において発話を改善するシステムであって:
    一次音響信号を受信する一次マイク;
    前記一次マイクから距離を置いて位置付けられ、そして二次音響信号を受信する二次マイク;並びに
    前記一次マイクにおいて受信された発話を改善する音声処理エンジンであって、
    前記一次音響信号のエネルギー推定及びマイク間レベル差に基づいて前記一次音響信号について雑音推定を決定する雑音推定モジュールと、
    フィルタリングされた音響信号を生成する一次音響信号に適用されるフィルタ推定を決定する第1モジュールであって、前記フィルタ推定は、前記一次音響信号の前記雑音推定、前記一次音響信号の前記エネルギー推定及び前記マイク間レベル差に基づいている、第1モジュールと、
    を有する、音声処理エンジン;
    を有するシステム。
  16. 請求項15に記載のシステムであって、前記音声処理エンジンは、前記一次音響信号及び前記二次音響信号のフレームについてエネルギー推定を決定するエネルギーモジュールを更に有する、システム。
  17. 請求項15に記載のシステムであって、前記音声処理エンジンは、前記マイク間レベル差を決定するマイク間レベル差モジュールを更に有する、システム。
  18. 請求項15に記載のシステムであって、前記音声処理エンジンは、前記一次音響信号に前記フィルタ推定を適用する前に、前記フィルタ推定を平滑化するフィルタ平滑化モジュールを更に有する、システム。
  19. 請求項15に記載のシステムであって、前記音声処理エンジンは、前記発話推定を決定するマスキングモジュールを更に有する、システム。
  20. プログラムを組み入れたコンピュータ読み出し可能媒体であって、前記プログラムは、装置において発話を改善する方法を実行する機械により実行される、コンピュータ読み出し可能媒体であり、前記方法は:
    一次マイクにおいて一次音響信号を、そして二次マイクにおいて二次音響信号を受信する段階;
    前記一次音響信号及び前記二次音響信号の各々についてのフレームにおいてエネルギー推定を決定する段階;
    前記フレームについてマイク間レベル差を決定するように、前記エネルギー推定を用いる段階;
    前記一次音響信号の前記エネルギー推定と、前記一次音響信号のエネルギー推定と、前記マイク間レベル差とに基づいて、雑音推定を生成する段階;
    前記雑音推定及び前記マイク間レベル差に基づいて、フィルタ推定を演算する段階;並びに
    発話推定を生成するように、前記一次音響信号に前記フィルタ推定を適用する段階;
    を有する、コンピュータ読み出し可能媒体。
JP2008549606A 2006-01-05 2007-01-05 発話改善のためにマイク間レベル差を用いるシステム及び方法 Expired - Fee Related JP5007442B2 (ja)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US75682606P 2006-01-05 2006-01-05
US60/756,826 2006-01-05
US11/343,524 US8345890B2 (en) 2006-01-05 2006-01-30 System and method for utilizing inter-microphone level differences for speech enhancement
US11/343,524 2006-01-30
PCT/US2007/000463 WO2007081916A2 (en) 2006-01-05 2007-01-05 System and method for utilizing inter-microphone level differences for speech enhancement

Publications (2)

Publication Number Publication Date
JP2009522942A true JP2009522942A (ja) 2009-06-11
JP5007442B2 JP5007442B2 (ja) 2012-08-22

Family

ID=38224448

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2008549606A Expired - Fee Related JP5007442B2 (ja) 2006-01-05 2007-01-05 発話改善のためにマイク間レベル差を用いるシステム及び方法

Country Status (5)

Country Link
US (3) US8345890B2 (ja)
JP (1) JP5007442B2 (ja)
KR (1) KR101210313B1 (ja)
FI (1) FI20080428L (ja)
WO (1) WO2007081916A2 (ja)

Cited By (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011527025A (ja) * 2008-06-30 2011-10-20 オーディエンス,インコーポレイテッド ヌル処理雑音除去を利用した雑音抑制を提供するシステム及び方法
JP2013518477A (ja) * 2010-01-26 2013-05-20 オーディエンス,インコーポレイテッド レベルキューによる適応ノイズ抑制
JP2013527493A (ja) * 2010-04-29 2013-06-27 オーディエンス,インコーポレイテッド 複数のマイクによるロバストな雑音抑制
JP2014504743A (ja) * 2010-12-29 2014-02-24 テレフオンアクチーボラゲット エル エム エリクソン(パブル) 雑音抑圧方法及び当該雑音抑圧方法を適用するための雑音抑圧器
KR20150132223A (ko) * 2013-03-05 2015-11-25 프라운호퍼 게젤샤프트 쭈르 푀르데룽 데어 안겐반텐 포르슝 에. 베. 오디오 신호 처리를 위한 다채널 다이렉트-앰비언트 분해를 위한 장치 및 방법
JP2016507086A (ja) * 2013-02-08 2016-03-07 サーラス ロジック、インク 周囲雑音二乗平均平方根(rms)検出器
US9536540B2 (en) 2013-07-19 2017-01-03 Knowles Electronics, Llc Speech signal separation and synthesis based on auditory scene analysis and speech modeling
US9640194B1 (en) 2012-10-04 2017-05-02 Knowles Electronics, Llc Noise suppression for speech processing based on machine-learning mask estimation
US9699554B1 (en) 2010-04-21 2017-07-04 Knowles Electronics, Llc Adaptive signal equalization
US9799330B2 (en) 2014-08-28 2017-10-24 Knowles Electronics, Llc Multi-sourced noise suppression
US9830899B1 (en) 2006-05-25 2017-11-28 Knowles Electronics, Llc Adaptive noise cancellation
JP2018036431A (ja) * 2016-08-30 2018-03-08 富士通株式会社 音声処理プログラム、音声処理方法及び音声処理装置
JP2018036442A (ja) * 2016-08-30 2018-03-08 富士通株式会社 音声処理プログラム、音声処理方法及び音声処理装置
JP2020533619A (ja) * 2017-08-17 2020-11-19 セレンス オペレーティング カンパニー 有音音声検出の複雑性低減およびピッチ推定

Families Citing this family (129)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8345890B2 (en) 2006-01-05 2013-01-01 Audience, Inc. System and method for utilizing inter-microphone level differences for speech enhancement
US8204252B1 (en) 2006-10-10 2012-06-19 Audience, Inc. System and method for providing close microphone adaptive array processing
US8744844B2 (en) 2007-07-06 2014-06-03 Audience, Inc. System and method for adaptive intelligent noise suppression
US8194880B2 (en) 2006-01-30 2012-06-05 Audience, Inc. System and method for utilizing omni-directional microphones for speech enhancement
US20070237341A1 (en) * 2006-04-05 2007-10-11 Creative Technology Ltd Frequency domain noise attenuation utilizing two transducers
US8934641B2 (en) 2006-05-25 2015-01-13 Audience, Inc. Systems and methods for reconstructing decomposed audio signals
US8204253B1 (en) 2008-06-30 2012-06-19 Audience, Inc. Self calibration of audio device
US8849231B1 (en) 2007-08-08 2014-09-30 Audience, Inc. System and method for adaptive power control
US8150065B2 (en) 2006-05-25 2012-04-03 Audience, Inc. System and method for processing an audio signal
US8213623B2 (en) * 2007-01-12 2012-07-03 Illusonic Gmbh Method to generate an output audio signal from two or more input audio signals
US8259926B1 (en) 2007-02-23 2012-09-04 Audience, Inc. System and method for 2-channel and 3-channel acoustic echo cancellation
US20090018826A1 (en) * 2007-07-13 2009-01-15 Berlin Andrew A Methods, Systems and Devices for Speech Transduction
US8189766B1 (en) 2007-07-26 2012-05-29 Audience, Inc. System and method for blind subband acoustic echo cancellation postfiltering
DE112007003716T5 (de) * 2007-11-26 2011-01-13 Fujitsu Ltd., Kawasaki Klangverarbeitungsvorrichtung, Korrekturvorrichtung, Korrekturverfahren und Computergrogramm
US8143620B1 (en) 2007-12-21 2012-03-27 Audience, Inc. System and method for adaptive classification of audio sources
US8180064B1 (en) 2007-12-21 2012-05-15 Audience, Inc. System and method for providing voice equalization
US8194882B2 (en) * 2008-02-29 2012-06-05 Audience, Inc. System and method for providing single microphone noise suppression fallback
US8355511B2 (en) 2008-03-18 2013-01-15 Audience, Inc. System and method for envelope-based acoustic echo cancellation
US9142221B2 (en) 2008-04-07 2015-09-22 Cambridge Silicon Radio Limited Noise reduction
EP2301017B1 (en) * 2008-05-09 2016-12-21 Nokia Technologies Oy Audio apparatus
US8521530B1 (en) 2008-06-30 2013-08-27 Audience, Inc. System and method for enhancing a monaural audio signal
US8774423B1 (en) 2008-06-30 2014-07-08 Audience, Inc. System and method for controlling adaptivity of signal modification using a phantom coefficient
US8724829B2 (en) 2008-10-24 2014-05-13 Qualcomm Incorporated Systems, methods, apparatus, and computer-readable media for coherence detection
US8218397B2 (en) * 2008-10-24 2012-07-10 Qualcomm Incorporated Audio source proximity estimation using sensor array for noise reduction
KR101475864B1 (ko) * 2008-11-13 2014-12-23 삼성전자 주식회사 잡음 제거 장치 및 잡음 제거 방법
US8620672B2 (en) * 2009-06-09 2013-12-31 Qualcomm Incorporated Systems, methods, apparatus, and computer-readable media for phase-based processing of multichannel signal
US8948415B1 (en) * 2009-10-26 2015-02-03 Plantronics, Inc. Mobile device with discretionary two microphone noise reduction
US8406430B2 (en) * 2009-11-19 2013-03-26 Infineon Technologies Ag Simulated background noise enabled echo canceller
US9838784B2 (en) 2009-12-02 2017-12-05 Knowles Electronics, Llc Directional audio capture
US9008329B1 (en) 2010-01-26 2015-04-14 Audience, Inc. Noise reduction using multi-feature cluster tracker
US8473287B2 (en) 2010-04-19 2013-06-25 Audience, Inc. Method for jointly optimizing noise reduction and voice quality in a mono or multi-microphone system
EP2561508A1 (en) 2010-04-22 2013-02-27 Qualcomm Incorporated Voice activity detection
US8781137B1 (en) 2010-04-27 2014-07-15 Audience, Inc. Wind noise detection and suppression
US9245538B1 (en) * 2010-05-20 2016-01-26 Audience, Inc. Bandwidth enhancement of speech signals assisted by noise reduction
US9558755B1 (en) 2010-05-20 2017-01-31 Knowles Electronics, Llc Noise suppression assisted automatic speech recognition
US8447596B2 (en) 2010-07-12 2013-05-21 Audience, Inc. Monaural noise suppression based on computational auditory scene analysis
US8611552B1 (en) * 2010-08-25 2013-12-17 Audience, Inc. Direction-aware active noise cancellation system
US8682006B1 (en) 2010-10-20 2014-03-25 Audience, Inc. Noise suppression based on null coherence
US8898058B2 (en) 2010-10-25 2014-11-25 Qualcomm Incorporated Systems, methods, and apparatus for voice activity detection
US8831937B2 (en) * 2010-11-12 2014-09-09 Audience, Inc. Post-noise suppression processing to improve voice quality
US8908877B2 (en) 2010-12-03 2014-12-09 Cirrus Logic, Inc. Ear-coupling detection and adjustment of adaptive response in noise-canceling in personal audio devices
WO2012075343A2 (en) 2010-12-03 2012-06-07 Cirrus Logic, Inc. Oversight control of an adaptive noise canceler in a personal audio device
JP5857403B2 (ja) * 2010-12-17 2016-02-10 富士通株式会社 音声処理装置および音声処理プログラム
US9076431B2 (en) 2011-06-03 2015-07-07 Cirrus Logic, Inc. Filter architecture for an adaptive noise canceler in a personal audio device
US8958571B2 (en) * 2011-06-03 2015-02-17 Cirrus Logic, Inc. MIC covering detection in personal audio devices
US8848936B2 (en) 2011-06-03 2014-09-30 Cirrus Logic, Inc. Speaker damage prevention in adaptive noise-canceling personal audio devices
US9214150B2 (en) 2011-06-03 2015-12-15 Cirrus Logic, Inc. Continuous adaptation of secondary path adaptive response in noise-canceling personal audio devices
US8948407B2 (en) 2011-06-03 2015-02-03 Cirrus Logic, Inc. Bandlimiting anti-noise in personal audio devices having adaptive noise cancellation (ANC)
US9318094B2 (en) 2011-06-03 2016-04-19 Cirrus Logic, Inc. Adaptive noise canceling architecture for a personal audio device
US9824677B2 (en) 2011-06-03 2017-11-21 Cirrus Logic, Inc. Bandlimiting anti-noise in personal audio devices having adaptive noise cancellation (ANC)
US8972251B2 (en) * 2011-06-07 2015-03-03 Qualcomm Incorporated Generating a masking signal on an electronic device
WO2013009949A1 (en) 2011-07-13 2013-01-17 Dts Llc Microphone array processing system
CN103907152B (zh) * 2011-09-02 2016-05-11 Gn奈康有限公司 用于音频信号噪声抑制的方法和系统
US9325821B1 (en) 2011-09-30 2016-04-26 Cirrus Logic, Inc. Sidetone management in an adaptive noise canceling (ANC) system including secondary path modeling
WO2013064628A1 (en) * 2011-11-04 2013-05-10 Brüel & Kjær Sound & Vibration Measurement A/S Computationally efficient broadband filter-and-sum array focusing
US9408011B2 (en) * 2011-12-19 2016-08-02 Qualcomm Incorporated Automated user/sensor location recognition to customize audio performance in a distributed multi-sensor environment
US9258653B2 (en) 2012-03-21 2016-02-09 Semiconductor Components Industries, Llc Method and system for parameter based adaptation of clock speeds to listening devices and audio applications
US9014387B2 (en) 2012-04-26 2015-04-21 Cirrus Logic, Inc. Coordinated control of adaptive noise cancellation (ANC) among earspeaker channels
US9142205B2 (en) 2012-04-26 2015-09-22 Cirrus Logic, Inc. Leakage-modeling adaptive noise canceling for earspeakers
US9082387B2 (en) 2012-05-10 2015-07-14 Cirrus Logic, Inc. Noise burst adaptation of secondary path adaptive response in noise-canceling personal audio devices
US9318090B2 (en) 2012-05-10 2016-04-19 Cirrus Logic, Inc. Downlink tone detection and adaptation of a secondary path response model in an adaptive noise canceling system
US9319781B2 (en) 2012-05-10 2016-04-19 Cirrus Logic, Inc. Frequency and direction-dependent ambient sound handling in personal audio devices having adaptive noise cancellation (ANC)
US9123321B2 (en) 2012-05-10 2015-09-01 Cirrus Logic, Inc. Sequenced adaptation of anti-noise generator response and secondary path response in an adaptive noise canceling system
US9076427B2 (en) 2012-05-10 2015-07-07 Cirrus Logic, Inc. Error-signal content controlled adaptation of secondary and leakage path models in noise-canceling personal audio devices
CN102801861B (zh) * 2012-08-07 2015-08-19 歌尔声学股份有限公司 一种应用于手机的语音增强方法和装置
US9532139B1 (en) 2012-09-14 2016-12-27 Cirrus Logic, Inc. Dual-microphone frequency amplitude response self-calibration
US20140095161A1 (en) * 2012-09-28 2014-04-03 At&T Intellectual Property I, L.P. System and method for channel equalization using characteristics of an unknown signal
US20140278393A1 (en) 2013-03-12 2014-09-18 Motorola Mobility Llc Apparatus and Method for Power Efficient Signal Conditioning for a Voice Recognition System
US9369798B1 (en) 2013-03-12 2016-06-14 Cirrus Logic, Inc. Internal dynamic range control in an adaptive noise cancellation (ANC) system
US9106989B2 (en) 2013-03-13 2015-08-11 Cirrus Logic, Inc. Adaptive-noise canceling (ANC) effectiveness estimation and correction in a personal audio device
US9414150B2 (en) 2013-03-14 2016-08-09 Cirrus Logic, Inc. Low-latency multi-driver adaptive noise canceling (ANC) system for a personal audio device
US9215749B2 (en) 2013-03-14 2015-12-15 Cirrus Logic, Inc. Reducing an acoustic intensity vector with adaptive noise cancellation with two error microphones
US9635480B2 (en) 2013-03-15 2017-04-25 Cirrus Logic, Inc. Speaker impedance monitoring
US9467776B2 (en) 2013-03-15 2016-10-11 Cirrus Logic, Inc. Monitoring of speaker impedance to detect pressure applied between mobile device and ear
US9208771B2 (en) 2013-03-15 2015-12-08 Cirrus Logic, Inc. Ambient noise-based adaptation of secondary path adaptive response in noise-canceling personal audio devices
US9502020B1 (en) 2013-03-15 2016-11-22 Cirrus Logic, Inc. Robust adaptive noise canceling (ANC) in a personal audio device
US10206032B2 (en) 2013-04-10 2019-02-12 Cirrus Logic, Inc. Systems and methods for multi-mode adaptive noise cancellation for audio headsets
US9066176B2 (en) 2013-04-15 2015-06-23 Cirrus Logic, Inc. Systems and methods for adaptive noise cancellation including dynamic bias of coefficients of an adaptive noise cancellation system
US9462376B2 (en) 2013-04-16 2016-10-04 Cirrus Logic, Inc. Systems and methods for hybrid adaptive noise cancellation
US9460701B2 (en) 2013-04-17 2016-10-04 Cirrus Logic, Inc. Systems and methods for adaptive noise cancellation by biasing anti-noise level
US9478210B2 (en) 2013-04-17 2016-10-25 Cirrus Logic, Inc. Systems and methods for hybrid adaptive noise cancellation
US9578432B1 (en) 2013-04-24 2017-02-21 Cirrus Logic, Inc. Metric and tool to evaluate secondary path design in adaptive noise cancellation systems
US20180317019A1 (en) 2013-05-23 2018-11-01 Knowles Electronics, Llc Acoustic activity detecting microphone
US9264808B2 (en) 2013-06-14 2016-02-16 Cirrus Logic, Inc. Systems and methods for detection and cancellation of narrow-band noise
US9392364B1 (en) 2013-08-15 2016-07-12 Cirrus Logic, Inc. Virtual microphone for adaptive noise cancellation in personal audio devices
US9666176B2 (en) 2013-09-13 2017-05-30 Cirrus Logic, Inc. Systems and methods for adaptive noise cancellation by adaptively shaping internal white noise to train a secondary path
US9508345B1 (en) 2013-09-24 2016-11-29 Knowles Electronics, Llc Continuous voice sensing
US9620101B1 (en) 2013-10-08 2017-04-11 Cirrus Logic, Inc. Systems and methods for maintaining playback fidelity in an audio system with adaptive noise cancellation
US10219071B2 (en) 2013-12-10 2019-02-26 Cirrus Logic, Inc. Systems and methods for bandlimiting anti-noise in personal audio devices having adaptive noise cancellation
US9704472B2 (en) 2013-12-10 2017-07-11 Cirrus Logic, Inc. Systems and methods for sharing secondary path information between audio channels in an adaptive noise cancellation system
US10382864B2 (en) 2013-12-10 2019-08-13 Cirrus Logic, Inc. Systems and methods for providing adaptive playback equalization in an audio device
US9953634B1 (en) 2013-12-17 2018-04-24 Knowles Electronics, Llc Passive training for automatic speech recognition
US9369557B2 (en) 2014-03-05 2016-06-14 Cirrus Logic, Inc. Frequency-dependent sidetone calibration
US9479860B2 (en) 2014-03-07 2016-10-25 Cirrus Logic, Inc. Systems and methods for enhancing performance of audio transducer based on detection of transducer status
US9648410B1 (en) 2014-03-12 2017-05-09 Cirrus Logic, Inc. Control of audio output of headphone earbuds based on the environment around the headphone earbuds
CN106068654B (zh) * 2014-03-17 2020-01-31 罗伯特·博世有限公司 用于生产中的mems扩音器的所有电噪声测试的系统和方法
US9437188B1 (en) 2014-03-28 2016-09-06 Knowles Electronics, Llc Buffered reprocessing for multi-microphone automatic speech recognition assist
US9319784B2 (en) 2014-04-14 2016-04-19 Cirrus Logic, Inc. Frequency-shaped noise-based adaptation of secondary path adaptive response in noise-canceling personal audio devices
US9609416B2 (en) 2014-06-09 2017-03-28 Cirrus Logic, Inc. Headphone responsive to optical signaling
US10181315B2 (en) 2014-06-13 2019-01-15 Cirrus Logic, Inc. Systems and methods for selectively enabling and disabling adaptation of an adaptive noise cancellation system
KR101883421B1 (ko) 2014-07-28 2018-07-30 후아웨이 테크놀러지 컴퍼니 리미티드 통신 장치를 위한 소리 신호 처리 방법 및 장치
US9478212B1 (en) 2014-09-03 2016-10-25 Cirrus Logic, Inc. Systems and methods for use of adaptive secondary path estimate to control equalization in an audio device
WO2016040885A1 (en) 2014-09-12 2016-03-17 Audience, Inc. Systems and methods for restoration of speech components
US9552805B2 (en) 2014-12-19 2017-01-24 Cirrus Logic, Inc. Systems and methods for performance and stability control for feedback adaptive noise cancellation
WO2016112113A1 (en) 2015-01-07 2016-07-14 Knowles Electronics, Llc Utilizing digital microphones for low power keyword detection and noise suppression
JP6964581B2 (ja) 2015-08-20 2021-11-10 シーラス ロジック インターナショナル セミコンダクター リミテッド 固定応答フィルタによって部分的に提供されるフィードバック応答を有するフィードバック適応雑音消去(anc)コントローラおよび方法
US9578415B1 (en) 2015-08-21 2017-02-21 Cirrus Logic, Inc. Hybrid adaptive noise cancellation system with filtered error microphone signal
US10242689B2 (en) * 2015-09-17 2019-03-26 Intel IP Corporation Position-robust multiple microphone noise estimation techniques
US20170206898A1 (en) * 2016-01-14 2017-07-20 Knowles Electronics, Llc Systems and methods for assisting automatic speech recognition
US10013966B2 (en) 2016-03-15 2018-07-03 Cirrus Logic, Inc. Systems and methods for adaptive active noise cancellation for multiple-driver personal audio device
US9820042B1 (en) 2016-05-02 2017-11-14 Knowles Electronics, Llc Stereo separation and directional suppression with omni-directional microphones
CN107026934B (zh) * 2016-10-27 2019-09-27 华为技术有限公司 一种声源定位方法和装置
WO2019091576A1 (en) 2017-11-10 2019-05-16 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Audio encoders, audio decoders, methods and computer programs adapting an encoding and decoding of least significant bits
EP3483879A1 (en) * 2017-11-10 2019-05-15 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Analysis/synthesis windowing function for modulated lapped transformation
EP3483884A1 (en) 2017-11-10 2019-05-15 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Signal filtering
EP3483886A1 (en) 2017-11-10 2019-05-15 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Selecting pitch lag
EP3483882A1 (en) 2017-11-10 2019-05-15 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Controlling bandwidth in encoders and/or decoders
US10885907B2 (en) * 2018-02-14 2021-01-05 Cirrus Logic, Inc. Noise reduction system and method for audio device with multiple microphones
JP2020036215A (ja) 2018-08-30 2020-03-05 Tdk株式会社 Memsマイクロフォン
JP2020036214A (ja) 2018-08-30 2020-03-05 Tdk株式会社 Memsマイクロフォン
KR102570384B1 (ko) * 2018-12-27 2023-08-25 삼성전자주식회사 가전기기 및 이의 음성 인식 방법
US10891954B2 (en) 2019-01-03 2021-01-12 International Business Machines Corporation Methods and systems for managing voice response systems based on signals from external devices
US10978086B2 (en) * 2019-07-19 2021-04-13 Apple Inc. Echo cancellation using a subset of multiple microphones as reference channels
US11238853B2 (en) 2019-10-30 2022-02-01 Comcast Cable Communications, Llc Keyword-based audio source localization
KR102288182B1 (ko) * 2020-03-12 2021-08-11 한국과학기술원 음성 사생활 보호 방법, 음성 사생활 보호 장치 및 이를 이용한 모바일 단말
KR20210125846A (ko) * 2020-04-09 2021-10-19 삼성전자주식회사 복수의 마이크로폰들을 사용한 음성 처리 장치 및 방법
KR102422495B1 (ko) * 2021-03-30 2022-07-20 엔오스 주식회사 휴대용 개인형 온택트 장치 및 그 제어방법
GB2606366B (en) * 2021-05-05 2023-10-18 Waves Audio Ltd Self-activated speech enhancement
CN113689875B (zh) * 2021-08-25 2024-02-06 湖南芯海聆半导体有限公司 一种面向数字助听器的双麦克风语音增强方法和装置

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10313497A (ja) * 1996-09-18 1998-11-24 Nippon Telegr & Teleph Corp <Ntt> 音源分離方法、装置及び記録媒体
JPH11249693A (ja) * 1998-03-02 1999-09-17 Nippon Telegr & Teleph Corp <Ntt> 収音装置
JP2005110127A (ja) * 2003-10-01 2005-04-21 Canon Inc 風雑音検出装置及びそれを有するビデオカメラ装置
JP2005195955A (ja) * 2004-01-08 2005-07-21 Toshiba Corp 雑音抑圧装置及び雑音抑圧方法

Family Cites Families (233)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US3976863A (en) 1974-07-01 1976-08-24 Alfred Engel Optimal decoder for non-stationary signals
US3978287A (en) 1974-12-11 1976-08-31 Nasa Real time analysis of voiced sounds
US4137510A (en) 1976-01-22 1979-01-30 Victor Company Of Japan, Ltd. Frequency band dividing filter
GB2102254B (en) 1981-05-11 1985-08-07 Kokusai Denshin Denwa Co Ltd A speech analysis-synthesis system
US4433604A (en) 1981-09-22 1984-02-28 Texas Instruments Incorporated Frequency domain digital encoding technique for musical signals
JPS5876899A (ja) 1981-10-31 1983-05-10 株式会社東芝 音声区間検出装置
US4536844A (en) 1983-04-26 1985-08-20 Fairchild Camera And Instrument Corporation Method and apparatus for simulating aural response information
US5054085A (en) 1983-05-18 1991-10-01 Speech Systems, Inc. Preprocessing system for speech recognition
US4674125A (en) 1983-06-27 1987-06-16 Rca Corporation Real-time hierarchal pyramid signal processing apparatus
US4581758A (en) 1983-11-04 1986-04-08 At&T Bell Laboratories Acoustic direction identification system
GB2158980B (en) 1984-03-23 1989-01-05 Ricoh Kk Extraction of phonemic information
US4649505A (en) 1984-07-02 1987-03-10 General Electric Company Two-input crosstalk-resistant adaptive noise canceller
GB8429879D0 (en) 1984-11-27 1985-01-03 Rca Corp Signal processing apparatus
US4628529A (en) 1985-07-01 1986-12-09 Motorola, Inc. Noise suppression system
US4630304A (en) 1985-07-01 1986-12-16 Motorola, Inc. Automatic background noise estimator for a noise suppression system
US4658426A (en) 1985-10-10 1987-04-14 Harold Antin Adaptive noise suppressor
JPH0211482Y2 (ja) 1985-12-25 1990-03-23
GB8612453D0 (en) 1986-05-22 1986-07-02 Inmos Ltd Multistage digital signal multiplication & addition
US4812996A (en) 1986-11-26 1989-03-14 Tektronix, Inc. Signal viewing instrumentation control system
US4811404A (en) 1987-10-01 1989-03-07 Motorola, Inc. Noise suppression system
IL84902A (en) 1987-12-21 1991-12-15 D S P Group Israel Ltd Digital autocorrelation system for detecting speech in noisy audio signal
US5027410A (en) 1988-11-10 1991-06-25 Wisconsin Alumni Research Foundation Adaptive, programmable signal processing and filtering for hearing aids
US5099738A (en) 1989-01-03 1992-03-31 Hotz Instruments Technology, Inc. MIDI musical translator
CA2011775C (en) 1989-03-10 1995-06-27 Yutaka Kaneda Method of detecting acoustic signal
US5187776A (en) 1989-06-16 1993-02-16 International Business Machines Corp. Image editor zoom function
EP0427953B1 (en) 1989-10-06 1996-01-17 Matsushita Electric Industrial Co., Ltd. Apparatus and method for speech rate modification
US5142961A (en) 1989-11-07 1992-09-01 Fred Paroutaud Method and apparatus for stimulation of acoustic musical instruments
GB2239971B (en) 1989-12-06 1993-09-29 Ca Nat Research Council System for separating speech from background noise
US5058419A (en) 1990-04-10 1991-10-22 Earl H. Ruble Method and apparatus for determining the location of a sound source
JPH0454100A (ja) 1990-06-22 1992-02-21 Clarion Co Ltd 音声信号補償回路
US5119711A (en) 1990-11-01 1992-06-09 International Business Machines Corporation Midi file translation
FR2673238B1 (fr) * 1991-02-26 1999-01-08 Schlumberger Services Petrol Procede pour caracteriser les heterogeneites de texture de formations geologiques traversees par un forage.
US5224170A (en) 1991-04-15 1993-06-29 Hewlett-Packard Company Time domain compensation for transducer mismatch
US5210366A (en) 1991-06-10 1993-05-11 Sykes Jr Richard O Method and device for detecting and separating voices in a complex musical composition
US5175769A (en) 1991-07-23 1992-12-29 Rolm Systems Method for time-scale modification of signals
DE69228211T2 (de) 1991-08-09 1999-07-08 Koninkl Philips Electronics Nv Verfahren und Apparat zur Handhabung von Höhe und Dauer eines physikalischen Audiosignals
JP3176474B2 (ja) 1992-06-03 2001-06-18 沖電気工業株式会社 適応ノイズキャンセラ装置
US5381512A (en) 1992-06-24 1995-01-10 Moscom Corporation Method and apparatus for speech feature recognition based on models of auditory signal processing
US5402496A (en) 1992-07-13 1995-03-28 Minnesota Mining And Manufacturing Company Auditory prosthesis, noise suppression apparatus and feedback suppression apparatus having focused adaptive filtering
US5732143A (en) 1992-10-29 1998-03-24 Andrea Electronics Corp. Noise cancellation apparatus
US5381473A (en) 1992-10-29 1995-01-10 Andrea Electronics Corporation Noise cancellation apparatus
US5402493A (en) 1992-11-02 1995-03-28 Central Institute For The Deaf Electronic simulator of non-linear and active cochlear spectrum analysis
JP2508574B2 (ja) 1992-11-10 1996-06-19 日本電気株式会社 多チャンネルエコ―除去装置
US5355329A (en) 1992-12-14 1994-10-11 Apple Computer, Inc. Digital filter having independent damping and frequency parameters
US5400409A (en) 1992-12-23 1995-03-21 Daimler-Benz Ag Noise-reduction method for noise-affected voice channels
US5473759A (en) 1993-02-22 1995-12-05 Apple Computer, Inc. Sound analysis and resynthesis using correlograms
US5590241A (en) * 1993-04-30 1996-12-31 Motorola Inc. Speech processing system and method for enhancing a speech signal in a noisy environment
DE4316297C1 (de) 1993-05-14 1994-04-07 Fraunhofer Ges Forschung Frequenzanalyseverfahren
DE4330243A1 (de) 1993-09-07 1995-03-09 Philips Patentverwaltung Sprachverarbeitungseinrichtung
US5675778A (en) 1993-10-04 1997-10-07 Fostex Corporation Of America Method and apparatus for audio editing incorporating visual comparison
US5502211A (en) 1993-10-26 1996-03-26 Sun Company, Inc. (R&M) Substituted dipyrromethanes and their preparation
US5574824A (en) 1994-04-11 1996-11-12 The United States Of America As Represented By The Secretary Of The Air Force Analysis/synthesis-based microphone array speech enhancer with variable signal distortion
US5471195A (en) 1994-05-16 1995-11-28 C & K Systems, Inc. Direction-sensing acoustic glass break detecting system
US5544250A (en) 1994-07-18 1996-08-06 Motorola Noise suppression system and method therefor
JPH0896514A (ja) 1994-07-28 1996-04-12 Sony Corp オーディオ信号処理装置
US5729612A (en) 1994-08-05 1998-03-17 Aureal Semiconductor Inc. Method and apparatus for measuring head-related transfer functions
SE505156C2 (sv) 1995-01-30 1997-07-07 Ericsson Telefon Ab L M Förfarande för bullerundertryckning genom spektral subtraktion
US5682463A (en) 1995-02-06 1997-10-28 Lucent Technologies Inc. Perceptual audio compression based on loudness uncertainty
US5920840A (en) 1995-02-28 1999-07-06 Motorola, Inc. Communication system and method using a speaker dependent time-scaling technique
US5587998A (en) 1995-03-03 1996-12-24 At&T Method and apparatus for reducing residual far-end echo in voice communication networks
US5706395A (en) 1995-04-19 1998-01-06 Texas Instruments Incorporated Adaptive weiner filtering using a dynamic suppression factor
US6263307B1 (en) 1995-04-19 2001-07-17 Texas Instruments Incorporated Adaptive weiner filtering using line spectral frequencies
JP3580917B2 (ja) 1995-08-30 2004-10-27 本田技研工業株式会社 燃料電池
US5809463A (en) 1995-09-15 1998-09-15 Hughes Electronics Method of detecting double talk in an echo canceller
US5694474A (en) 1995-09-18 1997-12-02 Interval Research Corporation Adaptive filter for signal processing and method therefor
US6002776A (en) 1995-09-18 1999-12-14 Interval Research Corporation Directional acoustic signal processor and method therefor
US5792971A (en) 1995-09-29 1998-08-11 Opcode Systems, Inc. Method and system for editing digital audio information with music-like parameters
IT1281001B1 (it) 1995-10-27 1998-02-11 Cselt Centro Studi Lab Telecom Procedimento e apparecchiatura per codificare, manipolare e decodificare segnali audio.
US5956674A (en) 1995-12-01 1999-09-21 Digital Theater Systems, Inc. Multi-channel predictive subband audio coder using psychoacoustic adaptive bit allocation in frequency, time and over the multiple channels
FI100840B (fi) 1995-12-12 1998-02-27 Nokia Mobile Phones Ltd Kohinanvaimennin ja menetelmä taustakohinan vaimentamiseksi kohinaises ta puheesta sekä matkaviestin
US5732189A (en) 1995-12-22 1998-03-24 Lucent Technologies Inc. Audio signal coding with a signal adaptive filterbank
JPH09212196A (ja) 1996-01-31 1997-08-15 Nippon Telegr & Teleph Corp <Ntt> 雑音抑圧装置
US5749064A (en) 1996-03-01 1998-05-05 Texas Instruments Incorporated Method and system for time scale modification utilizing feature vectors about zero crossing points
US5825320A (en) 1996-03-19 1998-10-20 Sony Corporation Gain control method for audio encoding device
US6978159B2 (en) 1996-06-19 2005-12-20 Board Of Trustees Of The University Of Illinois Binaural signal processing using multiple acoustic sensors and digital filtering
US6222927B1 (en) 1996-06-19 2001-04-24 The University Of Illinois Binaural signal processing system and method
US6072881A (en) 1996-07-08 2000-06-06 Chiefs Voice Incorporated Microphone noise rejection system
US5796819A (en) 1996-07-24 1998-08-18 Ericsson Inc. Echo canceller for non-linear circuits
US5806025A (en) 1996-08-07 1998-09-08 U S West, Inc. Method and system for adaptive filtering of speech signals using signal-to-noise ratio to choose subband filter bank
JPH1054855A (ja) 1996-08-09 1998-02-24 Advantest Corp スペクトラムアナライザ
CA2302289C (en) 1996-08-29 2005-11-08 Gregory G. Raleigh Spatio-temporal processing for communication
US6097820A (en) 1996-12-23 2000-08-01 Lucent Technologies Inc. System and method for suppressing noise in digitally represented voice signals
JP2930101B2 (ja) 1997-01-29 1999-08-03 日本電気株式会社 雑音消去装置
US5933495A (en) 1997-02-07 1999-08-03 Texas Instruments Incorporated Subband acoustic noise suppression
EP1326479B2 (en) 1997-04-16 2018-05-23 Emma Mixed Signal C.V. Method and apparatus for noise reduction, particularly in hearing aids
CA2287261C (en) 1997-05-01 2007-10-23 Murphy, Timothy M. Apparatus and method for a low power digital filter bank
US6151397A (en) 1997-05-16 2000-11-21 Motorola, Inc. Method and system for reducing undesired signals in a communication environment
JP3541339B2 (ja) 1997-06-26 2004-07-07 富士通株式会社 マイクロホンアレイ装置
DE59710269D1 (de) 1997-07-02 2003-07-17 Micronas Semiconductor Holding Filterkombination zur Abtastratenumsetzung
US6430295B1 (en) 1997-07-11 2002-08-06 Telefonaktiebolaget Lm Ericsson (Publ) Methods and apparatus for measuring signal level and delay at multiple sensors
JP3216704B2 (ja) 1997-08-01 2001-10-09 日本電気株式会社 適応アレイ装置
US6216103B1 (en) 1997-10-20 2001-04-10 Sony Corporation Method for implementing a speech recognition system to determine speech endpoints during conditions with background noise
US6134524A (en) 1997-10-24 2000-10-17 Nortel Networks Corporation Method and apparatus to detect and delimit foreground speech
US20020002455A1 (en) 1998-01-09 2002-01-03 At&T Corporation Core estimator and adaptive gains from signal to noise ratio in a hybrid speech enhancement system
US6717991B1 (en) 1998-05-27 2004-04-06 Telefonaktiebolaget Lm Ericsson (Publ) System and method for dual microphone signal noise reduction using spectral subtraction
US6549586B2 (en) 1999-04-12 2003-04-15 Telefonaktiebolaget L M Ericsson System and method for dual microphone signal noise reduction using spectral subtraction
US5990405A (en) 1998-07-08 1999-11-23 Gibson Guitar Corp. System and method for generating and controlling a simulated musical concert experience
US7209567B1 (en) 1998-07-09 2007-04-24 Purdue Research Foundation Communication system with adaptive noise suppression
JP4163294B2 (ja) 1998-07-31 2008-10-08 株式会社東芝 雑音抑圧処理装置および雑音抑圧処理方法
US6173255B1 (en) 1998-08-18 2001-01-09 Lockheed Martin Corporation Synchronized overlap add voice processing using windows and one bit correlators
US6223090B1 (en) 1998-08-24 2001-04-24 The United States Of America As Represented By The Secretary Of The Air Force Manikin positioning for acoustic measuring
US6122610A (en) 1998-09-23 2000-09-19 Verance Corporation Noise suppression for low bitrate speech coder
US7003120B1 (en) 1998-10-29 2006-02-21 Paul Reed Smith Guitars, Inc. Method of modifying harmonic content of a complex waveform
US6469732B1 (en) 1998-11-06 2002-10-22 Vtel Corporation Acoustic source location using a microphone array
US6266633B1 (en) 1998-12-22 2001-07-24 Itt Manufacturing Enterprises Noise suppression and channel equalization preprocessor for speech and speaker recognizers: method and apparatus
US6381570B2 (en) 1999-02-12 2002-04-30 Telogy Networks, Inc. Adaptive two-threshold method for discriminating noise from speech in a communication signal
US6363345B1 (en) 1999-02-18 2002-03-26 Andrea Electronics Corporation System, method and apparatus for cancelling noise
US6496795B1 (en) 1999-05-05 2002-12-17 Microsoft Corporation Modulated complex lapped transform for integrated signal enhancement and coding
EP1161852A2 (de) 1999-03-19 2001-12-12 Siemens Aktiengesellschaft Verfahren und einrichtung zum aufnehmen und bearbeiten von audiosignalen in einer störschallerfüllten umgebung
GB2348350B (en) 1999-03-26 2004-02-18 Mitel Corp Echo cancelling/suppression for handsets
US6487257B1 (en) 1999-04-12 2002-11-26 Telefonaktiebolaget L M Ericsson Signal noise reduction by time-domain spectral subtraction using fixed filters
GB9911737D0 (en) 1999-05-21 1999-07-21 Philips Electronics Nv Audio signal time scale modification
US6226616B1 (en) 1999-06-21 2001-05-01 Digital Theater Systems, Inc. Sound quality of established low bit-rate audio coding systems without loss of decoder compatibility
US20060072768A1 (en) 1999-06-24 2006-04-06 Schwartz Stephen R Complementary-pair equalizer
US6355869B1 (en) 1999-08-19 2002-03-12 Duane Mitton Method and system for creating musical scores from musical recordings
GB9922654D0 (en) 1999-09-27 1999-11-24 Jaber Marwan Noise suppression system
FI116643B (fi) 1999-11-15 2006-01-13 Nokia Corp Kohinan vaimennus
US6513004B1 (en) 1999-11-24 2003-01-28 Matsushita Electric Industrial Co., Ltd. Optimized local feature extraction for automatic speech recognition
US6549630B1 (en) 2000-02-04 2003-04-15 Plantronics, Inc. Signal expander with discrimination between close and distant acoustic source
DE10195933T1 (de) 2000-03-14 2003-04-30 Audia Technology Inc Adaptiver Mikrophonabgleich in einem Richtsystem mit mehreren Mikrophonen
US7076315B1 (en) 2000-03-24 2006-07-11 Audience, Inc. Efficient computation of log-frequency-scale digital filter cascade
US6434417B1 (en) 2000-03-28 2002-08-13 Cardiac Pacemakers, Inc. Method and system for detecting cardiac depolarization
CN1436436A (zh) 2000-03-31 2003-08-13 克拉里提有限公司 用于话音信号提取的方法和设备
JP2001296343A (ja) 2000-04-11 2001-10-26 Nec Corp 音源方位設定装置及びそれを備えた撮像装置、送信システム
US7225001B1 (en) 2000-04-24 2007-05-29 Telefonaktiebolaget Lm Ericsson (Publ) System and method for distributed noise suppression
DE60125553T2 (de) 2000-05-10 2007-10-04 The Board Of Trustees For The University Of Illinois, Urbana Verfahren zur interferenzunterdrückung
ATE288666T1 (de) 2000-05-26 2005-02-15 Koninkl Philips Electronics Nv Verfahren zur rauschunterdrückung in einem adaptiven strahlformer
US6622030B1 (en) 2000-06-29 2003-09-16 Ericsson Inc. Echo suppression using adaptive gain based on residual echo energy
US7246058B2 (en) 2001-05-30 2007-07-17 Aliph, Inc. Detecting voiced and unvoiced speech using both acoustic and nonacoustic sensors
US8019091B2 (en) 2000-07-19 2011-09-13 Aliphcom, Inc. Voice activity detector (VAD) -based multiple-microphone acoustic noise suppression
US6718309B1 (en) 2000-07-26 2004-04-06 Ssi Corporation Continuously variable time scale modification of digital audio signals
JP4815661B2 (ja) 2000-08-24 2011-11-16 ソニー株式会社 信号処理装置及び信号処理方法
DE10045197C1 (de) 2000-09-13 2002-03-07 Siemens Audiologische Technik Verfahren zum Betrieb eines Hörhilfegerätes oder Hörgerätessystems sowie Hörhilfegerät oder Hörgerätesystem
US7020605B2 (en) 2000-09-15 2006-03-28 Mindspeed Technologies, Inc. Speech coding system with time-domain noise attenuation
WO2002029780A2 (en) 2000-10-04 2002-04-11 Clarity, Llc Speech detection with source separation
US7117145B1 (en) * 2000-10-19 2006-10-03 Lear Corporation Adaptive filter for speech enhancement in a noisy environment
US7092882B2 (en) 2000-12-06 2006-08-15 Ncr Corporation Noise suppression in beam-steered microphone array
US20020133334A1 (en) 2001-02-02 2002-09-19 Geert Coorman Time scale modification of digitally sampled waveforms in the time domain
US7206418B2 (en) 2001-02-12 2007-04-17 Fortemedia, Inc. Noise suppression for a wireless communication device
US7617099B2 (en) 2001-02-12 2009-11-10 FortMedia Inc. Noise suppression by two-channel tandem spectrum modification for speech signal in an automobile
US6915264B2 (en) 2001-02-22 2005-07-05 Lucent Technologies Inc. Cochlear filter bank structure for determining masked thresholds for use in perceptual audio coding
SE0101175D0 (sv) 2001-04-02 2001-04-02 Coding Technologies Sweden Ab Aliasing reduction using complex-exponential-modulated filterbanks
WO2002082428A1 (en) 2001-04-05 2002-10-17 Koninklijke Philips Electronics N.V. Time-scale modification of signals applying techniques specific to determined signal types
DE10119277A1 (de) 2001-04-20 2002-10-24 Alcatel Sa Verfahren zur Maskierung von Geräuschmodulationen und Störgeräuschen bei der Sprachübertragung
EP1253581B1 (en) 2001-04-27 2004-06-30 CSEM Centre Suisse d'Electronique et de Microtechnique S.A. - Recherche et Développement Method and system for speech enhancement in a noisy environment
GB2375688B (en) 2001-05-14 2004-09-29 Motorola Ltd Telephone apparatus and a communication method using such apparatus
JP3457293B2 (ja) 2001-06-06 2003-10-14 三菱電機株式会社 雑音抑圧装置及び雑音抑圧方法
US6493668B1 (en) 2001-06-15 2002-12-10 Yigal Brandman Speech feature extraction system
AUPR612001A0 (en) 2001-07-04 2001-07-26 Soundscience@Wm Pty Ltd System and method for directional noise monitoring
US7142677B2 (en) 2001-07-17 2006-11-28 Clarity Technologies, Inc. Directional sound acquisition
US6584203B2 (en) 2001-07-18 2003-06-24 Agere Systems Inc. Second-order adaptive differential microphone array
EP1413167A2 (en) 2001-07-20 2004-04-28 Koninklijke Philips Electronics N.V. Sound reinforcement system having an multi microphone echo suppressor as post processor
CA2354858A1 (en) 2001-08-08 2003-02-08 Dspfactory Ltd. Subband directional audio signal processing using an oversampled filterbank
KR20040044982A (ko) 2001-09-24 2004-05-31 클라리티 엘엘씨 선택적인 사운드 증강
US6937978B2 (en) 2001-10-30 2005-08-30 Chungwa Telecom Co., Ltd. Suppression system of background noise of speech signals and the method thereof
US6792118B2 (en) 2001-11-14 2004-09-14 Applied Neurosystems Corporation Computation of multi-sensor time delays
US6785381B2 (en) 2001-11-27 2004-08-31 Siemens Information And Communication Networks, Inc. Telephone having improved hands free operation audio quality and method of operation thereof
US20030103632A1 (en) 2001-12-03 2003-06-05 Rafik Goubran Adaptive sound masking system and method
US7315623B2 (en) 2001-12-04 2008-01-01 Harman Becker Automotive Systems Gmbh Method for supressing surrounding noise in a hands-free device and hands-free device
US7065485B1 (en) 2002-01-09 2006-06-20 At&T Corp Enhancing speech intelligibility using variable-rate time-scale modification
US7171008B2 (en) 2002-02-05 2007-01-30 Mh Acoustics, Llc Reducing noise in audio systems
US8098844B2 (en) * 2002-02-05 2012-01-17 Mh Acoustics, Llc Dual-microphone spatial noise suppression
US20050228518A1 (en) 2002-02-13 2005-10-13 Applied Neurosystems Corporation Filter set for frequency analysis
EP1351544A3 (en) 2002-03-08 2008-03-19 Gennum Corporation Low-noise directional microphone system
AU2003233425A1 (en) 2002-03-22 2003-10-13 Georgia Tech Research Corporation Analog audio enhancement system using a noise suppression algorithm
JP2005522078A (ja) 2002-03-27 2005-07-21 アリフコム 通信システムと共に用いるためのマイクロフォンおよび発声活動検出(vad)構成
JP2004023481A (ja) 2002-06-17 2004-01-22 Alpine Electronics Inc 音響信号処理装置及び方法並びにオーディオ装置
US7242762B2 (en) 2002-06-24 2007-07-10 Freescale Semiconductor, Inc. Monitoring and control of an adaptive filter in a communication system
JP4227772B2 (ja) 2002-07-19 2009-02-18 日本電気株式会社 オーディオ復号装置と復号方法およびプログラム
EP2019391B1 (en) 2002-07-19 2013-01-16 NEC Corporation Audio decoding apparatus and decoding method and program
US20040078199A1 (en) 2002-08-20 2004-04-22 Hanoh Kremer Method for auditory based noise reduction and an apparatus for auditory based noise reduction
US6917688B2 (en) 2002-09-11 2005-07-12 Nanyang Technological University Adaptive noise cancelling microphone system
US7062040B2 (en) 2002-09-20 2006-06-13 Agere Systems Inc. Suppression of echo signals and the like
JP4348706B2 (ja) 2002-10-08 2009-10-21 日本電気株式会社 アレイ装置および携帯端末
US7146316B2 (en) 2002-10-17 2006-12-05 Clarity Technologies, Inc. Noise reduction in subbanded speech signals
US7092529B2 (en) 2002-11-01 2006-08-15 Nanyang Technological University Adaptive control system for noise cancellation
US7174022B1 (en) 2002-11-15 2007-02-06 Fortemedia, Inc. Small array microphone for beam-forming and noise suppression
EP1432222A1 (de) 2002-12-20 2004-06-23 Siemens Aktiengesellschaft Echounterdrückung für komprimierte Spache
US7885420B2 (en) 2003-02-21 2011-02-08 Qnx Software Systems Co. Wind noise suppression system
US8271279B2 (en) 2003-02-21 2012-09-18 Qnx Software Systems Limited Signature noise removal
US7949522B2 (en) 2003-02-21 2011-05-24 Qnx Software Systems Co. System for suppressing rain noise
GB2398913B (en) 2003-02-27 2005-08-17 Motorola Inc Noise estimation in speech recognition
FR2851879A1 (fr) 2003-02-27 2004-09-03 France Telecom Procede de traitement de donnees sonores compressees, pour spatialisation.
US7233832B2 (en) 2003-04-04 2007-06-19 Apple Inc. Method and apparatus for expanding audio data
US7428000B2 (en) 2003-06-26 2008-09-23 Microsoft Corp. System and method for distributed meetings
TWI221561B (en) 2003-07-23 2004-10-01 Ali Corp Nonlinear overlap method for time scaling
DE10339973A1 (de) 2003-08-29 2005-03-17 Daimlerchrysler Ag Intelligentes akustisches Mikrofon-Frontend mit Spracherkenner-Feedback
US7099821B2 (en) 2003-09-12 2006-08-29 Softmax, Inc. Separation of target acoustic signals in a multi-transducer arrangement
US20070067166A1 (en) 2003-09-17 2007-03-22 Xingde Pan Method and device of multi-resolution vector quantilization for audio encoding and decoding
JP4396233B2 (ja) 2003-11-13 2010-01-13 パナソニック株式会社 複素指数変調フィルタバンクの信号分析方法、信号合成方法、そのプログラム及びその記録媒体
US6982377B2 (en) 2003-12-18 2006-01-03 Texas Instruments Incorporated Time-scale modification of music signals based on polyphase filterbanks and constrained time-domain processing
US7499686B2 (en) 2004-02-24 2009-03-03 Microsoft Corporation Method and apparatus for multi-sensory speech enhancement on a mobile device
EP1581026B1 (en) 2004-03-17 2015-11-11 Nuance Communications, Inc. Method for detecting and reducing noise from a microphone array
US20050288923A1 (en) 2004-06-25 2005-12-29 The Hong Kong University Of Science And Technology Speech enhancement by noise masking
US8340309B2 (en) 2004-08-06 2012-12-25 Aliphcom, Inc. Noise suppressing multi-microphone headset
CN101015001A (zh) 2004-09-07 2007-08-08 皇家飞利浦电子股份有限公司 提高了噪声抑制能力的电话装置
DE602004015987D1 (de) 2004-09-23 2008-10-02 Harman Becker Automotive Sys Mehrkanalige adaptive Sprachsignalverarbeitung mit Rauschunterdrückung
US7383179B2 (en) 2004-09-28 2008-06-03 Clarity Technologies, Inc. Method of cascading noise reduction algorithms to avoid speech distortion
US8170879B2 (en) 2004-10-26 2012-05-01 Qnx Software Systems Limited Periodic signal enhancement system
US20060133621A1 (en) * 2004-12-22 2006-06-22 Broadcom Corporation Wireless telephone having multiple microphones
US20070116300A1 (en) 2004-12-22 2007-05-24 Broadcom Corporation Channel decoding for wireless telephones with multiple microphones and multiple description transmission
US20060149535A1 (en) 2004-12-30 2006-07-06 Lg Electronics Inc. Method for controlling speed of audio signals
US20060184363A1 (en) 2005-02-17 2006-08-17 Mccree Alan Noise suppression
US8311819B2 (en) 2005-06-15 2012-11-13 Qnx Software Systems Limited System for detecting speech with background voice estimates and noise estimates
WO2007003683A1 (en) 2005-06-30 2007-01-11 Nokia Corporation System for conference call and corresponding devices, method and program products
US7464029B2 (en) 2005-07-22 2008-12-09 Qualcomm Incorporated Robust separation of speech signals in a noisy environment
JP4765461B2 (ja) 2005-07-27 2011-09-07 日本電気株式会社 雑音抑圧システムと方法及びプログラム
US7917561B2 (en) 2005-09-16 2011-03-29 Coding Technologies Ab Partially complex modulated filter bank
US7957960B2 (en) 2005-10-20 2011-06-07 Broadcom Corporation Audio time scale modification using decimation-based synchronized overlap-add algorithm
US7565288B2 (en) 2005-12-22 2009-07-21 Microsoft Corporation Spatial noise suppression for a microphone array
US8345890B2 (en) 2006-01-05 2013-01-01 Audience, Inc. System and method for utilizing inter-microphone level differences for speech enhancement
CN1809105B (zh) 2006-01-13 2010-05-12 北京中星微电子有限公司 适用于小型移动通信设备的双麦克语音增强方法及系统
US8744844B2 (en) 2007-07-06 2014-06-03 Audience, Inc. System and method for adaptive intelligent noise suppression
US8194880B2 (en) 2006-01-30 2012-06-05 Audience, Inc. System and method for utilizing omni-directional microphones for speech enhancement
US9185487B2 (en) 2006-01-30 2015-11-10 Audience, Inc. System and method for providing noise suppression utilizing null processing noise subtraction
US20070195968A1 (en) 2006-02-07 2007-08-23 Jaber Associates, L.L.C. Noise suppression method and system with single microphone
EP1827002A1 (en) 2006-02-22 2007-08-29 Alcatel Lucent Method of controlling an adaptation of a filter
JP2007270061A (ja) 2006-03-31 2007-10-18 Nippon Oil Corp 液体燃料基材の製造方法
US8150065B2 (en) 2006-05-25 2012-04-03 Audience, Inc. System and method for processing an audio signal
US8934641B2 (en) 2006-05-25 2015-01-13 Audience, Inc. Systems and methods for reconstructing decomposed audio signals
JP5053587B2 (ja) 2006-07-31 2012-10-17 東亞合成株式会社 水酸化アルカリ金属の高純度製造方法
KR100883652B1 (ko) 2006-08-03 2009-02-18 삼성전자주식회사 음성 구간 검출 방법 및 장치, 및 이를 이용한 음성 인식시스템
JP4184400B2 (ja) 2006-10-06 2008-11-19 誠 植村 地下構造物の構築方法
TWI312500B (en) 2006-12-08 2009-07-21 Micro Star Int Co Ltd Method of varying speech speed
US8488803B2 (en) 2007-05-25 2013-07-16 Aliphcom Wind suppression/replacement component for use with electronic systems
US20090012786A1 (en) 2007-07-06 2009-01-08 Texas Instruments Incorporated Adaptive Noise Cancellation
KR101444100B1 (ko) 2007-11-15 2014-09-26 삼성전자주식회사 혼합 사운드로부터 잡음을 제거하는 방법 및 장치
US8194882B2 (en) 2008-02-29 2012-06-05 Audience, Inc. System and method for providing single microphone noise suppression fallback
US8355511B2 (en) 2008-03-18 2013-01-15 Audience, Inc. System and method for envelope-based acoustic echo cancellation
US8131541B2 (en) 2008-04-25 2012-03-06 Cambridge Silicon Radio Limited Two microphone noise reduction system
US20110178800A1 (en) 2010-01-19 2011-07-21 Lloyd Watts Distortion Measurement for Noise Suppression System
US9099077B2 (en) 2010-06-04 2015-08-04 Apple Inc. Active noise cancellation decisions using a degraded reference
US8744091B2 (en) 2010-11-12 2014-06-03 Apple Inc. Intelligibility control using ambient noise detection

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10313497A (ja) * 1996-09-18 1998-11-24 Nippon Telegr & Teleph Corp <Ntt> 音源分離方法、装置及び記録媒体
JPH11249693A (ja) * 1998-03-02 1999-09-17 Nippon Telegr & Teleph Corp <Ntt> 収音装置
JP2005110127A (ja) * 2003-10-01 2005-04-21 Canon Inc 風雑音検出装置及びそれを有するビデオカメラ装置
JP2005195955A (ja) * 2004-01-08 2005-07-21 Toshiba Corp 雑音抑圧装置及び雑音抑圧方法

Cited By (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9830899B1 (en) 2006-05-25 2017-11-28 Knowles Electronics, Llc Adaptive noise cancellation
JP2011527025A (ja) * 2008-06-30 2011-10-20 オーディエンス,インコーポレイテッド ヌル処理雑音除去を利用した雑音抑制を提供するシステム及び方法
JP2013518477A (ja) * 2010-01-26 2013-05-20 オーディエンス,インコーポレイテッド レベルキューによる適応ノイズ抑制
US9699554B1 (en) 2010-04-21 2017-07-04 Knowles Electronics, Llc Adaptive signal equalization
JP2013527493A (ja) * 2010-04-29 2013-06-27 オーディエンス,インコーポレイテッド 複数のマイクによるロバストな雑音抑制
JP2014504743A (ja) * 2010-12-29 2014-02-24 テレフオンアクチーボラゲット エル エム エリクソン(パブル) 雑音抑圧方法及び当該雑音抑圧方法を適用するための雑音抑圧器
US9640194B1 (en) 2012-10-04 2017-05-02 Knowles Electronics, Llc Noise suppression for speech processing based on machine-learning mask estimation
JP2016507086A (ja) * 2013-02-08 2016-03-07 サーラス ロジック、インク 周囲雑音二乗平均平方根(rms)検出器
KR101984115B1 (ko) * 2013-03-05 2019-05-31 프라운호퍼 게젤샤프트 쭈르 푀르데룽 데어 안겐반텐 포르슝 에.베. 오디오 신호 처리를 위한 다채널 다이렉트-앰비언트 분해를 위한 장치 및 방법
JP2016513814A (ja) * 2013-03-05 2016-05-16 フラウンホーファーゲゼルシャフト ツール フォルデルング デル アンゲヴァンテン フォルシユング エー.フアー. 音声信号処理のためのマルチチャネル直接・環境分解のための装置及び方法
CN105409247A (zh) * 2013-03-05 2016-03-16 弗劳恩霍夫应用研究促进协会 用于音频信号处理的多声道直接-周围分解的装置及方法
KR20150132223A (ko) * 2013-03-05 2015-11-25 프라운호퍼 게젤샤프트 쭈르 푀르데룽 데어 안겐반텐 포르슝 에. 베. 오디오 신호 처리를 위한 다채널 다이렉트-앰비언트 분해를 위한 장치 및 방법
JP2018036666A (ja) * 2013-03-05 2018-03-08 フラウンホーファーゲゼルシャフト ツール フォルデルング デル アンゲヴァンテン フォルシユング エー.フアー. 音声信号処理のためのマルチチャネル直接・環境分解のための装置及び方法
CN105409247B (zh) * 2013-03-05 2020-12-29 弗劳恩霍夫应用研究促进协会 用于音频信号处理的多声道直接-周围分解的装置及方法
US10395660B2 (en) 2013-03-05 2019-08-27 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. Apparatus and method for multichannel direct-ambient decompostion for audio signal processing
US9536540B2 (en) 2013-07-19 2017-01-03 Knowles Electronics, Llc Speech signal separation and synthesis based on auditory scene analysis and speech modeling
US9799330B2 (en) 2014-08-28 2017-10-24 Knowles Electronics, Llc Multi-sourced noise suppression
JP2018036442A (ja) * 2016-08-30 2018-03-08 富士通株式会社 音声処理プログラム、音声処理方法及び音声処理装置
JP2018036431A (ja) * 2016-08-30 2018-03-08 富士通株式会社 音声処理プログラム、音声処理方法及び音声処理装置
JP2020533619A (ja) * 2017-08-17 2020-11-19 セレンス オペレーティング カンパニー 有音音声検出の複雑性低減およびピッチ推定
US11176957B2 (en) 2017-08-17 2021-11-16 Cerence Operating Company Low complexity detection of voiced speech and pitch estimation
JP7052008B2 (ja) 2017-08-17 2022-04-11 セレンス オペレーティング カンパニー 有声音声検出の複雑性低減およびピッチ推定

Also Published As

Publication number Publication date
US20070154031A1 (en) 2007-07-05
US8867759B2 (en) 2014-10-21
WO2007081916A3 (en) 2007-12-21
US20130096914A1 (en) 2013-04-18
JP5007442B2 (ja) 2012-08-22
WO2007081916A2 (en) 2007-07-19
US8345890B2 (en) 2013-01-01
KR20080092404A (ko) 2008-10-15
KR101210313B1 (ko) 2012-12-10
US20160066088A1 (en) 2016-03-03
FI20080428L (fi) 2008-07-04

Similar Documents

Publication Publication Date Title
JP5007442B2 (ja) 発話改善のためにマイク間レベル差を用いるシステム及び方法
EP2936830B1 (en) Filter and method for informed spatial filtering using multiple instantaneous direction-of-arrivial estimates
KR101726737B1 (ko) 다채널 음원 분리 장치 및 그 방법
US8194880B2 (en) System and method for utilizing omni-directional microphones for speech enhancement
US8180067B2 (en) System for selectively extracting components of an audio input signal
US7386135B2 (en) Cardioid beam with a desired null based acoustic devices, systems and methods
EP3189521B1 (en) Method and apparatus for enhancing sound sources
CN112424863B (zh) 语音感知音频系统及方法
EP2701145A1 (en) Noise estimation for use with noise reduction and echo cancellation in personal communication
KR102352927B1 (ko) 상관 기반 근접장 검출기
CN108447496B (zh) 一种基于麦克风阵列的语音增强方法及装置
US20130016854A1 (en) Microphone array processing system
KR20100056567A (ko) 강인한 두 마이크로폰 잡음 억제 시스템
US9532138B1 (en) Systems and methods for suppressing audio noise in a communication system
Jin et al. Multi-channel noise reduction for hands-free voice communication on mobile phones
Yousefian et al. Using power level difference for near field dual-microphone speech enhancement
Reindl et al. An acoustic front-end for interactive TV incorporating multichannel acoustic echo cancellation and blind signal extraction
Adcock et al. Practical issues in the use of a frequency‐domain delay estimator for microphone‐array applications
Martın-Donas et al. A postfiltering approach for dual-microphone smartphones
EP3029671A1 (en) Method and apparatus for enhancing sound sources
Kowalczyk Multichannel Wiener filter with early reflection raking for automatic speech recognition in presence of reverberation
Zhang et al. Speech enhancement using compact microphone array and applications in distant speech acquisition
Wu et al. A multi-microphone speech enhancement algorithm tested using acoustic vector sensors
Zhang et al. Speech enhancement using improved adaptive null-forming in frequency domain with postfilter
Zhang et al. A frequency domain approach for speech enhancement with directionality using compact microphone array.

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20091125

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20111206

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20111213

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120306

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20120403

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20120502

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20120501

R150 Certificate of patent or registration of utility model

Ref document number: 5007442

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20150608

Year of fee payment: 3

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313111

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees