JP2020511684A - 摂動信号補償のためのオーディオシステムおよび方法 - Google Patents

摂動信号補償のためのオーディオシステムおよび方法 Download PDF

Info

Publication number
JP2020511684A
JP2020511684A JP2019543326A JP2019543326A JP2020511684A JP 2020511684 A JP2020511684 A JP 2020511684A JP 2019543326 A JP2019543326 A JP 2019543326A JP 2019543326 A JP2019543326 A JP 2019543326A JP 2020511684 A JP2020511684 A JP 2020511684A
Authority
JP
Japan
Prior art keywords
audio
audio content
audio signal
content
microphone assembly
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2019543326A
Other languages
English (en)
Other versions
JP6929950B2 (ja
Inventor
クリスチャン・エム・ヘラ
ジェフリー・アール・ヴォーティン
エリー・ボウ・ダハー
パラスケヴァス・アルギュロプーロス
ヴィグネイシュ・カタヴァラヤン
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Bose Corp
Original Assignee
Bose Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Bose Corp filed Critical Bose Corp
Publication of JP2020511684A publication Critical patent/JP2020511684A/ja
Application granted granted Critical
Publication of JP6929950B2 publication Critical patent/JP6929950B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
    • G10L21/0208—Noise filtering
    • G10L21/0216—Noise filtering characterised by the method used for estimating noise
    • G10L21/0232—Processing in the frequency domain
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
    • G10L21/0208—Noise filtering
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
    • G10L21/0316—Speech enhancement, e.g. noise reduction or echo cancellation by changing the amplitude
    • G10L21/0364—Speech enhancement, e.g. noise reduction or echo cancellation by changing the amplitude for improving intelligibility
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
    • G10L25/78—Detection of presence or absence of voice signals
    • H—ELECTRICITY
    • H03—ELECTRONIC CIRCUITRY
    • H03G—CONTROL OF AMPLIFICATION
    • H03G5/00—Tone control or bandwidth control in amplifiers
    • H03G5/16—Automatic control
    • H03G5/165—Equalizers; Volume or gain control in limited frequency bands
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00—Circuits for transducers, loudspeakers or microphones
    • H04R3/005—Circuits for transducers, loudspeakers or microphones for combining the signals of two or more microphones
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
    • G10L21/0208—Noise filtering
    • G10L2021/02082—Noise filtering the noise being echo, reverberation of the speech
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
    • G10L21/0208—Noise filtering
    • G10L2021/02087—Noise filtering the noise being separate speech, e.g. cocktail party
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02—Speech enhancement, e.g. noise reduction or echo cancellation
    • G10L21/0208—Noise filtering
    • G10L21/0216—Noise filtering characterised by the method used for estimating noise
    • G10L2021/02161—Number of inputs available containing the signal or the noise to be suppressed
    • G10L2021/02166—Microphone arrays; Beamforming
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2499/00—Aspects covered by H04R or H04S not otherwise provided for in their subgroups
    • H04R2499/10—General applications
    • H04R2499/13—Acoustic transducers and sound field adaptation in vehicles
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S7/00—Indicating arrangements; Control arrangements, e.g. balance control
    • H04S7/30—Control circuits for electronic adaptation of the sound field
    • H04S7/301—Automatic calibration of stereophonic sound system, e.g. with test microphone

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Computational Linguistics (AREA)
  • Quality & Reliability (AREA)
  • Otolaryngology (AREA)
  • General Health & Medical Sciences (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
  • Soundproofing, Sound Blocking, And Sound Damping (AREA)
  • Details Of Audible-Bandwidth Transducers (AREA)
  • Obtaining Desirable Characteristics In Audible-Bandwidth Transducers (AREA)
  • Circuit For Audible Band Transducer (AREA)

Abstract

車室内で明瞭なオーディオコンテンツを生成するためのオーディオシステムおよび方法。一例では、オーディオシステムは、オーディオ信号源から受信されたオーディオ信号に基づいて第1の座席位置に第1のオーディオコンテンツを供給するための第1のスピーカと、第2の座席位置に第2のオーディオコンテンツを供給するための第2のスピーカと、第2の座席位置において発生した音声コンテンツ、第2のスピーカからの漏れた第2のオーディオコンテンツ、およびロードノイズを検出するように位置する第1のマイクロフォンアセンブリと、第1の音声コンテンツと漏れた第2のオーディオコンテンツとロードノイズの組合せに少なくとも部分的に基づいて摂動信号を判定し、第1の座席位置における第1のオーディオコンテンツに対する摂動信号の影響を補償するように第1のスピーカへのオーディオ信号を調整するように構成されたオーディオ信号処理回路とを含む。

Description

本開示の態様および実装形態は、概して、オーディオシステムを対象とし、いくつかの例では、より詳細には、車両における改良されたリスニングエクスペリエンスをもたらすためのオーディオシステムを対象とする。
従来の車両オーディオシステムは、車両内の乗員数にかかわらず車両のすべての乗員に共通のオーディオコンテンツを与える。そのようなシステムでは、車両ラジオ(または他の信号源)によって供給されるオーディオ信号が増幅され、処理され、対応する音響エネルギーがスピーカを通じて送られ、車両の乗員にオーディオコンテンツを伝える。より最近では、現代の車両オーディオシステムは、車両内の座席位置ごとにオーディオコンテンツをカスタマイズするように設計されている。そのようなシステムでは、各座席は、同じオーディオコンテンツを受信することも、またはパーソナル化されたオーディオコンテンツを受信することもある。構成とは無関係に、多くの場合、車両内に摂動信号が存在すると、オーディオコンテンツの忠実度が低下し、車両の乗員に不快感を与えることがある。
米国特許出願第2015/0281864号
本開示の一態様によれば、車室内の1つまたは複数の摂動信号を補償して、車両内の少なくとも1つの意図される位置に対する明瞭なオーディオコンテンツを生成するオーディオシステムが提供される。具体的には、摂動信号は、ロードノイズ、干渉するスピーカからの漏れたオーディオコンテンツ、および/または車両内の位置からの音声コンテンツを含む場合がある。オーディオシステムは、少なくとも摂動信号に基づいて、ロードノイズ、漏れたオーディオコンテンツ、および/または音声コンテンツがオーディオコンテンツの明瞭さに実質的に影響を与えないように意図される位置に対してオーディオコンテンツを調整することがある。そのような態様および実装形態は、少なくとも2列の座席を有する車両に含められると特に有利であり、このような車両では、車両の後部からの騒音、漏れたオーディオコンテンツ、音声コンテンツが車両の前部の座席に送られるオーディオコンテンツに干渉する場合があり(車両の前部からの騒音、漏れたオーディオコンテンツ、音声コンテンツが車両の後部の座席に送られるオーディオコンテンツに干渉する場合もある)望ましくない。
一態様によれば、車室オーディオシステムが提供される。一例では、車室オーディオシステムは、オーディオ信号源から受信されたオーディオ信号に基づいて車室の第1の座席位置に第1のオーディオコンテンツを供給するように位置する第1のスピーカと、車室内の第2の座席位置に第2のオーディオコンテンツを供給するように位置する第2のスピーカと、第2の座席位置において発生した第1の音声コンテンツ、第2のスピーカからの漏れた第2のオーディオコンテンツ、およびロードノイズを検出するように位置する第1のマイクロフォンアセンブリと、少なくとも第1のマイクロフォンアセンブリに結合されたオーディオ信号処理回路であって、第1の音声コンテンツと第2のスピーカからの漏れた第2のオーディオコンテンツとロードノイズの組合せに少なくとも部分的に基づいて摂動信号を判定し、第1の座席位置における第1のオーディオコンテンツに対する摂動信号の影響を補償するようにオーディオ信号の周波数に基づいて第1のスピーカへのオーディオ信号を調整するように構成されたオーディオ信号処理回路とを備える。
一例によれば、車室オーディオシステムは、第3の座席位置において発生した少なくとも第2の音声コンテンツを検出するように位置する第2のマイクロフォンアセンブリであって、第2の音声コンテンツが第1の音声コンテンツとは異なる、第2のマイクロフォンアセンブリをさらに備えてもよく、オーディオ信号処理回路は、第2のマイクロフォンアセンブリに結合され、第2の音声コンテンツに基づいて摂動信号を判定するようにさらに構成される。一例では、第2のオーディオコンテンツは第1のオーディオコンテンツとは異なり、第2の座席位置は、第1の座席位置の前方方向、後方方向、第1の側方方向、または第2の側方方向のうちの1つである。一例によれば、第1のマイクロフォンアセンブリおよび第2のマイクロフォンアセンブリの各々はマイクロフォンのアレイを含む。
少なくとも一例では、オーディオ信号処理回路は、第2のスピーカからの漏れた第2のオーディオコンテンツおよびロードノイズをフィルタ処理して第1の音声コンテンツを分離するように構成される。様々な例によれば、第1のマイクロフォンアセンブリは、第2の音声コンテンツを検出するようにさらに構成され、オーディオ信号処理回路は、第1のマイクロフォンアセンブリに対する第1の音声コンテンツおよび第2の音声コンテンツの各々の方向に基づいて、第1のマイクロフォンアセンブリによって検出された第1の音声コンテンツを第1のマイクロフォンアセンブリによって検出された第2の音声コンテンツと区別するように構成される。
様々な例によれば、第1のマイクロフォンアセンブリは、第2の音声コンテンツを検出するようにさらに構成され、オーディオ信号処理回路は、第1のビームフォーミング構成を選択し適用して、少なくとも第1のマイクロフォンアセンブリによって検出された第2の音声コンテンツを減衰させるようにさらに構成される。一例では、ビームフォーミング構成は、少なくとも重みベクトルのセットを含み、オーディオ信号処理回路は、第1のビームフォーミング構成を適用する際に、第1の音声コンテンツと第2の音声コンテンツの組合せに重みベクトルのセットを適用するように構成される。さらなる例では、車室オーディオシステムは、複数のビームフォーミング構成を有するルックアップテーブルを含むデータストアをさらに備え、オーディオ信号処理回路は、ルックアップテーブルを参照して複数のビームフォーミング構成から第1のビームフォーミング構成を選択するように構成される。
様々な例では、オーディオ信号処理回路は、第1のスピーカへのオーディオ信号に適用される減衰または増幅を制御して、摂動信号の影響を補償するようにオーディオ信号を調整するように構成された音量ベース等化回路を含む。一例では、オーディオ信号は、少なくとも第1の周波数帯域と第2の周波数帯域とを含み、音量ベース等化回路は、第1の周波数帯域に適用される第1の減衰または増幅および第2の周波数帯域に適用される第2の減衰または増幅を制御するように構成され、第1の減衰または増幅は第2の減衰または増幅とは異なる。前記音量ベース等化回路は、前記オーディオ信号に適用される減衰または増幅を前記オーディオ信号の周波数ごとに独立に制御するように構成される。一例では、第1の座席位置は、車室内の運転者の座席であり、第1のオーディオコンテンツは電話での会話である。
一態様によれば、車室オーディオシステムが提供される。一例では、車室オーディオシステムは、オーディオ信号源から受信されたオーディオ信号に基づいて車室内の乗員に第1のオーディオコンテンツを供給するように位置する第1のスピーカと、車室内の対応する座席位置において発生した音声コンテンツ、車室内の他の座席位置からの他の音声コンテンツ、ロードノイズ、および漏れたオーディオコンテンツを検出するように位置する複数のマイクロフォンアセンブリと、複数のマイクロフォンアセンブリの各々に結合されたオーディオ信号処理回路であって、他の音声コンテンツ、ロードノイズ、および漏れたオーディオコンテンツを減衰させるかまたは除去し、対応する座席位置の各々からの音声コンテンツについての少なくとも1つの音声信号を推定するように構成されたオーディオ信号処理回路とを備える。
一例では、複数のマイクロフォンアセンブリは、少なくとも第1のマイクロフォンアセンブリと第2のマイクロフォンアセンブリとを含み、第1のマイクロフォンアセンブリに対応する座席位置からの音声コンテンツは、第1の音声コンテンツを含み、第2のマイクロフォンアセンブリに対応する座席位置からの音声コンテンツは、第2の音声コンテンツを含む。一例によれば、オーディオ信号処理回路は、第1のビームフォーミング構成を選択して、少なくとも第1のマイクロフォンアセンブリによって検出された第1の音声コンテンツと第2の音声コンテンツの組合せに適用するように構成される。
様々な例では、第1のビームフォーミング構成は、少なくとも重みベクトルの第1のセットを含み、オーディオ信号処理回路は、第1のビームフォーミング構成を適用する際に、第1の音声コンテンツと第2の音声コンテンツの組合せに重みベクトルの第1のセットを適用して第2の音声コンテンツを除去するかまたは減衰させるように構成される。一例では、オーディオ信号処理回路は、第2のビームフォーミング構成を選択し、少なくとも第2のマイクロフォンアセンブリによって検出された第1の音声コンテンツと第2の音声コンテンツの組合せに適用するように構成される。一例によれば、第2のビームフォーミング構成は、重みベクトルの第2のセットを含み、オーディオ信号処理回路は、第2のビームフォーミング構成を適用する際に、第1の音声コンテンツと第2の音声コンテンツの組合せに重みベクトルの第2のセットを適用して、第1の音声コンテンツを除去するかまたは減衰させるように構成される。
いくつかの例では、オーディオ信号処理回路は、対応する座席位置の各々からの音声コンテンツについての推定される音声信号の、第1のオーディオコンテンツに対する影響を補償するようにオーディオ信号を調整するようにさらに構成される。一例では、オーディオ信号処理回路は、第1のスピーカへのオーディオ信号に適用される減衰または増幅を制御して、推定される音声信号の影響を補償するように構成された音量ベース等化回路を含む。
別の態様によれば、車室オーディオシステムを動作させる方法が提供される。一例では、この方法は、オーディオ信号源から受信されるオーディオ信号に基づいて、第1のスピーカによって、車室内の第1の座席位置に第1のオーディオコンテンツを供給するステップと、第2のスピーカによって、車室内の第2の座席位置に第2のオーディオコンテンツを供給するステップと、第1のマイクロフォンアセンブリにおいて、第2の座席位置において発生した第1の音声コンテンツ、第2のスピーカからの漏れた第2のオーディオコンテンツ、およびロードノイズを検出するステップと、第1の音声コンテンツと第2のスピーカからの漏れた第2のオーディオコンテンツとロードノイズの組合せに少なくとも部分的に基づいて摂動信号を判定するステップと、第1の座席位置における第1のオーディオコンテンツに対する摂動信号の影響を補償するようにオーディオ信号の周波数に基づいてオーディオ信号を調整するステップとを含む。
一例では、この方法は、第2のマイクロフォンアセンブリにおいて、第3の座席位置において発生した第2の音声コンテンツを検出するステップであって、第2の音声コンテンツが第1の音声コンテンツと異なる、ステップと、第2の音声コンテンツに基づいて摂動信号を判定するステップとをさらに含む。一例によれば、この方法は、第2のスピーカからの漏れた第2のオーディオコンテンツおよびロードノイズをフィルタ処理して第1の音声コンテンツを分離するステップをさらに含む。一例では、この方法は、第1のマイクロフォンアセンブリにおいて第2の音声コンテンツを検出するステップと、第1のマイクロフォンアセンブリに対する第1の音声コンテンツおよび第2の音声コンテンツの各々の方向に基づいて、第1のマイクロフォンアセンブリによって検出された第1の音声コンテンツと第1のマイクロフォンアセンブリによって検出された第2の音声コンテンツとを区別するステップとをさらに含む。
様々な例によれば、この方法は、第1のマイクロフォンアセンブリにおいて第2の音声コンテンツを検出するステップと、第1のビームフォーミング構成を適用して、少なくとも第1のマイクロフォンアセンブリによって検出された第2の音声コンテンツを減衰させるステップとをさらに含む。一例では、第1のビームフォーミング構成を適用するステップは、第1の音声コンテンツと第2の音声コンテンツの組合せに重みベクトルのセットを適用して第2の音声コンテンツを除去するかまたは減衰させるステップを含む。
一例では、オーディオ信号は、少なくとも第1の周波数帯域と第2の周波数帯域とを含み、オーディオ信号を調整するステップは、第1の周波数帯域に適用される第1の減衰または増幅および第2の周波数帯域に適用される第2の減衰または増幅を制御するステップであって、第1の減衰または増幅が第2の減衰または増幅とは異なる、ステップを含む。一例では、オーディオ信号を調整するステップは、オーディオ信号に適用される減衰または増幅をオーディオ信号の周波数ごとに独立に制御するステップを含む。
さらに他の態様、例、およびこれらの例示的な態様および例の利点について以下で詳しく説明する。本明細書で開示する例は、本明細書で開示する原則のうちの少なくとも1つに整合する任意の方法で他の例と組み合わされてもよく、「例」、「いくつかの例」、「代替例」、「様々な例」、「一例」などの参照は、必ずしも相互に排他的ではなく、説明する特定の特徴、構造、または特性が少なくとも1つの例に含まれる場合があることを示すものである。本明細書でそのような用語が出現した場合、すべてが同じ例を指すとは限らない。本明細書で説明する様々な態様および例は、説明する方法または機能のうちの任意の方法または機能を実行するための手段を含んでもよい。
さらに、本文献と参照によって本明細書に組み込まれる文献との間で用語の使用が整合しない場合、組み込まれる参考文献における用語の使用は、本文献の用語の使用を補助するものであり、本文献における用語の使用が優先される。さらに、添付の図面は、様々な態様および例の例示およびさらなる理解を可能にするために含められており、本明細書の一部に組み込まれかつ本明細書の一部を構成する。図面は、本明細書の残りの部分とともに、以下に記載され請求される態様および例の原則および動作について説明するのに役立つ。
少なくとも1つの例の様々な態様について、以下に添付の図を参照しながら説明する。各図は一定の縮尺で描かれたものではない。各図は、様々な態様および例を例示しさらに理解するのを可能にし、本明細書の一部に組み込まれかつ本明細書の一部を構成するが、本開示の制限を定義するものではない。様々な図において示される各々の同一またはほぼ同一の構成要素は、同じ数字によって表される。図を明確にするために、各図において名称が示されていない構成要素もある。
様々な例による車室オーディオシステムの概略図である。 様々な例による、図1に示す信号プロセッサの入出力図である。 様々な例による車室オーディオシステムの別の概略図である。 様々な例による、車室オーディオシステムを動作させるためのプロセスフローである。
本明細書で説明する態様および例は概して、車室内に音声コンテンツ(たとえば、会話)が存在するにもかかわらず車室内の所望の位置に明瞭なオーディオコンテンツを供給する車室用のオーディオシステムを対象とする。いくつかの例によれば、このオーディオシステムは、車室内の音声コンテンツを検出する1つまたは複数のマイクロフォンアセンブリと、音声コンテンツおよび車室内の他の音響干渉(たとえば、ロードノイズおよび/または漏れたオーディオコンテンツ)に基づいて摂動信号を判定するオーディオ信号処理回路とを含んでもよい。オーディオ信号処理回路は、摂動信号に基づいて、オーディオコンテンツに対する音声コンテンツおよび他の音響干渉の影響を軽減するように所望の位置(たとえば、座席位置)に送られるオーディオコンテンツを調整する。
したがって、本明細書で説明する様々な態様および例は、多数の種類の干渉(たとえば、音声コンテンツ、ロードノイズ、および漏れたオーディオコンテンツ)を同時に補償して動的な範囲の雑音補償機能を実現する。本明細書で説明する様々な他の利益の中で特に、本明細書で提示する車室オーディオシステムのいくつかの態様および例は、従来のオーディオシステムと比較して車両の乗員に与えられるリスニングエクスペリエンスおよびオーディオコンテンツの音質を向上させる。
本明細書で説明するシステムおよび方法の例が、以下の説明に記載されるかまたは添付の図面に示される構成の詳細および構成要素の配置への適用において限定されないことを諒解されたい。各方法および装置は、他の例において実現することができ、かつ様々な方法で実施または実行することができる。特定の実装形態の例は、本明細書では例示のためのみに提示され、限定的なものではない。さらに、本明細書で使用する語句および用語は、説明のためのものであり、限定とみなすべきではない。本明細書における「含む」、「備える」、「有する」、「含有する」、「伴う」、およびそれらの変形例の使用は、その後に示される項目およびその均等物、ならびにさらなる項目を包含することを意味する。「または」の言及は、包含的なものと解釈されることがあり、「または」を使用して説明するあらゆる項目は、説明する項目のうちの1つ、複数、およびすべてのいずれを示す場合もある。前後、左右、頂部および底部、上下、ならびに垂直および水平のあらゆる言及は、説明の都合上のものであり、本システムおよび本方法またはその構成要素を任意の1つの定位または空間定位に限定するものではない。
本明細書のいくつかの図の要素は、ブロック図における個別要素として図示および説明がなされ、別段の指示がない限り「回路」と呼ばれることがあるが、各要素は、アナログ回路、デジタル回路、またはソフトウェア命令を実行する1つもしくは複数のマイクロプロセッサのうちの1つとして実現されてもまたはそれらの組合せとして実現されてもよい。たとえば、ソフトウェア命令は、デジタル信号プロセッサによって実行すべきデジタル信号処理(DSP)命令を含んでもよい。別段の指示がない限り、信号線は、個別のアナログまたはデジタル信号線として実現されても、オーディオ信号の別個のストリームを処理するための適切な信号処理を伴う単一の個別デジタル信号線として実現されても、またはワイヤレス通信システムの要素として実現されてもよい。
本明細書で説明する処理動作のいくつかは、たとえば、判定する、調整する、フィルタ処理する、区別する、および/または制御するという言葉で表されることがある。判定する、調整する、フィルタ処理する、区別する、および/または制御する、の均等動作は、アナログ信号処理技法またはデジタル信号処理技法のいずれによって実行することもでき、本開示の範囲内に含まれる。別段の指示がない限り、オーディオ信号は、デジタル形式またはアナログ形式のいずれに符号化されてもよく、従来のデジタル-アナログ変換器またはアナログ-デジタル変換器は図示されない場合もあるが、本開示の範囲内であることが意図される。
本明細書で説明する車室オーディオシステムの様々な例は、車室内などの聴取範囲内の様々な座席位置において個別のオーディオコンテンツゾーンを生成するスピーカと組み合わせて利用することができる。本明細書ではオーディオシステムについて、4つの座席位置を有する車室内に組み込まれるように図示し説明するが、様々な他の実装形態では、オーディオシステムは、たとえば、劇場、観客席、遊園地の乗物などの、複数の乗員を収容する他の座席配置および/または聴取空間を有する車室内に適合されてもよいことが諒解されよう。
図1を参照すると、いくつかの態様による車室オーディオシステム(「オーディオシステム」)100の一例が示されている。図示のように、オーディオシステム100は、いくつかある他の構成要素の中で特に、オーディオ信号源102、オーディオ信号処理回路104、制御回路106、1つもしくは複数のスピーカ108a〜108h、1つまたは複数のマイクロフォンアセンブリ110a〜100dなどの構成要素を含んでもよい。図1は、車室112を第1の座席位置114aと、第2の座席位置114bと、第3の座席位置114cと、第4の座席位置114dとを含むように示している。特定の例では、第1の座席位置114aは、車室112の座席の第1の列内の運転者の座席を含んでもよく、第2の座席位置114bは、座席の第1の列内の前部乗員の座席を含んでもよく、第3の座席位置114cは、車室112の座席の第2の列内の第1の後部乗員の座席を含んでもよく、第4の座席位置114dは、座席の第2の列内の第2の後部乗員の座席を含んでもよい。別段の指示がない限り、1つまたは複数のスピーカ108a〜108hは全体としてスピーカ108と呼ばれ、1つまたは複数のマイクロフォンアセンブリ110a〜110dは全体としてマイクロフォンアセンブリ110と呼ばれ、座席位置114a〜114dは全体として座席位置114と呼ばれる。
スピーカ108の各々は、対応する座席位置に近接して位置してもよい。具体的には、スピーカ108a、108bは、第1の座席位置114aにオーディオコンテンツを供給するように位置し、スピーカ108c、108dは、第2の座席位置114bにオーディオコンテンツを供給するように位置し、スピーカ108e、108fは、第3の座席位置114cにオーディオコンテンツを供給するように位置し、スピーカ108g、108hは、第4の座席位置114dにオーディオコンテンツを供給するように位置する。いくつかの例では、各スピーカ108は、対応する座席位置114の乗員の頭部位置の近くに配置された「近接スピーカ」(または近接スピーカアレイ)を含んでもよいが、任意の適切なスピーカおよび配置が使用されてもよい。すなわち、図1は、各座席位置114a、114b、114c、114dが対応するスピーカの対を有する例を示しているが、いくつかの他の例では、各座席位置114a、114b、114c、114dは、図示された対応するスピーカ108の対よりも多くのスピーカまたは少ないスピーカ108を含んでもよい。さらに、スピーカ108は、図1に示す位置以外の位置に配置されてもよい。たとえば、スピーカ108は、たとえば、ヘッドレスト、背もたれ、アームレスト、車室112のドア、ヘッドライナ、および/または計器パネルのうちの1つまたは複数に位置してもよい。
図1に示す例では、スピーカ108の各々は対応する座席位置114のヘッドレスト内に組み込まれる。すなわち、スピーカ108a、108bは、第1の座席位置114aのヘッドレスト116a内に位置してもよく、スピーカ108c、108dは、第2の座席位置114bのヘッドレスト116b内に位置してもよく、スピーカ108e、108fは、第3の座席位置114cのヘッドレスト116c内に位置してもよく、スピーカ108g、108hは、第4の座席位置114dのヘッドレスト116d内に位置してもよい。オーディオシステム100の各スピーカ108は、円錐型音響ドライバを含む指向性ラウドスピーカを含んでもよい。しかし、様々な他の実装形態では、スピーカ108は、ドーム型、フラットパネル型、または任意の他の適切な前方放射電気音響変換器などの円錐型以外の種類の指向性ラウドスピーカを含んでもよい。
様々な例では、オーディオ信号源102は、オーディオ信号処理回路104に結合され、1つもしくは複数のオーディオ信号を生成するように構成される。オーディオ信号源102は、たとえば、車両サウンドシステム(たとえば、カーラジオ)、MP3プレーヤ、CDプレーヤ、携帯電話、またはモバイルデバイスの1つまたは複数のオーディオ構成要素を含んでもよい。オーディオ信号源102は、オーディオシステム100と一体であってもよく、またはオーディオシステムの外部に位置して通信インターフェースを介してオーディオシステム100と通信してもよい。いくつかの例では、オーディオ信号源102は、車両内の座席位置114またはオーディオコンテンツゾーン(たとえば、座席位置114a、114b用の第1のオーディオコンテンツゾーンおよび座席位置114c、114d用の第2のオーディオコンテンツゾーン)ごとに指定される別個の音源を含んでもよい。
様々な例によれば、オーディオ信号処理回路104は、オーディオ信号源102からオーディオ信号を受信し、受信されたオーディオ信号に対して1つまたは複数の処理動作を実行し、処理後のオーディオ信号をそれぞれのスピーカ108に送る。オーディオ信号は、受信後、それぞれのスピーカ108を駆動して、受信されたオーディオ信号に基づいてオーディオコンテンツを対応する座席位置114に供給する。以下に詳細に説明するように、特定の例では、オーディオ信号処理回路104は、いくつかある他の構成要素の中で特に、信号プロセッサ(たとえば、デジタル信号プロセッサ(DSP))118と音量ベース等化回路120とを含んでもよい。
いくつかの他の例では、オーディオ信号処理回路104は、説明の都合上図示されていない追加の回路を含んでもよい。たとえば、オーディオ信号処理回路104は、BLUETOOTH(登録商標)、Bluetooth Low Energy(BLE)、WiFi、Zigbee、またはPropriety Radioなどのワイヤレスプロトコルを介してオーディオ信号を受信するように構成されたハードウェアまたはソフトウェアを有するワイヤレス構成要素を含むことができる。本明細書では、BLUETOOTH(登録商標)は、場合によってはピコネットと呼ばれる短距離アドホックネットワークを指す。他の例では、ワイヤレス構成要素は、BLUETOOTH(登録商標)およびBluetooth Low Energyをサポートするためのハードウェアまたはソフトウェアを含んでもよい。
図1の例でさらに示すように、制御回路106は、少なくともオーディオ信号処理回路104およびオーディオ信号源102に結合される。制御回路106は、入力(たとえば、ユーザ入力)に応答して、1つまたは複数の音源選択信号をオーディオ信号源102に供給し座席位置114ごと(またはオーディオコンテンツごと)に特定のオーディオコンテンツを選択する。上述のように、制御回路106は、座席位置114ごとに同じオーディオ信号源102を選択してもよく、またはそれぞれに異なる座席位置114用のそれぞれに異なるオーディオ信号源102の組合せを選択してもよい。オーディオ信号源102は、制御回路106から受信された選択信号に基づいて、オーディオ信号をオーディオ信号処理回路104に供給し、オーディオ信号処理回路104は次いで、オーディオコンテンツを適切なスピーカ108に供給してもよい。
制御回路106は、任意のプロセッサ、マルチプロセッサ、またはコントローラを含んでもよい。プロセッサは、メモリおよびデータ記憶素子(たとえば、データストア122)に接続されてもよい。メモリは、本開示で説明する様々なプロセスおよび動作を実行するか、または本明細書で説明する様々な構成要素に本開示で説明する様々なプロセスおよび動作を実行するように指示するために、プロセッサによって実行できるようにコード化された命令のシーケンスを記憶する。たとえば、制御回路106は、オーディオ信号源102、音量ベース等化回路120、および信号プロセッサ118と通信し、それらに1つまたは複数の制御信号を供給してもよい。したがって、メモリは、ダイナミックランダムアクセスメモリ(DRAM)またはスタティックメモリ(SRAM)などの比較的高性能の揮発性ランダムアクセスメモリであってもよい。しかし、メモリは、ディスクドライブまたは他の非揮発性記憶デバイスなどの、データを記憶するための任意のデバイスを含んでもよい。
さらなる例では、プロセッサは、オペレーティングシステムを実行するように構成されてもよい。オペレーティングシステムは、プラットフォームサービスをアプリケーションソフトウェアに供給してもよい。これらのプラットフォームサービスは、プロセス間通信およびネットワーク通信、ファイルシステム管理、ならびに標準データベース操作を含んでもよい。多数のオペレーティングシステムのうちの1つまたは複数が使用されてもよく、その例は、任意の特定のオペレーティングシステムまたはオペレーティングシステム特性に限定されない。いくつかの例では、プロセッサは、RTLinuxなどのリアルタイムオペレーティングシステム(RTOS)、BSDまたはGNU/Linux（登録商標）などの非リアルタイムオペレーティングシステムを実行するように構成されてもよい。
データストレージ(たとえば、データストア122)上に記憶される命令は、プロセッサによって実行できる実行可能なプログラムまたは他のコードを含んでもよい。これらの命令は、符号化された信号として永続的に記憶されてもよく、プロセッサに本明細書で説明する機能およびプロセスを実行させてもよい。データストレージは、媒体上または媒体内に記録された情報を含んでもよく、この情報は、命令を実行する間にプロセッサによって処理されてもよい。データストレージは、非一時的命令およびデータを記憶するように構成されたコンピュータ読取り可能書込み可能な非揮発性データ記憶媒体を含む。さらに、データストレージは、プロセッサの動作時にデータを記憶するプロセッサメモリを含む。
後述のように、いくつかの例では、オーディオシステム100は、車室112内のそれぞれに異なる座席位置114用のそれぞれに異なるオーディオコンテンツを供給してもよい。すなわち、音源102は、第1の座席位置114a用の第1のオーディオコンテンツ(たとえば、電話での会話)および第2、第3、および/または第4の座席位置114b、114c、114d用の第2のオーディオコンテンツ(たとえば、映画サウンドトラック)を供給してもよい。座席位置114の各々は、個々のオーディオコンテンツを受信してもよく、または別の座席位置114と共有されるオーディオコンテンツを受信してもよい。受信後、それぞれのスピーカ108はオーディオコンテンツを対応する座席位置114に放出する。
いくつかの例では、座席位置114は、1つまたは複数のオーディオコンテンツゾーン内に配置されてもよい。同じオーディオコンテンツゾーン内の各座席位置114は同じオーディオコンテンツを受信する。たとえば、第1の座席位置114aおよび第2の座席位置114bは第1のオーディオコンテンツゾーンとして指定されてもよく、第3の座席位置114cおよび第4の座席位置114dは第2のオーディオコンテンツゾーンとして指定されてもよい。したがって、第1および第2の座席位置114a、114bは、第1のオーディオコンテンツゾーン用に指定されたオーディオコンテンツを受信してもよく、第3および第4の座席位置114c、114dは、第2のオーディオコンテンツゾーン用に指定されたオーディオコンテンツを受信してもよい。各オーディオコンテンツゾーンは、同じ音源102を共有してもよく、または別個のオーディオコンテンツ源を有してもよい。さらに、各オーディオコンテンツゾーンは、複数のオーディオコンテンツ源102を有してもよい。
各スピーカ108は、スピーカ108に近接する座席位置114にオーディオコンテンツを供給するようになっているが、車室112などの密閉された空間内では、供給されるオーディオコンテンツがスピーカ108に近接する表示から反射されることがあり、他の座席位置に漏れることがあるので望ましくないことを諒解されたい。これは、ある座席位置114が、オーディオコンテンツを受信するようになっている座席位置114の前方もしくは後方または側方に面しているときに生じることが多い。たとえば、スピーカ108g、108hによって供給されるオーディオコンテンツが、第1、第2、および第3の座席位置114a、114b、114cのうちの1つまたはすべてに漏れることがあり望ましくない。本明細書では、この意図されない音響反射を漏れオーディオコンテンツと呼ぶ。
場合によっては、漏れオーディオコンテンツを受信した人が、他の人を対象とするオーディオコンテンツの受信を楽しむ場合があるが、一般に、オーディオコンテンツはそれらの意図されない人には不都合である。特に、漏れたオーディオコンテンツは、実際にその人を対象とする他のオーディオコンテンツに干渉することがあり、そのオーディオコンテンツの忠実度を低下させる場合がある。さらに、車室12内の他の干渉が座席位置114に送られるオーディオコンテンツの忠実度をさらに低下させることがある。特に、車室112内の他の位置からの音声コンテンツは、オーディオコンテンツに破壊的に干渉し、オーディオコンテンツが聞こえなくなることがある。このことは特に、座席位置にもたらされる電話での会話に音声コンテンツが干渉するときに当てはまる。ロードノイズおよび車室112内の他の騒音(たとえば、車両騒音、換気騒音など)もオーディオコンテンツに同様の影響を与えることがある。
したがって、様々な例では、オーディオ信号処理回路104は、車室112内の干渉音響エネルギーを生じさせる摂動信号を判定し、意図される座席位置114においてオーディオコンテンツを明瞭なものにするために摂動信号を補償するようにオーディオコンテンツ(電話での会話、1つまたは複数の車両警報、音楽など)を調整するように構成される。すなわち、オーディオ信号処理回路104は、音声コンテンツ、漏れたオーディオコンテンツ、ロードノイズが車室112内に存在する場合に所望の座席位置114におけるオーディオコンテンツに対するその影響を軽減するようにオーディオコンテンツを調整するように構成される。したがって、場合によっては、オーディオシステム100は音響干渉の破壊的な作用から単一の座席位置114(たとえば、運転者の座席)の乗員を分離してもよい。
いくつかの例では、オーディオ信号処理回路104は、所望の座席位置114におけるリスニングエクスペリエンスを向上させるようにオーディオコンテンツの周波数成分に基づいてオーディオコンテンツを動的に調整するようになっている。本明細書では様々な動作およびプロセスについてオーディオ信号処理回路104によって実行されるものとして説明するが、これらの動作およびプロセスはオーディオ信号処理回路104の個々の構成要素によって実行されることがあり、オーディオ信号処理回路104の個々の構成要素(たとえば、図示の信号プロセッサ108および動的音量制御回路120)によって実行されることがあり、オーディオ信号処理回路104によって実行されるように説明しているのは純粋に説明の都合上のものであることを諒解されたい。
いくつかの例では、オーディオシステム100は、マイクロフォンアセンブリ110を含み、各マイクロフォンアセンブリ110は対応する座席位置114から音声または他のオーディオコンテンツを検出するように位置する。しかし、多くの車室の密閉の結果として、マイクロフォンアセンブリ110の各々が車室内の他の音響エネルギーを検出してもよい。たとえば、各マイクロフォンアセンブリ110は、対応する座席位置の音声コンテンツ(すなわち、目標音声コンテンツ)、漏れたオーディオコンテンツ、ロードノイズ、および他の座席位置114において発生した音声コンテンツを検出してもよい。図1に示すように、一例では、オーディオシステム100は、いくつかある音響干渉の中で特に、第1の座席位置114aから発生した音声コンテンツを検出するように位置する第1のマイクロフォンアセンブリ110aを含む。同様に、第2のマイクロフォンアセンブリ110bは、第2の座席位置114bから発生した音声コンテンツを検出するように位置してもよく、第3のマイクロフォンアセンブリ110cは、いくつかある音響干渉の中で特に、第3の座席位置114cから発生した音声コンテンツを検出するように位置してもよく、第4のマイクロフォンアセンブリ110dは、第4の座席位置114dから発生した音声コンテンツを検出するように位置してもよい。
各々が単一のマイクロフォンアセンブリとして示されているが、様々な例では、各マイクロフォンアセンブリ110は1つまたは複数のマイクロフォンを含む。たとえば、各マイクロフォンアセンブリ110は、所定のパターンに配置されたマイクロフォンのアレイを含んでもよい。各マイクロフォンは、全方向性エレクトロネットマイクロフォンまたは全方向性マイクロエレクトロケミカルシステム(MEMS)などの全方向性マイクロフォンであってもよい。別の例では、各マイクロフォンアセンブリ110は、所望の方向における受信を強め、他の方向から到達する音響エネルギーを除去するように位置する方向性マイクロフォンを含んでもよい。各マイクロフォンアセンブリ110は、オーディオ信号処理回路104(たとえば、信号プロセッサ118)と通信し、音声コンテンツ、漏れたオーディオコンテンツ、ロードノイズ、および他の音響エネルギーの検出に応答して対応するマイクロフォン信号を生成するように構成される。
オーディオ信号処理回路104は、1つまたは複数のマイクロフォン信号を受信したことに応答して、摂動信号を判定するように構成される。本明細書で説明するように、摂動信号は、車室112内の所望の座席位置114に送られるオーディオコンテンツに干渉する音響エネルギーの和を指す。すなわち、摂動信号は、送られたオーディオコンテンツをマスクする(たとえば、曖昧にする)ことがある信号の和を指す。摂動信号が時間に依存し、オーディオシステム100(および車両)の動作時に変動することを諒解されたい。
様々な実施形態によれば、摂動信号は次式のように表すことができる。
Figure 2020511684
上式において、Ptotalは摂動信号であり、tはタイムフレームであり、kは、車室112内の特定の座席位置114であり、Pkは、特定の座席位置114の音声コンテンツであり、Dは所望の座席位置のセットであり、Pk,
Figure 2020511684
は、測定すべき摂動する音声コンテンツ信号のセットを示し、Mkは、特定の座席位置114についてのオーディオコンテンツ漏れであり、Kは、車室112内の座席位置114の数であり、Nは、ロードノイズである。摂動信号が算出された後、オーディオ信号処理回路104は、オーディオコンテンツが可聴になり、音声コンテンツ、漏れたオーディオコンテンツ、および/またはロードノイズがオーディオコンテンツの明瞭性に影響を及ぼさないように所望の座席位置114に送られるオーディオコンテンツを調整してもよい。
信号プロセッサ118は、摂動信号を判定するために、様々な例において、各座席位置114から発生した音声コンテンツについての音声信号を判定する。しかし、マイクロフォンアセンブリ110は、車室112内の複数の座席位置114から発生した音声コンテンツを検出することが多い。したがって、信号プロセッサ118は、座席位置ごとに目標音声コンテンツを分離してもよい。さらに、信号プロセッサ118は、同じくマイクロフォンアセンブリ110によって検出される漏れたオーディオコンテンツおよびロードノイズから音声コンテンツを分離するようにマイクロフォン信号をさらにフィルタ処理するように構成される。フィルタ処理後、音声信号が残り、信号プロセッサ118は、車室112内の各音声信号のレベル(たとえば、電力)を算出し、各レベルを合計して車室112内の音声コンテンツからの総干渉を判定してもよい。
本明細書で説明するように、音声コンテンツは、騒音低減が必要とされる座席位置114の乗員以外の車室112内の乗員からの言葉または音声の持続的な供給を指すことがある。たとえば、音声コンテンツは、第1の座席位置114aにおいて騒音低減が必要とされるときの第3の座席位置114cの乗員による言葉を含んでもよい。しかし、いくつかの他の例では、音声コンテンツは、座席位置114における人工干渉源によって生成され、有機体音声コンテンツを模倣する音響干渉を含んでもよい。たとえば、音声コンテンツは、座席位置114においてハンズフリーモードで動作する(すなわち、制御回路106に結合されない)携帯電話、モバイルデバイス、タブレットコンピュータから発生する音響干渉を含んでもよい。したがって、いくつかの例では、音声コンテンツは、車室112の2人の乗員間の会話の他に他の種類の音響干渉を含んでもよい。
信号プロセッサ118は、各音声信号を推定するために、まず各マイクロフォン信号をフィルタ処理してロードノイズおよび漏れたオーディオコンテンツを除去してもよい。オーディオコンテンツはオーディオ信号源102から直接受信されるので、受信されたオーディオコンテンツの既知の特性に基づいて漏れたオーディオコンテンツが特定され除去される。ロードノイズは、同様に騒音の推定される特性に基づいて特定され除去されてもよい。一例では、信号プロセッサ118は、スペクトル減算を使用してロードノイズおよび漏れたオーディオコンテンツを除去する音響エコーキャンセラおよび騒音低減フィルタを実施してもよい。
各マイクロフォン信号からロードノイズおよび漏れたオーディオコンテンツが除去された後、多くの例では、マイクロフォン信号の残りの成分は、対応する座席位置114からの音声コンテンツ(すなわち、目標音声コンテンツ)および非対応座席位置114において発生した音声コンテンツである。様々な例では、信号プロセッサ118は、非対応座席位置114からの音声コンテンツを減衰させ、目標音声コンテンツを分離するために、システム100内のすべてのマイクロフォンアセンブリ110を単一のアレイとして扱い、時間ドメインまたは周波数ドメインのいずれかにおいてビームフォーミング構成を適用する。具体的には、信号プロセッサ118は、信号プロセッサ118によって受信されたマイクロフォン信号の特定の組合せに基づいてそれぞれに異なる事前に設計されたビームフォーミング構成を選択してもよい。各ビームフォーミング構成は、目標音声コンテンツではない音声コンテンツを除去しおよび/または減衰させるために適用される重みベクトルのセットからなってもよい。一例によれば、各ビームフォーミング構成に関連する減衰係数(または利得係数)を事前に測定し、オーディオシステム100の動作時に取り出すことができる。
一例では、第1のビームフォーミング構成を、第1の座席位置114aにおいて発生した目標音声コンテンツを検出し、車室112の第2の座席位置114b、第3の座席位置114c、および/または第4の座席位置114dから発生した音声コンテンツを除去するかまたは減衰させるように設計することができる。同様に、第2のビームフォーミング構成を、第2の座席位置114bにおいて発生した音声コンテンツを検出し、第1の座席位置114a、第3の座席位置114c、または第4の座席位置114dから発生した音声コンテンツを除去するかまたは減衰させるように設計することができる。したがって、マイクロフォンアレイが使用されているとき、対応するビームフォーミング構成の重みベクトルは、マイクロフォンアレイがそのビームを操作して目標音声コンテンツを受信し、不要な音声コンテンツを除去または低減させるのを可能にする。各ビームフォーミング構成に関連する減衰(または利得)係数は、非対応音声信号に適用される減衰(または利得)の特定の量を指定する。
一例では、周波数ドメインにおいてビームフォーミングが適用される場合、各ビームフォーミング構成は重みベクトルのセットwf,f=1,...,Fを含んでもよい。この例では、wfは、周波数fにおける重みベクトルであり、Fは周波数の総数である。したがって、wfは、各マイクロフォン信号の(周波数fにおける)周波数成分に適用される利得を含む。出力の周波数成分は、一次結合として得られることがある。
Figure 2020511684
上式において、Si(f)は、第iのマイクロフォンアセンブリ110における信号の周波数成分であり、wf,iは、関連する利得である。
いくつかの例では、各ビームフォーミング構成の重みベクトルは、受信されるマイクロフォン信号のそれぞれに異なる組合せに対して最小分散無歪応答(MVDR)を適用することによって得られてもよい。重みベクトルの各セットが得られた後、減衰係数とともに、動作時に制御回路106にアクセス可能なプログラムストレージに記憶されてもよい。たとえば、複数の重みベクトルはルックアップテーブル、レジスタ、または同様の参照テーブルに記憶されてもよい。制御回路106は、ルックアップテーブルを使用して、車室オーディオシステム100の動作時の所与の条件について適切なビームフォーミング構成(たとえば、重みベクトルと減衰係数のセット)を判定し、重みベクトルおよび減衰係数をオーディオ信号処理回路104に供給してもよい。ルックアップテーブルは、実行時計算をインデックス演算に置き換える任意のアレイを含んでもよい。
各座席位置114から発生した音声コンテンツはほとんど無相関であるので、音声信号のレベルおよび適切な減衰係数を含む線形方程式系が形成されることがある。この系は次いで、信号プロセッサ118によってタイムフレームごとに解かれ、混合された音声コンテンツ(すなわち、音声コンテンツの組合せ)が存在するときの音声信号のレベルが推定される。たとえば、音声コンテンツの音声信号はsk,i=1,...,K,によって示されてもよく、この場合、Kは、車室内の座席位置114の総数である。音声信号の対応するレベルは、Pkによって示されてもよく、ビームフォーミング構成の数はMによって示されてもよい。そのような例では、第mのビームフォーミング構成に減衰係数{αm,k,k=1,...,K}のセットが関連付けられる。減衰係数は、それぞれに異なる試験信号がそれぞれに異なるビームフォーミング構成を独立に通過させられるときに入力パワーおよび出力パワーを測定することによって、事前に算出されてもよい。第kの信号(このシナリオでは第kの座席位置からの目標音声信号)が、第mのビームフォーミング構成を通過させられるときの減衰係数は、αm,kによって示され、次式を使用して算出される。
Figure 2020511684
上式において、Pm,kは、第mの構成が使用されるときのマイクロフォンアセンブリ110の出力における音声信号レベルであり、Pkは、第kの音声信号の音声信号レベルである。
前述のように、音声コンテンツはほとんど無相関であるので、次式に示すように、音声信号の線形結合は音声信号のレベルの一次結合である。
Figure 2020511684
上式において、Pinは、マイクロフォンアセンブリ110において組み合わされ混合された音声信号のレベルである。
レベルが算出されるタイムフレームはtによって示される。小さいタイムフレームが使用される場合、音声信号間の相関がゼロではなくなる場合があることに留意されたい。すなわち、いくつかの例では、タイムフレームが大きくなるのに応じて相関がゼロに近づく。この理由で、いくつかの例では、窓の長さが信号プロセッサ118についての同調パラメータである場合がある。組み合わされた信号を第mのビームフォーミング構成を通過させた後、出力信号のレベルは次式のように表すことができる。
Figure 2020511684
したがって、信号プロセッサ118によって次式のように線形方程式系を形成することができる。
Figure 2020511684
次いで、次式のように、信号プロセッサ118によって、タイムフレームtにおける音声信号レベルを推定することができる。
Figure 2020511684
上式において、
Figure 2020511684
 はαのムーアーペンローズ擬似逆行列である。
他の例では、前述の方程式系を、ロードノイズおよび漏れたオーディオコンテンツなどの、車室112内の他の種類の音響干渉を組み込むようにさらに拡張してもよい。重みベクトルと減衰係数のそれぞれに異なるセットをオフラインで作成することができ、これらのセットは、干渉する音響エネルギーのいくつかの組合せに対応してもよい。次いで、これらの組合せのうちのどれが検出されるかに応じて、対応するビームフォーミング構成が、制御回路106によって選択され、信号プロセッサ118によって適用されてもよい。
上述のように、オーディオ信号源102出力、関連する車両のマルチメディアバス、および/または車両コントロールエリアネットワーク(CAN)を調べることによって、漏れたオーディオコンテンツ、ロードノイズ、およびその他の騒音などの特定のオーディオコンテンツの存在を容易に判定することができる。音声信号については、いくつかの例では、オーディオシステム100は、1つまたは複数の音声区間検出器(VAD)をさらに含んでもよく、各音声区間検出器は、車室112内の座席位置114用に設計することができる。1つまたは複数のVADは、制御回路106に結合されてもよく、所与の座席位置114において音声コンテンツが生成されているときにそのことを制御回路に通知してもよい。音声コンテンツの信号レベル計算は、マイクロフォンアセンブリ110の位置に基づき、分離が望まれる位置には基づかないが、これらの位置における音響干渉のレベルの差を事前に測定し、それに応じてオーディオコンテンツを調整することによって、相違を補償することができる。
音声信号は、判定された後、上述のように、漏れたオーディオコンテンツおよびロードノイズと組み合わされて総摂動信号を判定してもよい。いくつかの例では、各座席位置114からの漏れたオーディオコンテンツは、オーディオ信号処理回路104に供給されるオーディオ信号および1つまたは複数の漏れ関数に基づいて判定されてもよい。各漏れ関数は、オーディオコンテンツが漏れるスピーカ108と漏れたオーディオコンテンツが受け取られる座席位置114との間の空間関係に対応してもよい。この関係は固定され、車両の製造時に判定されることがあるので、たとえば、漏れ関数の各々が事前に判定されデータストア122内に記憶されてもよい。同様のプロセスが、信号プロセッサ118によって車両の動作時にロードノイズについて実行されてもよい。
本明細書で説明するように、オーディオ信号処理回路104は、摂動信号を補償するようにオーディオ信号を調整してもよい。このことは、車室112内の様々な音響干渉源のうちの1つまたはすべてを補償することを含む。一例では、オーディオ信号処理回路104は、オーディオ信号の周波数に基づいて摂動信号を補償するようにオーディオ信号のレベルを動的に調整する音量ベース等化回路120を含む。具体的には、音量ベース等化回路120は、所望の座席位置114における摂動信号の影響を軽減するように、周波数帯域とは無関係に、または周波数帯域において、オーディオ信号の周波数成分間の釣合いを動的に調整してもよい。たとえば、音量ベース等化回路120は、オーディオ信号の周波数成分を増幅または減衰させる1つまたは複数の線形フィルタまたは動的利得回路を含んでもよい。
一例では、オーディオ信号に施される調整(たとえば、利得または減衰の調整)のレベルは、調整曲線のグループから選択される調整曲線に基づいてもよい。各調整曲線は、オーディオ信号の周波数成分に基づいてオーディオ信号に適用すべき利得または減衰を指定する。具体的には、各調整曲線内の調整値が、各周波数成分または周波数帯域についての信号対雑音比に対応してもよい。オーディオ信号処理回路104は、受信された所望のオーディオコンテンツおよび算出されたSNRに基づいて、適切な調整曲線を選択し、適切な調整値を適用して摂動信号の影響を軽減するように所望のオーディオコンテンツを動的に調整してもよい。特定の例では、オーディオ信号に対する周波数ベースの調整は、参照によって全体的に本明細書に組み込まれる「DYNAMIC SOUND ADJUSTMENT」という名称の米国特許出願第2015/0281864号に記載された技法を実行することによって実施されてもよい。調整後、音量ベース等化回路120はオーディオ信号を対応するスピーカ108に供給する。
一例では、音量ベース等化回路120は、オーディオコンテンツのそれぞれに異なる周波数帯域に対してそれぞれに異なる増幅または減衰を適用するように構成される。たとえば、音量ベース等化回路120は、第1の周波数帯域(たとえば、低周波数帯域)に第1の減衰または増幅を適用し、第2の周波数帯域(たとえば、高周波数帯域)に第2の減衰または増幅を適用してもよい。そのような例では、低周波数帯域は、50Hzから500Hzの間の周波数を含んでもよく、高周波数帯域は、500Hzから5kHzの間の周波数を含んでもよい。周波数帯域ごとの増幅および/または減衰調整値は、上述のように選択された調整値によって指定されてもよい。
本明細書で説明するように、車室オーディオシステム100のいくつかの例は、騒音のある車室内で単一の座席位置に電話での会話を行う際に顕著な利益をもたらすことがある。たとえば、図1を参照するとわかるように、オーディオ信号処理回路104は、第1の座席位置114aの乗員による電話での会話を調整するのを可能にし、これによって第2の座席位置114b、第3の座席位置114c、および第4の座席位置114dのうちのいずれかまたはすべてにおいて発生した音声コンテンツの影響を軽減する。音声コンテンツを補償するように電話での会話を調整することに加えて、オーディオ信号処理回路104は、車室112内の他のオーディオコンテンツ(たとえば、音楽)および車両騒音の影響を軽減するように電話での会話をさらに調整してもよい。
図2を参照すると、図1に示す信号プロセッサの入出力図の一例が示されている。図示のように、信号プロセッサ118は、ロードノイズ成分204、音声コンテンツ成分206、漏れたオーディオコンテンツ成分210、他の騒音成分214(たとえば、車両騒音、換気騒音など)を含むマイクロフォン信号を受信してもよい。図1のオーディオシステム100を参照しながら説明したように、いくつかの例では、マイクロフォン信号は、複数の座席位置において発生した検出された音声コンテンツおよび複数のスピーカにおいて発生したオーディオコンテンツ漏れを含んでもよい。したがって、図2では、マイクロフォン信号はさらなる音声コンテンツ成分(n)208およびさらなる漏れたオーディオコンテンツ成分(n)212も含むように示されている。
さらに図示するように、信号プロセッサ118は、オーディオ信号源102からオーディオ信号216を受信し、制御回路106から1つまたは複数の制御信号218を受信してもよい。少なくともこれらの信号およびマイクロフォン信号202に基づいて、信号プロセッサ118は摂動信号220を判定してもよい。次いで、判定された摂動信号220を、音量ベース等化回路118などの図1に示すオーディオ信号処理回路104の他の構成要素に供給してもよい。
次に、図3を参照すると、車室オーディオシステム300の別の例が示されている。図示のように、図3の車室オーディオシステム300は、図1を参照しながら説明したオーディオシステム100と同じ構成要素のうちの多くを含んでもよい。たとえば、オーディオシステム300は、いくつかの他の構成要素の中で特に、オーディオ信号源302と、オーディオ信号処理回路304と、制御回路306と、1つまたは複数のスピーカ308a〜308hと、1つまたは複数のマイクロフォンアセンブリ310a〜310bと、データストア312とを含んでもよい。スピーカ308の各々は、同じく図1の車室オーディオシステム100を参照しながら説明したように、対応する座席位置314a〜314dに近接して位置してもよい。別段の指定がない限り、1つまたは複数のスピーカ308a〜308hは一般にスピーカ308と呼ばれ、1つまたは複数のマイクロフォンアセンブリ310a〜310bは一般にマイクロフォンアセンブリ310と呼ばれ、座席位置314a〜314dは一般に座席位置314と呼ばれる。
いくつかの例によれば、各マイクロフォンアセンブリ310は、個々のマイクロフォンのアレイを含んでもよい。図1に示す例では、各マイクロフォンアセンブリ310は、対応する座席位置314において発生した音声コンテンツを検出するように位置し、いくつかの他の例では、各座席位置314は、対応するマイクロフォンアセンブリ310を有さないことがあり、その代わり、1つまたは複数の共通のマイクロフォンアセンブリ310を共有する。たとえば、図3は、第1および第2の座席位置314a、314bにおいて発生した音声コンテンツを検出するように位置する第1のマイクロフォンアセンブリ310a、ならびに第3および第4の座席位置314c、314dにおいて発生した音声コンテンツを検出するように位置する第2のマイクロフォンアセンブリ310bを示す。いくつかの例では、各マイクロフォンアセンブリ310は、図3に示すように、それぞれの座席位置314間の中央位置に位置してもよい。
各マイクロフォンアセンブリ310は、マイクロフォンアセンブリ310において音声コンテンツが受信される方向に基づいてそれぞれに異なる座席位置314において発生する音声コンテンツを区別してもよい。すなわち、各マイクロフォンアセンブリ310の中央位置の結果として、各座席位置314からの音声コンテンツは、異なる方向におけるマイクロフォンアセンブリ310において受信される。具体的には、音声コンテンツ波形は、マイクロフォンアセンブリ310の個々のマイクロフォンに沿って異なる順序で伝搬する。オーディオ信号処理回路304は、アセンブリ内の各マイクロフォンが音声コンテンツを検出する際の遅延に基づいて、検出された音声コンテンツが発生した座席位置314を判定してもよい。
同じく図3に示すように、オーディオ信号処理回路304は、1つまたは複数のロードノイズセンサ316から1つまたは複数の騒音信号をさらに受信してもよい。各ロードノイズセンサ316は、車両の動作時にロードノイズを検出するように車室内に位置してもよい。たとえば、各ロードノイズセンサ316は、マイクロフォンを含んでもよい。各ロードノイズセンサ316からの騒音信号は、図1に示す車室オーディオシステム100を参照しながらさらに説明するように各マイクロフォン信号をフィルタ処理するために使用されてもよい。
いくつかの例では、オーディオ信号処理回路304は、1つまたは複数のフィルタ320に結合された動的音量ベース等化回路318と信号プロセッサ322とを含む。各フィルタ320は、フィルタ320のパラメータ(たとえば、フィルタ係数)を調整する制御回路306から1つまたは複数の制御信号を受信してもよい。一例では、各フィルタ320は、マイクロフォン信号から漏れたオーディオコンテンツをフィルタ処理し、クロストークを除去するように制御されてもよいが、様々な他の例では、各フィルタ320は、ロードノイズまたは車両騒音などの車室内の他の音響干渉を低減または除去してもよい。特定の例では、各フィルタ320は、振幅調整されたオーディオ信号を動的音量ベース等化回路318に供給するクロストーク除去フィルタを含んでもよい。
少なくとも図1を参照しながら上記で説明したように、いくつかの例では、車室内の所望の座席位置における音響干渉の影響を補償するプロセスを実行する。いくつかの例では、これらのプロセスは、図1を参照しながら上記で説明したオーディオシステム100などの車室オーディオシステムによって実行される。そのようなプロセスの1つの例を図4に示す。この例によれば、プロセス400は、オーディオ信号に基づいて第1の座席位置にオーディオコンテンツを供給する動作と、第2の座席位置にオーディオコンテンツを供給する動作と、音声コンテンツ、漏れたオーディオコンテンツ、およびロードノイズを検出する動作と、検出された音声コンテンツ、漏れたオーディオコンテンツ、およびロードノイズに基づいて摂動信号を判定する動作と、第1の座席位置に供給されるオーディオコンテンツに対する摂動信号の影響を補償するようにオーディオ信号を調整する動作とを含む。図4のプロセスについて、図1に示すオーディオシステム100およびその構成要素を引き続き参照しながら説明する。
プロセス400はまず、動作402において、オーディオ信号源から受信されたオーディオ信号に基づいて車室内の第1の座席位置(たとえば、図1における座席位置114a)に第1のオーディオコンテンツを供給することを含む。たとえば、プロセスは、動作402において、電話での会話をスピーカ108a、108bから第1の座席位置114a(図1に示されている)に供給することを含んでもよい。いくつかの例では、座席位置にオーディオコンテンツを供給することは、処理されたオーディオ信号によって座席位置に近接する(たとえば、ヘッドレスト、背もたれ、アームレスト、車室ドア、ヘッドライナ、および/または計器パネル内の)1つまたは複数のスピーカを駆動することと、座席位置の乗員に対して音響エネルギーを放出することとを含んでもよい。
いくつかの例では、オーディオシステムは、車室内のそれぞれに異なる座席位置またはそれぞれに異なるオーディオコンテンツゾーン用のそれぞれに異なるオーディオコンテンツを生成してもよい。すなわち、音源は、第1の座席位置114a用の第1のオーディオコンテンツ(たとえば、電話での会話)、および第2、第3、および/または第4の座席位置(たとえば、図1における座席位置114b、114c、114d)用の第2のオーディオコンテンツ(たとえば、映画のサウンドトラック)を生成してもよい。受信後、それぞれのスピーカはオーディオコンテンツを対応する座席位置に放出する。したがって、プロセス400は、第1のオーディオコンテンツが送られるのと同時にまたはほぼ同時に、第2のスピーカを有する車室内の第2の座席位置に第2のオーディオコンテンツを供給することを含んでもよい。同様に、プロセス400は、第3の座席位置に第2のオーディオコンテンツを供給すること、または第3の座席位置に第3のオーディオコンテンツを供給することを含んでもよい。少なくとも一例では、第2のオーディオコンテンツおよび第3のオーディオコンテンツは第1のオーディオコンテンツとは異なる。
プロセス400は、動作406において、マイクロフォンアセンブリにおいて、第2の座席位置において発生した音声コンテンツ、第2の座席位置の近くの1つまたは複数のスピーカからの漏れた第2のオーディオコンテンツ、およびロードノイズを検出することを含む。プロセス400は、検出後、音声コンテンツ、第2のスピーカからの漏れた第2のオーディオコンテンツ、およびロードノイズの組合せに少なくとも部分的に基づいて摂動信号を判定することを含んでもよい(動作410)。プロセス400は、摂動信号が算出された後、第1の座席位置におけるオーディオコンテンツに対する摂動信号の影響を補償するようにオーディオ信号の周波数に基づいて第1のスピーカに供給されるオーディオ信号を調整することを含んでもよい(動作412)。
本明細書では、多くの例において、各マイクロフォンアセンブリは、複数の座席位置から発生した音声コンテンツを検出してもよい。すなわち、マイクロフォンアセンブリは、対応する座席位置から発生した音声コンテンツ(たとえば、目標音声コンテンツ)を検出することに加えて、非対応座席位置において発生した音声コンテンツを検出してもよい。たとえば、図1に示す第3のマイクロフォンアセンブリ110cは、第3の座席位置114cにおいて発生した音声コンテンツ、ならびに第4の座席位置114dにおいて発生した音声コンテンツを検出してもよい。したがって、プロセス400は、対応する座席位置において発生した検出された音声コンテンツ(目標音声コンテンツ)を非対応座席位置から受信された音声コンテンツと区別し、望ましくない音声コンテンツを除去または減衰させる動作をさらに含んでもよい(動作408)。しかし、音声コンテンツが1つの座席位置のみから検出された場合はそのような動作が必要ではない場合があることを諒解されたい。
非対応座席位置からの音声コンテンツを減衰させるために、システムのすべてのマイクロフォンアセンブリを単一のアレイとして処理するための1つまたは複数の動作が実行されてもよい。たとえば、プロセス400は、複数の座席位置から発生した音声コンテンツがマイクロフォンアセンブリによって検出された場合、時間ドメインまたは周波数ドメインのいずれかにおけるビームフォーミング構成を選択し、検出された混合された音声に適用することを含んでもよい。複数のマイクロフォンアセンブリの各々が、対応する座席位置からの音声コンテンツ、ならびに他の座席位置に対応する音声コンテンツを検出する状況では、個々の各マイクロフォンアセンブリのマイクロフォン信号に別個のビームフォーミング構成が適用されてもよい。
特定の例では、プロセス400は、存在するマイクロフォン信号の特定の組合せに基づいてマイクロフォンアセンブリごとに事前に設計されたビームフォーミング構成を選択することを含んでもよい。少なくとも図1を参照しながら説明したように、各ビームフォーミング構成は、所与のマイクロフォンアセンブリの目標音声コンテンツではない音声コンテンツを除去および/または減衰させるように適用される重みベクトルのセットから構成されてもよい。したがって、マイクロフォンアセンブリが使用されているとき、対応するビームフォーミング構成の重みベクトルは、マイクロフォンアレイがそのビームを操作して目標音声コンテンツを受信し、不要な音声コンテンツを除去または低減させるのを可能にする。各ビームフォーミング構成に関連する減衰(または利得)係数は、非対応音声信号に適用される減衰(または利得)の特定の量を指定する。適切なビームフォーミング構成が適用された後、すべての望ましくない音声コンテンツが除去または減衰され、目標音声コンテンツ用の音声信号が残る。
各音声信号は、上述のように、漏れたオーディオコンテンツおよびロードノイズと組み合わされて総摂動信号が判定されてもよい。動作412を参照するとわかるように、プロセス400は、オーディオコンテンツに対する摂動信号の影響(たとえば、マスキング作用)を補償するように第1のスピーカに供給されるオーディオ信号を調整することを含んでもよい。このことは、車室内の様々な音響干渉源のうちの1つまたはすべてを補償することを含んでもよい。一例では、プロセス400は、摂動信号の影響を軽減するようにオーディオ信号の周波数に基づいてオーディオ信号のレベルを動的に調整することを含む。具体的には、プロセス400は、摂動信号が、所望の座席位置におけるオーディオコンテンツの明瞭さに対する影響を実質的に有さなくなるように、1つまたは複数の周波数帯域とは無関係に、オーディオ信号の周波数成分間の釣合いを動的に調整することを含んでもよい。
図4は、車室内の所望の座席位置における音響干渉を低減させるためのプロセスの一例を示すが、このプロセスは、説明の都合上図4には明示的に示されていないさらなる動作をさらに含んでもよい。そのような動作については、本明細書では図1、図2、および図3のうちの1つまたは複数を参照しながら説明した。
上記では、少なくとも1つの実装形態のいくつかの態様について説明したが、当業者には様々な変更形態、修正形態、および改良形態が容易に企図されることを諒解されたい。そのような変更形態、修正形態、および改良形態は、本開示の一部であることが意図され、説明の範囲内であることが意図される。したがって、前記の説明および図面は一例に過ぎず、本開示の範囲は、添付の特許請求の範囲およびその均等物を適切に構成することによって決定されるべきである。
100 車室オーディオシステム
102 オーディオ信号源
104 オーディオ信号処理回路
106 制御回路
108a〜108h スピーカ
110 マイクロフォンアセンブリ
112 車室
114a〜114d 座席位置
116a〜116d ヘッドレスト
118信号プロセッサ
120 音量ベース等化回路
122 データストア
202 マイクロフォン信号
204 ロードノイズ成分
206 音声コンテンツ成分
208 さらなる音声コンテンツ成分
210 漏れたオーディオコンテンツ成分
212 さらなる漏れたオーディオコンテンツ成分
214 他の騒音成分
216 オーディオ信号
218 制御信号
220 摂動信号
300 車室オーディオシステム
302 オーディオ信号源
304 オーディオ信号処理回路
306 制御回路
308a〜308h スピーカ
310a〜310d マイクロフォンアセンブリ
312 データストア
314a〜314d 座席位置
316 ロードノイズセンサ
318 音量ベース等化回路
320 フィルタ

Claims (29)

  1. 車室オーディオシステムであって、
    オーディオ信号源から受信されたオーディオ信号に基づいて車室内の第1の座席位置に第1のオーディオコンテンツを供給するように位置する第1のスピーカと、
    前記車室内の第2の座席位置に第2のオーディオコンテンツを供給するように位置する第2のスピーカと、
    前記第2の座席位置において発生した第1の音声コンテンツ、前記第2のスピーカからの漏れた第2のオーディオコンテンツ、およびロードノイズを検出するように位置する第1のマイクロフォンアセンブリと、
    少なくとも前記第1のマイクロフォンアセンブリに結合されたオーディオ信号処理回路であって、前記第1の音声コンテンツと前記第2のスピーカからの前記漏れた第2のオーディオコンテンツと前記ロードノイズの組合せに少なくとも部分的に基づいて摂動信号を判定し、前記第1の座席位置における前記第1のオーディオコンテンツに対する前記摂動信号の影響を補償するように前記オーディオ信号の周波数に基づいて前記第1のスピーカへの前記オーディオ信号を調整するように構成されたオーディオ信号処理回路と
    を備える車室オーディオシステム。
  2. 第3の座席位置において発生した少なくとも第2の音声コンテンツを検出するように位置する第2のマイクロフォンアセンブリであって、前記第2の音声コンテンツが前記第1の音声コンテンツとは異なる、第2のマイクロフォンアセンブリをさらに備え、前記オーディオ信号処理回路は、前記第2のマイクロフォンアセンブリに結合され、前記第2の音声コンテンツに基づいて前記摂動信号を判定するようにさらに構成される、請求項1に記載の車室オーディオシステム。
  3. 前記第2のオーディオコンテンツは前記第1のオーディオコンテンツとは異なり、前記第2の座席位置は、前記第1の座席位置の前方方向、後方方向、第1の側方方向、または第2の側方方向のうちの1つである、請求項2に記載の車室オーディオシステム。
  4. 前記第1のマイクロフォンアセンブリおよび前記第2のマイクロフォンアセンブリの各々はマイクロフォンのアレイを含む、請求項2に記載の車室オーディオシステム。
  5. 前記オーディオ信号処理回路は、前記第2のスピーカからの前記漏れた第2のオーディオコンテンツおよび前記ロードノイズをフィルタ処理して前記第1の音声コンテンツを分離するように構成される、請求項4に記載の車室オーディオシステム。
  6. 前記第1のマイクロフォンアセンブリは、前記第2の音声コンテンツを検出するようにさらに構成され、前記オーディオ信号処理回路は、前記第1のマイクロフォンアセンブリに対する前記第1の音声コンテンツおよび前記第2の音声コンテンツの各々の方向に基づいて、前記第1のマイクロフォンアセンブリによって検出された前記第1の音声コンテンツを前記第1のマイクロフォンアセンブリによって検出された前記第2の音声コンテンツと区別するように構成される、請求項5に記載の車室オーディオシステム。
  7. 前記第1のマイクロフォンアセンブリは、前記第2の音声コンテンツを検出するようにさらに構成され、前記オーディオ信号処理回路は、第1のビームフォーミング構成を選択し適用して、少なくとも前記第1のマイクロフォンアセンブリによって検出された前記第2の音声コンテンツを減衰させるようにさらに構成される、請求項5に記載の車室オーディオシステム。
  8. 前記ビームフォーミング構成は、少なくとも重みベクトルのセットを含み、前記オーディオ信号処理回路は、前記第1のビームフォーミング構成を適用する際に、前記第1の音声コンテンツと前記第2の音声コンテンツの組合せに重みベクトルの前記セットを適用するように構成される、請求項7に記載の車室オーディオシステム。
  9. 複数のビームフォーミング構成を有するルックアップテーブルを含むデータストアをさらに備え、前記オーディオ信号処理回路は、前記ルックアップテーブルを参照して前記複数のビームフォーミング構成から前記第1のビームフォーミング構成を選択するように構成される、請求項8に記載の車室オーディオシステム。
  10. 前記オーディオ信号処理回路は、前記第1のスピーカへの前記オーディオ信号に適用される減衰または増幅を制御して、前記摂動信号の前記影響を補償するように前記オーディオ信号を調整するように構成された音量ベース等化回路を含む、請求項1に記載の車室オーディオシステム。
  11. 前記オーディオ信号は、少なくとも第1の周波数帯域と第2の周波数帯域とを含み、前記音量ベース等化回路は、前記第1の周波数帯域に適用される第1の減衰または増幅および前記第2の周波数帯域に適用される第2の減衰または増幅を制御するように構成され、前記第1の減衰または増幅は前記第2の減衰または増幅とは異なる、請求項10に記載の車室オーディオシステム。
  12. 前記音量ベース等化回路は、前記オーディオ信号に適用される減衰または増幅を前記オーディオ信号の周波数ごとに独立に制御するように構成される、請求項10に記載の車室オーディオシステム。
  13. 前記第1の座席位置は、前記車室内の運転者の座席であり、前記第1のオーディオコンテンツは電話での会話である、請求項1に記載の車室オーディオシステム。
  14. 車室オーディオシステムであって、
    オーディオ信号源から受信されたオーディオ信号に基づいて車室内の乗員に第1のオーディオコンテンツを供給するように位置する第1のスピーカと、
    前記車室内の対応する座席位置において発生した音声コンテンツ、前記車室内の他の座席位置からの他の音声コンテンツ、ロードノイズ、および漏れたオーディオコンテンツを検出するように位置する複数のマイクロフォンアセンブリと、
    前記複数のマイクロフォンアセンブリの各々に結合されたオーディオ信号処理回路であって、前記他の音声コンテンツ、ロードノイズ、および漏れたオーディオコンテンツを減衰させるかまたは除去し、前記対応する座席位置の各々からの前記音声コンテンツについての少なくとも1つの音声信号を推定するように構成されたオーディオ信号処理回路と
    を備える車室オーディオシステム。
  15. 前記複数のマイクロフォンアセンブリは、少なくとも第1のマイクロフォンアセンブリと第2のマイクロフォンアセンブリとを含み、前記第1のマイクロフォンアセンブリに対応する前記座席位置からの前記音声コンテンツは、第1の音声コンテンツを含み、前記第2のマイクロフォンアセンブリに対応する前記座席位置からの前記音声コンテンツは、第2の音声コンテンツを含む、請求項14に記載の車室オーディオシステム。
  16. 前記オーディオ信号処理回路は、第1のビームフォーミング構成を選択して、少なくとも前記第1のマイクロフォンアセンブリによって検出された前記第1の音声コンテンツと前記第2の音声コンテンツの組合せに適用するように構成される、請求項15に記載の車室オーディオシステム。
  17. 第1のビームフォーミング構成は、少なくとも重みベクトルの第1のセットを含み、前記オーディオ信号処理回路は、前記第1のビームフォーミング構成を適用する際に、前記第1の音声コンテンツと前記第2の音声コンテンツの組合せに重みベクトルの前記第1のセットを適用して前記第2の音声コンテンツを除去するかまたは減衰させるように構成される、請求項16に記載の車室オーディオシステム。
  18. 前記オーディオ信号処理回路は、第2のビームフォーミング構成を選択し、少なくとも前記第2のマイクロフォンアセンブリによって検出された前記第1の音声コンテンツと前記第2の音声コンテンツの組合せに適用するように構成される、請求項17に記載の車室オーディオシステム。
  19. 前記第2のビームフォーミング構成は、重みベクトルの第2のセットを含み、前記オーディオ信号処理回路は、前記第2のビームフォーミング構成を適用する際に、前記第1の音声コンテンツと前記第2の音声コンテンツの前記組合せに重みベクトルの前記第2のセットを適用して、前記第1の音声コンテンツを除去するかまたは減衰させるように構成される、請求項18に記載の車室オーディオシステム。
  20. 前記オーディオ信号処理回路は、前記対応する座席位置の各々からの前記音声コンテンツについての前記推定される音声信号の、前記第1のオーディオコンテンツに対する影響を補償するように前記オーディオ信号を調整するようにさらに構成される、請求項14に記載の車室オーディオシステム。
  21. 前記オーディオ信号処理回路は、前記第1のスピーカへの前記オーディオ信号に適用される減衰または増幅を制御して、前記推定される音声信号の影響を補償するように構成された音量ベース等化回路を含む、請求項20に記載の車室オーディオシステム。
  22. 車室オーディオシステムを動作させる方法であって、
    オーディオ信号源から受信されるオーディオ信号に基づいて、第1のスピーカによって、車室内の第1の座席位置に第1のオーディオコンテンツを供給するステップと、
    第2のスピーカによって、前記車室内の第2の座席位置に第2のオーディオコンテンツを供給するステップと、
    第1のマイクロフォンアセンブリにおいて、前記第2の座席位置において発生した第1の音声コンテンツ、前記第2のスピーカからの漏れた第2のオーディオコンテンツ、およびロードノイズを検出するステップと、
    前記第1の音声コンテンツと前記第2のスピーカからの前記漏れた第2のオーディオコンテンツと前記ロードノイズの組合せに少なくとも部分的に基づいて摂動信号を判定するステップと、
    前記第1の座席位置における前記第1のオーディオコンテンツに対する前記摂動信号の影響を補償するように前記オーディオ信号の周波数に基づいて前記オーディオ信号を調整するステップとを含む方法。
  23. 第2のマイクロフォンアセンブリにおいて、第3の座席位置において発生した第2の音声コンテンツを検出するステップであって、前記第2の音声コンテンツが前記第1の音声コンテンツと異なる、ステップと、
    前記第2の音声コンテンツに基づいて前記摂動信号を判定するステップとをさらに含む、請求項22に記載の方法。
  24. 前記第2のスピーカからの前記漏れた第2のオーディオコンテンツおよび前記ロードノイズをフィルタ処理して前記第1の音声コンテンツを分離するステップをさらに含む、
    請求項23に記載の方法。
  25. 前記第1のマイクロフォンアセンブリにおいて前記第2の音声コンテンツを検出するステップと、
    前記第1のマイクロフォンアセンブリに対する前記第1の音声コンテンツおよび前記第2の音声コンテンツの各々の方向に基づいて、前記第1のマイクロフォンアセンブリによって検出された前記第1の音声コンテンツと前記第1のマイクロフォンアセンブリによって検出された前記第2の音声コンテンツとを区別するステップとをさらに含む、請求項23に記載の方法。
  26. 前記第1のマイクロフォンアセンブリにおいて前記第2の音声コンテンツを検出するステップと、
    第1のビームフォーミング構成を選択し適用して、少なくとも前記第1のマイクロフォンアセンブリによって検出された前記第2の音声コンテンツを減衰させるステップとをさらに含む、請求項23に記載の方法。
  27. 前記第1のビームフォーミング構成を適用する前記ステップは、前記第1の音声コンテンツと前記第2の音声コンテンツの組合せに重みベクトルのセットを適用して前記第2の音声コンテンツを除去するかまたは減衰させるステップを含む、請求項26に記載の方法。
  28. 前記オーディオ信号は、少なくとも第1の周波数帯域と第2の周波数帯域とを含み、前記オーディオ信号を調整する前記ステップは、前記第1の周波数帯域に適用される第1の減衰または増幅および前記第2の周波数帯域に適用される第2の減衰または増幅を制御するステップであって、前記第1の減衰または増幅が前記第2の減衰または増幅とは異なる、ステップを含む、請求項22に記載の方法。
  29. 前記オーディオ信号を調整する前記ステップは、前記オーディオ信号に適用される減衰または増幅を前記オーディオ信号の周波数ごとに独立に制御するステップを含む、請求項22に記載の方法。
JP2019543326A 2017-02-13 2018-02-12 摂動信号補償のためのオーディオシステムおよび方法 Active JP6929950B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US15/431,029 2017-02-13
US15/431,029 US10049686B1 (en) 2017-02-13 2017-02-13 Audio systems and method for perturbing signal compensation
PCT/US2018/017774 WO2018148634A1 (en) 2017-02-13 2018-02-12 Audio systems and method for perturbing signal compensation

Publications (2)

Publication Number Publication Date
JP2020511684A true JP2020511684A (ja) 2020-04-16
JP6929950B2 JP6929950B2 (ja) 2021-09-01

Family

ID=61283337

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019543326A Active JP6929950B2 (ja) 2017-02-13 2018-02-12 摂動信号補償のためのオーディオシステムおよび方法

Country Status (5)

Country Link
US (2) US10049686B1 (ja)
EP (1) EP3580756B1 (ja)
JP (1) JP6929950B2 (ja)
CN (1) CN110476208B (ja)
WO (1) WO2018148634A1 (ja)

Families Citing this family (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10531195B2 (en) * 2017-09-29 2020-01-07 Bose Corporation Multi-zone audio system with integrated cross-zone and zone-specific tuning
CN109859749A (zh) * 2017-11-30 2019-06-07 阿里巴巴集团控股有限公司 一种语音信号识别方法和装置
US11906642B2 (en) * 2018-09-28 2024-02-20 Silicon Laboratories Inc. Systems and methods for modifying information of audio data based on one or more radio frequency (RF) signal reception and/or transmission characteristics
KR102166703B1 (ko) * 2018-10-17 2020-10-20 주식회사 에스큐그리고 차량용 독립 음장 형성 장치 및 차량용 독립 음장 형성 방법
JP7155991B2 (ja) * 2018-12-17 2022-10-19 トヨタ自動車株式会社 報知装置
US11385859B2 (en) 2019-01-06 2022-07-12 Silentium Ltd. Apparatus, system and method of sound control
US10949886B2 (en) * 2019-03-12 2021-03-16 Xevo Inc. System and method for providing content to a user based on a predicted route identified from audio or images
CN110111764B (zh) * 2019-05-13 2021-12-07 广州小鹏汽车科技有限公司 车辆及其降噪方法和降噪装置
FR3098076B1 (fr) * 2019-06-26 2022-06-17 Parrot Faurecia Automotive Sas Système audio pour appui-tête avec microphone(s) intégré(s), appui-tête et véhicule associés
EP3843421A1 (en) * 2019-12-23 2021-06-30 Bombardier Transportation GmbH Vehicle onboard condition monitoring
US11729549B2 (en) * 2019-12-30 2023-08-15 Harman International Industries, Incorporated Voice ducking with spatial speech separation for vehicle audio system
US11212606B1 (en) 2019-12-31 2021-12-28 Facebook Technologies, Llc Headset sound leakage mitigation
US11743640B2 (en) 2019-12-31 2023-08-29 Meta Platforms Technologies, Llc Privacy setting for sound leakage control
CN111341313A (zh) * 2020-03-04 2020-06-26 北京声智科技有限公司 一种车载多音区声源检测方法、装置及系统
US20210280193A1 (en) * 2020-03-08 2021-09-09 Certified Electronic Reporting Transcription Systems, Inc. Electronic Speech to Text Court Reporting System Utilizing Numerous Microphones And Eliminating Bleeding Between the Numerous Microphones
US11170752B1 (en) * 2020-04-29 2021-11-09 Gulfstream Aerospace Corporation Phased array speaker and microphone system for cockpit communication
DE102020114124A1 (de) 2020-05-27 2021-12-02 Audi Aktiengesellschaft System zur Bereitstellung von Schallzonen mit Notfallfunktion in einem Fahrzeug
US20220113933A1 (en) * 2020-10-08 2022-04-14 Arris Enterprises Llc Technologies for providing audio components/sessions to devices
CN114257908A (zh) * 2021-04-06 2022-03-29 北京安声科技有限公司 耳机的通话降噪方法及装置、计算机可读存储介质及耳机
CN114257921A (zh) * 2021-04-06 2022-03-29 北京安声科技有限公司 拾音方法及装置、计算机可读存储介质及耳机
US20230224639A1 (en) * 2022-01-07 2023-07-13 Analog Devices, Inc. Personalized audio zone via a combination of ultrasonic transducers and low-frequency speaker

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007019980A (ja) * 2005-07-08 2007-01-25 Matsushita Electric Ind Co Ltd オーディオ静音化装置
JP2010156826A (ja) * 2008-12-26 2010-07-15 Fujitsu Ten Ltd 音響制御装置
US20100189275A1 (en) * 2009-01-23 2010-07-29 Markus Christoph Passenger compartment communication system
JP2010283506A (ja) * 2009-06-03 2010-12-16 Mitsubishi Electric Corp 車載用音響処理装置
JP2017009700A (ja) * 2015-06-18 2017-01-12 本田技研工業株式会社 音源分離装置、および音源分離方法

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020071573A1 (en) 1997-09-11 2002-06-13 Finn Brian M. DVE system with customized equalization
US6505057B1 (en) 1998-01-23 2003-01-07 Digisonix Llc Integrated vehicle voice enhancement system and hands-free cellular telephone system
US6363156B1 (en) * 1998-11-18 2002-03-26 Lear Automotive Dearborn, Inc. Integrated communication system for a vehicle
DE19938158C1 (de) * 1999-08-16 2001-01-11 Daimler Chrysler Ag Verfahren und Vorrichtung sowie ihre Verwendung zur Kompensation von Verlusten eines akustischen Signals
US6674865B1 (en) 2000-10-19 2004-01-06 Lear Corporation Automatic volume control for communication system
US7171003B1 (en) * 2000-10-19 2007-01-30 Lear Corporation Robust and reliable acoustic echo and noise cancellation system for cabin communication
US7466832B2 (en) * 2002-07-31 2008-12-16 Harman International Industries, Incorporated Seatback audio controller
EP1475997A3 (en) 2003-05-09 2004-12-22 Harman/Becker Automotive Systems GmbH Method and system for communication enhancement in a noisy environment
US9560448B2 (en) * 2007-05-04 2017-01-31 Bose Corporation System and method for directionally radiating sound
US9615185B2 (en) 2014-03-25 2017-04-04 Bose Corporation Dynamic sound adjustment
US9454952B2 (en) * 2014-11-11 2016-09-27 GM Global Technology Operations LLC Systems and methods for controlling noise in a vehicle
US9743213B2 (en) * 2014-12-12 2017-08-22 Qualcomm Incorporated Enhanced auditory experience in shared acoustic space
EP3040984B1 (en) 2015-01-02 2022-07-13 Harman Becker Automotive Systems GmbH Sound zone arrangment with zonewise speech suppresion
US9595253B2 (en) * 2015-03-24 2017-03-14 Honda Motor Co., Ltd. Active noise reduction system, and vehicular active noise reduction system
US9773495B2 (en) * 2016-01-25 2017-09-26 Ford Global Technologies, Llc System and method for personalized sound isolation in vehicle audio zones

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007019980A (ja) * 2005-07-08 2007-01-25 Matsushita Electric Ind Co Ltd オーディオ静音化装置
JP2010156826A (ja) * 2008-12-26 2010-07-15 Fujitsu Ten Ltd 音響制御装置
US20100189275A1 (en) * 2009-01-23 2010-07-29 Markus Christoph Passenger compartment communication system
JP2010283506A (ja) * 2009-06-03 2010-12-16 Mitsubishi Electric Corp 車載用音響処理装置
JP2017009700A (ja) * 2015-06-18 2017-01-12 本田技研工業株式会社 音源分離装置、および音源分離方法

Also Published As

Publication number Publication date
US20180308504A1 (en) 2018-10-25
EP3580756A1 (en) 2019-12-18
JP6929950B2 (ja) 2021-09-01
US10049686B1 (en) 2018-08-14
EP3580756B1 (en) 2020-08-26
CN110476208B (zh) 2023-08-18
CN110476208A (zh) 2019-11-19
US20180233159A1 (en) 2018-08-16
WO2018148634A1 (en) 2018-08-16
US10388300B2 (en) 2019-08-20

Similar Documents

Publication Publication Date Title
JP6929950B2 (ja) 摂動信号補償のためのオーディオシステムおよび方法
US10257613B2 (en) Managing telephony and entertainment audio in a vehicle audio platform
US10438605B1 (en) Echo control in binaural adaptive noise cancellation systems in headsets
US8824697B2 (en) Passenger compartment communication system
US9020158B2 (en) Quiet zone control system
US20200252724A1 (en) Multi-zone audio system with integrated cross-zone and zone-specific tuning
JP2016126335A (ja) 区画別音声抑制を有する音区画設備
US20170193976A1 (en) In-vehicle communication signal processing
US11862139B2 (en) Method and system for creating a plurality of sound zones within an acoustic cavity
US10405095B2 (en) Audio signal processing for hearing impairment compensation with a hearing aid device and a speaker
US20090136049A1 (en) Device and method for acoustic communication and/or perception in a motor vehicle
JP2010163054A (ja) 会話支援装置及び会話支援方法
KR20200100665A (ko) 원단 원격통신을 위한 승객실 내 음향 잡음 소거 시스템
US10157627B1 (en) Dynamic spectral filtering
JP6091247B2 (ja) 車載オーディオシステム及びコンピュータプログラム
JP7259092B2 (ja) モジュール式エコーキャンセルユニット
JP2014176052A (ja) ハンズフリー装置
JP2023170080A (ja) 能動型騒音制御システム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20191004

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20201111

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20201124

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210224

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20210712

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20210811

R150 Certificate of patent or registration of utility model

Ref document number: 6929950

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150