JP6001248B2 - 音源検出装置 - Google Patents
音源検出装置 Download PDFInfo
- Publication number
- JP6001248B2 JP6001248B2 JP2011205322A JP2011205322A JP6001248B2 JP 6001248 B2 JP6001248 B2 JP 6001248B2 JP 2011205322 A JP2011205322 A JP 2011205322A JP 2011205322 A JP2011205322 A JP 2011205322A JP 6001248 B2 JP6001248 B2 JP 6001248B2
- Authority
- JP
- Japan
- Prior art keywords
- noise
- sound
- sound source
- unit
- vehicle
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000001514 detection method Methods 0.000 title claims description 137
- 238000000605 extraction Methods 0.000 claims description 85
- 230000001629 suppression Effects 0.000 claims description 61
- 238000012545 processing Methods 0.000 claims description 49
- 239000000284 extract Substances 0.000 claims description 9
- 230000005236 sound signal Effects 0.000 claims description 9
- 238000000034 method Methods 0.000 description 41
- 239000006185 dispersion Substances 0.000 description 10
- 238000010276 construction Methods 0.000 description 5
- 238000010586 diagram Methods 0.000 description 5
- 238000001914 filtration Methods 0.000 description 5
- 230000006870 function Effects 0.000 description 5
- 238000002474 experimental method Methods 0.000 description 3
- 230000002349 favourable effect Effects 0.000 description 3
- 238000001228 spectrum Methods 0.000 description 3
- 230000000694 effects Effects 0.000 description 2
- 230000003595 spectral effect Effects 0.000 description 2
- 238000011410 subtraction method Methods 0.000 description 2
- 230000001133 acceleration Effects 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 238000001816 cooling Methods 0.000 description 1
- 238000005314 correlation function Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000002708 enhancing effect Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10K—SOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
- G10K11/00—Methods or devices for transmitting, conducting or directing sound in general; Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
- G10K11/002—Devices for damping, suppressing, obstructing or conducting sound in acoustic devices
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S3/00—Direction-finders for determining the direction from which infrasonic, sonic, ultrasonic, or electromagnetic waves, or particle emission, not having a directional significance, are being received
- G01S3/80—Direction-finders for determining the direction from which infrasonic, sonic, ultrasonic, or electromagnetic waves, or particle emission, not having a directional significance, are being received using ultrasonic, sonic or infrasonic waves
- G01S3/802—Systems for determining direction or deviation from predetermined direction
- G01S3/808—Systems for determining direction or deviation from predetermined direction using transducers spaced apart and measuring phase or time difference between signals therefrom, i.e. path-difference systems
- G01S3/8083—Systems for determining direction or deviation from predetermined direction using transducers spaced apart and measuring phase or time difference between signals therefrom, i.e. path-difference systems determining direction of source
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S3/00—Direction-finders for determining the direction from which infrasonic, sonic, ultrasonic, or electromagnetic waves, or particle emission, not having a directional significance, are being received
- G01S3/80—Direction-finders for determining the direction from which infrasonic, sonic, ultrasonic, or electromagnetic waves, or particle emission, not having a directional significance, are being received using ultrasonic, sonic or infrasonic waves
- G01S3/86—Direction-finders for determining the direction from which infrasonic, sonic, ultrasonic, or electromagnetic waves, or particle emission, not having a directional significance, are being received using ultrasonic, sonic or infrasonic waves with means for eliminating undesired waves, e.g. disturbing noises
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R29/00—Monitoring arrangements; Testing arrangements
Landscapes
- Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- Acoustics & Sound (AREA)
- Multimedia (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Otolaryngology (AREA)
- Signal Processing (AREA)
- Measurement Of Velocity Or Position Using Acoustic Or Ultrasonic Waves (AREA)
- Measurement Of Mechanical Vibrations Or Ultrasonic Waves (AREA)
- Soundproofing, Sound Blocking, And Sound Damping (AREA)
Description
本発明は、複数の集音器で集音された音に基づいて音源を検出する音源検出装置に関するものである。
音源検出装置では、複数の集音器が周囲の音をそれぞれ集音し、その各音の到達時間差に基づいて音源（特に、車両の走行音）の位置を特定する。実開平５−９２７６７号公報に記載の装置では、所定の間隔で配設された複数のマイクロホンが出力する電気信号から帯域通過フィルタで低周波領域と高周波領域の周波数成分をそれぞれ除去して補正電気信号に変換し、その補正電気信号から車両の走行音の特徴の現れる所定の周波数帯域のパワーを算出し、そのパワーレベルが所定値より大きい場合に接近車両有りと判定するとともに、その補正電気信号により不要な雑音成分を除去して雑音抑制信号に変換し、複数のマイクロホンの雑音抑制信号間の相互相関を演算し、相関が最大となる到達時間差から接近車両の接近方向を演算する。
ところで、上記のような技術にあっては、接近車両の方向を検出できるものの、例えばエンジンや、クーリングファン等といった自車両が発する音や工事現場等、検出不要な他の雑音も検出する。これらの雑音は、接近車両等、必要な音源の検出を行うにあたりノイズとなるため、誤検出が多く検出精度の向上が図れないという課題がある。
そこで、本発明の課題は、誤検出を低減させ、検出精度を向上させることが可能な音源検出装置を提供することである。
すなわち、本発明に係る音源検出装置は、車両に搭載され、複数の集音器で集音された音の情報に基づいて所定の音源を検出する音源検出装置であって、複数の集音器により集音された音信号から所定の音源以外から発せられた雑音を抽出する部分であって、車両の内部に存在する既知の雑音源に音の抽出方向を向けて雑音源からの雑音を抽出する雑音強調処理を実行する雑音抽出部と、複数の集音器により集音された音信号から雑音抽出部により抽出された雑音の信号成分を抑制する雑音抑制部と、雑音抑制部により雑音の信号成分が抑制された音の情報を用いて所定の音源の位置を検出する音源検出部と、を備え、車両は、車両の車速を検出する車両状態検出部を備え、雑音抽出部による雑音の抽出と、雑音抑制部による雑音の信号成分の抑制は、車両状態検出部により検出された車速が所定の閾値より大きい場合に実行され、閾値以下の場合には実行されないものである。
この音源検出装置では、集音器により集音された音信号から雑音を抽出し、この抽出された雑音の信号成分を抑制し、この抑制後の音の情報を用いて所定の音源の位置を検出する。従って、雑音の影響を受けることなく、必要な音源のみを精度良く検出することができ、誤検出を低減させ、音源の検出精度を向上させることができる。また、車速の状態に応じて雑音抽出処理と雑音抑制処理が実行されるため、不要な場合にはこれらの処理を中止し必要な場合にのみこれらの処理を実行することが可能となり、ＥＣＵ等の処理の負荷を低減させることができ、更に好適な条件で音源検出処理を実行することができる。
また、音源検出装置において、雑音抽出部は、車両の内部の雑音源に向けて雑音強調処理を実行する。これにより、集音器に対する雑音源の方向や距離が既知であるときに、抑制対象の雑音の信号成分をより精度良く抽出することが可能となるため、好適な条件で音源検出処理を実行することができる。
この音源検出装置において、雑音抽出部による雑音の抽出と、雑音抑制部による雑音の信号成分の抑制は、交互に行われるようにしてもよい。この場合、雑音抽出処理と雑音抑制処理とを交互に行うため、ＥＣＵ等の処理の負荷を低減させることができる。
また、この音源検出装置において、雑音抽出部による雑音の抽出と、雑音抑制部による雑音の信号成分の抑制は、並行して行われるようにしてもよい。この場合、雑音抽出処理と雑音抑制処理を並行に行うため、処理時間を短縮できる。そして、雑音抽出後直ちに雑音抑制処理を行うため、雑音抑制の性能を向上させることができる。
この音源検出装置において、音源検出装置は、車両に搭載され、車両は、車両の周辺環境を検出する周辺環境検出部を備え、雑音抽出部は、周辺環境検出部により検出された周辺環境中に雑音源があるときに、雑音源から発せられた雑音を抽出するようにしてもよい。この場合、周辺の雑音源からの雑音の信号成分も抑制できるため、より好適な条件で音源検出処理を実行することができる。
また、この音源検出処理において、音源検出装置は、車両に搭載され、車両は、車両の周辺の固定音源を検出する固定音源検出部を備え、雑音抽出部は、固定音源検出部により検出された固定音源から発せられた雑音を抽出するようにしてもよい。この場合、固定音源検出部が、固定音源を検出しここから発せられる音も雑音として抽出し抑制することが可能となるため、より一層好適な条件で音源検出処理を実行することができる。
本発明によれば、誤検出を低減させ、検出精度を向上させることが可能な音源検出装置を提供することができる。
以下、図面を参照して、本発明に係る音源検出装置の実施形態について説明する。なお、各図において同一又は相当する要素については同一の符号を付し、重複する説明を省略する。
本実施形態に係る音源検出装置は、車両に搭載され、接近車両の方位を検出するものである。具体的には、本実施形態に係る音源検出装置は、複数の集音器（マイクロホン）で集音された各音に基づいて接近車両を検出し（つまり、周辺車両の走行音の音源の移動方向を特定し）、検出した接近車両の情報を運転支援装置に提供する。本実施形態は、音源検出装置の各構成要素及びその処理態様が異なる第１〜第５の実施形態からなる。
なお、車両の走行音としては、主として、ロードノイズ（タイヤ表面と路面との摩擦音）とパターンノイズ（タイヤ溝における空気の渦（圧縮／開放））が挙げられる。この車両の走行音の周波数成分の範囲は、実験等によって予め測定しておいてもよい。
まずは、図１を参照して、第１実施形態に係る音源検出装置１について説明する。図１は、第１実施形態に係る音源検出装置の構成図である。
音源検出装置１は、４個の集音器を有しており、２個の集音器（集音器対）からなる集音器ユニットが車幅方向の左側と右側に配置されている。音源検出装置１では、各集音器ユニットにおける２個の集音器の間隔を利用して音源の検出を行う。音源検出装置１は、集音器アレイ１０（左側集音器ユニット１１（第１集音器１３及び第２集音器１４）、右側集音器ユニット１２（第３集音器１５及び第４集音器１６））と、ＥＣＵ［Electronic Control Unit］２０（雑音抽出部２１、雑音抑制部２２、マイクロホンアレー処理部２３及び音源検出部２４）とを備えている。
集音器アレイ１０は、左側集音器ユニット１１と右側集音器ユニット１２を有している。また、左側集音器ユニット１１は、第１集音器１３と第２集音器１４を有している。第１集音器１３は、車幅方向の左側の外側に配置される。第２集音器１４は、第１集音器１３から所定の間隔を空けて車両中心側に配置される。右側集音器ユニット１２は、第３集音器１５と第４集音器１６を有している。第４集音器１６は、車幅方向の右側の外側に配置される。第３集音器１５は、第４集音器１６から所定の間隔を空けて車両中心側に配置される。耐ノイズ性能を向上させるべく、各集音器ユニット１１，１２内の集音器の間隔は狭い間隔で配置されている。
また、各集音器１３，１４，１５，１６は、音響電気変換器としての機能を有し、集音した音を電気信号に変換し、その電気信号をＥＣＵ２０に送信する。なお、各集音器１３，１４，１５，１６は、好適には、無指向性の集音器が用いられる。
ＥＣＵ２０は、ＣＰＵ［CentralProcessing Unit］、ＲＯＭ［Read Only Memory］、ＲＡＭ［Random Access Memory］等からなる電子制御ユニットであり、音源検出装置１を統括制御する。ＥＣＵ２０では、ＲＯＭに記憶されている接近車両用のアプリケーションをＲＡＭにロードしてＣＰＵで実行する。ＥＣＵ２０は、図１に示すように、雑音抽出部２１、雑音抑制部２２、マイクロホンアレー処理部２３及び音源検出部２４を有し、これらの雑音抽出部２１、雑音抑制部２２、マイクロホンアレー処理部２３及び音源検出部２４は、上記の各アプリケーションに相当する。
雑音抽出部２１は、接近車両等、音源の検出対象である所定の音源以外から発せられた雑音を抽出する。すなわち、雑音抽出部２１は、集音器アレイ１０により集音された音信号から自車両のエンジンやファン等の既知の雑音源から発せられた雑音を抽出する機能を有し、自車両内部の雑音源に向けて雑音強調処理を実行する。雑音抽出部２１が行う雑音抽出処理としては、例えばビームフォーミング技術を用いることができる。ビームフォーミング技術においては、エンジン等の雑音源の方向や距離が既知であるときに、音の抽出方向に指向性を持たせ、抽出方向の中心を雑音源に向けて雑音源から発せられた音を積極的に抽出することにより雑音強調処理を行う。このように雑音抽出部２１が雑音強調処理を行うことにより、抑制対象の雑音の信号成分をより精度良く抽出することが可能となるため、好適な条件で音源検出処理を実行することができる。
雑音抑制部２２は、集音器アレイ１０により集音された音信号から雑音抽出部２１により抽出された雑音の信号成分を抑制する機能を有する。雑音抑制部２２が行う雑音抑制処理としては、例えばスペクトルサブトラクション法を用いることができる。スペクトルサブトラクション法は、エンジン等の雑音のパワースペクトルの平均値を推定し、雑音を含んだ集音器アレイ１０からの電気信号のパワースペクトルから、雑音のパワースペクトルを差し引くことにより、雑音成分を抑制するものである。雑音抑制部２２が上記のような雑音抑制処理を行うことにより、集音器アレイ１０から出力された電気信号から雑音成分が抑制された電気信号を得ることができる。
マイクロホンアレー処理部２３は、各集音器対（左側集音器ユニット１１及び右側集音器ユニット１２）毎に、雑音抑制部２２により雑音成分が抑制された電気信号の相互相関値を計算する。具体的には、集音器対の電気信号がどの程度似ているか（波形が近いか）を示す相関値を計算する。ここでは、左側集音器ユニット１１の第１集音器１３と第２集音器１４との電気信号間の相互相関値、右側集音器ユニット１２の第３集音器１５と第４集音器１６との電気信号間の相互相関値が計算される。また、マイクロホンアレー処理部２３は、左側集音器ユニット１１及び右側集音器ユニット１２内における２個の電気信号間の位相差を計算する。更に、マイクロホンアレー処理部２３では、一定時間毎に計算される位相差を用いて、位相差の分散（ばらつき）を計算する。なお、相互相関値や位相差を計算する場合、相互相関関数やフーリエ変換によって得ることができる周波数情報を用いて計算する。
音源検出部２４では、各集音器対毎に、相互相関値と位相差分散に基づいて継続的に存在する音源を検出する。ここでは、相互相関値が閾値（相互相関判定用）以上か否かを判定し、集音器対でそれぞれ集音した音が似た音か否かを判定する。この閾値（相互相関判定用）は、相互相関値から電気信号の波形が似ているか否か判定するための閾値であり、実験等によって予め設定される。また、位相差分散が閾値（位相差分散判定用）以下か否かを判定し、集音器対でそれぞれ集音した音がある位置に継続的に存在するか否かを判定する。この閾値（位相差分散判定用）は、位相差分散から音源がある位置に継続的に存在しているか否かを判定するための閾値であり、実験等によって予め設定される。そして、相互相関値が閾値（相互相関値判定用）以上かつ位相差分散が閾値（位相差分散判定用）以下の場合には音源が継続的に存在していると判定し、この条件を満たさない場合には音源が存在しないと判定する。
また、運転支援装置３０は、運転者に対して各種運転支援する装置である。特に、運転支援装置３０は、音源検出装置１から接近車両情報を受信し、このとき接近車両に関する運転支援を実施する。例えば、自車両への接近車両が存在する場合、自車両に対する接近車両の衝突の可能性を判定し、衝突の可能性があると判定したときには運転者に対して警報を出力したり、接近車両の情報を提供し、さらに、衝突の可能性が高まった場合には自動ブレーキ等の車両制御を行う。
次に、図２を参照して、音源検出装置１の動作について説明する。図２は、第１実施形態に係る音源検出装置１のＥＣＵ２０における処理の流れを示すフローチャートである。図２のフローチャートに示される一連の処理は、ＥＣＵ２０によって予め定められた周期で繰り返し実行される。この一連の処理は、集音器ユニット１１，１２毎に行われ、具体的には、第１集音器１３が集音した音と第２集音器１４が集音した音の比較、及び第３集音器１５が集音した音と第４集音器１６が集音した音の比較により所定の音源の方位を検出する。以下では、第１集音器１３が集音した音と第２集音器１４が集音した音の比較により音源検出を行う動作について説明する。なお、このフローチャートの一連の処理とは別に、各集音器１３，１４，１５，１６では、車外の音を集音し、その集音した音を電気信号に変換してＥＣＵ２０に送信している。
このフローチャートの制御処理は、例えば車両のイグニッションオンによって開始され、まずステップＳ１０（以下、「Ｓ１０」という。他のステップにおいても同様とする。）にて、ＥＣＵ２０において各集音器１３，１４，１５，１６からの電気信号が入力される。また、このときＥＣＵ２０内のフィルタ（不図示）によりフィルタリング処理が行われ、このとき、当該電気信号から高周波数帯域の成分と低周波数帯域の成分が除去される。
そして、Ｓ１２において、雑音抽出部２１により、エンジン等の雑音源に向けて雑音を強調させる雑音抽出処理が行われ、その後Ｓ１４において、雑音抑制部２２により、雑音抽出部２１が強調した雑音を含む電気信号から、この雑音成分が抑制される。
その後、Ｓ１６において、マイクロホンアレー処理部２３により、雑音成分が抑制された信号を用いて、相互相関値及び位相差分散の計算が行われ、この相互相関値及び位相差分散の値を用いて音源検出部２４により、音源の存在有無及び音源の方位が判定されて一連の処理が終了する。
以上のように、第１実施形態における音源検出装置１においては、集音器アレイ１０で集音された音信号からエンジン等から発せられる雑音を抽出する雑音抽出部２１と、集音器アレイ１０で集音された音信号から雑音抽出部２１により抽出された雑音の信号成分を抑制する雑音抑制部２２とを備え、マイクロホンアレー処理部２３及び音源検出部２４は、雑音の信号成分が抑制された電気信号を用いて、接近車両等の音源の位置を検出する。よって、予め雑音の影響を排除できるため、接近車両等、車外の検出音の検出精度を高めることができ、誤検出を低減させ、検出性能を向上させることができる。
また、第１実施形態における音源検出装置１においては、雑音抽出部２１による雑音の抽出を行った後に、雑音抑制部２２による雑音の信号成分の抑制を行い、雑音抽出と雑音抑制を交互に行っているため、雑音抽出処理と雑音抑制処理を同時に行った場合と比較して処理負担を抑えることも可能となっている。なお、雑音抽出処理と雑音抑制処理の順序は、上記に限定されず、雑音抑制処理をした後に雑音抽出処理を行うようにしてもよい。
次に、第２実施形態における音源検出装置について図３を参照しながら説明する。第２実施形態は、第１実施形態の音源検出装置１と同一構成であるが、雑音抽出部２１による雑音の抽出と雑音抑制部２２による雑音の信号成分の抑制を並行して行う点が第１実施形態と異なる。
第２実施形態では、図３に示すように、Ｓ２０において、各集音器１３，１４，１５，１６からの電気信号が入力されフィルタリング処理が行われた後は、Ｓ２２及びＳ２４において、雑音抽出部２１による雑音抽出と雑音抑制部２２による雑音抑制が並行して行われる。その後、Ｓ２６において、マイクロホンアレー処理部２３により、雑音成分が抑制された信号を用いて、相互相関値及び位相差分散の計算が行われ、この相互相関値及び位相差分散の値を用いて音源検出部２４により、音源の存在有無及び音源の方位が判定され、一連の処理が終了する。なお、図３におけるＳ２０〜Ｓ２６の個々の処理の内容自体は、図２におけるＳ１０及びＳ１６の個々の処理の内容と同一である。
以上のように、第２実施形態では、雑音抽出部２１による雑音抽出と雑音抑制部２２による雑音抑制を並行して行うため、処理時間を短縮することが可能となる。また、雑音抽出と雑音抑制を同時に行っており、雑音抽出された直後の電気信号に対して雑音抑制することになるため、雑音抑制の精度を高めることができる。
次に、第３実施形態における音源検出装置５１について図４及び図５を参照しながら説明する。第３実施形態は、自車両の車両状態を検出する車両状態検出部４０を備え、この車両状態検出部４０が検出した自車両の車両状態を用いて、雑音抽出及び雑音抑制（以下、雑音処理と称する）を行う点に特徴を有する。
ここで、車両状態検出部４０としては、例えば、車速センサや加速度センサを用いることができる。以下では、車両状態検出部４０として、車速センサを用いた場合について説明する。
第３実施形態では、図５に示すように、Ｓ３０において各集音器１３，１４，１５，１６からの電気信号が入力されフィルタリング処理が行われた後は、Ｓ３２において、車両状態検出部４０による自車両の車速の検出が行われる。このとき、検出された車速がＥＣＵ２０に入力される。そして、Ｓ３４において、ＥＣＵ２０により、入力された車速の値が予め定めた閾値Ａより大きいか否かが判定され、Ａ以下である場合は音源検出が不要として一連の処理を終了する。
一方、Ｓ３４において車両状態検出部４０により検出された車速の値が閾値Ａより大きい場合はＳ３６に移行し、雑音抽出部２１による雑音抽出が行われる。このとき、例えば雑音抽出部２１は、稼動しているエンジンやタイヤに対して雑音抽出を行い、エンジンやタイヤから発せられた音を雑音として強調処理を行う。
その後Ｓ３８において雑音抑制部２２による雑音抑制が行われ、更にＳ４０において、マイクロホンアレー処理部２３により、雑音成分が抑制された信号を用いて、相互相関値及び位相差分散の計算が行われ、この相互相関値及び位相差分散の値を用いて音源検出部２４により、音源の存在有無及び音源の方位が判定され、一連の処理が終了する。なお、図５におけるＳ３０、Ｓ３８及びＳ４０の処理は、それぞれ、図２におけるＳ１０、Ｓ１４及びＳ１６の処理と同一である。
以上のように、第３実施形態では、車両状態検出部４０により自車両の車両状態を検出し、その検出結果に応じて雑音処理を行う。従って、自車両の車両状態に合わせて必要な場合にのみ雑音処理が行われるため、処理負担をより低減できるとともに、最適な条件で音源検出を実行することができる。
なお、上記では、車両状態検出部４０が車速を検出し、検出した車速が閾値Ａを超えるか否かに基づいて雑音処理を行う例について説明したが、検出する車両状態としては車速に限られず、例えば、エンジンの稼動状態やエアコンの使用状況等を車両状態として検出し、これらの検出結果に応じて、雑音処理を行うか否かを判定するようにしてもよい。また、上記では、雑音抽出後に雑音抑制を行う例について説明したが、第２実施形態と同様、雑音抽出と雑音抑制を並行して行うようにしてもよい。
次に、第４実施形態における音源検出装置７１について図６及び図７を参照しながら説明する。第４実施形態は、自車両の周辺環境を検出する周辺環境検出部６０を備え、この周辺環境検出部６０が検出した周辺環境から工事現場等の雑音源が存在するか否かを判断して、この判断結果に応じて異なる態様の雑音抽出を行う点に特徴を有する。
ここで、周辺環境検出部６０としては、例えばカーナビゲーションシステムによって得られる地図情報等を用いることができる。第４実施形態では、図７に示すように、Ｓ５０において、各集音器１３，１４，１５，１６からの電気信号が入力されフィルタリング処理が行われた後は、Ｓ５２において、周辺環境検出部６０による周辺環境の検出が行われる。このとき、検出された周辺環境の情報がＥＣＵ２０に入力される。そして、Ｓ５４において、ＥＣＵ２０により、入力された周辺環境の中に工事現場等の雑音源が存在するか否かが判定される。
Ｓ５４において雑音源が存在すると判定された場合はＳ５６に移行し、雑音抽出部２１による雑音抽出が行われる。このとき、雑音抽出部２１は、自車両の雑音源だけでなく周辺環境の雑音源である工事現場等に対しても雑音抽出を行い、これらの雑音源から発せられた雑音の強調処理を行う。一方、Ｓ５４において周辺に雑音源が存在しないと判定された場合は、Ｓ１２等と同様、自車両の雑音源に対して雑音抽出を行う。
その後Ｓ６０において雑音抑制部２２により雑音抑制が行われ、更にＳ６２においてマイクロホンアレー処理部２３により、雑音成分が抑制された信号を用いて、相互相関値及び位相差分散の計算が行われ、この相互相関値及び位相差分散の値を用いて音源検出部２４により、音源の存在有無及び音源の方位が判定され、一連の処理が終了する。なお、図７におけるＳ５０、Ｓ６０及びＳ６２の処理は、それぞれ、図２におけるＳ１０、Ｓ１４及びＳ１６の処理と同一である。
以上のように、第４実施形態では、周辺環境検出部６０により周辺環境を検出し、周辺に雑音源が存在するか否かに応じて異なる態様の雑音抽出処理を行う。従って、周辺環境における雑音源の影響を効果的に除去することが可能となり、音源検出の精度をより向上させることができる。なお、上記では、雑音抽出後に雑音抑制を行う例について説明したが、第２実施形態と同様、雑音抽出と雑音抑制を並行して行うようにしてもよい。
次に、第５実施形態における音源検出装置９１について図８及び図９を参照しながら説明する。第５実施形態は、自車両の周辺に存在する工事現場等の固定音源を検出する固定音源検出部８０を備え、この固定音源検出部８０が固定音源を検出したか否かに応じて異なる態様の雑音抽出を行う点に特徴を有する。
第５実施形態では、図９に示すように、Ｓ７０において各集音器１３，１４，１５，１６からの電気信号が入力されフィルタリング処理が行われた後は、Ｓ７２において、固定音源検出部８０による固定音源の検出が行われる。このとき、固定音源を検出したか否かがＥＣＵ２０に入力される。そして、Ｓ７４において、自車両の周辺に固定音源が存在するか否かが判定される。
Ｓ７４において、固定音源検出部８０により固定音源が存在すると判定された場合はＳ７６に移行し、雑音抽出部２１による雑音抽出が行われる。このとき、雑音抽出部２１は、自車両の雑音源だけでなく検出された工事現場等の固定音源に対しても雑音抽出を行い、これらの雑音源から発せられた雑音の強調処理を行う。一方、Ｓ７４において、周辺に固定音源が存在しないと判定された場合は、Ｓ１２等と同様、自車両の雑音源に対して雑音抽出を行う。
その後、Ｓ８０において雑音抑制部２２により雑音抑制が行われ、更にＳ８２においてマイクロホンアレー処理部２３により、雑音成分が抑制された信号を用いて、相互相関値及び位相差分散の計算が行われ、この相互相関値及び位相差分散の値を用いて音源検出部２４により、音源の存在有無及び音源の方位が判定され、一連の処理が終了する。なお、図９におけるＳ７０、Ｓ８０及びＳ８２の処理は、それぞれ、図２におけるＳ１０、Ｓ１４及びＳ１６の処理と同一である。
以上のように、第５実施形態では、固定音源検出部８０により自車両の周辺に固定音源が存在するか否かを検出し、その検出結果に応じて異なる態様の雑音抽出処理を行う。従って、自車両にとって検出不要な固定音源から発せられる音の影響も事前に排除することが可能となり、音源の検出精度が向上するという効果が得られる。また、上述した第４実施形態同様の効果も得られる。
なお、上記では、雑音抽出後に雑音抑制を行う例について説明したが、第２実施形態と同様、雑音抽出と雑音抑制を並行して行うようにしてもよい。また、第５実施形態では、固定音源検出部８０が固定音源を検出し、その固定音源から発せられる雑音を抽出する例について説明したが、固定音源検出部８０の代わりに、自車両から離れていく車両等、自車に接近しない非接近雑音源を検出する非接近音源検出部を設け、この非接近音源検出部が非接近雑音源を検出したときに、雑音抽出部２１が非接近雑音源に対して雑音抽出処理を行うようにしてもよい。
以上、本発明に係る第１〜第５実施形態について説明したが、本発明は第１〜第５実施形態に限定されることなく、様々な変形が可能である。
例えば、上記実施形態では、車両に搭載され、検出した接近車両情報を運転支援装置３０に提供する音源検出装置１，５１，７１，９１に適用したが、音源検出装置１，５１，７１，９１の構成としては他の構成でもよい。例えば、運転支援装置の中に接近車両検出機能として組み込まれるものでもよいし、音源検出装置の中に警報機能等を有するものであってもよい。また、接近車両以外の音源を検出する音源検出装置に適用してもよく、更に、ロボット等車両以外の移動体に搭載される音源検出装置に適用してもよい。
また、上記実施形態では、左側集音器ユニット１１及び右側集音器ユニット１２がそれぞれ集音器を２個ずつ有する構成について説明したが、集音器の個数や各集音器を配置する位置について他の様々なバリエーションが適用可能である。
１，５１，７１，９１…音源検出装置、１０…集音器アレイ、１１…左側集音器ユニット、１２…右側集音器ユニット、１３…第１集音器、１４…第２集音器、１５…第３集音器、１６…第４集音器、２０…ＥＣＵ、２１…雑音抽出部、２２…雑音抑制部、２３…マイクロホンアレー処理部、２４…音源検出部、３０…運転支援装置、４０…車両状態検出部、６０…周辺環境検出部、８０…固定音源検出部。
Claims (5)
- 車両に搭載され、複数の集音器で集音された音の情報に基づいて所定の音源を検出する音源検出装置であって、
前記複数の集音器により集音された音信号から前記所定の音源以外から発せられた雑音を抽出する部分であって、前記車両の内部に存在する既知の雑音源に音の抽出方向を向けて前記雑音源からの雑音を抽出する雑音強調処理を実行する雑音抽出部と、
前記複数の集音器により集音された音信号から前記雑音抽出部により抽出された雑音の信号成分を抑制する雑音抑制部と、
前記雑音抑制部により雑音の信号成分が抑制された音の情報を用いて前記所定の音源の位置を検出する音源検出部と、を備え、
前記車両は、前記車両の車速を検出する車両状態検出部を備え、
前記雑音抽出部による雑音の抽出と、前記雑音抑制部による雑音の信号成分の抑制は、前記車両状態検出部により検出された車速が所定の閾値より大きい場合に実行され、前記閾値以下の場合には実行されない、音源検出装置。 - 前記雑音抽出部による雑音の抽出と、前記雑音抑制部による雑音の信号成分の抑制は、交互に行われる、請求項１に記載の音源検出装置。
- 前記雑音抽出部による雑音の抽出と、前記雑音抑制部による雑音の信号成分の抑制は、並行して行われる、請求項１に記載の音源検出装置。
- 前記車両は、前記車両の周辺環境を検出する周辺環境検出部を備え、
前記雑音抽出部は、前記周辺環境検出部により検出された周辺環境中に雑音源があるときに、前記雑音源から発せられた雑音を抽出する、請求項１〜３のいずれか１項に記載の音源検出装置。 - 前記車両は、前記車両の周辺の固定音源を検出する固定音源検出部を備え、
前記雑音抽出部は、前記固定音源検出部により検出された固定音源から発せられた雑音を抽出する、請求項１〜４のいずれか１項に記載の音源検出装置。
Priority Applications (5)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2011205322A JP6001248B2 (ja) | 2011-09-20 | 2011-09-20 | 音源検出装置 |
| PCT/IB2012/001826 WO2013041942A1 (en) | 2011-09-20 | 2012-09-19 | Sound source detecting system and sound source detecting method |
| CN201280045689.9A CN103930791B (zh) | 2011-09-20 | 2012-09-19 | 声源检测系统和声源检测方法 |
| US14/346,060 US9299334B2 (en) | 2011-09-20 | 2012-09-19 | Sound source detecting system and sound source detecting method |
| EP12788633.1A EP2758794B1 (en) | 2011-09-20 | 2012-09-19 | Sound source detecting system and sound source detecting method |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2011205322A JP6001248B2 (ja) | 2011-09-20 | 2011-09-20 | 音源検出装置 |
Publications (3)
| Publication Number | Publication Date |
|---|---|
| JP2013068434A JP2013068434A (ja) | 2013-04-18 |
| JP2013068434A5 JP2013068434A5 (ja) | 2014-11-06 |
| JP6001248B2 true JP6001248B2 (ja) | 2016-10-05 |
Family
ID=47216366
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2011205322A Expired - Fee Related JP6001248B2 (ja) | 2011-09-20 | 2011-09-20 | 音源検出装置 |
Country Status (5)
| Country | Link |
|---|---|
| US (1) | US9299334B2 (ja) |
| EP (1) | EP2758794B1 (ja) |
| JP (1) | JP6001248B2 (ja) |
| CN (1) | CN103930791B (ja) |
| WO (1) | WO2013041942A1 (ja) |
Families Citing this family (28)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP5516455B2 (ja) * | 2011-02-23 | 2014-06-11 | トヨタ自動車株式会社 | 接近車両検出装置及び接近車両検出方法 |
| JP6001248B2 (ja) * | 2011-09-20 | 2016-10-05 | トヨタ自動車株式会社 | 音源検出装置 |
| EP2858059B1 (en) * | 2012-05-25 | 2023-09-13 | Toyota Jidosha Kabushiki Kaisha | Approaching vehicle detection apparatus, and drive assist system |
| GB2514184B (en) | 2013-05-17 | 2016-05-04 | Canon Kk | Method for determining a direction of at least one sound source from an array of microphones |
| US20160096475A1 (en) * | 2013-06-06 | 2016-04-07 | Douglas J. Wolfe | Light/audio component coordination |
| JP6146470B2 (ja) * | 2013-07-11 | 2017-06-14 | トヨタ自動車株式会社 | 物体検出装置及び物体検出方法 |
| US9663031B2 (en) * | 2013-10-21 | 2017-05-30 | Harman International Industries, Inc. | Modifying an audio panorama to indicate the presence of danger or other events of interest |
| JP6206271B2 (ja) * | 2014-03-17 | 2017-10-04 | 株式会社Ｊｖｃケンウッド | 雑音低減装置、雑音低減方法及び雑音低減プログラム |
| WO2016029469A1 (en) * | 2014-08-29 | 2016-03-03 | SZ DJI Technology Co., Ltd. | An unmanned aerial vehicle (uav) for collecting audio data |
| US10575117B2 (en) | 2014-12-08 | 2020-02-25 | Harman International Industries, Incorporated | Directional sound modification |
| JP6550930B2 (ja) * | 2015-05-29 | 2019-07-31 | 日本電気株式会社 | アクティブソーナー装置及びその信号処理方法 |
| KR101748497B1 (ko) * | 2015-11-11 | 2017-06-19 | 한동대학교 산학협력단 | 소리 정보에 이용하여 차량의 후방 좌우 옆 차선 영역을 감지하는 방법 및 이를 이용한 차량용 시스템 |
| US9996080B2 (en) * | 2016-02-26 | 2018-06-12 | Ford Global Technologies, Llc | Collision avoidance using auditory data |
| KR101759143B1 (ko) * | 2016-03-10 | 2017-07-18 | 현대자동차주식회사 | 음향 추적 정보 제공 방법, 차량용 음향 추적 장치, 및 이를 포함하는 차량 |
| KR101768145B1 (ko) * | 2016-04-21 | 2017-08-14 | 현대자동차주식회사 | 음향 추적 정보 제공 방법, 차량용 음향 추적 장치, 및 이를 포함하는 차량 |
| CN105798917B (zh) * | 2016-04-29 | 2019-02-15 | 深圳市神州云海智能科技有限公司 | 一种社区安全报警方法及巡逻机器人 |
| CN105979442B (zh) * | 2016-07-22 | 2019-12-03 | 北京地平线机器人技术研发有限公司 | 噪声抑制方法、装置和可移动设备 |
| US11346917B2 (en) * | 2016-08-23 | 2022-05-31 | Sony Corporation | Information processing apparatus and information processing method |
| CN106248196B (zh) * | 2016-08-31 | 2019-10-15 | 哈尔滨工业大学 | 一种微声探测分析装置及基于该装置的阵列音频信号处理方法 |
| JP6809936B2 (ja) * | 2017-02-28 | 2021-01-06 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカＰａｎａｓｏｎｉｃ Ｉｎｔｅｌｌｅｃｔｕａｌ Ｐｒｏｐｅｒｔｙ Ｃｏｒｐｏｒａｔｉｏｎ ｏｆ Ａｍｅｒｉｃａ | 雑音抽出装置およびマイクロホン装置 |
| CN106872945B (zh) * | 2017-04-19 | 2020-01-17 | 北京地平线信息技术有限公司 | 声源定位方法、装置和电子设备 |
| DE102017112761B3 (de) * | 2017-06-09 | 2018-09-20 | Ask Industries Gmbh | Verfahren zum Betrieb einer fahrzeugseitigen akustischen Signalerzeugungseinrichtung |
| US10170096B1 (en) * | 2017-11-01 | 2019-01-01 | GM Global Technology Operations LLC | Audio control systems and methods for mitigating structural noise borne from tires |
| JP7180447B2 (ja) * | 2019-02-26 | 2022-11-30 | 沖電気工業株式会社 | 方位推定装置、方位推定システム、方位推定方法およびプログラム |
| CN111833840B (zh) * | 2019-04-17 | 2024-06-11 | 北京地平线机器人技术研发有限公司 | 降噪方法和装置、系统、电子设备、存储介质 |
| US20220326332A1 (en) * | 2019-06-06 | 2022-10-13 | Nippon Telegraph And Telephone Corporation | Sound collecting apparatus, arrival direction estimating apparatus, and vibration information collecting apparatus |
| JP7531265B2 (ja) * | 2019-06-07 | 2024-08-09 | 本田技研工業株式会社 | 運転支援装置、運転支援方法および運転支援プログラム |
| CN113112845B (zh) * | 2021-04-07 | 2022-10-14 | 苏州鱼得水电气科技有限公司 | 一种双工通信中的干扰抑制系统及方法 |
Family Cites Families (25)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH0592767U (ja) | 1992-05-18 | 1993-12-17 | 株式会社豊田中央研究所 | 接近車両認識装置 |
| JP3535533B2 (ja) * | 1992-11-16 | 2004-06-07 | 本田技研工業株式会社 | 能動振動騒音制御装置 |
| JP2899205B2 (ja) * | 1994-03-16 | 1999-06-02 | 本田技研工業株式会社 | 車両用能動振動騒音制御装置 |
| JP3089958B2 (ja) * | 1994-12-06 | 2000-09-18 | 三菱自動車工業株式会社 | 電気自動車の制動制御装置 |
| US5778082A (en) * | 1996-06-14 | 1998-07-07 | Picturetel Corporation | Method and apparatus for localization of an acoustic source |
| JP2001056693A (ja) * | 1999-08-20 | 2001-02-27 | Matsushita Electric Ind Co Ltd | 騒音低減装置 |
| JP2002008189A (ja) * | 2000-06-22 | 2002-01-11 | Matsushita Electric Ind Co Ltd | 車両検出装置および車両検出方法 |
| JP4815661B2 (ja) * | 2000-08-24 | 2011-11-16 | ソニー株式会社 | 信号処理装置及び信号処理方法 |
| KR100418763B1 (ko) * | 2000-12-28 | 2004-02-18 | 현대자동차주식회사 | 노면경사 측정방법 및 이를 이용한 차량 속도 제어 시스템 |
| JP2002351488A (ja) * | 2001-05-28 | 2002-12-06 | Matsushita Electric Ind Co Ltd | ノイズキャンセル装置および車載システム |
| JP4455379B2 (ja) * | 2005-03-16 | 2010-04-21 | 本田技研工業株式会社 | 車両用アンダーステア抑制装置 |
| JP4091083B2 (ja) * | 2006-01-19 | 2008-05-28 | 横浜ゴム株式会社 | タイヤ内部故障検知装置およびタイヤ内部故障検知方法 |
| JP2007208828A (ja) * | 2006-02-03 | 2007-08-16 | Denso Corp | 車両用音声入出力制御装置 |
| US8104845B2 (en) * | 2006-03-10 | 2012-01-31 | Nissan Motor Co., Ltd. | Vehicle braking apparatus |
| EP2090895B1 (en) * | 2006-11-09 | 2011-01-05 | Panasonic Corporation | Sound source position detector |
| CN101193460B (zh) * | 2006-11-20 | 2011-09-28 | 松下电器产业株式会社 | 检测声音的装置及方法 |
| TW200922272A (en) * | 2007-11-06 | 2009-05-16 | High Tech Comp Corp | Automobile noise suppression system and method thereof |
| CN101431706A (zh) * | 2007-11-08 | 2009-05-13 | 宏达国际电子股份有限公司 | 车用噪声抑制系统及其方法 |
| JP5132376B2 (ja) * | 2008-03-19 | 2013-01-30 | アルパイン株式会社 | 音声改善装置および音声改善方法 |
| EP2312579A1 (en) * | 2009-10-15 | 2011-04-20 | Honda Research Institute Europe GmbH | Speech from noise separation with reference information |
| JP5593547B2 (ja) * | 2010-02-26 | 2014-09-24 | 日産自動車株式会社 | 波動源位置演算方法及び波動源位置演算装置 |
| US9460913B2 (en) * | 2010-12-27 | 2016-10-04 | Tokyo Electron Limited | Film-forming method for forming silicon oxide film on tungsten film or tungsten oxide film |
| US8737634B2 (en) * | 2011-03-18 | 2014-05-27 | The United States Of America As Represented By The Secretary Of The Navy | Wide area noise cancellation system and method |
| JP6001248B2 (ja) * | 2011-09-20 | 2016-10-05 | トヨタ自動車株式会社 | 音源検出装置 |
| DE112012007258T5 (de) * | 2012-12-26 | 2015-09-24 | Toyota Jidosha Kabushiki Kaisha | Schallerfassungsvorrichtung und Schallerfassungsverfahren |
-
2011
- 2011-09-20 JP JP2011205322A patent/JP6001248B2/ja not_active Expired - Fee Related
-
2012
- 2012-09-19 WO PCT/IB2012/001826 patent/WO2013041942A1/en active Application Filing
- 2012-09-19 US US14/346,060 patent/US9299334B2/en not_active Expired - Fee Related
- 2012-09-19 EP EP12788633.1A patent/EP2758794B1/en not_active Not-in-force
- 2012-09-19 CN CN201280045689.9A patent/CN103930791B/zh not_active Expired - Fee Related
Also Published As
| Publication number | Publication date |
|---|---|
| EP2758794B1 (en) | 2015-11-04 |
| EP2758794A1 (en) | 2014-07-30 |
| WO2013041942A1 (en) | 2013-03-28 |
| JP2013068434A (ja) | 2013-04-18 |
| CN103930791A (zh) | 2014-07-16 |
| US9299334B2 (en) | 2016-03-29 |
| CN103930791B (zh) | 2016-03-02 |
| US20140241532A1 (en) | 2014-08-28 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP6001248B2 (ja) | 音源検出装置 | |
| JP5423883B2 (ja) | 音源検出装置 | |
| JP5516455B2 (ja) | 接近車両検出装置及び接近車両検出方法 | |
| US20150117652A1 (en) | Sound source detection device, noise model generation device, noise reduction device, sound source direction estimation device, approaching vehicle detection device and noise reduction method | |
| US9103903B2 (en) | Approaching vehicle detecting system and approaching vehicle detecting method | |
| US9277339B2 (en) | Sound source detection apparatus | |
| JP2020509703A (ja) | 対象音を検出するためのシステムおよび方法 | |
| WO2014102938A1 (ja) | 音検知装置及び音検知方法 | |
| JP6146470B2 (ja) | 物体検出装置及び物体検出方法 | |
| EP3378706A1 (en) | Vehicular notification device and vehicular notification method | |
| JP5692006B2 (ja) | 音源推定装置、方法、プログラム、及び移動体 | |
| JP6599075B2 (ja) | 障害物検出装置 | |
| JP2013068424A (ja) | 音源検出装置 | |
| JP2018054580A (ja) | 検出装置、検出方法、および検出プログラム | |
| JP2017041752A (ja) | 車両用音響装置 | |
| JP5682524B2 (ja) | 音源検出装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20140922 |
|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20140922 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20150529 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20150602 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20150731 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20151110 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20160107 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20160209 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20160411 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20160809 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20160901 |
|
| R151 | Written notification of patent or utility model registration |
Ref document number: 6001248 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| LAPS | Cancellation because of no payment of annual fees |