JP6188105B2 - 信号源の位置及び速度を決定するシステム、方法、コンピュータプログラム、回避する方法、及び無人航空機 - Google Patents
信号源の位置及び速度を決定するシステム、方法、コンピュータプログラム、回避する方法、及び無人航空機 Download PDFInfo
- Publication number
- JP6188105B2 JP6188105B2 JP2016540520A JP2016540520A JP6188105B2 JP 6188105 B2 JP6188105 B2 JP 6188105B2 JP 2016540520 A JP2016540520 A JP 2016540520A JP 2016540520 A JP2016540520 A JP 2016540520A JP 6188105 B2 JP6188105 B2 JP 6188105B2
- Authority
- JP
- Japan
- Prior art keywords
- audio signals
- signal source
- signal
- determining
- analysis
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S5/00—Position-fixing by co-ordinating two or more direction or position line determinations; Position-fixing by co-ordinating two or more distance determinations
- G01S5/18—Position-fixing by co-ordinating two or more direction or position line determinations; Position-fixing by co-ordinating two or more distance determinations using ultrasonic, sonic, or infrasonic waves
- G01S5/28—Position-fixing by co-ordinating two or more direction or position line determinations; Position-fixing by co-ordinating two or more distance determinations using ultrasonic, sonic, or infrasonic waves by co-ordinating position lines of different shape, e.g. hyperbolic, circular, elliptical or radial
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S11/00—Systems for determining distance or velocity not using reflection or reradiation
- G01S11/14—Systems for determining distance or velocity not using reflection or reradiation using ultrasonic, sonic, or infrasonic waves
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R1/00—Details of transducers, loudspeakers or microphones
- H04R1/02—Casings; Cabinets ; Supports therefor; Mountings therein
- H04R1/04—Structural association of microphone with electric circuitry therefor
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R1/00—Details of transducers, loudspeakers or microphones
- H04R1/20—Arrangements for obtaining desired frequency or directional characteristics
- H04R1/32—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only
- H04R1/40—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers
- H04R1/406—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers microphones
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R3/00—Circuits for transducers, loudspeakers or microphones
- H04R3/005—Circuits for transducers, loudspeakers or microphones for combining the signals of two or more microphones
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R3/00—Circuits for transducers, loudspeakers or microphones
- H04R3/04—Circuits for transducers, loudspeakers or microphones for correcting frequency response
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S2205/00—Position-fixing by co-ordinating two or more direction or position line determinations; Position-fixing by co-ordinating two or more distance determinations
- G01S2205/01—Position-fixing by co-ordinating two or more direction or position line determinations; Position-fixing by co-ordinating two or more distance determinations specially adapted for specific applications
- G01S2205/03—Airborne
Landscapes
- Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Acoustics & Sound (AREA)
- Signal Processing (AREA)
- General Physics & Mathematics (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- Health & Medical Sciences (AREA)
- Otolaryngology (AREA)
- General Health & Medical Sciences (AREA)
- Measurement Of Velocity Or Position Using Acoustic Or Ultrasonic Waves (AREA)
- Circuit For Audible Band Transducer (AREA)
Description
[項目1]
対象の少なくとも一部に電力供給を行うために用いられるバッテリアセンブリを放電する方法であって、
上記対象への電力供給がオフにされたときを検出するステップと、
タイマにより、上記対象への上記電力供給がオフにされてから経過した時間長を検出するステップと、
上記時間長が時間長の閾値を超える場合に、上記バッテリアセンブリの制御された自己放電を開始するステップと、
を含む、方法。
[項目2]
上記速度変化を推定するステップは、ドップラー解析に基づく、項目1に記載の方法。
[項目3]
主マイクロフォンアレーから複数の音声信号の第1のセットを取得するステップをさらに含む、項目1または2に記載の方法。
[項目4]
副マイクロフォンから第1のノイズ音声信号を取得するステップをさらに備える、項目3に記載の方法。
[項目5]
上記第1のセットの各音声信号から上記ノイズ音声信号を除去するステップをさらに含む、項目4に記載の方法。
[項目6]
上記除去するステップに基づいて、複数の音声信号の第1の処理されたセットを生成するステップをさらに含む、項目5に記載の方法。
[項目7]
複数の音声信号の上記第1の処理されたセットに対して周波数推定を実行するステップをさらに含む、項目4から6のいずれか1項に記載の方法。
[項目8]
上記複数の音声信号の第1の処理されたセットに基づいて、第1の信号源の信号の方向を決定するステップをさらに含む、項目7に記載の方法。
[項目9]
上記除去するステップに基づいて、複数の音声信号の第2の処理されたセットを生成するステップをさらに含む、項目8に記載の方法。
[項目10]
複数の音声信号の上記第2の処理されたセットに対して周波数推定を実行するステップをさらに含む、項目9に記載の方法。
[項目11]
複数の音声信号の上記第2の処理されたセットに基づいて、第1の信号源の信号の方向を決定するステップをさらに含む、項目10に記載の方法。
[項目12]
上記信号源が検出位置に接近するかまたはこれから遠ざかるかを決定するステップをさらに含む、項目11に記載の方法。
[項目13]
上記信号源が検出位置に接近するかまたはこれから遠ざかるかを決定するステップは、複数の音声信号の上記第1及び第2の処理されたセットのドップラー解析を実行することを含む、項目12に記載の方法。
[項目14]
上記ドップラー解析を実行する上記ステップと、複数の音声信号に対して上記方向解析を実行するステップと、上記複数の音声信号に対して上記周波数解析を実行する上記ステップとに基づいて、信号源の将来的な位置及び速度を予測するステップをさらに含む、項目1から13のいずれか1項に記載の方法。
[項目15]
項目1から14のいずれか1項に記載の方法によって決定された、信号源の決定された位置及び速度に基づいて、信号源が、移動プラットフォームの検出位置と衝突する進路上にあると決定するステップと、
上記移動プラットフォームの上記進路を変更することによって、上記信号源を回避するステップと、
を備える、信号源を回避する方法。
[項目16]
上記移動プラットフォームの上記進路を変更するステップは、上記信号源の決定された位置から反対方向に移動することを含む、項目15に記載の方法。
[項目17]
上記移動プラットフォームの上記進路を変更する上記ステップは、上記信号源の決定された位置から直交方向に移動することを含む、項目15に記載の方法。
[項目18]
上記移動プラットフォームの上記進路を変更するステップは、上記信号源の決定された位置の周囲を移動することを含む、項目15に記載の方法。
[項目19]
上記移動プラットフォームの上記進路を変更するステップは、移動を停止することと、定位置でホバリングすることとを含む、項目15に記載の方法。
[項目20]
上記移動プラットフォームは、航空機である、項目15から19のいずれか1項に記載の方法。
[項目21]
上記航空機は、無人航空機である、項目20に記載の方法。
[項目22]
信号源の位置及び速度を決定するためのコンピュータプログラム製品であって、1つまたは複数の機械可読記憶媒体上でエンコードされ、項目1から14のいずれか1項に記載の方法を実行するための命令を備える、コンピュータプログラム製品。
[項目23]
信号源を回避するためのコンピュータプログラム製品であって、1つまたは複数の機械可読記憶媒体上でエンコードされ、項目15から21のいずれか1項に記載の方法を実行するための命令を備える、コンピュータプログラム製品。
[項目24]
信号源の位置及び速度を決定する項目1から14のいずれか1項に記載の方法が、非一時的記憶媒体に格納された一連の命令として提供される、コンピュータプログラム製品。
[項目25]
信号源を回避する項目15から21のいずれか1項に記載の方法が、非一時的記憶媒体に格納された一連の命令として提供される、コンピュータプログラム製品。
[項目26]
物理的空間における信号源の位置及び速度を決定するためのコンピュータプログラム製品であって、非一時的機械可読記憶媒体上でエンコードされ、
複数の音声信号の第1のセットの複数の音声信号の各々からノイズ音声信号を除去することにより、複数の音声信号の第1の処理されたセットを生成するための命令と、
複数の音声信号の上記第1の処理されたセットに対して周波数推定を実行するための命令と、
複数の音声信号の上記第1の処理されたセットに基づいて、第1の信号源の信号の方向を決定するための命令と、
複数の音声信号の第2の処理されたセットを生成するための命令と、
複数の音声信号の上記第2の処理されたセットに対して周波数推定を実行するための命令と、
複数の音声信号の上記第2のセットに基づいて、第2の信号源の信号の方向を決定するための命令と、
複数の音声信号の上記第1及び第2の処理されたセットに対してドップラー解析を実行することにより、上記信号源が検出位置に接近するかまたはこれから遠ざかるかを決定するための命令と、
上記ドップラー解析、上記方向解析及び上記周波数解析に基づいて、信号源の位置及び速度を決定するための命令と、
を含む、コンピュータプログラム製品。
[項目27]
信号源の位置及び速度を決定するためのコンピュータプログラム製品であって、非一時的機械可読記憶媒体上でエンコードされ、
複数の音声信号の第1のセットに対して周波数推定を実行するための命令と、
複数の音声信号の第1のセットに基づいて、第1の信号源の信号の方向を決定するための命令と、
複数の音声信号の第2のセットに対して周波数推定を実行するための命令と、
複数の音声信号の上記第2のセットに基づいて、第2の信号源の信号の方向を決定するための命令と、
複数の音声信号の上記第1及び第2のセットのドップラー解析を実行することにより、上記信号源が検出位置に接近するかまたはこれから遠ざかるかを決定するための命令と、
上記ドップラー解析、上記方向解析及び上記周波数解析に基づいて、信号源の位置及び速度を決定するための命令と、
を含む、コンピュータプログラム製品。
[項目28]
複数の音声信号の第1のセットに対して周波数推定を実行するステップと、
複数の音声信号の上記第1のセットに基づいて、信号源の第1の信号の方向を決定するステップと、
複数の音声信号の第2のセットに対して周波数推定を実行するステップと、
複数の音声信号の上記第2のセットに基づいて、上記信号源の第2の信号の方向を決定するステップと、
複数の音声信号の上記第1及び第2のセットのドップラー解析を実行することによって、上記信号源が検出位置に接近するかまたはこれから遠ざかるかを決定するステップと、
上記ドップラー解析、方向解析及び強度解析に基づいて、信号源の位置及び速度を決定するステップと、
を含む、信号源の位置及び速度を決定する方法。
[項目29]
上記ドップラー解析、上記方向解析及び戦記強度解析に基づいて、信号源の将来的な位置及び速度を予測するステップをさらに含む、項目28に記載の方法。
[項目30]
信号源の位置及び速度を決定する項目28または29に記載の方法によって決定された、信号源の決定された位置及び速度に基づいて、信号源が、移動プラットフォーム上の検出位置と衝突する進路上にあると決定するステップと、
上記移動プラットフォームの上記進路を変更することによって、上記信号源を回避するステップと、
を備える、信号源を回避する方法。
[項目31]
上記移動プラットフォームは、航空機である、項目30に記載の方法。
[項目32]
上記航空機は、無人航空機である、項目31に記載の方法。
[項目33]
信号源の位置及び速度を決定するためのシステムであって、
複数の音声信号の第1のセットに対して周波数推定を実行するステップと、
複数の音声信号の上記第1のセットに基づいて、信号源の第1の信号の方向を決定するステップと、
複数の音声信号の第2のセットに対して周波数推定を実行するステップと、
複数の音声信号の上記第2のセットに基づいて、上記信号源の第2の信号の方向を決定するステップと、
を備える方法を実装するように構成される、システム。
[項目34]
信号源を回避するためのシステムであって、
複数の音声信号の第1のセットに対して周波数推定を実行するステップと、
複数の音声信号の上記第1のセットに基づいて、信号源の第1の信号の方向を決定するステップと、
複数の音声信号の第2のセットに対して周波数推定を実行するステップと、
複数の音声信号の上記第2のセットに基づいて、上記信号源の第2の信号の方向を決定するステップと、
複数の音声信号の上記第1及び第2のセットのドップラー解析を実行することによって、上記信号源が検出位置に接近するかまたはこれから遠ざかるかを決定するステップと、
上記ドップラー解析、方向解析及び強度解析に基づいて、信号源の位置及び速度を決定するステップと、
信号源の決定された位置及び速度に基づいて、信号源が、移動プラットフォーム上の検出位置と衝突する進路上にあると決定するステップと、
上記移動プラットフォームの上記進路を変更することによって、上記信号源を回避するステップと、
を備える方法を実装するように構成される、システム。
[項目35]
信号源の位置及び速度を決定するためのコンピュータプログラム製品であって、1つまたは複数の機械可読記憶媒体上でエンコードされ、項目28または29に記載の方法を実行するための命令を備える、コンピュータプログラム製品。
[項目36]
信号源を回避するためのコンピュータプログラム製品であって、1つまたは複数の機械可読記憶媒体上でエンコードされ、項目30から32のいずれか1項に記載の方法を実行するための命令を備える、コンピュータプログラム製品。
[項目37]
信号源の位置及び速度を決定する項目28から29のいずれか1項に記載の方法が、非一時的記憶媒体に格納された一連の命令として提供される、コンピュータプログラム製品。
[項目38]
信号源を回避する項目30から32のいずれか1項に記載の方法が、非一時的記憶媒体に格納された一連の命令として提供される、コンピュータプログラム製品。
[項目39]
第1の主マイクロフォンアレーと、
副マイクロフォンと、
複数の音声信号のドップラー解析、方向解析及び強度解析に基づいて、信号源の位置及び速度を決定するための処理装置と、
を備える、音声検知システム。
[項目40]
筐体と、
上記筐体上に位置し、複数のマイクロフォンを含む第1の主マイクロフォンアレーと、
上記筐体上に位置する第1の副マイクロフォンであって、上記第1の主マイクロフォンアレーと動作可能に接続される、第1の副マイクロフォンと、
複数の音声信号の方向解析及び強度解析に基づいて、信号源の位置及び速度を決定するための処理デバイスと、
を備える、音声検知システム。
[項目41]
信号源の位置及び速度の上記決定は、ドップラー解析にさらに基づく、項目40に記載の音声検知システム。
[項目42]
上記第1の主マイクロフォンアレー及び第1の副マイクロフォンは、平行だが、上記筐体上の複数の異なる平面に位置する、項目40または41に記載の音声検知システム。
[項目43]
上記第1の主マイクロフォンアレーは、第1の方向を向き、上記第1の副マイクロフォンは、上記第1の方向と異なる第2の方向を向く、項目40から42のいずれか1項に記載の音声検知システム。
[項目44]
上記第1の方向は、上記第2の方向の反対である、項目43に記載の音声検知システム。
[項目45]
上記第1の方向は、上記第2の方向に実質的に直交する、項目43に記載の音声検知システム。
[項目46]
上記第1の主マイクロフォンアレーの上記複数のマイクロフォンは、複数の行及び列を有するマトリックス構成の基板に位置する、項目40から45のいずれか1項に記載の音声検知システム。
[項目47]
上記第1の主マイクロフォンアレーの上記複数のマイクロフォンは、実質的に同じ平面に位置する、項目40から46のいずれか1項に記載の音声検知システム。
[項目48]
上記筐体内に位置し、上記第1の主マイクロフォンアレー及び上記第1の副マイクロフォンと動作可能に接続されるプロセッサ及びメモリをさらに備える、項目40から47のいずれか1項に記載の音声検知システム。
[項目49]
上記筐体上に位置し、上記第1の主マイクロフォンアレー及び上記第1の副マイクロフォンと動作可能に接続される第2の主マイクロフォンアレーをさらに備える、項目40から48のいずれか1項に記載の音声検知システム。
[項目50]
上記筐体上に位置し、上記第1及び第2の主マイクロフォンアレー及び上記第1の副マイクロフォンと動作可能に接続される第2の副マイクロフォンをさらに備える、項目49に記載の音声検知システム。
[項目51]
上記第1の主マイクロフォンアレーは、第1の方向を向き、
上記第1の副マイクロフォンは、第2の方向を向き、
上記第2の主マイクロフォンアレーは、第3の方向を向き、
上記第2の副マイクロフォンは、第4の方向を向き、
上記第1、第2、第3及び第4の方向のうち少なくとも2つは、複数の異なる方向である、項目50に記載の音声検知システム。
[項目52]
上記第1の方向は、上記第2の方向と反対であり、上記第3の方向は、上記第4の方向と反対である、項目51に記載の音声検知システム。
[項目53]
上記第1の主マイクロフォンアレー及び第1の副マイクロフォンは、平行だが、上記筐体上の複数の異なる平面に位置し、
上記第2の主マイクロフォンアレー及び第2の副マイクロフォンは、平行だが、上記第1の主マイクロフォンアレー及び第1の副マイクロフォンの位置と実質的に直交する上記筐体上の複数の異なる平面に位置する、項目50に記載の音声検知システム。
[項目54]
上記第1の主マイクロフォンアレー及び第1の副マイクロフォンは、超音波を検出するように構成される、項目40から53のいずれか1項に記載の音声検知システム。
[項目55]
上記第1の主マイクロフォンアレー及び第1の副マイクロフォンは、亜音速音を検出するように構成される、項目40から54のいずれか1項に記載の音声検知システム。
[項目56]
上記処理デバイスは、複数の音声信号の上記第1のセットの複数の音声信号の各々から、上記第1の副マイクロフォンによって取得されたバックグラウンドノイズ音声信号を除去することにより、複数の音声信号の第1の処理されたセットを生成するようにさらに構成される、項目40から55のいずれか1項に記載の音声検知システム。
[項目57]
上記処理デバイスは、複数の音声信号の上記第1の処理されたセットに対して周波数推定を実行するようにさらに構成される、項目56のいずれかに記載の音声検知システム。
[項目58]
上記処理デバイスは、複数の音声信号の上記第1の処理されたセットに基づいて、信号源の信号の方向を決定するようにさらに構成される、項目57に記載の音声検知システム。
[項目59]
上記処理デバイスは、複数の音声信号の第2の処理されたセットを生成するようにさらに構成される、項目58に記載の音声検知システム。
[項目60]
上記処理デバイスは、複数の音声信号の上記第2の処理されたセットに対して周波数推定を実行するようにさらに構成される、項目59に記載の音声検知システム。
[項目61]
上記処理デバイスは、複数の音声信号の上記第2の処理されたセットに基づいて、上記信号源の第2の信号の方向を決定するようにさらに構成される、項目60に記載の音声検知システム。
[項目62]
上記処理デバイスは、上記信号源が検出位置に接近するかまたはこれから遠ざかるかを決定するようにさらに構成される、項目61のいずれか1項に記載の音声検知システム。
[項目63]
上記処理デバイスは、複数の音声信号の上記ドップラー解析、上記方向解析及び上記強度解析に基づいて、信号源の将来的な位置及び速度を予測するようにさらに構成される、項目62のいずれか1項に記載の音声検知システム。
[項目64]
筐体と、
上記筐体上に位置し、複数のマイクロフォンを備える第1の主マイクロフォンアレーと、
上記筐体上に位置する第1の副マイクロフォンであって、上記第1の主マイクロフォンアレーと動作可能に接続される、第1の副マイクロフォンと、
上記音声検知システムの複数の音声信号の方向解析及び強度解析に基づいて、信号源の位置及び速度を決定するための処理デバイスと、
を備える、移動プラットフォーム。
[項目65]
上記移動プラットフォームは、無人航空機である、項目64に記載の移動プラットフォーム。
Claims (30)
- 筐体と、前記筐体に回転可能に接続される複数のロータと、前記筐体の第1の面上に配置され、第1の方向を向く主マイクロフォンアレーと、前記筐体の前記第1の面とは異なる第2の面上に配置され、前記第1の方向とは異なる第2の方向を向く副マイクロフォンとを備える無人航空機(UAV)に対する信号源の位置及び速度を決定する方法であって、
前記主マイクロフォンアレーから複数の音声信号の第1のセットを取得するステップと、
前記副マイクロフォンから第1のノイズ音声信号を取得するステップと、
前記第1のセットの複数の音声信号から前記第1のノイズ音声信号を除去するステップと、
前記除去するステップに基づいて、前記複数の音声信号の第1の処理されたセットを生成するステップと、
前記第1の処理されたセットに含まれる複数の音声信号に対する方向解析を実行するステップと、
前記第1の処理されたセットに含まれる前記複数の音声信号に対して強度解析を実行するステップと、
前記方向解析及び前記強度解析に基づいて、信号源の位置及び速度を決定するステップと
を含む、方法。 - 前記方向解析を実行するステップ及び前記強度解析を実行するステップの少なくとも1つは、ドップラー解析に基づく、請求項1に記載の方法。
- 前記第2の方向は、第1の方向と反対の方向である、請求項1または2に記載の方法。
- 前記第1の処理されたセットに含まれる前記複数の音声信号は、複数の周波数のピークを含む、請求項1から3のいずれか1項に記載の方法。
- 複数の音声信号の前記第1の処理されたセットに対して周波数推定を実行するステップをさらに含む、請求項1から4のいずれか1項に記載の方法。
- 前記複数の音声信号の第1の処理されたセットに基づいて、第1の信号源の信号の方向を決定するステップをさらに含む、請求項5に記載の方法。
- 前記除去するステップに基づいて、複数の音声信号の第2の処理されたセットを生成するステップをさらに含む、請求項6に記載の方法。
- 複数の音声信号の前記第2の処理されたセットに対して周波数推定を実行するステップをさらに含む、請求項7に記載の方法。
- 複数の音声信号の前記第2の処理されたセットに基づいて、第1の信号源の信号の方向を決定するステップをさらに含む、請求項8に記載の方法。
- 前記信号源が検出位置に接近するかまたはこれから遠ざかるかを決定するステップをさらに含む、請求項9に記載の方法。
- 前記信号源が検出位置に接近するかまたはこれから遠ざかるかを決定するステップは、複数の音声信号の前記第1の処理されたセット及び前記第2の処理されたセットのドップラー解析を実行することを含む、請求項10に記載の方法。
- ドップラー解析を実行する前記ステップと、複数の音声信号に対して前記方向解析を実行するステップと、前記複数の音声信号に対して周波数解析を実行する前記ステップとに基づいて、信号源の将来的な位置及び速度を予測するステップをさらに含む、請求項2に記載の方法。
- 請求項1から12のいずれか1項に記載の方法によって決定された、信号源の決定された位置及び速度に基づいて、信号源が、前記UAVの検出位置と衝突する進路上にあると決定するステップと、
前記UAVの前記進路を変更することによって、前記信号源を回避するステップと、
を備える、信号源を回避する方法。 - 前記UAVの前記進路を変更するステップは、前記信号源の決定された位置から反対方向または直交方向に移動することを含む、請求項13に記載の方法。
- 前記UAVの前記進路を変更するステップは、前記信号源の決定された位置の周囲を移動することを含む、請求項13または14に記載の方法。
- 前記UAVの前記進路を変更するステップは、移動を停止することと、定位置でホバリングすることとを含む、請求項13から15のいずれか1項に記載の方法。
- 信号源の位置及び速度を決定するためのコンピュータプログラムであって、請求項1から12のいずれか1項に記載の方法をコンピュータに実行させるためのコンピュータプログラム。
- 信号源を回避するためのコンピュータプログラムであって、請求項13から16のいずれか1項に記載の方法をコンピュータに実行させるためのコンピュータプログラム。
- 筐体と、前記筐体に回転可能に接続される複数のロータと、前記筐体の第1の面上に配置され、第1の方向を向く主マイクロフォンアレーと、前記筐体の前記第1の面とは異なる第2の面上に配置され、前記第1の方向とは異なる第2の方向を向く副マイクロフォンとを備える無人航空機(UAV)に対する信号源の位置及び速度を決定するためのコンピュータプログラムであって、
前記主マイクロフォンアレーから取得された複数の音声信号の第1のセットの複数の音声信号の各々から、前記副マイクロフォンから取得されたノイズ音声信号を除去することにより、複数の音声信号の第1の処理されたセットを生成することと、
複数の音声信号の前記第1の処理されたセットに対して周波数推定を実行することと、
複数の音声信号の前記第1の処理されたセットに基づいて、第1の信号源の信号の方向を決定することと、
前記主マイクロフォンアレーから取得された複数の音声信号の第2のセットの複数の音声信号の各々から、前記副マイクロフォンから取得されたノイズ音声信号を除去することにより、複数の音声信号の第2の処理されたセットを生成することと、
複数の音声信号の前記第2の処理されたセットに対して周波数推定を実行することと、
複数の音声信号の前記第2の処理されたセットに基づいて、第2の信号源の信号の方向を決定することと、
複数の音声信号の前記第1の処理されたセット及び前記第2の処理されたセットに対してドップラー解析を実行することにより、前記信号源が検出位置に接近するかまたはこれから遠ざかるかを決定することと、
前記ドップラー解析、方向解析及び周波数解析に基づいて、信号源の位置及び速度を決定することと、
をコンピュータに実行させるためのコンピュータプログラム。 - 筐体と、前記筐体に回転可能に接続される複数のロータと、前記筐体の第1の面上に配置され、第1の方向を向く主マイクロフォンアレーと、前記筐体の前記第1の面とは異なる第2の面上に配置され、前記第1の方向とは異なる第2の方向を向く副マイクロフォンとを備える無人航空機(UAV)に対する信号源の位置及び速度を決定する方法であって、
前記主マイクロフォンアレーから取得された複数の音声信号の第1のセットの複数の音声信号の各々から、前記副マイクロフォンから取得されたノイズ音声信号を除去することにより、複数の音声信号の第1の処理されたセットを生成するステップと、
複数の音声信号の第1の処理されたセットに対して周波数推定を実行するステップと、
複数の音声信号の前記第1の処理されたセットに基づいて、信号源の第1の信号の方向を決定するステップと、
前記主マイクロフォンアレーから取得された前記主マイクロフォンアレーから取得された複数の音声信号の第2のセットの複数の音声信号の各々から、前記副マイクロフォンから取得されたノイズ音声信号を除去することにより、複数の音声信号の第2の処理されたセットを生成するステップと、
複数の音声信号の前記第2の処理されたセットに対して周波数推定を実行するステップと、
複数の音声信号の前記第2の処理されたセットに基づいて、前記信号源の第2の信号の方向を決定するステップと、
複数の音声信号の前記第1の処理されたセット及び前記第2の処理されたセットのドップラー解析を実行することによって、前記信号源が検出位置に接近するかまたはこれから遠ざかるかを決定するステップと、
前記ドップラー解析、方向解析及び強度解析に基づいて、信号源の位置及び速度を決定するステップと、
を含む、信号源の位置及び速度を決定する方法。 - 前記ドップラー解析、前記方向解析及び前記強度解析に基づいて、信号源の将来的な位置及び速度を予測するステップをさらに含む、請求項20に記載の方法。
- 信号源の位置及び速度を決定する請求項20または21に記載の方法によって決定された、信号源の決定された位置及び速度に基づいて、信号源が、前記UAV上の検出位置と衝突する進路上にあると決定するステップと、
前記UAVの前記進路を変更することによって、前記信号源を回避するステップと、
を備える、信号源を回避する方法。 - 筐体と、前記筐体に回転可能に接続される複数のロータと、前記筐体の第1の面上に配置され、第1の方向を向く主マイクロフォンアレーと、前記筐体の前記第1の面とは異なる第2の面上に配置され、前記第1の方向とは異なる第2の方向を向く副マイクロフォンとを備える無人航空機(UAV)に対する信号源の位置及び速度を決定するためのシステムであって、
前記主マイクロフォンアレーから取得された複数の音声信号の第1のセットの複数の音声信号の各々から、前記副マイクロフォンから取得されたノイズ音声信号を除去することにより、複数の音声信号の第1の処理されたセットを生成するステップと、
前記第1の処理されたセットに対して周波数推定を実行するステップと、
前記第1の処理されたセットに基づいて、信号源の第1の信号の方向を決定するステップと、
前記主マイクロフォンアレーから取得された複数の音声信号の第2のセットの複数の音声信号の各々から、前記副マイクロフォンから取得されたノイズ音声信号を除去することにより、複数の音声信号の第2の処理されたセットを生成するステップと、
複数の音声信号の前記第2の処理されたセットに対して周波数推定を実行するステップと、
複数の音声信号の前記第2の処理されたセットに基づいて、前記信号源の第2の信号の方向を決定するステップと、
を備える方法を実装するように構成される、システム。 - 筐体と、前記筐体に回転可能に接続される複数のロータと、前記筐体の第1の面上に配置され、第1の方向を向く主マイクロフォンアレーと、前記筐体の前記第1の面とは異なる第2の面上に配置され、前記第1の方向とは異なる第2の方向を向く副マイクロフォンとを備える無人航空機(UAV)に信号源を回避させるためのシステムであって、
前記主マイクロフォンアレーから取得された複数の音声信号の第1のセットの複数の音声信号の各々から、前記副マイクロフォンから取得されたノイズ音声信号を除去することにより、複数の音声信号の第1の処理されたセットを生成するステップと、
複数の音声信号の前記第1の処理されたセットに対して周波数推定を実行するステップと、
複数の音声信号の前記第1の処理されたセットに基づいて、信号源の第1の信号の方向を決定するステップと、
前記主マイクロフォンアレーから取得された複数の音声信号の第2のセットの複数の音声信号の各々から、前記副マイクロフォンから取得されたノイズ音声信号を除去することにより、複数の音声信号の第2の処理されたセットを生成するステップと、
複数の音声信号の第2の処理されたセットに対して周波数推定を実行するステップと、
複数の音声信号の前記第2の処理されたセットに基づいて、前記信号源の第2の信号の方向を決定するステップと、
複数の音声信号の前記第1の処理されたセット及び第2の処理されたセットのドップラー解析を実行することによって、前記信号源が検出位置に接近するかまたはこれから遠ざかるかを決定するステップと、
前記ドップラー解析、方向解析及び強度解析に基づいて、信号源の位置及び速度を決定するステップと、
信号源の決定された位置及び速度に基づいて、信号源が、前記UAV上の検出位置と衝突する進路上にあると決定するステップと、
前記UAVの前記進路を変更することによって、前記信号源を回避するステップと、
を備える方法を実装するように構成される、システム。 - 筐体と、前記筐体に回転可能に接続される複数のロータと、前記筐体の第1の面上に配置され、第1の方向を向く主マイクロフォンアレーと、前記筐体の前記第1の面とは異なる第2の面上に配置され、前記第1の方向とは異なる第2の方向を向く副マイクロフォンとを備える無人航空機(UAV)に対する信号源の位置及び速度を決定するシステムであって、
前記主マイクロフォンアレーから複数の音声信号の第1のセットを取得するステップと、
前記副マイクロフォンから第1のノイズ音声信号を取得するステップと、
前記第1のセットの複数の音声信号から前記第1のノイズ音声信号を除去するステップと、
前記除去するステップに基づいて、前記複数の音声信号の第1の処理されたセットを生成するステップと、
前記第1の処理されたセットに含まれる複数の音声信号に対する方向解析を実行するステップと、
前記第1の処理されたセットに含まれる前記複数の音声信号に対して強度解析を実行するステップと、
前記方向解析及び前記強度解析に基づいて、信号源の位置及び速度を決定するステップと
を備える方法を実装するように構成される、システム。 - 前記第2の方向は、第1の方向と反対の方向である、請求項23から25のいずれか1項に記載のシステム。
- 前記第1の処理されたセットに含まれる前記複数の音声信号は、複数の周波数のピークを含む、請求項23から26のいずれか1項に記載のシステム。
- 請求項23から27のいずれか1項に記載のシステムを備える無人航空機。
- 信号源の位置及び速度を決定するためのコンピュータプログラムであって、請求項20または21に記載の方法をコンピュータに実行させるコンピュータプログラム。
- 信号源を回避するためのコンピュータプログラムであって、請求項22に記載の方法をコンピュータに実行させるコンピュータプログラム。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/CN2015/072160 WO2016123746A1 (en) | 2015-02-03 | 2015-02-03 | System and method for detecting aerial vehicle position and velocity via sound |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2017515092A JP2017515092A (ja) | 2017-06-08 |
JP6188105B2 true JP6188105B2 (ja) | 2017-08-30 |
Family
ID=56563296
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016540520A Expired - Fee Related JP6188105B2 (ja) | 2015-02-03 | 2015-02-03 | 信号源の位置及び速度を決定するシステム、方法、コンピュータプログラム、回避する方法、及び無人航空機 |
Country Status (4)
Country | Link |
---|---|
US (1) | US10473752B2 (ja) |
JP (1) | JP6188105B2 (ja) |
CN (1) | CN107110963B (ja) |
WO (1) | WO2016123746A1 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20210019224A (ko) * | 2019-08-12 | 2021-02-22 | 김희경 | 편대 및 군집비행을 위한 충돌방지시스템을 적용한 드론 |
Families Citing this family (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9824589B1 (en) * | 2016-09-15 | 2017-11-21 | Ford Global Technologies, Llc | Vehicle collision risk detection |
CN106742000B (zh) * | 2017-03-13 | 2023-06-20 | 芜湖博高光电科技股份有限公司 | 一种无源定位寻的装置 |
CN106873626B (zh) * | 2017-03-31 | 2020-07-03 | 芜湖博高光电科技股份有限公司 | 一种无源定位寻的系统 |
CN106997205B (zh) * | 2017-04-27 | 2019-10-01 | 西南科技大学 | 一种用于移动机器人对目标定位和跟踪的系统及方法 |
GB2563935B (en) * | 2017-06-30 | 2022-04-13 | The Royal Veterinary College | Obstacle detection |
CN107677992B (zh) * | 2017-09-30 | 2021-06-22 | 深圳市沃特沃德股份有限公司 | 移动侦测方法、装置和监控设备 |
US11373542B2 (en) | 2018-01-29 | 2022-06-28 | Israel Aerospace Industries Ltd. | Proximity navigation of unmanned vehicles |
US10957209B2 (en) * | 2018-09-25 | 2021-03-23 | Intel Corporation | Methods and apparatus for preventing collisions between drones based on drone-to-drone acoustic communications |
US10761176B1 (en) * | 2018-10-16 | 2020-09-01 | Honeywell International Inc. | Systems and methods for distance independent differential signature detection |
US11754708B1 (en) * | 2018-12-10 | 2023-09-12 | Amazon Technologies, Inc. | Object detection using propeller noise |
US11594142B1 (en) * | 2018-12-12 | 2023-02-28 | Scientific Applications & Research Associates, Inc | Terrestrial acoustic sensor array |
DE102018222862A1 (de) * | 2018-12-21 | 2020-06-25 | Robert Bosch Gmbh | Verfahren und System zur Lokalisierung einer Akustikquelle relativ zu einem Fahrzeug |
US11714098B2 (en) | 2019-04-22 | 2023-08-01 | Rosemount Aerospace Inc. | Acoustic air data systems |
US11858625B1 (en) * | 2019-06-21 | 2024-01-02 | Amazon Technologies, Inc. | Object detection using propeller noise |
US11237241B2 (en) * | 2019-10-10 | 2022-02-01 | Uatc, Llc | Microphone array for sound source detection and location |
US20220011786A1 (en) * | 2019-12-31 | 2022-01-13 | Zipline International Inc. | Correlated motion and detection for aircraft |
JP7406655B2 (ja) * | 2019-12-31 | 2023-12-27 | ジップライン インターナショナル インク. | 航空機の音響ベースの検知及び回避 |
US11557213B1 (en) * | 2020-03-30 | 2023-01-17 | Amazon Technologies, Inc. | Air-traffic system |
Family Cites Families (34)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR900004373B1 (ko) * | 1986-11-28 | 1990-06-23 | 가부시끼 가이샤 오오젠 | 이동체의 이동속도 측정장치 |
JPH05142335A (ja) * | 1991-11-15 | 1993-06-08 | Nec Corp | ソーナー装置 |
JP2687083B2 (ja) * | 1992-10-20 | 1997-12-08 | トヨタ自動車株式会社 | ドップラ式対地車速検出装置 |
JPH0792264A (ja) * | 1993-09-24 | 1995-04-07 | Aisin Seiki Co Ltd | 車載用車速計測装置 |
JPH102748A (ja) | 1996-06-19 | 1998-01-06 | Matsushita Electric Ind Co Ltd | 自律航法装置 |
JPH1012748A (ja) * | 1996-06-21 | 1998-01-16 | Sony Corp | 半導体装置の製造方法 |
JP2001166025A (ja) * | 1999-12-14 | 2001-06-22 | Matsushita Electric Ind Co Ltd | 音源の方向推定方法および収音方法およびその装置 |
US20030006887A1 (en) * | 2001-07-03 | 2003-01-09 | Bruce Rossini | Self-contained back-up warning system |
US20050271221A1 (en) * | 2004-05-05 | 2005-12-08 | Southwest Research Institute | Airborne collection of acoustic data using an unmanned aerial vehicle |
US20160066087A1 (en) * | 2006-01-30 | 2016-03-03 | Ludger Solbach | Joint noise suppression and acoustic echo cancellation |
US20080150755A1 (en) * | 2006-11-15 | 2008-06-26 | Alice Jane Van Zandt | Emergency Vehicle Indicator |
US7606115B1 (en) | 2007-10-16 | 2009-10-20 | Scientific Applications & Research Associates, Inc. | Acoustic airspace collision detection system |
DK2065726T3 (da) * | 2007-11-13 | 2012-05-21 | Uni I Oslo | Ultralydszonelokaliseringssystem med høj kapacitet |
DE102008021701A1 (de) * | 2008-04-28 | 2009-10-29 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Verfahren und Vorrichtung zur Lokalisation mindestens eines Gegenstandes |
US8543265B2 (en) * | 2008-10-20 | 2013-09-24 | Honeywell International Inc. | Systems and methods for unmanned aerial vehicle navigation |
US8059489B1 (en) | 2009-04-17 | 2011-11-15 | The Boeing Company | Acoustic airport surveillance system |
US8718290B2 (en) * | 2010-01-26 | 2014-05-06 | Audience, Inc. | Adaptive noise reduction using level cues |
US9549252B2 (en) * | 2010-08-27 | 2017-01-17 | Nokia Technologies Oy | Microphone apparatus and method for removing unwanted sounds |
US9571925B1 (en) * | 2010-10-04 | 2017-02-14 | Nortek Security & Control Llc | Systems and methods of reducing acoustic noise |
KR101103794B1 (ko) * | 2010-10-29 | 2012-01-06 | 주식회사 마이티웍스 | 멀티 빔 음향시스템 |
WO2012098844A1 (ja) * | 2011-01-18 | 2012-07-26 | パナソニック株式会社 | 車両方向特定装置、車両方向特定方法、及びそのプログラム |
JP5516455B2 (ja) * | 2011-02-23 | 2014-06-11 | トヨタ自動車株式会社 | 接近車両検出装置及び接近車両検出方法 |
US9368028B2 (en) * | 2011-12-01 | 2016-06-14 | Microsoft Technology Licensing, Llc | Determining threats based on information from road-based devices in a transportation-related context |
US10107887B2 (en) * | 2012-04-13 | 2018-10-23 | Qualcomm Incorporated | Systems and methods for displaying a user interface |
CN102682765B (zh) * | 2012-04-27 | 2013-09-18 | 中咨泰克交通工程集团有限公司 | 高速公路音频车辆检测装置及其方法 |
US8774368B2 (en) * | 2012-06-08 | 2014-07-08 | Avaya Inc. | System and method to use enterprise communication systems to measure and control workplace noise |
JP5896854B2 (ja) * | 2012-07-26 | 2016-03-30 | 株式会社日立製作所 | 目標運動解析方法及び目標運動解析装置 |
CN102830243B (zh) * | 2012-08-31 | 2015-05-06 | 成都定为电子技术有限公司 | 一种运动球体旋转速度的测量方法与装置 |
US9301070B2 (en) * | 2013-03-11 | 2016-03-29 | Arris Enterprises, Inc. | Signature matching of corrupted audio signal |
KR102127640B1 (ko) * | 2013-03-28 | 2020-06-30 | 삼성전자주식회사 | 휴대 단말 및 보청기와 휴대 단말에서 음원의 위치를 제공하는 방법 |
US20150195644A1 (en) * | 2014-01-09 | 2015-07-09 | Microsoft Corporation | Structural element for sound field estimation and production |
CN104155644B (zh) * | 2014-08-20 | 2017-01-25 | 西安电子科技大学 | 一种基于声音传感器的测距方法及系统 |
JP6167425B2 (ja) * | 2014-08-29 | 2017-07-26 | エスゼット ディージェイアイ テクノロジー カンパニー リミテッドSz Dji Technology Co.,Ltd | 無人航空機、及び無人航空機を用いた音声データ収集方法 |
US9396632B2 (en) * | 2014-12-05 | 2016-07-19 | Elwha Llc | Detection and classification of abnormal sounds |
-
2015
- 2015-02-03 CN CN201580073011.5A patent/CN107110963B/zh not_active Expired - Fee Related
- 2015-02-03 WO PCT/CN2015/072160 patent/WO2016123746A1/en active Application Filing
- 2015-02-03 JP JP2016540520A patent/JP6188105B2/ja not_active Expired - Fee Related
-
2017
- 2017-04-19 US US15/490,939 patent/US10473752B2/en not_active Expired - Fee Related
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20210019224A (ko) * | 2019-08-12 | 2021-02-22 | 김희경 | 편대 및 군집비행을 위한 충돌방지시스템을 적용한 드론 |
KR102332110B1 (ko) * | 2019-08-12 | 2021-11-30 | 김희경 | 편대 및 군집비행을 위한 충돌방지시스템을 적용한 드론 |
Also Published As
Publication number | Publication date |
---|---|
CN107110963A (zh) | 2017-08-29 |
JP2017515092A (ja) | 2017-06-08 |
US10473752B2 (en) | 2019-11-12 |
CN107110963B (zh) | 2021-03-19 |
WO2016123746A1 (en) | 2016-08-11 |
US20170219686A1 (en) | 2017-08-03 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6188105B2 (ja) | 信号源の位置及び速度を決定するシステム、方法、コンピュータプログラム、回避する方法、及び無人航空機 | |
Basiri et al. | On-board relative bearing estimation for teams of drones using sound | |
JP6240995B2 (ja) | 移動体、音響源マップ作成システムおよび音響源マップ作成方法 | |
JP6247397B2 (ja) | 物体を検出するシステムおよび方法 | |
CN103797379A (zh) | 用于多方向测量的超声测量组件 | |
JP6330200B2 (ja) | 音源位置推定装置、移動体および移動体の制御方法 | |
CN105203999A (zh) | 旋翼飞行器预警装置及预警方法 | |
Viquerat et al. | Reactive collision avoidance for unmanned aerial vehicles using doppler radar | |
Ishiki et al. | Design model of microphone arrays for multirotor helicopters | |
JP6977448B2 (ja) | 機器制御装置、機器制御プログラム、機器制御方法、対話装置、及びコミュニケーションシステム | |
Wakabayashi et al. | Multiple sound source position estimation by drone audition based on data association between sound source localization and identification | |
Di Carlo et al. | Mirage: 2d source localization using microphone pair augmentation with echoes | |
JP2023508611A (ja) | 航空機の音響ベースの検知及び回避 | |
Garg et al. | Enabling self-defense in small drones | |
Washizaki et al. | Position estimation of sound source on ground by multirotor helicopter with microphone array | |
Guarato et al. | Ultrasonic sonar system for target localization with one emitter and four receivers: Ultrasonic 3D localization | |
US9612310B2 (en) | Method and apparatus for determining the direction of arrival of a sonic boom | |
Sasaki et al. | Online spatial sound perception using microphone array on mobile robot | |
Even et al. | Audio ray tracing for position estimation of entities in blind regions | |
Schymura et al. | Potential-field-based active exploration for acoustic simultaneous localization and mapping | |
Didkovskyi et al. | Simple acoustic array for small UAV detection | |
Wajid et al. | Support vector regression based direction of arrival estimation of an acoustic source | |
Kashyap et al. | Micro-Doppler signatures of underwater vehicles using acoustic radar | |
KR102191185B1 (ko) | 음향원형마이크로폰 배열안테나 빔형성에 의한 hmm 기반 불법드론 분류 및 위치 추적 방법 및 장치 | |
Sharma et al. | Acoustic Beamforming for Object-relative Distance Estimation and Control in Unmanned Air Vehicles using Propulsion System Noise |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A975 | Report on accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A971005 Effective date: 20170309 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20170321 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170616 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20170704 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20170727 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6188105 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |