JP6698029B2 - 屋内位置決めシステム - Google Patents

屋内位置決めシステム Download PDF

Info

Publication number
JP6698029B2
JP6698029B2 JP2016555495A JP2016555495A JP6698029B2 JP 6698029 B2 JP6698029 B2 JP 6698029B2 JP 2016555495 A JP2016555495 A JP 2016555495A JP 2016555495 A JP2016555495 A JP 2016555495A JP 6698029 B2 JP6698029 B2 JP 6698029B2
Authority
JP
Japan
Prior art keywords
mobile station
anchor
station
radio frequency
positioning system
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2016555495A
Other languages
English (en)
Other versions
JP2017511886A (ja
Inventor
バルトフ、アヴィシャイ
ズロトニック、ヨッシ
Original Assignee
ローズマウント インコーポレイテッド
ローズマウント インコーポレイテッド
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ローズマウント インコーポレイテッド, ローズマウント インコーポレイテッド filed Critical ローズマウント インコーポレイテッド
Publication of JP2017511886A publication Critical patent/JP2017511886A/ja
Application granted granted Critical
Publication of JP6698029B2 publication Critical patent/JP6698029B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S5/00Position-fixing by co-ordinating two or more direction or position line determinations; Position-fixing by co-ordinating two or more distance determinations
    • G01S5/02Position-fixing by co-ordinating two or more direction or position line determinations; Position-fixing by co-ordinating two or more distance determinations using radio waves
    • G01S5/0257Hybrid positioning
    • G01S5/0258Hybrid positioning by combining or switching between measurements derived from different systems
    • G01S5/02585Hybrid positioning by combining or switching between measurements derived from different systems at least one of the measurements being a non-radio measurement
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S11/00Systems for determining distance or velocity not using reflection or reradiation
    • G01S11/16Systems for determining distance or velocity not using reflection or reradiation using difference in transit time between electrical and acoustic signals
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S5/00Position-fixing by co-ordinating two or more direction or position line determinations; Position-fixing by co-ordinating two or more distance determinations
    • G01S5/18Position-fixing by co-ordinating two or more direction or position line determinations; Position-fixing by co-ordinating two or more distance determinations using ultrasonic, sonic, or infrasonic waves
    • G01S5/30Determining absolute distances from a plurality of spaced points of known location
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W56/00Synchronisation arrangements
    • H04W56/001Synchronization between nodes
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/20Instruments for performing navigational calculations
    • G01C21/206Instruments for performing navigational calculations specially adapted for indoor navigation

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Measurement Of Velocity Or Position Using Acoustic Or Ultrasonic Waves (AREA)
  • Position Fixing By Use Of Radio Waves (AREA)

Description

本発明は、位置決めシステムに関する。より具体的には、本発明は、特定区域における対象物の位置を認識したり、対象物を追跡したりするために使用されるシステムに関する。
屋内位置決めシステム(IPS: Indoor Posting System)は、ビル内あるいは密集した工業区域内の対象物や人の位置を無線で見つけ出すために使用されるデバイスネットワークである。全地球測位システム(GPS)は、4つ以上のGPS衛星に対して妨害のない視線が必要であり、屋内位置を確立するのに一般的に適さないので、特別な設計が必要になる。マイクロ波は、屋根、壁、およびその他の物体によって減衰され、散乱され、表面での多数の反射は、マルチパス伝播を引き起こして、コントロールできないエラーを与える。
飛行時間(ToF: Time of Flight)は、信号が送信機から受信機に伝播するのにかかる時間の量である。信号の伝播速度は、一定であり、信号の飛行時間を直接使用して距離を計算できることは知られている。多数のアンカーステーション(anchor station)に対する多数(GPSでは少なくとも4つの衛星)の測定値を組み合わせて三辺測量により位置を見つけ出すことができる。
光の速度は、3x10m/secであるので、無線周波数(RF)ベースのシステムでは、クロック同期における不正確さが位置決め誤差のキー要因となる。GPSにおいて、ToFは、複数のセンサに対する信頼性のある時間源を保持するために、複雑な同期化メカニズムが一般的に必要である。
さらに、ToFベースの手法の正確性は、屋内位置における広範なマルチパス状態によりしばしば損なわれ、それは、複数の物体からのRF信号の反射および回折により引き起こされる。
減衰および反射は、建築資材によって引き起こされるので、当該システムによってカバーされるべき何れの位置でも、少なくとも3つのアンカーポイントに対して妨害のない視線を有することが必要となる。その結果、より多数のアンカーステーションが必要となる。
屋内位置決めシステムは、複数のアンカーステーションを含み、それらの各々は、無線周波数信号と音響信号を送信するように構成される。モバイルステーションは、複数のアンカーステーションの内の少なくとも1つから無線周波数信号を受信するように構成された無線周波数受信機と複数のアンカーステーションの内の少なくとも1つから音響信号を受信するように構成された音響受信機を含む。処理ユニットは、受信された無線周波数信号と音響信号に基づいてモバイルユニットの位置情報を決定するように構成される。
以上の大略および要約は、1つの簡略化された形態における一概念を抜粋して紹介するために提供されたものであり、詳細な説明で以下にさらに記述される。以上の大略および要約は、請求される技術的事項のキーとなる特徴あるいは基本的特徴を定めることを意図するものでなく、請求される技術的事項の観点を決定する助けとして使用されることを意図するものでもない。
位置決定システムにおけるRFパルスを使用した時間同期化を示すグラフである。 ダイレクトエコーとマルチパス反射を示す距離(レンジ)対振幅のグラフである。 本開示の一実施形態に従う位置決定システムのブロック図である。 本開示の一実施形態に従うアンカーステーションのブロック図である。 本開示の一実施形態に従うモバイルステーションのブロック図である。 本開示の一実施形態に従う方法のフローチャートである。 本開示のもう一つの実施形態に従う方法のフローチャートである。
種々の観点において、開示の実施形態は、ハイブリッドRF/音響アプローチを用いることによって、屋内位置決めシステム(IPS)の課題に向けられている。ある1つの実施形態において、音響アプローチは、超音波のものである。これは、アドレッシング時間同期化(addressing time synchronization)およびマルチパス出現(multipath issues)を含む。より具体的には、電磁波は、10の係数だけ音より早い。超音波パルスのToFに比べてRFパルスのToFは無視できるので、RFパルスを同期化パルスとして使用できる。受信側では、マルチパスは、時間がシフトされた(すなわち、等価的には、距離がシフトされた)複数のパルス(パルス列)のコンボルーション(畳み込み)である。視線を想定して、受信機は、(最速の)最初のパルスでロックする。
パルスの距離分解能は、2つの連続するパルスを区別する受信機の能力を左右する。物理的構造の典型的な大きさは、要求される距離分解能を左右する。工業区域における通路に対して、要求される距離分解能は、1メートル未満となる。
要求される距離分解能を音響パルスによって達成することは、電磁波パルスより、かなり容易である。達成可能な距離分解能は、パルスの帯域および群速度によって制限される。無線HART(登録商標)のような無線工業ネットワークの典型的な帯域を持つRF信号では、距離分解能は、80メートルのオーダーである。音響を使用すると、1kHzの帯域を持つ超音波パルスの距離分解能は、50cm未満である。また、音響では、高性能パルス(advanced pulses)の生成およびサンプリングが、通常の低コストの電子技術で実現可能となる。
図1は、位置決定システムにおいてRFパルスと音響パルスを使用する時間同期化を示すグラフである。ある1つの実施形態において、音響パルスは、超音波パルスである。1つの送信機または複数の送信機(以下でさらに説明される)は、RFパルスと超音波パルスを同時に送信する。RFパルスと超音波パルス用の共通位置の受信機は、RFパルスに対しては3x10−8秒の時間で、また、超音波パルスに対しては3x10−2秒の時間で、RFと音響パルスを受信する。ある1つの実施形態において、受信時間における差が使用されて、共通位置の受信機からの送信機の距離が決定される。それについては、以下でさらに説明される。
図2は、受信された音響パルスのダイレクトエコーとマルチパス反射を示す距離(レンジ)対振幅のグラフである。音響パルスは、反射され、散乱され、あるいは、ある場合には完全にブロックされることがある。送信機のダイレクトな視線にある受信機は、まず、大部分のダイレクトパルスを受信する。反射されたパルスは、より遅れた時間に受信される。図2では、超音波マイクロフォンで受信された超音波信号の信号振幅のプロットが、さらに以下で説明される手法で決定された距離に対してプロットされている。最初のピークは200で示され、第2および第3のピークはそれぞれ、202,204で示されている。視線では、ピーク200は、送信機からマイクロフォンへのダイレクトパスの距離を示している。第2および第3のピークは、パルチパスピーク、すなわち、1つ以上の物体からの反射後に受信された信号を示しており、その信号は、飛行時間の増加、それ故、距離の増加によって表されている。送信機とマイクロフォンの間の視線では、最小の飛行時間が送信機とマイクロフォンの間のダイレクト一直線ラインの距離となるであろう。
ある特定の実施形態において、このシステムは、無線HART(登録商標)ネットワークのような商業的に有効性が判明している工業メッシュネットワークをベースとしている。図3では、それがブロック図の形態で示されている。
図3は、既知位置に配設された複数のアンカーステーション302(図3に示されている3つのアンカーステーション302A,302B,302C,以下でより詳細に説明される)と、決定されることが要求される位置310のモバイルステーション304(以下でより詳細に説明される)を有するシステム300を示している。アンカーステーション302は、無線HART(登録商標)ネットワークのような無線ネットワークメッシュ306の一形態部分にある。動作では、複数のアンカーステーション302は、監視される区域周囲の既知位置308A,308B,308Cに位置される。モバイルステーション304は、知ることが要求される位置の対象物の上、あるいは、それに密に近接して位置される。対象物は、在庫品の1つ、あるいは一人の人でよいが、それは例に過ぎず、限定されない。
アンカーステーション302からモバイルステーション304への距離を決定するために、アンカーステーション302は、RFメッセージ320(すなわち、無線HART(登録商標)メッセージ)と音響パルス330を、実質的に同じ時間に送信する。無線HART(登録商標)信号は、同期化を提供するための同期化情報を含み、また、当該技術分野で知られているように、データの伝送を提供する。この同期化およびデータ伝送の能力は、RFパルスがユニークな同期化パルスとして使用されることを可能にし、モバイルステーション303は、送信がなされた時に加えて、どのアンカーステーション302が送信しているかを知ることができる。モバイルステーション304でのRFパルスの受信と音響パルスの受信の時間差により、そのモバイルステーションと送信しているアンカーステーション302の間の距離を決定することができる。モバイルステーションの位置は、3つの別々のアンカーステーションからの距離計算を用いて、例えば、三辺測量を利用して決定することができる。
TDMAは、信号を複数のタイムスロットの中に分割することによって、ネットワーク上で周波数チャネルを共用(sharing)する既知標準である。ここで説明されたアンカーステーション302のような各ステーションは、周波数を共用し、その周波数は、パルスが伝送用の特定タイムスロットに割り当てられるようにして使用される。ある1つの実施形態において、セントラルステーション312は、1つ以上のモバイルステーション304から受信される、それ/それらの位置に関する情報を有し、決定された位置を使用して、TDMAのタイムスロッティング(slotting)を調整する。セントラルステーション312は、システム300で使用され、メッシュ306に結合されて1つ以上のモバイルステーション304から情報を受信する。アンカーステーション302に対するタイムスロットは、セントラルステーション312によって割り当てられる。CDMA技術、他の時間および/または周波数スロッティングあるいはシェアリング技術を含むどのような適当な通信技術が採用されてもよい。
ある1つの実施形態において、1つ以上のモバイルステーション304に対する位置情報が使用されて、種々のアンカーステーションに対するタイムスロットが調整される。例えば、モバイルステーションの位置310が、幾つかのアンカーステーション302に、他のアンカーステーションより近い時、より遠距離のアンカーステーション302に対するタイムスロットが広げられて、距離に起因する他のアンカーステーション302からのオーバーラップなしにパルス伝播および受信が可能にされる。ある1つの実施形態において、セントラルステーション312は、アンカーステーション302の各視線から各モバイルステーション304への距離を監視し、予期される伝播時間に応じてアンカーステーションに対するタイムスロットを調整し、アンカーステーション302間のクロストークを低減する。さらに、パルス符号化および拡散スペクトル技術を含む別々の周波数を使用して、近いアンカーステーション302間、あるいは他のアンカーステーション間のクロストークを低減してもよい。
アンカーシステムステーション302は、ネットワーク上に登録された全てのデバイスであり、したがって、各アンカー点302は、RF送信機402を持つ無線HART(登録商標)デバイスである。加えて、アンカーステーション302は、超音波送信機404およびあるグルー(glue)論理406を含む。
アンカーステーション302の詳細が図4に示されている。ある1つの実施形態において、各アンカーステーション302は、RF送信機(すなわち、無線HART(登録商標)))402、音響送信機404、RF送信機および音響送信機のような、より複雑な種々の論理回路間のインタフェースを可能とするグルー(glue)論理406、処理ユニット408、またはアンカーステーション302内のそのようなもの、およびクロック410を含む。ある1つの実施形態において、音響送信機404は、超音波送信機である。グルー(glue)論理は、当該技術で知られているので、詳細な説明を省略する。また、無線HART(登録商標)は、高速アドレス可能遠隔変換器(HART(登録商標))プロトコルをベースとした無線センサネットワーク用の既知標準である。ある1つの実施形態において、アンカーステーション302は、メッシュすなわちネットワーク603の部分、デバイスの部分であり、各アンカーステーション302は、無線メッシュネットワーク306上の無線HART(登録商標)デバイスである。ある1つの実施形態において、クロック410は、処理ユニット406に動作的に結合され、処理ユニット406が、RF信号320および音響信号330のような信号の伝送時間を決定可能にする。もう1つの実施形態において、クロック410は、処理ユニット406の一部であってもよい。
ある態様において、モバイルステーション304も、全方向性超音波マイクロフォン502、温度センサ504、小規模の処理ユニット506、およびRF受信機508を持つ無線HART(登録商標)デバイスである。
ある1つの実施形態において、モバイルステーション304は、全方向性マイクロフォン502、温度センサ504、処理ユニット506、RF受信機508、およびクロック510を含む。ある1つの実施形態において、マイクロフォン502は、超音波マイクロフォンであり、処理ユニット506に動作的に結合される。RF受信機508も処理ユニット506に動作的に結合される。温度センサ504は、モバイルステーション304の温度を検知するために用いられ、処理ユニット506に動作的に結合されて、処理ユニット506に温度情報を送出する。以下に詳細に説明されるように、処理ユニット506は、温度センサ504によって決定された温度を用いて音速を決定し、パルスの受信時間を決定された音速と一緒に用いて、アンカーステーション302とモバイルステーション304の間の距離を決定する。ある1つの実施形態において、クロック510は、処理ユニット506に動作的に結合され、処理ユニット506が、RF信号320および音響信号330のような信号の受信時間を決定できるようにする。もう1つの実施形態において、クロック510は、処理ユニット408の一部であってもよい。
アンカーステーション302は、RF(無線HART(登録商標))メッセージ320と超音波パルス330を同時に送信する。各アンカーステーション302は、予め定義されたタイムスロットで送信を行う。タイムスロットの配分は、近いアンカーステーション302間で超音波クロストークが生じないような方法でなされる。アンカーステーション302は、また、別々の周波数スロットとパルス符号化を使用して、近いアンカーステーション302間でクロストークが生じないようにしてもよい。
モバイルステーション304は、RFメッセージ320と超音波パルス330の受信時間を記録する。音速が既知(以下で説明されるように決定される)であれば、パルス受信の間の時間遅れは、モバイルステーション304とアンカーステーション302の間の距離を与える。
モバイルステーション304上の全方向性マイクロフォン502は、ダイレクトパスのパルスとマルチパスの1つまたは複数を示している1つ以上の音響パルス信号を受信する。RF受信機508は、RFパルスを受信する。RF信号は、音響パルスより多オーダーの大きさだけ早く(10倍のオーダーで早く)伝わるので、RFパルスは、音響パルスより前にモバイルステーションで受信される。この実施形態において、RFパルスは、アンカーステーションとモバイルステーションを同期化するために伝送される同期化パルスとして使用される。RFパルスは、パルスの飛行時間(ToF)の差異によって音響パルスから区別される。モバイルステーション上の温度センサ504は、温度を決定し、その温度を処理ユニット506に送出し、処理ユニット506は、既知の等式を用いて、温度センサ504によって決定された温度での音速を決定する。海面での比較的乾燥した空気に対して、温度に基づく音速(c)の1つの計算法は、下記の等式で示される。
ここで、cは、音速(m/s)であり、Tは、温度センサ504によって測定された温度(℃)である。空気は、ほぼ理想気体であるので、空気中での音速の測定値は、ほぼ完全に温度に依存する。ある1つの実施形態において、より正確な測定値が要求されるならば、種々のセンサによってさらなる変数、例えば、湿度および密度が測定され、それらがモバイルステーションで使用されてもよい。
RFパルス320がモバイルステーションのRF受信機508で受信されると、その受信時間が決定される。音響パルスがマイクロフォン502で受信されると、その受信時間が決定される。ある1つの実施形態では、モバイルステーション304でのRFパルス320の受信とモバイルステーション304での音響パルス330の受信の時間差が、温度を用いて決定された音速と一緒に使用されて、音響パルスによって伝播された距離が決定される。ある1つの実施形態での距離の測定は、計算であり、そこでの距離は、RFパルス320と音響パルス330の間の受信時間差が乗算された現在温度での音速に等しい。
距離を正確に決定するために、アンカーステーション302とモバイルステーション304の間の視線が必要である。アンカーステーション302とモバイルステーション304の間のダイレクトの視線がないと、飛行時間は、アンカーステーション302とモバイルステーション304の間の実際の距離を反映せず、その代わりにダイレクトでないパスに沿った飛行時間を反映するものとなる。そこで、適切な距離決定のために、アンカーステーション302とモバイルステーション304との間の視線が必要となる。
その配置を計算するため、モバイルステーション304は、少なくとも3つのアンカーステーション302に対する距離を測定する。3つのアンカーステーション302は、各アンカーステーション302の視線内にあるモバイルステーション304に対して、例えば三辺測量によって適当に位置決定できるが、区域内により多くのアンカー点302がある場合には、冗長性を使用して、測定のロバスト性を改善できる。図3にはアンカーステーション302(それぞれ302A,302B,302C)が示されているが、位置310決定の正確性を高めるため、そして、システム300によってカバーされる区域全体に対してより多くの潜在的な視線オプションを提供するために、区域を完全にカバーするように、追加のアンカーステーションが使用されてもよいことが理解されるべきである。また、1つのモバイルステーション304が示されているが、複数のモバイルステーション304が監視される区域内に配置されてもよく、システム300は、RFおよび音響信号を送信する同じ複数のアンカーステーション302を使用して、複数のモバイルステーション304の複数の位置310を決定してもよい。モバイルステーション304は、取得した情報を、ネットワーク306を介してセントラルステーション312に報告する。セントラルステーション312は、アルゴリズムを進行させて、モバイルステーション304の現在位置310に従ってTDMAタイムスロットを最適化することができ、それに応じてネットワークパラメータを変更できる。メッシュネットワークでは、アンカーステーション302の配置がネットワーク上に送信されるので、様々な実施形態において、アンカーステーション302、モバイルステーション304、またはセントラルステーション312は、モバイルステーション304の位置を決定できる。
ある状況において、モバイルステーションの位置は、3つより少ないアンカーステーションを使用して決定できる。そのような状況は、例えば、モバイルステーションが通路内または他の既知の限定区域に配置されているなどといった、モバイルステーションについての幾らかの既知の外部情報がある場合、あるいは、モバイルステーションに対する他の追跡情報が既知である場合を含むが、それに限定されない。そのような状況では、例えば、少ない1つのアンカーステーションで、位置を決定できる。
動作において、システム300は、以下のように作用する。アンカーステーション302のような複数のアンカーステーションは、監視されるべき区域全体が、少なくとも3つのアンカーステーションからの視線でカバーされるように、区域内の既知位置に配設される。モバイルステーション304のようなモバイルステーションは、監視および/または決定される必要がある品目または人の上に付与される。各アンカーステーションは、上述されたように、ある1つの実施形態では、セントラルステーション312のようなセントラルステーションによって割り当てられたTDMAタイムスロットの予め決められたタイムスロットでRFおよび音響パルスを送信する。モバイルステーション304は、上述されたように、RFおよび音響パルスを受信し、上述されたように、少なくとも3つのアンカーステーションからの距離を計算する。モバイルステーションのセントラルステーションは、上述したように、モバイルステーションの位置を決定できる。
既知位置の複数のアンカーステーションを用いてモバイルステーションの位置を決定する方法600の一実施形態が、図6のフローチャートの形態で示されている。ある1つの実施形態において、方法600は、ブロック602において、複数のアンカーステーションの1つから無線周波数パルスと音響パルスを同時に送信すること、ブロック604において、モバイルステーションで無線周波数パルスと音響パルスを受信すること、ブロック606において、モバイルステーションで無線周波数パルスと音響パルスの受信時間を決定すること、ブロック608において、モバイルステーションと複数のアンカーステーションの1つの間の距離を計算すること、を含む。複数のアンカーステーションの少なくとも3つの各々に対して、この処理が繰り返されて、モバイルステーションからアンカーステーションへの少なくとも3つの距離が決定され、そして、この少なくとも3つの距離は、モバイルステーションの位置を決定するために使用される。
モバイルステーションの位置を決定する方法700の、もう1つの実施形態が、図7のフローチャートの形態で示されている。ある1つの実施形態において、方法700は、ブロック702において、既知位置を持つ少なくとも3つのアンカーステーションの各々から同時に送信された無線周波数パルスと音響パルスの各々を受信すること、ブロック704において、少なくとも3つのアンカーステーションの各々に対して、モバイルステーションでの無線周波数パルスと音響パルスの受信時間を決定すること、ブロック706において、モバイルステーションと少なくとも3つのアンカーステーションの各々の間の距離を計算すること、ブロック708において、計算された少なくとも3つの距離を使用して、モバイルステーションの位置を決定すること、を含む。
方法600と700の各々において、モバイルステーションと送信しているアンカーステーションの間の距離を計算することは、ある1つの実施形態では、モバイルステーションで音速を決定すること、モバイルステーションで決定された音速に、モバイルステーションでの無線周波数パルスと音響パルスの受信の間の時間差を乗算すること、含む。モバイルステーションで音速を決定することは、ある1つの実施形態では、モバイルステーションで温度を決定すること、温度に基づいて音速を計算すること、を含む。モバイルステーションの位置を決定することは、ある1つの実施形態では、計算された少なくとも3つ距離および少なくとも3つのアンカーステーションの既知位置を使用して、三辺測量によってモバイルステーションの位置を見つけ出すこと、を含む。
種々の観点では以下を含む。
・超音波信号とRF信号の両者を組み合わせた屋内位置決めシステム
・超音波パルスのToF計測を同期化するためにRF信号を使用すること
・アンカーステーションデバイスが無線メッシュネットワークを通して交差接続された位置決めシステム
・モバイルデバイスが無線メッシュネットワークを通してアンカーステーションに接続された位置決めシステム
・セントラルステーションが、モバイルデバイスの現在位置に従ってTDMAタイムスロットを最適化し、それに従ってネットワークパラメータを変更することができるアルゴリズムを進行させる位置決めシステム
本発明は、好ましい実施形態を参照して記述されたが、当業者には、本発明の精神および見地から逸脱することなく、形状および詳細を変更してもよいことが認識されるであろう。屋内位置決めシステムが一般的に記述されたが、本発明は、屋外でも使用することができる。通信は、どのような標準に従ってもよく、メッシュネットワークタイプの通信システムに限定されない。ここで使用されたように、"音響(acoustic)"の用語は、超音波を含む如何なる周波数の音響信号を含む。同様に、"RF"の用語は、適当な如何なる波長の無線周波数に向けられたものとして解釈される。ここで使用されたように、"アンカー(anchor)"の用語は、位置が既知であり、位置を決定するのに参照位置として使用される基地送信機に向けられたものとして解釈される。"モバイルデバイス(mobile device)"の用語は、モバイルステーションのような、その位置が見分けられるデバイスに向けられたものとして解釈される。ここではマイクロフォンが示されたが、どのようなタイプの音響受信機が採用されてもよい。その音響受信機は、実際に無指向性のものでも指向性のものでもよい。指向性音響受信機が使用される場合、受信された音響信号の方向に関する情報を位置決定に使用できる。また、モバイルステーションは、1つ以上の音響受信機を含んでもよい。複数の音響受信機が単一のモバイルステーションに具備される場合、ある形態では、それらを使用して位置情報が提供される。例えば、2つの指向性音響受信機は、音響信号が受信された方向に関する情報を提供することができる。音響信号は、振幅または周波数パルスあるいは変化、デジタル情報などのような、あるタイプのタイミング情報を持った連続信号であってもよい。音響信号は、要求に従って、1以上の頻度で送信されてもよい。位置を決定するために用いられる処理ユニットは、モバイルステーション、1以上のアンカーステーション、セントラルステーション、またはある他の位置に存在してもよい。
300・・・位置決定システム、302,302A,302B,302C・・・アンカーステーション、304・・・モバイルステーション、306・・・無線ネットワークメッシュ、308A,308B,308C・・・監視される区域周囲の既知位置、312・・・セントラルステーション、320・・・RFメッセージ、330・・・音響パルス、402・・・RF送信機、404・・・音響送信機、406・・・グルー(glue)論理、408,506・・・処理ユニット、410,510・・・クロック、502・・・全方向性(超音波)マイクロフォン、504・・・温度センサ、508・・・RF受信機

Claims (24)

  1. 各々が、各々に対して割り当てられたTDMAタイムスロットの期間に無線周波数信号と音響信号を同時に送信するように構成された複数のアンカーステーションと、
    前記複数のアンカーステーションの内の少なくとも1つから前記無線周波数信号を受信するように構成された無線周波数受信機と前記複数のアンカーステーションの内の少なくとも1つから前記音響信号を受信するように構成された音響受信機を含む1つのモバイルステーションと、
    受信された無線周波数信号と受信された音響信号に基づいて前記モバイルステーションの位置情報を決定するように構成された処理ユニットと、
    を備え
    前記複数のアンカーステーションの各々に対するTDMAタイムスロットは、前記処理ユニットにより決定された位置情報により調整可能になっている屋内位置決めシステム。
  2. 前記複数のアンカーステーションの各々が、
    RF送信機と、
    音響送信機と、
    前記無線周波数信号および前記音響信号の伝送時間を決定可能にするアンカーステーション処理ユニットと、
    前記RF送信機と前記音響送信機と前記アンカーステーション処理ユニットに結合され、それらの間でのインタフェースを可能にするグルー・ロジック(glue logic)を備えた請求項1の屋内位置決めシステム。
  3. 前記音響送信機が、超音波送信機である請求項2の屋内位置決めシステム。
  4. 前記RF送信機が、無線メッシュ送信機である請求項2の屋内位置決めシステム。
  5. 前記モバイルステーションが、温度センサを含む請求項1の屋内位置決めシステム。
  6. 前記音響受信機が、マイクロフォンからなる請求項1の屋内位置決めシステム。
  7. さらに、前記複数のアンカーステーションから離れていて、前記複数のアンカーステーションと通信するように構成されたセントラルステーションを備えた請求項1の屋内位置決めシステム。
  8. 前記セントラルステーションは、前記複数のアンカーステーションによる伝送用にTDMAタイムスロットを割り当てるように構成されたセントラルステーション処理ユニットをさらに備え、各TDMAタイムスロットは、1つのアンカーステーションからの1つの無線周波数信号および1つの音響信号の伝送に対して割り当てられている請求項7の屋内位置決めシステム。
  9. 前記セントラルステーション処理ユニットは、決定された前記モバイルステーションの位置に基づいてメッシュネットワークのパラメータを変更するように、さらに構成された請求項8の屋内位置決めシステム。
  10. それぞれのアンカーステーションからの各無線周波数信号と音響信号は、決められたTDMAタイムスロット内で同期化されてそれぞれのアンカーステーションから送信され、前記モバイルステーションは、前記複数のアンカーステーションの内の少なくとも3つのアンカーステーションがそれ独自の同期化された所定のTDMAタイムスロット内で送信した無線周波数信号と音響信号を受信し、受信された信号と前記複数のアンカーステーションの内の前記少なくとも3つの既知位置に基づいて前記モバイルステーションの位置を計算するように構成された請求項1の屋内位置決めシステム。
  11. それぞれのアンカーステーションからの各無線周波数信号と音響信号は、所定のTDMAタイムスロット内で同期化されてそれぞれのアンカーステーションから送信され、前記モバイルステーションの位置について幾らかの情報が既知であり、前記モバイルステーションは、前記複数のアンカーステーションの内の少なくとも1つのアンカーステーションがそれ独自の同期化された所定のTDMAタイムスロット内で送信した無線周波数信号と音響信号を受信し、受信された信号と前記複数のアンカーステーションの内の前記少なくとも1つの既知位置と前記モバイルステーションの位置についての幾らかの既知の情報に基づいて前記モバイルステーションの位置を計算するように構成された請求項1の屋内位置決めシステム。
  12. 複数のモバイルステーションをさらに備え、各モバイルステーションは、前記複数のアンカーステーションの内の前記少なくとも1つから同時に送信された無線周波数信号と音響信号を受信するように構成された請求項1の屋内位置決めシステム。
  13. 前記処理ユニットが、前記複数のアンカーステーションの内の1つに配置された請求項1の屋内位置決めシステム。
  14. 前記処理ユニットが、前記モバイルステーションに配置された請求項1の屋内位置決めシステム。
  15. 前記処理ユニットが、セントラルステーションに配置された請求項の屋内位置決めシステム。
  16. 請求項1の屋内位置決めシステムを用いて位置を決定する方法であって、
    前記複数のアンカーステーションの内の1つから1つの無線周波数信号と1つの音響信号を同時に送信すること、
    前記無線周波数信号と前記音響信号をモバイルステーションで受信すること、
    前記無線周波数信号と前記音響信号の受信時間をモバイルステーションで決定すること、
    前記モバイルステーションと前記複数のアンカーステーションの内の前記1つの間の距離を計算すること、
    を有する方法。
  17. 前記モバイルステーションと前記複数のアンカーステーションの内の前記1つの間の距離を計算することは、
    音速を前記モバイルステーションで決定すること、
    前記モバイルステーションでの音速に、前記モバイルステーションでの前記無線周波数信号と前記音響信号の受信時間差を乗算すること、
    を含む請求項16の方法。
  18. 音速を前記モバイルステーションで決定することは、空気中での温度を決定すること、前記温度に基づいて音速を計算すること、を含む請求項17の方法。
  19. 前記複数のアンカーステーションの内の少なくとも2つの追加的なアンカーステーションの各々の1つの無線周波数信号および1つの音響信号に対して、前記同時に送信すること、前記受信すること、前記決定すること、前記計算することを繰り返すこと、
    計算された距離に基づいて前記モバイルステーションの位置を決定すること、
    を含む請求項16の方法。
  20. 前記モバイルステーションの位置を決定することは、
    計算された少なくとも3つの距離と前記少なくとも3つのアンカーステーションの既知位置を用いて三辺測量により前記モバイルステーションを位置決めすること、
    を含む請求項19の方法。
  21. 請求項1の屋内位置決めシステムを用いて位置を決定する方法であって、
    既知位置を持つ少なくとも3つのアンカーステーションの各々から同時に送信された無線周波数信号と音響信号の各々を、それ独自の同期化された所定のTDMAタイムスロット内で受信すること、
    前記少なくとも3つのアンカーステーションの各々に対する前記無線周波数信号と前記音響信号の受信時間をモバイルステーションで決定すること、
    前記モバイルステーションと前記少なくとも3つのアンカーステーションの間の距離を計算すること、
    計算された前記少なくとも3つの距離を用いて前記モバイルステーションの位置を決定すること、を有する方法。
  22. 前記モバイルステーションと前記少なくとも3つのアンカーステーションの間の距離を計算することは、
    音速を前記モバイルステーションで決定すること、
    前記モバイルステーションでの音速に、前記モバイルステーションでの前記無線周波数信号と前記音響信号の受信時間差を乗算すること、
    を含む請求項21の方法。
  23. 音速を前記モバイルステーションで決定することは、
    空気中での温度を決定すること、前記温度に基づいて音速を計算すること、を含む請求項22の方法。
  24. 前記モバイルステーションの位置を決定することは、
    計算された少なくとも3つの距離と前記少なくとも3つのアンカーステーションの既知位置を用いて三辺測量により前記モバイルステーションを位置決めすること、
    を含む請求項21の方法。
JP2016555495A 2014-03-03 2015-02-26 屋内位置決めシステム Active JP6698029B2 (ja)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201461946987P 2014-03-03 2014-03-03
US61/946,987 2014-03-03
US14/493,730 US9557402B2 (en) 2014-03-03 2014-09-23 Indoor positioning system
US14/493,730 2014-09-23
PCT/US2015/017720 WO2015134269A2 (en) 2014-03-03 2015-02-26 Indoor positioning system

Publications (2)

Publication Number Publication Date
JP2017511886A JP2017511886A (ja) 2017-04-27
JP6698029B2 true JP6698029B2 (ja) 2020-05-27

Family

ID=54006676

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016555495A Active JP6698029B2 (ja) 2014-03-03 2015-02-26 屋内位置決めシステム

Country Status (5)

Country Link
US (1) US9557402B2 (ja)
EP (1) EP3114496B1 (ja)
JP (1) JP6698029B2 (ja)
CN (2) CN110187309A (ja)
WO (1) WO2015134269A2 (ja)

Families Citing this family (44)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10942250B2 (en) 2014-03-03 2021-03-09 Rosemount Inc. Positioning system
US11102746B2 (en) 2014-03-03 2021-08-24 Rosemount Inc. Positioning system
US20150358767A1 (en) * 2014-06-10 2015-12-10 Aliphcom Intelligent device connection for wireless media in an ad hoc acoustic network
KR102414522B1 (ko) * 2014-09-25 2022-06-30 삼성전자주식회사 무선 거리 측정 장치 및 방법
WO2017011672A1 (en) 2015-07-14 2017-01-19 Driving Management Systems, Inc. Detecting the location of a phone using rf wireless and ultrasonic signals
US20170039517A1 (en) * 2015-08-07 2017-02-09 The Weir Group Plc Presentation of real-time locations of parts in a manufacturing or service facility
KR101882845B1 (ko) * 2015-08-17 2018-07-30 울산대학교 산학협력단 위치측정 시스템
CN105203996A (zh) * 2015-09-16 2015-12-30 上海智臻智能网络科技股份有限公司 移动设备及其室内定位方法、系统及装置、锚节点
CN108352912B (zh) * 2015-11-09 2020-07-07 智加系统公司 用于使多个设备同步并且基于已同步设备确定定位的方法
CN105467993A (zh) * 2015-11-17 2016-04-06 西安科技大学 声音导引系统
KR102252251B1 (ko) * 2016-01-20 2021-05-14 제로키 인코포레이티드 거리측정 및 위치결정시스템과 이를 사용한 방법
US10416281B2 (en) 2016-02-29 2019-09-17 Mark Hopperton Regional positioning system
EP3455643A1 (en) * 2016-05-12 2019-03-20 Rosemount Inc. Positioning system
US10129698B2 (en) 2016-07-14 2018-11-13 United Parcel Service Of America, Inc. Internal location address and automatic routing of intra-facility movement
US10191147B2 (en) * 2016-08-05 2019-01-29 Microsoft Technology Licensing, Llc Ultrasound based configuration detection of a multipart electronic apparatus
CN106383334A (zh) * 2016-08-31 2017-02-08 广西科技大学 基于声波和无线定位的移动目标检测方法
CN106405502A (zh) * 2016-08-31 2017-02-15 广西科技大学 基于声波和无线定位的移动目标检测方法
CN106405492A (zh) * 2016-08-31 2017-02-15 广西科技大学 基于声波和无线定位的移动目标检测方法
US9980092B1 (en) 2017-01-31 2018-05-22 Here Global B.V. Supporting a surveillance of positions of devices
US20180252796A1 (en) * 2017-03-03 2018-09-06 Driving Management Systems, Inc. Sonar data communication and localization
CN108663658B (zh) * 2017-03-30 2020-11-03 北京京东尚科信息技术有限公司 用于终端的室内定位方法和装置
CN107024679B (zh) * 2017-05-15 2019-12-27 武汉星巡智能科技有限公司 无人飞行器室内定位计算方法及装置
CN107992035A (zh) * 2017-11-15 2018-05-04 西北工业大学 一种基于室内全局定位的多移动机器人编队控制方法
US10368216B2 (en) * 2017-12-29 2019-07-30 Sonitor Technologies As Location determination system having mesh infrastructure to reduce power consumption
CA3112570A1 (en) 2018-09-17 2020-03-26 Rosemount Inc. Location awareness system
US11089432B2 (en) * 2018-09-20 2021-08-10 Nec Corporation Tracking indoor objects from an unmanned aerial vehicle
EP3671254A1 (en) 2018-12-20 2020-06-24 HERE Global B.V. Service for real-time spoofing/jamming/meaconing warning
EP3672304A1 (en) 2018-12-20 2020-06-24 HERE Global B.V. Statistical analysis of mismatches for spoofing detection
EP3672185A1 (en) 2018-12-20 2020-06-24 HERE Global B.V. Identifying potentially manipulated radio signals and/or radio signal parameters
EP3672311A1 (en) 2018-12-20 2020-06-24 HERE Global B.V. Device-centric learning of manipulated positioning
EP3671252A1 (en) * 2018-12-20 2020-06-24 HERE Global B.V. Identifying potentially manipulated radio signals and/or radio signal parameters based on a first radio map information and a second radio map information
EP3672310A1 (en) 2018-12-20 2020-06-24 HERE Global B.V. Identifying potentially manipulated radio signals and/or radio signal parameters based on radio map information
EP3671253A1 (en) 2018-12-20 2020-06-24 HERE Global B.V. Crowd-sourcing of potentially manipulated radio signals and/or radio signal parameters
EP3672305B1 (en) 2018-12-20 2023-10-25 HERE Global B.V. Enabling flexible provision of signature data of position data representing an estimated position
US11719782B2 (en) * 2019-07-29 2023-08-08 Raytheon Company One-way time-of-flight localization using sonic and electromagnetic signals for mobile ad hoc networks
US10928483B1 (en) 2019-07-29 2021-02-23 Raytheon Company Localization using signals transmitted over different signal paths for mobile ad hoc networks
US20230199677A1 (en) * 2019-07-29 2023-06-22 Raytheon Company Localization using repeated transmissions of electromagnetic signals for mobile ad hoc networks
CN113411151B (zh) * 2019-11-18 2022-07-12 广东博智林机器人有限公司 一种超带宽定位系统
GB2597656A (en) * 2020-07-21 2022-02-09 Nokia Technologies Oy Apparatus, methods and computer programs for locating mobile devices
US20220082650A1 (en) * 2020-09-14 2022-03-17 Ajay R. Pillai Indoor location position system and method
US20220295483A1 (en) * 2021-03-12 2022-09-15 Apple Inc. Dynamic slot and anchor allocation
EP4084349A1 (de) * 2021-04-30 2022-11-02 Hahn-Schickard-Gesellschaft für angewandte Forschung e.V. Kombiniertes beamforming von elektromagnetischen und akustischen wellen
CN113532437B (zh) * 2021-07-15 2022-12-02 西安电子科技大学 基于多径利用的超宽带定位室内目标方法
AU2022408194A1 (en) * 2022-04-27 2023-11-16 China University Of Mining And Technology Time service and positioning network system for underground chain-shaped large space in coal mine

Family Cites Families (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS5917392B2 (ja) * 1979-03-28 1984-04-20 工業技術院長 走路上における移動体の位置計測方法
JPH05297117A (ja) * 1992-04-21 1993-11-12 Taitetsuku:Kk 位置検出表示システム
US5491670A (en) 1993-01-21 1996-02-13 Weber; T. Jerome System and method for sonic positioning
US6522890B2 (en) * 1995-12-22 2003-02-18 Cambridge Positioning Systems, Ltd. Location and tracking system
US6292106B1 (en) 1998-10-13 2001-09-18 Cubic Defense Systems, Inc. Acoustical system and method for simultaneously locating and tracking multiple personnel in rooms of a building
SE0001043D0 (sv) 2000-03-24 2000-03-24 Claes Norinder Lokalt positioneringssystem
US6937872B2 (en) * 2002-04-15 2005-08-30 Qualcomm Incorporated Methods and apparatuses for measuring frequencies of basestations in cellular networks using mobile GPS receivers
CN1841086B (zh) * 2005-03-29 2011-08-17 松下电器产业株式会社 定位系统和减少超声信号冲突的方法
MX2007015979A (es) * 2006-03-31 2009-04-07 Nielsen Media Res Inc Metodos, sistemas y aparato para medicion de multiples fines.
ITRM20060638A1 (it) 2006-11-30 2008-06-01 Cardinale Ciccotti Giuseppe Metodo per la localizzazione di dispositivi remoti utilizzante onde acustiche ed elettromagnetiche
CN100507600C (zh) * 2006-12-01 2009-07-01 清华大学 一种跟踪多移动目标的室内精确定位方法
US8005486B2 (en) * 2007-01-22 2011-08-23 Worcester Polytechnic Institute Precise node localization in sensor ad-hoc networks
CN101498781A (zh) * 2008-01-29 2009-08-05 日电(中国)有限公司 独立定位器以及自治超声波定位系统和方法
CN101526601B (zh) * 2008-03-04 2013-02-13 日电(中国)有限公司 采取toa与rss融合方式的自适应定位方法、设备和系统
CN101592727B (zh) * 2008-05-29 2013-05-01 日电(中国)有限公司 自治超声波室内定位系统、装置和方法
CN101726738B (zh) * 2008-10-30 2012-12-26 日电(中国)有限公司 多目标定位系统以及基于功率控制的多路访问控制方法
US20100135178A1 (en) * 2008-11-21 2010-06-03 Qualcomm Incorporated Wireless position determination using adjusted round trip time measurements
GB0900929D0 (en) * 2009-01-20 2009-03-04 Sonitor Technologies As Acoustic position-determination system
JP5555768B2 (ja) 2009-05-15 2014-07-23 フィッシャー−ローズマウント システムズ,インコーポレイテッド 無線フィールド機器の改善された検出および配置の方法
US10331166B2 (en) * 2009-10-07 2019-06-25 Elliptic Laboratories As User interfaces
US8811199B2 (en) * 2009-11-06 2014-08-19 Rosemount Inc. Location detection in a wireless network
US9091746B2 (en) * 2010-07-01 2015-07-28 Qualcomm Incorporated Determination of positions of wireless transceivers to be added to a wireless communication network
US10268180B2 (en) 2010-07-28 2019-04-23 Fisher-Rosemount Systems, Inc. Handheld field maintenance tool with simulation of field device for instruction or qualification
US9538493B2 (en) * 2010-08-23 2017-01-03 Finetrak, Llc Locating a mobile station and applications therefor
JP5929393B2 (ja) * 2012-03-22 2016-06-08 富士通株式会社 位置推定方法、装置及びプログラム
WO2013181247A1 (en) * 2012-05-29 2013-12-05 Corning Cable Systems Llc Ultrasound-based localization of client devices with inertial navigation supplement in distributed communication systems and related devices and methods
EP2909647A2 (en) * 2012-10-19 2015-08-26 UCL Business Plc. Apparatus and method for determining the location of a mobile device using multiple wireless access points
CN204439827U (zh) * 2014-03-03 2015-07-01 罗斯蒙特公司 室内定位系统

Also Published As

Publication number Publication date
EP3114496B1 (en) 2020-08-19
WO2015134269A2 (en) 2015-09-11
US9557402B2 (en) 2017-01-31
EP3114496A2 (en) 2017-01-11
US20150247916A1 (en) 2015-09-03
CN104898090A (zh) 2015-09-09
WO2015134269A3 (en) 2015-11-19
JP2017511886A (ja) 2017-04-27
CN110187309A (zh) 2019-08-30

Similar Documents

Publication Publication Date Title
JP6698029B2 (ja) 屋内位置決めシステム
US12000948B2 (en) Positioning system
US10649061B2 (en) Method and system for determining the position of a user device in relation to a vehicle
KR102253830B1 (ko) 위치 결정 시스템
Holm Ultrasound positioning based on time-of-flight and signal strength
US10736075B2 (en) Range-finding and object-positioning systems and methods using same
WO2017196583A2 (en) Positioning system
CN108449953B (zh) 用于登记装置位置的方法和装置
US11102746B2 (en) Positioning system
CN204439827U (zh) 室内定位系统
De Gante et al. A survey of hybrid schemes for location estimation in wireless sensor networks
KR20110012584A (ko) 초음파 기반 3차원 위치 추정 장치 및 방법
US10794987B2 (en) Hybrid IR-US RTLS system
KR100752580B1 (ko) 위치 추정 방법
Murakami et al. Smartphone localization using active-passive acoustic sensing
JP2007093313A (ja) 位置座標検知方法およびシステム装置
KR20170024323A (ko) 다변측정 감시시스템용 질문송신장치
KR20080113536A (ko) 위치 결정 시스템 및 방법
EP3583438A1 (en) Method and system for measuring distance using wave signals
JP2023510957A (ja) 尤度ベースの音響測位
US20180153411A1 (en) Hybrid IR-US RTLS System
KR101911503B1 (ko) 실내환경에서의 확률기반 근거리 무선 위치 측정 시스템 및 방법
WO2020141415A1 (en) Improved positioning system based on distributed transmission and reception of wi-fi signals
Heydariaan Efficient, Scalable, and Accurate Localization with Ultra-wideband Radios Through Concurrent Transmissions
JP2006170892A (ja) 位置計測システム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20160923

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20170726

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20170802

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20171016

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20180322

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180528

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20181017

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190204

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20190214

A912 Re-examination (zenchi) completed and case transferred to appeal board

Free format text: JAPANESE INTERMEDIATE CODE: A912

Effective date: 20190315

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200117

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20200427

R150 Certificate of patent or registration of utility model

Ref document number: 6698029

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250