JP6965253B2 - 視覚慣性オドメトリおよび衛星測位システムの基準フレームのアラインメント - Google Patents
視覚慣性オドメトリおよび衛星測位システムの基準フレームのアラインメント Download PDFInfo
- Publication number
- JP6965253B2 JP6965253B2 JP2018540043A JP2018540043A JP6965253B2 JP 6965253 B2 JP6965253 B2 JP 6965253B2 JP 2018540043 A JP2018540043 A JP 2018540043A JP 2018540043 A JP2018540043 A JP 2018540043A JP 6965253 B2 JP6965253 B2 JP 6965253B2
- Authority
- JP
- Japan
- Prior art keywords
- sps
- measurements
- vio
- reference frame
- mobile platform
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S19/00—Satellite radio beacon positioning systems; Determining position, velocity or attitude using signals transmitted by such systems
- G01S19/38—Determining a navigation solution using signals transmitted by a satellite radio beacon positioning system
- G01S19/39—Determining a navigation solution using signals transmitted by a satellite radio beacon positioning system the satellite radio beacon positioning system transmitting time-stamped messages, e.g. GPS [Global Positioning System], GLONASS [Global Orbiting Navigation Satellite System] or GALILEO
- G01S19/53—Determining attitude
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S19/00—Satellite radio beacon positioning systems; Determining position, velocity or attitude using signals transmitted by such systems
- G01S19/38—Determining a navigation solution using signals transmitted by a satellite radio beacon positioning system
- G01S19/39—Determining a navigation solution using signals transmitted by a satellite radio beacon positioning system the satellite radio beacon positioning system transmitting time-stamped messages, e.g. GPS [Global Positioning System], GLONASS [Global Orbiting Navigation Satellite System] or GALILEO
- G01S19/42—Determining position
- G01S19/45—Determining position by combining measurements of signals from the satellite radio beacon positioning system with a supplementary measurement
- G01S19/47—Determining position by combining measurements of signals from the satellite radio beacon positioning system with a supplementary measurement the supplementary measurement being an inertial measurement, e.g. tightly coupled inertial
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/10—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 by using measurements of speed or acceleration
- G01C21/12—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 by using measurements of speed or acceleration executed aboard the object being navigated; Dead reckoning
- G01C21/16—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 by using measurements of speed or acceleration executed aboard the object being navigated; Dead reckoning by integrating acceleration or speed, i.e. inertial navigation
- G01C21/165—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 by using measurements of speed or acceleration executed aboard the object being navigated; Dead reckoning by integrating acceleration or speed, i.e. inertial navigation combined with non-inertial navigation instruments
- G01C21/1656—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 by using measurements of speed or acceleration executed aboard the object being navigated; Dead reckoning by integrating acceleration or speed, i.e. inertial navigation combined with non-inertial navigation instruments with passive imaging devices, e.g. cameras
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S11/00—Systems for determining distance or velocity not using reflection or reradiation
- G01S11/12—Systems for determining distance or velocity not using reflection or reradiation using electromagnetic waves other than radio waves
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S19/00—Satellite radio beacon positioning systems; Determining position, velocity or attitude using signals transmitted by such systems
- G01S19/38—Determining a navigation solution using signals transmitted by a satellite radio beacon positioning system
- G01S19/39—Determining a navigation solution using signals transmitted by a satellite radio beacon positioning system the satellite radio beacon positioning system transmitting time-stamped messages, e.g. GPS [Global Positioning System], GLONASS [Global Orbiting Navigation Satellite System] or GALILEO
- G01S19/42—Determining position
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S19/00—Satellite radio beacon positioning systems; Determining position, velocity or attitude using signals transmitted by such systems
- G01S19/38—Determining a navigation solution using signals transmitted by a satellite radio beacon positioning system
- G01S19/39—Determining a navigation solution using signals transmitted by a satellite radio beacon positioning system the satellite radio beacon positioning system transmitting time-stamped messages, e.g. GPS [Global Positioning System], GLONASS [Global Orbiting Navigation Satellite System] or GALILEO
- G01S19/42—Determining position
- G01S19/48—Determining position by combining or switching between position solutions derived from the satellite radio beacon positioning system and position solutions derived from a further system
- G01S19/485—Determining position by combining or switching between position solutions derived from the satellite radio beacon positioning system and position solutions derived from a further system whereby the further system is an optical system or imaging system
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S19/00—Satellite radio beacon positioning systems; Determining position, velocity or attitude using signals transmitted by such systems
- G01S19/38—Determining a navigation solution using signals transmitted by a satellite radio beacon positioning system
- G01S19/39—Determining a navigation solution using signals transmitted by a satellite radio beacon positioning system the satellite radio beacon positioning system transmitting time-stamped messages, e.g. GPS [Global Positioning System], GLONASS [Global Orbiting Navigation Satellite System] or GALILEO
- G01S19/52—Determining velocity
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S5/00—Position-fixing by co-ordinating two or more direction or position line determinations; Position-fixing by co-ordinating two or more distance determinations
- G01S5/16—Position-fixing by co-ordinating two or more direction or position line determinations; Position-fixing by co-ordinating two or more distance determinations using electromagnetic waves other than radio waves
- G01S5/163—Determination of attitude
Landscapes
- Engineering & Computer Science (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Computer Networks & Wireless Communication (AREA)
- Electromagnetism (AREA)
- Automation & Control Theory (AREA)
- Position Fixing By Use Of Radio Waves (AREA)
- Navigation (AREA)
Description
以下に、本願出願の当初の特許請求の範囲に記載された発明を付記する。
[C1]
衛星測位システム(SPS)から、モバイルプラットフォームの複数のレンジレート測定値を取得することと、ここにおいて、前記複数のレンジレート測定値は、前記SPSのグローバル基準フレームに関するものである、
視覚慣性オドメトリ(VIO)システムから、前記モバイルプラットフォームの複数のVIO速度測定値を取得することと、ここにおいて、前記複数のVIO速度測定値は、前記VIOシステムのローカル基準フレームに関するものである、
前記複数のレンジレート測定値と前記複数のVIO速度測定値とに基づいて、前記グローバル基準フレームと前記ローカル基準フレームをアラインするために、少なくとも1つのオリエンテーションパラメータを決定することと
を備える方法。
[C2]
前記複数のレンジレート測定値に基づいて、前記モバイルプラットフォームの1つまたは複数のSPS速度測定値を決定すること、ここにおいて、前記少なくとも1つのオリエンテーションパラメータを決定することは、前記1つまたは複数のSPS速度測定値および前記複数のVIO速度測定値に基づく、
をさらに備える、[C1]に記載の方法。
[C3]
前記複数のレンジレート測定値は、前記モバイルプラットフォームのSPS速度を計算するために必要されるよりも少ない数のレンジレート測定値を備える、[C1]に記載の方法。
[C4]
前記SPSから、前記モバイルプラットフォームの前記複数のレンジレート測定値を取得することは、スライドする時間ウィンドウにわたって、前記複数のレンジレート測定値を取得することを備え、
前記VIOシステムから、前記複数のVIO速度測定値を取得することは、前記スライドする時間ウィンドウにわたって、前記VIO速度測定値を取得することを備え、前記方法は、前記スライドする時間ウィンドウを使用して、前記少なくとも1つのオリエンテーションパラメータを連続的に決定することをさらに備える、
[C1]に記載の方法。
[C5]
前記複数のレンジレート測定値の品質に基づいて、前記スライドする時間ウィンドウのサイズを調整することをさらに備える、[C4]に記載の方法。
[C6]
前記モバイルプラットフォームの移動の大きさに基づいて、前記複数のレンジレート測定値の前記品質を決定することをさらに備える、[C5]に記載の方法。
[C7]
前記複数のレンジレート測定値の品質に基づいて、前記複数のレンジレート測定値をフィルタにかけることをさらに備える、[C1]に記載の方法。
[C8]
前記複数のレンジレート測定値をフィルタにかけることは、1つまたは複数のレンジレート測定値の品質に基づいて、前記複数のレンジレート測定値から前記1つまたは複数のレンジレート測定値を破棄することを備える、[C7]に記載の方法。
[C9]
前記複数のレンジレート測定値をフィルタにかけることは、1つまたは複数のレンジレート測定値の品質に基づいて、前記複数のレンジレート測定値のうちの前記1つまたは複数のレンジレート測定値に重み付けすることを備える、[C7]に記載の方法。
[C10]
前記複数のレンジレート測定値から1つまたは複数の見通し外レンジレート測定値を破棄することをさらに備える、1]に記載の方法。
[C11]
前記グローバル基準フレームと前記ローカル基準フレームをアラインするために、前記少なくとも1つのオリエンテーションパラメータを決定することは、
前記ローカル基準フレームと前記グローバル基準フレームとの間の回転行列を決定することと、
前記回転行列に基づいて、前記VIO速度測定値を前記グローバル基準フレームに変換することと
を備える、[C1]に記載の方法。
[C12]
衛星測位システム(SPS)から、モバイルプラットフォームの複数のレンジレート測定値を取得するための手段と、ここにおいて、前記複数のレンジレート測定値は、前記SPSのグローバル基準フレームに関するものである、
視覚慣性オドメトリ(VIO)システムから、前記モバイルプラットフォームの複数のVIO速度測定値を取得するための手段と、ここにおいて、前記複数のVIO速度測定値は、前記VIOシステムのローカル基準フレームに関するものである、
前記複数のレンジレート測定値と前記複数のVIO速度測定値とに基づいて、前記グローバル基準フレームと前記ローカル基準フレームをアラインするために、少なくとも1つのオリエンテーションパラメータを決定するための手段と
を備える装置。
[C13]
前記複数のレンジレート測定値に基づいて、前記モバイルプラットフォームの1つまたは複数のSPS速度測定値を決定するための手段、ここにおいて、前記少なくとも1つのオリエンテーションパラメータを決定するための前記手段は、前記1つまたは複数のSPS速度測定値および前記複数のVIO速度測定値に基づく、
をさらに備える、[C12]に記載の装置。
[C14]
前記複数のレンジレート測定値は、前記モバイルプラットフォームのSPS速度を計算するために必要されるよりも少ない数のレンジレート測定値を備える、[C12]に記載の装置。
[C15]
前記SPSから、前記モバイルプラットフォームの前記複数のレンジレート測定値を取得するための前記手段は、スライドする時間ウィンドウにわたって、前記複数のレンジレート測定値を取得するための手段を備え、
前記VIOシステムから、前記複数のVIO速度測定値を取得するための前記手段は、前記スライドする時間ウィンドウにわたって、前記VIO速度測定値を取得するための手段を備え、前記装置は、前記スライドする時間ウィンドウを使用して、前記少なくとも1つのオリエンテーションパラメータを連続的に決定するための手段をさらに備える、
[C12]に記載の装置。
[C16]
前記複数のレンジレート測定値の品質に基づいて、前記スライドするウィンドウのサイズを調整するための手段をさらに備える、[C15]に記載の装置。
[C17]
前記グローバル基準フレームと前記ローカル基準フレームをアラインするために、前記少なくとも1つのオリエンテーションパラメータを決定するための前記手段は、
前記ローカル基準フレームと前記グローバル基準フレームとの間の回転行列を決定するための手段と、
前記回転行列に基づいて、前記VIO速度測定値を前記グローバル基準フレームに変換するための手段と
を備える、[C12]に記載の装置。
[C18]
少なくとも1つのプロセッサと、
前記少なくとも1つのプロセッサに結合された少なくとも1つのメモリと
を備える装置であって、前記少なくとも1つのプロセッサおよび前記少なくとも1つのメモリは、前記装置に、
衛星測位システム(SPS)から、モバイルプラットフォームの複数のレンジレート測定値を取得することと、ここにおいて、前記複数のレンジレート測定値は、前記SPSのグローバル基準フレームに関するものである、
視覚慣性オドメトリ(VIO)システムから、前記モバイルプラットフォームの複数のVIO速度測定値を取得することと、ここにおいて、前記複数のVIO速度測定値は、前記VIOシステムのローカル基準フレームに関するものである、
前記複数のレンジレート測定値と前記複数のVIO速度測定値とに基づいて、前記グローバル基準フレームと前記ローカル基準フレームをアラインするために、少なくとも1つのオリエンテーションパラメータを決定することと
を行うように指示するように構成される、
装置。
[C19]
前記少なくとも1つのプロセッサおよび前記少なくとも1つのメモリは、前記装置に、 前記複数のレンジレート測定値に基づいて、前記モバイルプラットフォームの1つまたは複数のSPS速度測定値を決定すること、ここにおいて、前記少なくとも1つのオリエンテーションパラメータを決定することは、前記1つまたは複数のSPS速度測定値および前記複数のVIO速度測定値に基づく、
を行うように指示するようにさらに構成される、[C18]に記載の装置。
[C20]
前記複数のレンジレート測定値は、前記モバイルプラットフォームのSPS速度を計算するために必要されるよりも少ない数のレンジレート測定値を備える、[C18]に記載の装置。
[C21]
前記少なくとも1つのプロセッサおよび前記少なくとも1つのメモリは、前記装置に、 スライドする時間ウィンドウにわたって、前記複数のレンジレート測定値を取得することと、
前記スライドする時間ウィンドウにわたって、前記VIO速度測定値を取得することと、
前記スライドする時間ウィンドウを使用して、前記少なくとも1つのオリエンテーションパラメータを連続的に決定することと
を行うように指示するようにさらに構成される、[C18]に記載の装置。
[C22]
前記少なくとも1つのプロセッサおよび前記少なくとも1つのメモリは、前記装置に、前記複数のレンジレート測定値の品質に基づいて、前記スライドするウィンドウのサイズを調整するように指示するようにさらに構成される、[C21]に記載の装置。
[C23]
前記少なくとも1つのプロセッサおよび前記少なくとも1つのメモリは、前記装置に、前記複数のレンジレート測定値の品質に基づいて、前記複数のレンジレート測定値をフィルタにかけるように指示するようにさらに構成される、[C18]に記載の装置。
[C24]
前記少なくとも1つのプロセッサおよび前記少なくとも1つのメモリは、前記装置に、 前記ローカル基準フレームと前記グローバル基準フレームとの間の回転行列を決定することと、
前記回転行列に基づいて、前記VIO速度測定値を前記グローバル基準フレームに変換することと
を行うように指示するようにさらに構成される、[C18]に記載の装置。
[C25]
コンピュータ実行可能命令を記録した非一時的なコンピュータ可読記憶媒体であって、ここにおいて、1つまたは複数のプロセッサ上で前記コンピュータ実行可能命令を実行することは、前記1つまたは複数のプロセッサに、
衛星測位システム(SPS)から、モバイルプラットフォームの複数のレンジレート測定値を取得することと、ここにおいて、前記複数のレンジレート測定値は、前記SPSのグローバル基準フレームに関するものである、
視覚慣性オドメトリ(VIO)システムから、前記モバイルプラットフォームの複数のVIO速度測定値を取得することと、ここにおいて、前記複数のVIO速度測定値は、前記VIOシステムのローカル基準フレームに関するものである、
前記複数のレンジレート測定値と前記複数のVIO速度測定値とに基づいて、前記グローバル基準フレームと前記ローカル基準フレームをアラインするために、少なくとも1つのオリエンテーションパラメータを決定することと
を行わせる、非一時的なコンピュータ可読記憶媒体。
[C26]
前記1つまたは複数のプロセッサ上で前記コンピュータ実行可能命令を実行することは、前記1つまたは複数のプロセッサに、
前記複数のレンジレート測定値に基づいて、前記モバイルプラットフォームの1つまたは複数のSPS速度測定値を決定すること、ここにおいて、前記少なくとも1つのオリエンテーションパラメータを決定することは、前記1つまたは複数のSPS速度測定値および前記複数のVIO速度測定値に基づく、
を行わせる、[C25]に記載の非一時的なコンピュータ可読記憶媒体。
[C27]
前記複数のレンジレート測定値は、前記モバイルプラットフォームのSPS速度を計算するために必要されるよりも少ない数のレンジレート測定値を備える、[C25]に記載の非一時的なコンピュータ可読記憶媒体。
[C28]
前記1つまたは複数のプロセッサ上で前記コンピュータ実行可能命令を実行することは、前記1つまたは複数のプロセッサに、
スライドする時間ウィンドウにわたって、前記複数のレンジレート測定値を取得することと、
前記スライドする時間ウィンドウにわたって、前記VIO速度測定値を取得することと、
前記スライドする時間ウィンドウを使用して、前記少なくとも1つのオリエンテーションパラメータを連続的に決定することと
を行わせる、[C25]に記載の非一時的なコンピュータ可読記憶媒体。
[C29]
前記1つまたは複数のプロセッサ上で前記コンピュータ実行可能命令を実行することは、前記1つまたは複数のプロセッサに、前記複数のレンジレート測定値の品質に基づいて、前記スライドするウィンドウのサイズを調整することを行わせる、[C28]に記載の非一時的なコンピュータ可読記憶媒体。
[C30]
前記1つまたは複数のプロセッサ上で前記コンピュータ実行可能命令を実行することは、前記1つまたは複数のプロセッサに、
前記ローカル基準フレームと前記グローバル基準フレームとの間の回転行列を決定することと、
前記回転行列に基づいて、前記VIO速度測定値を前記グローバル基準フレームに変換することと
を行わせる、[C25]に記載の非一時的なコンピュータ可読記憶媒体。
Claims (12)
- 1つの衛星測位システム(SPS)から、モバイルプラットフォームの複数のSPS測定値を取得すること、
ここにおいて、前記複数のSPS測定値は、前記SPSのグローバル基準フレームに関するものであり、前記グローバル基準フレームは、同じ衛星測位ネットワークを使用するシステムに共通し、
前記複数のSPS測定値の各々は、複数の時間エポックのうちのそれぞれの1つに対応し、
前記SPS測定値は、(i)前記モバイルプラットフォームの1つまたは複数のSPS速度測定値、または(ii)前記モバイルプラットフォームの複数のSPSレンジレート測定値のうちの少なくとも1つを含み、前記SPSレンジレート測定値の数は、それぞれの時間エポックのための前記モバイルプラットフォームのSPS速度を計算するために必要とされるものよりも少なく、前記モバイルプラットフォームの前記SPS速度は、前記レンジレート測定値に基づいて決定される、と、
視覚慣性オドメトリ(VIO)システムから、前記モバイルプラットフォームの複数のVIO速度測定値を取得すること、
ここにおいて、前記VIOシステムは、前記モバイルプラットフォームの相対的な位置、速度、加速度、および/またはオリエンテーションを推定するために、カメラによってキャプチャされる連続的な画像を利用し、
前記複数のVIO速度測定値は、前記カメラによって生成される画像に基づいて生成され、前記VIOシステムのローカル基準フレームに関するものであり、
前記ローカル基準フレームは、前記モバイルプラットフォームの位置および/またはオリエンテーションに依存して変化し、
前記複数のVIO速度測定値は、前記複数の時間エポックに対応する、と、
前記複数のSPS測定値および前記複数のVIO速度測定値のみに基づいて、前記グローバル基準フレームと前記ローカル基準フレームをアラインするために、前記複数の時間エポックのうちの前記少なくとも1つのための少なくとも1つのオリエンテーションパラメータを決定することと、
前記複数のVIO速度測定値と前記複数のSPS測定値との組み合わせに基づいて少なくとも1つの時間エポックのための前記モバイルプラットフォームの位置を決定することと
を備え、前記グローバル基準フレームと前記ローカル基準フレームをアラインするために、前記少なくとも1つのオリエンテーションパラメータを決定することは、
前記ローカル基準フレームと前記グローバル基準フレームとの間の回転行列を決定することと、
前記回転行列に基づいて、前記VIO速度測定値を前記グローバル基準フレームにオリエントすることと
を備える方法。 - 前記SPSから、前記モバイルプラットフォームの前記複数のSPS測定値を取得することは、スライドする時間ウィンドウにわたって、前記複数のSPS測定値を取得することを備え、
前記VIOシステムから、前記複数のVIO速度測定値を取得することは、前記スライドする時間ウィンドウにわたって、前記VIO速度測定値を取得することを備え、
前記方法は、前記スライドする時間ウィンドウを使用して、前記少なくとも1つのオリエンテーションパラメータを連続的に決定することをさらに備える、
請求項1に記載の方法。 - 前記複数のSPSレンジレート測定値の品質に基づいて、前記スライドする時間ウィンドウのサイズを調整することをさらに備える、請求項2に記載の方法。
- 前記モバイルプラットフォームの移動の大きさに基づいて、前記複数のSPSレンジレート測定値の前記品質を決定することをさらに備える、請求項3に記載の方法。
- 前記複数のSPSレンジレート測定値の品質に基づいて、前記複数のSPSレンジレート測定値をフィルタにかけることをさらに備える、請求項1に記載の方法。
- 前記複数のSPSレンジレート測定値をフィルタにかけることは、1つまたは複数のSPSレンジレート測定値の品質に基づいて、前記複数のSPSレンジレート測定値から前記1つまたは複数のSPSレンジレート測定値を破棄することを備える、請求項5に記載の方法。
- 前記複数のSPSレンジレート測定値をフィルタにかけることは、1つまたは複数のSPSレンジレート測定値の品質に基づいて、前記複数のSPSレンジレート測定値のうちの前記1つまたは複数のSPSレンジレート測定値に重み付けすることを備える、請求項5に記載の方法。
- 前記複数のSPSレンジレート測定値から1つまたは複数の見通し外SPSレンジレート測定値を破棄することをさらに備える、請求項1に記載の方法。
- 1つの衛星測位システム(SPS)から、モバイルプラットフォームの複数のSPS測定値を取得するための手段、ここにおいて、前記複数のSPS測定値は、前記SPSのグローバル基準フレームに関するものであり、前記グローバル基準フレームは、同じ衛星測位ネットワークを使用するシステムに共通し、前記複数のSPS測定値の各々は、複数の時間エポックのうちのそれぞれの1つに対応し、前記SPS測定値は、(i)前記モバイルプラットフォームの1つまたは複数のSPS速度測定値、または(ii)前記モバイルプラットフォームの複数のSPSレンジレート測定値のうちの少なくとも1つを含み、前記SPSレンジレート測定値の数は、それぞれの時間エポックのための前記モバイルプラットフォームのSPS速度を計算するために必要とされるものよりも少なく、前記モバイルプラットフォームの前記SPS速度は、前記レンジレート測定値に基づいて決定されると、
視覚慣性オドメトリ(VIO)システムから、前記モバイルプラットフォームの複数のVIO速度測定値を取得するための手段、ここにおいて、前記VIOシステムは、前記モバイルプラットフォームの相対的な位置、速度、加速度、および/またはオリエンテーションを推定するために、カメラによってキャプチャされる連続的な画像を利用し、前記複数のVIO速度測定値は、前記カメラによって生成される画像に基づいて生成され、前記VIOシステムのローカル基準フレームに関するものであり、前記ローカル基準フレームは、前記モバイルプラットフォームの位置および/またはオリエンテーションに依存して変化し、前記複数のVIO速度測定値は、複数の時間エポックに対応する、と、
前記複数のSPS測定値および前記複数のVIO速度測定値のみに基づいて、前記グローバル基準フレームと前記ローカル基準フレームをアラインするために、前記複数の時間エポックのうちの少なくとも1つのための少なくとも1つのオリエンテーションパラメータを決定するための手段と、
前記複数のVIO速度測定値と前記複数のSPS測定値との組み合わせに基づいて前記少なくとも1つの時間エポックのための前記モバイルプラットフォームの位置を決定するための手段と
を備え、前記グローバル基準フレームと前記ローカル基準フレームをアラインするために、前記少なくとも1つのオリエンテーションパラメータを決定するための前記手段は、
前記ローカル基準フレームと前記グローバル基準フレームとの間の回転行列を決定するための手段と、
前記回転行列に基づいて、前記VIO速度測定値を前記グローバル基準フレームにオリエントするための手段と
を備える装置。 - 前記SPSから、前記モバイルプラットフォームの前記複数のSPS測定値を取得するための前記手段は、スライドする時間ウィンドウにわたって、前記複数のSPS測定値を取得するための手段を備え、
前記VIOシステムから、前記複数のVIO速度測定値を取得するための前記手段は、前記スライドする時間ウィンドウにわたって、前記VIO速度測定値を取得するための手段を備え、前記装置は、前記スライドする時間ウィンドウを使用して、前記少なくとも1つのオリエンテーションパラメータを連続的に決定するための手段をさらに備える、
請求項9に記載の装置。 - 前記複数のSPSレンジレート測定値の品質に基づいて、前記スライドするウィンドウのサイズを調整するための手段をさらに備える、請求項10に記載の装置。
- コンピュータ実行可能命令を記録した非一時的なコンピュータ可読記憶媒体であって、ここにおいて、1つまたは複数のプロセッサ上で前記コンピュータ実行可能命令を実行することは、前記1つまたは複数のプロセッサに、請求項1乃至8に記載の方法を実行することを行わせる、非一時的なコンピュータ可読記憶媒体。
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| US15/014,004 | 2016-02-02 | ||
| US15/014,004 US10132933B2 (en) | 2016-02-02 | 2016-02-02 | Alignment of visual inertial odometry and satellite positioning system reference frames |
| PCT/US2017/014344 WO2017136161A1 (en) | 2016-02-02 | 2017-01-20 | Alignment of visual inertial odometry and satellite positioning system reference frames |
Publications (3)
| Publication Number | Publication Date |
|---|---|
| JP2019509475A JP2019509475A (ja) | 2019-04-04 |
| JP2019509475A5 JP2019509475A5 (ja) | 2020-02-13 |
| JP6965253B2 true JP6965253B2 (ja) | 2021-11-10 |
Family
ID=57956415
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2018540043A Active JP6965253B2 (ja) | 2016-02-02 | 2017-01-20 | 視覚慣性オドメトリおよび衛星測位システムの基準フレームのアラインメント |
Country Status (7)
| Country | Link |
|---|---|
| US (1) | US10132933B2 (ja) |
| EP (1) | EP3411732B1 (ja) |
| JP (1) | JP6965253B2 (ja) |
| KR (1) | KR102694971B1 (ja) |
| CN (1) | CN108496096B (ja) |
| BR (1) | BR112018015744A2 (ja) |
| WO (1) | WO2017136161A1 (ja) |
Families Citing this family (15)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US10324195B2 (en) * | 2015-07-27 | 2019-06-18 | Qualcomm Incorporated | Visual inertial odometry attitude drift calibration |
| US10849134B2 (en) | 2016-11-04 | 2020-11-24 | Qualcomm Incorporated | Indicating a range of beam correspondence in a wireless node |
| US10859713B2 (en) | 2017-01-04 | 2020-12-08 | Qualcomm Incorporated | Position-window extension for GNSS and visual-inertial-odometry (VIO) fusion |
| US10267924B2 (en) * | 2017-01-04 | 2019-04-23 | Qualcomm Incorporated | Systems and methods for using a sliding window of global positioning epochs in visual-inertial odometry |
| EP3703983A1 (en) * | 2017-11-03 | 2020-09-09 | HELLA GmbH & Co. KGaA | Method of driving a component of a vehicle, system, computer program product and computer-readable medium |
| WO2019191288A1 (en) * | 2018-03-27 | 2019-10-03 | Artisense Corporation | Direct sparse visual-inertial odometry using dynamic marginalization |
| US10935669B2 (en) * | 2018-04-18 | 2021-03-02 | Topcon Positioning Systems, Inc. | Using SDP relaxation for optimization of the satellites set chosen for positioning |
| US10636190B2 (en) | 2018-05-31 | 2020-04-28 | Robert Bosch Gmbh | Methods and systems for exploiting per-pixel motion conflicts to extract primary and secondary motions in augmented reality systems |
| CN109540126B (zh) * | 2018-12-03 | 2020-06-30 | 哈尔滨工业大学 | 一种基于光流法的惯性视觉组合导航方法 |
| CN109917644B (zh) * | 2018-12-26 | 2022-06-14 | 达闼科技(北京)有限公司 | 一种提高视觉惯导系统鲁棒性的方法、装置和机器人设备 |
| CN110874569B (zh) * | 2019-10-12 | 2022-04-22 | 西安交通大学 | 一种基于视觉惯性融合的无人机状态参数初始化方法 |
| KR102860889B1 (ko) | 2021-07-29 | 2025-09-18 | 삼성전자주식회사 | 포즈를 추정하는 방법 및 장치 |
| CN116381760B (zh) * | 2023-06-05 | 2023-08-15 | 之江实验室 | Gnss rtk/ins紧耦合定位方法、装置及介质 |
| CN116718153B (zh) * | 2023-08-07 | 2023-10-27 | 成都云智北斗科技有限公司 | 一种基于gnss和ins的形变监测方法及系统 |
| CN117635681A (zh) * | 2023-11-24 | 2024-03-01 | 南京理工大学 | 一种基于单目视觉目标运动轨迹交会的测距方法 |
Family Cites Families (33)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US4402049A (en) * | 1981-03-23 | 1983-08-30 | The United States Of America As Represented By The Secretary Of The Army | Hybrid velocity derived heading reference system |
| US5672872A (en) * | 1996-03-19 | 1997-09-30 | Hughes Electronics | FLIR boresight alignment |
| US5894323A (en) * | 1996-03-22 | 1999-04-13 | Tasc, Inc, | Airborne imaging system using global positioning system (GPS) and inertial measurement unit (IMU) data |
| JP3776094B2 (ja) * | 2002-05-09 | 2006-05-17 | 松下電器産業株式会社 | 監視装置、監視方法および監視用プログラム |
| JP2004177362A (ja) * | 2002-11-29 | 2004-06-24 | Nippon Telegr & Teleph Corp <Ntt> | 位置計測方法、位置計測装置、位置計測方法のプログラム、およびこのプログラムを記録した記録媒体 |
| US7346452B2 (en) * | 2003-09-05 | 2008-03-18 | Novatel, Inc. | Inertial GPS navigation system using injected alignment data for the inertial system |
| JP2008066953A (ja) * | 2006-09-06 | 2008-03-21 | Sanyo Electric Co Ltd | 画像監視装置 |
| JP2008217330A (ja) * | 2007-03-02 | 2008-09-18 | Kobe Univ | 速度推定方法および速度推定プログラム |
| WO2009074654A1 (en) * | 2007-12-11 | 2009-06-18 | Nemerix Sa | Gnss method and receiver with camera aid |
| JP2009168614A (ja) * | 2008-01-16 | 2009-07-30 | Alpine Electronics Inc | 車載用ナビゲーション装置 |
| US9766074B2 (en) | 2008-03-28 | 2017-09-19 | Regents Of The University Of Minnesota | Vision-aided inertial navigation |
| WO2010088290A1 (en) * | 2009-01-27 | 2010-08-05 | Arthur Thomas D | Tight optical intergation (toi) of images with gps range measurements |
| US8855929B2 (en) * | 2010-01-18 | 2014-10-07 | Qualcomm Incorporated | Using object to align and calibrate inertial navigation system |
| CN101949715B (zh) * | 2010-08-10 | 2012-06-20 | 武汉武大卓越科技有限责任公司 | 高精度时空数据获取的多传感器集成同步控制方法和系统 |
| US9160980B2 (en) * | 2011-01-11 | 2015-10-13 | Qualcomm Incorporated | Camera-based inertial sensor alignment for PND |
| US9354324B2 (en) * | 2011-10-20 | 2016-05-31 | Qualcomm Incorporated | Techniques for affecting a wireless signal-based positioning capability of a mobile device based on one or more onboard sensors |
| CN102538781B (zh) * | 2011-12-14 | 2014-12-17 | 浙江大学 | 基于机器视觉和惯导融合的移动机器人运动姿态估计方法 |
| US9031782B1 (en) * | 2012-01-23 | 2015-05-12 | The United States Of America As Represented By The Secretary Of The Navy | System to use digital cameras and other sensors in navigation |
| JP6008510B2 (ja) | 2012-02-20 | 2016-10-19 | 株式会社小野測器 | 計測装置及び計測方法 |
| CN103424114B (zh) * | 2012-05-22 | 2016-01-20 | 同济大学 | 一种视觉导航/惯性导航的全组合方法 |
| JP2015532077A (ja) * | 2012-09-27 | 2015-11-05 | メタイオ ゲゼルシャフト ミット ベシュレンクテル ハフツングmetaio GmbH | 少なくとも1つの画像を撮影する撮影装置に関連する装置の位置及び方向の決定方法 |
| US9377519B2 (en) * | 2013-03-12 | 2016-06-28 | Qualcomm Incorporated | Server-based mobile device regional candidate position fix mode selection |
| US9957692B2 (en) * | 2013-03-15 | 2018-05-01 | Hexagon Technology Center Gmbh | System and method for heavy equipment navigation and working edge positioning using an image acquisition device that provides distance information |
| US20140267686A1 (en) * | 2013-03-15 | 2014-09-18 | Novatel Inc. | System and method for augmenting a gnss/ins navigation system of a low dynamic vessel using a vision system |
| CN103438906B (zh) * | 2013-09-10 | 2016-06-01 | 上海海事大学 | 适用于机器人导航的视觉与卫星定位传感器联合校准方法 |
| US9405972B2 (en) * | 2013-09-27 | 2016-08-02 | Qualcomm Incorporated | Exterior hybrid photo mapping |
| US20170102467A1 (en) | 2013-11-20 | 2017-04-13 | Certusview Technologies, Llc | Systems, methods, and apparatus for tracking an object |
| WO2015085483A1 (en) * | 2013-12-10 | 2015-06-18 | SZ DJI Technology Co., Ltd. | Sensor fusion |
| US20150219767A1 (en) | 2014-02-03 | 2015-08-06 | Board Of Regents, The University Of Texas System | System and method for using global navigation satellite system (gnss) navigation and visual navigation to recover absolute position and attitude without any prior association of visual features with known coordinates |
| US9435651B2 (en) * | 2014-06-04 | 2016-09-06 | Hexagon Technology Center Gmbh | System and method for augmenting a GNSS/INS navigation system in a cargo port environment |
| WO2016075809A1 (ja) * | 2014-11-14 | 2016-05-19 | 日産自動車株式会社 | 表示装置及び表示方法 |
| CN104729506B (zh) * | 2015-03-27 | 2017-11-14 | 北京航空航天大学 | 一种视觉信息辅助的无人机自主导航定位方法 |
| CN104848867B (zh) * | 2015-05-13 | 2017-12-08 | 北京工业大学 | 基于视觉筛选的无人驾驶汽车组合导航方法 |
-
2016
- 2016-02-02 US US15/014,004 patent/US10132933B2/en active Active
-
2017
- 2017-01-20 BR BR112018015744A patent/BR112018015744A2/pt not_active IP Right Cessation
- 2017-01-20 CN CN201780008094.9A patent/CN108496096B/zh active Active
- 2017-01-20 EP EP17702738.0A patent/EP3411732B1/en active Active
- 2017-01-20 JP JP2018540043A patent/JP6965253B2/ja active Active
- 2017-01-20 WO PCT/US2017/014344 patent/WO2017136161A1/en not_active Ceased
- 2017-01-20 KR KR1020187022023A patent/KR102694971B1/ko active Active
Also Published As
| Publication number | Publication date |
|---|---|
| CN108496096A (zh) | 2018-09-04 |
| EP3411732A1 (en) | 2018-12-12 |
| JP2019509475A (ja) | 2019-04-04 |
| BR112018015744A2 (pt) | 2019-01-08 |
| CN108496096B (zh) | 2022-06-10 |
| US20170219717A1 (en) | 2017-08-03 |
| WO2017136161A1 (en) | 2017-08-10 |
| EP3411732B1 (en) | 2021-07-28 |
| KR102694971B1 (ko) | 2024-08-12 |
| US10132933B2 (en) | 2018-11-20 |
| KR20180108629A (ko) | 2018-10-04 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP6965253B2 (ja) | 視覚慣性オドメトリおよび衛星測位システムの基準フレームのアラインメント | |
| US10495763B2 (en) | Mobile platform positioning using satellite positioning system and visual-inertial odometry | |
| US9677887B2 (en) | Estimating an initial position and navigation state using vehicle odometry | |
| KR101750469B1 (ko) | 하이브리드 포토 네비게이션 및 맵핑 | |
| US9250083B2 (en) | Heading, velocity, and position estimation with vehicle sensors, mobile device, and GNSS inputs | |
| US10502840B2 (en) | Outlier detection for satellite positioning system using visual inertial odometry | |
| US11714161B2 (en) | Distance-based positioning system and method using high-speed and low-speed wireless signals | |
| US9791572B2 (en) | Batch processing for improved georeferencing | |
| KR102252566B1 (ko) | 로케이션 서비스를 개선하기 위해 3차원 로케이션 정보를 사용하기 위한 시스템 및 방법 | |
| CN102713663B (zh) | 使用无线信号的位置确定 | |
| KR101524395B1 (ko) | 이미지 프로세싱에 기초한 카메라-기반 포지션 로케이션 및 네비게이션 | |
| US11035915B2 (en) | Method and system for magnetic fingerprinting | |
| WO2018184108A1 (en) | Location-based services system and method therefor | |
| JP2012509652A (ja) | 運動センサを使用した無線ベースの測位調整 | |
| CN104395697A (zh) | 用于移动设备的协作式导航技术 | |
| CN116931021A (zh) | 定位方法及装置、设备、载体、存储介质 | |
| US20140283578A1 (en) | Mobile device and vehicle mounted sensor calibration |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20191223 |
|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20191223 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20201216 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210202 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210422 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20210921 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20211020 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 6965253 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
