JP2018136304A - 内部センサによる相対測位 - Google Patents

内部センサによる相対測位 Download PDF

Info

Publication number
JP2018136304A
JP2018136304A JP2017235625A JP2017235625A JP2018136304A JP 2018136304 A JP2018136304 A JP 2018136304A JP 2017235625 A JP2017235625 A JP 2017235625A JP 2017235625 A JP2017235625 A JP 2017235625A JP 2018136304 A JP2018136304 A JP 2018136304A
Authority
JP
Japan
Prior art keywords
relative position
positioning
devices
positioning device
position data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2017235625A
Other languages
English (en)
Other versions
JP7105059B2 (ja
Inventor
ジェフリー エイチ. ハント,
H Hunt Jeffrey
ジェフリー エイチ. ハント,
ウェル, マイケル エム. ヴァンダー
M Vander Wel Michael
ウェル, マイケル エム. ヴァンダー
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Boeing Co
Original Assignee
Boeing Co
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Boeing Co filed Critical Boeing Co
Publication of JP2018136304A publication Critical patent/JP2018136304A/ja
Application granted granted Critical
Publication of JP7105059B2 publication Critical patent/JP7105059B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01BMEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B11/00Measuring arrangements characterised by the use of optical techniques
    • G01B11/02Measuring arrangements characterised by the use of optical techniques for measuring length, width or thickness
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/70Determining position or orientation of objects or cameras
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/87Combinations of systems using electromagnetic waves other than radio waves
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01BMEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B11/00Measuring arrangements characterised by the use of optical techniques
    • G01B11/24Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C11/00Photogrammetry or videogrammetry, e.g. stereogrammetry; Photographic surveying
    • G01C11/04Interpretation of pictures
    • G01C11/06Interpretation of pictures by comparison of two or more pictures of the same area
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/02Systems using the reflection of electromagnetic waves other than radio waves
    • G01S17/06Systems determining position data of a target
    • G01S17/42Simultaneous measurement of distance and other co-ordinates
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/88Lidar systems specially adapted for specific applications
    • G01S17/89Lidar systems specially adapted for specific applications for mapping or imaging
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S5/00Position-fixing by co-ordinating two or more direction or position line determinations; Position-fixing by co-ordinating two or more distance determinations
    • G01S5/16Position-fixing by co-ordinating two or more direction or position line determinations; Position-fixing by co-ordinating two or more distance determinations using electromagnetic waves other than radio waves
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/48Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
    • G01S7/497Means for monitoring or calibrating
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/06Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/08Logistics, e.g. warehousing, loading or distribution; Inventory or stock management
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Remote Sensing (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Electromagnetism (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Business, Economics & Management (AREA)
  • Economics (AREA)
  • Theoretical Computer Science (AREA)
  • Strategic Management (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Human Resources & Organizations (AREA)
  • Multimedia (AREA)
  • Development Economics (AREA)
  • Operations Research (AREA)
  • Quality & Reliability (AREA)
  • Marketing (AREA)
  • Tourism & Hospitality (AREA)
  • General Business, Economics & Management (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Signal Processing (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • Game Theory and Decision Science (AREA)
  • Educational Administration (AREA)
  • Automation & Control Theory (AREA)
  • Length Measuring Devices By Optical Means (AREA)
  • Image Processing (AREA)
  • Image Analysis (AREA)

Abstract

【課題】決まった基準点又はベンチマークを必要とせずに、三次元空間内の相対位置情報を特定しうるシステムを提供する。
【解決手段】相対位置情報を特定するための例示的なシステムは、三次元空間内の相対位置データを特定するための複数の測位デバイスであって、各測位デバイスが見通し線を有する、複数の測位デバイスを含む。各測位デバイスを介して特定された相対位置データは、測位デバイスに対する、その測位デバイスの見通し線上の他の測位デバイスの各々の相対位置データを含む。システムは、三次元空間内の対象物の画像データを取得するための、複数の撮像デバイスを更に含む。システムは、複数の測位デバイスを介して特定された相対位置データと複数の撮像デバイスを介して取得された画像データとを相関させることによって、三次元空間内の対象物に対応する相対位置情報を特定するよう設定された、演算デバイスも含む。
【選択図】図7

Description

本開示は概して、三次元空間における測定及び位置特定のシステムに関する。
現在、所与の空間においてカメラや他の撮像デバイスなどのセンサを複数使用して、この空間内のリアルタイムの状況認識及び測定データを提供するために、多くの労力が費やされている。通常、空間内にカメラを配置することにより、これらのカメラによって取得された画像データの測位情報(positioning information)を特定する基礎を提供するためには、決まった基準点又はベンチマークが使用される。
しかし、一部の大規模工場環境では、工場自体の構造が、その中で取得される画像データ向けに信頼性の高い基準点を提供するのに十分なほど、静的なものではないことがある。例えば、温度変化は構造の熱膨張又は熱収縮の原因となりうる。一部の地点においては、潮の流れが、沿岸部にある建造物の中の構造物を動かしうる。強風及び他の気象関連条件も、同様の結果を有しうる。これらの影響のせいで、空間内に装着されているカメラは、空間内の選択されているどの基準点に対しても動きうる。このことは、カメラによって取得された画像データの揺れを引き起こすことがあり、この画像データから特定されるどの測位情報も不正確なものになりうる。更に、航空機に関連するツーリングプロセスや組み立てプロセスなどの一部の製造応用では、測定の許容誤差は極めて小さいものになりうる。したがって、使用されるどの計測システムも、それに準じて正確でなくてはならない。
必要とされているのは、決まった基準点又はベンチマークを必要とせずに、三次元空間内の測位情報を特定しうるシステムである。
一例では、三次元空間内の相対位置データを特定するための複数の測位デバイスを含む、相対位置情報を特定するためのシステムであって、各測位デバイスが見通し線を有し、各測位デバイスを介して特定された相対位置データが、測位デバイスに対する、その測位デバイスの見通し線上の他の測位デバイスの各々の相対位置データを含む、システムについて説明する。このシステムは、三次元空間内の対象物の画像データを取得するための複数の撮像デバイスと、複数の測位デバイスを介して特定された相対位置データと複数の撮像デバイスを介して取得された画像データとを相関させることにより、三次元空間内の対象物に対応する相対位置情報を特定するよう設定された演算デバイスとを、更に含む。
別の例では、方法について説明する。この方法は、複数の測位デバイスを介して、三次元空間内の相対位置データを特定することであって、各測位デバイスが見通し線を有し、各測位デバイスを介して特定された相対位置データが、位置データに対する、その見通し線上の他の測位デバイスの各々の相対位置データを含む、特定することを含む。方法は、複数の撮像デバイスを介して、三次元空間内の対象物の画像データを取得することと、複数の測位デバイスを介して特定された相対位置データと複数の撮像デバイスを介して取得された画像データとを、演算デバイスによって相関させることも、含む。方法は、複数の測位デバイスを介して特定された相対位置データと複数の撮像デバイスを介して取得された画像データとの相関に基づいて、三次元空間内の対象物に対応する相対位置情報を、演算デバイスによって特定することも含む。
更に別の例では、非一過性コンピュータ可読媒体について説明する。この非一過性コンピュータ可読媒体には指令が格納されており、この指令は、演算デバイスによって実行されると、演算デバイスに、複数の測位デバイスを介して、三次元空間内の相対位置データを特定することであって、各測位デバイスが見通し線を有し、各測位デバイスを介して特定された相対位置データが、測位デバイスに対する、その測位デバイスの見通し線上の他の測位デバイスの各々の相対位置データを含む、特定することを含む機能を、実施させる。指令は、複数の撮像デバイスを介して、三次元空間内の対象物の画像データを取得することと、複数の測位デバイスを介して特定された相対位置データと複数の撮像デバイスを介して取得された画像データとを相関させることも、含む。指令は、複数の測位デバイスを介して特定された相対位置データと複数の撮像デバイスを介して取得された画像データとの相関に基づいて、三次元空間内の対象物に対応する相対位置情報を特定することを、更に含む。
前述の特徴、機能、及び利点は、様々な例において個別に実現可能であるか、又は、更に別の例において組み合わされうる。下記の説明及び図面を参照することで、これらの特徴、機能、及び利点の更なる詳細が理解されうる。
実施例の特性と考えられる新規の特徴は、付随する特許請求の範囲に明記される。しかし、実施例と好ましい使用モード、及びそれらの更なる目的と説明は、添付図面と併せて後述の本開示の実施例の詳細説明を参照することにより、最もよく理解されよう。
例示的な一実行形態による、三次元空間において相対位置情報を特定するための例示的なシステムを示す。 例示的な一実行形態による、三次元空間において相対位置情報を特定するための例示的なシステムの別の図を示す。 例示的な一実行形態による、三次元空間において相対位置情報を特定するための別の例示的なシステムを示す。 例示的な一実行形態による、三次元空間において相対位置情報を特定するための別の例示的なシステムを示す。 例示的な一実行形態による、対象物の第1と第2のターゲットポイントを示す。 例示的な一実行形態による、例示的な演算デバイスを示す。 例示的な一実行形態による、通信フロー図を示す。 例示的な一実行形態による、別の通信フロー図を示す。 三次元空間内の相対位置情報を特定するための例示的な方法のフロー図を示す。
これより、添付図面を参照しつつ、開示されている例について更に網羅的に説明するが、添付図面には、開示されている例の全部ではなく一部が示されている。実際には、いくつかの異なる例が説明されることがあるが、これらの例は、本書に明記されている例に限定されると解釈すべきではない。むしろ、この開示が包括的なものになり、かつ、本開示の範囲が当業者に十分に伝わるように、これらの例について説明している。
本書に記載の例は、三次元空間内の相対位置情報を特定するためのシステムを含む。このシステムは、複数の測位デバイスであって、各々が、それ自体に対する、その測位デバイスの見通し線上にある他の測位デバイスの位置を特定する、複数の測位デバイスを含む。システムは、三次元空間内の対象物(例えば、倉庫や格納庫などの組み立て空間内の航空機構成要素)に対応する画像データを取得する、複数の撮像デバイスも含む。撮像デバイスは、測位デバイスとは別に、連結又は装着されうる。演算デバイスは、相対位置データと画像データとを相関させることにより、対象物に対応する相対位置情報を特定する。
この構成では、システムは、三次元空間内で、測位デバイス又は撮像デバイスのいずれの絶対位置も特定しないこともある。システムはむしろ、これらのデバイスの互いに対する相対位置を特定する。環境的な原因又は他の原因に基づいて、デバイスのうちの1つが動くと、システムによって特定された相対位置は変化することになる。しかし、各デバイスに関して複数の測定値が存在すれば、システムの幾何学的配列は、数学的に過剰な制約を受ける。したがって、どのデバイスがどの程度動いたのかを、計算を介して特定することが可能になりうる。動きが計算され、究明されると、システムによって提供された測定値及び状況認識は、測位デバイス及び撮像デバイスの新たな相対位置に再校正され、再正規化され(re−normalized)うる。
量又は測定値に関連する「約(about)」、「実質的に(substantially)」、又は「およそ(approximately)」という語は、記載されている特性、パラメータ、又は値が厳密に実現される必要はなく、その特性によりもたらされることが意図されていた効果を妨げない大きさの偏差又は変動(例えば、許容誤差、測定エラー、測定精度限界、及び当業者には既知である他の要因を含む)が発生しうることを、意味する。
ここで図1を参照するに、相対位置情報を特定するためのシステム100が示されている。システム100は、三次元空間300内の相対位置データ201を特定するための、複数の測位デバイス200を含む。複数の測位デバイス200の各測位デバイス(例としては、個別に測位デバイス202と表される)は、光撮像/検出/測距(LIDAR)デバイスでありうる。したがって、各測位デバイス202は、レーザなどの光源と、フォトダイオードなどの、光を検出するためのセンサとを含みうる。二点間(point−to−point)測定値を取得することが可能な、他の測位デバイスも受け入れられる。
図1に描かれている三次元空間300は、図1に示す航空機などの対象物500の製造及び組み立てに使用される、製造空間である。他の環境及び応用も、製造であれそれ以外であれ、受け入れられる。分かりやすくするために、図1の斜視図は、三次元空間300の側壁の一部分と後部壁のみを示している。しかし、複数の測位デバイス200は三次元空間全体を通じて分布してよく、その一部は図1に示されていない。
図2は、上から見た、システム100の別の実行形態を示している。繰り返すが、三次元空間300は、図示されている航空機などの対象物500の製造及び組み立てに使用される製造空間である。ここでは、三次元空間300を取り囲んでいる複数の測位デバイス200が示されている。上述のように、図2の複数の測位デバイス200は、図示されているものよりも多くのデバイスを含みうる。例えば、測位デバイスは、図1に示しているように、三次元空間300全体を通じて種々の垂直方向高さに装着されうる。
各測位デバイス202は、図1及び図2に示す外壁などの、三次元空間300内の構造物301に装着されうる。しかし、各測位デバイス202は、かかる場所に限定されるわけではない。測位デバイスは、天井又はフロアを含む、三次元空間300内の任意の数の中間位置に装着されうる。下記で詳述するように、システム100に含まれる測位装置の数は多くなりうる。例えば、複数の測位デバイス200は、20から100の測位デバイスを含みうる。
三次元空間300において、各測位デバイス202は、その光源が照らしうる全てのものに相当する、見通し線を有しうる。各測位デバイスの見通し線は、そのデバイスが装着される様態又は場所によって、限定されうる。更に、製造空間内の障害物により、かかる障害物がなければ測位デバイスの見通し線上にあったはずの領域が、覆い隠されうる。例えば、対象物500は、対象物500の両側の測位デバイスの、互いの見通し線を遮るのに十分なほど、大きなものでありうる。
各測位デバイス202を介して特定された相対位置データ201は、測位デバイス202に対する、測位デバイス202の見通し線上の他の測位デバイスの各々の相対位置データを含みうる。例えば、複数の測位デバイスが30のLIDARデバイスを含む場合の所与のシステム100において、各測位デバイス202は、他のデバイスのうちのいくつかはその測位デバイス特有の見通し線上にはないと仮定すると、他の25のLIDARデバイスの相対位置を測定しうる。逆に、他の25のLIDARデバイスは各々、それ自体に対する、測位デバイス202の相対位置を測定しうる。他の測位デバイスの各々についても、同様のデータが特定されうる。
システム100は、たとえ特定のための基礎となる絶対基準点がなくとも、各測位デバイス202の相対位置を過剰に特定したことの原因を、一又は複数の測位デバイスが動いたことに帰する。例えば、上述したように、温度、気候、及び潮汐効果などの環境要因が、三次元空間300の形状の変化を引き起こすことがあり、このことは次いで、図1に示す所与の測位デバイス203の動きを引き起こしうる。場合によっては、上述の環境効果は、1を上回る数の測位デバイスの動きを引き起こしうる。このことは、相対位置データ201における累積変化をもたらすことがあり、この累積変化は、測位デバイスの数が比較的少ない場合には、受け入れることが困難なことがある。しかし、測位デバイスが多数あり、結果として得られる相対位置データ201の冗長性が膨大になることにより、システム100は、どの測位デバイス(複数可)がどの程度動いたのかを特定することが可能になりうる。
例えば、システム100は、各測位デバイス202を、他のデバイスに対して、(x、y、z)座標で位置付けうる。測位デバイスのうちの一又は複数が動くと、システムは、測位デバイス同士の相互関係に基づき、一又は複数のアルゴリズムを利用して、どの測位デバイスがデータセットの残りの部分と不整合な相対位置データを取得しているのかを、特定しうる。更に、動いた所与の測位デバイス203を識別した後に、システム100は、特定された不整合に基づいてそれがどのくらい動いたのかを特定しうる。
システム100は、三次元空間300内の対象物500の画像データ401を取得するための、複数の撮像デバイス400も含む。複数の撮像デバイス400の各撮像デバイス(例としては、個別に撮像デバイス402と表される)は、カメラでありうる。レーザ撮像システムなどの他の撮像デバイスも受け入れられる。
画像データ401は、取得された後に、対象物500に関する測定データ及び他のリアルタイム情報を取得するために、様々な画像処理技術を使用して処理されうる。しかし、複数の撮像デバイス400のうちの一又は複数の撮像デバイスが動くと、取得された画像データ401を介して特定された測定値は、不正確なものになりうる。上述のように、温度、気候、及び潮汐効果などの環境要因は、三次元空間300の形状の変化を引き起こし、測定エラーの原因となりうる。例えば、所与の撮像デバイスの以前の位置に基づく測定値は、以後の測定値と不整合になりうる。
したがって、システム100は、複数の測位デバイス200を介して特定された相対位置データ201と複数の撮像デバイス400を介して取得された画像データ401とを相関させることによって、三次元空間300内の対象物500に対応する相対位置情報503を特定するよう設定された、図6に示す演算デバイスなどの演算デバイス600を含みうる。このデータ通信の図が図7に示されており、これについて下記で詳述する。
演算デバイス600は、いくつかの方法で相対位置データ201と画像データ401とを相関させうる。例えば、演算デバイス600は、各測位デバイス202を介して、複数の撮像デバイス400の各撮像デバイス402の相対位置データを特定しうる。一部の実行形態では、図1及び図2に示しているように、複数の撮像デバイス400の各撮像デバイス402は、撮像デバイス402が測位デバイス202に対して不可動になるように、測位デバイス202のうちの1つに一体的に装着されうる。この構成では、各測位デバイス202を介して特定された撮像デバイス402の相対位置は、撮像デバイス402が装着されている測位デバイスと同じになる(又は、撮像デバイスのレンズと、共装着された測位デバイスのフォトダイオードとの間の距離を鑑みても、事実上同じになる)。
図1及び図2に関して、システム100は、あらゆる測位デバイス202に対して撮像デバイス402を含むわけではないことがある。通常、対象物500に関する所望の測定データ及び他の情報を取得するのに必要な撮像デバイスの数は、対象物500のサイズ及び形状によって決まりうる。その一方で、測位デバイスの数は、正確な測定値を取得するのに必要な冗長性の程度に基づきうる。
図3は、複数の撮像デバイス400の各撮像デバイス402が、撮像デバイス402に装着された位置特定(location)デバイス403を含む、別の例示的な実行形態を示している。位置特定デバイス403は、例えばレトロリフレクタでありうる。これにより、各測位デバイス202の光を放出した光源が、元の測位デバイス202の対応するフォトダイオードに反映されうる。結果として、各測位デバイス202を介して特定された相対位置データ201は、測位デバイス202に対する、測位デバイス202の見通し線上の各位置特定デバイス403の相対位置データを含むことになる。
図4は、複数の撮像デバイス400が複数の測位デバイス200から離されている、更に別の例示的な実行形態を示している。更に、撮像デバイスは、図3に示すようないかなる追加の位置特定デバイス403も含まず、ゆえに、複数の測位デバイス200は各撮像デバイスの相対位置データを取得しない可能性がある。それでもなお、演算デバイス600は、三次元空間300内で複数の撮像デバイス400を位置特定しうる。例えば、複数の測位デバイス200を介して特定される相対位置データ201から、任意座標系が確立されうる。
この場合、複数の撮像デバイス400は、複数の測位デバイス200と物理的に一緒にされている(in physical registry with)わけではない。換言すると、一部の応用では、複数の測位デバイス200と複数の撮像デバイス400とが位置的に共配置の幾何学的配列にされるのが都合がよいこともあるが、システム100に必要なのは、これらのデバイスが、情報に関して互いと一緒にされることだけである。例えば、演算デバイス600が、複数の測位デバイス200と複数の撮像デバイス400との間で位置特定信号を促進し、調整しうる。かかる例においては、複数の撮像デバイス400には、情報に関して複数の測位デバイス200からの信号に接触することだけが必要になる。したがって、複数の撮像デバイス400は、対象となっている応用にふさわしい任意の所望のアレイに位置付けられうる。複数の撮像デバイス400が複数の測位デバイス200と共配置されている実行形態においても、これらのデバイスはやはり、一部の被送信信号を介して、情報に関して接続されうる。
図6は、一又は複数のプロセッサ602によって実行可能な指令を格納するよう設定された非一過性のコンピュータ可読媒体601を含みうる、例示的な演算デバイス600を示している。例えば、非一過性のコンピュータ可読媒体601は、特定の機能を実現するためにプロセッサ(複数可)602によって実行可能な一又は複数のソフトウェア構成要素604が搭載されうる、データ記憶装置でありうる。所望の情報を抽出するために、取得された画像データ401は画像処理構成要素(複数可)606によって処理されうる。場合によっては、画像処理構成要素(複数可)は、プロセッサ(複数可)602のサブコンポーネントでありうる。
演算デバイス600は、演算デバイス600への相対位置データ201及び画像データ401の通信を促進しうる、有線又は無線でありうるネットワークインターフェース603も含みうる。これに関して、演算デバイス600は、必ずしも単一のデバイスによって具現化されるわけではない可能性がある。演算デバイス600は、ネットワーク化されたコンピュータやサーバなどの一又は複数のローカルデバイスを含みうるか、又は、クラウドベースのサーバやサーバのグループなどの一又は複数の遠隔デバイスで構成されうる。演算デバイス600は、ローカルデバイスと遠隔デバイスとの組み合わせであることもある。
最後に、演算デバイス600は、コマンドを入力し、相対位置データ201と画像データとを相互作用させ、又は、対象物500に関する相対位置情報503を出力するための、ユーザインターフェース605を含みうる。
演算デバイス600によって特定された相対位置情報は、いくつかの形態をとりうる。例えば、複数の撮像デバイス400を介して取得された画像データ401は、対象物500の第1ターゲット点501及び対象物500の第2ターゲット点502の画像データを含みうる。対象物500全体のうちの胴体部505の一区域を示している一例を、図5に示す。第1ターゲット点501は、胴体部505のこの区域の左上の角に対応する。同様に、第2ターゲット点502は、胴体部505のこの区域の右上の角に対応する。この例では、対象物500に対応する特定された相対位置情報503は、第2ターゲット点502に対する第1ターゲット点501の相対位置情報を含みうる。これにより、胴体部505のこの区域の幅の測定値が得られる。相対位置情報503は、他の情報も含んでよく、対象物500に関する任意の数値計測又は数値測定の照会に使用されうる。
更に、演算デバイスは、測位デバイと撮像デバイスの一方の動きに基づいて、相対位置情報503を更新しうる。例えば、演算デバイス600は、図1、図3、及び図4に示している所与の測位デバイス203の動きに基づいて、所与の測位デバイス203の見通し線上の他の測位デバイスの各々を介して、所与の測位デバイス203の他の測位デバイスに対する更新された相対位置データ204を特定するよう設定されうる。演算デバイス600は、上述のように、更新された相対位置データ204と画像データ401とを相関させることによって、三次元空間300内の対象物500に対応する、更新された相対位置情報504を特定するよう更に設定されうる。
図7は、例示的な一実行形態による通信フロー図を示している。演算デバイス600は、複数の測位デバイス200から相対位置データ201を受信し、かつ、複数の撮像デバイス400から画像データ401を受信する。演算デバイス600は、これらのデータを相関させることによって、対象物500に対応する相対位置情報503を特定する。上述のように、相対位置情報503はユーザインターフェース605に出力されうる。他の例では、相対位置情報503は更なる処理に使用されうる。それ以外の例も存在する。
図8は、類似の通信フロー図を示しており、測位デバイスのうちの一又は複数が動いた時に発生しうる更新を反映している。詳細には、演算デバイス600は、複数の測位デバイス200から更新された相対位置データ204を受信する。このデータが画像データ401と相関していることにより、演算デバイス600は、対象物500に対応する、更新された相対位置情報504を特定する。更に、図8に示す例では、代替的か追加的のいずれかで、図1に描かれているように撮像デバイスのうちの1つも動きうることも、想定されるこの場合、演算デバイス600は、複数の撮像デバイス400から更新された画像データを受信し、それにしたがって、更新された相対位置情報を特定することになる。
図9は、例示的な一実行形態による、三次元空間内の相対位置情報を特定するための例示的な方法900のフロー図を示している。図9に示す方法900は、例えば、図1から図8に示され、かつ本書で説明されているシステム100と共に使用されることが可能な、方法の一例を提示している。本書で開示されているこのプロセス及び方法、並びに他のプロセス及び方法について、フロー図にはこれらの例の許容可能な一実行形態の機能性及び工程が示されていることを、理解すべきである。これに関して、フロー図の各ブロックは、プロセスにおける特定の論理機能又は論理ステップを実装するためにプロセッサによって実行可能な一又は複数の指令を含む、プログラムコードのモジュール、セグメント、又は一部分を表わしうる。代替的な実行形態は本開示の例の範囲に含まれる。本開示の例においては、当業者が理解しうるように、機能が、関連する機能性に応じて、図示又は説明されている順序とは違う順序で実行されうる(実質的に同時に、又は逆順で実行されることを含む)。
ブロック902において、方法900は、複数の測位デバイス200を介して、三次元空間300内の相対位置データ201を特定することを含む。各測位デバイス(例としては、個別に測位デバイス202と表される)は、上述のように、見通し線を有しうる。更に、各測位デバイス202を介して特定された相対位置データ201は、測位デバイス202に対する、測位デバイス202の見通し線上の他の測位デバイスの各々の相対位置データを含む。
上述のように、本書に記載の実行形態は、測定の冗長性を提供するために、比較的多くの数の測位デバイスを伴いうる。ゆえに、三次元空間300内の相対位置データ201を特定することは、20から100の測位デバイスを介して、三次元空間300内の相対位置データ201を特定することを伴いうる。
ブロック904において、方法900は、複数の撮像デバイス400を介して、三次元空間300内の対象物500の画像データ401を取得することを含む。一部の例では、図1から図3に示す実行形態に図示し、かつ上述したように、各測位デバイス202を介して相対位置データ201を特定することは、測位デバイス202に対する、測位デバイス202の見通し線上の各撮像デバイス402の相対位置データを特定することを含みうる。
各撮像デバイス402の相対位置データは、様々な方法で特定されうる。例えば、方法900は、複数の撮像デバイス400の各撮像デバイス402を、撮像デバイス402が測位デバイス202に対して不可動になるように、測位デバイス202のうちの1つに一体的に装着することを含みうる。
別の実行形態では、各撮像デバイス402は、上記で詳述したように、撮像デバイス402に装着された位置特定デバイス403を含みうる。この場合、各測位デバイス202を介して相対位置データ201を特定することは、測位デバイス202に対する、測位デバイス202の見通し線上の各位置特定デバイス403の相対位置データを特定することを含む。
ブロック906において、方法900は、複数の測位デバイス200を介して特定された相対位置データ201と複数の撮像デバイス400を介して取得された画像データ401とを、演算デバイス600によって相関させることを含む。
ブロック908において、方法900は、複数の測位デバイスを介して特定された相対位置データと複数の撮像デバイスを介して取得された画像データとの相関に基づいて、三次元空間内の対象物に対応する相対位置情報を、演算デバイスによって特定することを含む。
上述し、かつ図5に示したように、複数の撮像デバイス400を介して取得された画像データ401は、対象物500の第1ターゲット点501及び対象物500の第2ターゲット点502の画像データを含みうる。更に、対象物500に対応する相対位置情報503を特定することは、第2ターゲット点502に対する第1ターゲット点501の相対位置情報を特定することを含みうる。
更に、方法900は、複数の測位デバイス200の中の所与の測位デバイス203の動きに基づいて、所与の測位デバイス203の見通し線上の他の測位デバイスの各々を介して、所与の測位デバイス203の他の測位デバイスに対する更新された相対位置データ204を特定することを、含みうる。加えて、上述したように、方法は、他の測位デバイスの各々を介して特定された、更新された相対位置データ204と、複数の撮像デバイス400を介して取得された画像データ401とを、相関させることと、更新された相対位置データ204と画像データ401との相関に基づいて、三次元空間300内の対象物500に対応する、更新された相対位置情報504を特定することとを、含みうる。
更に、本開示は以下の条項による例を含む。
条項1.相対位置情報を特定するためのシステム(100)であって、
三次元空間(300)内の相対位置データ(201)を特定するための、複数の測位デバイス(200)であって、各測位デバイス(202)が見通し線を有し、各測位デバイス(202)を介して特定された相対位置データ(201)が、測位デバイス(202)の見通し線上の他の測位デバイスの各々の、測位デバイス(202)に対する相対位置データを含む、複数の測位デバイス(200)と、
三次元空間(300)内の対象物(500)の画像データ(401)を取得するための、複数の撮像デバイス(400)と、
複数の測位デバイス(200)を介して特定された相対位置データ(201)と、複数の撮像デバイス(400)を介して取得された画像データ(401)とを相関させることによって、三次元空間(300)内の対象物(500)に対応する相対位置情報(503)を特定するよう設定された、演算デバイス(600)とを備える、システム(100)。
条項2.複数の測位デバイス(200)の各測位デバイス(202)が、光撮像/検出/測距(LIDAR)デバイスである、条項1に記載のシステム。
条項3.複数の測位デバイス(200)の各測位デバイス(202)が、三次元空間(300)内の構造物(301)に装着され、複数の撮像デバイス(400)の各撮像デバイス(402)は、撮像デバイス(402)が測位デバイス(202)に対して不可動になるように、複数の測位デバイス(200)の測位デバイス(202)のうちの1つに一体的に装着される、条項1に記載のシステム。
条項4.複数の撮像デバイス(400)の各撮像デバイス(402)が、撮像デバイス(402)に装着された位置特定デバイス(403)を備え、各測位デバイス(202)を介して特定された相対位置データ(201)が、測位デバイス(202)の見通し線上の各位置特定デバイス(403)の、測位デバイス(202)に対する相対位置データを含む、条項1に記載のシステム。
条項5.複数の撮像デバイス(400)を介して取得された対象物(500)の画像データ(401)が、対象物(500)の第1ターゲット点(501)及び対象物(500)の第2ターゲット点(502)の画像データを含み、対象物(500)に対応する特定された相対位置情報(503)は、第2ターゲット点(502)に対する第1ターゲット点(501)の相対位置情報を含む、条項1に記載のシステム。
条項6.複数の測位デバイス(200)は20から100の測位デバイスを含む、条項1に記載のシステム。
条項7.演算デバイス(600)は、複数の測位デバイス(200)のうちの所与の測位デバイス(203)の動きに基づいて、所与の測位デバイス(203)の見通し線上の他の測位デバイスの各々を介して、所与の測位デバイス(203)の他の測位デバイスに対する更新された相対位置データ(204)を特定するよう設定され、演算デバイス(600)は、更新された相対位置データ(204)と、複数の撮像デバイス(400)を介して取得された画像データ(401)とを相関させることによって、三次元空間(300)内の対象物(500)に対応する、更新された相対位置情報(504)を特定するよう更に設定される、条項1に記載のシステム。
条項8.複数の測位デバイス(200)を介して、三次元空間(300)内の相対位置データ(201)を特定することであって、各測位デバイス(202)が見通し線を有し、各測位デバイス(202)を介して特定された相対位置データ(201)が、測位デバイス(202)の見通し線上の他の測位デバイスの各々の、測位デバイス(202)に対する相対位置データを含む、特定することと、
複数の撮像デバイス(400)を介して、三次元空間(300)内の対象物(500)の画像データ(401)を取得することと、
複数の測位デバイス(200)を介して特定された相対位置データ(201)と、複数の撮像デバイス(400)を介して取得された画像データ(401)とを、演算デバイス(600)によって相関させることと、
複数の測位デバイス(200)を介して特定された相対位置データ(201)と、複数の撮像デバイス(400)を介して取得された画像データ(401)との相関に基づいて、三次元空間(300)内の対象物(500)に対応する相対位置情報(503)を、演算デバイス(600)によって特定することとを含む、方法。
条項9.複数の測位デバイス(200)の各測位デバイス(202)を介して、三次元空間(300)内の相対位置データ(201)を特定することが、測位デバイス(202)の見通し線上の各撮像デバイス(402)の、測位デバイス(202)に対する相対位置データを特定することを更に含む、条項8に記載の方法。
条項10.複数の撮像デバイス(400)の各撮像デバイス(402)を、撮像デバイス(402)が測位デバイス(202)に対して不可動になるように、複数の測位デバイス(200)の測位デバイス(202)のうちの1つに一体的に装着することを更に含む、条項8に記載の方法。
条項11.複数の撮像デバイス(400)の各撮像デバイス(402)が、撮像デバイス(402)に装着された位置特定デバイス(403)を備え、各測位デバイス(202)を介して、三次元空間(300)内の相対位置データ(201)を特定することが、測位デバイス(202)の見通し線上の各位置特定デバイス(403)の、測位デバイス(202)に対する相対位置データを特定することを更に含む、条項8に記載の方法。
条項12.複数の撮像デバイス(400)を介して取得された対象物(500)の画像データ(401)が、対象物(500)の第1ターゲット点(501)及び対象物(500)の第2ターゲット点(502)の画像データを含み、対象物(500)に対応する相対位置情報(503)を特定することが、第2ターゲット点(502)に対する第1ターゲット点(501)の相対位置情報を特定することを含む、条項8に記載の方法。
条項13.複数の測位デバイス(200)を介して、三次元空間(300)内の相対位置データ(201)を特定することが、20から100の測位デバイス(202)を介して、三次元空間(300)内の相対位置データ(201)を特定することを含む、条項8に記載の方法。
条項14.複数の測位デバイス(200)の中の所与の測位デバイス(203)の動きに基づいて、所与の測位デバイス(203)の見通し線上の他の測位デバイスの各々を介して、所与の測位デバイス(203)の他の測位デバイスに対する更新された相対位置データ(204)を特定することと、
他の測位デバイスの各々を介して特定された、更新された相対位置データ(204)と、複数の撮像デバイス(400)を介して取得された画像データ(401)とを、相関させることと、
更新された相対位置データ(204)と、複数の撮像デバイス(400)によって取得された画像データ(401)との相関に基づいて、三次元空間(300)内の対象物(500)に対応する、更新された相対位置情報(504)を特定することとを更に含む、条項8に記載の方法。
条項15.指令が格納されている非一過性コンピュータ可読媒体(601)であって、指令は、演算デバイス(600)によって実行されると、演算デバイス(600)に、
複数の測位デバイス(200)を介して、三次元空間(300)内の相対位置データ(201)を特定することであって、各測位デバイス(202)が見通し線を有し、各測位デバイス(202)を介して特定された相対位置データ(201)が、測位デバイス(202)の見通し線上の他の測位デバイスの各々の、測位デバイス(202)に対する相対位置データを含む、特定することと、
複数の撮像デバイス(400)を介して、三次元空間(300)内の対象物(500)の画像データ(401)を取得することと、
複数の測位デバイス(200)を介して特定された相対位置データ(201)と、複数の撮像デバイス(400)を介して取得された画像データ(401)とを相関させることと、
複数の測位デバイス(200)を介して特定された相対位置データ(201)と、複数の撮像デバイス(400)を介して取得された画像データ(401)との相関に基づいて、三次元空間(300)内の対象物(500)に対応する相対位置情報(503)を特定することとを含む機能を実施させる、非一過性コンピュータ可読媒体(601)。
条項16.複数の測位デバイス(200)の各測位デバイス(202)を介して、三次元空間(300)内の相対位置データ(201)を特定することが、各測位デバイス(202)を介して、測位デバイス(202)の見通し線上の各撮像デバイス(402)の、測位デバイス(202)に対する相対位置データを特定することを更に含む、条項15に記載の非一過性コンピュータ可読媒体(601)。
条項17.複数の撮像デバイス(400)の各撮像デバイス(402)が、撮像デバイス(402)に装着された位置特定デバイス(403)を備え、複数の測位デバイス(200)の各測位デバイス(202)を介して、三次元空間(300)内の相対位置データ(201)を特定することが、測位デバイス(202)の見通し線上の各位置特定デバイス(403)の、測位デバイス(202)に対する相対位置データを特定することを更に含む、条項15に記載の非一過性コンピュータ可読媒体(601)。
条項18.複数の撮像デバイス(400)を介して取得された対象物(500)の画像データ(401)が、対象物(500)の第1ターゲット点(501)及び対象物(500)の第2ターゲット点(502)の画像データを含み、対象物(500)に対応する相対位置情報(503)を特定することが、第2ターゲット点(502)に対する第1ターゲット点(501)の相対位置情報を特定することを含む、条項15に記載の非一過性コンピュータ可読媒体(601)。
条項19.複数の測位デバイス(200)を介して、三次元空間(300)内の相対位置データ(201)を特定することが、20から100の測位デバイス(202)に、三次元空間(300)内の相対位置データ(201)を特定させることを含む、条項15に記載の非一過性コンピュータ可読媒体(601)。
条項20.指令であって、演算デバイス(600)によって実行されると、演算デバイス(600)に、
複数の測位デバイス(200)の中の所与の測位デバイス(203)の動きに基づいて、所与の測位デバイス(203)の見通し線上の他の測位デバイスの各々を介して、所与の測位デバイス(203)の他の測位デバイスに対する更新された相対位置データ(204)を特定することと、
他の測位デバイスの各々を介して特定された、更新された相対位置データ(204)と、複数の撮像デバイス(400)を介して取得された画像データ(401)とを、相関させることと、
更新された相対位置データ(204)と、複数の撮像デバイス(400)によって取得された画像データ(401)との相関に基づいて、三次元空間(300)内の対象物(500)に対応する、更新された相対位置情報(504)を特定することとを含む機能を実施させる、指令を更に備える、条項15に記載の非一過性コンピュータ可読媒体(601)。
種々の有利な構成の説明は、例示及び説明を目的として提示されており、網羅的であること、または開示された形態の例に限定されることを意図するものではない。当業者には、多くの修正例及び変形例が自明となろう。更に、種々の有利な例は、他の有利な例と比べて異なる利点を表現しうる。選択された一又は複数の例は、かかる例の原理と実践的応用を解説するため、及び、他の当業者が、想定される特定の用途に適した様々な修正例を伴う様々な例の開示内容について理解することを可能にするために、選ばれ、説明されている。

Claims (15)

  1. 相対位置情報を特定するためのシステム(100)であって、
    三次元空間(300)内の相対位置データ(201)を特定するための、複数の測位デバイス(200)であって、各測位デバイス(202)が見通し線を有し、各測位デバイス(202)を介して特定された前記相対位置データ(201)が、前記測位デバイス(202)の見通し線上の他の測位デバイスの各々の、前記測位デバイス(202)に対する相対位置データを含む、複数の測位デバイス(200)と、
    前記三次元空間(300)内の対象物(500)の画像データ(401)を取得するための、複数の撮像デバイス(400)と、
    前記複数の測位デバイス(200)を介して特定された前記相対位置データ(201)と、前記複数の撮像デバイス(400)を介して取得された前記画像データ(401)とを相関させることによって、前記三次元空間(300)内の前記対象物(500)に対応する相対位置情報(503)を特定するよう設定された、演算デバイス(600)とを備える、システム(100)。
  2. 前記複数の測位デバイス(200)の各測位デバイス(202)が、光撮像/検出/測距(LIDAR)デバイスである、請求項1に記載のシステム。
  3. 前記複数の測位デバイス(200)の各測位デバイス(202)が、前記三次元空間(300)内の構造物(301)に装着され、前記複数の撮像デバイス(400)の各撮像デバイス(402)は、前記撮像デバイス(402)が前記測位デバイス(202)に対して不可動になるように、前記複数の測位デバイス(200)の前記測位デバイス(202)のうちの1つに一体的に装着される、請求項1又は2に記載のシステム。
  4. 前記複数の撮像デバイス(400)の各撮像デバイス(402)が、前記撮像デバイス(402)に装着された位置特定デバイス(403)を備え、各測位デバイス(202)を介して特定された前記相対位置データ(201)が、前記測位デバイス(202)の見通し線上の各位置特定デバイス(403)の、前記測位デバイス(202)に対する相対位置データを含む、請求項1から3のいずれか一項に記載のシステム。
  5. 前記複数の撮像デバイス(400)を介して取得された前記対象物(500)の前記画像データ(401)が、前記対象物(500)の第1ターゲット点(501)及び前記対象物(500)の第2ターゲット点(502)の画像データを含み、前記対象物(500)に対応する特定された前記相対位置情報(503)は、前記第2ターゲット点(502)に対する前記第1ターゲット点(501)の相対位置情報を含む、請求項1から4のいずれか一項に記載のシステム。
  6. 前記演算デバイス(600)は、前記複数の測位デバイス(200)のうちの所与の測位デバイス(203)の動きに基づいて、前記所与の測位デバイス(203)の前記見通し線上の他の測位デバイスの各々を介して、前記所与の測位デバイス(203)の前記他の測位デバイスに対する更新された相対位置データ(204)を特定するよう設定され、前記演算デバイス(600)は、前記更新された相対位置データ(204)と、前記複数の撮像デバイス(400)を介して取得された前記画像データ(401)とを相関させることによって、前記三次元空間(300)内の前記対象物(500)に対応する、更新された相対位置情報(504)を特定するよう更に設定される、請求項1から5のいずれか一項に記載のシステム。
  7. 複数の測位デバイス(200)を介して、三次元空間(300)内の相対位置データ(201)を特定することであって、各測位デバイス(202)が見通し線を有し、各測位デバイス(202)を介して特定された前記相対位置データ(201)が、前記測位デバイス(202)の見通し線上の他の測位デバイスの各々の、前記測位デバイス(202)に対する相対位置データを含む、特定することと、
    複数の撮像デバイス(400)を介して、前記三次元空間(300)内の対象物(500)の画像データ(401)を取得することと、
    前記複数の測位デバイス(200)を介して特定された前記相対位置データ(201)と、前記複数の撮像デバイス(400)を介して取得された前記画像データ(401)とを、演算デバイス(600)によって相関させることと、
    前記複数の測位デバイス(200)を介して特定された前記相対位置データ(201)と、前記複数の撮像デバイス(400)を介して取得された前記画像データ(401)との前記相関に基づいて、前記三次元空間(300)内の前記対象物(500)に対応する相対位置情報(503)を、前記演算デバイス(600)によって特定することとを含む、方法。
  8. 前記複数の測位デバイス(200)の各測位デバイス(202)を介して、前記三次元空間(300)内の前記相対位置データ(201)を特定することが、前記測位デバイス(202)の見通し線上の各撮像デバイス(402)の、前記測位デバイス(202)に対する相対位置データを特定することを更に含む、請求項7に記載の方法。
  9. 前記複数の撮像デバイス(400)の各撮像デバイス(402)を、前記撮像デバイス(402)が前記測位デバイス(202)に対して不可動になるように、前記複数の測位デバイス(200)の前記測位デバイス(202)のうちの1つに一体的に装着することを更に含む、請求項7又は8に記載の方法。
  10. 前記複数の撮像デバイス(400)の各撮像デバイス(402)が、前記撮像デバイス(402)に装着された位置特定デバイス(403)を備え、各測位デバイス(202)を介して、前記三次元空間(300)内の前記相対位置データ(201)を特定することが、前記測位デバイス(202)の見通し線上の各位置特定デバイス(403)の、前記測位デバイス(202)に対する相対位置データを特定することを更に含む、請求項7から9のいずれか一項に記載の方法。
  11. 前記複数の撮像デバイス(400)を介して取得された前記対象物(500)の前記画像データ(401)が、前記対象物(500)の第1ターゲット点(501)及び前記対象物(500)の第2ターゲット点(502)の画像データを含み、前記対象物(500)に対応する前記相対位置情報(503)を特定することが、前記第2ターゲット点(502)に対する前記第1ターゲット点(501)の相対位置情報を特定することを含む、請求項7から10のいずれか一項に記載の方法。
  12. 前記複数の測位デバイス(200)の中の所与の測位デバイス(203)の動きに基づいて、前記所与の測位デバイス(203)の前記見通し線上の他の測位デバイスの各々を介して、前記所与の測位デバイス(203)の前記他の測位デバイスに対する更新された相対位置データ(204)を特定することと、
    前記他の測位デバイスの各々を介して特定された前記更新された相対位置データ(204)と、前記複数の撮像デバイス(400)を介して取得された前記画像データ(401)とを相関させることと、
    前記更新された相対位置データ(204)と、前記複数の撮像デバイス(400)によって取得された前記画像データ(401)との前記相関に基づいて、前記三次元空間(300)内の前記対象物(500)に対応する、更新された相対位置情報(504)を特定することとを更に含む、請求項7から11のいずれか一項に記載の方法。
  13. 指令が格納されている非一過性コンピュータ可読媒体(601)であって、前記指令は、演算デバイス(600)によって実行されると、前記演算デバイス(600)に、
    複数の測位デバイス(200)を介して、三次元空間(300)内の相対位置データ(201)を特定することであって、各測位デバイス(202)が見通し線を有し、各測位デバイス(202)を介して特定された前記相対位置データ(201)が、前記測位デバイス(202)の見通し線上の他の測位デバイスの各々の、前記測位デバイス(202)に対する相対位置データを含む、特定することと、
    複数の撮像デバイス(400)を介して、前記三次元空間(300)内の対象物(500)の画像データ(401)を取得することと、
    前記複数の測位デバイス(200)を介して特定された前記相対位置データ(201)と、前記複数の撮像デバイス(400)を介して取得された前記画像データ(401)とを相関させることと、
    前記複数の測位デバイス(200)を介して特定された前記相対位置データ(201)と、前記複数の撮像デバイス(400)を介して取得された前記画像データ(401)との前記相関に基づいて、前記三次元空間(300)内の前記対象物(500)に対応する相対位置情報(503)を特定することとを含む機能を実施させる、非一過性コンピュータ可読媒体(601)。
  14. 前記複数の測位デバイス(200)の各測位デバイス(202)を介して、前記三次元空間(300)内の前記相対位置データ(201)を特定することが、各測位デバイス(202)を介して、前記測位デバイス(202)の見通し線上の各撮像デバイス(402)の、前記測位デバイス(202)に対する相対位置データを特定することを更に含み、
    前記複数の撮像デバイス(400)の各撮像デバイス(402)が、前記撮像デバイス(402)に装着された位置特定デバイス(403)を備え、前記複数の測位デバイス(200)の各測位デバイス(202)を介して、前記三次元空間(300)内の前記相対位置データ(201)を特定することが、前記測位デバイス(202)の見通し線上の各位置特定デバイス(403)の、前記測位デバイス(202)に対する相対位置データを特定することを更に含む、請求項13に記載の非一過性コンピュータ可読媒体(601)。
  15. 前記複数の撮像デバイス(400)を介して取得された前記対象物(500)の前記画像データ(401)が、前記対象物(500)の第1ターゲット点(501)及び前記対象物(500)の第2ターゲット点(502)の画像データを含み、前記対象物(500)に対応する前記相対位置情報(503)を特定することが、前記第2ターゲット点(502)に対する前記第1ターゲット点(501)の相対位置情報を特定することを含む、非一過性コンピュータ可読媒体(601)であって、
    指令であって、前記演算デバイス(600)によって実行されると、前記演算デバイス(600)に、
    前記複数の測位デバイス(200)の中の所与の測位デバイス(203)の動きに基づいて、前記所与の測位デバイス(203)の前記見通し線上の他の測位デバイスの各々を介して、前記所与の測位デバイス(203)の前記他の測位デバイスに対する更新された相対位置データ(204)を特定することと、
    前記他の測位デバイスの各々を介して特定された前記更新された相対位置データ(204)と、前記複数の撮像デバイス(400)を介して取得された前記画像データ(401)とを相関させることと、
    前記更新された相対位置データ(204)と、前記複数の撮像デバイス(400)によって取得された前記画像データ(401)との前記相関に基づいて、前記三次元空間(300)内の前記対象物(500)に対応する、更新された相対位置情報(504)を特定することとを含む機能を実行させる、指令を更に備える、請求項13又は14に記載の非一過性コンピュータ可読媒体(601)。
JP2017235625A 2016-12-12 2017-12-08 内部センサによる相対測位 Active JP7105059B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US15/375,921 2016-12-12
US15/375,921 US10282859B2 (en) 2016-12-12 2016-12-12 Intra-sensor relative positioning

Publications (2)

Publication Number Publication Date
JP2018136304A true JP2018136304A (ja) 2018-08-30
JP7105059B2 JP7105059B2 (ja) 2022-07-22

Family

ID=60190755

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017235625A Active JP7105059B2 (ja) 2016-12-12 2017-12-08 内部センサによる相対測位

Country Status (5)

Country Link
US (1) US10282859B2 (ja)
EP (1) EP3333593B1 (ja)
JP (1) JP7105059B2 (ja)
CN (1) CN108225189B (ja)
RU (1) RU2747325C2 (ja)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109544630B (zh) * 2018-11-30 2021-02-02 南京人工智能高等研究院有限公司 位姿信息确定方法和装置、视觉点云构建方法和装置
US11107271B2 (en) 2019-11-05 2021-08-31 The Boeing Company Three-dimensional point data based on stereo reconstruction using structured light

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009535612A (ja) * 2006-04-28 2009-10-01 エアバス ドイチェランド ゲゼルシャフト ミット ベシュレンクテル ハフツング 多数のセグメントからなる物理的構造の寸法の不変性を組立の間に確保するための方法
JP2012007972A (ja) * 2010-06-24 2012-01-12 3D Media Co Ltd 車両寸法計測装置
JP2013196355A (ja) * 2012-03-19 2013-09-30 Toshiba Corp 物体測定装置、及び物体測定方法
JP2013207344A (ja) * 2012-03-27 2013-10-07 Nikon Corp 検出装置、撮像装置、及びプログラム
US20160340016A1 (en) * 2015-05-20 2016-11-24 Airbus Operations (Sas) Method for measuring the position of a mobile structure

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6664529B2 (en) * 2000-07-19 2003-12-16 Utah State University 3D multispectral lidar
US6821052B2 (en) * 2001-10-09 2004-11-23 William Harrison Zurn Modular, robotic road repair machine
US20070109527A1 (en) * 2005-11-14 2007-05-17 Wenstrand John S System and method for generating position information
JP2008160496A (ja) * 2006-12-25 2008-07-10 Hitachi Ltd 監視システム
US20090262974A1 (en) 2008-04-18 2009-10-22 Erik Lithopoulos System and method for obtaining georeferenced mapping data
US8948917B2 (en) * 2008-10-29 2015-02-03 Baker Hughes Incorporated Systems and methods for robotic welding of drill bits
US20160088284A1 (en) * 2010-06-08 2016-03-24 Styku, Inc. Method and system for determining biometrics from body surface imaging technology
US9013543B1 (en) * 2012-11-14 2015-04-21 Google Inc. Depth map generation using multiple scanners to minimize parallax from panoramic stitched images
JP5819564B2 (ja) * 2013-03-12 2015-11-24 富士フイルム株式会社 画像判定装置、撮像装置、3次元計測装置、画像判定方法、及びプログラム
US9789462B2 (en) * 2013-06-25 2017-10-17 The Boeing Company Apparatuses and methods for accurate structure marking and marking-assisted structure locating
US9225858B2 (en) * 2013-09-30 2015-12-29 Lexmark International, Inc. Systems and methods for location-aware imaging devices
JP6452369B2 (ja) * 2014-09-29 2019-01-16 キヤノン株式会社 情報処理装置とその制御方法、プログラム、記憶媒体
US9881422B2 (en) * 2014-12-04 2018-01-30 Htc Corporation Virtual reality system and method for controlling operation modes of virtual reality system
US10134192B2 (en) * 2016-10-17 2018-11-20 Microsoft Technology Licensing, Llc Generating and displaying a computer generated image on a future pose of a real world object
US9984572B1 (en) * 2017-01-16 2018-05-29 Nio Usa, Inc. Method and system for sharing parking space availability among autonomous vehicles

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009535612A (ja) * 2006-04-28 2009-10-01 エアバス ドイチェランド ゲゼルシャフト ミット ベシュレンクテル ハフツング 多数のセグメントからなる物理的構造の寸法の不変性を組立の間に確保するための方法
JP2012007972A (ja) * 2010-06-24 2012-01-12 3D Media Co Ltd 車両寸法計測装置
JP2013196355A (ja) * 2012-03-19 2013-09-30 Toshiba Corp 物体測定装置、及び物体測定方法
JP2013207344A (ja) * 2012-03-27 2013-10-07 Nikon Corp 検出装置、撮像装置、及びプログラム
US20160340016A1 (en) * 2015-05-20 2016-11-24 Airbus Operations (Sas) Method for measuring the position of a mobile structure

Also Published As

Publication number Publication date
US10282859B2 (en) 2019-05-07
CN108225189A (zh) 2018-06-29
RU2747325C2 (ru) 2021-05-04
EP3333593B1 (en) 2024-01-03
JP7105059B2 (ja) 2022-07-22
RU2017137638A3 (ja) 2020-11-24
EP3333593A1 (en) 2018-06-13
CN108225189B (zh) 2021-08-10
US20180165826A1 (en) 2018-06-14
RU2017137638A (ru) 2019-04-29

Similar Documents

Publication Publication Date Title
US10979694B2 (en) Information processing apparatus, method, and storage medium
CN110458961B (zh) 基于增强现实的系统
JP6591200B2 (ja) バーチャルデータ投影方法及び投影装置
US9826217B2 (en) System and method for adjusting a baseline of an imaging system with microlens array
CA2968997C (en) Method and system for sensing interior spaces to auto-generate a navigational map
EP2195608B1 (en) System and method for multiframe surface measurement of the shape of objects
DK2993450T3 (en) Method and arrangement for recording acoustic and optical information as well as a corresponding computer program and a corresponding computer-readable storage medium
US20140043622A1 (en) System for measuring the position and movement of an object
JP6333396B2 (ja) モバイルプラットフォームの変位を計測する方法及び装置
KR101565900B1 (ko) 카메라 및 레이저 센서의 캘리브레이션 장치 및 캘리브레이션 방법
US10265850B2 (en) Robotic sensing apparatus and methods of sensor planning
CN111220126A (zh) 一种基于点特征和单目相机的空间物体位姿测量方法
JP7105059B2 (ja) 内部センサによる相対測位
Wang et al. Modelling and calibration of the laser beam-scanning triangulation measurement system
WO2017051153A1 (en) Device and method to locate a measurement point with an image capture device
WO2005073669A1 (en) Semi and fully-automatic camera calibration tools using laser-based measurement devices
CN110192226A (zh) 基于深度的图像处理方法、处理装置和电子装置
CN102096922A (zh) 一种物点定位方法
Rodríguez-Navarro et al. Indoor positioning system based on PSD sensor
JP2018087715A (ja) 情報処理装置、情報処理方法及びプログラム
CN115248446A (zh) 一种基于激光雷达的三维超声成像方法和系统
EP3834997A1 (en) Method and device for calibrating a machine vision device for position determination
Shojaeipour et al. Robot path obstacle locator using webcam and laser emitter
Yang Active Sensing for Collaborative Localization in Swarm Robotics
KR101550563B1 (ko) 조명등 및 이미지 센서를 이용한 위치 측위 방법 및 장치

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20201207

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20211022

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20211124

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220221

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20220621

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20220711

R150 Certificate of patent or registration of utility model

Ref document number: 7105059

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150