JP4773973B2 - 単一像から、3d物体の測定、モデリングおよびマッピングのためのシステム、コンピュータプログラムおよび方法 - Google Patents

単一像から、3d物体の測定、モデリングおよびマッピングのためのシステム、コンピュータプログラムおよび方法 Download PDF

Info

Publication number
JP4773973B2
JP4773973B2 JP2006548058A JP2006548058A JP4773973B2 JP 4773973 B2 JP4773973 B2 JP 4773973B2 JP 2006548058 A JP2006548058 A JP 2006548058A JP 2006548058 A JP2006548058 A JP 2006548058A JP 4773973 B2 JP4773973 B2 JP 4773973B2
Authority
JP
Japan
Prior art keywords
shadow
image
measurement
projection
igm
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2006548058A
Other languages
English (en)
Other versions
JP2007522443A (ja
Inventor
シー.タオ ビンセント
ヨン フ
レンソン ピーター
クロイトル アリー
ワンショウ ジアン
Original Assignee
マイクロソフト アマルガメイテッド カンパニー
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by マイクロソフト アマルガメイテッド カンパニー filed Critical マイクロソフト アマルガメイテッド カンパニー
Publication of JP2007522443A publication Critical patent/JP2007522443A/ja
Application granted granted Critical
Publication of JP4773973B2 publication Critical patent/JP4773973B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C11/00Photogrammetry or videogrammetry, e.g. stereogrammetry; Photographic surveying
    • G01C11/04Interpretation of pictures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T17/00Three dimensional [3D] modelling, e.g. data description of 3D objects
    • G06T17/05Geographic models
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C11/00Photogrammetry or videogrammetry, e.g. stereogrammetry; Photographic surveying
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/50Depth or shape recovery

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Geometry (AREA)
  • Software Systems (AREA)
  • Remote Sensing (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Graphics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Multimedia (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Length Measuring Devices By Optical Means (AREA)
  • Image Processing (AREA)
  • Processing Or Creating Images (AREA)

Description

本発明は、マッピング、測量、写真測量、リモートセンシング、可視化およびシミュレーション、ゲーム、計画、ジオマティックス、土木工学、地理学に関し、さらにとりわけ、単一画像からの、物体のまたは物体間の測定情報の収集および次元情報の収集、ならびに3次元(3D)モデルおよびマップ、ならびに、続いてそのような情報を、分析、モデリング、マッピングおよび可視化において使用することに関する。
3D物体を測定する従来の方法は立体視と呼ばれ、同一物体から得られた対のステレオ画像を取得するものである。各画像の画像幾何モデル(IGM)が与えられると、物体の3D座標情報を判定することができる。写真測量的な方法は、共役点(conjugate points)を選択することにより物体を調査し、それによりこれらの点に基づいたIGMを使用して任意の次元を測定する。3Dモデルおよびマップがその後、立体視の手法を使用することにより生成される。
立体画像を特に空中または衛星のセンサから獲得することは、単一画像(single images)を獲得することと比較して、より高価であり、より長い配信時間が必要である。また、画像ベンダが保守するデータベースに保管された画像の大多数は単一画像である。従って、単一画像を使用することは、緊急用の地図作成、防衛、諜報活動、電気通信および工学等のようなアプリケーションに対して有利である。
単一画像から3D測定、モデリングおよびマッピングを実行するために開発された公知のシステムはない。本発明は、3D測定を効率的に取得し、ならびに3D物体モデルおよびマップを効率的に作成できるオペレーション方法、コンピュータプログラムおよびシステムを提供する。システムは独特のユーティリティおよび斬新なアルゴリズムから成り、それらは物体の投影、影、物体の幾何、およびIGMを利用するよう設計されている。
IGMは物体空間と画像空間の間、またはその逆の間の幾何学的関係を記述する。広く使用される2つのIGMとしては、物理センサモデルおよび汎用センサモデルがある。有理関数モデル(RFM)は汎用センサモデルの一種である。
以下の関連先行技術が確認されている。
Jiang,W.,Tao,C.V.,Hu,Y.,Xu,Z.,2003.RFMに基づいた単一および立体の高解像度衛星画像からの3−D測定、ASPRS Annual Conference,5月,5〜9日、アラスカ州アンカレッジ,7頁(この参考文献は、RFMベースの方法を使用して衛星画像から取得した実験結果のいくつかを記述している。)
OpenGISコンソーシアム,1999.The OpenGIS Abstract Specification−Topic7:The Earth Imagery Case。(この参考文献は、マッピング、リモートセンシングおよび地理空間産業(geospatial industry)で使用されるIGMの概要を提供する。)
Tao,C.V.,Hu,Y.,2001.写真測量処理に対する有理関数モデルの包括的研究、Photogrammetric Engineering &Remote Sensing、67(12):1347−1357(この参考文献は、RFMセンサモデルの詳細な数学的定式化およびその正確性の実験的研究を提供する。)
本発明の1態様によると、少なくとも1つの3次元物体の単一画像から、3次元測定情報を導出し、かつ/または3次元モデルとマップを作成する方法が提供される。この方法は、画像データから成り、画像幾何モデル(IGM)に関連付けられる、物体の少なくとも1つの2次元単一画像を取得するステップと、IGMに基づいてその画像に関連付けられた3次元座標情報を導出し、その3次元座標情報を画像データに関連付けるステップと、IGMを使用して物体の投影を測定し、その物体に関する高さおよび/または点間距離を含む測定データを導出するように、および/またはその物体の影を測定してその物体に関する高さおよび/または点間距離を含む測定データを導出するように画像データを分析するステップ、ならびにその物体の投影および/または影の測定に基づいた3次元測定結果を取得するステップを備える。
本発明の別の態様によると、少なくとも1つの3次元物体の単一画像から、3次元測定情報を導出し、かつ/または3次元モデルとマップを作成するシステムが提供される。本システムは、少なくとも1つのコンピュータとコンピュータプログラムであって、画像データから成り、画像幾何モデル(IGM)に関連付けられる、物体の少なくとも1つの2次元単一画像を取得し、IGMに基づいてその画像に関連付けられた3次元座標情報を導出し、その3次元座標情報を画像データに関連付け、その画像データをIGMを使用して物体の投影を測定し、その物体に関する高さおよび/または点間距離を含む測定データを導出するように、および/または、その物体の影を測定してその物体に関する高さおよび/または点間距離を含む測定データを導出するように分析し、ならびにその物体の投影および/または影の測定に基づいて3次元測定結果を取得することが可能であるように前記コンピュータに対して機能するようにリンクされるコンピュータプログラムを備える。
本発明のさらに別の態様によると、コンピュータ上で測定ユーティリティを定義する命令を備えるコンピュータ使用可能媒体が提供される。この測定ユーティリティは、画像データから成り、画像幾何モデル(IGM)に関連付けられる、物体の少なくとも1つの2次元単一画像を取得すること、IGMに基づいてその画像に関連付けられた3次元座標情報を導出し、その3次元座標情報を画像データに関連付けること、その画像データを、IGMを使用して物体の投影を測定し、その物体に関する高さおよび/または点間距離を含む測定データを導出するように分析すること、および/または、その物体の影を測定してその物体に関する高さおよび/または点間距離を含む測定データを導出すること、ならびにその物体の投影および/または影の測定に基づいて3次元測定結果を取得することが可能なように動作する。
本発明は、RFMセンサモデルを含めて、IGMのサポートにより単一像から、3D測定情報を導出すること、ならびに3Dモデルおよびマップを作成するための方法を以下の場合に提供する。すなわち、(1)単一画像が利用可能である、(2)静的および動的物体の両方が測定される、(3)立体視装置が利用可能でない、(4)立体画像対からの共役点が特定できない、場合に提供する。
本発明は、本発明の方法に従って、測定情報が容易にアクセスされ、画像から使用されることを可能とするシステムを含む。このシステムは、単一画像から3D測定結果を取得し、3Dモデルおよび3Dマップを作成するユーティリティから成る。システムは、一般的に本発明のコンピュータプログラムが提供する命令を処理するよう適合されたコンピュータシステムから成る。
本発明のコンピュータプログラムはコンピュータアプリケーションから成る。このアプリケーションは、(1)測定ユーティリティを含み、IGMをサポートする2D画像から測定を行うことを可能とする。この測定ユーティリティは、投影測定ユーティリティおよび影測定ユーティリティを含む。投影測定ユーティリティおよび影測定ユーティリティは、IGMのサポートにより投影測定ユーティリティ、影測定ユーティリティ、またはその両方を操作することで、点間の測定を可能にするように協働する。このアプリケーションはまた、(2)本発明の測定ユーティリティにより行われた測定に基づいて3Dモデルおよびマップを効率的に作成するモデル生成ユーティリティを含む。RFMを用いると、このアプリケーションはRFM等をサポートする任意の(例えば、衛星または航空の)画像に適用できる。本発明は、単一画像からの3D測定、モデルおよびマップを使用可能とする。
本発明の方法の別態様は、測定情報、即ち、3次元内の任意の2点間距離を単一画像から取得する方法と、測定結果から3Dモデルを作成し、続いて単一画像から3Dマップを生成する方法とから成る。特に、本発明は以下の方法を提供する。
1.IGMを使用して投影測定ユーティリティを操作することで物体または物体群の投影
を測定し、物体等の高さ、点間距離等を導出すること。
2.IGMを使用して影測定ユーティリティを操作することで物体または物体群の影を測
定し、静的(ビル、陸橋、橋等を含む)および動的(空中の飛行機を含む)物体両方
の高さ、点間距離を導出すること。これらの物体は地上にフットプリントがないかもしれない。
3.IGMにより投影および/または影データの連携を使用することによって、3D測定結果を取得すること。
4.1つまたは複数のアルゴリズムを実装するモデル生成ユーティリティを使用すること
で、3Dモデルおよびマップを作成すること。
本発明の方法の別態様は、上述の測定結果を取得するために、本発明の特定アルゴリズムを応用したものである。
本発明は、RFMのサポートがある任意の画像に適用できる。これは、RFMがセンサと独立で、複数のセンサに普遍的に適用可能である事実による。従って、本発明がもたらすコンピュータプログラムは、内在するセンサのモデルを変更する必要なしに任意の画像に使用できる。
本発明の一定の実施態様の詳細な説明を、一例としてのみ、および以下の図面を参照して、以下で提供する。
図面では、例を通して本発明の好適な実施態様を示す。例示の目的のため、および理解の幇助としてのみ説明および図面があり、それらは本発明の境界を規定するものとして意図されていないことは明確に理解されるべきである。
1.本発明の一般的な説明
本発明の1態様においては、コンピュータプログラムが提供され、測定ユーティリティを使用して単一、複合、複数の物体および物体間関係の測定結果を単一画像から取得し、続いてモデル生成ユーティリティを使用して3Dモデルおよびマップを作成する。3Dモデルおよびマップは従来、ステレオ画像対(この文脈では、一般に“ステレオ対”と呼ばれる)を使用して実行される。本発明はその1実施形態において、単一画像から3D測定結果を取得し、3Dモデルおよびマップを作成することが可能なソフトウェア製品として最も良く理解される。
コンピュータプログラムのインタフェースは、図1aを参照することにより最も良く理解される。本発明のコンピュータプログラムの要素は、図1bを参照して最も良く理解される。本発明から導出されたユーティリティにより、単一画像から取得した測定結果を使用することで3Dモデルおよびマップの開発が可能である。
本発明の方法は、図2から図17を参照することにより最も良く理解され、以下でさらに説明される。本発明のコンピュータプログラムは、本発明の方法を実装する命令をコンピュータに提供するよう適合されたコンピュータアプリケーションから成る。本発明のシステムは図1bを参照することにより最も良く理解される。
その一態様において、本発明は、投影、または影、あるいはそれらの組み合わせ(図1a、図1bに示す)を使用して単一像から物体の、および物体間の3D測定結果を取得するよう設計された測定ユーティリティ8と、3Dモデルおよびマップを生成するよう設計されたモデル生成ユーティリティ9とを提供する。
・本発明は広範囲の測定結果とその派生物(例えば、体積)の収集を可能とする。
・本発明はモデル生成ユーティリティ9を使用して、複雑な屋根構造を含む3Dモデル(例えば、ビル)およびそれに続く3D生成物(3Dのサイトマップおよび、3Dの都市や自然の景色)を全て単一像から迅速および効果的に構築する。
・上述のように、従来、3Dモデルは立体画像対を使用して抽出される。抽出作業を実行するために、しばしば特別な観察装置を必要とする。本発明により、3D測定結果および3Dモデルは、立体画像または特別な観察装置を使用することなく取得できる。
・RFMを、内在するIGMとして使用することにより、本発明はRFMのサポートがある(衛星および航空等の)任意のセンサ画像に、プログラム構成を何ら変更することなく使用できる。本発明は、任意のセンサ画像に対して、拡張可能、柔軟かつ相互運用可能となる。即ち、1つのプログラムが複数のセンサ画像をサポートできる。
・さらに、自動車、飛行機、雲等の多くの動的物体の測定、例えば飛行機の高さおよび方位が、それらの移動特徴も含めて本発明に従って取得できる。大部分の空中または衛星ベースの立体対は同時に捕捉されない。従って、動いている物体の次元は立体対を使用して容易に測定されない。
本発明により使用可能となる測定結果には、高さ、3D次元内の距離、見通し距離(例えば、2つのビルの屋上間の距離、塔と受信機間の距離)、体積、3D内の方位およびそれらの派生物が含まれる。3Dモデルおよびマップはモデル生成ユーティリティの使用により、測定情報を使用して生成できる。3Dモデルは、複雑な屋根構造をもつビル、コンテナ、タンク、塔などでありうる。
本発明に従って測定されうる対象には以下が含まれる。
・地上の単一物体、例えばビル、塔、木など、または地表面の“上方”にある物体、例えば飛行機、橋など。
・複合物体。即ち、多層の複雑なビルの屋根、複雑な構造体など。
・複数の物体。即ち、物体集団、例えば住居用ビルディングブロックの体積推定、森林地域の損害査定。
・物体間の関係。即ち、物体間の空間関係に関する測定、例えば基地局と、動いている地上車にある受信機との間の3D距離など。
物体は静止(例えばビル、木など)または動的(例えば飛行機、動いている自動車など)のいずれかでありうる。それは、現実の物体および人工(即ち、コンピュータが生成した)物体も含む。
本発明は物体を様々な詳細レベルまたは地上サンプリング距離レベルで、測定、モデリングおよびマッピングすることができる。本開示で参照される単一像は以下を含むことができる。
・衛星画像
・航空画像
・地上画像、および
・RFMなどの適切に校正した画像幾何モデルを用いてセンサが取得した他の画像。これらの画像の地上サンプリング距離は、数インチから数メートルの範囲でありうる。
2.インタフェースの説明
図1aは本発明の測定ユーティリティ8およびモデル生成ユーティリティ9の機能にアクセスする代表的なユーザインタフェースの概念図である。ユーザインタフェースは公知の方法で提供される。
・ボタン1は画像平面におけるマウスの画像座標を表示する。
・ボタン2は画像点に対応する物体点の地上座標を表示し、地上座標は図3に示すように式1を使用して計算される。データおよびマップの投影はダイアログボックスで設定されるのが望ましい。
・ボタン3はプログラムに対して画像、IGMおよびDTMデータ(任意)の入力を可能とする。
・ボタン4は次元、モデルおよびマップを含む3D情報の出力を可能とする。
・ボタン5は測定ユーティリティ8のオン/オフを切り替える。システム内のダイアログボックスは、投影測定ユーティリティ12(または投影ルーラ)または影測定ユーティリティ14(または影ルーラ)のどちらかを選択するための2つのラジオボタンを提供する(これらのユーティリティは図1bに図示される)。ボタン6はモデル生成ユーティリティ9のオン/オフを切り替える。コンピュータプログラムは、その一特定態様において、以下で詳述するように3Dモデルおよびマップを生成する一連の斬新なアルゴリズムを実装する。
・ボタン7は描画結果および関連情報を表示する。
本発明は代替的なユーザインタフェースの使用を考慮しており、このインタフェースによりオペレータは測定ユーティリティ8およびモデル生成ユーティリティ9の機能にアクセスできることは、理解されるべきである。
3.測定ユーティリティ
上述のように、本発明は測定ユーティリティ8を提供して、IGMを用いて単一像から物体のおよび物体間の次元を測定する。測定ユーティリティ8は本発明のプロセスを可能とし、それにより投影情報または影情報またはそれらの組み合わせを使用して3D測定を可能とする。単一像の表示をその画像幾何に従って可能とし、そのような単一像の処理を本発明の方法に従って可能とするWindows(登録商標)プログラム(上述のように)として、測定ユーティリティ8は最も良く理解される。特に、測定ユーティリティ8により、オペレータはマウスまたは他の適当なインタフェース装置を使用して画像内の選択点をポインティングおよびクリックすることができ、それにより下記で詳述する測定結果を取得できる。
測定ユーティリティ8は公知の方法でプログラムされる。本開示はこの中で、本発明の測定ユーティリティ8の代表的なコンピュータアプリケーションの実施形態を説明する。図1bに示すように、測定ユーティリティ8は、画像を表示するための表示機能10と接続される。測定ユーティリティ8はデータ入力源11にも接続される。この入力データ源11は、画像データ、IGMおよびDTM(任意)を含む、物体の3D測定に必要な全てのデータを格納する。測定ユーティリティ8の操作のためのデータ入力は、データベース(またはファイル)(図示せず)に格納するか、または他の実施形態において、オンザフライ(on the fly)で分析されるかのいずれかである。計算器13は、投影測定ユーティリティ12および影測定ユーティティ14の機能をサポートする。計算器13は、ここで説明される方法および式に従って入力データを処理するユーティリティとして最も良く理解される。計算器はさらに、入力データをモデルデータ(例えば、IGMまたはDTM)に基づいて分析し、従ってモデラ(modeler)および/またはアナライザとしても最も良く理解される。モデル生成ユーティリティ9は、測定ユーティリティ8に接続される。これは3Dモデルの効果的な再構築を可能とするアルゴリズムを実装する。
・本発明はその一実施形態において、適用可能なIGMにより判定される特定の画像化プロセスに依存する。画像化プロセスは一般に、像の方位情報を提供する。本発明の特定実施形態において、使用されるIGMは有理関数モデル、即ち、複数のセンサ(センサ独立)をサポートできるセンサモデル(OGC、1999;TaoおよびHu、2001)である。使用されるIGMは、共線式、直接線形変換(direct linear transformation)およびその他などに基づくものなどの、周知のモデルも含むことができる。
・使用される画像は、地上、空中または衛星のプラットフォームにより、フレーム、プッシュブルーム(pushbroom)またはSARなどの異なる画像化センサを使用して獲得できる。
・測定ユーティリティ8は、それが物体の投影および影を組み合わせて物体を測定する(以下で詳述)ようにプログラムされることが好ましい。
・測定ユーティリティ8はさらに、飛行機などの動的物体を測定するための、以下で詳述するプロセスを実装するよう(上述のように)プログラムされることが好ましい。
・測定ユーティリティ8は、陸橋、橋、高架橋などの、地上または地表面より上方の物体を測定できる。地上より上方の物体は、地上の物理的な基準点を有しない。
測定ユーティリティは、物体の投影または影、ならびにその両方に基づくアルゴリズムを実装する。
測定可能な投影および影(基準点15、頂点16および影の端点17を含む)の要素間関係の概念的説明は、図2aを参照することにより最も良く理解される。図2bは物体、IGMおよび太陽の角度間の関係に関する本発明の概略図である。物体は地上から垂直に押し出され、高さはhである。基準点の3D座標が(X0、Y0、Z0)のとき、物体の真の頂点は(X0、Y0、Z2)にある。Z0は物体底面の高度であり、数値地形モデル(DTM)または定平面、またはユーザにより設定された値から抽出されうる。Z2は物体の頂点の高度である。
以下の式は図3に示すように(X、Y)を解くために使用される。
Figure 0004773973
ここで、rおよびcは画像内の選択点の座標の行および列であり、エラー! 編集中のフィールド コードからは、オブジェクトを作成できません。およびエラー! 編集中のフィールド コードからは、オブジェクトを作成できません。は推定値で、ΔXおよびΔYは補正(corrections)である。
3.1投影ベースの測定アルゴリズム
高度Zを調整することで、オペレータは高さの測定結果を取得できる。
例1−投影全体が可視のときの測定
投影ベース測定に関連して本発明の利点を実証するための実験を行った。調整された高さ情報を、ルーラ線が物体の真の頂点に到達するまで繰り返し可視化しながら投影ルーラを描画することができる。図4aにおいて、線1001はビルのアウトラインを表す。オペレータはビルの基準(黒の太円1002)を指し示すことから始め、その後浮動カーソルの高さ(黒の太線1003)を上昇させる。カーソルが繰り返し上昇されると、その画像内の位置はIGMによってリアルタイムに計算され、カーソルはグラフィックユーザインタフェース内で連続して描画される。カーソルが画像内の屋根の端(黒の太円1002)に触れると、このインタラクティブな手続きは停止する。実際のインタフェースにおいては、線1003は本発明の代表的実施態様として緑色で現れるであろう。屋根の高さは、図4bに示されるように48.6mである。この操作は、物体のフットプリントの境界で行うこともできる。
3.2 影ベースの測定アルゴリズム
平坦な地表面での測定
図2bに示すように、影の端点の3D座標は(X1、Y1、Z1)であり、平坦な地表面に対してはZ1はZ0に等しい。影の長さlは太陽高度により判定される。長さl、物体の高さhおよび太陽高度の間の関係は、平坦な地表面に対する以下の式によって判定される。
Figure 0004773973
ここで、hは物体の高さであり、θは太陽高度である。
図2bにおいて、地形が平坦であると仮定すると、地上の物体位置に対する影の端点の座標オフセットは、図5に示すように、以下で取得される。
Figure 0004773973
平坦でない地表面での測定
平坦な地表上の影の長さlと、角度ψを有する傾斜上の影の長さs、物体の高さhおよび太陽高度の間の関係は、図6に示すように平坦でない地表面に対する以下の式によって判定される。
Figure 0004773973
ここで、
Figure 0004773973
Figure 0004773973
Figure 0004773973
である。
地形の起伏の様々な場合が考察される。
影ベースの測定のステップ
図7aは、測定可能な物体の影に対する本発明の方法の適用を説明するものである。このプロセスのフローは一般的に5つのステップを有する。オペレータは画像内の基準点を選択し、その地上座標は式1を使用して計算される。その後、オペレータはZの値を増分変化ΔZだけ調整する。影の端点の地上座標オフセットは、平坦な地上に対しては式3、または平坦でない地上に対しては式4を物体の近傍で使用して、取得される。影の端点は、IGMの地上から画像への変換を使用して画像内に投影され、影ルーラがプロットされる。そのプロセスは、影ルーラが画像の線に良く適合すると終了する。
図7bは測定不能な物体の影に対するプロセスを示している。このワークフローは一般的に6つのステップを有する。オペレータは画像内の影の端点を選択する必要があり、その地上座標も式1を使用して計算される。その後、オペレータは高度ZをΔZだけ調整する。基準点の地上座標を推定するために、計算されたオフセットが端点から差し引かれる。投影ルーラおよび影ルーラの両方がプロットされる。投影ルーラは、それが物体の真の頂点に到達するかどうかを判断するために使用される。このプロセスは、両方のルーラが画像内で投影および影の可視部に良く適合すると終了する。
例2−影全体が可視のときの測定
影ベースの測定を目的とした本発明の利点を実証するための実験を行った。影ルーラ(実際のインタフェースにおいては、線は本発明の代表的実施形態として青色で表されるであろう。)が、本明細書で説明するグラフィックユーザインタフェース内の画像上に描画される。高さ情報は、ルーラ線が画像内の影全体に適合するまで繰り返し調整される。図8aに示されるように、オペレータは画像内の物体の影(円1005)の端点を位置付けすることから始め、その後、浮動カーソルの高さを上昇させる。カーソルが上昇されると、図7bで説明されるように基準点の位置が更新され、それらの画像内位置がIGMによって計算される。基準点と影の端点を結ぶ線(点線1006)および基準点と上昇されたカーソルを結ぶ第2の線(1007)が、グラフィックユーザインタフェース内に描画される。カーソルが画像内の物体の上縁(円1008)に到達すると、この対話手続きが停止する。屋根の高さは、図8bに示すように48.4mであり、例1の投影ユーティリティを使用して測定された高さの値に近い。
例3−投影および影が部分的に可視のときの測定
測定不可能な投影および影に対する影ベースの測定の本発明の利点を実証するために、いくつかの場合を実施する。以下の場合では、物体の基準点は確実には位置付けすることができないかまたは存在しないが、影ルーラは基準点を正確に位置付けすることができる。図9において影(1009)は点線により測定され、投影(1010)は太線で測定される。2本の線の交点が、位置付けされる基準点である。
図9aは空中の飛行機の測定を示す。飛行機は空中にあり、地上に物理的な基準点をもたない。測定された高さは57.1mである。図9bにおいて、陸橋が測定され、点線(1011)は測定された影の長さであり、太線(1012)は測定された投影後の高さ(13.8m)である。図9cにおいて、木が測定され、点線(1013)は測定された影の長さであり、太線(1014)は測定された投影後の高さ(29.4m)である。図9dは基準点が正確に位置付けできる煙突の測定を示し、その高さは100.7mである。点線(1015)は測定された影の長さであり、太線(1016)は測定された投影後の高さである。図9aから9dに示すように、これらの物体の基準点は、太陽の位置およびIGMに関する情報を使用するとき影の端点から推測でき、測定された影のこれら発明の代表的実施例は、実際の場合では、青い線で表示され、測定された投影は緑の線で表示されるであろう。
例4−物体と物体の関係の測定
2つの物体の任意の2点間の次元測定に対する本発明の利点を実証するための実験を行った。
図10aに示すように、地上の飛行機の基準点が影ルーラを使用して判定され、飛行機の高さは57.1mである(太線1017)。その後、ラインマーク(一点鎖線1018)が描画され(図10b)、基準点と空港の滑走路の着陸点とを結び、地上でのこの距離は158.1mである。最後に図10cにおいては、ラインマークの基準点は飛行機の高さまで上昇され、直線距離(一点鎖線1019)は165.8mになる。
図11aに示すように、2つのビルの2つの基準点を結ぶときその直線距離(一点鎖線1019)は193.1mである。両方の点は投影ルーラを使用してそれらの対応する屋根の高さまで上昇され、図11bにおいて直線距離(一点鎖線1020)は193.3mになる。
例5−物体の方位(ベアリング)の測定
任意の物体の方位測定の本発明の利点を実証するための実験を行った。図12aに示すように、飛行機の機首(1021)の基準点および機尾(1022)の基準点が影ルーラを使用して判定される。その後、ベアリングラインマーク(鎖線1023)が描画され、図12bに示すようにこれらの2つの基準点を接続し、UTMマップ投影下ではその角度は285.2°である。
例6−複合物体の測定
複雑な構造を有するビルの高さ測定の本発明の利点を実証するための実験を行った。図13に示すように、多層ビルの屋根の異なるレベルを、投影および/または影ルーラを使用して単一画像から測定できる。図13aにおいて、屋根の第1階層の高さ(線1024)が投影ルーラを使用して測定され、その後システム内の高さが固定され、この高さは31mである。第1階層に対する屋根の第2階層の高さ(線1026)は、その固定された高さから開始して測定され、この高さは図13bに示すように5.5mである。これは、第2階層の地表面に対する高さが36.5であることを示す。
3.3システムバイアスの補償
DTMおよび/またはGCPがない状態で測定が行われるとき、垂直および水平方向の両方でいくらかシステムバイアスが発生する。この結果、それらの次元が変化し、さらに、測定された物体の位置を変位させる。
図14に示すように、物体の高さの測定エラー(Δh)は、飛行高度(H)、物体の高さ(h)、および地形が利用可能なことによる垂直シフト(ΔH)によって、以下によって与えられるように判定される。
Figure 0004773973
ここでh’は測定ユーティリティを使用して測定した物体の高さである。式8aを使用して、垂直ドリフトによる物体の高さのシステムのエラーは、DTMが後に利用可能になるとき、これらの物体に対して自動的に補償されうる。各物体の高さは、それらが通常異なるベースの高さを有するので、別個に補正される。
同様に、物体の水平次元のエラーは以下によって判定される。
Figure 0004773973
ここで、l’およびlはそれぞれ、測定された真の物体の次元である。式8bを使用して、垂直ドリフトによるシステムのエラーは、DTMが後に利用可能になるとき、3Dで測定されたこれらの物体の次元に対して上述したのと同じ方法で自動的に補償することができる。
DTMがない物体の変位補正は、物体の任意の点に対する変位を計算することで遂行されうる。このプロセスは数ステップを含む。最初に、生の画像およびDTMの両方がコンピュータシステムにロードされる。第2に、測定された3D物体モデルがロードされる。1つの特定の実施形態においては、バイアス補償が必要かどうかを指示するためにメッセージがポップアップ表示される。もしそうならば、3Dモデルに属する点(例えば、第1ポイント)がIGMを使用して画像平面に投影される。その後、投影された画像の点が式1を使用してDTMと交差される。第3に、その点の元の位置と、DTMと交差する位置との間の、X、Y、およびZ座標における差分が計算される。4番目に、3Dモデルに属する全ての点が、同じ差分だけシフトされる。更新された3Dモデルは、ディスクのファイルに再保存するのが望ましい。
GCPがない物体の変位に対する補正も、4ステップの手続きを実行することで達成することができる。最初に、生の画像、GCPおよび任意にDTMが、コンピュータシステムにロードされ、IGMがGCPを使用することで改善される。第2に、3Dモデルに属する点(例えば、第1ポイント)が元のIGMを使用して画像平面に投影される。その後、投影された画像の点が式1および改善されたIGMを使用してDTMと交差される。第3に、その点の元の位置と、DTMと再度交差する位置との間の、X、Y、およびZ座標における差分が計算される。第4に、3Dモデルに属する全ての点が、同じ差分だけシフトされる。更新された3Dモデルは、ディスクのファイルに再保存される。
4.測定およびその派生物の収集
従って、上述のように本発明のコンピュータプログラムは、物体の、および物体間の広範囲の3D測定を収集するよう動作可能である。それは、上で詳述したように測定ユーティリティ8を使用することにより、物体の投影、影およびそれらの組み合わせを利用する。
多くの測定派生物は、公知の方法で測定結果を取得した後に展開することができる。これらの派生物は、限定するものではないが、体積、方位、領域、高さの差分、見通しなどを含む。測定およびそれらの派生物は、都市計画、景観分析、輸送および水文学的流域分析、緊急対応、災害緩和などのための多くの3D製品を生成するために使用することができる。
5.3Dモデルおよびマップの作成
本発明のコンピュータプログラムは、モデル生成ユーティリティを使用することによって、3Dモデルおよびマップを作成する。
例7−基準選択法を用いた3Dモデル作成
3D構造体のマッピングに対するこのアプローチにおいては、Zレベルの調整モードが使用可能であり、続いてマウスまたは同様なポインティング装置(図15a)を使用して構造体の基準(ベース)をマーク付けする。さらに、様々なキーの組み合わせを使用して、カーソルの固定/解除を提供することができる。その後、Zレベルは例えばページアップ/ページダウンキーを使用して調整され、Zレベルの変化(太線1027)が画像平面内でユーザに(実際の場合は黄色の線で)可視化される(図15b)。望ましいレベルに到達したとき(図15c)、ユーザは3Dマッピングツール、典型的には多角形ツールを選択し、図15dに示すように構造体の頂上の輪郭を描く(太線1028、実際の場合には所定の線の色によって)。Zレベル調整モードは使用不可にすることができ、投影された構造体の基準点はその後、フットプリント表示モードを使用可能とすることでチェックできる。フットプリントモードはIGMを使用して、図15eに示すように投影されたフットプリントを描画する(点線1029、実際の場合では所定のくっきりした線の色からなる濃い色である)。望ましい3Dモデルはその後、永続的な記憶が必要とされる場合はデータベースまたはファイル構造(図示せず)に保存される。それはまた、ビルの可視面を取り込んでそれらを3Dビジュアルモデル内のテクスチャ(図示せず)として使用することにより、3D仮想景色を生成するために使用することもできる。
例8−屋根−フットプリント変位法を用いた3Dモデル作成
3Dビルモデリングを実行するプロセスは、屋根およびフットプリント間の相対的な変位または動作を実行することで達成することができる。3D構造のマッピングに対するこのアプローチは、最初にその屋根のアウトライン(図16aに示す太線1030)を画像平面内に投影されるようにデジタル化することで、その境界線を取り込む。このアウトラインはその後、IGMを使用して、画像平面内でシフトされ(図16b)、構造体の基準と一致する。与えられた例においては、これはページアップ/ページダウンキーを押下することで達成される(図16b)。このアルゴリズムは、モデルのフットプリントの一部が見えないときに3Dモデルを作成することができる(図16c)。
多種類のビルの屋根形状が、このコンピュータ化されたシステム内でサポートされる。図17に示すように、典型的な屋根のタイプのいくつかは、平、切妻、半切妻、寄棟および片流れの屋根形状である。コンピュータプログラムは、任意の複雑な屋根のタイプを有する3Dビルのモデルを、基本的な屋根のタイプの組み合わせにより作成することができる。
例9−2Dベクトルからの3Dマップの生成
2Dベクトル座標(r,c)がコンピュータアプリケーションにロードされ、各2D位置毎にZレベルの座標が、マッピングされた形状の基準レベルと一致するよう割り当てられる(図3)。各形状はその後、以下の操作を通して第3次元にマッピングされる。
ユーザは、第3次元にマッピングする(図18a)形状(太線1031、通常は8個の円で記される)を選択し、その後ページアップキーを押下して形状内のノード全てのZレベル座標を変化させる。Zレベルにおける変化はIGMを介して画像平面に投影され、Zレベルにおける変化の視覚フィードバックを与える。望ましいレベルに到達する(図18b)と、ユーザはZレベルを変化させることを止め、形状をデータベース(図示せず)に保存することを選ぶことができる。
6.精度査定
測定の正確性が広範囲にテストおよび評価された。まとめとして、これらのテスト結果は、サブメートルでの正確性が達成されうることを意味し、従って広範囲の商用アプリケーションに対して満足できるものである。この正確性は飛行高度、物体の高さ、地形利用可能性、画像解像度、画像ピクセルの測定、およびIGMの正確性に依存する。
本発明はさらに、本発明の動作を拡張する追加機能の統合を考慮している。例えば、測定ユーティリティの機能に、所定のパラメータに基づいて、より効果的な収束を可能とするプロセスを組み込んでもよい。
7.コンピュータプラットフォーム
測定ユーティリティおよびモデル生成ユーティリティは、その配置の容易さ、低い計算オーバーヘッド、IGM(即ち、RFM)に対する制限の少なさ、および立体視装置の必要性がないことにより、PC、ワークステーション、サーバー、PDAなどの最も一般的なコンピュータ化プラットフォームに配置できる。
8.ウェブまたはネットワーク可能な環境
測定ユーティリティ8およびモデル生成ユーティリティ9は、その配置の容易さ、低い計算オーバーヘッド、画像幾何モデルに対する制限の少なさ、および立体視装置の必要性がないことを考えると、ウェブ、インターネット、およびワイヤレスネットワークなどのネットワークベースのアプリケーションに最適である。
図19は、本発明がウェブ可能な環境内で様々な形態(影付きのコンポーネント)で配置されうることを示している。本発明はクライアントアプリケーション20、ウェブブラウザベースのプラグイン(ActiveXコントロール)またはJava(登録商標)アプレット22、アプリケーションサーバ24およびポータルベースのウェブサービス26として配置されることができる。本発明は、ワイヤレスポータル、PDAまたは携帯電話等のコンピュータ化されたプラットフォームに、公知の方法でほとんど修正なしに埋め込むこともできる。
9.商用アプリケーション
本発明は、以下を含む広範囲のアプリケーションに対して、画像の利点の利用を可能とする。
・ビルの高さ、橋の撤去作業、道路幅、滑走路長、または森林伐採などの重要な施設および目標物の情報を取得すること。
・原子力発電所、空港、都市、公共の安全に対する重要なインフラおよび国際情報などの、重要な施設の3Dサイトマップを作成すること。
・災害による損害地域(森林火災、洪水、地震など)を、保険監査および緊急対応のために測定すること。
・都市開発、可視化およびシミュレーション、ゲーム、政府、輸送、土木工学などに対するモデリングおよびプランニング。
その応用は広い:
・防衛
・環境
・国家防衛
・電気通信
・可視化およびシミュレーション
・農業
・地方自治体
・地質学
・マッピング
・林業
・ユーティリティ
・不動産
・輸送計画
・保険
・メディア
・エンターテイメントおよびゲーム
本発明の他の変形および変更が可能である。例えば、本発明のコンピュータプログラム製品に追加機能を組み込んで、本明細書で提供した基本的な3D測定およびモデルデータを、単一画像に基づいて構築し、例えば平方キロメートルあたりの密度、都市の影の推定等を提供できる。本発明のコンピュータ製品は、他のアプリケーションと統合できる。そのような変更または変形の全ては、添付の特許請求の範囲で定義されるように、本発明の領域および範囲内にある。
本発明のコンピュータプログラム製品の機能にアクセスする代表的なグラフィックユーザインタフェースの概念図である。図示したツールバーボタンにより、本発明のユーティリティ機能にアクセスできる。 本発明のコンピュータプログラムのリソースを示すプログラムのリソースの図である。 画像表示ウィンドウに表示される測定ユーティリティ8の概念図である。 平坦な地表面を想定して、画像、IGM、物体、および太陽角に投じられた投影および影の間の関係を示す概略の図である。 水平位置(X,Y)を、高度Zを有する平面を単一画像内で交差させることで決定することを示す図である。高度Zは、多少増加させて調整する。 IGMに基づいた投影測定ユーティリティを使用したビルの高さ測定の概略図である。 IGMに基づいた本発明の投影測定ユーティリティを使用してビルの高さを測定することを示す概略図である。 太陽位置と、物体の影の変位との間の関係を示す図である。 本発明の方法を示す概略図、さらにとりわけ、平坦でない地表面を仮定して、物体の投影および影を描画する方法を示す概略図である。 本発明を図示するブロック図であり、画像内の測定可能な影に対して、影情報を使用して物体の高さを測定することを示す。 本発明を図示するブロック図であり、画像内の測定不可能な影に対して、影情報を使用して物体の高さを測定することを示す。 ビルである物体に対して影測定ユーティリティを使用し、その基準点から開始して高さの測定結果を取得することを示す、概略図である。 ビルである物体に対して影測定ユーティリティを使用し、その基準点から開始して高さの測定結果を取得することを示す、本発明の図である。 本発明に従って影測定ユーティリティを、図9aの場合は飛行機に使用して、それらの影の端点から開始して高さを測定することを示す図である。 本発明に従って影測定ユーティリティを、陸橋に使用して、それらの影の端点から開始して高さを測定することを示す図である。 本発明に従って影測定ユーティリティを、木に使用して、それらの影の端点から開始して高さを測定することを示す図である。 本発明に従って影測定ユーティリティを、煙突に使用して、それらの影の端点から開始して高さを測定することを示す図である。 本発明の影測定ユーティリティを使用して基準点を決定する図であり、飛行機の高さが57.1mと示されている。 本発明に従ってラインマークを描画することを示す図であり、線は基準点と滑走路の着地点とを結び、水平距離が158.1mとして示されている。 ラインマークの基準点を飛行機の高さへ上昇させることで本発明を示す図であり、直線距離が165.8mと示されている。 2つの物体の基準点を結ぶラインマークを描画するための本発明の動作を示す図である。 ラインマークの2つの端部にある基準点をそれら各々の屋根の高さまで上昇させることを動作で示すことで、本発明を示す図である。 本発明の特定の一態様を示す図であり、飛行機の機首と機尾の基準点が決定される。 図12aに示す本発明の特定の態様をさらに示す図であり、2つの基準点を接続する線が示される。 本発明をさらに示す図であり、多層のビルの高さが測定され、屋根の第1階層の高さが測定されて固定され、この高さは31mである。 本発明をさらに示す図であり、多層のビルの高さが測定され、屋根の第2階層の第1階層に対する高さが、前記固定された高さから開始して測定される。 数値地形モデル(DTM)を使用せずに測定した物体の次元のシステムバイアスを補償することの概略図である。 本発明に従った3Dマッピングに対する基準選択方法を示す図であり、ここでは基準点が選択される様子が表示されている。 本発明に従った3Dマッピングに対する基準選択方法を示す図であり、ここではZのレベルが、注釈および現在のZのレベルを動的に更新するユーザ経由で変更される様子が表示されている(実際の場合では黄色の線で与えられる)。 本発明に従った3Dマッピングに対する基準選択方法を示す図であり、ここではZのレベルが、注釈および現在のZのレベルを動的に更新するユーザ経由で変更される様子が表示されている(実際の場合では黄色の線で与えられる)。 本発明に従った3Dマッピングに対する基準選択方法を示す図であり、ここでは3Dマッピングツール(多角形)を使用してビルの頂上がアウトライン化される様子が表示されている。 本発明に従った3Dマッピングに対する基準選択方法を示す図であり、ここではビルのフットプリントが使用可能で表示されている。 本発明に従って平屋根のビルの3Dモデリングに対する屋根−フットプリント変位を示す図であり、ここでは3D多角形マッピングツールを使用して屋根のアウトラインをマッピングすることが示されている。 本発明に従って平屋根のビルの3Dモデリングに対する屋根−フットプリント変位を示す図であり、ここではビルの基準と一致するように屋根のアウトラインを水平変位することが示されている。 本発明に従って平屋根のビルの3Dモデリングに対する屋根−フットプリント変位を示す図であり、ここでは3Dのビルのモデルが構築されることが示されている。 切妻、半切妻、寄棟および片流れの屋根形状を有するビルのモデリングにおいてサポートされる屋根形状の概略図である。 本発明に従って2Dベクトルマップから3Dベクトルマップを作成することを示す図であり、ここではコンピュータプログラムへのインポート後に2Dにマッピングしたベクトルを選択することが示されている。 本発明に従って2Dベクトルマップから3Dベクトルマップを作成することを示す図であり、ここでは2Dにマッピングしたベクトルが、IGMを使用してそれをビルの頂上に上昇させることで、3Dベクトルにマッピングされることが示されている。 ウェブおよびネットワーク環境に本発明を配置することを一般的に示すシステムの図である。

Claims (23)

  1. 少なくとも1つの3次元物体の単一画像から、3次元測定情報を導出し、かつ/または3次元モデルおよびマップを作成する方法であって、
    (a)前記物体の少なくとも1つの2次元単一画像を取得するステップであって、前記画像は画像データから成りかつ画像幾何モデル(IGM)に関連付けられている、ステップと、
    (b)前記画像に関連付けられた3次元座標情報をIGMに基づいて導出し、前記3次元座標情報を前記画像データに関連付けるステップと、
    (c)
    (i)前記IGMを使用して前記物体の投影を測定し、前記物体に関する高さおよび/または点間距離を含む測定データを導出し、
    (ii)前記物体の影を測定し、前記物体に関する高さおよび/または点間距離を含む測定データを導出するように画像データを分析するステップと、
    (d)前記物体の前記投影および/または影の測定結果に基づいた3次元測定結果を取得するステップと
    を備えることを特徴とする方法。
  2. 前記画像データは測定ユーティリティの操作により分析されることを特徴とする請求項1に記載の方法。
  3. 前記投影および/または影の測定結果に基づいた3次元モデルまたはマップを作成するステップをさらに備えることを特徴とする請求項1に記載の方法。
  4. 前記画像データを分析する測定ユーティリティによって提供されるデータを利用して3次元モデルまたはマップを作成するよう動作可能なモデル生成ユーティリティの操作により、3次元モデルまたはマップを作成するステップをさらに備えることを特徴とする請求項1に記載の方法。
  5. 有理関数モデル(RFM)をIGMとして使用することを特徴とする請求項1に記載の前記方法。
  6. 前記物体の投影は投影ルーラを使用して測定され、前記物体の影は影ルーラを使用して測定され、前記投影ルーラおよび影ルーラの各々は測定ユーティリティにリンクされたグラフィックユーザインタフェースを介してアクセス可能であることを特徴とする請求項1に記載の方法。
  7. オペレータが前記投影ルーラを使用するステップをさらに備え、それにより、前記投影ルーラは前記画像内の前記物体の投影に適合し、
    (a)前記投影が測定可能な場合、前記投影は前記画像内で前記物体の基準点から真の頂点まで完全に投じられ、かつ
    (b)前記投影が測定不可能な場合、前記方法は前記測定不可能な投影を投ずるステップをさらに備える
    ことを特徴とする請求項6に記載の前記方法。
  8. オペレータが前記影ルーラを使用するステップをさらに備え、それにより、前記影ルーラは前記画像内の前記物体の影に適合し、
    (a)前記影が測定可能な場合、前記影は前記画像内で前記影の基準点から端点まで完全に投じられ、かつ
    (b)前記影が測定不可能な場合、前記方法は前記測定不可能な影を投ずるステップをさらに備える
    ことを特徴とする請求項6に記載の方法。
  9. 前記物体の影が測定可能な場合に、前記物体の影を測定するためのステップであって、
    (a)ユーザが、前記画像に関連付けられたグラフィックユーザインタフェースの操作によって前記画像内の基準点を選択するステップと、
    (b)測定ユーティリティの操作により、IGMを使用して前記基準点の地上座標を計算するステップと、
    (c)前記グラフィックユーザインタフェースの操作により、前記物体の高さを選択し、かつ調整することで前記物体の高さを調整するステップと、
    (d)前記測定ユーティリティが、前記基準点に対して推定した影の端点のオフセットを計算するステップと、
    (e)前記ユーザが、前記IGMを使用して前記測定ユーティリティの操作により、前記画像に対して前記物体の影の端点を投影するステップと、
    をさらに備えることを特徴とする請求項8に記載の方法。
  10. 前記物体の影が測定不可能な場合に、前記物体の影を測定するためのステップであって、
    (a)ユーザは、前記画像に関連付けられたグラフィックユーザインタフェースの操作によって前記画像内の前記影の端点を選択するステップと、
    (b)測定ユーティリティの操作により、IGMを使用して前記影の端点の地上座標を計算するステップと、
    (c)前記グラフィックユーザインタフェースの操作により、前記物体の高さを選択し、かつ調整することで前記物体の高さを調整するステップと、
    (d)前記測定ユーティリティは、前記基準点に対して推定した影の端点のオフセットを計算するステップと、
    (e)前記測定ユーティリティは、対応する前記投影ルーラの位置を計算するステップと、
    (f)前記ユーザは、前記IGMを使用して前記測定ユーティリティの操作により前記投影ルーラが前記物体の前記真の頂点に到達するとき、前記画像に対して前記物体の基準点を投影するステップと、
    の各ステップをさらに備えることを特徴とする請求項8に記載の方法。
  11. 前記測定ユーティリティは、以下の式を処理することにより前記基準点の地上座標(X,Y)を計算するものであって、
    Figure 0004773973
    ここで、rおよびcは画像内の選択された点の行および列の座標であって、
    Figure 0004773973
    および
    Figure 0004773973
    はX、Y、Zの近似値をIGMに代入することで推定され、ΔXおよびΔYは初期値に対する相関であり、∂r/∂X、∂r/∂Y、∂c/∂Xおよび∂c/∂Yは偏微分であることを特徴とする請求項9に記載の方法。
  12. 前記影のオフセットは、前記物体の近傍の平坦な地上に対して以下の式を処理することにより計算され、
    Figure 0004773973
    ここで、hは前記物体の高さ、θは前記画像の撮影時点の太陽高度、およびlは前記影の長さであることを特徴とする請求項9に記載の方法。
  13. 前記影のオフセットは、前記物体の近傍の平坦でない地上に対して以下の式を処理することにより計算され、
    Figure 0004773973
    ここで、
    Figure 0004773973
    であり、lは平坦な地上の影の長さであり、sは角度Ψを有する傾斜上の影の長さであり、前記物体の高さはh、および太陽高度はθである
    ことを特徴とする請求項9に記載の方法。
  14. 前記物体が平坦な表面上に位置決めされ、前記影の端点の座標が(X1,Y1,Z1)で、前記平坦な表面に対してZ1がZ0に等しいとき、前記物体の影の長さは以下の式を処理することにより計算され、
    Figure 0004773973
    ここで、hは前記物体の高さであり、θは前記画像の撮影時点の太陽高度であることを特徴とする請求項9に記載の方法。
  15. 前記3次元測定は、(a)高さ、(b)3Dでの距離、(c)見通し距離、(d)体積、または(e)3Dでの方位のうち1つまたは複数を含むことを特徴とする請求項1に記載の方法。
  16. 前記物体の投影全体が前記画像内で可視である場合に、少なくとも1つの3次元物体の単一画像から測定情報を導出するステップをさらに備え、
    (a)ユーザが、前記画像に関連付けられたグラフィックユーザインタフェースの操作によって前記画像内の基準点を選択するステップと、
    (b)測定ユーティリティの操作により、IGMを使用して前記基準点の地上座標を計算するステップと、
    (c)前記グラフィックユーザインタフェースの操作により、前記物体の選択された長さを選択しかつ調整することで前記物体の選択された長さを調整するステップと、
    (d)前記測定ユーティリティは、前記物体の選択された長さを計算するステップと
    からなるさらなるステップ群を備えることを特徴とする請求項1に記載の方法。
  17. 前記単一画像を取り込む際に水平および垂直方向に発生するシステムバイアスを前記物体の任意の点に対する変位を計算し、該変位だけ該任意の点をシフトすることによって補償するステップをさらに備える、請求項1に記載の方法。
  18. 前記物体に関する形状幾何(shape geometry)を確立し、3次元モデルおよび/またはマップを作成するため前記物体の形状幾何を使用するステップをさらに備えることを特徴とする請求項3に記載の方法。
  19. モデル生成ユーティリティの操作により様々な形状の3Dモデルを作成するステップをさらに備えることを特徴とする請求項3に記載の方法。
  20. モデル生成ユーティリティの操作により様々な屋根構造の3Dモデルを作成するステップをさらに備えることを特徴とする請求項3に記載の方法。
  21. 少なくとも1つの3次元物体の単一画像から3次元測定情報を導出し、および/または3次元モデルおよびマップを作成するシステムであって、
    (a)少なくとも1つのコンピュータと、
    (b)前記コンピュータが、
    (i)前記物体の少なくとも1つの2次元単一画像であって、画像データからなりかつ画像幾何モデル(IGM)に関連付けられている前記画像を、取得し、
    (ii)前記画像に関連付けられた3次元座標情報をIGMに基づいて導出し、前記3次元座標情報を前記画像データに関連付け、
    (iii)
    (A)IGMを使用して前記物体の投影を測定して、前記物体に関する高さおよび/または点間距離を含む測定データを導出し、かつ/または
    (B)前記物体の影を測定して、前記物体に関する高さおよび/または点間距離を含む測定データを導出するように前記画像データを分析し、
    (iv)前記物体の投影および/または影の測定結果に基づいて3次元測定結果を取得する
    ことができるようにするように前記コンピュータに動作可能にリンクされたコンピュータプログラムと
    を備えることを特徴とするシステム。
  22. 前記コンピュータプログラムはさらに、前記画像データを分析する測定ユーティリティによって提供されるデータを利用して3次元モデルまたはマップを作成するよう動作可能なモデル生成ユーティリティを定義するように前記コンピュータに動作可能にリンクされることを特徴とする請求項21に記載のシステム。
  23. コンピュータ使用可能記憶媒体であって、
    (i)物体の少なくとも1つの2次元単一画像であって、画像データからなりかつ画像幾何モデル(IGM)に関連付けられている前記画像を、取得し、
    (ii)前記画像に関連付けられた3次元座標情報をIGMに基づいて導出し、前記3次元座標情報を前記画像データに関連付け、
    (iii)
    (A)前記IGMを使用して前記物体の投影を測定し、前記物体に関する高さおよび/または点間距離を含む測定データを導出し、かつ/または
    (B)前記物体の影を測定し、前記物体に関する高さおよび/または点間距離を含む測定データを導出するように前記画像データを分析し、および
    (iv)前記物体の投影および/または影の測定結果に基づいて3次元測定結果を取得する
    ように動作可能である測定ユーティリティをコンピュータ上で定義する命令群を備えることを特徴とするコンピュータ使用可能記憶媒体。
JP2006548058A 2004-01-16 2005-01-14 単一像から、3d物体の測定、モデリングおよびマッピングのためのシステム、コンピュータプログラムおよび方法 Active JP4773973B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
CA2,455,359 2004-01-16
CA2455359A CA2455359C (en) 2004-01-16 2004-01-16 System, computer program and method for 3d object measurement, modeling and mapping from single imagery
PCT/CA2005/000043 WO2005068936A1 (en) 2004-01-16 2005-01-14 System,computer program and method for 3d object measurement, modeling and mapping from single imagery

Publications (2)

Publication Number Publication Date
JP2007522443A JP2007522443A (ja) 2007-08-09
JP4773973B2 true JP4773973B2 (ja) 2011-09-14

Family

ID=34744405

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2006548058A Active JP4773973B2 (ja) 2004-01-16 2005-01-14 単一像から、3d物体の測定、モデリングおよびマッピングのためのシステム、コンピュータプログラムおよび方法

Country Status (7)

Country Link
US (2) US7376284B2 (ja)
EP (1) EP1709396B1 (ja)
JP (1) JP4773973B2 (ja)
KR (1) KR101159379B1 (ja)
CN (1) CN1918451B (ja)
CA (1) CA2455359C (ja)
WO (1) WO2005068936A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20170019569A (ko) * 2015-08-11 2017-02-22 포항공과대학교 산학협력단 위치 보정을 위한 수중 랜드마크 인식 방법 및 장치

Families Citing this family (117)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7424133B2 (en) * 2002-11-08 2008-09-09 Pictometry International Corporation Method and apparatus for capturing, geolocating and measuring oblique images
WO2005098793A1 (ja) * 2004-03-31 2005-10-20 Pioneer Corporation 地図生成装置及びナビゲーション装置
JP4647514B2 (ja) * 2006-02-17 2011-03-09 株式会社日立ソリューションズ 航空画像処理装置および航空画像処理方法
US20070206005A1 (en) * 2006-02-21 2007-09-06 Nicholas Phelps Method for generating 3D views or landscapes
US7773085B2 (en) * 2006-03-07 2010-08-10 Graphics Properties Holdings, Inc. Flexible landscape display system for information display and control
US7853988B2 (en) * 2006-05-16 2010-12-14 Waterstone Environmental Hydrology & Engineering, Inc. State saver/restorer for a geospatial decision management system
US20080307498A1 (en) * 2006-12-27 2008-12-11 Waterstone Environmental Hydrology & Engineering, Inc. Access control for server-based geographic information system
US7853038B2 (en) * 2007-01-04 2010-12-14 Industrial Technology Research Institute Systems and methods for object dimension estimation
US8145578B2 (en) * 2007-04-17 2012-03-27 Eagel View Technologies, Inc. Aerial roof estimation system and method
US8078436B2 (en) * 2007-04-17 2011-12-13 Eagle View Technologies, Inc. Aerial roof estimation systems and methods
EP1986176A1 (en) * 2007-04-25 2008-10-29 Research In Motion Limited Bitmap array for optimally distributing map data content to wireless communications devices
DE202008018628U1 (de) * 2007-05-25 2017-01-13 Google Inc. System zur Wiedergabe, Ansicht und Kommentierung von Panoramabildern und dazugehörige Anwendungen
US7990394B2 (en) 2007-05-25 2011-08-02 Google Inc. Viewing and navigating within panoramic images, and applications thereof
WO2009008864A1 (en) * 2007-07-12 2009-01-15 Thomson Licensing System and method for three-dimensional object reconstruction from two-dimensional images
CN101126725B (zh) * 2007-09-24 2010-12-15 舒嘉 采用x射线容积摄影实现图像重建的方法
CA2701645C (en) * 2007-10-04 2017-09-26 Sungevity Methods and systems for provisioning energy systems
AU2014202326B2 (en) * 2007-10-04 2016-08-11 Sungevity System and method for provisioning energy systems
US20090094077A1 (en) * 2007-10-09 2009-04-09 Bryn Fosburgh Site development planning
JP5018404B2 (ja) * 2007-11-01 2012-09-05 ソニー株式会社 画像識別装置および画像識別方法、並びに、プログラム
US8531472B2 (en) 2007-12-03 2013-09-10 Pictometry International Corp. Systems and methods for rapid three-dimensional modeling with real façade texture
US8275194B2 (en) 2008-02-15 2012-09-25 Microsoft Corporation Site modeling using image data fusion
JP5192874B2 (ja) * 2008-03-28 2013-05-08 株式会社コナミデジタルエンタテインメント 画像処理装置、画像処理装置の制御方法及びプログラム
US20090295791A1 (en) * 2008-05-29 2009-12-03 Microsoft Corporation Three-dimensional environment created from video
US8204299B2 (en) * 2008-06-12 2012-06-19 Microsoft Corporation 3D content aggregation built into devices
KR101556593B1 (ko) 2008-07-15 2015-10-02 삼성전자주식회사 영상 처리 방법
US8731234B1 (en) 2008-10-31 2014-05-20 Eagle View Technologies, Inc. Automated roof identification systems and methods
US8209152B2 (en) 2008-10-31 2012-06-26 Eagleview Technologies, Inc. Concurrent display systems and methods for aerial roof estimation
US8170840B2 (en) 2008-10-31 2012-05-01 Eagle View Technologies, Inc. Pitch determination systems and methods for aerial roof estimation
US8643717B2 (en) * 2009-03-04 2014-02-04 Hand Held Products, Inc. System and method for measuring irregular objects with a single camera
WO2011034343A2 (ko) * 2009-09-15 2011-03-24 Suk Jey Ho 단일 광원과 평면 센서부를 이용하여 물체의 물리량을 측정하는 방법 및 이를 이용하는 가상 골프 시스템
TWI402479B (zh) * 2009-12-15 2013-07-21 Ind Tech Res Inst 深度感測方法及應用其之系統
KR20110068469A (ko) 2009-12-16 2011-06-22 인하대학교 산학협력단 메타정보 없는 단일 영상에서 3차원 개체정보 추출방법
CA2787004C (en) * 2010-01-26 2019-01-15 Saab Ab An automated three dimensional mapping method
US9911228B2 (en) * 2010-02-01 2018-03-06 Eagle View Technologies, Inc. Geometric correction of rough wireframe models derived from photographs
KR101015486B1 (ko) * 2010-04-28 2011-02-22 펑션베이(주) 웍피스 이송 시스템에서의 롤러 시스템에 대한 모델링 방법
US9014485B2 (en) * 2010-07-21 2015-04-21 Armin E. Moehrle Image reporting method
US9129438B2 (en) 2011-01-18 2015-09-08 NedSense Loft B.V. 3D modeling and rendering from 2D images
MX321872B (es) * 2011-02-21 2014-07-11 Nissan Motor Sistema de deteccion de objeto estacionario periodico y metodo de deteccion de objeto estacionario periodico.
CN102736393B (zh) 2011-04-07 2014-12-17 台达电子工业股份有限公司 用以显示多重视角影像的显示装置
US8768068B2 (en) * 2011-05-04 2014-07-01 Raytheon Company Automated building detecting
US10748092B2 (en) * 2011-06-07 2020-08-18 The Boeing Company Systems and methods for creating intuitive context for analysis data
US8687018B1 (en) 2011-09-23 2014-04-01 Google Inc. Collection and confirmation of place metadata and graphic representations of fixed objects displayed in a mapping system
US20140257862A1 (en) * 2011-11-29 2014-09-11 Wildfire Defense Systems, Inc. Mobile application for risk management
CN102494611B (zh) * 2011-12-05 2013-12-18 中国人民解放军国防科学技术大学 一种物体体积快速测量方法
US20130147919A1 (en) * 2011-12-09 2013-06-13 California Institute Of Technology Multi-View Difraction Grating Imaging With Two-Dimensional Displacement Measurement For Three-Dimensional Deformation Or Profile Output
US8774525B2 (en) 2012-02-03 2014-07-08 Eagle View Technologies, Inc. Systems and methods for estimation of building floor area
US9933257B2 (en) 2012-02-03 2018-04-03 Eagle View Technologies, Inc. Systems and methods for estimation of building wall area
US10515414B2 (en) 2012-02-03 2019-12-24 Eagle View Technologies, Inc. Systems and methods for performing a risk management assessment of a property
US9599466B2 (en) 2012-02-03 2017-03-21 Eagle View Technologies, Inc. Systems and methods for estimation of building wall area
US10663294B2 (en) 2012-02-03 2020-05-26 Eagle View Technologies, Inc. Systems and methods for estimation of building wall area and producing a wall estimation report
US9501700B2 (en) 2012-02-15 2016-11-22 Xactware Solutions, Inc. System and method for construction estimation using aerial images
US20150009215A1 (en) 2012-02-17 2015-01-08 Schlumberger Technology Corporation Generating a 3d image for geological modeling
US10387960B2 (en) 2012-05-24 2019-08-20 State Farm Mutual Automobile Insurance Company System and method for real-time accident documentation and claim submission
CN103017653B (zh) * 2012-11-27 2015-06-24 武汉海达数云技术有限公司 一种球面全景影像与三维激光扫描点云的配准及测量方法
CN103852066B (zh) * 2012-11-28 2016-08-17 联想(北京)有限公司 一种设备定位的方法、控制方法、电子设备及控制系统
CN103093388A (zh) * 2013-02-01 2013-05-08 河海大学 一种基于隧道掌子面的摄影地质编录系统
US10909482B2 (en) * 2013-03-15 2021-02-02 Pictometry International Corp. Building materials estimation
US9959581B2 (en) 2013-03-15 2018-05-01 Eagle View Technologies, Inc. Property management on a smartphone
US11587176B2 (en) 2013-03-15 2023-02-21 Eagle View Technologies, Inc. Price estimation model
CN103236085A (zh) * 2013-04-07 2013-08-07 昆明理工大学 一种flac3d复杂三维地质体模型自动建立的方法
CN103246964B (zh) * 2013-05-28 2016-01-06 国家电网公司 变电所一次设备安全检修监视方法
BR112015027610A2 (pt) * 2013-06-13 2017-09-19 Halliburton Energy Services Inc Métodos e sistemas de ferramenta de visualização direcionável para perfilagem durante a perfuração (lwd)
CA2820305A1 (en) * 2013-07-04 2015-01-04 University Of New Brunswick Systems and methods for generating and displaying stereoscopic image pairs of geographical areas
WO2015017855A1 (en) 2013-08-02 2015-02-05 Xactware Solutions, Inc. System and method for detecting features in aerial images using disparity mapping and segmentation techniques
CN105917337A (zh) 2013-08-29 2016-08-31 桑格威迪公司 改进太阳能系统的设计及安装报价
JP6271953B2 (ja) * 2013-11-05 2018-01-31 キヤノン株式会社 画像処理装置、画像処理方法
US10444954B2 (en) * 2013-11-11 2019-10-15 Here Global B.V. Distinguishable geographic area presentation
CN104751518B (zh) * 2013-12-30 2017-07-04 北京中盈安信技术服务股份有限公司 一种三维地图中贴地线的确定方法及装置
CN103810286B (zh) * 2014-02-25 2017-05-24 合肥亿图网络科技有限公司 一种用于二维地图与三维地图匹配的坐标点定位方法
CN104019829B (zh) * 2014-06-09 2017-02-15 武汉克利福昇科技有限责任公司 一种基于pos系统的车载全景相机和线阵激光扫描仪的外参标定方法
CN104091369B (zh) * 2014-07-23 2017-02-22 武汉大学 一种无人机遥感影像建筑物三维损毁检测方法
CN104133874B (zh) * 2014-07-25 2017-03-29 重庆数字城市科技有限公司 基于真彩色点云的街景影像生成方法
CN104296726B (zh) * 2014-10-10 2016-07-27 中国科学院长春光学精密机械与物理研究所 双面阵推扫立体测绘成像方法及成像系统
DE102014115046B4 (de) * 2014-10-16 2020-07-23 Deutsches Zentrum für Luft- und Raumfahrt e.V. Verfahren und Assistenzsystem zur Ermittlung eines Flugparameters eines Flugobjektes während des Fluges
CN104376596B (zh) * 2014-11-28 2017-05-31 北京航空航天大学 一种基于单幅图像的三维场景结构建模与注册方法
KR101644512B1 (ko) * 2014-12-19 2016-08-02 삼성중공업(주) 3차원 형상 모델링 장치 및 방법
CN104482921B (zh) * 2014-12-23 2016-09-07 河北工业大学 一种水面目标的测量方法
CN104700427B (zh) * 2015-04-03 2018-03-09 电子科技大学 一种基于sar图像的道路损毁信息提取方法
CN104931022B (zh) * 2015-04-21 2018-03-16 国家测绘地理信息局卫星测绘应用中心 基于星载激光测高数据的卫星影像立体区域网平差方法
GB2539030A (en) * 2015-06-04 2016-12-07 Ford Global Tech Llc Method and system for fitting items into a space
CN105302874A (zh) * 2015-10-09 2016-02-03 苏州盛景信息科技股份有限公司 基于地理云数据的空间匹配方法
US10217283B2 (en) 2015-12-17 2019-02-26 Google Llc Navigation through multidimensional images spaces
CA3012049A1 (en) 2016-01-20 2017-07-27 Ez3D, Llc System and method for structural inspection and construction estimation using an unmanned aerial vehicle
CN105783873B (zh) * 2016-02-24 2018-09-07 腾讯科技(深圳)有限公司 目标物的测量方法、高精度地图生成方法及相关装置
EP3228980B1 (de) 2016-04-08 2018-10-03 Siemens Aktiengesellschaft Schichtdickenmessung von erdabdeckungen
US10373319B2 (en) 2016-06-13 2019-08-06 International Business Machines Corporation Object tracking with a holographic projection
CN106126839B (zh) * 2016-06-29 2019-07-09 国家测绘地理信息局卫星测绘应用中心 一种三线阵立体测绘卫星成像仿真方法和系统
CN107679441B (zh) * 2017-02-14 2020-06-02 郑州大学 基于多时相遥感影像阴影提取城市建筑物高度的方法
US10656274B2 (en) * 2017-06-12 2020-05-19 Intergraph Corporation OnScene command vision
RU2680758C1 (ru) * 2017-11-14 2019-02-26 Федеральное государственное бюджетное образовательное учреждение высшего образования "Юго-Западный государственный университет" (ЮЗГУ) Способ построения трехмерной векторной карты по цифровой модели и снимку местности
US10503843B2 (en) 2017-12-19 2019-12-10 Eagle View Technologies, Inc. Supervised automatic roof modeling
CN107992856B (zh) * 2017-12-25 2021-06-29 南京信息工程大学 城市场景下的高分遥感建筑物阴影检测方法
US11290530B2 (en) * 2018-06-01 2022-03-29 Apple Inc. Customizable, pull-based asset transfer requests using object models
CN108898143B (zh) * 2018-06-28 2020-08-25 中国地震局地震预测研究所 一种建筑物损毁状态检测方法
CN108898144B (zh) * 2018-06-28 2020-12-11 中国地震局地震预测研究所 一种建筑物损毁状态检测方法
US10909713B2 (en) 2018-10-25 2021-02-02 Datalogic Usa, Inc. System and method for item location, delineation, and measurement
CN109612439B (zh) * 2018-12-13 2020-04-28 同济大学 基于有理函数模型的立体影像交会角和基线长度估计方法
CN110580443B (zh) * 2019-06-19 2022-03-08 深圳大学 一种低空近实时建筑震害评估方法
CN110851118B (zh) * 2019-10-21 2021-03-23 中国地质大学(武汉) 一种面向三维场景的矢量图标绘制方法及装置
US11094113B2 (en) 2019-12-04 2021-08-17 Geomni, Inc. Systems and methods for modeling structures using point clouds derived from stereoscopic image pairs
CN111121724A (zh) * 2019-12-31 2020-05-08 异起(上海)智能科技有限公司 一种使用无人机进行测距测量的方法和装置
JPWO2021149484A1 (ja) * 2020-01-20 2021-07-29
WO2021163219A1 (en) 2020-02-10 2021-08-19 Cognex Corporation Composite three-dimensional blob tool and method for operating the same
CN111462305B (zh) * 2020-03-17 2022-08-02 中国电建集团昆明勘测设计研究院有限公司 应用于农村房地一体的三维不动产管理方法
CN111599023B (zh) * 2020-04-02 2023-06-16 思创数码科技股份有限公司 一种大批量给城市建筑模型贴图方法和装置
CN111652071B (zh) * 2020-05-08 2023-08-29 中国工程物理研究院总体工程研究所 一种快速的跑道截断分析方法
CN111666910B (zh) * 2020-06-12 2024-05-17 北京博能科技股份有限公司 一种机场净空区障碍物检测方法、装置、和电子产品
CN111738135B (zh) * 2020-06-18 2024-02-23 中国林业科学研究院资源信息研究所 一种顾及斜距和地理坐标映射偏差的sar影像特征提取方法
US11367252B2 (en) 2020-10-01 2022-06-21 Here Global B.V. System and method for generating line-of-sight information using imagery
US20220108435A1 (en) * 2020-10-02 2022-04-07 Baker Hughes Oilfield Operations Llc Automated turbine blade to shroud gap measurement
KR102422292B1 (ko) * 2020-11-03 2022-07-18 김동욱 2차원 영상으로부터 3차원 좌표를 추출하는 방법 및 그 장치
CN113537063B (zh) * 2021-07-16 2022-09-13 海南省林业科学研究院(海南省红树林研究院) 一种基于综合遥感技术的森林环境遥感监测方法及终端
CN115393528B (zh) * 2022-09-20 2023-04-18 中国地震局地球物理研究所 一种古地震探槽的三维建模方法及其系统
CN115620278B (zh) * 2022-11-15 2023-03-10 广州奇志信息科技有限公司 一种识别和测量物料的方法
CN116311325B (zh) * 2023-02-16 2023-10-27 江苏艾佳家居用品有限公司 一种基于人工智能模型的比例尺自动识别系统
CN117433952B (zh) * 2023-12-21 2024-02-27 西南石油大学 一种重晶石粉密度快速测量方法
CN118172499B (zh) * 2024-03-13 2024-08-20 重庆邮电大学 一种基于资源三号遥感影像的建筑高度反演方法

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10332334A (ja) * 1997-06-04 1998-12-18 Hitachi Ltd 画像処理による位置計測方法および装置
JP2003177017A (ja) * 2001-10-03 2003-06-27 Mamoru Otsuki 写真測量方法および写真測量プログラム

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US137673A (en) * 1873-04-08 Improvement in spring-mattresses
US3674369A (en) * 1968-09-18 1972-07-04 Hobrough Ltd Automatic orthophoto printer
US5943164A (en) * 1994-11-14 1999-08-24 Texas Instruments Incorporated Curved 3-D object description from single aerial images using shadows
JP3622094B2 (ja) * 1995-10-05 2005-02-23 株式会社日立製作所 地図更新支援装置および地図情報の編集方法
AR000543A1 (es) * 1995-12-26 1997-07-10 Prignano Juan Pedro Alfr Volpe Procedimiento para concretar figuras tridimensionales a partir de cualquier imagen expresada en superficie plana
US5926581A (en) * 1996-04-25 1999-07-20 Lockheed Martin Corporation System for topographic mapping from remotely sensed images
US6169553B1 (en) * 1997-07-02 2001-01-02 Ati Technologies, Inc. Method and apparatus for rendering a three-dimensional scene having shadowing
JP3599268B2 (ja) * 1999-03-08 2004-12-08 株式会社ソニー・コンピュータエンタテインメント 画像処理方法、画像処理装置及び記録媒体
FR2798761B1 (fr) * 1999-09-17 2002-03-29 Thomson Multimedia Sa Procede de construction d'un modele de scene 3d par analyse de sequence d'images
US6795068B1 (en) * 2000-07-21 2004-09-21 Sony Computer Entertainment Inc. Prop input device and method for mapping an object from a two-dimensional camera image to a three-dimensional space for controlling action in a game program
JP3497805B2 (ja) * 2000-08-29 2004-02-16 オリンパス株式会社 画像投影表示装置
US6757445B1 (en) * 2000-10-04 2004-06-29 Pixxures, Inc. Method and apparatus for producing digital orthophotos using sparse stereo configurations and external models
US6735348B2 (en) * 2001-05-01 2004-05-11 Space Imaging, Llc Apparatuses and methods for mapping image coordinates to ground coordinates
US20030137673A1 (en) * 2002-12-13 2003-07-24 Cox Cary B. Systems, and methods of use, employing distorted patterns to ascertain the shape of a surface, for road or runway profiling, or as input to control pro-active suspension systems
US6983034B2 (en) * 2003-02-14 2006-01-03 University Of Iowa Research Foundation Methods and devices for CT reconstruction using a grangeat approach

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10332334A (ja) * 1997-06-04 1998-12-18 Hitachi Ltd 画像処理による位置計測方法および装置
JP2003177017A (ja) * 2001-10-03 2003-06-27 Mamoru Otsuki 写真測量方法および写真測量プログラム

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20170019569A (ko) * 2015-08-11 2017-02-22 포항공과대학교 산학협력단 위치 보정을 위한 수중 랜드마크 인식 방법 및 장치

Also Published As

Publication number Publication date
CN1918451B (zh) 2010-10-06
KR101159379B1 (ko) 2012-06-27
WO2005068936A1 (en) 2005-07-28
US20080089610A1 (en) 2008-04-17
EP1709396A4 (en) 2011-10-19
KR20070054593A (ko) 2007-05-29
US20080310756A1 (en) 2008-12-18
EP1709396B1 (en) 2015-12-30
CN1918451A (zh) 2007-02-21
CA2455359C (en) 2013-01-08
US7995862B2 (en) 2011-08-09
EP1709396A1 (en) 2006-10-11
US7376284B2 (en) 2008-05-20
JP2007522443A (ja) 2007-08-09
CA2455359A1 (en) 2005-07-16

Similar Documents

Publication Publication Date Title
JP4773973B2 (ja) 単一像から、3d物体の測定、モデリングおよびマッピングのためのシステム、コンピュータプログラムおよび方法
Fernández‐Hernandez et al. Image‐based modelling from unmanned aerial vehicle (UAV) photogrammetry: an effective, low‐cost tool for archaeological applications
KR20110068469A (ko) 메타정보 없는 단일 영상에서 3차원 개체정보 추출방법
EP1813113A2 (en) Computational solution of an building of three dimensional virtual models from aerial photographs
Moyano et al. Evaluation of records using terrestrial laser scanner in architectural heritage for information modeling in HBIM construction: The case study of the La Anunciación church (Seville)
KR102038590B1 (ko) 다수 측량기기를 이용한 다차원측량정보 생성 시스템, 방법 및 컴퓨터 프로그램
Oliveira et al. 3D modelling of laser scanned and photogrammetric data for digital documentation: the Mosteiro da Batalha case study
Al-Ruzouq et al. Archaeological site information modelling and management based on close-range photogrammetry and GIS
Ma et al. Low‐Altitude Photogrammetry and Remote Sensing in UAV for Improving Mapping Accuracy
El-Hakim et al. Sensor based creation of indoor virtual environment models
KR101189167B1 (ko) 메타정보 없는 단일 영상에서 3차원 개체정보 추출방법
Pagounis et al. Detection of geometric changes for an historic theatre by comparing surveying data of different chronological periods
Ragia et al. Precise photorealistic visualization for restoration of historic buildings based on tacheometry data
Al-Ruzouq et al. Photogrammetry and GIS for three-dimensional modeling of the Dome of the Rock
Poli et al. Reality-based 3D city models from aerial satellite data
Hamal et al. Usability of wearable mobile laser systems in cadastral studies
Keeney Using Unmanned Aerial Systems (UAS) and Photogrammetry to Remotely Assess Landslide Events in Near Real-Time
Naser et al. Preliminary quality assurance of printgrammetry technique-3D modeling from Google Earth 3D imagery data
Radović 3D MODELS OF OBJECTS IN PROCESS OF RECONSTRUCTION
Chiabrando et al. Digital wide scale orthoprojections and mapping from low-height aerial images
Psaltakis et al. Developing an H-BIM-Ready Model by Fusing Data from Different Sensors
iota Psaltakis et al. Developing an H-BIM-Ready Model by Fusing Data from Different Sensors
Sadjadi An investigation of architectural and archaeological tasks involving digital terrestrial photogrammetry
Guo et al. Seismic Deformation Analysis of Precast Concrete Pipe Hybrid Based on 3D LiDAR and Unmanned Aerial Vehicle Photogrammetry.
Taha et al. a GIs approach to GNss simulation in urban canyons

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20080108

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A712

Effective date: 20080325

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20080325

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20101029

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20101102

RD13 Notification of appointment of power of sub attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7433

Effective date: 20101118

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20101118

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110201

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20110610

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20110624

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140701

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Ref document number: 4773973

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313111

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250