JP5669438B2 - 対象管理画像生成装置及び対象管理画像生成プログラム - Google Patents

対象管理画像生成装置及び対象管理画像生成プログラム Download PDF

Info

Publication number
JP5669438B2
JP5669438B2 JP2010115876A JP2010115876A JP5669438B2 JP 5669438 B2 JP5669438 B2 JP 5669438B2 JP 2010115876 A JP2010115876 A JP 2010115876A JP 2010115876 A JP2010115876 A JP 2010115876A JP 5669438 B2 JP5669438 B2 JP 5669438B2
Authority
JP
Japan
Prior art keywords
image
management
photographic image
changing
shooting
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2010115876A
Other languages
English (en)
Other versions
JP2011243076A (ja
Inventor
小野 直樹
直樹 小野
秀明 黒須
秀明 黒須
豊 中崎
豊 中崎
裕明 坂下
裕明 坂下
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Pasco Corp
Original Assignee
Pasco Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Pasco Corp filed Critical Pasco Corp
Priority to JP2010115876A priority Critical patent/JP5669438B2/ja
Publication of JP2011243076A publication Critical patent/JP2011243076A/ja
Application granted granted Critical
Publication of JP5669438B2 publication Critical patent/JP5669438B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Description

本発明は、対象管理画像生成装置及び対象管理画像生成プログラムの改良に関する。
従来、道路、河川及びそれらに付随して設けられた各種設備や施設を管理するため、あるいはナビゲーションシステム等に使用するために写真画像や地図情報が使用されてきた。例えば、下記特許文献1には、走行予定経路の現在位置の鳥瞰画像と、車載のカメラで撮影した現在位置の前方視界の画像とを合成して表示する位置表示システムが記載されている。
特開2005−233710号公報
しかし、上記従来の技術においては、写真画像の取得、地図情報との合成等に専用の機材やソフトウエアが必要であり、コストが高くなるという問題があった。
本発明の目的は、既存の写真画像と地図情報とを使用して、簡易に管理対象の画像を生成できる対象管理画像生成装置及び対象管理画像生成プログラムを提供することにある。
上記目的を達成するために、本発明の第1の実施形態は、対象管理画像生成装置であって、撮影位置及び撮影方向を属性として有する写真画像を取得する画像取得手段と、地図情報から管理対象の座標データを取得する座標データ取得手段と、前記撮影位置及び撮影方向と前記座標データとに基づき、前記管理対象の存在位置を表す画像を前記写真画像上に重畳する対象物重畳手段と、を備えることを特徴とする。
また、第2の実施形態は、上記対象管理画像生成装置において、前記管理対象が複数直線上に配列されている場合に、前記対象物重畳手段が、前記撮影位置と前記座標データから求めた管理対象の配列線の位置とから、前記撮影位置と前記管理対象の配列線との距離を演算するとともに、前記撮影方向と前記管理対象の配列線方向とのなす角度を演算し、前記演算した距離及び角度に基づいて前記管理対象の配列線を前記写真画像上に重畳することを特徴とする。
また、第3の実施形態は、上記対象管理画像生成装置が、前記管理対象の存在位置を表す画像の前記写真画像上の位置を補正する位置補正手段を備えることを特徴とする。
また、第4の実施形態は、上記対象管理画像生成装置において、前記位置補正手段が、前記写真画像を変更せず、前記管理対象の存在位置を表す画像を見る方向を変えることにより管理対象の存在位置を表す画像を変更し、または前記管理対象の存在位置を示す画像を変更せず、前記写真画像を平行移動させることを特徴とする。
また、第5の実施形態は、上記対象管理画像生成装置において、前記対象物重畳手段が、前記写真画像として動画を使用することを特徴とする。
また、第6の実施形態は、対象管理画像生成プログラムであって、コンピュータを、撮影位置及び撮影方向を属性として有する写真画像を取得する画像取得手段、地図情報から管理対象の座標データを取得する座標データ取得手段、前記撮影位置及び撮影方向と前記座標データとに基づき、前記管理対象の存在位置を表す画像を前記写真画像上に重畳する対象物重畳手段、として機能させることを特徴とする。
本発明によれば、既存の写真画像と地図情報とを使用して、簡易に管理対象の画像を生成することができる。
本実施形態にかかる対象管理画像生成システムの構成例を示す図である。 対象管理画像生成装置、写真画像データベース及び地図情報データベースを構成するコンピュータのハードウェア構成の例を示す図である。 本実施形態にかかる対象管理画像生成装置の適用例の説明図である。 カメラの位置と写真画像の仮想投影面との関係の説明図である。 図3の撮影位置Aから撮影した写真画像の例を示す図である。 本実施形態にかかる対象管理画像生成システムの動作例のフロー図である。 補正方法1の説明図である。 補正方法1の説明図である。 カメラによる撮影状況を上から見た場合の概念図である。 実際の現場における管理対象の存在位置を確認するための画面構成例を示す図である。
以下、本発明を実施するための形態(以下、実施形態という)を、図面に従って説明する。
図1には、本実施形態にかかる対象管理画像生成システムの構成例が示される。図1において、対象管理画像生成システムは、対象管理画像生成装置100、写真画像データベース102、地図情報データベース104及び表示装置106を含んで構成されている。
対象管理画像生成装置100は、写真画像データベース102から撮影位置及び撮影方向を属性として有する写真画像を取得し、地図情報データベース104から道路等に設けられた管理対象である設備や施設の座標データを取得し、これらの撮影位置及び撮影方向並びに管理対象の座標データに基づいて、管理対象の存在位置を表す画像を写真画像上に重畳して表示装置106に表示する。ここで、重畳とは、後述する写真画像の仮想投影面38上に管理対象の存在位置を表す画像を投影することをいう。
このように、撮影位置及び撮影方向を属性として有する写真画像であれば、本実施形態の対象管理画像生成システムに適用できるので、対象管理画像生成システムに専用の機材を使用する必要がなく、写真画像から管理対象を管理するための対象管理画像を低コストで生成することができる。なお、撮影位置のみを有する写真画像では、後述するように、撮影位置の変化方向(配列方向)から撮影方向を決定することができるので、写真画像の属性としては、少なくとも撮影位置に関する情報を有していればよい。
写真画像データベース102には、車両等に載置したCCDカメラ等の撮影装置により撮影した写真画像が登録(格納)されており、適宜な通信手段により対象管理画像生成装置100に写真画像を送信する。また、各写真画像には、そのサムネイル画像を作成して格納しておくのが好適である。写真画像に属性として付与されている撮影位置は、撮影位置の座標データであり、2次元地図上での位置を表す2次元座標データ(例えば緯度、経度データ)、またはこれらの2次元座標データに標高データを加えた3次元座標データである。また、撮影方向は、少なくとも方位角(ヨーイング角)すなわちカメラレンズの光軸方向の水平成分を含み、上記光軸方向の仰俯角(ピッチング角)、すなわち水平成分に直交する成分または光軸方向に対する回転角(ローリング角)を含んでもよい。登録されている写真画像は、適宜な識別情報(ucode(登録商標)、ID符号等)を付与し、この識別情報により写真画像を指定する構成でもよいし、属性としての撮影位置により指定する構成でもよい。また、写真画像は、静止画でもよいし静止画を複数枚連続させて構成された動画であってもよい。
また、地図情報データベース104には、管理対象の位置情報(座標データ)を含む地図情報が登録され、適宜な通信手段により対象管理画像生成装置100に地図情報を送信する。上記座標データは、2次元地図上での位置を表す2次元座標データ(例えば緯度、経度データ)であるが、これらの2次元座標データに標高データを加えた3次元座標データであってもよい。ここで、管理対象は地上、地下、河川等に設けられた設備や施設であれば限定されないが、本実施形態は、地下に埋設された設備(例えば、上下水道配管)等の、通常目視で確認しにくい設備等に適用するのが好適である。管理対象は、上記地図情報に含まれているものから利用者が指定するが、指定の方法は地図情報ごとに予め定めた方法(例えば、ucode、ID符号等を指示情報として入力する、2次元地図の画像上でポインティングデバイスのクリック操作を行う等)を使用することができる。
図2には、図1に示された対象管理画像生成装置100、写真画像データベース102及び地図情報データベース104を構成するコンピュータのハードウェア構成の例が示される。図2において、対象管理画像生成装置100は、中央処理装置(例えばマイクロプロセッサ等のCPUを使用することができる)10、ランダムアクセスメモリ(RAM)12、読み出し専用メモリ(ROM)14、入力装置16、通信装置18及び記憶装置20を含んで構成されており、これらの構成要素は、バス22により互いに接続されている。また、入力装置16、通信装置18及び記憶装置20は、それぞれ入出力インターフェース24を介してバス22に接続されている。
CPU10は、RAM12またはROM14に格納されている制御プログラムに基づいて、後述する各部の動作を制御する。RAM12は主としてCPU10の作業領域として機能し、ROM14にはBIOS等の制御プログラムその他のCPU10が使用するデータが格納されている。
また、入力装置16は、キーボード、ポインティングデバイス等により構成され、使用者が動作指示等を入力するために使用する。
また、通信装置18は、USB(ユニバーサルシリアルバス)ポート、ネットワークポートその他の適宜なインターフェースにより構成され、CPU10がネットワーク等の通信手段を介して外部の装置とデータをやり取りするために使用する。
また、記憶装置20は、ハードディスク等の磁気記憶装置であり、写真画像データベース102、地図情報データベース104の他、後述する処理に必要となる種々のデータを記憶する。なお、記憶装置20としては、ハードディスクの代わりに、デジタル・バーサタイル・ディスク(DVD)、コンパクトディスク(CD)、光磁気ディスク(MO)、フレキシブルディスク(FD)、磁気テープ、電気的消去および書換可能な読出し専用メモリ(EEPROM)、フラッシュ・メモリ等を使用してもよい。
なお、写真画像データベース102、地図情報データベース104及び表示装置106は、対象管理画像生成装置100と同じコンピュータ上に構成されていてもよいし、別々のコンピュータ上に構成して、適宜な通信手段により情報のやり取りをする構成としてもよい。
図1に戻り、対象管理画像生成装置100は、画像取得部26、地図情報取得部28、対象物重畳部30、表示制御部32及び位置補正部34を含んで構成されており、これらの機能は例えばCPU10とCPU10の処理動作を制御するプログラムにより実現される。
画像取得部26は、通信装置18を介して写真画像データベース102から写真画像を、その撮影位置及び撮影方向に関する属性情報とともに取得する。なお、写真画像とともにそのサムネイル画像を取得する構成としてもよい。写真画像データベース102から取得する写真画像は、地図情報データベース104に含まれる管理対象が設置された地域の写真画像であり、利用者が入力装置16から上記識別情報等を入力することにより指定される。なお、後述する図10において、指定方法の例を説明する。
地図情報取得部28は、通信装置18を介して地図情報データベース104から管理対象である設備や施設の座標データを取得する。どの設備等を管理対象にするかの指示は、利用者が入力装置16から所定の指示情報を入力することにより行う。
対象物重畳部30は、上記写真画像の撮影位置及び撮影方向と、管理対象の座標データとに基づき、管理対象の存在位置を表す画像(存在位置を示す線分やポリゴン、点の位置を表す2次元座標にRGB等の輝度情報を付加した画像)を前記写真画像の仮想投影面38上に重畳する。重畳する手順については後述する。
表示制御部32は、対象物重畳部30が管理対象の存在位置を表す画像を重畳した写真画像を、表示装置106に表示させる。
位置補正部34は、表示制御部32が写真画像の仮想投影面38上に重畳した管理対象の存在位置を表す画像の写真画像上の位置を補正する。これにより、写真画像と管理対象の存在位置を表す画像とのずれを修正する。補正方法については後述する。
図3には、本実施形態にかかる対象管理画像生成装置の適用例の説明図が示される。図3の例は、2次元地図であり、道路Rと建物Bとが示されている。また、道路Rに設けられたマンホールMが丸印で、各マンホールMを結ぶように道路下(路面の下)に設けられた下水配管Pが破線により示されている。これらのマンホールM及び下水配管Pは、その位置を表す座標データを属性として付与されている。なお、下水配管Pの位置を表す座標データは、例えば所定間隔ごとに配管上の点を設定し、この点の位置の座標データから生成したベクトルデータ上で内挿または外挿により求めることができる。
本例では、撮影位置AからCCDカメラ等により撮影され、撮影位置Aの座標及び撮影方向を属性として付与された、路面を含む写真画像に、上記マンホールM及び下水配管Pの存在位置を表す画像が重畳される。
上記写真画像は、撮影位置Aを中心とした半径L、中心角θの扇形状の領域Fを撮影した画像であり、予め写真画像データベース102に登録された画像から、画像取得部26が取得する。例えば、半径Lは撮影位置Aと仮想投影面38との水平距離と、中心角θはカメラの水平方向の画角とすることができる。なお、本実施形態にかかる対象物重畳部30は、写真画像データベース102に登録された写真画像の代わりに、CCDカメラ等により撮影された写真画像を直接カメラから(写真画像データベース102を経由せずに)取得して使用する構成としてもよい。
写真画像を撮影するCCDカメラ等には、従来公知の方法により撮影位置と撮影方向とを取得する構成を備えておく。撮影位置は、例えばカメラに搭載したGPS(全地球測位システム)及びIMU(慣性計測装置)により計測し、撮影方向は、例えばIMUにより計測することができる。なお、複数の写真画像を、その撮影位置を連続的に変更しながら撮影(例えばカメラを搭載した車両を走行させながら撮影)した場合には、カメラの撮影角度と車両の進行方向とを考慮した上で、撮影位置の変化方向(車両の走行方向)を撮影方向としてもよい。この場合、ある撮影位置における撮影方向は、当該撮影位置と、撮影の順番が次の撮影位置との座標データを取得し、当該撮影位置から次の撮影位置までのベクトルを発生し、このベクトルを撮影方向とすることにより決定できるが、この方法に限定されるものではない。例えば、上記方法では交差点の頂点に撮影位置が無い場合には、交差点の頂点が欠ける(交差点をバイパスした方向が撮影方向とされてしまう)という問題が生じる。この場合には、例えば道路ネットワークデータを利用し、交差点前後の撮影位置にバッファを設定して各撮影位置が属する道路ラインデータを選択し、これらの交点情報を利用して撮影方向の転換点である交差点の頂点を求め、撮影方向を設定することができる。
図4は、カメラ36と仮想投影面38とを横(撮影方向と直交する方向)から見た図であり、カメラ36の位置(例えば撮影位置Aをカメラ36に備えられる撮像素子(CCD)の位置)と写真画像の仮想投影面38との関係が示される。図4において、fはカメラ36の焦点距離であり、カメラ36の画角は撮像素子の大きさと焦点距離とから求めることができる。仮想三次元空間上にカメラ36の撮影位置Aの座標を定め、当該位置から撮影方向に予め定めた水平距離Lの位置に、カメラ36の撮影方向及び縦横の画角により画像表示範囲が決まる仮想投影面38を設定する。この仮想投影面38上に、カメラ36により撮影された遠近感のある写真画像が投影される。また、カメラ36の撮影位置Aと仮想投影面38の下端とを結ぶ線40が地面Rsと交わる点Cpは、写真画像の下端に現れる地面の位置となる。この点Cpの位置は、対象物重畳部30が、撮影位置Aと仮想投影面38(写真画像の投影面)との距離L及び撮影に使用したカメラの画角、撮影方向に基づいて算出する。
図5(a),(b)には、図3の撮影位置Aから撮影した写真画像の例が示される。図5(a)の例では、撮影位置Aの座標、カメラの焦点距離、画角から任意の距離Lにおける写真画像が仮想投影面38に透視投影されている。図5(a)において、写真画像の下端の辺が、図4に示された点Cpに対応しており、カメラ36中心と仮想投影面38の下端とを結ぶ線40が地面Rsと交わる位置を示している。また、写真画像として表示される範囲は、カメラ36の画角及び撮影方向により決定される。
また、図5(b)の例は、図5(a)に示された写真画像上に、図3に示された管理対象としてのマンホールM及び下水配管Pの存在位置を表す画像を重畳した図である。重畳とは写真画像が透視投影されている仮想投影面38上に、上記管理対象の存在位置を表す画像を、その標高(地図情報が地上あるいは地下方向の高さ(深さ)情報を持っている場合にはこれらを含む)で透視投影することを意味する。図5(b)の例では、マンホールMが白丸で、下水配管Pが適宜な太さの線で、それぞれ表示されている。なお、これらのマンホールM及び下水配管Pの存在位置を表す画像の色は、適宜選択できる。
図6には、本実施形態にかかる対象管理画像生成システムの動作例のフローが示される。図6において、利用者が入力装置16から入力した指示情報に基づき、地図情報取得部28が地図情報データベース104から撮影位置Aを含む地図情報を取得する(S1)。上記指示情報には、例えば撮影位置Aを含ませておき、地図情報取得部28が写真画像の撮影位置Aの座標データを参照し、この撮影位置Aから所定範囲の地図情報を地図情報データベース104から取得して対象物重畳部30に渡す構成としてもよい。また、所定範囲としては、例えば撮影位置Aと写真画像の仮想投影面38との距離Lを用いることができる。
次に、画像取得部26は、利用者が入力装置16から入力した指示情報に基づいて、写真画像データベース102から、図3及び図5(b)に示される撮影位置Aから撮影した写真画像を取得して対象物重畳部30に渡す(S2)。なお、写真画像の選択は、S1で取得した地図情報を表示制御部32が表示装置106に表示させ、利用者が表示された画像を参照し、撮影位置Aをマウス等のポインティングデバイスで指定することにより行う構成としてもよい。また、写真画像は静止画、静止画を複数枚連続させて構成された動画のいずれであってもよい。なお、S1とS2の処理順序はこれに限定されるものではなく、逆順としてもよい。
対象物重畳部30は、上記地図情報に含まれる管理対象の座標データを取得する(S3)。図3の例では、マンホールMと下水配管Pの座標データを取得する。なお、本例のマンホールMと下水配管Pとは、利用者が入力装置16から入力した指示情報により管理対象として指定されている。また、下水配管Pは地下に埋設された設備であり、写真画像には写らないが、表示制御部32によりその存在位置が線分等で写真画像上に表示される。
次に、対象物重畳部30は、管理対象であるマンホールMと下水配管Pの座標データから求めた2次元地図上における位置及び図4に示された撮影位置A、カメラ36の画角及び撮影方向を元に地図情報の表示範囲Lに含まれるマンホールMと下水配管Pの地図情報を透視投影し、写真画像上に重畳する(S4)。ここで、地図情報が高さ情報を持たない平面図である場合は、標高値が0の三次元モデルとして透視投影を行う。一方、地図情報が地上あるいは地下方向の高さ(深さ)情報を持っている場合には、当該情報を元に三次元モデルを生成し、これを透視投影することにより、更に位置合わせ精度の高い重畳処理が可能となる。
表示制御部32は、対象物重畳部30が重畳したマンホールM及び下水配管Pと写真画像とを表示装置106に表示する(S4)。本例では、図5(b)に示されるように、下水配管Pの設置線を適宜な太さの直線により表示する。なお、写真画像が動画である場合には、動画を構成する各静止画に対して上記重畳処理を行う。
なお、対象物重畳部30にて、図3及び図5(b)に示すように、上記撮影位置Aと、マンホールMと下水配管Pの座標データから求めた管理対象の配列線(本例では下水配管Pの設置線)の位置とから、撮影位置Aと上記管理対象の配列線との距離D、及び、写真画像の撮影方向yと管理対象の配列線方向とのなす角度αを演算し、これらの値に基づいて管理対象の存在位置を表す画像と写真画像との重畳処理における位置合わせを行い、初期重畳画像として表示することも可能である。この場合、後述する位置補正処理(S5)を軽減することができる。
次に、位置補正部34は、表示制御部32が写真画像に重畳して表示した管理対象の存在位置を表す画像の写真画像上における位置を補正する(S5)。これは、管理対象の存在位置を表す画像を写真画像に重畳する、すなわち仮想投影面38に透視投影する場合に、写真画像と管理対象の存在位置を表す画像とに生じたずれを修正する必要があるためである。このずれは、例えばカメラ36の撮影時における方位角(ヨーイング角)、車両が走行する路面の傾きに基づく仰俯角(ピッチング角)、光軸方向に対する回転角(ローリング角)の変動、及び撮影位置、座標データの精度等に基づいて発生する。また、高さ方向に対して立体的に存在している管理対象を平面図として表現した地図情報を用いる場合には、この影響もずれに含まれる。なお、補正の指示は、利用者が表示装置106に表示された画像を参照しながら、入力装置16から入力する。
以上の工程により、写真画像上に管理対象の存在位置を表す画像を重畳して表示することができる。なお、上述した、図6の各ステップを実行するためのプログラムは、記録媒体に格納することも可能であり、また、そのプログラムを通信手段によって提供しても良い。
上記位置補正部34が実行する補正の方法については以下の2種類がある。
<補正方法1>
図7、図8(a),(b)には、補正方法1の説明図が示される。本補正方法1では、仮想投影面38上に投影された写真画像の位置を変更せず、管理対象の存在位置を表す画像を見る位置(以後、視点位置という)を変えて、管理対象が仮想投影面38上に投影される位置を変更する。
図7を用いて、視点位置と、管理対象の存在位置を表す画像上の点Pの仮想投影面38上への投影点との関係について説明する。視点位置1は、撮影位置と同じ位置であり、この位置と点Pを結んだ直線が仮想投影面38と交差する点を視点位置1から見た点Pの投影点P1とする。同様に、視点位置1から水平方向に移動した視点位置2から見た点Pの投影点をP2、視点位置1から垂直方向に移動した視点位置3から見た点Pの投影点をP3とする。
図8(a)は視点位置1から見た丸印及び直線で示された管理対象(例えばマンホールと下水配管)の仮想投影面38上への投影像、図8(b)は視点位置2から見た管理対象の仮想投影面38上への投影像であり、図に示すように、仮想三次元空間上で視点位置を変えることにより、上記丸印及び直線を仮想投影面38上で移動させることができる。この結果、写真画像と管理対象の存在位置を表す画像とに生じたずれを補正することができる。視点位置3を用いた場合も、同様にずれを補正することができる。
なお、視点位置を移動している間は、破線で示された道路を含む写真画像の仮想投影面38上における位置(撮影位置)は固定しておく。上記補正は、図5(b)の例では、例えば写真画像上に表示された複数のマンホールに対して、マンホールMの位置にマンホールを表す丸印がなるべく重なるように視点位置(仮想投影面上での管理対象の存在位置)を移動させることにより行う。
<補正方法2>
本補正方法2は、補正方法1を行った結果に対して必要に応じて行う処理であり、仮想投影面38上に投影された管理対象の存在位置(すなわち視点位置)を変更せず、写真画像の位置を左右方向に平行移動させて、その仮想投影面38上へ投影される位置を変更する。あるいは、仮想投影面38上に投影された画像を平行移動させることも可能である。なお、上記例では写真画像を左右方向に平行移動させているが、上下方向に垂直移動させたり、あるいはこれらを組合わせ任意の方向へ移動させることも可能である。更に、撮影画像のローリング角が分かっている場合にはこの値を元に撮影画像を回転させることもでき、また撮影位置から仮想投影面38までの距離Lを変えて距離遠近補正や表示倍率の変更を行うことも可能である。
図9(a)の例は、カメラ36による撮影状況を上から見た場合の概念図であり、道路R及び黒丸で示された適宜な設備が、カメラ36の画角及び撮影方向により決まる撮影範囲に存在している。これらの道路R及び設備は、写真画像として仮想投影面38上に透視投影される。ここで、図9(a)に示されるカメラ36の撮影位置を図9(b)に示されるカメラ36の撮影位置に移動すると、撮影範囲も同じ方向に移動し、破線で示される範囲が撮影されることになる。このとき、仮想投影面38も同じ方向に移動するので、仮想投影面38に透視投影される写真画像は、カメラ36の移動方向とは反対方向に平行移動することになる。なお、図9(a),(b)の例では、カメラ36を図の上下方向に移動させているが、図の左右方向に移動させてもよい。また、これらを組合わせることも可能である。更に、撮影画像のローリング角が分かっている場合には、この値を元に撮影画像を回転、遠近補正および表示倍率を変更することも可能である。
図9(a),(b)の場合においては、管理対象の存在位置を表す画像の仮想投影面38上における位置(例えば平行する2本の下水配管の仮想投影面38上での位置関係)を変えることはできないが、写真画像の撮影位置を適宜調整するとともに、投影された画像の縮尺を変えることにより、位置合わせの微調整を行うことができる。
また、上述した補正方法1,2により得られた表示用のパラメータを記憶しておき、対応する写真画像と管理対象の存在位置を表す画像との組合わせを重畳表示する場合には、同じパラメータにて表示する構成とするのが好適である。
図10には、実際の現場における管理対象の存在位置を確認するための画面構成例が示される。図10において、表示装置106に表示された画面には、2次元地図(ベースマップと記載)表示領域42とサムネイル表示領域44と写真画像表示領域46とが表示されている。
2次元地図表示領域42には、道路R、建物B、マンホールM(黒丸印)が示され、各マンホールMを結ぶように道路下(路面の下)に設けられた下水配管Pが実線により示されている。また、黒四角印により撮影位置Aが示されている。本実施形態では、1つの撮影位置Aにおいて、1枚または複数枚の写真画像が撮影されており、当該撮影位置Aの座標データを介して撮影位置Aを表す各黒四角印に対応付けられて、写真画像データベース102に格納されている。利用者が、入力装置16を構成するポインティングデバイスのクリック操作等により適宜な撮影位置Aを指定すると、画像取得部26が写真画像データベース102から撮影位置Aに対応付けられた1枚または複数枚の写真画像及びそのサムネイル画像を取得し、表示制御部32が、当該サムネイル画像をサムネイル表示領域44に表示する。なお、サムネイル表示領域44に表示される各サムネイル画像は、画像取得部26が写真画像を取得する際に写真画像データベース102から取得する代わりに、表示制御部32が写真画像から作成する構成としてもよい。
次に、利用者が、上記サムネイル表示領域44に表示されたサムネイル画像の中から適宜なものをポインティングデバイスのクリック操作等により指定すると、表示制御部32が、指定されたサムネイル画像に対応する写真画像を写真画像表示領域46に表示する。また、このとき、上述した図6の各ステップにより、マンホールM及び下水配管P等の管理対象の存在位置を表す画像が上記写真画像に重畳される。
これにより、利用者は、簡易な操作により管理対象の存在位置を写真画像上で容易に確認することができる。
また、図10に示された2次元地図表示領域42において、管理対象の存在位置を表す画像(例えばマンホールMを表す黒丸印)をポインティングデバイスのクリック操作等により指定した場合に、当該管理対象が撮影されている画像群が選択・表示される構成としてもよい。この場合、各管理対象の存在位置を表す画像には、図3で説明したように、座標データが属性として付与されているので、ポインティングデバイスのクリック操作等により指定された座標データを表示制御部32が取得することができる。また、図3で説明したように、撮影位置Aに基づいて、撮影した領域Fが予めわかっている。そこで、表示制御部32は、上記取得した座標データ(管理対象の存在位置)を画像取得部26に渡し、画像取得部26が写真画像データベース102から、上記座標データから一定範囲にある撮影位置Aの写真画像を取得し、各写真画像の領域Fに上記座標データが含まれているものを検索して表示制御部32に渡し、表示制御部32がこれらの写真画像群を表示する構成とする。写真画像群は、サムネイル表示領域44にサムネイル画像として表示し、利用者がポインティングデバイス等により選択する構成としてもよい。
10 CPU、12 RAM、14 ROM、16 入力装置、18 通信装置、20 記憶装置、22 バス、24 入出力インターフェース、26 画像取得部、28 地図情報取得部、30 対象物重畳部、32 表示制御部、34 位置補正部、36 カメラ、38 仮想投影面、40 線、42 2次元地図表示領域、44 サムネイル表示領域、46 写真画像表示領域、100 対象管理画像生成装置、102 写真画像データベース、104 地図情報データベース、106 表示装置。

Claims (5)

  1. 撮影位置及び撮影方向を属性として有する写真画像を取得する画像取得手段と、
    地図情報から管理対象の座標データを取得する座標データ取得手段と、
    前記撮影位置及び撮影方向と前記座標データとに基づき、前記管理対象の存在位置を表す画像を前記写真画像上に重畳する対象物重畳手段と、
    前記写真画像の位置を変更せず、管理対象の存在位置を、その標高を表す画像を見る位置を変えて、管理対象の位置を変更する第1補正処理と、前記第1補正処理の後、前記管理対象の存在位置を変更せず、写真画像の位置を平行移動させ、回転させ、距離遠近補正し、又は表示倍率を変更する第2補正処理とを表示装置に表示させて実行し、前記管理対象の存在位置を表す画像の前記写真画像上の位置を補正する位置補正手段と、
    を備えることを特徴とする対象管理画像生成装置。
  2. 請求項1に記載の対象管理画像生成装置において、前記管理対象が複数直線上に配列されている場合に、前記対象物重畳手段は、前記撮影位置と前記座標データから求めた管理対象の配列線の位置とから、前記撮影位置と前記管理対象の配列線との距離を演算するとともに、前記撮影方向と前記管理対象の配列線方向とのなす角度を演算し、前記演算した距離及び角度に基づいて前記管理対象の配列線を前記写真画像上に重畳することを特徴とする対象管理画像生成装置。
  3. 請求項1または請求項2に記載の対象管理画像生成装置において、前記位置補正手段は、前記写真画像を変更せず、前記管理対象の存在位置を表す画像を見る方向を変えることにより管理対象の存在位置を表す画像を変更し、または前記管理対象の存在位置を示す画像を変更せず、前記写真画像を平行移動させることを特徴とする対象管理画像生成装置。
  4. 請求項1から請求項3のいずれか一項に記載の対象管理画像生成装置において、前記対象物重畳手段は、前記写真画像として動画を使用することを特徴とする対象管理画像生成装置。
  5. コンピュータを、
    撮影位置及び撮影方向を属性として有する写真画像を取得する画像取得手段、
    地図情報から管理対象の座標データを取得する座標データ取得手段、
    前記撮影位置及び撮影方向と前記座標データとに基づき、前記管理対象の存在位置を表す画像を前記写真画像上に重畳する対象物重畳手段、
    前記写真画像の位置を変更せず、管理対象の存在位置を、その標高を表す画像を見る位置を変えて、管理対象の位置を変更する第1補正処理と、前記第1補正処理の後、前記管理対象の存在位置を変更せず、写真画像の位置を平行移動させ、回転させ、距離遠近補正し、又は表示倍率を変更する第2補正処理とを表示装置に表示させて実行し、前記管理対象の存在位置を表す画像の前記写真画像上の位置を補正する位置補正手段、
    として機能させることを特徴とする対象管理画像生成プログラム。
JP2010115876A 2010-05-20 2010-05-20 対象管理画像生成装置及び対象管理画像生成プログラム Active JP5669438B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2010115876A JP5669438B2 (ja) 2010-05-20 2010-05-20 対象管理画像生成装置及び対象管理画像生成プログラム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2010115876A JP5669438B2 (ja) 2010-05-20 2010-05-20 対象管理画像生成装置及び対象管理画像生成プログラム

Publications (2)

Publication Number Publication Date
JP2011243076A JP2011243076A (ja) 2011-12-01
JP5669438B2 true JP5669438B2 (ja) 2015-02-12

Family

ID=45409643

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2010115876A Active JP5669438B2 (ja) 2010-05-20 2010-05-20 対象管理画像生成装置及び対象管理画像生成プログラム

Country Status (1)

Country Link
JP (1) JP5669438B2 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7212335B1 (ja) 2021-11-25 2023-01-25 株式会社オカトク マンホール情報管理システムおよびマンホール情報管理方法、ならびにマンホール情報管理プログラム

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5904955B2 (ja) * 2013-02-12 2016-04-20 三菱電機株式会社 携帯用端末装置およびその装置を用いた不可視物設備の位置特定方法
JP6197405B2 (ja) * 2013-06-28 2017-09-20 株式会社リコー 情報処理装置、情報処理システム、および情報処理プログラム
JP6236101B2 (ja) * 2015-02-26 2017-11-22 Tepco光ネットワークエンジニアリング株式会社 インフラ設備の管理システムとその方法ならびにその表示システム、それに用いられるサーバ、端末装置およびプログラム
JP2017083423A (ja) * 2015-10-23 2017-05-18 清水建設株式会社 移動局及びこれを用いた埋設物可視化システム
JP2019138754A (ja) * 2018-02-09 2019-08-22 オリンパス株式会社 管路検査情報表示装置及び管路検査情報表示方法

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004213355A (ja) * 2002-12-27 2004-07-29 Canon Inc 情報処理方法
JP2005233710A (ja) * 2004-02-18 2005-09-02 Hitachi Software Eng Co Ltd 位置表示システム
JP4717760B2 (ja) * 2006-08-31 2011-07-06 三菱電機株式会社 物体認識装置および映像物体測位装置

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7212335B1 (ja) 2021-11-25 2023-01-25 株式会社オカトク マンホール情報管理システムおよびマンホール情報管理方法、ならびにマンホール情報管理プログラム
JP2023077652A (ja) * 2021-11-25 2023-06-06 株式会社オカトク マンホール情報管理システムおよびマンホール情報管理方法、ならびにマンホール情報管理プログラム

Also Published As

Publication number Publication date
JP2011243076A (ja) 2011-12-01

Similar Documents

Publication Publication Date Title
EP3550513B1 (en) Method of generating panorama views on a mobile mapping system
JP4940036B2 (ja) 立体メジャー表示機能付き画像表示システム及び立体メジャー表示機能付き画像表示のプログラム
JP5669438B2 (ja) 対象管理画像生成装置及び対象管理画像生成プログラム
KR20190051704A (ko) 스테레오 카메라 드론을 활용한 무기준점 3차원 위치좌표 취득 방법 및 시스템
CN108810473B (zh) 一种在移动平台上实现gps映射摄像机画面坐标的方法及系统
JP4619962B2 (ja) 路面標示計測システム、白線モデル計測システムおよび白線モデル計測装置
WO2009124028A2 (en) Estimating pose of photographic images in 3d earth model using human assistance
KR101852368B1 (ko) Uav 촬영을 통한 vrs 지상기준점 방식의 지하시설물 정보 측정방법
KR100822814B1 (ko) Gps/ins 장비를 이용한 측량 정보 및 gis 지리정보, 실시간 영상정보를 결합한 공간정보 서비스방법
Honkamaa et al. Interactive outdoor mobile augmentation using markerless tracking and GPS
JP6238101B2 (ja) 数値表層モデル作成方法、及び数値表層モデル作成装置
KR102097416B1 (ko) 표고차를 고려한 지하관로의 관리를 위한 증강 현실 표현 방법 및 이를 기록한 기록매체
CN103200358A (zh) 摄像机与目标场景之间的坐标转换方法及装置
JP2011133840A (ja) 監視カメラ画像を用いた連動表示計測システム
US20160169662A1 (en) Location-based facility management system using mobile device
JP5311465B2 (ja) ステレオマッチング処理システム、ステレオマッチング処理方法、及びプログラム
JP2964402B1 (ja) 三次元地図データベースの作成方法及び装置
JP5814620B2 (ja) 位置補正データ生成装置、位置標定装置、位置補正データ生成装置の位置補正データ生成方法、位置標定装置の位置標定方法、位置補正データ生成プログラムおよび位置標定プログラム
JP2010045693A (ja) 路線の3次元動画生成用画像取得システム
US11348321B2 (en) Augmented viewing of a scenery and subsurface infrastructure
JP7277410B2 (ja) 拡張現実表示装置
TW201137313A (en) Real-time image navigation system and method
JP2009239621A (ja) 画像上方位表示方法及び装置並びに写真
US11869159B2 (en) High density 3D environment capture with guided mixed reality
US20230023906A1 (en) System and method for determining mediated reality positioning offset for a virtual camera pose to display geospatial object data

Legal Events

Date Code Title Description
RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20120130

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20130517

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20140210

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20140225

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140416

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20140708

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20141007

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20141015

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20141118

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20141216

R150 Certificate of patent or registration of utility model

Ref document number: 5669438

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250