JP2002352224A - 画像測定表示装置、画像測定表示システム、施工管理方法、施工状態監視システム - Google Patents

Abstract

(57)【要約】 【課題】 製作・施工対象物の詳細な計測と設計図との
比較を正確に行える画像測定表示装置を提供する。 【解決手段】 画像撮影部２２０で撮影した対象物の一
対のステレオ画像から対象物の形状データを測定する形
状測定部３５０と、対象物の画像に関連した目標データ
を記憶する記憶部３４０と、対象物の一対のステレオ画
像と前記目標データに基づく前記対象物のステレオ目標
データ画像とを重畳させて表示する画像表示部３３０
と、形状測定部３５０で測定された対象物データと前記
目標データとを比較し、画像表示部３３０の前記重畳さ
せた表示において前記比較結果を反映させる比較表示処
理部３６０を備えている。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】この発明は、ダムや発電所の
ような大規模構造物や宅地造成等の製作・施工作業に用
いて好適な画像測定表示装置、画像測定表示システム、
施工管理方法に関し、特に製作・施工担当者が設計図ど
おりに製作・施工できているか容易に把握できるものに
関する。また、本発明は、施工管理事務所にて製作・施
工対象物の製作・施工状態を把握する画像測定表示装
置、画像測定表示システム、施工管理方法に関し、特に
製作・施工対象物の詳細な計測と設計図との比較を正確
に行えるものに関する。さらに、本発明は、毎日の製作
・施工作業の進捗状況を正確に把握して、施工計画に適
合するように製作・施工作業を再計画するのに有益な施
工状態監視システムに関する。

【０００２】

【従来の技術】従来は、土木関係において、施工する際
に設計図通りに作業するために、設計形状を示す縄や目
印となるもの（位置、向き等）をいわゆる丁張として作
業者が設置し、その丁張を目安として作業を進めてい
た。近年では、一歩進めた方法として施工作業をするパ
ワーショベルやブルドーザのような作業機械にセンサー
をとりつけ、水平位置をレーザーで作業者がモニターし
ながら作業したり、あるいは自動制御しながら施工する
方法が開発されている（例えば、本出願人の提案にかか
る特開平１１−２３６７１６号公報参照）。また、遠隔
操作により監視カメラで施工状態を撮影し、監視カメラ
による施工状態撮影画像と設計画像を重ねて、施工担当
者による施工を行おうという提案も行われている。

【０００３】

【発明が解決しようとする課題】しかしながら、上述の
施工管理手法によれば、施工担当者にとって実際に設計
図通りに施工していくのが難しく、時間がかかると同時
に修正が多かった。 丁張を設置する方法では、設計図との大まかな比較
しかできないため概略しかわからず、さらに施工現場に
よっては地形が急峻で設置の難しい場合も多い。また丁
張設置作業も作業者が行わざるを得ず、特に地山の状態
では非常に時間の係る場合も少なくない。 レーザーを利用する方法では、水平位置の制御を主
目的としており、傾斜地や法面の施工には補助機器が必
要である。この補助機器の設置において、地山の状態に
より地形が急峻で設置の難しい場合も多いことは丁張設
置と同様である。 監視カメラにより遠隔操作にて施工状態を撮影し
て、撮影画像と設計図と比較して施工する方法は、その
設計図であるＣＧ(Computer Graphics)画像と実画像を
重ね合わせが旨く行かず、設計画像が実画像に埋もれて
しまいよく見えないという課題がある。また、施工担当
者にとって更なる問題は、カメラの撮影する画像の視点
が、実際に作業機械を操作する施工担当者の視点とかな
り相違しているため、撮影画像と設計図の相違を少なく
するように作業機械を操作する為には、かなりの熟練を
要するという課題があった。

【０００４】他方、施工管理担当者においては、日々の
施工状態の進捗状況を把握することが難しく、現在の状
態から、現在ならびに今後の工数や施工状態、施工予定
等を迅速に把握し決定することが困難であるという課題
があった。大規模構造物の製作・施工作業においては設
備投資額も高額になるため、納期や工期を確実に守るこ
とが施主に対して必要となり、大規模構造物の受注条件
に適合するように施工管理することは極めて大切であ
る。

【０００５】本発明は、上述する課題を解決するもの
で、第１の目的は製作・施工対象物の詳細な計測と設計
図との比較を正確に行える画像測定表示装置を提供する
ことである。第２の目的は、製作・施工担当者が設計図
どおりに製作・施工できているか容易に把握でき、設計
図どおりの施工が簡便に行なうことを可能とする画像測
定表示装置を提供することである。第３の目的は、毎日
の製作・施工作業の進捗状況を正確に把握して、施工計
画に適合するように製作・施工作業を柔軟に構築するの
に有益な施工状態監視システムを提供することにある

【０００６】

【課題を解決するための手段】前記第１の目的を達成す
る画像測定表示装置に関する第１の発明は、図１又は図
２１に示すように、画像撮影部２２０で撮影した対象物
の一対のステレオ画像から対象物の形状データを測定す
る形状測定部３５０と、対象物の画像に関連した目標デ
ータを記憶する記憶部３４０と、対象物の一対のステレ
オ画像と前記目標データに基づく前記対象物のステレオ
目標データ画像とを重畳させて表示する画像表示部３３
０、１１０ａと、前記対象物の形状データと前記目標デ
ータとを比較し、画像表示部３３０、１１０ａの前記重
畳させた表示において前記比較結果を反映させる比較表
示処理部３６０を備えている。

【０００７】このように構成された装置においては、形
状測定部３５０により画像撮影部２２０で撮影した対象
物の一対のステレオ画像から対象物の形状データを測定
することで、施工現場の施工状況を遠隔測定している。
記憶部３４０には、対象物の画像に関連した目標データ
が記憶されており、施工現場の完成目標となる目標デー
タが格納されている。画像表示部３３０、１１０ａは、
対象物の一対のステレオ画像と前記目標データに基づく
前記対象物のステレオ目標データ画像とを重畳させて表
示するもので、例えば作業機械の操縦室や作業機械から
離れた作業管理者の近傍に配置される。比較表示処理部
３６０、１２０ａは、前記対象物の形状データと前記目
標データとを比較し、画像表示部３３０、１１０ａの重
畳させた表示において比較結果を反映させるもので、作
業者又は作業管理者はこの比較結果の重畳表示によって
施工現場の現況と目標データとの関連性を容易に把握で
きる。

【０００８】前記第１の目的を達成する画像測定表示装
置に関する第２の発明は、図１又は図２１に示すよう
に、画像撮影部２２０で撮影した対象物の一対のステレ
オ画像から対象物の形状データを測定する形状測定部３
５０と、画像撮影部２２０の撮影位置を測定するカメラ
位置取得部２５０及び自動追尾式測量機２５２が相当す
る撮影位置測定部と、対象物の画像に関連した目標デー
タを記憶する記憶部３４０と、撮影位置測定部（２５
０、２５２）で測定された撮影位置に基づき、前記対象
物の画像と前記目標データに基づく目標データ画像とを
重畳させて表示する画像表示部３３０、１１０ａと、撮
影位置測定部（２５０、２５２）で測定された撮影位置
に基づき、前記対象物の形状と前記目標データに対応す
る目標データ対応形状とを比較し、画像表示部３３０、
１１０ａの重畳させた表示において前記比較結果を反映
させる比較表示処理部３６０、１２０ａとを備えてい
る。

【０００９】このように構成された装置においては、撮
影位置測定部（２５０、２５２）にて画像撮影部２２０
の撮影位置を測定している。そこで、画像表示部３３
０、１１０ａや比較表示処理部３６０、１２０ａの対象
物の形状と前記目標データに対応する目標データ対応形
状の比較や重ね合わせにおいて、撮影位置測定部（２５
０、２５２）で測定された撮影位置情報を用いること
で、重ね合わせに必要とされる画像変換処理が円滑に行
える。

【００１０】好ましくは、第１および第２の発明におい
て、比較表示処理部３６０、１２０ａによる前記比較結
果の反映は、前記対象物の形状と前記目標データ対応形
状との比較結果が略一致した個所について、画像表示部
３３０、１１０ａに前記略一致した個所を識別可能に表
示されるように構成されていると、目標データに到達し
たか否かを基準とする施工状態が容易に分かる。好まし
くは、第１および第２の発明において、比較表示処理部
３６０、１２０ａの比較結果として前記対象物と前記目
標データとの距離又は間隔を対応させ、前記対象物と前
記目標データとの大小関係を識別可能に画像表示部３３
０、１１０ａにて表示されるように構成されていると、
前記対象物と前記目標データとの大小関係を用いて施工
状態が目標データに到達したか否かを容易に判別でき
る。好ましくは、第１および第２の発明において、比較
表示処理部３６０、１２０ａ並びに画像表示部３３０、
１１０ａの目標データとして、前記対象物の施工段階ご
との中間目標データを設定する中間目標データ設定手段
３７０を備え、比較表示処理部３６０、１２０ａは、前
記対象物の形状と前記中間目標データに対応する中間目
標データ対応形状とを比較するように構成されている
と、日々の作業の進捗状態に合わせた的確な中間目標デ
ータが作業担当者や作業管理者に把握できる状態で表示
される。

【００１１】前記第２の目的を達成する画像測定表示装
置に関する第３の発明は、図１に示すように、画像撮影
部２２０で撮影した対象物の一対のステレオ画像から対
象物の形状データを測定する形状測定部３５０と、対象
物の画像に関連した目標データを記憶する記憶部３４０
と、目標データに関連した対象物を目視できる状態で、
前記目標データに基づく前記対象物のステレオ目標デー
タ画像を重畳させて表示する画像観察部１１０と、形状
測定部３５０で測定された対象物の形状と前記目標デー
タに対応する形状とを比較し、画像観察部１１０のステ
レオ目標データ画像表示において前記比較結果を反映さ
せる比較観察表示処理部１２０とを備えている。

【００１２】このように構成された装置においては、形
状測定部３５０により画像撮影部２２０で撮影した対象
物の一対のステレオ画像から対象物の形状データを測定
することで、施工現場の施工状況を遠隔測定している。
記憶部３４０には、対象物の画像に関連した目標データ
を記憶されており、施工現場の完成目標となる目標デー
タが格納されている。画像観察部１１０は、目標データ
に関連した対象物を目視できる状態で、目標データに基
づく前記対象物のステレオ目標データ画像を重畳させて
表示する。比較観察表示処理部１２０は、形状測定部３
５０で測定された対象物の形状と前記目標データに対応
する形状とを比較し、画像観察部１１０のステレオ目標
データ画像表示において前記比較結果を反映させる。

【００１３】前記第２の目的を達成する画像測定表示装
置に関する第４の発明は、図１に示すように、画像撮影
部２２０で撮影した対象物の一対のステレオ画像から対
象物の形状データを測定する形状測定部３５０と、画像
撮影部２２０の撮影位置を測定する撮影位置測定部（２
５０、２５２）と、対象物の画像に関連した目標データ
を記憶する記憶部３４０と、撮影位置測定部（２５０、
２５２）で測定された撮影位置に基づき、目標データに
関連した対象物を目視できる状態で、前記目標データに
基づく前記対象物のステレオ目標データ画像を重畳させ
て表示する画像観察部１１０と、撮影位置測定部（２５
０、２５２）で測定された撮影位置に基づき、形状測定
部３５０で測定された対象物の形状と前記目標データに
対応する形状とを比較し、画像観察部１１０のステレオ
目標データ画像表示において前記比較結果を反映させる
比較観察表示処理部１２０とを備えている。

【００１４】このように構成された装置においては、撮
影位置測定部（２５０、２５２）にて画像撮影部２２０
の撮影位置を測定している。そこで、画像観察部１１０
や比較観察表示処理部１２０の対象物の形状と前記目標
データに対応する目標データ対応形状の比較や重ね合わ
せにおいて、撮影位置測定部（２５０、２５２）で測定
された撮影位置情報を用いることで、ステレオ目標デー
タ画像表示を現実の対象物の見える像を重ね合わせるの
に必要とされる画像変換処理が円滑に行える。

【００１５】好ましくは、第３および第４の発明におい
て、画像観察部１１０はヘッドアップディスプレイ又は
ヘッドマウントディスプレイの少なくとも一方を含む構
成とすると、作業担当者の肉眼で対象物を見ながらステ
レオ目標データ画像を見ることが視線を動かすことなく
容易に行える。好ましくは、第３および第４の発明にお
いて、比較観察表示を行うための画像を形成する画像処
理部１２０による前記比較結果の反映は、前記対象物の
形状と前記目標データ対応形状との比較結果が略一致し
た個所について、画像観察部１１０に前記略一致した個
所を識別可能に表示するように構成されていると、目標
データに到達したか否かを基準とする施工状態が容易に
分かる。好ましくは、第３および第４の発明において、
比較観察表示を行うための画像を形成する画像処理部１
２０の比較結果として前記対象物と前記目標データとの
距離又は間隔を対応させ、前記対象物と前記目標データ
との大小関係を識別可能に画像観察部１１０にて表示す
るように構成されていると、前記対象物と前記目標デー
タとの大小関係を用いて施工状態が目標データに到達し
たか否かを容易に判別できる。

【００１６】前記第１および第２の目的を達成する画像
測定表示システムに関する第５の発明は、図１に示すよ
うに、対象物の一対のステレオ画像を取得する画像撮影
部２２０と、画像撮影部２２０で取得した画像を表示す
る画像観察部１１０と、前記対象物の画像に関連した目
標データを記憶する記憶部３４０、前記画像撮影部で得
た対象物の画像に基づき画像処理を行う画像演算処理部
３２０を含む施工状態計測装置３００とを備え、画像撮
影部２２０、画像観察部１１０並びに施工状態計測装置
３００間でデータの授受を行う画像測定表示システムに
関する。施工状態計測装置３００は、さらに、画像撮影
部２２０で得た前記対象物の一対のステレオ画像から対
象物の形状を測定する形状測定部３５０と、形状測定部
３５０で測定された対象物の形状と前記目標データに対
応する形状とを比較する比較表示処理部３６０とを備え
ている。画像観察部１１０は、画像撮影部２２０で得ら
れた対象物の画像と施工状態計測装置３００から送られ
てきた前記目標データに基づく目標データ画像とを重畳
させて表示するように構成されている。

【００１７】好ましくは、画像撮影部２２０を含む監視
ユニット２００、画像観察部１１０を含む施工表示装置
１００、並びに施工状態計測装置３００間でデータの授
受は、無線、光通信、インターネット、電線のいずれか
一つを用いると既設の通信インフラを利用できて好まし
い。

【００１８】前記第２の目的を達成する施工管理方法に
関する第６の発明は、図４に示すように、施工表示装置
１００の三次元位置を撮影位置測定部（２５０、２５
２）により求め（Ｒ１０）、マルチステレオ画像にて距
離画像をリアルタイムで面的に取得し（Ｒ１０）、施工
表示装置１００の三次元位置により目標データと施工中
の対象物のステレオ画像を重ね合わせて表示し（Ｓ４
０、Ｓ６０）、目標データと施工中の対象物に関するス
テレオ画像の偏差情報に基づいて、作業機械の作業を行
わせる（Ｒ４０、Ｒ５０）工程を含むものである。

【００１９】前記第１の目的を達成する施工管理方法に
関する第７の発明は、図４に示すように、施工表示装置
１００の三次元位置を撮影位置測定部（２５０、２５
２）により求め（Ｒ１０）、マルチステレオ画像にて距
離画像をリアルタイムで面的に取得し（Ｒ１０）、前記
マルチステレオ画像の計測を行い（Ｓ５０）、目標デー
タと施工中の対象物の現況から施工進行状況を解析し
（Ｓ７０）、前記目標データを実現する施工計画を施工
進行状況の解析結果に基づいて随時更新する（Ｓ８
５）、工程を含むものである。

【００２０】前記第３の目的を達成する施工状態監視シ
ステムに関する第８の発明は、図１に示すように、請求
項１乃至請求項５の何れか一つに記載の画像測定表示装
置（施工表示装置１００、監視ユニット２００、施工状
態計測装置３００）と、比較表示処理部３６０の比較結
果から、対象物を目標データに加工又は処理を行うまで
の作業関連データを算定する施工計画立案修正手段３８
０とを備える。

【００２１】

【発明の実施の形態】以下、本発明の実施の形態につい
て、図面を参照して説明する。なお、各図において互い
に同一あるいは相当する部材には同一符号又は類似符号
を付し、重複した説明は省略する。図１は本発明に係る
施工表示装置と施工状態計測装置とを備える施工監視シ
ステム全体の構成ブロック図である。施工表示装置１０
０は、施工現場にて稼動する作業機械の操縦席に設置さ
れたり、施工現場の現場監督者や作業者がヘルメットに
装着したりするもので、施工現場の現況と設計図に基づ
く作業目標とを容易に対比できるようにしている。監視
ユニット２００は施工現場の現況を撮影するもので、施
工表示装置１００を利用する作業機械若しくは作業者が
施工している状態を監視できる位置に配置する。

【００２２】施工状態計測装置３００は、例えば施工管
理事務所に設置されるもので、予め設計図あるいは予想
される最終結果の三次元データ（以下「目標データ」と
いう）を記録している。そして、施工現場に設置された
監視ユニット２００から撮影された現場状況のステレオ
画像を読込んで、詳細な計測演算処理を行い、目標デー
タと比較して施工計画、見積もり等の策定を行う。ここ
で、施工管理事務所は、実際の施工現場とは遠く離れた
遠隔地や、施工現場の近くに設置されている建屋に設け
られる。また、施工現場とは対象物に対して実際に施工
を行おうとする場所で、例えば法面工事、用地造成工
事、遺跡発掘工事、防災工事等が施工される現場であ
る。

【００２３】施工表示装置１００は、画像観察部として
の実像／仮想画像観察部１１０、比較観察表示処理部と
しての画像視点変換演算を行う画像処理部１２０、姿勢
センサ１３０、データ送受信部１４０、施工位置取得部
１５０を備えている。実像／仮想画像観察部１１０に
は、光学的透視画像(Optical See-Trough)タイプのＨＵ
Ｄ（ヘッドアップディスプレイ）又はＨＭＤ（ヘッドマ
ウントディスプレイ）を用いると良い。光学的透視画像
タイプは、実際に施工する場所を見ている施工担当者の
視野に目標データ画像としてのＣＧ画像が合成される構
成で、ＣＧ画像が虚像ではないため、施工担当者が違和
感無くリアルタイムで作業するのに適している。

【００２４】画像処理部１２０は、姿勢センサ１３０で
測定した施工表示装置１００の姿勢と、施工位置取得部
１５０で取得した施工表示装置１００の三次元位置とを
用いて、施工状態計測装置３００から送信された目標デ
ータ画像としてのＣＧ画像を施工担当者の視点基準に変
換する。さらに画像処理部１２０では、作業機械にて対
象物を施工している作業者の視点に準拠して、目標デー
タ画像としてのＣＧ画像を位置あわせして、実像／仮想
画像観察部１１０に送る。これにより、実像／仮想画像
観察部１１０では作業者の視野中で目標データ画像とし
てのＣＧ画像が対象物の実像に重ね合わされた状態で表
示される。

【００２５】姿勢センサ１３０は、施工表示装置１００
の姿勢、例えば上下、左右、前後のような３軸の角度を
測定する。データ送受信部１４０においては、監視ユニ
ット２００からの画像や、施工状態計測装置３００から
の設計画像、データ、自動追尾式測量機２５２やＧＰＳ
からの三次元座標を受信する。

【００２６】施工位置取得部１５０は、施工表示装置１
００の三次元位置を取得するもので、例えばＧＰＳ(Glo
bal Positioning System)、移動体通信における携帯端
末の位置検出サービス、自動追尾式測量機と追尾用ター
ゲットを組合せたもの等がある。自動追尾式測量機は、
例えば本出願人の提案にかかる特開平６−３０７８５３
号公報に開示されている。追尾用ターゲットは、プリズ
ムや反射シートなどを用いる。さらに、姿勢センサ１３
０に加速度計とジャイロを組み合わせ、移動方向と移動
距離を検出できるようにすることで、基準位置に対する
相対的移動距離を検出して、補助的に三次元位置を取得
してもよい。

【００２７】監視ユニット２００は、施工状態を常に撮
像している施工用ステレオカメラ２１０、画像撮影部と
しての計測用ステレオカメラ２２０、動画像処理部２３
０、データ送受信部２４０、撮影位置測定部としてのカ
メラ位置取得部２５０を備えている。

【００２８】自動追尾式測量機２５２を使用する場合、
カメラ位置取得部２５０としては反射用プリズムもしく
は反射シート等を監視ユニット２００に装着する。自動
追尾式測量機２５２によって監視ユニット２００の位置
を取得し、その位置データをデータ送受信部２４０で受
け取る。受け取った位置データは、取得されたステレオ
カメラの画像と同期させてデータ送受信部２４０から施
工状態計測装置３００のデータ送受信部３１０に送信す
る。こうすることで、監視ユニット２００と施工表示装
置１００の位置関係がわかり、目標データ画像と施工画
像の位置あわせが容易に可能となる。

【００２９】施工用ステレオカメラ２１０は、作業中に
目標データと比較するためにリアルタイムで施工中に対
象物との距離を面的に計測するものである。計測用ステ
レオカメラ２２０は、施工の結果、施工前後の状態を詳
細に計測し、見積もり、計画等策定のために使用するも
ので、計測精度の関係から施工用ステレオカメラ２１０
より高精細なものを用意する。また、精度の問題から計
測用ステレオカメラ２２０は基線（カメラ間距離）を長
くとる必要があるが、施工用ステレオカメラ２１０は、
施工状態をリアルタイムで監視、施工し、対象物までの
距離を求める目的に沿う精度で足りる。従って施工用ス
テレオカメラ２１０の基線は、計測用ステレオカメラ２
２０の基線に比較して、長くする必要がない。

【００３０】精度の要求されないような対象物によって
は、施工用ステレオカメラ２１０と計測用ステレオカメ
ラ２２０を同一のものとしてもよい。しかし、機能とし
ては、施工用ステレオカメラ２１０と計測用ステレオカ
メラ２２０にわけて使用するため、それらのステレオ画
像処理はそれぞれ異なるものとなる。また、計測用ステ
レオカメラ２２０、施工用ステレオカメラ２１０共にカ
メラは２つ以上、複数個を利用してマルチステレオとし
てよい。２個以上使用することで、オクリュージョン
（隠蔽）の問題を回避でき、また信頼性を高めることが
可能となる。

【００３１】施工状態計測装置３００は、データ送受信
部３１０、画像処理部としての画像演算処理部３２０、
画像表示部としての映像／仮想画像表示部３３０、記憶
部としての三次元目標データ記憶部３４０、形状測定部
としてのステレオ画像形状測定部３５０、比較表示処理
部としての目標データ比較表示処理部３６０、中間目標
データ設定手段３７０並びに施工計画立案修正手段３８
０を備えている。

【００３２】データ送受信部３１０は、施工表示装置１
００とデータをインタラクティブに通信にてやりとりす
るもので、インターネット接続可能なＰＨＳ(Personal
Handy-phone System)、移動体通信端末、固定通信端末
等、画像データをやりとりできるものであれば良い。画
像データとしては、静止画像のほかに動画情報を加えて
も良い。画像演算処理部３２０はパソコン等のコンピュ
ータから構成されるもので、施工現場の監視ユニット２
００から送られてきたステレオ画像をステレオ画像形状
測定部３５０により詳細に三次元計測させる。さらに、
画像演算処理部３２０は、施工現場の監視ユニット２０
０から送られてきたステレオ画像と、三次元目標データ
記憶部３４０に用意された目標データ画像とを画像変換
処理して、同一縮尺同一座標系にて比較できるように画
像変換処理する。

【００３３】映像／仮想画像表示部３３０は、実際の施
工現場で計測したステレオ画像と目標データ画像として
のＣＧ画像を三次元で合成して重ね合わせ表示するもの
で、映像透視型(Video See-Trough type)を用いる。映
像透視型とは、計測用ステレオカメラ２２０で撮影され
た実画像とコンピュータで作成された目標データを表す
ＣＧ画像を重ね合わせて観察者に表示するものである。
映像／仮想画像表示部３３０としては、３Ｄモニタ、３
Ｄプロジェクタ、ＨＵＤ、ＨＭＤ、ホログラム等、３Ｄ
表示可能なものであれば良い。ステレオ画像形状測定部
３５０は、データ送受信部３１０から送られてきたステ
レオ画像データを三次元計測する。三次元計測の詳細
は、例えば図７に示すステレオ画像計測にて説明されて
いる。

【００３４】目標データ比較表示処理部３６０は、計測
用ステレオカメラ２２０の撮影した施工現場のステレオ
画像と三次元目標データ記憶部３４０に用意された目標
データ画像としてのＣＧ画像とを比較演算して、対象物
の形状データと目標データとを比較し、映像／仮想画像
表示部３３０の重畳させた表示において比較結果を反映
させる。比較結果の反映には、例えば図１２に示す計測
比較処理フローを用いる。中間目標データ設定手段３７
０は、対象物の施工段階毎の中間目標データを設定す
る。中間目標データは、例えば日々の施工目標に適合さ
せて設定しても良く、また工程管理における中間目標毎
に設けても良い。施工計画立案修正手段３８０は、目標
データ比較表示処理部３６０の比較結果から、対象物を
目標データに加工又は処理を行うまでの作業関連データ
を算定するもので、三次元目標データ記憶部３４０に記
憶された目標データを参照している。

【００３５】図３は、施工表示装置の施工現場での第１
の使用形態を表す構成ブロック図である。図２は、施工
表示装置の施工現場での使用形態を表す構成斜視図であ
る。施工表示装置１００は、施工を行うパワーシャベル
等の作業機械、あるいは施工作業者にとりつけられる。
施工表示装置１００は、施工する視点の画像と設計画
像、監視ユニット２００の画像位置合わせのために、自
動追尾式測量機２５２にて三次元位置を常に計測されて
いる。軌道周回衛星からの電波が受信できるところであ
れば、自動追尾式測量機２５２のかわりにＧＰＳを施工
位置取得部１５０として使用してもよい。施工範囲が広
大でない限りは、自動追尾式測量機を利用した方がその
取得位置精度は高く信頼性が高いものとなる。自動追尾
式測量機とＧＰＳの何れを採択するかは、施工条件によ
り適宜選択する。

【００３６】次に、本発明の実施の形態における処理手
続きの流れをフローチャートによって説明する。図４
は、本発明の実施の形態における処理手続きの流れを示
すフローチャートである。ここでは、施工現場の配置は
図２及び図３に準拠している場合として説明し、施工位
置取得部１５０及びカメラ位置取得部２５０として自動
追尾式測量機を用いる例で説明する。なお、施工位置取
得部１５０及びカメラ位置取得部２５０としてＧＰＳを
使用する場合は、施工表示装置１００と監視ユニット２
００の位置を画像と同期させてＧＰＳデータを送信すれ
ばよい。ここで、ＧＰＳデータとはＧＰＳ軌道周回衛星
からの電波信号を受信した場所の緯度、経度並びに標高
を示すものである。

【００３７】まず、施工管理事務所では、予め用意され
た施工完了後の対象物に関する三次元目標データを、施
工状態計測装置３００の三次元目標データ記憶部３４０
に記憶する（Ｓ１０）。他方、施工現場においては、自
動追尾式測量機２５２にて監視ユニット２００、施工表
示装置１００、そして施工対象に配置された基準点を計
測する（Ｒ１０）。さらに、作業担当者は対象物の施工
前の状態を計測用ステレオカメラ２２０にて撮影する。
そして、施工表示装置１００は自動追尾式測量機２５２
にて計測された位置情報をデータ送受信部１４０にて送
信する（Ｒ２０）。また監視ユニット２００は対象物の
施工前の画像データをデータ送受信部２４０にて送信す
る（Ｒ２０）。

【００３８】すると、施工状態計測装置３００側では、
データ送受信部３１０にて施工表示装置１００から送信
されたデータを受信する（Ｓ２０）。そして、施工状態
計測装置３００は、施工前の現場のステレオ画像作成を
行う（Ｓ３０）。ここで、計測用ステレオカメラ２２０
は予め基線がわかっているので、その位置関係により立
体視可能なステレオ画像が作成できる。あるいは、基線
がわかっていなくとも、基準点データを利用すれば、標
定処理を行うことにより立体視可能なステレオ画像が作
成できる。ここで、標定処理とは航空写真測量などにお
いて立体視を行う為の準備処理で、カメラの位置と傾き
を求めるものであり、基準点は６点以上あればよい。ま
た、立体視可能なステレオ画像とは、縦視差が除去され
ていて、対象物に対して平行な画像で、航空写真測量な
どでは偏位修正画像と呼ばれている。

【００３９】次に、施工状態計測装置３００は、目標デ
ータ画像と現場画像の画像位置あわせと合成を行う（Ｓ
４０）。この場合、自動追尾式測量機２５２による基準
点データからステレオ画像の絶対座標系がわかるので、
座標系を変換することで重ね合わせが可能となる。

【００４０】次に、施工状態計測装置３００はステレオ
画像計測並びに解析を行う（Ｓ５０）。ステレオ画像計
測の詳細については図７を用いて後で説明する。続い
て、施工状態計測装置３００は、三次元表示を映像／仮
想画像表示部３３０にて行う（Ｓ６０）。この際に、目
標データのステレオ画像と計測用ステレオカメラ２２０
のステレオ画像とを、見たい視点側における基線長（計
測用ステレオカメラ２２０間の間隔）Ｂ、撮影距離Ｈ、
並びにレンズの焦点距離ｆの場合に変換して表示する。
なお、計測用ステレオカメラ２２０の視点に代えて、施
工用ステレオカメラ２１０の視点や施工表示装置１００
の視点を用いても良い。

【００４１】画像演算処理部３２０における画像変換処
理について説明する。画像演算処理部３２０では、図７
に示すような座標系ｘｙｚを用いるとする。すると、前
後左右方向ｘ、ｙの分解能をΔｘｙ、奥行き方向ｚの分
解能をΔｚとすれば、以下の関係式が成立する。 Δｘｙ＝Ｈ・δｐ／ｆ Δｚ＝Ｈ^２・δｐ／（Ｂ・ｆ） ここでδｐは画素分解能である。これにより、目標デー
タのステレオ画像と計測用ステレオカメラ２２０のステ
レオ画像とを、施工担当者の視点で比較できる。

【００４２】次に、施工状態計測装置３００は、目標デ
ータと対象物の現況データとを比較・検討する（Ｓ７
０）。再構築像は、対象物の現況データを表す計測用ス
テレオカメラ２２０のステレオ画像を、画像演算処理部
３２０により画像変換処理した画像である。再構築像か
ら容積や正確な形状寸法がわかるため、対象物と目標デ
ータとの比較が可能となる。土工量であれば、目標デー
タと差分をとることにより、どのくらいの量を施工する
のかが定量的に把握することができる。また形状を比較
することで、施工の進め方や方法が検討できる。また土
工量とかかった作業量から、予定作業量等も把握検討で
きる。

【００４３】続いて、施工状態計測装置３００は、目標
データと比較して、全作業が終了していれば、Ｓ１００
へ進み、終了していなければＳ８５へいく（Ｓ８０）。
Ｓ８５では、施工計画立案修正手段３８０により次の施
工データを設定する。すなわち、次に作業を行いたい位
置データを設定する。この位置データは、最初から最終
段階の設計図から得た目標データでも良いか、例えばＳ
７０で検討した結果から、次の作業量を決めてその位置
を次の作業の最終目標（図面）として、三次元目標デー
タを設定してもよい。このようにすると、日々の作業量
が明確になり、計画通り進めることが可能となる。そし
て、施工状態計測装置３００は、これら解析データを現
場に送信する（Ｓ９０）。

【００４４】次に、施工現場では、施工状態計測装置３
００から送信された解析データを施工表示装置１００に
て受け取る（Ｒ３０）。そして、解析データにより施工
準備を行う（Ｒ４０）。作業機械若しくは施工担当者は
施工予定位置へ移動して、施工を行う（Ｒ５０）。Ｒ５
０での詳細は、後述の図８に示すリアルタイム施工フロ
ーにて詳細に説明する。そして、施工が終了すればＲ１
０に戻って、施工結果を計測し、施工結果を目標データ
としての設計図とを比較して検討する。終了しなければ
施工を継続し、施工が終了するまでＳ２０〜Ｓ９０並び
にＲ１０〜Ｒ５０のルーチンを繰り返す。

【００４５】全作業終了の場合には、施工管理事務所で
は計測したデータから、作業量全体をまとめる（Ｓ１０
０）。例えば、施工状態計測装置３００を利用して、日
数や施工量、工数、使用機材、その他まとめ、算出す
る。そして、施工管理事務所では作業報告書を作成する
（Ｓ１１０）。このようにして、施工状態計測装置３０
０により、施工作業の日々の進捗状況から最終結果まで
を系統的に視覚的、定量的に管理できるようになるた
め、施工計画にたいし、進行状況、見積もり、その他が
容易に行われる。例えば、計画に対し遅れているときの
対策なども適切に行うことができるようになる。

【００４６】図５はステレオ画像計測の詳細を説明する
流れ図で、ステレオ画像計測は図４のＳ５０にて示され
ている。まず、Ｓ３０により作成された偏位修正画像を
利用して、ステレオマッチングを行う（Ｓ５２）。ステ
レオマッチングには画像相関処理等のアルゴリズムを使
用することができる。ここでは、特に精度が必要なた
め、画像相関処理のなかでも正規化相関処理を利用す
る。

【００４７】［正規化相関処理の説明］図６は正規化相
関処理の説明図である。図に示すように、例えば右画像
上のＮ１×Ｎ１画素領域の位置を左画像上で探索したい
とき、このＮ１×Ｎ１画素の画像をテンプレート画像と
して、左画像上の対応領域を検出する。標定及び偏位修
正処理がなされていれば、左画像上の同一ライン上のみ
を探索することで対応点を検出することができる。

【００４８】探索領域（左画像）において、下式のＣ
(a,b)が最大になるようなテンプレート画像の位置を求
めて、テンプレート画像に対し探索されたとみなす。

【数１】 ただし、

【数２】 なお、左画像、右画像のテンプレート、探索領域は逆で
もよい。また、マルチステレオ画像の場合は、ステレオ
ペアごとに前記処理をペア分行って、対応領域を決定す
る。そして、ステレオマッチングの結果により、各画像
上の三次元座標を算出する（Ｓ５４）。

【００４９】［ステレオ画像計測の原理］図７はステレ
オ画像計測の原理説明図である。物体上の任意の点ｐ
（ｘ、ｙ、ｚ）は、カメラレンズ１を経由して画像１に
点Ｐ１（ｘ１、ｙ１）として投影され、カメラレンズ２
を経由して画像２に点Ｐ２（ｘ２、ｙ２）として投影さ
れている。画像１、２は予め標定及び偏位修正がなされ
ており、それぞれの光軸ｚ１、ｚ２は平行でカメラレン
ズ１、２の主点からＣＣＤ(Charge Coupled Device)面
までの距離ａが等しく、ＣＣＤは光軸に直角に置かれて
いるように変換されている。２つの光軸間距離（基線
長）をＢとすると、点Ｐ１（ｘ１、ｙ１）、Ｐ２（ｘ
２、ｙ２）の座標の間には、以下のような関係がある。

【００５０】ｘ１＝ａｘ／ｚ −−−（１） ｙ１＝ｙ２＝ａｙ／ｚ −−−（２） ｘ２−ｘ１＝ａＢ／ｚ −−−（３） 但し、全体の座標系（ｘ、ｙ、ｚ）の原点をカメラ１の
レンズ主点にとるものとする。（３）式よりｚを求め、
これを用いて（１）式、（２）式よりｘ、ｙが求められ
る。すなわち、Ｓ５２の処理で、左右画像の対応点（ｘ
１、ｘ２）が求まっているので、カメラ１のレンズ主点
から物体上の任意の点ｐまでの距離ｚが求められる。

【００５１】図５に戻り、求められた三次元座標によ
り、計測対象の再構築を行う（Ｓ５６）。すなわち、正
規化相関処理やステレオ法により求められた各三次元座
標を、施工現場の現況に即して結び合わせることによ
り、ワイヤーフレーム等の表現が可能となり、土工量の
ような容積等が求められるようになる。次に、目標デー
タ画像と再構築画像の重ね合わせを行う。これは、施工
現場に設けられた位置座標が既知の基準点データによ
り、施工に必要な実際の寸法に変換するものである（Ｓ
５８）。このようにして、ステレオ画像計測が行われ
る。

【００５２】図８は、施工現場で行われるリアルタイム
施工フローについての説明図で、リアルタイム施工フロ
ーは図４のステップＲ５０に示してある。施工表示装置
１００では、図４のＲ３０にて受信された解析データ
と、施工表示装置１００の三次元位置及び姿勢センサ１
３０のデータにより、画像を施工表示装置１００の視点
位置に画像処理部１２０により変換する（Ｒ５２）。こ
の場合、送信されたデータが施工表示装置１００の視点
に変換してあれば変換する必要はない。

【００５３】次に、実像／仮想画像観察部１１０により
三次元表示を行う（Ｒ５４）。図９は施工前の合成され
た画像の一例を示す図である。実像／仮想画像観察部１
１０の三次元表示画像は、まだ施工前なので図９のよう
に当初地形データが実線で表され、目標データは破線で
示されている。ここでは、目標データは四角錐台形状を
しており、当初地形データは目標データよりも大きな台
地形状をしている。そして、施工が逐次進行するにつれ
て、図１０、図１１のように変化する。図１０は施工開
始後、目標データとなる法面が作業対象の台地の斜面に
現れた状態を示している。図１１は施工が進行して、目
標データとなる四角錐台形状の大部分が作業対象の台地
に現れた状態を示している。このようにして、施工対象
の地山に対して目標データと比較しながら施工が行える
ことになる。

【００５４】そして、施工担当者は作業機械を用いて施
工作業を行う（Ｒ５６）。そして、施工担当者は監視ユ
ニット２００により、計測比較処理を行う（Ｒ５８）。
計測比較処理の詳細は、図１２を用いて後で説明する。
そして、判定表示を行う（Ｒ６０）。この判定表示処理
の詳細は、図１３を用いて後で説明する。そして、これ
ら処理が目標データどおり終了するまで作業者は、映像
／仮想画像表示部３３０をみながら作業を繰り返す（Ｒ
６２）。

【００５５】実像／仮想画像観察部１１０を利用した施
工作業の利点は、作業者は実像／仮想画像観察部１１０
と施工場所をみることで、施工中に施工面が目標データ
に到達したことを認識でき、過剰な施工を行うことがな
くなる点にある。また施工面が目標データに近くなれば
仮想壁(Virtual Wall)が現れ、残りの作業量が視覚的に
認識できることである。仮想壁表示を行うことにより、
数値と違い視覚的にわかるので、作業機械の操作作業に
反映させることが大変楽になると同時に、迅速正確に施
工が行える。さらに、掘る場合だけでなく、逆に埋めた
り、ものを組み立てたり作ったりする場合にも、目標デ
ータ位置や残り作業量を実像／仮想画像観察部１１０に
３Ｄ表示して、確認しながら作業を行うことができる。

【００５６】図１２は、計測比較処理フローについての
説明図で、計測比較処理フローは図８のステップＲ５８
に示してある。まず、施工用ステレオカメラ２１０によ
り画像１を取得する（Ｒ７０）。次に、施工用ステレオ
カメラ２１０により次の画像２を取得する（Ｒ７２）。
そして、動画像処理部２３０にて、画像２から画像１を
差分することにより変化領域を抽出する（Ｒ７４）。続
いて、変化領域についてのみ左右画像のマッチングを行
う（Ｒ７６）。このマッチング処理は、リアルタイム性
が必要なため、残差逐次検定法による画像相関処理を行
う。

【００５７】［残差逐次検定（ＳＳＤＡ）法］ここで
は、動画像を扱いリアルタイム処理が必要なため、残差
逐次検定法を使用し処理の高速化をはかる。画像相関は
図６に示す正規化相関処理と同様の原理で、右画像に対
する左画像の対応点、若しくは左画像に対する右画像の
対応点を求める処理である。以下、残差逐次検定法の式
を示す。

【数３】

【００５８】ここで、残差Ｒ（a,b）が最小になる点が
求める画像の位置である。処理の高速化をはかるため、
数３の加算において、Ｒ（a,b）の値が過去の残差の最
小値を越えたら加算を打ち切り、次のテンプレート画像
の左上座標(a,b)に移るよう計算処理を行う。このよう
にすることで、動画像に対応できるようになる。また、
複数カメラの場合は、各ステレオペアにつき残差逐次検
定法の処理を行うことでリアルタイム処理が可能であ
る。

【００５９】次に、求められた左右画像の対応点によ
り、その領域の三次元座標を算出する（Ｒ７８）。これ
により、施工中の対象物までの変化部分の距離が求まる
（距離画像）。そして、図８のＲ６０に戻り判定表示を
行う。この判定表示処理は図１３のようになる。図１３
は、判定表示処理フローについての説明図で、判定表示
処理フローは図８並びに図１２のステップＲ６０に示し
てある。まず、変化（施工）領域の距離画像から変化領
域の目標データを比較（差分）する（Ｒ８０）。

【００６０】図１４は、施工領域の距離画像から変化領
域の目標データを比較する場合の説明図で、（Ａ）は施
工前、（Ｂ）は施工途中を示している。施工している位
置における対象物までの距離をａ、目標データはｂであ
るとすれば、画像上の変化（施工）領域の各点におい
て、ａ−ｂを計算する。この結果により、以下のケース
１〜３の３通りの処理表示を行う。

【００６１】ケース１：＝０のとき（ａ＝ｂ：Ｒ８
２）。この条件に該当するときは、目標データに達した
ということで、変化領域の到達点のところに仮想壁(Vir
tual Wall)を表示する（Ｒ８４）。すなわち、図１０に
示されるように、斜線で示された仮想壁を表示し、設計
位置に達したことを示す。好ましくは、到達した点が目
標データの一部であれば、その部分だけ例えば異なった
色で表示され、その位置はもう加工する必要が無いこと
を示すとよい。

【００６２】ケース２：＞０（ａ＞ｂ：Ｒ８６）。この
条件に該当するときは、目標データを超えてしまった場
合で、警告表示を行う（Ｒ８８）。この場合も、目標デ
ータを超えた領域に関して面的に色を変え、更に文字表
示などを行っても良い。

【００６３】ケース３：＜０（ａ＜ｂ：Ｒ９０）。この
条件に該当するときは、目標データにまだ到達していな
いことを表示する（Ｒ９２）。例えば、目標データに近
くなったら、後どのくらいであるか、という表示を施工
表示装置１００上に表示すれば、それだけ施工が行いや
すくなる。数値であらわすだけでなく、例えば現在の施
工面の目標データまでの距離によって、画像上の施工部
分の色彩を面的に何段階かに分けて表示すると、施工効
率が格段に良いものになる。判定基準は各点におけるａ
−ｂの値により閾値を設けて、例えば緑→黄色→赤など
と色彩を変更すればよい。これら仮想壁表示は、対象物
に対して、距離判定により前、後ろ、あるいは透かして
表示することが可能である。例えば、到達していない箇
所は色をつけて透かすようにするとよい。

【００６４】次に第２の実施の形態として、遺跡発掘現
場における作業について説明する。計測用ステレオカメ
ラにて遺跡発掘現場を計測することにより、現場状況の
三次元図面を製作し、その上にあるべき建造物その他を
推定し、その位置を特定させて発掘調査を行うものであ
る。

【００６５】図１５は本発明を遺跡発掘調査に適用した
場合の処理手続きを示す流れ図である。まず、遺跡の予
想三次元データを三次元目標データ記憶部３４０に記憶
する。他方、計測用ステレオカメラ２２０にて遺跡現場
を撮影、また自動追尾式測量機２５２によって基準点や
施工表示装置１００と監視ユニット２００の位置を計測
する（Ｒ５００）。そして、これら位置計測データを施
工状態計測装置３００に送信する（Ｒ５１０）。

【００６６】施工状態計測装置３００では、送信された
位置計測データをデータ送受信部３１０により受け取る
（Ｓ５００）。そして、施工状態計測装置３００は受信
した位置計測データに基づき、計測、解析する（Ｓ５１
０）。この場合は、画像演算処理部３２０にて、自動追
尾式測量機２５２の基準点データと、ステレオ画像から
ステレオ画像を作成し、ステレオマッチングをおこなう
ことにより三次元座標を算出する。これら処理は、図４
のＳ３０〜Ｓ５０の処理と同様である。そして、作成さ
れた三次元データを映像／仮想画像表示部３３０に表示
する（Ｓ５２０）。

【００６７】この際に、目標データのステレオ画像と計
測用ステレオカメラ２２０のステレオ画像とを、見たい
視点側における基線長（カメラ間間隔）Ｂ、撮影距離
Ｈ、並びにレンズの焦点距離ｆの場合に変換して表示す
る。ここで、予め三次元目標データ記憶部３４０に記憶
された遺跡の予想三次元データあるいは図面と、対象物
としての遺跡の計測データとを、重ね合わせて映像／仮
想画像表示部３３０に３Ｄ表示し、検討する（Ｓ５３
０）。もし予め予想三次元データが無ければ、Ｓ５３０
にて予想を行う。

【００６８】そして、検討の結果、発掘する必要が無け
れば、Ｓ５７０へいき、そうでなければＳ５５０へ進む
（Ｓ５４０）。次に、映像／仮想画像表示部３３０の３
Ｄ表示を見ながら、次の発掘位置データを設定する（Ｓ
５５０）。このときにもし予想と異なっていた場合は、
発掘位置データを修正して配置する。そして、実像／仮
想画像観察部１１０側の視点にステレオ画像を表示でき
るように変換する。発掘位置を設定したら、その予想位
置並びに図面上での位置データを施工表示装置１００側
に送信する（Ｓ５６０）。

【００６９】施工表示装置１００は、データ送受信部１
４０にてデータを受け取る（Ｒ５２０）。そして、施工
表示装置１００の位置データにより、発掘位置を画像処
理部１２０にて位置あわせを行い、実像／仮想画像観察
部１１０に合成表示する（Ｒ５３０）。発掘作業者は実
像／仮想画像観察部１１０の表示をみながら発掘位置へ
移動する（Ｒ５４０）。そして、発掘作業者は発掘を行
う（Ｒ５５０）。ここでの発掘作業は、図８のリアルタ
イム施工フローのフローチャートと同様の手順である。
発掘作業者の発掘は、予想三次元データに従って作業さ
れる。作業が終了したら、発掘作業者は、再びステレオ
撮影を行う（Ｒ５００）。Ｒ５１０から後の処理は、先
に説明したＳ５００以下と同様の処理である。

【００７０】そして、作業が終了したら、全体の作業日
数、作業量、出土数、その他まとめて解析を行う（Ｓ５
７０）。そして、遺跡発掘調査管理担当者は、レポート
作成する（Ｓ５８０）。このように、実像／仮想画像観
察部１１０を用いて予想三次元データと視覚的に比較し
ながら実作業が行えるので、作業効率が大変良いものに
なる。

【００７１】続いて、図１６は本発明を防災予防に適用
した場合の処理手続きを説明する流れ図である。まず、
現場にて計測用ステレオカメラ２２０でステレオ撮影す
る（Ｒ７００）。また現場状況は自動追尾式測量機２５
２にて、また立ち入ることのできないような危険地帯で
あれば自動追尾式測量機２５２としてプリズムを用いな
い自動追尾式測量機を用いて基準点になる位置等を測定
する。この場合は、施工表示装置１００として遠隔操作
可能なものを利用するとよい。そして、位置測定データ
をデータ送受信部１４０にて送信する（Ｒ７１０）。

【００７２】すると、施工状態計測装置３００は送信さ
れた位置計測データをデータ送受信部３１０にて受け取
る（Ｓ７００）。そして、位置計測データをもとに画像
演算処理部３２０にて、三次元計測と解析を行う（Ｓ７
１０）。これら処理は、図４のＳ３０〜Ｓ５０の処理と
同様である。もしＳ７１０にて、以前計測したデータが
あれば、その変化領域、変化量を画像による差分から抽
出して求める。そして、現場状況の三次元表示を映像／
仮想画像表示部３３０で行う（Ｓ７２０）。

【００７３】この際に、目標データのステレオ画像と計
測用ステレオカメラ２２０のステレオ画像とを、見たい
視点側における基線長（カメラ間間隔）Ｂ、撮影距離
Ｈ、並びにレンズの焦点距離ｆの場合に変換して表示す
る。防災担当者は、映像／仮想画像表示部３３０の表示
をみながら、気象情報や、地盤情報、その他の情報を合
わせて補強地点等を検討し、それら位置、施工情報を三
次元データ上に合成し、表示させる（Ｓ７３０）。も
し、以前の計測データがある場合は、計測変化領域や過
去の状態等を映像／仮想画像表示部３３０に重ね合わせ
３Ｄ表示し、検討する。そして、もし、防災する必要が
なければＳ７５０へいき、そうでない場合は、Ｓ７６０
へいく（Ｓ７４０）。

【００７４】防災が必要な場合は、施工図面を作成しそ
の三次元データを設定する（Ｓ７６０）。そして、実像
／仮想画像観察部１１０側の視点にステレオ画像を表示
できるように変換する。そして、設定した三次元データ
をデータ送受信部３１０にて送信する（Ｓ７７０）。す
ると、施工表示装置１００は送信された三次元データを
データ送受信部１４０にて受け取る（Ｒ７２０）。防災
担当者は、施工表示装置１００の位置情報と解析データ
をあわせ、実像／仮想画像観察部１１０上に表示させ、
防災予定位置を確認する（Ｒ７３０）。そして、防災担
当者は防災予定位置へ移動する。また、現地で必要があ
れば危険地域やその他その旨情報の通報、表示等を行う
（Ｒ７４０）。そして、防災担当者は防災施工を行う
（Ｒ７５０）。ここでの防災施工処理は図８のリアルタ
イム施工フローのフローチャートと同様の手順である。

【００７５】防災施工が終了したら、現場状況を計測、
検討するためにステレオ撮影を行い、データ送信する
（Ｒ７００）。あとの手順は、Ｓ７００以下の繰り返し
となる。そして、防災施工は完了したので、このあとの
災害に備え、防災領域の観測を続けるか決める（Ｓ７５
０）。もし、観測を続けるのであれば、Ｒ７００に戻
り、Ｒ７００〜Ｓ７４０を繰り返し計測し続け変化量を
モニタする。観測の途中で、防災の可能性が大きくなっ
た場合はＲ７６０へいき、さらに防災を補強する。

【００７６】防災施工が終わり、観測する必要も無くな
れば、全体作業のまとめを行う（Ｓ７８０）。ここで、
防災施工にかかわった作業量や日数、工数などを今まで
のデータから算出する。レポートを作成、終了する（Ｓ
７９０）。

【００７７】図１７は実像／仮想画像表示部や映像／仮
想画像表示部に用いられるＨＵＤ又はＨＭＤの説明図で
ある。ＨＵＤ（ヘッドアップディスプレイ）又はＨＭＤ
（ヘッドマウントディスプレイ）には、前述したように
光学的透視画像(Optical See-Trough)タイプと映像透視
型(Video See-Trough type)とがある。光学的透視画像
タイプのＨＵＤ又はＨＭＤは、ＣＧ画像を実像が透視で
きる状態で映し出し、作業者が実像とＣＧ画像とを対比
して観察できるようにしている。

【００７８】図１８は施工表示装置の施工現場での第２
の使用形態を表す構成ブロック図である。施工表示装置
１００と監視ユニット２００を一体化して、自動追尾式
測量機により位置測定を行う配置を示している。このよ
うに構成すると、作業機械の施工位置に施工用ステレオ
カメラ２１０があるので、実際の施工の視点から距離画
像が得られる。この場合の監視ユニット２００と作業機
械の位置関係の一例を図１９に示す。監視ユニット２０
０は作業機械の操縦室の天井部位に設置されている。

【００７９】図２０は施工表示装置の施工現場での第３
の使用形態を表す構成ブロック図である。施工現場側に
監視ユニット２００をとりつけ、施工表示装置１００を
遠隔地に置いて、自動追尾式測量機により位置測定を行
う配置を示している。すなわち、施工表示装置を施工管
理事務所側においても良い。このような構成にすると、
施工担当者が実際に施工現場にいなくとも遠隔操作が可
能になり、砂漠や鉱山のように危険若しくは過重な労働
条件の為に、作業機械の無人運転が必要な場合に適す
る。このような作業機械の無人運転の場合には、図１７
に示されるように、観察者の目で見る実際の像の上に仮
想的にコンピュータで作成したＣＧ画像を合成し、作業
機械の操作担当者の面前に表示せしめる。

【００８０】なお、施工表示装置の施工現場での第１の
使用形態では、図２に示すように施工表示装置１００と
監視ユニット２００を固定として、安定した施工中の動
画像が取得可能な場合を示しているが、施工表示装置１
００と監視ユニット２００は可動式としてもよい。ま
た、第１の使用形態では、施工用ステレオカメラ２１０
と計測用ステレオカメラ２２０を監視ユニット２００内
に一体に収容する場合を説明したが、施工表示装置１０
０内部に施工用ステレオカメラ２１０を収容し、監視ユ
ニット２００内に計測用ステレオカメラ２２０を振り分
けて配置してもよい。施工表示装置１００内部に施工用
ステレオカメラ２１０を収容すると、例えば作業機械の
無人運転や運転指導に役立つ。

【００８１】図２１は、図１に示す施工表示装置と施工
状態計測装置とを備える施工監視システムの変形実施例
を示す構成ブロック図で、施工表示装置の施工現場での
第４の使用形態を示している。図１に示す施工表示装置
１００では実像と仮想画像とを重ねて表示する構成であ
ったが、第４の使用形態に用いる施工表示装置１００ａ
では対象物画像と仮想画像を重ねて表示することもでき
るように構成してある。図２１において、図１に示す構
成要素と共通するものには同一符号を付して説明を省略
し、相違する点を中心に説明する。

【００８２】図２１において、監視ユニット２００ａ
は、施工用ステレオカメラ２１０又は計測用ステレオカ
メラ２２０の何れか一方から、対象物のステレオ画像を
データ送受信部２４０ａを介して、施工表示装置１００
ａのデータ送受信部１４０ａへ送信する。

【００８３】そして、施工表示装置１００ａの比較表示
処理部１２０ａは、姿勢センサ１３０で測定した施工表
示装置１００ａの姿勢と、施工位置取得部１５０で取得
した施工表示装置１００ａの三次元位置を用いて、施工
状態計測装置３００から送信された目標データ画像と、
監視ユニット２００ａから施工表示装置１００ａへ送信
された対象物のステレオ画像とを、施工担当者の視点基
準に変換した上で、目標データ画像と対象物のステレオ
画像とを位置あわせして画像／仮想画像表示部１１０ａ
に送る。これにより、画像／仮想画像表示部１１０ａで
は、作業者が目標データ画像と対象物のステレオ画像と
が一体となったＣＧ画像によって施工状態を観察するこ
とができる。

【００８４】この場合に、図１に示す施工表示装置１０
０の実像と仮想画像とを重ねて表示する機能と、図２１
に示す施工表示装置１００ａの目標データ画像と対象物
のステレオ画像とが一体となったＣＧ画像を表示する機
能とを選択式として、作業者の利便性に応じて適宜両者
を切替えるように構成しても良い。

【００８５】

【発明の効果】以上のように、本発明の画像測定表示装
置によれば、画像撮影部で撮影した対象物の一対のステ
レオ画像から対象物の形状データを測定する形状測定部
と、対象物の画像に関連した目標データを記憶する記憶
部と、対象物の一対のステレオ画像と前記目標データに
基づく前記対象物のステレオ目標データ画像とを重畳さ
せて表示する画像表示部と、前記対象物の形状データと
前記目標データとを比較し、画像表示部の前記重畳させ
た表示において前記比較結果を反映させる比較表示処理
部を備えているので、作業者や作業管理者は製作・施工
対象物の詳細な計測と設計図との比較を正確に行える。

【００８６】本発明の画像測定表示装置によれば、画像
撮影部で撮影した対象物の一対のステレオ画像から対象
物の形状データを測定する形状測定部と、対象物の画像
に関連した目標データを記憶する記憶部と、目標データ
に関連した対象物を目視できる状態で、前記目標データ
に基づく前記対象物のステレオ目標データ画像を重畳さ
せて表示する画像観察部と、形状測定部で測定された対
象物の形状と前記目標データに対応する形状とを比較
し、画像観察部のステレオ目標データ画像表示において
前記比較結果を反映させる比較観察表示処理部とを備え
ているので、作業者や作業管理者は、製作・施工対象物
が設計図どおりに製作・施工できているか容易に把握で
き、設計図どおりの施工を簡便に行なうことができる。

【００８７】本発明の施工状態監視システムによれば、
請求項１乃至請求項５の何れか一つに記載の画像測定表
示装置と、比較表示処理部の比較結果から、対象物を目
標データに加工又は処理を行うまでの作業関連データを
算定する施工計画立案修正手段とを備える構成としたの
で、作業管理者が毎日の製作・施工作業の進捗状況を正
確に把握して、施工計画に適合するように製作・施工作
業を柔軟に構築するのに有益である。

【図面の簡単な説明】

【図１】 本発明に係る施工表示装置と施工状態計測装
置とを備える施工監視システム全体の構成ブロック図で
ある。

【図２】 施工表示装置の施工現場での使用形態を表す
構成斜視図である。

【図３】 施工表示装置の施工現場での第１の使用形態
を表す構成ブロック図である。

【図４】 本発明の実施の形態における処理手続きの流
れを示すフローチャートである。

【図５】 ステレオ画像計測の詳細を説明する流れ図で
ある。

【図６】 相関処理の説明図である。

【図７】 ステレオ画像計測の原理説明図である。

【図８】 施工現場で行われるリアルタイム施工フロー
についての説明図である。

【図９】 施工前の合成された画像の一例を示す図であ
る。

【図１０】 施工開始後、目標データとなる法面が作業
対象の地山の斜面に現れた状態を示している。

【図１１】 施工が進行して、目標データとなる四角錐
台形状の大部分が作業対象の台地に現れた状態を示して
いる。

【図１２】 計測比較処理フローについての説明図であ
る。

【図１３】 判定表示処理フローについての説明図であ
る。

【図１４】 施工領域の距離画像から変化領域の目標デ
ータを比較する場合の説明図である。

【図１５】 本発明を遺跡発掘調査に適用した場合の処
理手続きを示す流れ図である。

【図１６】 本発明を防災予防に適用した場合の処理手
続きを説明する流れ図である。

【図１７】 実像／仮想画像表示部や映像／仮想画像表
示部に用いられるＨＵＤ又はＨＭＤの説明図である。

【図１８】 施工表示装置の施工現場での第２の使用形
態を表す構成ブロック図である。

【図１９】 第２の使用形態における監視ユニットと作
業機械の位置関係の一例を示す図である。

【図２０】 施工表示装置の施工現場での第３の使用形
態を表す構成ブロック図である。

【図２１】 図１に示す施工表示装置と施工状態計測装
置とを備える施工監視システムの変形実施例を示す構成
ブロック図で、施工表示装置の施工現場での第４の使用
形態を示している。

【符号の説明】

１００ 施工表示装置 １１０ 実像／仮想画像観察部（画像観察部） １１０ａ 画像／仮想画像表示部 １２０ 画像処理部（比較観察表示処理部） １２０ａ 比較表示処理部 １３０ 姿勢センサ １４０ データ送受信部 １５０ 施工位置取得部 ２００ 監視ユニット ２１０ 施工用ステレオカメラ ２２０ 計測用ステレオカメラ（画像撮影部） ２３０ 動画像処理部 ２４０ データ送受信部 ２５０ カメラ位置取得部 ２５２ 自動追尾式測量機 ３００ 施工状態計測装置 ３１０ データ送受信部 ３２０ 画像演算処理部 ３３０ 映像／仮想画像表示部（画像表示部） ３４０ 三次元目標データ記憶部（記憶部） ３５０ ステレオ画像形状測定部（形状測定部） ３６０ 目標データ比較表示処理部（比較表示処理部） ３７０ 中間目標データ設定手段 ３８０ 施工計画立案修正手段

───────────────────────────────────────────────────── フロントページの続き Ｆターム(参考） 5B057 AA20 BA11 BA23 CA12 CA16 CB13 CB19 CD14 CE08 CH01 CH12 CH14 DA11 DA17 DB03 DC33 5L096 AA09 BA08 CA05 DA01 EA13 EA14 FA02 FA70 HA07 JA28

Claims (15)

【特許請求の範囲】
1. 【請求項１】 画像撮影部で撮影した対象物の一対のス
   テレオ画像から対象物の形状データを測定する形状測定
   部と；前記対象物の画像に関連した目標データを記憶す
   る記憶部と；前記対象物の一対のステレオ画像と前記目
   標データに基づく前記対象物のステレオ目標データ画像
   とを重畳させて表示する画像表示部と；前記対象物の形
   状データと前記目標データとを比較し、前記画像表示部
   の前記重畳させた表示において前記比較結果を反映させ
   る比較表示処理部と；を備えることを特徴とする画像測
   定表示装置。
2. 【請求項２】 画像撮影部で撮影した対象物の一対のス
   テレオ画像から対象物の形状データを測定する形状測定
   部と；前記画像撮影部の撮影位置を測定する撮影位置測
   定部と；前記対象物の画像に関連した目標データを記憶
   する記憶部と；前記撮影位置測定部で測定された撮影位
   置に基づき、前記対象物の画像と前記目標データに基づ
   く目標データ画像とを重畳させて表示する画像表示部
   と；前記撮影位置測定部で測定された撮影位置に基づ
   き、前記対象物の形状と前記目標データに対応する目標
   データ対応形状とを比較し、前記画像表示部の前記重畳
   させた表示において前記比較結果を反映させる比較表示
   処理部と；を備えることを特徴とする画像測定表示装
   置。
3. 【請求項３】 請求項１又は請求項２記載の画像測定表
   示装置において；前記比較表示処理部による前記比較結
   果の反映は、前記対象物の形状と前記目標データ対応形
   状との比較結果が略一致した個所について、前記画像表
   示部に前記略一致した個所を識別可能に表示するように
   構成されていることを特徴とする画像測定表示装置。
4. 【請求項４】 請求項１乃至請求項３の何れかに記載の
   画像測定表示装置において；前記比較表示処理部の比較
   結果として前記対象物と前記目標データとの距離又は間
   隔を対応させ、前記対象物と前記目標データとの大小関
   係を識別可能に前記画像表示部にて表示するように構成
   されていることを特徴とする画像測定表示装置。
5. 【請求項５】 請求項１乃至請求項４の何れか一つに記
   載の画像測定表示装置において；前記比較表示処理部並
   びに前記画像表示部の目標データとして、前記対象物の
   施工段階ごとの中間目標データを設定する中間目標デー
   タ設定手段を備え；前記比較表示処理部は、前記対象物
   の形状と前記中間目標データに対応する中間目標データ
   対応形状とを比較するように構成されていることを特徴
   とする画像測定表示装置。
6. 【請求項６】 画像撮影部で撮影した対象物の一対のス
   テレオ画像から対象物の形状データを測定する形状測定
   部と；前記対象物の画像に関連した目標データを記憶す
   る記憶部と；前記目標データに関連した対象物を目視で
   きる状態で、前記目標データに基づく前記対象物のステ
   レオ目標データ画像を重畳させて表示する画像観察部
   と；前記形状測定部で測定された対象物の形状と前記目
   標データに対応する形状とを比較し、前記画像観察部の
   前記ステレオ目標データ画像表示において前記比較結果
   を反映させる比較観察表示処理部と；を備えることを特
   徴とする画像測定表示装置。
7. 【請求項７】 画像撮影部で撮影した対象物の一対のス
   テレオ画像から対象物の形状データを測定する形状測定
   部と；前記画像撮影部の撮影位置を測定する撮影位置測
   定部と；前記対象物の画像に関連した目標データを記憶
   する記憶部と；前記撮影位置測定部で測定された撮影位
   置に基づき、前記目標データに関連した対象物を目視で
   きる状態で、前記目標データに基づく前記対象物のステ
   レオ目標データ画像を重畳させて表示する画像観察部
   と；前記撮影位置測定部で測定された撮影位置に基づ
   き、前記形状測定部で測定された対象物の形状と前記目
   標データに対応する形状とを比較し、前記画像観察部の
   前記ステレオ目標データ画像表示において前記比較結果
   を反映させる比較観察表示処理部と；を備えることを特
   徴とする画像測定表示装置。
8. 【請求項８】 請求項６又は請求項７に記載の画像測定
   表示装置において；前記画像観察部は、ヘッドアップデ
   ィスプレイ又はヘッドマウントディスプレイの少なくと
   も一方を含むことを特徴とする画像測定表示装置。
9. 【請求項９】 請求項６乃至請求項８の何れか一つに記
   載の画像測定表示装置において；前記比較観察表示処理
   部による前記比較結果の反映は、前記対象物の形状と前
   記目標データ対応形状との比較結果が略一致した個所に
   ついて、前記画像観察部に前記略一致した個所を識別可
   能に表示するように構成されていることを特徴とする画
   像測定表示装置。
10. 【請求項１０】 請求項６乃至請求項９の何れか一つに
    記載の画像測定表示装置において；前記比較観察表示処
    理部の比較結果として前記対象物と前記目標データとの
    距離又は間隔を対応させ、前記対象物と前記目標データ
    との大小関係を識別可能に前記画像観察部にて表示する
    ように構成されていることを特徴とする画像測定表示装
    置。
11. 【請求項１１】 対象物の一対のステレオ画像を取得す
    る画像撮影部と；前記画像撮影部で取得した画像を表示
    する画像表示部と；前記対象物の画像に関連した目標デ
    ータを記憶する記憶部、前記画像撮影部で得た対象物の
    画像に基づき画像処理を行う画像演算処理部を含む施工
    状態計測装置とを備え；前記画像撮影部、前記画像表示
    部並びに施工状態計測装置間でデータの授受を行う画像
    測定表示システムにおいて；前記施工状態計測装置は、
    さらに、前記画像撮影部で得た前記対象物の一対のステ
    レオ画像から対象物の形状を測定する形状測定部と、前
    記形状測定部で測定された対象物の形状と前記目標デー
    タに対応する形状とを比較する比較表示処理部とを備
    え；前記画像表示部は、画像撮影部で得られた対象物の
    画像と前記施工状態計測装置から送られてきた前記目標
    データに基づく目標データ画像とを重畳させて表示する
    ように構成されていることを特徴とする画像測定表示シ
    ステム。
12. 【請求項１２】 請求項１１記載の画像測定表示システ
    ムにおいて；前記画像撮影部、前記画像表示部並びに施
    工状態計測装置間でデータの授受は、無線、光通信、イ
    ンターネット、電線のいずれか一つを用いることを特徴
    とする画像測定表示システム。
13. 【請求項１３】 施工表示装置の三次元位置を撮影位置
    測定部により求め；マルチステレオ画像にて距離画像を
    リアルタイムで面的に取得し；施工表示装置の三次元位
    置により目標データと施工中の対象物のステレオ画像を
    重ね合わせて表示し；前記目標データと施工中の対象物
    に関するステレオ画像の偏差情報に基づいて、作業機械
    の作業を行わせる；工程を含む施工管理方法。
14. 【請求項１４】 施工表示装置の三次元位置を撮影位置
    測定部により求め；マルチステレオ画像にて距離画像を
    リアルタイムで面的に取得し；前記マルチステレオ画像
    の計測を行い；目標データと施工中の対象物の現況から
    施工進行状況を解析し；前記目標データを実現する施工
    計画を施工進行状況の解析結果に基づいて随時更新す
    る；施工管理方法。
15. 【請求項１５】 請求項１乃至請求項５の何れか一つに
    記載の画像測定表示装置と；前記比較表示処理部の比較
    結果から、対象物を目標データに加工又は処理を行うま
    での作業関連データを算定する施工計画立案修正手段
    と；を備える施工状態監視システム。