JPH10116353A - Remote operation supporting image system for moving body for construction - Google Patents

Remote operation supporting image system for moving body for construction

Info

Publication number
JPH10116353A
JPH10116353A JP8269940A JP26994096A JPH10116353A JP H10116353 A JPH10116353 A JP H10116353A JP 8269940 A JP8269940 A JP 8269940A JP 26994096 A JP26994096 A JP 26994096A JP H10116353 A JPH10116353 A JP H10116353A
Authority
JP
Japan
Prior art keywords
image
stereo
construction
guide
dimensional coordinates
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP8269940A
Other languages
Japanese (ja)
Other versions
JP3344902B2 (en
Inventor
Yoshikazu Miyauchi
良和 宮内
Toshibumi Sato
俊文 佐藤
Motohisa Hirose
素久 廣瀬
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Kajima Corp
Original Assignee
Kajima Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Kajima Corp filed Critical Kajima Corp
Priority to JP26994096A priority Critical patent/JP3344902B2/en
Publication of JPH10116353A publication Critical patent/JPH10116353A/en
Application granted granted Critical
Publication of JP3344902B2 publication Critical patent/JP3344902B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Landscapes

  • Operation Control Of Excavators (AREA)
  • Processing Or Creating Images (AREA)
  • Image Processing (AREA)
  • Image Analysis (AREA)

Abstract

PROBLEM TO BE SOLVED: To comparatively simply change stereo guide images overlapped with stereo operation images by generating stereo operation supporting images by overlapping the stereo operation images of a construction area, which are taken by a pair of image pickup machines, and the stereo guide images which a three-dimensional graphic means generates. SOLUTION: The stereo operation images Iw (Iw L and Iw R) are taken by a prescribed optical axis O and a prescribed image angle W from a prescribed viewpoint V facing the construction area 1 of a moving body for construction 2, which is driven by a remote operation by the image pickup machines 4 (4L+4R). The stereo guide images Ig (Ig L and Ig R) are generated by the prescribed optical axis O and the prescribed image angle W from the prescribed viewpoint V by a graphic means 30 based on the three-dimensional coordinate T of a guide point group. The stereo operation images Iw and the stereo guide images Ig are overlapped and the stereo operation supporting images Is (Is L and Is R) are generated. When the stereo guide images Ig are to be changed, they can easily be changed by inputting the three-dimensional coordinate T of the guide point group from a guide point input means 44.

Description

【発明の詳細な説明】DETAILED DESCRIPTION OF THE INVENTION

【0001】[0001]

【産業上の利用分野】本発明は施工用移動体の遠隔操作
支援画像システムに関し、とくに撮像機による施工域の
ステレオ操作画像と三次元グラフィックによる該施工域
のステレオ案内画像との重畳によりステレオ操作支援画
像を作成する画像システムに関する。
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a remote operation support image system for a construction mobile object, and more particularly to a stereo operation by superimposing a stereo operation image of a construction area by an image pickup device and a stereo guide image of the construction area by a three-dimensional graphic. The present invention relates to an image system for creating a support image.

【0002】[0002]

【従来の技術】人の立入り禁止区域や人に危険が伴う区
域で工事を行う場合に、遠隔操作可能としたブルドー
ザ、パワーショベル、ダンプトラック等の施工用機械
(以下、施工用移動体という。)を用いた遠隔施工が行
われる。例えば雲仙普賢岳周辺のように火山活動の被害
を受け且つ火山活動が継続している区域では、ダム建設
等の災害防止対策工事が遠隔施工で実施されている。
2. Description of the Related Art When performing construction in an area where people are restricted or an area where there is danger to humans, construction machines such as bulldozers, power shovels and dump trucks (hereinafter referred to as construction moving bodies) which can be remotely operated. ) Is performed remotely. For example, in areas where volcanic activity has been damaged and volcanic activity continues, such as around Unzen Fugendake, disaster prevention measures such as dam construction are being implemented by remote construction.

【0003】図5は、そのような遠隔施工の一例を示
す。同図を参照するに、施工域1内で駆動させる複数の
施工用移動体2にそれぞれ撮像機5と画像送信機6を取
付け、撮像機5の画像(以下、移動体画像という。)を
遠隔操作室3の画像受信機10へ伝送し、操作室3の操作
員が移動体画像に基づいて施工用移動体2の遠隔操作を
する。撮像機5の一例は、施工用移動体2上にステレオ
方式で固定された一対の撮像機5L及び5Rからなり左右一
対の二眼視立体画像(以下、ステレオ画像という。)を
出力するものである。また同図では、施工域1内に撮像
機4と画像送信機7が取付けられた撮影用移動体13を配
置し、その撮像機4の画像(以下、監視画像という。)
も操作室3へ伝送し、施工用移動体2の遠隔操作及び施
工域1内の施工状況の監視に利用している。監視画像と
してもステレオ画像が利用される。なお各移動体2、13
には衛星航行システム(以下、GPSという。)による
座標計測手段22が取付けられ、座標計測手段22の計測座
標に基づき操作室3で各移動体2、13の施工域1内での
位置を把握している。図中の符号11はデータ伝送用タワ
ー、符号12は測量用ヘリコプターを示す。
FIG. 5 shows an example of such a remote construction. Referring to FIG. 1, an image pickup device 5 and an image transmitter 6 are attached to a plurality of construction moving bodies 2 driven in a construction area 1, respectively, and an image of the imaging machine 5 (hereinafter, referred to as a moving body image) is remote. The image data is transmitted to the image receiver 10 in the operation room 3, and the operator in the operation room 3 remotely controls the construction moving body 2 based on the moving body image. An example of the imaging device 5, a pair of left and right binocular vision stereoscopic image made from a fixed pair of imaging device 5 L and 5 R stereo system on construction for mobile 2 outputs (hereinafter, referred to as stereo image.) Things. Further, in FIG. 1, a photographing moving body 13 to which the image pickup device 4 and the image transmitter 7 are attached is arranged in the construction area 1, and an image of the image pickup device 4 (hereinafter, referred to as a monitoring image).
Is also transmitted to the operation room 3 and used for remote control of the construction moving body 2 and monitoring of the construction state in the construction area 1. A stereo image is also used as the monitoring image. Each mobile unit 2, 13
Is equipped with a coordinate measuring means 22 by a satellite navigation system (hereinafter referred to as GPS), and the positions of the moving bodies 2 and 13 in the construction area 1 are grasped in the operation room 3 based on the measured coordinates of the coordinate measuring means 22. doing. In the figure, reference numeral 11 denotes a data transmission tower, and reference numeral 12 denotes a survey helicopter.

【0004】しかし遠隔施工では、一般の施工で設計形
状等を示すために用いる縄等の指標(以下、丁張とい
う。)の設置が困難であるため、丁張を用いた施工に比
し作業効率が低下し施工品質も劣りがちとなる問題点が
あった。この問題点解決のため、本発明者らは、前記移
動体画像又は監視画像(以下、両者を纏めてステレオ操
作画像という。)上へ、丁張に代る三次元コンピュータ
グラフィックのステレオ設計画像を重畳してステレオ支
援画像とする遠隔施工用の画像システムを開発し、特願
平7-267549号に開示した。以下図6〜図8を参照して同
画像システムを簡単に説明する。
[0004] However, in remote construction, it is difficult to install indices such as ropes (hereinafter referred to as swords) used to indicate a design shape or the like in general construction, and thus work is difficult as compared to construction using swords. There is a problem that the efficiency is lowered and the construction quality tends to be inferior. In order to solve this problem, the present inventors have applied a stereo design image of a three-dimensional computer graphic instead of a drawing on the moving object image or the monitoring image (hereinafter, both are collectively referred to as a stereo operation image). An image system for remote construction that is superimposed and made into a stereo support image was developed and disclosed in Japanese Patent Application No. 7-267549. Hereinafter, the image system will be briefly described with reference to FIGS.

【0005】図6は同画像システムの構成を示し、施工
対象1aのステレオ操作画像Iw(左右一対の操作画像IwL
及びIwRからなる。以下同じ。)を視点Vと光軸Oと画
角Wとに応じて与える撮像機対5(左右一対の撮像機5L
及び5Rからなる。以下同じ。)、ある座標に設計した点
のステレオ設計画像Ie(左右一対の設計画像IeL及びIeR
からなる。以下同じ。)を視点と光軸と画角とに応じて
作成する三次元グラフィック手段30、並びにステレオ操
作画像Iwとステレオ設計画像Ieとを重畳する重畳手段36
を備えてなる。ステレオ設計画像Ieの基になる「ある座
標に設計した点」とは、例えば施工対象1aの掘削位置や
切土・盛土位置、勾配等を示す丁張上の点又は設計図上
の点の群である。図6のグラフィック手段30は、設計さ
れた点の座標を記憶する記憶手段31と、その座標に基づ
き左右のグラフィック画像IkL、IkRを作成するグラフィ
ック作成装置32L、32Rと、グラフィック作成装置32L、3
2Rから同期信号SkL、SkRを入力してステレオ同期信号Se
を出力する左右同期装置33と、グラフィック画像IkL、I
kR及びステレオ同期信号Seから左右の設計画像IeL、I eR
を作成する画像変換機34L、34Rとを有する。また同図の
重畳手段36は、重畳同期手段37と画像合成手段38とを有
する。
FIG. 6 shows the configuration of the image system.
Stereo operation image I of target 1aw(A pair of left and right operation images IwL
And IwRConsists of same as below. ) With the viewpoint V, the optical axis O and the image
Imager pair 5 (a pair of left and right imagers 5) given in accordance with the angle WL
And 5RConsists of same as below. ), A point designed at a certain coordinate
Stereo Design Image Ie(A pair of left and right design images IeLAnd IeR
Consists of same as below. ) According to viewpoint, optical axis and angle of view
The three-dimensional graphic means 30 to be created and the stereo operation
Image IwAnd stereo design image IeSuperimposing means 36 for superimposing
Is provided. Stereo Design Image IeThe base of
The point designed as a target '' means, for example, the excavation position of
A point on the tongue indicating the cut / embankment position, slope, etc. or on the design drawing
Is a group of points. The graphic means 30 of FIG.
Storage means 31 for storing the coordinates of the point
Left and right graphic image IkL, IkRCreate graphics
Lock making device 32L, 32RAnd the graphic creation device 32L, 3
TwoRFrom the synchronization signal SkL, SkRAnd input the stereo sync signal Se
Synchronizer 33 that outputskL, I
kRAnd stereo synchronization signal SeLeft and right design image IeL, I eR
Create image converter 34L, 34RAnd Also in the figure
The superimposing means 36 includes a superimposing synchronizing means 37 and an image synthesizing means 38.
I do.

【0006】使用に際し、図7に示すように、撮像機対
5の視野内の既知座標Pにおける視標8aの初期ステレオ
操作画像Iw1(Iw1LとIw1R)を撮像機対5により初期視
点V1と初期光軸O1と一定画角Wwとで撮影し、既知座標P
の複数の視標8aの初期ステレオ設計画像Ie1(Ie1LとI
e1R)をグラフィック手段30により初期視点V1と初期光
軸O1と任意画角Wxとで作成し、重畳手段36で初期ステレ
オ操作画像Iw1と初期ステレオ設計画像Ie1とを同一向き
で重畳し、グラフィック手段30の任意画角Wxを変化させ
て前記重畳した初期ステレオ操作画像Iw1及び初期ステ
レオ設計画像Ie1の対応視標8aの像を一致させ、一致時
のグラフィック手段30の任意画角Wxを撮像機対応画角We
とする。撮像機対5の視点V及び光軸Oは、例えば施工
用移動体2上の座標計測手段22及び姿勢計測手段23で計
測し、無線送信装置24及び無線受信装置26経由で操作室
3のグラフィック手段30に伝送する(図6参照)。
In use, as shown in FIG. 7, an initial stereo operation image I w1 (I w1L and I w1R ) of the optotype 8a at a known coordinate P in the visual field of the imaging device pair 5 is used by the imaging device pair 5 as an initial viewpoint. V 1 , the initial optical axis O 1, and a fixed angle of view W w
Initial stereo design images I e1 (I e1L and I
The E1R) by the graphic means 30 created in the initial viewpoint V 1 and the initial optical axis O 1 and any angle W x, the initial stereo operation image I w1 and the initial stereo design image I e1 in the same direction in superposition means 36 superimposed, to match the image of the corresponding optotype 8a of the initial stereo operation image I w1 and the initial stereo design image I e1 which is the superimposed by changing any angle W x graphic means 30, matching the time of the graphic unit 30 any angle of view W imaging device corresponding angle of the x W e
And The viewpoint V and the optical axis O of the imaging device pair 5 are measured, for example, by the coordinate measuring means 22 and the attitude measuring means 23 on the construction moving body 2, and the graphics of the operation room 3 are transmitted via the wireless transmitting device 24 and the wireless receiving device 26. It is transmitted to the means 30 (see FIG. 6).

【0007】その後、図8に示すように、施工対象1aの
ステレオ操作画像Iw(IwLとIwR)を撮像機対5により所
定視点Viと所定光軸Oiと一定画角Wwとで撮影し、施工対
象1aのステレオ設計画像Ie(IeLとIeR)をグラフィック
手段30により所定視点Viと所定光軸Oiと撮像機対応画角
Weとで作成し、重畳手段36により施工対象1aのステレオ
操作画像Iwとステレオ設計画像Ieとを重畳してステレオ
支援画像It(左右一対の支援画像ItL及びItRからなる。
以下同じ。)を作成する。ステレオ支援画像Itをステレ
オ画像生成機42へ入力し、例えば1/120秒程度の高速度
で交互に切替えながらディスプレイ14に時分割表示す
る。操作室3の操作員は、ステレオ画像生成機42の画像
切替と同期して左眼及び右眼が交互に閉鎖される液晶シ
ャッター眼鏡16を介してディスプレイ14上のステレオ支
援画像Itを観察することにより、ステレオ支援画像It
立体視しながら遠隔操作をする。この画像システムを用
いた遠隔施工では、例えば図8に示すように、丁張が表
示されたステレオ支援画像Itを立体観察しながら作業を
行なえるので、作業の指標が得られると共に作業効率の
向上が期待できる。
[0007] Thereafter, as shown in FIG. 8, construction stereo operation image of the target 1a I w (I wL and I wR) predetermined viewpoint by the image pickup machine-to 5 V i with a predetermined optical axis O i constant angle W w taken with a stereo design image I e (I eL and I eR) predetermined viewpoint V i with a predetermined optical axis O i and the imaging unit corresponding angle by the graphic means 30 the construction target 1a
Created in the W e, consists of a stereo operation image I w stereo design image I e by superimposing the to the stereo support image I t (a pair of right and left support image I tL and I tR construction target 1a by superposing means 36.
same as below. ) To create. Enter the stereo support image I t to the stereoscopic image generating apparatus 42, for example, a display 14 in time-division display while alternately switched at a high speed of about 1/120 sec. Operator of the operating chamber 3 via the liquid crystal shutter glasses 16 left and right eyes are alternately closed in synchronization with the image switching of the stereoscopic image generation apparatus 42 for observing the stereoscopic assistant image I t on the display 14 it allows the remote operation while stereoscopic stereo-assisted image I t. In the remote installation using an image system, for example, as shown in FIG. 8, since Zhang Zhang perform the work while the three-dimensional observation of the stereoscopic assistant image I t which is displayed, the work efficiency along with an indication of the work can be obtained Improvement can be expected.

【0008】[0008]

【発明が解決しようとする課題】図5に示すような遠隔
施工では、操作ミス等に起因して、例えば施工用移動体
2が施工域1内の盛土等(図1参照)から転落し又は施
工域1内の所定作業区域から逸脱すること(以下、纏め
て作業区域からの逸脱という。)を避ける必要がある。
施工域1を無人化した遠隔施工では逸脱した施工用移動
体2の復旧が難しく、また予定作業区域からの逸脱は施
工管理上の問題を生じることがあるからである。前記特
願平7-267549号の画像システムにおいて、施工用移動体
2の作業区域を案内点として示すグラフィック画像と操
作画像Iwとの重畳ステレオ支援画像Itが提供できれば、
操作員は作業区域を確認しながら遠隔操作ができるの
で、施工用移動体2の作業区域からの逸脱防止に貢献で
きる。
In remote construction as shown in FIG. 5, for example, the construction moving body 2 falls down from the embankment or the like in the construction area 1 (see FIG. 1) due to an operation error or the like. It is necessary to avoid departure from a predetermined work area in the construction area 1 (hereinafter, referred to as a deviation from the work area collectively).
This is because remote construction in which the construction area 1 is unmanned makes it difficult to recover the construction moving body 2 that has deviated, and deviation from the planned work area may cause a problem in construction management. In the above Japanese Patent Application 7-267549 Patent imaging system, if provided superimposed stereo support image I t of a graphic image indicating the working area of the construction for mobile 2 as a guidance point and operation image I w is,
The operator can remotely control the work area while checking the work area, thereby contributing to preventing the construction moving body 2 from deviating from the work area.

【0009】しかし実際の遠隔施工では、施工域1の地
形等が工事の進捗に応じて変化するので、施工用移動体
2の作業区域もそれに応じて変らざるを得ない。例えば
施工域1内の盛土等(図1参照)から施工用移動体2が
転落するのを防止する場合において、盛土等の形状は一
定ではなく、その形状に応じて施工用移動体2の作業区
域が決まる。従って施工域1内の作業区域を案内点とし
て示す画像は、例えば図6のグラフィック手段30の記憶
手段31に記憶した「設計した点」のような一定の座標に
基づいて作成するのは難しく、施工域1の地形等の変化
に応じて案内点の座標を変更しなければならない。図6
〜図8の従来の画像システムでは、操作画像Iwに重畳さ
せるグラフィック画像を施工域1の地形等に応じて変更
することが難しい。
However, in actual remote construction, since the topography of the construction area 1 changes according to the progress of the construction, the work area of the construction moving body 2 must be changed accordingly. For example, in the case where the construction moving body 2 is prevented from falling from the embankment or the like in the construction area 1 (see FIG. 1), the shape of the embankment or the like is not constant, and the work of the construction moving body 2 is performed according to the shape. The area is determined. Therefore, it is difficult to create an image showing the work area in the construction area 1 as a guide point based on fixed coordinates such as “designed points” stored in the storage means 31 of the graphic means 30 in FIG. The coordinates of the guide point must be changed according to the change in the topography and the like of the construction area 1. FIG.
In the conventional image system to 8, it is difficult to change in accordance with the graphic image to be superimposed on the operation image I w terrain like construction zone 1.

【0010】そこで本発明の目的は、操作画像に重畳す
るグラフィック画像の変更が容易なステレオ式操作支援
画像システムを提供するにある。
SUMMARY OF THE INVENTION It is an object of the present invention to provide a stereo operation support image system in which a graphic image superimposed on an operation image can be easily changed.

【0011】[0011]

【課題を解決するための手段】図1及び図4の実施例を
参照するに、本発明の施工用移動体の遠隔操作支援画像
システムは、遠隔操作で駆動する施工用移動体2の施工
域1に臨む所定視点Vから所定光軸O及び所定画角Wで
ステレオ操作画像Iw(左右一対の操作画像IwLとIwR)を
撮影する撮像機対4(左右一対の撮像機4L及び4Rからな
る。以下同じ。)、施工域1内の案内点群の三次元座標
Tを入力する案内点入力手段44、案内点群の三次元座標
Tに基づき所定視点Vから所定光軸O及び所定画角Wで
ステレオ案内画像Ig(左右一対の案内画像IgLとIgRから
なる。以下同じ。)を作成する三次元グラフィック手段
30、並びにステレオ操作画像Iwとステレオ案内画像Ig
の重畳によりステレオ操作支援画像Is(左右一対の操作
支援画像IsLとIsRからなる。以下同じ。)を作成する画
像重畳手段36を備えてなる。
With reference to the embodiments of FIGS. 1 and 4, a remote control support image system for a construction moving object according to the present invention comprises a construction area of a construction moving object 2 driven by remote control. stereo operation image I w imaging device to photograph the (left and right pair of operation images I wL and I wR): 4 (a pair of left and right imaging unit 4 L and a predetermined optical axis O and a predetermined angle W from a predetermined view point V facing the 1 4 R. The same shall apply hereinafter.), A guide point input means 44 for inputting the three-dimensional coordinates T of the guide point group in the construction area 1, a predetermined viewpoint V to a predetermined optical axis O based on the three-dimensional coordinate T of the guide point group. and stereo guide image I g at a predetermined angle W (consisting of a pair of left and right guide image I gL and I gR. hereinafter the same.) three-dimensional graphic means for creating a
30, and the image superposing means 36 for creating a stereo operation image I w stereo guide image I g and superimposed by the stereo operation supporting image I s of (left and right pair of operation consisting of supporting images I sL and I sR. Hereinafter the same.) Is provided.

【0012】撮像機対4の所定視点Vは、左撮像機4L
撮影位置(VLと表す。)と右撮像機4Rの撮影位置(VR
表す。)とからなる。撮像機4の所定光軸Oは、左撮像
機4Lの撮影向き及びローリング角(両者を纏めてOLと表
す。)と、右撮像機4Rの撮影向き及びローリング角(両
者を纏めてORと表す。)とからなる。撮像機4の所定画
角Wは左撮像機4Lと右撮像機4Rとに共通の画角Wとす
る。
[0012] predetermined viewpoint V imaging device pair 4, consists of the photographing position of the left imaging device 4 L and (expressed as V L.) Right imaging unit 4 R imaging position of the (expressed as V R.) And. Predetermined optical axis O of the imaging device 4, the left imaging unit 4 L photographing direction and the rolling angle of the (collectively both expressed as O L.), Imaging direction and the rolling angle of the right imaging unit 4 R (collectively both O R ). Predetermined angle W of the image pickup device 4 to a common angle W to the 4 R left imaging unit 4 L and the right imaging device.

【0013】また図4を参照するに、三次元グラフィッ
ク手段30の所定視点Vは、左案内画像IgLに対する左視
点座標VLと右案内画像IgRに対する右視点座標VRとから
なる。また三次元グラフィック手段30の光軸は、左案内
画像IgLに対する光軸向き及びローリング角OLと、右案
内画像IgRに対する光軸向き及びローリング角ORとから
なる。三次元グラフィック手段30の画角は左案内画像I
gLと右案内画像IgRとに共通の画角Wとする。
[0013] Referring to FIG. 4, a predetermined view point V of the three-dimensional graphics unit 30 is composed of a right-viewpoint coordinate V R for the left viewpoint coordinate V L and the right guide image I gR for the left guide image I gL. The optical axis of the three-dimensional graphics unit 30 comprises an optical axis direction and the rolling angle O L for the left guide image I gL, the optical axis direction with respect to the right guide image I gR and a rolling angle O R. The angle of view of the three-dimensional graphic means 30 is the left guide image I
It is assumed that the angle of view W is common to gL and the right guide image IgR .

【0014】[0014]

【発明の実施の形態】図1、図3(a)及び図4は、施工
域1内の盛土上で駆動する施工用移動体2の遠隔施工に
本発明を適用した実施例を示す。撮像機対4L、4Rは、例
えば撮影用移動体13(図5参照)に取付けて盛土等の作
業状況が撮影可能な位置へ移動させる。撮像機対4の所
定視点V即ち各撮像機4L、4Rの撮影位置VL、VRを移動体
13上の座標計測手段20で計測し、撮像機4の所定光軸O
即ち各撮像機4L、4Rの撮影向き及びローリング角OL、OR
を移動体13上の姿勢計測手段23で計測する。座標計測手
段20の一例はGPS利用の座標計測装置又は三次元測量
用プリズムであり、姿勢計測手段23の一例は角度計測装
置である。撮像機対4の一例は2台のCCDカメラであ
り、その画角は撮像機対4に固有とするか又は遠隔操作
で調整可能とする。撮像機対4の出力するステレオ操作
画像Iwは画像送信機7及び画像受信機10経由で操作室3
へ伝送する。
DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS FIGS. 1, 3 (a) and 4 show an embodiment in which the present invention is applied to a remote construction of a construction moving body 2 driven on an embankment in a construction area 1. FIG. Imager vs. 4 L, 4 R, for example the working conditions of the embankment or the like attached to the photographing for mobile 13 (see FIG. 5) moves to a position that allows imaging. Imager pairs 4 of a predetermined view point V i.e. the imager 4 L, 4 R shooting position V L, moving the V R body
13 is measured by the coordinate measuring means 20 on the
That is, each imaging device 4 L, 4 R photographing direction and the rolling angle O L of, O R
Is measured by the posture measuring means 23 on the moving body 13. One example of the coordinate measuring means 20 is a coordinate measuring device using GPS or a three-dimensional surveying prism, and one example of the attitude measuring means 23 is an angle measuring device. One example of the imager pair 4 is two CCD cameras, and the angle of view is unique to the imager pair 4 or can be adjusted by remote control. The stereo operation image I w output from the imaging device pair 4 is transmitted to the operation room 3 via the image transmitter 7 and the image receiver 10.
Transmit to

【0015】図1の案内点入力手段44は、ステレオ操作
画像Iw上に案内点群の二次元座標T0を入力する座標入力
手段45と、ステレオ操作画像Iw上の任意点の二次元座標
から施工域1内の三次元座標を算出するステレオ画像計
測法の変換パラメタ50と、前記案内点群の二次元座標T0
及び前記変換パラメタ50から該案内点群の三次元座標T
を算出する座標算出手段52とを有する。ステレオ画像計
測法とはステレオ画像上の対象の像の二次元座標から該
対象の三次元座標を求める座標計測方法であり、施工域
1内の三次元座標が既知の複数の基準対象に対するステ
レオ画像上の二次元座標を検出することによりステレオ
画像計測法の変換パラメタ50が求められる。本発明者ら
は無人施工域で変換パラメタ50を正確に同定する方法を
開発し特開平8-101035号公報に開示した。例えば同公報
の方法で同定した変換パラメタ50を本発明で利用するこ
とができる。変換パラメタ50は座標算出手段52に接続さ
れた記憶手段49へ記憶する。
The guidance point input unit 44 of FIG. 1, a coordinate input unit 45 for inputting a two-dimensional coordinate T 0 of the guide point group on stereo operation image I w, of any point on the stereo operation image I w dimensional A conversion parameter 50 of the stereo image measurement method for calculating three-dimensional coordinates in the construction area 1 from the coordinates, and two-dimensional coordinates T 0 of the guide point group.
And the three-dimensional coordinates T of the guide point group from the conversion parameter 50.
And a coordinate calculation means 52 for calculating The stereo image measurement method is a coordinate measurement method for obtaining three-dimensional coordinates of a target image from the two-dimensional coordinates of the target image on the stereo image, and is a stereo image for a plurality of reference targets whose three-dimensional coordinates in the construction area 1 are known. By detecting the above two-dimensional coordinates, a conversion parameter 50 of the stereo image measurement method is obtained. The present inventors have developed a method for accurately identifying the conversion parameter 50 in an unmanned construction area, and disclosed it in Japanese Patent Application Laid-Open No. H8-101035. For example, the conversion parameter 50 identified by the method of the publication can be used in the present invention. The conversion parameter 50 is stored in the storage unit 49 connected to the coordinate calculation unit 52.

【0016】図1の座標入力手段45は、ステレオ操作画
像Iw用の左右一対のフレームメモリ47L、47Rと、フレー
ムメモリ47L、47Rの内容を表示するモニタ46aと、モニ
タ46aに表示されたステレオ操作画像Iw上に案内点群の
位置を指示するライトペン等の座標指示手段46bと、指
示された案内点群の二次元座標を検出する座標検出手段
48とを有する。座標指示手段46bから入力された案内点
群の位置指示はフレームメモリ47L、47R経由で座標検出
手段48へ送られ、座標検出手段48がステレオ操作画像Iw
上の案内点群の二次元座標T0を検出する。座標算出手段
52は、検出された案内点群の二次元座標T0とステレオ画
像計測法の変換パラメタ50とに基づいて該案内点群の三
次元座標Tを算出し、三次元グラフィック手段30へ出力
する。
The coordinate input unit 45 of FIG. 1, a stereo operation image I frame memory 47 of the pair of left and right for w L, 47 R, and a monitor 46a for displaying the contents of the frame memory 47 L, 47 R, the monitor 46a coordinate detecting means for detecting the two-dimensional coordinates of the instruction means 46b, indicated guided point group of the light pen to indicate the position of the guide point group on the displayed stereoscopic operation image I w
And 48. Coordinate pointing device 46b frame memory 47 is located instruction guidance point groups input from the L, 47 via R sent to the coordinate detecting means 48, the coordinate detecting means 48 for stereo operation image I w
Detecting the two-dimensional coordinates T 0 of the guide point group above. Coordinate calculation means
52 calculates the three-dimensional coordinates T of the guide point group based on the detected two-dimensional coordinates T 0 of the guide point group and the conversion parameter 50 of the stereo image measurement method, and outputs it to the three-dimensional graphic means 30.

【0017】三次元グラフィック手段30は、案内点群の
三次元座標Tと、一対の視点座標すなわち所定視点V
と、一対の光軸向き及びローリング角すなわち所定光軸
Oと、所定画角Wとに基づき、ステレオ案内画像Igを作
成する。撮像機対4の所定視点V及び所定光軸Oの信号
は、例えば無線式又は有線式の送信装置24及び受信装置
26経由で三次元グラフィック手段30へ伝送する。ステレ
オ案内画像Igの画角をステレオ操作画像Iwの画角と一致
させるため、図6の場合と同様に、初期処理において三
次元グラフィック手段30の画角を撮像機対4の所定画角
Wに一致させることができる。図4は、画像重畳手段36
が撮像機4によるステレオ操作画像Iwと三次元グラフィ
ック手段30によるステレオ案内画像Igとを重畳し、ステ
レオ操作支援画像Isを作成することを示す。三次元グラ
フィック手段30及び画像重畳手段36は、図6の例と同じ
構成とすることができる。
The three-dimensional graphic means 30 includes three-dimensional coordinates T of the guide point group and a pair of viewpoint coordinates, that is, a predetermined viewpoint V
And a pair of optical axis directions and a rolling angle, that is, a predetermined optical axis O and a predetermined angle of view W, to create a stereo guide image Ig . The signals of the predetermined viewpoint V and the predetermined optical axis O of the imaging device pair 4 are, for example, a wireless or wired transmission device 24 and a reception device.
The data is transmitted to the three-dimensional graphic means 30 via 26. In order to match the angle of view of the stereo guide image Ig with the angle of view of the stereo operation image Iw , the angle of view of the three-dimensional graphic means 30 is set to the predetermined angle of view of the imaging device pair 4 in the initial processing as in the case of FIG. W can be matched. FIG. 4 shows the image superimposing means 36.
There show that superimposes a stereo guide image I g by Stereo operation image I w and 3D graphics unit 30 by the image pickup device 4, to create a stereo operation supporting image I s. The three-dimensional graphic means 30 and the image superimposing means 36 can have the same configuration as the example in FIG.

【0018】図3(A)及び図4は、盛土の法肩に沿った
案内点群(以下、法肩案内点群という。)を表示したス
テレオ操作支援画像Isの一例を示す。このようなステレ
オ案内画像Igを作成する場合は、法肩案内点群の三次元
座標Tを三次元グラフィック手段30へ入力する。即ち図
1で説明するに、モニタ46aに表示されたステレオ操作
画像Iw上で盛土法肩の位置を座標指示手段46bで指示す
ることにより法肩案内点群の二次元座標を入力し、座標
検出手段52で法肩案内点群の二次元座標T0を検出し、そ
の二次元座標T0と変換パラメタ50とから座標算出手段52
で法肩案内点群の三次元座標Tを算出する。なお図示例
のステレオ案内画像Igは、法肩案内点群を所定厚さで所
定高さの壁板状案内点群として表示している。この場合
は、座標算出手段52に所定厚さ及び所定高さを記憶し、
座標算出手段52により法肩案内点群の二次元座標T0と変
換パラメタ50と前記所定厚さ及び所定高さとから壁板状
案内点群の三次元座標Tを算出し、その三次元座標を三
次元グラフィック手段30へ出力する。但し案内点群の像
の形や大きさは図示例に限定されない。
[0018] FIGS. 3 (A) and 4, the guide point group along the embankment law shoulder (hereinafter, referred to as legal shoulder guiding point group.) Shows an example of a display with stereo operation supporting images I s a. To create such a stereo guide image Ig , the three-dimensional coordinates T of the staggered guide point group are input to the three-dimensional graphic means 30. That will be described in FIG. 1, type the two-dimensional coordinates of law shoulder guiding point group by indicating the position of the fill process the shoulder on the monitor 46a to display stereo operation image I w coordinate instruction unit 46b, the coordinates The detecting means 52 detects the two-dimensional coordinates T 0 of the staggered guidance point group, and calculates the coordinate calculating means 52 from the two-dimensional coordinates T 0 and the conversion parameter 50.
Calculates the three-dimensional coordinates T of the steep shoulder guidance point group. Incidentally stereo guide image I g in the illustrated example, displaying a legal shoulder guiding point group as a wall plate shaped guide point group of a predetermined height at a predetermined thickness. In this case, a predetermined thickness and a predetermined height are stored in the coordinate calculation means 52,
The coordinate calculation means 52 calculates the three-dimensional coordinates T of the wall-plate-like guide point group from the two-dimensional coordinates T 0 of the staggered guide point group, the conversion parameter 50, and the predetermined thickness and predetermined height, and calculates the three-dimensional coordinates. Output to the three-dimensional graphic means 30. However, the shape and size of the image of the guide point group is not limited to the illustrated example.

【0019】図4を参照するに、画像重畳手段36で作成
したステレオ操作支援画像Isをステレオ画像生成機42へ
入力し、例えばディスプレイ14上に時分割表示する。操
作員はディスプレイ14上に表示されたステレオ操作支援
画像Isを液晶シャッター眼鏡16を介して立体視する。ス
テレオ画像生成機42、ディスプレイ14及び液晶シャッタ
ー眼鏡16は従来技術に属するものである。本発明によれ
ば、ステレオ案内画像Igの変更が必要な場合に、案内点
入力手段45から案内点群の三次元座標Tを入力すること
により、その変更が簡単にできる。例えば図4のように
盛土上で駆動する施工用移動体2を遠隔操作する場合に
おいて、進捗に応じて盛土の形状等が変化しても法肩案
内点群の座標を適宜入力することにより常に法肩案内点
群の明示された操作支援画像Isが提供できるので、操作
ミス等に起因する施工用移動体2の盛土からの転落その
他作業区域からの逸脱の防止が期待できる。
[0019] Referring to FIG. 4, enter the stereo operation assistant image I s created by the image superimposing unit 36 to the stereoscopic image generation unit 42, time-division display example on the display 14. Operator stereoscopic viewing through the liquid crystal shutter glasses 16 stereo operation supporting image I s, which is displayed on the display 14. The stereo image generator 42, the display 14, and the liquid crystal shutter glasses 16 belong to the related art. According to the present invention, when the stereo guide image Ig needs to be changed, the change can be easily performed by inputting the three-dimensional coordinates T of the guide point group from the guide point input means 45. For example, in the case where the construction moving body 2 driven on the embankment is remotely controlled as shown in FIG. 4, even if the shape of the embankment changes in accordance with the progress, the coordinates of the slope guide point group are always input as appropriate. since it provided legal shoulder guidance point group of explicit operation supporting image I s, prevention of deviation from falling other work area from construction for mobile 2 embankment due to operation error or the like can be expected.

【0020】こうして本発明の目的である「操作画像に
重畳するグラフィック画像の変更が容易なステレオ式操
作支援画像システム」の提供が達成できる。
In this manner, the object of the present invention is to provide a "stereo-type operation support image system in which a graphic image superimposed on an operation image can be easily changed".

【0021】[0021]

【実施例】図2及び図3(B)は、施工用移動体2を所定
移動計画線分上で移動させる場合に、その移動計画線分
を案内点群として表示した本発明の実施例を示す。コン
クリートダムの施工等では、打設コンクリートの仕上り
品質を確保するため固化前のコンクリート上で締固め用
の施工用移動体(以下、締固めローラという。)を転が
す作業(以下、転圧作業という。)が不可欠である。転
圧作業は、締固めローラをコンクリート打設後の所定移
動計画線分(線分の集合としての曲線を含む。以下同
じ)上で所定回数往復させて該移動計画線分上のローラ
幅の帯状域(以下、ローラ加圧域という。)を転圧し、
続いて締固めローラを隣接移動計画線分上へ移動させ且
つ隣接移動計画線分上で再度締固めローラを所定回数往
復させて隣接移動計画線分上のローラー加圧域を転圧
し、前記所定回数の往復移動と隣接移動計画線分への移
動とを繰返す作業である。転圧作業はコンクリート品質
を確保する重要な工程であるため、同一移動計画線分上
での締固めローラの往復回数、隣接するローラ加圧域の
重なり幅等が施工管理の対象とされている。しかし遠隔
施工では、締固めローラを同一移動計画線分上で移動さ
せる操作や所定重なり幅の隣接移動計画線分上へ移動さ
せる操作が難しい場合があり、締固めローラが所定移動
計画線分から逸脱し易く、所望のコンクリート品質が確
保できない虞がある。移動計画線分を案内画像として表
示できれば、締固めローラの移動計画線分からの逸脱防
止を図り、施工品質の向上も期待できる。
FIGS. 2 and 3B show an embodiment of the present invention in which, when the construction moving body 2 is moved on a predetermined movement planning line, the movement planning line is displayed as a guide point group. Show. In the construction of concrete dams, etc., a work for rolling a compacting construction body (hereinafter referred to as a compaction roller) on concrete before solidification (hereinafter referred to as a compaction work) in order to ensure the finish quality of cast concrete. .) Is essential. Rolling work is performed by reciprocating the compaction roller a predetermined number of times on a predetermined moving planned line segment (including a curve as a set of line segments; the same applies hereinafter) after the concrete is cast, and the roller width on the moving planned line segment is reduced. Rolling a belt-shaped area (hereinafter referred to as a roller pressing area),
Subsequently, the compaction roller is moved onto the adjacent movement planning line segment, and the compaction roller is reciprocated a predetermined number of times again on the adjacent movement planning line segment to roll the roller pressurizing area on the adjacent movement planning line segment. This is an operation of repeating the reciprocating movement a number of times and the movement to the adjacent movement planning line segment. Since the compaction work is an important process to ensure the quality of concrete, the number of reciprocations of compaction rollers on the same movement plan line segment, the overlap width of adjacent roller pressurization areas, etc. are subject to construction management . However, in remote construction, it may be difficult to move the compaction roller on the same movement plan line or to move it to an adjacent movement plan line with a predetermined overlap width, and the compaction roller deviates from the predetermined movement plan line. Therefore, there is a possibility that the desired concrete quality cannot be ensured. If the movement planning line segment can be displayed as a guide image, it is possible to prevent the compaction roller from deviating from the movement planning line segment, and to improve the construction quality.

【0022】図2の実施例では、施工域1における施工
用移動体2の位置座標を計測する座標計測手段22a及び2
2bを案内点入力手段44に接続させて設けている。また同
図の案内点入力手段44は、施工用移動体2の案内方位D
を入力する方位入力手段54と、座標計測手段22a及び22b
が計測する位置座標R及び案内方位Dから案内点群の三
次元座標Tを算出する座標算出手段55とを有する。座標
計測手段22a及び22bの一例はGPS利用による座標計測
装置であり、その場合は計測装置22bで地表既知座標の
操作室3の三次元座標を計測し、同時に計測装置22aで
移動体3の三次元座標を計測し、両計測装置22a、22bの
計測値から相対測位法で操作室3から施工用移動体2に
至る三次元ベルトルを求め、操作室3の既知座標と前記
三次元ベクトルとから施工用移動体2の位置座標Rを算
出する。但し座標計測手段22はGPS計測に限定され
ず、例えば操作室3に設けた自動追尾式トータルステー
ション等の測量機器とすることができる。
In the embodiment shown in FIG. 2, coordinate measuring means 22a and 22a for measuring the position coordinates of the construction moving body 2 in the construction area 1.
2b is provided so as to be connected to the guide point input means 44. In addition, the guide point input means 44 in FIG.
Input means 54 for inputting the coordinates, and the coordinate measuring means 22a and 22b
And a coordinate calculating means 55 for calculating three-dimensional coordinates T of the guide point group from the position coordinates R and the guide azimuth D measured by. One example of the coordinate measuring means 22a and 22b is a coordinate measuring device using GPS. In this case, the measuring device 22b measures the three-dimensional coordinates of the operation room 3 of the known coordinates on the ground, and at the same time, the measuring device 22a measures the tertiary coordinates of the moving body 3. The original coordinates are measured, and a three-dimensional belt from the operation room 3 to the construction moving body 2 is obtained from the measured values of the two measurement devices 22a and 22b by a relative positioning method, and is obtained from the known coordinates of the operation room 3 and the three-dimensional vector. The position coordinates R of the construction moving body 2 are calculated. However, the coordinate measuring means 22 is not limited to the GPS measurement, and may be, for example, a surveying instrument such as an automatic tracking type total station provided in the operation room 3.

【0023】コンクリートを打込み、ブルドーザで敷均
し作業を行った後、締固めローラをコンクリート上の初
期位置へ移動させる。例えばこの初期位置の位置座標R
を座標計測手段22で計測して座標算出手段55へ入力す
る。他方、所定移動計画線分の方位を案内方位Dとして
方位入力手段54から座標算出手段55へ入力する。座標算
出手段55は位置座標Rと案内方位Dとに基づいて所定移
動計画線分上の三次元座標Tを算出し、該三次元座標T
を三次元グラフィック手段30に出力する。三次元グラフ
ィック手段30は三次元座標Tに基づいて所定移動計画線
分のステレオ案内画像Igを作成し、そのステレオ案内画
像Igとステレオ操作画像Iwとから画像重畳手段36がステ
レオ操作支援画像Isを作成する。
After the concrete is poured in and the work is spread with a bulldozer, the compaction roller is moved to the initial position on the concrete. For example, the position coordinates R of this initial position
Is measured by the coordinate measuring means 22 and input to the coordinate calculating means 55. On the other hand, the azimuth of the predetermined movement planned line is input as the guidance azimuth D from the azimuth input means 54 to the coordinate calculation means 55. The coordinate calculation means 55 calculates three-dimensional coordinates T on a predetermined movement planning line segment based on the position coordinates R and the guide direction D, and calculates the three-dimensional coordinates T
Is output to the three-dimensional graphic means 30. Three-dimensional graphics unit 30 creates a stereo guide image I g of predetermined movement plan segment based on the three-dimensional coordinates T, the image superimposing unit 36 is a stereo operational support from its stereo guide image I g and stereo operation image I w to create the image I s.

【0024】なお図3(B)のステレオ案内画像Igは、案
内点群をローラ幅の帯状案内点群として表している。同
図のようなステレオ案内画像Igを作成する場合は、座標
算出手段55にローラ幅を記憶し、上記方法で算出した所
定移動計画線分の三次元座標と該ローラ幅とから帯状案
内点群の三次元座標Tを算出する。
It should be noted stereo guidance image I g in FIG. 3 (B) represents a guidance point group as a belt guidance point group of roller width. When creating a stereo guide image I g as in the figure stores the roller width coordinate calculation unit 55, the strip guide point from the three-dimensional coordinates and the roller width of the predetermined movement plan segment calculated by the above method The three-dimensional coordinates T of the group are calculated.

【0025】[0025]

【発明の効果】以上説明したように本発明の施工用移動
体の遠隔操作支援画像システムは、撮像機対で撮影した
施工域のステレオ操作画像と、案内点入力手段から入力
した案内点群の三次元座標に基づき三次元グラフィック
手段が作成したステレオ案内画像との重畳によりステレ
オ操作支援画像を作成するので、次の顕著な効果を奏す
る。
As described above, the remote control assisting image system for a construction moving object according to the present invention provides a stereo operation image of a construction area photographed by a pair of image pickup devices and a guide point group inputted from a guide point input means. Since the stereo operation support image is created by superimposition with the stereo guide image created by the three-dimensional graphic means based on the three-dimensional coordinates, the following remarkable effects are obtained.

【0026】(イ)案内点入力手段から案内点群の座標を
入力するだけで、ステレオ操作画像に重畳するステレオ
案内画像を比較的簡単に変更できる。 (ロ)施工用移動体の作業区域が工事の進捗に応じて変化
する場合でも、その作業区域が明示されたステレオ操作
支援画像を遠隔操作員に提供できるので、操作ミス等に
起因する作業区域からの逸脱事故の発生防止が期待でき
る。 (ハ)施工用移動体を所定移動計画線分上で移動させる場
合に、その移動計画線分を明示したステレオ操作支援画
像が提供できるので、遠隔施工における施工品質の向上
が期待できる。
(A) By simply inputting the coordinates of the guide point group from the guide point input means, the stereo guide image to be superimposed on the stereo operation image can be changed relatively easily. (B) Even when the work area of the construction moving object changes in accordance with the progress of the construction, the work area caused by an operation error or the like can be provided to the remote operator with the stereo operation support image clearly indicating the work area. It can be expected to prevent the occurrence of deviation accidents. (C) When the moving object for construction is moved on the predetermined movement planning line segment, a stereo operation support image that clearly indicates the movement planning line segment can be provided, so that improvement in construction quality in remote construction can be expected.

【図面の簡単な説明】[Brief description of the drawings]

【図1】は、本発明の一実施例の説明図であるFIG. 1 is an explanatory diagram of one embodiment of the present invention.

【図2】は、本発明の他の実施例の説明図である。FIG. 2 is an explanatory diagram of another embodiment of the present invention.

【図3】は、ステレオ操作支援画像の説明図である。FIG. 3 is an explanatory diagram of a stereo operation support image.

【図4】は、本発明による画像重畳方法の説明図であ
る。
FIG. 4 is an explanatory diagram of an image superimposing method according to the present invention.

【図5】は、遠隔施工の説明図である。FIG. 5 is an explanatory diagram of remote construction.

【図6】は、従来技術の画像システムの説明図であるFIG. 6 is an explanatory diagram of a conventional image system.

【図7】は、従来の画像システムの画角決定方法の説明
図である
FIG. 7 is an explanatory diagram of a conventional method of determining an angle of view of an image system.

【図8】は、従来の画像システムにおける画像重畳方法
の説明図である
FIG. 8 is an explanatory diagram of an image superimposing method in a conventional image system.

【符号の説明】[Explanation of symbols]

1…施工域 1a…施工対象 2…施工用移動体 3…操作室 4、5…撮像機 6、7…画像送信機 8a…視標 10…画像受信機 11…データ伝送用タワー 12…測量用ヘリコプター 13…撮影用移動体 14…ディスプレイ 16…液晶シャッター眼鏡 20、22…座標計測手段 23…姿勢計測手段 24…無線送信装置 26…無線受信装置 30…三次元グラフィック手段 31…記憶手段 32…グラフィック作成手段 33…左右同期手段 34…画像変換機 36…重畳手段 37…重畳同期手段 38…画像合成手段 40…録画・再生手段 42…ステレオ画像生成機 44…案内点入力手段 45…座標入力手段 46a…モニタ 46b…座標指示手段 47…フレームメモリ 48…座標検出手段 49…記憶手段 50…変換パラメタ 52…座標算出手段 54…方位入力手段 55…座標算出手段 Iw…ステレオ操作画像 Ie…ステレオ設計画像 Ik…グラフィック画像 It…ステレオ支援画像 Ig…ステレオ案内画像 Is…ステレオ操作支援画像 V…視点 O…光軸 P…視標の座標 W…画角 Ww…一定画角 We…撮像機対応画角 Wx…任意画角 Sk…同期信号 Se…ステレオ同期信号 Sw…ステレオ撮影同期信号 R…移動体の座標 D…案内方位 T0…案内点群の二次元座標 T…案内点群の三次元座標。DESCRIPTION OF SYMBOLS 1 ... Construction area 1a ... Construction object 2 ... Construction moving body 3 ... Operation room 4,5 ... Imaging machine 6,7 ... Image transmitter 8a ... Target 10 ... Image receiver 11 ... Data transmission tower 12 ... Surveying Helicopter 13 ... moving object 14 ... display 16 ... liquid crystal shutter glasses 20,22 ... coordinate measuring means 23 ... posture measuring means 24 ... wireless transmitting device 26 ... wireless receiving device 30 ... three-dimensional graphic means 31 ... memory means 32 ... graphics Creating means 33 ... left-right synchronizing means 34 ... image converter 36 ... superimposing means 37 ... superimposing synchronizing means 38 ... image synthesizing means 40 ... recording / reproducing means 42 ... stereo image generator 44 ... guide point input means 45 ... coordinate input means 46a ... Monitor 46b ... Coordinate designating means 47 ... Frame memory 48 ... Coordinate detection means 49 ... Storage means 50 ... Conversion parameters 52 ... Coordinate calculation means 54 ... Coordinate calculation means 55 ... Coordinate calculation means I w ... Stereo operation image I e ... Stereo design image I k ... Traffic image I t ... stereo-assisted image I g ... stereo guide image I s ... stereo operation supporting image V ... point of view O ... optical axis P ... coordinate W ... angle of view W w ... corresponding constant angle of view W e ... imaging machine of target Angle of view W x … Arbitrary angle of view S k … Synchronization signal S e … Stereo synchronization signal S w … Stereo synchronization signal R… Coordinates of moving object D… Guidance azimuth T 0 … Two-dimensional coordinates of guidance point group The three-dimensional coordinates of the group.

Claims (4)

【特許請求の範囲】[Claims] 【請求項1】遠隔操作で駆動する施工用移動体の施工域
に臨む所定視点から所定光軸及び所定画角でステレオ操
作画像を撮影する撮像機対、施工域内の案内点群の三次
元座標を入力する案内点入力手段、前記案内点群の三次
元座標に基づき前記所定視点から前記所定光軸及び所定
画角でステレオ案内画像を作成する三次元グラフィック
手段、並びに前記ステレオ操作画像と前記ステレオ案内
画像との重畳によりステレオ操作支援画像を作成する画
像重畳手段を備えてなる施工用移動体の遠隔操作支援画
像システム。
An imaging device pair for photographing a stereo operation image with a predetermined optical axis and a predetermined angle of view from a predetermined viewpoint facing a construction area of a construction moving body driven by remote control, and three-dimensional coordinates of a guide point group in the construction area. A three-dimensional graphic means for creating a stereo guide image with the predetermined optical axis and the predetermined angle of view from the predetermined viewpoint based on the three-dimensional coordinates of the guide point group, and the stereo operation image and the stereo A remote operation support image system for a construction mobile object, comprising an image superimposing means for creating a stereo operation support image by superimposing the guide operation image on a guide image.
【請求項2】請求項1の画像システムにおいて、前記案
内点入力手段に、前記ステレオ操作画像上へ案内点群の
二次元座標を入力する座標入力手段と、前記ステレオ操
作画像上の任意点の二次元座標から施工域内の三次元座
標を算出するステレオ画像計測法の変換パラメタと、前
記案内点群の二次元座標及び前記変換パラメタから該案
内点群の三次元座標を算出する座標算出手段とを設けて
なる施工用移動体の遠隔操作支援画像システム。
2. An image system according to claim 1, wherein said guide point input means inputs two-dimensional coordinates of a group of guide points onto said stereo operation image, and an arbitrary point on said stereo operation image. A conversion parameter of a stereo image measurement method for calculating three-dimensional coordinates in a construction area from two-dimensional coordinates, and two-dimensional coordinates of the guide point group and coordinate calculation means for calculating three-dimensional coordinates of the guide point group from the conversion parameters. A remote control support image system for a construction mobile object provided with a computer.
【請求項3】請求項1の画像システムにおいて、施工域
における施工用移動体の位置座標を計測する座標計測手
段を前記案内点入力手段に接続させて設け、前記案内点
入力手段に、前記移動体の案内方位を入力する方位入力
手段と、前記座標計測手段が計測する位置座標及び前記
案内方位から前記案内点群の三次元座標を算出する座標
算出手段とを設けてなる施工用移動体の遠隔操作支援画
像システム。
3. The image system according to claim 1, wherein a coordinate measuring means for measuring a position coordinate of the construction moving body in a construction area is provided in connection with said guide point input means, and said guide point input means is provided with said moving means. An orientation input unit for inputting a body guidance orientation, and a coordinate calculation unit for calculating three-dimensional coordinates of the guide point group from the position coordinates and the guidance orientation measured by the coordinate measurement unit. Remote operation support image system.
【請求項4】請求項3の画像システムにおいて、前記座
標計測手段を衛星航行システムによる座標計測装置とし
てなる施工用移動体の遠隔操作支援画像システム。
4. The remote control support image system according to claim 3, wherein said coordinate measuring means is a coordinate measuring device by a satellite navigation system.
JP26994096A 1996-10-11 1996-10-11 Remote operation support image system for construction mobile Expired - Fee Related JP3344902B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP26994096A JP3344902B2 (en) 1996-10-11 1996-10-11 Remote operation support image system for construction mobile

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP26994096A JP3344902B2 (en) 1996-10-11 1996-10-11 Remote operation support image system for construction mobile

Publications (2)

Publication Number Publication Date
JPH10116353A true JPH10116353A (en) 1998-05-06
JP3344902B2 JP3344902B2 (en) 2002-11-18

Family

ID=17479329

Family Applications (1)

Application Number Title Priority Date Filing Date
JP26994096A Expired - Fee Related JP3344902B2 (en) 1996-10-11 1996-10-11 Remote operation support image system for construction mobile

Country Status (1)

Country Link
JP (1) JP3344902B2 (en)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100758608B1 (en) 2007-03-28 2007-09-13 (주)아이엠기술단 System for remote control of construction machinary and method thereof
JP2014135944A (en) * 2013-01-18 2014-07-28 Nippon Telegr & Teleph Corp <Ntt> Pruning supporting method and information processing device
CN104778740A (en) * 2015-04-16 2015-07-15 成都中科合迅科技有限公司 Dam construction progress three-dimensional simulation method
WO2017042873A1 (en) * 2015-09-08 2017-03-16 株式会社日立製作所 Remote operation system and operation assistance system

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH04281572A (en) * 1991-03-11 1992-10-07 Personal Joho Kankyo Kyokai Synthesizing system for photographic image with computer graphic in image processing system
JPH0561962A (en) * 1991-08-30 1993-03-12 Hitachi Ltd Environmental model generating device for product evaluation
JPH05143710A (en) * 1991-11-20 1993-06-11 N T T Data Tsushin Kk Synthesized moving image display device
JPH06214640A (en) * 1993-01-18 1994-08-05 Fujita Corp Travel controller for mobile object
JPH06214639A (en) * 1993-01-18 1994-08-05 Fujita Corp Travel controller for mobile object
JPH06332993A (en) * 1993-05-26 1994-12-02 Fujita Corp Scene analysis and prediction system
JPH07141022A (en) * 1993-11-19 1995-06-02 Kokusai Electric Co Ltd Cart operation managing device and golf cart
JPH0883398A (en) * 1994-09-13 1996-03-26 Alpine Electron Inc Navigation system
JPH08114663A (en) * 1994-10-17 1996-05-07 Casio Comput Co Ltd Navigator
JPH08144328A (en) * 1994-11-25 1996-06-04 Kajima Corp Image system for supporting remote work
JPH08189838A (en) * 1995-01-09 1996-07-23 Matsushita Electric Ind Co Ltd Navigation device

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH04281572A (en) * 1991-03-11 1992-10-07 Personal Joho Kankyo Kyokai Synthesizing system for photographic image with computer graphic in image processing system
JPH0561962A (en) * 1991-08-30 1993-03-12 Hitachi Ltd Environmental model generating device for product evaluation
JPH05143710A (en) * 1991-11-20 1993-06-11 N T T Data Tsushin Kk Synthesized moving image display device
JPH06214640A (en) * 1993-01-18 1994-08-05 Fujita Corp Travel controller for mobile object
JPH06214639A (en) * 1993-01-18 1994-08-05 Fujita Corp Travel controller for mobile object
JPH06332993A (en) * 1993-05-26 1994-12-02 Fujita Corp Scene analysis and prediction system
JPH07141022A (en) * 1993-11-19 1995-06-02 Kokusai Electric Co Ltd Cart operation managing device and golf cart
JPH0883398A (en) * 1994-09-13 1996-03-26 Alpine Electron Inc Navigation system
JPH08114663A (en) * 1994-10-17 1996-05-07 Casio Comput Co Ltd Navigator
JPH08144328A (en) * 1994-11-25 1996-06-04 Kajima Corp Image system for supporting remote work
JPH08189838A (en) * 1995-01-09 1996-07-23 Matsushita Electric Ind Co Ltd Navigation device

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100758608B1 (en) 2007-03-28 2007-09-13 (주)아이엠기술단 System for remote control of construction machinary and method thereof
JP2014135944A (en) * 2013-01-18 2014-07-28 Nippon Telegr & Teleph Corp <Ntt> Pruning supporting method and information processing device
CN104778740A (en) * 2015-04-16 2015-07-15 成都中科合迅科技有限公司 Dam construction progress three-dimensional simulation method
WO2017042873A1 (en) * 2015-09-08 2017-03-16 株式会社日立製作所 Remote operation system and operation assistance system
JPWO2017042873A1 (en) * 2015-09-08 2018-06-14 株式会社日立製作所 Remote operation system and operation support system

Also Published As

Publication number Publication date
JP3344902B2 (en) 2002-11-18

Similar Documents

Publication Publication Date Title
US6201883B1 (en) Topography measuring device
JP5802476B2 (en) Construction machine control system
US6928384B2 (en) Image measurement and display device, image measurement and display system, construction management method, and construction status monitor system
US20200117201A1 (en) Methods for defining work area of autonomous construction vehicle
JP6807781B2 (en) Display system, display method, and remote control system
AU2018333191B2 (en) Display system, display method, and display apparatus
JP4783620B2 (en) 3D data creation method and 3D data creation apparatus
US20120162360A1 (en) Wide-Angle Image Pickup Unit And Measuring Device
JP2019148946A (en) Construction process management system and construction process management method
JP7311502B2 (en) Slope stability visualization
JP6174199B1 (en) Guiding method and image display system
JP3344902B2 (en) Remote operation support image system for construction mobile
JP2013246111A (en) Image acquisition method and imaging device
JP3364856B2 (en) Work support image system for remote construction
JP3206874B2 (en) Image system for remote construction support
US11403826B2 (en) Management system and management method using eyewear device
CN105592294A (en) VSP excited cannon group monitoring system
JP3014336B2 (en) Remote construction support image system
JPH1063338A (en) System for supporting remote operation of working mobile body
JP2968207B2 (en) Departure monitoring method for heavy equipment for remote construction
JP2834007B2 (en) Remote surveying method
KR20180060078A (en) System for Work Monitoring in Construction Equipment
JP3055649B2 (en) Image system for remote construction support
JP7351478B2 (en) Display system, remote control system, and display method
WO2024047785A1 (en) Survey system and survey method

Legal Events

Date Code Title Description
LAPS Cancellation because of no payment of annual fees