JPH0675617A - カメラ視点変更方式 - Google Patents

カメラ視点変更方式

Info

Publication number
JPH0675617A
JPH0675617A JP4247328A JP24732892A JPH0675617A JP H0675617 A JPH0675617 A JP H0675617A JP 4247328 A JP4247328 A JP 4247328A JP 24732892 A JP24732892 A JP 24732892A JP H0675617 A JPH0675617 A JP H0675617A
Authority
JP
Japan
Prior art keywords
camera
gazing point
point
viewpoint
designating
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP4247328A
Other languages
English (en)
Other versions
JP2778376B2 (ja
Inventor
Sada Morikawa
自 森川
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NEC Corp
Original Assignee
NEC Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NEC Corp filed Critical NEC Corp
Priority to JP4247328A priority Critical patent/JP2778376B2/ja
Publication of JPH0675617A publication Critical patent/JPH0675617A/ja
Application granted granted Critical
Publication of JP2778376B2 publication Critical patent/JP2778376B2/ja
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Landscapes

  • Numerical Control (AREA)
  • Automatic Focus Adjustment (AREA)
  • Manipulator (AREA)
  • Control Of Position, Course, Altitude, Or Attitude Of Moving Bodies (AREA)
  • Control Of Position Or Direction (AREA)

Abstract

(57)【要約】 【目的】 ロボットアームなどによる検査作業実施の際
に必要となるカメラ視点変更方式において、最適な視点
位置を容易に決定できるようにする。 【構成】 カメラ1と、カメラ位置を制御するカメラ操
作手段2と、カメラ画像表示手段3と、画像上で対象注
視点を指定する注視点指定手段4とからなり、異なる視
点より同一の注視点Pを指定し、注視点Pの相対位置を
計測し、注視点Pを中心とした一定距離にある球面5上
で視線方向が注視点Pの方向と一致する位置にカメラ1
を移動し、カメラ位置の変更を注視点Pを原点とする球
面5上での球面座標系で指定することを特徴とするカメ
ラ視点変更方式。

Description

【発明の詳細な説明】
【0001】
【産業上の利用分野】本発明は、おもに遠隔操縦型ロボ
ットアームと監視カメラを用いて行なう検査や作業にお
けるカメラ視点位置変更方式に関するものである。
【0002】
【従来の技術】宇宙や原子力発電所などで行なう作業検
査には遠隔操縦型ロボットが用いられる。従来の遠隔操
縦型ロボットによる作業検査では、マスタースレーブ操
作方式と両眼立体視を用いて作業者に遠隔臨場感を与え
て操作を支援する方法が採られていた。検査などを実施
するためには、適切な位置に監視カメラの視点を変更す
る必要がある。監視カメラの視点を変更する操作を容易
にするために、立体視デスプレイを見ながらマスターア
ームを操作したり、作業者がヘッドマウンテッドデスプ
レイなどを装着し、頭の動きがカメラの動きと連動する
ようなマスタースレーブ方式などが用いられていた。も
っとも基本的な操作方法としてジョイステックなどを用
いて1台のカメラ画像を見ながら、カメラ座標系での増
分指定によりカメラを移動するという方法などがあっ
た。
【0003】またカメラの視点位置のオクルージョンの
回避を目的として、幾何モデルをベースとした自動決定
方式についても検討が進められていた。
【0004】
【発明が解決しようとする課題】上述したカメラ視点操
作方式の中で、立体視などの支援を受けながらマスター
スレーブ操作をする方法には、操作支援を行なうための
装置が複雑でコストもかかり、立体視表示にはちらつき
があるため長時間の作業に不適であるという欠点があ
る。また視点位置の操作も作業者の感に頼ることが多
く、視点位置の配置という観点では作業性に優れた方式
とはいえない。また、カメラ座標系での増分指定による
操作には、構成は単純化できるが、操作中に注視点が画
面からはずれたり、焦点がぼやけたりする可能性が高
く、適切な視点となる姿勢を決定するためにはかなりの
試行錯誤を要するという欠点がある。制約条件下での幾
何モデルに基づく自動視点配置方式については、幾何モ
デルが必要であり、明確な制約条件が既知である場合に
ついてのみ適用可能である。また幾何モデルと現実の環
境との誤差を補正する必要があるなどの課題があった。
【0005】本発明の目的はこれらの課題を解決したカ
メラ視点位置操作方式を提供することにある。
【0006】
【課題を解決するための手段】本発明によれば、カメラ
と、カメラ位置を制御するカメラ操作手段と、カメラ画
像表示手段と、画像上で注視点を指定するための注視点
指定手段とからなり、異なるカメラ視点位置より各画像
の視野内に存在する同一の注視点を前記注視点指定手段
により指定することにより、指定した該注視点と前記カ
メラとの相対位置を計測し、該注視点を中心とし、予め
指定した一定距離の半径を持った球面上で、現在既知の
カメラ位置と指定した該注視点を結ぶ直線との交わる位
置かつ前記カメラの視線方向と該指定注視点の方向とが
一致する姿勢位置に前記カメラを移動し、カメラ位置の
変更操作は該注視点を原点とする球面座標系で行なうこ
とを特徴とするカメラ視点変更方式が得られる。
【0007】
【作用】本発明について図面を参照して説明する。図1
は、本発明になるカメラ視点変更方式の原理を示す概念
図である。図2にその方式における処理の流れを示す。
【0008】図1において、カメラ1が座標系OR の位
置にあるとき、対象注目点Pの投影点として注視点指定
手段4を用いてカメラ画像表示手段3上の座標R
(XR ,YR )を指定したとする。次に座標系OL にカ
メラを移動し、注視点Pの投影点として座標L(XL
L )を指定したとする。座標系O’から見た注視点P
の相対位置(xp',yp',zp')は三角測量の原理によ
り、 xp' =l・(XL +XR )/(XL −XR ) yp' =2f・l/(XL −XR ) zp' =YL ・y/f で求められる。基準座標系Oからみた注視点Pの絶対位
置は、座標系OからO’への座標変換行列を用いて計算
できる。この座標変換は、ロボットアームの原点からカ
メラ1までの変換に相当し、既知にすることができる。
したがって、絶対座標系Oにおける注視点Pの位置(x
p ,yp ,zp )が決定される。
【0009】カメラ位置として、注視点Pを中心とし、
半径Rの球面上に配置することを考える。この半径Rの
距離はカメラ焦点距離を考慮して予め設定しておく。こ
の球面上のカメラ位置の決定法の一例として、注視点P
を計測したカメラ位置OR とOL の中点O’とPを結ぶ
線分と球面の交差点に配置する。中点O’の座標は既知
であるので、O’とPを結ぶ線分の方向は、絶対座標系
で既知となる。従ってカメラ1の視線方向とこのベクト
ル方向を一致させることにより、注視点Pがカメラ画面
の中心に配置される。このとき視線方向軸回りの回転は
行なわないものとする。またPからこのベクトルと逆方
向に距離Rだけ移動した点を求めるとカメラ位置Qが得
られる。以後カメラ位置の変更は、位置については、注
視点を原点とする球面座標系において、アジマス角
z 、エレベーション角El 、距離Rを指定することに
より実施する。姿勢の変更については、常に、カメラ視
線と注視点が一致するように変更する。
【0010】カメラ視点球面5上の初期カメラ視点は、
作業状況に応じて最初に注視点を指定したカメラ位置O
R とPを結ぶ直線との交点や移動後2回目に注目点を指
定したOL とPを結ぶ線分の交点としてもよい。また注
視点Pを指定するためのカメラ1の移動を行なう代わり
に2台のカメラを設け、それぞれのカメラ画像に対して
指定してもよい。これらの変形は本発明の主旨を逸脱し
ない範囲で行なってもよく、以上の記述が本発明の範囲
を限定するものではない。
【0011】
【実施例】図3に本発明の実施例として配管検査の例を
示す。本例では、カメラ1としてカメラ10、カメラ1
1の2台設け、カメラ移動手段2としてマニピュレータ
12を搭載した移動ロボット13及びマニピュレータ操
作用としてホストコンピュータ14とジョイステック1
5を設け、カメラ画像表示手段3として2枚のカメラ動
画像を表示できるコンピュータデスプレイ16を備え、
注視点指定手段4としてマウス17を用いる。作業対象
として配管20と配管20上にあるベント部21を考え
る。配管20の亀裂の検査を作業事例として挙げて説明
する。配管20のベント部21は強度的に弱いため亀裂
の存在可能性が最も高い部分である。従って検査はこれ
らの部分から行なわれる場合が多い。移動ロボット13
を移動し、カメラ10、11の視野内にベント部21が
観察されると、デスプレイ16上でマウス17を用いて
ベント部21を注視点として指定する。三角測量の原理
により相対位置が計測される。ここでは、視点位置とし
て、カメラ10を、作用で述べた方法に従い、視点球面
上の位置P0 に自動的に配置する。この位置を原点とし
てカメラ位置は、注視点を原点とする視点球面上へ移動
する。移動操作はジョイステック15を用いて行ない、
ジョイステックの上下の動作をエレベーション角に割り
付けると、角El だけ現在角にオフセットとして加える
ことによりベント部21の下側が観測可能な位置P1
容易に移動できる。このように操作を行なうことにより
通常視点位置を設定するのが面倒となるベント部の観測
が隈なく容易に実行でき、配管の損傷発見を迅速に行な
える。
【0012】
【発明の効果】本発明によれば、マニピュレータを用い
て遠隔操作により外観検査などを行なう場合に、対象注
目点をカメラ画像の中心に配置して任意の角度より観測
することが容易に実現できる。またカメラ画面上で任意
に注目点を指定できるので、事前の幾何モデルなどが不
要であり、注目点からの距離が一定であるため焦点固定
式のカメラを用いた場合も常にピントが合った状態を保
持できる。
【0013】以上に述べたように、本発明によれば、任
意の注目点について、外観検査などに最適な視点位置が
容易に決定可能となるカメラ視点変更方式が得られる。
【図面の簡単な説明】
【図1】本発明のカメラ視点変更方式の構成と原理を示
した図である。
【図2】カメラ視点変更方式における処理の流れを示し
た図である。
【図3】実施例として配管検査をする場合の構成を説明
した図である。
【符号の説明】
1 カメラ 2 カメラ移動装置 3 カメラ画像表示装置 4 注視点指定装置 5 カメラ視点球面 10 カメラA 11 カメラB 12 マニュピュレータ 13 移動台車 14 ホストコンピュータ 15 ジョイステック 16 ディスプレイ 17 マウス 20 配管 21 ベント部
───────────────────────────────────────────────────── フロントページの続き (51)Int.Cl.5 識別記号 庁内整理番号 FI 技術表示箇所 B25J 19/04 G02B 7/28 G05D 3/12 K 9179−3H W 9179−3H H04N 5/232 Z // G05D 1/00 B 9323−3H

Claims (1)

    【特許請求の範囲】
  1. 【請求項1】 カメラと、カメラ位置を制御するカメラ
    操作手段と、カメラ画像表示手段と、画像上で注視点を
    指定するための注視点指定手段とからなり、異なるカメ
    ラ視点位置より各画像の視野内に存在する同一の注視点
    を前記注視点指定手段により指定することにより、指定
    した該注視点と前記カメラとの相対位置を計測し、該注
    視点を中心とし、予め指定した一定距離の半径を持った
    球面上で、現在既知のカメラ位置と指定した該注視点を
    結ぶ直線との交わる位置かつ前記カメラの視線方向と該
    指定注視点の方向とが一致する姿勢位置に前記カメラを
    移動し、カメラ位置の変更操作は該注視点を原点とする
    球面座標系で行なうことを特徴とするカメラ視点変更方
    式。
JP4247328A 1992-08-24 1992-08-24 カメラ視点変更方式 Expired - Lifetime JP2778376B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP4247328A JP2778376B2 (ja) 1992-08-24 1992-08-24 カメラ視点変更方式

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP4247328A JP2778376B2 (ja) 1992-08-24 1992-08-24 カメラ視点変更方式

Publications (2)

Publication Number Publication Date
JPH0675617A true JPH0675617A (ja) 1994-03-18
JP2778376B2 JP2778376B2 (ja) 1998-07-23

Family

ID=17161769

Family Applications (1)

Application Number Title Priority Date Filing Date
JP4247328A Expired - Lifetime JP2778376B2 (ja) 1992-08-24 1992-08-24 カメラ視点変更方式

Country Status (1)

Country Link
JP (1) JP2778376B2 (ja)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011000703A (ja) * 2009-05-19 2011-01-06 Canon Inc カメラ付きマニピュレータ
JP2011041990A (ja) * 2009-08-19 2011-03-03 Denso Wave Inc ロボットの制御装置及びロボットのティーチング方法
CN102591367A (zh) * 2012-03-29 2012-07-18 苏州市思玛特电力科技有限公司 二维球-面系统控制装置及方法
WO2015070696A1 (zh) * 2013-11-13 2015-05-21 三一汽车制造有限公司 一种臂架控制方法和装置及混凝土泵车及布料机
JP2015192697A (ja) * 2014-03-31 2015-11-05 ソニー株式会社 制御装置および制御方法、並びに撮影制御システム
KR20190012163A (ko) 2016-05-24 2019-02-08 이츠미 프라덕츠 컴퍼니 전동 공구
CN109814614A (zh) * 2019-02-15 2019-05-28 中国兵器装备集团自动化研究所 一种伺服稳定平台的补偿式稳定控制方法
KR102172397B1 (ko) * 2019-04-29 2020-10-30 한국광기술원 테이블탑 디스플레이 검사 장치 및 방법

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011000703A (ja) * 2009-05-19 2011-01-06 Canon Inc カメラ付きマニピュレータ
JP2011041990A (ja) * 2009-08-19 2011-03-03 Denso Wave Inc ロボットの制御装置及びロボットのティーチング方法
DE102010037067A1 (de) 2009-08-19 2011-04-14 Denso Wave Inc. Robotersteuervorrichtung und Verfahren zum Teachen eines Roboters
DE102010037067B4 (de) * 2009-08-19 2020-10-15 Denso Wave Inc. Robotersteuervorrichtung und Verfahren zum Teachen eines Roboters
CN102591367A (zh) * 2012-03-29 2012-07-18 苏州市思玛特电力科技有限公司 二维球-面系统控制装置及方法
WO2015070696A1 (zh) * 2013-11-13 2015-05-21 三一汽车制造有限公司 一种臂架控制方法和装置及混凝土泵车及布料机
JP2015192697A (ja) * 2014-03-31 2015-11-05 ソニー株式会社 制御装置および制御方法、並びに撮影制御システム
US10571671B2 (en) 2014-03-31 2020-02-25 Sony Corporation Surgical control device, control method, and imaging control system
KR20190012163A (ko) 2016-05-24 2019-02-08 이츠미 프라덕츠 컴퍼니 전동 공구
US11338377B2 (en) 2016-05-24 2022-05-24 Maxell Izumi Co., Ltd. Power tool
CN109814614A (zh) * 2019-02-15 2019-05-28 中国兵器装备集团自动化研究所 一种伺服稳定平台的补偿式稳定控制方法
KR102172397B1 (ko) * 2019-04-29 2020-10-30 한국광기술원 테이블탑 디스플레이 검사 장치 및 방법

Also Published As

Publication number Publication date
JP2778376B2 (ja) 1998-07-23

Similar Documents

Publication Publication Date Title
US9197810B2 (en) Systems and methods for tracking location of movable target object
US8406923B2 (en) Apparatus for determining pickup pose of robot arm with camera
JP4191080B2 (ja) 計測装置
EP1215017B1 (en) Robot teaching apparatus
JP4167954B2 (ja) ロボット及びロボット移動方法
JP3045753B2 (ja) 遠隔監視システムおよび遠隔監視方法
JP2008254150A (ja) ロボットの教示装置及び教示方法
US20090281662A1 (en) Simulator for visual inspection apparatus
CN110017769A (zh) 基于工业机器人的零件检测方法及系统
CN107953333A (zh) 一种机械手末端工具标定的控制方法及系统
JPH0675617A (ja) カメラ視点変更方式
JPH05318361A (ja) 物体操作方式
CN112598752B (zh) 基于视觉识别的标定方法及作业方法
JP5573537B2 (ja) ロボットのティーチングシステム
CN117103295A (zh) 位姿确定方法及建筑机器人
JPH06143160A (ja) 照明配置調整方式
JPH06218684A (ja) 操作型マニピュレータの教示装置および操作型マニピュレータによる自動作業方法
JP2001191285A (ja) ロボットシステムおよびその利用方法
Oh et al. Calibration of an omnidirectional vision navigation system using an industrial robot
CN111283676A (zh) 三轴机械臂的工具坐标系标定方法以及标定装置
RU2713570C1 (ru) Способ формирования изображения дополненной реальности и робототехническая система для его осуществления
JPH05197416A (ja) ロボット動作点教示装置
JP2006013854A (ja) カメラ制御装置及びカメラ制御方法
JPH09272081A (ja) 遠隔操作入力装置及び遠隔操作入力方法
CN110051433B (zh) 保持对目标进行跟踪的方法及其在图像引导手术中的应用

Legal Events

Date Code Title Description
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 19980407