JPH0486906A - 遠隔操作装置 - Google Patents

遠隔操作装置

Info

Publication number
JPH0486906A
JPH0486906A JP2203591A JP20359190A JPH0486906A JP H0486906 A JPH0486906 A JP H0486906A JP 2203591 A JP2203591 A JP 2203591A JP 20359190 A JP20359190 A JP 20359190A JP H0486906 A JPH0486906 A JP H0486906A
Authority
JP
Japan
Prior art keywords
camera
signals
signal
monitor
operator
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2203591A
Other languages
English (en)
Inventor
Keita Fukumori
福森 啓太
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Suzuki Motor Corp
Original Assignee
Suzuki Motor Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Suzuki Motor Corp filed Critical Suzuki Motor Corp
Priority to JP2203591A priority Critical patent/JPH0486906A/ja
Publication of JPH0486906A publication Critical patent/JPH0486906A/ja
Pending legal-status Critical Current

Links

Landscapes

  • Eye Examination Apparatus (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Control Of Position Or Direction (AREA)

Abstract

(57)【要約】本公報は電子出願前の出願データであるた
め要約のデータは記録されません。

Description

【発明の詳細な説明】 [産業上の利用分野] 本発明は、テレビ(TV)カメラ等の遠隔操作を行う装
置に関し、特に操作者の注視点の移動に応じてTVカメ
ラの撮像方向の制御を行う遠隔操作装置に関するもので
ある。
〔従来の技術〕
無人車両に搭載された作業機械等を遠隔操作する場合に
、その無人車両上に搭載されたTVカメラから無線信号
によって送られてくる映像を、離れた場所に設置された
TVモニタの画面上で観察しながら、遠隔操作用の信号
を無線信号によって送って、無人車両の走行方向の制御
を行ったり、あるいは無人車両に装備されたマジックハ
ンドを操作して所望の作業を行わせる方法がある。
この場合、無人車両上に搭載されるTVカメラの画角に
は限度があって、通常、最大60°程度である。そこで
操作者がTVモニタ画面の範囲外の映像を見ようとする
場合には、TVカメラの向き(撮像方向)を変える必要
がある。
このような場合の、TVカメラの変向方法としては、従
来は、操作者が別に設けられたスイッチやレバーを操作
することによって、TVカメラを変向させるための信号
を無線信号によって送って制御を行う、マニュアル制御
方式が一般的であった。
また、スイッチやレバーを操作するかわりに、操作者の
頭部に取りつけられたジャイロセンサ。
磁気センサ、赤外線センサ等によって、操作者の頭の動
きを感知することによって、操作者の視線方向の変化を
検出し、視線の向いている方向にTVカメラを変向する
信号を発生して、この信号を送ることによって所望の制
御を行う頭部制御方式%式% 〔発明が解決しようとする課題〕 カメラの変向をスイッチやレバーの手動操作によって行
うマニュアル制御方式では、操作者は手の操作を車両の
制御等の目的とする操作に集中出来ないという問題があ
る。
また、操作者の頭部に取りつけたセンサを利用して、頭
の動きによって操作者の視線方向を検出する頭部制御方
式では、常に頭部をTVモニタの正面に向けていなけれ
ばならないと言う問題がある。
[発明の目的] 本発明は、このような従来技術の課題を解決しようとす
るものであって、操作者の眼球の動きに連動して車載カ
メラの方向制御を行うようにすることによって、マニュ
アル制御方式のように手の自由な操作を妨げられること
がなく、また頭部制御方式のように頭部の自由な動きを
妨げられることなしに、車載カメラの制御を行うことが
できる、遠隔操作装置を提供することを目的としている
(課題を解決するための手段〕 本発明は、TVカメラの映像を表示するTVモニタと、
該TVカメラの撮像方向を制御する変向手段とを備えて
いる。更に、TVモニタ上の注視点と該TVモニタの画
面中心とのずれを検出する手段と、該ずれに対応して変
向手段における変向方向と変向速度とを制御する手段と
を備えている。
そして、TVモニタ上の注視点を該TVモニタの画面中
心に移動させる追従制御を行う、という構成をとってい
る。これによって前述した目的を達成しようとするもの
である。
〔作 用〕
TVモニタ上の注視点とTVモニタの画面中心とのずれ
を検出して、このずれに対応してTVカメラの変向手段
における変向方向と変向速度とを制御することによって
、TVモニタ上の注視点をTVモニタの画面中心に移動
させるように、TVカメラの撮像方向を制御する追従制
御を行うので、TVカメラの映像を表示するTVモニタ
において、注視点が常にTVモニタの画面中心になるよ
うにすることができ、従って、遠隔操作装置における操
作が容易になる。
〔実施例〕
以下本発明の一実施例を第1図ないし第4図に基づいて
説明する。第1図は本発明の一実施例の全体構成を示す
図である。
無人車両1は、走行装置と動力装置とを備えていて自刃
で走行可能なものであり、無線信号の受信機を備えてい
て、操作者からの無線信号による指令を受けて、これに
従って走行し、またマジックハンド2による作業を行う
ことができるものである。
この際、無人車両1にはTVカメラ3が設けられていて
、その撮像画面を無線信号によって離れた場所にあるコ
ントロール装置4に送り、TVモニタ5の画面上におい
てこれを表示することができるようになっている。
従って、操作者はTVモニタ5において、画面上におけ
るTVカメラ3からの映像によって、例えば無人車両1
の走行場所の状況や、マジックハンド2の動作状況等を
観察することができるので、コントロール装置4に設け
られた左手スティック6Aによって、無人車両1の走行
制御を行い、右手スティック6Bによってマジックハン
ド2の操作制御を行うことによって、無線操縦による無
人車両の遠隔操作を行うことができるようになっている
本実施例で、TVカメラ3の映像を表示するT■モニタ
5と、TVカメラ3の撮像方向を制御する変向手段26
.27とを備えた遠隔操作装置において、TVモニタ5
上の注視点とTVモニタ5の画面中心とのずれを検出す
る手段と、このずれに対応して変向手段26.27にお
ける変向方向と変向速度とを制御する手段とを備えて、
TVモニタ5上の注視点をTVモニタ5の画面中心に移
動させる追従制御を行うものである。
TVカメラ3の撮像レンズには、前述の広角レンズを含
めて、任意の画角のものを使用することができる。TV
カメラ3の視野外の状況を知りたい場合等、撮像方向が
適切でない場合には、TVカメラ3の撮像方向を変える
必要があるが、この場合、操作者が見たいと思う方向に
TVカメラ3の方向制御を行うために、眼球運動検出器
7を使用する。
第2図は、本発明におけるTVカメラの方向制御系のシ
ステム構成を示したものである。
第2図に示すように、眼球運動検出器7は、通常、ハン
ド8によって頭部に固定して使用される。
眼球運動検出器7は、例えば眼球表面における赤外線の
反射を利用して、眼球の運動を上下方向と左右方向とに
分解して検出することができるものであり、これによっ
て注視点方向を検出して、眼球運動検出器7の視野の中
心からの移動量に対応する、上下方向と左右方向のそれ
ぞれの出力信号を発生する。
眼球運動検出器7の出力信号は、ケーブル9を介してコ
ントロール装置4内の送信部に導かれる。
送信部においては、上下方向の信号に対応する上下出カ
ニニット11と、左右方向の信号に対応する左右比カニ
ニット12とを有し、それぞれ眼球運動検出器7の上下
方向と左右方向の出力信号を、所定の電圧信号に変換し
た信号を発生する。
これらの信号は、それぞれフィルタ13.14を通すこ
とによって、所定時間(例えば0.5〜1゜0秒)内の
平均値を求められる。求めれた信号に応じて、演算部1
5においてTVカメラ3に対する制御量を演算し、演算
結果によって送信機16を介して変調された無線信号を
発生し、送信アンテナ17を経て送出する。
無人車両1側においては、受信アンテナ21を経て入力
されたコントロール装置4からの無線信号を、受信機2
2によって受信し復調する。受信された信号は、上下方
向の信号と、左右方向の信号とに分離され、それぞれ上
下方向のカメラマウント駆動モータアンプ23.左右方
向のカメラマウント駆動モータアンプ24を経て所定の
増幅を行われたのち、ケーブル25を経てカメラ部へ送
られる。
カメラ部においては、左右方向のカメラマウント駆動モ
ータアンプ24の出力によってパン用モータ26を駆動
し、上下方向のカメラマウント駆動モータアンプ23の
出力によってチルト用モータ27を駆動することによっ
て、TVカメラ3をコントロール装置4からの信号に応
じて変向させる。
本実施例における、操作者の注視点方向の検出は次のよ
うにして行われる。
すなわち、眼球運動検出器7における検出信号は、その
構造上、頭の方向を基準とする眼球の運動方向を検出す
るものであるため、頭の方向が一定でないと、眼球運動
検出器7の出力によって、操作者が実際に注視している
方向の変化を正しく検出することができない。
そこで、本発明においては、眼球運動検出器7の検出信
号、すなわち眼球の運動方向の信号に比例して、TVカ
メラ3の方向位置を制御するのではなく、眼球運動検出
器7の検出信号に応じてTVカメラ3の方向変更速度を
制御するようにしている。
具体的には、頭が正面を向き、眼球も正面を向いている
場合をニュートラルの位置として、TVカメラ3の方向
制御速度を“0′” (静止状態)とする。そして眼球
が上下、左右に動くと、ニュートラルの位置からのそれ
ぞれの移動方向、移動量に比例して、TVカメラ3の方
向操作速度を変化させる。なおニュートラルの位置は、
眼球運動検出器7の検出信号の、過去における長時間の
平均値として演算部15において求めるようにしてもよ
い。
第3図は、ニュートラル位置の設定を説明するものであ
る。
第3図はTVモニタ5の画面を示し、画面中央部の注視
しやすい部分をAとした場合、操作者がTVモニタ5の
正面を向いてA部を注視しているときは、TVカメラ3
に対する制御信号が0になるように、眼球運動検出器7
の視野内において信号レベルを設定し、これをニュート
ラルの状態として、TVカメラ3は上下、左右のいずれ
にも動かないようにする。
次に操作者が画面のA部以外の部分を見た場合、その注
視点がAから離れる角度に比例して、TVカメラ3に対
する上下、左右方向の制御速度を定めるようにする。
第4図は、TVカメラに対する変向方向と変向速度の設
定を説明するものである。
第4図は、眼球運動検出器7の視野を表し、中央部Aは
ニュートラルの領域を示している。操作者の注視点がこ
の範囲内にあるときは、制御信号はOであって、TVカ
メラ3の方向は変化しない。
注視点がニュートラル領域Aがら半径方向に離れるに従
って制御信号が大きくなり、TVカメラ3の変向速度が
増大する。この場合における変向方向は、注視点が■〜
■のどの象限内にあるかによって決定される。
眼球運動検出器7は、ニュートラルの位置からの注視点
位置の変化を、上下方向と左右方向の2方向に分解して
検出することができるようになっている。TVモニタ5
の画面におけるニュートラル領域Aと、眼球運動検出器
7の視野におけるニュートラル領域Aとは平均的には一
致すると考えられるので、眼球運動検出器7の視野にお
けるニュートラル領域Aからのずれに応じてTVカメラ
3を変向することによって、操作者の注視点をTVモニ
タ5の画面中央のニュートラル領域Aに移動させるよう
に追従制御することができる。第2図において、演算部
15はこのような追従制御に必要な演算を行う。
このようにして作成された、眼球運動検出器7のそれぞ
れの分割された視野に対応する信号の大小に応じた、上
下方向と左右方向の操作速度信号を、無線信号として無
人車両1に送る。無人車画工では、この信号を復調して
カメラ部に送る。カメラ部では、これらの信号に応じて
チルト用モータ27と、パン用モータ26のそれぞれの
回転方向と回転速度を制御する。
これによって、例えば操作者がTVモニタ5の画面の右
上の角を注視したとすれば、眼球運動検出器7から、上
方向の最大信号と、右方向の最大信号が検出されるので
、TVカメラ3も上方向へ最大速度、右方向に最大速度
で旋回しようとして動き出す。従って、TVモニタ5の
画面上に映し出される映像は、第3図に示された画面上
でA部に向かって移動してゆく。注視対象物がA部に入
ると、眼球運動検出器7の出力は上下、左右方向ともO
になるので、TVカメラ3は停止する。このようにして
、操作者は常に注視対象物をTVモニタ5の画面中央A
部に自動的に移動させることができる。
〔発明の効果〕
以上説明したように本発明によれば、操作者の眼球の動
きを検出する眼球運動検出器の信号によってTVカメラ
の変向方向と速度を制御するようにしたので、操作者の
注視点がTVカメラの映像を表示するTVモニタの画面
中心になるように追従制御することができる。従って操
作者によるTVカメラを介する無人車両等の遠隔操縦が
容易になり、作業効率を向上させることができるという
従来にない優れた遠隔操作装置を提供することができる
【図面の簡単な説明】
第1図は本発明の一実施例の全体構成を示す図、第2図
は本発明におけるTVカメラの方向制御系のシステム構
成を示す図、第3図はニュートラル位置の設定を説明す
る図、第4図はTVカメラに対する変向方向と変向速度
の設定を説明する図である。 TVカメラ、 TVモニタ、26 変向手段。

Claims (1)

    【特許請求の範囲】
  1. (1)、TVカメラの映像を表示するTVモニタと、該
    TVカメラの撮像方向を制御する変向手段とを備えた遠
    隔操作装置において、 前記TVモニタ上の注視点と該TVモニタの画面中心と
    のずれを検出する手段と、 該ずれに対応して前記変向手段における変向方向と変向
    速度とを制御する手段とを備え、 前記TVモニタ上の注視点を該TVモニタの画面中心に
    移動させる追従制御を行うことを特徴とする遠隔操作装
    置。
JP2203591A 1990-07-31 1990-07-31 遠隔操作装置 Pending JPH0486906A (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2203591A JPH0486906A (ja) 1990-07-31 1990-07-31 遠隔操作装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2203591A JPH0486906A (ja) 1990-07-31 1990-07-31 遠隔操作装置

Publications (1)

Publication Number Publication Date
JPH0486906A true JPH0486906A (ja) 1992-03-19

Family

ID=16476606

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2203591A Pending JPH0486906A (ja) 1990-07-31 1990-07-31 遠隔操作装置

Country Status (1)

Country Link
JP (1) JPH0486906A (ja)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5610678A (en) * 1993-12-30 1997-03-11 Canon Kabushiki Kaisha Camera including camera body and independent optical viewfinder
JP2003334219A (ja) * 2002-05-21 2003-11-25 Nippon Telegr & Teleph Corp <Ntt> 遠隔地散策装置
JP2005534246A (ja) * 2002-07-25 2005-11-10 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ ビューシステム
KR100772609B1 (ko) * 2006-07-13 2007-11-02 송오영 무인 자동차 원격 제어 시스템 및 방법
JP2012118188A (ja) * 2010-11-30 2012-06-21 Ditect:Kk 撮影システム
WO2017189036A1 (en) 2016-04-27 2017-11-02 Zepp Labs, Inc. Head rotation tracking device for video highlights identification

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5610678A (en) * 1993-12-30 1997-03-11 Canon Kabushiki Kaisha Camera including camera body and independent optical viewfinder
JP2003334219A (ja) * 2002-05-21 2003-11-25 Nippon Telegr & Teleph Corp <Ntt> 遠隔地散策装置
JP2005534246A (ja) * 2002-07-25 2005-11-10 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ ビューシステム
KR100772609B1 (ko) * 2006-07-13 2007-11-02 송오영 무인 자동차 원격 제어 시스템 및 방법
JP2012118188A (ja) * 2010-11-30 2012-06-21 Ditect:Kk 撮影システム
WO2017189036A1 (en) 2016-04-27 2017-11-02 Zepp Labs, Inc. Head rotation tracking device for video highlights identification
JP2019515341A (ja) * 2016-04-27 2019-06-06 シュンユエン・カイファ(ベイジン)・テクノロジー・カンパニー・リミテッド ビデオのハイライトを認識するための頭部回転追跡デバイス

Similar Documents

Publication Publication Date Title
AU2018333452B2 (en) User interface for reversing a trailer with automated steering system
JP5324607B2 (ja) 移動ロボットを遠隔操作するための方法およびシステム
US20120019664A1 (en) Control apparatus for auto-tracking camera system and auto-tracking camera system equipped with same
US20120068840A1 (en) Image generating apparatus and image display system
RU2017121325A (ru) Система замещения зеркал для транспортного средства
JP2015226094A (ja) 作業機械用遠隔操作システム
JP2011028495A (ja) 無人走行車両の遠隔操縦装置
WO2017169841A1 (ja) 表示装置および表示制御方法
US7292265B2 (en) Camera apparatus, a camera system, and a method for controlling the camera system
JP2022186719A (ja) 解体システム
WO2018142470A1 (ja) カメラ制御装置及びカメラ制御装置用プログラム
JPH0486906A (ja) 遠隔操作装置
JP2003312592A (ja) 遠隔操縦システム
JP2012179682A (ja) 移動ロボットシステム、移動ロボット制御装置、該制御装置に用いられる移動制御方法及び移動制御プログラム
WO2020110780A1 (ja) 解体システム
JP2019084898A (ja) 飛行体操縦システム及び飛行体操縦システムを用いて飛行体を操縦する方法
JPH10206789A (ja) 車両用ヘッドマウントディスプレイ装置
JP2001348914A (ja) 重機の姿勢認識装置
JPH05289739A (ja) 立体画像処理装置およびテレオペレーティングシステム
JP6699944B2 (ja) 表示システム
KR100200933B1 (ko) 굴삭기 원격 조정 시스템
EP0966155A2 (en) A video camera pivoting apparatus and a monitoring system with a pivoting video camera
JPH1066057A (ja) 遠隔監視装置
KR20190080846A (ko) 가상현실을 이용한 스피드 스프레이어 원격 조정 장치
CN109050404A (zh) 带有机械臂的汽车的大视角成像监控及自动步行系统