JPH07200157A

JPH07200157A - 遠隔指示入力方法及び装置

Info

Publication number: JPH07200157A
Application number: JP34939193A
Authority: JP
Inventors: Koji Oga; 幸治大賀; Hiroyuki Yuji; 弘幸湯地
Original assignee: Hitachi Ltd
Current assignee: Hitachi Ltd
Priority date: 1993-12-28
Filing date: 1993-12-28
Publication date: 1995-08-04
Anticipated expiration: 2018-11-25
Also published as: JP3470170B2

Abstract

(57)【要約】【目的】遠隔から出射光を用いて表示画面上に指示入
力し、この指示入力の位置と入力モードの判定を実現
し、画像処理の簡単化を図り、これに応じた画面制御を
実行可能とすることにある。【構成】出射光の入力モ−ドに対応して個数かつ／ま
たは形状の変更可能なポインタを用いて表示画面上を指
示し、ポインタからの出射光の撮影映像を画像処理し、
指示位置とポインタで設定した入力モ−ドを判別する。
この結果を基に、表示画面上の指示位置を認識し、表示
図面デ−タを用いて、図面内の指示入力対象物を特定す
る。次いで、表示すべき出力情報とその形態を決定し、
表示画面の表示を切り換える。また、同様にして、表示
先の出力デバイス、表示形態の制御を実行する。【効果】指示用ポインタの出射光の個数および形状を
切り換え可能とすることにより、指示入力の位置と入力
モードの判定を実現し、画像処理の簡単化を図ることが
できる。

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は、レーザ光等を出射する
ポインタを用いて、大画面表示装置等の表示画面を遠隔
から指示入力する遠隔指示入力方法及び装置に関する。

【０００２】

【従来の技術】近年、発電プラントや化学プラント等の
運転制御、金融機関や証券会社における情報提供、会議
などのプレゼンテーションにおいては、大きな表示面を
もつ表示装置を用いた情報提供が計画あるいは実施され
ている。しかしながら、現状では情報表示のみに使用方
法が限定されている。大画面表示装置をより有効に利用
するため、表示画面に表示されている図面の要素などを
遠隔で指示することにより、入力操作を実施可能とする
ことが望まれている。この要望に答えることのできる技
術として、例えば、特開平４−３７９２２号公報のプレ
ゼンテーション装置が知られている。この装置において
は、スクリーンや壁面に投影された画面の所用の部分
を、発光器を取り付けた指示棒で指差すると、該画面を
監視しているテレビカメラの出力信号に基づいて、指差
点を検出し、ハイライト表示などの画面情報の変更を実
施しようとするものである。この技術では、指示に用い
るレーザの発信器からの光を変調し、これを解析するこ
とにより、画面制御方法を換えることが示されている。
これによれば、指示棒のスイッチを切り換えることによ
り、画面制御方法の切り換えが可能となる。しかしなが
ら、指示位置の特定は画像処理により実施し、これとは
別に、ビデオ信号を基に変調の内容を解析する装置が必
要となる。このため、遠隔指示入力を実現するための装
置、処理の簡単化という点では、必ずしも十分に配慮さ
れてはいない。

【０００３】

【発明が解決しようとする課題】本発明の目的は、上記
した事情に鑑み、遠隔から指示した指示入力の位置と入
力モードの判定を実現し、画像処理の簡単化を図り、こ
れに応じた画面制御の実行可能な遠隔指示入力方法及び
装置を提供することにある。

【０００４】

【課題を解決するための手段】上記目的は、指示用のポ
インタから図形かつ／またはシンボルが表示された表示
画面の指示位置に出射光を発するとともに、この出射光
の個数かつ／または形状を入力モードに対応して切り換
え可能とし、ポインタが指示した指示光を画像処理し、
指示位置の座標と入力モードの種別を判定することによ
って、達成できる。

【０００５】

【作用】本発明によれば、ポインタから表示画面に発し
た出射光によって指示した指示点の位置と入力モードの
種別の両方を区別することが可能である。これにより、
入力モードに係る情報と、指示点の座標から求まる画面
上に表示中の図形かつ／またはシンボルに含まれる指示
入力対象に係る情報の２種の情報を用いて、画面の表示
処理を適切に制御することが可能となる。

【０００６】

【実施例】以下、本発明の実施例を図面により説明す
る。図１は、本発明の一実施例を示す遠隔指示入力装置
の構成を示すブロック図である。図１において、１１０
１は図形やシンボルを表示する表示画面、１２０１は、
表示画面１１０１を遠隔から指示入力するための携帯型
ポインタであり、赤外レーザ光を出射する。１３０１
は、表示画面１１０１を含む範囲を撮影するカメラであ
り、赤外光のみを感知するように可視光のカットフィル
タを装着している。１４０１は撮影映像を画像処理し
て、携帯型ポインタ１２０１の表示画面上への指示点の
位置座標と入力モードを判定する画像処理装置、１５０
１は携帯型ポインタ１２０１の表示画面上への指示点の
位置を認識する指示入力認識装置、１６０１は座標の変
換表、１７０１は指示入力された表示図面内の対象物を
特定する対象物特定装置、１８０１は表示図面データ、
１９０１は入力命令を認識し、大画面表示装置制御装置
２１０１への処理命令を生成する命令認識装置、２００
１は命令認識用のデータ、２１０１は大画面表示装置の
表示制御装置である。

【０００７】図２は、指示入力に用いる携帯型ポインタ
１２０１の外観を示す模式図である。図２において、２
５１１はモード切換スイッチ、２５２１は光のオン／オ
フスイッチ、２５３１は液晶表示部である。モード切換
スイッチ２５１１は、入力モードの切り換えに使用す
る。光のオン／オフスイッチ２５２１は、出射光のオン
／オフに使用する。また、液晶表示部は、入力モードに
係る情報を表示するために使用する。

【０００８】図３は、携帯型ポインタ１２０１の出射光
の制御方法を示すための回路図である。図３において、
２５４１は、モード切換信号であり、モード切換スイッ
チ２５１１を押下すると入力される。また、２５５１
は、光のオン／オフ信号であり、光のオン／オフスイッ
チ２５２１を押下している間は、オン信号が入力され
る。２５６１は、レーザ光個数切換器であり、モード切
換信号２５４１が入力されると、モードを１、２、３と
順番に切り換える。光のオン／オフ信号２５５１が入力
されている間は、レーザ光個数切換器２５６１のモード
に従い、レーザダイオード２５７１に点灯の指令が入力
される。つまり、モード１の場合には、１個のレーザダ
イオードが点灯、モード２の場合には、２個のレーザダ
イオードが点灯、モード３の場合には、３個のレーザダ
イオードが点灯する。これにより、モード切換スイッチ
２５１１で入力モードを設定し、光のオン／オフスイッ
チ２５２１を押下すれば、モードに応じた点数のレーザ
光が出射されることになる。

【０００９】図４は、画像処理装置１４０１の処理を示
す流れ図である。画像処理装置１４０１では、まず、表
示画面１１０１に係る映像を入力する（ステップ８１０
１）。その映像を雑音の除去などのために２値化し（ス
テップ８１０２）、画像メモリに記憶する（ステップ８
１０３）。この記憶された２値画像を基に特徴量の抽出
として、ｘ軸、ｙ軸方向への投影分布を計算し（ステッ
プ８１０４）、その結果を用いて、外接長方形の中心座
標（ｘ，ｙ）を計算し、画像メモリ内における指示光の
座標とする（ステップ８１０５）。さらに、外接長方形
の面積値を基に、ポインタの入力モードを判定する（ス
テップ８１０６）。この処理は、ポインタからの出射光
の点数に応じて、外接長方形の面積値が変化（ポインタ
からの出射光１点より３点の方が面積値が大きい。）す
ることを利用したものである。次いで、座標値及び入力
モードの判定結果を指示入力認識装置１５０１に出力す
る（ステップ８１０７）。

【００１０】図５は、画像処理装置１４０１において実
施される投影分布と座標値の計算方法を示す模式図であ
る。ｘ軸、ｙ軸方向への投影分布は、それぞれ図形（今
の場合、ポインタからの赤外光）の濃度をｙ方向、ｘ方
向に加算する処理である。この処理により、図５に示す
ように、ｘ軸、ｙ軸に沿った濃度分布が得られる。この
濃度が予め定めた判定基準値を超える部分の座標ｘ₁、
ｘ₂、ｙ₁、ｙ₂を求める。この座標から外接長方形の中
心座標を求めて、赤外光の中心の画像メモリ内の座標値
（ｘ，ｙ）とする。さらに、この外接長方形の面積値
は、ポインタ光が１、２、３個の場合で異なる。このた
め、判定しきい値を設けることにより、この面積値から
入力モードを区別することができる。このように、画像
処理を簡単化して、ポインタが指示した指示位置と入力
モードの両方を併せて判定することができる。なお、本
実施例では、画像処理装置１４０１により、指示点の座
標及び入力モードを求めたが、専用の画像処理装置では
なく、通常の計算機を使用しても、同様の処理が可能で
ある。

【００１１】図６は、指示入力認識装置１５０１の処理
を示す流れ図である。まず、画像メモリ内の指示光の座
標（ｘｒ，ｙｒ）、及び入力モードの判定結果を取り込
む（ステップ８２０１）。指示入力認識装置１５０１で
は、指示光の座標が入力されれば、即ち、指示光が検出
されていれば（ステップ８２０２）、座標変換表１６０
１を用いて、表示画面内における指示光の座標（Ｘｒ，
Ｙｒ）を求め（ステップ８２０３）、表示制御装置２１
０１に座標値を送り、表示画面上の点（Ｘｒ，Ｙｒ）
に、指示光の認識位置を示すためのカーソルを表示する
（ステップ８２０４）。ここで、座標変換表１６０１
は、画像メモリ内における座標と表示画面上の座標を変
換するための表であり、カメラ設置時にあらかじめ作成
しておく。一方、画像処理装置１４０１から指示光の座
標が出力されなかった場合、即ち、座標値が得られなか
った場合（ステップ８２０２）には、前回の処理で求め
た表示画面上の点（Ｘｒ−１，Ｙｒ−１）に、指示入力
があったと判定し（ステップ８２０５）、その結果を対
象物特定装置１７０１に送る。ここで、本実施例では、
携帯型ポインタ１２０１の赤外光出射のスイッチを入り
の状態から切ることにより、運転員は指示入力を実施す
る。指示光が検出されなかった場合には、運転員が赤外
光スイッチを切ったとみなして、指示入力があったと認
識する。なお、本実施例では、赤外光を指示光として使
用したが、可視光を使用することも同様に可能である。
この場合には、指示光の位置を直接確認することができ
るため、カーソルの表示処理は不要となる。また、この
場合カメラ１３０１では、可視光カットフィルタを使用
しない。指示光の映像を表示画面と区別して取り込むた
めには、指示光の強度を高め、かつ、カメラ１３０１の
絞りを調整して、表示画面の映像に対する影響を抑える
ことが必要となる。

【００１２】次に、対象物特定装置１７０１の処理につ
いて説明する。図７は、指示入力対象物特定処理を示す
流れ図である。指示入力対象物の特定処理では、指示入
力認識装置１５０１で求めた指示入力座標（Ｘｒ−１，
Ｙｒ−１）を基に、運転員が指示した画面上の対象物を
特定する。まず、指示座標（Ｘｒ−１，Ｙｒ−１）を読
み込む（ステップ８３０１）。この座標から指示されて
いる対象ウィンドウを判定する（ステップ８３０２）。
この処理は、マルチウィンドウにより情報を表示する表
示制御装置２１０１を使用する場合に必要となる。次い
で、ウィンドウ内の相対座標（Ｘ_W，Ｙ_W）を計算する
（ステップ８３０３）。この相対座標からウィンドウ内
に表示中の図についての表示図面データを用いて指示入
力対象物を決定する（ステップ８３０４）。表示図面デ
ータは、図８に示すように、各図面ごとに用意している
ものである。図８には例として給水系系統図についての
データを示した。その内容は、指示領域の範囲と出力文
字列からなる。例えば、ウィンドウ内の相対座標
（Ｘ_W，Ｙ_W）つまり指示領域の起点（１０，７００）で
あり、指示領域の大きさが幅（５００）、高さ（５）の
とき、指示入力対象物は「タービン」であるとみなす。
前記の処理により、指示入力対象物が決定すると、対象
物に対応する文字列を出力する（ステップ８３０５）。

【００１３】次に、命令認識装置１９０１の処理につい
て説明する。図９は、命令認識装置１９０１の処理を示
す流れ図である。ここでは、対象物特定装置１７０１か
らの指示入力に対応する文字列、及び入力モードについ
ての信号を用いて、図の処理を実施する。まず、入力モ
ードから、モード・出力形態対応表を用いて出力形態を
決定する（ステップ８４０１）。モード・出力形態対応
表は、図１０に示すように、入力モード番号とそれに対
応する、系統図、トレンド図、ＩＴＶ映像などの出力形
態を与えるものであり、予め作成されている。次に、指
示入力対象と出力形態を基に、出力すべき情報を決定す
る（ステップ８４０２）。これには、図１１（イ）に示
す出力情報管理表を使用する。この表は、指示入力対象
と出力形態ごとに出力すべき情報を与えるものであり、
予め命令認識用データ２００１として作成しておく。例
えば、運転員が表示された図の中の「タービン」の部分
を指示入力した場合、出力形態が系統図であれば、ター
ビンの系統図を出力すべき情報として選択する。この結
果を大画面表示装置の表示制御装置２１０１を介して、
表示画面１１０１上に表示する（ステップ８４０３）。
なお、本実施例では、図１１（イ）に示すように、入力
モードに応じて出力形態を変更する例を説明したが、入
力モードに応じて、情報項目を切り換えることも同様に
可能である。例えば、モード１を回転数に、モード２を
軸振動に対応づけておく。このようにしておけば、図１
１（ロ）に示すように、指示入力対象がタービンであ
り、入力モードが１、即ち回転数に対応する場合にはタ
ービン回転数のトレンド図が出力情報として出力され
る。一方、入力モードが２、即ち軸振動に対応する場合
には、タービン軸振動振幅のトレンド図が出力情報とし
て出力される。また、図１１（ハ）に示すように、モー
ド１を運転員用の情報、モード２を保守員用の情報、モ
ード３を当直長用の情報に対応づけておくことも同様に
可能である。この時、例えば、タービンが指示入力され
た場合に、モード１ならば、運転員用の出力情報とし
て、タービンの起動手順を選択し、一方、モード２なら
ば、保守員用の出力情報として、タービンの保守手順を
選択することが可能となる。さらに、入力モードに応じ
て、情報の表示形態を変更することも同様に可能であ
る。即ち、モード１の場合には、出力情報を表示装置の
表示画面内にウィンドウとして表示する。一方、モード
２の場合には、表示装置の表示画面全体に出力情報を表
示する。

【００１４】図１２は、本実施例の動作例を示す模式図
である。大画面表示装置１１０１上に図１２に示すよう
なプラントの系統図が表示されており、ここで、運転員
が携帯型ポインタ１２０１によりタービンの部分を入力
モード２で指示入力した場合、図１０から入力モード２
に対応する出力形態はトレンド図であり、大画面表示装
置１１０１上には、図１２のように、タービン回転数と
タービン軸振動の振幅値のトレンド図が表示される。本
実施例では、このトレンド図を系統図の中にウィンドウ
として表示することとしている。

【００１５】以上説明したように、本実施例によれば、
携帯型ポインタを用いて、入力モードを切り換えながら
指示入力することにより、遠隔からプラント監視などに
必要な情報を簡単に切り換えて表示することが可能であ
る。これにより、プラント運転員は、プラント運転に必
要な情報を、入力場所を限定されることなく、遠隔から
切り換え指令することにより、表示画面上に容易に表示
して確認することが可能となる。また、本実施例では、
簡単な画像処理により、入力モードと指示位置の両方を
併せて判定することができる。これにより、入力モード
を別の方式や装置を用いて、別途判定する場合に比較
し、単純かつ簡単なシステム構成とすることができる。
また、入力モードの切り換えは、ポインタからの出射光
の個数を変えることにより実施する。これにより、レー
ザ光を出射するレーザダイオードの点灯、消灯を制御す
ることでモード切り換えが可能となり、携帯型ポインタ
を複雑な回路などを用いず、簡単に製作することができ
る。さらに、設定されている入力モードについての情報
は、ポインタに設置された液晶表示部に表示される。こ
れにより、運転員は、設定されている入力モードを確認
することが可能となる。また、この表示部にはモード番
号をそのまま表示すること、さらにそのモードの出力形
態、即ち系統図、トレンド図などの別を表示することが
可能である。なお、本実施例では、ポインタの液晶表示
部に入力モードについての情報を示したが、指示入力に
用いる大画面表示装置などの画面上に表示するカーソル
の形状、もしくは、メッセージにより入力モードを確認
できるようにすることも同様に可能である。また、本実
施例では、ポインタからの出射光に赤外光を使用してい
る。これにより、画像処理上の認識誤差、カメラ映像の
歪みなどのために、認識された指示点が実際の指示点と
異なることに対応できる。つまり、認識された指示点を
カーソルにより確認しながら、入力することにより、対
象を誤って指示入力することを防止することが可能とな
る。

【００１６】次に、本発明の他の実施例を説明する。図
１３は、本発明の他の実施例を示す遠隔指示入力装置の
構成を示すブロック図である。図１３において、１１０
２は表示画面、１２０２は表示画面への遠隔での指示入
力を実施するための携帯型ポインタであり、赤外レーザ
光を出射する。１３０２は、表示画面を含む範囲を撮影
するカメラであり、赤外光のみを感知するように可視光
のカットフィルタを装着している。１４０２は撮影映像
を画像処理する画像処理装置、１５０２は携帯型ポイン
タでの表示画面上への指示点の位置を認識する指示入力
認識装置、１６０２は座標の変換表、１７０２は指示入
力された表示図面内の対象物を特定する対象物特定装
置、１８０２は表示図面データ、１９０２は入力命令を
認識する命令認識装置、２００２は命令認識用のデー
タ、２１０２は大画面表示装置の表示制御装置である。
また、３０１２はＣＲＴ＃１、３０２２はＣＲＴ＃２、
３１１２及び３１２２は、それぞれＣＲＴ＃１及びＣＲ
Ｔ＃２の表示制御装置である。

【００１７】本実施例が図１の実施例と異なるのは、携
帯型ポインタ及び命令認識装置における処理である。こ
の点について、以下説明する。その他の処理については
図１の実施例と同様である。図１４は、ポインタ１２０
２の出射光の制御方法を示すための回路図である。図１
４において、２５４２はモード切換信号であり、モード
切換スイッチを押下すると、入力される。また、２５５
２は光のオン／オフ信号であり、光のオン／オフスイッ
チを押下している間はオン信号が入力される。２５６２
はレーザ光形状切換器であり、モード切換信号２５４２
が入力されると、モードを１、２、３と順番に切り換え
る。光のオン／オフ信号２５５２が入力されている間
は、レーザ光形状切換器２５６２のモードに従い、所定
のレーザダイオードが点灯される。つまり、モード１の
場合には、円形のレーザ光を出射するためのレーザダイ
オードが点灯、これにより、円形光出射口２６１からレ
ーザ光が出射される。モード２の場合には、十字型のレ
ーザ光を出射するためのレーザダイオードが点灯、これ
により、十字光出射口２６２からレーザ光が出射され
る。モード３の場合には、一の字型のレーザ光を出射す
るためのレーザダイオードが点灯する。即ち、一字光出
射口２６３からレーザ光が出射される。これにより、入
力モードを設定した後、光のオン／オフスイッチを押下
すれば、モードに応じた形状のレーザ光が出力されるこ
とになる。なお、本実施例では、レンズを用いて出射す
る光の形状を変化させている。この出射光の形状の違い
により、画像処理装置１４０２において図１の実施例と
同様にして、入力モードが認識される。

【００１８】図１５は、命令認識用データ２００２とし
て用意されているモード・出力デバイス対応表の内容を
示す図表である。本実施例では、このデータを使用し
て、情報を表示する出力デバイス（ここでは、大画面表
示装置の表示制御装置２１０２、ＣＲＴ＃１の表示制御
装置３１１２、ＣＲＴ＃２の表示制御装置３１２２を指
す。）を入力モードに応じて切り換え制御する。例え
ば、本実施例では入力命令の種類をトレンド図の表示命
令に限定しているとして、運転員が例えば系統図の中に
表示されている給水ポンプを指示入力すると、給水ポン
プに関連し用意されているトレンド図、即ち、給水ポン
プ流量のトレンド図（図示せず）が表示される。このと
き、モード・出力デバイス対応表を用いて、このトレン
ド図の表示先の出力デバイスを切り換えると、このトレ
ンド図は入力モード１、２、３に応じて大画面表示装
置、ＣＲＴ＃１あるいはＣＲＴ＃２に切り換え表示され
る。つまり、入力モードが１の場合には、トレンド図が
大画面表示装置上に表示される。一方、入力モードが２
あるいは３の場合には、ＣＲＴ＃１あるいはＣＲＴ＃２
にこのトレンド図が表示される。なお、本実施例では、
入力命令を情報の切換命令に限定したが、処理命令の出
力先をプラント制御装置等とすることもできる。このよ
うにすれば、プラント機器の操作命令などを同様にして
入力することが可能となる。また、本実施例では、情報
の表示先の出力デバイスを入力モードに応じて切り換え
るようにしたが、表示先の出力デバイスではなく、入力
モードに応じて表示形態を変更することもできる。例え
ば、モード１の場合には、表示を全面的に切り換え、モ
ード２の場合には、ウィンドウを生成して、情報を表示
するなどの表示切り換えを同様にして実現できる。

【００１９】以上のように、本実施例によれば、携帯型
ポインタの入力モードを切り換えることにより、情報を
表示する出力デバイスを切り換えることが可能となる。
これにより、プラント運転などにおいて、大画面表示装
置は、運転クルーの共用情報の表示デバイスとして、一
方、操作盤に設置されたＣＲＴは、各々の運転員の個人
用情報の表示用デバイスとして使用することができる。
また、本発明の両実施例から、図３に示すように、ポイ
ンタの入力モードを切り換えることにより、画面上の同
じ部分の指示入力を変更し、一方、図１４に示すポイン
タの入力モードにより、その指示入力に基づく情報の表
示先（出力デバイス）を変えることができる。これによ
り、運転員が、自分用の情報をＣＲＴに表示し、全員に
認識してもらいたい情報を大画面表示装置上に出力表示
するような入力操作を簡単かつ容易に実施することがで
きる。このように、運転クルー間の情報の制御を効率的
に、かつ簡単・容易な入力操作により、実現することが
可能となる。以上、本発明の実施例として、表示情報の
切り換え処理についての例を示したが、同様にして、画
像処理により認識された入力モードと指示位置を用い
て、その他の一般的な制御のための計算処理を実行する
ことも可能である。例えば、給水ポンプが指示入力対象
物として判定され、入力モードが１のときは、給水ポン
プ起動の操作命令入力があったと判定し、計算処理によ
りポンプ起動のための制御指令をプラントに出力する。
一方、入力モードが２の場合には、同じ給水ポンプが指
示入力された場合に、給水ポンプの停止操作の命令入力
があったと判定し、計算処理によりポンプ停止のための
制御指令をプラントに出力する。このように、本発明の
実施例として、画像処理により認識された入力モードと
指示位置をもとに計算処理して、プラントを制御するた
めの制御指令を出力することもできる。

【００２０】

【発明の効果】以上述べたように、本発明によれば、出
射光の個数および形状の変更可能なポインタを用いて、
遠隔から大画面表示装置などの表示画面上に指示入力す
ることにより、プラント運転に必要な情報を、出力形
態、情報項目、表示形態も含めて、効率的に制御するこ
とが可能となり、また、プラント運転員が必要な情報を
得るための命令入力操作の簡単化ができ、さらに、運転
クルーの共用情報と、運転員のための個人用情報との適
切な切り換え制御が可能となる。したがって、プラント
運転における運転員の負担を低減し、かつ、情報の確認
を支援し、効率良く、安全なプラント運転を実現するこ
とができる。また、ポインタによる指示位置の判定及び
ポインタの入力モードの判定を簡単な画像処理により実
現でき、単純なシステム構成とすることが可能である。

【図面の簡単な説明】

【図１】本発明の一実施例を示す遠隔指示入力装置の構
成を示すブロック図

【図２】指示入力に用いる携帯型ポインタの外観を示す
模式図

【図３】ポインタの出射光の制御方法を示す回路図

【図４】画像処理装置の処理を示す流れ図

【図５】画像処理装置で実施される投影分布と座標値、
入力モードの認識方法を示す模式図

【図６】指示入力認識装置の処理を示す流れ図

【図７】指示入力対象物の特定処理を示す流れ図

【図８】表示図面データを示す図表

【図９】命令認識装置の処理を示す流れ図

【図１０】モード・出力形態対応表の内容を示す図表

【図１１】出力情報管理表の内容を示す図表

【図１２】本発明の一実施例の動作例を示す模式図であ
る。

【図１３】本発明の他の実施例を示す遠隔指示入力装置
の構成を示すブロック図

【図１４】ポインタの出射光形状の制御方法を示す回路
図

【図１５】モード・出力デバイス対応表の内容を示す図
表

【符号の説明】

１１０１，１１０２表示画面１２０１，１２０２携帯型ポインタ１３０１，１３０２カメラ１４０１，１４０２画像処理装置１５０１，１５０２指示入力認識装置１６０１，１６０２座標変換表１７０１，１７０２対象物特定装置１８０１，１８０２表示図面データ１９０１，１９０２命令認識装置２００１，２００２命令認識用データ２１０１，２１０２大画面表示装置の表示制御装置２５１１，２５１２モード切換スイッチ２５２１，２５２２光のオン／オフスイッチ２５３１液晶表示部２５４１，２５４２モード切換信号２５５１，２５５２光のオン／オフ信号２５６１レーザ光個数切換器２５６２レーザ光形状切換器２５７１レーザダイオード３０１２ＣＲＴ＃１３０２２ＣＲＴ＃２３１１２ＣＲＴ＃１表示制御装置３１２２ＣＲＴ＃２表示制御装置

Claims

【特許請求の範囲】

【請求項１】表示画面上に表示された図形かつ／また
はシンボルに光を出射して指示入力し、命令入力操作を
実行する遠隔指示入力方法であって、指示用のポインタ
から表示画面上の指示位置に出射光を発するとともに、
この出射光の個数かつ／または形状を切り換えて形成さ
れる入力モードを指示入力し、ポインタが指示した前記
表示画面上の指示位置と入力モードを撮影映像化し、こ
の撮影映像を画像処理して指示位置の座標と入力モード
の種別を判定することを特徴とする遠隔指示入力方法。
【請求項２】表示画面上に表示された図形かつ／また
はシンボルに光を出射して指示入力し、命令入力操作を
実行する遠隔指示入力方法であって、指示用のポインタ
から表示画面上の指示位置に出射光を発するとともに、
この出射光の個数かつ／または形状を切り換えて形成さ
れる入力モードを指示入力し、ポインタが指示した前記
表示画面上の指示位置と入力モードを撮影映像化し、こ
の撮影映像を画像処理して指示位置の座標と入力モード
の種別を判定し、この判定をもとに指示入力対象物を特
定し、この指示入力対象物と入力モードをもとに出力す
べき情報とその形態を決定し、表示画面に出力情報を表
示することを特徴とする遠隔指示入力方法。
【請求項３】表示画面上に表示された図形かつ／また
はシンボルに光を出射して指示入力し、命令入力操作を
実行する遠隔指示入力方法であって、指示用のポインタ
から表示画面上の指示位置に出射光を発するとともに、
この出射光の個数かつ／または形状を切り換えて形成さ
れる入力モードを指示入力し、ポインタが指示した前記
表示画面上の指示位置と入力モードを撮影映像化し、こ
の撮影映像を画像処理して指示位置の座標と入力モード
の種別を判定し、この判定をもとに制御のための計算処
理を実施することを特徴とする遠隔指示入力方法。
【請求項４】請求項１、請求項２または請求項３にお
いて、ポインタからの出射光に赤外光を使用することを
特徴とする遠隔指示入力方法。
【請求項５】請求項１、請求項２または請求項３にお
いて、ポインタで設定された出射光の個数かつ／または
形状による入力モードに係る情報を、このポインタに設
けられた表示部に表示することを特徴とする遠隔指示入
力方法。
【請求項６】請求項１、請求項２または請求項３にお
いて、ポインタで設定された出射光の個数かつ／または
形状による入力モードに係る情報を、指示入力に使用す
る表示画面上に表示することを特徴とする遠隔指示入力
方法。
【請求項７】請求項１、請求項２または請求項３にお
いて、画像処理によるポインタの指示位置及びポインタ
からの出射光の個数かつ／または形状の種別の判定は、
画像内の出射光に対応する図形の投影分布をもとに、こ
の図形に外接する長方形を用いて実行することを特徴と
する遠隔指示入力方法。
【請求項８】請求項１、請求項２または請求項３にお
いて、ポインタの出射光の個数かつ／または形状の種別
及び指示位置の判定結果に基づいて、表示画面上に提供
すべき出力形態かつ／または情報項目かつ／または表示
形態、ないしは、表示画面を提供すべき出力デバイスを
選択することを特徴とする遠隔指示入力方法。
【請求項９】表示画面上に表示された図形かつ／また
はシンボルに光を出射して指示入力し、命令入力操作を
実行する遠隔指示入力装置において、前記表示画面上の
指示位置に出射光を発するとともに、この出射光の個数
かつ／または形状の変更による入力モードの切り換えが
可能な指示用のポインタと、このポインタによる表示画
面への投射光を撮影映像化する撮影手段と、撮影された
ポインタによる指示位置とポインタの入力モードとを画
像処理により特定する画像処理手段を有することを特徴
とする遠隔指示入力装置。
【請求項１０】表示画面上に表示された図形かつ／ま
たはシンボルに光を出射して指示入力し、命令入力操作
を実行する遠隔指示入力装置において、前記表示画面上
の指示位置に出射光を発するとともに、この出射光の個
数かつ／または形状の変更による入力モードの切り換え
が可能な指示用のポインタと、このポインタによる表示
画面への投射光を撮影映像化する撮影手段と、撮影され
たポインタによる指示位置とポインタの入力モードとを
画像処理する画像処理手段と、この画像処理した情報を
もとに表示画面に出力情報を表示する処理装置を有する
ことを特徴とする遠隔指示入力装置。
【請求項１１】表示画面上に表示された図形かつ／ま
たはシンボルに光を出射して指示入力し、命令入力操作
を実行する遠隔指示入力装置において、前記表示画面上
の指示位置に出射光を発するとともに、この出射光の個
数かつ／または形状の変更による入力モードの切り換え
が可能な指示用のポインタと、このポインタによる表示
画面への投射光を撮影映像化する撮影手段と、撮影され
たポインタによる指示位置とポインタの入力モードとを
画像処理する画像処理手段と、この画像処理した情報を
もとに制御のための計算処理を実施する処理装置を有す
ることを特徴とする遠隔指示入力装置。
【請求項１２】請求項９、請求項１０または請求項１
１において、ポインタは赤外光を出射光とすることを特
徴とする遠隔指示入力装置。
【請求項１３】請求項９、請求項１０または請求項１
１において、ポインタに表示部を設け、ポインタに設定
された出射光の個数かつ／または形状による入力モード
に係る情報を表示することを特徴とする遠隔指示入力装
置。