JPH04205617A - 入出力インターフェース装置 - Google Patents
入出力インターフェース装置Info
- Publication number
- JPH04205617A JPH04205617A JP2340264A JP34026490A JPH04205617A JP H04205617 A JPH04205617 A JP H04205617A JP 2340264 A JP2340264 A JP 2340264A JP 34026490 A JP34026490 A JP 34026490A JP H04205617 A JPH04205617 A JP H04205617A
- Authority
- JP
- Japan
- Prior art keywords
- cursor
- operator
- input
- eye
- head
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Digital Computer Display Output (AREA)
- Position Input By Displaying (AREA)
- Controls And Circuits For Display Device (AREA)
- Input From Keyboards Or The Like (AREA)
Abstract
(57)【要約】本公報は電子出願前の出願データであるた
め要約のデータは記録されません。
め要約のデータは記録されません。
Description
【発明の詳細な説明】
［発明の目的コ
（産業上の利用分野）
本発明は、コンピュータシステムにおけるマンマシンイ
ンターフェースに関係し、表示画面を通じて入出力動作
を行なう入出力インターフェース装置に関する。
ンターフェースに関係し、表示画面を通じて入出力動作
を行なう入出力インターフェース装置に関する。
（従来の技術）
従来、パーソナルコンピュータ等のコンピュータシステ
ムでは、オペレータがシステムを操作するために必要な
各種のマンマシンインターフェースが開発されている。
ムでは、オペレータがシステムを操作するために必要な
各種のマンマシンインターフェースが開発されている。
このようなマンマシンインターフェースにおいて、ディ
スプレイの画面にアイコンを表示し、カーソルにより指
示されたアイコンの内容に応じた入出力動作を実行する
方式が、特にパーソナルコンピュータの分野で利用され
ている。
スプレイの画面にアイコンを表示し、カーソルにより指
示されたアイコンの内容に応じた入出力動作を実行する
方式が、特にパーソナルコンピュータの分野で利用され
ている。
このようなインターフェースにより、オペレータによる
システムの操作が簡単かつ効率的になる。
システムの操作が簡単かつ効率的になる。
しかし、カーソルの操作はキーボードの手動作によりな
されているため、これを効率化できれば、インターフェ
ースの性能が飛躍的に向上する。
されているため、これを効率化できれば、インターフェ
ースの性能が飛躍的に向上する。
（発明が解決しようとする課題）
マンマシンインターフェースにおいて、画面に表示され
た入出力動作内容をカーソルで指示する場合に、カーソ
ル操作を簡単かつ効率化することが望ましい。
た入出力動作内容をカーソルで指示する場合に、カーソ
ル操作を簡単かつ効率化することが望ましい。
本発明の目的は、オペレータの手動作によるカーソルの
操作を簡単かつ効率化することにより、マンマシンイン
ターフェースの性能を向上することかできる入出力イン
ターフェース装置を提供することにある。
操作を簡単かつ効率化することにより、マンマシンイン
ターフェースの性能を向上することかできる入出力イン
ターフェース装置を提供することにある。
［発明の構成コ
（課題を解決するための手段と作用）
本発明は、ディスプレイの画面に表示される例えばアイ
コンをカーソルにより指示して入出力動作を行なう入出
力インターフェース装置において、画面と対向するオペ
レータの視線を検出するアイ検出手段、このアイ検出手
段の検出結果に基ついてオペレータか指示する画面の位
置にカーソルを表示するカーソル処理手段、オペレータ
の頭部の動作を検出する頭部検出手段および頭部検出手
段の検出結果に基づいてカーソル処理手段により表示さ
れたカーソルの指示内容に応した入出力動作を実行する
入出力制御手段とを備えた装置である。
コンをカーソルにより指示して入出力動作を行なう入出
力インターフェース装置において、画面と対向するオペ
レータの視線を検出するアイ検出手段、このアイ検出手
段の検出結果に基ついてオペレータか指示する画面の位
置にカーソルを表示するカーソル処理手段、オペレータ
の頭部の動作を検出する頭部検出手段および頭部検出手
段の検出結果に基づいてカーソル処理手段により表示さ
れたカーソルの指示内容に応した入出力動作を実行する
入出力制御手段とを備えた装置である。
このような構成により、オペレータはキーボードを手動
により操作することなく、画面上のカーソルを操作して
、システムに対する入出力動作を実行することができる
。
により操作することなく、画面上のカーソルを操作して
、システムに対する入出力動作を実行することができる
。
（実施例）
以下図面を参照して本発明の詳細な説明する。
第１図は同実施例に係わるコンピュータシステムの構成
を示すブロック図である。本装置は、システムの中央処
理装置（ＣＰＵ）１０、プログラムを格納しているＲ
ＯＭ Ｉｋプログラムの各種フラグ、出力データの編集
処理、印刷処理用等に使用されるＲＡＭＩ２、例えば液
晶表示器からなるディスプレイ１４を制御する表示コン
トローラ１３、キーボード１６及びキーボードコントロ
ーラ１５を有する。
を示すブロック図である。本装置は、システムの中央処
理装置（ＣＰＵ）１０、プログラムを格納しているＲ
ＯＭ Ｉｋプログラムの各種フラグ、出力データの編集
処理、印刷処理用等に使用されるＲＡＭＩ２、例えば液
晶表示器からなるディスプレイ１４を制御する表示コン
トローラ１３、キーボード１６及びキーボードコントロ
ーラ１５を有する。
さらに、本装置は、ディスプレイ１４に対向するオペレ
ータの眼の位置を検出するアイセンサ１７、オペレータ
の頭部の動作を検出する頭部位置センサ１８、センサ処
理部１９およびカーソル処理部２０を備えている。アイ
センサ１７は、第２図に示すように、システムの本体で
ディスプレイ１４を保持する表示ユニット１４ａの隅に
設けられており、アイカメラと画像処理回路からなる。
ータの眼の位置を検出するアイセンサ１７、オペレータ
の頭部の動作を検出する頭部位置センサ１８、センサ処
理部１９およびカーソル処理部２０を備えている。アイ
センサ１７は、第２図に示すように、システムの本体で
ディスプレイ１４を保持する表示ユニット１４ａの隅に
設けられており、アイカメラと画像処理回路からなる。
頭部位置センサ１８は、アイセンサ１７とは異なる表示
ユニット１４ａの隅に設けられており、オペレータ２１
の頭部に設けられた検出体（例えば反射シート）２２を
検出して、オペレータ２１の頭部の動作（頷き）を検出
する。
ユニット１４ａの隅に設けられており、オペレータ２１
の頭部に設けられた検出体（例えば反射シート）２２を
検出して、オペレータ２１の頭部の動作（頷き）を検出
する。
センサ処理部１９は、アイセンサ１７および頭部位置セ
ンサ１８のそれぞれの検出信号を処理する回路である。
ンサ１８のそれぞれの検出信号を処理する回路である。
カーソル処理部２０は、キーボード１６のカーソルキー
によりカーソル処理部とは異なる回路であり、センサ処
理部１９からのセンサ信号に基づいテ視線カーソル２３
および注目点カーソル２４ヲテイスプレイ１４に表示す
るための処理を行なう。アイ＝ ５− センサ１７および頭部位置センサ１８は、ＣＰＵｌ０の
制御により検出動作を開始する。
によりカーソル処理部とは異なる回路であり、センサ処
理部１９からのセンサ信号に基づいテ視線カーソル２３
および注目点カーソル２４ヲテイスプレイ１４に表示す
るための処理を行なう。アイ＝ ５− センサ１７および頭部位置センサ１８は、ＣＰＵｌ０の
制御により検出動作を開始する。
次に、同実施例の動作を説明する。
ＣＰ Ｕ ｔｏは、ＲＯＭ１１に格納されたプログラム
に基づいて各種データ処理を実行する。ここで、ＣＰＵ
ｌ０は、初期時に入出力内容を選択指定するためのアイ
コンをディスプレイ１４の初期画面（第３図）として表
示させる（第４図のステップＳｌ）。アイセンサ１７は
、ディスプレイ１４の画面に対向しているオペレータ２
１の眼の位置を検出し、検出信号をセンサ処理部１９に
出力する（ステップＳ２）。センサ処理部１９は、アイ
センサ１７からの検出信号に基づいてオペレータ２Ｉの
視線の方向に応じた画面上の概略的位置を算出する処理
を実行する。この処理では、例えばオペレータ２１の視
線の位置を画像処理し、各位置に対する時間（注目時間
）を算出して、その最大値に対応する位置を視線の位置
として設定する処理が実行される。カーソル処理部２０
は、センサ処理部１９からの処理結果に基づいて、オペ
レータ２１の視線の概略的位置に視線カーソル２３をデ
ィスプレイ１４に表示させる処理を行なう（ステップＳ
３）。
に基づいて各種データ処理を実行する。ここで、ＣＰＵ
ｌ０は、初期時に入出力内容を選択指定するためのアイ
コンをディスプレイ１４の初期画面（第３図）として表
示させる（第４図のステップＳｌ）。アイセンサ１７は
、ディスプレイ１４の画面に対向しているオペレータ２
１の眼の位置を検出し、検出信号をセンサ処理部１９に
出力する（ステップＳ２）。センサ処理部１９は、アイ
センサ１７からの検出信号に基づいてオペレータ２Ｉの
視線の方向に応じた画面上の概略的位置を算出する処理
を実行する。この処理では、例えばオペレータ２１の視
線の位置を画像処理し、各位置に対する時間（注目時間
）を算出して、その最大値に対応する位置を視線の位置
として設定する処理が実行される。カーソル処理部２０
は、センサ処理部１９からの処理結果に基づいて、オペ
レータ２１の視線の概略的位置に視線カーソル２３をデ
ィスプレイ１４に表示させる処理を行なう（ステップＳ
３）。
さらに、カーソル処理部２０は、第３図に示すように、
視線カーソル２３の位置から表示されたアイコン３０の
指示対象を明確化できる程度の注目点カーソル２４を表
示させる処理を行なう（ステップＳ４）。この処理は、
視線カーソル２３の位置かオペレータ２１の視線の動作
に敏感に反応して動くのに対して、ある時定数により緩
慢な動きにして、オペレータ２１の指示を明確化できる
程度のポインティングカーソル２４を求めるためである
。表示コントローラ１３は、ＣＰＵｌ０の制御により、
注目点カーソル２４により指示されたアイコン３０の内
容３０ａを反転表示させる（ステップＳ５）。
視線カーソル２３の位置から表示されたアイコン３０の
指示対象を明確化できる程度の注目点カーソル２４を表
示させる処理を行なう（ステップＳ４）。この処理は、
視線カーソル２３の位置かオペレータ２１の視線の動作
に敏感に反応して動くのに対して、ある時定数により緩
慢な動きにして、オペレータ２１の指示を明確化できる
程度のポインティングカーソル２４を求めるためである
。表示コントローラ１３は、ＣＰＵｌ０の制御により、
注目点カーソル２４により指示されたアイコン３０の内
容３０ａを反転表示させる（ステップＳ５）。
次に、頭部位置センサ】８は、オペレータ２１の頭部に
設けられた検出体２２を検知して、オペレータ２１か頭
部を頷く動作をしたか否かを検出する（ステップＳ６）
。オペレータ２１が頭部を頷く動作をした場合に（ステ
ップＳ７のＹＥＳ） 、ＣＰＵｌ０はセンサ処理部１９
からの処理結果に基づいて、注目点カーソル２４て指示
されたアイコン３０の内容３０ａに応した入出力動作を
実行する（ステップＳ８）。一方、オペレータ２１が頭
部を頷く動作以外の例えば横振り動作をした場合に（ス
テップＳ７のＮｏ） 、ＣＰＵｌ０はセンサ処理部１９
からの処理結果に基づいて、注目点カーソル２４て指示
されたアイコン３０の内容３０ａか指定されないと認識
する。この後、ＣＰＵＩ（ｌは、第４図のステップＳ２
からの処理を繰り返し、新たな位置の注目点カーソル２
４により指定されたアイコン３０の内容を検出する。
設けられた検出体２２を検知して、オペレータ２１か頭
部を頷く動作をしたか否かを検出する（ステップＳ６）
。オペレータ２１が頭部を頷く動作をした場合に（ステ
ップＳ７のＹＥＳ） 、ＣＰＵｌ０はセンサ処理部１９
からの処理結果に基づいて、注目点カーソル２４て指示
されたアイコン３０の内容３０ａに応した入出力動作を
実行する（ステップＳ８）。一方、オペレータ２１が頭
部を頷く動作以外の例えば横振り動作をした場合に（ス
テップＳ７のＮｏ） 、ＣＰＵｌ０はセンサ処理部１９
からの処理結果に基づいて、注目点カーソル２４て指示
されたアイコン３０の内容３０ａか指定されないと認識
する。この後、ＣＰＵＩ（ｌは、第４図のステップＳ２
からの処理を繰り返し、新たな位置の注目点カーソル２
４により指定されたアイコン３０の内容を検出する。
このようにして、オペレータの視線の方向から視線カー
ソル２３を求め、さらに視線カーソル２３と表示したア
イコン３０の位置に基づいて、注目点カーソル２４を表
示させる。この注目点カーソル２４により指定されたア
イコン３０の内容がオペレータの指示対象であれば、オ
ペレータの頭部の動作により確認する。この確認により
、ＣＰＵｌ０は指定されたアイコン３０の内容に応じた
入出力動作を実行する。また、オペレータの頭部の動作
が否認てあれば、例えば視線カーソル２３を求める処理
から再度繰り返す。
ソル２３を求め、さらに視線カーソル２３と表示したア
イコン３０の位置に基づいて、注目点カーソル２４を表
示させる。この注目点カーソル２４により指定されたア
イコン３０の内容がオペレータの指示対象であれば、オ
ペレータの頭部の動作により確認する。この確認により
、ＣＰＵｌ０は指定されたアイコン３０の内容に応じた
入出力動作を実行する。また、オペレータの頭部の動作
が否認てあれば、例えば視線カーソル２３を求める処理
から再度繰り返す。
したかって、オペレータはキーボードのカーソルキーを
一切操作することなく、ディスプレイの画面にカーソル
（注目点カーソル２４）を表示して、アイコン３０の内
容を指定することができる。言い換えれば、手動による
カーソル操作の代わりに、オペレータの視線と頭部の動
作によりカーソル操作を実行し、必要な入出力動作を指
示することができる。
一切操作することなく、ディスプレイの画面にカーソル
（注目点カーソル２４）を表示して、アイコン３０の内
容を指定することができる。言い換えれば、手動による
カーソル操作の代わりに、オペレータの視線と頭部の動
作によりカーソル操作を実行し、必要な入出力動作を指
示することができる。
［発明の効果］
以上詳述したように本発明によれば、画面に表示された
入出力動作内容をカーソルで指示して、指定された入出
力動作を行なうマンマシンインターフェースにおいて、
カーソル操作をキーボードの手動作の代わりに、オペレ
ータの視線と頭部の動作により実行することかできる。
入出力動作内容をカーソルで指示して、指定された入出
力動作を行なうマンマシンインターフェースにおいて、
カーソル操作をキーボードの手動作の代わりに、オペレ
ータの視線と頭部の動作により実行することかできる。
したがって、結果的にカーソルの操作を簡単かつ効率化
することかできるため、マンマシンインターフェースの
性能を飛躍的に向上することができる。
することかできるため、マンマシンインターフェースの
性能を飛躍的に向上することができる。
第１図は本発明の実施例に係イ）るコンピュータシステ
ムの構成を示すブロック図、第２図は同実施例に係わる
コンピュータの外観を示す斜視図、第３図は同実施例の
動作を説明するための概念図、第４図は同実施例の動作
を説明するためのフローチャートである。 １７・・アイセンサ、１８・・頭部位置センサ、１９・
・センサ処理部、２０・・・カーソル処理部。 出願人代理人 弁理士 鈴江武彦 −１〇 −
ムの構成を示すブロック図、第２図は同実施例に係わる
コンピュータの外観を示す斜視図、第３図は同実施例の
動作を説明するための概念図、第４図は同実施例の動作
を説明するためのフローチャートである。 １７・・アイセンサ、１８・・頭部位置センサ、１９・
・センサ処理部、２０・・・カーソル処理部。 出願人代理人 弁理士 鈴江武彦 −１〇 −
Claims (1)
- 【特許請求の範囲】 ディスプレイの画面に表示されるカーソルにより指示さ
れる内容に基づいて入出力動作を行なう入出力インター
フェース装置において、 前記画面と対向するオペレータの視線を検出するアイ検
出手段と、 このアイ検出手段の検出結果に基づいて前記オペレータ
が指示する前記画面の位置に前記カーソルを表示するカ
ーソル処理手段と、 前記オペレータの頭部の動作を検出する頭部検出手段と
、 この頭部検出手段の検出結果に基づいて、前記カーソル
処理手段により表示された前記カーソルの指示内容に応
じた入出力動作を実行する入出力制御手段とを具備した
ことを特徴とする入出力インターフェース装置。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2340264A JPH04205617A (ja) | 1990-11-30 | 1990-11-30 | 入出力インターフェース装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2340264A JPH04205617A (ja) | 1990-11-30 | 1990-11-30 | 入出力インターフェース装置 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JPH04205617A true JPH04205617A (ja) | 1992-07-27 |
Family
ID=18335278
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2340264A Pending JPH04205617A (ja) | 1990-11-30 | 1990-11-30 | 入出力インターフェース装置 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JPH04205617A (ja) |
Cited By (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH09258873A (ja) * | 1996-03-19 | 1997-10-03 | Mitsubishi Electric Corp | 入力装置 |
| JPH09274530A (ja) * | 1996-04-05 | 1997-10-21 | Nec Corp | 頭部回転検出型入力装置 |
| WO2000022823A1 (en) * | 1998-10-09 | 2000-04-20 | Sony Corporation | Communication apparatus and method |
| JP2004362569A (ja) * | 2003-05-30 | 2004-12-24 | Microsoft Corp | 頭部姿勢の査定方法およびシステム |
| JP2006095208A (ja) * | 2004-09-30 | 2006-04-13 | Sophia Co Ltd | 遊技機 |
| JP2006243784A (ja) * | 2005-02-28 | 2006-09-14 | Kobe Univ | ポインティングシステム及びポインティング方法 |
| JP2013058221A (ja) * | 2012-10-18 | 2013-03-28 | Hitachi Ltd | 会議分析システム |
-
1990
- 1990-11-30 JP JP2340264A patent/JPH04205617A/ja active Pending
Cited By (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH09258873A (ja) * | 1996-03-19 | 1997-10-03 | Mitsubishi Electric Corp | 入力装置 |
| JPH09274530A (ja) * | 1996-04-05 | 1997-10-21 | Nec Corp | 頭部回転検出型入力装置 |
| WO2000022823A1 (en) * | 1998-10-09 | 2000-04-20 | Sony Corporation | Communication apparatus and method |
| US6606111B1 (en) | 1998-10-09 | 2003-08-12 | Sony Corporation | Communication apparatus and method thereof |
| JP2004362569A (ja) * | 2003-05-30 | 2004-12-24 | Microsoft Corp | 頭部姿勢の査定方法およびシステム |
| US7844086B2 (en) | 2003-05-30 | 2010-11-30 | Microsoft Corporation | Head pose assessment methods and systems |
| US8135183B2 (en) | 2003-05-30 | 2012-03-13 | Microsoft Corporation | Head pose assessment methods and systems |
| US8457358B2 (en) | 2003-05-30 | 2013-06-04 | Microsoft Corporation | Head pose assessment methods and systems |
| JP2006095208A (ja) * | 2004-09-30 | 2006-04-13 | Sophia Co Ltd | 遊技機 |
| JP2006243784A (ja) * | 2005-02-28 | 2006-09-14 | Kobe Univ | ポインティングシステム及びポインティング方法 |
| JP2013058221A (ja) * | 2012-10-18 | 2013-03-28 | Hitachi Ltd | 会議分析システム |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US10860145B2 (en) | Projection device, projection method and projection program | |
| JP3847641B2 (ja) | 情報処理装置、情報処理プログラム、情報処理プログラムを記録したコンピュータ読み取り可能な記録媒体、及び情報処理方法 | |
| RU2288512C2 (ru) | Способ и устройство для просмотра информации на дисплее | |
| US5519827A (en) | Method and apparatus for changing screen image data based on cursor movement relative to a preset mark on the screen | |
| US20050162384A1 (en) | Pointing device, method for displaying point image, and program therefor | |
| JPH05282002A (ja) | 入力装置 | |
| EP3007441A1 (en) | Interactive displaying method, control method and system for achieving displaying of a holographic image | |
| JPH08179875A (ja) | 指示位置検出方法及び装置 | |
| US9146667B2 (en) | Electronic device, display system, and method of displaying a display screen of the electronic device | |
| JPH09231006A (ja) | 携帯情報処理装置 | |
| JPH0213804A (ja) | 視覚センサにおけるノミナル設定方式 | |
| JPH1031477A (ja) | 画像表示方法およびその装置 | |
| JPH04205617A (ja) | 入出力インターフェース装置 | |
| JP3355708B2 (ja) | コマンド処理装置 | |
| JPS6111615A (ja) | プロセス監視装置 | |
| JPH09282476A (ja) | グラフ表示装置及びグラフ表示方法 | |
| JPS5957390A (ja) | 図形入力装置 | |
| JPH0643851A (ja) | 画像表示装置 | |
| JPH0944297A (ja) | データ入力方法及びその装置 | |
| JP2009140177A (ja) | 操作表示装置 | |
| JP2005100132A (ja) | 表示制御装置 | |
| CN105094446A (zh) | 一种触控定位方法及装置 | |
| JPH03256112A (ja) | 制御処理装置 | |
| JP2000250681A (ja) | 情報入力装置および画像入力方法 | |
| JP2020086637A (ja) | 情報処理装置およびその制御方法、並びにプログラム |