JPH1069363A - アイトラック式警報メッセージ - Google Patents

アイトラック式警報メッセージ

Info

Publication number
JPH1069363A
JPH1069363A JP9169044A JP16904497A JPH1069363A JP H1069363 A JPH1069363 A JP H1069363A JP 9169044 A JP9169044 A JP 9169044A JP 16904497 A JP16904497 A JP 16904497A JP H1069363 A JPH1069363 A JP H1069363A
Authority
JP
Japan
Prior art keywords
message
user
display
computer
computer program
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP9169044A
Other languages
English (en)
Inventor
Bruce Tognazzini
トグナジニ ブルース
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sun Microsystems Inc
Original Assignee
Sun Microsystems Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sun Microsystems Inc filed Critical Sun Microsystems Inc
Publication of JPH1069363A publication Critical patent/JPH1069363A/ja
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013Eye tracking input arrangements

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Digital Computer Display Output (AREA)
  • Position Input By Displaying (AREA)

Abstract

(57)【要約】 【課題】 如何なる複雑なハンド・アイ対話も無しにユ
ーザに対して各メッセージを表示、除去させ得る装置、
システム、プロセス及びコンピュータ・プログラム・プ
ロダクトを提供する。 【解決手段】 ユーザ・メッセージは、アイトラッカー
によって示される通りにユーザの目が向けられているデ
ィスプレイ上の位置に自動的に位置決めされる。テキス
トを横切るユーザの目によって示されるように、ユーザ
がメッセージを読み取ったとき、メッセージは自動的に
クリアされる。メッセージはユーザが話した応答によっ
てもクリアし得る。

Description

【発明の詳細な説明】
【0001】
【発明の属する技術分野】この発明はコンピュータ・シ
ステムに関し、特に、システムメッセージまたはエラー
メッセージをユーザに示すコンピュータ・システムに関
する。
【0002】
【従来の技術及びその課題】ウインドーを開けて、シス
テムメッセージまたはエラーメッセージをユーザに示す
コンピュータ・システムが知られている。これらのメッ
セージは重要であると共に、ユーザがいつエラーメッセ
ージを読み取ったかを決定する何らの方法も従来技術の
システムは有していないので、メッセージウインドーを
開けることによって、例えば「リターン」を押圧する等
の何らかの動作を行うことによりユーザがエラーメッセ
ージを読み取ったことを認めるときまで進行中のプログ
ラムの処理が停止される。
【0003】“ビーッ”等の警報音を発して、エラーが
起こったことをユーザに知らせることもまた技術上知ら
れている。この種のシステムは、新しいソフトウェアを
学習したり、またはコンピュータを動作させたりする過
程において、ユーザが多くのエラーを犯し得、この結
果、他の人が近くにいるとき、“ビーッ”という警報音
の存在が妨げになるという問題を有している。
【0004】アイトラッキング装置(eye trac
king device)は、航空機での或る制御応用
におけるヘッドアップ・ディスプレイと特に関連して知
られている。アイトラッカー装置は、ユーザの目を監視
すると共に、ユーザが注視している方向、及び、幾つか
の応用においては、ユーザの目の焦点が合っている3次
元空間での特定の点を計算する。
【0005】1つの商用のアイトラッカーは、カリフォ
ルニア州エルケイオン市(El Chaon,Cali
fornia)に所在するフォーワード・オプティカル
・テクノロジーズ社(Forward Optical
Technologies,Inc.)によって製造
されたデュアル−パーキンジェ−イメージ(DPI:D
ual−Purkinje−Image)・アイトラッ
カーである。このアイトラッカーは、大きな2次元視野
に渡る注視の方向を高精度でしかも目には何も取り付け
ることなく決定する。このアイトラッカーは、主体には
見えず、しかも正視と干渉しない赤外線で動作する。ま
た、このアイトラッカーは、円弧の1分のオーダーの指
示精度と、ミリ秒のオーダーの応答速度を有する。赤外
線オプトメーターを備えた前記DPIアイトラッカーを
利用して目の焦点を連続して測定することができ、こう
して3次元アイトラッカーをもたらす。
【0006】オブジェクト指向プログラミングは、デー
タ及びこのデータに作用する各命令を含むオブジェクト
またはモジュールの実ワールド表現をモデル化するソフ
トウェア開発の既知の形式である。各オブジェクトは、
オブジェクト指向プログラムの基本ビルディングブロッ
クである。各オブジェクトはソフトウェア・エンティテ
ィである。これらは人のような何か物理的なものをモデ
ル化することができるか、またはこれらは当座預金口座
のような何か仮想的なものをモデル化することができ
る。通常、オブジェクトは、このオブジェクトの状態を
集合的に規定する1つ以上の属性(フィールド)、これ
らの属性を修正することができる方法(手続き)のセッ
トによって規定される行動、及び他のオブジェクトから
当該オブジェクトを識別するアイデンティティを有して
いる。カプセル封じはオブジェクトの大部分の詳細の隠
ぺいに言及する。これによって、オブジェクトを単一の
エンティティとして扱うことができる。しかしながら、
オブジェクトに関連するオペレーションのセットは明示
的なものであり、十分に規定されたインターフェースを
構成する。或るオブジェクトは別のオブジェクトに対し
て、メッセージングを介して1つ以上のオペレーション
を実行することを要求する。オブジェクトはしばしば抽
象的データ型式またはクラスの実例と称せられる。プロ
グラマーはクラスに共通の属性及び手続きを記述するこ
とによって各オブジェクトのクラスを定義することがで
きる。一旦クラスを定義することによって、クラス属性
及び手続きを各実例と関連させると共に、実例をそれら
のアイデンティティまたはクラスに対して許容された値
の範囲に関連する特定の値において異ならせることによ
り複数の実例を生成することができる。
【0007】オブジェクト指向プログラミングはまた、
クラス属性及び手続きが従属サブクラスによってクラス
から引き継ぐことができるサブクラスの生成、及び種々
のクラスの実例のグループの共通の属性及び手続きのみ
が定義特性として維持されるスーパークラスの生成を許
容する。
【0008】
【課題を解決するための手段】この発明は、如何なる複
雑なハンド・アイ対話(hand eye inter
action)も無しにユーザに対して各メッセージを
除去させ得る装置、システム、プロセス及びコンピュー
タ・プログラム・プロダクトを提供する。これは、メッ
セージを表示すべきとき、アイトラッカーによって指示
されるようにユーザの注意が既に向けられている画面上
の位置にメッセージを位置決めするようにしてアイトラ
ッカーをコンピュータと一体化することによって達成さ
れる。メッセージのテキストの始点はまた、ユーザの注
視が向けられている点にできる限り近接するように表示
される。システムはユーザの目を監視して、ユーザがメ
ッセージを読み取ったか否かを決定する。ユーザの注視
の過程が、彼の目がメッセージを横切ったことを示す場
合、メッセージを画面から除去することができ、メッセ
ージ・オブジェクトが画面上に置かれる前の状態で処理
は継続する。
【0009】代替的アプローチにおいて、いつユーザが
「オーケー(OK)」等の言葉を発したかを検知すべ
く、音声入力インターフェースと一緒にマイクロフォン
・ピックアップを使用することによって、メッセージ・
オブジェクトをクリアすることができる。
【0010】この発明は、コンピュータと、該コンピュ
ータに接続された少なくとも1つのディスプレイと、前
記コンピュータに接続されて、ユーザの目が注視してい
るディスプレイ上の位置を検出するアイトラッカーと、
前記位置が前記少なくとも1つのディスプレイ上にある
とき、前記位置にてユーザに対するメッセージを表示す
る制御装置とを含んだ、ディスプレイ上のメッセージ情
報を管理する装置に関する。前記制御装置はメッセージ
のテキストの開始点をできるだけ前記位置に近接させて
置く。ユーザが注視している前記位置が前記ディスプレ
イ上にないとき、前記制御装置はまた警報音を発して、
ユーザの注意を前記ディスプレイに促す。ユーザの目が
前記メッセージを走査したことをアイトラッカーが示す
とき、前記制御装置は前記メッセージをクリアする。複
数のディスプレイが使用されれば、前記制御装置は、ユ
ーザが注視している前記複数のディスプレイのうちの1
つのそのディスプレイの前記位置にユーザに対するメッ
セージを表示する。音声マイクロフォンを前記コンピュ
ータに接続して、前記コンピュータに対して音声表現を
もたらすようにすることができ、かつ前記コンピュータ
はメッセージをクリアすべく言語命令を認識するように
構成される。
【0011】この発明はまた、ユーザが注視している位
置を決定することによって、アイトラッカーを有するコ
ンピュータを使用してユーザに対するメッセージを表示
すると共に、前記位置がディスプレイ上にあれば、前記
位置に前記メッセージを表示する方法に向けられてい
る。前記メッセージのテキストの開始点は前記位置にで
きるだけ近接して表示される。
【0012】この発明はまた、ユーザが注視している位
置を決定することによって、アイトラッカー及び複数の
ディスプレイを有するコンピュータを使用してユーザに
対するメッセージを表示すると共に、前記位置がディス
プレイ上にあれば、前記ディスプレイのうちの1つの前
記位置に前記メッセージを表示する方法に向けられてい
る。
【0013】この発明はまた、ネットワーク、及び該ネ
ットワークに接続された複数のコンピュータを有するコ
ンピュータ・システムに向けられており、この際、前記
コンピュータのうちの少なくとも1つはアイトラッカー
を有すると共に、ユーザの目が注視しているディスプレ
イ上の位置を検出し、該位置がディスプレイ上にあれ
ば、該位置にメッセージを表示するように構成されてい
る。
【0014】この発明はまた、この発明の諸技術を実行
するコンピュータ・プログラム・プロダクトに向けられ
ている。
【0015】本発明の他の諸目的及び利点は、この発明
の好ましい実施例のみがこの発明を実行する意図された
最良の形態の単に例証として示され説明されている以下
の詳細な説明から当業者にとって容易に明瞭となろう。
承知されるように、この発明は他の異なる実施例でも可
能であり、その幾つかの詳細はこの発明から逸脱するこ
と無く種々の明瞭な点において変形が可能である。従っ
て、図面及び説明は本質上例示的なものと見做すべきで
あり、限定的には見做すべきではない。
【0016】
【発明の実施の形態】続く詳細な説明は、コンピュータ
または各コンピュータのネットワーク上で実行されるプ
ログラム手続きの見地から提示することができる。これ
らの手続き上の説明及び表示は、当業者によってその作
業の内容を最も効果的に他の当業者に伝えるのに使用さ
れる手段である。
【0017】手続きはここでは、また一般に、所望の結
果につながる各段階の自己矛盾のないシーケンスである
と考えられる。これらの各段階は、物理量の物理的処理
を要求する各段階である。通常、必ずしもそうではない
が、これらの量は、記憶されたり、転送されたり、組み
合わせられたり、さもなくば処理されたりすることがで
きる電気的または磁気的信号の形態をとる。ビット、
値、要素、記号、文字、用語、数字等であるこれらの信
号に言及することは、時々、主に共通使用の理由から都
合の良いことが判かる。しかしながら、これら及び類似
の用語の全ては適切な物理量に関連すべきものであり、
これらの量に付された単に便利な標号にすぎないことに
留意すべきである。
【0018】更に、実行される処理はしばしば、用語的
には、一般に人間のオペレータによって実行される知的
オペレーションに関連する付加または比較等と称せられ
る。人間のオペレータに関するこの種の能力は、本発明
の一部分を形成するここで説明したオペレーションのう
ちの任意のものにおいて不要であり、または多くの場
合、望ましいものではない。即ち、これらのオペレーシ
ョンは機械的オペレーションである。本発明のオペレー
ションを実行する有益な機械は、汎用デジタルコンピュ
ータまたは同様の装置を含む。
【0019】本発明はまた、これらのオペレーションを
実行する装置に関する。この装置は要求される目的に対
して特別に構成し得るか、またはコンピュータに記憶さ
れたコンピュータ・プログラムによって選択的に起動さ
れるか再構成されるような汎用コンピュータを備え得
る。ここで提示される手続きは、特定のコンピュータま
たは他の装置に本質的に関係するものではない。ここに
おける教示に従って書かれたプログラムで種々の汎用機
械を使用することができるか、または要求される方法の
各段階を実行すべく更に特殊化された装置を構成するこ
とがより好都合であると判明し得る。これらの種々の機
械に対して要求される構造は、以下の説明から明瞭とな
ろう。
【0020】図1Aは本発明を実施するのに好適な型式
のコンピュータを示している。図1Aにて外部から見れ
ば、コンピュータ・システムは、ディスク・ドライブ1
10A及び110Bを有する中央処理装置100を備え
ている。図中のディスク・ドライブの表示110A及び
110Bは、コンピュータ・システムによって収容し得
る多数のディスク・ドライブを単に象徴的に表わしたに
過ぎない。一般に、これらのディスク・ドライブは、フ
ロッピー・ディスク・ドライブ110A、ハード・ディ
スク・ドライブ(外面的には示されていない)及びスロ
ット110Bによって示されるCD ROMドライブを
備えている。ドライブの数及び型式は、一般に、異なる
コンピュータ構成と共に変化する。コンピュータは、情
報が表示されるディスプレイ120を有している。キー
ボード130及びマウス140はまた、一般に、インタ
ーフェース145の向こう側の入力装置として有効であ
る。ディスプレイ・ケーシング上に取り付けられている
ように示されている1つ以上のカメラ及び照明部分19
0は、ユーザの目を観察すると共に、ユーザの目が注視
している位置を決定するのに使用される。図1Aに図示
されているコンピュータは、サン・マイクロシステムズ
社(Sun Micro−systems,Inc.)
のスパークワークステーション(SPARC work
station)であることが好ましい。
【0021】図1Bは、図1Aのコンピュータの内部ハ
ードウェア100のブロック図を示している。バス15
0は、コンピュータの他の部品を相互接続する主要情報
ハイウェイとして機能する。CPU155はシステムの
中央処理装置であって、プログラムを実行するのに要求
される計算及び論理オペレーションを行う。リードオン
リーメモリ(ROM:read only memor
y)160及びランダムアクセスメモリ(RAM:ra
ndom access memory)165は、コ
ンピュータの主要メモリを構成する。ディスク制御装置
170は、1つ以上のディスク・ドライブをシステムバ
ス150にインターフェースさせる。これらのディスク
・ドライブは、フロッピー・ディスク・ドライブ17
3、内部または外部ハードディスク172、若しくはC
D ROMまたはディジタル・ビデオ・ディスク(DV
D)ドライブ171であって良い。ディスプレイ・イン
ターフェース175は高解像度ディスプレイ120とイ
ンターフェースすると共に、バスからの情報をディスプ
レイ上に表示できるようにする。アイトラッカー(ey
e tracker)190は、アイトラッカー・イン
ターフェース189上のバスに接続されている。アイト
ラッカー190は、ユーザの目が注視している位置を示
す。ここで説明する制御機能の多くは、ユーザがどこを
注視しているかに基づいて起動される。外部装置との通
信は通信ポート185を通して生じ得る。
【0022】図1Cは、図1Bのドライブ173または
図1Aのドライブ110Aにおいて使用することができ
る例示的メモリ媒体を示している。一般に、フロッピー
・ディスク、CD ROM、またはディジタル・ビデオ
・ディスク等のメモリ媒体は、本発明に従ってコンピュ
ータを制御して、コンピュータがその試験及び開発機能
を実行できるようにしたプログラム情報を含んでいる。
【0023】図2はマルチディスプレイ・コンピュータ
・コンソールの正面図である。図2のこのコンソールは
N個のディスプレイ・モニタ210−1ないし210−
nを示している。これらのディスプレイ・モニタは正規
のアレイを成してコンソール・ハウジング内にセットさ
れている。コンソールの頂部には、モニタ・コンソール
の全表面に対して完全な有効範囲をもたらすように位置
決めされたアイトラッカー・センサ290が示されてい
る。単一のアイトラッカー装置で十分でなければ、複数
のアイトラッカー装置が利用される。これらのアイトラ
ッカー装置は、相当高い精度でユーザが注視する位置を
決定するためにゾーンに分割することができる。図2に
示すようなマルチディスプレイ・コンソールは通常むし
ろ複雑なシステムにおいて使用されよう。
【0024】図3はユーザが注視する位置におけるメッ
セージ・オブジェクトをオープンにした状態を示してい
る。ユーザの注視位置は、メッセージ・オブジェクト3
20を呼び出したとき、モニタ300上の特定点に位置
する。図3に示すように、メッセージ・オブジェクト・
ウインドーにおけるテキストの開始点は、この図で十字
によって示されるユーザの注視位置にできるだけ近接し
て始まり、この結果、メッセージ・ウインドーをオープ
ンにすると直ちに読取りを開始するようにユーザの目が
位置決めされる。
【0025】図4はメッセージ・オブジェクトをオープ
ンしクリアするのに使用されるプロセスのフローチャー
トである。メッセージ条件が検出されると(400)、
メッセージ・ハンドラーは表示用のメッセージ・テキス
トを取り出す(405)。アイトラッカーは、ユーザが
ディスプレイから目をそらしているか否かを判定する。
ユーザが目をそらしていれば、音声警報が鳴って(41
5)、ユーザの注意をディスプレイに促す。ユーザがデ
ィスプレイのうちの1つを注視していれば(410)、
そのディスプレイ上のユーザの注視位置と同様に、ユー
ザの注意を引いているディスプレイのアイデンティティ
を決定する(420)。同定されたディスプレイ上のユ
ーザの注視に対して決定された位置においてメッセージ
・ウインドーがオープンされる(425)。メッセージ
・ウインドー中にメッセージが表示され(430)、シ
ステムは、ユーザの目がメッセージを横切ったか否か決
定すべく監視を開始する。ユーザの目がメッセージを横
切らなければ(435−n)、プロセスはブロック43
0以前にループバックする。ユーザがメッセージのテキ
ストを見たならば、テキストがクリアされ、メッセージ
・オブジェクトに対するウインドーが閉じられ(44
0)、プロセスが終了する。
【0026】メッセージのテキストの頂部がユーザの注
視位置にできるだけ近接して位置決めされて、ウインド
ーがオープンされたとき、テキストのワードを開始する
や否やユーザの目ができる限り近接して静止するように
する。
【0027】メッセージをクリアするためのメカニズム
としてユーザの目がメッセージを横切ったか否かを調べ
るべく監視するよりも、マイクロフォン195、音声入
力インターフェース194及び音声認識ソフトウェアを
利用して、ユーザが「オーケー」等の言葉をしゃべった
ことを認識し、ユーザ命令についてのメッセージをクリ
アすることができる。
【0028】オペレーションを要約すると、メッセージ
を表示すべきとき、ユーザの注視位置が決定され、メッ
セージ・ウインドーがユーザの注視位置でオープンされ
て、メッセージ・オブジェクトによって表示されたテキ
ストがユーザが注視している位置に位置決めされること
となる。メッセージ・ウインドーを横切るユーザの目に
よって示されるように、ユーザが一旦メッセージを読み
取ると、メッセージをクリアすることができると共に、
通常の処理を再開することができる。代替例として、音
声命令がエラーメッセージをクリアすることができる。
【0029】このようにして、従来技術のメッセージ・
ハンドリングに関連した諸問題が解決され、エラーメッ
セージに関する便利で自然な処理が本発明に従って生じ
る。
【0030】この開示において、本発明の好ましい実施
例のみを示して説明したが、前述のように、本発明はこ
の発明の概念の範囲内で種々の他の組合せ及び環境にお
いて使用することができると共に、種々の変形または修
正が可能であることは言うまでもない。
【図面の簡単な説明】
【図1】Aは本発明を実施するのに好適な型式の、アイ
トラッカーを備えたコンピュータの正面図、BはAのコ
ンピュータのブロック図、CはAのコンピュータで使用
可能なプログラムを含む例示的なメモリ媒体の略図であ
る。
【図2】マルチディスプレイ・コンピュータ・コンソー
ルの正面図である。
【図3】ユーザの注視位置でのメッセージ・オブジェク
トのオープニングの状態を示す略図である。
【図4】メッセージ・オブジェクトをオープンし、クロ
ーズするのに使用するプロセスのフローチャートであ
る。
【符号の説明】
100,155 CPU 110A,110B ディスク・ドライブ 120 ディスプレイ 130 キーボード 140 マウス 145 インターフェース 160 ROM 165 RAM 170 ディスク制御装置 171 CD ROM 172 ハードドライブ 173 フロッピー・ディスク・ドライブ 175 ディスプレイ・インターフェース 185 通信ポート 189 アイトラッカー・インターフェース 190 アイトラッカー

Claims (16)

    【特許請求の範囲】
  1. 【請求項1】 ディスプレイ上のメッセージ情報を管理
    する装置において、 a.コンピュータと、 b.前記コンピュータに接続された少なくとも1つのデ
    ィスプレイと、 c.前記コンピュータに接続されて、ユーザが注視して
    いる前記ディスプレイ上の位置を検知するアイトラッカ
    ー(eye tracker)と、 d.前記位置が前記少なくとも1つのディスプレイ上に
    あるとき、前記位置にユーザに対するメッセージを表示
    する制御装置と、を具備したことを特徴とする前記装
    置。
  2. 【請求項2】 請求項1記載の装置において、前記制御
    装置が前記メッセージのテキストの開始点を前記位置に
    できるだけ近接して位置付けることを特徴とする前記装
    置。
  3. 【請求項3】 請求項1記載の装置において、前記位置
    が前記ディスプレイ上にないとき、前記制御装置は警報
    を発してユーザに表示を注視するように促すことを特徴
    とする前記装置。
  4. 【請求項4】 請求項1記載の装置において、前記アイ
    トラッカーがユーザの目が前記メッセージを走査したこ
    とを示すとき、前記制御装置は前記メッセージをクリア
    することを特徴とする前記装置。
  5. 【請求項5】 請求項1記載の装置において、複数のデ
    ィスプレイを備え、前記制御装置は、ユーザが注視して
    いる前記複数のディスプレイのうちの1つにあると共
    に、前記複数のディスプレイのうちの前記1つの上の前
    記位置に前記ユーザに対するメッセージを表示すること
    を特徴とする前記装置。
  6. 【請求項6】 請求項1記載の装置において、前記コン
    ピュータに接続されて、前記コンピュータに対して音声
    表現をもたらす音声マイクロフォンと、 メッセージをクリアすべく言語指令を認識するように構
    成された前記コンピュータと、を更に具備したことを特
    徴とする前記装置。
  7. 【請求項7】 アイトラッカーを有するコンピュータを
    使用してユーザに対するメッセージを表示する方法にお
    いて、 a.ユーザが注視している位置を決定する段階を実行す
    る要素をもたらす段階と、 b.前記位置がディスプレイ上にある場合、前記位置に
    前記メッセージを表示する段階を実行する要素をもたら
    す段階と、を具備したことを特徴とする前記方法。
  8. 【請求項8】 請求項7記載の方法において、前記位置
    がディスプレイ上にない場合、警報を発する段階を実行
    する要素をもたらす段階を更に具備したことを特徴とす
    る前記方法。
  9. 【請求項9】 請求項7記載の方法において、前記メッ
    セージのテキストの開始点が前記位置に表示されること
    を特徴とする前記方法。
  10. 【請求項10】 請求項7記載の方法において、前記ユ
    ーザの目が前記メッセージを横切ったならば、前記メッ
    セージを除去する段階を実行する要素をもたらす段階を
    更に具備したことを特徴とする前記方法。
  11. 【請求項11】 アイトラッカー及び複数のディスプレ
    イを有するコンピュータを使用してユーザに対するメッ
    セージを表示する方法において、 a.ユーザが注視している位置を決定する段階を実行す
    る要素をもたらす段階と、 b.前記位置がディスプレイ上にある場合、前記ディス
    プレイのうちの1つの前記位置に前記メッセージを表示
    する段階を実行する要素をもたらす段階と、を具備した
    ことを特徴とする前記方法。
  12. 【請求項12】 a.ネットワークと、 b.前記ネットワークに接続された複数のコンピュータ
    であって、該コンピュータのうちの少なくとも1つがア
    イトラッカーを有すると共に、ユーザが注視しているデ
    ィスプレイ上の位置を検知し、かつ該位置がディスプレ
    イ上にある場合、前記位置にメッセージを表示するよう
    に構成されてなる前記複数のコンピュータと、を具備し
    たことを特徴とするコンピュータ・システム。
  13. 【請求項13】 アイトラッカーを有するコンピュータ
    のディスプレイ上にユーザメッセージを表示するコンピ
    ュータ・プログラム・プロダクトにおいて、 a.メモリ媒体と、 b.前記メモリ媒体に記憶されたコンピュータ・プログ
    ラムであって、ユーザが注視している位置を決定すると
    共に、前記位置がディスプレイ上にあれば、前記位置に
    前記メッセージを表示するための各命令を含んでなる前
    記コンピュータ・プログラムと、を具備したことを特徴
    とする前記コンピュータ・プログラム・プロダクト。
  14. 【請求項14】 請求項13記載のコンピュータ・プロ
    グラム・プロダクトにおいて、前記コンピュータ・プロ
    グラムは、前記位置がディスプレイ上になければ、警報
    を発するための各命令を更に含んでいることを特徴とす
    る前記コンピュータ・プログラム・プロダクト。
  15. 【請求項15】 請求項13記載のコンピュータ・プロ
    グラム・プロダクトにおいて、前記コンピュータ・プロ
    グラムは、前記ユーザの目が前記メッセージを横切った
    ならば、前記メッセージを除去するための各命令を更に
    含んでいることを特徴とする前記コンピュータ・プログ
    ラム・プロダクト。
  16. 【請求項16】 アイトラッカーを有するコンピュータ
    の複数のディスプレイのうちの1つにユーザメッセージ
    を表示するコンピュータ・プログラム・プロダクトにお
    いて、 a.メモリ媒体と、 b.前記メモリ媒体に記憶されたコンピュータ・プログ
    ラムであって、ユーザが注視している位置を決定すると
    共に、該位置がディスプレイ上にあれば、前記ディスプ
    レイのうちの1つの前記位置に前記メッセージを表示す
    るための各命令を含んでなる前記コンピュータ・プログ
    ラムと、を具備したことを特徴とする前記コンピュータ
    ・プログラム・プロダクト。
JP9169044A 1996-06-26 1997-06-25 アイトラック式警報メッセージ Pending JPH1069363A (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US670930 1996-06-26
US08/670,930 US6078310A (en) 1996-06-26 1996-06-26 Eyetracked alert messages

Publications (1)

Publication Number Publication Date
JPH1069363A true JPH1069363A (ja) 1998-03-10

Family

ID=24692471

Family Applications (1)

Application Number Title Priority Date Filing Date
JP9169044A Pending JPH1069363A (ja) 1996-06-26 1997-06-25 アイトラック式警報メッセージ

Country Status (4)

Country Link
US (1) US6078310A (ja)
EP (1) EP0816979B1 (ja)
JP (1) JPH1069363A (ja)
DE (1) DE69725655D1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007058687A (ja) * 2005-08-25 2007-03-08 Sony Corp マルチディスプレイ装置及び表示装置

Families Citing this family (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
BR9906453A (pt) * 1998-05-19 2000-09-19 Sony Computer Entertainment Inc Dispositivo e método do processamento de imagem, e meio de distribuição.
US6795806B1 (en) * 2000-09-20 2004-09-21 International Business Machines Corporation Method for enhancing dictation and command discrimination
US7305441B2 (en) * 2001-07-20 2007-12-04 International Business Machines Corporation Time-sensitive messages and events
GB2388209C (en) * 2001-12-20 2005-08-23 Canon Kk Control apparatus
US7762665B2 (en) 2003-03-21 2010-07-27 Queen's University At Kingston Method and apparatus for communication between humans and devices
US8292433B2 (en) * 2003-03-21 2012-10-23 Queen's University At Kingston Method and apparatus for communication between humans and devices
EP2266089A4 (en) 2008-03-10 2012-05-30 Tradeweb Markets Llc SYSTEM AND METHOD FOR EXCHANGES OF SPECIFIED SECURITIES
EP2656155B1 (en) 2010-12-22 2015-07-29 ABB Research Ltd. Method and system for monitoring an industrial system involving an eye tracking system
WO2013175250A1 (en) * 2012-05-22 2013-11-28 Sony Mobile Communications Ab Electronic device with dynamic positioning of user interface element
US9332411B2 (en) 2013-02-20 2016-05-03 Microsoft Technology Licensing, Llc User interruptibility aware notifications
US10372202B1 (en) 2014-01-20 2019-08-06 Ca, Inc. Positioning a cursor on a display monitor based on a user's eye-gaze position
US9310886B2 (en) * 2014-02-13 2016-04-12 Lenovo (Singapore) Pte. Ltd. Transient message display control
US9766702B2 (en) * 2014-06-19 2017-09-19 Apple Inc. User detection by a computing device
US10599214B2 (en) * 2014-10-21 2020-03-24 Tobii Ab Systems and methods for gaze input based dismissal of information on a display
CN104951070A (zh) * 2015-06-02 2015-09-30 无锡天脉聚源传媒科技有限公司 一种基于眼睛操控设备的方法及装置
DE102016208338A1 (de) * 2016-05-13 2017-11-16 Siemens Healthcare Gmbh Verfahren zur Ausgabe einer warnmeldungsbezogenen Information, Datenträger, Arbeitsplatz sowie medizinische Bildgebungsmodalität
US10747312B2 (en) 2018-03-14 2020-08-18 Apple Inc. Image enhancement devices with gaze tracking
JP7389270B2 (ja) * 2020-03-27 2023-11-29 アップル インコーポレイテッド 視線ベースのナビゲーションのためのデバイス、方法、及びグラフィカルユーザインタフェース
CN116209974A (zh) 2020-09-25 2023-06-02 苹果公司 用于导航用户界面的方法
JP7347409B2 (ja) * 2020-12-28 2023-09-20 横河電機株式会社 装置、方法及びプログラム

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4109145A (en) * 1974-05-20 1978-08-22 Honeywell Inc. Apparatus being controlled by movement of the eye
JP2845926B2 (ja) * 1989-03-20 1999-01-13 株式会社日立製作所 マンマシンシステム
US5367315A (en) * 1990-11-15 1994-11-22 Eyetech Corporation Method and apparatus for controlling cursor movement
US5223828A (en) * 1991-08-19 1993-06-29 International Business Machines Corporation Method and system for enabling a blind computer user to handle message boxes in a graphical user interface
US5360971A (en) * 1992-03-31 1994-11-01 The Research Foundation State University Of New York Apparatus and method for eye tracking interface
JPH0743804A (ja) * 1993-07-30 1995-02-14 Canon Inc 機能選択装置
JP3413251B2 (ja) * 1993-08-05 2003-06-03 ダイセル化学工業株式会社 イソホロンの回収方法
JPH07257228A (ja) * 1994-03-18 1995-10-09 Nissan Motor Co Ltd 車両用表示装置
JPH07294844A (ja) * 1994-04-22 1995-11-10 Canon Inc 表示装置
US5649061A (en) * 1995-05-11 1997-07-15 The United States Of America As Represented By The Secretary Of The Army Device and method for estimating a mental decision
US5731805A (en) * 1996-06-25 1998-03-24 Sun Microsystems, Inc. Method and apparatus for eyetrack-driven text enlargement
US5898423A (en) * 1996-06-25 1999-04-27 Sun Microsystems, Inc. Method and apparatus for eyetrack-driven captioning

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007058687A (ja) * 2005-08-25 2007-03-08 Sony Corp マルチディスプレイ装置及び表示装置

Also Published As

Publication number Publication date
US6078310A (en) 2000-06-20
EP0816979A1 (en) 1998-01-07
DE69725655D1 (de) 2003-11-27
EP0816979B1 (en) 2003-10-22

Similar Documents

Publication Publication Date Title
JPH1069363A (ja) アイトラック式警報メッセージ
US11609631B2 (en) Natural human-computer interaction for virtual personal assistant systems
US20230333377A1 (en) Display System
JP7277569B2 (ja) 検出されたジェスチャおよび凝視に基づく自動化アシスタントの機能の呼び出し
US9851790B2 (en) Gaze based notification reponse
US8261190B2 (en) Displaying help sensitive areas of a computer application
JP3886074B2 (ja) マルチモーダルインタフェース装置
JP3265131B2 (ja) イベント生成分配方式
JP2005509973A (ja) ジェスチャに基づくユーザインタフェース用の方法及び装置
EP1190301A1 (en) Method of interacting with a consumer electronics system
US20190073029A1 (en) System and method for receiving user commands via contactless user interface
EP2266014A2 (en) Apparatus to create, save and format text documents using gaze control and method associated based on the optimized positioning of cursor
CN112083795A (zh) 对象控制方法及装置、存储介质和电子设备
CN111370004A (zh) 人机交互方法、语音处理方法及设备
JP2004192653A (ja) マルチモーダルインタフェース装置およびマルチモーダルインタフェース方法
CN110428838A (zh) 一种语音信息识别方法、装置及设备
US20210325960A1 (en) Gaze-based control
CN109254821A (zh) 窗口缩放方法、装置、终端及计算机可读存储介质
CN111221418B (zh) 进入vr头盔隐藏菜单方法、装置及vr头盔
WO2005041010A2 (en) Interactive system and method for controlling an interactive system
JP2001125695A (ja) ウィンドウ管理装置
CN113129333B (zh) 多目标实时跟踪方法及其系统和电子设备
CN108499102B (zh) 信息界面展示方法及装置、存储介质、电子设备
JPWO2022013952A5 (ja) 表示制御装置、表示制御方法、及びプログラム
CN113126865B (zh) 视频学习过程中的笔记生成方法及装置、电子设备和介质