JPH0720988A - Pointing device - Google Patents

Pointing device

Info

Publication number
JPH0720988A
JPH0720988A JP5160571A JP16057193A JPH0720988A JP H0720988 A JPH0720988 A JP H0720988A JP 5160571 A JP5160571 A JP 5160571A JP 16057193 A JP16057193 A JP 16057193A JP H0720988 A JPH0720988 A JP H0720988A
Authority
JP
Japan
Prior art keywords
menu item
individual difference
information
display
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP5160571A
Other languages
Japanese (ja)
Other versions
JP2570966B2 (en
Inventor
Rintarou Muraoka
倫太郎 村岡
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NEC Corp
Original Assignee
NEC Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NEC Corp filed Critical NEC Corp
Priority to JP5160571A priority Critical patent/JP2570966B2/en
Publication of JPH0720988A publication Critical patent/JPH0720988A/en
Application granted granted Critical
Publication of JP2570966B2 publication Critical patent/JP2570966B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Landscapes

  • Position Input By Displaying (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

PURPOSE:To enable a user to perform a pointing on a display without using any hand. CONSTITUTION:A coordinate detecting means 1 finds which coordinates on the display the fine of sight of the user points at. The coordinate detecting means 1 consists of a means 11 which measures the coordinates on the display on the basis of the position and motion of the eye of the user and a means 12 which corrects the coordinates on the basis of information 200 on an individual difference. The information 200 on the individual difference is measured by using an individual difference measuring means 6 and stored in an individual difference registering means 7. A cursor is displayed on the display by a cursor display means 2 according to the coordinates 100 determined by the coordinate detecting means 1. At the same time, a menu item detecting means 3 generates selected menu item information 300 on a menu item pointed by the cursor. Once the user makes a request to execute the menu item, a menu item execution request detecting means 4 starts a menu item executing means 5.

Description

【発明の詳細な説明】Detailed Description of the Invention

【0001】[0001]

【産業上の利用分野】本発明は、視線入力によるポイン
トデバイス装置に関し、特に計算機システムにおけるユ
ーザインタフェイスを円滑に行うための技術に関する。
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a point device apparatus by line-of-sight input, and more particularly to a technique for smoothly performing a user interface in a computer system.

【0002】[0002]

【従来の技術】従来のポイントデバイス装置では、アイ
コンなどのグラフィカルユーザインタフェイスを用いて
人間と計算機システムが対話を行う場合、マウス、ライ
トペン、ジョイスティックなどを使用するのが一般的で
ある。
2. Description of the Related Art In a conventional point device, a mouse, a light pen, a joystick or the like is generally used when a human and a computer system interact with each other using a graphical user interface such as an icon.

【0003】この内、マウス装置を例にして従来のポイ
ントデバイス装置について図面を参照して説明する。図
3は従来例のポイントデバイス装置であるマウス装置の
システム構成図である。
Of these, a conventional point device unit will be described with reference to the drawings, taking a mouse unit as an example. FIG. 3 is a system configuration diagram of a mouse device which is a conventional point device device.

【0004】この従来例のマウス装置のシステムは、座
標計測手段11’と補正手段12’とから成る座標検出
手段1’と、カーソル表示手段2と、メニュ項目検出手
段3と、メニュ項目実行要求検出手段4と、メニュ項目
実行手段5と、座標100と、選択メニュ項目情報30
0とから構成されている。ここで、計算機システムの利
用者たる人間が、マウス装置を移動させることで、座標
検出手段1’の座標変位検出手段11’により2次元座
標の変位を検出し、その変位を入力として補正手段1
2’により新たな座標100を算出し、ディスプレイ上
のカーソルを移動させている。座標100が決定する
と、計算機システムはカーソル表示手段2を用いて、デ
ィスプレイ上の該当する座標へカーソルを表示し、利用
者に現在ポイントしている座標を知らせる。同時にメニ
ュ項目検出手段3は、座標100を入力としてカーソル
と重なっているメニュ項目を検出し、検出されたメニュ
項目の情報を選択メニュ項目300に格納する。そし
て、計算機システムは、メニュ項目実行要求検出手段4
により、利用者からの実行要求を受け取ると、メニュ項
目実行手段5を起動し、利用者の要求が受け付けられた
ことを通知する。メニュ項目実行手段5は、選択メニュ
項目情報300を参照し、その選択されたメニュ項目に
該当する処理をシステムで実行する。
In this conventional mouse device system, coordinate detecting means 1'comprising coordinate measuring means 11 'and correcting means 12', cursor display means 2, menu item detecting means 3, and menu item execution request. Detecting means 4, menu item executing means 5, coordinates 100, and selected menu item information 30.
It is composed of 0 and 0. Here, a person who is a user of the computer system moves the mouse device to detect the displacement of the two-dimensional coordinates by the coordinate displacement detection means 11 'of the coordinate detection means 1', and the displacement is input to the correction means 1
A new coordinate 100 is calculated by 2 ', and the cursor on the display is moved. When the coordinate 100 is determined, the computer system uses the cursor display means 2 to display the cursor at the corresponding coordinate on the display to notify the user of the currently pointed coordinate. At the same time, the menu item detecting means 3 receives the coordinate 100 as an input, detects a menu item overlapping the cursor, and stores information on the detected menu item in the selected menu item 300. Then, the computer system uses the menu item execution request detecting means 4
Thus, when the execution request from the user is received, the menu item executing means 5 is activated to notify that the request from the user has been accepted. The menu item execution means 5 refers to the selected menu item information 300 and executes the processing corresponding to the selected menu item in the system.

【0005】[0005]

【発明が解決しようとする課題】システムの利用者がシ
ステムと対話を行うときは、キーボードを使用するのが
一般的であるが、最近ではディスプレイ上に表示したメ
ニュ項目(選択肢)をポイントデバイス装置を用いて選
択する機会も増えている。
When a user of a system interacts with the system, a keyboard is generally used, but recently, a menu item (option) displayed on a display is pointed to by a device device. Opportunities to choose using are also increasing.

【0006】しかし、上述した従来のポイントデバイス
装置(マウスなどの機器)でメニュ項目をポイントする
には、利用者がキーボードから手を離さなくてはなら
ず、またカーソルの移動に時間がかかるなどの欠点があ
った。
However, in order to point a menu item with the above-mentioned conventional pointing device (device such as mouse), the user has to take his / her hand off the keyboard, and it takes a long time to move the cursor. There was a drawback.

【0007】[0007]

【課題を解決するための手段】本発明の目的は、上述し
た利用者のロスタイムを軽減し、作業効率の向上を図っ
た視線入力によるポイントデバイス装置を提供すること
にある。
SUMMARY OF THE INVENTION It is an object of the present invention to provide a point device apparatus by line-of-sight input that reduces the above-mentioned user's lost time and improves work efficiency.

【0008】そのため、本発明のポイントデバイス装置
は、計算機システムの利用者である人間の眼の位置や動
きなどによってディスプレイのどこをみているのかその
座標を計測、算出する手段と、算出された座標を利用者
による個人差の情報で補正する手段と、利用者の個人差
の情報を計測する手段と、個人差の情報を格納する手段
と、個人差の情報が格納されるメモリと、補正されて最
終的に決定されたディスプレイ上の座標にカーソルを表
示する手段と、表示されたカーソルと重なっているディ
スプレイ上のメニュ項目を検出する手段と、検出したメ
ニュ項目の実行要求が行われたことを検出する手段と、
検出された実行要求を計算機システムに伝える手段とを
有することを特徴としている。
Therefore, the point device apparatus of the present invention is a means for measuring and calculating the coordinates of the position of the human eye, who is the user of the computer system, on the display according to the position and movement of the eyes, and the calculated coordinates. Means for correcting the individual difference information by the user, a means for measuring the information of the individual difference of the user, a means for storing the information of the individual difference, a memory for storing the information of the individual difference, and Means for displaying the cursor at the coordinates finally determined on the display, means for detecting the menu item on the display that overlaps with the displayed cursor, and execution request for the detected menu item. Means for detecting
And a means for transmitting the detected execution request to the computer system.

【0009】[0009]

【実施例】次に、本発明の実施例について図面を参照し
て説明する。
Embodiments of the present invention will now be described with reference to the drawings.

【0010】図1は本発明によるポイントデバイス装置
の一実施例を使用したシステムの構成図である。
FIG. 1 is a block diagram of a system using an embodiment of a point device apparatus according to the present invention.

【0011】本発明の実施例のシステムは、座標計測手
段11と補正手段12とから成る座標検出手段1と、カ
ーソル表示手段2と、メニュ項目検出手段3と、メニュ
項目実行要求検出手段4と、メニュ項目実行手段5と、
個人差計測手段6と、個人差登録手段7と、座標100
と、個人差の情報200と、選択メニュ項目情報300
とから構成されている。
The system of the embodiment of the present invention comprises a coordinate detecting means 1 comprising a coordinate measuring means 11 and a correcting means 12, a cursor displaying means 2, a menu item detecting means 3, and a menu item execution request detecting means 4. , Menu item execution means 5,
Individual difference measuring means 6, individual difference registration means 7, and coordinates 100
And information about individual differences 200 and information about selected menu items 300
It consists of and.

【0012】座標100は座標検出手段1によって得ら
れた座標データを表し、個人差の情報200は個人差登
録手段7によって格納され、座標検出手段1にて補正情
報として用いられる個人差の情報を表し、選択メニュ項
目情報300はカーソル表示手段2のカーソルによって
ポイントされているメニュ項目の情報を表す。
The coordinate 100 represents the coordinate data obtained by the coordinate detecting means 1, the individual difference information 200 is stored by the individual difference registration means 7, and the individual difference information used by the coordinate detecting means 1 as correction information is obtained. The selected menu item information 300 represents the information of the menu item pointed by the cursor of the cursor display means 2.

【0013】次に、本実施例のポイントデバイス装置の
動作について図面を参照して説明する。
Next, the operation of the point device according to this embodiment will be described with reference to the drawings.

【0014】図2は本実施例のポイントデバイス装置の
動作を説明するためのフローチャートである。
FIG. 2 is a flow chart for explaining the operation of the point device apparatus of this embodiment.

【0015】例として、ディスプレイ上にいくつかのメ
ニュ項目(選択肢)が表示されていて、この中の1つを
選択、実行する作業を考える。
As an example, consider a case where several menu items (choices) are displayed on the display, and one of the menu items is selected and executed.

【0016】従来の技術の項で説明したように、従来例
であるマウス装置の場合の座標100を得るための座標
検出手段1’は、座標変位計測手段11’によってX座
標,Y座標の変位を検出し、補正手段12’により座標
100を補正し、新たにポイントすべき座標100を得
ている。
As described in the section of the prior art, the coordinate detecting means 1'for obtaining the coordinate 100 in the case of the mouse device of the conventional example is the displacement of the X coordinate and the Y coordinate by the coordinate displacement measuring means 11 '. Is detected and the coordinate 100 is corrected by the correction means 12 'to obtain the coordinate 100 to be newly pointed.

【0017】これに対して、本発明によるポイントデバ
イス装置の場合を図1、図2を用いて説明する。
On the other hand, the case of the point device according to the present invention will be described with reference to FIGS.

【0018】本実施例のポイントデバイス装置では、ま
ず座標計測手段11によって利用者の顔面の角度や眼球
の位置、その動きなどにより利用者の見つめるディスプ
レイ上の座標を計測する。ここで行われる計測結果は、
利用者の肉体的な特徴などに大きく依存していると思わ
れ、かなりの個人差を含んでいると考えられる。
In the point device apparatus of this embodiment, first, the coordinate measuring means 11 measures the coordinates of the user's face, the position of the eyeball, the movement of the user, and the like on the display which the user looks at. The measurement results performed here are
It seems that it depends greatly on the physical characteristics of the user, etc., and is considered to include considerable individual differences.

【0019】より正確な座標を得るために、個人差の情
報200を基に補正手段12が座標計測手段11で得た
座標の修正を行う(ステップ1)。
In order to obtain more accurate coordinates, the correction means 12 corrects the coordinates obtained by the coordinate measurement means 11 based on the individual difference information 200 (step 1).

【0020】個人差の情報200は、予め利用者が個人
差計測手段6によって測定し、個人差登録手段7によっ
て個人差の情報200に格納しておくこととする。ま
た、ここで言う個人差の情報200とは、いかなる利用
者からも採取可能なデータであり、かつ補正手段12に
よって正確な座標100を得るのに十分な要素を含んで
いるものとする(ステップ2)。
The individual difference information 200 is previously measured by the user by the individual difference measuring means 6 and stored in the individual difference information 200 by the individual difference registration means 7. Further, the individual difference information 200 referred to here is data that can be collected from any user, and includes sufficient elements for obtaining the correct coordinate 100 by the correction means 12 (step. 2).

【0021】計算機システムは、座標検出手段1によっ
て利用者の見つめているディスプレイ上の正確な座標1
00を得る。座標100が決定すると、計算機システム
はカーソル表示手段2を用いて、ディスプレイ上の該当
する座標へカーソルを表示し、利用者に現在ポイントし
ている座標を知らせる(ステップ3)。
The computer system uses the coordinate detecting means 1 to obtain the exact coordinates 1 on the display which the user is gazing at.
Get 00. When the coordinate 100 is determined, the computer system uses the cursor display means 2 to display the cursor at the corresponding coordinate on the display and informs the user of the currently pointed coordinate (step 3).

【0022】また、同時にメニュ項目検出手段3は、座
標100を入力としてカーソルと重なっているメニュ項
目を検出し、検出されたメニュ項目の情報を選択メニュ
項目300に格納する(ステップ4)。
At the same time, the menu item detecting means 3 receives the coordinate 100 as an input, detects a menu item overlapping the cursor, and stores information on the detected menu item in the selected menu item 300 (step 4).

【0023】利用者は、視線を移動させ目的のメニュ項
目をポイントし、その実行要求を計算機システムに対し
行う(ステップ5)。
The user moves his line of sight, points to the desired menu item, and makes an execution request to the computer system (step 5).

【0024】計算機システムは、メニュ項目実行要求検
出手段4により、利用者からの実行要求を受け取ると、
メニュ項目実行手段5を起動し、利用者の要求が受け付
けられたことを通知する。メニュ項目実行手段5は、選
択メニュ項目情報300を参照し、その選択されたメニ
ュ項目に該当する処理をシステムで実行する(ステップ
6)。
In the computer system, when the menu item execution request detecting means 4 receives the execution request from the user,
The menu item executing means 5 is activated to notify that the user's request has been accepted. The menu item execution means 5 refers to the selected menu item information 300 and executes the process corresponding to the selected menu item in the system (step 6).

【0025】尚、個人差の情報200は、必ずしもポイ
ントデバイス装置の内部に設ける必要はなく、第二の発
明のように、外部記憶装置(例えば、ICカード)を使
用することも可能である。
The individual difference information 200 does not necessarily have to be provided inside the point device, and an external storage device (for example, an IC card) can be used as in the second invention.

【0026】また、第三の発明のように、個人差の情報
200を計算機システム内部に複数登録し、利用者のI
Dなどで個人差の情報200を特定することも可能であ
る。
Further, as in the third aspect of the invention, a plurality of pieces of individual difference information 200 are registered in the computer system, and the user's I
It is also possible to specify the information 200 of the individual difference by D or the like.

【0027】[0027]

【発明の効果】以上説明したように、本発明のポイント
デバイス装置は、利用者がディスプレイを見つめるだけ
でメニュ項目の選択が可能となり、マウスなどの機器を
利用者がキーボードから手を離さなくても使用でき、ま
た、カーソルの移動の時間を軽減できる効果を奏する。
As described above, in the point device apparatus of the present invention, the user can select the menu item just by looking at the display, and the user does not have to release the mouse or other device from the keyboard. Can also be used, and has the effect of reducing the time for moving the cursor.

【図面の簡単な説明】[Brief description of drawings]

【図1】本発明によるポイントデバイス装置の一実施例
を使用したシステムの構成図である。
FIG. 1 is a configuration diagram of a system using an embodiment of a point device apparatus according to the present invention.

【図2】本実施例のポイントデバイス装置の動作を説明
するためのフローチャートである。
FIG. 2 is a flowchart for explaining the operation of the point device device according to the present embodiment.

【図3】従来例のポイントデバイス装置であるマウス装
置のシステム構成図である。
FIG. 3 is a system configuration diagram of a mouse device, which is a conventional point device device.

【符号の説明】[Explanation of symbols]

1,1’ 座標検出手段 2 カーソル表示手段 3 メニュ項目検出手段 4 メニュ項目実行要求検出手段 5 メニュ項目実行手段 6 個人差計測手段 7 個人差登録手段 11,11’ 座標計測手段 12,12’ 補正手段 100 座標 200 個人差の情報 300 選択メニュ項目情報 1, 1'coordinate detection means 2 cursor display means 3 menu item detection means 4 menu item execution request detection means 5 menu item execution means 6 individual difference measurement means 7 individual difference registration means 11, 11 'coordinate measurement means 12, 12' correction Means 100 Coordinates 200 Information on individual differences 300 Information on selected menu items

Claims (3)

【特許請求の範囲】[Claims] 【請求項1】 計算機システムの利用者である人間の眼
の位置や動きなどによってディスプレイのどこをみてい
るのかその座標を計測、算出する手段と、前記算出され
た座標を利用者による個人差の情報で補正する手段と、
前記利用者の個人差の情報を計測する手段と、前記個人
差の情報を格納する手段と、前記個人差の情報が格納さ
れるメモリと、前記補正されて最終的に決定されたディ
スプレイ上の座標にカーソルを表示する手段と、前記表
示されたカーソルと重なっているディスプレイ上のメニ
ュ項目を検出する手段と、前記検出したメニュ項目の実
行要求が行われたことを検出する手段と、前記検出され
た実行要求を計算機システムに伝える手段とを有するこ
とを特徴とするポイントデバイス装置。
1. A means for measuring and calculating the coordinates of where the display is seen by the position and movement of the human eye who is the user of the computer system, and the means for calculating the calculated coordinates for the individual difference between the users. Means to correct with information,
Means for measuring the information of the individual difference of the user, means for storing the information of the individual difference, a memory for storing the information of the individual difference, and the corrected and finally determined display on the display. Means for displaying a cursor at coordinates, means for detecting a menu item on the display overlapping the displayed cursor, means for detecting that an execution request for the detected menu item has been made, and the detection And a means for transmitting the executed request to the computer system.
【請求項2】 前記個人差の情報が格納されるメモリ
が、ICカードであることを特徴とする請求項1記載の
ポイントデバイス装置。
2. The point device device according to claim 1, wherein the memory in which the information of the individual difference is stored is an IC card.
【請求項3】 前記個人差の情報が格納されるメモリ
が、前記計算機システム内に確保され、利用者が特定さ
れると前記個人差の情報が特定されることを特徴とする
請求項1記載のポイントデバイス装置。
3. The memory for storing the information on the individual difference is secured in the computer system, and the information on the individual difference is specified when a user is specified. Point device equipment.
JP5160571A 1993-06-30 1993-06-30 Point device device Expired - Fee Related JP2570966B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP5160571A JP2570966B2 (en) 1993-06-30 1993-06-30 Point device device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP5160571A JP2570966B2 (en) 1993-06-30 1993-06-30 Point device device

Publications (2)

Publication Number Publication Date
JPH0720988A true JPH0720988A (en) 1995-01-24
JP2570966B2 JP2570966B2 (en) 1997-01-16

Family

ID=15717849

Family Applications (1)

Application Number Title Priority Date Filing Date
JP5160571A Expired - Fee Related JP2570966B2 (en) 1993-06-30 1993-06-30 Point device device

Country Status (1)

Country Link
JP (1) JP2570966B2 (en)

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS62133519A (en) * 1985-12-06 1987-06-16 Hitachi Ltd Display device

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS62133519A (en) * 1985-12-06 1987-06-16 Hitachi Ltd Display device

Also Published As

Publication number Publication date
JP2570966B2 (en) 1997-01-16

Similar Documents

Publication Publication Date Title
JP7191714B2 (en) Systems and methods for direct pointing detection for interaction with digital devices
US10511778B2 (en) Method and apparatus for push interaction
CN109891491B (en) Method and apparatus for controlling interactive display
US9600078B2 (en) Method and system enabling natural user interface gestures with an electronic system
EP3164785B1 (en) Wearable device user interface control
US9052744B2 (en) Method and apparatus for controlling user interface of electronic device using virtual plane
US8677282B2 (en) Multi-finger touch adaptations for medical imaging systems
US6347290B1 (en) Apparatus and method for detecting and executing positional and gesture commands corresponding to movement of handheld computing device
US9250799B2 (en) Control method for information input device, information input device, program therefor, and information storage medium therefor
CN105159539B (en) Touch-control response method, device and the wearable device of wearable device
CN103838365B (en) Penetrating head-wearing display system and interactive operation method
CN107613203B (en) Image processing method and mobile terminal
JP5802247B2 (en) Information processing device
US20060214911A1 (en) Pointing device for large field of view displays
US10488918B2 (en) Analysis of user interface interactions within a virtual reality environment
CN108027656A (en) Input equipment, input method and program
KR20130101728A (en) Interface device using motion recognition and control method thereof
CN117784926A (en) Control device, control method, and computer-readable storage medium
JPH0720988A (en) Pointing device
CN114167997A (en) Model display method, device, equipment and storage medium
KR102325684B1 (en) Eye tracking input apparatus thar is attached to head and input method using this
GB2369673A (en) Image processing apparatus calibration
Rajanna et al. Can Gaze Beat Touch? A Fitts' Law Evaluation of Gaze, Touch, and Mouse Inputs
CN113095243B (en) Mouse control method and device, computer equipment and medium
US20240126369A1 (en) Information processing system and information processing method

Legal Events

Date Code Title Description
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 19960903

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20071024

Year of fee payment: 11

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20081024

Year of fee payment: 12

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20091024

Year of fee payment: 13

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20091024

Year of fee payment: 13

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20101024

Year of fee payment: 14

LAPS Cancellation because of no payment of annual fees