JPH05108252A - Cursor position control system - Google Patents
Cursor position control systemInfo
- Publication number
- JPH05108252A JPH05108252A JP3290435A JP29043591A JPH05108252A JP H05108252 A JPH05108252 A JP H05108252A JP 3290435 A JP3290435 A JP 3290435A JP 29043591 A JP29043591 A JP 29043591A JP H05108252 A JPH05108252 A JP H05108252A
- Authority
- JP
- Japan
- Prior art keywords
- cursor
- display device
- line
- human
- sight
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Abstract
Description
【０００１】[0001]
【産業上の利用分野】本発明はカーソル位置制御方式に
関するものである。BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a cursor position control system.
【０００２】[0002]
【従来の技術】従来のカーソル位置制御方式は、キーボ
ード，マウス，タブレット，トラックボールからの入力
により位置を制御する方式があった。2. Description of the Related Art A conventional cursor position control method has a method of controlling the position by inputting from a keyboard, a mouse, a tablet, or a trackball.
【０００３】[0003]
【発明が解決しようとする課題】従来のカーソル位置制
御方式では、カーソル位置を人間の手で機械的な装置を
操作して移動させる必要があった。このため、人間が位
置決めしたい場所に手でカーソルを操作して移動されな
ければならないという問題があった。In the conventional cursor position control system, it is necessary to move the cursor position by manipulating a mechanical device with human hands. For this reason, there is a problem that a human must move the cursor to a position where he / she wants to position it by hand.
【０００４】したがって本発明は、前述した従来の課題
を解決するためになされたものであり、その目的は、表
示装置画面上のカーソルを手に使用せずに移動可能とし
たカーソル位置制御方式を提供することにある。Therefore, the present invention has been made to solve the above-mentioned conventional problems, and an object thereof is to provide a cursor position control system in which a cursor on a screen of a display device can be moved without using the hand. To provide.
【０００５】[0005]
【課題を解決するための手段】このような目的を達成す
るために本発明によるカーソル位置制御方式は、人間の
視野全体を撮影するカメラと、人間の眼球の動きに対応
して視線を検知する視線検出器と、視線検出器の出力を
もとにカメラに写った画像面上での人間の視線の座標を
計算する視線計算器と、人間の視野に対向配置されかつ
画面内に基準マーカおよびカーソルが表示された表示装
置と、表示装置の画面内のカーソル位置を制御するカー
ソル制御装置とを備え、カメラに写った表示装置上の基
準マーカの画像から視点の表示装置上の座標を求め、そ
の位置に前記カーソルを移動制御するようにしたもので
ある。In order to achieve such an object, a cursor position control method according to the present invention detects a line of sight corresponding to the movement of a human eyeball and a camera for photographing the entire human visual field. A line-of-sight detector, a line-of-sight calculator that calculates the coordinates of the human line-of-sight on the image plane captured by the camera based on the output of the line-of-sight detector, and a reference marker that is placed opposite to the human visual field and on the screen. A display device in which a cursor is displayed, and a cursor control device for controlling the cursor position in the screen of the display device are provided, and the coordinates on the display device of the viewpoint are obtained from the image of the reference marker on the display device reflected in the camera, The cursor is controlled to move to that position.
【０００６】[0006]
【作用】本発明においては、位置決めしたい位置を見つ
めた位置にカーソルが移動制御される。In the present invention, the cursor is controlled to move to the position where the user looks at the position to be positioned.
【０００７】[0007]
【実施例】以下、図面を用いて本発明の実施例を詳細に
説明する。図１は本発明の一実施例によるカーソル位置
制御方式を説明するブロック図である。同図において、
全景カメラ１は人間の頭上に人間の真正面を向くように
固定され、人間の視野全体を撮影するカメラである。視
線検出器２は人間の眼球の動きから視線を検知する装置
である。視点計算機３は視線検出器２の出力をもとに全
景カメラ１に写った画像のどこを人間が見ているかを計
算する装置である。カーソル位置制御装置４は表示装置
５上に表示されるカーソル７の位置を制御する装置であ
る。基準マーカ６は表示装置５の面上の座標を明示する
ための印で表示装置５の面上のｘ，ｙ座標が、（ｘ，
ｙ）＝（０，０），（１，０），（０，１）なる３点に
置かれている。Embodiments of the present invention will be described in detail below with reference to the drawings. FIG. 1 is a block diagram illustrating a cursor position control method according to an embodiment of the present invention. In the figure,
The panoramic camera 1 is a camera that is fixed above the human head so as to face the front of the human and captures the entire visual field of the human. The line-of-sight detector 2 is a device that detects the line of sight from the movement of the human eyeball. The viewpoint calculator 3 is a device that calculates, based on the output of the line-of-sight detector 2, where in the image captured by the panoramic camera 1 a human is looking. The cursor position control device 4 is a device that controls the position of the cursor 7 displayed on the display device 5. The reference marker 6 is a mark for clearly indicating the coordinates on the surface of the display device 5, and the x, y coordinates on the surface of the display device 5 are (x,
y) = (0,0), (1,0), and (0,1).
【０００８】次に本実施例の動作について説明する。視
線検出器２は、人間の眼球の動きを観察し、視線と全景
カメラ１の光軸との角度α，人間の真上の方向との角度
β，人間の真右の方向との角度γを出力する。この３つ
の角度から人間の視点が全景カメラ１の画像面上の座標
のどこにあるか視点計算機３は次の式により求める。 ｘ＝Ｋcosαcosγ ｙ＝Ｋcosαcosβ ここで、（ｘ，ｙ）は、人間の視点の画像面上の座標で
あり、Ｋは全景カメラ１の光学系により定まる定数であ
り、これは全景カメラ１の１ｍ前方に水平に長さ１ｍの
棒を置き、これの画像面上に写る長さに相当する。Next, the operation of this embodiment will be described. The line-of-sight detector 2 observes the movement of the human eyeball and determines the angle α between the line of sight and the optical axis of the panoramic camera 1, the angle β with the direction directly above the human, and the angle γ with the direction right just above the human. Output. From these three angles, the viewpoint calculator 3 determines where the human viewpoint is on the coordinates on the image plane of the panoramic camera 1 by the following formula. x = Kcosαcosγ y = Kcosαcosβ where (x, y) are coordinates on the image plane of the human viewpoint, and K is a constant determined by the optical system of the panoramic camera 1, which is 1 m ahead of the panoramic camera 1. This is equivalent to the length of a 1 m long bar placed horizontally on the image plane of the bar.
【０００９】また、全景カメラ１には、３つの基準マー
カ６の像も写るので、その画像面上の座標（ｘ0 ，ｙ
0 ），（ｘ1 ，ｙ1 ），（ｘ2 ，ｙ2 ）を視点計算機３
に出力する。ただし、（ｘ0 ，ｙ0 ）は表示装置５面上
の座標（０，０）の像の画像面上の座標，（ｘ1 ，ｙ
1 ）は表示装置５面上の座標（１，０）の像の画像面上
の座標，（ｘ2 ，ｙ2）は表示装置５面上の座標（０，
１）の像の画像面上の座標である。視点計算機３は、
（ｘ，ｙ），（ｘ0 ，ｙ0 ），（ｘ1 ，ｙ1 ），（ｘ
2 ，ｙ2 ）の４つの座標から人間の視点の表示装置５面
上の座標（Ｘ，Ｙ）を次の数式１から求める。Since the images of the three reference markers 6 are also captured on the panoramic camera 1, the coordinates (x 0 , y) on the image plane thereof.
0 ), (x 1 , y 1 ), (x 2 , y 2 ) to the viewpoint computer 3
Output to. However, (x 0 , y 0 ) is the coordinate on the image plane of the image of the coordinate (0, 0) on the plane of the display device 5, and (x 1 , y
1 ) is the coordinate on the image plane of the image of the coordinate (1,0) on the plane of the display device 5, and (x 2 , y 2 ) is the coordinate (0,
It is the coordinates on the image plane of the image of 1). The viewpoint computer 3
(X, y), (x 0 , y 0 ), (x 1 , y 1 ), (x
The coordinates (X, Y) on the surface of the display device 5 at the human viewpoint are calculated from the following four formulas from the four coordinates ( 2 , y 2 ).
【００１０】[0010]
【数１】 [Equation 1]
【００１１】ここで求まった座標（Ｘ，Ｙ）を視点計算
機３は、カーソル制御装置４に出力する。カーソル制御
装置４は、カーソル７を表示装置５面上の座標（Ｘ，
Ｙ）の位置に移動する。全景カメラ１および視線検出器
２は、常に上述したα，β，γ，（ｘ0 ，ｙ0），（ｘ1
，ｙ1 ），（ｘ2 ，ｙ2 ）の変化を監視し、変化があ
った場合、視点計算機３は新たな座標（Ｘ，Ｙ）を求
め、その位置にカーソルを置き直す。以上の動作により
カーソルを人間の視点の位置に移動させることができ
る。The viewpoint computer 3 outputs the coordinates (X, Y) obtained here to the cursor control device 4. The cursor control device 4 moves the cursor 7 to the coordinate (X,
Move to position Y). The panoramic camera 1 and the line-of-sight detector 2 always use the above-mentioned α, β, γ, (x 0 , y 0 ), (x 1
, Y 1 ) and (x 2 , y 2 ) are monitored, and if there is a change, the viewpoint computer 3 finds a new coordinate (X, Y) and repositions the cursor at that position. With the above operation, the cursor can be moved to the position of the human viewpoint.
【００１２】[0012]
【発明の効果】以上説明したように本発明によれば、カ
ーソルを視点に位置するよう制御しているので、カーソ
ルの位置決めに手による操作は不要となるという極めて
優れた効果が得られる。As described above, according to the present invention, since the cursor is controlled so as to be positioned at the viewpoint, it is possible to obtain an extremely excellent effect that no manual operation is required for positioning the cursor.
【図１】本発明によるカーソル位置制御方式を説明する
カーソル位置制御装置のブロック図である。FIG. 1 is a block diagram of a cursor position control device for explaining a cursor position control method according to the present invention.
１ 全景カメラ ２ 視線検出器 ３ 視点計算機 ４ カーソル制御装置 ５ 表示装置 ６ 基準マーカ ７ カーソル 1 panoramic camera 2 line-of-sight detector 3 viewpoint calculator 4 cursor control device 5 display device 6 reference marker 7 cursor
Claims (1)
と、 前記視線検出器の出力をもとに前記カメラに写った画像
面上での人間の視線の座標を計算する視線計算器と、 前記人間の視野に対向配置されかつ画面内に基準マーカ
およびカーソルが表示された表示装置と、 前記表示装置の画面内のカーソル位置を制御するカーソ
ル制御装置と、 を備え、前記カメラに写った表示装置上の基準マーカの
画像から視点の表示装置上の座標を求め、その位置に前
記カーソルを移動制御することを特徴とするカーソル位
置制御方式。1. A camera for photographing the entire field of view of a human, a line-of-sight detector for detecting a line of sight corresponding to the movement of the human eyeball, and an image plane captured by the camera based on the output of the line-of-sight detector. A line-of-sight calculator that calculates the coordinates of the line of sight of a human on the display device, a display device in which a reference marker and a cursor are displayed in the screen and are arranged to face the human visual field, and the cursor position in the screen of the display device is displayed. A cursor control device for controlling the position of the cursor, characterized in that the coordinates of the viewpoint on the display device are obtained from the image of the reference marker on the display device shown in the camera, and the cursor is controlled to move to that position. control method.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP3290435A JPH05108252A (en) | 1991-10-11 | 1991-10-11 | Cursor position control system |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP3290435A JPH05108252A (en) | 1991-10-11 | 1991-10-11 | Cursor position control system |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JPH05108252A true JPH05108252A (en) | 1993-04-30 |
Family
ID=17755998
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP3290435A Pending JPH05108252A (en) | 1991-10-11 | 1991-10-11 | Cursor position control system |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JPH05108252A (en) |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO1996013743A1 (en) * | 1994-10-26 | 1996-05-09 | Leica Ag | Microscope, in particular for surgical operations |
| JP2001067179A (en) * | 1999-08-27 | 2001-03-16 | Nec Corp | Pointing device and computer system using the same |
| KR100374346B1 (en) * | 2000-12-06 | 2003-03-04 | 한국과학기술원 | Head pose tracking method using image processing |
-
1991
- 1991-10-11 JP JP3290435A patent/JPH05108252A/en active Pending
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO1996013743A1 (en) * | 1994-10-26 | 1996-05-09 | Leica Ag | Microscope, in particular for surgical operations |
| US5867308A (en) * | 1994-10-26 | 1999-02-02 | Leica Mikroskopie Systeme Ag | Microscope, in particular for surgical operations |
| JP2001067179A (en) * | 1999-08-27 | 2001-03-16 | Nec Corp | Pointing device and computer system using the same |
| KR100374346B1 (en) * | 2000-12-06 | 2003-03-04 | 한국과학기술원 | Head pose tracking method using image processing |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR101347232B1 (en) | Image Recognition Apparatus, Operation Determining Method, and Computer-Readable Medium | |
| EP1130906A2 (en) | Pointing device for digital camera display | |
| JP2008129775A (en) | Display control unit, display device and display control method | |
| WO2018086461A1 (en) | Visual tracking method based on monocular gesture recognition, and robot | |
| KR20130108643A (en) | Systems and methods for a gaze and gesture interface | |
| KR20080104100A (en) | Pointing device using camera and outputting mark | |
| TW201237773A (en) | An electronic system, image adjusting method and computer program product thereof | |
| US20150304615A1 (en) | Projection control apparatus and projection control method | |
| WO2016008265A1 (en) | Method and apparatus for locating position | |
| JP2012238293A (en) | Input device | |
| JP6866467B2 (en) | Gesture recognition device, gesture recognition method, projector with gesture recognition device and video signal supply device | |
| JP2008181198A (en) | Image display system | |
| TW578031B (en) | Projection system with an image capturing device | |
| JP3792907B2 (en) | Hand pointing device | |
| JPH05108252A (en) | Cursor position control system | |
| JP4025516B2 (en) | Mouse replacement method, mouse replacement program, and recording medium recording the program | |
| JPH05298015A (en) | Glance detecting system and information processing system | |
| JP2007310914A (en) | Mouse alternating method, mouse alternating program and recording medium | |
| JP2010272036A (en) | Image processing apparatus | |
| JPH07160412A (en) | Pointed position detecting method | |
| US10403002B2 (en) | Method and system for transforming between physical images and virtual images | |
| JP2000101990A (en) | Monitoring camera device | |
| JP2005063101A (en) | Personal computer input device for disabled | |
| KR101707113B1 (en) | Tool for selection of image of region of interest and its use of selection method | |
| JP2003256128A (en) | A series of computer systems for automatic display of cursor in visual point position of visual axis on personal computer monitor screen by detecting eye position |