CN102473033A

CN102473033A - 一种注视点检测方法及其装置

Info

Publication number: CN102473033A
Application number: CN2009801598984A
Authority: CN
Inventors: 庄珑鹏
Original assignee: Yuanyuan Assets Group Co ltd
Current assignee: Yuanyuan Assets Group Co ltd; Alcatel Lucent SAS
Priority date: 2009-09-29
Filing date: 2009-09-29
Publication date: 2012-05-23
Anticipated expiration: 2029-09-29
Also published as: WO2011038527A1; EP2485118A4; EP2485118A1; CN102473033B; US20120169596A1; KR20120080215A; JP5474202B2; JP2013506209A; KR101394719B1

Abstract

提出一种基于脸部检测和图像测量的注视点检测方法和装置。该装置包括：摄像头，参考表获取单元和计算单元。摄像头用于捕获用户的脸部图像；参考表获取单元用于获取包括参考脸部图像与用户视线方向之间的关系的参考表；计算单元，根据摄像头所捕获的用户的脸部图像来执行图像测量，并查找参考表获取单元中的参考表以计算用户在屏幕上的注视点。

Description

种注视点检测方法及其装置技术领域

本发明的实施例涉及图像处理领域，具体涉及一种基于脸部检测和图像测量的注视点检测方法和装置。背景技术

随着图像处理技术的不断发展，在当今的视频显示屏（例如台式计算机或膝上计算机的屏幕，或电视机的屏幕，等等）上，当用户希望将光标从屛幕上的某个区域移动到其他区域时，该用户通常需要使用附属设备（例如鼠标或触摸板，或是遥控器）来完成该动作。

然而，对于某些用户来说，手的活动由于某些原因而受到限制，例如生理上的残疾或受到外伤，因而上述光标移动会变得艰难甚至无法实现。另外，即使手的活动功能正常，在某些特殊情况下，也希望无需用手便能够执行上述的光标移动，或者尽可能地减少手的移动距离。

除此之外，即使不移动光标，某些应用也需要检测用户在显示屏上的注视点，以便进行后续的处理和操作。

如今，摄像头不断普及、成熟脸部检测算法的不断涌现，使得基于摄像头的视频图像的检测变得可行。为此，需要一种利用摄像头的注视点检测技术，以检测用户在显示屏上的注视点。发明内容

本发明的一个方面提供了一种注视点检测装置，用于计算用户在屏幕上的注视点，所述装置包括：摄像头，用于捕获用户的脸部图像; 参考表获取单元，用于获取包括参考脸部图像与用户视线方向之间的关系的参考表；以及计算单元，根据摄像头所捕获的用户的脸部图像来执行图像测量，并査找参考表获取单元中的参考表，以计算用户在屏幕上的注视点。

优选地，参考表获取单元包括以下至少一项：参考表构建单元，根据摄像头所捕获的用户的至少一个参考脸部图像来构建参考表；以及参考表存储单元，其中存储有已经构建好的参考表。

优选地，计算单元包括：视线方向计算单元，根据摄像头的位置，测量用户脸部图像中用户的两个瞳孔之间的中点与摄像头的距离，并通过查找参考表计算用户的视线方向；以及注视点计算单元，根据摄像头的位置、用户的两个瞳孔之间的中点与摄像头的距离以及用户的视线方向，计算用户在屏幕上的注视点。

优选地，注视点检测装置还包括：光标移动单元，在计算出注视点后，如果该注视点位于屏幕之内，则光标移动单元将屏幕上的光标移动到注视点。

优选地，如果注视点与当前光标之间的距离小于预定义值，则光标移动单元不移动光标。

优选地，注视点检测装置还包括：附属单元，用于在光标位置处执行操作。优选地，附属单元包括鼠标、键盘、触摸板、手柄和遥控器中至少一项。

本发明的另一方面提供了一种注视点检测方法，用于计算用户在屏幕上的注视点，所述方法包括如下步骤：参考表获取步骤，获取包括参考脸部图像与用户视线方向之间的关系的参考表；注视点计算步骤，使用摄像头捕获用户的脸部图像，执行图像测量并查找参考表，以计算用户在屏幕上的注视点。

优选地，参考表获取步骤包括：使用摄像头获取用户的至少一个参考脸部图像，以构建包括参考脸部图像与用户视线方向之间的关系的参考表；或者直接获取已经构建好的参考表。

优选地，注视点计算步骤包括：根据摄像头的位置，测量用户脸部图像中用户的两个瞳孔之间的中点与摄像头的距离，并通过查找参考表计算用户的视线方向；以及根据摄像头的位置、用户的两个瞳孔之间的中点与摄像头的距离以及用户的视线方向，计算用户在屏幕上的注视点。

优选地，注视点检测方法还包括：在计算出注视点后，如果该注视点位于屏幕之内，则将屏幕上的光标移动到注视点。优选地，如果注视点与当前光标之间的距离小于预定义值，则不移动光标。优选地，可以根据需要来设置所述预定义值。

本发明的又一方面提供了一种多屏幕计算机，具有围绕用户的多个屏幕，该多屏幕计算机包括本发明的注视点检测装置。附图说明

通过下文结合附图的详细描述，本发明的上述和其他特征将会变得更加明显，其中- 图 1是示出了根据本发明的注视点检测装置的实施例的框图；图 2a是示出了根据本发明的注视点检测方法的实施例的流程图；图 2b是示出了图 2a中注视点检测方法的子步骤的流程图；图 3是示出示例性坐标系中的参考脸部图像的示意图；

图 4是示例性的脸部图像的示意图；

图 5a是示出了不同的脸部方向的示意图；

图 5b是示出了不同的脸部方向的编码图；

图 6a是示出了不同方向的眼球模型的示意图；

图 6b是示出了在示例性坐标系中的眼球模型的垂直夹角和水平夹角之间关系的示意图；

图 7是示出了投影圆半径和圆锥体顶角的关系示意图；

图 8是示出摄像头与用户的连线在图像上的投影（Α。' B ' ) 和 X 轴（A。， C ' ) 的夹角的示意图；

图 9是示出了根据本发明的注视点检测的原理图；

图 10是示出了眼球方向表的一个示例的框图；以及

图 11是示出了投影圆半径-圆锥体顶角表的一个示例的框图。具体实施方式

下面，通过结合附图对本发明的具体实施例的描述，本发明的原理和实现将会变得明显。应当注意的是，本发明不应局限于下文所述的具体实施例。

图 1是示出了根据本发明的注视点检测装置 100的实施例的框图。如图 1所示，该注视点检测装置 100包括摄像头 102、参考表获取单元 104 和计算单元 106。摄像头 102可以是本领域中的常规摄像头，用于捕获用户的脸部图像。参考表获取单元 104用于获取包括参考脸部图像与用户视线方向之间的关系的参考表。计算单元 106可以通过该参考表来计算用户的视线方向，继而计算出用户在屏幕 108上的注视点。

下面，作为示例，参照图 3- 9来说明参考脸部图像和参考表的一种具体实现，以及注视点检测装置 100中各个组件的操作。

为了进行定位和计算，可建立如图 3所示的 3轴坐标体系，该坐标体系的原点位于屏幕的左上角。从计算机用户的角度来说，沿着屏幕的上边沿从左向右延伸的轴是 X轴，沿着屏幕的左边沿从上向下延伸的轴是 Y轴，而垂直于屏幕从远（屏幕端）至近（用户端）延伸的轴是 Z轴。摄像头 102安装在坐标为（_Xl， y_h 0)的点 A处。如图 4所示，点 B 是用户的两个瞳孔之间的中点。 AB距离是点 A (摄像头的位置）与点 B 的距离。瞳距是图像中用户的两个瞳孔的中心之间的距离。

例如，假设屏幕处于平面 1 (Pi ) 中，而摄像头 102的正面与平面

1平行。并且，假定点 B处于与平面 1平行的平面 2 (p2 ) 或平面 3 (p3 ) 中。如图 9所示，平面 Pb指的是点 B所在的、垂直于直线 AB的平面。在平面 Pb里， Yb轴是直线 AB所在的铅直平面与平面 Pb的交叉线， Xb轴是平面 Pb内垂直于 Yb轴的一条直线。

基于 "越远越小，越近越大" 的原理，可以根据脸部图像的大小或有关的分量距离来检测点 A与点 B之间的距离。为了进行该测量，引入参考脸部图像。如图 3中所示，参考脸部图像是指当用户的脸部位于摄像头正前方、并且 A与 B之间的距离为 D。（摄像头和两个瞳孔的中点之间的距离）时摄像头所捕获的图像。由于可能存在相对误差，所以参考脸部图像的数目越多就可以减小相对误差，检测结果就越精确。例如，引入两个参考脸部图像，其中一个 AB距离为 D。，而另一个 A B 距离较短，为 D 为了获得参考脸部图像，应当把摄像头 102设置在坐标体系中具有坐标（_Xl， y,, 0)的点 A处，而且用户应当位于适当的位置，以确保点 B (两眼之间的中点，如图 4所示。位于坐标系中的（x^ y!, zo) 或 (x,， yi, z 处，并且 (_Xl， y_{h ZQ})和（_Xl， y„ _Zl)应当满足如下等式： z₀ - 0 = Do (1)

ζ, - Ο ^ ϋ, (2)

当使用脸部检测 /识别算法检测用户脸部时，可以对每个瞳孔的中心进行定位，从而可以获得点 B和两个瞳孔的中心之间的距离 P，如图 4中所示。如果用户的脸部图像是距离为 D。的参考脸部图像，那么两个瞳孔的中心之间的距离是参考瞳距 P。。如果用户的脸部图像是距离为的参考脸部图像，那么两个瞳孔的中心之间的距离是参考瞳距 P!。

在本实施例中，参考表包括眼球方向表和投影圆半径-圆锥体顶角表，下面参考图 10和 11对其进行详细描述。

当用户看向屏幕中的不同区域时，用户可能会转动头部以使得脸部直接地（或几乎直接地）面向该区域。图 5a示出了可能的脸部方向。根据脸部的不同朝向，在此大致把脸部朝向划分为 9个方向，并对不同的脸部方向进行编码，具体编码如图 5b所示。

当捕获到用户的脸部后，可以同时确定用户的眼睛瞳孔的轮廓。在本实施例中，可以把用户的眼球看作球体，而把瞳孔看作眼球表面上的圆圈。并且，瞳孔会直接朝向屏幕上的注视点。图 6a示出了具有 2 个不同眼球方向的眼球模型。如图 6a所示，当用户向不同的方向看去时，瞳孔会随着眼睛而改变方向。在摄像头所获得图像中，瞳孔的轮廓会从一种椭圆形变为另一种椭圆形。基于瞳孔的轮廓和脸部方向，可以得到每一个眼球的转动角度，包括：

左眼球的垂直转动角度： e _VB^，

左眼球的水平转动角度： e„。n，

右眼球的垂直转动角度： e _V(^，

右眼球的水平转动角度： e„„__R。

此处的 Θ ^是指瞳孔方向与 Yb轴的夹角，而 Θ„„是指瞳孔方向与 Xb轴的夹角。为了提高眼球方向计算的性能以获得上述 4个角度，即 Θ nr- Θ _NOR._L , Θ _VOR._R , Θ _Hor._{R j} 引入眼球方向表以列出所有可能的眼球方向及其转动角度。参考图 10，该表至少包括 5列信息：第 1列表示索引；第 2列表示垂直转动角度 θ _ν„; 第 3列表示水平转动角度第 4列表示对应的大致脸部方向；以及第 5列包括眼睛（瞳孔）经过垂直和水平转动后的瞳孔轮廓有关的图像。第 2列（ Θ Ver)和第 3列（ Θ _Hor)的值在 0. 0- 至 180. 0·之间变化。如图 6b所示， Θ ^和 Θ _H。r的取值必须满足点 0处于球面上。眼球方向表的取值范围就是图 6 所示球面上面向摄像头一侧 (也就是 Z轴负轴方向）上的采样点对应的 9 ^和 Θ _Η„，以及摄像头所看到的瞳孔在该釆样点的轮廓图形。采样点越密集， e _v。^a e _H。Jt 量就越小，结果就越精确，但是执行的负荷也越大。默认的角度的增量是 0. 1度。作为示例，图 10仅示出了瞳孔在点 M，点^[，点 Q和点 Q' 时的表格内容（其中索引列在实际实现中应该为整数值递增，如 1， 2 , 3等，此处为表述方便，写成 I_M， I_N， I_Q等）。

该表的使用过程如下：在获得眼睛图像之后，提取左眼（或右眼）的轮廓，并从该表中找出最适合的轮廓，从而获得如下角度： 9 _V。^， Θ„_or-_L (或 Θ _Ver._R, Θ _Hor__B)₀从表中我们可以看出在围绕图 6b中球心点对称的点，比如点 Q和点 Q ' ，摄像头所看到的瞳孔轮廓是一样的，这就需要通过脸部方向来加与判断。在实际操作过程中，可以根据用户相对于摄像头 102的位置关系，以及屏幕的大小，对用户可能处在得角度 e _v。 n Θ 的范围加大插值密度，这对于提高结果的精度有帮助。

对于摄像头 102来说，位于一个圆锥体侧面上的所有点都会被投影到摄像头的图像中的一个圆上。因此，一旦获知摄像头的图像中的圆的半径，就可以确定圆锥体的顶角，如图 7所示。为了更好地描述圆锥体的顶角，图 11示出了对于某一种摄像头圆锥体所有可能的顶角以及投影圆的半径的关系。表中采用的距离单位是像素，可以折算成其它的单位。投影圆的半径值的范围是从 0到 R_MAX。 R_MM是从图像中心到图像的一角的最远距离。表中的内容可以根据不同的摄像头来设置，因为不同的摄像头具有不同的分辨率、焦距和广角。建议的投影圆半径增量的粒度是 5个像素。该粒度越小，结果就越精确，但是执行时的需要的计箅、比较的次数也越多。作为示例，图 11所示的投影圆半径- 圆锥体顶角表采用 1 0个像素为单位，摄像头的是 2 0 Q像素，摄像头的最大视角为 40度（左右各 2 0度）。

在实际操作过程中，可以根据用户相对于摄像头 102的位置关系，对用户经常所在的位置对应的夹角（也就是圆锥体的顶角）加大插值密度，这对于提高结果的精度有帮助。

在本实施例中，参考表获取单元 104包括参考表构建单元 1042，其利用摄像头 102捕获的具有距离 D。和的参考脸部图像，构建上文所述的眼球方向表和投影圆半径-圆锥体顶角表。另外，参考表获取单元 104还可以包括参考表存储单元 1044。如果参考表已经构建好并保存在参考表存储单元 1044中，那么参考表获取单元 104直接从中读取即可。此外，参考表构建单元 1042所构建的参考表可以存储到参考表存储单元 1044中。

计算单元 106可以包括视线方向计算单元 1062和注视点计算单元

1064。其中，视线方向计算单元 1062根据摄像头的位置，测量用户脸部图像中用户的两个瞳孔之间的中点与摄像头的距离，并通过查找参考表计算用户的视线方向。具体地，视线方向计算单元 1062使用成熟的脸部检测 /识别算法，例如 OpenCV, 来检测用户脸部的大致方向、用户的眼睛和瞳孔的轮廓以及瞳距 P。使用瞳距？、参考瞳距 P。和来计算 AB距离 L。视距（Di stance)和目标图像大小（Image Size )具有如下关系：

视距 X图像大小常数（3)

因此， AB距离 L和瞳距 P满足如下等式：

LxP«D₀xP₀ (4)

为了提高结果的精度，将等式（4) 和（5 ) 合并，得到-

视线方向计算单元 1062进一步计算角度 (1和3。具体地， α是平面 2中线 Α。Β与 X轴的夹角，其中 Α。是点 Α在平面 Ρ2上的垂直投射点， B是两个瞳孔之间的中点（如图 9所示）。由于平面 2与平面 1平行，因此该角度 α与摄像头图像中的投影角 α，相同。

α = α ' (7)

图 8示出了图像内的点 Α。' ， Β ' 和角度 a ' ，它们满足：

A₀ ^,B^, Xsin(a')=B'C (8) A。， B，和 B' C 表示图像中这些点之间的长度。因此，角度 α，的值是. - a'=arcsin(B'C7 Ao'B') (9)

在获得摄像头的图像中 Α。' B' 的长度后，视线方向计算单元 1062 可在投影圆半径-圆锥体顶角表中进行搜索，找到其投影圆半径值与长度 Α。' B' 匹配的最适合的行。这样，同一行中的圆锥体的顶角便是角度 0。然后，视线方向计算单元 1062计算点 B的坐标。利用先前得到的结果，当 B点处于 Ao点的左下方时（从正面查看图象角度，如图 9所示，下同），可以按照如下等式来计算点 B的坐标 (x₃，y₃， z₃) :

x₃= X i+Lxsin( ) xcos(a) (10)

y₃= yi+Lxsin( ) xsin(a) (11)

当 B点处于 A_Q点的右方（包括右上、右下）时，等式（10) 中的加号要变成减号，当 B点处于 Ao点的上方（包括左上、右上）时，等式（11 ) 中的加号要变成减号。

接下来，视线方向计算单元 1062计算眼球转动角度。具体地，根据摄像头的图像，检测左眼的瞳孔的轮廓，并从上文提到的眼球方向表中找出最适合的轮廓，结合脸部的方向，从而获得眼球的相对于 Yb 轴的垂直转动角 Θ H。_rt和相对于 Xb轴的水平转动角度 Θ _H。_rt。右眼的 Θ v_er-_R , 6„。^也可以按照相同的步骤获得。

然后，视线方向计算单元 1062计算用户视线的方向：

0Ver ⁼ (0Ver-L+0Ver-R 2 (13)

ΘΗΟΓ ⁼ ( ΘΗΟΙ· e⁺Hor-R)/2 (14)

上述视线的方向是相对于平面 Pb内的 Xb轴和 Yb轴而言的，需要进一步转换成相对于 X轴和 Y轴的角度。为此，视线方向计算单元 1062 计算出平面 Pb的水平轴 Xb轴与平面 P1的水平轴 X轴的夹角 δ ^以及 Yb 轴与平面 PI的垂直轴 Y轴的夹角 δ _ν„。如图 9所示，它们满足：

xcos(a)] I [Lxcos (β)] (15)

xsin(a)] I [Lxcos (β)] (16)

所以可以得出 δ _Η。^Β δ _ν„: Lxsin(p) xcos(a) I [Lxcos (β)] } (17)

5_Ver=arctan{ Lxsin( ) xsin(a) I [Lxcos (β)] } (18)

结合之前的得出的 Θ ^和 Θ _Hor, 视线方向计算单元 1062可以计算出最终的 Θ Ver-Final和 Θ Hor-Final ί

之后，注视点计算单元 1064根据摄像头的位置、用户的两个瞳孔之间的中点与摄像头的距离以及用户的视线方向，计算用户在屏幕 108 上的注视点。具体地，注视点计算单元 1064利用视线方向计算单元 1062 计算出的 e Ver-Final和 Θ Hor-Final 7 按照下式来计算屏幕 108上的注视点 D的坐标 74, 0)：

Lo丄 xcos(P) (21)

y₄=L。/Tan(e_Ver__Finai) xcos(9_H。_r__Finai)+y₃ (23)

可选地，注视点检测装置 100还可以包括光标移动单元 112。光标移动单元 112判断是否需要移动光标。如果需要，则将光标移动到注视点。否则，不移动光标。优选地，由于计算精度以及其他因素的影响，真实的注视点和计算的注视点 D之间可能存在一定偏差。为了容许这种偏差，这里引入注视区域的概念，该区域是指以点 D (计算出来的注视点）为中心、以预定义的长度 G为半径、在屏幕上的圆形区域。因此，每当获得新的注视点 D时，当注视点处于屏幕可显示范围之外时，不移动光标。此外，只要当前的光标和点 D之间的距离小于预定义的值 G，则光标不会发生移动。反之，将光标移动到注视点 D。

可选地，该注视点检测装置 100还可以包括附属单元 110。用户可以使用附属单元，如鼠标、键盘、触摸板、手柄和遥控器中的一项或几项，在光标处执行操作。例如，用户可以使用鼠标进行单击或双击操作，也可以使用手柄或遥控器来执行各种按键操作。

接下来，结合附图 2&和213 描述根据本发明实施例的注视点检测方法的各个步骤。

如图 2a所示，方法在 S20开始。在步骤 S22处，执行准备工作。该准备工作包括：在摄像头上收集参考脸部图像，在此实施例中获取具有距离 D。和的参考脸部图像。参考脸部图像对于用户的脸部检测 /识别来说至关重要。在确定了参考脸部图像之后，获取两个瞳孔的中点之间的距离作为参考瞳距 P。和 Ρ。然后，构建上文提到的眼球方向表以及投影圆半径-圆锥体顶角表。或者，如果两个表巳经构建好并保存在参考表存储单元里，那么直接读取即可。最后，确定摄像头所在位置，即点 A的坐标（_Χι，_Υι, 0)。

在步骤 S24处，执行注视点检测。图 2b中示出了该注视点检测的具体步骤。具体地，在 S241 , 检测用户的脸部、瞳孔轮廓以及瞳距 P。在 S243，使用瞳距？、参考瞳距^和？,来计算 AB距离 L。在步骤 S245，- 获得角度 0和3。在步骤 S247，计算点 B的坐标。之后，在步骤 S249，计算眼球转动角度。如上文所述，根据摄像头的图像，检测左眼的瞳孔的轮廓，并从上文提到的眼球方向表中找出最适合的轮廓，结合脸部的方向，从而获得眼球的相对于 Yb轴的垂直转动角 Θ _Η ^Β相对于轴的水平转动角度 Θ„_or-_Lo右眼的 Θ _Ver__R, θ _Η„-_κ也可以按照相同的步骤获得。然后，计算用户视线的方向。最后，在步骤 S251，根据计算得到的用户的视线方向来计算屏幕 108上的注视点 D的坐标 ( ， y₄, 0)。

当上述注视点检测步骤 S24执行完毕后，参考图 2a，可选地在步骤 S26处判断是否需要移动光标。如果需要，则在步骤 S28将光标移动到注视点。否则，不移动光标。之后，该方法流程可回到步骤 S24，循环地执行注视点检测。如果终止该方法，则该方法在 S30处结束。

综上所述，本发明提供了一种基于脸部检测和图像测量的注视点检测方法和装置，通过检测用户的脸部方向和眼球方向，计算出用户在屏幕上的注视点，可以将光标移动到该区域。根据计算精度的需要，可以计算出可能的注视区域，并将光标移到该区域中，之后由用户手动地将光标移动到期望的精确位置，这使得用户的实际移动距离大大缩短，同时减轻了注视点检测装置的计算负荷。上述方案可以通过根据实际的装置精度有意地设置较大的预定义半径 G而实现。

此外，本发明的检测方法和装置还可用于具有围绕用户的多个屏幕的多屏幕计算机。具体实现是：当有多个屏幕时，确定各个屏幕的方位以及其和摄像头所在平面的夹角关系。当检测到用户视线时，利用本发明的上述原理，并通过计算视线延长线和相关平面的相交点，最终得出注视点。

尽管以上已经结合本发明的优选实施例示出了本发明，但是本领域的技术人员将会理解，在不脱离本发明的精神和范围的情况下，可以对本发明进行各种修改、替换和改变。因此，本发明不应由上述实施例来限定，而应由所附权利要求及其等价物来限定。

I I

Claims

权利要求

1. 一种注视点检测装置，用于计算用户在屏幕上的注视点，所述装置包括：

摄像头，用于捕获用户的脸部图像；

参考表获取单元，用于获取包括参考脸部图像与用户视线方向之间的关系的参考表；以及

计算单元，根据摄像头所捕获的用户的脸部图像来执行图像测量，并查找参考表获取单元中的参考表，以计算用户在屏幕上的注视点。
2. 根据权利要求 1所述的注视点检测装置，其中，参考表获取单元包括以下至少一项：

参考表构建单元，根据摄像头所捕获的用户的至少一个参考脸部图像来构建参考表；以及

参考表存储单元，其中存储有已经构建好的参考表。
3. 根据权利要求 1所述的注视点检测装置，其中，计算单元包括：视线方向计算单元，根据摄像头的位置，测量用户脸部图像中用户的两个瞳孔之间的中点与摄像头的距离，并通过査找参考表计算用户的视线方向；以及

注视点计算单元，根据摄像头的位置、用户的两个瞳孔之间的中点与摄像头的距离以及用户的视线方向，计算用户在屏幕上的注视点。
4. 根据权利要求 1所述的注视点检测装置，还包括：光标移动单元，在计算出注视点后，如果该注视点位于屏幕之内，则光标移动单元将屛幕上的光标移动到注视点。
5. 根据权利要求 4所述的注视点检测装置，其中，如果注视点与当前光标之间的距离小于预定义值，则光标移动单元不移动光标。
6. 根据权利要求 4或 5所述的注视点检测装置，还包括：附属单元，用于在光标位置处执行操作。
7. 根据权利要求 6所述的注视点检测装置，其中，附属单元包括鼠标、键盘、触摸板、手柄和遥控器中至少一项。
8. 一种注视点检测方法，用于计算用户在屏幕上的注视点，所述方法包括如下步骤：

参考表获取步骤，获取包括参考脸部图像与用户视线方向之间的关系的参考表；

注视点计算步骤，使用摄像头捕获用户的脸部图像，执行图像测量并查找参考表，以计算用户在屏幕上的注视点。
9. 根据权利要求 8所述的方法，其中，参考表获取步骤包括：使用摄像头获取用户的至少一个参考脸部图像，以构建包括参考脸部图像与用户视线方向之间的关系的参考表；或者

直接获取已经构建好的参考表。
10. 根据权利要求 8所述的方法，其中，注视点计算步骤包括：根据摄像头的位置，测量用户脸部图像中用户的两个瞳孔之间的中点与摄像头的距离，并通过查找参考表计算用户的视线方向；以及根据摄像头的位置、用户的两个瞳孔之间的中点与摄像头的距离以及用户的视线方向，计算用户在屏幕上的注视点。
11. 根据权利要求 8所述的方法，还包括：在计算出注视点后，如果该注视点位于屏幕之内，则将屏幕上的光标移动到注视点。
12. 根据权利要求 11所述的方法，其中：如果注视点与当前光标之间的距离小于预定义值，则不移动光标。
13. 根据权利要求 12所述的方法，其中，可以根据需要来设置所述预定义值。
14. 一种多屏幕计算机，具有围绕用户的多个屏幕，所述多屏幕计算机包括如权利要求 1-7中任意一项所述的注视点检测装置。