CN1132554C - 具有视点检测功能的电子设备 - Google Patents

具有视点检测功能的电子设备 Download PDF

Info

Publication number
CN1132554C
CN1132554C CN95107397A CN95107397A CN1132554C CN 1132554 C CN1132554 C CN 1132554C CN 95107397 A CN95107397 A CN 95107397A CN 95107397 A CN95107397 A CN 95107397A CN 1132554 C CN1132554 C CN 1132554C
Authority
CN
China
Prior art keywords
viewpoint
irradiation unit
eyeball
unusual
corneal reflex
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN95107397A
Other languages
English (en)
Other versions
CN1126582A (zh
Inventor
竹井浩文
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Publication of CN1126582A publication Critical patent/CN1126582A/zh
Application granted granted Critical
Publication of CN1132554C publication Critical patent/CN1132554C/zh
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B3/00Apparatus for testing the eyes; Instruments for examining the eyes
    • A61B3/10Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
    • A61B3/107Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for determining the shape or measuring the curvature of the cornea
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B3/00Apparatus for testing the eyes; Instruments for examining the eyes
    • A61B3/10Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
    • A61B3/113Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for determining or recording eye movement

Landscapes

  • Life Sciences & Earth Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Biophysics (AREA)
  • Ophthalmology & Optometry (AREA)
  • Engineering & Computer Science (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Physics & Mathematics (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • General Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • Eye Examination Apparatus (AREA)
  • Automatic Focus Adjustment (AREA)

Abstract

眼球照射异常是由计算机在输出电平,即角膜反射图象的亮度的基础上确定的。当确定异常时,即产生一个相应的显示和报警。同时,停止眼球照射的供电。眼球照射装置中的异常的确定是通过将角膜反射图象的输出电平与一个基准值比较,或将角膜反射图象的输出电平比或差与一个基准值比较来执行的。

Description

具有视点检测功能的电子设备
本发明涉及一种视点检测装置,及具有这种视点检测装置的电子装置。
在各种电子设备中,近来提出了基于检测使用者视点来操作装置,诸如,输入装置,选择装置,来改善它们的操作性能。
例如,视点检测对于摄像机等设备非常有效,因为摄像机要求使用者在对拍摄对象进行摄影时执行各种操作,如输入,选择。
一些摄像机具有所谓的视点输入功能,允许使用者利用他的视点选择指示例如,变焦,淡入淡出功能的标志,以便执行选定的功能,或者在取景器屏幕上利用视点选配距离测量区。
下面描述用于执行视点输入功能的视点检测装置的原理。
图1A(俯视图)和图1B(侧视图)显示了视点检测方法的原理。
参见图1A和1B,光源1206a和1206b为发光二极管(IRED)或类似元件,发射观察者不敏感的红外光。相应的光源在x轴方向(水平方向)几乎以成象透镜1211的光轴对称(见图1A)并在y轴方向(垂直方向)上处于其稍下的位置(参见图1B)。光源以散射光照射观察者的眼球。被眼球反射的照射光的光成分通过成象透镜1211被聚焦到图象传感器1212上。图2A示出了投射到图象传感器1212上的眼球图象的简图。图2B显示了图象传感器1212的输出强度。
该视点检测方法将参照附图进一步描述。首先考虑水平面。参见图1A,观察者的眼球1208的角膜1210被从光源1206b发出的红外光照射。在这种情况下,由角膜1210的表面反射光形成的角膜反射图象d(虚象)由成象透镜1211聚焦并形成于图象传感器1212的位置d′。类似地,眼球角膜1210被从光源1206a发出的红外光照射。在这种情况下,由角膜1210的表面反射光形成的角膜反射图象e(虚象)由成象透镜1211聚焦并形成于图象传感器1212的位置e′。
来自由虹膜1204包围的瞳孔1301的边缘a和b的光束分别通过成象透镜1211在图象传感器1212上的位置a′和b′形成边缘a和b的图象。假定眼球1208的光轴相对于成象透镜1211的光轴的旋转角θ较小。在这种情况下,如果瞳孔1301的边缘a和b的x坐标分别由xa和xb表示,在图象传感器1212上可以得到许多x坐标xa和xb(参见图2A中的×标志)。因此,首先,角膜中心xc可以通过圆的最小平方法计算出来。设xo为角膜1210的弯曲部分中心的x坐标,o。则相对于眼球1208的光轴的旋转角θx可由下式得出:
       oc*sinθx=xc-xo......(1)
考虑角膜反射图象d和e之间的中点k的预定的校正值δx,x坐标xo由下式计算:
          xk=(xd+xe)/2......(2)
          xo=(xd+xe)/2+δx......(3)
其中δx是从装置安装方法,眼球距离等由几何方法得到的数值(该计算方法从略)。特等式(1)代入(2)则得到:
θx=arcsin〔〔xc-{(xd+xe)/2+δx}〕/oc〕......(4)
旋转角θx由投射到传感器1212上的每个特征点的坐标加上“‘”按下式表示:
θ=arcsin〔〔xc′-{(xd′+xe′)/2+dx′}〕/oc/β〕...(5)
这里β是由眼球1208到成象透镜1211的距离,尺寸决定的放大倍数。在实际当中,放大倍数β为角膜反射图象之间的距离|xd′-xe′|的函数。
下面考虑垂直平面。图1B显示了相应的布置。假定由两个光源(IRED)1206a和1206b形成的角膜反射图象出现在相同的水平位置,并且相应的坐标用yi表示。眼球1208的旋转角θy可以用与水平平面的情况中所使用的相同的方法(除了等式(2)以外)来进行计算。设yo为曲面的中心o的y坐标。则其满足:
              yo=yi+δy......(6)
其中,δy是从装置安装方法,眼球距离等由几何方法得到的数值(该计算方法从略)。因此,水平方向的旋转角δy为:
δy=arcsin((yc′-(yi′+dy′))/oc/β)......(7)
其中yc′为图象传感器1212上沿垂直方向上的瞳孔中心的坐标。
利用一个由取景器光学系统决定的常数m,在摄像机的取景器上的水平和垂直平面上的位置坐标(xn,yn)可分别由下式得出:
xn=m*arcsin〔〔xc′-{(xd′+xe′)/2+δx′}〕/oc/β〕...(8)
yn=m*arcsin〔〔yc′-{(yi′+δy′〕/oc/β〕......(9)
从图2A到图2C中可以看出,瞳孔边缘是利用图象传感器1212的输出波形的前导边(xb′)和尾边(xa′)检测的。此外,角膜反射图象区的坐标是利用斜向的前导边部分(xe′和xd′)得到的。
下面描述利用视点执行焦距调整的功能。图3显示了具有视点焦距调整功能的摄像机的示意图。
图3中的摄像机包括一个具有变焦透镜及对要摄像的物体成象的透镜图象拾取系统101,具有取景显示屏102可观察由透镜图象拾取系统101成象的物体的电子取景器103,在电子取景器103之前放置的物镜104,检测摄影者眼睛105的视点的视点检测单元106,用于在取景器屏幕上显示图象的显示电路107,指示聚焦区轮廓和摄影者所需的信息如,磁带计数器和摄影模式的AF帧,以及一个系统控制器108,用于控制该摄像机的相应的单元。
视点检测单元106包括一个红外发光二极管160,用于向摄影者的眼睛105发射红外光,分光镜161传递可见光反射红外光,聚焦透镜162将分光镜161反射的红外光聚焦,图象拾取元件(光电转换元件如CCD)163,用于将聚焦透镜162聚焦的红外光转换成电信号,视点检测电路164,用于根据摄影者在图象拾取元件163上的眼睛105的图象获得摄影者的取景器屏幕102上视点。
由于分光镜161可以通过可见光,摄影者可以通过物镜104观察取景器屏幕102。此外,由于分光镜161反射红外光,从红外发光二极管160发射到眼睛105的反射的反射图象由聚焦透镜162聚焦并形成于图象拾取元件163上。
图4显示了视点检测电路164的简图。视点检测电路164主要包括具有存储器22的微计算机21,A/D转换器23,D/A转换器24,CPU25。CPU25将红外光控制信号通过D/A转换器24传送到含有红外发光二极管160的红外光发射单元(未示出),控制红外光开启定时和红外光的发射量。
CPU25输出一个光电转换元件控制信号,用于控制光电转换元件163。
表示根据红外光的辐射在光电转换元件163上形成的摄影者的眼睛105的图象的视频信号由A/D转换器23进行A/D转换,得到的数据然后存储在内部存储器22中。摄影者在取景器屏幕102上的视点于是可以在存储的视频数据的基础上根据上述的原理或在日本专利申请No.1-241511和1-32312中公开的算法得出。
图5为一个流程图,简要地显示了构成视点检测电路164的微计算机21中的CPU25中所采用的处理程序。
CPU25输出一个光电转换元件工作信号(步骤S1601),和一个IRED导通信号(步骤S1602)。CPU25处于等待状态,直到红外光辐射到摄影者的眼球105,并在光电转换元件163上形成反射图象(步骤S1603)。然后CPU25输出IRED断开信号(步骤S1604)。CPU25从光电转换元件163中读出表示摄影者眼睛105的视频信号(步骤S1605),利用A/D转换器23A/D转换该信号,并将得到的数据存储在存储器22中(步骤S1606)。
接下来,CPU25输出一个光电转换元件工作信号(步骤S1607),并且根据存储在内部存储器22中的表示摄影者眼睛105的视频信号,执行视点操作处理,以得出摄影者在取景器屏幕102上的视点(步骤S1608)。视点数据被输入到系统控制器108(步骤S1609)。CPU15然后检测是否继续进行视点检测(步骤S1610)。如果视点检测继续,流程返回到步骤S1601。否则,流程返回到步骤S1610再次检测是否继续进行视点检测功能。系统控制器108根据视点数据,利用视点开关,驱动透镜图象拾取系统101,控制在摄影者视点上的摄像机的焦距或执行变焦功能,或淡入淡出功能。
但是,在这种常规的布置中,如果由于红外发光二极管10等发生故障,造成摄影者的眼睛不能被正常地照射的话,由于不能正确形成上述角膜反射图象,所以不能得到正确的视点信息。
假定图1A中的发光二极管1206a发出的光比正常的光暗。在这种情况下,如图2C中的图象传感器的输出强度特性所指示,对应于瞳孔边缘部分Xb′1的前导边变小。结果,微处理机无法确认该部分为瞳孔边缘。由于这个原因,摄影者的视点难以准确地被检测。结果,摄像机的聚焦点不同于摄影者的视点,或由视点开关执行的变焦或淡入淡出等功能不同于摄影者所需的视点开关所应执行的那样。
此外,由于发出人眼不敏感的红外光的红外发光二极管(IRED)被用来作为照射摄影者眼睛的手段,摄影者的肉眼是无法检测IRED的照射状态的。
本发明是考虑上述情况以后作出的,本发明的一个目的是自动确定在视点检测中眼球照射装置中的异常。
本发明的第二个目的是自动地确定在视点检测中眼球照射装置中的异常并采取适当的措施。
根据本发明的一个实施例,提供了一种视点检测设备,包括:
A)眼球照射装置,用于照射眼球;以及
B)视点检测装置,用于根据对应于由所述眼球照射装置照射到眼球上的光的角膜反射图象,检测视点;
其特征在于进一步包括:
C)亮度检测装置,用于检测角膜反射图象的亮度;
D)异常确定装置,用于根据亮度检测装置检测的角膜反射图象的亮度,确定眼球照射装置中的异常;以及
E)控制装置,用于在所述异常确定装置确定所述眼球照射装置的异常的情况下,停止或节省所述眼球照射装置和/或视点检测装置的电力供应。
根据本发明的另一个实施例,提供了一种视点检测设备,包括:
A)眼球照射装置,用于照射眼球;
B)视点检测装置,用于根据对应于由所述眼球照射装置照射到眼球上的光的角膜反射图象,检测视点;
C)亮度检测装置,用于检测角膜反射图象的亮度;
D)异常确定装置,用于根据亮度检测装置检测的角膜反射图象的亮度,确定眼球照射装置中的异常;
E)报警装置,用于当所述异常确定装置确定所述眼球照射装置异常时,进行异常报警。
根据本发明的另一个实施例,提供了一种视点检测设备,包括:
A)一个电子取景器;
B)眼球照射装置,用于照射眼球;
C)视点检测装置,用于根据对应于由所述眼球照射装置照射到眼球上的光的角膜反射图象,检测视点;
D)亮度检测装置,用于检测角膜反射图象的亮度;
E)异常确定装置,用于根据亮度检测装置检测的角膜反射图象的亮度,确定眼球照射装置中的异常;
F)报警装置,用于当所述异常确定装置确定所述眼球照射装置异常时,进行异常报警。
本发明的第三方面,是提供一种摄像机,在视点检测装置中检测到异常以后立即停止工作并显示报警。
本发明的第四个方面,是提供一种视点检测装置,可以根据角膜反射图象进行高精度的检测。本发明的上述和其它目的,特征,及优点通过下面结合附图的详细描述,将会更为明显。
图1A和图1B为说明视点检测原理的视图;
图2A到图2C为说明视点检测原理的视图;
图3为显示具有视点检测功能的图象拾取装置的框图;
图4为显示视点检测电路的结构的视图;
图5为一个流程图,显示了由视点检测电路执行的视点检测处理过程;
图6为显示根据本发明的实施例的具有视点检测功能的图象拾取装置的简要结构的框图;
图7为显示本发明的实施例中的视点检测电路的框图;
图8为显示本发明的实施例中的红外光辐射单元的框图;
图9为一种流程图,显示了由本发明的实施例中的视点检测电路执行的视点检测处理;
图10为显示在本发明的第一实施例中的角膜反射图象观察处理的流程图;
图11A到11D为显示代表角膜反射图象的输出信号的示意图;
图12为显示本发明的第一实施例中的两个角膜反射图象的输出电平之间的关系的曲线;
图13A和图13B为显示眼球照射出错是如何报警的示意图;
图14为显示本发明优点第二实施例中的角膜反射图象观察处理的流程图;
图15为显示本发明的第二实施例中的两个角膜反射图象的输出电平之间的关系的曲线;
图16为一个流程图,显示了本发明的第三个实施例中角膜反射图象观察处理的流程。
下面参考图象详细描述本发明的实施例。由于视点检测原理与现有技术相同,这里略去其描述。
图6为显示根据本发明的实施例的具有视点检测功能的图象拾取装置的简要结构的框图。由于该装置的构成元件与图3所示的相同,这里略去其说明。
图7为显示本发明的实施例中的视点检测电路的框图。由于视点检测电路164的构成元件与图15中的相同,所示只简要描述其不同点。微计算机21除了输出常规的控制信号外,还输出眼球照射出错信号,和红外光电源控制信号。
图8显示了本发明的实施例中的红外光辐射单元的框图。该红外光辐射单元包括一个开关31和一个IRED导通电路32。在该红外光辐射单元160中(等效于图6中的红外发光二极管),外部电源(未示出)被输入到开关31。
IRED导通电路32包括一个红外发光二极管(IRED),一个晶体管,或类似元件。IRED由来自视点检测电路164的红外光控制信号控制发光。IRED导通电路的电源连接到开关31。开关31根据来自视点检测电路164的红外光电源控制信号被断开/接通。
图9为一种流程图,显示了由本发明的实施例中的视点检测电路164中的微计算机21执行的处理流程。
从步骤S401到S408,微计算机21的CPU25执行与图5中所示的布置相同的处理。即,CPU25输出一个光电转换元件工作信号(步骤S401),和一个IRED导通信号(步骤S402)。然后,CPU25等待,直到红外光被辐射到摄影者的眼球105上,以及在光电转换元件163上形成一个反射图象(步骤S403),并且输出一个IRED断开信号(步骤S404)。
CPU25从光电转换元件163中读取代表摄影者眼球105的视频信号(步骤S405)。CPU25利用A/D转换器A/D转换该信号,并将得到的数据存储在内部存储器22中(步骤S406)。CPU25输出光电转换元件停止工作信号(步骤S407),根据存储在内部存储器22中的代表摄影者眼球105的视频信号,通过执行视点操作处理,得出在取景器屏幕102上的摄影者的视点(步骤S408)。
接下来,CPU25执行预定的角膜反射图象观察处理(步骤S409),并核查眼球照射是否正常执行(步骤S410)。如果确定眼球照射正常执行,视点数据被输出到系统控制器108(步骤S411)。CPU25然后是否继续进行视点检测(步骤S412)。如果确定视点检测继续,流程返回到步骤S401。否则,流程返回到步骤S412,再次核查是否继续视点检测。
如果确定眼球照射执行异常,CPU25向系统控制器108输出眼球照射出错信号(步骤S413),并且向红外光辐射单元160(步骤S414)输出红外光电源断开信号(步骤S414)。
下面参见图10详细描述图9中的角膜反射图象观察处理的第一实施例。参见图10,电平Pe为角膜反射图象e的图象输出电平,电平Pd为角膜反射图象d的图象输出电平。
在角膜反射图象观察处理中,首先,角膜反射图象e和d的图象输出电平Pe和Pd的图象输出电平(亮度,发光密度)互相比较,计算出两图象输出电平之比(步骤S501到S503)。CPU25核查该比值a是否相等或低于最大可允许角膜反射图象比amax(步骤S504)。如果a>amax,CPU25确定眼球照射异常(步骤S510)。
此外,如果图象电平Pe和Pd高于一个最大图象输出电平Pmax(步骤S505和S506),或低于一个最小图象输出电平Pmin(步骤S507和S508),CPU25确定眼球照射异常。如果这些条件都能得到满足,则CPU25确定眼球照射正常(步骤S509)。
图12显示了上述确定的状态。参见图12,纵坐标表示角膜反射图象d的图象输出电平Pd;横坐标表示角膜反射图象e的图象输出电平Pe。在图12中,当图象输出电平Pd和Pe的关系对应于阴影区时,则确定眼球照射正常。反之,则确定眼球照射异常。
利用该处理过程,在图11B所示的角膜反射图象的例子中,确定眼球照射是正常的。在图11C和11D中,确定眼球照射异常。如果确定眼球照射异常,一个眼球照射出错信号被输出到图6中的系统控制器108。系统控制器108控制显示电路107,执行眼球照射出错显示。结果,显示电路107执行眼球照射出错显示,如图13A所示的在取景器屏幕102上的显示。
报警可以不通过文字信息给出,可以通过将正常状态下的AF帧的导通显示变为闪烁显示,如图13B所示。如果图象输出电平Pe和Pd之一高于最大图象输出电平Pmax或小于最小图象输出电平Pmin,则给出报警,指示在相应的发光二极管1206a和1206b中出现异常。利用这种方式,可以单独地给出报警,指示哪一个发光二极管出现异常,从而可以精确地维护。
如果确定眼球照射出错,图6中的视点检测电路164向红外光辐射单元160输出红外光电源断开信号。利用这种操作,开关31断开,断开IRED导通电路32的电源。因此,可以减少不必要的电源消耗。此外,当不希望的视点开关被导通时,该操作可以防止变焦,淡入淡出的误操作,或防止摄像机聚焦到要拍摄的物体之外的物体上。
下面参见图14的流程描述第二实施例的角膜反射图象观察处理。
在第二实施例中,眼球照射异常判定不是对每个视点检测处理都执行,但对每10个视点检测处理操作执行一次。
更具体地说,视点检测处理计数器C递增“1”(步骤S901),并且核查视点检测处理产计数器C是否为“10”(步骤S902)。如果视点检测处理计数器不为“10”,处理立即中断,从而避免眼球照射异常确定处理。
如果视点检测处理计数器为“10”,视点检测处理计数器C复位为“0”(步骤S904)。于是,按照几乎与图10中的第一实施例中相同的条件,执行眼球照射异常判定(步骤S904到S910),于是,这里省去了更详细的描述。但是,这里与第一实施例不同的是使用了两个图象输出电平之差的绝对值D取代二图象输出电平之比a,作为确定标准,当绝对值D大于最大允许值Dmax时,则确定眼球照射异常。
在该实施例中,用以确定正常眼球照射并作为上述处理结果的角膜图象e和d的图象输出电平Pe和Pd具有对应于图15中所示的阴影区的关系。在该实施例中,角膜反射图象观察处理所需的时间与视点检测处理所需的时间相比要小。因此,在连续的视点检测处理中,单位时间内视点检测的次数可以减少。
在实施例中,眼球照射异常确定可以在与第一实施例中相同的条件下进行。此外,眼球照射异常确定的间隔可以不是每10次视点检测处理操作进行一次,可以任意设定。此外,该可以根据摄影者的眼睛的状态设定。
下面参照图16的流程图描述第三实施例中的角膜反射图象观察处理。
在第三实施例中,眼球照射异常判定是每隔10次视点检测处理操作进行一次。但是,与第一和第二实施例的当判定条件满足一次,即确定异常眼球照射不同,利用附加步骤S1109,S1110,S1111,当判定条件满足五次,即进行异常眼球照射判定。
更具体地说,当判定条件满足一次,判定条件满足计数器E递增“1”(步骤S1110),并且核查判定条件满足计数器是否达到“5”(步骤S1111)。如果确定判定条件满足计数器已经达到“5”,则确定异常眼球照射(步骤S1113)。如果确定判定条件满足计数器没有达到“5”,则确定正常眼球照射(步骤S1112)。
如果判定条件满足五次,判定条件满足计数器E被清除为“0”(步骤S1109)。当判定条件满足五次,则确定眼球照射异常。
利用这种处理,由于在眼睛中的眼泪或类似物而造成角膜反射图象中的瞬时变化,并不立即判定为异常眼球照射。因此,可以更精确地检测由于异常眼球照射引起的角膜反射图象中的变化。在该实施例中,异常眼球照射是当判定条件最后满足五次时确定的。很明显,该计数的门限值不必为五次,可以任意设定。
本发明并不限定于上述实施例。例如,本发明可以应用于只有一个眼球照射装置(光源),如红外发光二极管,而不是多个眼球照射装置的情况。
如上所述,根据本发明的实施例,由于眼球照射装置中的异常是根据每个角膜反射图象的亮度来确定的,所以眼球照射装置中的异常可以在视点检测中自动确定。
此外,异常确定装置根据亮度检测装置检测的每个角膜反射图象的亮度,确定眼球照射装置中的异常。当确定为异常时,由电源停止装置停止向眼球照射装置供电。于是,眼球照射装置中的异常可以在视点检测操作中自动地检测,并且可以自动地采取适当的措施,如切断电源操作。
根据上述实施例,异常确定装置根据亮度检测装置检测的每个角膜反射图象的亮度,确定眼球照射装置中的异常。当确定为异常时,报警装置给出相应的报警。利用这种操作,眼球照射装置中的异常可以在视点检测操作中自动地检测,并且可以迅速地采取适当的措施。
此外,亮度检测装置在多个位置检测每个角膜反射图象的亮度。利用这种操作,眼球照射装置中的异常可以在视点检测操作中更精确地自动地检测,并且可以采取更适当的措施。
根据上述实施例,异常确定装置通过将在多个位置由亮度检测装置检测的每个角膜反射图象的亮度之间的比与一个基准值比较,确定眼球照射装置中的异常。从而,眼球照射装置中的异常可以在视点检测操作中更精确地自动地检测,并且可以采取更适当的措施。
此外,根据上述实施例,异常确定装置通过将在多个位置由亮度检测装置检测的每个角膜反射图象的亮度之间的差与一个基准值比较,确定眼球照射装置中的异常。从而,眼球照射装置中的异常可以在视点检测操作中更精确地自动地检测,并且可以采取更适当的措施。
另外,根据上述实施例,在眼球照射装置中的各种异常的确定是在视点检测装置执行视点检测处理若干次的每次执行的。利用这种操作,眼球照射装置中的异常可以在视点检测操作中更精确地自动地检测,并且可以采取更适当的措施。此外,通过增加单位时间的视点检测处理计数,可以实现高精度的判定。
在视点检测处理由视点检测装置执行若干次以后的同时,在预定的判定条件最后满足时,异常判定装置确定眼球照射装置中的异常。利用这种操作,眼球照射装置中的异常可以在视点检测操作中更精确地自动地检测,并且可以采取更适当的措施。此外,当在眼睛中的眼泪或类似物而造成角膜反射图象中的瞬时变化时,该操作可以防止眼球照射装置中的异常的错误判定。因此,可以执行更可靠的检测和判定。
如上所述,眼球照射装置中的异常可以在视点检测操作中自动地检测,眼球照射装置的电源根据判定而断开,或产生报警,从而改善可维护性并减少不必要的电源消耗。而且,当不希望的视点开关导通时,该操作可防止所不想要的变焦和淡入淡出等,或者防止摄像机聚焦到拍摄物体以外的物体上。

Claims (22)

1.一种视点检测设备,包括:
A)眼球照射装置,用于照射眼球;以及
B)视点检测装置,用于根据对应于由所述眼球照射装置照射到眼球上的光的角膜反射图象,检测视点;
其特征在于进一步包括:
C)亮度检测装置,用于检测角膜反射图象的亮度;
D)异常确定装置,用于根据亮度检测装置检测的角膜反射图象的亮度,确定眼球照射装置中的异常;以及
E)控制装置,用于在所述异常确定装置确定所述眼球照射装置的异常的情况下,停止或节省所述眼球照射装置和/或视点检测装置的电力供应。
2.根据权利要求1所述的设备,其中所述的眼球照射装置具有一个红外发光二极管(IRED)并用红外光照射眼球。
3.根据权利要求1所述的设备,其中所述视点检测装置包括一个用于形成角膜反射图象的CCD,所述亮度检测装置在多个位置检测角膜反射图象的亮度。
4.根据权利要求1所述的设备,其中所述的异常确定装置通过将在多个位置由亮度检测装置检测的角膜反射图象的亮度之间的比与一个基准值比较,确定眼球照射装置中的异常。
5.根据权利要求1所述的设备,异常确定装置通过将在多个位置由亮度检测装置检测的角膜反射图象的亮度之间的差与一个基准值比较,确定眼球照射装置中的异常。
6.根据权利要求1所述的设备,异常确定装置通过将在多个位置由亮度检测装置检测的角膜反射图象的亮度与一个基准值比较,确定眼球照射装置中的异常。
7.根据权利要求1所述的设备,异常确定装置对在眼球照射装置中的异常的确定是在视点检测装置执行视点检测处理若干次的每次执行的。
8.根据权利要求7所述的设备,其中当预定的判定条件满足不少于在由所述的视点检测装置执行的若干次视点检测中的预定次数时,所述的异常确定装置判定所述的眼球照射装置异常。
9.根据权利要求8所述的设备,其中当预定的判定条件满足在由所述的视点检测装置执行的若干次视点检测中的预定次数时,所述的异常确定装置判定所述的眼球照射装置异常。
10.一种视点检测设备,包括:
A)眼球照射装置,用于照射眼球;
B)视点检测装置,用于根据对应于由所述眼球照射装置照射到眼球上的光的角膜反射图象,检测视点;
C)亮度检测装置,用于检测角膜反射图象的亮度;
D)异常确定装置,用于根据亮度检测装置检测的角膜反射图象的亮度,确定眼球照射装置中的异常;
E)报警装置,用于当所述异常确定装置确定所述眼球照射装置异常时,进行异常报警。
11.根据权利要求10所述的设备,还包括电源停止装置,用于当所述异常确定装置确定所述眼球照射装置异常时,停止向所述眼球照射装置供电。
12.根据权利要求10所述的设备,其中所述的眼球照射装置具有一个红外发光二极管(IRED),其中所述视点检测装置包括一个用于形成角膜反射图象的CCD,所述亮度检测装置在多个位置检测角膜反射图象的亮度。
13.根据权利要求12所述的设备,其中所述的异常确定装置通过将在多个位置由亮度检测装置检测的角膜反射图象的亮度之间的比与一个基准值比较,确定眼球照射装置中的异常。
14.根据权利要求12所述的设备,异常确定装置通过将在多个位置由亮度检测装置检测的角膜反射图象的亮度之间的差与一个基准值比较,确定眼球照射装置中的异常。
15.根据权利要求12所述的设备,异常确定装置通过将在多个位置由亮度检测装置检测的角膜反射图象的亮度与一个基准值比较,确定眼球照射装置中的异常。
16.根据权利要求12所述的设备,异常确定装置对在眼球照射装置中的异常的确定是在视点检测装置执行视点检测处理若干次的每次执行的。
17.根据权利要求12所述的设备,其中当预定的判定条件满足在由所述的视点检测装置执行的若干次视点检测中的预定次数时,所述的异常确定装置判定所述的眼球照射装置异常。
18.根据权利要求17所述的设备,其中所述的异常确定装置通过将在多个位置由亮度检测装置检测的角膜反射图象的亮度之间的比与一个基准值比较,确定眼球照射装置中的异常。
19.根据权利要求17所述的设备,异常确定装置通过将在多个位置由亮度检测装置检测的角膜反射图象的亮度之间的差与一个基准值比较,确定眼球照射装置中的异常。
20.根据权利要求17所述的设备,异常确定装置通过将在多个位置由亮度检测装置检测的角膜反射图象的亮度与一个基准值比较,确定眼球照射装置中的异常。
21.一种视点检测设备,包括:
A)一个电子取景器;
B)眼球照射装置,用于照射眼球;
C)视点检测装置,用于根据对应于由所述眼球照射装置照射到眼球上的光的角膜反射图象,检测视点;
D)亮度检测装置,用于检测角膜反射图象的亮度;
E)异常确定装置,用于根据亮度检测装置检测的角膜反射图象的亮度,确定眼球照射装置中的异常;
F)报警装置,用于当所述异常确定装置确定所述眼球照射装置异常时,进行异常报警。
22.根据权利要求21所述的设备,还包括电源停止装置,用于当所述异常确定装置确定所述眼球照射装置异常时,停止向所述眼球照射装置供电。
CN95107397A 1994-06-17 1995-06-16 具有视点检测功能的电子设备 Expired - Fee Related CN1132554C (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP159397/94 1994-06-17
JP159397/1994 1994-06-17
JP6159397A JPH089222A (ja) 1994-06-17 1994-06-17 視線検出機能付き撮像装置

Publications (2)

Publication Number Publication Date
CN1126582A CN1126582A (zh) 1996-07-17
CN1132554C true CN1132554C (zh) 2003-12-31

Family

ID=15692891

Family Applications (1)

Application Number Title Priority Date Filing Date
CN95107397A Expired - Fee Related CN1132554C (zh) 1994-06-17 1995-06-16 具有视点检测功能的电子设备

Country Status (6)

Country Link
US (1) US5757428A (zh)
EP (1) EP0687441B1 (zh)
JP (1) JPH089222A (zh)
KR (1) KR100224537B1 (zh)
CN (1) CN1132554C (zh)
DE (1) DE69520388D1 (zh)

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7706583B2 (en) * 2002-11-11 2010-04-27 Canon Kabushiki Kaisha Image processing apparatus and method
JP2004260615A (ja) 2003-02-26 2004-09-16 Canon Inc 撮像装置
US7259785B2 (en) * 2003-04-28 2007-08-21 Hewlett-Packard Development Company, L.P. Digital imaging method and apparatus using eye-tracking control
US7697827B2 (en) 2005-10-17 2010-04-13 Konicek Jeffrey C User-friendlier interfaces for a camera
KR101361857B1 (ko) * 2007-08-24 2014-02-21 삼성전자주식회사 휴대단말에서 적외선을 이용한 촬영 장치 및 방법
US8976110B2 (en) 2011-10-27 2015-03-10 Tobii Technology Ab Power management in an eye-tracking system
JP6017381B2 (ja) * 2013-07-22 2016-11-02 オリンパス株式会社 像ブレ補正装置及び撮像装置
US9774776B2 (en) * 2013-09-12 2017-09-26 Hitachi Maxell, Ltd. Video recording device and camera function control program
JP6464013B2 (ja) * 2015-04-01 2019-02-06 富士フイルム株式会社 撮影装置および方法
CN107223276B (zh) * 2017-04-26 2020-03-20 深圳市汇顶科技股份有限公司 眼球遥控系统及电子装置
CN108354584B (zh) * 2018-03-06 2020-12-29 京东方科技集团股份有限公司 眼球追踪模组及其追踪方法、虚拟现实设备
CN114025151B (zh) * 2021-09-23 2023-11-14 北京鹰瞳科技发展股份有限公司 眼底相机故障检测方法、装置及存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE4240583A1 (en) * 1991-11-29 1993-06-03 Topcon Corp Apparatus for examination and photography of corneal endothelium - has three optical systems for illuminating cornea and processing reflections for image forming and automatic photography.
EP0589857A1 (en) * 1992-09-23 1994-03-30 Optikon Oftalmologia S.P.A. An apparatus for topographical analysis of anatomical surfaces, in particular of cornea
EP0596749A1 (en) * 1992-11-05 1994-05-11 Nikon Corporation Ophtalmologic apparatus

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS56156136A (en) * 1980-05-02 1981-12-02 Asahi Optical Co Ltd Apparatus for detecting eye blink during detection
JP2505854B2 (ja) * 1988-03-23 1996-06-12 キヤノン株式会社 視線検出手段を備えるカメラ
JP2632941B2 (ja) * 1988-07-20 1997-07-23 キヤノン株式会社 カメラ
US5570156A (en) * 1991-08-26 1996-10-29 Canon Kabushiki Kaisha Camera utilizing detection of visual line
JPH05164958A (ja) * 1991-12-19 1993-06-29 Nikon Corp 視線検出装置付きカメラ
DE69333674T2 (de) * 1992-06-02 2006-02-02 Canon K.K. Optisches Gerät zur Rotationsdetektion eines Augapfels eines Beobachters
JPH0694979A (ja) * 1992-09-14 1994-04-08 Nikon Corp 視線検出装置付きカメラ

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE4240583A1 (en) * 1991-11-29 1993-06-03 Topcon Corp Apparatus for examination and photography of corneal endothelium - has three optical systems for illuminating cornea and processing reflections for image forming and automatic photography.
EP0589857A1 (en) * 1992-09-23 1994-03-30 Optikon Oftalmologia S.P.A. An apparatus for topographical analysis of anatomical surfaces, in particular of cornea
EP0596749A1 (en) * 1992-11-05 1994-05-11 Nikon Corporation Ophtalmologic apparatus

Also Published As

Publication number Publication date
US5757428A (en) 1998-05-26
EP0687441B1 (en) 2001-03-21
DE69520388D1 (de) 2001-04-26
KR100224537B1 (ko) 1999-10-15
CN1126582A (zh) 1996-07-17
JPH089222A (ja) 1996-01-12
EP0687441A1 (en) 1995-12-20

Similar Documents

Publication Publication Date Title
CN1132554C (zh) 具有视点检测功能的电子设备
CN1038092C (zh) 视点检测器和使用该视点检测器的调节器
CN109478088A (zh) 一种防止由电子屏幕设备近距离使用引起视觉退化的系统和方法
CN1768352A (zh) 投影设备和投影方法
CN1989894A (zh) 眼科测定装置的对准方法及对准装置
CN1722826A (zh) 物体追踪装置、物体追踪系统以及物体追踪方法
CN1584729A (zh) 图像投影方法和设备
JP2006280938A (ja) 安全な眼球検出
CN1744672A (zh) 图像捕捉设备及其控制方法
JP2008505673A (ja) 角膜内皮の検査用の反射顕微鏡および同顕微鏡の操作方法
CN110198409B (zh) 终端的控制方法及控制装置、终端及计算机可读存储介质
EP3979440A1 (en) Adjustment method, adjustment apparatus, terminal and computer-readable storage medium
KR20110094037A (ko) 비디오 적외선 망막 이미지 스캐너
US20230102878A1 (en) Projector and projection method
CN1119809A (zh) 视点检测器
CN1689319A (zh) 摄影装置、摄影方法、及其计算机程序
US20100046936A1 (en) Photographing control method and apparatus using strobe
JP2008145905A (ja) 撮像装置および撮像装置用フラッシュ装置
CN109333097A (zh) 定位方法及定位装置
JP7318793B2 (ja) 生体認証装置、生体認証方法、及び、そのプログラム
JP3813015B2 (ja) 画像入力装置及び個体識別装置
US11734812B2 (en) Fused imaging device and method
JPH11206713A (ja) 視線検出用機器およびこれを用いた視線検出装置
US10809534B2 (en) Photography device
US11763442B2 (en) Fused imaging device and method

Legal Events

Date Code Title Description
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C06 Publication
PB01 Publication
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20031231

Termination date: 20140616

EXPY Termination of patent right or utility model