CN102918834A - 用于空间控制的景物照明的系统和方法 - Google Patents

用于空间控制的景物照明的系统和方法 Download PDF

Info

Publication number
CN102918834A
CN102918834A CN2011800220561A CN201180022056A CN102918834A CN 102918834 A CN102918834 A CN 102918834A CN 2011800220561 A CN2011800220561 A CN 2011800220561A CN 201180022056 A CN201180022056 A CN 201180022056A CN 102918834 A CN102918834 A CN 102918834A
Authority
CN
China
Prior art keywords
light source
camera
focus area
brightness
luminance level
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2011800220561A
Other languages
English (en)
Other versions
CN102918834B (zh
Inventor
纳尔逊·G·普布利科费尔
詹森·赫弗南
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Eyefluence Inc
Original Assignee
EYE COM CORP
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by EYE COM CORP filed Critical EYE COM CORP
Publication of CN102918834A publication Critical patent/CN102918834A/zh
Application granted granted Critical
Publication of CN102918834B publication Critical patent/CN102918834B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G02—OPTICS
    • G02C—SPECTACLES; SUNGLASSES OR GOGGLES INSOFAR AS THEY HAVE THE SAME FEATURES AS SPECTACLES; CONTACT LENSES
    • G02C11/00—Non-optical adjuncts; Attachment thereof
    • G02C11/10—Electronic devices other than hearing aids
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/10—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
    • H04N23/11—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths for generating image signals from visible and infrared light wavelengths
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/56—Cameras or camera modules comprising electronic image sensors; Control thereof provided with illuminating means
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/61—Control of cameras or camera modules based on recognised objects
    • H04N23/611—Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/71—Circuitry for evaluating the brightness variation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/74—Circuitry for compensating brightness variation in the scene by influencing the scene brightness using illuminating means
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/183—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • General Physics & Mathematics (AREA)
  • General Health & Medical Sciences (AREA)
  • Otolaryngology (AREA)
  • Acoustics & Sound (AREA)
  • Ophthalmology & Optometry (AREA)
  • Optics & Photonics (AREA)
  • Image Processing (AREA)
  • Studio Devices (AREA)
  • Circuit Arrangement For Electric Light Sources In General (AREA)
  • Image Analysis (AREA)
  • Exposure Control For Cameras (AREA)

Abstract

提供为机器视觉应用产生空间一致的或受控亮度水平的景物照明系统。所述系统包括照相机、优先照明照相机视场内不同区域的多个光源、以及耦接至所述照相机和光源的处理单元。对照相机视场内的光源的焦点区域进行采样以确定平均区域亮度并且与目标亮度水平进行比较。处理单元控制光源以增加或降低照明水平以朝向视场内的目标亮度水平会聚。可以以连续的视频图像来重复光源的调节直到实现目标亮度水平。一旦实现，迭代反馈控制可以锁定用于一些应用，而对于其他应用，迭代过程可以周期性地或连续地继续以解决不同的景物或照明条件的变化。

Description

用于空间控制的景物照明的系统和方法
关于联邦政府资助的研究与开发的声明
美国政府对该发明可能具有付费式许可并且在有限的情况下具有要求专利所有人基于合理的条款许可他人的权利，如由健康与人类服务部（Department of Health and Human Service）、公共卫生局（Public HealthServices）、疾病控制中心（CDC）授予的批准号1R43CE 00151-01、国防部（美国军队）合同号W81XWH-05-C-0045、美国国防部国会研究计划号（Department of Defense Congressional Research Initiative）W81XWH-06-2-0037、和美国交通运输部国会研究计划协议授予号（Department of Transportation Congressional Research Initiative AgreementAward）DTNH 22-05-H-01424规定的条款。
技术领域
本发明涉及用于控制物体的照明的设备和方法，更具体地，涉及通过调节照明的多束源（multiple sources）来例如在物体例如个体的眼睛或面部的摄像机图像内产生空间上受控的亮度，例如基本上一致或可变的亮度的设备和方法，例如，用于机器视觉的目的。
背景技术
本发明涉及用于机器视觉应用的照明方案（illumination schemes），尤其当在照相机视场内的表面和物体的反射率变化时。常规的照明方案在包含弯曲表面的景物或超越单个二维平面的物体内经常产生阴影和/或闪烁（即，热点）。当照明设备（照明）必须局限于有限数量的源时和/或当光源必须邻近被照明的景物定位时，这些问题变严重。
涉及机器视觉的应用正变得日益普通。部分地，由于电子学和软件开发产业的技术进步这种应用增加，并且照相机和信息处理单元的成本减少。来自机器视觉应用范围的少量实例包括：物体识别、距离测量、食品检查、装配线的质量控制、阅读条形码、物体计数、安全监控和生物测量。利用机器视觉的部门和行业包括：军事、医疗、安全、半导体制造、制造业、机器人和玩具。
如果图像中的区域具有不足的照明，则几乎所有图像处理技术和算法都受到影响。如果照明水平太低，则结果是亮度强度的变化不足以区分物体的边界或反射率的区域变化。减少的信号或光强度也导致在图像内显现检测器噪声。低信噪比一般导致显示“粒面”并难于处理的图像。
相反，如果照明水平太高，则照相机或检测器内的像素变得饱和。再次，全饱和像素（完全饱和像素）不能为图像处理算法提供关于亮度水平变化的信息以区分边缘或边界。在一些类型的摄像机中，饱和像素也可以“溢出（bleed over）”以提高附近像素的视亮度（表面亮度，apparentbrightness）。
在大多数情况下，信息内容在有太少或太多光子的图像区域内会丢失。图像处理怎么也不能找回丢失的信息。在这些情况下，必须改善所有视频图像的空间区域中的照明以产生可靠的机器视觉应用。
例如，物体尺寸的精确测量涉及物体边缘的检测，其中边缘被定义为其中存在明显的颜色或亮度梯度的区域。如果物体边缘的照相机视场（视图）被阴影扭曲，则边缘检测算法的可靠性和精确性被降低。
包括物体识别的机器视觉应用对照明条件特别敏感。暗角（死角）、由于照明引起的颜色变化、由表面照明的不同角度产生的亮度变化、阴影和热点可以由于照明条件而使得物体不可识别。
当照明源被限制为邻近被照明的物体时，物体的受控照明尤其不同。例如，这种限制可归因于例如期望使设备紧凑和/或通过将照明仅限制在照相机的视场来减少功率消耗。使用安装到眼镜或头戴式装置上的设备来照明眼睛时就是这种情况。这些类型的系统或设备的实例可以在William C.Torch的美国专利7515054B2中找到，其公开了通过监测眼睛运动促进的生物传感器、通信和控制器应用。
发明内容
本发明涉及用于控制物体的照明的设备和方法。更具体地，本发明涉及通过调节照明的多束源（multiple sources）来例如在物体例如个体的眼睛或面部的摄像机图像内产生空间上受控的亮度，例如基本上一致（均匀）的亮度的设备和方法，例如，用于机器视觉的目的。
根据前述背景，本文中的设备、系统和方法可为机器视觉应用提供改善的照明方法和系统。该方法通常包括两个或多个以与照相机的视角不同的角度照射景物的不同区域的电磁辐射源。这些照明源可以各自包括一个或多个照明装置，如白炽灯泡、弧光灯、或发光二极管（LED）。照相机可以是帧接收器和处理系统的部件，其产生反馈信号以基于捕获的图像来单独控制照明源。目标亮度水平可以是恒定的或者可以根据空间（例如，为了产生穿过景物的亮度梯度）和/或时间（例如，当通过源以不同波长交替照明景物）变化。受控的和/或一致的照明可允许涉及位置测量和物体识别的机器视觉应用更简单、快速和可靠地进行。
根据一个实施方式，提供了尤其当在景物内存在反射率的空间变化时，产生具有基本上空间一致和/或受制的景物亮度的照相机图像的系统和方法。
根据另一实施方式，提供了由弯曲的和/或与照相机的图像平面（像平面）不共面的表面产生具有受控的或基本上一致亮度的图像的系统和方法。
例如，该系统和方法可使用适当地设置在远离照相机的视线的一个或多个照明源。从锐角的照明可帮助展现如表面裂纹或缺口的精细结构。
根据又一实施方式，提供的系统和方法可以减少由超过（rise above）表面的三维结构产生的阴影效应。例如，可通过使用从对比角（衬度角，contrasting angle）照明景物的电磁辐射的多束源来减少阴影效应。
根据又一实施方式，提供的系统和方法可以减少或避免由于照明的点源引起的所谓“闪烁”或亮点效应。闪烁效应可以通过以很好地远离照相机视点的角度使用源将光转向景物中来避免。
根据另一实施方式，提供了用于监测人眼睛的系统，其包括被构造成戴在人的头上的装置；安装在所述装置上并定位成观察佩戴所述装置的人的第一只眼睛的照相机；和在所述装置上的优先照明第一只眼睛周围且在照相机的视场内的人面部的各自焦点区域（focal regions）的多个光源。在一个可替换的实施方式中，照相机和/或光源安装在远离人处，例如，到交通工具的仪表板或其他内部结构。
控制器可以耦接至照相机和光源，控制器被构造成用于使用照相机对光源的各自焦点区域中的亮度进行采样并且基于采样亮度来调节光源以在各自的焦点区域内提供期望的亮度水平。例如，控制器可以被构造成用于从与照相机的视场内的被第一光源照明的第一焦点区域相对应的照相机的多个像素（multiple pixels）对亮度采样，控制器结合（合并）采样的亮度以确定由第一光源提供的平均亮度，控制器调节第一光源以在第一焦点区域内提供期望的亮度水平。类似地，控制器可以被构造成从被第二或另外的各自光源照明的第二或另外的焦点区域对亮度采样，并调节光源以在相应的焦点区域内提供期望的亮度水平。
在一个实施方式中，控制器可以被构造成用于振幅调节光源的电流和电压中的至少一个以在各自的焦点区域中提供期望的亮度水平。另外或可替换地，控制器可以被构造成用于脉冲宽度调节光源的电流和电压中的至少一个以提供期望的亮度水平。
可选地，处理单元可以耦接至照相机，用于接收第一只眼睛的图像，例如，用于监测和/或分析第一只眼睛的图像。处理单元可以包括控制器或可以是一个或多个分开的处理器。
根据又一实施方式，提供了用于产生空间受制照明的反馈控制系统，其包括在视场的两个或更多空间区域中测量景物亮度的照相机；优先照明在照相机的视场内的相应区域的光源；和处理器，其计算照相机的视场的每一区域内的平均亮度并且将相应光源调节到一个或更多目标亮度水平以在视场内提供期望的亮度水平。
在一个实例中，该系统可以包括电子显示器，和照相机和/或光源，其可以相对于显示器安装，使得照相机和光源朝向观看电子显示器的人的面部定向。在另一实例中，可以以使该照相机和/或光源朝向交通工具的操作者面部定向的方式将该照相机和/或光源安装至交通工具的仪表板或其他表面。
在又一个实例中，照相机和/或光源可以被安装至邻近装配线或传送带的结构以获得沿装配线或传送带指向的物体的图像。在又一个实例中，照相机和/或光源可以安装至邻近多个存储区的结构以获得位于存储区中的物体的图像。例如，光源邻近装配线、传送带或存储区安装以优先照明照相机视场内的各自焦点区域，例如，基于由照相机获取的图像来促进物体的识别。
在这些实例的任何一个中，光源可以基本上持续地或间歇地运行。例如，当照相机不工作时光源停止工作。例如，如果照相机用于获取视场的图像与对优先被各自光源照明的区域内的亮度采样分开，光源可以仅在当照相机被启动以获取图像和/或对亮度采样的周期期间启动，尽管光源可以在这些周期期间间歇地启动（激活），例如，如果脉冲宽度调节用于控制光源的亮度。
根据又一实施方式，提供了用于控制人的第一只眼睛的照明的方法。照相机可以朝向人面部定位使得人的第一只眼睛位于照相机的视场内，并且可以用优先照明第一只眼睛周围且在照相机的视场内的人面部的各自焦点区域的多个光源照明人的面部的至少一部分。可以使用照相机对光源的各自焦点区域中的亮度进行采样，并且至少部分基于采样亮度来调节光源以在各自的焦点区域内产生期望的亮度水平。
根据又一实施方式，提供了可以产生用于机器视觉应用的空间一致或受控的亮度水平的景物照明系统。例如，目标亮度水平在整个照相机的视场内可以基本上相同，例如，用于产生基本一致的亮度，或可以根据位置变化，例如，用于在景物内产生受控的亮度水平。另外或可替换地，目标亮度水平也可随时间进行变化。
在一个示例性实施方式中，该系统包括照相机、优先照明照相机视场内的不同区域的多个光源（多重光源，multiple light sources）、以及耦接至照相机和光源的处理单元。可以对照相机视场内光源的焦点区域进行采样以确定平均区域亮度并与目标亮度水平比较。该处理单元可以控制光源以增加或降低照明水平从而会聚到视场内的目标亮度水平。可以以每个连续的视频图像或周期性图像来重复光源的这种调节直到获得目标亮度水平。一旦获得目标亮度水平，迭代（重复）反馈控制可锁定（关闭）用于一些机器视觉应用。对于其他应用，迭代过程可周期性地或持续地进行以解决不同景物或照明条件的变化。
根据又一实施方式，提供了用于控制景物的照明的方法，该方法包括将照相机集中于景物，使得景物中的一个或更多物体（目标）处于照相机的视场内；用优先照明照相机的视场内的各自焦点区域的多个光源来照明景物；使用照相机对光源的各自焦点区域中的亮度进行采样；以及至少部分基于采样亮度来调节光源以在各自焦点区域内提供期望的亮度水平。
例如，景物可以包括人面部的至少一部分，并且一个或多个物体可以包括人的至少一只眼睛。照相机和/或光源可以安装在人头部的装置上或位于远离人头部的位置。
在另一个实例中，景物可以包括电子显示器，以及照相机和/或光源，其可以相对于该显示器被定位，使得所述照相机和光源朝向观看电子显示器的人的面部定向。在该实例中，可以调节光源以为照相机视场内的人面部的各自焦点区域提供期望的亮度水平。
在又一个实例中，照相机和/或光源可以安装到交通工具的仪表板，使得照相机朝向交通工具操作者的面部定向。在该实例中，景物可以包括操作者面部的至少一部分，并且光源可以朝向操作者面部定向以优先照明照相机视场内的人面部的各自焦点区域。
在又一个实例中，照相机和/或光源可以指向（引导朝向）装配线或传送带以获得沿装配线或传送带指向的物体的图像。在又一个实例中，照相机和/或光源可以被指向多个存储区以获得位于存储区中的物体的图像。光源可以被指向装配线、传送带或存储区以优先照明在照相机视场内的各自焦点区域，例如，以在视场内产生基本一致的亮度水平或在视场内产生变化的亮度水平。例如，可以调节光源从而为比其他焦点区域更远离照相机的焦点区域提供更高的亮度水平。
本发明的其他方面和特征将通过结合附图的以下描述而变得显而易见。
附图说明
附图说明了本发明的示例性实施方式，其中：
图1是使用从照相机获取图像的处理单元控制下的三个发光二极管的眼睛和周围面部区域的空间一致照明的透视图。
图2是由三个分开的光源产生的眼睛和周围面部区域的照明图案的实例。
图3是眼睛和周围面部区域的照相机图像的实例，其中对三簇像素采样以确定在照相机视场内的三个区域中的平均照明强度。
图4是其中在照明图案中期望空间梯度的杂货店或仓库货架的受控照明的实例。照明被分为朝向图像右侧具有逐渐增加的亮度的四个（4）水平区域。
图5是使用振幅调节和脉冲宽度调节技术的用于控制照明的反馈和信号的时序（time sequence）的实例。
图6是示出了用于控制多个光源的照明水平以产生空间一致亮度的示例性算法的流程图。
图7是用于基于人眼的移动来监测人的设备的又一实施方式的透视图。
具体实施方式
转向附图，图1示出了系统10的示例性实施方式，其可以提供人的眼睛和/或附近面部区域的反馈控制的照明。通常，系统10包括多个光源12（示出了3个）、一个或多个照相机14（示出了1个）、以及耦接至光源12和/或一个或多个照相机14的处理单元16。
系统10的部件包括在单一装置或两个或多个分开的装置上。例如，如图7所示，照相机14和光源12可以设置在框架18或构造成戴在人头部上的其他装置上。在示出的实施方式中，框架18包括横梁（bridge piece）18a、在每只眼睛上方或周围延伸并限定开口18c的边缘（眼睛框，rim）18b、和/或一对耳部支架（ear supports）18d，例如，类似于一副眼镜。可选地，可以在或者可以不在开口18c中设置镜片，例如，期望的处方镜片、遮光镜片、偏光镜片，和/或防护镜片等，尽管这样的镜片对于系统10的运行来说不是必须的。可替换地，系统10的部件可以设置在被构造成戴在人头部的其他装置上，如头盔、面具、一副护目镜、下拉面罩等（未示出），诸如在美国专利号6,163,281、6,542,081或7,488,294中公开的那些装置。
在取决于本申请的另外的备选方案中，部件可以设置在用于监测人、物体、和/或其他景物的分开的装置上，例如，静止或移动结构，如在本文其他地方另外描述的。例如，照相机14和/或光源12可以远离人设置但仍允许监测人。在一个示例性实施方式中，照相机14和/或光源12可以安装至交通工具的仪表板或驾驶舱或其他内部区域内的其他地方并朝向交通工具的驾驶员、飞行员或其他操作者、交通工具内的乘客或其他人定向。照相机14和/或光源12的位置在交通工具内可以是基本上固定的或可调节的，例如，使得照相机14和/或光源12可以朝向面部，例如，操作者或其他人的一只眼睛或双眼定向。在另一个示例性实施方式中，照相机14和/或光源12可以安装在计算机或其他电子设装置的显示器上或者可以位于其附近，例如，用于监测电子装置的使用者的一只眼睛或双眼，例如，从而允许使用者至少部分基于一只眼睛或双眼的移动来控制或操作电子装置。
可选地，回到图1和7，如本文在别处描述的，处理单元16也可以由框架18承载或者可以与框架18（和/或系统10的其他部件，如果设置在除了框架18的其他结构上）分离和/或远离。例如，如图7所示，处理单元16可以设置在与框架18分开的壳体中，并且可以包括从框架18延伸的一条或多条线缆17（为了简化示出1条）。一条或多条线缆170可以包括单独的线缆或套线（sets of wires），其耦接至光源12、照相机14、和/或框架18上的其他部件且耦接至处理单元16。例如，单独的线缆或套线可以包埋（嵌入）在框架18中，例如，沿边缘18b，从各自的光源12、照相机14、15等，直到被捕获在线缆15内，例如用于减少如所期望的框架18的整体分布。
在另外参考图1的情况下，照相机14安装和/或定位在框架18上，使得照相机14包括指向（引导朝向）佩戴框架18和/或以其他方式被系统10监测的人的第一只眼睛20的视场，如所示出的。例如，如图7所示，照相机14可以偏离框架18中的各自开口18c，例如，设置照相机14远离佩戴框架18的人的通常视场，例如，如在2010年1月13日提交的共同未决申请系列号12/551,547中描述的。
在一个示例性实施方式中，照相机14可以包括CCD或CMOS或其他检测器，其包括活动区域（有源区域，active area），例如，包括像素的矩形或其他阵列，用于利用照相机14捕获图像并生成表示图像的视频信号。照相机14的活动区域可以具有任何期望的形状，例如，正方形或矩形形状、圆形或椭圆形形状等。照相机14的活动区域可以基本上是平坦的或可以是弯曲的，例如，位于可以朝向眼睛22定向的弯曲平面内。可以使用的示例性CMOS装置包括Omnivision，型号OV7740，或Mocron型号MT9V032。另外，如果需要，照相机14可以包括一个或多个滤色镜（滤光片）、透镜等（未示出），例如用于将图像聚集在活动区域上，过滤不需要的光亮度和/或波长等。
可选地，可提供包括指向被系统10监测的人的第二只眼睛（未示出）的视场的第二照相机。例如，如图7中所示，一对照相机14可以安装在框架18上，例如，在低于每只眼睛的边缘18b的较低区域上以最小化对人视觉的干扰，由此允许监测人的双眼。另外或可替换地，可提供指向人的单独的眼睛的多镜头照相机（多角照相机，多重照相机，multiplecameras）（或指向每只眼睛的多镜头摄影机，未示出），例如，提供分开的或重叠的视场。在另一选项中，如图7中的虚像（幻影）所示，可在框架18上设置一个或多个照相机15，其可以远离佩戴框架18的人定向，例如用于获取人周围的图像，如在本专利其他地方所公开的。
光源12可以安装在框架18的几个位置上，例如，邻近照相机14的开口18c的周围。例如，如所示出的，示出了三个光源12a、12b、12c，例如，位于边缘18b的上部区域的第一和第二光源12a、12b以及位于边缘18b的下部区域的第三光源12c。可以理解，如果期望，可以提供仅两个光源或多于三个光源（未示出），并且可以使用本文描述的系统和方法对其进行控制。如果系统10包括第二照相机14，如图7所示，则可以在框架18上设置另外一组光源12以照明佩戴框架18的人的第二只眼睛和/或面部区域（未示出）。此外，如果系统10包括指向单独的眼睛的多镜头摄影机（未示出），则照相机可以共享多个光源或，或者可替换地，可以提供多组光源以照明照相机的各自视场（未示出）。
在一个示例性实施方式中，每个光源12可以包括被构造成用于发射相对窄或宽带宽的光的发光二极管，例如，在约640-700纳米之间的一个或多个波长的红外光，宽波段可见光，例如，白光等。可选地，光源12可以包括透镜、滤色镜、漫射器或其他特征（未示出），例如用于促进人眼睛和/或面部的各自焦点区域的照明。光源12可以例如以位于框架18中的各自开口18c周围的一或多个阵列而彼此隔开，从而提供期望的亮度水平，例如，人眼睛和/或面部和因此人眼睛和/或面部的使用照相机14捕获的图像的基本一致或可变的亮度水平。
处理单元16可以包括一个或多个控制器或处理器，例如，一个或多个硬件部件和/或软件模块，用于操作系统10的各种部件。例如，处理单元16可以包括分开或集成的控制器（未示出），用于控制光源12和/或照相机14，用于接收和/或处理来自照相机14的信号等。可选地，处理单元16的一个或多个部件可以承载在框架18上，例如，在耳部支架18d或边缘18b上，类似于本文别处识别的参考中所描述的实施方式。
处理单元16也可以包括用于存储来自照相机14、15的图像信号的存储器、用于编辑和/或处理所述图像信号的过滤器等。此外，处理单元16可以包括一个或多个功率源（电源）（未示出），例如，用于操作系统10的部件。可选地，框架18和/或处理单元可以包括用于发射数据、接收指示等的一个或多个发射器和/或接收器（未示出）。另外或可替换地，系统10可以包括远离框架18和/或处理单元16的部件，类似于本文别处识别的参考中所描述的实施方式。例如，在远离处理单元16和/或框架18的位置，例如，在同一个空间，在监测站附近或在更远的位置，系统10可以包括一个或多个接收器、处理器、和/或显示器（未示出）。
回到图1，示出了使用系统10成像的人的眼睛20和周围面部区域22，例如，用于自动瞳孔跟踪的目的，其中基本上空间一致的照明可以是有用的。包括眼睛20的面部区域22可以由其中图像被传递至处理单元16的照相机14可视化。瞳孔26位于虹膜27的中央。虹膜27又位于巩膜28内或眼睛的白色区域内。在正常视觉期间，瞳孔26的位置由于自动和非自动肌肉控制而变化。在瞳孔26移动的过程中，瞳孔26、虹膜27和与巩膜28相关的区域的尺寸和形状在照相机的视场内变化。部分地，尺寸和形状的变化可能是由于眼睛20的曲率。
当通过一个或多个光源照明时，多个因素可以影响从照相机视场内的不同区域检测的光的强度：a）光源和视场区域之间的距离，b）每一光源的强度，c）每一光源的发散角，d）照明表面的反射率（在照明波长），e）表面曲率，和f）在将光转换为有用信号中照相机的效率以及与照相机有关的光学系统的收集效率和空间一致性。此外，如果用单个或少量光源照明，则三维结构可以产生阴影。在眼睛20周围的区域22的情况下，可以由包括眼睑、眼睫毛和皮褶的结构产生阴影。
如本文在别处进一步描述的，照相机（例如图1中的照相机14）的视场内的不同区域的亮度水平可以以反馈模式用于控制不同照明源的强度。从不同角度照明景物的多个光源的使用可帮助减少阴影的有害效应。通过使用多个照明源（复合照明源）和/或通过将它们设置在战略位置，例如，远离照相机的视角，也可以减少或避免闪烁。在图1所示的实例中，红外发光二极管（“LED”）被用作照明源。如所示出的，LED 12a优先照明照相机14的视场的左上部区域，LED 12b优先照明照相机14视场的右上部区域，并且LED 12c优先照明照相机14视场的下部区域。
图2示出了由不同光源照明的各自焦点区域。在该实例中，三个光源照明瞳孔26和眼睛20周围的面部区域22。可以理解，如图2所示，光源通常不产生尖锐边界。相反，虚线代表“焦点区域”，即，其中特定光源对与照相机视场内的周围区域相比的区域的照明具有优先或增加的影响的区域。参考图1，LED 12a优先照明位于照相机视场的左上部区域中的图2的区域121。类似地，图1中的LED 12b照明位于照相机视场的右上部区域中的图2的区域122。图1中的LED 12c照明位于照相机视场的下部区域中的图2的区域123。照明区域或焦点区域的尺寸可能取决于光源的发散角和/或光源与照明表面之间的距离。照明区域的一般形状可能取决于光源的光分布以及光源的位置与正交于照明表面的矢量之间的角度。可以通过调节相关的一个或多个光源的强度来控制每个焦点区域的平均亮度。
图3是可以进行采样以确定在瞳孔26附近的区域的平均亮度的像素簇的实例。在该实例中，8乘8（8x 8）像素元素簇（element cluster of pixels）101的平均测量强度用于估计照相机视场内的左上部区域的亮度。另一8乘8（8x 8）像素元素簇102用于计算照相机视场内的右上部区域的亮度。第三个8乘32（8x 32）像素元素簇103用于估计照相机视场内的下部区域的亮度。
然而，可以理解，可由视场内的任意数量区域来评估亮度。可以由每一焦点区域内的任意尺寸、间隔或形状的簇中的任意数量的像素来确定亮度的评估。例如，在每一焦点区域内在每一采样期间可以对相同像素进行采样，或者如果需要，可以对不同像素（例如，在每一焦点区域内随机选择的）进行采样。可以使用实际视频信号在监测眼睛20期间对亮度采样或者可以在用于监测眼睛20的数据流外部采样。例如，除记录、处理或另外监测外，可以对来自一系列视频信号的周期性帧进行采样，以使用本文描述的任意系统和方法来评估和/或调节亮度水平。
例如，另外参考图1-3，处理单元16可周期性地对焦点区域121、122、123（在图2中示出）中的预定的像素101、102、103（在图3中示出）采样从而评估每一焦点区域121、122、123中的平均亮度水平。然后处理单元16可调节光源12a、12b、12c（在图1中示出）以在各自焦点区域121、122、123内提供期望的亮度水平。例如，当照明眼睛20和用照相机14对眼睛20成像时，具有基本一致的亮度可能是期望的。处理单元16可以对像素101、102、103集进行采样，确定每一焦点区域121、122、123中的平均亮度并且提高或降低光源12a、12b、12c的强度，例如，用于维持平均亮度基本一致和/或另外在期望的范围内。
可替换地，如果提供多镜头照相机（多角摄像机）用于监测单独的眼睛（未示出），则一个或多个照相机可以用于对一个或多个照相机的视场内的亮度进行采样。例如，在一个实施方式中，第一照相机可以专用于亮度采样，例如，如上所描述的，而第二照相机可用于获得眼睛的图像用于其他目的，例如，监测人的意识、身体和/或精神状态，控制一个或多个装置等，如本文其它地方描述的和本文确定的参考中描述的。在另一个实施方式中，多镜头照相机可以用于对各自光源的焦点区域内的亮度进行采样并且可以平均或另外比较来自多镜头照相机的采样亮度以对光源提供反馈控制。
在其他应用中，具有空间变化的景物照明可能是期望的。图4示出了在其中可能期望亮度242的（不一致的）空间梯度的情形中控制照明的这种实例。在该实例中，照相机241可以用于对在一系列货架或输送带系统240上的物体进行成像，例如，诸如通常在杂货店、仓库和生产设备中见到的那些。照相机241和光源231-234可以彼此相对独立地安装，例如，远离货架或输送带系统240并且可以基本上是静止或移动的。
在这样的情况下，使用照相机241获取的图像内的一些物体或物体上的文字看起来比其他小。这可能是由于物体实际减小的尺寸或者是因为物体离照相机更远。经常地，通过增加在照相机视场内看起来更小的物体的亮度（不产生饱和）可提高图像处理算法的性能。空间控制的照明也可用于通过提高信噪比来帮助图像处理算法补偿镜头或其他光学部件的空间分辨率的变化。大多数镜头，尤其是小镜头，在镜头的外边缘附近比镜头的中央区域具有降低的空间分辨率和/或光聚集能力。
在图4所示的实例中，可以通过将视场划分为4个垂直区域来产生亮度的水平梯度。用LED 231照明的最左边区域221对于可靠的图像处理可能需要最小的亮度。用LED 232照明的次最左区域222对于可靠的图像处理可能需要次最低水平的亮度。用LED 233照明的区域223由于更小物体的存在可能需要更高的亮度。用LED 234照明的最后区域224由于离照相机最远的小物体的存在和/或使用照相机241获得的图像的边缘附近的降低的光学分辨率而可能会需要最高照明。
类似于本文其他地方描述的那些的处理单元（未示出）可以耦接至照相机241以对垂直区域221-224内的亮度水平采样，和/或可以耦接至光源231-234从而响应于采样的亮度水平来调节光源231-234的强度。例如，如上面所解释的，处理单元可以调节光源231-234以在每一区域221-224中提供增加的亮度水平从而促进来自照相机241的监测图像。
图5是用于监测和控制照相机视场的不同区域中的照明（照度）的信号的时序的实例。迹线141可以表示单独的像素簇的测量平均亮度，而虚线140可以表示光源焦点区域的目标光强度。点142可以表示收集新照相机图像以用于对亮度进行采样的时间。如果测量的平均光强度落在目标强度之下，则不同的方案可用于提高与相应区域相关的光源的强度。相反，如果测量的平均光强度超过目标强度，则可以使用相同的一种或多种方案来降低与相应区域相关的光源强度。
在一个示例性实施方式中，迹线143说明了其中可以使用驱动光源的电压或电流的振幅来控制光强度的方案。这通常称为“振幅调节”。在另一实施方式中，迹线144说明其中可以改变电压或电流的持续时间或“停留时间”以控制光强度的方案。这通常称为“脉冲宽度调节”。可选地，也可以同时使用两种方案。
如果需要，在当不需要时例如当照相机不将光转化为有用的信号时或者当全部装置未使用时可以关闭照明，例如，用于节约能源和/或用于减少整体照明强度，例如，出于安全原因。例如，图4中的光源231-234（或在本文描述的任何其他实施方式中）可以间歇地运行，例如，当照相机241不启动时停止工作。在一个示例性实施方式中，照相机241可以周期性运行以获取其视场的图像以及对亮度采样，例如，从获得的图像。在该实例中，光源231-234可以仅在当照相机241获取具有如本文其他地方描述所控制的光源亮度的图像的周期期间内启动，例如，在启动的周期期间内使用振幅调节和/或脉冲宽度调节。在另一个示例性实施方式中，照相机241可以周期性地运行以获取视场的图像并且分别对亮度采样。在该实例中，光源231-234可以仅在当照相机241启动以获取图像和/或对亮度采样的周期期间内间歇性地启动，例如在启动期间内使用振幅调节和/或脉冲宽度调节。
图6是可以用于产生反馈控制的示例性算法的流程图，例如，用于产生受控或一致的照明，如使用图1和7的系统10或图4的系统。每一区域（标记为“n”）的平均亮度可在视频图像内连续测量。例如，在步骤310，可以从被多个光源照明的照相机收集新图像。
在步骤320，与第一光源相对应的第一焦点区域的平均亮度可以通过对来自第一区域内的新图像的多个像素采样来采样。例如，可以获得并平均第一区域内的多个像素的实际亮度水平以确定第一区域的平均亮度。在步骤330，平均亮度可以与第一区域的目标强度进行比较。如果平均亮度大于目标强度（分支330a），则在步骤332，降低第一光源的输出。如果平均亮度小于目标强度（分支330b），则在步骤334，提高第一光源的输出。因此，在步骤336，将第一光源调节到期望的强度。在步骤338，增加数字“n”，并且在步骤340，证实了，存在仍未采样的另一焦点区域。如果“n”小于或等于焦点区域和光源的总数，则重复过程，即，用于第二焦点区域和光源的步骤320-336，等。如果已经从新图像采样所有焦点区域并且光源已经调节，则利用新图像重复过程（在步骤310再次开始）。因此，利用每一采样，包括在系统中的光源的整个阵列的输出可以被调节到期望的水平。然后可以在下一视频图像的收集之后或仅周期性重复过程，例如，在每隔一个或每十个使用照相机获取的用于提供采样亮度的图像之后。
目标亮度水平对所有遍及照相机视场的区域可以是相同的以产生具有基本一致亮度的景物，例如，在图1和7的系统10中。可替换地，也可以选择目标亮度水平以在照相机视场内的不同空间区域中变化，如图4中描述的系统，从而部分补偿图像内减少的物体尺寸的效果。可选地，也可以提高一个或多个区域内的目标亮度以产生空间梯度模式，例如，用于提高分析，例如，以便显示表面中的详细裂纹或颜色的微小变化。
也可以选择目标亮度水平以根据时间变化。如果使用在不同波长发射的多组照明源，则由于选择每一波长以显示照相机图像内的不同结构可能需要单独的目标亮度水平。
在一些应用中，亮度可以被作为应用的照明系统的一部分的电磁源控制。在其他应用中，来自反馈控制的照明系统的光可以被叠加在如太阳或室内照明的环境光源上。在后面的实例中，只要环境照明水平变化可能会需要重新汇聚到期望的亮度水平。
其中可以使用反馈控制的动态照明设备的应用的另一实例包括安全检查点，其中当交通工具或个人接近照相机视场时他们被识别。在这种情况下，可以动态调节可见或红外照明源以避免阴影和/或照明物体用于一致的景物亮度，同时避免图像中的热点。
其中可以使用反馈控制的动态照明设备的应用的另一实例是在装配线或传送带系统如用于分选产品或其他食品，如苹果或鱼（未示出）的分选过程中。随着不同反射性、尺寸、形状、和/或取向的物体进入照相机的视场中，可以动态调节照明设备以更好地测量尺寸和/或识别物体。在该实例中，照相机（或如本文其他地方描述的多镜头照相机）和多个光源可以被安装在邻近装配线或传送带的固定支架和指向承载在装配线或传送带（未示出）上的物体。可替换地，可提供多重静止照相机和可以提供多套光源，例如，其与各个照相机相对静止或其被安装至装配线或传送带使得光源与装配线或传送带上的物体一起移动。
其中可以使用反馈控制的动态照明设备的应用的另一实例包括校准系统如用于精确校准车轮和驱动轴的校准系统。其中可以使用反馈控制的动态照明设备的应用的另一实例是在面部识别的领域中。
为了说明和描述的目的，已经给出了示例性实施方式的上述公开内容。其并不旨在详尽或将本发明限制于公开的精确形式。根据以上公开内容，对于本领域的普通技术人员来说，本文描述的实施方式的许多变化和修改将是显而易见的。
而且，在描述代表性实施方式时，说明书可能将方法和/或过程（工艺）描述为步骤的特定顺序。然而，就方法或过程不依赖于本文阐述的步骤的特定顺序来说，所述方法或过程不应限于所述步骤的特定顺序。如本领域普通技术人员理解的，步骤的其他顺序可以是可行的。因此，说明书中阐述的步骤的特定顺序不应解释为对权利要求的限制。
虽然本发明容许不同的改进和可替换的形式，但其具体实施例已经在附图中示出并且在本文中进行了详细描述。然而，应当理解，本发明不限于所披露的特定形式或方法，相反，本发明覆盖落入所附权利要求范围内的所有改进、等价物和备选方案。

Claims (70)

1.一种用于监测人的眼睛的系统，包括：
被构造成佩戴在人头部上的装置；
照相机，安装在所述装置上并被定位成用于对佩戴所述装置的人的第一只眼睛取景；
位于所述装置上的多个光源，优先照明所述第一只眼睛周围和所述照相机视场内的人面部的各自焦点区域；以及
耦接至所述照相机和所述光源的控制器，所述控制器被构造成使用所述照相机在所述光源的各自焦点区域中对亮度进行采样并且至少部分基于采样的亮度来调节所述光源以在所述各自焦点区域内提供期望的亮度水平。
2.根据权利要求1所述的系统，其中，所述控制器安装在所述装置上。
3.根据权利要求1所述的系统，其中，所述控制器位于远离所述装置的位置。
4.根据权利要求1所述的系统，其中，所述控制器被构造成用于从与被第一光源照明的所述照相机的视场内的第一焦点区域相对应的照相机的多个像素对亮度采样，所述控制器结合采样的亮度以确定由所述第一光源提供的平均亮度，所述控制器调节所述第一光源以在所述第一焦点区域内提供期望的亮度水平。
5.根据权利要求4所述的系统，其中，所述控制器被构造成用于振幅调节所述第一光源的电流和电压中的至少一个以提供期望的亮度水平。
6.根据权利要求4所述的系统，其中，所述控制器被构造成用于脉冲宽度调节所述第一光源的电流和电压中的至少一个以提供期望的亮度水平。
7.根据权利要求1所述的系统，其中，所述控制器被构造成用于仅在当所述照相机被启动以获取所述第一只眼睛的图像的周期期间内启动所述光源。
8.根据权利要求1所述的系统，其中，所述光源的期望的亮度水平基本上一致。
9.根据权利要求1所述的系统，其中，所述光源包括LED。
10.根据权利要求1所述的系统，其中，所述照相机包括CCD和CMOS检测器中的一个。
11.根据权利要求1所述的系统，进一步包括耦接至所述照相机的处理单元，用于接收来自所述照相机的第一只眼睛的图像。
12.一种用于产生空间控制照明的反馈控制系统，包括：
在视场的两个或多个空间区域中测量景物亮度的照相机；
优先照明所述照相机视场内的相应区域的光源；以及
处理器，计算所述照相机视场的每一区域内的平均亮度并且将相应光源调节到一个或多个目标亮度水平以在视场内提供期望的亮度水平。
13.根据权利要求12所述的系统，其中，所述照相机和所述光源安装在被构造成佩戴在人头部上的装置上，所述照相机定位在所述装置上用于对佩戴所述装置的人的第一只眼睛取景，所述光源位于所述装置上用于优先照明所述第一只眼睛周围和所述照相机视场内的人面部的各自焦点区域。
14.根据权利要求13所述的系统，其中，所述处理器位于远离所述装置处。
15.根据权利要求12所述的系统，其中，所述处理器被构造成用于从与被第一光源照明的照相机的视场内的第一焦点区域相对应的照相机的多个像素对亮度进行采样，所述处理器结合采样的亮度以确定由所述第一光源提供的平均亮度，所述处理器调节所述第一光源以在所述第一焦点区域内提供期望的亮度水平。
16.根据权利要求12所述的系统，其中，所述处理器被构造成用于振幅调节所述光源的电流和电压中的至少一个以提供期望的亮度水平。
17.根据权利要求12所述的系统，其中，所述处理器被构造成用于脉冲宽度调节所述光源的电流和电压中的至少一个以提供期望的亮度水平。
18.根据权利要求12所述的系统，其中，所述处理器被耦接至所述光源，用于仅在当所述照相机被启动以获取第一只眼睛的图像的周期期间内启动所述光源。
19.根据权利要求18所述的系统，其中，所述处理器被构造成用于在当所述照相机被启动周期期间内脉冲宽度调节所述光源的电流和电压中的至少一个以提供期望的亮度水平。
20.根据权利要求12所述的系统，其中，所述处理器被耦接至所述光源，用于在所述照相机不运行时停用所述光源。
21.根据权利要求12所述的系统，其中，所述光源的期望的亮度水平基本上一致。
22.根据权利要求12所述的系统，其中，所述光源的期望的亮度水平至少部分基于视场内的各自焦点区域的位置是可变的。
23.根据权利要求12所述的系统，其中，所述光源包括LED。
24.根据权利要求12所述的系统，其中，所述照相机包括CCD和CMOS检测器中的一个。
25.根据权利要求12所述的系统，进一步包括电子显示器，所述照相机和光源相对于所述显示器安装，使得所述照相机和光源朝向观看所述电子显示器的人的面部定向。
26.根据权利要求12所述的系统，其中，所述照相机和光源被安装至所述显示器。
27.根据权利要求12所述的系统，其中，所述照相机被安装至交通工具的仪表板，使得所述照相机朝向所述交通工具的操作者的面部定向。
28.根据权利要求27所述的系统，其中，所述光源被安装至所述交通工具，使得所述光源朝向所述操作者的面部定向以优先照明所述照相机视场内的操作者面部的各自焦点区域。
29.根据权利要求12所述的系统，其中，所述照相机被安装至邻近装配线或传送带的结构以获得沿所述装配线或传送带指向的物体的图像。
30.根据权利要求12所述的系统，其中，所述照相机被安装至邻近多个存储区的结构以获得位于所述存储区中的物体的图像。
31.根据权利要求30所述的系统，其中，邻近所述存储区来安装所述光源以优先照明所述照相机视场内的所述存储区的各自焦点区域。
32.根据权利要求31所述的系统，其中，所述处理器被耦接至所述光源以基于每一焦点区域内的平均亮度来调节所述光源从而在视场内提供基本一致的亮度水平。
33.根据权利要求31所述的系统，其中，所述处理器被耦接至所述光源以基于每一焦点区域内的平均亮度来调节所述光源从而在所述视场内提供可变的亮度水平。
34.根据权利要求33所述的系统，其中，所述处理器被耦接至所述光源以调节所述光源从而为比其他焦点区域离照相机更远的焦点区域提供更大的亮度水平。
35.一种用于控制人的第一只眼睛的照明的方法，包括：
朝向人的面部定位照相机使得人的第一只眼睛位于所述照相机的视场内；
用优先照明所述第一只眼睛周围和所述照相机视场内的人面部的各自焦点区域的多个光源来照明人面部的至少一部分；
使用所述照相机对所述光源的各自焦点区域中的亮度进行采样；以及
至少部分基于采样的亮度来调节所述光源以在所述各自焦点区域内提供期望的亮度水平。
36.根据权利要求35所述的方法，其中，所述照相机安装在被构造成佩戴在人头部上的装置上，并且其中，通过将所述装置置于人头部上而使所述照相机朝向人的面部定位。
37.根据权利要求35所述的方法，其中，使用耦接至所述照相机的控制器对在所述各自焦点区域中的亮度进行采样，所述控制器耦接至所述光源用于至少部分基于采样的亮度来调节所述光源。
38.根据权利要求37所述的方法，其中，所述照相机安装在被构造成佩戴在人头部上的装置上，并且其中所述控制器位于远离所述装置处。
39.根据权利要求35所述的方法，其中，对亮度进行采样包括：
从与被第一光源照明的所述照相机视场内的第一焦点区域相对应的所述照相机的多个像素对亮度采样；和
确定由所述第一光源提供的平均亮度，并且
其中调节所述光源包括至少部分基于确定的平均亮度来调节所述第一光源以在所述第一焦点区域内提供期望的亮度水平。
40.根据权利要求35所述的方法，其中，调节所述光源包括调节所述光源的电流和电压中的至少一个的振幅以在所述各自焦点区域内提供期望的亮度水平。
41.根据权利要求35所述的方法，其中，调节所述光源包括调节所述光源的电流和电压中的至少一个的脉冲宽度以在所述各自焦点区域内提供期望的亮度水平。
42.根据权利要求35所述的方法，其中，调节所述光源以在所述照相机视场内提供基本一致的亮度。
43.根据权利要求35所述的方法，进一步包括使用所述照相机来监测第一只眼睛的图像。
44.根据权利要求43所述的方法，其中，监测第一只眼睛的图像以进行以下中的至少一个：a）确定人的睡意水平，b）至少部分地控制电子装置，和c）提供来自人的生物反馈。
45.一种用于控制景物的照明的方法，包括：
使照相机指向景物使得所述景物中的一个或多个物体位于所述照相机的视场内；
用优先照明所述照相机视场内的各自焦点区域的多个光源来照明所述景物；
使用所述照相机对所述光源的各自焦点区域中的亮度进行采样；以及
至少部分基于采样的亮度来调节所述光源以在所述各自焦点区域内提供期望的亮度水平。
46.根据权利要求45所述的方法，其中，所述景物包括人面部的至少一部分，并且其中，所述一个或多个物体包括人的至少一只眼睛。
47.根据权利要求45所述的方法，其中，所述照相机安装在人头部上的所述装置上。
48.根据权利要求45所述的方法，其中，所述多个光源安装在人头部上的所述装置上。
49.根据权利要求45所述的方法，其中，所述照相机安装在远离人头部处。
50.根据权利要求45所述的方法，其中，所述多个光源安装在远离人头部处。
51.根据权利要求45所述的方法，其中，使用耦接至所述照相机的控制器对所述各自焦点区域中的亮度进行采样，所述控制器耦接至所述光源用于至少部分基于采样的亮度来调节所述光源。
52.根据权利要求45所述的方法，其中，对亮度进行采样包括：从与被第一光源照明的所述照相机视场内的第一焦点区域相对应的所述照相机的多个像素对亮度进行采样；和由从所述多个像素采样的亮度来确定由所述第一光源提供的平均亮度，并且
其中调节所述光源包括至少部分基于确定的平均亮度来调节所述第一光源以在所述第一焦点区域内提供期望的亮度水平。
53.根据权利要求52所述的方法，其中，对亮度进行采样进一步包括：从与被第二光源照明的照相机视场内的第二焦点区域相对应的所述照相机的多个像素对亮度进行采样；和
确定由所述第二光源提供的平均亮度，并且
其中调节所述光源包括至少部分基于确定的平均亮度来调节所述第二光源以在所述第二焦点区域内提供期望的亮度水平。
54.根据权利要求45所述的方法，其中，调节所述光源包括调节所述光源的电流和电压中的至少一个的振幅以在所述各自焦点区域内提供期望的亮度水平。
55.根据权利要求45所述的方法，其中，调节所述光源包括调节所述光源的电流和电压中的至少一个的脉冲宽度以在所述各自焦点区域内提供期望的亮度水平。
56.根据权利要求45所述的方法，其中，调节所述光源以在所述照相机视场内提供基本一致的亮度。
57.根据权利要求45所述的方法，其中，调节所述光源以提供在所述照相机视场的不同部分内变化的预定亮度。
58.根据权利要求45所述的方法，其中，所述照相机和光源与电子显示器相对安装，使得所述照相机和光源朝向观看所述电子显示器的人的面部定向，并且其中调节所述光源从而为所述照相机视场内的人面部的各自焦点区域提供期望的亮度水平。
59.根据权利要求45所述的方法，其中，所述照相机安装至交通工具的仪表板，使得所述照相机朝向所述交通工具的操作者面部定向。
60.根据权利要求59所述的方法，其中，所述光源安装至所述交通工具，使得所述光源朝向所述操作者的面部定向，以优先照明所述照相机视场内的操作者面部的各自焦点区域。
61.根据权利要求45所述的方法，其中，所述照相机指向装配线或传送带以获得沿所述装配线或传送带指向的物体的图像。
62.根据权利要求45所述的方法，其中，所述照相机指向多个存储区以获得位于所述存储区中的物体的图像。
63.根据权利要求62所述的方法，其中，所述光源指向所述存储区以优先照明所述照相机视场内的存储区的各自焦点区域。
64.根据权利要求63所述的方法，其中，调节所述光源以在视场内提供基本一致的亮度水平。
65.根据权利要求63所述的方法，其中，调节所述光源以在视场内提供可变的亮度水平。
66.根据权利要求65所述的方法，其中，调节所述光源从而为比其他焦点区域离所述照相机更远的焦点区域提供更大的亮度水平。
67.根据权利要求45所述的方法，进一步包括使用所述照相机来获取所述照相机视场的图像，并且其中由使用所述照相机获取的图像对所述光源的各自焦点区域内的亮度进行采样。
68.根据权利要求67所述的方法，其中，当所述照相机不捕获图像时停用所述光源。
69.根据权利要求45所述的方法，进一步包括使用所述照相机来获取所述照相机视场的图像，并且其中由使用所述照相机获取的图像分别对所述光源的各自焦点区域内的亮度进行采样。
70.根据权利要求69所述的方法，其中，光源仅在当所述照相机获取图像时的周期期间内和在当对所述光源的各自焦点区域中的亮度进行采样的周期期间内启动。
CN201180022056.1A 2010-03-01 2011-03-01 用于空间控制的景物照明的系统和方法 Active CN102918834B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US12/715,177 US8890946B2 (en) 2010-03-01 2010-03-01 Systems and methods for spatially controlled scene illumination
US12/715,177 2010-03-01
PCT/US2011/026736 WO2011149577A2 (en) 2010-03-01 2011-03-01 Systems and methods for spatially controlled scene illumination

Publications (2)

Publication Number Publication Date
CN102918834A true CN102918834A (zh) 2013-02-06
CN102918834B CN102918834B (zh) 2016-08-03

Family

ID=44505076

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201180022056.1A Active CN102918834B (zh) 2010-03-01 2011-03-01 用于空间控制的景物照明的系统和方法

Country Status (8)

Country Link
US (2) US8890946B2 (zh)
EP (1) EP2543187B1 (zh)
JP (1) JP2013521710A (zh)
KR (1) KR101829850B1 (zh)
CN (1) CN102918834B (zh)
AU (1) AU2011258826A1 (zh)
RU (1) RU2012141574A (zh)
WO (1) WO2011149577A2 (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105340265A (zh) * 2013-06-18 2016-02-17 摩托罗拉解决方案公司 用于显示来自相机的图像的方法和设备
CN106716305A (zh) * 2014-09-25 2017-05-24 飞利浦灯具控股公司 照明的控制
CN107438790A (zh) * 2015-04-10 2017-12-05 埃西勒国际通用光学公司 头戴式显示设备
TWI618970B (zh) * 2015-12-01 2018-03-21 群邁通訊股份有限公司 自動對焦拍照系統及電子裝置
CN108369364A (zh) * 2015-11-10 2018-08-03 亮锐控股有限公司 自适应光源
CN110490017A (zh) * 2019-08-08 2019-11-22 广东斯玛特自动化科技有限公司 一种用于扫码机的照明方法及装置

Families Citing this family (144)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9250703B2 (en) 2006-03-06 2016-02-02 Sony Computer Entertainment Inc. Interface with gaze detection and voice input
US8730156B2 (en) 2010-03-05 2014-05-20 Sony Computer Entertainment America Llc Maintaining multiple views on a shared stable virtual space
US9158116B1 (en) 2014-04-25 2015-10-13 Osterhout Group, Inc. Temple and ear horn assembly for headworn computer
US9366867B2 (en) 2014-07-08 2016-06-14 Osterhout Group, Inc. Optical systems for see-through displays
US9715112B2 (en) 2014-01-21 2017-07-25 Osterhout Group, Inc. Suppression of stray light in head worn computing
US9400390B2 (en) 2014-01-24 2016-07-26 Osterhout Group, Inc. Peripheral lighting for head worn computing
KR101383235B1 (ko) * 2010-06-17 2014-04-17 한국전자통신연구원 시선 추적을 이용한 좌표 입력 장치 및 그 방법
WO2012011181A1 (ja) * 2010-07-22 2012-01-26 富士通株式会社 静脈撮像装置
US20130154913A1 (en) * 2010-12-16 2013-06-20 Siemens Corporation Systems and methods for a gaze and gesture interface
US10120438B2 (en) * 2011-05-25 2018-11-06 Sony Interactive Entertainment Inc. Eye gaze to alter device behavior
CA3207408A1 (en) 2011-10-28 2013-06-13 Magic Leap, Inc. System and method for augmented and virtual reality
US9854159B2 (en) 2012-07-20 2017-12-26 Pixart Imaging Inc. Image system with eye protection
TWI471808B (zh) * 2012-07-20 2015-02-01 Pixart Imaging Inc 瞳孔偵測裝置
TW201416908A (zh) * 2012-10-23 2014-05-01 Pixart Imaging Inc 瞳孔追蹤裝置
CN103793045B (zh) * 2012-10-31 2016-12-28 原相科技股份有限公司 瞳孔追踪装置
CN104903818B (zh) 2012-12-06 2018-12-14 谷歌有限责任公司 眼睛跟踪佩戴式设备和使用方法
US8761594B1 (en) 2013-02-28 2014-06-24 Apple Inc. Spatially dynamic illumination for camera systems
US9788906B2 (en) 2013-03-15 2017-10-17 Synaptive Medical (Barbados) Inc. Context aware surgical systems for intraoperatively configuring imaging devices
US10686972B2 (en) 2013-09-03 2020-06-16 Tobii Ab Gaze assisted field of view control
US9665172B2 (en) 2013-09-03 2017-05-30 Tobii Ab Portable eye tracking device
US10310597B2 (en) 2013-09-03 2019-06-04 Tobii Ab Portable eye tracking device
TWI532413B (zh) * 2013-09-11 2016-05-01 晶睿通訊股份有限公司 照明補光系統及方法
WO2015060869A1 (en) * 2013-10-25 2015-04-30 Intel Corporation Dynamic optimization of light source power
US20150228119A1 (en) 2014-02-11 2015-08-13 Osterhout Group, Inc. Spatial location presentation in head worn computing
US9594246B2 (en) 2014-01-21 2017-03-14 Osterhout Group, Inc. See-through computer display systems
US9841599B2 (en) 2014-06-05 2017-12-12 Osterhout Group, Inc. Optical configurations for head-worn see-through displays
US10254856B2 (en) 2014-01-17 2019-04-09 Osterhout Group, Inc. External user interface for head worn computing
US10684687B2 (en) 2014-12-03 2020-06-16 Mentor Acquisition One, Llc See-through computer display systems
US10649220B2 (en) 2014-06-09 2020-05-12 Mentor Acquisition One, Llc Content presentation in head worn computing
US9829707B2 (en) 2014-08-12 2017-11-28 Osterhout Group, Inc. Measuring content brightness in head worn computing
US11669163B2 (en) 2014-01-21 2023-06-06 Mentor Acquisition One, Llc Eye glint imaging in see-through computer display systems
US9753288B2 (en) 2014-01-21 2017-09-05 Osterhout Group, Inc. See-through computer display systems
US11487110B2 (en) 2014-01-21 2022-11-01 Mentor Acquisition One, Llc Eye imaging in head worn computing
US11737666B2 (en) 2014-01-21 2023-08-29 Mentor Acquisition One, Llc Eye imaging in head worn computing
US12093453B2 (en) 2014-01-21 2024-09-17 Mentor Acquisition One, Llc Eye glint imaging in see-through computer display systems
US12105281B2 (en) 2014-01-21 2024-10-01 Mentor Acquisition One, Llc See-through computer display systems
US11892644B2 (en) 2014-01-21 2024-02-06 Mentor Acquisition One, Llc See-through computer display systems
US9846308B2 (en) 2014-01-24 2017-12-19 Osterhout Group, Inc. Haptic systems for head-worn computers
US20160171769A1 (en) 2014-01-24 2016-06-16 Osterhout Group, Inc. See-through computer display systems
US20170090557A1 (en) * 2014-01-29 2017-03-30 Google Inc. Systems and Devices for Implementing a Side-Mounted Optical Sensor
US9396571B2 (en) * 2014-02-10 2016-07-19 International Business Machines Corporation Simplified lighting compositing
US12112089B2 (en) 2014-02-11 2024-10-08 Mentor Acquisition One, Llc Spatial location presentation in head worn computing
US10853589B2 (en) 2014-04-25 2020-12-01 Mentor Acquisition One, Llc Language translation with head-worn computing
US9651787B2 (en) 2014-04-25 2017-05-16 Osterhout Group, Inc. Speaker assembly for headworn computer
US20160137312A1 (en) 2014-05-06 2016-05-19 Osterhout Group, Inc. Unmanned aerial vehicle launch system
US10620700B2 (en) 2014-05-09 2020-04-14 Google Llc Systems and methods for biomechanically-based eye signals for interacting with real and virtual objects
US10564714B2 (en) 2014-05-09 2020-02-18 Google Llc Systems and methods for biomechanically-based eye signals for interacting with real and virtual objects
US10663740B2 (en) 2014-06-09 2020-05-26 Mentor Acquisition One, Llc Content presentation in head worn computing
JP2016032257A (ja) * 2014-07-30 2016-03-07 株式会社デンソー ドライバ監視装置
JP6322723B2 (ja) * 2014-11-27 2018-05-09 京セラ株式会社 撮像装置および車両
US9635231B2 (en) 2014-12-22 2017-04-25 Google Inc. Time-of-flight camera system and method to improve measurement quality of weak field-of-view signal regions
US9674415B2 (en) 2014-12-22 2017-06-06 Google Inc. Time-of-flight camera system with scanning illuminator
US10878775B2 (en) 2015-02-17 2020-12-29 Mentor Acquisition One, Llc See-through computer display systems
EP3866100A1 (en) * 2015-04-02 2021-08-18 Essilor International A system for updating an index of a person
CN112882233B (zh) 2015-05-19 2023-08-01 奇跃公司 双复合光场装置
US10139966B2 (en) 2015-07-22 2018-11-27 Osterhout Group, Inc. External user interface for head worn computing
US11003246B2 (en) 2015-07-22 2021-05-11 Mentor Acquisition One, Llc External user interface for head worn computing
WO2017054004A1 (en) 2015-09-24 2017-03-30 California Instutute Of Technology Systems and methods for data visualization using tree-dimensional displays
US10480937B2 (en) * 2016-01-28 2019-11-19 Manatec Electronics Pvt. Ltd. System for simultaneous measurement of wheel alignment angles and wheel runout of multi-axle vehicles
US10850116B2 (en) 2016-12-30 2020-12-01 Mentor Acquisition One, Llc Head-worn therapy device
US10591728B2 (en) 2016-03-02 2020-03-17 Mentor Acquisition One, Llc Optical systems for head-worn computers
US10667981B2 (en) 2016-02-29 2020-06-02 Mentor Acquisition One, Llc Reading assistance system for visually impaired
US9826299B1 (en) 2016-08-22 2017-11-21 Osterhout Group, Inc. Speaker systems for head-worn computer systems
US9880441B1 (en) 2016-09-08 2018-01-30 Osterhout Group, Inc. Electrochromic systems for head-worn computer systems
US10684478B2 (en) 2016-05-09 2020-06-16 Mentor Acquisition One, Llc User interface systems for head-worn computers
US10466491B2 (en) 2016-06-01 2019-11-05 Mentor Acquisition One, Llc Modular systems for head-worn computers
US9910284B1 (en) 2016-09-08 2018-03-06 Osterhout Group, Inc. Optical systems for head-worn computers
US10084979B2 (en) * 2016-07-29 2018-09-25 International Business Machines Corporation Camera apparatus and system, method and recording medium for indicating camera field of view
KR102548199B1 (ko) * 2016-08-03 2023-06-28 삼성전자주식회사 전자 장치 및 전자 장치의 시선 추적 방법
CN106128406B (zh) * 2016-09-08 2019-01-22 京东方科技集团股份有限公司 眼图幅值调节方法、数据传输方法、电路和显示装置
US10925479B2 (en) * 2016-10-13 2021-02-23 Ronald Michael Kurtz Networked system of mobile communication platforms for nonpharmacologic constriction of a pupil
US10580234B2 (en) 2017-01-20 2020-03-03 Adesa, Inc. Vehicle documentation system
US10302764B2 (en) * 2017-02-03 2019-05-28 Microsoft Technology Licensing, Llc Active illumination management through contextual information
CN108507636B (zh) * 2017-02-27 2020-11-20 深圳市朗驰欣创科技股份有限公司 一种通道积水情况的检测方法、巡检装置及水位检测设备
CN110495186B (zh) 2017-03-30 2021-11-19 奇跃公司 声音再现系统和头戴式设备
US10977858B2 (en) 2017-03-30 2021-04-13 Magic Leap, Inc. Centralized rendering
CN117389420A (zh) 2017-04-14 2024-01-12 奇跃公司 多模式眼睛跟踪
US10295827B1 (en) * 2017-04-27 2019-05-21 Facebook Technologies, Llc Diffractive optics beam shaping for structured light generator
US11079522B1 (en) 2017-05-31 2021-08-03 Magic Leap, Inc. Fiducial design
US10422995B2 (en) 2017-07-24 2019-09-24 Mentor Acquisition One, Llc See-through computer display systems with stray light management
US10578869B2 (en) 2017-07-24 2020-03-03 Mentor Acquisition One, Llc See-through computer display systems with adjustable zoom cameras
US11409105B2 (en) 2017-07-24 2022-08-09 Mentor Acquisition One, Llc See-through computer display systems
CN110892443B (zh) * 2017-08-01 2024-01-09 松下知识产权经营株式会社 个人认证装置
US10969584B2 (en) 2017-08-04 2021-04-06 Mentor Acquisition One, Llc Image expansion optic for head-worn computer
CA3078420A1 (en) 2017-10-17 2019-04-25 Magic Leap, Inc. Mixed reality spatial audio
US11393251B2 (en) 2018-02-09 2022-07-19 Pupil Labs Gmbh Devices, systems and methods for predicting gaze-related parameters
US11194161B2 (en) 2018-02-09 2021-12-07 Pupil Labs Gmbh Devices, systems and methods for predicting gaze-related parameters
WO2019154511A1 (en) 2018-02-09 2019-08-15 Pupil Labs Gmbh Devices, systems and methods for predicting gaze-related parameters using a neural network
CA3090178A1 (en) 2018-02-15 2019-08-22 Magic Leap, Inc. Mixed reality musical instrument
US11212636B2 (en) 2018-02-15 2021-12-28 Magic Leap, Inc. Dual listener positions for mixed reality
IL276510B2 (en) 2018-02-15 2024-02-01 Magic Leap Inc Virtual reverberation in mixed reality
US11467389B2 (en) * 2018-04-18 2022-10-11 Gentex Corporation Confined field of view illumination
US11941894B2 (en) * 2018-04-19 2024-03-26 Seeing Machines Limited Infrared light source protective system
EP3785067A4 (en) 2018-04-24 2021-06-23 Mentor Acquisition One, LLC CLEAR COMPUTER DISPLAY SYSTEMS WITH VISUAL CORRECTION AND INCREASED CONTENT DENSITY
US10621762B2 (en) 2018-05-14 2020-04-14 Virtualitics, Inc. Systems and methods for high dimensional 3D data visualization
US10509467B1 (en) * 2018-06-01 2019-12-17 Facebook Technologies, Llc Determining fixation of a user's eyes from images of portions of the user's face enclosed by a head mounted display
US10667072B2 (en) 2018-06-12 2020-05-26 Magic Leap, Inc. Efficient rendering of virtual soundfields
WO2019241760A1 (en) 2018-06-14 2019-12-19 Magic Leap, Inc. Methods and systems for audio signal filtering
CN112534498A (zh) 2018-06-14 2021-03-19 奇跃公司 混响增益归一化
US10735884B2 (en) 2018-06-18 2020-08-04 Magic Leap, Inc. Spatial audio for interactive audio environments
EP3811360A4 (en) 2018-06-21 2021-11-24 Magic Leap, Inc. PORTABLE SYSTEM VOICE PROCESSING
JP7499749B2 (ja) 2018-07-24 2024-06-14 マジック リープ， インコーポレイテッド アプリケーション共有
US10506681B1 (en) 2018-08-09 2019-12-10 Distech Controls Inc. Environment controller and method for proportionally adjusting the light intensity of several lighting devices
CN113168007B (zh) 2018-09-25 2023-09-15 奇跃公司 用于增强现实的系统和方法
EP3861767A4 (en) 2018-10-05 2021-12-15 Magic Leap, Inc. CLOSE-FIELD AUDIO RENDERING
EP3861763A4 (en) 2018-10-05 2021-12-01 Magic Leap, Inc. Highlighting audio spatialization
EP3864575A4 (en) 2018-10-09 2021-12-01 Magic Leap, Inc. VIRTUAL AND AUGMENTED REALITY SYSTEMS AND PROCESSES
WO2020086760A2 (en) 2018-10-24 2020-04-30 Magic Leap, Inc. Asynchronous asic
CN111127537A (zh) * 2018-10-29 2020-05-08 托比股份公司 用于检测头戴式装置中的阴影的方法和装置
CN112996423A (zh) * 2018-11-07 2021-06-18 索尼集团公司 图像获取系统和图像获取方法
KR102549130B1 (ko) * 2018-11-26 2023-07-03 제트카베 그룹 게엠베하 적응형 후진 라이트를 갖는 차량 비전 시스템
CN113632030A (zh) 2018-12-27 2021-11-09 奇跃公司 用于虚拟现实和增强现实的系统和方法
WO2020147948A1 (en) 2019-01-16 2020-07-23 Pupil Labs Gmbh Methods for generating calibration data for head-wearable devices and eye tracking system
EP3931827A4 (en) 2019-03-01 2022-11-02 Magic Leap, Inc. INPUT DETERMINATION FOR A VOICE PROCESSING ENGINE
US11676422B2 (en) 2019-06-05 2023-06-13 Pupil Labs Gmbh Devices, systems and methods for predicting gaze-related parameters
US11151766B2 (en) 2019-06-06 2021-10-19 Magic Leap, Inc. Photoreal character configurations for spatial computing
CN113853165A (zh) * 2019-06-11 2021-12-28 金泰克斯公司 可穿戴医疗装置
US11704874B2 (en) 2019-08-07 2023-07-18 Magic Leap, Inc. Spatial instructions and guides in mixed reality
US11328740B2 (en) 2019-08-07 2022-05-10 Magic Leap, Inc. Voice onset detection
WO2021077024A1 (en) 2019-10-18 2021-04-22 Magic Leap, Inc. Gravity estimation and bundle adjustment for visual-inertial odometry
WO2021081442A1 (en) 2019-10-25 2021-04-29 Magic Leap, Inc. Non-uniform stereo rendering
EP4049466A4 (en) 2019-10-25 2022-12-28 Magic Leap, Inc. REVERBER FOOTPRINT ESTIMATION
US11959997B2 (en) 2019-11-22 2024-04-16 Magic Leap, Inc. System and method for tracking a wearable device
WO2021113782A1 (en) 2019-12-04 2021-06-10 Magic Leap, Inc. Variable-pitch color emitting display
CN115380311A (zh) 2019-12-06 2022-11-22 奇跃公司 环境声学持久性
JP2023504207A (ja) 2019-12-09 2023-02-01 マジック リープ， インコーポレイテッド ユーザ識別に基づいて頭部搭載型ディスプレイシステムを動作させるためのシステムおよび方法
US11337023B2 (en) 2019-12-20 2022-05-17 Magic Leap, Inc. Physics-based audio and haptic synthesis
US11335070B2 (en) 2020-02-10 2022-05-17 Magic Leap, Inc. Dynamic colocation of virtual content
CN118276683A (zh) 2020-02-14 2024-07-02 奇跃公司 工具桥
US11778410B2 (en) 2020-02-14 2023-10-03 Magic Leap, Inc. Delayed audio following
EP4104002A4 (en) 2020-02-14 2023-08-09 Magic Leap, Inc. 3D OBJECT ANNOTATION
US11910183B2 (en) 2020-02-14 2024-02-20 Magic Leap, Inc. Multi-application audio rendering
JP7539478B2 (ja) 2020-02-14 2024-08-23 マジック リープ， インコーポレイテッド セッションマネージャ
US11205069B1 (en) * 2020-02-20 2021-12-21 Facebook Technologies, Llc Hybrid cornea and pupil tracking
WO2021178454A1 (en) 2020-03-02 2021-09-10 Magic Leap, Inc. Immersive audio platform
US11917384B2 (en) 2020-03-27 2024-02-27 Magic Leap, Inc. Method of waking a device using spoken voice commands
EP4158908A4 (en) 2020-05-29 2023-11-29 Magic Leap, Inc. SURFACE COLLISIONS
CN116210021A (zh) 2020-05-29 2023-06-02 奇跃公司 确定角加速度
KR20220169207A (ko) * 2021-06-18 2022-12-27 삼성전자주식회사 생체 라이브니스 인증 방법 및 전자 장치
US11645844B2 (en) * 2021-10-05 2023-05-09 RS1 Worklete, LLC Computing devices programmed to detect slippery surfaces within enclosures and methods/systems of used thereof
US11592899B1 (en) 2021-10-28 2023-02-28 Tectus Corporation Button activation within an eye-controlled user interface
US11619994B1 (en) 2022-01-14 2023-04-04 Tectus Corporation Control of an electronic contact lens using pitch-based eye gestures
US12118138B2 (en) 2022-02-14 2024-10-15 Tectus Corporation Vergence authentication
US11874961B2 (en) 2022-05-09 2024-01-16 Tectus Corporation Managing display of an icon in an eye tracking augmented reality device

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040005083A1 (en) * 2002-03-26 2004-01-08 Kikuo Fujimura Real-time eye detection and tracking under various light conditions
CN1486878A (zh) * 2002-07-08 2004-04-07 矢崎总业株式会社 防止瞌睡开车装置
WO2007092512A2 (en) * 2006-02-07 2007-08-16 Attention Technologies, Inc. Driver drowsiness and distraction monitor

Family Cites Families (126)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US3689135A (en) * 1971-01-26 1972-09-05 Laurence R Young Method for monitoring movement of a subject{40 s eyes
US3863243A (en) * 1972-01-19 1975-01-28 Max Skolnick Sleep inhibiting alarm
US3798599A (en) * 1972-02-24 1974-03-19 H Kafafian Single input controller for a communication system
US3966310A (en) * 1974-02-15 1976-06-29 Larson Merlin D Pupillometer and method of use thereof
US4102564A (en) * 1975-04-18 1978-07-25 Michael Henry L Portable device for the accurate measurement of eye movements both in light and obscurity
US4359724A (en) * 1980-04-28 1982-11-16 Ronald R. Zimmerman Eyelid movement detector
EP0125808A3 (en) 1983-04-18 1986-01-29 Lee S. Weinblatt Eye movement monitoring technique
JPS6332624A (ja) * 1986-07-28 1988-02-12 Canon Inc 情報処理装置
US4953111A (en) * 1987-02-12 1990-08-28 Omron Tateisi Electronics Co. Doze detector
US4850691A (en) * 1987-03-18 1989-07-25 University Of Illinois Method and apparatus for determining pupillary response parameters
US4815839A (en) * 1987-08-03 1989-03-28 Waldorf Ronald A Infrared/video electronystagmographic apparatus
JPH01312902A (ja) * 1988-06-13 1989-12-18 Konan Camera Kenkyusho:Kk 眼球運動検査装置
US4852988A (en) * 1988-09-12 1989-08-01 Applied Science Laboratories Visor and camera providing a parallax-free field-of-view image for a head-mounted eye movement measurement system
JPH02164335A (ja) * 1988-12-16 1990-06-25 Konan Camera Kenkyusho:Kk 眼球運動解析装置
GB8916206D0 (en) * 1989-07-14 1989-11-08 Marconi Gec Ltd Helmet systems
US4967186A (en) * 1989-08-18 1990-10-30 Ariold Ludmirsky Method and apparatus for fatigue detection
US5778893A (en) * 1991-04-01 1998-07-14 President And Fellows Of Harvard College Method of diagnosing and monitoring a treatment for Alzheimer's disease
US5189512A (en) 1991-07-01 1993-02-23 Camair Research, Inc. Helmet integrated display system
US5183512A (en) * 1991-08-29 1993-02-02 Aquotech, Inc. Method of cleaning semiconductor wafer and computer disks by purified water treated with electric AC signal
WO1995018565A1 (en) * 1991-09-26 1995-07-13 Sam Technology, Inc. Non-invasive neurocognitive testing method and system
US5214456A (en) * 1991-10-09 1993-05-25 Computed Anatomy Incorporated Mapping of corneal topography with display of pupil perimeter
US5583590A (en) * 1992-05-04 1996-12-10 Wabash Scientific Corp. Alert monitoring system
US5341181A (en) * 1992-11-20 1994-08-23 Godard Roger R Systems and methods for capturing and presentng visual information
US5345281A (en) * 1992-12-17 1994-09-06 John Taboada Eye tracking system and method
US5461417A (en) * 1993-02-16 1995-10-24 Northeast Robotics, Inc. Continuous diffuse illumination method and apparatus
US5402109A (en) * 1993-04-29 1995-03-28 Mannik; Kallis H. Sleep prevention device for automobile drivers
GB9323970D0 (en) 1993-11-22 1994-01-12 Toad Innovations Ltd Safety device
US5478239A (en) * 1993-12-21 1995-12-26 Maximum Performance, Inc. Dynamic visual acuity training method and apparatus
US5481622A (en) * 1994-03-01 1996-01-02 Rensselaer Polytechnic Institute Eye tracking apparatus and method employing grayscale threshold values
JP3293308B2 (ja) * 1994-03-10 2002-06-17 三菱電機株式会社 人物状態検出装置
JPH086708A (ja) 1994-04-22 1996-01-12 Canon Inc 表示装置
US5617872A (en) * 1994-07-25 1997-04-08 Beth Israel Hospitcal Assoc. Inc. Hypersensitive constriction velocity method for diagnosing Alzheimer's disease in a living human
US5469143A (en) * 1995-01-10 1995-11-21 Cooper; David E. Sleep awakening device for drivers of motor vehicles
US5583795A (en) * 1995-03-17 1996-12-10 The United States Of America As Represented By The Secretary Of The Army Apparatus for measuring eye gaze and fixation duration, and method therefor
US5566067A (en) * 1995-03-23 1996-10-15 The President And Fellows Of Harvard College Eyelid vigilance detector system
US5689241A (en) * 1995-04-24 1997-11-18 Clarke, Sr.; James Russell Sleep detection and driver alert apparatus
US5570698A (en) * 1995-06-02 1996-11-05 Siemens Corporate Research, Inc. System for monitoring eyes for detecting sleep behavior
US7738678B2 (en) * 1995-06-07 2010-06-15 Automotive Technologies International, Inc. Light modulation techniques for imaging objects in or around a vehicle
US5682144A (en) * 1995-11-20 1997-10-28 Mannik; Kallis Hans Eye actuated sleep prevention devices and other eye controlled devices
US6003991A (en) * 1996-02-17 1999-12-21 Erik Scott Viirre Eye examination apparatus and method for remote examination of a patient by a health professional
US6373961B1 (en) * 1996-03-26 2002-04-16 Eye Control Technologies, Inc. Eye controllable screen pointer
US5726916A (en) * 1996-06-27 1998-03-10 The United States Of America As Represented By The Secretary Of The Army Method and apparatus for determining ocular gaze point of regard and fixation duration
US5861936A (en) * 1996-07-26 1999-01-19 Gillan Holdings Limited Regulating focus in accordance with relationship of features of a person's eyes
US6163281A (en) * 1996-08-19 2000-12-19 Torch; William C. System and method for communication using eye movement
US6542081B2 (en) * 1996-08-19 2003-04-01 William C. Torch System and method for monitoring eye movement
US6246344B1 (en) * 1996-08-19 2001-06-12 William C. Torch Method and apparatus for voluntary communication
US5748113A (en) * 1996-08-19 1998-05-05 Torch; William C. Method and apparatus for communication
JP3651204B2 (ja) * 1996-12-18 2005-05-25 トヨタ自動車株式会社 立体画像表示装置、立体画像表示方法及び記録媒体
US6070098A (en) * 1997-01-11 2000-05-30 Circadian Technologies, Inc. Method of and apparatus for evaluation and mitigation of microsleep events
WO1998049028A1 (en) 1997-04-25 1998-11-05 Applied Science Group, Inc. An alertness monitor
US5867587A (en) * 1997-05-19 1999-02-02 Northrop Grumman Corporation Impaired operator detection and warning system employing eyeblink analysis
WO1998057579A1 (en) * 1997-06-19 1998-12-23 Bioprobes, Inc. System and method for screening for dementia
US6007202A (en) * 1997-10-23 1999-12-28 Lasersight Technologies, Inc. Eye illumination system and method
EP1027627B1 (en) * 1997-10-30 2009-02-11 MYVU Corporation Eyeglass interface system
US6611618B1 (en) * 1997-11-13 2003-08-26 Schepens Eye Research Institute, Inc. Wide-band image enhancement
US6055322A (en) * 1997-12-01 2000-04-25 Sensor, Inc. Method and apparatus for illuminating and imaging eyes through eyeglasses using multiple sources of illumination
JP3361980B2 (ja) * 1997-12-12 2003-01-07 株式会社東芝 視線検出装置及びその方法
US6088470A (en) * 1998-01-27 2000-07-11 Sensar, Inc. Method and apparatus for removal of bright or dark spots by the fusion of multiple images
DE19803158C1 (de) * 1998-01-28 1999-05-06 Daimler Chrysler Ag Vorrichtung zur Vigilanzzustandsbestimmung
US6152563A (en) * 1998-02-20 2000-11-28 Hutchinson; Thomas E. Eye gaze direction tracker
US6003992A (en) * 1998-06-02 1999-12-21 Northeast Robotics Llc Back lighting illumination system
US6091378A (en) * 1998-06-17 2000-07-18 Eye Control Technologies, Inc. Video processing methods and apparatus for gaze point tracking
US6867752B1 (en) * 1998-08-31 2005-03-15 Semiconductor Energy Laboratory Co., Ltd. Portable information processing system
US6087941A (en) * 1998-09-01 2000-07-11 Ferraz; Mark Warning device for alerting a person falling asleep
JP2000137792A (ja) 1998-10-30 2000-05-16 Toyota Motor Corp 眼部検出装置
US6433760B1 (en) * 1999-01-14 2002-08-13 University Of Central Florida Head mounted display with eyetracking capability
US7120880B1 (en) * 1999-02-25 2006-10-10 International Business Machines Corporation Method and system for real-time determination of a subject's interest level to media content
WO2000052563A1 (en) * 1999-03-01 2000-09-08 Bae Systems Electronics Limited Head tracker system
US6090051A (en) * 1999-03-03 2000-07-18 Marshall; Sandra P. Method and apparatus for eye tracking and monitoring pupil dilation to evaluate cognitive activity
US6247813B1 (en) * 1999-04-09 2001-06-19 Iritech, Inc. Iris identification system and method of identifying a person through iris recognition
US20020024633A1 (en) * 1999-04-09 2002-02-28 Daehoon Kim Pupil evaluation system
US6116736A (en) * 1999-04-23 2000-09-12 Neuroptics, Inc. Pupilometer with pupil irregularity detection capability
US6820979B1 (en) * 1999-04-23 2004-11-23 Neuroptics, Inc. Pupilometer with pupil irregularity detection, pupil tracking, and pupil response detection capability, glaucoma screening capability, intracranial pressure detection capability, and ocular aberration measurement capability
US6346887B1 (en) * 1999-09-14 2002-02-12 The United States Of America As Represented By The Secretary Of The Navy Eye activity monitor
GB0023172D0 (en) 2000-09-20 2000-11-01 Minter Kemp Martin J Wakeup vizor
JP2002143094A (ja) 2000-11-07 2002-05-21 Nac Image Technology Inc 視線検出装置
US6864473B2 (en) * 2000-12-07 2005-03-08 The United States Of America As Represented By The United States National Aeronautics And Space Administration Dynamic optical filtration
US6634553B2 (en) * 2001-03-21 2003-10-21 Hewlett-Packard Development Company, L.P. Method and apparatus for even illumination of a target for image capture
JP3812355B2 (ja) * 2001-03-22 2006-08-23 日産自動車株式会社 運転注意力検出装置および居眠り運転検出装置
US6578962B1 (en) * 2001-04-27 2003-06-17 International Business Machines Corporation Calibration-free eye gaze tracking
US6959102B2 (en) * 2001-05-29 2005-10-25 International Business Machines Corporation Method for increasing the signal-to-noise in IR-based eye gaze trackers
US6775060B2 (en) * 2001-07-26 2004-08-10 The Schepens Eye Research Institute, Inc. Bioptic telescope system embedded into a spectacle lens
GB0119859D0 (en) * 2001-08-15 2001-10-10 Qinetiq Ltd Eye tracking system
US6927694B1 (en) * 2001-08-20 2005-08-09 Research Foundation Of The University Of Central Florida Algorithm for monitoring head/eye motion for driver alertness with one camera
US6997556B2 (en) * 2001-10-01 2006-02-14 Ernst Pfleger Method for detecting, evaluating, and analyzing look sequences
AUPR872301A0 (en) * 2001-11-08 2001-11-29 Sleep Diagnostics Pty Ltd Alertness monitor
US20040061680A1 (en) * 2002-07-10 2004-04-01 John Taboada Method and apparatus for computer control
NL1021496C2 (nl) 2002-09-19 2004-03-22 Joannes Hermanus Heiligers Signaleringsinrichting en werkwijze voor het monitoren van alertheid van personen.
US6637883B1 (en) * 2003-01-23 2003-10-28 Vishwas V. Tengshe Gaze tracking system and method
US7347551B2 (en) * 2003-02-13 2008-03-25 Fergason Patent Properties, Llc Optical system for monitoring eye movement
US7391888B2 (en) * 2003-05-30 2008-06-24 Microsoft Corporation Head pose assessment methods and systems
EP1482768B1 (en) * 2003-05-30 2009-01-07 Continental Automotive GmbH Method and driver for driving electroluminescent lamps
US7731360B2 (en) * 2003-11-07 2010-06-08 Neuro Kinetics Portable video oculography system
US20050100191A1 (en) * 2003-11-11 2005-05-12 Harbach Andrew P. Imaging system and method for monitoring an eye
US7963652B2 (en) * 2003-11-14 2011-06-21 Queen's University At Kingston Method and apparatus for calibration-free eye tracking
WO2005059630A2 (en) * 2003-12-17 2005-06-30 The Schepens Eye Research Institute, Inc. Peripheral field expansion device
US7331671B2 (en) * 2004-03-29 2008-02-19 Delphi Technologies, Inc. Eye tracking method based on correlation and detected eye movement
CN102068237A (zh) 2004-04-01 2011-05-25 威廉·C·托奇 监控眼睛运动的系统及方法、控制计算装置的系统及方法
US7509043B2 (en) * 2004-05-25 2009-03-24 Nikon Corporation Illuminating device for photographing and camera
US7775679B2 (en) * 2004-08-18 2010-08-17 Advanced Illumination, Inc. High intensity light source for a machine vision system and method of making same
US7438418B2 (en) * 2005-02-23 2008-10-21 Eyetracking, Inc. Mental alertness and mental proficiency level determination
US7344251B2 (en) * 2005-02-23 2008-03-18 Eyetracking, Inc. Mental alertness level determination
RU2423070C2 (ru) 2005-03-04 2011-07-10 Слип Диагностикс Пти.Лтд Измерение бдительности
US7430365B2 (en) * 2005-03-31 2008-09-30 Avago Technologies Ecbu (Singapore) Pte Ltd. Safe eye detection
JP2006307611A (ja) 2005-04-28 2006-11-09 Shingo Kizai Kk 対面反射拡散型高出力ｌｅｄ内照式道路標識
RU2411586C2 (ru) 2005-08-11 2011-02-10 Слип Дайэгностикс Пти. Лтд Очки с контролем внимательности
US8358337B2 (en) * 2005-08-23 2013-01-22 National University Corporation Shizuoka University Pupil detection device and pupil detection method
JP4921486B2 (ja) * 2005-11-30 2012-04-25 シーイング・マシーンズ・プロプライエタリー・リミテッド 視覚的に頭と目を追跡するシステムにおける眼鏡の視覚的追跡
WO2007085682A1 (en) 2006-01-26 2007-08-02 Nokia Corporation Eye tracker device
JP2007195775A (ja) 2006-01-27 2007-08-09 Keio Gijuku 瞳検出方法、瞳位置検出装置及び透過型視線検出装置
JP2007319174A (ja) * 2006-05-30 2007-12-13 Matsushita Electric Ind Co Ltd 撮影装置およびそれを用いた認証装置
BRPI0713293B1 (pt) 2006-06-28 2018-08-07 Philips Lighting Holding B.V. Método para controlar um sistema de iluminação com múltiplas fontes de luz controláveis e sistema de controle para controlar um sistema de iluminação
US7646422B2 (en) * 2006-10-04 2010-01-12 Branislav Kisacanin Illumination and imaging system with glare reduction and method therefor
JP2008091840A (ja) * 2006-10-05 2008-04-17 Sony Corp 固体撮像装置及び電子機器
US8225229B2 (en) * 2006-11-09 2012-07-17 Sony Mobile Communications Ab Adjusting display brightness and/or refresh rates based on eye tracking
SE0602545L (en) 2006-11-29 2008-05-30 Tobii Technology Ab Eye tracking illumination
US7783077B2 (en) * 2006-12-01 2010-08-24 The Boeing Company Eye gaze tracker system and method
US20080128498A1 (en) * 2006-12-05 2008-06-05 Fausak Andrew T System, method, and apparatus for high value product management and tracking
KR100850357B1 (ko) * 2006-12-06 2008-08-04 한국전자통신연구원 시선 위치 추적 방법 및 그 장치
US20080166052A1 (en) * 2007-01-10 2008-07-10 Toshinobu Hatano Face condition determining device and imaging device
CN101669023A (zh) * 2007-04-20 2010-03-10 株式会社名南制作所 木材的检测方法及装置及程序
US7633244B2 (en) * 2007-09-19 2009-12-15 Zippy Technology Corp. Method for dimming multiple lamps
WO2009101238A1 (en) 2008-02-14 2009-08-20 Nokia Corporation Device and method for determining gaze direction
EP2306891A1 (en) 2008-07-08 2011-04-13 IT University of Copenhagen Eye gaze tracking
EP2236074B1 (en) 2009-04-01 2021-05-26 Tobii AB Visual display with illuminators for gaze tracking
EP2238889B1 (en) * 2009-04-01 2011-10-12 Tobii Technology AB Adaptive camera and illuminator eyetracker

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040005083A1 (en) * 2002-03-26 2004-01-08 Kikuo Fujimura Real-time eye detection and tracking under various light conditions
CN1486878A (zh) * 2002-07-08 2004-04-07 矢崎总业株式会社 防止瞌睡开车装置
WO2007092512A2 (en) * 2006-02-07 2007-08-16 Attention Technologies, Inc. Driver drowsiness and distraction monitor

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105340265A (zh) * 2013-06-18 2016-02-17 摩托罗拉解决方案公司 用于显示来自相机的图像的方法和设备
CN106716305A (zh) * 2014-09-25 2017-05-24 飞利浦灯具控股公司 照明的控制
CN107438790A (zh) * 2015-04-10 2017-12-05 埃西勒国际通用光学公司 头戴式显示设备
CN108369364A (zh) * 2015-11-10 2018-08-03 亮锐控股有限公司 自适应光源
US11184552B2 (en) 2015-11-10 2021-11-23 Lumileds Llc Adaptive light source
US11223777B2 (en) 2015-11-10 2022-01-11 Lumileds Llc Adaptive light source
US11803104B2 (en) 2015-11-10 2023-10-31 Lumileds Llc Adaptive light source
US11988943B2 (en) 2015-11-10 2024-05-21 Lumileds Llc Adaptive light source
US12025902B2 (en) 2015-11-10 2024-07-02 Lumileds Llc Adaptive light source
TWI618970B (zh) * 2015-12-01 2018-03-21 群邁通訊股份有限公司 自動對焦拍照系統及電子裝置
CN110490017A (zh) * 2019-08-08 2019-11-22 广东斯玛特自动化科技有限公司 一种用于扫码机的照明方法及装置
CN110490017B (zh) * 2019-08-08 2022-02-22 广东斯玛特自动化科技有限公司 一种用于扫码机的照明方法及装置

Also Published As

Publication number Publication date
EP2543187B1 (en) 2022-11-16
EP2543187A4 (en) 2017-12-20
EP2543187A2 (en) 2013-01-09
US20110211056A1 (en) 2011-09-01
JP2013521710A (ja) 2013-06-10
US20150181100A1 (en) 2015-06-25
KR20130058665A (ko) 2013-06-04
RU2012141574A (ru) 2014-04-10
WO2011149577A2 (en) 2011-12-01
AU2011258826A1 (en) 2012-10-11
WO2011149577A3 (en) 2012-02-02
US8890946B2 (en) 2014-11-18
CN102918834B (zh) 2016-08-03
KR101829850B1 (ko) 2018-03-29

Similar Documents

Publication Publication Date Title
CN102918834A (zh) 用于空间控制的景物照明的系统和方法
EP1349487B1 (en) Image capturing device with reflex reduction
CN103748598B (zh) 用于识别视线跟踪场景参考位置的系统和方法
EP3527045B2 (en) Surveillance system and method of controlling a surveillance system
US10482347B2 (en) Inspection of the contoured surface of the undercarriage of a motor vehicle
US10007337B2 (en) Eye gaze imaging
US20140306612A1 (en) Illumination system
EP3850916B1 (en) Luminaire system for determining weather related information
CN107194881B (zh) 一种基于光度立体的去除图像反光方法
CN105259189A (zh) 玻璃的缺陷成像系统和方法
KR20000035840A (ko) 홍채영상 포착장치 및 홍채영상 포착방법
CN104434022B (zh) 用于以逆反射进行瞳孔追踪的光学数组系统及方法
EP3650991B1 (en) Monitoring system
CN113490316B (zh) 一种补光系统及补光灯
CN109076176A (zh) 眼睛位置检测装置和方法、带滚动快门驱动系统的图像传感器的成像装置及其照明控制方法
US11179035B2 (en) Real-time removal of IR LED reflections from an image
US11653832B2 (en) Image acquisition with reflex reduction
JP7228885B2 (ja) 瞳孔検出装置
CN216017031U (zh) 光源和摄像头模组杂光检测系统
US20200221000A1 (en) Camera system, vehicle and method for configuring light source of camera system
KR101707146B1 (ko) 전류제어방식을 이용한 적응적 조명장치 및 그에 대한 제어방법
WO2023095679A1 (ja) 視認状態判定装置及び視認状態判定システム
WO2016135373A1 (en) System and method for monitoring and improving healthy living environment
CN208968989U (zh) 一种可周向环绕检测的光源设置结构
JP2021040731A (ja) 均一照射モジュール

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
C41 Transfer of patent application or patent right or utility model
TR01 Transfer of patent right

Effective date of registration: 20161010

Address after: Nevada

Patentee after: EYEFLUENCE INC

Address before: Nevada

Patentee before: Eye Com Corp