CN100418112C - 用于记录和自动识别确认的面部成像系统 - Google Patents

用于记录和自动识别确认的面部成像系统 Download PDF

Info

Publication number
CN100418112C
CN100418112C CNB028201493A CN02820149A CN100418112C CN 100418112 C CN100418112 C CN 100418112C CN B028201493 A CNB028201493 A CN B028201493A CN 02820149 A CN02820149 A CN 02820149A CN 100418112 C CN100418112 C CN 100418112C
Authority
CN
China
Prior art keywords
image
face
facial
target
imaging system
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CNB028201493A
Other languages
English (en)
Other versions
CN1568489A (zh
Inventor
G·A·万比克
A·J·埃迪勒
M·D·考迪尔
S·A·莫埃卡
W·R·罗斯
J·F·沙奥
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
BIODENTITY SYSTEMS CORP
Original Assignee
BIODENTITY SYSTEMS CORP
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by BIODENTITY SYSTEMS CORP filed Critical BIODENTITY SYSTEMS CORP
Publication of CN1568489A publication Critical patent/CN1568489A/zh
Application granted granted Critical
Publication of CN100418112C publication Critical patent/CN100418112C/zh
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/183Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source
    • H04N7/186Video door telephones
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0062Arrangements for scanning
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/103Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/107Measuring physical dimensions, e.g. size of the entire body or parts thereof
    • A61B5/1077Measuring of profiles
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/117Identification of persons
    • A61B5/1171Identification of persons based on the shapes or appearances of their bodies or parts thereof
    • A61B5/1176Recognition of faces
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/98Detection or correction of errors, e.g. by rescanning the pattern or by human intervention; Evaluation of the quality of the acquired patterns
    • G06V10/993Evaluation of the quality of the acquired pattern
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161Detection; Localisation; Normalisation
    • G06V40/166Detection; Localisation; Normalisation using acquisition arrangements
    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07CTIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C9/00Individual registration on entry or exit
    • G07C9/30Individual registration on entry or exit not involving the use of a pass
    • G07C9/32Individual registration on entry or exit not involving the use of a pass in combination with an identity check
    • G07C9/37Individual registration on entry or exit not involving the use of a pass in combination with an identity check using biometric data, e.g. fingerprints, iris scans or voice recognition
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00Burglar, theft or intruder alarms
    • G08B13/18Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19602Image analysis to detect motion of the intruder, e.g. by frame subtraction
    • G08B13/19608Tracking movement of a target, e.g. by detecting an object predefined as a target, using target direction and or velocity to predict its new position
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00Burglar, theft or intruder alarms
    • G08B13/18Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19617Surveillance camera constructional details
    • G08B13/1963Arrangements allowing camera rotation to change view, e.g. pivoting camera, pan-tilt and zoom [PTZ]
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00Burglar, theft or intruder alarms
    • G08B13/18Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19678User interface
    • G08B13/19689Remote control of cameras, e.g. remote orientation or image zooming control for a PTZ camera
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/103Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/107Measuring physical dimensions, e.g. size of the entire body or parts thereof

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Health & Medical Sciences (AREA)
  • Animal Behavior & Ethology (AREA)
  • Veterinary Medicine (AREA)
  • Multimedia (AREA)
  • Biophysics (AREA)
  • Pathology (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Public Health (AREA)
  • Human Computer Interaction (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Theoretical Computer Science (AREA)
  • Quality & Reliability (AREA)
  • Signal Processing (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Dentistry (AREA)
  • Radiology & Medical Imaging (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Image Processing (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Studio Devices (AREA)
  • Collating Specific Patterns (AREA)
  • Image Analysis (AREA)
  • Alarm Systems (AREA)

Abstract

一种用于记录和/或自动身份确认的面部成像系统,包括一摄像单元和一摄像单元控制器。该摄像单元包括一视频摄像机;一可旋转镜子系统,用于将安全区域的图像引导到视频摄像机中;和一范围单元,用于检测目标的出现和用于向摄像单元控制器提供包括距离、角度和宽度信息的目标范围数据。该摄像单元控制器包括用于检测目标的面部图像、用于跟踪该检测到的面部图像;和用捕捉该高质量面部图像的软件。利用视频图像和范围数据的结合来执行面部监测和面部跟踪,将所捕获到的面部图像记录和/或使其用于面部识别和搜索。

Description

用于记录和自动识别确认的面部成像系统
技术领域
本发明涉及面部图像记录(recordal)和利用面部图像进行身份确认的领域,特别涉及记录面部并利用面部图像实现身份确认的装置,该面部图像是在安全区域自动获得的(即不需要人为干预),在该安全区域中不需要将人的行动限制在限定边界内。
背景技术
当今世界,恐怖主义正日益成为威胁,因此需要快速拍摄和记录或者识别可以进入特定限制区域例如机场、体育场、政治大会、立法会议、公司会议等的个人。还需要拍摄和记录或识别可以经过不同进入口岸进入一个国家的个人。识别这些个人的一个方法是利用面部识别技术通过生物统计识别来实现,它通过对一个人的唯一面部特征进行多种不同测量作为识别的手段。利用面部识别作为快速拍摄和识别希望进入安全区域的个人的手段会导致一些问题,例如成像速度较慢、所获得的图像质量很差、以及需要人为操作该系统。
过去解决这些问题的手段是使用高分辨率视频摄像机,用它来监视通往入口的安全区。通常,在该摄像机上安装固定焦距的透镜。利用软件来分析视频图像,从而检测和跟踪进入安全区的目标的面部图像。将这些图像捕获、记录并发送到面部识别和比较软件,从而识别这些个人并验证他们进入该区域的权利。使用这种系统的一个主要问题是视频数据分辨率低且“噪声干扰”太大以至于不能一致地提供良好的结果。这种系统只有在安全区域较小且进入安全区域的目标和监视摄像机之间的距离相对一致时才能比较好地工作。扩大安全区域和/或试图适应距离摄像机不同距离的目标物都会导致一些目标物的视频图像分辨率过低,不能实现用于面部识别的正常分析。因此这些系统的主要缺点在于它们只能在非常窄的角度和进深范围内正常操作。所捕获的图像质量以及对这些图像进行的面部识别成功率不一致。
其他已知系统使用两个摄像机,一个静态宽视野观察摄像机用于监视安全区域并检测面部,第二个可操作的窄视野观察摄像机可以利用平移、俯仰以及伸缩功能手段使该可操作摄像机对准由第一摄像机识别到的面部,捕捉该面部图像并将其发送以实现面部识别以及与数据库的比较。在该方法中,第二摄像机可以获得精确面部识别所需的高分辨率图像。这些系统的主要缺点在于随着距离第一摄像机的距离增加,很难在视野范围内识别包含面部的目标。第二,第二摄像机的机械化平移、俯仰和伸缩功能相对很慢。因此,该系统每次只能跟踪一个人。
另一种手段是使用由人操作者遥控的机械化平移、俯仰和伸缩摄像机来监视安全区域。这些系统通常用来监视较大区域或建筑。很多摄像机都可以被使用,通常各摄像机都在宽视角模式下操作。当操作者注意到一些相关的事情时,他/她可以利用机械化控制放大,从而获得需要进行面部识别的个人面部图像。这种系统的缺点在于它们需要操作者来检测和决定何时获得面部图像。这种系统通常很慢,每次所能跟踪的人不超过一个。
另一种解决手段要求希望进入安全区域的人以限制速度排成一个单列通过监视区域,这与经过机场的金属检测器非常相似。将一个单独、固定的聚焦摄像机安装在设定的距离处,从而捕获人们的面部图像以便进行面部比较和面部识别。这种系统对进入安全区域的人流有严格的限制,在很多情况下,例如体育馆内,它是完全不能工作的。另外,该系统还需要操作者来确保摄像机对准人的脸部,且不包括任何装置来确保获得正确的姿势。
根据上面所述,很明显需要一种自动面部成像系统来克服现有技术中的缺陷,该系统可以快速捕捉和记录进入安全区域的人的高质量面部图像,并选择性的使这些图像可用于面部比较和识别。这种系统最好包括自动、高精度、快速面部检测和面部跟踪系统,从而便于为了记录和/或面部比较和面部识别的目的而进行面部图像捕捉。
发明内容
本发明的一个方面的目的是通过提供一种面部成像系统来克服上述缺点,该系统可以快速检测安全区域内的目标人的面部图像并捕捉这些面部的高质量图像,这些高质量图像用于记录和/或面部识别系统以便进行面部验证、面部识别和面部比较。
本发明的另一方面的目的是提供一种用于面部成像系统的摄像机系统,它可以跟踪一个安全区域内的多个目标面部并提供这些面部的高质量图像,这些高质量图像用于记录和/或面部识别系统以便进行面部验证、面部识别和面部比较。
本发明的另一方面的目的是提供一种面部成像系统,它可以根据已知面部识别和面部比较系统的要求提供足够尺寸和分辨率的面部图像,从而使这些系统可以最有效的工作并一致地提供最佳结果以便用于面部识别和比较。
本发明的另一方面的目的是提供一种面部成像系统,它利用范围单元或其他设备提供的范围数据以及视频图像数据来帮助进行面部图像检测和面部图像跟踪。
本发明的另一方面的目的是提供一种面部成像系统,其利用范围单元或其他设备提供的范围数据的历史记录来帮助进行面部图像检测和面部图像跟踪。
根据本发明的一个方面,提供一种使用面部识别系统的用于记录和/或自动身份确认的面部成像系统,包括:一摄像单元,包括:一摄像单元控制器;和一视频摄像机,用于捕获目标图像并将该目标图像发送到所述摄像单元控制器;所述摄像单元控制器包括:一面部检测系统,用于检测目标图像内的面部图像,所述面部图像具有一定质量;和一面部捕获系统,用于当所述面部图像足以达到所述面部识别系统的需要进行最佳面部识别时,捕获所述面部图像,所述面部捕获系统包括一质量评价系统,用于判断所述面部图像的质量何时足以达到所述面部识别系统的需要进行最佳面部识别。
该视频摄像机自身,不论其全部或局部可以被启动,从而通过平移、俯仰和聚焦来实现对目标的跟踪。或者该视频摄像机可以通过能够快速转移视野范围的驱动反射器装置例如镜子来观察场景。存在传感器提供的范围数据至少在开始时可以有助于该摄像机的指向。
图像的捕获率主要取决于在图像检测、图像跟踪和最后的图像捕获等特定步骤中所花的时间。根据符合预定质量阈值的图像是否出现,来决定是否进行图像捕获。一旦已经捕获图像,则系统将被重置以重复循环。本发明的一个目的是最小化该循环时间。
在最佳实施例中,这里所述的面部成像系统使用高分辨率、可操作视频摄像机和高分辨率的基于激光的范围仪。该范围仪通常大约每100毫秒以45度的视野范围对所监视的安全区域扫描一次,注意该区域内任何潜在目标的角度位置、距离和宽度。所监视的安全区域的进深通常为15米,但是也可对其进行修改以适应特别的安装。将所监视的安全区域内的目标的角度位置、距离和宽度提供给摄像单元控制器计算机,该计算机对这些数据进行处理并发送指令从而使视频摄像机指向所注意的目标。这些指令是用于视频摄像机的平移、俯仰和伸缩功能。根据距离目标的距离,启动视频摄像机的伸缩功能,起伸缩程度应当实现能够获得平均人的面部视频图像至少占到图像区域的20%以上。使用面部检测软件来分析该图像,并判断图像是否包含人的面部,该面部检测软件使用指定潜在目标的距离、角度位置和宽度的范围数据。如果检测到面部,则视频摄像机计算并使用主要面部特征的坐标,进一步对该面部进行放大,从而使其填充视频摄像机的几乎整个面积。根据范围数据和视频图像连续更新这些坐标,且这些坐标可用于在目标面部来回运动时跟踪该目标面部。当根据基于当前使用的面部识别系统的预定标准,判断该面部的图像质量已经足够时,捕捉该面部图像,并将其记录和/或使其可用于面部识别软件,从而用于生物验证和识别以及与外部数据库进行比较。
本发明中所用的视频摄像机具有独特的设计,它可以进行高速、精确的瞄准操作。本发明可以快速瞄准视频摄像机的能力能够同时以真正的多种模式对很多人进行跟踪。该视频摄像机可以快速从一个人瞄准另一个人,然后再重新返回。与其它机械化评议、俯仰、伸缩视频摄像机不同,本发明的视频摄像机并不是在平台上运动从而执行平移操作。相反,在一线性动圈式电机上直接安装一轻质镜子,该镜子用于将该安全区域的一部分的图像引导给视频摄像机。通过运动该镜子,可以以几十毫秒的量级非常快地使该视频摄像机的视野平移经过该安全区域,从而使系统在真正的多种模式进行操作。俯仰仍然是通过移动视频摄像机自身来实现,但是在正常操作距离下,视频摄像机必须进行俯仰以获得面部图像的角度非常小,可以很容易通过已知的俯仰机械结构来实现。可以通过运动视频摄像机透镜元件以标准方式完成伸缩。
本发明的系统还可以集成图像分析逻辑电路,该逻辑电路可以“板载”于摄像单元所处的位置,或者位于比较元的位置。因此可以对该摄像机系统编程以获得特定人的其他图像。视频图像的面部跟踪数据可用以增强面部识别逻辑操作的执行。图像数据可以与存在传感器输出的数据合并,以确保良好的照明和姿势控制。这可以增强身份确认和/或使系统保持预设的一致标准。
本文中所述的技术方案的优点有很多。由于它不再需要通过快速的前后移动在安全区域上平移,因此可以消除对视频摄像机的损害。实现视频摄像机的快速移动将不再需要大功率的平移电机或相关的齿轮,从而可以消除传动后冲的问题。目标范围数据与目标视频数据一起使用可以使系统更精确地检测和跟踪安全区域内的面部,并可以跟踪多个目标面部。视频和范围数据以互补的方式使用,从而当只有一个数据源可用时,可以消除面部检测和跟踪中存在的模糊。当输入的图像姿势不好、照明不好或采集不好时,当前的面部识别软件算法执行将有困难。将目标范围数据与目标视频数据结合使用将可以更为精确的选择具有良好照明的正确居中的图像以及图像捕捉的正确时机,以确保正确的姿势。改进后的图像质量可以显著的提高面部识别性能。
本发明的其他目的和优点可以从下面的描述和附图中变得更为明显,其中很明显的描述和示出了本发明的最佳实施例。
附图说明
从下面参照附图的说明中可以对本发明进一步理解。
图1示出安装在安全区域中的本发明顶示图;
图2是一侧示图,示出本发明视频摄像机、可旋转镜子系统及范围单元在安全区域中的一种可能安装位置;
图3示出如图1中所示的本发明摄像单元的方块图;
图4示出本发明包括多个摄像单元和一个外部控制器的网络结构的方块图。
具体实施方式
参照图1和2,示出一种自动身份确认系统10,它用于监视目标1并获取进入安全区域4的目标面部2的图像。同样如图4中的结构方块图中所示,自动身份确认系统10包括一个或更多摄像单元20和一个外部控制器50。摄像单元20包括一视频摄像机21、一可旋转镜子系统25、范围单元30和一摄像单元控制器40。
通过该描述可以理解,安全区域4是一个三维空间。按照正常方式垂直方向是从安全区域的底部到顶部测量,从摄像单元20的视点观看,同样按照正常方式,水平方向是从一侧到另一侧测量,深度方向是从摄像单元20向外测量。因此对于站在安全区域4范围内且面向摄像单元20的人来说,垂直方向是从这个人的脚到头,水平方向是从这个人的左侧到右侧,深度是从这个人的前到后。
摄像单元-视频摄像机
摄像单元20包括一标准视频摄像机21,这种类型视频摄像机经常用于机械视频系统中。虽然存在很多有不同公司制造的像机,但是在这里描述的特定情况下,这种类型很适合,申请人使用了由SonyTM生产的彩色视频摄像机,编号为EVI-400。这种摄像机具有伸缩能力,可以自动曝光控制和自动聚焦。视频摄像机21包括一用于将视频信号发送给摄像单元控制器40的视频输出端和一用于与摄像单元控制器40连接从而控制和监视多种摄像机功能例如伸缩、聚焦和曝光等的串行输入/输出(I/O)接口。为了扩大视频摄像机21操作的范围,增加了望远倍率镜23,从而可以最大范围内捕捉人的面部2的图像,是该面部填充整个视频图像。在当前的情况下,将最大范围任意设定为15米,但是通过增加范围单元30的灵敏度并增加透镜23的焦距还可以扩大该最大范围。摄像单元20包括一俯仰电机24和俯仰电机驱动电子设备,用于使视频摄像机21向上和向下倾斜从而实现垂直方向的扫描。视频摄像机需要在垂直方向倾斜的角度很小,这是因为只需要补偿从共同的参考点看到的人的面部的垂直高度的差别,该共同参考点通常是平均人眼水平面。
如上所述,摄像单元20具有聚焦、俯仰和伸缩能力,因此可以使视频摄像机21快速运动从而从目标1中获得高质量的面部图像。这些特征都是由摄像单元控制器40通过串行接口输入的摄像机控制信号来控制的。对范围单元30所选择的特定目标的聚焦是自动的,仅需视频摄像机21对准目标即可。将伸缩控制为设定值,该社定值可以允许视频摄像机21的视野最初大于在目标距离处的表现出的平均人面部。典型地,设定伸缩从而使平均人面部填充视野的20%。利用摄像单元控制器40根据范围单元30和视频摄像机21输出的数据输出的信号对伸缩进行精调。在当前的结构中,利用安装在视频摄像机21上的外部俯仰电机24来实现俯仰功能,但是在其他结构中它可以合并作为视频摄像机21的一部分。获得目标1的高质量目标图像所需的俯仰量取决于范围单元30和视频摄像机21提供的数据,并由摄像单元控制器40输出的信号来控制。范围数据非常重要,因为目标距离在确定所需俯仰量时非常有用。
由于视频摄像机21的视野为长方形,其一维尺寸大于另一维尺寸,因此申请人发现将视频摄像机重新定向,使视野的较长维平行于安全区域4的垂直方向,从而增加对安全区域4中垂直目标例如人的捕捉面积。通过增加对垂直目标的捕捉面积,申请人减少了视频摄像机获得目标高质量面部图像所需俯仰的量。
摄像单元-可旋转镜子系统
如图1所示,摄像单元20包括一位于视频摄像机21正前方的可旋转镜子系统25。可旋转镜子系统25包括一直接安装在线性电机28的垂直电机轴27上的轻质镜子26。该线性电机28是用于计算机硬盘驱动器中所用的类型,包括足以快速和精确的将旋转镜子26旋转到预期位置的伺服电子驱动器。还包括直接安装在轴27上的标准位置反馈系统,该标准位置反馈系统包括读取镜子26的精确位置并向伺服驱动器输出位置反馈信号的电路。通过将位置反馈信号与从摄像单元控制器40中接收到的用于表示镜子26的预期位置的指令信号相比较,电机28可以驱动镜子26使其直接瞄准该预期位置。
在图1和2所示的结构中,范围单元30确定安全区域4中目标1的距离(深度)、角度位置和宽度,并将这些坐标提供给摄像单元控制器40。摄像单元控制器40向镜子系统25发送镜子指令信号,使线性电机28将镜子26旋转到适当的位置,从而为摄像单元20提供水平平移特性。将入射到镜子26上的目标1的图像引导到视频摄像机21以便进行图像获取。通过快速旋转镜子26,视频摄像机21可以在安全区域4的整个水平范围内有效地平移,其花费的时间仅为利用电机驱动实现水平平移特性的标准视频摄像机完成同样的任务所花费时间的一部分。可以实现从安全区域4中的任何目标平移到安全区域4中的其他目标所需的响应时间小于100毫秒。可以实现平移精度在十分之一度内。
镜子系统25包括一镜子制动器(未示出),当已经获取了所需目标1时,该镜子制动器可以保持和锁定镜子26。该镜子制动器可以防止镜子26的振动,从而提高了图像的稳定性,进而改进了图像质量。在最佳实施例中,镜子制动器为位于轴27上的电磁体。
镜子系统25可以包括第二种可旋转自由度,从而为视频摄像机21提供垂直俯仰特性,代替由外部俯仰电机24所提供的俯仰特性。在该变化例中,第二可旋转镜子系统可包括一第二镜子,该第二镜子可以在与电机26的旋转轴成90度的一轴上旋转。在这种结合中,这两个可旋转镜子系统可以为视频摄像机26提供垂直俯仰和水平平移特性。
摄像单元-摄像机/镜子系统控制
参照图3,摄像机/镜子系统控制器39与视频摄像机21和可旋转镜子系统25连接,包括硬件和软件部分,用于从摄像单元控制器40接收摄像机和镜子系统控制指令以及控制视频摄像机21和镜子系统25的多种不同功能。这些功能包括曝光、伸缩、聚焦、俯仰、平移(镜子旋转)、开/关、视频摄像机帧率、亮度和对比度。摄像机/镜子系统控制器39还用读回视频摄像机21和镜子系统25的多种不同功能的状态,并将它们报告给摄像机控制器40。
摄像单元-范围单元
参照图1-4,摄像单元20包括一用于在保护区域4中定位目标1的范围单元30。在本发明的一个方面中,范围单元30是公知的设计,利用与旋转范围镜子和范围透镜接收系统一起操作的激光二极管距离测量设备扫描安全区域4。利用飞行时间法原则来计算目标1的距离。在当前结构中,范围镜子每旋转1/4度,激光二极管就发出一次脉冲,该脉冲持续大约亿分之一秒。旋转范围镜子将激光束反射进入安全区域4,范围透镜接收系统测量由目标1反射的任何返回脉冲。在知道光速定值和激光脉冲和返回反射光束之间时间间隔后,就可以计算出到目标1的距离。范围单元30记录区域4内被检测目标的该距离(深度)、角度位置和宽度,并将该信息发送给摄像单元控制器40。由于范围单元30可以记录每1/4度的范围数据,因此范围数据可以提供被分析的目标轮廓,从而判断它是否与人的轮廓(相对平滑)匹配。在范围镜子每次旋转期间,可以完成安全区域4的完整扫描,这种旋转每100毫秒发生一次,从而可以实现非常快速的检测和目标的定位。区域4的扫描率被称为范围单元的帧率,并可以根据安装要求或操作模式而改变。
范围单元30通常位于视频摄像机21下平均人体胸部高度的水平面上。视频摄像机21通常位于平均人眼水平面。但是,也可以根据特定安装对范围单元30和视频摄像机21进行其他布置。
读者应当理解本发明中也可以使用其他结构的范围单元30。例如,可以使用声纳范围系统或高频雷达或双眼视差/视差差数系统。
摄像单元-范围单元控制器
范围单元30包括范围单元控制器41,该范围单元控制器41包括硬件和软件部分来管理范围单元30的多个不同功能,其中包括将范围镜子旋转速度保持在特定参数范围内,当安全区域内没有活动时将激光二极管调节为功率节省模式,这些功率节省模式包括在“静止”时间内减小激光脉冲率的“睡眠”模式,从摄像单元控制器40接收控制函数,根据请求向摄像单元控制器40发送涉及范围单元30的状态信息。范围单元控制器41通过执行多种不同函数对范围数据进行预处理,这些多种不同函数包括消除包括单个不相关扫描点的离散数据的噪声过滤函数,对多个扫描线进行运动平均和扫描平均以平滑范围数据,采样群计算从而判断检测到的物体是否代表在给定距离具有必须宽度的感兴趣的目标,从感兴趣目标中提取坐标信息,该坐标信息包括角度、范围(距离)和宽度,并根据各目标的范围数据建立向量化轮廓。范围单元控制硬件41向摄像单元控制器40发送原始范围数据或预处理后的向量化范围数据轮廓以便进行进一步处理。向量化范围数据是以n(a1,r1,w1)(a2,r2,w2)...的形式被发送的,其中n表示所扫描的安全区域中目标的数目,ax表示编号为x的目标在该安全区域中的角度位置,rx表示目标x的范围(距离),wx表示目标x的宽度。根据范围单元控制器41的请求或在连续模式下以可选择的(可编程的)刷新率向摄像单元控制器40发送范围数据。
摄像单元-摄像单元控制器
摄像单元20还包括摄像单元控制器40,图3中方块图对其详细示出。摄像机端控制器40包括所有的硬件和软件从而在视频摄像机21、范围单元30、可旋转镜子系统25以及外部控制器50之间提供接口。摄像单元控制器40的目的就是控制对安全区域4内感兴趣的目标1的面部2的高质量视频图像进行检测、跟踪和捕获。通过处理从范围单元30和视频摄像机21接收到的输入数据并使用该数据计算出适当的瞄准指令信号并将其发送回视频摄像机21和可旋转镜子系统25中,可以实现该目的。摄像单元控制器40还与外部控制器50进行交互,从而接收外部控制指令并发送所捕获的视频图像。外部控制指令用于配置摄像单元20的部件并改进它们的性能,例如锁定和跟踪安全区域4内的特定目标。
摄像单元-摄像单元控制器硬件
摄像单元控制器40包括硬件,该硬件包括具有CPU、RAM和存储器、用于视频输入的接口连接电路、多个串行端口和高速I/O以及以太(Ehternet)接口的计算机。视频输入端上接收到视频摄像机21的输出。多个串行端口中的一个接收到范围单元30的输出以及输入到范围单元30的控制信号。网络接口用于与外部控制器50连接。摄像单元控制器40还可以使用其他硬件配置,例如可以使用多个、低功率CPU替换一个单独的高功率CPU,视频摄像机21的视频输入可以直接是数字的,或者外部控制器50的接口可以是高速串行或无线网络,而不是以太网。
摄像单元-摄像单元控制器软件
摄像单元控制器40包括摄像单元控制器软件,该软件包括现代网络,可以使多任务操作系统控制多个独立互通软件部分的操作和进程。摄像单元控制器软件部分包括:视频摄像机数据处理模块43;范围单元数据处理模块4;摄像机/范围单元控制模块45;面部检测模块46;面部跟踪模块47;面部图像捕获模块48;摄像单元控制器系统控制模块49以及摄像单元控制器通信60。
在硬件视频捕获板中非同步的将视频摄像机21输出的视频帧数字化。将该数据提供进行视频摄像机数据处理模块43,该视频摄像机数据处理模块43包括执行基本图像处理操作的软件,从而对输入数据进行标准化、缩放和校正。根据标准校正数据对图像色彩和几何结构进行校正。执行图像增强和噪声过滤,从而使摄像单元控制器系统控制模块49可以使用处理后的视频图像数据,其中该摄像单元控制器系统控制模块49用于执行多个功能,包括面部检测、面部跟踪或面部图像捕获(参见下述)。
可以连续地或根据摄像单元控制器40的请求,从范围单元30向摄像单元控制器40输入范围数据。该范围数据采用距离(深度或半径)、角度和宽度值的表的形式。利用范围单元数据处理模块44处理该范围数据,该范围单元数据处理模块44包括用于确定目标在安全区域4内的位置和定位的软件。使用推断式方法来去除背景和较小直径的“噪声”,仅剩下与预期目标即人具有相似尺寸的较大目标。这些推断是智能软件,它利用对数据的历史的、可能性和统计分析,来确定安全区域内目标的特征。例如,如果仅在范围单元30的一次扫描中检测到目标,而没有在前一次和后一次扫描中检测到目标,则可以安全地假定出现了乱真事例,对其可以忽略。相似的,可以对在安全区域内行动的目标的速度进行限制。如果目标在扫描之间移动了5米,则可以安全地假定该目标不是人。另外,当安全区域4完全是空的时,在安装时采用的校准值可用于将潜在目标从安全区域内的固定目标中分离出来,这些固定目标例如支撑杆等(背景去除)。
摄像单元控制器系统控制模块49可以使用处理后的范围数据,该摄像单元控制器系统控制模块49用于帮助进行面部检测和面部跟踪。范围单元数据处理模块44将安全区域4内的每个目标的前次范围数据的历史缓冲保持预订时间间隔。面部检测模块46和面部跟踪模块47使用该历史缓冲来进行面部检测和面部跟踪。例如,单独的大的目标可以是一个大人,或者是站位比较靠近的两个人。如果两个人的面部彼此很近,则很难区分这两种情况。但是利用历史缓冲数据,就可以确定两个单独的较小的人之前是彼此分离的目标但是现在移动到了一起。这样,就可以使从范围单元30和视频摄像机26接收到的模糊数据变得清楚。
摄像机/范围单元控制模块45包括软件,用于管理经过摄像单元控制器串行I/O端口向视频摄像机21、范围单元30和可旋转镜子系统25发送的所有信号。这些控制指令到达范围单元控制器41和摄像机/镜子系统控制器39,它们都是基于在摄像单元控制器系统控制模块49接收到的输入。摄像单元控制器系统控制模块49根据范围单元30输出的范围数据和视频摄像机21输出的目标视频图像的几何形状变化,确定目标的位置变化。通过摄像机/范围单元控制模块45发送用于控制视频摄像机开/关;视频摄像机聚焦;视频摄像机俯仰;镜子旋转(平移);视频摄像机伸缩;视频摄像机帧率;视频摄像机亮度和对比度;范围单元开/关;和范围单元帧率的控制指令,以便于进行面部检测和面部跟踪。指令信号的目的是确保正确的跟踪目标并获得目标面部的高质量视频图像以便用于识别目的。另外,摄像机/范围单元控制器模块45对其所发送的多个指令的时序进行适当的管理,从而确保这些指令的可靠延迟以及这些指令的执行,向视频单元控制器系统控制模块49警告这些指令出现的任何问题或视频摄像机21、范围单元30或可旋转镜子系统25中可能出现的其他问题情况。例如,如果可旋转镜子系统25对控制指令没有响应,则可以假定该电机28出现故障或镜子26不能转动(stuck),此时就需要发出警报通知需要进行维护。
面部检测模块46包括软件,从而在视频摄像机21输出的视频图像中检测面部图像。起初,面部检测模块46使用整个输入视频图像进行面部检测。使用很多不同的、公知的软件算法策略对输入数据进行处理,并使用启发式方法将这些数据合并,从而最小化面部检测处理中导致的模糊。这种模糊可能是由以下因素造成的,例如由于面部表情(非僵硬的)的变化和相同人的面部的多个图像之间的结构不同造成的图像变化;化妆特征,例如眼镜或胡子;以及在自然环境中的不可预测的成像条件例如照明。由于面部是三维的,光分布的任何变化都可以导致显著的阴影变化,这意味着二维面部图像的变化增加。面部检测模块46所使用的启发式方法包括用于确定在特定情况下哪种软件算法最为适合的一系列规则。例如,在理想照明条件下,很多面部颜色和形状算法都可以提供高速的所需精度。增加范围单元30输出的范围数据从而缩小搜索,并根据安全区域4中目标的目标宽度和历史运动特征,帮助确定视频图像中最可能包含人面部的特定区域。
下面是一些本领域公知的软件算法,申请人使用它们进行面部检测:
大量面部颜色和形状估算;
利用生物规范进行个人面部特征检测(对眼、鼻、嘴等)从而消除不可能的特征;
根据训练算法对大量面部和非面部数据进行人造神经网络分析;和
使用主要部分分析(PCA)的贝叶斯分析或面部图像的特征面部分解。
本发明的面部检测模块46适用范围单元30输出的范围数据,执行下面的其他步骤,申请人发现下面这些步骤可以增加本发明检测视频图像内面部的能力。
分析范围数据从而分离人的大小的目标。如上所述,这包括智能软件,他利用对范围数据的历史、可能性和统计分析,确定安全区域内目标的特征并消除不像人类的小型或快速移动目标产生的噪声。范围单元30输出的范围数据可用于确定具有适当宽度(30-100cm)和形状(平滑前表面)的目标。确切的知道具有人的大小的目标在视频图像中所处的位置可以为进行面部检测提供一个开始点。
分析范围数据历史从而确定人群的存在。这可以通过利用上述技术根据对范围数据的分析在各视频帧中分出具有人的大小的目标来实现。使用运动估算软件例如卡尔曼滤波来估算该目标的轨道,并识别与卡尔曼轨道估算很不匹配的模糊目标。最后,对模糊目标进行分类并使用分类来帮助进行面部检测。例如,可能判断特定的模糊是否是由于两个或更多人站立靠近而造成的。
在本发明最佳实施例中,面部检测模块46根据颜色、形状和结构识别对应面部的一个图像。根据对具有很差分辨率的分割后图像进行区域成长算法,可以定位椭圆形区域。利用面部形状估算算法可以增强彩色算法。在将区域边界与具有固定的高度宽度比(通常为1.2)的椭圆形(模仿头部形状)进行匹配后,将图像区域标记为“面部”或“非面部”。
在本发明的另一最佳实施例中,可以利用红外(IR)照明进行眼睛检测的方法来对正常人面部上的眼睛进行定位,从而有助于面部检测模块46。在本方法中,利用IR频闪器产生的红外光(burst)照明该目标,该红外光最好与视频摄像机21的光轴同轴或近似同轴。该IR增加了视频图像上人眼的瞳孔亮度。通过对该增加亮度区域进行定位,面部检测模块46就可以快速识别和定位视频图像内的潜在面部。如果IR频闪器仅在特定识别的视频帧内闪烁,则可以使用帧减法技术从而更为容易的识别增加亮度的区域,该增加亮度的区域对应于人眼的位置。精确的识别人眼位置具有其他优点,即这类信息还可以极大的提高面部识别软件的精确度。
面部检测本身是一种计算很多的任务。在当前的处理器速度下,不可能对视频摄像机21输出的各视频图像执行完整的面部检测。因此,仅当需要时,即当接收到的图像中没有进测到面部时,摄像单元控制器系统控制模块49才启动面部检测处理。一旦检测到面部,面部检测就终止且面部跟踪模块47结束。面部跟踪模块47的质量由跟踪可信参数来表示。当跟踪可信参数小于设定的阈值时,认为目标面部丢失并继续面部检测。当跟踪可信参数达到预定的图像捕获阈值时,面部图像捕获模块48获得了面部图像。当需要足够多的高质量面部图像时,放弃该目标并对其他目标继续进行面部检测。
当视频图像中检测到一个面部时,为了确定检测到的面部在垂直方向、水平方向和深度方向上的运动速率和方向,启动包括面部跟踪软件的面部跟踪47,对视频摄像机数据处理模块43和范围单元数据处理单元44输出的数据进行处理。以检测到的目标面部位置和尺度进行面部跟踪47,并使用局限于检测到的目标面部的周围边界框的感兴趣的区域(ROI)。向摄像单元控制器系统控制模块49报告任何运动,指导可旋转镜子系统25的平移以及视频摄像机21的伸缩、聚焦和俯仰功能,从而跟踪该目标面部并将其保持在视野范围内。跟踪该目标面部直到跟踪可信下降到设定阈值以下。在认为目标丢失的情况下,系统切换回检测模式。摄像单元控制器系统控制模块49可以确定何时启动面部图像捕获模块48。
面部跟踪模块47利用很多公知软件算法策略来处理输入的视频和范围数据,并使用启发式方法来合并结果。所使用的启发式方法包括确定在特定情况下哪种软件算法最为合适的一系列规则。下面是申请人在面部跟踪中所使用的一些公知的软件算法;
帧与帧之间取差以检测运动;
视频流的光学流技术;
大量面部色彩和形状估算;
卡尔曼过滤分析从而根据上次运动估算过滤当前运动并预测未来运动;
根据训练算法对大量视频序列进行人工神经网络分析。
本发明的面部跟踪模块47还使用范围单元30输出的范围数据执行下面的其他步骤,申请人发现可以增加本发明跟踪的能力:
范围数据和范围数据历史分析。如上所述,可以使用各目标的前一范围数据的历史缓冲来判断一个单独大的目标是否为一个大的人,还是两个站立彼此靠近的人或者根本不是人。
在本发明的最佳实施例中,将一个椭圆形轮廓线与检测到的面部轮廓进行匹配。每当新的图像可处理时,面部跟踪模块47就使用前一图像的椭圆进行匹配,从而使其最近似的匹配新图像中的面部位置。返回反映模板匹配的可信值。利用卡尔曼过滤顺序分析面部位置,从而在所确定的误差范围内确定面部的运动轨迹。该运动轨迹可便于面部检测。
很多面部跟踪算法都部分地根据色彩和色彩纹理来执行面部跟踪。由于背景和前景照明的变化,图像色彩经常不稳定,从而导致跟踪误差和“丢失目标”。为了补偿照明条件的变化,采用统计近似,对整个面部图像区域的色彩分布随时间进行估算。这样,假设照明条件随时间缓慢改变,则可以动态的采用色彩模板来反映被跟踪的目标的变化外观。由于各图像都是从视频摄像机21输出的,因此从面部区域中采样新的一组像素并使用它们更新色彩模板。在连续的跟踪中,只有跟踪可信度大于预定的跟踪阈值时,才动态地改变色彩模板。在跟踪失败的情况下,暂停动态改变,当重新找到目标时重新开始。
只有当面部检测模块46在视频图像中检测到一个面部时,摄像单元控制器系统控制模块49才启动面部跟踪47,系统操作参数请求被跟踪的面部。这些操作参数取决于不同的安装需要。例如,在某些情况下,从进入安全区域的每个目标都可以捕获到一些很好的图像。在其他情况下,需要更为仔细的识别和跟踪特定目标从而获得面部识别或档案存储所需的更高质量的图像。
面部图像捕获模块48包括图像捕获软件,该软件对从视频摄像机21和范围单元30接收到的数据进行分析,从而精确的确定何时捕获面部图像,从而获得目标的高质量的、很好照明的、前面部图像。面部图像捕获模块48时用启发式方法来确定面部的姿势和最佳照明。通过识别关键面部特征,例如眼、鼻、嘴来确定正确的姿势,并确保他们都处于正确的位置。通过对面部色彩的全面分析来确定照明质量。
在最佳实施例中,视频摄像机21具有可编程的点亮度计曝光系统,它可以调节视频图像的尺寸和位置。当面部图像被定位时,相对于面部图像的尺寸对该点亮度计系统进行调解,并使该系统以该面部图像为中心。所产生的就是正确曝光且更适合图像分析和面部识别及比较的所捕获到的面部图像。
当面部检测模块46已经检测到面部时,摄像单元控制器系统控制模块49启动面部图像捕获模块48,系统操作参数请求捕获面部图像。影响图像捕获的参数包括:所要求的图像的数目、这些图像的所要求的质量阈值,以及所要求的图像之间的时间间隔。图像质量取决于姿势和照明,将其与预设阈值进行比较。时间间隔表示图像获取的速度。在很多时间段内捕获多个图像并不会比在同一时间段内捕获一个图像能提供更多信息。为了确保可以获取足够不同的多个图像从而确保能够得到很好的姿势,需要最小的时间间隔。一旦获得了高质量面部图像,就将其发送到外部控制器50。
最终捕获的图像的特征很大程度上由所使用的特定面部识别软件算法来确定。本发明的一个主要优点在于可以调节系统操作参数,从而提供具有一致的高质量的面部图像,从而实现精确和一致的面部识别。例如,已知特定面部识别软件需要正面姿势、两眼之间具有最小的像素分辨率、以及特定质量的照明。可以将本发明编程只捕获符合该标准的图像,以及跟踪给定面部,直到获得这样的图像为止,从而确保面部识别系统的一致的高质量性能。
指令单元控制器40包括摄像单元控制器通信系统60,该摄像单元控制器通信系统60通过网络连接与摄像单元控制器40连接,从而接收配置和操作指令或发送外部控制器50所请求的视频图像或数据。
摄像单元控制器通信系统60可以接受下面类型的配置和操作指令:
用于面部检测、面部跟踪和面部图像捕获的配置参数,例如对每个目标跟踪多长时间,需要捕获的图像的数目,所需图像的质量和分辨率,图像的时间间隔,以及跟踪多少目标;
校准指令,用于确定对于安全区域内的照明条件所需的图像校正;
用于捕获范围单元30的校准数据的指令;
给出摄像机21和范围单元30的空间位置的配置指令;
用于打开/关闭、进入“睡眠”模式,或进入多种不同操作跟踪模式的操作模式指令。用于多种不同部件的“睡眠”模式可有效的延长部件的寿命并节能。例如,如果在特定时间段内安全区域中没有活动时,可以指令范围单元30从而将其激光脉冲率降低为每秒一次区域扫描。只要检测到目标,范围单元30就被“唤醒”并执行正常扫描。这可以显著的延长激光二极管的寿命。
摄像单元控制器通信系统60可以具有多种配置。摄像单元20自身之间可以进行交互通信;摄像单元20可以与计算机而不是外部控制器50之间进行命令接收和数据发送。另外,可以使用不同的通信基础网络,例如点到点的网络,高速串行I/O,令牌网络,或无线网络或任何其他合适的通信系统。
摄像单元控制器系统控制模块49包括可以监控摄像单元控制器40所有功能的软件。视频摄像机数据处理模块43、范围单元数据处理模块44和摄像单元控制器通信系统60所获得的所有数据都输出到摄像单元控制器系统控制模块49,由它确定启动面部检测模块46、面部跟踪模块47或面部捕获模块48中的哪个软件模块。这些决定都是基于特定的系统要求,例如所要求的图像数量、图像质量阈值和图像时间间隔。还必须考虑特定的操作模式。例如在一个操作模式下,仅跟踪最近的目标。在另一个操作模式下,需要对最靠近的三个目标轮流跟踪三秒。操作模是完全是可编程的,它们取决于特定的应用。
摄像单元控制器系统控制模块49还确定将什么命令发送给视频摄像机模块21、可旋转镜子系统模块25以及范围单元模块30,从而控制它们的不同功能。另外,摄像单元控制器系统控制模块49可以调整任何异常操作模式,例如对应于系统错误。
摄像单元控制器系统控制模块49将面部检测模块46输出的信息(表示类似面部的图像区域)与面部跟踪模块47输出的跟踪信息(表示属于移动类似人类的目标的图像区域)以及范围单元数据处理单元44输出的范围数据(表示具有单人形状的图像区域)合并,从而选择视频图像中的哪些像素由面部占据。为了实现这一点,必须及时精确的记录范围数据并与视频数据隔开。通过使用概率分析可以提高面部跟踪精确度,该概率分析将面部检测信息、面部跟踪信息和范围数据随时间的多个测量值结合。
摄像单元控制器系统控制模块49使用范围和图像数据的结合,建立存储有安全区域4内多个单独目标的轨迹的运动历史文件。这可以实现对单独的面部目标的跟踪并捕获每个人的预定数目的面部图像。
外部控制器
图4示出本发明的网络结构的方块图。其中示出多个摄像单元20与外部控制器50连接。还示出数据库/搜索应用70和外部应用80通过网络接口与其连接。图4示出本发明多个部件之间的通信和数据流。很明显本发明不需要在所有部件之间存在单独的网络连接。实际上,很多安全应用需要使用专用于各应用的独立网络。使用多个摄像单元20可以在多个摄像单元之间实现合作,从而完成多种任务例如从一个安全区域到另一个安全区域跟踪目标,或者覆盖具有很多潜在目标的较大安全区域。
外部控制器50包括一可实现网络连接的计算机,从而可以与摄像单元20、数据库/搜索应用70和外部应用80之间进行交互,对所存储的面部图像获其他输入到系统的数据源进行搜索。例如,外部护照控制应用可以向外部控制器50提供数据页照片的图像,该图像可以与摄像单元20捕获到的图像合并和比较,从而实现自动面部识别以验证该护照上的面部图像是否对应于出示该护照的人的面部图像。
外部控制器50包括具有可以支持多任务操作系统的现代网络的软件,该软件可以控制多个独立互通软件部分的操作,这些独立互通软件部分包括:摄像单元接口模块51;外部系统控制模块52;搜索接口模块53;摄像机配置应用接口模块54;和外部应用接口模块55。利用先进的现代加密和验证技术可以确保所有的网络通信,从而在这些部件之间实现安全和可靠的互相通信。
摄像单元接口模块51包括可以控制与摄像单元控制器40进行通信的软件。接收从外部系统控制模块52输出的指令并将其发送到摄像单元20。摄像单元接口模块51可以确保所有这些通信的可靠发送和适当的时序。将摄像单元20输出的面部图像存储并随后利用外部控制器50内的其他软件模块进行进一步处理。
外部系统控制模块52包括可以监控外部控制器50的所有功能的软件。摄像单元接口模块51、搜索接口模块53、摄像机配置应用模块54以及外部应用接口模块55所获得的所有数据都输入到外部系统控制模块52。外部系统控制模块52对任何要求摄像单元20的坐标的行动进行控制。另外,外部系统控制模块52调节任何异常操作模式例如响应于系统错误的操作模式。
搜索接口模块53包括如下所述为外部控制器50和数据库/搜索应用70之间提供接口的软件,从而确保它们之间所有通信的可靠发送和合适的时序。
摄像机配置应用接口模块54包括接收从摄像机配置应用输入的数据的软件。摄像机配置应用可处于外部控制器50或其他外部计算机上,它通过网络连接。摄像机配置数据用于像摄像单元20发送指令从而控制不同的操作和配置功能例如曝光、色彩模式、视频系统等从而指令摄像单元20采用校准数据或转移到操作模式并执行跟踪一特定目标。
外部应用接口模块55包括如下所述在外部控制器50和外部应用80之间提供接口的软件,从而确保它们之间的通信的可靠发送和合适的时序。
数据库/搜索应用
数据库/搜索应用70是用于描述所有不同搜索功能的通用词汇,它可以与本发明之间进行操作。这些应用从外部控制器50接收数据,也可能从其他数据源例如护照控制应用接收数据,从而执行搜索,并将可能的匹配候选列表返回到输入数据。
数据库/搜索应用的例子包括但不局限于:
面部验证:将从摄像单元20接收到的所捕获到的面部图像与从所出示的身份文件例如护照或其他图像身份文件中得到的面部图像进行比较。使用面部识别和比较软件来确定它们是否匹配并反馈回结果报告。
面部识别:将从摄像单元20接收到的面部图像与包含不受欢迎人的警戒或“注意”列表进行比较。将零个或更多可能的匹配者的候选列表作为报告反馈回来。
数据库搜索:将身份文件中的身份数据例如名字、身份编码、性别、年龄、和国籍与警戒列表进行比较。将零个或更多与该警戒列表匹配的候选列表作为报告反馈回来。
外部应用
外部应用80是描述其他可能的安全识别系统的通用词汇,这些安全识别系统可以监视与本发明相同的目标或安全区域。可以将外部应用80输出的数据输入到本系统中以提高其功能性。很明显本发明与外部应用80之间的交互的细节取决于外部应用的特定属性。
外部应用的一个例子是护照控制系统。游客向护照控制官员出示包含其身份数据和面部图像的身份文件。特别是数据库/搜索应用中,通过外部控制器50从身份文件中输出身份数据和面部图像可以提供增强的功能性。例如,可以将从身份文件中获得的游客图像摄像单元20捕获到的游客图像进行比较以确保匹配(验证)。在另一个例子中,身份文件提供的身份数据例如性别、年龄和国籍可用于过滤面部识别搜索反馈回的面部图像候选列表,该面部识别搜索通过对摄像单元20输出的捕获到的面部图像与警戒数据库进行比较而实现。
另外,外部控制器50可以将摄像单元20收集到的信息发送到外部应用80中,从而在这些应用中执行增强的功能性。例如,可以将摄像单元20捕获到的面部图像发送给护照控制应用,从而可以使护照控制官员能够将其与游客身份文件中的面部图像进行并排的比较。在另一个例子中,摄像单元20输出的面部图像可用于使数据库搜索应用优先于向护照控制官员出示身份文件而执行。
装配和校准
参照图2,在典型的安装中,范围单元用于在近似于平均人体胸部高度处水平扫描安全区域。将视频摄像机21和可旋转镜子系统25安装在近似于平均人体眼睛水平面上从而可以使视频摄像机21的视野覆盖安全区域4。范围单元30、视频摄像机21和可旋转镜子系统25的精确位置是精确测量的,将它们在安全区域4内的位置作为校准数据输入到摄像单元控制器40。或者如图4所示,可以使用很多摄像单元20来覆盖较大的安全区域,或者可以监视多个相关的区域。根据安装的性质和应用要求,可能需要对操作模式和多个不同系统部件之间的交互通信协议进行调解。
通过从包含非瞬变目标的安全区域4中获得并存储范围数据,可以校准范围单元30。随后,将操作期间获得的范围数据与校准数据进行比较,从而对静态目标和感兴趣的非瞬变目标进行区分。视频摄像机21提供在已知操作光线条件下出现的公知目标的样本图像。这些图像可以对面部检测模块46和面部跟踪模块47进行校准。
在操作中,范围单元30连续扫描所监视的安全区域以检测目标出现。将包括任何潜在目标的角度位置、距离和宽度的范围数据发送到摄像单元控制器40中。摄像单元控制器40对该范围数据进行处理,并根据目标的位置(第一靠近的)、尺寸(人的尺寸)以及运动历史识别最可能是人的目标。一旦识别一个目标以进行更近的观察,摄像机控制器单元40将向视频摄像机21和镜子系统25发送指令,使它们执行平移和伸缩功能从而获得目标的更为详细的视图。这些指令可以使镜子26旋转从而使目标进入视频摄像机21的视野范围内,根据测量到的距离启动视频摄像机21的伸缩,使平均人的面部占据视野的20%。使用面部检测模块46并利用从视频图像中获得的数据与范围数据的结合,执行面部检测算法从而确定视频摄像机21输出的图像是否包含人的面部。如果检测到人的面部,则提取出面部特征并计算面部中心的空间坐标。将该位置信息反馈回摄像单元控制系统控制器49,使它像视频摄像机21和镜子系统25发送精确的平移(镜子旋转)、俯仰和伸缩指令,从而使检测到的面部全部填充该视频图像。
通常,这里摄像单元控制器40通过使用范围和视频数据来计算适当的平移、伸缩和俯仰指令,保持视频摄像机21精确地指向目标的面部并保持所需的面部图像尺寸,从而实现初始化面部跟踪模式以跟踪感兴趣的人。在跟踪目标的同时,使用启发式方法来确定捕获目标面部的高质量、正面姿势图像所需的适当时刻。而且考虑预设的图像质量阈值、所需图像数目以及图像之间的时间间隔。当获得这些图像时,通过网络连接将这些图像发送到外部控制器50。此时,如应用特定工作流程逻辑所确定的,摄像单元控制器40可以继续跟踪目标或者将其注意力转移到跟踪进入安全区域4内的其他感兴趣的目标。
外部控制器50从各摄像单元20中接收捕获的视频面部图像和目标运动信息。它还从外部应用80中接收信息例如可以监视相同目标人的护照控制软件。如上面简要说明的,外部信息的一个例子是从目标人出示的身份文件中捕获到的照片图像。外部控制器50与面部识别和其他数据库搜索软件进行交互从而执行目标人的验证和识别。
另外,外部控制器50可以协调多个摄像单元20之间的操作从而实现下面的功能:
1)当多个人从一个监视区域进入另一个监视区域时,跟踪他们中感兴趣的单个人;
2)监视单独房间的多个摄像单元20的协调。在这种情况下,识别感兴趣的目标并使多个摄像单元20进行面部跟踪和面部图像获取。
其他应用
除了上述的应用,本发明的其他应用包括,但不局限于:
1.捕获接收身份文件例如护照或签证的人的面部图像,并将该图像存储在数据库中以便于后面当需要机器辅助识别确认以验证出示该身份文件的人的身份时使用。
2.通过捕获任何申请正式身份文件的人的面部图像并将这些图像发送以执行用于面部识别的数据库搜索应用,以及与不受欢迎的人的数据库进行辨别和比较,实现对这些人执行“重点检查”。
3.捕获提交身份文件的人的面部图像并将该图像与身份文件上的人的面部图像进行比较,从而验证该文件是签发给正确的持有者。
4.当人接收到获准进入一个国家的许可时,捕获该人的面部图像并将其存储在数据库中。该面部图像的捕获可以或可以不取决于风险档案。然后使用该数据库将所记录的面部图像和被扣留的不合作的人或者未经授权进入特定安全区域的人进行比较,从而确定该人是否以前已经见过,如果是,则当时出示的是什么样的身份文件。
5.捕获登记乘飞机旅行的人的面部图像并将其存储在数据库中,从而创建一高级乘客信息(“API”)数据库。将API记录发送给飞行目的地当局,在该目的地他们将在飞机到达之前提前进行重点检查,从而识别应当在飞机达到时进行特别细致检查的人。
6.利用上述例子中收集到的API数据来支持在目的地对乘客进行自动检查。捕获到达乘客的面部图像并将其与API数据进行比较从而确保到达的这些人与登上飞机的人相同。这可以实现快速的下机过程,乘客可以顺序步行通过安全区域,可以很容易识别并选择出需要进行特别详细检查的那些人。
7.捕获登上任何公共交通工具例如飞机、火车或汽车,或者当希望进入包括进入国家或体育场的通道口的任何安全区域的的人的面部图像,将这些图像发送给数据库搜索应用以便进行面部识别、与不受欢迎人的数据库进行识别和比较,从而防止这些不受欢迎的人利用公共交通工具或进入安全区域。
8.捕获登记使用公共交通工具的人的面部图像并将这些图像与登记时出示的身份文件上包含的面部图像进行比较,以验证正确的人出示该身份文件。
9.捕获进入一国家的进入检查区域的口岸的人的面部图像,并将这些图像发送给数据库搜索应用以进行面部识别并与不受欢迎的人的数据库进行比较,从而帮助检查当局判断该进入的人是否应当被允许进入。
10.在人们到达国家进入口岸时,在自助检查机器中捕获这些人的面部图像,将这些图像发送给数据库搜索应用以进行面部识别并与不受欢迎的人的数据库进行比较,从而防止这类人进入该国家。
11.在所有进入大门捕获所有进入乘客的面部图像,并将这些图像与抵港飞机细节一起存储在抵港飞机数据库中。利用该抵港飞机数据库并将其与出现在检查台前且没有适当的身份证明的人和拒绝提供飞机抵港细节的人的面部图像进行比较。这可以使边界控制当局识别这个人的航线和出发地,从而可以找到该航线并强制将该被拒绝的人带回该出发地。
12.通过捕获人的面部图像,将这些图像发送到数据库搜索应用以进行面部识别和与不受欢迎的人的数据库进行比较,并对安全性报警,可以对进入任何安全区域的任何人执行“重点检查”。
13.通过在乘客抵达不同的安全区域时捕获他们的面部图像并将这些图像与已登记的乘客的面部图像进行比较,可以改进航线登记程序。例如,可以在开始预约订票时或在登记时获得旅客的面部图像,并使用这些面部图像来验证进入机场内其他安全区域的人的身份,最终登上飞机。这样可以极大的增加登记和登机的速度。
14.可以将登上飞机的人的面部图像与登记时人的面部图像比较,从而验证那个登记的人是否与登上飞机的人是同一个人,并将该人与装载在飞机上的行李匹配。
15.由位于遍及给定场所例如机场的很多安全区域中的多个摄像单元20连续获取的面部图像可用于在任何给定时间对任何人进行定位。这样,就可以对未能登机的乘客定位,并引导他到达适当的登机区域。从而可以减少由于要寻找任性的乘客而使飞机延误。这样的监视系统在监狱环境下对于定位犯人也是很有用的。
16.在涉及财务事项的情况下,例如在自动银行柜员机(ATM),可将捕获的面部图像与ATM卡的数据进行比较,从而验证是否是正确的人在使用该卡。
17.捕获进入安全区域的所有人的面部图像,并将其与数据库/搜索应用进行比较,从而确保该人处于允许进入的多个人的预先核准列表中。
上面对本发明最佳实施例进行了描述。本领域技术人员应当知道在目前公开内容的启示下,在不脱离本发明精神和范围的前提下很容易对本文公开的实施例进行修改。在目前公开内容的启示下,不需要任何实验就可以实现和执行本文中公开和请求保护的所有实施例。本发明的全部范围都已经在后面的权利要求中写出。因此,不应当将该权利要求和说明书解释为对本发明保护范围的限制。

Claims (34)

1. 一种使用面部识别系统的用于目标的记录和/或自动身份确认的面部成像系统,该面部成像系统包括:
一摄像单元,包括:
一摄像单元控制器;和
一视频摄像机,用于捕获目标图像并将该目标图像发送到所述摄像单元控制器;
所述摄像单元控制器包括:
一面部检测系统,用于检测目标图像内的面部图像,所述面部图像具有一定质量;和
一面部捕获系统,用于当所述面部图像足以达到所述面部识别系统的需要进行最佳面部识别时,捕获所述面部图像,所述面部捕获系统包括一质量评价系统,用于判断所述面部图像的质量何时足以达到所述面部识别系统的需要进行最佳面部识别。
2. 如权利要求1所述的面部成像系统,其中所述质量评价系统用于控制所述视频摄像机以便提高所述面部图像的质量。
3. 如权利要求1或2中任一项所述的面部成像系统,其中所述质量评价系统包括一姿势评价系统,用于对所述面部图像的姿势进行评价。
4. 如权利要求3所述的面部成像系统,其中所述姿势评价系统可以判断所述姿势是否为正面姿势。
5. 如权利要求3所述的面部成像系统,其中所述姿势评价系统包括一面部特征识别系统和一面部特征定位系统。
6. 如权利要求1或2任一项所述的面部成像系统,其中所述质量评价系统包括一照明评价系统,用于对所述面部图像的照明进行评价。
7. 如权利要求6所述的面部成像系统,其中所述照明评价系统包括一色彩分析系统。
8. 如权利要求1或2任一项所述的面部成像系统,其中所述质量评价系统包括一用于测量所述面部图像曝光的曝光系统,所述曝光系统基于一区域,该区域的大小和在所述面部图像上的位置可以调节。
9. 如权利要求1或2任一项所述的面部成像系统,其中所述质量评价系统包括一像素分辩率评价系统。
10. 如权利要求9所述的面部成像系统,其中所述面部检测系统包括一眼睛定位系统,用于定位所述目标图像中眼睛的位置,其中所述像素分辩率评价系统可以确定所述眼睛之间的所述面部图像的最小像素分辩率。
11. 如权利要求1或2任一项所述的面部成像系统,其中所述面部检测系统使用所述目标图像中多个结构特征的色彩、形状和位置来识别所述面部图像。
12. 如权利要求1或2任一项所述的面部成像系统,其中所述面部检测系统包括一眼睛定位系统,用于在所述目标图像中定位眼睛的位置。
13. 如权利要求12所述的面部成像系统,其中所述眼睛定位系统利用对所述目标的红外照明来定位所述眼睛的位置。
14. 如权利要求1或2任一项所述的面部成像系统,其中仅在当所述目标图像内没有检测到所述面部图像时或在所述面部捕获系统已经捕获到所述面部图像之后,所述面部检测系统才被启动。
15. 如权利要求1所述的面部成像系统,其中所述摄像单元控制器包括:
一面部跟踪系统,用于跟踪所述面部图像;,以及所述质量评价系统,其用于控制所述视频摄像机以便提高所述面部图像的质量。
16. 如权利要求1或15任一项所述的面部成像系统,其中所述摄像单元控制器包括视频摄像数据处理软件,用于处理所述目标图像并提供处理后的视频图像数据,其中所述面部检测系统用于使用所述处理后的视频图像数据来帮助进行所述面部图像的所述检测。
17. 如权利要求1或15中任一项所述的面部成像系统,其中所述摄像单元控制器包括视频摄像数据处理软件,用于处理所述目标图像并提供处理后的视频图像数据,其中所述面部捕获系统用于使用所述处理后的视频图像数据来帮助进行所述面部图像的所述捕获。
18. 如权利要求15所述的面部成像系统,其中所述摄像单元控制器包括视频摄像数据处理软件,用于处理所述目标图像并提供处理后的视频图像数据,其中所述面部跟踪系统用于使用所述处理后的视频图像数据来帮助进行所述面部图像的所述跟踪。
19. 如权利要求1或15任一项所述的面部成像系统,其中所述摄像单元包括一测距单元,用于检测一安全区域内是否存在目标,并将与所述目标相关的范围数据提供给所述摄像单元控制器。
20. 如权利要求19所述的面部成像系统,其中所述面部检测系统用于使用所述范围数据帮助进行检测所述面部图像,所述范围数据包括距离和角度位置。
21. 如权利要求20所述的面部成像系统,其中所述范围数据包括所述目标的宽度。
22. 如权利要求19所述的面部成像系统,其中所述面部跟踪系统用于使用所述范围数据帮助跟踪所述面部图像,所述范围数据包括距离和角度位置。
23. 如权利要求22所述的面部成像系统,其中所述范围数据包括所述目标的宽度。
24. 如权利要求19所述的面部成像系统,其中所述面部捕获系统用于使用所述范围数据帮助捕获所述面部图像,所述范围数据包括距离和角度位置。
25. 如权利要求24所述的面部成像系统,其中所述范围数据包括所述目标的宽度。
26. 如权利要求15所述的面部成像系统,其中所述摄像单元包括:
自动水平平移、变焦和垂直倾斜特性。
27. 如权利要求26所述的面部成像系统,其中可在水平方向旋转的第一镜子系统提供所述水平平移特性,该第一镜子系统用于将所述目标图像反射到所述视频摄像机中。
28. 如权利要求26所述的面部成像系统,其中可在垂直方向旋转的镜子系统提供所述垂直倾斜特性,该镜子系统用于将所述目标图像反射到所述视频摄像机中。
29. 如权利要求7所述的面部成像系统,其中所述第一镜子系统也可在垂直方向旋转,提供所述垂直倾斜特性。
30. 如权利要求7所述的面部成像系统,其中可在垂直方向旋转的第二镜子系统提供所述垂直倾斜特性,该第二镜子系统用于将所述目标图像反射到所述视频摄像机中。
31. 如权利要求26、27、28、29或30中任一项所述的面部成像系统,其中所述摄像单元包括一测距单元,用于检测一安全区域内是否存在目标,并将与所述目标相关的范围数据提供给所述摄像单元控制器,其中所述摄像单元控制器利用所述范围数据帮助自动控制所述水平平移、所述变焦和所述垂直倾斜特性。
32. 如权利要求26、27、28、29或30中任一项所述的面部成像系统,其中所述摄像单元控制器包括视频摄像数据处理软件,用于处理所述目标图像并提供处理后的视频图像数据,其中所述摄像单元控制器利用所述处理后的视频图像数据来自动控制所述水平平移、变焦和垂直倾斜特性。
33. 如权利要求26、27、28、29或30中任一项所述的面部成像系统,其中所述面部检测系统产生面部图像数据,所述摄像单元控制器利用所述面部图像数据来帮助自动控制所述水平平移、所述变焦和所述垂直倾斜特性。
34. 如权利要求26、27、28、29或30中任一项所述的面部成像系统,其中所述面部跟踪系统产生面部跟踪数据,所述摄像单元控制器利用所述面部跟踪数据来自动控制所述水平平移、所述变焦和所述垂直倾斜特性。
CNB028201493A 2001-10-17 2002-10-17 用于记录和自动识别确认的面部成像系统 Expired - Fee Related CN100418112C (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CA2,359,269 2001-10-17
CA002359269A CA2359269A1 (en) 2001-10-17 2001-10-17 Face imaging system for recordal and automated identity confirmation

Publications (2)

Publication Number Publication Date
CN1568489A CN1568489A (zh) 2005-01-19
CN100418112C true CN100418112C (zh) 2008-09-10

Family

ID=4170284

Family Applications (1)

Application Number Title Priority Date Filing Date
CNB028201493A Expired - Fee Related CN100418112C (zh) 2001-10-17 2002-10-17 用于记录和自动识别确认的面部成像系统

Country Status (13)

Country Link
US (2) US20050063566A1 (zh)
EP (2) EP1667080A1 (zh)
JP (1) JP2005505871A (zh)
CN (1) CN100418112C (zh)
AT (1) ATE320054T1 (zh)
CA (1) CA2359269A1 (zh)
DE (1) DE60209760T2 (zh)
DK (1) DK1444667T3 (zh)
ES (1) ES2260476T3 (zh)
HK (1) HK1070167A1 (zh)
NZ (1) NZ532315A (zh)
PT (1) PT1444667E (zh)
WO (1) WO2003034361A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107944422A (zh) * 2017-12-08 2018-04-20 业成科技(成都)有限公司 三维摄像装置、三维摄像方法及人脸识别方法

Families Citing this family (215)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7442629B2 (en) 2004-09-24 2008-10-28 President & Fellows Of Harvard College Femtosecond laser-induced formation of submicrometer spikes on a semiconductor substrate
US7057256B2 (en) 2001-05-25 2006-06-06 President & Fellows Of Harvard College Silicon-based visible and near-infrared optoelectric devices
US7298412B2 (en) * 2001-09-18 2007-11-20 Ricoh Company, Limited Image pickup device, automatic focusing method, automatic exposure method, electronic flash control method and computer program
JP2003296711A (ja) * 2002-03-29 2003-10-17 Nec Corp 顔画像識別方法、装置およびプログラム
US20070201694A1 (en) * 2002-06-18 2007-08-30 Bolle Rudolf M Privacy management in imaging system
JP2004062565A (ja) * 2002-07-30 2004-02-26 Canon Inc 画像処理装置及び方法並びにプログラム記憶媒体
JP4218348B2 (ja) * 2003-01-17 2009-02-04 オムロン株式会社 撮影装置
JP4277534B2 (ja) * 2003-02-12 2009-06-10 オムロン株式会社 画像編集装置および画像編集方法
CA2435424C (en) * 2003-07-29 2010-04-27 Jack Gin Rotatable bay window switch box surveillance camera and illuminator for facial recognition
US7756322B2 (en) * 2003-08-18 2010-07-13 Honda Motor Co., Ltd. Picture taking mobile robot
JP4476744B2 (ja) * 2003-09-02 2010-06-09 富士フイルム株式会社 撮像システム、及びプログラム
JP4339762B2 (ja) * 2003-09-02 2009-10-07 富士フイルム株式会社 認証システム、及びプログラム
US20050110634A1 (en) * 2003-11-20 2005-05-26 Salcedo David M. Portable security platform
CN100448267C (zh) * 2004-02-06 2008-12-31 株式会社尼康 数码相机
IL161082A (en) * 2004-03-25 2008-08-07 Rafael Advanced Defense Sys System and method for automatically acquiring a target with a narrow field-of-view gimbaled imaging sensor
EP1584898B1 (en) * 2004-04-08 2008-08-27 Accenture Global Services GmbH Method and system for remotely monitoring meters
AT501370B1 (de) * 2004-06-03 2007-03-15 X Pin Com Gmbh Vorrichtung zur biometrischen steuerung von anlagen
US8681100B2 (en) 2004-07-30 2014-03-25 Extreme Realty Ltd. Apparatus system and method for human-machine-interface
US8114172B2 (en) 2004-07-30 2012-02-14 Extreme Reality Ltd. System and method for 3D space-dimension based image processing
US8872899B2 (en) * 2004-07-30 2014-10-28 Extreme Reality Ltd. Method circuit and system for human to machine interfacing by hand gestures
JP2006236244A (ja) * 2005-02-28 2006-09-07 Toshiba Corp 顔認証装置および入退場管理装置
JP2006259930A (ja) * 2005-03-15 2006-09-28 Omron Corp 表示装置およびその制御方法、表示装置を備えた電子機器、表示装置制御プログラム、ならびに該プログラムを記録した記録媒体
ES2296443B1 (es) * 2005-04-15 2009-03-01 Universidad Rey Juan Carlos Sistema de verificacion facial.
WO2006118563A1 (en) * 2005-04-29 2006-11-09 Chubb International Holdings Limited Method and device for consistent region of interest
JP2007052770A (ja) * 2005-07-21 2007-03-01 Omron Corp 監視装置
JP4856409B2 (ja) * 2005-08-12 2012-01-18 株式会社リコー 画像処理システム、認証方法
JP2007072520A (ja) * 2005-09-02 2007-03-22 Sony Corp 映像処理装置
US20070064208A1 (en) * 2005-09-07 2007-03-22 Ablaze Development Corporation Aerial support structure and method for image capture
US8026840B2 (en) * 2005-10-28 2011-09-27 Raytheon Company Biometric radar system and method for identifying persons and positional states of persons
US20070285554A1 (en) 2005-10-31 2007-12-13 Dor Givon Apparatus method and system for imaging
GB2432064B (en) * 2005-10-31 2011-01-19 Hewlett Packard Development Co Method of triggering a detector to detect a moving feature within a video stream
US9046962B2 (en) 2005-10-31 2015-06-02 Extreme Reality Ltd. Methods, systems, apparatuses, circuits and associated computer executable code for detecting motion, position and/or orientation of objects within a defined spatial region
US20070162761A1 (en) * 2005-12-23 2007-07-12 Davis Bruce L Methods and Systems to Help Detect Identity Fraud
US7668346B2 (en) * 2006-03-21 2010-02-23 Microsoft Corporation Joint boosting feature selection for robust face recognition
JP4836633B2 (ja) * 2006-03-31 2011-12-14 株式会社東芝 顔認証装置、顔認証方法および入退場管理装置
JP4751776B2 (ja) * 2006-06-19 2011-08-17 オリンパスイメージング株式会社 電子撮像装置及び個人特定システム
WO2008005834A2 (en) * 2006-06-30 2008-01-10 The Intertech Group, Inc. Biometric aid for customer relations
JP4979289B2 (ja) * 2006-07-21 2012-07-18 日立オートモティブシステムズ株式会社 画像処理装置
US8296808B2 (en) * 2006-10-23 2012-10-23 Sony Corporation Metadata from image recognition
MXPA06013614A (es) * 2006-11-24 2007-12-06 Global Sight S A De C V Sistemas de transmision de datos en forma remota y digital y localizacion satelital desde terminales moviles o fijas con camaras de vigilancia urbana para reconocimiento facial, detector de disparos, captura de personal de seguridad publica y persona
US8694792B2 (en) 2007-02-16 2014-04-08 Honeywell International Inc. Biometric based repeat visitor recognition system and method
JP4668220B2 (ja) * 2007-02-20 2011-04-13 ソニー株式会社 画像処理装置および画像処理方法、並びにプログラム
GB2447246B (en) * 2007-03-07 2012-04-18 Aurora Comp Services Ltd Controlled high resolution sub-image capture with time domain multiplexed high speed full field of view reference video stream for image biometric application
JP4289415B2 (ja) * 2007-03-27 2009-07-01 セイコーエプソン株式会社 画像変形のための画像処理
CN101641715B (zh) * 2007-03-29 2012-05-30 富士通株式会社 摄影装置、摄影方法以及摄影程序
JP4858849B2 (ja) * 2007-05-18 2012-01-18 カシオ計算機株式会社 撮像装置及びそのプログラム
JP2009033369A (ja) 2007-07-26 2009-02-12 Sony Corp 記録装置、再生装置、記録再生装置、撮像装置、記録方法およびプログラム
GB0717019D0 (en) * 2007-09-01 2007-10-10 Rixen Uk Ltd Audiovisual Terminal
US20100162285A1 (en) * 2007-09-11 2010-06-24 Yossef Gerard Cohen Presence Detector and Method for Estimating an Audience
US20090103909A1 (en) * 2007-10-17 2009-04-23 Live Event Media, Inc. Aerial camera support structure
CN101465961B (zh) * 2007-12-19 2013-10-30 神基科技股份有限公司 以特征影像辨识控制快门的摄像装置及方法
US20090207121A1 (en) * 2008-02-19 2009-08-20 Yung-Ho Shih Portable electronic device automatically controlling back light unit thereof and method for the same
US8325976B1 (en) * 2008-03-14 2012-12-04 Verint Systems Ltd. Systems and methods for adaptive bi-directional people counting
JP5132445B2 (ja) * 2008-06-25 2013-01-30 キヤノン株式会社 画像処理装置および画像処理方法並びにコンピュータプログラムおよび記憶媒体
EP2342642A1 (en) * 2008-09-04 2011-07-13 Extreme Reality Ltd. Method system and software for providing image sensor based human machine interfacing
JP2010117487A (ja) * 2008-11-12 2010-05-27 Fujinon Corp オートフォーカスシステム
TW201025190A (en) * 2008-12-30 2010-07-01 Altek Corp Image capture device used for monitoring and a monitor method thereof
US8452599B2 (en) 2009-06-10 2013-05-28 Toyota Motor Engineering & Manufacturing North America, Inc. Method and system for extracting messages
US8269616B2 (en) * 2009-07-16 2012-09-18 Toyota Motor Engineering & Manufacturing North America, Inc. Method and system for detecting gaps between objects
JP5227911B2 (ja) * 2009-07-22 2013-07-03 株式会社日立国際電気 監視映像検索装置及び監視システム
JP5356162B2 (ja) * 2009-09-07 2013-12-04 株式会社ザクティ 物体像探索装置
US9673243B2 (en) 2009-09-17 2017-06-06 Sionyx, Llc Photosensitive imaging devices and associated methods
US8878779B2 (en) 2009-09-21 2014-11-04 Extreme Reality Ltd. Methods circuits device systems and associated computer executable code for facilitating interfacing with a computing platform display screen
US9218126B2 (en) 2009-09-21 2015-12-22 Extreme Reality Ltd. Methods circuits apparatus and systems for human machine interfacing with an electronic appliance
US8908033B2 (en) * 2009-09-29 2014-12-09 Avaya Inc. Utilizing presence information for the purpose of enhanced surveillance
US8337160B2 (en) * 2009-10-19 2012-12-25 Toyota Motor Engineering & Manufacturing North America, Inc. High efficiency turbine system
US8237792B2 (en) 2009-12-18 2012-08-07 Toyota Motor Engineering & Manufacturing North America, Inc. Method and system for describing and organizing image data
KR101082159B1 (ko) 2010-02-02 2011-11-09 대전대학교 산학협력단 얼굴 이미지 분석용 촬영장치
US9377778B2 (en) * 2010-02-17 2016-06-28 The Boeing Company Integration of manufacturing control functions using a multi-functional vision system
JP5642410B2 (ja) * 2010-03-30 2014-12-17 パナソニック株式会社 顔認識装置及び顔認識方法
US8692198B2 (en) 2010-04-21 2014-04-08 Sionyx, Inc. Photosensitive imaging devices and associated methods
TW201137765A (en) * 2010-04-29 2011-11-01 Hon Hai Prec Ind Co Ltd Image capturing device and method for obtaining clear images using the image capturing device
US20190034706A1 (en) * 2010-06-07 2019-01-31 Affectiva, Inc. Facial tracking with classifiers for query evaluation
US11430260B2 (en) 2010-06-07 2022-08-30 Affectiva, Inc. Electronic display viewing verification
CN101908236B (zh) * 2010-06-08 2012-03-21 上海理工大学 公交客流统计方法
US20120146172A1 (en) 2010-06-18 2012-06-14 Sionyx, Inc. High Speed Photosensitive Devices and Associated Methods
US8424621B2 (en) 2010-07-23 2013-04-23 Toyota Motor Engineering & Manufacturing North America, Inc. Omni traction wheel system and methods of operating the same
WO2012036692A1 (en) * 2010-09-17 2012-03-22 Utc Fire & Security Corporation Security device with security image update capability
CN102466800B (zh) * 2010-11-09 2014-05-14 亚洲光学股份有限公司 具自动启动测距功能的雷射测距装置及其自动启动方法
WO2012098534A1 (en) 2011-01-23 2012-07-26 Extreme Reality Ltd. Methods, systems, devices and associated processing logic for generating stereoscopic images and video
US8908034B2 (en) * 2011-01-23 2014-12-09 James Bordonaro Surveillance systems and methods to monitor, recognize, track objects and unusual activities in real time within user defined boundaries in an area
US9965094B2 (en) 2011-01-24 2018-05-08 Microsoft Technology Licensing, Llc Contact geometry tests
US8988087B2 (en) 2011-01-24 2015-03-24 Microsoft Technology Licensing, Llc Touchscreen testing
US8982061B2 (en) 2011-02-12 2015-03-17 Microsoft Technology Licensing, Llc Angular contact geometry
US9542092B2 (en) 2011-02-12 2017-01-10 Microsoft Technology Licensing, Llc Prediction-based touch contact tracking
US8773377B2 (en) 2011-03-04 2014-07-08 Microsoft Corporation Multi-pass touch contact tracking
DE102011102744A1 (de) * 2011-05-28 2012-11-29 Connaught Electronics Ltd. Verfahren zum Betreiben eines Kamerasystems eines Kraftfahrzeugs, Kraftfahrzeug sowie System mit einem Kraftfahrzeug und einer separaten Recheneinrichtung
FR2976106B1 (fr) 2011-06-01 2015-07-17 Morpho Systeme et methode pour le controle de l'acces d'un individu a une zone a acces controle
US9020207B2 (en) 2011-06-07 2015-04-28 Accenture Global Services Limited Biometric authentication technology
US9496308B2 (en) 2011-06-09 2016-11-15 Sionyx, Llc Process module for increasing the response of backside illuminated photosensitive imagers and associated methods
US8705812B2 (en) * 2011-06-10 2014-04-22 Amazon Technologies, Inc. Enhanced face recognition in video
US10007330B2 (en) 2011-06-21 2018-06-26 Microsoft Technology Licensing, Llc Region of interest segmentation
EP2546782B1 (en) * 2011-07-11 2014-06-25 Accenture Global Services Limited Liveness detection
JP2014525091A (ja) * 2011-07-13 2014-09-25 サイオニクス、インク. 生体撮像装置および関連方法
US8913019B2 (en) 2011-07-14 2014-12-16 Microsoft Corporation Multi-finger detection and component resolution
DE102011079285A1 (de) * 2011-07-15 2013-01-17 Bundesdruckerei Gmbh Vorrichtung zur Erfassung biometrischer Merkmale
US20130027561A1 (en) * 2011-07-29 2013-01-31 Panasonic Corporation System and method for improving site operations by detecting abnormalities
US8832805B1 (en) * 2011-08-08 2014-09-09 Amazon Technologies, Inc. Verifying user information
US10089327B2 (en) 2011-08-18 2018-10-02 Qualcomm Incorporated Smart camera for sharing pictures automatically
US20130201344A1 (en) * 2011-08-18 2013-08-08 Qualcomm Incorporated Smart camera for taking pictures automatically
CN102298801A (zh) * 2011-08-23 2011-12-28 苏州盛世华安智能科技有限公司 访客智能安全管理装置
US9378389B2 (en) 2011-09-09 2016-06-28 Microsoft Technology Licensing, Llc Shared item account selection
FR2979873B1 (fr) * 2011-09-12 2013-10-04 Valeo Securite Habitacle Procede d'ouverture d'un ouvrant de vehicule automobile
TWI439967B (zh) * 2011-10-31 2014-06-01 Hon Hai Prec Ind Co Ltd 安全監控系統及安全監控方法
US9785281B2 (en) 2011-11-09 2017-10-10 Microsoft Technology Licensing, Llc. Acoustic touch sensitive testing
WO2013069023A2 (en) * 2011-11-13 2013-05-16 Extreme Reality Ltd. Methods systems apparatuses circuits and associated computer executable code for video based subject characterization, categorization, identification and/or presence response
US8971574B2 (en) * 2011-11-22 2015-03-03 Ulsee Inc. Orientation correction method for electronic device used to perform facial recognition and electronic device thereof
US8941561B1 (en) 2012-01-06 2015-01-27 Google Inc. Image capture
US9197864B1 (en) 2012-01-06 2015-11-24 Google Inc. Zoom and image capture based on features of interest
AU2013200450B2 (en) 2012-01-30 2014-10-02 Accenture Global Services Limited System and method for face capture and matching
US8914254B2 (en) 2012-01-31 2014-12-16 Microsoft Corporation Latency measurement
US20130194406A1 (en) * 2012-01-31 2013-08-01 Kai Liu Targeted Delivery of Content
EP2814246A4 (en) * 2012-02-06 2015-07-15 Panasonic Corp CAMERA DEVICE, SERVER DEVICE, IMAGE MONITORING SYSTEM, PICTURE MONITORING SYSTEM CONTROL PROGRAM AND PICTURE MONITORING SYSTEM CONTROL PROGRAM
US8948465B2 (en) 2012-04-09 2015-02-03 Accenture Global Services Limited Biometric matching technology
US9558332B1 (en) * 2012-04-09 2017-01-31 Securus Technologies, Inc. Virtual communication device interfaces
US8929596B2 (en) 2012-06-04 2015-01-06 International Business Machines Corporation Surveillance including a modified video data stream
US8855369B2 (en) * 2012-06-22 2014-10-07 Microsoft Corporation Self learning face recognition using depth based tracking for database generation and update
DE102012214148A1 (de) * 2012-08-09 2014-02-13 Siemens Aktiengesellschaft Bildgebungseinrichtung
CN103679745B (zh) * 2012-09-17 2016-08-17 浙江大华技术股份有限公司 一种运动目标检测方法及装置
US11083344B2 (en) 2012-10-11 2021-08-10 Roman Tsibulevskiy Partition technologies
US9286509B1 (en) 2012-10-19 2016-03-15 Google Inc. Image optimization during facial recognition
US9317147B2 (en) 2012-10-24 2016-04-19 Microsoft Technology Licensing, Llc. Input testing tool
US20150296142A1 (en) * 2012-11-27 2015-10-15 Bae Systems Plc Imaging system and process
GB2508227B (en) * 2012-11-27 2015-02-25 Bae Systems Plc Imaging system and process
EP2736249A1 (en) * 2012-11-27 2014-05-28 BAE Systems PLC Imaging system and process
JP6290248B2 (ja) * 2012-12-21 2018-03-07 コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. 遠隔検出された電磁放射線から生理学的情報を抽出するシステム及び方法
US9563955B1 (en) * 2013-05-15 2017-02-07 Amazon Technologies, Inc. Object tracking techniques
US9209345B2 (en) 2013-06-29 2015-12-08 Sionyx, Inc. Shallow trench textured regions and associated methods
KR102153539B1 (ko) * 2013-09-05 2020-09-08 한국전자통신연구원 영상 처리 장치 및 방법
JP6025690B2 (ja) * 2013-11-01 2016-11-16 ソニー株式会社 情報処理装置および情報処理方法
US9672649B2 (en) * 2013-11-04 2017-06-06 At&T Intellectual Property I, Lp System and method for enabling mirror video chat using a wearable display device
CN105011903B (zh) * 2014-04-30 2018-06-29 上海华博信息服务有限公司 一种智能健康诊断系统
US20150356802A1 (en) * 2014-06-10 2015-12-10 Center For Integrated Smart Sensors Foundation Low Power Door-Lock Apparatus Based On Battery Using Face Recognition
US11615663B1 (en) * 2014-06-17 2023-03-28 Amazon Technologies, Inc. User authentication system
US9526896B2 (en) * 2014-08-12 2016-12-27 Second Sight Medical Products, Inc. Pattern detection and location indication for a visual prosthesis
JP2016053896A (ja) * 2014-09-04 2016-04-14 グローリー株式会社 ゲートシステムおよびゲート通過の制御方法
CN106716989B (zh) 2014-09-10 2020-02-28 富士胶片株式会社 摄像装置、摄像方法及程序
US9953187B2 (en) 2014-11-25 2018-04-24 Honeywell International Inc. System and method of contextual adjustment of video fidelity to protect privacy
JP6483485B2 (ja) * 2015-03-13 2019-03-13 株式会社東芝 人物認証方法
WO2016154123A2 (en) 2015-03-21 2016-09-29 Mine One Gmbh Virtual 3d methods, systems and software
WO2016183380A1 (en) * 2015-05-12 2016-11-17 Mine One Gmbh Facial signature methods, systems and software
US10853625B2 (en) 2015-03-21 2020-12-01 Mine One Gmbh Facial signature methods, systems and software
CN104778726A (zh) * 2015-04-29 2015-07-15 深圳市保千里电子有限公司 一种基于人体特征进行运动轨迹跟踪的方法及系统
CN104902233B (zh) * 2015-05-22 2018-03-09 辽宁玖鼎金盛计算机技术有限公司 综合安全监控系统
US10146797B2 (en) 2015-05-29 2018-12-04 Accenture Global Services Limited Face recognition image data cache
CN107735643B (zh) * 2015-06-29 2020-01-21 富士胶片株式会社 摄像装置及摄像方法
US10803229B2 (en) * 2015-07-16 2020-10-13 Thinxtream Technologies Pte. Ltd. Hybrid system and method for data and file conversion across computing devices and platforms
US20210390246A1 (en) * 2015-07-11 2021-12-16 Thinxtream Technologies Ptd. Ltd. System and method for contextual service delivery via mobile communication devices
CN105426833A (zh) * 2015-11-13 2016-03-23 小米科技有限责任公司 用于游戏的图像识别方法及装置
US10579863B2 (en) 2015-12-16 2020-03-03 Global Tel*Link Corporation Unmanned aerial vehicle with biometric verification
US10229324B2 (en) 2015-12-24 2019-03-12 Intel Corporation Video summarization using semantic information
US20170300742A1 (en) * 2016-04-14 2017-10-19 Qualcomm Incorporated Systems and methods for recognizing an object in an image
US9892335B2 (en) * 2016-06-05 2018-02-13 International Business Machines Corporation Real-time system for determining current video scale
US10278835B2 (en) * 2016-06-29 2019-05-07 Vision Quest Industries Incorporated Dba Vq Orthocare Measurement and ordering system for orthotic devices
CN106054278B (zh) * 2016-07-07 2018-06-12 王飞 一种头部三维数据采集及身份识别的安检门及方法
US20180091730A1 (en) * 2016-09-21 2018-03-29 Ring Inc. Security devices configured for capturing recognizable facial images
EP3301476B1 (en) * 2016-09-28 2023-03-15 STMicroelectronics (Research & Development) Limited Apparatus having a camera and a time of flight single photon avalanche diode based range detecting module for controlling the camera and corresponding method
KR102559745B1 (ko) * 2016-10-13 2023-07-26 엘지전자 주식회사 공항 로봇 및 그를 포함하는 공항 로봇 시스템
JPWO2018109869A1 (ja) * 2016-12-14 2019-04-04 三菱電機株式会社 監視カメラシステム、監視カメラ
IT201700021559A1 (it) * 2017-02-27 2018-08-27 St Microelectronics Srl Procedimento per il controllo di raggi laser, dispositivo, apparecchiatura e prodotto informatico corrispondenti
KR102349481B1 (ko) * 2017-03-27 2022-01-10 스노우 주식회사 오브젝트의 형상에 대한 정보를 획득하는 방법 및 장치
US10762353B2 (en) * 2017-04-14 2020-09-01 Global Tel*Link Corporation Inmate tracking system in a controlled environment
US10690466B2 (en) 2017-04-19 2020-06-23 Global Tel*Link Corporation Mobile correctional facility robots
US10949940B2 (en) * 2017-04-19 2021-03-16 Global Tel*Link Corporation Mobile correctional facility robots
US10181192B1 (en) * 2017-06-30 2019-01-15 Canon Kabushiki Kaisha Background modelling of sport videos
US20190031145A1 (en) 2017-07-28 2019-01-31 Alclear, Llc Biometric identification system connected vehicle
RU2667790C1 (ru) 2017-09-01 2018-09-24 Самсунг Электроникс Ко., Лтд. Способ автоматической регулировки экспозиции для инфракрасной камеры и использующее этот способ вычислительное устройство пользователя
JP6409929B1 (ja) * 2017-09-19 2018-10-24 日本電気株式会社 照合システム
US10679082B2 (en) * 2017-09-28 2020-06-09 Ncr Corporation Self-Service Terminal (SST) facial authentication processing
US10521651B2 (en) * 2017-10-18 2019-12-31 Global Tel*Link Corporation High definition camera and image recognition system for criminal identification
NO343993B1 (en) * 2017-10-30 2019-08-12 Hypervig As A security system
US11538257B2 (en) 2017-12-08 2022-12-27 Gatekeeper Inc. Detection, counting and identification of occupants in vehicles
US10601491B2 (en) 2017-12-15 2020-03-24 Google Llc Performance-based antenna selection for user devices
US10657782B2 (en) 2017-12-21 2020-05-19 At&T Intellectual Property I, L.P. Networked premises security
CN108241853A (zh) * 2017-12-28 2018-07-03 深圳英飞拓科技股份有限公司 一种视频监控方法、系统及终端设备
JP6973258B2 (ja) * 2018-04-13 2021-11-24 オムロン株式会社 画像解析装置、方法およびプログラム
US11010597B1 (en) 2018-05-10 2021-05-18 Ism Connect, Llc Entry prevention of persons of interest from venues and events using facial recognition
US11132532B1 (en) 2018-05-10 2021-09-28 Ism Connect, Llc System and method for facial recognition accuracy
US11544965B1 (en) 2018-05-10 2023-01-03 Wicket, Llc System and method for access control using a plurality of images
US10839200B2 (en) * 2018-05-16 2020-11-17 Gatekeeper Security, Inc. Facial detection and recognition for pedestrian traffic
US11087119B2 (en) * 2018-05-16 2021-08-10 Gatekeeper Security, Inc. Facial detection and recognition for pedestrian traffic
MX2020012885A (es) 2018-05-29 2021-09-02 Curiouser Products Inc Aparato de pantalla de video reflectante para entrenamiento interactivo y demostración y métodos para utilizar el mismo.
US11053729B2 (en) * 2018-06-29 2021-07-06 Overhead Door Corporation Door system and method with early warning sensors
CN108877011A (zh) * 2018-07-06 2018-11-23 安徽超清科技股份有限公司 一种基于人脸识别的门禁系统
CN109714521B (zh) * 2018-08-20 2020-11-03 浙江禾记电子科技有限公司 会议场所现场登记平台
DE102018121256A1 (de) * 2018-08-30 2020-03-05 Bundesdruckerei Gmbh Zugangskontrollsystem zum Erfassen eines Gesichtsbildes einer Person
JP7204421B2 (ja) * 2018-10-25 2023-01-16 キヤノン株式会社 検知装置およびその制御方法
WO2020176008A1 (ru) * 2019-02-28 2020-09-03 Публичное Акционерное Общество "Сбербанк России" Способ и система распознования лиц и построения маршрута
RU2694140C1 (ru) * 2019-04-04 2019-07-09 Общество с ограниченной ответственностью "Скайтрэк" (ООО "Скайтрэк") Способ идентификации человека в режиме одновременной работы группы видеокамер
US10726246B1 (en) 2019-06-24 2020-07-28 Accenture Global Solutions Limited Automated vending machine with customer and identification authentication
USD963407S1 (en) 2019-06-24 2022-09-13 Accenture Global Solutions Limited Beverage dispensing machine
US10867193B1 (en) 2019-07-10 2020-12-15 Gatekeeper Security, Inc. Imaging systems for facial detection, license plate reading, vehicle overview and vehicle make, model, and color detection
US11283937B1 (en) * 2019-08-15 2022-03-22 Ikorongo Technology, LLC Sharing images based on face matching in a network
US11157722B2 (en) * 2019-10-10 2021-10-26 Unisys Corporation Systems and methods for facial recognition in a campus setting
US11196965B2 (en) 2019-10-25 2021-12-07 Gatekeeper Security, Inc. Image artifact mitigation in scanners for entry control systems
CN112788227B (zh) * 2019-11-07 2022-06-14 富泰华工业(深圳)有限公司 目标追踪拍摄方法、装置、计算机装置及存储介质
US11275928B2 (en) * 2019-12-12 2022-03-15 Realnetworks, Inc. Methods and systems for facial recognition using motion vector trained model
US11373322B2 (en) 2019-12-26 2022-06-28 Stmicroelectronics, Inc. Depth sensing with a ranging sensor and an image sensor
CN111179477B (zh) * 2020-02-20 2021-01-05 广东创宇信息工程有限公司 一种通用型人脸识别安全门
EP3869395A1 (en) 2020-02-21 2021-08-25 Accenture Global Solutions Limited Identity and liveness verification
EP3879478A1 (en) * 2020-03-10 2021-09-15 Mastercard International Incorporated A method, computer program and apparatus
CN115485753A (zh) 2020-04-30 2022-12-16 库里欧瑟产品公司 用于交互式训练和演示的反射视频显示设备及其使用方法
US11151390B1 (en) 2020-05-21 2021-10-19 Ism Connect, Llc Self-correcting face detection pipeline-based method and apparatus for censusing a crowd
JP7188417B2 (ja) * 2020-06-25 2022-12-13 横河電機株式会社 装置、方法およびプログラム
CN112017346B (zh) * 2020-08-25 2023-08-18 杭州海康威视数字技术股份有限公司 门禁管理方法、门禁终端、门禁系统及存储介质
US11167172B1 (en) 2020-09-04 2021-11-09 Curiouser Products Inc. Video rebroadcasting with multiplexed communications and display via smart mirrors
US11553248B2 (en) 2020-09-25 2023-01-10 Arris Enterprises Llc System and method for the access and routing of content on the basis of facial recognition
CN112614264B (zh) * 2020-12-30 2022-12-09 无锡嘉利信科技有限公司 一种人脸识别与指纹解锁一体式小区门禁系统
CN112949505A (zh) * 2021-03-05 2021-06-11 浙江工商大学 基于mcu的离线式人脸识别智能门锁以及控制方法
US11482088B1 (en) * 2021-06-22 2022-10-25 Motorola Solutions, Inc. System and method for context aware access control with weapons detection
US11770623B2 (en) * 2021-07-29 2023-09-26 Lenovo (Singapore) Pte. Ltd. Single camera image data collection
JP7266071B2 (ja) * 2021-08-02 2023-04-27 株式会社日立ソリューションズ西日本 オンライン認証装置、方法、およびプログラム
TWI827028B (zh) * 2022-04-29 2023-12-21 新加坡商鴻運科股份有限公司 一種目標追蹤方法與裝置
US20240179405A1 (en) * 2022-11-28 2024-05-30 Ford Global Technologies, Llc Activation of facial recognition
CN116363817B (zh) * 2023-02-02 2024-01-02 淮阴工学院 一种化工厂危险区域入侵预警方法及系统

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6122445A (en) * 1997-11-14 2000-09-19 Nec Corporation Method of controlling a position of a built-in camera in a data processing machine and apparatus for doing the same
US6215519B1 (en) * 1998-03-04 2001-04-10 The Trustees Of Columbia University In The City Of New York Combined wide angle and narrow angle imaging system and method for surveillance and monitoring

Family Cites Families (54)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4337482A (en) * 1979-10-17 1982-06-29 Coutta John M Surveillance system
JPS5783971A (en) * 1980-11-13 1982-05-26 Asahi Optical Co Ltd Spot exposure control circuit
US4326218A (en) * 1980-11-14 1982-04-20 Coutta John M Surveillance system
US5339163A (en) * 1988-03-16 1994-08-16 Canon Kabushiki Kaisha Automatic exposure control device using plural image plane detection areas
US4963962A (en) * 1989-01-25 1990-10-16 Visual Methods, Inc. Optical surveillance assembly and camera
GB9019538D0 (en) * 1990-09-07 1990-10-24 Philips Electronic Associated Tracking a moving object
US5296945A (en) * 1991-03-13 1994-03-22 Olympus Optical Co., Ltd. Video ID photo printing apparatus and complexion converting apparatus
US5581625A (en) * 1994-01-31 1996-12-03 International Business Machines Corporation Stereo vision system for counting items in a queue
US5852669A (en) * 1994-04-06 1998-12-22 Lucent Technologies Inc. Automatic face and facial feature location detection for low bit rate model-assisted H.261 compatible coding of video
US5572596A (en) * 1994-09-02 1996-11-05 David Sarnoff Research Center, Inc. Automated, non-invasive iris recognition system and method
US6714665B1 (en) * 1994-09-02 2004-03-30 Sarnoff Corporation Fully automated iris recognition system utilizing wide and narrow fields of view
US5629752A (en) * 1994-10-28 1997-05-13 Fuji Photo Film Co., Ltd. Method of determining an exposure amount using optical recognition of facial features
US5699449A (en) * 1994-11-14 1997-12-16 The University Of Connecticut Method and apparatus for implementation of neural networks for face recognition
JP3452685B2 (ja) * 1995-05-10 2003-09-29 三菱電機株式会社 顔画像の処理装置
US5805745A (en) * 1995-06-26 1998-09-08 Lucent Technologies Inc. Method for locating a subject's lips in a facial image
US5715325A (en) * 1995-08-30 1998-02-03 Siemens Corporate Research, Inc. Apparatus and method for detecting a face in a video image
US5717512A (en) * 1996-05-15 1998-02-10 Chmielewski, Jr.; Thomas A. Compact image steering and focusing device
US6320610B1 (en) * 1998-12-31 2001-11-20 Sensar, Inc. Compact imaging device incorporating rotatably mounted cameras
US6173068B1 (en) * 1996-07-29 2001-01-09 Mikos, Ltd. Method and apparatus for recognizing and classifying individuals based on minutiae
US6184926B1 (en) * 1996-11-26 2001-02-06 Ncr Corporation System and method for detecting a human face in uncontrolled environments
US5991429A (en) * 1996-12-06 1999-11-23 Coffin; Jeffrey S. Facial recognition system for security access and identification
US6118888A (en) * 1997-02-28 2000-09-12 Kabushiki Kaisha Toshiba Multi-modal interface apparatus and method
US6188777B1 (en) * 1997-08-01 2001-02-13 Interval Research Corporation Method and apparatus for personnel detection and tracking
US5892837A (en) * 1997-08-29 1999-04-06 Eastman Kodak Company Computer program product for locating objects in an image
US6108437A (en) * 1997-11-14 2000-08-22 Seiko Epson Corporation Face recognition apparatus, method, system and computer readable medium thereof
US6301370B1 (en) * 1998-04-13 2001-10-09 Eyematic Interfaces, Inc. Face recognition from video images
GB2341231A (en) * 1998-09-05 2000-03-08 Sharp Kk Face detection in an image
US6757422B1 (en) * 1998-11-12 2004-06-29 Canon Kabushiki Kaisha Viewpoint position detection apparatus and method, and stereoscopic image display system
US6289113B1 (en) * 1998-11-25 2001-09-11 Iridian Technologies, Inc. Handheld iris imaging apparatus and method
US6298145B1 (en) * 1999-01-19 2001-10-02 Hewlett-Packard Company Extracting image frames suitable for printing and visual presentation from the compressed image data
US7038715B1 (en) * 1999-01-19 2006-05-02 Texas Instruments Incorporated Digital still camera with high-quality portrait mode
JP2000259814A (ja) * 1999-03-11 2000-09-22 Toshiba Corp 画像処理装置及びその方法
US7039221B1 (en) * 1999-04-09 2006-05-02 Tumey David M Facial image verification utilizing smart-card with integrated video camera
US6526161B1 (en) * 1999-08-30 2003-02-25 Koninklijke Philips Electronics N.V. System and method for biometrics-based facial feature extraction
EP1085366B1 (en) * 1999-09-14 2004-09-15 Kabushiki Kaisha Toshiba Face image photographing apparatus and face image photographing method
US6757008B1 (en) * 1999-09-29 2004-06-29 Spectrum San Diego, Inc. Video surveillance system
US6642955B1 (en) * 2000-01-10 2003-11-04 Extreme Cctv Inc. Surveillance camera system with infrared and visible light bandpass control circuit
US6940545B1 (en) * 2000-02-28 2005-09-06 Eastman Kodak Company Face detecting camera and method
JP4526639B2 (ja) * 2000-03-02 2010-08-18 本田技研工業株式会社 顔認識装置およびその方法
JP2001331799A (ja) * 2000-03-16 2001-11-30 Toshiba Corp 画像処理装置および画像処理方法
DE60119418T2 (de) * 2000-03-22 2007-05-24 Kabushiki Kaisha Toshiba, Kawasaki Gesichtsbildaufnehmendes Erkennungsgerät und Passüberprüfungsgerät
AU5703701A (en) * 2000-04-17 2001-10-30 Igt Reno Nev System and method of capturing a player's image for incorporation into a game
US6766035B1 (en) * 2000-05-03 2004-07-20 Koninklijke Philips Electronics N.V. Method and apparatus for adaptive position determination video conferencing and other applications
WO2002019137A1 (en) * 2000-08-29 2002-03-07 Imageid Ltd. Indexing, storage & retrieval of digital images
JP4374759B2 (ja) * 2000-10-13 2009-12-02 オムロン株式会社 画像比較システムおよび画像比較装置
US6680745B2 (en) * 2000-11-10 2004-01-20 Perceptive Network Technologies, Inc. Videoconferencing method with tracking of face and dynamic bandwidth allocation
JP2002170112A (ja) * 2000-12-04 2002-06-14 Minolta Co Ltd 解像度変換プログラムを記録したコンピュータ読取可能な記録媒体、解像度変換装置および解像度変換方法
US6525663B2 (en) * 2001-03-15 2003-02-25 Koninklijke Philips Electronics N.V. Automatic system for monitoring persons entering and leaving changing room
US6920236B2 (en) * 2001-03-26 2005-07-19 Mikos, Ltd. Dual band biometric identification system
US6985179B2 (en) * 2001-03-30 2006-01-10 Intel Corporaiton Determining image quality for improving object trackability
US7020345B2 (en) * 2001-04-26 2006-03-28 Industrial Technology Research Institute Methods and system for illuminant-compensation
US7027620B2 (en) * 2001-06-07 2006-04-11 Sony Corporation Method of recognizing partially occluded and/or imprecisely localized faces
US7068841B2 (en) * 2001-06-29 2006-06-27 Hewlett-Packard Development Company, L.P. Automatic digital image enhancement
US7027619B2 (en) * 2001-09-13 2006-04-11 Honeywell International Inc. Near-infrared method and system for use in face detection

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6122445A (en) * 1997-11-14 2000-09-19 Nec Corporation Method of controlling a position of a built-in camera in a data processing machine and apparatus for doing the same
US6215519B1 (en) * 1998-03-04 2001-04-10 The Trustees Of Columbia University In The City Of New York Combined wide angle and narrow angle imaging system and method for surveillance and monitoring

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107944422A (zh) * 2017-12-08 2018-04-20 业成科技(成都)有限公司 三维摄像装置、三维摄像方法及人脸识别方法
TWI657408B (zh) * 2017-12-08 2019-04-21 大陸商業成科技(成都)有限公司 三維攝像裝置、三維攝像方法及人臉識別方法
CN107944422B (zh) * 2017-12-08 2020-05-12 业成科技(成都)有限公司 三维摄像装置、三维摄像方法及人脸识别方法

Also Published As

Publication number Publication date
NZ532315A (en) 2005-08-26
ES2260476T3 (es) 2006-11-01
DK1444667T3 (da) 2006-07-17
US20090080715A1 (en) 2009-03-26
EP1444667A1 (en) 2004-08-11
CN1568489A (zh) 2005-01-19
EP1667080A1 (en) 2006-06-07
PT1444667E (pt) 2006-07-31
DE60209760D1 (de) 2006-05-04
US20050063566A1 (en) 2005-03-24
HK1070167A1 (en) 2005-06-10
ATE320054T1 (de) 2006-03-15
JP2005505871A (ja) 2005-02-24
DE60209760T2 (de) 2007-01-18
CA2359269A1 (en) 2003-04-17
EP1444667B1 (en) 2006-03-08
WO2003034361A1 (en) 2003-04-24

Similar Documents

Publication Publication Date Title
CN100418112C (zh) 用于记录和自动识别确认的面部成像系统
US9875392B2 (en) System and method for face capture and matching
KR101645722B1 (ko) 자동추적 기능을 갖는 무인항공기 및 그 제어방법
US5956122A (en) Iris recognition apparatus and method
US9251598B2 (en) Vision-based multi-camera factory monitoring with dynamic integrity scoring
CN105302151B (zh) 一种飞机入坞引导和机型识别的系统及方法
US9524426B2 (en) Multi-view human detection using semi-exhaustive search
US5912721A (en) Gaze detection apparatus and its method as well as information display apparatus
CN111080679B (zh) 一种对大型场所室内人员动态跟踪定位的方法
US7336297B2 (en) Camera-linked surveillance system
US20150294496A1 (en) Probabilistic person-tracking using multi-view fusion
US20150294143A1 (en) Vision based monitoring system for activity sequency validation
CN108733208A (zh) 智能设备的交互目标确定方法和装置
US20120200689A1 (en) Long distance multimodal biometric system and method
KR101961891B1 (ko) 자동출입심사대에 진입하는 사람 및 물건 중 사람을 자동 계수하는 방법 및 장치
KR101917783B1 (ko) 주차장 관리 시스템
US11882354B2 (en) System for acquisiting iris image for enlarging iris acquisition range
Hanna et al. A System for Non-Intrusive Human Iris Acquisition and Identification.
KR101200560B1 (ko) 광각 감시 카메라의 영상 분석 장치, 시스템 및 방법
CN112804439A (zh) 一种自适应拍摄移动目标的装置和方法
AU2002331511B2 (en) Face imaging system for recordal and automated identity confirmation
CA2463836A1 (en) Face imaging system for recordal and automated identity confirmation
AU2002331511A1 (en) Face imaging system for recordal and automated identity confirmation

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 1070167

Country of ref document: HK

C14 Grant of patent or utility model
GR01 Patent grant
C56 Change in the name or address of the patentee

Owner name: CRAPT MATRIX CANADA CO., LTD.

Free format text: FORMER NAME OR ADDRESS: BIODENTITY SYSTEMS CORP

CP03 Change of name, title or address

Address after: Ontario, Canada

Patentee after: Klip Te Mai Cuike Canada Company

Address before: Ontario, Canada

Patentee before: Biodentity Systems Corp.

REG Reference to a national code

Ref country code: HK

Ref legal event code: GR

Ref document number: 1070167

Country of ref document: HK

C17 Cessation of patent right
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20080910

Termination date: 20121017