CN100361135C - 一种获取人脸图像的方法及人脸识别方法与系统 - Google Patents

一种获取人脸图像的方法及人脸识别方法与系统 Download PDF

Info

Publication number
CN100361135C
CN100361135C CNB2004800362702A CN200480036270A CN100361135C CN 100361135 C CN100361135 C CN 100361135C CN B2004800362702 A CNB2004800362702 A CN B2004800362702A CN 200480036270 A CN200480036270 A CN 200480036270A CN 100361135 C CN100361135 C CN 100361135C
Authority
CN
China
Prior art keywords
light source
face
image
active light
people
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Lifetime
Application number
CNB2004800362702A
Other languages
English (en)
Other versions
CN1898678A (zh
Inventor
高奇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Zhongke Aosen Technology Co ltd
Original Assignee
BEIJING AUTHENMETRIC TECHNOLOGY Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Family has litigation
First worldwide family litigation filed litigation Critical https://patents.darts-ip.com/?family=34661423&utm_source=google_patent&utm_medium=platform_link&utm_campaign=public_patent_search&patent=CN100361135(C) "Global patent litigation dataset” by Darts-ip is licensed under a Creative Commons Attribution 4.0 International License.
Application filed by BEIJING AUTHENMETRIC TECHNOLOGY Co Ltd filed Critical BEIJING AUTHENMETRIC TECHNOLOGY Co Ltd
Publication of CN1898678A publication Critical patent/CN1898678A/zh
Application granted granted Critical
Publication of CN100361135C publication Critical patent/CN100361135C/zh
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161Detection; Localisation; Normalisation
    • G06V40/166Detection; Localisation; Normalisation using acquisition arrangements

Landscapes

  • Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Multimedia (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Image Processing (AREA)
  • Collating Specific Patterns (AREA)
  • Image Analysis (AREA)
  • Image Input (AREA)
  • Studio Devices (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)

Abstract

本发明公开了一种获取人脸图像的方法及其识别方法与系统,采用主动光源对被拍摄的人脸区域进行照射;同在人脸识别过程中利用主动光源进行人脸照明的时使用电子图像采集装置对人脸进行拍摄,获取相应的图像,并进一步将所述的图像传送到相应的电子计算处理设备中进行人脸图像的识别处理。本发明可以有效地减小不同光照环境下,光线变化对人脸图像的影响,从而达到在各种光照条件下高度准确的人脸识别。在使用时,利用主动光源对人脸照明,主动光源保持与摄像装置相对位置保持不变。人脸成像中,由于主动光源光强影响大于环境光强,因此,所采集的人脸图像最为稳定,能取得最佳的计算机识别效果。

Description

一种获取人脸图像的方法及人脸识别方法与系统
技术领域
本发明涉及计算机图像识别与处理技术领域,特别是指一种在人脸识别过程中利用主动光源进行人脸照明的人脸图像生成、人脸识别方法及其系统。
背景技术
人脸识别是基于计算机、图象处理、模式识别等技术的一种生物特征识别技术。近年来,特别是美国遭到9.11恐怖袭击事件后,世界各国都把安全放到首位,因此,人脸识别技术的得到比以前更多的关注。
生物识别技术主要是依靠人体的身体特征来进行身份验证的一种高科技识别技术。人的指纹、掌纹、眼虹膜、脱氧核糖核酸(DNA)以及人脸相貌等人体特征具有人体所固有的不可复制的唯一性、稳定性,无法复制,失窃或被遗忘。由于每个人的这些特征都不相同,因此利用人体的这些独特的生理特征可以准确地识别每个人的身份。已有的人体生物识别方法包括人脸识别、指纹识别、声音识别、掌形识别、签名识别、眼虹膜、视网膜识别等。
人脸识别与其他识别技术相比较,具有自然、简便、易用、用户接受性良好、非接触、非侵扰等众多优点。面部识别无需干扰人们的正常行为就可以实现识别的目的,无需为人们是否愿意将手放在指纹采集设备上,或对着麦克风讲话,或是将他们的眼睛对准激光扫描装置而进行争辩。只要从一架摄像机前走过,就可以被快速地识别。因此,人脸识别技术可广泛地应用于安全验证、监控、出入口控制、电脑登录、互联网登录及身份认证、电子商务信息系统、金库的安全设施、保险柜、自动柜员机、追捕犯罪嫌疑人、反恐怖斗争以及其他适用的领域。
常见的人脸识别技术典型应用模式包括:
身份鉴定(一对多的搜索):在鉴定模式下,确定一个人的身份,可以快速地计算出实时采集到的面纹数据与面像数据库中已知人员的面纹数据之间的相似度,给出一个按相似度递减排列的可能的人员列表,或简单地返回鉴定结果(相似度最高的)和相对应的可信度。
身份确认(一对一的比对):在确认模式下,面纹数据可以存储在智能卡中或数码记录中,只需要简单地将实时的面纹数据与存储的数据相比对,如果可信度超过一个指定的阈值,则比对成功,身份得到确认。
监控:应用面像捕捉、面像识别技术,在监控范围中跟踪一个人和确定他的位置。
监视:可以在监控范围内发现人脸,而不论其远近和位置,能连续的跟踪他们并将它们从背景中分离出来,将他的面像与监控列表进行比对。整个过程完全是无需干预,连续和实时。
上述的各种应用模式可以广泛地应用在如下的多个领域:
身份确认与人员检索:可用于电脑/网络安全、银行业务、智能卡、访问控制、边境控制等领域;
身份证:可用于选民登记、身份证、护照、驾驶执照、工作证等;
计算机信息保护系统:利用面像特征识别用户,保护计算机信息;
犯罪嫌疑人识别系统:应用于脸部照片登记系统,事件后分析系统;
远距离身份识别:应用于监视、监控、闭路电视、交通管理、敌友识别等。
参见图1,一个完整的人脸识别过程是将待识别人脸图像与数据库中人脸作比对,然后作出识别判决。比对识别是在人脸特征码的基础上进行。该过程由图像采集10、特征提取20、和特征比对30三个步骤完成。对应于人脸识别系统则包括:图像采集模块:其通过图像采集装置(如摄像机、数码相机等)采集的人脸图像或图像视频序列,然后,将这些图像或视频序列送至计算机进行处理;特征提取模块:其设置在计算机之中,从输入的图像中检测定位人脸部分,并在对人脸姿态进行校正之后提取人脸的特征信息,即人脸特征码;特征比对模块:同样设置在计算机之中,它将待识别人的人脸特征信息(人脸特征码)与人脸特征数据库中所存入的特征信息(人脸特征码)进行比对,并在这些信息中找出最佳的匹配对象。
显然,人脸特征数据库需要在识别之前建立。因此,参见图2,一个人脸识别系统识别应有由人脸识别A和人脸录入建档B两大过程构成。其中,人脸录入建档B过程的目的是建立在人脸识别过程中使用的人脸特征数据库。
人脸识别A和人脸录入建档B两大过程均包括图像采集和特征提取过程,以获取图像和提取特征。但人脸识别过程是将提取的特征码与人脸特征数据库所存入的特征码进行特征比对匹配,而人脸录入建档过程则将提取的特征码存入人脸特征数据库。
人脸的特征提取20由人脸检测或人脸跟踪201、人脸的特征定位与校正202、人脸特征抽取203等几个步骤构成。人脸检测是指在动态的场景与复杂的背景中捕捉人脸并分离出人脸,人脸跟踪指对被检测到的人脸进行动态目标跟踪,人脸校正利用关键部位对人脸进行几何校正(如校正偏移的人脸姿态),人脸特征提取对检测校正的人脸计算脸部的本质特征。
人脸的特征对比30则是基于抽取人脸特征将待识别的人脸数据库40中的人脸进行依次比对,计算匹配可信度,并判决最佳匹配对象。因此,人脸的特征描述决定了人脸识别的具体方法与性能。
要获得高度可靠、精确的人脸识别效果,所提取人脸特征应反映脸部的本质特征,即不随皮肤色调、面部毛发、发型、眼镜、表情、姿态、和光线的变化。但是,现有的人脸识别技术中所存在的一大难题在于:环境光线的变化对人脸特征的影响非常大,不同的环境光线下所获得的人脸图像的识别效果差异极大。
研究表明:由光线变化造成的同一人脸的图像差别要远远大于不同人脸的图像差别。(参见Yael Adnin,Yael Moses and Shimon Ullman,“Facerecognition:The problem of compensating for changes in illuminationdirection(人脸识别:光照方向变化补偿问题)”,IEEE Transactions onPattern Analysis and Machine Intelligence,Vol.19,No.7,1997,第712-732页)。现有的人脸识别技术中主要依赖的是“被动”光源,即环境光源。但是,在实际的应用过程中,环境光千差万别,并且难以控制。环境光源的变化会使得获取的人脸发生显著变化,导致所提取人脸特征发生显著变化,进而导致人脸特征对比准确率下降。
设人脸表面一点Pi的法向量为ni=(nx,ny,nz)T,且nT i气为单位向量,即‖n‖=1;设光源为点光源,方向为s=(sx,sy,sz),人脸的成像公式可以简单地用Lambertian(兰伯特)模型表示,Pi点的灰度Ii为:
Ii=ρi(x,y)ni(x,y)T·s    (1)
其中,i=1,2,…,k,k为人脸所包含的像素点数;
ρi为人脸在Pi点的表面反射率,
nT i表示人脸表面一点i处的表面法向量,
·表示点积
x,y,z表示Pi三维空间中的坐标。
从上述的公式可以看出:人脸的成像与人脸的表面反射率、人脸的三维形状和光照有关。在人脸的成像过程中,这三个要素是必不可少的。其中前两项与人脸的本身内在特性有关,也是进行人脸识别所需要的信息;最后一项的光线则是人脸成像的外在因素,也是影响人脸识别性能的主要因素。
虽然光线的强度‖s‖影响人脸图像的灰度,但这种影响由于是整体性的,可以用简单的线性变换予以校正。真正影响人脸识别性能的是光线相对于人脸表面法向量的入射角度。设θi为入射光线与人脸表面法向量在Pi点的夹角(θi∈[0,π]),光线的强度‖s‖=1,则公式(1)可以表示成如下的公式:
Ii=ρi(x,y)cosθi    (2)
其中,i=1,2,…,k;k为人脸所包含的像素点数。
从公式(2)中可以看出,如果光线入射角度变化,则θi就会发生相应的变化,从而造成同一人脸在不同光照角度下图像差别。通过相关分析得可知:一个从人脸左侧入射的光线产生的人脸图像与一个从人脸右侧入射的光线产生的人脸图像的相关系数一般为负值,这说明两幅图像是完全不同的。
由于在实际的应用过程中,光线的角度与系统的应用环境有关,而实际的环境千差万别并且难以控制。目前人脸识别技术所用图像混合了内在与外在因素,这也就是目前最好的人脸识别系统在光线变化的情况下的识别率只有50%左右的原因(参见2002年美国国家标准局“人脸识别产品评测”报告会(FRVT2002 Evaluation Report,P.J.Phillips,P.Grother,R.J Micheals,D.M.Blackburn,E Tabassi,and J.M.Bone.March 2003)。。
虽然目前有多种方法在上述的人脸识别中可以进行补偿、归一化等等处理(参见:P.N.Belhumeur,David J.Kriegman,“What is the set of Imagesof an Object Under All possible Lighting Conditions?”,IEEE conf.OnComputer Vision and Pattern Recognition”,1996;Athinodoros S.Georghiades and Peter N.Belhumeur,“Illumination cone models forrecognition under variable lighting:Faces”,CVPR,1998;AthinodorosS.Georghiades and Peter N.Belhumeur,”From Few to many:Illuminationcone models for face recognition under variable lighting and pose”,IEEE Transactions on Pattern Analysis and Machine Intelligence,Vol.23,No.6,pp 643-660,2001;Amnon Shashua,and Tammy Riklin-Raviv,“Thequotient image:Class-based re-rendering and recognition with varyingilluminations”,Transactions on Pattern Analysis and MachineIntelligence,Vol.23,No.2,pp129-139,2001;T.Riklin-Raviv and A.Shashua.“The Quotient image:Class based recognition and synthesisunder varying illumination”. In Proceedings of the 1999 Conference onComputer Vision and Pattern Recognition,pages 566--571,Fort Collins,CO,1999;Ravi Ramamoorthi,Pat Hanrahan,“On the relationship betweenradiance and irradiance:determining the illumination from images ofa convex Lambertian object”,J.Opt.Soc.Am.,Vol.18,No.10,2001;Ravi Ramamoorthi,“Analytic PCA Construction for Theoreticai Analysisof Lighting Variability in Images of a Lambertian Object”,IEEETransactions on Pattern Analysis and Machine Intelligence,Vol.24,No.10,2002-10-21;Ravi Ramamoorthi and Pat Hanrahan,“An EfficientRepresentation for Irradiance Environment Maps”,SIGGRAPH 01,pages497--500,2001;Ronen Basri,David Jacobs,“Lambertian Reflectance andLinear Subspaces”,NEC Research Institute Technical Report 2000-172R;Ronen Basri and David Jacobs,Lambertian Reflectance and LinearSubspaces,IEEE Transactions on Pattern Analysis and MachineIntelligence,forthcoming;Terence Sim,Takeo Kanade,“Illuminatingthe Face”,CMU-RI-TR-01-31,Sept.28,2001等),但其效果并不明显,而且对处理系统的计算能力要求很高。这些方法中,有的要求对人脸进行三维建模,有的则对人脸的形状进行假设,而这些限制使得人脸识别技术的可操作性大大降低,并且很难取得很好的效果。
在人脸图像识别技术应用方面,已公开了一种面像识别门禁和考勤系统,如中国专利ZL99117360.x,但是该专利仅仅公开了如何利用人脸图像识别技术在门禁和考勤系统方面进行应用,并没有深入分析研究人脸图像采集、识别和处理的效果与稳定性,如,随皮肤色调、面部毛发、发型、眼镜、表情、姿态和光线的变化影响。其方案在光线变化的情况下的识别率仍是较低的,故其应用领域也受到一定限制。
此外,由于采用虹膜识别技术识别率高,也存在利用虹膜识别进行身份鉴定,例如,美国Iridian公司的产品,但该红外虹膜图像采集装置较为复杂且制造成本较高,在许多场合应用受到很大限制。虽然,中国专利ZL99110825.6也公开了一种小型便携式光机电装置,但该装置也存在使用、用户使用不方便等问题。由于虹膜对准标识太小,要求用户过分密切配合以调整眼部与摄像装置的相对角度与位置,使用操作不方便等问题,导致用户接受性差。此外,该类图像采集、识别和处理系统在安装、维护方面以及自动化控制方面都存在问题。
发明内容
本发明所要解决的技术问题在于提供一种利用主动光源进行人脸照明的人脸图像生成、识别方法与系统,其可克服环境光对人脸图像稳定性的影响,有较高的识别率。
本发明的另一目的在于提供一种利用主动光源获取人脸图像和识别人脸图像的方法;通过主动光源进行对人脸进行照明,准确、快速地捕捉人脸图像中双眼的位置信息,从而降低人脸图像检测与跟踪的难度,提供图像处理的效率。
本发明的另一目的在于提供一种利用红外光源获取人脸图像和识别人脸图像的系统,其识别效果和稳定性好,系统集成度高、制造成本低,在各相关领域应用时安装、维护方便且自动化程度高。
为了实现上述目的,本发明提供了一种利用人脸图像进行识别的方法,包括如下步骤:
步骤一,启动人脸图像识别系统;
步骤二,人体接近所述识别系统,触发主动光源对所述人体的脸部区域进行照射;
步骤三,成像装置对所述主动光源照的脸部区域进行拍摄,获取相应的图像;
步骤四,所述成像装置将捕捉到的至少一帧图像传至图像数据处理系统,所述图像数据处理系统从该帧图像中检测并定位人眼和/或人脸;
步骤五,从所述图像中截取人脸部分图像,并进行人脸特征提取;
步骤六,与数据库中人脸图像数据进行人脸特征对比;
步骤七,获取识别结果。
上述利用人脸图像进行识别的方法,其特点在于,所述的主动光源为主动辐射源,至少是红外光源或可见光源或闪光灯,或者是其任意组合。
上述利用人脸图像进行识别的方法,其特点在于,在步骤二至步骤四中,还包括环境光源对所述人体的脸部区域进行照射,所述主动光源和环境光源在人脸部分所产生的成像总能量大于环境光源在人脸部位所产生的成像能量。
上述利用人脸图像进行识别的方法,其特点在于,所述的主动光源和环境光源在人脸部位所产生的成像总能量不小于环境光源在人脸部位所产生成像能量的2倍。
上述利用人脸图像进行识别的方法,其特点在于,在步骤四后,还包括一判断检测人眼和/或人脸是否成功的步骤,如果成功,则继续执行步骤五,否则执行步骤四。
上述利用人脸图像进行识别的方法,其特点在于,在步骤四中,还包括检测并定位所述图像中人眼反光所致的高亮点,并利用所述高亮点从所述图像中检测定位人眼位置的步骤。
上述利用人脸图像进行识别的方法,其特点在于,在步骤三中,还包括所述成像装置随所述主动光源照射区域跟踪人脸进行拍摄的步骤。
为了更好实现上述目的,本发明还提供了一种利用主动光源获取人脸图像的方法,其特点在于,包括如下步骤:
采用一主动光源对被拍摄的人脸区域进行照射;
使用一成像装置对人脸进行拍摄,获取相应的图像,并进一步将所述图像传送到相应的图像数据处理系统进行人脸图像的识别处理;
其中,所述的主动光源和环境光源在人脸部位所产生的成像总能量大于环境光源在人脸部位所产生的成像能量。
上述的利用主动光源获取人脸图像的方法,其特点在于:所述的主动光源和环境光源在人脸部位所产生的成像总能量不小于环境光源在人脸部位所产生成像能量的2倍。
上述的利用主动光源获取人脸图像的方法,其特点在于:所述主动光源与所述成像装置相对位置固定,所述主动光源的投射方向与所述成像装置的摄像镜头轴线成一锐角,即0-90度之间,其中以0°最佳。
上述的利用主动光源获取人脸图像的方法,其特点在于:所述的主动光源为主动辐射源,至少是红外光源或可见光源或闪光灯,或其组合。
上述的利用主动光源获取人脸图像的方法,其特点在于:当使用主动光源采集图像之后,所述图像数据处理系统检测该主动光源在所述图像中的高亮点,并利用所述高亮点从所述图像中检测到人脸图像。
为了更好地实现上述目的,本发明还提供了一种实现上述方法的人脸图像识别系统,其特点在于,包括:成像装置、主动光源、控制开关和图像数据处理系统;
所述主动光源,用于对所述人体的脸部区域进行照射;
所述控制开关,用于控制主动光源对所述人体的脸部区域进行照射;
所述成像装置,用于对所述主动光源照射的人脸区域进行拍摄,获取相应的图像,将捕捉到的至少一帧图像传至图像数据处理系统;
所述图像数据处理系统,用于接收所述成像装置传输的图像,在所述图像中检测并定位人眼和/或人脸,从所述图像中截取人脸部分图像进行人脸特征提取,并与数据库中人脸图像数据进行人脸特征对比。
上述的人脸图像识别系统,其特点在于,还进一步包括环境光源,用于对所述人体的脸部区域进行照射;其中,所述的主动光源和环境光源在人脸部位所产生的成像总能量大于环境光源在人脸部位所产生的成像能量。
上述的人脸图像识别系统,其特点在于,所述主动光源与所述成像装置相对位置固定,所述主动光源的投射方向与所述成像装置的摄像镜头轴线成一锐角,即0-90度之间。
上述的人脸图像识别系统,其特点在于,所述主动光源的投射方向与所述成像装置的摄像镜头轴线方向平行。
上述的人脸图像识别系统,其特点在于,所述的主动光源为主动辐射源,至少是红外光源或可见光源或闪光灯,或者是其任意组合。
上述的人脸图像识别系统,其特点在于,所述的红外光源的波长为740nm-4000nm,或者是在所述波长范围内不同波长红外光源的组合。
上述的人脸图像识别系统,其特点在于,当使用红外光源作为主动光源时,在所述成像装置的摄像镜头前还加设一用于抑制可见光的红外滤光镜片,该红外滤光镜片的波长与所述红外光源的波长相适应。
上述的人脸图像识别系统,其特点在于,所述红外滤光镜片为带通型或长通截止型滤光镜片,以抑制可见光而使主动照射的红外光通过。
上述的人脸图像识别系统,其特点在于,所述成像装置的摄像镜头围边还设置有一人脸图像反馈显示装置,所述反馈显示装置用于辅助人脸在水平/垂直方向定位。
上述的人脸图像识别系统,其特点在于,所述反馈显示装置为一面镜子,或者为一液晶显示屏幕。
上述的人脸图像识别系统,其特点在于,所述成像装置为电子视频摄像头或数字照相机。
上述的人脸图像识别系统,其特点在于,所述图像数据处理系统为安装有图像处理软件及PC计算机;或者为嵌入有图像处理软件的数据处理器。
上述的人脸图像识别系统,其特点在于,所述控制开关为一触发主动光源照明的红外接近开关。
上述的人脸图像识别系统,其特点在于,所述主动光源对称地布置在所述成像装置的周围。
本发明可以有效地减小不同光照环境下,光线变化对人脸图像的影响,从而达到在各种光照条件下高度准确的人脸识别;在使用时,利用主动光源对人脸照明,主动光源保持与摄像装置相对位置保持不变;人脸成像中,由于主动光源光强影响大于环境光强,因此,所采集的人脸图像最为稳定,能取得最佳的识别效果。
附图说明
图1为人脸图像识别的基本流程示意图;
图2为人脸图像识别认证以及录入建档流程示意图;
图3为本发明主动光源投射方向相对于摄像镜头轴线方向夹角示意图;
图4为实现本发明的人脸图像识别方法的系统构成示意图;
图4a为图4中所述方法的实施步骤流程图
图4b为图4中所述系统的图像数据处理器电路示意图
图5为本发明利用主动光源成像在人眼中心产生高亮点的示意图;
图6为采用红外主动光源的成像装置;
图7为本发明的人脸识别门禁控制系统;
图8为本发明的人脸识别系统在进出入证件检查方面的应用;
图8a为图8中识别系统的人脸图像采集方法示意图;
图8b为图8中识别系统的人脸图像识别方法示意图。
具体实施方式
以下结合附图和具体的实施例对本发明作进一步的详细说明:
在图4中,本发明揭示了一较佳实施例,该人脸识别系统420,包括:主动光源421、成像装置422、定位镜子423、滤光片424、控制开关426、图像数据处理系统430、指示灯425和电源;该主动光源421均匀分布安装在壳体的四周,中心安装有定位镜子423、滤光片424和成像装置422,该定位镜子423粘接在壳体的中心部位,该定位镜子423的中间是滤光片424和成像装置422,该滤光片424安装在该成像装置422的前面。该成像装置422与图像数据处理系统430电性连接。该控制开关426为一红外感应开关,其安装在壳体的下部,在壳体上安装该指示灯425。该控制开关426分别与主动光源421、成像装置4 22、指示灯425和电源连接,当该控制开关426被触发启动,该主动光源421和成像装置422开始工作,此时,指示灯425呈红灯闪耀状态。当该控制开关426被断开,该主动光源421和成像装置422停止工作,此时,指示灯425呈绿色状态。
首先,采用主动光源421对被拍摄的人脸410区域进行照射;同时使用成像装置422,例如:电脑摄像头、工业摄像机、红外专用摄像机等,对人脸410进行拍摄,获取相应的图像;然后,将捕捉到的图像传送到图像数据处理系统430中进行人脸图像的识别处理。
在图4a中,揭示了本发明的人脸图像识别系统的实施方法,包括如下步骤:
步骤S100,启动人脸识别系统420;
步骤S110,人体接近该人脸识别系统420,触发红外感应开关426,使主动光源421对人脸区域照射;
步骤S120,该成像装置422随主动光源421照射区域跟踪人脸进行拍摄;
步骤S130,该成像装置422将捕捉到至少一帧图像传至图像数据处理系统(如PC机,或者数据处理器)430;
步骤S140,数据处理器430从该帧图像中搜索检测并定位人眼和/或人脸;
步骤S150,判断检测定人眼和/或人脸是否成功?,如果是则执行步骤S160,否则执行步骤S130;
步骤S160,从该帧图像中截取人脸图像;
步骤S170,进行人脸特征提取;
步骤S180,与人脸特征数据库中人脸图像特征进行特征对比;
步骤S190,获取识别结果。
在上述的步骤中,所采用的主动光源与环境光源427在人脸部位所产生成像的总能量大于2倍环境光源在人脸部位所产生的成像能量。例如:假设环境光在人脸部位的光强为30勒克斯(LUX),在拍摄人脸图像时,采用的主动光源在人脸部位的光强为120 LUX,其总光强为环境光线在人脸部位光强的4倍。
一般而言,本发明的该主动光源421可由主动辐射源构成,包括:红外光源、闪光灯、或可见光灯光等。利用闪光灯在拍摄时对人脸进行照射,由于闪光灯的光强远远大于环境光,因此,可以大大减低环境光对成像的影响。可见光灯光亦可达到类似效果。
在图4和图4a中,本发明利用红外光源在拍摄中对人脸进行照射时,由于人眼对红外感受微弱甚至不感受,因此,在拍摄人脸图像时,红外光源对人无侵扰;在采用红外光源对人脸照射的同时,可以在拍摄设备(例如:电子摄像机、数字相机等)镜头上加设相应的红外滤光镜片421,用红外滤光镜片进一步减低环境光的影响;因此,红外光源最适合作为人脸识别的主动照明光源。
本发明的具体实施方式中,无论采用上述的何种主动光源对人脸进行照射,都应当保持主动光源与成像装置之间的相对位置固定,且主动光源的投射方向与成像装置的摄像镜头轴线成一锐角。
参见图3,在人脸图像的录入和识别过程之中,应当尽量保持人脸410的人脸平面与成像装置422的相对位置不变,且保持人脸410的人脸平面与成像装置422中的摄像镜头轴线方向相互垂直(即:人脸平面的法向量与摄像镜头轴线方向平行),这样,该人脸平面的法向量与主动光源421的投射方向的夹角θ基本不变。如此对人脸进行照明,所获得的图像最为稳定。
当使用红外光源时,由于红外光源与可见光波长不同,可以在摄像镜头上加装红外滤光镜片,用于将可见光抑制,以此进一步减低环境光的影响。在本发明中,可用的红外光源的波长为740nm-1700nm的近红外光源,或波长为1700nm-4000nm中红外光源照明。由于红外光为不可见光,并且人眼对红外感受微弱甚至不感受,红外光源对人无侵扰;红外光源应用可在人不察觉中进行。并且,利用在红外光源,可完全在黑暗中进行人脸识别。
在加用红外滤光镜片时,所述的红外滤光镜片可为带通型或截通型。比如:当采用850nm红外发光二极管照明时,可以配合中心波长为850nm的带通型红外滤光镜片,使得850nm的红外光通过,而滤除其他波长光线;或者,配合截止波长为850nm的长通红外滤光片,使得800nm以上波长的红外光通过,而滤除800nm以下波长的光线。
在图4和图4b中,本发明采用的图像数据处理系统,可以直接采用PC计算机,或者采用嵌入式图像数据处理器(参见图4b)。
在图4b中,为了简化识别系统,将可各功能电路集成在一个电路控制板上并安装在一壳体内,该电路控制板上安装有红外感应开关426、模拟信号比较器4223、单片机4222、摄像头422(LogiTech Pro4000)、控制继电器4221、主动光源421(红外发光二极管阵列)和嵌入图像处理软件的数据处理器430(MCS-51系列)。
在图5a图5b中,为了提供识别效率和稳定性,本发明的识别方法利用主动光源成像在人眼中心产生高亮点(图5a)检测人眼,进而检测人脸(图5b)。当主动光源是红外光时,会使得所获得的人脸图像的人眼中心是一高亮点。利用这一特点,在获得拍摄图像时,就可以首先对图像中出现的、反映人眼的高亮点进行检测,当检测到所述的高亮点时,其周围的区域则可以判断为人脸图像区域。或者,根据人眼与人脸图像的几何关系,利用成对出现的高亮点,配合相应的模板,就可以准确快速地对图像中的人脸区域进行定位。这使得困难的人脸检测问题得以大大简化。
再进一步参见图3,当主动光源421中的光源的投射方向相对于摄像镜头轴线方向的夹角为θ,设环境光为S2,如果加入一个主动光源S1,前述的公式(1)可以写成:
Ii=ρi(x,y)ni(x,y)T·(s1+s2)    (3)
其中,i=1,2,…,k;
如果主动光源S1的强度大于环境光S2强度,即‖S1‖>‖S2‖,则公式(3)可以近似表示为
Ii≈ρi(x,y)ni(x,y)T·s1    (4)
其中,i=1,2,…,k;
如果在系统识别过程中,进一步约束人脸与摄像装置的相对位置不变,则人脸表面法向量与主动光源的投射方向的夹角不变。则根据公式(4)可知:所获得的人脸图像只与人脸本身的特性(表面反射率和表面法向量)有关,而与环境光照条件近似无关。如此采集的人脸图像最为稳定,能取得最佳的计算机识别效果。
工业应用性
在图6和图7中,揭示了本发明的一种应用实施例,即一种实现人脸识别门禁控制系统。
如图7所示,在门400上安装有控制器450,采用主动光源的识别系统420将获取的人脸信息通过图像信号传送到图像数据处理器430中,图像数据处理器430根据得到的图像信号进行判断,并将判断结果发送到门400上的控制器450上,通过该控制器450来控制门的打开与否。
在图6和图7中,本发明所采用主动光源的识别系统420,在摄像机上采用了8-12个850nm红外发光二极管作为主动光源421,并将其置于摄像机422的镜头前,与摄像机镜头同轴(此时当人脸平面法向量与主动光源的投射方向垂直时,夹角为零),配合中心波长为850nm的带通红外滤光镜片424,使得850nm的红外光通过,而滤除其他波长光线;或配合截止波长为800nm的长通红外滤光片,使得800nm以上波长的红外光通过,而滤除800nm以下波长的光线。通该摄像机采集人脸410的图像并传至图像数据处理器430处理。然后,利用主动光源的使用在人眼中心产生高亮点,使用简单的图像处理技术将此两高亮点检出,进而检测到人脸的位置。最后,对检测到的人脸进行校正,并提取特征,然后作特征比对及识别判决。图像数据处理器430根据识别判决的结果,控制门禁系统开门的操作。在本实施例中,图像数据处理器430为一台PC计算机。
在图8、图8a和图8b中,揭示了本发明的另一种应用实施例,即一备种利用人脸识别系统在海关进出入境证件检查方面的应用。为了提高实际应用中的识别率和稳定性,本发明首先要进行该识别系统的人脸图像采集,如图8a所示。其主要包括如下步骤:
步骤S300,启动人脸图像采集;
步骤S310,人体接近证件检查台500(在50cm左右时),伸手向窗口501提交有关证件502,当其靠近红外感应开关(小于20cm)时启动对人脸区域的主动光源照明(红外二极管的光源);
步骤S320,提供证件人利用识别系统上的定位镜子将头部移至该镜子中心.以保证脸部成像部位的中心,带有滤光片的摄像头对该主动光源照摄区域中的人脸进行拍摄;
步骤S330,摄像头将捕捉到至少一帧图像传输至图像数据处理器(或者PC机);
步骤S340,数据处理器从该帧图像中搜索人眼中心的两个高亮点;
步骤S350,判断是否检测到人眼的高亮点,如果是,则继续执行步骤S360,如果否,则执行步骤S330;
步骤S360,从该帧图像中截取人脸图像区域,其中以眼中高亮点为基准截取人脸区域;海关检查人员将通关人员的护照或身份证件的相关信息进一步通过身份信息系统进行核对,并将人员信息与该人员人脸特征信息建立相关链接,确认该人员是否可首次通过。
步骤S370,进一步提取人脸特征;
步骤S380,存入人脸特征数据库。
在图8b中,本发明进一步揭示了该识别系统的人脸图像识别与处理过程。其主要包括如下步骤:
步骤S200,启动人脸特征识别系统;
步骤S210,人体接近证件检查台500(在50cm左右时),伸手向窗口501提交有关证件502,当其靠近红外感应开关(小于20cm)时启动对人脸区域的主动光源照明(红外二极管的光源);
步骤S220,提供证件人利用该识别系统上的定位镜子将头部移至该镜子中心,以保证脸部成像部位的中心,带有滤光片的摄像头对该主动光源照摄区域中的人脸进行拍摄;
步骤S230,摄像头将捕捉到至少一帧图像传输至图像数据处理器(或者PC机);
步骤S240,数据处理器从该帧图像中搜索人眼中心的两个高亮点;
步骤S250,判断是否检测到人眼的高亮点,如果是,则继续执行步骤S260,如果否,则执行步骤S230;
步骤S260,从该帧图像中截取人脸图像区域,其中以眼中高亮点为基准截取人脸区域;
步骤S270,进一步提取人脸特征;
步骤S280,与人脸特征数据库中人脸图像数据进行特征对比;
步骤S290,获取识别结果。
在实际应用过程中,图像采集过程可与图像识别系统一并使用,区别主要在于需要判断在人脸特征数据库中是否已存在相关人的图像和相关人员信息,如果没有则进一步判断是否是首次识别,如果是则将有关图像存入数据库,如果不是则初步认定为非法进/出入者。
在图8所示的实施方案中,镜子可换成一个反馈图像LCD显示器,人们可以通过在显示屏幕调整头部位置,例如,采用数码相机作成像装置,并使用其显示屏幕。
此外,本发明还可进一步调整成像装置和主动光源的安装结构,如使用带有云台的成像装置可随主动光源的移动而调整,同时也可利用移动摄像系统跟踪人体移动,捕捉人脸图像,并启动和驱动主动光源照射到人脸。例如,由于人的身高和站的位置不同,脸部的位置也必然不同,为此成像装置和主动光源采用能够实现上下移动和左右自动移动机构,也能带来更佳的效果。
本发明在应用时,可以不使用环境光源,完全在黑暗中进行识别。
本发明识别率高、效果稳定,且系统集成度高、制造成本低,在各相关领域应用时操作使用方便,自动化程度高,且安装和维修方便。
最后应说明的是:以上实施例仅用以说明本发明而并非限制本发明所描述的技术方案;因此,尽管本说明书参照上述的各个实施例对本发明已进行了详细的说明,但是,本领域的普通技术人员应当理解,仍然可以对本发明进行修改或者等同替换;而一切不脱离本发明的精神和范围的技术方案及其改进,其均应涵盖在本发明的权利要求范围当中。

Claims (31)

1、一种利用人脸图像进行识别的方法,包括如下步骤:
步骤一,启动人脸图像识别系统;
步骤二,人体接近所述识别系统,触发主动光源对所述人体的脸部区域进行照射;
步骤三,成像装置对所述主动光源照的脸部区域进行拍摄,获取相应的图像;
步骤四,所述成像装置将捕捉到的至少一帧图像传至图像数据处理系统,所述图像数据处理系统从该帧图像中检测并定位人眼和/或人脸;
步骤五,从所述图像中截取人脸图像,并对人脸图像进行特征提取;
步骤六,与数据库中人脸图像数据进行人脸特征对比;
步骤七,获取识别结果。
2、根据权利要求1所述利用人脸图像进行识别的方法,其特征在于,所述的主动光源为主动辐射源,包括:红外光源或可见光源,或者是其任意组合。
3、根据权利要求1所述利用人脸图像进行识别的方法,其特征在于,所述的主动光源为闪光灯。
4、根据权利要求1或2所述利用人脸图像进行识别的方法,其特征在于,步骤二进一步包括环境光源对所述人体的脸部区域进行照射,所述主动光源和环境光源在人脸部分所产生的成像总能量大于环境光源在人脸部位所产生的成像能量。
5、根据权利要求4所述利用人脸图像进行识别的方法,其特征在于,所述的主动光源和环境光源在人脸部位所产生的成像总能量大于环境光源在人脸部位所产生成像能量的2倍。
6、根据权利要求2所述利用人脸图像进行识别的方法,其特征在于,在步骤四后,还包括一判断检测人眼和/或人脸是否成功的步骤,如果成功,则继续执行步骤五,否则执行步骤四。
7、根据权利要求1、2、5或6所述利用人脸图像进行识别的方法,其特征在于,在步骤四中,还包括检测并定位所述图像中人眼反光所致的高亮点,并利用所述高亮点从所述图像中检测定位人眼位置的步骤。
8、根据权利要求7所述利用人脸图像进行识别的方法,其特征在于,在步骤三中,还包括所述成像装置随所述主动光源照射区域跟踪人脸进行拍摄的步骤。
9、一种利用主动光源获取人脸图像的方法,其特征在于,包括如下步骤:
采用一主动光源对被拍摄的人脸区域进行照射;
使用一成像装置对人脸进行拍摄,获取相应的图像,并进一步将所述图像传送到相应的图像数据处理系统进行人脸图像的识别处理;
其中,所述的主动光源和环境光源在人脸部位所产生的成像总能量大于环境光源在人脸部位所产生的成像能量。
10、根据权利要求9所述的利用主动光源获取人脸图像的方法,其特征在于:所述的主动光源和环境光源在人脸部位所产生的成像总能量大于环境光源在人脸部位所产生成像能量的2倍。
11、根据权利要求9或10所述的利用主动光源获取人脸图像的方法,其特征在于:所述主动光源与所述成像装置相对位置固定,所述主动光源的投射方向与所述成像装置的摄像镜头轴线成一锐角,即0-90度之间。
12、根据权利要求9所述的利用主动光源获取人脸图像的方法,其特征在于:所述的主动光源为主动辐射源,包括:红外光源或可见光源,或其组合。
13、根据权利要求9所述利用主动光源获取人脸图像的方法,其特征在于,所述的主动光源为闪光灯。
14、根据权利要求12所述的利用主动光源获取人脸图像的方法,其特征在于:当使用主动光源采集图像之后,所述图像数据处理系统检测该主动光源在所述图像中的高亮点,并利用所述高亮点从所述图像中检测到人脸图像。
15、一种实现权利要求1或9所述方法的人脸图像识别系统,其特征在于,包括:成像装置、主动光源、控制开关和图像数据处理系统;
所述主动光源,用于对所述人体的脸部区域进行照射;
所述控制开关,用于控制主动光源对所述人体的脸部区域进行照射;
所述成像装置,用于对所述主动光源照射的人脸区域进行拍摄,获取相应的图像,将捕捉到的至少一帧图像传至图像数据处理系统;
所述图像数据处理系统,用于接收所述成像装置传输的图像,在所述图像中检测并定位人眼和/或人脸,从所述图像中截取人脸部分图像进行人脸特征提取,并与数据库中人脸图像数据进行人脸特征对比。
16、根据权利要求15所述的人脸图像识别系统,其特征在于,还进一步包括环境光源,用于对所述人体的脸部区域进行照射;其中,所述的主动光源和环境光源在人脸部位所产生的成像总能量大于环境光源在人脸部位所产生的成像能量。
17、根据权利要求16所述的人脸图像识别系统,其特征在于,所述主动光源与所述成像装置相对位置固定,所述主动光源的投射方向与所述成像装置的摄像镜头轴线成一锐角,即0-90度之间。
18、根据权利要求17所述的人脸图像识别系统,其特征在于,所述主动光源的投射方向与所述成像装置的摄像镜头轴线方向平行。
19、根据权利要求17或18所述的人脸图像识别系统,其特征在于,所述的主动光源为主动辐射源,包括:红外光源或可见光源,或者是其任意组合。
20、根据权利要求17或18所述人脸图像识别系统,其特征在于,所述的主动光源为闪光灯。
21、根据权利要求19所述的人脸图像识别系统,其特征在于,所述的红外光源的波长为740nm-4000nm,或者是在所述波长范围内不同波长红外光源的组合。
22、根据权利要求16、17、18或21所述的人脸图像识别系统,其特征在于,当使用红外光源作为主动光源时,在所述成像装置的摄像镜头前还加设一用于抑制可见光的红外滤光镜片,该红外滤光镜片的通过光线波长与所述红外光源的波长相适应。
23、根据权利要求22所述的人脸图像识别系统,其特征在于,所述红外滤光镜片为带通型或长通截止型滤光镜片,以抑制可见光而使主动照射的红外光通过。
24、根据权利要求16、17、18、21或23所述的人脸图像识别系统,其特征在于,所述成像装置的摄像镜头周围还设置有一人脸图像反馈显示装置,所述反馈显示装置用于辅助人脸在水平/垂直方向定位,所述反馈显示装置的法线与所述摄像镜头轴线同轴。
25、根据权利要求24所述的人脸图像识别系统,其特征在于,所述反馈显示装置为一面镜子,或者为一液晶显示屏幕。
26、根据权利要求15或25所述的人脸图像识别系统,其特征在于,所述成像装置为电子视频摄像头或数字照相机。
27、根据权利要求15所述的人脸图像识别系统,其特征在于,所述图像数据处理系统为安装有图像处理软件及PC计算机;或者为嵌入有图像处理软件的数据处理器。
28、根据权利要求15所述的人脸图像识别系统,其特征在于,所述控制开关为一触发主动光源照明的红外接近开关。
29、根据权利要求15、16、18、21、23、25、27或28所述的人脸图像识别系统,其特征在于,所述主动光源对称地布置在所述成像装置的周围。
30、根据权利要求19所述的人脸图像识别系统,其特征在于,所述主动光源对称地布置在所述成像装置的周围。
31、根据权利要求22所述的人脸图像识别系统,其特征在于,所述主动光源对称地布置在所述成像装置的周围。
CNB2004800362702A 2003-12-12 2004-05-14 一种获取人脸图像的方法及人脸识别方法与系统 Expired - Lifetime CN100361135C (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
CNA2003101213401A CN1627317A (zh) 2003-12-12 2003-12-12 利用主动光源获取人脸图像的方法
CN200310121340.1 2003-12-12
PCT/CN2004/000482 WO2005057472A1 (fr) 2003-12-12 2004-05-14 Procede de reconnaissance des visages et systeme d'acquisition d'images

Publications (2)

Publication Number Publication Date
CN1898678A CN1898678A (zh) 2007-01-17
CN100361135C true CN100361135C (zh) 2008-01-09

Family

ID=34661423

Family Applications (2)

Application Number Title Priority Date Filing Date
CNA2003101213401A Pending CN1627317A (zh) 2003-12-12 2003-12-12 利用主动光源获取人脸图像的方法
CNB2004800362702A Expired - Lifetime CN100361135C (zh) 2003-12-12 2004-05-14 一种获取人脸图像的方法及人脸识别方法与系统

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CNA2003101213401A Pending CN1627317A (zh) 2003-12-12 2003-12-12 利用主动光源获取人脸图像的方法

Country Status (4)

Country Link
US (1) US20080212849A1 (zh)
JP (1) JP2007516525A (zh)
CN (2) CN1627317A (zh)
WO (1) WO2005057472A1 (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104780274A (zh) * 2015-03-28 2015-07-15 深圳市金立通信设备有限公司 一种终端
CN106682607A (zh) * 2016-12-23 2017-05-17 山东师范大学 一种基于低功耗嵌入式和红外触发的离线人脸识别系统及方法
TWI661367B (zh) * 2017-01-23 2019-06-01 蓋特資訊系統股份有限公司 自定義圖案交易認證方法、系統與電腦可讀取儲存裝置
TWI776796B (zh) * 2015-12-21 2022-09-11 大陸商中國銀聯股份有限公司 金融終端安全防護系統以及金融終端安全防護方法

Families Citing this family (126)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9213443B2 (en) * 2009-02-15 2015-12-15 Neonode Inc. Optical touch screen systems using reflected light
US7760917B2 (en) 2005-05-09 2010-07-20 Like.Com Computer-implemented method for performing similarity searches
US7783135B2 (en) 2005-05-09 2010-08-24 Like.Com System and method for providing objectified image renderings using recognition information from images
US7660468B2 (en) * 2005-05-09 2010-02-09 Like.Com System and method for enabling image searching using manual enrichment, classification, and/or segmentation
US7519200B2 (en) * 2005-05-09 2009-04-14 Like.Com System and method for enabling the use of captured images through recognition
US7809192B2 (en) * 2005-05-09 2010-10-05 Like.Com System and method for recognizing objects from images and identifying relevancy amongst images and information
US7945099B2 (en) * 2005-05-09 2011-05-17 Like.Com System and method for use of images with recognition analysis
US7657126B2 (en) * 2005-05-09 2010-02-02 Like.Com System and method for search portions of objects in images and features thereof
US7657100B2 (en) 2005-05-09 2010-02-02 Like.Com System and method for enabling image recognition and searching of images
US20080177640A1 (en) 2005-05-09 2008-07-24 Salih Burak Gokturk System and method for using image analysis and search in e-commerce
US7809722B2 (en) * 2005-05-09 2010-10-05 Like.Com System and method for enabling search and retrieval from image files based on recognized information
US7542610B2 (en) * 2005-05-09 2009-06-02 Like.Com System and method for use of images with recognition analysis
US8732025B2 (en) 2005-05-09 2014-05-20 Google Inc. System and method for enabling image recognition and searching of remote content on display
US8600174B2 (en) 2005-09-28 2013-12-03 Facedouble, Inc. Method and system for attaching a metatag to a digital image
US7587070B2 (en) * 2005-09-28 2009-09-08 Facedouble, Inc. Image classification and information retrieval over wireless digital networks and the internet
US8311294B2 (en) 2009-09-08 2012-11-13 Facedouble, Inc. Image classification and information retrieval over wireless digital networks and the internet
US7599527B2 (en) * 2005-09-28 2009-10-06 Facedouble, Inc. Digital image search system and method
US9330246B2 (en) * 2005-11-09 2016-05-03 Paul J. Munyon System and method for inhibiting access to a computer
US9690979B2 (en) 2006-03-12 2017-06-27 Google Inc. Techniques for enabling or establishing the use of face recognition algorithms
US8571272B2 (en) * 2006-03-12 2013-10-29 Google Inc. Techniques for enabling or establishing the use of face recognition algorithms
US8233702B2 (en) * 2006-08-18 2012-07-31 Google Inc. Computer implemented technique for analyzing images
CN100576231C (zh) * 2007-01-15 2009-12-30 中国科学院自动化研究所 图像采集装置及应用该装置的人脸识别系统和方法
KR100778060B1 (ko) * 2007-06-01 2007-11-21 (주)텔릭스타 얼굴인식기술을 이용한 위난방지장치 및 이를 이용한위난방지장치 시스템
US8416981B2 (en) 2007-07-29 2013-04-09 Google Inc. System and method for displaying contextual supplemental content based on image content
US8270711B2 (en) * 2007-08-10 2012-09-18 Asian Institute Of Technology Method and apparatus for recognition of an object by a machine
KR101600632B1 (ko) * 2007-09-24 2016-03-09 애플 인크. 전자 장치 내의 내장형 인증 시스템들
JP4663700B2 (ja) * 2007-09-28 2011-04-06 富士フイルム株式会社 撮影装置、及び撮影方法
CN101414387B (zh) * 2007-10-19 2010-06-02 汉王科技股份有限公司 嵌入式人脸识别门禁考勤机
CN104866553A (zh) 2007-12-31 2015-08-26 应用识别公司 利用脸部签名来标识和共享数字图像的方法、系统和计算机程序
US9639740B2 (en) 2007-12-31 2017-05-02 Applied Recognition Inc. Face detection and recognition
US9721148B2 (en) 2007-12-31 2017-08-01 Applied Recognition Inc. Face detection and recognition
US8600120B2 (en) 2008-01-03 2013-12-03 Apple Inc. Personal computing device control using face detection and recognition
AU2009270946A1 (en) * 2008-07-14 2010-01-21 Google Inc. System and method for using supplemental content items for search criteria for identifying other content items of interest
WO2010013205A1 (en) * 2008-07-29 2010-02-04 Microsoft International Holdings B.V. Imaging system
CN101425179B (zh) * 2008-11-18 2012-03-28 清华大学 一种人脸图像重光照的方法及装置
KR20100094851A (ko) * 2009-02-19 2010-08-27 삼성전자주식회사 매립형 출광구조를 갖는 도광판, 이의 제조방법 및 이를 채용한 디스플레이 장치
US8319666B2 (en) 2009-02-20 2012-11-27 Appareo Systems, Llc Optical image monitoring system and method for vehicles
US8319665B2 (en) 2009-02-20 2012-11-27 Appareo Systems, Llc Adaptive instrument and operator control recognition
ES2372830B1 (es) * 2009-02-26 2012-11-30 Universidad Carlos Iii De Madrid Procedimiento para la captura y seguimiento de objetos y dispositivo para llevar a cabo dicho procedimiento.
US20110221899A1 (en) * 2009-04-21 2011-09-15 Ge Healthcare Bio-Sciences Ab Lighting apparatus and lighting control method for a closed-circuit television camera, and lighting control system interlocked with the closed-circuit television camera
KR101673032B1 (ko) * 2010-01-25 2016-11-04 엘지전자 주식회사 화상 통신 방법 및 그를 이용한 디지털 tv
TWI406190B (zh) * 2010-03-04 2013-08-21 Maishi Electronic Shanghai Ltd 存取控制系統與電腦系統
EP2759256B1 (en) 2010-03-09 2018-05-09 Shiseido Company, Ltd. Image analysis device, image analysis method, and evaluation method
WO2012001948A1 (ja) * 2010-06-30 2012-01-05 日本電気株式会社 カラー画像処理方法、カラー画像処理装置およびカラー画像処理プログラム
US8805653B2 (en) * 2010-08-11 2014-08-12 Seiko Epson Corporation Supervised nonnegative matrix factorization
US9507926B2 (en) 2010-10-26 2016-11-29 Bi2 Technologies, LLC Mobile wireless hand-held identification system and method for identification
US9753025B2 (en) 2010-10-26 2017-09-05 Bi2 Technologies, LLC Mobile wireless hand-held identification system and breathalyzer
US10068080B2 (en) 2010-10-26 2018-09-04 Bi2 Technologies, LLC Mobile wireless hand-held biometric identification system
US8719584B2 (en) * 2010-10-26 2014-05-06 Bi2 Technologies, LLC Mobile, wireless hand-held biometric capture, processing and communication system and method for biometric identification
US8254768B2 (en) 2010-12-22 2012-08-28 Michael Braithwaite System and method for illuminating and imaging the iris of a person
US8682041B2 (en) * 2011-01-28 2014-03-25 Honeywell International Inc. Rendering-based landmark localization from 3D range images
US20120259638A1 (en) * 2011-04-08 2012-10-11 Sony Computer Entertainment Inc. Apparatus and method for determining relevance of input speech
US20120281874A1 (en) * 2011-05-05 2012-11-08 Lure Yuan-Ming F Method, material, and apparatus to improve acquisition of human frontal face images using image template
US9552376B2 (en) 2011-06-09 2017-01-24 MemoryWeb, LLC Method and apparatus for managing digital files
US8548207B2 (en) 2011-08-15 2013-10-01 Daon Holdings Limited Method of host-directed illumination and system for conducting host-directed illumination
US9002322B2 (en) 2011-09-29 2015-04-07 Apple Inc. Authentication with secondary approver
US8769624B2 (en) 2011-09-29 2014-07-01 Apple Inc. Access control utilizing indirect authentication
CN102360420B (zh) * 2011-10-10 2013-04-24 星越实业(香港)有限公司 双动态探测式生物特征人脸面相识别方法及系统
US9111402B1 (en) * 2011-10-31 2015-08-18 Replicon, Inc. Systems and methods for capturing employee time for time and attendance management
US9202105B1 (en) 2012-01-13 2015-12-01 Amazon Technologies, Inc. Image analysis for user authentication
US9797801B2 (en) 2012-02-10 2017-10-24 Appareo Systems, Llc Frequency-adaptable structural health and usage monitoring system
US10607424B2 (en) 2012-02-10 2020-03-31 Appareo Systems, Llc Frequency-adaptable structural health and usage monitoring system (HUMS) and method with smart sensors
CN102629989B (zh) * 2012-04-01 2014-08-13 山东神思电子技术股份有限公司 去环境辅照摄影方法
US9137246B2 (en) 2012-04-09 2015-09-15 Brivas Llc Systems, methods and apparatus for multivariate authentication
US11209961B2 (en) 2012-05-18 2021-12-28 Apple Inc. Device, method, and graphical user interface for manipulating user interfaces based on fingerprint sensor inputs
TWI476734B (zh) * 2012-08-13 2015-03-11 Multiple access control method
CN102915434B (zh) * 2012-09-26 2016-05-25 上海交通大学 一种基于低功耗嵌入式平台的人脸识别系统
JP2014078052A (ja) * 2012-10-09 2014-05-01 Sony Corp 認証装置および方法、並びにプログラム
US9898642B2 (en) 2013-09-09 2018-02-20 Apple Inc. Device, method, and graphical user interface for manipulating user interfaces based on fingerprint sensor inputs
CN103544424A (zh) * 2013-10-29 2014-01-29 大连生容享科技有限公司 基于人脸识别的网上银行登录系统
US10043185B2 (en) 2014-05-29 2018-08-07 Apple Inc. User interface for payments
CA3186147A1 (en) 2014-08-28 2016-02-28 Kevin Alan Tussy Facial recognition authentication system including path parameters
US11256792B2 (en) 2014-08-28 2022-02-22 Facetec, Inc. Method and apparatus for creation and use of digital identification
US10698995B2 (en) 2014-08-28 2020-06-30 Facetec, Inc. Method to verify identity using a previously collected biometric image/data
US10614204B2 (en) 2014-08-28 2020-04-07 Facetec, Inc. Facial recognition authentication system including path parameters
US10803160B2 (en) 2014-08-28 2020-10-13 Facetec, Inc. Method to verify and identify blockchain with user question data
US10915618B2 (en) 2014-08-28 2021-02-09 Facetec, Inc. Method to add remotely collected biometric images / templates to a database record of personal information
CN104202579A (zh) * 2014-09-27 2014-12-10 江阴延利汽车饰件股份有限公司 一种智能警车
CN104463149B (zh) * 2014-12-31 2017-08-11 中山大学 一种基于对数差分的图片人脸轮廓特征提取方法
CN104539848A (zh) * 2014-12-31 2015-04-22 深圳泰山在线科技有限公司 一种人脸多姿态采集系统
WO2016134122A1 (en) 2015-02-18 2016-08-25 Materion Corporation Near infrared optical interference filters with improved transmission
DE102015005697B4 (de) 2015-05-04 2019-10-02 Mekra Lang Gmbh & Co. Kg Kamerasystem für ein Kraftfahrzeug
US20160350607A1 (en) * 2015-05-26 2016-12-01 Microsoft Technology Licensing, Llc Biometric authentication device
JP6290827B2 (ja) * 2015-06-05 2018-03-07 リウ チン フォンChing−Feng LIU オーディオ信号を処理する方法及び補聴器システム
US9507974B1 (en) * 2015-06-10 2016-11-29 Hand Held Products, Inc. Indicia-reading systems having an interface with a user's nervous system
US10523855B2 (en) * 2015-09-24 2019-12-31 Intel Corporation Infrared and visible light dual sensor imaging system
WO2017070920A1 (en) 2015-10-30 2017-05-04 Microsoft Technology Licensing, Llc Spoofed face detection
KR20230004905A (ko) 2015-11-10 2023-01-06 루미리즈 홀딩 비.브이. 적응형 광원
CN105590106B (zh) * 2016-01-21 2019-04-30 合肥富煌君达高科信息技术有限公司 一种新型人脸3d表情动作识别系统
US10497014B2 (en) * 2016-04-22 2019-12-03 Inreality Limited Retail store digital shelf for recommending products utilizing facial recognition in a peer to peer network
USD987653S1 (en) 2016-04-26 2023-05-30 Facetec, Inc. Display screen or portion thereof with graphical user interface
DK179186B1 (en) 2016-05-19 2018-01-15 Apple Inc REMOTE AUTHORIZATION TO CONTINUE WITH AN ACTION
CN105991987A (zh) * 2016-06-07 2016-10-05 深圳市金立通信设备有限公司 一种图像处理方法、设备及系统
CN105933618A (zh) * 2016-06-07 2016-09-07 深圳市金立通信设备有限公司 一种拍照方法、设备及系统
CN105933586A (zh) * 2016-06-07 2016-09-07 深圳市金立通信设备有限公司 一种拍照方法、设备及系统
CN106412416A (zh) * 2016-06-16 2017-02-15 深圳市金立通信设备有限公司 一种图像处理方法、设备及系统
CN105933619A (zh) * 2016-06-16 2016-09-07 深圳市金立通信设备有限公司 一种拍照方法、设备及系统
CN106210471A (zh) * 2016-07-19 2016-12-07 成都百威讯科技有限责任公司 一种室外面部识别方法和系统
CN106257493B (zh) * 2016-08-30 2024-03-19 重庆市城投金卡信息产业(集团)股份有限公司 交通优惠卡冒用识别方法及识别系统
DK179471B1 (en) 2016-09-23 2018-11-26 Apple Inc. IMAGE DATA FOR ENHANCED USER INTERACTIONS
CN106446860A (zh) * 2016-10-10 2017-02-22 上海成业智能科技股份有限公司 在光扰条件下清晰采集人脸识别图像的方法
CN107507395A (zh) * 2016-11-24 2017-12-22 四川大学 一种疲劳驾驶检测系统及方法
TWI639760B (zh) * 2017-01-26 2018-11-01 一德金屬工業股份有限公司 Access control system
CN107220623A (zh) * 2017-05-27 2017-09-29 湖南德康慧眼控制技术股份有限公司 一种人脸识别方法及系统
CN108874657A (zh) * 2017-07-18 2018-11-23 北京旷视科技有限公司 对人脸识别主机进行测试的方法、装置及计算机存储介质
CN109325327B (zh) * 2017-08-01 2021-08-03 苹果公司 用于更新在面部识别中所使用的模板的过程
KR102185854B1 (ko) 2017-09-09 2020-12-02 애플 인크. 생체측정 인증의 구현
KR102389678B1 (ko) 2017-09-09 2022-04-21 애플 인크. 생체측정 인증의 구현
CN108595928A (zh) * 2018-04-12 2018-09-28 Oppo广东移动通信有限公司 人脸识别的信息处理方法、装置及终端设备
EP3633546A4 (en) 2018-04-12 2020-10-21 Guangdong Oppo Mobile Telecommunications Corp., Ltd. IMAGE PROCESSING METHOD AND DEVICE, ELECTRONIC DEVICE AND COMPUTER READABLE STORAGE MEDIUM
US11170085B2 (en) 2018-06-03 2021-11-09 Apple Inc. Implementation of biometric authentication
CN108960841A (zh) 2018-07-16 2018-12-07 阿里巴巴集团控股有限公司 支付方法、装置及系统
CN110826368B (zh) * 2018-08-10 2023-09-12 北京魔门塔科技有限公司 一种用于数据分析的人脸图像采集方法
US20200082160A1 (en) * 2018-09-12 2020-03-12 Kneron (Taiwan) Co., Ltd. Face recognition module with artificial intelligence models
US11100349B2 (en) 2018-09-28 2021-08-24 Apple Inc. Audio assisted enrollment
US10860096B2 (en) 2018-09-28 2020-12-08 Apple Inc. Device control using gaze information
CN109784231B (zh) * 2018-12-28 2023-07-25 广东中安金狮科创有限公司 安防信息管理方法、装置及存储介质
US10936178B2 (en) 2019-01-07 2021-03-02 MemoryWeb, LLC Systems and methods for analyzing and organizing digital photos and videos
CN109754602A (zh) * 2019-01-15 2019-05-14 珠海格力电器股份有限公司 行人闯红灯防误判的方法和装置
US11003957B2 (en) 2019-08-21 2021-05-11 Advanced New Technologies Co., Ltd. Method and apparatus for certificate identification
US10974537B2 (en) 2019-08-27 2021-04-13 Advanced New Technologies Co., Ltd. Method and apparatus for certificate identification
CN113132613A (zh) * 2019-12-31 2021-07-16 中移物联网有限公司 一种摄像头补光装置、电子设备和补光方法
CN111079720B (zh) * 2020-01-20 2022-04-22 杭州英歌智达科技有限公司 一种基于聚类分析自主再学习的人脸识别方法
WO2022095083A1 (zh) * 2020-11-05 2022-05-12 苏州肯谱瑞力信息科技有限公司 一种可快速识别的人脸识别装置
US11823476B2 (en) 2021-05-25 2023-11-21 Bank Of America Corporation Contextual analysis for digital image processing
CN117523644B (zh) * 2024-01-04 2024-03-12 深圳星和动力科技有限公司 一种公共交通身份认证方法及系统

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1254145A (zh) * 1999-11-12 2000-05-24 成都银晨网讯科技有限公司 面像识别门禁和考勤系统
US20010019620A1 (en) * 2000-03-02 2001-09-06 Honda Giken Kogyo Kabushiki Kaisha Face recognition apparatus
US20010031073A1 (en) * 2000-03-31 2001-10-18 Johji Tajima Face recognition method, recording medium thereof and face recognition device
CN1341401A (zh) * 2001-10-19 2002-03-27 清华大学 基于部件主分量分析的多模式人脸识别方法

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6850252B1 (en) * 1999-10-05 2005-02-01 Steven M. Hoffberg Intelligent electronic appliance system and method
US6419638B1 (en) * 1993-07-20 2002-07-16 Sam H. Hay Optical recognition methods for locating eyes
EP1073224A3 (en) * 1999-05-07 2002-08-14 Sony International (Europe) GmbH Strategy for switching to Alternative Frequencies (AF) for Digital Radio Mondiale (DRM)
FI115856B (fi) * 2000-02-10 2005-07-29 Metso Automation Oy Menetelmä ja laite päällysteen mittaamiseksi
EP1136937B1 (en) * 2000-03-22 2006-05-10 Kabushiki Kaisha Toshiba Facial image forming recognition apparatus and a pass control apparatus
US20030058111A1 (en) * 2001-09-27 2003-03-27 Koninklijke Philips Electronics N.V. Computer vision based elderly care monitoring system
US7136513B2 (en) * 2001-11-08 2006-11-14 Pelco Security identification system
JP4036051B2 (ja) * 2002-07-30 2008-01-23 オムロン株式会社 顔照合装置および顔照合方法
CA2545202C (en) * 2003-11-14 2014-01-14 Queen's University At Kingston Method and apparatus for calibration-free eye tracking

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1254145A (zh) * 1999-11-12 2000-05-24 成都银晨网讯科技有限公司 面像识别门禁和考勤系统
US20010019620A1 (en) * 2000-03-02 2001-09-06 Honda Giken Kogyo Kabushiki Kaisha Face recognition apparatus
US20010031073A1 (en) * 2000-03-31 2001-10-18 Johji Tajima Face recognition method, recording medium thereof and face recognition device
CN1341401A (zh) * 2001-10-19 2002-03-27 清华大学 基于部件主分量分析的多模式人脸识别方法

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104780274A (zh) * 2015-03-28 2015-07-15 深圳市金立通信设备有限公司 一种终端
TWI776796B (zh) * 2015-12-21 2022-09-11 大陸商中國銀聯股份有限公司 金融終端安全防護系統以及金融終端安全防護方法
CN106682607A (zh) * 2016-12-23 2017-05-17 山东师范大学 一种基于低功耗嵌入式和红外触发的离线人脸识别系统及方法
TWI661367B (zh) * 2017-01-23 2019-06-01 蓋特資訊系統股份有限公司 自定義圖案交易認證方法、系統與電腦可讀取儲存裝置

Also Published As

Publication number Publication date
CN1898678A (zh) 2007-01-17
JP2007516525A (ja) 2007-06-21
US20080212849A1 (en) 2008-09-04
WO2005057472A1 (fr) 2005-06-23
CN1627317A (zh) 2005-06-15

Similar Documents

Publication Publication Date Title
CN100361135C (zh) 一种获取人脸图像的方法及人脸识别方法与系统
CN2828935Y (zh) 一种用于人脸识别的图像获取识别装置
CN109377616B (zh) 一种基于二维人脸识别的门禁控制系统
CN101499129B (zh) 远距离虹膜识别系统及方法
EP1335329B1 (en) Personal authentication method, personal authentication apparatus and image capturing device
CN102622588B (zh) 双验证人脸防伪方法及装置
US9256794B2 (en) Systems and methods for face authentication or recognition using spectrally and/or temporally filtered flash illumination
KR101968101B1 (ko) 딥러닝을 이용한 객체 인식 카메라 모듈 및 이를 포함한 객체 인식 시스템
US8265347B2 (en) Method and system for personal identification using 3D palmprint imaging
Buciu et al. Biometrics systems and technologies: A survey
CN201845343U (zh) 一种用于人脸识别的图像获取装置
KR102317180B1 (ko) 3차원 깊이정보 및 적외선정보에 기반하여 생체여부의 확인을 행하는 얼굴인식 장치 및 방법
CN104881632A (zh) 高光谱人脸识别方法
TW201327413A (zh) 臉部認證或辨識系統及方法
WO2012083860A1 (zh) 一种人脸识别装置和方法
JP2004030564A (ja) 個人認証方法、個人認証装置および撮影装置
US20170024603A1 (en) Biometric image optimization using light fields
WO2017173639A1 (zh) 一种基于多模式生物识别信息的个人识别装置和方法
JP3991042B2 (ja) 個人認証方法および個人認証装置
KR102089618B1 (ko) 생체정보를 이용한 대중교통 무임승차 작동 방법 및 그의 처리 시스템
CN111932758A (zh) 一种基于人脸识别技术的智能门禁系统
Li et al. AuthenMetric F1: A highly accurate and fast face recognition system
CN111985925A (zh) 基于虹膜识别和人脸识别的多模态生物识别支付的方法
KR100880466B1 (ko) 홍채 인식 시스템의 적목 현상을 이용한 동공 검출방법
KR101718244B1 (ko) 얼굴 인식을 위한 광각 영상 처리 장치 및 방법

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
ASS Succession or assignment of patent right

Owner name: OLSEN BEIJING DIGITAL TECHNOLOGY CO.

Free format text: FORMER OWNER: DIGITAL AOSEN IDENTIFICATION SCIENCE AND TECHNOLOGY CO., LTD., BEIJING

Effective date: 20070518

C41 Transfer of patent application or patent right or utility model
TA01 Transfer of patent application right

Effective date of registration: 20070518

Address after: Beijing, Haidian District, Zhongguancun, south two, No. 312, building 6, 1 door, room 512

Applicant after: AUTHENMETRIC Co.,Ltd.

Address before: Beijing, Haidian District, China Zhongguancun Academy of Sciences South Road, Cheung Xiang, 5-308

Applicant before: AUTHENMETRIC Co.,Ltd.

C14 Grant of patent or utility model
GR01 Patent grant
C56 Change in the name or address of the patentee

Owner name: BEIJING AUTHENMETRIC TECHNOLOGY CO., LTD.

Free format text: FORMER NAME: BEIJING AUTHENMETRIC TECHNOLOGY CO., LTD.

CP03 Change of name, title or address

Address after: 100190, room 95, automation building, No. 1210 Zhongguancun East Road, Beijing, Haidian District

Patentee after: Beijing Zhongke Aosen Technology Co.,Ltd.

Address before: Beijing Haidian District Zhongguancun south two 1#312 building 6 door 512 room

Patentee before: AUTHENMETRIC Co.,Ltd.

CX01 Expiry of patent term
CX01 Expiry of patent term

Granted publication date: 20080109