CN100456322C - 被摄体认证装置、方法以及携带电话 - Google Patents

被摄体认证装置、方法以及携带电话 Download PDF

Info

Publication number
CN100456322C
CN100456322C CNB200610054795XA CN200610054795A CN100456322C CN 100456322 C CN100456322 C CN 100456322C CN B200610054795X A CNB200610054795X A CN B200610054795XA CN 200610054795 A CN200610054795 A CN 200610054795A CN 100456322 C CN100456322 C CN 100456322C
Authority
CN
China
Prior art keywords
subject
reflection image
change
eyes
photographs
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CNB200610054795XA
Other languages
English (en)
Other versions
CN1834985A (zh
Inventor
垣内崇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Omron Corp
Original Assignee
Omron Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Omron Corp filed Critical Omron Corp
Publication of CN1834985A publication Critical patent/CN1834985A/zh
Application granted granted Critical
Publication of CN100456322C publication Critical patent/CN100456322C/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161Detection; Localisation; Normalisation
    • G06V40/166Detection; Localisation; Normalisation using acquisition arrangements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/10Image acquisition
    • G06V10/12Details of acquisition arrangements; Constructional details thereof
    • G06V10/14Optical characteristics of the device performing the acquisition or on the illumination arrangements
    • G06V10/145Illumination specially adapted for pattern recognition, e.g. using gratings
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18Eye characteristics, e.g. of the iris
    • G06V40/19Sensors therefor
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/40Spoof detection, e.g. liveness detection
    • G06V40/45Detection of the body part being alive
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04BTRANSMISSION
    • H04B1/00Details of transmission systems, not covered by a single one of groups H04B3/00 - H04B13/00; Details of transmission systems not characterised by the medium used for transmission
    • H04B1/38Transceivers, i.e. devices in which transmitter and receiver form a structural unit and in which at least one part is used for functions of transmitting and receiving
    • H04B1/40Circuits

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Artificial Intelligence (AREA)
  • Ophthalmology & Optometry (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Data Mining & Analysis (AREA)
  • Evolutionary Biology (AREA)
  • Evolutionary Computation (AREA)
  • General Engineering & Computer Science (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Signal Processing (AREA)
  • Collating Specific Patterns (AREA)
  • Telephone Function (AREA)
  • Image Processing (AREA)
  • Image Input (AREA)
  • Studio Devices (AREA)
  • Image Analysis (AREA)

Abstract

本发明提供一种被摄体认证方法、被摄体认证装置、携带电话和被摄体认证程序,可以不成为本人进行认证时的障碍,排除利用了照片的假冒。本发明的被摄体认证装置具有:对于具有拍摄被摄体的摄影部件,根据用该摄影部件拍摄的脸的要素认证被摄体的被摄体认证装置,在用前述摄影部件拍摄的摄影图像中,根据在被摄体的眼睛中反映的反映图像来判断是否伪装的伪装判断部件。

Description

被摄体认证装置、方法以及携带电话
技术领域
本发明涉及例如拍摄人的脸和虹膜等被摄体并认证该被摄体的被摄体认证装置、携带电话、被摄体认证单元、被摄体认证方法以及被摄体认证程序。
背景技术
以往,作为进行本人认证的系统,提出了拍摄并认证脸的脸认证系统,拍摄并认证虹膜的虹膜认证系统等各种认证系统。
这些认证系统拍摄并认证称为脸或者眼睛的被摄体,但需要排除照片等造成的假冒(伪装)。
作为排除该照片造成的假冒的方法,提出多次拍摄被摄体,如果各摄影图像的背景不连续,则判断为不是本人的本人认证装置(参照专利文献1)。
但是,如果通过背景连续来排除照片造成的假冒,则例如在考虑了在携带电话机和PDA等携带信息终端中安装的情况下,要在电车、汽车或者步行等的移动中进行认证时,摄影图像中的背景变化,存在不能认证为本人的问题。
而且,如果准备在相同背景下拍摄的照片,则存在可以假冒的问题。
〔专利文献1〕特开2004-362079号公报
发明内容
本发明针对上述的问题,目的是提供被摄体认证装置、携带电话、被摄体认证单元、被摄体认证方法以及被摄体认证程序,本人不成为进行认证时的障碍,并可排除利用了照片的假冒。
本发明提供一种被摄体认证装置,具有拍摄被摄体的摄影部件,根据用该摄影部件拍摄的被摄体的脸的要素认证被摄体,该被摄体认证装置具有:反映图像变更部件,变更在被摄体的眼睛中反映的反映图像的至少一部分的颜色,所述被摄体认证装置被构成为:通过所述摄影部件取得由该反映图像变更部件变更被反映在被摄体的眼睛中的反映图像之前的摄影图像、和变更之后的摄影图像,该被摄体认证装置还具有伪装判断部件,该伪装判断部件从反映图像变更前后的摄影图像求各个眼珠部分的平均颜色,根据反映图像变更前的眼珠部分的平均颜色和反映图像变更后的眼珠部分的平均颜色的差分来判断是否为伪装。
基于前述脸的要素的被摄体的认证可以由基于被摄体的虹膜的认证、以及基于被摄体的脸的认证等构成。
前述被摄体的眼睛中反映的反映图像由眼睛的瞳孔部分、虹膜部分、黑眼珠(瞳孔和虹膜)部分、或者白眼珠部分、或者眼睛整体中的任意一个中反映的反映图像构成。
通过前述结构,可以容易地排除利用了平面的照片的假冒。特别是由于不将背景作为认证条件,所以即使在移动中也可以进行合适的认证。
另外,本发明的一种被摄体认证装置,具有拍摄被摄体的摄影部件,根据用该摄影部件拍摄的被摄体的脸的要素认证被摄体,该被摄体认证装置具有:反映图像变更部件,变更在被摄体的眼睛中反映的反映图像的至少一部分的亮度,所述被摄体认证装置被构成为:通过所述摄影部件取得由该反映图像变更部件变更被反映在被摄体的眼睛中的反映图像之前的摄影图像、和变更之后的摄影图像,该被摄体认证装置还具有伪装判断部件,该伪装判断部件从反映图像变更前后的摄影图像求各个眼珠部分的平均亮度,根据反映图像变更前的眼珠部分的平均亮度和反映图像变更后的眼珠部分的平均亮度的差分来判断是否为伪装。
另外,本发明的一种被摄体认证装置,具有拍摄被摄体的摄影部件,根据用该摄影部件拍摄的被摄体的脸的要素认证被摄体,该被摄体认证装置具有:反映图像变更部件,变更在被摄体的眼睛中反映的反映图像的至少一部分的形状,所述被摄体认证装置被构成为:通过所述摄影部件取得由该反映图像变更部件变更被反映在被摄体的眼睛中的反映图像之前的摄影图像、和变更之后的摄影图像,该被摄体认证装置还具有伪装判断部件,该伪装判断部件从反映图像变更前后的摄影图像求反映在被摄体的眼睛中的反映图像,根据反映图像变更前的反映图像的形状和反映图像变更后的反映图像的形状的比较来判断是否为伪装。
另外,本发明的一种被摄体认证装置,具有拍摄被摄体的摄影部件,根据用该摄影部件拍摄的被摄体的脸的要素认证被摄体,该被摄体认证装置具有:反映图像变更部件,变更在被摄体的眼睛中反映的反映图像的至少一部分的大小,所述被摄体认证装置被构成为:通过所述摄影部件取得由该反映图像变更部件变更被反映在被摄体的眼睛中的反映图像之前的摄影图像、和变更之后的摄影图像,该被摄体认证装置还具有伪装判断部件,该伪装判断部件从反映图像变更前后的摄影图像求反映在被摄体的眼睛中的反映图像,根据反映图像变更前的反映图像的大小和反映图像变更后的反映图像的大小的比较来判断是否为伪装。
由此,可以更确实地排除利用平面的照片的假冒。
而且,作为本发明的方式,可以使所述反映图像变更部件由进行图像显示的显示部件以及进行照明的照明部件构成。
由此,可以使反映在眼睛中的反映图像鲜明,可以更确实地排除利用平面的照片的假冒。
而且,本发明可以是具有前述被摄体认证装置的携带电话机。
由此,可以用携带电话机进行被摄体认证,可以在这时排除利用了平面的照片的假冒。
而且,本发明可以是一种被摄体认证方法,根据摄影部件拍摄的被摄体的脸的要素来认证被摄体,通过所述摄影部件取得在变更被反映在被摄体的眼睛中的反映图像之前的摄影图像,并且变更在被摄体的眼睛中反映的反映图像的至少一部分的颜色,通过所述摄影部件取得变更之后的摄影图像,从反映图像变更前后的摄影图像求各个眼珠部分的平均颜色,根据反映图像变更前的眼珠部分的平均颜色和反映图像变更后的眼珠部分的平均颜色的差分来判断是否为伪装。
而且,本发明可以是一种被摄体认证方法,根据摄影部件拍摄的被摄体的脸的要素来认证被摄体,通过所述摄影部件取得在变更被反映在被摄体的眼睛中的反映图像之前的摄影图像,并且变更在被摄体的眼睛中反映的反映图像的至少一部分的平均亮度,通过所述摄影部件取得变更之后的摄影图像,从反映图像变更前后的摄影图像求各个眼珠部分的平均亮度,根据反映图像变更前的眼珠部分的平均亮度和反映图像变更后的眼珠部分的平均亮度的差分来判断是否为伪装。
本发明可以是一种被摄体认证方法,根据摄影部件拍摄的被摄体的脸的要素来认证被摄体,通过所述摄影部件取得在变更被反映在被摄体的眼睛中的反映图像之前的摄影图像,并且变更在被摄体的眼睛中反映的反映图像的至少一部分的形状,通过所述摄影部件取得变更之后的摄影图像,从反映图像变更前后的摄影图像求各个反映在被摄体的眼睛中的反映图像,根据反映图像变更前的反映图像的形状和反映图像变更后的反映图像的形状的比较来判断是否为伪装。
本发明可以是一种被摄体认证方法,根据摄影部件拍摄的被摄体的脸的要素来认证被摄体,通过所述摄影部件取得在变更被反映在被摄体的眼睛中的反映图像之前的摄影图像,并且变更在被摄体的眼睛中反映的反映图像的至少一部分的大小,通过所述摄影部件取得变更之后的摄影图像,从反映图像变更前后的摄影图像求各个反映在被摄体的眼睛中的反映图像,根据反映图像变更前的反映图像的大小和反映图像变更后的反映图像的大小的比较来判断是否为伪装。
由此,可以排除利用了平面的照片的假冒。
而且,本发明可以是一种被摄体认证程序,取得被摄体的摄影图像,并且根据该摄影图像的被摄体的眼睛中反映的反映图像来判断是否为伪装。
由此,可以作成在携带电话机或PDA终端或个人计算机等合适的设备中安装被摄体认证单元的、或者在合适的设备中安装被摄体认证程序的排除了照片造成的假冒的被摄体认证装置。
通过本发明,可以提供被摄体认证装置、携带电话、被摄体认证单元、被摄体认证方法以及被摄体认证程序,本人不成为进行认证时的障碍,并可排除利用了照片的假冒。
附图说明
图1是被摄体认证装置的立体图。
图2是被摄体认证装置的方框图。
图3是表示被摄体认证装置的控制部执行的动作的流程图。
图4是摄影图像说明图。
图5表示第二实施例的被摄体认证装置的结构的方框图。
1被摄体认证装置 12照相机 14液晶监视器 41摄影图像
53眼珠部分 61反映图像 70被摄体认证单元
具体实施方式
以下与附图一起说明本发明的一个实施方式。
〔实施例1〕
首先,与图1所述的被摄体认证装置1的立体图一起对被摄体认证装置1的结构进行说明。
被摄体认证装置1由作为一种携带信息终端的携带电话机构成,在正面从上开始依次为声音输出用扬声器11、进行图像显示的液晶监视器14、操作输入用的多个操作按钮16、以及声音输入用的麦克风18。
在前述扬声器11的横向右侧上下接近设置拍摄用的照相机12和照明装置13。该拍摄用的照相机12和照明装置13和前述液晶监视器14被设置在被摄体认证装置1的同一面上(在本实施方式中为表面),照相机12的摄影方向和照明装置13的照明方向以及液晶监视器14的显示方向被设置为同一方向。前述照明装置13由闪光的闪光照明装置或者点灯的点灯照明装置(例如LED和荧光灯)等适当的照明装置构成。
而且,在被摄体认证装置1的右侧面设置照相机12的快门按钮15。然后,在被摄体认证装置1的正面下部中心固定前后转动的开关盖19,该开关盖19构成为在关闭的状态下覆盖并保护多个操作按钮16。
而且,在被摄体认证装置1的背面上部,具有无线通信用的天线10。然后,在被摄体认证装置1的内部设置由CPU和存储部(ROM和RAM等)构成的控制装置和充电电池。
通过以上的结构,被摄体认证装置1可以操作操作按钮16而进行架电(发送),以及通过操作按钮16的操作结束来信,可以允许与远处的电话机进行声音通话。而且,通过操作操作按钮16,可以通过操作操作按钮16进行因特网连接的内容显示和电子邮件的发送接收。然后,可以通过按压快门按钮15来执行照相机12的静止画面和活动画面的拍摄,可以将摄影图像显示在液晶监视器14上。
由于照相机12和液晶监视器14被安装在同一面上,所以在拍摄时液晶监视器14必然反映在利用者的眼中,可以用液晶监视器14显示反映在眼睛里的反映图像。
接着,与图2所示的被摄体认证装置1的方框图一起,对被摄体认证装置1的结构进行说明。而且,在该说明中,对与个人认证所需要的摄影功能和认证功能有关的要素进行说明,并对其它的要素省略说明。
被摄体认证装置1由图像输入部21、被摄体判断部22、脸识别部23、注册数据(辞典数据)24、显示部25、控制部26和认证结果输出部27构成。
前述图像输入部21由前述的照相机12(图1)构成,按照控制部26的控制,将前述照相机12拍摄被摄体得到的摄影图像数据发送到被摄体判断部22和脸识别部23。
前述被摄体判断部22被设置在被摄体认证装置1内部的控制装置内,按照控制部26的控制,进行摄影图像数据中映入的被摄体是否为立体的判断,将判断结果输出到脸识别部23。
前述脸识别部23被设置在被摄体认证装置1内部的控制装置内,按照控制部26的控制,比较从图像输入部21得到的摄影图像数据和从存储部读出的注册数据24,进行生物认证之一的脸对照。然后,根据该脸对照的对照结果和是否为从前述被摄体判断部22取得的立体的判断,进行个人认证,将该个人认证的认证结果发送到认证结果输出部27。
前述注册数据24是被存储在存储部中的数据,是被预先注册的利用者的摄影图像数据。该摄影图像数据是脸图像或者虹膜(虹彩)图像等包含人物的眼睛的图像,也可以通过可进行个人认证的图像构成,在本实施方式中,利用对利用者没有心理的抵触的脸图像。而且,注册数据24不限于图像数据,也可以由从该图像数据中提取了特征点和特征量的特征数据构成。
前述显示部25由前述液晶监视器14(图1)构成,按照控制部26的控制,显示字符和图形、颜色、模样等各种图像。而且,在拍摄时,显示反映在利用者的眼睛里的反映图像。该反映图像在本实施方式中由全白色和全蓝色两种构成,但不限于此,也可以还利用其它颜色以多种类构成,或者用圆和三角、四角和星形的图形构成,或者设定为字符等,以适当的图像构成。即,准备不同形状的图像,变更显示的图像的形状。而且,除了上述的颜色、形状,也可以准备使大小不同的图像。
前述控制部26被设置在被摄体认证装置1的内部的控制装置内,按照存储部中存储的数据和程序,对各部件发送控制信号而进行动作控制。在存储部中存储的程序中,还包含通过拍摄认证被摄体的被摄体认证程序。
前述认证结果输出部27由前述的液晶监视器14构成,按照控制部26的控制,输出从前述脸识别部23取得的认证结果。而且,认证结果输出部27不限于液晶监视器14,例如也可以由进行因特网通信时发送认证结果的通信部、控制认证后的携带电话机可否操作的控制部26等其它部件构成。这时,通过由认证结果信息的输出控制携带电话机的动作,并不将认证结果显示在液晶监视器14上,可以不使利用者意识到认证动作。
通过上述结构,可以用液晶监视器14显示反映在利用者的眼睛中的反映图像,并在该状态下通过照相机12拍摄,根据拍摄的摄影图像进行个人认证,从而输出认证结果(在液晶监视器14中显示)。
接着,与表示图3所示的控制部26执行的动作的流程图一起,对控制部26按照被摄体认证程序执行的动作进行说明。
控制部26使液晶监视器14显示白基调的图像,通过照相机12拍摄而取得利用者的摄影图像数据(步骤n1)。这时,如图4的摄影图像说明图所示,在拍摄的摄影图像41中,照入脸图像42,在眼睛部分51中照入白眼球部分52、眼珠部分53、虹膜部分54、瞳孔部分55。然后,在眼珠部分53中,照入被摄体认证装置1(图1)反映的(照入的)被摄体认证装置的反映图像62和液晶监视器14(图1)反映的液晶监视器的反映图像61。
这时,由于使液晶监视器14显示白基调的图像,所以反映图像61变为白基调。
接着,控制部26作为与前述步骤n1不同的反映图像,使液晶监视器14显示蓝基调的图像,通过照相机12拍摄而取得利用者的摄影图像数据(步骤n2)。
这时,由于使液晶监视器14显示蓝基调的图像,所以反映图像61成为与前述步骤n1不同的颜色的基调,即成为蓝基调。
在该步骤n2中,如果进行在步骤n1中由照明装置13进行的照明,则进行相同的照明而拍摄,如果不进行在步骤n1中由照明装置13进行的照明,则不进行照明而拍摄。而且,将从步骤n1中的拍摄开始到步骤n2中的拍摄为止的时间间隔设为预定的时间间隔。该时间间隔设定为不能在照相机12之前替换照片的程度(或者难以替换的程度)的短时间间隔,并且最好设为在短时间内连续进行多次拍摄的设定。
控制部26将取得的多个摄影图像数据,即在本实施方式中为两个摄影图像数据送到被摄体判断部22,被摄体判断部22提取各个脸图像数据、眼珠部分(在本实施方式中眼珠部分指黑眼珠部分),并求该眼珠部分的平均颜色(步骤n3)。该眼珠部分的平均颜色可以对左右两眼来求出,也可以仅对右眼或者左眼的其中一个来求出。而且,平均颜色最好在RGB三原色中求各个分量的浓度平均,但也可以只是R(红)分量、只是G(绿)分量、只是B(蓝)分量等,仅求一个分量的浓度平均,或者是求与颜色分量无关的亮度平均的结构。特别在本实施方式中,由于仅使用白色和蓝色,所以只要求R分量或者G分量的颜色平均,就可以检测变化。
被摄体判断部22求从各摄影图像数据取得的眼珠部分的平均颜色的差分(步骤n4)。这时,求左右哪一个眼睛的差分都可以,但最好如右眼之间,或者左眼之间那样,求同一眼珠部分之间的差分。
被摄体判断部22在判断出求出的差分大于等于预定的阈值(由反映图像的变化设想的阈值),即存在一定以上的图像变化(即颜色变化或者亮度变化)的情况下,判断为真的利用者(步骤n5:是),将判断结果发送到控制部26。
控制部26通过脸识别部23执行脸对照(步骤n6)。
在该脸对照中,在多个摄影图像数据中,将照明环境好的摄影图像数据与注册数据24比较来进行脸对照。而且,也可以预先确定用哪个摄影图像数据进行脸对照。
在摄影图像数据与注册数据24的比较中,从摄影图像数据求本人固有的特征量,与注册数据24的特征量进行比较,如果特征量的差在预定的一定阈值以内,则判断为同一人物。
前述本人固有的特征量,例如可以是对从摄影图像数据取得的特征点利用伽柏(Gabor)子波变换求出的特征量。该特征点可以从脸的粗糙的位置切出脸部分,并将脸的大小标准化,进而嵌入详细的图形,通过详细的检测取得脸的特征点的位置。而且,所谓伽柏子波变换,是在信号解析和图像压缩中使用的方法,指利用子波波形,从变换对象仅取出具有该波形的特征(频率分量等)。
如果从脸识别部23取得的脸对照的结果合适(步骤n7:是),则控制部26作为个人认证结果,输出合适(认证OK)的信息(步骤n8),结束处理。
在前述步骤n5中,在没有一定以上的图像变化的情况下,判断为被伪装(步骤n5:否),控制部26仅待机与执行前述步骤n6~n7相同程度的待机时间(步骤n9)。该待机时间是用于在进行了照片等的伪装的情况下,通过处理时间,不使非法利用者看破是由于伪装解除而不适合,或者是由于脸对照不能很好地进行而不适合的时间。
控制部26在该步骤n9以后,或者在前述步骤n7中脸对照的结果不合适的情况下(步骤n7:否),作为认证结果输出不合适(认证NG)的信息(步骤n10),结束处理。
根据表示这些合适/不合适的认证结果信息,控制部26进行可否进行对液晶监视器14的结果显示,以及可否进行快门按钮15和操作按钮16中的操作等的功能控制。
通过以上的动作,可以进行根据在被摄体的眼睛中反映的反映图像61进行的被摄体的真伪判断,可以排除照片等造成的假冒。
特别是,由于在多次的拍摄中使液晶监视器14中显示的图像变化,所以可以确实地排除照片等造成的假冒。即,在通过照片等实现了假冒的情况下,即使比较使液晶监视器14中显示的图像变化的多个摄影图像数据,在眼珠部分也不表现图像变化,所以可以通过步骤n5的判断进行排除。
即,映入眼珠部分的反映图像,反映拍摄被摄体时看到的风景,在使液晶监视器14中显示的图像变化而再次拍摄时,由于与前次拍摄相同的风景不映入,所以可以排除照片等造成的伪装。
如上所述,虽然在本发明中可以检测利用了照片等的伪装,但也考虑知道了该构造的人,采取准备多张考虑了预先反映图像的图像变化的照片,在拍摄期间替换照片的进一步的伪装对策。
但是,由于在短时间内连续执行多次的拍摄,因此,可以排除在每次拍摄时在照相机12前面替换照片的假冒。
除此之外,由于在步骤n9中进行规定时间的待机,所以可以使眼睛读取的非法利用者不能推断假冒是由于照片而不合适,还是由于照片的精度差而不合适。
进而,在本实施方式中最需要处理时间、算法最复杂的脸对照在被摄体判断处理中被判断为伪装的情况下仅进行一次,所以可以高速地结束认证处理。而且,通过在步骤n5中判断为不是伪装(步骤n5:是)的情况下不执行脸对照,或者即使判断为伪装的情况下,脸对照也仅设为一次,可以将携带电话机的电池(充电电池)的电力消耗抑制到最小限度。
而且,由于进行与摄影图像的背景无关的认证,所以即使在移动中也可以将本人正确地认证为本人。
而且,虽然也可以预先设定在进行各拍摄时在液晶监视器14中显示的图像,但希望为每次认证时以随机方式变更的结构。例如,在上述的实施例中,以白色和蓝色进行了说明,但是也可以在每次认证时随机地使用除此之外的颜色,或者切换颜色的顺序。由此,可以更确实地排除假冒。
而且,在上述的实施例中,根据两次(多次)拍摄中反映图像的变化进行了判断,但是也可以如下那样处理。即,也可以拍摄一次,在取得的摄影图像中,判断被摄体的眼睛里是否正确存在反映图像61,并在正确存在时执行“步骤n5:是”以后的处理,如果没有正确存在,则执行“步骤n5:否”以后的处理。
这时,可以使拍摄次数减少,可以更高速地进行适当的认证。具体来说,如果伪装用的照片不考虑反映图像61,则即使仅这样进行一次拍摄,也可以判断伪装。而且,如果在每次认证时以随机方式变更在拍摄时显示在液晶监视器14上的图像,则即使对于考虑了反映图像61的伪装照片,也可以用一次拍摄排除假冒。
而且,可以作为以下结构,即作为认证模式,以利用者完成认证用的操作的定时执行拍摄而使利用者意识,而且,也可以作为在装置(携带电话机等)侧以适当的定时执行拍摄的结构而不使利用者意识。而且,也可以是在利用者开始了某一个功能操作的时刻,不使利用者有意识地进行拍摄的结构。
而且,反映图像61以液晶监视器14的显示来进行,但是也可以是以照明装置13来构成。这时,通过使照明的有无发生变化、使照明色发生变化,或者具有多个照明装置13而使照明的位置、颜色或者它们的组合变化,可以使反映图像61变化,可以排除假冒。
而且,在步骤n3~n4中,可以为以通过眼珠部53的颜色变化作为图像变化来进行伪装判断的结构,但是也可以为在对比摄影图像中的一部分的图像变化和其他部分的图像变化后进行伪装判断的结构。
这时,例如也可以在眼珠部53中指定反映图像61反映的部分,并比较该反映图像61照入的部分的图像变化和此外的部分或者眼珠部53整体的图像变化。
由此,反映图像61照入的部分的图像变化比除此之外的部分或者眼珠部53整体的图像变化大,所以如果该图像变化的程度的差大于等于预定的规定的阈值,则可以判断为本人的正规的认证。
另外,也可以比较眼珠部53的图像变化和脸整体的图像变化。这时,眼珠部53的图像变化也比脸整体的图像变化大,所以如果该图像变化的程度的差大于等于预定的规定的阈值,则可以判断为本人的正规的认证。
通过这样的结构,可以防止照片造成的假冒偶然成功的情况。如果详细叙述,则在照片偶然反射了反映图像61的情况下,产生各拍摄中的图像变化。但是,由于反映图像61为照片整体反射的图像,所以部分的图像变化和整体的图像变化(或者其他部分的图像变化)为相同或者基本相同的变化。因此,在人们接受认证的情况下,由于部分导致的变化量的差不表现,可以判断为假冒。
而且,这时,也可以根据变色区域的面积的差异或者面积比来进行判断。
而且,被摄体认证装置1构成为通过被摄体的脸进行认证的认证装置,但是也可以构成为通过被摄体的虹膜进行认证的虹膜认证装置。在这种情况下,也可以排除照片造成的假冒,并可以高精度地进行个人认证。
〔实施例2〕
接着,与图5所示的方框图一起说明第二实施方式的被摄体认证装置1。
该被摄体认证装置1由被摄体认证单元70被安装在携带电话机上而构成。
被摄体认证装置1设置图像输入部21、显示部25和控制部26。这些各要素除了将图像输入部21的摄影图像数据的输出目的地设为控制部26以外,与前述的实施例1相同,所以省略其详细的说明。而且,通过图像输入部21、显示部25、控制部26构成执行摄影处理的摄影单元5。
被摄体认证单元70与适当的输入输出部电连接而被设置在前述被摄体认证装置1中。该被摄体认证单元70设置由CPU和存储部(ROM和RAM等)构成的控制装置(省略图示),在该控制装置内,通过认证控制部71、被摄体判断部72、脸识别部73、以及注册数据74构成。
前述认证控制部71按照存储部中存储的数据和程序,执行各种控制动作。被存储在存储部中的程序中还包含通过摄影图像来认证被摄体的被摄体认证程序。
而且,根据被摄体判断部72进行的是否为伪装的判断和脸识别部73进行的脸对照的对照结果进行个人认证,将该个人认证的认证结果发送到被摄体认证装置1的控制部26。
前述被摄体判断部72按照认证控制部71的控制,进行在摄影图像数据中映入的被摄体是否为伪装的判断,将判断结果发送到认证控制部71。
前述脸识别部73按照认证控制部71的控制,比较从认证控制部71得到的摄影图像数据和从存储部读出的注册数据74,进行作为生物体认证的一种的脸对照。
前述注册数据74是被存储在存储部中的数据,是被预先注册的利用者的摄影图像数据。该摄影图像数据可以通过作为脸图像、或者虹膜图像等包含人物的眼睛的图像的可进行个人认证的图像来构成,在本实施方式中,使用对利用者没有心理的抵触的脸图像。而且,注册数据74不限于图像数据,也可以通过从该图像数据提取了特征点和特征量的特征数据来构成。
通过以上的结构,将被摄体认证单元70安装在携带电话机等设备上,从而可以执行被摄体认证,得到与实施例1相同的作用效果。
被这样构成的实施例2的被摄体认证装置1进行与实施例1基本相同的动作。即,控制部26执行图3所示的步骤n1~n2的动作,在步骤n2到步骤n3之间,控制部26将摄影图像数据发送到认证控制部71。然后,认证控制部71执行在步骤n3~n10中控制部26执行的动作。这时,被摄体判断部72执行实施例1的被摄体判断部22的动作,脸识别部73执行实施例1的脸识别部23的动作。然后,在注册数据74中存储与注册数据24相同的数据。
通过以上的动作,可以达到与实施例1相同的作用效果。被摄体认证单元70由于是具有输入输出部的部件,所以可以安装在各种设备上,可以在各种设备中安装难以假冒的被摄体认证。
而且,在第2实施例中,注册数据存储在被摄体认证单元70中,但也可以使其存储在摄影单元5侧的存储部内。
在本发明的结构和上述的实施方式的对应中,本发明的携带电话机与实施方式的被摄体认证装置1对应,以下相同,摄影部件与照相机12和图像输入部21对应,照明部件与照明装置13对应,反映图像变更部件和显示部件与液晶监视器14和显示部25对应,伪装判断部件与执行步骤n3~n5的被摄体判断部22或者被摄体判断部72对应,眼睛与眼珠部分对应,本发明不仅限于上述的实施方式的结构,可以得到多种实施方式。

Claims (10)

1、一种被摄体认证装置,具有拍摄被摄体的摄影部件,根据用该摄影部件拍摄的被摄体的脸的要素认证被摄体,该被摄体认证装置具有:反映图像变更部件,变更在被摄体的眼睛中反映的反映图像的至少一部分的颜色,
所述被摄体认证装置被构成为:
通过所述摄影部件取得由该反映图像变更部件变更被反映在被摄体的眼睛中的反映图像之前的摄影图像、和变更之后的摄影图像,
该被摄体认证装置还具有伪装判断部件,该伪装判断部件从反映图像变更前后的摄影图像求各个眼珠部分的平均颜色,
根据反映图像变更前的眼珠部分的平均颜色和反映图像变更后的眼珠部分的平均颜色的差分来判断是否为伪装。
2、一种被摄体认证装置,具有拍摄被摄体的摄影部件,根据用该摄影部件拍摄的被摄体的脸的要素认证被摄体,该被摄体认证装置具有:反映图像变更部件,变更在被摄体的眼睛中反映的反映图像的至少一部分的亮度,
所述被摄体认证装置被构成为:
通过所述摄影部件取得由该反映图像变更部件变更被反映在被摄体的眼睛中的反映图像之前的摄影图像、和变更之后的摄影图像,
该被摄体认证装置还具有伪装判断部件,该伪装判断部件从反映图像变更前后的摄影图像求各个眼珠部分的平均亮度,
根据反映图像变更前的眼珠部分的平均亮度和反映图像变更后的眼珠部分的平均亮度的差分来判断是否为伪装。
3、一种被摄体认证装置,具有拍摄被摄体的摄影部件,根据用该摄影部件拍摄的被摄体的脸的要素认证被摄体,该被摄体认证装置具有:反映图像变更部件,变更在被摄体的眼睛中反映的反映图像的至少一部分的形状,
所述被摄体认证装置被构成为:
通过所述摄影部件取得由该反映图像变更部件变更被反映在被摄体的眼睛中的反映图像之前的摄影图像、和变更之后的摄影图像,
该被摄体认证装置还具有伪装判断部件,该伪装判断部件从反映图像变更前后的摄影图像求反映在被摄体的眼睛中的反映图像,
根据反映图像变更前的反映图像的形状和反映图像变更后的反映图像的形状的比较来判断是否为伪装。
4、一种被摄体认证装置,具有拍摄被摄体的摄影部件,根据用该摄影部件拍摄的被摄体的脸的要素认证被摄体,该被摄体认证装置具有:反映图像变更部件,变更在被摄体的眼睛中反映的反映图像的至少一部分的大小,
所述被摄体认证装置被构成为:
通过所述摄影部件取得由该反映图像变更部件变更被反映在被摄体的眼睛中的反映图像之前的摄影图像、和变更之后的摄影图像,
该被摄体认证装置还具有伪装判断部件,该伪装判断部件从反映图像变更前后的摄影图像求反映在被摄体的眼睛中的反映图像,
根据反映图像变更前的反映图像的大小和反映图像变更后的反映图像的大小的比较来判断是否为伪装。
5、如权利要求1至4的任意一项所述的被摄体认证装置,
使所述反映图像变更部件由进行图像显示的显示部件以及进行照明的照明部件构成。
6、一种携带电话机,具有权利要求1至4的任意一项记载的被摄体认证装置。
7、一种被摄体认证方法,根据摄影部件拍摄的被摄体的脸的要素来认证被摄体,
通过所述摄影部件取得在变更被反映在被摄体的眼睛中的反映图像之前的摄影图像,
并且变更在被摄体的眼睛中反映的反映图像的至少一部分的颜色,
通过所述摄影部件取得变更之后的摄影图像,
从反映图像变更前后的摄影图像求各个眼珠部分的平均颜色,
根据反映图像变更前的眼珠部分的平均颜色和反映图像变更后的眼珠部分的平均颜色的差分来判断是否为伪装。
8、一种被摄体认证方法,根据摄影部件拍摄的被摄体的脸的要素来认证被摄体,
通过所述摄影部件取得在变更被反映在被摄体的眼睛中的反映图像之前的摄影图像,
并且变更在被摄体的眼睛中反映的反映图像的至少一部分的平均亮度,
通过所述摄影部件取得变更之后的摄影图像,
从反映图像变更前后的摄影图像求各个眼珠部分的平均亮度,
根据反映图像变更前的眼珠部分的平均亮度和反映图像变更后的眼珠部分的平均亮度的差分来判断是否为伪装。
9、一种被摄体认证方法,根据摄影部件拍摄的被摄体的脸的要素来认证被摄体,
通过所述摄影部件取得在变更被反映在被摄体的眼睛中的反映图像之前的摄影图像,
并且变更在被摄体的眼睛中反映的反映图像的至少一部分的形状,
通过所述摄影部件取得变更之后的摄影图像,
从反映图像变更前后的摄影图像求各个反映在被摄体的眼睛中的反映图像,
根据反映图像变更前的反映图像的形状和反映图像变更后的反映图像的形状的比较来判断是否为伪装。
10、一种被摄体认证方法,根据摄影部件拍摄的被摄体的脸的要素来认证被摄体,
通过所述摄影部件取得在变更被反映在被摄体的眼睛中的反映图像之前的摄影图像,
并且变更在被摄体的眼睛中反映的反映图像的至少一部分的大小,
通过所述摄影部件取得变更之后的摄影图像,
从反映图像变更前后的摄影图像求各个反映在被摄体的眼睛中的反映图像,
根据反映图像变更前的反映图像的大小和反映图像变更后的反映图像的大小的比较来判断是否为伪装。
CNB200610054795XA 2005-03-15 2006-03-10 被摄体认证装置、方法以及携带电话 Expired - Fee Related CN100456322C (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2005074035A JP2006259924A (ja) 2005-03-15 2005-03-15 被写体認証装置、携帯電話、被写体認証ユニット、被写体認証方法、及び被写体認証プログラム
JP074035/05 2005-03-15

Publications (2)

Publication Number Publication Date
CN1834985A CN1834985A (zh) 2006-09-20
CN100456322C true CN100456322C (zh) 2009-01-28

Family

ID=36581986

Family Applications (1)

Application Number Title Priority Date Filing Date
CNB200610054795XA Expired - Fee Related CN100456322C (zh) 2005-03-15 2006-03-10 被摄体认证装置、方法以及携带电话

Country Status (5)

Country Link
US (1) US20070019862A1 (zh)
EP (1) EP1703443A3 (zh)
JP (1) JP2006259924A (zh)
KR (1) KR100823810B1 (zh)
CN (1) CN100456322C (zh)

Families Citing this family (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5745790B2 (ja) * 2010-07-22 2015-07-08 Necエンベデッドプロダクツ株式会社 入退出管理システム
US8548207B2 (en) 2011-08-15 2013-10-01 Daon Holdings Limited Method of host-directed illumination and system for conducting host-directed illumination
GB2495324B (en) * 2011-10-07 2018-05-30 Irisguard Inc Security improvements for Iris recognition systems
US9075975B2 (en) 2012-02-21 2015-07-07 Andrew Bud Online pseudonym verification and identity validation
JP2014206932A (ja) * 2013-04-15 2014-10-30 オムロン株式会社 認証装置、認証方法、制御プログラムおよび記録媒体
US9875393B2 (en) * 2014-02-12 2018-01-23 Nec Corporation Information processing apparatus, information processing method, and program
US10198645B2 (en) * 2014-11-13 2019-02-05 Intel Corporation Preventing face-based authentication spoofing
US9928603B2 (en) 2014-12-31 2018-03-27 Morphotrust Usa, Llc Detecting facial liveliness
US9886639B2 (en) * 2014-12-31 2018-02-06 Morphotrust Usa, Llc Detecting facial liveliness
JP6069423B2 (ja) * 2015-07-02 2017-02-01 ソフトバンク株式会社 位置検出システム
JP6539561B2 (ja) * 2015-10-14 2019-07-03 株式会社144Lab 名刺情報管理システム
CN107886032B (zh) * 2016-09-30 2021-12-14 阿里巴巴集团控股有限公司 终端设备、智能手机、基于脸部识别的认证方法和系统
KR101979842B1 (ko) 2017-07-21 2019-05-17 안주신 신축암
CN108537111A (zh) 2018-02-26 2018-09-14 阿里巴巴集团控股有限公司 一种活体检测的方法、装置及设备
EP3759646A4 (en) * 2018-03-02 2021-03-17 Visa International Service Association DYNAMIC LIGHTING FOR IMAGE-BASED VERIFICATION PROCESSING
JP7382767B2 (ja) * 2019-09-06 2023-11-17 東芝テック株式会社 デジタル撮像機器、デジタル撮像方法、プログラム
CN113205057B (zh) * 2021-05-13 2023-08-08 北京百度网讯科技有限公司 人脸活体检测方法、装置、设备及存储介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002312772A (ja) * 2001-04-13 2002-10-25 Oki Electric Ind Co Ltd 個人識別装置及び眼偽造判定方法
US6542624B1 (en) * 1998-07-17 2003-04-01 Oki Electric Industry Co., Ltd. Iris code generating device and iris identifying system
CN1471053A (zh) * 2002-07-26 2004-01-28 佳能株式会社 图象处理方法和设备、图象处理系统以及存储介质
JP2004171350A (ja) * 2002-11-21 2004-06-17 Matsushita Electric Ind Co Ltd 目画像撮影装置およびそれを用いた情報装置
US6760467B1 (en) * 1999-03-23 2004-07-06 Lg Electronics Inc. Falsification discrimination method for iris recognition system
US20040218070A1 (en) * 2000-02-24 2004-11-04 Nokia Corporation Method and apparatus for user recognition using CCD cameras

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6184926B1 (en) * 1996-11-26 2001-02-06 Ncr Corporation System and method for detecting a human face in uncontrolled environments
US5933502A (en) * 1996-12-20 1999-08-03 Intel Corporation Method and apparatus for enhancing the integrity of visual authentication
CA2372376C (en) * 1998-04-29 2007-11-20 Carnegie Mellon University Apparatus and method of monitoring a subject's eyes using two different wavelengths of light
US6532298B1 (en) * 1998-11-25 2003-03-11 Iridian Technologies, Inc. Portable authentication device and method using iris patterns
DE19920158A1 (de) * 1999-04-29 2000-11-02 Univ Schiller Jena Verfahren und Anordnung zur Bestimmung von Fluorophoren an Objekten, insbesondere am lebenden Augenhintergrund
JP2000350123A (ja) * 1999-06-04 2000-12-15 Fuji Photo Film Co Ltd 画像選択装置、カメラ、画像選択方法及び記録媒体
JP4426030B2 (ja) * 1999-10-15 2010-03-03 富士通株式会社 生体情報を用いた認証装置及びその方法
US6735328B1 (en) * 2000-03-07 2004-05-11 Agilent Technologies, Inc. Personal viewing device with system for providing identification information to a connected system
JP3825222B2 (ja) * 2000-03-24 2006-09-27 松下電器産業株式会社 本人認証装置および本人認証システムならびに電子決済システム
US6965684B2 (en) * 2000-09-15 2005-11-15 Canon Kabushiki Kaisha Image processing methods and apparatus for detecting human eyes, human face, and other objects in an image
US7253832B2 (en) * 2001-08-13 2007-08-07 Olympus Corporation Shape extraction system and 3-D (three dimension) information acquisition system using the same
JP2003296713A (ja) * 2002-04-04 2003-10-17 Mitsubishi Electric Corp 顔画像合成装置、顔画像合成方法およびその方法を実行するプログラムならびに顔画像合成装置を備えた通信用端末およびその通信用端末による通信方法
US7202793B2 (en) * 2002-10-11 2007-04-10 Attention Technologies, Inc. Apparatus and method of monitoring a subject and providing feedback thereto
JP2004362079A (ja) * 2003-06-02 2004-12-24 Fuji Photo Film Co Ltd 本人認証装置
KR100580630B1 (ko) * 2003-11-19 2006-05-16 삼성전자주식회사 적외선을 이용한 사람 식별 장치 및 방법
US20050210267A1 (en) * 2004-03-18 2005-09-22 Jun Sugano User authentication method and system, information terminal device and service providing server, subject identification method and system, correspondence confirmation method and system, object confirmation method and system, and program products for them
JP2005334402A (ja) * 2004-05-28 2005-12-08 Sanyo Electric Co Ltd 認証方法および認証装置
JP4696608B2 (ja) * 2005-03-15 2011-06-08 オムロン株式会社 被写体認証装置、携帯電話、及び被写体認証プログラム
US20070071288A1 (en) * 2005-09-29 2007-03-29 Quen-Zong Wu Facial features based human face recognition method

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6542624B1 (en) * 1998-07-17 2003-04-01 Oki Electric Industry Co., Ltd. Iris code generating device and iris identifying system
US6760467B1 (en) * 1999-03-23 2004-07-06 Lg Electronics Inc. Falsification discrimination method for iris recognition system
US20040218070A1 (en) * 2000-02-24 2004-11-04 Nokia Corporation Method and apparatus for user recognition using CCD cameras
JP2002312772A (ja) * 2001-04-13 2002-10-25 Oki Electric Ind Co Ltd 個人識別装置及び眼偽造判定方法
CN1471053A (zh) * 2002-07-26 2004-01-28 佳能株式会社 图象处理方法和设备、图象处理系统以及存储介质
JP2004171350A (ja) * 2002-11-21 2004-06-17 Matsushita Electric Ind Co Ltd 目画像撮影装置およびそれを用いた情報装置

Also Published As

Publication number Publication date
CN1834985A (zh) 2006-09-20
EP1703443A3 (en) 2009-01-28
KR100823810B1 (ko) 2008-04-21
JP2006259924A (ja) 2006-09-28
EP1703443A2 (en) 2006-09-20
US20070019862A1 (en) 2007-01-25
KR20060101259A (ko) 2006-09-22

Similar Documents

Publication Publication Date Title
CN100456322C (zh) 被摄体认证装置、方法以及携带电话
CN106056036B (zh) 使用可见光成像的虹膜获取
CN100524340C (zh) 被摄体认证装置、携带电话
CN100454329C (zh) 被拍体验证设备以及验证方法
CN103383723B (zh) 用于生物特征验证的电子欺骗检测的方法和系统
CN108563936B (zh) 任务执行方法、终端设备及计算机可读存储介质
CN105354904B (zh) 生物识别门禁设备及其工作方法
JP7195422B2 (ja) 顔認識方法および電子デバイス
US10599912B2 (en) Analysis of reflections of projected light in varying colors, brightness, patterns, and sequences for liveness detection in biometric systems
JP3315648B2 (ja) アイリスコード生成装置およびアイリス認識システム
EP2701097A2 (en) Method and device for authenticating a user
CN107341481A (zh) 利用结构光图像进行识别
KR20190038594A (ko) 얼굴 인식-기반 인증
SG191310A1 (en) Systems and methods for face authentication or recognition using spectrally and/or temporally filtered flash illumination
JP2007135149A (ja) 移動携帯端末
CN108550210B (zh) 控制车辆解除锁定状态的方法和装置
TWI752105B (zh) 特徵圖像的獲取方法及獲取裝置、使用者認證方法
CN106611164A (zh) 虹膜识别方法、装置及电子设备
Farrukh et al. FaceRevelio: a face liveness detection system for smartphones with a single front camera
KR20200080533A (ko) 특징점 변동을 이용한 위조 얼굴 판별장치 및 그 방법
CN111582145A (zh) 生物识别方法、电子设备以及计算机可读存储介质
JP2006136450A (ja) 虹彩認証装置
JP2004086614A (ja) 目画像撮像装置及び目画像認証装置
CN107516066B (zh) 检测方法及相关产品
JP4175056B2 (ja) 個人認証装置、個人認証システム、携帯端末、個人認証用プログラム

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
C17 Cessation of patent right
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20090128

Termination date: 20110310