CN108924340A - 验证方法、验证装置及计算机可读存储介质 - Google Patents

验证方法、验证装置及计算机可读存储介质 Download PDF

Info

Publication number
CN108924340A
CN108924340A CN201810574771.XA CN201810574771A CN108924340A CN 108924340 A CN108924340 A CN 108924340A CN 201810574771 A CN201810574771 A CN 201810574771A CN 108924340 A CN108924340 A CN 108924340A
Authority
CN
China
Prior art keywords
face
infrared
authorized user
image
infrared camera
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201810574771.XA
Other languages
English (en)
Other versions
CN108924340B (zh
Inventor
张学勇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Oppo Mobile Telecommunications Corp Ltd
Original Assignee
Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Oppo Mobile Telecommunications Corp Ltd filed Critical Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority to CN201810574771.XA priority Critical patent/CN108924340B/zh
Publication of CN108924340A publication Critical patent/CN108924340A/zh
Priority to PCT/CN2019/083370 priority patent/WO2019233199A1/zh
Priority to US16/424,426 priority patent/US10942999B2/en
Priority to EP19178415.6A priority patent/EP3579131B1/en
Application granted granted Critical
Publication of CN108924340B publication Critical patent/CN108924340B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72448User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions
    • H04M1/72463User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions to restrict the functionality of the device
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31User authentication
    • G06F21/32User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/10Image acquisition
    • G06V10/12Details of acquisition arrangements; Constructional details thereof
    • G06V10/14Optical characteristics of the device performing the acquisition or on the illumination arrangements
    • G06V10/143Sensing or illuminating at different wavelengths
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161Detection; Localisation; Normalisation
    • G06V40/166Detection; Localisation; Normalisation using acquisition arrangements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/02Constructional features of telephone sets
    • H04M1/0202Portable telephone sets, e.g. cordless phones, mobile phones or bar type handsets
    • H04M1/026Details of the structure or mounting of specific components
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/02Constructional features of telephone sets
    • H04M1/0202Portable telephone sets, e.g. cordless phones, mobile phones or bar type handsets
    • H04M1/026Details of the structure or mounting of specific components
    • H04M1/0264Details of the structure or mounting of specific components for a camera module assembly
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72484User interfaces specially adapted for cordless or mobile telephones wherein functions are triggered by incoming communication events

Abstract

本发明公开的验证方法包括:判断可动模块是否被触发,可动模块收容在壳体内并能够从壳体中伸出,可动模块包括支架、红外摄像头及结构光投射器;若可动模块被触发,通过支架带着红外摄像头及结构光投射器伸出壳体,红外摄像头与结构光投射器初始化;通过红外摄像头获取红外图像;判断红外图像中是否存在人脸;当红外图像中存在人脸时,判断人脸是否与授权用户的人脸模板匹配;当人脸与人脸模板匹配时,通过结构光投射器与红外摄像头获取激光图案,根据激光图案获取深度图像并判断深度图像是否与授权用户的深度模板匹配;和,若深度图像与授权用户的深度模板匹配,则验证通过。本发明还公开了验证装置及计算机可读存储介质。

Description

验证方法、验证装置及计算机可读存储介质
技术领域
本发明涉及消费性电子产品技术领域,特别涉及一种验证方法、验证装置及计算机可读存储介质。
背景技术
现有的用于人脸解锁的摄像模组一般设置在手机的前壳上,从而导致设置在前壳的显示屏无法做成全面屏。而为了使手机正面的显示屏能够做成全面屏,使摄像模组能够选择性地隐藏在手机内部或暴露在手机外部,为了减小摄像头模组进行人脸解锁的时间,摄像头模组一般频繁地开启以用于获取用户的图像,从而导致手机的功耗较大。
发明内容
本发明的实施例提供了一种验证方法、验证装置及计算机可读存储介质。
本发明实施方式的验证方法包括:
判断可动模块是否被触发,所述可动模块收容在壳体内并能够从所述壳体中伸出,所述可动模块包括支架、设置在所述支架上的红外摄像头、及设置在所述支架上的结构光投射器;
若所述可动模块被触发,通过所述支架带着所述红外摄像头及所述结构光投射器朝所述壳体外运动以伸出所述壳体,所述红外摄像头与所述结构光投射器初始化;
通过所述红外摄像头获取红外图像;
判断所述红外图像中是否存在人脸;
当所述红外图像中存在人脸时,判断所述人脸是否与授权用户的人脸模板匹配;
当所述人脸与授权用户的人脸模板匹配时,通过所述结构光投射器与所述红外摄像头获取激光图案,根据所述激光图案获取深度图像并判断所述深度图像是否与授权用户的深度模板匹配;和
若所述深度图像与授权用户的深度模板匹配,则验证通过。
本发明实施方式的验证装置包括:
可动模块,所述可动模块收容在壳体内并能够从所述壳体中伸出,所述可动模块包括支架、设置在所述支架上的红外摄像头、及设置在所述支架上的结构光投射器,当所述可动模块被触发时,所述支架用于带着所述红外摄像头及所述结构光投射器朝所述壳体外运动以伸出所述壳体,所述红外摄像头与所述结构光投射器初始化;所述红外摄像头用于获取红外图像;所述红外摄像头与所述结构光投射器用于获取激光图案;及
处理器,所述处理器用于:
判断所述可动模块是否被触发;
判断所述红外图像中是否存在人脸;
在所述红外图像中存在人脸时,判断所述人脸是否与授权用户的人脸模板匹配;
当所述人脸与授权用户的人脸模板匹配时,根据所述激光图案获取深度图像并判断所述深度图像是否与授权用户的深度模板匹配;及
在所述深度图像与授权用户的深度模板匹配时,确定验证通过。
本发明实施方式的验证装置包括:
可动模块,所述可动模块收容在壳体内并能够从所述壳体中伸出,所述可动模块包括支架、设置在所述支架上的红外摄像头、及设置在所述支架上的结构光投射器,当所述可动模块被触发时,所述支架用于带着所述红外摄像头及所述结构光投射器朝所述壳体外运动以伸出所述壳体,所述红外摄像头与所述结构光投射器初始化;所述红外摄像头用于获取红外图像;所述红外摄像头与所述结构光投射器用于获取激光图案;
第一判断模块,所述第一判断模块用于判断所述可动模块是否被触发;
第二判断模块,所述第二判断模块用于判断所述红外图像中是否存在人脸;
第三判断模块,所述第三判断模块用于在所述红外图像中存在人脸时,判断所述人脸是否与授权用户的人脸模板匹配;
获取模块,所述获取模块用于在所述人脸与授权用户的人脸模板匹配时,根据所述激光图案获取深度图像;
第四判断模块,所述第四判断模块用于在所述人脸与授权用户的人脸模板匹配时,判断所述深度图像是否与授权用户的深度模板匹配;及
验证模块,所述验证模块用于所述深度图像与授权用户的深度模板匹配时,确定验证通过。
本发明实施方式的计算机可读存储介质,计算机可读存储介质,用于验证装置,所述验证装置包括可动模块,所述可动模块收容在壳体内并能够从所述壳体中伸出,所述可动模块包括支架、设置在所述支架上的红外摄像头、及设置在所述支架上的结构光投射器,所述支架能够带着所述红外摄像头及所述结构光投射器朝所述壳体外运动以伸出所述壳体,所述红外摄像头能够获取红外图像,所述红外摄像头与所述结构光投射器能够获取激光图案,所述计算机可读存储介质用于存储一个或多个计算机可执行指令,当所述一个或多个计算机可执行指令被一个或多个处理器执行时,所述一个或多个处理器执行以下验证方法:
判断所述可动模块是否被触发;
若所述可动模块被触发,控制所述支架带着所述红外摄像头及所述结构光投射器朝所述壳体外运动以伸出所述壳体、及控制所述红外摄像头与所述结构光投射器初始化;
控制所述红外摄像头获取红外图像;
判断所述红外图像中是否存在人脸;
当所述红外图像中存在人脸时,判断所述人脸是否与授权用户的人脸模板匹配;
当所述人脸与授权用户的人脸模板匹配时,控制所述结构光投射器与所述红外摄像头获取激光图案,根据所述激光图案获取深度图像并判断所述深度图像是否与授权用户的深度模板匹配;和
若所述深度图像与授权用户的深度模板匹配,则验证通过。
本发明实施方式的计算机可读存储介质、验证方法及验证装置在判断红外图像中存在人脸及判断人脸与授权用户的人脸匹配后,才通过结构光投射器与红外摄像头获取激光图案,根据激光图案获取深度图像并判断深度图像是否与授权用户的深度模板匹配,相较于在判断人脸与授权用户的人脸是否匹配的同时就开启结构光投射器与红外摄像头获取激光图案而言,减少了激光投射器及红外摄像头开启次数,进而减小了验证装置的功耗并延长了激光投射器及红外摄像头的使用寿命。
本发明的附加方面和优点将在下面的描述中部分给出,部分将从下面的描述中变得明显,或通过本发明的实践了解到。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明某些实施方式的验证方法的流程示意图。
图2至图4是本发明实施方式的验证装置的结构示意图。
图5至图9是本发明某些实施方式的验证方法的流程示意图。
图10及图11是本发明某些实施方式的验证装置的结构示意图。
具体实施方式
下面详细描述本发明的实施方式,所述实施方式的示例在附图中示出,其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施方式是示例性的,仅用于解释本发明,而不能理解为对本发明的限制。
在本发明的描述中,需要理解的是,术语“第一”、“第二”仅用于描述目的,而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多个所述特征。在本发明的描述中,“多个”的含义是两个或两个以上,除非另有明确具体的限定。
在本发明的描述中,需要说明的是,除非另有明确的规定和限定,术语“安装”、“相连”、“连接”应做广义理解,例如,可以是固定连接,也可以是可拆卸连接,或一体地连接;可以是机械连接,也可以是电连接或可以相互通信;可以是直接相连,也可以通过中间媒介间接相连,可以是两个元件内部的连通或两个元件的相互作用关系。对于本领域的普通技术人员而言,可以根据具体情况理解上述术语在本发明中的具体含义。
下文的公开提供了许多不同的实施方式或例子用来实现本发明的不同结构。为了简化本发明的公开,下文中对特定例子的部件和设置进行描述。当然,它们仅仅为示例,并且目的不在于限制本发明。此外,本发明可以在不同例子中重复参考数字和/或参考字母,这种重复是为了简化和清楚的目的,其本身不指示所讨论各种实施方式和/或设置之间的关系。此外,本发明提供了的各种特定的工艺和材料的例子,但是本领域普通技术人员可以意识到其他工艺的应用和/或其他材料的使用。
下面详细描述本发明的实施方式,所述实施方式的示例在附图中示出,其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施方式是示例性的,仅用于解释本发明,而不能理解为对本发明的限制。
请参阅图1至图3,本发明实施方式的验证方法包括:
01,判断可动模块10是否被触发,可动模块10收容在壳体101内并能够从壳体101中伸出,可动模块10包括支架11、设置在支架11上的红外摄像头12、及设置在支架11上的结构光投射器13;
02,若可动模块10被触发,通过支架11带着红外摄像头12及结构光投射器13朝壳体101外运动以伸出壳体101,红外摄像头12与结构光投射器13初始化;
03,通过红外摄像头12获取红外图像;
04,判断红外图像中是否存在人脸;
05,在红外图像中存在人脸时,判断人脸是否与授权用户的人脸模板匹配;
06,在人脸与授权用户的人脸模板匹配时,通过结构光投射器13与红外摄像头12获取激光图案,根据激光图案获取深度图像并判断深度图像是否与授权用户的深度模板匹配;和
07,若深度图像与授权用户的深度模板匹配,则验证通过。
其中步骤02包括:
021,通过支架11带着红外摄像头12及结构光投射器13朝壳体101外运动以伸出壳体101;及
022,红外摄像头12与结构光投射器13初始化。
步骤06包括:
061,在人脸与授权用户的人脸模板匹配时,通过结构光投射器13与红外摄像头12获取激光图案;
062,根据激光图案获取深度图像;及
063,判断深度图像是否与授权用户的深度模板匹配。
请参阅图2及图3,本发明实施方式的验证装置100包括壳体101、可动模块10、及处理器40。可动模块10包括支架11、红外摄像头12及激光投射器13。处理器40连接红外摄像头12及激光投射器13。可动模块10收容在壳体101内并能够从壳体101中伸出。具体地,壳体101包括相背的头部102及尾部103,壳体101还包括连接头部102及尾部103的正面104、及与正面104相背的背面(图未示),正面104上设置有显示屏105,显示屏105为全面屏,可动模块10设置在壳体101的头部102一端。验证装置100包括手机、平板电脑、智能手环、智能头盔中的任意一种。本发明实施方式的验证装置100以手机为例进行举例说明。
处理器40用于判断可动模块10是否被触发、在可动模块10被触发并且红外摄像头12用于获取红外图像时,判断红外图像是否存在人脸、在红外图像中存在人脸时,判断人脸是否与授权用户的人脸模板匹配、在人脸与授权用户的人脸模板匹配并且结构光投射器13与红外摄像头12获取激光图案时,根据激光图案获取深度图像、判断深度图像是否与授权用户的深度模板匹配、和当深度图像与授权用户的深度模板匹配时,确定验证通过。也即是,处理器40用于执行步骤01、步骤03、步骤04、步骤05、步骤062、步骤063及步骤07。
当可动模块10被触发时,支架11带着红外摄像头12及结构光投射器13朝壳体101外运动以伸出壳体101。红外摄像头12与结构光投射器13进行初始化。也即是,支架11用于执行步骤021,红外摄像头12及激光投射器13共同用于执行步骤022,支架11、红外摄像头12及激光投射器13共同用于执行步骤02。其中,支架11带着红外摄像头12及结构光投射器13朝壳体101外运动以伸出壳体101先执行,红外摄像头12与结构光投射器13进行初始化后执行,也即是,步骤021在步骤022之前执行;或者,支架11带着红外摄像头12及结构光投射器13朝壳体101外运动以伸出壳体101、与红外摄像头12与结构光投射器13进行初始化同时执行,也即是,步骤021与步骤022同步执行,相较于先执行步骤021,后执行步骤022而言,将红外摄像头12与结构光投射器13的准备时间(初始化)提前,以从整体上减少验证方法的执行时间。
红外摄像头12能够用于获取红外图像,具体地,红外摄像头12用于在可动模块10被触发后获取红外图像。也即是,红外摄像头12用于执行步骤03。
红外摄像头12与结构光投射器13能够共同用于获取激光图案,具体地,红外摄像头12与结构光投射器13在人脸与授权用户的人脸模板匹配时共同用于获取激光图案,也即是,红外摄像头12与结构光投射器13共同用于执行步骤061。
触发可动模块10的操作包括按预定的方式移动和/或转动验证装置100(例如,用户将头部102朝正面104一侧转动)、点亮显示屏105(例如,显示屏105在息屏状态时,用户通过按压验证装置100上的按键点亮显示屏105或者用户双击显示屏105以点亮显示屏105)、开启验证装置100中的人脸检测应用(例如,用户开启/点击验证装置100中的人脸检测应用或软件,具体包括,当用户使用验证装置100时,用户可以开启验证装置100中的用户验证的软件来识别用户的人脸,以确定用户是否具有使用验证装置100的权限)、点击验证装置100中运行的应用中的气动人脸检测的按钮/按键(例如,当用户使用支付软件时,用户点击支付软件中的通过人脸进行支付的按钮)。具体地,触发可动模块10的操作也为启动红外摄像头12和结构光投射器13的操作,也就是说,用户执行上述操作(按预定的方式移动和/或转动验证装置100、点亮显示屏105、开启验证装置100中的人脸检测应用、点击验证装置100中运行的应用中的气动人脸检测的按钮/按键)时,红外摄像头12和结构光投射器13被启动,红外摄像头12和结构光投射器13被启动后即执行初始化操作。当用户需要使用红外摄像头12和结构光投射器13进行人脸识别时,用户执行上述操作(按预定的方式移动和/或转动验证装置100、点亮显示屏105、开启验证装置100中的人脸检测应用、点击验证装置100中运行的应用中的气动人脸检测的按钮/按键)均能够产生触发可动模块10的触发信号,处理器40可以根据是否接收到触发信号来判断可动模块10是否被触发。
验证装置100还包括驱动组件31,驱动组件31设置在壳体101内并与支架11连接,驱动组件31用于驱动支架11运动。驱动组件31包括驱动电机,处理器40连接驱动组件31并在可动模块10被触发时控制驱动组件31驱动可动模块10运动。
红外摄像头12与结构光投射器13进行初始化包括启动红外摄像头12的驱动程序让红外摄像头12做好拍摄准备、及启动结构光投射器13的驱动程序以让结构光投射器13做好投射红外激光的准备。
红外摄像头12可以在支架11运动到位并且停止运动时获取红外图像,由于红外图像是在支架11稳定的时候获取的,红外图像较为清晰,有利于执行后续的人脸判断步骤,减少反复拍摄多帧红外图像的几率。红外摄像头12也可以在红外摄像头12完全露出在壳体101外、并且支架11还没有停止运动时获取红外图像,例如,当红外摄像头12完全露出在壳体101外并且支架11的运动速度小于支架11的最高速度的三分之一时,红外摄像头12获取红外图像,如此,将拍摄图像的时间提前,进一步从整体上减少验证方法的执行时间,提升用户体验。
判断红外图像中是否存在人脸的步骤可包括:通过特定算法对红外图像进行特征提取,将提取的特征与已知的人脸特性向量进行匹配,根据匹配结果判断红外图像是否是人脸图像。其中,可以通过主动形状模型(Active Shape Model,ASM)、局部二值模式(LocalBinary Patterns,LBP)算法、主成分分析(Principal Component Analysis,PCA)以及线性判别分析(Linear Discriminant Analysis,LDA)算法等来提取红外图像的特征。
授权用户可以为验证装置100的拥有者及与该拥有者有亲属或朋友关系的使用者。授权用户的人脸模板可以为预存在验证装置100内部或外部的人脸模板。人脸模板可以为授权用户的人脸红外图像,人脸红外图像可以为平面的图像。
当红外图像中的人脸与授权用户的人脸模板匹配时,激光投射器13用于向目标物体(验证装置100的外部)投射激光,并且通过红外摄像头12获取目标物体的激光图案。授权用户的深度模板可以为预存在验证装置100内部或外部的人脸深度模板。深度模板可以为授权用户的人脸深度图像,人脸深度图像可以通过结构光检测的方式得到。
当处理器40判断红外图像与授权用户的人脸模板匹配时,可以认为用户当前输入的红外图像与预存的人脸模板来源于同一用户,而由于人脸模板和红外图像均为平面的图像,红外图像容易被伪造,例如用二维照片进行验证等。因此,进一步通过处理器40判断目标物体的深度图像是否与授权用户的深度模板相匹配,可以更好地验证当前用户是否为预存的深度模板时的用户。当处理器40判断深度图像与授权用户的深度模板相匹配时,确定验证通过,验证通过后,当前用户可以获得在验证装置100的相应操作权限,例如屏幕解锁、支付等操作权限。
本发明实施方式的验证装置100及验证方法在判断红外图像中存在人脸及判断人脸与授权用户的人脸匹配后,才通过结构光投射器13与红外摄像头12获取激光图案,根据激光图案获取深度图像并判断深度图像是否与授权用户的深度模板匹配,相较于在判断人脸与授权用户的人脸是否匹配的同时就开启结构光投射器13与红外摄像头12获取激光图案而言,减少了激光投射器13及红外摄像头12开启次数,进而减小了验证装置100的功耗并延长了激光投射器13及红外摄像头12的使用寿命。
请参阅图1、图2及图4,本发明实施方式提供一种验证装置100,验证装置100包括可动模块10、第一判断模块21、第二判断模块22、第三判断模块23、第四判断模块24、验证模块25及获取模块27。
其中,第一判断模块21用于判断可动模块10是否被触发,也即是,第一判断模块21可用于执行步骤01。
第二判断模块22用于在红外摄像头12获取红外图像后判断红外图像中是否存在人脸,也即是,第二判断模块22可用于执行步骤04。
第三判断模块23用于在红外图像中存在人脸时,判断人脸是否与授权用户的人脸模板匹配,也即是,第三判断模块23可用于执行步骤05。
获取模块27用于在人脸与授权用户的人脸模板匹配时,根据激光图案获取深度图像,也即是获取模块27用于执行步骤062。
第四判断模块24用于判断深度图像是否与授权用户的深度模板匹配,也即是,第四判断模块24用于执行步骤063。红外摄像头12、结构光投射器13、第三判断模块23、获取模块27与第四判断模块24共同用于执行步骤06。
验证模块25用于在深度图像与授权用户的深度模板匹配时,确定验证通过。也即是,验证模块23用于执行步骤07。
支架11用于执行步骤021,红外摄像头12及激光投射器13共同用于执行步骤022,支架11、红外摄像头12及激光投射器13共同用于执行步骤02。红外摄像头12用于执行步骤03。红外摄像头12与结构光投射器13共同用于执行步骤061。
第一判断模块21、第二判断模块22、第三判断模块23、第四判断模块24、验证模块25及获取模块27执行的步骤都可以由处理器40执行。
第一判断模块21连接驱动组件31、红外摄像头12及激光投射器13,从而在第一判断模块21判断可动模块10被触发后,第一判断模块21能够将信号传输给驱动组件31、红外摄像头12及激光投射器13,以使驱动组件31、红外摄像头12及激光投射器13执行步骤02。
第二判断模块22连接红外摄像头12与激光投射器13,从而红外摄像头12获取的红外图像能够传输给第二判断模块22,并且第二判断模块22在判断红外图像中存在人脸后能够将信号传输给红外摄像头12及激光投射器13,以使红外摄像头12及激光投射器13执行步骤061。
获取模块27连接红外摄像头12及第四判断模块24,从而获取模块27能够接收红外摄像头12获取的激光图案,并且获取模块27在生成深度图像后能够将深度图像传输给第四判断模块24。
本发明实施方式的验证装置100及验证方法在判断红外图像中存在人脸及判断人脸与授权用户的人脸匹配后,才通过结构光投射器13与红外摄像头12获取激光图案,根据激光图案获取深度图像并判断深度图像是否与授权用户的深度模板匹配,相较于在判断人脸与授权用户的人脸是否匹配的同时就开启结构光投射器13与红外摄像头12获取激光图案而言,减少了激光投射器13及红外摄像头12开启次数,进而减小了验证装置100的功耗并延长了激光投射器13及红外摄像头12的使用寿命。
请参阅图2及图3,在某些实施方式中,可动模块10还包括红外补光灯14,红外补光灯14可用于向外发射红外光,红外光被物体反射后被红外摄像头12接收。具体地,当红外摄像头12用于获取红外图像时,红外补光灯14用于向外发生红外光以增强红外摄像头12接收到被物体反射的红外光的强度,进而提升红外图像的清晰度。
请参阅图2及图3,在某些实施方式中,可动模块10还包括前置摄像头15、受话器16、光感器17、接近传感器18、后置摄像头19、可见光补光灯191中的至少一个。从而前置摄像头15、受话器16、光感器17或接近传感器18不需要设置在壳体101的正面104上,从而显示屏105可以设置在整个正面104上,此时显示屏105为全面屏。后置摄像头19不需要设置在壳体101的背面上,从而壳体101的背面整体性较好、外光更加美观。
本实施方式的支架11的宽度W1与壳体101的宽度W2相等。支架11可以为同时固定光感器17、红外补光灯14、红外摄像头12、接近传感器18、受话器16、后置摄像头19、可见光补光灯191、前置摄像头15及激光投射器13的一体结构;或者,支架11还可以包括固定光感器17、红外补光灯14、红外摄像头12、接近传感器18、受话器16、前置摄像头15及激光投射器13的第一子支架结构、以及固定后置摄像头19及可见光补光灯191的第二子支架结构组成,第一子支架与第二子支架集合,具体地,第一子支架与第二子支架通过螺合、卡合、胶合、焊接中的至少一种或多种组合的方式连接在一起。支架11在与头部102对应的一端(支架11的顶面)开设有通光孔(图未示),光感器17安装在与通光孔对应的位置上以使验证装置100(或支架11)外部的光线能够传输至光感器17上。
请参阅图5,在某些实施方式中,通过结构光投射器13与红外摄像头12获取激光图案及根据激光图案获取深度图像的步骤(步骤061及步骤062)包括:
0611:通过激光投射器13投射激光;
0612:通过红外摄像头12获取由物体调制后的激光图案;和
0621:处理激光图案得到深度图像。
激光投射器13可用于实施步骤0611,红外摄像头12可用于实施步骤0612,处理器40可用于实施步骤0621。也就是说,激光投射器13用于投射激光;红外摄像头12用户获取由物体调制后的激光图案,处理器40用于处理激光图案以得到深度图像。
处理器40中可以存储有激光投射器13投射的激光的标定信息,处理器40通过处理激光图案与该标定信息得到目标物体不同位置的深度信息并形成深度图像。其中,激光投射器13投射的激光可以是红外光,激光投射到不同材质上被调制后的激光图案也会有不同,例如激光投射到人的皮肤、橡胶、木头等材质上时,激光被调制后的激光图案会有不同,因此,目标物体的材质信息也能够在深度图像中有所体现,只有当材质是人的皮肤时,深度图像才能与深度模板相匹配以通过验证。
请参阅图3,在某些实施方式中,判断红外图像中是否存在人脸是可信执行环境(Trusted Execution Environment,TEE)41中进行的;和/或
判断红外图像中的人脸是否与授权用户的人脸模板匹配是可信执行环境中进行的;和/或
判断深度图像是否与授权用户的深度模板匹配是可信执行环境中进行的。
步骤04、和/或步骤05、和/或步骤063在可信执行环境中执行。具体地,处理器40还用于形成可信执行环境41和非可信执行环境(Rich Execution Environment,REE)42,其中,可信执行环境41中的代码和内存区域都是受访问控制单元控制的,不能被非可信执行环境42中的程序所访问。具体地,可信执行环境41可接收红外摄像头12传输到可信执行环境41的图像(红外图像或深度图像)、并输出比对结果,可信执行环境41中的图像数据及程序不能够被非可信执行环境42中的程序所访问。
具体地,当判断红外图像中是否存在人脸的步骤(步骤04)在可信执行环境41中执行时,红外图像被传输至可信执行环境41进行处理以判断红外图像中是否存在人脸,可信执行环境41将比对结果(包括红外图像中存在人脸、及红外图像中不存在人脸)输出;当判断红外图像中的人脸是否与授权用户的人脸模板匹配的步骤(步骤05)在可信执行环境41中进行时,红外图像被传输至可信执行环境41进行处理以判断红外图像中的人脸是否与授权用户的人脸模板匹配,可信执行环境41将比对结果(包括人脸与人脸模板匹配、及人脸与人脸模板不匹配)输出;当判断深度图像是否与授权用户的深度模板匹配的步骤(步骤063)在可信执行环境41中进行时,深度图像被传输至可信执行环境41进行处理并判断深度图像是否与授权用户的深度模板匹配,可信执行环境41将比对结果(包括深度图像与深度模板匹配、及深度图像与深度模板不匹配)输出;比对结果可输出至非可信执行环境42中。
本实施方式的步骤04、和/或步骤05、和/或步骤063在可信执行环境中执行,从而能够减小深度图像和/或红外图像被非可信执行环境读取而导致用户的深度图像和/或红外图像被泄露的风险,提升验证装置100的安全性。
在某些实施方式中,处理器40包括应用处理器(Application Processor,AP)43及微处理器44。可信执行环境41及非可信执行环境42均形成在应用处理器43上。微处理器44与红外摄像头12连接并用于获取红外图像及激光图案,微处理器44处理该激光图案以得到深度图像,具体地,微处理器44中可以存储有激光投射器13投射的激光的标定信息,微处理器44通过处理激光图案与该标定信息得到目标物体不同位置的深度信息并形成深度图像。具体地,微处理器44与红外摄像头12可以通过集成电路(Inter-Integrated Circuit,I2C)总线50连接,微处理器44可以给红外摄像头12提供采集红外图像的时钟信号,红外摄像头12采集的红外图像及激光图案可以通过移动产业处理器接口(Mobile IndustryProcessor Interface,MIPI)441传输到微处理器44中。微处理器44还与激光投射器13连接,具体地,激光投射器13可以连接在微处理器44的脉冲宽度调制接口(Pulse WidthModulation,PWM)442上。微处理器44与应用处理器43连接并将红外图像及深度图像传输到可信执行环境41中。在其他实施方式中,激光投射器13还可以与应用处理器43连接,应用处理器43可用于使能激光投射器13并通过集成电路总线50连接。
微处理器44可以是处理芯片,应用处理器43可用于重置微处理器44、唤醒(wake)微处理器44、纠错(debug)微处理器44等,微处理器44可通过移动产业处理器接口441与应用处理器43连接,具体地,微处理器44通过移动产业处理器接口441与应用处理器43的可信执行环境41连接,以将微处理器44中的数据直接传输到可信执行环境41中。
微处理器44可以通过接收红外摄像头12采集的红外图像以获取红外图像,微处理器44可将该红外图像通过移动产业处理器接口441传输至可信执行环境41中,从微处理器44中输出的红外图像不会进入到应用处理器43的非可信执行环境42中,而使得该红外图像不会被其他程序获取,提高验证装置100的信息安全性。同时,应用处理器43在可信执行环境41中比对红外图像中的人脸与人脸模板是否相匹配,然后输出比对结果是否匹配,而在比对是否匹配的过程中,红外图像和人脸模板均不会被其他程序获取、篡改或盗用,进一步提高终端100的信息安全性。同理,深度图像和深度模板也不会被其他程序获取、篡改或盗用,从而提高了验证装置100的信息安全性。
当验证装置100包括红外补光灯14时,红外补光灯14与应用处理器43可以通过集成电路总线50连接,应用处理器43可用于使能红外补光灯14,红外补光灯14还可以与微处理器44连接,具体地,红外补光灯14可以连接在微处理器44的脉冲宽度调制接口442上。
请参阅图2及图6,在某些实施方式中,验证方法还包括:
081,若红外图像中的人脸与授权用户的人脸模板不匹配,则验证不通过;或,
082,若深度图像与授权用户的深度模板不匹配,则验证不通过。
处理器40还用于执行步骤081及082,也就是说,处理器40用于在红外图像中的人脸与授权用户的人脸模板不匹配时,确定验证不通过;或,处理器40用于在深度图像与授权用户的深度模板不匹配时,确定验证不通过。在其他实施方式中,验证方法还包括:若红外图像中不存在人脸,则验证不通过。
具体地,当红外图像中的人脸与授权用户的人脸模板不匹配时,或当深度图像与授权用户的深度模板不匹配时,步骤07不需要执行。当处理器40验证不通过后,处理器40可以控制显示屏105显示“验证不通过,请再次输入”等字样,或者处理器40控制验证装置100产生预定的振动,以提示用户验证不通过。此时,可动模块10可保持伸出在壳体101外;或者,可动模块10也可以移动至壳体101内。
请参阅图7,在某些实施方式中,验证方法还包括:
091,若红外图像中不存在人脸时,则返回通过红外摄像头12获取红外图像的步骤(步骤03);或
092,若红外图像中的人脸与授权用户的人脸模板不匹配,则返回通过红外摄像头12获取红外图像的步骤(步骤03);或
093,若深度图像与授权用户的深度模板不匹配,则返回通过红外摄像头12获取红外图像的步骤(步骤03)。
具体地,红外摄像头12还用于在红外图像中不存在人脸时、或在红外图像中的人脸与授权用户的人脸模板不匹配时、或深度图像与授权用户的深度模板不匹配时,获取红外图像。例如,在红外摄像头12获取红外图像后,若处理器40(或第二判断模块22)判断红外图像不存在人脸,则红外摄像头12重新获取红外图像(返回执行步骤03);在红外摄像头12获取红外图像、并且处理器40(或第二判断模块22)判断红外图像存在人脸后,若处理器40(或第三判断模块23)判断红外图像中的人脸与授权用户的人脸模板不匹配,则红外摄像头12重新获取红外图像(返回执行步骤03);在红外摄像头12获取红外图像、处理器40判断红外图像存在人脸、并且判断红外图像中的人脸与授权用户的人脸模板匹配后,若处理器40(或第四判断模块24)判断深度图像与授权用户的深度模板不匹配,则红外摄像头12重新获取红外图像(返回执行步骤03)。在其他实施方式中,验证方法还包括:若红外图像中的人脸与授权用户的人脸模板匹配、深度图像与授权用户的深度模板不匹配,则返回通过结构光投射器13与红外摄像头12获取激光图案的步骤(步骤061)。
本实施方式的验证装置100及验证方法中的红外摄像头12还用于在红外图像中不存在人脸时、或在红外图像中的人脸与授权用户的人脸模板不匹配时、或深度图像与授权用户的深度模板不匹配时获取红外图像,可动模块10不需要伸入壳体101内再从壳体101内伸出以使红外摄像头12能够获取红外图像,从而减少了验证装置100执行验证方法的时间。
请参阅图8,在某些实施方式中,红外摄像头12在预定次数内连续采集所述红外图像后,验证方法还包括:
010,若红外图像不存在人脸,则可动模块10运动以收容至壳体101内;或,
011,若红外图像中的人脸与授权用户的人脸模板不匹配,则可动模块10运动以收容至101壳体内;或,
012,若深度图像与授权用户的深度模板不匹配,则可动模块10运动以收容至壳体101内。
具体地,红外摄像头12在预定次数内连续采集所述红外图像后,可动模块10还用于在红外图像不存在人脸、或红外图像中的人脸与授权用户的人脸模板不匹配、或深度图像与授权用户的深度模板不匹配时,运动以收容至壳体101内。
预定次数可以为两次、三次、四次、五次或任意多次,本实施方式以两次为例进行举例说明:当可动模块10收容在壳体101内,并且可动模块10被触发时,可动模块10伸出壳体101以使红外摄像头12露出在壳体101外,红外摄像头12第一次获取红外图像,若红外图像不存在人脸,则可动模块10保持露出在壳体101外,此时,红外摄像头12第二次获取红外图像(返回执行步骤03);若红外摄像头12第二次获取的红外图像也不存在人脸,则可动模块10运动以收容至壳体101内。当可动模块10收容在壳体101内,并且可动模块10被触发时,可动模块10伸出壳体101以使红外摄像头12露出在壳体101外,红外摄像头12第一次获取红外图像,若红外图像不存在人脸,则可动模块10保持露出在壳体101外,此时,红外摄像头12第二次获取红外图像(返回执行步骤03),若红外摄像头12第二次获取的红外图像存在人脸,但是,第二次获取的红外图像中的人脸与人脸模板不匹配,则可动模块10运动以收容至壳体101内。当可动模块10收容在壳体101内,并且可动模块10被触发时,可动模块10伸出壳体101以使红外摄像头12露出在壳体101外,红外摄像头12第一次获取红外图像,若红外图像不存在人脸,则可动模块10保持露出在壳体101外,此时,红外摄像头12第二次获取红外图像(返回执行步骤03),若红外摄像头12第二次获取的红外图像存在人脸并且红外图像中的人脸与授权用户的人脸模板匹配,但是,通过激光投射器13、红外摄像头12及处理器40(获取模块27)获取的深度图像与深度模板不匹配,则可动模块10运动以收容至壳体101内。
在可动模块10开始朝壳体101内部运动时,红外摄像头12和激光投射器13均关闭;或者说,红外摄像头12在预定次数内连续采集红外图像后,可动模块10还用于在红外图像不存在人脸、或红外图像中的人脸与授权用户的人脸模板不匹配、或深度图像与授权用户的深度模板不匹配时,红外摄像头12和激光投射器13均关闭。
本实施方式的验证装置100及验证方法中红外摄像头12在预定次数内连续采集所述红外图像后,可动模块10还用于在红外图像不存在人脸、或红外图像中的人脸与授权用户的人脸模板不匹配、或深度图像与授权用户的深度模板不匹配时,运动以收容至壳体101内,从而避免多次验证不通过后,红外摄像头12和/或激光投射器13持续工作、以及可动模块10始终露出在壳体101外而影响验证装置100的美观。
请参阅图9及图10,在某些实施方式中,支架11上设置有参考位置,通过支架11带着红外摄像头12及结构光投射器13朝壳体101外运动以伸出壳体101的步骤(步骤021)包括:
0211,检测可动模块10上的参考位置是否到达预设位置;
0212,若参考位置到达预设位置,则支架11停止运动。
验证装置100还包括检测模块26,支架11上设置有参考位置,检测模块26用于检测可动模块10上的参考位置是否到达预设位置;在参考位置到达预设位置,支架11停止运动。
参考位置可以为支架11上的限位部(例如,限位凸起)、定位部(例如,定位凹槽)所处的位置。预设位置为相对壳体101固定位置,具体地,预设位置可以为壳体101上的限位部(例如,限位凸起)所处的位置。当可动模块10收容在壳体101内时,参考位置与预设位置之间的距离为可动模块10的最大行程。检测模块26可以为连接有位置开关(可以为行程开关)的检测电路,位置开关设置在预设位置上,支架11在参考位置上设置有能够触发位置开关的凸出部,当支架11上的参考位置运动至预设位置时,支架11触发位置开关并被检测电路检测到,从而检测模块26能够检测支架11的参考位置是否运动到预设位置。
请参阅图10,在某些实施方式中,检测模块26包括磁性器件261、霍尔传感器262,磁性器件261设置在参考位置上,霍尔传感器262设置在预设位置上内。具体地,当磁性器件261运动至预设位置时,磁性器件261与霍尔传感器262对齐并使霍尔传感器262上的信号发生改变,根据霍尔传感器262的信号变化可以确定磁性器件261(或支架11)是否到达预设位置。
请参阅图11,本发明实施方式还提供了一种计算机可读存储介质60。计算机可读存储介质60用于上述实施方式的验证装置100,计算机可读存储介质60用于存储一个或多个计算机可执行指令,当一个或多个计算机可执行指令被一个或多个处理器40执行时,处理器40执行以下步骤:
01,判断可动模块10是否被触发;
02,若可动模块10被触发,控制支架11带着红外摄像头12及结构光投射器13朝壳体101外运动以伸出壳体101、及控制红外摄像头12与结构光投射器13初始化;
03,控制红外摄像头12获取红外图像;
04,判断红外图像中是否存在人脸;
05,当红外图像中存在人脸时,判断人脸是否与授权用户的人脸模板匹配;
06,在人脸与授权用户的人脸模板匹配时,控制结构光投射器13与红外摄像头12获取激光图案,根据激光图案获取深度图像并判断深度图像是否与授权用户的深度模板匹配;和
07,若深度图像与授权用户的深度模板匹配,则验证通过。
当计算机可执行指令被一个或多个处理器40执行时,处理器40还可以执行以下步骤:
0611:控制激光投射器13投射激光;
0612:控制红外摄像头12获取由物体调制后的激光图案;和
0621:处理激光图案得到深度图像。
当计算机可执行指令被一个或多个处理器40执行时,处理器40还可以执行以下步骤:
081,若红外图像中的人脸与授权用户的人脸模板不匹配,则验证不通过;或,
082,若深度图像与授权用户的深度模板不匹配,则验证不通过。
当计算机可执行指令被一个或多个处理器40执行时,处理器40还可以执行以下步骤:
091,若红外图像中不存在人脸时,则返回通过红外摄像头12获取红外图像的步骤(步骤03);或
092,若红外图像中的人脸与授权用户的人脸模板不匹配,则返回通过红外摄像头12获取红外图像的步骤(步骤03);或
093,若深度图像与授权用户的深度模板不匹配,则返回通过红外摄像头12获取红外图像的步骤(步骤03)。
红外摄像头12在预定次数内连续采集红外图像后,当计算机可执行指令被一个或多个处理器40执行时,处理器40还可以执行以下步骤:
010,若红外图像不存在人脸,则控制可动模块10运动以收容至壳体101内;或,
011,若人脸与授权用户的人脸模板均不匹配,则控制可动模块10运动以收容至101壳体内;或,
012,若深度图像与授权用户的深度模板均不匹配,则控制可动模块10运动以收容至壳体101内。
当计算机可执行指令被一个或多个处理器40执行时,处理器40还可以执行以下步骤:
0211,控制检测模块26检测可动模块10上的参考位置是否到达预设位置;及
0212,若参考位置到达预设位置,则控制支架11停止运动。
在本说明书的描述中,参考术语“一个实施方式”、“一些实施方式”、“示意性实施方式”、“示例”、“具体示例”、或“一些示例”等的描述意指结合所述实施方式或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施方式或示例中。在本说明书中,对上述术语的示意性表述不一定指的是相同的实施方式或示例。而且,描述的具体特征、结构、材料或者特点可以在任何的一个或多个实施方式或示例中以合适的方式结合。
流程图中或在此以其他方式描述的任何过程或方法描述可以被理解为,表示包括一个或更多个用于执行特定逻辑功能或过程的步骤的可执行指令的代码的模块、片段或部分,并且本发明的优选实施方式的范围包括另外的执行,其中可以不按所示出或讨论的顺序,包括根据所涉及的功能按基本同时的方式或按相反的顺序,来执行功能,这应被本发明的实施例所属技术领域的技术人员所理解。
在流程图中表示或在此以其他方式描述的逻辑和/或步骤,例如,可以被认为是用于执行逻辑功能的可执行指令的定序列表,可以具体执行在任何计算机可读介质中,以供指令执行系统、装置或设备(如基于计算机的系统、包括处理器的系统或其他可以从指令执行系统、装置或设备取指令并执行指令的系统)使用,或结合这些指令执行系统、装置或设备而使用。就本说明书而言,"计算机可读介质"可以是任何可以包含、存储、通信、传播或传输程序以供指令执行系统、装置或设备或结合这些指令执行系统、装置或设备而使用的装置。计算机可读介质的更具体的示例(非穷尽性列表)包括以下:具有一个或多个布线的电连接部(电子装置),便携式计算机盘盒(磁装置),随机存取存储器(RAM),只读存储器(ROM),可擦除可编辑只读存储器(EPROM或闪速存储器),光纤装置,以及便携式光盘只读存储器(CDROM)。另外,计算机可读介质甚至可以是可在其上打印所述程序的纸或其他合适的介质,因为可以例如通过对纸或其他介质进行光学扫描,接着进行编辑、解译或必要时以其他合适方式进行处理来以电子方式获得所述程序,然后将其存储在计算机存储器中。
应当理解,本发明的各部分可以用硬件、软件、固件或它们的组合来执行。在上述实施方式中,多个步骤或方法可以用存储在存储器中且由合适的指令执行系统执行的软件或固件来执行。例如,如果用硬件来执行,和在另一实施方式中一样,可用本领域公知的下列技术中的任一项或他们的组合来执行:具有用于对数据信号执行逻辑功能的逻辑门电路的离散逻辑电路,具有合适的组合逻辑门电路的专用集成电路,可编程门阵列(PGA),现场可编程门阵列(FPGA)等。
本技术领域的普通技术人员可以理解执行上述实施方法携带的全部或部分步骤是可以通过程序来指令相关的硬件完成,所述的程序可以存储于一种计算机可读存储介质中,该程序在执行时,包括方法实施例的步骤之一或其组合。
此外,在本发明各个实施例中的各功能单元可以集成在一个处理模块中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个模块中。上述集成的模块既可以采用硬件的形式执行,也可以采用软件功能模块的形式执行。所述集成的模块如果以软件功能模块的形式执行并作为独立的产品销售或使用时,也可以存储在一个计算机可读取存储介质中。
上述提到的存储介质可以是只读存储器,磁盘或光盘等。尽管上面已经示出和描述了本发明的实施例,可以理解的是,上述实施例是示例性的,不能理解为对本发明的限制,本领域的普通技术人员在本发明的范围内可以对上述实施例进行变化、修改、替换和变型。

Claims (21)

1.一种验证方法,其特征在于,所述验证方法包括:
判断可动模块是否被触发,所述可动模块收容在壳体内并能够从所述壳体中伸出,所述可动模块包括支架、设置在所述支架上的红外摄像头、及设置在所述支架上的结构光投射器;
若所述可动模块被触发,通过所述支架带着所述红外摄像头及所述结构光投射器朝所述壳体外运动以伸出所述壳体,所述红外摄像头与所述结构光投射器初始化;
通过所述红外摄像头获取红外图像;
判断所述红外图像中是否存在人脸;
当所述红外图像中存在人脸时,判断所述人脸是否与授权用户的人脸模板匹配;
当所述人脸与授权用户的人脸模板匹配时,通过所述结构光投射器与所述红外摄像头获取激光图案,根据所述激光图案获取深度图像并判断所述深度图像是否与授权用户的深度模板匹配;和
若所述深度图像与授权用户的深度模板匹配,则验证通过。
2.根据权利要求1所述的验证方法,其特征在于,所述判断所述红外图像中是否存在人脸是可信执行环境中进行的;和/或
所述判断所述人脸是否与授权用户的人脸模板匹配是可信执行环境中进行的;和/或
所述判断所述深度图像是否与授权用户的深度模板匹配是可信执行环境中进行的。
3.根据权利要求1所述的验证方法,其特征在于,所述验证方法还包括:
若所述人脸与授权用户的人脸模板不匹配,则验证不通过;或,
若所述深度图像与授权用户的深度模板不匹配,则验证不通过。
4.根据权利要求1所述的验证方法,其特征在于,所述验证方法还包括:
若所述红外图像中不存在人脸时,则返回通过所述红外摄像头获取红外图像的步骤;或
若所述人脸与授权用户的人脸模板不匹配,则返回通过所述红外摄像头获取红外图像的步骤;或
若所述深度图像与授权用户的深度模板不匹配,则返回通过所述红外摄像头获取红外图像的步骤。
5.根据权利要求4所述的验证方法,其特征在于,所述红外摄像头在预定次数内连续采集所述红外图像后,所述验证方法还包括:
若所述红外图像不存在人脸,则所述可动模块运动以收容至所述壳体内;或
若所述人脸与授权用户的人脸模板不匹配,则所述可动模块运动以收容至所述壳体内;或
若所述深度图像与授权用户的深度模板不匹配,则所述可动模块运动以收容至所述壳体内。
6.根据权利要求1所述的验证方法,其特征在于,所述支架上设置有参考位置,通过所述支架带着所述红外摄像头及所述结构光投射器朝所述壳体外运动以伸出所述壳体的步骤包括:
检测所述可动模块上的所述参考位置是否到达预设位置;
若所述参考位置到达预设位置,则所述支架停止运动。
7.一种验证装置,其特征在于,所述验证装置包括:
可动模块,所述可动模块收容在壳体内并能够从所述壳体中伸出,所述可动模块包括支架、设置在所述支架上的红外摄像头、及设置在所述支架上的结构光投射器,当所述可动模块被触发时,所述支架用于带着所述红外摄像头及所述结构光投射器朝所述壳体外运动以伸出所述壳体,所述红外摄像头与所述结构光投射器初始化;所述红外摄像头用于获取红外图像;所述红外摄像头与所述结构光投射器用于获取激光图案;及
处理器,所述处理器用于:
判断所述可动模块是否被触发;
判断所述红外图像中是否存在人脸;
在所述红外图像中存在人脸时,判断所述人脸是否与授权用户的人脸模板匹配;
当所述人脸与授权用户的人脸模板匹配时,根据所述激光图案获取深度图像并判断所述深度图像是否与授权用户的深度模板匹配;及
在所述深度图像与授权用户的深度模板匹配时,确定验证通过。
8.根据权利要求7所述的验证装置,其特征在于,所述处理器还用于形成可行执行环境,所述判断所述红外图像中是否存在人脸在所述可信执行环境中进行;和/或
所述判断所述人脸是否与授权用户的人脸模板匹配在所述可信执行环境中进行;和/或
所述判断所述深度图像是否与授权用户的深度模板匹配在所述可信执行环境中进行。
9.根据权利要求7所述的验证装置,其特征在于,所述处理器还用于:
在所述人脸与授权用户的人脸模板不匹配时,确定验证不通过;或,
在所述深度图像与授权用户的深度模板不匹配时,确定验证不通过。
10.根据权利要求7所述的验证装置,其特征在于,所述红外摄像头还用于在所述红外图像中不存在人脸时获取红外图像;或
所述红外摄像头还用于在所述人脸与授权用户的人脸模板不匹配时获取红外图像;或
所述红外摄像头还用于在所述深度图像与授权用户的深度模板不匹配时获取红外图像。
11.根据权利要求10所述的验证装置,其特征在于,所述红外摄像头在预定次数内连续采集所述红外图像后,
所述可动模块还用于在所述红外图像不存在人脸时运动以收容至所述壳体内;或
所述可动模块还用于在所述人脸与授权用户的人脸模板不匹配时运动以收容至所述壳体内;或
所述可动模块还用于在所述深度图像与授权用户的深度模板不匹配时运动以收容至所述壳体内。
12.根据权利要求7所述的验证装置,其特征在于,所述验证装置还包括检测模块,所述支架上设置有参考位置,所述检测模块用于检测所述可动模块上的所述参考位置是否到达预设位置;在所述参考位置到达预设位置时,所述支架停止运动。
13.根据权利要求12所述的验证装置,其特征在于,所述检测模块包括磁性器件、霍尔传感器,所述磁性器件设置在所述参考位置上,所述霍尔传感器设置在所述预设位置上。
14.根据权利要求7-13任意一项所述的验证装置,其特征在于,所述验证装置包括手机、平板电脑、智能手环、智能头盔中的任意一种。
15.一种验证装置,其特征在于,所述验证装置包括:
可动模块,所述可动模块收容在壳体内并能够从所述壳体中伸出,所述可动模块包括支架、设置在所述支架上的红外摄像头、及设置在所述支架上的结构光投射器,当所述可动模块被触发时,所述支架用于带着所述红外摄像头及所述结构光投射器朝所述壳体外运动以伸出所述壳体,所述红外摄像头与所述结构光投射器初始化;所述红外摄像头用于获取红外图像;所述红外摄像头与所述结构光投射器用于获取激光图案;
第一判断模块,所述第一判断模块用于判断所述可动模块是否被触发;
第二判断模块,所述第二判断模块用于判断所述红外图像中是否存在人脸;
第三判断模块,所述第三判断模块用于在所述红外图像中存在人脸时,判断所述人脸是否与授权用户的人脸模板匹配;
获取模块,所述获取模块用于在所述人脸与授权用户的人脸模板匹配时,根据所述激光图案获取深度图像;
第四判断模块,所述第四判断模块用于在所述人脸与授权用户的人脸模板匹配时,判断所述深度图像是否与授权用户的深度模板匹配;及
验证模块,所述验证模块用于在所述深度图像与授权用户的深度模板匹配时,确定验证通过。
16.一种计算机可读存储介质,用于验证装置,所述验证装置包括可动模块,所述可动模块收容在壳体内并能够从所述壳体中伸出,所述可动模块包括支架、设置在所述支架上的红外摄像头、及设置在所述支架上的结构光投射器,所述支架能够带着所述红外摄像头及所述结构光投射器朝所述壳体外运动以伸出所述壳体,所述红外摄像头能够获取红外图像,所述红外摄像头与所述结构光投射器能够获取激光图案,其特征在于,所述计算机可读存储介质用于存储一个或多个计算机可执行指令,当所述一个或多个计算机可执行指令被一个或多个处理器执行时,所述一个或多个处理器执行以下验证方法:
判断所述可动模块是否被触发;
若所述可动模块被触发,控制所述支架带着所述红外摄像头及所述结构光投射器朝所述壳体外运动以伸出所述壳体、及控制所述红外摄像头与所述结构光投射器初始化;
控制所述红外摄像头获取红外图像;
判断所述红外图像中是否存在人脸;
当所述红外图像中存在人脸时,判断所述人脸是否与授权用户的人脸模板匹配;
当所述人脸与授权用户的人脸模板匹配时,控制所述结构光投射器与所述红外摄像头获取激光图案,根据所述激光图案获取深度图像并判断所述深度图像是否与授权用户的深度模板匹配;和
若所述深度图像与授权用户的深度模板匹配,则验证通过。
17.根据权利要求16所述的计算机可读存储介质,其特征在于,所述判断所述红外图像中是否存在人脸是可信执行环境中进行的;和/或
所述判断所述人脸是否与授权用户的人脸模板匹配是可信执行环境中进行的;和/或
所述判断所述深度图像是否与授权用户的深度模板匹配是可信执行环境中进行的。
18.根据权利要求16所述的计算机可读存储介质,其特征在于,当所述一个或多个计算机可执行指令被所述一个或多个处理器执行时,所述一个或多个处理器还执行以下验证方法:
若所述人脸与授权用户的人脸模板不匹配,则验证不通过;或,
若所述深度图像与授权用户的深度模板不匹配,则验证不通过。
19.根据权利要求16所述的计算机可读存储介质,其特征在于,当所述一个或多个计算机可执行指令被所述一个或多个处理器执行时,所述一个或多个处理器还执行以下验证方法:
若所述红外图像中不存在人脸时,则返回控制所述红外摄像头获取红外图像的步骤;或
若所述人脸与授权用户的人脸模板不匹配,则返回控制所述红外摄像头获取红外图像的步骤;或
若所述深度图像与授权用户的深度模板不匹配,则返回控制所述红外摄像头获取红外图像的步骤。
20.根据权利要求19所述的计算机可读存储介质,其特征在于,所述红外摄像头在预定次数内连续采集所述红外图像后,当所述一个或多个计算机可执行指令被所述一个或多个处理器执行时,所述一个或多个处理器还执行以下验证方法:
若所述红外图像不存在人脸,则控制所述可动模块运动以收容至所述壳体内;或
若所述人脸与授权用户的人脸模板不匹配,则控制所述可动模块运动以收容至所述壳体内;或
若所述深度图像与授权用户的深度模板不匹配,则控制所述可动模块运动以收容至所述壳体内。
21.根据权利要求16所述的计算机可读存储介质,其特征在于,所述验证装置还包括检测模块,所述支架上设置有参考位置,控制所述支架带着所述红外摄像头及所述结构光投射器朝所述壳体外运动以伸出所述壳体的步骤包括:
控制所述检测模块检测所述可动模块上的所述参考位置是否到达预设位置;及
若所述参考位置到达预设位置,则控制所述支架停止运动。
CN201810574771.XA 2018-06-06 2018-06-06 验证方法、验证装置及计算机可读存储介质 Active CN108924340B (zh)

Priority Applications (4)

Application Number Priority Date Filing Date Title
CN201810574771.XA CN108924340B (zh) 2018-06-06 2018-06-06 验证方法、验证装置及计算机可读存储介质
PCT/CN2019/083370 WO2019233199A1 (zh) 2018-06-06 2019-04-19 验证方法、验证装置及计算机可读存储介质
US16/424,426 US10942999B2 (en) 2018-06-06 2019-05-28 Verification method, verification device, electronic device and computer readable storage medium
EP19178415.6A EP3579131B1 (en) 2018-06-06 2019-06-05 Verification method, verification device, electronic device and computer readable storage medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810574771.XA CN108924340B (zh) 2018-06-06 2018-06-06 验证方法、验证装置及计算机可读存储介质

Publications (2)

Publication Number Publication Date
CN108924340A true CN108924340A (zh) 2018-11-30
CN108924340B CN108924340B (zh) 2020-09-18

Family

ID=64418456

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810574771.XA Active CN108924340B (zh) 2018-06-06 2018-06-06 验证方法、验证装置及计算机可读存储介质

Country Status (1)

Country Link
CN (1) CN108924340B (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109683698A (zh) * 2018-12-25 2019-04-26 Oppo广东移动通信有限公司 支付验证方法、装置、电子设备和计算机可读存储介质
CN109753926A (zh) * 2018-12-29 2019-05-14 深圳三人行在线科技有限公司 一种虹膜识别的方法和设备
WO2019233199A1 (zh) * 2018-06-06 2019-12-12 Oppo广东移动通信有限公司 验证方法、验证装置及计算机可读存储介质
CN116418976A (zh) * 2022-11-24 2023-07-11 北京的卢铭视科技有限公司 结构光相机的产测sdk授权方法、电子设备及存储介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105554196A (zh) * 2016-01-26 2016-05-04 孔岳 一种全屏手机
US20160309329A1 (en) * 2014-05-14 2016-10-20 The Regents Of The University Of California Sensor-assisted user authentication
US20170053109A1 (en) * 2015-08-17 2017-02-23 Lg Electronics Inc. Mobile terminal and method for controlling the same
CN106991377A (zh) * 2017-03-09 2017-07-28 广东欧珀移动通信有限公司 结合深度信息的人脸识别方法、人脸识别装置和电子装置
CN107729836A (zh) * 2017-10-11 2018-02-23 广东欧珀移动通信有限公司 人脸识别方法及相关产品
CN107766824A (zh) * 2017-10-27 2018-03-06 广东欧珀移动通信有限公司 人脸识别方法、移动终端以及计算机可读存储介质

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20160309329A1 (en) * 2014-05-14 2016-10-20 The Regents Of The University Of California Sensor-assisted user authentication
US20170053109A1 (en) * 2015-08-17 2017-02-23 Lg Electronics Inc. Mobile terminal and method for controlling the same
CN105554196A (zh) * 2016-01-26 2016-05-04 孔岳 一种全屏手机
CN106991377A (zh) * 2017-03-09 2017-07-28 广东欧珀移动通信有限公司 结合深度信息的人脸识别方法、人脸识别装置和电子装置
CN107729836A (zh) * 2017-10-11 2018-02-23 广东欧珀移动通信有限公司 人脸识别方法及相关产品
CN107766824A (zh) * 2017-10-27 2018-03-06 广东欧珀移动通信有限公司 人脸识别方法、移动终端以及计算机可读存储介质

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019233199A1 (zh) * 2018-06-06 2019-12-12 Oppo广东移动通信有限公司 验证方法、验证装置及计算机可读存储介质
US10942999B2 (en) 2018-06-06 2021-03-09 Guangdong Oppo Mobile Telecommunications Corp., Ltd. Verification method, verification device, electronic device and computer readable storage medium
CN109683698A (zh) * 2018-12-25 2019-04-26 Oppo广东移动通信有限公司 支付验证方法、装置、电子设备和计算机可读存储介质
CN109753926A (zh) * 2018-12-29 2019-05-14 深圳三人行在线科技有限公司 一种虹膜识别的方法和设备
CN116418976A (zh) * 2022-11-24 2023-07-11 北京的卢铭视科技有限公司 结构光相机的产测sdk授权方法、电子设备及存储介质
CN116418976B (zh) * 2022-11-24 2023-12-12 北京的卢铭视科技有限公司 结构光相机的产测sdk授权方法、电子设备及存储介质

Also Published As

Publication number Publication date
CN108924340B (zh) 2020-09-18

Similar Documents

Publication Publication Date Title
CN108924340A (zh) 验证方法、验证装置及计算机可读存储介质
CN106056036B (zh) 使用可见光成像的虹膜获取
WO2019233199A1 (zh) 验证方法、验证装置及计算机可读存储介质
CN108563936A (zh) 任务执行方法、终端设备及计算机可读存储介质
CN106233295B (zh) 显示器集成式用户分类、安全及指纹系统
CN109635539A (zh) 一种人脸识别方法及电子设备
EP2701097A2 (en) Method and device for authenticating a user
US11074467B2 (en) Anti-spoofing of transparent fake object overlays with optical sensing modules
CN108881691A (zh) 控制方法、微处理器、计算机可读存储介质及计算机设备
CN103177242A (zh) 手指静脉认证装置
CN108229345A (zh) 一种驾驶员检测系统
CN108446638A (zh) 身份验证方法、装置、存储介质及电子设备
CN108647504B (zh) 实现信息安全显示的方法及系统
CN108959880A (zh) 验证方法、验证装置及计算机可读存储介质
CN109960964A (zh) 非接触式掌纹获取装置及其方法
US11854310B2 (en) Face liveness detection method and related apparatus
CN109785471A (zh) 车辆及其后背门的控制方法、控制装置
CN109271916A (zh) 电子装置及其控制方法、控制装置和计算机可读存储介质
CN108629278B (zh) 基于深度相机实现信息安全显示的系统及方法
CN108777784B (zh) 深度获取方法和装置、电子装置、计算机设备和存储介质
WO2019233168A1 (zh) 验证方法、验证装置、电子设备和计算机可读存储介质
CN108513661A (zh) 身份鉴权方法、身份鉴权装置、和电子设备
CN109284591A (zh) 人脸解锁方法及装置
US11410466B2 (en) Electronic device for performing biometric authentication and method of operating the same
CN107241193A (zh) 验证方法、电子装置和计算机可读存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant