CN109543628B - 一种人脸解锁、底库录入方法、装置和电子设备 - Google Patents

一种人脸解锁、底库录入方法、装置和电子设备 Download PDF

Info

Publication number
CN109543628B
CN109543628B CN201811427783.6A CN201811427783A CN109543628B CN 109543628 B CN109543628 B CN 109543628B CN 201811427783 A CN201811427783 A CN 201811427783A CN 109543628 B CN109543628 B CN 109543628B
Authority
CN
China
Prior art keywords
target image
image
base
scene
library
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201811427783.6A
Other languages
English (en)
Other versions
CN109543628A (zh
Inventor
任彦斌
刘倩
黄怡菲
董浩
丁岩
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Kuangshi Technology Co Ltd
Original Assignee
Beijing Kuangshi Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Kuangshi Technology Co Ltd filed Critical Beijing Kuangshi Technology Co Ltd
Priority to CN201811427783.6A priority Critical patent/CN109543628B/zh
Publication of CN109543628A publication Critical patent/CN109543628A/zh
Application granted granted Critical
Publication of CN109543628B publication Critical patent/CN109543628B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172Classification, e.g. identification
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31User authentication
    • G06F21/32User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/168Feature extraction; Face representation

Abstract

本发明提供了一种人脸解锁、底库录入方法、装置和电子设备,涉及图像处理的技术领域,该方法包括:获取目标图像;若所述目标图像满足解锁标准条件,则查找与所述目标图像的场景类型相匹配的特征底库;所述场景类型为拍摄目标图像的场景,特征底库中包括目标对象进行人脸检测之后的特征信息和特征信息的场景属性标签;若查找到所述特征底库,且所述特征底库中所包含的场景类型与所述目标图像的场景类型相同,则基于所述特征底库和所述目标图像确定是否执行解锁操作,本发明缓解了现有的人脸解锁方案容易受到环境等因素干扰导致解锁成功率较低的技术问题。

Description

一种人脸解锁、底库录入方法、装置和电子设备
技术领域
本发明涉及图像处理的技术领域,尤其是涉及一种人脸解锁、底库录入方法、装置和电子设备。
背景技术
随着人脸解锁在人们实际生活中应用越来越广泛,在人脸解锁过程中,往往会碰到夜晚或者暗光等和正常光差异比较的场景下,解锁时间往往会变的很长或者无法解锁的现象。其主要是由于解锁方案在这种场景下拍摄到的图片质量和正常光差异较大,和正常光条件下录制的底库特征差异比较大通过率过低引起。为了提高拍摄的图片质量,很多电子设备终端会在这些暗光或者夜视等特殊场景配备补光灯或者红外灯等补光设备进行补光操作。即使进行了补光,在这种场景下拍摄出来的图像帧往往和正常光环境拍摄的特征差异还是比较大。
当前大多人脸识别方案都是采用单一模型单一阀值尽量去覆盖所有场景,但是这样往往会牺牲模型在特定场景模型识别率来换取其他场景的成功率模型,而且也使得训练模型的难度变得比较大。最终模型的表现也不是特别优秀。
发明内容
有鉴于此,本发明的目的在于提供一种人脸解锁、底库录入方法、装置和电子设备,以缓解现有的人脸解锁方案容易受到环境等因素干扰导致解锁成功率较低的技术问题。
第一方面,本发明实施例提供了一种人脸解锁方法,包括:获取目标图像;若所述目标图像满足解锁标准条件,则查找与所述目标图像的场景类型相匹配的特征底库;所述特征底库中包括目标对象进行人脸检测之后的特征信息和特征信息的场景属性标签;若查找到所述特征底库,且所述特征底库中所包含的场景类型与所述目标图像的场景类型相同,则基于所述特征底库和所述目标图像确定是否执行解锁操作。
进一步地,所述方法还包括:若查找到所述特征底库,且所述特征底库中所包含的场景类型与所述目标图像的场景类型不相同,则检测所述目标图像是否满足底库录入标准;若满足,则确定所述目标图像所属场景类型的特征底库。
进一步地,确定所述目标图像所属场景类型的特征底库包括:将所述目标图像的特征信息及其对应的场景属性标签确定为所述目标图像所属场景类型的特征底库,其中,所述场景属性标签用于确定所述目标图像的场景类型。
进一步地,所述方法还包括:若所述目标图像不满足所述底库录入标准,向用户返回解锁失败的解锁比对结果。
进一步地,所述方法还包括:若未查找到所述特征底库,则将所述目标图像与默认底库进行比对;若比对成功,则执行检测所述目标图像是否满足所述底库录入标准的步骤。
进一步地,通过以下方式判断所述目标图像是否满足所述解锁标准条件:通过预设模型对所述目标图像进行检测,得到检测结果;若所述检测结果满足所述解锁标准条件,则确定所述目标图像满足所述解锁标准条件。
进一步地,通过预设模型对所述目标图像进行检测,得到检测结果包括:查找与所述目标图像的场景类型相匹配的处理模型;若查找到所述相匹配的处理模型,则将所述相匹配的处理模型作为所述预设模型,并利用所述相匹配的处理模型对所述目标图像进行检测;若未查找到所述相匹配的处理模型,则将默认处理模型作为所述预设模型,并利用所述默认处理模型对所述目标图像进行检测。
进一步地,所述方法还包括:获取待录入底库中的待录入图像,并确定所述待录入图像的场景属性标签;基于所述场景属性标签确定相匹配的处理模型;基于所述相匹配的处理模型对所述待录入图像进行处理,以根据第一处理结果确定是否将所述待录入图像添加至所述特征底库中。
进一步地,根据第一处理结果确定是否将所述待录入图像添加至所述特征底库中包括:基于所述第一处理结果判断所述待录入图像是否满足底库录入标准;若满足,则将所述待录入图像的特征信息确定为特征底库,并为所述待录入图像的特征信息添加用于表征场景类型的场景属性标签。
进一步地,所述方法还包括:若基于所述场景属性标签未确定出相匹配的处理模型,则选择默认处理模型对所述待录入图像进行处理,得到第二处理结果;根据所述第二处理结果确定是否将所述待录入图像添加至所述特征底库中。
第二方面,本发明实施例提供了一种底库录入方法,包括:获取待录入底库中的待录入图像,并确定所述待录入图像的场景属性标签;基于场景属性标签确定相匹配的处理模型;若匹配出,则基于相匹配的处理模型对所述待录入图像进行处理,得到第一处理结果;若所述第一处理结果满足底库录入标准,则将提取出来的待处理图像的特征信息存入底库,并保存当前底库的场景类型标签。
进一步地,所述方法还包括:若未匹配出,则选择默认处理模型对所述待录入图像进行处理,得到第二处理结果;若所述第二处理结果满足底库录入标准,则将提取出来的待处理图像的特征信息存入底库,并保存当前底库的场景类型标签。
第三方面,本发明实施例提供了一种人脸解锁装置,包括:获取单元,用于获取目标图像;查找单元,用于若所述目标图像满足解锁标准条件,则查找与所述目标图像的场景类型相匹配的特征底库;所述特征底库中包括目标对象进行人脸检测之后的特征信息和特征信息的场景属性标签;解锁单元,用于若查找到所述特征底库,且所述特征底库中所包含的场景类型与所述目标图像的场景类型相同,则基于所述特征底库和所述目标图像确定是否执行解锁操作。
第四方面,本发明实施例提供了一种底库录入装置,包括:第二获取单元,用于获取待录入底库中的待录入图像,并确定所述待录入图像的场景属性标签;确定单元,用于基于场景属性标签确定相匹配的处理模型;处理单元,用于若匹配出,则基于相匹配的处理模型对所述待录入图像进行处理,得到第一处理结果;底库录入单元,用于若所述第一处理结果满足底库录入标准,则将提取出来的待处理图像的特征信息存入底库,并保存当前底库的场景类型标签。
第五方面,本发明实施例提供了一种电子设备,包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现上述第一方面中任一项所述的方法。
第六方面,本发明实施例提供了一种具有处理器可执行的非易失的程序代码的计算机可读介质,所述程序代码使所述处理器执行上述第一方面中任一项所述的方法。
在本发明实施例中,首先获取目标图像,如果目标图像满足解锁标准条件,则查找与目标图像的场景类型相匹配的特征底库,若查找到特征底库,且特征底库中所包含的场景类型与目标图像的场景类型相同,则基于特征底库和目标图像确定是否执行解锁操作。
在本实施例中,为相同识别对象根据不同场景保存多个特征底库,在实际比对时根据场景选择匹配的特征底库进行检测和比对操作以提高比对的成功率和效率,进而缓解现有的人脸解锁方案容易受到环境等因素干扰导致解锁成功率较低的技术问题。
本发明的其他特征和优点将在随后的说明书中阐述,并且,部分地从说明书中变得显而易见,或者通过实施本发明而了解。本发明的目的和其他优点在说明书、权利要求书以及附图中所特别指出的结构来实现和获得。
为使本发明的上述目的、特征和优点能更明显易懂,下文特举较佳实施例,并配合所附附图,作详细说明如下。
附图说明
为了更清楚地说明本发明具体实施方式或现有技术中的技术方案,下面将对具体实施方式或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施方式,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是根据本发明实施例的一种电子设备的示意图;
图2是根据本发明实施例的一种人脸解锁方法的流程图;
图3是根据本发明实施例的一种底库录入方法的流程图;
图4是根据本发明实施例的一种人脸解锁方法的流程图;
图5是根据本发明实施例的一种人脸解锁装置的示意图;
图6是根据本发明实施例的一种底库录入装置的示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合附图对本发明的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
实施例1:
首先,参照图1来描述用于实现本发明实施例的电子设备100,该电子设备可以用于运行本发明各实施例的人脸解锁方法。
如图1所示,电子设备100包括一个或多个处理器102、一个或多个存储器104、输入装置106、输出装置108以及摄像机110,这些组件通过总线系统112和/或其它形式的连接机构(未示出)互连。应当注意,图1所示的电子设备100的组件和结构只是示例性的,而非限制性的,根据需要,所述电子设备也可以具有其他组件和结构。
所述处理器102可以采用数字信号处理器(DSP,Digital Signal Processing)、现场可编程门阵列(FPGA,Field-Programmable Gate Array)、可编程逻辑阵列(PLA,Programmable Logic Array)和ASIC(Application Specific Integrated Circuit)中的至少一种硬件形式来实现,所述处理器102可以是中央处理单元(CPU,Central ProcessingUnit)、图形处理器(GPU,Graphics Processing Unit)或者具有数据处理能力和/或指令执行能力的其它形式的处理单元,并且可以控制所述电子设备100中的其它组件以执行期望的功能。
所述存储器104可以包括一个或多个计算机程序产品,所述计算机程序产品可以包括各种形式的计算机可读存储介质,例如易失性存储器和/或非易失性存储器。所述易失性存储器例如可以包括随机存取存储器(RAM)和/或高速缓冲存储器(cache)等。所述非易失性存储器例如可以包括只读存储器(ROM)、硬盘、闪存等。在所述计算机可读存储介质上可以存储一个或多个计算机程序指令,处理器102可以运行所述程序指令,以实现下文所述的本发明实施例中(由处理器实现)的客户端功能以及/或者其它期望的功能。在所述计算机可读存储介质中还可以存储各种应用程序和各种数据,例如所述应用程序使用和/或产生的各种数据等。
所述输入装置106可以是用户用来输入指令的装置,并且可以包括键盘、鼠标、麦克风和触摸屏等中的一个或多个。
所述输出装置108可以向外部(例如,用户)输出各种信息(例如,图像或声音),并且可以包括显示器、扬声器等中的一个或多个。
所述摄像机110用于进行图像采集,其中,摄像机所采集的目标图像经过所述人脸解锁方法进行处理之后得到是否执行解锁操作的结果,例如,摄像机可以拍摄用户期望的目标图像,然后,将该目标图像经过所述人脸解锁方法进行处理之后得到是否执行解锁操作的结果,摄像机还可以将所拍摄的图像存储在所述存储器104中以供其它组件使用。
示例性地,用于实现根据本发明实施例的人脸解锁方法的电子设备可以被实现为诸如智能手机、平板电脑等智能移动终端。
实施例2:
根据本发明实施例,提供了一种人脸解锁方法的实施例,需要说明的是,在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行,并且,虽然在流程图中示出了逻辑顺序,但是在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤。
图2是根据本发明实施例的一种人脸解锁方法的流程图,如图2所示,该方法包括如下步骤:
步骤S202,获取目标图像;
步骤S204,若所述目标图像满足解锁标准条件,则查找与所述目标图像的场景类型相匹配的特征底库;所述特征底库中包括目标对象的人脸特征信息和人脸特征信息所属的场景属性标签;
特征底库用于保存已进行过人脸识别的人脸特征信息(例如,保存人脸图像的人脸特征向量等)。
步骤S206,若查找到所述特征底库,且所述特征底库中所包含的场景类型与所述目标图像的场景类型相同,则基于所述特征底库和所述目标图像确定是否执行解锁操作。
在本发明实施例中,首先获取目标图像,如果目标图像满足解锁标准条件,则查找与目标图像的场景类型相匹配的特征底库,若查找到特征底库,且特征底库中所包含的场景类型与目标图像的场景类型相同,则基于特征底库和目标图像确定是否执行解锁操作。
在本实施例中,为相同识别对象根据不同场景保存多个特征底库,在实际比对时根据场景选择匹配的特征底库进行检测和比对操作以提高比对的成功率和效率,进而缓解现有的人脸解锁方案容易受到环境等因素干扰导致解锁成功率较低的技术问题。下面将具体的实施例介绍上述的人脸解锁方法。
通过上述步骤S202至步骤S206所描述的方法可知,在本实施例中,首先,通过终端设备的摄像装置获取用于对终端设备进行解锁的目标图像。终端设备在进行图像的录入之前,需要进行场景检测,并根据场景检测结果开启相关终端设备上的相关设备,例如,在暗光或者夜视时开启补光灯或者红外灯等,具体根据实际需要来进行设定。
在通过摄像装置拍摄得到目标图像之后,就可以为该目标图像添加场景属性标签,以通过该场景属性标签确定终端设备拍摄该目标图像的场景类型。例如,是在红外灯打开时拍摄的图像,或者是在补光灯开启时拍摄的图像。然后,判断该目标图像是否满足解锁标准条件。
在本实施例中,场景属性标签为用于表征目标图像所处场景的标签信息,例如,“正常光”和“暗光”等。可选地,可以用其他计算机能识别的符号来表示该场景属性标签,例如,通过“00”表示“正常光”,“01”表示“暗光”。除此之外,还可以采用其他计算机能识别的文字或者符号来表示场景属性标签,本实施例中不做具体限定。
在一个可选的实施方式中,可以通过以下方式判断所述目标图像是否满足所述解锁标准条件,具体包括:
通过预设模型对所述目标图像进行检测,得到检测结果;
若所述检测结果满足所述解锁标准条件,则确定所述目标图像满足所述解锁标准条件。
具体地,在本实施例中,在获取到目标图像之后,可以利用预设模型对目标图像进行检测,得到检测结果。其中,预设模型可以根据实际需要来进行设定,例如,在人脸检测模型,或者人脸识别模型,或者活体检测模型等等,具体根据实际应用场景来进行设定。
可选地,通过预设模型对所述目标图像进行检测,得到检测结果包括如下步骤:
步骤S11,查找与所述目标图像的场景类型相匹配的处理模型;
步骤S12,若查找到所述相匹配的处理模型,则将所述相匹配的处理模型作为所述预设模型,并利用所述相匹配的处理模型对所述目标图像进行检测;
步骤S13,若未查找到所述相匹配的处理模型,则将默认处理模型作为所述预设模型,并利用所述默认处理模型对所述目标图像进行检测。
在本实施例中,在对终端设备进行解锁时,可以根据目标图像的场景属性标签查找与目标图像的场景类型相匹配的处理模型。如果查找到相匹配的处理模型,则将相匹配的处理模型作为该预设模型,并利用相匹配的处理模型对目标图像进行检测。如果未查找到相匹配的处理模型,则将默认处理模型作为预设模型,并利用默认处理模型对目标图像进行检测。
需要说明的是,在本实施例中,预设模型包括通过阈值,该通过阈值即为目标图像的检测结果满足解锁标准条件的阈值。
如果单一处理模型的处理能力比较强,只要调整通过阀值就可以满足多种场景需求,此时,则需要根据场景类型选择出匹配的通过阀值。如果单一处理模型处理能力比较弱,每个场景需要特定模型处理,则需要能够根据场景类型选择可以匹配的模型以及其所对应的通过阀值。
也就是说,如果单一处理模型的处理能力比较强,那么可以通过调整通过阈值的方式将处理模型应用在多种场景类型下。如果单一处理模型的处理能力比较弱,那么可以为每个场景类型都设置对应的处理模型。
在本实施例中,若查找到所述特征底库,且所述特征底库中所包含的场景类型与所述目标图像的场景类型不相同,则检测所述目标图像是否满足底库录入标准;若满足,则确定所述目标图像所属场景类型的特征底库。若未查找到所述特征底库,则将所述目标图像与默认底库进行比对;若比对成功,则执行检测所述目标图像是否满足所述底库录入标准的步骤。
需要说明的是,在本实施例中,特征底库的数量可以为多个,每个特征底库对应一个场景类型。如果查找到特征底库,则表明存在目标对象在特定场景类型下拍摄的人脸图像经过人脸检测之后的特征信息,以及特征信息的场景属性标签。如果在多个特征底库中未查找到与目标图像的场景类型的特征底库,或者,如果多个特征底库中所包含的场景类型与目标图像的场景类型不同,则确定出在当前拍摄场景下,还未录入特征底库。此时,可以检测目标图像的图像质量是否满足底库录入标准。如果满足,就可以将目标图像的特征信息确定为目标图像所属场景类型的特征底库。若所述目标图像不满足所述底库录入标准,向用户返回解锁失败的解锁比对结果。
可选地,确定所述目标图像所属场景类型的特征底库包括:
将所述目标图像的特征信息及其对应的场景属性标签确定为所述目标图像所属场景类型的特征底库,其中,所述场景属性标签用于确定所述目标图像的场景类型。
在本实施例中,可以提取目标图像的特征信息,并为该特征信息确定对应的场景属性标签。进而,将该目标图像的特征信息及其对应的场景属性标签确定为目标图像所属场景类型的特征底库。
在本实施例中,为了兼顾用户体验,并不需要用户在不同场景都需要录制特征底库,而是在解锁阶段发现解锁图像的场景类型和特征底库中所包含的场景类型不同时,才启动底库存入检查,选择一个质量比较好的解锁图像作为此场景的特征底库。这样虽然再首次场景切换时有一些性能下降,但是一旦录入成功即可使得之后此场景解锁成功率和性能大大提高。
在本实施例中,在获取用于对终端设备进行解锁的目标图像之前,所述方法还包括如下步骤:
步骤S1011,获取待录入底库中的待录入图像,并确定所述待录入图像的场景属性标签;
步骤S1012,基于所述场景属性标签确定相匹配的处理模型;
步骤S1013,基于所述相匹配的处理模型对所述待录入图像进行处理,以根据第一处理结果确定是否将所述待录入图像添加至所述特征底库中。
在获取用于对终端设备进行解锁的目标图像之前,需要首次执行底库录入的操作,具体过程描述如下:
首先,通过终端设备的摄像装置获取用于对终端设备进行执行底库录入操作的待录入图像。终端设备在进行图像的录入之前,需要进行场景检测,并根据场景检测结果开启相关终端设备上的相关设备,例如,在暗光或者夜视时开启补光灯或者红外灯等,具体根据实际需要来进行设定。
在通过摄像装置拍摄得到待录入图像之后,就可以为该待录入图像添加场景属性标签,以通过该场景属性标签确定终端设备拍摄该待录入图像的场景类型。例如,是在红外灯打开时拍摄的图像,或者是在补光灯开启时拍摄的图像。
然后,就可以基于场景属性标签确定相匹配的处理模型。需要说明的是,如果单一处理模型的处理能力比较强,那么可以通过调整通过阈值的方式将处理模型应用在多种场景类型下。如果单一处理模型的处理能力比较弱,那么可以为每个场景类型都设置对应的处理模型。
之后,就可以基于相匹配的处理模型对待录入图像进行处理,以根据第一处理结果确定是否将待录入图像添加至特征底库中。
可选地,根据第一处理结果确定是否将所述待录入图像添加至所述特征底库中包括:
基于所述第一处理结果判断所述待录入图像是否满足底库录入标准;
若满足,则将所述待录入图像的特征信息确定为特征底库,并为所述待录入图像的特征信息添加用于表征场景类型的场景属性标签。
在本实施例中,底库录入标准可以表示为处理模型的通过阈值。如果第一处理结果满足相匹配的处理模型的通过阈值,则确定待录入图像满足底库录入标准。此时,就可以将待录入图像的特征信息及其对应的场景属性标签确定一个特征底库。
在本实施例中,若基于所述场景属性标签未确定出相匹配的处理模型,则选择默认处理模型对所述待录入图像进行处理,得到第二处理结果;并根据所述第二处理结果确定是否将所述待录入图像的特征信息添加至所述特征底库中。
具体地,若未确定出与待录入图像的场景类型相匹配的处理模型,则利用默认处理模型对待录入图像进行处理,得到第二处理结果。若第二处理结果满足默认处理模型的通过阈值,则确定待录入图像满足底库录入标准,此时,就可以将待录入图像的特征信息及其对应的场景属性标签确定一个特征底库。
图3是根据本发明实施例的一种底库录入方法的流程图,如图3所示,该方法包括如下步骤:
步骤S301,获取待录入底库中的待录入图像。具体地,通过终端设备的摄像装置获取用于对终端设备进行执行底库录入操作的待录入图像。终端设备在进行图像的录入之前,需要进行场景检测,并根据场景检测结果开启相关终端设备上的相关设备,例如,在暗光或者夜视时开启补光灯或者红外灯等,具体根据实际需要来进行设定。
步骤S302,确定所述待录入图像的场景属性标签。具体地,在通过摄像装置拍摄得到待录入图像之后,就可以为该待录入图像添加场景属性标签,以通过该场景属性标签确定终端设备拍摄该待录入图像的场景类型。例如,是在红外灯打开时拍摄的图像,或者是在补光灯开启时拍摄的图像。
步骤S303,基于场景属性标签确定相匹配的处理模型。若匹配出,则执行步骤S304,否则,执行步骤S306。具体地,可以基于场景属性标签确定相匹配的处理模型。需要说明的是,如果单一处理模型的处理能力比较强,那么可以通过调整通过阈值的方式将处理模型应用在多种场景类型下。如果单一处理模型的处理能力比较弱,那么可以为每个场景类型都设置对应的处理模型。
步骤S304,基于相匹配的处理模型对所述待录入图像进行处理,得到第一处理结果。
步骤S305,基于第一处理结果进行底库标准检查。若第一检测结果满足底库录入标准,则执行步骤S308,否则执行步骤S309。
步骤S306,选择默认处理模型对所述待录入图像进行处理,得到第二处理结果。
步骤S307,基于第二处理结果进行底库标准检查。若第二检测结果满足底库录入标准,则执行步骤S308,否则执行步骤S309。
步骤S308,将提取出来的待处理图像的特征信息存入底库,并保存当前底库的场景类型标签,并返回底库录入成功的结果。
步骤S309,返回底库录入失败的结果。
图4是根据本发明实施例的一种人脸解锁方法的流程图,如图4所示,该方法包括如下步骤:
步骤S401,在实际录入图像之前进行场景检测并开启相关设备,比如在暗光或夜视时开启补光灯或者红外灯等。
步骤S402,获取目标图像;
步骤S403,确定目标图像的场景属性标签。具体地,在通过摄像装置拍摄得到目标图像之后,就可以为该目标图像添加场景属性标签,以通过该场景属性标签确定终端设备拍摄该目标图像的场景类型。
步骤S404,通过预设模型对所述目标图像进行检测,得到检测结果。具体地,查找与所述目标图像的场景类型相匹配的处理模型;若查找到所述相匹配的处理模型,则将所述相匹配的处理模型作为所述预设模型,并利用所述相匹配的处理模型对所述目标图像进行检测;若未查找到所述目标图像进行检测,则将默认处理模型作为所述预设模型,并利用所述默认处理模型对所述目标图像进行检测。
步骤S405,判断检测结果是否满足解锁标准条件;若满足执行步骤S406;否则执行步骤S412,此时步骤S412返回的解锁比对结果为解锁失败的解锁比对结果。
步骤S406,查找与所述目标图像的场景类型相匹配的特征底库。
步骤S407,根据目标图像的场景类型选择匹配的特征底库进行特征比对,得到比对结果。其中,如果没有找到匹配的特征底库,选择使用默认底库类型。
步骤S408,基于比对结果判断是否比对通过;若是,则执行步骤S409,否则执行步骤S412,此时步骤S412返回的解锁比对结果为解锁失败的解锁比对结果。
步骤S409,检查目标图像场景类型和特征底库所包含的场景类型是否相同,如果不相同执行步骤S410,否则执行步骤S412,此时步骤S412返回的解锁比对结果为基于目标图像和特征底库确定的是否执行解锁操作的解锁比对结果。
步骤S410,检查是否目标图像的质量满足底库录入标准,如果满足执行步骤S411,否则执行步骤S412,此时步骤S412返回的解锁比对结果为解锁失败的解锁比对结果。
步骤S411,将所述目标图像的特征信息及其对应的场景属性标签确定为所述目标图像所属场景类型的特征底库。
步骤S412,返回解锁比对结果。
实施例3:
本发明实施例还提供了一种人脸解锁装置,该人脸解锁装置主要用于执行本发明实施例上述内容所提供的人脸解锁方法,以下对本发明实施例提供的人脸解锁装置做具体介绍。
图5是根据本发明实施例的一种人脸解锁装置的示意图,如图5所示,该人脸解锁装置主要包括第一获取单元10,查找单元20和解锁单元30,其中:
第一获取单元10,用于获取用于对终端设备进行解锁的目标图像;
查找单元20,用于若所述目标图像满足解锁标准条件,则查找与所述目标图像的场景类型相匹配的特征底库;所述场景类型为拍摄目标图像的场景,特征底库中包括目标对象进行人脸检测之后的特征信息和特征信息的场景属性标签;
解锁单元30,用于若查找到所述特征底库,且所述特征底库中所包含的场景类型与所述目标图像的场景类型相同,则基于所述特征底库和所述目标图像确定是否执行解锁操作。
在本实施例中,为相同识别对象根据不同场景保存多个特征底库,在实际比对时根据场景选择匹配的特征底库进行检测和比对操作以提高比对的成功率和效率,进而缓解现有的人脸解锁方案容易受到环境等因素干扰导致解锁成功率较低的技术问题。
可选地,该装置还包括:检测单元,用于若查找到所述特征底库,且所述特征底库中所包含的场景类型与所述目标图像的场景类型不相同,则检测所述目标图像是否满足底库录入标准;确定单元,用于若满足,则确定所述目标图像所属场景类型的特征底库。
可选地,确定单元还用于:将所述目标图像的特征信息及其对应的场景属性标签确定为所述目标图像所属场景类型的特征底库,其中,所述场景属性标签用于确定所述目标图像的场景类型。
可选地,该装置还用于:若所述目标图像不满足所述底库录入标准,向用户返回解锁失败的解锁比对结果。
可选地,该装置还用于:若未查找到所述特征底库,则将所述目标图像与默认底库进行比对;若比对成功,则执行检测所述目标图像是否满足所述底库录入标准的步骤。
可选地,该装置通过以下方式判断所述目标图像是否满足所述解锁标准条件:通过预设模型对所述目标图像进行检测,得到检测结果;若所述检测结果满足所述解锁标准条件,则确定所述目标图像满足所述解锁标准条件。
可选地,该装置通过预设模型对所述目标图像进行检测,得到检测结果包括:查找与所述目标图像的场景类型相匹配的处理模型;若查找到所述相匹配的处理模型,则将所述相匹配的处理模型作为所述预设模型,并利用所述相匹配的处理模型对所述目标图像进行检测;若未查找到所述相匹配的处理模型,则将默认处理模型作为所述预设模型,并利用所述默认处理模型对所述目标图像进行检测。
可选地,该装置还用于:获取待录入底库中的待录入图像,并确定所述待录入图像的场景属性标签;基于所述场景属性标签确定相匹配的处理模型;基于所述相匹配的处理模型对所述待录入图像进行处理,以根据第一处理结果确定是否将所述待录入图像添加至所述特征底库中。
可选地,该装置还用于:基于所述第一处理结果判断所述待录入图像是否满足底库录入标准;若满足,则将所述待录入图像的特征信息确定为特征底库,并为所述待录入图像的特征信息添加用于表征场景类型的场景属性标签。
可选地,该装置还用于:若基于所述场景属性标签未确定出相匹配的处理模型,则选择默认处理模型对所述待录入图像进行处理,得到第二处理结果;根据所述第二处理结果确定是否将所述待录入图像添加至所述特征底库中。
本发明实施例还提供了一种底库录入装置。
图6是根据本发明实施例的一种底库录入装置的示意图,如图6所示,该人脸解锁装置主要包括第二获取单元61,确定单元62,处理单元63和底库录入单元64,其中:
第二获取单元61,用于获取待录入底库中的待录入图像,并确定所述待录入图像的场景属性标签;
确定单元62,用于基于场景属性标签确定相匹配的处理模型;
处理单元63,用于若匹配出,则基于相匹配的处理模型对所述待录入图像进行处理,得到第一处理结果;
底库录入单元64,用于若所述第一处理结果满足底库录入标准,则将提取出来的待处理图像的特征信息存入底库,并保存当前底库的场景类型标签。
在本实施例中,为相同识别对象根据不同场景保存多个特征底库,在实际比对时根据场景选择匹配的特征底库进行检测和比对操作以提高比对的成功率和效率,进而缓解现有的人脸解锁方案容易受到环境等因素干扰导致解锁成功率较低的技术问题。
可选地,所述装置还用于:若未匹配出,则选择默认处理模型对所述待录入图像进行处理,得到第二处理结果;若所述第二处理结果满足底库录入标准,则将提取出来的待处理图像的特征信息存入底库,并保存当前底库的场景类型标签。
本发明实施例所提供的装置,其实现原理及产生的技术效果和前述方法实施例相同,为简要描述,装置实施例部分未提及之处,可参考前述方法实施例中相应内容。
另外,本发明还提供了一种具有处理器可执行的非易失的程序代码的计算机可读介质,所述程序代码使所述处理器执行上述方法实施例中任一项所述的方法。
另外,在本发明实施例的描述中,除非另有明确的规定和限定,术语“安装”、“相连”、“连接”应做广义理解,例如,可以是固定连接,也可以是可拆卸连接,或一体地连接;可以是机械连接,也可以是电连接;可以是直接相连,也可以通过中间媒介间接相连,可以是两个元件内部的连通。对于本领域的普通技术人员而言,可以具体情况理解上述术语在本发明中的具体含义。
在本发明的描述中,需要说明的是,术语“中心”、“上”、“下”、“左”、“右”、“竖直”、“水平”、“内”、“外”等指示的方位或位置关系为基于附图所示的方位或位置关系,仅是为了便于描述本发明和简化描述,而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作,因此不能理解为对本发明的限制。此外,术语“第一”、“第二”、“第三”仅用于描述目的,而不能理解为指示或暗示相对重要性。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统、装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在本申请所提供的几个实施例中,应该理解到,所揭露的系统、装置和方法,可以通过其它的方式实现。以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,又例如,多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些通信接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个处理器可执行的非易失的计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
最后应说明的是:以上所述实施例,仅为本发明的具体实施方式,用以说明本发明的技术方案,而非对其限制,本发明的保护范围并不局限于此,尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,其依然可以对前述实施例所记载的技术方案进行修改或可轻易想到变化,或者对其中部分技术特征进行等同替换;而这些修改、变化或者替换,并不使相应技术方案的本质脱离本发明实施例技术方案的精神和范围,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应所述以权利要求的保护范围为准。

Claims (15)

1.一种人脸解锁方法,其特征在于,包括:
获取目标图像;
若所述目标图像满足解锁标准条件,则查找与所述目标图像的场景类型相匹配的特征底库;所述特征底库中包括目标对象的人脸特征信息和人脸特征信息的场景属性标签;
若查找到所述特征底库,且所述特征底库中所包含的场景类型与所述目标图像的场景类型相同,则基于所述特征底库和所述目标图像确定是否执行解锁操作;
通过以下方式判断所述目标图像是否满足所述解锁标准条件:
查找与所述目标图像的场景类型相匹配的处理模型;若查找到所述相匹配的处理模型,则将所述相匹配的处理模型作为预设模型,并利用所述相匹配的处理模型对所述目标图像进行检测,得到检测结果;
若所述检测结果满足所述解锁标准条件,则确定所述目标图像满足所述解锁标准条件。
2.根据权利要求1所述的方法,其特征在于,所述方法还包括:
若查找到所述特征底库,且所述特征底库中所包含的场景类型与所述目标图像的场景类型不相同,则检测所述目标图像是否满足底库录入标准;
若满足,则确定所述目标图像所属场景类型的特征底库。
3.根据权利要求2所述的方法,其特征在于,确定所述目标图像所属场景类型的特征底库包括:
将所述目标图像的特征信息及其对应的场景属性标签确定为所述目标图像所属场景类型的特征底库,其中,所述场景属性标签用于确定所述目标图像的场景类型。
4.根据权利要求2所述的方法,其特征在于,所述方法还包括:
若所述目标图像不满足所述底库录入标准,向用户返回解锁失败的解锁比对结果。
5.根据权利要求2所述的方法,其特征在于,所述方法还包括:
若未查找到所述特征底库,则将所述目标图像与默认底库进行比对;
若比对成功,则执行检测所述目标图像是否满足所述底库录入标准的步骤。
6.根据权利要求1所述的方法,其特征在于,通过预设模型对所述目标图像进行检测,得到检测结果还包括:
若未查找到所述相匹配的处理模型,则将默认处理模型作为所述预设模型,并利用所述默认处理模型对所述目标图像进行检测。
7.根据权利要求1所述的方法,其特征在于,所述方法还包括:
获取待录入底库中的待录入图像,并确定所述待录入图像的场景属性标签;
基于所述场景属性标签确定相匹配的处理模型;
基于所述相匹配的处理模型对所述待录入图像进行处理,以根据第一处理结果确定是否将所述待录入图像添加至所述特征底库中。
8.根据权利要求7所述的方法,其特征在于,根据第一处理结果确定是否将所述待录入图像添加至所述特征底库中包括:
基于所述第一处理结果判断所述待录入图像是否满足底库录入标准;
若满足,则将所述待录入图像的特征信息确定为特征底库,并为所述待录入图像的特征信息添加用于表征场景类型的场景属性标签。
9.根据权利要求7所述的方法,其特征在于,所述方法还包括:
若基于所述场景属性标签未确定出相匹配的处理模型,则选择默认处理模型对所述待录入图像进行处理,得到第二处理结果;
根据所述第二处理结果确定是否将所述待录入图像添加至所述特征底库中。
10.一种底库录入方法,其特征在于,包括:
获取待录入底库中的待录入图像,并确定所述待录入图像的场景属性标签;
基于场景属性标签确定相匹配的处理模型;
若匹配出,则基于相匹配的处理模型对所述待录入图像进行处理,得到第一处理结果;
若所述第一处理结果满足底库录入标准,则将提取出来的待处理图像的特征信息存入底库,并保存当前底库的场景类型标签。
11.根据权利要求10所述的方法,其特征在于,所述方法还包括:
若未匹配出,则选择默认处理模型对所述待录入图像进行处理,得到第二处理结果;
若所述第二处理结果满足底库录入标准,则将提取出来的待处理图像的特征信息存入底库,并保存当前底库的场景类型标签。
12.一种人脸解锁装置,其特征在于,包括:
第一获取单元,用于获取目标图像;
查找单元,用于若所述目标图像满足解锁标准条件,则查找与所述目标图像的场景类型相匹配的特征底库;所述特征底库中包括目标对象进行人脸检测之后的特征信息和特征信息的场景属性标签;
解锁单元,用于若查找到所述特征底库,且所述特征底库中所包含的场景类型与所述目标图像的场景类型相同,则基于所述特征底库和所述目标图像确定是否执行解锁操作;通过以下方式判断所述目标图像是否满足所述解锁标准条件:查找与所述目标图像的场景类型相匹配的处理模型;若查找到所述相匹配的处理模型,则将所述相匹配的处理模型作为预设模型,并利用所述相匹配的处理模型对所述目标图像进行检测,得到检测结果;若所述检测结果满足所述解锁标准条件,则确定所述目标图像满足所述解锁标准条件。
13.一种底库录入装置,其特征在于,包括:
第二获取单元,用于获取待录入底库中的待录入图像,并确定所述待录入图像的场景属性标签;
确定单元,用于基于场景属性标签确定相匹配的处理模型;
处理单元,用于若匹配出,则基于相匹配的处理模型对所述待录入图像进行处理,得到第一处理结果;
底库录入单元,用于若所述第一处理结果满足底库录入标准,则将提取出来的待处理图像的特征信息存入底库,并保存当前底库的场景类型标签。
14.一种电子设备,包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现上述权利要求1至9中任一项所述的方法,或者,实现上述权利要求10至11中任一项所述的方法。
15.一种具有处理器可执行的非易失的程序代码的计算机可读介质,其特征在于,所述程序代码使所述处理器执行上述权利要求1至9中任一项所述的方法,或者,实现上述权利要求10至11中任一项所述的方法。
CN201811427783.6A 2018-11-27 2018-11-27 一种人脸解锁、底库录入方法、装置和电子设备 Active CN109543628B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811427783.6A CN109543628B (zh) 2018-11-27 2018-11-27 一种人脸解锁、底库录入方法、装置和电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811427783.6A CN109543628B (zh) 2018-11-27 2018-11-27 一种人脸解锁、底库录入方法、装置和电子设备

Publications (2)

Publication Number Publication Date
CN109543628A CN109543628A (zh) 2019-03-29
CN109543628B true CN109543628B (zh) 2021-05-04

Family

ID=65850686

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811427783.6A Active CN109543628B (zh) 2018-11-27 2018-11-27 一种人脸解锁、底库录入方法、装置和电子设备

Country Status (1)

Country Link
CN (1) CN109543628B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110059594B (zh) * 2019-04-02 2021-10-22 北京旷视科技有限公司 一种环境感知自适应图像识别方法和装置
CN112417184B (zh) * 2020-11-23 2021-05-25 上海点泽智能科技有限公司 多场景特征信息存储结构及其比对方法、设备和存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2329428A1 (en) * 2008-07-21 2011-06-08 Airborne Biometrics Group, Inc. Managed biometric-based notification system and method
CN102655555A (zh) * 2012-04-28 2012-09-05 北京百纳威尔科技有限公司 终端设备、解锁处理方法和装置
CN106570371A (zh) * 2016-10-08 2017-04-19 珠海格力电器股份有限公司 一种解锁方法及装置
CN108875484A (zh) * 2017-09-22 2018-11-23 北京旷视科技有限公司 用于移动终端的人脸解锁方法、装置和系统及存储介质
CN108875341A (zh) * 2018-05-24 2018-11-23 北京旷视科技有限公司 一种人脸解锁方法、装置、系统及计算机存储介质

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140294257A1 (en) * 2013-03-28 2014-10-02 Kevin Alan Tussy Methods and Systems for Obtaining Information Based on Facial Identification
US9811650B2 (en) * 2014-12-31 2017-11-07 Hand Held Products, Inc. User authentication system and method
CN106295596A (zh) * 2016-08-17 2017-01-04 深圳市金立通信设备有限公司 一种基于人脸识别的解锁方法及终端
CN107679482B (zh) * 2017-09-27 2021-04-09 Oppo广东移动通信有限公司 解锁控制方法及相关产品
CN107679570A (zh) * 2017-09-27 2018-02-09 广东欧珀移动通信有限公司 解锁控制方法及相关产品
CN108304709B (zh) * 2018-01-31 2022-01-04 Oppo广东移动通信有限公司 人脸解锁方法及相关产品
CN108668022B (zh) * 2018-04-26 2020-11-27 四川酷比通信设备有限公司 一种暗态下的人脸解锁方法及其移动终端

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2329428A1 (en) * 2008-07-21 2011-06-08 Airborne Biometrics Group, Inc. Managed biometric-based notification system and method
CN102655555A (zh) * 2012-04-28 2012-09-05 北京百纳威尔科技有限公司 终端设备、解锁处理方法和装置
CN106570371A (zh) * 2016-10-08 2017-04-19 珠海格力电器股份有限公司 一种解锁方法及装置
CN108875484A (zh) * 2017-09-22 2018-11-23 北京旷视科技有限公司 用于移动终端的人脸解锁方法、装置和系统及存储介质
CN108875341A (zh) * 2018-05-24 2018-11-23 北京旷视科技有限公司 一种人脸解锁方法、装置、系统及计算机存储介质

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
Secure Face Unlock: Spoof Detection on Smartphones;Keyurkumar Patel et al;《IEEE Transactions on Information Forensics and Security》;20161031;第11卷(第10期);第2268-2283页 *
基于智能手机的人脸识别技术研究;赵豪越等;《信息与电脑(理论版)》;20181031;第1-3页 *

Also Published As

Publication number Publication date
CN109543628A (zh) 2019-03-29

Similar Documents

Publication Publication Date Title
CN109858371B (zh) 人脸识别的方法及装置
US20130077866A1 (en) Object detection metadata
CN107871000B (zh) 音频播放方法、装置、存储介质及电子设备
CN107871001B (zh) 音频播放方法、装置、存储介质及电子设备
CN104469229A (zh) 视频数据存储方法和装置
CN101102572A (zh) 在便携式终端中拍摄名片的装置和方法
CN103379282A (zh) 用于识别图像的设备和方法
CN110049309B (zh) 视频流中图像帧的稳定性检测方法和装置
CN109543628B (zh) 一种人脸解锁、底库录入方法、装置和电子设备
CN108037830B (zh) 一种增强现实的实现方法
CN107360366B (zh) 拍照方法、装置、存储介质及电子设备
JP6924064B2 (ja) 画像処理装置およびその制御方法、ならびに撮像装置
CN106254807B (zh) 提取静止图像的电子设备和方法
CN110677580B (zh) 拍摄方法、装置、存储介质及终端
US20190073813A1 (en) Image processing apparatus, image providing apparatus,control methods thereof, and medium
CN112418006A (zh) 目标识别方法、装置和电子系统
CN107885482B (zh) 音频播放方法、装置、存储介质及电子设备
CN111885371A (zh) 图像遮挡检测方法、装置、电子设备和计算机可读介质
US11755758B1 (en) System and method for evaluating data files
CN114219938A (zh) 感兴趣区域获取方法
KR102178172B1 (ko) 단말, 서비스 제공 장치, 그 제어 방법, 컴퓨터 프로그램이 기록된 기록 매체 및 이미지 검색 시스템
CN110008907B (zh) 一种年龄的估计方法、装置、电子设备和计算机可读介质
CN109089040B (zh) 图像处理方法、图像处理装置及终端设备
CN111985305A (zh) 防窥屏方法、装置及终端设备
WO2024037660A1 (zh) 确定异常分拣区域的方法、装置、电子设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant