CN112906637B - 基于深度学习的指纹图像识别方法、装置和电子设备 - Google Patents

基于深度学习的指纹图像识别方法、装置和电子设备 Download PDF

Info

Publication number
CN112906637B
CN112906637B CN202110292997.2A CN202110292997A CN112906637B CN 112906637 B CN112906637 B CN 112906637B CN 202110292997 A CN202110292997 A CN 202110292997A CN 112906637 B CN112906637 B CN 112906637B
Authority
CN
China
Prior art keywords
fingerprint
feature
image
fingerprint image
characteristic
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202110292997.2A
Other languages
English (en)
Other versions
CN112906637A (zh
Inventor
刘晓春
刘帅
郑逢德
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Haixin Kejin High Tech Co ltd
Original Assignee
Beijing Haixin Kejin High Tech Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Haixin Kejin High Tech Co ltd filed Critical Beijing Haixin Kejin High Tech Co ltd
Priority to CN202110292997.2A priority Critical patent/CN112906637B/zh
Publication of CN112906637A publication Critical patent/CN112906637A/zh
Application granted granted Critical
Publication of CN112906637B publication Critical patent/CN112906637B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/12Fingerprints or palmprints
    • G06V40/1365Matching; Classification
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/21Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
    • G06F18/214Generating training patterns; Bootstrap methods, e.g. bagging or boosting
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/22Matching criteria, e.g. proximity measures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/02Neural networks
    • G06N3/08Learning methods
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/12Fingerprints or palmprints
    • G06V40/1347Preprocessing; Feature extraction
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02DCLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00Energy efficient computing, e.g. low power processors, power management or thermal management

Abstract

本发明提供一种基于深度学习的指纹图像识别方法、装置和电子设备,该方法包括:获取现场指纹图像;获取所述现场指纹图像中特征点的位置信息;根据所述特征点的位置信息获取特征点图像块,所述特征点图像块输入至特征描述生成模型,输出所述特征点的特征描述;根据所述现场指纹图像中所有特征点的特征描述与指纹库中的指纹图像的特征描述进行匹配,得到匹配结果。本发明可以对现场指纹图像进行自动身份确认。

Description

基于深度学习的指纹图像识别方法、装置和电子设备
技术领域
本发明涉及图像处理技术领域,尤其涉及一种基于深度学习的指 纹图像识别方法、装置和电子设备。
背景技术
指纹识别是将识别对象的指纹进行分类比对从而进行判别。指纹 识别技术是众多生物特征识别技术中的一种,所谓生物特征识别技术, 系指利用人体所固有的生理特征或行为特征来进行个人身份鉴定,由 于生物识别所具有的便捷与安全等优点使得生物识别技术在身份认 证识别和网络安全领域拥有广阔的应用前景,可用的生物特征识别技术有指纹、人脸、声纹、虹膜等。
指纹识别技术在当前应用非常广泛,可用于从犯罪现场收集证据, 银行客户身份认证,手机或其他智能设备解锁等。但是,当前难以根 据现场指纹图像进行自动身份确认。
发明内容
本发明提供一种基于深度学习的指纹图像识别方法、装置和电子 设备,用以解决现有技术中难以根据现场指纹图像进行自动身份确认 的缺陷,实现对现场指纹图像进行自动身份确认。
本发明提供一种基于深度学习的指纹图像识别方法,包括:获取 现场指纹图像;获取所述现场指纹图像中特征点的位置信息;根据所 述特征点的位置信息获取特征点图像块,将所述特征点图像块输入至 特征描述生成模型,输出所述特征点的特征描述,所述特征描述生成模型是基于多个样本图像块和与所述多个样本图像块对应的多个特 征描述进行训练得到的;根据所述现场指纹图像中所有特征点的特征 描述与指纹库中的指纹图像的特征描述进行匹配,得到匹配结果。
根据本发明提供的一种基于深度学习的指纹图像识别方法,获取 所述现场指纹图像中特征点的位置信息,包括:对所述现场指纹图像 进行图像增强;将图像增强后的现场指纹图像分割为多个现场指纹增 强子图像块;在所述多个现场指纹增强子图像块中,将含有所述特征 点的现场指纹增强子图像块输入至特征点位置生成模型,输出所述特征点的位置信息。
根据本发明提供的一种基于深度学习的指纹图像识别方法,对所 述现场指纹图像进行图像增强,包括:构建指纹图像方向场字典集合; 将所述现场指纹图像分割为多个现场指纹子图像;获取所述多个现场 指纹子图像的方向场;根据所述多个现场指纹子图像的方向场在所述 构建指纹图像方向场字典集合中进行匹配,得到多个匹配对象;根据所述多个匹配对象对所述多个现场指纹子图像进行替换。
根据本发明提供的一种基于深度学习的指纹图像识别方法,构建 指纹图像方向场字典集合,包括:提供样本指纹图像;将所述样本指 纹图像分割为多个样本指纹子图像;获取所述多个样本指纹子图像的 方向场信息;根据所述多个样本指纹子图像的方向场信息构建所述指 纹图像方向场字典集合。
根据本发明提供的一种基于深度学习的指纹图像识别方法,根据 所述特征点的位置信息获取特征点图像块,将所述特征点图像块输入 至特征描述生成模型,输出所述特征点的特征描述,包括:将所述特 征点图像块输入至所述特征描述生成模型,输出所述特征点的N维特征,将所述N维特征作为所述特征点的特征描述;其中,所述特 征描述生成模型为模拟二代小波网络的深度学习模型,N为大于0的 自然数。
根据本发明提供的一种基于深度学习的指纹图像识别方法,将所 述特征点图像块输入至所述特征描述生成模型,输出所述特征点的N 维特征,包括:将所述特征点图像块输入至所述特征描述生成模型进 行多分辨率小波变换得到多个高频单元;基于所述特征描述生成模型 对所述多个高频单元依次进行平均池化、拼接和全连接变换,输出所 述特征点的N维特征。
根据本发明提供的一种基于深度学习的指纹图像识别方法,根据 所述现场指纹图像中所有特征点的特征描述与指纹库中的指纹图像 的特征点的特征描述进行匹配,得到匹配结果,包括:基于所述现场 指纹图像中所有特征点的特征描述与所述指纹库中的指纹图像的特 征点的特征描述计算所述现场指纹图像和所述指纹库中的指纹图像的全局相似度;将所述指纹库中与所述现场指纹图像的全局相似度最 高的指纹图像作为所述现场指纹图像的匹配对象。
根据本发明提供的一种基于深度学习的指纹图像识别方法,基于 所述现场指纹图像中所有特征点的特征描述与所述指纹库中的指纹 图像的特征点的特征描述计算所述现场指纹图像和所述指纹库中的 指纹图像的全局相似度,包括:根据所述现场指纹图像中所有特征点 的特征描述得到所述现场指纹图像的特征集合;从所述指纹库中获取第一指纹图像的特征集合;计算所述现场指纹图像的特征集合与所述 第一指纹图像的特征集合中每对特征的相似度;将相似度最高的M 对构成相似特征集合;利用所述相似特征集合得到最优对齐矩阵,最 大化特征对相似度和,作为现场指纹图像和所述第一指纹图像的全局相似度;计算所述指纹库中剩余指纹图像与所述现场指纹图像的全局 相似度。
本发明还提供一种基于深度学习的指纹图像识别装置,包括:获 取模块,用于获取现场指纹图像;控制处理模块,用于获取所述现场 指纹图像中特征点的位置信息;所述控制处理模块还用于根据所述特 征点的位置信息获取特征点图像块,将所述特征点图像块输入至特征描述生成模型,输出所述特征点的特征描述,所述特征描述生成模型 是基于多个样本图像块和与所述多个样本图像块对应的多个特征描 述进行训练得到的;所述控制处理模块还用于根据所述现场指纹图像 中所有特征点的特征描述与指纹库中的指纹图像的特征描述进行匹 配,得到匹配结果。
根据本发明提供的一种基于深度学习的指纹图像识别装置,所述 控制处理模块用于对所述现场指纹图像进行图像增强;所述控制处理 模块还用于将图像增强后的现场指纹图像分割为多个现场指纹增强 子图像块;所述控制处理还用于在所述多个现场指纹增强子图像块中, 将含有所述特征点的现场指纹增强子图像块输入至特征点位置生成模型,输出所述特征点的位置信息。
根据本发明提供的一种基于深度学习的指纹图像识别装置,所述 控制处理模块用于构建指纹图像方向场字典集合;所述控制处理模块 还用于将所述现场指纹图像分割为多个现场指纹子图像;所述控制处 理模块还用于获取所述多个现场指纹子图像的方向场;所述控制处理 模块还用于根据所述多个现场指纹子图像的方向场在所述构建指纹图像方向场字典集合中进行匹配,得到多个匹配对象;所述控制处理 模块还用于根据所述多个匹配对象对所述多个现场指纹子图像进行 替换。
根据本发明提供的一种基于深度学习的指纹图像识别装置,所述 获取模块还用于获取样本指纹图像;所述控制处理模块用于将所述样 本指纹图像分割为多个样本指纹子图像;所述控制处理模块还用于获 取所述多个样本指纹子图像的方向场信息;所述控制处理模块还用于 根据所述多个样本指纹子图像的方向场信息构建所述指纹图像方向场字典集合。
根据本发明提供的一种基于深度学习的指纹图像识别装置,所述 获取模块还用于以所述特征点为中心获取特征点图像块;所述控制处 理模块用于将所述特征点图像块输入至所述特征描述生成模型,输出 所述特征点的N维特征,将所述N维特征作为所述特征点的特征描 述;其中,所述特征描述生成模型为模拟二代小波网络的深度学习模 型。
根据本发明提供的一种基于深度学习的指纹图像识别装置,所述 控制处理模块用于将所述特征点图像块输入至所述特征描述生成模 型进行多分辨率小波变换得到多个高频单元;所述控制处理模块还用 于基于所述特征描述生成模型对所述多个高频单元依次进行平均池 化、拼接和全连接变换,得到所述特征点的N维特征。
根据本发明提供的一种基于深度学习的指纹图像识别装置,所述 控制处理模块用于基于所述现场指纹图像中所有特征点的特征描述 与所述指纹库中的指纹图像的特征点的特征描述计算所述现场指纹 图像和所述指纹库中的指纹图像的全局相似度;所述控制处理模块还 用于将所述指纹库中与所述现场指纹图像的全局相似度最高的指纹图像作为所述现场指纹图像的匹配对象。
根据本发明提供的一种基于深度学习的指纹图像识别装置,所述 控制处理模块用于根据所述现场指纹图像中所有特征点的特征描述 得到所述现场指纹图像的特征集合;所述控制处理模块还用于从所述 指纹库中获取第一指纹图像的特征集合;所述控制处理模块还用于计 算所述现场指纹图像的特征集合与所述第一指纹图像的特征集合中每对特征的相似度;所述控制处理模块还用于将相似度最高的M对 构成相似特征集合;所述控制处理模块还用于利用所述相似特征集合 得到最优对齐矩阵,最大化特征对相似度和,作为现场指纹图像和所 述第一指纹图像的全局相似度;所述控制处理模块还用于计算所述指 纹库中剩余指纹图像与所述现场指纹图像的全局相似度。
本发明还提供一种电子设备,包括存储器、处理器及存储在存储 器上并可在处理器上运行的计算机程序,所述处理器执行所述程序时 实现如上述任一种所述基于深度学习的指纹图像识别方法的步骤。
本发明还提供一种非暂态计算机可读存储介质,其上存储有计算 机程序,该计算机程序被处理器执行时实现如上述任一种所述基于深 度学习的指纹图像识别方法的步骤。
本发明提供的基于深度学习的指纹图像识别方法、装置和电子设 备,通过对现场指纹图像的特征点位置获取特征点图像块,根据特征 点图像块生成特征点的特征描述,根据现场指纹图像中所有特征点的 特征描述与指纹库中的指纹图像的特征描述进行匹配,得到的匹配结 果可以进行自动身份验证。
附图说明
为了更清楚地说明本发明或现有技术中的技术方案,下面将对实 施例或现有技术描述中所需要使用的附图作一简单地介绍,显而易见 地,下面描述中的附图是本发明的一些实施例,对于本领域普通技术 人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得 其他的附图。
图1是本发明提供的基于深度学习的指纹图像识别方法的流程 示意图;
图2是本发明提供的基于深度学习的指纹图像识别装置的结构 框图;
图3是本发明一个示例中电子设备的结构示意图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚,下面将结合本发 明中的附图,对本发明中的技术方案进行清楚、完整地描述,显然, 所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于 本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
应理解,说明书通篇中提到的“实施例”或“一个实施例”意味 着与实施例有关的特定特征、结构或特性包括在本发明的至少一个实 施例中。因此,在整个说明书各处出现的“实施例中”或“在一个实 施例中”未必一定指相同的实施例。此外,这些特定的特征、结构或 特性可以任意适合的方式结合在一个或多个实施例中。
在本发明的描述中,需要理解的是,术语“第一”和“第二”仅 用于描述目的,而不能理解为指示或暗示相对重要性。
在本发明的描述中,需要说明的是,除非另有明确的规定和限定, 术语“连接”应做广义理解,例如,可以是直接相连,也可以通过中 间媒介间接相连。对于本领域的普通技术人员而言,可以具体情况理 解上述术语在本发明中的具体含义。
下面结合图1描述本发明的基于深度学习的指纹图像识别方法。
图1是本发明提供的基于深度学习的指纹图像识别方法的流程 示意图。如图1所示,本发明提供的基于深度学习的指纹图像识别方 法,包括:
S1:获取现场指纹图像。其中,现场指纹图像可以是犯罪现场或 其他现场的指纹图像。可以照相的方式拍摄现场指纹图像,然后将现 场指纹图像提供分析终端。分析终端可以是进行指纹分析功能的服务 器。
S2:获取现场指纹图像中特征点的位置信息。其中,特征点包括 终结点、分叉点、分歧点、孤立点、环点和短纹。
在本发明的一个实施例中,步骤S2包括:
S2-1:对现场指纹图像进行图像增强。
在本发明的一个实施例中,步骤S2-1包括:
S2-1-1:构建指纹图像方向场字典集合。
具体地,首先获取大量样本指纹图像,其中,样本指纹图像要求 清晰度满足预设标准。
然后将所有样本指纹图像分割为多个样本指纹子图像,例如将每 个样本指纹图像分割为24像素*24像素的多个样本指纹子图像。
接着获取多个样本指纹子图像的方向场信息,例如基于梯度场获 取样本指纹子图像的方向场,或者基于傅里叶变换的方法获取样本指 纹子图像的方向场。
最后,根据多个样本指纹子图像的方向场信息构建指纹图像方向 场字典集合。其中,不同的指纹位置区域构建独立的方向场字典,独立的字典中仅包含可能出现在该位置的方向场。不同位置区域含部分 重叠。基于傅里叶分析的方法用于计算局部块的方向场。
S2-1-2:将现场指纹图像分割为多个现场指纹子图像。例如将现 场指纹图像分割为24像素*24像素的多个现场指纹子图像。
S2-1-3:获取多个现场指纹子图像的方向场。
S2-1-4:根据多个现场指纹子图像的方向场在构建指纹图像方向 场字典集合中进行匹配,得到多个匹配对象。
S2-1-5:根据多个匹配对象对多个现场指纹子图像进行替换。
具体地,对含噪声的现场指纹子图像计算方向场并在对应位置的 字典中比对查找,选择最近的进行替换。查找时,所有位置重叠关系 的字典均参与查找,然后进行统计计算,选取最终的方向场块。
S2-2:将图像增强后的现场指纹图像分割为多个现场指纹增强子 图像块。在本示例中,将图像增强后的现场指纹图像分割成24像素 *24像素的多个现场指纹增强子图像块。
S2-3:在多个现场指纹增强子图像块中,将含有特征点的现场指 纹增强子图像块输入至特征点位置生成模型,输出特征点的位置信息。
具体地,利用二分类神经网络模型判断各个场指纹增强子图像块 是否包含特征点,分类不包含特征点的场指纹增强子图像块不再参与 后续计算,分类包含特征点的场指纹增强子图像块利用神经网络回归 计算特征点具体位置。
S3:根据特征点的位置信息获取特征点图像块,将特征点图像块 输入至特征描述生成模型,输出特征点的特征描述。其中,特征描述 生成模型是基于多个样本图像块和与多个样本图像块对应的多个特 征描述进行训练得到的。
在本发明的一个实施例中,步骤S3包括:
S3-1:以特征点为中心获取特征点图像块。例如将以特征点为中 心的64像素*64像素的图像块作为特征点图像块。
S3-2:对特征点图像块输入至特征描述生成模型,输出特征点的 N维特征,将N维特征作为特征点的特征描述。其中,特征描述生 成模型模拟二代小波网络的深度学习模型。N为大于0的自然数。
在本发明的一个实施例中,步骤S3-2包括:将特征点图像块输 入至特征描述生成模型进行多分辨率小波变换得到多个高频单元;基 于特征描述生成模型对多个高频单元依次进行平均池化、拼接和全连 接变换,得到特征点的N维特征。
具体地,通过神经网络模拟第二代小波中的更新器和预测器,学 习出小波系数,输出小波变换的近似部分和细节部分,即低频和高频。 这一过程在图像的水平方向和竖直方向先后进行,即水平方向分解后 得到低频单元和高频单元,这两个部分继续各自竖直方向分解,分解 后的图像分辨率减半,例如对于64像素*64像素的图像块,可以分 解为4个32像素*32像素的图像块,然后对32像素*32像素的低频 图像块分解为4个16像素*16像素的图像块,低频图像块继续分解, 直至无法分解为止。对所有产生的高频单元的分解结果进行平均池化, 拼接,神经网络全连接变换,得到最终的128维浮点特征,通过交叉 熵损失函数对整个网络参数优化。训练完成后网络提取的特征浮点经 过量化,量化后得到128字节的特征,作为这一特征点的特征描述。 所有特征点进行相同的操作。
S4:根据现场指纹图像中所有特征点的特征描述与指纹库中的指 纹图像的特征描述进行匹配,得到匹配结果。
在本发明的一个实施例中,步骤S4包括:
S4-1:基于现场指纹图像中所有特征点的特征描述与指纹库中的 指纹图像的特征点的特征描述进行计算现场指纹图像和指纹库中的 指纹图像的全局相似度。
在本发明的一个实施例中,步骤S4-1包括:根据现场指纹图像 中所有特征点的特征描述得到现场指纹图像的特征集合;从指纹库中 获取第一指纹图像的特征集合;计算现场指纹图像的特征集合与第一 指纹图像的特征集合中每对特征的相似度;将相似度最高的M对构 成相似特征集合;利用相似特征集合得到最优对齐矩阵,最大化特征 对相似度和,作为现场指纹图像和所述第一指纹图像的全局相似度;计算指纹库中剩余指纹图像与现场指纹图像的全局相似度。
具体地,对于现场指纹图像的特征集合和指纹库中某一指纹图像 特征集合,计算每一对特征的相似度,从高到低排序,取前M对构 成相似特征集合P。M值的选取利用两个集合点集数目的平均值得到。 对于相似特征集合P中的特征对,利用匈牙利算法得到最优对齐矩阵, 最大化特征对的相似度值之和,得到的最大化相似度和用来表示两张指纹图像的相似度。
S4-2:将指纹库中与现场指纹图像的全局相似度最高的指纹图像 作为现场指纹图像的匹配对象,实现现场指纹图像的身份确认。
本发明提供的基于深度学习的指纹图像识别方法,通过对现场指 纹图像的特征点位置获取特征点图像块,根据特征点图像块生成特征 点的特征描述,根据现场指纹图像中所有特征点的特征描述与指纹库 中的指纹图像的特征描述进行匹配,得到的匹配结果可以进行自动身 份验证。
下面对本发明提供的基于深度学习的指纹图像识别装置进行描 述,下文描述的基于深度学习的指纹图像识别装置与上文描述的基于 深度学习的指纹图像识别方法可相互对应参照。
图2是本发明提供的基于深度学习的指纹图像识别装置的结构 框图。如图2所示,本发明提供的基于深度学习的指纹图像识别装置, 包括:获取模块210和控制处理模块220。
其中,获取模块210用于获取现场指纹图像;控制处理模块220 用于获取现场指纹图像中特征点的位置信息;控制处理模块220还用 于根据特征点的位置信息获取特征点图像块,将特征点图像块输入至 特征描述生成模型,输出特征点的特征描述,特征描述生成模型是基 于多个样本图像块和与所述多个样本图像块对应的多个特征描述进 行训练得到的;控制处理模块220还用于根据现场指纹图像中所有特 征点的特征描述与指纹库中的指纹图像的特征描述进行匹配,得到匹 配结果。
在本发明的一个实施例中,控制处理模块220用于对现场指纹图 像进行图像增强;控制处理模块220还用于将图像增强后的现场指纹 图像分割为多个现场指纹增强子图像块;控制处理模块220还用于在 多个现场指纹增强子图像块中,将含有特征点的现场指纹增强子图像块输入至特征点位置生成模型,输出特征点的位置信息。
在本发明的一个实施例中,控制处理模块220用于构建指纹图像 方向场字典集合;控制处理模块220还用于将现场指纹图像分割为多个现场指纹子图像;控制处理模块220还用于获取多个现场指纹子图 像的方向场;控制处理模块220还用于根据多个现场指纹子图像的方 向场在构建指纹图像方向场字典集合中进行匹配,得到多个匹配对象; 控制处理模块220还用于根据多个匹配对象对多个现场指纹子图像 进行替换。
在本发明的一个实施例中,获取模块210还用于获取样本指纹图 像;控制处理模块220用于将样本指纹图像分割为多个样本指纹子图 像;控制处理模块220还用于获取多个样本指纹子图像的方向场信息; 控制处理模块220还用于根据多个样本指纹子图像的方向场信息构建指纹图像方向场字典集合。
在本发明的一个实施例中,获取模块210还用于以特征点为中心 获取特征点图像块;控制处理模块220用于将特征点图像块输入至特 征描述生成模型,输出特征点的N维特征,将N维特征作为特征点 的特征描述;其中,特征描述生成模型为模拟二代小波网络的深度学习模型,N为大于0的自然数。
在本发明的一个实施例中,控制处理模块220用于将特征点图像 块输入至特征描述生成模型多分辨率进行小波变换得到多个高频单 元;控制处理模块220还用于基于特征描述生成模型对多个高频单元 依次进行平均池化、拼接和全连接变换,得到特征点的N维特征。
在本发明的一个实施例中,控制处理模块220用于基于现场指纹 图像中所有特征点的特征描述与指纹库中的指纹图像的特征点的特 征描述计算现场指纹图像和指纹库中的指纹图像的全局相似度;控制 处理模块220还用于将指纹库中与现场指纹图像的全局相似度最高 的指纹图像作为现场指纹图像的匹配对象。
在本发明的一个实施例中,控制处理模块220用于根据现场指纹 图像中所有特征点的特征描述得到现场指纹图像的特征集合;控制处 理模块220还用于从指纹库中获取第一指纹图像的特征集合;控制处 理模块220还用于计算现场指纹图像的特征集合与第一指纹图像的 特征集合中每对特征的相似度;控制处理模块220还用于将相似度最 高的M对构成相似特征集合;控制处理模块220还用于根据相似特 征集合得到最优对齐矩阵,利用最优对齐矩阵最大化特征对相似度和 得到现场指纹图像和第一指纹图像的全局相似度;控制处理模块220 还用于计算指纹库中剩余指纹图像与现场指纹图像的全局相似度。
需要说明的是,本发明实施例的基于深度学习的指纹图像识别装 置的具体实施方式与本发明实施例的基于深度学习的指纹图像识别 方法的具体实施方式类似,具体参见基于深度学习的指纹图像识别方 法部分的描述,为了减少冗余,不做赘述。
另外,本发明实施例的基于深度学习的指纹图像识别装置的其它 构成以及作用对于本领域的技术人员而言都是已知的,为了减少冗余, 不做赘述。
图3是本发明一个示例中电子设备的结构示意图。如图3所示, 该电子设备可以包括:处理器310、通信接口320、存储器330和通 信总线340,其中,处理器310,通信接口320,存储器330通过通 信总线340完成相互间的通信。处理器310可以调用存储器330中的 逻辑指令,以执行基于深度学习的指纹图像识别方法,该方法包括: 获取现场指纹图像;获取所述现场指纹图像中特征点的位置信息;根据所述特征点的位置信息获取特征点图像块,将所述特征点图像块输 入至特征描述生成模型,输出所述特征点的特征描述;根据所述现场指纹图像中所有特征点的特征描述与指纹库中的指纹图像的特征描 述进行匹配,得到匹配结果。
在本发明实施例中,处理器可以是一种集成电路芯片,具有信号 的处理能力。处理器可以是通用处理器、数字信号处理器(Digital Signal Processor,简称DSP)、专用集成电路(Application Specific Integrated Circuit,简称ASIC)、现场可编程门阵列(Field Programmable Gate Array,简称FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。
可以实现或者执行本发明实施例中的公开的各方法、步骤及逻辑 框图。通用处理器可以是微处理器或者该处理器也可以是任何常规的 处理器等。结合本发明实施例所公开的方法的步骤可以直接体现为硬 件译码处理器执行完成,或者用译码处理器中的硬件及软件模块组合执行完成。软件模块可以位于随机存储器,闪存、只读存储器,可编 程只读存储器或者电可擦写可编程存储器、寄存器等本领域成熟的存 储介质中。处理器读取存储介质中的信息,结合其硬件完成上述方法 的步骤。
此外,上述的存储器330中的逻辑指令可以通过软件功能单元的 形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可 读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说 对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若 干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者 网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而 前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟 或者光盘等各种可以存储程序代码的介质。
另一方面,本发明还提供一种非暂态计算机可读存储介质,其上 存储有计算机程序,该计算机程序被处理器执行时实现以执行上述各 提供的基于深度学习的指纹图像识别方法,该方法包括:获取现场指 纹图像;获取所述现场指纹图像中特征点的位置信息;根据所述特征 点的位置信息获取特征点图像块,将所述特征点图像块输入至特征描述生成模型,输出所述特征点的特征描述;根据所述现场指纹图像中 所有特征点的特征描述与指纹库中的指纹图像的特征描述进行匹配, 得到匹配结果。
存储介质可以是存储器,例如可以是易失性存储器或非易失性存 储器,或可包括易失性和非易失性存储器两者。
其中,非易失性存储器可以是只读存储器(Read-Only Memory, 简称ROM)、可编程只读存储器(Programmable ROM,简称PROM)、 可擦除可编程只读存储器(Erasable PROM,简称EPROM)、电可擦 除可编程只读存储器(Electrically EPROM,简称EEPROM)或闪存。
易失性存储器可以是随机存取存储器(Random Access Memory, 简称RAM),其用作外部高速缓存。通过示例性但不是限制性说明, 许多形式的RAM可用,例如静态随机存取存储器(Static RAM,简 称SRAM)、动态随机存取存储器(Dynamic RAM,简称DRAM)、 同步动态随机存取存储器(Synchronous DRAM,简称SDRAM)、双 倍数据速率同步动态随机存取存储器(Double Data Rate SDRAM,简 称DDRSDRAM)、增强型同步动态随机存取存储器(Enhanced SDRAM,简称ESDRAM)、同步连接动态随机存取存储器(Synch Link DRAM,简称SLDRAM)和直接内存总线随机存取存储器(Direct Rambus RAM,简称DRRAM)。
本发明实施例描述的存储介质旨在包括但不限于这些和任意其 它适合类型的存储器。
本领域技术人员应该可以意识到,在上述一个或多个示例中,本 发明所描述的功能可以用硬件与软件组合来实现。当应用软件时,可 以将相应功能存储在计算机可读介质中或者作为计算机可读介质上 的一个或多个指令或代码进行传输。计算机可读介质包括计算机存储 介质和通信介质,其中通信介质包括便于从一个地方向另一个地方传送计算机程序的任何介质。存储介质可以是通用或专用计算机能够存 取的任何可用介质。
以上所描述的装置实施例仅仅是示意性的,其中所述作为分离部 件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的 部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也 可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或 者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性的劳动的情况下,即可以理解并实施。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解 到各实施方式可借助软件加必需的通用硬件平台的方式来实现,当然 也可以通过硬件。基于这样的理解,上述技术方案本质上或者说对现 有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软 件产品可以存储在计算机可读存储介质中,如ROM/RAM、磁碟、光 盘等,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行各个实施例或者实施例的某些部分所 述的方法。
最后应说明的是:以上实施例仅用以说明本发明的技术方案,而 非对其限制;尽管参照前述实施例对本发明进行了详细的说明,本领 域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技 术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修 改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。

Claims (8)

1.一种基于深度学习的指纹图像识别方法,其特征在于,包括:
获取现场指纹图像;
获取所述现场指纹图像中特征点的位置信息;
根据所述特征点的位置信息获取特征点图像块,将所述特征点图像块输入至特征描述生成模型,输出所述特征点的特征描述,所述特征描述生成模型是基于多个样本图像块和与所述多个样本图像块对应的多个特征描述进行训练得到的;
根据所述特征点的位置信息获取特征点图像块,将所述特征点图像块输入至特征描述生成模型,输出所述特征点的特征描述的步骤包括:
以所述特征点为中心获取特征点图像块;
将所述特征点图像块输入至所述特征描述生成模型,输出所述特征点的N维特征,将所述N维特征作为所述特征点的特征描述;
其中,所述特征描述生成模型为模拟二代小波网络的深度学习模型,N为大于0的自然数;
将所述特征点图像块输入至所述特征描述生成模型,输出所述特征点的N维特征的步骤包括:
将所述特征点图像块输入至所述特征描述生成模型进行多分辨率小波变换得到多个高频单元;
基于所述特征描述生成模型对所述多个高频单元依次进行平均池化、拼接和全连接变换,输出所述特征点的N维特征;
根据所述现场指纹图像中所有特征点的特征描述与指纹库中的指纹图像的特征描述进行匹配,得到匹配结果。
2.根据权利要求1所述的基于深度学习的指纹图像识别方法,其特征在于,获取所述现场指纹图像中特征点的位置信息,包括:
对所述现场指纹图像进行图像增强;
将图像增强后的现场指纹图像分割为多个现场指纹增强子图像块,所述多个现场指纹增强子图像块为对图像增强后的现场指纹图像进行分割得到的;
在所述多个现场指纹增强子图像块中,将含有所述特征点的现场指纹增强子图像块输入至特征点位置生成模型,输出所述特征点的位置信息。
3.根据权利要求2所述的基于深度学习的指纹图像识别方法,其特征在于,对所述现场指纹图像进行图像增强,包括:
构建指纹图像方向场字典集合;
将所述现场指纹图像分割为多个现场指纹子图像,所述多个现场指纹子图像为对未进行图像增强的现场指纹图像进行分割得到的;
获取所述多个现场指纹子图像的方向场;
根据所述多个现场指纹子图像的方向场在所述构建指纹图像方向场字典集合中进行匹配,得到多个匹配对象;
根据所述多个匹配对象对所述多个现场指纹子图像进行替换。
4.根据权利要求3所述的基于深度学习的指纹图像识别方法,其特征在于,构建指纹图像方向场字典集合,包括:
获取样本指纹图像;
将所述样本指纹图像分割为多个样本指纹子图像;
获取所述多个样本指纹子图像的方向场信息;
根据所述多个样本指纹子图像的方向场信息构建所述指纹图像方向场字典集合。
5.根据权利要求1所述的基于深度学习的指纹图像识别方法,其特征在于,根据所述现场指纹图像中所有特征点的特征描述与指纹库中的指纹图像的特征点的特征描述进行匹配,得到匹配结果,包括:
基于所述现场指纹图像中所有特征点的特征描述与所述指纹库中的指纹图像的特征点的特征描述进行计算所述现场指纹图像和所述指纹库中的指纹图像的全局相似度;
将所述指纹库中与所述现场指纹图像的全局相似度最高的指纹图像作为所述现场指纹图像的匹配对象。
6.一种基于深度学习的指纹图像识别装置,其特征在于,包括:
获取模块,用于获取现场指纹图像;
控制处理模块,用于获取所述现场指纹图像中特征点的位置信息;所述控制处理模块还用于根据所述特征点的位置信息获取特征点图像块,将所述特征点图像块输入至特征描述生成模型,输出所述特征点的特征描述;根据所述特征点的位置信息获取特征点图像块,将所述特征点图像块输入至特征描述生成模型,输出所述特征点的特征描述的步骤包括:以所述特征点为中心获取特征点图像块;将所述特征点图像块输入至所述特征描述生成模型,输出所述特征点的N维特征,将所述N维特征作为所述特征点的特征描述;其中,所述特征描述生成模型为模拟二代小波网络的深度学习模型,N为大于0的自然数;将所述特征点图像块输入至所述特征描述生成模型,输出所述特征点的N维特征的步骤包括:将所述特征点图像块输入至所述特征描述生成模型进行多分辨率小波变换得到多个高频单元;基于所述特征描述生成模型对所述多个高频单元依次进行平均池化、拼接和全连接变换,输出所述特征点的N维特征;
所述控制处理模块还用于根据所述现场指纹图像中所有特征点的特征描述与指纹库中的指纹图像的特征描述进行匹配,得到匹配结果。
7.一种电子设备,包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述程序时实现如权利要求1至5任一项所述基于深度学习的指纹图像识别方法的步骤。
8.一种非暂态计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1至5任一项所述基于深度学习的指纹图像识别方法的步骤。
CN202110292997.2A 2021-03-18 2021-03-18 基于深度学习的指纹图像识别方法、装置和电子设备 Active CN112906637B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110292997.2A CN112906637B (zh) 2021-03-18 2021-03-18 基于深度学习的指纹图像识别方法、装置和电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110292997.2A CN112906637B (zh) 2021-03-18 2021-03-18 基于深度学习的指纹图像识别方法、装置和电子设备

Publications (2)

Publication Number Publication Date
CN112906637A CN112906637A (zh) 2021-06-04
CN112906637B true CN112906637B (zh) 2023-11-28

Family

ID=76105485

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110292997.2A Active CN112906637B (zh) 2021-03-18 2021-03-18 基于深度学习的指纹图像识别方法、装置和电子设备

Country Status (1)

Country Link
CN (1) CN112906637B (zh)

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101408932A (zh) * 2008-04-11 2009-04-15 浙江师范大学 一种基于指纹结构特征与纹理分析的指纹图像匹配方法
CN101562700A (zh) * 2009-05-26 2009-10-21 天津三星光电子有限公司 通过数码相机指纹识别进行身份验证的方法
JP2010009377A (ja) * 2008-06-27 2010-01-14 Kyushu Univ 照合システム、照合方法、プログラム及び記録媒体
CN102622585A (zh) * 2012-03-06 2012-08-01 同济大学 基于局部特征Gabor小波的BP神经网络人脸识别方法
CN103646238A (zh) * 2013-12-19 2014-03-19 清华大学 指纹方向场的估计方法和装置
CN103996026A (zh) * 2014-05-15 2014-08-20 清华大学 指纹特征提取方法、装置及系统
CN104036455A (zh) * 2013-03-06 2014-09-10 江苏理工学院 基于二代小波的红外图像细节增强方法
CN106709450A (zh) * 2016-12-23 2017-05-24 上海斐讯数据通信技术有限公司 一种指纹图像识别方法及系统
CN107316027A (zh) * 2017-06-27 2017-11-03 昝立民 一种共享设备系统及用于共享设备的指纹识别方法

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107895174B (zh) * 2017-11-09 2020-01-07 京东方科技集团股份有限公司 图像分类和转换方法、装置以及图像处理系统

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101408932A (zh) * 2008-04-11 2009-04-15 浙江师范大学 一种基于指纹结构特征与纹理分析的指纹图像匹配方法
JP2010009377A (ja) * 2008-06-27 2010-01-14 Kyushu Univ 照合システム、照合方法、プログラム及び記録媒体
CN101562700A (zh) * 2009-05-26 2009-10-21 天津三星光电子有限公司 通过数码相机指纹识别进行身份验证的方法
CN102622585A (zh) * 2012-03-06 2012-08-01 同济大学 基于局部特征Gabor小波的BP神经网络人脸识别方法
CN104036455A (zh) * 2013-03-06 2014-09-10 江苏理工学院 基于二代小波的红外图像细节增强方法
CN103646238A (zh) * 2013-12-19 2014-03-19 清华大学 指纹方向场的估计方法和装置
CN103996026A (zh) * 2014-05-15 2014-08-20 清华大学 指纹特征提取方法、装置及系统
CN106709450A (zh) * 2016-12-23 2017-05-24 上海斐讯数据通信技术有限公司 一种指纹图像识别方法及系统
CN107316027A (zh) * 2017-06-27 2017-11-03 昝立民 一种共享设备系统及用于共享设备的指纹识别方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
基于提升小波算法的指纹识别系统及其DSP实现;周孝;林其伟;;计算机工程与科学(第02期);全文 *
基于深度学习的污损指纹识别研究;吴震东;王雅妮;章坚武;;电子与信息学报(第07期);全文 *

Also Published As

Publication number Publication date
CN112906637A (zh) 2021-06-04

Similar Documents

Publication Publication Date Title
CN114913565B (zh) 人脸图像检测方法、模型训练方法、装置及存储介质
CN105917353B (zh) 用于生物认证的特征提取及匹配以及模板更新
CN111860147B (zh) 行人重识别模型优化处理方法、装置和计算机设备
CN109145745B (zh) 一种遮挡情况下的人脸识别方法
US11430255B2 (en) Fast and robust friction ridge impression minutiae extraction using feed-forward convolutional neural network
CN112668519A (zh) 基于MCCAE网络和Deep SVDD网络的异常人脸识别活体检测方法及系统
US11263437B2 (en) Method for extracting a feature vector from an input image representative of an iris by means of an end-to-end trainable neural network
Lu et al. Rethinking prior-guided face super-resolution: A new paradigm with facial component prior
US20230076017A1 (en) Method for training neural network by using de-identified image and server providing same
Ribeiro et al. Exploring deep learning image super-resolution for iris recognition
CN111178130A (zh) 一种基于深度学习的人脸识别方法、系统和可读存储介质
CN112801054A (zh) 人脸识别模型的处理方法、人脸识别方法及装置
CN113095156A (zh) 一种基于逆灰度方式的双流网络签名鉴定方法及装置
CN110826534A (zh) 一种基于局部主成分分析的人脸关键点检测方法及系统
Abaza et al. Ear recognition: a complete system
Huang et al. Learning Based Resolution Enhancement of Iris Images.
CN112906637B (zh) 基于深度学习的指纹图像识别方法、装置和电子设备
CN117132461A (zh) 基于角色形变目标体角色全身优化的方法及系统
CN113657498B (zh) 生物特征提取方法、训练方法、认证方法、装置和设备
CN111597896B (zh) 异常人脸的识别方法、识别装置、识别设备和存储介质
CN110427892B (zh) 基于深浅层自相关融合的cnn人脸表情特征点定位方法
Marzani et al. Morphological preprocessing for low-resolution face recognition using common space
CN112712468A (zh) 虹膜图像超分辨率重建方法及计算设备
Singh et al. Performance Analysis of ELA-CNN model for Image Forgery Detection
Majidpour et al. Unreadable offline handwriting signature verification based on generative adversarial network using lightweight deep learning architectures

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant