CN107330359A - 一种人脸对比的方法和装置 - Google Patents
一种人脸对比的方法和装置 Download PDFInfo
- Publication number
- CN107330359A CN107330359A CN201710367990.6A CN201710367990A CN107330359A CN 107330359 A CN107330359 A CN 107330359A CN 201710367990 A CN201710367990 A CN 201710367990A CN 107330359 A CN107330359 A CN 107330359A
- Authority
- CN
- China
- Prior art keywords
- similarity
- subregion
- contrast
- global
- subcharacter
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/168—Feature extraction; Face representation
- G06V40/171—Local features and components; Facial parts ; Occluding parts, e.g. glasses; Geometrical relationships
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/94—Hardware or software architectures specially adapted for image or video understanding
- G06V10/95—Hardware or software architectures specially adapted for image or video understanding structured as a network, e.g. client-server architectures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/172—Classification, e.g. identification
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- General Health & Medical Sciences (AREA)
- Human Computer Interaction (AREA)
- Software Systems (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Image Analysis (AREA)
Abstract
本发明公开了一种人脸对比的方法和装置,其中该方法包括以下步骤:获取人脸图像;提取全局人脸特征、第一分特征、第二分特征和第三分特征;获取对比图像;提取全局对比特征、第一子特征、第二子特征和第三子特征;将对比图像的全局对比特征、各子特征相应的与人脸图像的全局人脸特征、各分特征进行相似度比对,相应的得到全局相似度、第一相似度、第二相似度和第三相似度;将各相似度加权求和,得到综合相似度。本方法将人脸的局部特征和全局特征相融应用于人脸对比,综合相似度能更好的反映对比图像与人脸图像的相似程度,而且通过增大相应的权值,将个性化区域的相似度或不相似度进行放大,可以快速、准确的锁定人脸图像的相似对象。
Description
技术领域
本发明涉及人脸对比技术,尤其涉及一种人脸对比的方法和装置。
背景技术
人脸比对指的是对于两张给定的人脸图片A和B,分别提取人脸的特征Ft(A) 和Ft(B),通过计算特征相似度S来反映人脸的相似程度,S越大,则表示人脸图片A和B的相似度越高。设定一个阈值t,若S>t,则说明A,B为相同的人。
通常,提供A的抓拍照,将其与数据库中的N个人的图像进行比对,确定A的身份。但是N的数量级别很大,百万,千万的级别,因此也称大库比对。在现有的大库比对中,N的数量往往比较大,100W数据级以上。即使误报率千分之一,也会有100W*0.1%=1k的误报数量,1K数据量仍然较大,并且随着 N的增大,误报量也会增大,这样会给用户带来较多的排查工作量,相应的需要人工进一步筛选的成本也会很大。
进一步,现有的人脸对比大都是基于全局特征的对比,对于个性化的对象,如眼睛比较显著、嘴巴的形状比较独特等,无法利用个性特征进行人脸对比,无法快速、准确的锁定相似对象。
综上,现有的常规方案存在以下缺陷:基于全局特征的人脸对比,对于个性化的对象,无法利用个性特征进行人脸对比,无法快速、准确的锁定相似对象。
发明内容
为了克服现有技术的不足,本发明的目的之一在于提供一种人脸对比的方法,其能解决大库比对的结果数据量大,给用户带来较多的排查工作量,相应的需要人工进一步筛选的成本也会很大;基于全局特征的人脸对比,对于个性化的对象,无法利用个性特征进行人脸对比,无法快速、准确的锁定相似对象的问题。
本发明的目的之二在于提供一种人脸对比的装置,其能解决大库比对的结果数据量大,给用户带来较多的排查工作量,相应的需要人工进一步筛选的成本也会很大;基于全局特征的人脸对比,对于个性化的对象,无法利用个性特征进行人脸对比,无法快速、准确的锁定相似对象的问题。
本发明的目的之三在于提供一种人脸对比的装置,其能解决大库比对的结果数据量大,给用户带来较多的排查工作量,相应的需要人工进一步筛选的成本也会很大;基于全局特征的人脸对比,对于个性化的对象,无法利用个性特征进行人脸对比,无法快速、准确的锁定相似对象的问题。
本发明的目的之一采用以下技术方案实现:
一种人脸对比的方法,包括以下步骤:
获取人脸图像,并将所述人脸图像划分为第一分区域、第二分区域和第三分区域;
提取所述人脸图像的全局人脸特征、所述第一分区域的第一分特征、第二分区域的第二分特征和第三分区域的第三分特征;
获取第一对比图像,并将所述第一对比图像划分为第一子区域、第二子区域和第三子区域;
提取所述第一对比图像的全局对比特征、所述第一子区域的第一子特征、第二子区域的第二子特征和第三子区域的第三子特征;
将所述全局对比特征与所述全局人脸特征进行相似度比对,得到全局相似度,将所述第一子特征与所述第一分特征进行相似度比对,得到第一相似度,将所述第二子特征与所述第二分特征进行相似度比对,得到第二相似度,将所述第三子特征与所述第三分特征进行相似度比对,得到第三相似度;
将所述全局相似度、第一相似度、第二相似度和第三相似度加权求和,得到第一综合相似度。
进一步地,所述获取第一对比图像,具体为从对比库中获取所述第一对比图像,所述对比库包括多个对比图像;
所述将所述全局相似度、第一相似度、第二相似度和第三相似度加权求和,得到第一综合相似度之后,还包括以下步骤:
从所述对比库中获取第二对比图像,求取与所述第二对比图像对应的第二综合相似度;
根据所述第一综合相似度和第二综合相似度筛选出输出图像,或者,根据所述第一综合相似度和第二综合相似度对所述对比库中的所述对比图像分类。
进一步地,所述将所述全局相似度、第一相似度、第二相似度和第三相似度加权求和,得到第一综合相似度之前,还包括以下步骤:
根据所述全局相似度对所述第一对比图像进行初步查询,剔除不满足查询条件的所述第一对比图像。
进一步地,所述人脸对比的方法还包括以下步骤:
根据所述第一分区域、第二分区域和第三分区域的显著参数调整所述将所述全局相似度、第一相似度、第二相似度和第三相似度加权求和时所述全局相似度、第一相似度、第二相似度和第三相似度的权值。
进一步地,所述第一分区域、第二分区域和第三分区域为眼部区域、鼻子区域、嘴部区域、耳部区域、脸颊区域或额头区域中的一种或者多种之组合,且所述第一分区域、第二分区域和第三分区域互不相同;所述第一子区域、第二子区域和第三子区域分别对应于所述第一分区域、第二分区域和第三分区域。
本发明的目的之二采用以下技术方案实现:
一种人脸对比的装置,包括:
第一获取模块,用于获取人脸图像,并将所述人脸图像划分为第一分区域、第二分区域和第三分区域;
第一提取模块,用于提取所述人脸图像的全局人脸特征、所述第一分区域的第一分特征、第二分区域的第二分特征和第三分区域的第三分特征;
第二获取模块,用于获取第一对比图像,并将所述第一对比图像划分为第一子区域、第二子区域和第三子区域;
第二提取模块,用于提取所述第一对比图像的全局对比特征、所述第一子区域的第一子特征、第二子区域的第二子特征和第三子区域的第三子特征;
对比模块,用于将所述全局对比特征与所述全局人脸特征进行相似度比对,得到全局相似度,将所述第一子特征与所述第一分特征进行相似度比对,得到第一相似度,将所述第二子特征与所述第二分特征进行相似度比对,得到第二相似度,将所述第三子特征与所述第三分特征进行相似度比对,得到第三相似度;
加权模块,用于将所述全局相似度、第一相似度、第二相似度和第三相似度加权求和,得到第一综合相似度。
进一步地,所述第二获取模块具体用于从对比库中获取所述第一对比图像,所述对比库包括多个对比图像;
所述人脸对比的装置还包括:
循环模块,用于从所述对比库中获取第二对比图像,求取与所述第二对比图像对应的第二综合相似度;
输出模块,用于根据所述第一综合相似度和第二综合相似度筛选出输出图像,或者,根据所述第一综合相似度和第二综合相似度对所述对比库中的所述对比图像分类。
进一步地,所述人脸对比的装置还包括初步查询模块,用于根据所述全局相似度对所述第一对比图像进行初步查询,剔除不满足查询条件的所述第一对比图像。
进一步地,所述人脸对比的装置还包括权值调整模块,用于根据所述第一分区域、第二分区域和第三分区域的显著参数调整所述将所述全局相似度、第一相似度、第二相似度和第三相似度加权求和时所述全局相似度、第一相似度、第二相似度和第三相似度的权值。
本发明的目的之三采用以下技术方案实现:
一种人脸对比的装置,其特征在于,包括:
处理器以及用于存储处理器可执行的指令的存储器;
所述处理器被配置为:
获取人脸图像,并将所述人脸图像划分为第一分区域、第二分区域和第三分区域;
提取所述人脸图像的全局人脸特征、所述第一分区域的第一分特征、第二分区域的第二分特征和第三分区域的第三分特征;
获取第一对比图像,并将所述第一对比图像划分为第一子区域、第二子区域和第三子区域;
提取所述第一对比图像的全局对比特征、所述第一子区域的第一子特征、第二子区域的第二子特征和第三子区域的第三子特征;
将所述全局对比特征与所述全局人脸特征进行相似度比对,得到全局相似度,将所述第一子特征与所述第一分特征进行相似度比对,得到第一相似度,将所述第二子特征与所述第二分特征进行相似度比对,得到第二相似度,将所述第三子特征与所述第三分特征进行相似度比对,得到第三相似度;
将所述全局相似度、第一相似度、第二相似度和第三相似度加权求和,得到第一综合相似度。
相比现有技术,本发明的有益效果在于:将人脸的局部特征和全局特征相融应用于人脸对比,通过将第一对比图像的全局对比特征、第一子特征、第二子特征、第三子特征相应的与人脸图像的全局人脸特征、第一分特征、第二分特征、第三分特征进行相似度比对,相应的得到全局相似度、第一相似度、第二相似度和第三相似度,再将所述全局相似度、第一相似度、第二相似度和第三相似度加权求和,得到第一综合相似度。第一综合相似度能更好的反映第一对比图像与人脸图像的相似程度,而且通过增大相应的权值,将个性化区域的相似度或不相似度进行放大,可以快速、准确的锁定人脸图像的相似对象。
附图说明
图1为本发明实施例一的人脸对比的方法的流程示意图;
图2为卷积神经网络模型的结构示意图;
图3为vgg16模型的结构示意图;
图4为Caffe框架的结构示意图;
图5为本发明实施例二的人脸对比的方法的流程示意图;
图6为本发明实施例三的人脸对比的装置的结构示意图;
图7为本发明实施例四的人脸对比的装置的结构示意图。
具体实施方式
下面,结合附图以及具体实施方式,对本发明做进一步描述,需要说明的是,在不相冲突的前提下,以下描述的各实施例之间或各技术特征之间可以任意组合形成新的实施例。
实施例一
如图1为一种人脸对比的方法,包括以下步骤:
步骤S110、获取人脸图像,并将所述人脸图像划分为第一分区域、第二分区域和第三分区域。
具体的,所述第一分区域、第二分区域和第三分区域为眼部区域、鼻子区域、嘴部区域、耳部区域、脸颊区域或额头区域等人脸区域中的一种或者多种之组合,且所述第一分区域、第二分区域和第三分区域互不相同;所述第一子区域、第二子区域和第三子区域分别对应于所述第一分区域、第二分区域和第三分区域。例如,第一分区域、第一子区域为眼部区域,第二分区域、第二子区域为鼻子区域,第三分区域、第三子区域为包括脸颊区域和耳部区域在内的人脸区域,当然,还可以包括第四分区域、第五分区域、第四子区域、第五子区域等,不再赘述。
进一步地,将所述人脸图像划分为第一分区域、第二分区域和第三分区域可以由以下步骤实现:需要准备一个人多个场景下的多张人脸,场景有证件照,生活照,监控场景抓拍照等场景,其中证件照是高清的正脸图片,体现出该人的主要特征;生活照提供该人多个角度的多个姿态的照片,可以让网络学习到人的不同姿态之间的转化关系;监控场景较为特殊,存在模糊的情况,姿态变化大的情况,可以帮助网络模型对监控场景的数据进行正确的判断。采集监控数据的方法一般使用现有的人脸检测算法从监控视频中提取一个人多张质量较好的人脸照片,这些人脸照片需要通过人工标记ID,清理,确保每个人有且仅有唯一的ID,作为训练数据。对这些人脸进行缩放到同一个大小,如96*96,然后根据以下算式求得平均脸:
其中Ak(i,j)表示第k张96*96的图片在(i,j)位置的像素值。
之后再根据平均脸的五官区域的位置来估计训练数据脸的五官的大致位置,比如平均脸的左眼位置L,采用人脸图片的2%的基于L位置的偏移量随机截取30*30的区域,来估计该输入的左眼的位置,同理,可以得到其他局部位置。将这些局部位置和整张人脸作为网络模型的输入。选取2%的偏移量考虑到了眼睛和鼻子占比小,偏移量过大会失去局部目标,又需要一定偏移量使得网络对输入位置有鲁棒性。
步骤S120、提取所述人脸图像的全局人脸特征、所述第一分区域的第一分特征、第二分区域的第二分特征和第三分区域的第三分特征。
具体的,所述提取所述人脸图像的全局人脸特征、所述第一分区域的第一分特征、第二分区域的第二分特征和第三分区域的第三分特征,具体为通过卷积神经网络模型进行提取操作。
在本实施例中,卷积神经网络模型的结构示意图如图2所示,包括用于提取所述人脸图像的全局人脸特征的全局分支、用于提取所述第一分区域的第一分特征的第一子分支、第二分区域的第二分特征的第二子分支和第三分区域的第三分特征的第三子分支,其中第一分区域指的是右眼区域,第二分区域指的是左眼区域,第三分区域指的是鼻子区域,此外还包括用于提取嘴部区域的第四子分支。
其中全局分支、子分支均可以采用如图3所示的vgg16模型,模型架构如下:由5个卷积模块con1-con5和两个全连接模块fc6-fc7构成。每个卷积模块包括了卷积层,激活层,池化层等。vgg16模型是当下比较流行的模型,采用该模型结构能够有效地学习特征,提高算法精度。
在本实施例中,卷积神经网络模型是基于caffe框架构建的。在目前流行的 caffe框架上,修改了caffe框架的数据层,使之支持从原图中抽取子图即分区域的操作。使用softmaxWithLoss作为损失函数,进行训练。softmaxWithLoss一般用于神经网络中训练多分类问题。本文将不同的人视为不同的类别,假设总共训练数据为N,那么通过softmaxWithLoss学习的网络模型能够使具有区分N 个人的能力。在此过程中,学习到了一些具备区分人脸的高层次特征。经过测试,这些特征具有泛化能力,能够从N个人扩展到更多的人,并且N越大,学习到的特征泛化性更强。
Caffe框架如图4所示,它实现了卷积神经网络的一些基本操作,包括卷积,池化,多种激活函数等。首先对图片进行预处理,将预处理后的图片转化为特殊的存储格式(LEVELDB,LMDB)来加速IO。
然后框架的数据层(Data Layer)通过多线程读取数据到内存中,将图片数据经过框架的提供的卷积层(Conv Layer),激活层(ReLU),池化层(Pooling),正则化层(Lrn),全连接层(FC),softmaxWithLoss层,可以通过现有的随机梯度下降法来训练模型。
步骤S130、获取第一对比图像,并将所述第一对比图像划分为第一子区域、第二子区域和第三子区域。
子区域的求取与分区域相同,不再赘述。
步骤S140、提取所述第一对比图像的全局对比特征、所述第一子区域的第一子特征、第二子区域的第二子特征和第三子区域的第三子特征。
子特征的求取与分特征相同,不再赘述。
步骤S150、将所述全局对比特征与所述全局人脸特征进行相似度比对,得到全局相似度,将所述第一子特征与所述第一分特征进行相似度比对,得到第一相似度,将所述第二子特征与所述第二分特征进行相似度比对,得到第二相似度,将所述第三子特征与所述第三分特征进行相似度比对,得到第三相似度。
进一步地,第一对比图像A和人脸图像B各特征的相似度可以由以下算式求得:
其中,Si(a,b)表示第i个特征的相似度,Fti(A)[k]表示第一对比图像A在特征i对应的区域的第k个维度的特征值,Fti(B)[k]表示人脸图像B在特征i对应的区域的第k个维度的特征值,dim是一个常数,表示特征维度。
步骤S160、将所述全局相似度、第一相似度、第二相似度和第三相似度加权求和,得到第一综合相似度。
具体的,根据以下算式得到第一对比图像A和人脸图像B的第一综合相似度S(A,B):
其中,S0(A,B)、S1(A,B)、S2(A,B)、S3(A,B)分别表示全局相似度、第一相似度、第二相似度和第三相似度,W0、W1、W2、W3分别表示第一对比图像/人脸图像、第一子区域/分区域、第二子区域/第二分区域、第三子区域/第三分区域对应的权值。
具体的,权值的分配可以根据经验或有限次的试验得到。
本发明将人脸的局部特征和全局特征相融应用于人脸对比,通过将第一对比图像的全局对比特征、第一子特征、第二子特征、第三子特征相应的与人脸图像的全局人脸特征、第一分特征、第二分特征、第三分特征进行相似度比对,相应的得到全局相似度、第一相似度、第二相似度和第三相似度,再将所述全局相似度、第一相似度、第二相似度和第三相似度加权求和,得到第一综合相似度。第一综合相似度能更好的反映第一对比图像与人脸图像的相似程度,而且通过增大相应的权值,将个性化区域的相似度或不相似度进行放大,可以快速、准确的锁定人脸图像的相似对象。
作为本发明的进一步改进,在另一实施例中,所述的人脸对比的方法还包括以下步骤:
步骤S170、根据所述第一分区域、第二分区域和第三分区域的显著参数调整所述将所述全局相似度、第一相似度、第二相似度和第三相似度加权求和时所述全局相似度、第一相似度、第二相似度和第三相似度的权值。
显著参数可以通过将人脸图像的分区域和平均脸的相应区域对比得到,分区域与平均脸的相应区域的区别越大,越个性化,则该分区域对应的显著参数越大。相应的可以调大该分区域对应的权值。
例如,如果人脸图像的眼睛比较独特,则可以增大眼部区域对应的权值。如果第一对比图像中的眼部区域和人脸图像的眼部区域较相似,则最后得到的第一综合相似度就会增大;如果第一对比图像中的眼部区域和人脸图像的眼部区域不相似,则最后得到的第一综合相似度就会更小。因此根据所述第一分区域、第二分区域和第三分区域的显著参数调整对应的权值,可以实现将个性化区域的相似度或不相似度进行放大,可以通过明显的特征快速、准确的锁定人脸图像的相似对象。
实施例二
如图5所示的人脸对比的方法,包括以下步骤:
步骤S210、获取人脸图像,并将所述人脸图像划分为第一分区域、第二分区域和第三分区域。
步骤S220、提取所述人脸图像的全局人脸特征、所述第一分区域的第一分特征、第二分区域的第二分特征和第三分区域的第三分特征。
步骤S230、获取第一对比图像,并将所述第一对比图像划分为第一子区域、第二子区域和第三子区域。
在本实施例中,所述获取第一对比图像,具体为从对比库中获取所述第一对比图像,所述对比库包括多个对比图像。对比库即前述的大库,包括大量的人脸信息,如N个人的抓拍照和证件照。
步骤S240、提取所述第一对比图像的全局对比特征、所述第一子区域的第一子特征、第二子区域的第二子特征和第三子区域的第三子特征。
步骤S250、将所述全局对比特征与所述全局人脸特征进行相似度比对,得到全局相似度,将所述第一子特征与所述第一分特征进行相似度比对,得到第一相似度,将所述第二子特征与所述第二分特征进行相似度比对,得到第二相似度,将所述第三子特征与所述第三分特征进行相似度比对,得到第三相似度。
步骤S201、根据所述全局相似度对所述第一对比图像进行初步查询,剔除不满足查询条件的所述第一对比图像。所述查询条件具体为全局相似度大于一个阈值,该阈值可以由有限次试验或经验值得到。
根据初步查询,可以剔除一部分明显不相似的第一对比图像;只对满足查询条件的第一对比图像进行进一步的根据第一综合相似度对比,因此减少了计算量。
步骤S260、将所述全局相似度、第一相似度、第二相似度和第三相似度加权求和,得到第一综合相似度。
步骤S210-S260,分别对应实施例一中的S110-S160,不再赘述。
步骤S202、从所述对比库中获取第二对比图像,求取与所述第二对比图像对应的第二综合相似度。第二综合相似度的求取与第一综合相似度相同,不再赘述。
步骤S203、根据所述第一综合相似度和第二综合相似度筛选出输出图像,或者,根据所述第一综合相似度和第二综合相似度对所述对比库中的所述对比图像分类。
指的注意的是,第一对比图像、第二对比图像均是对比库中的对比图像,“第一”、“第二”只是为了更清楚地对本发明进行阐述,并不用于明确的指定和区分顺序。
在多次重复步骤S202即可得到对比库中的多个对比图像的综合相似度。之后执行步骤S203,例如,将各对比图像对应的综合相似度按由大到小的顺序排列,选取排名靠前的一定数量的对比图像作为输出图像,用于进行人工对比,或者直接输出综合相似度最大的对比图像。根据与各所述对比图像对应的综合相似度对所述对比库中的所述对比图像分类,具体为,将对比图像分为与人脸图像十分相似的、比较相似的、不相似的等几个类别。进一步,可以根据对比库中对比图像关联的信息确认人脸图像的身份。
实施例三
如图6所示的人脸对比的装置,包括:
第一获取模块110,用于获取人脸图像,并将所述人脸图像划分为第一分区域、第二分区域和第三分区域;
第一提取模块120,用于提取所述人脸图像的全局人脸特征、所述第一分区域的第一分特征、第二分区域的第二分特征和第三分区域的第三分特征;
第二获取模块130,用于获取第一对比图像,并将所述第一对比图像划分为第一子区域、第二子区域和第三子区域;
第二提取模块140,用于提取所述第一对比图像的全局对比特征、所述第一子区域的第一子特征、第二子区域的第二子特征和第三子区域的第三子特征;
对比模块150,用于将所述全局对比特征与所述全局人脸特征进行相似度比对,得到全局相似度,将所述第一子特征与所述第一分特征进行相似度比对,得到第一相似度,将所述第二子特征与所述第二分特征进行相似度比对,得到第二相似度,将所述第三子特征与所述第三分特征进行相似度比对,得到第三相似度;
加权模块160,用于将所述全局相似度、第一相似度、第二相似度和第三相似度加权求和,得到第一综合相似度。
进一步地,所述第二获取模块具体用于从对比库中获取所述第一对比图像,所述对比库包括多个对比图像;
所述人脸对比的装置还包括:
循环模块(图未示),用于从所述对比库中获取第二对比图像,求取与所述第二对比图像对应的第二综合相似度;
输出模块(图未示),用于根据所述第一综合相似度和第二综合相似度筛选出输出图像,或者,根据所述第一综合相似度和第二综合相似度对所述对比库中的所述对比图像分类。
进一步地,人脸对比的装置还包括初步查询模块(图未示),用于根据所述全局相似度对所述第一对比图像进行初步查询,剔除不满足查询条件的所述第一对比图像。
进一步地,人脸对比的装置还包括权值调整模块(图未示),用于根据所述第一分区域、第二分区域和第三分区域的显著参数调整所述将所述全局相似度、第一相似度、第二相似度和第三相似度加权求和时所述全局相似度、第一相似度、第二相似度和第三相似度的权值。
本实施例中的装置与前述实施例中的方法是基于同一发明构思下的两个方面,在前面已经对方法实施过程作了详细的描述,所以本领域技术人员可根据前述描述清楚地了解本实施中的系统的结构及实施过程,为了说明书的简洁,在此就不再赘述。
为了描述的方便,描述以上装置时以功能分为各种模块分别描述。当然,在实施本发明时可以把各模块的功能在同一个或多个软件和/或硬件中实现。
通过以上的实施方式的描述可知,本领域的技术人员可以清楚地了解到本发明可借助软件加必需的通用硬件平台的方式来实现。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品可以存储在存储介质中,如ROM/RAM、磁碟、光盘等,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例或者实施例的某些部分所述的方法。
描述的装置实施例仅仅是示意性的,其中所述作为分离部件说明的模块或单元可以是或者也可以不是物理上分开的,作为模块或单元示意的部件可以是或者也可以不是物理模块,既可以位于一个地方,或者也可以分布到多个网络模块上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。本领域普通技术人员在不付出创造性劳动的情况下,即可以理解并实施。
本发明可用于众多通用或专用的计算系统环境或配置中。例如:个人计算机、服务器计算机、手持设备或便携式设备、平板型设备、多处理器系统、基于微处理器的系统、机顶盒、可编程的消费电子设备、网络PC、小型计算机、大型计算机、包括以上任何系统或设备的分布式计算环境等等,如实施例四。实施例四
如图7所示的人脸对比的装置,包括:处理器200以及用于存储处理器200 可执行的指令的存储器300;
所述处理器200被配置为:
获取人脸图像,并将所述人脸图像划分为第一分区域、第二分区域和第三分区域;
提取所述人脸图像的全局人脸特征、所述第一分区域的第一分特征、第二分区域的第二分特征和第三分区域的第三分特征;
获取第一对比图像,并将所述第一对比图像划分为第一子区域、第二子区域和第三子区域;
提取所述第一对比图像的全局对比特征、所述第一子区域的第一子特征、第二子区域的第二子特征和第三子区域的第三子特征;
将所述全局对比特征与所述全局人脸特征进行相似度比对,得到全局相似度,将所述第一子特征与所述第一分特征进行相似度比对,得到第一相似度,将所述第二子特征与所述第二分特征进行相似度比对,得到第二相似度,将所述第三子特征与所述第三分特征进行相似度比对,得到第三相似度;
将所述全局相似度、第一相似度、第二相似度和第三相似度加权求和,得到第一综合相似度。
本实施例中的装置与前述实施例中的方法是基于同一发明构思下的两个方面,在前面已经对方法实施过程作了详细的描述,所以本领域技术人员可根据前述描述清楚地了解本实施中的系统的结构及实施过程,为了说明书的简洁,在此就不再赘述。
本发明实施例提供的人脸对比的装置,将人脸的局部特征和全局特征相融应用于人脸对比,通过将第一对比图像的全局对比特征、第一子特征、第二子特征、第三子特征相应的与人脸图像的全局人脸特征、第一分特征、第二分特征、第三分特征进行相似度比对,相应的得到全局相似度、第一相似度、第二相似度和第三相似度,再将所述全局相似度、第一相似度、第二相似度和第三相似度加权求和,得到第一综合相似度。第一综合相似度能更好的反映第一对比图像与人脸图像的相似程度,而且通过增大相应的权值,将个性化区域的相似度或不相似度进行放大,可以快速、准确的锁定人脸图像的相似对象。
上述实施方式仅为本发明的优选实施方式,不能以此来限定本发明保护的范围,本领域的技术人员在本发明的基础上所做的任何非实质性的变化及替换均属于本发明所要求保护的范围。
Claims (10)
1.一种人脸对比的方法,其特征在于,包括以下步骤:
获取人脸图像,并将所述人脸图像划分为第一分区域、第二分区域和第三分区域;
提取所述人脸图像的全局人脸特征、所述第一分区域的第一分特征、第二分区域的第二分特征和第三分区域的第三分特征;
获取第一对比图像,并将所述第一对比图像划分为第一子区域、第二子区域和第三子区域;
提取所述第一对比图像的全局对比特征、所述第一子区域的第一子特征、第二子区域的第二子特征和第三子区域的第三子特征;
将所述全局对比特征与所述全局人脸特征进行相似度比对,得到全局相似度,将所述第一子特征与所述第一分特征进行相似度比对,得到第一相似度,将所述第二子特征与所述第二分特征进行相似度比对,得到第二相似度,将所述第三子特征与所述第三分特征进行相似度比对,得到第三相似度;
将所述全局相似度、第一相似度、第二相似度和第三相似度加权求和,得到第一综合相似度。
2.如权利要求1所述的人脸对比的方法,其特征在于:所述获取第一对比图像,具体为从对比库中获取所述第一对比图像;
所述将所述全局相似度、第一相似度、第二相似度和第三相似度加权求和,得到第一综合相似度之后,还包括以下步骤:
从所述对比库中获取第二对比图像,求取与所述第二对比图像对应的第二综合相似度;
根据所述第一综合相似度和第二综合相似度筛选出输出图像,或者,根据所述第一综合相似度和第二综合相似度对所述对比库中的所述对比图像分类。
3.如权利要求1或2所述的人脸对比的方法,其特征在于:所述将所述全局相似度、第一相似度、第二相似度和第三相似度加权求和,得到第一综合相似度之前,还包括以下步骤:
根据所述全局相似度对所述第一对比图像进行初步查询,剔除不满足查询条件的所述第一对比图像。
4.如权利要求1或2所述的人脸对比的方法,其特征在于,还包括以下步骤:
根据所述第一分区域、第二分区域和第三分区域的显著参数调整所述将所述全局相似度、第一相似度、第二相似度和第三相似度加权求和时所述全局相似度、第一相似度、第二相似度和第三相似度的权值。
5.如权利要求1或2所述的人脸对比的方法,其特征在于:所述第一分区域、第二分区域和第三分区域为眼部区域、鼻子区域、嘴部区域、耳部区域、脸颊区域或额头区域中的一种或者多种之组合,且所述第一分区域、第二分区域和第三分区域互不相同;所述第一子区域、第二子区域和第三子区域分别对应于所述第一分区域、第二分区域和第三分区域。
6.一种人脸对比的装置,其特征在于,包括:
第一获取模块,用于获取人脸图像,并将所述人脸图像划分为第一分区域、第二分区域和第三分区域;
第一提取模块,用于提取所述人脸图像的全局人脸特征、所述第一分区域的第一分特征、第二分区域的第二分特征和第三分区域的第三分特征;
第二获取模块,用于获取第一对比图像,并将所述第一对比图像划分为第一子区域、第二子区域和第三子区域;
第二提取模块,用于提取所述第一对比图像的全局对比特征、所述第一子区域的第一子特征、第二子区域的第二子特征和第三子区域的第三子特征;
对比模块,用于将所述全局对比特征与所述全局人脸特征进行相似度比对,得到全局相似度,将所述第一子特征与所述第一分特征进行相似度比对,得到第一相似度,将所述第二子特征与所述第二分特征进行相似度比对,得到第二相似度,将所述第三子特征与所述第三分特征进行相似度比对,得到第三相似度;
加权模块,用于将所述全局相似度、第一相似度、第二相似度和第三相似度加权求和,得到第一综合相似度。
7.如权利要求6所述的人脸对比的装置,其特征在于:所述第二获取模块具体用于从对比库中获取所述第一对比图像,所述对比库包括多个对比图像;
所述人脸对比的装置还包括:
循环模块,用于从所述对比库中获取第二对比图像,求取与所述第二对比图像对应的第二综合相似度;
输出模块,用于根据所述第一综合相似度和第二综合相似度筛选出输出图像,或者,根据所述第一综合相似度和第二综合相似度对所述对比库中的所述对比图像分类。
8.如权利要求6或7所述的人脸对比的装置,其特征在于,还包括初步查询模块,用于根据所述全局相似度对所述第一对比图像进行初步查询,剔除不满足查询条件的所述第一对比图像。
9.如权利要求6或7所述的人脸对比的装置,其特征在于,还包括权值调整模块,用于根据所述第一分区域、第二分区域和第三分区域的显著参数调整所述将所述全局相似度、第一相似度、第二相似度和第三相似度加权求和时所述全局相似度、第一相似度、第二相似度和第三相似度的权值。
10.一种人脸对比的装置,其特征在于,包括:
处理器以及用于存储处理器可执行的指令的存储器;
所述处理器被配置为:
获取人脸图像,并将所述人脸图像划分为第一分区域、第二分区域和第三分区域;
提取所述人脸图像的全局人脸特征、所述第一分区域的第一分特征、第二分区域的第二分特征和第三分区域的第三分特征;
获取第一对比图像,并将所述第一对比图像划分为第一子区域、第二子区域和第三子区域;
提取所述第一对比图像的全局对比特征、所述第一子区域的第一子特征、第二子区域的第二子特征和第三子区域的第三子特征;
将所述全局对比特征与所述全局人脸特征进行相似度比对,得到全局相似度,将所述第一子特征与所述第一分特征进行相似度比对,得到第一相似度,将所述第二子特征与所述第二分特征进行相似度比对,得到第二相似度,将所述第三子特征与所述第三分特征进行相似度比对,得到第三相似度;
将所述全局相似度、第一相似度、第二相似度和第三相似度加权求和,得到第一综合相似度。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710367990.6A CN107330359A (zh) | 2017-05-23 | 2017-05-23 | 一种人脸对比的方法和装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710367990.6A CN107330359A (zh) | 2017-05-23 | 2017-05-23 | 一种人脸对比的方法和装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN107330359A true CN107330359A (zh) | 2017-11-07 |
Family
ID=60192642
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201710367990.6A Pending CN107330359A (zh) | 2017-05-23 | 2017-05-23 | 一种人脸对比的方法和装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN107330359A (zh) |
Cited By (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107909113A (zh) * | 2017-11-29 | 2018-04-13 | 北京小米移动软件有限公司 | 交通事故图像处理方法、装置及存储介质 |
CN108829900A (zh) * | 2018-07-31 | 2018-11-16 | 成都视观天下科技有限公司 | 一种基于深度学习的人脸图像检索方法、装置及终端 |
CN108985153A (zh) * | 2018-06-05 | 2018-12-11 | 成都通甲优博科技有限责任公司 | 一种面部识别方法及装置 |
CN109189970A (zh) * | 2018-09-20 | 2019-01-11 | 北京京东尚科信息技术有限公司 | 图片相似度比对方法和装置 |
CN109711392A (zh) * | 2019-01-24 | 2019-05-03 | 郑州市现代人才测评与考试研究院 | 一种基于人脸识别的人才评定方法 |
CN110348372A (zh) * | 2019-07-09 | 2019-10-18 | 杭州米络星科技(集团)有限公司 | 一种直播中主播身份的实名验证方法 |
CN110781733A (zh) * | 2019-09-17 | 2020-02-11 | 浙江大华技术股份有限公司 | 图像去重方法、存储介质、网络设备和智能监控系统 |
CN110991222A (zh) * | 2019-10-16 | 2020-04-10 | 北京海益同展信息科技有限公司 | 一种物体状态监测、母猪发情监测方法、装置及系统 |
CN111339884A (zh) * | 2020-02-19 | 2020-06-26 | 浙江大华技术股份有限公司 | 图像识别方法以及相关设备、装置 |
CN111626213A (zh) * | 2020-05-27 | 2020-09-04 | 北京嘀嘀无限科技发展有限公司 | 一种身份验证方法、装置、电子设备及可读存储介质 |
CN110321872B (zh) * | 2019-07-11 | 2021-03-16 | 京东方科技集团股份有限公司 | 人脸表情识别方法及装置、计算机设备、可读存储介质 |
WO2024051427A1 (zh) * | 2022-09-09 | 2024-03-14 | 杭州睿胜软件有限公司 | 硬币识别方法、系统及存储介质 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20070172099A1 (en) * | 2006-01-13 | 2007-07-26 | Samsung Electronics Co., Ltd. | Scalable face recognition method and apparatus based on complementary features of face image |
CN101281598A (zh) * | 2008-05-23 | 2008-10-08 | 清华大学 | 基于多部件多特征融合的人脸识别方法 |
CN102654903A (zh) * | 2011-03-04 | 2012-09-05 | 井维兰 | 一种人脸比对方法 |
CN104598873A (zh) * | 2014-12-24 | 2015-05-06 | 苏州福丰科技有限公司 | 一种门锁三维人脸识别方法 |
-
2017
- 2017-05-23 CN CN201710367990.6A patent/CN107330359A/zh active Pending
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20070172099A1 (en) * | 2006-01-13 | 2007-07-26 | Samsung Electronics Co., Ltd. | Scalable face recognition method and apparatus based on complementary features of face image |
CN101281598A (zh) * | 2008-05-23 | 2008-10-08 | 清华大学 | 基于多部件多特征融合的人脸识别方法 |
CN102654903A (zh) * | 2011-03-04 | 2012-09-05 | 井维兰 | 一种人脸比对方法 |
CN104598873A (zh) * | 2014-12-24 | 2015-05-06 | 苏州福丰科技有限公司 | 一种门锁三维人脸识别方法 |
Non-Patent Citations (1)
Title |
---|
张陈方: "基于特征融合的人脸识别", 《中国优秀硕士学位论文全文数据库 信息科技辑》 * |
Cited By (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107909113A (zh) * | 2017-11-29 | 2018-04-13 | 北京小米移动软件有限公司 | 交通事故图像处理方法、装置及存储介质 |
CN108985153A (zh) * | 2018-06-05 | 2018-12-11 | 成都通甲优博科技有限责任公司 | 一种面部识别方法及装置 |
CN108829900A (zh) * | 2018-07-31 | 2018-11-16 | 成都视观天下科技有限公司 | 一种基于深度学习的人脸图像检索方法、装置及终端 |
CN109189970A (zh) * | 2018-09-20 | 2019-01-11 | 北京京东尚科信息技术有限公司 | 图片相似度比对方法和装置 |
CN109711392A (zh) * | 2019-01-24 | 2019-05-03 | 郑州市现代人才测评与考试研究院 | 一种基于人脸识别的人才评定方法 |
CN110348372A (zh) * | 2019-07-09 | 2019-10-18 | 杭州米络星科技(集团)有限公司 | 一种直播中主播身份的实名验证方法 |
CN110321872B (zh) * | 2019-07-11 | 2021-03-16 | 京东方科技集团股份有限公司 | 人脸表情识别方法及装置、计算机设备、可读存储介质 |
US11281895B2 (en) | 2019-07-11 | 2022-03-22 | Boe Technology Group Co., Ltd. | Expression recognition method, computer device, and computer-readable storage medium |
CN110781733A (zh) * | 2019-09-17 | 2020-02-11 | 浙江大华技术股份有限公司 | 图像去重方法、存储介质、网络设备和智能监控系统 |
CN110781733B (zh) * | 2019-09-17 | 2022-12-06 | 浙江大华技术股份有限公司 | 图像去重方法、存储介质、网络设备和智能监控系统 |
CN110991222A (zh) * | 2019-10-16 | 2020-04-10 | 北京海益同展信息科技有限公司 | 一种物体状态监测、母猪发情监测方法、装置及系统 |
CN110991222B (zh) * | 2019-10-16 | 2023-12-08 | 京东科技信息技术有限公司 | 一种物体状态监测、母猪发情监测方法、装置及系统 |
CN111339884A (zh) * | 2020-02-19 | 2020-06-26 | 浙江大华技术股份有限公司 | 图像识别方法以及相关设备、装置 |
CN111626213A (zh) * | 2020-05-27 | 2020-09-04 | 北京嘀嘀无限科技发展有限公司 | 一种身份验证方法、装置、电子设备及可读存储介质 |
WO2024051427A1 (zh) * | 2022-09-09 | 2024-03-14 | 杭州睿胜软件有限公司 | 硬币识别方法、系统及存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107330359A (zh) | 一种人脸对比的方法和装置 | |
EP3333768A1 (en) | Method and apparatus for detecting target | |
CN109284733B (zh) | 一种基于yolo和多任务卷积神经网络的导购消极行为监控方法 | |
CN108573243A (zh) | 一种基于深度卷积神经网络的低质量人脸的比对方法 | |
Guo et al. | Automatic threshold selection based on histogram modes and a discriminant criterion | |
CN104112114B (zh) | 身份验证方法和装置 | |
CN110210276A (zh) | 一种移动轨迹获取方法及其设备、存储介质、终端 | |
Vageeswaran et al. | Blur and illumination robust face recognition via set-theoretic characterization | |
CN109902546A (zh) | 人脸识别方法、装置及计算机可读介质 | |
Wang et al. | Central and peripheral vision for scene recognition: A neurocomputational modeling exploration | |
WO2019152983A2 (en) | System and apparatus for face anti-spoofing via auxiliary supervision | |
CN107766786A (zh) | 活性测试方法和活性测试计算设备 | |
CN110088776A (zh) | 用于训练深度神经网络的计算机设备 | |
Melin | Modular neural networks and type-2 fuzzy systems for pattern recognition | |
CN109858375A (zh) | 活体人脸检测方法、终端及计算机可读存储介质 | |
CN109871845A (zh) | 证件图像提取方法及终端设备 | |
CN108898171A (zh) | 图像识别处理方法、系统及计算机可读存储介质 | |
Luciw et al. | Where What Network 3: Developmental top-down attention with multiple meaningful foregrounds | |
Yamada et al. | Can saliency map models predict human egocentric visual attention? | |
CN109711268A (zh) | 一种人脸图像筛选方法及设备 | |
Da Silva et al. | Evaluation of preys/predators systems for visual attention simulation | |
He et al. | Finger vein image deblurring using neighbors-based binary-GAN (NB-GAN) | |
CN107291781A (zh) | 一种图像管理方法和装置 | |
Cimmino et al. | M2FRED: Mobile masked face REcognition through periocular dynamics analysis | |
CN108629265A (zh) | 用于瞳孔定位的方法和装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20171107 |