CN104573652A - 确定人脸图像中人脸的身份标识的方法、装置和终端 - Google Patents

确定人脸图像中人脸的身份标识的方法、装置和终端 Download PDF

Info

Publication number
CN104573652A
CN104573652A CN201510003813.0A CN201510003813A CN104573652A CN 104573652 A CN104573652 A CN 104573652A CN 201510003813 A CN201510003813 A CN 201510003813A CN 104573652 A CN104573652 A CN 104573652A
Authority
CN
China
Prior art keywords
vector
facial image
original feature
feature vector
face
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201510003813.0A
Other languages
English (en)
Other versions
CN104573652B (zh
Inventor
鞠汶奇
黎伟
许春景
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huawei Technologies Co Ltd
Original Assignee
Huawei Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huawei Technologies Co Ltd filed Critical Huawei Technologies Co Ltd
Priority to CN201510003813.0A priority Critical patent/CN104573652B/zh
Publication of CN104573652A publication Critical patent/CN104573652A/zh
Priority to PCT/CN2015/098568 priority patent/WO2016107482A1/zh
Priority to EP15875160.2A priority patent/EP3229171A4/en
Priority to US15/639,220 priority patent/US10402627B2/en
Application granted granted Critical
Publication of CN104573652B publication Critical patent/CN104573652B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/168Feature extraction; Face representation
    • G06V40/169Holistic features and representations, i.e. based on the facial image taken as a whole
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172Classification, e.g. identification
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/24Classification techniques
    • G06F18/241Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches
    • G06F18/2415Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches based on parametric or probabilistic models, e.g. based on likelihood ratio or false acceptance rate versus a false rejection rate
    • G06F18/24155Bayesian classification
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/70Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/764Arrangements for image or video recognition or understanding using pattern recognition or machine learning using classification, e.g. of video objects
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161Detection; Localisation; Normalisation
    • G06V40/164Detection; Localisation; Normalisation using holistic features
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/168Feature extraction; Face representation

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • General Physics & Mathematics (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Multimedia (AREA)
  • General Health & Medical Sciences (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Human Computer Interaction (AREA)
  • Evolutionary Computation (AREA)
  • Artificial Intelligence (AREA)
  • Data Mining & Analysis (AREA)
  • Computing Systems (AREA)
  • Software Systems (AREA)
  • Databases & Information Systems (AREA)
  • Probability & Statistics with Applications (AREA)
  • Medical Informatics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Evolutionary Biology (AREA)
  • General Engineering & Computer Science (AREA)
  • Image Analysis (AREA)
  • Collating Specific Patterns (AREA)

Abstract

本发明提供一种确定人脸图像中人脸的身份标识的方法、装置和终端,该方法包括:获取人脸图像的原始特征向量;根据原始特征向量,从人脸图像数据库中选择k个候选向量;从k个候选向量中选取原始特征向量的匹配向量;根据原始特征向量的匹配向量,将人脸图像数据库中记录的匹配向量的身份标识确定为人脸图像中的人脸的身份标识。本发明实施例中,人脸图像数据库中存储的是低级的人脸特征向量与联合贝叶斯概率矩阵中的自相关和互相关子矩阵相互作用而形成的中级特征向量,该中级特征向量包含人脸的特征向量与联合贝叶斯概率矩阵中的自相关、互相关子矩阵相互作用的信息,能够提高人脸识别的效率和准确率。

Description

确定人脸图像中人脸的身份标识的方法、装置和终端
技术领域
本发明涉及通信领域,并且更为具体地,涉及一种确定人脸图像中人脸的身份标识的方法、装置和终端。
背景技术
人脸识别是近年来的一项热门计算机技术,它属于生物特征识别技术的一种。生物识别技术还包括:指纹识别、虹膜识别等,这些识别技术可以达到很高的识别率。但是这些生物特征识别技术的运用需要被识别人很好的配合,也就是说这些识别技术对人和环境的具有比较严苛的要求,使得这些技术在诸如公共场所,人流量大的地方以及非强制性民用领域的应用受到很大的限制。而人脸识别则可以突破以上限制,有更为广泛的应用。
人脸识别技术经过几十年的发展,产生了很多方法,例如模板匹配、示例学习、神经网络等等。基于联合贝叶斯概率模型的人脸识别方法是一种常用的人脸识别方法,利用联合贝叶斯概率模型验证两幅人脸图像是不是同一人的人脸图像具有很高的准确性,下面简单介绍基于联合贝叶斯概率模型的人脸识别方法。
首先,通过训练生成联合贝叶斯概率矩阵P,然后,分别提取待验证的人脸f1和人脸f2的特征v1和v2,接着,将v1和v2拼接为一个向量[v1,v2],最后利用如下公式(1):
s=[v1,v2]*P*[v1,v2]Τ        (1)
计算v1和v2之间的距离,当该距离小于预设阈值时,就认为f1和f2是同一个人;当该距离大于预设阈值时,就认为f1和f2不是同一人。联合贝叶斯概率矩阵P可以通过离线学习得到,在学习联合贝叶斯概率矩阵P时,可以直接学习整个矩阵P,也可以将P矩阵进行分解,利用如下公式(2):
s = [ v 1 , v 2 ] * A B B A * [ v 1 , v 2 ] T - - - ( 2 )
分别快速学习子矩阵A和子矩阵B,其中,A为联合贝叶斯概率矩阵P中的互相关子矩阵,B为联合贝叶斯概率矩阵P中的自相关子矩阵。使用这种方法进行人脸识别时,需要预先建立人脸图像数据库,人脸图像数据库中的每一个向量对应一个身份。在识别过程中,需要将人脸f1的特征向量v1与人脸图像数据库中的每个向量利用公式(1)或公式(2)进行比对,求得它们之间的距离s,并从人脸图像数据库中选出与v1距离最小的向量作为v1的匹配向量。当该匹配向量与v1之间的距离小于预设阈值时,将人脸图像数据库中的该匹配向量对应的身份确定为f1的身份;当该匹配向量与v1之间的距离大于预设阈值时,表示人脸f1的身份未记录在人脸图像数据库中,可以为f1分配新的身份,并在数据库中建立该新的身份与v1的对应关系。
由上可知,使用基于联合贝叶斯概率模型的人脸识别方法时,需要将待匹配的人脸特征向量与人脸图像数据库中的全部向量进行比对,一般情况下,人脸图像数据库的规模比较大,利用公式s=[v1,v2]*P*[v1,v2]与数据库中每个向量进行比对运算量大,耗时多,不利于人脸的快速识别。
发明内容
本发明实施例提供一种确定人脸图像中人脸身份标识的方法、装置和终端,以提高人脸识别的效率。
第一方面,提供一种确定人脸图像中人脸的身份标识的方法,包括:获取人脸图像的原始特征向量;根据所述原始特征向量,从人脸图像数据库中选择k个候选向量,其中,所述人脸图像数据库中的向量v*包含分量[v·A,v·B·vΤ],v和所述原始特征向量的特征提取方式相同,A表示联合贝叶斯概率矩阵中的互相关子矩阵,B表示所述联合贝叶斯概率矩阵中的自相关子矩阵,k为正整数;从所述k个候选向量中选取所述原始特征向量的匹配向量,其中,所述原始特征向量的匹配向量为所述k个候选向量中与向量[v1,1]余弦距离最短的候选向量,v1表示所述原始特征向量;根据所述原始特征向量的匹配向量,将所述人脸图像数据库中记录的所述匹配向量的身份标识确定为所述人脸图像中的人脸的身份标识。
结合第一方面,在第一方面的一种实现方式中,所述获取人脸图像的原始特征向量包括:跟踪所述人脸在不同视频图像中的位置,得到连续的N帧人脸图像;从所述N帧人脸图像中的第t帧人脸图像获取所述原始特征向量,其中1≤t<N;所述方法还包括:将所述原始特征向量的匹配向量,以及所述人脸图像数据库中记录的所述匹配向量的身份标识存入缓存数据库;获取所述N帧人脸图像中的第t+1帧人脸图像的原始特征向量,所述第t+1帧人脸图像为所述第t帧人脸图像的后一帧人脸图像;根据所述第t+1帧人脸图像的原始特征向量,从所述缓存数据库中选择目标向量,其中,所述缓存数据库包含所述第t帧人脸图像的原始特征向量的匹配向量;当所述第t+1帧人脸图像的原始特征向量与所述目标向量之间的目标距离小于预设阈值时,将所述缓存数据库中记录的所述目标向量的身份标识确定为所述第t+1帧人脸图像中的人脸的身份标识。
结合第一方面或其上述实现方式的任一种,在第一方面的另一种实现方式中,所述根据所述第t+1帧人脸图像的原始特征向量,从所述缓存数据库中选择目标向量,包括:根据公式从所述缓存数据库中选取所述目标向量,其中,v2表示所述第t+1帧人脸图像的原始特征向量,表示所述缓存数据库中的向量,s表示v2和的目标距离。
结合第一方面或其上述实现方式的任一种,在第一方面的另一种实现方式中,所述根据所述原始特征向量,从人脸图像数据库中选择k个候选向量,包括:根据公式s*=||[v1,0]-v*||2,利用kd-tree算法,从所述人脸图像数据库中选取所述k个候选向量,其中,s*表示[v1,0]和v*之间的欧式距离。
结合第一方面或其上述实现方式的任一种,在第一方面的另一种实现方式中,所述从所述k个候选向量中选取所述原始特征向量的匹配向量,包括:根据公式 s * * = - ( ( x i * ) 2 - ( | | v i * | | 2 ) 2 - ( | | v 1 | | 2 ) 2 ) + c · v 1 · B · v 1 T , 从所述k个候选向量中选取所述原始特征向量的匹配向量,其中,表示所述k个候选向量中的第i候选向量,s**表示[v1,1]与的余弦距离, 表示[v1,0]与的欧式距离,1≤i≤k,c为常数。
结合第一方面或其上述实现方式的任一种,在第一方面的另一种实现方式中,所述方法由服务器执行,所述获取人脸图像的原始特征向量,包括:所述服务器从终端获取向量v',其中,v'=[v1,v1·B·v1Τ];所述服务器从所述向量v'中提取所述原始特征向量。
第二方面,提供一种确定人脸图像中人脸的身份标识的方法,包括:获取人脸图像的原始特征向量;根据公式从人脸图像数据库中选取目标向量,其中,v2表示所述原始特征向量,表示所述人脸图像数据库中的向量,包含分量[v·A,v·B·vΤ],v和所述原始特征向量的特征提取方式相同,A表示联合贝叶斯概率矩阵中的互相关子矩阵,B表示所述联合贝叶斯概率矩阵中的自相关子矩阵,s表示v2与之间的目标距离,所述目标向量为所述人脸图像数据库中与v2目标距离最小的向量;当所述原始特征向量与所述目标向量之间的目标距离小于预设阈值时,将所述人脸图像数据库中记录的所述目标向量的身份标识确定为所述人脸图像中的人脸的身份标识。
第三方面,提供一种确定人脸图像中人脸的身份标识的装置,包括:第一获取单元,用于获取人脸图像的原始特征向量;第一选取单元,用于根据所述原始特征向量,从人脸图像数据库中选择k个候选向量,其中,所述人脸图像数据库中的向量v*包含分量[v·A,v·B·vΤ],v和所述原始特征向量的特征提取方式相同,A表示联合贝叶斯概率矩阵中的互相关子矩阵,B表示所述联合贝叶斯概率矩阵中的自相关子矩阵,k为正整数;第二选取单元,用于从所述k个候选向量中选取所述原始特征向量的匹配向量,其中,所述原始特征向量的匹配向量为所述k个候选向量中与向量[v1,1]余弦距离最短的候选向量,v1表示所述原始特征向量;第一确定单元,用于根据所述原始特征向量的匹配向量,将所述人脸图像数据库中记录的所述匹配向量的身份标识确定为所述人脸图像中的人脸的身份标识。
结合第三方面,在第三方面的一种实现方式中,所述第一获取单元具体用于跟踪所述人脸在不同视频图像中的位置,得到连续的N帧人脸图像;从所述N帧人脸图像中的第t帧人脸图像获取所述原始特征向量,其中1≤t<N;所述装置还包括:存取单元,用于将所述原始特征向量的匹配向量,以及所述人脸图像数据库中记录的所述匹配向量的身份标识存入缓存数据库;第二获取单元,用于获取所述N帧人脸图像中的第t+1帧人脸图像的原始特征向量,所述第t+1帧人脸图像为所述第t帧人脸图像的后一帧人脸图像;第三选取单元,用于根据所述第t+1帧人脸图像的原始特征向量,从所述缓存数据库中选择目标向量,其中,所述缓存数据库包含所述第t帧人脸图像的原始特征向量的匹配向量;第二确定单元,用于当所述第t+1帧人脸图像的原始特征向量与所述目标向量之间的目标距离小于预设阈值时,将所述缓存数据库中记录的所述目标向量的身份标识确定为所述第t+1帧人脸图像中的人脸的身份标识。
结合第三方面或其上述实现方式的任一种,在第三方面的另一种实现方式中,所述第三选取单元具体用于根据公式从所述缓存数据库中选取所述目标向量,其中,v2表示所述第t+1帧人脸图像的原始特征向量,表示所述缓存数据库中的向量,s表示v2和的目标距离。
结合第三方面或其上述实现方式的任一种,在第三方面的另一种实现方式中,所述第一选取单元具体用于根据公式s*=||[v1,0]-v*||2,利用kd-tree算法,从所述人脸图像数据库中选取所述k个候选向量,其中,s*表示[v1,0]和v*之间的欧式距离。
结合第三方面或其上述实现方式的任一种,在第三方面的另一种实现方式中,所述第二选取单元具体用于根据公式 s * * = - ( ( s i * ) 2 - ( | | v i * | | 2 ) 2 - ( | | v 1 | | 2 ) 2 ) + c · v 1 · B · v 1 T , 从所述k个候选向量中选取所述原始特征向量的匹配向量,其中,表示所述k个候选向量中的第i候选向量,s**表示[v1,1]与的余弦距离, 表示[v1,0]与的欧式距离,1≤i≤k,c为常数。
结合第三方面或其上述实现方式的任一种,在第三方面的另一种实现方式中,所述装置为服务器,所述第一获取单元具体用于从终端获取向量v',其中,v'=[v1,v1·B·v1Τ];从所述向量v'中提取所述原始特征向量。
第四方面,提供一种确定人脸图像中人脸的身份标识的装置,包括:获取单元,用于获取人脸图像的原始特征向量;选取单元,用于根据公式从人脸图像数据库中选取目标向量,其中,v2表示所述原始特征向量,表示所述人脸图像数据库中的向量,包含分量[v·A,v·B·vΤ],v和所述原始特征向量的特征提取方式相同,A表示联合贝叶斯概率矩阵中的互相关子矩阵,B表示所述联合贝叶斯概率矩阵中的自相关子矩阵,s表示v2与之间的目标距离,所述目标向量为所述人脸图像数据库中与v2目标距离最小的向量;确定单元,用于当所述原始特征向量与所述目标向量之间的目标距离小于预设阈值时,将所述人脸图像数据库中记录的所述目标向量的身份标识确定为所述人脸图像中的人脸的身份标识。
第五方面,提供一种终端,包括:摄像头,用于采集人脸图像;处理器,用于获取所述人脸图像的原始特征向量v1,根据所述原始特征向量v1,生成向量v',其中,v'=[v1,v1·B·v1Τ],B表示联合贝叶斯概率矩阵中的自相关子矩阵;发射器,用于向服务器发送所述向量v',所述向量v'用于服务器识别所述人脸图像中的人脸的身份标识。
现有技术中,假设人脸图像的原始特征向量为v1,人脸图像数据库中的向量为v,则原始特征向量v1与人脸图像数据库中的每个向量v进行比对时,均要按照公式 s = [ v 1 , , v 2 ] * A B B A * [ v 1 , v 2 ] T - - - ( 2 ) 重新计算v·A和v·B·vΤ,本发明实施例中,先获取人脸图像的原始特征向量,然后从人脸图像数据库中选取原始特征向量的匹配向量,由于人脸图像数据库中的向量v*包含分量[v·A,v·B·vΤ],也就是说,本发明实施例中,人脸图像数据库中存储的是低级的人脸的特征向量与联合贝叶斯概率矩阵中的自相关和互相关子矩阵相互作用而形成的中级特征向量,该中级特征向量包含人脸的特征向量与联合贝叶斯概率矩阵中的自相关、互相关子矩阵相互作用的信息,能够提高人脸识别的效率。
附图说明
为了更清楚地说明本发明实施例的技术方案,下面将对本发明实施例中所需要使用的附图作简单地介绍,显而易见地,下面所描述的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明实施例的确定人脸图像中人脸的身份标识的方法的示意性流程图。
图2是本发明实施例的确定人脸图像中人脸的身份标识的方法的示意性流程图。
图3是本发明实施例的确定人脸图像中人脸的身份标识的装置的示意性框图。
图4是本发明实施例的确定人脸图像中人脸的身份标识的装置的示意性框图。
图5是本发明实施例的确定人脸图像中人脸的身份标识的装置的示意性框图。
图6是本发明实施例的确定人脸图像中人脸的身份标识的装置的示意性框图。
图7是本发明实施例的终端的示意性框图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明的一部分实施例,而不是全部实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例,都应属于本发明保护的范围。
图1是本发明实施例的确定人脸图像中人脸的身份标识的方法的示意性流程图。图1的方法包括:
110、获取人脸图像的原始特征向量。
上述原始特征向量可以是提取人脸图像的HOG(Histogram of Gradient,方向梯度直方图),LBP(Local Binary Patterns,局部二值模式)等特征得到的向量,本发明实施例对此不作具体限定。
120、根据原始特征向量,从人脸图像数据库中选择k个候选向量,其中,人脸图像数据库中的向量v*包含分量[v·A,v·B·vΤ],v和原始特征向量的特征提取方式相同,A表示联合贝叶斯概率矩阵中的互相关子矩阵,B表示联合贝叶斯概率矩阵中的自相关子矩阵,k为正整数。
上述v*包含分量[v·A,v·B·vΤ]是指v*中的至少部分分量为[v·A,v·B·vΤ],举例说明,假设[v·A,v·B·vΤ]=[2221],那么v*可以等于[2221],或者,v*=[22210],只要v*包含[2221]即可。
在现有技术中,人脸图像数据库中存储的是与原始特征向量采用相同特征提取方式得到的特征向量,假设原始特征向量用v1表示,人脸图像数据库中存储的特征向量用v表示,将公式(2)展开可以得到如下公式(3):
s=v·B·vΤ+v1·B·v1Τ+2·v·A·v1Τ                 (3)
由于人脸图像数据库中的向量v是已知的,通过观察公式(3)可以看出,公式(3)中的v·B·vΤ,以及v·A是可以离线计算得到的。因此,本发明实施例中,人脸图像数据库中不再存储某个人脸的特征向量v,而改存向量v*,并且将[v·A,v·B·vΤ]作为v*的分量,而[v·A,v·B·vΤ]中的v·A和v·B·vΤ正是现有技术中利用公式(3)进行人脸识别时需要在线执行的运算,也就是说,通过改变人脸图像数据库中向量的具体形式,将一部分需要在线执行的运算离线计算好,提高了人脸识别的效率。
此外,上述k个候选向量可以是人脸图像数据库中与向量[v1,0]欧式距离最短的k个候选向量,上述k个候选向量与原始特征向量的欧式距离最短是指:人脸图像数据库中,按照与原始特征向量欧式距离从小到达排序,排在前k个的向量。上述从人脸图像数据库中选取与向量[v1,0]欧式距离最短的k个候选向量可以有多种,下面给出两种具体的实现方式。
可选地,作为一种实现方式,可以将向量[v1,0]与人脸图像数据库中的每个向量进行比对,找出欧式距离最短的k个向量作为候选向量。
可选地,作为另一种实现方式,根据第二距离公式s*=||[v1,0]-v*||2,利用kd-tree算法,从人脸图像数据库中选取k个候选向量,其中,v1表示原始特征向量,s*表示[v1,0]与v*之间的欧式距离。在该实现方式中,利用kd-tree算法,快速搜索出k个候选向量,与向量之间一一比对的方式相比,提高了算法的效率。kd-tree是由二叉搜索树推广而来的用于多维搜索的树。kd-tree与二叉树不同的是它的每个节点表示高维空间(空间的维数取决于向量的维数)的一个点,kd-tree将求解向量之间相似性的问题转换成求解高维空间中点与点之间的距离,两点在高维空间中的距离越近,对应的两个向量相似性越高。具体实现时,kd-tree通过分割超平面的方式将高维空间进行层次划分,确定待搜索的点(表示原始特征向量的点)对应的k个最近邻点,并将这k个最近邻点对应的向量作为上述k个候选向量。
130、从k个候选向量中选取原始特征向量的匹配向量,其中,原始特征向量的匹配向量为k个候选向量中与向量[v1,1]余弦距离最短的候选向量,v1表示原始特征向量。
上述从k个候选向量中选取原始特征向量的匹配向量的方式可以有多种。例如,根据公式 s * * = - ( ( s i * ) 2 - ( | | v i * | | 2 ) 2 - ( | | v 1 | | 2 ) 2 ) + c · v 1 · B · v 1 T , 从k个候选向量中选取原始特征向量的匹配向量,其中,表示k个候选向量中的第i候选向量,s**表示[v1,1]与的余弦距离, 表示[v1,0]与的欧式距离,1≤i≤k,c为常数。
可以验证,通过上述公式得到的原始特征向量的匹配向量,与基于联合贝叶斯概率模型得到的匹配向量结果一致,但由于人脸图像数据库中的向量包含分量相当于将利用联合贝叶斯概率模型计算向量相似性时需要在线计算的vi·A和通过离线运算得到,并存储在人脸图像数据库中,在线计算时,仅需从人脸图像数据库中获得也就相当于得到了vi·A和的运算结果,提高了人脸识别的效率。
进一步地,可以将预先存储于人脸图像数据库中,这样做的好处是将需要在线执行的一部分运算离线执行,当需要利用上述公式计算余弦距离时,可以直接从数据库中得到无需在线计算进一步提高了人脸识别的效率。
140、根据原始特征向量的匹配向量,将人脸图像数据库中记录的匹配向量的身份标识确定为人脸图像中的人脸的身份标识。
应理解,人脸的身份标识是指该人脸所代表的人的唯一标识,例如,该人的身份证号。
具体地,人脸图像数据库中记录了向量与身份标识的对应关系,当确定原始特征向量的匹配向量之后,可以直接从人脸图像数据库中找到该匹配向量的身份标识,然后将该身份标识确定为人脸图像中的人脸的身份标识。或者,先判断原始特征向量与匹配向量之间的余弦距离是否小于预设阈值,如果小于预设阈值,则将匹配向量的身份标识确定为该人脸的身份标识;如果大于预设阈值,则表明从人脸图像数据库中未找到该人脸的身份标识。
现有技术中,假设人脸图像的原始特征向量为v1,人脸图像数据库中的向量为v,则原始特征向量v1与人脸图像数据库中的每个向量v进行比对时,均要按照公式 s = [ v , v 1 ] * A B B A * [ v , v 1 ] T = v · B · v T + v 1 · B · v 1 T + 2 · v · A · v 1 T 重复计算v·A和v·B·vΤ,本发明实施例中,先获取人脸图像的原始特征向量,然后从人脸图像数据库中选取原始特征向量的匹配向量,由于人脸图像数据库中的向量v*包含分量[v·A,v·B·vΤ],也就是说,本发明实施例中,人脸图像数据库中存储的是低级的人脸特征向量与联合贝叶斯概率矩阵中的自相关和互相关子矩阵相互作用而形成的中级特征向量,该中级特征向量包含人脸的特征向量与联合贝叶斯概率矩阵中的自相关、互相关子矩阵相互作用的信息,能够提高人脸识别的效率。
本发明实施例的方法可以应用于视频中的人脸识别,为了便于理解,先简单介绍视频信号中人脸识别的大体流程。
第一步:对初始帧进行人脸检测,例如采用Robust Real-time ObjectDetection算法进行人脸检测,得到视频图像中人脸的初始位置,得到一帧人脸图像。然后,在后续视频帧中,利用目标跟踪算法,例如,Tracking-Learning-Detection算法,对该人脸的位置进行跟踪,得到人脸的跟踪序列,该跟踪序列包括多帧人脸图像。
第二步,利用公式(1)或公式(2)将跟踪序列中的每一帧人脸图像的原始特征向量与人脸图像数据库中的全部特征向量进行比对,选出每一帧人脸图像中的人脸的身份标识。采用投票机制,对识别出的身份标识进行统计,将得票最多的身份标识确定为该人脸的最终身份标识。当然,如果从人脸图像数据库中未确定出该人脸的身份标识,可以为该人脸分配一个新的身份标识,并在人脸图像数据库中注册该新的身份标识。
下面详细介绍在上述视频信号中人脸识别的架构下的本发明的具体实现方式。
可选地,作为一个实施例,步骤110可包括:跟踪人脸在不同视频图像中的位置,得到连续的N帧图像;从N帧图像中的第t帧图像获取原始特征向量,其中1≤t<N;图1的方法还可包括:将原始特征向量的匹配向量,以及人脸图像数据库中记录的匹配向量的身份标识存入缓存数据库;获取N帧人脸图像中的第t+1帧人脸图像的原始特征向量,其中第t+1帧人脸图像为第t帧人脸图像的后一帧人脸图像;根据第t+1帧人脸图像的原始特征向量,从缓存数据库中选择目标向量,其中,缓存数据库包含第t帧人脸图像的原始特征向量的匹配向量;当第t+1帧人脸图像的原始特征向量与目标向量之间的目标距离小于预设阈值时,将缓存数据库中记录的目标向量的身份标识确定为第t+1帧人脸图像中的人脸的身份标识。
上述N帧人脸图像组成了视频中人脸的跟踪序列,上述第t帧人脸图像可以是N帧人脸图像中的第1帧人脸图像,也可以是N帧人脸图像中除最后1帧人脸图像之外的任意人脸图像。实际中,可以将N帧人脸图像按照其在视频中出现的先后顺序进行排列,然后依次识别人脸图像中的人脸,针对每一帧人脸图像进行人脸识别时,先访问缓存数据库,如果从缓存数据库中未识别出人脸,继续访问人脸图像数据库。也就是说,本发明实施例引入缓存数据库和人脸图像数据库这样一种二级数据库结构,可以将人脸图像数据库中经常被访问的人脸图像存入缓存数据库,实际访问时,先访问缓存数据库,如果基于缓存数据库中未能识别出人脸,再访问全局的人脸图像数据库,一定程度上提高了人脸识别的效率。
具体而言,由于N帧人脸图像是对同一人脸跟踪得到的人脸图像,因此,第t帧人脸图像和第t+1帧人脸图像匹配结果相同的概率很高,当从人脸图像数据库中找到第t帧人脸图像的原始特征向量的匹配向量时,将该匹配向量存入缓存数据库,第t+1帧人脸图像先访问缓存数据库时命中该匹配向量的概率很高。需要说明的是,实际中,不但可以将第t帧人脸图像中的原始特征向量的匹配向量存储到缓存数据库中,也可以将人脸图像数据库中的与该匹配向量存储位置相邻的向量一并存储缓存数据库(当然,前提是人脸图像数据库中的向量的具体组织形式为相似性越高的向量,在人脸图像数据库中的存储位置越接近)。
需要说明的是,根据第t+1帧人脸图像的原始特征向量,从缓存数据库中选择目标向量可以包括:根据公式从缓存数据库中选取目标向量,其中,v2表示第t+1帧人脸图像的原始特征向量,表示缓存数据库中的向量,s表示v2和的目标距离。
现有技术中,跟踪序列会包含多帧人脸图像,由于视频信号的帧速率很高,跟踪序列中采集到的人脸的很多图像非常相似,如果不加筛选,将跟踪序列中的全部人脸图像用作后续人脸识别,相似度极高的人脸图像的人脸识别结果一般相同,会引入不必要的重复计算。
可选地,作为一个实施例,上述跟踪人脸在不同视频图像中的位置,得到连续的N帧人脸图像,可包括:从视频中获取M帧人脸图像,M≥N;根据M帧人脸图像中的人脸的相似性,从M帧人脸图像中删除冗余的人脸图像,得到N帧人脸图像。
也就是说,本发明实施例中,先从视频中采集到M帧人脸图像,然后基于这M帧人脸图像的相似性,删除一部分冗余的人脸图像,例如,如果两帧图像非常相似,保留其中一张即可。上述M帧人脸图像组成了视频中人脸的初始跟踪序列,而上述N帧人脸图像组成了最终的用于人脸识别的跟踪序列。
人脸的相似性的度量方式可以有多种,例如,先提取M帧人脸图像的原始特征向量,然后采用公式(1)或公式(2),即联合贝叶斯概率模型,计算两个向量之间的相似性(或距离)。举例说明,从当前帧中采集人脸的原始特征向量,利用公式(1)将该原始特征向量与已经加入跟踪序列中的其他人脸图像的原始特征向量进行比对(可以与跟踪序列中的其他全部人脸图像的原始特征向量进行比对,也可以仅选取时间上连续的几帧人脸图像的原始特征向量进行比对),当比对结果大于预设阈值,将当前帧加入跟踪序列,否则丢弃当前帧。
应理解,图1的方法可以由位于云端的服务器执行,步骤110中的获取人脸图像的原始特征向量可以是:该服务器直接从人脸图像中获取该原始特征向量。也可以由移动终端获取该原始特征向量后,将该原始特征向量上传至该服务器。下面给出终端采集人脸图像的原始特征向量,并向服务器上传该原始特征向量的一个具体实施例:服务器从终端获取向量v',其中,v'=[v1,v1·B·v1Τ];服务器从向量v'中提取原始特征向量。
图2是本发明实施例的确定人脸图像中人脸的身份标识的方法的示意性流程图。图2的方法包括:
210、获取人脸图像的原始特征向量;
220、根据公式从人脸图像数据库中选取目标向量,其中,v2表示原始特征向量,vc *表示人脸图像数据库中的向量,包含分量[v·A,v·B·vΤ],v和原始特征向量的特征提取方式相同,A表示联合贝叶斯概率矩阵中的互相关子矩阵,B表示联合贝叶斯概率矩阵中的自相关子矩阵,s表示v2与之间的目标距离,目标向量为人脸图像数据库中与v2目标距离最小的向量;
230、当原始特征向量与目标向量之间的目标距离小于预设阈值时,将人脸图像数据库中记录的目标向量的身份标识确定为人脸图像中的人脸的身份标识。
由于人脸图像数据库中的向量包含分量[v·A,v·B·vΤ],也就是说,人脸图像数据库中存储的是低级的人脸特征向量与联合贝叶斯概率矩阵中的自相关和互相关子矩阵相互作用而形成的中级特征向量,该中级特征向量包含人脸的特征向量与联合贝叶斯概率矩阵中的自相关、互相关子矩阵相互作用的信息,能够提高人脸识别的效率。
上文结合图1和图2,详细描述了根据本发明实施例的确定人脸图像中人脸的身份标识的方法。下文结合图3至图6,详细描述根据本发明实施例的确定人脸图像中人脸的身份标识的装置。
图3是本发明实施例的确定人脸图像中人脸的身份标识的装置的示意性框图。应理解,图3的装置300能够实现图1中描述的各个步骤,为避免重复,此处不再详述。装置300包括:
第一获取单元310,用于获取人脸图像的原始特征向量;
第一选取单元320,用于根据原始特征向量,从人脸图像数据库中选择k个候选向量,其中,人脸图像数据库中的向量v*包含分量[v·A,v·B·vΤ],v和原始特征向量的特征提取方式相同,A表示联合贝叶斯概率矩阵中的互相关子矩阵,B表示联合贝叶斯概率矩阵中的自相关子矩阵,k为正整数;
第二选取单元330,用于从k个候选向量中选取原始特征向量的匹配向量,其中,原始特征向量的匹配向量为k个候选向量中与向量[v1,1]余弦距离最短的候选向量,v1表示原始特征向量;
第一确定单元340,用于根据原始特征向量的匹配向量,将人脸图像数据库中记录的匹配向量的身份标识确定为人脸图像中的人脸的身份标识。
现有技术中,假设人脸图像的原始特征向量为v1,人脸图像数据库中的向量为v,则原始特征向量v1与人脸图像数据库中的每个向量v进行比对时,均要按照公式 s = [ v , v 1 ] * A B B A * [ v , v 1 ] T = v · B · v T + v 1 · B · v 1 T + 2 · v · A · v 1 T 重复计算v·A和v·B·vΤ,本发明实施例中,先获取人脸图像的原始特征向量,然后从人脸图像数据库中选取原始特征向量的匹配向量,由于人脸图像数据库中的向量v*包含分量[v·A,v·B·vΤ],也就是说,本发明实施例中,人脸图像数据库中存储的是低级的人脸特征向量与联合贝叶斯概率矩阵中的自相关和互相关子矩阵相互作用而形成的中级特征向量,该中级特征向量包含人脸的特征向量与联合贝叶斯概率矩阵中的自相关、互相关子矩阵相互作用的信息,能够提高人脸识别的效率。
可选地,作为一个实施例,第一获取单元310具体用于跟踪人脸在不同视频图像中的位置,得到连续的N帧人脸图像;从N帧人脸图像中的第t帧人脸图像获取原始特征向量,其中1≤t<N;装置300还包括:存取单元,用于将原始特征向量的匹配向量,以及人脸图像数据库中记录的匹配向量的身份标识存入缓存数据库;第二获取单元,用于获取N帧人脸图像中的第t+1帧人脸图像的原始特征向量,第t+1帧人脸图像为第t帧人脸图像的后一帧人脸图像;第三选取单元,用于根据第t+1帧人脸图像的原始特征向量,从缓存数据库中选择目标向量,其中,缓存数据库包含第t帧人脸图像的原始特征向量的匹配向量;第二确定单元,用于当第t+1帧人脸图像的原始特征向量与目标向量之间的目标距离小于预设阈值时,将缓存数据库中记录的目标向量的身份标识确定为第t+1帧人脸图像中的人脸的身份标识。
可选地,作为一个实施例,第三选取单元具体用于根据公式从缓存数据库中选取目标向量,其中,v2表示第t+1帧人脸图像的原始特征向量,表示缓存数据库中的向量,s表示v2和的目标距离。
可选地,作为一个实施例,第一选取单元320具体用于根据公式s*=||[v1,0]-v*||2,利用kd-tree算法,从人脸图像数据库中选取k个候选向量,其中,s*表示[v1,0]和v*之间的欧式距离。
可选地,作为一个实施例,第二选取单元330具体用于根据公式 s * * = - ( ( s i * ) 2 - ( | | v i * | | 2 ) 2 - ( | | v 1 | | 2 ) 2 ) + c · v 1 · B · v 1 T , 从k个候选向量中选取原始特征向量的匹配向量,其中,表示k个候选向量中的第i候选向量,s**表示[v1,1]与的余弦距离, 表示[v1,0]与的欧式距离,1≤i≤k,c为常数。
可选地,作为一个实施例,装置300为服务器,第一获取单元310具体用于从终端获取向量v',其中,v'=[v1,v1·B·v1Τ];从向量v'中提取原始特征向量。
图4是本发明实施例的确定人脸图像中人脸的身份标识的装置的示意性框图。应理解,图4的装置400能够实现图1中描述的各个步骤,为避免重复,此处不再详述。装置400包括:
存储器410,用于存储程序;
处理器420,用于执行程序,当所述程序被执行时,所述处理器420具体用于:获取人脸图像的原始特征向量;根据原始特征向量,从人脸图像数据库中选择k个候选向量,其中,人脸图像数据库中的向量v*包含分量[v·A,v·B·vΤ],v和原始特征向量的特征提取方式相同,A表示联合贝叶斯概率矩阵中的互相关子矩阵,B表示联合贝叶斯概率矩阵中的自相关子矩阵,k为正整数;从k个候选向量中选取原始特征向量的匹配向量,其中,原始特征向量的匹配向量为k个候选向量中与向量[v1,1]余弦距离最短的候选向量,v1表示原始特征向量;根据原始特征向量的匹配向量,将人脸图像数据库中记录的匹配向量的身份标识确定为人脸图像中的人脸的身份标识。
现有技术中,假设人脸图像的原始特征向量为v1,人脸图像数据库中的向量为v,则原始特征向量v1与人脸图像数据库中的每个向量v进行比对时,均要按照公式 s = [ v , v 1 ] * A B B A * [ v , v 1 ] T = v · B · v T + v 1 · B · v 1 T + 2 · v · A · v 1 T 重复计算v·A和v·B·vΤ,本发明实施例中,先获取人脸图像的原始特征向量,然后从人脸图像数据库中选取原始特征向量的匹配向量,由于人脸图像数据库中的向量v*包含分量[v·A,v·B·vΤ],也就是说,本发明实施例中,人脸图像数据库中存储的是低级的人脸特征向量与联合贝叶斯概率矩阵中的自相关和互相关子矩阵相互作用而形成的中级特征向量,该中级特征向量包含人脸的特征向量与联合贝叶斯概率矩阵中的自相关、互相关子矩阵相互作用的信息,能够提高人脸识别的效率。
可选地,作为一个实施例,处理器420具体用于跟踪人脸在不同视频图像中的位置,得到连续的N帧人脸图像;从N帧人脸图像中的第t帧人脸图像获取原始特征向量,其中1≤t<N;处理器420还用于将原始特征向量的匹配向量,以及人脸图像数据库中记录的匹配向量的身份标识存入缓存数据库;获取N帧人脸图像中的第t+1帧人脸图像的原始特征向量,第t+1帧人脸图像为第t帧人脸图像的后一帧人脸图像;根据第t+1帧人脸图像的原始特征向量,从缓存数据库中选择目标向量,其中,缓存数据库包含第t帧人脸图像的原始特征向量的匹配向量;当第t+1帧人脸图像的原始特征向量与目标向量之间的目标距离小于预设阈值时,将缓存数据库中记录的目标向量的身份标识确定为第t+1帧人脸图像中的人脸的身份标识。
可选地,作为一个实施例,处理器420具体用于根据公式从缓存数据库中选取目标向量,其中,v2表示第t+1帧人脸图像的原始特征向量,表示缓存数据库中的向量,s表示v2和的目标距离。
可选地,作为一个实施例,处理器420具体用于根据公式s*=||[v1,0]-v*||2,利用kd-tree算法,从人脸图像数据库中选取k个候选向量,其中,s*表示[v1,0]和v*之间的欧式距离。
可选地,作为一个实施例,处理器420具体用于根据公式 s * * = - ( ( x i * ) 2 - ( | | v i * | | 2 ) 2 - ( | | v 1 | | 2 ) 2 ) + c · v 1 · B · v 1 T , 从k个候选向量中选取原始特征向量的匹配向量,其中,表示k个候选向量中的第i候选向量,s**表示[v1,1]与的余弦距离, 表示[v1,0]与的欧式距离,1≤i≤k,c为常数。
可选地,作为一个实施例,装置400为服务器,处理器420具体用于通过接收器从终端获取向量v',其中,v'=[v1,v1·B·v1Τ];从向量v'中提取原始特征向量。
图5是本发明实施例的确定人脸图像中人脸的身份标识的装置的示意性框图。应理解,图5的装置500能够实现图2中描述各个步骤,为避免重复,此处不再赘述。装置500包括:
获取单元510,用于获取人脸图像的原始特征向量;
选取单元520,用于根据公式从人脸图像数据库中选取目标向量,其中,v2表示所述原始特征向量,表示所述人脸图像数据库中的向量,s表示v2与之间的目标距离,所述目标向量为所述人脸图像数据库中与v2目标距离最小的向量,B表示联合贝叶斯概率矩阵中的自相关子矩阵;
确定单元530,用于当所述原始特征向量与所述目标向量之间的目标距离小于预设阈值时,将所述人脸图像数据库中记录的所述目标向量的身份标识确定为所述人脸图像中的人脸的身份标识。
由于人脸图像数据库中的向量包含分量[v·A,v·B·vΤ],也就是说,人脸图像数据库中存储的是低级的人脸特征向量与联合贝叶斯概率矩阵中的自相关和互相关子矩阵相互作用而形成的中级特征向量,该中级特征向量包含人脸的特征向量与联合贝叶斯概率矩阵中的自相关、互相关子矩阵相互作用的信息,能够提高人脸识别的效率。
图6是本发明实施例的确定人脸图像中人脸的身份标识的装置的示意性框图。应理解,图6的装置600能够实现图2中描述各个步骤,为避免重复,此处不再赘述。装置600包括:
处理器610,用于存储程序;
处理器620,用于执行程序,当所述程序被执行时,所述处理器620具体用于:获取人脸图像的原始特征向量;根据公式从人脸图像数据库中选取目标向量,其中,v2表示所述原始特征向量,表示所述人脸图像数据库中的向量,s表示v2与之间的目标距离,所述目标向量为所述人脸图像数据库中与v2目标距离最小的向量,B表示联合贝叶斯概率矩阵中的自相关子矩阵;当所述原始特征向量与所述目标向量之间的目标距离小于预设阈值时,将所述人脸图像数据库中记录的所述目标向量的身份标识确定为所述人脸图像中的人脸的身份标识。
由于人脸图像数据库中的向量包含分量[v·A,v·B·vΤ],也就是说,人脸图像数据库中存储的是低级的人脸特征向量与联合贝叶斯概率矩阵中的自相关和互相关子矩阵相互作用而形成的中级特征向量,该中级特征向量包含人脸的特征向量与联合贝叶斯概率矩阵中的自相关、互相关子矩阵相互作用的信息,能够提高人脸识别的效率。
图7是本发明实施例的终端的示意性框图。图7中的终端700包括:
摄像头710,用于采集人脸图像;
处理器720,用于获取所述人脸图像的原始特征向量v1,根据所述原始特征向量v1,生成向量v',其中,v'=[v1,v1·B·v1Τ],B表示联合贝叶斯概率矩阵中的自相关子矩阵;
发射器730,用于向服务器发送所述向量v',所述向量v'用于服务器识别所述人脸图像中的人脸的身份标识。
本领域普通技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本发明的范围。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统、装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在本申请所提供的几个实施例中,应该理解到,所揭露的系统、装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述,仅为本发明的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应所述以权利要求的保护范围为准。

Claims (15)

1.一种确定人脸图像中人脸的身份标识的方法,其特征在于,包括:
获取人脸图像的原始特征向量;
根据所述原始特征向量,从人脸图像数据库中选择k个候选向量,其中,所述人脸图像数据库中的向量v*包含分量[v·A,v·B·vΤ],v和所述原始特征向量的特征提取方式相同,A表示联合贝叶斯概率矩阵中的互相关子矩阵,B表示所述联合贝叶斯概率矩阵中的自相关子矩阵,k为正整数;
从所述k个候选向量中选取所述原始特征向量的匹配向量,其中,所述原始特征向量的匹配向量为所述k个候选向量中与向量[v1,1]余弦距离最短的候选向量,v1表示所述原始特征向量;
根据所述原始特征向量的匹配向量,将所述人脸图像数据库中记录的所述匹配向量的身份标识确定为所述人脸图像中的人脸的身份标识。
2.如权利要求1所述的方法,其特征在于,所述获取人脸图像的原始特征向量包括:
跟踪所述人脸在不同视频图像中的位置,得到连续的N帧人脸图像;
从所述N帧人脸图像中的第t帧人脸图像获取所述原始特征向量,其中1≤t<N;
所述方法还包括:
将所述原始特征向量的匹配向量,以及所述人脸图像数据库中记录的所述匹配向量的身份标识存入缓存数据库;
获取所述N帧人脸图像中的第t+1帧人脸图像的原始特征向量,所述第t+1帧人脸图像为所述第t帧人脸图像的后一帧人脸图像;
根据所述第t+1帧人脸图像的原始特征向量,从所述缓存数据库中选择目标向量,其中,所述缓存数据库包含所述第t帧人脸图像的原始特征向量的匹配向量;
当所述第t+1帧人脸图像的原始特征向量与所述目标向量之间的目标距离小于预设阈值时,将所述缓存数据库中记录的所述目标向量的身份标识确定为所述第t+1帧人脸图像中的人脸的身份标识。
3.如权利要求2所述的方法,其特征在于,所述根据所述第t+1帧人脸图像的原始特征向量,从所述缓存数据库中选择目标向量,包括:
根据公式从所述缓存数据库中选取所述目标向量,其中,v2表示所述第t+1帧人脸图像的原始特征向量,表示所述缓存数据库中的向量,s表示v2和的目标距离。
4.如权利要求1-3中任一项所述的方法,其特征在于,所述根据所述原始特征向量,从人脸图像数据库中选择k个候选向量,包括:
根据公式s*=||[v1,0]-v*||2,利用kd-tree算法,从所述人脸图像数据库中选取所述k个候选向量,其中,s*表示[v1,0]和v*之间的欧式距离。
5.如权利要求1-4中任一项所述的方法,其特征在于,所述从所述k个候选向量中选取所述原始特征向量的匹配向量,包括:
根据公式 s * * = - ( ( s i * ) 2 - ( | | v i * | | 2 ) 2 - ( | | v 1 | | 2 ) 2 ) + c · v 1 · B · v 1 T , 从所述k个候选向量中选取所述原始特征向量的匹配向量,其中,表示所述k个候选向量中的第i候选向量,s**表示[v1,1]与的余弦距离, 表示[v1,0]与的欧式距离,1≤i≤k,c为常数。
6.如权利要求1-5中任一项所述的方法,其特征在于,所述方法由服务器执行,
所述获取人脸图像的原始特征向量,包括:
所述服务器从终端获取向量v',其中,v'=[v1,v1·B·v1Τ];
所述服务器从所述向量v'中提取所述原始特征向量。
7.一种确定人脸图像中人脸的身份标识的方法,其特征在于,包括:
获取人脸图像的原始特征向量;
根据公式从人脸图像数据库中选取目标向量,其中,v2表示所述原始特征向量,表示所述人脸图像数据库中的向量,包含分量[v·A,v·B·vΤ],v和所述原始特征向量的特征提取方式相同,A表示联合贝叶斯概率矩阵中的互相关子矩阵,B表示所述联合贝叶斯概率矩阵中的自相关子矩阵,s表示v2与之间的目标距离,所述目标向量为所述人脸图像数据库中与v2目标距离最小的向量;
当所述原始特征向量与所述目标向量之间的目标距离小于预设阈值时,将所述人脸图像数据库中记录的所述目标向量的身份标识确定为所述人脸图像中的人脸的身份标识。
8.一种确定人脸图像中人脸的身份标识的装置,其特征在于,包括:
第一获取单元,用于获取人脸图像的原始特征向量;
第一选取单元,用于根据所述原始特征向量,从人脸图像数据库中选择k个候选向量,其中,所述人脸图像数据库中的向量v*包含分量[v·A,v·B·vΤ],v和所述原始特征向量的特征提取方式相同,A表示联合贝叶斯概率矩阵中的互相关子矩阵,B表示所述联合贝叶斯概率矩阵中的自相关子矩阵,k为正整数;
第二选取单元,用于从所述k个候选向量中选取所述原始特征向量的匹配向量,其中,所述原始特征向量的匹配向量为所述k个候选向量中与向量[v1,1]余弦距离最短的候选向量,v1表示所述原始特征向量;
第一确定单元,用于根据所述原始特征向量的匹配向量,将所述人脸图像数据库中记录的所述匹配向量的身份标识确定为所述人脸图像中的人脸的身份标识。
9.如权利要求8所述的装置,其特征在于,所述第一获取单元具体用于跟踪所述人脸在不同视频图像中的位置,得到连续的N帧人脸图像;从所述N帧人脸图像中的第t帧人脸图像获取所述原始特征向量,其中1≤t<N;
所述装置还包括:
存取单元,用于将所述原始特征向量的匹配向量,以及所述人脸图像数据库中记录的所述匹配向量的身份标识存入缓存数据库;
第二获取单元,用于获取所述N帧人脸图像中的第t+1帧人脸图像的原始特征向量,所述第t+1帧人脸图像为所述第t帧人脸图像的后一帧人脸图像;
第三选取单元,用于根据所述第t+1帧人脸图像的原始特征向量,从所述缓存数据库中选择目标向量,其中,所述缓存数据库包含所述第t帧人脸图像的原始特征向量的匹配向量;
第二确定单元,用于当所述第t+1帧人脸图像的原始特征向量与所述目标向量之间的目标距离小于预设阈值时,将所述缓存数据库中记录的所述目标向量的身份标识确定为所述第t+1帧人脸图像中的人脸的身份标识。
10.如权利要求9所述的装置,其特征在于,所述第三选取单元具体用于根据公式从所述缓存数据库中选取所述目标向量,其中,v2表示所述第t+1帧人脸图像的原始特征向量,表示所述缓存数据库中的向量,s表示v2和的目标距离。
11.如权利要求8-10中任一项所述的装置,其特征在于,所述第一选取单元具体用于根据公式s*=||[v1,0]-v*||2,利用kd-tree算法,从所述人脸图像数据库中选取所述k个候选向量,其中,s*表示[v1,0]和v*之间的欧式距离。
12.如权利要求8-11中任一项所述的装置,其特征在于,所述第二选取单元具体用于根据公式 s * * = - ( ( s i * ) 2 - ( | | v i * | | 2 ) 2 - ( | | v 1 | | 2 ) 2 ) + c · v 1 · B · v 1 T , 从所述k个候选向量中选取所述原始特征向量的匹配向量,其中,表示所述k个候选向量中的第i候选向量,s**表示[v1,1]与的余弦距离, 表示[v1,0]与的欧式距离,1≤i≤k,c为常数。
13.如权利要求8-12中任一项所述的装置,其特征在于,所述装置为服务器,
所述第一获取单元具体用于从终端获取向量v',其中,v'=[v1,v1·B·v1Τ];从所述向量v'中提取所述原始特征向量。
14.一种确定人脸图像中人脸的身份标识的装置,其特征在于,包括:
获取单元,用于获取人脸图像的原始特征向量;
选取单元,用于根据公式从人脸图像数据库中选取目标向量,其中,v2表示所述原始特征向量,表示所述人脸图像数据库中的向量,包含分量[v·A,v·B·vΤ],v和所述原始特征向量的特征提取方式相同,A表示联合贝叶斯概率矩阵中的互相关子矩阵,B表示所述联合贝叶斯概率矩阵中的自相关子矩阵,s表示v2与之间的目标距离,所述目标向量为所述人脸图像数据库中与v2目标距离最小的向量;
确定单元,用于当所述原始特征向量与所述目标向量之间的目标距离小于预设阈值时,将所述人脸图像数据库中记录的所述目标向量的身份标识确定为所述人脸图像中的人脸的身份标识。
15.一种终端,其特征在于,包括:
摄像头,用于采集人脸图像;
处理器,用于获取所述人脸图像的原始特征向量v1,根据所述原始特征向量v1,生成向量v',其中,v'=[v1,v1·B·v1Τ],B表示联合贝叶斯概率矩阵中的自相关子矩阵;
发射器,用于向服务器发送所述向量v',所述向量v'用于服务器识别所述人脸图像中的人脸的身份标识。
CN201510003813.0A 2015-01-04 2015-01-04 确定人脸图像中人脸的身份标识的方法、装置和终端 Active CN104573652B (zh)

Priority Applications (4)

Application Number Priority Date Filing Date Title
CN201510003813.0A CN104573652B (zh) 2015-01-04 2015-01-04 确定人脸图像中人脸的身份标识的方法、装置和终端
PCT/CN2015/098568 WO2016107482A1 (zh) 2015-01-04 2015-12-24 确定人脸图像中人脸的身份标识的方法、装置和终端
EP15875160.2A EP3229171A4 (en) 2015-01-04 2015-12-24 Method and device for determining identity identifier of human face in human face image, and terminal
US15/639,220 US10402627B2 (en) 2015-01-04 2017-06-30 Method and apparatus for determining identity identifier of face in face image, and terminal

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510003813.0A CN104573652B (zh) 2015-01-04 2015-01-04 确定人脸图像中人脸的身份标识的方法、装置和终端

Publications (2)

Publication Number Publication Date
CN104573652A true CN104573652A (zh) 2015-04-29
CN104573652B CN104573652B (zh) 2017-12-22

Family

ID=53089674

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510003813.0A Active CN104573652B (zh) 2015-01-04 2015-01-04 确定人脸图像中人脸的身份标识的方法、装置和终端

Country Status (4)

Country Link
US (1) US10402627B2 (zh)
EP (1) EP3229171A4 (zh)
CN (1) CN104573652B (zh)
WO (1) WO2016107482A1 (zh)

Cited By (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105138968A (zh) * 2015-08-05 2015-12-09 北京天诚盛业科技有限公司 人脸认证方法和装置
CN105678250A (zh) * 2015-12-31 2016-06-15 北京小孔科技有限公司 视频中的人脸识别方法和装置
WO2016107482A1 (zh) * 2015-01-04 2016-07-07 华为技术有限公司 确定人脸图像中人脸的身份标识的方法、装置和终端
CN106650658A (zh) * 2016-12-16 2017-05-10 中新智擎有限公司 一种识别用户身份的方法和装置
CN106709442A (zh) * 2016-12-19 2017-05-24 深圳乐行天下科技有限公司 一种人脸识别方法
WO2017088432A1 (zh) * 2015-11-26 2017-06-01 腾讯科技(深圳)有限公司 图像识别方法和装置
WO2017088434A1 (zh) * 2015-11-26 2017-06-01 腾讯科技(深圳)有限公司 人脸模型矩阵训练方法、装置及存储介质
CN107346410A (zh) * 2016-05-05 2017-11-14 杭州海康威视数字技术股份有限公司 图片处理方法及装置
CN107993663A (zh) * 2017-09-11 2018-05-04 北京航空航天大学 一种基于Android的声纹识别方法
CN108090403A (zh) * 2016-11-22 2018-05-29 上海银晨智能识别科技有限公司 一种基于3d卷积神经网络的人脸动态识别方法及系统
CN108712381A (zh) * 2018-04-16 2018-10-26 出门问问信息科技有限公司 一种身份验证方法及装置
CN109256138A (zh) * 2018-08-13 2019-01-22 平安科技(深圳)有限公司 身份验证方法、终端设备及计算机可读存储介质
TWI671685B (zh) * 2018-09-19 2019-09-11 和碩聯合科技股份有限公司 臉部識別方法與使用此方法的電子裝置
WO2020015076A1 (zh) * 2018-07-18 2020-01-23 平安科技(深圳)有限公司 人脸图像比对方法、装置、计算机设备及存储介质
WO2020015075A1 (zh) * 2018-07-18 2020-01-23 平安科技(深圳)有限公司 人脸图像比对方法、装置、计算机设备及存储介质
CN110969101A (zh) * 2019-11-21 2020-04-07 浙江工业大学 一种基于hog和特征描述子的人脸检测与跟踪方法
CN111967448A (zh) * 2020-09-25 2020-11-20 北京百度网讯科技有限公司 样本图像处理方法、装置、设备及存储介质
CN112597891A (zh) * 2020-12-22 2021-04-02 陈王芳 人脸识别图像处理方法及系统
CN113822866A (zh) * 2021-09-23 2021-12-21 深圳爱莫科技有限公司 一种广适应的车轴数量识别方法、系统、设备及存储介质

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105224849B (zh) * 2015-10-20 2019-01-01 广州广电运通金融电子股份有限公司 一种多生物特征融合身份鉴别方法以及装置
CN110309691B (zh) * 2018-03-27 2022-12-27 腾讯科技(深圳)有限公司 一种人脸识别方法、装置、服务器及存储介质
US10523864B2 (en) * 2018-04-10 2019-12-31 Facebook, Inc. Automated cinematic decisions based on descriptive models
US12020505B1 (en) * 2018-05-10 2024-06-25 Wicket, Llc System and method for facial recognition accuracy
US11544965B1 (en) 2018-05-10 2023-01-03 Wicket, Llc System and method for access control using a plurality of images
US10733676B2 (en) * 2018-05-17 2020-08-04 Coupa Software Incorporated Automatic generation of expense data using facial recognition in digitally captured photographic images
AU2019433629B2 (en) 2019-03-12 2021-11-04 Citrix Systems, Inc. Tracking image senders on client devices
CN111401171B (zh) * 2020-03-06 2023-09-22 咪咕文化科技有限公司 一种人脸图像的识别方法、装置、电子设备和存储介质
CN113642354B (zh) * 2020-04-27 2024-07-05 武汉Tcl集团工业研究院有限公司 人脸姿态的确定方法、计算机设备、计算机可读存储介质
US11210535B1 (en) * 2020-08-17 2021-12-28 Ford Global Technologies, Llc Sensor fusion
US11961334B2 (en) 2021-04-18 2024-04-16 Microsoft Technology Licensing, Llc. Biometric data storage using feature vectors and associated global unique identifier
WO2022225610A1 (en) * 2021-04-18 2022-10-27 Microsoft Technology Licensing, Llc Object data storage
CN113631237A (zh) 2021-06-23 2021-11-09 商汤国际私人有限公司 游戏图像的处理方法、装置、电子设备、计算机存储介质和计算机程序

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1497889A (zh) * 2002-09-07 2004-05-19 ���ǵ�����ʽ���� 不考虑正交码长度的联合检测接收设备和方法
EP1477924B1 (en) * 2003-03-31 2007-05-02 HONDA MOTOR CO., Ltd. Gesture recognition apparatus, method and program
CN101615248A (zh) * 2009-04-21 2009-12-30 华为技术有限公司 年龄估计方法、设备和人脸识别系统
CN103020655A (zh) * 2012-12-16 2013-04-03 山东神思电子技术股份有限公司 一种基于单训练样本人脸识别的远程身份认证方法
CN103514456A (zh) * 2013-06-30 2014-01-15 安科智慧城市技术(中国)有限公司 基于压缩感知多核学习的图像分类方法及其装置
CN103901401A (zh) * 2014-04-10 2014-07-02 北京大学深圳研究生院 一种基于双耳匹配滤波器的双耳声音源定位方法
US8818746B1 (en) * 2010-03-26 2014-08-26 The United States Of America As Represented By The Secretary Of The Army Crack detection in thick-walled cylinders
CN104239858A (zh) * 2014-09-05 2014-12-24 华为技术有限公司 一种人脸特征验证的方法和装置

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2815045B2 (ja) * 1996-12-16 1998-10-27 日本電気株式会社 画像特徴抽出装置,画像特徴解析装置,および画像照合システム
US7369685B2 (en) * 2002-04-05 2008-05-06 Identix Corporation Vision-based operating method and system
WO2005096213A1 (en) 2004-03-05 2005-10-13 Thomson Licensing Face recognition system and method
WO2006048809A1 (en) 2004-11-04 2006-05-11 Koninklijke Philips Electronics N.V. Face recognition
US8311294B2 (en) * 2009-09-08 2012-11-13 Facedouble, Inc. Image classification and information retrieval over wireless digital networks and the internet
US7403643B2 (en) 2006-08-11 2008-07-22 Fotonation Vision Limited Real-time face tracking in a digital image acquisition device
JP4305672B2 (ja) * 2006-11-21 2009-07-29 ソニー株式会社 個人識別装置、個人識別方法、識別用辞書データの更新方法および識別用辞書データの更新プログラム
US8204187B2 (en) * 2008-04-25 2012-06-19 Foxconn Communication Technology Corp. Phone dialing method
JP5390322B2 (ja) * 2009-09-28 2014-01-15 株式会社東芝 画像処理装置、及び画像処理方法
US8705875B1 (en) * 2010-09-07 2014-04-22 University Of North Carolina At Wilmington Demographic analysis of facial landmarks
US8494231B2 (en) 2010-11-01 2013-07-23 Microsoft Corporation Face recognition in video content
EP2825996A4 (en) * 2012-03-13 2017-03-08 Nokia Technologies Oy A method and apparatus for improved facial recognition
CN103824045A (zh) 2012-11-16 2014-05-28 中兴通讯股份有限公司 一种人脸识别跟踪方法及系统
JP5902661B2 (ja) * 2013-09-30 2016-04-13 株式会社東芝 認証装置、認証システムおよび認証方法
US9858679B2 (en) * 2014-11-04 2018-01-02 Hewlett-Packard Development Company, L.P. Dynamic face identification
US9928410B2 (en) * 2014-11-24 2018-03-27 Samsung Electronics Co., Ltd. Method and apparatus for recognizing object, and method and apparatus for training recognizer
CN104573652B (zh) * 2015-01-04 2017-12-22 华为技术有限公司 确定人脸图像中人脸的身份标识的方法、装置和终端
US11010431B2 (en) * 2016-12-30 2021-05-18 Samsung Electronics Co., Ltd. Method and apparatus for supporting machine learning algorithms and data pattern matching in ethernet SSD
US10650212B2 (en) * 2016-12-30 2020-05-12 Beyond Time Invetments Limited Optical identification method and optical identification system

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1497889A (zh) * 2002-09-07 2004-05-19 ���ǵ�����ʽ���� 不考虑正交码长度的联合检测接收设备和方法
EP1477924B1 (en) * 2003-03-31 2007-05-02 HONDA MOTOR CO., Ltd. Gesture recognition apparatus, method and program
CN101615248A (zh) * 2009-04-21 2009-12-30 华为技术有限公司 年龄估计方法、设备和人脸识别系统
US8818746B1 (en) * 2010-03-26 2014-08-26 The United States Of America As Represented By The Secretary Of The Army Crack detection in thick-walled cylinders
CN103020655A (zh) * 2012-12-16 2013-04-03 山东神思电子技术股份有限公司 一种基于单训练样本人脸识别的远程身份认证方法
CN103514456A (zh) * 2013-06-30 2014-01-15 安科智慧城市技术(中国)有限公司 基于压缩感知多核学习的图像分类方法及其装置
CN103901401A (zh) * 2014-04-10 2014-07-02 北京大学深圳研究生院 一种基于双耳匹配滤波器的双耳声音源定位方法
CN104239858A (zh) * 2014-09-05 2014-12-24 华为技术有限公司 一种人脸特征验证的方法和装置

Cited By (32)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016107482A1 (zh) * 2015-01-04 2016-07-07 华为技术有限公司 确定人脸图像中人脸的身份标识的方法、装置和终端
US10402627B2 (en) 2015-01-04 2019-09-03 Huawei Technologies Co., Ltd. Method and apparatus for determining identity identifier of face in face image, and terminal
CN105138968A (zh) * 2015-08-05 2015-12-09 北京天诚盛业科技有限公司 人脸认证方法和装置
US10395095B2 (en) 2015-11-26 2019-08-27 Tencent Technology (Shenzhen) Company Limited Face model matrix training method and apparatus, and storage medium
US10713532B2 (en) 2015-11-26 2020-07-14 Tencent Technology (Shenzhen) Company Limited Image recognition method and apparatus
US10599913B2 (en) 2015-11-26 2020-03-24 Tencent Technology (Shenzhen) Company Limited Face model matrix training method and apparatus, and storage medium
WO2017088432A1 (zh) * 2015-11-26 2017-06-01 腾讯科技(深圳)有限公司 图像识别方法和装置
WO2017088434A1 (zh) * 2015-11-26 2017-06-01 腾讯科技(深圳)有限公司 人脸模型矩阵训练方法、装置及存储介质
CN106803055A (zh) * 2015-11-26 2017-06-06 腾讯科技(深圳)有限公司 人脸识别方法和装置
CN106803055B (zh) * 2015-11-26 2019-10-25 腾讯科技(深圳)有限公司 人脸识别方法和装置
US20180204094A1 (en) * 2015-11-26 2018-07-19 Tencent Technology (Shenzhen) Company Limited Image recognition method and apparatus
CN105678250A (zh) * 2015-12-31 2016-06-15 北京小孔科技有限公司 视频中的人脸识别方法和装置
CN107346410A (zh) * 2016-05-05 2017-11-14 杭州海康威视数字技术股份有限公司 图片处理方法及装置
CN107346410B (zh) * 2016-05-05 2020-03-06 杭州海康威视数字技术股份有限公司 图片处理方法及装置
CN108090403A (zh) * 2016-11-22 2018-05-29 上海银晨智能识别科技有限公司 一种基于3d卷积神经网络的人脸动态识别方法及系统
CN106650658A (zh) * 2016-12-16 2017-05-10 中新智擎有限公司 一种识别用户身份的方法和装置
CN106709442B (zh) * 2016-12-19 2020-07-24 深圳乐行天下科技有限公司 一种人脸识别方法
CN106709442A (zh) * 2016-12-19 2017-05-24 深圳乐行天下科技有限公司 一种人脸识别方法
CN107993663A (zh) * 2017-09-11 2018-05-04 北京航空航天大学 一种基于Android的声纹识别方法
CN108712381A (zh) * 2018-04-16 2018-10-26 出门问问信息科技有限公司 一种身份验证方法及装置
WO2020015076A1 (zh) * 2018-07-18 2020-01-23 平安科技(深圳)有限公司 人脸图像比对方法、装置、计算机设备及存储介质
WO2020015075A1 (zh) * 2018-07-18 2020-01-23 平安科技(深圳)有限公司 人脸图像比对方法、装置、计算机设备及存储介质
CN109256138A (zh) * 2018-08-13 2019-01-22 平安科技(深圳)有限公司 身份验证方法、终端设备及计算机可读存储介质
CN109256138B (zh) * 2018-08-13 2023-07-07 平安科技(深圳)有限公司 身份验证方法、终端设备及计算机可读存储介质
US11403877B2 (en) 2018-09-19 2022-08-02 Pegatron Corporation Face recognition method and electronic device using same
TWI671685B (zh) * 2018-09-19 2019-09-11 和碩聯合科技股份有限公司 臉部識別方法與使用此方法的電子裝置
CN110929555A (zh) * 2018-09-19 2020-03-27 和硕联合科技股份有限公司 脸部识别方法与使用此方法的电子装置
CN110969101A (zh) * 2019-11-21 2020-04-07 浙江工业大学 一种基于hog和特征描述子的人脸检测与跟踪方法
CN111967448A (zh) * 2020-09-25 2020-11-20 北京百度网讯科技有限公司 样本图像处理方法、装置、设备及存储介质
CN112597891B (zh) * 2020-12-22 2022-05-06 深圳市海威达科技有限公司 人脸识别图像处理方法及系统
CN112597891A (zh) * 2020-12-22 2021-04-02 陈王芳 人脸识别图像处理方法及系统
CN113822866A (zh) * 2021-09-23 2021-12-21 深圳爱莫科技有限公司 一种广适应的车轴数量识别方法、系统、设备及存储介质

Also Published As

Publication number Publication date
WO2016107482A1 (zh) 2016-07-07
EP3229171A1 (en) 2017-10-11
CN104573652B (zh) 2017-12-22
US20170300744A1 (en) 2017-10-19
US10402627B2 (en) 2019-09-03
EP3229171A4 (en) 2017-11-29

Similar Documents

Publication Publication Date Title
CN104573652A (zh) 确定人脸图像中人脸的身份标识的方法、装置和终端
CN109977262B (zh) 从视频中获取候选片段的方法、装置及处理设备
Ranjan et al. Multi-label cross-modal retrieval
Lin et al. Multi-domain adversarial feature generalization for person re-identification
Gao et al. View-based 3D object retrieval: challenges and approaches
Bhattacharya et al. Recognition of complex events: Exploiting temporal dynamics between underlying concepts
WO2020061489A1 (en) Training neural networks for vehicle re-identification
Li et al. Mining key skeleton poses with latent svm for action recognition
EP3136295A1 (en) Method and device for processing an image of pixels, corresponding computer program product and computer-readable medium
Zhang et al. Fast face detection on mobile devices by leveraging global and local facial characteristics
Li et al. Weaklier supervised semantic segmentation with only one image level annotation per category
Banerjee et al. Efficient pooling of image based CNN features for action recognition in videos
CN110232331B (zh) 一种在线人脸聚类的方法及系统
CN104281572A (zh) 一种基于互信息的目标匹配方法及其系统
Nemade et al. Image segmentation using convolutional neural network for image annotation
Shoaib et al. Augmenting the Robustness and efficiency of violence detection systems for surveillance and non-surveillance scenarios
Zhu et al. Graph-based reasoning attention pooling with curriculum design for content-based image retrieval
CN111626212A (zh) 图片中对象的识别方法和装置、存储介质及电子装置
Huo et al. Person re-identification based on multi-directional saliency metric learning
Zheng et al. Bi-heterogeneous Convolutional Neural Network for UAV-based dynamic scene classification
Wong et al. Multi-Camera Face Detection and Recognition in Unconstrained Environment
Tang et al. Salient object detection via recurrently aggregating spatial attention weighted cross-level deep features
Chen et al. Multi‐directional saliency metric learning for person re‐identification
Murtaza et al. TAB: Temporally aggregated bag-of-discriminant-words for temporal action proposals
Jeon et al. Discovering latent topics with saliency-weighted LDA for image scene understanding

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant