CN106250818A - 一种全序保持投影的人脸年龄估计方法 - Google Patents

一种全序保持投影的人脸年龄估计方法 Download PDF

Info

Publication number
CN106250818A
CN106250818A CN201610571068.4A CN201610571068A CN106250818A CN 106250818 A CN106250818 A CN 106250818A CN 201610571068 A CN201610571068 A CN 201610571068A CN 106250818 A CN106250818 A CN 106250818A
Authority
CN
China
Prior art keywords
age
face
training
estimation
projection
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201610571068.4A
Other languages
English (en)
Other versions
CN106250818B (zh
Inventor
王晓东
周志华
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nanjing University
Original Assignee
Nanjing University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nanjing University filed Critical Nanjing University
Priority to CN201610571068.4A priority Critical patent/CN106250818B/zh
Publication of CN106250818A publication Critical patent/CN106250818A/zh
Application granted granted Critical
Publication of CN106250818B publication Critical patent/CN106250818B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/168Feature extraction; Face representation
    • G06V40/171Local features and components; Facial parts ; Occluding parts, e.g. glasses; Geometrical relationships
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172Classification, e.g. identification
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/178Human faces, e.g. facial parts, sketches or expressions estimating age from face image; using age information for improving recognition

Abstract

本发明公开一种全序保持投影的人脸年龄估计方法,包括训练人脸年龄估计模型和人脸年龄估计模型进行年龄估计两个阶段;所述训练人脸年龄估计模型的步骤具体为:首先提取训练人脸图像的特征;然后寻找将高维特征空间映射到低维特征空间的投影矩阵,使映射到的低维特征空间能够最大程度的保持全序结构;最后在低维特征空间,使用有序回归方法训练得到有序回归分类模型。本发明所提供的全序保持投影方法,实施过程中能够充分利用有标记间蕴含的全序关系来寻找低维子空间,适合用于解决人脸年龄估计这一年龄标记间有全序且通常训练数据量不充分的问题。

Description

一种全序保持投影的人脸年龄估计方法
技术领域
本发明涉及图像特征表示、应用技术,人脸年龄估计技术,特别涉及一种能够寻找保持年龄全序结构的投影的人脸年龄估计技术。
背景技术
人的面部蕴含着十分丰富的信息,通常我们仅通过人的面部就能轻松地获悉这个人的身份、表情、性别、年龄等等特征,我们把这一从人脸获得信息的过程称之为人脸识别。在计算机视觉研究中,从给定的人脸图像中估计出目标的年龄就是人脸年龄估计问题。这项技术在模式识别、媒体计算、人机交互等领域有广阔的应用前景。
目前的研究主要基于传统的回归或者分类技术设计人脸年龄估计方法。首先使用人脸检测技术在包含人脸的图像中对人类进行定位,然后从人脸区域提取图像特征,接着使用某些分类算法或者回归算法对年龄进行估计。人脸年龄估计问题面临的一项挑战是很难收集到非常大规模的具有准确年龄标记的人脸图像数据集,因此目前老化数据集中人脸图像数目非常有限,如何在设计算法的时候充分利用少量数据中蕴含的信息变得十分重要。传统的分类或者回归方法仅利用了年龄标记的基本信息,而忽视了年龄标记间所蕴含的全序关系。而对于年龄估计问题来说,这种全序关系能够帮助我们进行更准确的年龄估计,如果我们能够维持人脸图像关于年龄的全序结构,即在空间中人脸图像按照其年龄序顺序依次排列,那么在对未知年龄的人脸进行年龄估计时,我们不太会将其错误分类到与真实年龄偏差过大的年龄。而传统的方法并没有刻意去维持年龄间的这种全序结构,因此需要一种能够维持这种全序结构的人脸年龄估计方法。
发明内容:
发明目的:针对现有人脸年估计算法没有利用年龄标记间的全序信息来维持全序结构的问题,本发明提出一种全序保持投影的人脸年龄估计方法,将人脸图像映射到一个能够保持年龄全序的低维子空间,利用这种全序结构提升人脸年龄估计的性能,避免出现将人脸图像误分类为偏差较大年龄的现象。
技术方案:本发明提出一种全序保持投影的人脸年龄估计方法,首先针对人脸图像提取原始高维特征;然后寻找一种投影,这种投影能够将这原始的高维特征映射到一个低维子空间中,而在这个低维子空间中,所有人脸图像构成的点能够按对应的年龄顺序呈现出最清晰的全序结构;最后,在得到的低维子空间中使用有序回归方法进行年龄估计,具体包括训练人脸年龄估计模型和人脸年龄估计模型进行年龄估计两个阶段;
所述训练人脸年龄估计模型的步骤具体为:
步骤100,提取训练人脸图像的特征。
所述步骤100从训练人脸图像中提取特征是指将图像数据转化为一维向量的图像特征,采用的特征提取方法包括主动外观模型(Active Appearance Model)、局部二值模式(Local Binary Patterns)和生物启发特征(Biologically Inspired Features)等等。
步骤101,寻找将高维特征空间映射到低维特征空间的投影矩阵,使映射到的低维特征空间能够最大程度的保持年龄全序结构。
所述步骤101寻找投影矩阵的方法包括如下步骤:
步骤1:使用不同的年龄,将训练集划分为不同的高龄人脸和低龄人脸集合。划分高龄人脸和低龄人脸集合的具体方法为:设有m张训练人脸图像,第i张图像得到的特征记为xi,其年龄为li(1≤li≤c),使用1,2,…,c-1这c-1种年龄分别对训练数据集进行划分,得到c-1种高龄人脸和低龄人脸的划分,其中使用年龄k划分得到的高龄人脸和低龄人脸集合分别记为 分别指训练集中年龄大于k和年龄不大于k的人脸对应的特征组成的集合,c表示最大年龄,为了避免出现空集,k的取值范围是1,2,…,c-1。
步骤2:对于每一种划分方案,计算低维特征空间中低龄人脸和高龄人脸之间的距离,使用年龄k划分方案对应的距离记为distk,是投影矩阵W的函数。计算第k种划分方案对应的低龄人脸和高龄人脸之间的距离distk的具体公式为:
dist k = m k - | | W T μ k - - W T μ | | 2 2 + m k + | | W T μ k + - W T μ | | 2 2
式中,表示所有训练样本的中心,表示低龄人脸的样本中心,表示高龄人脸的样本中心,表示训练样本中年龄为i样本的中心,xi为第i张图像得到的特征,m为所有训练样本的数目,mi为年龄为i的样本数目,为低龄人脸样本数目,为高龄人脸样本数目,表示二范数。
步骤3:计算低维特征空间中所有样本到样本中心的距离,记为disttotal,是投影矩阵W的函数。计算低维特征空间中所有样本到样本中心的距离disttotal的具体公式为:
dist t o t a l = Σ i = 1 m | | W T x i - W T μ | | 2 2
步骤4:将所有划分方案中低龄人脸和高龄人脸之间的距离进行求和,并使用disttotal进行规范化得到目标函数,即
步骤5:最大化目标函数获得投影矩阵最优解W*,使映射到的低维特征空间能够最大程度的保持年龄全序结构,即
代入上述distk和disttotal计算公式,则可写成:
W * = arg max W Σ k = 1 c - 1 ( m k - | | W T μ k - - W T μ | | 2 2 + m k + | | W T μ k + - W T μ | | 2 2 ) Σ i = 1 m | | W T x i - W T μ | | 2 2
经过化简可以写成
W * = arg max W t r ( W T Σ k = 1 c - 1 ( m k - ( μ k - - μ ) ( μ k - - μ ) T + m k + ( μ k + - μ ) ( μ k + - μ ) T ) W ) t r ( W T ( Σ i = 1 m ( x i - μ ) ( x i - μ ) T ) W )
式中,tr(·)表示矩阵的迹。若定义矩阵St和So如下:
s t = Σ i = 1 m ( x i - μ ) ( x i - μ ) T
s o = Σ k = 1 c - 1 ( m k - ( μ k - - μ ) ( μ k - - μ ) T + m k + ( μ k + - μ ) ( μ k + - μ ) T )
则优化目标可以进一步书写为:
W * = arg max W t r ( W T S o W ) t r ( W T S t W )
步骤102,在低维特征空间,使用有序回归方法训练得到有序回归分类模型。这里传统的有序回归方法都可以使用,如中值k近邻算法。
所述人脸年龄估计模型进行年龄估计的步骤具体为:
步骤200,使用步骤100的特征提取方法,提取待估计人脸图像的特征;
步骤201,使用步骤101得到的投影矩阵,将待估计人脸的特征投影到低维特征空间;
步骤202,在低维特征空间,使用步骤103得到的有序回归分类模型估计该人脸的年龄。
有益效果:与现有技术相比,本发明所提供的全序保持投影方法,实施过程中能够充分利用有标记间蕴含的全序关系来寻找低维子空间,适合用于解决人脸年龄估计这一年龄标记间有全序且通常训练数据量不充分的问题。
附图说明
图1为本发明实施例的训练人脸年龄估计模型的工作流程图;
图2为本发明实施例的人脸年龄估计模型进行年龄估计的工作流程图。
具体实施方式
下面结合具体实施例,进一步阐明本发明,应理解这些实施例仅用于说明本发明而不用于限制本发明的范围,在阅读了本发明之后,本领域技术人员对本发明的各种等价形式的修改均落于本申请所附权利要求所限定的范围。
人脸年龄估计模型训练的工作流程如图1所示。人脸年龄估计模型在训练阶段需要收集一定数量的具有年龄标记的人脸图像,在提取特征之前需要对图像进行预处理,如灰度化,直方图均衡等等,在完成预处理之后,可以使用常用的主动外观模型(ActiveAppearance Model)、局部二值模式(Local Binary Patterns)和生物启发特征(Biologically Inspired Features)等方法对图像进行特征抽取(步骤10);然后根据不同的年龄划分点将这些人脸图像分成高龄人脸集合和低龄人脸集合,例如根据10岁来划分时,所有年龄小于等于10岁的人脸都被归入低龄人脸集合,所有年龄大于10岁的人脸都被归入高龄人脸集合(步骤11);接着假设映射到子空间的投影矩阵为W,计算在这个子空间里每一种划分方案中低龄人脸和高龄人脸之间的距离,可以使用上文中提及的计算方式,这个距离记为distk(步骤12);接下来计算在这个子空间里所有人脸到样本中心的距离和,同样可以使用上文中介绍的计算方式,这个距离记为disttotal(步骤13);假设训练数据集中涉及的年龄为1,2,…,c,那么上述的年龄划分点的选择为1,2,…,c-1总共c-1种,将所有划分方案中得到的高龄人脸和低龄人脸之间的距离进行求和,即再使用disttotal对该变量进行规范化,得到因为该变量是W的函数,可将该变量记为该变量刻画了在W对应的子空间中年龄全序结构的清晰程度(步骤14);若distk和disttotal使用上述的计算方式,则可以使用求解广义特征值问题的方法来近似求解得到最优投影W(步骤15);使用得到的W将训练集中人脸图像的特征投影到低维子空间,在子空间中使用有序回归算法(如中值k近邻等)得到模型M(步骤16)。
人脸年龄估计模型进行年龄估计的工作流程如图2所示。首先使用相同的图像预处理方法对人脸图像进行预处理,然后使用同特征提取方法对处理过后的人脸图像提取特征(步骤20),根据训练过程中得到的W,将该特征投影到子空间中(步骤21),然后使用训练得到的模型M对该人脸进行年龄估计。

Claims (7)

1.一种全序保持投影的人脸年龄估计方法,其特征在于,包括训练人脸年龄估计模型和人脸年龄估计模型进行年龄估计两个阶段;
所述训练人脸年龄估计模型的步骤具体为:
步骤100,提取训练人脸图像的特征;
步骤101,寻找将高维特征空间映射到低维特征空间的投影矩阵,使映射到的低维特征空间能够最大程度的保持年龄全序结构;
步骤102,在低维特征空间,使用有序回归方法训练得到有序回归分类模型;
所述人脸年龄估计模型进行年龄估计的步骤具体为:
步骤200,使用步骤100的特征提取方法,提取待估计人脸图像的特征;
步骤201,使用步骤101得到的投影矩阵,将待估计人脸的特征投影到低维特征空间;
步骤202,在低维特征空间,使用步骤103得到的有序回归分类模型估计该人脸的年龄。
2.根据权利要求1所述的全序保持投影的人脸年龄估计方法,其特征在于,所述步骤100采用的特征提取方法包括主动外观模型、局部二值模式和生物启发特征。
3.根据权利要求1所述的全序保持投影的人脸年龄估计方法,其特征在于,所述步骤101寻找投影矩阵的方法为:
步骤1:使用不同的年龄,将训练集划分为不同的高龄人脸和低龄人脸集合;
步骤2:对于每一种划分方案,计算低维特征空间中低龄人脸和高龄人脸之间的距离,使用年龄k划分方案对应的距离记为distk,是投影矩阵W的函数;
步骤3:计算低维特征空间中所有样本到样本中心的距离,记为disttotal,是投影矩阵W的函数;
步骤4:将所有划分方案中低龄人脸和高龄人脸之间的距离进行求和,并使用disttotal进行规范化得到目标函数,即其中c表示最大年龄;
步骤5:最大化目标函数获得投影矩阵最优解W*,使映射到的低维特征空间能够最大程度的保持年龄全序结构,即
4.根据权利要求3所述的全序保持投影的人脸年龄估计方法,其特征在于,所述步骤1划分高龄人脸和低龄人脸集合的具体方法为:设有m张训练人脸图像,第i张图像得到的特征记为xi,其年龄为li(1≤li≤c),使用1,2,…,c-1这c-1种年龄分别对训练数据集进行划分,得到c-1种高龄人脸和低龄人脸的划分,其中使用年龄k(1≤k<c)划分得到的高龄人脸和低龄人脸集合分别记为 分别指训练集中年龄大于k和年龄不大于k的人脸对应的特征组成的集合,c表示最大年龄。
5.根据权利要求4所述的全序保持投影的人脸年龄估计方法,其特征在于,所述步骤2计算第k种划分方案对应的低龄人脸和高龄人脸之间的距离distk的具体公式为:
dist k = m k - | | W T &mu; k - - W T &mu; | | 2 2 + m k + | | W T &mu; k + - W T &mu; | | 2 2
式中,W表示投影矩阵,表示所有训练样本的中心,表示低龄人脸的样本中心,表示高龄人脸的样本中心,表示训练样本中年龄为i样本的中心,xi为第i张图像得到的特征,m为所有训练样本的数目,mi为年龄为i的样本数目,为低龄人脸样本数目,为高龄人脸样本数目,表示二范数。
6.根据权利要求4所述的全序保持投影的人脸年龄估计方法,其特征在于,所述步骤3计算低维特征空间中所有样本到样本中心的距离disttotal的具体公式为:
dist t o t a l = &Sigma; i = 1 m | | W T x i - W T &mu; | | 2 2
式中,W表示投影矩阵,表示所有训练样本的中心,xi为第i张图像得到的特征,m为所有训练样本的数目,表示二范数。
7.根据权利要求1所述的全序保持投影的人脸年龄估计方法,其特征在于,所述步骤102采用的有序回归方法为中值K近邻算法。
CN201610571068.4A 2016-07-19 2016-07-19 一种全序保持投影的人脸年龄估计方法 Active CN106250818B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610571068.4A CN106250818B (zh) 2016-07-19 2016-07-19 一种全序保持投影的人脸年龄估计方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610571068.4A CN106250818B (zh) 2016-07-19 2016-07-19 一种全序保持投影的人脸年龄估计方法

Publications (2)

Publication Number Publication Date
CN106250818A true CN106250818A (zh) 2016-12-21
CN106250818B CN106250818B (zh) 2019-03-26

Family

ID=57613917

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610571068.4A Active CN106250818B (zh) 2016-07-19 2016-07-19 一种全序保持投影的人脸年龄估计方法

Country Status (1)

Country Link
CN (1) CN106250818B (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109543546A (zh) * 2018-10-26 2019-03-29 复旦大学 基于深度序分布回归的步态年龄估计方法
CN111967413A (zh) * 2020-08-21 2020-11-20 广州市微智联科技有限公司 一种猪脸识别方法
CN113298004A (zh) * 2021-06-03 2021-08-24 南京佑驾科技有限公司 一种基于人脸特征学习的轻量级多头年龄估计方法

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102982165A (zh) * 2012-12-10 2013-03-20 南京大学 一种大规模人脸图像检索方法
US20140093140A1 (en) * 2012-09-28 2014-04-03 Accenture Global Services Limited Liveness detection
CN103984948A (zh) * 2014-06-03 2014-08-13 南京大学 一种基于人脸图像融合特征的软双层年龄估计方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140093140A1 (en) * 2012-09-28 2014-04-03 Accenture Global Services Limited Liveness detection
CN102982165A (zh) * 2012-12-10 2013-03-20 南京大学 一种大规模人脸图像检索方法
CN103984948A (zh) * 2014-06-03 2014-08-13 南京大学 一种基于人脸图像融合特征的软双层年龄估计方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
KUANG-YU CHANG 等: "Ordinal Hyperplanes Ranker with Cost Sensitivities for Age Estimation", 《IEEE CONFERENCES》 *
谢春华: "基于人脸图像的年龄估计方法研究", 《中国优秀硕士学位论文全文数据库信息科技辑》 *

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109543546A (zh) * 2018-10-26 2019-03-29 复旦大学 基于深度序分布回归的步态年龄估计方法
CN111967413A (zh) * 2020-08-21 2020-11-20 广州市微智联科技有限公司 一种猪脸识别方法
CN111967413B (zh) * 2020-08-21 2024-04-09 广州市微智联科技有限公司 一种猪脸识别方法
CN113298004A (zh) * 2021-06-03 2021-08-24 南京佑驾科技有限公司 一种基于人脸特征学习的轻量级多头年龄估计方法
CN113298004B (zh) * 2021-06-03 2022-04-29 南京佑驾科技有限公司 一种基于人脸特征学习的轻量级多头年龄估计方法

Also Published As

Publication number Publication date
CN106250818B (zh) 2019-03-26

Similar Documents

Publication Publication Date Title
CN108564129B (zh) 一种基于生成对抗网络的轨迹数据分类方法
Bao et al. Real time robust l1 tracker using accelerated proximal gradient approach
CN101763503B (zh) 一种姿态鲁棒的人脸识别方法
CN103400105B (zh) 一种姿态归一化的非正面人脸表情识别方法
CN102609681B (zh) 基于字典学习模型的人脸识别方法
CN107103326A (zh) 基于超像素聚类的协同显著性检测方法
CN109902590A (zh) 深度多视图特征距离学习的行人重识别方法
CN105389583A (zh) 图像分类器的生成方法、图像分类方法和装置
CN104834941A (zh) 基于计算机输入下的稀疏自编码的脱机手写体识别方法
CN103996018A (zh) 基于4dlbp的人脸识别方法
CN103631874B (zh) 社交平台的ugc标签类别确定方法和装置
CN108960258A (zh) 一种基于自学习深度特征的模板匹配方法
CN107862680B (zh) 一种基于相关滤波器的目标跟踪优化方法
CN103617609B (zh) 基于图论的k-means非线性流形聚类与代表点选取方法
CN111611877A (zh) 基于多时空信息融合的抗年龄干扰的人脸识别方法
CN107341510A (zh) 基于稀疏正交的双图非负矩阵分解的图像聚类方法
CN101515328A (zh) 一种面向鉴别的具有统计不相关性的局部保持投影方法
CN106250818B (zh) 一种全序保持投影的人脸年龄估计方法
CN106408579A (zh) 一种基于视频的捏合指尖跟踪方法
CN103020167A (zh) 一种计算机中文文本分类方法
CN105956570A (zh) 基于唇部特征和深度学习的笑脸识别方法
CN106529486A (zh) 一种基于三维形变人脸模型的种族识别方法
CN104978569A (zh) 一种基于稀疏表示的增量人脸识别方法
Zhang et al. Learning graph matching: Oriented to category modeling from cluttered scenes
CN105184285A (zh) 直推式迁移组稀疏判别分析的跨姿态彩色图像表情识别

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information
CB02 Change of applicant information

Address after: 210008 Hankou Road, Drum Tower District, Nanjing, Jiangsu Province, No. 22

Applicant after: Nanjing University

Address before: 210046 Xianlin Avenue 163, Nanjing, Jiangsu Province

Applicant before: Nanjing University

GR01 Patent grant
GR01 Patent grant