CN105701486B - 一种在摄像机内实现人脸信息分析及提取的方法 - Google Patents

一种在摄像机内实现人脸信息分析及提取的方法 Download PDF

Info

Publication number
CN105701486B
CN105701486B CN201410693304.0A CN201410693304A CN105701486B CN 105701486 B CN105701486 B CN 105701486B CN 201410693304 A CN201410693304 A CN 201410693304A CN 105701486 B CN105701486 B CN 105701486B
Authority
CN
China
Prior art keywords
face
image
video camera
face information
feature
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201410693304.0A
Other languages
English (en)
Other versions
CN105701486A (zh
Inventor
张珅哲
张幼良
白雪松
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
SHANGHAI JUNYU DIGITAL TECHNOLOGY Co Ltd
Original Assignee
SHANGHAI JUNYU DIGITAL TECHNOLOGY Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by SHANGHAI JUNYU DIGITAL TECHNOLOGY Co Ltd filed Critical SHANGHAI JUNYU DIGITAL TECHNOLOGY Co Ltd
Priority to CN201410693304.0A priority Critical patent/CN105701486B/zh
Publication of CN105701486A publication Critical patent/CN105701486A/zh
Application granted granted Critical
Publication of CN105701486B publication Critical patent/CN105701486B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Abstract

本发明公开了一种在摄像机内实现人脸信息分析及提取的方法,所述摄像机包含有芯片,所述方法包括以下步骤:获取摄像机当前无损图像帧;对获取的图像进行图像预处理;对预处理后的图像进行人脸检测;对检测出的人脸进行算法跟踪;采用芯片对应的硬件内联函数和定点运算对跟踪的人脸图像进行特征点定位和特征值提取;进行特征值及其它人脸信息的数据传输。本发明提供的在摄像机内实现人脸信息分析及提取的方法,分析的是摄像机内当前无损图像帧,提高了识别精度,提取的人脸信息更精确,在芯片中运行算法,提高了运算速度,在摄像机内部完成运算,减少了所需后台服务器的数量,自定义传送数据,可不传递视频,节约带宽,提高了人脸识别提取效率。

Description

一种在摄像机内实现人脸信息分析及提取的方法
技术领域
本发明涉及人脸识别技术领域,尤其涉及一种在摄像机内实现人脸信息分析及提取的方法。
背景技术
目前人脸识别技术领域内,传统的方法是:通过摄像机拍摄图像,然后将图像直接通过通讯装置传输到后台服务器,然后由后台服务器的主机进行人脸识别。采用传统的方法,需要将图像传输到后台服务器中进行处理,而经过传输的图像在传输过程中会或多或少发生损耗,从而,后台服务器进行分析及人脸识别的是有损图像,人脸识别的精度会受影响,后台服务器的需求也是一个亟待解决的问题。因此,现有的人脸识别方法的识别精度有待提高。
发明内容
鉴于目前人脸识别技术领域存在的上述不足,本发明提供一种在摄像机内实现人脸信息分析及提取的方法,能够从无损图像中识别和提取人脸信息,提高了识别精度及效率。
为达到上述目的,本发明的实施例采用如下技术方案:
一种在摄像机内实现人脸信息分析及提取的方法,所述摄像机包含有芯片,所述在摄像机内实现人脸信息分析及提取的方法包括以下步骤:
获取摄像机当前无损图像帧;
对获取的图像进行图像预处理;
对预处理后的图像进行人脸检测;
对检测出的人脸进行算法跟踪;
采用芯片对应的硬件内联函数和定点运算对跟踪的人脸图像进行特征点定位和特征值提取;
进行特征值及其它人脸信息的数据传输。
依照本发明的一个方面,所述在摄像机内实现人脸信息分析及提取的方法还包括:对跟踪的人脸进行最优人脸评分。
依照本发明的一个方面,所述对获取的图像进行图像预处理包括以下步骤:对待检测图像光照补偿、灰度化、滤波去噪及归一化处理,得到高质量的灰度图像。
依照本发明的一个方面,所述对预处理后的图像进行人脸检测包括:从场景图像中检测、定位人脸,将人脸从背景中分离出来,计算图像Haar-Like小波特征,将其传给离线训练好的多层级联AdaBoost分类器进行判决。
依照本发明的一个方面,所述采用芯片对应的硬件内联函数和定点运算对跟踪的人脸图像进行特征点定位和特征值提取包括:采用芯片对应的硬件内联函数同时通过定点运算来对跟踪的人脸图像进行描述、建模,用特征向量来表述人脸,提取出特征值。
依照本发明的一个方面,所述在摄像机内实现人脸信息分析及提取的方法还包括以下步骤:在所述摄像机内植入人脸信息提取算法,所述人脸信息提取算法的内存copy采用芯片的copy模式。
依照本发明的一个方面,所述在摄像机内实现人脸信息分析及提取的方法还包括以下步骤:人脸信息提取算法采用了芯片的关键字。
依照本发明的一个方面,所述在摄像机内实现人脸信息分析及提取的方法还包括以下步骤:所述人脸信息提取算法采用芯片的编译项进行代码编译。
依照本发明的一个方面,所述在摄像机内实现人脸信息分析及提取的方法还包括以下步骤:所述人脸信息提取算法采用了优化循环方式。
依照本发明的一个方面,所述在摄像机内实现人脸信息分析及提取的方法包括:将特征值及其它人脸信息传输给服务器来进行人脸比对、识别。
本发明实施的优点:本发明所述的在摄像机内实现人脸信息分析及提取的方法通过在摄像机内执行以下步骤:获取摄像机当前无损图像帧;对获取的图像进行图像预处理;对预处理后的图像进行人脸检测;对检测出的人脸进行算法跟踪;采用芯片对应的硬件内联函数和定点运算对跟踪的人脸图像进行特征点定位和特征值提取;进行特征值及其它人脸信息的数据传输,在摄像机中执行人脸信息分析及提取算法,分析的是摄像机内当前无损图像帧,从而提高了识别精度,提取出的人脸信息更加精确,且在芯片中运行算法,又提高了运算速度,同时因运算在摄像机内部完成,从而减少了所需后台服务器的数量,自定义传送数据,可以不传递视频,节约带宽,并提高了人脸识别提取效率。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例一所述的一种在摄像机内实现人脸信息分析及提取的方法示意图;
图2为本发明实施例二所述的一种在摄像机内实现人脸信息分析及提取的方法示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
实施例一
如图1所示,一种在摄像机内实现人脸信息分析及提取的方法,所述摄像机包含有芯片,所述在摄像机内实现人脸信息分析及提取的方法包括以下步骤:
步骤S1:获取摄像机当前无损图像帧;
所述步骤S1获取摄像机当前无损图像帧的具体实施的前提为,在含芯片的摄像机内植入人脸信息提取算法。在芯片中植入了人脸信息提取算法后,由摄像机拍摄图像,然后人脸信息提取算法会获取该摄像机当前所拍摄的无损图像帧作为待识别图像。
步骤S2:对获取的图像进行图像预处理;
在所述步骤S1执行完后,执行步骤S2对获取的图像进行图像预处理,所述步骤S2的具体实施方式可为:对待检测图像光照补偿、灰度化、滤波去噪及归一化处理,得到高质量的灰度图像。
步骤S3:对预处理后的图像进行人脸检测;
所述步骤S3对预处理后的图像进行人脸检测的具体实施方式可为:从场景图像中检测、定位人脸,将人脸从背景中分离出来,计算图像Haar-Like小波特征,将其传给离线训练好的多层级联AdaBoost分类器进行判决。
在实际应用中,所述进行人脸检测及判断的要素包括位置、姿态、大小、肤色、发型和是否佩戴眼镜等。
在实际应用中,若存在未通过检测的人脸图像,则待检测人脸图像作为样本训练分类器,在线自动更新分类器。
其中多层级联AdaBoost分类器离线训练过程包括:
训练样本分为人脸图像集和非人脸图像集,在预处理阶段,样本灰度化处理,以便计算样本Haar-Like小波特征;每一个Haar-Like小波特征构成一弱分类器,通过AdaBoost迭代训练,选择一个最优的弱分类器,更新权重,将弱分类器组合成一个强的分类器,然后采用一个由简单到复杂,由粗到精的多分类器级联结构;
应用当前离线训练好了的分类器对非人脸图像集进行过滤,去除能被正确分类的样本,如果非人脸图像集不为空,继续应用连续的AdaBoost训练新的强分类器;如此循环,直到所有的非人脸图像集用完为止。
步骤S4:对检测出的人脸进行算法跟踪;
所述步骤S4对检测出的人脸进行算法跟踪的具体实施方式可为:在摄像机连续的图像帧中判断出人脸的存在与否,并对已检测出的人脸进行连续的定位跟踪。
在实际应用中,所述对检测出的人脸进行算法跟踪可为:通过步骤S3检测出人脸并定位该人脸,然后将此人脸作为人脸模板,随后在后续帧中运用均值偏移算法,不断进行均值偏移矢量迭代实现人脸跟踪。
步骤S5:采用芯片对应的硬件内联函数和定点运算对跟踪的人脸图像进行特征点定位和特征值提取;
所述步骤S5采用芯片对应的硬件内联函数和定点运算对跟踪的人脸图像进行特征点定位和特征值提取的具体实施方式可为:采用芯片对应的硬件内联函数同时通过定点运算来对跟踪的人脸图像进行描述、建模,用特征向量来表述人脸,提取出特征值。所述通过采用芯片对应的硬件内联函数的具体实施方式可为:因原有的人脸信息提取算法均是在计算机内运行的,从而其所采用的是计算机内的基本数学运算,当在芯片内运行时,运算速度会受到影响,从而,采用摄像机内的芯片对应的硬件内联函数代替原来人脸信息提取算法代码采用的基本数学运算,可提高运算速度。所述通过定点运算的具体实施方式可为:因摄像机内的芯片不支持寻常计算机所支持的浮点运算,从而需要将编写的人脸信息提取算法代码从浮点运算类型修改为定点运算类型,也就是将获取的人脸信息提取算法代码进行浮点转定点修改。
在实际应用中,其在芯片中的实现过程为:
采用一种基于几何投影和模板匹配相结合的人脸特征点定位算法;首先运用投影法粗定位眼睛位置;然后在此结果上采用PCA模板匹配法精确定位;最后根据眼睛的定位位置,采用投影法定位鼻子的2个角点及鼻尖。
特征提取的主要步骤如下:
根据人脸的测量关系抽取眉毛和眼睛窗;
向眉毛和眼睛窗内投影粗定位眼睛位置;得到的眉毛和眼睛窗为矩形框,设矩形框左上顶点坐标和右下顶点的坐标,根据投影函数关系,计算框内任意一点在水平方向上和垂直方向上的平均灰度值,眉毛和眼珠较于其他位置比较黑,灰度值在水平方向上在眉毛和眼珠处出现2个灰度谷点,同时眼珠又在眉毛的下方,由此利用灰度的水平坐标确定眼睛中心在垂直方向上的坐标;根据得到的眉毛及眼睛中心的坐标重新抽取只含有眼睛的窗口,由于瞳孔较黑且眼眶的水平边缘比较明显,眼睛窗内灰度的垂直投影及水平边缘的垂直投影确定眼睛中心的水平坐标;
眼部归一化校准;
PCA模板匹配精确定位眼睛;
根据人脸的测量关系抽取鼻子窗;
窗内投影确定鼻子位置;
通过利用离散余弦变换DCT及PCA模板匹配法提取表达人脸信息能力强的局部特征,该局部特征包括眼睛、鼻子及嘴巴,同时利用人脸识别Fisherface方法和简单频谱脸方法提取人脸的整体特征,融合局部特征和整体特征。
用特征向量来表述人脸的步骤如下:
利用特征点定位算法得到人脸器官的位置信息,根据人脸的结构特点分割各器官区域;其中,眼睛区域的中心位于两眼中心连线的中点处,大小为1.6de×0.5de,de为归化后两眼中心间距离;鼻子区域的高度为大小为0.6de×0.5de
设I(x,y)、Ic(x,y)和In(x,y)分别为人脸图像、眼睛区域图像和鼻子区域图像,分别用DCT提取各个图像信息:
Xh=Reshape(F(I),nh)
Xe=Reshape(F(Ie),ne)
Xn=Reshape(F(In),nn)
其中,Xh,Xe和Xn分别为人脸图像、眼睛区域和鼻子区域的DCT特征,函数Reshape(A,n)的功能是抽取二维矩阵A的左上n×n子矩阵并将此子矩阵转换为一个n2维列向量;采用串联方法,将向量Xh,Xe和Xn串联形成融合特征向量Y0:Y0=(Xh T,Xe T,Xn T)T
去均值归一化后得到人脸组合特征向量Y:Y=(Y0-μ)/σ;
式中,μ=E(Y0)训练样本融合特征的均值向量;E()为数学期望函数,σ为相应的方差向量。
步骤S6:进行特征值及其它人脸信息的数据传输;
所述步骤S6进行特征值及其它人脸信息的数据传输的具体实施方式可为:将所述步骤S5提取出的人脸特征值及其它人脸信息数据传输给服务器来进行人脸比对、识别。
在实际应用中,本实施例所采用的摄像机可为人脸识别智能相机。
实施例二
如图2所示,一种在摄像机内实现人脸信息分析及提取的方法,所述摄像机包含有芯片,所述在摄像机内实现人脸信息分析及提取的方法包括以下步骤:
步骤S1:获取摄像机当前无损图像帧;
所述步骤S1获取摄像机当前无损图像帧的具体实施的前提为,在含芯片的摄像机内植入人脸信息提取算法。在芯片中植入了人脸信息提取算法后,由摄像机拍摄图像,然后人脸信息提取算法会获取该摄像机当前所拍摄的无损图像帧作为待识别图像。
步骤S2:对获取的图像进行图像预处理;
在所述步骤S1执行完后,执行步骤S2对获取的图像进行图像预处理,所述步骤S2的具体实施方式可为:对待检测图像光照补偿、灰度化、滤波去噪及归一化处理,得到高质量的灰度图像。
步骤S3:对预处理后的图像进行人脸检测;
所述步骤S3对预处理后的图像进行人脸检测的具体实施方式可为:从场景图像中检测、定位人脸,将人脸从背景中分离出来,计算图像Haar-Like小波特征,将其传给离线训练好的多层级联AdaBoost分类器进行判决。
在实际应用中,所述进行人脸检测及判断的要素包括位置、姿态、大小、肤色、发型和是否佩戴眼镜等。
在实际应用中,若存在未通过检测的人脸图像,则待检测人脸图像作为样本训练分类器,在线自动更新分类器。
其中多层级联AdaBoost分类器离线训练过程包括:
训练样本分为人脸图像集和非人脸图像集,在预处理阶段,样本灰度化处理,以便计算样本Haar-Like小波特征;每一个Haar-Like小波特征构成一弱分类器,通过AdaBoost迭代训练,选择一个最优的弱分类器,更新权重,将弱分类器组合成一个强的分类器,然后采用一个由简单到复杂,由粗到精的多分类器级联结构;
应用当前离线训练好了的分类器对非人脸图像集进行过滤,去除能被正确分类的样本,如果非人脸图像集不为空,继续应用连续的AdaBoost训练新的强分类器;如此循环,直到所有的非人脸图像集用完为止。
步骤S4:对检测出的人脸进行算法跟踪;
所述步骤S4对检测出的人脸进行算法跟踪的具体实施方式可为:在摄像机连续的图像帧中判断出人脸的存在与否,并对已检测出的人脸进行连续的定位跟踪。
在实际应用中,所述对检测出的人脸进行算法跟踪可为:通过步骤S3检测出人脸并定位该人脸,然后将此人脸作为人脸模板,随后在后续帧中运用均值偏移算法,不断进行均值偏移矢量迭代实现人脸跟踪。
步骤S5:对跟踪的人脸进行最优人脸评分;
所述步骤S5对跟踪的人脸进行最优人脸评分的具体实施方式可为:通过步骤S4进行人脸跟踪,然后对所跟踪的所有图像帧中的人脸进行最优人脸评分,从而方便后续的步骤进行人脸特征点定位机特征值提取,因是最优人脸,从而提高了识别精度及提取信息的精确度。
步骤S6:采用芯片对应的硬件内联函数和copy模式同时通过定点运算对跟踪的人脸图像进行特征点定位和特征值提取;
所述步骤S6采用芯片对应的硬件内联函数和copy模式同时通过定点运算对跟踪的人脸图像进行特征点定位和特征值提取的具体实施方式可为:采用芯片对应的硬件内联函数和copy模式同时通过定点运算来对跟踪的人脸图像进行描述、建模,用特征向量来表述人脸,提取出特征值。所述通过采用芯片对应的硬件内联函数的具体实施方式可为:因原有的人脸信息提取算法均是在计算机内运行的,从而其所采用的是计算机内的基本数学运算,当在芯片内运行时,运算速度会受到影响,从而,采用摄像机内的芯片对应的硬件内联函数代替原来人脸信息提取算法代码采用的基本数学运算,可提高运算速度。所述通过定点运算的具体实施方式可为:因摄像机内的芯片不支持寻常计算机所支持的浮点运算,从而需要将编写的人脸信息提取算法代码从浮点运算类型修改为定点运算类型,也就是将获取的人脸信息提取算法代码进行浮点转定点修改。
在实际应用中,其在芯片中的实现过程为:
采用一种基于几何投影和模板匹配相结合的人脸特征点定位算法;首先运用投影法粗定位眼睛位置;然后在此结果上采用PCA模板匹配法精确定位;最后根据眼睛的定位位置,采用投影法定位鼻子的2个角点及鼻尖。
特征提取的主要步骤如下:
根据人脸的测量关系抽取眉毛和眼睛窗;
向眉毛和眼睛窗内投影粗定位眼睛位置;得到的眉毛和眼睛窗为矩形框,设矩形框左上顶点坐标和右下顶点的坐标,根据投影函数关系,计算框内任意一点在水平方向上和垂直方向上的平均灰度值,眉毛和眼珠较于其他位置比较黑,灰度值在水平方向上在眉毛和眼珠处出现2个灰度谷点,同时眼珠又在眉毛的下方,由此利用灰度的水平坐标确定眼睛中心在垂直方向上的坐标;根据得到的眉毛及眼睛中心的坐标重新抽取只含有眼睛的窗口,由于瞳孔较黑且眼眶的水平边缘比较明显,眼睛窗内灰度的垂直投影及水平边缘的垂直投影确定眼睛中心的水平坐标;
眼部归一化校准;
PCA模板匹配精确定位眼睛;
根据人脸的测量关系抽取鼻子窗;
窗内投影确定鼻子位置;
通过利用离散余弦变换DCT及PCA模板匹配法提取表达人脸信息能力强的局部特征,该局部特征包括眼睛、鼻子及嘴巴,同时利用人脸识别Fisherface方法和简单频谱脸方法提取人脸的整体特征,融合局部特征和整体特征。
用特征向量来表述人脸的步骤如下:
利用特征点定位算法得到人脸器官的位置信息,根据人脸的结构特点分割各器官区域;其中,眼睛区域的中心位于两眼中心连线的中点处,大小为1.6de×0.5de,de为归化后两眼中心间距离;鼻子区域的高度为大小为0.6de×0.5de
设I(x,y)、Ic(x,y)和In(x,y)分别为人脸图像、眼睛区域图像和鼻子区域图像,分别用DCT提取各个图像信息:
Xh=Reshape(F(I),nh)
Xe=Reshape(F(Ie),ne)
Xn=Reshape(F(In),nn)
其中,Xh,Xe和Xn分别为人脸图像、眼睛区域和鼻子区域的DCT特征,函数Reshape(A,n)的功能是抽取二维矩阵A的左上n×n子矩阵并将此子矩阵转换为一个n2维列向量;采用串联方法,将向量Xh,Xe和Xn串联形成融合特征向量Y0:Y0=(Xh T,Xe T,Xn T)T
去均值归一化后得到人脸组合特征向量Y:Y=(Y0-μ)/σ;
式中,μ=E(Y0)训练样本融合特征的均值向量;E()为数学期望函数,σ为相应的方差向量。
在本实施例中,所述步骤采用芯片对应的硬件内联函数和copy模式同时通过定点运算对跟踪的人脸图像进行特征点定位和特征值提取还可进行以下优化:采用芯片的编译项进行代码编译、采用优化循环方式和大量采用芯片的关键字。
步骤S7:进行特征值及其它人脸信息的数据传输;
所述步骤S7进行特征值及其它人脸信息的数据传输的具体实施方式可为:将所述步骤S5提取出的人脸特征值及其它人脸信息数据传输给服务器来进行人脸比对、识别。
在实际应用中,本实施例所采用的摄像机可为人脸识别智能相机。
本发明实施的优点:本发明所述的在摄像机内实现人脸信息分析及提取的方法通过在摄像机内执行以下步骤:获取摄像机当前无损图像帧;对获取的图像进行图像预处理;对预处理后的图像进行人脸检测;对检测出的人脸进行算法跟踪;采用芯片对应的硬件内联函数和定点运算对跟踪的人脸图像进行特征点定位和特征值提取;进行特征值及其它人脸信息的数据传输,在摄像机中执行人脸信息分析及提取算法,分析的是摄像机内当前无损图像帧,从而提高了识别精度,提取出的人脸信息更加精确,且在芯片中运行算法,又提高了运算速度,同时因运算在摄像机内部完成,从而减少了所需后台服务器的数量,自定义传送数据,可以不传递视频,节约带宽,并提高了人脸识别提取效率。
以上所述,仅为本发明的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本领域技术的技术人员在本发明公开的技术范围内,可轻易想到的变化或替换,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应以所述权利要求的保护范围为准。

Claims (6)

1.一种在摄像机内实现人脸信息分析及提取的方法,所述摄像机包含有芯片,其特征在于,所述在摄像机内实现人脸信息分析及提取的方法包括以下步骤:
获取摄像机当前无损图像帧;
对获取的图像进行图像预处理;
对预处理后的图像进行人脸检测;
对检测出的人脸进行算法跟踪;
采用芯片对应的硬件内联函数和定点运算对跟踪的人脸图像进行特征点定位和特征值提取;
所述采用芯片对应的硬件内联函数和定点运算对跟踪的人脸图像进行特征点定位和特征值提取包括:采用芯片对应的硬件内联函数同时通过定点运算来对跟踪的人脸图像进行描述、建模,用特征向量来表述人脸,提取出特征值;
在所述摄像机内植入人脸信息提取算法,所述人脸信息提取算法的内存copy采用芯片的copy模式;所述人脸信息提取算法采用了芯片的关键字;所述人脸信息提取算法采用了芯片的编译项进行代码编译;
进行特征点定位包括:采用一种基于几何投影和模板匹配相结合的人脸特征点定位算法;首先运用投影法粗定位眼睛位置;然后在此结果上采用PCA模板匹配法精确定位;最后根据眼睛的定位位置,采用投影法定位鼻子的2个角点及鼻尖;
特征提取的主要步骤如下:
根据人脸的测量关系抽取眉毛和眼睛窗;
向眉毛和眼睛窗内投影粗定位眼睛位置;得到的眉毛和眼睛窗为矩形框,设矩形框左上顶点坐标和右下顶点的坐标,根据投影函数关系,计算框内任意一点在水平方向上和垂直方向上的平均灰度值,眉毛和眼珠较于其他位置比较黑,灰度值在水平方向上在眉毛和眼珠处出现2个灰度谷点,同时眼珠又在眉毛的下方,由此利用灰度的水平坐标确定眼睛中心在垂直方向上的坐标;根据得到的眉毛及眼睛中心的坐标重新抽取只含有眼睛的窗口,由于瞳孔较黑且眼眶的水平边缘比较明显,眼睛窗内灰度的垂直投影及水平边缘的垂直投影确定眼睛中心的水平坐标;
眼部归一化校准;
PCA模板匹配精确定位眼睛;
根据人脸的测量关系抽取鼻子窗;
窗内投影确定鼻子位置;
通过利用离散余弦变换DCT及PCA模板匹配法提取表达人脸信息能力强的局部特征,该局部特征包括眼睛、鼻子及嘴巴,同时利用人脸识别Fisherface方法和简单频谱脸方法提取人脸的整体特征,融合局部特征和整体特征;
用特征向量来表述人脸的步骤如下:
利用特征点定位算法得到人脸器官的位置信息,根据人脸的结构特点分割各器官区域;其中,眼睛区域的中心位于两眼中心连线的中点处,大小为1.6de×0.5de,de为归化后两眼中心间距离;鼻子区域的高度为大小为0.6de×0.5de
设I(x,y)、Ic(x,y)和In(x,y)分别为人脸图像、眼睛区域图像和鼻子区域图像,分别用DCT提取各个图像信息:
Xh=Reshape(F(I),nh)
Xe=Reshape(F(Ie),ne)
Xn=Reshape(F(In),nn)
其中,Xh,Xe和Xn分别为人脸图像、眼睛区域和鼻子区域的DCT特征,函数Reshape(A,n)的功能是抽取二维矩阵A的左上n×n子矩阵并将此子矩阵转换为一个n2维列向量;采用串联方法,将向量Xh,Xe和Xn串联形成融合特征向量Y0:Y0=(Xh T,Xe T,Xn T)T
去均值归一化后得到人脸组合特征向量Y:Y=(Y0-μ)/σ;
式中,μ=E(Y0)训练样本融合特征的均值向量;E()为数学期望函数,σ为相应的方差向量;
进行特征值及其它人脸信息的数据传输。
2.根据权利要求1所述的在摄像机内实现人脸信息分析及提取的方法,其特征在于,所述在摄像机内实现人脸信息分析及提取的方法还包括:对跟踪的人脸进行最优人脸评分。
3.根据权利要求1所述的在摄像机内实现人脸信息分析及提取的方法,其特征在于,所述对获取的图像进行图像预处理包括以下步骤:对待检测图像光照补偿、灰度化、滤波去噪及归一化处理,得到高质量的灰度图像。
4.根据权利要求1所述的在摄像机内实现人脸信息分析及提取的方法,其特征在于,所述对预处理后的图像进行人脸检测包括:从场景图像中检测、定位人脸,将人脸从背景中分离出来,计算图像Haar-Like小波特征,将其传给离线训练好的多层级联AdaBoost分类器进行判决。
5.根据权利要求1至4之一所述的在摄像机内实现人脸信息分析及提取的方法,其特征在于,所述在摄像机内实现人脸信息分析及提取的方法还包括以下步骤:所述人脸信息提取算法采用了优化循环方式。
6.根据权利要求5所述的在摄像机内实现人脸信息分析及提取的方法,其特征在于,所述在摄像机内实现人脸信息分析及提取的方法包括:将特征值及其它人脸信息传输给服务器来进行人脸比对、识别。
CN201410693304.0A 2014-11-26 2014-11-26 一种在摄像机内实现人脸信息分析及提取的方法 Active CN105701486B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201410693304.0A CN105701486B (zh) 2014-11-26 2014-11-26 一种在摄像机内实现人脸信息分析及提取的方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410693304.0A CN105701486B (zh) 2014-11-26 2014-11-26 一种在摄像机内实现人脸信息分析及提取的方法

Publications (2)

Publication Number Publication Date
CN105701486A CN105701486A (zh) 2016-06-22
CN105701486B true CN105701486B (zh) 2019-11-19

Family

ID=56294802

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410693304.0A Active CN105701486B (zh) 2014-11-26 2014-11-26 一种在摄像机内实现人脸信息分析及提取的方法

Country Status (1)

Country Link
CN (1) CN105701486B (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108038422B (zh) * 2017-11-21 2021-12-21 平安科技(深圳)有限公司 摄像装置、人脸识别的方法及计算机可读存储介质
CN108197544B (zh) * 2017-12-22 2020-02-04 深圳云天励飞技术有限公司 人脸分析、过滤方法、装置、嵌入式设备、介质和集成电路
CN108038468A (zh) * 2017-12-26 2018-05-15 北斗七星(重庆)物联网技术有限公司 一种基于人脸识别的安防终端
CN110784628B (zh) * 2019-08-14 2022-04-05 腾讯科技(深圳)有限公司 图像数据的采集处理方法、系统及智能摄像头、服务器
CN114882576B (zh) * 2022-07-07 2022-09-20 中关村科学城城市大脑股份有限公司 人脸识别方法、电子设备、计算机可读介质和程序产品

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101547306A (zh) * 2008-03-28 2009-09-30 鸿富锦精密工业(深圳)有限公司 摄像装置及其对焦方法
CN102170563A (zh) * 2011-03-24 2011-08-31 杭州海康威视软件有限公司 智能人员卡口系统及人员监控管理方法
CN201993777U (zh) * 2007-09-26 2011-09-28 德萨拉技术爱尔兰有限公司 一种数字照相机
CN102244734A (zh) * 2011-07-08 2011-11-16 天津三星光电子有限公司 一种具有人脸识别加密功能的数码摄像机
WO2012139269A1 (en) * 2011-04-11 2012-10-18 Intel Corporation Tracking and recognition of faces using selected region classification
CN103310179A (zh) * 2012-03-06 2013-09-18 上海骏聿数码科技有限公司 一种基于人脸识别技术的最优姿态检测方法及系统
CN103458186A (zh) * 2013-08-28 2013-12-18 常州环视高科电子科技有限公司 人脸识别摄像装置

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN201993777U (zh) * 2007-09-26 2011-09-28 德萨拉技术爱尔兰有限公司 一种数字照相机
CN101547306A (zh) * 2008-03-28 2009-09-30 鸿富锦精密工业(深圳)有限公司 摄像装置及其对焦方法
CN102170563A (zh) * 2011-03-24 2011-08-31 杭州海康威视软件有限公司 智能人员卡口系统及人员监控管理方法
WO2012139269A1 (en) * 2011-04-11 2012-10-18 Intel Corporation Tracking and recognition of faces using selected region classification
CN102244734A (zh) * 2011-07-08 2011-11-16 天津三星光电子有限公司 一种具有人脸识别加密功能的数码摄像机
CN103310179A (zh) * 2012-03-06 2013-09-18 上海骏聿数码科技有限公司 一种基于人脸识别技术的最优姿态检测方法及系统
CN103458186A (zh) * 2013-08-28 2013-12-18 常州环视高科电子科技有限公司 人脸识别摄像装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
具有人脸识别功能的监控摄像机的设计实现;王一鸣;《中国优秀硕士学位论文全文数据库 信息科技辑》;20140615(第6期);摘要,正文第6-35页,第46-47页,第56页 *

Also Published As

Publication number Publication date
CN105701486A (zh) 2016-06-22

Similar Documents

Publication Publication Date Title
CN109815826B (zh) 人脸属性模型的生成方法及装置
CN104978550B (zh) 基于大规模人脸数据库的人脸识别方法及系统
Elhayek et al. Efficient convnet-based marker-less motion capture in general scenes with a low number of cameras
CN104463100B (zh) 基于面部表情识别模式的智能轮椅人机交互系统及方法
CN105701486B (zh) 一种在摄像机内实现人脸信息分析及提取的方法
CN105447441B (zh) 人脸认证方法和装置
CN105046219B (zh) 一种人脸识别系统
CN103514441B (zh) 基于移动平台的人脸特征点定位跟踪方法
CN108288051B (zh) 行人再识别模型训练方法及装置、电子设备和存储介质
CN107316333B (zh) 一种自动生成日漫肖像的方法
WO2012077286A1 (ja) 物体検出装置および物体検出方法
Barros et al. Real-time gesture recognition using a humanoid robot with a deep neural architecture
CN104850825A (zh) 一种基于卷积神经网络的人脸图像颜值计算方法
CN109472198A (zh) 一种姿态鲁棒的视频笑脸识别方法
Gou et al. Learning-by-synthesis for accurate eye detection
CN108629336A (zh) 基于人脸特征点识别的颜值计算方法
CN109325456A (zh) 目标识别方法、装置、目标识别设备及存储介质
Zhang et al. Multimodal spatiotemporal networks for sign language recognition
CN106599785A (zh) 人体3d特征身份信息库的建立方法及设备
CN109325408A (zh) 一种手势判断方法及存储介质
CN104008364A (zh) 人脸识别方法
CN111582036B (zh) 可穿戴设备下基于形状和姿态的跨视角人物识别方法
Sarma et al. Hand gesture recognition using deep network through trajectory-to-contour based images
Cordea et al. Real-time 2 (1/2)-D head pose recovery for model-based video-coding
Chen et al. Eyes localization algorithm based on prior MTCNN face detection

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant