CN104915656A - 一种基于双目视觉测量技术的快速人脸识别方法 - Google Patents
一种基于双目视觉测量技术的快速人脸识别方法 Download PDFInfo
- Publication number
- CN104915656A CN104915656A CN201510330708.8A CN201510330708A CN104915656A CN 104915656 A CN104915656 A CN 104915656A CN 201510330708 A CN201510330708 A CN 201510330708A CN 104915656 A CN104915656 A CN 104915656A
- Authority
- CN
- China
- Prior art keywords
- face
- area
- ipf
- image
- projection
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 39
- 238000005516 engineering process Methods 0.000 title claims abstract description 28
- 238000005259 measurement Methods 0.000 title claims abstract description 26
- 241000282414 Homo sapiens Species 0.000 title claims description 43
- 230000006870 function Effects 0.000 claims description 36
- 210000001747 pupil Anatomy 0.000 claims description 19
- 238000001514 detection method Methods 0.000 claims description 16
- 238000012937 correction Methods 0.000 claims description 12
- 238000004422 calculation algorithm Methods 0.000 claims description 10
- 239000000284 extract Substances 0.000 claims description 7
- 238000003384 imaging method Methods 0.000 claims description 6
- 238000010801 machine learning Methods 0.000 claims description 6
- 238000012545 processing Methods 0.000 claims description 6
- 230000000877 morphologic effect Effects 0.000 claims description 4
- 230000001131 transforming effect Effects 0.000 claims description 2
- 230000000007 visual effect Effects 0.000 claims 1
- 238000013528 artificial neural network Methods 0.000 description 4
- 238000004364 calculation method Methods 0.000 description 3
- 238000000605 extraction Methods 0.000 description 2
- 210000000887 face Anatomy 0.000 description 2
- 238000010606 normalization Methods 0.000 description 2
- 238000013473 artificial intelligence Methods 0.000 description 1
- 238000011840 criminal investigation Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 230000001815 facial effect Effects 0.000 description 1
- 230000008921 facial expression Effects 0.000 description 1
- 230000005021 gait Effects 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 238000003909 pattern recognition Methods 0.000 description 1
- 230000035479 physiological effects, processes and functions Effects 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 210000001525 retina Anatomy 0.000 description 1
- 230000011218 segmentation Effects 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
- 210000003462 vein Anatomy 0.000 description 1
- 238000012795 verification Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/161—Detection; Localisation; Normalisation
- G06V40/162—Detection; Localisation; Normalisation using pixel segmentation or colour matching
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/168—Feature extraction; Face representation
- G06V40/169—Holistic features and representations, i.e. based on the facial image taken as a whole
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Oral & Maxillofacial Surgery (AREA)
- General Health & Medical Sciences (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Image Analysis (AREA)
Abstract
本发明公开了一种基于双目视觉测量技术的快速人脸识别方法,包括以下步骤:先从双目图像中提取人脸的有效特征,划分出人脸的有效区域;再利用双目视觉测量技术,对提取到的人脸区域进行大小测量;根据计算出的人脸区域大小,将人脸数据库拆分成多个人脸子数据库;最后,在识别阶段,将实际计算出的人脸区域与人脸子数据库进行对比识别。本发明将实际计算出的人脸区域与人脸子数据库进行对比识别,从而减少了识别比对的次数,大大提升了人脸识别的速度;此外本发明中利用人脸的实际大小与人脸子数据库进行对比识别,识别的误差也较小,从而有效提高了人脸识别的准确率;此外本发明的人脸识别方法还具有较好的通用性。
Description
技术领域
本发明涉及一种基于双目视觉测量技术的快速人脸识别方法,属于人脸识别技术领域。
背景技术
近几十年来生物特征识别得到了快速发展。生物特征作为人的一种内在属性,具有很强的自身稳定性和个体差异性,现有的生物识别技术包括:指纹识别、虹膜识别、视网膜识别、步态识别、静脉识别和人脸识别等;其中,人脸识别由于其具有直接、友好、方便的特点,易于被用户接受,因而得到了广泛的应用,尤其是在刑侦、安全验证系统和人机交互等方面,涉及了计算机视觉、模式识别、人工智能、数字图像处理、神经网络、心理学、生理学、数学等诸多研究领域。
现有技术中,专利号为201210250450.7的专利公开了一种基于双目摄像头的智能电视人脸识别方法,主要包括以下步骤:左摄像头和右摄像头同时获取图像,分别检测人脸和人眼,比较计算出的两个图像的差异,如果大于阈值,则判定为照片欺骗,结束识别,否则,完成识别。该方法主要利用双目技术解决了照片欺骗的问题,但是其识别速度慢,识别准确率也较低;专利号为201210250450.7的专利公开了“一种基于双目被动立体视觉的快速三维人脸识别方法”,其运用搭建好的双目摄像机,进行人脸检测和采集,定位眼睛和鼻尖,构建基准三角形,进而进行三维人脸重建,在完成三维人脸表情归一化后,运用三维人脸识别算法进行识别,但是由于三维人脸重建和三维人脸识别的计算量较大,因而该方法的识别速度也较慢;申请号为201410281328.5的专利申请公开了“一种基于双目立体视觉的人脸图像识别方法”,其利用双目视觉在人脸图像中标出人脸区域,是一种人脸检测方法,但是其并未涉及人脸识别;申请号为201310024137.6的专利申请公开了一种“基于双目立体视觉的四目摄像机正面人脸重建方法”,其利用两个双目摄像机从正面拍摄人脸图像,将两个摄像机拍摄的人脸图像进行融合,增强了人脸识别对姿态的鲁棒性,该方法也仅是一种人脸重建的方法,并未涉及人脸识别;另外,张顺岚《莫建文.基于双目视觉的三维人脸识别算法》[J].电视技术,2014,38(9).基于双目视觉对三维人脸识别算法进行了改进,利用主动形状模型(ASM)定位人脸图像中的特征点,结合摄像机模型参数得到其三维坐标,构建特征点距离矩阵,最后用BP神经网络进行识别;该方法利用人脸特征点的三维坐标训练神经网络进行识别,但是其识别速度慢,识别准确率也较低;周佳立、张树有、杨国平.《基于双目被动立体视觉的三维人脸重构与识别》[J].自动化学报,2009,35(2).利用上下两平行光轴摄像机建立的双目视觉系统采集人脸图像,通过人脸检测和初步视差估计,重建人脸三维点云信息,再利用神经网络进行多层次人脸曲面重建,再进行人脸归一化和识别。该方法中由于三维人脸重建和三维人脸识别的计算量较大,因而识别速度也较慢。
发明内容
本发明的目的在于,提供一种基于双目视觉测量技术的快速人脸识别方法,它可以有效解决现有技术中存在的问题,尤其是人脸识别速度慢、准确率低的问题。
为解决上述技术问题,本发明采用如下的技术方案:一种基于双目视觉测量技术的快速人脸识别方法,包括以下步骤:先从双目图像中提取人脸的有效特征,划分出人脸的有效区域;再利用双目视觉测量技术,对提取到的人脸区域进行大小测量;根据计算出的人脸区域大小,将人脸数据库拆分成多个人脸子数据库;最后,在识别阶段,将实际计算出的人脸区域与人脸子数据库进行对比识别。
上述的基于双目视觉测量技术的快速人脸识别方法,具体包括以下步骤:
(1)采集双目人脸图像,划分出人脸区域;
(2)对人脸区域进行人眼定位,获得左右眼睛瞳孔的中心坐标;
(3)根据左右眼睛瞳孔的中心坐标,对倾斜人脸图像进行旋转校正,获得旋转校正后左右眼睛的纵坐标y′1;
(4)对校正后的人脸图像进行垂直投影,定位人脸的左右边界;
(5)对校正后的人脸图像进行水平投影,定位嘴巴的位置,获得嘴巴的纵坐标y′2;
(6)根据人脸图像旋转校正后左右眼睛的纵坐标y′1、嘴巴的纵坐标y′2和人脸的左右边界,提取人脸矩形区域;
(7)对提取出的人脸矩形区域进行肤色检测和形态学处理,统计肤色像素的数目,并根据肤色像素的数目和每个像素的面积,计算肤色像素在焦平面所占的面积s;
(8)计算视差d;
(9)利用小孔成像模型和三角测量原理,计算实际的人脸面积s′;
(10)在建库阶段,根据人脸面积s′的大小,将人脸数据库拆分成多个不同的人脸子数据库;
(11)在识别阶段,根据实际计算出的人脸面积,利用相应的人脸子数据库进行人脸识别。
采用上述方法步骤,从而可以准确、快速的识别出人脸。
优选的,步骤(1)具体包括:采用双目摄像机采集人脸图像,并用基于haar-like特征的Adaboost机器学习算法进行人脸检测,从而可以准确而快速的划分出人脸区域。
优选的,步骤(2)具体包括:将人脸区域变换到灰度空间,采用基于haar-like特征的Adaboost机器学习算法进行人眼区域检测;再将检测出的人眼区域分别向X轴和Y轴投影,则在左目图像中定位出左右眼睛瞳孔的中心坐标(x11,y11)、(x12,y12),在右目图像中定位出左右眼睛瞳孔的中心坐标(x21,y21)、(x22,y22);该方法中先利用Adaboost机器学习算法进行粗定位,再利用投影实现更精确的定位,因为瞳孔的像素值最低,所以分别取投影最小值处的坐标即为眼睛的坐标。
更优选的,本发明中采用以下公式将人眼区域向X轴和Y轴投影以定位出人眼坐标:
将人眼区域向X轴投影时:
HPFv(x)=(1-α)·IPFv(y)+αVPFv(x)
其中,IPFv为垂直积分投影函数,VPFv为垂直方差投影函数,HPFv为垂直混合投影函数,y1为投影起点纵坐标,y2为投影终点纵坐标,I(x,y)为(x,y)处的像素值,x为投影横坐标;
将人眼区域向Y轴投影时:
HPFh(y)=(1-α)·IPFh(y)-α·VPFh(y)
其中,α=0.6,IPFh为水平积分投影函数,VPFh为水平方差投影函数,HPFh为水平混合投影函数,x1为投影起点横坐标,x2为投影终点横坐标,I(x,y)为(x,y)处的像素值,y为投影纵坐标,定位出眼睛区域后再用以上算法即可得到准确的眼睛位置。
前述的基于双目视觉测量技术的快速人脸识别方法中,步骤(3)中,假设倾斜人脸图像中瞳孔间连线与水平方向的夹角为θ,则旋转校正后的眼睛瞳孔的中心坐标(x′,y′)为:
x′=xcosθ+ysinθ-acosθ-bsinθ+a
y′=-xsinθ+ycosθ+asinθ-bcosθ+b
其中, a、b为倾斜人脸图像的中心坐标, 将两只眼睛校正到同一水平线上,从而保证两只眼睛具有相同的纵坐标。
上述方法中,步骤(4)中,对校正后的人脸图像进行垂直投影,并通过投影值定位出人脸图像的左右边界x1和x2,公式如下:
HPFv(x)=(1-α)·IPFv(y)+αVPFv(x)
其中,IPFv为垂直积分投影函数,VPFv为垂直方差投影函数,HPFv为垂直混合投影函数,y1为投影起点纵坐标,y2为投影终点纵坐标,I(x,y)为(x,y)处的像素值,x为投影横坐标,从而可以简单而快速的定位出人脸图像的左右边界。
优选的,步骤(5)具体包括:取人脸图像左眼横坐标和右眼横坐标之间的区域,对该区域部分的图像进行肤色检测;对肤色检测后的图像取反,并进行水平投影;投影最高点的位置即为嘴巴纵坐标y′2,公式如下:
HPFh(y)=(1-α)·IPFh(y)-α·VPFh(y)
其中,IPFh为水平积分投影函数,VPFh为水平方差投影函数,HPFh为水平混合投影函数,x1为投影起点横坐标,x2为投影终点横坐标,I(x,y)为(x,y)处的像素值,y为投影纵坐标,从而可以准确而快速的获得嘴巴的纵坐标。
进一步优选的,步骤(7)中,对提取出的人脸矩形区域进行肤色检测的公式如下:
其中,θ取值(105,150)为肤色像素值;R、G、B为RGB图像色彩空间的三个分量;Y、Cb、Cr是YCbCr图像色彩空间的三个分量;肤色像素在焦平面所占的面积s为s=n*p(μm)*p(μm),其中,n为肤色像素的数目,p(μm)*p(μm)为像素大小。肤色分割将得到的人脸矩形区域中人脸部分和非人脸部分区分开,得到人脸部分的像素多少,从而可以将人脸矩形区域中的人脸部分和非人脸部分有效的区分开来,便于进一步进行识别处理。
前述的基于双目视觉测量技术的快速人脸识别方法中,步骤(8)中,通过以下公式计算视差d:
其中,x11为左目图像中的左眼横坐标,x12为左目图像中的右眼横坐标,x21为右目图像中的左眼横坐标,x22为右目图像中的右眼横坐标,从而无需立体匹配,用简单的方法就能得到视差,减少了大量的计算步骤。
本发明的步骤(9)中所述的利用小孔成像模型和三角测量原理,计算实际的人脸面积s′具体包括:根据摄像机的线性模型则在双目视觉中有:假设统计出的人脸像素可以再组合成矩形s,则根据计算出实际的人脸面积s′;其中,B为双目摄像机基线距离,cm;d为平均视差,f为焦距,mm;s为人脸像素组合成的矩形的面积。
与现有技术相比,本发明通过先从双目图像中划分出人脸的有效区域,提取人脸的有效特征;再利用双目视觉测量技术,对提取到的人脸区域进行大小测量;根据计算出的人脸区域大小,将人脸数据库拆分成多个人脸子数据库;最后,在识别阶段,将实际计算出的人脸区域与人脸子数据库进行对比识别,从而减少了识别比对的次数,大大提升了人脸识别的速度;此外本发明中利用人脸的实际大小与人脸子数据库进行对比识别,必然也会减小识别的误差,从而有效提高了人脸识别的准确率;此外本发明的人脸识别方法还具有较好的通用性。
实验例:
将本发明的人脸识别方法进行应用试验,采用加拿大PointGrey公司生产的Bumblebee2双目摄像机,基线距离12cm,像素尺寸4.65μm*4.65μm,应用摄像机对91个人采集了双目人脸图像。通过对比双目人脸数据库中志愿者人脸的实际测量值和计算值,得出此双目摄像机的测量误差库e=0.98cm2,最小子库分类距离范围大于2倍的误差大小。因为当测量的值在分类边界的误差范围内时,要进入相邻的两个库进行查找,比如,当分库距离(即以多大的粒度来拆分人脸数据库)为3cm2时,60-63cm2和63-66cm2库相邻两个库,当测量值(人脸区域)在(63-e,63+e)范围内时,要进入这两个库进行人脸识别。下表为不同距离的分类结果对识别率和识别速度的影响:
表1不同的分库距离对识别率和识别速度的影响
由表1可知:采用本发明的人脸识别技术,其识别率和识别速度相对于现有技术(不将人脸数据库拆分成多个人脸子数据库的人脸识别方法)均有提高,尤其是当分库距离为4cm2时,识别率提高最多,同时识别速度的提高值也较客观;当分库距离为2cm2时,识别速度提高最多,同时识别率的提高值也较客观。
本发明的难度在于人脸矩形区域的提取,通过采用本发明的提取方法后,从而可以提取得到准确而有效的人脸区域,既而提高了人脸测量的准确性和人脸数据库分类的准确性,最终提高了人脸识别的准确性。
附图说明
图1是本发明的一种实施例的工作流程图;
图2是将人脸数据库拆分成多个人脸子数据库的示意图。
下面结合附图和具体实施方式对本发明作进一步的说明。
具体实施方式
本发明的实施例1:一种基于双目视觉测量技术的快速人脸识别方法,如图1、图2所示,具体包括以下步骤:
(1)采用双目摄像机采集人脸图像,并用基于haar-like特征的Adaboost机器学习算法进行人脸检测,划分出人脸区域;
(2)对人脸区域进行人眼定位,获得左右眼睛瞳孔的中心坐标;具体包括:将人脸区域变换到灰度空间,采用基于haar-like特征的Adaboost机器学习算法进行人眼区域检测;再将检测出的人眼区域分别向X轴和Y轴投影,则在左目图像中定位出左右眼睛瞳孔的中心坐标(x11,y11)、(x12,y12),在右目图像中定位出左右眼睛瞳孔的中心坐标(x21,y21)、(x22,y22);
其中,采用以下公式将人眼区域向X轴和Y轴投影以定位出人眼坐标:
将人眼区域向X轴投影时:
HPFv(x)=(1-α)·IPFv(y)+αVPFv(x)
其中,IPFv为垂直积分投影函数,VPFv为垂直方差投影函数,HPFv为垂直混合投影函数,y1为投影起点纵坐标,y2为投影终点纵坐标,I(x,y)为(x,y)处的像素值,x为投影横坐标;
将人眼区域向Y轴投影时:
HPFh(y)=(1-α)·IPFh(y)-α·VPFh(y)
其中,α=0.6,IPFh为水平积分投影函数,VPFh为水平方差投影函数,HPFh为水平混合投影函数,x1为投影起点横坐标,x2为投影终点横坐标,I(x,y)为(x,y)处的像素值,y为投影纵坐标;
(3)根据左右眼睛瞳孔的中心坐标,对倾斜人脸图像进行旋转校正,获得旋转校正后左右眼睛的纵坐标y′1;其中,假设倾斜人脸图像中瞳孔间连线与水平方向的夹角为θ,则旋转校正后的眼睛瞳孔的中心坐标(x′,y′)为:
x′=xcosθ+ysinθ-acosθ-bsinθ+a
y′=-xsinθ+ycosθ+asinθ-bcosθ+b
其中, a、b为倾斜人脸图像的中心坐标,
(4)对校正后的人脸图像进行垂直投影,并通过投影值定位出人脸图像的左右边界x1和x2,公式如下:
HPFv(x)=(1-α)·IPFv(y)+αVPFv(x)
其中,IPFv为垂直积分投影函数,VPFv为垂直方差投影函数,HPFv为垂直混合投影函数,y1为投影起点纵坐标,y2为投影终点纵坐标,I(x,y)为(x,y)处的像素值,x为投影横坐标。
(5)取人脸图像左眼横坐标和右眼横坐标之间的区域,对该区域部分的图像进行肤色检测;对肤色检测后的图像取反,并进行水平投影;投影最高点的位置即为嘴巴纵坐标y′2,公式如下:
HPFh(y)=(1-α)·IPFh(y)-α·VPFh(y)
其中,IPFh为水平积分投影函数,VPFh为水平方差投影函数,HPFh为水平混合投影函数,x1为投影起点横坐标,x2为投影终点横坐标,I(x,y)为(x,y)处的像素值,y为投影纵坐标。
(6)根据人脸图像旋转校正后左右眼睛的纵坐标y′1、嘴巴的纵坐标y′2和人脸的左右边界,提取人脸矩形区域;
(7)对提取出的人脸矩形区域进行肤色检测和形态学处理,统计肤色像素的数目,并根据肤色像素的数目和每个像素的面积,计算肤色像素在焦平面所占的面积s;其中,通过以下公式进行肤色检测:
其中,θ取值(105,150)为肤色像素值;R、G、B为RGB图像色彩空间的三个分量;Y、Cb、Cr是YCbCr图像色彩空间的三个分量;肤色像素在焦平面所占的面积s为s=n*p(μm)*p(μm),其中,n为肤色像素的数目,p(μm)*p(μm)为像素大小。
(8)通过以下公式计算视差d:
其中,x11为左目图像中的左眼横坐标,x12为左目图像中的右眼横坐标,x21为右目图像中的左眼横坐标,x22为右目图像中的右眼横坐标。
(9)利用小孔成像模型和三角测量原理,计算实际的人脸面积s′;具体包括:根据摄像机的线性模型则在双目视觉中有:假设统计出的人脸像素可以再组合成矩形s,则根据计算出实际的人脸面积s′;其中,B为双目摄像机基线距离,cm;d为平均视差,f为焦距,mm;s为人脸像素组合成的矩形的面积。
(10)在建库阶段,根据人脸面积s′的大小,将人脸数据库拆分成多个不同的人脸子数据库;
(11)在识别阶段,根据实际计算出的人脸面积,利用相应的人脸子数据库进行人脸识别。
实施例2:一种基于双目视觉测量技术的快速人脸识别方法,如图1、图2所示,包括以下步骤:
(1)采集双目人脸图像,划分出人脸区域;
(2)对人脸区域进行人眼定位,获得左右眼睛瞳孔的中心坐标;
(3)根据左右眼睛瞳孔的中心坐标,对倾斜人脸图像进行旋转校正,获得旋转校正后左右眼睛的纵坐标y′1;
(4)对校正后的人脸图像进行垂直投影,定位人脸的左右边界;
(5)对校正后的人脸图像进行水平投影,定位嘴巴的位置,获得嘴巴的纵坐标y′2;
(6)根据人脸图像旋转校正后左右眼睛的纵坐标y′1、嘴巴的纵坐标y′2和人脸的左右边界,提取人脸矩形区域(将纵坐标y′1到y′2处提取出来);
(7)对提取出的人脸矩形区域进行肤色检测和形态学处理,统计肤色像素的数目,并根据肤色像素的数目和每个像素的面积,计算肤色像素在焦平面所占的面积s;
(8)计算视差d;
(9)利用小孔成像模型和三角测量原理,计算实际的人脸面积s′;
(10)在建库阶段,根据人脸面积s′的大小,将人脸数据库拆分成多个不同的人脸子数据库;
(11)在识别阶段,根据实际计算出的人脸面积,利用相应的人脸子数据库进行人脸识别。
Claims (10)
1.一种基于双目视觉测量技术的快速人脸识别方法,其特征在于,包括以下步骤:先从双目图像中提取人脸的有效特征,划分出人脸的有效区域;再利用双目视觉测量技术,对提取到的人脸区域进行大小测量;根据计算出的人脸区域大小,将人脸数据库拆分成多个人脸子数据库;最后,在识别阶段,将实际计算出的人脸区域与人脸子数据库进行对比识别。
2.根据权利要求1所述的基于双目视觉测量技术的快速人脸识别方法,其特征在于,具体包括以下步骤:
(1)采集双目人脸图像,划分出人脸区域;
(2)对人脸区域进行人眼定位,获得左右眼睛瞳孔的中心坐标;
(3)根据左右眼睛瞳孔的中心坐标,对倾斜人脸图像进行旋转校正,获得旋转校正后左右眼睛的纵坐标y′1;
(4)对校正后的人脸图像进行垂直投影,定位人脸的左右边界;
(5)对校正后的人脸图像进行水平投影,定位嘴巴的位置,获得嘴巴的纵坐标y′2;
(6)根据人脸图像旋转校正后左右眼睛的纵坐标y′1、嘴巴的纵坐标y′2和人脸的左右边界,提取人脸矩形区域;
(7)对提取出的人脸矩形区域进行肤色检测和形态学处理,统计肤色像素的数目,并根据肤色像素的数目和每个像素的面积,计算肤色像素在焦平面所占的面积s;
(8)计算视差d;
(9)利用小孔成像模型和三角测量原理,计算实际的人脸面积s′;
(10)在建库阶段,根据人脸面积s′的大小,将人脸数据库拆分成多个不同的人脸子数据库;
(11)在识别阶段,根据实际计算出的人脸面积,利用相应的人脸子数据库进行人脸识别。
3.根据权利要求2所述的基于双目视觉测量技术的快速人脸识别方法,其特征在于,步骤(2)具体包括:将人脸区域变换到灰度空间,采用基于haar-like特征的Adaboost机器学习算法进行人眼区域检测;再将检测出的人眼区域分别向X轴和Y轴投影,则在左目图像中定位出左右眼睛瞳孔的中心坐标(x11,y11)、(x12,y12),在右目图像中定位出左右眼睛瞳孔的中心坐标(x21,y21)、(x22,y22)。
4.根据权利要求3所述的基于双目视觉测量技术的快速人脸识别方法,其特征在于,采用以下公式将人眼区域向X轴和Y轴投影以定位出人眼坐标:
将人眼区域向X轴投影时:
HPFv(x)=(1-α)·IPFv(y)+αVPFv(x)
其中,IPFv为垂直积分投影函数,VPFv为垂直方差投影函数,HPFv为垂直混合投影函数,y1为投影起点纵坐标,y2为投影终点纵坐标,I(x,y)为(x,y)处的像素值,x为投影横坐标;
将人眼区域向Y轴投影时:
HPFh(y)=(1-α)·IPFh(y)-α·VPFh(y)
其中,α=0.6,IPFh为水平积分投影函数,VPFh为水平方差投影函数,HPFh为水平混合投影函数,x1为投影起点横坐标,x2为投影终点横坐标,I(x,y)为(x,y)处的像素值,y为投影纵坐标。
5.根据权利要求4所述的基于双目视觉测量技术的快速人脸识别方法,其特征在于,步骤(3)中,假设倾斜人脸图像中瞳孔间连线与水平方向的夹角为θ,则旋转校正后的眼睛瞳孔的中心坐标(x′,y′)为:
x′=xcosθ+ysinθ-acosθ-bsinθ+a
y′=-xsinθ+ycosθ+asinθ-bcosθ+b
其中, a、b为倾斜人脸图像的中心坐标,
6.根据权利要求2所述的基于双目视觉测量技术的快速人脸识别方法,其特征在于,步骤(4)中,对校正后的人脸图像进行垂直投影,并通过投影值定位出人脸图像的左右边界x1和x2,公式如下:
HPFv(x)=(1-α)·IPFv(y)+αVPFv(x)
其中,IPFv为垂直积分投影函数,VPFv为垂直方差投影函数,HPFv为垂直混合投影函数,y1为投影起点纵坐标,y2为投影终点纵坐标,I(x,y)为(x,y)处的像素值,x为投影横坐标。
7.根据权利要求2所述的基于双目视觉测量技术的快速人脸识别方法,其特征在于,步骤(5)具体包括:取人脸图像左眼横坐标和右眼横坐标之间的区域,对该区域部分的图像进行肤色检测;对肤色检测后的图像取反,并进行水平投影;投影最高点的位置即为嘴巴纵坐标y′2,公式如下:
HPFh(y)=(1-α)·IPFh(y)-α·VPFh(y)
其中,IPFh为水平积分投影函数,VPFh为水平方差投影函数,HPFh为水平混合投影函数,x1为投影起点横坐标,x2为投影终点横坐标,I(x,y)为(x,y)处的像素值,y为投影纵坐标。
8.根据权利要求4所述的基于双目视觉测量技术的快速人脸识别方法,其特征在于,步骤(7)中,对提取出的人脸矩形区域进行肤色检测的公式如下:
其中,θ取值(105,150)为肤色像素值;R、G、B为RGB图像色彩空间的三个分量;Y、Cb、Cr是YCbCr图像色彩空间的三个分量;肤色像素在焦平面所占的面积s为s=n*p(μm)*p(μm),其中,n为肤色像素的数目,p(μm)*p(μm)为像素大小。
9.根据权利要求3所述的基于双目视觉测量技术的快速人脸识别方法,其特征在于,步骤(8)中,通过以下公式计算视差d:
其中,x11为左目图像中的左眼横坐标,x12为左目图像中的右眼横坐标,x21为右目图像中的左眼横坐标,x22为右目图像中的右眼横坐标。
10.根据权利要求2所述的基于双目视觉测量技术的快速人脸识别方法,其特征在于,步骤(9)中所述的利用小孔成像模型和三角测量原理,计算实际的人脸面积s′具体包括:根据摄像机的线性模型则在双目视觉中有:假设统计出的人脸像素可以再组合成矩形s,则根据计算出实际的人脸面积s′;其中,B为双目摄像机基线距离,cm;d为平均视差,f为焦距,mm;s为人脸像素组合成的矩形的面积。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510330708.8A CN104915656B (zh) | 2015-06-12 | 2015-06-12 | 一种基于双目视觉测量技术的快速人脸识别方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510330708.8A CN104915656B (zh) | 2015-06-12 | 2015-06-12 | 一种基于双目视觉测量技术的快速人脸识别方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN104915656A true CN104915656A (zh) | 2015-09-16 |
CN104915656B CN104915656B (zh) | 2018-12-28 |
Family
ID=54084706
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201510330708.8A Expired - Fee Related CN104915656B (zh) | 2015-06-12 | 2015-06-12 | 一种基于双目视觉测量技术的快速人脸识别方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN104915656B (zh) |
Cited By (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105741375A (zh) * | 2016-01-20 | 2016-07-06 | 华中师范大学 | 一种大视场双目视觉的红外图像考勤方法 |
CN105868749A (zh) * | 2016-06-27 | 2016-08-17 | 张业 | 基于物联网和云计算的智能建筑集成系统 |
CN105893965A (zh) * | 2016-03-31 | 2016-08-24 | 中国科学院自动化研究所 | 一种可用于非特定人的双目视觉图像合成装置与方法 |
CN105913013A (zh) * | 2016-04-08 | 2016-08-31 | 青岛万龙智控科技有限公司 | 双目视觉人脸识别算法 |
CN107403168A (zh) * | 2017-08-07 | 2017-11-28 | 青岛有锁智能科技有限公司 | 一种面部识别系统 |
CN108197556A (zh) * | 2017-12-28 | 2018-06-22 | 广州超越数码科技有限公司 | 一种基于人脸识别的身份查验装置 |
CN109145559A (zh) * | 2018-08-02 | 2019-01-04 | 东北大学 | 一种结合表情识别的智能终端人脸解锁方法 |
CN109522866A (zh) * | 2018-11-29 | 2019-03-26 | 宁波视睿迪光电有限公司 | 裸眼3d图像处理方法、装置以及设备 |
CN109934948A (zh) * | 2019-01-10 | 2019-06-25 | 宿迁学院 | 一种新型智能签到装置及其工作方法 |
CN110503760A (zh) * | 2019-08-27 | 2019-11-26 | 海信集团有限公司 | 门禁控制方法及门禁系统 |
CN110781712A (zh) * | 2019-06-12 | 2020-02-11 | 上海荟宸信息科技有限公司 | 一种基于人脸检测与识别的人头空间定位方法 |
CN112101275A (zh) * | 2020-09-24 | 2020-12-18 | 广州云从洪荒智能科技有限公司 | 多目摄像头的人脸检测方法、装置、设备及介质 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101201894A (zh) * | 2007-11-06 | 2008-06-18 | 重庆大学 | 基于网格计算技术的大规模人脸数据库人脸识别方法 |
CN103605968A (zh) * | 2013-11-27 | 2014-02-26 | 南京大学 | 基于混合投影的瞳孔定位方法 |
CN104063689A (zh) * | 2014-06-20 | 2014-09-24 | 南京航空航天大学 | 一种基于双目立体视觉的人脸图像识别方法 |
-
2015
- 2015-06-12 CN CN201510330708.8A patent/CN104915656B/zh not_active Expired - Fee Related
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101201894A (zh) * | 2007-11-06 | 2008-06-18 | 重庆大学 | 基于网格计算技术的大规模人脸数据库人脸识别方法 |
CN103605968A (zh) * | 2013-11-27 | 2014-02-26 | 南京大学 | 基于混合投影的瞳孔定位方法 |
CN104063689A (zh) * | 2014-06-20 | 2014-09-24 | 南京航空航天大学 | 一种基于双目立体视觉的人脸图像识别方法 |
Non-Patent Citations (2)
Title |
---|
张顺岚等: ""基于双目视觉的三位人脸识别算法"", 《视频应用于工程》 * |
王文成等: ""一种基于区域投影的人眼精确定位方法"", 《光电子激光》 * |
Cited By (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105741375A (zh) * | 2016-01-20 | 2016-07-06 | 华中师范大学 | 一种大视场双目视觉的红外图像考勤方法 |
CN105893965B (zh) * | 2016-03-31 | 2019-03-29 | 中国科学院自动化研究所 | 一种可用于非特定人的双目视觉图像合成装置与方法 |
CN105893965A (zh) * | 2016-03-31 | 2016-08-24 | 中国科学院自动化研究所 | 一种可用于非特定人的双目视觉图像合成装置与方法 |
CN105913013A (zh) * | 2016-04-08 | 2016-08-31 | 青岛万龙智控科技有限公司 | 双目视觉人脸识别算法 |
CN105868749A (zh) * | 2016-06-27 | 2016-08-17 | 张业 | 基于物联网和云计算的智能建筑集成系统 |
CN107403168A (zh) * | 2017-08-07 | 2017-11-28 | 青岛有锁智能科技有限公司 | 一种面部识别系统 |
CN107403168B (zh) * | 2017-08-07 | 2020-08-11 | 青岛有锁智能科技有限公司 | 一种面部识别系统 |
CN108197556A (zh) * | 2017-12-28 | 2018-06-22 | 广州超越数码科技有限公司 | 一种基于人脸识别的身份查验装置 |
CN109145559A (zh) * | 2018-08-02 | 2019-01-04 | 东北大学 | 一种结合表情识别的智能终端人脸解锁方法 |
CN109522866A (zh) * | 2018-11-29 | 2019-03-26 | 宁波视睿迪光电有限公司 | 裸眼3d图像处理方法、装置以及设备 |
CN109934948A (zh) * | 2019-01-10 | 2019-06-25 | 宿迁学院 | 一种新型智能签到装置及其工作方法 |
CN109934948B (zh) * | 2019-01-10 | 2022-03-08 | 宿迁学院 | 一种新型智能签到装置及其工作方法 |
CN110781712A (zh) * | 2019-06-12 | 2020-02-11 | 上海荟宸信息科技有限公司 | 一种基于人脸检测与识别的人头空间定位方法 |
CN110781712B (zh) * | 2019-06-12 | 2023-05-02 | 上海荟宸信息科技有限公司 | 一种基于人脸检测与识别的人头空间定位方法 |
CN110503760A (zh) * | 2019-08-27 | 2019-11-26 | 海信集团有限公司 | 门禁控制方法及门禁系统 |
CN112101275A (zh) * | 2020-09-24 | 2020-12-18 | 广州云从洪荒智能科技有限公司 | 多目摄像头的人脸检测方法、装置、设备及介质 |
CN112101275B (zh) * | 2020-09-24 | 2022-03-04 | 广州云从洪荒智能科技有限公司 | 多目摄像头的人脸检测方法、装置、设备及介质 |
Also Published As
Publication number | Publication date |
---|---|
CN104915656B (zh) | 2018-12-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN104915656B (zh) | 一种基于双目视觉测量技术的快速人脸识别方法 | |
CN105023010B (zh) | 一种人脸活体检测方法及系统 | |
Gu et al. | Feature points extraction from faces | |
TWI383325B (zh) | 臉部表情辨識 | |
Dagnes et al. | Occlusion detection and restoration techniques for 3D face recognition: a literature review | |
WO2019056988A1 (zh) | 人脸识别方法及装置、计算机设备 | |
CN109840565A (zh) | 一种基于眼部轮廓特征点纵横比的眨眼检测方法 | |
Jana et al. | Age estimation from face image using wrinkle features | |
CN105335722A (zh) | 一种基于深度图像信息的检测系统及方法 | |
CN110309782A (zh) | 一种基于红外与可见光双目系统的活体人脸检测方法 | |
EP3680794A1 (en) | Device and method for user authentication on basis of iris recognition | |
Ouanan et al. | Facial landmark localization: Past, present and future | |
CN104573634A (zh) | 一种三维人脸识别方法 | |
CN112257641A (zh) | 一种人脸识别活体检测方法 | |
CN107480586B (zh) | 基于人脸特征点位移的生物识别照片仿冒攻击检测方法 | |
Vezzetti et al. | Application of geometry to rgb images for facial landmark localisation-a preliminary approach | |
Srinivasan et al. | Occlusion detection and image restoration in 3D face image | |
CN116883472B (zh) | 一种基于脸部三维图像配准的人脸护理系统 | |
CN106127160A (zh) | 一种用于虹膜识别的人眼快速定位方法 | |
CN110298275A (zh) | 基于关键点和局部特征的三维人耳识别方法 | |
CN111241870A (zh) | 一种终端设备及其脸部图像的识别方法、识别系统 | |
Ren et al. | An improved method for Daugman's iris localization algorithm | |
JP5688514B2 (ja) | 視線計測システム、方法およびプログラム | |
Quy et al. | 3D human face recognition using sift descriptors of face’s feature regions | |
Lin et al. | A novel framework for automatic 3D face recognition using quality assessment |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20181228 |