CN104915656B - 一种基于双目视觉测量技术的快速人脸识别方法 - Google Patents

一种基于双目视觉测量技术的快速人脸识别方法 Download PDF

Info

Publication number
CN104915656B
CN104915656B CN201510330708.8A CN201510330708A CN104915656B CN 104915656 B CN104915656 B CN 104915656B CN 201510330708 A CN201510330708 A CN 201510330708A CN 104915656 B CN104915656 B CN 104915656B
Authority
CN
China
Prior art keywords
face
area
human face
projection
human
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201510330708.8A
Other languages
English (en)
Other versions
CN104915656A (zh
Inventor
刘志刚
赵嘉均
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Northeastern University China
Original Assignee
Northeastern University China
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Northeastern University China filed Critical Northeastern University China
Priority to CN201510330708.8A priority Critical patent/CN104915656B/zh
Publication of CN104915656A publication Critical patent/CN104915656A/zh
Application granted granted Critical
Publication of CN104915656B publication Critical patent/CN104915656B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161Detection; Localisation; Normalisation
    • G06V40/162Detection; Localisation; Normalisation using pixel segmentation or colour matching
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/168Feature extraction; Face representation
    • G06V40/169Holistic features and representations, i.e. based on the facial image taken as a whole

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Image Analysis (AREA)

Abstract

本发明公开了一种基于双目视觉测量技术的快速人脸识别方法,包括以下步骤:先从双目图像中提取人脸的有效特征,划分出人脸的有效区域;再利用双目视觉测量技术,对提取到的人脸区域进行大小测量;根据计算出的人脸区域大小,将人脸数据库拆分成多个人脸子数据库;最后,在识别阶段,将实际计算出的人脸区域与人脸子数据库进行对比识别。本发明将实际计算出的人脸区域与人脸子数据库进行对比识别,从而减少了识别比对的次数,大大提升了人脸识别的速度;此外本发明中利用人脸的实际大小与人脸子数据库进行对比识别,识别的误差也较小,从而有效提高了人脸识别的准确率;此外本发明的人脸识别方法还具有较好的通用性。

Description

一种基于双目视觉测量技术的快速人脸识别方法
技术领域
本发明涉及一种基于双目视觉测量技术的快速人脸识别方法,属于人脸识别技术领域。
背景技术
近几十年来生物特征识别得到了快速发展。生物特征作为人的一种内在属性,具有很强的自身稳定性和个体差异性,现有的生物识别技术包括:指纹识别、虹膜识别、视网膜识别、步态识别、静脉识别和人脸识别等;其中,人脸识别由于其具有直接、友好、方便的特点,易于被用户接受,因而得到了广泛的应用,尤其是在刑侦、安全验证系统和人机交互等方面,涉及了计算机视觉、模式识别、人工智能、数字图像处理、神经网络、心理学、生理学、数学等诸多研究领域。
现有技术中,专利号为201210250450.7的专利公开了一种基于双目摄像头的智能电视人脸识别方法,主要包括以下步骤:左摄像头和右摄像头同时获取图像,分别检测人脸和人眼,比较计算出的两个图像的差异,如果大于阈值,则判定为照片欺骗,结束识别,否则,完成识别。该方法主要利用双目技术解决了照片欺骗的问题,但是其识别速度慢,识别准确率也较低;专利号为201210250450.7的专利公开了“一种基于双目被动立体视觉的快速三维人脸识别方法”,其运用搭建好的双目摄像机,进行人脸检测和采集,定位眼睛和鼻尖,构建基准三角形,进而进行三维人脸重建,在完成三维人脸表情归一化后,运用三维人脸识别算法进行识别,但是由于三维人脸重建和三维人脸识别的计算量较大,因而该方法的识别速度也较慢;申请号为201410281328.5的专利申请公开了“一种基于双目立体视觉的人脸图像识别方法”,其利用双目视觉在人脸图像中标出人脸区域,是一种人脸检测方法,但是其并未涉及人脸识别;申请号为201310024137.6的专利申请公开了一种“基于双目立体视觉的四目摄像机正面人脸重建方法”,其利用两个双目摄像机从正面拍摄人脸图像,将两个摄像机拍摄的人脸图像进行融合,增强了人脸识别对姿态的鲁棒性,该方法也仅是一种人脸重建的方法,并未涉及人脸识别;另外,张顺岚《莫建文.基于双目视觉的三维人脸识别算法》[J].电视技术,2014,38(9).基于双目视觉对三维人脸识别算法进行了改进,利用主动形状模型(ASM)定位人脸图像中的特征点,结合摄像机模型参数得到其三维坐标,构建特征点距离矩阵,最后用BP神经网络进行识别;该方法利用人脸特征点的三维坐标训练神经网络进行识别,但是其识别速度慢,识别准确率也较低;周佳立、张树有、杨国平.《基于双目被动立体视觉的三维人脸重构与识别》[J].自动化学报,2009,35(2).利用上下两平行光轴摄像机建立的双目视觉系统采集人脸图像,通过人脸检测和初步视差估计,重建人脸三维点云信息,再利用神经网络进行多层次人脸曲面重建,再进行人脸归一化和识别。该方法中由于三维人脸重建和三维人脸识别的计算量较大,因而识别速度也较慢。
发明内容
本发明的目的在于,提供一种基于双目视觉测量技术的快速人脸识别方法,它可以有效解决现有技术中存在的问题,尤其是人脸识别速度慢、准确率低的问题。
为解决上述技术问题,本发明采用如下的技术方案:一种基于双目视觉测量技术的快速人脸识别方法,包括以下步骤:先从双目图像中提取人脸的有效特征,划分出人脸的有效区域;再利用双目视觉测量技术,对提取到的人脸区域进行大小测量;根据计算出的人脸区域大小,将人脸数据库拆分成多个人脸子数据库;最后,在识别阶段,将实际计算出的人脸区域与人脸子数据库进行对比识别。
上述的基于双目视觉测量技术的快速人脸识别方法,具体包括以下步骤:
(1)采集双目人脸图像,划分出人脸区域;
(2)对人脸区域进行人眼定位,获得左右眼睛瞳孔的中心坐标;
(3)根据左右眼睛瞳孔的中心坐标,对倾斜人脸图像进行旋转校正,获得旋转校正后左右眼睛的纵坐标y′1
(4)对校正后的人脸图像进行垂直投影,定位人脸的左右边界;
(5)对校正后的人脸图像进行水平投影,定位嘴巴的位置,获得嘴巴的纵坐标y′2
(6)根据人脸图像旋转校正后左右眼睛的纵坐标y′1、嘴巴的纵坐标y′2和人脸的左右边界,提取人脸矩形区域;
(7)对提取出的人脸矩形区域进行肤色检测和形态学处理,统计肤色像素的数目,并根据肤色像素的数目和每个像素的面积,计算肤色像素在焦平面所占的面积s;
(8)计算视差d;
(9)利用小孔成像模型和三角测量原理,计算实际的人脸面积s′;
(10)在建库阶段,根据人脸面积s′的大小,将人脸数据库拆分成多个不同的人脸子数据库;
(11)在识别阶段,根据实际计算出的人脸面积,利用相应的人脸子数据库进行人脸识别。
采用上述方法步骤,从而可以准确、快速的识别出人脸。
优选的,步骤(1)具体包括:采用双目摄像机采集人脸图像,并用基于haar-like特征的Adaboost机器学习算法进行人脸检测,从而可以准确而快速的划分出人脸区域。
优选的,步骤(2)具体包括:将人脸区域变换到灰度空间,采用基于haar-like特征的Adaboost机器学习算法进行人眼区域检测;再将检测出的人眼区域分别向X轴和Y轴投影,则在左目图像中定位出左右眼睛瞳孔的中心坐标(x11,y11)、(x12,y12),在右目图像中定位出左右眼睛瞳孔的中心坐标(x21,y21)、(x22,y22);该方法中先利用Adaboost机器学习算法进行粗定位,再利用投影实现更精确的定位,因为瞳孔的像素值最低,所以分别取投影最小值处的坐标即为眼睛的坐标。
更优选的,本发明中采用以下公式将人眼区域向X轴和Y轴投影以定位出人眼坐标:
将人眼区域向X轴投影时:
HPFv(x)=(1-α)·IPFv(y)+αVPFv(x)
其中,IPFv为垂直积分投影函数,VPFv为垂直方差投影函数,HPFv为垂直混合投影函数,y1为投影起点纵坐标,y2为投影终点纵坐标,I(x,y)为(x,y)处的像素值,x为投影横坐标;
将人眼区域向Y轴投影时:
HPFh(y)=(1-α)·IPFh(y)-α·VPFh(y)
其中,α=0.6,IPFh为水平积分投影函数,VPFh为水平方差投影函数,HPFh为水平混合投影函数,x1为投影起点横坐标,x2为投影终点横坐标,I(x,y)为(x,y)处的像素值,y为投影纵坐标,定位出眼睛区域后再用以上算法即可得到准确的眼睛位置。
前述的基于双目视觉测量技术的快速人脸识别方法中,步骤(3)中,假设倾斜人脸图像中瞳孔间连线与水平方向的夹角为θ,则旋转校正后的眼睛瞳孔的中心坐标(x′,y′)为:
x′=xcosθ+ysinθ-acosθ-bsinθ+a
y′=-xsinθ+ycosθ+asinθ-bcosθ+b
其中,a、b为倾斜人脸图像的中心坐标,将两只眼睛校正到同一水平线上,从而保证两只眼睛具有相同的纵 坐标。
上述方法中,步骤(4)中,对校正后的人脸图像进行垂直投影,并通过投影值定位出人脸图像的左右边界x1和x2,公式如下:
HPFv(x)=(1-α)·IPFv(y)+αVPFv(x)
其中,IPFv为垂直积分投影函数,VPFv为垂直方差投影函数,HPFv为垂直混合投影函数,y1为投影起点纵坐标,y2为投影终点纵坐标,I(x,y)为(x,y)处的像素值,x为投影横坐标,从而可以简单而快速的定位出人脸图像的左右边界。
优选的,步骤(5)具体包括:取人脸图像左眼横坐标和右眼横坐标之间的区域,对该区域部分的图像进行肤色检测;对肤色检测后的图像取反,并进行水平投影;投影最高点的位置即为嘴巴纵坐标y′2,公式如下:
HPFh(y)=(1-α)·IPFh(y)-α·VPFh(y)
其中,IPFh为水平积分投影函数,VPFh为水平方差投影函数,HPFh为水平混合投影函数,x1为投影起点横坐标,x2为投影终点横坐标,I(x,y)为(x,y)处的像素值,y为投影纵坐标,从而可以准确而快速的获得嘴巴的纵坐标。
进一步优选的,步骤(7)中,对提取出的人脸矩形区域进行肤色检测的公式如下:
其中,θ取值(105,150)为肤色像素值;R、G、B为RGB图像色彩空间的三个分量;Y、Cb、Cr是YCbCr图像色彩空间的三个分量;肤色像素在焦平面所占的面积s为s=n*p(μm)*p(μm),其中,n为肤色像素的数目,p(μm)*p(μm)为像素大小。肤色分割将得到的人脸矩形区域中人脸部分和非人脸部分区分开,得到人脸部分的像素多少,从而可以将人脸矩形区域中的人脸部分和非人脸部分有效的区分开来,便于进一步进行识别处理。
前述的基于双目视觉测量技术的快速人脸识别方法中,步骤(8)中,通过以下公式计算视差d:
其中,x11为左目图像中的左眼横坐标,x12为左目图像中的右眼横坐标,x21为右目图像中的左眼横坐标,x22为右目图像中的右眼横坐标,从而无需立体匹配,用简单的方法就能得到视差,减少了大量的计算步骤。
本发明的步骤(9)中所述的利用小孔成像模型和三角测量原理,计算实际的人脸面积s′具体包括:根据摄像机的线性模型则在双目视觉中有:假设统计出的人脸像素可以再组合成矩形s,则根据计算出实际的人脸面积s′;其中,B为双目摄像机基线距离,cm;d为平均视差,f为焦距,mm;s为人脸像素组合成的矩形的面积。
与现有技术相比,本发明通过先从双目图像中划分出人脸的有效区域,提取人脸的有效特征;再利用双目视觉测量技术,对提取到的人脸区域进行大小测量;根据计算出的人脸区域大小,将人脸数据库拆分成多个人脸子数据库;最后,在识别阶段,将实际计算出的人脸区域与人脸子数据库进行对比识别,从而减少了识别比对的次数,大大提升了人脸识别的速度;此外本发明中利用人脸的实际大小与人脸子数据库进行对比识别,必然也会减小识别的误差,从而有效提高了人脸识别的准确率;此外本发明的人脸识别方法还具有较好的通用性。
实验例:
将本发明的人脸识别方法进行应用试验,采用加拿大PointGrey公司生产的Bumblebee2双目摄像机,基线距离12cm,像素尺寸4.65μm*4.65μm,应用摄像机对91个人采集了双目人脸图像。通过对比双目人脸数据库中志愿者人脸的实际测量值和计算值,得出此双目摄像机的测量误差库e=0.98cm2,最小子库分类距离范围大于2倍的误差大小。因为当测量的值在分类边界的误差范围内时,要进入相邻的两个库进行查找,比如,当分库距离(即以多大的粒度来拆分人脸数据库)为3cm2时,60-63cm2和63-66cm2库相邻两个库,当测量值(人脸区域)在(63-e,63+e)范围内时,要进入这两个库进行人脸识别。下表为不同距离的分类结果对识别率和识别速度的影响:
表1不同的分库距离对识别率和识别速度的影响
由表1可知:采用本发明的人脸识别技术,其识别率和识别速度相对于现有技术(不将人脸数据库拆分成多个人脸子数据库的人脸识别方法)均有提高,尤其是当分库距离为4cm2时,识别率提高最多,同时识别速度的提高值也较客观;当分库距离为2cm2时,识别速度提高最多,同时识别率的提高值也较客观。
本发明的难度在于人脸矩形区域的提取,通过采用本发明的提取方法后,从而可以提取得到准确而有效的人脸区域,既而提高了人脸测量的准确性和人脸数据库分类的准确性,最终提高了人脸识别的准确性。
附图说明
图1是本发明的一种实施例的工作流程图;
图2是将人脸数据库拆分成多个人脸子数据库的示意图。
下面结合附图和具体实施方式对本发明作进一步的说明。
具体实施方式
本发明的实施例1:一种基于双目视觉测量技术的快速人脸识别方法,如图1、图2所示,具体包括以下步骤:
(1)采用双目摄像机采集人脸图像,并用基于haar-like特征的Adaboost机器学习算法进行人脸检测,划分出人脸区域;
(2)对人脸区域进行人眼定位,获得左右眼睛瞳孔的中心坐标;具体包括:将人脸区域变换到灰度空间,采用基于haar-like特征的Adaboost机器学习算法进行人眼区域检测;再将检测出的人眼区域分别向X轴和Y轴投影,则在左目图像中定位出左右眼睛瞳孔的中心坐标(x11,y11)、(x12,y12),在右目图像中定位出左右眼睛瞳孔的中心坐标(x21,y21)、(x22,y22);
其中,采用以下公式将人眼区域向X轴和Y轴投影以定位出人眼坐标:
将人眼区域向X轴投影时:
HPFv(x)=(1-α)·IPFv(y)+αVPFv(x)
其中,IPFv为垂直积分投影函数,VPFv为垂直方差投影函数,HPFv为垂直混合投影函数,y1为投影起点纵坐标,y2为投影终点纵坐标,I(x,y)为(x,y)处的像素值,x为投影横坐标;
将人眼区域向Y轴投影时:
HPFh(y)=(1-α)·IPFh(y)-α·VPFh(y)
其中,α=0.6,IPFh为水平积分投影函数,VPFh为水平方差投影函数,HPFh为水平混合投影函数,x1为投影起点横坐标,x2为投影终点横坐标,I(x,y)为(x,y)处的像素值,y为投影纵坐标;
(3)根据左右眼睛瞳孔的中心坐标,对倾斜人脸图像进行旋转校正,获得旋转校正后左右眼睛的纵坐标y′1;其中,假设倾斜人脸图像中瞳孔间连线与水平方向的夹角为θ,则旋转校正后的眼睛瞳孔的中心坐标(x′,y′)为:
x′=xcosθ+ysinθ-acosθ-bsinθ+a
y′=-xsinθ+ycosθ+asinθ-bcosθ+b
其中,a、b为倾斜人脸图像的中心坐标,
(4)对校正后的人脸图像进行垂直投影,并通过投影值定位出人脸图像的左右边界x1和x2,公式如下:
HPFv(x)=(1-α)·IPFv(y)+αVPFv(x)
其中,IPFv为垂直积分投影函数,VPFv为垂直方差投影函数,HPFv为垂直混合投影函数,y1为投影起点纵坐标,y2为投影终点纵坐标,I(x,y)为(x,y)处的像素值,x为投影横坐标。
(5)取人脸图像左眼横坐标和右眼横坐标之间的区域,对该区域部分的图像进行肤色检测;对肤色检测后的图像取反,并进行水平投影;投影最高点的位置即为嘴巴纵坐标y′2,公式如下:
HPFh(y)=(1-α)·IPFh(y)-α·VPFh(y)
其中,IPFh为水平积分投影函数,VPFh为水平方差投影函数,HPFh为水平混合投影函数,x1为投影起点横坐标,x2为投影终点横坐标,I(x,y)为(x,y)处的像素值,y为投影纵坐标。
(6)根据人脸图像旋转校正后左右眼睛的纵坐标y′1、嘴巴的纵坐标y′2和人脸的左右边界,提取人脸矩形区域;
(7)对提取出的人脸矩形区域进行肤色检测和形态学处理,统计肤色像素的数目,并根据肤色像素的数目和每个像素的面积,计算肤色像素在焦平面所占的面积s;其中,通过以下公式进行肤色检测:
其中,θ取值(105,150)为肤色像素值;R、G、B为RGB图像色彩空间的三个分量;Y、Cb、Cr是YCbCr图像色彩空间的三个分量;肤色像素在焦平面所占的面积s为s=n*p(μm)*p(μm),其中,n为肤色像素的数目,p(μm)*p(μm)为像素大小。
(8)通过以下公式计算视差d:
其中,x11为左目图像中的左眼横坐标,x12为左目图像中的右眼横坐标,x21为右目图像中的左眼横坐标,x22为右目图像中的右眼横坐标。
(9)利用小孔成像模型和三角测量原理,计算实际的人脸面积s′;具体包括:根据摄像机的线性模型则在双目视觉中有:假设统计出的人脸像素可以再组合成矩形s,则根据计算出实际的人脸面积s′;其中,B为双目摄像机基线距离,cm;d为平均视差,f为焦距,mm;s为人脸像素组合成的矩形的面积。
(10)在建库阶段,根据人脸面积s′的大小,将人脸数据库拆分成多个不同的人脸子数据库;
(11)在识别阶段,根据实际计算出的人脸面积,利用相应的人脸子数据库进行人脸识别。
实施例2:一种基于双目视觉测量技术的快速人脸识别方法,如图1、图2所示,包括以下步骤:
(1)采集双目人脸图像,划分出人脸区域;
(2)对人脸区域进行人眼定位,获得左右眼睛瞳孔的中心坐标;
(3)根据左右眼睛瞳孔的中心坐标,对倾斜人脸图像进行旋转校正,获得旋转校正后左右眼睛的纵坐标y′1
(4)对校正后的人脸图像进行垂直投影,定位人脸的左右边界;
(5)对校正后的人脸图像进行水平投影,定位嘴巴的位置,获得嘴巴的纵坐标y′2
(6)根据人脸图像旋转校正后左右眼睛的纵坐标y′1、嘴巴的纵坐标y′2和人脸的左右边界,提取人脸矩形区域(将纵坐标y′1到y′2处提取出来);
(7)对提取出的人脸矩形区域进行肤色检测和形态学处理,统计肤色像素的数目,并根据肤色像素的数目和每个像素的面积,计算肤色像素在焦平面所占的面积s;
(8)计算视差d;
(9)利用小孔成像模型和三角测量原理,计算实际的人脸面积s′;
(10)在建库阶段,根据人脸面积s′的大小,将人脸数据库拆分成多个不同的人脸子数据库;
(11)在识别阶段,根据实际计算出的人脸面积,利用相应的人脸子数据库进行人脸识别。

Claims (9)

1.一种基于双目视觉测量技术的快速人脸识别方法,其特征在于,包括以下步骤:先从双目图像中提取人脸的有效特征,划分出人脸的有效区域;再利用双目视觉测量技术,对提取到的人脸区域进行大小测量;根据计算出的人脸区域大小,将人脸数据库拆分成多个人脸子数据库;最后,在识别阶段,将实际计算出的人脸区域与人脸子数据库进行对比识别;具体包括以下步骤:
(1)采集双目人脸图像,划分出人脸区域;
(2)对人脸区域进行人眼定位,获得左右眼睛瞳孔的中心坐标;
(3)根据左右眼睛瞳孔的中心坐标,对倾斜人脸图像进行旋转校正,获得旋转校正后左右眼睛的纵坐标y′1
(4)对校正后的人脸图像进行垂直投影,定位人脸的左右边界;
(5)对校正后的人脸图像进行水平投影,定位嘴巴的位置,获得嘴巴的纵坐标y′2
(6)根据人脸图像旋转校正后左右眼睛的纵坐标y′1、嘴巴的纵坐标y′2和人脸的左右边界,提取人脸矩形区域;
(7)对提取出的人脸矩形区域进行肤色检测和形态学处理,统计肤色像素的数目,并根据肤色像素的数目和每个像素的面积,计算肤色像素在焦平面所占的面积s;
(8)计算视差d;
(9)利用小孔成像模型和三角测量原理,计算实际的人脸面积s′;
(10)在建库阶段,根据人脸面积s′的大小,将人脸数据库拆分成多个不同的人脸子数据库;
(11)在识别阶段,根据实际计算出的人脸面积,利用相应的人脸子数据库进行人脸识别。
2.根据权利要求1所述的基于双目视觉测量技术的快速人脸识别方法,其特征在于,步骤(2)具体包括:将人脸区域变换到灰度空间,采用基于haar-like特征的Adaboost机器学习算法进行人眼区域检测;再将检测出的人眼区域分别向X轴和Y轴投影,则在左目图像中定位出左右眼睛瞳孔的中心坐标(x11,y11)、(x12,y12),在右目图像中定位出左右眼睛瞳孔的中心坐标(x21,y21)、(x22,y22)。
3.根据权利要求2所述的基于双目视觉测量技术的快速人脸识别方法,其特征在于,采用以下公式将人眼区域向X轴和Y轴投影以定位出人眼坐标:
将人眼区域向X轴投影时:
HPFv(x)=(1-α)·IPFv(y)+αVPFv(x)
其中,IPFv为垂直积分投影函数,VPFv为垂直方差投影函数,HPFv为垂直混合投影函数,y1为投影起点纵坐标,y2为投影终点纵坐标,I(x,y)为(x,y)处的像素值,x为投影横坐标;
将人眼区域向Y轴投影时:
HPFh(y)=(1-α)·IPFh(y)-α·VPFh(y)
其中,α=0.6,IPFh为水平积分投影函数,VPFh为水平方差投影函数,HPFh为水平混合投影函数,x1为投影起点横坐标,x2为投影终点横坐标,I(x,y)为(x,y)处的像素值,y为投影纵坐标。
4.根据权利要求3所述的基于双目视觉测量技术的快速人脸识别方法,其特征在于,步骤(3)中,假设倾斜人脸图像中瞳孔间连线与水平方向的夹角为θ,则旋转校正后的眼睛瞳孔的中心坐标(x′,y′)为:
x′=xcosθ+ysinθ-acosθ-bsinθ+a
y′=-xsinθ+ycosθ+asinθ-bcosθ+b
其中,a、b为倾斜人脸图像的中心坐标,
5.根据权利要求1所述的基于双目视觉测量技术的快速人脸识别方法,其特征在于,步骤(4)中,对校正后的人脸图像进行垂直投影,并通过投影值定位出人脸图像的左右边界x1和x2,公式如下:
HPFv(x)=(1-α)·IPFv(y)+αVPFv(x)
其中,IPFv为垂直积分投影函数,VPFv为垂直方差投影函数,HPFv为垂直混合投影函数,y1为投影起点纵坐标,y2为投影终点纵坐标,I(x,y)为(x,y)处的像素值,x为投影横坐标。
6.根据权利要求1所述的基于双目视觉测量技术的快速人脸识别方法,其特征在于,步骤(5)具体包括:取人脸图像左眼横坐标和右眼横坐标之间的区域,对该区域部分的图像进行肤色检测;对肤色检测后的图像取反,并进行水平投影;投影最高点的位置即为嘴巴纵坐标y′2,公式如下:
HPFh(y)=(1-α)·IPFh(y)-α·VPFh(y)
其中,IPFh为水平积分投影函数,VPFh为水平方差投影函数,HPFh为水平混合投影函数,x1为投影起点横坐标,x2为投影终点横坐标,I(x,y)为(x,y)处的像素值,y为投影纵坐标。
7.根据权利要求3所述的基于双目视觉测量技术的快速人脸识别方法,其特征在于,步骤(7)中,对提取出的人脸矩形区域进行肤色检测的公式如下:
其中,θ取值(105,150)为肤色像素值;R、G、B为RGB图像色彩空间的三个分量;Y、Cb、Cr是YCbCr图像色彩空间的三个分量;肤色像素在焦平面所占的面积s为s=n*p(μm)*p(μm),其中,n为肤色像素的数目,p(μm)*p(μm)为像素大小。
8.根据权利要求2所述的基于双目视觉测量技术的快速人脸识别方法,其特征在于,步骤(8)中,通过以下公式计算视差d:
其中,x11为左目图像中的左眼睛瞳孔的横坐标,x12为左目图像中的右眼睛瞳孔的横坐标,x21为右目图像中的左眼睛瞳孔的横坐标,x22为右目图像中的右眼睛瞳孔的横坐标。
9.根据权利要求1所述的基于双目视觉测量技术的快速人脸识别方法,其特征在于,步骤(9)中所述的利用小孔成像模型和三角测量原理,计算实际的人脸面积s′具体包括:根据摄像机的线性模型则在双目视觉中有:假设统计出的人脸像素可以再组合成矩形,则根据计算出实际的人脸面积s′;其中,B为双目摄像机基线距离,cm;d为平均视差,f为焦距,mm;s为人脸像素组合成的矩形的面积;l1和l2分别为人脸像素组合成的矩形的长和宽或宽和长;l'1和l'2分别为对应的实际的人脸的长和宽或宽和长;z为公式推导过程中假设的中间参数,单位是mm。
CN201510330708.8A 2015-06-12 2015-06-12 一种基于双目视觉测量技术的快速人脸识别方法 Expired - Fee Related CN104915656B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510330708.8A CN104915656B (zh) 2015-06-12 2015-06-12 一种基于双目视觉测量技术的快速人脸识别方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510330708.8A CN104915656B (zh) 2015-06-12 2015-06-12 一种基于双目视觉测量技术的快速人脸识别方法

Publications (2)

Publication Number Publication Date
CN104915656A CN104915656A (zh) 2015-09-16
CN104915656B true CN104915656B (zh) 2018-12-28

Family

ID=54084706

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510330708.8A Expired - Fee Related CN104915656B (zh) 2015-06-12 2015-06-12 一种基于双目视觉测量技术的快速人脸识别方法

Country Status (1)

Country Link
CN (1) CN104915656B (zh)

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105741375B (zh) * 2016-01-20 2018-09-18 华中师范大学 一种大视场双目视觉的红外图像考勤方法
CN105893965B (zh) * 2016-03-31 2019-03-29 中国科学院自动化研究所 一种可用于非特定人的双目视觉图像合成装置与方法
CN105913013A (zh) * 2016-04-08 2016-08-31 青岛万龙智控科技有限公司 双目视觉人脸识别算法
CN105868749A (zh) * 2016-06-27 2016-08-17 张业 基于物联网和云计算的智能建筑集成系统
CN107403168B (zh) * 2017-08-07 2020-08-11 青岛有锁智能科技有限公司 一种面部识别系统
CN109145559A (zh) * 2018-08-02 2019-01-04 东北大学 一种结合表情识别的智能终端人脸解锁方法
CN109522866A (zh) * 2018-11-29 2019-03-26 宁波视睿迪光电有限公司 裸眼3d图像处理方法、装置以及设备
CN109934948B (zh) * 2019-01-10 2022-03-08 宿迁学院 一种新型智能签到装置及其工作方法
CN110781712B (zh) * 2019-06-12 2023-05-02 上海荟宸信息科技有限公司 一种基于人脸检测与识别的人头空间定位方法
CN110503760B (zh) * 2019-08-27 2021-06-01 海信集团有限公司 门禁控制方法及门禁系统
CN112101275B (zh) * 2020-09-24 2022-03-04 广州云从洪荒智能科技有限公司 多目摄像头的人脸检测方法、装置、设备及介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101201894A (zh) * 2007-11-06 2008-06-18 重庆大学 基于网格计算技术的大规模人脸数据库人脸识别方法
CN103605968A (zh) * 2013-11-27 2014-02-26 南京大学 基于混合投影的瞳孔定位方法
CN104063689A (zh) * 2014-06-20 2014-09-24 南京航空航天大学 一种基于双目立体视觉的人脸图像识别方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101201894A (zh) * 2007-11-06 2008-06-18 重庆大学 基于网格计算技术的大规模人脸数据库人脸识别方法
CN103605968A (zh) * 2013-11-27 2014-02-26 南京大学 基于混合投影的瞳孔定位方法
CN104063689A (zh) * 2014-06-20 2014-09-24 南京航空航天大学 一种基于双目立体视觉的人脸图像识别方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
"一种基于区域投影的人眼精确定位方法";王文成等;《光电子激光》;20110430;第22卷(第4期);全文 *
"基于双目视觉的三位人脸识别算法";张顺岚等;《视频应用于工程》;20140930;第38卷(第9期);全文 *

Also Published As

Publication number Publication date
CN104915656A (zh) 2015-09-16

Similar Documents

Publication Publication Date Title
CN104915656B (zh) 一种基于双目视觉测量技术的快速人脸识别方法
CN105335722B (zh) 一种基于深度图像信息的检测系统及方法
Papazov et al. Real-time 3D head pose and facial landmark estimation from depth images using triangular surface patch features
Gu et al. Feature points extraction from faces
CN105094337B (zh) 一种基于虹膜和瞳孔的三维视线估计方法
CN107403168B (zh) 一种面部识别系统
TWI383325B (zh) 臉部表情辨識
Medioni et al. Identifying noncooperative subjects at a distance using face images and inferred three-dimensional face models
CN105740779B (zh) 人脸活体检测的方法和装置
CN105654048A (zh) 一种多视角人脸比对方法
CN105138954A (zh) 一种图像自动筛选查询识别系统
CN104050448B (zh) 一种人眼定位、人眼区域定位方法及装置
CN104573634A (zh) 一种三维人脸识别方法
Ouanan et al. Facial landmark localization: Past, present and future
Asteriadis et al. A natural head pose and eye gaze dataset
CN108268814A (zh) 一种基于全局和局部特征模糊融合的人脸识别方法及装置
CN112101208A (zh) 高龄老人特征串联融合手势识别方法及装置
CN112257641A (zh) 一种人脸识别活体检测方法
Lanz et al. Automated classification of therapeutic face exercises using the Kinect
Wu et al. The value of multiple viewpoints in gesture-based user authentication
Ming et al. A unified 3D face authentication framework based on robust local mesh SIFT feature
Lin et al. Representative body points on top-view depth sequences for daily activity recognition
CN106228560B (zh) 一种复杂场景下的人数统计方法
Hu et al. A large-scale database for less cooperative iris recognition
Segundo et al. Real-time scale-invariant face detection on range images

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20181228

CF01 Termination of patent right due to non-payment of annual fee