CN106469301B - 自适应可调节的人脸识别方法和装置 - Google Patents
自适应可调节的人脸识别方法和装置 Download PDFInfo
- Publication number
- CN106469301B CN106469301B CN201610798745.6A CN201610798745A CN106469301B CN 106469301 B CN106469301 B CN 106469301B CN 201610798745 A CN201610798745 A CN 201610798745A CN 106469301 B CN106469301 B CN 106469301B
- Authority
- CN
- China
- Prior art keywords
- facial image
- brightness value
- illumination
- face
- intensity
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 23
- 230000003044 adaptive effect Effects 0.000 title claims abstract description 17
- 230000001815 facial effect Effects 0.000 claims abstract description 158
- 238000005286 illumination Methods 0.000 claims abstract description 77
- 239000013598 vector Substances 0.000 claims description 52
- 238000012360 testing method Methods 0.000 claims description 25
- 238000001514 detection method Methods 0.000 claims description 19
- 238000003384 imaging method Methods 0.000 claims description 14
- 238000000605 extraction Methods 0.000 claims description 7
- 239000000284 extract Substances 0.000 claims description 6
- 238000010606 normalization Methods 0.000 claims description 5
- 238000006243 chemical reaction Methods 0.000 claims description 3
- 230000001960 triggered effect Effects 0.000 claims description 2
- 230000009977 dual effect Effects 0.000 claims 1
- 238000013507 mapping Methods 0.000 claims 1
- 238000012549 training Methods 0.000 description 14
- 230000008569 process Effects 0.000 description 8
- 238000012935 Averaging Methods 0.000 description 5
- 230000008901 benefit Effects 0.000 description 4
- 230000006872 improvement Effects 0.000 description 4
- 230000003247 decreasing effect Effects 0.000 description 3
- 230000036544 posture Effects 0.000 description 3
- 230000008859 change Effects 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 230000009123 feedback regulation Effects 0.000 description 2
- 230000009466 transformation Effects 0.000 description 2
- PXFBZOLANLWPMH-UHFFFAOYSA-N 16-Epiaffinine Natural products C1C(C2=CC=CC=C2N2)=C2C(=O)CC2C(=CC)CN(C)C1C2CO PXFBZOLANLWPMH-UHFFFAOYSA-N 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000001186 cumulative effect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/161—Detection; Localisation; Normalisation
- G06V40/166—Detection; Localisation; Normalisation using acquisition arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/10—Image acquisition
- G06V10/12—Details of acquisition arrangements; Constructional details thereof
- G06V10/14—Optical characteristics of the device performing the acquisition or on the illumination arrangements
- G06V10/141—Control of illumination
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Human Computer Interaction (AREA)
- Image Analysis (AREA)
- Image Processing (AREA)
Abstract
本发明公开了一种自适应可调节的人脸识别方法和装置，属于人脸识别领域，所述方法包括：采集人脸图像；检测所述人脸图像的亮度值；判断所述亮度值是否在预先设定的亮度值范围内，若是，使用所述人脸图像进行人脸识别，若否，调节补光灯的光照强度，并转至所述采集人脸图像。相比单纯的通过外界光照强度来判断人脸图像是否符合要求，本发明更加简单和准确，能够得到高质量的人脸图像。
Description
技术领域
本发明涉及人脸识别领域，特别是指一种自适应可调节的人脸识别方法和装置。
背景技术
人脸识别包括图像采集、特征提取和特征匹配。在人脸识别领域一直存在着一个问题，困扰着该领域的发展。即在进行人脸识别时，当时场景的光照强度会影响采集到的人脸图像的亮度，人脸图像的亮度会影响识别效果，亮度偏暗和偏亮都会使得人脸图像的信息缺失以及存在较大干扰，对后续的特征提取和特征匹配产生影响，使得人脸识别的准确率降低。
现有技术中为了避免采集到的人脸图像偏暗和偏亮，一般采用亮度传感器得到外界光照强度，若光线强度在一定的范围内，则认为人脸图像的亮度符合要求，否则认为人脸图像的亮度偏亮或偏暗，需要调节补光灯来降低或提高外界光照强度，或者使用图像传感器里面的“自动曝光”等功能，最终达到调节人脸图像的亮度的目的。
但是现有技术仅仅是通过外界的光照强度来间接判断人脸图像的亮度，不能准确的判断人脸图像的亮度是否符合人脸识别的要求。
发明内容
本发明提供一种自适应可调节的人脸识别方法和装置，相比单纯的通过外界光照强度来判断人脸图像是否符合要求，本发明更加简单和准确，能够得到高质量的人脸图像。
为解决上述技术问题，本发明提供技术方案如下：
一种自适应可调节的人脸识别方法，包括：
采集人脸图像；
检测所述人脸图像的亮度值；
判断所述亮度值是否在预先设定的亮度值范围内，若是，使用所述人脸图像进行人脸识别，若否，调节补光灯的光照强度，并转至所述采集人脸图像。
一种自适应可调节的人脸识别装置，包括：
采集模块，用于采集人脸图像；
检测模块，用于检测所述人脸图像的亮度值；
判断模块，用于判断所述亮度值是否在预先设定的亮度值范围内，若是，则触发人脸识别模块，若否，则触发调节模块，并在触发调节模块后转至采集模块；
人脸识别模块，用于根据所述人脸图像进行人脸识别；
调节模块，用于调节补光灯的光照强度。
本发明具有以下有益效果：
本发明首先采集得到人脸图像，然后检测采集得到的人脸图像的亮度值，并判断该亮度值是否在预先设定的亮度值范围内，若是，表明采集到的人脸图像的亮度值是符合要求的，可以进行后续的人脸识别，若大于预先设定的亮度值范围，表明人脸图像偏亮，若小于预先设定的亮度值范围，表明人脸图像偏暗，根据偏亮或者偏暗的结果减小或增大补光灯的光照强度，再次采集人脸图像并进行上述各个步骤，直至得到亮度值符合要求的人脸图像，即，满足预先设定的亮度值范围，接着进行后续的人脸识别过程。
本发明通过检测人脸图像的亮度值来判断人脸图像是否符合要求，相比单纯的通过外界光照强度来判断人脸图像是否符合要求更加简单和准确，能够得到高质量的人脸图像。
附图说明
图1为本发明的自适应可调节的人脸识别方法一个实施例的流程示意图；
图2为本发明的自适应可调节的人脸识别装置一个实施例的结构示意图。
具体实施方式
为使本发明要解决的技术问题、技术方案和优点更加清楚，下面将结合附图及具体实施例进行详细描述。
一方面，本发明提供一种自适应可调节的人脸识别方法，如图1所示，其特征在于，包括：
S100：采集人脸图像。
S200：检测人脸图像的亮度值。
本步骤可以使用本领域技术人员可以知道的各种检测方法检测人脸图像的亮度值。这些检测方法输入的是一张人脸图像(灰度或RGB)，通过这个检测方法之后，输出的是一个亮度值，我们可以用这个亮度值来衡量这张人脸图像的亮度，进而反映出当时拍照时的光照强度(这两者是一个正比关系)。
这里举一个简单的实施例：对人脸图像的所有像素灰度值进行累加求平均，使用图像平均灰度值作为人脸图像的亮度值。
S300：判断亮度值是否在预先设定的亮度值范围内，若是，执行S400，若否，执行S500，并转至S100。
预先设定的亮度值范围可以根据具体的人脸识别确定，这里举一个简单的实施例：如果使用前述的图像平均灰度值作为人脸图像的亮度值，预先设定的亮度值范围为112-144，若亮度值小于112认为是偏暗，大于144认为是偏亮，后续调整只需根据是偏暗或偏亮进行调整即可。
S400：使用人脸图像进行人脸识别，并结束。
S500：调节补光灯的光照强度。
可以通过多种方式调节补光灯的光照强度：例如可以根据一定的调节步进，每次将补光灯的光照强度增大或减小一个预设值，逐步调节，直至人脸图像的亮度符合人脸识别的要求；或者，根据人脸图像当前的亮度值和补光灯的当前光照强度进行计算，得到目标调节强度，一次将补光灯的光照强度增大或减小到目标调节强度，使得人脸图像的亮度符合人脸识别的要求。
本发明首先采集得到人脸图像，然后检测采集得到的人脸图像的亮度值，并判断该亮度值是否在预先设定的亮度值范围内，若是，表明采集到的人脸图像的亮度值是符合要求的，可以进行后续的人脸识别，若大于预先设定的亮度值范围，表明人脸图像偏亮，若小于预先设定的亮度值范围，表明人脸图像偏暗，根据偏亮或者偏暗的结果减小或增大补光灯的光照强度，再次采集人脸图像并进行上述各个步骤，直至得到亮度值符合要求的人脸图像，即，满足预先设定的亮度值范围，接着进行后续的人脸识别过程。
本发明通过检测人脸图像的亮度值来判断人脸图像是否符合要求，相比单纯的通过外界光照强度来判断人脸图像是否符合要求更加简单和准确，能够得到高质量的人脸图像。
前述已经介绍了检测人脸图像的亮度值的一个简单的实施例，但是本发明并不限于该实施例，例如还可以通过如下方法检测人脸图像的亮度值：
S210：从人脸图像中检测出人脸并提取出来，作为人脸区域。
具体过程可以为：先检测出人脸在人脸图像中的位置，然后对人脸图像进行裁剪，只保留人脸区域，人脸区域一般为一个矩形区域。
S220：对人脸区域进行归一化处理，保证人脸区域大小相同，方便对不同人脸图像的数据处理和比较。
S230：提取出归一化处理后人脸区域的SIFT特征向量。
尺度不变特征变换(Scale-invariant feature transform，SIFT)，是用于图像处理领域的一种描述。这种描述具有尺度不变性，可在图像中检测出关键点，是一种局部特征描述子。
SIFT特征向量是图像的局部特征，其对旋转、尺度缩放、亮度变化保持不变性，对视角变化、仿射变换、噪声也保持一定程度的稳定性；并且SIFT特征向量独特性好，信息量丰富，适用于在海量特征数据库中进行快速、准确的匹配。
SIFT特征向量的提取一般包括以下几个步骤：
S231：尺度空间极值检测。搜索所有尺度上的图像位置，通过高斯微分函数来识别潜在的对于尺度和旋转不变的兴趣点。
S232：关键点定位。在每个候选的兴趣点位置上，通过一个拟合精细的模型来确定位置和尺度。
S233：方向确定。基于图像局部的梯度方向，分配给每个关键点位置一个或多个方向，所有后面的对图像数据的操作都相对于关键点的方向、尺度和位置进行变换，从而提供对于这些变换的不变性。
S234：关键点描述。以特征点为中心取16×16的邻域作为采样窗口，将采样点与特征点的相对方向通过高斯加权后归入包含8个方向的梯度直方图，最后获得4×4×8的128维特征描述子，即为SIFT特征向量。
S240：通过BOW模型将SIFT特征向量转化为BOW特征向量。
BOW(bag of words)模型，也称词袋模型，能够将SIFT特征转化成一个语义上的向量，即BOW特征向量。SIFT特征向量虽然也能描述一幅图像，但是每个SIFT特征向量都是128维的，而且一幅图像通常都包含成百上千个SIFT特征向量，在进行相似度计算时，这个计算量是非常大的，将其转化为BOW特征向量能够大大提高计算效率。
BOW模型需要预先进行训练，训练时需要有多个人脸图像的SIFT特征向量，训练步骤如下：
S241：将上述多个SIFT特征向量聚类成n类。这n类中的每一类就相当于是图片的“单词”，所有的n个类别构成“词汇表”。
训练完毕后，即可提取待处理人脸图像的BOW特征向量，步骤如下：
S242：对人脸图像的特征点，将其归到前面计算的类别中，统计这张人脸图像各个类别出现的频率，作为人脸图像的BOW特征向量。
S250：使用预先训练好的SVR分类器，对BOW特征向量进行处理，得到人脸图像的亮度值。SVR分类器是一个高维非线性函数，能够将BOW特征向量映射到亮度值。
本实施例首先从人脸图像中检测出人脸区域，并按照检测到的人脸区域做归一化操作，针对归一化后的人脸区域，提取SIFT特征，并转化为BOW特征向量。利用已经训练好的SVR分类器，计算当前人脸区域对应的亮度值。本实施例得到的亮度值能够精确地描述一张人脸图像的亮度，方便后续调节补光灯。
上述的SVR分类器可以通过如下步骤训练得到：
S100’：制定训练样本库，训练样本库包括多个人脸图像样本和与该人脸图像样本对应的亮度值，亮度值取值范围为0-100。
训练样本库可以基于Multi-PIE人脸数据库(该数据库包含了337个人，750,000多张人脸图像样本，涵盖了多个人在不同的姿态，表情，光照强度下的人脸图像样本)的子集，根据拍摄时光照强度的控制，为每一张人脸图像样本标定一个亮度值0-100，作为训练样本库。
S200’：从每个人脸图像样本中检测出人脸并提取出来，作为人脸区域。具体过程同S210。
S300’：对每个人脸区域进行归一化处理。
具体过程可以为：针对这些已经标定好的数据(人脸图像样本及其对应的亮度值)，检测人脸图像样本，提取人脸所在区域，并归一化到同样的大小。
S400’：提取出归一化处理后每个人脸区域的SIFT特征向量。具体过程同S230。
S500’：通过BOW模型将每个SIFT特征向量转化为BOW特征向量。具体过程同S240。
至此每一张人脸图像样本，我们得到了一个BOW特征向量，和对应的已经标定好的亮度值。
S600’：通过支持向量回归(SVR)算法，使用所有BOW特征向量和该BOW特征向量对应的亮度值对SVR分类器进行训练，训练出一个非线性的方程，得到一个从BOW特征向量到光照值的一个高维非线性函数。训练结束。
事实上，S100’-S600’是在采集人脸图像(即S100)之前就已经进行完毕的，即预先训练好SVR分类器，然后再进行本发明采集人脸图像的步骤。
经过以上操作之后，我们可以得到一幅人脸图像的亮度值，从而推断出拍照时的环境光照强度。另一个方面的问题是，到底怎样的亮度值是最优的，即预先设定的亮度值范围怎样确定，这里给出一个实施例：
S100”：制定多个测试样本库，每个测试样本库包括同一批人的某个亮度值的多个人脸图像样本，不同测试样本库的人脸图像样本的亮度值不同。
测试样本库也可以基于Multi-PIE人脸数据库的子集，即从Multi-PIE人脸数据库中分离出同一批人相同的姿态下，某个亮度值的人脸图像样本，作为一个测试样本库，其他测试样本库是同一批人相同的姿态下，其他亮度值的人脸图像样本。
S200”：通过人脸识别算法对每个测试样本库中的人脸图像样本进行人脸识别。
S300”：根据人脸图像样本的人脸识别结果计算每个测试样本库的拒真率和认假率，得到在多个亮度值下的拒真率和认假率。
拒真率(FRR)，在本发明中可以通俗的理解为“把应该相互匹配成功的人脸当成不能匹配的人脸”的概率。认假率(FAR)，在本发明中可以通俗的理解为“把不应该匹配的人脸当成匹配的人脸”的概率。
S400”：以亮度值为横坐标，以拒真率为第一纵坐标，以认假率为第二纵坐标，绘制ROC曲线。
S500”：根据ROC曲线确定亮度值范围。通过比对FAR，FRR等一系列性能指标，获取到最适合人脸识别算法的亮度值区间，从而为整个反馈调节环节提供一个有意义的建议。该亮度值区间即为预先设定的亮度值范围，要求在该区间内，拒真率和认假率均处在较小的范围内。
事实上，S100”-S500”是在采集人脸图像(即S100)之前就已经进行完毕的，即预先亮度值范围内，在该亮度值范围内的人脸图像符合人脸识别的要求，然后再进行本发明采集人脸图像的步骤。然而S100”-S500”与S100’-S600’并没有严格的先后关系，即可以先训练SVR分类器，也可以先确定亮度值范围，甚至可以同时进行。
作为本发明前述实施例的一种改进，还可以增加调节图像传感器参数的步骤，具体为：
在人脸图像的亮度值小于预先设定的亮度值范围时，需要增大补光灯的光照强度，但是若补光灯光照强度增大到最大值后，人脸图像的亮度值仍然小于预先设定的亮度值范围，则需要调节图像传感器的参数以增加人脸图像的亮度值，例如增加曝光时间，增加曝光增益等。
同理，在人脸图像的亮度值大于预先设定的亮度值范围时，需要减少补光灯的光照强度，但是若补光灯光照强度减少到最小值后，人脸图像的亮度值仍然大于预先设定的亮度值范围，则需要调节图像传感器的参数以减少人脸图像的亮度值，例如减少曝光时间，减少曝光增益等。
例如，本发明中，单颗补光灯的亮度范围是0～6.5毫瓦/立体角，若在这个范围内的调节不能满足要求，则可以调节图像传感器的曝光时间，把曝光时间调大，人脸图像就会变亮，调小，人脸图像就会变暗。图像传感器的曝光时间最小值为0，最大值为65535。
并且，本发明还可以根据外界光照强度调节补光灯，具体为：在采集人脸图像之前先通过亮度传感器获取外界光照强度，再判断外界光照强度是否在预先设定的光照强度范围内，若是，执行采集人脸图像，若否，调节补光灯的光照强度，并转至获取外界光照强度。例如，当外界光照强度小于100微瓦/平方厘米时，开启补光等，并调节补光灯的光照强度至合适的值。
外界光照强度过大或过小(即不在预先设定的光照强度范围内)时，采集到的人脸图像的亮度很难符合要求，并且也不利于后续补对光灯调节，因此在采集人脸图像之前先将外界光照强度调节到预先设定的光照强度范围内，可以使得后续调节方便。
综上所述，本发明将图像传感器、补光灯、外界光照强度和人脸图像亮度检测算法有机的联动起来，当外界光线变化时，会调整补光灯的亮度或图像传感器的参数以补偿外界光照强度，并对补偿后图像传感器输出的人脸图像进行判定，确定人脸图像亮度是否适合人脸识别，根据判定结果再去调整补光灯和图像传感器，直到人脸图像符合标准。本发明能够得到高质量的、亮度符合人脸识别要求的人脸图像。
另一方面，本发明提供一种自适应可调节的人脸识别装置，如图2所示，包括：
采集模块11，用于采集人脸图像。
检测模块12，用于检测人脸图像的亮度值。
本发明中，向检测模块中输入一张人脸图像(灰度或RGB)，输出一个亮度值，可以用这个亮度值来衡量这张人脸图像的亮度，进而反映出当时拍照时的光照强度(这两者是一个正比关系)。
这里给出检测模块的一个实施例：对人脸图像的所有像素灰度值进行累加求平均，使用图像平均灰度值作为人脸图像的亮度值。
判断模块13，用于判断亮度值是否在预先设定的亮度值范围内，若是，则触发人脸识别模块14，若否，则触发调节模块15，并在触发调节模块后转至采集模块11。
预先设定的亮度值范围可以根据具体的人脸识别确定，这里举一个简单的实施例：如果使用前述的图像平均灰度值作为人脸图像的亮度值，预先设定的亮度值范围为112-144，若亮度值小于112认为是偏暗，大于144认为是偏亮，后续调整只需根据是偏暗或偏亮进行调整即可。
人脸识别模块14，用于根据所述人脸图像进行人脸识别。
调节模块15，用于调节补光灯的光照强度。
补光灯光照强度的调节方式有多种：例如可以根据一定的调节步进，每次将补光灯的光照强度增大或减小一个预设值，逐步调节，直至人脸图像的亮度符合人脸识别的要求；或者，根据人脸图像当前的亮度值和补光灯的当前光照强度进行计算，得到目标调节强度，一次将补光灯的光照强度增大或减小到目标调节强度，使得人脸图像的亮度符合人脸识别的要求。
本发明首先通过采集模块采集得到人脸图像，然后通过检测模块检测采集得到的人脸图像的亮度值，并通过判断模块判断该亮度值是否在预先设定的亮度值范围内，若是，表明采集到的人脸图像的亮度值是符合要求的，可以触发人脸识别模块进行后续的人脸识别，若大于预先设定的亮度值范围，表明人脸图像偏亮，若小于预先设定的亮度值范围，表明人脸图像偏暗，根据偏亮或者偏暗的结果减小或增大补光灯的光照强度，再次采集人脸图像并进行上述各个模块，直至得到亮度值符合要求的人脸图像，即，满足预先设定的亮度值范围，接着触发人脸识别模块进行后续的人脸识别过程。
本发明通过检测人脸图像的亮度值来判断人脸图像是否符合要求，相比单纯的通过外界光照强度来判断人脸图像是否符合要求更加简单和准确，能够得到高质量的人脸图像。
前述已经介绍了检测模块的一个简单的实施例，但是本发明并不限于该实施例，例如检测模块还可以包括：
前述已经介绍了检测模块的一个简单的实施例，但是本发明并不限于该实施例，例如检测模块还可以包括：
第一人脸区域提取单元，用于从人脸图像中检测出人脸并提取出来，作为人脸区域。
第一归一化单元，用于对人脸区域进行归一化处理。
第一SIFT特征向量提取单元，用于提取出归一化处理后人脸区域的SIFT特征向量。
第一BOW特征向量转化单元，用于通过BOW模型将SIFT特征向量转化为BOW特征向量。
SVR分类单元，用于使用预先训练好的SVR分类器，对BOW特征向量进行处理，得到人脸图像的亮度值。
本实施例首先从人脸图像中检测出人脸区域，并按照检测到的人脸区域做归一化操作，针对归一化后的人脸区域，提取SIFT特征，并转化为BOW特征向量。利用已经训练好的SVR分类器，计算当前人脸区域对应的亮度值。本实施例得到的亮度值能够精确地描述一张人脸图像的亮度，方便后续调节补光灯。
上述SVR分类器通过如下单元训练得到：
训练样本库制定单元，用于制定训练样本库，训练样本库包括多个人脸图像样本和与该人脸图像样本对应的亮度值，亮度值取值范围为0-100。
第二人脸区域提取单元，用于从每个人脸图像样本中检测出人脸并提取出来，作为人脸区域。
第二归一化单元，用于对每个人脸区域进行归一化处理。
第二SIFT特征向量提取单元，用于提取出归一化处理后每个人脸区域的SIFT特征向量。
第二BOW特征向量转化单元，用于通过BOW模型将每个SIFT特征向量转化为BOW特征向量。
SVR训练单元，用于使用所有BOW特征向量和该BOW特征向量对应的亮度值对SVR分类器进行训练。
经过以上各个单元的操作之后，我们可以得到一幅人脸图像的亮度值，从而推断出拍照时的环境光照强度。另一个方面的问题是，到底怎样的亮度值是最优的，即预先设定的亮度值范围怎样确定，这里给出一个实施例，预先设定的亮度值范围通过如下单元确定：
测试样本库制定单元，用于制定多个测试样本库，每个测试样本库包括同一批人的某个亮度值的多个人脸图像样本，不同测试样本库的人脸图像样本的亮度值不同；
人脸识别单元，用于对每个测试样本库中的人脸图像样本进行人脸识别；
拒真率和认假率计算单元，用于根据人脸图像样本的人脸识别结果计算每个测试样本库的拒真率和认假率，得到在多个亮度值下的拒真率和认假率；
ROC曲线绘制单元，用于以亮度值为横坐标，以拒真率为第一纵坐标，以认假率为第二纵坐标，绘制ROC曲线；
亮度值范围确定单元，用于根据ROC曲线确定亮度值范围。
通过比对FAR，FRR等一系列性能指标，获取到最适合人脸识别算法的亮度值区间，从而为整个反馈调节环节提供一个有意义的建议。该亮度值区间即为预先设定的亮度值范围，要求在该区间内，拒真率和认假率均处在较小的范围内。
作为本发明前述实施例的一种改进，调节模块包括：
补光灯光照强度调节单元，用于增大或减小补光灯的光照强度；
图像传感器调节单元，用于在补光灯的光照强度达到最大值或最小值后，人脸图像的亮度值仍然不在预先设定的亮度值范围内时，调节图像传感器的参数以增加或减小人脸图像的亮度值。
并且，本发明还可以根据外界光照强度调节补光灯，此时，该装置还包括：
外界光照强度获取单元，用于获取外界光照强度；
判断单元，用于判断外界光照强度是否在预先设定的光照强度范围内，若是，触发采集模块，若否，则触发补光灯光照强度调节单元，并在触发补光灯光照强度调节单元后触发外界光照强度获取单元。
外界光照强度过大或过小(即不在预先设定的光照强度范围内)时，采集到的人脸图像的亮度很难符合要求，并且也不利于后续补对光灯调节，因此在采集人脸图像之前先将外界光照强度调节到预先设定的光照强度范围内，可以使得后续调节方便。
以上所述是本发明的优选实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明所述原理的前提下，还可以作出若干改进和润饰，这些改进和润饰也应视为本发明的保护范围。
Claims (8)
1.一种自适应可调节的人脸识别方法，其特征在于，包括：
采集人脸图像；
检测所述人脸图像的亮度值；
判断所述亮度值是否在预先设定的亮度值范围内，若是，使用所述人脸图像进行人脸识别，若否，调节补光灯的光照强度，并转至所述采集人脸图像；
所述检测所述人脸图像的亮度值包括：
从所述人脸图像中检测出人脸并提取出来，作为人脸区域；
对所述人脸区域进行归一化处理；
提取出归一化处理后人脸区域的SIFT特征向量；
通过BOW模型将所述SIFT特征向量转化为BOW特征向量；
使用预先训练好的SVR分类器，对所述BOW特征向量进行处理，得到所述人脸图像的亮度值；其中，所述SVR分类器是一个从BOW特征向量到亮度值的高维非线性函数，将BOW特征向量映射到亮度值。
2.根据权利要求1所述的自适应可调节的人脸识别方法，其特征在于，所述预先设定的亮度值范围通过如下方法确定：
制定多个测试样本库，每个测试样本库包括同一批人的某个亮度值的多个人脸图像样本，不同测试样本库的人脸图像样本的亮度值不同；
对每个测试样本库中的人脸图像样本进行人脸识别；
根据人脸图像样本的人脸识别结果计算每个测试样本库的拒真率和认假率，得到在多个亮度值下的拒真率和认假率；
以亮度值为横坐标，以拒真率为第一纵坐标，以认假率为第二纵坐标，绘制ROC曲线；
根据所述ROC曲线确定亮度值范围。
3.根据权利要求1或2所述的自适应可调节的人脸识别方法，其特征在于，所述调节补光灯的光照强度包括：
增大或减小补光灯的光照强度；
若补光灯的光照强度达到最大值或最小值后，人脸图像的亮度值仍然不在预先设定的亮度值范围内，则调节图像传感器的参数以增加或减小人脸图像的亮度值。
4.根据权利要求3所述的自适应可调节的人脸识别方法，其特征在于，所述采集人脸图像之前还包括：
获取外界光照强度；
判断所述外界光照强度是否在预先设定的光照强度范围内，若是，执行所述采集人脸图像，若否，调节补光灯的光照强度，并转至所述获取外界光照强度。
5.一种自适应可调节的人脸识别装置，其特征在于，包括：
采集模块，用于采集人脸图像；
检测模块，用于检测所述人脸图像的亮度值；
判断模块，用于判断所述亮度值是否在预先设定的亮度值范围内，若是，则触发人脸识别模块，若否，则触发调节模块，并在触发所述调节模块后触发所述采集模块；
人脸识别模块，用于根据所述人脸图像进行人脸识别；
调节模块，用于调节补光灯的光照强度；
所述检测模块包括：
第一人脸区域提取单元，用于从所述人脸图像中检测出人脸并提取出来，作为人脸区域；
第一归一化单元，用于对所述人脸区域进行归一化处理；
第一SIFT特征向量提取单元，用于提取出归一化处理后人脸区域的SIFT特征向量；
第一BOW特征向量转化单元，用于通过BOW模型将所述SIFT特征向量转化为BOW特征向量；
SVR分类单元，用于使用预先训练好的SVR分类器，对所述BOW特征向量进行处理，得到所述人脸图像的亮度值；其中，所述SVR分类器是一个从BOW特征向量到亮度值的高维非线性函数，将BOW特征向量映射到亮度值。
6.根据权利要求5所述的自适应可调节的人脸识别装置，其特征在于，所述预先设定的亮度值范围通过如下单元确定：
测试样本库制定单元，用于制定多个测试样本库，每个测试样本库包括同一批人的某个亮度值的多个人脸图像样本，不同测试样本库的人脸图像样本的亮度值不同；
人脸识别单元，用于对每个测试样本库中的人脸图像样本进行人脸识别；
拒真率和认假率计算单元，用于根据人脸图像样本的人脸识别结果计算每个测试样本库的拒真率和认假率，得到在多个亮度值下的拒真率和认假率；
ROC曲线绘制单元，用于以亮度值为横坐标，以拒真率为第一纵坐标，以认假率为第二纵坐标，绘制ROC曲线；
亮度值范围确定单元，用于根据所述ROC曲线确定亮度值范围。
7.根据权利要求5或6所述的自适应可调节的人脸识别装置，其特征在于，所述调节模块包括：
补光灯光照强度调节单元，用于增大或减小补光灯的光照强度；
图像传感器调节单元，用于在补光灯的光照强度达到最大值或最小值后，人脸图像的亮度值仍然不在预先设定的亮度值范围内时，调节图像传感器的参数以增加或减小人脸图像的亮度值。
8.根据权利要求7所述的自适应可调节的人脸识别装置，其特征在于，所述装置还包括：
外界光照强度获取单元，用于获取外界光照强度；
判断单元，用于判断所述外界光照强度是否在预先设定的光照强度范围内，若是，触发所述采集模块，若否，则触发所述补光灯光照强度调节单元，并在触发所述补光灯光照强度调节单元后触发所述外界光照强度获取单元。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201610798745.6A CN106469301B (zh) | 2016-08-31 | 2016-08-31 | 自适应可调节的人脸识别方法和装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201610798745.6A CN106469301B (zh) | 2016-08-31 | 2016-08-31 | 自适应可调节的人脸识别方法和装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN106469301A CN106469301A (zh) | 2017-03-01 |
| CN106469301B true CN106469301B (zh) | 2019-05-07 |
Family
ID=58230413
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201610798745.6A Active CN106469301B (zh) | 2016-08-31 | 2016-08-31 | 自适应可调节的人脸识别方法和装置 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN106469301B (zh) |
Families Citing this family (34)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN108416988A (zh) * | 2017-04-19 | 2018-08-17 | 陈其高 | 一种坐姿提醒方法以及装置 |
| EP3584740B1 (en) * | 2017-04-21 | 2021-04-07 | Shenzhen Goodix Technology Co., Ltd. | Method for detecting biological feature data, biological feature recognition apparatus and electronic terminal |
| CN108961306A (zh) * | 2017-05-17 | 2018-12-07 | 北京芝麻力量运动科技有限公司 | 图像处理方法、图像处理装置及体感系统 |
| CN107205125B (zh) * | 2017-06-30 | 2019-07-09 | Oppo广东移动通信有限公司 | 一种图像处理方法、装置、终端及计算机可读存储介质 |
| CN107493403B (zh) * | 2017-08-11 | 2019-09-24 | 宁波江丰生物信息技术有限公司 | 一种数字病理切片扫描系统 |
| CN107609514B (zh) * | 2017-09-12 | 2021-08-06 | Oppo广东移动通信有限公司 | 人脸识别方法及相关产品 |
| CN107679481B (zh) * | 2017-09-27 | 2021-09-14 | Oppo广东移动通信有限公司 | 解锁控制方法及相关产品 |
| CN109670386A (zh) * | 2017-10-16 | 2019-04-23 | 深圳泰首智能技术有限公司 | 人脸识别方法及终端 |
| CN107701993A (zh) * | 2017-10-19 | 2018-02-16 | 中信重工开诚智能装备有限公司 | 一种用于水下机器人的自适应照明系统 |
| CN107909011B (zh) * | 2017-10-30 | 2021-08-24 | Oppo广东移动通信有限公司 | 人脸识别方法及相关产品 |
| CN111316633A (zh) * | 2017-11-08 | 2020-06-19 | 深圳传音通讯有限公司 | 一种智能终端的图像拍摄方法及图像拍摄系统 |
| CN107809595B (zh) * | 2017-11-14 | 2018-07-20 | 数海信息技术有限公司 | 手机智能化助拍系统 |
| CN107967418B (zh) * | 2017-11-28 | 2022-05-20 | 维沃移动通信有限公司 | 人脸识别方法及移动终端 |
| CN109936693A (zh) * | 2017-12-18 | 2019-06-25 | 东斓视觉科技发展（北京）有限公司 | 移动拍摄终端及相片的拍摄方法 |
| CN108197546B (zh) * | 2017-12-26 | 2020-12-11 | 深圳市友信长丰科技有限公司 | 人脸识别中光照处理方法、装置、计算机设备及存储介质 |
| CN108446608A (zh) * | 2018-02-28 | 2018-08-24 | 深圳壹账通智能科技有限公司 | 贷款信息审核方法、装置、设备及可读存储介质 |
| CN108391011B (zh) * | 2018-03-07 | 2020-07-14 | 维沃移动通信有限公司 | 一种人脸识别方法和移动终端 |
| CN108200355A (zh) * | 2018-03-29 | 2018-06-22 | 四川斐讯信息技术有限公司 | 一种适用于物联网设备拍摄的补光方法、系统及控制系统 |
| CN108509937A (zh) * | 2018-04-12 | 2018-09-07 | 浙江凯迪仕实业有限公司 | 一种人脸识别系统及方法 |
| CN109547701B (zh) * | 2019-01-04 | 2021-07-09 | Oppo广东移动通信有限公司 | 图像拍摄方法、装置、存储介质及电子设备 |
| CN109803093B (zh) * | 2019-01-28 | 2021-02-26 | 深圳市云之梦科技有限公司 | 虚拟试衣的成像方法和虚拟试衣设备 |
| CN110222624B (zh) * | 2019-05-31 | 2023-04-28 | 深圳群安电子科技有限公司 | 一种动态人脸检测装置 |
| CN110516555A (zh) * | 2019-07-31 | 2019-11-29 | 苏州浪潮智能科技有限公司 | 一种人脸识别方法、装置、设备及可读存储介质 |
| CN111144299B (zh) * | 2019-12-26 | 2023-05-23 | 冠捷电子科技(福建)有限公司 | 低光源下高关联影像的辨识方法 |
| CN111447374B (zh) * | 2020-05-13 | 2021-01-26 | 重庆紫光华山智安科技有限公司 | 补光调节方法、装置、电子设备及存储介质 |
| CN111599144A (zh) * | 2020-05-19 | 2020-08-28 | 上海海事大学 | 一种智能提醒仪 |
| CN111835984B (zh) * | 2020-07-24 | 2023-02-07 | 中国平安人寿保险股份有限公司 | 智能补光方法、装置、电子设备及存储介质 |
| CN114120382B (zh) * | 2020-08-25 | 2024-05-03 | 中车株洲电力机车研究所有限公司 | 一种人脸识别系统的测试方法、装置、电子设备及介质 |
| CN112016495A (zh) * | 2020-09-03 | 2020-12-01 | 福建库克智能科技有限公司 | 人脸识别的方法、装置和电子设备 |
| CN112702489B (zh) * | 2020-12-24 | 2022-12-23 | 上海商汤临港智能科技有限公司 | 摄像模组及其控制方法和装置、车辆、存储介质 |
| CN113176215A (zh) * | 2021-01-06 | 2021-07-27 | 深圳市六合智能感知系统科技有限公司 | 果蔬残留农药的检测方法、系统、设备及存储介质 |
| CN112749679B (zh) * | 2021-01-22 | 2023-09-05 | 北京百度网讯科技有限公司 | 模型的训练方法、人脸识别方法、装置、设备和介质 |
| CN114612271A (zh) * | 2022-03-04 | 2022-06-10 | 重庆第二师范学院 | 一种在线课程智能监管系统、方法及存储介质 |
| CN117560826B (zh) * | 2024-01-10 | 2024-03-29 | 西安南洋迪克整装智能家居有限公司 | 一种智能柜子的自动照明装置 |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104751419A (zh) * | 2015-03-05 | 2015-07-01 | 广东欧珀移动通信有限公司 | 一种照片显示调节方法及终端 |
| EP2927841A1 (en) * | 2014-04-02 | 2015-10-07 | Atos IT Solutions and Services GmbH | Spoof prevention for face recognition |
| CN105608677A (zh) * | 2015-12-28 | 2016-05-25 | 成都品果科技有限公司 | 一种任意光线环境下的图像肤色美化方法及系统 |
| CN105704395A (zh) * | 2016-04-05 | 2016-06-22 | 广东欧珀移动通信有限公司 | 拍照方法和拍照装置 |
| CN105828500A (zh) * | 2016-03-14 | 2016-08-03 | 上海斐讯数据通信技术有限公司 | 一种具有人脸或人形识别能力的智能照明系统及控制方法 |
Family Cites Families (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2014153817A (ja) * | 2013-02-06 | 2014-08-25 | Toshiba Corp | 通行制御装置、その方法、及び、そのプログラム |
-
2016
- 2016-08-31 CN CN201610798745.6A patent/CN106469301B/zh active Active
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| EP2927841A1 (en) * | 2014-04-02 | 2015-10-07 | Atos IT Solutions and Services GmbH | Spoof prevention for face recognition |
| CN104751419A (zh) * | 2015-03-05 | 2015-07-01 | 广东欧珀移动通信有限公司 | 一种照片显示调节方法及终端 |
| CN105608677A (zh) * | 2015-12-28 | 2016-05-25 | 成都品果科技有限公司 | 一种任意光线环境下的图像肤色美化方法及系统 |
| CN105828500A (zh) * | 2016-03-14 | 2016-08-03 | 上海斐讯数据通信技术有限公司 | 一种具有人脸或人形识别能力的智能照明系统及控制方法 |
| CN105704395A (zh) * | 2016-04-05 | 2016-06-22 | 广东欧珀移动通信有限公司 | 拍照方法和拍照装置 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN106469301A (zh) | 2017-03-01 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN106469301B (zh) | 自适应可调节的人脸识别方法和装置 | |
| US8542887B2 (en) | Object identification apparatus and object identification method | |
| CN109740478B (zh) | 车辆检测及识别方法、装置、计算机设备及可读存储介质 | |
| CN108154102B (zh) | 一种道路交通标志识别方法 | |
| JP5174045B2 (ja) | 分類器チェーンを用いた照明検出 | |
| KR100724932B1 (ko) | 얼굴 검출 장치 및 방법 | |
| KR100888554B1 (ko) | 인식 시스템 | |
| CN110006907A (zh) | 一种基于机器视觉的压铸件表面缺陷检测方法及系统 | |
| US20140341421A1 (en) | Method for Detecting Persons Using 1D Depths and 2D Texture | |
| KR20170006355A (ko) | 모션벡터 및 특징벡터 기반 위조 얼굴 검출 방법 및 장치 | |
| AU2011207120B8 (en) | Identifying matching images | |
| CN108564092A (zh) | 基于sift特征提取算法的向日葵病害识别方法 | |
| CN107016353B (zh) | 一种变分辨率目标探测与识别一体化的方法与系统 | |
| WO2019102608A1 (en) | Image processing device, image processing method, and image processing program | |
| CN112784712B (zh) | 一种基于实时监控的失踪儿童预警实现方法、装置 | |
| CN105787475A (zh) | 一种复杂环境下的交通标志检测与识别方法 | |
| CN110569818A (zh) | 一种智能阅读学习方法 | |
| Song et al. | Feature extraction and target recognition of moving image sequences | |
| CN110555435A (zh) | 一种点读互动实现方法 | |
| CN108154116A (zh) | 一种图像识别方法及系统 | |
| Laytner et al. | Robust face detection from still images | |
| Gurunathan et al. | Plant leaf diseases detection using KNN classifier | |
| CN110991371A (zh) | 一种基于坐标识别的智能阅读学习方法 | |
| JP2012234497A (ja) | オブジェクト識別装置、オブジェクト識別方法、及びプログラム | |
| KR100893086B1 (ko) | 조명 변화에 강인한 얼굴 검출 방법 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant | ||
| CP01 | Change in the name or title of a patent holder |
Address after: 100085, 1 floor 8, 1 Street, ten Street, Haidian District, Beijing. Patentee after: Beijing eye Intelligence Technology Co., Ltd. Address before: 100085, 1 floor 8, 1 Street, ten Street, Haidian District, Beijing. Patentee before: Beijing Techshino Technology Co., Ltd. |
|
| CP01 | Change in the name or title of a patent holder | ||
| PE01 | Entry into force of the registration of the contract for pledge of patent right |
Denomination of invention: Adaptive adjustable human face recognition method and device Effective date of registration: 20191226 Granted publication date: 20190507 Pledgee: Beijing Zhongguancun sub branch of China Post Savings Bank Co., Ltd Pledgor: Beijing eye Intelligence Technology Co., Ltd. Registration number: Y2019990000808 |
|
| PE01 | Entry into force of the registration of the contract for pledge of patent right | ||
| PC01 | Cancellation of the registration of the contract for pledge of patent right |
Date of cancellation: 20210917 Granted publication date: 20190507 Pledgee: Beijing Zhongguancun sub branch of China Post Savings Bank Co.,Ltd. Pledgor: Beijing Eyes Intelligent Technology Co.,Ltd. Registration number: Y2019990000808 |
|
| PC01 | Cancellation of the registration of the contract for pledge of patent right | ||
| TR01 | Transfer of patent right |
Effective date of registration: 20220307 Address after: 071800 Beijing Tianjin talent home (Xincheng community), West District, Xiongxian Economic Development Zone, Baoding City, Hebei Province Patentee after: BEIJING EYECOOL TECHNOLOGY Co.,Ltd. Patentee after: Beijing Eye Intelligent Technology Co., Ltd Address before: 100085, 1 floor 8, 1 Street, ten Street, Haidian District, Beijing. Patentee before: Beijing Eyes Intelligent Technology Co.,Ltd. |
|
| TR01 | Transfer of patent right | ||
| PE01 | Entry into force of the registration of the contract for pledge of patent right |
Denomination of invention: Adaptive and adjustable face recognition method and device Effective date of registration: 20220614 Granted publication date: 20190507 Pledgee: China Construction Bank Corporation Xiongxian sub branch Pledgor: BEIJING EYECOOL TECHNOLOGY Co.,Ltd. Registration number: Y2022990000332 |
|
| PE01 | Entry into force of the registration of the contract for pledge of patent right |