CN110705530B - 双目活体识别同一人脸框的方法、装置、设备及存储介质 - Google Patents

双目活体识别同一人脸框的方法、装置、设备及存储介质 Download PDF

Info

Publication number
CN110705530B
CN110705530B CN201911278183.2A CN201911278183A CN110705530B CN 110705530 B CN110705530 B CN 110705530B CN 201911278183 A CN201911278183 A CN 201911278183A CN 110705530 B CN110705530 B CN 110705530B
Authority
CN
China
Prior art keywords
face frame
face
nir
image
rgb
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201911278183.2A
Other languages
English (en)
Other versions
CN110705530A (zh
Inventor
不公告发明人
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhuhai Eeasy Electronic Tech Co ltd
Original Assignee
Zhuhai Eeasy Electronic Tech Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhuhai Eeasy Electronic Tech Co ltd filed Critical Zhuhai Eeasy Electronic Tech Co ltd
Priority to CN201911278183.2A priority Critical patent/CN110705530B/zh
Publication of CN110705530A publication Critical patent/CN110705530A/zh
Application granted granted Critical
Publication of CN110705530B publication Critical patent/CN110705530B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/168—Feature extraction; Face representation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172—Classification, e.g. identification
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/40—Spoof detection, e.g. liveness detection
    • G06V40/45—Detection of the body part being alive

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • General Health & Medical Sciences (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Image Analysis (AREA)

Abstract

本发明适用于计算机技术领域，提供了一种基于活体识别的同一人脸框确认方法、装置、设备及存储介质，该方法包括：从包含人脸框标识的RGB图像中获取第一人脸框，从包含人脸框标识的NIR图像中获取第二人脸框，该RGB图像和该NIR图像由同一双目摄像头拍摄得到，通过训练好的人脸框预测模型预测该第一人脸框在对应NIR图像中的对应第三人脸框，计算该第三人脸框与该第二人脸框的重叠像素面积比，当该重叠像素面积比大于预设的面积比阈值时，确定该第一人脸框与该第二人脸框对应同一活体人脸，从而提高了人脸活体识别的准确性和识别效率。

Description

双目活体识别同一人脸框的方法、装置、设备及存储介质
技术领域
本发明属于计算机技术领域，尤其涉及一种双目活体识别同一人脸框的方法、装置、设备及存储介质。
背景技术
双目摄像头一个很重要的应用领域是人脸识别系统中的活体识别，在双目人脸识别系统中，RGB图像的人脸用于和注册人脸库比对，以确认是否是在册人员，NIR图像的人脸用于活体识别，以防止各种假体人脸的攻击。当一个非在册人员拿着一张在册人员的人脸图片靠近自己的脸的时候，如果RGB图像中的人脸位置没有准确地匹配到该人脸在NIR图像中的人脸位置，则会出现在册的假体RGB人脸和攻击者的NIR人脸被认为是同一实体的成像，从而同时欺骗了人脸识别模块和活体识别模块，导致攻击成功。无论是在测人员、攻击者、假体人脸图像，其在双目摄像头两个图像中的人脸位置准确匹配的程度，都会影响到攻击行为的拦截成功率。如果通过将RGB和NIR人脸进行比对来确认是同一实体的成像，那么将大幅增加系统开销，同时，由于RGB图像反应的是自然光，NIR图像反应的材质，两者在成像上差异很大，因此对人脸比对算法的要求很高。
发明内容
本发明的目的在于提供一种双目活体识别同一人脸框的方法、装置、设备及存储介质，旨在解决由于现有技术中双目活体识别准确率不高而导致的安全性低的问题。
一方面，本发明提供一种双目活体识别同一人脸框的方法，所述方法包括下述步骤：
对双目活体识别的RGB图像和NIR图像进行采样，获取第一人脸框和第二人脸框，所述第一人脸框为RGB图像中的人脸框，所述第二人脸框为NIR图像中的人脸框；
通过训练好的人脸框预测模型预测所述第一人脸框对应的第三人脸框，所述第三人脸框为预测到的NIR图像中的人脸框；
计算所述第三人脸框与所述第二人脸框的重叠像素面积比，当所述重叠像素面积比大于预设的面积比阈值时，确定所述第一人脸框与所述第二人脸框对应同一人脸实体。
优选地，所述通过训练好的人脸框预测模型预测所述第一人脸框对应的第三人脸框的步骤之前，包括：
获取双目活体识别的工作距离区间，将所述工作距离区间均分成若干等距的距离刻度；
在每个所述距离刻度对应的RGB图像和NIR图像的重叠区域中，水平方向以预设的第一步长、垂直方向以预设的第二步长移动样本人脸，并获取移动一个步长后所述样本人脸在RGB图像中的人脸框和在NIR图像中的人脸框，根据获取到的所述样本人脸在RGB图像的人脸框和在NIR图像的人脸框生成人脸框样本集；
根据所述人脸框样本集对所述人脸框预测模型进行训练，获得训练好的人脸框预测模型。
优选地，所述人脸框预测模型为：
Figure GDA0002432796760000031
所述第三人脸框nir_loc4×1＝(xnir,ynir,wnir,hnir)T，其中，xnir、ynir表示所述第三人脸框的坐标，wnir、hnir表示所述第三人脸框的宽和高，xrgb、yrgb表示所述第一人脸框的坐标，wrgb、hrgb表示所述第一人脸框的宽和高；a为系数，k为常数。
优选地，所述重叠像素面积比的计算方式为：
Figure GDA0002432796760000032
其中，ratio表示重叠像素面积比，area_real表示所述第一人脸框的像素面积，area_predict表示所述第三人脸框的像素面积，area_overlap表示所述第二人脸框和所述第三人脸框的重叠像素面积。
优选地，所述面积比阈值为0.5。
另一方面，本发明提供了一种双目活体识别同一人脸框的装置，所述装置包括：
人脸框获取单元，用于对双目活体识别的RGB图像和NIR图像进行采样，获取第一人脸框和第二人脸框，所述第一人脸框为RGB图像中的人脸框，所述第二人脸框为NIR图像中的人脸框；
人脸框预测单元，用于通过训练好的人脸框预测模型预测所述第一人脸框对应的第三人脸框，所述第三人脸框为预测到的NIR图像中的人脸框；以及
人脸确定单元，用于计算所述第三人脸框与所述第二人脸框的重叠像素面积比，当所述重叠像素面积比大于预设的面积比阈值时，确定所述第一人脸框与所述第二人脸框对应同一人脸实体。
优选地，所述装置还包括：
距离刻度确定单元，用于获取双目活体识别的工作距离区间，将所述工作距离区间均分成若干等距的距离刻度；
样本获取单元，用于在每个所述距离刻度对应的RGB图像和NIR图像的重叠区域中，水平方向以预设的第一步长、垂直方向以预设的第二步长移动样本人脸，并获取移动一个步长后所述样本人脸在RGB图像中的人脸框和在NIR图像中的人脸框，根据获取到的所述样本人脸在RGB图像的人脸框和在NIR图像的人脸框生成人脸框样本集；以及
模型训练单元，用于根据所述人脸框样本集对所述人脸框预测模型进行训练，获得训练好的人脸框预测模型。
优选地，所述重叠像素面积比的计算方式为：
Figure GDA0002432796760000041
其中，ratio表示重叠像素面积比，area_real表示所述第一人脸框的像素面积，area_predict表示所述第三人脸框的像素面积，area_overlap表示所述第二人脸框和所述第三人脸框的重叠像素面积。
另一方面，本发明还提供了一种双目活体识别设备，包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现如上所述方法的步骤。
另一方面，本发明还提供了一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，所述计算机程序被处理器执行时实现如上所述方法的步骤。
本发明通过对双目活体识别的RGB图像和NIR图像进行采样，获取第一人脸框和第二人脸框，该第一人脸框为RGB图像中的人脸框，该第二人脸框为NIR图像中的人脸框，通过训练好的人脸框预测模型预测该第一人脸框对应的第三人脸框，该第三人脸框为预测到的NIR图像中的人脸框，计算该第三人脸框与该第二人脸框的重叠像素面积比，当该重叠像素面积比大于预设的面积比阈值时，确定该第一人脸框与该第二人脸框对应同一人脸实体，从而提高了双目活体识别的准确率，进而提高了设备的安全性。
附图说明
图1是本发明实施例一提供的双目活体识别同一人脸框的方法的实现流程图；
图2是本发明实施例二提供的人脸框预测模型训练方法的实现流程图；
图3是本发明实施例二提供的样本人脸移动过程示例；
图4是本发明实施例三提供的双目活体识别同一人脸框的装置的结构示意图；以及
图5是本发明实施例五提供的双目活体识别设备的结构示意图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本发明进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。
以下结合具体实施例对本发明的具体实现进行详细描述：
实施例一：
图1示出了本发明实施例一提供的双目活体识别同一人脸框的方法的实现流程，为了便于说明，仅示出了与本发明实施例相关的部分，详述如下：
在步骤S101中，对双目活体识别的RGB图像和NIR图像进行采样，获取第一人脸框和第二人脸框，该第一人脸框为RGB图像中的人脸框，该第二人脸框为NIR图像中的人脸框。
本发明实施例适用于双目活体识别设备，该双目活体识别设备应具有第一摄像头和第二摄像头，该第一摄像头用于获取RGB(R(red，红色)、G(green，绿色)、B(blue，蓝色)，色彩模式)图像，该第二摄像头用于获取NIR(Near Infrared，近红外)图像。
在本发明实施例中，对双目活体识别的RGB图像和NIR图像进行采样，获取第一人脸框和第二人脸框，该第一人脸框为RGB图像中的人脸框，该第二人脸框为NIR图像中的人脸框。
在步骤S102中，通过训练好的人脸框预测模型预测该第一人脸框对应的第三人脸框，该第三人脸框为预测到的NIR图像中的人脸框。
在本发明实施例中，人脸框预测模型为多元非线性回归模型：
Figure GDA0002432796760000061
nir_loc4×1＝(xnir,ynir,wnir,hnir)T为该第三人脸框，其中，xnir、ynir表示该第三人脸框的坐标，wnir、hnir表示该第三人脸框的宽和高，xrgb、yrgb表示该第一人脸框的坐标，wrgb、hrgb表示该第一人脸框的宽和高；a为系数，k为常数。
在通过训练好的人脸框预测模型预测该第一人脸框对应的第三人脸框之前，需要对该人脸框预测模型进行训练，对系数a进行求解，人脸框预测模型的训练方法可参考实施例二，在此不作赘述。
在通过训练好的人脸框预测模型预测该第一人脸框对应的第三人脸框时，将获取到的RGB图像中的人脸框(第一人脸框)rgb_loc4×1＝(xrgb,yrgb,wrgb,hrgb)T输入到该人脸框预测模型中，即可得到预测到的NIR图像中的人脸框(第三人脸框)nir_loc4×1＝(xnir,ynir,wnir,hnir)T。
在步骤S103中，计算该第三人脸框与该第二人脸框的重叠像素面积比，当该重叠像素面积比大于预设的面积比阈值时，确定该第一人脸框与该第二人脸框对应同一人脸实体。
在本发明实施例中，第二人脸框的像素面积用area_real表示，第三人脸框的像素面积为area_predict，第二人脸框和第三人脸框的重叠像素面积用area_overlap表示，第二人脸框与第三人脸框重叠像素面积比用ratio表示，则第二人脸框与第三人脸框重叠像素面积比
Figure GDA0002432796760000071
判断该重叠面积比是否大于面积比阈值，是则，确定该第一人脸框与该第二人脸框对应同一人脸实体，否则，确定该第一人脸框与该第二人脸框对应不同人脸实体，优选地，该面积比阈值为0.5，以保证识别的准确率。从而避免了通过将RGB的人脸图像和NIR的人脸图像进行大运算量的图像比对，简单、高效地解决了了双目活体识别的人脸身份同一性问题。
在本发明实施例中，通过对双目活体识别的RGB图像和NIR图像进行采样，获取第一人脸框和第二人脸框，该第一人脸框为RGB图像中的人脸框，该第二人脸框为NIR图像中的人脸框，通过训练好的人脸框预测模型预测该第一人脸框对应的第三人脸框，该第三人脸框为预测到的NIR图像中的人脸框，计算该第三人脸框与该第二人脸框的重叠像素面积比，当该重叠像素面积比大于预设的面积比阈值时，确定该第一人脸框与该第二人脸框对应同一人脸实体，从而提高了双目活体识别的准确率，进而提高了设备的安全性。
实施例二：
图2示出了本发明实施例二提供的双目活体识别同一人脸框的人脸框预测模型的训练方法的实现流程，为了便于说明，仅示出了与本发明实施例相关的部分，详述如下：
S201：获取双目活体识别的工作距离区间，将该工作距离区间均分成若干等距的距离刻度。
在本发明实施例中，可以根据应用场景需求，设定双目活体识别的最小工作距离dmin，以及双目活体识别的最大工作距离为dmax，将该工作距离区间均分成n等分，得到到n+1个距离刻度
Figure GDA0002432796760000072
S202：在每个该距离刻度对应的RGB图像和NIR图像的重叠区域中，水平方向以预设的第一步长、垂直方向以预设的第二步长移动样本人脸，并获取移动一个步长后该样本人脸在RGB图像中的人脸框和在NIR图像中的人脸框，根据获取到的该样本人脸在RGB图像的人脸框和在NIR图像的人脸框生成人脸框样本集。
在本发明实施例中，在每个该距离刻度对应的RGB图像和NIR图像的重叠区域中，水平方向以预设的第一步长、垂直方向以预设的第二步长移动样本人脸，并获取水平方向或垂直方向移动一个步长后该样本人脸在RGB图像中的人脸框和在NIR图像中的人脸框，以从三个维度遍历双目活体识别的工作距离区间内的人脸框，进而得到该样本人脸在RGB图像中和NIR图像中的人脸框样本集。可以在距离刻度dm所在RBG图像和NIR图像的重叠区域中，水平方向以预设的第一步长、垂直方向以预设的第二步长从左上角将样本人脸移动至右下角，如图3所示的样本人脸移动过程示例，图3中ABCD表示RGB图像与NIR图像的图像重叠区域，AE为第一步长，AN为第二步长，AFIK为左上角样本人脸的人脸框，EGHJ为移动第一步长后的样本人脸的人脸框，NOML为移动第二步长后的样本人脸的人脸框，PQCR为移动至右下角的样本人脸的人脸框。
在水平方向或者垂直方向移动一个步长后，获取样本人脸在RBG图像和NIR图像的位置和大小，样本人脸在RBG图像中移动n个步长后在RGB图像中的人脸框的位置和大小用rgb_locn(xrgb,yrgb,wrgb,hrgb)表示，样本人脸在RBG图像中移动n个步长后在NIR图像中的人脸框的位置和大小用nir_locn(xnir,ynir,wnir,hnir)表示，其中，xrgb，yrgb和xnir、ynir分别表示RGB图像和NIR图像中的人脸框左上角的坐标，wrgb，hrgb和wnir、hnir分别表示RGB图像和NIR图像中的人脸框的宽和高，从而形成一个人脸框样本集locs1×n，locs1×n＝{{rgb_loc1,nir_loc1},{rgb_loc2,nir_loc2},…,{rgb_locn,nir_locn}}，其中，{rgb_locn,nir_locn}表示移动n个步长后得到的一组配对人脸框。
S203：根据该人脸框样本集对该人脸框预测模型进行训练，获得训练好的人脸框预测模型。
具体地，设定a(16k+4)×1＝(a0,a1,…,a16k+3)T，
Figure GDA0002432796760000091
将该人脸框预测模型转化为矩阵表示：nir_loc4×1＝b4×(16k+4)×a(16k+4)×1
对于locs1×n中所有的配对人脸框，设定
Figure GDA0002432796760000092
Figure GDA0002432796760000093
则有B4n×(16k+4)×a(16k+4)×1＝NIR_LOC4n×1。
对B4n×(16k+4)进行QR分解：B4n×(16k+4)＝Q4n×(16k+4)×R(16k+4)×(16k+4)，
则有Q4n×(16k+4)×R(16k+4)×(16k+4)×a(16k+4)×1＝NIR_LOC4n×1，
得到
Figure GDA0002432796760000094
作为最终的人脸框预测模型的系数，将该系数代入到人脸框预测模型，进而得到训练好的人脸框预测模型，从而通过最小二乘法求解得到该人脸实体在在RGB图像和NIR图像位置框的映射关系。
实施例三：
图4示出了本发明实施例三提供的双目活体识别同一人脸框的装置的结构，为了便于说明，仅示出了与本发明实施例相关的部分，其中包括：
人脸框获取单元41，用于对双目活体识别的RGB图像和NIR图像进行采样，获取第一人脸框和第二人脸框，该第一人脸框为RGB图像中的人脸框，该第二人脸框为NIR图像中的人脸框；
人脸框预测单元42，用于通过训练好的人脸框预测模型预测该第一人脸框对应的第三人脸框，该第三人脸框为预测到的NIR图像中的人脸框；以及
人脸确定单元43，用于计算该第三人脸框与该第二人脸框的重叠像素面积比，当该重叠像素面积比大于预设的面积比阈值时，确定该第一人脸框与该第二人脸框对应同一人脸实体。
优选地，该装置还包括：
距离刻度确定单元，用于获取双目活体识别的工作距离区间，将该工作距离区间均分成若干等距的距离刻度；
样本获取单元，用于在每个该距离刻度对应的RGB图像和NIR图像的重叠区域中，水平方向以预设的第一步长、垂直方向以预设的第二步长移动样本人脸，并获取移动一个步长后该样本人脸在RGB图像中的人脸框和在NIR图像中的人脸框，根据获取到的该样本人脸在RGB图像的人脸框和在NIR图像的人脸框生成人脸框样本集；以及
模型训练单元，用于根据该人脸框样本集对该人脸框预测模型进行训练，获得训练好的人脸框预测模型。
优选地，该人脸框预测模型为：
Figure GDA0002432796760000101
nir_loc4×1＝(xnir,ynir,wnir,hnir)T为该第三人脸框，其中，xnir、ynir表示该第三人脸框的坐标，wnir、hnir表示该第三人脸框的宽和高，xrgb、yrgb表示该第一人脸框的坐标，wrgb、hrgb表示该第一人脸框的宽和高；a为系数，k为常数。
优选地，该重叠像素面积比的计算方式为：
Figure GDA0002432796760000111
其中，ratio表示重叠像素面积比，area_real表示该第一人脸框的像素面积，area_predict表示该第三人脸框的像素面积，area_overlap表示该第二人脸框和该第三人脸框的重叠像素面积。
优选地，该面积比阈值为0.5。
在本发明实施例中，双目活体识别同一人脸框的装置的各单元可由相应的硬件或软件单元实现，各单元可以为独立的软、硬件单元，也可以集成为一个软、硬件单元，在此不用以限制本发明。双目活体识别同一人脸框的装置的各单元的具体实施方式可参考前述方法实施例的描述，在此不再赘述。
实施例四：
图5示出了本发明实施例四提供的双目活体识别设备的结构，为了便于说明，仅示出了与本发明实施例相关的部分。
本发明实施例的双目活体识别设备5包括处理器50、存储器51以及存储在存储器51中并可在处理器50上运行的计算机程序52。该处理器50执行计算机程序52时实现上述各方法实施例中的步骤，例如图1所示的步骤S101至S103。或者，处理器50执行计算机程序52时实现上述各装置实施例中各单元的功能，例如图4所示单元41至43的功能。
在本发明实施例中，通过对双目活体识别的RGB图像和NIR图像进行采样，获取第一人脸框和第二人脸框，该第一人脸框为RGB图像中的人脸框，该第二人脸框为NIR图像中的人脸框，通过训练好的人脸框预测模型预测该第一人脸框对应的第三人脸框，该第三人脸框为预测到的NIR图像中的人脸框，计算该第三人脸框与该第二人脸框的重叠像素面积比，当该重叠像素面积比大于预设的面积比阈值时，确定该第一人脸框与该第二人脸框对应同一人脸实体，从而提高了双目活体识别的准确率，进而提高了设备的安全性。
实施例五：
在本发明实施例中，提供了一种计算机可读存储介质，该计算机可读存储介质存储有计算机程序，该计算机程序被处理器执行时实现上述方法实施例中的步骤，例如，图1所示的步骤S101至S103。或者，该计算机程序被处理器执行时实现上述各装置实施例中各单元的功能，例如图4所示单元41至43的功能。
在本发明实施例中，通过对双目活体识别的RGB图像和NIR图像进行采样，获取第一人脸框和第二人脸框，该第一人脸框为RGB图像中的人脸框，该第二人脸框为NIR图像中的人脸框，通过训练好的人脸框预测模型预测该第一人脸框对应的第三人脸框，该第三人脸框为预测到的NIR图像中的人脸框，计算该第三人脸框与该第二人脸框的重叠像素面积比，当该重叠像素面积比大于预设的面积比阈值时，确定该第一人脸框与该第二人脸框对应同一人脸实体，从而提高了双目活体识别的准确率，进而提高了设备的安全性。
本发明实施例的计算机可读存储介质可以包括能够携带计算机程序代码的任何实体或装置、记录介质，例如，ROM/RAM、磁盘、光盘、闪存等存储器。
以上所述仅为本发明的较佳实施例而已，并不用以限制本发明，凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等，均应包含在本发明的保护范围之内。

Claims (9)

1.一种基于活体识别的同一人脸框确认方法，其特征在于，所述方法包括下述步骤：
从包含人脸框标识的RGB图像中获取第一人脸框，从包含人脸框标识的NIR图像中获取第二人脸框，所述RGB图像和所述NIR图像由同一双目摄像头拍摄得到；
通过训练好的人脸框预测模型预测所述第一人脸框在对应NIR图像中的对应第三人脸框；
计算所述第三人脸框与所述第二人脸框的重叠像素面积比，当所述重叠像素面积比大于预设的面积比阈值时，确定所述第一人脸框与所述第二人脸框对应同一活体人脸。
2.如权利要求1所述的方法，其特征在于，通过训练好的人脸框预测模型预测所述第一人脸框在对应NIR图像中的对应第三人脸框的步骤之前，包括：
获取所述双目摄像头的工作距离区间，将所述工作距离区间均分成若干等距的距离刻度；
在每个所述距离刻度对应的RGB图像和NIR图像的重叠区域中，水平方向以预设的第一步长、垂直方向以预设的第二步长移动样本人脸，并获取移动一个步长后所述样本人脸在RGB图像中的人脸框和在NIR图像中的人脸框，根据获取到的所述样本人脸在RGB图像的人脸框和在NIR图像的人脸框生成人脸框样本集；
根据所述人脸框样本集对所述人脸框预测模型进行训练，获得训练好的人脸框预测模型。
3.如权利要求1所述的方法，其特征在于，所述人脸框预测模型为：
Figure FDA0002382673940000021
nir_loc4×1＝(xnir,ynir,wnir,hnir)T，
其中，xrgb、yrgb表示RGB图像中人脸框的坐标，wrgb、hrgb表示RGB图像中人脸框的宽和高；xnir、ynir表示NIR图像中人脸框的坐标，wnir、hnir表示NIR图像中人脸框的宽和高，a为系数，k为常数，nir_loc4×1表示NIR图像中的人脸框。
4.如权利要求1所述的方法，其特征在于，所述重叠像素面积比的计算方式为：
Figure FDA0002382673940000022
其中，ratio表示重叠像素面积比，area_real表示所述第一人脸框的像素面积，area_predict表示所述第三人脸框的像素面积，area_overlap表示所述第二人脸框和所述第三人脸框的重叠像素面积。
5.如权利要求4所述的方法，其特征在于，所述面积比阈值为0.5。
6.一种基于活体识别的同一人脸框确认装置，其特征在于，所述装置包括：
人脸框获取单元，用于从包含人脸框标识的RGB图像中获取第一人脸框，从包含人脸框标识的NIR图像中获取第二人脸框，所述RGB图像和所述NIR图像由同一双目摄像头拍摄得到；
人脸框预测单元，用于通过训练好的人脸框预测模型预测所述第一人脸框在对应NIR图像中的对应第三人脸框；以及
人脸确定单元，用于计算所述第三人脸框与所述第二人脸框的重叠像素面积比，当所述重叠像素面积比大于预设的面积比阈值时，确定所述第一人脸框与所述第二人脸框对应同一活体人脸。
7.如权利要求6所述的装置，其特征在于，所述装置还包括：
距离刻度确定单元，用于获取所述双目摄像头的工作距离区间，将所述工作距离区间均分成若干等距的距离刻度；
样本获取单元，用于在每个所述距离刻度对应的RGB图像和NIR图像的重叠区域中，水平方向以预设的第一步长、垂直方向以预设的第二步长移动样本人脸，并获取移动一个步长后所述样本人脸在RGB图像中的人脸框和在NIR图像中的人脸框，根据获取到的所述样本人脸在RGB图像的人脸框和在NIR图像的人脸框生成人脸框样本集；以及
模型训练单元，用于根据所述人脸框样本集对所述人脸框预测模型进行训练，获得训练好的人脸框预测模型。
8.如权利要求6所述的装置，其特征在于，所述重叠像素面积比的计算方式为：
Figure FDA0002382673940000031
其中，ratio表示重叠像素面积比，area_real表示所述第一人脸框的像素面积，area_predict表示所述第三人脸框的像素面积，area_overlap表示所述第二人脸框和所述第三人脸框的重叠像素面积。
9.一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1至5任意一项所述方法的步骤。
CN201911278183.2A 2019-12-13 2019-12-13 双目活体识别同一人脸框的方法、装置、设备及存储介质 Active CN110705530B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201911278183.2A CN110705530B (zh) 2019-12-13 2019-12-13 双目活体识别同一人脸框的方法、装置、设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911278183.2A CN110705530B (zh) 2019-12-13 2019-12-13 双目活体识别同一人脸框的方法、装置、设备及存储介质

Publications (2)

Publication Number Publication Date
CN110705530A CN110705530A (zh) 2020-01-17
CN110705530B true CN110705530B (zh) 2020-05-15

Family

ID=69208098

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911278183.2A Active CN110705530B (zh) 2019-12-13 2019-12-13 双目活体识别同一人脸框的方法、装置、设备及存储介质

Country Status (1)

Country Link
CN (1) CN110705530B (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112132000B (zh) * 2020-09-18 2024-01-23 睿云联(厦门)网络通讯技术有限公司 一种活体检测方法、装置、计算机可读介质及电子设备
CN112580578B (zh) * 2020-12-28 2024-09-27 珠海亿智电子科技有限公司 双目活体摄像头人脸测距方法及系统
CN112836598A (zh) * 2021-01-18 2021-05-25 盛视科技股份有限公司 生物特征识别方法、装置及系统
CN113390515B (zh) * 2021-07-06 2023-03-28 新疆爱华盈通信息技术有限公司 基于双摄像头的多人移动测温方法

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107590430A (zh) * 2017-07-26 2018-01-16 百度在线网络技术（北京）有限公司 活体检测方法、装置、设备及存储介质
CN107992811A (zh) * 2017-11-27 2018-05-04 北京小米移动软件有限公司 人脸识别方法及装置
CN109002786B (zh) * 2018-07-06 2022-02-18 深圳市富士智能系统有限公司 人脸检测方法、设备及计算机可读存储介质
CN109543640B (zh) * 2018-11-29 2022-06-17 中国科学院重庆绿色智能技术研究院 一种基于图像转换的活体检测方法
CN109359634B (zh) * 2018-12-11 2021-11-16 西安第六镜网络科技有限公司 一种基于双目摄像机的人脸活体检测方法

Also Published As

Publication number Publication date
CN110705530A (zh) 2020-01-17

Similar Documents

Publication Publication Date Title
CN110705530B (zh) 双目活体识别同一人脸框的方法、装置、设备及存储介质
CN109508678B (zh) 人脸检测模型的训练方法、人脸关键点的检测方法和装置
US20210342990A1 (en) Image coordinate system transformation method and apparatus, device, and storage medium
WO2022000420A1 (zh) 人体动作识别方法、人体动作识别系统及设备
CN110232369B (zh) 一种人脸识别方法和电子设备
CN111783748B (zh) 人脸识别方法、装置、电子设备及存储介质
WO2021139494A1 (zh) 基于单目摄像头的动物体在线核赔方法、装置及存储介质
CN109948441B (zh) 模型训练、图像处理方法、装置、电子设备及计算机可读存储介质
JP2019117577A (ja) プログラム、学習処理方法、学習モデル、データ構造、学習装置、および物体認識装置
CN112200056B (zh) 人脸活体检测方法、装置、电子设备及存储介质
CN108875482B (zh) 物体检测方法和装置、神经网络训练方法和装置
JP2022133378A (ja) 顔生体検出方法、装置、電子機器、及び記憶媒体
CN112581540B (zh) 一种大场景下基于人体姿态估计的相机标定方法
CN112200157A (zh) 一种降低图像背景干扰的人体3d姿态识别方法及其系统
CN113642639A (zh) 活体检测方法、装置、设备和存储介质
CN105989363A (zh) 多角度人脸图片库的建立方法
CN112561986A (zh) 巡检机器人云台的二次对准方法、装置、设备和存储介质
EP3699865B1 (en) Three-dimensional face shape derivation device, three-dimensional face shape deriving method, and non-transitory computer readable medium
CN113243015B (zh) 视频监控系统
JP2018063675A (ja) 画像処理装置および制御方法
CN114549968B (zh) 目标检测方法、装置以及电子设备
CN112613457B (zh) 图像采集方式检测方法、装置、计算机设备和存储介质
JP2016206909A (ja) 情報処理装置、情報処理方法
CN113643363A (zh) 一种基于视频图像的行人定位及轨迹跟踪方法
JP7349290B2 (ja) 対象物認識装置、対象物認識方法、及び対象物認識プログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant