CN113239828A - 一种基于tof摄像模组的人脸识别方法及装置 - Google Patents

一种基于tof摄像模组的人脸识别方法及装置 Download PDF

Info

Publication number
CN113239828A
CN113239828A CN202110549373.4A CN202110549373A CN113239828A CN 113239828 A CN113239828 A CN 113239828A CN 202110549373 A CN202110549373 A CN 202110549373A CN 113239828 A CN113239828 A CN 113239828A
Authority
CN
China
Prior art keywords
image
channel depth
depth image
face recognition
camera module
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202110549373.4A
Other languages
English (en)
Other versions
CN113239828B (zh
Inventor
王好谦
李思奇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen International Graduate School of Tsinghua University
Original Assignee
Shenzhen International Graduate School of Tsinghua University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen International Graduate School of Tsinghua University filed Critical Shenzhen International Graduate School of Tsinghua University
Priority to CN202110549373.4A priority Critical patent/CN113239828B/zh
Publication of CN113239828A publication Critical patent/CN113239828A/zh
Application granted granted Critical
Publication of CN113239828B publication Critical patent/CN113239828B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/24—Classification techniques
    • G06F18/241—Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches
    • G06F18/2415—Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches based on parametric or probabilistic models, e.g. based on likelihood ratio or false acceptance rate versus a false rejection rate
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/24—Classification techniques
    • G06F18/24765—Rule-based classification
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00—Computing arrangements based on biological models
    • G06N3/02—Neural networks
    • G06N3/04—Architecture, e.g. interconnection topology
    • G06N3/045—Combinations of networks
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00—Computing arrangements based on biological models
    • G06N3/02—Neural networks
    • G06N3/04—Architecture, e.g. interconnection topology
    • G06N3/047—Probabilistic or stochastic networks
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00—Computing arrangements based on biological models
    • G06N3/02—Neural networks
    • G06N3/08—Learning methods
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/20—Image preprocessing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/20—Image preprocessing
    • G06V10/30—Noise filtering
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/168—Feature extraction; Face representation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172—Classification, e.g. identification
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/20—Image preprocessing
    • G06V10/24—Aligning, centring, orientation detection or correction of the image
    • G06V10/247—Aligning, centring, orientation detection or correction of the image by affine transforms, e.g. correction due to perspective effects; Quadrilaterals, e.g. trapezoids
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02A—TECHNOLOGIES FOR ADAPTATION TO CLIMATE CHANGE
    • Y02A90/00—Technologies having an indirect contribution to adaptation to climate change
    • Y02A90/10—Information and communication technologies [ICT] supporting adaptation to climate change, e.g. for weather forecasting or climate simulation

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Data Mining & Analysis (AREA)
  • General Health & Medical Sciences (AREA)
  • Multimedia (AREA)
  • Evolutionary Computation (AREA)
  • General Engineering & Computer Science (AREA)
  • Artificial Intelligence (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Mathematical Physics (AREA)
  • Computing Systems (AREA)
  • Biomedical Technology (AREA)
  • Biophysics (AREA)
  • Computational Linguistics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Molecular Biology (AREA)
  • Human Computer Interaction (AREA)
  • Software Systems (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Evolutionary Biology (AREA)
  • Probability & Statistics with Applications (AREA)
  • Image Processing (AREA)
  • Image Analysis (AREA)

Abstract

本发明提出一种基于TOF摄像模组的人脸识别方法及装置，所述人脸识别方法包括：使用TOF摄像模组获取被测人脸的彩色图像和对应的双通道深度图像；先对双通道深度图像进行预处理，然后判断被测人脸所处的天气状况；对双通道深度图像进行去噪；将双通道深度图像进行插值补齐处理，得到五通道深度图像；采集双通道深度图像中的人脸关键点，将五通道深度图像进行人脸矫正；根据判定的天气情况，进行不同的特征提取和人脸识别操作。上述人脸识别方法利用TOF可在红外线的时间域解释并获得光的传播路径判断人脸所处的天气状况以达到在雨雾天气也可以获得高精度的人脸识别结果。

Description

一种基于TOF摄像模组的人脸识别方法及装置
技术领域
本发明涉及人脸识别领域，特别是一种基于TOF摄像模组的人脸识别方法及装置。
背景技术
传统的人脸识别方法总有些许的局限性，如主成分分析算法面对潜在的非线性结构时会取得不理想的识别效果，而拉普拉斯特征图法虽然成功保留了非线性局部结构信息但是在应用到测试数据集中无法获得清晰的特征图等等。神经网络浪潮再次来临，卷积神经网络的大兴起非常成功地推动了人脸识别领域的大发展。如今，一些主流的二维人脸识别方法已经能够取得相当高的准确率，这些方法都是训练卷积神经网络提取可分辨的特征，将人脸映射到高维欧几里得空间中的特征向量，这些方法在较为理想的情况下都有十分好的人脸识别率，但是在雨雾天气等能见度较低的情况下RGB人脸识别很难克服只使用彩色相机带来的局限性。
另一方面随着Time of Flight(TOF)传感器逐渐体积减小重量减轻，越来越多的移动设备可以装载这种比较廉价的深度传感器，TOF可以提供很高精度的深度值，而且TOF自带红外发射器，可以应对各种光照条件，由于红外线频率低，所以透过雨雾烟的能力很强，在弱光环境、雨雾或烟等恶劣环境中也能使得识别工作具有相当高的稳定性。
如何将TOF摄像模组合理地应用于人脸识别，以提升能见度较低情况下的人脸识别率成为当前急需解决的技术问题。
发明内容
为了提高能见度较低情况下的人脸识别率，本发明提出一种基于TOF摄像模组的人脸识别方法及装置，适用于能见度较低的情况。
为此，本发明提出的基于TOF摄像模组的人脸识别方法具体包括以下步骤：
A1，获取TOF摄像模组采集的被测人脸的彩色图像和对应的双通道深度图像，双通道深度图像包括幅值图像和相位图像；
A2，对双通道深度图像进行预处理，根据TOF接收器接收到的红外线光强关于时间的变化情况，判断所述被测人脸所处的天气状况；
A3，对经过预处理的双通道深度图像进行去噪；
A4，将经过去噪的双通道深度图像进行插值,与彩色图像进行对齐，得到五通道深度图像，其中三个通道为彩色图像，两个通道分别为幅值图像和相位图像；
A5，采集双通道深度图像中的人脸关键点，将五通道深度图像进行人脸矫正，分别得到五个通道下的矫正人脸图像；
A6，当判定结果为天晴时，使用校正后的五通道深度图像进行特征提取，并使用五通道深度分类器进行人脸识别；
A7，当判定结果为雨雾天气时，使用校正后的双通道深度图像进行深度特征提取，并使用双通道深度分类器进行人脸识别。
进一步地，在所述步骤A2中，经矩阵运算解耦出判别条件，依据TOF摄像模组检测出的双通道深度图像强度随时间的连续特性，判断当前天气状况，设置一个较合适的阈值。
进一步地，在所述步骤A3中，所述对经过预处理的双通道深度图像进行去噪具体包括将幅值图像和相位图像经过连结输入到特征提取金字塔中，经过六层卷积神经网络金字塔的特征提取，每一个下面一层都是由上面一层经特征提取而来，所述特征提取金字塔每层连接一个残差回归模块，以生成右边的残差金字塔，所述残差金字塔经过上采样生成，与所述特征提取金字塔层层对应。
进一步地，在所述步骤A4中，使用PWC-Net将彩色图像与双通道深度图像中的幅值图像进行对齐，精准对齐后再使用双通道深度图像中的相位图像进行补偿。
进一步地，所述使用PWC-Net将彩色图像与双通道深度图像中的幅值图像进行对齐，精准对齐后再使用双通道深度图像中的相位图像进行补偿具体包括：
A41、使用代价体层处理彩色图像和深度幅值图像，使用代价体存储两帧图像之间对应像素的匹配而带来的代价；
A42、代价体经光流估计器进行特征提取，所述光流估计器是一个带有DenseNetconnections的六层金字塔卷积网络；
A43、进入相关语义网络，所述相关语义网络从光流估计器中获取从第二层到最后一层的信息，然后使用小型UNet将深度相位图像输入刚刚生成的四通道对齐图像进行补偿，得到精准对齐后的五通道深度图像。
进一步地，所述五通道深度分类器和所述双通道深度分类器中的损失函数可使用Softmax损失函数、Center损失函数和Attribute-aware损失函数中的一种或多种。
本发明提出的基于TOF摄像模组的人脸识别装置包括TOF摄像模组、存储器和处理器，所述存储器上存储有程序，所述程序在被所述处理器运行时能够实现上述的基于TOF摄像模组的人脸识别方法。
本发明提出的计算机存储介质存储有能够被处理器运行的程序，所述程序在被所述处理器运行时能够实现上述的基于TOF摄像模组的人脸识别方法。
相对于现有技术，本发明具有如下有益效果：
利用TOF摄像模组可在红外线的时间域解释并获得光的传播路径判断人脸所处的天气状况，根据不同的天气状况使用不同的数据模式，完成不同天气状况下的人脸识别。
在本发明的一些实施例中，还具有如下有益效果：
优化了TOF深度图像与幅值图像的降噪过程；
人脸的矫正虽然是矫正三通道图像，但是主要依据于深度图像；
首次将PWC-Net应用于RGB图像与深度图像的对齐。
附图说明
图1是基于TOF摄像模组的人脸识别方法的流程图；
图2是利用空间层次感知残差金字塔网络去噪的流程图；
图3是利用PWC-Net进行图形对齐的流程图。
具体实施方式
为了对本发明的技术特征、目的和效果有更加清楚的理解，现对照附图说明本发明的具体实施方式。
如图1所示，基于TOF摄像模组的人脸识别方法具体包括以下步骤：
A1，获取使用TOF摄像模组采集的被测人脸的彩色图像IRGB和对应的双通道深度图像，双通道深度图像包括幅值图像IToF_0和相位图像DToF_0。
A2，先对双通道深度图像进行预处理，去除边缘效应等TOF摄像模组自带的一部分系统误差，然后根据TOF接收器接收到的红外线光强关于时间的变化情况，判断被测人脸所处的天气状况：在单一的晴好天气状况下，空气中的雨雾烟含量较低，TOF的瞬态时间成像，会在单次反射光线具有的最短传输时间处形成单一的非零相应；在雨雾、雾霾天气下，由于存在连续深度的散射、反射，最后接收器接收到的反射光强是由目标表面反射的一个较强的辐射值和连续的散射、反射形成的光强，相应较为连续。经矩阵运算解耦出判别条件，依据TOF摄像模组检测出的双通道深度图像强度随时间的连续特性，判断当前天气状况，设置一个较合适的阈值。
A3，对双通道深度图像进行去噪，受多路径干扰、散粒噪声等的影响，TOF会有很大的误差，传统方法的去噪很难解决非线性变换等带来的问题，本发明采用卷积神经网络方法进行去噪，已有的方法有包括使用FCN网络、U-net网络等对图像进行特征提取，再上采样进行去噪，如图2所示，本发明采用空间层次感知残差金字塔网络充分利用场景的空间变换带来的几何信息，将TOF的幅值图像IToF和相位图像DToF经过连结(concatenate)输入到特征提取金字塔中，经过六层卷积神经网络金字塔的特征提取，每一个下面一层都是由上面一层经特征提取而来，大部分的特征提取金字塔网络都是取6层，该特征提取金字塔每层连结一个残差回归模块，以生成右边的残差金字塔，是经过上采样(双三次插值)生成依旧是6层与特征提取金字塔层层对应的残差金字塔，虽然这个残差金字塔的最上层包含下面所有层的信息，但是卷积操作后来自下面的信息可能会丢失，于是指定这样一个上采样规则，使用低一层的残差金字塔图像经双三次插值使采样频率与该层残差金字塔相同，将得到的图像和与其对应层的特征提取金字塔图像连结在一起，经神经网络特征提取得到该层残差金字塔，使每一层的残差金字塔同时提取到下一层而来的信息和本层原本的信息，这样较低分辨率的层描绘了大尺寸的深度噪声，较高分辨率的层描绘了局部结构中存在的深度噪声，这样得到了对于多路径干扰等噪声的残差金字塔，就得到了去噪后的深度图像，经验证空间层次感知残差金字塔网络比U-Net网络等的去噪精度有明显提升。
A4，将双通道深度图像进行插值,与RGB图像进行对齐，使用PWC-Net将RGB图像与双通道深度图像中的幅值图像进行对齐，精准对齐后再使用双通道深度图像中的相位图像进行补偿，得到五通道深度图像，其中三个通道为RGB图像，两个通道分别为幅值图像和相位图像，如图3所示，PWC-Net的主要步骤包括：
(1)使用代价体层(Cost Volume layer)处理RGB图像和深度幅值图像，使用代价体(Cost Volume)存储两帧图像之间对应像素的匹配而带来的代价，计算方法为：
Figure BDA0003074815260000041
T代表转置，N是Colume vector c1(IRGB)的长度；
(2)代价体经光流估计器(optical flow estimator)进行特征提取，光流估计器是一个带有DenseNet connections的六层金字塔卷积网络，金字塔型的特征提取器能够使特征提取的效果达到更高，同时也是本发明的主要创新点之一；
(3)进入相关语义网络(Context Net)，这是一个上采样的过程，相关语义网络从光流估计器中获取从第二层到最后一层的信息，有7个卷积层，每个卷积层的空间核的大小都是3*3，从最底层到上面的膨胀系数分别为1，2，4，8，16，1，1.相关语义网络能够有效地扩大每一个输出单元的感受野，然后使用小型UNet将深度相位图像连结进入刚刚生成的四通道对齐图像进行补偿，得到精准对齐后的五通道深度图像。
A5，采集双通道深度图像中的人脸关键点，考虑到不同天气状况下的RGB信息可能对人脸矫正部分带来错误信息，所以使用双通道深度图像中两个通道进行人脸矫正所要进行的变换对五通道深度图像进行这个变换，分别得到五个通道下经过同样变换的矫正人脸图像。
A6，当判定结果为天晴时，使用校正后的五通道深度图像进行特征提取，并使用五通道深度分类器进行人脸识别，其中损失函数可使用Softmax Loss+Center Loss+Attribute-aware Loss，将RGB图像输入Resnet中进行训练，提取并融合人脸特征最后得人脸识别结果；
Softmax loss function使用：
Figure BDA0003074815260000051
其中x为训练的数据集，y是相应的标签，f()是要学习的特征映射，K是深度特征f(xi)的维度，b是权重和偏差；
Center loss function使用：
Figure BDA0003074815260000052
Center loss使每一个类的深度特征聚集到他们的中心c；
Attribute-aware Loss function除了面部形状的接近性以外，学习到的特征映射与性别、种族、年龄有关，就是希望一张图片进入图像库比对的时候返回的图像这些面部特征以外的特征也是相似的，这样就将人脸识别这个任务扩增了三个维度，使用：
Figure BDA0003074815260000053
其中G是要训练的参数矩阵，T是一个可以用户设定的阈值；
这个损失可以将特征差异和属性差异联系起来，通过一个全局线性映射G驱动带有相似属性的簇朝着彼此前进。
A7，当判定结果为雨雾天气时，使用校正后的双通道深度图像进行深度特征提取，并使用双通道深度分类器进行人脸识别，双通道深度分类器拟采用与以上相同的损失函数，但是由于通道数大大减少，数据的减少，会更快捷，同时避免经多次散射反射RGB图像带来的无意义数据对特征提取带来影响。
本发明同时提出一种基于TOF摄像模组的人脸识别装置包括TOF摄像模组、存储器和处理器，所述存储器上存储有程序，所述程序在被所述处理器运行时能够实现上述的基于TOF摄像模组的人脸识别方法。
本发明同时提出一种计算机存储介质存储有能够被处理器运行的程序，所述程序在被所述处理器运行时能够实现上述的基于TOF摄像模组的人脸识别方法。
本发明利用TOF摄像模组可在红外线的时间域解释并获得光的传播路径判断人脸所处的天气状况，根据不同的天气状况使用不同的数据模式，优化了TOF深度图像与幅值图像的降噪过程，将双通道深度图像与RGB图像对齐并依据双通道深度图像检测出的人脸关键点将五通道深度图像中五个通道的数据同时做人脸矫正，并首次将PWC-Net应用于RGB图像与双通道深度图像的对齐，在不同天气状况下使用五通道深度图像或双通道深度图像进行人脸特征提取，完成不同天气状况下的人脸识别。这种方法能实现应对不同天气，非常稳定且精确度非常高的人脸识别，并能够应用到各种小巧的便携式移动端上。
以上所揭露的仅为本发明较佳实施例而已，当然不能以此来限定本发明之权利范围。应当指出，对于本技术领域的技术人员，在不脱离本发明设计结构及原理的前提下对本发明方案所作的等同变化都视作本发明的保护范围。

Claims (8)

1.一种基于TOF摄像模组的人脸识别方法，适用于能见度较低的情况，其特征在于,包括以下步骤：
A1，获取TOF摄像模组采集的被测人脸的彩色图像和对应的双通道深度图像，双通道深度图像包括幅值图像和相位图像；
A2，对双通道深度图像进行预处理，根据TOF接收器接收到的红外线光强关于时间的变化情况，判断所述被测人脸所处的天气状况；
A3，对经过预处理的双通道深度图像进行去噪；
A4，将经过去噪的双通道深度图像进行插值,与彩色图像进行对齐，得到五通道深度图像，其中三个通道为彩色图像，两个通道分别为幅值图像和相位图像；
A5，采集双通道深度图像中的人脸关键点，将五通道深度图像进行人脸矫正，分别得到五个通道下的矫正人脸图像；
A6，当判定结果为天晴时，使用校正后的五通道深度图像进行特征提取，并使用五通道深度分类器进行人脸识别；
A7，当判定结果为雨雾天气时，使用校正后的双通道深度图像进行深度特征提取，并使用双通道深度分类器进行人脸识别。
2.根据权利要求1所述的基于TOF摄像模组的人脸识别方法，其特征在于，在所述步骤A2中，经矩阵运算解耦出判别条件，依据TOF摄像模组检测出的双通道深度图像强度随时间的连续特性，判断当前天气状况，设置一个较合适的阈值。
3.根据权利要求1所述的基于TOF摄像模组的人脸识别方法，其特征在于，在所述步骤A3中，所述对经过预处理的双通道深度图像进行去噪具体包括将幅值图像和相位图像经过连结输入到特征提取金字塔中，经过六层卷积神经网络金字塔的特征提取，每一个下面一层都是由上面一层经特征提取而来，所述特征提取金字塔每层连接一个残差回归模块，以生成右边的残差金字塔，所述残差金字塔经过上采样生成，与所述特征提取金字塔层层对应。
4.根据权利要求1所述的基于TOF摄像模组的人脸识别方法，其特征在于，在所述步骤A4中，使用PWC-Net将彩色图像与双通道深度图像中的幅值图像进行对齐，精准对齐后再使用双通道深度图像中的相位图像进行补偿。
5.根据权利要求4所述的基于TOF摄像模组的人脸识别方法，其特征在于，所述使用PWC-Net将彩色图像与双通道深度图像中的幅值图像进行对齐，精准对齐后再使用双通道深度图像中的相位图像进行补偿具体包括：
A41、使用代价体层处理彩色图像和深度幅值图像，使用代价体存储两帧图像之间对应像素的匹配而带来的代价；
A42、代价体经光流估计器进行特征提取，所述光流估计器是一个带有DenseNetconnections的六层金字塔卷积网络；
A43、进入相关语义网络，所述相关语义网络从光流估计器中获取从第二层到最后一层的信息，然后使用小型UNet将深度相位图像输入刚刚生成的四通道对齐图像进行补偿，得到精准对齐后的五通道深度图像。
6.根据权利要求1所述的基于TOF摄像模组的人脸识别方法，其特征在于，所述五通道深度分类器和所述双通道深度分类器中的损失函数可使用Softmax损失函数、Center损失函数和Attribute-aware损失函数中的一种或多种。
7.一种基于TOF摄像模组的人脸识别装置，其特征在于，包括TOF摄像模组、存储器和处理器，所述存储器上存储有程序，所述程序在被所述处理器运行时能够实现如权利要求1-6中任一项所述的基于TOF摄像模组的人脸识别方法。
8.一种计算机存储介质，其特征在于，存储有能够被处理器运行的程序，所述程序在被所述处理器运行时能够实现如权利要求1-6中任一项所述的基于TOF摄像模组的人脸识别方法。
CN202110549373.4A 2021-05-20 2021-05-20 一种基于tof摄像模组的人脸识别方法及装置 Active CN113239828B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110549373.4A CN113239828B (zh) 2021-05-20 2021-05-20 一种基于tof摄像模组的人脸识别方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110549373.4A CN113239828B (zh) 2021-05-20 2021-05-20 一种基于tof摄像模组的人脸识别方法及装置

Publications (2)

Publication Number Publication Date
CN113239828A true CN113239828A (zh) 2021-08-10
CN113239828B CN113239828B (zh) 2023-04-07

Family

ID=77137762

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110549373.4A Active CN113239828B (zh) 2021-05-20 2021-05-20 一种基于tof摄像模组的人脸识别方法及装置

Country Status (1)

Country Link
CN (1) CN113239828B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113837105A (zh) * 2021-09-26 2021-12-24 北京的卢深视科技有限公司 人脸识别方法、系统、电子设备及存储介质
CN116704571A (zh) * 2022-09-30 2023-09-05 荣耀终端有限公司 人脸识别方法、电子设备及可读存储介质

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107506752A (zh) * 2017-09-18 2017-12-22 艾普柯微电子（上海）有限公司 人脸识别装置及方法
CN109934112A (zh) * 2019-02-14 2019-06-25 青岛小鸟看看科技有限公司 一种人脸对齐方法和相机
CN110376602A (zh) * 2019-07-12 2019-10-25 深圳奥比中光科技有限公司 多模式深度计算处理器及3d图像设备
CN110458041A (zh) * 2019-07-19 2019-11-15 国网安徽省电力有限公司建设分公司 一种基于rgb-d相机的人脸识别方法及系统
CN111368581A (zh) * 2018-12-25 2020-07-03 浙江舜宇智能光学技术有限公司 基于tof摄像模组的人脸识别方法、人脸识别装置和电子设备
CN111401174A (zh) * 2020-03-07 2020-07-10 北京工业大学 一种基于多模态信息融合的排球群体行为识别方法
CN112232324A (zh) * 2020-12-15 2021-01-15 杭州宇泛智能科技有限公司 人脸验伪方法、装置、计算机设备和存储介质
CN112766062A (zh) * 2020-12-30 2021-05-07 河海大学 一种基于双流深度神经网络的人体行为识别方法

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107506752A (zh) * 2017-09-18 2017-12-22 艾普柯微电子（上海）有限公司 人脸识别装置及方法
CN111368581A (zh) * 2018-12-25 2020-07-03 浙江舜宇智能光学技术有限公司 基于tof摄像模组的人脸识别方法、人脸识别装置和电子设备
CN109934112A (zh) * 2019-02-14 2019-06-25 青岛小鸟看看科技有限公司 一种人脸对齐方法和相机
CN110376602A (zh) * 2019-07-12 2019-10-25 深圳奥比中光科技有限公司 多模式深度计算处理器及3d图像设备
CN110458041A (zh) * 2019-07-19 2019-11-15 国网安徽省电力有限公司建设分公司 一种基于rgb-d相机的人脸识别方法及系统
CN111401174A (zh) * 2020-03-07 2020-07-10 北京工业大学 一种基于多模态信息融合的排球群体行为识别方法
CN112232324A (zh) * 2020-12-15 2021-01-15 杭州宇泛智能科技有限公司 人脸验伪方法、装置、计算机设备和存储介质
CN112766062A (zh) * 2020-12-30 2021-05-07 河海大学 一种基于双流深度神经网络的人体行为识别方法

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
DEQING SUN ET AL: "PWC-Net: CNNs for Optical Flow Using Pyramid, Warping, and Cost Volume", 《2018 IEEE/CVF CONFERENCE ON COMPUTER VISION AND PATTERN RECOGNITION》 *
XIAOYU CHEN ET AL: "Residual Pyramid Learning for Single-Shot", 《ARXIV》 *
陈振浚 等: "基于深度传感的人脸识别算法研究与实现", 《自动化应用 人工智能与机器人》 *

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113837105A (zh) * 2021-09-26 2021-12-24 北京的卢深视科技有限公司 人脸识别方法、系统、电子设备及存储介质
CN116704571A (zh) * 2022-09-30 2023-09-05 荣耀终端有限公司 人脸识别方法、电子设备及可读存储介质

Also Published As

Publication number Publication date
CN113239828B (zh) 2023-04-07

Similar Documents

Publication Publication Date Title
CN109299274B (zh) 一种基于全卷积神经网络的自然场景文本检测方法
CN108009559B (zh) 一种基于空谱联合信息的高光谱数据分类方法
CN109636742B (zh) 基于对抗生成网络的sar图像和可见光图像的模式转换方法
CN108427924B (zh) 一种基于旋转敏感特征的文本回归检测方法
WO2016062159A1 (zh) 图像匹配方法及手机应用测试平台
CN110866871A (zh) 文本图像矫正方法、装置、计算机设备及存储介质
CN110059728B (zh) 基于注意力模型的rgb-d图像视觉显著性检测方法
CN111401384A (zh) 一种变电设备缺陷图像匹配方法
CN113239828B (zh) 一种基于tof摄像模组的人脸识别方法及装置
CN104200461A (zh) 基于互信息图像选块和sift特征的遥感图像配准方法
CN112434745A (zh) 基于多源认知融合的遮挡目标检测识别方法
CN109376641A (zh) 一种基于无人机航拍视频的运动车辆检测方法
CN110310305B (zh) 一种基于bssd检测与卡尔曼滤波的目标跟踪方法与装置
CN110895683B (zh) 一种基于Kinect的单视点手势姿势识别方法
CN115061769B (zh) 用于支持跨分辨率的自迭代rpa界面元素匹配方法及系统
CN111126494A (zh) 基于各向异性卷积的图像分类方法及系统
CN110793529B (zh) 一种快速匹配星图识别方法
CN112861785A (zh) 一种基于实例分割和图像修复的带遮挡行人重识别方法
US20110200229A1 (en) Object Detecting with 1D Range Sensors
CN113989604A (zh) 基于端到端深度学习的轮胎dot信息识别方法
Babu et al. An efficient image dahazing using Googlenet based convolution neural networks
CN117351078A (zh) 基于形状先验的目标尺寸与6d姿态估计方法
CN110070626B (zh) 一种基于多视角分类的三维物体检索方法
CN116188361A (zh) 一种基于深度学习的铝型材表面缺陷分类方法及装置
CN112926552B (zh) 基于深度神经网络的遥感影像车辆目标识别模型及方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant