CN113255401A - 3d人脸摄像装置 - Google Patents

3d人脸摄像装置 Download PDF

Info

Publication number
CN113255401A
CN113255401A CN202010084734.8A CN202010084734A CN113255401A CN 113255401 A CN113255401 A CN 113255401A CN 202010084734 A CN202010084734 A CN 202010084734A CN 113255401 A CN113255401 A CN 113255401A
Authority
CN
China
Prior art keywords
face
living body
image
recognition
face image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202010084734.8A
Other languages
English (en)
Inventor
陈荡荡
段兴
李宏彬
朱力
吕方璐
汪博
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Guangjian Technology Co Ltd
Original Assignee
Shenzhen Guangjian Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Guangjian Technology Co Ltd filed Critical Shenzhen Guangjian Technology Co Ltd
Priority to CN202010084734.8A priority Critical patent/CN113255401A/zh
Publication of CN113255401A publication Critical patent/CN113255401A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161—Detection; Localisation; Normalisation
    • G06V40/166—Detection; Localisation; Normalisation using acquisition arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172—Classification, e.g. identification
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/40—Spoof detection, e.g. liveness detection
    • G06V40/45—Detection of the body part being alive

Landscapes

  • Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Image Analysis (AREA)
  • Collating Specific Patterns (AREA)

Abstract

本发明提供了一种3D人脸摄像装置，包括：图像采集模块，用于采集目标人脸的人脸图像，人脸图像包括RGB人脸图像、红外人脸图像以及深度人脸图像中的任一种或任多种；活体识别模块，用于对人脸图像进行活体识别，生成活体识别结果且当人脸图像通过活体识别时触发人脸识别模块；人脸识别模块，用于对人脸图像进行人脸识别，生成人脸识别结果；信息输出模块，用于将人脸图像、活体识别结果和人脸识别结果中的任一或任多输出。本发明中将活体识别模块、人脸识别模块以及图像采集模块集成于一体，形成能够与多个终端设备相匹配的3D人脸摄像装置，实现即插即用，打通3D人脸识别多种解决方案，形成3D人脸识别相关产品，并推广到门锁、门禁和支付等领域。

Description

3D人脸摄像装置
技术领域
本发明涉及人脸识别系统，具体地，涉及一种3D人脸摄像装置。
背景技术
2014年，深度学习首次应用在人脸识别领域，展示了强大的特征学习能力，将LFW(Labeled Faces in the Wild)识别准确率从94％提升到97％，大幅超越了经典的人脸识别方法。随着相关深度学习理论的发展，以及大规模人脸数据的驱动，人脸识别的准确率继续攀升，很快突破99.8％大关，预示着人脸识别算法趋于成熟，并迅速的商业应用落地。目前人脸识别技术广泛应用于安防、自助通关、医疗、教育、户政和支付等领域。
在用基于深度学习的人脸识别系统中，输入是2D RGB或者IR图像，在可控场景下能够取得很好的人脸识别效果。但是受光照、人脸姿态和人脸表情变化等影响，人脸识别准确率在黑暗、逆光等情况下迅速下降；并且基于2D图像的人脸识别系统在抗假体(假脸)攻击方面存在很大的风险，影响了人脸识别在门锁、金融支付等场景的应用推广。
3D摄像模组拓宽了前端感知的维度，能够很好的解决2D人脸识别遇到的抗假体攻击和极端情况下识别准确率降低的问题，效果得到了市场的认可，需求强烈。
目前市场能够完成3D人脸识别解决方案的已知公司包括支付宝、微信和云从等，具有非常高的技术和资源门槛。这些公司根据自身的需求打造终端解决方案，但不提供公版模组，远不能满足门锁、门禁和银联支付等场景对3D人脸识别的强烈需求。因此，需要提供一种对于打通3D人脸识别的解决方案，能够应用于3D人脸识别相关产品，并逐渐推广到门锁、门禁和支付等领域。
发明内容
针对现有技术中的缺陷，本发明的目的是提供一种3D人脸摄像装置。
根据本发明提供的3D人脸摄像装置，包括：
图像采集模块，用于采集目标人脸的人脸图像，所述人脸图像包括RGB人脸图像、红外人脸图像以及深度人脸图像中的任一种或任多种；
活体识别模块，用于对所述人脸图像进行活体识别，生成活体识别结果且当所述人脸图像通过活体识别时触发人脸识别模块；
所述人脸识别模块，用于对所述人脸图像进行人脸识别，生成人脸识别结果；
信息输出模块，用于将所述人脸图像、所述活体识别结果和所述人脸识别结果中的任一或任多输出。
优选地，所述图像采集模块、所述活体识别模块、所述人脸识别模块以及所述信息输出模块封装成一体结构；
所述信息输出模块，用于将所述人脸图像、所述活体识别结果和所述人脸识别结果中的任一或任多输出至任意终端设备。
优选地，所述图像采集模块包括第一计算单元、激光散斑投射器以及红外探测器；所述激光散斑投射器和所述红外探测器电连接所述第一计算单元；
所述激光散斑投射器，用于向目标人脸投射散斑状的红外光束；
所述红外探测器，用于采集目标人脸反射红外光束形成的光斑图案；
所述第一计算单元，用于获取所述光斑图像，并进而根据所述光斑图案的形变或位移计算生成所述目标人脸的深度人脸图像。
优选地，所述图像采集模块包括第二计算单元、光投射器以及TOF传感器；所述光投射器、所述RGB摄像模组以及所述红外摄像模组电连接所述第二计算单元；
所述光投射器，用于向目标人脸投射红外泛光；
所述TOF传感器，用于接收目标人脸反射的红外泛光，生成多张红外人脸图像；
所述第二计算单元，用于根据预设置的采集周期内多张红外人脸图像的相位差计算生成所述目标人脸表面的深度图像。
优选地，所述信息输出模块包括USB端口；
所述USB端口一方面连接所述图像采集模块中第一计算单元或第二计算单元，另一方面用于连接至任意终端设备，以将所述人脸图像、所述活体识别结果和所述人脸识别结果中的任一或任多输出至所述终端设备。
优选地，所述图像采集模块还包括RGB摄像模组；
所述RGB摄像模组，用于采集所述目标人脸的RGB人脸图像；
所述活体识别模块，用于对所述RGB人脸图像进行活体识别，生成活体识别结果且当所述人脸图像通过活体识别时触发人脸识别模块；
所述人脸识别模块，用于对所述RGB人脸图像进行人脸识别，生成人脸识别结果。
优选地，所述图像采集模块还包括LED泛光光源；
所述LED泛光光源，用于向所述目标人脸投射泛光光束；
所述红外探测器，用于采集目标人脸反射泛光光束形成的红外人脸图像；
所述活体识别模块，用于对所述红外人脸图像进行活体识别，生成活体识别结果且当所述人脸图像通过活体识别时触发人脸识别模块；
所述人脸识别模块，用于对所述红外人脸图像进行人脸识别，生成人脸识别结果。
优选地，所述信息输出模块还设置有安全加密芯片；
所述安全加密芯片，用于所述人脸图像、所述活体识别结果以及所述人脸识别结果的加密处理；
所述信息输出模块，用于与所述终端设备之间进行所述人脸图像、所述活体识别结果以及所述人脸识别结果的加密传输。
优选地，所述活体识别模块通过预设置的活体检测模型在进行活体人脸识别，所述活体检测模型的训练包括如下步骤：
步骤M1：采集多张人脸图像，对每一所述人脸图像进行关键点检测，确定多个人脸关键点；
步骤M2：将所述人脸图像进行归一化至预设定的尺寸生成预处理人脸图像，并在所述预处理图像中获取每一人脸关键点的位置；
步骤M3：在每一所述预处理人脸图像中选取多个人脸关键点，且以选择出的所述人脸关键点为中心截取至多个ROI区域，所述ROI区域包括人脸图像中的左眼区域、右眼区域、鼻尖区域以及嘴部区域中任一区域多任多区域；
步骤M4：将每一所述预处理人脸图像对应的ROI区域合成一训练数据，根据所述训练数据训练生成所述活体检测模型。
优选地，所述活体检测模型包括基于RGB人脸图像训练生成的第一活体检测模型、基于红外人脸图像训练生成的第二活体检测模型以及基于深度人脸图像训练生成的第三活体检测模型；
当进行活体人脸识别时，通过所述第一活体检测模型、第二活体检测模型以及第三活体检测模型中任一模型或任多模型进行活体人脸识别；
在通过多个活体检测模型进行活体识别时，仅当多个活体检测模型均判定为活体人脸时，则判定该人脸图像为活体人脸。
与现有技术相比，本发明具有如下的有益效果：
在本发明中将活体识别模块、人脸识别模块以及图像采集模块集成于一体，形成一能够与多个终端设备相匹配的3D人脸摄像装置，实现即插即用，打通3D人脸识别多种解决方案，形成3D人脸识别相关产品，并逐渐推广到门锁、门禁和支付等领域应用。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图获得其他的附图。通过阅读参照以下附图对非限制性实施例所作的详细描述，本发明的其它特征、目的和优点将会变得更明显：
图1为本发明实施例中3D人脸摄像装置的模块示意图；
图2为本发明实施例中图像采集模块的模块示意图；
图3为本发明变形例中图像采集模块的模块示意图；
图4为本发明实施例中信息输出模块的模块示意图；
图5为本发明实施例中进行活体人脸识别时的步骤流程图；
图6为本发明实施例中3D人脸摄像装置应用于门锁系统的示意图；
图7为本发明实施例中3D人脸摄像装置应用于人脸识别支付系统的示意图。
具体实施方式
下面结合具体实施例对本发明进行详细说明。以下实施例将有助于本领域的技术人员进一步理解本发明，但不以任何形式限制本发明。应当指出的是，对本领域的普通技术人员来说，在不脱离本发明构思的前提下，还可以做出若干变形和改进。这些都属于本发明的保护范围。
本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”、“第四”等(如果存在)是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本发明的实施例，例如能够以除了在这里图示或描述的那些以外的顺序实施。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
下面以具体地实施例对本发明的技术方案进行详细说明。下面这几个具体的实施例可以相互结合，对于相同或相似的概念或过程可能在某些实施例不再赘述。
本发明提供的3D人脸摄像装置，旨在解决现有技术中存在的问题。
下面以具体地实施例对本发明的技术方案以及本申请的技术方案如何解决上述技术问题进行详细说明。下面这几个具体的实施例可以相互结合，对于相同或相似的概念或过程可能在某些实施例中不再赘述。下面将结合附图，对本发明的实施例进行描述。
图1为本发明实施例中3D人脸摄像装置的示意图，如图1所示，本发明提供的3D人脸摄像装置，包括：
图像采集模块，用于采集目标人脸的人脸图像，所述人脸图像包括RGB人脸图像、红外人脸图像以及深度人脸图像中的任一种或任多种；
活体识别模块，用于对所述人脸图像进行活体识别，生成活体识别结果且当所述人脸图像通过活体识别时触发人脸识别模块；
所述人脸识别模块，用于对所述人脸图像进行人脸识别，生成人脸识别结果；
信息输出模块，用于将所述人脸图像、所述活体识别结果和所述人脸识别结果中的任一或任多输出。
在本发明实施例中，将活体识别模块、人脸识别模块以及图像采集模块集成于一体，形成一能够与多个终端设备相匹配的3D人脸摄像装置，实现即插即用，打通3D人脸识别多种解决方案，形成3D人脸识别相关产品，并逐渐推广到门锁、门禁和支付等领域应用。
在本发明实施例中，所述图像采集模块、所述活体识别模块、所述人脸识别模块以及所述信息输出模块封装成一体结构；所述活体识别模块、所述人脸识别模块的识别可以通过预设置的处理器进行执行。
所述信息输出模块，用于将所述人脸图像、所述活体识别结果和所述人脸识别结果中的任一或任多输出至任意终端设备。
所述终端设备包括支付系统、门锁系统、手机终端、计算机以及平板电脑等电子设备或智能装置。
图2为本发明实施例中3D人脸识别模块的示意图，如图2所示，所述3D人脸识别模块包括第一计算单元、激光散斑投射器以及红外探测器；所述激光散斑投射器和所述红外探测器电连接所述计算单元；
所述激光散斑投射器，用于向目标人脸投射散斑状的红外光束；
所述红外探测器，用于采集目标人脸反射红外光束形成的光斑图案；
所述第一计算单元，用于获取所述光斑图像，并进而根据所述光斑图案的形变或位移计算生成所述目标人脸的深度人脸图像。
在本发明实施例中，所述3D人脸识别模块采用结构光的方法进行深度人脸图像的获取，并将第一计算单元前置，使得所述第一计算单元能够快速获取光斑图案，实现深度图像的快速计算，且也便于所述3D人脸识别模块与其他终端设备的快速匹配连接。
在本发明实施例，还可以在所述3D人脸识别模块中设置第一接近传感器，当第一接近传感器检测到人脸过于靠近3D人脸识别模块时，如低于15厘米时，控制所述激光散斑投射器关闭。
图3为本发明变形例中3D人脸识别模块的示意图，如图3所示，所述3D人脸识别模块包括第二计算单元、光投射器以及TOF传感器；所述光投射器、所述RGB摄像模组以及所述红外摄像模组电连接所述计算单元；
所述光投射器，用于向目标人脸投射红外泛光；
所述TOF传感器，用于接收目标人脸反射的红外泛光，生成多张红外人脸图像；
所述第二计算单元，用于根据预设置的采集周期内多张红外人脸图像的相位差计算生成所述目标人脸表面的深度图像。
在本发明变形例中，所述3D人脸识别模块采用飞行时间方法计算目标人脸表面的深度图像从而能够适应距离较大时的深度图像的采集。
在本发明实施例中，所述第一计算单元和所述第二计算单元采用i.MX8M mini处理器。所述i.MX8M mini处理器还能够运行所述活体识别模块和所述人脸识别模块的对应的程序模块。
在本发明实施例中或变形例中，所述3D人脸识别模块还包括RGB摄像模组和LED泛光光源；
所述RGB摄像模组，用于采集所述目标人脸的RGB人脸图像；
所述LED泛光光源，用于向所述目标人脸投射泛光光束；
所述红外探测器，用于采集目标人脸反射泛光光束形成的红外人脸图像；
所述活体识别模块，用于对所述红外人脸图像进行活体识别，生成活体识别结果且当所述人脸图像通过活体识别时触发人脸识别模块；
所述人脸识别模块，用于对所述红外人脸图像进行人脸识别，生成人脸识别结果。
在本发明实施例中，所述第一计算单元或第二计算单元，用于识别所述红外人脸图像或所述RGB人脸图像是否为活体，且在活体识别结果为活体时判断所述红外人脸图像或所述RGB人脸图像是否为预设置的白名单人脸。在进行人脸识别时可以通过预训练的人脸识别模型进行识别。所述白名单人脸即为预先设置的允许通过的人脸。所述第一计算单元或第二计算单元还可以通过RGB人脸图像和所述深度图像合生3D人脸图像。
在本发明实施例中，通过向目标人脸投射泛光光束，然后通过所述红外探测器进行红外图像的采集，以提高红外图像的质量。所述3D人脸识别模块还可以将所述RGB摄像模组采集RGB人脸预览图像发送至终端设备，以便终端设备进行目标人脸的时时预览。
图4为本发明实施例中连接端口的结构示意图，如图4所示，所述信息输出模块包括USB端口；
所述USB端口一方面连接所述图像采集模块中第一计算单元或第二计算单元，另一方面用于连接至任意终端设备，以将所述人脸图像、所述活体识别结果和所述人脸识别结果中的任一或任多输出至所述终端设备。
在本发明实施例中，所述USB端口模拟了一UVC设备和一串口设备。
图5为本发明实施例中进行活体人脸识别时的步骤流程图，如图5所示，通过预设置的活体检测模型在进行活体人脸识别，所述活体检测模型的训练包括如下步骤：
步骤M1：采集多张人脸图像，对每一所述人脸图像进行关键点检测，确定多个人脸关键点；
步骤M2：根据所述人脸关键点，将所述人脸图像进行归一化至预设定的尺寸，并获取每一人脸关键点的位置；
在本发明实施例中，在进行归一化处理时，根据预设置的标准的关键点分布计算所述人脸关键点的转换矩阵，根据所述转换矩阵确定归一化后人脸图像中的关键点位置。
步骤M3：在每一所述人脸图像中选取多个人脸关键点，且以选择出的所述人脸关键点为中心截取至多个ROI区域，所述ROI区域包括人脸图像中的左眼区域、右眼区域、鼻尖区域以及嘴部区域中任一区域多任多区域；
步骤M4：将每一所述人脸图像对应的ROI区域合成一训练数据，根据所述训练数据训练生成所述活体检测模型。
在本发明实施例中，所述ROI区域包括人脸图像中的左眼区域、右眼区域、鼻尖区域以及嘴部区域，即将四个ROI区域合成为一四通道的训练数据。每一所述ROI区域的尺寸为48×48，单位为像素。所述人脸关键点的数量为106个。所述预设定的尺寸为180×220，单位为像素。
在本发明实施例中，所述活体检测模型包括基于RGB人脸图像训练生成的第一活体检测模型、基于红外人脸图像训练生成的第二活体检测模型以及基于深度人脸图像训练生成的第三活体检测模型；
当进行活体人脸识别时，通过所述第一活体检测模型、第二活体检测模型以及第三活体检测模型中任一模型或任多模型进行活体人脸识别；
在通过三个活体检测模型进行活体识别时，仅当三个活体检测模型均判定为活体人脸时，则判定该人脸图像为活体人脸。
在本发明实施例中，依次通过所述第一活体检测模型、第二活体检测模型以及第三活体检测模型进行活体人脸识别，当每一模型均判定人脸图像时，则判定该人脸图像为活体人脸。在本发明变形例中，也可以通过其中任一个活体模型或任两个活体模型进行活体识别。
图6为本发明实施例中3D人脸摄像装置应用于门锁系统的示意图，如图6所示，所述门锁系统中门锁主控模块上的第二接近传感器一直进行人脸的探测，当探测到人脸靠近时，如人脸距离接近传感器只有50厘米时，触发3D人脸摄像装置，此时3D人脸摄像装置启动，并打开RGB摄像模组和红外摄像模组，采集该目标人脸的RGB人脸图像和红外人脸图像，对所述RGB人脸图像和所述红外人脸图像进行人脸检测和关键点检测，确定所述RGB人脸图像和所述红外人脸图像上的人脸区域和关键点，根据所述红外图像或光斑图案计算生成深度人脸图像，依次对RGB人脸图像、深度人脸图像以及红外人脸图像进行活体后输出识别结果。在所述识别结果为活体时，对所述RGB人脸图像和红外人脸图像进行人脸识别确定是否为预存储的允许开锁的白名单人脸。仅当该目标人脸通过活体识别和人脸识别时输出验证通过的识别结果，否则输出识别错误的识别结果。当输出验证通过的识别结果时，触发3D人脸识别模型将开锁指令发送至所述门锁主控模块，所述门锁主控模块控制门锁进行开锁。本发明从启动到输出识别结果用时仅为两秒。
图7为本发明实施例中3D人脸摄像装置应用于人脸识别支付系统的示意图，如图7所示，当使用所述人脸识别的支付系统时，需要进行支付时，可以输入一触发信号，所述触发信号可以有收银系统输出，也可以通过预设置的触发按钮输出，当收到所述触发信号时，所述3D人脸摄像装置控制所述RGB摄像模组和所述红外摄像模组抓拍目标人脸的RGB人脸图像和红外人脸图像，对所述RGB人脸图像和所述红外人脸图像进行人脸检测和关键点检测，确定所述RGB人脸图像和所述红外人脸图像上的人脸区域和关键点，根据所述红外人脸图像或红外探测器采集的光斑图案计算生成深度人脸图像，依次对RGB人脸图像、深度人脸图像以及红外人脸图像进行活体后输出识别结果。当所述活体识别时输出验证为活体的识别结果，将所述人脸图像和所述识别结果发送至所述人脸识别支付模块，否则输出识别错误的识别结果。所述人脸识别支付模块，判断所述人脸图像是否为注册人脸，当所述人脸图像为注册人脸时对所述注册人脸对应的支付账户执行扣款操作。此外在活体抓拍流程之外，所述3D人脸摄像装置持续采集所述RGB人脸图像或任意物体的RGB图像，以便于预览。
在本发明实施例中，本发明将活体识别模块、人脸识别模块以及图像采集模块集成于一体，形成一能够与多个终端设备相匹配的3D人脸摄像装置，实现即插即用，打通3D人脸识别多种解决方案，形成3D人脸识别相关产品，并逐渐推广到门锁、门禁和支付等领域应用。
本说明书中各个实施例采用递进的方式描述，每个实施例重点说明的都是与其他实施例的不同之处，各个实施例之间相同相似部分互相参见即可。对所公开的实施例的上述说明，使本领域专业技术人员能够实现或使用本发明。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的，本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下，在其它实施例中实现。因此，本发明将不会被限制于本文所示的这些实施例，而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。
以上对本发明的具体实施例进行了描述。需要理解的是，本发明并不局限于上述特定实施方式，本领域技术人员可以在权利要求的范围内做出各种变形或修改，这并不影响本发明的实质内容。

Claims (10)

1.一种3D人脸摄像装置，其特征在于，包括：
图像采集模块，用于采集目标人脸的人脸图像，所述人脸图像包括RGB人脸图像、红外人脸图像以及深度人脸图像中的任一种或任多种；
活体识别模块，用于对所述人脸图像进行活体识别，生成活体识别结果且当所述人脸图像通过活体识别时触发人脸识别模块；
所述人脸识别模块，用于对所述人脸图像进行人脸识别，生成人脸识别结果；
信息输出模块，用于将所述人脸图像、所述活体识别结果和所述人脸识别结果中的任一或任多输出。
2.根据权利要求1所述的3D人脸摄像装置，其特征在于，所述图像采集模块、所述活体识别模块、所述人脸识别模块以及所述信息输出模块封装成一体结构；
所述信息输出模块，用于将所述人脸图像、所述活体识别结果和所述人脸识别结果中的任一或任多输出至任意终端设备。
3.根据权利要求1所述的3D人脸摄像装置，其特征在于，所述图像采集模块包括第一计算单元、激光散斑投射器以及红外探测器；所述激光散斑投射器和所述红外探测器电连接所述第一计算单元；
所述激光散斑投射器，用于向目标人脸投射散斑状的红外光束；
所述红外探测器，用于采集目标人脸反射红外光束形成的光斑图案；
所述第一计算单元，用于获取所述光斑图像，并进而根据所述光斑图案的形变或位移计算生成所述目标人脸的深度人脸图像。
4.根据权利要求1所述的3D人脸摄像装置，其特征在于，所述图像采集模块包括第二计算单元、光投射器以及TOF传感器；所述光投射器、所述RGB摄像模组以及所述红外摄像模组电连接所述第二计算单元；
所述光投射器，用于向目标人脸投射红外泛光；
所述TOF传感器，用于接收目标人脸反射的红外泛光，生成多张红外人脸图像；
所述第二计算单元，用于根据预设置的采集周期内多张红外人脸图像的相位差计算生成所述目标人脸表面的深度图像。
5.根据权利要求1所述的3D人脸摄像装置，其特征在于，所述信息输出模块包括USB端口；
所述USB端口一方面连接所述图像采集模块中第一计算单元或第二计算单元，另一方面用于连接至任意终端设备，以将所述人脸图像、所述活体识别结果和所述人脸识别结果中的任一或任多输出至所述终端设备。
6.根据权利要求3或4所述的3D人脸摄像装置，其特征在于，所述图像采集模块还包括RGB摄像模组；
所述RGB摄像模组，用于采集所述目标人脸的RGB人脸图像；
所述活体识别模块，用于对所述RGB人脸图像进行活体识别，生成活体识别结果且当所述人脸图像通过活体识别时触发人脸识别模块；
所述人脸识别模块，用于对所述RGB人脸图像进行人脸识别，生成人脸识别结果。
7.根据权利要求3所述的3D人脸摄像装置，其特征在于，所述图像采集模块还包括LED泛光光源；
所述LED泛光光源，用于向所述目标人脸投射泛光光束；
所述红外探测器，用于采集目标人脸反射泛光光束形成的红外人脸图像；
所述活体识别模块，用于对所述红外人脸图像进行活体识别，生成活体识别结果且当所述人脸图像通过活体识别时触发人脸识别模块；
所述人脸识别模块，用于对所述红外人脸图像进行人脸识别，生成人脸识别结果。
8.根据权利要求2所述的3D人脸摄像装置，其特征在于，所述信息输出模块还设置有安全加密芯片；
所述安全加密芯片，用于所述人脸图像、所述活体识别结果以及所述人脸识别结果的加密处理；
所述信息输出模块，用于与所述终端设备之间进行所述人脸图像、所述活体识别结果以及所述人脸识别结果的加密传输。
9.根据权利要求1所述的3D人脸摄像装置，其特征在于，所述活体识别模块通过预设置的活体检测模型在进行活体人脸识别，所述活体检测模型的训练包括如下步骤：
步骤M1：采集多张人脸图像，对每一所述人脸图像进行关键点检测，确定多个人脸关键点；
步骤M2：将所述人脸图像进行归一化至预设定的尺寸生成预处理人脸图像，并在所述预处理图像中获取每一人脸关键点的位置；
步骤M3：在每一所述预处理人脸图像中选取多个人脸关键点，且以选择出的所述人脸关键点为中心截取至多个ROI区域，所述ROI区域包括人脸图像中的左眼区域、右眼区域、鼻尖区域以及嘴部区域中任一区域多任多区域；
步骤M4：将每一所述预处理人脸图像对应的ROI区域合成一训练数据，根据所述训练数据训练生成所述活体检测模型。
10.根据权利要求7所述的3D人脸摄像装置，其特征在于，所述活体检测模型包括基于RGB人脸图像训练生成的第一活体检测模型、基于红外人脸图像训练生成的第二活体检测模型以及基于深度人脸图像训练生成的第三活体检测模型；
当进行活体人脸识别时，通过所述第一活体检测模型、第二活体检测模型以及第三活体检测模型中任一模型或任多模型进行活体人脸识别；
在通过多个活体检测模型进行活体识别时，仅当多个活体检测模型均判定为活体人脸时，则判定该人脸图像为活体人脸。
CN202010084734.8A 2020-02-10 2020-02-10 3d人脸摄像装置 Pending CN113255401A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010084734.8A CN113255401A (zh) 2020-02-10 2020-02-10 3d人脸摄像装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010084734.8A CN113255401A (zh) 2020-02-10 2020-02-10 3d人脸摄像装置

Publications (1)

Publication Number Publication Date
CN113255401A true CN113255401A (zh) 2021-08-13

Family

ID=77219340

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010084734.8A Pending CN113255401A (zh) 2020-02-10 2020-02-10 3d人脸摄像装置

Country Status (1)

Country Link
CN (1) CN113255401A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113705408A (zh) * 2021-08-21 2021-11-26 深圳市迪威泰实业有限公司 一种人脸活体检测方法及系统
CN116052209A (zh) * 2022-12-14 2023-05-02 长沙观谱红外科技有限公司 一种红外图像和标准3d人体模型的处理方法及存储介质

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107066942A (zh) * 2017-03-03 2017-08-18 上海斐讯数据通信技术有限公司 一种活体人脸识别方法及系统
CN108022355A (zh) * 2018-02-07 2018-05-11 谢超鹏 一种人脸识别锁具的控制方法、系统及一种人脸识别锁具
CN108549884A (zh) * 2018-06-15 2018-09-18 天地融科技股份有限公司 一种活体检测方法及装置
CN108664908A (zh) * 2018-04-27 2018-10-16 深圳爱酷智能科技有限公司 人脸识别方法、设备及计算机可读存储介质
CN109948399A (zh) * 2017-12-20 2019-06-28 宁波盈芯信息科技有限公司 一种智能手机的人脸支付方法及装置
CN209401037U (zh) * 2018-11-06 2019-09-17 阿里巴巴集团控股有限公司 人脸支付设备
CN110290376A (zh) * 2019-05-24 2019-09-27 深圳市光鉴科技有限公司 具有3d摄像模组的显示装置及电子设备
CN110414200A (zh) * 2019-04-08 2019-11-05 广州腾讯科技有限公司 身份验证方法、装置、存储介质和计算机设备
CN110718008A (zh) * 2019-11-15 2020-01-21 杭州艾芯智能科技有限公司 3d人脸识别模组、门锁及门

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107066942A (zh) * 2017-03-03 2017-08-18 上海斐讯数据通信技术有限公司 一种活体人脸识别方法及系统
CN109948399A (zh) * 2017-12-20 2019-06-28 宁波盈芯信息科技有限公司 一种智能手机的人脸支付方法及装置
CN108022355A (zh) * 2018-02-07 2018-05-11 谢超鹏 一种人脸识别锁具的控制方法、系统及一种人脸识别锁具
CN108664908A (zh) * 2018-04-27 2018-10-16 深圳爱酷智能科技有限公司 人脸识别方法、设备及计算机可读存储介质
CN108549884A (zh) * 2018-06-15 2018-09-18 天地融科技股份有限公司 一种活体检测方法及装置
CN209401037U (zh) * 2018-11-06 2019-09-17 阿里巴巴集团控股有限公司 人脸支付设备
CN110414200A (zh) * 2019-04-08 2019-11-05 广州腾讯科技有限公司 身份验证方法、装置、存储介质和计算机设备
CN110290376A (zh) * 2019-05-24 2019-09-27 深圳市光鉴科技有限公司 具有3d摄像模组的显示装置及电子设备
CN110718008A (zh) * 2019-11-15 2020-01-21 杭州艾芯智能科技有限公司 3d人脸识别模组、门锁及门

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113705408A (zh) * 2021-08-21 2021-11-26 深圳市迪威泰实业有限公司 一种人脸活体检测方法及系统
CN116052209A (zh) * 2022-12-14 2023-05-02 长沙观谱红外科技有限公司 一种红外图像和标准3d人体模型的处理方法及存储介质
CN116052209B (zh) * 2022-12-14 2024-03-29 长沙观谱红外科技有限公司 一种红外图像和标准3d人体模型的处理方法及存储介质

Similar Documents

Publication Publication Date Title
Steiner et al. Reliable face anti-spoofing using multispectral SWIR imaging
CN103383723B (zh) 用于生物特征验证的电子欺骗检测的方法和系统
CN102197412B (zh) 伪装检测系统和伪装检测方法
CN107341481A (zh) 利用结构光图像进行识别
CN113313856A (zh) 具有3d人脸识别的门锁系统及使用方法
RU2431190C2 (ru) Способ и устройство распознавания рельефности лица
CN108549867A (zh) 图像处理方法、装置、计算机可读存储介质和电子设备
US20040037450A1 (en) Method, apparatus and system for using computer vision to identify facial characteristics
JP2005149515A (ja) 赤外線を用いた人間識別装置およびその方法
CN111274928A (zh) 一种活体检测方法、装置、电子设备和存储介质
CN113256298A (zh) 具有3d人脸识别的支付系统及使用方法
JP7192872B2 (ja) 虹彩認証装置、虹彩認証方法、虹彩認証プログラムおよび記録媒体
KR20180134280A (ko) 3차원 깊이정보 및 적외선정보에 기반하여 생체여부의 확인을 행하는 얼굴인식 장치 및 방법
CN111666835A (zh) 一种人脸活体检测方法和装置
KR101919090B1 (ko) 3차원 깊이정보 및 적외선정보에 기반하여 생체여부의 확인을 행하는 얼굴인식 장치 및 방법
US20210256244A1 (en) Method for authentication or identification of an individual
CN113255401A (zh) 3d人脸摄像装置
WO2020065954A1 (ja) 認証装置、認証方法および記憶媒体
CN108052813A (zh) 终端设备的解锁方法、装置及移动终端
CN108566777A (zh) 身份鉴权方法、身份鉴权装置、和电子设备
JP5726595B2 (ja) 画像監視装置
CN108513661A (zh) 身份鉴权方法、身份鉴权装置、和电子设备
CN113642003A (zh) 基于高鲁棒对抗样本生成的人脸识别系统安全性检测方法
CN113255400A (zh) 活体人脸识别模型的训练、识别方法、系统、设备及介质
US20230290185A1 (en) Anti-Spoofing System

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination