CN113807237B - 活体检测模型的训练、活体检测方法、计算机设备及介质 - Google Patents

活体检测模型的训练、活体检测方法、计算机设备及介质 Download PDF

Info

Publication number
CN113807237B
CN113807237B CN202111078997.9A CN202111078997A CN113807237B CN 113807237 B CN113807237 B CN 113807237B CN 202111078997 A CN202111078997 A CN 202111078997A CN 113807237 B CN113807237 B CN 113807237B
Authority
CN
China
Prior art keywords
sample
hierarchical
causal
image
vector
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202111078997.9A
Other languages
English (en)
Other versions
CN113807237A (zh
Inventor
夏正勋
施宇
邵一淼
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Henan Xinghuan Zhongzhi Information Technology Co ltd
Original Assignee
Henan Xinghuan Zhongzhi Information Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Henan Xinghuan Zhongzhi Information Technology Co ltd filed Critical Henan Xinghuan Zhongzhi Information Technology Co ltd
Priority to CN202111078997.9A priority Critical patent/CN113807237B/zh
Publication of CN113807237A publication Critical patent/CN113807237A/zh
Application granted granted Critical
Publication of CN113807237B publication Critical patent/CN113807237B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/21—Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
    • G06F18/214—Generating training patterns; Bootstrap methods, e.g. bagging or boosting
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/24—Classification techniques
    • G06F18/241—Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00—Computing arrangements based on biological models
    • G06N3/02—Neural networks
    • G06N3/04—Architecture, e.g. interconnection topology
    • G06N3/045—Combinations of networks
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00—Computing arrangements based on biological models
    • G06N3/02—Neural networks
    • G06N3/08—Learning methods

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Artificial Intelligence (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Evolutionary Computation (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Computational Linguistics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • Biophysics (AREA)
  • Evolutionary Biology (AREA)
  • General Health & Medical Sciences (AREA)
  • Molecular Biology (AREA)
  • Computing Systems (AREA)
  • Mathematical Physics (AREA)
  • Software Systems (AREA)
  • Image Analysis (AREA)

Abstract

本发明实施例公开了一种活体检测模型的训练、活体检测方法、计算机设备及介质。其中，方法包括：获取样本集；样本集中的样本包括活体样本图像以及至少一种非活体样本图像；对样本集进行分层处理，得到各分层样本图像，并提取与各分层样本图像对应的分层样本特征向量；确定与各分层样本特征向量对应的因果特征向量，并根据各因果特征向量确定损失值的大小，当损失值满足设定条件时，得到活体检测模型。本发明实施例的方案，在保证活体检测模型精度的同时，可以降低活体检测模型的参数量，提升活体检测模型的鲁棒性。

Description

活体检测模型的训练、活体检测方法、计算机设备及介质
技术领域
本发明实施例涉及人工智能技术领域，尤其涉及一种活体检测模型的训练、活体检测方法、计算机设备及介质。
背景技术
随着人脸识别技术的应用场景越来越多，应用的领域越来越重要，其安全性也开始受到人们的广泛关注。犯罪分子可以通过面具、打印照片、屏幕上显示的照片、播放的视频片段来重放人脸或者使用三维(three-dimensional，3D)头部模型来欺骗传统的人脸检测技术。活体检测可以通过自动判别给定图像或视频中的人脸图像是来源于在现场的真实的人，还是来自于欺骗人脸的技术。活体检测是一种重要的防止人脸攻击、欺诈的技术手段，在银行、保险、互联网金融、电子商务等涉及到远程身份认证的行业和场合得到了广泛的应用。
活体检测模型的训练样本往往包括多种类型，例如，非活体样本在现实世界中包括照片中的人脸、视频中活动的人脸或者人脸面具等等，不同类型的非活体样本有各自的特征。现阶段，通过常规方法训练得到的活体检测模型体积较大、参数较多、模型精度提升困难，且鲁棒性较差。
如何在保证活体检测模型精度的同时，降低活体检测模型的参数量，提升活体检测模型的鲁棒性是业内关注的重点问题。
发明内容
本发明实施例提供一种活体检测模型的训练、活体检测方法、计算机设备及介质，以实现提升活体检测模型精度的同时，降低活体检测模型的参数量，提升活体检测模型的鲁棒性。
第一方面，本发明实施例提供了一种活体检测模型的训练方法，包括：
获取样本集；所述样本集中的样本包括活体样本图像以及至少一种非活体样本图像；
对所述样本集进行分层处理，得到各分层样本图像，并提取与各所述分层样本图像对应的分层样本特征向量；
确定与各所述分层样本特征向量对应的因果特征向量，并根据各所述因果特征向量确定损失值的大小，当所述损失值满足设定条件时，得到活体检测模型。
第二方面，本发明实施例还提供了一种活体检测方法，包括：
获取待检测图像；
将所述待检测图像输入至活体检测模型中，得到与所述待检测图像对应的活体检测结果；
其中，所述活体检测模型由本发明实施例中任一实施例所述的活体检测模型的训练方法训练而得。
第三方面，本发明实施例还提供了一种计算机设备，包括处理器和存储器，所述存储器用于存储指令，当所述指令执行时使得所述处理器执行以下操作：
获取样本集；所述样本集中的样本包括活体样本图像以及至少一种非活体样本图像；
对所述样本集进行分层处理，得到各分层样本图像，并提取与各所述分层样本图像对应的分层样本特征向量；
确定与各所述分层样本特征向量对应的因果特征向量，并根据各所述因果特征向量确定损失值的大小，当所述损失值满足设定条件时，得到活体检测模型。
第四方面，本发明实施例还提供了一种计算机设备，包括处理器和存储器，所述存储器用于存储指令，当所述指令执行时使得所述处理器执行以下操作：
获取待检测图像；
将所述待检测图像输入至活体检测模型中，得到与所述待检测图像对应的活体检测结果；
其中，所述活体检测模型由本发明实施例中任一实施例所述的活体检测模型的训练方法训练而得。
第五方面，本发明实施例还提供了一种包含计算机可执行指令的存储介质，其特征在于，所述计算机可执行指令在由计算机处理器执行时用于执行如本发明实施例中任一实施例所述的活体检测模型的训练方法，或者如本发明实施例中任一实施例所述的活体检测方法。
本发明实施例通过获取样本集；所述样本集中的样本包括活体样本图像以及至少一种非活体样本图像；对所述样本集进行分层处理，得到各分层样本图像，并提取与各所述分层样本图像对应的分层样本特征向量；确定与各所述分层样本特征向量对应的因果特征向量，并根据各所述因果特征向量确定损失值的大小，当所述损失值满足设定条件时，得到活体检测模型，在保证活体检测模型精度的同时，可以降低活体检测模型的参数量，提升活体检测模型的鲁棒性。
附图说明
图1是本发明实施例一中的一种活体检测模型的训练方法的流程图；
图2a是本发明实施例一中的一种特征提取模块的结构示意图；
图2b是本发明实施例一中的一种判别器的结构示意图；
图3a是本发明实施例一中的一种活体检测网络的结构示意图；
图3b是本发明实施例一中的一种域分类网络的结构示意图；
图3c是本发明实施例一中的一种域分类网络的学习过程的示意图；
图3d是本发明实施例一中的一种活体检测模型的训练方法的流程图；
图4是本发明实施例二中的一种活体检测方法的流程图；
图5是本发明实施例三中的一种活体检测模型的训练装置的结构示意图；
图6是本发明实施例四中的一种活体检测装置的结构示意图；
图7是本发明实施例五中的一种计算机设备的结构示意图。
具体实施方式
下面结合附图和实施例对本发明实施例作进一步的详细说明。可以理解的是，此处所描述的具体实施例仅仅用于解释本发明实施例，而非对本发明实施例的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与本发明实施例相关的部分而非全部结构。
在更加详细地讨论示例性实施例之前应当提到的是，一些示例性实施例被描述成作为流程图描绘的处理或方法。虽然流程图将各项操作(或步骤)描述成顺序的处理，但是其中的许多操作可以被并行地、并发地或者同时实施。此外，各项操作的顺序可以被重新安排。当其操作完成时所述处理可以被终止，但是还可以具有未包括在附图中的附加步骤。所述处理可以对应于方法、函数、规程、子例程、子程序等等。
本文使用的术语“非活体样本”包括照片中的人脸、视频中活动的人脸或者人脸面具等等，不同类型的非活体样本有各自的特征。
本文使用的术语“样本集”中的样本包括活体样本图像以及至少一种非活体样本图像，其中，活体样本图像可以为摄像头采集到的人脸图像。
本文使用的术语“目标运算”可以为点乘运算，也可以为其他矩阵运算，本实施例中对其不加以限定。
本文使用的术语“待检测图像”可以为任一图像，例如摄像头实时采集的人脸图像、或者视频中截取的图像等，本实施例中对其不加以限定。
为了便于理解，将本发明实施例的主要发明构思进行简述。
现有技术中，通过常规方法训练得到的活体检测模型体积较大、参数较多、模型精度提升困难，且鲁棒性较差。
发明人针对现有技术中通过常规方法训练得到的活体检测模型体积较大、参数较多、模型精度提升困难，且鲁棒性较差的问题，考虑是否可以对活体检测神经网络进行修改，从而在保证活体检测模型精度的同时，降低活体检测模型的参数量，提升活体检测模型的鲁棒性。
基于上述思考，发明人创造性的提出，获取样本集；所述样本集中的样本包括活体样本图像以及至少一种非活体样本图像；对所述样本集进行分层处理，得到各分层样本图像，并提取与各所述分层样本图像对应的分层样本特征向量；确定与各所述分层样本特征向量对应的因果特征向量，并根据各所述因果特征向量确定损失值的大小，当所述损失值满足设定条件时，得到活体检测模型。这样做的好处是，通过对样本集进行分层处理，可以滤除样本中无关的特征参与模型运算，可以在保证活体检测模型精度的同时，降低活体检测模型的参数量，提升活体检测模型的鲁棒性。
实施例一
图1是本发明实施例一中的一种活体检测模型的训练方法的流程图，本实施例可适用于训练得到活体检测模型的情况，该方法可以由活体检测模型的训练装置来执行，该装置可以通过软件和/或硬件的方式实现，并集成在计算机设备中。具体的，参考图1，该方法具体包括如下步骤：
步骤110、获取样本集；所述样本集中的样本包括活体样本图像以及至少一种非活体样本图像。
其中，活体样本图像可以为摄像头采集到的人脸图像；非活体样本图像可以为照片中的人脸图像、视频中活动的人脸图像或者人脸面具等等。
在本实施例中，样本集中的活体样本图像与非活体样本图像的比例可以为1:1，即活体样本图像的数量可以与非活体样本图像的数量相同。
在本实施例中，可以通过摄像头实时采集真实的人脸图像，从而得到多张活体样本图像；也可以通过截取视频中的人脸图像、照片中的人脸图像或者采集人脸面具的图像，从而得到多张非活体样本图像。
步骤120、对所述样本集进行分层处理，得到各分层样本图像，并提取与各所述分层样本图像对应的分层样本特征向量。
在本实施例的一个可选实现方式中，在获取到样本集之后，可以对样本集中的各活体样本图像或者非活体样本图像进行分层处理，得到与每个样本图像对应的至少一个分层样本图像；进一步的，可以提取与每个分层样本图像对应的分层样本特征向量。
在本实施例的一个可选实现方式中，对所述样本集进行分层处理，得到各分层样本图像，可以包括：确定二值域分层矩阵；所述二值域分层矩阵的维度与各样本图像的维度相同；将所述二值域矩阵与所述样本集中的目标样本图像进行目标运算，得到与所述目标样本图像对应的各分层样本图像。
其中，在本实施例中目标运算可以为点乘运算，也可以为其他矩阵运算，本实施例中对其不加以限定。
其中，确定二值域分层矩阵，可以包括：随机生成与各所述样本图像的维度相同的域分层矩阵；所述域分层矩阵中的各元素的初始值为随机值；对所述域分层矩阵进行二值化处理，得到二值域分层矩阵。
在具体实现中，域分层矩阵的维度与样本图像的维度相同，都可以为[3，112，112]，其数据类型为float，初始值为随机数；在具体实现中，可以将随机生成的域分层矩阵中的各个元素值通过Sigmoid函数转化到-1到1之间，然后通过符号函数将矩阵转化为0-1矩阵，从而得到二值域分层矩阵。
进一步的，在得到二值域分层矩阵之后，可以将得到的二值域分层矩阵与目标样本图像进行点乘运算，从而得到与目标样本图像对应的多个分层样本图像；其中，目标样本图像可以为样本集中的任一活体样本图像，或者非活体样本图像，本实施例中对其不加以限定。
在本实施例的一个可选实现方式中，在得到与目标样本图像对应的多个分层样本图像之后，可以进一步的将各所述分层样本图像输入至特征提取模块，得到与各所述分层样本图像对应的分层样本特征向量；其中，所述特征提取模块包括：卷积层、激活函数以及最大池化层；可以理解的是，本实施例中涉及到的特征提取模块还可以包括其他网络层，例如，空洞卷积层或者均值池化层等，本实施例中对其不加以限定。
示例性的，特征提取模块可以如图2a所示，其主要由3个Seq1和2个Seq2组成，其中Seq1包含Conv2d卷积层、ReLu激活函数和MaxPool2d最大池化层，Seq2包含Conv2d和ReLu。
在本实施例的一个具体例子中，在获取到样本集之后，可以对样本集中的各样本图像按标签类别(例如，活体或者非活体)进行等量随机采样得到minibatch样本org_input_i；对StratLM中的值通过Sigmoid函数转化到-1到1之间，然后通过符号函数将矩阵转化为0-1矩阵，得到二值域分层矩阵StratLMR，接着将输入样本org_input_i与StratLMR做点乘运算，得到分层样本strat_input_i；分层样本strat_input_i作为特征提取模块StratCLS的输入，并计算Strat Loss，再进行反向计算更新StratLM和StratCLS中的参数，直至模型训练完成为止。
步骤130、确定与各所述分层样本特征向量对应的因果特征向量，并根据各所述因果特征向量确定损失值的大小，当所述损失值满足设定条件时，得到活体检测模型。
其中，设定条件可以为损失值停留在某个数值(例如，0.01)不再变化时，可以确定此时模型收敛，停止训练；也可以为损失值小于设定数值(例如，0.0001)时，可以确定此时模型收敛，停止训练，本实施例中对其不加以限定。
在本实施例的一个可选实现方式中，在提取到与各所述分层样本图像对应的分层样本特征向量之后，可以进一步的确定与各分层样本特征向量对应的因果特征向量，并根据各所述因果特征向量确定损失值的大小，当所述损失值满足设定条件时，得到活体检测模型。
在本实施例的一个可选实现方式中，确定与各所述分层样本特征向量对应的因果特征向量，可以包括：确定二值因果特征提取向量；所述二值因果特征提取向量的维度与各分层样本特征的维度相同；将所述二值因果特征提取向量与各所述分层样本特征向量进行目标运算，得到与各所述分层样本特征向量对应的因果特征向量。
其中，确定二值因果特征提取向量可以包括：随机生成与各所述分层样本特征向量的维度相同的因果特征提取向量；所述因果特征提取向量中的各元素的初始值为随机值；对所述因果特征提取向量进行二值化处理，得到二值因果特征提取向量。
在具体实现中，因果特征提取向量的维度与分层样本特征向量的维度相同，初始值为随机数；在具体实现中，可以将随机生成的因果特征提取向量中的各个元素值通过Sigmoid函数转化到-1到1之间，然后通过符号函数将矩阵转化为0-1矩阵，从而得到二值因果特征提取向量。
进一步的，在得到二值因果特征提取向量之后，可以将得到的二值因果特征提取向量与各分层样本特征向量进行点乘运算，从而得到与各所述分层样本特征向量对应的因果特征向量。
在本实施例的一个可选实现方式中，在得到与各所述分层样本特征向量对应的因果特征向量之后，可以将得到的各所述因果特征向量输入至判别器中，从而得到损失值，并且当损失值满足设定条件时(例如，小于0.0001)，停止训练，得到活体检测模型；其中，所述判别器包括激活函数，以及全连接层；可以理解的是，本实施例中涉及到的特征提取模块还可以包括其他网络层，例如，上卷积层等，本实施例中对其不加以限定。
示例性的，判别器可以如图2b所示，其主要由2个Seq3和1个Linear全连接层组成，其中Seq3包含Linear和ReLu。
在本实施例的一个具体例子中，在提取到与各所述分层样本图像对应的分层样本特征向量FeatVec1，FeatVec2，…，FeatVec64之后，可以将每一个分层样本特征向量与二值因果特征提取向量进行点乘处理，得到因果特征向量CaFeatVec1，CaFeatVec2，…，CaFeatVec64；进一步的，将因果特征向量CaFeatVec1，CaFeatVec2，…，CaFeatVec64作为判别器的输入，前向计算得到特征向量MaskedFeatVec_A，以及Cls_Loss_A；重复上述步骤，得到MaskedFeatVec_B向量和Cls_Loss_B；进一步的，可以根据MaskedFeatVec_A和MaskedFeatVec_B计算损失值，直至损失值满足设定条件时，停止训练，得到活体检测模型。
本实施例的方案，通过获取样本集；样本集中的样本包括活体样本图像以及至少一种非活体样本图像；对样本集进行分层处理，得到各分层样本图像，并提取与各分层样本图像对应的分层样本特征向量；确定与各分层样本特征向量对应的因果特征向量，并根据各因果特征向量确定损失值的大小，当损失值满足设定条件时，得到活体检测模型，在保证活体检测模型精度的同时，可以降低活体检测模型的参数量，提升活体检测模型的鲁棒性。
为了使本领域技术人员更好地理解本实施例活体检测模型的训练方法，下面采用一个具体示例进行说明，图3a是本发明实施例一中的一种活体检测网络的结构示意图，其主要包括：域分层模块310、特征提取模块320、域分类网络321、因果学习模块330以及判别器340。
其中，域分层模块310中，通过域分层矩阵StratLM实现样本的自动分层，域分层矩阵StratLM的shape与输入样本大小一致，为[3，112，112]，其数据类型为float，初始值为随机数，在前向计算时经过符号函数处理可转化为0或1，转化后的二值域分层矩阵为StratLMR。通过将StratLMR与输入样本org_input_i进行点乘，得到分层样本strat_input_i。
图3b是本发明实施例一中的一种域分类网络的结构示意图，其可以由Conv2d、ReLU、MasPool2d、Linear等网络层组成，在具体应用中可根据需要更改为其他分类网络，本实施例中对其不加以限定。域分类网络StratCLS的输入为分层样本strat_input_i，通过分类网络可以提取分层样本特征，并与域分层标签(本发明实施例中可以通过人工标注方式获得)比较，得到域分层Loss为Strat Loss。通过持续的前向、后向计算可以学习到StratL和StratCLS的网络层参数；需要说明的是，在本实施例中，前后向学习为本领域的通用处理方式，本实施例中对其不再赘述。
示例性的，域分类网络StratCLS的学习过程如图3c所示，活体检测网络模型中StratL结合域分类网络StratCLS进行学习，本例中StratL通过域分层矩阵StratLM实现样本的自动分层(也可以有其他多种实现方式，如注意力机制、聚类等)，StratLM的维数和长度与样本矩阵相同，具体实施步骤如下：
步骤301：对样本集中的各样本图像按标签类别进行等量随机采样得到minibatch样本org_input_i；
步骤302：对StratLM中的值通过Sigmoid函数转化到-1到1之间，然后通过符号函数将矩阵转化为0-1矩阵，得到二值域分层矩阵StratLMR，接着将输入样本org_input_i与StratLMR做点乘运算，得到分层样本strat_input_i；
步骤303：分层样本strat_input_i作为StratCLS的输入，计算Strat Loss，再进行反向计算更新StratLM和StratCLS中的参数；
步骤304：从步骤301开始新一批次的学习，直至模型训练完成。
在本实施例中，因果学习模块330通过Mask处理机制与对比学习的结合实现因果特征提取，其具体实施过程为：Mask向量长度与输入的特征向量长度相同，Mask处理机制是使用Mask向量与FasFeat的输出的特征向量FeatVec进行点乘得到因果特征向量CaFeatVec。再通过对比学习的方式对孪生网络的不同的CaFeatVec输出求ContrastiveLoss，从而通过持续迭代学习到有效的Mask向量。
图3d是本发明实施例一中的一种活体检测模型的训练方法的流程图，其是在域分层模块310学习完成的基础上，采用多任务学习和对比学习的方式进行活体检测网络的学习，具体实施步骤如下：
步骤401：样本库按照minibatch方式，按活体、非活体样本类别，以1:1比例对训练样本进行采样得到minibatch样本org_input_i。本例中batchsize为64，特征向量FeatVec长度为128；
步骤402：域分层矩阵StratLM的shape与样本org_input_i相同，对StratLM中的值通过Sigmoid函数转化到-1到1之间，然后通过符号函数转化为0-1矩阵，得到二值域分层矩阵StratLMR，样本org_input_1，org_input_2，…，org_input_64输入StratL模块后，与StratLMR做点乘运算，得到分层样本strat_input_1，strat_input_2，…，strat_input_64；
步骤403：分层样本strat_input_i作为FasFeat的输入，前向计算输出特征向量FeatVec1，FeatVec2，…，FeatVec64；
步骤404：CaFeatExtra以FeatVec1，FeatVec2，…，FeatVec64作为输入，对每一个FeatVec进行Mask处理，Mask向量长度与输入的特征向量长度相同，具体步骤如下：
a)对Mask中的值通过Sigmoid函数转化到-1到1之间，然后通过符号函数转化为0-1向量，得到二值向量MaskR；
b)对特征向量FeatVec1，FeatVec2，…，FeatVec64，与MaskR做点乘运算，得到Mask处理后的特征向量CaFeatVec1，CaFeatVec2，…，CaFeatVec64；
步骤405：CaFeatVec1，CaFeatVec2，…，CaFeatVec64作为FasDiscri的输入，前向计算得到特征向量MaskedFeatVec_A，以及Cls_Loss_A；
步骤406：按对比学习框架，重复步骤401～405，可得到第二批MaskedFeatVec_B向量和Cls_Loss_B，计算MaskedFeatVec_A和MaskedFeatVec_B间的Contrastive Loss，根据两个Cls Loss和Contrastive Loss执行后向计算，更新模型和Mask向量的参数。
步骤407：从步骤401开始新一轮的学习，直至模型训练完成，得到活体检测模型。
需要说明的是，在本发明实施例中还可以使用FineTune方式对活体检测网络进行训练；例如，可以先学习域分层参数，再学习得到因果特征向量，或者也可以先学习因果特征向量，在学习域分层参数。
在本发明实施例的一个可选实现当时中，可以通过调整二值因果特征提取向量的长度来避免二值因果特征提取向量对分类结果的影响；还需要说明的是，本实施例中的二值因果特征提取向量的值可以为0或1，也可以为-1、0或1，或者浮点数；示例性的，若二值因果特征提取向量的值为-1、0或1，后向计算时可以按浮点数进行梯度更新，前向计算时可以使用符号函数将浮点数转化为-1、0或1。
同时，在本发明实施例的另一个可选实现方式中，可以根据二值因果特征提取向量对训练得到的活体检测模型进行剪枝，滤除无关参数，从而提升活体检测模型的执行效率，即针对任一人物图像，可以快速地确定该图像中的人物为活体的概率。
本发明实施例，提供了一种数据自动分层的方法，能够将不同类型的非活体样本根据其主要特征进行分层，做到针对具体情况的特征学习和决策，提高模型的单域精度和跨域鲁棒性；另外还提供了一种因果特征提取的方法，通过对特征向量的特征按位提取和对比学习方法的引入，学习特征与结果间的因果关系，降低背景等因素带来的偏差，能够在保持模型推理能力的同时，降低参数量，提高推理效率；提高模型的跨域鲁棒性，减少偏倚因子对模型精度的影响，自动化实现模型鲁棒性的提高，是一种新型活体检测方法及系统的实现方式。
实施例二
图4是本发明实施例二中的一种活体检测方法的流程图，本实施例可适用于确定待检测图像是否为活体的情况，该方法可以由活体检测装置来执行，该装置可以通过软件和/或硬件的方式实现，并集成在计算机设备中。具体的，参考图4，该方法具体包括如下步骤：
步骤410、获取待检测图像。
其中，待检测图像可以为任一图像，例如摄像头实时采集的人脸图像、或者视频中截取的图像等，本实施例中对其不加以限定。
步骤420、将所述待检测图像输入至活体检测模型中，得到与所述待检测图像对应的活体检测结果。
其中，所述活体检测模型由上述实施例所述的活体检测模型的训练方法训练而得。
在本实施例的一个可选实现方式中，在获取到待检测图像之后，可以将待检测图像输入至训练得到的活体检测模型中，从而得到与待检测图像对应的活体检测结果；其中，与待检测图像对应的活体检测结果可以为待检测图像为活体的概率，例如，0.9、0.99或者0.2等；可以理解的是，输出的概率值越大，待检测图像为活体的概率也就越大。
在具体实现中，将待检测图像输入至活体检测模型中之后，首先对待检测图像进行分层处理，得到与待检测图像对应的多个分层图像，并提取与各分层图像对应的分层特征向量；进一步的，可以确定与各分层特征向量对应的因果特征向量，并将各因果特征向量输入至判别器中，从而得到与待检测图像对应的活体概率。
其中，对待检测图像进行分层处理，得到与待检测图像对应的多个分层图像，可以包括：将待检测图像与二值域矩阵进行点乘运算，得到与待检测图像对应的多个分层图像；在本实施例中涉及到的二值域矩阵为活体检测模型训练结束后，更新得到的。
进一步的，可以将各分层图像输入至活体检测模型的特征提取模块，得到与各分层图像对应的分层特征向量；进一步的，可以将各分层特征向量与二值因果特征提取向量进行点乘运算，得到与各分层特征向量对应的因果特征向量；在本实施例中涉及到的二值因果特征提取向量为活体检测模型训练结束后，更新得到的；进一步的，可以将各因果特征向量输入至判别器中，从而得到与待检测图像对应的活体概率。
本实施例的方案，通过获取待检测图像；将所述待检测图像输入至活体检测模型中，得到与所述待检测图像对应的活体检测结果，可以快速地确定与待检测图像对应的活体检测结果，并且准确率较高。
实施例三
图5是本发明实施例三中的一种活体检测模型的训练装置的结构示意图，该装置可以执行上述各实施例中涉及到的活体检测模型的训练方法。参照图5，该装置包括：样本集获取模块510、分层处理模块520以及模型确定模块530。
样本集获取模块510，用于获取样本集；所述样本集中的样本包括活体样本图像以及至少一种非活体样本图像；
分层处理模块520，用于对所述样本集进行分层处理，得到各分层样本图像，并提取与各所述分层样本图像对应的分层样本特征向量；
模型确定模块530，用于确定与各所述分层样本特征向量对应的因果特征向量，并根据各所述因果特征向量确定损失值的大小，当所述损失值满足设定条件时，得到活体检测模型。
本实施例的方案，通过样本集获取模块获取样本集；所述样本集中的样本包括活体样本图像以及至少一种非活体样本图像；通过分层处理模块对所述样本集进行分层处理，得到各分层样本图像，并提取与各所述分层样本图像对应的分层样本特征向量；通过模型确定模块确定与各所述分层样本特征向量对应的因果特征向量，并根据各所述因果特征向量确定损失值的大小，当所述损失值满足设定条件时，得到活体检测模型，在保证活体检测模型精度的同时，可以降低活体检测模型的参数量，提升活体检测模型的鲁棒性。
在本实施例的一个可选实现方式中，分层处理模块520，用于确定二值域分层矩阵；所述二值域分层矩阵的维度与各样本图像的维度相同；
将所述二值域矩阵与所述样本集中的目标样本图像进行目标运算，得到与所述目标样本图像对应的各分层样本图像。
在本实施例的一个可选实现方式中，所述分层处理模块520，具体用于随机生成与各所述样本图像的维度相同的域分层矩阵；所述域分层矩阵中的各元素的初始值为随机值；
对所述域分层矩阵进行二值化处理，得到二值域分层矩阵。
在本实施例的一个可选实现方式中，所述分层处理模块520，还具体用于将各所述分层样本图像输入至特征提取模块，得到与各所述分层样本图像对应的分层样本特征向量；
其中，所述特征提取模块包括：卷积层、激活函数以及最大池化层。
在本实施例的一个可选实现方式中，所述模型确定模块530，用于确定二值因果特征提取向量；所述二值因果特征提取向量的维度与各分层样本特征的维度相同；
将所述二值因果特征提取向量与各所述分层样本特征向量进行目标运算，得到与各所述分层样本特征向量对应的因果特征向量。
在本实施例的一个可选实现方式中，所述模型确定模块530，具体用于随机生成与各所述分层样本特征向量的维度相同的因果特征提取向量；所述因果特征提取向量中的各元素的初始值为随机值；
对所述因果特征提取向量进行二值化处理，得到二值因果特征提取向量。
在本实施例的一个可选实现方式中，所述模型确定模块530，还具体用于将各所述因果特征向量输入至判别器中，得到损失值；
其中，所述判别器包括激活函数，以及全连接层。
本发明实施例所提供的活体检测模型的训练装置可执行本发明任意实施例所提供的活体检测模型的训练方法，具备执行方法相应的功能模块和有益效果。
实施例四
图6是本发明实施例四中的一种活体检测装置的结构示意图，该装置可以执行上述各实施例中涉及到的活体检测方法。参照图6，该装置包括：待检测图像获取模块610以及活体检测结果确定模块620。
待检测图像获取模块610，用于获取待检测图像；
活体检测结果确定模块620，用于将所述待检测图像输入至活体检测模型中，得到与所述待检测图像对应的活体检测结果；
其中，所述活体检测模型由上述各实施例所述的活体检测模型的训练方法训练而得。
本实施例的方案，通过待检测图像获取模块获取待检测图像；通过活体检测结果确定模块将所述待检测图像输入至活体检测模型中，得到与所述待检测图像对应的活体检测结果，可以快速地确定与待检测图像对应的活体检测结果，并且准确率较高。
实施例五
图7为本发明实施例五提供的一种计算机设备的结构示意图，如图7所示，该计算机设备包括处理器70、存储器71、输入装置72和输出装置73；计算机设备中处理器70的数量可以是一个或多个，图7中以一个处理器70为例；计算机设备中的处理器70、存储器71、输入装置72和输出装置73可以通过总线或其他方式连接，图7中以通过总线连接为例。
存储器71作为一种计算机可读存储介质，可用于存储软件程序、计算机可执行程序以及模块，如本发明实施例中的活体检测模型的训练方法对应的程序指令/模块(例如，活体检测模型的训练装置中的样本集获取模块510、分层处理模块520以及模型确定模块530)，或者如本发明实施例中的活体检测方法对应的程序指令/模块(例如，活体检测装置中的待检测图像获取模块610以及活体检测结果确定模块620)。处理器70通过运行存储在存储器71中的软件程序、指令以及模块，从而执行计算机设备的各种功能应用以及数据处理，即实现上述的活体检测模型的训练方法或者活体检测方法。
存储器71可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序；存储数据区可存储根据终端的使用所创建的数据等。此外，存储器71可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他非易失性固态存储器件。在一些实例中，存储器71可进一步包括相对于处理器70远程设置的存储器，这些远程存储器可以通过网络连接至计算机设备。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
输入装置72可用于接收输入的数字或字符信息，以及产生与计算机设备的用户设置以及功能控制有关的键信号输入。输出装置73可包括显示屏等显示设备。
实施例六
本发明实施例六还提供一种包含计算机可执行指令的存储介质，所述计算机可执行指令在由计算机处理器执行时用于执行一种活体检测模型的训练方法，该方法包括：
获取样本集；所述样本集中的样本包括活体样本图像以及至少一种非活体样本图像；
对所述样本集进行分层处理，得到各分层样本图像，并提取与各所述分层样本图像对应的分层样本特征向量；
确定与各所述分层样本特征向量对应的因果特征向量，并根据各所述因果特征向量确定损失值的大小，当所述损失值满足设定条件时，得到活体检测模型。
或者，活体检测方法，该方法包括：
获取待检测图像；
将所述待检测图像输入至活体检测模型中，得到与所述待检测图像对应的活体检测结果；
其中，所述活体检测模型由本发明实施例中任一项所述的活体检测模型的训练方法训练而得。
当然，本发明实施例所提供的一种包含计算机可执行指令的存储介质，其计算机可执行指令不限于如上所述的方法操作，还可以执行本发明任意实施例所提供的活体检测模型的训练方法或者活体检测方法中的相关操作。
通过以上关于实施方式的描述，所属领域的技术人员可以清楚地了解到，本发明可借助软件及必需的通用硬件来实现，当然也可以通过硬件实现，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在计算机可读存储介质中，如计算机的软盘、只读存储器(Read-Only Memory，ROM)、随机存取存储器(RandomAccess Memory，RAM)、闪存(FLASH)、硬盘或光盘等，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述的方法。
值得注意的是，上述活体检测模型的训练装置或者活体检测装置的实施例中，所包括的各个单元和模块只是按照功能逻辑进行划分的，但并不局限于上述的划分，只要能够实现相应的功能即可；另外，各功能单元的具体名称也只是为了便于相互区分，并不用于限制本发明的保护范围。
注意，上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解，本发明不限于这里所述的特定实施例，对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此，虽然通过以上实施例对本发明进行了较为详细的说明，但是本发明不仅仅限于以上实施例，在不脱离本发明构思的情况下，还可以包括更多其他等效实施例，而本发明的范围由所附的权利要求范围决定。

Claims (13)

1.一种活体检测模型的训练方法，其特征在于，包括：
获取样本集；所述样本集中的样本包括活体样本图像以及至少一种非活体样本图像；
对所述样本集进行分层处理，得到各分层样本图像，并提取与各所述分层样本图像对应的分层样本特征向量；
确定与各所述分层样本特征向量对应的因果特征向量，并根据各所述因果特征向量确定损失值的大小，当所述损失值满足设定条件时，得到活体检测模型；
所述对所述样本集进行分层处理，得到各分层样本图像，包括：
确定二值域分层矩阵；所述二值域分层矩阵的维度与各样本图像的维度相同；
将所述二值域分层矩阵与所述样本集中的目标样本图像进行目标运算，得到与所述目标样本图像对应的各分层样本图像；
所述确定与各所述分层样本特征向量对应的因果特征向量，包括：
确定二值因果特征提取向量；所述二值因果特征提取向量的维度与各分层样本特征的维度相同；
将所述二值因果特征提取向量与各所述分层样本特征向量进行目标运算，得到与各所述分层样本特征向量对应的因果特征向量。
2.根据权利要求1所述的方法，其特征在于，所述确定二值域分层矩阵，包括：
随机生成与各所述样本图像的维度相同的域分层矩阵；所述域分层矩阵中的各元素的初始值为随机值；
对所述域分层矩阵进行二值化处理，得到二值域分层矩阵。
3.根据权利要求2所述的方法，其特征在于，所述提取与各所述分层样本图像对应的分层样本特征向量，包括：
将各所述分层样本图像输入至特征提取模块，得到与各所述分层样本图像对应的分层样本特征向量；
其中，所述特征提取模块包括下述至少一项：卷积层、激活函数以及最大池化层。
4.根据权利要求1所述的方法，其特征在于，所述确定二值因果特征提取向量，包括：
随机生成与各所述分层样本特征向量的维度相同的因果特征提取向量；所述因果特征提取向量中的各元素的初始值为随机值；
对所述因果特征提取向量进行二值化处理，得到二值因果特征提取向量。
5.根据权利要求1所述的方法，其特征在于，所述根据各所述因果特征向量确定损失值的大小，包括：
将各所述因果特征向量输入至判别器中，得到损失值；
其中，所述判别器包括下述至少一项：激活函数，以及全连接层。
6.一种活体检测方法，其特征在于，包括：
获取待检测图像；
将所述待检测图像输入至活体检测模型中，得到与所述待检测图像对应的活体检测结果；
其中，所述活体检测模型由权利要求1-5中任一项所述的活体检测模型的训练方法训练而得。
7.一种计算机设备，包括处理器和存储器，所述存储器用于存储指令，当所述指令执行时使得所述处理器执行以下操作：
获取样本集；所述样本集中的样本包括活体样本图像以及至少一种非活体样本图像；
对所述样本集进行分层处理，得到各分层样本图像，并提取与各所述分层样本图像对应的分层样本特征向量；
确定与各所述分层样本特征向量对应的因果特征向量，并根据各所述因果特征向量确定损失值的大小，当所述损失值满足设定条件时，得到活体检测模型；
所述处理器是设置为通过以下方式对所述样本集进行分层处理，得到各分层样本图像：
确定二值域分层矩阵；所述二值域分层矩阵的维度与各样本图像的维度相同；
将所述二值域分层矩阵与所述样本集中的目标样本图像进行目标运算，得到与所述目标样本图像对应的各分层样本图像；
所述处理器是设置为通过以下方式确定与各所述分层样本特征向量对应的因果特征向量：
确定二值因果特征提取向量；所述二值因果特征提取向量的维度与各分层样本特征的维度相同；
将所述二值因果特征提取向量与各所述分层样本特征向量进行目标运算，得到与各所述分层样本特征向量对应的因果特征向量。
8.根据权利要求7所述的设备，其特征在于，所述处理器是设置为通过以下方式确定二值域分层矩阵：
随机生成与各所述样本图像的维度相同的域分层矩阵；所述域分层矩阵中的各元素的初始值为随机值；
对所述域分层矩阵进行二值化处理，得到二值域分层矩阵。
9.根据权利要求8所述的设备，其特征在于，所述处理器是设置为通过以下方式提取与各所述分层样本图像对应的分层样本特征向量：
将各所述分层样本图像输入至特征提取模块，得到与各所述分层样本图像对应的分层样本特征向量；
其中，所述特征提取模块包括下述至少一项：卷积层、激活函数以及最大池化层。
10.根据权利要求7所述的设备，其特征在于，所述处理器是设置为通过以下方式确定二值因果特征提取向量：
随机生成与各所述分层样本特征向量的维度相同的因果特征提取向量；所述因果特征提取向量中的各元素的初始值为随机值；
对所述因果特征提取向量进行二值化处理，得到二值因果特征提取向量。
11.根据权利要求7所述的设备，其特征在于，所述处理器是设置为通过以下方式根据各所述因果特征向量确定损失值的大小：
将各所述因果特征向量输入至判别器中，得到损失值；
其中，所述判别器包括下述至少一项：激活函数，以及全连接层。
12.一种计算机设备，包括处理器和存储器，所述存储器用于存储指令，当所述指令执行时使得所述处理器执行以下操作：
获取待检测图像；
将所述待检测图像输入至活体检测模型中，得到与所述待检测图像对应的活体检测结果；
其中，所述活体检测模型由权利要求1-5中任一项所述的活体检测模型的训练方法训练而得。
13.一种包含计算机可执行指令的存储介质，其特征在于，所述计算机可执行指令在由计算机处理器执行时用于执行如权利要求1-5中任一所述的活体检测模型的训练方法，或者权利要求6所述的活体检测方法。
CN202111078997.9A 2021-09-15 2021-09-15 活体检测模型的训练、活体检测方法、计算机设备及介质 Active CN113807237B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111078997.9A CN113807237B (zh) 2021-09-15 2021-09-15 活体检测模型的训练、活体检测方法、计算机设备及介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111078997.9A CN113807237B (zh) 2021-09-15 2021-09-15 活体检测模型的训练、活体检测方法、计算机设备及介质

Publications (2)

Publication Number Publication Date
CN113807237A CN113807237A (zh) 2021-12-17
CN113807237B true CN113807237B (zh) 2022-11-08

Family

ID=78941192

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111078997.9A Active CN113807237B (zh) 2021-09-15 2021-09-15 活体检测模型的训练、活体检测方法、计算机设备及介质

Country Status (1)

Country Link
CN (1) CN113807237B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114724258A (zh) * 2022-04-24 2022-07-08 厦门熵基科技有限公司 活体检测方法、装置、存储介质及计算机设备
CN116958748B (zh) * 2023-07-28 2024-02-13 哈尔滨工业大学(深圳)(哈尔滨工业大学深圳科技创新研究院) 多任务因果学习的图像检测方法、装置、设备及介质

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108985135A (zh) * 2017-06-02 2018-12-11 腾讯科技（深圳）有限公司 一种人脸检测器训练方法、装置及电子设备
CN111222434A (zh) * 2019-12-30 2020-06-02 深圳市爱协生科技有限公司 基于局部二值模式和深度学习的合成人脸图像取证方法
CN113269010B (zh) * 2020-02-14 2024-03-26 深圳云天励飞技术有限公司 一种人脸活体检测模型的训练方法和相关装置
CN111368731B (zh) * 2020-03-04 2023-06-09 上海东普信息科技有限公司 静默活体检测方法、装置、设备及存储介质
CN112084917B (zh) * 2020-08-31 2024-06-04 腾讯科技（深圳）有限公司 一种活体检测方法及装置
CN113033465B (zh) * 2021-04-13 2023-11-14 北京百度网讯科技有限公司 活体检测模型训练方法、装置、设备以及存储介质

Also Published As

Publication number Publication date
CN113807237A (zh) 2021-12-17

Similar Documents

Publication Publication Date Title
CN109543606B (zh) 一种加入注意力机制的人脸识别方法
Marra et al. A full-image full-resolution end-to-end-trainable CNN framework for image forgery detection
Wu et al. Busternet: Detecting copy-move image forgery with source/target localization
Sun et al. Face spoofing detection based on local ternary label supervision in fully convolutional networks
Zhou et al. Learning rich features for image manipulation detection
Gong et al. Change detection in synthetic aperture radar images based on deep neural networks
CN113807237B (zh) 活体检测模型的训练、活体检测方法、计算机设备及介质
CN113011357A (zh) 基于时空融合的深度伪造人脸视频定位方法
CN111860414A (zh) 一种基于多特征融合检测Deepfake视频方法
Yuan et al. MFFFLD: A multimodal-feature-fusion-based fingerprint liveness detection
Li et al. Image manipulation localization using attentional cross-domain CNN features
CN113205002B (zh) 非受限视频监控的低清人脸识别方法、装置、设备及介质
CN108229434A (zh) 一种车辆识别与细致重构的方法
CN115240280A (zh) 人脸活体检测分类模型的构建方法、检测分类方法及装置
Ramadhani et al. A comparative study of deepfake video detection method
CN111814682A (zh) 人脸活体检测方法及装置
Liu et al. Overview of image inpainting and forensic technology
CN112651333A (zh) 静默活体检测方法、装置、终端设备和存储介质
CN116229528A (zh) 一种活体掌静脉检测方法、装置、设备及存储介质
An Pedestrian Re‐Recognition Algorithm Based on Optimization Deep Learning‐Sequence Memory Model
Singh et al. Performance analysis of ELA-CNN model for image forgery detection
CN115862119B (zh) 基于注意力机制的人脸年龄估计方法及装置
CN109165551B (zh) 一种自适应加权融合显著性结构张量和lbp特征的表情识别方法
Li et al. An improved PCB defect detector based on feature pyramid networks
Sun et al. Danet: Dynamic attention to spoof patterns for face anti-spoofing

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant