CN113052034A - 基于双目摄像头的活体检测方法及相关装置 - Google Patents

Abstract

本申请提供了一种基于双目摄像头的活体检测方法及相关装置，其中，该方法包括：获取双目摄像头同步采集的第一图像和第二图像；对第一图像中目标对象的第一人脸进行人脸质量检测，基于人脸质量检测结果从第一图像中确定出目标图像帧；从第二图像中确定出目标图像帧的对应图像帧；从目标图像帧中截取出第一人脸区域图像，以及从对应图像帧中截取出第二人脸区域图像；对第一人脸区域图像和第二人脸区域图像进行活体检测，得到目标对象的活体检测结果。由于本申请实施例采用人脸质量较好的目标图像帧和其对应图像帧中截取出的人脸区域图像进行活体检测，因此，有利于提升活体检测的准确度。

Description

基于双目摄像头的活体检测方法及相关装置

技术领域

本申请涉及计算机视觉技术领域，尤其涉及一种基于双目摄像头的活体检测方法及相关装置。

背景技术

随着计算机视觉技术的发展，活体检测广泛应用于门禁、考勤、金融等领域，其可以避免人脸识别系统遭到各种人脸图片、图像的攻击，在保障人身财产安全方面有着极其重要的意义。目前，基于双目摄像头的活体检测主要通过红外成像和可见光成像实现，比如将红外成像中的人脸特征与可见光成像中的人脸特征进行比对以确定检测到的人脸是否为活体，或者分别对红外成像、可见光成像中的人脸是否为活体进行判定，在两者均为活体时，活体检测才通过。然而，在某些场景中，现有基于双目的活体检测方法检测的准确度还很低。

发明内容

针对上述问题，本申请提供了一种基于双目摄像头的活体检测方法及相关装置，有利于提升活体检测的准确度。

为实现上述目的，本申请实施例提供了一种基于双目摄像头的活体检测方法，该方法包括：

获取双目摄像头同步采集的第一图像和第二图像；

对第一图像中目标对象的第一人脸进行人脸质量检测，基于人脸质量检测结果从第一图像中确定出目标图像帧；

从第二图像中确定出目标图像帧的对应图像帧；

从目标图像帧中截取出第一人脸区域图像，以及从对应图像帧中截取出第二人脸区域图像；

对第一人脸区域图像和第二人脸区域图像进行活体检测，得到目标对象的活体检测结果。

在一种可能的实施方式中，目标图像帧中包括上述第一人脸；从目标图像帧中截取出第一人脸区域图像，包括：

根据第一人脸在目标图像帧中的第一位置信息从目标图像帧中截取出第一人脸区域图像；

从对应图像帧中截取出第二人脸区域图像，包括：

根据第一位置信息以及目标图像帧与对应图像帧之间的视场差从对应图像帧中截取出第二人脸区域图像；第二人脸区域图像中包括第二人脸，第二人脸是与第一人脸相匹配的人脸。

在一种可能的实施方式中，根据第一位置信息以及目标图像帧与对应图像帧之间的视场差从对应图像帧中截取出第二人脸区域图像，包括：

根据第一位置信息以及视场差从对应图像帧中确定出第一候选区域；

根据第一预设比例和第一候选区域从对应图像帧中截取出第二人脸区域图像；

根据第一人脸在目标图像帧中的第一位置信息从目标图像帧中截取出第一人脸区域图像，包括：

根据第一位置信息从目标图像帧中确定出第二候选区域；

根据第二预设比例和第二候选区域从目标图像帧中截取出第一人脸区域图像。

在一种可能的实施方式中，根据第一预设比例和第一候选区域从对应图像帧中截取出第二人脸区域图像，包括：

按照第一预设比例将第一候选区域放大，得到第一目标区域；第一目标区域中包括至少一张人脸；

将至少一张人脸与第一人脸进行匹配，以从至少一张人脸中确定出第二人脸；

根据第二人脸在对应图像帧中的第二位置信息从对应图像帧中截取出第二人脸区域图像。

在一种可能的实施方式中，对第一图像中目标对象的第一人脸进行人脸质量检测，包括：

对第一图像中的图像帧进行人脸检测；

在检测到第一人脸的情况下，对第一人脸进行跟踪；

在跟踪过程中对第一人脸进行人脸质量检测。

在一种可能的实施方式中，基于人脸质量检测结果从第一图像中确定出目标图像帧，包括：

针对第一图像中包括第一人脸的图像帧序列，将图像帧序列中人脸质量检测结果最高的一帧或多帧图像确定为目标图像帧；或者，

在图像帧序列中出现人脸质量检测结果大于或等于阈值的图像帧时，将人脸质量检测结果大于或等于阈值的一帧或多帧图像确定为目标图像帧；或者，

在图像帧序列中以预设时间或预设帧率为间隔，将间隔内人脸质量检测结果最高的一帧或多帧图像确定为目标图像帧；或者，

将图像帧序列中人脸质量检测结果依次大于或等于n个阈值的n帧图像确定为目标图像帧；n个阈值依次递增。

在一种可能的实施方式中，根据第二预设比例和第二候选区域从目标图像帧中截取出第一人脸区域图像，包括：

按照第二预设比例将第二候选区域放大，得到第二目标区域；

从目标图像帧中截取出第二目标区域得到第一人脸区域图像。

在一种可能的实施方式中，根据第二人脸在对应图像帧中的第二位置信息从对应图像帧中截取出第二人脸区域图像，包括：

根据第二位置信息从对应图像帧中确定出第三候选区域；

按照第三预设比例将第三候选区域放大，得到第三目标区域；

从对应图像帧中截取出第三目标区域得到第二人脸区域图像。

本申请另一些实施例提供了一种基于双目摄像头的活体检测装置，该装置包括：

获取模块，用于获取双目摄像头同步采集的第一图像和第二图像；

第一确定模块，用于对第一图像中目标对象的第一人脸进行人脸质量检测，基于人脸质量检测结果从第一图像中确定出目标图像帧；

第二确定模块，用于从第二图像中确定出目标图像帧的对应图像帧；

图像截取模块，用于从目标图像帧中截取出第一人脸区域图像，以及从对应图像帧中截取出第二人脸区域图像；

检测模块，用于对第一人脸区域图像和第二人脸区域图像进行活体检测，得到目标对象的活体检测结果。

本申请另一些实施例提供了一种电子设备，该电子设备包括输入设备和输出设备，还包括处理器，适于实现一条或多条指令；以及，计算机存储介质，所述计算机存储介质存储有一条或多条指令，所述一条或多条指令适于由所述处理器加载并执行以下步骤：

获取双目摄像头同步采集的第一图像和第二图像；

对第一图像中目标对象的第一人脸进行人脸质量检测，基于人脸质量检测结果从第一图像中确定出目标图像帧；

从第二图像中确定出目标图像帧的对应图像帧；

从目标图像帧中截取出第一人脸区域图像，以及从对应图像帧中截取出第二人脸区域图像；

对第一人脸区域图像和第二人脸区域图像进行活体检测，得到目标对象的活体检测结果。

本申请另一些实施例提供了一种计算机存储介质，所述计算机存储介质存储有一条或多条指令，所述一条或多条指令适于由处理器加载并执行以下步骤：

获取双目摄像头同步采集的第一图像和第二图像；

对第一图像中目标对象的第一人脸进行人脸质量检测，基于人脸质量检测结果从第一图像中确定出目标图像帧；

从第二图像中确定出目标图像帧的对应图像帧；

从目标图像帧中截取出第一人脸区域图像，以及从对应图像帧中截取出第二人脸区域图像；

对第一人脸区域图像和第二人脸区域图像进行活体检测，得到目标对象的活体检测结果。

可以看出，本申请实施例通过获取双目摄像头同步采集的第一图像和第二图像；对第一图像中目标对象的第一人脸进行人脸质量检测，基于人脸质量检测结果从第一图像中确定出目标图像帧；从第二图像中确定出目标图像帧的对应图像帧；从目标图像帧中截取出第一人脸区域图像，以及从对应图像帧中截取出第二人脸区域图像；对第一人脸区域图像和第二人脸区域图像进行活体检测，得到目标对象的活体检测结果。这样针对双目摄像头同步采集的第一图像和第二图像，由于目标图像帧是基于对第一人脸进行人脸质量检测，从第一图像中选出来的人脸质量较好的图像帧，而对应图像帧是第二图像中与目标图像帧对应的图像帧，其人脸质量也相对较好，采用人脸质量较好的目标图像帧中截取出的第一人脸区域图像和其对应图像帧中截取出的第二人脸区域图像进行活体检测，有利于提升活体检测的准确度。

附图说明

为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为本申请实施例提供的一种应用环境的示意图；

图2为本申请实施例提供的一种基于双目摄像头的活体检测方法的流程示意图；

图3为本申请实施例提供的一种对第一人脸进行跟踪得到的图像帧序列的示意图；

图4为本申请实施例提供的一种获取活体检测结果的流程示意图；

图5为本申请实施例提供的另一种基于双目摄像头的活体检测方法的流程示意图；

图6为本申请实施例提供的一种基于双目摄像头的活体检测装置的结构示意图；

图7为本申请实施例提供的一种电子设备的结构示意图。

具体实施方式

为了使本技术领域的人员更好地理解本申请方案，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分的实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于本申请保护的范围。

本申请说明书、权利要求书和附图中出现的术语“包括”和“具有”以及它们任何变形，意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元，而是可选地还包括没有列出的步骤或单元，或可选地还包括对于这些过程、方法、产品或设备固有的其它步骤或单元。此外，术语“第一”、“第二”和“第三”等是用于区别不同的对象，而并非用于描述特定的顺序。

本申请实施例提出一种双目活体检测方案，可基于图1所示的应用环境实施，如图1所示，该应用环境包括双目摄像头和电子设备，双目摄像头和电子设备通过有线或无线网络连接，应当理解的，双目摄像头通常同步采集有两路图像数据，所谓“同步”是指该两路图像数据中的图像帧是一一对应的，且该两路图像数据被实时传输至电子设备。电子设备在获取到该两路图像数据的情况下，可对其中一路图像数据进行人脸检测和人脸跟踪，当然也可同时对两路图像数据进行人脸检测和人脸跟踪，此处不作限定，在对同一目标对象的人脸进行跟踪的过程中，执行人脸质量检测操作，以确定出人脸质量较高的一帧或多帧图像，然后执行人脸匹配操作，从另一路图像数据中确定出该一帧或多帧图像的对应图像帧，利用该一帧或多帧图像以及该对应图像帧进行活体检测，得到目标对象是活体还是非活体。其中，双目摄像头可以是安防监控、门禁控制、考勤、银行业务办理等场景中的双目设备，电子设备可以是独立的物理服务器，也可以是服务器集群或者分布式系统，还可以是提供云服务、云数据库、云计算、云函数、云存储、网络服务、云通信、中间件服务、域名服务、安全服务、以及大数据和人工智能平台等基础云计算服务的云服务器。

以下结合相关附图对本申请实施例提供的基于双目摄像头的活体检测方法进行详细阐述。

请参见图2，图2为本申请实施例提供的一种基于双目摄像头的活体检测方法的流程示意图，应用于电子设备，如图2所示，包括步骤201-205：

201：获取双目摄像头同步采集的第一图像和第二图像。

本申请具体实施例中，应当理解的，第一图像是指双目摄像头的第一摄像头采集的图像，第二图像是指双目摄像头的第二摄像头采集的图像，该第一摄像头可以是主摄像头，该第二摄像头可以是副摄像头，第一图像和第二图像可以是连续抓拍的图像帧，也可以是视频图像。

202：对第一图像中目标对象的第一人脸进行人脸质量检测，基于人脸质量检测结果从第一图像中确定出目标图像帧。

本申请具体实施例中，电子设备对第一图像进行人脸检测，对于检测到的人脸生成对应的唯一标识，并对每一个人脸进行跟踪，比如在检测到目标对象的第一人脸的情况下，对该第一人脸进行人脸跟踪，并在跟踪过程中对该第一人脸进行人脸质量检测，基于第一人脸的人脸质量检测结果从第一图像中确定出目标图像帧。其中，目标图像帧是指人脸质量满足活体检测要求的图像帧，比如人脸质量检测结果最高，或者人脸质量检测结果达到阈值。

在一种可能的实施方式中，上述对第一人脸进行人脸质量检测，包括：根据该第一人脸的大小、角度和清晰度得到该第一人脸的人脸质量评分，将该人脸质量评分作为该第一人脸的人脸质量检测结果。具体的，影响活体检测准确度的因素有很多，包括但不限于图像帧中人脸的大小、角度和清晰度，对于包括第一人脸的图像帧，将其输入训练好的人脸质量检测模型进行处理，人脸质量检测模型根据图像帧中第一人脸的大小、角度、清晰度等计算得到上述人脸质量评分，对于该人脸质量评分大于或等于阈值的图像帧，可选出作为活体检测或人脸识别的输入。

示例性的，一种基于人脸质量检测结果从第一图像中确定出目标图像帧的实施方式，包括：

针对第一图像中包括第一人脸的图像帧序列，将图像帧序列中人脸质量检测结果最高的一帧或多帧图像确定为目标图像帧。

其中，上述图像帧序列是指第一人脸出现在第一图像至该第一人脸离开第一图像的连续图像帧，该图像帧序列中的每一帧图像均包括该第一人脸，如图3所示，假设该图像帧序列包括60帧图像，在跟踪过程中，对每一帧中的第一人脸进行人脸质量检测，将该60帧中人脸质量检测结果最高(即人脸质量评分最大)的一帧或多帧(奇数帧)图像确定为目标图像帧。该实施方式中，将人脸质量检测结果最高的一帧或多帧图像确定为用于活体检测的目标图像帧，有利于提高活体检测的准确度。

示例性的，另一种基于人脸质量检测结果从第一图像中确定出目标图像帧的实施方式，包括：

在图像帧序列中出现人脸质量检测结果大于或等于阈值的图像帧时，将人脸质量检测结果大于或等于阈值的一帧或多帧图像确定为目标图像帧。

其中，在跟踪过程中，只要出现该人脸质量检测结果大于或等于阈值的图像帧，即将该图像帧确定为目标图像帧。比如上述60帧图像，前第1到4帧对应的人脸质量检测结果均小于阈值，检测到第5帧时，第5帧对应的人脸质量检测结果大于或等于阈值，则将第5帧确定为目标图像帧。当然，短时间内还可能检测到多帧图像对应的人脸质量检测结果大于或等于阈值，则同样将其确定为目标图像帧。该实施方式中，将最早出现的一帧或多帧人脸质量检测结果大于或等于阈值的图像帧确定为目标图像帧，有利于保证活体检测或人脸识别的实时性，减少检测时间。

示例性的，另一种基于人脸质量检测结果从第一图像中确定出目标图像帧的实施方式，包括：

在图像帧序列中以预设时间或预设帧率为间隔，将间隔内人脸质量检测结果最高的一帧或多帧图像确定为目标图像帧。

其中，在跟踪过程中可按照一定帧率为间隔，选出每个间隔内第一人脸的人脸质量检测结果最高的一帧或多帧图像，比如以30fps(frames per second，帧/秒)为间隔，每30帧中选出人脸质量检测结果最高的一帧或多帧图像为目标图像帧。或者以时间为间隔，在图像帧序列中每3秒选出人脸质量检测结果最高的一帧或多帧图像，等等。该实施方式中，以时间或帧率为间隔选出人脸质量检测结果最高的一帧或多帧图像为目标图像帧，一定程度上有利于保证活体检测或人脸识别的实时性，另外，由于存在一定间隔，目标对象在检测过程中可及时将第一人脸的姿态调整至适合活体检测的状态，采用这样的目标图像帧进行活体检测，有利于提高活体通过率，从而提升同行效率。

示例性的，另一种基于人脸质量检测结果从第一图像中确定出目标图像帧的实施方式，包括：

将图像帧序列中人脸质量检测结果依次大于或等于n个阈值的n帧图像确定为目标图像帧；n个阈值依次递增。

其中，此处可采用n个阈值进行目标图像帧的选取，n为大于1的奇数，比如采用3个阈值a1,a2,a3，则a1,a2,a3依次递增，对于上述60帧图像，依次对其进行第一人脸的人脸质量检测，当出现人脸质量检测结果大于或等于a1的图像帧时，将该图像帧确定为目标图像帧，继续进行第一人脸的人脸质量检测，当出现人脸质量检测结果大于或等于a2的图像帧时，将该图像帧确定为目标图像帧，同理，继续选出人脸质量检测结果大于或等于a3的图像帧为目标图像帧。该实施方式中，由于对阈值进行了递增处理，可有效保证选出的目标图像帧不是连续帧，从而使目标图像帧之间第一人脸的姿态等差异更为明显，有利于提高活体通过率。

203：从第二图像中确定出目标图像帧的对应图像帧。

本申请具体实施例中，由于第二图像是与第一图像同步采集得到的，因此，在确定出目标图像帧的情况下，电子设备可直接从第二图像中确定出目标图像帧的对应图像帧，比如第一图像中的第5帧为目标图像帧，则第二图像中的第5帧为对应图像帧。与第一图像类似的，电子设备还可同步对第二图像执行人脸检测、人脸跟踪和人脸质量检测的操作，以得到上述对应图像帧，此处不作限定。

204：从目标图像帧中截取出第一人脸区域图像，以及从对应图像帧中截取出第二人脸区域图像。

本申请具体实施例中，上述从目标图像帧中截取出第一人脸区域图像，包括：

根据第一人脸在目标图像帧中的第一位置信息从目标图像帧中截取出第一人脸区域图像；

上述从对应图像帧中截取出第二人脸区域图像，包括：

根据第一位置信息以及目标图像帧与对应图像帧之间的视场差从对应图像帧中截取出第二人脸区域图像；第二人脸区域图像中包括第二人脸，第二人脸是与第一人脸相匹配的人脸。

其中，第一位置信息是指第一人脸在目标图像帧中的左上角坐标和右下角坐标，电子设备可直接将该左上角坐标和右下角坐标构成的矩形区域截取出，得到上述第一人脸区域图像。可选的，电子设备还可将该左上角坐标和右下角坐标构成的矩形区域作为候选区域，按照一定预设比例对该候选区域进行放大，将放大后的目标区域截取出，得到上述第一人脸区域图像，这样通过外扩抓图，有利于保证第一人脸区域图像中能够包括完整的第一人脸。

应当理解的，双目摄像头中两个摄像头采集的图像会存在一定视场差，一种根据第一位置信息以及该视场差从对应图像帧中截取出第二人脸区域图像的实施方式，包括：

根据第一位置信息以及视场差从对应图像帧中确定出第一候选区域；

根据第一预设比例和第一候选区域从对应图像帧中截取出第二人脸区域图像。

示例性的，如图4所示，上述根据第一预设比例和第一候选区域从对应图像帧中截取出第二人脸区域图像，包括步骤401-403：

401：按照第一预设比例将第一候选区域放大，得到第一目标区域；第一目标区域中包括至少一张人脸；

402：将至少一张人脸与第一人脸进行匹配，以从至少一张人脸中确定出第二人脸；

403：根据第二人脸在对应图像帧中的第二位置信息从对应图像帧中截取出第二人脸区域图像。

其中，第一候选区域是指第一位置信息在目标图像帧中构成的矩形区域，经过视场差计算得到的对应图像帧中的对应区域，比如第一位置信息中左上角坐标为(100,100)，则经过视场差计算得到其在对应图像帧中的对应坐标为(100,120)，右下角坐标为(180,30)，则经过视场差计算得到其在对应图像帧中的对应坐标为(180,50)，如此，由第一位置信息中左上角坐标和右下角坐标在对应图像帧中的对应坐标构成的矩形区域，得到上述第一候选区域。

另外，为了在对应图像帧中精确匹配到第二人脸，需要按照第一预设比例对第一候选区域进行放大，比如第一候选区域按照第一预设比例向横向和纵向扩大，对于放大后得到的第一目标区域中的至少一张人脸，对该至少一张人脸中的每张人脸进行特征提取，然后将每张人脸的特征与第一人脸的特征进行匹配，将相似度最高或达到预设值的人脸确定为与第一人脸相匹配的第二人脸，其中，第一人脸的特征可以在确定出目标图像帧时提取，也可以与该至少一张人脸同步提取。与从目标图像帧中截取出第一人脸区域图像类似的，第二位置信息是指第二人脸在对应图像帧中的左上角坐标和右下角坐标，电子设备可直接将该左上角坐标和右下角坐标构成的矩形区域截取出，得到上述第二人脸区域图像。可选的，电子设备还可将该左上角坐标和右下角坐标构成的矩形区域作为候选区域，按照一定预设比例对该候选区域进行放大，将放大后的目标区域截取出，得到上述第二人脸区域图像，这样通过外扩抓图，有利于保证第二人脸区域图像中能够包括完整的第二人脸。该实施方式中，由于是将第一候选区域进行放大，用放大后的第一目标区域中的至少一张人脸与第一人脸进行匹配，而不是将整个对应图像帧中的人脸与第一人脸进行匹配，减少了需要做识别匹配的人脸的数量，仅需较小的网络模型即可完成特征提取，从而有利于节省资源。另外，采用第一目标区域中的至少一张人脸与第一人脸进行匹配的方式，适用于双目中的多人脸场景，由于其仍能够精确匹配出目标对象在对应图像帧中的第二人脸，一定程度上降低了对双目摄像头安装位置和像素标定的要求。

205：对第一人脸区域图像和第二人脸区域图像进行活体检测，得到目标对象的活体检测结果。

对于截取出的第一人脸区域图像和第二人脸区域图像，采用训练好的活体检测模型对其进行处理，得到目标对象的活体检测结果。

可以看出，本申请实施例通过获取双目摄像头同步采集的第一图像和第二图像；对第一图像中目标对象的第一人脸进行人脸质量检测，基于人脸质量检测结果从第一图像中确定出目标图像帧；从第二图像中确定出目标图像帧的对应图像帧；从目标图像帧中截取出第一人脸区域图像，以及从对应图像帧中截取出第二人脸区域图像；对第一人脸区域图像和第二人脸区域图像进行活体检测，得到目标对象的活体检测结果。这样针对双目摄像头同步采集的第一图像和第二图像，由于目标图像帧是基于对第一人脸进行人脸质量检测，从第一图像中选出来的人脸质量较好的图像帧，而对应图像帧是第二图像中与目标图像帧对应的图像帧，其人脸质量也相对较好，采用人脸质量较好的目标图像帧中截取出的第一人脸区域图像和其对应图像帧中截取出的第二人脸区域图像进行活体检测，有利于提升活体检测的准确度。

请参见图5，图5为本申请实施例提供的另一种基于双目摄像头的活体检测方法的流程示意图，如图5所示，包括步骤501-506：

501：获取双目摄像头同步采集的第一图像和第二图像；

502：对第一图像中目标对象的第一人脸进行人脸质量检测，基于人脸质量检测结果从第一图像中确定出目标图像帧；

其中，目标图像帧中包括目标对象的第一人脸；

503：从第二图像中确定出目标图像帧的对应图像帧；

504：根据第一人脸在目标图像帧中的第一位置信息从目标图像帧中截取出第一人脸区域图像；

其中，根据第一人脸在目标图像帧中的第一位置信息从目标图像帧中截取出第一人脸区域图像，包括：

根据第一位置信息从目标图像帧中确定出第二候选区域；

根据第二预设比例和第二候选区域从目标图像帧中截取出第一人脸区域图像。

其中，根据第二预设比例和第二候选区域从目标图像帧中截取出第一人脸区域图像，包括：

按照第二预设比例将第二候选区域放大，得到第二目标区域；

从目标图像帧中截取出第二目标区域得到第一人脸区域图像。

其中，第二候选区域是指第一位置信息在目标图像帧中构成的矩形区域，第二目标区域是指第二候选区域放大后的区域。

505：根据第一位置信息以及目标图像帧与对应图像帧之间的视场差从对应图像帧中截取出第二人脸区域图像；第二人脸区域图像中包括第二人脸，第二人脸是与第一人脸相匹配的人脸；

其中，根据第一位置信息以及目标图像帧与对应图像帧之间的视场差从对应图像帧中截取出第二人脸区域图像，包括：

根据第一位置信息以及视场差从对应图像帧中确定出第一候选区域；

根据第一预设比例和第一候选区域从对应图像帧中截取出第二人脸区域图像。

其中，根据第一预设比例和第一候选区域从对应图像帧中截取出第二人脸区域图像，包括：

按照第一预设比例将第一候选区域放大，得到第一目标区域；第一目标区域中包括至少一张人脸；

将至少一张人脸与第一人脸进行匹配，以从至少一张人脸中确定出第二人脸；

根据第二人脸在对应图像帧中的第二位置信息从对应图像帧中截取出第二人脸区域图像。

其中，根据第二人脸在对应图像帧中的第二位置信息从对应图像帧中截取出第二人脸区域图像，包括：

根据第二位置信息从对应图像帧中确定出第三候选区域；

按照第三预设比例将第三候选区域放大，得到第三目标区域；

从对应图像帧中截取出第三目标区域得到第二人脸区域图像。

其中，第三候选区域是指第二位置信息在对应图像帧中构成的矩形区域，第三预设比例可以与第二预设比例相同，也可以不同，第三目标区域是指第三候选区域放大后的区域。

506：对第一人脸区域图像和第二人脸区域图像进行活体检测得到目标对象的活体检测结果。

其中，上述步骤501-506的具体实施方式，在图2所示的实施例中已有相关说明，且能达到相同或相似的有益效果，此处不再赘述。

基于图2或图5所示方法实施例的描述，本申请实施例还提供一种基于双目摄像头的活体检测装置，请参见图6，图6为本申请实施例提供的一种基于双目摄像头的活体检测装置的结构示意图，如图6所示，该装置包括：

获取模块601，用于获取双目摄像头同步采集的第一图像和第二图像；

第一确定模块602，用于对第一图像中目标对象的第一人脸进行人脸质量检测，基于人脸质量检测结果从第一图像中确定出目标图像帧；

第二确定模块603，用于从第二图像中确定出目标图像帧的对应图像帧；

图像截取模块604，用于从目标图像帧中截取出第一人脸区域图像，以及从对应图像帧中截取出第二人脸区域图像；

检测模块605，用于对第一人脸区域图像和第二人脸区域图像进行活体检测，得到目标对象的活体检测结果。

在一种可能的实施方式中，在从目标图像帧中截取出第一人脸区域图像方面，图像截取模块604具体用于：

根据第一人脸在目标图像帧中的第一位置信息从目标图像帧中截取出第一人脸区域图像；

在从对应图像帧中截取出第二人脸区域图像方面，图像截取模块604具体用于：

根据第一位置信息以及目标图像帧与对应图像帧之间的视场差从对应图像帧中截取出第二人脸区域图像；第二人脸区域图像中包括第二人脸，第二人脸是与第一人脸相匹配的人脸。

在一种可能的实施方式中，在根据第一位置信息以及目标图像帧与对应图像帧之间的视场差从对应图像帧中截取出第二人脸区域图像方面，图像截取模块604具体用于：

根据第一位置信息以及视场差从对应图像帧中确定出第一候选区域；

根据第一预设比例和第一候选区域从对应图像帧中截取出第二人脸区域图像；

在根据第一人脸在目标图像帧中的第一位置信息从目标图像帧中截取出第一人脸区域图像方面，图像截取模块604具体用于：

根据第一位置信息从目标图像帧中确定出第二候选区域；

根据第二预设比例和第二候选区域从目标图像帧中截取出第一人脸区域图像。

在一种可能的实施方式中，在根据第一预设比例和第一候选区域从对应图像帧中截取出第二人脸区域图像方面，图像截取模块604具体用于：

按照第一预设比例将第一候选区域放大，得到第一目标区域；第一目标区域中包括至少一张人脸；

将至少一张人脸与第一人脸进行匹配，以从至少一张人脸中确定出第二人脸；

根据第二人脸在对应图像帧中的第二位置信息从对应图像帧中截取出第二人脸区域图像。

在一种可能的实施方式中，在对第一图像中目标对象的第一人脸进行人脸质量检测方面，第一确定模块602具体用于：

对第一图像中的图像帧进行人脸检测；

在检测到第一人脸的情况下，对第一人脸进行跟踪；

在跟踪过程中对第一人脸进行人脸质量检测。

在一种可能的实施方式中，在基于人脸质量检测结果从第一图像中确定出目标图像帧方面，第一确定模块602具体用于：

针对第一图像中包括第一人脸的图像帧序列，将图像帧序列中人脸质量检测结果最高的一帧或多帧图像确定为目标图像帧；或者，

在图像帧序列中出现人脸质量检测结果大于或等于阈值的图像帧时，将人脸质量检测结果大于或等于阈值的一帧或多帧图像确定为目标图像帧；或者，

在图像帧序列中以预设时间或预设帧率为间隔，将间隔内人脸质量检测结果最高的一帧或多帧图像确定为目标图像帧；或者，

将图像帧序列中人脸质量检测结果依次大于或等于n个阈值的n帧图像确定为目标图像帧；n个阈值依次递增。

在一种可能的实施方式中，在根据第二预设比例和第二候选区域从目标图像帧中截取出第一人脸区域图像方面，图像截取模块604具体用于：

按照第二预设比例将第二候选区域放大，得到第二目标区域；

从目标图像帧中截取出第二目标区域得到第一人脸区域图像。

在一种可能的实施方式中，在根据第二人脸在对应图像帧中的第二位置信息从对应图像帧中截取出第二人脸区域图像方面，图像截取模块604具体用于：

根据第二位置信息从对应图像帧中确定出第三候选区域；

按照第三预设比例将第三候选区域放大，得到第三目标区域；

从对应图像帧中截取出第三目标区域得到第二人脸区域图像。

根据本申请的一个实施例，图6所示的基于双目摄像头的活体检测装置中的各个单元可以分别或全部合并为一个或若干个另外的单元来构成，或者其中的某个(些)单元还可以再拆分为功能上更小的多个单元来构成，这可以实现同样的操作，而不影响本申请的实施例的技术效果的实现。上述单元是基于逻辑功能划分的，在实际应用中，一个单元的功能也可以由多个单元来实现，或者多个单元的功能由一个单元实现。在本申请的其它实施例中，基于双目摄像头的活体检测装置也可以包括其它单元，在实际应用中，这些功能也可以由其它单元协助实现，并且可以由多个单元协作实现。

根据本申请的另一个实施例，可以通过在包括中央处理单元(CPU)、随机存取存储介质(RAM)、只读存储介质(ROM)等处理元件和存储元件的例如计算机的通用计算设备上运行能够执行如图2或图5中所示的相应方法所涉及的各步骤的计算机程序(包括程序代码)，来构造如图6中所示的基于双目摄像头的活体检测装置设备，以及来实现本申请实施例的基于双目摄像头的活体检测方法。所述计算机程序可以记载于例如计算机可读记录介质上，并通过计算机可读记录介质装载于上述计算设备中，并在其中运行。

基于上述方法实施例和装置实施例的描述，本申请实施例还提供一种电子设备。请参见图7，该电子设备至少包括处理器701、输入设备702、输出设备703以及计算机存储介质704。其中，电子设备内的处理器701、输入设备702、输出设备703以及计算机存储介质704可通过总线或其他方式连接。

计算机存储介质704可以存储在电子设备的存储器中，所述计算机存储介质704用于存储计算机程序，所述计算机程序包括程序指令，所述处理器701用于执行所述计算机存储介质704存储的程序指令。处理器701(或称CPU(Central Processing Unit，中央处理器))是电子设备的计算核心以及控制核心，其适于实现一条或多条指令，具体适于加载并执行一条或多条指令从而实现相应方法流程或相应功能。

在一个实施例中，本申请实施例提供的电子设备的处理器701可以用于进行一系列基于双目摄像头的活体检测处理：

获取双目摄像头同步采集的第一图像和第二图像；

对第一图像中目标对象的第一人脸进行人脸质量检测，基于人脸质量检测结果从第一图像中确定出目标图像帧；

从第二图像中确定出目标图像帧的对应图像帧；

从目标图像帧中截取出第一人脸区域图像，以及从对应图像帧中截取出第二人脸区域图像；

对第一人脸区域图像和第二人脸区域图像进行活体检测，得到目标对象的活体检测结果。

再一个实施例中，目标图像帧中包括上述第一人脸；处理器701执行上述从目标图像帧中截取出第一人脸区域图像，包括：

根据第一人脸在目标图像帧中的第一位置信息从目标图像帧中截取出第一人脸区域图像；

处理器701执行上述从对应图像帧中截取出第二人脸区域图像，包括：

根据第一位置信息以及目标图像帧与对应图像帧之间的视场差从对应图像帧中截取出第二人脸区域图像；第二人脸区域图像中包括第二人脸，第二人脸是与第一人脸相匹配的人脸。

再一个实施例中，处理器701执行上述根据第一位置信息以及目标图像帧与对应图像帧之间的视场差从对应图像帧中截取出第二人脸区域图像，包括：

根据第一位置信息以及视场差从对应图像帧中确定出第一候选区域；

根据第一预设比例和第一候选区域从对应图像帧中截取出第二人脸区域图像；

处理器701执行上述根据第一人脸在目标图像帧中的第一位置信息从目标图像帧中截取出第一人脸区域图像，包括：

根据第一位置信息从目标图像帧中确定出第二候选区域；

根据第二预设比例和第二候选区域从目标图像帧中截取出第一人脸区域图像。

再一个实施例中，处理器701执行上述根据第一预设比例和第一候选区域从对应图像帧中截取出第二人脸区域图像，包括：

按照第一预设比例将第一候选区域放大，得到第一目标区域；第一目标区域中包括至少一张人脸；

将至少一张人脸与第一人脸进行匹配，以从至少一张人脸中确定出第二人脸；

根据第二人脸在对应图像帧中的第二位置信息从对应图像帧中截取出第二人脸区域图像。

再一个实施例中，处理器701执行上述对第一图像中目标对象的第一人脸进行人脸质量检测，包括：

对第一图像中的图像帧进行人脸检测；

在检测到第一人脸的情况下，对第一人脸进行跟踪；

在跟踪过程中对第一人脸进行人脸质量检测。

再一个实施例中，处理器701执行上述基于人脸质量检测结果从第一图像中确定出目标图像帧，包括：

针对第一图像中包括第一人脸的图像帧序列，将图像帧序列中人脸质量检测结果最高的一帧或多帧图像确定为目标图像帧；或者，

在图像帧序列中出现人脸质量检测结果大于或等于阈值的图像帧时，将人脸质量检测结果大于或等于阈值的一帧或多帧图像确定为目标图像帧；或者，

在图像帧序列中以预设时间或预设帧率为间隔，将间隔内人脸质量检测结果最高的一帧或多帧图像确定为目标图像帧；或者，

将图像帧序列中人脸质量检测结果依次大于或等于n个阈值的n帧图像确定为目标图像帧；n个阈值依次递增。

再一个实施例中，处理器701执行上述根据第二预设比例和第二候选区域从目标图像帧中截取出第一人脸区域图像，包括：

按照第二预设比例将第二候选区域放大，得到第二目标区域；

从目标图像帧中截取出第二目标区域得到第一人脸区域图像。

再一个实施例中，处理器701执行上述根据第二人脸在对应图像帧中的第二位置信息从对应图像帧中截取出第二人脸区域图像，包括：

根据第二位置信息从对应图像帧中确定出第三候选区域；

按照第三预设比例将第三候选区域放大，得到第三目标区域；

从对应图像帧中截取出第三目标区域得到第二人脸区域图像。

示例性的，电子设备可包括但不仅限于处理器701、输入设备702、输出设备703以及计算机存储介质704，输入设备702可以是键盘、触摸屏等，输出设备703可以是扬声器、显示器、射频发送器等。本领域技术人员可以理解，所述示意图仅仅是电子设备的示例，并不构成对电子设备的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件。

需要说明的是，由于电子设备的处理器701执行计算机程序时实现上述的基于双目摄像头的活体检测方法中的步骤，因此上述基于双目摄像头的活体检测方法的实施例均适用于该电子设备，且均能达到相同或相似的有益效果。

本申请实施例还提供了一种计算机存储介质(Memory)，所述计算机存储介质是电子设备中的记忆设备，用于存放程序和数据。可以理解的是，此处的计算机存储介质既可以包括终端中的内置存储介质，当然也可以包括终端所支持的扩展存储介质。计算机存储介质提供存储空间，该存储空间存储了终端的操作系统。并且，在该存储空间中还存放了适于被处理器701加载并执行的一条或多条的指令，这些指令可以是一个或一个以上的计算机程序(包括程序代码)。需要说明的是，此处的计算机存储介质可以是高速RAM存储器，也可以是非不稳定的存储器(non-volatile memory)，例如至少一个磁盘存储器；可选的，还可以是至少一个位于远离前述处理器701的计算机存储介质。在一个实施例中，可由处理器701加载并执行计算机存储介质中存放的一条或多条指令，以实现上述有关基于双目摄像头的活体检测方法的相应步骤。

示例性的，计算机存储介质的计算机程序包括计算机程序代码，所述计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。所述计算机可读介质可以包括：能够携带所述计算机程序代码的任何实体或装置、记录介质、U盘、移动硬盘、磁碟、光盘、计算机存储器、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、电载波信号、电信信号以及软件分发介质等。

需要说明的是，由于计算机存储介质的计算机程序被处理器执行时实现上述的基于双目摄像头的活体检测方法中的步骤，因此上述基于双目摄像头的活体检测方法的所有实施例均适用于该计算机存储介质，且均能达到相同或相似的有益效果。

以上对本申请实施例进行了详细介绍，本文中应用了具体个例对本申请的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本申请的方法及其核心思想；同时，对于本领域的一般技术人员，依据本申请的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本申请的限制。

Claims (11)

1.一种基于双目摄像头的活体检测方法，其特征在于，所述方法包括：

获取双目摄像头同步采集的第一图像和第二图像；

对所述第一图像中目标对象的第一人脸进行人脸质量检测，基于人脸质量检测结果从所述第一图像中确定出目标图像帧；

从所述第二图像中确定出所述目标图像帧的对应图像帧；

从所述目标图像帧中截取出第一人脸区域图像，以及从所述对应图像帧中截取出第二人脸区域图像；

对所述第一人脸区域图像和所述第二人脸区域图像进行活体检测，得到所述目标对象的活体检测结果。

2.根据权利要求1所述的方法，其特征在于，所述目标图像帧中包括所述第一人脸；所述从所述目标图像帧中截取出第一人脸区域图像，包括：

根据所述第一人脸在所述目标图像帧中的第一位置信息从所述目标图像帧中截取出第一人脸区域图像；

所述从所述对应图像帧中截取出第二人脸区域图像，包括：

根据所述第一位置信息以及所述目标图像帧与所述对应图像帧之间的视场差从所述对应图像帧中截取出第二人脸区域图像；所述第二人脸区域图像中包括第二人脸，所述第二人脸是与所述第一人脸相匹配的人脸。

3.根据权利要求2所述的方法，其特征在于，所述根据所述第一位置信息以及所述目标图像帧与所述对应图像帧之间的视场差从所述对应图像帧中截取出第二人脸区域图像，包括：

根据所述第一位置信息以及所述视场差从所述对应图像帧中确定出第一候选区域；

根据第一预设比例和所述第一候选区域从所述对应图像帧中截取出所述第二人脸区域图像；

所述根据所述第一人脸在所述目标图像帧中的第一位置信息从所述目标图像帧中截取出第一人脸区域图像，包括：

根据所述第一位置信息从所述目标图像帧中确定出第二候选区域；

根据第二预设比例和所述第二候选区域从所述目标图像帧中截取出所述第一人脸区域图像。

4.根据权利要求3所述的方法，其特征在于，所述根据第一预设比例和所述第一候选区域从所述对应图像帧中截取出所述第二人脸区域图像，包括：

按照所述第一预设比例将所述第一候选区域放大，得到第一目标区域；所述第一目标区域中包括至少一张人脸；

将所述至少一张人脸与所述第一人脸进行匹配，以从所述至少一张人脸中确定出所述第二人脸；

根据所述第二人脸在所述对应图像帧中的第二位置信息从所述对应图像帧中截取出所述第二人脸区域图像。

5.根据权利要求2-4任一项所述的方法，其特征在于，所述对所述第一图像中目标对象的第一人脸进行人脸质量检测，包括：

对所述第一图像中的图像帧进行人脸检测；

在检测到所述第一人脸的情况下，对所述第一人脸进行跟踪；

在跟踪过程中对所述第一人脸进行人脸质量检测。

6.根据权利要求2-4任一项所述的方法，其特征在于，所述基于人脸质量检测结果从所述第一图像中确定出目标图像帧，包括：

针对所述第一图像中包括所述第一人脸的图像帧序列，将所述图像帧序列中所述人脸质量检测结果最高的一帧或多帧图像确定为所述目标图像帧；或者，

在所述图像帧序列中出现所述人脸质量检测结果大于或等于阈值的图像帧时，将所述人脸质量检测结果大于或等于阈值的一帧或多帧图像确定为所述目标图像帧；或者，

在所述图像帧序列中以预设时间或预设帧率为间隔，将所述间隔内所述人脸质量检测结果最高的一帧或多帧图像确定为所述目标图像帧；或者，

将所述图像帧序列中所述人脸质量检测结果依次大于或等于n个阈值的n帧图像确定为所述目标图像帧；所述n个阈值依次递增。

7.根据权利要求3所述的方法，其特征在于，所述根据第二预设比例和所述第二候选区域从所述目标图像帧中截取出所述第一人脸区域图像，包括：

按照所述第二预设比例将所述第二候选区域放大，得到第二目标区域；

从所述目标图像帧中截取出所述第二目标区域得到所述第一人脸区域图像。

8.根据权利要求4所述的方法，其特征在于，所述根据所述第二人脸在所述对应图像帧中的第二位置信息从所述对应图像帧中截取出所述第二人脸区域图像，包括：

根据所述第二位置信息从所述对应图像帧中确定出第三候选区域；

按照第三预设比例将所述第三候选区域放大，得到第三目标区域；

从所述对应图像帧中截取出所述第三目标区域得到所述第二人脸区域图像。

9.一种基于双目摄像头的活体检测装置，其特征在于，所述装置包括：

获取模块，用于获取双目摄像头同步采集的第一图像和第二图像；

第一确定模块，用于对所述第一图像中目标对象的第一人脸进行人脸质量检测，基于人脸质量检测结果从所述第一图像中确定出目标图像帧；

第二确定模块，用于从所述第二图像中确定出所述目标图像帧的对应图像帧；

图像截取模块，用于从所述目标图像帧中截取出第一人脸区域图像，以及从所述对应图像帧中截取出第二人脸区域图像；

检测模块，对所述第一人脸区域图像和所述第二人脸区域图像进行活体检测，得到所述目标对象的活体检测结果。

10.一种电子设备，包括输入设备和输出设备，其特征在于，还包括：

处理器，适于实现一条或多条指令；以及，

计算机存储介质，所述计算机存储介质存储有一条或多条指令，所述一条或多条指令适于由所述处理器加载并执行如权利要求1-8任一项所述的方法。

11.一种计算机存储介质，其特征在于，所述计算机存储介质存储有一条或多条指令，所述一条或多条指令适于由处理器加载并执行如权利要求1-8任一项所述的方法。

Images