CN113743150A - 人脸图像采集方法、识别方法、柔性屏终端和存储介质 - Google Patents

Abstract

本发明公开一种人脸图像采集方法、识别方法、柔性屏终端和存储介质，属于图像处理技术领域。该方法包括：通过根据柔性屏的形变，控制所述柔性屏终端的拍摄装置相对用户的人脸运动以采集所述用户的人脸图像。可见，本技术方案实现通过与柔性屏形变特性的结合，提高人脸图像采集的准确率和安全性。

Description

人脸图像采集方法、识别方法、柔性屏终端和存储介质

技术领域

本发明涉及图像处理技术领域，尤其涉及一种人脸图像采集方法、识别方法、柔性屏终端和存储介质。

背景技术

人脸识别技术已广泛应用，比如用于身份验证或解锁等，目前主流的人脸解锁方式包括2D人脸解锁与3D人脸解锁。其中，2D人脸识别没有充分利用人脸的三维信息，在实际使用中容易被照片、视频等手段欺骗，进而识别的准确率较低；3D人脸识别利用了人脸的三维信息，安全性较高，但是3D人脸识别传感器的成本过高，同时3D人脸识别传感器内置在手机显示屏的“刘海”里面，这样会影响手机的观感而且无法再次突破更高的屏占比。

发明内容

本申请提供了一种人脸图像采集方法、识别方法、柔性屏终端和存储介质，以提高人脸图像采集的准确率和安全性。

为实现上述目的，本发明实施例提供了一种人脸图像采集方法，应用于柔性屏终端，所述方法包括以下步骤：根据柔性屏的形变，控制所述柔性屏终端的拍摄装置相对用户的人脸运动以采集所述用户的人脸图像。

为实现上述目的，本发明实施例还提出了一种识别方法，应用于柔性屏终端，所述方法包括：采集人脸图像，根据人脸图像进行人脸识别，其中，所述人脸图像为通过前述的人脸图像采集方法采集的。

为实现上述目的，本发明实施例还提出了一种柔性屏终端，包括柔性屏、拍摄装置、处理器、存储器；所述柔性屏用于显示，所述拍摄装置用于拍摄图像；所述存储器用于存储计算机程序；所述处理器，用于执行所述计算机程序并在执行所述计算机程序时实现前述的人脸图像采集方法的步骤；或，实现前述的识别方法的步骤。

为实现上述目的，本发明实施例还提出了一种存储介质，用于计算机可读存储，所述存储介质存储有一个或者多个程序，所述一个或者多个程序可被一个或者多个处理器执行，以实现前述方法的步骤；或，实现前述的识别方法的步骤。

本申请公开了一种人脸图像采集方法、识别方法、柔性屏终端和存储介质，通过根据柔性屏的形变，控制所述柔性屏终端的拍摄装置相对用户的人脸运动以采集所述用户的人脸图像。可见，本技术方案实现通过与柔性屏形变特性的结合，提高人脸图像采集的准确率和安全性。

附图说明

图1是本发明一实施例提供的一种人脸图像采集方法的示意流程图。

图2和图3是本发明手持柔性屏终端示意图。

图4是本发明一实施例提供的另一种人脸图像采集方法的示意流程图。

图5-图10是人脸图像采集方法实施方式中柔性屏终端显示人脸图像的示意图。

图11是本发明实施方式中控制柔性屏形变的示意图。

图12是本发明一实施例提供的另一种人脸图像采集方法的示意流程图。

图13是本发明实施方式中控制柔性屏转动的示意图。

图14是本发明一实施例提供的另一种人脸图像采集方法的示意流程图。

图15是本发明一实施例提供的一种识别方法的示意流程图。

图16为本申请一实施例提供的一种柔性屏终端的结构示意性框图。

具体实施方式

下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。

附图中所示的流程图仅是示例说明，不是必须包括所有的内容和操作/步骤，也不是必须按所描述的顺序执行。例如，有的操作/步骤还可以分解、组合或部分合并，因此实际执行的顺序有可能根据实际情况改变。

本申请的实施例提供了一种人脸图像采集方法、识别方法、柔性屏终端和存储介质。其中，人脸图像采集方法和识别方法可以应用于柔性屏终端。

具体的，柔性屏终端包括至少一个柔性屏，柔性屏可以显示人脸图像；包括至少一个拍摄装置，用于采集人脸图像，其中拍摄装置包括摄像头。

示例性的，柔性屏终端可以为手机、平板、笔记本、电视、专用图像采集设备等。例如，柔性屏终端为具有两个柔性屏的双屏手机或者具有一个柔性屏的单屏手机，或者为柔性屏可折叠的手机等。

下面结合附图，对本申请的一些实施方式作详细说明。在不冲突的情况下，下述的实施例及实施例中的特征可以相互组合。

请参阅图1，图1是本申请的一实施例提供的一种人脸图像采集方法的示意流程图。

如图1所示，本实施例提供了一种人脸图像采集方法，该方法包括以下步骤：

步骤S110：根据柔性屏的形变，控制所述柔性屏终端的拍摄装置相对用户的人脸运动以采集所述用户的人脸图像。

示例性的，柔性屏具有画面质量高、响应速度快、加工工艺简单、抗挠曲性优良、驱动电压低等优点。例如，在智能手机领域，柔性屏正成为智能手机显示屏发展的大趋势。基于柔性屏终端的柔性屏具有形变的特点，通过控制铰链或基面板等使柔性屏终端的柔性屏发生形变，以使柔性屏终端上的拍摄装置相对于用户的人脸运动，以采集用户的人脸三维图像。

例如，如图2所示和如图3所示，用户手持柔性屏终端，具体可以竖屏或横屏。柔性屏终端通过控制铰链或基面板使柔性屏发生形变，柔性屏发生形变带动拍摄装置相对于用户的人脸做顺时针或逆时针运动，使拍摄装置从各个角度采集用户人脸的三维特征图像。柔性屏发生形变可以是拍摄装置处的部分柔性屏发生形变，也可以是其它部分的柔性屏发生形变。

在本发明实施例中，根据柔性屏可以发生形变的原理，控制柔性屏终端的拍摄装置相对于人脸做运行，以采集用过户的人脸图像，避免了在使用过程中容易被照片、视频等手段欺骗，提高了人脸图像识别准确率低、安全性较差的问题。

如图4所示，本发明的实施例提供了另一种人脸图像采集方法的示意流程图，该方法包括以下步骤：

步骤S120：根据人脸图像在所述柔性屏中的位置信息确定所述柔性屏的形变参数。

示例性的，如图5所示，用户手持柔性屏终端，柔性屏终端上的拍摄装置拍摄用户的脸部，将拍摄到的人脸图像显示在柔性屏终端的柔性屏上。确定该人脸图像在柔性屏中的位置，基于该人脸图像在柔性屏中的位置确定柔性屏的形变参数。例如，用户手持柔性屏终端，打开拍摄装置，通过拍摄装置拍摄用户的人脸图像，拍摄到的人脸图像呈现在柔性屏上。获取该人脸图像在柔性屏中的位置，其中，预先将柔性屏均匀分为四个区域。确定该人脸图像处于该四个区域的哪一个区域，通过该人脸图像处于的区域，确定该柔性屏的形变参数。

具体的，确定所述柔性屏的形变参数包括：获取所述人脸图像在所述柔性屏中的位置坐标，以及所述拍摄装置的预置位置坐标；根据所述位置坐标和所述预置位置坐标确定所述柔性屏的形变参数。

示例性的，获取拍摄装置拍摄用户的人脸图像，将该人脸图像显示在柔性屏中，确定该人脸图像在柔性屏中的位置坐标。预先在柔性屏中建立一个坐标系，并确定拍摄装置在该坐标系中的预置坐标位置。通过该位置坐标和预置位置坐标坐标系中的位置，确定该柔性屏的形变参数。

具体的，获取人脸图像在所述柔性屏中的位置坐标包括：识别所述人脸图像中的目标特征；根据所述目标特征确定所述人脸图像在所述柔性屏中的位置坐标。

示例性的，将拍摄装置拍摄用户的人脸图像在柔性屏终端的柔性屏中显示，识别柔性屏中人脸图像的目标特征，该目标特征包括鼻尖特征或眼睛特征等。识别的方式包括图像分割等。将识别到人脸图像中的鼻尖特征或眼睛特征时，确定该鼻尖特征或眼睛特征在柔性屏中的位置。基于在柔性屏中建立的坐标系，得到该鼻尖特征或眼睛特征的位置在该坐标系中的坐标，确定该鼻尖特征或眼睛特征在坐标系中的位置坐标，将该鼻尖特征或眼睛特征的位置坐标作为人脸图像在柔性屏中的位置坐标。

具体的，确定所述柔性屏的形变参数包括：确定所述位置坐标与所述拍摄装置的预置位置坐标是否重合；若确定所述位置坐标与所述预置位置坐标不重合，则获取所述位置坐标与所述预置位置坐标的相对方向和相对坐标；将所述相对方向和相对坐标作为所述柔性屏的形变参数。

示例性的，当获取到人脸图像的目标特征在柔性屏中的位置坐标，以及拍摄装置在柔性屏中的预置位置坐标时，判断人脸图像的目标特征在柔性屏中的位置坐标和拍摄装置在柔性屏中的预置坐标是否重合，若人脸图像的目标特征在柔性屏中的位置坐标和拍摄装置在柔性屏中的预置坐标不相同，则确定人脸图像的目标特征在柔性屏中的位置坐标和拍摄装置在柔性屏中的预置坐标不重合。例如，如图6所示，当获取到人脸图像的鼻尖在柔性屏中的位置坐标为(0,-2)，拍摄装置在柔性屏中的预置位置坐标为(0,0)，则确定人脸图像的目标特征在柔性屏中的位置坐标与拍摄装置在柔性屏中的预置位置坐标不重合。

若确定人脸图像的目标特征在柔性屏中的位置坐标与拍摄装置在柔性屏中的预置位置坐标不重合，通过该人脸图像的目标特征在柔性屏中的位置坐标与拍摄装置在柔性屏中的预置位置坐标，得到对应的相对方向和相对坐标。例如，如图6所述，当获取到人脸图像的鼻尖在柔性屏中的位置坐标为(0,-2)，拍摄装置在柔性屏中的预置位置坐标为(0,0)，得到位置坐标与预置位置坐标之间的相对方向为下方，位置坐标与预置位置坐标之间的相对坐标为2个坐标，其中，坐标为预先设置的单位距离。或者，如图7所示，当获取到人脸图像的鼻尖在柔性屏中的位置坐标为(2,0)，拍摄装置在柔性屏中的预置位置坐标为(0,0)，得到位置坐标与预置位置坐标之间的相对方向为右方，位置坐标与预置位置坐标之间的相对坐标为2个坐标，其中，坐标为预先设置的单位距离。将得到的相对方向和相对坐标作为柔性屏的形变参数。

具体的，所述确定所述位置坐标与所述拍摄装置的预置位置坐标是否重合之后，包括：若所述位置坐标与所述拍摄装置的预置位置坐标重合，则确定所述人脸图像是否包含人脸轮廓；当所述人脸图像不包含所述人脸轮廓，确定当前用户的持机姿势；根据当前用户的持机姿势，确定所述柔性屏的形变参数。

示例性的，当获取到人脸图像的目标特征在柔性屏中的位置坐标，以及拍摄装置在柔性屏中的预置位置坐标时，若人脸图像的目标特征在柔性屏中的位置坐标和拍摄装置在柔性屏中的预置坐标相同，则确定人脸图像的目标特征在柔性屏中的位置坐标和拍摄装置在柔性屏中的预置坐标重合。例如，当获取到人脸图像的鼻尖在柔性屏中的位置坐标为(0,0)，拍摄装置在柔性屏中的预置位置坐标为(0,0)，则确定人脸图像的目标特征在柔性屏中的位置坐标与拍摄装置在柔性屏中的预置位置坐标重合。

若确定人脸图像的目标特征在柔性屏中的位置坐标与拍摄装置在柔性屏中的预置位置坐标重合，则判断该人脸图像是否包含人脸轮廓。如图8所示，用户手持柔性屏终端，通过柔性屏终端的拍摄装置拍摄到用户的人脸图像，由于柔性屏终端与用户的人脸之间的距离，会导致拍摄装置没有拍摄到的用户全部的人脸轮廓，例如，柔性屏终端与用户的脸部距离太近，拍摄装置拍摄用户的人脸图像只有部分脸部特征，没有耳朵等。通过对拍摄装置拍摄到的人脸图像进行处理。例如，对人脸图像进行灰度处理等。确定该人脸图像是否包含用户的人脸轮廓，例如，通过对人脸图像进行灰度处理得到该人脸图像中的人脸轮廓，将该人脸轮廓与预置人脸轮廓进行匹配，若该人脸轮廓与预置人脸轮廓相匹配，则确定该人脸图像包含人脸轮廓；若该人脸轮廓与预置人脸轮廓不匹配，则确定该人脸图像不含人脸轮廓。

若该人脸图像不包含人脸轮廓，确定当前用户手持柔性屏终端的姿势。用户手持柔性屏终端的姿势包括用户将柔性屏终端横持和竖持。通过当前用户手持柔性屏的姿势，确定柔性屏的的形变的相对方向和相对坐标。例如，当前用户手持柔性屏终端时，获取该柔性屏终端中运动传感器检测到的重力参数和方向信息，通过重力参数和方向参数确定当前用户手持柔性屏终端的姿势。

具体的，根据当前用户的持机姿势，确定所述柔性屏的形变参数包括：若当前所述用户的持机姿势为横屏，则调整所述柔性屏向后方、上方或下方至少一个方向发生形变；或者，若当前所述用户的持机姿势为竖屏，则调整所述柔性屏向后方、左方或右方至少一个方向发生形变。

示例性的，当确定当前用户手持柔性屏终端的姿势为如图3所示的横屏，调整柔性屏终端的拍摄装置处的部分柔性屏向后发生形变，以使拍摄装置采集到的人脸图像包含人脸轮廓。例如，在调整柔性屏终端的拍摄装置处的部分柔性屏向后发生形变的过程中，拍摄装置实时采集用户的人脸图像，并确定当前采集到的人脸图像是否包含用户的人脸轮廓，若当前采集到的人脸图像不包含人脸轮廓，则继续调整柔性屏终端的拍摄装置处的部分柔性屏向后发生形变，确定采集到的人脸图像包含用户的人脸轮廓。

在确定采集到的人脸图像包含人脸轮廓，则获取人脸图像的目标特征在柔性屏中的位置坐标，以及拍摄装置在柔性屏中的预置位置坐标时，判断人脸图像的目标特征在柔性屏中的位置坐标和拍摄装置在柔性屏中的预置坐标是否重合，若人脸图像的目标特征在柔性屏中的位置坐标和拍摄装置在柔性屏中的预置坐标不相同，则确定人脸图像的目标特征在柔性屏中的位置坐标和拍摄装置在柔性屏中的预置坐标不重合。例如，当获取到人脸图像的鼻尖在柔性屏中的位置坐标为(0,1)，拍摄装置在柔性屏中的预置位置坐标为(0,0)，则确定人脸图像的目标特征在柔性屏中的位置坐标与拍摄装置在柔性屏中的预置位置坐标不重合。

若确定人脸图像的目标特征在柔性屏中的位置坐标与拍摄装置在柔性屏中的预置位置坐标不重合，通过该人脸图像的目标特征在柔性屏中的位置坐标与拍摄装置在柔性屏中的预置位置坐标，得到对应的相对方向和相对坐标。例如，当获取到人脸图像的鼻尖在柔性屏中的位置坐标为(0,1)，拍摄装置在柔性屏中的预置位置坐标为(0,0)，得到位置坐标与预置位置坐标之间的相对方向为上方，位置坐标与预置位置坐标之间的相对坐标为1个坐标。或者，当获取到人脸图像的鼻尖在柔性屏中的位置坐标为(0,-1)，拍摄装置在柔性屏中的预置位置坐标为(0,0)，得到位置坐标与预置位置坐标之间的相对方向为下方，位置坐标与预置位置坐标之间的相对坐标为1个坐标。

若确定当前用户手持柔性屏终端的姿势为如图2所示的竖屏，调整柔性屏终端的拍摄装置处的部分柔性屏向后发生形变，以使拍摄装置采集到的人脸图像包含人脸轮廓。例如，在调整柔性屏终端的拍摄装置处的部分柔性屏向后发生形变的过程中，拍摄装置实时采集用户的人脸图像，并确定当前采集到的人脸图像是否包含用户的人脸轮廓，若当前采集到的人脸图像不包含人脸轮廓，则继续调整柔性屏终端的拍摄装置处的部分柔性屏向后发生形变，确定采集到的人脸图像包含用户的人脸轮廓。

在确定采集到的人脸图像包含人脸轮廓，则获取人脸图像的目标特征在柔性屏中的位置坐标，以及拍摄装置在柔性屏中的预置位置坐标时，判断人脸图像的目标特征在柔性屏中的位置坐标和拍摄装置在柔性屏中的预置坐标是否重合，若人脸图像的目标特征在柔性屏中的位置坐标和拍摄装置在柔性屏中的预置坐标不相同，则确定人脸图像的目标特征在柔性屏中的位置坐标和拍摄装置在柔性屏中的预置坐标不重合。例如，当获取到人脸图像的鼻尖在柔性屏中的位置坐标为(2,0)，拍摄装置在柔性屏中的预置位置坐标为(0,0)，则确定人脸图像的目标特征在柔性屏中的位置坐标与拍摄装置在柔性屏中的预置位置坐标不重合。

若确定人脸图像的目标特征在柔性屏中的位置坐标与拍摄装置在柔性屏中的预置位置坐标不重合，通过该人脸图像的目标特征在柔性屏中的位置坐标与拍摄装置在柔性屏中的预置位置坐标，得到对应的相对方向和相对坐标。例如，当获取到人脸图像的鼻尖在柔性屏中的位置坐标为(2,0)，拍摄装置在柔性屏中的预置位置坐标为(0,0)，得到位置坐标与预置位置坐标之间的相对方向为右方，位置坐标与预置位置坐标之间的相对坐标为2个坐标。或者，当获取到人脸图像的鼻尖在柔性屏中的位置坐标为(-2,0)，拍摄装置在柔性屏中的预置位置坐标为(0,0)，得到位置坐标与预置位置坐标之间的相对方向为左方，位置坐标与预置位置坐标之间的相对坐标为2个坐标。

具体的，所述确定所述人脸图像是否包含人脸轮廓之后，还包括：若所述人脸图像包含所述人脸轮廓，获取所述人脸轮廓的轮廓大小；基于所述人脸轮廓的轮廓大小，确定所述柔性屏的形变参数。

示范例的，若检测到人脸图像包含人脸轮廓，获取该人脸图像中人脸轮廓的大小。例如，如图9所示或如图10所示，该人脸图像呈现在柔性屏中，确定该人脸图像中的人脸轮廓在柔性屏的坐标系中的位置坐标，计算出该人脸轮廓的长度或宽度。将计算出人脸轮廓的长度或宽度作为该人脸轮廓的轮廓大小。通过该人脸轮廓的长度或宽度，确定柔性屏的形变参数。例如，当计算出人脸轮廓的长度小于预置长度时；或者，计算出人脸轮廓的宽度小于预置宽度，确定用户与柔性屏终端之间的距离太远，会导致采集到用户的人脸图像不清晰。则调整柔性屏中拍摄装置处的部分柔性屏向前发生形变，以使拍摄装置采集当前人脸图像中的人脸轮廓的长度大于或等于预置长度或人脸轮廓的宽度大于或等于预置宽度。

获取当前人脸图像中目标特征在柔性屏中的位置坐标和拍摄装置在柔性屏中的预置位置坐标，基于该位置坐标和预置位置坐标，确定该柔性屏的相对方向和相对坐标，其中，相对方向包括上、下、左、右至少一个方向。

步骤S130：根据所述形变参数调整所述柔性屏，以使所述人脸图像位于所述柔性屏中。

示范例的，获取到柔性屏发生形变的相对方向和相对坐标，如图11所示，调整柔性屏中拍摄装置处的部分柔性屏。例如，当获取到相对方向是上方、相对坐标是2个坐标时，调整柔性屏中拍摄装置处部分柔性屏向上方移动2个坐标；或者，当获取到相对方向是右方、相对坐标是1个坐标时，调整柔性屏中拍摄装置处部分柔性屏向右方移动1个坐标。

当调整柔性屏中拍摄装置处部分柔性屏向相对方向和相对坐标发生形变后，通过拍摄装置采集当前用户的人脸图像，以使当前的人脸图像中目标特征的为位置坐标与拍摄装置的预置坐标位置重合。

若当前的人脸图像中目标特征的为位置坐标与拍摄装置的预置坐标位置不重合；或者，当前的人脸图像不包含人脸轮廓；或者，当前的人脸图像中的人脸轮廓小于预置长度或宽度，则获取柔性屏形变的相对方向和相对坐标，继续使柔性屏发生形变。

在本发明实施例中，将拍摄装置拍摄到的人脸图像显示在柔性屏终端的柔性屏中，根据柔性屏中的人脸图像的位置，确定柔性屏的形变参数。通过形变参数调整柔性屏，以使人脸图像位于柔性屏中，提高采集人脸图像的准确率。

如图12所示，本发明的实施例提供了另一种人脸图像采集方法，该方法包括以下步骤：

步骤S210：根据柔性屏的形变，控制所述拍摄装置对应的部分柔性屏相对用户的人脸转动以采集所述用户的人脸图像。

示例性的，基于柔性屏终端的柔性屏具有形变的特点，通过控制铰链或基面板等使柔性屏终端的柔性屏发生形变，柔性屏发生形变可以是拍摄装置处的部分柔性屏发生形变，也可以是其它部分的柔性屏发生形变。

在本发明实施例中，控制所述拍摄装置对应的部分柔性屏相对用户的人脸转动，可例如为逆时针转动或顺时针转动等等，并在转动的过程中采集所述用户的人脸图像。

如图5所示，用户手持柔性屏终端，拍摄装置采集用户的人脸图像，通过人脸图像中目标特征在柔性屏的位置坐标以及拍摄装置在柔性屏中的预置位置坐标、人脸图像中的人脸轮廓确定柔性屏的形变参数，柔性屏终端通过控制铰链或基面板使柔性屏按照形变参数发生形变以相对人脸转动，或配合用户转动人脸的方式，以使拍摄装置采集用户多个角度的人脸三维图像。

具体的，采集所述用户的人脸图像包括：检测当前用户的人脸是否发生移动；若所述人脸未发生移动，则控制所述拍摄装置对应的部分柔性屏相对用户的人脸顺时针或逆时针转动，并转动过程中采集所述用户的人脸图像。

示范例的，实时检测当前用户的人脸是否发生移动，检测的方式包括图像分析等。例如，实时通过拍摄装置采集用户的人脸图像，将不同时刻采集到的图像进行对比分析，判断当前用户的人脸是否发生移动。若不同前后时刻采集到的人脸图像不一致，则确定当前用户的人脸发生移动。若不同前后时刻采集到的人脸图像一致，则确定当前用户的人脸未发生移动。若确定当前用户的人脸为发生移动，则柔性屏终端通过铰链或基面板以使拍摄装置对应的部分柔性屏如图13所示相对于用户的人脸做逆时针或顺时针运动。其中，顺时针和逆时针运动部分先后顺序，可以先做顺时针运动，后做逆时针运动；或先做逆时针运动，后做顺时针运动，顺时针运动或逆时针运动的角度为0-360度。

具体的，所述检测当前用户的人脸是否发生移动之后，还包括：若所述人脸发生移动，获取所述人脸移动的方向和角度；基于所述人脸移动的方向和角度，确定所述拍摄装置对应的部分柔性屏转动的方向和角度；调整所述柔性屏按照所述转动的方向和角度发生形变。

示例性的，若当前用户的人脸发生移动，获取用户的人脸移动的方向和移动的角度。例如，获取到用户的人脸移动的方向为上、下、左、右中的一个方向，以及移动到该方向的角度，该角度为0-360度。获取的方式包括实时采集用户的人脸图像，获取不同时刻人脸图像中的目标特征在柔性屏中的坐标，通过不同时刻人脸图像中的目标特征在柔性屏中的坐标，计算出用户的人脸移动方向和移动角度。在获取到用户的人脸移动的方向和角度，计算出拍摄装置对应的部分柔性屏转动的方向和角度。例如，在获取到用户的人脸移动的方向为左方，移动的角度为20度，计算出拍摄装置对应的部分柔性屏转动的方向为右方，转动的角度为0-340度；或者，计算出拍摄装置对应的部分柔性屏转动的方向为左方，转动的角度为0-340度等。如图13所示，调整拍摄装置对应的部分柔性屏向上、下、左、右至少一个方向转动，转动的角度为0-360度。

在本发明实施例中，根据柔性屏的形变，控制柔性屏终端的拍摄装置在人脸移动和未移动的场景下将进行转动，以采集人脸在移动和为移动过程中的图像，提高采集人脸图像的准确率。

如图14所示，本发明实施例提供了另一种人脸图像采集方法，该方法包括以下步骤：

步骤S310:根据人脸图像在所述柔性屏中的位置信息确定所述柔性屏的形变参数。

示例性的，如图5所示，用户手持柔性屏终端，柔性屏终端上的拍摄装置拍摄用户的脸部，将拍摄到的人脸图像显示在柔性屏终端的柔性屏上。确定该人脸图像在柔性屏中的位置，基于该人脸图像在柔性屏中的位置确定柔性屏的形变参数。例如，用户手持柔性屏终端，打开拍摄装置，通过拍摄装置拍摄用户的人脸图像，拍摄到的人脸图像呈现在柔性屏上。获取该人脸图像在柔性屏中的位置，其中，预先将柔性屏均匀分为四个区域。确定该人脸图像处于该四个区域的哪一个区域，通过该人脸图像处于的区域，确定该柔性屏的形变参数。

步骤S320:根据所述形变参数调整所述柔性屏，以使所述人脸图像位于所述柔性屏中。

示范例的，获取到柔性屏发生形变的相对方向和相对坐标，如图11所示，调整柔性屏中拍摄装置处的部分柔性屏。例如，当获取到相对方向是上方、相对坐标是2个坐标时，调整柔性屏中拍摄装置处部分柔性屏向上方移动2个坐标；或者，当获取到相对方向是右方、相对坐标是1个坐标时，调整柔性屏中拍摄装置处部分柔性屏向右方移动1个坐标。

当调整柔性屏中拍摄装置处部分柔性屏向相对方向和相对坐标发生形变后，通过拍摄装置采集当前用户的人脸图像，以使当前的人脸图像中目标特征的为位置坐标与拍摄装置的预置坐标位置重合。

若当前的人脸图像中目标特征的为位置坐标与拍摄装置的预置坐标位置不重合；或者，当前的人脸图像不包含人脸轮廓；或者，当前的人脸图像中的人脸轮廓小于预置长度或宽度，则获取柔性屏形变的相对方向和相对坐标，继续使柔性屏发生形变。

步骤S330:控制所述拍摄装置对应的部分柔性屏相对用户的人脸转动以采集所述用户的人脸图像。

如图5所示，用户手持柔性屏终端，拍摄装置采集用户的人脸图像，通过人脸图像中目标特征在柔性屏的位置坐标以及拍摄装置在柔性屏中的预置位置坐标、人脸图像中的人脸轮廓确定柔性屏的形变参数，柔性屏终端通过控制铰链或基面板使柔性屏按照形变参数发生形变，用户通过转动人脸的方式，以使拍摄装置采集用户多个角度的人脸三维图像。

具体的，采集所述用户的人脸图像包括：检测当前用户的人脸是否发生移动；若所述人脸未发生移动，则控制所述拍摄装置对应的部分柔性屏相对用户的人脸顺时针或逆时针转动。

示范例的，实时检测当前用户的人脸是否发生移动，检测的方式包括图像分析等。例如，实时通过拍摄装置采集用户的人脸图像，将不同时刻采集到的图像进行对比分析，判断当前用户的人脸是否发生移动。若不同前后时刻采集到的人脸图像不一致，则确定当前用户的人脸发生移动。若不同前后时刻采集到的人脸图像一致，则确定当前用户的人脸未发生移动。若确定当前用户的人脸为发生移动，则柔性屏终端通过铰链或基面板以使拍摄装置对应的部分柔性屏如图13所示相对于用户的人脸做逆时针或顺时针运动。其中，顺时针和逆时针运动部分先后顺序，可以先做顺时针运动，后做逆时针运动；或先做逆时针运动，后做顺时针运动，顺时针运动或逆时针运动的角度为0-360度。

具体的，所述检测当前用户的人脸是否发生移动之后，还包括：若所述人脸发生移动，获取所述人脸移动的方向和角度；基于所述人脸移动的方向和角度，确定所述拍摄装置对应的部分柔性屏转动的方向和角度；调整所述柔性屏按照所述转动的方向和角度发生形变。

示例性的，若当前用户的人脸发生移动，获取用户的人脸移动的方向和移动的角度。例如，获取到用户的人脸移动的方向为上、下、左、右中的一个方向，以及移动到该方向的角度，该角度为0-360度。获取的方式包括实时采集用户的人脸图像，获取不同时刻人脸图像中的目标特征在柔性屏中的坐标，通过不同时刻人脸图像中的目标特征在柔性屏中的坐标，计算出用户的人脸移动方向和移动角度。在获取到用户的人脸移动的方向和角度，计算出拍摄装置对应的部分柔性屏转动的方向和角度。例如，在获取到用户的人脸移动的方向为左方，移动的角度为20度，计算出拍摄装置对应的部分柔性屏转动的方向为右方，转动的角度为0-340度；或者，计算出拍摄装置对应的部分柔性屏转动的方向为左方，转动的角度为0-340度等。如图13所示，调整拍摄装置对应的部分柔性屏向上、下、左、右至少一个方向转动，转动的角度为0-360度。

在本实时例中，根据人脸图像确定柔性屏的形变参数，通过形变参数来调整柔性屏，以使柔性屏终端的拍摄装置采集用户的人脸图像位于柔性屏中，控制拍摄装置对应的部分柔性屏相对于用户的人脸进行转动，采集用户的人脸三维图像，不仅提高采集人脸图像的准确率还提高了人脸图像采集的安全性。

请参阅图15，图15是本申请的一实施例提供的一种识别方法的示意流程图。

如图15所示，本实施例提供了一种识别方法，该方法包括以下步骤：

步骤S410：采集人脸图像，根据人脸图像进行人脸识别。

其中，采集人脸图像的采集方式采用上述任意一个实施例提供的人脸图像采集方法。

通过拍摄装置采集人脸图像位于柔性屏中当前用户的人脸图像。获取采集到的人脸图像，对该人脸图像进行识别。识别的方式包括提取该人脸图像中用户的眼睛、眉毛、耳朵、鼻子等特征，将该特征与预置人脸特征库中的眼睛、眉毛、耳朵、鼻子等特征进行匹配，以获取相匹配特征的标识信息，从而识别该用户的身份信息。

请参阅图16，图16是本申请实施例提供的一种柔性屏终端的结构示意性框图。该柔性屏终端包括至少一个柔性屏，柔性屏用于显示人脸图像。

示例性的，柔性屏终端可以为手机、平板、笔记本、台式机、电视、专用输入设备等。例如，柔性屏终端为具有两个柔性屏的双屏手机或者具有一个柔性屏的单屏手机，或者为显柔性可折叠的手机等。

柔性屏终端包括至少一个拍摄装置，用于采集人脸图像，其中拍摄装置包括摄像头。

柔性屏终端还包括处理器、存储器，所述存储器用于存储计算机程序。

所述处理器，用于执行所述计算机程序并在执行所述计算机程序时实现本申请实施例提供的前述人脸图像采集方法或识别方法。

应当理解的是，处理器可以是中央处理单元(Central Processing Unit，CPU)，该处理器还可以是其他通用处理器、数字信号处理器(Digital Signal Processor，DSP)、专用集成电路(Application Specific Integrated Circuit，ASIC)、现场可编程门阵列(Field-Programmable Gate Array，FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。其中，通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。

本申请的实施例中还提供一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，所述计算机程序被处理器执行时，使所述处理器实现本申请实施例提供的任一项人脸图像采集方法或识别方法。

本领域普通技术人员可以理解，上文中所公开方法中的全部或某些步骤、系统、装置中的功能模块/单元可以被实施为软件、固件、硬件及其适当的组合。在硬件实施方式中，在以上描述中提及的功能模块/单元之间的划分不一定对应于物理组件的划分；例如，一个物理组件可以具有多个功能，或者一个功能或步骤可以由若干物理组件合作执行。某些物理组件或所有物理组件可以被实施为由处理器，如中央处理器、数字信号处理器或微处理器执行的软件，或者被实施为硬件，或者被实施为集成电路，如专用集成电路。这样的软件可以分布在计算机可读存储介质上，计算机可读存储介质可以包括计算机可读存储介质(或非暂时性介质)和通信介质(或暂时性介质)。

如本领域普通技术人员公知的，术语计算机可读存储介质包括在用于存储信息(诸如计算机可读指令、数据结构、程序模块或其他数据)的任何方法或技术中实施的易失性和非易失性、可移除和不可移除介质。计算机可读存储介质包括但不限于RAM、ROM、EEPROM、闪存或其他存储器技术、CD-ROM、数字多功能盘(DVD)或其他光盘存储、磁盒、磁带、磁盘存储或其他磁存储装置、或者可以用于存储期望的信息并且可以被计算机访问的任何其他的介质。此外，本领域普通技术人员公知的是，通信介质通常包含计算机可读指令、数据结构、程序模块或者诸如载波或其他传输机制之类的调制数据信号中的其他数据，并且可包括任何信息递送介质。

示例性的，所述计算机可读存储介质可以是前述实施例所述的电子设备的内部存储单元，例如所述电子设备的硬盘或内存。所述计算机可读存储介质也可以是所述电子设备的外部存储设备，例如所述电子设备上配备的插接式硬盘，智能存储卡(Smart MediaCard，SMC)，安全数字(Secure Digital，SD)卡，闪存卡(Flash Card)等。

前述各实施例提供的电子设备和计算机可读存储介质，通过根据柔性屏的形变，控制所述柔性屏终端的拍摄装置相对用户的人脸运动以采集所述用户的人脸图像。实现通过与柔性屏形变特性的结合，提高人脸图像采集的准确率和安全性。

以上所述，仅为本申请的具体实施方式，但本申请的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本申请揭露的技术范围内，可轻易想到各种等效的修改或替换，这些修改或替换都应涵盖在本申请的保护范围之内。因此，本申请的保护范围应以权利要求的保护范围为准。

Claims (15)

1.一种人脸图像采集方法，其特征在于，应用于柔性屏终端，所述方法包括：

根据柔性屏的形变，控制所述柔性屏终端的拍摄装置相对用户的人脸运动以采集所述用户的人脸图像。

2.根据权利要求1所述的人脸图像采集方法，其特征在于，所述方法包括：

根据人脸图像在所述柔性屏中的位置信息确定所述柔性屏的形变参数；

根据所述形变参数调整所述柔性屏，以使所述人脸图像位于所述柔性屏中。

3.根据权利要求2所述的人脸图像采集方法，其特征在于，所述根据人脸图像在所述柔性屏中的位置信息确定所述柔性屏的形变参数，包括：

获取所述人脸图像在所述柔性屏中的位置坐标，以及所述拍摄装置的预置位置坐标；

根据所述位置坐标和所述预置位置坐标确定所述柔性屏的形变参数。

4.根据权利要求3所述的人脸图像采集方法，其特征在于，所述根据所述位置坐标和所述预置位置坐标确定所述柔性屏的形变参数，包括：

确定所述位置坐标与所述拍摄装置的预置位置坐标是否重合；

若确定所述位置坐标与所述预置位置坐标不重合，则获取所述位置坐标与所述预置位置坐标的相对方向和相对坐标；

将所述相对方向和相对坐标作为所述柔性屏的形变参数。

5.根据权利要求4所述的人脸图像采集方法，其特征在于，所述确定所述位置坐标与所述拍摄装置的预置位置坐标是否重合之后，包括：

若所述位置坐标与所述拍摄装置的预置位置坐标重合，则确定所述人脸图像是否包含人脸轮廓；

当所述人脸图像不包含所述人脸轮廓，确定当前用户的持机姿势；

根据当前用户的持机姿势，确定所述柔性屏的形变参数。

6.根据权利要求5所述的人脸图像采集方法，其特征在于，所述根据当前用户的持机姿势，确定所述柔性屏的形变参数，包括：

若当前所述用户的持机姿势为横屏，则调整所述柔性屏向后方、上方或下方至少一个方向发生形变；或者，

若当前所述用户的持机姿势为竖屏，则调整所述柔性屏向后方、左方或右方至少一个方向发生形变。

7.根据权利要求5所述的人脸图像采集方法，其特征在于，所述确定所述人脸图像是否包含人脸轮廓之后，还包括：

若所述人脸图像包含所述人脸轮廓，获取所述人脸轮廓的轮廓大小；

基于所述人脸轮廓的轮廓大小，确定所述柔性屏的形变参数。

8.根据权利要求3所述的人脸图像采集方法，其特征在于，所述获取所述人脸图像在所述柔性屏中的位置坐标，包括：

识别所述人脸图像中的目标特征；

根据所述目标特征确定所述人脸图像在所述柔性屏中的位置坐标。

9.根据权利要求8所述的人脸图像采集方法，其特征在于，所述目标特征包括鼻尖特征或眼睛特征。

10.根据权利要求1或2所述的人脸图像采集方法，其特征在于，所述方法包括：

控制所述拍摄装置对应的部分柔性屏相对用户的人脸转动以采集所述用户的人脸图像。

11.根据权利要求10所述的人脸图像采集方法，其特征在于，所述控制所述拍摄装置对应的部分柔性屏相对用户的人脸转动以采集所述用户的人脸图像，还包括：

检测当前用户的人脸是否发生移动；

若所述人脸未发生移动，则控制所述拍摄装置对应的部分柔性屏相对用户的人脸顺时针或逆时针转动。

12.根据权利要求11所述的人脸图像采集方法，其特征在于，所述检测当前用户的人脸是否发生移动之后，还包括：

若所述人脸发生移动，获取所述人脸移动的方向和角度；

基于所述人脸移动的方向和角度，确定所述拍摄装置对应的部分柔性屏转动的方向和角度；

调整所述柔性屏按照所述转动的方向和角度发生形变。

13.一种识别方法，其特征在于，应用于柔性屏终端，所述方法包括：

采集人脸图像，根据人脸图像进行人脸识别，其中，所述人脸图像为通过权利要求1至12任一项所述的人脸图像采集方法采集的。

14.一种柔性屏终端，其特征在于，包括柔性屏、拍摄装置、处理器、存储器；

所述柔性屏用于显示，所述拍摄装置用于拍摄图像；

所述存储器用于存储计算机程序；

所述处理器，用于执行所述计算机程序并在执行所述计算机程序时实现如权利要求1至12中任一项所述的人脸图像采集方法的步骤；或，如权利要求13所述的识别方法的步骤。

15.一种计算机可读存储介质，用于计算机可读存储，其特征在于，所述存储介质存储有一个或者多个程序，所述一个或者多个程序可被一个或者多个处理器执行，以实现如权利要求1至12中任一项所述的人脸图像采集方法的步骤；或，如权利要求13所述的识别方法的步骤。

Images