CN110944112A - 一种图像处理方法及电子设备 - Google Patents

Abstract

本发明实施例公开了一种图像处理方法及电子设备，涉及通信技术领域，可以解决电子设备的拍摄效果较差的问题。该方法包括：在拍摄界面显示目标人脸对应的第一人脸图像的情况下，向目标人脸发射毫米波信号；接收从目标人脸反射的毫米波信号；根据目标时间差，获取目标人脸的深度信息，该目标时间差为接收到毫米波信号的时间和发射毫米波信号的时间之间的差值；根据深度信息，对第一人脸图像中与目标人脸的各个部位对应的图像区域进行不同的图像处理。本发明实施例应用于电子设备根据从人脸反射的毫米波信号，对拍摄的人脸图像进行图像处理的过程中。

Description

一种图像处理方法及电子设备

技术领域

本发明实施例涉及通信技术领域，尤其涉及一种图像处理方法及电子设备。

背景技术

通常，在用户使用电子设备进行自拍时，电子设备可以通过摄像头获取拍摄的用户人脸的深度信息，并根据该深度信息对该人脸图像进行美颜处理，以得到效果较好的人脸图像。具体的，电子设备可以通过摄像头向用户面部投射多个光点，并通过摄像头采集该多个光点在用户面部组成的点阵图像，从而电子设备可以根据该点阵图像得到用户人脸的深度信息。

但是，上述方法中，由于电子设备是根据点阵图像得到用户人脸的深度信息的，而在电子设备处于强光(或弱光)的环境中时，电子设备可能无法从用户面部捕捉到所有光点，则获取的点阵图像可能并不准确，因此得到的用户人脸的深度信息不准确，即电子设备获取用户人脸的深度信息的准确性较差，从而导致电子设备对人脸图像进行图像处理的效果较差，如此导致电子设备的拍摄效果较差。

发明内容

本发明实施例提供一种图像处理方法及电子设备，可以解决电子设备的拍摄效果较差的问题。

为了解决上述技术问题，本发明实施例采用如下技术方案：

本发明实施例的第一方面，提供一种图像处理方法，应用于电子设备，该图像处理方法包括：在拍摄界面显示目标人脸对应的第一人脸图像的情况下，向目标人脸发射毫米波信号；接收从目标人脸反射的毫米波信号；根据目标时间差，获取目标人脸的深度信息，该目标时间差为接收到毫米波信号的时间和发射毫米波信号的时间之间的差值；根据深度信息，对第一人脸图像中与目标人脸的各个部位对应的图像区域进行不同的图像处理。

本发明实施例的第二方面，提供一种电子设备，该电子设备包括：发射模块、接收模块、获取模块和处理模块。其中，发射模块，用于在拍摄界面显示目标人脸对应的第一人脸图像的情况下，向目标人脸发射毫米波信号。接收模块，用于接收从目标人脸反射的毫米波信号。获取模块，用于根据目标时间差，获取目标人脸的深度信息，该目标时间差为接收到毫米波信号的时间和发射毫米波信号的时间之间的差值。处理模块，用于根据获取模块获取的深度信息，对所述第一人脸图像中与目标人脸的各个部位对应的图像区域进行不同的图像处理。

本发明实施例的第三方面，提供一种电子设备，该电子设备包括处理器、存储器及存储在存储器上并可在处理器上运行的计算机程序，该计算机程序被处理器执行时实现如第一方面所述的图像处理方法的步骤。

本发明实施例的第四方面，提供一种计算机可读存储介质，该计算机可读存储介质上存储计算机程序，该计算机程序被处理器执行时实现如第一方面所述的图像处理方法的步骤。

在本发明实施例中，电子设备可以向目标人脸发射毫米波信号，并接收从目标人脸反射的毫米波信号，从而电子设备可以根据目标时间差(即接收到毫米波信号的时间和发射毫米波信号的时间之间的差值)，获取目标人脸的深度信息，以根据该深度信息对第一人脸图像中的多个图像区域(即第一人脸图像中与目标人脸的各个部位对应的图像区域)进行不同的图像处理。由于目标时间差是电子设备根据毫米波信号往返电子设备与目标人脸之间的距离的时间差确定的，而毫米波信号不受特殊环境(例如强光环境或弱光环境)的影响，即电子设备确定的目标时间差未受到特殊环境的影响，因此电子设备根据该目标时间差获取的目标人脸的深度信息也未受到特殊环境的影响，即电子设备获取的目标人脸的深度信息的准确性较高，从而电子设备可以根据该深度信息，准确地确定第一人脸图像中与目标人脸的各个部位对应的图像区域，以准确地对第一人脸图像中的不同图像区域进行不同的图像处理，如此可以提高电子设备对人脸图像进行图像处理的效果，以提升电子设备的拍摄效果。

附图说明

图1为本发明实施例提供的一种安卓操作系统的架构示意图；

图2为本发明实施例提供的一种图像处理方法的示意图之一；

图3为本发明实施例提供的一种手机的毫米波模块的结构示意图；

图4为本发明实施例提供的一种图像处理方法的示意图之二；

图5为本发明实施例提供的一种图像处理方法的示意图之三；

图6为本发明实施例提供的一种电子设备对人脸图像处理的效果示意图；

图7为本发明实施例提供的一种电子设备的结构示意图之一；

图8为本发明实施例提供的一种电子设备的结构示意图之二；

图9为本发明实施例提供的一种电子设备的结构示意图之三；

图10为本发明实施例提供的一种电子设备的结构示意图之四；

图11为本发明实施例提供的一种电子设备的硬件示意图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

本发明实施例的说明书和权利要求书中的术语“第一”和“第二”等是用于区别不同的对象，而不是用于描述对象的特定顺序。例如，第一参数和第二参数等是用于区别不同的参数，而不是用于描述参数的特定顺序。

在本发明实施例的描述中，除非另有说明，“多个”的含义是指两个或两个以上。例如，多个元件是指两个元件或两个以上元件。

本文中术语“和/或”，是一种描述关联对象的关联关系，表示可以存在三种关系，例如，显示面板和/或背光，可以表示：单独存在显示面板，同时存在显示面板和背光，单独存在背光这三种情况。本文中符号“/”表示关联对象是或者的关系，例如输入/输出表示输入或者输出。

在本发明实施例中，“示例性的”或者“例如”等词用于表示作例子、例证或说明。本发明实施例中被描述为“示例性的”或者“例如”的任何实施例或设计方案不应被解释为比其它实施例或设计方案更优选或更具优势。确切而言，使用“示例性的”或者“例如”等词旨在以具体方式呈现相关概念。

本发明实施例提供一种图像处理方法及电子设备，由于目标时间差是电子设备根据毫米波信号往返电子设备与目标人脸之间的距离的时间差确定的，而毫米波信号不受特殊环境(例如强光环境或弱光环境)的影响，即电子设备确定的目标时间差未受到特殊环境的影响，因此电子设备根据该目标时间差获取的目标人脸的深度信息也未受到特殊环境的影响，即电子设备获取的目标人脸的深度信息的准确性较高，从而电子设备可以根据该深度信息，准确地确定第一人脸图像中与目标人脸的各个部位对应的图像区域，以准确地对第一人脸图像中的不同图像区域进行不同的图像处理，如此可以提高电子设备对人脸图像进行图像处理的效果，以提升电子设备的拍摄效果。

本发明实施例提供的图像处理方法及电子设备，可以应用于电子设备进行图像处理的过程。具体的，可以应用于电子设备根据从人脸反射的毫米波信号，对拍摄的人脸图像进行图像处理的过程中。

本发明实施例中的电子设备可以为具有操作系统的电子设备。该操作系统可以为安卓(Android)操作系统，可以为ios操作系统，还可以为其他可能的操作系统，本发明实施例不作具体限定。

下面以安卓操作系统为例，介绍一下本发明实施例提供的图像处理方法所应用的软件环境。

如图1所示，为本发明实施例提供的一种可能的安卓操作系统的架构示意图。在图1中，安卓操作系统的架构包括4层，分别为：应用程序层、应用程序框架层、系统运行库层和内核层(具体可以为Linux内核层)。

其中，应用程序层包括安卓操作系统中的各个应用程序(包括系统应用程序和第三方应用程序)。

应用程序框架层是应用程序的框架，开发人员可以在遵守应用程序的框架的开发原则的情况下，基于应用程序框架层开发一些应用程序。

系统运行库层包括库(也称为系统库)和安卓操作系统运行环境。库主要为安卓操作系统提供其所需的各类资源。安卓操作系统运行环境用于为安卓操作系统提供软件环境。

内核层是安卓操作系统的操作系统层，属于安卓操作系统软件层次的最底层。内核层基于Linux内核为安卓操作系统提供核心系统服务和与硬件相关的驱动程序。

以安卓操作系统为例，本发明实施例中，开发人员可以基于上述如图1所示的安卓操作系统的系统架构，开发实现本发明实施例提供的图像处理方法的软件程序，从而使得该图像处理方法可以基于如图1所示的安卓操作系统运行。即处理器或者电子设备可以通过在安卓操作系统中运行该软件程序实现本发明实施例提供的图像处理方法。

本发明实施例中的电子设备可以为移动电子设备，也可以为非移动电子设备。示例性的，移动电子设备可以为手机、平板电脑、笔记本电脑、掌上电脑、车载电子设备、可穿戴设备、超级移动个人计算机(ultra-mobile personal computer，UMPC)、上网本或者个人数字助理(personal digital assistant，PDA)等，非移动电子设备可以为个人计算机(personal computer，PC)、电视机(television，TV)、柜员机或者自助机等，本发明实施例不作具体限定。

下面结合附图，通过具体的实施例及其应用场景对本发明实施例提供的一种图像处理方法及电子设备进行详细地说明。

本发明实施例提供的一种图像处理方法，图2示出了本发明实施例提供的一种图像处理方法的流程图，该方法可以应用于具有如图1所示的安卓操作系统的电子设备。如图2所示，本发明实施例提供的图像处理方法可以包括下述的步骤201至步骤204。

步骤201、在拍摄界面显示目标人脸对应的第一人脸图像的情况下，电子设备向目标人脸发射毫米波信号。

本发明实施例中，用户可以对电子设备中的具有拍摄功能的应用程序(例如相机应用程序)进行输入，以触发电子设备显示拍摄界面(例如拍摄预览界面)。

可选的，本发明实施例中，在用户通过相机应用程序进行自拍时，电子设备可以在拍摄界面显示用户的人脸对应的第一人脸图像；或者，在用户通过相机应用程序对待拍摄物体(例如其他用户)进行拍摄时，电子设备可以在拍摄界面显示其他用户的人脸对应的第一人脸图像。

可选的，本发明实施例中，上述拍摄界面中可以包括目标拍摄模式(例如相机切换模式或美颜模式)对应的选项，用户可以在拍摄界面中对该选项进行选择输入，以使得电子设备在该拍摄界面显示目标人脸对应的第一人脸图像。

可选的，本发明实施例中，电子设备可以通过电子设备的摄像头(例如红绿蓝(redgreen blue，RGB)摄像头)获取目标人脸的图像，以在拍摄界面显示第一人脸图像。

可以理解，上述第一人脸图像为二维图像，即RGB图像。

可选的，本发明实施例中，电子设备可以包括毫米波模块。

可选的，本发明实施例中，上述步骤201具体可以通过下述的步骤201a实现。

步骤201a、在拍摄界面显示目标人脸对应的第一人脸图像的情况下，电子设备通过毫米波模块向目标人脸发射毫米波信号。

可选的，本发明实施例中，上述毫米波模块可以为集成毫米波芯片。

可选的，本发明实施例中，上述毫米波模块具体可以为毫米波收发一体模块，该毫米波收发一体模块可以包括毫米波发射器和毫米波接收器，电子设备可以通过该毫米波发射器向目标人脸发射毫米波信号，并通过该毫米波接收器接收毫米波信号。

可选的，本发明实施例中，上述毫米波模块可以设置于电子设备的前置摄像头(或后置摄像头)处，或者，可以设置于电子设备的任意侧边处。具体的，可以根据实际使用需求设定，本发明实施例中不作限制。

示例性的，以电子设备为手机为例进行说明。如图3所示，手机10的前置摄像头11处设置有毫米波模块12，手机10可以通过该毫米波模块12发射毫米波信号或接收毫米波信号。

可选的，本发明实施例中，上述毫米波信号可以为波长大于或等于1毫米、且波长小于或等于10毫米的电磁波信号。

可选的，本发明实施例中，电子设备在向目标人脸发射毫米波信号时，可以获取电子设备当前的系统时间，以确定发射毫米波信号的时间。

可选的，本发明实施例中，电子设备可以对拍摄界面显示的图像进行人脸检测，以确定该拍摄界面显示的图像中是否包括人脸图像，并在该拍摄界面显示的图像中包括人脸图像的情况下，向目标人脸发射毫米波信号。

步骤202、电子设备接收从目标人脸反射的毫米波信号。

可选的，本发明实施例中，电子设备可以通过毫米波模块接收从目标人脸反射的毫米波信号。

可选的，本发明实施例中，电子设备在接收到从目标人脸反射的毫米波信号时，可以获取电子设备当前的系统时间，以确定接收到毫米波信号的时间。

可选的，本发明实施例中，上述步骤202具体可以通过下述的步骤202a实现。

步骤202a、电子设备通过毫米波模块接收从目标人脸反射的毫米波信号。

需要说明的是，对于毫米波模块的说明，可以参考上述实施例中的具体描述，此处不再赘述。

步骤203、电子设备根据目标时间差，获取目标人脸的深度信息。

本发明实施例中，上述目标时间差为接收到毫米波信号的时间和发射毫米波信号的时间之间的差值。

本发明实施例中，上述目标人脸的深度信息为该目标人脸与电子设备的摄像头之间的距离。

可选的，本发明实施例中，电子设备可以通过第一预设算法，根据目标时间差，获取目标人脸的深度信息。

可选的，本发明实施例中，上述第一预设算法具体可以为：

其中，S为目标人脸的深度信息，t为目标时间差，v为毫米波信号的传播速度(约等于真空中的光速)。

步骤204、电子设备根据深度信息，对第一人脸图像中与目标人脸的各个部位对应的图像区域进行不同的图像处理。

可选的，本发明实施例中，电子设备可以通过不同的图像处理算法(例如第三预设算法)，分别对第一人脸图像中与目标人脸的各个部位对应的图像区域进行不同的图像处理。

可选的，本发明实施例中，电子设备可以通过一个第三预设算法，根据深度信息，对第一人脸图像中与目标人脸的一个部位对应的图像区域进行一个图像处理，并通过另一个第三预设算法，根据深度信息，对该第一人脸图像中与目标人脸的另一个部位对应的图像区域进行另一个图像处理，以此类推，直至对该第一人脸图像中与目标人脸的最后一个部位对应的图像区域进行最后一个图像处理。

可选的，本发明实施例中，上述第三预设算法可以为美颜算法、双指数边缘平滑滤波算法、导向滤波算法或交互式图像变形算法等。

可选的，本发明实施例中，电子设备可以通过美颜算法对第一人脸图像中与目标人脸的一个部位对应的图像区域(例如脸颊部位对应的图像区域)进行“肤色美白”处理；电子设备可以通过双指数边缘平滑滤波算法对第一人脸图像中与目标人脸的一个部位对应的图像区域(例如额头部位对应的图像区域)进行“磨皮”处理；电子设备可以通过导向滤波算法对第一人脸图像中与目标人脸的一个部位对应的图像区域(例如黑痣部位对应的图像区域)进行“黑痣去除”处理；电子设备可以通过交互式图像变形算法对第一人脸图像中与目标人脸的一个部位对应的图像区域(例如眼睛部位对应的图像区域)进行“大眼”处理。

可选的，本发明实施例中，结合图2，如图4所示，在上述步骤204之前，本发明实施例提供的图像处理方法还可以包括下述的步骤301和步骤302。

步骤301、电子设备根据第一人脸图像和深度信息，生成第一人脸图像对应的三维人脸图像。

可选的，本发明实施例中，电子设备可以通过第二预设算法，根据第一人脸图像和深度信息，生成第一人脸图像对应的三维人脸图像。

可选的，本发明实施例中，上述第二预设算法具体可以为空间建模算法。

可选的，本发明实施例中，电子设备可以根据第一人脸图像的每个像素点在空间中的分布信息，在空间坐标系中构建立体模型，并将第一人脸图像的二维信息(例如纹理信息)映射到该立体模型中，以生成第一人脸图像对应的三维(three-dimensional，3D)人脸图像。

步骤302、电子设备根据三维人脸图像，确定第一人脸图像中与目标人脸的各个部位对应的图像区域。

可选的，本发明实施例中，针对目标人脸的每个部位，电子设备可以根据目标人脸的一个部位对应的像素点的信息(例如像素点的分布信息)和三维人脸图像，确定第一人脸图像中与该目标人脸的一个部位对应的图像区域，以确定第一人脸图像中与目标人脸的各个部位对应的图像区域。

本发明实施例中，电子设备可以通过毫米波信号准确地获取目标人脸的深度信息，以根据该深度信息准确地建立图像模型(即根据该深度信息生成对应的三维人脸图像)，从而电子设备可以根据该图像模型准确地确定第一人脸图像中与目标人脸的各个部位对应的图像区域。

本发明实施例中，毫米波信号的穿透性强，受特殊环境(例如强光、弱光、雨、雪、雾、灰尘等环境)的影响较小，即在特殊环境中，仍可以进行正常传输，从而电子设备可以通过毫米波信号，准确地获取目标人脸的深度信息。

本发明实施例提供一种图像处理方法，电子设备可以向目标人脸发射毫米波信号，并接收从目标人脸反射的毫米波信号，从而电子设备可以根据目标时间差(即接收到毫米波信号的时间和发射毫米波信号的时间之间的差值)，获取目标人脸的深度信息，以根据该深度信息对第一人脸图像中的多个图像区域(即第一人脸图像中与目标人脸的各个部位对应的图像区域)进行不同的图像处理。由于目标时间差是电子设备根据毫米波信号往返电子设备与目标人脸之间的距离的时间差确定的，而毫米波信号不受特殊环境(例如强光环境或弱光环境)的影响，即电子设备确定的目标时间差未受到特殊环境的影响，因此电子设备根据该目标时间差获取的目标人脸的深度信息也未受到特殊环境的影响，即电子设备获取的目标人脸的深度信息的准确性较高，从而电子设备可以根据该深度信息，准确地确定第一人脸图像中与目标人脸的各个部位对应的图像区域，以准确地对第一人脸图像中的不同图像区域进行不同的图像处理，如此可以提高电子设备对人脸图像进行图像处理的效果，以提升电子设备的拍摄效果。

可以理解，可以通过在电子设备上集成毫米波模块，以使得电子设备可以通过毫米波信号进行亚毫米级别的测距；并且，在拍摄的过程中，由于电子设备是通过毫米波信号获取深度信息的，而毫米波信号在特殊环境中，仍可以进行正常传输，从而电子设备获取的深度信息(即电子设备的摄像头与目标人脸之间的距离)的准确度较高。

可选的，本发明实施例中，结合图2，如图5所示，在上述步骤301之前，本发明实施例提供的图像处理方法还可以包括下述的步骤401，并且上述步骤204具体可以通过下述的步骤204a实现。

步骤401、电子设备根据反射的毫米波信号的目标参数，采用预设检测算法，确定目标人脸中的各个部位的第一特征信息。

本发明实施例中，电子设备可以根据从目标人脸中的不同部位反射的毫米波信号的参数，采用预设检测算法，分别确定目标人脸中的不同部位的第一特征信息。

本发明实施例中，每个第一特征信息分别用于指示目标人脸的一个部位(即目标人脸中的一个部位的细节特征)。

可以理解，目标人脸中的不同部位反射的毫米波信号的参数值不同，即电子设备根据这些参数值，确定的第一特征信息不同，从而可以根据这些第一特征信息确定出目标人脸中的各个部位(即一个第一特征信息对应目标人脸中的一个部位)。

可选的，本发明实施例中，上述目标参数可以包括以下至少一项：能量、振幅和相位角等。

本发明实施例中，目标人脸中的部位可以包括以下至少一项：眉毛部位、胡须部位、牙齿部位、头发部位、太阳穴部位、黑痣部位和眼睛部位。

需要说明的是，目标人脸中的各个部位对毫米波信号吸收的程度不同，从而从目标人脸中的不同部位反射的毫米波信号的目标参数也不同。

本发明实施例中，针对每个第一特征信息，电子设备可以根据从目标人脸中的一个部位反射的毫米波信号的目标参数和毫米波信号的参数(即从该一个部位反射之前的毫米波的参数)，采用预设检测算法，以确定该一个部位的第一特征信息，从而确定目标人脸中的各个部位的第一特征信息。

可选的，本发明实施例中，电子设备可以预先进行数据训练，以得到预设检测算法。在上述步骤201之前，本发明实施例提供的图像处理方法还可以包括下述的步骤501和步骤502。

步骤501、电子设备获取至少一个第一参数和至少一个第二特征信息。

本发明实施例中，至少一个第一参数中每个第一参数分别为用户人脸中的一个部位反射的毫米波信号的参数，至少一个第二特征信息中每个第二特征信息分别为用户人脸中的一个部位的特征信息。

可以理解，一个第一参数对应一个特征信息，即该一个第一参数为用户人脸中的一个部位对应的参数，且该一个特征信息为该一个部位的特征信息。

可选的，本发明实施例中，针对一个用户人脸中的每个部位，电子设备可以向一个部位多次发射毫米波信号，以根据多次反射的毫米波信号的参数，确定该一个部位对应的第一参数(例如多次反射的毫米波信号的参数的均值或方差等)，从而确定至少一个第一参数。

可选的，本发明实施例中，针对多个用户人脸中的每个部位，电子设备可以向每个用户人脸中的一个部位多次发射毫米波信号，以根据多次反射的毫米波信号的参数，确定每个用户人脸中的该一个部位对应的参数，以根据这些参数(即该多个用户中的该一个部位对应的参数)，确定该一个部位对应的第一参数(例如该多个用户中的该一个部位对应的参数的均值或方差等)，从而确定至少一个第一参数。

可选的，本发明实施例中，针对一个用户人脸中每个部位，电子设备可以对一个部位多次进行检测，以确定该一个部位对应的第二特征信息，从而确定至少一个第二特征信息。

可选的，本发明实施例中，针对多个用户人脸中一个部位，电子设备可以对不同用户人脸中一个部位多次进行检测，以确定该一个部位对应的第二特征信息，从而确定至少一个第二特征信息。

步骤502、电子设备对至少一个第一参数和至少一个第二特征信息进行数据训练，以得到预设检测算法。

可选的，本发明实施例中，电子设备可以通过三维卷积神经网络，对至少一个第一参数和至少一个第二特征信息进行数据训练，以得到预设检测算法。

需要说明的是，针对三维卷积神经网络的说明，可以参考相关技术中的具体描述，本发明实施例在此不再赘述。

可以理解，可以通过在测试环境中大量收集数据(例如反射的毫米波信号的参数(即至少一个第一参数)和与其对应的面部各种部位/细节(即至少一个第二特征信息))，然后再经过数据训练，得出基于毫米波的预设检测算法，以实现准确识别目标人脸中的各个部位的特征信息。

步骤204a、电子设备根据各个部位的第一特征信息，对第一人脸图像中与各个部位对应的图像区域进行不同的图像处理。

可选的，本发明实施例中，电子设备可以通过第三预设算法，根据各个部位的第一特征信息，分别对第一人脸图像中与各个部位对应的图像区域进行不同的图像处理。

可选的，本发明实施例中，针对目标人脸中的每个部位，电子设备可以根据目标人脸中的一个部位的第一特征信息，确定第一人脸图像中与该一个部位对应的图像区域，从而确定第一人脸图像中与各个部位对应的图像区域。

可选的，本发明实施例中，电子设备可以通过不同的第三预设算法，根据各个部位(例如头发部位、太阳穴部位、眉毛部位、眼睛部位和黑痣部位)的第一特征信息，对第一人脸图像中与各个部位对应的图像区域进行不同的图像处理。具体的，电子设备可以根据头发部位的第一特征信息，对第一人脸图像中与头发部位对应的图像区域进行“碎发去除”图像处理；电子设备可以根据太阳穴部位的第一特征信息，对第一人脸图像中与太阳穴部位对应的图像区域进行“填充太阳穴”图像处理；电子设备可以根据眉毛部位的第一特征信息，对第一人脸图像中与眉毛部位对应的图像区域进行“眉形修剪调整”图像处理；电子设备可以根据眼睛部位的第一特征信息，对第一人脸图像中与眼睛部位对应的图像区域进行“眼部妆容调整”图像处理；电子设备可以根据黑痣部位的第一特征信息，对第一人脸图像中与黑痣部位对应的图像区域进行“黑痣去除”图像处理。

示例性的，如图6中的(A)所示，电子设备可以根据目标人脸的黑痣部位的第一特征信息，对第一人脸图像中与黑痣部位对应的图像区域13进行“黑痣去除”图像处理；如图6中的(B)所示，在电子设备进行“黑痣去除”图像处理之后，第一人脸图像中与黑痣部位对应的图像区域13处不再显示“黑痣”。

需要说明的是，针对步骤203和步骤401的执行顺序，本发明实施例不做限制。在一种可能的实现方式，电子设备可以先执行步骤203，再执行步骤401，即电子设备可以先获取目标人脸的深度信息，再确定目标人脸中的各个部位的第一特征信息。在另一种可能的实现方式，电子设备可以先执行步骤401，再执行步骤203，即电子设备可以先获取目标人脸的深度信息，再确定目标人脸中的各个部位的第一特征信息。在又一种可能的实现方式，电子设备可以同时执行步骤203和步骤401，即电子设备在获取目标人脸的深度信息的同时，确定目标人脸中的各个部位的第一特征信息。

本发明实施例中，电子设备可以根据反射的毫米波信号的目标参数，确定目标人脸中的各个部位的特征信息，从而对目标人脸中的不同部位进行不同的图像处理，以提升电子设备拍摄的人脸图像的图像效果。

可选的，本发明实施例中，电子设备可以通过不同的第三预设算法对第一人脸图像进行美颜处理，以得到效果较好的人脸图像。

可以理解，电子设备可以通过向目标人脸发射毫米波信号，以接收到从目标人脸反射的毫米波信号，以使得电子设备可以根据该反射的毫米波信号识别目标人脸的各个部位(例如眉毛、牙齿、胡须等)，以提升电子设备对目标人脸的各个部位识别的准确性，从而可以对目标人脸的不同部位进行不同的美颜处理，以提升电子设备的美颜效果。

可选的，本发明实施例中，电子设备可以通过毫米波信号获取目标人脸的深度信息，以对电子设备的美颜功能进行辅助，且电子设备可以根据深度信息建立三维人脸图像(3D模型)，并根据人脸图像的特征信息，对第一人脸图像进行不同的图像处理(美颜处理)。

图7示出了本发明实施例中涉及的电子设备的一种可能的结构示意图。如图7所示，电子设备90可以包括：发射模块91、接收模块92、获取模块93和处理模块94。

其中，发射模块91，用于在拍摄界面显示目标人脸对应的第一人脸图像的情况下，向目标人脸发射毫米波信号。接收模块92，用于接收从目标人脸反射的毫米波信号。获取模块93，用于根据目标时间差，获取目标人脸的深度信息，该目标时间差为接收到毫米波信号的时间和发射毫米波信号的时间之间的差值。处理模块94，用于根据获取模块93获取的深度信息，对第一人脸图像中与目标人脸的各个部位对应的图像区域进行不同的图像处理。

在一种可能的实现方式中，电子设备90包括毫米波模块。上述发射模块91，具体用于通过毫米波模块向目标人脸发射毫米波信号。上述接收模块92，具体用于通过毫米波模块接收从目标人脸反射的毫米波信号。

在一种可能的实现方式中，结合图7，如图8所示，本发明实施例提供的电子设备90还包括：生成模块95和确定模块96。其中，生成模块95，用于在处理模块94根据深度信息，对第一人脸图像中与目标人脸的各个部位对应的图像区域进行不同的图像处理之前，根据第一人脸图像和深度信息，生成第一人脸图像对应的三维人脸图像。确定模块96，用于根据生成模块95生成的三维人脸图像，确定第一人脸图像中与目标人脸的各个部位对应的图像区域。

在一种可能的实现方式中，结合图7，如图9所示，本发明实施例提供的电子设备90还包括：确定模块96。其中，确定模块96，用于根据反射的毫米波信号的目标参数，采用预设检测算法，确定目标人脸中的各个部位的第一特征信息。处理模块94，具体用于根据确定模块96确定的各个部位的第一特征信息，对第一人脸图像中与各个部位对应的区域进行不同的图像处理。

在一种可能的实现方式中，上述获取模块93，还用于在发射模块91在拍摄界面显示目标人脸对应的第一人脸图像的情况下，向目标人脸发射毫米波信号之前，获取至少一个第一参数和至少一个第二特征信息，每个第一参数分别为用户人脸中的一个部位反射的毫米波信号的参数，每个第二特征信息分别为用户人脸中的一个部位的特征信息。结合图7，如图10所示，本发明实施例提供的电子设备90还包括：训练模块97。其中，训练模块97，用于对获取模块93获取的至少一个第一参数和至少一个第二特征信息进行数据训练，以得到预设检测算法。

本发明实施例提供的电子设备能够实现上述方法实施例中电子设备实现的各个过程，为避免重复，详细描述这里不再赘述。

本发明实施例提供一种电子设备，由于目标时间差是电子设备根据毫米波信号往返电子设备与目标人脸之间的距离的时间差确定的，而毫米波信号不受特殊环境(例如强光环境或弱光环境)的影响，即电子设备确定的目标时间差未受到特殊环境的影响，因此电子设备根据该目标时间差获取的目标人脸的深度信息也未受到特殊环境的影响，即电子设备获取的目标人脸的深度信息的准确性较高，从而电子设备可以根据该深度信息，准确地确定第一人脸图像中与目标人脸的各个部位对应的图像区域，以准确地对第一人脸图像中的不同图像区域进行不同的图像处理，如此可以提高电子设备对人脸图像进行图像处理的效果，以提升电子设备的拍摄效果。

图11为实现本发明各个实施例的一种电子设备的硬件示意图。如图11所示，电子设备100包括但不限于：射频单元101、网络模块102、音频输出单元103、输入单元104、传感器105、显示单元106、用户输入单元107、接口单元108、存储器109、处理器110、以及电源111等部件。

需要说明的是，本领域技术人员可以理解，图11中示出的电子设备结构并不构成对电子设备的限定，电子设备可以包括比图11所示更多或更少的部件，或者组合某些部件，或者不同的部件布置。在本发明实施例中，电子设备包括但不限于手机、平板电脑、笔记本电脑、掌上电脑、车载终端、可穿戴设备、以及计步器等。

其中，射频单元101，用于在拍摄界面显示目标人脸对应的第一人脸图像的情况下，向目标人脸发射毫米波信号。

输入单元104，用于接收从目标人脸反射的射频单元101发射的毫米波信号。

处理器110，用于根据目标时间差，获取目标人脸的深度信息，该目标时间差为接收到毫米波信号的时间和发射毫米波信号的时间之间的差值；并根据深度信息，对第一人脸图像中与目标人脸的各个部位对应的图像区域进行不同的图像处理。

本发明实施例提供一种电子设备，由于目标时间差是电子设备根据毫米波信号往返电子设备与目标人脸之间的距离的时间差确定的，而毫米波信号不受特殊环境(例如强光环境或弱光环境)的影响，即电子设备确定的目标时间差未受到特殊环境的影响，因此电子设备根据该目标时间差获取的目标人脸的深度信息也未受到特殊环境的影响，即电子设备获取的目标人脸的深度信息的准确性较高，从而电子设备可以根据该深度信息，准确地确定第一人脸图像中与目标人脸的各个部位对应的图像区域，以准确地对第一人脸图像中的不同图像区域进行不同的图像处理，如此可以提高电子设备对人脸图像进行图像处理的效果，以提升电子设备的拍摄效果。

应理解的是，本发明实施例中，射频单元101可用于收发信息或通话过程中，信号的接收和发送，具体的，将来自基站的下行数据接收后，给处理器110处理；另外，将上行的数据发送给基站。通常，射频单元101包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器、双工器等。此外，射频单元101还可以通过无线通信系统与网络和其他设备通信。

电子设备通过网络模块102为用户提供了无线的宽带互联网访问，如帮助用户收发电子邮件、浏览网页和访问流式媒体等。

音频输出单元103可以将射频单元101或网络模块102接收的或者在存储器109中存储的音频数据转换成音频信号并且输出为声音。而且，音频输出单元103还可以提供与电子设备100执行的特定功能相关的音频输出(例如，呼叫信号接收声音、消息接收声音等等)。音频输出单元103包括扬声器、蜂鸣器以及受话器等。

输入单元104用于接收音频或视频信号。输入单元104可以包括图形处理器(Graphics Processing Unit，GPU)1041和麦克风1042，图形处理器1041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。处理后的图像帧可以显示在显示单元106上。经图形处理器1041处理后的图像帧可以存储在存储器109(或其它存储介质)中或者经由射频单元101或网络模块102进行发送。麦克风1042可以接收声音，并且能够将这样的声音处理为音频数据。处理后的音频数据可以在电话通话模式的情况下转换为可经由射频单元101发送到移动通信基站的格式输出。

电子设备100还包括至少一种传感器105，比如光传感器、运动传感器以及其他传感器。具体地，光传感器包括环境光传感器及接近传感器，其中，环境光传感器可根据环境光线的明暗来调节显示面板1061的亮度，接近传感器可在电子设备100移动到耳边时，关闭显示面板1061和/或背光。作为运动传感器的一种，加速计传感器可检测各个方向上(一般为三轴)加速度的大小，静止时可检测出重力的大小及方向，可用于识别电子设备姿态(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等；传感器105还可以包括指纹传感器、压力传感器、虹膜传感器、分子传感器、陀螺仪、气压计、湿度计、温度计、红外线传感器等，在此不再赘述。

显示单元106用于显示由用户输入的信息或提供给用户的信息。显示单元106可包括显示面板1061，可以采用液晶显示器(Liquid Crystal Display，LCD)、有机发光二极管(Organic Light-Emitting Diode，OLED)等形式来配置显示面板1061。

用户输入单元107可用于接收输入的数字或字符信息，以及产生与电子设备的用户设置以及功能控制有关的键信号输入。具体地，用户输入单元107包括触控面板1071以及其他输入设备1072。触控面板1071，也称为触摸屏，可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触控面板1071上或在触控面板1071附近的操作)。触控面板1071可包括触摸检测装置和触摸控制器两个部分。其中，触摸检测装置检测用户的触摸方位，并检测触摸操作带来的信号，将信号传送给触摸控制器；触摸控制器从触摸检测装置上接收触摸信息，并将它转换成触点坐标，再送给处理器110，接收处理器110发来的命令并加以执行。此外，可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触控面板1071。除了触控面板1071，用户输入单元107还可以包括其他输入设备1072。具体地，其他输入设备1072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆，在此不再赘述。

进一步的，触控面板1071可覆盖在显示面板1061上，当触控面板1071检测到在其上或附近的触摸操作后，传送给处理器110以确定触摸事件的类型，随后处理器110根据触摸事件的类型在显示面板1061上提供相应的视觉输出。虽然在图7中，触控面板1071与显示面板1061是作为两个独立的部件来实现电子设备的输入和输出功能，但是在某些实施例中，可以将触控面板1071与显示面板1061集成而实现电子设备的输入和输出功能，具体此处不做限定。

接口单元108为外部装置与电子设备100连接的接口。例如，外部装置可以包括有线或无线头戴式耳机端口、外部电源(或电池充电器)端口、有线或无线数据端口、存储卡端口、用于连接具有识别模块的装置的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等等。接口单元108可以用于接收来自外部装置的输入(例如，数据信息、电力等等)并且将接收到的输入传输到电子设备100内的一个或多个元件或者可以用于在电子设备100和外部装置之间传输数据。

存储器109可用于存储软件程序以及各种数据。存储器109可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等；存储数据区可存储根据手机的使用所创建的数据(比如音频数据、电话本等)等。此外，存储器109可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。

处理器110是电子设备的控制中心，利用各种接口和线路连接整个电子设备的各个部分，通过运行或执行存储在存储器109内的软件程序和/或模块，以及调用存储在存储器109内的数据，执行电子设备的各种功能和处理数据，从而对电子设备进行整体监控。处理器110可包括一个或多个处理单元；可选的，处理器110可集成应用处理器和调制解调处理器，其中，应用处理器主要处理操作系统、用户界面和应用程序等，调制解调处理器主要处理无线通信。可以理解的是，上述调制解调处理器也可以不集成到处理器110中。

电子设备100还可以包括给各个部件供电的电源111(比如电池)，可选的，电源111可以通过电源管理系统与处理器110逻辑相连，从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。

另外，电子设备100包括一些未示出的功能模块，在此不再赘述。

可选的，本发明实施例还提供一种电子设备，包括如图11所示的处理器110，存储器109，存储在存储器109上并可在所述处理器110上运行的计算机程序，该计算机程序被处理器110执行时实现上述方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。

本发明实施例还提供一种计算机可读存储介质，计算机可读存储介质上存储有计算机程序，该计算机程序被处理器执行时实现上述方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。其中，所述的计算机可读存储介质，如只读存储器(Read-Only Memory，ROM)、随机存取存储器(Random Access Memory，RAM)、磁碟或者光盘等。

需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。

通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台电子设备(可以是手机，计算机，服务器，空调器，或者网络设备等)执行本发明各个实施例所述的方法。

上面结合附图对本发明的实施例进行了描述，但是本发明并不局限于上述的具体实施方式，上述的具体实施方式仅仅是示意性的，而不是限制性的，本领域的普通技术人员在本发明的启示下，在不脱离本发明宗旨和权利要求所保护的范围情况下，还可做出很多形式，均属于本发明的保护之内。

Claims (11)

1.一种图像处理方法，应用于电子设备，其特征在于，所述方法包括：

在拍摄界面显示目标人脸对应的第一人脸图像的情况下，向所述目标人脸发射毫米波信号；

接收从所述目标人脸反射的所述毫米波信号；

根据目标时间差，获取所述目标人脸的深度信息，所述目标时间差为接收到所述毫米波信号的时间和发射所述毫米波信号的时间之间的差值；

根据所述深度信息，对所述第一人脸图像中与所述目标人脸的各个部位对应的图像区域进行不同的图像处理。

2.根据权利要求1所述的方法，其特征在于，所述电子设备包括毫米波模块；

所述向所述目标人脸发射毫米波信号，包括：

通过所述毫米波模块向所述目标人脸发射所述毫米波信号；

所述接收从所述目标人脸反射的所述毫米波信号，包括：

通过所述毫米波模块接收从所述目标人脸反射的所述毫米波信号。

3.根据权利要求1所述的方法，其特征在于，所述根据所述深度信息，对所述第一人脸图像中与所述目标人脸的各个部位对应的图像区域进行不同的图像处理之前，所述方法还包括：

根据所述第一人脸图像和所述深度信息，生成所述第一人脸图像对应的三维人脸图像；

根据所述三维人脸图像，确定所述第一人脸图像中与所述目标人脸的各个部位对应的图像区域。

4.根据权利要求1至3中任一项所述的方法，其特征在于，所述方法还包括：

根据反射的所述毫米波信号的目标参数，采用预设检测算法，确定所述目标人脸中的各个部位的第一特征信息；

所述根据所述深度信息，对所述第一人脸图像中与所述目标人脸的各个部位对应的图像区域进行不同的图像处理，包括：

根据所述各个部位的第一特征信息，对所述第一人脸图像中与所述各个部位对应的图像区域进行不同的图像处理。

5.根据权利要求4所述的方法，其特征在于，所述在拍摄界面显示目标人脸对应的第一人脸图像的情况下，向所述目标人脸发射毫米波信号之前，所述方法还包括：

获取至少一个第一参数和至少一个第二特征信息，每个第一参数分别为用户人脸中的一个部位反射的毫米波信号的参数，每个第二特征信息分别为所述用户人脸中的一个部位的特征信息；

对所述至少一个第一参数和所述至少一个第二特征信息进行数据训练，以得到所述预设检测算法。

6.一种电子设备，其特征在于，所述电子设备包括：发射模块、接收模块、获取模块和处理模块；

所述发射模块，用于在拍摄界面显示目标人脸对应的第一人脸图像的情况下，向所述目标人脸发射毫米波信号；

所述接收模块，用于接收从所述目标人脸反射的所述毫米波信号；

所述获取模块，用于根据目标时间差，获取所述目标人脸的深度信息，所述目标时间差为接收到所述毫米波信号的时间和发射所述毫米波信号的时间之间的差值；

所述处理模块，用于根据所述获取模块获取的所述深度信息，对所述第一人脸图像中与所述目标人脸的各个部位对应的图像区域进行不同的图像处理。

7.根据权利要求6所述的电子设备，其特征在于，所述电子设备包括毫米波模块；

所述发射模块，具体用于通过所述毫米波模块向所述目标人脸发射所述毫米波信号；

所述接收模块，具体用于通过所述毫米波模块接收从所述目标人脸反射的所述毫米波信号。

8.根据权利要求6所述的电子设备，其特征在于，所述电子设备还包括：生成模块和确定模块；

所述生成模块，用于在所述处理模块根据所述深度信息，对所述第一人脸图像中与所述目标人脸的各个部位对应的图像区域进行不同的图像处理之前，根据所述第一人脸图像和所述深度信息，生成所述第一人脸图像对应的三维人脸图像；

所述确定模块，用于根据所述生成模块生成的所述三维人脸图像，确定所述第一人脸图像中与所述目标人脸的各个部位对应的图像区域。

9.根据权利要求6至8中任一项所述的电子设备，其特征在于，所述电子设备还包括：确定模块；

所述确定模块，用于根据反射的所述毫米波信号的目标参数，采用预设检测算法，确定所述目标人脸中的各个部位的第一特征信息；

所述处理模块，具体用于根据所述确定模块确定的所述各个部位的第一特征信息，对所述第一人脸图像中与所述各个部位对应的图像区域进行不同的图像处理。

10.根据权利要求9所述的电子设备，其特征在于，所述获取模块，还用于在所述发射模块在拍摄界面显示目标人脸对应的第一人脸图像的情况下，向所述目标人脸发射毫米波信号之前，获取至少一个第一参数和至少一个第二特征信息，每个第一参数分别为用户人脸中的一个部位反射的毫米波信号的参数，每个第二特征信息分别为所述用户人脸中的一个部位的特征信息；

所述电子设备还包括：训练模块；

所述训练模块，用于对所述获取模块获取的所述至少一个第一参数和所述至少一个第二特征信息进行数据训练，以得到所述预设检测算法。

11.一种电子设备，其特征在于，包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述计算机程序被所述处理器执行时实现如权利要求1至5中任一项所述的图像处理方法的步骤。

Images