CN107734253A - 图像处理方法、装置、移动终端和计算机可读存储介质 - Google Patents

Abstract

本申请涉及一种图像处理方法、装置、移动终端和计算机可读存储介质。上述方法包括：获取连续拍摄的多帧人脸图像；根据所述人脸图像中人脸的人眼特征确定目标图像；将所述目标图像分别与所述多帧人脸图像中其他图像进行匹配；将所述目标图像和匹配度超过预设值的其他图像进行融合处理。上述方法，在连续拍摄的多帧人脸图像中，移动终端可根据人脸的人眼特征确定目标图像，在获取与目标图像能够匹配的其他图像，将上述目标图像与其他图像进行融合处理。通过人眼特征挑选图像，可筛出人脸处于闭眼的图像，将多张图像进行融合，可降低图像中噪声，提高图像的质量。

Description

图像处理方法、装置、移动终端和计算机可读存储介质

技术领域

本申请涉及计算机技术领域，特别是涉及一种图像处理方法、装置、移动终端和计算机可读存储介质。

背景技术

随着智能移动终端的发展和智能移动终端拍摄技术的提升，越来越多的用户使用智能预定终端进行拍照。用户在拍照时特别是多人合照时，由于光照太强或眨眼等原因，会造成拍摄出的照片出现闭眼等情况，影响照片美感。

发明内容

本申请实施例提供一种图像处理方法、装置、移动终端和计算机可读存储介质，可以提高图像的质量，降低图像中噪声。

一种图像处理方法，包括：

获取连续拍摄的多帧人脸图像；

根据所述人脸图像中人脸的人眼特征确定目标图像；

将所述目标图像分别与所述多帧人脸图像中其他图像进行匹配；

将所述目标图像和匹配度超过预设值的其他图像进行融合处理。

一种图像处理装置，包括：

获取模块，用于获取连续拍摄的多帧人脸图像；

确定模块，用于根据所述人脸图像中人脸的人眼特征确定目标图像；

匹配模块，用于将所述目标图像分别与所述多帧人脸图像中其他图像进行匹配；

处理模块，用于将所述目标图像和匹配度超过预设值的其他图像进行融合处理。

一种移动终端，包括存储器及处理器，所述存储器中储存有计算机可读指令，所述指令被所述处理器执行时，使得所述处理器执行如上所述的方法的步骤。

一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如上所述的方法的步骤。

本申请实施例中，在连续拍摄的多帧人脸图像中，移动终端可根据人脸的人眼特征确定目标图像，在获取与目标图像能够匹配的其他图像，将上述目标图像与其他图像进行融合处理。通过人眼特征挑选图像，可筛出人脸处于闭眼的图像，将多张图像进行融合，可降低图像中噪声，提高图像的质量。

附图说明

为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为一个实施例中图像处理方法的流程图；

图2为另一个实施例中图像处理方法的流程图；

图3为一个实施例中图像处理装置的结构框图；

图4为另一个实施例中图像处理装置的结构框图；

图5为另一个实施例中图像处理装置的结构框图；

图6为一个实施例中图像处理电路的示意图。

具体实施方式

为了使本申请的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本申请进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本申请，并不用于限定本申请。

图1为一个实施例中图像处理方法的流程图。如图1所示，一种图像处理方法，包括：

步骤102，获取连续拍摄的多帧人脸图像。

移动终端获取连续拍摄的多帧图像后，可对多帧图像进行人脸识别，获取多帧图像中人脸图像。其中，连续拍摄的图像是指从同一方位、同一角度、不间断快速拍摄的图像。通常情况下，连续拍摄的图像相似度较高。上述连续拍摄的多帧图像可为移动终端拍摄获取的图像，也可为移动终端通过网络传输获取的图像。

步骤104，根据人脸图像中人脸的人眼特征确定目标图像。

移动终端在获取连续拍摄的多帧人脸图像后，可提取人脸图像中人脸特征点，例如人脸的五官特征点。移动终端可根据人脸特征点标记人脸特征的位置信息，例如根据人脸的眼球特征点识别人眼的位置。在获取人脸特征点后，移动终端可提取人脸中人眼特征，再根据人眼特征确定目标图像。上述目标图像是符合预设的人脸状态的图像，例如图像中人脸均处于睁眼状态的图像。上述人眼特征可包括：眼球形状、眼球位置、眼球面积、眼神方向、瞳孔高度和眼白面积等。移动终端中可预设人眼特征对应的判断条件，在获取上述人眼特征后，移动终端可将人眼特征与预设的判断条件一一比对，判断人脸图像是否为目标图像。

在一个实施例中，移动终端在连续拍摄的多帧人脸图像中检测到目标图像后，可直接将目标图像在移动终端界面输出展示。

步骤106，将目标图像分别与多帧人脸图像中其他图像进行匹配。

在提取出目标图像后，移动终端可将目标图像与上述多帧人脸图像中其他图像分别进行匹配。上述匹配包括：将不同图像中同一人脸的人脸特征的位置进行匹配、将不同图像中同一人脸的人脸特征的形状进行匹配。例如，将不同图像中同一人脸的嘴唇的位置进行匹配，将不同图像中同一人脸的嘴唇的形状进行匹配。通过将多帧人脸图像中同一人脸的人脸特征的位置进行匹配、同一人脸的人脸形状进行匹配，可检测人脸中人脸特征是否发生变化。例如，眨眼、张嘴等动作会造成人脸中五官位置的变化。

移动终端在将目标图像与其他图像进行匹配时，可对不同的人脸特征点设定不同的匹配精度。例如，对人脸中眼睛特征点的匹配精度较高，对人脸中嘴唇特征点的匹配精度较低。即在将目标图像与其他图像进行匹配时，要求其他图像与目标图像的眼睛特征点相似度较高、而其他图像与目标图像的嘴唇特征点可以相似度较低。

移动终端在将目标图像与其他图像进行匹配后，可根据各人脸特征点匹配度获取目标图像与其他图像的匹配度。例如，移动终端可获取目标图像与图像A中同一人脸的五官特征的匹配度分别为：眼睛90％、鼻子85％、嘴唇88％、耳朵85％，移动终端根据五官特征的匹配度的平均值获取目标图像与图像A的匹配度为87％。

当目标图像中存在多张人脸时，移动终端可获取目标图像与其他图像进行匹配，获取目标图像中每张人脸的匹配度，根据每张人脸的匹配度的平均值来获取目标图像与其他图像的匹配度。

步骤108，将目标图像和匹配度超过预设值的其他图像进行融合处理。

移动终端可获取与目标图像的匹配度超过预设值的其他图像，将目标图像与上述其他图像进行融合处理。其中，图像融合是指将通过多源信道采集的关于同一目标的图像数据经过图像处理和计算机技术等，最大限度的提取各信道中高质量信息，合成高质量图像的过程。图像融合的算法包括：逻辑滤波法、颜色空间融合法、加权平均法、像素灰度值选大/小图像融合法等。

在一个实施例中，在获取与目标图像的匹配度超过预设值的其他图像后，若匹配度超过预设值的其他图像的数量超过预设数量，则按照匹配度由高到低排序获取预设数量的其他图像。例如，预设数量为5，与目标图像匹配度超过98％的其他图像有6张，则将其他图像按照匹配度由高到低排序，将前5张其他图像与目标图像进行图像融合。

本申请实施例中方法，在连续拍摄的多帧人脸图像中，移动终端可根据人脸的人眼特征确定目标图像，在获取与目标图像能够匹配的其他图像，将上述目标图像与其他图像进行融合处理。通过人眼特征挑选图像，可筛出人脸处于闭眼的图像，将多张图像进行融合，可降低图像中噪声，提高图像的质量。

在一个实施例中，人眼特征包括：眼球形状、眼球位置、眼球面积、眼神方向、瞳孔高度和眼白面积。

移动终端在确定人脸中人眼位置后，可提取人眼特征。上述人眼特征包括：眼球形状、眼球位置、眼球面积、眼神方向、瞳孔高度和眼白面积等。其中，眼球形状是眼球在图像中显示的二维形状，如圆形。眼球位置是指眼球在眼眶中所处的位置，具体地可根据眼球中瞳孔中心与眼眶的距离确定眼球位置，例如根据眼球中瞳孔中心在水平方向上距离眼眶左边/右边的距离、眼球中瞳孔中心在竖直方向上距离眼眶顶部/底部的距离确定眼球位置，上述瞳孔中心与眼眶的距离可为像素值也可为计量单位毫米、厘米等。眼球面积是眼球在图像中所显示的面积，具体地可根据眼球对应的像素个数计算眼球面积。眼神方向是指人脸中眼睛所看向的方向，具体地可根据人脸偏转角度、眼球位置等确定眼神方向。移动终端可将图像中人脸与标准人脸图像进行比对，获取人脸偏转角度。上述标准人脸可为偏转角度为0的人脸图像，即人脸正向面对镜头拍摄获取的人脸图像。例如，将图像中人脸与标准人脸图像进行比对后。瞳孔高度是指眼球中瞳孔中心在竖直方向上距离眼眶底部的高度。眼白面积是指眼眶中除眼球部分外的眼白在图像中所显示的面积，具体地可根据眼白对应的像素个数计算眼白面积。

在一个实施例中，当人脸图像为单人图像时，根据人脸图像中人脸的人眼特征确定目标图像包括以下方法中任意一种：

(1)当检测到人脸图像中人脸的眼球面积大于第一阈值，判定人脸处于睁眼状态，从人脸处于睁眼状态的人脸图像中选取眼白面积最大的人脸图像作为目标图像。

当人脸图像为单人图像时，可分别获取图像中人脸两个眼睛对应的眼球面积。当两个眼睛对应的眼球面积均大于第一阈值、或两个眼睛中任一眼球对应的眼球面积大于第一阈值时，判定人脸处于睁眼状态。其中，第一阈值可为用户预设的值，也可为移动终端根据历史数据分析获取的值。移动终端在获取人脸处于睁眼状态的人脸图像后，可分别获取上述人脸图像中眼睛对应的眼白面积。若人脸中两个眼睛都对应有眼白，将两只眼睛眼白面积之和最大的人脸图像作为目标图像。若人脸中仅一个眼睛对应有眼白，将眼白面积最大的人脸图像作为目标图像。

在一个实施例中，移动终端可建立第一阈值与人脸面积之间的对应关系，即不同的人脸面积对应不同的第一阈值。当人脸面积较大时，判定人脸距离镜头较近，第一阈值较大；当人脸面积较小时，判定人脸距离镜头较远，第一阈值较小。

(2)当检测到人脸图像中人脸的瞳孔高度在预设范围内，判定人脸处于睁眼状态，从人脸处于睁眼状态的人脸图像中选取眼白面积最大的人脸作为目标图像。

若移动终端可检测到人脸图像中两个眼睛的瞳孔，移动终端还可分别获取人脸中两个眼睛的瞳孔高度，分别检测人脸中两个眼睛的瞳孔高度是否在预设范围内。若移动终端仅能检测到人脸图像中一个眼睛的瞳孔，移动终端检测上述瞳孔对应的瞳孔高度是否在预设范围内。上述预设范围对应的数值为人脸处于睁眼状态时瞳孔中心在竖直方向上距离眼眶顶部/底部的距离值，上述距离值可为像素值也可为计量单位厘米或毫米。其中，预设范围对应给的数值可为用户设定的值，也可为移动终端根据历史数据分析获取的值。移动终端在获取处于睁眼状态的人脸图像后，可分别获取上述人脸图像中眼睛对应的眼白面积。若人脸中两个眼睛都对应有眼白，将两只眼睛眼白面积之和最大的人脸图像作为目标图像。若人脸中仅一个眼睛对应有眼白，将眼白面积最大的人脸图像作为目标图像。

因同一人脸的眼睛大小固定，选取眼白面积最大的人脸图像作为目标图像，即选取人眼睁开最大时人脸图像作为目标图像。

本申请实施例中方法，根据眼球面积获取瞳孔高度确定处于睁眼状态的人脸图像，再选取人眼睁开最大时人脸图像作为目标图像，即选取的目标图像是多帧图像中人眼处于完全睁开时图像，以完全睁开时图像为基准挑选其他图像，使得挑选的图像都是处于睁眼状态的图像，提高了图像的美观度。

在一个实施例中，当人脸图像为多人图像时，根据人脸图像中人脸的人眼特征确定目标图像包括以下方法中任意一种：

(1)获取图像中人脸均处于睁眼状态的人脸图像，选取眼白面积最大的人脸图像作为目标图像。

(2)获取图像中人脸均处于睁眼状态的人脸图像，选取眼神方向一致的人脸图像作为目标图像。

当人脸图像为多人脸图像时，移动终端可分别检测多人脸图像中每张人脸是否处于睁眼状态，若多人脸图像中每张人脸都处于睁眼状态，再选取目标图像。其中，检测人脸是否处于睁眼状态的方法与上述人脸图像为单人脸图像时检测方法相同，在此不再赘述。

移动终端可选取图像中人脸的眼白面积之和最大的人脸图像为目标图像，即选取整体睁眼最大的图像作为目标图像。移动终端也可根据眼神方向选取目标图像。移动终端可依次检测人脸图像中每个人脸的眼神方向，当检测到每个人脸的眼神方向一致时，将人脸图像作为目标图像。其中，眼神方向一致是指眼神方向相对同一标准线对应的角度在同一角度范围内。例如，以人脸正向面对镜头且眼睛直视镜头时眼神方向直视镜头为0°，若眼神方向在向右偏转30°至35°范围，判定人脸的眼神方向一致。

本申请实施例中方法，在多人图像中选取多人眼睛睁开最大的图像为目标图像、或多人眼神方向一致的图像为目标图像，使得挑选的目标图像美观度较高。

在一个实施例中，将目标图像分别与多帧人脸图像中其他图像进行匹配包括：将目标图像与其他图像中同一人脸的五官特征进行相似度匹配和位置匹配，根据相似度匹配值和位置匹配值获取匹配度。

移动终端将目标图像与其他图像进行匹配包括：将目标图像与其他图像中同一人脸进行匹配。具体包括：将同一人脸在图像上的位置进行匹配，将人脸上五官特征的位置进行匹配，将人脸上五官特征的形状进行匹配。其中，将同一人脸在图像上的位置进行匹配包括：识别人脸在图像上的显示区域，将目标图像与其他图像完全重合，检测目标图像上人脸与其他图像上对应的同一人脸是否能够重合，若能够重合，则同一人脸在图像上的位置相同。在检测同一人脸在图像上的位置后，还可检测人脸上五官特征的位置是否重合。在比对五官特征的位置是否重合时包括：识别五官特征的特征点，检测上述五官特征的特征点在图像上的位置是否相同。检测五官特征的特征点在图像上的位置是否相同包括：将目标图像与其他图像完全重合，检测五官特征的特征点是否重合。例如，将目标图像与图像B完全重合，检测左眼对应的特征点眼角是否重合、眼尾是否重合，若左眼的眼角重合且眼尾重合，则左眼重合。移动终端可根据重合度获取位置匹配值，移动终端可建立重合度与位置匹配值的对应关系，例如，在五官特征完全重合时，匹配值为100％；在五官特征的误差在5毫米之内时，匹配值为95％。

移动终端还可将五官特征的相似度进行匹配，具体包括：获取五官特征的形状，根据算法匹配五官特征的相似度，进而获取相似度匹配值。其中，五官特征的形状包括：鼻子的形状、眼睛的形状、嘴唇的形状、耳朵的形状等。

移动终端可根据相似度匹配值和位置匹配值获取匹配度，包括：若相似度匹配值和位置匹配值相差不超过5％，则获取相似度匹配值和位置匹配值的平均值作为匹配度；若相似度匹配值和位置匹配值相差超过5％，则舍弃对应的其他图像。

在一个实施例中，当人脸图像为多人图像时，还包括：

步骤202，若多帧人脸图像中不存在目标图像，分别获取人脸图像中每张人脸对应的睁眼图像。

步骤204，从睁眼图像中抠出对应的人脸部分。

步骤206，将每张人脸对应的人脸图像中抠出的人脸部分与背景图像合成得到目标图像。

移动终端在根据上述规则获取目标图像时，若上述多帧人脸图像中不存在目标图像，则对上述多帧人脸图像中每张人脸分别进行识别，获取每张人脸对应的睁眼图像。例如，连续拍摄的3帧人脸图像中均存在人脸A、人脸B和人脸C。图像1中人脸A处于睁眼状态、人脸B处于睁眼状态、人脸C处于闭眼状态；图像2中人脸A处于睁眼状态、人脸B处于闭眼状态、人脸C处于睁眼状态；图像3中人脸A处于闭眼状态、人脸B处于睁眼状态、人脸C处于睁眼状态。移动终端可获取人脸A对应的睁眼图像为图像1、图像2；人脸B对应的睁眼图像为图像1、图像3；人脸C对应的睁眼图像为图像2、图像3。

移动终端在获取人脸对应的睁眼图像后，根据单人图像对应的目标图像选取方法从上述人脸对应的睁眼图像中选取一张图像作为抠图图像，再从上述抠图图像中抠出对应的人脸部分。例如，移动终端根据单人图像对应的目标图像选取方法选取人脸A对应的抠图图像为图1、人脸B对应的抠图图像为图3、人脸C对应的抠图图像为图2。则移动终端从图1中抠出人脸A、从图2中抠出人脸C、从图3中抠出人脸B。

移动终端可分别获取多帧图像中除人脸以外的背景图像，再将多帧图像中背景图像融合获取融合后背景图像。移动终端将人脸图像中每张人脸对应的人脸图像中抠出的人脸部分与背景图像依次进行融合，即可得到目标图像。其中，移动终端可标记每张人脸在抠图图像中对应的位置信息，将人脸图像中每张人脸对应的人脸图像中抠出的人脸部分与背景图像依次进行融合时，移动终端可根据每张人脸在抠图图像中对应的位置信息将人脸部分与背景图像进行融合。

本申请实施例中方法，在多人合影时若拍摄获取的每张图像中均存在闭眼现象，移动终端可抠出每张人脸对应的睁眼图像，再将每张人脸对应的睁眼图像与背景图像进行融合，得到人脸均处于睁眼状态时图像。上述方法，可将多张图像中图像美观度较高的部分融合，提高图像显示的美观度。

在一个实施例中，还包括：在移动终端界面展示融合处理后人脸图像，在接收到融合处理后人脸图像对应的删除指令后，删除融合处理后人脸图像对应的多帧人脸图像。

移动终端在将目标图像与匹配度超过预设值的其他图像进行融合处理后，可在移动终端界面展示融合处理后人脸图像。移动终端在展示融合处理后人脸图像时，还可展示删除多帧人脸图像的消息，例如在移动界面弹窗显示、或在保存融合处理后人脸图像时在上述图像上覆盖显示。若移动终端接收到与上述融合处理后图像对应的删除指令，则删除与上述融合处理后人脸图像对应的多帧人脸图像，并存储上述融合处理后人脸图像。

融合处理后图像对应的多帧人脸图像内容较为相似，且融合处理后图像的图像美观度更高。本申请实施例中方法，通过删除融合处理后图像对应的多帧图像，即删除相似图像中图像美观度较低的图像，既可节省移动终端的存储空间，又能存储图像质量较高的人脸图像。

图3为一个实施例中图像处理装置的结构框图。如图3所示，一种图像处理装置，包括：

获取模块302，用于获取连续拍摄的多帧人脸图像。

确定模块304，用于根据人脸图像中人脸的人眼特征确定目标图像。

匹配模块306，用于将目标图像分别与多帧人脸图像中其他图像进行匹配。

处理模块308，用于将目标图像和匹配度超过预设值的其他图像进行融合处理。

在一个实施例中，人眼特征包括：眼球形状、眼球位置、眼球面积、眼神方向、瞳孔高度和眼白面积。

在一个实施例中，当人脸图像为单人图像时，确定模块304还用于当检测到人脸图像中人脸的眼球面积大于第一阈值，判定人脸处于睁眼状态，从人脸处于睁眼状态的人脸图像中选取眼白面积最大的人脸图像作为目标图像。确定模块304还用于当检测到人脸图像中人脸的瞳孔高度在预设范围内，判定人脸处于睁眼状态，从人脸处于睁眼状态的人脸图像中选取眼白面积最大的人脸作为目标图像。

在一个实施例中，当人脸图像为多人图像时，确定模块304还用于获取图像中人脸均处于睁眼状态的人脸图像，选取眼白面积最大的人脸图像作为目标图像。确定模块304还用于获取图像中人脸均处于睁眼状态的人脸图像，选取眼神方向一致的人脸图像作为目标图像。

在一个实施例中，匹配模块306还用于将目标图像与其他图像中同一人脸的五官特征进行相似度匹配和位置匹配，根据相似度匹配值和位置匹配值获取匹配度。

图4为另一个实施例中图像处理装置的结构框图。如图4所示，一种图像处理装置，包括：获取模块402、确定模块404、匹配模块406、处理模块408和抠图模块410。获取模块402、确定模块404、匹配模块406、处理模块408与图3中对应的模块功能相同。

获取模块402还用于多帧人脸图像中不存在目标图像，分别获取人脸图像中每张人脸对应的睁眼图像。

抠图模块410，于述睁眼图像中抠出对应的人脸部分。

处理模块408还用于每张人脸对应的人脸图像中抠出的人脸部分与背景图像合成得到目标图像。

图5为另一个实施例中图像处理装置的结构框图。如图5所示，一种图像处理装置，包括：获取模块502、确定模块504匹配模块506、处理模块508和删除模块510。获取模块502、确定模块505、匹配模块506、处理模块508与图3中对应的模块功能相同。

删除模块510，用于在移动终端界面展示融合处理后人脸图像，在接收到融合处理后人脸图像对应的删除指令后，删除融合处理后人脸图像对应的多帧人脸图像。

上述图像处理装置中各个模块的划分仅用于举例说明，在其他实施例中，可将图像处理装置按照需要划分为不同的模块，以完成上述图像处理装置的全部或部分功能。

本申请实施例还提供了一种计算机可读存储介质。一个或多个包含计算机可执行指令的非易失性计算机可读存储介质，当计算机可执行指令被一个或多个处理器执行时，使得处理器执行以下步骤：

(1)获取连续拍摄的多帧人脸图像。

(2)根据人脸图像中人脸的人眼特征确定目标图像。

(3)将目标图像分别与多帧人脸图像中其他图像进行匹配。

(4)将目标图像和匹配度超过预设值的其他图像进行融合处理。

在一个实施例中，人眼特征包括：眼球形状、眼球位置、眼球面积、眼神方向、瞳孔高度和眼白面积。

在一个实施例中，当人脸图像为单人图像时，根据人脸图像中人脸的人眼特征确定目标图像执行以下方法中任意一种：

(1)当检测到人脸图像中人脸的眼球面积大于第一阈值，判定人脸处于睁眼状态，从人脸处于睁眼状态的人脸图像中选取眼白面积最大的人脸图像作为目标图像。

(2)当检测到人脸图像中人脸的瞳孔高度在预设范围内，判定人脸处于睁眼状态，从人脸处于睁眼状态的人脸图像中选取眼白面积最大的人脸作为目标图像。

在一个实施例中，当人脸图像为多人图像时，根据人脸图像中人脸的人眼特征确定目标图像执行以下方法中任意一种：

(1)获取图像中人脸均处于睁眼状态的人脸图像，选取眼白面积最大的人脸图像作为目标图像。

(2)获取图像中人脸均处于睁眼状态的人脸图像，选取眼神方向一致的人脸图像作为目标图像。

在一个实施例中，将目标图像分别与多帧人脸图像中其他图像进行匹配包括：将目标图像与其他图像中同一人脸的五官特征进行相似度匹配和位置匹配，根据相似度匹配值和位置匹配值获取匹配度。

在一个实施例中，当人脸图像为多人图像时，还执行：若多帧人脸图像中不存在目标图像，分别获取人脸图像中每张人脸对应的睁眼图像。从睁眼图像中抠出对应的人脸部分。将每张人脸对应的人脸图像中抠出的人脸部分与背景图像合成得到目标图像。

在一个实施例中，还执行：在移动终端界面展示融合处理后人脸图像，在接收到融合处理后人脸图像对应的删除指令后，删除融合处理后人脸图像对应的多帧人脸图像。

本申请还提供一种包含指令的计算机程序产品，当上述计算机程序产品在计算机上运行时，使得计算机执行以下步骤：

(1)获取连续拍摄的多帧人脸图像。

(2)根据人脸图像中人脸的人眼特征确定目标图像。

(3)将目标图像分别与多帧人脸图像中其他图像进行匹配。

(4)将目标图像和匹配度超过预设值的其他图像进行融合处理。

在一个实施例中，人眼特征包括：眼球形状、眼球位置、眼球面积、眼神方向、瞳孔高度和眼白面积。

在一个实施例中，当人脸图像为单人图像时，根据人脸图像中人脸的人眼特征确定目标图像执行以下方法中任意一种：

(1)当检测到人脸图像中人脸的眼球面积大于第一阈值，判定人脸处于睁眼状态，从人脸处于睁眼状态的人脸图像中选取眼白面积最大的人脸图像作为目标图像。

(2)当检测到人脸图像中人脸的瞳孔高度在预设范围内，判定人脸处于睁眼状态，从人脸处于睁眼状态的人脸图像中选取眼白面积最大的人脸作为目标图像。

在一个实施例中，当人脸图像为多人图像时，根据人脸图像中人脸的人眼特征确定目标图像执行以下方法中任意一种：

(1)获取图像中人脸均处于睁眼状态的人脸图像，选取眼白面积最大的人脸图像作为目标图像。

(2)获取图像中人脸均处于睁眼状态的人脸图像，选取眼神方向一致的人脸图像作为目标图像。

在一个实施例中，将目标图像分别与多帧人脸图像中其他图像进行匹配包括：将目标图像与其他图像中同一人脸的五官特征进行相似度匹配和位置匹配，根据相似度匹配值和位置匹配值获取匹配度。

在一个实施例中，当人脸图像为多人图像时，还执行：若多帧人脸图像中不存在目标图像，分别获取人脸图像中每张人脸对应的睁眼图像。从睁眼图像中抠出对应的人脸部分。将每张人脸对应的人脸图像中抠出的人脸部分与背景图像合成得到目标图像。

在一个实施例中，还执行：在移动终端界面展示融合处理后人脸图像，在接收到融合处理后人脸图像对应的删除指令后，删除融合处理后人脸图像对应的多帧人脸图像。

本申请实施例还提供一种移动终端。上述移动终端中包括图像处理电路，图像处理电路可以利用硬件和/或软件组件实现，可包括定义ISP(Image Signal Processing，图像信号处理)管线的各种处理单元。图6为一个实施例中图像处理电路的示意图。如图6所示，为便于说明，仅示出与本申请实施例相关的图像处理技术的各个方面。

如图6所示，图像处理电路包括ISP处理器640和控制逻辑器650。成像设备610捕捉的图像数据首先由ISP处理器640处理，ISP处理器640对图像数据进行分析以捕捉可用于确定和/或成像设备610的一个或多个控制参数的图像统计信息。成像设备610可包括具有一个或多个透镜612和图像传感器614的照相机。图像传感器614可包括色彩滤镜阵列(如Bayer滤镜)，图像传感器614可获取用图像传感器614的每个成像像素捕捉的光强度和波长信息，并提供可由ISP处理器640处理的一组原始图像数据。传感器620(如陀螺仪)可基于传感器620接口类型把采集的图像处理的参数(如防抖参数)提供给ISP处理器640。传感器620接口可以利用SMIA(Standard Mobile Imaging Architecture，标准移动成像架构)接口、其它串行或并行照相机接口或上述接口的组合。

此外，图像传感器614也可将原始图像数据发送给传感器620，传感器620可基于传感器620接口类型把原始图像数据提供给ISP处理器640，或者传感器620将原始图像数据存储到图像存储器630中。

ISP处理器640按多种格式逐个像素地处理原始图像数据。例如，每个图像像素可具有8、10、12或14比特的位深度，ISP处理器640可对原始图像数据进行一个或多个图像处理操作、收集关于图像数据的统计信息。其中，图像处理操作可按相同或不同的位深度精度进行。

ISP处理器640还可从图像存储器630接收图像数据。例如，传感器620接口将原始图像数据发送给图像存储器630，图像存储器630中的原始图像数据再提供给ISP处理器640以供处理。图像存储器630可为存储器装置的一部分、存储设备、或电子设备内的独立的专用存储器，并可包括DMA(Direct Memory Access，直接直接存储器存取)特征。

当接收到来自图像传感器614接口或来自传感器620接口或来自图像存储器630的原始图像数据时，ISP处理器640可进行一个或多个图像处理操作，如时域滤波。处理后的图像数据可发送给图像存储器630，以便在被显示之前进行另外的处理。ISP处理器640从图像存储器630接收处理数据，并对处理数据进行原始域中以及RGB和YCbCr颜色空间中的图像数据处理。ISP处理器640处理后的图像数据可输出给显示器670，以供用户观看和/或由图形引擎或GPU(Graphics Processing Unit，图形处理器)进一步处理。此外，ISP处理器640的输出还可发送给图像存储器630，且显示器670可从图像存储器630读取图像数据。在一个实施例中，图像存储器630可被配置为实现一个或多个帧缓冲器。此外，ISP处理器640的输出可发送给编码器/解码器660，以便编码/解码图像数据。编码的图像数据可被保存，并在显示于显示器670设备上之前解压缩。编码器/解码器660可由CPU或GPU或协处理器实现。

ISP处理器640确定的统计数据可发送给控制逻辑器650单元。例如，统计数据可包括自动曝光、自动白平衡、自动聚焦、闪烁检测、黑电平补偿、透镜612阴影校正等图像传感器614统计信息。控制逻辑器650可包括执行一个或多个例程(如固件)的处理器和/或微控制器，一个或多个例程可根据接收的统计数据，确定成像设备610的控制参数及ISP处理器640的控制参数。例如，成像设备610的控制参数可包括传感器620控制参数(例如增益、曝光控制的积分时间、防抖参数等)、照相机闪光控制参数、透镜612控制参数(例如聚焦或变焦用焦距)、或这些参数的组合。ISP控制参数可包括用于自动白平衡和颜色调整(例如，在RGB处理期间)的增益水平和色彩校正矩阵，以及透镜612阴影校正参数。

以下为运用图6中图像处理技术实现图像处理方法的步骤：

(1)获取连续拍摄的多帧人脸图像。

(2)根据人脸图像中人脸的人眼特征确定目标图像。

(3)将目标图像分别与多帧人脸图像中其他图像进行匹配。

(4)将目标图像和匹配度超过预设值的其他图像进行融合处理。

在一个实施例中，人眼特征包括：眼球形状、眼球位置、眼球面积、眼神方向、瞳孔高度和眼白面积。

在一个实施例中，当人脸图像为单人图像时，根据人脸图像中人脸的人眼特征确定目标图像执行以下方法中任意一种：

(1)当检测到人脸图像中人脸的眼球面积大于第一阈值，判定人脸处于睁眼状态，从人脸处于睁眼状态的人脸图像中选取眼白面积最大的人脸图像作为目标图像。

(2)当检测到人脸图像中人脸的瞳孔高度在预设范围内，判定人脸处于睁眼状态，从人脸处于睁眼状态的人脸图像中选取眼白面积最大的人脸作为目标图像。

在一个实施例中，当人脸图像为多人图像时，根据人脸图像中人脸的人眼特征确定目标图像执行以下方法中任意一种：

(1)获取图像中人脸均处于睁眼状态的人脸图像，选取眼白面积最大的人脸图像作为目标图像。

(2)获取图像中人脸均处于睁眼状态的人脸图像，选取眼神方向一致的人脸图像作为目标图像。

在一个实施例中，将目标图像分别与多帧人脸图像中其他图像进行匹配包括：将目标图像与其他图像中同一人脸的五官特征进行相似度匹配和位置匹配，根据相似度匹配值和位置匹配值获取匹配度。

在一个实施例中，当人脸图像为多人图像时，还执行：若多帧人脸图像中不存在目标图像，分别获取人脸图像中每张人脸对应的睁眼图像。从睁眼图像中抠出对应的人脸部分。将每张人脸对应的人脸图像中抠出的人脸部分与背景图像合成得到目标图像。

在一个实施例中，还执行：在移动终端界面展示融合处理后人脸图像，在接收到融合处理后人脸图像对应的删除指令后，删除融合处理后人脸图像对应的多帧人脸图像。

本申请所使用的对存储器、存储、数据库或其它介质的任何引用可包括非易失性和/或易失性存储器。合适的非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM)，它用作外部高速缓冲存储器。作为说明而非局限，RAM以多种形式可得，诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDR SDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink)DRAM(SLDRAM)、存储器总线(Rambus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)。

以上实施例仅表达了本申请的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对本申请专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本申请构思的前提下，还可以做出若干变形和改进，这些都属于本申请的保护范围。因此，本申请专利的保护范围应以所附权利要求为准。

Claims (10)

1.一种图像处理方法，其特征在于，包括：

获取连续拍摄的多帧人脸图像；

根据所述人脸图像中人脸的人眼特征确定目标图像；

将所述目标图像分别与所述多帧人脸图像中其他图像进行匹配；

将所述目标图像和匹配度超过预设值的其他图像进行融合处理。

2.根据权利要求1所述的方法，其特征在于，所述人眼特征包括：

眼球形状、眼球位置、眼球面积、眼神方向、瞳孔高度和眼白面积。

3.根据权利要求2所述的方法，其特征在于，当所述人脸图像为单人图像时，所述根据所述人脸图像中人脸的人眼特征确定目标图像包括以下方法中任意一种：

当检测到所述人脸图像中人脸的所述眼球面积大于第一阈值，判定人脸处于睁眼状态，从人脸处于睁眼状态的人脸图像中选取眼白面积最大的人脸图像作为所述目标图像；

当检测到所述人脸图像中人脸的所述瞳孔高度在预设范围内，判定人脸处于睁眼状态，从人脸处于睁眼状态的所述人脸图像中选取所述眼白面积最大的人脸作为所述目标图像。

4.根据权利要求3所述的方法，其特征在于，当所述人脸图像为多人图像时，所述根据所述人脸图像中人脸的人眼特征确定目标图像包括以下方法中任意一种：

获取图像中人脸均处于睁眼状态的人脸图像，选取所述眼白面积最大的所述人脸图像作为所述目标图像；

获取图像中人脸均处于睁眼状态的人脸图像，选取所述眼神方向一致的所述人脸图像作为所述目标图像。

5.根据权利要求1所述的方法，其特征在于，所述将所述目标图像分别与所述多帧人脸图像中其他图像进行匹配包括：

将所述目标图像与所述其他图像中同一人脸的五官特征进行相似度匹配和位置匹配，根据所述相似度匹配值和位置匹配值获取所述匹配度。

6.根据权利要求1、2、4或5中所述的方法，其特征在于，当所述人脸图像为多人图像时，还包括：

若所述多帧人脸图像中不存在所述目标图像，分别获取所述人脸图像中每张人脸对应的睁眼图像；

从所述睁眼图像中抠出对应的人脸部分；

将所述每张人脸对应的人脸图像中抠出的人脸部分与背景图像合成得到所述目标图像。

7.根据权利要求1至5中任一项所述的方法，其特征在于，还包括：

在所述移动终端界面展示融合处理后人脸图像，在接收到所述融合处理后人脸图像对应的删除指令后，删除所述融合处理后人脸图像对应的多帧人脸图像。

8.一种图像处理装置，其特征在于，包括：

获取模块，用于获取连续拍摄的多帧人脸图像；

确定模块，用于根据所述人脸图像中人脸的人眼特征确定目标图像；

匹配模块，用于将所述目标图像分别与所述多帧人脸图像中其他图像进行匹配；

处理模块，用于将所述目标图像和匹配度超过预设值的其他图像进行融合处理。

9.一种移动终端，包括存储器及处理器，所述存储器中储存有计算机可读指令，所述指令被所述处理器执行时，使得所述处理器执行如权利要求1至7中任一项所述的方法的步骤。

10.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1至7中任一项所述的方法的步骤。