CN108763491A - 图片处理方法、装置及终端设备 - Google Patents

Abstract

本申请适用于图像处理技术领域，提供了图像处理方法、装置及终端设备，所述方法包括：检测前置摄像头是否打开；若前置摄像头打开，检测预览图片的前景目标，获得第一检测结果；根据所述第一检测结果对所述预览图片进行处理，若后置摄像头打开，检测预览图片的前景目标，获得第二检测结果；对所述预览图片进行场景分类，获得分类结果，根据所述第二检测结果和所述分类结果，对所述预览图片进行处理。通过上述方法能够提高图片的处理速度。

Description

图片处理方法、装置及终端设备

技术领域

本申请属于图像处理技术领域，尤其涉及图片处理方法、图片处理装置、终端设备以及计算机可读存储介质。

背景技术

目前，很多用户喜欢在社交公共平台分享自己所拍摄的图片，为了使自己所拍摄的图片更加富有美感，通常都会对图片进行处理。而为了减少后期用户还需要对图片进行处理的操作步骤，现有的终端设备在用户预览图片时就对预览的图片进行一定的处理，当用户执行拍摄动作后，能够直接获得处理后的图片。

现有的对预览画面的预览图片进行处理的方法通常为：在判断出摄像头打开之后，识别预览图片的场景，根据识别结果对预览图片进行相应的处理。由于终端设备通常具有前置摄像头和后置摄像头，而前置摄像头和后置摄像头对应的预览图片通常也不同，因此，对前置摄像头和后置摄像头对应的预览图片都采用相同的处理方法难以有效提高图片的处理速率。

发明内容

有鉴于此，本申请实施例提供了图片处理方法，以解决现有技术中由于不区分前置摄像头和后摄像头而对终端设备的预览图片进行处理时所导致的图片速率过低的问题。

本申请实施例的第一方面提供了一种图片处理方法，包括：

检测前置摄像头是否打开；

若前置摄像头打开，检测预览图片的前景目标，获得第一检测结果，所述第一检测结果用于指示所述预览图片中是否存在至少一个前景目标，以及在存在至少一个前景目标时用于指示各个前景目标的类别和各个前景目标在所述预览图片中的位置；

根据所述第一检测结果对所述预览图片进行处理；

若判断出前置摄像头没有打开而后置摄像头打开，则检测预览图片的前景目标，获得第二检测结果，所述第二检测结果用于指示所述预览图片中是否存在至少一个前景目标，以及在存在至少一个前景目标时用于指示各个前景目标的类别和各个前景目标在所述预览图片中的位置；

对所述预览图片进行场景分类，获得分类结果，所述分类结果用于指示是否识别出所述待处理图片的背景，以及在识别出所述待处理图片的背景时用于指示所述待处理图片的背景类别；

根据所述第二检测结果和所述分类结果，对所述预览图片进行处理。

本申请实施例的第二方面提供了一种图片处理装置，包括：

前置摄像头是否打开检测模块，用于检测前置摄像头是否打开；

检测结果获得模块，用于若前置摄像头打开，检测预览图片的前景目标，获得第一检测结果，所述第一检测结果用于指示所述预览图片中是否存在至少一个前景目标，以及在存在至少一个景目标时用于指示各个前景目标的类别和各个前景目标在所述预览图片中的位置；

第一图片处理模块，用于根据所述第一检测结果对所述预览图片进行处理；

后置预览图片前景处理模块，用于若判断出前置摄像头没有打开而后置摄像头打开，则检测预览图片的前景目标，获得第二检测结果，所述第二检测结果用于指示所述预览图片中是否存在至少一个前景目标，以及在存在至少一个前景目标时用于指示各个前景目标的类别和各个前景目标在所述预览图片中的位置；

后置预览图片背景处理模块，用于对所述预览图片进行场景分类，获得分类结果，所述分类结果用于指示是否识别出所述待处理图片的背景，以及在识别出所述待处理图片的背景时用于指示所述待处理图片的背景类别；

第二图片处理模块，用于根据所述第二检测结果和所述分类结果，对所述预览图片进行处理。

本申请实施例的第三方面提供了一种终端设备，包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现如所述图片处理方法的步骤。

本申请实施例的第四方面提供了一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，所述计算机程序被处理器执行时实现如如所述图片处理方法。

本申请实施例与现有技术相比存在的有益效果是：

本申请实施例中，若检测出前置摄像头打开，则检测预览图片的前景目标，获得第一检测结果，再根据该第一检测结果对预览图片进行处理，若检测出后置摄像头打开，则检测预览图片的前景目标获得第二检测结果，对预览图片进行场景分类，获得分类结果，最后根据第二检测结果以及分类结果对预览图片进行处理。由于在前置摄像头打开时只检测预览图片的前景目标而不是检测整张预览图片的目标，因此，减少了需检测的目标量，缩短了检测时间，从而提高了对预览图片处理的速率。

附图说明

为了更清楚地说明本申请实施例中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。

图1是本申请实施例一提供的一种图片处理方法的流程图；

图2是本申请实施例二提供的一种图片处理方法的流程图；

图3是本申请实施例三提供的一种图片处理方法的流程图；

图4是本申请实施例四提供的一种图像处理装置的结构示意图；

图5是本申请实施例五提供的一种图像处理装置的结构示意图；

图6是本申请实施例六提供的终端设备的示意图。

具体实施方式

以下描述中，为了说明而不是为了限定，提出了诸如特定系统结构、技术之类的具体细节，以便透彻理解本申请实施例。然而，本领域的技术人员应当清楚，在没有这些具体细节的其它实施例中也可以实现本申请。在其它情况中，省略对众所周知的系统、装置、电路以及方法的详细说明，以免不必要的细节妨碍本申请的描述。

为了说明本申请所述的技术方案，下面通过具体实施例来进行说明。

应当理解，当在本说明书和所附权利要求书中使用时，术语“包括”指示所描述特征、整体、步骤、操作、元素和/或组件的存在，但并不排除一个或多个其它特征、整体、步骤、操作、元素、组件和/或其集合的存在或添加。

还应当理解，在此本申请说明书中所使用的术语仅仅是出于描述特定实施例的目的而并不意在限制本申请。如在本申请说明书和所附权利要求书中所使用的那样，除非上下文清楚地指明其它情况，否则单数形式的“一”、“一个”及“该”意在包括复数形式。

还应当进一步理解，在本申请说明书和所附权利要求书中使用的术语“和/或”是指相关联列出的项中的一个或多个的任何组合以及所有可能组合，并且包括这些组合。

如在本说明书和所附权利要求书中所使用的那样，术语“如果”可以依据上下文被解释为“当...时”或“一旦”或“响应于确定”或“响应于检测到”。类似地，短语“如果确定”或“如果检测到[所描述条件或事件]”可以依据上下文被解释为意指“一旦确定”或“响应于确定”或“一旦检测到[所描述条件或事件]”或“响应于检测到[所描述条件或事件]”。

具体实现中，本申请实施例中描述的移动终端包括但不限于诸如具有触摸敏感表面(例如，触摸屏显示器和/或触摸板)的移动电话、膝上型计算机或平板计算机之类的其它便携式设备。还应当理解的是，在某些实施例中，上述设备并非便携式通信设备，而是具有触摸敏感表面(例如，触摸屏显示器和/或触摸板)的台式计算机。

在接下来的讨论中，描述了包括显示器和触摸敏感表面的移动终端。然而，应当理解的是，移动终端可以包括诸如物理键盘、鼠标和/或控制杆的一个或多个其它物理用户接口设备。

移动终端支持各种应用程序，例如以下中的一个或多个：绘图应用程序、演示应用程序、文字处理应用程序、网站创建应用程序、盘刻录应用程序、电子表格应用程序、游戏应用程序、电话应用程序、视频会议应用程序、电子邮件应用程序、即时消息收发应用程序、锻炼支持应用程序、照片管理应用程序、数码相机应用程序、数字摄影机应用程序、web浏览应用程序、数字音乐播放器应用程序和/或数字视频播放器应用程序。

可以在移动终端上执行的各种应用程序可以使用诸如触摸敏感表面的至少一个公共物理用户接口设备。可以在应用程序之间和/或相应应用程序内调整和/或改变触摸敏感表面的一个或多个功能以及终端上显示的相应信息。这样，终端的公共物理架构(例如，触摸敏感表面)可以支持具有对用户而言直观且透明的用户界面的各种应用程序。

另外，在本申请的描述中，术语“第一”、“第二”、“第三”等仅用于区分描述，而不能理解为指示或暗示相对重要性。

实施例一：

图1是本发明实施例一提供的一种图片处理方法的流程图，详述如下：

步骤S101，检测前置摄像头是否打开；

本实施例中，根据终端设备(如手机、平板电脑、数码相机等)对前置摄像头的标识值判断该前置摄像头是否打开，例如，当前置摄像头的标识值为1时，判定该前置摄像头打开；当前置摄像头的标识值为0时，判定该前置摄像头关闭。

步骤S102，若前置摄像头打开，检测预览图片的前景目标，获得第一检测结果，所述第一检测结果用于指示所述预览图片中是否存在至少一个前景目标，以及在存在至少一个前景目标时用于指示各个前景目标的类别和各个前景目标在所述预览图片中的位置；

其中，预览图片是指从终端设备的预览画面提取的图片。

在本实施例中，所述第一检测结果包括但不限于：所述预览图片中有无前景目标的指示信息，以及在包含前景目标时用于指示上述预览图片中所包含的各个前景目标的类别和位置的信息。其中，所述前景目标可以是指所述预览图片中具有动态特征的目标，例如人、动物等；所述前景目标还可以是指距离观赏者较近且具有静态特征的景物，例如鲜花、美食等。进一步的，为了更准确的识别到前景目标的位置，以及对识别到的前景目标进行区分，本实施例在检测到前景目标后，还可以对所述前景目标采用不同的选定框进行框选，例如方框框选动物，圆框框选人脸等。

较佳的，本实施例可以采用训练后的场景检测模型对预览图片中的前景目标进行检测。示例性的，该场景检测模型可以为单点多盒检测(Single Shot MultiboxDetection，SSD)等具有前景目标检测功能的模型。当然，也可以采用其他场景检测方式，例如通过目标(如人脸)识别算法检测所述预览图片中是否存在预定目标，在检测出存在所述预定目标后，通过目标定位算法或目标跟踪算法确定所述预定目标在所述预览图片中的位置。

需要说明的是，本领域技术人员在本发明揭露的技术范围内，可容易想到的其他检测前景目标的方案也应在本发明的保护范围之内，在此不一一赘述。

以采用训练后的场景检测模型对预览图片中的前景目标进行检测为例说明场景检测模型的具体训练过程：

预先获取样本图片以及所述样本图片对应的检测结果，其中，所述样本图片对应的检测结果包括该样本图片中各个前景目标的类别和位置；

利用初始的场景检测模型检测上述样本图片中的前景目标，并根据预先获取的所述样本图片对应的检测结果，计算该初始的场景检测模型的检测准确率；

若上述检测准确率小于预设的第一检测阈值，则调整初始的场景检测模型的参数，再通过参数调整后的场景检测模型检测所述样本图片，直到调整后的场景检测模型的检测准确率大于或等于所述第一检测阈值，并将该场景检测模型作为训练后的场景检测模型。其中，调整参数的方法包括但不限于随机梯度下降算法、动力更新算法等。

步骤S103，根据所述第一检测结果对所述预览图片进行处理。

具体地，根据各个前景目标的类别选择对应的图片处理模式，再根据选择的图片处理模式对预览图片执行相应的处理。例如，若前景目标的类别为人像场景，则对预览图片进行美颜处理和/或背景虚化处理等。

本申请实施例中，若检测出前置摄像头打开，则检测预览图片的前景目标，获得第一检测结果，再根据该第一检测结果对预览图片进行处理。由于在前置摄像头打开时只检测预览图片的前景目标而不是检测整张预览图片的目标，因此，减少了需检测的目标量，缩短了检测时间，从而提高了对预览图片处理的速率。

可选地，若检测出后置摄像头打开，则检测预览图片的前景目标以及对该预览图片的背景进行场景分类，此时，所述图片处理方法还包括：

步骤S104，若判断出前置摄像头没有打开而后置摄像头打开，则检测预览图片的前景目标，获得第二检测结果，所述第二检测结果用于指示所述预览图片中是否存在至少一个前景目标，以及在存在至少一个前景目标时用于指示各个前景目标的类别和各个前景目标在所述预览图片中的位置；

该步骤的检测方法与步骤S102的相同，此处不再赘述。

步骤S105，对所述预览图片进行场景分类，获得分类结果，所述分类结果用于指示是否识别出所述待处理图片的背景，以及在识别出所述待处理图片的背景时用于指示所述待处理图片的背景类别；

在本实施例中，对所述预览图片进行场景分类，即识别预览图片中当前的背景属于哪种场景，例如海滩场景、森林场景、雪地场景、草原场景、沙漠场景、蓝天场景等。

较佳的，可以采用训练后的场景分类模型对所述预览图片进行场景分类。示例性的，该场景分类模型可以为MobileNet等具有背景检测功能的模型。当然，也可以采用其他场景分类方式，例如通过前景检测模型检测出所述预览图片中的前景目标之后，将所述预览图片中的剩余部分作为背景，并通过图像识别算法识别出剩余部分的类别。

需要说明的是，本领域技术人员在本发明揭露的技术范围内，可容易想到的其他检测背景的方案也应在本发明的保护范围之内，在此不一一赘述。

以采用训练后的场景分类模型对预览图片中的背景进行检测为例说明场景分类模型的具体训练过程：

预先获取各个样本图片以及各个样本图片对应的分类结果；例如样本图片1为草地场景、样本图片2为雪地场景、样本图片3为海滩场景；

利用初始的场景分类模型对各个样本图片进行场景分类，并根据预先获取的各个样本图片的分类结果，计算该初始的场景分类模型的分类准确率，即是否识别出样本图片1为草地场景、样本图片2为雪地场景、样本图片3为海滩场景、样本图片4为沙漠场景；

若上述分类准确率小于预设的分类阈值(如75％，即识别出的样本图片小于3个)，则调整上述初始的场景分类模型的参数，再通过参数调整后的场景分类模型检测所述样本图片，直到调整后的场景分类模型的分类准确率大于或等于所述分类阈值，并将该场景分类模型作为训练后的场景分类模型。其中，调整参数的方法包括但不限于随机梯度下降算法、动力更新算法等。

步骤S106，根据所述第二检测结果和所述分类结果，对所述预览图片进行处理。

本实施例中，由于后置摄像头能够拍摄的图像内容更丰富，因此，根据预览图片的第二检测结果以及该预览图片的分类结果对整张预览图片进行处理，能够保证处理后的图像更逼真，更符合实际情况。另外，由于本实施例通过分别识别预览图片的前景目标和该预览图片的背景类别，因此，能够根据第二检测结果对预览图片的前景目标进行局部处理，以及，能够根据分类结果对预览图片的背景进行局部处理，从而避免由于采用统一参数直接对整张预览图片进行处理所导致的图像失真问题。

实施例二：

图2是本发明实施例二提供的一种图片处理方法的流程图，在图2中，步骤S201和步骤S202与实施例一的步骤S101和步骤S102相同，此处不再赘述。此外，为了描述的方便，本实施例省略了后置摄像头打开的图像处理过程。

步骤S201，检测前置摄像头是否打开；

步骤S202，若前置摄像头打开，检测预览图片的前景目标，获得第一检测结果，所述第一检测结果用于指示所述预览图片中是否存在至少一个前景目标，以及在存在至少一个前景目标时用于指示各个前景目标的类别和各个前景目标在所述预览图片中的位置；

步骤S203，根据各个前景目标在所述预览图片的位置确定所述预览图片的前景区域；

本实施例中，根据各个前景目标在预览图片的位置确定包括该各个前景目标的区域，由该各个前景目标的区域所组成的区域为预览图片的前景区域。

可选地，为了简化计算量，任取其中一个前景目标，假设为前景目标A，以预览图片左上角为坐标原点为例，确定任一个前景目标在预览图片最大行值的最左位置和最右位置，以及，确定，各个前景目标在预览图片最小行值的最左位置和最右位置，由确定的四个位置确定一个规则区域为该前景目标A的区域。对其余的前景目标执行相同的操作，分别得到各个前景目标组成的区域，由各个前景目标组成的区域为该预览图片的前景区域。

步骤S204，计算所述预览图片的前景区域与预览图片大小的比例，获得对应的比例值；

本实施例中，由于前景目标通常是不规则形状，因此，对应不规则形状的前景目标的区域也为不规则形状，而不规则形状包括的像素个数和通过逐个像素个数的叠加求和。因此，计算所述预览图片的前景区域与预览图片大小的比例可通过以下方式：分别计算各个前景目标在所述预览图片中的区域中的像素个数和，再计算各个前景目标在所述预览图片中的区域中的像素个数和求和，得到第一像素和；计算预览图片的所有像素个数，得到第二像素和；最后计算所述第一像素和与所述第二像素和的比例，得到对应的比例值。

可选地，若为了简化计算量而使得确定的各个前景目标在预览图片的区域为规则形状，则根据各个前景目标在浏览图片的区域的四个位置快速确定该各个前景目标在浏览图片的区域所包括的像素个数，例如，假设前景目标A在最上一行的最左位置为：(22,178)，最右位置为(22,378)，其中，22为最左位置、最右位置对应的行数，178为最左位置对应的列数，378为最右位置对应的列数，因此通过378-178＝200，确定该前景目标A在浏览图片的区域的宽为200。假设前景目标A在最下一行的最左位置为：(100,178)，最右位置为(301,378)，则通过301-100＝201，确定该前景目标A在浏览图片的区域的长为201，则通过201*200＝40200快速确定该前景目标A在浏览图片的区域包括的像素个数和为40200。

步骤S205，判断所述比例值是否大于或等于第一预设比例阈值。

其中，第一预设比例阈值大于50％。

步骤S206，若所述预览图片的前景区域与预览图片大小的比例值大于或等于第一预设比例阈值，根据所述第一检测结果对所述预览图片的各个前景目标进行处理。

本实施例中，若判断出预览图片的前景区域较大，则直接对预览图片的各个前景目标进行处理。例如，用户通常使用前置摄像头进行自拍，当用户自拍时，用户的关注点主要在人脸的美化，因此，当判断出前置摄像头打开后，若进一步判断出前景区域与浏览图片的比例值大于所述第一预设比例阈值(在自拍的过程中，人脸(即前景目标)占了预览图片的较大区域)，则直接对人脸进行处理既能够满足用户对人脸进行美化的需求，又能减少图片的数据处理量。

可选地，所述图片处理方法还包括：

步骤S207，若所述预览图片的前景区域与预览图片大小的比例值小于所述第一预设比例阈值，判断所述比例值是否大于或等于第二预设比例阈值，若大于或等于第二预设比例阈值，根据所述预览图片的前景区域确定所述预览图片的背景区域；

本实施例中，采用整张预览图片的区域与该预览图片的前景区域相减，能够快速得到该预览图片的背景区域。

步骤S208，根据所述第一检测结果对所述预览图片的前景区域和背景区域进行处理。

本实施例中，由于能够在确定预览图片的前景区域之后能够快速确定该预览图片的背景区域，因此，极大提高了对预览图片的前景区域和背景区域进行处理的处理速度。

可选地，在所述步骤S207之后，包括：

根据所述预览图片的背景区域中的像素值预估所述预览图片的背景类别；对应地，所述步骤S103根据所述第一检测结果对所述预览图片进行处理具体为：根据所述第一检测结果以及预估的所述预览图片的背景类别对所述预览图片进行处理。

本实施例中，获取预览图片的背景区域的各个像素值，根据统计的各个像素值计算该预览图片的背景区域的平均像素值，再根据该预览图片的背景区域的平均像素值预估该预览图片的背景对应的背景类别。例如，假设预览图片的背景区域的平均像素值对应的颜色是绿色，则预估该预览图片的背景对应的背景类别为草地场景或森林场景。假设预览图片的背景区域的平均像素值对应的颜色是黑色，则预估该预览图片的背景对应的背景类别为夜景场景。

在本实施例中，根据各个前景目标的类别选择对应的图片处理模式，再根据选择的图片处理模式对所述预览图片的前景目标进行处理；根据所述预估的所述预览图片的背景类别选择对应的图片处理模式，再根据选择的图片处理模式对预览图片的背景进行处理，最后得到前景目标以及背景都分别处理后的图片。此外，由于预览图片的背景类别是预估的，因此，相对于直接采用分类模型确定预览图片的背景类别，本申请实施例提供的图片处理方法能够有效的提高图片处理速率。

可选地，所述图片处理方法还包括：

步骤S209，若所述预览图片的前景区域与预览图片大小的比例值小于第二预设比例阈值，对所述预览图片进行场景分类，获得分类结果，所述分类结果用于指示是否识别出所述预览图片的背景，以及在识别出所述预览图片的背景时用于指示所述预览图片的背景类别；

其中，对预览图片进行场景分类的方法与实施例一的步骤S105相同，此处不再赘述。

步骤S210，根据所述第一检测结果以及所述分类结果对所述预览图片进行处理。

其中，根据所述第一检测结果以及所述分类结果对所述预览图片进行处理的方法与实施例一的步骤S106类似，此处不再赘述。

实施例三：

图3是本发明实施例三提供的一种图片处理方法的流程图，在图3中，步骤S301与实施例一的步骤S101相同，此处不再赘述。

步骤S301，检测前置摄像头是否打开；

步骤S302，若前置摄像头打开，判断当前帧的预览图片是否为预览画面的第一帧图片，若所述当前帧的预览图片为预览画面的第一帧图片时，检测所述当前帧的预览图片的前景目标，获得第一检测结果，所述第一检测结果用于指示所述当前帧的预览图片中是否存在至少一个前景目标，以及在存在至少一个前景目标时用于指示各个前景目标的类别和各个前景目标在所述预览图片中的位置。

当前置摄像头打开，在终端设备的预览画面将显示对应的图片。在终端设备移动的过程中，预览画面显示的图片组成对应的视频流。

本实施例中，将用户打开前置摄像头后显示在预览画面的视频流的第一帧图片判定为预览画面的第一帧图片。

其中，获得第一检测结果的方法与实施例一的相同，此处不再赘述。

步骤S303，根据所述第一检测结果对所述当前帧的预览图片进行处理。

可选地，若在步骤S303之前还包括：

根据各个前景目标在所述预览图片的位置确定所述预览图片的前景区域；计算所述预览图片的前景区域与预览图片大小的比例，获得对应的比例值；判断所述比例值是否大于或等于第一预设比例阈值，若大于或等于第一预设比例阈值，则所述步骤S303具体为：

根据所述第一检测结果对所述预览图片的各个前景目标进行处理。

步骤S304，若所述当前帧的预览图片不是预览画面的第一帧图片，判断所述当前帧的预览图片与上一帧图片的相似度是否大于或等于预设的相似度阈值，若大于或等于预设的相似度阈值，采用与上一帧图片相同的处理方式对所述当前帧的预览图片进行处理。

本实施例中，由于在判断出当前帧的预览图片与上一帧图片的相似度大于或等于预设的相似度阈值时，表明该当前帧的预览图片的前景目标(或者，前景目标和背景类别)都与上一帧图片的前景目标(或者，前景目标和背景类别)差异较小，此时，直接采用与上一帧图片相同的处理方式对所述当前帧的预览图片进行处理能够极大减少数据运算量，从而提高图片的处理速率。

可选地，所述图片处理方法还包括：

若所述当前帧的预览图片与上一帧图片的相似度小于所述预设的相似度阈值，检测所述当前帧的预览图片的前景目标，获得第一检测结果，所述第一检测结果用于指示所述预览图片中是否存在至少一个前景目标，以及在存在至少一个前景目标时用于指示各个前景目标的类别和各个前景目标在所述预览图片中的位置。

本申请实施例中，当判断出当前帧的预览图片小于预设的相似度阈值时，检测该当前帧的预览图片的前景目标，获得第一检测结果，之后，再根据第一检测结果对该当前帧的预览图片进行处理。

需要指出的是，上述对前置摄像头对应的视频流的处理方式同样适用于对后置摄像头对应的视频流的处理。例如，针对前置摄像头没有打开而后置摄像头打开的情况，实施例一的步骤S104具体为，若判断出前置摄像头没有打开而后置摄像头打开，则判断预览图片是否为预览画面的第一帧图片，若是，检测所述预览图片的前景目标，获得第一检测结果。其他步骤与本实施例类似，此处不再赘述。

应理解，上述实施例中各步骤的序号的大小并不意味着执行顺序的先后，各过程的执行顺序应以其功能和内在逻辑确定，而不应对本申请实施例的实施过程构成任何限定。

实施例四：

图4示出了本申请实施例四提供的一种图像处理装置的结构示意图，为了便于说明，仅示出了与本申请实施例相关的部分。

该图像处理装置包括：前置摄像头是否打开检测模块41、检测结果获得模块42、第一图片处理模块43、后置预览图片前景处理模块44、后置预览图片背景处理模块45、第二图片处理模块46。其中：

前置摄像头是否打开检测模块41，用于检测前置摄像头是否打开；

检测结果获得模块42，用于若前置摄像头打开，检测预览图片的前景目标，获得第一检测结果，所述第一检测结果用于指示所述预览图片中是否至少一个，以及在存在至少一个前景目标时用于指示各个前景目标的类别和各个前景目标在所述预览图片中的位置；

其中，预览图片是指从终端设备的预览画面提取的图片。

第一图片处理模块43，用于根据所述第一检测结果对所述预览图片进行处理。

具体地，根据各个前景目标的类别选择对应的图片处理模式，再根据选择的图片处理模式对预览图片执行相应的处理。

后置预览图片前景处理模块44，用于若判断出前置摄像头没有打开而后置摄像头打开，则检测预览图片的前景目标，获得第一检测结果，所述第一检测结果用于指示所述预览图片中是否存在至少一个前景目标，以及在存在至少一个前景目标时用于指示各个前景目标的类别和各个前景目标在所述预览图片中的位置；

后置预览图片背景处理模块45，用于对所述预览图片进行场景分类，获得分类结果，所述分类结果用于指示是否识别出所述待处理图片的背景，以及在识别出所述待处理图片的背景时用于指示所述待处理图片的背景类别；

第二图片处理模块46，用于根据所述第一检测结果和所述分类结果，对所述预览图片进行处理。

本申请实施例中，若检测出前置摄像头打开，则检测预览图片的前景目标，获得第一检测结果，再根据该第一检测结果对预览图片进行处理。由于在前置摄像头打开时只检测预览图片的前景目标而不是检测整张预览图片的目标，因此，减少了需检测的目标量，缩短了检测时间，从而提高了对预览图片处理的速率。

实施例五：

图5示出了本申请实施例五提供的一种图像处理装置的结构示意图，为了便于说明，仅示出了与本申请实施例相关的部分。

该图像处理装置包括：前置摄像头是否打开检测模块41、检测结果获得模块42、第一图片处理模块43、后置预览图片前景处理模块44、后置预览图片背景处理模块45、第二图片处理模块46、前景区域确定模块47、比例值计算模块48以及比例值比较模块49。

其中，前置摄像头是否打开检测模块41、检测结果获得模块42、后置预览图片前景处理模块44、后置预览图片背景处理模块45、第二图片处理模块46与实施例四的相同，此处不再赘述。

前景区域确定模块47，用于根据各个前景目标在所述预览图片的位置确定所述预览图片的前景区域；

比例值计算模块48，用于计算所述预览图片的前景区域与预览图片大小的比例，获得对应的比例值；

第一比例值比较模块49，用于判断所述比例值是否大于或等于第一预设比例阈值。

此时，所述第一图片处理模块43具体用于若所述预览图片的前景区域与预览图片大小的比例值大于或等于第一预设比例阈值，根据所述第一检测结果对所述预览图片的各个前景目标进行处理。

可选地，所述图片处理装置还包括：

第二比例值比较模块，用于若所述预览图片的前景区域与预览图片大小的比例值小于所述第一预设比例阈值，判断所述比例值是否大于或等于第二预设比例阈值，若大于或等于第二预设比例阈值，根据所述预览图片的前景区域确定所述预览图片的背景区域；

此时，所述第一图片处理模块43具体用于据所述第一检测结果对所述预览图片的前景区域和背景区域进行处理。

可选地，所述图片处理装置还包括：

背景类别预估模块，用于根据所述预览图片的背景区域中的像素值预估所述预览图片的背景类别；

此时，所述第一图片处理模块43具体用于根据所述第一检测结果以及预估的所述预览图片的背景类别对所述预览图片进行处理。

可选地，所述图片处理装置还包括：

分类结果获取模块，用于若所述预览图片的前景区域与预览图片大小的比例值小于第二预设比例阈值，对所述预览图片进行场景分类，获得分类结果，所述分类结果用于指示是否识别出所述预览图片的背景，以及在识别出所述预览图片的背景时用于指示所述预览图片的背景类别；

此时，所述第一图片处理模块43具体用于根据所述第一检测结果以及所述分类结果对所述预览图片进行处理。

可选地，所述检测结果获得模块42具体用于：若前置摄像头打开，判断当前帧的预览图片是否为预览画面的第一帧图片，若所述当前帧的预览图片为预览画面的第一帧图片，检测预览图片的前景目标，获得第一检测结果，所述第一检测结果用于指示所述当前帧的预览图片中是否存在至少一个前景目标，以及在存在至少一个前景目标时用于指示各个前景目标的类别和各个前景目标在所述当前帧的预览图片中的位置。

可选地，所述图片处理装置还包括：

相邻帧的相似度比较模块，用于若所述当前帧的预览图片不是预览画面的第一帧图片，判断所述当前帧的预览图片与上一帧图片的相似度是否大于或等于预设的相似度阈值，若大于或等于预设的相似度阈值，采用与上一帧图片相同的处理方式对所述当前帧的预览图片进行处理。

可选地，所述图片处理装置还包括：

相邻非相似帧处理模块，用于若小于预设的相似度阈值，检测所述预览图片的前景目标，获得第一检测结果，所述第一检测结果用于指示所述预览图片中是否存在至少一个前景目标，以及在存在至少一个前景目标时用于指示各个前景目标的类别和各个前景目标在所述预览图片中的位置。

实施例六：

图6是本申请实施例六提供的终端设备的示意图。如图6所示，该实施例的终端设备6包括：处理器60、存储器61以及存储在所述存储器61中并可在所述处理器60上运行的计算机程序62。所述处理器60执行所述计算机程序62时实现上述各个图像处理方法实施例中的步骤，例如图1所示的步骤S101至S103。或者，所述处理器60执行所述计算机程序62时实现上述各装置实施例中各模块/单元的功能，例如图4所示模块41至43的功能。

示例性的，所述计算机程序62可以被分割成一个或多个模块/单元，所述一个或者多个模块/单元被存储在所述存储器61中，并由所述处理器60执行，以完成本申请。所述一个或多个模块/单元可以是能够完成特定功能的一系列计算机程序指令段，该指令段用于描述所述计算机程序62在所述终端设备6中的执行过程。例如，所述计算机程序62可以被分割成前置摄像头是否打开检测模块、检测结果获得模块、第一图片处理模块、后置预览图片背景处理模块、第二图片处理模块，各单元具体功能如下：

前置摄像头是否打开检测模块，用于检测前置摄像头是否打开；

检测结果获得模块，用于若前置摄像头打开，检测预览图片的前景目标，获得第一检测结果，所述第一检测结果用于指示所述预览图片中是否存在至少一个前景目标，以及在存在至少一个景目标时用于指示各个前景目标的类别和各个前景目标在所述预览图片中的位置；

第一图片处理模块，用于根据所述第一检测结果对所述预览图片进行处理；

后置预览图片前景处理模块，用于若判断出前置摄像头没有打开而后置摄像头打开，则检测预览图片的前景目标，获得第二检测结果，所述第二检测结果用于指示所述预览图片中是否存在至少一个前景目标，以及在存在至少一个前景目标时用于指示各个前景目标的类别和各个前景目标在所述预览图片中的位置；

后置预览图片背景处理模块，用于对所述预览图片进行场景分类，获得分类结果，所述分类结果用于指示是否识别出所述待处理图片的背景，以及在识别出所述待处理图片的背景时用于指示所述待处理图片的背景类别；

第二图片处理模块，用于根据所述第二检测结果和所述分类结果，对所述预览图片进行处理。

所述终端设备6可以是桌上型计算机、笔记本、掌上电脑及云端服务器等计算设备。所述终端设备可包括，但不仅限于，处理器60、存储器61。本领域技术人员可以理解，图6仅仅是终端设备6的示例，并不构成对终端设备6的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件，例如所述终端设备还可以包括输入输出设备、网络接入设备、总线等。

所称处理器60可以是中央处理单元(Central Processing Unit，CPU)，还可以是其他通用处理器、数字信号处理器(Digital Signal Processor，DSP)、专用集成电路(Application Specific Integrated Circuit，ASIC)、现成可编程门阵列(Field-Programmable Gate Array，FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。

所述存储器61可以是所述终端设备6的内部存储单元，例如终端设备6的硬盘或内存。所述存储器61也可以是所述终端设备6的外部存储设备，例如所述终端设备6上配备的插接式硬盘，智能存储卡(Smart Media Card,SMC)，安全数字(Secure Digital,SD)卡，闪存卡(Flash Card)等。进一步地，所述存储器61还可以既包括所述终端设备6的内部存储单元也包括外部存储设备。所述存储器61用于存储所述计算机程序以及所述终端设备所需的其他程序和数据。所述存储器61还可以用于暂时地存储已经输出或者将要输出的数据。

所属领域的技术人员可以清楚地了解到，为了描述的方便和简洁，仅以上述各功能单元、模块的划分进行举例说明，实际应用中，可以根据需要而将上述功能分配由不同的功能单元、模块完成，即将所述装置的内部结构划分成不同的功能单元或模块，以完成以上描述的全部或者部分功能。实施例中的各功能单元、模块可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中，上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。另外，各功能单元、模块的具体名称也只是为了便于相互区分，并不用于限制本申请的保护范围。上述系统中单元、模块的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。

在上述实施例中，对各个实施例的描述都各有侧重，某个实施例中没有详述或记载的部分，可以参见其它实施例的相关描述。

本领域普通技术人员可以意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本申请的范围。

在本申请所提供的实施例中，应该理解到，所揭露的装置/终端设备和方法，可以通过其它的方式实现。例如，以上所描述的装置/终端设备实施例仅仅是示意性的，例如，所述模块或单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通讯连接可以是通过一些接口，装置或单元的间接耦合或通讯连接，可以是电性，机械或其它的形式。

所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。

另外，在本申请各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。

所述集成的模块/单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本申请实现上述实施例方法中的全部或部分流程，也可以通过计算机程序来指令相关的硬件来完成，所述的计算机程序可存储于一计算机可读存储介质中，该计算机程序在被处理器执行时，可实现上述各个方法实施例的步骤。其中，所述计算机程序包括计算机程序代码，所述计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。所述计算机可读介质可以包括：能够携带所述计算机程序代码的任何实体或装置、记录介质、U盘、移动硬盘、磁碟、光盘、计算机存储器、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、电载波信号、电信信号以及软件分发介质等。需要说明的是，所述计算机可读介质包含的内容可以根据司法管辖区内立法和专利实践的要求进行适当的增减，例如在某些司法管辖区，根据立法和专利实践，计算机可读介质不包括电载波信号和电信信号。

以上所述实施例仅用以说明本申请的技术方案，而非对其限制；尽管参照前述实施例对本申请进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本申请各实施例技术方案的精神和范围，均应包含在本申请的保护范围之内。

Claims (10)

1.一种图片处理方法，其特征在于，包括：

检测前置摄像头是否打开；

若前置摄像头打开，检测预览图片的前景目标，获得第一检测结果，所述第一检测结果用于指示所述预览图片中是否存在至少一个前景目标，以及在存在至少一个前景目标时用于指示各个前景目标的类别和各个前景目标在所述预览图片中的位置；

根据所述第一检测结果对所述预览图片进行处理；

若判断出前置摄像头没有打开而后置摄像头打开，则检测预览图片的前景目标，获得第二检测结果，所述第二检测结果用于指示所述预览图片中是否存在至少一个前景目标，以及在存在至少一个前景目标时用于指示各个前景目标的类别和各个前景目标在所述预览图片中的位置；

对所述预览图片进行场景分类，获得分类结果，所述分类结果用于指示是否识别出所述待处理图片的背景，以及在识别出所述待处理图片的背景时用于指示所述待处理图片的背景类别；

根据所述第二检测结果和所述分类结果，对所述预览图片进行处理。

2.如权利要求1所述的图片处理方法，其特征在于，在所述根据所述第一检测结果对所述预览图片进行处理之前，包括：

根据各个前景目标在所述预览图片的位置确定所述预览图片的前景区域；

计算所述预览图片的前景区域与预览图片大小的比例，获得对应的比例值；判断所述比例值是否大于或等于第一预设比例阈值，以便在大于或等于第一预设比例阈值时，根据所述第一检测结果对所述预览图片的各个前景目标进行处理。

3.如权利要求2所述的图片处理方法，其特征在于，所述图片处理方法还包括：

若所述预览图片的前景区域与预览图片大小的比例值小于所述第一预设比例阈值，判断所述比例值是否大于或等于第二预设比例阈值，若大于或等于第二预设比例阈值，根据所述预览图片的前景区域确定所述预览图片的背景区域；

根据所述第一检测结果对所述预览图片的前景区域和背景区域进行处理。

4.如权利要求3所述的图片处理方法，其特征在于，所述图片处理方法还包括：

若所述预览图片的前景区域与预览图片大小的比例值小于第二预设比例阈值，对所述预览图片进行场景分类，获得分类结果，所述分类结果用于指示是否识别出所述预览图片的背景，以及在识别出所述预览图片的背景时用于指示所述预览图片的背景类别；

根据所述第一检测结果以及所述分类结果对所述预览图片进行处理。

5.如权利要求3所述的图片处理方法，其特征在于，在所述根据所述预览图片的前景区域确定所述预览图片的背景区域之后，包括：

根据所述预览图片的背景区域中的像素值预估所述预览图片的背景类别；

对应地，所述根据所述第一检测结果对所述预览图片进行处理具体为：

根据所述第一检测结果以及预估的所述预览图片的背景类别对所述预览图片进行处理。

6.如权利要求1或2所述的图片处理方法，其特征在于，所述图片处理方法还包括：

判断当前帧的预览图片是否为预览画面的第一帧图片，若所述当前帧的预览图片不是预览画面的第一帧图片，判断所述当前帧的预览图片与上一帧图片的相似度是否大于或等于预设的相似度阈值，若大于或等于预设的相似度阈值，采用与上一帧图片相同的处理方式对所述当前帧的预览图片进行处理。

7.如权利要求6所述的图片处理方法，其特征在于，所述图片处理方法还包括：

若所述当前帧的预览图片与上一帧图片的相似度小于所述预设的相似度阈值，则检测所述预览图片的前景目标。

8.一种图片处理装置，其特征在于，包括：

前置摄像头是否打开检测模块，用于检测前置摄像头是否打开；

检测结果获得模块，用于若前置摄像头打开，检测预览图片的前景目标，获得第一检测结果，所述第一检测结果用于指示所述预览图片中是否存在至少一个前景目标，以及在存在至少一个景目标时用于指示各个前景目标的类别和各个前景目标在所述预览图片中的位置；

第一图片处理模块，用于根据所述第一检测结果对所述预览图片进行处理；

后置预览图片前景处理模块，用于若判断出前置摄像头没有打开而后置摄像头打开，则检测预览图片的前景目标，获得第二检测结果，所述第二检测结果用于指示所述预览图片中是否存在至少一个前景目标，以及在存在至少一个前景目标时用于指示各个前景目标的类别和各个前景目标在所述预览图片中的位置；

后置预览图片背景处理模块，用于对所述预览图片进行场景分类，获得分类结果，所述分类结果用于指示是否识别出所述待处理图片的背景，以及在识别出所述待处理图片的背景时用于指示所述待处理图片的背景类别；

第二图片处理模块，用于根据所述第二检测结果和所述分类结果，对所述预览图片进行处理。

9.一种终端设备，包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现如权利要求1至7任一项所述方法的步骤。

10.一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1至7任一项所述方法的步骤。