CN109712177B - 图像处理方法、装置、电子设备和计算机可读存储介质 - Google Patents

Abstract

本申请涉及一种图像处理方法、装置、电子设备和计算机可读存储介质。上述方法包括：获取待处理图像中被拍摄物体的深度信息，根据深度信息对待处理图像进行景别分类，得到待处理图像的景别标签，查找与景别标签对应的目标处理模式，根据目标处理模式对待处理图像进行处理。由于可以根据图像中被拍摄物体的深度信息对图像进行分类，对不同类别的图像采集不同的处理模式进行处理，可以提高图像处理的准确性。

Description

图像处理方法、装置、电子设备和计算机可读存储介质

技术领域

本申请涉及影像技术领域，特别是涉及一种图像处理方法、装置、电子设备和计算机可读存储介质。

背景技术

随着影像技术的发展，图像处理方式越来越丰富。例如，电子设备可以对图像进行局部虚化处理，从而得到具有大光圈效果的图像；还可以在检测到图像中存在人像时，对人像进行美颜处理等。然而，传统技术中电子设备对图像的处理往往都是相同的，存在图像处理准确性低的问题。

发明内容

本申请实施例提供一种图像处理方法、装置、电子设备、计算机可读存储介质，可以提高图像处理的准确性。

一种图像处理方法，包括：

获取待处理图像中被拍摄物体的深度信息；

根据所述深度信息对所述待处理图像进行景别分类，得到所述待处理图像的景别标签；

查找与所述景别标签对应的目标处理模式；

根据所述目标处理模式对所述待处理图像进行处理。

一种图像处理装置，包括：

获取模块，用于获取待处理图像中被拍摄物体的深度信息；

分类模块，用于根据所述深度信息对所述待处理图像进行景别分类，得到所述待处理图像的景别标签；

查找模块，用于查找与所述景别标签对应的目标处理模式；

处理模块，用于根据所述目标处理模式对所述待处理图像进行处理。

一种电子设备，包括存储器及处理器，所述存储器中储存有计算机程序，所述计算机程序被所述处理器执行时，使得所述处理器执行如下步骤：

获取待处理图像中被拍摄物体的深度信息；

根据所述深度信息对所述待处理图像进行景别分类，得到所述待处理图像的景别标签；

查找与所述景别标签对应的目标处理模式；

根据所述目标处理模式对所述待处理图像进行处理。

一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现如下步骤：

获取待处理图像中被拍摄物体的深度信息；

根据所述深度信息对所述待处理图像进行景别分类，得到所述待处理图像的景别标签；

查找与所述景别标签对应的目标处理模式；

根据所述目标处理模式对所述待处理图像进行处理。

上述图像处理方法、装置、电子设备和计算机可读存储介质，可以获取待处理图像中被拍摄物体的深度信息，根据深度信息对待处理图像进行景别分类，得到待处理图像的景别标签，查找与景别标签对应的目标处理模式，根据目标处理模式对待处理图像进行处理。由于可以根据图像被拍摄物体的深度信息对图像进行分类，对不同类别的图像采用不同的处理模式进行处理，可以提高图像处理的准确性。

附图说明

为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为一个实施例中图像处理方法的应用环境示意图；

图2为一个实施例中图像处理方法的流程图；

图3为一个实施例中进行景别分类的流程图；

图4为一个实施例中根据目标处理模式对待处理图像进行处理的流程图；

图5为一个实施例中对待处理图像进行第三色彩处理的流程图；

图6为一个实施例中获取待处理图像中被拍摄物体的深度信息的流程图；

图7为一个实施例的图像处理装置的结构框图；

图8为一个实施例中电子设备的内部结构示意图；

图9为一个实施例中图像处理电路的示意图。

具体实施方式

为了使本申请的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本申请进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本申请，并不用于限定本申请。

可以理解，本申请所使用的术语“第一”、“第二”等可在本文中用于描述各种元件，但这些元件不受这些术语限制。这些术语仅用于将第一个元件与另一个元件区分。举例来说，在不脱离本申请的范围的情况下，可以将第一区域称为第二区域，且类似地，可将第二区域称为第一区域。第一区域和第二区域两者都是区域，但其不是同一区域。

图1为一个实施例中图像处理方法的应用环境示意图。如图1所示，该应用环境包括电子设备110。电子设备110可以获取待处理图像中被拍摄物体的深度信息，根据深度信息对待处理图像进行景别分类，得到待处理图像的景别标签，查找与景别标签对应的目标处理模式，根据目标处理模式对待处理图像进行处理。可以理解的是，上述电子设备110可以不限于是各种手机、电脑、可携带设备等。

图2为一个实施例中图像处理方法的流程图。本实施例中的图像处理方法，以运行于图1中的电子设备上为例进行描述。如图2所示，图像处理方法包括步骤202至步骤208。其中：

步骤202，获取待处理图像中被拍摄物体的深度信息。

待处理图像可以是包含被拍摄物体的彩色信息和深度信息的图像。深度信息为摄像头与拍摄场景中被拍摄物体之间的距离信息。具体地，电子设备可以通过彩色摄像头与深度摄像头分别采集彩色图像和深度图像，基于彩色图像和深度图像中包含的深度信息得到该待处理图像。待处理图像可以是电子设备实时采集的图像，也可以是存储在电子设备中的包含深度信息的图像，还可以是电子设备从网络下载的包含深度信息的图像等，在此不做限定。待处理图像也可以是只包含被拍摄物体的彩色信息的图像，进而电子设备可以在需要获取被拍摄物体的深度信息时，先获取与待处理图像对应的深度图像，将该深度图像中包含的深度信息作为待处理图像被拍摄物体的深度信息。

步骤204，根据深度信息对待处理图像进行景别分类，得到待处理图像的景别标签。

景别是指由于摄像头与被拍摄物体的距离不同，而造成被拍摄物体在图像中呈现出的范围大小的区别。景别标签可以包括远景、中景、近景、特写等，不限于此。电子设备可以根据待处理图像中被拍摄物体的深度信息对待处理图像进行景别分类，具体地，电子设备可以预设不同景别标签对应的深度信息范围以及图像中属于该深度信息范围的像素点个数或者区域面积，从而根据待处理图像中被拍摄物体的深度信息确定对应的景别标签。例如，电子设备可以预设远景标签对应的图像中各像素点的深度信息均大于20米，中景标签对应的图像中像素点的深度信息大于10米且小于或等于20米的像素点个数为图像像素点个数的50％以上、且小于或等于10米的像素点个数不超过图像像素点个数的10％，近景标签对应的图像中深度信息小于或等于10米的区域的面积超过图像总面积的70％等，不限于此。电子设备根据实际应用需求划分不同景别标签对应深度信息范围，以及各深度信息范围在图像中的分布情况。

步骤206，查找与景别标签对应的目标处理模式。

处理模式可以包括对比度调节、饱和度调节、亮度调节、色调调节或白平衡调节、虚化处理等处理方式中的一种或多种。电子设备可以为不同景别标签预设不同的处理模式，进而当根据待处理图像中被拍摄物体的深度信息确定待处理图像的景别标签时，可以根据该景别标签获取对应的目标处理模式。例如，当景别标签为远景标签时，对应的处理模式可以是提高饱和度、调整白平衡；当景别标签为近景标签时，对应的处理模式可以是虚化背景区域、提高前景区域亮度；当景别标签为特写标签时，对应的处理模式可以是提高局部饱和度、调整色调和亮度等，不限于此；若电子设备基于待处理图像中被拍摄物体的深度信息确定待处理图像的景别标签为近景标签时，则对应的目标处理模式为虚化背景区域、提高前景区域亮度的处理。

电子设备预设的景别标签对应的处理模式中还可以包括指定的处理区域、不同处理区域的处理方式、处理方式对应的处理参数等。其中，处理区域可以是待处理图像包含的全部区域、也可以是待处理图像中被拍摄的目标物体的区域，还可以是根据待处理图像的色彩、深度信息等划分的区域，不限于此。

步骤208，根据目标处理模式对待处理图像进行处理。

电子设备根据目标处理模式对待处理图像进行处理，具体地，电子设备可以获取目标处理模式中指定的处理区域，该处理区域对应的处理方式及对应的处理参数，进而根据该处理方式对应的处理参数对处理区域进行处理。在一个实施例中，电子设备还可以根据待处理图像包含的彩色信息调整目标处理模式中各个处理方式对应的处理参数，进而根据调整后的处理参数对待处理图像进行处理。例如，当目标处理模式为提高人像区域的饱和度，对应的处理参数为将饱和度提高10％时，若电子设备根据待处理图像的彩色信息判定人像区域的饱和度低于图像中背景区域的饱和度时，则可以将饱和度的处理参数调整为15％，进而根据调整后的处理参数对待处理图像中的人像区域进行处理。

在一个实施例中，电子设备还可以在根据目标处理模式对应待处理图像进行处理后，在图像展示界面展示图像预览效果的同时，提供各个处理方式对应的参数滑动条。具体地，电子设备可以获取用户对待处理图像中不同区域的触发指令，根据该触发指令展示对应的区域的处理参数滑动条，进而可以进一步根据用户选中的处理参数对图像进行处理。

本申请实施例提供的图像处理方法，通过获取待处理图像中被拍摄物体的深度信息，根据深度信息对待处理图像进行景别分类，得到待处理图像的景别标签，查找与景别标签对应的目标处理模式，根据目标处理模式对待处理图像进行处理。由于可以根据图像中被拍摄的深度信息对图像进行分类，对不同类别的图像采集不同的处理模式进行处理，可以提高图像处理的准确性。

图3为一个实施例中进行景别分类的流程图。如图3所示，在一个实施例中，提供的图像处理方法中根据深度信息对待处理图像进行景别分类，得到待处理图像的景别标签的过程，包括：

步骤302，获取待处理图像中被拍摄物体的彩色信息。

彩色信息是电子设备通过彩色摄像头或其他可采集图像彩色信息的摄像头对被拍摄物体进行拍摄得到的。待处理图像是由多个像素点组成的图像。电子设备可以获取待处理图像中各个像素点的彩色信息。

步骤304，基于彩色信息检测待处理图像中包含目标物体的第一区域。

目标物体是指拍摄场景中包含的拍摄主体。例如，目标物体可以是人、动物、建筑物等。电子设备可以根据待处理图像的彩色信息获取图像特征信息，将图像特征信息与预存物体对应的特征信息进行匹配，获取匹配成功的特征信息对应的预存物体即为待处理图像中的目标物体，电子设备可以获取待处理图像中目标物体所在的第一区域。电子设备也可以根据彩色信息对待处理图像进行目标识别，具体地，可以根据VGG(Visual GeometryGroup)、CNN(Convolutional Neural Network)、SSD(single shot multibox detector)、决策树(Decision Tree)等深度学习算法训练目标检测模型，根据目标检测模型识别待处理图像中包含的目标物体及对应的第一区域。电子设备识别待处理图像的目标物体后，还可以通过目标追踪算法进行目标追踪，实时更新待处理图像中的第一区域。

步骤306，根据第一区域对应的深度信息对待处理图像进行景别分类，得到待处理图像的景别标签。

电子设备根据第一区域对应的深度信息对待处理图像进行景别分类，即根据目标物体的深度信息进行景别分类。例如，当目标物体的深度信息大于远景标签对应的深度信息阈值时，则判定该待处理图像的景别标签为远景标签。通常，人们通过摄像头对目标物体进行拍摄时，会拉近目标物体与摄像头之间的距离，提高目标物体在图像中的占比，突出图像中的目标物体。

电子设备根据目标物体的深度信息进行对待处理图像景别分类，可以避免图像中存在非目标物体的深度信息对景别分类的准确度造成影响，例如，可以避免在雪景中拍摄人像时，由于镜头前的雪花的深度信息而导致电子设备判定该拍摄的图像为近景图像，而根据人像的深度信息来对拍摄的图像进行景别分类，可以提高景别分类的准确性。

在一个实施例中，提供的图像处理方法中根据第一区域对应的深度信息进行景别分类，得到待处理图像的景别标签的过程，包括：当第一区域包含的深度信息小于或等于深度阈值时，则判定待处理图像的景别标签为第一类标签；当第一区域包含的深度信息超过深度阈值时，则判定待处理图像的景别标签为第二类标签。

第一类标签为对应的目标处理模式中包含至少两组处理系数的景别标签；第二类标签为对应的目标处理模式中包含一组处理系数的景别标签。第一类标签为目标处理模式中包含至少两组处理系数的景别标签，也就是说根据目标处理模式可以对待处理图像进行至少两种处理。具体地，第一类标签可以包括特写标签、近景标签、中景标签等；第二类标签可以包括远景标签等。景别划分还可以根据实际应用需求进行细化，例如，远景标签与中景标签之间还可以包括全景标签，电子设备可以实际需求将全景标签归为第一类标签或第二类标签。深度阈值可以根据实际应用需求进行设定。具体地，深度阈值为界定被拍摄的物体是否为远景的深度信息。例如，深度阈值可以是10米、15米、22米、28米等，不限于此。电子设备可以在第一区域包含的深度信息小于或等于深度阈值时，则判定待处理图像的景别标签为第一类标签，当第一区域包含的深度信息超过深度阈值时，则判定待处理图像的景别标签为第二类标签。

在一个实施例中，该图像处理方法中查找与景别标签对应的目标处理模式的过程包括：当景别标签为第一类标签时，查找与第一类标签对应的第一处理模式，其中，第一处理模式包含第一处理系数和第二处理系数；当景别标签为第二类标签时，查找与第二类标签对应的第二处理模式，其中，第二处理模式包含第三处理系数。

图4为一个实施例中根据目标处理模式对待处理图像进行处理的流程图。如图4所示，在一个实施例中，提供的图像处理方法中，当景别标签为第一类标签时，根据目标处理模式对待处理图像进行处理的过程，包括：

步骤402，根据第一处理系数对第一区域进行第一色彩处理。

第一类标签对应的目标处理模式中包含第一处理系数和第二处理系数。处理模式中可以指定第一处理系数对应的待处理图像中对应的处理区域，及第二处理系数对应的处理区域。在本申请实施例中，以第一处理系数对应的待处理图像中的第一区域为例进行说明。电子设备可以根据第一处理系数对第一区域进行第一色彩处理。其中，第一色彩处理可以是提高饱和度、提高亮度等可用于突出目标物体的处理。当目标物体为人脸时，第一色彩处理还可以是第一区域进行美白、磨皮等处理。

步骤404，获取待处理图像中除第一区域之外的第二区域。

第二区域可以理解为待处理图像中的背景区域。电子设备可以获取待处理图像中除第一区域之外的第二区域。

步骤406，根据第二处理系数及第二区域包含的深度信息对第二区域进行第二色彩处理。

电子设备根据第二处理系数及第二区域包含的深度信息对第二区域进行第二色彩处理。其中，第二处理系数可以是降低对比度、调整白平衡、色温调整等可以弱化或虚化背景场景、或对背景色彩进行调整的处理等，不限于此。具体地，电子设备可以根据第二区域中深度信息的不同调整第二色彩处理的处理效果。例如，当第二处理系数为对第二区域进行虚化处理的系数时，电子设备可以根据深度信息从小到大逐渐增加虚化处理的强度。

通过在待处理图像的景别标签为第一类景别标签时，根据第一处理系数对第一区域进行第一色彩处理，根据第二处理系数对除第一区域之外的第二区域进行第二色彩处理，可以优化图像处理效果，提高图像处理的准确性。

在一个实施例中，当待处理图像的景别标签为第二类标签时，该方法中根据目标处理模式对待处理图像进行处理的过程包括：获取待处理图像中色彩值在预设色彩区间的像素点组成的连通区域；根据第三处理系数对各个连通区域进行第三色彩处理。

连通区域是指待处理图像中色彩值在预设色彩区域的像素点所形成的连续区域。像素点的色彩值可以采用RGB(Red、Green、Blue，红、绿、蓝)色彩空间来确定，也可以采用HSB(hue、saturation、brightness，色相、饱和度、明度)色彩空间确定，还可以采用HSL(hue、saturation、lightness，色相、饱和度、亮度)色彩空间来确定等。预设色彩区间可以根据实际应用需求进行设定。例如，当采用HSB色彩空间来确定像素点的色彩值时，则预设色彩区间可以30<H<90，0.3<S<1，50<B<230；也可以是90<H<180，90<S<180，50<B<230及180<H<270，0.3<S<1，0.5<B<20等，不限于此。电子设备可以获取待处理图像中色彩值在预设色彩区间的像素点组成的连通区域，进而根据第三处理系数对获得的各个连通区域进行第三色彩处理。电子设备还可以从各个连通区域中获取面积较大的连通区域进行第三色彩处理，也可以从各个连通区域中获取指定位置的连通区域进行第三色彩处理等，不限于此。

图5为一个实施例中对待处理图像进行第三色彩处理的流程图。如图5所示，在一个实施例中，提供的图像处理方法中根据第三处理系数对各个连通区域进行第三色彩处理的过程包括：

步骤502，获取待处理图像对应的地理位置信息。

电子设备在采集图像时，可以通过GPS(Global Positioning System，全球定位系统)来获取图像采集时的地理信息，根据地理信息可以得到图像采集时的地理位置信息。例如当GPS检测到待处理图像采集时的地理位置为北纬109.408984，东经18.294898时，电子设备可以根据该地理位置获取对应的地理位置信息为海南三亚湾海滩。

步骤504，根据地理位置信息调整第三处理系数。

电子设备根据地理位置信息调整第三处理系数。具体地，电子设备可以预先设定不同地理位置信息的调整规则，例如，当地理位置信息与海滩相关时，则可以降低第三处理系数中的亮度调整参数、提高饱和度调整参数等；当地理位置信息与草原相关时，则可以提高第三处理系数中的对比度调整参数、将色温调整为偏绿色等，不限于此。

步骤506，根据调整后的第三处理系数对各个连通区域进行第三色彩处理。

电子设备获取待处理图像对应的地理位置信息，根据地理位置信息调整第三处理系数，根据调整后的第三处理系数对各个连通区域进行第三色彩处理，可以提高图像处理的准确性。

图6为一个实施例中获取待处理图像中被拍摄物体的深度信息的流程图。如图6所示，在一个实施例中，提供的图像处理方法中取待处理图像中被拍摄物体的深度信息之前，还包括：

步骤602，获取图像采集指令，根据图像采集指令通过彩色摄像头采集彩色图像，及通过深度摄像头采集深度图像。

图像采集指令是用于指示电子设备通过摄像头采集图像的指令。图像采集指令可以是用户通过点击电子设备显示屏上的按钮生成的，也可以用户通过按压电子设备的控件生成的，还可以是用户滑动电子设备显示屏生成的等。电子设备可以检测生成的图像采集指令。电子设备在获取到图像采集指令时，可以在同一场景下，通过彩色摄像头采集彩色图像，及通过深度摄像头采集深度图像。

步骤604，获取与待处理图像的拍摄时间在预设时间区间内的至少两帧深度图像。

预设时间区间可以根据深度摄像头的采集帧率的大小来确定，具体地，预设时间区间大于或等于深度摄像头采集相邻两帧深度图像的时间间隔。例如，当深度摄像头的采集帧率30帧每秒时，则深度摄像头每隔2秒采集一帧深度图像，则预设时间区间可以是2秒、3秒、4秒、5秒等。在图像的采集过程中，彩色摄像头和深度摄像头分别以不同或相同的采集帧率采集图像，通常，彩色图像的采集时间与深度图像并不是一一对应的。电子设备可以获取与彩色图像的拍摄时间间隔在预设时间区间内的至少两帧深度图像。

步骤606，检测至少两帧深度图像与彩色图像中包含的特征点的匹配度。

电子设备可以使用尺度不变特征转换(Scale-invariant feature transform，SIFT)方法或加速鲁棒特征(Speed Up Robust Features，SURF)方法提取每帧深度图像和彩色图像中包含的特征点，进而检测每帧深度图像与彩色图像中包含的特征点的匹配度。电子设备也可以提取彩色图像中第一特征点，利用立体匹配算法提取第一像素点在深度图像中对应的第二特征点，进而根据第一特征点和第二特征点之间的视差确定深度图像与彩色图像中包含的特征点的匹配度。

步骤608，根据匹配度从至少两帧深度图像中获取目标深度图像，将目标深度图像中包含的深度信息作为待处理图像中被拍摄物体的深度信息。

电子设备根据匹配度从至少两帧深度图像中获取目标深度图像，具体地，电子设备可以获取匹配度最高的深度图像作为目标深度图像。目标深度图像即为与彩色图像的拍摄场景最匹配的深度图像。电子设备也可以将目标深度图像中包含的深度信息作为待处理图像中被拍摄物体的深度信息。在一个实施例中，待处理图像是包含被拍摄物体的彩色信息和深度信息的图像，则电子设备还可以彩色图像与目标深度图像生成待处理图像，即根据彩色图像中包含的彩色信息及目标深度图像中包含的深度信息生成该待处理图像。待处理图像中包含了被拍摄物体的彩色信息和深度信息，从而，电子设备在对待处理图像进行处理时，可以根据深度信息对待处理图像的彩色信息进行调整。

在一个实施例中，提供了一种图像处理方法，实现该方法的具体操作如下所述：

首先，电子设备获取待处理图像中被拍摄物体的深度信息。深度信息为摄像头与拍摄场景中被拍摄物体之间的距离信息。可选地，待处理图像可以是包含被拍摄物体的彩色信息和深度信息的图像，待处理图像也可以是只包含被拍摄物体的彩色信息的图像。电子设备可以在需要获取被拍摄物体的深度信息时，先获取与待处理图像对应的深度图像，将该深度图像中包含的深度信息作为待处理图像被拍摄物体的深度信息。

可选地，电子设备获取图像采集指令，根据图像采集指令通过彩色摄像头采集彩色图像，及通过深度摄像头采集深度图像，获取与待处理图像的拍摄时间在预设时间区间内的至少两帧深度图像，检测至少两帧深度图像与彩色图像中包含的特征点的匹配度，根据匹配度从至少两帧深度图像中获取目标深度图像，将目标深度图像中包含的深度信息作为待处理图像中被拍摄物体的深度信息。

接着，电子设备根据深度信息对待处理图像进行景别分类，得到待处理图像的景别标签。景别是指由于摄像头与被拍摄物体的距离不同，而造成被拍摄物体在图像中呈现出的范围大小的区别。电子设备可以根据待处理图像中被拍摄物体的深度信息对待处理图像进行景别分类，具体地，电子设备可以预设不同景别标签对应的深度信息范围以及图像中属于该深度信息范围的像素点个数或者区域面积，从而根据待处理图像中被拍摄物体的深度信息确定对应的景别标签。

可选地，电子设备获取待处理图像中被拍摄物体的彩色信息，基于彩色信息检测待处理图像中包含目标物体的第一区域，根据第一区域对应的深度信息对待处理图像进行景别分类，得到待处理图像的景别标签。

可选地，当第一区域包含的深度信息小于或等于深度阈值时，则电子设备判定待处理图像的景别标签为第一类标签；当第一区域包含的深度信息超过深度阈值时，则判定待处理图像的景别标签为第二类标签。

接着，电子设备查找与景别标签对应的目标处理模式。处理模式可以包括对比度调节、饱和度调节、亮度调节、色调调节或白平衡调节、虚化处理等处理方式中的一种或多种。电子设备预设的景别标签对应的处理模式中还可以包括指定的处理区域、不同处理区域的处理方式、处理方式对应的处理参数等。

可选地，当第一区域包含的深度信息小于或等于深度阈值时，则电子设备判定待处理图像的景别标签为第一类标签；当第一区域包含的深度信息超过深度阈值时，则判定待处理图像的景别标签为第二类标签。可选地，当景别标签为第一类标签时，电子查找与第一类标签对应的第一处理模式，其中，第一处理模式包含第一处理系数和第二处理系数；当景别标签为第二类标签时，查找与第二类标签对应的第二处理模式，其中，第二处理模式包含第三处理系数。

接着，电子设备根据目标处理模式对待处理图像进行处理。具体地，电子设备可以获取目标处理模式中指定的处理区域，该处理区域对应的处理方式及对应的处理参数，进而根据该处理方式对应的处理参数对处理区域进行处理。处理区域可以是待处理图像包含的全部区域、也可以是待处理图像中被拍摄的目标物体的区域，还可以是根据待处理图像的色彩、深度信息等划分的区域，不限于此。

可选地，当景别标签为第一类标签时，电子设备根据第一处理系数对第一区域进行第一色彩处理，获取待处理图像中除第一区域之外的第二区域，根据第二处理系数及第二区域包含的深度信息对第二区域进行第二色彩处理。

可选地，当待处理图像的景别标签为第二类标签时，电子设备获取待处理图像中色彩值在预设色彩区间的像素点组成的连通区域；根据第三处理系数对各个连通区域进行第三色彩处理。

可选地，电子设备获取待处理图像对应的地理位置信息，根据地理位置信息调整第三处理系数，根据调整后的第三处理系数对各个连通区域进行第三色彩处理。

应该理解的是，虽然图2-6的流程图中的各个步骤按照箭头的指示依次显示，但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明，这些步骤的执行并没有严格的顺序限制，这些步骤可以以其它的顺序执行。而且，图2-6中的至少一部分步骤可以包括多个子步骤或者多个阶段，这些子步骤或者阶段并不必然是在同一时刻执行完成，而是可以在不同的时刻执行，这些子步骤或者阶段的执行顺序也不必然是依次进行，而是可以与其它步骤或者其它步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。

图7为一个实施例的图像处理装置的结构框图。如图7所示，该图像处理装置包括获取模块702、分类模块704、查找模块706、处理模块708，其中：

获取模块702，用于获取待处理图像中被拍摄物体的深度信息。

分类模块704，用于根据深度信息对待处理图像进行景别分类，得到待处理图像的景别标签。

查找模块706，用于查找与景别标签对应的目标处理模式。

处理模块708，用于根据目标处理模式对待处理图像进行处理。

本申请实施例提供的图像处理装置，可以获取待处理图像中被拍摄物体的深度信息，根据深度信息对待处理图像进行景别分类，得到待处理图像的景别标签，查找与景别标签对应的目标处理模式，根据目标处理模式对待处理图像进行处理。由于可以根据图像包含的深度信息对图像进行分类，对不同类别的图像采集不同的处理模式进行处理，可以提高图像处理的准确性。

在一个实施例中，分类模块704还可以用于获取待处理图像中被拍摄物体的彩色信息；基于彩色信息检测待处理图像中包含目标物体的第一区域；根据第一区域对应的深度信息对待处理图像进行景别分类，得到待处理图像的景别标签。

在一个实施例中，分类模块704还可用于当第一区域包含的深度信息小于或等于深度阈值时，则判定待处理图像的景别标签为第一类标签；当第一区域包含的深度信息超过深度阈值时，则判定待处理图像的景别标签为第二类标签。查找模块706还可以用于当景别标签为第一类标签时，查找与第一类标签对应的第一处理模式，其中，第一处理模式包含第一处理系数和第二处理系数；当景别标签为第二类标签时，查找与第二类标签对应的第二处理模式，其中，第二处理模式包含第三处理系数。

在一个实施例中，当景别标签为第一类标签时，处理模块708还可以用于根据第一处理系数对第一区域进行第一色彩处理；获取待处理图像中除第一区域之外的第二区域；根据第二处理系数及第二区域包含的深度信息对第二区域进行第二色彩处理。

在一个实施例中，当景别标签为第二类标签时，处理模块708还可以用于获取待处理图像中色彩值在预设色彩区间的像素点组成的连通区域；根据第三处理系数对各个连通区域进行第三色彩处理。

在一个实施例中，处理模块708还可以用于获取待处理图像对应的地理位置信息；根据地理位置信息调整第三处理系数；根据调整后的第三处理系数对各个连通区域进行第三色彩处理。

在一个实施例中，获取模块702还可以用于获取图像采集指令，根据图像采集指令通过彩色摄像头采集彩色图像，及通过深度摄像头采集深度图像；获取与彩色图像的拍摄时间间隔在预设时间区间的至少两帧深度图像；检测至少两帧深度图像与彩色图像中包含的特征点的匹配度；根据匹配度从至少两帧深度图像中获取目标深度图像，将目标深度图像中包含的深度信息作为待处理图像中被拍摄物体的深度信息。

上述图像处理装置中各个模块的划分仅用于举例说明，在其他实施例中，可将图像处理装置按照需要划分为不同的模块，以完成上述图像处理装置的全部或部分功能。

图8为一个实施例中电子设备的内部结构示意图。如图8所示，该电子设备包括通过系统总线连接的处理器和存储器。其中，该处理器用于提供计算和控制能力，支撑整个电子设备的运行。存储器可包括非易失性存储介质及内存储器。非易失性存储介质存储有操作系统和计算机程序。该计算机程序可被处理器所执行，以用于实现以下各个实施例所提供的一种图像处理方法。内存储器为非易失性存储介质中的操作系统计算机程序提供高速缓存的运行环境。该电子设备可以是手机、平板电脑或者个人数字助理或穿戴式设备等。

本申请实施例中提供的图像处理装置中的各个模块的实现可为计算机程序的形式。该计算机程序可在电子设备上运行。该计算机程序构成的程序模块可存储在电子设备的存储器上。该计算机程序被处理器执行时，实现本申请实施例中所描述方法的步骤。

本申请实施例还提供一种电子设备。上述电子设备中包括图像处理电路，图像处理电路可以利用硬件和/或软件组件实现，可包括定义ISP(Image Signal Processing，图像信号处理)管线的各种处理单元。图9为一个实施例中图像处理电路的示意图。如图9所示，为便于说明，仅示出与本申请实施例相关的图像处理技术的各个方面。

如图9所示，图像处理电路包括ISP处理器940和控制逻辑器950。成像设备910捕捉的图像数据首先由ISP处理器940处理，ISP处理器940对图像数据进行分析以捕捉可用于确定和/或成像设备910的一个或多个控制参数的图像统计信息。成像设备910可包括具有一个或多个透镜912和图像传感器914的照相机。图像传感器914可包括色彩滤镜阵列(如Bayer滤镜)，图像传感器914可获取用图像传感器914的每个成像像素捕捉的光强度和波长信息，并提供可由ISP处理器940处理的一组原始图像数据。传感器920(如陀螺仪)可基于传感器920接口类型把采集的图像处理的参数(如防抖参数)提供给ISP处理器940。传感器920接口可以利用SMIA(Standard Mobile Imaging Architecture，标准移动成像架构)接口、其它串行或并行照相机接口或上述接口的组合。

此外，图像传感器914也可将原始图像数据发送给传感器920，传感器920可基于传感器920接口类型把原始图像数据提供给ISP处理器940，或者传感器920将原始图像数据存储到图像存储器930中。

ISP处理器940按多种格式逐个像素地处理原始图像数据。例如，每个图像像素可具有8、10、12或14比特的位深度，ISP处理器940可对原始图像数据进行一个或多个图像处理操作、收集关于图像数据的统计信息。其中，图像处理操作可按相同或不同的位深度精度进行。

ISP处理器940还可从图像存储器930接收图像数据。例如，传感器920接口将原始图像数据发送给图像存储器930，图像存储器930中的原始图像数据再提供给ISP处理器940以供处理。图像存储器930可为存储器装置的一部分、存储设备、或电子设备内的独立的专用存储器，并可包括DMA(Direct Memory Access，直接直接存储器存取)特征。

当接收到来自图像传感器914接口或来自传感器920接口或来自图像存储器930的原始图像数据时，ISP处理器940可进行一个或多个图像处理操作，如时域滤波。处理后的图像数据可发送给图像存储器930，以便在被显示之前进行另外的处理。ISP处理器940从图像存储器930接收处理数据，并对所述处理数据进行原始域中以及RGB和YCbCr颜色空间中的图像数据处理。ISP处理器940处理后的图像数据可输出给显示器970，以供用户观看和/或由图形引擎或GPU(Graphics Processing Unit，图形处理器)进一步处理。此外，ISP处理器940的输出还可发送给图像存储器930，且显示器970可从图像存储器930读取图像数据。在一个实施例中，图像存储器930可被配置为实现一个或多个帧缓冲器。此外，ISP处理器940的输出可发送给编码器/解码器960，以便编码/解码图像数据。编码的图像数据可被保存，并在显示于显示器970设备上之前解压缩。编码器/解码器960可由CPU或GPU或协处理器实现。

ISP处理器940确定的统计数据可发送给控制逻辑器950单元。例如，统计数据可包括自动曝光、自动白平衡、自动聚焦、闪烁检测、黑电平补偿、透镜912阴影校正等图像传感器914统计信息。控制逻辑器950可包括执行一个或多个例程(如固件)的处理器和/或微控制器，一个或多个例程可根据接收的统计数据，确定成像设备910的控制参数及ISP处理器940的控制参数。例如，成像设备910的控制参数可包括传感器920控制参数(例如增益、曝光控制的积分时间、防抖参数等)、照相机闪光控制参数、透镜912控制参数(例如聚焦或变焦用焦距)、或这些参数的组合。ISP控制参数可包括用于自动白平衡和颜色调整(例如，在RGB处理期间)的增益水平和色彩校正矩阵，以及透镜912阴影校正参数。

运用图9中图像处理技术可实现上述图像处理方法。

本申请实施例还提供了一种计算机可读存储介质。一个或多个包含计算机可执行指令的非易失性计算机可读存储介质，当所述计算机可执行指令被一个或多个处理器执行时，使得所述处理器执行图像处理方法的步骤。

一种包含指令的计算机程序产品，当其在计算机上运行时，使得计算机执行图像处理方法。

本申请实施例所使用的对存储器、存储、数据库或其它介质的任何引用可包括非易失性和/或易失性存储器。合适的非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM)，它用作外部高速缓冲存储器。作为说明而非局限，RAM以多种形式可得，诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDR SDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink)DRAM(SLDRAM)、存储器总线(Rambus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)。

以上所述实施例仅表达了本申请的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对本申请专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本申请构思的前提下，还可以做出若干变形和改进，这些都属于本申请的保护范围。因此，本申请专利的保护范围应以所附权利要求为准。

Claims (12)

1.一种图像处理方法，其特征在于，包括：

获取待处理图像中被拍摄物体的深度信息；

根据所述深度信息对所述待处理图像进行景别分类，得到所述待处理图像的景别标签；所述景别标签包括远景、中景、近景和特写中的一种或一种以上；

查找与所述景别标签对应的目标处理模式；

根据所述目标处理模式对所述待处理图像进行处理；

其中，所述景别标签包括第一类标签和第二类标签，当所述景别标签为第二类标签时，所述根据所述目标处理模式对所述待处理图像进行处理，包括：

获取所述待处理图像中色彩值在预设色彩区间的像素点组成的连通区域；

获取所述待处理图像对应的地理位置信息；

根据所述地理位置信息调整第三处理系数；

根据所述调整后的第三处理系数对各个所述连通区域进行第三色彩处理。

2.根据权利要求1所述的方法，其特征在于，所述根据所述深度信息对所述待处理图像进行景别分类，得到所述待处理图像的景别标签，包括：

获取所述待处理图像中所述被拍摄物体的彩色信息；

基于所述彩色信息检测所述待处理图像中包含目标物体的第一区域；

根据所述第一区域对应的深度信息对所述待处理图像进行景别分类，得到所述待处理图像的景别标签。

3.根据权利要求2所述的方法，其特征在于，所述根据所述第一区域对应的深度信息进行景别分类，得到所述待处理图像的景别标签，包括：

当所述第一区域包含的深度信息小于或等于深度阈值时，则判定所述待处理图像的景别标签为第一类标签；

当所述第一区域包含的深度信息超过深度阈值时，则判定所述待处理图像的景别标签为第二类标签；

所述查找与所述景别标签对应的目标处理模式，包括：

当所述景别标签为所述第一类标签时，查找与所述第一类标签对应的第一处理模式，其中，所述第一处理模式包含第一处理系数和第二处理系数；

当所述景别标签为所述第二类标签时，查找与所述第二类标签对应的第二处理模式，其中，所述第二处理模式包含第三处理系数。

4.根据权利要求3所述的方法，其特征在于，当所述景别标签为第一类标签时，所述根据所述目标处理模式对所述待处理图像进行处理，包括：

根据所述第一处理系数对所述第一区域进行第一色彩处理；

获取所述待处理图像中除所述第一区域之外的第二区域；

根据所述第二处理系数及所述第二区域包含的深度信息对所述第二区域进行第二色彩处理。

5.根据权利要求3所述的方法，其特征在于，所述获取待处理图像中被拍摄物体的深度信息之前，包括：

获取图像采集指令，根据所述图像采集指令通过彩色摄像头采集所述待处理图像，及通过深度摄像头采集深度图像；

获取与所述待处理图像的拍摄时间间隔在预设时间区间内的至少两帧深度图像；

检测所述至少两帧深度图像包含的特征点与所述待处理图像中包含的特征点的匹配度；

根据所述匹配度从至少两帧深度图像中获取目标深度图像，将所述目标深度图像中包含的深度信息作为所述待处理图像中被拍摄物体的深度信息。

6.一种图像处理装置，其特征在于，包括：

获取模块，用于获取待处理图像中被拍摄物体的深度信息；

分类模块，用于根据所述深度信息对所述待处理图像进行景别分类，得到所述待处理图像的景别标签；所述景别标签包括远景、中景、近景和特写中的一种或一种以上；

查找模块，用于查找与所述景别标签对应的目标处理模式；

处理模块，用于根据所述目标处理模式对所述待处理图像进行处理；

其中，所述景别标签包括第一类标签和第二类标签，当所述景别标签为第二类标签时，所述处理模块，还用于获取所述待处理图像中色彩值在预设色彩区间的像素点组成的连通区域；获取所述待处理图像对应的地理位置信息；根据所述地理位置信息调整第三处理系数；根据所述调整后的第三处理系数对各个所述连通区域进行第三色彩处理。

7.根据权利要求6所述的装置，其特征在于，

所述分类模块，还用于获取所述待处理图像中所述被拍摄物体的彩色信息；基于所述彩色信息检测所述待处理图像中包含目标物体的第一区域；根据所述第一区域对应的深度信息对所述待处理图像进行景别分类，得到所述待处理图像的景别标签。

8.根据权利要求7所述的装置，其特征在于，

所述分类模块，还用于当所述第一区域包含的深度信息小于或等于深度阈值时，则判定所述待处理图像的景别标签为第一类标签；当所述第一区域包含的深度信息超过深度阈值时，则判定所述待处理图像的景别标签为第二类标签；

所述查找模块，还用于当所述景别标签为所述第一类标签时，查找与所述第一类标签对应的第一处理模式，其中，所述第一处理模式包含第一处理系数和第二处理系数；当所述景别标签为所述第二类标签时，查找与所述第二类标签对应的第二处理模式，其中，所述第二处理模式包含第三处理系数。

9.根据权利要求8所述的装置，其特征在于，

所述处理模块，还用于根据所述第一处理系数对所述第一区域进行第一色彩处理；获取所述待处理图像中除所述第一区域之外的第二区域；根据所述第二处理系数及所述第二区域包含的深度信息对所述第二区域进行第二色彩处理。

10.根据权利要求8所述的装置，其特征在于，

所述获取模块，用于获取图像采集指令，根据所述图像采集指令通过彩色摄像头采集所述待处理图像，及通过深度摄像头采集深度图像；获取与所述待处理图像的拍摄时间间隔在预设时间区间内的至少两帧深度图像；检测所述至少两帧深度图像包含的特征点与所述待处理图像中包含的特征点的匹配度；根据所述匹配度从至少两帧深度图像中获取目标深度图像，将所述目标深度图像中包含的深度信息作为所述待处理图像中被拍摄物体的深度信息。

11.一种电子设备，包括存储器及处理器，所述存储器中储存有计算机程序，所述计算机程序被所述处理器执行时，使得所述处理器执行如权利要求1至5中任一项所述的图像处理方法的步骤。

12.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1至5中任一项所述的方法的步骤。

Images