CN109582811A - 图像处理方法、装置、电子设备和计算机可读存储介质 - Google Patents

Abstract

本申请涉及一种图像处理方法、装置、电子设备和计算机可读存储介质。所述方法包括：获取至少两张目标图像的深度信息；按照所述深度信息将所述至少两张目标图像排列，得到目标图像序列；根据所述目标图像序列将所述至少两张目标图像生成三维相册。通过获取至少两张目标图像的深度信息，按照深度信息对至少两张目标图像进行排列，得到目标图像序列，根据目标图像序列将至少两张目标图像生成对应的三维相册，实现了三维相册的制作，满足了用户个性化需求。

Description

图像处理方法、装置、电子设备和计算机可读存储介质

技术领域

本申请涉及计算机技术领域，特别是涉及一种图像处理方法、装置、电子设备和计算机可读存储介质。

背景技术

随着电子技术和影像技术的发展，出现了带有拍摄功能的电子设备。用户使用电子设备拍摄得到二维图像，将二维图像存储在本地或服务器上。

发明内容

本申请实施例提供一种图像处理方法、装置、电子设备和计算机可读存储介质，可以实现制作三维相册，满足个性化需求。

一种图像处理方法，所述方法包括：

获取至少两张目标图像的深度信息；

按照所述深度信息将所述至少两张目标图像排序，得到目标图像序列；

根据所述目标图像序列将所述至少两张目标图像生成三维相册。

一种图像处理装置，所述装置包括：

深度信息获取模块，用于获取至少两张目标图像的深度信息；

排列模块，用于按照所述深度信息将所述至少两张目标图像排序，得到目标图像序列；

生成模块，用于根据所述目标图像序列将所述至少两张目标图像生成三维相册。

一种电子设备，包括存储器和处理器，所述存储器存储有计算机程序，所述处理器执行所述计算机程序时实现如下步骤：

获取至少两张目标图像的深度信息；

按照所述深度信息将所述至少两张目标图像排序，得到目标图像序列；

根据所述目标图像序列将所述至少两张目标图像生成三维相册。

一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现如下步骤：

获取至少两张目标图像的深度信息；

按照所述深度信息将所述至少两张目标图像排序，得到目标图像序列；

根据所述目标图像序列将所述至少两张目标图像生成三维相册。

本实施例中图像处理方法、装置、电子设备、计算机可读存储介质，通过获取至少两张目标图像的深度信息，按照深度信息对目标图像进行排序，得到目标图像序列，根据目标图像序列将至少两张目标图像生成对应的三维相册，实现了三维相册的制作，满足了用户个性化需求。

附图说明

为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为一个实施例中图像处理方法的应用环境图；

图2为一个实施例中图像处理方法的流程示意图；

图3为另一个实施例中图像处理方法的流程示意图；

图4为另一个实施例中图像处理方法的流程示意图；

图5为另一个实施例中图像处理方法的流程示意图；

图6为一个实施例中三维相册的示意图；

图7为一个实施例中图像处理装置的结构框图；

图8为一个实施例中电子设备的内部结构图；

图9为一个实施例中图像处理电路的示意图。

具体实施方式

为了使本申请的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本申请进行进一步详细说明。应当理解，此处描述的具体实施例仅仅用以解释本申请，并不用于限定本申请。

本申请实施例提供的图像处理方法，可以应用于如图1所示的应用环境中。其中，电子设备102可拥有一个深度摄像头104和多个其它摄像头106、108。电子设备102可通过摄像头106拍摄一场景得到色彩数据(RGB数据，红绿蓝数据)，同时通过深度摄像头104拍摄同一场景得到深度数据(Depth，深度数据)，将色彩数据和深度数据进行配准得到同步的RGBD数据。根据每个色彩图像的深度数据可以对不同距离的景物或人像进行划分排列，得到有层次感的图像序列。电子设备102可识别出一帧图像中的各个对象生成对应的目标图像，将各个对象的深度信息作为对应的目标图像的深度信息，进行排序得到目标图像序列，将一帧图像中各个对象对应的目标图像制成三维相册。电子设备102也可以将一帧图像分区，每个区域生成对应的目标图像，将每个区域的深度信息作为对应的目标图像的深度信息，根据深度信息进行排序得到目标图像序列，将一帧图像中各个区域对应的目标图像制成三维相册。电子设备102也可以将多帧图像的每一帧图像作为一张目标图像，将每一张目标图像中的人像或景物的深度信息作为该目标图像的深度信息，根据深度信息排序得到目标图像序列，将多帧图像制成三维相册。该电子设备102可以但不限于是各种智能手机、个人数字助理、平板电脑和便携式可穿戴设备等。

图2为一个实施例中图像处理方法的流程图。如图2所示，一种图像处理方法，以应用于电子设备102上为例进行描述，具体包括步骤202至步骤206。

其中：

步骤202，获取至少两张目标图像的深度信息。

其中，目标图像是指需要制成三维相册的图像。该目标图像可以是从网络上获取的具有深度信息的一帧图像按照需要制作成的目标图像，也可以是存储在电子设备的存储器上或缓存中的具有深度信息的一帧图像按照需要制作成的目标图像，还可以是实时拍摄的一帧图像按照需要制作成的目标图像等。按照需要制作的目标图像可包括识别出一帧图像中的各个对象，每个对象生成一张目标图像。按照需要制作的目标图像也可以包括划分为多个区域，每个区域生成一张目标图像。目标图像也可以是从网络上获取的具有深度信息的多帧图像，或存储在电子设备的存储器上或缓存中的具有深度信息的多帧图像，或实时拍摄的具有深度信息的多帧图像，将多帧图像中每帧图像作为一张目标图像。

深度信息是指利用摄像头拍摄时拍摄对象与摄像头之间的距离信息。目标图像的深度信息可为目标图像中对象的深度信息。目标图像中的对象可为人像或景物等。

具体地，电子设备获取多张目标图像，并获取多张目标图像中每张目标图像的深度信息。

步骤204，按照该深度信息将该至少两张目标图像排序，得到目标图像序列。

具体地，深度信息即为距离信息。图像序列是指将图像按照预设规则排列形成的序列。电子设备可以按照距离信息将多个目标图像由远到近进行排列，得到目标图像序列；或者电子设备按照距离信息将多个目标图像由近到远进行排列，得到目标图像序列。

步骤206，根据该目标图像序列将至少两张目标图像生成三维相册。

其中，三维相册是指呈现3D(三维)效果的相册。在三维相册中目标图像按照深度信息排列，形成有层次的图像序列。

具体地，电子设备根据目标图像序列将至少两张目标图像生成三维相册。电子设备可以选取目标图像序列中第一个目标图像作为三维相册的封面，或者选取目标图像序列中任意一个目标图像作为三维相册的封面。其中，第一个目标图像是指目标图像序列中排在第一个位置的目标图像，例如目标图像序列为按照由近到远的深度信息排序，则第一个目标图像为目标图像序列中深度信息最近的目标图像。

本实施例中图像处理方法，通过获取至少两张目标图像的深度信息，按照深度信息对至少两张目标图像进行排序，得到目标图像序列，根据目标图像序列将至少两张目标图像生成对应的三维相册，实现了三维相册的制作，满足了用户个性化需求，且制作的三维相册展示有层次，便于观看。

在一个实施例中，该获取至少两张目标图像的深度信息，包括：当每一帧图像作为一张目标图像时，则通过彩色摄像头拍摄一场景，得到一张目标图像，通过深度摄像头拍摄同一场景，得到与该目标图像对应的深度图像，根据该深度图像获取该目标图像的深度信息。通过彩色摄像头和深度摄像头拍摄多个同一场景，得到多张目标图像，以及每张目标图像对应的深度图像。

其中，彩色摄像头可为RGB摄像头，深度摄像头可为TOF(Time Of Flight，飞行时间)摄像头等。

对于同一场景，电子设备可以启动彩色摄像头和深度摄像头同时拍摄该场景，彩色摄像头拍摄得到一帧色彩图像，作为一张目标图像，深度摄像头拍摄得到深度图像，将色彩图像和深度图像进行像素点配准，可以得到色彩图像中每个像素点的深度信息。

TOF深度摄像头的原理是传感器发出经调制的脉冲红外光，遇物体后反射，传感器通过计算光线发射和反射时间差或相位差，来换算被拍摄景物的距离，以产生深度信息。

本实施例中，通过深度摄像头获取目标图像的深度信息，检测简单，且准确。

图3为一个实施例中获取至少两张目标图像的深度信息的具体流程。如图3所示，在一个实施例中，该获取目标图像的深度信息，包括：

步骤302，获取一帧候选图像，将该候选图像划分为预设数量的区域。

其中，一帧候选图像是指需要进行处理的图像。候选图像可从互联网上下载，或者在电子设备的存储器或缓存中得到，或者电子设备启动彩色摄像头拍摄的图像。一帧候选图像可为一帧全景图像。全景图像为全景模式下拍摄的图像，通常包括多个区域。

预设数量可根据需要预先设定，如2个、3个、4个、6个、9个、16个等。

具体地，电子设备获取一帧候选图像，将该候选图像划分为预设数量的区域。

步骤304，提取该候选图像的各个区域，生成各个区域分别对应的目标图像。

具体地，电子设备可从一帧候选图像中提取划分的各个区域，分别生成对应的目标图像，每张目标图像包含一个区域。电子设备可对候选图像划分的区域标记得到区域标号，从候选图像中按照区域标号提取对应的区域生成对应的目标图像。

步骤306，获取各个区域的深度信息，将各个区域的深度信息作为对应的目标图像的深度信息。

其中，每个区域的深度信息可为该区域中各个像素点的深度信息的平均值，或者该区域中各个像素点的深度信息中最大值或最小值或中间值等。中间值是指将像素点的深度信息按照从大到小或从小到大排列后，取处于中间位置的深度信息作为中间值，当中间值为两个值时，可以取该两个值中任意一个，或者取该两个值的平均值。

具体地，电子设备获取各个区域的深度信息，可将各个区域的深度信息作为对应的目标图像的深度信息。

本实施例中，将一帧候选图像划分为多个区域，提取每个区域生成对应的目标图像，将各个区域的深度信息作为对应的目标图像的深度信息，后续根据一帧图像的各个区域生成的目标图像，按照深度信息排序生成对应的目标图像序列，并根据目标图像序列将一帧图像中的各个区域对应的目标图像生成三维相册，实现了利用一帧图像中的不同区域制作三维相册，可以满足用户个性化需求，让三维相册制作更加简单方便，制作方式更加多样化，且有层次感。当候选图像为全景图像时，可将全景图像转化为三维相册，让全景图像呈现更加具有立体感。

图4为一个实施例中获取至少两张目标图像的深度信息的具体流程。如图4所示，该获取目标图像的深度信息，包括：

步骤402，获取一帧候选图像，识别得到该候选图像中的各个对象，生成各个对象分别对应的目标图像。

其中，一帧候选图像是指需要进行处理的图像。一帧候选图像可从互联网上下载，或者在电子设备的存储器或缓存中得到，或者电子设备启动彩色摄像头拍摄的图像。候选图像可为一张全景图像。全景图像为全景模式下拍摄的图像，通常包括多个区域。

一帧候选图像中的对象可以是人像、动物或景物等。

具体地，电子设备可通过训练好的目标检测算法识别出一帧候选图像中的对象和位置。目标检测算法可为SSD(single shot multibox detector)算法。通过收集样本图像，将样本图像导入到SSD检测模型进行训练得到训练好的能识别多种不同对象的SSD检测模型。

电子设备识别出一帧候选图像中的各个对象后，提取该各个对象生成对应的目标图像。每个目标图像包括一个对象。

步骤404，获取各个对象的深度信息，将该各个对象的深度信息作为对应的目标图像的深度信息。

其中，对象的深度信息可为该对象所占的各个像素点的深度信息的平均值，或者该对象所占的各个像素点的深度信息中最大值或最小值或中间值等。中间值是指将像素点的深度信息按照从大到小或从小到大排列后，取处于中间位置的深度信息作为中间值，当中间值为两个值时，可以取该两个值中任意一个，或者取该两个值的平均值。

具体地，电子设备获取各个对象的深度信息，可将各个对象的深度信息作为对应的目标图像的深度信息。

本实施例中，从一帧候选图像中提取识别的对象，生成对应的目标图像，将对象的深度信息作为对应的目标图像的深度信息，后续根据一帧图像中识别出的对象生成的目标图像，按照深度信息排序生成对应的目标图像序列，并根据目标图像序列将一帧候选图像中的各个对象对应的目标图像生成三维相册，实现了利用一帧图像中的不同对象制作三维相册，可以满足用户个性化需求，让三维相册制作更加简单方便，制作方式更加多样化，且有层次感。当候选图像为全景图像时，可将全景图像转化为三维相册，让全景图像呈现更加具有立体感。

在一个实施例中，该获取一帧候选图像，识别得到该候选图像中的各个对象，生成所述各个对象对应的目标图像，包括：通过彩色摄像头拍摄一场景，得到一帧候选图像，识别该候选图像中的各个对象，生成该各个对象对应的目标图像。

该获取所述各个对象的深度信息，将该各个对象的深度信息作为对应的目标图像的深度信息，包括：通过深度摄像头拍摄同一场景，得到与该一帧候选图像对应的深度图像，根据该深度图像获取该各个对象的深度信息，将该各个对象的深度信息作为对应的目标图像的深度信息。

其中，彩色摄像头可为RGB摄像头，深度摄像头可为TOF(Time Of Flight，飞行时间)摄像头等。

对于同一场景，电子设备可以启动彩色摄像头和深度摄像头同时拍摄该场景，彩色摄像头拍摄得到一帧色彩图像，作为一帧候选图像，深度摄像头拍摄得到深度图像，将色彩图像和深度图像进行像素点配准，可以得到色彩图像中每个像素点的深度信息。

在一个实施例中，该将该对象的深度信息作为对应的目标图像的深度信息，包括：获取该候选图像中对象所占的各个像素点的深度信息，获取该对象所占的各个像素点的深度信息的平均值或最大值或最小值或中值，将该对象所占的各个像素点的深度信息的平均值或最大值或最小值或中值作为该对象所对应的目标图像的深度信息。

其中，对象可为人像或景物或动物等。

可从该候选图像对应的深度图像中获取各个对象所占的各个像素点的深度信息，计算对象所占的各个像素点的深度信息的平均值或最大值或最小值或中值，将该对象所占的各个像素点的深度信的平均值或最大值或最小值或中值作为该对象生成的对应的目标图像的深度信息。具体地，电子设备可获取候选图像中对象所占的各个像素点的深度信息，然后获取对象所占的各个像素点的深度信息的平均值或最大值或最小值或中间值作为该对象所对应的目标图像的深度信息。中间值是指将像素点的深度信息按照从大到小或从小到大排列后，取处于中间位置的深度信息作为中间值，当中间值为两个值时，可以取该两个值中任意一个，或者取该两个值的平均值。

本实施例中，将对象所占的各个像素点的深度信息的平均值或最大值或最小值或中间值作为目标图像的深度信息，计算简单，且方便按照所选择对象的深度信息对目标图像进行排序，得到所需的目标图像序列。

图5为一个实施例中获取至少两张目标图像的深度信息的具体流程。如图5所示，该获取目标图像的深度信息，包括：

步骤502，从图像集合中获取至少两帧图像，将每帧图像作为一张目标图像，识别各个目标图像中的人像和/或景物，其中，该图像集合用于存储多帧具有深度信息的图像。

其中，图像集合可为互联网上的图像集合，或者电子设备本地存储器上的图像集合或缓存中存储的图像集合。图像集合中存储有多帧具有深度信息的图像，从图像集合中获取至少两帧图像，将至少两帧图像中每帧图像作为一张目标图像。

具体地，电子设备从图像集合中获取多帧图像，将每帧图像作为一张目标图像，然后识别目标图像中的人像和/或景物。

步骤504，获取各个目标图像中的人像和/或景物的深度信息，根据该人像和/或景物的深度信息确定各个目标图像的深度信息。

具体地，电子设备获取到各个目标图像中的人像和/或景物的深度信息，将人像和/或景物的深度信息作为各个目标图像的深度信息。当一张目标图像中包括人像时，将人像的深度信息作为该目标图像的深度信息。

电子设备可获取目标图像中人像所占的像素点的深度信息，然后获取人像所占的像素点的深度信息的最大值或最小值或中间值或平均值作为目标图像的深度信息。

当一张目标图像中包括景物时，将景物的深度信息作为目标图像的深度信息。

电子设备可获取目标图像中景物所占的像素点的深度信息，然后获取景物所占的像素点的深度信息的最大值或最小值或中间值或平均值作为目标图像的深度信息。

当一张目标图像中包括人像和景物时，识别该目标图像中的主体，当该目标图像中的主体为人像时，将人像的深度信息作为该目标图像的深度信息；当该目标图像中的主体为景物时，将景物的深度信息作为目标图像的深度信息。其中，目标图像中的主体可为占图像面积大于预设值的对象，或者目标图像中的前景对象等。预设值可根据需要设置，如三分之二。

当一张目标图像中包括人像和景物时，可求取人像的深度信息和景物的深度信息中的较大值或较小值或加权平均值，将人像的深度信息和景物的深度信息的中的较大值或较小值或加权平均值作为目标图像的深度信息。

人像的深度信息可为人像所占的像素点的深度信息的最大值或最小值或中间值或平均值，景物的深度信息可为景物所占的像素点的深度信息的最大值或最小值或中间值或平均值。中间值是指将像素点的深度信息按照从大到小或从小到大排列后，取处于中间位置的深度信息作为中间值，当中间值为两个值时，可以取该两个值中任意一个，或者取该两个值的平均值。人像的深度信息和景物的深度信息采用同样的计算方式计算得到，例如人像的深度信息采用人像所占的像素点的深度信息的平均值，则景物的深度信息也采用景物所占的像素点的深度信息的平均值。

将目标图像中的人像的深度信息和景物的深度信息进行比较，选取较大值作为目标图像的深度信息，或者选取较小值作为目标图像的深度信息，或者为人像的深度信息和景物的深度信息分别赋予权重，根据人像的深度信息、景物的深度信息与对应的权重加权平均得到的深度信息作为目标图像的深度信息。

本实施例中，将人像或景物所占的像素点的深度信息的最大值或最小值或中间值或平均值计算目标图像的深度信息，计算简单，且方便按照人像或景物的深度信息对目标图像进行排序，得到所需的目标图像序列。

在一个实施例中，上述图像处理方法还包括：获取目标图像中人像的深度信息，按照人像的深度信息将目标图像排列，得到目标图像序列。

具体地，电子设备识别全部的目标图像中的人像，得到各个目标图像中人像的深度信息，按照人像的深度信息将目标图像排列，得到目标图像序列。

当某张目标图像中存在多个人像时，获取该目标图像中多个人像的人脸面积，将人脸面积最大的人像作为目标图像的主人像，获取主人像的深度信息作为该目标图像中人像的深度信息。

当某张目标图像中存在多个人像时，获取该目标图像中多个人像的深度信息，将多个人像的深度信息中最小的深度信息作为该目标图像中人像的深度信息。

按照人像的深度信息对目标图像进行排列，排列更加有规律，制作的三维相册更符合关注人物的用户的需求。

在一个实施例中，上述图像处理方法还包括：获取目标图像中景物的深度信息，按照景物的深度信息将目标图像排列，得到目标图像序列。

具体地，电子设备识别全部的目标图像中的景物，得到各个目标图像中景物的深度信息，按照景物的深度信息将目标图像排列，得到目标图像序列。

按照人像的深度信息对目标图像进行排列，排列更加有规律，制作的三维相册更符合关注景物的用户的需求。

在一个实施例中，上述图像处理方法还包括：获取该目标图像所对应的深度图像；根据该深度图像获取该目标图像中的人像或景物的深度信息。

其中，深度图像是采用深度摄像头拍摄得到的。深度摄像头和彩色摄像头接收到拍照指令后，对同一场景拍摄，彩色摄像头采集色彩数据得到目标图像，深度摄像头采集深度数据得到深度图像。电子设备可将目标图像和深度图像进行配准可以得到目标图像中每个像素点的深度信息，根据每个像素点的深度信息可以得到目标图像中的人像或景物的深度信息。识别出人像或景物，获取人像或景物所对应的像素点的深度信息的最大值或最小值或中间值或平均值作为人像或景物的深度信息。中间值是指将像素点的深度信息按照从大到小或从小到大排列后，取处于中间位置的深度信息作为中间值，当中间值为两个值时，可以取该两个值中任意一个，或者取该两个值的平均值。

在一个实施例中，通过彩色摄像头拍摄一场景，得到一帧图像，将该一帧图像作为一张目标图像，通过深度摄像头拍摄同一场景，得到与该目标图像对应的深度图像，根据该深度图像获取该目标图像的深度信息。通过深度摄像头获取目标图像对应的深度图像，再根据深度图像获取对应目标图像的深度信息，简单方便。

下面结合一个具体示例来描述图像处理方法的详细流程。该图像处理方法，包括：

(1)从图像集合中获取至少两帧图像，将每帧图像作为一张目标图像，识别各个目标图像中的人像和/或景物，其中，该图像集合用于存储多帧具有深度信息的图像。

(2)获取各个目标图像中的人像和/或景物的深度信息，根据该人像或景物的深度信息确定该目标图像的深度信息。

(3)按照该深度信息将至少两张目标图像排序，得到目标图像序列。

(4)根据该目标图像序列将至少两张目标图像生成三维相册。

如图6所示，以人像的深度信息为例，电子设备从图像集合中获取了目标图像A、B、C，识别出目标图像A、B、C中的人像，获取该目标图像A中的人像的深度信息为50厘米，目标图像B中的人像的深度信息为100厘米，目标图像C中的人像的深度信息为150厘米，按照深度信息对目标图像A、B、C排列，可以以电子设备的显示屏所在平面建立xy轴，垂直于xy轴所在平面指向显示屏内的方向为z轴建立xyz坐标系，在z轴方向上将目标图像A、B、C按照从近到远排列，得到图像序列ABC，然后生成三维相册。

应该理解的是，虽然图2至图5的流程图中的各个步骤按照箭头的指示依次显示，但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明，这些步骤的执行并没有严格的顺序限制，这些步骤可以以其它的顺序执行。而且，图2至图5中的至少一部分步骤可以包括多个子步骤或者多个阶段，这些子步骤或者阶段并不必然是在同一时刻执行完成，而是可以在不同的时刻执行，这些子步骤或者阶段的执行顺序也不必然是依次进行，而是可以与其它步骤或者其它步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。

图7为一个实施例中图像处理装置的结构框图。如图7所示，在一个实施例中，一种图像处理装置，包括深度信息获取模块702、排列模块704和生成模块706。其中：

深度信息获取模块702用于获取至少两张目标图像的深度信息。

排列模块704用于按照该深度信息将该至少两张目标图像排列，得到目标图像序列。

生成模块706用于根据该目标图像序列将至少两张目标图像生成三维相册。

本实施例中图像处理方法，通过获取至少两张目标图像的深度信息，按照深度信息对至少两张目标图像进行排列，得到目标图像序列，根据目标图像序列将至少两张目标图像生成对应的三维相册，实现了三维相册的制作，满足了用户个性化需求，且制作的三维相册展示有层次，便于观看。

在一个实施例中，深度信息获取模块702包括划分单元、第一生成单元和第一确定单元。

划分单元用于获取一帧候选图像，将该候选图像划分为预设数量的区域。

第一生成单元用于提取所述候选图像的各个区域，生成各个区域分别对应的目标图像。

第一确定单元用于获取所述各个区域的深度信息，将各个区域的深度信息作为对应的目标图像的深度信息。

在一个实施例中，深度信息获取模块702包括第二生成单元和第二确定单元。

第二生成单元用于获取一帧候选图像，识别得到该候选图像中的对象，生成各个对象分别对应的目标图像。

第二确定单元用于获取所述各个对象的深度信息，将该对象的深度信息作为对应的目标图像的深度信息。

在一个实施例中，第二生成单元还用于通过彩色摄像头拍摄一场景，得到一帧候选图像，识别所述候选图像中的各个对象，生成所述各个对象对应的目标图像。

第二确定单元还用于通过深度摄像头拍摄同一场景，得到与所述一帧候选图像对应的深度图像，根据所述深度图像获取所述各个对象的深度信息，将所述各个对象的深度信息作为对应的目标图像的深度信息。

在一个实施例中，第二确定单元还用于获取所述候选图像中对象所占的各个像素点的深度信息，获取所述对象所占的各个像素点的深度信息的平均值或最大值或最小值或中值，将所述对象所占的各个像素点的深度信息的平均值或最大值或最小值或中值作为所述对象所对应的目标图像的深度信息。

在一个实施例中，深度信息获取模块还用于从图像集合中获取至少两帧图像，将每帧图像作为一张目标图像，识别各个目标图像中的人像和/或景物；其中，所述图像集合用于存储多帧具有深度信息的图像；获取各个目标图像中的人像和/或景物的深度信息，根据各个目标图像中的人像和/或景物的深度信息确定各个该目标图像的深度信息。

在一个实施例中，深度信息获取模块还用于获取该至少两张目标图像中每张目标图像所对应的深度图像；根据该深度图像获取对应的目标图像中的人像或景物的深度信息。

在一个实施例中，深度信息获取模块还用于通过彩色摄像头拍摄一场景，得到一帧图像，将该一帧图像作为一张目标图像，通过深度摄像头拍摄同一场景，得到与该目标图像对应的深度图像，根据该深度图像获取该目标图像的深度信息。

关于图像处理装置的具体限定可以参见上文中对于图像处理方法的限定，在此不再赘述。上述图像处理装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于电子设备中的处理器中，也可以以软件形式存储于电子设备中的存储器中，以便于处理器调用执行以上各个模块对应的操作。

图8为一个实施例中电子设备的内部结构示意图。如图8所示，该电子设备包括通过系统总线连接的处理器和存储器。其中，该处理器用于提供计算和控制能力，支撑整个电子设备的运行。存储器可包括非易失性存储介质及内存储器。非易失性存储介质存储有操作系统和计算机程序。该计算机程序可被处理器所执行，以用于实现以下各个实施例所提供的一种图像处理方法。内存储器为非易失性存储介质中的操作系统计算机程序提供高速缓存的运行环境。该电子设备可以是手机、平板电脑或者个人数字助理或穿戴式设备等。

本申请实施例中提供的图像处理装置中的各个模块的实现可为计算机程序的形式。该计算机程序可在终端或服务器上运行。该计算机程序构成的程序模块可存储在终端或服务器的存储器上。该计算机程序被处理器执行时，实现本申请实施例中所描述方法的步骤。

本申请实施例还提供一种电子设备。上述电子设备中包括图像处理电路，图像处理电路可以利用硬件和/或软件组件实现，可包括定义ISP(Image Signal Processing，图像信号处理)管线的各种处理单元。图9为一个实施例中图像处理电路的示意图。如图9所示，为便于说明，仅示出与本申请实施例相关的图像处理技术的各个方面。

如图9所示，图像处理电路包括第一ISP处理器930、第二ISP处理器940和控制逻辑器950。第一摄像头910包括一个或多个第一透镜912和第一图像传感器914。第一图像传感器914可包括色彩滤镜阵列(如Bayer滤镜)，第一图像传感器914可获取用第一图像传感器914的每个成像像素捕捉的光强度和波长信息，并提供可由第一ISP处理器930处理的一组图像数据。第二摄像头920包括一个或多个第二透镜922和第二图像传感器924。第二图像传感器924可包括色彩滤镜阵列(如Bayer滤镜)，第二图像传感器924可获取用第二图像传感器924的每个成像像素捕捉的光强度和波长信息，并提供可由第二ISP处理器940处理的一组图像数据。该第一摄像头910和第二摄像头920中有一个可以是深度摄像头。

第一摄像头910采集的第一图像传输给第一ISP处理器930进行处理，第一ISP处理器930处理第一图像后，可将第一图像的统计数据(如图像的亮度、图像的反差值、图像的颜色等)发送给控制逻辑器950，控制逻辑器950可根据统计数据确定第一摄像头910的控制参数，从而第一摄像头910可根据控制参数进行自动对焦、自动曝光等操作。第一图像经过第一ISP处理器930进行处理后可存储至图像存储器960中，第一ISP处理器930也可以读取图像存储器960中存储的图像以对进行处理。另外，第一图像经过ISP处理器930进行处理后可直接发送至显示器970进行显示，显示器970也可以读取图像存储器960中的图像以进行显示。

其中，第一ISP处理器930按多种格式逐个像素地处理图像数据。例如，每个图像像素可具有8、10、12或14比特的位深度，第一ISP处理器930可对图像数据进行一个或多个图像处理操作、收集关于图像数据的统计信息。其中，图像处理操作可按相同或不同的位深度计算精度进行。

图像存储器960可为存储器装置的一部分、存储设备、或电子设备内的独立的专用存储器，并可包括DMA(Direct Memory Access，直接直接存储器存取)特征。

当接收到来自第一图像传感器914接口时，第一ISP处理器930可进行一个或多个图像处理操作，如时域滤波。处理后的图像数据可发送给图像存储器960，以便在被显示之前进行另外的处理。第一ISP处理器930从图像存储器960接收处理数据，并对所述处理数据进行RGB和YCbCr颜色空间中的图像数据处理。第一ISP处理器930处理后的图像数据可输出给显示器970，以供用户观看和/或由图形引擎或GPU(Graphics Processing Unit，图形处理器)进一步处理。此外，第一ISP处理器930的输出还可发送给图像存储器960，且显示器970可从图像存储器960读取图像数据。在一个实施例中，图像存储器960可被配置为实现一个或多个帧缓冲器。

第一ISP处理器930确定的统计数据可发送给控制逻辑器950。例如，统计数据可包括自动曝光、自动白平衡、自动聚焦、闪烁检测、黑电平补偿、第一透镜912阴影校正等第一图像传感器914统计信息。控制逻辑器950可包括执行一个或多个例程(如固件)的处理器和/或微控制器，一个或多个例程可根据接收的统计数据，确定第一摄像头910的控制参数及第一ISP处理器930的控制参数。例如，第一摄像头910的控制参数可包括增益、曝光控制的积分时间、防抖参数、闪光控制参数、第一透镜912控制参数(例如聚焦或变焦用焦距)、或这些参数的组合等。ISP控制参数可包括用于自动白平衡和颜色调整(例如，在RGB处理期间)的增益水平和色彩校正矩阵，以及第一透镜912阴影校正参数。

同样地，第二摄像头920采集的第二图像传输给第二ISP处理器940进行处理，第二ISP处理器940处理第一图像后，可将第二图像的统计数据(如图像的亮度、图像的反差值、图像的颜色等)发送给控制逻辑器950，控制逻辑器950可根据统计数据确定第二摄像头920的控制参数，从而第二摄像头920可根据控制参数进行自动对焦、自动曝光等操作。第二图像经过第二ISP处理器940进行处理后可存储至图像存储器960中，第二ISP处理器940也可以读取图像存储器960中存储的图像以对进行处理。另外，第二图像经过ISP处理器940进行处理后可直接发送至显示器970进行显示，显示器970也可以读取图像存储器960中的图像以进行显示。第二摄像头920和第二ISP处理器940也可以实现如第一摄像头910和第一ISP处理器930所描述的处理过程。

在一个实施例中，提供了一种电子设备，包括存储器和处理器，存储器中存储有计算机程序，该处理器执行计算机程序时实现上述图像处理方法的步骤。

在一个实施例中，提供了一种计算机可读存储介质，其上存储有计算机程序，计算机程序被处理器执行时实现上述图像处理方法的步骤。

本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，所述的计算机程序可存储于一非易失性计算机可读取存储介质中，该计算机程序在执行时，可包括如上述各方法的实施例的流程。其中，本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用，均可包括非易失性和/或易失性存储器。非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM)或者外部高速缓冲存储器。作为说明而非局限，RAM以多种形式可得，诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDRSDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink)DRAM(SLDRAM)、存储器总线(Rambus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)等。

以上实施例的各技术特征可以进行任意的组合，为使描述简洁，未对上述实施例中的各个技术特征所有可能的组合都进行描述，然而，只要这些技术特征的组合不存在矛盾，都应当认为是本说明书记载的范围。

以上所述实施例仅表达了本申请的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对发明专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本申请构思的前提下，还可以做出若干变形和改进，这些都属于本申请的保护范围。因此，本申请专利的保护范围应以所附权利要求为准。

Claims (10)

1.一种图像处理方法，所述方法包括：

获取至少两张目标图像的深度信息；

按照所述深度信息将所述至少两张目标图像排序，得到目标图像序列；

根据所述目标图像序列将所述至少两张目标图像生成三维相册。

2.根据权利要求1所述的方法，其特征在于，所述获取至少两张目标图像的深度信息，包括：

获取一帧候选图像，将所述候选图像划分为预设数量的区域；

提取所述候选图像的各个区域，生成各个区域分别对应的目标图像；

获取所述各个区域的深度信息，将所述各个区域的深度信息作为对应的目标图像的深度信息。

3.根据权利要求1所述的方法，其特征在于，所述获取至少两张目标图像的深度信息，包括：

获取一帧候选图像，识别得到所述候选图像中的各个对象，生成所述各个对象分别对应的目标图像；

获取所述各个对象的深度信息，将所述各个对象的深度信息作为对应的目标图像的深度信息。

4.根据权利要求3所述的方法，其特征在于，所述获取一帧候选图像，识别得到所述候选图像中的各个对象，生成所述各个对象对应的目标图像，包括：

通过彩色摄像头拍摄一场景，得到一帧候选图像，识别所述候选图像中的各个对象，生成所述各个对象对应的目标图像；

所述获取所述各个对象的深度信息，将所述各个对象的深度信息作为对应的目标图像的深度信息，包括：

通过深度摄像头拍摄同一场景，得到与所述一帧候选图像对应的深度图像，根据所述深度图像获取所述各个对象的深度信息，将所述各个对象的深度信息作为对应的目标图像的深度信息。

5.根据权利要求3或4所述的方法，其特征在于，所述获取所述各个对象的深度信息，将所述各个对象的深度信息作为对应的目标图像的深度信息，包括：

获取所述候选图像中对象所占的各个像素点的深度信息，获取所述对象所占的各个像素点的深度信息的平均值或最大值或最小值或中值，将所述对象所占的各个像素点的深度信息的平均值或最大值或最小值或中值作为所述对象所对应的目标图像的深度信息。

6.根据权利要求1所述的方法，其特征在于，所述获取至少两张目标图像的深度信息，包括：

从图像集合中获取至少两帧图像，将每帧图像作为一张目标图像，识别各个目标图像中的人像和/或景物；其中，所述图像集合用于存储多帧具有深度信息的图像；

获取各个目标图像中的人像和/或景物的深度信息，根据所述各个目标图像中的人像和/或景物的深度信息确定各个目标图像的深度信息。

7.根据权利要求6所述的方法，其特征在于，所述获取各个目标图像中的人像和/或景物的深度信息，包括：

获取所述至少两张目标图像中每张目标图像所对应的深度图像；

根据所述深度图像获取对应的目标图像中的人像和/或景物的深度信息。

8.一种图像处理装置，其特征在于，所述装置包括：

深度信息获取模块，用于获取至少两张目标图像的深度信息；

排列模块，用于按照所述深度信息将所述至少两张目标图像排序，得到目标图像序列；

生成模块，用于根据所述目标图像序列将所述至少两张目标图像生成三维相册。

9.一种电子设备，包括存储器和处理器，所述存储器存储有计算机程序，其特征在于，所述处理器执行所述计算机程序时实现权利要求1至7中任一项所述方法的步骤。

10.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现权利要求1至7中任一项所述的方法的步骤。