CN110460773A - 图像处理方法和装置、电子设备、计算机可读存储介质 - Google Patents

Abstract

本申请涉及一种图像处理方法、装置、电子设备、计算机可读存储介质，包括：从电子设备拍摄所得到的原始图像中获取除去预览图像区域之外的周围区域，对周围区域进行主体检测，得到第一主体检测结果。当第一主体检测结果的权重高于预览图像区域中的第二主体检测结果的权重时，则将包含第一主体检测结果的区域作为新的预览图像，将新的预览图像进行显示。可以对预览图像区域之外的周围区域进行主体检测，切换预览图像以显示不在原始预览图像区域的主体。

Description

图像处理方法和装置、电子设备、计算机可读存储介质

技术领域

本申请涉及计算机技术领域，特别是涉及一种图像处理方法和装置、电子设备、计算机可读存储介质。

背景技术

随着摄像技术的不断发展，人们对电子设备摄像头的拍照要求日益提高。摄像头在拍照过程中有时需要检测到主体，传统的主体检测方式无法准确的检测出图像中的主体。

发明内容

本申请实施例提供一种图像处理方法、装置、电子设备、计算机可读存储介质，可以提高拍照过程中主体检测的准确性。

一种图像处理方法，包括：

从电子设备拍摄所得到的原始图像中获取除去预览图像区域之外的周围区域；

对所述周围区域进行主体检测，得到第一主体检测结果；

当所述第一主体检测结果的权重高于所述预览图像区域中的第二主体检测结果的权重时，则将包含所述第一主体检测结果的区域作为新的预览图像；

将所述新的预览图像进行显示。

一种图像处理装置，包括：

周围区域获取模块，用于从电子设备拍摄所得到的原始图像中获取除去预览图像区域之外的周围区域；

主体检测模块，用于对所述周围区域进行主体检测，得到第一主体检测结果；

预览图像确定模块，用于当所述第一主体检测结果的权重高于所述预览图像区域中的第二主体检测结果的权重时，则将包含所述第一主体检测结果的区域作为新的预览图像；

预览图像显示模块，用于将所述新的预览图像进行显示。

一种电子设备，包括存储器及处理器，所述存储器中储存有计算机程序，所述计算机程序被所述处理器执行时，使得所述处理器执行如上方法的步骤。

一种计算机可读存储介质，其上存储有计算机程序，计算机程序被处理器执行时实现如上方法的步骤。

上述图像处理方法、装置、电子设备、计算机可读存储介质，从电子设备拍摄所得到的原始图像中获取除去预览图像区域之外的周围区域，对周围区域进行主体检测，得到第一主体检测结果。当第一主体检测结果的权重高于预览图像区域中的第二主体检测结果的权重时，则将包含第一主体检测结果的区域作为新的预览图像，将新的预览图像进行显示。可以对预览图像区域之外的周围区域进行主体检测，切换预览图像以显示不在原始预览图像区域的主体。

附图说明

为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为一个实施例中图像处理方法的应用环境图；

图2A为一个实施例中图像处理方法的流程图；

图2B为一个实施例中图像处理效果示意图；

图3为另一个实施例中图像处理方法的流程图；

图4为图2A中当第一主体检测结果的权重高于预览图像区域中的第二主体检测结果的权重时，则将包含第一主体检测结果的区域作为新的预览图像方法的流程图；

图5为一个实施例中从原始图像中确定预览图像的方法的示意图；

图6为一个具体的实施例中像处理方法的流程图；

图7为一个实施例中图像处理装置的结构框图；

图8为一个实施例中电子设备的内部结构示意图；

图9为一个实施例中图像处理电路的示意图。

具体实施方式

为了使本申请的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本申请进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本申请，并不用于限定本申请。

可以理解，本申请所使用的术语“第一”、“第二”等可在本文中用于描述各种元件，但这些元件不受这些术语限制。这些术语仅用于将第一个元件与另一个元件区分。举例来说，在不脱离本申请的范围的情况下，可以将第一摄像头称为第二摄像头，且类似地，可将第二摄像头称为第一摄像头。第一摄像头和第二摄像头两者都是摄像头，但其不是同一摄像头。

图1为一个实施例中图像处理方法的应用环境示意图。如图1所示，该应用环境包括电子设备100。电子设备100包含有至少一个第一摄像头110和至少一个第二摄像头120。电子设备100可以对从电子设备拍摄所得到的原始图像中获取除去预览图像区域之外的周围区域，对周围区域进行主体检测，得到第一主体检测结果。当第一主体检测结果的权重高于预览图像区域中的第二主体检测结果的权重时，则将包含第一主体检测结果的区域作为新的预览图像，将新的预览图像进行显示。可以理解的是，上述电子设备100可以不限于是各种手机、电脑、可携带设备等。

图2A为一个实施例中图像处理方法的流程图，如图2A所示，图像处理方法包括步骤220至步骤280。

步骤220，从电子设备拍摄所得到的原始图像中获取除去预览图像区域之外的周围区域。

原始图像指的是由电子设备的摄像模组对拍摄场景进行拍摄获取的RGB图像，该原始图像的显示范围与摄像模组所能够捕获到的图像信息的范围是一致的。一般情况下，原始图像的显示范围是大于或等于显示在电子设备的图像显示界面上的预览图像的范围。该预览图像一般与电子设备最终输出的图像的显示范围一致，所以原始图像的显示范围也是大于或等于电子设备最终输出的图像的显示范围，以上图像均是在同比例的情况下进行比较。

电子设备在拍摄时，一般自动会从原始图像中截取出预览图像，将预览图像显示在电子设备的显示界面上。从原始图像中截取出预览图像的过程，可以是根据对原始图像进行主体检测所得的主体检测结果，将主体检测结果显示在预览图像中。也可以是对原始图像的中心区域作为预览图像在显示界面上进行显示。对于原始图像中除去预览图像区域之外的周围区域并不在显示界面上进行直观地显示，而当周围区域也存在主体时，或周围区域突然闯入一个主体时，此时原始的预览图像就不能够对原始图像中除去预览图像区域之外的周围区域的主体进行准确地显示。

因此，为了对原始图像中除去预览图像区域之外的周围区域的主体进行准确地显示，就需要从电子设备拍摄所得到的原始图像中获取除去预览图像区域之外的周围区域。

步骤240，对周围区域进行主体检测，得到第一主体检测结果。

对原始图像中获取除去预览图像区域之外的周围区域进行主体检测，得到第一主体检测结果。原始图像中获取除去预览图像区域之外的周围区域包含几个主体，则经过主体检测之后就会对应生成几个主体检测结果。一个主体检测结果由两部分构成，其中一部分可以是指包含一个主体的全部区域的检测框，例如，包含一只狗的全身的矩形检测框，当然，该检测框还可以是圆形、椭圆形、梯形等其他平面图形。另一部分是对该检测框进行主体检测出的主体，例如，人、花、猫、狗、牛、蓝天、白云、背景等。其中，主体检测也可以称之为主体识别的过程具体如下：

第一步，获取可见光图。

其中，主体检测(salient object detection)是指面对一个场景时，自动地对感兴趣区域进行处理而选择性的忽略不感兴趣区域。感兴趣区域称为主体区域。可见光图是指RGB(Red、Green、Blue)图像。可通过彩色摄像头拍摄任意场景得到彩色图像，即RGB图像。该可见光图可为电子设备本地存储的，也可为其他设备存储的，也可以为从网络上存储的，还可为电子设备实时拍摄的，不限于此。具体地，电子设备的ISP处理器或中央处理器可从本地或其他设备或网络上获取可见光图，或者通过摄像头拍摄一场景得到可见光图。

第二步，生成与该可见光图对应的中心权重图，其中，该中心权重图所表示的权重值从中心到边缘逐渐减小。

其中，中心权重图是指用于记录可见光图中各个像素点的权重值的图。中心权重图中记录的权重值从中心向四边逐渐减小，即中心权重最大，向四边权重逐渐减小。通过中心权重图表征可见光图的图像中心像素点到图像边缘像素点的权重值逐渐减小。

ISP处理器或中央处理器可以根据可见光图的大小生成对应的中心权重图。该中心权重图所表示的权重值从中心向四边逐渐减小。中心权重图可采用高斯函数、或采用一阶方程、或二阶方程生成。该高斯函数可为二维高斯函数。

第三步，将该可见光图和中心权重图输入到主体检测模型中，得到主体区域置信度图，其中，主体检测模型是预先根据同一场景的可见光图、深度图、中心权重图及对应的已标注的主体掩膜图进行训练得到的模型。

其中，主体检测模型是预先采集大量的训练数据，将训练数据输入到包含有初始网络权重的主体检测模型进行训练得到的。每组训练数据包括同一场景对应的可见光图、中心权重图及已标注的主体掩膜图。其中，可见光图和中心权重图作为训练的主体检测模型的输入，已标注的主体掩膜(mask)图作为训练的主体检测模型期望输出得到的真实值(ground truth)。主体掩膜图是用于识别图像中主体的图像滤镜模板，可以遮挡图像的其他部分，筛选出图像中的主体。主体检测模型可训练能够识别检测各种主体，如人、花、猫、狗、背景等。

具体地，ISP处理器或中央处理器可将该可见光图和中心权重图输入到主体检测模型中，进行检测可以得到主体区域置信度图。主体区域置信度图是用于记录主体属于哪种能识别的主体的概率，例如某个像素点属于人的概率是0.8，花的概率是0.1，背景的概率是0.1。

第四步，根据该主体区域置信度图确定该可见光图中的目标主体。

其中，主体是指各种对象，如人、花、猫、狗、牛、蓝天、白云、背景等。目标主体是指需要的主体，可根据需要选择。具体地，ISP处理器或中央处理器可根据主体区域置信度图选取置信度最高或次高等作为可见光图中的主体，若存在一个主体，则将该主体作为目标主体；若存在多个主体，可根据需要选择其中一个或多个主体作为目标主体。

图2B为一个实施例中图像处理效果示意图。如图2B所示，RGB图202中存在一只蝴蝶，将RGB图输入到主体检测模型后得到主体区域置信度图204，然后对主体区域置信度图204进行滤波和二值化得到二值化掩膜图206，再对二值化掩膜图206进行形态学处理和引导滤波实现边缘增强，得到主体掩膜图208。

步骤260，当第一主体检测结果的权重高于预览图像区域中的第二主体检测结果的权重时，则将包含第一主体检测结果的区域作为新的预览图像。

根据主体检测结果的权重序列，比较第一主体检测结果的权重与预览图像区域中的第二主体检测结果的权重的大小。主体检测结果的权重序列可以是预置在电子设备内部的，用于主体检测结果的权重大小的比较。例如，预置了主体检测结果中的主体的权重序列依次为：人>鸟类>狗>猫>花朵，当然，该主体的权重序列只是举例，在其他实施例中这些主体类型不限于此，主体的权重序列也不限于此，且电子设备内部预置的主体的权重序列并不是一成不变的，可以实时进行修订。

其中，第一主体检测结果为对原始图像中获取除去预览图像区域之外的周围区域进行主体检测所得到的。预览图像区域中的第二主体检测结果，可以是在最开始确定预览图像时候进行主体检测所得到的，若在最开始确定预览图像时候未进行主体检测，那么也可以是此时对预览图像进行主体检测所得到的。

具体的，根据主体检测结果的权重序列，比较第一主体检测结果的权重与预览图像区域中的第二主体检测结果的权重的大小。当比较出第一主体检测结果的权重高于预览图像区域中的第二主体检测结果的权重时，则将包含第一主体检测结果的区域作为新的预览图像。即将第一主体检测结果对应的检测框，作为新的预览图像，也可以是将包括第一主体检测结果对应的检测框的区域作为新的预览图像。例如，原始的预览图像中的主体是一只狗，而后来原始图像中除去预览图像区域之外的周围区域出现了一个人，那么显然根据人>鸟类>狗>猫>花朵这种权重序列，则人的权重是大于狗的权重。因此，将包含人的检测框作为新的预览图，替换了原始主体是狗的预览图。当然，也可以是在判断出人的权重是大于狗的权重时，给用户发出提示信息，提示用户是否进行将预览图像从狗切换至人，若用户选择进行切换则将切换至新的预览图像，新的预览图像的主体为人，若用户拒绝进行切换则保留原始的预览图像。

如此，则能够实时锁定整个原始图像中权重高的主体，避免了传统方法只关注直观显示的预览图像区域，而不关注周围区域，导致忽略了周围区域中所出现的权重更高的主体。

步骤280，将新的预览图像进行显示。

在得到了新的预览图像之后，将新的预览图像在电子设备的显示界面上进行显示。

本申请实施例中的图像处理方法，从电子设备拍摄所得到的原始图像中获取除去预览图像区域之外的周围区域，对周围区域进行主体检测，得到第一主体检测结果。当第一主体检测结果的权重高于预览图像区域中的第二主体检测结果的权重时，则将包含第一主体检测结果的区域作为新的预览图像，将新的预览图像进行显示。该图像处理方法能够实时关注到整个原始图像中的主体，不局限于只关注预览图像中的主体。且根据权重序列对周围区域中的主体和预览图像区域中的主体进行权重比较，以权重较高的主体所在的区域作为预览图像，将新的预览图像在电子设备的显示界面上进行显示。能够帮助用户更好的锁定权重高的主体。

在一个实施例中，原始图像为电子设备进行拍摄并在图像传感器上所呈现的图像，图像传感器为电荷耦合器件CCD传感器。

具体的，原始图像指的是由电子设备的摄像模组对拍摄场景进行拍摄获取的RGB图像，该原始图像的显示范围与摄像模组所能够捕获到的图像信息的范围是一致的。原始图像呈现在电子设备的图像传感器上，图像传感器可以是CCD(Charge Coupled Device，电荷耦合器件)传感器，也可以是CMOS(Complementary Metal Oxide Semiconductor)传感器。

本申请实施例中，因为电子设备初始拍摄的原始图像是显示在图像传感器上，一般情况下，原始图像的显示范围是大于显示在电子设备的图像显示界面上的预览图像的范围。所以，为了不局限于预览图像中所显示的主体，就需要对除去预览图像区域之外的周围区域进行主体检测。进而根据权重序列对周围区域中的主体和预览图像区域中的主体进行权重比较，以权重较高的主体所在的区域作为预览图像，将新的预览图像在电子设备的显示界面上进行显示。能够帮助用户更好的锁定权重高的主体。

在一个实施例中，如图3所示，对周围区域进行主体检测，得到第一主体检测结果之后，包括：

步骤250，当第一主体检测结果的权重低于或等于预览图像区域中的第二主体检测结果的权重时，获取用户的选择；

步骤270，根据用户的选择，确定是否将包含第一主体检测结果的区域作为新的预览图像；若是，则将新的预览图像进行显示。

具体的，根据主体检测结果的权重序列，比较第一主体检测结果的权重与预览图像区域中的第二主体检测结果的权重的大小。主体检测结果的权重序列可以是预置在电子设备内部的，用于主体检测结果的权重大小的比较。例如，预置了主体检测结果中的主体的权重序列依次为：人>鸟类>狗>猫>花朵，当然，该主体的权重序列只是举例，在其他实施例中这些主体类型不限于此，主体的权重序列也不限于此，且电子设备内部预置的主体的权重序列并不是一成不变的，可以实时进行修订。

当第一主体检测结果的权重低于或等于预览图像区域中的第二主体检测结果的权重时，电子设备可以向用户发出提示信息，该提示信息中包括第一主体检测结果的主体是什么，以及提示用户是否将包含第一主体检测结果的区域作为新的预览图像。若用户根据提示信息做出选择，确定将包含第一主体检测结果的区域作为新的预览图像，那么根据用户的选择将原始的预览图像切换为包含第一主体检测结果的新的预览图像，并将新的预览图像在电子设备的显示界面上进行显示。若用户根据提示信息做出选择，确定不将包含第一主体检测结果的区域作为新的预览图像，那么根据用户的选择不对预览图像进行切换。

本申请实施例中，当第一主体检测结果的权重低于或等于预览图像区域中的第二主体检测结果的权重时，则此时就需要获取用户的选择，根据用户的选择确定是否将包含第一主体检测结果的区域作为新的预览图像。因为当第一主体检测结果的权重等于预览图像区域中的第二主体检测结果的权重时，此时可以借助于用户的参与，让用户去决定将包含第一主体检测结果的区域作为新的预览图像，还是不切换预览图像。而当第一主体检测结果的权重低于预览图像区域中的第二主体检测结果的权重时，也可以发出提示由用户做出选择，能够更好地满足用户的个性化需求。

当然，当第一主体检测结果的权重低于或等于预览图像区域中的第二主体检测结果的权重时，也可以进一步分别检测第一主体、第二主体在原始图像中的尺寸大小，将尺寸较大的主体显示在预览图像中的优先级也设置为较高。即此时进一步根据优先级顺序来判断将包含哪个主体的区域作为新的预览图像，则优先将包括优先级较高的主体的区域作为预览图像进行展示。

在另一种情况下，当第一主体检测结果的权重低于或等于预览图像区域中的第二主体检测结果的权重时，还可以进一步分别检测第一主体、第二主体在原始图像中的深度信息，由深度信息计算出主体距离电子设备的距离。假定将距离较近的主体显示在预览图像中的优先级设置为较高。即此时进一步根据优先级顺序来判断将包含哪个主体的区域作为新的预览图像，则优先将包括优先级较高的主体的区域作为预览图像进行展示。

还有一种情况，同时结合上述根据主体尺寸所得到的优先级顺序、根据主体距离电子设备的距离的优先级顺序，获取在上述两个优先级顺序中都排在首位的主体，进而将包含该主体的区域作为预览图像进行展示。

在对第一主体、第二主体的权重进行比较之后，再结合主体在原始图像中的尺寸大小、主体距离电子设备的距离等多种因素，综合考虑筛选出包含合适的主体的区域作为预览图像进行展示。这样经过多种因素考虑，所筛选出的主体更加能够符合用户的预期、用户的需求。

在一个实施例中，如图4所示，当第一主体检测结果的权重高于预览图像区域中的第二主体检测结果的权重时，则将包含第一主体检测结果的区域作为新的预览图像，包括：

步骤420，根据主体检测结果的权重序列，判断第一主体检测结果的权重是否高于预览图像区域中的第二主体检测结果的权重；

步骤440，若是，则将包含第一主体检测结果的区域作为新的预览图像。

具体的，主体检测结果的权重序列可以是预置在电子设备内部的，用于主体检测结果的权重大小的比较。当电子设备中暂时还未拍摄照片时(一般为新出厂的电子设备)，电子设备中预置的主体检测结果的权重序列可以是对大量用户所拍摄出的图像进行大数据分析得到主体检测结果的出现概率，并根据出现概率对主体检测结果依次进行排序所得到的序列。此处的主体检测结果指的是拍摄图像中的主体。例如，对大量用户所拍摄出的图像进行大数据分析得到的主体检测结果的出现概率为：人，60％；食物20％；狗20％；花朵5％；其他5％。则可以得到主体检测结果的权重序列依次为：人>食物>狗>花朵>其他。

而当电子设备中已经拍摄了一定数量的照片之后，则就可以直接对该电子设备中已拍摄的照片进行分析得到主体检测结果的出现概率，并根据出现概率对主体检测结果依次进行排序得到权重序列。此处的主体检测结果指的是拍摄图像中的主体。例如，如果一个用户是狗狗爱好者，用户经常用电子设备给狗拍照，甚至比给人拍照的几率还高，那么对该用户的电子设备所拍摄的照片进行分析所得出的主体检测结果的权重序列中狗就会排在首位。对用户的电子设备中已拍摄的照片进行分析得到主体检测结果的权重序列，能够对不同用户的拍摄喜好进行针对性的分析，更好地满足用户的个性化需求。电子设备内部预置的主体的权重序列并不是一成不变的，可以实时进行修订。

在得到了主体检测结果的权重序列之后，根据主体检测结果的权重序列，判断第一主体检测结果的权重是否高于预览图像区域中的第二主体检测结果的权重，若是，则将包含第一主体检测结果的区域作为新的预览图像，将新的预览图像在电子设备的显示界面上进行显示。若否，则依然采用原始的预览图像进行显示。如图5(a)所示，为电子设备的摄像头拍摄并呈现在CCD上的原始图像，原始预览图像为图5(a)中包括人像部分的检测框，即如图5(b)所示，电子设备的显示界面上只显示该包括人像部分的检测框。而采用本申请实施例中的方法后，会对原始图像中除去预览图像区域之外的周围区域(原始图像中除去人像部分的检测框之外的周围区域)进行主体检测，得到第一主体检测结果。该第一主体检测结果对应的检测框中的主体为狗，而对于狗狗爱好者来说，主体检测结果的权重序列中狗就会排在首位。因此，第一主体检测结果(狗)的权重高于预览图像区域中的第二主体检测结果(人)的权重时，则将包含第一主体检测结果(狗)的检测框如图5(c)所示作为新的预览图像，将新的预览图像进行显示。

本申请实施例中，主体检测结果的权重序列可以是对大量用户所拍摄出的图像进行大数据分析得到主体检测结果的出现概率，并根据出现概率对主体检测结果依次进行排序所得到的序列。也可以是对单个用户进行单独分析，对该用户所拍摄出的图像进行分析得到主体检测结果的出现概率，并根据出现概率对主体检测结果依次进行排序所得到的序列。前一种方法所得出的权重序列普适性、稳定性较高，后一种方法素所得到的权重序列针对性较高。根据主体检测结果的权重序列，判断出第一主体检测结果的权重高于预览图像区域中的第二主体检测结果的权重，则说明用户更加关注的主体(即第一主体检测结果)出现在原始图像中除去预览图像区域之外的周围区域，因此，从周围区域中获取包含第一主体检测结果的检测框，将该检测框作为新的预览图像进行显示。能够更加智能化地切换预览图像，将用户更加关注的主体显示在预览图像中。

在一个实施例中，将包含第一主体检测结果的区域作为新的预览图像，包括：

将包含第一主体检测结果和第二主体检测结果的区域作为新的预览图像。

具体的，当第一主体检测结果的权重等于预览图像区域中的第二主体检测结果的权重时，根据权重序列就无法做出选择，此时一种方式是借助于用户的参与，让用户去决定将包含第一主体检测结果的区域作为新的预览图像，还是不切换预览图像。还有另一种方式就是同时将包含第一主体检测结果和第二主体检测结果的区域作为新的预览图像。因为第一主体检测结果的权重等于预览图像区域中的第二主体检测结果的权重，说明用户对这两个主体检测结果的关注度是相同的，那么就可以同时将包含第一主体检测结果和第二主体检测结果的区域作为新的预览图像，满足用户多元化的需求。当然，在同时将包含第一主体检测结果和第二主体检测结果的区域作为新的预览图像之前，会发出提示信息以提示用户做出选择，是否将包含第一主体检测结果的区域作为新的预览图像、或者将同时将包含第一主体检测结果和第二主体检测结果的区域作为新的预览图像，还是不切换预览图像。

本申请实施例中，当第一主体检测结果的权重等于预览图像区域中的第二主体检测结果的权重时，说明用户对这两个主体检测结果的关注度是相同的，那么就可以同时将包含第一主体检测结果和第二主体检测结果的区域作为新的预览图像，满足用户多元化的需求。

在一个实施例中，步骤260，将包含第一主体检测结果的区域作为新的预览图像，包括：

从原始图像中截取包含第一主体检测结果对应的检测框；

将检测框作为新的预览图像，或对检测框进行放大或缩小，将放大或缩小后的检测框作为新的预览图像。

具体的，检测框为原始图像中包含主体的框，该检测框可以是矩形框，当然还可以是圆形、椭圆形、梯形等其他平面图形。其中一种方案是可以直接将该包含该第一主体检测结果的检测框作为预览图像，还有另一种方案是对该检测框进行放大或缩小，将放大或缩小后的检测框作为预览图像。对该检测框进行放大，则检测框中就会包含第一主体检测结果周围更多的背景区域。对该检测框进行缩小，则检测框中就会包含第一主体检测结果周围较少的背景区域。对该检测框进行放大或缩小可以实现更好地呈现该第一主体检测结果，以实现更好的构图效果。

本申请实施例中，从从原始图像中截取包含第一主体检测结果对应的检测框。将检测框作为预览图像，或对检测框进行放大或缩小，将放大或缩小后的检测框作为预览图像。对该检测框进行放大或缩小，可以调整检测框中所包含的第一主体检测结果周围的背景区域的大小，便可以满足用户的不同需求，呈现出不同的图像效果。

在一个实施例中，主体检测结果的权重序列的生成过程，包括：

根据用户的拍摄喜好对主体检测结果的权重进行配置，得到主体检测结果的权重序列。

本申请实施例中，对用户的电子设备中已拍摄的照片进行主体检测得到主体检测结果，根据用户的拍摄喜好对主体检测结果的权重进行配置，得到主体检测结果的权重序列。用户的拍摄喜好可以是由用户自己输入至电子设备中，以备使用，也可以是对用户的个人注册信息进行调查所得到的喜好分析。根据用户的拍摄喜好对主体检测结果的权重进行配置，得到主体检测结果的权重序列，该权重序列能够更好地满足用户的个性化需求。

在一个具体的实施例中，以电子设备包含至少一个第一摄像头110和至少一个第二摄像头120为例进行说明，如图6所示，

步骤602，从电子设备拍摄所得到的原始图像中获取除去预览图像区域之外的周围区域；

步骤604，对周围区域进行主体检测，得到第一主体检测结果；

步骤606，根据主体检测结果的权重序列，判断第一主体检测结果的权重是否高于预览图像区域中的第二主体检测结果的权重；

步骤608，若是，将包含第一主体检测结果的区域作为新的预览图像，将新的预览图像进行显示。

步骤610，若否，进一步判断第一主体检测结果的权重是否等于预览图像区域中的第二主体检测结果的权重；

步骤612，若是，将包含第一主体检测结果和第二主体检测结果的区域作为新的预览图像。

步骤614，若第一主体检测结果的权重小于预览图像区域中的第二主体检测结果的权重，则获取用户的选择；

步骤616，根据用户的选择，确定是否将包含第一主体检测结果的区域作为新的预览图像，若是，则将新的预览图像进行显示。

本申请实施例中，从电子设备拍摄所得到的原始图像中获取除去预览图像区域之外的周围区域，对周围区域进行主体检测，得到第一主体检测结果。根据主体检测结果的权重序列，判断第一主体检测结果的权重是否高于预览图像区域中的第二主体检测结果的权重。若是，将包含第一主体检测结果的区域作为新的预览图像，将新的预览图像进行显示。能够实时锁定整个原始图像中权重高的主体，避免了传统方法只关注直观显示的预览图像区域，而不关注周围区域，导致忽略了周围区域中所出现的权重更高的主体。

应该理解的是，虽然图6的流程图中的各个步骤按照箭头的指示依次显示，但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明，这些步骤的执行并没有严格的顺序限制，这些步骤可以以其它的顺序执行。而且，图6中的至少一部分步骤可以包括多个子步骤或者多个阶段，这些子步骤或者阶段并不必然是在同一时刻执行完成，而是可以在不同的时刻执行，这些子步骤或者阶段的执行顺序也不必然是依次进行，而是可以与其它步骤或者其它步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。

在一个实施例中，如图7所示，提供了一种图像处理装置700，包括：周围区域获取模块720、主体检测模块740、预览图像确定模块760及预览图像显示模块780。其中，

周围区域获取模块720，用于从电子设备拍摄所得到的原始图像中获取除去预览图像区域之外的周围区域；

主体检测模块740，用于对周围区域进行主体检测，得到第一主体检测结果；

预览图像确定模块760，用于当第一主体检测结果的权重高于预览图像区域中的第二主体检测结果的权重时，则将包含第一主体检测结果的区域作为新的预览图像；

预览图像显示模块780，用于将新的预览图像进行显示。

在一个实施例中，原始图像为电子设备进行拍摄并在图像传感器上所呈现的图像，图像传感器为电荷耦合器件CCD传感器。

在一个实施例中，提供了一种图像处理装置700，预览图像确定模块760，还用于当第一主体检测结果的权重低于或等于预览图像区域中的第二主体检测结果的权重时，获取用户的选择；根据用户的选择，确定是否将包含第一主体检测结果的区域作为新的预览图像。

在一个实施例中，预览图像确定模块760，还用于根据主体检测结果的权重序列，判断第一主体检测结果的权重是否高于预览图像区域中的第二主体检测结果的权重；若是，则将包含第一主体检测结果的区域作为新的预览图像。

在一个实施例中，预览图像确定模块760，还用于将包含第一主体检测结果和第二主体检测结果的区域作为新的预览图像。

在一个实施例中，预览图像确定模块760，还用于从原始图像中截取包含第一主体检测结果对应的检测框；将检测框作为新的预览图像，或对检测框进行放大或缩小，将放大或缩小后的检测框作为新的预览图像。

在一个实施例中，主体检测结果的权重序列的生成过程，包括：

根据用户的拍摄喜好对主体检测结果的权重进行配置，得到主体检测结果的权重序列。

上述图像处理装置中各个模块的划分仅用于举例说明，在其他实施例中，可将图像处理装置按照需要划分为不同的模块，以完成上述图像处理装置的全部或部分功能。

图8为一个实施例中电子设备的内部结构示意图。如图8所示，该电子设备包括通过系统总线连接的处理器和存储器。其中，该处理器用于提供计算和控制能力，支撑整个电子设备的运行。存储器可包括非易失性存储介质及内存储器。非易失性存储介质存储有操作系统和计算机程序。该计算机程序可被处理器所执行，以用于实现以下各个实施例所提供的一种图像处理方法。内存储器为非易失性存储介质中的操作系统计算机程序提供高速缓存的运行环境。该电子设备可以是手机、平板电脑或者个人数字助理或穿戴式设备等。

本申请实施例中提供的图像处理装置中的各个模块的实现可为计算机程序的形式。该计算机程序可在终端或服务器上运行。该计算机程序构成的程序模块可存储在终端或服务器的存储器上。该计算机程序被处理器执行时，实现本申请实施例中所描述方法的步骤。

本申请实施例还提供一种电子设备。上述电子设备中包括图像处理电路，图像处理电路可以利用硬件和/或软件组件实现，可包括定义ISP(Image Signal Processing，图像信号处理)管线的各种处理单元。图9为一个实施例中图像处理电路的示意图。如图9所示，为便于说明，仅示出与本申请实施例相关的图像处理技术的各个方面。

如图9所示，图像处理电路包括第一ISP处理器930、第二ISP处理器940和控制逻辑器950。第一摄像头910包括一个或多个第一透镜912和第一图像传感器914。第一图像传感器914可包括色彩滤镜阵列(如Bayer滤镜)，第一图像传感器914可获取用第一图像传感器914的每个成像像素捕捉的光强度和波长信息，并提供可由第一ISP处理器930处理的一组图像数据。第二摄像头920包括一个或多个第二透镜922和第二图像传感器924。第二图像传感器924可包括色彩滤镜阵列(如Bayer滤镜)，第二图像传感器924可获取用第二图像传感器924的每个成像像素捕捉的光强度和波长信息，并提供可由第二ISP处理器940处理的一组图像数据。

第一摄像头910采集的第一图像传输给第一ISP处理器930进行处理，第一ISP处理器930处理第一图像后，可将第一图像的统计数据(如图像的亮度、图像的反差值、图像的颜色等)发送给控制逻辑器950，控制逻辑器950可根据统计数据确定第一摄像头910的控制参数，从而第一摄像头910可根据控制参数进行自动对焦、自动曝光等操作。第一图像经过第一ISP处理器930进行处理后可存储至图像存储器960中，第一ISP处理器930也可以读取图像存储器960中存储的图像以对进行处理。另外，第一图像经过ISP处理器930进行处理后可直接发送至显示器970进行显示，显示器970也可以读取图像存储器960中的图像以进行显示。

其中，第一ISP处理器930按多种格式逐个像素地处理图像数据。例如，每个图像像素可具有8、10、12或14比特的位深度，第一ISP处理器930可对图像数据进行一个或多个图像处理操作、收集关于图像数据的统计信息。其中，图像处理操作可按相同或不同的位深度精度进行。

图像存储器960可为存储器装置的一部分、存储设备、或电子设备内的独立的专用存储器，并可包括DMA(Direct Memory Access，直接直接存储器存取)特征。

当接收到来自第一图像传感器914接口时，第一ISP处理器930可进行一个或多个图像处理操作，如时域滤波。处理后的图像数据可发送给图像存储器960，以便在被显示之前进行另外的处理。第一ISP处理器930从图像存储器960接收处理数据，并对处理数据进行RGB和YCbCr颜色空间中的图像数据处理。第一ISP处理器930处理后的图像数据可输出给显示器970，以供用户观看和/或由图形引擎或GPU(Graphics Processing Unit，图形处理器)进一步处理。此外，第一ISP处理器930的输出还可发送给图像存储器960，且显示器970可从图像存储器960读取图像数据。在一个实施例中，图像存储器960可被配置为实现一个或多个帧缓冲器。

第一ISP处理器930确定的统计数据可发送给控制逻辑器950。例如，统计数据可包括自动曝光、自动白平衡、自动聚焦、闪烁检测、黑电平补偿、第一透镜912阴影校正等第一图像传感器914统计信息。控制逻辑器950可包括执行一个或多个例程(如固件)的处理器和/或微控制器，一个或多个例程可根据接收的统计数据，确定第一摄像头910的控制参数及第一ISP处理器930的控制参数。例如，第一摄像头910的控制参数可包括增益、曝光控制的积分时间、防抖参数、闪光控制参数、第一透镜912控制参数(例如聚焦或变焦用焦距)、或这些参数的组合等。ISP控制参数可包括用于自动白平衡和颜色调整(例如，在RGB处理期间)的增益水平和色彩校正矩阵，以及第一透镜912阴影校正参数。

同样地，第二摄像头920采集的第二图像传输给第二ISP处理器940进行处理，第二ISP处理器940处理第一图像后，可将第二图像的统计数据(如图像的亮度、图像的反差值、图像的颜色等)发送给控制逻辑器950，控制逻辑器950可根据统计数据确定第二摄像头920的控制参数，从而第二摄像头920可根据控制参数进行自动对焦、自动曝光等操作。第二图像经过第二ISP处理器940进行处理后可存储至图像存储器960中，第二ISP处理器940也可以读取图像存储器960中存储的图像以对进行处理。另外，第二图像经过ISP处理器940进行处理后可直接发送至显示器970进行显示，显示器970也可以读取图像存储器960中的图像以进行显示。第二摄像头920和第二ISP处理器940也可以实现如第一摄像头910和第一ISP处理器930所描述的处理过程。

电子设备实现该图像处理方法的过程如上述实施例，在此不再赘述。

本申请实施例还提供了一种计算机可读存储介质。一个或多个包含计算机可执行指令的非易失性计算机可读存储介质，当计算机可执行指令被一个或多个处理器执行时，使得处理器执行图像处理方法的步骤。

一种包含指令的计算机程序产品，当其在计算机上运行时，使得计算机执行图像处理方法。

本申请实施例所使用的对存储器、存储、数据库或其它介质的任何引用可包括非易失性和/或易失性存储器。合适的非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM)，它用作外部高速缓冲存储器。作为说明而非局限，RAM以多种形式可得，诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDR SDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink)DRAM(SLDRAM)、存储器总线(Rambus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)。

以上实施例仅表达了本申请的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对本申请专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本申请构思的前提下，还可以做出若干变形和改进，这些都属于本申请的保护范围。因此，本申请专利的保护范围应以所附权利要求为准。

Claims (10)

1.一种图像处理方法，其特征在于，包括：

从电子设备拍摄所得到的原始图像中获取除去预览图像区域之外的周围区域；

对所述周围区域进行主体检测，得到第一主体检测结果；

当所述第一主体检测结果的权重高于所述预览图像区域中的第二主体检测结果的权重时，则将包含所述第一主体检测结果的区域作为新的预览图像；

将所述新的预览图像进行显示。

2.根据权利要求1所述的方法，其特征在于，所述原始图像为所述电子设备进行拍摄并在图像传感器上所呈现的图像，所述图像传感器为电荷耦合器件CCD传感器。

3.根据权利要求1所述的方法，其特征在于，所述对所述周围区域进行主体检测，得到第一主体检测结果之后，包括：

当所述第一主体检测结果的权重低于或等于所述预览图像区域中的第二主体检测结果的权重时，获取用户的选择；

根据所述用户的选择，确定是否将包含所述第一主体检测结果的区域作为新的预览图像；

若是，则将所述新的预览图像进行显示。

4.根据权利要求1所述的方法，其特征在于，所述当所述第一主体检测结果的权重高于所述预览图像区域中的第二主体检测结果的权重时，则将包含所述第一主体检测结果的区域作为新的预览图像，包括：

根据主体检测结果的权重序列，判断所述第一主体检测结果的权重是否高于所述预览图像区域中的第二主体检测结果的权重；

若是，则将包含所述第一主体检测结果的区域作为新的预览图像。

5.根据权利要求1至4中任一项所述的方法，其特征在于，所述将包含所述第一主体检测结果的区域作为新的预览图像，包括：

将包含所述第一主体检测结果和所述第二主体检测结果的区域作为新的预览图像。

6.根据权利要求1至4中任一项所述的方法，其特征在于，所述将包含所述第一主体检测结果的区域作为新的预览图像，包括：

从所述原始图像中截取包含所述第一主体检测结果对应的检测框；

将所述检测框作为新的预览图像，或对所述检测框进行放大或缩小，将放大或缩小后的检测框作为新的预览图像。

7.根据权利要求4所述的方法，其特征在于，所述主体检测结果的权重序列的生成过程，包括：

根据用户的拍摄喜好对主体检测结果的权重进行配置，得到主体检测结果的权重序列。

8.一种图像处理装置，其特征在于，包括：

周围区域获取模块，用于从电子设备拍摄所得到的原始图像中获取除去预览图像区域之外的周围区域；

主体检测模块，用于对所述周围区域进行主体检测，得到第一主体检测结果；

预览图像确定模块，用于当所述第一主体检测结果的权重高于所述预览图像区域中的第二主体检测结果的权重时，则将包含所述第一主体检测结果的区域作为新的预览图像；

预览图像显示模块，用于将所述新的预览图像进行显示。

9.一种电子设备，包括存储器及处理器，所述存储器中储存有计算机程序，其特征在于，所述计算机程序被所述处理器执行时，使得所述处理器执行如权利要求1至7中任一项所述的图像处理方法的步骤。

10.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1至7中任一项所述的方法的步骤。