CN110177212A - 图像处理方法和装置、电子设备、计算机可读存储介质 - Google Patents

Abstract

本申请涉及一种图像处理方法、装置、电子设备、计算机可读存储介质，包括：获取摄像头在未开启防抖功能或第一防抖模式下对拍摄场景所拍摄的第一原始图像，获取摄像头在第二防抖模式下对同一拍摄场景所拍摄的第二原始图像，第二原始图像清晰度高于第一原始图像的清晰度。从第一原始图像中提取非对焦区域，从第二原始图像中提取对焦区域，将第二原始图像中的对焦区域与第一原始图像中的非对焦区域进行拼接合成，得到拼接合成后的目标图像。因为第二原始图像清晰度高于第一原始图像，则从第一原始图像中提取非对焦区域的数据量较小，再从第二原始图像中提取对焦区域，将两者进行拼接合成，就得到了对焦区域相对于非对焦区域更加清晰的目标图像。

Description

图像处理方法和装置、电子设备、计算机可读存储介质

技术领域

本申请涉及计算机技术领域，特别是涉及一种图像处理方法和装置、电子设备、计算机可读存储介质。

背景技术

随着摄像技术的不断发展，人们对电子设备摄像头的拍照要求日益提高。然而当用户手持电子设备进行拍照时，有时候无法避免因为手的抖动或拍摄物的移动而造成所拍摄出的图像不清晰的问题。且对于所拍摄出的图像中的对焦区域也相应出现了不清晰的问题。因此，如何提高拍摄图像中对焦区域的图像质量、满足用户更高的拍照需求，就是一个亟待解决的问题。

发明内容

本申请实施例提供一种图像处理方法、装置、电子设备、计算机可读存储介质，可以提高电子设备的拍照质量、满足更高的拍照需求。

一种图像处理方法，包括：

获取摄像头在未开启防抖功能或第一防抖模式下对拍摄场景所拍摄的第一原始图像；

获取所述摄像头在第二防抖模式下对同一拍摄场景所拍摄的第二原始图像，所述第二原始图像清晰度高于所述第一原始图像的清晰度；

从所述第一原始图像中提取非对焦区域；

从所述第二原始图像中提取对焦区域，将所述第二原始图像中的对焦区域与所述第一原始图像中的非对焦区域进行拼接合成，得到拼接合成后的目标图像。

一种图像处理方法，包括：

获取第一摄像头在未开启防抖功能或第一防抖模式下对拍摄场景所拍摄的第一原始图像；

获取第二摄像头在第二防抖模式下对同一拍摄场景所拍摄的第二原始图像，所述第二原始图像清晰度高于所述第一原始图像的清晰度；

从所述第一原始图像中提取非对焦区域；

从所述第二原始图像中提取对焦区域，将所述第二原始图像中的对焦区域与所述第一原始图像中的非对焦区域进行拼接合成，得到拼接合成后的目标图像。

一种图像处理装置，包括：

第一原始图像获取模块，用于获取摄像头在未开启防抖功能或第一防抖模式下对拍摄场景所拍摄的第一原始图像；

第二原始图像获取模块，用于获取所述摄像头在第二防抖模式下对同一拍摄场景所拍摄的第二原始图像，所述第二原始图像清晰度高于所述第一原始图像的清晰度；

非对焦区域获取模块，用于从所述第一原始图像中提取非对焦区域；

拼接合成模块，用于从所述第二原始图像中提取对焦区域，将所述第二原始图像中的对焦区域与所述第一原始图像中的非对焦区域进行拼接合成，得到拼接合成后的目标图像。

一种电子设备，包括存储器及处理器，所述存储器中储存有计算机程序，所述计算机程序被所述处理器执行时，使得所述处理器执行如上方法的步骤。

一种计算机可读存储介质，其上存储有计算机程序，计算机程序被处理器执行时实现如上方法的步骤。

上述图像处理方法、装置、电子设备、计算机可读存储介质，获取摄像头在未开启防抖功能或第一防抖模式下对拍摄场景所拍摄的第一原始图像，获取摄像头在第二防抖模式下对同一拍摄场景所拍摄的第二原始图像，第二原始图像清晰度高于第一原始图像的清晰度。从第一原始图像中提取非对焦区域，从第二原始图像中提取对焦区域，将第二原始图像中的对焦区域与第一原始图像中的非对焦区域进行拼接合成，得到拼接合成后的目标图像。因为第二原始图像清晰度高于第一原始图像的清晰度，则从第一原始图像中提取非对焦区域的数据量较小，再从第二原始图像中提取对焦区域，将第二原始图像中的对焦区域与第一原始图像中的非对焦区域进行拼接合成，就得到了对焦区域相对于非对焦区域更加清晰的目标图像。且因为从第一原始图像中所提取的非对焦区域的数据量较小，则在进行图像拼接合成的时候，节约了计算机资源，提高了资源利用率。

附图说明

为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1A为一个实施例中图像处理方法的应用环境图；

图1B为一个实施例中OIS模组的结构示意图；

图2为一个实施例中图像处理方法的流程图；

图3为另一个实施例中图像处理方法的流程图；

图4为另一个实施例中图像处理方法的流程图；

图5为另一个实施例中图像处理方法的流程图；

图6为另一个实施例中图像处理方法的流程图；

图7为一个实施例中图像处理装置的结构框图；

图8为另一个实施例中图像处理装置的结构框图；

图9为一个实施例中电子设备的内部结构示意图；

图10为一个实施例中图像处理电路的示意图。

具体实施方式

为了使本申请的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本申请进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本申请，并不用于限定本申请。

可以理解，本申请所使用的术语“第一”、“第二”等可在本文中用于描述各种元件，但这些元件不受这些术语限制。这些术语仅用于将第一个元件与另一个元件区分。举例来说，在不脱离本申请的范围的情况下，可以将第一摄像头称为第二摄像头，且类似地，可将第二摄像头称为第一摄像头。第一摄像头和第二摄像头两者都是摄像头，但其不是同一摄像头。

图1为一个实施例中图像处理方法的应用环境示意图。如图1所示，该应用环境包括电子设备100。电子设备100包含有至少一个摄像头110。电子设备100可以获取摄像头在未开启防抖功能或第一防抖模式下对拍摄场景所拍摄的第一原始图像。获取摄像头在第二防抖模式下对同一拍摄场景所拍摄的第二原始图像，第二原始图像清晰度高于第一原始图像的清晰度。从第一原始图像中提取非对焦区域，从第二原始图像中提取对焦区域，将第二原始图像中的对焦区域与第一原始图像中的非对焦区域进行拼接合成，得到拼接合成后的目标图像。可以理解的是，上述电子设备100可以不限于是各种手机、电脑、可携带设备、相机等。

如图1B所示为OIS(Optical Image Stabilization)模组的结构示意图，陀螺仪将角速度数据传输给OIS驱动芯片，霍尔传感器(hall sensor)用于检测镜头当前的位置并将镜头当前位置反馈给OIS驱动芯片，OIS驱动芯片根据角速度数据、镜头当前的位置这两个数据计算出镜头的移动量，输出信号给马达将镜头移到相应位置，图像传感器(cmossensor)成像后将图像数据传给CPU，进行图像处理。

图2为一个实施例中图像处理方法的流程图，如图2所示，图像处理方法包括步骤202至步骤208。

步骤202，获取摄像头在未开启防抖功能或第一防抖模式下对拍摄场景所拍摄的第一原始图像。

电子设备可以包含有至少一个摄像头，若电子设备包含一个摄像头，则通过该摄像头在未开启防抖功能时对拍摄场景进行拍摄生成第一原始图像，或通过该摄像头在第一防抖模式下对拍摄场景进行拍摄生成第一原始图像，第一原始图像可以是RAW格式的图像。其中，RAW是未经处理、也未经压缩的格式，RAW格式的图像所包含的数据是CMOS或者CCD图像感应器将捕捉到的光源信号转化为数字信号的原始数据。RAW文件是一种记录了数码相机传感器的原始信息，同时记录了由相机拍摄所产生的一些元数据(Metadata，如ISO的设置、快门速度、光圈值、白平衡等)的文件。第一防抖模式可以是采用OIS防抖进行拍摄的模式。

步骤204，获取摄像头在第二防抖模式下对同一拍摄场景所拍摄的第二原始图像，第二原始图像清晰度高于第一原始图像的清晰度。

第二原始图像也是RAW格式的图像。第二防抖模式与第一防抖模式一样，也是采用OIS防抖进行拍摄的模式，但是第二防抖模式相对于第一防抖模式的防抖效果更好，能够在摄像头或拍摄物移动时候，拍摄出清晰度更高的图像。

电子设备在通过该摄像头在未开启防抖功能时对拍摄场景进行拍摄生成第一原始图像，或通过该摄像头在第一防抖模式下对拍摄场景进行拍摄生成第一原始图像之后，继续通过该摄像头在第二防抖模式下对拍摄场景进行拍摄生成第二原始图像，第二原始图像清晰度高于第一原始图像的清晰度。

步骤206，从第一原始图像中提取非对焦区域。

在进行拍摄图像时候，一般都会有对焦区域，对焦区域可以是电子设备自动对焦的对焦区域，也可以是人为手动设置的对焦区域，当然，还可以是通过其他途径所确定的对焦区域。从所拍摄出的图像中除去对焦区域，所剩下的就是非对焦区域。

所以，拍摄第一原始图像时候存在对焦区域。从第一原始图像中提取非对焦区域的方法，可以通过从第一原始图像中除去拍摄第一原始图像时候的对焦区域，所剩下的就是第一原始图像中的非对焦区域。

步骤208，从第二原始图像中提取对焦区域，将第二原始图像中的对焦区域与第一原始图像中的非对焦区域进行拼接合成，得到拼接合成后的目标图像。

同理，从第二原始图像中提取对焦区域的方法，可以通过从第二原始图像中提取拍摄第二原始图像时候的对焦区域即可。且第一原始图像和第二原始图像的对焦区域是相同的，所以将第二原始图像中的对焦区域与第一原始图像中的非对焦区域进行拼接合成，就可以复原拍摄场景的整幅图像，即得到了拼接合成后的目标图像。第一原始图像中的非对焦区域相对于第二原始图像中的非对焦区域的清晰度较低，图像中所包含的数据量也较小。

本实施例中的图像处理方法，获取摄像头在未开启防抖功能或第一防抖模式下对拍摄场景所拍摄的第一原始图像，获取摄像头在第二防抖模式下对同一拍摄场景所拍摄的第二原始图像，第二原始图像清晰度高于第一原始图像的清晰度。从第一原始图像中提取非对焦区域，从第二原始图像中提取对焦区域，将第二原始图像中的对焦区域与第一原始图像中的非对焦区域进行拼接合成，得到拼接合成后的目标图像。

因为第二原始图像清晰度高于第一原始图像的清晰度，则从第一原始图像中提取非对焦区域的数据量较小，再从第二原始图像中提取对焦区域，将第二原始图像中的对焦区域与第一原始图像中的非对焦区域进行拼接合成，就得到了对焦区域相对于非对焦区域更加清晰的目标图像。该方法不需要采用软件对非对焦区域进行虚化处理，由于对焦区域和非对焦区域陀螺仪分别采用了不同的数据输出频率，就可以实现非对焦区域虚化的效果，或不对非对焦区域采用OIS防抖产生模糊，进而体现出对焦区域更加清晰的效果。且因为从第一原始图像中所提取的非对焦区域的数据量较小，则在进行图像拼接合成的时候，不需要获取整张第一原始图像和整张第二原始图像节约了计算机资源，提高了资源利用率。该方法可以针对性地仅对对焦区域提供较好的抖动效果，在节约计算机资源的同时，保证图像质量。

在一个实施例中，第一防抖模式中陀螺仪以第一输出频率采集镜头的角速度数据，将角速度数据传输至OIS驱动以使OIS驱动根据角速度数据驱动马达控制镜头移动至第一目标位置；

第二防抖模式中陀螺仪以第二输出频率采集镜头的角速度数据，将角速度数据传输至OIS驱动以使OIS驱动根据角速度数据驱动马达控制镜头移动至第二目标位置，第一数据输出频率小于第二数据输出频率。

具体的，陀螺仪带宽是指陀螺仪能精确测量镜头的角速度的频率范围。镜头的角速度在输出至陀螺仪之前会经过一个低通滤波器(LPF)，这个低通滤波器的截止频率(3db带宽)通常就是陀螺仪带宽。通过设置陀螺仪的带宽可以设置采样率，进而确定了陀螺仪的数据输出频率。陀螺仪一般采用3.3KHz的数据输出频率来采集镜头的角速度，当然，也可以在该3.3KHz的数据输出频率的上下进行浮动。陀螺仪的数据输出频率越高，则陀螺仪采集角速度的准确性越高，进而OIS防抖的效果越好。

若电子设备包含一个摄像头，则通过该摄像头在第一防抖模式下对拍摄场景进行拍摄生成第一原始图像，其中在第一防抖模式中陀螺仪以第一输出频率采集镜头的角速度数据，将角速度数据传输至OIS驱动，OIS驱动对角速度数据进行计算之后，输出马达控制电流给马达，马达在该马达控制电流下控制镜头移动至第一目标位置。镜头移动至第一目标位置就可以实现一定程度的OIS防抖。例如，陀螺仪的第一输出频率可以是3.3KHz，当然还可以是其他合理的数值。

电子设备继续通过该摄像头在第二防抖模式下对拍摄场景进行拍摄生成第二原始图像，第二防抖模式中陀螺仪以第二输出频率采集镜头的角速度数据，将角速度数据传输至OIS驱动以使OIS驱动根据角速度数据驱动马达控制镜头移动至第二目标位置，第一数据输出频率小于第二数据输出频率，例如，陀螺仪的第二输出频率可以是6.6KHz，当然还可以是大于第一数据输出频率其他任意一合理的数值。电子设备中的镜头移动至第二目标位置所进行拍摄获取的原始图像的清晰度，显然是高于镜头移动至第一目标位置所进行拍摄获取的原始图像。

本申请实施例中，第一防抖模式和第二防抖模式中陀螺仪分别采用不同的数据输出频率采集镜头的角速度数据，陀螺仪的数据输出频率越高，则陀螺仪采集角速度的准确性越高，进而OIS防抖的效果越好。因为第一防抖模式中陀螺仪的数据输出频率小于第二防抖模式中陀螺仪的数据输出频率，所以，显然在第一防抖模式下所拍摄出的第一原始图像的清晰度是小于在第二防抖模式下所拍摄出的第二原始图像的清晰度。从而，获取了不同清晰度的原始图像，供后续选择性使用。

在一个实施例中，如图3所示，在从第一原始图像中提取非对焦区域之后，包括：

步骤210，对非对焦区域进行虚化处理；

步骤212，从第二原始图像中提取对焦区域，将第二原始图像中的对焦区域与第一原始图像中虚化处理后的非对焦区域进行拼接合成，得到拼接合成后的目标图像。

具体的，获取摄像头在未开启防抖功能或第一防抖模式下对拍摄场景所拍摄的第一原始图像，从第一原始图像中提取非对焦区域。然后进一步对非对焦区域进行虚化处理，得到第一原始图像中虚化处理后的非对焦区域。其中，虚化处理就是让所选区域变得模糊。

再获取摄像头在第二防抖模式下对同一拍摄场景所拍摄的第二原始图像，从第二原始图像中提取对焦区域，将第二原始图像中的对焦区域与第一原始图像中虚化处理后的非对焦区域进行拼接合成，得到拼接合成后的目标图像。

本申请实施例中，本来第一原始图像就是在未开启防抖功能或第一防抖模式下对拍摄场景所拍摄的图像，而第二原始图像是在第二防抖模式下对同一拍摄场景所拍摄得到的图像，且第一防抖模式中陀螺仪的数据输出频率小于第二防抖模式中陀螺仪的数据输出频率，所以，显然在第一防抖模式下所拍摄出的第一原始图像的清晰度是小于在第二防抖模式下所拍摄出的第二原始图像的清晰度。从第一原始图像中所提取出的非对焦区域的清晰度较低、数据量较小，然后又对该非对焦区域进一步虚化处理，显然进一步降低清晰地、降低数据量大小。

然后再将第二原始图像中的对焦区域与第一原始图像中虚化处理后的非对焦区域进行拼接合成，得到拼接合成后的目标图像。就得到了对焦区域相对于非对焦区域更加清晰、对比更加明显的目标图像。且因为从第一原始图像中所提取的非对焦区域的数据量较小，则在进行图像拼接合成的时候，节约了计算机资源，提高了资源利用率。

在一个实施例中，如图4所示，在从第一原始图像中提取非对焦区域之后，包括：

步骤214，从第一原始图像中提取第一对焦区域，从第二原始图像中提取第二对焦区域，对第一对焦区域及第二对焦区域进行插值合成，得到插值合成后的对焦区域。

获取摄像头在未开启防抖功能或第一防抖模式下对拍摄场景所拍摄的第一原始图像，从第一原始图像中提取出第一对焦区域和非对焦区域。获取该摄像头在第二防抖模式下对同一拍摄场景所拍摄的第二原始图像，从第二原始图像中提取第二对焦区域，第二原始图像清晰度高于第一原始图像的清晰度。在两次拍摄中的对焦区域是相同的，或近乎相同(即对焦区域重叠区域占比超过预设阈值，如90％)。

对从第一原始图像中提取出第一对焦区域及从第二原始图像中提取出第二对焦区域进行插值合成，得到插值合成后的对焦区域。其中，插值合成指的是将第一原始图像中的第一对焦区域和第二原始图像中的第二对焦区域的同一像素的两值用插值算法取其过渡值，使得插值合成后的图像更清晰。插值合成常用线性插值法，线性插值法是指使用连接两个已知量的直线来确定在这两个已知量之间的一个未知量的值的方法。

步骤216，将插值合成后的对焦区域与第一原始图像中的非对焦区域进行拼接合成，得到拼接合成后的目标图像。

从第一原始图像中已经提取了非对焦区域，然后将插值合成后的对焦区域与第一原始图像中的非对焦区域进行拼接合成，得到拼接合成后的目标图像。

在本实施例中，对从第一原始图像中提取出第一对焦区域及从第二原始图像中提取出第二对焦区域进行插值合成，得到插值合成后的对焦区域。由两张原始图像的对焦区域进行插值合成后的对焦区域的清晰度较高，再将插值合成后的对焦区域与第一原始图像中的非对焦区域进行拼接合成，得到拼接合成后的目标图像。

因为由两张原始图像的对焦区域进行插值合成得到的图像，比单纯从一张原始图像中所提取出的对焦区域的清晰度更高，再与第一原始图像中的非对焦区域进行拼接合成，得到拼接合成后的目标图像。就得到了对焦区域相对于非对焦区域更加清晰、对比更加明显的目标图像。且因为从第一原始图像中所提取的非对焦区域的数据量较小，则在进行图像拼接合成的时候，节约了计算机资源，提高了资源利用率。

一个实施例中，从第一原始图像中提取非对焦区域，包括：

从第一原始图像中通过图像边缘算法提取非对焦区域。

具体的，图像边缘算法包括多种算法，例如，Canny边缘检测算法，canny边缘检测方法是一种基于图像梯度来计算的边缘检测算法，当然，还包括其他图像边缘算法。采用Canny边缘检测算法，需要对原始图像进行灰度化，再对图像进行高斯滤波、用一阶偏导的有限差分来计算梯度的幅值和方向、对梯度幅值进行非极大值抑制及对梯度幅值进行非极大值抑制。从第一原始图像中通过图像边缘算法就可以提取出非对焦区域。此处的非对焦区域是相对于对焦区域而言的，原始图像中除去对焦区域剩下的就是非对焦区域。且对于对焦区域或非对焦区域都可以采用图像边缘算法进行提取。

本申请实施例中，采用图像边缘算法就可以从原始图像中提取出对焦区域或非对焦区域，以便后续进行图像合成。

在一个实施例中，如图5所示，第二原始图像的数目为至少两张；

步骤208，从第二原始图像中提取对焦区域，将第二原始图像中的对焦区域与第一原始图像中的非对焦区域进行拼接合成，得到拼接合成后的目标图像，包括：

步骤208a，从至少两张第二原始图像中提取对焦区域，对所提取的对焦区域进行插值合成，得到插值合成后的对焦区域；

步骤208b，将插值合成后的对焦区域与第一原始图像中的非对焦区域进行拼接合成，得到拼接合成后的目标图像。

具体的，获取摄像头在未开启防抖功能或第一防抖模式下对拍摄场景所拍摄的第一原始图像，从第一原始图像中提取出非对焦区域。获取该摄像头在第二防抖模式下对同一拍摄场景所拍摄的至少两张第二原始图像，从至少两张第二原始图像中分别提取对焦区域，第二原始图像清晰度高于第一原始图像的清晰度，所以从第二原始图像中所提取出的对焦区域的清晰度较高。在两次拍摄中的对焦区域是相同的，或近乎相同(即对焦区域重叠区域占比超过预设阈值，如90％)。

对从至少两张第二原始图像中提取出对焦区域进行插值合成，得到插值合成后的对焦区域。从第一原始图像中已经提取了非对焦区域，然后将插值合成后的对焦区域与第一原始图像中的非对焦区域进行拼接合成，得到拼接合成后的目标图像。第二原始图像清晰度高于第一原始图像的清晰度，所以从第二原始图像中所提取出的对焦区域的清晰度较高，且将至少两张第二原始图像中提取出对焦区域进行插值合成，得到插值合成后的对焦区域。所以，插值合成后的对焦区域得到的对焦区域的清晰度就更高，再与第一原始图像的非对焦区域进行合成。

在本实施例中，对从第一原始图像中提取出第一对焦区域及从第二原始图像中提取出第二对焦区域进行插值合成，得到插值合成后的对焦区域。由两张原始图像的对焦区域进行插值合成后的对焦区域的清晰度较高，再将插值合成后的对焦区域与第一原始图像中的非对焦区域进行拼接合成，得到拼接合成后的目标图像。

因为由至少两张原始图像的对焦区域进行插值合成得到的图像，比单纯从一张原始图像中所提取出的对焦区域的清晰度更高，再与第一原始图像中的非对焦区域进行拼接合成，得到拼接合成后的目标图像。就得到了对焦区域相对于非对焦区域更加清晰、对比更加明显的目标图像。且因为从第一原始图像中所提取的非对焦区域的数据量较小，则在进行图像拼接合成的时候，节约了计算机资源，提高了资源利用率。

在一个具体的实施例中，以电子设备包含1个第一摄像头310和4个第二摄像头为例进行说明，如图3所示，

如图6所示，还提供了一种图像处理方法，包括：

步骤602，获取第一摄像头在未开启防抖功能或第一防抖模式下对拍摄场景所拍摄的第一原始图像。

具体的，电子设备可以包含有至少一个摄像头，若电子设备包含两个摄像头，则通过第一摄像头在未开启防抖功能时对拍摄场景进行拍摄生成第一原始图像，或通过第一摄像头在第一防抖模式下对拍摄场景进行拍摄生成第一原始图像，第一原始图像可以是RAW格式的图像。其中，RAW是未经处理、也未经压缩的格式，RAW格式的图像所包含的数据是CMOS或者CCD图像感应器将捕捉到的光源信号转化为数字信号的原始数据。RAW文件是一种记录了数码相机传感器的原始信息，同时记录了由相机拍摄所产生的一些元数据(Metadata，如ISO的设置、快门速度、光圈值、白平衡等)的文件。第一防抖模式可以是采用OIS防抖进行拍摄的模式。

步骤604，获取第二摄像头在第二防抖模式下对同一拍摄场景所拍摄的第二原始图像，第二原始图像清晰度高于第一原始图像的清晰度。

具体的，通过第二摄像头在第二防抖模式下对同一拍摄场景所拍摄得到第二原始图像，第二原始图像也是RAW格式的图像。第二防抖模式与第一防抖模式一样，也是采用OIS防抖进行拍摄的模式，但是第二防抖模式相对于第一防抖模式的防抖效果更好，能够在摄像头或拍摄物移动时候，拍摄出清晰度更高的图像。

步骤606，从第一原始图像中提取非对焦区域。

具体的，再获取了第一原始图像之后，可以采用图像边缘算法提取出非对焦区域。

步骤608，从第二原始图像中提取对焦区域，将第二原始图像中的对焦区域与第一原始图像中的非对焦区域进行拼接合成，得到拼接合成后的目标图像。

具体的，还可以是从第一原始图像中提取出对焦区域及非对焦区域，从第二原始图像中提取对焦区域，将第一原始图像中的对焦区域与第二原始图像的对焦区域进行插值合成，得到插值合成后的图像。然后，将插值合成后的图像与第一原始图像中的非对焦区域进行图像拼接合成，得到拼接合成后的目标图像。

本申请实施例中，电子设备可以包含有至少一个摄像头，若电子设备包含两个摄像头，则分别通过这两个摄像头在陀螺仪采用不同的输出频率的情况下，拍摄出原始图像。采用两个摄像头分别进行一次拍摄相对于采用同一个摄像头前后进行两次拍摄的效率较高、速度较快。

且因为由两张原始图像的对焦区域进行插值合成得到的图像，比单纯从一张原始图像中所提取出的对焦区域的清晰度更高，再与第一原始图像中的非对焦区域进行拼接合成，得到拼接合成后的目标图像。就得到了对焦区域相对于非对焦区域更加清晰、对比更加明显的目标图像。且因为从第一原始图像中所提取的非对焦区域的数据量较小，则在进行图像拼接合成的时候，节约了计算机资源，提高了资源利用率。

在一个实施例中，如图7所示，一种图像处理装置700，包括：

第一原始图像获取模块702，用于获取摄像头在未开启防抖功能或第一防抖模式下对拍摄场景所拍摄的第一原始图像；

第二原始图像获取模块704，用于获取摄像头在第二防抖模式下对同一拍摄场景所拍摄的第二原始图像，第二原始图像清晰度高于第一原始图像的清晰度；

非对焦区域获取模块706，用于从第一原始图像中提取非对焦区域；

拼接合成模块708，用于从第二原始图像中提取对焦区域，将第二原始图像中的对焦区域与第一原始图像中的非对焦区域进行拼接合成，得到拼接合成后的目标图像。

在一个实施例中，第一防抖模式中陀螺仪以第一输出频率采集镜头的角速度数据，将角速度数据传输至OIS驱动以使OIS驱动根据角速度数据驱动马达控制镜头移动至第一目标位置；

第二防抖模式中陀螺仪以第二输出频率采集镜头的角速度数据，将角速度数据传输至OIS驱动以使OIS驱动根据角速度数据驱动马达控制镜头移动至第二目标位置，第一数据输出频率小于第二数据输出频率。

在一个实施例中，如图8所示，一种图像处理装置700，还包括：非对焦区域虚化处理模块707，用于对非对焦区域进行虚化处理；

拼接合成模块，用于从第二原始图像中提取对焦区域，将第二原始图像中的对焦区域与第一原始图像中虚化处理后的非对焦区域进行拼接合成，得到拼接合成后的目标图像。

在一个实施例中，一种图像处理装置，还包括：对焦区域插值合成模块，用于从第一原始图像中提取第一对焦区域，从第二原始图像中提取第二对焦区域，对第一对焦区域及第二对焦区域进行插值合成，得到插值合成后的对焦区域；

拼接合成模块，用于将插值合成后的对焦区域与第一原始图像中的非对焦区域进行拼接合成，得到拼接合成后的目标图像。

在一个实施例中，非对焦区域获取模块706，还用于从第一原始图像中通过图像边缘算法提取非对焦区域。

在一个实施例中，第二原始图像的数目为至少两张；对焦区域插值合成模块，还用于从至少两张第二原始图像中提取对焦区域，对所提取的对焦区域进行插值合成，得到插值合成后的对焦区域；

拼接合成模块708，还用于将插值合成后的对焦区域与第一原始图像中的非对焦区域进行拼接合成，得到拼接合成后的目标图像。

在一个实施例中，如图7所示，一种图像处理装置700，包括：

第一原始图像获取模块702，用于获取第一摄像头在未开启防抖功能或第一防抖模式下对拍摄场景所拍摄的第一原始图像；

第二原始图像获取模块704，用于获取第二摄像头在第二防抖模式下对同一拍摄场景所拍摄的第二原始图像，第二原始图像清晰度高于第一原始图像的清晰度；

非对焦区域获取模块706，用于从第一原始图像中提取非对焦区域；

拼接合成模块708，用于从第二原始图像中提取对焦区域，将第二原始图像中的对焦区域与第一原始图像中的非对焦区域进行拼接合成，得到拼接合成后的目标图像。

应该理解的是，虽然上述图的流程图中的各个步骤按照箭头的指示依次显示，但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明，这些步骤的执行并没有严格的顺序限制，这些步骤可以以其它的顺序执行。而且，上述图中的至少一部分步骤可以包括多个子步骤或者多个阶段，这些子步骤或者阶段并不必然是在同一时刻执行完成，而是可以在不同的时刻执行，这些子步骤或者阶段的执行顺序也不必然是依次进行，而是可以与其它步骤或者其它步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。

上述图像处理装置中各个模块的划分仅用于举例说明，在其他实施例中，可将图像处理装置按照需要划分为不同的模块，以完成上述图像处理装置的全部或部分功能。

图9为一个实施例中电子设备的内部结构示意图。如图9所示，该电子设备包括通过系统总线连接的处理器和存储器。其中，该处理器用于提供计算和控制能力，支撑整个电子设备的运行。存储器可包括非易失性存储介质及内存储器。非易失性存储介质存储有操作系统和计算机程序。该计算机程序可被处理器所执行，以用于实现以下各个实施例所提供的一种图像处理方法。内存储器为非易失性存储介质中的操作系统计算机程序提供高速缓存的运行环境。该电子设备可以是手机、平板电脑或者个人数字助理或穿戴式设备等。

本申请实施例中提供的图像处理装置中的各个模块的实现可为计算机程序的形式。该计算机程序可在终端或服务器上运行。该计算机程序构成的程序模块可存储在终端或服务器的存储器上。该计算机程序被处理器执行时，实现本申请实施例中所描述方法的步骤。

本申请实施例还提供一种电子设备。上述电子设备中包括图像处理电路，图像处理电路可以利用硬件和/或软件组件实现，可包括定义ISP(Image SignalProcessing，图像信号处理)管线的各种处理单元。图10为一个实施例中图像处理电路的示意图。如图10所示，为便于说明，仅示出与本申请实施例相关的图像处理技术的各个方面。

如图10所示，图像处理电路包括第一ISP处理器1030、第二ISP处理器1040和控制逻辑器1050。第一摄像头1010包括一个或多个第一透镜1012和第一图像传感器1014。第一图像传感器1014可包括色彩滤镜阵列(如Bayer滤镜)，第一图像传感器1014可获取用第一图像传感器1014的每个成像像素捕捉的光强度和波长信息，并提供可由第一ISP处理器1030处理的一组图像数据。第二摄像头1020包括一个或多个第二透镜1022和第二图像传感器1024。第二图像传感器1024可包括色彩滤镜阵列(如Bayer滤镜)，第二图像传感器1024可获取用第二图像传感器1024的每个成像像素捕捉的光强度和波长信息，并提供可由第二ISP处理器1040处理的一组图像数据。

第一摄像头1010采集的第一图像传输给第一ISP处理器1030进行处理，第一ISP处理器1030处理第一图像后，可将第一图像的统计数据(如图像的亮度、图像的反插值、图像的颜色等)发送给控制逻辑器1050，控制逻辑器1050可根据统计数据确定第一摄像头1010的控制参数，从而第一摄像头1010可根据控制参数进行自动对焦、自动曝光等操作。第一图像经过第一ISP处理器1030进行处理后可存储至图像存储器1060中，第一ISP处理器1030也可以读取图像存储器1060中存储的图像以对进行处理。另外，第一图像经过ISP处理器1030进行处理后可直接发送至显示器1070进行显示，显示器1070也可以读取图像存储器1060中的图像以进行显示。

其中，第一ISP处理器1030按多种格式逐个像素地处理图像数据。例如，每个图像像素可具有8、10、12或14比特的位深度，第一ISP处理器1030可对图像数据进行一个或多个图像处理操作、收集关于图像数据的统计信息。其中，图像处理操作可按相同或不同的位深度精度进行。

图像存储器1060可为存储器装置的一部分、存储设备、或电子设备内的独立的专用存储器，并可包括DMA(Direct Memory Access，直接直接存储器存取)特征。

当接收到来自第一图像传感器1014接口时，第一ISP处理器1030可进行一个或多个图像处理操作，如时域滤波。处理后的图像数据可发送给图像存储器1060，以便在被显示之前进行另外的处理。第一ISP处理器1030从图像存储器1060接收处理数据，并对处理数据进行RGB和YCbCr颜色空间中的图像数据处理。第一ISP处理器1030处理后的图像数据可输出给显示器1070，以供用户观看和/或由图形引擎或GPU(Graphics Processing Unit，图形处理器)进一步处理。此外，第一ISP处理器1030的输出还可发送给图像存储器1060，且显示器1070可从图像存储器1060读取图像数据。在一个实施例中，图像存储器1060可被配置为实现一个或多个帧缓冲器。

第一ISP处理器1030确定的统计数据可发送给控制逻辑器1050。例如，统计数据可包括自动曝光、自动白平衡、自动聚焦、闪烁检测、黑电平补偿、第一透镜1012阴影校正等第一图像传感器1014统计信息。控制逻辑器1050可包括执行一个或多个例程(如固件)的处理器和/或微控制器，一个或多个例程可根据接收的统计数据，确定第一摄像头1010的控制参数及第一ISP处理器1030的控制参数。例如，第一摄像头1010的控制参数可包括增益、曝光控制的积分时间、防抖参数、闪光控制参数、第一透镜1012控制参数(例如聚焦或变焦用焦距)、或这些参数的组合等。ISP控制参数可包括用于自动白平衡和颜色调整(例如，在RGB处理期间)的增益水平和色彩校正矩阵，以及第一透镜1012阴影校正参数。

同样地，第二摄像头1020采集的第二图像传输给第二ISP处理器1040进行处理，第二ISP处理器1040处理第一图像后，可将第二图像的统计数据(如图像的亮度、图像的反插值、图像的颜色等)发送给控制逻辑器1050，控制逻辑器1050可根据统计数据确定第二摄像头1020的控制参数，从而第二摄像头1020可根据控制参数进行自动对焦、自动曝光等操作。第二图像经过第二ISP处理器1040进行处理后可存储至图像存储器1060中，第二ISP处理器1040也可以读取图像存储器1060中存储的图像以对进行处理。另外，第二图像经过ISP处理器1040进行处理后可直接发送至显示器1070进行显示，显示器1070也可以读取图像存储器1060中的图像以进行显示。第二摄像头1020和第二ISP处理器1040也可以实现如第一摄像头1010和第一ISP处理器1030所描述的处理过程。

根据本申请实施例提供的图像处理电路可以实现上述图像处理方法。例如，通过第一摄像头1010在未开启防抖功能或第一防抖模式下对拍摄场景进行拍摄，获取到所拍摄的第一原始图像；通过第二摄像头1020在第二防抖模式下对同一拍摄场景进行拍摄，获取到所拍摄的第二原始图像，所述第二原始图像清晰度高于所述第一原始图像的清晰度。第一ISP处理器1030从所述第一原始图像中提取非对焦区域；第二ISP处理器1040从所述第二原始图像中提取对焦区域；将所述第二原始图像中的对焦区域与所述第一原始图像中的非对焦区域进行拼接合成，得到拼接合成后的目标图像。

电子设备实现该图像处理方法的过程如上述实施例，在此不再赘述。

本申请实施例还提供了一种计算机可读存储介质。一个或多个包含计算机可执行指令的非易失性计算机可读存储介质，当计算机可执行指令被一个或多个处理器执行时，使得处理器执行图像处理方法的步骤。

一种包含指令的计算机程序产品，当其在计算机上运行时，使得计算机执行图像处理方法。

本申请实施例所使用的对存储器、存储、数据库或其它介质的任何引用可包括非易失性和/或易失性存储器。合适的非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM)，它用作外部高速缓冲存储器。作为说明而非局限，RAM以多种形式可得，诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDR SDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink)DRAM(SLDRAM)、存储器总线(Rambus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)。

以上实施例仅表达了本申请的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对本申请专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本申请构思的前提下，还可以做出若干变形和改进，这些都属于本申请的保护范围。因此，本申请专利的保护范围应以所附权利要求为准。

Claims (10)

1.一种图像处理方法，其特征在于，包括：

获取摄像头在未开启防抖功能或第一防抖模式下对拍摄场景所拍摄的第一原始图像；

获取所述摄像头在第二防抖模式下对同一拍摄场景所拍摄的第二原始图像，所述第二原始图像清晰度高于所述第一原始图像的清晰度；

从所述第一原始图像中提取非对焦区域；

从所述第二原始图像中提取对焦区域，将所述第二原始图像中的对焦区域与所述第一原始图像中的非对焦区域进行拼接合成，得到拼接合成后的目标图像。

2.根据权利要求1所述的方法，其特征在于，所述第一防抖模式中陀螺仪以第一输出频率采集镜头的角速度数据，将所述角速度数据传输至OIS驱动以使所述OIS驱动根据所述角速度数据驱动马达控制所述镜头移动至第一目标位置；

所述第二防抖模式中陀螺仪以第二输出频率采集镜头的角速度数据，将所述角速度数据传输至OIS驱动以使所述OIS驱动根据所述角速度数据驱动马达控制所述镜头移动至第二目标位置，所述第一数据输出频率小于所述第二数据输出频率。

3.根据权利要求1所述的方法，其特征在于，在所述从所述第一原始图像中提取非对焦区域之后，包括：

对所述非对焦区域进行虚化处理；

从所述第二原始图像中提取对焦区域，将所述第二原始图像中的对焦区域与所述第一原始图像中虚化处理后的非对焦区域进行拼接合成，得到拼接合成后的目标图像。

4.根据权利要求1所述的方法，其特征在于，在所述从所述第一原始图像中提取非对焦区域之后，包括：

从所述第一原始图像中提取第一对焦区域，从所述第二原始图像中提取第二对焦区域，对所述第一对焦区域及所述第二对焦区域进行插值合成，得到插值合成后的对焦区域；

将所述插值合成后的对焦区域与所述第一原始图像中的非对焦区域进行拼接合成，得到拼接合成后的目标图像。

5.根据权利要求1所述的方法，其特征在于，所述从所述第一原始图像中提取非对焦区域，包括：

从所述第一原始图像中通过图像边缘算法提取非对焦区域。

6.根据权利要求1所述的方法，其特征在于，所述第二原始图像的数目为至少两张；

从所述第二原始图像中提取对焦区域，将所述第二原始图像中的对焦区域与所述第一原始图像中的非对焦区域进行拼接合成，得到拼接合成后的目标图像，包括：

从所述至少两张第二原始图像中提取对焦区域，对所提取的对焦区域进行插值合成，得到插值合成后的对焦区域；

将所述插值合成后的对焦区域与所述第一原始图像中的非对焦区域进行拼接合成，得到拼接合成后的目标图像。

7.一种图像处理方法，其特征在于，包括：

获取第一摄像头在未开启防抖功能或第一防抖模式下对拍摄场景所拍摄的第一原始图像；

获取第二摄像头在第二防抖模式下对同一拍摄场景所拍摄的第二原始图像，所述第二原始图像清晰度高于所述第一原始图像的清晰度；

从所述第一原始图像中提取非对焦区域；

从所述第二原始图像中提取对焦区域，将所述第二原始图像中的对焦区域与所述第一原始图像中的非对焦区域进行拼接合成，得到拼接合成后的目标图像。

8.一种图像处理装置，其特征在于，包括：

第一原始图像获取模块，用于获取摄像头在未开启防抖功能或第一防抖模式下对拍摄场景所拍摄的第一原始图像；

第二原始图像获取模块，用于获取所述摄像头在第二防抖模式下对同一拍摄场景所拍摄的第二原始图像，所述第二原始图像清晰度高于所述第一原始图像的清晰度；

非对焦区域获取模块，用于从所述第一原始图像中提取非对焦区域；

拼接合成模块，用于从所述第二原始图像中提取对焦区域，将所述第二原始图像中的对焦区域与所述第一原始图像中的非对焦区域进行拼接合成，得到拼接合成后的目标图像。

9.一种电子设备，包括存储器及处理器，所述存储器中储存有计算机程序，其特征在于，所述计算机程序被所述处理器执行时，使得所述处理器执行如权利要求1至7中任一项所述的图像处理方法的步骤。

10.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1至7中任一项所述的方法的步骤。