CN113364978A

CN113364978A - 图像处理方法、装置、电子设备及可读存储介质

Info

Publication number: CN113364978A
Application number: CN202110587496.7A
Authority: CN
Inventors: 李宁
Original assignee: Aiku Software Technology Shanghai Co ltd
Current assignee: Aiku Software Technology Shanghai Co ltd
Priority date: 2021-05-27
Filing date: 2021-05-27
Publication date: 2021-09-07
Anticipated expiration: 2041-05-27
Also published as: CN113364978B

Abstract

本申请实施例公开了一种图像处理方法、装置、电子设备及可读存储介质，该方法包括：获取第一图像、拍摄第一图像时的第一拍摄抖动数据以及拍摄第二图像时的第二拍摄抖动数据，第二图像为第一图像的前一帧拍摄图像；根据第一拍摄抖动数据和第二拍摄抖动数据，计算第一图像和第二图像补偿到同一平面时的抖动补偿数据；根据抖动补偿数据，计算补偿到同一平面上的第一图像和第二图像之间的平移量；根据平移量对第一图像进行平移补偿，得到第三图像；将第三图像与第四图像进行合并，得到目标图像；第四图像为根据第一拍摄抖动数据对第一图像进行部分补偿得到的图像。根据本申请的实施例，能够提升拍摄防抖效果。

Description

图像处理方法、装置、电子设备及可读存储介质

技术领域

本申请实施例涉及信息处理领域，尤其涉及一种图像处理方法、装置、电子设备及可读存储介质。

背景技术

随着用户对电子设备拍照的成像质量需求的不断提高，各种防抖技术被运用至电子设备的图像处理中。其中，电子防抖(EIS，Electric Image Stabilization)因其成本低以及微型化受到广泛应用。

目前，EIS需要根据电子设备在拍摄过程中的偏移量来调节图像，以实现防抖。但是，偏移量是根据传感器采集到的加速度值，进行两次积分得到的。由于电子设备拍摄得到的每帧图像之间的数据时间间隔非常小，两次积分会造成偏移量误差的增大，所以，根据此偏移量校正的图像成像效果不好，最后防抖的效果也不理想。

发明内容

本申请实施例提供一种图像处理方法、装置、电子设备及可读存储介质，以解决目前电子防抖的效果不理想的问题。

为了解决上述技术问题，本申请是这样实现的：

第一方面，本申请实施例提供了一种图像处理方法，该方法可以包括：

获取第一图像、拍摄第一图像时的第一拍摄抖动数据以及拍摄第二图像时的第二拍摄抖动数据，第二图像为第一图像的前一帧拍摄图像；

根据第一拍摄抖动数据和第二拍摄抖动数据，计算第一图像和第二图像补偿到同一平面时的抖动补偿数据；

根据抖动补偿数据，计算补偿到同一平面上的第一图像和第二图像之间的平移量；

根据平移量对第一图像进行平移补偿，得到第三图像；

将第三图像与第四图像进行合并，得到目标图像；第四图像为根据第一拍摄抖动数据对第一图像进行部分补偿得到的图像。

第二方面，本申请实施例提供了一种图像处理装置，该装置可以包括：

获取模块，用于获取第一图像、拍摄第一图像时的第一拍摄抖动数据以及拍摄第二图像时的第二拍摄抖动数据，第二图像为第一图像的前一帧拍摄图像；

计算模块，用于根据第一拍摄抖动数据和第二拍摄抖动数据，计算第一图像和第二图像补偿到同一平面时的抖动补偿数据；

计算模块，还用于根据抖动补偿数据，计算补偿到同一平面上的第一图像和第二图像之间的平移量；

补偿模块，用于根据平移量对第一图像进行平移补偿，得到第三图像；

合并模块，用于将第三图像与第四图像进行合并，得到目标图像；第四图像为根据第一拍摄抖动数据对第一图像进行部分补偿得到的图像。

第三方面，本申请实施例提供了一种电子设备，该电子设备包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的程序或指令，所述程序或指令被所述处理器执行时实现如第一方面所述的方法的步骤。

第四方面，本申请实施例提供了一种可读存储介质，所述可读存储介质上存储程序或指令，所述程序或指令被处理器执行时实现如第一方面所述的方法的步骤。

第五方面，本申请实施例提供了一种芯片，所述芯片包括处理器和通信接口，所述通信接口和所述处理器耦合，所述处理器用于运行程序或指令，实现如第一方面所述的方法。

本申请实施例中，通过根据拍摄第一图像时的第一拍摄抖动数据和拍摄第二图像时的第二拍摄抖动数据，计算第一图像和第二图像补偿到同一平面时的抖动补偿数据；然后，根据抖动补偿数据，计算补偿到同一平面上的第一图像和第二图像之间的平移量；接着，根据平移量对第一图像进行平移补偿，得到第三图像，这样可以使平移补偿后得到的第三图像与第一图像在同一个平面上。最后，将第三图像与根据第一拍摄抖动数据对第一图像进行部分补偿得到的第四图像进行合并，能同时校正旋转抖动和平移抖动，得到校正后的目标图像，由此，能够提升防抖效果。

附图说明

从下面结合附图对本申请的具体实施方式的描述中可以更好地理解本申请其中，相同或相似的附图标记表示相同或相似的特征。

图1为本申请实施例提供的一种图像处理方法的流程图；

图2为本申请实施例提供的一种平移量的函数示意图；

图3为本申请实施例提供的一种图像处理装置结构示意图；

图4为本申请实施例提供的一种电子设备的硬件结构示意图；

图5为本申请实施例提供的另一种电子设备的硬件结构示意图。

具体实施方式

下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。

本申请的说明书和权利要求书中的术语“第一”、“第二”等是用于区别类似的对象，而不用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外，说明书以及权利要求中“和/或”表示所连接对象的至少其中之一，字符“/”，一般表示前后关联对象是一种“或”的关系。

本申请实施例提供的图像处理方法至少可以应用于下述应用场景中，下面进行说明。

防抖是提高成像质量的重要手段。目前，电子设备防抖方法主要包括：光学防抖(Optical Image Stabilization，OIS)，一种硬件式防抖；另一种是EIS电子防抖，一种软件算法式防抖。与OIS相比，EIS电子防抖的成本要低很多，在各种高、中、低端机型的电子设备中都应用比较广泛。

EIS电子防抖主要是利用陀螺仪(gyroscope，gyro)传感器和加速度计(accelerometer，ACC)传感器这两个模块来侦测电子设备抖动的幅度，进而动态的调整感光度(ISO)、快门和成像算法等来对图像进行模糊修正。

EIS是一种演算法运算，透过影像裁减补偿方式来做模糊修正，防震效果取决于演算法的设计与效率，EIS的优点是不需额外增加硬件装置，成本较低且适合微型化设计。

现有的EIS电子防抖主要是利用gyro获得电子设备的旋转抖动以及利用ACC加速度传感器来获得一个电子设备的平移抖动。实际上，电子设备从加速度传感器直接得到的是当前电子设备的平移加速度值。要想得到当前电子设备的平移量，则需要对此平移加速度值进行两次积分。由于电子设备每帧之间的数据时间间隔非常小，两次对时间的积分势必会造成误差的增大，进而导致平移量的计算不准确，最后防抖的效果也不理想。

针对相关技术出现的问题，本申请实施例提供一种图像处理方法、装置、电子设备及存储介质，以解决相关技术中，电子防抖的效果不理想的问题。

本申请实施例提供的方法，除了可以应用到上述应用场景之外，还可以应用到任何电子防抖的效果不理想的场景中。

通过本申请实施例提供的方法，通过根据拍摄第一图像时的第一拍摄抖动数据和拍摄第二图像时的第二拍摄抖动数据，计算第一图像和第二图像补偿到同一平面时的抖动补偿数据；然后，根据抖动补偿数据，计算补偿到同一平面上的第一图像和第二图像之间的平移量；接着，根据平移量对第一图像进行平移补偿，得到第三图像，这样可以使平移补偿后得到的第三图像与第一图像在同一个平面上。最后，将第三图像与根据第一拍摄抖动数据对第一图像进行部分补偿得到的第四图像进行合并，能同时校正旋转抖动和平移抖动，得到校正后的目标图像，由此，能够提升防抖效果。

基于上述应用场景，下面对本申请实施例提供的图像处理方法进行详细说明。

图1为本申请实施例提供的一种图像处理方法的流程图。

如图1所示，该图像处理方法可以包括步骤110-步骤150，该方法应用于图像处理装置，具体如下所示：

步骤110，获取第一图像、拍摄第一图像时的第一拍摄抖动数据以及拍摄第二图像时的第二拍摄抖动数据，第二图像为第一图像的前一帧拍摄图像。

步骤120，根据第一拍摄抖动数据和第二拍摄抖动数据，计算第一图像和第二图像补偿到同一平面时的抖动补偿数据。

步骤130，根据抖动补偿数据，计算补偿到同一平面上的第一图像和第二图像之间的平移量。

步骤140，根据平移量对第一图像进行平移补偿，得到第三图像。

步骤150，将第三图像与第四图像进行合并，得到目标图像；第四图像为根据第一拍摄抖动数据对第一图像进行部分补偿得到的图像。

本申请提供的图像处理方法，通过根据拍摄第一图像时的第一拍摄抖动数据和拍摄第二图像时的第二拍摄抖动数据，计算第一图像和第二图像补偿到同一平面时的抖动补偿数据；然后，根据抖动补偿数据，计算补偿到同一平面上的第一图像和第二图像之间的平移量；接着，根据平移量对第一图像进行平移补偿，得到第三图像，这样可以使平移补偿后得到的第三图像与第一图像在同一个平面上。最后，将第三图像与根据第一拍摄抖动数据对第一图像进行部分补偿得到的第四图像进行合并，能同时校正旋转抖动和平移抖动，得到校正后的目标图像，由此，能够提升防抖效果。

下面，对步骤110-步骤150的内容分别进行描述：

首先，涉及步骤110。

获取第一图像、拍摄第一图像时的第一拍摄抖动数据以及拍摄第二图像时的第二拍摄抖动数据，第二图像为第一图像的前一帧拍摄图像。

获取第一图像、第一拍摄抖动数据以及第二拍摄抖动数据是为了后面利用相位相关法计算平移量，同时排除拍摄抖动数据部分补偿的干扰。因为相位相关法是需要两帧图像作为输入，同时这两帧图像需要在同一个平面上，才能正确计算他们之间的平移量。

其中，第二图像与第一图像为连续拍摄得到的两帧图像，第二图像为第一图像的前一帧拍摄图像。其中，上述涉及到的第一拍摄抖动数据可以为gyro数据，上述涉及到的第二拍摄抖动数据可以为gyro数据。

其次，涉及步骤120。

根据第一拍摄抖动数据和第二拍摄抖动数据，计算第一图像和第二图像补偿到同一平面时的抖动补偿数据。

目前在利用相位相关法计算当前帧图像与前一帧图像之间的相对平移量的情况下，采用的EIS电子防抖的类型往往是部分防抖，部分防抖是指如果画面抖动过大，如果检测到图像的拍摄抖动数据超过设置的防抖阈值，则不对超过防抖阈值的抖动部分进行补偿，这样当反向矫正的时候，也只得到了部分补偿。因此如果根据部分补偿后的抖动补偿数据计算平移量，会导致前后两帧之间的图像数据不一定在一个平面上，进而计算得到的平移量也不准确，导致误差。

因此，上述涉及到的根据第一拍摄抖动数据和第二拍摄抖动数据，计算第一图像和第二图像补偿到同一平面时的抖动补偿数据的步骤中，采用的是完全补偿的方式。完全补偿是指即使检测到图像的拍摄抖动数据超过防抖阈值，超过防抖阈值的抖动部分也需要进行补偿。这样就可以使得前后两帧图像在同一个平面上，进而能够保证计算得到的平移量也非常准确。

其中，上述涉及到的抖动补偿数据可以包括第一图像对应的第一抖动补偿数据，以及第二图像对应的第二抖动补偿数据。

由此，通过计算第一图像和第二图像分别对应的第一拍摄抖动数据和第二拍摄抖动数据的完全补偿，能够将两帧图像补偿到同一平面上。

接着，涉及步骤130。

根据抖动补偿数据，计算补偿到同一平面上的第一图像和第二图像之间的平移量。其中，抖动补偿数据包括第一图像对应的第一抖动补偿数据，以及第二图像对应的第二抖动补偿数据，步骤230，具体可以包括以下步骤：

基于相位相关法对第一抖动补偿数据和第二抖动补偿数据进行计算，得到平移量。

使用相位相关法计算Gyro数据完全补偿后的两帧图像之间的平移量。假设f₁(x,y)和f₂(x,y)是前后两帧Gyro数据完全补偿后的图像数据，且f₂(x,y)是由f₁(x,y)平移(dx，dy)得到，其中f₁(x,y)为第一抖动补偿数据，f₂(x,y)为第二抖动补偿数据，(dx，dy)为平移量。它们之间满足如下关系：

f₂(x,y)＝f₁(x-dx,y-dy) (1)

经过傅里叶变换到频域可得关系如下：

F₂(u,v)＝F₁(u,v)*e^{-j*2π*(u*dx+v*dy)} (2)

将(2)式左边除以右边，得到互功率谱，其形式如下：

其中

是F₂的共轭函数，对互功率谱做傅里叶反变换可以得到一个脉冲函数，此函数在其他位置几乎为零，只有在(dx，dy)处有最大值，因此，可以计算得出平移量。

由此，根据抖动补偿数据，计算补偿到同一平面上的第一图像和第二图像之间的平移量，能够减小EIS电子防抖平移量的计算误差，提高EIS电子防抖的效果。且相位相关法计算平移量使用快速傅里叶变换，因此有着极大的速度优势。

通过求取互功率谱的傅立叶反变换，得到一个狄拉克函数(脉冲函数)，再寻找函数峰值点对应的坐标，即可得到所要求得的配准点。

如图2所示，此脉冲函数在其他位置几乎为零，只有在平移量所对应的坐标处有最大值，因此，可以通过脉冲函数确定出平移量。

实际上，在处理中，连续域要用离散域代替，这使得狄拉克函数转化为离散时间单位冲击函数序列的形式。在实际运算中，两幅图像互功率谱相位的反变换，总是含有一个相关峰值代表两幅图像的配准点，和一些非相关峰值，相关峰值直接反映两幅图像间的一致程度。更精确的讲，相关峰的能量对应重叠区域的所占百分比,非相关峰对应非重叠区域所占百分比。

其中，上述涉及到的相位相关法，由于平移不影响傅氏变换的幅值(谱)，对应的幅值谱和原图像是一样的。旋转在傅氏变换中是小变量。根据傅氏变换的旋转特性，旋转一幅图，在频域相当于对这幅图的傅氏变换做相同的旋转。使用频域方法的好处是计算简单，速度快，同时傅立叶变换可以采用方法提高执行的速度。

在时域中信号的平移运动可以通过在频域中相位的变化表现出来，这是傅里叶变换的特性。平移不影响傅里叶变换的幅值，而只改变其频域的相位。因此可以通过相位相关法来得到其时域的平移量。

然后，涉及步骤140。

根据平移量对第一图像进行平移补偿，得到第三图像。

根据基于抖动补偿数据计算出来的平移量，对第一图像进行平移补偿，得到第三图像。

最后，涉及步骤150。

在一种可能的实施例中，在步骤150之前，还可以包括以下步骤：

根据第一拍摄抖动数据对第一图像进行部分补偿计算，得到第四图像。

根据第一拍摄抖动数据对第一图像进行部分补偿计算，这是实际为了防抖用到的Gyro数据补偿，后面与平移补偿一起作为防抖的补偿数据。

其中，步骤150，具体可以包括以下步骤：

具体地，将步骤150中根据第一拍摄抖动数据对第一图像进行部分补偿计算得到的第四图像，与步骤140中进行平移补偿后的第三图像进行合并，得到最后EIS防抖补偿后的目标图像。

利用第三图像校正第一图像的平移抖动，得到第五图像；利用第四图像校正第一图像的旋转抖动，得到第六图像；将第五图像和第六图像进行融合，得到目标图像。

具体地，利用第三图像调节第一图像的像素值，以校正第一图像的平移抖动，得到第五图像；利用第四图像调节第一图像的像素值，以校正第一图像的旋转抖动，得到第六图像；最后，将第五图像和第六图像进行融合，得到目标图像。这样，能同时校正旋转抖动和平移抖动，得到校正后的目标图像，由此，能够提升防抖效果。。

综上，在本申请实施例中，通过根据拍摄第一图像时的第一拍摄抖动数据和拍摄第二图像时的第二拍摄抖动数据，计算第一图像和第二图像补偿到同一平面时的抖动补偿数据；然后，根据抖动补偿数据，计算补偿到同一平面上的第一图像和第二图像之间的平移量；接着，根据平移量对第一图像进行平移补偿，得到第三图像，这样可以使平移补偿后得到的第三图像与第一图像在同一个平面上。最后，将第三图像与根据第一拍摄抖动数据对第一图像进行部分补偿得到的第四图像进行合并，能同时校正旋转抖动和平移抖动，得到校正后的目标图像，由此，能够提升防抖效果。

需要说明的是，本申请实施例提供的图像处理方法，执行主体可以为图像处理装置，或者该图像处理装置中的用于执行加载图像处理方法的控制模块。本申请实施例中以图像处理装置执行加载图像处理方法为例，说明本申请实施例提供的图像处理方法。

另外，基于上述图像处理方法，本申请实施例还提供了一种图像处理装置，具体结合图3进行详细说明。

图3为本申请实施例提供的一种图像处理装置结构示意图。

如图3所示，该图像处理装置300可以包括：

获取模块310，用于获取第一图像、拍摄第一图像时的第一拍摄抖动数据以及拍摄第二图像时的第二拍摄抖动数据，第二图像为第一图像的前一帧拍摄图像。

计算模块320，用于根据第一拍摄抖动数据和第二拍摄抖动数据，计算第一图像和第二图像补偿到同一平面时的抖动补偿数据。

计算模块320，还用于根据抖动补偿数据，计算补偿到同一平面上的第一图像和第二图像之间的平移量。

补偿模块330，用于根据平移量对第一图像进行平移补偿，得到第三图像。

合并模块340，用于将第三图像与第四图像进行合并，得到目标图像；第四图像为根据第一拍摄抖动数据对第一图像进行部分补偿得到的图像。

在一种可能的实施例中，抖动补偿数据包括第一图像对应的第一抖动补偿数据，以及第二图像对应的第二抖动补偿数据，计算模块320，用于基于相位相关法对第一抖动补偿数据和第二抖动补偿数据进行计算，得到平移量。

在一种可能的实施例中，计算模块320，还用于根据第一拍摄抖动数据对第一图像进行部分补偿计算，得到第四图像。

在一种可能的实施例中，合并模块340，包括：

校正模块，用于利用第三图像校正第一图像的平移抖动，得到第五图像。

校正模块，用于利用第四图像校正第一图像的旋转抖动，得到第六图像。

融合模块，用于将第五图像和第六图像进行融合，得到目标图像。

综上，本申请实施例提供的图像处理装置，通过根据拍摄第一图像时的第一拍摄抖动数据和拍摄第二图像时的第二拍摄抖动数据，计算第一图像和第二图像补偿到同一平面时的抖动补偿数据；然后，根据抖动补偿数据，计算补偿到同一平面上的第一图像和第二图像之间的平移量；接着，根据平移量对第一图像进行平移补偿，得到第三图像，这样可以使平移补偿后得到的第三图像与第一图像在同一个平面上。最后，将第三图像与根据第一拍摄抖动数据对第一图像进行部分补偿得到的第四图像进行合并，能同时校正旋转抖动和平移抖动，得到校正后的目标图像，由此，能够提升防抖效果。

本申请实施例中的图像处理装置，可以是装置，也可以是终端中的部件、集成电路、或芯片。该装置可以是移动电子设备，也可以为非移动电子设备。示例性的，移动电子设备可以为电子设备、平板电脑、笔记本电脑、掌上电脑、车载电子设备、可穿戴设备、超级移动个人计算机(ultra-mobile personal computer，UMPC)、上网本或者个人数字助理(personal digital assistant，PDA)等，非移动电子设备可以为服务器、网络附属存储器(Network Attached storage，NAS)、个人计算机(personal computer，PC)、电视机(television，TV)、柜员机或者自助机等，本申请实施例不作具体限定。

本申请实施例中的图像处理装置可以为具有操作系统的装置。该操作系统可以为安卓(Android)操作系统，可以为ios操作系统，还可以为其他可能的操作系统，本申请实施例不作具体限定。

本申请实施例提供的图像处理装置能够实现图2-图4的方法实施例中图像处理装置实现的各个过程，为避免重复，这里不再赘述。

可选地，如图4所示，本申请实施例还提供一种电子设备400，包括处理器401，存储器402，存储在存储器402上并可在处理器401上运行的程序或指令，该程序或指令被处理器401执行时实现上述图像处理方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。

需要注意的是，本申请实施例中的电子设备包括上述的移动电子设备和非移动电子设备。

该电子设备500包括但不限于：射频单元501、网络模块502、音频输出单元503、输入单元504、传感器505、显示单元506、用户输入单元507、接口单元508、存储器509、处理器510以及电源511等部件。其中，输入单元504可以包括图形处理器5041和麦克风5042；显示单元506可以包括显示面板5061；用户输入单元507可以包括触控面板5071以及其他输入设备5072；存储器509可以包括应用程序和操作系统。

本领域技术人员可以理解，电子设备500还可以包括给各个部件供电的电源(比如电池)，电源511可以通过电源管理系统与处理器510逻辑相连，从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。图5中示出的电子设备结构并不构成对电子设备的限定，电子设备可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置，在此不再赘述。

网络模块502，用于获取第一图像、拍摄第一图像时的第一拍摄抖动数据以及拍摄第二图像时的第二拍摄抖动数据，第二图像为第一图像的前一帧拍摄图像。

处理器510，用于根据第一拍摄抖动数据和第二拍摄抖动数据，计算第一图像和第二图像补偿到同一平面时的抖动补偿数据。

处理器510，还用于根据抖动补偿数据，计算补偿到同一平面上的第一图像和第二图像之间的平移量。

处理器510，用于根据平移量对第一图像进行平移补偿，得到第三图像。

处理器510，用于将第三图像与第四图像进行合并，得到目标图像；第四图像为根据第一拍摄抖动数据对第一图像进行部分补偿得到的图像。

可选地，抖动补偿数据包括第一图像对应的第一抖动补偿数据，以及第二图像对应的第二抖动补偿数据，处理器510，还用于基于相位相关法对第一抖动补偿数据和第二抖动补偿数据进行计算，得到平移量。

可选地，处理器510，还用于根据第一拍摄抖动数据对第一图像进行部分补偿计算，得到第四图像。

可选地，处理器510，还用于利用第三图像校正第一图像的平移抖动，得到第五图像。

处理器510，还用于利用第四图像校正第一图像的旋转抖动，得到第六图像。

处理器510，还用于将第五图像和第六图像进行融合，得到目标图像。

本申请实施例还提供一种可读存储介质，所述可读存储介质上存储有程序或指令，该程序或指令被处理器执行时实现上述图像处理方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。

其中，所述处理器为上述实施例中所述的电子设备中的处理器。所述可读存储介质，包括计算机可读存储介质，如计算机只读存储器(Read-Only Memory，ROM)、随机存取存储器(Random Access Memory，RAM)、磁碟或者光盘等。

本申请实施例另提供了一种芯片，所述芯片包括处理器和通信接口，所述通信接口和所述处理器耦合，所述处理器用于运行程序或指令，实现上述图像处理方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。

应理解，本申请实施例提到的芯片还可以称为系统级芯片、系统芯片、芯片系统或片上系统芯片等。

需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。此外，需要指出的是，本申请实施方式中的方法和装置的范围不限按示出或讨论的顺序来执行功能，还可包括根据所涉及的功能按基本同时的方式或按相反的顺序来执行功能，例如，可以按不同于所描述的次序来执行所描述的方法，并且还可以添加、省去、或组合各种步骤。另外，参照某些示例所描述的特征可在其他示例中被组合。

通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台终端(可以是电子设备，计算机，服务器，空调器，或者网络设备等)执行本申请各个实施例所述的方法。

上面结合附图对本申请的实施例进行了描述，但是本申请并不局限于上述的具体实施方式，上述的具体实施方式仅仅是示意性的，而不是限制性的，本领域的普通技术人员在本申请的启示下，在不脱离本申请宗旨和权利要求所保护的范围情况下，还可做出很多形式，均属于本申请的保护之内。

Claims

1.一种图像处理方法，其特征在于，包括：

获取第一图像、拍摄所述第一图像时的第一拍摄抖动数据以及拍摄第二图像时的第二拍摄抖动数据，所述第二图像为所述第一图像的前一帧拍摄图像；

根据所述第一拍摄抖动数据和所述第二拍摄抖动数据，计算所述第一图像和所述第二图像补偿到同一平面时的抖动补偿数据；

根据所述抖动补偿数据，计算补偿到同一平面上的所述第一图像和所述第二图像之间的平移量；

根据所述平移量对所述第一图像进行平移补偿，得到第三图像；

将所述第三图像与第四图像进行合并，得到目标图像；所述第四图像为根据所述第一拍摄抖动数据对所述第一图像进行部分补偿得到的图像。

2.根据权利要求1所述的方法，其特征在于，所述抖动补偿数据包括所述第一图像对应的第一抖动补偿数据，以及所述第二图像对应的第二抖动补偿数据，所述根据所述抖动补偿数据，计算补偿到同一平面上的第一图像和第二图像之间的平移量，包括：

基于相位相关法对所述第一抖动补偿数据和所述第二抖动补偿数据进行计算，得到所述平移量。

3.根据权利要求1所述的方法，其特征在于，在所述将所述第三图像与第四图像进行合并，得到目标图像之前，所述方法还包括：

根据所述第一拍摄抖动数据对所述第一图像进行部分补偿计算，得到所述第四图像。

4.根据权利要求1所述的方法，其特征在于，所述将所述第三图像与第四图像进行合并，得到目标图像，包括：

利用所述第三图像校正所述第一图像的平移抖动，得到第五图像；

利用所述第四图像校正所述第一图像的旋转抖动，得到第六图像；

将所述第五图像和所述第六图像进行融合，得到所述目标图像。

5.一种图像处理装置，其特征在于，包括：

获取模块，用于获取第一图像、拍摄所述第一图像时的第一拍摄抖动数据以及拍摄第二图像时的第二拍摄抖动数据，所述第二图像为所述第一图像的前一帧拍摄图像；

计算模块，用于根据所述第一拍摄抖动数据和所述第二拍摄抖动数据，计算所述第一图像和所述第二图像补偿到同一平面时的抖动补偿数据；

所述计算模块，还用于根据所述抖动补偿数据，计算补偿到同一平面上的所述第一图像和所述第二图像之间的平移量；

补偿模块，用于根据所述平移量对所述第一图像进行平移补偿，得到第三图像；

合并模块，用于将所述第三图像与第四图像进行合并，得到目标图像；所述第四图像为根据所述第一拍摄抖动数据对所述第一图像进行部分补偿得到的图像。

6.根据权利要求5所述的装置，其特征在于，所述抖动补偿数据包括所述第一图像对应的第一抖动补偿数据，以及所述第二图像对应的第二抖动补偿数据，所述计算模块，用于基于相位相关法对所述第一抖动补偿数据和所述第二抖动补偿数据进行计算，得到所述平移量。

7.根据权利要求5所述的装置，其特征在于，所述计算模块，还用于根据所述第一拍摄抖动数据对所述第一图像进行部分补偿计算，得到所述第四图像。

8.根据权利要求5所述的装置，其特征在于，合并模块，包括：

校正模块，用于利用所述第三图像校正所述第一图像的平移抖动，得到第五图像；

校正模块，用于利用所述第四图像校正所述第一图像的旋转抖动，得到第六图像；

融合模块，用于将所述第五图像和所述第六图像进行融合，得到所述目标图像。

9.一种电子设备，其特征在于，包括处理器，存储器及存储在所述存储器上并可在所述处理器上运行的程序或指令，所述程序或指令被所述处理器执行时实现如权利要求1-4任一项所述的图像处理方法的步骤。

10.一种可读存储介质，其特征在于，所述可读存储介质上存储程序或指令，所述程序或指令被处理器执行时实现如权利要求1-4任一项所述的图像处理方法的步骤。