CN110913143B

CN110913143B - 图像处理方法、装置、存储介质及电子设备

Info

Publication number: CN110913143B
Application number: CN201911253849.9A
Authority: CN
Inventors: 贾玉虎
Original assignee: Guangdong Oppo Mobile Telecommunications Corp Ltd
Current assignee: Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority date: 2019-12-09
Filing date: 2019-12-09
Publication date: 2021-04-02
Anticipated expiration: 2039-12-09
Also published as: CN110913143A

Abstract

本申请公开了一种图像处理方法、装置、存储介质及电子设备。该方法包括：获取第一图像和第二图像；根据所述第一图像和所述第二图像，确定所述第二图像相对于所述第一图像的对齐向量；获取移动方向，所述移动方向为拍摄所述第二图像时电子设备相对于拍摄所述第一图像时的移动方向；根据所述对齐向量和所述移动方向，确定目标对齐向量；基于所述目标对齐向量将所述第二图像相对于所述第一图像进行移动，以使所述第二图像与所述第一图像对齐。本申请可以提高图像对齐的对齐准确度。

Description

图像处理方法、装置、存储介质及电子设备

技术领域

本申请属于电子技术领域，尤其涉及一种图像处理方法、装置、存储介质及电子设备。

背景技术

图像对齐技术是图像处理领域的基础技术。随着数字图像的快速发展，出现了一系列基于图像对齐技术的应用。这些应用包括全景图的生成，高动态图像的生成，两张图像的信息融合等。

相关技术中，通常是对现有的图像数据进行一系列的处理来达到图像对齐的目的。然而，当图像信息较弱，如图像纹理不清晰、图像噪声过大、图像过曝光或者欠曝光时，采用上述方式进行图像对齐会使得对齐准确度不高。

发明内容

本申请实施例提供一种图像处理方法、装置、存储介质及电子设备，可以提高图像对齐的对齐准确度。

本申请实施例提供一种图像处理方法，包括：

获取第一图像和第二图像；

根据所述第一图像和所述第二图像，确定所述第二图像相对于所述第一图像的对齐向量；

获取移动方向，所述移动方向为拍摄所述第二图像时电子设备相对于拍摄所述第一图像时的移动方向；

根据所述对齐向量和所述移动方向，确定目标对齐向量；

基于所述目标对齐向量将所述第二图像相对于所述第一图像进行移动，以使所述第二图像与所述第一图像对齐。

本申请实施例提供一种图像处理装置，包括：

第一获取模块，用于获取第一图像和第二图像；

第一确定模块，用于根据所述第一图像和所述第二图像，确定所述第二图像相对于所述第一图像的对齐向量；

第二获取模块，用于获取移动方向，所述移动方向为拍摄所述第二图像时电子设备相对于拍摄所述第一图像时的移动方向；

第二确定模块，用于根据所述对齐向量和所述移动方向，确定目标对齐向量；

对齐模块，用于基于所述目标对齐向量将所述第二图像相对于所述第一图像进行移动，以使所述第二图像与所述第一图像对齐。

本申请实施例提供一种存储介质，其上存储有计算机程序，当所述计算机程序在计算机上执行时，使得所述计算机执行本申请实施例提供的图像处理方法中的流程。

本申请实施例还提供一种电子设备，包括存储器，处理器，所述处理器通过调用所述存储器中存储的计算机程序，用于执行本申请实施例提供的图像处理方法中的流程。

本申请实施例中，当对第一图像和第二图像进行对齐时，会以拍摄第二图像时电子设备相对于拍摄第一图像时的移动方向作为参考，并结合根据第一图像和第二图像所确定的第二图像相对于第一图像的对齐向量来确定目标对齐向量。然后，基于该目标对齐向量将该第二图像相对于第一图像进行移动，以使第二图像与第一图像对齐。相对于仅根据图像数据来确定对齐向量的方案来说，本申请的方案可提高图像对齐的对齐准确度。

附图说明

下面结合附图，通过对本申请的具体实施方式详细描述，将使本申请的技术方案及其有益效果显而易见。

图1是本申请实施例提供的图像处理方法的第一种流程示意图。

图2是本申请实施例提供的图像处理方法的第一种场景示意图。

图3是本申请实施例提供的图像处理方法的第二种流程示意图。

图4是本申请实施例提供的图像处理方法的第二种场景示意图。

图5是本申请实施例提供的图像处理方法的第三种场景示意图。

图6是本申请实施例提供的图像处理方法的第四种场景示意图。

图7是本申请实施例提供的图像处理方法的第五种场景示意图。

图8是本申请实施例提供的图像处理装置的结构示意图。

图9是本申请实施例提供的电子设备的第一种结构示意图。

图10是本申请实施例提供的电子设备的第二种结构示意图。

图11是本申请实施例提供的图像处理电路的结构示意图。

具体实施方式

请参照图示，其中相同的组件符号代表相同的组件，本申请的原理是以实施在一适当的运算环境中来举例说明。以下的说明是基于所例示的本申请具体实施例，其不应被视为限制本申请未在此详述的其它具体实施例。

可以理解的是，本申请实施例的执行主体可以是诸如智能手机或平板电脑等电子设备。

请参阅图1，图1是本申请实施例提供的图像处理方法的第一种流程示意图，流程可以包括：

在101中，获取第一图像和第二图像。

比如，电子设备可以采用同一摄像头或双摄像头对同一拍摄场景进行连续拍摄，以获取同一拍摄场景的两帧图像，将该两帧图像作为第一图像和第二图像。其中，第一图像和第二图像具有相同的曝光参数。第一图像和第二图像的尺寸相同。

又比如，电子设备可以获取同一拍摄场景的两帧图像。然后，电子设备可以对两帧图像分别进行二值化处理，得到第一图像和第二图像。其中，第一图像和第二图像可以具有相同的曝光参数，也可以具有不相同的曝光参数。第一图像和第二图像的尺寸相同。

其中，在根据用户操作启动拍摄类应用程序(比如电子设备的系统应用“相机”)后，其摄像头所对准的场景即为拍摄场景。比如，用户通过手指点击电子设备上“相机”应用的图标启动“相机应用”后，若用户使用电子设备的摄像头对准一包括XX物体的场景，则该包括XX物体的场景即为拍摄场景。根据以上描述，本领域技术人员应当理解的是，拍摄场景并非特指某一特定场景，而是跟随摄像头的指向所实时对准的场景。

曝光参数包括曝光值(即俗称的EV值)。第一图像和第二图像具有相同的曝光参数，可以指第一图像和第二图像的曝光值相同。例如，第一图像的曝光值为-1EV，第二图像的曝光值也为-1EV，两帧图像的曝光值相同。第一图像和第二图像具有不同的曝光参数，可以指第一图像和第二图像的曝光值不相同。例如，第一图像的曝光值为-1EV，第二图像的曝光值为1EV，两帧图像的曝光值不同。

其中，电子设备对两帧图像分别进行二值化处理，得到第一图像和第二图像，可以包括：

电子设备计算每帧图像对应的灰度均值；

电子设备将每帧图像中灰度值大于灰度均值的像素点的灰度值设置为第一灰度值，并将每帧图像中灰度值小于或等于灰度均值的像素点的灰度值设置为第二灰度值，以得到第一图像和第二图像。其中，第一灰度值可以为255，第二灰度值可以为0。

其中，电子设备计算每帧图像对应的灰度均值，可以包括：

电子设备确定每帧图像中的每个像素点的灰度值，得到多个灰度值；

电子设备计算多个灰度值的平均值，得到灰度均值。

例如，多个灰度值分别为：128、134、137、140、143、146、152，该多个灰度值的平均值为140，电子设备可将该灰度值140确定为灰度均值。

电子设备确定每帧图像对应的灰度中值；

电子设备将每帧图像中灰度值大于灰度中值的像素点的灰度值设置为第一灰度值，并将每帧图像中灰度值小于或等于灰度中值的像素点的灰度值设置为第二灰度值，以得到第一图像和第二图像。其中，第一灰度值可以为255，第二灰度值可以为0。

其中，电子设备确定每帧图像对应的灰度中值，可以包括：

电子设备将多个灰度值按照从小到大的顺序或从大到小的顺序进行排列；

电子设备将处于最中间位置的灰度值确定为灰度中值。

例如，当多个灰度值按照从小到大的顺序排列后分别为：128、134、137、140、142、146、152，那么，处于最中间位置的灰度值为140，电子设备可将该灰度值140确定为灰度中值。

其中，当处于最中间位置的灰度值有两个时，电子设备可计算该两个灰度值的平均值；

电子设备可将该平均值确定为灰度中值。

例如，当多个灰度值按照从小到大的顺序排列后分别为：128、134、137、140、142、146、152、153，那么，处于最中间位置的灰度值为140和142。该两个灰度值的平均值为141，则电子设备可将141确定为灰度中值。或者，电子设备可以将灰度值140或灰度值142确定为灰度中值。

可以理解的是，图像被二值化处理后，从每个像素点占用8比特的空间减少至每个像素点占用1比特的空间，且后续图像处理均在二值化图像上进行，将整个算法通路数据减少到原有数据量的1/8，提高了处理速度。

还可以理解的是，电子设备还可以采用同一摄像头或采用多个摄像头获取同一拍摄场景的多帧图像，电子设备可将其中一帧图像作为第一图像，将其他图像作为第二图像。即，以该第一图像为参考图像，使其他图像与该第一图像对齐。

在102中，根据第一图像和第二图像，确定第二图像相对于第一图像的对齐向量。

比如，当得到第一图像和第二图像之后，电子设备可根据该第一图像和第二图像，确定第二图像相对于第一图像的对齐向量。

其中，对齐向量具有大小和方向。如图2所示，对齐向量的方向可以为：方向D1、D2、D3、D4、D5、D6、D7和D8中的其中一个方向。对齐向量的大小可以为2个像素单位，3个像素单位，4个像素单位等。如对齐向量的大小为2个像素单位，对齐向量的方向为方向D1可以表示向D1方向移动2个像素单位。

在一些实施例中，对齐向量也可以包括第一偏移分量和第二偏移分量。第一偏移分量和第二偏移分量均具有方向和大小。如对齐向量可以用(x1，y1)表示。其中，x1表示第一偏移分量的大小，该第一偏移分量的方向可以为水平方向，如第一偏移分量的方向可以为方向D4或方向D8。y1表示第二偏移分量的大小，该第二偏移分量的方向可以为垂直方向，如第二偏移分量的方向可以为方向D2或方向D6。

需要说明的是，对齐向量的方向还可以为其他方向，此处不作具体限制，以实际计算结果为准。

在103中，获取移动方向，该移动方向为拍摄第二图像时电子设备相对于拍摄第一图像时的移动方向。

可以理解的是，在图像信息较弱，如图像纹理不清晰、图像噪声过大、图像过曝光或图像整体过暗时，电子设备所确定的对齐向量可能并不准确。因此，为了判断电子设备所确定的对齐向量是否准确，在电子设备拍摄同一拍摄场景的两帧图像，并根据这两帧图像进而得到第一图像和第二图像时，电子设备还可以获取拍摄第二图像时电子设备相对于拍摄第一图像时的移动方向。

比如，电子设备可以利用加速度传感器来获取拍摄第二图像时相对于拍摄第一图像时，电子设备在水平方向的加速度值和垂直方向的加速度值。然后，电子设备可以根据水平方向的加速度值计算出电子设备在水平方向的移动距离，并根据垂直方向的加速度值计算出电子设备在垂直方向的移动距离。例如，电子设备还可以获取拍摄这两帧图像的时间间隔，以及拍摄第一图像时，电子设备的速度，结合电子设备在水平方向的加速度和垂直方向的加速度计算出电子设备在水平方向的移动距离和垂直方向的移动距离。

然后，电子设备可根据电子设备在水平方向的移动距离和垂直方向的移动距离确定拍摄第二图像时电子设备相对于拍摄第一图像时的移动方向。例如，电子设备在水平方向的移动距离为-2个单位，且在垂直方向的移动距离为-2个单位，那么，电子设备的移动方向可以为方向D7。

在一些实施例中，在拍摄这两帧图像时，电子设备可能仅获取到水平方向的加速度值，即电子设备在垂直方向并没有进行移动。那么，电子设备可根据水平方向的加速度值计算出电子设备在水平方向的移动距离。随后，电子设备可根据电子设备在水平方向的移动距离，确定拍摄第二图像时电子设备相对于拍摄第一图像时的移动方向。例如，假设电子设备在水平方向的移动距离为-2个单位，那么，电子设备的移动方向可以为方向D8。又例如，假设电子设备在水平方向的移动距离为2个单位，那么，电子设备的移动方向可以为方向D4。

在另一些实施例中，在拍摄这两帧图像时，电子设备可能仅获取到垂直方向的加速度值，即电子设备在水平方向并没有进行移动。那么，电子设备可根据垂直方向的加速度值计算出电子设备在垂直方向的移动距离。随后，电子设备可根据电子设备在垂直方向的移动距离，确定拍摄第二图像时电子设备相对于拍摄第一图像时的移动方向。例如，假设电子设备在垂直方向的移动距离为-2个单位，那么，电子设备的移动方向可以为方向D6。又例如，假设电子设备在垂直方向的移动距离为2个单位，那么，电子设备的移动方向可以为方向D2。

在一些实施例中，电子设备还可以利用陀螺仪传感器来获取拍摄第二图像时电子设备相对于拍摄第一图像时的移动方向。

在另一些实施例中，电子设备还可以结合方向传感器、磁场传感器和线性加速度传感器来获取拍摄第二图像时电子设备相对于拍摄第一图像时的移动方向。

需要说明的是，电子设备还可以采用其他方式获取拍摄第二图像时电子设备相对于拍摄第一图像时的移动方向，此处不作具体限制。

在104中，根据对齐向量和移动方向，确定目标对齐向量。

在105中，基于目标对齐向量将第二图像相对于第一图像进行移动，以使第二图像与第一图像对齐。

比如，当对齐向量的方向和移动方向的差异较小或对齐向量的方向和移动方向相同时，电子设备可以判定对齐向量准确，那么，电子设备可以直接将对齐向量作为目标对齐向量。然后，电子设备可基于该目标对齐向量将第二图像相对于第一图像进行移动，例如，在第一图像和第二图像重合的基础上，移动第二图像，以使第二图像与第一图像对齐。

又比如，当对齐向量的方向和移动方向的差异较大，如对齐向量的方向和移动方向指向完全相反的两个方向时，电子设备可以判定对齐向量不准确。为了避免对第一图像和第二图像进行对齐处理之后的对齐效果相较于对齐处理之前的效果更差，电子设备可以将对齐向量置零，即不移动第二图像。

本申请实施例中，当对第一图像和第二图像进行对齐时，会以拍摄第二图像时电子设备相对于拍摄第一图像时的移动方向作为参考，并结合根据第一图像和第二图像所确定的第二图像相对于第一图像的对齐向量来确定目标对齐向量。然后，基于该目标对齐向量将该第二图像相对于第一图像进行移动，以使第二图像与第一图像对齐。相对于仅根据图像数据来确定对齐向量的方案来说，本申请的方案可提高对齐准确度。

请参阅图3，图3是本申请实施例提供的图像处理方法的第二种流程示意图，流程可以包括：

在201中，电子设备获取第一图像和第二图像。

在202中，电子设备根据第一图像和第二图像，确定第二图像相对于第一图像的对齐向量。

在203中，电子设备获取移动方向，该移动方向为拍摄第二图像时电子设备相对于拍摄第一图像时的移动方向。

流程201至203与上述流程101至103相同或相应，此处不再赘述。

在204中，电子设备确定对齐向量的方向所在的象限和移动方向所在的象限。

比如，当得到对齐向量和移动方向之后，电子设备可确定对齐向量的方向。然后，电子设备可确定对齐向量的方向在平面直角坐标系中所在的象限和移动方向在同一平面直角坐标系中所在的象限。该平面直角坐标系可以如图4所示。其中，该平面直角坐标系的x轴的正方向指向如图2所示的D4方向，该平面直角坐标系的y轴的正方向指向如图2所示的D2方向。

例如，如图4所示，电子设备可确定对齐向量的方向所在的象限为该平面直角坐标系的第一象限，移动方向所在的象限为该平面直角坐标系的第四象限。

在205中，电子设备判断对齐向量的方向所在的象限与移动方向所在的象限是否相同。若对齐向量的方向所在的象限与移动方向所在的象限不相同，则进入流程206。若对齐向量的方向所在的象限与移动方向所在的象限相同，则进入流程207。

在206中，电子设备对对齐向量进行调整，得到目标对齐向量。

在207中，电子设备将对齐向量作为目标对齐向量。

在208中，电子设备基于目标对齐向量将第二图像相对于第一图像进行移动，以使第二图像与第一图像对齐。

比如，当确定出对齐向量的方向在平面直角坐标系中所在的象限和移动方向在同一平面直角坐标系中所在的象限之后，电子设备可判断对齐向量的方向所在的象限与移动方向所在的象限是否相同。例如，当对齐向量的方向在第一象限，移动方向也在第一象限时，则表示对齐向量的方向所在的象限和移动方向所在的象限相同。若对齐向量的方向在第一象限，移动方向在第二象限，则表示对齐向量的方向所在的象限和移动方向所在的象限不相同。

若对齐向量的方向所在的象限与移动方向所在的象限相同，则表示对齐向量正确，那么，电子设备可以将对齐向量确定为目标对齐向量。若对齐向量的方向所在的象限与移动方向所在的象限不相同，则表示对齐向量可能不正确，为避免对齐后的效果相较于对齐前的效果更差，电子设备可以对对齐向量进行调整，得到目标对齐向量。

随后，电子设备可以基于目标对齐向量将第二图像相对于第一图像进行移动，以使第二图像与第一图像对齐。例如，若目标对齐向量的方向为如图2所示的D3方向，目标对齐向量的大小为4个像素单位，那么，电子设备可以在第一图像和第二图像重合的基础上，将第二图像向如图2所示的D3方向平移4个像素单位，从而使得第二图像与第一图像对齐。

可以理解的是，当对齐向量的方向在平面直角坐标系的坐标轴上，即对齐向量的方向为如图2所示的D2、D4、D6、D8方向时，电子设备可直接基于对齐向量将第二图像相对于第一图像进行移动，以使第二图像与第一图像对齐。

当第一图像和第二图像对齐之后，电子设备可将对齐后的第一图像和第二图像进行合成处理，得到具有高动态范围的合成图像。例如，当第一图像和第二图像对齐之后，电子设备可先裁剪出第一图像和第二图像的重叠部分。然后电子设备可对第一图像和第二图像的重叠部分进行合成处理，得到具有高动态范围的合成图像。或者，电子设备可以将第一图像和第二图像的重叠部分进行合成处理，然后结合第一图像的非重叠部分或第二图像的非重叠部分，得到合成后的图像。

比如，在得到高动态范围图像之后，电子设备可以利用该高动态范围图像，进行图像的预览或拍照或录像操作。例如，电子设备可以将该高动态范围图像显示在该电子设备的相机应用的预览界面供用户预览。或者，当电子设备接收到拍照指令，例如用户按下拍照按钮时，该电子设备可以直接将该高动态图像作为照片输出显示在显示屏上供用户查看。或者，当电子设备接收到录像指令时，电子设备可以将该高动态图像作为录像得到的视频的其中一帧。

在一些实施例中，对齐向量的方向所在的象限对应第一x轴分量方向和第一y轴分量方向，移动方向所在的象限对应第二x轴分量方向和第二y轴分量方向，对齐向量包括第一偏移分量和第二偏移分量，流程206，可以包括：

若第一x轴分量方向与第二x轴分量方向不相同，且第一y轴分量方向与第二y轴分量方向相同，则电子设备将第一偏移分量置零，并将第二偏移分量保持不变，得到调整后的对齐向量；

若第一y轴分量方向与第二y轴分量方向不相同，且第一x轴分量方向与第二x轴分量方向相同，则电子设备将第二偏移分量置零，并将第一偏移分量保持不变，得到调整后的对齐向量；

电子设备将调整后的对齐向量确定为目标对齐向量；

若第一x轴分量方向与第二x轴分量方向不相同，且第一y轴分量方向与第二y轴分量方向不相同，则电子设备将对齐向量置零，得到置零后的对齐向量；

电子设备将置零后的对齐向量确定为目标对齐向量。

比如，请继续参阅图4，假设对齐向量的方向所在的象限为该平面直角坐标系的第一象限，则第一x轴分量方向为该平面直角坐标系的x轴的正方向，第一y轴分量方向为该平面直角坐标系的y轴的正方向。假设对齐向量的方向所在的象限为该平面直角坐标系的第二象限，则第一x轴分量方向为该平面直角坐标系的x轴的负方向，第一y轴分量方向为该平面直角坐标系的y轴的正方向。假设对齐向量的方向所在的象限为该平面直角坐标系的第三象限，则第一x轴分量方向为该平面直角坐标系的x轴的负方向，第一y轴分量方向为该平面直角坐标系的y轴的负方向。假设对齐向量的方向所在的象限为该平面直角坐标系的第四象限，则第一x轴分量方向为该平面直角坐标系的x轴的正方向，第一y轴分量方向为该平面直角坐标系的y轴的负方向。

假设移动方向所在的象限为该平面直角坐标系的第一象限，则第二x轴分量方向为该平面直角坐标系的x轴的正方向，第二y轴分量方向为该平面直角坐标系的y轴的正方向。假设移动方向所在的象限为该平面直角坐标系的第二象限，则第二x轴分量方向为该平面直角坐标系的x轴的负方向，第二y轴分量方向为该平面直角坐标系的y轴的正方向。假设移动方向所在的象限为该平面直角坐标系的第三象限，则第二x轴分量方向为该平面直角坐标系的x轴的负方向，第二y轴分量方向为该平面直角坐标系的y轴的负方向。假设移动方向所在的象限为该平面直角坐标系的第四象限，则第二x轴分量方向为该平面直角坐标系的x轴的正方向，第二y轴分量方向为该平面直角坐标系的y轴的负方向。

请继续参阅图4，对齐向量可以用(x1，y1)表示，x1表示第一偏移分量，即该平面直角坐标系中的x方向上的分量的大小，y1表示第二偏移分量，即该平面直角坐标系中的y方向上的分量的大小。第一偏移分量和第二偏移分量的方向与对齐向量的方向所在的象限相关。比如，若对齐向量的方向所在的象限为该平面直角坐标系的第一象限，则第一偏移分量的方向为该平面直角坐标系的x轴的正方向，第二偏移分量的方向为该平面直角坐标系的y轴的正方向。若对齐向量的方向所在的象限为该平面直角坐标系的第二象限，则第一偏移分量的方向为该平面直角坐标系的x轴的负方向，第二偏移分量的方向为该平面直角坐标系的y轴的正方向。若对齐向量的方向所在的象限为该平面直角坐标系的第三象限，则第一偏移分量的方向为该平面直角坐标系的x轴的负方向，第二偏移分量的方向为该平面直角坐标系的y轴的负方向。若对齐向量的方向所在的象限为该平面直角坐标系的第四象限，则第一偏移分量的方向为该平面直角坐标系的x轴的正方向，第二偏移分量的方向为该平面直角坐标系的y轴的负方向。

例如，若对齐向量的方向如图5所示，对齐向量的大小为5个像素单位，则第一偏移分量的大小可为4个像素单位，第一偏移分量的方向为该平面直角坐标系的x轴的正方向；第二偏移分量的大小可为3个像素单位，第二偏移分量的方向可为该平面直角坐标系的y轴的正方向。即，对齐向量可表示为(4，3)，对齐向量的方向如图5所示。其中，图5所示的平面直角坐标系与图4所示的平面直角坐标系相同。

请参阅图6，如图6的(a)所示，在平面直角坐标系中，对齐向量的方向所在的象限为第一象限，移动方向所在的象限为第四象限，则第一x轴分量方向和第二x轴分量方向均为该平面直角坐标系的x轴的正方向，第一y轴分量方向为该平面直角坐标系的y轴的正方向，第二y轴分量方向为该平面直角坐标系的y轴的负方向，则表示第一x轴分量方向与第二x轴分量方向相同，第一y轴分量方向和第二y轴分量方向不相同，此时，电子设备可将第二偏移分量，即y方向上的分量置零，并将第一偏移分量，即x方向上的分量保持不变，得到调整后的对齐向量。该调整后的对齐向量可作为目标对齐向量。其中，图6所示的平面直角坐标系与图4所示的平面直角坐标系相同。

例如，假设对齐向量为(4，3)，对齐向量的方向在该平面直角坐标系的第一象限；目标对齐向量则为(4，0)，且目标对齐向量的方向并不在该平面直角坐标系的任何象限上，而是与该平面直角坐标系的x轴的正方向相同。

如图6的(b)所示，在平面直角坐标系中，对齐向量的方向所在的象限为第二象限，移动方向所在的象限为第一象限，则第一y轴分量方向和第二y轴分量方向均为该平面直角坐标系的y轴的正方向，第一x轴分量方向为该平面直角坐标系的x轴的负方向，第二x轴分量方向为该平面直角坐标系的x轴的正方向，则表示第一x轴分量方向和第二x轴分量方向不相同，第一y轴分量方向和第二y轴分量方向相同，此时，电子设备可将第一偏移分量，即x方向上的分量置零，并将第二偏移分量，即y方向上的分量保持不变，得到调整后的对齐向量。该调整后的对齐向量可作为目标对齐向量。例如，假设对齐向量为(4，3)，对齐向量的方向所在的象限为第二象限，目标对齐向量则为(0，3)，目标对齐向量的方向与该平面直角坐标系的y轴的正方向相同。

如图6的(c)所示，在平面直角坐标系中，对齐向量的方向所在的象限为第一象限，移动方向所在的象限为第三象限，则第一x轴分量方向为该平面直角坐标系的x轴的正方向，第二x轴分量方向为该平面直角坐标系的x轴的负方向，第一y轴分量方向为该平面直角坐标系的y轴的正方向，第二y轴分量方向为该平面直角坐标系的y轴的负方向，则表示第一x轴分量方向和第二x轴分量方向不相同，且第一y轴分量方向和第二y轴分量方向也不相同，此时，电子设备可将对齐向量置零，即将第一偏移分量，即x方向上的分量置零，并将第二偏移分量，即y方向上的分量置零，得到置零后的对齐向量。该置零后的对齐向量可作为目标对齐向量。

例如，假设对齐向量为(2，3)，目标对齐向量则为(0，0)。也就是说，当第一x轴分量方向和第二x轴分量方向不相同，且第一y轴分量方向和第二y轴分量方向不相同时，第二图像可以不进行移动。

如图6的(d)所示，在平面直角坐标系中，对齐向量的方向所在的象限为第一象限，移动方向所在的象限为第一象限，则第一x轴分量方向和第二x轴分量方向均为该平面直角坐标系的x轴的正方向，第一y轴分量方向和第二y轴分量方向均为该平面直角坐标系的y轴的正方向，则表示第一x轴分量方向和第二x轴分量方向相同，第一y轴分量方向和第二y轴分量方向相同，此时，电子设备可将对齐向量作为目标对齐向量，即将第一偏移分量，即x方向上的分量保持不变，并将第二偏移分量，即y方向上的分量保持不变。例如，假设对齐向量为(2，3)，目标对齐向量为(2，3)，目标对齐向量的方向与该对齐向量的方向相同。

在一些实施例中，流程202，可以包括：

电子设备对第一图像进行多次下采样处理，得到第一图像对应的多个不同尺寸的图像；

电子设备对第二图像进行多次下采样处理，得到第二图像对应的多个不同尺寸的图像；

电子设备根据第一图像、第二图像、第一图像对应的多个不同尺寸的图像和第二图像对应的多个不同尺寸的图像，确定第二图像相对于第一图像的对齐向量。

例如，假设第一图像和第二图像的尺寸为1920像素×1080像素。电子设备可对第一图像和第二图像分别进行2倍、4倍、8倍、16倍等下采样处理，得到第一图像对应的多个不同尺寸的图像和第二图像对应的多个不同尺寸的图像。其中，电子设备对第一图像和第二图像分别进行2倍下采样处理，所得到的两个图像的尺寸均为960像素×540像素。电子设备对第一图像和第二图像分别进行4倍下采样处理，所得到的两个图像的尺寸均为480像素×270像素。

在一些实施例中，电子设备可对第一图像进行2倍下采样处理，得到第三尺寸图像，并对第二图像进行2倍下采样处理，得到第一尺寸图像。然后，电子设备可对第三尺寸图像进行2倍下采样处理，得到第四尺寸图像，并对第一尺寸图像进行2倍下采样处理，得到第二尺寸图像。

其中，采样次数和采样倍数可根据实际情况设置，此处不作具体限制。

在一些实施例中，第二图像对应的多个不同尺寸的图像包括第一尺寸图像和第二尺寸图像，第二尺寸图像的尺寸小于第一尺寸图像的尺寸，第一尺寸图像的尺寸小于第二图像的尺寸，第一图像对应的多个不同尺寸的图像包括第三尺寸图像和第四尺寸图像，第四尺寸图像的尺寸小于第三尺寸图像的尺寸，第三尺寸图像的尺寸小于第一图像的尺寸，电子设备根据第一图像、第二图像、第一图像对应的多个不同尺寸的图像和第二图像对应的多个不同尺寸的图像，确定第二图像相对于第一图像的对齐向量，可以包括：

电子设备根据第二尺寸图像和第四尺寸图像，确定第一尺寸图像相对于第三尺寸图像的第一偏移向量，第二尺寸图像的尺寸等于第四尺寸图像的尺寸；

电子设备按照第一偏移向量，将第一尺寸图像相对于第三尺寸图像进行移动，得到第三图像；

电子设备根据第三图像和第三尺寸图像，确定第二图像相对于第一图像的第二偏移向量，第一尺寸图像的尺寸等于第三尺寸图像的尺寸；

电子设备按照第二偏移向量，将第二图像相对于第一图像进行移动，得到第四图像；

电子设备根据第四图像和第一图像，确定第二图像相对于第一图像的第三偏移向量；

电子设备根据第二偏移向量和第三偏移向量确定第二图像相对于第一图像的对齐向量。

比如，首先，电子设备可按照2倍的采样倍数对第一图像进行下采样处理，得到第一图像对应的第三尺寸图像，并按照2倍的采样倍数对第二图像进行下采样处理，得到第二图像对应的第一尺寸图像。然后，电子设备可按照4倍的采样倍数对第一图像进行下采样处理或者按照2倍的采样倍数对第三尺寸图像进行下采样处理，得到第一图像对应的第四尺寸图像，并按照4倍的采样倍数对第二图像进行下采样处理或者按照2倍的采样倍数对第一尺寸图像进行下采样处理，得到第二图像对应的第二尺寸图像。

其中，第二尺寸图像的尺寸小于第一尺寸图像的尺寸，第一尺寸图像的尺寸小于第二图像的尺寸；第四尺寸图像的尺寸小于第三尺寸图像的尺寸，第三尺寸图像的尺寸小于第一图像的尺寸；第一图像的尺寸等于第二图像的尺寸，第一尺寸图像的尺寸等于第三尺寸图像的尺寸，第二图像的尺寸等于第四尺寸图像的尺寸。

然后，电子设备可获取多个预设向量。其中，预设向量具有方向和大小，对于预设向量的大小本申请实施例不作具体限定，如大小可为一个像素单位。任意两个预设向量的方向不同，大小相同。例如，多个预设向量的方向分别为如图2所示的方向D1、D2、D3、D4、D5、D6、D7、D8。接着，电子设备可将第二尺寸图像和第四尺寸图像重合，并按照每个预设向量对第二尺寸图像进行平移，得到第二尺寸图像对应的多个平移图像。接着，电子设备可计算第四尺寸图像与每个平移图像的非相关性值，得到多个非相关性值。其中，每一非相关性值与一平移图像对应。

例如，如图7所示，电子设备可按照预设向量P将第二尺寸图像G1相对于第四尺寸图像G3进行平移，得到第二尺寸图像G1对应的平移图像G2。其中，该预设向量P的大小为1个像素单位，该预设向量P的方向为如图2所示的方向D5，即电子设备可将第二尺寸图像G1向D5方向平移一个像素单位，得到平移图像G2。然后，电子设备可以计算平移图像G2与第四尺寸图像G3的非相关性值。

其中，电子设备计算平移图像G2与第四尺寸图像G3的非相关性值，可以包括：电子设备对平移图像G2和第四尺寸图像G3的重叠部分，即区域A1和区域A2中的相同位置的像素点的灰度值进行异或操作，得到多个异或操作结果。然后，电子设备根据异或操作结果，计算平移图像G2和第四尺寸图像G3的非相关性值。例如，电子设备可以对像素点P1’的灰度值和像素点P2的灰度值进行异或操作，得到异或操作结果。其中，若像素点P1’的灰度值和像素点P2的灰度值相同，则异或操作结果为0；若像素点P1’的灰度值和像素点P2的灰度值不相同，则异或操作结果为1。以此类推，电子设备还可以对像素点P3’的灰度值和像素点P4的灰度值进行异或操作，得到异或操作结果。从而，电子设备可得到多个异或操作结果。然后，电子设备可以将多个异或操作结果相加，得到平移图像G2和第四尺寸图像G3的非相关性值。比如，假设根据某两个图像得到的多个异或操作结果分别为0、0、0、0、0、0、1、1、1、0、0、0、1、1、0、0、1、1、0、0、0、0、0，则该两个图像的非相关性值为6。

以此类推，电子设备还可以按照上述方式得到第四尺寸图像与其他平移图像的非相关性值，从而得到多个非相关性值。其中，其他平移图像为分别按照多个预设向量中除预设向量P之外的预设向量将第二尺寸图像相对于第四尺寸图像进行平移所得到的。

随后，电子设备可从多个非相关性值中确定最小非相关性值。接着，电子设备可将最小非相关性值对应的预设向量确定为第二尺寸图像对应相对于第四尺寸图像的偏移向量。如第二尺寸图像相对于第四尺寸图像的偏移向量的大小为1，第二尺寸图像相对于第四尺寸图像的偏移向量的方向为如图2所示的方向D5。

接着，电子设备可根据第二尺寸图像相对于第四尺寸图像的偏移向量确定第一尺寸图像相对于第三尺寸图像的第一偏移向量。例如，电子设备可将第二尺寸图像相对于第四尺寸图像的偏移向量乘以第一采样倍数，得到第一尺寸图像相对于第三尺寸图像的第一偏移向量。其中，第一采样倍数为对第一尺寸图像进行下采样处理得到第二尺寸图像所需的采样倍数。如，假设第二尺寸图像相对于第四尺寸图像的偏移向量的大小为1，第二尺寸图像相对于第四尺寸图像的偏移向量的方向为如图2所示的D5方向。若第二尺寸图像为第一尺寸图像按照2倍的采样倍数进行下采样得到，那么第一偏移向量的大小为2，第一偏移向量的方向为如图2所示的D5方向。

随后，电子设备可在第一尺寸图像和第三尺寸图像重合的基础上，按照第一偏移向量，移动第一尺寸图像，得到第三图像。比如，第一偏移向量的大小为2，第一偏移向量的方向为如图2所示的D5方向。那么，第一尺寸图像可向如图2所示的D5方向移动2个像素单位，得到第三图像。

接着，电子设备可以按照与上述根据第二尺寸图像和第四尺寸图像确定第二尺寸图像相对于第四尺寸图像的偏移向量相同的方式，根据第三图像和第三尺寸图像，确定第三图像相对于第三尺寸图像的偏移向量。由于第三图像为第一尺寸图像根据第一尺寸图像相对于第三尺寸图像的偏移向量进行移动所得到，因此电子设备根据第三图像和第三尺寸图像，确定第二图像相对于第一图像的第二偏移向量，可以包括：根据第三图像相对于第三尺寸图像的偏移向量，以及第一尺寸图像相对于第三尺寸图像的偏移向量，确定第二图像相对于第一图像的第二偏移向量。

可以理解的是，第一尺寸图像相对于第三尺寸图像的偏移向量根据第二尺寸图像相对于第四尺寸图像的偏移向量乘以第一尺寸图像与第二尺寸图像之间的采样倍数所得到，其中，第一尺寸图像与第二尺寸图像之间的采样倍数为对第一尺寸图像进行下采样处理得到第二尺寸图像所需的采样倍数；第三图像相对于第三尺寸图像的偏移向量为多个预设向量中最小相关性值对应的预设向量。

还可以理解的是，第二图像相对于第一图像的第二偏移向量根据第一尺寸图像相对于第三尺寸图像的偏移向量乘以第一尺寸图像与第二图像之间的采样倍数，以及第三图像相对于第三尺寸图像的偏移向量乘以第一尺寸图像与第二图像之间的采样倍数所得到，其中，第二图像与第一尺寸图像之间的采样倍数为对第二图像进行下采样处理得到第一尺寸图像所需的采样倍数。

例如，假设第三图像相对于第三尺寸图像的偏移向量的大小为1，方向为方向D7；第一尺寸图像相对于第三尺寸图像的偏移向量的大小为2，方向为方向D3，第二图像与第一尺寸图像之间的采样倍数为2倍。首先，电子设备可将第一尺寸图像相对于第三尺寸图像的偏移向量乘以2，得到大小为4，方向为方向D3的偏移向量，并将第三图像相对于第三尺寸图像的偏移向量乘以2，得到大小为2，方向为方向D7的偏移向量；由于方向D7和方向D3为相反的两个方向，因此可将大小为4，方向为方向D3的偏移向量与大小为2，方向为方向D7的偏移向量相减，得到第二图像相对于第一图像的第二偏移向量。即，第二图像相对于第一图像的第二偏移向量的大小为2；且由于方向D3的偏移向量更大，因此，第二图像相对于第一图像的第二偏移向量的方向为方向D3。

随后，电子设备可按照第二偏移向量，将第二图像相对于第一图像进行移动，得到第四图像。

在一些实施例中，电子设备可以将第一尺寸图像相对于第三尺寸图像的偏移向量乘以第二采样倍数，得到第四偏移向量；电子设备按照第四偏移向量将第二图像相对于第一图像进行移动，得到第五图像；电子设备将第三图像相对于第三尺寸图像的偏移向量乘以第二采样倍数，得到第五偏移向量，电子设备按照第五偏移向量将第五图像相对于第一图像进行移动，得到第四图像。其中，第二采样倍数为对第二图像进行下采样处理，得到第一尺寸图像所需的采样倍数。如，若按照2倍的采样倍数对第二图像进行下采样处理，得到第一尺寸图像，那么，第二采样倍数为2。

例如，假设第三图像相对于第三尺寸图像的偏移向量的大小为1，方向为方向D7；第一尺寸图像相对于第三尺寸图像的偏移向量的大小为2，方向为方向D3；第二采样倍数为2，那么，电子设备可将第二图像先向D3方向移动4个像素单位，再向D7方向移动2个像素单位，得到第四图像。可以看出，第四图像实际上是由第二图像向D3方向移动2个像素单位所得到。

然后，电子设备可以按照与上述根据第二尺寸图像和第四尺寸图像确定第二尺寸图像相对于第四尺寸图像的偏移向量相同的方式，根据第四图像和第一图像，确定第四图像相对于第一图像的偏移向量，即第四图像相对于第一图像的偏移向量为多个预设向量中最小相关性值对应的预设向量。电子设备可将第四图像相对于第一图像的偏移向量作为第二图像相对于第一图像的第三偏移向量。

接着，电子设备可根据第二偏移向量和第三偏移向量，确定第二图像相对于第一图像的对齐向量。例如，若第二偏移向量的大小为2，方向为方向D7，第三偏移向量的大小为1，方向为方向D3，那么，第二图像相对于第一图像的对齐向量的大小为1，方向为方向D3。

在一些实施例中，电子设备根据第四图像和第一图像，确定第二图像相对于第一图像的第三偏移向量，可以包括：

电子设备获取多个预设向量；

电子设备按照每个预设向量将第四图像相对于第一图像进行平移，得到第四图像对应的多个平移图像；

电子设备计算第一图像与每个平移图像的非相关性值，得到多个非相关性值，每一非相关性值与一平移图像对应；

电子设备从多个非相关性值中确定最小非相关性值；

电子设备将最小非相关性值对应的预设向量确定为第二图像相对于第一图像的第三偏移向量。

其中，预设向量具有方向和大小，对于预设向量的大小本申请实施例不作具体限定，如大小可为一个像素单位。任意两个预设向量的方向不同，大小相同。例如，多个预设向量的方向分别为如图2所示的方向D1、D2、D3、D4、D5、D6、D7、D8。电子设备可在按照第二偏移向量，将第二图像相对于第一图像进行移动，得到第四图像的基础上，即第一图像和第四图像不重合的基础上，按照每个预设向量将第四图像相对于第一图像进行平移，得到第四图像对应的多个平移图像。

例如，假设第二偏移向量的大小为2，方向为D7方向，某个预设向量的大小为1，方向为方向D3，那么，电子设备可在第一图像和第二图像重合的基础上，将第二图像向D7方向移动2个像素单位，得到第四图像。随后，电子设备可在第四图像相对于第一图像往D7方向偏移2个像素单位的基础上，将第四图像向D3方向平移1个像素单位，得到第四图像对应的一个平移图像。

然后，电子设备可计算第一图像与每个平移图像的非相关性值，得到多个非相关性值。接着，电子设备可从多个非相关性值中确定最小非相关性值，并将最小非相关性值对应的预设向量确定为第二图像相对于第一图像的第三偏移向量。假设多个非相关性值分别为4、7、8、1、4、3、6、7、5，那么，电子设备可将相关性值为1所对应的预设向量确定为第二图像相对于第一图像的第三偏移向量。假设相关性值为1所对应的预设向量的大小为1，方向为如图2所示的方向D3，那么，第二图像相对于第一图像的第三偏移向量的大小为1，方向为如图2所示的方向D3。其中，电子设备计算第一图像与每个平移图像的非相关性值，可以包括：

电子设备对第一图像和每个平移图像的重叠部分进行异或操作，得到异或操作结果；

电子设备根据异或操作结果，计算第一图像与每个平移图像的非相关性值。

比如，电子设备对第一图像和每个平移图像的重叠部分的相同位置的像素点的灰度值进行异或操作，得到每个平移图像对应的多个异或操作结果。其中，当第一像素点和第二像素点的灰度值相同时，第一像素点和第二像素点的异或操作结果为0；当第一像素点和第二像素点的灰度值不相同时，第一像素点和第二像素点的异或操作结果为1。

然后，电子设备可将每个平移图像对应的多个异或操作结果相加，得到第一图像与每个平移图像的非相关性值。例如，假设某一平移图像对应的多个异或操作结果为0、1、0、0、1、1、0、0、0、1，则第一图像和该平移图像的非相关性值为4。

在一些实施例中，电子设备可获取第一图像和第二图像。然后，电子设备可以基于特征点检测的仿射变换算法，确定第二图像相对于第一图像的对齐向量。接着，电子设备可获取移动方向，该移动方向为拍摄第二图像时电子设备相对于拍摄第一图像时的移动方向。随后，电子设备可根据对齐向量和移动方向，确定目标对齐向量。最后，电子设备可基于目标对齐向量将第二图像相对于第一图像进行移动，以使第二图像与第一图像对齐。

在另一些实施例中，电子设备可采用一个或多个摄像头对同一拍摄场景进行连续拍摄，以得到多帧图像。当获取到多帧图像之后，电子设备可将其中一帧图像作为第一图像，将其他图像作为第二图像，即电子设备可得到一个第一图像和多个第二图像。当得到一个第一图像和多个第二图像之后，电子设备还可以获取第二图像的数量。当第二图像的数量小于预设数量时，电子设备可以根据第一图像、每个第二图像、第一图像对应的多个不同尺寸的图像和每个第二图像对应的多个不同尺寸的图像，确定每个第二图像相对于第一图像的偏移向量。当第二图像的数量大于或等于预设数量时，电子设备可以基于特征点检测的仿射变换算法，确定每个第二图像相对于第一图像的偏移向量。随后，电子设备可根据每个第二图像相对于第一图像的偏移向量，以及每个第二图像对应的移动方向，确定每个第二图像相对于第一图像的目标偏移向量。最后，电子设备可基于每个第二图像相对于第一图像的目标偏移向量将每个第二图像相对于第一图像进行移动，以使每个第二图像与第一图像对齐。其中，某第二图像对应的移动方向为拍摄该第二图像时电子设备相对于拍摄第一图像时的移动方向。

请参阅图8，图8为本申请实施例提供的图像处理装置的结构示意图。该图像处理装置300包括：第一获取模块301，第一确定模块302，第二获取模块303，第二确定模块304及对齐模块305。

第一获取模块301，用于获取第一图像和第二图像。

第一确定模块302，用于根据所述第一图像和所述第二图像，确定所述第二图像相对于所述第一图像的对齐向量。

第二获取模块303，用于获取移动方向，所述移动方向为拍摄所述第二图像时电子设备相对于拍摄所述第一图像时的移动方向。

第二确定模块304，用于根据所述对齐向量和所述移动方向，确定目标对齐向量。

对齐模块305，用于基于所述目标对齐向量将所述第二图像相对于所述第一图像进行移动，以使所述第二图像与所述第一图像对齐。

在一些实施例中，第二确定模块304，可以用于：确定所述对齐向量的方向所在的象限和所述移动方向所在的象限；判断所述对齐向量的方向所在的象限与所述移动方向所在的象限是否相同；若所述对齐向量的方向所在的象限与所述移动方向所在的象限不相同，则对所述对齐向量进行调整，得到目标对齐向量。

在一些实施例中，所述对齐向量的方向所在的象限对应第一x轴分量方向和第一y轴分量方向，所述移动方向所在的象限对应第二x轴分量方向和第二y轴分量方向，所述对齐向量包括第一偏移分量和第二偏移分量，第二确定模块304，可以用于：若所述第一x轴分量方向与所述第二x轴分量方向不相同，且所述第一y轴分量方向与所述第二y轴分量方向相同，则将所述第一偏移分量置零，并将所述第二偏移分量保持不变，得到调整后的对齐向量；若所述第一y轴分量方向与所述第二y轴分量方向不相同，且所述第一x轴分量方向与第二x轴分量方向相同，则将所述第二偏移分量置零，并将所述第一偏移分量保持不变，得到调整后的对齐向量；将所述调整后的对齐向量确定为目标对齐向量；若所述第一x轴分量方向和所述第二x轴分量方向不相同，且所述第一y轴分量方向和所述第二y轴分量方向不相同，则将所述对齐向量置零，得到置零后的对齐向量；将所述置零后的对齐向量确定为目标对齐向量。

在一些实施例中，第二确定模块304，可以用于：若所述对齐向量的方向所在的象限与所述移动方向所在的象限相同，则将所述对齐向量作为目标对齐向量。

在一些实施例中，第一确定模块302，可以用于：对所述第一图像进行多次下采样处理，得到第一图像对应的多个不同尺寸的图像；对所述第二图像进行多次下采样处理，得到第二图像对应的多个不同尺寸的图像；根据所述第一图像、所述第二图像、第一图像对应的多个不同尺寸的图像和第二图像对应的多个不同尺寸的图像，确定第二图像相对于第一图像的对齐向量。

在一些实施例中，所述第二图像对应的多个不同尺寸的图像包括第一尺寸图像和第二尺寸图像，所述第二尺寸图像的尺寸小于所述第一尺寸图像的尺寸，所述第一尺寸图像的尺寸小于第二图像的尺寸，所述第一图像对应的多个不同尺寸的图像包括第三尺寸图像和第四尺寸图像，所述第四尺寸图像的尺寸小于所述第三尺寸图像的尺寸，所述第三尺寸图像的尺寸小于第一图像的尺寸，第一确定模块302，可以用于：根据所述第二尺寸图像和所述第四尺寸图像，确定第一尺寸图像相对于第三尺寸图像的第一偏移向量，所述第二尺寸图像的尺寸等于所述第四尺寸图像的尺寸；按照所述第一偏移向量，将所述第一尺寸图像相对于所述第三尺寸图像进行移动，得到第三图像；根据所述第三图像和所述第三尺寸图像，确定第二图像相对于第一图像的第二偏移向量，所述第一尺寸图像的尺寸等于所述第三尺寸图像的尺寸；按照所述第二偏移向量，将所述第二图像相对于所述第一图像进行移动，得到第四图像；根据所述第四图像和所述第一图像，确定所述第二图像相对于第一图像的第三偏移向量；根据所述第二偏移向量和所述第三偏移向量确定第二图像相对于第一图像的对齐向量。

在一些实施例中，第一确定模块302，可以用于：获取多个预设向量；按照每个预设向量将所述第四图像相对于所述第一图像进行平移，得到所述第四图像对应的多个平移图像；计算所述第一图像与每个平移图像的非相关性值，得到多个非相关性值，每一非相关性值与一平移图像对应；从多个非相关性值中确定最小非相关性值；将所述最小非相关性值对应的预设向量确定为所述第二图像相对于所述第一图像的第三偏移向量。

本申请实施例提供一种计算机可读的存储介质，其上存储有计算机程序，当所述计算机程序在计算机上执行时，使得所述计算机执行如本实施例提供的图像处理方法中的流程。

本申请实施例还提供一种电子设备，包括存储器，处理器，所述处理器通过调用所述存储器中存储的计算机程序，用于执行本实施例提供的图像处理方法中的流程。

例如，上述电子设备可以是诸如平板电脑或者智能手机等移动终端。请参阅图9，图9为本申请实施例提供的电子设备的第一种结构示意图。

该电子设备400可以包括摄像模组401、存储器402、处理器403及传感器404等部件。本领域技术人员可以理解，图9中示出的电子设备结构并不构成对电子设备的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。

摄像模组401可以包括透镜、图像传感器和图像信号处理器，其中透镜用于采集外部的光源信号提供给图像传感器，图像传感器感应来自于透镜的光源信号，将其转换为数字化的原始图像，即RAW图像，并将该RAW图像提供给图像信号处理器处理。图像信号处理器可以对该RAW图像进行格式转换，降噪等处理，得到YUV图像。其中，RAW是未经处理、也未经压缩的格式，可以将其形象地称为“数字底片”。YUV是一种颜色编码方法，其中Y表示亮度，U表示色度，V表示浓度，人眼从YUV图像中可以直观的感受到其中所包含的自然特征。

存储器402可用于存储应用程序和数据。存储器402存储的应用程序中包含有可执行代码。应用程序可以组成各种功能模块。处理器403通过运行存储在存储器402的应用程序，从而执行各种功能应用以及数据处理。

处理器403是电子设备的控制中心，利用各种接口和线路连接整个电子设备的各个部分，通过运行或执行存储在存储器402内的应用程序，以及调用存储在存储器402内的数据，执行电子设备的各种功能和处理数据，从而对电子设备进行整体监控。

传感器404可包括加速度传感器、陀螺仪传感器、方向传感器、磁场传感器等，其可用于获取电子设备400的移动方向。

在本实施例中，电子设备中的处理器403会按照如下的指令，将一个或一个以上的应用程序的进程对应的可执行代码加载到存储器402中，并由处理器403来运行存储在存储器402中的应用程序，从而执行：

获取第一图像和第二图像；

根据所述对齐向量和所述移动方向，确定目标对齐向量；

请参阅图10，电子设备400可以包括摄像模组401、存储器402、处理器403、传感器404、扬声器405、触摸显示屏406等部件。

摄像模组401可以包括图像处理电路，图像处理电路可以利用硬件和/或软件组件实现，可包括定义图像信号处理(Image Signal Processing)管线的各种处理单元。图像处理电路至少可以包括：摄像头、图像信号处理器(Image Signal Processor，ISP处理器)、控制逻辑器、图像存储器以及显示器等。其中摄像头至少可以包括一个或多个透镜和图像传感器。图像传感器可包括色彩滤镜阵列(如Bayer滤镜)。图像传感器可获取用图像传感器的每个成像像素捕捉的光强度和波长信息，并提供可由图像信号处理器处理的一组原始图像数据。

图像信号处理器可以按多种格式逐个像素地处理原始图像数据。例如，每个图像像素可具有8、10、12或14比特的位深度，图像信号处理器可对原始图像数据进行一个或多个图像处理操作、收集关于图像数据的统计信息。其中，图像处理操作可按相同或不同的位深度精度进行。原始图像数据经过图像信号处理器处理后可存储至图像存储器中。图像信号处理器还可从图像存储器处接收图像数据。

图像存储器可为存储器装置的一部分、存储设备、或电子设备内的独立的专用存储器，并可包括DMA(Direct Memory Access，直接直接存储器存取)特征。

当接收到来自图像存储器的图像数据时，图像信号处理器可进行一个或多个图像处理操作，如时域滤波。处理后的图像数据可发送给图像存储器，以便在被显示之前进行另外的处理。图像信号处理器还可从图像存储器接收处理数据，并对所述处理数据进行原始域中以及RGB和YCbCr颜色空间中的图像数据处理。处理后的图像数据可输出给显示器，以供用户观看和/或由图形引擎或GPU(Graphics Processing Unit，图形处理器)进一步处理。此外，图像信号处理器的输出还可发送给图像存储器，且显示器可从图像存储器读取图像数据。在一种实施方式中，图像存储器可被配置为实现一个或多个帧缓冲器。

图像信号处理器确定的统计数据可发送给控制逻辑器。例如，统计数据可包括自动曝光、自动白平衡、自动聚焦、闪烁检测、黑电平补偿、透镜阴影校正等图像传感器的统计信息。

控制逻辑器可包括执行一个或多个例程(如固件)的处理器和/或微控制器。一个或多个例程可根据接收的统计数据，确定摄像头的控制参数以及ISP控制参数。例如，摄像头的控制参数可包括照相机闪光控制参数、透镜的控制参数(例如聚焦或变焦用焦距)、或这些参数的组合。ISP控制参数可包括用于自动白平衡和颜色调整(例如，在RGB处理期间)的增益水平和色彩校正矩阵等。

请参阅图11，图11为本实施例中图像处理电路的结构示意图。如图11所示，为便于说明，仅示出与本申请实施例相关的图像处理技术的各个方面。

例如图像处理电路可以包括：摄像头、图像信号处理器、控制逻辑器、图像存储器、显示器。其中，摄像头可以包括一个或多个透镜和图像传感器。在一些实施例中，摄像头可为长焦摄像头或广角摄像头中的任一者。

摄像头采集的第一图像传输给图像信号处理器进行处理。图像信号处理器处理第一图像后，可将第一图像的统计数据(如图像的亮度、图像的反差值、图像的颜色等)发送给控制逻辑器。控制逻辑器可根据统计数据确定摄像头的控制参数，从而摄像头可根据控制参数进行自动对焦、自动曝光等操作。第一图像经过图像信号处理器进行处理后可存储至图像存储器中。图像信号处理器也可以读取图像存储器中存储的图像以进行处理。另外，第一图像经过图像信号处理器进行处理后可直接发送至显示器进行显示。显示器也可以读取图像存储器中的图像以进行显示。

此外，图中没有展示的，电子设备还可以包括CPU和供电模块。CPU和逻辑控制器、图像信号处理器、图像存储器和显示器均连接，CPU用于实现全局控制。供电模块用于为各个模块供电。

存储器402存储的应用程序中包含有可执行代码。应用程序可以组成各种功能模块。处理器403通过运行存储在存储器402的应用程序，从而执行各种功能应用以及数据处理。

扬声器405可以播放声音信号。

触摸显示屏406可以用于接收用户对电子设备的触摸控制操作。

获取第一图像和第二图像；

根据所述对齐向量和所述移动方向，确定目标对齐向量；

在一种实施方式中，处理器403执行所述根据所述对齐向量和所述移动方向，确定目标偏移量时，可以执行：确定所述对齐向量的方向所在的象限和所述移动方向所在的象限；判断所述对齐向量的方向所在的象限与所述移动方向所在的象限是否相同；若所述对齐向量的方向所在的象限与所述移动方向所在的象限不相同，则对所述对齐向量进行调整，得到目标对齐向量。

在一种实施方式中，所述对齐向量的方向所在的象限对应第一x轴分量方向和第一y轴分量方向，所述移动方向所在的象限对应第二x轴分量方向和第二y轴分量方向，所述对齐向量包括第一偏移分量和第二偏移分量，处理器403执行所述对所述对齐向量进行调整，得到目标对齐向量时，可以执行：若所述第一x轴分量方向与所述第二x轴分量方向不相同，且所述第一y轴分量方向与所述第二y轴分量方向相同，则将所述第一偏移分量置零，并将所述第二偏移分量保持不变，得到调整后的对齐向量；若所述第一y轴分量方向与所述第二y轴分量方向不相同，且所述第一x轴分量方向与所述第二x轴分量方向相同，则将所述第二偏移分量置零，并将所述第一偏移分量保持不变，得到调整后的对齐向量；将所述调整后的对齐向量确定为目标对齐向量；若所述第一x轴分量方向与所述第二x轴分量方向不相同，且所述第一y轴分量方向与所述第二y轴分量方向不相同，则将所述对齐向量置零，得到置零后的对齐向量；将所述置零后的对齐向量确定为目标对齐向量。

在一种实施方式中，处理器403执行所述判断所述对齐向量的方向所在的象限与所述移动方向所在的象限是否相同之后，还可以执行：若所述对齐向量的方向所在的象限与所述移动方向所在的象限相同，则将所述对齐向量作为目标对齐向量。

在一种实施方式中，处理器403执行所述根据所述第一图像和所述第二图像，确定所述第二图像相对于所述第一图像的对齐向量时，可以执行：对所述第一图像进行多次下采样处理，得到第一图像对应的多个不同尺寸的图像；对所述第二图像进行多次下采样处理，得到第二图像对应的多个不同尺寸的图像；根据所述第一图像、所述第二图像、第一图像对应的多个不同尺寸的图像和第二图像对应的多个不同尺寸的图像，确定所述第二图像相对于所述第一图像的对齐向量。

在一种实施方式中，所述第二图像对应的多个不同尺寸的图像包括第一尺寸图像和第二尺寸图像，所述第二尺寸图像的尺寸小于所述第一尺寸图像的尺寸，所述第一尺寸图像的尺寸小于第二图像的尺寸，所述第一图像对应的多个不同尺寸的图像包括第三尺寸图像和第四尺寸图像，所述第四尺寸图像的尺寸小于所述第三尺寸图像的尺寸，所述第三尺寸图像的尺寸小于第一图像的尺寸，处理器403执行所述根据所述第一图像、所述第二图像、第一图像对应的多个不同尺寸的图像和第二图像对应的多个不同尺寸的图像，确定所述第二图像相对于所述第一图像的对齐向量时，可以执行：根据所述第二尺寸图像和所述第四尺寸图像，确定第一尺寸图像相对于第三尺寸图像的第一偏移向量，所述第二尺寸图像的尺寸等于所述第四尺寸图像的尺寸；按照所述第一偏移向量，将所述第一尺寸图像相对于所述第三尺寸图像进行移动，得到第三图像；根据所述第三图像和所述第三尺寸图像，确定所述第二图像相对于所述第一图像的第二偏移向量，所述第一尺寸图像的尺寸等于所述第三尺寸图像的尺寸；按照所述第二偏移向量，将所述第二图像相对于所述第一图像进行移动，得到第四图像；根据所述第四图像和所述第一图像，确定所述第二图像相对于所述第一图像的第三偏移向量；根据所述第二偏移向量和所述第三偏移向量确定所述第二图像相对于所述第一图像的对齐向量。

在一种实施方式中，处理器403执行所述根据所述第四图像和所述第一图像，确定所述第二图像相对于所述第一图像的第三偏移向量时，可以执行：获取多个预设向量；按照每个预设向量将所述第四图像相对于所述第一图像进行平移，得到所述第四图像对应的多个平移图像；计算所述第一图像与每个平移图像的非相关性值，得到多个非相关性值，每一非相关性值与一平移图像对应；从多个非相关性值中确定最小非相关性值；将所述最小非相关性值对应的预设向量确定为所述第二图像相对于所述第一图像的第三偏移向量。

在上述实施例中，对各个实施例的描述都各有侧重，某个实施例中没有详述的部分，可以参见上文针对图像处理方法的详细描述，此处不再赘述。

本申请实施例提供的所述图像处理装置与上文实施例中的图像处理方法属于同一构思，在所述图像处理装置上可以运行所述图像处理方法实施例中提供的任一方法，其具体实现过程详见所述图像处理方法实施例，此处不再赘述。

需要说明的是，对本申请实施例所述图像处理方法而言，本领域普通技术人员可以理解实现本申请实施例所述图像处理方法的全部或部分流程，是可以通过计算机程序来控制相关的硬件来完成，所述计算机程序可存储于一计算机可读取存储介质中，如存储在存储器中，并被至少一个处理器执行，在执行过程中可包括如所述图像处理方法的实施例的流程。其中，所述的存储介质可为磁碟、光盘、只读存储器(ROM，Read Only Memory)、随机存取记忆体(RAM，Random Access Memory)等。

对本申请实施例的所述图像处理装置而言，其各功能模块可以集成在一个处理芯片中，也可以是各个模块单独物理存在，也可以两个或两个以上模块集成在一个模块中。上述集成的模块既可以采用硬件的形式实现，也可以采用软件功能模块的形式实现。所述集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时，也可以存储在一个计算机可读取存储介质中，所述存储介质譬如为只读存储器，磁盘或光盘等。

以上对本申请实施例所提供的一种图像处理方法、装置、存储介质以及电子设备进行了详细介绍，本文中应用了具体个例对本申请的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本申请的方法及其核心思想；同时，对于本领域的技术人员，依据本申请的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本申请的限制。

Claims

1.一种图像处理方法，其特征在于，包括：

获取第一图像和第二图像；

确定所述对齐向量的方向所在的象限和所述移动方向所在的象限；

若所述对齐向量的方向所在的象限与所述移动方向所在的象限不相同，且所述对齐向量的方向所在的象限与所述移动方向所在的象限为相邻的两个象限，则对所述对齐向量进行调整，得到目标对齐向量；

2.根据权利要求1所述的图像处理方法，其特征在于，所述对齐向量的方向所在的象限对应第一x轴分量方向和第一y轴分量方向，所述移动方向所在的象限对应第二x轴分量方向和第二y轴分量方向，所述对齐向量包括第一偏移分量和第二偏移分量，所述对所述对齐向量进行调整，得到目标对齐向量，包括：

若所述第一x轴分量方向与所述第二x轴分量方向不相同，且所述第一y轴分量方向与所述第二y轴分量方向相同，则将所述第一偏移分量置零，并将所述第二偏移分量保持不变，得到调整后的对齐向量；

若所述第一y轴分量方向与所述第二y轴分量方向不相同，且所述第一x轴分量方向与所述第二x轴分量方向相同，则将所述第二偏移分量置零，并将所述第一偏移分量保持不变，得到调整后的对齐向量；

将所述调整后的对齐向量确定为目标对齐向量；

若所述第一x轴分量方向与所述第二x轴分量方向不相同，且所述第一y轴分量方向与所述第二y轴分量方向不相同，则将所述对齐向量置零，得到置零后的对齐向量；

将所述置零后的对齐向量确定为目标对齐向量。

3.根据权利要求1所述的图像处理方法，其特征在于，所述方法还包括：

若所述对齐向量的方向所在的象限与所述移动方向所在的象限相同，则将所述对齐向量作为目标对齐向量。

4.根据权利要求1所述的图像处理方法，其特征在于，所述根据所述第一图像和所述第二图像，确定所述第二图像相对于所述第一图像的对齐向量，包括：

对所述第一图像进行多次下采样处理，得到第一图像对应的多个不同尺寸的图像；

对所述第二图像进行多次下采样处理，得到第二图像对应的多个不同尺寸的图像；

根据所述第一图像、所述第二图像、第一图像对应的多个不同尺寸的图像和第二图像对应的多个不同尺寸的图像，确定所述第二图像相对于所述第一图像的对齐向量。

5.根据权利要求4所述的图像处理方法，其特征在于，所述第二图像对应的多个不同尺寸的图像包括第一尺寸图像和第二尺寸图像，所述第二尺寸图像的尺寸小于所述第一尺寸图像的尺寸，所述第一尺寸图像的尺寸小于第二图像的尺寸，所述第一图像对应的多个不同尺寸的图像包括第三尺寸图像和第四尺寸图像，所述第四尺寸图像的尺寸小于所述第三尺寸图像的尺寸，所述第三尺寸图像的尺寸小于第一图像的尺寸，所述根据所述第一图像、所述第二图像、第一图像对应的多个不同尺寸的图像和第二图像对应的多个不同尺寸的图像，确定所述第二图像相对于所述第一图像的对齐向量，包括：

根据所述第二尺寸图像和所述第四尺寸图像，确定第一尺寸图像相对于第三尺寸图像的第一偏移向量，所述第二尺寸图像的尺寸等于所述第四尺寸图像的尺寸；

按照所述第一偏移向量，将所述第一尺寸图像相对于所述第三尺寸图像进行移动，得到第三图像；

根据所述第三图像和所述第三尺寸图像，确定所述第二图像相对于所述第一图像的第二偏移向量，所述第一尺寸图像的尺寸等于所述第三尺寸图像的尺寸；

按照所述第二偏移向量，将所述第二图像相对于所述第一图像进行移动，得到第四图像；

根据所述第四图像和所述第一图像，确定所述第二图像相对于所述第一图像的第三偏移向量；

根据所述第二偏移向量和所述第三偏移向量确定所述第二图像相对于所述第一图像的对齐向量。

6.根据权利要求5所述的图像处理方法，其特征在于，所述根据所述第四图像和所述第一图像，确定所述第二图像相对于所述第一图像的第三偏移向量，包括：

获取多个预设向量；

按照每个预设向量将所述第四图像相对于所述第一图像进行平移，得到所述第四图像对应的多个平移图像；

计算所述第一图像与每个平移图像的非相关性值，得到多个非相关性值，每一非相关性值与一平移图像对应；

从多个非相关性值中确定最小非相关性值；

将所述最小非相关性值对应的预设向量确定为所述第二图像相对于所述第一图像的第三偏移向量。

7.一种图像处理装置，其特征在于，包括：

第一获取模块，用于获取第一图像和第二图像；

第二确定模块，用于确定所述对齐向量的方向所在的象限和所述移动方向所在的象限；若所述对齐向量的方向所在的象限与所述移动方向所在的象限不相同，且所述对齐向量的方向所在的象限与所述移动方向所在的象限为相邻的两个象限，则对所述对齐向量进行调整，得到目标对齐向量；

8.一种存储介质，其特征在于，所述存储介质中存储有计算机程序，当所述计算机程序在计算机上运行时，使得所述计算机执行权利要求1至6任一项所述的图像处理方法。

9.一种电子设备，其特征在于，所述电子设备包括处理器和存储器，所述存储器中存储有计算机程序，所述处理器通过调用所述存储器中存储的所述计算机程序，用于执行权利要求1至6任一项所述的图像处理方法。