CN112637500B - 图像处理方法及装置 - Google Patents

Abstract

本申请公开了一种图像处理方法及装置，属于通信技术领域。能够解决对电子设备拍摄的视频进行电子防抖处理，导致处理后的视频的显示效果较差的问题，该方法包括：通过摄像头，采用第一焦距采集第i帧图像，并获取摄像头采集第i帧图像时电子设备的抖动参数，i为大于1的整数；采用第一补偿参量，处理第i帧图像中的背景图像，得到第一图像，第一补偿参量根据抖动参数和第一焦距确定；采用第二补偿参量，处理第i帧图像中的前景图像，得到第二图像，第二补偿参量根据抖动参数和第二焦距确定，第二焦距根据第一焦距确定，且第二焦距小于第一焦距；将第一图像和第二图像合成，得到第三图像。本申请适用于对采集的图像实时处理的场景中。

Description

图像处理方法及装置

技术领域

本申请属于通信技术领域，具体涉及一种图像处理方法及装置。

背景技术

随着电子设备的发展，用户使用电子设备的拍摄功能的频率越来越高，用户对电子设备拍摄视频的稳定性的要求也越来越高。

目前，为避免电子设备抖动导致的拍摄画面模糊的问题，通常会采用电子防抖的方式来提高电子设备拍摄视频的稳定性。具体的，在电子设备拍摄视频的过程中，电子设备可以根据电子设备的抖动参数，对拍摄到的各帧图像进行整体的抖动补偿，确保补偿后的相邻图像之间保持相对稳定，以提高电子设备拍摄视频的稳定性。然而，当电子设备的拍摄范围内包括多个拍摄对象，且不同拍摄对象与电子设备之间的距离差异较大，例如，人脸距离电子设备0.3m，人脸后的房子距离电子设备15m时，根据电子设备的抖动参数对拍摄到的各帧图像进行整体的抖动补偿之后，可能使得距离电子设备距离较近的拍摄对象的图像发生畸变(例如人脸图像被拉伸或压缩)。如此，导致进行电子防抖处理后的视频的显示效果较差。

发明内容

本申请实施例的目的是提供一种图像处理方法及装置，能够解决对电子设备拍摄的视频进行电子防抖处理，导致处理后的视频的显示效果较差的问题。

为了解决上述技术问题，本申请是这样实现的：

第一方面，本申请实施例提供了一种图像处理方法，该方法包括：接收第一输入，第一输入用于触发拍摄视频或显示相机预览界面；且响应于第一输入，通过摄像头，采用第一焦距采集第i帧图像，并获取摄像头采集第i帧图像时电子设备的抖动参数，i为大于1的整数；并采用第一补偿参量，处理第i帧图像中的背景图像，得到第一图像，第一补偿参量根据抖动参数和第一焦距确定；且采用第二补偿参量，处理第i帧图像中的前景图像，得到第二图像，第二补偿参量根据抖动参数和第二焦距确定，第二焦距根据第一焦距确定，且第二焦距小于第一焦距；以及合成第一图像和第二图像，得到第三图像。

第二方面，本申请实施例提供了一种图像处理装置，该装置包括：接收模块、采集模块和处理模块；接收模块，用于接收第一输入，第一输入用于触发拍摄视频或显示相机预览界面；采集模块，用于响应于接收模块接收的第一输入，通过摄像头，采用第一焦距采集第i帧图像；并获取采集第i帧图像时电子设备的抖动参数；处理模块，用于采用第一补偿参量，处理采集模块采集的第i帧图像中的背景图像，得到第一图像；并采用第二补偿参量，处理采集模块采集的第i帧图像中的前景图像，得到第二图像；以及合成第一图像和第二图像，得到第三图像；其中，第一补偿参量根据抖动参数和第一焦距确定，第二补偿参量根据抖动参数和第二焦距确定，第二焦距根据第一焦距确定，且第二焦距小于第一焦距，i为大于1的整数。

第三方面，本申请实施例提供了一种电子设备，该电子设备包括处理器、存储器及存储在存储器上并可在处理器上运行的程序或指令，该程序或指令被处理器执行时实现如第一方面的方法的步骤。

第四方面，本申请实施例提供了一种可读存储介质，该可读存储介质上存储程序或指令，该程序或指令被处理器执行时实现如第一方面的方法的步骤。

第五方面，本申请实施例提供了一种芯片，该芯片包括处理器和通信接口，通信接口和处理器耦合，处理器用于运行程序或指令，实现如第一方面的方法。

在本申请实施例中，可以接收用于触发拍摄视频或显示相机预览界面的第一输入，且响应于第一输入，通过摄像头，采用第一焦距采集第i帧图像，并获取摄像头采集第i帧图像时电子设备的抖动参数，i为大于1的整数；并采用第一补偿参量，处理第i帧图像中的背景图像，得到第一图像，第一补偿参量根据抖动参数和第一焦距确定；并采用第二补偿参量，处理第i帧图像中的前景图像，得到第二图像，第二补偿参量根据抖动参数和第二焦距确定，第二焦距根据第一焦距确定，且第二焦距小于第一焦距；以及合成第一图像和第二图像，得到第三图像。通过该方案，由于可以对通过电子设备中的摄像头采集的每帧图像中的背景图像和前景图像采用不同的补偿参量进行防抖处理，因此不但可以确保处理后的图像相对于该图像的前一帧图像具有良好的防抖效果，而且可以避免处理后的图像中的前景图像发生畸变。如此可以提高电子防抖处理后的视频的显示效果。

附图说明

图1为本申请实施例提供的图像处理方法的示意图；

图2为本申请实施例提供的图像处理方法对图像中处理前的图像和处理后的图像的示意图；

图3为本申请实施例提供的图像处理方法中合成前的图像和合成后的图像的示意图；

图4为本申请实施例提供的图像处理方法中合成后的图像的示意图；

图5为本申请实施例提供的图像处理方法应用的电子设备的示意图；

图6为本申请实施例中的图像处理装置的示意图；

图7为本申请实施例中的电子设备的示意图；

图8为本申请实施例提供的电子设备的硬件示意图。

具体实施方式

下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。

本申请的说明书和权利要求书中的术语“第一”、“第二”等是用于区别类似的对象，而不用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外，说明书以及权利要求中“和/或”表示所连接对象的至少其中之一，字符“/”，一般表示前后关联对象是一种“或”的关系。

本申请实施例提供一种图像处理方法、装置和电子设备，可以接收第一输入，第一输入用于触发拍摄视频或显示相机预览界面；响应于第一输入，通过摄像头，采用第一焦距采集第i帧图像，并获取摄像头采集第i帧图像时电子设备的抖动参数，i为大于1的整数；采用第一补偿参量，处理第i帧图像中的背景图像，得到第一图像，第一补偿参量根据抖动参数和第一焦距确定；采用第二补偿参量，处理第i帧图像中的前景图像，得到第二图像，第二补偿参量根据抖动参数和第二焦距确定，第二焦距根据第一焦距确定，且第二焦距小于第一焦距；合成第一图像和第二图像，得到第三图像。通过该方案，由于可以对通过电子设备中的摄像头采集的每帧图像中的背景图像和前景图像采用不同的补偿参量进行防抖处理，因此不但可以确保处理后的图像相对于该图像的前一帧图像具有良好的防抖效果，而且可以避免处理后的图像中的前景图像发生畸变。如此可以提高电子防抖处理后的视频的显示效果。

下面结合附图，通过具体的实施例及其应用场景对本申请实施例提供的图像处理方法、装置和电子设备进行详细地说明。

目前，在对采集的图像进行电子防抖处理时，是根据采集该图像时获取的电子设备的抖动参数和采集该图像时电子设备采用的焦距(景深)，确定对该图像的补偿参量的。也就是说，对于图像中的每个像素点，均以相同的补偿参量进行防抖补偿。

然而，按照上述方法，电子防抖是对获取到的每帧图像根据运动进行裁切，使画面整体保持稳定，但目前电子防抖对图像进行处理时只能对拍摄范围内处于相同景深(例如，到摄像头的距离)的拍摄对象的图像具有较好的防抖效果。当几个拍摄对象的景深(即不同拍摄对象距离摄像头的距离)差距较大，例如，采用前置摄像头拍摄视频时，人脸和人脸后的背景的景深变化就很大。此时，基于电子设备的抖动参数和采集当前帧图像时采用的焦距，对该当前帧图像进行防抖处理，可以确保处理后的图像与采集的当前帧图像的前一帧图像的整体稳定效果较好，且处理后的图像中的背景图像相对于当前帧图像中的背景图像无畸变，但是处理后的图像中的人脸图像相对于当前帧图像中的人脸畸变(如人脸会被拉伸或压缩)。

在本申请实施例提供的图像处理方法中，当用户触发拍摄视频或触发显示相机预览界面时，可以通过摄像头，采用第一焦距采集第i帧图像，并获取摄像头采集第i帧图像时电子设备的抖动参数，i为大于1的整数；且根据抖动参数和第一焦距确定第一补偿参量，并根据抖动参数和第二焦距确定第二补偿参量，然后再采用第一补偿参量，处理第i帧图像中的背景图像，得到第一图像，采用第二补偿参量，处理第i帧图像中的前景图像，得到第二图像；以及合成第一图像和第二图像，得到第三图像，其中，第二焦距根据第一焦距确定，且第二焦距小于第一焦距。如此，由于可以对通过电子设备中的摄像头采集的每帧图像中的背景图像和前景图像采用不同的补偿参量进行防抖处理，因此不但可以确保处理后的图像相对于该图像的前一帧图像具有良好的防抖效果，而且可以避免处理后的图像中的前景图像发生畸变。从而可以提高电子防抖处理后的视频的显示效果。

如图1所示，本申请实施例提供的图像处理方法可以包括下述的步骤100至步骤104。下面以执行主体为图像处理装置为例对该方法进行示例性说明。

步骤100、图像处理装置接收第一输入。

其中，第一输入可以用于触发拍摄视频或触发显示相机预览界面。

例如，第一输入可以为用户对视频拍摄控件的输入，或为用户对相机应用的图标的输入。

步骤101、图像处理装置响应于第一输入，通过摄像头，采用第一焦距采集第i帧图像，并获取摄像头采集第i帧图像时电子设备的抖动参数。

其中，i可以为大于1的整数。

可选地，本申请实施例中，上述第i帧图像可以为在拍摄视频的过程中采集的图像，也可以为采集的预览图像(即显示相机预览界面时，相机预览界面中显示的图像)。具体可以根据实际使用需求确定，本申请实施例不作限定。

可选地，本申请实施例中，电子设备的防抖参数可以包括：第一抖动角度和第一抖动距离中的至少一项。

可选地，本申请实施例中，第一抖动角度可以为拍摄第i帧图像时，相对于拍摄第一帧图像或拍摄第i-1帧图像时电子设备偏移的角度。其中，第一抖动角度包括俯仰角、偏航角和横滚角中的至少一项。

可选地，本申请实施例中，第一抖动距离可以为拍摄第i帧图像时，相对于拍摄第一帧图像或拍摄第i-1帧图像时电子设备平移的距离。其中，第一抖动距离可以包括沿X轴上的平移距离，沿Y轴上的平移距离和沿Z轴的平移距离中的至少一项。

步骤102、图像处理装置采用第一补偿参量，处理第i帧图像中的背景图像，得到第一图像。

步骤103、图像处理装置采用第二补偿参量，处理第i帧图像中的前景图像，得到第二图像。

其中，第一补偿参量根据电子设备的抖动参数和第一焦距确定。第二补偿参量根据抖动参数和第二焦距确定，第二焦距根据第一焦距确定，且第二焦距小于第一焦距。对于根据电子设备的抖动参数和一个焦距确定补偿参量的具体方法，可以参考传统技术中根据电子设备的抖动参数和一个焦距确定补偿参量的相关描述，本申请实施例不作限定。

可选地，本申请实施例中，一种可能的实现方式中，图像处理装置可以先采用第一补偿参量处理第i帧图像，得到第四图像；并采用第二补偿参量处理第i帧图像，得到第五图像，然后再裁剪掉第四图像中的前景图像，得到第一图像，并裁剪掉第五图像中的背景图像，得到第二图像。或者，另一种可能的实现方式中，图像处理装置可以先对第i帧图像中的前景图像和背景图像进行分割，然后再采用第一补偿参量处理分割后的背景图像，并采用第二补偿参量处理分割后的前景图像。具体可以根据实际使用需求确定，本申请实施例不作限定。

本申请实施例中，在上述一种可能的实现方式中，第四图像包括前景图像和背景图像，且第四图像中的背景图像相对于第i帧图像中的背景图像的形变量小于或等于第一预设阈值(具体可以根据实际使用需求确定)；第五图像中的前景图像相对于第i帧图像中的前景图像的形变量小于或等于第二预设阈值(具体可以根据实际使用需求确定)；其中，第一预设阈值与第二预设阈值可以相同，也可以不同。

示例性地，在上述一种可能的实现方式中，参照图2，图2中的(a)为第i帧图像，第i帧图像20中的前景图像为人脸图像，第i帧图像21中的背景图像为除人脸图像之外的其他图像；如图2中的(b)所示为第四图像21，第四图像22中的背景图像相对于第i帧图像中的背景图像未发生变形，但第四图像22中的人脸图像相对于第i帧图像中的人脸图像被水平压缩(即发生形变)；图2中的(c)为第五图像23，第五图像23中的背景图像相对于第i帧图像中的背景图像被水平拉伸(即发生形变)，第五图像中的人脸图像相对于第i帧图像中的人脸图像未发生形变。

本申请实施例中，在上述另一种可能的实现方式中，第一图像相对于第i帧图像中的背景图像的形变量小于或等于第一预设阈值；第二图像相对于第i帧图像中的前景图像的形变量小于或等于第二预设阈值。

需要说明的是，本申请实施例中，距离摄像头的距离较小的对象可以称为前景对象，距离摄像头的距离较大的对象可以称为背景对象，背景对象和前景对象为一个相对概念。

例如，假设上述摄像头为电子设备中的前置摄像头，那么用户通过该摄像头拍摄视频时，用户脸部为前景对象，用户脸部之后的风景为背景对象。

可以理解，本申请实施例中，图像处理装置在分割或裁剪一个图像之前，可以先检测出该图像中的前景图像和背景图像。

本申请实施例中，对检测图像中的前景图像和背景图像的方法不作限定，具体的，可以采用Vibe算法、帧差法、对象识别法等，任意可以识别图像中的前景图像和背景图像的方法。

示例性地，以对象识别法为例，如果图像处理装置采用前置摄像头采集第i帧图像，那么图像处理装置可以将第i帧图像中的人物图像所在区域确定为第i帧图像中的前景图像，然后将图像中除人物图像所在区域之外的其他图像区域确定为背景图像。

步骤104、图像处理装置合成第一图像和第二图像，得到第三图像。

本申请实施例中，第三图像中的背景图像相对于第i帧图像中的背景图像的形变量小于或等于第一预设阈值，第三图像中的前景图像相对于第i帧图像中的前景图像的形变量小于或等于第二预设阈值。

示例性地，在上述一种可能的实现方式中，如图3所示，图像处理装置可以合并第四图像中的背景图像30(即第一图像)和第五图像中的前景图像31(即第二图像)，得到第三图像32。可以看出，第三图像中的背景图像和人脸图像均未变形(即形变量最小)。

可选地，本申请实施例中，图像处理装置在得到第三图像之后，还可以对第三图像的边缘区域进行裁剪，例如，如图4所示，可以裁剪掉第三图像40中虚线框之外的图像区域，以使裁剪后的第三图像相对于第i-1帧图像或第1帧图像保持相对稳定。

可选地，本申请实施例中，可以不限定第二焦距的数量，即第二焦距可以为一个焦距，也可以为多个焦距。

可以理解，本申请实施例中，假设第二焦距为N个焦距，对于N个焦距中的每个焦距，根据一个焦距和电子设备的抖动参数可以确定一个补偿参量，即当第二焦距为N个焦距时，第二补偿参量包括N个补偿参量。图像处理装置可以采用这N个补偿参量分别处理第i帧图像，如此可以得到N张图像，即第二图像为N张图像，N为大于1的整数。

可选地，本申请实施例中，假设上述N个焦距按照从大至小的顺序排列，那么，该N个焦距中的相邻两个焦距之差为一个定值，或者，该N个焦距中的相邻两个焦距之比为一个定值。

可选地，本申请实施例中，当第二图像为N张图像时，上述步骤104具体可以通过下述的步骤104a和步骤104b实现。

步骤104a、图像处理装置从N张图像中确定目标图像。

步骤104b、图像处理装置合成第一图像和目标图像，得到第三图像。

其中，目标图像为上述N张图像中相对于第i帧图像中的前景图像的形变量最小的图像。

例如，假设N＝2，且第一张图像相对于第i帧图像中的前景图像的形变量为5％，第二张图像相对于第i帧图像中的前景图像的形变量为2％，那么图像处理装置可以确定第二张图像为目标图像。

可选地，本申请实施例中，还可以将第i帧图像中的前景图像划分为Q(Q为大于1的整数)个第一区域。对于每个第一区域，分别从N张图像中，确定第二区域相对于一个第一区域的形变量最小的图像，第二区域为N张图像的每张图像中与该一个第一区域对应的区域。然后，图像处理装置可以将确定出的每张图像中的第二区域(具体为第二区域的图像)裁剪出来，得到Q个第二区域，合成该Q个第二区域，得到目标图像。

本申请实施例中，由于可以从N张图像中选择出相对于第i帧图像中的前景图像的形变量最小的图像，并将选择出的图像与第一图像合成，如此可以确保第三图像中的前景图像的形变量最小。从而可以提高电子防抖处理后的图像的显示效果。

可选地，本申请实施例中，电子设备中可以设置微云台，上述摄像头可以设置在该微云台上。在通过摄像头采集图像的过程中，图像处理装置可以基于对象追踪技术，控制微云台旋转，以使摄像头的拍摄范围内的某个对象(例如前景对象)实时处于摄像头的视角中心线上，如此可以确保该对象的图像位于摄像头采集的图像的中间区域。

示例性地，本申请实施例中，当摄像头设置在电子设备中的微云台上时，在上述步骤101之前，本申请实施例提供的图像处理方法还可以包括下述的步骤105。

步骤105、图像处理装置基于对象追踪技术，控制微云台向旋转第一焦距。

其中，在微云台旋转第一角度之后，摄像头的拍摄范围内的目标拍摄对象位于所述摄像头的视角中心线上。并且在微云台旋转第一角度之后，图像处理装置通过摄像头采集的目标拍摄对象的图像(例如前景图像)位于摄像头采集的图像的中间区域。

可选地，本申请实施例中，目标拍摄对象可以为用户触发确定的拍摄对象，也可以为图像处理装置自动确定的拍摄对象，具体可以根据实际使用需求确定，本申请实施例不作限定。

可选地，本申请实施例中，目标拍摄对象可以为摄像头的拍摄范围内的任一对象。例如可以为前景对象中的一个对象，或背景对象中的一个对象。

本申请实施例中，由于可以利用微云台追踪前景对象的位置，因此可以确保目标拍摄对象的图像位于第三图像的中心区域，如此可以进一步提高处理后的图像的显示效果。

可选地，本申请实施例中，当摄像头设置在微云台上时，上述第一补偿参量具体可以根据电子设备的抖动参数、第一角度和第一焦距确定。第二补偿参量具体可以根据电子设备的抖动参数、第一角度和第二焦距确定。

可选地，本申请实施例中，上述摄像头可以包括第一摄像头和第二摄像头，上述第i帧图像可以包括第一摄像头采集的第一子图像和第二摄像头采集的第二子图像；上述步骤101具体可以通过下述的步骤101a和步骤101b实现；上述步骤102具体可以通过下述的步骤102a实现，上述的步骤103具体可以通过下述的步骤103a实现。

步骤101a、图像处理装置控制第一摄像头对焦到背景对象，且采用第一焦距采集第一子图像；并控制第二摄像头对焦到前景对象，且采用第一焦距采集第二子图像；以及获取目标抖动参数。

其中，目标抖动参数为第一摄像头采集第一子图像时电子设备的抖动参数、第二摄像头采集第二子图像时电子设备的抖动参数中的至少一项。

可选地，本申请实施例中，图像处理装置可以控制第一摄像头和第二摄像头同时采集图像。这种情况下，第一摄像头采集第一子图像时电子设备的抖动参数与第二摄像头采集第二子图像时电子设备的抖动参数相同。

示例性地，如图5所示，为电子设备50的示意图，电子设备50的前置摄像头包括第一摄像头51和第二摄像头52，当用户触发自拍时，图像处理装置可以采用第一摄像头51和第二摄像头52采集图像。

步骤102a、图像处理装置采用第一补偿参量，处理第一子图像，得到第一图像。

步骤103a、图像处理装置采用第二补偿参量，处理第二子图像，得到第一图像。

可选地，本申请实施例中，当第一摄像头设置在微云台上，第二摄像头未设置在微云台上时，第一补偿参量可以根据目标抖动参数、第一角度和第一焦距确定；第二补偿参量可以根据目标抖动参数和第二焦距确定。

本申请实施例中，由于可以采用不同摄像头分别对焦到前景对象和背景对象，并且第一图像为采用第一补偿参量对对焦到背景图像的第一子图像处理得到的，第二图像为采用第二补偿参量对对焦到背景图像的第二子图像处理得到的，因此不但可以使得第三图像的背景图像和前景图像无畸变，而且可以提高第三图像中的背景图像和前景图像的清晰度。

可选地，本申请实施例中，当电子设备中设置微云台时，上述第一摄像头可以设置在微云台上。这样可以确保第一子图像中的目标拍摄对象的图像位于第一子图像的中间区域，从而可以使得第一图像中的目标拍摄对象的图像也位于第一图像的中间区域，进而可以使得第三图像中的目标拍摄对象的图像也能够位于第三图像的中间区域。如此，不但可以确保第三图像中的背景图像和前景图像的清晰度，而且可以进一步提高第三图像的构图效果。

需要说明的是，本申请实施例提供的图像处理方法，执行主体可以为图像处理装置，或者该图像处理装置中的用于执行图像处理装置的方法的控制模块。本申请实施例中以图像处理装置执行图像处理方法为例，说明本申请实施例提供的图像处理方法。

如图6所示，本申请实施例提供一种图像处理装置60，该图像处理装置60可以包括：接收模块61、采集模块62和处理模块63；接收模块61，可以用于接收第一输入，第一输入用于触发拍摄视频或显示相机预览界面；采集模块62，可以用于响应于接收模块61接收的第一输入，通过摄像头，采用第一焦距采集第i帧图像；并获取采集第i帧图像时电子设备的抖动参数；处理模块63，可以用于采用第一补偿参量，处理采集模块62采集的第i帧图像中的背景图像，得到第一图像；并采用第二补偿参量，处理采集模块62采集的第i帧图像中的前景图像，得到第二图像；以及合成第一图像和第二图像，得到第三图像；

其中，第一补偿参量根据抖动参数和第一焦距确定，第二补偿参量根据抖动参数和第二焦距确定，第二焦距根据第一焦距确定，且第二焦距小于第一焦距，i为大于1的整数。

本申请实施例中，由于可以对通过电子设备的摄像头采集的每帧图像中的背景图像和前景图像采用不同的补偿参量进行防抖处理，因此不但可以确保处理后的图像相对于该图像的前一帧图像具有良好的防抖效果，而且可以避免处理后的图像中的前景图像发生畸变。如此可以提高电子防抖处理后的视频的显示效果。

可选地，本申请实施例中，电子设备的抖动参数可以包括第一抖动角度，第一抖动角度为拍摄第i帧图像时，相对于拍摄第一帧图像或拍摄第i-1帧图像时电子设备偏移的角度；

其中，第一抖动角度可以包括俯仰角、偏航角和横滚角中的至少一项。

可选地，本申请实施例中，第二补偿参量包括N个补偿参量，第二图像可以包括N张图像，N个补偿参量与N张图像一一对应，N可以为大于1的整数；处理模块63可以包括确定子模块和合成子模块；确定子模块，可以用于从N张图像中确定目标图像；合成子模块，可以用于合成第一图像和确定子模块确定的目标图像，得到第三图像；其中，目标图像可以为N张图像中相对于第i帧图像中的前景图像的形变量最小的图像。

本申请实施例中，由于可以从N张图像中选择出相对于第i帧图像中的前景图像的形变量最小的图像，并将选择出的图像与第一图像合成，如此可以确保第三图像中的前景图像的形变量最小。如此可以进一步提高处理后的图像的显示效果。

可选地，本申请实施例中，摄像头设置在电子设备中的微云台上；处理模块63，还可以用于在采集模块62通过摄像头，采用第一焦距采集第i帧图像之前，基于对象追踪技术，控制微云台旋转第一角度，在微云台旋转第一角度之后，摄像头的拍摄范围内的目标拍摄对象位于摄像头的视角中心线上。

本申请实施例中，由于可以利用微云台追踪前景对象的位置，因此可以确保前景图像位于确保合成后的第三图像的中心区域，如此可以进一步提高处理后的图像的显示效果。

可选地，本申请实施例中，摄像头可以包括第一摄像头和第二摄像头，且第一摄像头设置在微云台上，第i帧图像包括第一子图像和第二子图像；采集模块62，具体可以用于控制第一摄像头对焦到背景对象，并采用第一焦距采集第一子图像；且控制第二摄像头对焦到前景对象，并采用第一焦距采集第二子图像；处理模块63，具体可以用于采用第一补偿参量，处理第一子图像中的背景图像，得到第一图像；并采用第二补偿参量，处理第二子图像中的前景图像，得到第二图像。

本申请实施例中，由于可以采用不同摄像头分别对焦到前景对象和背景对象，并且第一图像为采用第一补偿参量对对焦到背景图像的第一子图像处理得到的，第二图像为采用第二补偿参量对对焦到背景图像的第二子图像处理得到的，因此不但可以使得第三图像的图像背景图像和前景图像无畸变，而且可以提高第三图像中的背景图像和前景图像的清晰度。

本申请实施例中的图像处理装置可以是装置，也可以是电子设备中的部件、集成电路、或芯片。该电子设备可以是移动电子设备，也可以为非移动电子设备。示例性的，移动电子设备可以为手机、平板电脑、笔记本电脑、掌上电脑、车载电子设备、可穿戴设备、超级移动个人计算机(ultra-mobile personal computer，UMPC)、上网本或者个人数字助理(personal digital assistant，PDA)等，非移动电子设备可以为个人计算机(personalcomputer，PC)、电视机(television，TV)、柜员机或者自助机等，本申请实施例不作具体限定。

本申请实施例中的图像处理装置可以为具有操作系统的装置。该操作系统可以为安卓(Android)操作系统，可以为iOS操作系统，还可以为其他可能的操作系统，本申请实施例不作具体限定。

本申请实施例提供的图像处理装置能够实现图1至图5的方法实施例中图像处理方法实现的各个过程，为避免重复，这里不再赘述。

如图7所示，本申请实施例还提供一种电子设备200，包括处理器202，存储器201，存储在存储器201上并可在处理器202上运行的程序或指令，该程序或指令被处理器202执行时实现上述图像处理方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。

需要注意的是，本申请实施例中的电子设备包括上述所述的移动电子设备和非移动电子设备。

图8为实现本申请实施例的一种电子设备的硬件结构示意图。

该电子设备1000包括但不限于：射频单元1001、网络模块1002、音频输出单元1003、输入单元1004、传感器1005、显示单元1006、用户输入单元1007、接口单元1008、存储器1009、以及处理器1010等部件。

本领域技术人员可以理解，电子设备1000还可以包括给各个部件供电的电源(比如电池)，电源可以通过电源管理系统与处理器1010逻辑相连，从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。图8中示出的电子设备结构并不构成对电子设备的限定，电子设备可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置，在此不再赘述。

其中，用户输入单元1007，可以用于接收第一输入，第一输入可以用于触发拍摄视频或显示相机预览界面；处理器1010，可以用于响应于用户输入单元1007接收的第一输入，通过摄像头，采用第一焦距采集第i帧图像；且获取通过摄像头采集第i帧图像时电子设备的抖动参数；并采用第一补偿参量，处理第i帧图像中的背景图像，得到第一图像；且采用第二补偿参量，处理第i帧图像中的前景图像，得到第二图像；以及合成第一图像和第二图像，得到第三图像；

其中，第一补偿参量根据抖动参数和第一焦距确定，第二补偿参量根据抖动参数和第二焦距确定，第二焦距根据第一焦距确定，且第二焦距小于第一焦距，i可以为大于1的整数。

本申请实施例中，由于可以对通过电子设备中的摄像头采集的每帧图像中的背景图像和前景图像采用不同的补偿参量进行防抖处理，因此不但可以确保处理后的图像相对于该图像的前一帧图像具有良好的防抖效果，而且可以避免处理后的图像中的前景图像发生畸变。如此可以提高电子防抖处理后的视频的显示效果。

可选地，本申请实施例中，电子设备的抖动参数可以包括第一抖动角度，第一抖动角度为拍摄第i帧图像时，相对于拍摄第一帧图像或拍摄第i-1帧图像时电子设备偏移的角度；

其中，第一抖动角度可以包括俯仰角、偏航角和横滚角中的至少一项。

可选地，本申请实施例中，第二补偿参量包括N个补偿参量，第二图像可以包括N张图像，N个补偿参量与N张图像一一对应，N可以为大于1的整数；处理器1010，具体可以用于从N张图像中确定目标图像；并将第一图像目标图像合成，得到第三图像；其中，目标图像可以为N张图像中相对于第i帧图像中的前景图像的形变量最小的图像。

本申请实施例中，由于可以从N张图像中选择出相对于第i帧图像中的前景图像的形变量最小的图像，并将选择出的图像与第一图像合成，如此可以确保第三图像中的前景图像的形变量最小。如此可以进一步提高处理后的图像的显示效果。

可选地，本申请实施例中，上述摄像头设置在电子设备中的微云台上；处理器1010，还可以用于在通过摄像头，采用第一焦距采集第i帧图像之前，基于对象追踪技术，控制微云台旋转第一角度，在微云台旋转第一角度之后，摄像头的拍摄范围内的目标拍摄对象位于摄像头的视角中心线上。

本申请实施例中，由于可以利用微云台追踪前景对象的位置，因此可以确保前景图像位于确保合成后的第三图像的中心区域，如此可以进一步提高处理后的图像的显示效果。

可选地，本申请实施例中，摄像头可以包括第一摄像头和第二摄像头，且第一摄像头设置在微云台上，第i帧图像包括第一子图像和第二子图像；处理器1010，具体可以用于控制第一摄像头对焦到背景对象，并采用第一焦距采集第一子图像；且控制第二摄像头对焦到前景对象，并采用第一焦距采集第二子图像；处理器1010，具体可以用于采用第一补偿参量，处理第一子图像中的背景图像，得到第一图像；并采用第二补偿参量，处理第二子图像中的前景图像，得到第二图像。

本申请实施例中，由于可以采用不同摄像头分别对焦到前景对象和背景对象，并且第一图像为采用第一补偿参量对对焦到背景图像的第一子图像处理得到的，第二图像为采用第二补偿参量对对焦到背景图像的第二子图像处理得到的，因此不但可以使得第三图像的图像背景图像和前景图像无畸变，而且可以提高第三图像中的背景图像和前景图像的清晰度。

应理解的是，本申请实施例中，输入单元1004可以包括图形处理器(GraphicsProcessing Unit，GPU)10041和麦克风10042，图形处理器10041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。显示单元1006可包括显示面板10061，可以采用液晶显示器、有机发光二极管等形式来配置显示面板10061。用户输入单元1007包括触控面板10071以及其他输入设备10072。触控面板10071，也称为触摸屏。触控面板10071可包括触摸检测装置和触摸控制器两个部分。其他输入设备10072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆，在此不再赘述。存储器1009可用于存储软件程序以及各种数据，包括但不限于应用程序和操作系统。处理器1010可集成应用处理器和调制解调处理器，其中，应用处理器主要处理操作系统、用户界面和应用程序等，调制解调处理器主要处理无线通信。可以理解的是，上述调制解调处理器也可以不集成到处理器1010中。

本申请实施例还提供一种可读存储介质，该可读存储介质上存储有程序或指令，该程序或指令被处理器执行时实现上述图像处理方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。

其中，上述处理器为上述实施例中的电子设备中的处理器。上述可读存储介质，包括计算机可读存储介质，如计算机只读存储器(Read-Only Memory，ROM)、随机存取存储器(Random Access Memory，RAM)、磁碟或者光盘等。

本申请实施例另提供了一种芯片，该芯片包括处理器和通信接口，通信接口和处理器耦合，处理器用于运行程序或指令，实现上述图像处理方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。

应理解，本申请实施例提到的芯片还可以称为系统级芯片、系统芯片、芯片系统或片上系统芯片等。

需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。此外，需要指出的是，本申请实施方式中的方法和装置的范围不限按示出或讨论的顺序来执行功能，还可包括根据所涉及的功能按基本同时的方式或按相反的顺序来执行功能，例如，可以按不同于所描述的次序来执行所描述的方法，并且还可以添加、省去、或组合各种步骤。另外，参照某些示例所描述的特征可在其他示例中被组合。

通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台终端(可以是手机，计算机，服务器，空调器，或者网络设备等)执行本申请各个实施例所述的方法。

上面结合附图对本申请的实施例进行了描述，但是本申请并不局限于上述的具体实施方式，上述的具体实施方式仅仅是示意性的，而不是限制性的，本领域的普通技术人员在本申请的启示下，在不脱离本申请宗旨和权利要求所保护的范围情况下，还可做出很多形式，均属于本申请的保护之内。

Claims (8)

1.一种图像处理方法，其特征在于，所述方法包括：

接收第一输入，所述第一输入用于触发拍摄视频或显示相机预览界面；

响应于所述第一输入，通过摄像头采集第i帧图像，并获取所述摄像头采集所述第i帧图像时电子设备的抖动参数，所述第i帧图像包括采用第一焦距采集的背景图像，i为大于1的整数；

采用第一补偿参量，处理所述第i帧图像中的背景图像，得到第一图像，所述第一补偿参量根据所述抖动参数和第一焦距确定；

采用第二补偿参量，处理所述第i帧图像中的前景图像，得到第二图像，所述第二补偿参量根据所述抖动参数和第二焦距确定，所述第二焦距根据所述第一焦距确定，且所述第二焦距小于所述第一焦距；

合成所述第一图像和所述第二图像，得到第三图像；

所述第二补偿参量包括N个补偿参量，所述第二图像包括N张图像，所述N个补偿参量与所述N张图像一一对应，N为大于1的整数；

所述合成所述第一图像和所述第二图像，得到第三图像，包括：

从所述N张图像中确定目标图像，所述目标图像为所述N张图像中相对于所述第i帧图像中的前景图像的形变量最小的图像；

合成所述第一图像和所述目标图像，得到所述第三图像。

2.根据权利要求1所述的方法，其特征在于，所述抖动参数包括第一抖动角度，所述第一抖动角度为拍摄所述第i帧图像时，相对于拍摄第一帧图像或拍摄第i-1帧图像时所述电子设备偏移的角度；

其中，所述第一抖动角度包括俯仰角、偏航角和横滚角中的至少一项。

3.根据权利要求1所述的方法，其特征在于，所述摄像头设置在所述电子设备中的微云台上；

所述通过摄像头采集第i帧图像之前，所述方法还包括：

基于对象追踪技术，控制所述微云台旋转第一角度，以使所述摄像头的拍摄范围内的目标拍摄对象位于所述摄像头的视角中心线上。

4.根据权利要求3所述的方法，其特征在于，所述摄像头包括第一摄像头和第二摄像头，且所述第一摄像头设置在所述微云台上，所述第i帧图像包括第一子图像和第二子图像；

所述通过摄像头采集第i帧图像，包括：

控制所述第一摄像头对焦到背景对象，且采用所述第一焦距采集所述第一子图像；

控制所述第二摄像头对焦到前景对象，且采用第三焦距采集所述第二子图像；

所述采用第一补偿参量，处理所述第i帧图像中的背景图像，得到第一图像，包括：

采用所述第一补偿参量，处理所述第一子图像中的背景图像，得到所述第一图像；

所述采用第二补偿参量，处理所述第i帧图像中的前景图像，得到第二图像，包括：

采用所述第二补偿参量，处理所述第二子图像中的前景图像，得到所述第二图像。

5.一种图像处理装置，其特征在于，所述装置包括：接收模块、采集模块和处理模块；

所述接收模块，用于接收第一输入，所述第一输入用于触发拍摄视频或显示相机预览界面；

所述采集模块，用于响应于所述接收模块接收的第一输入，通过摄像头采集第i帧图像；并获取采集所述第i帧图像时电子设备的抖动参数，所述第i帧图像包括采用第一焦距采集的背景图像，i为大于1的整数；

所述处理模块，用于采用第一补偿参量，处理所述采集模块采集的所述第i帧图像中的背景图像，得到第一图像，所述第一补偿参量根据所述抖动参数和所述第一焦距确定；并采用第二补偿参量，处理所述采集模块采集的所述第i帧图像中的前景图像，得到第二图像，所述第二补偿参量根据所述抖动参数和第二焦距确定，所述第二焦距根据所述第一焦距确定，且所述第二焦距小于所述第一焦距；以及合成所述第一图像和所述第二图像，得到第三图像；

所述第二补偿参量包括N个补偿参量，所述第二图像包括N张图像，所述N个补偿参量与N张图像一一对应，N为大于1的整数；

所述处理模块包括确定子模块和合成子模块；

所述确定子模块，用于从所述N张图像中确定目标图像；

所述合成子模块，用于合成所述第一图像和所述确定子模块确定的所述目标图像，得到所述第三图像。

6.根据权利要求5所述的装置，其特征在于，所述抖动参数包括第一抖动角度，所述第一抖动角度为拍摄所述第i帧图像时，相对于拍摄第一帧图像或拍摄第i-1帧图像时所述电子设备偏移的角度；

其中，所述第一抖动角度包括俯仰角、偏航角和横滚角中的至少一项。

7.根据权利要求5所述的装置，其特征在于，所述摄像头设置在所述电子设备中的微云台上；

所述处理模块，还用于在所述采集模块通过所述摄像头采集第i帧图像之前，基于对象追踪技术，控制所述微云台旋转第一角度，以使所述摄像头的拍摄范围内的目标拍摄对象位于所述摄像头的视角中心线上。

8.根据权利要求7所述的装置，其特征在于，所述摄像头包括第一摄像头和第二摄像头，且所述第一摄像头设置在所述微云台上，所述第i帧图像包括第一子图像和第二子图像；

所述采集模块，具体用于控制所述第一摄像头对焦到背景对象，并采用所述第一焦距采集所述第一子图像；且控制所述第二摄像头对焦到前景对象，并采用第三焦距采集所述第二子图像；

所述处理模块，具体用于采用所述第一补偿参量，处理所述第一子图像中的背景图像，得到所述第一图像；并采用所述第二补偿参量，处理所述第二子图像中的前景图像，得到所述第二图像。

Images