CN109005314B - 一种图像处理方法及终端 - Google Patents

Abstract

本发明实施例提供一种图像处理方法及终端，涉及终端技术领域，以解决终端拍摄的动态图像的质量较差的问题。该方法包括：获取M组深度信息，每组深度信息为待合成的M帧第一图像中每帧第一图像的深度信息，M为大于或等于2的整数；根据该M组深度信息，获取M个背景数据和M个前景数据，一个背景数据用于指示该M帧第一图像中一帧第一图像中的背景图像，一个前景数据用于指示该M帧第一图像中一帧第一图像中的前景图像；压缩该M个背景数据中的K个背景数据，以得到与该K个背景数据对应的K个目标背景数据，K为大于1且小于或等于M的整数；将该K个目标背景数据和该M个前景数据合成一个静态图像或者一个动态图像。

Description

一种图像处理方法及终端

技术领域

本发明实施例涉及终端技术领域，尤其涉及一种图像处理方法及终端。

背景技术

随着终端技术的发展，终端的拍摄功能越来越强大，例如终端不但可以拍摄静态图像，还可以拍摄动态图像。

通常，在终端拍摄动态图像时，终端可以先拍摄一段视频，然后再将视频压缩，从而得到一个数据量较小、清晰度较低的动态图像。

然而，上述合成动态图像的方法中，由于是直接对视频压缩的，因此可能会使得生成的动态图像中运动的对象(例如人或物)的清晰度较低，从而导致终端拍摄的动态图像的质量较差。

发明内容

本发明实施例提供一种图像处理方法及终端，以解决终端拍摄的动态图像的质量较差的问题。

为了解决上述技术问题，本发明实施例是这样实现的：

第一方面，本发明实施例提供一种图像处理方法，该方法包括：获取M组深度信息，每组深度信息为待合成的M帧第一图像中每帧第一图像的深度信息，M为大于或等于2的整数；根据该M组深度信息，获取M个背景数据和M个前景数据，一个背景数据用于指示该M帧第一图像中一帧第一图像中的背景图像，一个前景数据用于指示该M帧第一图像中一帧第一图像中的前景图像；压缩该M个背景数据中的K个背景数据，以得到与该K个背景数据对应的K个目标背景数据，K为大于1且小于或等于M的整数；将该K个目标背景数据和该M个前景数据合成一个静态图像或者一个动态图像。

第二方面，本发明实施例还提供了一种终端，该终端包括：获取模块、压缩模块和合成模块；该获取模块用于：获取M组深度信息，每组深度信息为待合成的M帧第一图像中每帧第一图像的深度信息，M为大于或等于2的整数；根据该M组深度信息，获取M个背景数据和M个前景数据，一个背景数据用于指示该M帧第一图像中一帧第一图像中的背景图像，一个前景数据用于指示该M帧第一图像中一帧第一图像中的前景图像；该压缩模块用于：压缩该获取模块获取的该M个背景数据中的K个背景数据，以得到与该K个背景数据对应的K个目标背景数据，K为大于1且小于或等于M的整数；该合成模块用于：将该压缩模块压缩得到的该K个目标背景数据和该获取模块获取的该M个前景数据合成一个静态图像或者一个动态图像。

第三方面，本发明实施例提供了一种终端，包括处理器、存储器及存储在该存储器上并可在该处理器上运行的计算机程序，该计算机程序被该处理器执行时实现如第一方面所述的图像处理方法的步骤。

第四方面，本发明实施例提供了一种计算机可读存储介质，该计算机可读存储介质上存储计算机程序，该计算机程序被处理器执行时实现如第一方面所述的图像处理方法的步骤。

在本发明实施例中，首先，终端获取M组深度信息，每组深度信息为待合成的M帧第一图像中每帧第一图像的深度信息。其次，终端根据M组深度信息，获取指示M帧第一图像中一帧第一图像中的背景图像的M个背景数据，以及指示M帧第一图像中一帧第一图像中的前景图像的M个前景数据。再次，终端压缩M个背景数据中的K个背景数据，以得到与K个背景数据对应的K个目标背景数据。最后，终端将该K个目标背景数据和该M个前景数据合成一个静态图像或者一个动态图像。由于终端可以根据深度信息获取图像的前景数据和背景数据，因此终端可以分别对前景数据和背景数据处理，仅压缩背景数据可以使得背景图像占用的存储空间降低，将未压缩的前景图像和压缩后得到的K个目标背景图像合成后的一个静态图像或者一个动态图像中，可以使得合成后的图像占用的空间更小，前景图像(即运动的对象)保持较高的清晰度，从而提高了终端拍摄的动态图像的质量。

附图说明

图1为本发明实施例提供的一种可能的安卓操作系统的架构示意图；

图2为本发明实施例提供的一种图像处理方法的流程示意图一；

图3为本发明实施例提供的一种图像处理方法的流程示意图二；

图4为本发明实施例提供的一种图像处理方法的流程示意图三；

图5为本发明实施例提供的一种图像处理逻辑示意图；

图6为本发明实施例提供的一种终端可能的结构示意图一；

图7为本发明实施例提供的一种终端可能的结构示意图二；

图8为本发明各个实施例的一种终端的硬件结构示意图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

需要说明的是，本文中的“/”表示或的意思，例如，A/B可以表示A或B；本文中的“和/或”仅仅是一种描述关联对象的关联关系，表示可以存在三种关系，例如，A和/或B，可以表示：单独存在A，同时存在A和B，单独存在B这三种情况。“多个”是指两个或多于两个。

本发明的说明书和权利要求书中的术语“第一”和“第二”等是用于区别不同的对象，而不是用于描述对象的特定顺序。例如，第一阈值和第二阈值等是用于区别不同的阈值，而不是用于描述阈值的特定顺序。

需要说明的是，本发明实施例中，“示例性的”或者“例如”等词用于表示作例子、例证或说明。本发明实施例中被描述为“示例性的”或者“例如”的任何实施例或设计方案不应被解释为比其他实施例或设计方案更优选或更具优势。确切而言，使用“示例性的”或者“例如”等词旨在以具体方式呈现相关概念。

本发明实施例中的终端可以为具有操作系统的终端。该操作系统可以为安卓(Android)操作系统，可以为ios操作系统，还可以为其他可能的操作系统，本发明实施例不作具体限定。

下面以安卓操作系统为例，介绍一下本发明实施例提供的图像处理方法所应用的软件环境。

如图1所示，为本发明实施例提供的一种可能的安卓操作系统的架构示意图。在图1中，安卓操作系统的架构包括4层，分别为：应用程序层、应用程序框架层、系统运行库层和内核层(具体可以为Linux内核层)。

其中，应用程序层包括安卓操作系统中的各个应用程序(包括系统应用程序和第三方应用程序)。

应用程序框架层是应用程序的框架，开发人员可以在遵守应用程序的框架的开发原则的情况下，基于应用程序框架层开发一些应用程序。

系统运行库层包括库(也称为系统库)和安卓操作系统运行环境。库主要为安卓操作系统提供其所需的各类资源。安卓操作系统运行环境用于为安卓操作系统提供软件环境。

内核层是安卓操作系统的操作系统层，属于安卓操作系统软件层次的最底层。内核层基于Linux内核为安卓操作系统提供核心系统服务和与硬件相关的驱动程序。

以安卓操作系统为例，本发明实施例中，开发人员可以基于上述如图1所示的安卓操作系统的系统架构，开发实现本发明实施例提供的图像处理方法的软件程序，从而使得该图像处理方法可以基于如图1所示的安卓操作系统运行。即处理器或者终端设备可以通过在安卓操作系统中运行该软件程序实现本发明实施例提供的图像处理方法。

下面结合图2中对本发明实施例的图像处理方法进行说明。图2为本发明实施例提供的一种图像处理方法的流程示意图，如图2所示，该图像处理方法包括S201-S204：

S201、终端获取M组深度信息。

其中，每组深度信息为待合成的M帧第一图像中每帧第一图像的深度信息，M为大于或等于2的整数。

需要说明的是，一个图像的深度信息可以包括第一图像中每个像素点/像素单元/像素区域到摄像头的距离。

图像的深度信息可以包括景深，景深是指在摄影机镜头或其他成像器前沿能够取得清晰图像的成像所测定的被摄物体前后距离范围。

S202、终端根据M组深度信息，获取M个背景数据和M个前景数据。

其中，一个背景数据用于指示M帧第一图像中一帧第一图像中的背景图像，一个前景数据用于指示M帧第一图像中一帧第一图像中的前景图像。

S203、终端压缩M个背景数据中的K个背景数据，以得到与K个背景数据对应的K个目标背景数据。

其中，K为大于1且小于或等于M的整数。

可选的，终端可以采用压缩率较大的压缩形式压缩背景图像的数据，例如将背景数据采用GIF形式压缩。

S204、终端将该K个目标背景数据和该M个前景数据合成一个静态图像或者一个动态图像。

可以理解的是，当K等于1时，则可以合成一个前景清晰的动态图像，也可以合成一个背景被压缩，且前景清晰度不变的静态图像。当K小于M时，则可以合成一个背景也变化的动态图像，也可以合成一个背景不变的动态图像。当K等于M时，则可以合成一个背景为采集时的背景，且背景被压缩的动态图像。

可选的，当终端使用一个目标背景数据和M个前景数据合成一个静态图像或者一个动态图像时，终端可以将M个前景数据按照每帧的先后顺序逐帧融合到一个目标背景数据中，当终端使用M个目标背景数据和M个前景数据合成一个静态图像或者一个动态图像时，终端可以将M个前景数据按照每帧的先后顺序逐帧融合到对应的目标背景数据中。

本发明实施例提供的图像处理方法，首先，终端获取M组深度信息，每组深度信息为待合成的M帧第一图像中每帧第一图像的深度信息。其次，终端根据M组深度信息，获取指示M帧第一图像中一帧第一图像中的背景图像的M个背景数据，以及指示M帧第一图像中一帧第一图像中的前景图像的M个前景数据。再次，终端压缩M个背景数据中的K个背景数据，以得到与K个背景数据对应的K个目标背景数据。最后，终端将该K个目标背景数据和该M个前景数据合成一个静态图像或者一个动态图像。由于终端可以根据深度信息获取图像的前景数据和背景数据，因此终端可以分别对前景数据和背景数据处理，仅压缩背景数据可以使得背景图像占用的存储空间降低，将未压缩的前景图像和压缩后得到的K个目标背景图像合成后的一个静态图像或者一个动态图像中，可以使得合成后的图像占用的空间更小，前景图像(即运动的对象)保持较高的清晰度，从而提高了终端拍摄的动态图像的质量。

一种可能的实现方式中，本发明实施例提供的图像处理方法，如图3所示，S202具体可以通过S202a实现。

S202a、对于M帧第一图像中每连续的两帧图像，终端均执行下述步骤S202a1，以获取M个背景数据和M个前景数据：

S202a1：终端根据M帧第一图像中第N帧第一图像的深度信息和第(N+1)帧第一图像的深度信息，获取第N帧第一图像中的背景数据和前景数据，以及第(N+1)帧第一图像中的背景数据和前景数据，N为小于或等于M的正整数。

基于该方案，终端可以通过M第一图像中第N帧第一图像的深度信息和第(N+1)帧第一图像的深度信息，获取第N帧第一图像中的背景数据和前景数据，以及第(N+1)帧第一图像中的背景数据和前景数据，从而获取M个背景数据和M个前景数据。在获取背景数据之后，终端可以对背景数据采用大压缩率的压缩方式压缩，进而根据获得的前景数据和压缩后的背景数据按照需要合成动态图像或者具有特殊光影效果的静态图像。

一种可能的实现方式中，一组深度信息包括多个景深值，每个景深值为一个区域的景深值，一个区域与一组深度信息对应的一帧第一图像中的区域。

如图4所示，本发明实施例提供的图像处理方法，S202a1具体可以通过S202b1-S202b3实现：

S202b1、终端根据第(N+1)帧第一图像的多个景深值和第N帧第一图像的多个景深值，获取多个差值。

具体的，对于第(N+1)帧第一图像的多个景深值和第N帧第一图像的多个景深值，终端均可以执行下述步骤T，以获取多个差值。

T、终端获取第一景深值和第二景深值的差值的绝对值，以得到一个差值。

其中，第一景深值为第(N+1)帧第一图像中第一区域的景深值，第二景深值为第N帧第一图像中第一区域的景深值。

S202b2、终端将目标区域在第N帧第一图像中对应的数据作为第N帧第一图像中的前景数据，将第N帧第一图像中除与目标区域对应的数据之外的其他数据作为第N帧第一图像中的背景数据。

其中，目标区域为上述多个差值中大于或等于第一阈值的差值对应的一个区域，目标区域的景深值与目标区域相邻的区域的景深值的差大于第二阈值。

需要说明的是，若一个运动的物体在前后两帧图像中的位置发生变化，则前后两帧图像的景深值的差大于第一预设阈值的区域在每个图像中包括两个区域。

S202b3、终端将目标区域在第(N+1)帧第一图像中对应的数据作为第(N+1)帧第一图像中的前景数据，将第(N+1)帧第一图像中除与目标区域对应的数据之外的其他数据作为第(N+1)帧第一图像中的背景数据。

示例性的，图5为本发明实施例提供的一种图像处理逻辑示意图，假设图5中的(a)为第N帧第一图像，图5中的(b)为第(N+1)帧第一图像，则根据第(N+1)帧第一图像对应的一组景深值与第N帧第一图像对应的一组景深值作差，则在这两帧图像中分别确定出2个景深的差大于第一阈值的两个区域，其中第N帧第一图像中的区域分别为区域1和区域3，第(N+1)第一图像中的区域分别是区域2和区域4，进而终端判断第N帧第一图像中的区域1或区域3与相邻区域的景深值的差与第二阈值的大小关系，假设终端判断区域1的景深值和区域1相邻的区域的景深值的差大于第二阈值，则确定区域1为第N帧第一图像中的前景图像，若判断区域3的景深帧和区域3相邻的区域的景深值的差小于或等于第二阈值时，则确定区域3为第N帧第一图像中的背景图像。同样的，假设终端判断区域2的景深值和区域2相邻的区域的景深值的差大于第二阈值，则确定区域2为第(N+1)帧第一图像中的前景图像，若判断区域4的景深帧和区域4相邻的区域的景深值的差小于或等于第二阈值时，则确定区域4为第N帧第一图像中的背景图像。即前景图像从区域1移动到了区域2。

需要说明的是，本发明实施例中仅以一个运动的前景图像为例进行说明，在同一个背景中运动的多个前景图像的处理方式可参考本发明实施例中提供的处理方式，在此不再赘述。

基于该方案，终端可以根据连续两帧图像中同一个区域中的景深值的差值确定该连续两帧图像中分别对应的前景数据和背景数据。

一种可能的实现方式中，K个背景数据用于指示一个背景图像。

需要说明的是，该K个背景数据指示同一个背景图像，即当K不等于M时，M个图像中存在至少两个不同的背景图像。

本发明实施例提供的图像处理方法，在S204之前，还可以包括S205：

S205、终端根据M帧第一图像，确定目标前景图像在一个背景图像中的运动轨迹。

其中，目标前景图像为目标图像中的前景图像，目标前景图像为M帧第一图像中满足第一条件的P帧第一图像中的任意一帧第一图像中的前景图像，P为小于或等于M的正整数。

需要说明的是，目标前景图像可以是在M帧图像中部分帧中出现的相同的前景图像，也可以是在M帧图像中每帧图像中出现的相同的前景图像，本发明实施例对此不作具体限定。

具体的，终端可以根据前景数据在每帧图像中的位置信息确定目标前景图像在一个背景图像中的运动轨迹。

可选的，第一条件为M帧第一图像中前景图像的匹配度大于或等于第三阈值。

进而，S204可以通过S204a执行：

S204a、终端将K个目标背景数据、M个前景数据，以及运动轨迹合成一个静态图像或者一个动态图像。

基于该方案，终端根据M帧第一图像，确定目标前景图像在一个背景图像中的运动轨迹，终端将K个目标背景数据、M个前景数据，以及运动轨迹合成一个具有轨迹光影效果的静态图像或者一个动态图像。

一种可能的实现方式中，发明实施例提供的图像处理方法，S205具体可以通过S205a1和S205b1执行：

S205a1、终端根据M帧第一图像，确定P帧第一图像。

S205b1、终端根据目标前景图像在P帧第一图像中每帧第一图像中的位置信息，确定目标前景图像在一个背景图像中的运动轨迹。

基于该方案，终端可以根据目标前景图像每帧第一图像中的位置信息确定目标前景图像在一个背景图像中的运动轨迹。

一种可能的实现方式中，发明实施例提供的图像处理方法，S205具体可以通过S205a2和S205b2执行：

S205a2、终端根据M帧第一图像，确定P帧第一图像。

S205b2、终端根据P帧第一图像的图像信息，确定目标前景图像在一个背景图像中的运动轨迹。

其中，一帧第一图像的图像信息包括以下至少一项：图像直方图信息、纹理信息。

可选的，本发明实施例中的图像信息可以包括图像中的颜色和形状。

基于该方案，终端可以通过M帧第一图像中P帧第一图像的图像信息，确定目标前景图像在一个背景图像中的运动轨迹，以便于终端根据用户的选择合成带有轨迹的动态图像或静态图像。

一种可能的实现方式中，本发明实施例提供的图像处理方法，在S204之前，还可以包括S206和S207：

S206、终端接收用户的操作。

需要说明的是，S206可以在S201之前，即用户在拍摄之前可以选择拍摄的图像的类型，在合成之前，执行下述S207，本发明实施例对此不作具体限定。

S207、响应于用户的操作，终端对目标对象执行预处理。

可选的，目标对象包括第二目标数据、M个第二数据以及运动轨迹中的任意一个。

可选的，预处理包括：模糊化、虚化或边缘增强。

需要说明的是，本发明实施例中，预处理还可以包括图像处理中的其他处理方式，本发明实施例对此不作具体限定。

需要说明的是，在终端获取到运动轨迹之后，终端可以通过对前景图像的模糊化或虚化，然后根据模糊化或虚化后的前景数据、前景数据的运动轨迹、以及背景数据合成后一个具有轨迹光影效果的动态图像或者静态图像。

基于该方案，终端可以合成多种不同显示效果的动态图像或静态图像，方便用户根据需要合成相应的图像，从而提高了用户体验。

在第一匹配度小于第一目标匹配度的情况下，根据第一匹配度和第二位置信息，修正第一匹配度对应的第一图像中前景图像的第三位置信息；第一匹配度为相邻两帧第一图像中的后一帧图像中的前景图像与前一帧图像中的前景图像的匹配度，M个第一位置信息为修正后的M个第三位置信息。

图6为本发明实施例提供的一种终端可能的结构示意图，如图6所示，终端600包括：获取模块601、压缩模块602和合成模块603；获取模块601用于：获取M组深度信息，每组深度信息为待合成的M帧第一图像中每帧第一图像的深度信息，M为大于或等于2的整数；根据M组深度信息，获取M个背景数据和M个前景数据，一个背景数据用于指示M帧第一图像中一帧第一图像中的背景图像，一个前景数据用于指示M帧第一图像中一帧第一图像中的前景图像；压缩模块602用于：压缩获取模块601获取的M个背景数据中的K个背景数据，以得到与K个背景数据对应的K个目标背景数据，K为大于1且小于或等于M的整数；合成模块603用于：将压缩模块602压缩得到的K个目标背景数据和获取模块601获取的M个前景数据合成一个静态图像或者一个动态图像。

可选的，获取模块601具体用于：根据M帧第一图像中第N帧第一图像的深度信息和第(N+1)帧第一图像的深度信息，获取第N帧第一图像中的背景数据和前景数据，以及第(N+1)帧第一图像中的背景数据和前景数据，N为小于或等于M的正整数。

可选的，一组深度信息包括多个景深值，每个景深值为一个区域的景深值，该一个区域为与一组深度信息对应的一帧第一图像中的一个区域；获取模块601用于：根据第(N+1)帧第一图像的多个景深值和第N帧第一图像的多个景深值，获取多个差值；将目标区域在第N帧第一图像中对应的数据作为第N帧第一图像中的前景数据，将第N帧第一图像中除与目标区域对应的数据之外的其他数据作为第N帧第一图像中的背景数据；将目标区域在第(N+1)帧第一图像中对应的数据作为(N+1)帧第一图像中的前景数据，将第(N+1)帧第一图像中除与目标区域对应的数据之外的其他数据作为第(N+1)帧第一图像中的背景数据；T：获取第一景深值和第二景深值的差值的绝对值，以得到一个差值；其中，第一景深值为第(N+1)帧第一图像中第一区域的景深值，第二景深值为第N帧第一图像中第一区域的景深值；其中，目标区域为多个差值中大于或等于第一阈值的差值对应的一个区域，目标区域的景深值与目标区域相邻的区域的景深值的差大于第二阈值。

可选的，K个背景数据用于指示一个背景图像；结合图6，如图7所示，终端600还包括确定模块604；确定模块604用于：在合成模块603将K个目标背景数据和M个前景数据合成一个静态图像或者一个动态图像之前，根据M帧第一图像，确定目标前景图像在一个背景图像中的运动轨迹，目标前景图像为目标图像中的前景图像，目标前景图像为M帧第一图像中满足第一条件的P帧第一图像中的任意一帧第一图像中的前景图像，第一条件为M帧第一图像中前景图像的匹配度大于或等于第三阈值，P为小于或等于M的正整数；合成模块603具体用于：将压缩模块602压缩得到的K个目标背景数据、获取模块601获取的M个前景数据，以及运动轨迹合成一个静态图像或一个动态图像。

可选的，确定模块604具体用于：根据M帧第一图像，确定P帧第一图像；根据目标前景图像在P帧第一图像中每帧第一图像中的位置信息，确定目标前景图像在一个背景图像中的运动轨迹。

可选的，确定模块604具体用于：根据M帧第一图像，确定P帧第一图像；根据P帧第一图像的图像信息，确定目标前景图像在一个背景图像中的运动轨迹；其中，一帧第一图像的图像信息包括以下至少一项：图像直方图信息、颜色信息、纹理信息。

本发明实施例提供的终端600能够实现上述方法实施例中终端实现的各个过程，为避免重复，这里不再赘述。

本发明实施例提供的终端，首先，终端获取M组深度信息，每组深度信息为待合成的M帧第一图像中每帧第一图像的深度信息。其次，终端根据M组深度信息，获取指示M帧第一图像中一帧第一图像中的背景图像的M个背景数据，以及指示M帧第一图像中一帧第一图像中的前景图像的M个前景数据。再次，终端压缩M个背景数据中的K个背景数据，以得到与K个背景数据对应的K个目标背景数据。最后，终端将该K个目标背景数据和该M个前景数据合成一个静态图像或者一个动态图像。由于终端可以根据深度信息获取图像的前景数据和背景数据，因此终端可以分别对前景数据和背景数据处理，仅压缩背景数据可以使得背景图像占用的存储空间降低，将未压缩的前景图像和压缩后得到的K个目标背景图像合成后的一个静态图像或者一个动态图像中，可以使得合成后的图像占用的空间更小，前景图像(即运动的对象)保持较高的清晰度，从而提高了终端拍摄的动态图像的质量。

图8为实现本发明各个实施例的一种终端的硬件结构示意图，该终端100包括但不限于：射频单元101、网络模块102、音频输出单元103、输入单元104、传感器105、显示单元106、用户输入单元107、接口单元108、存储器109、处理器110、以及电源111等部件。本领域技术人员可以理解，图8中示出的终端结构并不构成对终端的限定，终端可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。在本发明实施例中，终端包括但不限于手机、平板电脑、笔记本电脑、掌上电脑、车载终端、可穿戴设备、以及计步器等。

其中，处理器110，用于获取M组深度信息，每组深度信息为待合成的M帧第一图像中每帧第一图像的深度信息，M为大于2的整数；根据M组深度信息，获取M个背景数据和M个前景数据，一个背景数据用于指示M帧第一图像中一帧第一图像中的背景图像，一个前景数据用于指示该M帧第一图像中一帧第一图像中的前景图像；压缩M个背景数据中的K个背景数据，以得到与该K个背景数据对应的K个目标背景数据，K为大于1且小于或等于M的整数；将该K个目标背景数据和该M个前景数据合成一个静态图像或者一个动态图像。

本发明实施例提供的终端，首先，终端获取M组深度信息，每组深度信息为待合成的M帧第一图像中每帧第一图像的深度信息。其次，终端根据M组深度信息，获取指示M帧第一图像中一帧第一图像中的背景图像的M个背景数据，以及指示M帧第一图像中一帧第一图像中的前景图像的M个前景数据。再次，终端压缩M个背景数据中的K个背景数据，以得到与K个背景数据对应的K个目标背景数据。最后，终端将该K个目标背景数据和该M个前景数据合成一个静态图像或者一个动态图像。由于终端可以根据深度信息获取图像的前景数据和背景数据，因此终端可以分别对前景数据和背景数据处理，仅压缩背景数据可以使得背景图像占用的存储空间降低，将未压缩的前景图像和压缩后得到的K个目标背景图像合成后的一个静态图像或者一个动态图像中，可以使得合成后的图像占用的空间更小，前景图像(即运动的对象)保持较高的清晰度，从而提高了终端拍摄的动态图像的质量。

应理解的是，本发明实施例中，射频单元101可用于收发信息或通话过程中，信号的接收和发送，具体的，将来自基站的下行数据接收后，给处理器110处理；另外，将上行的数据发送给基站。通常，射频单元101包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器、双工器等。此外，射频单元101还可以通过无线通信系统与网络和其他设备通信。

终端通过网络模块102为用户提供了无线的宽带互联网访问，如帮助用户收发电子邮件、浏览网页和访问流式媒体等。

音频输出单元103可以将射频单元101或网络模块102接收的或者在存储器109中存储的音频数据转换成音频信号并且输出为声音。而且，音频输出单元103还可以提供与终端100执行的特定功能相关的音频输出(例如，呼叫信号接收声音、消息接收声音等等)。音频输出单元103包括扬声器、蜂鸣器以及受话器等。

输入单元104用于接收音频或视频信号。输入单元104可以包括图形处理器(Graphics Processing Unit，GPU)1041和麦克风1042，图形处理器1041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。处理后的图像帧可以显示在显示单元106上。经图形处理器1041处理后的图像帧可以存储在存储器109(或其他存储介质)中或者经由射频单元101或网络模块102进行发送。麦克风1042可以接收声音，并且能够将这样的声音处理为音频数据。处理后的音频数据可以在电话通话模式的情况下转换为可经由射频单元101发送到移动通信基站的格式输出。

终端100还包括至少一种传感器105，比如光传感器、运动传感器以及其他传感器。具体地，光传感器包括环境光传感器及接近传感器，其中，环境光传感器可根据环境光线的明暗来调节显示面板1061的亮度，接近传感器可在终端100移动到耳边时，关闭显示面板1061和/或背光。作为运动传感器的一种，加速计传感器可检测各个方向上(一般为三轴)加速度的大小，静止时可检测出重力的大小及方向，可用于识别终端姿态(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等；传感器105还可以包括指纹传感器、压力传感器、虹膜传感器、分子传感器、陀螺仪、气压计、湿度计、温度计、红外线传感器等，在此不再赘述。

显示单元106用于显示由用户输入的信息或提供给用户的信息。显示单元106可包括显示面板1061，可以采用液晶显示器(Liquid Crystal Display，LCD)、有机发光二极管(Organic Light-Emitting Diode，OLED)等形式来配置显示面板1061。

用户输入单元107可用于接收输入的数字或字符信息，以及产生与终端的用户设置以及功能控制有关的键信号输入。具体地，用户输入单元107包括触控面板1071以及其他输入设备1072。触控面板1071，也称为触摸屏，可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触控面板1071上或在触控面板1071附近的操作)。触控面板1071可包括触摸检测装置和触摸控制器两个部分。其中，触摸检测装置检测用户的触摸方位，并检测触摸操作带来的信号，将信号传送给触摸控制器；触摸控制器从触摸检测装置上接收触摸信息，并将它转换成触点坐标，再送给处理器110，接收处理器110发来的命令并加以执行。此外，可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触控面板1071。除了触控面板1071，用户输入单元107还可以包括其他输入设备1072。具体地，其他输入设备1072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆，在此不再赘述。

进一步的，触控面板1071可覆盖在显示面板1061上，当触控面板1071检测到在其上或附近的触摸操作后，传送给处理器110以确定触摸事件的类型，随后处理器110根据触摸事件的类型在显示面板1061上提供相应的视觉输出。虽然在图8中，触控面板1071与显示面板1061是作为两个独立的部件来实现终端的输入和输出功能，但是在某些实施例中，可以将触控面板1071与显示面板1061集成而实现终端的输入和输出功能，具体此处不做限定。

接口单元108为外部装置与终端100连接的接口。例如，外部装置可以包括有线或无线头戴式耳机端口、外部电源(或电池充电器)端口、有线或无线数据端口、存储卡端口、用于连接具有识别模块的装置的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等等。接口单元108可以用于接收来自外部装置的输入(例如，数据信息、电力等等)并且将接收到的输入传输到终端100内的一个或多个元件或者可以用于在终端100和外部装置之间传输数据。

存储器109可用于存储软件程序以及各种数据。存储器109可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等；存储数据区可存储根据手机的使用所创建的数据(比如音频数据、电话本等)等。此外，存储器109可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。

处理器110是终端的控制中心，利用各种接口和线路连接整个终端的各个部分，通过运行或执行存储在存储器109内的软件程序和/或模块，以及调用存储在存储器109内的数据，执行终端的各种功能和处理数据，从而对终端进行整体监控。处理器110可包括一个或多个处理单元；优选的，处理器110可集成应用处理器和调制解调处理器，其中，应用处理器主要处理操作系统、用户界面和应用程序等，调制解调处理器主要处理无线通信。可以理解的是，上述调制解调处理器也可以不集成到处理器110中。

终端100还可以包括给各个部件供电的电源111(比如电池)，优选的，电源111可以通过电源管理系统与处理器110逻辑相连，从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。

另外，终端100包括一些未示出的功能模块，在此不再赘述。

可选的，本发明实施例还提供一种终端，结合图8，包括处理器110，存储器109，存储在存储器109上并可在所述处理器110上运行的计算机程序，该计算机程序被处理器110执行时实现上述图像处理方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。

本发明实施例还提供一种计算机可读存储介质，计算机可读存储介质上存储有计算机程序，该计算机程序被处理器执行时实现上述图像处理方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。其中，所述的计算机可读存储介质，如只读存储器(Read-Only Memory，ROM)、随机存取存储器(Random Access Memory，RAM)、磁碟或者光盘等。

需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。

通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台终端(可以是手机，计算机，服务器，空调器，或者网络设备等)执行本发明各个实施例所述的方法。

上面结合附图对本发明的实施例进行了描述，但是本发明并不局限于上述的具体实施方式，上述的具体实施方式仅仅是示意性的，而不是限制性的，本领域的普通技术人员在本发明的启示下，在不脱离本发明宗旨和权利要求所保护的范围情况下，还可做出很多形式，均属于本发明的保护之内。

Claims (11)

1.一种图像处理方法，应用于终端，其特征在于，所述方法包括：

获取M组深度信息，每组深度信息为待合成的M帧第一图像中每帧第一图像的深度信息，M为大于或等于2的整数；

根据所述M组深度信息，获取M个背景数据和M个前景数据，一个背景数据用于指示所述M帧第一图像中一帧第一图像中的背景图像，一个前景数据用于指示所述M帧第一图像中一帧第一图像中的前景图像；

压缩所述M个背景数据中的K个背景数据，以得到与所述K个背景数据对应的K个目标背景数据，K为大于1且小于或等于M的整数；

将所述K个目标背景数据和所述M个前景数据合成一个静态图像或者一个动态图像。

2.根据权利要求1所述的方法，其特征在于，所述根据所述M组深度信息，获取M个背景数据和M个前景数据，包括：

根据所述M帧第一图像中第N帧第一图像的深度信息和第N+1帧第一图像的深度信息，获取所述第N帧第一图像中的背景数据和前景数据，以及所述第N+1帧第一图像中的背景数据和前景数据，N为小于或等于M的正整数。

3.根据权利要求2所述的方法，其特征在于，一组深度信息包括多个景深值，每个景深值为一个区域的景深值，所述一个区域为与所述一组深度信息对应的一帧第一图像中的区域；

所述根据所述M帧第一图像中第N帧第一图像的深度信息和第N+1帧第一图像的深度信息，获取所述第N帧第一图像中的背景数据和前景数据，以及所述第N+1帧第一图像中的背景数据和前景数据，包括：

根据第N+1帧第一图像的多个景深值和第N帧第一图像的多个景深值，获取多个差值；

将目标区域在所述第N帧第一图像中对应的数据作为所述第N帧第一图像中的前景数据，将所述第N帧第一图像中除与所述目标区域对应的数据之外的其他数据作为所述第N帧第一图像中的背景数据；

将目标区域在所述第N+1帧第一图像中对应的数据作为所述第N+1帧第一图像中的前景数据，将所述第N+1帧第一图像中除与所述目标区域对应的数据之外的其他数据作为所述第N+1帧第一图像中的背景数据；

其中，所述目标区域为所述多个差值中大于或等于第一阈值的差值对应的一个区域，所述目标区域的景深值与所述目标区域相邻的区域的景深值的差大于第二阈值。

4.根据权利要求1所述的方法，其特征在于，所述K个背景数据用于指示同一个背景图像；

所述将所述K个目标背景数据和所述M个前景数据合成一个静态图像或者一个动态图像之前，还包括：

根据所述M帧第一图像，确定目标前景图像在所述一个背景图像中的运动轨迹，所述目标前景图像为目标图像中的前景图像，所述目标前景图像为所述M帧第一图像中满足第一条件的P帧第一图像中的任意一帧第一图像中的前景图像，所述第一条件为所述M帧第一图像中前景图像的匹配度大于或等于第三阈值，P为小于或等于M的正整数；

所述将所述K个目标背景数据和所述M个前景数据合成一个静态图像或者一个动态图像，包括：

将所述K个目标背景数据、所述M个前景数据，以及所述运动轨迹合成一个静态图像或者一个动态图像。

5.根据权利要求4所述的方法，其特征在于，根据所述M帧第一图像，确定目标前景图像在所述一个背景图像中的运动轨迹，包括：

根据所述M帧第一图像，确定所述P帧第一图像；

根据所述目标前景图像在所述P帧第一图像中每帧第一图像中的位置信息，确定所述目标前景图像在所述一个背景图像中的运动轨迹。

6.一种终端，其特征在于，所述终端包括：获取模块、压缩模块和合成模块；

所述获取模块用于：

获取M组深度信息，每组深度信息为待合成的M帧第一图像中每帧第一图像的深度信息，M为大于或等于2的整数；根据所述M组深度信息，获取M个背景数据和M个前景数据，一个背景数据用于指示所述M帧第一图像中一帧第一图像中的背景图像，一个前景数据用于指示所述M帧第一图像中一帧第一图像中的前景图像；

所述压缩模块用于：

压缩所述获取模块获取的所述M个背景数据中的K个背景数据，以得到与所述K个背景数据对应的K个目标背景数据，K为大于1且小于或等于M的整数；

所述合成模块用于：

将所述压缩模块压缩得到的所述K个目标背景数据和所述获取模块获取的所述M个前景数据合成一个静态图像或者一个动态图像。

7.根据权利要求6所述的终端，其特征在于，所述获取模块具体用于：

根据所述M帧第一图像中第N帧第一图像的深度信息和第N+1帧第一图像的深度信息，获取所述第N帧第一图像中的背景数据和前景数据，以及所述第N+1帧第一图像中的背景数据和前景数据，N为小于或等于M的正整数。

8.根据权利要求7所述的终端，其特征在于，一组深度信息包括多个景深值，每个景深值为一个区域的景深值，所述一个区域为与所述一组深度信息对应的一帧第一图像中的区域；

所述获取模块用于：

根据第N+1帧第一图像的多个景深值和第N帧第一图像的多个景深值，获取多个差值；将目标区域在所述第N帧第一图像中对应的数据作为所述第N帧第一图像中的前景数据，将所述第N帧第一图像中除与所述目标区域对应的数据之外的其他数据作为所述第N帧第一图像中的背景数据；将目标区域在所述第N+1帧第一图像中对应的数据作为所述第N+1帧第一图像中的前景数据，将所述第N+1帧第一图像中除与所述目标区域对应的数据之外的其他数据作为所述第N+1帧第一图像中的背景数据；其中，所述目标区域为所述多个差值中大于或等于第一阈值的差值对应的一个区域，所述目标区域的景深值与所述目标区域相邻的区域的景深值的差大于第二阈值。

9.根据权利要求6所述的终端，其特征在于，所述K个背景数据用于指示同一个背景图像；所述终端还包括确定模块；

所述确定模块用于：

在所述合成模块将所述K个目标背景数据和所述M个前景数据合成一个静态图像或者一个动态图像之前，根据所述M帧第一图像，确定目标前景图像在所述一个背景图像中的运动轨迹，所述目标前景图像为目标图像中的前景图像，所述目标前景图像为所述M帧第一图像中满足第一条件的P帧第一图像中的任意一帧第一图像中的前景图像，所述第一条件为所述M帧第一图像中前景图像的匹配度大于或等于第三阈值，P为小于或等于M的正整数；

所述合成模块具体用于：

将所述压缩模块压缩得到的所述K个目标背景数据、所述获取模块获取的所述M个前景数据，以及所述运动轨迹合成一个静态图像或者一个动态图像。

10.根据权利要求9所述的终端，其特征在于，所述确定模块具体用于：

根据所述M帧第一图像，确定所述P帧第一图像；

根据所述目标前景图像在所述P帧第一图像中每帧第一图像中的位置信息，确定所述目标前景图像在所述一个背景图像中的运动轨迹。

11.一种终端，其特征在于，所述终端包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述计算机程序被所述处理器执行时实现如权利要求1-5中任一项所述的图像处理方法的步骤。

Images