CN110418054A - 图像处理方法及终端 - Google Patents

Abstract

本发明提供了一种图像处理方法及终端，所述方法包括：在终端沿第一方向移动的过程中，通过终端的摄像头获取N帧图像，接收用户的第一操作；响应于第一操作，确定N帧图像中的目标图像；根据目标图像及N帧图像中获取时间早于目标图像的M－1帧图像，生成第一全景图像，其中，M小于N。本发明可以在全景图像的拍摄过程中，将根据第一操作确定的一帧目标图像作为回撤点，使得将回撤点及回撤点之前的图像作为用户满意的图像，并生成全景图像，将回撤点之后的图像作为用户不满意的图像进行撤销。使得在全景图像出现局部画面缺陷的时候，可以针对该局部画面对应的图像进行单独修改，而非直接重拍整个全景图像，提高了全景图像的拍摄效率。

Description

图像处理方法及终端

技术领域

本发明实施例涉及图像处理技术领域，尤其涉及一种图像处理方法及终端。

背景技术

为了能够拍摄到具有广阔视角的照片，目前的终端大多都提供全景摄像功能，终端可以通过全景摄像功能，将连续拍摄得到普通窄视角的图像，拼接成一张长条的全景图像。

目前，全景图像的拍摄过程，具体可以由用户手持终端沿某一固定方向进行移动，在移动的过程中，终端的摄像头不断采集多帧连续的普通窄视角图像，并在移动结束后，将多帧连续的普通窄视角图像拼接成一张长条的全景图像，完成全景摄像。

但发明人在研究上述现有技术的过程中发现，上述现有技术方案存在如下缺点：由于用户手持终端进行移动的操作较不稳定，假如用户出现“手抖”等操作，会导致全景图像中出现画面错误现象，如图像扭曲等，若要修正该画面错误，则需要用户重新进行拍摄操作，导致全景图像的拍摄效率较低。

发明内容

本发明提供一种图像处理方法及终端，以解决全景图像的拍摄效率较低的问题。

第一方面，本发明实施例提供了一种图像处理方法，应用于包括摄像头的终端，所述方法包括：

在所述终端沿第一方向移动的过程中，通过所述终端的摄像头获取N帧图像，其中N大于等于2；

接收用户的第一操作；

响应于所述第一操作，确定所述N帧图像中的目标图像；

根据所述目标图像及所述N帧图像中获取时间早于所述目标图像的M －1帧图像，生成第一全景图像，其中，M小于N。

可选的，所述接收用户的第一操作，具体包括：

接收将所述终端沿第二方向移动的操作，所述第二方向与所述第一方向方向相反；

所述响应于所述第一操作，确定所述N帧图像中的目标图像，具体包括：

若所述终端沿所述第二方向移动至目标位置，则确定所述N帧图像中与所述目标位置相对应的图像为目标图像。

可选的，所述方法还包括：

获取所述终端的当前位置；

根据所述当前位置和与所述目标图像相对应的目标位置，输出第一提示信息。

可选的，所述根据所述目标图像及所述N帧图像中获取时间早于所述目标图像的M－1帧图像，生成全景图像之后，所述方法还包括：

在所述终端处于与所述目标图像相对应的目标位置时，接收将所述终端向所述第一方向移动的第二操作；

在接收所述第二操作的过程中，通过所述终端的摄像头获取K帧图像；

根据所述目标图像、所述M－1帧图像以及所述K帧图像，生成第二全景图像。

第二方面，本发明实施例还提供了一种终端，所述终端，包括：

第一获取模块，用于在所述终端沿第一方向移动的过程中，通过所述终端的摄像头获取N帧图像，其中N大于等于2；

第一接收模块，用于接收用户的第一操作；

响应模块，用于响应于所述第一操作，确定所述N帧图像中的目标图像；

第一生成模块，用于根据所述目标图像及所述N帧图像中获取时间早于所述目标图像的M－1帧图像，生成第一全景图像，其中，M小于N。

可选的，所述第一接收模块，包括：

接收子模块，用于接收将所述终端沿第二方向移动的操作，所述第二方向与所述第一方向方向相反；

所述响应模块，包括：

选取子模块，用于若所述终端沿所述第二方向移动至目标位置，则确定所述N帧图像中与所述目标位置相对应的图像为目标图像。

可选的，所述装置还包括：

位置获取模块，用于获取所述终端的当前位置；

输出模块，用于根据所述当前位置和与所述目标图像相对应的目标位置，输出第一提示信息。

可选的，所述装置还包括：

第二接收模块，用于在所述终端处于与所述目标图像相对应的目标位置时，接收将所述终端向所述第一方向移动的第二操作；

第二获取模块，用于在接收所述第二操作的过程中，通过所述终端的摄像头获取K帧图像；

第二生成模块，用于根据所述目标图像、所述M－1帧图像以及所述K 帧图像，生成第二全景图像。

第三方面，本发明实施例还提供了一种终端，该终端包括处理器、存储

器及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述

计算机程序被所述处理器执行时实现本发明所述的图像处理方法的步骤。

第四方面，本发明实施例还提供了一种计算机可读存储介质，该计算机可读存储介质上存储计算机程序，所述计算机程序被处理器执行时实现本发明所述的图像处理方法的步骤。

在本发明实施例中，在终端沿第一方向移动的过程中，通过终端的摄像头获取N帧图像，接收用户的第一操作；响应于第一操作，确定N帧图像中的目标图像；根据目标图像及N帧图像中获取时间早于目标图像的M－1 帧图像，生成第一全景图像，其中，M小于N。本发明可以在全景图像的拍摄过程中，将根据第一操作确定的一帧目标图像作为回撤点，使得将回撤点及回撤点之前的图像作为用户满意的图像，并生成全景图像，将回撤点之后的图像作为用户不满意的图像进行撤销。使得在全景图像出现局部画面缺陷的时候，可以针对该局部画面对应的图像进行单独修改，而非直接重拍整个全景图像，提高了全景图像的拍摄效率。

附图说明

图1示出了本发明实施例提供的一种图像处理方法的流程图；

图2示出了本发明实施例提供的一种图像处理方法的场景图；

图3示出了本发明实施例提供的一种图像处理方法的具体流程图；

图4示出了本发明实施例提供的另一种图像处理方法的场景图；

图5示出了本发明实施例提供的另一种图像处理方法的具体流程图；

图6示出了本发明实施例提供的另一种图像处理方法的具体流程图；

图7示出了本发明实施例提供的另一种图像处理方法的场景图；

图8示出了根据本发明实施例提供的一种终端的结构框图；

图9示出了本发明实施例提供的终端的硬件结构示意图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

实施例一

参照图1，图1示出了本发明实施例提供的一种图像处理方法的流程图，该图像处理方法应用于包括摄像头的终端中，该终端可以包括：手机、笔记本、平板电脑等。在本发明实施例中，对此不作具体限定。

该方法具体可以包括如下步骤：

步骤101，在所述终端沿第一方向移动的过程中，通过所述终端的摄像头获取N帧图像，其中N大于等于2。

在本发明实施例中，全景图像的拍摄过程，需要将终端沿第一方向进行移动，在终端沿第一方向移动的过程中，终端的摄像头可以每隔预设时间间隔，拍摄一张图像，直至移动过程完成后，得到了连续多帧图像，具体的，终端的显示屏可以根据图像的拍摄时序，依次拼接并展示多帧图像，以供用户观看多帧图像的拼接效果。

例如，参照图2，其示出了本发明实施例提供的一种图像处理方法的场景图，当用户手持终端10沿着方向X移动时，假设终端10的摄像头每隔0.2秒拍摄一张图像20，则当进行了0.8秒的移动过程之后，终端10的摄像头共拍摄了5张连续的图像20。

需要说明的是，沿第一方向的移动可以为沿直线移动，也可以为沿曲线移动，也可以为顺时针选择移动或逆时针旋转移动，本发明实施例对此不作限定。

步骤102，接收用户的第一操作。

在该步骤中，第一操作可以为将终端沿第二方向的移动操作，也可以为对某一图像的选取操作，其中，第二方向可以与第一方向不同。

步骤103，响应于所述第一操作，确定所述N帧图像中的目标图像。

在进行全景摄像时，一般可以由用户手持终端进行对终端的移动操作，但由于环境等周边因素的影响，该移动操作往往不稳定，导致拍摄得到的全景图像效果较差，如，用户常常因为“手抖”，导致拍摄出的全景图像中出现画面扭曲现象。

具体的，全景图像效果较差，往往是因为构成全景图像的多个图像中，存在用户觉得不满意的图像，为了达到更高的全景图像效果，可以在多个图像中删除该用户觉得不满意的图像，以便用户通过终端补拍效果较好的目标图像，使得在全景图像出现局部画面缺陷的时候，可以针对该局部画面对应的图像进行单独修改，而非直接重拍整个全景图像，提高了全景图像的拍摄效率。

具体的，在本发明实施例的一种实现方式中，当第一操作为将终端沿第二方向的移动操作时，可以响应于该第一操作，确定终端的移动方向在由第一方向变为第二方向的时间点，并将该时间点终端获取的图像确定为目标图像。

在本发明实施例的另一种实现方式中，当第一操作为对N帧图像中的某一图像的选取操作时，可以响应于该第一操作，将选取的图像确定为目标图像。

步骤104，根据所述目标图像及所述N帧图像中获取时间早于所述目标图像的M－1帧图像，生成第一全景图像，其中，M小于N。

在该步骤中，可以将从多帧图像中选取的用户满意的目标图像，以及N 帧图像中获取时间早于所述目标图像的M－1帧图像，添加至全景图像序列，以供根据全景图像序生成效果较佳的第一全景图像，而对于用户不满意的图像，则可以进行筛除。本发明实施例中，将目标图像作为回撤点，使得将回撤点及回撤点之前的图像作为用户满意的图像，并生成第一全景图像，将回撤点之后的图像作为用户不满意的图像进行撤销。使得在全景图像出现局部画面缺陷的时候，可以针对该局部画面对应的图像进行单独修改，而非直接重拍整个全景图像，提高了全景图像的拍摄效率。

在本发明实施例中，所述终端图像处理方法包括：在终端沿第一方向移动的过程中，通过终端的摄像头获取N帧图像，接收用户的第一操作；响应于第一操作，确定N帧图像中的目标图像；根据目标图像及N帧图像中获取时间早于目标图像的M－1帧图像，生成第一全景图像，其中，M小于N。本发明可以在全景图像的拍摄过程中，将根据第一操作确定的一帧目标图像作为回撤点，使得将回撤点及回撤点之前的图像作为用户满意的图像，并生成全景图像，将回撤点之后的图像作为用户不满意的图像进行撤销。使得在全景图像出现局部画面缺陷的时候，可以针对该局部画面对应的图像进行单独修改，而非直接重拍整个全景图像，提高了全景图像的拍摄效率。

实施例二

参照图3，图3示出了本发明实施例提供的一种图像处理方法的具体步骤流程图，该方法可以包括：

步骤201，在所述终端沿第一方向移动的过程中，通过所述终端的摄像头获取N帧图像，其中N大于等于2。

在本发明实施例中，该步骤201可以参照上述步骤101的相关记载，为了避免重复，此处不再赘述。

步骤202，接收将所述终端沿第二方向移动的操作，所述第二方向与所述第一方向方向相反。

在该步骤中，可以接收将终端沿第二方向移动的操作，沿第二方向的移动可以为沿直线移动，也可以为沿曲线移动，也可以为顺时针选择移动或逆时针旋转移动，本发明实施例对此不作限定。

步骤203，若所述终端沿所述第二方向移动至目标位置，则确定所述N 帧图像中与所述目标位置相对应的图像为目标图像。

本发明实施例中，终端在沿不同方向进行移动的过程中，会产生对应不同方向的偏移量。因为多帧图像是在终端移动的过程中得到的，且由于终端在移动过程中存在运动偏移，所以得到的多帧图像中，相邻图像之间存在运动偏移量。另外，运动偏移量存在方向和偏移量大小两个参数，预设时间内移动距离越大，则运动偏移量的偏移量越大；预设时间内移动距离越小，则运动偏移量的偏移量越小。

例如，在终端从左到右移动进行全景图像拍摄的过程中，存在方向向左的运动偏移量和方向向右的运动偏移量。

在本发明实施例中，确定相邻图像之间的运动偏移量，可以采用光流 (opticalflow)法进行计算，光流是关于视域中的物体运动检测中的概念，用来描述相对于观察者的运动所造成的观测目标、表面或边缘的运动，光流法在样型识别、计算机视觉以及其他影像处理领域中非常有用，可用于运动检测、物件切割、碰撞时间与物体膨胀的计算、运动补偿编码，或者通过物体表面与边缘进行立体的测量等等。

具体的，在相邻图像中，终端可以采用光流法找到第一个图像中的特征点的位置在第二个图像中的对应位置，两个位置进行坐标值相减得到每个特征点的运动偏移，然后对所有特征点的运动偏移求均值，得到相邻图像之间的运动偏移量。

在该步骤中，终端沿第一方向移动的过程中，会产生对应第一方向的第一运动偏移量，终端沿第二方向移动的过程中，会产生对应第二方向的第二运动偏移量，所述第一方向和所述第二方向不同。第一运动偏移量大于或等于第一阈值，第二运动偏移量大于或等于第二阈值。

具体的，在终端沿第二方向产生的第二运动偏移量大于或等于第二阈值的情况下，可以确定终端最终停止移动时所处的位置点为目标位置，并确定所述N帧图像中与所述目标位置相对应的图像为目标图像。其中N帧图像中与目标位置相对应的图像，可以为终端在目标位置拍摄的一张图像。

优选的，第一方向和所述第二方向平行于所述摄像头的镜头表面，且所述第一方向和所述第二方向相反。

在本发明专利中，运动偏移量既可以是正向的(终端向第一方向移动产生的第一运动偏移量)，也可以是负向的(终端向第二方向移动产生的第二运动偏移量)。优选的，第一方向可以和第二方向相反。

另外，第一运动偏移量和第二运动偏移量可以具有偏移量大小，当一张图像与相邻的前一张图像之间的偏移量大于某一阈值时，该图像才具有被添加进全景图像序列的资格。传统的全景图像拼接算法会对图像之间正向的运动偏移做累加，如果累加值达到第一阈值，则可以触发拼接功能，将当前帧的图像的相关内容拼接到全景图像上。

在本发明实施例中，定义了不同方向(正向和负向)的第一运动偏移量和第二运动偏移量。根据全景图像拼接算法，终端可以对图像之间正向的运动偏移量做累加，如果累加值达到某一阈值，则可以触发拼接功能，将当前目标位置对应的图像确定为目标图像，并将目标图像即目标图像之前的图像拼接到全景图像上；另外终端也可以对图像之间负向的运动偏移量做累加，如果累加值达到某一阈值，则可以触发撤销功能，将目标位置之后的图像确定为撤销图像，对撤销图像进行删除或忽略操作。

优选的，在本发明实施例中，第一阈值和第二阈值相同，如，假设第一运动偏移量为在0.2秒内向左移动了2厘米，若第二运动偏移量的偏移量大小和第一运动偏移量相同，则第一运动偏移量可以为在0.2秒内向右移动了 2厘米。

例如，参照图4，其示出了本发明实施例提供的另一种图像处理方法的场景图，终端沿第一方向X移动的过程中，a为第i时刻下全景拼接功能已拼接完的预览照片，终端继续沿第一方向X移动，到第i+1时刻时全景拼接好的预览照片如b所示，若用户对刚才第i时刻到第i+1时刻拼接的内容不满意，则用户可以将终端沿第二方向Y移动，随着终端的移动，刚才拼接的内容不断被消除，直到终端在第二方向Y上停止移动时，确定终端停止时的位置点为目标位置，将目标位置对应的图像作为目标图像，以供将目标图像之后的图像作为不满意的内容进行撤销(即全景拼接的预览照片由a变成 b))。若用户将终端在第二方向Y上停止移动之后，将终端继续沿第一方向 X移动，则终端可以继续进行全景拼接，直到拼接结束为止。

步骤204，根据所述目标图像及所述N帧图像中获取时间早于所述目标图像的M－1帧图像，生成第一全景图像，其中，M小于N。

在本发明实施例中，该步骤204可以参照上述步骤104的相关记载，为了避免重复，此处不再赘述。

在本发明实施例中，所述终端图像处理方法包括：在终端沿第一方向移动的过程中，通过终端的摄像头获取N帧图像，接收用户的第一操作；响应于第一操作，确定N帧图像中的目标图像；根据目标图像及N帧图像中获取时间早于目标图像的M－1帧图像，生成第一全景图像，其中，M小于N。本发明可以在全景图像的拍摄过程中，将根据第一操作确定的一帧目标图像作为回撤点，使得将回撤点及回撤点之前的图像作为用户满意的图像，并生成全景图像，将回撤点之后的图像作为用户不满意的图像进行撤销。使得在全景图像出现局部画面缺陷的时候，可以针对该局部画面对应的图像进行单独修改，而非直接重拍整个全景图像，提高了全景图像的拍摄效率。另外，在终端的移动过程中，本发明可以根据与第一方向不同的第二方向进行移动终端的操作，从而确定目标图像，简化了用户对不满意的图像进行撤销操作的繁琐度，提高了用户体验度。

实施例三

参照图5，示出了本发明实施例提供的另一种图像处理方法的具体流程图，该方法具体可以包括如下步骤：

步骤301，在所述终端沿第一方向移动的过程中，通过所述终端的摄像头获取N帧图像，其中N大于等于2。

在本发明实施例中，该步骤301可以参照上述步骤101的相关记载，为了避免重复，此处不再赘述。

步骤302，接收用户的第一操作；

在本发明实施例中，该步骤302可以参照上述步骤102的相关记载，为了避免重复，此处不再赘述。

步骤303，响应于所述第一操作，确定所述N帧图像中的目标图像；

在本发明实施例中，该步骤303可以参照上述步骤103的相关记载，为了避免重复，此处不再赘述。

步骤304，根据所述目标图像及所述N帧图像中获取时间早于所述目标图像的M－1帧图像，生成第一全景图像，其中，M小于N。

在本发明实施例中，该步骤304可以参照上述步骤104的相关记载，为了避免重复，此处不再赘述。

可选的，所述方法还可以包括：

步骤305，获取所述终端的当前位置。

在该步骤中，当前位置可以为终端当前所处位置的坐标，同时当前位置也可以包括终端在当前位置时的当前位置姿态，该当前位置姿态一般为终端拍摄完最后一张图像时所处的位置姿态，另外，该当前位置姿态也可以为其他位置姿态，本发明实施例对此不作限定。

步骤306，根据所述当前位置和与所述目标图像相对应的目标位置，输出第一提示信息。

在该步骤中，终端还可以通过计算终端在拍摄目标图像时的目标位置，输出第一提示信息，第一提示信息用于给予用户提示，引导用户将终端快速地移动到该目标位置对应的拍摄位置，并调整终端的姿态为目标位置对应的拍摄姿态，从而达到继续从回退点进行全景拼接拍摄的目的。

具体的，通过所述终端的传感器提供的方位信息，可以确定所述终端的运动轨迹。

终端可以通过陀螺仪、摄像头等传感器，获取终端的偏转角、当前位置等方位信息，并根据该方位信息确定终端的运动轨迹，其中，该运动轨迹与摄像头拍摄得到的连续多帧图像之间存在映射关系，即根据该映射关系，可以得到相邻图像之间的终端运动轨迹。

进一步的，根据所述当前位置姿态和所述运动轨迹，确定与所述目标图像对应的目标位置。

在该步骤中，根据包括所述运动轨迹的映射关系，可以确定终端在拍摄目标图像时的目标位置，并通过将目标位置通知给用户，以供用户将终端由当前位置调整为目标位置。

另外，在上述方案中，拼接内容回撤方案，仅对平行于终端摄像头镜头表面的左右移动和上下移动有效，其原因在于左右移动和上下移动，所拍摄物体的大小不变，可以有效地找到对应的特征点进行位移计算。而对于垂直或倾斜于于终端摄像头镜头表面的移动方式(前后移动)的全景拼接方法(或者是放大缩小的全景拼接方法)，由于景物大小发生了改变，特征点也随之发生了变化。向前移动前(或者放大前)图像上所找到的特征点，可能在向前移动后(或者放大后)的图像上完全找不到对应的特征点。因此对于这种情况，可以采用其他辅助信息，如通过终端的陀螺仪，或者目标检测识别算法，来估计终端向前移动的距离(或者放大的倍数)，然后指导用户移动终端，以将终端退回到之前的位置。

在本发明实施例中，所述终端图像处理方法包括：在终端沿第一方向移动的过程中，通过终端的摄像头获取N帧图像，接收用户的第一操作；响应于第一操作，确定N帧图像中的目标图像；根据目标图像及N帧图像中获取时间早于目标图像的M－1帧图像，生成第一全景图像，其中，M小于N。本发明可以在全景图像的拍摄过程中，将根据第一操作确定的一帧目标图像作为回撤点，使得将回撤点及回撤点之前的图像作为用户满意的图像，并生成全景图像，将回撤点之后的图像作为用户不满意的图像进行撤销。使得在全景图像出现局部画面缺陷的时候，可以针对该局部画面对应的图像进行单独修改，而非直接重拍整个全景图像，提高了全景图像的拍摄效率。另外，终端还可以通过计算终端在拍摄目标图像时的目标位置，输出第一提示信息，第一提示信息用于给予用户提示，引导用户将终端快速地移动到该目标位置对应的拍摄位置，并调整终端的姿态为目标位置对应的拍摄姿态，从而达到继续从回退点进行全景拼接拍摄的目的。

实施例四

参照图6，示出了本发明实施例提供的另一种图像处理方法的具体流程图，该方法具体可以包括如下步骤：

步骤401，在所述终端沿第一方向移动的过程中，通过所述终端的摄像头获取N帧图像，其中N大于等于2。

在本发明实施例中，该步骤401可以参照上述步骤101的相关记载，为了避免重复，此处不再赘述。

步骤402，接收用户的第一操作；

在本发明实施例中，该步骤402可以参照上述步骤102的相关记载，为了避免重复，此处不再赘述。

步骤303，响应于所述第一操作，确定所述N帧图像中的目标图像；

在本发明实施例中，该步骤303可以参照上述步骤103的相关记载，为了避免重复，此处不再赘述。

步骤404，根据所述目标图像及所述N帧图像中获取时间早于所述目标图像的M－1帧图像，生成第一全景图像，其中，M小于N。

在本发明实施例中，该步骤404可以参照上述步骤104的相关记载，为了避免重复，此处不再赘述。

可选的，所述方法还可以包括：

步骤405，在所述终端处于与所述目标图像相对应的目标位置时，接收将所述终端向所述第一方向移动的第二操作。

在该步骤中，终端在每个位置执行一次拍摄操作，会对应生成一张图像，因此，目标图像也会对应有一个目标位置，在终端处于目标位置时，原先目标位置之后的位置拍摄的图像已经被撤销，此时用户可以执行将终端向所述第一方向移动的第二操作，以衔接该目标位置点，继续拍摄图像。

步骤406，在接收所述第二操作的过程中，通过所述终端的摄像头获取 K帧图像。

在终端沿第二操作移动的过程中，终端的摄像头可以每隔预设时间间隔，拍摄一张图像，直至移动过程完成后，得到了K帧图像，具体的，终端的显示屏可以根据图像的拍摄时序，依次拼接并展示多帧图像，以供用户观看多帧图像的拼接效果。

步骤407，根据所述目标图像、所述M－1帧图像以及所述K帧图像，生成第二全景图像。

在本发明实施例中，终端的摄像头在拍摄连续多帧图像的过程中，终端的显示屏可以实时展示获取到的图像，若用户对其中某几张图像不满意，可以进行对该不满意的图像的筛除操作，并通过终端的摄像头，在多个图像中，补拍对应该目标位置之后的图像，并将该补拍的图像与目标图像和目标图像之前的图像进行拼接，生成完整的第二全景图像。

例如，参照如7，其示出了本发明实施例提供的另一种图像处理方法的场景图，假设终端10的摄像头每隔0.2秒拍摄一张图像20，则当进行了0.8 秒的移动过程之后，终端10的摄像头共拍摄了5张连续的图像20，并且，若用户对在0:40秒时刻拍摄的图像20的效果不满意，则用户可以通过终端 10的摄像头，在该0:40秒时刻补拍一张满意的目标图像21，以使得后续在多个图像中，将目标图像21代替0:40秒时刻拍摄的图像20。

在本发明实施例中，所述终端图像处理方法包括：在终端沿第一方向移动的过程中，通过终端的摄像头获取N帧图像，接收用户的第一操作；响应于第一操作，确定N帧图像中的目标图像；根据目标图像及N帧图像中获取时间早于目标图像的M－1帧图像，生成第一全景图像，其中，M小于N。本发明可以在全景图像的拍摄过程中，将根据第一操作确定的一帧目标图像作为回撤点，使得将回撤点及回撤点之前的图像作为用户满意的图像，并生成全景图像，将回撤点之后的图像作为用户不满意的图像进行撤销。使得在全景图像出现局部画面缺陷的时候，可以针对该局部画面对应的图像进行单独修改，而非直接重拍整个全景图像，提高了全景图像的拍摄效率。另外，终端还可以在目标位置时，接收将所述终端向所述第一方向移动的第二操作，补拍对应该目标位置之后的图像，并将该补拍的图像与目标图像和目标图像之前的图像进行拼接，生成完整的全景图像。

需要说明的是，对于方法实施例，为了简单描述，故将其都表述为一系列的动作组合，但是本领域技术人员应该知悉，本申请实施例并不受所描述的动作顺序的限制，因为依据本申请实施例，某些步骤可以采用其他顺序或者同时进行。其次，本领域技术人员也应该知悉，说明书中所描述的实施例均属于优选实施例，所涉及的动作并不一定都是本申请实施例所必须的。

实施例五

参照图8所示，其示出了根据本发明实施例提供的一种终端的结构框图，所述终端50可以包括：

第一获取模块501，用于在所述终端沿第一方向移动的过程中，通过所述终端的摄像头获取N帧图像，其中N大于等于2；

第一接收模块502，用于接收用户的第一操作；

可选的，所述第一接收模块502，包括：

接收子模块，用于接收将所述终端沿第二方向移动的操作，所述第二方向与所述第一方向方向相反；

响应模块503，用于响应于所述第一操作，确定所述N帧图像中的目标图像；

可选的，所述响应模块503，包括：

选取子模块，用于若所述终端沿所述第二方向移动至目标位置，则确定所述N帧图像中与所述目标位置相对应的图像为目标图像。

第一生成模块504，用于根据所述目标图像及所述N帧图像中获取时间早于所述目标图像的M－1帧图像，生成第一全景图像，其中，M小于N。

可选的，所述装置50还包括：

位置获取模块，用于获取所述终端的当前位置；

输出模块，用于根据所述当前位置和与所述目标图像相对应的目标位置，输出第一提示信息。

可选的，所述装置50还包括：

第二接收模块，用于在所述终端处于与所述目标图像相对应的目标位置时，接收将所述终端向所述第一方向移动的第二操作；

第二获取模块，用于在接收所述第二操作的过程中，通过所述终端的摄像头获取K帧图像；

第二生成模块，用于根据所述目标图像、所述M－1帧图像以及所述K 帧图像，生成第二全景图像。

在本发明实施例中，所述终端包括：在终端沿第一方向移动的过程中，通过终端的摄像头获取N帧图像，接收用户的第一操作；响应于第一操作，确定N帧图像中的目标图像；根据目标图像及N帧图像中获取时间早于目标图像的M－1帧图像，生成第一全景图像，其中，M小于N。本发明可以在全景图像的拍摄过程中，将根据第一操作确定的一帧目标图像作为回撤点，使得将回撤点及回撤点之前的图像作为用户满意的图像，并生成全景图像，将回撤点之后的图像作为用户不满意的图像进行撤销。使得在全景图像出现局部画面缺陷的时候，可以针对该局部画面对应的图像进行单独修改，而非直接重拍整个全景图像，提高了全景图像的拍摄效率。

图9为实现本发明各个实施例的一种终端的硬件结构示意图，该终端 900包括但不限于：射频单元901、网络模块902、音频输出单元903、输入单元904、传感器905、显示单元906、用户输入单元907、接口单元908、存储器909、处理器910、以及电源911等部件。本领域技术人员可以理解，图9中示出的终端结构并不构成对终端的限定，终端可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。在本发明实施例中，终端包括但不限于手机、平板电脑、笔记本电脑、掌上电脑、车载终端、可穿戴设备、以及计步器等。

其中，处理器910，用于在终端移动的过程中，获取摄像头拍摄的连续多帧图像；将多帧图像中的目标图像，添加至全景图像序列；根据全景图像序列，生成全景图像进行展示。

在本发明实施例中，所述终端包括：在终端沿第一方向移动的过程中，通过终端的摄像头获取N帧图像，接收用户的第一操作；响应于第一操作，确定N帧图像中的目标图像；根据目标图像及N帧图像中获取时间早于目标图像的M－1帧图像，生成第一全景图像，其中，M小于N。本发明可以在全景图像的拍摄过程中，将根据第一操作确定的一帧目标图像作为回撤点，使得将回撤点及回撤点之前的图像作为用户满意的图像，并生成全景图像，将回撤点之后的图像作为用户不满意的图像进行撤销。使得在全景图像出现局部画面缺陷的时候，可以针对该局部画面对应的图像进行单独修改，而非直接重拍整个全景图像，提高了全景图像的拍摄效率。

应理解的是，本发明实施例中，射频单元901可用于收发信息或通话过程中，信号的接收和发送，具体的，将来自基站的下行数据接收后，给处理器910处理；另外，将上行的数据发送给基站。通常，射频单元901包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器、双工器等。此外，射频单元901还可以通过无线通信系统与网络和其他设备通信。

终端通过网络模块902为用户提供了无线的宽带互联网访问，如帮助用户收发电子邮件、浏览网页和访问流式媒体等。

音频输出单元903可以将射频单元901或网络模块902接收的或者在存储器909中存储的音频数据转换成音频信号并且输出为声音。而且，音频输出单元903还可以提供与终端900执行的特定功能相关的音频输出(例如，呼叫信号接收声音、消息接收声音等等)。音频输出单元903包括扬声器、蜂鸣器以及受话器等。

输入单元904用于接收音频或视频信号。输入单元904可以包括图形处理器(Graphics Processing Unit，GPU)9041和麦克风9042，图形处理器9041 对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。处理后的图像帧可以显示在显示单元 906上。经图形处理器9041处理后的图像帧可以存储在存储器909(或其它存储介质)中或者经由射频单元901或网络模块902进行发送。麦克风9042 可以接收声音，并且能够将这样的声音处理为音频数据。处理后的音频数据可以在电话通话模式的情况下转换为可经由射频单元901发送到移动通信基站的格式输出。

终端900还包括至少一种传感器905，比如光传感器、运动传感器以及其他传感器。具体地，光传感器包括环境光传感器及接近传感器，其中，环境光传感器可根据环境光线的明暗来调节显示面板9061的亮度，接近传感器可在终端900移动到耳边时，关闭显示面板9061或背光。作为运动传感器的一种，加速计传感器可检测各个方向上(一般为三轴)加速度的大小，静止时可检测出重力的大小及方向，可用于识别终端姿态(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等；传感器905还可以包括指纹传感器、压力传感器、虹膜传感器、分子传感器、陀螺仪、气压计、湿度计、温度计、红外线传感器等，在此不再赘述。

显示单元906用于显示由用户输入的信息或提供给用户的信息。显示单元906可包括显示面板9061，可以采用液晶显示器(Liquid Crystal Display， LCD)、有机发光二极管(Organic Light-Emitting Diode,OLED)等形式来配置显示面板9061。

用户输入单元907可用于接收输入的数字或字符信息，以及产生与终端的用户设置以及功能控制有关的键信号输入。具体地，用户输入单元907包括触控面板9071以及其他输入设备9072。触控面板9071，也称为触摸屏，可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触控面板9071上或在触控面板9071附近的操作)。触控面板9071可包括触摸检测装置和触摸控制器两个部分。其中，触摸检测装置检测用户的触摸方位，并检测触摸操作带来的信号，将信号传送给触摸控制器；触摸控制器从触摸检测装置上接收触摸信息，并将它转换成触点坐标，再送给处理器910，接收处理器910发来的命令并加以执行。此外，可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触控面板9071。除了触控面板9071，用户输入单元907还可以包括其他输入设备9072。具体地，其他输入设备9072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆，在此不再赘述。

进一步的，触控面板9071可覆盖在显示面板9061上，当触控面板9071 检测到在其上或附近的触摸操作后，传送给处理器910以确定触摸事件的类型，随后处理器910根据触摸事件的类型在显示面板9061上提供相应的视觉输出。虽然在图9中，触控面板9071与显示面板9061是作为两个独立的部件来实现终端的输入和输出功能，但是在某些实施例中，可以将触控面板 9071与显示面板9061集成而实现终端的输入和输出功能，具体此处不做限定。

接口单元908为外部装置与终端900连接的接口。例如，外部装置可以包括有线或无线头戴式耳机端口、外部电源(或电池充电器)端口、有线或无线数据端口、存储卡端口、用于连接具有识别模块的装置的端口、音频输入 /输出(I/O)端口、视频I/O端口、耳机端口等等。接口单元908可以用于接收来自外部装置的输入(例如，数据信息、电力等等)并且将接收到的输入传输到终端900内的一个或多个元件或者可以用于在终端900和外部装置之间传输数据。

存储器909可用于存储软件程序以及各种数据。存储器909可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等；存储数据区可存储根据手机的使用所创建的数据(比如音频数据、电话本等)等。此外，存储器909可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。

处理器910是终端的控制中心，利用各种接口和线路连接整个终端的各个部分，通过运行或执行存储在存储器909内的软件程序或模块，以及调用存储在存储器909内的数据，执行终端的各种功能和处理数据，从而对终端进行整体监控。处理器910可包括一个或多个处理单元；优选的，处理器910 可集成应用处理器和调制解调处理器，其中，应用处理器主要处理操作系统、用户界面和应用程序等，调制解调处理器主要处理无线通信。可以理解的是，上述调制解调处理器也可以不集成到处理器910中。

终端900还可以包括给各个部件供电的电源911(比如电池)，优选的，电源911可以通过电源管理系统与处理器910逻辑相连，从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。

另外，终端900包括一些未示出的功能模块，在此不再赘述。

优选的，本发明实施例还提供一种终端，包括处理器910，存储器909，存储在存储器909上并可在上述处理器910上运行的计算机程序，该计算机程序被处理器910执行时实现上述图像处理方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。

基于上述终端的硬件结构，以下对本发明各实施例进行详细详述。

本发明实施例还提供一种计算机可读存储介质，计算机可读存储介质上存储有计算机程序，该计算机程序被处理器执行时实现上述图像处理方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。其中，上述的计算机可读存储介质，如只读存储器(Read-Only Memory，简称ROM)、随机存取存储器(Random Access Memory，简称RAM)、磁碟或者光盘等。

需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。

通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台终端(可以是手机，计算机，服务器，空调器，或者网络设备等)执行本发明各个实施例所述的方法。

上面结合附图对本发明的实施例进行了描述，但是本发明并不局限于上述的具体实施方式，上述的具体实施方式仅仅是示意性的，而不是限制性的，本领域的普通技术人员在本发明的启示下，在不脱离本发明宗旨和权利要求所保护的范围情况下，还可做出很多形式，这些均属于本发明的保护之内。

Claims (10)

1.一种图像拼接方法，应用于终端，其特征在于，所述方法包括：

在所述终端沿第一方向移动的过程中，通过所述终端的摄像头获取N帧图像，其中N大于等于2；

接收用户的第一操作；

响应于所述第一操作，确定所述N帧图像中的目标图像；

根据所述目标图像及所述N帧图像中获取时间早于所述目标图像的M－1帧图像，生成第一全景图像，其中，M小于N。

2.根据权利要求1所述的方法，其特征在于，

所述接收用户的第一操作，具体包括：

接收将所述终端沿第二方向移动的操作，所述第二方向与所述第一方向方向相反；

所述响应于所述第一操作，确定所述N帧图像中的目标图像，具体包括：

若所述终端沿所述第二方向移动至目标位置，则确定所述N帧图像中与所述目标位置相对应的图像为目标图像。

3.根据权利要求1所述的方法，其特征在于，所述方法还包括：

获取所述终端的当前位置；

根据所述当前位置和与所述目标图像相对应的目标位置，输出第一提示信息。

4.根据权利要求1所述的方法，其特征在于，所述根据所述目标图像及所述N帧图像中获取时间早于所述目标图像的M－1帧图像，生成全景图像之后，所述方法还包括：

在所述终端处于与所述目标图像相对应的目标位置时，接收将所述终端向所述第一方向移动的第二操作；

在接收所述第二操作的过程中，通过所述终端的摄像头获取K帧图像；

根据所述目标图像、所述M－1帧图像以及所述K帧图像，生成第二全景图像。

5.一种终端，其特征在于，所述终端，包括：

第一获取模块，用于在所述终端沿第一方向移动的过程中，通过所述终端的摄像头获取N帧图像，其中N大于等于2；

第一接收模块，用于接收用户的第一操作；

响应模块，用于响应于所述第一操作，确定所述N帧图像中的目标图像；

第一生成模块，用于根据所述目标图像及所述N帧图像中获取时间早于所述目标图像的M－1帧图像，生成第一全景图像，其中，M小于N。

6.根据权利要求5所述的终端，其特征在于，所述第一接收模块，包括：

接收子模块，用于接收将所述终端沿第二方向移动的操作，所述第二方向与所述第一方向方向相反；

所述响应模块，包括：

选取子模块，用于若所述终端沿所述第二方向移动至目标位置，则确定所述N帧图像中与所述目标位置相对应的图像为目标图像。

7.根据权利要求5所述的终端，其特征在于，所述装置还包括：

位置获取模块，用于获取所述终端的当前位置；

输出模块，用于根据所述当前位置和与所述目标图像相对应的目标位置，输出第一提示信息。

8.根据权利要求5所述的终端，其特征在于，所述装置还包括：

第二接收模块，用于在所述终端处于与所述目标图像相对应的目标位置时，接收将所述终端向所述第一方向移动的第二操作；

第二获取模块，用于在接收所述第二操作的过程中，通过所述终端的摄像头获取K帧图像；

第二生成模块，用于根据所述目标图像、所述M－1帧图像以及所述K帧图像，生成第二全景图像。

9.一种终端，其特征在于，包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述计算机程序被所述处理器执行时实现如权利要求1至4中任一项所述的图像处理方法的步骤。

10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储计算机程序，所述计算机程序被处理器执行时实现如权利要求1至4中任一项所述的图像处理方法的步骤。