CN108111747A - 一种图像处理方法、终端设备及计算机可读介质 - Google Patents

Abstract

本发明实施例公开了一种图像处理方法、终端设备及计算机可读介质，其中方法包括：终端设备先在相同条件下获取具有相同目标对象的源全景图像和待合成图像。然后从待合成图像中获取目标对象的特征信息，并根据该特征信息在上述源全景图像中确定出合成区域。最后将待合成图像合成到上述合成区域中以得到目标全景图像。本发明实施例通过先获取具有相同目标对象的源全景图像和待合成图像，然后将待合成图像合成至根据目标对象特征信息在源全景图像中确定出的合成区域内，可以有效的改善全景图像的画质，提高全景图像的清晰度，提升全景图像的视觉效果。

Description

一种图像处理方法、终端设备及计算机可读介质

技术领域

本发明涉及图像处理技术领域，尤其涉及一种图像处理方法、终端设备及计算机可读介质。

背景技术

随着科学技术的不断发展，拍照已经成为人们日常生活中必不可少的信息存储手段。全景照片，是将所有拍摄的多张图片拼接成一张图片。由于其包含了更广的视野，可以同时存储更多的信息，因此逐渐被人们重视和使用。与此同时，人们对全景照片的视觉效果要求也越来越高。

现有技术中，通过常用的图像拼接手段拼接得到的全景图像的会存在一些拼接痕迹或图像变形，使得全景图像画质差，清晰度低，降低了全景图像的视觉效果。

发明内容

本发明实施例提供一种图像处理方法，可通过先获取具有相同目标对象的源全景图像和待合成图像，然后将待合成图像合成至根据目标对象特征信息在源全景图像中确定出的合成区域内，可以有效的改善全景图像的画质，提高全景图像的视觉效果。

第一方面，本发明实施例提供了一种图像处理方法，该方法包括：

获取源全景图像，上述源全景图像由N张图像拼接而成。上述N张图像中至少包括第一图像和第二图像。上述第一图像包含目标对象的第一部分图像，上述第二图像包含该目标对象的第二部分图像。第一部分图像和第二部分图像拼接成上述目标对象的第一完整图像。其中，N为大于1的正整数。

获取待合成图像，上述待合成图像内包含上述目标对象的第二完整图像。

从上述待合成图像中获取上述目标对象的特征信息，并根据上述目标对象的特征信息在上述源全景图像中确定出合成区域，其中，上述合成区域内包括上述第一部分图像所在的第一区域和上述第二部分图像所在的第二区域。

将上述待合成图像合成到上述源全景图像的上述合成区域中以得到目标全景图像。

第二方面，本发明实施例提供了一种终端设备，该终端设备包括：

图像获取单元，用于获取源全景图像，上述源全景图像由N张图像拼接而成。上述N张图像中至少包括第一图像和第二图像。上述第一图像包含目标对象的第一部分图像，上述第二图像包含该目标对象的第二部分图像。第一部分图像和第二部分图像拼接成上述目标对象的第一完整图像。其中，N为大于1的正整数。

上述图像获取单元，还用于获取待合成图像，上述待合成图像内包含上述目标对象的第二完整图像。

合成区域确定单元，用于从上述图像获取单元获取的待合成图像中获取上述目标对象的特征信息，并根据上述目标对象的特征信息在上述图像获取单元获取的源全景图像中确定出合成区域，其中，上述合成区域内包括上述第一部分图像所在的第一区域和上述第二部分图像所在的第二区域。

合成单元，用于将上述图像获取单元获取的待合成图像合成到上述合成区域确定单元从上述图像获取单元获取的源全景图像中确定的上述合成区域中以得到目标全景图像。

第三方面，本发明实施例提供了另一种终端设备，包括处理器、输入设备、输出设备和存储器，所述处理器、输入设备、输出设备和存储器相互连接，其中，所述存储器用于存储支持终端设备执行上述方法的计算机程序，所述计算机程序包括程序指令，所述处理器被配置用于调用所述程序指令，执行上述第一方面的方法。

第四方面，本发明实施例提供了一种计算机可读存储介质，所述计算机存储介质存储有计算机程序，所述计算机程序包括程序指令，所述程序指令当被处理器执行时使所述处理器执行上述第一方面的方法。

本发明实施例中，终端设备先在相同条件下获取具有相同目标对象的源全景图像和待合成图像。然后从待合成图像中获取目标对象的特征信息，并根据该特征信息在上述源全景图像中确定出合成区域。最后，将待合成图像合成到上述合成区域中以得到目标全景图像。本发明实施例通过先获取具有相同目标对象的源全景图像和待合成图像，然后将待合成图像合成至根据目标对象特征信息在源全景图像中确定出的合成区域内，可以有效的改善全景图像的画质，提高全景图像的清晰度，提升全景图像的视觉效果。。

附图说明

为了更清楚地说明本发明实施例技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1是本发明实施例提供的一种图像处理方法的第一实施例示意流程图；

图2是本发明实施例提供的一种源全景图像示意图；

图3是本发明实施例提供的一种合成区域效果图；

图4是本发明实施例提供的一种图像处理方法的第二实施例示意流程图；

图5是本发明实施例提供的一种终端设备的示意性框图；

图6是本发明实施例提供的图像获取单元示意性框图；

图7是本发明实施例挺的另一种终端设备的示意性框图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

应当理解，当在本说明书和所附权利要求书中使用时，术语“包括”和“包含”指示所描述特征、整体、步骤、操作、元素和/或组件的存在，但并不排除一个或多个其它特征、整体、步骤、操作、元素、组件和/或其集合的存在或添加。

还应当理解，在此本发明说明书中所使用的术语仅仅是出于描述特定实施例的目的而并不意在限制本发明。如在本发明说明书和所附权利要求书中所使用的那样，除非上下文清楚地指明其它情况，否则单数形式的“一”、“一个”及“该”意在包括复数形式。

还应当进一步理解，在本发明说明书和所附权利要求书中使用的术语“和/或”是指相关联列出的项中的一个或多个的任何组合以及所有可能组合，并且包括这些组合。

如在本说明书和所附权利要求书中所使用的那样，术语“如果”可以依据上下文被解释为“当...时”或“一旦”或“响应于确定”或“响应于检测到”。类似地，短语“如果确定”或“如果检测到[所描述条件或事件]”可以依据上下文被解释为意指“一旦确定”或“响应于确定”或“一旦检测到[所描述条件或事件]”或“响应于检测到[所描述条件或事件]”。

具体实现中，本发明实施例中描述的终端设备包括但不限于诸如具有拍照功能和触摸敏感表面(例如，触摸屏显示器和/或触摸板)的移动电话、膝上型计算机或平板计算机之类的其它便携式设备。还应当理解的是，在某些实施例中，所述设备并非便携式通信设备，而是具有触摸敏感表面(例如，触摸屏显示器和/或触摸板)的台式计算机。

在接下来的讨论中，描述了包括显示器和触摸敏感表面的终端设备。然而，应当理解的是，终端设备可以包括诸如物理键盘、鼠标和/或控制杆的一个或多个其它物理用户接口设备。

终端设备支持各种应用程序，例如以下中的一个或多个：绘图应用程序、演示应用程序、文字处理应用程序、网站创建应用程序、盘刻录应用程序、电子表格应用程序、游戏应用程序、电话应用程序、视频会议应用程序、电子邮件应用程序、即时消息收发应用程序、锻炼支持应用程序、照片管理应用程序、数码相机应用程序、数字摄影机应用程序、web浏览应用程序、数字音乐播放器应用程序和/或数字视频播放器应用程序。

可以在终端设备上执行的各种应用程序可以使用诸如触摸敏感表面的至少一个公共物理用户接口设备。可以在应用程序之间和/或相应应用程序内调整和/或改变触摸敏感表面的一个或多个功能以及终端设备上显示的相应信息。这样，终端设备的公共物理架构(例如，触摸敏感表面)可以支持具有对用户而言直观且透明的用户界面的各种应用程序。

参见图1，是本发明实施例提供的一种图像处理方法的第一实施例示意流程图。下文中以移动终端为执行主体进行描述。下文中所描述的源全景图像和待合成图像中仅含有一个上述目标对象。如图所示图像处理方法可包括步骤：

S101，获取源全景图像。

在一些可行的实施方式中，移动终端可通过其具有的拍照装置获取N张图像，并通过图像拼接算法对该N张图像进行图像拼接处理，以得到包含目标对象的源全景图像。或者，移动终端还可通过有线或无线的通信方式从外部存储设备中获取N张图像，并通过图像拼接算法对该N张图像进行图像拼接处理，以得到包含目标对象的源全景图像。为方便理解和描述，下文以N张待拼接图像代替上述N张图像进行描述。其中，源全景图像包含的目标对象为源全景图像中最突出的一个对象。从构图法的角度来说，源全景图像中的目标对象即为该源全景图像的主体。上述主体即指源全景图像的拍摄者用以表达主体思想的主要形象，是整个源全景图像的结构中心。例如，人物类的全景图像中，人物即为该图像中的目标对象。

具体的，移动终端可通过其具备的摄像头以水平或垂直的方向连续拍摄N张待拼接图像。或者，移动终端还可通过有线或无线等通信方式从外部存储设备中获取以水平或垂直的方向连续拍摄N张待拼接图像。其中，上述外部存储设备可包括软盘、移动硬盘、U盘等，此处不做限定。然后，移动终端通过图像去噪、图像投影、图像修正等方法对上述N张待拼接图像进行图像预处理。移动终端在对上述N张待拼接图像进行图像预处理之后，可从N张待拼接图像中确定出一张图像为参考图像，剩余的N-1张待拼接图像为目标图像，然后通过图像配准方法来确定出上述参考图像和N-1张目标图像中重叠的部分和重叠位置，以建立参考图像和目标图像的配准关系。最后，移动终端通过图像融合算法及建立的参考图像和目标图像的配准关系对上述N张待拼接图像进行拼接融合，以得到上述源全景图像。可以理解的是，上述N张待拼接图像中至少包括第一图像和第二图像。上述第一图像包含目标对象的第一部分图像，上述第二图像包含该目标对象的第二部分图像。第一部分图像和第二部分图像拼接成上述目标对象的第一完整图像。其中，上述目标的对象的第一完整图像为源全景图像中目标对象的轮廓内的图像。例如，请一并参见图2，图2是本发明实施例提供的一种源全景图像示意图。假设移动终端获取到第一图像和第二图像。第一图像和第二图像的目标对象为人物。图2中，第一图像包含了人物的第一部分图像，如图2中第一虚线右侧区域内的人物的部分图像。第二图像包含了人物的第二部分图像，如图2中第二虚线左侧区域包含的人物的第二部分图像。其中，人物的第一部分图像和第二部分图像具有重叠部分。移动终端通过图像拼接算法将上述第一图像和第二图像进行拼接，即可得到上述源全景图像。其中，图像拼接的过程可参见上文中描述的由N张待拼接图像得到源全景图像的过程，此处便不再赘述。

S102，获取待合成图像。

在一些可行的实施方式中，具体的，移动终端可在与拍摄上述N张待拼接图像相同环境和设备配置条件下，通过其具备的摄像头拍摄获得源待合成图像。其中，上述源待合成图像中包含上述目标对象的第二完整图像。移动终端还可通过有线或无线等通信方式从外部存储设备中获取源待合成图像。其中，上述外部存储设备可包括软盘、移动硬盘、U盘等，此处不做限定。例如，移动终端在使用摄像头获取上述N张待拼接图像的过程中，检测并判断用户输入的操作指令。若判断用户输入的操作指令为待合成图像获取指令时，可立即拍摄一张包含目标对象的图像作为上述源待合成图像，并保存在移动终端的存储器中以供后续图像处理使用。又例如，当用户选定了移动终端的拍摄模式为人物拍摄后，移动终端在使用摄像头获取上述N张待拼接图像的过程中，可实时检测拍摄画面中是否存在完整的目标对象的图像。若检测到拍摄画面中存在完整的目标对象的图像，则获取该画面图像，确定为上述源待合成图像。移动终端通过上述方法获取源全景图像中的目标对象及背景信息和源待合成图像中目标对象及背景信息应保持一致。比如，假设上述目标对象为人物，则获取的源待合成图像中人物的动作、表情和背景等特征信息应该和源全景图像中相同的人物的动作、表情和背景等特征信息保持一致。

可选的，移动终端在获取到上述源待合成图像后，可对上述源待合成图像进行图像特征提取，以得到目标对象在上述源待合成图像中的第二轮廓信息。然后，移动终端可根据目标对象在上述源待合成图像中的第二轮廓信息从上述源待合成图像中截取出上述目标对象的第二完整图像，并确定为待合成图像。

可选的，移动终端在获取到上述源待合成图像后，可对上述源待合成图像进行图像特征提取，以得到目标对象在上述源待合成图像中的第二轮廓信息。然后，获取预设的待合成图像尺寸阈值，根据预设的待合成图像尺寸阈值和上述目标对象在上述源待合成图像中的第二轮廓信息在源待合成图像中截取出待合成图像。

S103，从上述待合成图像中获取目标对象的特征信息，并根据上述目标对象的特征信息在上述源全景图像中确定出合成区域。

在一些可行的实施方式中，具体的，移动终端在获取到待合成图像后，可通过图像特征提取算法从上述待合成图像中提取出目标对象的第二完整图像的特征信息。其中，上述目标对象的第二完整图像的特征信息可包括第二完整图像的轮廓信息、第二完整图像的像素点分布特征信息等，此处不做限定。其后，移动终端可根据上述第二完整图像的特征信息，通过图像识别方法从上述源全景图像中识别出上述目标对象的第一完整图像，并获取上述目标对象的第一完整图像的特征信息。其中，上述目标对象的第一完整图像的特征信息可包括第一完整图像的轮廓信息、第一完整图像的像素点分布特征信息等，此处不做限定。最后，移动终端可根据上述第一完整图像的特征信息在上述源全景图像中确定出上述合成区域。其中，移动终端通过上述操作确定出的合成区域至少包括上述第一部分图像所在的第一区域和第二部分图像所在的第二区域。上述合成区域、第一区域及第二区域的形状可为圆形、方形等，此处不做限定。例如，移动终端在源全景图像中确定出目标对象的第一完整图像后，可获取上述第一完整图像的轮廓信息，然后根据第一完整图像的轮廓信息确定出第一完整图像的重心在源全景图像中的位置。根据第一完整图像重心位置在源全景图像中确定出一个包含第一完整图像的矩形区域，并确定为合成区域。请一并参见图3，图3是本发明实施例提供的一种合成区域效果图。可以理解的是，图3截取自图2，为图2中包括上述第一完整图像的部分图像。其中第一区域为包含目标对象的第一部分图像的矩形区域(如图3中第三虚线划定的矩形区域)。第二区域为包含了目标对象的第二部分图像的矩形区域(如图3中第四虚线划定的矩形区域)。合成区域为包含了第一区域和第二区域的矩形区域。

S104，将待合成图像合成到上述源全景图像的合成区域中，以得到目标全景图像。

在一些可行的实施方式中，具体的，移动终端在上述源全景图像中确定出合成区域后，可选的，移动终端可从上述合成区域内截取出上述合成区域图像，然后将上述待合成图像填充至上述合成区域中，完成待合成图像对上述合成区域图像的替换操作，以得到目标全景图像。可选的，移动终端可提取出上述待合成图像中各像素点的像素值，然后根据上述待合成图像中各像素点的像素值来增加或者减少合成区域图像中各像素点的像素值，以得到目标全景图像。例如，移动终端先从通过图像裁剪算法从上述合成区域中截取出合成区域图像，然后利用种子填充算法将上述待合成图像填充至上述合成区域内，以目标全景图像。

在一些可行的实施方式中，当源全景图像和待合成图像中存在多个目标对象时，移动终端可使用上述图像处理方法分别针对每个目标对象进行处理，并最终得到目标全景图像。移动终端也可将多个目标对象作为一个整体，使用上述图像处理方法进行处理，以得到目标全景图像。

本发明实施例中，终端设备先在相同条件下获取具有相同目标对象的源全景图像和待合成图像。然后从待合成图像中获取目标对象的特征信息，并根据该特征信息在上述源全景图像中确定出合成区域。最后将待合成图像合成到上述合成区域中以得到目标全景图像。本发明实施例通过先获取具有相同目标对象的源全景图像和待合成图像，然后将待合成图像合成至根据目标对象特征信息在源全景图像中确定出的合成区域内，可以有效的改善全景图像的画质，提高全景图像的清晰度，提升全景图像的视觉效果。

请参见图4，是本发明实施例提供的一种图像处理方法的第二实施例示意流程图。下文以移动终端为执行主体进行描述。下文中所描述的源全景图像和待合成图像中仅含有一个上述目标对象。如图4所示图像处理方法可包括步骤：

S201，获取源全景图像。

在一些可行的实施方式中，移动终端获取源全景图像的过程可参见上文第一实施例步骤S101中所描述的获取源全景图像的过程，此处便不再赘述。

S202，获取待合成图像。

在一些可行的实施方式中，移动终端可先获取源待合成图像，然后从上述源待合成图像中截取出待合成图像。其中，移动终端获取源待合成图像的过程可参见上文第一实施例步骤S102中所描述的移动终端获取源待合成图像的过程，此处便不再赘述。

可选的，移动终端在获取到源待合成图像后，可通过颜色特征提取、形状特征提取或纹理特征提取等方法对源待合成图像进行特征提取，以确定出目标对象在源待合成图像中的轮廓信息，并将上述轮廓信息确定为目标对象的第二轮廓信息。移动终端在获取目标对象的第二轮廓信息后，可在源待合成图像中定位出目标对象的完整轮廓，然后截取出该完整轮廓内侧的图像作为待合成图像。

可选的，移动终端在获取到上述源待合成图像后，可通过颜色特征提取、形状特征提取或纹理特征提取等方法对源待合成图像进行特征提取，以确定出目标对象在源待合成图像中的轮廓信息，并将上述轮廓信息确定为目标对象的第二轮廓信息。然后，移动终端还可获取预设的待合成图像尺寸阈值，其中，上述预设的待合成图像尺寸阈值用于确定待合成图像尺寸的大小和待合成图像的形状，上述待合成图像的形状可包括矩形、圆形、椭圆等，此处不作限定。移动终端可根据上述第二轮廓信息和上述待合成图像尺寸阈值在上述源待合成图像中确定出图像裁剪的起点及水平裁剪长度和垂直裁剪长度，然后通过图像裁剪操作从待合成图像中裁剪出待合成图像。移动终端还可根据上述第二轮廓信息和上述待合成图像尺寸阈值在上述待合成图像确定出一个包含目标对象的裁剪区域。然后截取出上述裁剪区域内的图像作为待合成图像。需要说明的是，上述方法获取的待合成图像中必须包含上述目标对象的第二完整图像。

S203，从上述待合成图像中获取目标对象的特征信息，根据该目标对象的特征信息从上述源全景图像中确定出目标对象在源全景图像中第一轮廓信息，并根据第一轮廓信息在源全景图像中确定出合成区域。

在一些可行的实施方式中，移动终端在上述源全景图像中确定出合成区域的过程可参见上文第一实施例步骤S103中描述的移动终端从源全景图像中确定出合成区域的过程，此处便不再赘述。

S204，判断合成区域内的图像的图像信息和待合成图像的图像信息是否一致。若判断为是，则执行步骤S205，若判断为否，则执行步骤S206。

在一些可行的实施方式中，具体的，移动终端在上述源全景图像中确定出合成区域后，可判断上述合成区域内的图像(下文以合成区域图像进行描述)的图像信息和待合成图像的图像信息是否一致。其中，上述图像信息包括目标对象图像尺寸和目标对象的图像分辨率。若移动终端判断出合成区域图像的图像信息和待合成图像的图像信息一致，执行步骤S205。若移动终端判断出合成区域图像的图像信息和待合成图像的图像信息不一致，则执行步骤S206。

S205，将待合成图像合成到源全景图像的合成区域中，以得到目标全景图像。

在一些可行的实施方式中，移动终端在判断出合成区域图像的图像信息和待合成图像的图像信息一致后，可通过图像处理方法将待合成图像合成到源全景图像的合成区域中，并将合成后的源全景图像确定为目标全景图像。

可选的，具体的，移动终端可从源全景图像中将待合成区域内的图像截取出来，然后将上述待合成图像填充至上述合成区域中，完成待合成图像对上述合成区域图像的替换操作，以得到目标全景图像。例如，移动终端先从通过图像裁剪算法从上述合成区域中截取出合成区域图像，然后利用种子填充算法将上述待合成图像填充至上述合成区域内，以目标全景图像。

可选的，移动终端可提取出上述待合成图像中各像素点的像素值，然后根据上述待合成图像中各像素点的像素值来增加或者减少合成区域图像中各像素点的像素值，以得到目标全景图像。以合成区域内的图像中的任一像素点i为例进行描述。移动终端可获取像素点i的像素值，并确定为第一像素值。然后，移动终端可获取像素点i在合成区域内的图像中的位置信息，并根据像素点i在合成区域内的图像中的位置信息从待合成图像中确定出和像素点i相对应的像素点j。例如，移动终端以合成区域内的图像的左上角顶点为原点建立坐标系，然后确定出像素点i的坐标为(x1，y1)。然后以待合成图像的左上角定位为原点建立同样的坐标系，并从待合成图像中提取出坐标为(x1，y1)的像素点，确定为像素点j。移动终端在待合成图像中确定出像素点j后，可获取像素点j的像素值，并确定为第二像素值。然后，移动终端可求取上述第一像素值和第二像素值的差值，并判断上述第一像素值和第二像素值的差值是否小于预设像素差值阈值。若判断为是，则保持像素点i的像素值不变。否则，将像素点i的像素值由上述第一像素值调整为上述第二像素值。移动终端可重复上述操作，直至遍历合成区域内所有的像素点，即可得到目标全景图像。

S206，根据合成区域内图像的像素信息对待合成图像进行图像信息调整。

在一些可行的实施方式中，若移动终端判断出合成区域图像的图像信息和待合成图像的图像信息不一致，则在进行图像合成操作之前，需对上述待合成图像进行图像预处理操作。移动终端可通过图像伸缩、图像裁剪、图像填充等方法对上述待合成图像的图像尺寸及图像分辨率进行调整，以使得调整后的待合成图像的图像信息和上述合成区域图像的图像信息保持一致。然后，移动终端可将上述调整后的待合成图像合成至上述合成区域中，以得到目标全景图像。移动终端将调整后的待合成图像合成至上述合成区域的过程可参见上文描述的移动终端将待合成图像合成到源全景图像的合成区域内的过程，此处便不再赘述。

本发明实施例中，终端设备先在相同条件下获取具有相同目标对象的源全景图像和待合成图像。然后从待合成图像中获取目标对象的特征信息，并根据该特征信息在上述源全景图像中确定出合成区域。最后将待合成图像合成到上述合成区域中以得到目标全景图像。本发明实施例通过先获取具有相同目标对象的源全景图像和待合成图像，然后将待合成图像合成至根据目标对象特征信息在源全景图像中确定出的合成区域内，可以有效的改善全景图像的画质，提高全景图像的清晰度，提升全景图像的视觉效果。

请参见图5，图5是本发明实施例提供的一种终端设备的示意图框图。该终端设备包括：图像获取单元10，合成区域确定单元20和合成单元30。请一并参见图6，图6是本发明实施例提供的图像获取单元示意性框图。图像获取单元包括源全景图像获取单元101和待合成图像获取单元102。

图像获取单元101，用于获取源全景图像，上述源全景图像由N张图像拼接而成。上述N张图像中至少包括第一图像和第二图像。上述第一图像包含目标对象的第一部分图像，上述第二图像包含该目标对象的第二部分图像。第一部分图像和第二部分图像拼接成上述目标对象的第一完整图像。其中，N为大于1的正整数。

上述图像获取单元102，用于获取待合成图像，上述待合成图像内包含上述目标对象的第二完整图像。

合成区域确定单元20，用于从上述图像获取单元10获取的待合成图像中获取上述目标对象的特征信息，并根据上述目标对象的特征信息在上述图像获取单元10获取的源全景图像中确定出合成区域，其中，上述合成区域内包括上述第一部分图像所在的第一区域和上述第二部分图像所在的第二区域。

合成单元30，用于将上述图像获取单元10获取的待合成图像合成到上述合成区域确定单元20从上述图像获取单元10获取的源全景图像中确定的上述合成区域中以得到目标全景图像。

在一些可行的实施方式中，上述合成单元30，用于对上述合成区域确定单元20确定的合成区域内的所有像素点中任一像素点i执行以下操作：

获取上述合成区域内的像素点i的像素值，在上述待合成图像中获取与上述合成区域内的像素点i相对应的像素点j的像素值。根据上述像素点j的像素值对上述像素点i的像素值进行调整。对上述合成区域内的所有像素点均执行上述操作后，将上述调整后的源全景图像确定为目标全景图像。

在一些可行的实施方式中，上述合成单元30，还用于获取上述合成区域确定单元20确定的合成区域内的像素点i的位置信息。根据上述像素点i的位置信息在上述待合成图像中提取出像素点j，并获取上述像素点j的像素值。

在一些可行的实施方式中，上述合成单元30，还用于截取出上述源全景图像获取单元101获取的源全景图像的上述合成区域内的图像，并将上述待合成图像添加到上述源全景图像的上述合成区域内，以得到目标全景图像。

在一些可行的实施方式中，上述合成区域确定单元20用于根据上述目标对象的特征信息从上述源全景图像获取单元101获取的源全景图像中确定出所述目标对象的第一轮廓信息，并根据所述第一轮廓信息在所述源全景图像中确定出合成区域。

在一些可行的实施方式中，上述待合成图像获取单元102用于获取包含上述目标对象的第二完整图像的源待合成图像。对上述源待合成图像进行图像特征提取以得到上述目标对象对应的第二轮廓信息，并根据上述第二轮廓信息从上述源待合成图像中截取出上述目标对象的第二完整图像，以得到待合成图像。

在一些可行的实施方式中，上述待合成图像获取单元102，还用于获取包含上述目标对象的第二完整图像的源待合成图像。提取上述目标对象在上述源待合成图像中的第二轮廓信息。根据预设待合成图像尺寸阈值和上述目标对象的第二轮廓信息从上述源待合成图像内截取出待合成图像。

在一些可行的实施方式中，源全景图像获取单元101可通过其具有的拍照装置获取N张图像，并通过图像拼接算法对该N张图像进行图像拼接处理，以得到包含目标对象的源全景图像。或者，源全景图像获取单元101还可通过有线或无线的通信方式从外部存储设备中获取N张图像，并通过图像拼接算法对该N张图像进行图像拼接处理，以得到包含目标对象的源全景图像。为方便理解和描述，下文以N张待拼接图像代替上述N张图像进行描述。其中，源全景图像包含的目标对象为处于源全景图像中最突出的一个对象。从构图法的角度来说，源全景图像中的目标对象即为该源全景图像的主体。上述主体即指源全景图像的拍摄者用以表达主体思想的主要形象，是整个源全景图像的结构中心。例如，人物类的全景图像中，人物即为该图像中的目标对象。

具体的，源全景图像获取单元101可通过其具备的摄像头以水平或垂直的方向连续拍摄N张待拼接图像。或者，源全景图像获取单元101还可通过有线或无线等通信方式从外部存储设备中获取以水平或垂直的方向连续拍摄N张待拼接图像。其中，上述外部存储设备可包括软盘、移动硬盘、U盘等，此处不做限定。然后，源全景图像获取单元101通过图像去噪、图像投影、图像修正等方法对上述N张待拼接图像进行图像预处理。源全景图像获取单元101在对上述N张待拼接图像进行图像预处理之后，可从N张待拼接图像中确定出一张图像为参考图像，剩余的N-1张待拼接图像为目标图像，然后通过图像配准方法来确定出上述参考图像和N-1张目标图像中重叠的部分和重叠位置，以建立参考图像和目标图像的配准关系。最后，源全景图像获取单元101通过图像融合算法和建立的参考图像和目标图像的配准关系对上述N张待拼接图像进行拼接融合，以得到上述源全景图像。可以理解的是，上述N张待拼接图像中至少包括第一图像和第二图像。上述第一图像包含目标对象的第一部分图像，上述第二图像包含该目标对象的第二部分图像。第一部分图像和第二部分图像拼接成上述目标对象的第一完整图像。其中，上述目标的对象的第一完整图像为源全景图像中目标对象的轮廓内的图像。例如，请一并参见图2，图2是本发明实施例提供的一种源全景图像示意图。假设源全景图像获取单元101获取到第一图像和第二图像。第一图像和第二图像的目标对象为人物。图2中，第一图像包含了人物的第一部分图像，如图2中第一虚线右侧区域内的人物的部分图像。第二图像包含了人物的第二部分图像，如图2中第二虚线左侧区域包含的人物的第二部分图像。其中，人物的第一部分图像和第二部分图像具有重叠部分。源全景图像获取单元101通过图像拼接算法将上述第一图像和第二图像进行拼接，即可得到上述源全景图像。其中，图像拼接的过程可参见上文中描述的由N张待拼接图像得到源全景图像的过程，此处便不再赘述。

在一些可行的实施方式中，待合成图像获取单元102可在与拍摄上述N张待拼接图像相同环境和设备配置条件下，通过其具备的摄像头拍摄获得源待合成图像。其中，上述源待合成图像中包含上述目标对象的第二完整图像。待合成图像获取单元102还可通过有线或无线等通信方式从外部存储设备中获取源待合成图像。其中，上述外部存储设备可包括软盘、移动硬盘、U盘等，此处不做限定。例如，待合成图像获取单元102在使用摄像头获取上述N张待拼接图像的过程中，检测并判断用户输入的操作指令。若判断用户输入的操作指令为待合成图像获取指令时，可立即拍摄一张包含目标对象的图像作为上述源待合成图像，并保存在待合成图像获取单元102的存储器中以供后续图像处理使用。又例如，当用户选定了待合成图像获取单元102的拍摄模式为人物拍摄后，待合成图像获取单元102在使用摄像头获取上述N张待拼接图像的过程中，可实时检测拍摄画面中是否存在完整的目标对象的图像。若检测到拍摄画面中存在完整的目标对象的图像，则获取该画面图像，确定为上述源待合成图像。待合成图像获取单元102通过上述方法获取源全景图像中的目标对象及背景信息和源待合成图像中目标对象及背景信息应保持一致。比如，假设上述目标对象为人物，则待合成图像获取单元102获取的源待合成图像中人物的动作、表情和背景等特征信息应该和源全景图像中相同的人物的动作、表情和背景等特征信息保持一致。

可选的，待合成图像获取单元102在获取到上述源待合成图像后，可对上述源待合成图像进行图像特征提取，以得到目标对象在上述源待合成图像中的第二轮廓信息。然后，待合成图像获取单元102可根据目标对象在上述源待合成图像中的第二轮廓信息从上述源待合成图像中截取出上述目标对象的第二完整图像，并确定为待合成图像。

可选的，待合成图像获取单元102在获取到上述源待合成图像后，可对上述源待合成图像进行图像特征提取，以得到目标对象在上述源待合成图像中的第二轮廓信息。然后，待合成图像获取单元102获取预设的待合成图像尺寸阈值，根据预设的待合成图像尺寸阈值和上述目标对象在上述源待合成图像中的第二轮廓信息在源待合成图像中截取出待合成图像。

待合成图像获取单元102在获取到待合成图像后，上述合成区域确定单元20可通过图像特征提取算法从上述待合成图像获取单元102获取的待合成图像中提取出目标对象的第二完整图像的特征信息。其中，上述目标对象的第二完整图像的特征信息可包括第二完整图像的轮廓信息、第二完整图像的像素点分布特征信息等，此处不做限定。其后，区域确定单元20可根据上述第二完整图像的特征信息，通过图像识别方法从上述源全景图像获取单元101获取的源全景图像中识别出上述目标对象的第一完整图像，并获取上述目标对象的第一完整图像的特征信息。其中，上述目标对象的第一完整图像的特征信息可包括第一完整图像的轮廓信息、第一完整图像的像素点分布特征信息等，此处不做限定。最后，区域确定单元20可根据上述第一完整图像的特征信息在上述源全景图像中确定出上述合成区域。其中，区域确定单元20通过上述操作确定出的合成区域至少包括上述第一部分图像所在的第一区域和第二部分图像所在的第二区域。上述合成区域、第一区域及第二区域的形状可为圆形、方形等，此处不做限定。例如，区域确定单元20在上述源全景图像获取单元101获取的源全景图像中确定出目标对象的第一完整图像后，可获取上述第一完整图像的轮廓信息，然后根据第一完整图像的轮廓信息确定出第一完整图像的重心在源全景图像中的位置。根据第一完整图像重心位置在源全景图像中确定出一个包含第一完整图像的矩形区域，并确定为合成区域。请一并参见图3，图3是本发明实施例提供的一种合成区域效果图。可以理解的是，图3截取自图2，为图2中包括上述第一完整图像的部分图像。其中第一区域为包含目标对象的第一部分图像的矩形区域(如图3中第三虚线划定的矩形区域)。第二区域为包含了目标对象的第二部分图像的矩形区域(如图3中第四虚线划定的矩形区域)。合成区域为包含了第一区域和第二区域的矩形区域。

在上述区域确定单元20在上述源全景图像获取单元101获取的源全景图像中确定出合成区域后，上述合成单元30可判断上述合成区域确定单元20确定的合成区域内的图像(下文以合成区域图像进行描述)的图像信息和待合成图像的图像信息是否一致。其中，上述图像信息包括目标对象图像尺寸和目标对象的图像分辨率。

当合成单元30判断出合成区域确定单元20确定出的合成区域图像的图像信息和待合成图像的图像信息一致后，合成单元30可从源全景图像中将待合成区域内的图像截取出来。然后将上述待合成图像填充至上述合成区域中，完成待合成图像对上述合成区域图像的替换操作，以得到目标全景图像。例如，合成单元30先从通过图像裁剪算法从上述合成区域中截取出合成区域图像，然后利用种子填充算法将上述待合成图像填充至上述合成区域内，以目标全景图像。合成单元30还可提取出上述待合成图像中各像素点的像素值，然后根据上述待合成图像中各像素点的像素值来增加或者减少合成区域图像中各像素点的像素值，以得到目标全景图像。以合成区域内的图像中的任一像素点i为例进行描述。合成单元30可获取像素点i的像素值，并确定为第一像素值。然后，合成单元30可获取像素点i在合成区域内的图像中的位置信息，并根据像素点i在合成区域内的图像中的位置信息从待合成图像中确定出和像素点i相对应的像素点j。例如，合成单元30以合成区域内的图像的左上角顶点为原点建立坐标系，然后确定出像素点i的坐标为(x1，y1)。然后以待合成图像的左上角定位为原点建立同样的坐标系，并从待合成图像中提取出坐标为(x1，y1)的像素点，确定为像素点j。合成单元30在待合成图像中提取出像素点j后，可获取像素点j的像素值，并确定为第二像素值。然后，合成单元30可求取上述第一像素值和第二像素值的差值，并判断上述第一像素值和第二像素值的差值是否小于预设像素差值阈值。若判断为是，则保持像素点i的像素值不变。否则，将像素点i的像素值由上述第一像素值调整为上述第二像素值。移动终端可重复上述操作，直至遍历合成区域内所有的像素点，然后将调整后的源全景图像确定为目标全景图像。

若合成单元30判断出合成区域图像的图像信息和待合成图像的图像信息不一致，则在进行图像合成操作之前，需对上述待合成图像进行图像预处理操作。合成单元30可通过图像伸缩、图像裁剪、图像填充等方法对上述待合成图像的图像尺寸及图像分辨率进行调整，以使得调整后的待合成图像的图像信息和上述合成区域图像的图像信息保持一致。然后，合成单元30可将上述调整后的待合成图像合成至上述合成区域中，以得到目标全景图像。合成单元30将调整后的待合成图像合成至上述合成区域的过程可参见上文描述的合成单元30将待合成图像合成到源全景图像的合成区域内的过程，此处便不再赘述。

本发明实施例中，终端设备先在相同条件下获取具有相同目标对象的源全景图像和待合成图像。然后从待合成图像中获取目标对象的特征信息，并根据该特征信息在上述源全景图像中确定出合成区域。最后将待合成图像合成到上述合成区域中以得到目标全景图像。本发明实施例通过先获取具有相同目标对象的源全景图像和待合成图像，然后将待合成图像合成至根据目标对象特征信息在源全景图像中确定出的合成区域内，可以有效的改善全景图像的画质，提高全景图像的清晰度，提升全景图像的视觉效果。

请参见图7，是本发明另一实施例提供的一种终端设备示意框图。如图7所示，本实施例中的终端设备可以包括：一个或多个输入设备100；存储器200，一个或多个处理器300和一个或多个输出设备400。上述处理器300、输入设备100、输出设备400和存储器200通过总线500连接。存储器200用于存储计算机程序，上述计算机程序包括程序指令，处理器300用于执行存储器200存储的程序指令。其中，处理器300被配置用于调用上述程序指令执行：终端设备先在相同条件下获取具有相同目标对象的源全景图像和待合成图像。然后从待合成图像中获取目标对象的特征信息，并根据该特征信息在上述源全景图像中确定出合成区域。最后将待合成图像合成到上述合成区域中以得到目标全景图像。

应当理解，在本发明实施例中，所称处理器300可以是中央处理单元(CentralProcessing Unit，CPU)，该处理器还可以是其他通用处理器、数字信号处理器(DigitalSignal Processor，DSP)、专用集成电路(Application Specific Integrated Circuit，ASIC)、现成可编程门阵列(Field-Programmable Gate Array，FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。

输入设备100可以包括触控板、指纹采传感器(用于采集用户的指纹信息和指纹的方向信息)、麦克风等，输出设备400可以包括显示器(LCD等)、扬声器等。

该存储器200可以包括只读存储器和随机存取存储器，并向处理器300提供指令和数据。存储器200的一部分还可以包括非易失性随机存取存储器。例如，存储器200还可以存储设备类型的信息。

具体实现中，本发明实施例中所描述的处理器300、输入设备100、输出设备200可执行本发明实施例提供的图像处理方法的第一实施例和第二实施例中所描述的实现方式，也可执行本发明实施例所描述的终端设备的实现方式，在此不再赘述。

在本发明的另一实施例中提供一种计算机可读存储介质，上述计算机可读存储介质存储有计算机程序，上述计算机程序包括程序指令，上述程序指令被处理器执行时实现：终端设备先在相同条件下获取具有相同目标对象的源全景图像和待合成图像。然后从待合成图像中获取目标对象的特征信息，并根据该特征信息在上述源全景图像中确定出合成区域。最后将待合成图像合成到上述合成区域中以得到目标全景图像。

上述计算机可读存储介质可以是前述任一实施例所述的终端设备的内部存储单元，例如终端设备的硬盘或内存。上述计算机可读存储介质也可以是上述终端设备的外部存储设备，例如所述终端设备上配备的插接式硬盘，智能存储卡(Smart Media Card,SMC)，安全数字(Secure Digital,SD)卡，闪存卡(Flash Card)等。进一步地，上述计算机可读存储介质还可以既包括上述终端设备的内部存储单元也包括外部存储设备。上述计算机可读存储介质用于存储上述计算机程序以及上述终端设备所需的其他程序和数据。上述计算机可读存储介质还可以用于暂时地存储已经输出或者将要输出的数据。

本领域普通技术人员可以意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、计算机软件或者二者的结合来实现，为了清楚地说明硬件和软件的可互换性，在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本发明的范围。

所属领域的技术人员可以清楚地了解到，为了描述的方便和简洁，上述描述终端设备和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。

在本申请所提供的几个实施例中，应该理解到，所揭露的终端设备和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另外，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口、装置或单元的间接耦合或通信连接，也可以是电的，机械的或其它的形式连接。

上述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本发明实施例方案的目的。

另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以是两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。

上述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分，或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-OnlyMemory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。

以上所述，仅为本发明的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到各种等效的修改或替换，这些修改或替换都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应以权利要求的保护范围为准。

Claims (10)

1.一种图像处理方法，其特征在于，包括：

获取源全景图像，所述源全景图像由N张图像拼接而成，所述N张图像中至少包括第一图像和第二图像，所述第一图像包含目标对象的第一部分图像，所述第二图像包含所述目标对象的第二部分图像，第一部分图像和第二部分图像拼接成所述目标对象的第一完整图像，N为大于1的正整数；

获取待合成图像，所述待合成图像内包含所述目标对象的第二完整图像；

从所述待合成图像中获取所述目标对象的特征信息，并根据所述目标对象的特征信息在所述源全景图像中确定出合成区域，其中，所述合成区域内包括所述第一部分图像所在的第一区域和所述第二部分图像所在的第二区域；

将所述待合成图像合成到所述源全景图像的所述合成区域中以得到目标全景图像。

2.根据权利要求1所述的方法，其特征在于，所述将所述待合成图像合成到所述源全景图像的所述合成区域中以得到目标全景图像包括：

对所述合成区域内的所有像素点中任一像素点i执行以下操作：

获取所述合成区域内的像素点i的像素值；

在所述待合成图像中获取与所述合成区域内的像素点i相对应的像素点j的像素值；

根据所述像素点j的像素值对所述像素点i的像素值进行调整；

根据所述合成区域内的所有像素点的像素值调整结果得到目标全景图像。

3.根据权利要求2所述的方法，其特征在于，所述在所述待合成图像中获取与所述合成区域内的像素点i相对应的像素点j的像素值包括：

获取所述合成区域内的像素点i的位置信息；

根据所述像素点i的位置信息在所述待合成图像中确定出像素点j，并获取所述像素点j的像素值。

4.根据权利要求1所述的方法，其特征在于，所述将所述待合成图像合成到所述源全景图像的所述合成区域中以得到目标全景图像包括：

截取出所述源全景图像的所述合成区域内的图像，并将所述待合成图像添加到所述源全景图像的所述合成区域内，以得到目标全景图像。

5.根据权利要求1-4任一项所述的方法，其特征在于，所述根据所述目标对象的特征信息在所述源全景图像中确定出合成区域包括：

根据所述目标对象的特征信息从所述源全景图像中确定出所述目标对象的第一轮廓信息，并根据所述第一轮廓信息在所述源全景图像中确定出合成区域。

6.根据权利要求5所述的方法，其特征在于，所述获取待合成图像包括：

获取包含所述目标对象的第二完整图像的源待合成图像；

对所述源待合成图像进行图像特征提取以得到所述目标对象对应的第二轮廓信息，并根据所述第二轮廓信息从所述源待合成图像中截取出所述目标对象的第二完整图像，以得到待合成图像。

7.根据权利要求5所述的方法，其特征在于，所述获取待合成图像包括：

获取包含所述目标对象的第二完整图像的源待合成图像；

提取所述目标对象在所述源待合成图像中的第二轮廓信息；

根据预设待合成图像尺寸阈值和所述目标对象的第二轮廓信息从所述源待合成图像内截取出待合成图像。

8.一种终端设备，其特征在于，包括用于执行如权利要求1-7任一权利要求所述的方法的单元。

9.一种终端设备，其特征在于，包括处理器、输入设备、输出设备和存储器，所述处理器、输入设备、输出设备和存储器相互连接，其中，所述存储器用于存储计算机程序，所述计算机程序包括程序指令，所述处理器被配置用于调用所述程序指令，执行如权利要求1-7任一项所述的方法。

10.一种计算机可读存储介质，其特征在于，所述计算机存储介质存储有计算机程序，所述计算机程序包括程序指令，所述程序指令当被处理器执行时使所述处理器执行如权利要求1-7任一项所述的方法。