CN106408536A - 图像合成方法及装置 - Google Patents

Abstract

本公开是关于一种图像合成方法及装置，本公开的方法包括：获取第一图像和第二图像，对第一图像中预设的对象进行识别，并提取出上述对象，将上述对象和第二图像进行合成并进行虚拟布光处理，获得合成图像。采用这种方式，可以实现快速地将第一图像中上述对象与第二图像进行合成并进行虚拟布光处理；上述对象与第二图像的场景很自然地融合在一起，提高了合成图片的真实度，使得照片合成智能化，无需专业人员对图像进行处理，省时省力，提升了用户的使用体验。

Description

图像合成方法及装置

技术领域

本公开涉及图像处理领域，尤其涉及图像合成方法及装置。

背景技术

随着科技的发展，越来越多的照片处理方式进入了人们的生活。在这个快餐式的时代，分享效率成为了人们在意的事情。对于普通用户而言，不像单反专业用户需要后期修片，他们在意的是如何用最快的方式得到自己想要的照片。我们都知道在图像中最重要的就是光和构图，如何能帮助用户快速地实现虚拟场景的合成，并且保证虚拟合成照片的照片质量(真实度)，是同行从业人员亟待解决的问题。

发明内容

为克服相关技术中存在的问题，本公开提供一种图像合成方法及装置。所述技术方案如下：

根据本公开实施例的第一方面，提供一种图像合成方法，包括：

获取第一图像和第二图像；对所述第一图像中预设的对象进行识别，并提取出所述对象；将所述对象和所述第二图像进行合成并进行虚拟布光处理，获得合成图像。

上述实施例以可以实现快速的将第一图像中上述对象与第二图像进行合成并进行虚拟布光处理；使得上述对象与第二图像的场景很自然地融合在一起，提高了合成图片的真实度，使得照片合成智能化，无需专业人员对图像进行处理，省时省力，提升了用户的使用体验。

在一个实施例中，所述预设的对象包括下述一项或多项：人物、动物或物品。

上述实施例可以针对多种对象进行图像合成和虚拟布光处理，适用范围广泛。上述实施例为如何针对多种对象的图像合成和虚拟布光提供了可实施的、灵活的解决方案。

在一个实施例中，所述虚拟布光处理，包括：所述预设的对象为动物或物品时，在所述对象的正上方、左45°上方或右45°上方，按照预设的虚拟布光参数，在加载了所述对象的第二图像中渲染虚拟光线；

或

接收输入的虚拟布光的参数；在所述对象的正上方、左45°上方或右45°上方，根据输入的所述虚拟布光参数，在加载了所述对象的第二图像中渲染虚拟光线。

上述实施例为如何实现虚拟布光处理提供了可实施的、灵活的解决方案。

在一个实施例中，所述预设的对象为人物，将所述对象和第二图像进行合成并进行虚拟布光处理；包括：

将所述人物加载于所述第二图像中；

识别所述人物脸部朝向的角度；

根据所述人物脸部朝向的角度，对加载了所述对象的第二图像进行相应的虚拟布光处理。

上述实施例为如何实现虚拟布光处理提供了可实施的、灵活的解决方案。

在一个实施例中，所述识别所述人物脸部朝向的角度，包括：

通过所述人物的人脸图像中五官透视比例识别所述人物脸部朝向的角度；或通过所述人物的头部图像中头发和面部的透视关系识别所述人物脸部朝向的角度。

上述实施例为如何实现识别所述人物脸部朝向提供了可实施的、灵活的解决方案。

在一个实施例中，通过所述人物的人脸图像中五官透视比例识别所述人物脸部朝向的角度，包括：

识别出所述人物的五官，根据所述五官确定所述人物的人脸图像；

将人物的人脸图像中五官透视比例，与预设的各人脸图像中五官透视比例进行比较，当相似度超过预设的阈值，确定所述人物的脸部朝向的角度为所述预设的人脸图像的脸部朝向的角度。

上述实施例为如何实现识别所述人物脸部朝向提供了可实施的、灵活的解决方案。

在一个实施例中，通过所述人物的头部图像中头发和面部的透视关系识别所述人物脸部朝向的角度，包括：

提取所述人物的头部图像，识别出其中头发的图像；

根据所述头发的图像与人物脸部的位置关系，确定所述人物脸部的朝向，所述朝向包括：正向、左侧向和右侧向；

计算所述头发的图像占所述头部图像的面积比例；

将所述面积比例与预设的各脸部朝向的角度对应的面积比例阈值相比较，确定所述加载于第二图像中的所述人物的脸部朝向的角度。

上述实施例为如何实现识别所述人物脸部朝向提供了又一种可实施的、灵活的解决方案。

在一个实施例中，所述虚拟布光处理，包括：在所述人物脸部朝向的角度的方向上，按照预设的虚拟布光参数，在加载了所述对象的第二图像中渲染虚拟光线；

或

接收输入的虚拟布光的参数；在所述人物脸部朝向的角度的方向上，根据输入的所述虚拟布光参数，在加载了所述对象的第二图像中渲染虚拟光线。

在一个实施例中，所述参数包括以下一项或多项：虚拟光源的种类、数量、位置、照射角度、照射光线色彩和照射光线亮度。

在一个实施例中，所述第一图像和/或所述第二图像，通过下述方式获得：

在预设的图片数据库中选择；

或者

通过终端摄像头拍照获得。

上述实施例提供了两种获取第一图像和第二图像的方式，可以方便灵活地用户使用已有的图片或者实时拍摄的照片。

根据本公开实施例的第二方面，提供一种图像合成装置，包括：

获取模块，用于获取第一图像和第二图像；

提取模块，用于对第一图像中预设的对象进行识别，并提取出所述对象；

合成模块，用于将所述对象和第二图像进行合成并进行虚拟布光处理，获得合成图像。

在一个实施例中，所述预设的对象包括下述一项或多项：人物、动物或物品。

在一个实施例中，所述合成模块，还用于当所述预设的对象为动物或物品时，在所述对象的正上方、左45°上方或右45°上方，按照预设的虚拟布光参数，在加载了所述对象的第二图像中渲染虚拟光线；或接收输入的虚拟布光的参数；在所述对象的正上方、左45°上方或右45°上方，根据输入的所述虚拟布光参数，在加载了所述对象的第二图像中渲染虚拟光线。

在一个实施例中，所述预设的对象为人物，所述合成模块包括：

加载子模块，用于将所述人物加载于所述第二图像中；

识别子模块，用于识别所述人物脸部朝向的角度；

处理子模块，用于根据识别子模块识别出的所述人物脸部朝向的角度，对加载了所述对象的第二图像进行相应的虚拟布光处理。

在一个实施例中，所述识别子模块，用于通过所述人物的人脸图像中五官透视比例识别所述人物脸部朝向的角度；或通过所述人物的头部图像中头发和面部的透视关系识别所述人物脸部朝向的角度。

在一个实施例中，所述识别子模块，还用于识别出所述人物的五官，根据所述五官确定所述人物的人脸图像；将人物的人脸图像中五官透视比例，与预设的各人脸图像中五官透视比例进行比较，当相似度超过预设的阈值，确定所述人物的脸部朝向的角度为所述预设的人脸图像的脸部朝向的角度。

在一个实施例中，所述识别子模块，还用于提取所述人物的头部图像，识别出其中头发的图像；根据所述头发的图像与人物脸部的位置关系，确定所述人物脸部的朝向，所述朝向包括：正向、左侧向和右侧向；计算所述头发的图像占所述头部图像的面积比例；将所述面积比例与预设的各脸部朝向的角度对应的面积比例阈值相比较，确定所述加载于第二图像中的所述人物的脸部朝向的角度。

在一个实施例中，所述处理子模块，还用于在所述人物脸部朝向的角度的方向上，按照预设的虚拟布光参数，在加载了所述对象的第二图像中渲染虚拟光线；或接收输入的虚拟布光的参数；在所述人物脸部朝向的角度的方向上，根据输入的所述虚拟布光参数，在加载了所述对象的第二图像中渲染虚拟光线。

在一个实施例中，所述参数包括以下一项或多项：虚拟光源的种类、数量、位置、照射角度、照射光线色彩和照射光线亮度。

在一个实施例中，所述获取模块，用于通过下述方式获得第一图像和/或所述第二图像：在预设的图片数据库中选择；或者通过终端摄像头拍照获得。

根据本公开实施例的第三方面，提供一种图像合成装置，包括：

处理器；

用于存储处理器可执行命令的存储器；

其中，所述处理器被配置为：

获取第一图像和第二图像；

对所述第一图像中预设的对象进行识别，并提取出所述对象；

将所述对象和所述第二图像进行合成并进行虚拟布光处理，获得合成图像。本公开的实施例提供的技术方案可以包括以下有益效果：

本公开实施例提供的上述技术方案中，首先获取第一图像和第二图像，对第一图像中预设的对象进行识别，并提取出上述对象，将上述对象和第二图像进行合成并进行虚拟布光处理，获得合成图像。采用这种方式，可以实现快速地将第一图像中上述对象与第二图像进行合成并进行虚拟布光处理；使得上述对象与第二图像的场景很自然地融合在一起，提高了合成图片的真实度，使得照片合成智能化，无需专业人员对图像进行处理，省时省力，提升了用户的使用体验。

应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本公开。

附图说明

此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本公开的实施例，并与说明书一起用于解释本公开的原理。

图1是根据一示例性实施例示出的图像合成方法的流程图。

图2是根据一示例性实施例示出的图像合成方法中步骤S103的流程图。

图3是根据一示例性实施例示出的通过人物脸部五官透视比例大小识别脸部朝向的角度的流程图。

图4A是根据一示例性实施例示出的人脸正向平视时五官图像的示意图。

图4B是根据一示例性实施例示出的人脸朝向左侧向45°平视时五官图像示意图。

图4C是根据一示例性实施例示出的人脸朝向左侧向90°平视时五官图像示意图。

图5是根据一示例性实施例示出的通过头发和面部的透视关系识别脸部朝向的流程图。

图6是根据一示例性实施例示出的人物头部图像三等分的示意图。

图7A是根据一示例性实施例示出虚拟布光采用大平光的示意图。

图7B是根据一示例性实施例示出虚拟布光采用倒三角光的示意图。

图7C是根据一示例性实施例示出虚拟布光采用阴阳光的示意图。

图8是根据一示例性实施例示出图像合成装置的框图。

图9是根据一示例性实施例示出合成模块83的框图。

图10为根据一示例性实施例示出的一种包含本公开实施例提供的图像合成装置的框图。

具体实施方式

这里将详细地对示例性实施例进行说明，其示例表示在附图中。下面的描述涉及附图时，除非另有表示，不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本公开相一致的所有实施方式。相反，它们仅是与如所附权利要求书中所详述的、本公开的一些方面相一致的装置和方法的例子。

图1是根据一示例性实施例示出的一种图像合成方法的流程图，参照图1所示，上述方法用于终端中，包括以下步骤S101-S103：

在步骤S101中，获取第一图像和第二图像；

在步骤S102中，对所述第一图像中预设的对象进行识别，并提取出所述对象；

在步骤S103中，将所述对象和所述第二图像进行合成并进行虚拟布光处理，获得合成图像。

本公开实施例的上述方法，获取第一图像和第二图像，对第一图像中预设的对象进行识别，并提取出上述对象，将上述对象和第二图像进行合成并进行虚拟布光处理，获得合成图像。采用这种方式，可以实现快速地将第一图像中的上述对象与第二图像进行合成，并通过虚拟布光处理，使其很自然地融合在一起，提高了合成图片的真实度，使得照片合成智能化，无需专业人员对图像进行处理，省时省力，提升了用户的使用体验。

在本公开实施例中，步骤S102中，例如可以采用图像识别技术，识别出对象，比如采用轮廓提取、采用模式匹配或通过与在预设的数据库中存储的对象图像特征进行比对，上述方式都是基于图像识别相关技术中的统计模式识别、结构模式识别、模糊模式识别，从而可以识别各种不同模式的对象。本对公开实施例对上述图像识别技术不做限定，其他可以应用的图像识别算法或技术均可。

当识别出上述对象后，使用图像抠出技术，例如可以采用类似Photoshop中相关的抠图技术，将第一图像中预设的对象提取出来。本公开实施例对此不做限定，其他可以应用的图像抠出算法或技术均可。

在图像中最重要的就是光和构图，步骤S103将上述对象和第二图像进行合成并进行虚拟布光处理，可以分析光源并且改变光源，以便使上述对象很自然的融入在第二图像中，无需专业人员进行抠图修图等操作，且提高了合成图片的真实性。

另外，在本公开实施例步骤S101-S103中，图片的格式例如可以是JPEG(JointPhotographic Experts Group)格式、JPG(Joint Photographic Experts Group)格式、GIF(Graphics Interchange Format)格式、TIFF(Tag Image File Format，TIFF)格式或PNG(Portable Network Graphic Format)格式等等，其他的图片格式也可，本公开实施例对此不做限定。

在上述实施例中，对于第一图像和第二图像的分辨率在不同的情况下，将合成的图片的分辨率可以设置为第一图像和第二图像的分辨率中间值，还可以与第一图像和第二图像两者中较低的分辨率相同，也可以根据用户设置的分辨率进行处理，还可以采用默认的分辨率进行合成，本公开实施例对此不做限定。

在一个实施例中，上述预设的对象包括下述一项或多项：人物、动物或物品。其中物品例如可以是桌子、椅子、茶杯等等。通过图像识别技术，自动的将上述对象识别出来；当自动识别出的对象达到两个或两个以上，也可以接收用户输入的选择命令，删除识别出的多个对象中的一个或多个对象，例如当识别出对象包括有人物、桌子，可以接收人为通过点击或触摸操作的删除指令，删除桌子，从而实现只提取人物图像。上述实施例可以针对多种对象进行图像合成和虚拟布光处理，适用范围广泛。

在一个实施例中，当上述预设的对象为动物或物品时，虚拟布光采用的原理同在现实场景中拍摄时真正的布光方式一致，上述虚拟布光处理可以实施为两种方式：

第一种：在所述对象的正上方、左45°上方或右45°上方，可以按照预设的虚拟布光参数，在加载了上述对象的第二图像中渲染虚拟光线。

第二种：也可以通过接收输入的虚拟布光的参数；在所述对象的正上方、左45°上方或右45°上方，根据输入的上述虚拟布光参数，在加载了所述对象的第二图像中渲染虚拟光线。

对上述45°，本公开实施例不做限定，其他角度方向上打光，能更好地提高合成照片的真实度皆可。

在一个实施例中，当上述预设的对象为人物时，步骤S103，参照图2所示，可实施为：

S1031、将所述人物加载于所述第二图像中；

S1032、识别所述人物脸部朝向的角度；

S1033、根据步骤S1032识别出的所述人物脸部朝向的角度，对加载了所述对象的第二图像进行相应的虚拟布光处理。

在本实施例中，将上述人物所在的图层加载于上述第二图像的图层之上，识别上述人物脸部朝向的角度，根据脸部朝向对加载了上述对象的第二图像进行相应的虚拟布光处理，例如采用：大平光、倒三角光、阴阳光等等不同的布光类型，以下将举例说明，本实施例为如何实现虚拟布光处理提供了可实施的、灵活的解决方案。

在一个实施例中，上述识别人物脸部朝向的角度，可以通过以下两种方式实现：

1、通过上述人物的人脸图像中五官透视比例识别人物脸部朝向的角度；

2、通过上述人物的头部图像中头发和面部的透视关系识别人物脸部朝向的角度。

当然也可以通过其他方式来识别人物脸部朝向的角度，本公开实施例对此不做限定，上述实施例为如何实现识别所述人物脸部朝向提供了可实施的、灵活的解决方案。

在一个实施例中，参照图3所示，通过上述人物的人脸图像中五官透视比例识别人物脸部朝向的角度，可以实施为：

S3011、识别出所述人物的五官，根据所述五官确定所述人物的人脸图像；

S3012、将人物的人脸图像中五官透视比例，与预设的各人脸图像中五官透视比例进行比较，当相似度超过预设的阈值，确定所述人物的脸部朝向的角度为所述预设的人脸图像的脸部朝向的角度。

在本实施例中，通过脸部识别技术，识别图片中人物的耳朵、眉毛、眼睛、鼻子、嘴巴等五官特征信息，进而确定出人物的人脸图像。

将人物的人脸图像中五官透视比例，与预先存储的各种不同人脸图像中五官透视比例进行比较，当两者相似度超过预设的阈值时，可以确定相匹配的那张图像的脸部朝向角度为人物的脸部朝向角度。

参照图4A、4B、4C所示的例子，例如预先存储的各种不同脸部朝向的图像分为正向、左向45°侧面、左侧向等，上述例子是基于人物头像平视的例子，当然，根据人物头像还可以处于仰视、俯视等状态，仰视、俯视的脸部朝向的角度判断方法同平视判断方法类似。

根据识别出的五官图像的透视比例，与预设的脸部朝向所对应的透视比例进行比较，当相似度超过预设的阈值，比如超过80％时，从而可以确定预设人脸图像的脸部朝向角度就是加载于第二图像中人物的脸部朝向角度。其中图4A、4B、4C为实例性的示意，除此之外，更多预设的各脸部朝向的角度所对应的五官图像的透视比例，可以预先下载存储在执行图像合成操作的设备本地，也可以存储于网络侧，本公开实施例对此不做限定。本公开实施例为如何实现识别所述人物脸部朝向提供了可实施的、灵活的解决方案。

在一个实施例中，参照图5所示，通过上述人物的头部图像中头发和面部的透视关系识别人物脸部朝向的角度，可以实施为：

S5011、提取所述人物的头部图像，识别出其中头发的图像；

S5012、根据所述头发的图像与人物脸部的位置关系，确定所述人物脸部的朝向，所述朝向包括：正向、左侧向和右侧向；

S5013、计算所述头发的图像占所述头部图像的面积比例；

S5014、将所述面积比例与预设的各脸部朝向的角度对应的面积比例阈值相比较，确定所述加载于第二图像中的所述人物的脸部朝向的角度。

在本实施例中，步骤S5011针对有头发的人物，通过脸部识别技术，进而提取人物头部图像，通过头发颜色与脸部肤色的色差来识别出头发；步骤S5012根据S5011识别出的头发的图像，可以识别出头发与人物脸部的位置关系，进而确定人物脸部的朝向，上述朝向分为三种情况：正向、左侧向和右侧向。

参照图6所示，将提取到的头部图像三等分，其中发际线以上为头发的上侧区域、眉弓到鼻底与左眼外侧的重叠区域为头发的左侧区域、眉弓到鼻底与右眼外侧的重叠区域为头发的右侧区域。

第一种：当人物脸部的朝向为正向时：头发分布在头部图像的上侧区域、右侧区域和左侧区域，且左右区域面积分布相同或在预设的相差范围内，则可以识别出人物脸部正向。

第二种：当人物脸部的朝向为左侧向时：头发分布在头部图像的上侧区域、右侧区域且左侧区域无分布，或右侧区域面积大于左侧区域面积(超过一定阈值)，则可以识别出人物脸部朝向为左侧向。

第三种：当人物脸部的朝向为右侧向时：头发分布在头部图像的上侧区域、左侧区域且右侧区域无分布，或左侧区域面积大于右侧区域面积(超过一定阈值)，则可以识别出人物脸部朝向为右侧向。

当在头发的上侧区域、右侧区域和左侧区域均有分布，并根据上述第二种或第三种情况识别出人物脸部朝向为左侧向或右侧向时，通过步骤S5013计算上述三处区域内头发的图像占所提取人物头部图像的面积比例，再通过步骤S5014将S5013计算出的上述面积比例与预设的各脸部朝向的角度对应的面积比例阈值相比较，从而确定加载于第二图像中的人物的脸部朝向的角度。本公开实施例为如何实现识别所述人物脸部朝向提供了又一可实施的、灵活的解决方案。

例如：计算出头发的上侧区域和左侧区域的头发的图像占所提取人物头部图像的面积比例，比如是40％，与预设的脸部朝向的角度对应的面积比例阈值相比较，比较结果例如可以参照表一所示，从而确定上述人物的脸部朝向右侧45°。本公开实施例对面积比例阈值不做限定，表一只是示意性举例。

表一

面积比例阈值X	脸部朝向
		60％≥X≥50％	90°(侧面)
49％≥X≥40％	45°
		29％≥X≥20％	正向

在一个实施例中，为了应付一些特殊情况，例如有的人物是头顶带有帽子，遮挡住部分头发；或带有墨镜；又比如脖子上有装饰性的围脖或带有口罩遮挡住部分五官等等其他一些特殊情况下遮挡部分脸庞，还可以两种方式一起配合使用，在采用通过人物的人脸图像中五官透视比例识别人物脸部朝向的角度同时，也采用通过人物的头部图像中头发和面部的透视关系识别人物脸部朝向的角度，以此提高识别人物脸部朝向的角度的准确性。本公开实施例对此不做限定。上述两种方式的综合运用，提高了识别人物脸部朝向角度的准确性。

在一个实施例中，虚拟布光采用的原理同在现实场景中拍摄时真正的布光方式一致，上述虚拟布光处理可以实施为两种方式：

第一种：在上述人物脸部朝向的方向上，比如脸部正面、脸部向右45°、脸部向左45°，可以按照预设的虚拟布光参数，设置一个默认的场景，一般光源点默认在照片之外，这样可以避免曝光对画面美感的破坏。比如脸部正面时，在图片外脸部正上方打光；在脸部向右45°时，在图片外脸部朝向右上方45°打光；在脸部向左45°时，在图片外脸部朝向左上方45°打光；根据打光的方向不同，在加载了上述对象的第二图像中渲染虚拟光线。另外还可以对上述默认的场景的打光方式进行编辑，如选择光的样式(自然光、冷光、暖光等)，强弱，位置等，以便使上述对象能够自然地融合在第二图像中，生成最终的图像，提高了合成图片的真实性。

第二种：也可以通过接收输入的虚拟布光的参数；在上述人物脸部朝向的方向上，根据输入的上述虚拟布光参数，在加载了所述对象的第二图像中渲染虚拟光线。可以设置有多种虚拟布光参数的方案，还可以通过设置相应的操作选项，以供用户选择。例如：常用的布光方式有大平光、倒三角光、阴阳光等等。以便使上述对象能够自然地融合在第二图像中，生成最终的图像，提高了合成图片的真实性。本实施例中，解决了如何快速的合成图像，提供了可实施的、灵活的解决方案。

在一个实施例中，上述虚拟布光参数可以包括：虚拟光源的种类、数量、位置、照射角度、照射光线色彩和照射光线亮度中的任意一种或多种组合。多参数的运用，更好的提升了合成图像的真实度。

例如一：虚拟光源的种类采用大平光，参照图7A所示，光源数量一般需要5-6台灯、主灯、辅灯、地灯、顶灯各一台，背景灯一到两台。然后以人物的眼神为测试标准，使所有测试的灯具达到同一数值，这种布光方式使影像光线比较柔和，各处的曝光比较均匀，影像比较唯美。

例如二：虚拟光源的种类采用倒三角光，参照图7B所示，主灯位于人物正上方45°向下打，在鼻台和下颌部位会出现一个倒三角。其余辅助光源、光比控制要比主灯稍弱。

例如三：虚拟光源的种类采用阴阳光，参照图7C所示，主灯位于人物侧面斜上方45°，以鼻粱为界，一面亮，一面暗，此种布光方式更利于刻画人物心情，若主灯位于正上方再调正一点，会在面颊的另一边出现鼻梁的投影，使鼻梁看上去坚挺。

上述修饰光的使用，修饰光光位一般在主灯的对角线位置，主要是对整体图像进行一些光比控制、色彩的变化。这种既可以丰富画面，也可以突出层次。

在一个实施例中，上述第一图像和/或所述第二图像，通过下述方式获得：

在预设的图片数据库中选择；

或者

通过终端摄像头拍照获得。

上述实施例提供了两种获取第一图像和第二图像的方式，可以方便灵活地用户使用已有的图片或者实时拍摄的照片。

在本实施例中，可以使用数据库中已有的图像，也可以是用户即兴拍摄的照片，提高了本公开提供的图像合成方法的灵活性，满足了用户的使用需求。

在本实施例中，上述终端例如可以是：笔记本电脑、平板电脑、手机、照相机、摄像机等等。

本公开的实施例提供的技术方案，获取第一图像和第二图像，对第一图像中预设的对象进行识别，并提取出上述对象，将上述对象和第二图像进行合成并进行虚拟布光处理，获得合成图像。采用这种方式，可以实现快速的将第一图像中上述对象与第二图像进行合成并进行虚拟布光处理；使得上述对象与第二图像的场景很自然地融合在一起，提高了合成图片的真实度，使得照片合成智能化，无需专业人员对图像进行处理，省时省力，提升了用户的使用体验。

而该方法在实施时，只需要利用一个终端即可完成图片合成的效果图片，不受场地、专业人员等的限制。

根据本公开实施例的第二方面，提供一种图像合成装置，参照图8所示，包括：

获取模块81，用于获取第一图像和第二图像；

提取模块82，用于对第一图像中预设的对象进行识别，并提取出上述对象；

合成模块83，用于将提取模块82提取的对象和第二图像进行合成并进行虚拟布光处理，获得合成图像；

在一个实施例中，上述预设的对象包括下述一项或多项：人物、动物或物品。

在一个实施例中，上述合成模块83，还用于当上述预设的对象为动物或物品时，在上述对象的正上方、左45°上方或右45°上方，按照预设的虚拟布光参数，在加载了上述对象的第二图像中渲染虚拟光线；或接收输入的虚拟布光的参数；在上述对象的正上方、左45°上方或右45°上方，根据输入的上述虚拟布光参数，在加载了上述对象的第二图像中渲染虚拟光线。

在一个实施例中，上述预设的对象为人物，参照图9所示，上述合成模块83包括：

加载子模块831，用于将上述人物加载于上述第二图像中；

识别子模块832，用于识别上述人物脸部朝向的角度；

处理子模块833，用于根据识别子模块832识别出的所述人物脸部朝向的角度，对加载了上述对象的第二图像进行相应的虚拟布光处理。

在一个实施例中，上述识别子模块832，用于通过所述人物的人脸图像中五官透视比例识别所述人物脸部朝向的角度；或通过所述人物的头部图像中头发和面部的透视关系识别所述人物脸部朝向的角度。

在一个实施例中，上述识别子模块832，还用于识别出所述人物的五官，根据所述五官确定所述人物的人脸图像；将人物的人脸图像中五官透视比例，与预设的各人脸图像中五官透视比例进行比较，当相似度超过预设的阈值，确定所述人物的脸部朝向的角度为所述预设的人脸图像的脸部朝向的角度。

在一个实施例中，上述识别子模块832，还用于提取所述人物的头部图像，识别出其中头发的图像；根据所述头发的图像与人物脸部的位置关系，确定所述人物脸部的朝向，所述朝向包括：正向、左侧向和右侧向；计算所述头发的图像占所述头部图像的面积比例；将所述面积比例与预设的各脸部朝向的角度对应的面积比例阈值相比较，确定所述加载于第二图像中的所述人物的脸部朝向的角度。

在一个实施例中，上述处理子模块833，还用于在所述人物脸部朝向的角度的方向上，按照预设的虚拟布光参数，在加载了所述对象的第二图像中渲染虚拟光线；或接收输入的虚拟布光的参数；在所述人物脸部朝向的角度的方向上，根据输入的所述虚拟布光参数，在加载了所述对象的第二图像中渲染虚拟光线。

在一个实施例中，上述参数包括以下一项或多项：虚拟光源的种类、数量、位置、照射角度、照射光线色彩和照射光线亮度。

在一个实施例中，上述获取模块81，用于通过下述方式获得第一图像和/或所述第二图像：在预设的图片数据库中选择；或者通过终端摄像头拍照获得。

根据本公开实施例的第三方面，提供一种图像合成装置，包括：

处理器；

用于存储处理器可执行命令的存储器；

其中，处理器被配置为：

获取第一图像和第二图像；

对所述第一图像中预设的对象进行识别，并提取出所述对象；

将所述对象和所述第二图像进行合成并进行虚拟布光处理，获得合成图像。

关于上述实施例中的图像合成装置，其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述，此处将不做详细阐述说明。

图10是根据一示例性实施例示出的一种图像合成装置的框图，该装置适用于终端设备。例如，装置1300可以是移动电话，计算机，数字广播终端，消息收发设备，游戏控制台，平板设备，医疗设备，健身设备，个人数字助理等。

如图10所示，装置1300可以包括以下一个或多个组件：处理组件1302，存储器1304，电源组件1306，多媒体组件1308，音频组件1310，输入/输出(I/O)的接口1312，传感器组件1314，以及通信组件1316。

处理组件1302通常控制装置1300的整体操作，诸如与显示，电话呼叫，数据通信，相机操作和记录操作相关联的操作。处理组件1302可以包括一个或多个处理器1320来执行指令，以完成上述的方法的全部或部分步骤。此外，处理组件1302可以包括一个或多个模块，便于处理组件1302和其他组件之间的交互。例如，处理组件1302可以包括多媒体模块，以方便多媒体组件1308和处理组件1302之间的交互。

存储器1304被配置为存储各种类型的数据以支持在设备1300的操作。这些数据的示例包括用于在装置1300上操作的任何应用程序或方法的指令，联系人数据，电话簿数据，消息，图片，视频等。存储器1304可以由任何类型的易失性或非易失性存储设备或者它们的组合实现，如静态随机存取存储器(SRAM)，电可擦除可编程只读存储器(EEPROM)，可擦除可编程只读存储器(EPROM)，可编程只读存储器(PROM)，只读存储器(ROM)，磁存储器，快闪存储器，磁盘或光盘。

电源组件1306为装置1300的各种组件提供电力。电源组件1306可以包括电源管理系统，一个或多个电源，及其他与为装置1300生成、管理和分配电力相关联的组件。

多媒体组件1308包括在所述装置1300和用户之间的提供一个输出接口的屏幕。在一些实施例中，屏幕可以包括液晶显示器(LCD)和触摸面板(TP)。如果屏幕包括触摸面板，屏幕可以被实现为触摸屏，以接收来自用户的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、滑动和触摸面板上的手势。所述触摸传感器可以不仅感测触摸或滑动动作的边界，而且还检测与所述触摸或滑动操作相关的持续时间和压力。在一些实施例中，多媒体组件1308包括一个前置摄像头和/或后置摄像头。当设备1300处于操作模式，如拍摄模式或视频模式时，前置摄像头和/或后置摄像头可以接收外部的多媒体数据。每个前置摄像头和后置摄像头可以是一个固定的光学透镜系统或具有焦距和光学变焦能力。

音频组件1310被配置为输出和/或输入音频信号。例如，音频组件1310包括一个麦克风(MIC)，当装置1300处于操作模式，如呼叫模式、记录模式和语音识别模式时，麦克风被配置为接收外部音频信号。所接收的音频信号可以被进一步存储在存储器1304或经由通信组件1316发送。在一些实施例中，音频组件1310还包括一个扬声器，用于输出音频信号。

I/O接口1312为处理组件1302和外围接口模块之间提供接口，上述外围接口模块可以是键盘，点击轮，按钮等。这些按钮可包括但不限于：主页按钮、音量按钮、启动按钮和锁定按钮。

传感器组件1314包括一个或多个传感器，用于为装置1300提供各个方面的状态评估。例如，传感器组件1314可以检测到设备1300的打开/关闭状态，组件的相对定位，例如所述组件为装置1300的显示器和小键盘，传感器组件1314还可以检测装置1300或装置1300一个组件的位置改变，用户与装置1300接触的存在或不存在，装置1300方位或加速/减速和装置1300的温度变化。传感器组件1314可以包括接近传感器，被配置用来在没有任何的物理接触时检测附近物体的存在。传感器组件1314还可以包括光传感器，如CMOS或CCD图像传感器，用于在成像应用中使用。在一些实施例中，该传感器组件1314还可以包括加速度传感器，陀螺仪传感器，磁传感器，压力传感器或温度传感器。

通信组件1316被配置为便于装置1300和其他设备之间有线或无线方式的通信。装置1300可以接入基于通信标准的无线网络，如WiFi，2G或3G，或它们的组合。在一个示例性实施例中，通信组件1316经由广播信道接收来自外部广播管理系统的广播信号或广播相关信息。在一个示例性实施例中，所述通信组件1316还包括近场通信(NFC)模块，以促进短程通信。例如，在NFC模块可基于射频识别(RFID)技术，红外数据协会(IrDA)技术，超宽带(UWB)技术，蓝牙(BT)技术和其他技术来实现。

在示例性实施例，装置1300可以被一个或多个应用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、控制器、微控制器、微处理器或其他电子元件实现，用于执行上述方法。

在示例性实施例中，还提供了一种包括指令的非临时性计算机可读存储介质，例如包括指令的存储器1304，上述指令可由装置1300的处理器1320执行以完成上述方法。例如，所述非临时性计算机可读存储介质可以是ROM、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。

一种非临时性计算机可读存储介质，当所述存储介质中的指令由移动终端的处理器执行时，使得移动终端能够执行上述图像合成方法，包括：

获取第一图像和第二图像；

对所述第一图像中预设的对象进行识别，并提取出所述对象；

将所述对象和所述第二图像进行合成并进行虚拟布光处理，获得合成图像。

本领域技术人员在考虑说明书及实践这里公开的公开后，将容易想到本公开的其它实施方案。本申请旨在涵盖本公开的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的，本公开的真正范围和精神由下面的权利要求指出。

应当理解的是，本公开并不局限于上面已经描述并在附图中示出的精确结构，并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求来限制。

Claims (21)

1.一种图像合成方法，其特征在于，包括：

获取第一图像和第二图像；

对所述第一图像中预设的对象进行识别，并提取出所述对象；

将所述对象和所述第二图像进行合成并进行虚拟布光处理，获得合成图像。

2.如权利要求1所述的方法，其特征在于，所述预设的对象包括下述一项或多项：人物、动物或物品。

3.如权利要求2所述的方法，其特征在于，所述虚拟布光处理，包括：

所述预设的对象为动物或物品时，在所述对象的正上方、左45°上方或右45°上方，按照预设的虚拟布光参数，在加载了所述对象的第二图像中渲染虚拟光线；

或

接收输入的虚拟布光的参数；

在所述对象的正上方、左45°上方或右45°上方，根据输入的所述虚拟布光参数，在加载了所述对象的第二图像中渲染虚拟光线。

4.如权利要求2所述的方法，其特征在于，所述预设的对象为人物，将所述对象和所述第二图像进行合成并进行虚拟布光处理；包括：

将所述人物加载于所述第二图像中；

识别所述人物脸部朝向的角度；

根据所述人物脸部朝向的角度，对加载了所述对象的第二图像进行虚拟布光处理。

5.如权利要求4所述的方法，其特征在于，所述识别所述人物脸部朝向的角度，包括：

通过所述人物的人脸图像中五官透视比例识别所述人物脸部朝向的角度；

或

通过所述人物的头部图像中头发和面部的透视关系识别所述人物脸部朝向的角度。

6.如权利要求5所述的方法，其特征在于，通过所述人物的人脸图像中五官透视比例识别所述人物脸部朝向的角度，包括：

识别出所述人物的五官，根据所述五官确定所述人物的人脸图像；

将人物的人脸图像中五官透视比例，与预设的各人脸图像中五官透视比例进行比较，当相似度超过预设的阈值，确定所述人物的脸部朝向的角度为所述预设的人脸图像的脸部朝向的角度。

7.如权利要求5所述的方法，其特征在于，通过所述人物的头部图像中头发和面部的透视关系识别所述人物脸部朝向的角度，包括：

提取所述人物的头部图像，识别出其中头发的图像；

根据所述头发的图像与人物脸部的位置关系，确定所述人物脸部的朝向，所述朝向包括：正向、左侧向和右侧向；

计算所述头发的图像占所述头部图像的面积比例；

将所述面积比例与预设的各脸部朝向的角度对应的面积比例阈值相比较，确定所述加载于第二图像中的所述人物的脸部朝向的角度。

8.如权利要求4所述的方法，其特征在于，所述虚拟布光处理，包括：

在所述人物脸部朝向的角度的方向上，按照预设的虚拟布光参数，在加载了所述对象的第二图像中渲染虚拟光线；

或

接收输入的虚拟布光的参数；

在所述人物脸部朝向的角度的方向上，根据输入的所述虚拟布光参数，在加载了所述对象的第二图像中渲染虚拟光线。

9.如权利要求3或8所述的方法，其特征在于，所述参数包括以下一项或多项：虚拟光源的种类、数量、位置、照射角度、照射光线色彩和照射光线亮度。

10.如权利要求1所述的方法，其特征在于，所述第一图像和/或所述第二图像，通过下述方式获得：

在预设的图片数据库中选择；

或者

通过终端摄像头拍照获得。

11.一种图像合成装置，其特征在于，包括：

获取模块，用于获取第一图像和第二图像；

提取模块，用于对所述第一图像中预设的对象进行识别，并提取出所述对象；

合成模块，用于将所述对象和所述第二图像进行合成并进行虚拟布光处理，获得合成图像。

12.如权利要求11所述的装置，其特征在于，所述预设的对象包括下述一项或多项：人物、动物或物品。

13.如权利要求12所述的装置，其特征在于，所述合成模块，还用于当所述预设的对象为动物或物品时，在所述对象的正上方、左45°上方或右45°上方，按照预设的虚拟布光参数，在加载了所述对象的第二图像中渲染虚拟光线；

或

接收输入的虚拟布光的参数；在所述对象的正上方、左45°上方或右45°上方，根据输入的所述虚拟布光参数，在加载了所述对象的第二图像中渲染虚拟光线。

14.如权利要求12所述的装置，其特征在于，所述预设的对象为人物，所述合成模块包括：

加载子模块，用于将所述人物加载于所述第二图像中；

识别子模块，用于识别所述人物脸部朝向的角度；

处理子模块，用于根据识别子模块识别出的所述人物脸部朝向的角度，对加载了所述对象的第二图像进行相应的虚拟布光处理。

15.如权利要求14所述的装置，其特征在于，所述识别子模块，用于通过所述人物的人脸图像中五官透视比例识别所述人物脸部朝向的角度；或通过所述人物的头部图像中头发和面部的透视关系识别所述人物脸部朝向的角度。

16.如权利要求15所述的装置，其特征在于，所述识别子模块，还用于识别出所述人物的五官，根据所述五官确定所述人物的人脸图像；将人物的人脸图像中五官透视比例，与预设的各人脸图像中五官透视比例进行比较，当相似度超过预设的阈值，确定所述人物的脸部朝向的角度为所述预设的人脸图像的脸部朝向的角度。

17.如权利要求15所述的装置，其特征在于，所述识别子模块，还用于提取所述人物的头部图像，识别出其中头发的图像；根据所述头发的图像与人物脸部的位置关系，确定所述人物脸部的朝向，所述朝向包括：正向、左侧向和右侧向；计算所述头发的图像占所述头部图像的面积比例；将所述面积比例与预设的各脸部朝向的角度对应的面积比例阈值相比较，确定所述加载于第二图像中的所述人物的脸部朝向的角度。

18.如权利要求14所述的装置，其特征在于，所述处理子模块，还用于在所述人物脸部朝向的角度的方向上，按照预设的虚拟布光参数，在加载了所述对象的第二图像中渲染虚拟光线；或接收输入的虚拟布光的参数；在所述人物脸部朝向的角度的方向上，根据输入的所述虚拟布光参数，在加载了所述对象的第二图像中渲染虚拟光线。

19.如权利要求13或18所述的装置，其特征在于，所述参数包括以下一项或多项：虚拟光源的种类、数量、位置、照射角度、照射光线色彩和照射光线亮度。

20.如权利要求11所述的装置，其特征在于，所述获取模块，用于通过下述方式获得第一图像和/或所述第二图像：

在预设的图片数据库中选择；

或者

通过终端摄像头拍照获得。

21.一种图像合成装置，其特征在于，包括：

处理器；

用于存储处理器可执行命令的存储器；

其中，所述处理器被配置为：

获取第一图像和第二图像；

对所述第一图像中预设的对象进行识别，并提取出所述对象；

将所述对象和所述第二图像进行合成并进行虚拟布光处理，获得合成图像。