CN108346171B - 一种图像处理方法、装置、设备和计算机存储介质 - Google Patents

Abstract

本发明提供了一种图像处理方法、装置、设备和计算机存储介质，其中方法包括：获取用户选择的素材；获取并记录用户在模板图像上为所述素材指定的位置信息；建立所述素材对应的素材文件，该素材文件包括所述素材的图像以及所述素材在模板图像上的位置信息。素材添加功能被触发后，确定要添加的素材文件，依据所述素材在模板图像上的位置信息，将所述素材添加在目标图像上对应的位置。通过本发明，用户可以将任意喜爱的素材添加在目标图像上，而不必局限于应用提供的素材，提高了素材使用的灵活性。并且无需开发人员手工标定素材的位置信息，降低了开发者的工作量。

Description

一种图像处理方法、装置、设备和计算机存储介质

【技术领域】

本发明涉及计算机应用技术领域，特别涉及一种图像处理方法、装置、设备和计算机存储介质。

【背景技术】

随着智能终端的不断普及，人们利用智能终端进行图像处理的需求越来越高，各类美颜类APP、虚拟试戴类APP等受到爱美人士的广泛青睐。例如用户在拍摄了一副照片后，可以将诸如眼镜、猫咪胡须、烟斗等素材加在照片上，如图1中所示，或者在进行视频直播时，将这些素材加在视频图像上。

然而，目前这类APP只支持APP已提供的素材，这些素材是开发者预先制作并人工标定素材在人脸上的相对位置信息，例如，标定素材上各像素点所对应人脸上特征点的索引编号。这样素材才能够匹配到人脸上的正确位置。这种方式一方面对素材有极大的限制，用户只能使用应用提供的素材，灵活度较差；另一方面需要开发者进行大量的美工制作和人工标定，工作量巨大。

【发明内容】

有鉴于此，本发明提供了一种图像处理方法、装置、设备和计算机存储介质，以便于提高素材使用的灵活性，降低开发者的工作量。

具体技术方案如下：

本发明提供了一种图像处理方法，该方法包括：

获取用户选择的素材；

获取并记录用户在模板图像上为所述素材指定的位置信息；

建立所述素材对应的素材文件，该素材文件包括所述素材的图像以及所述素材在模板图像上的位置信息。

根据本发明一优选实施方式，所述获取用户选择的素材包括：

获取用户拍摄、下载或从本地获取的素材。

根据本发明一优选实施方式，在素材编辑功能被触发后，执行所述获取用户选择的素材的步骤。

根据本发明一优选实施方式，所述获取并记录用户在模板图像上为所述素材指定的位置信息包括：

向用户展示模板图像；

获取并记录用户在所述模板图像上放置所述素材的位置信息。

根据本发明一优选实施方式，所述记录用户在模板图像上为所述素材指定的位置信息包括：

记录所述素材与所述模板图像中对象的特征点之间的相对位置信息。

根据本发明一优选实施方式，所述记录用户在模板图像上为所述素材指定的位置信息包括：

依据所述模板图像中对象的特征点，确定预设形状的且包围所述对象的区域位置；

记录所述素材与所述区域的相对位置。

根据本发明一优选实施方式，所述模板图像包括标准人脸图像。

本发明还提供了一种图像处理方法，该方法包括：

素材添加功能被触发后，确定要添加的素材文件，该素材文件包括素材的图像以及所述素材在模板图像上的位置信息；

依据所述素材在模板图像上的位置信息，将所述素材添加在目标图像上对应的位置。

根据本发明一优选实施方式，所述素材添加功能被触发包括：

捕捉到预设的素材添加手势后，向用户展现可供选择的素材文件；

确定用户选择的素材文件，并加载所述素材文件。

根据本发明一优选实施方式，所述素材在模板图像上的位置信息包括：

所述素材与所述模板图像中对象的特征点之间的相对位置信息。

根据本发明一优选实施方式，依据所述素材在模板图像上的位置信息，将所述素材添加在目标图像上对应的位置包括：

对目标图像中的对象进行特征点定位；

将所述素材仿射变换到所述目标图像上对应的位置，以使得所述素材与所述目标图像中对象的各特征点的相对位置与所述素材与所述模板图像中对象的特征点之间的相对位置一致。

根据本发明一优选实施方式，所述素材在模板图像上的位置信息包括：

所述素材与区域的相对位置，所述区域为依据所述模板图像中对象的特征点所确定出的预设形状且包围所述对象的区域。

根据本发明一优选实施方式，依据所述素材在模板图像上的位置信息，将所述素材添加在目标图像上对应的位置包括：

对目标图像中的对象进行特征点定位；

依据所述目标图像中对象的特征点，确定预设形状的且包围所述对象的区域位置；

将所述素材仿射变换到所述目标图像上的对应位置，以使得所述素材与目标图像中的区域位置的相对位置与所述素材与模板图像中的区域位置的相对位置一致。

根据本发明一优选实施方式，所述模板图像包括标准人脸图像；

所述目标图像为人脸图像。

本发明还提供了一种图像处理装置，该装置包括：

素材获取单元，用于获取用户选择的素材；

素材编辑单元，用于获取并记录用户在模板图像上为所述素材指定的位置信息；

文件建立单元，用于建立所述素材对应的素材文件，该素材文件包括所述素材的图像以及所述素材在模板图像上的位置信息。

根据本发明一优选实施方式，所述素材获取单元，具体用于获取用户拍摄、下载或从本地获取的素材。

根据本发明一优选实施方式，所述素材获取单元在素材编辑功能被触发后，执行所述获取用户选择的素材的处理。

根据本发明一优选实施方式，所述素材编辑单元，具体用于：

向用户展示模板图像；

获取并记录用户在所述模板图像上放置所述素材的位置信息。

根据本发明一优选实施方式，所述素材编辑单元在记录用户在模板图像上为所述素材指定的位置信息时，具体执行：

记录所述素材与所述模板图像中对象的特征点之间的相对位置信息。

根据本发明一优选实施方式，所述素材编辑单元在记录用户在模板图像上为所述素材指定的位置信息时，具体执行：

依据所述模板图像中对象的特征点，确定预设形状的且包围所述对象的区域位置；

记录所述素材与所述区域的相对位置。

根据本发明一优选实施方式，所述模板图像包括标准人脸图像。

本发明还提供了一种图像处理装置，该装置包括：

文件确定单元，用于在素材添加功能被触发后，确定要添加的素材文件，该素材文件包括素材的图像以及所述素材在模板图像上的位置信息；

素材添加单元，用于依据所述素材在模板图像上的位置信息，将所述素材添加在目标图像上对应的位置。

根据本发明一优选实施方式，所述文件确定单元在确定素材添加功能被触发时，具体执行：

捕捉到预设的素材添加手势后，向用户展现可供选择的素材文件；

确定用户选择的素材文件，并加载所述素材文件。

根据本发明一优选实施方式，所述素材在模板图像上的位置信息包括：

所述素材与所述模板图像中对象的特征点之间的相对位置信息。

根据本发明一优选实施方式，所述素材添加单元，具体用于：

对目标图像中的对象进行特征点定位；

将所述素材仿射变换到所述目标图像上对应的位置，以使得所述素材与所述目标图像中对象的各特征点的相对位置与所述素材与所述模板图像中对象的特征点之间的相对位置一致。

根据本发明一优选实施方式，所述素材在模板图像上的位置信息包括：

所述素材与区域的相对位置，所述区域为依据所述模板图像中对象的特征点所确定出的预设形状且包围所述对象的区域。

根据本发明一优选实施方式，所述素材添加单元，具体用于：

对目标图像中的对象进行特征点定位；

依据所述目标图像中对象的特征点，确定预设形状的且包围所述对象的区域位置；

将所述素材仿射变换到所述目标图像上的对应位置，以使得所述素材与目标图像中的区域位置的相对位置与所述素材与模板图像中的区域位置的相对位置一致。

根据本发明一优选实施方式，所述模板图像包括标准人脸图像；

所述目标图像为人脸图像。

本发明还提供了一种设备，包括

存储器，包括一个或者多个程序；

一个或者多个处理器，耦合到所述存储器，执行所述一个或者多个程序，以实现上述方法中执行的操作。

本发明还提供了一种计算机存储介质，所述计算机存储介质被编码有计算机程序，所述程序在被一个或多个计算机执行时，使得所述一个或多个计算机执行上述方法中执行的操作。

由以上技术方案可以看出，本发明以用户在模板图像上为素材指定的位置信息为基准，将素材添加在目标图像上对应的位置，从而实现了素材的自动添加，用户可以将任意喜爱的素材添加在目标图像上，而不必局限于应用提供的素材，提高了素材使用的灵活性。并且无需开发人员手工标定素材的位置信息，降低了开发者的工作量。

【附图说明】

图1为一个在图像上添加素材的实例图；

图2为本发明实施例提供的一方法流程图；

图3为本发明实施例提供的另一方法流程图；

图4为本发明实施例提供的详细方法流程图；

图5a为本发明实施例提供的在标准人脸上编辑素材的实例图；

图5b为本发明实施例提供的在标准人脸上划分区域的实例图；

图5c为本发明实施例提供的进行仿射变换的一个实例图；

图6为本发明实施例提供的进行仿射变换的另一个实例图；

图7为本发明实施例提供的一装置结构图；

图8为本发明实施例提供的另一装置结构图；

图9为本发明实施例提供的设备结构图。

【具体实施方式】

为了使本发明的目的、技术方案和优点更加清楚，下面结合附图和具体实施例对本发明进行详细描述。

在本发明实施例中使用的术语是仅仅出于描述特定实施例的目的，而非旨在限制本发明。在本发明实施例和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式，除非上下文清楚地表示其他含义。

应当理解，本文中使用的术语“和/或”仅仅是一种描述关联对象的关联关系，表示可以存在三种关系，例如，A和/或B，可以表示：单独存在A，同时存在A和B，单独存在B这三种情况。另外，本文中字符“/”，一般表示前后关联对象是一种“或”的关系。

取决于语境，如在此所使用的词语“如果”可以被解释成为“在……时”或“当……时”或“响应于确定”或“响应于检测”。类似地，取决于语境，短语“如果确定”或“如果检测(陈述的条件或事件)”可以被解释成为“当确定时”或“响应于确定”或“当检测(陈述的条件或事件)时”或“响应于检测(陈述的条件或事件)”。

图2为本发明实施例提供的一方法流程图，在该实施例中实现素材文件的建立。如图2中所示，该方法可以包括以下步骤：

在201中，获取用户选择的素材。

在本发明实施例中对素材的获取方式并没有限制，可以是用户实时拍摄的素材，例如用户实时拍摄一只小猫，将该小猫作为素材。也可以是用户下载的素材，下载的来源可以是从网络服务器下载，也可以从其他用户设备下载，例如用户从网络服务器下载了一副眼镜的图像，将该眼镜作为素材。也可以是用户从本地获取的素材，例如用户本地存储有一张帽子的图像，可以将该帽子作为素材。甚至可以是对上述方式获取的图像进行编辑后的图像作为素材。

本发明实施例中所涉及的素材可以是用于图像装饰的图片、文字等等，其中图片可以是静态的图片，也可以是带有动画效果的flash图片等等。

在202中，获取并记录用户在模板图像上为该素材指定的位置信息。

在本发明实施例中采用了模板图像作为基础，使得用户能够依据模板图像指定素材的位置，该素材在模板图像上的位置就是该素材后续在目标图像上的位置。

本步骤中，向用户展示模板图像后，用户可以在模板图像上采用直接放置素材的方式来指定素材的位置，这种方式使得用户更加直观方便地指定素材的位置，该实现方式将在后续实施例中举例详述。当然，除了该方式之外，还可以采用其他方式来指定素材的位置，例如用户可以在模板图像上画出素材位置所在区域，等等。

记录的位置信息的实际上是素材在模板图像上的相对位置，可以是素材与模板图像中对象的特征点的相对位置，也可以是与预设形状的区域的相对位置，该预设形状的区域可以是依据模板图像中对象的特征点确定出来的。该部分也将在后续实施例中详述。

在203中，建立素材对应的素材文件，以供后续在目标图像上添加素材时加载，该素材文件可以包括素材的图像以及素材在模板图像上的位置信息。

至此素材文件的建立过程完成，用户可以将自己选择的素材通过在模板图像上指定位置，从而形成素材文件，操作十分简便。

图3为本发明实施例提供的另一方法流程图，该流程用以实现素材在目标图像上的添加。如图3所示，该方法可以包括以下步骤：

在301中，素材添加功能被触发后，确定要添加的素材文件，该素材文件包括素材在模板图像上的位置信息。

当用户打开目标图像后，可以通过预设的素材添加手势触发素材添加功能。相应地，当捕捉到预设的素材添加手势后，向用户展现可供选择的素材文件，用户可以从中选择想要添加的素材对应的素材文件，并加载该素材文件，从而实现素材添加功能的触发。其中预设的素材添加手势可以是点击某组件，在屏幕上双击某特定区域，在屏幕上画圈等等，只要该手势与触发已知功能的手势不冲突就可以将其设置为素材添加手势。

本发明实施例所涉及的目标图像指的是用户欲将素材所添加其上的图像。该目标图像可以是用户实时拍摄的一幅图像，也可以是用户实时拍摄的视频中的各帧图像。还可以是本地存储的一幅图像，也可以是本地存储的视频中的各帧图像，等等。

在302中，依据素材在模板图像上的位置信息，将该素材添加在目标图像上对应的位置。

在将素材添加在目标图像上时，可以采用仿射变换的方式，将素材仿射至目标图像上，以使得素材在模板图像上的相对位置与素材在目标图像上的相对位置一致。

本发明实施例中，模板图像是与目标图像的类型相一致的，例如若目标图像是包含人脸的图像，则模板图像可以是一个标准人脸的图像。也可以是其他类型，例如若目标图像是包含小狗的图像，则模板图像可以是一个标准小狗的图像，等等。

下面以人脸图像为例，对本发明提供的上述两个过程进行详细描述。图4所示，该方法可以具体包括以下步骤：

在401中，捕捉到素材编辑手势后，获取用户选择的素材。

若用户在诸如美颜类APP等图像处理应用的使用过程中，想要使用自定义的素材，则可以通过点击特定组件或者使用其他特定手势的方式，触发素材编辑功能，然后进入素材编辑界面，选择自定义的素材。

用户可以通过实时拍摄一张图像，或者从网络服务器或其他用户设备下载，或者从本地获取一张图像等方式来选择自定义的素材，对于通过这种方式获取的图像，用户还可以进行剪裁、缩放、旋转、美化等方式进行进一步的处理，然后将其作为素材。举个例子，假设用户从网络服务器下载了一张小猫的图像，对该小猫的图像进行剪裁、缩放、旋转后，用户可以点击诸如“下一步”按钮完成对素材的选择。

在402中，获取并记录用户在标准人脸上为该素材指定的位置信息，形成该素材对应的素材文件。

然后可以向用户提供模板图像。在此可以向用户提供多种类型的模板图像供用户选择，用户可以根据目标图像的类型选择对应类型的模板图像，例如在本实施例中，用户的目标图像是人脸图像，则在此可以选择标准人脸的模板图像。也可以依据用户的目标图像自动向用户提供对应类型的模板图像，例如用户在使用APP的过程中先打开了目标图像，例如进行自拍或者进行人脸的视频采集等等，然后触发的素材编辑功能，这种情况下就可以确定目标图像的类型为人脸图像，则可以自动向用户提供标准人脸图像作为模板图像。

用户可以将选好的素材在标准人脸上进行拖动，直至放置到自己满意的位置。例如，用户想要将小猫的素材后续放置在自拍的人脸额头上，那么就可以将该小猫的素材拖动放置到标准人脸的相应位置，如图5a中所示，放置在标准人脸的额头上。待放置完毕后，可以通过点击诸如“完成”等按钮，以触发形成素材文件。

接续上例，用户将小猫的素材放置到标准人脸中如图5a所示的位置后，点击了界面上的“完成”按钮。此时，记录该素材在标准人脸上的位置信息，形成素材文件进行保存，在形成素材文件时，可以采用APP预设的规则进行定义，例如逐个进行编号的方式。也可以由用户对素材文件进行命名，例如用户将其命名为“cat.xx”，其中xx为素材文件的格式后缀。

在素材文件中记录的素材在标准人脸上的位置信息，可以是素材与标准人脸上特征点的相对位置。仍以图5a为例，在标准人脸上可以预先进行特征点定位，得到m个特征点，m为正整数。这些特征点通常用于标识重要部位的位置，例如在眼睛、鼻子、眉毛、嘴巴、耳朵、下巴等部位上共存在m个特征点。素材与这m个特征点之间存在相对位置，素材文件中记录的就是素材与这m个特征点之间的相对位置。

另外，为了方便用户指定素材的位置，可以将标准人脸划分为不同区域，以方便用户作为参考来指定素材的位置。如图5b中左侧图所示，可以将标准人脸划分为额头、耳朵、眼睛、嘴巴等几个区域，用户可以在这些区域内指定素材的位置，将素材放置在这些区域中。再例如图5b右侧图所示，可以将标准人脸划分为格状的区域，以方便用户将素材放置在这些区域中。当然，也可以存在其他区域划分方式，在此不再一一穷举。

在403中，确定目标图像。

上述素材编辑的过程可以是用户任意时间内执行的，例如用户在打开APP后就进入素材编辑界面进行素材编辑，生成素材文件。或者用户在自拍后进入素材编辑界面进行素材编辑，生成素材文件。

而素材添加的过程通常是在使用目标图像过程中的，例如在自拍时添加素材，因此，可以将素材添加功能被触发时界面上显示的图像作为目标图像。

在404中，素材添加功能被触发后，加载素材文件。

例如用户点击素材添加功能对应的“按钮”后，可以从已经生成的素材文件中选择一个素材文件作为添加在目标图像上的素材，例如用户从素材文件列表中选择名称为“cat.XX”的素材文件。

系统也可以默认加载最近生成的素材文件，例如用户刚刚生成了一个名称为“cat.XX”的素材文件，那么素材添加功能被触发后，默认加载该素材文件，除非用户主动更换素材文件。

在405中，对目标图像中的人脸进行特征点定位。

在本发明实施例中对特征点定位的方式并不加以限制，可以利用预先构建的定位模型对人脸进行特征点定位，本发明仅利用特征点定位的结果，即定位得到的m个特征点的位置。

在406中，采用仿射变换的方式，将素材文件中的素材从标准人脸放射至目标图像的人脸上对应的位置，以使得素材在标准人脸上的相对位置与素材在目标图像的人脸上的相对位置一致。

仍接续上例，素材文件中记录的是素材“小猫”与标准人脸中m个特征点的相对位置，在目标图像的人脸上同样可以定位得到m个特征点，那么采用仿射变换的方式，将素材“小猫”仿射变换到目标图像的人脸上，使得素材“小猫”相对于目标图像的人脸上m个特征点的相对位置与素材“小猫”相对于标准人脸上m个特征点的相对位置一致。如图5c所示，就能够将素材“小猫”添加至目标图像的人脸上。

另外，为了简化仿射变换中的计算量，在记录素材在标准人脸上的相对位置时，可以依据标准人脸的特征点，确定预设形状的且包围该标准人脸的区域位置。例如图6所示，假设素材为帽子眼镜，可以首先确定一个包围标准人脸的方框，该方框与标准人脸的m个特征点存在一个相对位置，也就是说，依据该m个特征点和预设的相对位置规则可以确定出该方框的位置。然后，记录素材与该方框的相对位置，实际上也是间接反映了素材与m个特征点的相对位置。

在目标图像上添加该素材时，如图6中所示，在目标图像中也确定一个包围人脸的方框，该方框与人脸的m个特征点也存在一个相对位置，该相对位置规则与记录素材位置时采用的相对位置规则一致。在对素材进行仿射变换时，将帽子眼镜的素材仿射变换至目标图像的人脸上，依据的是素材与包围标准人脸的方框的相对位置以及素材与目标图像上方框的相对位置。如图6中所示，将素材从方框1仿射变换至方框2中对应的位置，使得素材相对于方框1的相对位置与该素材相对于方框2中的相对位置一致。

需要说明的是，上述方法实施例的执行主体可以为图像处理装置，该装置可以位于本地终端的应用，或者还可以为位于本地终端的应用中的插件或软件开发工具包(Software Development Kit，SDK)等功能单元，或者，还可以位于服务器端，本发明实施例对此不进行特别限定。

下面结合实施例对本发明提供的装置进行详述。图7为本发明实施例提供的一图像处理装置的结构图，该装置用于实现素材文件的建立。如图7中所示，该装置可以包括：素材获取单元01、素材编辑单元02和文件建立单元03。各组成单元的主要功能如下：

素材获取单元01负责获取用户选择的素材。具体可以在素材编辑功能被触发后，执行获取用户选择的素材的处理。

其中，素材获取单元01获取用户拍摄、下载或从本地获取的素材。本发明实施例中所涉及的素材可以是用于图像装饰的图片、文字等等，其中图片可以是静态的图片，也可以是带有动画效果的flash图片等等。

素材编辑单元02负责获取并记录用户在模板图像上为素材指定的位置信息。具体地，素材编辑单元02可以首先向用户展示模板图像；然后获取并记录用户在模板图像上放置素材的位置信息。

文件建立单元03,负责建立素材对应的素材文件，以供后续在目标图像上添加素材时加载，该素材文件可以包括素材的图像以及素材在模板图像上的位置信息。

上述素材编辑单元02记录的位置信息的实际上是素材在模板图像上的相对位置，可以是素材与模板图像中对象的特征点的相对位置，也可以是与预设形状的区域的相对位置，该预设形状的区域可以是依据模板图像中对象的特征点确定出来的。

图8为本发明实施例提供的另一装置结构图，该装置用于实现素材在目标图像上的添加。如图8所示，该装置可以包括：文件确定单元11和素材添加单元12。其中各组成单元的主要功能如下：

文件确定单元11负责在素材添加功能被触发后，确定要添加的素材文件，该素材文件包括素材的图像以及该素材在模板图像上的位置信息。

素材添加单元12负责依据素材在模板图像上的位置信息，将素材添加在目标图像上对应的位置。本发明实施例所涉及的目标图像指的是用户欲将素材所添加其上的图像。该目标图像可以是用户实时拍摄的一幅图像，也可以是用户实时拍摄的视频中的各帧图像。还可以是本地存储的一幅图像，也可以是本地存储的视频中的各帧图像，等等。

具体地，文件确定单元11可以在捕捉到预设的素材添加手势后，向用户展现可供选择的素材文件；然后确定用户选择的素材文件，并加载素材文件。其中预设的素材添加手势可以是点击某组件，在屏幕上双击某特定区域，在屏幕上画圈等等，只要该手势与触发已知功能的手势不冲突就可以将其设置为素材添加手势。

素材添加单元12在将素材添加在目标图像上时，可以采用仿射变换的方式，将素材仿射至目标图像上，以使得素材在模板图像上的相对位置与素材在目标图像上的相对位置一致。

若素材文件中包含的是素材与模板图像中对象的特征点之间的相对位置信息。则素材添加单元12可以先对目标图像中的对象进行特征点定位；然后将素材仿射变换到目标图像上对应的位置，以使得素材与目标图像中对象的各特征点的相对位置与记录的素材与模板图像中对象的特征点之间的相对位置一致。

若素材文件包含的是素材与区域的相对位置，该区域为依据模板图像中对象的特征点所确定出的预设形状且包围该对象的区域。则素材添加单元12可以先对目标图像中的对象进行特征点定位；然后依据目标图像中对象的特征点，确定预设形状的且包围对象的区域位置；最后将素材仿射变换到目标图像上的对应位置，以使得素材与目标图像中的区域位置的相对位置与素材与模板图像中的区域位置的相对位置一致。

本发明实施例中，模板图像是与目标图像的类型相一致的，例如若目标图像是包含人脸的图像，则模板图像可以是一个标准人脸的图像。也可以是其他类型，例如若目标图像是包含小狗的图像，则模板图像可以是一个标准小狗的图像，等等。

本发明实施例提供的上述方法和装置可以以设置并运行于设备中的计算机程序体现。该设备可以包括一个或多个处理器，还包括存储器和一个或多个程序，如图9中所示。其中该一个或多个程序存储于存储器中，被上述一个或多个处理器执行以实现本发明上述实施例中所示的方法流程和/或装置操作。例如，被上述一个或多个处理器执行的方法流程，可以包括：

获取用户选择的素材；

获取并记录用户在模板图像上为所述素材指定的位置信息；

建立所述素材对应的素材文件，该素材文件包括所述素材的图像以及所述素材在模板图像上的位置信息。

再例如，被上述一个或多个处理器执行的方法流程，可以包括：

素材添加功能被触发后，确定要添加的素材文件，该素材文件包括素材的图像以及所述素材在模板图像上的位置信息；

依据所述素材在模板图像上的位置信息，将所述素材添加在目标图像上对应的位置。

在此列举两个应用场景：

应用场景一、

用户进行自拍后，可以将任意自己喜爱的图像作为素材，并通过将该素材在标准人脸上移动至想要的位置，形成素材文件。然后加载该素材文件，以将该素材添加在用户自拍的图像上对应的位置。例如图5c中所示的，用户自拍后将素材“小猫”添加在额头位置。

应用场景二、

用户在进行视频通讯时，想将自己喜爱的帽子眼镜作为素材在视频通讯过程中一直添加在自己脸上，则可以通过将该“帽子眼镜”素材在标准人脸上行移动至想要的位置，形成素材文件。然后在视频通讯时加载该素材文件，以在视频通讯过程中将该“帽子眼镜”素材一直加载用户自己的脸上对应位置。例如图6中，用户在整个视频通讯过程中无论怎么移动“帽子眼镜”素材都会在用户的头上和眼睛上对应的位置。

在本发明所提供的几个实施例中，应该理解到，所揭露的系统，装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式。

所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。

另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用硬件加软件功能单元的形式实现。

上述以软件功能单元的形式实现的集成的单元，可以存储在一个计算机可读取存储介质中。上述软件功能单元存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)或处理器(processor)执行本发明各个实施例所述方法的部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(Read-Only Memory，ROM)、随机存取存储器(Random Access Memory，RAM)、磁碟或者光盘等各种可以存储程序代码的介质。

以上所述仅为本发明的较佳实施例而已，并不用以限制本发明，凡在本发明的精神和原则之内，所做的任何修改、等同替换、改进等，均应包含在本发明保护的范围之内。

Claims (16)

1.一种图像处理方法，其特征在于，该方法包括：

获取用户选择的素材；

获取并记录用户在模板图像上为所述素材指定的位置信息，所述模板图像包括标准人脸图像；

建立所述素材对应的素材文件，该素材文件包括所述素材的图像以及所述素材在模板图像上的位置信息，

其中，所述记录用户在模板图像上为所述素材指定的位置信息包括：

依据所述模板图像中对象的特征点，确定预设形状的且包围所述对象的区域位置；

记录所述素材与所述区域的相对位置。

2.根据权利要求1所述的方法，其特征在于，所述获取用户选择的素材包括：

获取用户拍摄、下载或从本地获取的素材。

3.根据权利要求1所述的方法，其特征在于，在素材编辑功能被触发后，执行所述获取用户选择的素材的步骤。

4.根据权利要求1所述的方法，其特征在于，所述获取并记录用户在模板图像上为所述素材指定的位置信息包括：

向用户展示模板图像；

获取并记录用户在所述模板图像上放置所述素材的位置信息。

5.一种图像处理方法，其特征在于，该方法包括：

素材添加功能被触发后，确定要添加的素材文件，该素材文件包括素材的图像以及所述素材在模板图像上的位置信息，所述模板图像包括标准人脸图像；

依据所述素材在模板图像上的位置信息，将所述素材添加在目标图像上对应的位置，所述目标图像为人脸图像，

所述素材在模板图像上的位置信息包括：

所述素材与区域的相对位置，所述区域为依据所述模板图像中对象的特征点所确定出的预设形状且包围所述对象的区域，

依据所述素材在模板图像上的位置信息，将所述素材添加在目标图像上对应的位置包括：

对目标图像中的对象进行特征点定位；

依据所述目标图像中对象的特征点，确定预设形状的且包围所述对象的区域位置；

将所述素材仿射变换到所述目标图像上的对应位置，以使得所述素材与目标图像中的区域位置的相对位置与所述素材与模板图像中的区域位置的相对位置一致。

6.根据权利要求5所述的方法，其特征在于，所述素材添加功能被触发包括：

捕捉到预设的素材添加手势后，向用户展现可供选择的素材文件；

确定用户选择的素材文件，并加载所述素材文件。

7.一种图像处理装置，其特征在于，该装置包括：

素材获取单元，用于获取用户选择的素材；

素材编辑单元，用于获取并记录用户在模板图像上为所述素材指定的位置信息，所述模板图像包括标准人脸图像；

文件建立单元，用于建立所述素材对应的素材文件，该素材文件包括所述素材的图像以及所述素材在模板图像上的位置信息，

所述素材编辑单元在记录用户在模板图像上为所述素材指定的位置信息时，具体执行：

依据所述模板图像中对象的特征点，确定预设形状的且包围所述对象的区域位置；

记录所述素材与所述区域的相对位置。

8.根据权利要求7所述的装置，其特征在于，所述素材获取单元，具体用于获取用户拍摄、下载或从本地获取的素材。

9.根据权利要求7所述的装置，其特征在于，所述素材获取单元在素材编辑功能被触发后，执行所述获取用户选择的素材的处理。

10.根据权利要求7所述的装置，其特征在于，所述素材编辑单元，具体用于：

向用户展示模板图像；

获取并记录用户在所述模板图像上放置所述素材的位置信息。

11.一种图像处理装置，其特征在于，该装置包括：

文件确定单元，用于在素材添加功能被触发后，确定要添加的素材文件，该素材文件包括素材的图像以及所述素材在模板图像上的位置信息，所述模板图像包括标准人脸图像；

素材添加单元，用于依据所述素材在模板图像上的位置信息，将所述素材添加在目标图像上对应的位置，所述目标图像为人脸图像，

所述素材在模板图像上的位置信息包括：

所述素材与区域的相对位置，所述区域为依据所述模板图像中对象的特征点所确定出的预设形状且包围所述对象的区域，

所述素材添加单元，具体用于：

对目标图像中的对象进行特征点定位；

依据所述目标图像中对象的特征点，确定预设形状的且包围所述对象的区域位置；

将所述素材仿射变换到所述目标图像上的对应位置，以使得所述素材与目标图像中的区域位置的相对位置与所述素材与模板图像中的区域位置的相对位置一致。

12.根据权利要求11所述的装置，其特征在于，所述文件确定单元在确定素材添加功能被触发时，具体执行：

捕捉到预设的素材添加手势后，向用户展现可供选择的素材文件；

确定用户选择的素材文件，并加载所述素材文件。

13.一种设备，包括

存储器，包括一个或者多个程序；

一个或者多个处理器，耦合到所述存储器，执行所述一个或者多个程序，以实现如权利要求1至4任一权项所述方法中执行的操作。

14.一种设备，包括

存储器，包括一个或者多个程序；

一个或者多个处理器，耦合到所述存储器，执行所述一个或者多个程序，以实现如权利要求5或6所述方法中执行的操作。

15.一种计算机存储介质，所述计算机存储介质被编码有计算机程序，所述程序在被一个或多个计算机执行时，使得所述一个或多个计算机执行如权利要求1至4任一权项所述方法中执行的操作。

16.一种计算机存储介质，所述计算机存储介质被编码有计算机程序，所述程序在被一个或多个计算机执行时，使得所述一个或多个计算机执行如权利要求5或6所述方法中执行的操作。

Images