CN112270735B - 虚拟形象模型生成方法、装置、电子设备及存储介质 - Google Patents

Abstract

本公开关于一种虚拟形象模型生成方法、装置、电子设备及存储介质，以至少解决制作虚拟形象模型效率低的问题。该方法包括：获取用于描述虚拟形象正视图的分层文件，分层文件包括多个图层，图层用于描述虚拟形象中一个部位的部分或全部；解析分层文件得到每个图层的图层信息，图层信息至少包括：图层的位置、图层的尺寸以及图层的分组标识，位置用于表征图层在多个图层中的空间位置，分组标识用于指示图层所属的分组；一个分组包括至少一个图层，一个分组中的图层对应虚拟形象的同一部位；根据每个图层的图层信息分别构建每个分组中的图层对应虚拟形象的部位的中间模型；根据每个图层的位置、尺寸以及每个部位的中间模型，构建虚拟形象模型。

Description

虚拟形象模型生成方法、装置、电子设备及存储介质

技术领域

本公开涉及计算机视觉技术领域，尤其涉及虚拟形象模型生成方法、装置、电子设备及存储介质。

背景技术

随着计算机视觉技术的发展，虚拟形象通过直播的方式走入大众视野，受到越来越多用户的喜欢。虚拟形象的直播离不开虚拟形象模型的构建。

当前，制作虚拟形象模型的方法可以为：首先，绘制虚拟形象的原画(原画可以为(photoshop document，psd)格式的文件)；然后，将该原画导入live2D软件，并利用live2D软件手工制作该原画的虚拟形象模型。该种方法人工参与多，制作费时。

发明内容

本公开提供一种虚拟形象模型生成方法、装置、电子设备及存储介质，以提高生成虚拟形象模型的效率。

本公开的技术方案如下：

根据本公开实施例的第一方面，本公开实施例提供一种虚拟形象模型生成方法，该方法包括：获取用于描述虚拟形象正视图的分层文件，分层文件包括多个图层，图层用于描述虚拟形象中一个部位的部分或全部；解析分层文件得到每个图层的图层信息，图层信息至少包括：图层的位置、图层的尺寸以及图层的分组标识，位置用于表征图层在多个图层中的空间位置，分组标识用于指示图层所属的分组；一个分组包括至少一个图层，一个分组中的图层对应虚拟形象的同一部位；根据每个图层的图层信息分别构建每个分组中的图层对应虚拟形象的部位的中间模型；根据每个图层的位置、尺寸以及虚拟形象的每个部位的中间模型，构建对应于该虚拟形象的虚拟形象模型。

在本公开的实施例中：根据用于描述虚拟形象正视图的分层文件，分部位构建虚拟形象的中间模型，最终将中间模型构建为该虚拟形象的虚拟形象模型，减少了虚拟形象模型构建过程中的人工参与，从而提高了构建虚拟形象模型的效率。

在一种可能的实现方式中，上述根据每个图层的图层信息分别构建每个分组中的图层对应虚拟形象的部位的中间模型，包括：响应于每个图层的图层信息的预设规则，根据每个图层的图层信息，分别构建每个分组中的图层对应虚拟形象的部位的中间模型。

在另一种可能的实现方式中，上述预设规则包括：每个图层所属分组的分组标识与预设的分组标识一致、用于描述虚拟形象的部位的图层的数量与预设数量一致、用于描述虚拟形象的部位的图层的位置与预设位置相匹配中的至少一种。

这样，响应于预设规则构建每个分组中的图层对应虚拟形象的部位的中间模型，提高了构建得到的虚拟形象模型的质量。

在另一种可能的实现方式中，该方法还包括：获取虚拟形象的面部特征点；根据面部特征点，确定虚拟形象的表情参数；使用表情参数调整面部特征点的位置，得到虚拟形象模型的表情信息。

这样，能够自动为虚拟形象模型生成表情信息，进一步提高了生成虚拟形象模型的效率。

在另一种可能的实现方式中，上述根据每个图层的图层信息，分别构建每个分组中的图层对应虚拟形象的部位的中间模型，包括：根据每个图层的图层信息，预测属于每个分组中图层图像的像素点的深度信息；根据深度信息,构建每个分组中的图层对应虚拟形象的部位的初步模型；获取初步模型在虚拟形象面部所在平面的正投影图像的关键点的位置与每个分组中图层图像对应关键点的位置的差异值；根据差异值调整初步模型，得到每个分组中的图层对应虚拟形象的部位的中间模型。

这样，构建的虚拟形象的部位的中间模型更趋近于与图层中该虚拟形象的部位保持一致。从而提高了构建的虚拟形象的部位的中间模型的质量。

在另一种可能的实现方式中，上述根据每个图层的位置、尺寸以及虚拟形象的每个部位的中间模型，构建对应于虚拟形象的虚拟形象模型，包括：将虚拟形象的每个部位的中间模型组合为虚拟形象的初步模型；将每个部位的中间模型之间的位置比例，调整为与每个图层所描述部位之间的位置比例一致，将每个部位的中间模型之间的尺寸比例，调整为与每个图层所描述部位之间的尺寸比例一致，得到虚拟形象模型。

这样，保障了构建的虚拟形象模型与分层文件中虚拟形象的各部位比例一致。

根据本公开实施例的第二方面，提供一种虚拟形象模型生成装置，其特征在于，包括：获取模块，被配置为获取用于描述虚拟形象正视图的分层文件，分层文件包括多个图层，图层用于描述虚拟形象中一个部位的部分或全部；解析模块，被配置为解析分层文件得到每个图层的图层信息，图层信息至少包括：图层的位置、图层的尺寸以及图层的分组标识，位置用于表征图层在多个图层中的空间位置，分组标识用于指示图层所属的分组；一个分组包括至少一个图层，一个分组中的图层对应虚拟形象的同一部位；构建模块，被配置为根据每个图层的图层信息分别构建每个分组中的图层对应虚拟形象的部位的中间模型；根据每个图层的位置、尺寸以及虚拟形象的每个部位的中间模型，构建对应于虚拟形象的虚拟形象模型。

可选的，构建模块具体被配置为：响应于每个图层的图层信息的预设规则，根据每个图层的图层信息，分别构建每个分组中的图层对应虚拟形象的部位的中间模型。

可选的，上述预设规则包括：每个图层所属分组的分组标识与预设的分组标识一致、用于描述虚拟形象的部位的图层的数量与预设数量一致、用于描述虚拟形象的部位的图层的位置与预设位置相匹配中的至少一种。

可选的，上述获取模块还被配置为：获取虚拟形象的面部特征点；根据面部特征点，确定虚拟形象的表情参数；使用表情参数调整面部特征点的位置，得到虚拟形象模型的表情信息。

可选的，上述构建模块具体被配置为：根据每个图层的图层信息，预测属于每个分组中图层图像的像素点的深度信息；根据深度信息,构建每个分组中的图层对应虚拟形象的部位的初步模型；获取模块还被配置为：获取初步模型在虚拟形象面部所在平面的正投影图像的关键点的位置与每个分组中图层图像对应关键点的位置的差异值；构建模块具体被配置为：根据差异值调整初步模型，得到每个分组中的图层对应虚拟形象的部位的中间模型。

可选的，上述构建模块具体被配置为：将虚拟形象的每个部位的中间模型组合为虚拟形象的初步模型；将每个部位的中间模型之间的位置比例，调整为与每个图层所描述部位之间的位置比例一致，将每个部位的中间模型之间的尺寸比例，调整为与每个图层所描述部位之间的尺寸比例一致，得到虚拟形象模型。

根据本公开实施例的第三方面，提供一种电子设备，包括：处理器；用于存储处理器可执行指令的存储器。其中，处理器被配置为执行所述指令，以实现上述第一方面以及第一方面的任一种可能的实现方式所示的虚拟形象模型生成方法。

根据本公开实施例的第四方面，提供一种计算机可读存储介质，当该存储介质中的指令由电子设备的处理器执行时，使得电子设备能够执行如第一方面所示的虚拟形象模型生成方法。

根据本公开实施例的第五方面，提供一种计算机程序产品，可直接加载到电子设备的内部存储器中，并含有软件代码，该计算机程序经由电子设备载入并执行后能够实现第一方面所示的虚拟形象模型生成方法。

上述提供的任一种虚拟形象模型生成装置、电子设备或计算机可读存储介质或计算机程序产品用于执行上文所提供的对应的方法，因此，其所能达到的有益效果可参考上文提供的对应的方法中对应方案的有益效果，此处不再赘述。

应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本公开。

附图说明

此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本公开实施例，并与说明书一起用于解释本公开的原理，并不构成对本公开的不当限定。

图1是根据一示例性实施例示出的一种虚拟形象模型生成方法的流程示意图；

图2是根据一示例性实施例示出的获取的分层文件的分组情况示意图；

图3是根据一示例性实施例示出的本公开实施例获取的分层文件的脸部图像以及本公开实施例所提供的方法构建的虚拟形象脸部的模型示意图；

图4是根据一示例性实施例示出的一种虚拟形象模型生成装置框图；

图5是根据一示例性实施例示出的一种电子设备的框图。

具体实施方式

为了使本领域普通人员更好地理解本公开的技术方案，下面将结合附图，对本公开实施例中的技术方案进行清楚、完整地描述。

需要说明的是，在本公开的实施例中，“示例性的”或者“例如”等词用于表示作例子、例证或说明。本公开实施例中被描述为“示例性的”或者“例如”的任何实施例或设计方案不应被解释为比其它实施例或设计方案更优选或更具优势。确切而言，使用“示例性的”或者“例如”等词旨在以具体方式呈现相关概念。

需要说明的是，本公开的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本公开的实施例能够以除了在这里图示或描述的那些以外的顺序实施。以下示例性实施例中所描述的实施方式并不代表与本公开相一致的所有实施方式。相反，它们仅是与如所附权利要求书中所详述的、本公开的一些方面相一致的装置和方法的例子。

以下，对本公开实施例中所涉及的部分术语和技术进行简单介绍：

在本公开实施例中，“至少一个”是指一个或多个。“多个”是指两个或两个以上。

在本公开实施例中，“和/或”，仅仅是一种描述关联对象的关联关系，表示可以存在三种关系，例如，A和/或B，可以表示：单独存在A，同时存在A和B，单独存在B这三种情况。另外，本文中字符“/”，一般表示前后关联对象是一种“或”的关系。

在本公开实施例中，组合包括一个或多个对象。

下面将结合本公开实施例中的附图，对本公开实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本公开一部分实施例，而不是全部的实施例。基于本公开中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例，都属于本公开保护的范围。

需要说明的是，本公开实施例提供的虚拟形象模型生成方法可以应用于电子设备或服务器。其中，电子设备包括但不限于手机、平板电脑、笔记本电脑、掌上电脑、车载终端等。服务器可以为一台服务器，或者，也可以为由多台服务器组成的服务器集群，本公开对此不做限定。

如图1所示，图1是根据一示例性实施例示出的一种虚拟形象模型生成方法的流程示意图。图1所示的方法可以应用于电子设备或服务器。图1所示的方法可以包括以下步骤：

S100：获取用于描述虚拟形象正视图的分层文件，分层文件包括多个图层，图层用于描述虚拟形象中一个部位的部分或全部。

在一种可能的实现方式中，获取的用于描述虚拟形象正视图的分层文件为按照预设的图层标注规则对各图层进行标注后的分层文件。其中，图层标注规则用于为各图层设置名称及分组，名称用于唯一标识一个图层。属于同一分组中的图层可以使用相同的方法预测其深度信息。其中，分层文件可以为PSD分层文件，PSD分层文件是一种图像处理软件Photoshop的专用格式文件。这种格式文件可以存储photoshop软件中所有图层的坐标、大小及颜色等数据。

示例性的，可以按照虚拟形象的不同部位进行分组，分组与分组名称一一对应；分组名称包括：头发组、左眼组、右眼组、鼻子组、嘴巴组、左头饰组、右头饰组、脸部组以及耳朵组等。

在一个例子中，获取的分层文件的分组情况如图2所示，包括头发组组，组标识为hair；左眼组，组标识为eye-L；右眼组，组标识为eye-R；鼻子组，组标识为nose；嘴巴组，组标识为mouth；左头饰组，组标识为baozi-A；右头饰组，组标识为baozi-C；脸部组，组标识为face；耳朵组，组标识为ear；身体组，组标识为body。

本公开对获取分层文件的方式不进行限定，在一种可能的实现方式中，接收其他电子设备发送的分层文件，在另一种可能的实现方式中，获取用户上传的分层文件，在另一种可能的实现方式中读取本地的分层文件。

S101：解析分层文件得到每个图层的图层信息。图层信息至少包括：图层的位置、图层的尺寸以及图层的分组标识，位置用于表征所述图层在多个图层中的空间位置，分组标识用于指示图层所属的分组；一个分组包括至少一个图层，一个分组中的图层对应虚拟形象的同一部位。

具体的，根据分层文件的格式解析分层文件得到每个图层的图层信息。

示例性的，对于PSD分层文件，Adobe Photoshop的开发者文档提供了PSD文件格式说明书，其中包含了PSD文件的内容结构、每段内容所包含的信息内容及每个信息所需要读取的二进制字节数。根据该文件格式，可对获取的PSD分层文件进行解析，以获取PSD分层文件每个图层的位置、尺寸、图层图像以及图层所属的分组。

S102：根据每个图层的图层信息分别构建每个分组中的图层对应虚拟形象的部位的中间模型。

在一种可能的实现方式中，响应于每个图层的图层信息的预设规则，根据每个图层的图层信息，分别构建每个分组中的图层对应虚拟形象的部位的中间模型。

可选的，预设规则包括每个图层所属分组的分组标识与预设的分组标识一致、用于描述虚拟形象的部位的图层的数量与预设数量一致、用于描述虚拟形象的部位的图层的位置与预设位置相匹配中的至少一种。

可以理解的是，为了得到高质量的虚拟形象模型，在确定分层文件中每个图层的图层信息与预设规则一致的情况下，才根据每个图层的图层信息，分别构建每个分组中的图层对应虚拟形象的部位的中间模型，在分层文件至少一个图层的图层信息与预设规则不一致的情况下，则停止对该分层文件的进一步处理。

在一个示例中，在解析图层得到图层所属的分组名称后，与预设的分组标识进行比对；若该分组名称在预设的分组标识中存在，则说明该图层所述的分组名称与预设规则一致。

在另一个示例中，在解析分层文件得到图层图像后对各图层图像进行图像识别，得到该分层文件包括两个鼻子，而预设的图层图像仅包括一个鼻子，则确定该分层文件与预设规则不一致。

具体的，在确定分层文件中每个图层的图层信息与预设规则一致的情况下，根据每个图层的图层信息，分别构建每个分组中的图层对应虚拟形象的部位的中间模型包括如下步骤：

步骤一：根据每个图层所属的分组以及图层的位置预测每个图层图像中像素点的深度信息。

步骤二：根据预测的目标分组中图层图像的像素点的深度信息,构建目标分组中虚拟形象的部位的初步模型。其中，目标分组为多个图层中每个图层所属分组中的任意一个分组。

步骤三：获取初步模型在虚拟形象面部所在平面的正投影图像的关键点的位置与目标分组中图层图像对应关键点的位置的差异值；根据该差异值调整初步模型，得到目标分组中的图层对应虚拟形象的部位的中间模型。

示例性的，根据解析分层文件得到的脸部组中的脸部图像，建立基础三维脸部模型；获取该基础三维脸部模型相对于步骤一中获取的脸部图像中的深度信息的深度增量图；将深度增量图投射至基础三维脸部模型的表面，得到细节三维脸部模型。然后，获取细节三维脸部模型的正投影图，获取正投影图的关键点与脸部图像的关键点(例如：边界点)的映射关系，根据该映射关系对细节三维脸部模型的关键点位置进行调整，得到脸部组中虚拟形象脸部的中间模型。

这样，可以保障构建的分组中虚拟形象的部位的中间模型的轮廓与PSD分层文件中该分组中虚拟形象的部位的分层图像的轮廓保持一致。

需要说明的是本公开实施例中，不同的分组可以使用不同的方法进行中间模型的构建。可以训练相应的网络模型用于不同分组中虚拟形象的不同部位的中间模型的构建。

S103：根据每个图层的位置、尺寸以及虚拟形象的每个部位的中间模型，构建对应于该虚拟形象的虚拟形象模型。其中，构建的虚拟形象模型可以在浏览器或者智能终端设备中进行显示及编辑。

在一种可能的实现方式中，可以通过如下步骤构建对应于虚拟形象的虚拟形象模型：

步骤一：将虚拟形象的每个部位的中间模型组合为虚拟形象的初步模型。

步骤二：将每个部位的中间模型之间的位置比例，调整为与每个图层所描述部位之间的位置比例一致，将每个部位的中间模型之间的尺寸比例，调整为与每个图层所描述部位之间的尺寸比例一致，得到虚拟形象模型。

这样，经过步骤二根据每个图层所描述部位之间的位置比例和每个图层所描述部位之间的尺寸比例对虚拟形象的初步模型中每个部位的中间模型的尺寸以及位置进行调整，可以确保最终得到的虚拟形象模型中各个部位的相对位置与分层文件中各个部位的相对位置保持一致，进一步提高了构建的虚拟形象模型的质量。

在一个例子中，如图3所示左边图像为本公开实施例获取的分层文件的脸部图像，右边图像为本公开实施例所提供的方法构建的虚拟形象脸部的模型示意图。两者眼睛的位置、鼻尖的位置以及嘴角的位置一致。

可选的，S104：为虚拟形象模型添加表情信息。

具体的，获取虚拟形象的面部特征点；根据面部特征点，确定虚拟形象的表情参数；使用表情参数调整面部特征点的位置，得到虚拟形象模型的表情信息。

示例性的，获取睁眼状态下模型中眼睛的关键点位置信息以及闭眼状态下模型中眼睛的关键点位置信息；生成睁眼状态下眼睛的关键点位置逐渐变化至闭眼状态下模型中眼睛的关键点位置的模型图像，得到虚拟形象模型的睁眼闭眼的表情信息。

可以理解的是，本公开实施例提供的虚拟形象模型生成方法还可以用于虚拟动物模型的构建。

本公开实施例中，可以根据用于描述虚拟形象正视图的分层文件，分部位构建虚拟形象的中间模型，最终将中间模型构建为该虚拟形象的虚拟形象模型，减少了虚拟形象模型构建过程中的人工参与，从而提高了构建虚拟形象模型的效率，节省了成本。

上述主要从方法的角度对本公开实施例提供的方案进行了介绍。为了实现上述功能，其包含了执行各个功能相应的硬件结构和/或软件模块。本领域技术人员应该很容易意识到，结合本文中所公开的实施例描述的各示例的方法步骤，本公开能够以硬件或硬件和计算机软件的结合形式来实现。某个功能究竟以硬件还是计算机软件驱动硬件的方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本公开的范围。

本公开实施例可以根据上述方法示例对虚拟形象模型生成装置进行功能模块的划分，例如可以对应各个功能划分各个功能模块，也可以将两个或两个以上的功能集成在一个处理模块中。上述集成的模块既可以采用硬件的形式实现，也可以采用软件功能模块的形式实现。需要说明的是，本公开实施例中对模块的划分是示意性的，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式。

图4是根据一示例性实施例示出的一种虚拟形象模型生成装置框图。参照图4，该虚拟形象模型生成装置200包括获取模块201、解析模块202和构建模块203。其中：获取模块201：被配置为获取用于描述虚拟形象正视图的分层文件，分层文件包括多个图层，图层用于描述虚拟形象中一个部位的部分或全部；解析模块202，被配置为解析分层文件得到每个图层的图层信息，图层信息至少包括：图层的位置、图层的尺寸以及图层的分组标识，位置用于表征图层在多个图层中的空间位置，分组标识用于指示图层所属的分组；一个分组包括至少一个图层，一个分组中的图层对应虚拟形象的同一部位；构建模块203，被配置为根据每个图层的图层信息分别构建每个分组中的图层对应虚拟形象的部位的中间模型；根据每个图层的位置、尺寸以及虚拟形象的每个部位的中间模型，构建对应于虚拟形象的虚拟形象模型。例如，结合图1，获取模块201可以用于执行S100、S104,解析模块202可以用于执行S101,构建模块203可以用于执行S102～S103。

可选的，构建模块203具体被配置为：响应于每个图层的图层信息的预设规则，根据每个图层的图层信息，分别构建每个分组中的图层对应虚拟形象的部位的中间模型。

可选的，上述预设规则包括：每个图层所属分组的分组标识与预设的分组标识一致、用于描述虚拟形象的部位的图层的数量与预设数量一致、用于描述虚拟形象的部位的图层的位置与预设位置相匹配中的至少一种。

可选的，上述获取模块201还被配置为：获取虚拟形象的面部特征点；根据面部特征点，确定虚拟形象的表情参数；使用表情参数调整面部特征点的位置，得到虚拟形象模型的表情信息。

可选的，上述构建模块203具体被配置为：根据每个图层的图层信息，预测属于每个分组中图层图像的像素点的深度信息；根据深度信息,构建每个分组中的图层对应虚拟形象的部位的初步模型；获取模块201还被配置为：获取初步模型在虚拟形象面部所在平面的正投影图像的关键点的位置与每个分组中图层图像对应关键点的位置的差异值；构建模块203具体被配置为：根据差异值调整初步模型，得到每个分组中的图层对应虚拟形象的部位的中间模型。

可选的，上述构建模块203具体被配置为：将虚拟形象的每个部位的中间模型组合为虚拟形象的初步模型；将每个部位的中间模型之间的位置比例，调整为与每个图层所描述部位之间的位置比例一致，将每个部位的中间模型之间的尺寸比例，调整为与每个图层所描述部位之间的尺寸比例一致，得到虚拟形象模型。

关于上述实施例中的装置，其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述，此处将不做详细阐述说明。此外，上述提供的任一种虚拟形象模型生成装置200的解释以及有益效果的描述均可参考上述对应的方法实施例，不再赘述。

图5是根据一示例性实施例示出的一种电子设备的框图。如图5所示，电子设备40包括但不限于：处理器401、存储器402、显示器403、输入单元404、接口单元405和电源406等。

其中，上述的处理器401，用于存储上述处理器可执行指令的存储器。可以理解，上述处理器401被配置为执行上述图1所示实施例中任一步骤。即，上述电子设备40的框图可以作为上述虚拟形象模型生成装置200的硬件结构图。

需要说明的是，本领域技术人员可以理解，图5中示出的电子设备结构并不构成对电子设备的限定，电子设备可以包括比图5所示更多或更少的部件，或者组合某些部件，或者不同的部件布置。

处理器401是电子设备的控制中心，利用各种接口和线路连接整个电子设备的各个部分，通过运行或执行存储在存储器402内的软件程序和/或模块，以及调用存储在存储器402内的数据，执行电子设备的各种功能和处理数据，从而对电子设备进行整体监控。处理器401可包括一个或多个处理单元；可选的，处理器401可集成应用处理器和调制解调处理器，其中，应用处理器主要处理操作系统、用户界面和应用程序等，调制解调处理器主要处理无线通信。可以理解的是，上述调制解调处理器也可以不集成到处理器401中。

存储器402可用于存储软件程序以及各种数据。存储器402可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能单元所需的应用程序(比如获取单元、收发单元或合并单元等)等。此外，存储器402可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。

显示器403用于显示由用户输入的信息或提供给用户的信息。显示器403可包括显示面板，可以采用液晶显示器(Liquid Crystal Display，LCD)、有机发光二极管(OrganicLight-Emitting Diode，OLED)等形式来配置显示面板。

输入单元404可以包括图形处理器(Graphics Processing Unit，GPU)，图形处理器对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。处理后的图像帧可以显示在显示器403上。经图形处理器处理后的图像帧可以存储在存储器402(或其它存储介质)中。

接口单元405为外部装置与电子设备400连接的接口。例如，外部装置可以包括有线或无线头戴式耳机端口、外部电源(或电池充电器)端口、有线或无线数据端口、存储卡端口、用于连接具有识别模块的装置的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等等。接口单元405可以用于接收来自外部装置的输入(例如，数据信息等)并且将接收到的输入传输到电子设备400内的一个或多个元件或者可以用于在电子设备400和外部装置之间传输数据。

电源406(比如电池)可以用于为各个部件供电，可选的，电源406可以通过电源管理系统与处理器401逻辑相连，从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。

在示例性实施例中，本公开实施例还提供了一种包括指令的存储介质，例如包括指令的存储器402，上述指令可由电子设备400的处理器401执行以完成上述方法。可选地，存储介质可以是非临时性计算机可读存储介质，例如，所述非临时性计算机可读存储介质可以是只读存储器(Read-Only Memory，ROM)、随机存取存储器(Random Access Memory，RAM)、CD-ROM、磁带、软盘和光数据存储设备等。

在一个示例中，参见图4，上述获取模块201的接收功能可以由图5中的接口单元405实现。上述获取模块201的处理功能、解析模块202和构建模块203均可以由图5中的处理器401调用存储器402中存储的计算机程序实现。

在示例性实施例中，本公开实施例还提供了一种包括一条或多条指令的计算机程序产品，该一条或多条指令可以由电子设备400的处理器401执行以完成上述方法。

需要说明的是，上述存储介质中的指令或计算机程序产品中的一条或多条指令被处理器401执行时实现上述方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。

本领域技术人员在考虑说明书及实践这里公开的发明后，将容易想到本公开的其它实施方案。本公开旨在涵盖本公开的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的，本公开的真正范围和精神由下面的权利要求指出。

应当理解的是，本公开并不局限于上面已经描述并在附图中示出的精确结构，并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求来限制。

Claims (12)

1.一种虚拟形象模型生成方法，其特征在于，所述方法包括：

获取用于描述虚拟形象正视图的分层文件，所述分层文件包括多个图层，所述图层用于描述所述虚拟形象中一个部位的部分或全部；

解析所述分层文件得到每个图层的图层信息，所述图层信息至少包括：所述图层的位置、所述图层的尺寸以及所述图层的分组标识，所述位置用于表征所述图层在所述多个图层中的空间位置，所述分组标识用于指示所述图层所属的分组；一个分组包括至少一个图层，一个分组中的图层对应所述虚拟形象的同一部位；

根据所述每个图层的图层信息分别构建每个分组中的图层对应所述虚拟形象的部位的中间模型；

根据所述每个图层的位置、尺寸以及所述虚拟形象的每个部位的中间模型，构建对应于所述虚拟形象的虚拟形象模型；

所述根据所述每个图层的图层信息，分别构建所述每个分组中的图层对应所述虚拟形象的部位的中间模型，具体包括：

根据所述每个图层的图层信息，预测属于所述每个分组中图层图像的像素点的深度信息；

根据所述深度信息,构建所述每个分组中的图层对应所述虚拟形象的部位的初步模型；

获取所述初步模型在所述虚拟形象面部所在平面的正投影图像的关键点的位置与所述每个分组中图层图像对应关键点的位置的差异值；

根据所述差异值调整所述初步模型，得到所述每个分组中的图层对应所述虚拟形象的部位的中间模型。

2.根据权利要求1所述的方法，其特征在于，所述根据所述每个图层的图层信息分别构建每个分组中的图层对应所述虚拟形象的部位的中间模型，包括：

响应于所述每个图层的图层信息的预设规则，根据所述每个图层的图层信息，分别构建所述每个分组中的图层对应所述虚拟形象的部位的中间模型。

3.根据权利要求2所述的方法，其特征在于，

所述预设规则包括：所述每个图层所属分组的分组标识与预设的分组标识一致、用于描述所述虚拟形象的部位的图层的数量与预设数量一致、用于描述所述虚拟形象的部位的图层的位置与预设位置相匹配中的至少一种。

4.根据权利要求1-3任一项所述的方法，其特征在于，所述方法还包括：

获取所述虚拟形象的面部特征点；

根据所述面部特征点，确定所述虚拟形象的表情参数；

使用所述表情参数调整所述面部特征点的位置，得到所述虚拟形象模型的表情信息。

5.根据权利要求1-3任一项所述的方法，其特征在于，所述根据所述每个图层的位置、尺寸以及所述虚拟形象的每个部位的中间模型，构建对应于所述虚拟形象的虚拟形象模型，包括：

将所述虚拟形象的每个部位的中间模型组合为所述虚拟形象的初步模型；

将所述每个部位的中间模型之间的位置比例，调整为与所述每个图层所描述部位之间的位置比例一致，将所述每个部位的中间模型之间的尺寸比例，调整为与所述每个图层所描述部位之间的尺寸比例一致，得到所述虚拟形象模型。

6.一种虚拟形象模型生成装置，其特征在于，包括：

获取模块，被配置为获取用于描述虚拟形象正视图的分层文件，所述分层文件包括多个图层，所述图层用于描述所述虚拟形象中一个部位的部分或全部；

解析模块，被配置为解析所述分层文件得到每个图层的图层信息，所述图层信息至少包括：所述图层的位置、所述图层的尺寸以及所述图层的分组标识，所述位置用于表征所述图层在所述多个图层中的空间位置，所述分组标识用于指示所述图层所属的分组；一个分组包括至少一个图层，一个分组中的图层对应所述虚拟形象的同一部位；

构建模块，被配置为根据所述每个图层的图层信息分别构建每个分组中的图层对应所述虚拟形象的部位的中间模型，根据所述每个图层的位置、尺寸以及所述虚拟形象的每个部位的中间模型，构建对应于所述虚拟形象的虚拟形象模型；

所述构建模块具体被配置为：

根据所述每个图层的图层信息，预测属于所述每个分组中图层图像的像素点的深度信息；根据所述深度信息,构建所述每个分组中的图层对应所述虚拟形象的部位的初步模型；

所述获取模块还被配置为：获取所述初步模型在所述虚拟形象面部所在平面的正投影图像的关键点的位置与所述每个分组中图层图像对应关键点的位置的差异值；

所述构建模块具体被配置为：根据所述差异值调整所述初步模型，得到所述每个分组中的图层对应所述虚拟形象的部位的中间模型。

7.根据权利要求6所述的生成装置，其特征在于，所述构建模块具体被配置为：

响应于所述每个图层的图层信息的预设规则，根据所述每个图层的图层信息，分别构建所述每个分组中的图层对应所述虚拟形象的部位的中间模型。

8.根据权利要求7所述的生成装置，其特征在于，所述预设规则包括：所述每个图层所属分组的分组标识与预设的分组标识一致、用于描述所述虚拟形象的部位的图层的数量与预设数量一致、用于描述所述虚拟形象的部位的图层的位置与预设位置相匹配中的至少一种。

9.根据权利要求6-8任一项所述的生成装置，其特征在于，所述获取模块还被配置为：

获取所述虚拟形象的面部特征点；

根据所述面部特征点，确定所述虚拟形象的表情参数；

使用所述表情参数调整所述面部特征点的位置，得到所述虚拟形象模型的表情信息。

10.根据权利要求6-8任一项所述的生成装置，其特征在于，所述构建模块具体被配置为：

将所述虚拟形象的每个部位的中间模型组合为所述虚拟形象的初步模型；

将所述每个部位的中间模型之间的位置比例，调整为与所述每个图层所描述部位之间的位置比例一致，将所述每个部位的中间模型之间的尺寸比例，调整为与所述每个图层所描述部位之间的尺寸比例一致，得到所述虚拟形象模型。

11.一种电子设备，其特征在于，包括：

处理器和用于存储所述处理器可执行指令的存储器；其中，所述处理器被配置为执行所述可执行指令，以实现如权利要求1-5任一项所述的方法。

12.一种计算机可读存储介质，其特征在于，当所述计算机可读存储介质中的指令由电子设备的处理器执行时，使得所述电子设备能够执行如权利要求1-5任一项所述的方法。