CN114445528A - 虚拟形象生成方法、装置、电子设备及存储介质 - Google Patents

Abstract

本公开提供了一种虚拟形象生成方法、装置、电子设备及存储介质，涉及图像处理技术领域，尤其涉及虚拟/增强现实技术领域。具体实现方案为：基于待生成图像中头部的生物学信息和配饰信息，确定所述待生成图像对应的三维虚拟形象的头部的生物学类型和配饰类型；获取与所述头部的生物学类型对应的第一三维模型，以及与所述配饰类型对应的第二三维模型；基于所述第一三维模型和所述第二三维模型，生成所述三维虚拟形象。

Description

虚拟形象生成方法、装置、电子设备及存储介质

技术领域

本公开涉及图像处理技术领域，尤其涉及虚拟/增强现实领域的虚拟形象生成方法、装置、电子设备及存储介质。

背景技术

随着人工智能技术和5G的发展，越来越多的虚拟人物出现在短视频、直播、虚拟助手、虚拟客服等场景。其中用户对于个性化、人格化的虚拟人物有了进一步的需求，用户希望形象生动可人，活泼灵动。随着需求的增长，市面传统的虚拟形象方案，不能很好的满足市场的需求。

发明内容

本公开提供了一种虚拟形象生成方法、装置、电子设备以及存储介质。

根据本公开的第一方面，提供了一种虚拟形象生成方法，包括：

基于待生成图像中头部的生物学信息和配饰信息，确定所述待生成图像对应的三维虚拟形象的头部的生物学类型和配饰类型；

获取与所述头部的生物学类型对应的第一三维模型，以及与所述配饰类型对应的第二三维模型；

基于所述第一三维模型和所述第二三维模型，生成所述三维虚拟形象。

根据本公开的第二方面，提供了一种虚拟形象生成装置，包括：

确定单元，用于基于待生成图像中头部的生物学信息和配饰信息，确定所述待生成图像对应的三维虚拟形象的头部的生物学类型和配饰类型；

获取单元，用于获取与所述头部的生物学类型对应的第一三维模型，以及与所述配饰类型对应的第二三维模型；

生成单元，用于基于所述第一三维模型和所述第二三维模型，生成所述三维虚拟形象。

本公开第三方面提供一种电子设备，包括：至少一个处理器；以及与所述至少一个处理器通信连接的存储器；其中，所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行上述所述的信息处理方法。

本公开第四方面提供一种存储有计算机指令的非瞬时计算机可读存储介质，其中，所述计算机指令用于使所述计算机执行上述所述的信息处理方法。

本公开第五方面提供一种计算机程序产品，包括计算机程序/指令，所述计算机程序/指令在被处理器执行时实现上述所述的信息处理方法。

应当理解，本部分所描述的内容并非旨在标识本公开的实施例的关键或重要特征，也不用于限制本公开的范围。本公开的其它特征将通过以下的说明书而变得容易理解。

附图说明

附图用于更好地理解本方案，不构成对本公开的限定。其中：

图1示出了本公开实施例提供的虚拟形象生成方法的一种可选流程示意图；

图2示出了本公开实施例提供的虚拟形象生成方法的另一种可选流程示意图；

图3示出了本公开实施例提供的虚拟形象生成方法的又一种可选流程示意图；

图4示出了本公开实施例提供的确定待生成图像的三维发型模型的可选示意图；

图5示出了本公开实施例提供的虚拟形象生成方法的还一种可选流程示意图；

图6示出了本公开实施例提供的虚拟形象生成装置的一种可选结构示意图；

图7示出了可以用来实施本公开的实施例的示例电子设备的示意性框图。

具体实施方式

以下结合附图对本公开的示范性实施例做出说明，其中包括本公开实施例的各种细节以助于理解，应当将它们认为仅仅是示范性的。因此，本领域普通技术人员应当认识到，可以对这里描述的实施例做出各种改变和修改，而不会背离本公开的范围和精神。同样，为了清楚和简明，以下的描述中省略了对公知功能和结构的描述。

图1示出了本公开实施例提供的虚拟形象生成方法的一种可选流程示意图，将根据各个步骤进行说明。

步骤S101，基于待生成图像中头部的生物学信息和配饰信息，确定所述待生成图像对应的三维虚拟形象的头部的生物学类型和配饰类型。

在一些实施例中，虚拟形象生成装置(以下简称装置)基于待生成图像中包括的头部的生物学信息和配饰信息，确定所述待生成图像对应的三维虚拟形象的头部的生物学类型和配饰类型。

具体实施时，所述装置可以预先基于不同的头部的生物学信息(以及所述头部的生物学信息所包括的不同类型的参数的组合)，确定对应的三维虚拟形象的头部的生物学类型；和/或，所述装置可以预先基于不同的配饰信息(以及所述配饰信息所包括的不同类型的参数的组合)，确定对应的三维虚形象的配饰类型。

例如，所述装置可以预先基于不同的头部的生物学信息所包括的不同类型参数进行组合，确认N种头部的生物学类型；基于所述待生成图像中头部的生物学信息，从所述N种头部的生物学类型中，确定所述待生成图像对应的三维虚拟形象的头部的生物学类型。

步骤S102，获取与所述头部的生物学类型对应的第一三维模型，以及与所述配饰类型对应的第二三维模型。

在一些实施例中，所述装置可以预先基于不同的所述头部的生物学类型，生成对应的所述三维头部模型；以及，基于不同的所述配饰类型，生成对应的所述三维配饰模型。所述装置还可以建立所述头部的生物学类型与三维头部模型之间的对应关系；以及，建立所述配饰类型与三维配饰模型之间的对应关系。

在一些实施例中，所述装置基于所述头部的生物学类型与三维头部模型之间的对应关系，和所述待生成图像中的所述头部的生物学类型，获取与所述头部的生物学类型对应的第一三维模型；以及，基于所述配饰类型与三维配饰模型之间的对应关系，和所述待生成图像中的所述配饰类型，获取与所述配饰类型对应的所述第二三维模型。

如此，通过所述头部的生物学类型与三维头部模型之间的对应关系；以及，所述配饰类型与三维配饰模型之间的对应关系，可以基于所述待生成的图像快速匹配到对应的三维头部模型和三维配饰模型。

步骤S103，基于所述第一三维模型和所述第二三维模型，生成所述三维虚拟形象。

在一些实施例中，所述装置获取所述第一三维模型和所述第二三维模型之后，可以结合基于所述待生成图像对应生成的三维五官模型，和三维身体模型，生成所述待生成图像对应的三维虚拟形象。

其中，所述三维虚拟形象可以应用于短视频、直播、车载、游戏、虚拟客服和虚拟助手等场景。

如此，通过本申请实施例提供的虚拟形象生成方法，基于待生成图像中头部的生物学信息和配饰信息，确定所述待生成图像对应的三维虚拟形象的头部的生物学类型和配饰类型；获取与所述头部的生物学类型对应的第一三维模型，以及与所述配饰类型对应的第二三维模型；基于所述第一三维模型和所述第二三维模型，生成所述三维虚拟形象。无需生成默认的头部的生物学模型和配饰模型，由客户后期手动选择适合的头部的生物学模型和配饰模型；可以直接基于用户提供的待生成图像中包括的头部的生物学信息和配饰信息，生成与待生成图像中的头部的生物学信息和配饰信息对应的三维虚拟形象，提升三维虚拟形象的生成效率和用户体验。

图2示出了本公开实施例提供的虚拟形象生成方法的另一种可选流程示意图，将根据各个步骤进行说明。

步骤S201，训练识别头部的生物学类型的模型。

在一些实施例中，头部的生物学信息可以包括头发的信息和/或脸型信息。虚拟形象生成装置(以下简称装置)可以基于所述发型信息和脸型信息分别训练不同的模型，也可以基于所述发型信息和脸型信息训练同一个模型。本公开实施例中，以所述装置训练基于所述发型信息和脸型信息训练同一个模型进行说明。

在一些实施例中，所述装置获取第一样本集；基于所述第一样本集中头发的信息，确定所述第一样本集中各样本图像对应的标注发型类型；基于所述第一样本集中脸型的信息，确定所述第一样本集中各样本图像对应的标注脸型类型。将所述第一样本集中各样本图像输入至所述识别头部的生物学类型的模型中，获取所述第一样本集中各样本图像的预测发型类型和预测脸型类型；基于所述标注发型类型和所述预测发型类型之间的差异，以及所述标注脸型类型和所述预测脸型类型之间的差异调整所述识别发型类型的模型的参数；直至所述标注发型类型和所述预测发型类型之间的差异，以及所述标注脸型类型和所述预测脸型类型之间的差异达到最小或不变，确认所述识别头部的生物学类型的模型训练完成。

其中，所述识别头部的生物学类型的模型输出的识别结果用于生成对应的三维发型模型和三维脸型模型，所述三维发型模型和所述三维脸型模型用于生成三维虚拟形象；所述头发的信息包括以下至少之一：头发的长度、头发的状态、头发的弯曲度以及前额是否有头发。

步骤S202，训练识别配饰类型的模型。

在一些实施例中，所述配饰可以包括眼镜和饰品；所述饰品可以至少包括耳饰、颈饰、鼻饰和唇饰。所述装置可以基于所述眼镜信息和所述饰品信息分别训练不同的模型，也可以基于所述眼镜信息和所述饰品信息训练同一个模型。本公开实施例中，以所述装置训练基于所述眼镜信息和饰品信息训练同一个模型进行说明。

在一些实施例中，获取第二样本集；基于所述第二样本集中眼镜的信息，确定所述第二样本集中各样本图像对应的标注眼镜类型；基于所述第二样本集中饰品的信息，确定所述第二样本集中各样本图像对应的标注饰品类型；将所述第二样本集中各样本图像输入至识别配饰类型的模型中，获取所述第二样本集中各样本图像的预测眼镜类型和预测饰品类型；基于所述标注眼镜类型和所述预测眼镜类型之间的差异，以及所述标注饰品类型和所述预测饰品类型之间的差异，调整所述识别配饰类型的模型的参数；直至所述标注眼镜类型和所述预测眼镜类型之间的差异，以及所述标注饰品类型和所述预测饰品类型之间的差异达到最小或不变，确认所述识别配饰类型的模型训练完成。

其中，所述识别配饰类型的模型输出的识别结果用于生成对应的三维配饰模型，所述三维配饰模型用于生成三维虚拟形象；所述眼镜的信息包括以下至少之一：所述眼镜的材质、所述眼镜的形状、所述眼镜的镜片类型、所述眼镜的框线类型和所述眼镜的颜色；所述饰品的信息包括以下至少之一：所述饰品的材质、所述饰品的形状、所述饰品的长度和所述饰品的颜色。

步骤S203，将待生成图像输入至识别头部的生物学类型的模型和识别配饰类型的模型，确定待生成图像对应的三维虚拟形象的头部的生物学类型和配饰类型。

在一些实施例中，所述装置将待生成图像输入至识别头部的生物学类型的模型和识别配饰类型的模型，确定待生成图像对应的三维虚拟形象的头部的生物学类型和配饰类型。

步骤S204，获取与所述头部的生物学类型对应的第一三维模型，以及与所述配饰类型对应的第二三维模型。

在一些实施例中，所述装置可以预先基于不同的所述头部的生物学类型，生成对应的所述三维头部模型；以及，基于不同的所述配饰类型，生成对应的所述三维配饰模型。所述装置还可以建立所述头部的生物学类型与三维头部模型之间的对应关系；以及，建立所述配饰类型与三维配饰模型之间的对应关系。

在一些实施例中，所述装置基于所述头部的生物学类型与三维头部模型之间的对应关系，和所述待生成图像中的所述头部的生物学类型，获取与所述头部的生物学类型对应的第一三维模型；以及，基于所述配饰类型与三维配饰模型之间的对应关系，和所述待生成图像中的所述配饰类型，获取与所述配饰类型对应的所述第二三维模型。

步骤S205，基于所述第一三维模型和所述第二三维模型，生成所述三维虚拟形象。

在一些实施例中，所述装置获取所述第一三维模型和所述第二三维模型之后，可以结合基于所述待生成图像对应生成的三维五官模型，和三维身体模型，生成所述待生成图像对应的三维虚拟形象。

其中，所述三维虚拟形象可以应用于短视频、直播、车载、游戏、虚拟客服和虚拟助手等场景。

如此，通过本申请实施例提供的虚拟形象生成方法，通过识别头部的生物学类型的模型和识别配饰类型的模型，可以提升确定待生成图像中头部的生物学类型和配饰的生物学类型，提升三维虚拟形象的生成效率，此外，通过本公开实施例提供的虚拟形象生成方法，无需生成默认的头部的生物学模型和配饰模型，由客户后期手动选择适合的头部的生物学模型和配饰模型；可以直接基于用户提供的待生成图像中包括的头部的生物学信息和配饰信息，生成与待生成图像中的头部的生物学信息和配饰信息对应的三维虚拟形象，提升三维虚拟形象的生成效率和用户体验。

图3示出了本公开实施例提供的虚拟形象生成方法的又一种可选流程示意图，图4示出了本公开实施例提供的确定待生成图像的三维发型模型的可选示意图；将根据各个步骤进行说明。

步骤S301，基于待生成图像中头发的信息，确定所述待生成图像对应的三维虚拟形象的发型类型。

在一些实施例中，所述头发的信息包括以下至少之一：所述头发的长度、所述头发的状态、所述头发的弯曲度以及待生成图像中人像的前额是否有头发。其中，所述头发的长度包括女性短发、女性中长发、女性长发、男性短发、男性中长发和男性长发；其中，男性短发还包括光头和寸头；所述头发的状态包括男性头发状态和女性头发状态；其中，所述男性头发状态包括分区状态和男性束发状态；所述分区状态包括五五分、三七分和不分区；所述男性束发状态包括男性未束发和男性束发；所述女性头发状态包括女性未束发和女性束发；所述女性束发包括双马尾、单马尾、麻花辫和盘发，以及所述双马尾、单马尾、麻花辫和盘发中至少两种的组合；所述头发的弯曲度包括直发和卷发。

在一些实施例中，所述装置可以预先基于所述头发的信息，将女性的发型根据头发的长度、头发的状态、头发的弯曲度以及前额是否有刘海分为N个类型；将男性的发型根据头发的长度、头发的状态、头发的弯曲度以及前额是否有刘海分为M个类型；基于所述待生成图像中头发的信息，与所述预先划分的发型类型进行匹配，确定所述待生成图像对应的三维虚拟形象的发型类型。

在另一些实施例中，为了生成与所述待生成图像中发型更加相符的三维发型模型，对于单马尾、双马尾、麻花辫和盘发等需要头部侧面和后面信息辅助才能进一步精准确定发型的情况，所述装置还可以获取所述待生成图像对应的侧视图像和后视图像。

在一些可选实施例中，所述装置还可以基于脸型信息将脸型分为K个类型，如圆形脸、杏仁形脸、卵圆形脸、长圆形脸、方形脸、长方形脸、菱形脸和三角形脸；基于所述待生成图像中脸型的信息，与预先划分的脸型类型进行匹配，确定所述待生成图像对应的三维虚拟形象的脸型类型。

通过本公开实施例中，对头发的信息中包括的不同参数进行细化，再对细化后的结果进行组合，保证最终确定的N个女性发型类型和M个男性发型类型可以覆盖到大部分人群，提升本公开提供的虚拟形象生成方法的应用范围。

步骤S302，获取与所述发型类型对应的三维发型模型。

在一些实施例中，所述装置基于预先划分的女性发型的N个类型、男性发型的M个类型生成对应的三维发型模型，并确认所述发型类型与三维发型模型之间的对应关系。

在一些实施例中，所述装置基于所述待生成图像中的发型类型，和所述发型类型与三维发型模型之间的对应关系，确定所述待生成图像对应的三维发型模型。

如图4所示，确定待生成图像中的发型的信息包括：女性长发、未束发、卷发且无刘海(前额没有刘海)对应的发型类型为“发型类型m”，确定所述“发型类型m”所对应的三维发型模型，为所述待生成图像对应的三维发型模型。

在另一些实施例中，所述装置还可以，基于预先划分的K个脸型类型，生成对应的三维脸型模型，并确认所述脸型类型与三维脸型模型之间的对应关系。

在另一些实施例中，所述装置基于所述待生成图像中的脸型类型，和所述脸型类型与三维脸型模型之间的对应关系，确定所述待生成图像对应的三维脸型模型。

步骤S303，基于所述三维发型模型，生成所述三维虚拟形象。

在一些实施例中，所述装置基于所述三维发型模型和/或三维脸型模型，以及基于所述待生成图像对应生成的三维五官模型、三维身体模型和三维配饰模型，生成所述待生成图像对应的三维虚拟形象。

如此，通过本申请实施例提供的虚拟形象生成方法，无需先生成默认的三维发型模型和/或三维脸型模型，再由客户后期手动选择适合的三维发型模型和/或三维脸型模型；可以直接基于用户提供的待生成图像中包括的发型信息和/或脸型信息，生成与待生成图像中的发型信息和/或脸型信息对应的三维虚拟形象，提升三维虚拟形象的生成效率和用户体验。

图5示出了本公开实施例提供的虚拟形象生成方法的还一种可选流程示意图，将根据各个步骤进行说明。

步骤S401，基于待生成图像中配饰的信息，确定所述待生成图像对应的三维虚拟形象的配饰类型。

在一些实施例中，所述配饰可以包括眼镜和/或饰品；所述饰品可以至少包括耳饰、颈饰、鼻饰和唇饰；所述配饰的信息可以包括眼镜的信息和/或饰品的信息。所述眼镜的信息包括以下至少之一：所述眼镜的材质、所述眼镜的形状、所述眼镜的镜片类型、所述眼镜的框线类型和所述眼镜的颜色；所述饰品的信息包括以下至少之一：所述饰品的材质、所述饰品的形状、所述饰品的长度和所述饰品的颜色。

在一些实施例中，所述眼镜的材质包括板材和金属；所述眼镜的形状包括圆形、方形和不规则形状；所述眼镜的镜片类型包括有颜色类型和无颜色类型；所述眼镜的框线类型包括全框线类型、无框线类型、上框线类型和下框线类型；所述眼镜的颜色包括所述眼镜镜架的颜色和/或所述眼镜镜片的颜色。所述饰品的材质包括金属、化纤、珠宝和高分子聚合物；所述饰品的形状包括圆形、椭圆形、三角形、四边形、多边形和不规则形状。

在一些实施例中，所述装置可以预先基于所述眼镜的信息，根据眼镜的材质、形状、镜片类型、框线类型和颜色分为X个类型；基于所述饰品的信息，根据饰品的材质、饰品的形状、饰品的长度和饰品的颜色分为Y个类型；基于待生成图像中配饰的信息，与所述预先划分的眼镜类型和/或饰品类型进行匹配，确定所述待生成图像对应的三维虚拟形象的眼镜类型和/或饰品类型。

通过本公开实施例中，对眼镜的信息和饰品的信息中包括的不同参数进行细化，再对细化后的结果进行组合，保证最终确定的X个眼镜类型和Y个饰品类型可以覆盖到大部分人群，提升本公开提供的虚拟形象生成方法的应用范围。

步骤S402，获取与所述配饰类型对应的三维配饰模型。

在一些实施例中，所述装置基于预先划分的眼镜的X个类型生成对应的三维眼镜模型，并确认所述眼镜类型与三维眼镜模型之间的对应关系。

在一些实施例中，所述装置基于所述待生成图像中的眼镜类型，和所述眼镜类型与三维眼镜模型之间的对应关系，确定所述待生成图像对应的三维眼镜模型。

在另一些实施例中，所述装置还可以基于预先划分的Y个饰品类型，生成对应的三维饰品模型，并确认所述饰品类型与三维饰品模型之间的对应关系。

在另一些实施例中，所述装置基于所述待生成图像中的饰品类型，和所述饰品类型与三维饰品模型之间的对应关系，确定所述待生成图像对应的三维饰品模型。

步骤S403，基于所述三维配饰模型，生成所述三维虚拟形象。

在一些实施例中，所述装置基于所述三维眼镜模型和/或三维饰品模型，以及基于所述待生成图像对应生成的三维五官模型、三维身体模型、三维发型模型和三维脸型模型，生成所述待生成图像对应的三维虚拟形象。

如此，通过本申请实施例提供的虚拟形象生成方法，无需先生成默认的三维眼镜模型和/或三维饰品模型，再由客户后期手动选择适合的三维眼镜模型和/或三维饰品模型；可以直接基于用户提供的待生成图像中包括的眼镜信息和/或饰品信息，生成与待生成图像中的眼镜信息和/或饰品信息对应的三维虚拟形象，提升三维虚拟形象的生成效率和用户体验。

图7示出了本公开实施例提供的虚拟形象生成装置的一种可选结构示意图，将根据各个部分进行说明。

在一些实施例中，虚拟形象生成装置500包括确定单元501、获取单元502和生成单元。

所述确定单元501，用于基于待生成图像中头部的生物学信息和配饰信息，确定所述待生成图像对应的三维虚拟形象的头部的生物学类型和配饰类型；

所述获取单元502，用于获取与所述头部的生物学类型对应的第一三维模型，以及与所述配饰类型对应的第二三维模型；

所述生成单元，用于基于所述第一三维模型和所述第二三维模型，生成所述三维虚拟形象。

在一些实施例中，所述确定单元501，在获取与所述头部的生物学类型对应的第一三维模型，以及与所述配饰类型对应的第二三维模型之前，还用于建立所述头部的生物学类型与三维头部模型之间的对应关系；以及，建立所述配饰类型与三维配饰模型之间的对应关系。

所述获取单元502，具体用于基于所述头部的生物学类型与三维头部模型之间的对应关系，和所述待生成图像中的所述头部的生物学类型，获取与所述头部的生物学类型对应的第一三维模型；以及，基于所述配饰类型与三维配饰模型之间的对应关系，和所述待生成图像中的所述配饰类型，获取与所述配饰类型对应的所述第二三维模型。

所述确定单元501，在所述获取与所述头部的生物学类型对应的第一三维模型，以及与所述配饰类型对应的第二三维模型之前，还用于基于不同的所述头部的生物学类型，生成对应的所述三维头部模型；基于不同的所述配饰类型，生成对应的所述三维配饰模型。

在一些实施例中，所述头部的生物学信息包括：

头发的信息和/或脸型的信息；

其中，所述头发的信息包括以下至少之一：所述头发的长度、所述头发的状态、所述头发的弯曲度以及待生成图像中人像的前额是否有头发；所述脸型的信息包括以下至少之一：圆形脸、杏仁形脸、卵圆形脸、长圆形脸、方形脸、长方形脸、菱形脸和三角形脸。

在一些实施例中，所述配饰信息包括：

眼镜的信息和/或饰品的信息；

所述眼镜的信息包括以下至少之一：所述眼镜的材质、所述眼镜的形状、所述眼镜的镜片类型、所述眼镜的框线类型和所述眼镜的颜色；

所述饰品的信息包括以下至少之一：所述饰品的材质、所述饰品的形状、所述饰品的长度和所述饰品的颜色。

在一些实施例中，所述头发的长度包括女性短发、女性中长发、女性长发、男性短发、男性中长发和男性长发；其中，男性短发还包括光头和寸头；

所述头发的状态包括男性头发状态和女性头发状态；其中，所述男性头发状态包括分区状态和男性束发状态；所述分区状态包括五五分、三七分和不分区；所述男性束发状态包括男性未束发和男性束发；所述女性头发状态包括女性未束发和女性束发；所述女性束发包括双马尾、单马尾、麻花辫和盘发，以及所述双马尾、单马尾、麻花辫和盘发中至少两种的组合；

所述头发的弯曲度包括直发和卷发。

在一些实施例中，所述眼镜的材质包括板材和金属；

所述眼镜的形状包括圆形、方形和不规则形状；

所述眼镜的镜片类型包括有颜色类型和无颜色类型；

所述眼镜的框线类型包括全框线类型、无框线类型、上框线类型和下框线类型；

所述眼镜的颜色包括所述眼镜镜架的颜色和/或所述眼镜镜片的颜色。

在一些实施例中，所述饰品的材质包括金属、化纤、珠宝和高分子聚合物；

所述饰品的形状包括圆形、椭圆形、三角形、四边形、多边形和不规则形状。

本公开的技术方案中，所涉及的用户个人信息的获取，存储和应用等，均符合相关法律法规的规定，且不违背公序良俗。

根据本公开的实施例，本公开还提供了一种电子设备、一种可读存储介质和一种计算机程序产品。

图7示出了可以用来实施本公开的实施例的示例电子设备800的示意性框图。电子设备旨在表示各种形式的数字计算机，诸如，膝上型计算机、台式计算机、工作台、个人数字助理、服务器、刀片式服务器、大型计算机、和其它适合的计算机。电子设备还可以表示各种形式的移动装置，诸如，个人数字处理、蜂窝电话、智能电话、可穿戴设备和其它类似的计算装置。本文所示的部件、它们的连接和关系、以及它们的功能仅仅作为示例，并且不意在限制本文中描述的和/或者要求的本公开的实现。

如图7所示，电子设备800包括计算单元801，其可以根据存储在只读存储器(ROM)802中的计算机程序或者从存储单元808加载到随机访问存储器(RAM)803中的计算机程序，来执行各种适当的动作和处理。在RAM 803中，还可存储设备800操作所需的各种程序和数据。计算单元801、ROM 802以及RAM 803通过总线804彼此相连。输入/输出(I/O)接口805也连接至总线804。

设备800中的多个部件连接至I/O接口805，包括：输入单元806，例如键盘、鼠标等；输出单元807，例如各种类型的显示器、扬声器等；存储单元808，例如磁盘、光盘等；以及通信单元809，例如网卡、调制解调器、无线通信收发机等。通信单元809允许设备800通过诸如因特网的计算机网络和/或各种电信网络与其他设备交换信息/数据。

计算单元801可以是各种具有处理和计算能力的通用和/或专用处理组件。计算单元801的一些示例包括但不限于中央处理单元(CPU)、图形处理单元(GPU)、各种专用的人工智能(AI)计算芯片、各种运行机器学习模型算法的计算单元、数字信号处理器(DSP)、以及任何适当的处理器、控制器、微控制器等。计算单元801执行上文所描述的各个方法和处理，例如虚拟形象生成方法。例如，在一些实施例中，虚拟形象生成方法可被实现为计算机软件程序，其被有形地包含于机器可读介质，例如存储单元808。在一些实施例中，计算机程序的部分或者全部可以经由ROM 802和/或通信单元809而被载入和/或安装到设备800上。当计算机程序加载到RAM 803并由计算单元801执行时，可以执行上文描述的虚拟形象生成方法的一个或多个步骤。备选地，在其他实施例中，计算单元801可以通过其他任何适当的方式(例如，借助于固件)而被配置为执行虚拟形象生成方法。

本文中以上描述的系统和技术的各种实施方式可以在数字电子电路系统、集成电路系统、场可编程门阵列(FPGA)、专用集成电路(ASIC)、专用标准产品(ASSP)、芯片上系统的系统(SOC)、负载可编程逻辑设备(CPLD)、计算机硬件、固件、软件、和/或它们的组合中实现。这些各种实施方式可以包括：实施在一个或者多个计算机程序中，该一个或者多个计算机程序可在包括至少一个可编程处理器的可编程系统上执行和/或解释，该可编程处理器可以是专用或者通用可编程处理器，可以从存储系统、至少一个输入装置、和至少一个输出装置接收数据和指令，并且将数据和指令传输至该存储系统、该至少一个输入装置、和该至少一个输出装置。

用于实施本公开的方法的程序代码可以采用一个或多个编程语言的任何组合来编写。这些程序代码可以提供给通用计算机、专用计算机或其他可编程数据处理装置的处理器或控制器，使得程序代码当由处理器或控制器执行时使流程图和/或框图中所规定的功能/操作被实施。程序代码可以完全在机器上执行、部分地在机器上执行，作为独立软件包部分地在机器上执行且部分地在远程机器上执行或完全在远程机器或服务器上执行。

在本公开的上下文中，机器可读介质可以是有形的介质，其可以包含或存储以供指令执行系统、装置或设备使用或与指令执行系统、装置或设备结合地使用的程序。机器可读介质可以是机器可读信号介质或机器可读储存介质。机器可读介质可以包括但不限于电子的、磁性的、光学的、电磁的、红外的、或半导体系统、装置或设备，或者上述内容的任何合适组合。机器可读存储介质的更具体示例会包括基于一个或多个线的电气连接、便携式计算机盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦除可编程只读存储器(EPROM或快闪存储器)、光纤、便捷式紧凑盘只读存储器(CD-ROM)、光学储存设备、磁储存设备、或上述内容的任何合适组合。

为了提供与用户的交互，可以在计算机上实施此处描述的系统和技术，该计算机具有：用于向用户显示信息的显示装置(例如，CRT(阴极射线管)或者LCD(液晶显示器)监视器)；以及键盘和指向装置(例如，鼠标或者轨迹球)，用户可以通过该键盘和该指向装置来将输入提供给计算机。其它种类的装置还可以用于提供与用户的交互；例如，提供给用户的反馈可以是任何形式的传感反馈(例如，视觉反馈、听觉反馈、或者触觉反馈)；并且可以用任何形式(包括声输入、语音输入或者、触觉输入)来接收来自用户的输入。

可以将此处描述的系统和技术实施在包括后台部件的计算系统(例如，作为数据服务器)、或者包括中间件部件的计算系统(例如，应用服务器)、或者包括前端部件的计算系统(例如，具有图形用户界面或者网络浏览器的用户计算机，用户可以通过该图形用户界面或者该网络浏览器来与此处描述的系统和技术的实施方式交互)、或者包括这种后台部件、中间件部件、或者前端部件的任何组合的计算系统中。可以通过任何形式或者介质的数字数据通信(例如，通信网络)来将系统的部件相互连接。通信网络的示例包括：局域网(LAN)、广域网(WAN)和互联网。

计算机系统可以包括客户端和服务器。客户端和服务器一般远离彼此并且通常通过通信网络进行交互。通过在相应的计算机上运行并且彼此具有客户端-服务器关系的计算机程序来产生客户端和服务器的关系。服务器可以是云服务器，也可以为分布式系统的服务器，或者是结合了区块链的服务器。

应该理解，可以使用上面所示的各种形式的流程，重新排序、增加或删除步骤。例如，本发公开中记载的各步骤可以并行地执行也可以顺序地执行也可以不同的次序执行，只要能够实现本公开公开的技术方案所期望的结果，本文在此不进行限制。

上述具体实施方式，并不构成对本公开保护范围的限制。本领域技术人员应该明白的是，根据设计要求和其他因素，可以进行各种修改、组合、子组合和替代。任何在本公开的精神和原则之内所作的修改、等同替换和改进等，均应包含在本公开保护范围之内。

Claims (13)

1.一种虚拟形象生成方法，包括：

基于待生成图像中头部的生物学信息和配饰信息，确定所述待生成图像对应的三维虚拟形象的头部的生物学类型和配饰类型；

获取与所述头部的生物学类型对应的第一三维模型，以及与所述配饰类型对应的第二三维模型；

基于所述第一三维模型和所述第二三维模型，生成所述三维虚拟形象。

2.根据权利要求1所述的方法，其中，所述获取与所述头部的生物学类型对应的第一三维模型，以及与所述配饰类型对应的第二三维模型之前，所述方法还包括：

建立所述头部的生物学类型与三维头部模型之间的对应关系；

建立所述配饰类型与三维配饰模型之间的对应关系。

3.根据权利要求2所述的方法，其中，所述获取与所述头部的生物学类型对应的第一三维模型，以及与所述配饰类型对应的第二三维模型，包括：

基于所述头部的生物学类型与三维头部模型之间的对应关系，和所述待生成图像中的所述头部的生物学类型，获取与所述头部的生物学类型对应的第一三维模型；

以及，基于所述配饰类型与三维配饰模型之间的对应关系，和所述待生成图像中的所述配饰类型，获取与所述配饰类型对应的所述第二三维模型。

4.根据权利要求1所述的方法，其中，所述获取与所述头部的生物学类型对应的第一三维模型，以及与所述配饰类型对应的第二三维模型之前，所述方法还包括：

基于不同的所述头部的生物学类型，生成对应的所述三维头部模型；

以及，基于不同的所述配饰类型，生成对应的所述三维配饰模型。

5.根据权利要求1所述的方法，其中，所述头部的生物学信息包括：

头发的信息和/或脸型的信息；

其中，所述头发的信息包括以下至少之一：所述头发的长度、所述头发的状态、所述头发的弯曲度以及待生成图像中人像的前额是否有头发；所述脸型的信息包括以下至少之一：圆形脸、杏仁形脸、卵圆形脸、长圆形脸、方形脸、长方形脸、菱形脸和三角形脸。

6.根据权利要求1所述的方法，其中，所述配饰信息包括：

眼镜的信息和/或饰品的信息；

所述眼镜的信息包括以下至少之一：所述眼镜的材质、所述眼镜的形状、所述眼镜的镜片类型、所述眼镜的框线类型和所述眼镜的颜色；

所述饰品的信息包括以下至少之一：所述饰品的材质、所述饰品的形状、所述饰品的长度和所述饰品的颜色。

7.根据权利要求5所述的方法，其中，

所述头发的长度包括女性短发、女性中长发、女性长发、男性短发、男性中长发和男性长发；其中，男性短发还包括光头和寸头；

所述头发的状态包括男性头发状态和女性头发状态；其中，所述男性头发状态包括分区状态和男性束发状态；所述分区状态包括五五分、三七分和不分区；所述男性束发状态包括男性未束发和男性束发；所述女性头发状态包括女性未束发和女性束发；所述女性束发包括双马尾、单马尾、麻花辫和盘发，以及所述双马尾、单马尾、麻花辫和盘发中至少两种的组合；

所述头发的弯曲度包括直发和卷发。

8.根据权利要求6所述的方法，其中，

所述眼镜的材质包括板材和金属；

所述眼镜的形状包括圆形、方形和不规则形状；

所述眼镜的镜片类型包括有颜色类型和无颜色类型；

所述眼镜的框线类型包括全框线类型、无框线类型、上框线类型和下框线类型；

所述眼镜的颜色包括所述眼镜镜架的颜色和/或所述眼镜镜片的颜色。

9.根据权利要求6所述的方法，其中，

所述饰品的材质包括金属、化纤、珠宝和高分子聚合物；

所述饰品的形状包括圆形、椭圆形、三角形、四边形、多边形和不规则形状。

10.一种虚拟形象生成装置，包括：

确定单元，用于基于待生成图像中头部的生物学信息和配饰信息，确定所述待生成图像对应的三维虚拟形象的头部的生物学类型和配饰类型；

获取单元，用于获取与所述头部的生物学类型对应的第一三维模型，以及与所述配饰类型对应的第二三维模型；

生成单元，用于基于所述第一三维模型和所述第二三维模型，生成所述三维虚拟形象。

11.一种电子设备，包括：

至少一个处理器；以及

与所述至少一个处理器通信连接的存储器；其中，

所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行权利要求1-9中任一项所述的方法。

12.一种存储有计算机指令的非瞬时计算机可读存储介质，其中，所述计算机指令用于使所述计算机执行根据权利要求1-9中任一项所述的方法。

13.一种计算机程序产品，包括计算机程序，所述计算机程序在被处理器执行时实现根据权利要求1-9中任一项所述的方法。

Images