CN111489426A - 表情生成方法、装置、设备和存储介质 - Google Patents

Abstract

本申请提供了一种表情生成方法、装置、设备和存储介质，涉及计算机技术领域。所述方法包括：生成目标对象的n个表情的高模模型，该n为正整数；对n个表情的高模模型进行模型转换处理，生成皱纹贴图；对皱纹贴图进行遮罩处理，生成遮罩贴图；根据皱纹贴图和遮罩贴图，对皱纹区域和与皱纹区域对应的皮肤区域进行皱纹融合处理，生成目标对象的具备皱纹细节的表情。相比于相关技术，本申请实施例提供的技术方案，通过基于表情的高模模型，经过一系列处理，最终对皱纹区域和与皱纹区域对应的皮肤区域进行皱纹融合处理，以生成目标对象的具备皱纹细节的表情，从而使得生成的表情可以展示更多的面部细节，更加具备真实度。

Description

表情生成方法、装置、设备和存储介质

技术领域

本申请实施例涉及计算机技术领域，特别涉及一种表情生成方法、装置、设备和存储介质。

背景技术

随着计算机技术的快速发展，表情的生成技术在游戏、虚拟现实、电影制作等领域等有着重要的用途。

在相关技术中，通常基于三维人脸模型生成不同的表情。通过建模得到人脸在三维空间中的人脸模型以及人脸模型上各个网格的数据，之后，通过调整人脸模型的网格数据，生成不同的表情。例如，对于皱眉表情，可以将眉头处的网格数据调整地更紧密，相对应的额头上远离眉头位置的网格数据调整地相对疏松。

在上述相关技术中，仅是通过调整网格数据生成不同的表情，并未关注到生成的表情的细节，使得生成的表情缺少真实度。

发明内容

本申请实施例提供了一种表情生成方法、装置、设备和存储介质，可使得生成的表情可以展示更多的面部细节，更加具备真实度。所述技术方案如下：

一方面，本申请实施例提供了一种表情生成方法，所述方法包括：

生成目标对象的n个表情的高模模型，所述n为正整数；

对所述n个表情的高模模型进行模型转换处理，生成皱纹贴图，所述皱纹贴图为具有皱纹细节的贴图；

对所述皱纹贴图进行遮罩处理，生成遮罩贴图，所述遮罩贴图用于表征所述皱纹贴图中的皱纹区域；

根据所述皱纹贴图和所述遮罩贴图，对所述皱纹区域和与所述皱纹区域对应的皮肤区域进行皱纹融合处理，生成所述目标对象的具备皱纹细节的表情。

另一方面，本申请实施例提供了一种表情生成装置，所述装置包括：

高模生成模块，用于生成目标对象的n个表情的高模模型，所述n为正整数；

转换处理模块，用于对所述n个表情的高模模型进行模型转换处理，生成皱纹贴图，所述皱纹贴图为具有皱纹细节的贴图；

遮罩处理模块，用于对所述皱纹贴图进行遮罩处理，生成遮罩贴图，所述遮罩贴图用于表征所述皱纹贴图中的皱纹区域；

表情生成模块，用于根据所述皱纹贴图和所述遮罩贴图，对所述皱纹区域和与所述皱纹区域对应的皮肤区域进行皱纹融合处理，生成所述目标对象的具备皱纹细节的表情。

再一方面，本申请实施例提供了一种计算机设备，所述计算机设备包括处理器和存储器，所述存储器中存储有至少一条指令、至少一段程序、代码集或指令集，所述至少一条指令、所述至少一段程序、所述代码集或指令集由所述处理器加载并执行以实现如上述方面所述的表情生成方法。

再一方面，本申请实施例提供了一种计算机可读存储介质，所述计算机可读存储介质中存储有至少一条指令、至少一段程序、代码集或指令集，所述至少一条指令、所述至少一段程序、所述代码集或指令集由处理器加载并执行以实现如上述方面所述的表情生成方法。

还一方面，本申请实施例提供了一种计算机程序产品，所述计算机程序产品被处理器执行时，用于实现上述表情生成方法。

本申请实施例提供的技术方案可以包括如下有益效果：

在生成表情的高模模型之后，进一步生成皱纹贴图和遮罩贴图，以便之后对皱纹区域和与皱纹区域对应的皮肤区域进行皱纹融合处理，生成目标对象的具备皱纹细节的表情。相比于相关技术中，仅是通过调整网格数据生成不同的表情，并未关注到生成的表情的细节。本申请实施例提供的技术方案，通过基于表情的高模模型，经过一系列处理，最终对皱纹区域和与皱纹区域对应的皮肤区域进行皱纹融合处理，以生成目标对象的具备皱纹细节的表情，从而使得生成的表情可以展示更多的面部细节，更加具备真实度。

附图说明

图1示例性示出了本申请一种表情生成方法的示意图；

图2是本申请一个实施例提供的表情生成方法的流程图；

图3是本申请另一个实施例提供的表情生成方法的流程图；

图4示例性示出了一种获取皱纹颜色贴图的示意图；

图5示例性示出了一种皱纹贴图的示意图；

图6示例性示出了一种生成遮罩贴图的示意图；

图7示例性示出了一种遮罩贴图的示意图；

图8示例性示出了一种调整贴图参数的示意图；

图9示例性示出了一种融合参数的示意图；

图10示例性示出了一种生成具备皱纹细节的表情的示意图；

图11示例性示出了一种具备皱纹细节的表情的示意；

图12是本申请一个实施例提供的表情生成装置的框图；

图13是本申请另一个实施例提供的表情生成装置的框图；

图14是本申请一个实施例提供的终端的结构框图；

图15是本申请一个实施例提供的服务器的结构示意图。

具体实施方式

为使本申请的目的、技术方案和优点更加清楚，下面将结合附图对本申请实施方式作进一步地详细描述。

首先，对本申请实施例中涉及的名词进行简要介绍：

1、虚幻引擎(Unreal Engine)：虚幻引擎是游戏引擎中的一种，游戏引擎是指一些已编写好的可编辑游戏系统或者一些互交式实时图像应用程序的核心组件，这些系统为游戏的开发人员提供各种设计游戏所需的各种工具。

在游戏应用程序的开发过程中，通常需要用到游戏引擎，以便开发人员能够比较容易和快速地设计出游戏应用程序。当在终端中运行游戏应用程序时，包含在该游戏应用程序中的游戏引擎首先被启动，然后该游戏引擎调用该游戏应用程序中的图像、声音或动画等资源，以实现该游戏应用程序中虚拟环境的搭建及显示。

虚幻引擎是由游戏公司EPIC开发的，是一个面向下一代游戏机和DirectX个人电脑的完整的游戏开发平台，提供了游戏开发者需要的大量的核心技术、数据生成工具和基础支持。虚幻引擎包括UE2(Unreal Engine 2，虚幻2)引擎、UE3(Unreal Engine 3，虚幻3)引擎、UE4(Unreal Engine 4，虚幻4)引擎，等等。

2、蓝图(BluePrints)：是虚幻引擎(如UE4引擎)读取的一类资源，包含了游戏应用程序中逻辑控制的脚本和配置参数，可以在虚幻引擎的蓝图编辑器中可视化编辑。通常蓝图资源包括关卡蓝图(Level BluePrints)和类蓝图(Class BluePrints)。其中，关卡蓝图用作关卡范围的全局事件图；通常每个关卡都有各自的关卡蓝图。类蓝图是创建门、开关、可收集物品、可摧毁场景等交互资源的理想类型。

3、贴图：是一张二维图像，可以呈现模型(高模模模型和低模模型)某个表面的信息。

4、遮罩：也称为蒙版，是指用白色或黑色将图像盖起来：其中，被纯白色盖住的部分完全显示，被纯黑色盖住的部分透明显示(也就是不显示)，把背景色罩住的部分透明输出。

本申请提供的表情生成方法可以应用于计算机设备中，该计算机设备是指具备图像和数据处理、文件处理和存储能力的电子设备，如PC(Personal Computer，个人计算机)或服务器。该计算机设备中可以安装有模型创建应用程序、图像处理应用程序，还可以安装有游戏应用程序。其中，游戏应用程序可以是如第三人称射击(Third Person Shooting，TPS)游戏、第一人称射击(First Person Shooting，FPS)游戏、多人在线战术竞技(Multiplayer Online Battle Arena，MOBA)游戏、多人枪战类生存游戏等等。

请参考图1，其示例性示出了本申请一种表情生成方法的示意图。首先，获取皱纹贴图10和遮罩贴图20；然后，进行材质设置以及相关参数调整，以确定皱纹区域静态效果30；之后，确定并调整皱纹区域与皱纹区域对应的皮肤区域的融合参数，实现皱纹区域的动态变化40；最后，使得目标对象能够展示具备皱纹细节的表情50。

下面，通过几个实施例对本申请技术方案进行介绍说明。

请参考图2，其示出了本申请一个实施例提供的表情生成方法的流程图。在本实施例中，主要以该方法应用于图1所示实施环境的计算机设备中来举例说明。该方法可以包括如下几个步骤：

步骤201，生成目标对象的n个表情的高模模型，该n为正整数。

用户可以运行计算机设备中安装的用于生成高模模型的应用程序，以生成目标对象的n个表情的高模模型。

上述目标对象可以是真实人物，也可以是动漫人物，还可以是动物等等，本申请实施例对此不作限定。

上述高模模型是三维模型中包含如颜色信息、置换信息、纹理坐标、细分表面等等丰富细节的模型表现形式。

以上述目标对象是真实人物为例，由于人脸是有若干骨骼、肌肉和表面皮肤组成，表情的产生依赖于上述各个组成部分，在做出各种表情(如恐惧，厌恶，微笑等等)时会表面皮肤上产生皱纹。例如做出恐惧表情时，额头上就会产生抬头纹。

步骤202，对n个表情的高模模型进行模型转换处理，生成皱纹贴图。

在得到上述多个表情的高模模型之后，可以对高模模型进行模型转换处理，以生成皱纹贴图。其中，上述皱纹贴图为具有皱纹细节的贴图。该皱纹贴图是一张二维图像，可以呈现高模模型某个表面的最终信息。

上述模型转换处理用于将高模模型转换成低模模型，并将低模模型展开以获取高模模型对应的低模贴图；之后，将表情的高模模型烘焙到各个高模模型对应的低模贴图上，得到各个表情的低模贴图。之后，即可对该表情的低模贴图进行皱纹区域的提取和覆盖，以生成上述皱纹贴图。其中，低模模型是指是三维模型中用于表现物体基本外形构造的模型表现形式，由于低模模型的组成结构较为简单，低模模型包含的多边形面较少，因此，该低模模型通常不具备高模模型的丰富细节。

关于上述对n个表情的高模模型进行模型转换处理，生成皱纹贴图的详细内容，在下文中进行介绍，此处不再赘述。

步骤203，对皱纹贴图进行遮罩处理，生成遮罩贴图。

在得到上述皱纹贴图之后，可以对该皱纹贴图进行遮罩处理，以生成遮罩贴图。其中，上述遮罩贴图用于表征皱纹贴图中的皱纹区域。

上述遮罩处理用于对皱纹贴图中的皱纹区域进行划分遮挡，以生成上述遮罩贴图。

关于上述对皱纹贴图进行遮罩处理，生成遮罩贴图，在下文中进行介绍，此处不再赘述。

步骤204，根据皱纹贴图和遮罩贴图，对皱纹区域和与皱纹区域对应的皮肤区域进行皱纹融合处理，生成目标对象的具备皱纹细节的表情。

在得到上述皱纹贴图和遮罩贴图之后，可以对皱纹区域和与皱纹区域对应的皮肤区域进行皱纹融合处理，以生成目标对象的具备皱纹细节的表情。

综上所述，本申请实施例提供的技术方案，在生成表情的高模模型之后，进一步生成皱纹贴图和遮罩贴图，以便之后对皱纹区域和与皱纹区域对应的皮肤区域进行皱纹融合处理，生成目标对象的具备皱纹细节的表情。相比于相关技术中，仅是通过调整网格数据生成不同的表情，并未关注到生成的表情的细节。本申请实施例提供的技术方案，通过基于表情的高模模型，经过一系列处理，最终对皱纹区域和与皱纹区域对应的皮肤区域进行皱纹融合处理，以生成目标对象的具备皱纹细节的表情，从而使得生成的表情可以展示更多的面部细节，更加具备真实度。

请参考图3，其示出了本申请另一个实施例提供的表情生成方法的流程图。在本实施例中，主要以该方法应用于图1所示实施环境的计算机设备中来举例说明。该方法可以包括如下几个步骤：

步骤301，生成目标对象的n个表情的高模模型，该n为正整数。

此步骤与上文图2实施例中步骤201的内容相同或类似，此处不再赘述。

步骤302，分别对n个表情的高模模型的表面执行拓扑处理，生成各个高模模型对应的低模贴图。

在得到目标对象的n个表情的高模模型之后，可以分别对每个表情的高模模型的表面执行拓扑处理，以生成该高模模型对应的低模贴图。

上述拓扑处理用于将高模模型转换为低模模型，并将低模模型展开以获取高模模型对应的低模贴图。由于高模模型通常具有大量的表面，而转换后的低模模型包含较少的表面，因此，该低模模型通常不具备高模模型的丰富细节；进一步，将低模模型展开后得到的高模模型对应的低模贴图也不具备丰富的细节。其中，拓扑是指模型的点线面布局、结构和连接情况。

对高模模型的表面执行拓扑处理，可以包括：调整高模模型表面的线、面的排布，将高模模型转换为低模模型，并对低模模型UV展开，从而得到高模模型对应的低模贴图。其中，UV展开是指根据线、面的排布，将低模模型的表面切开，并展开到二维平面。

上述低模模型具有XYZ三个坐标，用于精确记录低模模型的每个顶点的位置；UV展开后即将XYZ三个坐标转换到了UV坐标，该UV坐标则是根据线、面的排布，展开到二维平面后，顶点坐标投射到平面上的位置。其中，UV坐标是图像在显示器水平、垂直方向上的坐标。

步骤303，分别将n个表情的高模模型烘焙到各个高模模型对应的低模贴图上，得到各个表情的低模贴图。

上述烘焙是指将高模模型的细节信息渲染成贴图的方式。也就是说，通过将表情的高模模型烘焙到高模模型对应的低模贴图上，可以得到表情的低模贴图，该表情的低模贴图具有表情的高模模型中的丰富的细节信息。

可选地，上述表情的低模贴图可以包括颜色贴图、法线贴图和环境遮挡贴图。其中，颜色贴图是指包含高模模型的凹凸质感和UV结构信息的贴图；法线贴图(Normalmapping)是指模拟高模模型凹凸处光照效果贴图；环境光遮蔽贴图(Ambient Occlusion)，是指用来模型物体和物体相交或者靠近时遮挡周围漫反射光线的贴图，可以改善漏光、飘和阴影不实的效果，实现更好的图像细节。

步骤304，根据各个表情的低模贴图，生成皱纹贴图。

在得到上述各个表情的低模贴图之后，可以根据该各个表情的低模贴图，生成皱纹贴图。

可选地，上述皱纹贴图可以包括皱纹颜色贴图、皱纹法线贴图和皱纹环境遮挡贴图。

在这种情况下，上述根据各个表情的低模贴图，生成皱纹贴图，可以包括以下步骤：

(1)提取各个表情的颜色贴图中的皱纹区域；将各个表情的颜色贴图中的皱纹区域覆盖至目标对象的基础颜色贴图，得到皱纹颜色贴图；

(2)提取各个表情的法线贴图中的皱纹区域；将各个表情的法线贴图中的皱纹区域覆盖至目标对象的基础法线贴图，得到皱纹法线贴图；

(3)提取各个表情的环境遮挡贴图中的皱纹区域；将各个表情的环境遮挡贴图中的皱纹区域覆盖至目标对象的基础环境遮挡贴图，得到皱纹环境遮挡贴图。

其中，上述目标对象的基础颜色贴图是指目标对象无表情时的颜色贴图；上述目标对象的基础法线贴图是指目标对象无表情时的法线贴图；上述目标对象的基础环境遮挡贴图是指目标对象无表情时的环境遮挡贴图。

对于上述提取颜色贴图、法线贴图和环境遮挡贴图中的皱纹区域的方式相同或类似。

以提取颜色贴图中的皱纹区域为例进行说明。提取皱纹区域可以通过蒙版方式进行提取，提取的皱纹区域包括该皱纹区域中的皱纹纹路。例如，当表情为厌恶表情时，该厌恶表情的颜色贴图中的皱纹区域包括鼻头到鼻翼区域，该皱纹区域包括鼻头到鼻翼的皱纹纹路。当表情为恐惧表情时，该恐惧表情的颜色贴图中的皱纹区域包括额头区域，该皱纹区域包括额头的皱纹纹路。当表情为微笑表情时，该微笑表情的颜色贴图中的皱纹区域包括脸颊到眼部区域，该皱纹区域包括脸颊到眼部的皱纹纹路。

对于上述生成皱纹颜色贴图、皱纹法线贴图和皱纹环境遮挡贴的方式相同或类似。

同样，以生成皱纹法线贴图为例进行说明。在提取到各个表情的颜色贴图中的皱纹区域之后，可以将通过加深的方式将各个表情的颜色贴图中的皱纹区域覆盖至目标对象的基础颜色贴图，以生成皱纹颜色贴图。

示例性地，如图4所示，其示例性示出了一种获取皱纹颜色贴图的示意图。通过制作蒙版提取厌恶表情的皱纹区域41，包括鼻头到鼻翼的皱纹纹路；通过制作蒙版提取微笑表情的皱纹区域42，包括脸颊到眼部的皱纹纹路；通过制作蒙版提取恐惧表情的皱纹区域43，包括额头的皱纹纹路；通过制作蒙版继续提取微笑表情的另一个皱纹区域44，包括除了嘴巴的下部分脸的皱纹纹路；最后将四个皱纹区域通过加深覆盖到目标对象的基础颜色贴图45上，得到皱纹颜色贴图46。

示例性地，如图5所示，其示例性示出了皱纹贴图的示意图。其中，图5中(a)部分为皱纹颜色贴图；图5中(b)部分为皱纹法线贴图；图5中(c)部分为皱纹环境遮挡贴。

步骤305，对皱纹贴图进行蒙版遮挡处理，得到处理后的皱纹贴图。

在得到上述皱纹贴图之后，可以对该皱纹贴图进行蒙版遮挡处理，得到蒙版遮挡处理的皱纹贴图。经过蒙版遮挡处理的皱纹贴图只保留有需要的区域。

上述对皱纹贴图进行蒙版遮挡处理，是指用白色或黑色将皱纹贴图盖起来：其中，被纯白色盖住的部分完全显示，被纯黑色盖住的部分透明显示(也就是不显示)，把背景色罩住的部分透明输出。

需要说明的一点是，在一些其它实施例中，还可以对皱纹贴图进行能够实现与蒙版遮挡处理相同效果的处理，本申请实施例对此不作限定。

步骤306，将处理后的皱纹贴图拆分为m个通道，生成遮罩贴图，该m为正整数。

在得到上述处理后的皱纹贴图之后，可以将该处理后的皱纹贴图拆分为m个通道，以生成遮罩贴图，该遮罩贴图用于表征皱纹贴图中的皱纹区域。其中，每个通道对应于一个皱纹区域。

可选地，上述m个通道可以包括R通道、G通道、B通道和Alpha通道，每个通道表示一个皱纹区域。

示例性地，如图6所示，其示例性示出了一种生成遮罩贴图的示意图。首先，对皱纹贴图进行蒙版遮挡处理，得到处理后的皱纹贴图61；然后，将该处理后的皱纹贴图拆分到R通道62、G通道63、B通道64和Alpha通道65，生成遮罩贴图。

上述将处理后的皱纹贴图拆分为m个通道，可以将处理后的皱纹贴图中所包括的皱纹区域单独区分，以便更加明确每个皱纹区域的位置，进一步便于后续进行皱纹区域与皮肤的融合处理。

可选地，上述皱纹区域包括以下至少一项：左眉沟上方区域、右眉沟上方区域、左眉沟下方区域、右眉沟下方区域、左鼻子上方区域、右鼻子上方区域、左鼻唇沟区域、右鼻唇沟区域、左眼睑区域、右眼睑区域、左眉外侧上方区域、右眉外侧上方区域。

示例性地，如图7中(a)部分、(b)部分和(c)部分所示，可以生成3张遮罩贴图，总共包括12个通道，每个通道对应于一个皱纹区域。

当然，在一些其它示例中，还可以包括其它区域，本申请实施例对此不作限定。

步骤307，调整皱纹贴图和遮罩贴图的贴图参数。

在得到上述皱纹贴图和遮罩贴图之后，可以在虚幻引擎中为目标对象的材质球(shader)增加一些需要的管线设置，调整贴图参数，以便后续实现具备皱纹细节的表情。其中，上述贴图参数是指用于调整皱纹贴图和遮罩贴图的相关参数。

示例性地，如图8所示，其示例性示出了一种调整贴图参数的示意图。上述贴图参数81可以包括但不限于以下至少一项：皱纹融合的开关(Use Blend for test)、皱纹功能的开关(Use Wrinkle)、皱纹与皮肤整体的融合系数(BlendTest)、皱纹与皮肤整体的法线强度系数(NormalHeight)、皮肤粗糙度的强度系数(RoughnessScale)、皮肤次表面散射系数(SubsurfaceScale)、皱纹的法线强度系数(WrinkleNormalHeight)。

步骤308，确定皱纹区域与皱纹区域对应的皮肤区域的融合参数。

之后，可以在蓝图(材质蓝图)中确定皱纹区域与皱纹区域对应的皮肤区域的融合参数(wrinkleMap blend)，该融合参数用于表征皱纹区域与皱纹区域对应的皮肤区域的融合程度。

可选地，上述融合参数可以为一个常量，并在之后实现表情的动态变化过程中，可作为变量被调用。

示例性地，如图9所示，融合参数91可以在之后实现表情的动态变化过程中，作为变量被调用。

可选地，上述确定皱纹区域与皱纹区域对应的皮肤区域的融合参数，可以包括以下几个步骤：

(1)确定影响皱纹区域的关节对；

(2)计算关节对所包含的关节之间的相对距离；

(3)根据关节之间的相对距离，确定皱纹区域与皱纹区域对应的皮肤区域的融合参数。

关节是构成面部的重要组成部分。以上述目标对象是真实人物为例，面部包括有若干关节，如额骨关节、鼻骨关节、上颌骨关节、下颌骨关节等，将上述若干关节按照真实的脸部关节结构，可以划分为多个关节对，其中，每个关节对可以包括两个关节。当某个关节活动时，包含该关节的关节对之间的相对距离会发生变化，进一步影响到其它关节的位置变动，最终在面部上生成各种表情。

由于皱纹区域产生的皱纹纹路的深浅程度，依赖于该皱纹区域的关节的位置变动，关节点的位置变动程度代表着该皱纹区域产生的皱纹纹路的深浅程度。位置变动程度较大的位置，往往代表着表情特征的主要体现区域(皱纹区域)，这个区域的皱纹是最为明显的。因此，可以确定影响皱纹区域的关节对，并计算该关节对所包含关节之间的相对距离，然后，基于该关节对所包含的关节之间的相对距离，进一步确定纹区域与皱纹区域对应的皮肤区域的融合参数。也就是说，上述皱纹区域与皱纹区域对应的皮肤区域的融合参数是由两个关节(一个关节对)的相对距离所控制，当关节之间的相对距离发生变化时，就会带动关节所在区域的表情的变化。

需要说明的一点是，皱纹区域皱纹纹路的深浅程度应符合生物学以及人体解剖学的基本知识，与真实的表情下，皱纹的深浅程度相一致。

可选地，可以预先存储有各个皱纹区域与该皱纹区域的关节对之间的映射关系，对于不同的皱纹区域，其映射关系也不相同。例如，左鼻子上方的皱纹区域与左脸颊上方关节(Game_LeftUpInnerCheek)和左鼻子关节(Game_LeftNose)之间存在映射关系；额头的皱纹区域与左眉骨关节和右眉骨关节之间存在映射关系。基于上述映射关系，可以直接确定影响某个皱纹区域的关节对(关节)。

可选地，还可以预先存储有皱纹区域的关节对所包含的关节之间的相对距离，与该皱纹区域与皱纹区域对应的皮肤区域的融合参数的对应关系。其中，上述关节之间的相对距离与融合参数之间呈正相关关系，即相对距离越大，融合参数越大，表示皱纹纹路越深；反之，相对距离越小，融合参数越小，表示皱纹纹路越浅。在一些其它实施例中，还可以是其它形式的对应关系，本申请实施例对此不作限定。

另外，在得到上述关节之间的相对距离之后，还可以将该相对距离进行算法转化，并根据算法转化后得到的转化结果对融合参数进行控制。

示例性地，如图10所示，以左鼻子上方区域的皱纹为例，首先，确定应该皱纹区域的关节对，包括左脸颊上方关节(Game_LeftUpInnerCheek)和左鼻子关节(Game_LeftNose)；由于表情发生变化时，两关节之间的相对距离会发生变化，因此可以实时的计算两关节之间的相对距离；之后，将该相对距离经过算法转化(如remapValue算法)后，通过该转化结果对融合参数91进行控制。其中，用于调节关节对的距离变化区间的参数包括最大距离(DistanceMax Set)和最小距离(DistanceMin Set)，通过该区间参数可以动态影响融合参数91的幅度，以生成用户所需的表情。

可选地，当影响皱纹区域的关节对包括多对时，可以将各个关节对包含的关节之间的相对距离进行叠加，并根据叠加得到的相对距离之和确定皱纹区域与皱纹区域对应的皮肤区域的融合参数。

还需要说明的一点是，上述融合参数应处于一定的范围之内，以确保生成的表情为确切存在或者人脸可做出的表情，保证生成的表情的真实性和自然性。

步骤309，根据贴图参数和融合参数，对皱纹区域与皱纹区域对应的皮肤区域进行皱纹融合处理，生成具备皱纹细节的表情。

在得到上述贴图参数和融合参数之后，可以对皱纹区域与皱纹区域对应的皮肤区域进行皱纹融合处理，贴图参数和融合参数可以对皱纹融合处理的效果进行调整控制，从而生成用户所需的具备皱纹细节的表情。

示例性地，如图11所示，其示例性示出了一种具备皱纹细节的表情的示意图。如图11中(a)部分所示为不具备皱纹细节的表情111，如图11中(b)部分所示为具备皱纹细节的表情112，其中，具备皱纹细节的表情112中可以明显在皱纹纹路，如眼角的鱼尾纹和鼻翼的法令纹。

可选地，上述具备皱纹细节的表情为单一的表情；或者，上述具备皱纹细节的表情为p种表情叠加后生成的表情，该p为大于1的整数。也就是说，上述具备皱纹细节的表情可以是单一的表情，还可以是多种表情叠加后生成的表情，本申请实施例对此不作限定。

需要说明的一点是，当上述具备皱纹细节的表情是多种表情叠加后生成的表情时，该多种表情之间不存在矛盾，是真实人脸在做出一中表情的同时还做出其它表情，例如，皱眉和微笑是两种不存在矛盾的表情，而皱眉和放松是两种存在矛盾的表情。

综上所述，本申请实施例提供的技术方案，在生成表情的高模模型之后，进一步生成皱纹贴图和遮罩贴图，以便之后对皱纹区域和与皱纹区域对应的皮肤区域进行皱纹融合处理，生成目标对象的具备皱纹细节的表情。相比于相关技术中，仅是通过调整网格数据生成不同的表情，并未关注到生成的表情的细节。本申请实施例提供的技术方案，通过基于表情的高模模型，经过一系列处理，最终对皱纹区域和与皱纹区域对应的皮肤区域进行皱纹融合处理，以生成目标对象的具备皱纹细节的表情，从而使得生成的表情可以展示更多的面部细节，更加具备真实度。

另外，将皮肤皱纹与游戏表情动态、实时地做相应规则的融合叠加变化，可以大幅加强游戏写实角色面部动态的细节表现，提高动画品质与视效的真实度。

下述为本申请装置实施例，可以用于执行本申请方法实施例。对于本申请装置实施例中未披露的细节，请参照本申请方法实施例。

请参考图12，其示出了本申请一个实施例提供的表情生成装置的框图。该装置具有实现上述表情生成方法示例的功能，所述功能可以由硬件实现，也可以由硬件执行相应的软件实现。该装置可以是上文介绍的计算机设备，也可以设置在计算机设备上。该装置1200可以包括：高模生成模块1210、转换处理模块1220、遮罩处理模块1230和表情生成模块1240。

高模生成模块1210，用于生成目标对象的n个表情的高模模型，所述n为正整数。

转换处理模块1220，用于对所述n个表情的高模模型进行模型转换处理，生成皱纹贴图，所述皱纹贴图为具有皱纹细节的贴图。

遮罩处理模块1230，用于对所述皱纹贴图进行遮罩处理，生成遮罩贴图，所述遮罩贴图用于表征所述皱纹贴图中的皱纹区域。

表情生成模块1240，用于根据所述皱纹贴图和所述遮罩贴图，对所述皱纹区域和与所述皱纹区域对应的皮肤区域进行皱纹融合处理，生成所述目标对象的具备皱纹细节的表情。

综上所述，本申请实施例提供的技术方案，在生成表情的高模模型之后，进一步生成皱纹贴图和遮罩贴图，以便之后对皱纹区域和与皱纹区域对应的皮肤区域进行皱纹融合处理，生成目标对象的具备皱纹细节的表情。相比于相关技术中，仅是通过调整网格数据生成不同的表情，并未关注到生成的表情的细节。本申请实施例提供的技术方案，通过基于表情的高模模型，经过一系列处理，最终对皱纹区域和与皱纹区域对应的皮肤区域进行皱纹融合处理，以生成目标对象的具备皱纹细节的表情，从而使得生成的表情可以展示更多的面部细节，更加具备真实度。

在一些可能的设计中，如图13所示，所述转换处理模块1220包括：拓扑处理单元1221、模型烘焙单元1222和皱纹生成单元1223。

拓扑处理单元1221，用于分别对所述n个表情的高模模型的表面执行拓扑处理，生成各个所述高模模型对应的低模贴图。

模型烘焙单元1222，用于分别将所述n个表情的高模模型烘焙到各个所述高模模型对应的低模贴图上，得到各个表情的低模贴图。

皱纹生成单元1223，用于根据所述各个表情的低模贴图，生成所述皱纹贴图。

在一些可能的设计中，所述低模贴图包括颜色贴图、法线贴图和环境遮挡贴图，所述皱纹贴图包括皱纹颜色贴图、皱纹法线贴图和皱纹环境遮挡贴图；所述皱纹生成单元1223，用于提取所述各个表情的颜色贴图中的皱纹区域；将所述各个表情的颜色贴图中的皱纹区域覆盖至所述目标对象的基础颜色贴图，得到所述皱纹颜色贴图，所述基础颜色贴图是指所述目标对象无表情时的颜色贴图；提取所述各个表情的法线贴图中的皱纹区域；将所述各个表情的法线贴图中的皱纹区域覆盖至所述目标对象的基础法线贴图，得到所述皱纹法线贴图；提取所述各个表情的环境遮挡贴图中的皱纹区域；将所述各个表情的环境遮挡贴图中的皱纹区域覆盖至所述目标对象的基础环境遮挡贴图，得到所述皱纹环境遮挡贴图。

在一些可能的设计中，所述遮罩处理模块1230，用于对所述皱纹贴图进行蒙版遮挡处理，得到处理后的皱纹贴图；将所述处理后的皱纹贴图拆分为m个通道，生成所述遮罩贴图，其中，每个通道对应于一个皱纹区域，所述m为正整数。

在一些可能的设计中，如图13所示，所述表情生成模块1240包括：参数调整单元1241、参数确定单元1242和表情生成单元1243。

参数调整单元1241，用于调整所述皱纹贴图和所述遮罩贴图的贴图参数。

参数确定单元1242，用于确定所述皱纹区域与所述皱纹区域对应的皮肤区域的融合参数。

表情生成单元1243，用于根据贴图参数和所述融合参数，对所述皱纹区域与所述皱纹区域对应的皮肤区域进行皱纹融合处理，生成所述具备皱纹细节的表情。

在一些可能的设计中，所述参数确定单元1242，用于确定影响所述皱纹区域的关节对；计算所述关节对所包含的关节之间的相对距离；根据所述关节之间的相对距离，确定所述皱纹区域与所述皱纹区域对应的皮肤区域的融合参数。

在一些可能的设计中，所述具备皱纹细节的表情为单一的表情；或者，所述具备皱纹细节的表情为p种表情叠加后生成的表情，所述p为大于1的整数。

需要说明的是，上述实施例提供的装置，在实现其功能时，仅以上述各功能模块的划分进行举例说明，实际应用中，可以根据需要而将上述功能分配由不同的功能模块完成，即将设备的内部结构划分成不同的功能模块，以完成以上描述的全部或者部分功能。另外，上述实施例提供的装置与方法实施例属于同一构思，其具体实现过程详见方法实施例，这里不再赘述。

请参考图14，其示出了本申请一个实施例提供的终端的结构框图。通常，终端1400包括有：处理器1401和存储器1402。

处理器1401可以包括一个或多个处理核心，比如4核心处理器、8核心处理器等。处理器1401可以采用DSP(Digital Signal Processing，数字信号处理)、FPGA(FieldProgrammable Gate Array，现场可编程门阵列)、PLA(Programmable Logic Array，可编程逻辑阵列)中的至少一种硬件形式来实现。处理器1401也可以包括主处理器和协处理器，主处理器是用于对在唤醒状态下的数据进行处理的处理器，也称CPU(Central ProcessingUnit，中央处理器)；协处理器是用于对在待机状态下的数据进行处理的低功耗处理器。在一些实施例中，处理器1401可以在集成有GPU(Graphics Processing Unit，图像处理器)，GPU用于负责显示屏所需要显示的内容的渲染和绘制。一些实施例中，处理器1401还可以包括AI(Artificial Intelligence，人工智能)处理器，该AI处理器用于处理有关机器学习的计算操作。

存储器1402可以包括一个或多个计算机可读存储介质，该计算机可读存储介质可以是非暂态的。存储器1402还可包括高速随机存取存储器，以及非易失性存储器，比如一个或多个磁盘存储设备、闪存存储设备。在一些实施例中，存储器1402中的非暂态的计算机可读存储介质用于存储至少一条指令、至少一段程序、代码集或指令集，该至少一条指令、至少一段程序、代码集或指令集用于被处理器1401所执行以实现本申请中方法实施例提供的表情生成方法。

在一些实施例中，终端1400还可选包括有：外围设备接口1403和至少一个外围设备。处理器1401、存储器1402和外围设备接口1403之间可以通过总线或信号线相连。各个外围设备可以通过总线、信号线或电路板与外围设备接口1403相连。具体地，外围设备可以包括：通信接口1404、显示屏1405、音频电路1406、摄像头组件1407、定位组件1408和电源1409中的至少一种。

本领域技术人员可以理解，图14中示出的结构并不构成对终端1400的限定，可以包括比图示更多或更少的组件，或者组合某些组件，或者采用不同的组件布置。

请参考图15，其示出了本申请一个实施例提供的服务器的结构示意图。具体来讲：

所述服务器1500包括CPU(Central Processing Unit，中央处理器)1501、包括RAM(Random Access Memory，随机存取存储器)1502和ROM(Read Only Memory，只读存储器)1503的系统存储器1504，以及连接系统存储器1504和中央处理单元1501的系统总线1505。所述服务器1500还包括帮助计算机内的各个器件之间传输信息的基本I/O(Input/Output输入/输出)系统1506，和用于存储操作系统1513、应用程序1514和其他程序模块1512的大容量存储设备1507。

所述基本输入/输出系统1506包括有用于显示信息的显示器1508和用于用户输入信息的诸如鼠标、键盘之类的输入设备1509。其中所述显示器1508和输入设备1509都通过连接到系统总线1505的输入输出控制器1510连接到中央处理单元1501。所述基本输入/输出系统1506还可以包括输入输出控制器1510以用于接收和处理来自键盘、鼠标、或电子触控笔等多个其他设备的输入。类似地，输入输出控制器1510还提供输出到显示屏、打印机或其他类型的输出设备。

所述大容量存储设备1507通过连接到系统总线1505的大容量存储控制器(未示出)连接到中央处理单元1501。所述大容量存储设备1507及其相关联的计算机可读介质为服务器1500提供非易失性存储。也就是说，所述大容量存储设备1507可以包括诸如硬盘或者CD-ROM(Compact Disc Read-Only Memory，只读光盘)驱动器之类的计算机可读介质(未示出)。

不失一般性，所述计算机可读介质可以包括计算机存储介质和通信介质。计算机存储介质包括以用于存储诸如计算机可读指令、数据结构、程序模块或其他数据等信息的任何方法或技术实现的易失性和非易失性、可移动和不可移动介质。计算机存储介质包括RAM、ROM、EPROM(Erasable Programmable Read Only Memory，可擦除可编程只读存储器)、闪存或其他固态存储其技术，CD-ROM、DVD或其他光学存储、磁带盒、磁带、磁盘存储或其他磁性存储设备。当然，本领域技术人员可知所述计算机存储介质不局限于上述几种。上述的系统存储器1504和大容量存储设备1507可以统称为存储器。

根据本申请的各种实施例，所述服务器1500还可以通过诸如因特网等网络连接到网络上的远程计算机运行。也即服务器1500可以通过连接在所述系统总线1505上的网络接口单元1511连接到网络1512，或者说，也可以使用网络接口单元1511来连接到其他类型的网络或远程计算机系统(未示出)。

所述存储器还包括至少一条指令、至少一段程序、代码集或指令集，所述至少一条指令、至少一段程序、代码集或指令集存储于存储器中，且经配置以由一个或者一个以上处理器执行，以实现上述表情生成方法。

在示例性实施例中，还提供了一种计算机设备。该计算机设备可以是终端或服务器。所述计算机设备包括处理器和存储器，所述存储器中存储有至少一条指令、至少一段程序、代码集或指令集，所述至少一条指令、所述至少一段程序、所述代码集或指令集由所述处理器加载并执行以实现上述表情生成方法。

在示例性实施例中，还提供了一种计算机可读存储介质，所述计算机可读存储介质中存储有至少一条指令、至少一段程序、代码集或指令集，所述至少一条指令、所述至少一段程序、所述代码集或所述指令集在被处理器执行时实现上述表情生成方法。

在示例性实施例中，还提供了一种计算机程序产品，当该计算机程序产品被处理器执行时，其用于实现上述表情生成方法。

应当理解的是，在本文中提及的“多个”是指两个或两个以上。“和/或”，描述关联对象的关联关系，表示可以存在三种关系，例如，A和/或B，可以表示：单独存在A，同时存在A和B，单独存在B这三种情况。字符“/”一般表示前后关联对象是一种“或”的关系。

以上所述仅为本申请的示例性实施例，并不用以限制本申请，凡在本申请的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本申请的保护范围之内。

Claims (10)

1.一种表情生成方法，其特征在于，所述方法包括：

生成目标对象的n个表情的高模模型，所述n为正整数；

对所述n个表情的高模模型进行模型转换处理，生成皱纹贴图，所述皱纹贴图为具有皱纹细节的贴图；

对所述皱纹贴图进行遮罩处理，生成遮罩贴图，所述遮罩贴图用于表征所述皱纹贴图中的皱纹区域；

根据所述皱纹贴图和所述遮罩贴图，对所述皱纹区域和与所述皱纹区域对应的皮肤区域进行皱纹融合处理，生成所述目标对象的具备皱纹细节的表情。

2.根据权利要求1所述的方法，其特征在于，所述对所述n个表情的高模模型进行模型转换处理，生成皱纹贴图，包括：

分别对所述n个表情的高模模型的表面执行拓扑处理，生成各个所述高模模型对应的低模贴图；

分别将所述n个表情的高模模型烘焙到各个所述高模模型对应的低模贴图上，得到各个表情的低模贴图；

根据所述各个表情的低模贴图，生成所述皱纹贴图。

3.根据权利要求2所述的方法，其特征在于，所述低模贴图包括颜色贴图、法线贴图和环境遮挡贴图，所述皱纹贴图包括皱纹颜色贴图、皱纹法线贴图和皱纹环境遮挡贴图；

所述根据所述各个表情的低模贴图，生成所述皱纹贴图，包括：

提取所述各个表情的颜色贴图中的皱纹区域；

将所述各个表情的颜色贴图中的皱纹区域覆盖至所述目标对象的基础颜色贴图，得到所述皱纹颜色贴图，所述基础颜色贴图是指所述目标对象无表情时的颜色贴图；

提取所述各个表情的法线贴图中的皱纹区域；

将所述各个表情的法线贴图中的皱纹区域覆盖至所述目标对象的基础法线贴图，得到所述皱纹法线贴图；

提取所述各个表情的环境遮挡贴图中的皱纹区域；

将所述各个表情的环境遮挡贴图中的皱纹区域覆盖至所述目标对象的基础环境遮挡贴图，得到所述皱纹环境遮挡贴图。

4.根据权利要求1所述的方法，其特征在于，所述对所述皱纹贴图进行遮罩处理，生成遮罩贴图，包括：

对所述皱纹贴图进行蒙版遮挡处理，得到处理后的皱纹贴图；

将所述处理后的皱纹贴图拆分为m个通道，生成所述遮罩贴图，其中，每个通道对应于一个皱纹区域，所述m为正整数。

5.根据权利要求1所述的方法，其特征在于，所述根据所述皱纹贴图和所述遮罩贴图，对所述皱纹区域和与所述皱纹区域对应的皮肤区域进行皱纹融合处理，生成具备皱纹细节的表情，包括：

调整所述皱纹贴图和所述遮罩贴图的贴图参数；

确定所述皱纹区域与所述皱纹区域对应的皮肤区域的融合参数；

根据贴图参数和所述融合参数，对所述皱纹区域与所述皱纹区域对应的皮肤区域进行皱纹融合处理，生成所述具备皱纹细节的表情。

6.根据权利要求5所述的方法，其特征在于，所述确定所述皱纹区域与所述皱纹区域对应的皮肤区域的融合参数，包括：

确定影响所述皱纹区域的关节对；

计算所述关节对所包含的关节之间的相对距离；

根据所述关节之间的相对距离，确定所述皱纹区域与所述皱纹区域对应的皮肤区域的融合参数。

7.根据权利要求1至6任一项所述的方法，其特征在于，所述具备皱纹细节的表情为单一的表情；

或者，

所述具备皱纹细节的表情为p种表情叠加后生成的表情，所述p为大于1的整数。

8.一种表情生成装置，其特征在于，所述装置包括：

高模生成模块，用于生成目标对象的n个表情的高模模型，所述n为正整数；

转换处理模块，用于对所述n个表情的高模模型进行模型转换处理，生成皱纹贴图，所述皱纹贴图为具有皱纹细节的贴图；

遮罩处理模块，用于对所述皱纹贴图进行遮罩处理，生成遮罩贴图，所述遮罩贴图用于表征所述皱纹贴图中的皱纹区域；

表情生成模块，用于根据所述皱纹贴图和所述遮罩贴图，对所述皱纹区域和与所述皱纹区域对应的皮肤区域进行皱纹融合处理，生成所述目标对象的具备皱纹细节的表情。

9.一种计算机设备，其特征在于，所述计算机设备包括处理器和存储器，所述存储器中存储有至少一条指令、至少一段程序、代码集或指令集，所述至少一条指令、所述至少一段程序、所述代码集或指令集由所述处理器加载并执行以实现如权利要求1至7任一项所述的方法。

10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质中存储有至少一条指令、至少一段程序、代码集或指令集，所述至少一条指令、所述至少一段程序、所述代码集或指令集由处理器加载并执行以实现如权利要求1至7任一项所述的方法。

Images