CN116310000B - 蒙皮数据生成方法、装置、电子设备及存储介质 - Google Patents
蒙皮数据生成方法、装置、电子设备及存储介质 Download PDFInfo
- Publication number
- CN116310000B CN116310000B CN202310258632.7A CN202310258632A CN116310000B CN 116310000 B CN116310000 B CN 116310000B CN 202310258632 A CN202310258632 A CN 202310258632A CN 116310000 B CN116310000 B CN 116310000B
- Authority
- CN
- China
- Prior art keywords
- target
- grid
- model
- bound
- vertex
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 71
- 230000000877 morphologic effect Effects 0.000 claims abstract description 23
- 210000000988 bone and bone Anatomy 0.000 claims description 36
- 238000004590 computer program Methods 0.000 claims description 15
- 230000006870 function Effects 0.000 claims description 10
- 230000000153 supplemental effect Effects 0.000 claims description 9
- 230000003190 augmentative effect Effects 0.000 abstract description 4
- 230000008569 process Effects 0.000 description 14
- 238000010586 diagram Methods 0.000 description 13
- 210000001624 hip Anatomy 0.000 description 11
- 238000004891 communication Methods 0.000 description 8
- 238000002372 labelling Methods 0.000 description 8
- 238000012545 processing Methods 0.000 description 8
- 210000000323 shoulder joint Anatomy 0.000 description 8
- 210000002310 elbow joint Anatomy 0.000 description 6
- 230000009471 action Effects 0.000 description 5
- 210000001503 joint Anatomy 0.000 description 5
- RKTYLMNFRDHKIL-UHFFFAOYSA-N copper;5,10,15,20-tetraphenylporphyrin-22,24-diide Chemical compound [Cu+2].C1=CC(C(=C2C=CC([N-]2)=C(C=2C=CC=CC=2)C=2C=CC(N=2)=C(C=2C=CC=CC=2)C2=CC=C3[N-]2)C=2C=CC=CC=2)=NC1=C3C1=CC=CC=C1 RKTYLMNFRDHKIL-UHFFFAOYSA-N 0.000 description 4
- 210000004394 hip joint Anatomy 0.000 description 4
- 210000000629 knee joint Anatomy 0.000 description 4
- 210000002414 leg Anatomy 0.000 description 4
- 210000003857 wrist joint Anatomy 0.000 description 4
- 230000000295 complement effect Effects 0.000 description 3
- 238000013461 design Methods 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 238000012935 Averaging Methods 0.000 description 2
- 210000001015 abdomen Anatomy 0.000 description 2
- 238000013473 artificial intelligence Methods 0.000 description 2
- 238000006073 displacement reaction Methods 0.000 description 2
- 230000002500 effect on skin Effects 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 230000003993 interaction Effects 0.000 description 2
- 238000006467 substitution reaction Methods 0.000 description 2
- 241001465754 Metazoa Species 0.000 description 1
- 238000010171 animal model Methods 0.000 description 1
- 210000001217 buttock Anatomy 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 238000012512 characterization method Methods 0.000 description 1
- 210000000038 chest Anatomy 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 210000004247 hand Anatomy 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 230000007935 neutral effect Effects 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000001953 sensory effect Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T13/00—Animation
- G06T13/20—3D [Three Dimensional] animation
- G06T13/40—3D [Three Dimensional] animation of characters, e.g. humans, animals or virtual beings
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects
Landscapes
- Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Graphics (AREA)
- Geometry (AREA)
- Software Systems (AREA)
- Processing Or Creating Images (AREA)
Abstract
本公开涉及计算机视觉技术领域,尤其涉及数字人、增强现实、虚拟现实、混合现实、扩展现实、元宇宙等技术领域,具体涉及一种蒙皮数据生成方法、装置、电子设备及存储介质。具体实现方案为:根据待绑网格模型,对第一虚拟对象进行形态调整,获得第二虚拟对象,第二虚拟对象包括模型骨骼、且具有对应的标准蒙皮数据;根据标准蒙皮数据,生成目标蒙皮数据,目标蒙皮数据用于将待绑网格模型与模型骨骼进行绑定。采用本公开可以提高蒙皮数据的生成效率、且节省人力资源。
Description
技术领域
本公开涉及计算机视觉技术领域,尤其涉及数字人、增强现实、虚拟现实、混合现实、扩展现实、元宇宙等技术领域,具体涉及一种蒙皮数据生成方法、装置、电子设备及存储介质。
背景技术
目前,针对待绑网格模型,通常是由动画师手动对其进行骨骼设计,再凭借经验设定待绑网格模型上各个网格顶点与其相关骨骼关节建立绑定关系时所用的蒙皮权重,并通过不断调整蒙皮权重,优化蒙皮效果,以获得最终的蒙皮数据。
以上过程通常需要若干星期,降低了蒙皮数据的生成效率、且浪费人力资源。
发明内容
本公开提供了一种蒙皮数据生成方法、装置、电子设备及存储介质。
根据本公开的一方面,提供了一种蒙皮数据生成方法,包括:
根据待绑网格模型,对第一虚拟对象进行形态调整,获得第二虚拟对象,第二虚拟对象包括模型骨骼、且具有对应的标准蒙皮数据;
根据标准蒙皮数据,生成目标蒙皮数据,目标蒙皮数据用于将待绑网格模型与模型骨骼进行绑定。
根据本公开的第二方面,提供了一种蒙皮数据生成装置,包括:
模型调整单元,用于根据待绑网格模型,对第一虚拟对象进行形态调整,获得第二虚拟对象,第二虚拟对象包括模型骨骼、且具有对应的标准蒙皮数据;
数据生成单元,用于根据标准蒙皮数据,生成目标蒙皮数据,目标蒙皮数据用于将待绑网格模型与模型骨骼进行绑定。
根据本公开的第三方面,提供了一种电子设备,包括:
至少一个处理器;
与至少一个处理器通信连接的存储器;
存储器存储有可被至少一个处理器执行的指令,指令被至少一个处理器执行,以使至少一个处理器能够执行第一方面所提供的方法。
根据本公开的第四方面,提供了一种存储有计算机指令的非瞬时计算机可读存储介质,其中,计算机指令用于使计算机执行第一方面所提供的方法。
根据本公开的第五方面,提供了一种计算机程序产品,包括计算机程序,计算机程序在被处理器执行时实现第一方面所提供的方法。
采用本公开可以提高蒙皮数据的生成效率、且节省人力资源。
应当理解,本部分所描述的内容并非旨在标识本公开的实施例的关键或重要特征,也不用于限制本公开的范围。本公开的其它特征将通过以下的说明书而变得容易理解。
附图说明
附图用于更好地理解本方案,不构成对本公开的限定。其中:
图1为本公开实施例提供的一种蒙皮数据生成方法的流程示意图;
图2为本公开实施例提供的一种待绑网格模型上多个第二标注点的示意图;
图3为本公开实施例提供的一种形态调整过程说明图;
图4为本公开实施例提供的一种形态调整过程说明图;
图5为本公开实施例提供的一种形态调整过程说明图;
图6为本公开实施例提供的一种目标蒙皮权重的获取方式说明图;
图7为本公开实施例提供的一种蒙皮数据生成方法的完整流程示意图;
图8为本公开实施例提供的一种蒙皮数据生成方法的应用场景示意图;
图9为本公开实施例提供的一种蒙皮数据生成装置的示意性结构框图;
图10为本公开实施例提供的一种电子设备的示意性结构框图。
具体实施方式
以下结合附图对本公开的示范性实施例做出说明,其中包括本公开实施例的各种细节以助于理解,应当将它们认为仅仅是示范性的。因此,本领域普通技术人员应当认识到,可以对这里描述的实施例做出各种改变和修改,而不会背离本公开的范围。同样,为了清楚和简明,以下的描述中省略了对公知功能和结构的描述。
三维虚拟模型通常由内部的模型骨骼和外部的网格模型(Mesh Model)构成,网格模型即为模型皮肤,模型皮肤的形变和位移都依赖于模型骨骼的动作。以三维虚拟模型为人体模型为例,如果是左手腕关节运动,会影响左手腕关节的相关区域皮肤(表面和周围的模型皮肤)的形变和位移,对于距离左手腕关节较远的其他区域的模型皮肤,则影响较小,而其影响程度的大小取决于相关区域皮肤的网格顶点与左手腕关节建立绑定关系时,所用的蒙皮权重。所以,在对三维虚拟模型进行骨骼绑定之前,需要确定网格模型上各个网格顶点与其相关骨骼关节之间的蒙皮权重,并整合为最终的蒙皮数据。
目前,针对待绑网格模型,通常是由动画师手动对其进行骨骼设计,再凭借经验设定待绑网格模型上各个网格顶点与其相关骨骼关节建立绑定关系时所用的蒙皮权重,并通过不断调整蒙皮权重,优化蒙皮效果,以获得最终的蒙皮数据。
以上过程通常需要若干星期,降低了蒙皮数据的生成效率、且浪费人力资源。
基于此,本公开实施例提供了一种蒙皮数据生成方法,该蒙皮数据生成方法可以应用于电子设备。以下,将结合图1所示流程示意图,对本公开实施例提供的一种蒙皮数据生成方法进行说明。需要说明的是,虽然在流程示意图中示出了逻辑顺序,但是,在某些情况下,也可以以其他顺序执行所示出或描述的步骤。
步骤S101,根据待绑网格模型,对第一虚拟对象进行形态调整,获得第二虚拟对象,第二虚拟对象包括模型骨骼、且具有对应的标准蒙皮数据;
步骤S102,根据标准蒙皮数据,生成目标蒙皮数据,目标蒙皮数据用于将待绑网格模型与模型骨骼进行绑定。
其中,待绑网格模型可以是由三角面片、四角面片,或其他多边形面片组成的网格模型,其可以用于表征人体、动物体等,本公开实施例对此不作限制。
第一虚拟对象可以是与待绑网格模型具有相同表征意义的三维虚拟模型,例如,同用于表征人体模型,或同用于表征动物体模型。此外,本公开实施例中,第一虚拟对象可以是参数化人体模型,例如,可以是多人蒙皮线性模型(Skinned Multi-Person Linear,SMPL),也可以是参数化人体数学模型(Sparse Trained Articulated Human BodyRegressor,STAR),还可以是对SMPL进行优化之后获得的SMPL-X模型。参数化人体模型可以基于不同的模型参数表现出不同的基础形态——形状和姿态。其中,形状可以理解为高矮胖瘦,姿态则用于描述参数化人体模型各个身体部位的位置摆放。
本公开实施例中,在获取到待绑网格模型之后,可以根据待绑网格模型,对第一虚拟对象进行形态调整,获得与待绑网格模型整体形态一致的第二虚拟对象。由于第一虚拟对象为参数化人体模型、且第二虚拟对象是根据待绑网格模型,对第一虚拟对象进行形态调整获得的,因此,第二虚拟对象同为参数化人体模型,包括内部的模型骨骼和外部的虚拟网格模型、且具有对应的标准蒙皮数据,其外部的虚拟网格模型基于标准蒙皮数据与其内部的模型骨骼建立有绑定关系。其中,虚拟网格模型可以是由三角面片、四角面片,或其他多边形面片组成的网格模型。
由于第二虚拟对象与待绑网格模型整体形态一致,因此,可以根据标准蒙皮数据,生成目标蒙皮数据。例如,在待绑网格模型与虚拟网格模型具有相同网络拓扑结构的情况下,可以将标准蒙皮数据直接作为目标蒙皮数据,也即,可以将标准蒙皮数据直接转用至待绑网格模型,以用于将待绑网格模型与模型骨骼进行绑定;在待绑网格模型与虚拟网格模型具有不同网络拓扑结构的情况下,可以基于待绑网格模型上各个网格顶点与虚拟网格模型上各个网格顶点的位置对应关系,根据标准蒙皮数据,生成目标蒙皮数据,以用于将待绑网格模型与模型骨骼进行绑定。
采用本公开实施例提供的蒙皮数据生成方法可以根据待绑网格模型,对第一虚拟对象进行形态调整,获得第二虚拟对象,第二虚拟对象包括模型骨骼、且具有对应的标准蒙皮数据;根据标准蒙皮数据,生成目标蒙皮数据,目标蒙皮数据用于将待绑网格模型与模型骨骼进行绑定。由于第二虚拟对象包括模型骨骼、且具有对应的标准蒙皮数据,同时,第二虚拟对象又是根据待绑网格模型,对第一虚拟对象进行形态调整获得的,因此,可以认为第二虚拟对象与待绑网格模型整体形态一致。在此前提下,便可以根据标准蒙皮数据,生成目标蒙皮数据,以用于将待绑网格模型与模型骨骼进行绑定。相对于由动画师手动生成蒙皮数据的方案而言,实现了蒙皮数据的自动化生成,不仅可以提高蒙皮数据的生成效率,还可以节省人力资源。
此外,现有技术中,由于生成蒙皮数据的过程还较多的依赖动画师经验,主观性强,因此,蒙皮数据可靠性通常是不高的。那么,在通过该蒙皮数据将待绑网格模型与模型骨骼进行绑定,生成虚拟对象之后,该虚拟对象的模型效果也是无法保证的。而且实际应用中,每个待绑网格模型都是独有的,具有不同形态,因此,针对不同的待绑网格模型,就需要动画师重新去设计模型骨骼、生成蒙皮数据,泛化性较低。而本公开实施例提供的蒙皮数据生成方法,由于实现了蒙皮数据的自动化生成,不依赖于动画师经验,不具主观性,因此,可以提高蒙皮数据的可靠性,从而提高虚拟对象的模型效果。此外,本公开实施例提供的蒙皮数据生成方法还可以适用于各种形态的待绑网格模型,因此,具有较强的泛化性。
在一些可选的实施方式中,“根据待绑网格模型,对第一虚拟对象进行形态调整,获得第二虚拟对象”可以包括以下步骤:
对第一虚拟对象进行基础形态调整,获得与待绑网格模型基础形态一致的中间虚拟对象;
对中间虚拟对象进行形状细节调整,获得与待绑网格模型贴合的第二虚拟对象。
如前所述的,本公开实施例中,第一虚拟对象可以是参数化人体模型,而参数化人体模型可以根据不同的模型参数表现不同的基础形态。因此,本公开实施例中可以通过调节模型参数,对第一虚拟对象进行基础形态调整,获得与待绑网格模型基础形态一致的中间虚拟对象,也即,获得与待绑网格模型形状和姿态一致的中间虚拟对象。其中,形状通常指代高矮胖瘦,而姿态一致可以是待绑网格模型与中间虚拟对象同处于T形姿态。
此外,可以理解的是,本公开实施例中,采用的第一虚拟对象可以是男模、女模或中性模,而待绑网格模型可能是男模,也可能是女模。通常情况下,为降低模型调整的复杂度,可以限定第一虚拟模型与待绑网格模型具有相同性别。但本公开实施例中,为进一步提高蒙皮数据生成方法的泛化性,也可以不对第一虚拟模型的性别进行限定。因此,在对第一虚拟对象进行基础形态调整,获得与待绑网格模型基础形态一致的中间虚拟对象之后,中间虚拟对象也可能与待绑网格模型存在脸型、胸型、胸围、腰围、臀型、手型、腿型等形状细节的差异。此外,即使第一虚拟模型与待绑网格模型具有相同性别,由于个体差异,在对第一虚拟对象进行基础形态调整,获得与待绑网格模型基础形态一致的中间虚拟对象之后,中间虚拟对象还是可能与待绑网格模型存在脸型、胸型、胸围、腰围、臀型、手型、腿型等形状细节的差异。
因此,本公开实施例中,在对第一虚拟对象进行基础形态调整,获得与待绑网格模型基础形态一致的中间虚拟对象之后,还可以对中间虚拟对象进行形状细节调整,获得与待绑网格模型贴合的第二虚拟对象,最终,使得第二虚拟对象与待绑网格模型整体形态一致。其中,第二虚拟对象与待绑网格模型贴合可以理解为,第二虚拟对象外部的虚拟网格模型能够与待绑网格模型重合。
通过“根据待绑网格模型,对第一虚拟对象进行形态调整,获得第二虚拟对象”包括的以上步骤,本公开实施例中,可以对第一虚拟对象进行基础形态调整,获得与待绑网格模型基础形态一致的中间虚拟对象;对中间虚拟对象进行形状细节调整,获得与待绑网格模型贴合的第二虚拟对象。基于此,第二虚拟对象不仅与待绑网格模型具有一致的基础形态,还能够与待绑网格模型贴合,也即,还与待绑网格模型具有一致的形状细节,以尽量保证第二虚拟对象与待绑网格模型的整体形态具有高度一致性,从而提高后续根据标准蒙皮数据,生成的目标蒙皮数据的可靠性。
在一些可选的实施方式中,“对第一虚拟对象进行基础形态调整”可以包括以下步骤:
基于第一虚拟对象上的多个第一标注点,以及待绑网格模型上的多个第二标注点,确定多对相关标注点,每对相关标注点包括位置对应的一个第一标注点和一个第二标注点;
通过调节第一虚拟对象的形状参数和姿势参数中的至少一者,对第一虚拟对象进行基础形态调整,以使每对相关标注点重合。
本公开实施例中,可以在第一虚拟对象上标注多个第一标注点,以及在待绑网格模型上标注多个第二标注点。其中,多个第一标注点的位置和多个第二标注点的位置可以一一对应。基于此,本公开实施例中,可以基于第一虚拟对象上的多个第一标注点,以及待绑网格模型上的多个第二标注点,确定多对相关标注点,每对相关标注点包括位置对应的一个第一标注点和一个第二标注点。
其中,多个第一标注点可以包括第一关节语义点和第一补充语义点,和/或多个第二标注点可以包括第二关节语义点和第二补充语义点,以实现标注点的多元化。此外,本公开实施例中,多个第一标注点具体可以包括多个第一关节语义点和多个第一补充语义点,同样,多个第二标注点具体可以包括多个第二关节语义点和多个第二补充语义点,以提高对第一虚拟对象进行基础形态调整的准确性。
在一具体示例中,多个第一关节语义点可以包括第一左肩关节、第一左肘关节、第一右肩关节、第一右肘关节、第一左髋关节、第一左膝关节、第一右髋关节、第一右膝关节等,多个第一补充语义点可以包括第一左胸点、第一右胸点、第一肚脐点、第一后腰点、第一左臀点、第一右臀点等。请结合图2(其中,待绑网格模型为男模),对应的,多个第二关节语义点可以包括第二左肩关节、第二左肘关节、第二右肩关节、第二右肘关节、第二左髋关节、第二左膝关节、第二右髋关节、第二右膝关节等,多个第二补充语义点可以包括第二左胸点、第二右胸点、第二肚脐点、第二后腰点、第二左臀点、第二右臀点等。那么,第一左肩关节和第二左肩关节将作为一对相关标注点,第一左肘关节和第二左肘关节将作为一对相关标注点,第一右肩关节和第二右肩关节将作为一对相关标注点,以此类推。
如前所述的,本公开实施例中,第一虚拟对象可以是参数化人体模型,而参数化人体模型可以根据不同的模型参数表现不同的基础形态。具体到本公开实施例所采用的第一虚拟对象,其模型参数可以包括形状参数和姿势参数。其中,形状参数用于调整第一虚拟对象的形状,也即,高矮胖瘦,姿态参数用于调整第一虚拟对象的姿态。基于此,本公开实施例中,实际可以是通过调节第一虚拟对象的形状参数和姿势参数中的至少一者,对第一虚拟对象进行基础形态调整,以使每对相关标注点重合,获得与待绑网格模型基础形态一致的中间虚拟对象。
请结合图3,本公开实施例中,每对相关标注点重合可以是每对相关标注点的第一坐标间距L均小于第一预设距离阈值,而第一预设距离阈值可以根据实际应用需求设定,本公开实施例对此不作具体限制。
通过“对第一虚拟对象进行基础形态调整”包括的以上步骤,本公开实施例中,是基于参数化人体模型的形态可调特性,通过调节第一虚拟对象的形状参数和姿势参数中的至少一者,对第一虚拟对象进行基础形态调整的,该调整过程简单,可以进一步提高蒙皮数据的生成效率。此外,本公开实施例中,在对第一虚拟对象进行基础形态调整的过程中,是在确定每对相关标注点重合的情况下,获得与待绑网格模型基础形态一致的中间虚拟对象,因此,可以保证中间虚拟对象与待绑网格模型的基础形态具有高度一致性,从而进一步提高后续获取的蒙皮数据的可靠性。
在一些可选的实施方式中,“对中间虚拟对象进行形状细节调整”可以包括以下步骤:
从中间虚拟对象上确定待调整部位;
针对待调整部位上的待调网格顶点,在待绑网格模型上确定与待调网格顶点位置对应的第一目标顶点,待调网格顶点为待调整部位上的任一网格顶点;
根据第一目标顶点,对待调网格顶点进行调整。
本公开实施例中,可以从中间虚拟对象所包括的外部网格模型上将脸部、胸部、腰部、臀部、手部、腿部等可能与待绑网格模型上的对应部位存在形状细节差异的部位,作为待调整部位。其中,外部网格模型可以是由三角面片、四角面片,或其他多边形面片组成的网格模型,因此,待调整部位同样可以由三角面片、四角面片,或其他多边形面片组成。
本公开实施例中,可以针对待调整部位上的待调网格顶点,在待绑网格模型上确定与待调网格顶点位置对应的第一目标顶点。在一具体示例中,可以在待绑网格模型上确定与待调网格顶点距离最近的网格顶点,作为与待调网格顶点位置对应的第一目标顶点。此后,根据第一目标顶点,对待调网格顶点进行调整。例如,调整待调网格顶点的坐标位置,以使待调网格顶点靠近第一目标顶点,以获得与待绑网格模型贴合的第二虚拟对象。
请结合图4,通过“对中间虚拟对象进行形状细节调整”包括的以上步骤,可以将中间虚拟对象401的脸部、胸部、腰部、臀部、手部、腿部等部位作为待调整部位,并对其进行形状细节调整,以获得与待绑网格模型402贴合的第二虚拟对象403。
通过“对中间虚拟对象进行形状细节调整”包括的以上步骤,本公开实施例中,可以从中间虚拟对象上确定待调整部位;针对待调整部位上的待调网格顶点,在待绑网格模型上确定与待调网格顶点位置对应的第一目标顶点,待调网格顶点为待调整部位上的任一网格顶点;根据第一目标顶点,对待调网格顶点进行调整。也就是说,本公开实施例中,在对中间虚拟对象进行形状细节调整时,一方面,可以仅对待调整部位进行调整,从而进一步提高蒙皮数据的生成效率。另一方面,针对待调整部位上的待调网格顶点,在待绑网格模型上确定与待调网格顶点位置对应的第一目标顶点之后,可以直接根据第一目标顶点,对待调网格顶点进行调整,从而简化调整过程,同样可以进一步提高蒙皮数据的生成效率。
在一些可选的实施方式中,“根据第一目标顶点,对待调网格顶点进行调整”可以包括以下步骤:
调整待调网格顶点的坐标位置,以使待调网格顶点靠近第一目标顶点、且已调相关面与目标相关面贴合,已调相关面为经过调整的待调网格顶点在待调整部位上的相关面,目标相关面为第一目标顶点在待绑网格模型上的相关面。
本公开实施例中,可以按照单次调整步长,逐步调整待调网格顶点的坐标位置,使得待调网格顶点向第一目标顶点靠近。
每调整一次,则获取一次经过调整的待调网格顶点与第一目标顶点之间的第二坐标间距,以便于在第二坐标间距小于第二预设距离阈值的情况下,确定待调网格顶点已经靠近第一目标顶点,此时,若已调相关面与目标相关面贴合,则停止调整。
其中,首轮单次调整步长可以根据待调网格顶点与第一目标顶点之间的间隔距离确定。在一具体示例中,首轮单次调整步长可以为L'/N。其中,L'为间隔距离,N为大于等于2的整数,例如,N可以是5、10、20等整数,此后,每轮单次调整步长可以逐渐减小。此外,本公开实施例中,第二预设距离阈值可以根据实际应用需求设定,本公开实施例对此不作具体限制。
其中,已调相关面为经过调整的待调网格顶点在待调整部位上的相关面。在一具体示例中,已调相关面为待调整部位上,由经过调整的待调网格顶点周围的多个网格面片组成的模型面片。目标相关面为第一目标顶点在待绑网格模型上的相关面。在一具体示例中,目标相关面为待绑网格模型上,第一目标顶点周围的多个网格面片组成的模型面片。
通过“根据第一目标顶点,对待调网格顶点进行调整”包括的以上步骤,本公开实施例中,可以调整待调网格顶点的坐标位置,在待调网格顶点靠近第一目标顶点、且已调相关面与目标相关面贴合的情况下,才停止调整,也即,确定第二虚拟对象已经与待绑网格模型贴合。其中,已调相关面为经过调整的待调网格顶点在待调整部位上的相关面,目标相关面为第一目标顶点在待绑网格模型上的相关面,而第一目标顶点是待绑网格模型上与待调网格顶点位置对应的网格顶点,待调网格顶点为待调整部位上的任一网格顶点。因此,基于前述步骤,可以将第二虚拟对象与待绑网格模型的整体贴合判断转移为面片级的贴合判断,通过减小贴合判断的对象,增加贴合判断准确性,可以保证第二虚拟对象与待绑网格模型的形状细节具有高度一致性,从而进一步提高后续获取的蒙皮数据的可靠性。
在一可选的实施方式中,“已调相关面与目标相关面贴合”可以包括以下步骤:
确定已调相关面的第一法线;
确定目标相关面的第二法线;
在第一法线与第二法线之间的夹角角度小于预设角度阈值、且已调相关面包括的多个网格面片呈平整状态的情况下,确定已调相关面与目标相关面贴合。
其中,已调相关面的第一法线可以基于已调相关面包括的多个网格面片确定。例如,可以对已调相关面包括的多个网格面片的法线作平均,获得第一法线。同样,目标相关面的第一法线可以基于目标相关面包括的多个网格面片确定。例如,可以对目标相关面包括的多个网格面片的法线作平均,获得第二法线。
本公开实施例中,预设角度阈值可以根据实际应用需求设定,本公开实施例对此不作具体限制。
本公开实施例中,可以获取已调相关面包括的多个网格面片中每个网格面片的切线与第一法线之间的夹角角度,作为待用角度,以获得多个待用角度。在多个待用角度中,任两个待用角度之间的角度差值均小于预设角度差值的情况下,确定多个网格面片呈平整状态。其中,预设角度差值可以根据实际应用需求设定,本公开实施例对此不作具体限制。
此外,需要说明的是,本公开实施例中,已调相关面所包括的网格面片的数量可以根据中间虚拟对象所包括的外部网格模型的模型组成确定。例如,外部网格模型由三角面片组成,则已调相关面包括8个网格面片,再例如,外部网格模型由四角面片组成,则已调相关面包括4个网格面片。同样,目标相关面的所包括的网格面片的数量可以根据待绑虚拟对象所包括的虚拟网格模型的模型组成确定。例如,虚拟网格模型由三角面片组成,则目标相关面包括8个网格面片,再例如,虚拟网格模型由四角面片组成,则目标相关面包括4个网格面片。
通过“已调相关面与目标相关面贴合”包括的以上步骤,本公开实施例中,可以确定已调相关面的第一法线;确定目标相关面的第二法线;在第一法线与第二法线之间的夹角角度小于预设角度阈值、且已调相关面包括的多个网格面片呈平整状态的情况下,确定已调相关面与目标相关面贴合。也就是说,本公开实施例中,可以基于第一法线与第二法线之间的夹角角度,以及已调相关面包括的多个网格面片是否呈平整状态,确定已调相关面与目标相关面是否贴合,而无需通过角点坐标的相对位置关系进行判断,从而简化根据第一目标顶点,对待调网格顶点进行调整的过程,可以更进一步地提高蒙皮数据的生成效率。
请结合图5,假设,从中间虚拟对象所包括的外部网格模型上确定待调整部位之后,待调整部位上又存在待调网格顶点A、且在待绑网格模型上确定了与待调网格顶点A位置对应的第一目标顶点B。
那么,可以通过调整待调网格顶点A的坐标位置,使待调网格顶点A靠近第一目标顶点B。在经过调整的待调网格顶点A'与第一目标顶点B之间的第二坐标间距小于第二预设距离阈值的情况下,确定待调网格顶点已经靠近第一目标顶点,此时,若已调相关面501的第一法线与目标相关面502的第二法线之间的夹角角度小于预设角度阈值、且已调相关面501包括的多个网格面片(由网格面片AA'1、网格面片AA'2、网格面片AA'3和网格面片AA'4组成的模型面片)呈平整状态,则确定已调相关面501与目标相关面502贴合。
在一些可选的实施方式中,“根据标准蒙皮数据,生成目标蒙皮数据”可以包括以下步骤:
针对待绑网格模型上的待绑网格顶点,在虚拟网格模型上确定与待绑网格顶点位置对应的第二目标顶点,待绑网格顶点为待绑网格模型上的任一网格顶点,虚拟网格模型为第二虚拟对象的网格模型;
基于标准蒙皮数据,获取第二目标顶点与相关骨骼关节建立绑定关系时所用的标准蒙皮权重,相关骨骼关节为模型骨骼上与第二目标顶点建立有绑定关系的任一骨骼关节;
根据标准蒙皮权重,获得待绑网格顶点与相关骨骼关节建立绑定关系时可用的目标蒙皮权重;
基于目标蒙皮权重,生成目标蒙皮数据。
本公开实施例中,首先,可以针对待绑网格模型上的待绑网格顶点,在虚拟网格模型上确定与待绑网格顶点位置对应的第二目标顶点。在一具体示例中,可以在虚拟网格模型上确定与待绑网格顶点距离最近的一个或多个网格顶点,作为与待绑网格顶点位置对应的第二目标顶点。此后,可以从标准蒙皮数据中直接提取第二目标顶点与相关骨骼关节建立绑定关系时所用的标准蒙皮权重,并根据标准蒙皮权重,获得待绑网格顶点与相关骨骼关节建立绑定关系时可用的目标蒙皮权重。例如,在第二目标顶点仅有一个的情况下,可以直接将标准蒙皮权重作为待绑网格顶点与相关骨骼关节建立绑定关系时可用的目标蒙皮权重。最后,整合所有蒙皮权重,生成目标蒙皮数据。
通过“根据标准蒙皮数据,生成目标蒙皮数据”包括的以上步骤,本公开实施例中,针对待绑网格模型上的待绑网格顶点,可以仅通过网格顶点的位置,在虚拟网格模型上确定与待绑网格顶点对应的第二目标顶点。此后,又可以从标准蒙皮数据中直接提取第二目标顶点与相关骨骼关节建立绑定关系时所用的标准蒙皮权重,并根据标准蒙皮权重,获得待绑网格顶点与相关骨骼关节建立绑定关系时可用的目标蒙皮权重,再基于目标蒙皮权重,生成目标蒙皮数据,从而简化根据标准蒙皮数据,生成目标蒙皮数据的过程,以更进一步地提高蒙皮数据的生成效率。
在一些可选的实施方式中,第二目标顶点有多个,基于此,“根据标准蒙皮权重,获得待绑网格顶点与相关骨骼关节建立绑定关系时可用的目标蒙皮权重”可以包括以下步骤:
分别获取每个第二目标顶点与待绑网格顶点的顶点距离;
基于每个第二目标顶点所对应的顶点距离和标准蒙皮权重,获得目标蒙皮权重。
可以理解的是,本公开实施例中,第二目标顶点的具体数量可以根据虚拟网格模型的模型组成确定。例如,虚拟网格模型由三角面片组成,则第二目标顶点的具体数量可以是3,再例如,虚拟网格模型由四角面片组成,则第二目标顶点的具体数量可以是4。
那么,在虚拟网格模型上确定与待绑网格顶点位置对应的多个第二目标顶点之后,便可以分别获取每个第二目标顶点与待绑网格顶点的顶点距离,再基于每个第二目标顶点所对应的顶点距离和标准蒙皮权重,获得目标蒙皮权重。在一具体示例中,针对每个第二目标顶点,可以根据该第二目标顶点与待绑网格顶点的顶点距离,基于反相关原则,获取该第二目标顶点与待绑蒙皮顶点的权重相关性。此后,计算每个第二目标顶点所对应的权重相关性和标准蒙皮权重的乘积,作为与待绑网格顶点对应的蒙皮权重分量。最后,计算与待绑网格顶点对应的所有蒙皮权重分量的和,作为待绑网格顶点与相关骨骼关节建立绑定关系时可用的目标蒙皮权重。
需要说明的是,本公开实施例中,对于以上的反相关原则,可以理解为,针对每个第二目标顶点,该第二目标顶点与待绑网格顶点的顶点距离越大,则该第二目标顶点与待绑蒙皮顶点的权重相关性越小,相反的,该第二目标顶点与待绑网格顶点的顶点距离越小,则该第二目标顶点与待绑蒙皮顶点的权重相关性越大。
请结合图6,假设,待绑网格模型上存在待绑网格顶点C,虚拟网格模型上与待绑网格顶点C位置对应的多个第二目标顶点包括第二目标顶点D1、第二目标顶点D2、第二目标顶点D3和第二目标顶点D4。其中,第二目标顶点D1与某一相关骨骼关节——例如,相关骨骼节点E(图中未示出)建立绑定关系时所用的标准蒙皮权重为X1,第二目标顶点D2与相关骨骼节点E建立绑定关系时所用的标准蒙皮权重为X2,第二目标顶点D3与相关骨骼节点E建立绑定关系时所用的标准蒙皮权重为X3,第二目标顶点D4与相关骨骼节点E建立绑定关系时所用的标准蒙皮权重为X4。此外,第二目标顶点D1与待绑蒙皮顶点C的权重相关性为0.7,第二目标顶点D2、第二目标顶点D3和第二目标顶点D4与待绑蒙皮顶点C的权重相关性均为0.1。
那么,待绑网格顶点C与相关骨骼关节E建立绑定关系时可用的目标蒙皮权重则为:0.7*X1+0.1*X2+0.1*X3+0.1*X4。
通过“根据标准蒙皮权重,获得待绑网格顶点与相关骨骼关节建立绑定关系时可用的目标蒙皮权重”包括的以上步骤,本公开实施例中,第二目标顶点有多个,基于此,可以获取每个第二目标顶点与待绑网格顶点的顶点距离;基于每个第二目标顶点所对应的顶点距离和标准蒙皮权重,获得目标蒙皮权重。如此,可以避免目标蒙皮权重仅依赖于一个第二目标顶点,从而进一步提高蒙皮数据的可靠性。
在一些可选的实施方式中,蒙皮数据生成方法还可以包括以下步骤:
将待绑网格模型、模型骨骼和目标蒙皮数据导入目标建模软件;
控制目标建模软件执行骨骼绑定功能,以基于目标蒙皮数据,将待绑网格模型与模型骨骼进行绑定,生成目标虚拟对象。
本公开实施例中,在根据待绑网格模型,对第一虚拟对象进行形态调整,获得第二虚拟对象之后,可以将第二虚拟对象的模型骨骼导出,并存储为三维通用格式文件,或目标建模软件可以打开的其他格式文件。其中,三维通用格式文件可以是FBX格式文件,也即,通过FBX格式进行存储的文件,FBX格式是一种三维数据交换格式,可以支持三维模型、场景层次、动画、骨骼、蒙皮数据和混合形状等数据的存储。其中,目标建模软件可以是三维建模和动画软件,例如,玛雅(MAYA)。
在将待绑网格模型、模型骨骼和目标蒙皮数据导入目标建模软件之后,可以控制目标建模软件执行骨骼绑定功能,以基于目标蒙皮数据,将待绑网格模型与模型骨骼进行绑定,生成目标虚拟对象。
通过蒙皮数据生成方法还包括的以上步骤,本公开实施例中,可以将待绑网格模型、模型骨骼和目标蒙皮数据导入目标建模软件,再控制目标建模软件执行骨骼绑定功能,以基于目标蒙皮数据,将待绑网格模型与模型骨骼进行绑定,生成目标虚拟对象,以提高虚拟对象生成的自动化程度。
以下,将结合图7,对本公开实施例提供的一种蒙皮数据生成方法的完整流程进行说明。
步骤S701,对第一虚拟对象进行基础形态调整,获得与待绑网格模型基础形态一致的中间虚拟对象;
步骤S702,对中间虚拟对象进行形状细节调整,获得与待绑网格模型贴合的第二虚拟对象,第二虚拟对象包括模型骨骼、且具有对应的标准蒙皮数据;
步骤S703,根据标准蒙皮数据,生成目标蒙皮数据。
步骤S704,将待绑网格模型、模型骨骼和目标蒙皮数据导入目标建模软件;
步骤S705,控制目标建模软件执行骨骼绑定功能,以基于目标蒙皮数据,将待绑网格模型与模型骨骼进行绑定,生成目标虚拟对象。
请参阅图8,为本公开实施例提供的一种蒙皮数据生成方法的应用场景示意图。
如前所述的,本公开实施例提供的蒙皮数据生成方法应用于电子设备。其中,电子设备旨在表示各种形式的数字计算机,诸如,服务器、刀片式服务器、工作台、大型计算机、台式计算机、膝上型计算机,或其它适合的计算机。
本公开实施例中,电子设备可以用于执行蒙皮数据生成方法:
根据待绑网格模型,对第一虚拟对象进行形态调整,获得第二虚拟对象,第二虚拟对象包括模型骨骼、且具有对应的标准蒙皮数据;
根据标准蒙皮数据,生成目标蒙皮数据,目标蒙皮数据用于将待绑网格模型与模型骨骼进行绑定。
需要说明的是,本公开实施例中,待绑网格模型和第一虚拟对象可以预先存储于电子设备中,也可以从其他设备导入,本公开实施例对此不作具体限制。
此外,还需要说明的是,本公开实施例中,图8所示的场景示意图仅为示意性而非限制性的,本领域技术人员可以基于图8示例进行各种显而易见的变化和/或替换,获得的技术方案仍属于本公开实施例的公开范围。
为了更好地实施以上蒙皮数据生成方法,本公开实施例还提供一种蒙皮数据生成装置900,该蒙皮数据生成装置900体可以集成在电子设备中。以下,将结合图9所示结构示意图,对公开实施例提供的一种蒙皮数据生成装置900进行说明。
该蒙皮数据生成装置900,包括:
模型调整单元901,用于根据待绑网格模型,对第一虚拟对象进行形态调整,获得第二虚拟对象,第二虚拟对象包括模型骨骼、且具有对应的标准蒙皮数据;
数据生成单元902,用于根据标准蒙皮数据,生成目标蒙皮数据,目标蒙皮数据用于将待绑网格模型与模型骨骼进行绑定。
在一些可选的实施方式中,模型调整单元901用于:
对第一虚拟对象进行基础形态调整,获得与待绑网格模型基础形态一致的中间虚拟对象;
对中间虚拟对象进行形状细节调整,获得与待绑网格模型贴合的第二虚拟对象。
在一些可选的实施方式中,模型调整单元901用于:
基于第一虚拟对象上的多个第一标注点,以及待绑网格模型上的多个第二标注点,确定多对相关标注点,每对相关标注点包括位置对应的一个第一标注点和一个第二标注点;
通过调节第一虚拟对象的形状参数和姿势参数中的至少一者,对第一虚拟对象进行基础形态调整,以使每对相关标注点重合。
在一些可选的实施方式中,多个第一标注点包括第一关节语义点和第一补充语义点,和/或多个第二标注点包括第二关节语义点和第二补充语义点。
在一些可选的实施方式中,模型调整单元901用于:
从中间虚拟对象上确定待调整部位;
针对待调整部位上的待调网格顶点,在待绑网格模型上确定与待调网格顶点位置对应的第一目标顶点,待调网格顶点为待调整部位上的任一网格顶点;
根据第一目标顶点,对待调网格顶点进行调整。
在一些可选的实施方式中,模型调整单元901用于:
通过调整待调网格顶点的坐标位置,使得待调网格顶点向第一目标顶点靠近,以使已调相关面与目标相关面贴合,已调相关面为经过调整的待调网格顶点在待调整部位上的相关面,目标相关面为第一目标顶点在待绑网格模型上的相关面。
在一些可选的实施方式中,模型调整单元901用于:
确定已调相关面的第一法线;
确定目标相关面的第二法线;
在第一法线与第二法线之间的夹角角度小于预设角度阈值、且已调相关面包括的多个网格面片呈平整状态的情况下,确定已调相关面与目标相关面贴合。
在一些可选的实施方式中,数据生成单元902用于:
针对待绑网格模型上的待绑网格顶点,在虚拟网格模型上确定与待绑网格顶点位置对应的第二目标顶点,待绑网格顶点为待绑网格模型上的任一网格顶点,虚拟网格模型为第二虚拟对象的网格模型;
基于标准蒙皮数据,获取第二目标顶点与相关骨骼关节建立绑定关系时所用的标准蒙皮权重,相关骨骼关节为模型骨骼上与第二目标顶点建立有绑定关系的任一骨骼关节;
根据标准蒙皮权重,获得待绑网格顶点与相关骨骼关节建立绑定关系时可用的目标蒙皮权重;
基于目标蒙皮权重,生成目标蒙皮数据。
在一些可选的实施方式中,数据生成单元902用于:
分别获取每个第二目标顶点与待绑网格顶点的顶点距离;
基于每个第二目标顶点所对应的顶点距离和标准蒙皮权重,获得目标蒙皮权重。
在一些可选的实施方式中,蒙皮数据生成装置还包括骨骼绑定单元,用于:
将待绑网格模型、模型骨骼和目标蒙皮数据导入目标建模软件;
控制目标建模软件执行骨骼绑定功能,以基于目标蒙皮数据,将待绑网格模型与模型骨骼进行绑定,生成目标虚拟对象。
具体实施时,以上各个模块可以作为独立的实体来实现,也可以进行任意组合,作为同一或若干个实体来实现,以上各个模块的具体实施可参见前面的蒙皮数据生成方法实施例,在此不作赘述。
采用本公开实施例提供的蒙皮数据生成装置可以根据待绑网格模型,对第一虚拟对象进行形态调整,获得第二虚拟对象,第二虚拟对象包括模型骨骼、且具有对应的标准蒙皮数据;根据标准蒙皮数据,生成目标蒙皮数据,目标蒙皮数据用于将待绑网格模型与模型骨骼进行绑定。由于第二虚拟对象包括模型骨骼、且具有对应的标准蒙皮数据,同时,第二虚拟对象又是根据待绑网格模型,对第一虚拟对象进行形态调整获得的,因此,可以认为第二虚拟对象与待绑网格模型整体形态一致。在此前提下,便可以根据标准蒙皮数据,生成目标蒙皮数据,以用于将待绑网格模型与模型骨骼进行绑定。相对于由动画师手动生成蒙皮数据的方案而言,实现了蒙皮数据的自动化生成,不仅可以提高蒙皮数据的生成效率,还可以节省人力资源。
本公开的技术方案中,所涉及的用户个人信息的获取,存储和应用等,均符合相关法律法规的规定,且不违背公序良俗。
根据本公开的实施例,本公开还提供了一种电子设备、存储介质及计算机程序产品。
图10示出了可以用来实施本公开的实施例的示例电子设备1000的示意性框图。
如前所述的,本公开实施例中,电子设备旨在表示各种形式的数字计算机,诸如,膝上型计算机、台式计算机、工作台、个人数字处理、服务器、刀片式服务器、大型计算机、和其它适合的计算机。电子设备还可以表示各种形式的移动装置,诸如,个人数字处理、蜂窝电话、智能电话、可穿戴设备和其它类似的计算装置。本文所示的部件、它们的连接和关系、以及它们的功能仅仅作为示例,并且不意在限制本文中描述的和/或要求的本公开的实现。
如图10所示,电子设备1000包括计算单元1001,其可以根据存储在只读存储器(Read-Only Memory,ROM)1002中的计算机程序或从存储单元1008加载到随机访问存储器(Random Access Memory,RAM)1003中的计算机程序,来执行各种适当的动作和处理。在RAM1003中,还可存储电子设备1000操作所需的各种程序和数据。计算单元1001、ROM1002以及RAM1003通过总线1004彼此相连。输入/输出(Input/Output,I/O)接口1005也连接至总线1004。
电子设备1000中的多个部件连接至I/O接口1005,包括:输入单元1006,例如,键盘、鼠标等;输出单元1007,例如,各种类型的显示器、扬声器等;存储单元1008,例如,磁盘、光盘等;以及通信单元1009,例如,网卡、调制解调器、无线通信收发机等。通信单元1009允许电子设备1000通过诸如因特网的计算机网络和/或各种电信网络与其他设备交换信息/数据。
计算单元1001可以是各种具有处理和计算能力的通用和/或专用处理组件。计算单元1001的一些示例包括但不限于中央处理单元(Central Processing Unit,CPU)、图形处理单元(Graphics Processing Unit,GPU)、各种专用的人工智能(ArtificialIntelligence,AI)计算芯片、各种运行机器学习模型算法的计算单元、数字信号处理器(Digital Signal Process,DSP)、以及任何适当的处理器、控制器、微控制器等。计算单元1001执行上文所描述的各个方法和处理,例如,蒙皮数据生成方法。例如,在一些可选的实施方式中蒙皮数据生成方法可分别被实现为计算机软件程序,其被有形地包含于非瞬时计算机可读存储介质,例如,存储单元1008。在一些可选的实施方式中,计算机程序的部分或全部可以经由ROM 1002和/或通信单元1009而被载入和/或安装到电子设备1000上。当计算机程序加载到RAM 1003并由计算单元1001执行时,可以执行上文描述的蒙皮数据生成方法的一个或多个步骤。备选地,在其他实施例中,计算单元1001可以通过其他任何适当的方式(例如,借助于固件)而被配置为执行蒙皮数据生成方法。
本文中以上描述的系统和技术的各种实施方式可以在数字电子电路系统、集成电路系统、现场可编程门阵列(Field Programmable Gate Array,FPGA)、专用集成电路(Application Specific Integrated Circuit,ASIC)、专用标准产品(ApplicationSpecific Standard Product,ASSP)、芯片上系统的系统(System On Chip,SOC)、复杂可编程逻辑器件(Complex Programmable Logic Device,CPLD)、计算机硬件、固件、软件、和/或它们的组合中实现。这些各种实施方式可以包括:实施在一个或多个计算机程序中,该一个或多个计算机程序可在包括至少一个可编程处理器的可编程系统上执行和/或解释,该可编程处理器可以是专用或通用可编程处理器,可以从存储系统、至少一个输入装置、和至少一个输出装置接收数据和指令,并且将数据和指令传输至该存储系统、该至少一个输入装置、和该至少一个输出装置。
用于实施本公开的方法的程序代码可以采用一个或多个编程语言的任何组合来编写。这些程序代码可以提供给通用计算机、专用计算机或其他可编程数据处理装置的处理器或控制器,使得程序代码当由处理器或控制器执行时使流程图和/或框图中所规定的功能/操作被实施。程序代码可以完全在机器上执行、部分地在机器上执行,作为独立软件包部分地在机器上执行且部分地在远程机器上执行或完全在远程机器或服务器上执行。
在本公开的上下文中,非瞬时计算机可读存储介质可以是有形的介质,其可以包含或存储以供指令执行系统、装置或设备使用或与指令执行系统、装置或设备结合地使用的程序。非瞬时计算机可读存储介质可以是机器可读信号介质或机器可读储存介质。非瞬时计算机可读存储介质可以包括但不限于电子的、磁性的、光学的、电磁的、红外的、或半导体系统、装置或设备,或前述内容的任何合适组合。非瞬时计算机可读存储介质的更具体示例会包括基于一个或多个线的电气连接、便携式计算机盘、硬盘、RAM、ROM、可擦除可编程只读存储器(Erasable Programmable Read-Only Memory,EPROM)或快闪存储器、光纤、便捷式紧凑盘只读存储器(Compact Disc Read-Only Memory,CD-ROM)、光学储存设备、磁储存设备、或前述内容的任何合适组合。
为了提供与用户的交互,可以在计算机上实施此处描述的系统和技术,该计算机具有:用于向用户显示信息的显示装置(例如,阴极射线管(Cathode Ray Tube,CRT)显示器或液晶显示器(Liquid Crystal Display,LCD);以及键盘和指向装置(例如,鼠标或轨迹球),用户可以通过该键盘和该指向装置来将输入提供给计算机。其它种类的装置还可以用于提供与用户的交互;例如,提供给用户的反馈可以是任何形式的传感反馈(例如,视觉反馈、听觉反馈、或触觉反馈);并且可以用任何形式(包括声输入、语音输入、或触觉输入)来接收来自用户的输入。
可以将此处描述的系统和技术实施在包括后台部件的计算系统(例如,作为数据服务器)、或包括中间件部件的计算系统(例如,应用服务器)、或包括前端部件的计算系统(例如,具有图形用户界面或网络浏览器的用户计算机,用户可以通过该图形用户界面或该网络浏览器来与此处描述的系统和技术的实施方式交互)、或包括这种后台部件、中间件部件、或前端部件的任何组合的计算系统中。可以通过任何形式或介质的数字数据通信(例如,通信网络)来将系统的部件相互连接。通信网络的示例包括:局域网(Local AreaNetwork,LAN)、广域网(Wide Area Network,WAN)和互联网。
计算机系统可以包括客户端和服务器。客户端和服务器一般远离彼此并且通常通过通信网络进行交互。通过在相应的计算机上运行并且彼此具有客户端-服务器关系的计算机程序来产生客户端和服务器的关系。服务器可以是云服务器,也可以为分布式系统的服务器,或是结合了区块链的服务器。
本公开实施例还提供了一种存储有计算机指令的非瞬时计算机可读存储介质,其中,所述计算机指令用于使所述计算机执行前述蒙皮数据生成方法。
本公开实施例还提供了一种计算机程序产品,包括计算机程序,该计算机程序在被处理器执行时实现前述蒙皮数据生成方法。
采用本公开实施例提供的电子设备、存储介质及计算机程序产品可以根据待绑网格模型,对第一虚拟对象进行形态调整,获得第二虚拟对象,第二虚拟对象包括模型骨骼、且具有对应的标准蒙皮数据;根据标准蒙皮数据,生成目标蒙皮数据,目标蒙皮数据用于将待绑网格模型与模型骨骼进行绑定。由于第二虚拟对象包括模型骨骼、且具有对应的标准蒙皮数据,同时,第二虚拟对象又是根据待绑网格模型,对第一虚拟对象进行形态调整获得的,因此,可以认为第二虚拟对象与待绑网格模型整体形态一致。在此前提下,便可以根据标准蒙皮数据,生成目标蒙皮数据,以用于将待绑网格模型与模型骨骼进行绑定。相对于由动画师手动生成蒙皮数据的方案而言,实现了蒙皮数据的自动化生成,不仅可以提高蒙皮数据的生成效率,还可以节省人力资源。
应该理解,可以使用上面所示的各种形式的流程,重新排序、增加或删除步骤。例如,本公开中记载的各步骤可以并行地执行也可以顺序地执行也可以不同的次序执行,只要能够实现本公开公开的技术方案所期望的结果,本文在此不进行限制。此外,本公开中,诸如“第一”、“第二”、“第三”等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。再者,本公开中“多个”,可以理解为至少两个。
前述具体实施方式,并不构成对本公开保护范围的限制。本领域技术人员应该明白的是,根据设计要求和其他因素,可以进行各种修改、组合、子组合和替代。任何在本公开的精神和原则之内所作的修改、等同替换和改进等,均应包含在本公开保护范围之内。
Claims (23)
1.一种蒙皮数据生成方法,包括:
根据待绑网格模型,对第一虚拟对象进行形态调整,获得第二虚拟对象,所述第二虚拟对象包括模型骨骼和虚拟网格模型、且所述虚拟网格模型基于标准蒙皮数据与所述模型骨骼建立有绑定关系;
根据所述标准蒙皮数据,生成目标蒙皮数据,所述目标蒙皮数据用于将所述待绑网格模型与所述模型骨骼进行绑定;
其中,所述根据所述标准蒙皮数据,生成目标蒙皮数据,包括:
在所述待绑网格模型与所述虚拟网格模型具有不同网络拓扑结构的情况下,基于所述待绑网格模型上的网格顶点与所述虚拟网格模型上的网格顶点的位置对应关系,根据所述标准蒙皮数据,生成所述目标蒙皮数据。
2.根据权利要求1所述的方法,其中,所述根据待绑网格模型,对第一虚拟对象进行形态调整,获得第二虚拟对象,包括:
对所述第一虚拟对象进行基础形态调整,获得与所述待绑网格模型基础形态一致的中间虚拟对象;
对所述中间虚拟对象进行形状细节调整,获得与所述待绑网格模型贴合的所述第二虚拟对象。
3.根据权利要求2所述的方法,其中,所述对所述第一虚拟对象进行基础形态调整,包括:
基于所述第一虚拟对象上的多个第一标注点,以及所述待绑网格模型上的多个第二标注点,确定多对相关标注点,每对所述相关标注点包括位置对应的一个所述第一标注点和一个所述第二标注点;
通过调节所述第一虚拟对象的形状参数和姿势参数中的至少一者,对所述第一虚拟对象进行基础形态调整,以使每对所述相关标注点重合。
4.根据权利要求3所述的方法,其中,所述多个第一标注点包括第一关节语义点和第一补充语义点,和/或所述多个第二标注点包括第二关节语义点和第二补充语义点。
5.根据权利要求2所述的方法,其中,所述对所述中间虚拟对象进行形状细节调整,包括:
从所述中间虚拟对象上确定待调整部位;
针对所述待调整部位上的待调网格顶点,在所述待绑网格模型上确定与所述待调网格顶点位置对应的第一目标顶点,所述待调网格顶点为所述待调整部位上的任一网格顶点;
根据所述第一目标顶点,对所述待调网格顶点进行调整。
6.根据权利要求5所述的方法,其中,所述根据所述第一目标顶点,对所述待调网格顶点进行调整,包括:
调整所述待调网格顶点的坐标位置,以使所述待调网格顶点靠近所述第一目标顶点、且已调相关面与目标相关面贴合,所述已调相关面为经过调整的待调网格顶点在所述待调整部位上的相关面,所述目标相关面为所述第一目标顶点在所述待绑网格模型上的相关面。
7.根据权利要求6所述的方法,其中,所述已调相关面与目标相关面贴合,包括:
确定所述已调相关面的第一法线;
确定所述目标相关面的第二法线;
在所述第一法线与所述第二法线之间的夹角角度小于预设角度阈值、且所述已调相关面包括的多个网格面片呈平整状态的情况下,确定所述已调相关面与所述目标相关面贴合。
8.根据权利要求1所述的方法,其中,所述根据所述标准蒙皮数据,生成目标蒙皮数据,包括:
针对所述待绑网格模型上的待绑网格顶点,在所述虚拟网格模型上确定与所述待绑网格顶点位置对应的第二目标顶点,所述待绑网格顶点为所述待绑网格模型上的任一网格顶点;
基于所述标准蒙皮数据,获取所述第二目标顶点与相关骨骼关节建立绑定关系时所用的标准蒙皮权重,所述相关骨骼关节为所述模型骨骼上与所述第二目标顶点建立有绑定关系的任一骨骼关节;
根据所述标准蒙皮权重,获得所述待绑网格顶点与所述相关骨骼关节建立绑定关系时可用的目标蒙皮权重;
基于所述目标蒙皮权重,生成所述目标蒙皮数据。
9.根据权利要求8所述的方法,其中,所述第二目标顶点有多个,所述根据所述标准蒙皮权重,获得所述待绑网格顶点与所述相关骨骼关节建立绑定关系时可用的目标蒙皮权重,包括:
分别获取每个所述第二目标顶点与所述待绑网格顶点的顶点距离;
基于每个所述第二目标顶点所对应的顶点距离和标准蒙皮权重,获得所述目标蒙皮权重。
10.根据权利要求1所述的方法,还包括:
将所述待绑网格模型、所述模型骨骼和所述目标蒙皮数据导入目标建模软件;
控制所述目标建模软件执行骨骼绑定功能,以基于所述目标蒙皮数据,将所述待绑网格模型与所述模型骨骼进行绑定,生成目标虚拟对象。
11.一种蒙皮数据生成装置,包括:
模型调整单元,用于根据待绑网格模型,对第一虚拟对象进行形态调整,获得第二虚拟对象,所述第二虚拟对象包括模型骨骼和虚拟网格模型、且所述虚拟网格模型基于标准蒙皮数据与所述模型骨骼建立有绑定关系;
数据生成单元,用于根据所述标准蒙皮数据,生成目标蒙皮数据,所述目标蒙皮数据用于将所述待绑网格模型与所述模型骨骼进行绑定;
其中,所述数据生成单元,用于在所述待绑网格模型与所述虚拟网格模型具有不同网络拓扑结构的情况下,基于所述待绑网格模型上的网格顶点与所述虚拟网格模型上的网格顶点的位置对应关系,根据所述标准蒙皮数据,生成所述目标蒙皮数据。
12.根据权利要求11所述的装置,其中,所述模型调整单元用于:
对所述第一虚拟对象进行基础形态调整,获得与所述待绑网格模型基础形态一致的中间虚拟对象;
对所述中间虚拟对象进行形状细节调整,获得与所述待绑网格模型贴合的所述第二虚拟对象。
13.根据权利要求12所述的装置,其中,所述模型调整单元用于:
基于所述第一虚拟对象上的多个第一标注点,以及所述待绑网格模型上的多个第二标注点,确定多对相关标注点,每对所述相关标注点包括位置对应的一个所述第一标注点和一个所述第二标注点;
通过调节所述第一虚拟对象的形状参数和姿势参数中的至少一者,对所述第一虚拟对象进行基础形态调整,以使每对所述相关标注点重合。
14.根据权利要求13所述的装置,其中,所述多个第一标注点包括第一关节语义点和第一补充语义点,和/或所述多个第二标注点包括第二关节语义点和第二补充语义点。
15.根据权利要求12所述的装置,其中,所述模型调整单元用于:
从所述中间虚拟对象上确定待调整部位;
针对所述待调整部位上的待调网格顶点,在所述待绑网格模型上确定与所述待调网格顶点位置对应的第一目标顶点,所述待调网格顶点为所述待调整部位上的任一网格顶点;
根据所述第一目标顶点,对所述待调网格顶点进行调整。
16.根据权利要求15所述的装置,其中,所述模型调整单元用于:
调整所述待调网格顶点的坐标位置,以使所述待调网格顶点靠近所述第一目标顶点、且已调相关面与目标相关面贴合,所述已调相关面为经过调整的待调网格顶点在所述待调整部位上的相关面,所述目标相关面为所述第一目标顶点在所述待绑网格模型上的相关面。
17.根据权利要求16所述的装置,其中,所述模型调整单元用于:
确定所述已调相关面的第一法线;
确定所述目标相关面的第二法线;
在所述第一法线与所述第二法线之间的夹角角度小于预设角度阈值、且所述已调相关面包括的多个网格面片呈平整状态的情况下,确定所述已调相关面与所述目标相关面贴合。
18.根据权利要求11所述的装置,其中,所述数据生成单元用于:
针对所述待绑网格模型上的待绑网格顶点,在所述虚拟网格模型上确定与所述待绑网格顶点位置对应的第二目标顶点,所述待绑网格顶点为所述待绑网格模型上的任一网格顶点;
基于所述标准蒙皮数据,获取所述第二目标顶点与相关骨骼关节建立绑定关系时所用的标准蒙皮权重,所述相关骨骼关节为所述模型骨骼上与所述第二目标顶点建立有绑定关系的任一骨骼关节;
根据所述标准蒙皮权重,获得所述待绑网格顶点与所述相关骨骼关节建立绑定关系时可用的目标蒙皮权重;
基于所述目标蒙皮权重,生成所述目标蒙皮数据。
19.根据权利要求18所述的装置,其中,所述数据生成单元用于:
分别获取每个所述第二目标顶点与所述待绑网格顶点的顶点距离;
基于每个所述第二目标顶点所对应的顶点距离和标准蒙皮权重,获得所述目标蒙皮权重。
20.根据权利要求11所述的装置,还包括骨骼绑定单元,用于:
将所述待绑网格模型、所述模型骨骼和所述目标蒙皮数据导入目标建模软件;
控制所述目标建模软件执行骨骼绑定功能,以基于所述目标蒙皮数据,将所述待绑网格模型与所述模型骨骼进行绑定,生成目标虚拟对象。
21.一种电子设备,包括:
至少一个处理器;
与所述至少一个处理器通信连接的存储器;
所述存储器存储有可被所述至少一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够执行权利要求1~10中任一项所述的方法。
22.一种存储有计算机指令的非瞬时计算机可读存储介质,其中,所述计算机指令用于使所述计算机执行根据权利要求1~10中任一项所述的方法。
23.一种计算机程序产品,包括计算机程序,所述计算机程序在被处理器执行时实现根据权利要求1~10中任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310258632.7A CN116310000B (zh) | 2023-03-16 | 2023-03-16 | 蒙皮数据生成方法、装置、电子设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310258632.7A CN116310000B (zh) | 2023-03-16 | 2023-03-16 | 蒙皮数据生成方法、装置、电子设备及存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN116310000A CN116310000A (zh) | 2023-06-23 |
CN116310000B true CN116310000B (zh) | 2024-05-14 |
Family
ID=86779307
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202310258632.7A Active CN116310000B (zh) | 2023-03-16 | 2023-03-16 | 蒙皮数据生成方法、装置、电子设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN116310000B (zh) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116883624B (zh) * | 2023-09-07 | 2023-11-21 | 海马云(天津)信息技术有限公司 | 骨骼快速绑定方法和装置、电子设备及存储介质 |
CN116912433B (zh) * | 2023-09-15 | 2023-12-19 | 摩尔线程智能科技(北京)有限责任公司 | 三维模型骨骼绑定方法、装置、设备及存储介质 |
Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005074136A (ja) * | 2003-09-03 | 2005-03-24 | Japan Science & Technology Agency | 顔形状のモデリング方法及び顔形状モデリング用プログラム |
CN106846499A (zh) * | 2017-02-09 | 2017-06-13 | 腾讯科技(深圳)有限公司 | 一种虚拟模型的生成方法及装置 |
CN111784805A (zh) * | 2020-07-03 | 2020-10-16 | 珠海金山网络游戏科技有限公司 | 一种虚拟角色交互反馈方法和装置 |
CN112184921A (zh) * | 2020-10-30 | 2021-01-05 | 北京百度网讯科技有限公司 | 虚拟形象驱动方法、装置、设备和介质 |
CN112802161A (zh) * | 2021-01-27 | 2021-05-14 | 青岛联合创智科技有限公司 | 一种三维虚拟角色智能蒙皮方法 |
CN112819971A (zh) * | 2021-01-26 | 2021-05-18 | 北京百度网讯科技有限公司 | 虚拟形象的生成方法、装置、设备和介质 |
CN113658309A (zh) * | 2021-08-25 | 2021-11-16 | 北京百度网讯科技有限公司 | 三维重建方法、装置、设备以及存储介质 |
CN114119907A (zh) * | 2020-08-27 | 2022-03-01 | 北京陌陌信息技术有限公司 | 一种人体模型的拟合方法、设备和存储介质 |
CN115049799A (zh) * | 2022-06-14 | 2022-09-13 | 北京百度网讯科技有限公司 | 3d模型和虚拟形象的生成方法和装置 |
CN115115814A (zh) * | 2022-06-23 | 2022-09-27 | 网易(杭州)网络有限公司 | 信息处理方法、装置、可读存储介质和电子装置 |
CN115131476A (zh) * | 2022-06-24 | 2022-09-30 | 北京百度网讯科技有限公司 | 虚拟对象的骨骼绑定迁移方法、装置、设备及存储介质 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7516260B2 (ja) * | 2018-05-22 | 2024-07-16 | マジック リープ, インコーポレイテッド | 仮想アバタをアニメーション化するための骨格システム |
-
2023
- 2023-03-16 CN CN202310258632.7A patent/CN116310000B/zh active Active
Patent Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005074136A (ja) * | 2003-09-03 | 2005-03-24 | Japan Science & Technology Agency | 顔形状のモデリング方法及び顔形状モデリング用プログラム |
CN106846499A (zh) * | 2017-02-09 | 2017-06-13 | 腾讯科技(深圳)有限公司 | 一种虚拟模型的生成方法及装置 |
CN111784805A (zh) * | 2020-07-03 | 2020-10-16 | 珠海金山网络游戏科技有限公司 | 一种虚拟角色交互反馈方法和装置 |
CN114119907A (zh) * | 2020-08-27 | 2022-03-01 | 北京陌陌信息技术有限公司 | 一种人体模型的拟合方法、设备和存储介质 |
CN112184921A (zh) * | 2020-10-30 | 2021-01-05 | 北京百度网讯科技有限公司 | 虚拟形象驱动方法、装置、设备和介质 |
CN112819971A (zh) * | 2021-01-26 | 2021-05-18 | 北京百度网讯科技有限公司 | 虚拟形象的生成方法、装置、设备和介质 |
CN112802161A (zh) * | 2021-01-27 | 2021-05-14 | 青岛联合创智科技有限公司 | 一种三维虚拟角色智能蒙皮方法 |
CN113658309A (zh) * | 2021-08-25 | 2021-11-16 | 北京百度网讯科技有限公司 | 三维重建方法、装置、设备以及存储介质 |
CN115049799A (zh) * | 2022-06-14 | 2022-09-13 | 北京百度网讯科技有限公司 | 3d模型和虚拟形象的生成方法和装置 |
CN115115814A (zh) * | 2022-06-23 | 2022-09-27 | 网易(杭州)网络有限公司 | 信息处理方法、装置、可读存储介质和电子装置 |
CN115131476A (zh) * | 2022-06-24 | 2022-09-30 | 北京百度网讯科技有限公司 | 虚拟对象的骨骼绑定迁移方法、装置、设备及存储介质 |
Non-Patent Citations (2)
Title |
---|
Measurement of Postural Change in Trunk Movements Using Three Sensor Modules;Wai-Yin Wong .etal;IEEE;第58卷(第8期);2737 - 2742 * |
骨骼蒙皮动画设计与实现;丁鹏 等;技术与市场(第10期);全文 * |
Also Published As
Publication number | Publication date |
---|---|
CN116310000A (zh) | 2023-06-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN116310000B (zh) | 蒙皮数据生成方法、装置、电子设备及存储介质 | |
CN109377544B (zh) | 一种人脸三维图像生成方法、装置和可读介质 | |
CN112819971B (zh) | 虚拟形象的生成方法、装置、设备和介质 | |
CN114842123B (zh) | 三维人脸重建模型训练和三维人脸形象生成方法及装置 | |
CN113658309B (zh) | 三维重建方法、装置、设备以及存储介质 | |
CN115049799B (zh) | 3d模型和虚拟形象的生成方法和装置 | |
CN115147265B (zh) | 虚拟形象生成方法、装置、电子设备和存储介质 | |
CN115409933B (zh) | 多风格纹理贴图生成方法及其装置 | |
CN113379932B (zh) | 人体三维模型的生成方法和装置 | |
CN114998490B (zh) | 一种虚拟对象生成方法、装置、设备及存储介质 | |
CN114742925A (zh) | 虚拟对象的蒙皮方法、装置、电子设备和存储介质 | |
CN117152208A (zh) | 虚拟形象的生成方法、深度学习模型的训练方法及装置 | |
CN113380269A (zh) | 视频图像生成方法、装置、设备、介质和计算机程序产品 | |
CN116092120B (zh) | 基于图像的动作确定方法、装置、电子设备及存储介质 | |
CN115713581A (zh) | 一种动态模型生成方法、装置及设备 | |
CN116524162A (zh) | 三维虚拟形象迁移方法、模型更新方法及相关设备 | |
CN116524165A (zh) | 三维表情模型的迁移方法、装置、设备和存储介质 | |
CN114078184B (zh) | 数据处理方法、装置、电子设备和介质 | |
CN113610992B (zh) | 骨骼驱动系数确定方法、装置、电子设备及可读存储介质 | |
CN116206035B (zh) | 人脸重建方法、装置、电子设备以及存储介质 | |
CN113593047B (zh) | 动作序列迁移的方法、装置及电子设备 | |
CN117557699B (zh) | 动画数据生成方法、装置、计算机设备和存储介质 | |
CN114037814B (zh) | 数据处理方法、装置、电子设备和介质 | |
CN117541690A (zh) | 数字人的表情迁移方法、装置、电子设备及存储介质 | |
KR20240139029A (ko) | 디지털 휴먼의 생성 방법, 플랫폼, 전자 기기 및 기록 매체 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |