CN105528808B - 荆楚民间故事泥塑人物数字化三维模型合成方法及系统 - Google Patents
荆楚民间故事泥塑人物数字化三维模型合成方法及系统 Download PDFInfo
- Publication number
- CN105528808B CN105528808B CN201610111171.0A CN201610111171A CN105528808B CN 105528808 B CN105528808 B CN 105528808B CN 201610111171 A CN201610111171 A CN 201610111171A CN 105528808 B CN105528808 B CN 105528808B
- Authority
- CN
- China
- Prior art keywords
- clay
- layer
- joint
- movement
- node
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects
Landscapes
- Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Computer Graphics (AREA)
- Geometry (AREA)
- Software Systems (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Processing Or Creating Images (AREA)
- Toys (AREA)
Abstract
本发明公开了一种荆楚民间故事泥塑人物数字化三维模型合成方法，包括：步骤1，数字化采集荆楚民间故事泥塑人物的视频、图片；步骤2，分层的泥塑三维模型几何建模，建模过程可分为特征点提取、表面网格模型获取、创建骨骼、蒙皮、标准模板匹配、三维模型校准、三维模型调整和三维模型输出；步骤3，泥塑三维模型的行为建模，确定泥塑人物在运动过程中的各种姿态；步骤4，基于姿态捕获的三维姿态重建；步骤5，构建荆楚文化泥塑人物资源库。本发明还提供了一种荆楚民间故事泥塑人物数字化三维模型合成系统。本发明的有益效果为：不需要三维扫描仪或立体深度摄像机，建模成本低、速度快、可操作性强；提高了建模精度；效果更逼真生动，便于修改。
Description
技术领域
本发明涉及图像处理技术领域，具体而言，涉及一种荆楚民间故事泥塑人物数字化三维模型合成方法及系统。
背景技术
目前，围绕荆楚文化遗产数字化保护与共享有重大需求，通过汇集多样化的荆楚文化资源，用以研究和集成文化遗产的数字化采集、表达、展示与传播。传统文化遗产表现形式包括文物、建筑，以及服饰、道具、动作等工艺和技艺，其数字化主要采用拍照、录像等传统数字化技术。荆楚民间故事泥塑人物是荆楚文化遗产的典型代表，传统的数字化技术已经无法满足文化遗产的创新发展，因此需要寻求传统文化遗产数字化表现的新形式和手段，支撑文化遗产数字化技术的创新发展。然而，国内外对荆楚文化的泥塑人物数字化三维模型合成的研究尚是空白。
发明内容
为解决上述问题，本发明的目的在于提供一种低成本、高精度的荆楚民间故事泥塑人物数字化三维模型合成方法及系统。
本发明提供了一种荆楚民间故事泥塑人物数字化三维模型合成方法，方法包括：
步骤1，数字化采集荆楚民间故事泥塑人物的视频、图片；
步骤2，将所述泥塑人物的泥塑三维模型分为骨骼层、肌肉层、皮肤层和服饰层，所述服饰层在最外层，所述皮肤层由平面或曲面片组成的表面模拟皮肤的几何外形，所述皮肤层环绕在所述肌肉层周围，所述骨骼层在最底层，所述骨骼层为包括多个关节点的骨骼关节模型，其中将所述泥塑人物的臀部关节作为根结点，将两个相邻的关节点中最靠近根结点位置的关节点作为父结点，连接在父结点之下的关节点为子结点，按照树形层次结构将所述根结点、所述父结点和所述子结点使用骨骼段连接起来，对分层后的泥塑三维模型进行几何建模，得到所述泥塑人物的三维几何模型；
步骤3，对所述泥塑三维模型进行行为建模，分析所述骨骼层和所述皮肤层的运动，在分析所述骨骼层的运动时，将所述父结点的运动分解为相对于所述根结点的平移运动和旋转运动，所述子结点的运动分解为相对于所述父结点的平移运动和旋转运动，所有子结点相对于其父结点均独立运动，根据所述父结点和所述子结点的运动确定所述骨骼层的运动，所述骨骼层的运动驱动所述皮肤层的变形和运动，根据所述骨骼层的运动，利用蒙皮权重这一映射关系实现所述皮肤层的运动，根据所述骨骼层和所述皮肤层的运动确定所述泥塑人物在运动过程中的各种姿态；
步骤4，对所述骨骼层运动过程中的各种姿态进行捕获，根据所述根结点的运动参数确定所述泥塑人物的位置和朝向，根据父结点的平移运动参数和旋转运动参数确定所述父结点相对于所述根结点的偏移距离和旋转角度，所述子结点的平移距离是在其父结点坐标系下的偏移距离，根据所述子结点的平移运动参数和旋转运动参数确定所述子结点相对于其父结点的偏移距离和旋转角度，根据所有子结点和所有父结点的偏移距离和旋转角度完成所述骨骼层运动姿态的重建，根据所述骨骼层和所述皮肤层的映射关系完成所述皮肤层运动姿态的重建，最终完成所述泥塑三维模型的三维姿态重建；
步骤5，根据采集到的图片、视频、所述三维几何模型和所述泥塑三维模型的三维姿态构建荆楚民间故事泥塑人物的资源库。
作为本发明进一步的改进，步骤2中几何建模的步骤具体包括：
步骤S1，对步骤1中采集到的视频、图片进行特征点提取；
步骤S2，根据提取到的特征点构建所述泥塑三维模型的网格模型；
步骤S3，创建所述泥塑人物的骨骼；
步骤S4，蒙皮，得到所述泥塑人物的三维几何模型；
步骤S5，将得到的三维几何模型与标准三维模板进行匹配；
步骤S6，对匹配后的三维几何模型进行校准，并进行纹理匹配；
步骤S7，调整三维几何模型与所述肌肉层的对应关系；
步骤S8，输出所述泥塑人物的三维几何模型。
作为本发明进一步的改进，在步骤3中，将静态的网格和内在的骨骼结合在一起，网格上的每个顶点通过蒙皮权重将骨骼空间变换映射到网格顶点，实现皮肤层的运动，在所述皮肤层中，每个顶点都对应两个参数，一个参数控制该顶点的骨骼，另一个参数表示控制骨骼程度的权重，实现从所述骨骼层到所述皮肤层的映射，所述皮肤层顶点的变形和运动通过变换影响该顶点的所有骨骼来实现，通过线性混合蒙皮算法，将所述骨骼层的运动和所述皮肤层的网格运动相分离，只需通过所述骨骼层的运动便可利用蒙皮权重这一映射关系实现网格的运动，即实现所述皮肤层的运动。
作为本发明进一步的改进，步骤2中，所述骨骼层包括21个关节点，分为1个根结点、3个父结点和17个子结点，其中将所述泥塑人物的臀部关节作为所述根结点，将所述泥塑人物的腰关节、左臀关节和右臀关节作为父结点，将所述泥塑人物的胸关节、左肩关节、左肘关节、左腕关节、左手、颈关节、头部、右肩关节、右肘关节、右腕关节和右手作为腰关节的子结点，将所述泥塑人物的左膝关节、左踝关节和左脚作为左臀关节的子结点，将所述泥塑人物的右膝关节、右踝关节和右脚作为右臀关节的子结点。
作为本发明进一步的改进，步骤5中，所述资源库包含具有湖北地域特征的荆楚民间故事所设计的泥塑人物形象文档资源库、泥塑人物传统手工艺制作过程文档资源库和泥塑人物与荆楚民间故事关联文档资源库，其中，每种类型的文档资源库均覆盖民族文化数字化资源的所有载体形态，包括文本、图片、音频、视频、三维模型和三维动作。
本发明还提供了一种荆楚民间故事泥塑人物数字化三维模型合成系统，该系统包括：
信息采集模块，数字化采集荆楚民间故事泥塑人物的视频、图片；
几何建模模块，将所述泥塑人物的泥塑三维模型分为骨骼层、肌肉层、皮肤层和服饰层，所述服饰层在最外层，所述皮肤层由平面或曲面片组成的表面模拟皮肤的几何外形，所述皮肤层环绕在所述肌肉层周围，所述骨骼层在最底层，所述骨骼层为包括多个关节点的骨骼关节模型，其中将所述泥塑人物的臀部关节作为根结点，将两个相邻的关节点中最靠近根结点位置的关节点作为父结点，连接在父结点之下的关节点为子结点，按照树形层次结构将所述根结点、所述父结点和所述子结点使用骨骼段连接起来，对分层后的泥塑三维模型进行几何建模，得到所述泥塑人物的三维几何模型；
行为建模模块，对所述泥塑三维模型进行行为建模，分析所述骨骼层和所述皮肤层的运动，在分析所述骨骼层的运动时，将所述父结点的运动分解为相对于所述根结点的平移运动和旋转运动，所述子结点的运动分解为相对于所述父结点的平移运动和旋转运动，所有子结点相对于其父结点均独立运动，根据所述父结点和所述子结点的运动确定所述骨骼层的运动，所述骨骼层的运动驱动所述皮肤层的变形和运动，根据所述骨骼层的运动，利用蒙皮权重这一映射关系实现所述皮肤层的运动，根据所述骨骼层和所述皮肤层的运动确定所述泥塑人物在运动过程中的各种姿态；
姿态重建模块，对所述骨骼层运动过程中的各种姿态进行捕获，根据所述根结点的运动参数确定所述泥塑人物的位置和朝向，根据父结点的平移运动参数和旋转运动参数确定所述父结点相对于所述根结点的偏移距离和旋转角度，所述子结点的平移距离是在其父结点坐标系下的偏移距离，根据所述子结点的平移运动参数和旋转运动参数确定所述子结点相对于其父结点的偏移距离和旋转角度，根据所有子结点和所有父结点的偏移距离和旋转角度完成所述骨骼层运动姿态的重建，根据所述骨骼层和所述皮肤层的映射关系完成所述皮肤层运动姿态的重建，最终完成所述泥塑三维模型的三维姿态重建；
资源库构建模块，根据采集到的图片、视频、所述三维几何模型和所述泥塑三维模型的三维姿态构建荆楚民间故事泥塑人物的资源库。
作为本发明进一步的改进，所述几何建模模块具体包括：
提取模块，对所述信息采集模块中采集到的视频、图片进行特征点提取；
网格模块，根据提取到的特征点构建所述泥塑三维模型的网格模型；
骨骼模块，创建所述泥塑人物的骨骼；
蒙皮模块，蒙皮，得到所述泥塑人物的三维几何模型；
匹配模块，将得到的三维几何模型与标准三维模板进行匹配；
校准模块，对匹配后的三维几何模型进行校准，并进行纹理匹配；
调整模块，调整三维几何模型与所述肌肉层的对应关系；
输出模块，输出所述泥塑人物的三维几何模型。
作为本发明进一步的改进，在所述行为建模模块中，将静态的网格和内在的骨骼结合在一起，网格上的每个顶点通过蒙皮权重将骨骼空间变换映射到网格顶点，实现皮肤层的运动，在所述皮肤层中，每个顶点都对应两个参数，一个参数控制该顶点的骨骼，另一个参数表示控制骨骼程度的权重，实现从所述骨骼层到所述皮肤层的映射，所述皮肤层顶点的变形和运动通过变换影响该顶点的所有骨骼来实现，通过线性混合蒙皮算法，将所述骨骼层的运动和所述皮肤层的网格运动相分离，只需通过所述骨骼层的运动便可利用蒙皮权重这一映射关系实现网格的运动，即实现所述皮肤层的运动。
作为本发明进一步的改进，在所述几何建模模块中，所述骨骼层包括21个关节点，分为1个根结点、3个父结点和17个子结点，其中将所述泥塑人物的臀部关节作为所述根结点，将所述泥塑人物的腰关节、左臀关节和右臀关节作为父结点，将所述泥塑人物的胸关节、左肩关节、左肘关节、左腕关节、左手、颈关节、头部、右肩关节、右肘关节、右腕关节和右手作为腰关节的子结点，将所述泥塑人物的左膝关节、左踝关节和左脚作为左臀关节的子结点，将所述泥塑人物的右膝关节、右踝关节和右脚作为右臀关节的子结点。
作为本发明进一步的改进，所述资源库构建模块中，所述资源库包含具有湖北地域特征的荆楚民间故事所设计的泥塑人物形象文档资源库、泥塑人物传统手工艺制作过程文档资源库和泥塑人物与荆楚民间故事关联文档资源库，其中，每种类型的文档资源库均覆盖民族文化数字化资源的所有载体形态，包括文本、图片、音频、视频、三维模型和三维动作。
本发明的有益效果为：
1、不需要三维扫描仪或立体深度摄像机，因此建模成本低、速度快、可操作性强；
2、提高了建模精度，提出标准三维模板，即泥塑人物的建模信息来自泥塑人物的照片图像或视频信息，建模过程利用图像特征的正交关系，并将其与标准三维模板进行比对、调整和补充来完成；
3、效果更逼真生动，便于修改。
附图说明
图1为本发明实施例所述的一种荆楚民间故事泥塑人物数字化三维模型合成方法流程示意图；
图2为图1中泥塑人物骨骼层的结构示意图；
图3为图1中几何建模的具体流程示意图；
图4为本发明实施例所述的一种荆楚民间故事泥塑人物数字化三维模型合成系统的结构示意图；
图5为图4中几何建模模块的结构示意图。
具体实施方式
下面通过具体的实施例并结合附图对本发明做进一步的详细描述。
实施例1，如图1所示，本发明实施例的一种荆楚民间故事泥塑人物数字化三维模型合成方法，该方法包括：
步骤1，数字化采集荆楚民间故事泥塑人物的视频、图片；
步骤2，将泥塑人物的泥塑三维模型分为骨骼层、肌肉层、皮肤层和服饰层，服饰层在最外层，皮肤层由平面或曲面片组成的表面模拟皮肤的几何外形，皮肤层环绕在肌肉层周围，骨骼层在最底层，骨骼层为包括多个关节点的骨骼关节模型，其中将泥塑人物的臀部关节作为根结点，将两个相邻的关节点中最靠近根结点位置的关节点作为父结点，连接在父结点之下的关结点为子结点，按照树形层次结构将根结点、父结点和子结点使用骨骼段连接起来，对分层后的泥塑三维模型进行几何建模，得到泥塑人物的三维几何模型；
人体一共包括206块骨骼、200多个关节和600多块骨骼肌，在建模过程中，如果将这些全部描述出来虽提高了骨骼关节系统表示的真实性，但同时更多的是增加了骨骼关节模型的复杂性和可控性难度，根据H-Anim标准，将人体骨骼关节模型简化为21个关节点，如图2所示，泥塑人物的骨骼层包括21个关节点，分为1个根结点、3个父结点和17个子结点，其中将泥塑人物的臀部关节作为根结点，将泥塑人物的腰关节、左臀关节和右臀关节作为父结点，将泥塑人物的胸关节、左肩关节、左肘关节、左腕关节、左手、颈关节、头部、右肩关节、右肘关节、右腕关节和右手作为腰关节的子结点，将泥塑人物的左膝关节、左踝关节和左脚作为左臀关节的子结点，将泥塑人物的右膝关节、右踝关节和右脚作为右臀关节的子结点；
如图3所示，几何建模的步骤具体包括：
步骤S1，对步骤1中采集到的视频、图片进行特征点提取；
步骤S2，根据提取到的特征点构建泥塑三维模型的网格模型；
步骤S3，创建泥塑人物的骨骼；
步骤S4，蒙皮，得到泥塑人物的三维几何模型；
步骤S5，将得到的三维几何模型与标准三维模板进行匹配；
步骤S6，对匹配后的三维几何模型进行校准，并进行纹理匹配；
步骤S7，调整三维几何模型与肌肉层的对应关系；
步骤S8，输出泥塑人物的三维几何模型；
步骤3，对泥塑三维模型进行行为建模，分析骨骼层和皮肤层的运动，在分析骨骼层的运动时，将父结点的运动分解为相对于根结点的平移运动和旋转运动，子结点的运动分解为相对于父结点的平移运动和旋转运动，所有子结点相对于其父结点均独立运动，根据父结点和子结点的运动确定骨骼层的运动，将静态的网格和内在的骨骼结合在一起，网格上的每个顶点通过蒙皮权重将骨骼空间变换映射到网格顶点，实现皮肤层的运动，在皮肤层中，每个顶点都对应两个参数，一个参数控制该顶点的骨骼，另一个参数表示控制骨骼程度的权重，实现从骨骼层到皮肤层的映射，皮肤层顶点的变形和运动通过变换影响该顶点的所有骨骼来实现，通过线性混合蒙皮算法，将骨骼层的运动和皮肤层的网格运动相分离，只需通过骨骼层的运动便可利用蒙皮权重这一映射关系实现网格的运动，即实现皮肤层的运动，根据骨骼层和皮肤层的运动确定泥塑人物在运动过程中的各种姿态；
步骤4，对骨骼层运动过程中的各种姿态进行捕获，根据根结点的运动参数确定泥塑人物的位置和朝向，根据父结点的平移运动参数和旋转运动参数确定父结点相对于根结点的偏移距离和旋转角度，子结点的平移距离是在其父结点坐标系下的偏移距离，根据子结点的平移运动参数和旋转运动参数确定子结点相对于其父结点的偏移距离和旋转角度，根据所有子结点和所有父结点的偏移距离和旋转角度完成骨骼层运动姿态的重建，根据骨骼层和皮肤层的映射关系完成皮肤层运动姿态的重建，最终完成泥塑三维模型的三维姿态重建；
步骤5，根据采集到的图片、视频、三维几何模型和泥塑三维模型的三维姿态构建荆楚民间故事泥塑人物的资源库，该资源库包含具有湖北地域特征的荆楚民间故事所设计的泥塑人物形象文档资源库、泥塑人物传统手工艺制作过程文档资源库和泥塑人物与荆楚民间故事关联文档资源库，其中，每种类型的文档资源库均覆盖民族文化数字化资源的所有载体形态，包括文本、图片、音频、视频、三维模型和三维动作。
实施例2，如图4所示，本发明还提供了一种荆楚民间故事泥塑人物数字化三维模型合成系统，该系统包括：
信息采集模块，数字化采集荆楚民间故事泥塑人物的视频、图片；
几何建模模块，将泥塑人物的泥塑三维模型分为骨骼层、肌肉层、皮肤层和服饰层，服饰层在最外层，皮肤层由平面或曲面片组成的表面模拟皮肤的几何外形，皮肤层环绕在肌肉层周围，骨骼层在最底层，骨骼层为包括多个关节点的骨骼关节模型，其中将泥塑人物的臀部关节作为根结点，将两个相邻的关节点中最靠近根结点位置的关节点作为父结点，连接在父结点之下的关节点为子结点，按照树形层次结构将根结点、父结点和子结点使用骨骼段连接起来，对分层后的泥塑三维模型进行几何建模，得到泥塑人物的三维几何模型；
如图2所示，泥塑人物的骨骼层包括21个关节点，分为1个根结点、3个父结点和17个子结点，其中将泥塑人物的臀部关节作为根结点，将泥塑人物的腰关节、左臀关节和右臀关节作为父结点，将泥塑人物的胸关节、左肩关节、左肘关节、左腕关节、左手、颈关节、头部、右肩关节、右肘关节、右腕关节和右手作为腰关节的子结点，将泥塑人物的左膝关节、左踝关节和左脚作为左臀关节的子结点，将泥塑人物的右膝关节、右踝关节和右脚作为右臀关节的子结点；
如图5所示，所述几何建模模块具体包括：
提取模块，对信息采集模块中采集到的视频、图片进行特征点提取；
网格模块，根据提取到的特征点构建泥塑三维模型的网格模型；
骨骼模块，创建泥塑人物的骨骼；
蒙皮模块，蒙皮，得到泥塑人物的三维几何模型；
匹配模块，将得到的三维几何模型与标准三维模板进行匹配；
校准模块，对匹配后的三维几何模型进行校准，并进行纹理匹配；
调整模块，调整三维几何模型与肌肉层的对应关系；
输出模块，输出泥塑人物的三维几何模型；
行为建模模块，对泥塑三维模型进行行为建模，分析骨骼层和皮肤层的运动，在分析骨骼层的运动时，将父结点的运动分解为相对于根结点的平移运动和旋转运动，子结点的运动分解为相对于父结点的平移运动和旋转运动，所有子结点相对于其父结点均独立运动，根据父结点和子结点的运动确定骨骼层的运动，将静态的网格和内在的骨骼结合在一起，网格上的每个顶点通过蒙皮权重将骨骼空间变换映射到网格顶点，实现皮肤层的运动，在皮肤层中，每个顶点都对应两个参数，一个参数控制该顶点的骨骼，另一个参数表示控制骨骼程度的权重，实现从骨骼层到皮肤层的映射，皮肤层顶点的变形和运动通过变换影响该顶点的所有骨骼来实现，通过线性混合蒙皮算法，将骨骼层的运动和皮肤层的网格运动相分离，只需通过骨骼层的运动便可利用蒙皮权重这一映射关系实现网格的运动，即实现皮肤层的运动，根据骨骼层和皮肤层的运动确定泥塑人物在运动过程中的各种姿态；
姿态重建模块，对骨骼层运动过程中的各种姿态进行捕获，根据根结点的运动参数确定泥塑人物的位置和朝向，根据父结点的平移运动参数和旋转运动参数确定父结点相对于根结点的偏移距离和旋转角度，子结点的平移距离是在其父结点坐标系下的偏移距离，根据子结点的平移运动参数和旋转运动参数确定子结点相对于其父结点的偏移距离和旋转角度，根据所有子结点和所有父结点的偏移距离和旋转角度完成骨骼层运动姿态的重建，根据骨骼层和皮肤层的映射关系完成皮肤层运动姿态的重建，最终完成泥塑三维模型的三维姿态重建；
资源库构建模块，根据采集到的图片、视频、三维几何模型和泥塑三维模型的三维姿态构建荆楚民间故事泥塑人物的资源库，该资源库包含具有湖北地域特征的荆楚民间故事所设计的泥塑人物形象文档资源库、泥塑人物传统手工艺制作过程文档资源库和泥塑人物与荆楚民间故事关联文档资源库，其中，每种类型的文档资源库均覆盖民族文化数字化资源的所有载体形态，包括文本、图片、音频、视频、三维模型和三维动作。
以上仅为本发明的优选实施例而已，并不用于限制本发明，对于本领域的技术人员来说，本发明可以有各种更改和变化。凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。
Claims (8)
1.一种荆楚民间故事泥塑人物数字化三维模型合成方法，其特征在于，该方法包括：
步骤1，数字化采集荆楚民间故事泥塑人物的视频、图片；
步骤2，将所述泥塑人物的泥塑三维模型分为骨骼层、肌肉层、皮肤层和服饰层，所述服饰层在最外层，所述皮肤层由平面或曲面片组成的表面模拟皮肤的几何外形，所述皮肤层环绕在所述肌肉层周围，所述骨骼层在最底层，所述骨骼层为包括多个关节点的骨骼关节模型，其中将所述泥塑人物的臀部关节作为根结点，将两个相邻的关节点中最靠近根结点位置的关节点作为父结点，连接在父结点之下的关节点为子结点，按照树形层次结构将所述根结点、所述父结点和所述子结点使用骨骼段连接起来，对分层后的泥塑三维模型进行几何建模，得到所述泥塑人物的三维几何模型；
其中，几何建模的步骤具体包括：
步骤S1，对步骤1中采集到的视频、图片进行特征点提取；
步骤S2，根据提取到的特征点构建所述泥塑三维模型的网格模型；
步骤S3，创建所述泥塑人物的骨骼；
步骤S4，蒙皮，得到所述泥塑人物的三维几何模型；
步骤S5，将得到的三维几何模型与标准三维模板进行匹配；
步骤S6，对匹配后的三维几何模型进行校准，并进行纹理匹配；
步骤S7，调整三维几何模型与所述肌肉层的对应关系；
步骤S8，输出所述泥塑人物的三维几何模型；
步骤3，对所述泥塑三维模型进行行为建模，分析所述骨骼层和所述皮肤层的运动，在分析所述骨骼层的运动时，将所述父结点的运动分解为相对于所述根结点的平移运动和旋转运动，所述子结点的运动分解为相对于所述父结点的平移运动和旋转运动，所有子结点相对于其父结点均独立运动，根据所述父结点和所述子结点的运动确定所述骨骼层的运动，所述骨骼层的运动驱动所述皮肤层的变形和运动，根据所述骨骼层的运动，利用蒙皮权重这一映射关系实现所述皮肤层的运动，根据所述骨骼层和所述皮肤层的运动确定所述泥塑人物在运动过程中的各种姿态；
步骤4，对所述骨骼层运动过程中的各种姿态进行捕获，根据所述根结点的运动参数确定所述泥塑人物的位置和朝向，根据父结点的平移运动参数和旋转运动参数确定所述父结点相对于所述根结点的偏移距离和旋转角度，所述子结点的平移距离是在其父结点坐标系下的偏移距离，根据所述子结点的平移运动参数和旋转运动参数确定所述子结点相对于其父结点的偏移距离和旋转角度，根据所有子结点和所有父结点的偏移距离和旋转角度完成所述骨骼层运动姿态的重建，根据所述骨骼层和所述皮肤层的映射关系完成所述皮肤层运动姿态的重建，最终完成所述泥塑三维模型的三维姿态重建；
步骤5，根据采集到的图片、视频、所述三维几何模型和所述泥塑三维模型的三维姿态构建荆楚民间故事泥塑人物的资源库。
2.根据权利要求1所述的荆楚民间故事泥塑人物数字化三维模型合成方法，其特征在于，在步骤3中，将静态的网格和内在的骨骼结合在一起，网格上的每个顶点通过蒙皮权重将骨骼空间变换映射到网格顶点，实现皮肤层的运动，在所述皮肤层中，每个顶点都对应两个参数，一个参数控制该顶点的骨骼，另一个参数表示控制骨骼程度的权重，实现从所述骨骼层到所述皮肤层的映射，所述皮肤层顶点的变形和运动通过变换影响该顶点的所有骨骼来实现，通过线性混合蒙皮算法，将所述骨骼层的运动和所述皮肤层的网格运动相分离，只需通过所述骨骼层的运动便可利用蒙皮权重这一映射关系实现网格的运动，即实现所述皮肤层的运动。
3.根据权利要求1所述的荆楚民间故事泥塑人物数字化三维模型合成方法，其特征在于，步骤2中，所述骨骼层包括21个关节点，分为1个根结点、3个父结点和17个子结点，其中将所述泥塑人物的臀部关节作为所述根结点，将所述泥塑人物的腰关节、左臀关节和右臀关节作为父结点，将所述泥塑人物的胸关节、左肩关节、左肘关节、左腕关节、左手、颈关节、头部、右肩关节、右肘关节、右腕关节和右手作为腰关节的子结点，将所述泥塑人物的左膝关节、左踝关节和左脚作为左臀关节的子结点，将所述泥塑人物的右膝关节、右踝关节和右脚作为右臀关节的子结点。
4.根据权利要求1-3中任意一项所述的荆楚民间故事泥塑人物数字化三维模型合成方法，其特征在于，步骤5中，所述资源库包含具有湖北地域特征的荆楚民间故事所设计的泥塑人物形象文档资源库、泥塑人物传统手工艺制作过程文档资源库和泥塑人物与荆楚民间故事关联文档资源库，其中，每种类型的文档资源库均覆盖民族文化数字化资源的所有载体形态，包括文本、图片、音频、视频、三维模型和三维动作。
5.一种荆楚民间故事泥塑人物数字化三维模型合成系统，其特征在于，该系统包括：
信息采集模块，数字化采集荆楚民间故事泥塑人物的视频、图片；
几何建模模块，将所述泥塑人物的泥塑三维模型分为骨骼层、肌肉层、皮肤层和服饰层，所述服饰层在最外层，所述皮肤层由平面或曲面片组成的表面模拟皮肤的几何外形，所述皮肤层环绕在所述肌肉层周围，所述骨骼层在最底层，所述骨骼层为包括多个关节点的骨骼关节模型，其中将所述泥塑人物的臀部关节作为根结点，将两个相邻的关节点中最靠近根结点位置的关节点作为父结点，连接在父结点之下的关节点为子结点，按照树形层次结构将所述根结点、所述父结点和所述子结点使用骨骼段连接起来，对分层后的泥塑三维模型进行几何建模，得到所述泥塑人物的三维几何模型；
其中，所述几何建模模块具体包括：
提取模块，对所述信息采集模块中采集到的视频、图片进行特征点提取；
网格模块，根据提取到的特征点构建所述泥塑三维模型的网格模型；
骨骼模块，创建所述泥塑人物的骨骼；
蒙皮模块，蒙皮，得到所述泥塑人物的三维几何模型；
匹配模块，将得到的三维几何模型与标准三维模板进行匹配；
校准模块，对匹配后的三维几何模型进行校准，并进行纹理匹配；
调整模块，调整三维几何模型与所述肌肉层的对应关系；
输出模块，输出所述泥塑人物的三维几何模型；
行为建模模块，对所述泥塑三维模型进行行为建模，分析所述骨骼层和所述皮肤层的运动，在分析所述骨骼层的运动时，将所述父结点的运动分解为相对于所述根结点的平移运动和旋转运动，所述子结点的运动分解为相对于所述父结点的平移运动和旋转运动，所有子结点相对于其父结点均独立运动，根据所述父结点和所述子结点的运动确定所述骨骼层的运动，所述骨骼层的运动驱动所述皮肤层的变形和运动，根据所述骨骼层的运动，利用蒙皮权重这一映射关系实现所述皮肤层的运动，根据所述骨骼层和所述皮肤层的运动确定所述泥塑人物在运动过程中的各种姿态；
姿态重建模块，对所述骨骼层运动过程中的各种姿态进行捕获，根据所述根结点的运动参数确定所述泥塑人物的位置和朝向，根据父结点的平移运动参数和旋转运动参数确定所述父结点相对于所述根结点的偏移距离和旋转角度，所述子结点的平移距离是在其父结点坐标系下的偏移距离，根据所述子结点的平移运动参数和旋转运动参数确定所述子结点相对于其父结点的偏移距离和旋转角度，根据所有子结点和所有父结点的偏移距离和旋转角度完成所述骨骼层运动姿态的重建，根据所述骨骼层和所述皮肤层的映射关系完成所述皮肤层运动姿态的重建，最终完成所述泥塑三维模型的三维姿态重建；
资源库构建模块，根据采集到的图片、视频、所述三维几何模型和所述泥塑三维模型的三维姿态构建荆楚民间故事泥塑人物的资源库。
6.根据权利要求5所述的荆楚民间故事泥塑人物数字化三维模型合成系统，其特征在于，在所述行为建模模块中，将静态的网格和内在的骨骼结合在一起，网格上的每个顶点通过蒙皮权重将骨骼空间变换映射到网格顶点，实现皮肤层的运动，在所述皮肤层中，每个顶点都对应两个参数，一个参数控制该顶点的骨骼，另一个参数表示控制骨骼程度的权重，实现从所述骨骼层到所述皮肤层的映射，所述皮肤层顶点的变形和运动通过变换影响该顶点的所有骨骼来实现，通过线性混合蒙皮算法，将所述骨骼层的运动和所述皮肤层的网格运动相分离，只需通过所述骨骼层的运动便可利用蒙皮权重这一映射关系实现网格的运动，即实现所述皮肤层的运动。
7.根据权利要求5所述的荆楚民间故事泥塑人物数字化三维模型合成系统，其特征在于，在所述几何建模模块中，所述骨骼层包括21个关节点，分为1个根结点、3个父结点和17个子结点，其中将所述泥塑人物的臀部关节作为所述根结点，将所述泥塑人物的腰关节、左臀关节和右臀关节作为父结点，将所述泥塑人物的胸关节、左肩关节、左肘关节、左腕关节、左手、颈关节、头部、右肩关节、右肘关节、右腕关节和右手作为腰关节的子结点，将所述泥塑人物的左膝关节、左踝关节和左脚作为左臀关节的子结点，将所述泥塑人物的右膝关节、右踝关节和右脚作为右臀关节的子结点。
8.根据权利要求5-7中任意一项所述的荆楚民间故事泥塑人物数字化三维模型合成系统，其特征在于，所述资源库构建模块中，所述资源库包含具有湖北地域特征的荆楚民间故事所设计的泥塑人物形象文档资源库、泥塑人物传统手工艺制作过程文档资源库和泥塑人物与荆楚民间故事关联文档资源库，其中，每种类型的文档资源库均覆盖民族文化数字化资源的所有载体形态，包括文本、图片、音频、视频、三维模型和三维动作。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201610111171.0A CN105528808B (zh) | 2016-02-29 | 2016-02-29 | 荆楚民间故事泥塑人物数字化三维模型合成方法及系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201610111171.0A CN105528808B (zh) | 2016-02-29 | 2016-02-29 | 荆楚民间故事泥塑人物数字化三维模型合成方法及系统 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN105528808A CN105528808A (zh) | 2016-04-27 |
| CN105528808B true CN105528808B (zh) | 2018-07-24 |
Family
ID=55771009
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201610111171.0A Expired - Fee Related CN105528808B (zh) | 2016-02-29 | 2016-02-29 | 荆楚民间故事泥塑人物数字化三维模型合成方法及系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN105528808B (zh) |
Families Citing this family (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN108257205B (zh) | 2016-12-29 | 2021-11-12 | 阿里巴巴集团控股有限公司 | 一种三维模型构建方法、装置及系统 |
| CN106960467A (zh) * | 2017-03-22 | 2017-07-18 | 北京太阳花互动科技有限公司 | 一种带有骨骼信息的人脸重构方法和系统 |
| CN107945285B (zh) * | 2017-10-11 | 2021-05-04 | 浙江慧脑信息科技有限公司 | 一种三维模型换贴图和变形方法 |
| CN110660017A (zh) * | 2019-09-02 | 2020-01-07 | 北京航空航天大学 | 一种基于三维姿态识别的舞谱记录与演示方法 |
| CN110853131A (zh) * | 2019-09-30 | 2020-02-28 | 西安交通大学 | 一种用于行为识别的虚拟视频数据生成方法 |
| CN111445561B (zh) * | 2020-03-25 | 2023-11-17 | 北京百度网讯科技有限公司 | 虚拟对象的处理方法、装置、设备及存储介质 |
| WO2022024200A1 (ja) * | 2020-07-27 | 2022-02-03 | 株式会社Vrc | ３ｄデータシステム及び３ｄデータ生成方法 |
| CN115122814A (zh) * | 2022-07-21 | 2022-09-30 | 北京共赏文化传媒有限公司 | 美术雕塑方法 |
Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101101673A (zh) * | 2007-06-29 | 2008-01-09 | 中国科学院计算技术研究所 | 一种动物体模型层次划分方法 |
| CN101719284A (zh) * | 2009-12-25 | 2010-06-02 | 北京航空航天大学 | 一种基于层次模型的虚拟人皮肤物理变形方法 |
-
2016
- 2016-02-29 CN CN201610111171.0A patent/CN105528808B/zh not_active Expired - Fee Related
Patent Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101101673A (zh) * | 2007-06-29 | 2008-01-09 | 中国科学院计算技术研究所 | 一种动物体模型层次划分方法 |
| CN101719284A (zh) * | 2009-12-25 | 2010-06-02 | 北京航空航天大学 | 一种基于层次模型的虚拟人皮肤物理变形方法 |
Non-Patent Citations (2)
| Title |
|---|
| 改进的骨骼蒙皮算法模拟皮肤变形;夏开建 等;《计算机应用与软件》;20091231;第26卷(第12期);第174-176页 * |
| 数据驱动的角色动画关键技术研究;张巧生;《中国优秀硕士学位论文全文数据库 信息科技辑》;20110515(第5期);正文第14-26页 * |
Also Published As
| Publication number | Publication date |
|---|---|
| CN105528808A (zh) | 2016-04-27 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN105528808B (zh) | 荆楚民间故事泥塑人物数字化三维模型合成方法及系统 | |
| CN101833788B (zh) | 一种采用手绘草图的三维人体建模方法 | |
| CN102467753B (zh) | 基于骨架配准的时变点云重建方法及系统 | |
| CN108717723B (zh) | 一种基于草图实现形状保持的树木变形动画方法 | |
| CN105006016B (zh) | 一种贝叶斯网络约束的部件级三维模型构建方法 | |
| CN100440257C (zh) | 一种虚拟人群运动的三维可视化方法 | |
| CN105513131B (zh) | 一种顾及褶皱的三维地质结构模型角点网格剖分方法 | |
| CN104408775B (zh) | 基于深度感知的三维皮影戏制作方法 | |
| CN111291431A (zh) | 一种产生三维全成型针织纸样的方法 | |
| CN103208133A (zh) | 一种图像中人脸胖瘦的调整方法 | |
| CN102982578A (zh) | 单幅人物图像中着装人体三维模型估计方法 | |
| CN108564642A (zh) | 基于ue引擎的无标记表演捕捉系统 | |
| CN101246601A (zh) | 基于关键帧和时空约束的三维虚拟人体运动生成方法 | |
| Zordan et al. | Breathe easy: Model and control of human respiration for computer animation | |
| CN105913486A (zh) | 一种用于服装工业的数字化混合人体快速建模方法 | |
| Merchán et al. | Digital fabrication of cultural heritage artwork replicas. In the search for resilience and socio-cultural commitment | |
| CN102467749A (zh) | 基于关键帧和时空约束的三维虚拟人体运动生成方法 | |
| CN101477703B (zh) | 基于语义模型的运动捕捉数据直接驱动的人体动画方法 | |
| CN103383778B (zh) | 一种三维卡通人脸生成方法和系统 | |
| Tao et al. | Human modeling and real-time motion reconstruction for micro-sensor motion capture | |
| CN103793552A (zh) | 一种软组织形变的局部质点弹簧模型的实时动态生成方法 | |
| KR101095860B1 (ko) | 인체 모델의 형상 변형 방법 | |
| CN105957154B (zh) | 一种数据驱动的三维模型编辑方法及系统 | |
| Ma et al. | Realistic modeling and animation of human body based on scanned data | |
| Li et al. | Automatically constructing skeletons and parametric structures for polygonal human bodies |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant | ||
| CF01 | Termination of patent right due to non-payment of annual fee | ||
| CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20180724 Termination date: 20210228 |