CN108876881A - 基于Kinect的体型自适应三维虚拟人体模型构建方法及动画系统 - Google Patents
基于Kinect的体型自适应三维虚拟人体模型构建方法及动画系统 Download PDFInfo
- Publication number
- CN108876881A CN108876881A CN201810566056.1A CN201810566056A CN108876881A CN 108876881 A CN108876881 A CN 108876881A CN 201810566056 A CN201810566056 A CN 201810566056A CN 108876881 A CN108876881 A CN 108876881A
- Authority
- CN
- China
- Prior art keywords
- human body
- human
- data
- kinect
- manikin
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T13/00—Animation
- G06T13/20—3D [Three Dimensional] animation
- G06T13/40—3D [Three Dimensional] animation of characters, e.g. humans, animals or virtual beings
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Processing Or Creating Images (AREA)
Abstract
本发明公开了一种基于Kinect的体型自适应三维虚拟人体模型构建方法，包括：利用Kinect获取彩色和深度图像；从图像中识别人体；提取人体关节点数据；对人体关节点数据进行平滑操作；提取真实人体在深度图像中臀宽和身高；计算真实人体与标准人体体型数据的比例系数；通过比例系数调整虚拟人体模型；计算骨骼间旋转矩阵；对虚拟人体模型进行骨骼运动及蒙皮操作，渲染更新后的三维虚拟人模型。相应地，本发明还提供了一种基于Kinect的体型自适应三维虚拟人体动画系统。本发明利用Kinect的人体关节点识别技术、骨骼动画技术及虚拟现实技术，构建适合真实人体体型的三维虚拟人体模型，并能利用Kinect驱动虚拟人体模型运动，本发明能增强真实感，大大提升用户体验。
Description
技术领域
本发明涉及计算机图像处理领域和计算机图形学领域，特别是一种基于Kinect的体型自适应三维虚拟人体模型构建方法和动画系统。
背景技术
近年来，虚拟现实技术一度火热起来。虚拟现实技术是以计算机技术为核心，通过某种或多种传感设备可以创建“虚拟世界”环境，让用户沉浸其中并且能与之交互。虚拟现实技术能给用户提供视觉、听觉、以及触觉等方面的感受，使用户有种身临其境的感觉。
三维虚拟人动画在游戏和电影等行业都有着广泛的应用。通常类似于Maya和3DMax等商业动画软件可以制作三维虚拟人动画，但这些软件的使用操作复杂、工作量大，使用过程中依赖于以往的经验性，上手比较困难，往往需要专业人士操作。人体建模以及动画制作过程都需要大量的人机交互，计算机只能支持图形绘制和显示，需要极大地消耗动画制作人员的精力。动画中如果出现不同体型的动画角色，则需要提供不同的动画人物模型，并且这种方式制作的动画重用率不高，如果想要改变三维虚拟人的动作，需要重新制作一套动画。
发明内容
本发明为解决现有技术存在的不足，提供一种基于Kinect的体型自适应三维虚拟人体模型构建方法和动画系统。
本发明所采用的技术方案如下：一种基于Kinect的体型自适应三维虚拟人体模型构建方法，包括以下步骤：
S1、Kinect实时扫描获取人体的彩色图像和深度图像；
S2、利用获取的彩色图像和深度图像，识别人体；
S3、在识别的人体中获取人体关节点数据；
S4、对人体关节点数据进行平滑处理；
S5、获取深度图像中人体臀部宽度数据和人体身高数据；
S6、计算真实人体体型数据与标准人体体型数据的比例系数；
S7、调整人体模型体型，在符合标准人体体型的人体模型上，调整胖瘦系数和身高系数从而获得符合真实人体体型的人体模型；
S8、计算各骨骼旋转矩阵，根据真实人体关节点骨骼间的关系，以及人体模型初始姿态下的骨骼间的关系，从人体模型的根节点开始，利用罗德里格旋转公式，求出要各骨骼间的旋转矩阵；
S9、利用求得骨骼旋转矩阵以及线性混合蒙皮算法，渲染姿势更新后的人体模型。
作为优选，所述步骤S2中，对图像进行人体识别时，若未识别到人体，则重新获取彩色图像及深度图像；所述步骤S3中，对人体进行关节点获取时，若未获取到所有关节点，则重新获取彩色图像及深度图像。
作为优选，所述步骤S4中，使用滤波核大小为5的均值滤波平滑处理各个关节在三维空间中的坐标数据。
作为优选，所述步骤S5中，使用深度图像中的人体臀部宽度值和人体头部到双脚踝最低处的值表示人体臀部宽度数据和人体身高数据，具体包括如下步骤：
4.1)将通过Kinect关节点识别所获得的臀部关节、头部关节、左脚踝关节、右脚踝关节的相机坐标转化为深度图像中的坐标；
4.2)将深度图像进行二值化，得到人体轮廓；
4.3)从深度图像中的臀部关节位置进行横向扩展，识别人体轮廓中臀部边界，获取像素值，将其标为真实人体的臀部宽度数据；
4.4)从深度图像中头部关节到左右脚踝关节最远处，获取纵向像素值，将其表位真实人体的身高数据。
作为优选，所述步骤S6中，标准人体体型数据由最小二乘法曲线拟合得到，具体包括如下步骤：
a)指定一标准人体，采集其到Kinect不同距离下的臀部宽度数据以及身高数据；
b)将距离的倒数分别于臀部宽度数据与身高数据进行最小二乘法拟合，得到距离的倒数分别与臀部宽度数据和身高数据的线性关系。
作为优选，所述步骤S7中，符合标准人体体型的人体模型通过一下步骤构建而成：
a)分别建立矮瘦和高胖人体模型；
d)使用插值的方式调整人体模型，包括人体模型表面顶点数据和人体模型关节点数据；
c)手动调节胖瘦系数和身高系数，使人体模型的体型与标准人体体型相匹配。
本发明的另一目的是提供一种基于Kinect的体型自适应三维虚拟人体动画系统，所述系统包括：
图像采集模块，用于利用Kinect获取彩色图像及深度图像；
人体识别模块，用于利用获取的彩色图像和深度图像来识别人体；
人体关节点提取模块，用于在识别的人体中的人体关节点数据；
骨架数据平滑处理模块，用于对人体关节点数据进行平滑处理；
真实人体体型提取模块，用于提取深度图像中人体臀部宽度数据和人体身高数据；
体型比例计算模块，用于计算真实人体体型数据与标准人体体型数据的比例系数；
虚拟人体型调整模块，用于在符合标准人体体型的人体模型上，调整胖瘦系数和身高系数从而获得符合真实人体体型的人体模型；
骨骼旋转矩阵计算模块，用于根据真实人体关节点骨骼间的关系，以及人体模型初始姿态下的骨骼间的关系，从人体模型的根节点开始，利用罗德里格旋转公式，求出要各骨骼间的旋转矩阵；
骨架变形及蒙皮模块，用于使用骨骼旋转矩阵调整模型的骨架动作，并使用线性混合蒙皮算法进行蒙皮操作，渲染姿势更新后的人体模型。
作为优选，所述真实人体体型提取模块使用深度图像中的人体臀部宽度值和人体头部到双脚踝最低处的值表示人体臀部宽度数据和人体身高数据，并求出真实人体与标准人体的体型比例系数，具体包括如下步骤：
a)将通过Kinect关节点识别所获得的臀部关节、头部关节、左脚踝关节、右脚踝关节的相机坐标转化为深度图像中的坐标；
b)将深度图像进行二值化，得到人体轮廓；
c)从深度图像中的臀部关节位置进行横向扩展，识别人体轮廓中臀部边界，获取像素值，将其标为真实人体的臀部宽度数据；
d)从深度图像中头部关节到左右脚踝关节最远处，获取纵向像素值，将其表位真实人体的身高数据。
作为优选，所述体型比例计算模块中，标准人体体型数据由最小二乘法曲线拟合得到，具体包括如下步骤：
a)指定一标准人体，采集其到Kinect不同距离下的臀部宽度数据以及身高数据；
b)将距离的倒数分别于臀部宽度数据与身高数据进行最小二乘法拟合，得到距离的倒数分别与臀部宽度数据和身高数据的线性关系；
作为优选，所述虚拟人体型调整模块中，符合标准人体体型的人体模型通过一下步骤构建而成：
a)分别建立矮瘦和高胖人体模型；
d)使用插值的方式调整人体模型，包括人体模型表面顶点数据和人体模型关节点数据；
c)手动调节胖瘦系数和身高系数，使人体模型的体型与标准人体体型相匹配。
作为优选，还包括人体关节数据存取模块，用于保存Kinect扫描人体关节的动作序列，以及读取人体关节的动作序列。
由于上述技术方案，本发明的有益效果为：本发明利用Kinect人体关节点识别技术、骨骼动画技术和虚拟现实技术，构建适合真实人体体型的三维虚拟人体模型，并利用Kinect扫描真实人体动作，实时驱动三维虚拟人体模型运动。本发明构建的体型自适应三维虚拟人体技术能通过人体模型体型的变换解决不同体型真实人体需要对应多个人体模型的问题，还能使三维虚拟人体动画制作更为简便。本发明还可以应用于游戏和虚拟现实领域，能够增强真实感和趣味性。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其它附图。
图1是本发明基于Kinect的体型自适应三维虚拟人体模型构建方法的流程图；
图2是基于Kinect的体型自适应三维虚拟人体动画系统的结构框图；
图3.1是标准人体臀部宽度原始数据图；
图3.2是标准人体臀部宽度距离取反数据图；
图3.3是标准人体臀部宽度数据曲线拟合图；
图4.1是标准人体身高原始数据图；
图4.2是标准人体身高距离取反数据图；
图4.3是标准人体身高数据曲线拟合图；
图5.1是Kinect扫描人体彩色图像；
图5.2是Kinect扫描人体深度图像；
图5.3是深度图像中人体臀部宽度数据提取图；
图5.4是深度图像中人体身高数据提取图；
图6是人体模型体型自适应调整图；
图7是人体模型动画驱动图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动的前提下所获得的所有其他实施例，都属于本发明保护的范围。
实施例1：
参见图1，一种基于Kinect的体型自适应三维虚拟人体模型构建方法，包括以下步骤：
S1、Kinect实时扫描获取人体的彩色图像和深度图像；
S2、利用获取的彩色图像和深度图像，识别人体；
识别人体时，若未识别到人体，则重新获取彩色图像和深度图像，若识别到人体，则执行步骤S3；
S3、在识别的人体中获取人体关节点数据；识别人体关节点时，若未获取到所有关节点，则重新获取彩色图像及深度图像，若获取到人体所有关节点，则执行步骤S4；
S4、对人体关节点数据进行平滑处理；
S5、获取人体臀部宽度数据和人体身高数据；
S6、计算真实人体体型数据与标准人体体型数据的比例系数；
S7、调整人体模型体型，其方法为：在符合标准人体体型的人体模型上，调整胖瘦系数和身高系数从而获得符合真实人体体型的人体模型；
S8、计算各骨骼旋转矩阵，方法为：根据真实人体关节点骨骼间的关系，以及人体模型初始姿态下的骨骼间的关系，从人体模型的根节点开始，利用罗德里格旋转公式，求出要各骨骼间的旋转矩阵；
S9、利用求得骨骼旋转矩阵以及线性混合蒙皮算法，渲染姿势更新后的人体模型。
具体地，所述步骤S4中，使用滤波核大小为5的均值滤波平滑处理各个关节在三维空间中的坐标数据。
具体地，所述步骤S5中，使用深度图像中的人体臀部宽度值和人体头部到双脚踝最低处的值表示人体臀部宽度数据和人体身高数据，具体包括如下步骤：
a)将通过Kinect关节点识别所获得的臀部关节、头部关节、左脚踝关节、右脚踝关节的相机坐标转化为深度图像中的坐标；
b)将深度图像进行二值化，得到人体轮廓；
c)从深度图像中的臀部关节位置进行横向扩展，识别人体轮廓中臀部边界，获取像素值，将其标为真实人体的臀部宽度数据；
d)从深度图像中头部关节到左右脚踝关节最远处，获取纵向像素值，将其表位真实人体的身高数据。
具体地，所述步骤S6中还包括：拟合标准人体体型数据与标准人体到Kinect距离的关系，具体包括如下步骤：
a)指定一标准人体，采集其到Kinect不同距离下的臀部宽度数据以及身高数据；
b)将距离的倒数分别于臀部宽度数据与身高数据进行最小二乘法拟合，得到距离的倒数分别与臀部宽度数据和身高数据的线性关系。
具体地，所述步骤S7中还包括：：构建适合标准人体体型的人体模型，具体包括如下步骤：
a)分别建立矮瘦和高胖人体模型；
d)使用插值的方式调整人体模型，包括人体模型表面顶点数据和人体模型关节点数据；
c)手动调节胖瘦系数和身高系数，使人体模型的体型与标准人体体型相匹配；
实施例2：
参见图2，一种基于Kinect的体型自适应三维虚拟人体动画系统，所述系统包括：
图像采集模块，用于利用Kinect获取彩色图像及深度图像；
人体识别模块，用于利用获取的彩色图像和深度图像来识别人体；
人体关节点提取模块，用于在识别的人体中的人体关节点数据；
骨架数据平滑处理模块，用于对人体关节点数据进行平滑操作；
真实人体体型提取模块，用于提取深度图像中人体臀部宽度数据和人体身高数据；
体型比例计算模块，用于计算真实人体体型数据与标准人体体型数据的比例系数；
虚拟人体型调整模块，用于在符合标准人体体型的人体模型上，调整胖瘦系数和身高系数从而获得符合真实人体体型的人体模型；
骨骼旋转矩阵计算模块，用于根据真实人体关节点骨骼间的关系，以及人体模型初始姿态下的骨骼间的关系，从人体模型的根节点开始，利用罗德里格旋转公式，求出要各骨骼间的旋转矩阵；
骨架变形及蒙皮模块，用于使用骨骼旋转矩阵调整模型的骨架动作，并使用线性混合蒙皮算法进行蒙皮操作，渲染姿势更新后的人体模型；
人体关节数据存取模块，用于保存Kinect扫描人体关节的动作序列，以及读取人体关节的动作序列。
具体地，所述真实人体体型提取模块使用深度图像中的人体臀部宽度值和人体头部到双脚踝最低处的值表示人体臀部宽度数据和人体身高数据，并求出真实人体与标准人体的体型比例系数，具体包括如下步骤：
a)将通过Kinect关节点识别所获得的臀部关节、头部关节、左脚踝关节、右脚踝关节的相机坐标转化为深度图像中的坐标；
b)将深度图像进行二值化，得到人体轮廓；
c)从深度图像中的臀部关节位置进行横向扩展，识别人体轮廓中臀部边界，获取像素值，将其标为真实人体的臀部宽度数据；
d)从深度图像中头部关节到左右脚踝关节最远处，获取纵向像素值，将其表位真实人体的身高数据。
具体地，所述虚拟人体型调整模块还包括：拟合标准人体体型数据与标准人体到Kinect 距离的关系，具体包括如下步骤：
a)指定一标准人体，采集其到Kinect不同距离下的臀部宽度数据以及身高数据；
b)将距离的倒数分别于臀部宽度数据与身高数据进行最小二乘法拟合，得到距离的倒数分别与臀部宽度数据和身高数据的线性关系。
具体地，所述虚拟人体型调整模块还包括：构建适合标准人体体型的人体模型，具体包括如下步骤：
a)分别建立矮瘦和高胖人体模型；
d)使用插值的方式调整人体模型，包括人体模型表面顶点数据和人体模型关节点数据；
c)手动调节胖瘦系数和身高系数，使人体模型的体型与标准人体体型相匹配；
实施例3：
参见图3.1-3.3，标准人体臀部宽度数据拟合，其步骤为：
a)选定标准人体；
b)采集标准人体到Kinect不同距离下的深度图像中臀部宽度数据,如图3.1；
c)将人体到Kinect的距离数据取反，如图3.2；
d)通过最小二乘法曲线拟合，得到取反后的距离与深度图像中臀部宽度数据的关系，如图3.3。
实施例4：
参见图4.1-4.3，标准人体身高数据拟合，其步骤为：
a)选定标准人体；
b)采集标准人体到Kinect不同距离下的深度图像中身高数据，如图4.1；
c)将人体到Kinect的距离数据取反，如图4.2；
d)通过最小二乘法曲线拟合，得到取反后的距离与深度图像中身高数据的关系，如图4.3。
实施例5：
参见图5.1-5.4，深度图像中人体臀部宽度和身高数据提取，其步骤为：
a)将通过Kinect关节点识别所获得的臀部关节、头部关节、左脚踝关节、右脚踝关节的相机坐标转化为深度图像中的坐标，如图5.1；
b)将深度图像进行二值化，得到人体轮廓，如图5.2；
c)从深度图像中的臀部关节位置进行横向扩展，识别人体轮廓中臀部边界，获取像素值，将其标为真实人体的臀部宽度数据，如图5.3；
d)从深度图像中头部关节到左右脚踝关节最远处，获取纵向像素值，将其表位真实人体的身高数据，如图5.4。
实施例6：
参见图6，人体模型体型自适应调整，图中包含左眼图像，右眼图像，Kinect扫描得到的彩色图像和深度图像。体型调整步骤为：
a)Kinect实时扫描获取人体的彩色图像和深度图像；
b)利用获取的彩色图像和深度图像，识别人体；
c)在识别的人体中获取人体关节点数据；
d)对人体关节点数据进行平滑处理；
e)获取人体臀部宽度数据和人体身高数据；
f)计算真实人体体型数据与标准人体体型数据的比例系数；
g)调整人体模型体型，其方法为：在符合标准人体体型的人体模型上，调整胖瘦系数和身高系数从而获得符合真实人体体型的人体模型。
实施例7：
参见图7，人体模型动画驱动，图中包含左眼图像，右眼图像，Kinect扫描得到的彩色图像和深度图像。模型动画驱动步骤为：
a)计算各骨骼旋转矩阵，根据真实人体关节点骨骼间的关系，以及人体模型初始姿态下的骨骼间的关系，从人体模型的根节点开始，利用罗德里格旋转公式，求出要各骨骼间的旋转矩阵；
b)利用求得骨骼旋转矩阵以及线性混合蒙皮算法，渲染姿势更新后的人体模型。
本发明利用Kinect人体关节点识别技术、骨骼动画技术和虚拟现实技术，构建适合真实人体体型的三维虚拟人体模型，并利用Kinect扫描真实人体动作，实时驱动三维虚拟人体模型运动。本发明构建的体型自适应三维虚拟人体技术能通过人体模型体型的变换解决不同体型真实人体需要对应多个人体模型的问题，还能使三维虚拟人体动画制作更为简便。本发明还可以应用于游戏和虚拟现实领域，能够增强真实感和趣味性。
以上所述是本发明的优选实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也视为本发明的保护范围。
Claims (10)
1.一种基于Kinect的体型自适应三维虚拟人体模型构建方法，其特征在于，包括以下步骤：
S1、Kinect实时扫描获取人体的彩色图像和深度图像；
S2、利用获取的彩色图像和深度图像，识别人体；
S3、在识别的人体中获取人体关节点数据；
S4、对人体关节点数据进行平滑处理；
S5、获取深度图像中人体臀部宽度数据和人体身高数据；
S6、计算真实人体体型数据与标准人体体型数据的比例系数；
S7、调整人体模型体型，在符合标准人体体型的人体模型上，调整胖瘦系数和身高系数从而获得符合真实人体体型的人体模型；
S8、计算各骨骼旋转矩阵，根据真实人体关节点骨骼间的关系，以及人体模型初始姿态下的骨骼间的关系，从人体模型的根节点开始，利用罗德里格旋转公式，求出要各骨骼间的旋转矩阵。
S9、利用求得骨骼旋转矩阵以及线性混合蒙皮算法，渲染姿势更新后的人体模型。
2.根据权利要求1所述的基于Kinect的体型自适应三维虚拟人体模型构建方法，其特征在于，所述步骤S2中，对图像进行人体识别时，若未识别到人体，则重新获取彩色图像及深度图像；所述步骤S3中，对人体进行关节点获取时，若未获取到所有关节点，则重新获取彩色图像及深度图像。
3.根据权利要求1所述的基于Kinect的体型自适应三维虚拟人体模型构建方法，其特征在于，所述步骤S4中，使用滤波核大小为5的均值滤波平滑处理各个关节在三维空间中的坐标数据。
4.根据权利要求1所述的基于Kinect的体型自适应三维虚拟人体模型构建方法，其特征在于，所述步骤S5中，使用深度图像中的人体臀部宽度值和人体头部到双脚踝最低处的值表示人体臀部宽度数据和人体身高数据，具体包括如下步骤：
4.1)将通过Kinect关节点识别所获得的臀部关节、头部关节、左脚踝关节、右脚踝关节的相机坐标转化为深度图像中的坐标；
4.2)将深度图像进行二值化，得到人体轮廓；
4.3)从深度图像中的臀部关节位置进行横向扩展，识别人体轮廓中臀部边界，获取像素值，将其标为真实人体的臀部宽度数据；
4.4)从深度图像中头部关节到左右脚踝关节最远处，获取纵向像素值，将其表位真实人体的身高数据。
5.根据权利要求1所述的基于Kinect的体型自适应三维虚拟人体模型构建方法，其特征在于，所述步骤S6中，标准人体体型数据由最小二乘法曲线拟合得到，具体包括如下步骤：
a)指定一标准人体，采集其到Kinect不同距离下的臀部宽度数据以及身高数据；
b)将距离的倒数分别于臀部宽度数据与身高数据进行最小二乘法拟合，得到距离的倒数分别与臀部宽度数据和身高数据的线性关系。
6.根据权利要求1所述的基于Kinect的体型自适应三维虚拟人体模型构建方法，其特征在于，所述步骤S7中，符合标准人体体型的人体模型通过一下步骤构建而成：
a)分别建立矮瘦和高胖人体模型；
d)使用插值的方式调整人体模型，包括人体模型表面顶点数据和人体模型关节点数据；
c)手动调节胖瘦系数和身高系数，使人体模型的体型与标准人体体型相匹配。
7.基于Kinect的体型自适应三维虚拟人体动画系统，其特征在于，所述系统包括：
图像采集模块，用于利用Kinect获取彩色图像及深度图像；
人体识别模块，用于利用获取的彩色图像和深度图像来识别人体；
人体关节点提取模块，用于在识别的人体中的人体关节点数据；
骨架数据平滑处理模块，用于对人体关节点数据进行平滑处理；
真实人体体型提取模块，用于提取深度图像中人体臀部宽度数据和人体身高数据；
体型比例计算模块，用于计算真实人体体型数据与标准人体体型数据的比例系数；
虚拟人体型调整模块，用于在符合标准人体体型的人体模型上，调整胖瘦系数和身高系数从而获得符合真实人体体型的人体模型；
骨骼旋转矩阵计算模块，用于根据真实人体关节点骨骼间的关系，以及人体模型初始姿态下的骨骼间的关系，从人体模型的根节点开始，利用罗德里格旋转公式，求出要各骨骼间的旋转矩阵；
骨架变形及蒙皮模块，用于使用骨骼旋转矩阵调整模型的骨架动作，并使用线性混合蒙皮算法进行蒙皮操作，渲染姿势更新后的人体模型。
8.根据权利要求7所述的基于Kinect的体型自适应三维虚拟人体动画系统，其特征在于，所述真实人体体型提取模块使用深度图像中的人体臀部宽度值和人体头部到双脚踝最低处的值表示人体臀部宽度数据和人体身高数据，并求出真实人体与标准人体的体型比例系数，具体包括如下步骤：
a)将通过Kinect关节点识别所获得的臀部关节、头部关节、左脚踝关节、右脚踝关节的相机坐标转化为深度图像中的坐标；
b)将深度图像进行二值化，得到人体轮廓；
c)从深度图像中的臀部关节位置进行横向扩展，识别人体轮廓中臀部边界，获取像素值，将其标为真实人体的臀部宽度数据；
d)从深度图像中头部关节到左右脚踝关节最远处，获取纵向像素值，将其表位真实人体的身高数据。
9.根据权利要求7所述的基于Kinect的体型自适应三维虚拟人体动画系统，其特征在于，所述体型比例计算模块中，标准人体体型数据由最小二乘法曲线拟合得到，具体包括如下步骤：
a)指定一标准人体，采集其到Kinect不同距离下的臀部宽度数据以及身高数据；
b)将距离的倒数分别于臀部宽度数据与身高数据进行最小二乘法拟合，得到距离的倒数分别与臀部宽度数据和身高数据的线性关系；
所述虚拟人体型调整模块中，符合标准人体体型的人体模型通过一下步骤构建而成：
a)分别建立矮瘦和高胖人体模型；
d)使用插值的方式调整人体模型，包括人体模型表面顶点数据和人体模型关节点数据；
c)手动调节胖瘦系数和身高系数，使人体模型的体型与标准人体体型相匹配。
10.根据权利要求7所述的基于Kinect的体型自适应三维虚拟人体动画系统，其特征在于，还包括人体关节数据存取模块，用于保存Kinect扫描人体关节的动作序列，以及读取人体关节的动作序列。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201810566056.1A CN108876881A (zh) | 2018-06-04 | 2018-06-04 | 基于Kinect的体型自适应三维虚拟人体模型构建方法及动画系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201810566056.1A CN108876881A (zh) | 2018-06-04 | 2018-06-04 | 基于Kinect的体型自适应三维虚拟人体模型构建方法及动画系统 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN108876881A true CN108876881A (zh) | 2018-11-23 |
Family
ID=64336893
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201810566056.1A Pending CN108876881A (zh) | 2018-06-04 | 2018-06-04 | 基于Kinect的体型自适应三维虚拟人体模型构建方法及动画系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN108876881A (zh) |
Cited By (14)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN109589563A (zh) * | 2018-12-29 | 2019-04-09 | 南京华捷艾米软件科技有限公司 | 一种基于3d体感摄像头的舞蹈姿态教辅方法及系统 |
| CN110348370A (zh) * | 2019-07-09 | 2019-10-18 | 北京猫眼视觉科技有限公司 | 一种人体动作识别的增强现实系统及方法 |
| CN110427917A (zh) * | 2019-08-14 | 2019-11-08 | 北京百度网讯科技有限公司 | 用于检测关键点的方法和装置 |
| CN110853131A (zh) * | 2019-09-30 | 2020-02-28 | 西安交通大学 | 一种用于行为识别的虚拟视频数据生成方法 |
| CN111783182A (zh) * | 2020-07-07 | 2020-10-16 | 恒信东方文化股份有限公司 | 一种三维虚拟人台的建模方法及系统 |
| CN111882595A (zh) * | 2020-07-28 | 2020-11-03 | 河海大学常州校区 | 一种人体语义特征提取方法及系统 |
| CN112270254A (zh) * | 2020-10-27 | 2021-01-26 | 上海幻维数码创意科技有限公司 | 一种基于摄像头视觉的元素匹配信息处理方法及装置 |
| CN112466479A (zh) * | 2020-12-07 | 2021-03-09 | 上海梅斯医药科技有限公司 | 基于虚拟现实的患者模型创建方法、系统、设备和介质 |
| CN112686976A (zh) * | 2020-12-31 | 2021-04-20 | 咪咕文化科技有限公司 | 骨骼动画数据的处理方法、装置及通信设备 |
| CN113807280A (zh) * | 2021-09-23 | 2021-12-17 | 大连海事大学 | 一种基于Kinect的虚拟船舶机舱系统与方法 |
| CN113808239A (zh) * | 2021-08-18 | 2021-12-17 | 北京艺旗网络科技有限公司 | 一种用于美术作品在线教育的身体捕捉方法及装置 |
| CN114375177A (zh) * | 2019-09-01 | 2022-04-19 | Lg电子株式会社 | 身体测量装置及其控制方法 |
| CN114489312A (zh) * | 2020-10-27 | 2022-05-13 | 厦门大学 | 基于人体运动显著性的柔性传感器及其布局方法和应用 |
| CN116363141A (zh) * | 2023-06-02 | 2023-06-30 | 四川省畜牧科学研究院 | 一种妊娠母猪智能体型评价装置及系统 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103778661A (zh) * | 2013-12-24 | 2014-05-07 | 中国科学院深圳先进技术研究院 | 一种生成说话人三维运动模型的方法、系统及计算机 |
| CN103886117A (zh) * | 2012-12-20 | 2014-06-25 | 上海工程技术大学 | 一种提高三维试衣软件中虚拟人体建模精度的方法 |
| US20160088284A1 (en) * | 2010-06-08 | 2016-03-24 | Styku, Inc. | Method and system for determining biometrics from body surface imaging technology |
| CN107993249A (zh) * | 2017-08-23 | 2018-05-04 | 北京航空航天大学 | 一种基于多Kinect的人体步态数据融合方法 |
-
2018
- 2018-06-04 CN CN201810566056.1A patent/CN108876881A/zh active Pending
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20160088284A1 (en) * | 2010-06-08 | 2016-03-24 | Styku, Inc. | Method and system for determining biometrics from body surface imaging technology |
| CN103886117A (zh) * | 2012-12-20 | 2014-06-25 | 上海工程技术大学 | 一种提高三维试衣软件中虚拟人体建模精度的方法 |
| CN103778661A (zh) * | 2013-12-24 | 2014-05-07 | 中国科学院深圳先进技术研究院 | 一种生成说话人三维运动模型的方法、系统及计算机 |
| CN107993249A (zh) * | 2017-08-23 | 2018-05-04 | 北京航空航天大学 | 一种基于多Kinect的人体步态数据融合方法 |
Non-Patent Citations (1)
| Title |
|---|
| 何昆林: "基于Kinect的三维人体快速建模与蒙皮动画研究", 《中国优秀硕士学位论文全文数据库 信息科技辑》 * |
Cited By (19)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN109589563A (zh) * | 2018-12-29 | 2019-04-09 | 南京华捷艾米软件科技有限公司 | 一种基于3d体感摄像头的舞蹈姿态教辅方法及系统 |
| CN110348370A (zh) * | 2019-07-09 | 2019-10-18 | 北京猫眼视觉科技有限公司 | 一种人体动作识别的增强现实系统及方法 |
| CN110427917B (zh) * | 2019-08-14 | 2022-03-22 | 北京百度网讯科技有限公司 | 用于检测关键点的方法和装置 |
| CN110427917A (zh) * | 2019-08-14 | 2019-11-08 | 北京百度网讯科技有限公司 | 用于检测关键点的方法和装置 |
| CN114375177A (zh) * | 2019-09-01 | 2022-04-19 | Lg电子株式会社 | 身体测量装置及其控制方法 |
| CN110853131A (zh) * | 2019-09-30 | 2020-02-28 | 西安交通大学 | 一种用于行为识别的虚拟视频数据生成方法 |
| CN111783182A (zh) * | 2020-07-07 | 2020-10-16 | 恒信东方文化股份有限公司 | 一种三维虚拟人台的建模方法及系统 |
| CN111783182B (zh) * | 2020-07-07 | 2024-03-01 | 恒信东方文化股份有限公司 | 一种三维虚拟人台的建模方法及系统 |
| CN111882595A (zh) * | 2020-07-28 | 2020-11-03 | 河海大学常州校区 | 一种人体语义特征提取方法及系统 |
| CN111882595B (zh) * | 2020-07-28 | 2024-01-26 | 河海大学常州校区 | 一种人体语义特征提取方法及系统 |
| CN112270254A (zh) * | 2020-10-27 | 2021-01-26 | 上海幻维数码创意科技有限公司 | 一种基于摄像头视觉的元素匹配信息处理方法及装置 |
| CN114489312A (zh) * | 2020-10-27 | 2022-05-13 | 厦门大学 | 基于人体运动显著性的柔性传感器及其布局方法和应用 |
| CN114489312B (zh) * | 2020-10-27 | 2024-04-02 | 厦门大学 | 基于人体运动显著性的柔性传感器及其布局方法和应用 |
| CN112466479A (zh) * | 2020-12-07 | 2021-03-09 | 上海梅斯医药科技有限公司 | 基于虚拟现实的患者模型创建方法、系统、设备和介质 |
| CN112686976A (zh) * | 2020-12-31 | 2021-04-20 | 咪咕文化科技有限公司 | 骨骼动画数据的处理方法、装置及通信设备 |
| CN113808239A (zh) * | 2021-08-18 | 2021-12-17 | 北京艺旗网络科技有限公司 | 一种用于美术作品在线教育的身体捕捉方法及装置 |
| CN113807280A (zh) * | 2021-09-23 | 2021-12-17 | 大连海事大学 | 一种基于Kinect的虚拟船舶机舱系统与方法 |
| CN116363141A (zh) * | 2023-06-02 | 2023-06-30 | 四川省畜牧科学研究院 | 一种妊娠母猪智能体型评价装置及系统 |
| CN116363141B (zh) * | 2023-06-02 | 2023-08-18 | 四川省畜牧科学研究院 | 一种妊娠母猪智能体型评价装置及系统 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN108876881A (zh) | 基于Kinect的体型自适应三维虚拟人体模型构建方法及动画系统 | |
| CN102982578B (zh) | 单幅人物图像中着装人体三维模型估计方法 | |
| CN105404392B (zh) | 基于单目摄像头的虚拟穿戴方法及系统 | |
| CN105354876B (zh) | 一种基于移动终端的实时立体试衣方法 | |
| CN103606190B (zh) | 单张人脸正面照片自动转换为三维人脸模型的方法 | |
| CN109377557A (zh) | 基于单帧人脸图像的实时三维人脸重建方法 | |
| CN101324961B (zh) | 计算机虚拟世界中人脸部三维贴图方法 | |
| KR101794731B1 (ko) | 2차원 캐릭터 그림데이터를 애니메이션이 가능한 3차원 모델로 변형하는 방법 및 장치 | |
| CN108140105A (zh) | 具有脸部表情检测能力的头戴式显示器 | |
| CN108537126B (zh) | 一种人脸图像处理方法 | |
| CN102831380A (zh) | 一种基于深度图像感应的肢体动作识别方法及系统 | |
| CN104794722A (zh) | 利用单个Kinect计算着装人体三维净体模型的方法 | |
| CN101882326A (zh) | 基于中国人全面部结构形数据的三维颅面复原方法 | |
| CN103208133A (zh) | 一种图像中人脸胖瘦的调整方法 | |
| CN105913416A (zh) | 一种自动分割三维人脸模型区域的方法 | |
| CN113610612B (zh) | 一种3d虚拟试衣方法、系统及存储介质 | |
| WO2021240848A1 (ja) | ３次元アバター生成装置、３次元アバター生成方法及び３次元アバター生成プログラム | |
| CN109389682A (zh) | 一种三维人脸模型自动调整方法 | |
| CN103679797A (zh) | 采用可变形模型的人肢体建模方法及虚拟人模型控制平台 | |
| CN112102480B (zh) | 图像数据处理方法、装置、设备以及介质 | |
| CN106127818A (zh) | 一种基于单幅图像的材质外观获取系统及方法 | |
| CN108846892A (zh) | 人体模型的确定方法及装置 | |
| CN107469355A (zh) | 游戏人物形象创建方法及装置、终端设备 | |
| WO2023185703A1 (zh) | 虚拟角色的动作控制方法、装置、设备和存储介质 | |
| JP2006107145A (ja) | 顔形状モデリングシステムおよび顔形状モデリング方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20181123 |
|
| RJ01 | Rejection of invention patent application after publication |