CN105336000A - 基于旋转双曲面的虚拟人肢体建模方法 - Google Patents
基于旋转双曲面的虚拟人肢体建模方法 Download PDFInfo
- Publication number
- CN105336000A CN105336000A CN201510899333.7A CN201510899333A CN105336000A CN 105336000 A CN105336000 A CN 105336000A CN 201510899333 A CN201510899333 A CN 201510899333A CN 105336000 A CN105336000 A CN 105336000A
- Authority
- CN
- China
- Prior art keywords
- limbs
- revolution
- image
- hyperboloid
- hyperboloids
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Processing Or Creating Images (AREA)
Abstract
一种基于旋转双曲面的虚拟人肢体建模方法,采用旋转双曲面建立虚拟人肢体模型,由关节点和连接关节点的线段组成骨架层来代表虚拟人肢体的骨架结构,皮肤层用旋转双曲面表示,每个肢体只需调整两个变形参数就能反映出人肢体皮肤变形。首先从采用相机拍摄的人肢体图像中提取出人肢体的边缘轮廓信息,采用二维双曲线拟合图像上各个肢体的轮廓并求出各个二维双曲线方程的变形参数,将二维双曲线绕骨架直线旋转求出旋转双曲面方程,采用三个圆球体和两个旋转双曲面绘制人肢体模型。本发明方法简单、实现容易,解决了虚拟人体模型代表皮肤变形参数过多的问题。
Description
技术领域
本发明涉及一种基于旋转双曲面的虚拟人肢体建模方法,用于感知接口,运动分析和虚拟现实等应用领域,在医学图像、生物医学、手势识别、视频会议、视频游戏、自动新闻播放、电影制作、材料变形、图像压缩等方面都有实际应用价值。属于计算机视觉和计算机图形学领域。
背景技术
运动分析领域的研究对象主要分为刚性物体、连接刚体和非刚性物体等。计算机视觉中的运动分析研究均主要集中在对刚体运动的研究,且学者们已取得了一系列的成果,并建立了较为完善的理论框架,但是,在现实世界中大多是非刚体运动。人体属于非刚体。
在过去的十几年中,可变形的人体建模已经取得了一些成绩。Nahas等使用了B样条曲面表示人身体和脸部的柔软的运动。Petland等介绍了一种基于有限元的方法模型。Terzopoulos等介绍了表达成一个超椭球形式的全局形状参数和样条形式的局部自由度相结合的可变形的超二次曲面的模型。Min等使用三种基本软体来对各种形状的人体上肢和肩部肌肉建模,一个点基元产生一个椭圆体,一组连接的线段产生一个圆柱体,一个三角网格产生一个复杂的形状。Sminchisescu等提出了一种人体模型,它由运动骨架和肌肉构成,连接的节点构成的骨架由节点的角度参数控制,并覆盖了包含辅助锥化和弯曲参数的超二次椭圆面构成的肌肉。模型包含30个节点参数和8个内部比例参数,并且每个肢体又包含9个变形参数。Plankers等把一种称为元球或软体的隐式曲面附在人体的连接骨架上并按照解剖学的近似程度来排列这些元球。这个人体模型共使用了230个元球,并使用B样条曲面片进行蒙皮。还可以用blobby分子、软体、卷积曲面等各种隐式曲面进行人体建模。但这些方法都采用较为复杂的非刚体运动模型,控制参数较多,不能很好的满足轮廓表示的评价标准:即表示的简洁性和适合于后处理阶段的计算。所以这些模型在表示人体轮廓方面缺乏实用性。
发明内容
本发明的目的在于针对现有虚拟人模型代表皮肤变形参数过多的不足,提出一种基于旋转双曲面的虚拟人肢体建模方法,每个虚拟人肢体只需调整两个变形参数就能反映出人肢体皮肤变形,降低运动分析的计算量,适合于各种弹性连接刚体的建模。
为实现这样的目的,本发明的技术方案中,采用旋转双曲面建立人肢体模型,提出的模型分为两层:骨架层和皮肤层,骨架层代表人肢体的骨架结构,由关节点和连接这些关节点的线段组成;皮肤层采用一种旋转双曲面表示,每个肢体只需调整两个变形参数就能反映出人肢体皮肤变形。首先使用相机拍摄人肢体摆姿势的图像,在图像中采用图像分割技术检测出人肢体在图像上的轮廓信息,采用曲线拟合技术用双曲线拟合图像上的各个肢体边缘轮廓,求出代表各个肢体轮廓的双曲线方程的系数。然后采用根据图像平面的二维双曲线方程求出对应的旋转双曲面方程,即通过二维双曲线绕肢体骨架直线旋转求出旋转双曲面方程,最后采用三个圆球体和两个旋转双曲面绘制虚拟人肢体模型。
本发明的建模方法具体包括以下几个步骤:
1.采用图像分割技术检测出人肢体在图像上的边缘轮廓信息
采用相机对人肢体所摆姿势进行拍摄,得到一幅图像,然后采用图像分割技术检测并得到人肢体在图像上的边缘轮廓信息。
2.二维双曲线拟合图像上各个肢体的轮廓
本发明采用曲线拟合技术用二维双曲线拟合步骤1得到的图像上各个肢体的边缘轮廓,提取图像上所要拟合肢体轮廓线的两个端点A、B的像素坐标并变换成在图像上的平面坐标,在两端点形成的直线上方设定一点O,以O点为坐标系原点确定经过点A、B的二维双曲线;由此根据所要拟合轮廓线上的所有像素点坐标值求出图像上代表各个肢体轮廓的二维双曲线方程的变形参数a、b的值。
3.提取人体骨架位置信息
根据边缘轮廓信息采用中轴变换方法求出图像平面上各个肢体的中轴线,把此中轴线作为图像平面上各个人肢体的骨架位置信息。
4.求出旋转双曲面的方程
将步骤2得到的二维双曲线绕步骤3得到的骨架直线旋转,得到代表肢体皮肤的旋转双曲面方程。每个旋转双曲面代表一个肢体的皮肤。
5.模型绘制
本发明使用OpenGL程序采用平行投影方法绘制得到虚拟人肢体模型,采用三个圆球体代表j1、j2、j3三个关节点,采用求得的两个旋转双曲面方程绘制出的曲面来代表肢体皮肤,连接这三个圆球体和两个曲面构成人肢体模型。
本发明方法简单,实现容易。建立的模型使用了非常少的参数就可以代表人肢体皮肤的变形,每个肢体只需两个变形参数,具有高层次描述和预测遮挡的能力。本发明方法适合于许多弹性连接刚体的模型建立。实验采用便宜、容易安装的视频摄像头来采集数据,不需要附加设备,代表皮肤变形的旋转双曲面方程和求解算法简单,大大降低了运动分析的计算复杂性。
附图说明
图1为本发明采用的双曲线。
图1中,点O为坐标系原点,点A、B为双曲线两个顶点,通过这两个顶点坐标确定双曲线方程。
图2为手臂的骨架结构。
图2中,j1、j2、j3是关节点,连接这些关节点的线段代表手臂的两个部分:上臂和前臂。
图3为本发明的旋转双曲面构成示意图。
图3中,L是代表人肢体骨架的线段,S是双曲线,S绕L旋转一周形成旋转双曲面,点O为坐标系原点,点A、B是双曲线S的两个端点,点AL、BL是线段L的两个端点。
图4为本发明基于图像轮廓建模的实验结果。
图4中,(a)是相机拍摄的图像,(b)、(c)是与(a)图像对应的边缘检测和曲线拟合的结果,(d)是对应于(a)、(b)、(c)的反映肢体皮肤变形的模型表达。
具体实施方式
为了更好地理解本发明的技术方案,以下结合附图和实施例作进一步的详细描述。实施例具体针对附图4(a)图像(相机拍摄)进行虚拟人肢体建模过程的描述。
1.首先采用相机对人肢体所摆姿势进行拍摄,得到一幅图像,图4(a)即为相机拍摄的右手臂姿势图像。然后采用图像分割技术(如canny边缘算子)检测手臂在图像上的边缘轮廓信息,得到与图4(a)图像对应的边缘检测结果,如图4(b)所示。
2.采用曲线拟合技术用二维双曲线拟合图像上各个肢体的边缘轮廓。如图4(b),提取所要拟合右手上臂轮廓的两个端点像素坐标A(357,248),B(485,175),通过相机标定技术求出图像像素坐标与平面坐标的变换公式为:
[x,y,1]T=[0.0086,0,-3.2055;0,0.0083,-2.5023;0,0,1;][u,v,1]T
通过上述公式求出端点A、B在图像上的平面坐标A(-0.1353,-0.4439),B(0.9655,-1.0498)。在端点A、B形成的直线的上方设定一点O为x-y坐标系的原点,如图1所示。
确定经过点A、B的二维双曲线方程x 2/a 2-y 2/b 2=1,双曲线隐函数表达式为:C(x,y)=x 2/a 2-y 2/b 2-1=0。提取边缘轮廓线上所有的像素(共n个点),这些像素的二维平面坐标为:(x i ,y i ),i=1~n。把这些坐标值代入方程F=∑C 2(x i ,y i ),通过求F的最小值解出两个变形参数a、b的值,求出的这两个变形参数就代表了右手上臂在此时刻皮肤的变形。
3.提取人体骨架位置信息。如图2,人肢体骨架模型包含关节点j1、j2、j3和连接这些关节点的线段(上臂、前臂)。根据上述得到的边缘轮廓信息采用中轴变换方法求出图像平面上各个肢体的中轴线,把此中轴线作为图像平面上人肢体的骨架位置信息。求得图像上骨架端点的二维像素坐标为AL(373.5,291)、BL(526.5,203.5),如图3,就可得骨架的位置信息。根据点AL、BL确定骨架直线离坐标系原点O的距离d的值。使x坐标轴与骨架直线ALBL平行,使y坐标轴与骨架直线ALBL垂直。
4.求出旋转双曲面方程。如图3,通过二维双曲线绕骨架直线旋转求出旋转双曲面方程为:x 2/a 2-[(y-d)2+z 2]/b 2=1。
采用同样的方法可求得代表右手前臂皮肤的旋转双曲面方程。
5.模型绘制。如图4(d)所示,使用OpenGL程序采用平行投影方法绘制得到右臂模型,使用三个半径分别为45、42、30的圆球体代表j1、j2、j3三个关节点,采用求得的两个旋转双曲面方程绘制出的曲面来代表右手上臂和前臂的皮肤,连接这三个圆球体和两个曲面构成虚拟人肢体模型。
Claims (1)
1.一种基于旋转双曲面的虚拟人肢体建模方法,其特征在于包括如下具体步骤:
1)采用相机对人肢体所摆姿势进行拍摄,得到一幅图像,然后采用图像分割技术检测并得到人肢体在图像上的边缘轮廓信息;
2)提取图像上所要拟合肢体轮廓线的两个端点A、B的像素坐标并变换成在图像上的平面坐标,在两端点形成的直线上方设定一点O为坐标系原点,确定经过点A、B的二维双曲线;由此根据所要拟合轮廓线上的所有像素点坐标值求出图像上代表各个肢体轮廓的二维双曲线方程的变形参数;
3)根据边缘轮廓信息采用中轴变换方法求出图像平面上各个肢体的中轴线,把此中轴线作为图像平面上人肢体的骨架位置信息;
4)将步骤2得到的双曲线绕步骤3得到的骨架直线旋转,得到代表肢体皮肤的旋转双曲面方程,每个旋转双曲面代表一个肢体皮肤;
5)使用OpenGL程序采用平行投影方法绘制得到虚拟人肢体模型,采用三个圆球体代表三个关节点,采用求得的两个旋转双曲面方程绘制出的曲面来代表肢体皮肤,连接这三个圆球体和两个旋转双曲面构成虚拟人肢体模型。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510899333.7A CN105336000A (zh) | 2015-12-09 | 2015-12-09 | 基于旋转双曲面的虚拟人肢体建模方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510899333.7A CN105336000A (zh) | 2015-12-09 | 2015-12-09 | 基于旋转双曲面的虚拟人肢体建模方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN105336000A true CN105336000A (zh) | 2016-02-17 |
Family
ID=55286502
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201510899333.7A Pending CN105336000A (zh) | 2015-12-09 | 2015-12-09 | 基于旋转双曲面的虚拟人肢体建模方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN105336000A (zh) |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH08221599A (ja) * | 1995-02-15 | 1996-08-30 | Matsushita Electric Ind Co Ltd | 3次元の動き生成および解析方法 |
CN1617174A (zh) * | 2004-12-09 | 2005-05-18 | 上海交通大学 | 基于图像轮廓的人肢体三维建模方法 |
CN1617175A (zh) * | 2004-12-09 | 2005-05-18 | 上海交通大学 | 基于标记点的人肢体三维建模方法 |
CN1645416A (zh) * | 2005-01-20 | 2005-07-27 | 上海交通大学 | 基于肌肉体积不变性的人肢体三维建模方法 |
CN1710614A (zh) * | 2005-06-16 | 2005-12-21 | 上海交通大学 | 基于模型的人肢体三维运动参数估计方法 |
CN101271581A (zh) * | 2008-04-25 | 2008-09-24 | 浙江大学 | 建立个性化的三维人体模型 |
CN102157010A (zh) * | 2011-05-25 | 2011-08-17 | 上海大学 | 基于分层建模及多体驱动的三维人脸动画实现方法 |
CN103679797A (zh) * | 2012-09-03 | 2014-03-26 | 潘海朗 | 采用可变形模型的人肢体建模方法及虚拟人模型控制平台 |
-
2015
- 2015-12-09 CN CN201510899333.7A patent/CN105336000A/zh active Pending
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH08221599A (ja) * | 1995-02-15 | 1996-08-30 | Matsushita Electric Ind Co Ltd | 3次元の動き生成および解析方法 |
CN1617174A (zh) * | 2004-12-09 | 2005-05-18 | 上海交通大学 | 基于图像轮廓的人肢体三维建模方法 |
CN1617175A (zh) * | 2004-12-09 | 2005-05-18 | 上海交通大学 | 基于标记点的人肢体三维建模方法 |
CN1645416A (zh) * | 2005-01-20 | 2005-07-27 | 上海交通大学 | 基于肌肉体积不变性的人肢体三维建模方法 |
CN1710614A (zh) * | 2005-06-16 | 2005-12-21 | 上海交通大学 | 基于模型的人肢体三维运动参数估计方法 |
CN101271581A (zh) * | 2008-04-25 | 2008-09-24 | 浙江大学 | 建立个性化的三维人体模型 |
CN102157010A (zh) * | 2011-05-25 | 2011-08-17 | 上海大学 | 基于分层建模及多体驱动的三维人脸动画实现方法 |
CN103679797A (zh) * | 2012-09-03 | 2014-03-26 | 潘海朗 | 采用可变形模型的人肢体建模方法及虚拟人模型控制平台 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN1266655C (zh) | 基于图像轮廓的人肢体三维建模方法 | |
CN106803267B (zh) | 基于Kinect的室内场景三维重建方法 | |
US10679046B1 (en) | Machine learning systems and methods of estimating body shape from images | |
CN107292965B (zh) | 一种基于深度图像数据流的虚实遮挡处理方法 | |
WO2021077720A1 (zh) | 获取对象三维模型的方法、装置、电子设备及系统 | |
CN103679797A (zh) | 采用可变形模型的人肢体建模方法及虚拟人模型控制平台 | |
CN109003325B (zh) | 一种三维重建的方法、介质、装置和计算设备 | |
Plänkers et al. | Tracking and modeling people in video sequences | |
CN109427007B (zh) | 基于多视角的虚拟试衣方法 | |
CN111932678B (zh) | 多视点实时人体运动、手势、表情、纹理重建系统 | |
CN108154550A (zh) | 基于rgbd相机的人脸实时三维重建方法 | |
CN1271574C (zh) | 基于标记点的人肢体三维建模方法 | |
Chen et al. | Inferring 3D shapes and deformations from single views | |
CN104794722A (zh) | 利用单个Kinect计算着装人体三维净体模型的方法 | |
CN109829972B (zh) | 一种面向连续帧点云的三维人体标准骨架提取方法 | |
CN109509241B (zh) | 角色动画中基于四元数的骨骼重定向方法 | |
CN103268629B (zh) | 三维人体形态和姿态的无标记点实时复原方法 | |
WO2021063271A1 (zh) | 人体模型重建方法、重建系统及存储介质 | |
CN113077519B (zh) | 一种基于人体骨架提取的多相机外参自动标定方法 | |
CN113421328B (zh) | 一种三维人体虚拟化重建方法及装置 | |
CN1326096C (zh) | 基于模型的人肢体三维运动参数估计方法 | |
CN109325995A (zh) | 基于人手参数模型的低分辨率多视角手部重建方法 | |
CN112330813A (zh) | 一种基于单目深度摄像头的着装下三维人体模型重建方法 | |
CN108230431B (zh) | 一种二维虚拟形象的人体动作动画生成方法及系统 | |
CN112365589B (zh) | 一种虚拟三维场景展示方法、装置及系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
WD01 | Invention patent application deemed withdrawn after publication | ||
WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20160217 |