CN102831638A - 一种采用手绘草图的三维人体多姿态建模方法 - Google Patents
一种采用手绘草图的三维人体多姿态建模方法 Download PDFInfo
- Publication number
- CN102831638A CN102831638A CN2012102347008A CN201210234700A CN102831638A CN 102831638 A CN102831638 A CN 102831638A CN 2012102347008 A CN2012102347008 A CN 2012102347008A CN 201210234700 A CN201210234700 A CN 201210234700A CN 102831638 A CN102831638 A CN 102831638A
- Authority
- CN
- China
- Prior art keywords
- msub
- mrow
- human body
- dimensional
- characteristic
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 71
- 238000006073 displacement reaction Methods 0.000 claims abstract description 28
- 239000013598 vector Substances 0.000 claims description 33
- 238000004364 calculation method Methods 0.000 claims description 28
- 230000000007 visual effect Effects 0.000 claims description 27
- 230000008569 process Effects 0.000 claims description 15
- 238000007781 pre-processing Methods 0.000 claims description 6
- 230000008030 elimination Effects 0.000 claims description 3
- 238000003379 elimination reaction Methods 0.000 claims description 3
- 239000011159 matrix material Substances 0.000 claims description 3
- 230000007704 transition Effects 0.000 claims description 3
- 238000006243 chemical reaction Methods 0.000 claims description 2
- 230000011218 segmentation Effects 0.000 claims description 2
- 230000036544 posture Effects 0.000 claims 27
- 206010064093 Suggestibility Diseases 0.000 abstract 1
- 238000010276 construction Methods 0.000 description 8
- 230000003993 interaction Effects 0.000 description 5
- 238000013461 design Methods 0.000 description 3
- 238000010586 diagram Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000013507 mapping Methods 0.000 description 2
- 230000007246 mechanism Effects 0.000 description 2
- 210000003205 muscle Anatomy 0.000 description 2
- 238000012545 processing Methods 0.000 description 2
- 238000011160 research Methods 0.000 description 2
- 238000005070 sampling Methods 0.000 description 2
- 241000269627 Amphiuma means Species 0.000 description 1
- 101100272279 Beauveria bassiana Beas gene Proteins 0.000 description 1
- 230000006978 adaptation Effects 0.000 description 1
- 230000003044 adaptive effect Effects 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 230000000704 physical effect Effects 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
Images
Landscapes
- Processing Or Creating Images (AREA)
Abstract
本发明提出了采用手绘草图的三维人体多姿态建模方法,包括:显式绘制人体特征草图,在给定的三维人体姿态模型下,将观察视角和人体姿态调整为与人体草图一致,并根据人体姿态模型网格点与人体关节点之间的位置关系对该人体模型加权;在该观察视角和人体姿态下,对人体姿态模型进行投影并提取轮廓线、暗示性轮廓线、谷线和脊线等特征投影线集合,将人体草图笔画线与特征投影线组合进行匹配,并根据草图笔画线与特征投影线组合的几何关系构建隐马尔科夫模型,将草图笔画点与三维模型网格点对应并计算对应点的位移参数;在对应三维模型网格点位移参数的约束下,通过均值坐标编码形变算法对人体网格模型进行形变,得到最终的三维人体网格模型。
Description
技术领域
本发明涉及一种三维图像数据处理领域,特别是一种采用手绘草图的三维人体多姿态建模方法。
背景技术
三维人物建模技术是三维建模研究的重要问题之一,在游戏、动画及电影等领域有着广泛的应用,寻找一种简单有效地构建三维人体网格模型的方法,成为计算机图形学领域的重要课题。
目前的虚拟人物构建方法大多为真实感方法,主要分为创建,重构,插值三个类别,典型方法如文献1 Wilhelms J,Van Gelder A.Anatomically based modeling,In:Proceedings of SIGGRAPH’97,ACM SIGGRAPH;1997.p.173-80,该方法主要根据人体生理结构创建层次化物理模型,并通过模拟各层次物理性质驱动其运动,达到模拟仿真人体运动的目的。该类方法能够生成极为逼真的人体模型,但由于交互方式复杂,用户需要熟悉三维操作环境并具有专业的建模技能;同时,方法所需的人体生理学数据往往需要专业的数据采集设备,因此难以被普通用户所使用。为此,有研究者提出了非真实感人体建模方法,该类方法主要面向概念设计阶段,通过降低人体模型的真实程度以增强建模方法的交互性;其中,由于草绘交互方式符合传统的人体设计模式,能够较好地支持用户表达创作意图,因此近年来成为人体建模研究的热点之一。
根据特征映射机制及模型生成方法的不同,现有的草绘人体建模方法主要分为直接构造、参数化模板构造及模型形变三种类型。直接构造方法典型如文献2 Igarashi T,Matsuoka S,Tanaka H.Teddy:a sketching interface for 3D freeform design.In:Proceedingsof SIGGRAPH‘99,ACM SIGGRAPH;1999.p.409-16提出的基于草绘轮廓的自由形体模型生成方法,用户分别绘制人体各部分轮廓线并膨胀生成相应部分的网格模型,最后混合各部分网格得到完整人体模型。由于网格膨胀机制所能表现的三维形状极为有限,因此该方法所生成的肢体模型难以表现人体细节特征。参数化模板构造方法典型如文献3 Chen Mao,Sheng Feng Qin,David Wright,ChenMao,Sheng Feng Qin andDavidWright,Asketch-based approachto human body modelling,Computers & Graphics(2009)提出的基于截面模板的草绘人体建模方法,用户分层次绘制人体骨架线及外轮廓线,并通过解析骨架特征及外轮廓特征得到模板形变参数直接构造得到结果模型。但是,构建参数化人体模板需要用户进行大量交互,且结果模型的表现能力取决于人体模板的复杂性,一般只能表现手腿躯干部分的大致外形,而难以表现关节肌肉等复杂形状特征。模型形变方法典型如文献4 Vladislav Kraevoy,Alla Sheffer,and Michiel vande Panne.Contourbased Modeling Using Deformable 3D Templates.Tech Report,2007.提出的基于均值编码坐标的形变方法,该方法允许用户绘制人体模型在某一确定视角下的轮廓线,通过HMM方法将投影轮廓线与三维模型网格点进行对应,最后通过均值编码坐标方法对该人体模型进行形变得到结果模型。但是该方法只能够绘制人体外部轮廓线,且由于所匹配的网格点仅依赖于观察视角,因此无法保证笔画匹配过程的合理性;同时,由于未考虑人体模型的结构特性,因此模型形变时无法保证满足人体模型的局部细节特征。
概括起来,手绘草图是三维人体网格模型创建的有效方式,但已有基于单幅草图的三维人体网格模型创建方法对于用户的绘制内容和所能表现的人体特征均有很大的限制,如:直接构造方法和模型形变方法仅允许用户绘制人体外轮廓,且所匹配的三维特征点仅依赖于观察视角,因此无法保证特征映射过程的合理性,参数化模板构造方法虽然允许用户绘制骨架线以体现人体模型的姿态,但是仍然不允许用户绘制人体特征笔画;直接构造方法生成的人体为膨胀体模型,因此难以表现人体细节特征,参数化模板构造方法所生成的人体模型,其表现能力取决于人体模板的复杂性,一般只能表现手腿躯干部分的大致外形,而难以表现关节肌肉等复杂形状特征,模型形变方法虽然能够保持网格模型的几何特征,但由于没有考虑人体结构特征而无法在形变幅度较大的情况下满足人体生理学约束。显然,现有的单视图草绘人体建模方法难以满足用户较自由地进行形体设计的需要,如何捕捉用户绘制过程中体现的人体特征,并将这些特征合理地映射到三维模型网格特征点,同时如何在模型形变的过程中满足人体结构特征的约束也是手绘草图交互创建三维人体网格模型面临的重要课题。
发明内容
发明目的:本发明所要解决的技术问题是针对现有技术的不足,提供一种采用手绘草图的三维人体多姿态建模方法。
为了解决上述技术问题,本发明公开了一种采用手绘草图的三维人体多姿态建模方法,包括以下步骤:
步骤一,模型预处理:用户绘制人体特征草图S,并调整给定的三维人体姿态模型Mo的观察视角和人体姿态,使三维人体姿态模型Mo的观察视角和人体姿态与人体特征草图S一致;根据用户在三维人体姿态模型Mo上标定的人体关节点位置,并对三维模型网格点进行加权;
步骤二,笔画匹配:在步骤一中调整后的观察视角和人体姿态下,对三维人体姿态模型Mo进行投影得到特征投影线集合SF,特征投影线集合SF包括一组特征投影线;
对每一条草图笔画线si计算对应的候选特征投影线集合SFC,并在特征投影线集合SFC中,遍历查找所有可能与草图笔画线si匹配的特征投影线组合,计算各特征投影线组合的组合代价集合CSi,并得到对应的特征投影线组合集合SFSi;计算草图笔画线si与特征投影线组合集合SFSi中各特征投影线组合的相似度,选择相似度最高的特征投影线组合SSi与草图笔画线si进行匹配,1≤i≤n;
对所述匹配的草图笔画线si和特征投影线组合SSi建立隐马尔科夫模型,将草图笔画线si的草图笔画点与特征投影线组合SSi中的特征投影线点进行匹配,并计算特征投影线点所对应的三维模型网格点在绘制平面的位移参数PDSi,所有特征投影线点对应的三维模型网格点位移参数构成三维人体姿态模型Mo的特征点位移集合PD;
步骤三,在三维人体姿态模型Mo的特征点位移集合PD的约束下,对三维人体姿态模型Mo进行形变,得到最终的三维人体网格模型,从而实现三维人体多姿态建模。
本发明中,优选地,步骤一中,包括以下步骤:
用户显式绘制人体特征草图S={s1,s2,...,sn},对人体特征草图S中的草图笔画线si进行笔画分割,将所有草图笔画线识别为直线和椭圆两类图元;
所述三维人体姿态模型记为Mo(δ,α0),并以三维人体网格模型的形式显示给用户;用户根据人体特征草图S,调整三维人体姿态模型的观察视角,使该三维人体姿态模型Mo与人体特征草图S的投影视角一致,在三维人体姿态模型Mo(δ,α0)上标定人体关节点位置;通过移动各人体关节点的位置调整人体姿态参数δ和根关节点坐标α,使移动后的三维人体姿态模型与人体特征草图S所绘制的人体姿态一致,移动后的人体姿态参数为δ′,根关节点坐标为α0′,将所得到的三维人体姿态模型Mo(δ′,α0′)作为模型形变的模板;
在三维人体姿态模型Mo(δ′,α0′)上标记人体关节点位置,并对每个三维模型网格点va计算其到最近人体关节点的距离Di,根据此距离Di对三维模型网格点va进行加权。
本发明中,优选地,步骤二中,对三维人体姿态模型Mo(δ′,α0′)计算以下几何特征并投影:
计算各三维人体姿态模型Mo(δ′,α0′)中三维模型网格点的法向量与视向量的内积,并将内积小于阈值的三维模型网格点作为轮廓特征点,该阈值一般设为0.1-0.2(候选特征点的数量随着阈值的增大而增加);计算各三维模型网格点处的曲率半径Kr以及Kr在w方向的方向导数Dw(Kr),将Kr=0且Dw(Kr)>0的网格点作为暗示性轮廓点;计算三维人体网格模型Mo(δ′,α0′)主曲率的局部极值点;
将上述轮廓特征点、暗示性轮廓点、以及主曲率局部极值点投影到绘制平面生成对应的投影点集,采用基于深度连续性的轮廓跟踪算法将上述投影点集连接为特征投影线,并根据各草图笔画线si的闭包矩形覆盖范围,在所述特征投影线集合中寻找各草图笔画线si对应的候选特征投影线集合SFC;
在候选匹配特征投影线集合SFC中,计算两两特征投影线之间的距离ε;
在候选匹配特征投影线集合SFC中,遍历查找所有特征投影线组合集合SFSi,并计算特征投影线组合集合SFSi中各种组合形式的组合代价集合CSi,组合代价集合CSi中包括一组特征投影线组合代价;
计算草图笔画线si与特征投影线组合集合SFSi中每个特征投影线组合SFj的形状相似度SimSi-SFj,1≤j≤n,根据形状相似度SimSi-SFj和组合代价集合CSi中的对应特征投影线组合代价CSFj,计算草图笔画线si与特征投影线组合SFj的相似度ηSi-SFj,并将相似度ηSi-SFj最大的特征投影线组合SFj与草图笔画线si进行对应;即根据人体草图笔画线si的闭包矩形覆盖范围,在上述特征投影线集合SF中寻找候选匹配特征投影线集合SFC;在候选匹配特征投影线集合SFC中,根据任意两条特征投影线l1和l2之间的相邻点的二维距离dl1l2、二维方向差异fl1l2以及遮挡度量cl1l2,综合计算两两特征投影线l1和l2之间的距离ε;然后,在候选匹配投影线集合SFC中,遍历查找可能的特征投影线组合集合SFSi,并计算SFSi中各种组合形式的组合代价集合CSi;最后,计算人体草图笔画线si与每个特征投影线组合SFj的形状相似度SimSi-SFj,根据形状相似度SimSi-SFj和特征投影线组合代价CSFj,计算人体草图笔画线si与特征投影线组合SFj的相似度ηSi-SFj,并将相似度ηSi-SFj最大的特征投影线组合SFj与草图笔画线si进行对应;
根据上述相似度最大的草图笔画线si和特征投影线组合SFj,将草图笔画线si的草图笔画点作为观察状态,将特征投影线组合SFj的特征投影线点作为隐藏状态,根据三维模型网格点和对应特征投影线点之间的距离DP及法向量差异DN计算转移概率,根据三维模型网格点和对应特征投影线点之间的连续性度量DC计算消除概率,并建立隐马尔科夫模型;将草图笔画点作为输入,计算概率最大的隐藏状态序列,作为对应特征投影线特征点的序列,实现草图笔画点与特征投影线特征点的匹配;
在上述匹配结果的基础上,计算特征投影线点所对应的三维模型网格点在绘制平面的位移参数PDSi,所有特征投影线点对应的三维模型网格点位移参数构成三维人体姿态模型Mo的特征点位移集合PD。
本发明中,优选地,步骤三中,包括以下步骤:
对三维人体姿态模型Mo(δ′,α0′)进行均值坐标编码,即对每个三维模型网格点va,根据其邻接点坐标计算得到三维模型网格点va处的法向量na,及三维模型网格点坐标在该法向量方向投影的平均长度da;根据三维模型网格点va的周围顶点在该三维模型网格点va的投影平面上的投影长度,计算各三维模型网格点的权重wab以及各边夹角的余弦值cosab;根据均值坐标编码对所有三维模型网格点va的坐标进行编码,得到三维模型网格点va的均值编码坐标Va;
在步骤二所计算得到的三维模型网格点在绘制平面的位移参数的约束下,对加权后的三维人体姿态模型Mo(δ′,α0′)求解得到形变后的三维人体网格模型MR(δ′,α0′),从而完成三维人体多姿态建模。
本发明中,优选地,所述的特征投影线l1和特征投影线l2两两之间的距离ε定义为:
其中,fl1l2为两个特征投影线的二维方向差异,cl1l2为两个特征投影线的遮挡度量,dl1l2为两个特征投影线相邻点的二维距离;各变量的计算公式定义如下:
其中,γ1和γ2分别为两条特征投影线与绘制平面上的x轴(水平)和y轴(竖直)的夹角(x轴与y轴为绘制平面内互相垂直的任意直线,对计算结果没有影响),l为被遮挡特征线的长度,ls为遮挡线较短部分的长度,ll为遮挡线较长部分的长度,pa为特征投影线l1上的任意点,pb为特征投影线l2上的任意点。
本发明中,优选地,所述的特征投影线组合SFj可表示为如下形式:
SFj={l0,l1,...,ln1|li∈SF},SFj∈Fcan
其中,l0,l1,...,ln1为候选匹配特征投影线集合SF中的一组首尾相连的特征投影线。则特征投影线组合SFj的组合代价CSFj定义为:
其中,为特征投影线lk-1和特征投影线lk两两之间的距离,k=1,2,...t...,m,wt为特征投影线lt在特征投影线组合SFj中的权重,该权重wt定义为:
wt=Lt/Lall
其中,Lt为特征投影线lt的长度,Lall为特征投影线组合SFj中所有成员投影线的总长度。
本发明中,优选地,所述的均值坐标编码及形变方法,包含以下步骤:
对三维人体姿态模型Mo进行均值坐标编码,将各三维模型网格点坐标va表示为:
其中,(a,b)∈E表示网格点va和vb是相邻的,其中E为三维人体姿态模型Mo的边集,wab为相邻三维模型网格点va和vb之间边的权重,cosab为边(a,b)边a和边b相邻夹角的余弦值,na为各三维模型网格点的均值编码法向量,va为当前计算三维模型网格点的坐标,vt为与va相邻的三维模型网格点,I3为三阶单位矩阵。各变量值定义为:
其中,在法向量垂直的投影平面上,三维网格点va与vb的投影分别为va′和vb′,则γab与δab表示投影边(va′,vb′)与相邻投影边的夹角,lab表示投影边(va′,vb′)的长度,m为与三维网格点va相邻接的三维网格点数量,三维网格点va的所有相邻网格点按照逆时针顺序标记为{vb1,vb2,...,vbm}。
最后,在上述约束条件下,求解如下的最小二乘问题,可得到更新后的人体模型网格点坐标集合V′:
其中,目标函数G(V′)计算形变过程中三维模型网格点集V′的均值编码坐标差异度,qa为根据关节点位置计算得到的三维模型网格点va的权重,Fa(vb,na(vb))为根据相邻网格点vb坐标计算得到的三维模型网格点va的均值编码坐标。
有益效果:本发明具有以下优点:1、采用二维线特征投影表示三维人体模型特征,便于用户使用草绘方式对人体模型进行编辑;2、采用隐马尔科夫模型实现二维草绘笔画与二维线特征投影的形状匹配,能够在笔画-特征线匹配过程中充分利用人体模型的三维形状特征,使匹配结果更符合用户交互的意图;3、将关节子空间形变方法与均值编码形变方法相结合,使方法的形变过程能够保持三维人体模型的关节特性,增强了建模结果的真实感。
附图说明
下面结合附图和具体实施方式对本发明做更进一步的具体说明,本发明的上述和/或其他方面的优点将会变得更加清楚。
图1是本发明的流程图。
图2a和图2b是均值坐标编码计算中各参数的示意图。
图3a、图3b、图3c是本发明的实施例示意图。
具体实施方式
本发明提出了一种采用手绘草图的三维人体多姿态建模方法,允许用户通过绘制的人体特征草图直接构建三维人体数字模型。其实施主要涉及模型预处理、笔画匹配以及模型形变三大关键技术,其处理流程如图1所示。用户显式绘制人体特征草图,在模型预处理部分,用户在三维空间中对系统给定的三维人体姿态模型进行调整,使其观察视角和人体姿态与所绘制人体特征草图相一致的;笔画匹配部分,首先在给定的观察视角和人体姿态下,对上述三维人体姿态模型进行投影并提取轮廓线、暗示性轮廓线、网格模型的谷线和脊线等特征投影线集合,然后根据用户绘制草图笔画的闭包矩形计算候选特征投影线集合,并根据特征投影线间的距离差异、方向差异以及遮挡差异计算特征投影线两两之间的距离,并针对候选特征投影线集合中每一种可能的组合形式计算其组合代价,最后,根据上述组合代价以及曲线的形状相似度度量综合计算草绘笔画线与特征投影线组合的相似度,根据最相似的特征投影线组合与草绘笔画线之间的关系建立隐马尔科夫模型,将人体草图笔画点与特征线投影点进行匹配,并计算三维人体姿态模型对应三维模型网格点在绘制平面的位移参数;在模型形变部分,首先由用户在三维人体姿态模型的正视图下标定该人体模型的关节点位置,然后根据人体网格模型的各三维模型网格点到相应关节点的距离,计算该三维模型网格点的形变权重,然后,根据各三维模型网格点邻接点坐标计算其法向量和邻接点在该法向量方向的投影平均值,计算各邻接边的权重以及各边夹角的余弦值,并根据均值坐标编码公式对三维人体姿态模型的各三维模型网格点坐标进行编码,最后,在三维模型网格点位移参数的约束下,对加权后的三维人体姿态模型求解一个最小二乘问题,即可得到形变后的三维人体网格模型。下面分别介绍各部分的主要实施方式。
1.模型预处理
模型预处理的计算包括关节点标定加权和姿态调整两个步骤。
1.1关节点标定加权
本发明中,为了使模型形变过程符合人体关节点约束,因此首先需要对三维人体姿态模型进行加权,通过在三维人体姿态模型Mo(δ′,α0′)的正视图下标定该人体模型的关节点位置,并对三维人体姿态模型Mo(δ′,α0′)的每个顶点va计算其到最近人体关节点的距离Da,即可计算各三维模型网格点的权重,其算法流程如下:
步骤1:用户在三维人体姿态模型Mo(δ′,α0′)的正视图下,标定该人体模型的关节点位置{C0,C1,...,Cn};
步骤2:对三维人体姿态模型Mo(δ′,α0′),计算各关节点的距离值下限
步骤3:对三维人体姿态模型Mo(δ′,α0′)的任一网格点p,按照下式计算该点对于关节点Ca的权重qa:
1.2姿态调整
用户绘制人体特征草图S,并调整给定的三维人体姿态模型Mo的观察视角和人体姿态,使三维人体姿态模型Mo的观察视角和人体姿态与人体特征草图S一致,其流程如下:
步骤1:用户绘制人体特征草图S={s1,s2,...,sn},s1,s2,...,sn表示由草图笔画点构成的各条人体笔画线,1≤i≤n,n为人体特征草图中的笔画数;
步骤2:三维人体姿态模型记为Mo(δ,α0),并以三维人体网格模型的形式显示给用户,该模型采用骨架-人体轮廓曲面双层模型,通过调整姿态参数δ和位移参数α进行控制;
步骤3:根据所绘制的人体特征草图S,用户分别在xyz三个方向上调整人体姿态模型Mo的关节点位置,使得到的三维人体姿态与草图中的人体姿态一致,记录此时人体姿态参数为δ′和位移参数α′;
步骤4:用户在三维环境中旋转观察视角,使其与草图中的观察视角一致,记录此时的观察视向量vview;
步骤5:将该观察视角及人体姿态下的三维人体姿态模型记为Mo(δ′,α0′)。
2.笔画匹配
本发明中,用户通过绘制人体特征线笔画来控制人体姿态模型进行形变,从而得到新的人体模型;因此,在给定的观察视角和人体姿态下,必须将用户绘制的人体特征笔画线与三维人体姿态模型的特征线进行匹配,并通过对应网格特征点的位移参数约束其后的模型形变过程。笔画匹配通过人体特征投影、特征组合代价计算以及特征点匹配三个步骤完成。
2.1人体特征投影
根据三维人体姿态模型Mo(δ′,α0′)的几何特性,从网格模型中提取人体特征投影线作为用户编辑人体特征的绘制和形变依据,本发明中,将人体特征线分为轮廓特征线、暗示性轮廓线、谷线和脊线三类分别进行投影计算。
轮廓特征线,即在投影视图下区分人体模型区域与背景的轮廓线,其特征点的法向量与用户的观察的视向量接近于垂直,可通过计算各点法向量与视向量之间的内积进行判断,其算法流程如下:
步骤1:由当前观察视角得到当前观察的视向量,记为vview;
步骤2:对三维人体姿态模型Mo(δ′,α0′)中的某一个网格点va,计算该点处三维网格模型的法向量na;
步骤3:计算视向量vview与该网格点法向量na的内积pa=vview·na;
步骤4:若内积|pa|<ηC,则将网格点va加入轮廓线特征点集合VC,其中轮廓判断阈值ηC的取值为0.1~0.2左右,此处取值为0.2;
步骤5:重复步骤2~步骤4,直到三维人体姿态模型Mo(δ′,α0′)中的所有网格点均已被计算;
步骤6:将邻近的轮廓特征点相连,组成若干轮廓线,将其在视平面上的投影线集合记为轮廓投影线集合FC。
暗示性轮廓线,即当前视角下并非轮廓线,但当视角变化的时候会成为轮廓的特征线,该类特征线可通过计算三维模型网格点处的半径曲率Kr以及Kr在w方向的方向导数Dw(Kr)进行判断,其算法流程如下:
步骤1:对三维人体姿态模型Mo(δ′,α0′)中的某一个网格点va,计算该点处的主曲率k1(va)和k2(va),计算方法见文献5 Taubin,G.1995.Estimating the tensor of curvatureof a surface from a polyhedral approximation.In ICCV’95,902–907.;
步骤2:计算网格点va处,w方向与k1(va)的主方向的夹角φ;
步骤3:计算网格点va处的半径曲率kr(va)=k1(va)cos2φ+k2(va)sin2φ;
步骤4:计算kr(va)在w方向的方向导数Dw(kr);
步骤5:若方向导数Dw(kr)>0,则将网格点va加入暗示性轮廓点集合VSC;
步骤6:重复步骤1~步骤5,直到三维人体姿态模型Mo(δ′,α0′)中的所有网格点均已被计算;
步骤7:将邻近的暗示性轮廓特征点相连,组成若干暗示性轮廓线,将其在视平面上的投影线集合记为暗示性轮廓投影线集合FSC。
谷线和脊线,即人体网格模型表面曲率的局部极值点,其计算方法根据文献6 Judd,T.,Durand,F.,Adelson,E.2007.Apparent Ridges for Line Drawing.ACM Trans.Graph.26,3,Article 19,July 2007,7pages所述进行计算,得到视平面上的谷线集合FV和脊线集合FR。
最后,需要对所得特征投影线集合进行消隐,即将当前观察视角下不可见的特征投影点进行剪除,可利用OpenGL的深度缓存来判断每个特征点是否可见,其计算流程如下:
步骤1:对特征投影线集合FC、FSC、FV和FR中的某个特征点p,得到其OpenGL窗口深度d(p);
步骤2:将该特征点的深度值记为dep(p)=pZ;
步骤3:若d(p)=dep(p),则将特征点p保留,否则,从特征投影线集合中将特征点p删除;
步骤4:重复步骤1~步骤3,直到特征投影线集合FC、FSC、FV和FR中的所有特征点均已被计算。
2.2特征组合代价计算
本发明在提取三维人体姿态模型Mo(δ′,α0′)特征投影线的基础上,根据用户绘制的草图特征笔画si在上述特征投影线集合FC、FSC、FV和FR中,寻找所有可能与草图特征笔画si相匹配的特征投影线组合SFSi,并根据特征投影线间的几何关系计算各组合形式的组合代价集合CSi。计算特征组合代价集合CSi包括候选特征线集合计算、特征投影线组合查找以及特征投影线组合代价计算三个步骤。
1)候选特征线集合计算:根据用户绘制的草图特征笔画si,计算该笔画的闭包矩形,并将该闭包矩形所覆盖区域内的所有特征投影线作为候选匹配特征投影线,其算法流程如下:
步骤1:对某草图特征笔画si,计算其采样点在x方向的最大值right和最小值left,以及在y方向的最大值bottom和最小值top;
步骤4:重复步骤3,直到特征投影线集合FC、FSC、FV和FR中的所有特征投影线均已被计算。
2)特征投影线组合查找:根据三维人体姿态模型Mo(δ′,α0′)提取的特征线投影通常是不连续的若干特征线的集合,为了找到可能与用户绘制的草图特征笔画匹配的特征组合,需要在候选匹配特征投影线集合SFC中遍历查找所有可能的特征投影线组合,其算法流程如下:
步骤1:对候选匹配特征投影线集合SFC中每条特征投影线li,记其两个端点分别为p2i和p2i,计算其端点的邻接特征线条数n2i和n2i+1;
步骤2:对任意端点pi,若ni=0,则将其加入起始端点集合Po;
步骤3:对于起始端点集合Po中的每个端点集合Pi,将其所在特征线l加入新的特征线组合SFj;
步骤4:对特征线l的另一个端点p,将通过该点与特征线l邻接的特征线l′加入特征线组合SFj;
步骤5:重复步骤3~步骤4,直到当前特征线的另一个端点p′也在起始端点集合Po中,将特征线组合SFj加入候选匹配特征投影线组合集合SFSi中;
步骤6:重复步骤2~步骤5,直到起始端点集合Po中的所有端点均已被计算。
3)特征投影线组合代价计算:候选匹配特征投影线组合集合SFSi中的各种特征投影线组合并不都是合理的,或者说其合理程度是不同的,本发明中采用特征投影线组合代价CSFj来表征对应特征投影线组合SFj的合理程度,并将此组合代价用于草图笔画与特征投影线组合的匹配过程中。特征投影线组合代价计算通过特征投影线距离计算和特征组合代价计算两个步骤完成。
a)特征投影线距离计算:特征投影线距离表示两条特征投影线相互进行组合时所需要的组合代价,分为距离差异、方向差异和遮挡差异3个部分分别进行计算,其计算流程如下:
步骤1:对候选匹配特征投影线集合SFC中的任意两条特征投影线,将其记为li和lj;
步骤2:遍历该两条特征投影线li和lj的所有特征点,计算其距离差异
步骤4:检测两条特征投影线li和lj是否存在T型相交点,若不存在,则记遮挡差异cl1l2=0;
步骤5:计算被遮挡特征线长度l,在遮挡特征线中,计算较长分段的长度为ll,较短分段的长度为ls;
步骤7:计算该两条特征投影线li和lj的距离为
步骤8:重复步骤1~步骤7,直到候选匹配特征投影线集合SFC中的任意两条特征线之间均已被计算。
b)特征组合代价计算:对候选匹配特征投影线组合集合SFSi中的每组特征投影线组合SFj,计算其通过所有成员特征投影线SFj={l1,l2,...,lm}进行组合时所产生的综合组合代价CSFj,其算法流程如下:
步骤1:在候选匹配特征投影线组合集合SFSi中,选择任一特征投影线组合,记为SFj;
步骤3:对任一特征投影线,计算其组合代价权重wt=Lt/Lall,其中Lt为该特征投影线的长度;
步骤4:计算该特征投影线的组合代价Ct-SFj=0.5×wt×(εt~(t-1)+εt~(t+1)),其中εt~(t-1)为特征投影线lt与lt-1之间的距离;
步骤5:重复步骤3~步骤4,直到特征投影线组合SFj中的所有特征投影线均已被计算;
步骤7:重复步骤1~步骤6,直到候选匹配特征投影线组合集合SFSi中的所有特征投影线组合均已被计算。
2.3特征点匹配
本发明中,用户绘制的草图人体特征笔画可根据形状相似性及对应特征投影线组合的组合代价进行匹配,并通过建立对应草图笔画和特征投影线组合的隐马尔科夫(HMM)模型将对应的草图笔画点与网格模型特征点进行对应。特征点匹配过程通过草图笔画~特征投影线相似度计算以及草图笔画点~网格模型特征点对应两个步骤完成。
1)草图笔画~特征投影线相似度计算:在其候选匹配特征投影线组合集合SFSi中,根据形状相似度d(si,SFj)与对应特征投影线组合SFj的组合代价CSFj,可计算得到该特征投影线组合SFj与草图笔画si的相似度SimSi-SFj。本发明中,使用点集之间的Hausdorff距离表征两条曲线之间的形状相似度,其算法流程如下:
步骤1:对草图笔画si中的任意点pa,计算特征投影线组合SFj到该点的最近距离
步骤2:重复步骤1,直到草图笔画si中的所有点均已被计算,并计算有向Hausdorff距离
步骤3:如上所述计算反方向Hausdorff距离
步骤4:计算该草图笔画si与特征投影线组合SFj的形状相似度度量
步骤5:计算该草图笔画si与特征投影线组合SFj的相似度SimSi-SFj=d(si,SFj)×CSFj;
步骤6:重复步骤1~步骤5,直到候选匹配特征投影线组合集合SFSi中的所有特征投影线组合均已被计算;
2)草图笔画点~网格模型特征点对应:为计算对应网格特征点的位移参数,需要将用户绘制的草图人体特征笔画采样点与三维人体姿态模型的网格特征点进行对应,本发明中,按照文献7 Vladislav Kraevoy,Alla Sheffer,and Michiel van de Panne.Contourbased Modeling Using Deformable 3D Templates.Tech Report,2007所述方法,根据草图笔画与匹配的特征投影线组合之间的几何关系建立HMM模型,并通过Viterbi算法求解草图笔画点与网格模型特征点之间的对应关系,其算法流程如下:
步骤1:从草图笔画si的候选匹配特征投影线组合集合SFSi中选择相似度最高的特征投影线组合SFj;
步骤2:将草图笔画点si={p0,p1,...,pn}作为观察状态,特征投影线的特征点SFj={v0,v1,...,vm}作为隐藏状态;
步骤3:对任意草图笔画点p和特征投影线特征点v,计算二维距离dp=(px-vx)2+(py-vy)2,以及法向量差异dN=np·nv;
步骤4:计算草图笔画点连续性度量dC=||vi-vi-1||2/||pi-pi-1||2;
步骤6:根据文献8 RABINER,L.R.1989.A tutorial on hidden Markov models andselected applications inspeech recognition.Proceedings of the IEEE 77,2,257-286.所述方法,采用Viterbi算法计算该HMM模型最有可能的隐藏状态序列,作为草图笔画点的对应序列;
步骤7:根据草图笔画点和特征投影线特征点的对应关系,计算网格特征点的位移参数PD={va=vdef|va∈Mo(θ′,α0′)}。
3.模型形变
本发明中,用户在三维人体姿态模型的正视图下标定该人体模型的关节点位置,根据三维人体网格模型网格点与人体关节点之间的相对位置对该人体网格模型进行加权;然后,在对应三维模型的三维模型网格点位移参数的约束下,通过均值编码网格形变算法对人体网格模型进行形变,得到最终的三维人体网格模型。模型形变过程通过人体模型加权以及人体模型形变两个步骤完成。
3.1人体模型形变
本发明中,如文献9 Kraevoy V.,Sheffer A.Mean-value geometry encoding.International Journal of Shape Modeling 12,1,2007所述的均值编码方法对三维人体姿态模型Mo(δ′,α0′)进行形变。人体模型形变通过均值坐标编码以及网格形变坐标求解两个步骤完成。
1)均值坐标编码:对三维人体网格模型Mo(δ′,α0′)进行均值坐标编码,其计算流程如下:
对三维人体网格模型Mo(δ′,α0′)进行均值坐标编码,即对每个三维模型网格点va,根据其邻接点坐标计算得到三维模型网格点vi处的法向量ni,及各点坐标在该法向量方向投影的平均值da;根据顶点va的周围顶点在该点va的投影平面上的投影长度,计算各点的权重wab以及各边夹角的余弦值cosab,这两个值在形变过程中保持不变;最后,根据均值坐标编码公式对该顶点va的坐标进行编码,得到va的均值编码坐标Va。
步骤2:基于三维模型网格点va的邻接网格点坐标,按照下式计算其均值编码法向量:
步骤4:按照下式计算各邻接边的权重wab,以及各边夹角的余弦值cosab:
其中,在法向量垂直的投影平面上,三维网格点va与vb的投影分别为va′和vb′,则γab与δab表示投影边(va′,vb′)与相邻投影边的夹角,lab表示投影边(va′,vb′)的长度,m为与三维网格点va相邻接的三维网格点数量,三维网格点va的所有相邻网格点按照逆时针顺序标记为{vb1,vb2,...,vbm},参见图2a和图2b。
步骤5:按照下式计算该三维模型网格点va的均值编码坐标:
其中,(a,b)∈E表示网格点va和vb是相邻的,其中E为三维人体姿态模型Mo的边集,wab为相邻三维模型网格点va和vb之间边的权重,coab为边(a,b)边a和边b相邻夹角的余弦值,na为各三维模型网格点的均值编码法向量,va为当前计算三维模型网格点的坐标,vt为与va相邻的三维模型网格点,I3为三阶单位矩阵。各变量值定义为:
其中,在法向量垂直的投影平面上,三维网格点va与vb的投影分别为va′和vb′,则γab与δab表示投影边(va′,vb′)与相邻投影边的夹角,lab表示投影边(va′,vb′)的长度,m为与三维网格点va相邻接的三维网格点数量,三维网格点va的所有相邻网格点按照逆时针顺序标记为{vb1,vb2,...,vbm},各参数定义如图2a和图2b所示。
2)网格形变坐标求解:根据三维人体姿态模型的三维模型网格点在xy平面的位移参数,对加权后的三维人体网格模型Mo(δ′,α0′)求解一个最小二乘问题,即可得到形变后的三维人体网格模型MR(δ′,α0′),其计算流程如下:
步骤1:将网格特征点的位移参数PD={va=vdef|va∈Mo(δ′,α0′)}作为优化问题的硬约束;
步骤2:利用Levenberg-Marquadt算法按照下式求解最小二乘问题:
步骤3:解上述最小二乘问题所得结果即为形变过后的三维人体姿态模型的网格点坐标。
图3a、图3b、图3c示出了从单幅手绘人体特征草图创建三维人体网格模型的实例效果。图3a为用户绘制的人体特征线草图,图3b为初始人体姿态模型,图3c为生成的人体模型以及与原始草图的对比,可以看到用户的绘制意图在结果模型中得到了体现。由于图3b、图3c为实体图,因此必须使用色块表示。
Claims (7)
1.一种采用手绘草图的三维人体多姿态建模方法,其特征在于,包括以下步骤:
步骤一,模型预处理:用户绘制人体特征草图S,并调整给定的三维人体姿态模型Mo的观察视角和人体姿态,使三维人体姿态模型Mo的观察视角和人体姿态与人体特征草图S一致;所述人体特征草图为S={s1,s2,...,sn},s1,s2,...,sn表示由草图笔画点构成的各条人体草图笔画线,n为人体特征草图中的笔画线数;所述三维人体姿态模型Mo包括一组三维模型网格点;根据用户在三维人体姿态模型Mo上标定的人体关节点位置,对三维模型网格点进行加权;
步骤二,笔画匹配:在步骤一中调整后的观察视角和人体姿态下,对三维人体姿态模型Mo进行投影得到特征投影线集合SF,特征投影线集合SF包括一组特征投影线;
对每一条草图笔画线si计算对应的候选特征投影线集合SFC,并在特征投影线集合SFC中,遍历查找所有可能与草图笔画线si匹配的特征投影线组合,计算各特征投影线组合的组合代价集合CSi,并得到对应的特征投影线组合集合SFSi;计算草图笔画线si与特征投影线组合集合SFSi中各特征投影线组合的相似度,选择相似度最高的特征投影线组合SSi与草图笔画线si进行匹配,1≤i≤n;
对所述匹配的草图笔画线si和特征投影线组合SSi建立隐马尔科夫模型,将草图笔画线si的草图笔画点与特征投影线组合SSi中的特征投影线点进行匹配,并计算特征投影线点所对应的三维模型网格点在绘制平面的位移参数PDSi,所有特征投影线点对应的三维模型网格点位移参数构成三维人体姿态模型Mo的特征点位移集合PD;
步骤三,模型形变:在三维人体姿态模型Mo的特征点位移集合PD的约束下,对三维人体姿态模型Mo进行形变,得到最终的三维人体网格模型,从而实现三维人体多姿态建模。
2.根据权利要求1所述的一种采用手绘草图的三维人体多姿态建模方法,其特征在于,步骤一中,用户绘制人体特征草图S,对人体特征草图S中的草图笔画线si进行笔画分割,将所有草图笔画线识别为直线和椭圆两类图元;
所述三维人体姿态模型记为Mo(δ,α0);用户根据人体特征草图S,调整三维人体姿态模型的观察视角,使该三维人体姿态模型Mo与人体特征草图S的投影视角一致,在三维人体姿态模型Mo(δ,α0)上标定人体关节点位置;通过移动各人体关节点的位置调整人体姿态参数δ和根关节点坐标α,使移动后的三维人体姿态模型与人体特征草图S所绘制的人体姿态一致,移动后的人体姿态参数为δ′,根关节点坐标为α0′,将所得到的三维人体姿态模型Mo(δ′,α0′)作为模型形变的模板;
在三维人体姿态模型Mo(δ′,α0′)上标记人体关节点位置,并对每个三维模型网格点va计算其到最近人体关节点的距离Di,根据此距离Di对三维模型网格点va进行加权。
3.根据权利要求2所述的一种采用手绘草图的三维人体多姿态建模方法,其特征在于,步骤二中,对三维人体姿态模型Mo(δ′,α0′)计算以下几何特征并投影:
计算各三维人体姿态模型Mo(δ′,α0′)中三维模型网格点的法向量与视向量的内积,并将内积小于阈值的三维模型网格点作为轮廓特征点;计算各三维模型网格点处的半径曲率Kr以及半径曲率Kr在曲面切线方向w上的方向导数Dw(Kr),将Kr=0且Dw(Kr)>0的三维模型网格点作为暗示性轮廓点;计算三维人体网格模型Mo(δ′,α0′)主曲率的局部极值点;
将上述轮廓特征点、暗示性轮廓点、以及主曲率局部极值点投影到绘制平面生成对应的投影点集,采用基于深度连续性的轮廓跟踪算法将上述投影点集连接为特征投影线,并根据各草图笔画线si的闭包矩形覆盖范围,在所述特征投影线集合中寻找各草图笔画线si对应的候选特征投影线集合SFC;
在候选匹配特征投影线集合SFC中,计算两两特征投影线之间的距离ε;
在候选匹配特征投影线集合SFC中,遍历查找所有特征投影线组合集合SFSi,并计算特征投影线组合集合SFSi中各种组合形式的组合代价集合CSi,组合代价集合CSi中包括一组特征投影线组合代价;
计算草图笔画线si与特征投影线组合集合SFSi中每个特征投影线组合SFj的形状相似度SimSi-SFj,1≤j≤n,根据形状相似度SimSi-SFj和组合代价集合CSi中的对应特征投影线组合代价CSFj,计算草图笔画线si与特征投影线组合SFj的相似度ηSi-SFj,并将相似度ηSi-SFj最大的特征投影线组合SFj与草图笔画线si进行对应;
根据上述相似度最大的草图笔画线si和特征投影线组合SFj,将草图笔画线si的草图笔画点作为观察状态,将特征投影线组合SFj的特征投影线点作为隐藏状态,根据三维模型网格点和对应特征投影线点之间的距离DP及法向量差异DN计算转移概率,根据三维模型网格点和对应特征投影线点之间的连续性度量DC计算消除概率,并建立隐马尔科夫模型;
将草图笔画点作为输入,计算概率最大的隐藏状态序列,作为对应特征投影线特征点的序列,实现草图笔画点与特征投影线特征点的匹配;
在上述匹配结果的基础上,计算特征投影线点所对应的三维模型网格点在绘制平面的位移参数PDSi,所有特征投影线点对应的三维模型网格点位移参数构成三维人体姿态模型Mo的特征点位移集合PD。
4.根据权利要求3所述的一种采用手绘草图的三维人体多姿态建模方法,其特征在于,步骤三中,对三维人体姿态模型Mo(δ′,α0′)进行均值坐标编码,即对每个三维模型网格点va,根据其邻接点坐标计算得到三维模型网格点va处的法向量na,及三维模型网格点坐标在该法向量方向投影的平均长度da;根据三维模型网格点va的周围顶点在该三维模型网格点va的投影平面上的投影长度,计算各三维模型网格点的权重wab以及各边夹角的余弦值cosab;
根据均值坐标编码对所有三维模型网格点va的坐标进行编码,得到三维模型网格点va的均值编码坐标Va;
在步骤二所计算得到的三维模型网格点在绘制平面的位移参数的约束下,对加权后的三维人体姿态模型Mo(δ′,α0′)求解得到形变后的三维人体网格模型MR(δ′,α0′),从而完成三维人体多姿态建模。
5.根据权利要求4所述的一种采用手绘草图的三维人体多姿态建模方法,其特征在于,特征投影线l1和特征投影线l2两两之间的距离ε为:
其中,fl1l2为两个特征投影线的二维方向差异,cl1l2为两个特征投影线的遮挡度量,dl1l2为两个特征投影线相邻点的二维距离;
其中:
其中,γ1和γ2分别为两条特征投影线与绘制平面上的水平x轴和竖直y轴的夹角,l为被遮挡特征线的长度,ls为遮挡线较短部分的长度,ll为遮挡线较长部分的长度,pa为特征投影线l1上的任意点,pb为特征投影线l2上的任意点。
6.根据权利要求5所述的一种采用手绘草图的三维人体多姿态建模方法,其特征在于,特征投影线组合SFj的组合代价CSFj为:
其中,为特征投影线lk-1和特征投影线lk两两之间的距离,k=1,2,...t...,m,wt为特征投影线lt在特征投影线组合SFj中的权重,权重wt表示特征投影线lt的长度Lt与特征投影线组合SFj中所有特征投影线的总长度Lall的比值。
7.根据权利要求6所述的一种采用手绘草图的三维人体多姿态建模方法,其特征在于,均值坐标编码及模型形变,包含以下步骤:
对三维人体姿态模型Mo进行均值坐标编码,将各三维模型网格点坐标va表示为:
其中,(a,b)∈E表示三维模型网格点va和vb相邻,其中E为三维人体姿态模型Mo的边集,wab为相邻三维模型网格点va和vb之间边的权重,cosab为边a和边b相邻夹角的余弦值,na为各三维模型网格点的均值编码法向量,va为当前计算三维模型网格点的坐标,vt为与va相邻的三维模型网格点,I3为三阶单位矩阵;
在上述约束条件下,求解如下的最小二乘问题得到更新后的人体模型网格点坐标集合V′:
其中,目标函数G(V′)计算形变过程中三维模型网格点集V′的均值编码坐标差异度,qa为根据关节点位置计算得到的三维模型网格点va的权重,Fa(vb,na(vb))为根据相邻网格点vb坐标计算得到的三维模型网格点va的均值编码坐标。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201210234700.8A CN102831638B (zh) | 2012-07-06 | 2012-07-06 | 一种采用手绘草图的三维人体多姿态建模方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201210234700.8A CN102831638B (zh) | 2012-07-06 | 2012-07-06 | 一种采用手绘草图的三维人体多姿态建模方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN102831638A true CN102831638A (zh) | 2012-12-19 |
CN102831638B CN102831638B (zh) | 2014-11-26 |
Family
ID=47334751
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201210234700.8A Expired - Fee Related CN102831638B (zh) | 2012-07-06 | 2012-07-06 | 一种采用手绘草图的三维人体多姿态建模方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN102831638B (zh) |
Cited By (22)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103729885A (zh) * | 2014-01-21 | 2014-04-16 | 北京邮电大学 | 多视角投影与三维注册联合的手绘场景三维建模方法 |
CN104143211A (zh) * | 2014-06-20 | 2014-11-12 | 浙江工业大学 | 基于单幅图像的三维自由形体生成方法 |
CN104751463A (zh) * | 2015-03-31 | 2015-07-01 | 梁爽 | 一种基于草图轮廓特征的三维模型最佳视角选取方法 |
CN104899925A (zh) * | 2015-06-29 | 2015-09-09 | 遵义宏港机械有限公司 | 一种数控铣床工件三维建模方法 |
CN105513111A (zh) * | 2015-09-15 | 2016-04-20 | 浙江大学 | 一种基于图像轮廓自动贴合的草图式三维造型方法 |
CN105631932A (zh) * | 2015-12-22 | 2016-06-01 | 北京航空航天大学 | 一种轮廓线指导的三维模型重构造方法 |
CN106447784A (zh) * | 2016-09-26 | 2017-02-22 | 西安蒜泥电子科技有限责任公司 | 一种基于mvc的变形模型的快速骨骼恢复方法 |
CN106682594A (zh) * | 2016-12-13 | 2017-05-17 | 中国科学院软件研究所 | 基于动态网格编码的姿势和动作识别方法 |
CN107369202A (zh) * | 2017-07-10 | 2017-11-21 | 北京航空航天大学 | 姿势引导的跨类别三维模型组合建模方法及装置 |
CN108733045A (zh) * | 2017-09-29 | 2018-11-02 | 北京猎户星空科技有限公司 | 机器人及其避障方法以及计算机可读存储介质 |
CN109316192A (zh) * | 2018-09-13 | 2019-02-12 | 清华大学 | 基于移动网络信道状态信息的坐姿检测方法及装置 |
CN110084140A (zh) * | 2019-04-05 | 2019-08-02 | 西北工业大学 | 基于关节向量的通用姿态识别方法 |
CN110516114A (zh) * | 2019-08-28 | 2019-11-29 | 北京理工大学 | 基于姿态基的运动数据库自动标注方法及终端 |
US10521429B2 (en) | 2015-06-09 | 2019-12-31 | Microsoft Technology Licensing, Llc. | Interactive graphical system for estimating body measurements |
CN111583408A (zh) * | 2020-05-09 | 2020-08-25 | 中国科学技术大学 | 基于手绘草图的人体三维建模系统 |
CN112233223A (zh) * | 2020-09-29 | 2021-01-15 | 深圳市易尚展示股份有限公司 | 基于三维点云的人体参数化模型自动变形方法和装置 |
CN112733704A (zh) * | 2021-01-07 | 2021-04-30 | 浙江大学 | 图像处理方法、电子设备和计算机可读存储介质 |
CN112862920A (zh) * | 2021-02-18 | 2021-05-28 | 清华大学 | 基于手绘草图的人体图像生成方法及系统 |
CN114742696A (zh) * | 2022-03-21 | 2022-07-12 | 天工信创(广州)信息科技有限公司 | 一种将2d网格均匀流动到3d柱面的变形方法及处理器 |
CN114863077A (zh) * | 2022-04-21 | 2022-08-05 | 西北工业大学 | 一种用于沉浸式三维草图绘制的引导线推断方法 |
CN115293299A (zh) * | 2022-10-08 | 2022-11-04 | 中科物栖(北京)科技有限责任公司 | 人体姿态特征实时检测方法、装置、设备及介质 |
CN117876429A (zh) * | 2024-03-12 | 2024-04-12 | 潍坊海之晨人工智能有限公司 | 一种运动型工业视觉实训平台 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20090284550A1 (en) * | 2006-06-07 | 2009-11-19 | Kenji Shimada | Sketch-Based Design System, Apparatus, and Method for the Construction and Modification of Three-Dimensional Geometry |
CN101826126A (zh) * | 2010-04-02 | 2010-09-08 | 浙江大学 | 基于任意视线三维草图的服装设计方法 |
-
2012
- 2012-07-06 CN CN201210234700.8A patent/CN102831638B/zh not_active Expired - Fee Related
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20090284550A1 (en) * | 2006-06-07 | 2009-11-19 | Kenji Shimada | Sketch-Based Design System, Apparatus, and Method for the Construction and Modification of Three-Dimensional Geometry |
CN101826126A (zh) * | 2010-04-02 | 2010-09-08 | 浙江大学 | 基于任意视线三维草图的服装设计方法 |
Non-Patent Citations (2)
Title |
---|
R. SCHMIDT ET AL.: "ShapeShop: Sketch-Based Solid Modeling with BlobTrees", 《SIGGRAPH 2007》 * |
张尧烨等: "三维人体的草绘建模方法", 《软件学报》 * |
Cited By (34)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103729885A (zh) * | 2014-01-21 | 2014-04-16 | 北京邮电大学 | 多视角投影与三维注册联合的手绘场景三维建模方法 |
CN103729885B (zh) * | 2014-01-21 | 2016-08-24 | 北京邮电大学 | 多视角投影与三维注册联合的手绘场景三维建模方法 |
CN104143211A (zh) * | 2014-06-20 | 2014-11-12 | 浙江工业大学 | 基于单幅图像的三维自由形体生成方法 |
CN104143211B (zh) * | 2014-06-20 | 2017-01-25 | 浙江工业大学 | 基于单幅图像的三维自由形体生成方法 |
CN104751463B (zh) * | 2015-03-31 | 2017-10-13 | 同济大学 | 一种基于草图轮廓特征的三维模型最佳视角选取方法 |
CN104751463A (zh) * | 2015-03-31 | 2015-07-01 | 梁爽 | 一种基于草图轮廓特征的三维模型最佳视角选取方法 |
US10521429B2 (en) | 2015-06-09 | 2019-12-31 | Microsoft Technology Licensing, Llc. | Interactive graphical system for estimating body measurements |
CN104899925A (zh) * | 2015-06-29 | 2015-09-09 | 遵义宏港机械有限公司 | 一种数控铣床工件三维建模方法 |
CN105513111B (zh) * | 2015-09-15 | 2018-01-23 | 浙江大学 | 一种基于图像轮廓自动贴合的草图式三维造型方法 |
CN105513111A (zh) * | 2015-09-15 | 2016-04-20 | 浙江大学 | 一种基于图像轮廓自动贴合的草图式三维造型方法 |
CN105631932A (zh) * | 2015-12-22 | 2016-06-01 | 北京航空航天大学 | 一种轮廓线指导的三维模型重构造方法 |
CN105631932B (zh) * | 2015-12-22 | 2018-06-12 | 北京航空航天大学 | 一种轮廓线指导的三维模型重构造方法 |
US10049503B2 (en) | 2015-12-22 | 2018-08-14 | Beihang University | Line guided three-dimensional model reshaping method |
CN106447784A (zh) * | 2016-09-26 | 2017-02-22 | 西安蒜泥电子科技有限责任公司 | 一种基于mvc的变形模型的快速骨骼恢复方法 |
CN106682594A (zh) * | 2016-12-13 | 2017-05-17 | 中国科学院软件研究所 | 基于动态网格编码的姿势和动作识别方法 |
CN107369202A (zh) * | 2017-07-10 | 2017-11-21 | 北京航空航天大学 | 姿势引导的跨类别三维模型组合建模方法及装置 |
CN107369202B (zh) * | 2017-07-10 | 2020-04-21 | 北京航空航天大学 | 姿势引导的跨类别三维模型组合建模方法及装置 |
CN108733045A (zh) * | 2017-09-29 | 2018-11-02 | 北京猎户星空科技有限公司 | 机器人及其避障方法以及计算机可读存储介质 |
CN109316192A (zh) * | 2018-09-13 | 2019-02-12 | 清华大学 | 基于移动网络信道状态信息的坐姿检测方法及装置 |
CN110084140A (zh) * | 2019-04-05 | 2019-08-02 | 西北工业大学 | 基于关节向量的通用姿态识别方法 |
CN110516114A (zh) * | 2019-08-28 | 2019-11-29 | 北京理工大学 | 基于姿态基的运动数据库自动标注方法及终端 |
CN111583408B (zh) * | 2020-05-09 | 2023-06-20 | 中国科学技术大学 | 基于手绘草图的人体三维建模系统 |
CN111583408A (zh) * | 2020-05-09 | 2020-08-25 | 中国科学技术大学 | 基于手绘草图的人体三维建模系统 |
CN112233223A (zh) * | 2020-09-29 | 2021-01-15 | 深圳市易尚展示股份有限公司 | 基于三维点云的人体参数化模型自动变形方法和装置 |
CN112733704A (zh) * | 2021-01-07 | 2021-04-30 | 浙江大学 | 图像处理方法、电子设备和计算机可读存储介质 |
CN112862920A (zh) * | 2021-02-18 | 2021-05-28 | 清华大学 | 基于手绘草图的人体图像生成方法及系统 |
CN112862920B (zh) * | 2021-02-18 | 2024-07-02 | 清华大学 | 基于手绘草图的人体图像生成方法及系统 |
CN114742696A (zh) * | 2022-03-21 | 2022-07-12 | 天工信创(广州)信息科技有限公司 | 一种将2d网格均匀流动到3d柱面的变形方法及处理器 |
CN114863077B (zh) * | 2022-04-21 | 2024-02-23 | 西北工业大学 | 一种用于沉浸式三维草图绘制的引导线推断方法 |
CN114863077A (zh) * | 2022-04-21 | 2022-08-05 | 西北工业大学 | 一种用于沉浸式三维草图绘制的引导线推断方法 |
CN115293299B (zh) * | 2022-10-08 | 2023-01-24 | 中科物栖(北京)科技有限责任公司 | 人体姿态特征实时检测方法、装置、设备及介质 |
CN115293299A (zh) * | 2022-10-08 | 2022-11-04 | 中科物栖(北京)科技有限责任公司 | 人体姿态特征实时检测方法、装置、设备及介质 |
CN117876429A (zh) * | 2024-03-12 | 2024-04-12 | 潍坊海之晨人工智能有限公司 | 一种运动型工业视觉实训平台 |
CN117876429B (zh) * | 2024-03-12 | 2024-06-07 | 潍坊海之晨人工智能有限公司 | 一种运动型工业视觉实训系统 |
Also Published As
Publication number | Publication date |
---|---|
CN102831638B (zh) | 2014-11-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN102831638B (zh) | 一种采用手绘草图的三维人体多姿态建模方法 | |
Qian et al. | PUGeo-Net: A geometry-centric network for 3D point cloud upsampling | |
Jiang et al. | Gesture recognition based on skeletonization algorithm and CNN with ASL database | |
Harary et al. | 3D Euler spirals for 3D curve completion | |
CN102982578B (zh) | 单幅人物图像中着装人体三维模型估计方法 | |
Kara et al. | Pen-based styling design of 3D geometry using concept sketches and template models | |
CN102509357B (zh) | 基于笔触的铅笔素描模拟和绘制系统 | |
Kim et al. | Finding ridges and valleys in a discrete surface using a modified MLS approximation | |
Bhattacharjee et al. | A survey on sketch based content creation: from the desktop to virtual and augmented reality | |
CN111583408B (zh) | 基于手绘草图的人体三维建模系统 | |
CN105045496A (zh) | 一种基于关节点变换的手势交互方法 | |
Eyiyurekli et al. | Interactive free-form level-set surface-editing operators | |
Zhou et al. | Image deformation with vector-field interpolation based on MRLS-TPS | |
Wu et al. | Skeleton based parametric solid models: Ball B-Spline curves | |
Olsen et al. | A Taxonomy of Modeling Techniques using Sketch-Based Interfaces. | |
Clémot et al. | Neural skeleton: Implicit neural representation away from the surface | |
Chen et al. | Learning shape priors for single view reconstruction | |
CN104484034A (zh) | 一种基于手势识别的手势运动基元过渡帧定位方法 | |
KR101634461B1 (ko) | 스케치를 이용한 얼굴 주름 생성 장치 및 방법 | |
Yang et al. | Life-sketch: a framework for sketch-based modelling and animation of 3D objects | |
Chen et al. | A data-driven approach to efficient character articulation | |
Orbay et al. | Sketch-based aesthetic product form exploration from existing images using piecewise clothoid curves | |
CN112116710A (zh) | 基于趋势约束的曲面重建方法 | |
Luo et al. | Geometry sampling for 3D face generation via DCGAN | |
CN107424204B (zh) | 基于渐进式平面映射的同构三角化方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20141126 Termination date: 20180706 |
|
CF01 | Termination of patent right due to non-payment of annual fee |