CN109816789A - 一种基于深度神经网络的三维模型参数化方法 - Google Patents
一种基于深度神经网络的三维模型参数化方法 Download PDFInfo
- Publication number
- CN109816789A CN109816789A CN201811534717.9A CN201811534717A CN109816789A CN 109816789 A CN109816789 A CN 109816789A CN 201811534717 A CN201811534717 A CN 201811534717A CN 109816789 A CN109816789 A CN 109816789A
- Authority
- CN
- China
- Prior art keywords
- neural network
- coordinate
- hidden layer
- matrixing
- network model
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
- Image Generation (AREA)
Abstract
本发明公开了一种基于深度神经网络的三维模型参数化方法,涉及三维模型参数化技术领域。本发明包括:建立包含两个隐层的从三维空间到二维空间的神经网络模型并通过神经网络模型获取网格的参数化坐标;利用所述神经网络模型通过所述参数化坐标重建三维网格;采用loss函数为约束条件对所述神经网络模型训练。本发明对约束条件中的loss函数为约束条件进行了改进,对扭曲较大的网格的曲面参数化具有很好的效果,与传统的ARAP方法需要初始值不断迭代,而本发明的神经网络模型不必给出特定的初始值,给出随机值就能有效的获取曲面参数化坐标,方便快捷,提高计算效率。
Description
技术领域
本发明属于三维模型参数化技术领域,特别是涉及一种基于深度神经网络的三维模型参数化方法。
背景技术
曲面参数化技术在计算机图像学及几何处理方向一直都是一个基本问题。至今,参数化在许多方向都有重要应用,例如,纹理映射,变形,接口映射和形状分析等;这些任务都需要用到低扭曲的参数化。
对于线性的参数化方法,例如Tutte的方法,保证了参数化映射是一种双射,但通常对于复杂的输入模型会有非常大的扭曲。对于非线性的参数化方法,通常是把参数化的过程看作是求解一个带有保证三角面片定向的约束条件的能量函数的优化问题。目标函数一般会有一项用来保证低扭曲,当输入的网格扭得比较严重时这一项会非常大;也会有一项用来保证无翻转,采用的方法是当三角面片翻转或退化时,这一项会趋于无穷大。这些目标函数是高度非凸和非线性的,导致特别是对于大规模的网格优化难度非常大。
近些年来,深度学习发展迅猛,在图像识别、语音识别等方面都取得了惊人的成就。而神经网络在三维网格处理方面还并没有大规模的应用,本技术借助神经网络来对网格进行参数化和网格重建,能得到很好的效果。
发明内容
本发明的目的在于提供一种基于深度神经网络的三维模型参数化方法,首先通过建立包含两个隐层的从三维空间到二维空间的神经网络模型并通过神经网络模型获取网格的参数化坐标,再利用神经网络模型通过参数化坐标重建三维网格,最后采用loss函数为约束条件对神经网络模型训练,解决了现有扭曲较大的网格的很难进行有效的曲面参数化问题。
为解决上述技术问题,本发明是通过以下技术方案实现的:
本发明为一种基于深度神经网络的三维模型参数化方法,包括如下步骤:
步骤一:建立包含两个隐层的从三维空间到二维空间的神经网络模型并通过神经网络模型获取网格的参数化坐标;
具体过程包括如下:
S0:将输入的三维网格空间坐标(x,y,z)先经过第一weight矩阵变换和第一bias矩阵变换,再经过激活函数G0后得到隐层0的m0个元素;
S1:将S0中隐层0得到的m0个元素先经过第二weight矩阵变换和第二bias矩阵变换,再经过激活函数G1后得到隐层1的m1个元素;
S2:将S1中隐层1得到的m1个元素经过第一线性变换后得到平面的uv坐标;
其中,所述激活函数G0以及激活函数G1均为relu函数;由于所述relu函数是分片线性的,能很好地防止梯度消失等问题;另一方面,经过多次实验的得出结论,令m0=2m1会有更好的效果;
步骤二:利用所述神经网络模型通过所述参数化坐标重建三维网格;
具体过程包括如下:
T0:将所述uv坐标作先经过第三weight矩阵变换和第三bias矩阵变换,再经过激活函数G2后得到隐层2的m2个元素;
T1:将T0中隐层2得到的m2个元素先经过第四weight矩阵变换和第四bias矩阵变换,再经过激活函数G3后得到隐层3的m3个元素;
T2:将T1中隐层2得到的m2个元素经过第二线性变换后得到重建后的空间坐标(x1,y1,z1),从而形成一个自编码器autoencoder;
其中,所述激活函数G2以及激活函数G3均为sigmoid函数;sigmoid函数能很好地模拟出曲面的性质,同样地,令m2=2m3;
步骤三:采用loss函数为约束条件对所述神经网络模型训练;
具体loss函数获取过程如下:
步骤一中从三维空间到二维空间,参照ARAP,用T表示网格三角面片的总个数;定义参数坐标u和任意线性变换L={L1,...,LT}的能量函数为:
为了保证低扭曲,需要尽可能地要求从三维空间到二维平面的映射为等距映射;则对于任意的t,Lt为如下旋转矩阵:
再定义能量函数:
令网格的定点个数为v,从平面再映射到三维空间得到的网格xout需要与原网格尽可能地一样,则定义另一个能量函数:
因此,定义所述loss函数为:
Q(u,a,b,xout)=Q1(u,a,b)+λ2Q2(xout)。
本发明具有以下有益效果:
1、本发明首先通过建立包含两个隐层的从三维空间到二维空间的神经网络模型并通过神经网络模型获取网格的参数化坐标,再利用神经网络模型通过参数化坐标重建三维网格,最后采用loss函数为约束条件对神经网络模型训练得到完善神经网络模型,方便有效的对扭曲较大的网格的曲面参数化。
2、本发明与传统的ARAP方法需要初始值不断迭代,而本发明的神经网络模型不必给出特定的初始值,给出随机值就能有效的获取曲面参数化坐标,方便快捷,提高计算效率。
当然,实施本发明的任一产品并不一定需要同时达到以上所述的所有优点。
附图说明
为了更清楚地说明本发明实施例的技术方案,下面将对实施例描述所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明的一种基于深度神经网络的三维模型参数化方法的流程图;
图2为本发明中神经网络模型的神经网络图;
图3为输入的网格;
图4为网格的参数化坐标;
图5为参数化坐标的加密图;
图6为借助神经网络计算好的函数的网格重建图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其它实施例,都属于本发明保护的范围。
请参阅图1所示,本发明为一种基于深度神经网络的三维模型参数化方法,包括如下步骤:
步骤一:建立包含两个隐层的从三维空间到二维空间的神经网络模型并通过神经网络模型获取网格的参数化坐标;
请参阅图2所示,具体过程包括如下:
S0:将输入的三维网格空间坐标(x,y,z)先经过第一weight矩阵变换和第一bias矩阵变换,再经过激活函数G0后得到隐层0的m0个元素;
S1:将S0中隐层0得到的m0个元素先经过第二weight矩阵变换和第二bias矩阵变换,再经过激活函数G1后得到隐层1的m1个元素;
S2:将S1中隐层1得到的m1个元素经过第一线性变换后得到平面的uv坐标;
其中,激活函数G0以及激活函数G1均为relu函数;由于relu函数是分片线性的,能很好地防止梯度消失等问题;另一方面,经过多次实验的得出结论,令m0=2m1会有更好的效果;
步骤二:利用神经网络模型通过参数化坐标重建三维网格;
请参阅图2所示,具体过程包括如下:
T0:将uv坐标作先经过第三weight矩阵变换和第三bias矩阵变换,再经过激活函数G2后得到隐层2的m2个元素;
T1:将T0中隐层2得到的m2个元素先经过第四weight矩阵变换和第四bias矩阵变换,再经过激活函数G3后得到隐层3的m3个元素;
T2:将T1中隐层2得到的m2个元素经过第二线性变换后得到重建后的空间坐标(x1,y1,z1),从而形成一个自编码器autoencoder;
其中,激活函数G2以及激活函数G3均为sigmoid函数;sigmoid函数能很好地模拟出曲面的性质,同样地,令m2=2m3;
步骤三:采用loss函数为约束条件对神经网络模型训练;
具体loss函数获取过程如下:
步骤一中从三维空间到二维空间,参照ARAP,用T表示网格三角面片的总个数;定义参数坐标u和任意线性变换L={L1,...,LT}的能量函数为:
为了保证低扭曲,需要尽可能地要求从三维空间到二维平面的映射为等距映射;则对于任意的t,Lt为如下旋转矩阵:
再定义能量函数:
令网格的定点个数为v,从平面再映射到三维空间得到的网格xout需要与原网格尽可能地一样,则定义另一个能量函数:
因此,定义loss函数为:
Q(u,a,b,xout)=Q1(u,a,b)+λ2Q2(xout)。
请参阅图3-6所示,从网格的输入到网格的参数化坐标再到参数化坐标的加密图以及借助神经网络计算好的函数的网格重建图的展示。
值得注意的是,上述系统实施例中,所包括的各个单元只是按照功能逻辑进行划分的,但并不局限于上述的划分,只要能够实现相应的功能即可;另外,各功能单元的具体名称也只是为了便于相互区分,并不用于限制本发明的保护范围。
另外,本领域普通技术人员可以理解实现上述各实施例方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成,相应的程序可以存储于一计算机可读取存储介质中。
以上公开的本发明优选实施例只是用于帮助阐述本发明。优选实施例并没有详尽叙述所有的细节,也不限制该发明仅为所述的具体实施方式。显然,根据本说明书的内容,可作很多的修改和变化。本说明书选取并具体描述这些实施例,是为了更好地解释本发明的原理和实际应用,从而使所属技术领域技术人员能很好地理解和利用本发明。本发明仅受权利要求书及其全部范围和等效物的限制。
Claims (1)
1.一种基于深度神经网络的三维模型参数化方法,其特征在于,包括如下步骤:
步骤一:建立包含两个隐层的从三维空间到二维空间的神经网络模型并通过神经网络模型获取网格的参数化坐标;
具体过程包括如下:
S0:将输入的三维网格空间坐标(x,y,z)先经过第一weight矩阵变换和第一bias矩阵变换,再经过激活函数G0后得到隐层0的m0个元素;
S1:将S0中隐层0得到的m0个元素先经过第二weight矩阵变换和第二bias矩阵变换,再经过激活函数G1后得到隐层1的m1个元素;
S2:将S1中隐层1得到的m1个元素经过第一线性变换后得到平面的uv坐标;
其中,所述激活函数G0以及激活函数G1均为relu函数;
步骤二:利用所述神经网络模型通过所述参数化坐标重建三维网格;
具体过程包括如下:
T0:将所述uv坐标作先经过第三weight矩阵变换和第三bias矩阵变换,再经过激活函数G2后得到隐层2的m2个元素;
T1:将T0中隐层2得到的m2个元素先经过第四weight矩阵变换和第四bias矩阵变换,再经过激活函数G3后得到隐层3的m3个元素;
T2:将T1中隐层2得到的m2个元素经过第二线性变换后得到重建后的空间坐标(x1,y1,z1),从而形成一个自编码器autoencoder;
其中,所述激活函数G2以及激活函数G3均为sigmoid函数;
步骤三:采用loss函数为约束条件对所述神经网络模型训练;
具体loss函数获取过程如下:
步骤一中从三维空间到二维空间,用T表示网格三角面片的总个数;定义参数坐标u和任意线性变换L={L1,...,LT}的能量函数为:
对于任意的t,Lt为如下旋转矩阵:
再定义能量函数:
令网格的定点个数为v,定义另一个能量函数:
则所述loss函数为:
Q(u,a,b,xout)=Q1(u,a,b)+λ2Q2(xout)。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811534717.9A CN109816789B (zh) | 2018-12-14 | 2018-12-14 | 一种基于深度神经网络的三维模型参数化方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811534717.9A CN109816789B (zh) | 2018-12-14 | 2018-12-14 | 一种基于深度神经网络的三维模型参数化方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN109816789A true CN109816789A (zh) | 2019-05-28 |
CN109816789B CN109816789B (zh) | 2023-02-07 |
Family
ID=66602046
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201811534717.9A Active CN109816789B (zh) | 2018-12-14 | 2018-12-14 | 一种基于深度神经网络的三维模型参数化方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN109816789B (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110458957A (zh) * | 2019-07-31 | 2019-11-15 | 浙江工业大学 | 一种基于神经网络的图像三维模型构建方法及装置 |
CN116385698A (zh) * | 2023-05-25 | 2023-07-04 | 腾讯科技(深圳)有限公司 | 网格重建模型的训练方法、网格重建方法及装置 |
CN116778027A (zh) * | 2023-08-22 | 2023-09-19 | 中国空气动力研究与发展中心计算空气动力研究所 | 基于神经网络的曲面参数化方法及装置 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20100054579A1 (en) * | 2006-11-08 | 2010-03-04 | Tokyo Institute Of Technology | Three-dimensional surface generation method |
CN106485783A (zh) * | 2016-10-18 | 2017-03-08 | 合肥阿巴赛信息科技有限公司 | 一种基于稀疏表示和参数化的曲面拟合方法 |
US20170124433A1 (en) * | 2015-11-04 | 2017-05-04 | Nec Laboratories America, Inc. | Unsupervised matching in fine-grained datasets for single-view object reconstruction |
CN108038906A (zh) * | 2017-12-26 | 2018-05-15 | 山东师范大学 | 一种基于图像的三维四边形网格模型重建方法 |
-
2018
- 2018-12-14 CN CN201811534717.9A patent/CN109816789B/zh active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20100054579A1 (en) * | 2006-11-08 | 2010-03-04 | Tokyo Institute Of Technology | Three-dimensional surface generation method |
US20170124433A1 (en) * | 2015-11-04 | 2017-05-04 | Nec Laboratories America, Inc. | Unsupervised matching in fine-grained datasets for single-view object reconstruction |
CN106485783A (zh) * | 2016-10-18 | 2017-03-08 | 合肥阿巴赛信息科技有限公司 | 一种基于稀疏表示和参数化的曲面拟合方法 |
CN108038906A (zh) * | 2017-12-26 | 2018-05-15 | 山东师范大学 | 一种基于图像的三维四边形网格模型重建方法 |
Non-Patent Citations (1)
Title |
---|
詹红燕等: "基于姿态估计的单幅图像三维人脸重建", 《微电子学与计算机》 * |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110458957A (zh) * | 2019-07-31 | 2019-11-15 | 浙江工业大学 | 一种基于神经网络的图像三维模型构建方法及装置 |
CN110458957B (zh) * | 2019-07-31 | 2023-03-10 | 浙江工业大学 | 一种基于神经网络的图像三维模型构建方法及装置 |
CN116385698A (zh) * | 2023-05-25 | 2023-07-04 | 腾讯科技(深圳)有限公司 | 网格重建模型的训练方法、网格重建方法及装置 |
CN116385698B (zh) * | 2023-05-25 | 2023-09-08 | 腾讯科技(深圳)有限公司 | 网格重建模型的训练方法、网格重建方法及装置 |
CN116778027A (zh) * | 2023-08-22 | 2023-09-19 | 中国空气动力研究与发展中心计算空气动力研究所 | 基于神经网络的曲面参数化方法及装置 |
CN116778027B (zh) * | 2023-08-22 | 2023-11-07 | 中国空气动力研究与发展中心计算空气动力研究所 | 基于神经网络的曲面参数化方法及装置 |
Also Published As
Publication number | Publication date |
---|---|
CN109816789B (zh) | 2023-02-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107037881A (zh) | Gis与bim增强现实在管廊、地铁施工的互动演示方法及系统 | |
CN109360260A (zh) | 一种三角网格三维模型的切挖重构算法 | |
CN109816789A (zh) | 一种基于深度神经网络的三维模型参数化方法 | |
Kenwright | Free-form tetrahedron deformation | |
CN107132912A (zh) | 一种gis与bim增强现实在建筑规划的互动演示方法及系统 | |
CN104123747A (zh) | 多方式触控三维建模方法和系统 | |
Owen et al. | A template-based approach for parallel hexahedral two-refinement | |
Hay et al. | A systematic approach to reductions of type-Q ABS equations | |
Wu et al. | Fitting scattered data points with ball B-Spline curves using particle swarm optimization | |
Rypl et al. | Object oriented implementation of the T-spline based isogeometric analysis | |
CN103793552A (zh) | 一种软组织形变的局部质点弹簧模型的实时动态生成方法 | |
Wang et al. | An improving algorithm for generating real sense terrain and parameter analysis based on fractal | |
Zhao et al. | Injectivity conditions of rational Bézier surfaces | |
Pastor et al. | 3D wavelet-based multiresolution object representation | |
CN110322548A (zh) | 一种基于几何图像参数化的三维网格模型生成方法 | |
CN104268936B (zh) | 一种重心坐标的构建方法 | |
Wang et al. | A study of leaf modeling technology based on morphological features | |
Qi | Computer aided design simulation of 3D garden landscape based on virtual reality | |
CN104572581A (zh) | 复解析多项式的非线性ifs迭代函数系构造分形方法 | |
de Ruiter | Advances in computer graphics III | |
CN104143204A (zh) | 考虑拓扑结构的移动最小二乘二维角色变形方法 | |
CN102945559B (zh) | 叶片干枯褶皱的模拟方法 | |
Runions et al. | Ribbons: A representation for point clouds | |
CN106815799A (zh) | 一种基于混沌理论的自适应艺术图案生成方法 | |
CN107315914B (zh) | 一种多尺度嵌套的空间统计单元构建方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
TA01 | Transfer of patent application right |
Effective date of registration: 20210106 Address after: Room 902, 9 / F, building F, Tianhe Software Park, Tianhe District, Guangzhou 510000 Applicant after: GUANGDONG 3VJIA INFORMATION TECHNOLOGY Co.,Ltd. Address before: 230000 room 323, building E1, phase II, innovation industrial park, 2800 innovation Avenue, high tech Zone, Hefei City, Anhui Province Applicant before: HEFEI ABACI SCIENCE & TECHNOLOGY Co.,Ltd. |
|
TA01 | Transfer of patent application right | ||
GR01 | Patent grant | ||
GR01 | Patent grant |