CN109949267B - 一种多材料断层数据到实体的快速三维重构方法 - Google Patents
一种多材料断层数据到实体的快速三维重构方法 Download PDFInfo
- Publication number
- CN109949267B CN109949267B CN201910054189.5A CN201910054189A CN109949267B CN 109949267 B CN109949267 B CN 109949267B CN 201910054189 A CN201910054189 A CN 201910054189A CN 109949267 B CN109949267 B CN 109949267B
- Authority
- CN
- China
- Prior art keywords
- distribution
- entity
- slice
- data
- phi
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 239000000463 material Substances 0.000 title claims abstract description 66
- 238000000034 method Methods 0.000 title claims abstract description 58
- 238000009826 distribution Methods 0.000 claims abstract description 41
- 238000004422 calculation algorithm Methods 0.000 claims abstract description 16
- 239000007787 solid Substances 0.000 claims abstract description 16
- 238000005457 optimization Methods 0.000 claims abstract description 13
- 238000001228 spectrum Methods 0.000 claims abstract description 7
- 238000003709 image segmentation Methods 0.000 claims abstract description 6
- 238000005516 engineering process Methods 0.000 claims abstract description 5
- 238000005315 distribution function Methods 0.000 claims description 5
- 239000003086 colorant Substances 0.000 claims description 4
- 238000006243 chemical reaction Methods 0.000 claims description 2
- 238000011426 transformation method Methods 0.000 abstract description 2
- 210000000056 organ Anatomy 0.000 description 10
- 238000000926 separation method Methods 0.000 description 5
- 210000000038 chest Anatomy 0.000 description 4
- 230000018109 developmental process Effects 0.000 description 4
- 238000004364 calculation method Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 210000000115 thoracic cavity Anatomy 0.000 description 2
- 238000010146 3D printing Methods 0.000 description 1
- 210000003484 anatomy Anatomy 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000002316 cosmetic surgery Methods 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 238000003745 diagnosis Methods 0.000 description 1
- 238000005498 polishing Methods 0.000 description 1
- 238000005215 recombination Methods 0.000 description 1
- 238000002604 ultrasonography Methods 0.000 description 1
Images
Landscapes
- Apparatus For Radiation Diagnosis (AREA)
- Image Analysis (AREA)
- Image Processing (AREA)
Abstract
一种多材料断层数据到实体的快速三维重构方法,对断层数据采用图像分割技术对每个断层数据进行分割,将分割后的子区域进行轮廓填充形成切片数据,不同的子区域对应实体上不同的材料;再对未知区域使用插值法进行填充,得到一个模糊的三维实体模型;然后对其进行形状或拓扑优化。形状或拓扑优化时的数值方法求解采用稳定分裂算法和快速傅里叶谱变换方法;根据求解得到的第i种材料的分布对插值后的模糊的三维实体模型进行优化,完成三维重构。该将切片数据对象由二元材料扩展到了多材料。该方法简单易行,高效稳健,基本上不损失原始切片数据信息,并且不会发生自相交,得到相对平滑的3D实体。
Description
技术领域
本发明属于3D打印技术领域,涉及一种多材料断层数据到实体的快速三维重构方法,本方法是一种根据切片信息对多材料连续实体进行无重叠区域、无人工缝隙、无不匹配接口的高效稳健的重构方法。
背景技术
3D切片重构技术是指基于一系列二维切片数据获得三维实体的技术。首先从工业CT图像或医疗CT图像中获取断层数据,然后使用图像分割技术对每个断层数据进行分割,将分割后的子区域进行轮廓填充,形成切片数据,不同的子区域对应实体上不同的材料。填充后的切片数据就是3D重构前需要的原始数据。
Chen等人提出了一种基于形态学的3D医学图像插值方法;Lin等人从横截面出发,基于样条理论,弹性插值算法和表面一致性定理提出了一套3D重构算法;Jones和Chen使用基础几何性质,对一些轮廓切片进行平面重构;Memari和Boissonnat使用受横截面曲率约束的三角剖分方法进行;也有学者对于高维图像提出基于形状的内插算法;Liu从非平行网络角度提出表面重构方法;Deng等人基于变分隐函数对freehand 3D超声进行表面重建;Sharma和Agarwal则使用水平集函数根据一组未经组织的截面进行3D表面重建。
如上重建方法均可以处理一个区域或多个独立的区域的重建,但不能处理多个连通区域,所以使用上述方法对连通区域进行处理时会导致彼此重叠的现象发生,从而导致实体不光滑。
发明内容
针对重构中出现的重叠问题,本发明的目的在于提出一种多材料断层数据到实体的快速三维重构方法,使重建出的实体无重叠区域。该方法还有另一个应用,当物体截面中的多结构彼此紧靠时,使用该重建方法可以将其分割成多个独立结构。
为实现上述目的,本发明采用如下的技术方案:
一种多材料断层数据到实体的快速三维重构方法,包括以下步骤:
1)数据的获取与处理;
首先针对断层数据采用图像分割技术对每个断层数据进行分割,将分割后的子区域进行轮廓填充,形成切片数据,切片数据的不同的子区域对应实体上不同的材料;
2)基于步骤1)得到的切片数据,进行填充,得到一个模糊的三维实体模型;
3)假设实体由N种材料构成,在切片上用N种不同的颜色标记不同的材料,第i种材料的分布用φi表示,从而得到第i种材料的分布φi的演化方程;
4)形状或拓扑优化;
首先采用线性稳定分裂算法将演化方程转换,然后将转换后的方程中的各项采用傅里叶谱方法进行变换整理,再进行还原,根据切片上第i种材料的分布进行拓扑优化;当拓扑形状不变时,所得的第i种材料的分布为重建实体的分布函数;根据第i种材料的分布对插值后的模糊的三维实体模型进行优化,完成三维重构。
本发明进一步的改进在于,步骤1)中,从工业CT图像或医疗CT图像中获取断层数据。
本发明进一步的改进在于,步骤2)中,采用插值方法进行填充。
本发明进一步的改进在于,步骤3)中,演化方程如下:
本发明进一步的改进在于,步骤3)中,如果切片上某处X属于第i种材料,那么第i种材料的分布φi等于1,若不属于第i种材料,那么第i种材料的分布φi为0。
本发明进一步的改进在于,步骤3)中,如果X在给定的已知切片上,取λi=λ0;否则取λi=0,其中λ0为一个正数。
本发明进一步的改进在于,步骤4)的具体过程为:
首先采用线性稳定分裂算法将演化方程转换为:
对上式各项使用傅里叶谱方法进行变换整理后得到:
然后使用下式对第i种材料的分布φi进行还原:
根据第i种材料的分布φi的分布进行拓扑优化演化,当拓扑形状不变的时候,所得的φi即为重建实体的分布函数;根据第i种材料的分布φi的分布对插值后的模糊的三维实体模型进行优化,完成三维重构。
与现有技术相比,本发明具有以下几点有益效果:
(1)由于多分量CH方程的使用,并在方程中加入拉格朗日乘子,该方法在多材料3D重建时明显地达到了修补缝隙或无重叠的效果。
(2)由于多分量CH方程的使用,并在方程中加入了保真项,该方法在多材料3D重建时明显地提高了实体重构的精度。
(3)本发明使用线性稳定分裂算法以及傅里叶谱变换方法将演化方程转换,该算法有效稳健且可以快速收敛,根据计算结果可以实现较精确的3D重构。
(4)本发明是基于工业或医疗CT图像的断层数据信息,通过拓扑优化,将未知区域的实体信息进行优化填充,从而实现三维实体的重建。本发明3D重构方法有着广泛的应用背景,如治疗规划、整形外科、解剖学教学、医学诊断系统、虚拟手术系统等。
附图说明
图1是通过切片数据进行实体重建的过程:其中,(a)工业或医疗CT图像(即断层数据),(b)断层数据分割后并进行轮廓填充形成切片数据,(c)基于已知切片信息实现3D实体重构。
图2是针对人体胸腔内器官的多组分3D重建实体:其中,(a)根据切片信息经过插值计算获取模糊的3D实体重构,(b)对模糊3D实体使用本发明进行优化获取的3D实体。
图3是对两个重叠圆进行分离演化过程,其中,(a)为t=0时的分离状态,(b)为t=1000时的分离状态,(c)为t=2000时的分离状态,(d)为t=3000时的分离状态;灰色区域代表交替区域。
具体实施方式
下面结合附图对本发明进行详细描述。
本发明针对3D重构过程中出现的重叠、缝隙、不匹配接口的问题,提出了一种有效且稳定的三维多组份实体重建算法。本算法利用Cahn-Hilliard方程的磨光和守恒性质,创新性地使用了多分量Cahn-Hilliard方程进行重建。
首先本发明的主要符号定义如表1所示:
表1本发明中主要符号约定
本发明基于多组份Cahn-Hilliard方程进行三维多材料实体重建,主要过程如下:
1)数据的获取与处理。针对工业或医疗CT图像这些断层数据(图1(a)),采用图像分割技术对每个断层数据进行分割,将分割后的子区域进行轮廓填充形成切片数据(图1(b)),不同的子区域对应实体上不同的材料。
2)基于步骤1)得到的切片数据,使用插值方法进行填充可以得到一个模糊的三维实体模型。
3)假设实体由N种材料构成,在切片上用N种不同的颜色标记不同的材料,第i种材料的分布用φi表示,它是关于空间X(x,y,z)和时间t的变量。从而得到第i种材料的分布φi的演化方程;
如果某处X在给定的已知切片上,取λi=λ0;否则取λi=0,其中λ0为一个正数。
第i种材料的分布φi使用如下方程进行演化:
式中f(φi)=φi(φi-0.5)(φi-1),ψi为材料在已知切片的分布函数。βi为拉格朗日乘子,其作用为避免发生材料重叠现象,参见图3,图3(a)、图3(b)、图3(c)与图3(d)展示了在重叠区域内,采用本方法演化后得到无交替区域的过程。此外,保真项λi(ψi-φi)保证了已知切片数据在演化过程中的不变性。
4)形状或拓扑优化。首先使用线性稳定分裂算法将步骤3)中的得到的演化方程转换为:
对上式各项使用傅里叶谱方法进行变换整理后得到:
根据如上φi的分布进行拓扑优化演化,当拓扑形状不变的时候,所得的φi即为重建实体的分布函数,如图1(c)。根据上述φi的分布对插值后的模糊的三维实体模型进行优化,完成三维重构。
下面为一个具体实施例。
实施例1
1)数据的获取与处理。以人体胸腔内器官为例,针对医疗CT图像断层数据,采用图像分割技术对每个断层数据进行分割,将分割后的子区域进行轮廓填充形成切片,不同的子区域对应着实体上不同的器官。φ=(φ1,φ2,...,φN)表示胸腔内每点上各个器官的分布,它是关于空间X(x,y,z)和时间t的变量,并假设有N种器官,分别被N种不同的颜色标记。第i种器官的分布用φi表示,空间中每一点的组分之和为1,即
2)使用插值优化方法对切片间未知部分进行填充,得到模糊的胸腔内各器官实体(图2(a)),然后进行步骤3)。
3)本发明通过Cahn-Hilliard方程进行分布的演化。CH方程是通过能量E(φ)随时间递减得到的。
上述方程中βi为拉格朗日乘子,其作用是为了使胸腔内每点上各个器官的分布φi在空间和时间的演化过程中始终满足约束条件该条件可以避免重构时重叠、缝隙、接口不匹配等问题的出现。图3展示了在重叠区域内,采用本方法演化后得到无交替区域的过程。
为了确保给定切片数据在演化过程中的不变性,在上述CH方程中加入保真项λi(ψi-φi)得到修正的多分量CH方程:
最终的演化方程为:
4)形状或拓扑优化。
下面介绍本发明使用的快速稳定精确的求解方法。
假设三维空间R3上Ω=(0,Lx)×(0,Ly)×(0,Lz)有Nl个Nx×Ny像素点的切片,Nx、Ny均为偶数;令Nz=Nl+(Nl-1)I,I为两个连续切片数据之间插入的切片数目,如果Nz=Nl+(Nl-1)I是奇数,就令Nz=(Nl-1)(I+1),所以Nz为偶数;设 1≤m≤Nx,1≤n≤Ny,1≤k≤Nz;下面记号表示φi(xm,yn,zk,sΔt),Δt表示时间步长,的离散cosine变换记为
对修正的多分量CH方程使用线性稳定分裂算法,得到下式:
再进行离散cosine变换:
最后,得到方程的简化求解形式:
再将上述cosine变换还原:
根据上述φ的分布对插值后的胸腔内器官进行优化,得到如图2(b)所示的人体胸腔。
该方法解决了多材料重建方法中出现的重叠、缝隙、不匹配接口的问题,并且切片数据对象由二元材料扩展到了多材料。首次使用多分量CH方程进行3D实体的构建,对多分量CH方程添加拉格朗日乘子实现无自相交的3D重建,并在多分量CH方程中加入了保真项使所得结果更接近于真实解。数值方法使用了稳定分裂算法和快速傅里叶谱变换。该方法允许使用较大的时间步长并且能够快速的对改进的多分量CH方程进行求解。该算法简单易行,高效稳健,基本上不损失原始切片数据,并且不会发生自相交,得到相对平滑的3D实体。
Claims (5)
1.一种多材料断层数据到实体的快速三维重构方法,其特征在于,包括以下步骤:
1)数据的获取与处理;
首先针对断层数据采用图像分割技术对每个断层数据进行分割,将分割后的子区域进行轮廓填充,形成切片数据,切片数据的不同的子区域对应实体上不同的材料;
2)基于步骤1)得到的切片数据,进行填充,得到一个模糊的三维实体模型;
3)假设实体由N种材料构成,在切片上用N种不同的颜色标记不同的材料,第i种材料的分布用φi表示,从而得到第i种材料的分布φi的演化方程;其中,演化方程如下:
式中f(φi)=φi(φi-0.5)(φi-1),ψi为材料在已知切片的分布函数,βi为拉格朗日乘子,λi(ψi-φi)为保真项;如果切片上某处X属于第i种材料,那么第i种材料的分布φi等于1,若不属于第i种材料,那么第i种材料的分布φi为0;
4)形状或拓扑优化;
首先采用线性稳定分裂算法将演化方程转换,然后将转换后的方程中的各项采用傅里叶谱方法进行变换整理,再进行还原,根据切片上第i种材料的分布进行拓扑优化;当拓扑形状不变时,所得的第i种材料的分布为重建实体的分布函数;根据第i种材料的分布对插值后的模糊的三维实体模型进行优化,完成三维重构;具体过程为:
首先采用线性稳定分裂算法将演化方程转换为:
对上式各项使用傅里叶谱方法进行变换整理后得到:
然后使用下式对第i种材料的分布φi进行还原:
根据第i种材料的分布φi的分布进行拓扑优化演化,当拓扑形状不变的时候,所得的φi即为重建实体的分布函数;根据第i种材料的分布φi的分布对插值后的模糊的三维实体模型进行优化,完成三维重构。
2.根据权利要求1所述的一种多材料断层数据到实体的快速三维重构方法,其特征在于,步骤1)中,从工业CT图像或医疗CT图像中获取断层数据。
3.根据权利要求1所述的一种多材料断层数据到实体的快速三维重构方法,其特征在于,步骤2)中,采用插值方法进行填充。
5.根据权利要求1所述的一种多材料断层数据到实体的快速三维重构方法,其特征在于,步骤3)中,如果某处X在给定的已知切片上,取λi=λ0;否则取λi=0,其中λ0为一个正数。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910054189.5A CN109949267B (zh) | 2019-01-21 | 2019-01-21 | 一种多材料断层数据到实体的快速三维重构方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910054189.5A CN109949267B (zh) | 2019-01-21 | 2019-01-21 | 一种多材料断层数据到实体的快速三维重构方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN109949267A CN109949267A (zh) | 2019-06-28 |
CN109949267B true CN109949267B (zh) | 2021-01-29 |
Family
ID=67006708
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910054189.5A Active CN109949267B (zh) | 2019-01-21 | 2019-01-21 | 一种多材料断层数据到实体的快速三维重构方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN109949267B (zh) |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1691068A (zh) * | 2004-04-20 | 2005-11-02 | 三星电子株式会社 | 用于重构三维图形数据的装置和方法 |
CN101495038A (zh) * | 2006-08-03 | 2009-07-29 | 加州大学董事会 | 层析中剂量减少和图像增强的迭代方法 |
EP1139872B1 (en) * | 1998-09-14 | 2009-08-19 | The Board of Trustees of The Leland Stanford Junior University | Assessing the condition of a joint and preventing damage |
CN105528494A (zh) * | 2015-12-29 | 2016-04-27 | 上海大学 | 基于三维元胞自动机的轻量化模型生成及优化方法 |
CN105625720A (zh) * | 2016-01-05 | 2016-06-01 | 江苏敦超电子科技有限公司 | 多材料建筑三维打印成型方法 |
CN106373168A (zh) * | 2016-11-24 | 2017-02-01 | 北京三体高创科技有限公司 | 一种基于医疗图像的分割与三维重建方法、3d打印系统 |
CN107251094A (zh) * | 2014-08-16 | 2017-10-13 | Fei公司 | 用于材料特性描述的断层图像重建 |
-
2019
- 2019-01-21 CN CN201910054189.5A patent/CN109949267B/zh active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP1139872B1 (en) * | 1998-09-14 | 2009-08-19 | The Board of Trustees of The Leland Stanford Junior University | Assessing the condition of a joint and preventing damage |
CN1691068A (zh) * | 2004-04-20 | 2005-11-02 | 三星电子株式会社 | 用于重构三维图形数据的装置和方法 |
CN101495038A (zh) * | 2006-08-03 | 2009-07-29 | 加州大学董事会 | 层析中剂量减少和图像增强的迭代方法 |
CN107251094A (zh) * | 2014-08-16 | 2017-10-13 | Fei公司 | 用于材料特性描述的断层图像重建 |
CN105528494A (zh) * | 2015-12-29 | 2016-04-27 | 上海大学 | 基于三维元胞自动机的轻量化模型生成及优化方法 |
CN105625720A (zh) * | 2016-01-05 | 2016-06-01 | 江苏敦超电子科技有限公司 | 多材料建筑三维打印成型方法 |
CN106373168A (zh) * | 2016-11-24 | 2017-02-01 | 北京三体高创科技有限公司 | 一种基于医疗图像的分割与三维重建方法、3d打印系统 |
Non-Patent Citations (3)
Title |
---|
Modeling and predicting microstructure evolution in lead/tin alloy via correlation functions and stochastic material reconstruction;Yang Jiao et al;《Acta Materialia》;20130531;第3370-3377页 * |
Multi-component Cahn–Hilliard system with different boundary conditions in complex domains;Yibao Li et al;《Journal of Computational Physics》;20160626;第1-16页 * |
Three-dimensional volume reconstruction from slice data using phase-field models;Yibao Li et al;《Computer Vision and Image Understanding》;20150212;第115-124页 * |
Also Published As
Publication number | Publication date |
---|---|
CN109949267A (zh) | 2019-06-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
Wang et al. | A framework for 3D model reconstruction in reverse engineering | |
Kalvin et al. | Constructing topologically connected surfaces for the comprehensive analysis of 3-D medical structures | |
Pouch et al. | Semi-automated mitral valve morphometry and computational stress analysis using 3D ultrasound | |
CN104318554B (zh) | 基于三角剖分优化匹配的医学影像刚性配准方法 | |
CN106600683A (zh) | 一种面向骨骼ct序列图像的网格模型自适应重建方法 | |
JP2017500102A (ja) | 解剖学的構造のモデルベースのセグメンテーション | |
Grove et al. | From CT to NURBS: contour fitting with B-spline curves | |
WO2016173260A1 (zh) | 基于广义圆柱体的三维模型分割方法及装置 | |
Dutailly et al. | 3D surface reconstruction using HMH algorithm | |
Chang et al. | Reconstruction of 3D medical images: A nonlinear interpolation technique for reconstruction of 3D medical images | |
Qiu et al. | An efficient and collision-free hole-filling algorithm for orthodontics | |
CN105957154B (zh) | 一种数据驱动的三维模型编辑方法及系统 | |
CN109949267B (zh) | 一种多材料断层数据到实体的快速三维重构方法 | |
CN111369662A (zh) | Ct图像中血管的三维模型重建方法及系统 | |
Liu et al. | Integrating cross-sectional imaging based reverse engineering with rapid prototyping | |
Yang | Matrix weighted rational curves and surfaces | |
Ameddah et al. | Bio-CAD reverse engineering of free-form surfaces by planar contours | |
Patel et al. | 3D modeling and rendering of 2D medical image | |
Pouch et al. | Automated meshing of anatomical shapes for deformable medial modeling: Application to the placenta in 3d ultrasound | |
Mandaliana et al. | 3D visualization and reconstruction of lung cancer images using marching cubes algorithm | |
Liu et al. | Optimization of reconstruction of 2D medical images based on computer 3D reconstruction technology | |
CN113160417A (zh) | 一种基于泌尿系统的多器官三维重建控制方法 | |
Mu et al. | Construction of anatomically accurate finite element models of the human hand and a rat kidney | |
Khelifa et al. | Three dimensional modeling of the left ventricle of the heart using spherical harmonic analysis | |
Durikovic et al. | Shape-based calculation and visualisation of general cross-sections through biological data |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |