CN108710735A - 一种实时交互的无网格软组织形变模拟方法 - Google Patents

一种实时交互的无网格软组织形变模拟方法 Download PDF

Info

Publication number
CN108710735A
CN108710735A CN201810431729.2A CN201810431729A CN108710735A CN 108710735 A CN108710735 A CN 108710735A CN 201810431729 A CN201810431729 A CN 201810431729A CN 108710735 A CN108710735 A CN 108710735A
Authority
CN
China
Prior art keywords
soft tissue
time
real
function
mesh free
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201810431729.2A
Other languages
English (en)
Inventor
张小瑞
俞雪峰
孙伟
宋爱国
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nanjing University of Information Science and Technology
Original Assignee
Nanjing University of Information Science and Technology
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nanjing University of Information Science and Technology filed Critical Nanjing University of Information Science and Technology
Priority to CN201810431729.2A priority Critical patent/CN108710735A/zh
Publication of CN108710735A publication Critical patent/CN108710735A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F30/00Computer-aided design [CAD]
    • G06F30/20Design optimisation, verification or simulation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2111/00Details relating to CAD techniques
    • G06F2111/10Numerical modelling
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2119/00Details relating to the type or aim of the analysis or the optimisation
    • G06F2119/06Power analysis or power optimisation

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Evolutionary Computation (AREA)
  • Geometry (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

本发明公开了一种实时交互的无网格软组织形变模拟方法,包括以下步骤:(1)将软组织的CT图像转换成OBJ文件以便获取顶点信息;(2)使用移动最小二乘法MLS来构建无网格形函数;(3)将Kelvin粘弹性纳入组织模型;(4)根据步骤(3)中计算的给定应力相对应的所有节点的位移,使用Marquardt算法来预先拟合软组织上的力和每个节点的位移之间的数学关系;(5)引入富集函数来模拟因切割等操作导致的组织表面不连续性裂缝。本发明在人体组织模型中纳入了Kelvin粘弹性力学模型,可更好表现软组织的粘弹性,提高模拟真实度,使用Marquardt算法预先拟合软组织上的力和每个节点的位移之间的数学关系,提高模拟实时性,同时引入权重函数富集来实现软组织的交互式模拟。

Description

一种实时交互的无网格软组织形变模拟方法
技术领域
本发明涉及软组织变形模拟方法,尤其涉及一种实时交互的无网格软组织形变模拟方法。
背景技术
拜师学艺是中华儿女从古至今学习技能的重要方式,医术学习也不例外,新手通过向有经验技术的老医者学习,提高自身的医学技术水平。尽管传统的收徒授艺为医学教育发展奠定了基础,但是这种培训方式周期长,代价大。随着计算机科学技术的发展,基于计算机的虚拟手术模拟逐渐解决了上述缺陷。
在虚拟手术模拟中人体软组织建模是其中的一项重要研究领域,人体软组织可以通过模型准确获得在外力作用下发生的形变,这有助于实现人与模型之间的实时交互。目前已经提出了许多模型来模拟人体软组织,常见的有:(1)弹簧质点模型,由于其结构简单和计算速度快常常被用于手术模拟,但该模型受到许多约束,迭代计算不稳定;(2)有限元模型,该模型精度高、适应性强,但是计算量大、复杂性高,并且很难实现实时模拟;(3)无网格模型,该模型只需要一组离散节点的信息,不需要预先处理网格数据进而不会出现网格失真或者纠缠等问题,并且相对于有限元模型而言更能够实现软组织实时模拟变形,但是有时模拟不够真实。因此开发一个具有良好实时性和真实性的人体软组织模型对于虚拟手术系统来说至关重要。
发明内容
发明目的:本发明目的是着力解决软组织形变模拟中实时性不强,真实性不足的问题,提出了一种实时交互的无网格软组织形变模拟方法。
技术方案:本发明包括以下步骤:
(1)将软组织的CT图像导入到Mimics软件中,并导出三维模型的STL文件,使用MeshLab软件将STL文件转换成OBJ文件以便获取顶点信息;
(2)使用移动最小二乘法MLS来构建无网格形函数;
(3)将Kelvin粘弹性纳入组织模型;
(4)根据步骤(3)中计算的给定应力相对应的所有节点的位移使用Marquardt算法来预先拟合软组织上的力和每个节点的位移之间的数学关系;
(5)引入富集函数来模拟因切割等操作导致的组织表面不连续性裂缝。
所述步骤(2)中的无网格形函数可以表示为:
ΦT(x)=(Φ1(x),Φ2(x),......Φn(x))=PT(x)A-1(x)B(x) (1)
其中,ΦT(x)表示由MLS构建的无网格形函数,Φi(x)(i=1,2,…,n)表示点xi的形函数,PT(x)是多项式基函数矩阵P(x)的转置,A-1(x)是第一加权瞬时矩阵A(x)的逆形式,B(x)是第二加权瞬时矩阵。
所述步骤(3)中的Kelvin模型可以表示为:
其中,σ、η、K2K1、ε和εd分别表示应力、阻尼器、模型中第二个弹簧的刚度、应力的时间导数、模型中第一个弹簧的刚度、应变、应变的时间导数。
所述步骤(4)中的力在x,y,z三个方向的分力和每个节点的位移之间的数学关系为:
其中是对应三个分量的系统参数,λx,λy,λz是由交叉验证确定的系统自变量。
所述步骤(5)中的富集函数可以表示为:
其中,h(x,y)表示从0到1平滑过渡的富集函数,表示二维距离函数d2(x,y)对法线坐标s的偏导数。
有益效果:本发明具有良好的实时性和真实性,在人体组织模型中纳入了Kelvin粘弹性力学模型,可更好表现软组织的粘弹性,提高模拟真实度,使用Marquardt算法预先拟合软组织上的力和每个节点的位移之间的数学关系,提高模拟实时性,同时引入权重函数富集来模拟因切割等操作导致的组织表面不连续性裂缝,实现软组织的交互式模拟。
附图说明
图1为本发明的流程示意图;
图2为本发明的Kelvin粘弹性模型示意图;
图3为本发明的具有不连续性裂缝的软组织分析域示意图。
具体实施方式
下面结合附图对本发明作进一步说明。
如图1所示,本发明包括以下步骤:
(1)将软组织的CT图像导入到软件Mimics中并导出三维模型的STL文件,使用MeshLab软件将STL文件转换成OBJ文件以便获取顶点信息。
(2)由于移动最小二乘法(MLS)收敛速度快,故使用MLS来构建无网格形函数,具体如下:
ΦT(x)=(Φ1(x),Φ2(x),......Φn(x))=PT(x)A-1(x)B(x) (1)
其中,ΦT(x)表示由MLS构建的无网格形函数,Φi(x)(i=1,2,…,n)表示点xi的形函数,PT(x)是多项式基函数矩阵P(x)的转置,A-1(x)是第一加权瞬时矩阵A(x)的逆形式,B(x)是第二加权瞬时矩阵,具体如下:
A(x)=PT(x)W(x)P(x) (2)
B(x)=PT(x)W(x) (3)
wi(x)=w(x-xi) (5)
其中,W(x)是加权函数矩阵,wi(x)(i=1,2,…,n)表示第i个节点的权重函数,
其中,P(x)是多项式基函数矩阵,pj(xi)是多项式基函数,j=1,2,…,m,i=1,2,…,n,m为P(x)列数,n为P(x)行数,fh(x)是场函数,fi是在节点xi处的节点场值。
(3)为了提高模拟的真实度,将Kelvin粘弹性纳入组织模型,Kelvin模型是一个标准的线性模型,模型中的弹簧表示软组织的线弹性特点,阻尼器表示软组织结构变化时的阻尼特性,具体如下:
Kelvin模型的本构方程如下:
其中,σ、η、K2K1、ε和εd分别表示应力、阻尼器、模型中第二个弹簧的刚度、应力的时间导数、模型中第一个弹簧的刚度、应变、应变的时间导数。在Kelvin粘弹性模型中,软组织在应力加载过程中的松弛本构关系可表示为:
其中,表示材料的松弛响应,t表示时间变量,E(t-τ)表示松弛模量,τ表示阶跃应力加载时间。将变形模拟时间T划分为n个时间片t1,t2,…,tn,Δt=T/n称为一个时间增量,从tn到tn+1的时间段,位移,应力,应变的增量分别为Δun,Δσn,Δεn。Kelvin模型在时间tn到tn+1的应力增量可表示如下:
Δσn=EkΔεn0,n (10)
其中,Ek是非线性松弛系数,σ0,n是初始应力。
在tn+1时,位移,应力,应变分别增变为:
un+1=un+Δun (11)
σn+1=σn+Δσn (12)
εn+1=εn+Δεn (13)
同时,应变与应力的关系可表示为:
εn+1=Lun+1+LΔun (14)
其中,L表示偏微分算子。由于MLS不显示Kroneckerδ函数的性质,所以引用了EFG的弱形式:
其中,Ω表示分析域,δ表示Kronecker函数值,u表示位移,D表示弹性常数矩阵,uT表示位移矢量,b表示物理矢量,Γt表示自然边界条件,是对应的给予表面的力,Γu表示本质边界条件,表示对应于本质边界条件的位移,α是惩罚因子。
将公式(10)-(14)代入公式(15)可得到粘弹性无网格求解方程的增量形式:
其中,Kn表示粘弹性刚度矩阵,表示由EFG中形函数以及形函数导数确定的惩罚刚度矩阵,ΔRn表示不平衡力矢量。给定相应的材料参数和时间步长,可以根据公式(16)计算出Δun,最后计算每个点新的位移,应力和应变。
(4)为了提高模拟虚拟手术过程中变形的实时性,根据步骤(3)中计算的给定应力相对应所有节点的位移,使用Marquardt算法来预先拟合软组织上的力和每个节点的位移之间的数学关系,当软组织受到压力时,通过调用该拟合关系生成拟合曲面可以立即显示它们的变形,具体如下:
为了表示施加力与变形表面之间的关系,建立了施加力σ与受力节点ο之间的拟合关系,假设有n个力σ被施加到节点上,将σ在三个方向上分解为σx、σy和σz,并且在这三个方向上受力节点ο处相应的位移分量为Δux,Δuy,Δuz,各个分力相应的节点位移函数为:
其中是对应三个分量的系统参数,λx,λy,λz是由交叉验证确定的系统自变量。
当一个节点受到力的作用时,其他点也会改变位移,导致形变发生,因此,建立受力节点位移与其他节点位移之间的关系来表示变形表面,在分力σz的作用下,为了简化,假设表面节点具有相同的z坐标,诱导表面函数为:
其中,Δx,Δy,Δz表示在分力σz作用下其他点在三个方向上的诱导位移, 表示三个表面变形函数参数,a1,a2,a3,b1,b2,b3是通过交叉验证确定的表面变形顺序,同理可以求得分力σx和σy的诱导表面函数。
(5)人体软组织用于例如切割等交互式手术模拟是必不可少的,故引入权重函数富集来模拟因切割等操作导致的组织表面不连续性裂缝,其关键思想是用富集函数乘以相应节点的权重函数来改变其形函数。为了降低计算成本,只对节点距离小于它们的膨胀参数ρi的节点重新计算形函数,其他节点形函数保持不变。具体如下:
其中,h(x,y)是从0到1平滑过渡的富集函数,表示二维距离函数d2(x,y)对法线坐标s的偏导数,表示有符号距离函数的正部分,ζ是切割局部坐标系的局部坐标,ds(ζ)是具有端点(ζ12)的一维带符号距离函数。

Claims (5)

1.一种实时交互的无网格软组织形变模拟方法,其特征在于,包括以下步骤:
(1)将软组织的CT图像导入到Mimics软件中,并导出三维模型的STL文件,使用MeshLab软件将STL文件转换成OBJ文件以便获取顶点信息;
(2)使用移动最小二乘法MLS来构建无网格形函数;
(3)将Kelvin粘弹性纳入组织模型;
(4)根据步骤(3)中计算的给定应力相对应的所有节点的位移,使用Marquardt算法来预先拟合软组织上的力和每个节点的位移之间的数学关系;
(5)引入富集函数来模拟因切割等操作导致的组织表面不连续性裂缝。
2.根据权利要求1所述的一种实时交互的无网格软组织形变模拟方法,其特征在于,所述步骤(2)中的无网格形函数可以表示为:
ΦT(x)=(Φ1(x),Φ2(x),......Φn(x))=PT(x)A-1(x)B(x) (1)
其中,ΦT(x)表示由MLS构建的无网格形函数,Φi(x)(i=1,2,…,n)表示点xi的形函数,PT(x)是多项式基函数矩阵P(x)的转置,A-1(x)是第一加权瞬时矩阵A(x)的逆形式,B(x)是第二加权瞬时矩阵。
3.根据权利要求1所述的一种实时交互的无网格软组织形变模拟方法,其特征在于,所述步骤(3)中的Kelvin模型可以表示为:
其中,σ、η、K2K1、ε和εd分别表示应力、阻尼器、模型中第二个弹簧的刚度、应力的时间导数、模型中第一个弹簧的刚度、应变、应变的时间导数。
4.根据权利要求1所述的一种实时交互的无网格软组织形变模拟方法,其特征在于,所述步骤(4)中的力在x,y,z三个方向的分力和每个节点的位移之间的数学关系为:
其中是对应三个分量的系统参数,λx,λy,λz是由交叉验证确定的系统自变量。
5.根据权利要求1所述的一种实时交互的无网格软组织形变模拟方法,其特征在于,所述步骤(5)中的富集函数可以表示为:
其中,h(x,y)表示从0到1平滑过渡的富集函数,表示二维距离函数d2(x,y)对法线坐标s的偏导数。
CN201810431729.2A 2018-05-08 2018-05-08 一种实时交互的无网格软组织形变模拟方法 Pending CN108710735A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810431729.2A CN108710735A (zh) 2018-05-08 2018-05-08 一种实时交互的无网格软组织形变模拟方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810431729.2A CN108710735A (zh) 2018-05-08 2018-05-08 一种实时交互的无网格软组织形变模拟方法

Publications (1)

Publication Number Publication Date
CN108710735A true CN108710735A (zh) 2018-10-26

Family

ID=63868318

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810431729.2A Pending CN108710735A (zh) 2018-05-08 2018-05-08 一种实时交互的无网格软组织形变模拟方法

Country Status (1)

Country Link
CN (1) CN108710735A (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109598799A (zh) * 2018-11-30 2019-04-09 南京信息工程大学 一种基于CycleGAN的虚拟切割方法
CN110096818A (zh) * 2019-05-06 2019-08-06 南京信息工程大学 一种软组织监督变形算法
CN113034532A (zh) * 2021-03-02 2021-06-25 四川大学 一种基于无网格模型的整形手术术后软组织形变预测方法
CN113343513A (zh) * 2021-05-11 2021-09-03 南京信息工程大学 一种用于模拟软组织形变和路径切割的方法及装置

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102262699A (zh) * 2011-07-27 2011-11-30 华北水利水电学院 基于无网格伽辽金与质点弹簧耦合的软组织形变仿真方法
US20170080166A1 (en) * 2015-09-18 2017-03-23 Actuated Medical, lnc. Device and System for Insertion of Penetrating Member

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102262699A (zh) * 2011-07-27 2011-11-30 华北水利水电学院 基于无网格伽辽金与质点弹簧耦合的软组织形变仿真方法
US20170080166A1 (en) * 2015-09-18 2017-03-23 Actuated Medical, lnc. Device and System for Insertion of Penetrating Member

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
A Z J 等: "Real-time deformation of human soft tissues: A radial basis meshless 3D model based on Marquardt"s algorithm", 《COMPUTER METHODS AND PROGRAMS IN BIOMEDICINE》 *
RIFAT ARAS 等: "An analytic meshless enrichment function for handling discontinuities in interactive surgical simulation", 《ADVANCES IN ENGINEERING SOFTWARE》 *
毛磊: "基于无网格方法的软组织形变模型", 《中国优秀硕士学位论文全文数据库(信息科技辑)》 *

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109598799A (zh) * 2018-11-30 2019-04-09 南京信息工程大学 一种基于CycleGAN的虚拟切割方法
CN110096818A (zh) * 2019-05-06 2019-08-06 南京信息工程大学 一种软组织监督变形算法
CN110096818B (zh) * 2019-05-06 2023-07-25 南京信息工程大学 一种软组织监督变形算法
CN113034532A (zh) * 2021-03-02 2021-06-25 四川大学 一种基于无网格模型的整形手术术后软组织形变预测方法
CN113343513A (zh) * 2021-05-11 2021-09-03 南京信息工程大学 一种用于模拟软组织形变和路径切割的方法及装置

Similar Documents

Publication Publication Date Title
CN108710735A (zh) 一种实时交互的无网格软组织形变模拟方法
Zhang et al. An improved PSO algorithm for parameter identification of nonlinear dynamic hysteretic models
Teran et al. Finite volume methods for the simulation of skeletal muscle
CN105184030B (zh) 基于弯扭复合弹簧质点模型柔性线缆位姿模拟方法及装置
Xu et al. Pose-space subspace dynamics
Shi et al. Example-based dynamic skinning in real time
CN101496028A (zh) 使用几何推动式模型模拟可变形物体的方法
CN110289104B (zh) 软组织按压和形变恢复的模拟方法
CN103729555A (zh) 一种模拟血流与血管壁作用的方法和装置
CN108983605A (zh) 一种基于深度强化学习进行流体导向的刚体控制的方法
CN111488670B (zh) 一种非线性的质点弹簧软组织形变仿真方法
Hou et al. A new deformation model of brain tissues for neurosurgical simulation
Hiley et al. Optimization of backward giant circle technique on the asymmetric bars
CN106528993A (zh) 基于由碟形弹簧片构成的组合弹簧虚拟模型建模方法
CN108536936A (zh) 一种多重优化的无网格软组织形变模拟方法
CN106202738B (zh) 基于超弹性固体相特性关节软骨两相模型的建立方法
Wang et al. Adjustable Constrained Soft‐Tissue Dynamics
Abdulali et al. Data-driven haptic modeling of plastic flow via inverse reinforcement learning
El-Said et al. Interactive soft tissue modelling for virtual reality surgery simulation and planning
US20120223953A1 (en) Kinematic Engine for Adaptive Locomotive Control in Computer Simulations
CN108877944B (zh) 基于纳入开尔文粘弹性模型的网格模型的虚拟切割方法
Liu et al. Modelling and simulation of vascular tissue based on finite element method
CN103699741B (zh) 一种增强模拟柔性体可旋转变形的发条弹簧模型
CN103714205B (zh) 一种模拟柔性体可旋转变形的发条弹簧模型
Yang et al. Real-time deformations simulation of soft tissue by combining mass-spring model with pressure based method

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information

Address after: 210044 No. 219 Ningliu Road, Jiangbei New District, Nanjing City, Jiangsu Province

Applicant after: Nanjing University of Information Science and Technology

Address before: 211500 Yuting Square, 59 Wangqiao Road, Liuhe District, Nanjing City, Jiangsu Province

Applicant before: Nanjing University of Information Science and Technology

CB02 Change of applicant information
RJ01 Rejection of invention patent application after publication

Application publication date: 20181026

RJ01 Rejection of invention patent application after publication