CN111329586B - 基于超声定位带的体内器械定位跟踪系统 - Google Patents
基于超声定位带的体内器械定位跟踪系统 Download PDFInfo
- Publication number
- CN111329586B CN111329586B CN202010095615.2A CN202010095615A CN111329586B CN 111329586 B CN111329586 B CN 111329586B CN 202010095615 A CN202010095615 A CN 202010095615A CN 111329586 B CN111329586 B CN 111329586B
- Authority
- CN
- China
- Prior art keywords
- ultrasonic
- instrument
- vivo
- positioning
- module
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000001727 in vivo Methods 0.000 title claims abstract description 94
- 238000013507 mapping Methods 0.000 claims abstract description 30
- 238000009877 rendering Methods 0.000 claims abstract description 21
- 238000004364 calculation method Methods 0.000 claims abstract description 20
- 238000013461 design Methods 0.000 claims abstract description 13
- 238000005516 engineering process Methods 0.000 claims abstract description 8
- 238000010276 construction Methods 0.000 claims abstract description 4
- 239000000463 material Substances 0.000 claims description 44
- 238000000354 decomposition reaction Methods 0.000 claims description 34
- 239000000523 sample Substances 0.000 claims description 30
- 239000000843 powder Substances 0.000 claims description 18
- 238000000034 method Methods 0.000 claims description 15
- 238000010586 diagram Methods 0.000 claims description 14
- 239000002184 metal Substances 0.000 claims description 12
- 238000001914 filtration Methods 0.000 claims description 11
- 238000009826 distribution Methods 0.000 claims description 8
- 238000000605 extraction Methods 0.000 claims description 8
- 238000005457 optimization Methods 0.000 claims description 8
- 238000000338 in vitro Methods 0.000 claims description 7
- 239000007788 liquid Substances 0.000 claims description 7
- 239000011159 matrix material Substances 0.000 claims description 6
- 230000009466 transformation Effects 0.000 claims description 6
- 239000010410 layer Substances 0.000 claims description 4
- 239000007769 metal material Substances 0.000 claims description 4
- 239000002245 particle Substances 0.000 claims description 4
- KXGFMDJXCMQABM-UHFFFAOYSA-N 2-methoxy-6-methylphenol Chemical compound [CH]OC1=CC=CC([CH])=C1O KXGFMDJXCMQABM-UHFFFAOYSA-N 0.000 claims description 3
- 230000004913 activation Effects 0.000 claims description 3
- 238000012512 characterization method Methods 0.000 claims description 3
- 230000004807 localization Effects 0.000 claims description 3
- 238000004519 manufacturing process Methods 0.000 claims description 3
- 239000000203 mixture Substances 0.000 claims description 3
- 238000010606 normalization Methods 0.000 claims description 3
- 239000005011 phenolic resin Substances 0.000 claims description 3
- 229920001568 phenolic resin Polymers 0.000 claims description 3
- 238000011176 pooling Methods 0.000 claims description 3
- 238000012545 processing Methods 0.000 claims description 3
- 239000002344 surface layer Substances 0.000 claims description 3
- 229920001169 thermoplastic Polymers 0.000 claims description 3
- 239000004416 thermosoftening plastic Substances 0.000 claims description 3
- 230000000007 visual effect Effects 0.000 claims description 3
- 238000001035 drying Methods 0.000 claims description 2
- 230000001151 other effect Effects 0.000 claims 1
- 238000003384 imaging method Methods 0.000 abstract description 7
- 230000005855 radiation Effects 0.000 abstract description 5
- 238000004458 analytical method Methods 0.000 abstract description 2
- 238000002591 computed tomography Methods 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 208000014674 injury Diseases 0.000 description 2
- 238000012634 optical imaging Methods 0.000 description 2
- 239000007787 solid Substances 0.000 description 2
- 208000027418 Wounds and injury Diseases 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 210000004204 blood vessel Anatomy 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 230000006378 damage Effects 0.000 description 1
- 230000008021 deposition Effects 0.000 description 1
- 230000009977 dual effect Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000005684 electric field Effects 0.000 description 1
- 230000005288 electromagnetic effect Effects 0.000 description 1
- 239000003292 glue Substances 0.000 description 1
- 230000000877 morphologic effect Effects 0.000 description 1
- 230000002107 myocardial effect Effects 0.000 description 1
- 230000002980 postoperative effect Effects 0.000 description 1
- 238000007674 radiofrequency ablation Methods 0.000 description 1
- 238000011084 recovery Methods 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 230000000717 retained effect Effects 0.000 description 1
- 238000001356 surgical procedure Methods 0.000 description 1
- 230000008733 trauma Effects 0.000 description 1
Images
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
- A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
- A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
- A61B2034/2046—Tracking techniques
- A61B2034/2063—Acoustic tracking systems, e.g. using ultrasound
Landscapes
- Health & Medical Sciences (AREA)
- Surgery (AREA)
- Engineering & Computer Science (AREA)
- Life Sciences & Earth Sciences (AREA)
- Biomedical Technology (AREA)
- Robotics (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Heart & Thoracic Surgery (AREA)
- Medical Informatics (AREA)
- Molecular Biology (AREA)
- Animal Behavior & Ethology (AREA)
- General Health & Medical Sciences (AREA)
- Public Health (AREA)
- Veterinary Medicine (AREA)
- Ultra Sonic Daignosis Equipment (AREA)
Abstract
本发明公开了一种基于超声定位带的体内器械定位跟踪系统,包括:超声波定位带设计模块、定位带信号映射模型构建模块、体内器械位置初始判别模块、体内器械位置精确计算模块和体内器械实时渲染显示模块。本发明利用超声定位带技术,并结合超声信号/图像采集分析方法,在不依赖于术中X线辐射成像的情况下,即可实现多自由度体内器械的精确定位与形状估计。
Description
技术领域
本发明涉及体内空间定位技术领域,尤其是一种基于超声定位带的体内器械定位跟踪系统。
背景技术
与传统外科手术相比,微创介入手术是指在图像引导下,通过人体自然腔道或者血管网进行器械介入,在人体内实施手术的新技术,由于创伤小、并发症少、术后恢复快,是现代治疗方式的新突破。微创介入手术中,介入治疗的器械的精确跟踪与定位,能够为医生操作提高引导,减少术中伤害,提高手术安全性。
传统的空间定位技术如近红外光学定位,依据双目视觉原理用两个贴有近红外滤光片的摄像机拍摄安装有标记反光小球的器械(标志物),获取成像图,并对图像进行处理得到器械的空间位置。这样的光学定位方式,受限于光学成像且标志物体积大,无法有效应用于体内器械跟踪。为解决体内介入器械的跟踪定位问题,人们进行了相关研究。传统的图像引导方式,主要通过体外照射X线透视图的方式来进行体内器械的跟踪,这样的方式会由于重复的辐射,给医生带来安全性问题,而且该方式只能为医生提供器械的二维透视信息,缺乏三维空间定位跟踪信息。为提供三维位置信息,利用术中计算机断层成像(CT)和术中核磁成像来定位介入器械的方式也被提出,但由于CT、核磁设备价格昂贵,影响了其术中的实用性,而且术中核磁带来的磁兼容性,大大限制了介入设备的选择与使用。除了基于影像的定位方式,美国美敦力公司利用电磁效应,通过在器械前端固定磁线圈,收集电磁信号的方式来跟踪器械前端,但这种电磁定位的方式不能得到器械的形态信息且通过有线的方式进行电磁信息的传输,会影响器械的正常介入且带来磁兼容问题。美国强生公司开发的CARTO MergeTM(Biosense Webster,USA) 系统和圣犹达医疗公司开发的Ensite NavXTM(St Jude Medical,USA)系统采用心肌组织传导信息和电磁双定位的原理,通过电场感知定位介入的导管。该系统只能用于射频消融手术,且设备较昂贵。
目前跟踪定位方式中光学跟踪定位的方式由于体积和光学成像的限制无法应用与体内定位。电磁跟踪定位的方式无法提供给医生术中影像信息,且为有线式,需考虑磁兼容问题。影像引导定位的方式,存在无三维位置信息、术中辐射或者价格昂贵定位精度不高等问题。目前尚无既能提供术中影像,又能精确三维定位,无电磁兼容问题、保证安全性且价格较低的体内器械跟踪定位方法与系统以应用于微创介入手术中。
发明内容
本发明所要解决的技术问题在于,提供一种基于超声定位带的体内器械定位跟踪系统,在不依赖于术中X线辐射成像的前提下,仅通过超声信号与图像采集,可完成多自由度设备的精确定位与形状估计。
为解决上述技术问题,本发明提供了一种基于超声定位带的体内器械定位跟踪系统,包括:超声波定位带设计模块、定位带信号映射模型构建模块、体内器械位置初始判别模块、体内器械位置精确计算模块和体内器械实时渲染显示模块;超声波定位带设计模块,将设计一个超声定位带,其表面材质根据声学特性差异呈现梯度式分布;定位带信号映射模型构建模块会为设计的超声定位带,建立超声回波信号与定位带上各材质间的映射模型;体内器械位置初始判别模块,利用已标定的超声波探头发射超声波,且超声波被粘有定位带的体内器械反射后的声学信号图像被采集到。利用基于小波变换分解的背景干扰去除算法从采集到的声学信号中提取单一的定位带声学信号图像,并进一步通过定位带信号映射模型,实现体内器械位置初始判别;体内器械位置精确计算模块,利用超声探头标定矩阵,将体内器械位置初始判别结果,转换到体外跟踪系统世界坐标系下,并利用锥形体的离群点滤除方法对体内器械位置进行二次优化,获得体内器械位置精确计算结果及体内介入器械的点云;体内器械实时渲染显示模块是将三维位置点云通过插值技术,进行器械实时渲染显示,完成器械定位信息呈现。
优选的,超声波定位带设计模块中,超声定位带的具体制作过程为:将不同种类,不同颗粒大小的金属粉末进行热塑性酚醛树脂表层覆盖后,放入沉降液进行沉降,利用不同密度、不同粉经的粉末在液体中沉降速度不同得到各种金属粉末自然分布的沉积层;将分层沉积的金属粉末经干燥固化,便得到声阻抗呈梯度分布的定位带装置。
优选的,定位带信号映射模型构建模块,利用采集的回波信号图去求解定位带上各材质与超声波发射探头之间的距离映射模型。超声探头发射特定强度的超声波,作用到定位带上不同材质时,由于各材质与超声波发射探头之间的距离差异,得到不同的超声波信号图;针对每一种材质,当超声波发射探头与定位带上金属材质之间具有三维位置集P={pi(xi,yi,yi)}(i=1…N)时采集到N张超声波信号图集S={si},si表示在超声波发射探头与材质距离为li时采集到的超声波图。建立模型M去求解S与L之间的关系, 以及特定材质的超声波图与三维位置集之间的关系。
优选的,体内器械位置初始判别模块,将超声波定位带设计模块中获得的厚度小于 1mm且具有粘附性的定位带放置到需定位的体内器械表面,并利用经标定的体外超声探头,发射超声波信号,发射的超声波信号会与体内器械表面的定位带发生信号的发生折射、反射等作用,超声探头进一步接收反射的声波信号并得到超声图像;从超声图像中利用基于小波变换分解的背景干扰去除算法进一步分解出该超声波图中包含的T个不同材质的子超声波图, 为每一个子超声波图。并利用定位带信号映射模型M,求得三维空间位置解P0={pt},其中t=1…T,这样就能获得带有超声定位带的体内器械上T个不同点的位置,实现体内器械位置初始判别。
优选的,基于小波变换分解的背景干扰去除算法的具体实现如下:
基于小波变换分解的背景干扰去除算法的输入为定位带不同材质的超声信号反射叠加图U0,输出为分解出的T个不同材质的超声波子图其中t=1…T,T为定位带上材质组成数目;利用基于多尺度卷积的图像特征提取单元,对输入的超声信号反射叠加图U0进行特征提取,获得特征映射图其尺寸为h×w×c,h为映射图高度,w为映射图宽度,c为映射图的通道数,基于多尺度卷积的图像特征提取单元包含了五个全卷积操作,使用的卷积核大小均为3×3,卷积核数目分别为{5c,4c,3c,2c,c};将特征映射图输入基于高斯金字塔的分解单元,输出分解后的特征图基于小波变换的分解单元,先利用全局池化操作,进行特征全局计算,获得特征图,并通过小波变换,获得特征图在不同频率的分解项组合{L1,L2…LT},T为分解项数目;对不同频率的分解项信息进行激发,利用RELU激活函数进行进一步处理,通过级联操作,获得不同频率下,不同尺度的分解项组,及分解后的特征图在基于小波变换的分解单元之后,为了保证分解后的特征图具有灰度值范围一致性,进行灰度值及图像大小的归一化操作;最后,可输出分解后的T个不同材质的超声波子图
优选的,体内器械位置精确计算模块,利用超声探头标定矩阵,将体内器械位置初始判别结果,转换到体外跟踪系统的坐标系下,获得体内器械上T个不同点的三维空间初始位置P0={pt},其中t=1…T;利用五次贝塞尔曲线方法,求解得到6个关键控制点{ci}的信息,其中i=0…5,五次贝塞尔曲线的表征函数为Bernstein基多项式的线性组合,如下公式:
为了求解关键控制点{ci},定义了最小二乘的点与曲线距离误差函数,如下:
其中,D()代表点到曲线的欧式距离计算函数,通过最小化误差函数L,可求解出6个关键控制点{ci}的信息;并进一步基于关键控制点位置信息,构建锥形体的离群点滤除方法,对基于定位带的体内器械位置初始判别模块中获得的体内器械的三维空间初始位置P0={pt}进行二次优化,以获得体内器械位置精确计算结果及体内介入器械的点云;为每一个曲线控制点建立锥形体搜寻范围,其中搜索圆锥体高度表示为{λi},搜索圆锥体的中心表示为{bi},搜索圆锥体的半径表示为{ri},i=0…5,利用求解的关键控制点的起始点和末端点的直线距离d,求解λi,公式如下:
,其中s0和s1为初始参数,确定了搜索圆锥体高度后,进一步确定搜索圆锥体的中心{bi}, {bi}由搜索圆锥体高度和关键控制点{ci}共同约束,求解公式为:
另外,搜索圆锥体的半径ri为搜索圆锥体的中心{bi}与关键控制点{ci}的欧式距离,ri=‖bi-ci‖,依据{λi},{bi},{ri}可为每一个关键控制点{ci}确定唯一的搜索圆锥体。锥形体的离群点滤除方式为,对于体内器械的三维空间初始位置P0={pt},如果在搜索圆锥体范围内,则保留,如果在搜索圆锥体范围外,则认定为离群点,进行去除。通过这种离群点去除的二次优化方式,获得体内器械位置精确计算结果及体内介入器械的点云P′={pt′}其中t=1…T,并输出到体内器械实时渲染显示模块。
优选的,体内器械实时渲染显示模块,对体内介入器械的点云P′进行插值并完成器械模型重建,以获得体内器械的三维形态;在插值重建步骤中,进行三维点云的样条插值,需要根据介入器械的真实物理尺寸进行基于三维点云的模型重建,获得介入器械的位置形态,并在VTK或者OpenGL视觉平台下,选择管状模型,指定半径,得到体内介入器械的模型;通过三维实时渲染,如面绘制等实时呈现给使用操作者,还可通过5G网络实时传输,将跟踪得到的介入器械的位置形态模型数据进行远程传输,辅助远程手术。
本发明的有益效果为:本发明利用超声定位带技术,并结合超声信号/图像采集分析方法,在不依赖于术中X线辐射成像的情况下,即可实现多自由度体内器械的精确定位与形状估计。
附图说明
图1为本发明的系统结构示意图。
图2为本发明在使用时的连接示意图。
图3为本发明超声定位带的声阻抗梯度分布示意图。
图4为本发明超声定位带示意图。
图5为本发明基于小波变换分解的背景干扰去除算法流程示意图。
图6为本发明锥形体的离群点滤除方法示意图。
具体实施方式
如图1所示,一种基于超声定位带的体内器械定位跟踪系统,包括:超声波定位带设计模块、定位带信号映射模型构建模块、体内器械位置初始判别模块、体内器械位置精确计算模块和体内器械实时渲染显示模块。基于材质声学差异的超声波定位带设计模块,将设计一个超声定位带,其表面材质根据声学特性差异呈现梯度式分布;定位带信号映射模型构建模块会为设计的超声定位带,建立超声回波信号与定位带上各材质间的映射模型;体内器械位置初始判别模块,利用已标定的超声波探头发射超声波,且超声波被粘有定位带的体内器械反射后的声学信号图像被采集到。利用基于小波变换分解的背景干扰去除算法从采集到的声学信号中提取单一的定位带声学信号图像,并进一步通过定位带信号映射模型,实现体内器械位置初始判别;体内器械位置精确计算模块,利用超声探头标定矩阵,将体内器械位置初始判别结果,转换到体外跟踪系统世界坐标系下,并利用锥形体的离群点滤除方法对体内器械位置进行二次优化,获得体内器械位置精确计算结果及体内介入器械的点云;体内器械实时渲染显示模块是将三维位置点云通过插值技术,进行器械实时渲染显示,完成器械定位信息呈现。本发明在使用时的连接示意图如图2所示。
基于材质声学差异的超声波定位带设计模块,将设计一个超声定位带,其表面材质依声学特性差异性分布。超声定位带装置是指基于超声波的传播特性,利用不同材质的特性或状态的非声学量(如固体/液体的密度、浓度、粘度,固体的致密度、晶粒度、弹性、硬度等)与声学特性的声学量(如声速、声阻抗、声衰减等)之间存在的关系,设计一种定位带装置。根据采集到的声学信号和图像推出超声波成像区对应的成像材质,并得到距离关系的设备,用于体内器械的跟踪定位、形状估计。声特性阻抗表示介质的声学性质,可表示为Z=ρc(Z为声阻抗,ρ为介质密度,c为介质中的声速)。当遇到不同的介质时,声阻抗不同,超声波信号的变化也不同。因此,超声回波强度直接与材质的密度,声传播速度相关。基于该原理设计了超声定位带,该定位带由密度及颗粒大小呈现一定差异的金属材料制成。超声定位带的具体制作过程为:将不同种类,不同颗粒大小的金属粉末进行热塑性酚醛树脂表层覆盖后,将其放入沉降液(如胶水中)进行沉降,利用不同密度、不同粉经的粉末在液体中沉降速度不同得到各种金属粉末自然分布的沉积层。进一步,将分层沉积的金属粉末经干燥固化,便得到声阻抗呈梯度分布的定位带装置,如图3和图4所示。
定位带信号映射模型构建的模块中,利用采集的回波信号图去求解定位带上各材质与超声波发射探头之间的距离映射模型。超声探头发射特定强度的超声波,并作用到定位带上不同材质时,会由于各材质与超声波发射探头之间的距离差异,得到不同的超声波信号图。针对每一种材质,当超声波发射探头与定位带上金属材质之间具有三维位置集P={pi(xi,yi,yi)}(i=1…N)时采集到N张超声波信号图集S={si},si表示在超声波发射探头与材质距离为li时采集到的超声波图。建立模型M去求解S与L之间的关系, 以及特定材质的超声波图与三维位置集之间的关系。
在基于定位带的体内器械位置初始判别模块中,首先将超声波定位带设计模块中获得的厚度小于1mm且具有粘附性的定位带放置到需定位的体内器械表面。并利用经标定的体外超声探头,发射超声波信号,发射的超声波信号会与体内器械表面的定位带发生信号的发生折射、反射等作用,超声探头进一步接收反射的声波信号并得到超声图像。从超声图像中利用基于小波变换分解的背景干扰去除算法进一步分解出该超声波图中包含的T个不同材质的子超声波图, 为每一个子超声波图。并利用定位带信号映射模型M,求得三维空间位置解P0={pt},其中t=1…T。这样就能获得带有超声定位带的体内器械上T个不同点的位置,实现体内器械位置初始判别。其中,基于小波变换分解的背景干扰去除算法的具体实现如下。
基于小波变换分解的背景干扰去除算法的输入为定位带不同材质的超声信号反射叠加图U0,输出为分解出的T个不同材质的超声波子图其中t=1…T,T为定位带上材质组成数目。基于小波变换分解的背景干扰去除算法流程如图5所示。首先,利用基于多尺度卷积的图像特征提取单元,对输入的超声信号反射叠加图U0进行特征提取,获得特征映射图其尺寸为h×w×c(h为映射图高度,w为映射图宽度,c为映射图的通道数)。基于多尺度卷积的图像特征提取单元包含了五个全卷积操作,使用的卷积核大小均为3×3,卷积核数目分别为{5c,4c,3c,2c,c}。然后,将特征映射图输入基于高斯金字塔的分解单元,输出分解后的特征图基于小波变换的分解单元,先利用全局池化操作,进行特征全局计算,获得特征图。并通过小波变换,获得特征图在不同频率的分解项组合{L1,L2…LT},T为分解项数目。为了对不同频率的分解项信息进行激发,利用RELU激活函数进行进一步处理。通过级联操作,可获得不同频率下,不同尺度的分解项组,及分解后的特征图在基于小波变换的分解单元之后,为了保证分解后的特征图具有灰度值范围一致性,进行灰度值及图像大小的归一化操作。最后,可输出分解后的T个不同材质的超声波子图
在体内器械位置精确计算模块中,首先利用超声探头标定矩阵,将体内器械位置初始判别结果,转换到体外跟踪系统的坐标系下,获得体内器械上T个不同点的三维空间初始位置P0={pt},其中t=1…T。其次,利用五次贝塞尔曲线方法,求解得到6个关键控制点{ci}的信息,其中i=0…5。五次贝塞尔曲线的表征函数为Bernstein基多项式的线性组合,如下公式:
为了求解关键控制点{ci},定义了最小二乘的点与曲线距离误差函数,如下:
其中,D()代表点到曲线的欧式距离计算函数。通过最小化误差函数L,可求解出6个关键控制点{ci}的信息。并进一步基于关键控制点位置信息,构建锥形体的离群点滤除方法,对基于定位带的体内器械位置初始判别模块中获得的体内器械的三维空间初始位置P0={pt}进行二次优化,以获得体内器械位置精确计算结果及体内介入器械的点云。锥形体的离群点滤除方法的思路流程如图6所示。首先需要为每一个曲线控制点建立锥形体搜寻范围,其中搜索圆锥体高度表示为{λi},搜索圆锥体的中心表示为{bi},搜索圆锥体的半径表示为{ri},i=0…5。利用求解的关键控制点的起始点和末端点的直线距离d,求解λi,公式如下:
,其中s0和s1为初始参数,确定了搜索圆锥体高度后,进一步确定搜索圆锥体的中心{bi}。 {bi}由搜索圆锥体高度和关键控制点{ci}共同约束,求解公式为:
另外,搜索圆锥体的半径ri为搜索圆锥体的中心{bi}与关键控制点{ci}的欧式距离,ri=‖bi-ci‖。依据{λi},{bi},{ri}可为每一个关键控制点{ci}确定唯一的搜索圆锥体。锥形体的离群点滤除方式为,对于体内器械的三维空间初始位置P0={pt},如果在搜索圆锥体范围内,则保留(如图6中黑色实心点所示),如果在搜索圆锥体范围外,(如图6中黑色空心点所示),则认定为离群点,进行去除。通过这种离群点去除的二次优化方式,获得体内器械位置精确计算结果及体内介入器械的点云P′={pt′}其中t=1…T,并输出到体内器械实时渲染显示模块。
体内器械实时渲染显示模块中,首先对体内介入器械的点云P′进行插值和器械模型重建,以获得体内器械的三维形态。在插值重建步骤中,首先,进行三维点云的样条插值,然后,需要根据介入器械的真实物理尺寸如器械宽度、半径等,进行基于三维点云的模型重建,获得介入器械的位置形态,并在VTK或者OpenGL等视觉平台下,选择管状模型,指定半径,得到体内介入器械的模型。最后,通过三维实时渲染,如面绘制等实时呈现给使用操作者。另一方面,还可通过5G网络实时传输,将跟踪得到的介入器械的位置形态模型数据进行远程传输,并结合手术机器人技术,辅助远程手术。
Claims (6)
1.基于超声定位带的体内器械定位跟踪系统,其特征在于,包括:超声波定位带设计模块、定位带信号映射模型构建模块、体内器械位置初始判别模块、体内器械位置精确计算模块和体内器械实时渲染显示模块;超声波定位带设计模块,将设计一个超声定位带,其表面材质根据声学特性差异呈现梯度式分布;定位带信号映射模型构建模块会为设计的超声定位带,建立超声回波信号与定位带上各材质间的映射模型;体内器械位置初始判别模块,利用已标定的超声波探头发射超声波,且超声波被粘有定位带的体内器械反射后的声学信号图像被采集到,利用基于小波变换分解的背景干扰去除算法从采集到的声学信号中提取单一的定位带声学信号图像,并进一步通过定位带信号映射模型,实现体内器械位置初始判别;体内器械位置精确计算模块,利用超声探头标定矩阵,将体内器械位置初始判别结果,转换到体外跟踪系统世界坐标系下,并利用锥形体的离群点滤除方法对体内器械位置进行二次优化,获得体内器械位置精确计算结果及体内介入器械的点云;体内器械实时渲染显示模块是将三维位置点云通过插值技术,进行器械实时渲染显示,完成器械定位信息呈现;
定位带信号映射模型构建模块,利用采集的回波信号图去求解定位带上各材质与超声波发射探头之间的距离映射模型;超声探头发射特定强度的超声波,作用到定位带上不同材质时,由于各材质与超声波发射探头之间的距离差异,得到不同的超声波信号图;针对每一种材质,当超声波发射探头与定位带上金属材质之间具有三维位置集P={pi(xi,yi,yi)}(i=1…N)时采集到N张超声波信号图集S={si},si表示在超声波发射探头与材质距离为li时采集到的超声波图,建立模型M去求解S与L之间的关系,以及特定材质的超声波图与三维位置集之间的关系。
2.如权利要求1所述的基于超声定位带的体内器械定位跟踪系统,其特征在于,超声波定位带设计模块中,超声定位带的具体制作过程为:将不同种类,不同颗粒大小的金属粉末进行热塑性酚醛树脂表层覆盖后,放入沉降液进行沉降,利用不同密度、不同粉经的粉末在液体中沉降速度不同得到各种金属粉末自然分布的沉积层;将分层沉积的金属粉末经干燥固化,便得到声阻抗呈梯度分布的定位带装置。
3.如权利要求1所述的基于超声定位带的体内器械定位跟踪系统,其特征在于,体内器械位置初始判别模块,将超声波定位带设计模块中获得的厚度小于1mm且具有粘附性的定位带放置到需定位的体内器械表面,并利用经标定的体外超声探头,发射超声波信号,发射的超声波信号会与体内器械表面的定位带发生信号的发生折射、反射等作用,超声探头进一步接收反射的声波信号并得到超声图像;从超声图像中利用基于小波变换分解的背景干扰去除算法进一步分解出该超声波图中包含的T个不同材质的子超声波图, 为每一个子超声波图,并利用定位带信号映射模型M,求得三维空间位置解P0={pt},其中t=1…T,这样就能获得带有超声定位带的体内器械上T个不同点的位置,实现体内器械位置初始判别。
4.如权利要求3所述的基于超声定位带的体内器械定位跟踪系统,其特征在于,基于小波变换分解的背景干扰去除算法的具体实现如下:
基于小波变换分解的背景干扰去除算法的输入为定位带不同材质的超声信号反射叠加图u0,输出为分解出的T个不同材质的超声波子图其中t=1…T,T为定位带上材质组成数目;利用基于多尺度卷积的图像特征提取单元,对输入的超声信号反射叠加图u0进行特征提取,获得特征映射图其尺寸为h×w×c,h为映射图高度,w为映射图宽度,c为映射图的通道数,基于多尺度卷积的图像特征提取单元包含了五个全卷积操作,使用的卷积核大小均为3×3,卷积核数目分别为{5c,4c,3c,2c,c};将特征映射图输入基于高斯金字塔的分解单元,输出分解后的特征图基于小波变换的分解单元,先利用全局池化操作,进行特征全局计算,获得特征图,并通过小波变换,获得特征图在不同频率的分解项组合{L1,L2…LT},T为分解项数目;对不同频率的分解项信息进行激发,利用RELU激活函数进行进一步处理,通过级联操作,获得不同频率下,不同尺度的分解项组,及分解后的特征图在基于小波变换的分解单元之后,为了保证分解后的特征图具有灰度值范围一致性,进行灰度值及图像大小的归一化操作;最后,可输出分解后的T个不同材质的超声波子图
5.如权利要求1所述的基于超声定位带的体内器械定位跟踪系统,其特征在于,体内器械位置精确计算模块,利用超声探头标定矩阵,将体内器械位置初始判别结果,转换到体外跟踪系统的坐标系下,获得体内器械上T个不同点的三维空间初始位置P0={pt},其中t=1…T;利用五次贝塞尔曲线方法,求解得到6个关键控制点{ci}的信息,其中i=0…5,五次贝塞尔曲线的表征函数为Bernstein基多项式的线性组合,如下公式:
为了求解关键控制点{ci},定义了最小二乘的点与曲线距离误差函数,如下:
其中,D()代表点到曲线的欧式距离计算函数,通过最小化误差函数L,可求解出6个关键控制点{ci}的信息;并进一步基于关键控制点位置信息,构建锥形体的离群点滤除方法,对基于定位带的体内器械位置初始判别模块中获得的体内器械的三维空间初始位置P0={pt}进行二次优化,以获得体内器械位置精确计算结果及体内介入器械的点云;为每一个曲线控制点建立锥形体搜寻范围,其中搜索圆锥体高度表示为{λi},搜索圆锥体的中心表示为{bi},搜索圆锥体的半径表示为{ri},i=0…5,利用求解的关键控制点的起始点和末端点的直线距离d,求解λi,公式如下:
其中s0和s1为初始参数,确定了搜索圆锥体高度后,进一步确定搜索圆锥体的中心{bi},{bi}由搜索圆锥体高度和关键控制点{ci}共同约束,求解公式为:
另外,搜索圆锥体的半径ri为搜索圆锥体的中心{bi}与关键控制点{ci}的欧式距离,ri=||bi-ci||,依据{λi},{bi},{ri}可为每一个关键控制点{ci}确定唯一的搜索圆锥体;锥形体的离群点滤除方式为,对于体内器械的三维空间初始位置P0={pt},如果在搜索圆锥体范围内,则保留,如果在搜索圆锥体范围外,则认定为离群点,进行去除,通过这种离群点去除的二次优化方式,获得体内器械位置精确计算结果及体内介入器械的点云P′={p′t}其中t=1…T,并输出到体内器械实时渲染显示模块。
6.如权利要求1所述的基于超声定位带的体内器械定位跟踪系统,其特征在于,体内器械实时渲染显示模块,对体内介入器械的点云P′进行插值并完成器械模型重建,以获得体内器械的三维形态;在插值重建步骤中,进行三维点云的样条插值,需要根据介入器械的真实物理尺寸进行基于三维点云的模型重建,获得介入器械的位置形态,并在VTK或者OpenGL视觉平台下,选择管状模型,指定半径,得到体内介入器械的模型;通过三维实时渲染,如面绘制等实时呈现给使用操作者,还可通过5G网络实时传输,将跟踪得到的介入器械的位置形态模型数据进行远程传输,辅助远程手术。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010095615.2A CN111329586B (zh) | 2020-02-17 | 2020-02-17 | 基于超声定位带的体内器械定位跟踪系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010095615.2A CN111329586B (zh) | 2020-02-17 | 2020-02-17 | 基于超声定位带的体内器械定位跟踪系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN111329586A CN111329586A (zh) | 2020-06-26 |
CN111329586B true CN111329586B (zh) | 2021-05-11 |
Family
ID=71174325
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010095615.2A Active CN111329586B (zh) | 2020-02-17 | 2020-02-17 | 基于超声定位带的体内器械定位跟踪系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111329586B (zh) |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US4840250A (en) * | 1988-08-25 | 1989-06-20 | Novy Donald A | Acoustic impedance inducing device |
CN1897878A (zh) * | 2003-12-22 | 2007-01-17 | 皇家飞利浦电子股份有限公司 | 用于把医疗仪器导入到病人体内的系统 |
CN102266250A (zh) * | 2011-07-19 | 2011-12-07 | 中国科学院深圳先进技术研究院 | 超声手术导航系统及超声手术导航方法 |
CN103284757A (zh) * | 2012-02-27 | 2013-09-11 | 通用电气公司 | 用于执行超声成像的方法和设备 |
CN105324078A (zh) * | 2013-06-28 | 2016-02-10 | 皇家飞利浦有限公司 | 对介入器械的不依赖扫描器的跟踪 |
CN107106241A (zh) * | 2014-10-17 | 2017-08-29 | 伊马科提斯公司 | 用于对外科器械进行导航的系统 |
CN107913102A (zh) * | 2016-10-06 | 2018-04-17 | 韦伯斯特生物官能(以色列)有限公司 | 使用超声进行的解剖图像与位置跟踪系统的术前配准 |
CN108474837A (zh) * | 2015-12-22 | 2018-08-31 | 皇家飞利浦有限公司 | 基于超声的跟踪 |
-
2020
- 2020-02-17 CN CN202010095615.2A patent/CN111329586B/zh active Active
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US4840250A (en) * | 1988-08-25 | 1989-06-20 | Novy Donald A | Acoustic impedance inducing device |
CN1897878A (zh) * | 2003-12-22 | 2007-01-17 | 皇家飞利浦电子股份有限公司 | 用于把医疗仪器导入到病人体内的系统 |
CN102266250A (zh) * | 2011-07-19 | 2011-12-07 | 中国科学院深圳先进技术研究院 | 超声手术导航系统及超声手术导航方法 |
CN103284757A (zh) * | 2012-02-27 | 2013-09-11 | 通用电气公司 | 用于执行超声成像的方法和设备 |
CN105324078A (zh) * | 2013-06-28 | 2016-02-10 | 皇家飞利浦有限公司 | 对介入器械的不依赖扫描器的跟踪 |
CN107106241A (zh) * | 2014-10-17 | 2017-08-29 | 伊马科提斯公司 | 用于对外科器械进行导航的系统 |
CN108474837A (zh) * | 2015-12-22 | 2018-08-31 | 皇家飞利浦有限公司 | 基于超声的跟踪 |
CN107913102A (zh) * | 2016-10-06 | 2018-04-17 | 韦伯斯特生物官能(以色列)有限公司 | 使用超声进行的解剖图像与位置跟踪系统的术前配准 |
Also Published As
Publication number | Publication date |
---|---|
CN111329586A (zh) | 2020-06-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US6283918B1 (en) | Medical image diagnostic apparatus | |
Nelson et al. | Three-dimensional ultrasound imaging | |
AU2010257203B2 (en) | Fast anatomical mapping using ultrasound images | |
CA3129784C (en) | Method and apparatus for three dimensional reconstruction of a joint using ultrasound | |
JP5474342B2 (ja) | 3−d画像および表面マッピングによる解剖学的モデル化 | |
US6119033A (en) | Method of monitoring a location of an area of interest within a patient during a medical procedure | |
EP1088515B1 (en) | Vascular reconstruction | |
AU2007221876B2 (en) | Registration of images of an organ using anatomical features outside the organ | |
JP5460955B2 (ja) | 超音波データ収集を示すための電気解剖学的マップの着色 | |
Li et al. | Semi-automatic contour detection for volumetric quantification of intracoronary ultrasound | |
Boctor et al. | Rapid calibration method for registration and 3D tracking of ultrasound images using spatial localizer | |
JP6301005B2 (ja) | 手術部位におけるプローブの位置を判定する方法及びシステム | |
CN110432986B (zh) | 用于从ct数据构建虚拟径向超声图像的系统和方法 | |
KR101588014B1 (ko) | 복합 실제 3차원 영상 제작방법 및 이를 위한 시스템 | |
MX2007003312A (es) | Registro de imagenes utilizando ajuste pesado localmente. | |
JP2006204912A (ja) | 超音波映像処理方法 | |
Suri | Advances in diagnostic and therapeutic ultrasound imaging | |
JP2023502449A (ja) | 超音波撮像並びに関連する装置、システム、及び方法のためのインテリジェントな測定支援 | |
Zhang et al. | Direct surface extraction from 3D freehand ultrasound images | |
Zhang et al. | Surface extraction with a three-dimensional freehand ultrasound system | |
CN111329586B (zh) | 基于超声定位带的体内器械定位跟踪系统 | |
CN107072638A (zh) | 对超声图像的序列进行可视化的方法、计算机程序产品和超声系统 | |
EP3880104A1 (en) | Systems and methods for registration using an anatomical measurement wire | |
FR2838628A1 (fr) | Procede d'assistance et de guidage de navigation d'un outil dans des structures anatomiques | |
KR101727567B1 (ko) | 복합 실제 3차원 영상 제작방법 및 이를 위한 시스템 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |