CN101987019A - 基于小波变换的pet图像和ct图像异机融合方法 - Google Patents

基于小波变换的pet图像和ct图像异机融合方法 Download PDF

Info

Publication number
CN101987019A
CN101987019A CN2009101142780A CN200910114278A CN101987019A CN 101987019 A CN101987019 A CN 101987019A CN 2009101142780 A CN2009101142780 A CN 2009101142780A CN 200910114278 A CN200910114278 A CN 200910114278A CN 101987019 A CN101987019 A CN 101987019A
Authority
CN
China
Prior art keywords
image
pet
fusion
pet image
fusion method
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN2009101142780A
Other languages
English (en)
Inventor
徐子海
陈超敏
童蕾
周凌宏
廖福锡
胡赟
刘凌湘
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Individual
Original Assignee
Individual
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Individual filed Critical Individual
Priority to CN2009101142780A priority Critical patent/CN101987019A/zh
Publication of CN101987019A publication Critical patent/CN101987019A/zh
Pending legal-status Critical Current

Links

Images

Landscapes

  • Apparatus For Radiation Diagnosis (AREA)
  • Nuclear Medicine (AREA)

Abstract

本发明公开了一种基于小波变换的PET图像和CT图像的异机融合方法,包括步骤(如图1所示):将病人固定在一个定位框架内;根据该框架采集PET图像;同时利用该定位框架采集CT图像;对PET/CT图像分别进行提取处理;将步处理后的PET/CT图像根据定位框架中得到的定位点进行配准;对配准后的PET/CT图像进行小波分解、变分求解融合;最后对融合后的PET/CT图像进行小波反变换生成融合图像。本发明优点在于:采用基于外部标记点的方法对采集到的PET图像和CT图像进行配准,并创新提出一种在小波域上运用变分方法实现了异机PET/CT图像的精确融合。该方法操作简单,结果精确,在临床应用中有重要的应用价值和经济效益。

Description

基于小波变换的PET图像和CT图像异机融合方法
技术领域
本发明涉及一种图像融合方法,尤其涉及一种PET图像和CT图像的异机融合方法。
背景技术
放射治疗技术经历了普通放疗、立体定向放射外科(SRS)、三维适形放射治疗(3DCRT)、调强放射治疗(IMRT)和图像引导的放射治疗(IGRT)几个发展阶段:现在已经进入了精确放疗的时代,精确放疗能最大程度地减少对肿瘤周围正常组织的照射,大大提高肿瘤的照射剂量,提高肿瘤的局部控制率。
肿瘤的放射治疗是医学图像融合应用的一大领域,准确的靶区勾画是保证精确治疗的基础。随着分子影像学的进展,通过PET,也就是正电子发射断层扫描,可以显示肿瘤的生物学方面的特性,被越来越多的应用到放射治疗中,促进放射治疗的发展。
PET成像技术可以提供人体新陈代谢的功能图像,但是PET图像的信噪比和空间分辨率都很低,PET图像显示的病变的高代谢区域很难进行精确的解剖定位。而CT成像清晰、空间分辨率高,可为病灶的定位起到良好的参照作用,但其对病灶本身的显示却比较差。因此可以将PET的代谢功能图像和CT的解剖图像进行融合从而实现PET图像中高代谢区域的解剖定位。
图像的融合方法可以分为三个层次:图像像素级的融合;图像特征级的融合;基于决策级的融合。目前主要研究的是基于图像像素级的融合,主要算法有:简单的加权平均法、基于金字塔变换的方法以及小波变换的方法等。其中由于小波变换法能够提取图像的结构信息和细节信息,融合效果更好,而普遍受到关注。在基于小波变换融合框架的方法中,大部分算法都是集中于对图像融合规则的研究。
PET图像和CT图像的融合分为异机和同机融合两种方式。同机融合在实际的临床应用中存在和很多的问题:首先,一体机的固定成本比例大,成本回收困难,存在着资源的严重浪费,且由于经济状况和消费水平的限制在全国范围的配备数量不足和不平衡,限制了同机融合在临床中的应用和发展,简单的说就是同机设备非常昂贵,相比而言,异机融合成本低廉,在临床中的应用中有着广阔的空间;其次由于临床需要通常比较复杂,不可能将所有需要的机器组合实现,如果对于同一病人在不同时间的两幅相同模式的图像进行配准以衡量疗效时,就不得不采用软件方式来配准融合,可见软件配准融合也就是异机融合是非常必要的。
现在,软件配准融合的算法发展非常迅速,精度和速度等都有非常大的提高,也为PET和CT图像的异机融合也提供了很好的发展平台。可以看到异机融合的研究被重新赋予了新的意义,在临床中的应用有着非常广阔的前景。
发明内容
本发明目的在于提供一种PET图像和CT图像的异机融合方法。
本发明目的可以通过以下技术方案实现:一种PET图像和CT图像的异机融合方法,其特征在于,包括以下步骤:
1)将病人固定在一个定位框架内;
2)根据步骤1中的定位框架采集PET图像;
3)根据步骤1中的定位框架采集CT图像;
4)对步骤2中的PET图像和步骤3中的CT图像分别进行提取处理;
5)将步骤4处理后的PET和CT图像根据在步骤1的定位框架中得到的定位点进行配准;
6)对步骤5中配准后的PET/CT图像进行小波分解、变分求解融合;
7)对步骤6中融合后的PET/CT图像进行小波反变换生成融合图像。
上述方法的步骤4中,提取处理包括:去噪、增强和分割图像特征。
上述方法的步骤5中,定位配准的标准是两幅图像中的特征点坐标偏差平方和最小。
上述方法的步骤6中,包括两个融合条件:一是对小波的低频系数根据加权平均的方法进行低频系数子图像的融合;二是根据CT图像提供的几何特征信息进行高频子图像的融合。
上述方法中的步骤7中,对融合图像采用伪色彩显示。
本发明相对现有技术优点在于:在已掌握精确放射治疗技术,图像配准、融合各种技术方法以及计算机各类优化算法的深刻理解的基础上,采用基于外部标记点的方法对采集到的PET图像和CT图像进行配准。并创新提出了一种在小波域上运用变分方法的PET图像和CT图像融合方法,结合小波和变分的优点。算法实现迅速,结果优良。整个系统操作简单,成本合理,在临床应用中有重要的实际应用价值和经济效益。
说明书附图
图1是本发明的方法流程图。
具体实施方式
下面以一例肺癌病人的胸部的PET图像和CT图像的融合为例,详细阐述本发明的工作步骤,如图1所示:
1、首先用我们设计的体部扫描外基准框架分别用于PET和CT扫描,采集肺癌病人的PET图像和CT图像,经过我们改进设计的体部和头颈部的扫描外基准框架,采用Z字型的空心铝管镶嵌在有机玻璃中,在PET和CT扫描时分别选用FDG和硫酸铜作为显影剂成像生成带有标记点的PET图像和CT图像,CT图像为浮动图像,PET图像为参考图像。
2、采集到图像的原始格式为DICOM格式,应用DICOM2软件将他们分别转换成BMP格式,进行下一步处理,PET图像的数据矩阵为128×128,CT图像的为512×512,对PET图像进行双线性插值,统一两种数据格式、图像大小和分辨率;接着在两幅PET图像和CT图像上分别确定标记点的最大内接长方形,进行简单的分割处理,分离出用于配准的标记物部分。
3、经过预处理的图像中可以看到清晰的9个标记点,运用基于模版匹配的相关检测的方法提取标记点圆心的坐标,实现公式为:
Figure B2009101142780D0000031
根据相关定理,空间相关可以用一个函数的傅立叶变化与另一个函数的傅立叶变化的复共轭的乘积进行傅立叶逆变换得到,标记点的提取结果。
4、然后根据参考图像和浮动图像的标记点的坐标,计算变换矩阵:
x 1 ′ x 2 ′ . . . x 9 ′ y 1 ′ y 2 ′ . . . y 9 ′ 1 1 . . . 1 = cos θ sin θ p - sin θ cos θ q 0 0 1 x 1 x 2 . . . x 9 y 1 y 2 . . . y 9 1 1 . . . 1
结果为:
A = 0.9988 0.0511 2.0917 - 0.0525 0.9961 3.0156 0 0 1
用矩阵A的逆矩阵对待配准的CT图像进行变换,实现其与作为参考的PET图像的精确配准,配准后的CT图像。
5、接下来进行PET图像和CT图像的融合工作,根据一般基于小波变换的图像融合框架,首先对待融合的PET/CT图像进行小波分解;然后在选择图像融合规则时,根据PET/CT图像的特性,提出两个假设:一是假设融合后的图像应尽可能多的同时包含PET/CT图像的信息,据此我们对小波的低频系数根据加权平均的方法进行低频系数子图像的融合。二是假设融合后图像的解剖定位信息主要由CT图像提供,进而根据CT图像提供的几何特征信息(曲率流)进行高频子图像的融合。这两个假设统一在变分的框架内进行融合,首先是将PET图像和CT图像分别变换到小波域,根据假设①:融合后的图像应该尽可能多的同时包含CT和PET图像的有效信息。可以得到:
X a = α 1 X a pet + α 2 X a ct , α 1 , α 2 ≥ 0 , α 1 + α 2 = 1
Xa为融合后图像小波分解的低频分量,
Figure B2009101142780D0000044
分别代表PET和CT图像小波分解的低频分量。我们认为PET和CT图像低频分量对融合后图像的贡献是一样的,即α1=α2=1/2,那么有:
Figure B2009101142780D0000045
把上式放入变分的框架中,有: E 1 = ∫ ( X a pet + X a ct 2 - X a ) 2 dxdy
最小化上面能量泛函,可以得到如下的一阶变分方程:
∂ E 1 ∂ X a = X a pet + X a ct 2 - X a
根据假设②:融合后的图像的几何信息大部分都包含在CT图像中,这里图像的几何信息选用图像边缘的单位法向量场来表示,假设②可用数学公式描述如下:
设融合后的图像为X,给定CT图像在几何边缘处的单位法向量的向量场θct
θ k ct · ▿ X k = | | ▿ X k | | , k = h , v , d
Xh,Xv,Xd分别表示X小波分解后的水平、垂直和对角细节分量的子图像。把上面的式子放入变分的框架中,有:
E 2 = ∫ ( | | Δ X k | | - θ k ct · ▿ X k ) dxdy
最小化上面的能量泛函,可得如下的一阶变分:
E 2 = ∫ ( | | ▿ X k | | - θ k ct · ▿ X k ) dxdy = ∫ ( | | ▿ X k | | + div ( θ k ct ) · X k ) dxdy
从而有:
∂ E 2 ∂ X k = div ( θ k ct ) - div ( ▿ X k | | ▿ X k | | ) , k = h , v , d
对融合后的图像的低频分量,以及水平、垂直、对角分量分别求解如下方程:
∂ E 1 ∂ X a = X a pet + X a ct 2 - X a ∂ E 2 ∂ X k = div ( θ k ct ) - ( ▿ X k | | ▿ X k | | ) , k = h , v , d
便可以得到融合图像,这例肺癌病人的腹部的PET图像和CT图像的融合结果最后对融合图像进行伪彩色处理。

Claims (5)

1.一种基于小波变换的PET图像和CT图像的异机融合方法,其特征在于,包括以下步骤:
1)将病人固定在一个定位框架内;
2)根据步骤1中的定位框架采集PET图像;
3)根据步骤1中的定位框架采集CT图像;
4)对步骤2中的PET图像和步骤3中的CT图像分别进行提取处理;
5)将步骤4处理后的PET和CT图像根据在步骤1的定位框架中得到的定位点进行配准;
6)对步骤5中配准后的PET/CT图像进行小波分解、变分求解融合;
7)对步骤6中融合后的PET/CT图像进行小波反变换生成融合图像。
2.根据权利要求1所述的一种PET图像和CT图像的异机融合方法,其特征在于,所述的步骤4中,提取处理包括:去噪、增强和分割图像特征。
3.根据权利要求1所述的一种PET图像和CT图像的异机融合方法,其特征在于,所述的步骤5中,定位配准的标准是两幅图像中的特征点坐标偏差平方和最小。
4.根据权利要求1所述的一种PET图像和CT图像的异机融合方法,其特征在于,所述的步骤6中,包括两个融合条件:一是对小波的低频系数根据加权平均的方法进行低频系数子图像的融合;二是根据CT图像提供的几何特征信息进行高频子图像的融合。
5.根据权利要求1所述的一种PET图像和CT图像的异机融合方法,其特征在于,所述的步骤7中,对融合图像采用伪色彩显示。
CN2009101142780A 2009-08-03 2009-08-03 基于小波变换的pet图像和ct图像异机融合方法 Pending CN101987019A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN2009101142780A CN101987019A (zh) 2009-08-03 2009-08-03 基于小波变换的pet图像和ct图像异机融合方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN2009101142780A CN101987019A (zh) 2009-08-03 2009-08-03 基于小波变换的pet图像和ct图像异机融合方法

Publications (1)

Publication Number Publication Date
CN101987019A true CN101987019A (zh) 2011-03-23

Family

ID=43743948

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2009101142780A Pending CN101987019A (zh) 2009-08-03 2009-08-03 基于小波变换的pet图像和ct图像异机融合方法

Country Status (1)

Country Link
CN (1) CN101987019A (zh)

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102426702A (zh) * 2011-10-25 2012-04-25 南阳理工学院 Ct图像与mr图像的融合方法
CN102920470A (zh) * 2012-10-18 2013-02-13 苏州生物医学工程技术研究所 双模融合的医学成像系统及方法
CN102999917A (zh) * 2012-12-19 2013-03-27 中国科学院自动化研究所 基于t2-mri和dw-mri的宫颈癌图像自动分割方法
CN104665857A (zh) * 2013-11-28 2015-06-03 上海联影医疗科技有限公司 多模态成像系统配准方法
CN104732540A (zh) * 2015-03-27 2015-06-24 北京永新医疗设备有限公司 Pet/ct几何配准方法和系统
CN104849123A (zh) * 2015-06-10 2015-08-19 孟雪 离体肿瘤固定装置及利用该装置制作病理切片的方法
CN105825073A (zh) * 2016-06-17 2016-08-03 张家港赛提菲克医疗器械有限公司 一种在线放疗计划质量控制软件
CN106055912A (zh) * 2016-06-15 2016-10-26 张家港赛提菲克医疗器械有限公司 一种根据在线影像产生治疗床调整数据的计算机程序
CN106683042A (zh) * 2017-01-05 2017-05-17 南京觅踪电子科技有限公司 一种基于非线性最小二乘的多模态医学图像融合方法以及系统
CN110415279A (zh) * 2019-06-25 2019-11-05 北京全域医疗技术集团有限公司 图像配准方法、装置及设备
CN111738975A (zh) * 2019-03-19 2020-10-02 纬创资通股份有限公司 图像辨识方法及图像辨识装置

Cited By (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102426702A (zh) * 2011-10-25 2012-04-25 南阳理工学院 Ct图像与mr图像的融合方法
CN102920470B (zh) * 2012-10-18 2015-11-25 苏州生物医学工程技术研究所 双模融合的医学成像系统及方法
CN102920470A (zh) * 2012-10-18 2013-02-13 苏州生物医学工程技术研究所 双模融合的医学成像系统及方法
CN102999917A (zh) * 2012-12-19 2013-03-27 中国科学院自动化研究所 基于t2-mri和dw-mri的宫颈癌图像自动分割方法
CN102999917B (zh) * 2012-12-19 2016-08-03 中国科学院自动化研究所 基于t2-mri和dw-mri的宫颈癌图像自动分割方法
CN104665857A (zh) * 2013-11-28 2015-06-03 上海联影医疗科技有限公司 多模态成像系统配准方法
CN104732540A (zh) * 2015-03-27 2015-06-24 北京永新医疗设备有限公司 Pet/ct几何配准方法和系统
CN104732540B (zh) * 2015-03-27 2017-11-17 北京永新医疗设备有限公司 Pet/ct几何配准方法和系统
CN104849123A (zh) * 2015-06-10 2015-08-19 孟雪 离体肿瘤固定装置及利用该装置制作病理切片的方法
CN104849123B (zh) * 2015-06-10 2017-10-31 孟雪 离体肿瘤固定装置及利用该装置制作病理切片的方法
CN106055912A (zh) * 2016-06-15 2016-10-26 张家港赛提菲克医疗器械有限公司 一种根据在线影像产生治疗床调整数据的计算机程序
CN106055912B (zh) * 2016-06-15 2019-04-16 张家港赛提菲克医疗器械有限公司 一种根据在线影像产生治疗床调整数据的计算机系统
CN105825073A (zh) * 2016-06-17 2016-08-03 张家港赛提菲克医疗器械有限公司 一种在线放疗计划质量控制软件
CN105825073B (zh) * 2016-06-17 2018-08-14 张家港赛提菲克医疗器械有限公司 一种在线放疗计划质量控制系统
CN106683042A (zh) * 2017-01-05 2017-05-17 南京觅踪电子科技有限公司 一种基于非线性最小二乘的多模态医学图像融合方法以及系统
CN106683042B (zh) * 2017-01-05 2020-08-11 卡本(深圳)医疗科技有限公司 一种基于非线性最小二乘的多模态医学图像融合方法以及系统
CN111738975A (zh) * 2019-03-19 2020-10-02 纬创资通股份有限公司 图像辨识方法及图像辨识装置
CN111738975B (zh) * 2019-03-19 2023-04-14 纬创资通股份有限公司 图像辨识方法及图像辨识装置
CN110415279A (zh) * 2019-06-25 2019-11-05 北京全域医疗技术集团有限公司 图像配准方法、装置及设备

Similar Documents

Publication Publication Date Title
CN101987019A (zh) 基于小波变换的pet图像和ct图像异机融合方法
Tian et al. Superpixel-based segmentation for 3D prostate MR images
Rigaud et al. Automatic segmentation using deep learning to enable online dose optimization during adaptive radiation therapy of cervical cancer
US7813535B2 (en) System and method for fused PET-CT visualization for heart unfolding
CN101076282B (zh) 移动目标的动态追踪
de Senneville et al. EVolution: an edge-based variational method for non-rigid multi-modal image registration
US7876938B2 (en) System and method for whole body landmark detection, segmentation and change quantification in digital images
Schaerer et al. Multi-dimensional respiratory motion tracking from markerless optical surface imaging based on deformable mesh registration
Lu et al. An integrated approach to segmentation and nonrigid registration for application in image-guided pelvic radiotherapy
Pernus 3D-2D registration of cerebral angiograms: A method and evaluation on clinical images
Burgos et al. Iterative framework for the joint segmentation and CT synthesis of MR images: application to MRI-only radiotherapy treatment planning
CN1408102A (zh) 图像自动重合/对齐的系统和方法
CN103370729A (zh) 轮廓引导的可变形图像配准
CN1299642C (zh) 一种基于互信息敏感区域的多模态医学图像配准方法
Sun et al. Synthesis of pseudo-CT images from pelvic MRI images based on an MD-CycleGAN model for radiotherapy
Moradi et al. Two solutions for registration of ultrasound to MRI for image-guided prostate interventions
Zhang et al. A kernel-based method for markerless tumor tracking in kV fluoroscopic images
Alam et al. Evaluation of medical image registration techniques based on nature and domain of the transformation
Chen et al. Real-time and multimodal brain slice-to-volume registration using CNN
Lei et al. Male pelvic CT multi-organ segmentation using synthetic MRI-aided dual pyramid networks
Baydoun et al. Dixon-based thorax synthetic CT generation using generative adversarial network
Chandra et al. Fast automated segmentation of multiple objects via spatially weighted shape learning
Li et al. Multiscale registration of medical images based on edge preserving scale space with application in image-guided radiation therapy
Bajger et al. 3D segmentation for multi-organs in CT images
Galdames et al. Registration of renal SPECT and 2.5 D US images

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20110323