CN102750692B - 结合多模态造影剂进行图像配准的方法 - Google Patents
结合多模态造影剂进行图像配准的方法 Download PDFInfo
- Publication number
- CN102750692B CN102750692B CN201210173575.4A CN201210173575A CN102750692B CN 102750692 B CN102750692 B CN 102750692B CN 201210173575 A CN201210173575 A CN 201210173575A CN 102750692 B CN102750692 B CN 102750692B
- Authority
- CN
- China
- Prior art keywords
- image
- magnetic resonance
- ultrasonic
- registration
- images
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Landscapes
- Magnetic Resonance Imaging Apparatus (AREA)
- Ultra Sonic Daignosis Equipment (AREA)
Abstract
本发明公开了一种结合多模态造影剂进行图像配准的方法，属于医学影像处理领域。本方法利用多模态造影剂进行超声和磁共振显影，在此基础上构建了超声图像与磁共振图像之间的空间变换模型。运用多尺度金字塔算法对构建的空间变换模型进行求解。配准过程中只要将重点部位选择为感兴趣区域。本方法能够提高超声影像和磁共振影像之间的配准效果，减少人工干预，可以处理参考图像和浮动图像间较大空间变化的情形。
Description
技术领域
本发明涉及一种结合多模态造影剂进行图像配准的方法，属于医学影像处理领域。
背景技术
超声成像可以连贯地、动态地观察脏器的运动和功能;可以追踪病变而不受其成像分层的限制; 是一种价格相对低廉， 普及面广的医学成像模式。虽然微气泡超声造影剂的出现提高了疾病诊断的准确性，但是超声诊断自身的分辨率和清晰度较低;气体对超声影响很大，患者容易受到肠气干扰等多方面因素影响; 整体空间位置不能够显示在同一图像中。磁共振成像具有软组织分辨力高、成像参数多、图像信息量大和无电离损害等优点，已在临床广泛应用。MRI造影剂能够进一步提高MRI诊断的敏感度和特异性，增强信号对比度和提高软组织的分辨率。但是MRI易产生伪影，同时MRI对钙化不敏感。各种影像技术本身由于各自在时空分辨率方面各有优缺点，因此没有任何一种成像方式可以完整地获取所有的生物信息， 所以临床医生迫切希望对不同图像信息进行适当的集成。然而不同模态的医学图像成像原理不同，分辨率不同，成像参数不同，因此在图像融合前必须先进行图像配准。
目前相关研究基本上集中于手术导航领域三维超声影像和CT影像、磁共振影像之间的配准，不论是基于特征的配准还是基于体素灰度信息的配准，在配准前对于超声影像、磁共振影像都要进行手工分割。配准效果直接取决于分割的效果，而对超声影像进行自动分割又是个不容易实现的任务， 配准过程人工干预过多。
微气泡造影剂是良好的超声波反射介质， 在诊断超声频率下(1-15MHZ)，微气泡在血管或病灶部位聚集后发生共振，产生比生物组织更强的回波信号，从而明显提高超声影像中目标的亮度， 即灰度值。超顺磁纳米颗粒正逐渐被用于新一代磁共振造影剂，超顺磁性氧化铁颗粒内的铁质子在磁场内能够重新排列，产生的净磁矩较顺磁性分子大许多，引起颗粒周围的磁场干扰，致使临近弥散的氢质子相位离散增加，T2弛豫率升高，在T2成像时表现为低信号，即降低T2成像的灰度值，是阴性造影剂。微气泡膜壳装载具有MRI显影增强能力的Fe3O4纳米颗粒的双模态造影剂，既能够增强超声显影亮度，即增强超声影像的灰度值， 同时也能降低磁共振T2成像的亮度， 即降低磁共振T2影像的灰度值。基于多模态造影剂的配准研究还没有相关文献发表，通过使用多模态造影剂，对超声影像和磁共振影像重点部位灰度加强，配准过程中只要将重点部位选择为感兴趣区域， 避免了分割难题。同时只需要这一步人工干预，就可以实现双模态影像之间的配准。
发明内容
本发明提出了一种结合多模态造影剂进行图像配准的方法，能够提高超声影像和磁共振影像之间的配准效果，可以处理具有较大空间变化的情形。
本发明为解决其技术问题采用如下技术方案：
一种结合多模态造影剂进行图像配准的方法，包括如下步骤：
（1）利用多模态造影剂进行超声和磁共振显影;
（2）在超声影像和磁共振影像选取感兴趣区域；
（3）对步骤（2）选取的感兴趣区域进行金字塔分解，对 像素的源图像和目标图像做高斯滤波和重采样，获得个像素的图像；重复上述过程， 分别得到个像素的图像， 个像素的图像；
（4）对金字塔分解后的超声影像和磁共振影像，首先从最低分辨率开始构建空间变换模型，求取变换向量， 接着利用变换向量对高一级分辨率图像进行旋转、平移、插值得到新的图像， 根据构建的空间变换模型重新计算新的变换向量； 重复此过程， 直到最高分辨率层为止；
（5）根据步骤（4）求得的最终变换向量，对超声影像进行变换，得到配准后的超声影像。
本发明的有益效果：
1、借助于多模态造影剂进行超声、磁共振两种模式成像，在此成像基础上运用空间变换模型结合金字塔算法对超声影像和磁共振影像进行配准融合。融合后的图像既具备超声影像的特点，又具备磁共振影像的优点。对于医学诊断，手术导航有着现实意义。
2、患者通过使用多模态造影剂，可以做不同方式的医学成像，节约患者就医时间，减少患者医疗费用。
附图说明
图1 基于多模态造影剂的超声影像与磁共振影像配准流程图。
图2 金字塔算法示意图。
具体实施方式
下面结合附图对本发明创造做进一步详细说明。
将具有MRI显影增强能力的Fe3O4纳米颗粒装载到微气泡膜壳材料上, 制备超声、磁共振多功能微气泡造影剂.使用多模态造影剂进行超声和磁共振成像，对超声影像和磁共振影像重点部位灰度加强，配准过程中只要将重点部位选择为感兴趣区域。配准的具体流程如图1所示：
（1）利用多模态造影剂进行超声和磁共振显影;
（2）在超声影像和磁共振影像选取感兴趣区域；
（3）对步骤（2）选取的感兴趣区域进行金字塔分解，对像素的源图像和目标图像做高斯滤波和重采样，获得个像素的图像；重复上述过程， 分别得到个像素的图像， 个像素的图像；
（4）对金字塔分解后的超声影像和磁共振影像，首先从最低分辨率开始构建空间变换模型，求取变换向量，接着利用变换向量对高一级分辨率图像进行旋转、平移、插值得到新的图像， 根据构建的空间变换模型重新计算新的变换向量； 重复此过程， 直到最高分辨率层为止；
（5）根据步骤（4）求得的最终变换向量，对超声影像进行变换，得到配准后的超声影像。
采用四层高斯金字塔算法对像素的源图像和目标图像做高斯滤波和重采样如图2所示， 获得个像素的图像。 重复上述过程，分别得到个像素的图像， 个像素的图像。对这些图像首先从最低分辨率开始构建空间变换模型求取变换向量，接着利用变换向量对高一级分辨率图像进行旋转、平移、插值得到新的图像，并重新计算新的变换向量。重复此过程，直到最高分辨率层为止。对配准后的超声影像和磁共振影像进行融合，融合影像既有配准后超声影像的特点, 也具备了磁共振影像的特点。
Claims (1)
1.一种结合多模态造影剂进行图像配准的方法，其特征在于，包括如下步骤：
（1）利用多模态造影剂进行超声和磁共振显影，所述的多模态造影剂为将具有MRI显影增强能力的Fe3O4纳米颗粒装载到微气泡膜壳材料上，制备超声、磁共振多功能微气泡造影剂;
（2）使用多模态造影剂进行超声和磁共振成像，对超声影像和磁共振影像重点部位灰度加强，配准过程中只要将重点部位选择为感兴趣区域；
（3）对步骤（2）选取的感兴趣区域进行金字塔分解，对 像素的超声影像和磁共振影像做高斯滤波和重采样，获得个像素的图像；重复上述过程，分别得到个像素的图像， 个像素的图像；
（4）对金字塔分解后的超声影像和磁共振影像，首先从最低分辨率开始构建空间变换模型，求取变换向量， 接着利用变换向量对高一级分辨率图像进行旋转、平移、插值得到新的图像， 根据变换后得到的新的高一级分辨率图像构建的空间变换模型重新计算新的变换向量； 重复此过程，直到最高分辨率层为止；
（5）根据步骤（4）求得的最终变换向量，对超声影像进行变换，得到配准后的超声影像。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201210173575.4A CN102750692B (zh) | 2012-05-31 | 2012-05-31 | 结合多模态造影剂进行图像配准的方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201210173575.4A CN102750692B (zh) | 2012-05-31 | 2012-05-31 | 结合多模态造影剂进行图像配准的方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN102750692A CN102750692A (zh) | 2012-10-24 |
| CN102750692B true CN102750692B (zh) | 2015-05-27 |
Family
ID=47030841
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201210173575.4A Active CN102750692B (zh) | 2012-05-31 | 2012-05-31 | 结合多模态造影剂进行图像配准的方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN102750692B (zh) |
Families Citing this family (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| EP2965263B1 (en) * | 2013-03-07 | 2022-07-20 | Bernhard Sturm | Multimodal segmentation in intravascular images |
| CN103426174B (zh) * | 2013-08-13 | 2016-04-13 | 中国科学院深圳先进技术研究院 | 多模态医学影像配准方法 |
| CN107301621B (zh) * | 2017-06-13 | 2020-06-16 | 东南大学 | 一种提高数字图像分辨率的方法 |
| CN109360181B (zh) * | 2018-10-29 | 2020-07-24 | 中惠医疗科技（上海）有限公司 | 超声图像与核磁图像融合方法和系统 |
| US10842445B2 (en) * | 2018-11-08 | 2020-11-24 | General Electric Company | System and method for unsupervised deep learning for deformable image registration |
| CN109978882A (zh) * | 2019-04-09 | 2019-07-05 | 中康龙马(北京)医疗健康科技有限公司 | 一种基于多模态融合的医疗影像目标检测方法 |
| CN110298871A (zh) * | 2019-06-10 | 2019-10-01 | 东软医疗系统股份有限公司 | 图像配准方法及装置 |
| US10957010B2 (en) * | 2019-08-07 | 2021-03-23 | General Electric Company | Deformable registration for multimodal images |
| CN111932443B (zh) * | 2020-07-16 | 2024-04-02 | 江苏师范大学 | 多尺度表达结合造影剂提升超声与磁共振配准精度的方法 |
Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN1951506A (zh) * | 2006-11-02 | 2007-04-25 | 东南大学 | 超声磁共振联合造影剂及其制备方法 |
Family Cites Families (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101080746B (zh) * | 2004-12-15 | 2012-07-04 | 皇家飞利浦电子股份有限公司 | 多模态图像的配准 |
-
2012
- 2012-05-31 CN CN201210173575.4A patent/CN102750692B/zh active Active
Patent Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN1951506A (zh) * | 2006-11-02 | 2007-04-25 | 东南大学 | 超声磁共振联合造影剂及其制备方法 |
Non-Patent Citations (4)
| Title |
|---|
| Image registration methods: a survey;Barbara Zitova等;《Image and Vision Computing》;20031031;第21卷(第11期);第977-1000页 * |
| Medical image registration with partial data;Senthil Periaswamy等;《Medical Image Analysis》;20060630;第10卷(第3期);第452-464页 * |
| 医学图像配准技术;张剑戈等;《上海第二医科大学学报》;20030228;第23卷(第2期);第180-182页 * |
| 基于小波变换的医学图像增强和配准技术研究;孙丽媛;《中国优秀硕士学位论文全文数据库信息科技辑》;20120415(第4期);第14-17页及第37-42页 * |
Also Published As
| Publication number | Publication date |
|---|---|
| CN102750692A (zh) | 2012-10-24 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN102750692B (zh) | 结合多模态造影剂进行图像配准的方法 | |
| Chen et al. | Medical image segmentation and reconstruction of prostate tumor based on 3D AlexNet | |
| Liang et al. | Sketch guided and progressive growing GAN for realistic and editable ultrasound image synthesis | |
| JP5902317B2 (ja) | 磁気共鳴イメージング装置および定量的磁化率マッピング法 | |
| Wang et al. | Semi-supervised mp-MRI data synthesis with StitchLayer and auxiliary distance maximization | |
| WO2013086580A1 (en) | Method and apparatus for the assessment of medical images | |
| JP2017108789A (ja) | 画像処理装置 | |
| Li et al. | High-resolution pelvic MRI reconstruction using a generative adversarial network with attention and cyclic loss | |
| Cygan et al. | Left ventricle phantom and experimental setup for MRI and echocardiography–Preliminary results of data acquisitions | |
| Schoen et al. | Morphological reconstruction improves microvessel mapping in super-resolution ultrasound | |
| Kubassova et al. | Fast and robust analysis of dynamic contrast enhanced MRI datasets | |
| Firjani et al. | MRI-based diagnostic system for early detection of prostate cancer | |
| JP2012125554A (ja) | 磁気共鳴診断装置、および、磁気共鳴スペクトロスコピーのデータ収集方法 | |
| Hou et al. | Magnetic microbubble-mediated ultrasound-MRI registration based on robust optical flow model | |
| Liu et al. | Attention Based Cross-Domain Synthesis and Segmentation From Unpaired Medical Images | |
| Carminati et al. | Reconstruction of the descending thoracic aorta by multiview compounding of 3-d transesophageal echocardiographic aortic data sets for improved examination and quantification of atheroma burden | |
| Chen et al. | Preserving-texture generative adversarial networks for fast multi-weighted MRI | |
| Gupta et al. | Improving DTI resolution from a single clinical acquisition: a statistical approach using spatial prior | |
| CN111932443A (zh) | 多尺度表达结合造影剂提升超声与磁共振配准精度的方法 | |
| Song et al. | Uni-coal: A unified framework for cross-modality synthesis and super-resolution of mr images | |
| CN104399091B (zh) | 超声/磁共振双模态造影剂、其制备方法与应用 | |
| Khalvati et al. | Enhanced dual-stage correlated diffusion imaging | |
| Li et al. | Acceleration of cerebral blood flow and arterial transit time maps estimation from multiple post-labeling delay arterial spin-labeled MRI via deep learning | |
| Ye et al. | A Bayesian approach to fiber orientation estimation guided by volumetric tract segmentation | |
| Raza et al. | CycleGAN with mutual information loss constraint generates structurally aligned CT images from functional EIT images |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| C14 | Grant of patent or utility model | ||
| GR01 | Patent grant |