CN114145719B - 双模冠脉血管图像三维融合的方法和融合系统 - Google Patents

双模冠脉血管图像三维融合的方法和融合系统 Download PDF

Info

Publication number
CN114145719B
CN114145719B CN202210117924.4A CN202210117924A CN114145719B CN 114145719 B CN114145719 B CN 114145719B CN 202210117924 A CN202210117924 A CN 202210117924A CN 114145719 B CN114145719 B CN 114145719B
Authority
CN
China
Prior art keywords
image
blood vessel
mode
ivus
oct
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202210117924.4A
Other languages
English (en)
Other versions
CN114145719A (zh
Inventor
武西宁
赵士勇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tianjin Hengyu Medical Technology Co ltd
Original Assignee
Tianjin Hengyu Medical Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tianjin Hengyu Medical Technology Co ltd filed Critical Tianjin Hengyu Medical Technology Co ltd
Priority to CN202210117924.4A priority Critical patent/CN114145719B/zh
Publication of CN114145719A publication Critical patent/CN114145719A/zh
Application granted granted Critical
Publication of CN114145719B publication Critical patent/CN114145719B/zh
Priority to PCT/CN2022/120827 priority patent/WO2023151280A1/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0062Arrangements for scanning
    • A61B5/0066Optical coherence imaging
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/08Detecting organic movements or changes, e.g. tumours, cysts, swellings
    • A61B8/0891Detecting organic movements or changes, e.g. tumours, cysts, swellings for diagnosis of blood vessels
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/12Diagnosis using ultrasonic, sonic or infrasonic waves in body cavities or body tracts, e.g. by using catheters
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/52Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/5215Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of medical diagnostic data
    • A61B8/5238Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of medical diagnostic data for combining image data of patient, e.g. merging several images from different acquisition modes into one image
    • A61B8/5246Devices using data or image processing specially adapted for diagnosis using ultrasonic, sonic or infrasonic waves involving processing of medical diagnostic data for combining image data of patient, e.g. merging several images from different acquisition modes into one image combining images from the same or different imaging techniques, e.g. color Doppler and B-mode

Abstract

本发明公开了一种双模冠脉血管图像三维融合的方法和融合系统,利用血管导管,获取OCT模式下的血管图像和IVUS模式下的血管图像以及血管的CAG图像;根据所述CAG图像,提取CAG图像中的血管三维骨架,并根据所述血管三维骨架拟合得出血管中心线;将所述血管中心线作为导管回撤路径,将OCT模式下的血管图像和IVUS模式下的血管图像分别映射到血管导管回撤路径的相应位置上,完成图像映射;将映射后的图像进行OCT模式和IVUS模式的三维融合;充分发挥三维CAG图像空间上的优势以及IVUS的强组织穿透力和OCT高分辨率的优势,便能够获得血管壁和冠状动脉粥样硬化斑块更加全面的信息,从而为冠心病的计算机辅助诊治和对介入治疗效果的评价等提供更为有效的依据。

Description

双模冠脉血管图像三维融合的方法和融合系统
技术领域
本发明涉及血管成像技术领域,尤其涉及双模冠脉血管图像三维融合的方法。
背景技术
全球范围内,心脑血管疾病已经成为了威胁人类健康的主要疾病之一,冠状动脉粥样硬化是心脑血管疾病的主要病因。X射线冠状动脉造影(coronary angiography,CAG)、血管内超声(intravascular ultrasound,IVUS)和光学相干断层成像(optical coherencetomography,OCT) 是当前诊断心脑血管疾病的主要影像学技术。该影像学技术只能提供二维的平面图像信息,并不能直观的反映实际的空间情况。由于二维图像的种种局限性,医学图像的三维重建和可视化已成为目前的研究热点。
CAG 通过静止或动态观察造影剂的充盈和消失情况来判断血管解剖学形态异常的部位、性质和程度。它不仅能对冠状动脉的结构和血管狭窄进行客观诊断,而且还能实现病变的量化描述,通过三维重建可以获得具有空间形态结构的三维骨架,便于直接观察。但是,该重建结果仅描述了血管内腔的空间位置和形态,无法得到管腔截面的形态和硬化斑块的弥漫程度及组成。
IVUS 和OCT的成像原理相似,都是采用能量束在血管腔中进行360°扫描,获得管腔横截面图像,且两者具有优势互补的特点。IVUS由于利用的是超声波的反射现象,因此有利于显示深部结构,即探测深度较深,但对微细结构图像的分辨率却受限。OCT的分辨率较高,轴向分辨率大概是IVUS的10~20倍,但其穿透组织的能力明显不如IVUS。对OCT和IVUS图像进行三维重建,能够很好地表现动脉血管壁复杂的解剖结构,并且各具优势。传统的IVUS和OCT三维重建是把一系列的图像按采集顺序叠加起来形成一个三维直血管段。由于IVUS和OCT本身不能提供每一帧图像的空间几何信息,因此这种方法没有考虑在图像获取过程中导管的弯曲和扭曲,其结果也是不准确的。
发明内容
因此,本发明的目的在于提供一种双模冠脉血管图像三维融合方法及系统,同时融合了OCT和IVUS两种冠脉检查技术,在CAG 图像基础上,能进一步对血管的壁厚和血管内斑块的大小或形态,进行进一步准确的判断,在一次血管导管置入的过程中,能实现多个指标的监测,节约检测时间,检测结果更准确。
为了实现上述目的,本发明的一种双模冠脉血管图像一种双模冠脉血管图像三维融合的方法,包括以下步骤:
S1、利用血管导管,获取OCT模式下的血管图像和IVUS模式下的血管图像;
S2、在血管导管回撤的过程中,获取血管的CAG图像;
S3、根据所述CAG图像,提取CAG图像中的血管三维骨架,并根据所述血管三维骨架拟合得出血管中心线;
S4、将所述血管中心线作为导管回撤路径,将OCT模式下的血管图像和IVUS模式下的血管图像分别映射到血管导管回撤路径的相应位置上,完成图像映射;
S5、将映射后的图像进行OCT模式和IVUS模式的三维融合。
进一步优选的,在S1中,所述获取血管导管的OCT模式下的血管图像和IVUS模式下的血管图像时,包括同步采集模式和异步切换模式;所述同步采集模式为同时获取的OCT模式下的血管图像和IVUS模式下的血管图像的工作模式;所述异步切换模式为OCT模式和IVUS模式切换采集图像的工作模式。
进一步优选的,在S2中还包括,对获取的CAG图像进行预处理,所述预处理包括如下步骤:
S201、对获取的CAG图像进行中值滤波,滤除图像中的噪声,并采用直方图进行均衡化处理,提高图像的对比度;
S202、对均衡化处理后的图像进行多尺度Frangi滤波,对不同尺度大小的血管进行边缘增强,得到增强图像;
S203、对所述增强图像进行细化处理,消除垂直走向和面积小于预设阈值的血管分支。
进一步优选的,在S3中,所述根据CAG图像,提取CAG图像中的血管三维骨架,并根据所述血管三维骨架拟合得出血管中心线时,包括以下方法:
将血管导管回撤的过程,获取的CAG图像,按照采集时间进行顺序叠放,将叠放后CAG图像,采用B 样条曲线拟合的方法,得出三维拟合曲线,作为血管三维骨架;
以血管导管回撤的初始时刻选取的参考点,作为坐标原点,建立三维坐标系,计算所述三维拟合曲线的三维坐标;
根据三维拟合曲线的三维坐标,计算三维拟合曲线的中心线的坐标。
根据所述中心线的坐标,拟合得出血管中心线。
进一步优选的,在S4中,将OCT模式下的血管图像和IVUS模式下的血管图像分别映射到回撤血管路径的相应位置上,完成图像映射,具体包括如下步骤:
将所述血管中心线作为导管回撤路径,根据采样频率计算图像间距,确定每个OCT模式下的血管图像和IVUS模式下的血管图像的轴向位置;
建立微分几何模型,确定图像序列的角度,得到得OCT模式下的血管图像和IVUS模式下的血管图像沿导管回撤路径的排列结果;
将所述排列结果,作为OCT模式下的血管图像和IVUS模式下的血管图像,在导管回撤路径上的映射结果,完成图像映射。
进一步优选的,在S5中,OCT模式和IVUS模式三维融合,包括如下步骤:
以OCT模式下的血管图像作为参考图像,IVUS模式下的血管图像作为待配准图像,计算互信息公式;
根据互信息公式中目标函数取得最大值时对应的最优变换参数,对OCT模式下的血管图像和IVUS模式下的血管图像进行融合。
进一步优选的,所述互信息公式按照如下公式表示:
Figure 112454DEST_PATH_IMAGE001
其中,向量X为原图像的坐标;向量Y为变换后的目标图像坐标;S为比例因子;T为平移矩阵;R为旋转矩阵。
进一步优选的,还包括,所述互信息公式中的变换参数,按照以下步骤进行优化:
分别获取参考图像采样点和待配准图像采样点,计算参考图像采样点和待配准图像采样点,融合时对应的变换参数;
提高采样频率,将当前分辨率下的配准结果作为下一分辨率下优化的起始点以减小变换参数的搜索范围,最终得到最优的变换参数。
本发明还提供一种双模冠脉血管图像三维融合系统,包括血管导管、OCT检测探头、IVUS检测探头和数据处理模块;
所述血管导管用于搭载OCT检测探头或IVUS检测探头,获取OCT模式下的血管图像和IVUS模式下的血管图像;在回撤的过程中,获取血管的CAG图像;
所述数据处理模块,用于根据所述CAG图像,提取CAG图像中的血管三维骨架,并根据所述血管三维骨架拟合得出血管中心线;将所述血管中心线作为导管回撤路径,将OCT模式下的血管图像和IVUS模式下的血管图像分别映射到血管导管回撤路径的相应位置上,完成图像映射;将映射后的图像进行OCT模式和IVUS模式的三维融合。
进一步优选的,所述血管导管中同时集成OCT光学探头与IVUS换能器;所述OCT光学探头与IVUS换能器的数据输出口呈180°。
本发明公开了一种双模冠脉血管图像三维融合的方法及系统,相比于现有技术,至少具有以下优点:
本申请同时集成了OCT模式和IVUS模式两种检测方式,将映射后的图像进行OCT模式和IVUS模式的三维融合;充分发挥三维CAG图像空间上的优势以及IVUS的强组织穿透力和OCT高分辨率的优势,便能够获得血管壁和冠状动脉粥样硬化斑块更加全面的信息,从而为冠心病的计算机辅助诊治和对介入治疗效果的评价等提供更为有效的依据。
本申请提供的融合方法,融合以后的三维血管图像不仅具有较高的分辨率,而且具有较深的探测深度,并且能够反映血管真实的空间位置,将三者的优势互补,弥补了单一信息源的不足,从而为冠心病的计算机辅助诊治和对介入治疗效果的评价等提供更为有效和直观的依据。
附图说明
图1为本发明的方法流程示意图;
图2为依据CAG三维重建结果重排图像序列的示意图;
图3为OCT融合CAG三维重建结果的某角度示意图;
图4为OCT融合CAG三维重建结果的另一角度示意图;
图5为IVUS融合CAG三维重建的结果的某角度示意图
图6为IVUS融合CAG三维重建的结果的另一角度示意图;
图7为基于互信息的三维配准的流程示意图;
图8为OCT和IVUS三维融合结果的某角度示意图;
图9为OCT和IVUS三维融合结果的另一角度示意图。
具体实施方式
以下通过附图和具体实施方式对本发明作进一步的详细说明。
如图1所示,本发明一方面实施例提供的一种双模冠脉血管图像一种双模冠脉血管图像三维融合的方法,包括以下步骤:
S1、利用血管导管,获取OCT模式下的血管图像(以下简称OCT图像)和IVUS模式下的血管图像(以下简称IVUS图像);
S2、在血管导管回撤的过程中,获取血管的CAG图像;
进一步优选的,在S1中,所述获取血管导管的OCT模式下的血管图像和IVUS模式下的血管图像时,包括同步采集模式和异步切换模式;所述同步采集模式为同时获取的OCT模式下的血管图像和IVUS模式下的血管图像的工作模式;所述异步切换模式为OCT模式和IVUS模式切换采集图像的工作模式。
需要说明的是,OCT和IVUS血管图像的获取是从OCT-US双模成像系统中实时采集的数据,显示血管壁的结构形态,CAG造影则同步显示探头在管腔内的部位。在 CAG 中发现可疑血管后,向目标血管内注入硝酸甘油,在X射线透视图像的指导下将导管穿越病变部位,到达血管远端,将探头与成像仪连接去除伪影后,经马达控制匀速回撤导管,并记录图像。CAG 图像的采集,采用仅在导管回撤路径的起点拍摄一对角度近似垂直的造影图像。
进一步优选的,在S2中还包括,对获取的CAG图像进行预处理,所述预处理包括如下步骤:
S201、对获取的CAG图像进行中值滤波,滤除图像中的噪声,并采用直方图进行均衡化处理,提高图像的对比度;
S202、对均衡化处理后的图像进行多尺度Frangi滤波,对不同尺度大小的血管进行边缘增强,得到增强图像;
S203、对所述增强图像进行细化处理,消除垂直走向和面积小于预设阈值的血管分支。
S3、根据所述CAG图像,提取CAG图像中的血管三维骨架,并根据所述血管三维骨架拟合得出血管中心线;
进一步在S3中,所述根据CAG图像,提取CAG图像中的血管三维骨架,并根据所述血管三维骨架拟合得出血管中心线时,包括以下方法:
将血管导管回撤的过程,获取的CAG图像,按照采集时间进行顺序叠放,将叠放后CAG图像,采用B 样条曲线拟合的方法,得出三维拟合曲线,作为血管三维骨架;
以血管导管回撤的初始时刻选取的参考点,作为坐标原点,建立三维坐标系,血管中心线的三维重建运用外极线匹配和血管拓扑特性相结合的方法匹配血管段,同时求出血管骨架点的三维坐标。
根据三维拟合曲线的三维坐标,计算三维拟合曲线的中心线的坐标。
根据所述中心线的坐标,拟合得出血管中心线。
S4、将所述血管中心线作为导管回撤路径,将OCT模式下的血管图像和IVUS模式下的血管图像分别映射到血管导管回撤路径的相应位置上,完成图像映射;
进一步优选的,将OCT模式下的血管图像和IVUS模式下的血管图像分别映射到回撤血管路径的相应位置上,完成图像映射,具体包括如下步骤:
将所述血管中心线作为导管回撤路径,根据采样频率计算图像间距,确定每个OCT模式下的血管图像和IVUS模式下的血管图像的轴向位置;
建立微分几何模型,确定图像序列的角度,具体包括以下步骤:
根据提取的血管中心线建立曲线参数方程:
Figure 764015DEST_PATH_IMAGE002
t 为参数,a和b为根据中心线长度设置的起始和终止范围,设
Figure 822713DEST_PATH_IMAGE003
是曲线上的任 意点,简称
Figure 749081DEST_PATH_IMAGE004
点。
Figure 360191DEST_PATH_IMAGE005
是其邻点。两点决定向量:
Figure 917074DEST_PATH_IMAGE006
那么
Figure 715266DEST_PATH_IMAGE007
是曲线C 在
Figure 461636DEST_PATH_IMAGE008
的切向量。
那么同理,可得到
Figure 661673DEST_PATH_IMAGE009
所有图像在曲线切向方向的向量, 根据向量方向,可以确定每个图像的角度。
得到得OCT模式下的血管图像和IVUS模式下的血管图像沿导管回撤路径的排列结果;
将所述排列结果,作为OCT模式下的血管图像和IVUS模式下的血管图像,在导管回撤路径上的映射结果,完成图像映射。
在本申请的一个具体实施例中,在进行图像映射时包括:
首先,对获得的OCT图像和IVUS图像预处理。
双模成像系统在获取血管图像的过程中会受到噪声的污染,必须对获取的血管图像作去噪处理。在本实施案例中,优选3*3大小的中值滤波器对图像进行去噪。为了提高信噪比,尖锐图像边缘,再将图像灰度线性拉伸至0~255。
其次,确定各帧OCT图像和IVUS图像在三维回撤路径中的轴向位置。
本发明提出的双模成像系统是以恒定速率回撤成像导管,且采样速率为恒定参数,那么OCT和IVUS图像序列就是沿着导丝等间距分布的,从而确定了各帧图像的轴向位置。
最后,利用建立微分几何模型的方法确定图像序列的角度,从而获得OCT和IVUS图像序列沿三维导管路径的排列结果,其示意图如图2所示。
优选的,还包括采用光线投射体渲染方法对序列重排后的OCT图像和IVUS图像分别进行三维重建,重建后的图像不仅可以看到真实的血管内窥结构信息,而且能够反映血管真实的空间形态,OCT图像和IVUS三维重建后的结果分别如图3、图4、图5、图6所示。
S5、将映射后的图像进行OCT模式和IVUS模式的三维融合。
进一步优选的,在S5中,OCT模式和IVUS模式三维融合,包括如下步骤:
以OCT模式下的血管图像作为参考图像,IVUS模式下的血管图像作为待配准图像,计算互信息公式;
根据互信息公式中目标函数取得最大值时对应的最优变换参数,对OCT模式下的血管图像和IVUS模式下的血管图像进行融合。
在本实施案例中,优选采用基于互信息的三维融合方法。基于互信息的三维融合方法本质上是一个多参数优化问题,其目的是求取目标函数取得最大值时对应的变换参数。传统的刚体变换包括平移、旋转矩阵,分别以T、R表示,本发明中通过增加比例因子S解决弹性配准问题。
互信息公式按照如下公式表示:
Figure 389458DEST_PATH_IMAGE010
(1)
S、R和T分别为:
Figure 674946DEST_PATH_IMAGE011
(2)
Figure 208695DEST_PATH_IMAGE012
(3)
Figure 748392DEST_PATH_IMAGE013
(4)
其中,向量X为原图像的坐标;向量Y为变换后的目标图像坐标;S为比例因子;T为平移矩阵;R为旋转矩阵。
所述互信息公式中的变换参数,按照以下步骤进行优化:
分别获取参考图像采样点和待配准图像采样点,计算参考图像采样点和待配准图像采样点,融合时对应的变换参数;
提高采样频率,将当前分辨率下的配准结果作为下一分辨率下优化的起始点以减小变换参数的搜索范围,最终得到最优的变换参数。
如图7所示,在一个具体实施例中,在配准的过程中,OCT图像作为参考图像,IVUS图像为待配准图像;具体图像配准过程如下,读取OCT和IVUS三维图像数据,设置几何搜索空间位置的起始参数(通常设置为9个),设置采样步长,通过优化搜索最大互信息的值,得到优化的结果参数,在当前参数下可选的进行三维图像融合,融合后判断是否进行更精确的配准,判断结果为否则结束配准,若为是,则保存当前参数,并重新调整几何搜索的空间的起始参数,设置采样补偿,重复上述步骤。多参数优化的方法可以采用Powell算法,亦可采用模拟退火、遗传算法等。由于庞大的3D体数据极大地增加了计算的负担,因此只采用部分数据点来计算图像的直方图。对源图进行 M×N×L 的间隔进行采样,计算互信息,然后逐步提高采样率,将当前分辨率下的配准结果作为下一分辨率下优化的起始点以减小变换参数的搜索范围,从而达到减少迭代次数提高配准速度的效果。经过几种采样率下由粗糙到精细进行配准,最终得到最优的变换参数,最后在最优参数下进行融合。最终的结果如图8和图9所示。
本发明还提供一种双模冠脉血管图像三维融合系统,用于实施上述方法,包括血管导管、OCT检测探头、IVUS检测探头和数据处理模块;
所述血管导管用于搭载OCT检测探头或IVUS检测探头,获取OCT模式下的血管图像和IVUS模式下的血管图像;在回撤的过程中,获取血管的CAG图像。
OCT和IVUS血管图像的获取是从OCT-US双模成像系统中实时采集的数据,显示血管壁的结构形态,CAG造影则同步显示探头在管腔内的部位。在 CAG 中发现可疑血管后,向目标血管内注入硝酸甘油,在X射线透视图像的指导下将导管穿越病变部位,到达血管远端,将探头与成像仪连接去除伪影后,经马达控制匀速回撤导管,并记录图像。CAG 图像的采集,采用仅在导管回撤路径的起点拍摄一对角度近似垂直的造影图像。
所述数据处理模块,用于根据所述CAG图像,提取CAG图像中的血管三维骨架,并根据所述血管三维骨架拟合得出血管中心线;将所述血管中心线作为导管回撤路径,将OCT模式下的血管图像和IVUS模式下的血管图像分别映射到血管导管回撤路径的相应位置上,完成图像映射;将映射后的图像进行OCT模式和IVUS模式的三维融合。
进一步优选的,所述血管导管中同时集成OCT光学探头与IVUS换能器;所述OCT光学探头与IVUS换能器的数据输出口呈180°。
在本发明提出的OCT-US双模成像系统中,采用的是单个导管,在同一个导管内,OCT光学探头与IVUS换能器背靠背固定在金属帽内,背靠背的设计即在同一轴向位置的声光出口相距180°,OCT的帧率为180帧/s,回撤速度为20mm/s,图像大小为1024*1024;IVUS的帧率为30帧/s,回撤速度为0.5mm/s,图像大小为1024*1024。本实施案例中,为了保证数据采集的同步性和一致性,采用一次回撤同时采集OCT和IVUS图像数据的方法,根据需要对感兴趣局部血管段,进行1mm/s速度回撤,回撤时间3s。因此,在相同3mm的血管段中,OCT将会产生540帧图像,而IVUS将会产生90帧图像。
显然,上述实施例仅是为清楚地说明所作的举例,而并非对实施方式的限定。对于所属领域的普通技术人员来说,在上述说明的基础上还可以做出其它不同形式的变化或变动。这里无需也无法对所有的实施方式予以穷举。而由此所引伸出的显而易见的变化或变动仍处于本发明创造的保护范围之中。

Claims (9)

1.一种双模冠脉血管图像三维融合的方法,其特征在于,包括以下步骤:
S1、利用血管导管,获取OCT模式下的血管图像和IVUS模式下的血管图像;
S2、在血管导管回撤的过程中,获取血管的CAG图像;
S3、根据所述CAG图像,提取CAG图像中的血管三维骨架,并根据所述血管三维骨架拟合得出血管中心线;
S4、将所述血管中心线作为导管回撤路径,将OCT模式下的血管图像和IVUS模式下的血管图像分别映射到血管导管回撤路径的相应位置上,完成图像映射;具体包括如下步骤:
将所述血管中心线作为导管回撤路径,根据采样频率计算图像间距,确定每个OCT模式下的血管图像和IVUS模式下的血管图像的轴向位置;
建立微分几何模型,计算图像在曲线的切向方向的向量,根据每个图像在所述切向方向的向量,确定每个图像的角度;
根据每个图像的轴向位置和角度,得到得OCT模式下的血管图像和IVUS模式下的血管图像沿导管回撤路径的排列结果;
将所述排列结果,作为OCT模式下的血管图像和IVUS模式下的血管图像,在导管回撤路径上的映射结果,完成图像映射;
S5、将映射后的图像进行OCT模式和IVUS模式的三维融合。
2.根据权利要求1所述的双模冠脉血管图像三维融合的方法,其特征在于,在S1中,获取所述OCT模式下的血管图像和IVUS模式下的血管图像时,包括同步采集模式和异步切换模式;所述同步采集模式为同时获取的OCT模式下的血管图像和IVUS模式下的血管图像的工作模式;所述异步切换模式为OCT模式和IVUS模式切换采集图像的工作模式。
3.根据权利要求1所述的双模冠脉血管图像三维融合的方法,其特征在于,在S2中还包括,对获取的CAG图像进行预处理,所述预处理包括如下步骤:
S201、对获取的CAG图像进行中值滤波,滤除图像中的噪声,并采用直方图进行均衡化处理,提高图像的对比度;
S202、对均衡化处理后的图像进行多尺度Frangi滤波,对不同尺度大小的血管进行边缘增强,得到增强图像;
S203、对所述增强图像进行细化处理,消除垂直走向和面积小于预设阈值的血管分支。
4.根据权利要求1所述的双模冠脉血管图像三维融合的方法,其特征在于,在S3中,根据所述CAG图像,提取CAG图像中的血管三维骨架,并根据所述血管三维骨架拟合得出血管中心线时,包括以下方法:
将血管导管回撤的过程,获取的CAG图像,按照采集时间进行顺序叠放,将叠放后CAG图像,采用B 样条曲线拟合的方法,得出三维拟合曲线,作为血管三维骨架;
以血管导管回撤的初始时刻选取的参考点,作为坐标原点,建立三维坐标系,计算所述三维拟合曲线的三维坐标;
根据三维拟合曲线的三维坐标,计算三维拟合曲线的中心线的坐标;
根据所述中心线的坐标,拟合得出血管中心线。
5.根据权利要求1所述的双模冠脉血管图像三维融合的方法,其特征在于,在S5中,OCT模式和IVUS模式三维融合,包括如下步骤:
以OCT模式下的血管图像作为参考图像,IVUS模式下的血管图像作为待配准图像;计算互信息公式;
根据互信息公式中目标函数取得最大值时对应的最优变换参数,对OCT模式下的血管图像和IVUS模式下的血管图像进行融合。
6.根据权利要求5所述的双模冠脉血管图像三维融合的方法,其特征在于,所述互信息公式按照如下公式表示:
Figure 42233DEST_PATH_IMAGE002
其中,向量X为原图像的坐标;向量Y为变换后的目标图像坐标;S为比例因子;T为平移矩阵;R为旋转矩阵。
7.根据权利要求5所述的双模冠脉血管图像三维融合的方法,其特征在于,
还包括,所述互信息公式中的变换参数,按照以下步骤进行优化:
分别获取参考图像采样点和待配准图像采样点,计算参考图像采样点和待配准图像采样点,融合时对应的变换参数;
提高采样频率,将当前分辨率下的配准结果作为下一分辨率下优化的起始点以减小变换参数的搜索范围,最终得到最优的变换参数。
8.一种双模冠脉血管图像三维融合系统,其特征在于,包括血管导管、OCT检测探头、IVUS检测探头和数据处理模块;
所述血管导管用于搭载OCT检测探头或IVUS检测探头,获取OCT模式下的血管图像和IVUS模式下的血管图像;在回撤的过程中,获取血管的CAG图像;
所述数据处理模块,用于根据所述CAG图像,提取CAG图像中的血管三维骨架,并根据所述血管三维骨架拟合得出血管中心线;将所述血管中心线作为导管回撤路径,将OCT模式下的血管图像和IVUS模式下的血管图像分别映射到血管导管回撤路径的相应位置上,完成图像映射;具体映射过程如下:
将所述血管中心线作为导管回撤路径,根据采样频率计算图像间距,确定每个OCT模式下的血管图像和IVUS模式下的血管图像的轴向位置;
建立微分几何模型,计算图像在曲线的切向方向的向量,根据每个图像在所述切向方向的向量,确定每个图像的角度;
根据每个图像的轴向位置和角度,得到得OCT模式下的血管图像和IVUS模式下的血管图像沿导管回撤路径的排列结果;
将所述排列结果,作为OCT模式下的血管图像和IVUS模式下的血管图像,在导管回撤路径上的映射结果,完成图像映射;
将映射后的图像进行OCT模式和IVUS模式的三维融合。
9.根据权利要求8所述的一种双模冠脉血管图像三维融合系统,其特征在于,所述血管导管中同时集成OCT光学探头与IVUS换能器;所述OCT光学探头与IVUS换能器的数据输出口呈180°。
CN202210117924.4A 2022-02-08 2022-02-08 双模冠脉血管图像三维融合的方法和融合系统 Active CN114145719B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN202210117924.4A CN114145719B (zh) 2022-02-08 2022-02-08 双模冠脉血管图像三维融合的方法和融合系统
PCT/CN2022/120827 WO2023151280A1 (zh) 2022-02-08 2022-09-23 双模冠脉血管图像三维融合的方法和融合系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210117924.4A CN114145719B (zh) 2022-02-08 2022-02-08 双模冠脉血管图像三维融合的方法和融合系统

Publications (2)

Publication Number Publication Date
CN114145719A CN114145719A (zh) 2022-03-08
CN114145719B true CN114145719B (zh) 2022-04-26

Family

ID=80450259

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210117924.4A Active CN114145719B (zh) 2022-02-08 2022-02-08 双模冠脉血管图像三维融合的方法和融合系统

Country Status (2)

Country Link
CN (1) CN114145719B (zh)
WO (1) WO2023151280A1 (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114145719B (zh) * 2022-02-08 2022-04-26 天津恒宇医疗科技有限公司 双模冠脉血管图像三维融合的方法和融合系统
CN114596311B (zh) * 2022-04-22 2022-08-12 深圳科亚医疗科技有限公司 基于血管图像的血管功能评估方法和血管功能评估装置
CN114820600B (zh) * 2022-06-27 2022-09-27 天津恒宇医疗科技有限公司 基于oct图像的冠脉血管内支架检测方法及检测系统
CN115272447B (zh) * 2022-09-29 2022-12-20 全景恒升(北京)科学技术有限公司 基于多模态影像的血流储备分数计算方法、装置及设备

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102005037427A1 (de) * 2005-08-08 2007-02-15 Siemens Ag Verfahren zur Erfassung und Auswertung von vaskulären Untersuchungsdaten
CN101283929B (zh) * 2008-06-05 2010-06-16 华北电力大学 一种血管三维模型的重建方法
CN101422352B (zh) * 2008-12-10 2011-07-13 华北电力大学(保定) 一种交互式冠状动脉虚拟血管镜的实现方法
US9351698B2 (en) * 2013-03-12 2016-05-31 Lightlab Imaging, Inc. Vascular data processing and image registration systems, methods, and apparatuses
AU2013387679B2 (en) * 2013-03-12 2018-07-05 Lightlab Imaging, Inc. Vascular data processing and image registration systems, methods, and apparatuses
CN107392994B (zh) * 2017-06-30 2018-11-06 深圳大学 冠脉血管的三维重建方法、装置、设备及存储介质
CN108852417A (zh) * 2018-07-25 2018-11-23 北京博纵科技有限公司 一种内窥成像的光学超声双导管系统及其工作方法
WO2020077381A1 (en) * 2018-10-17 2020-04-23 The University Of Melbourne Coronary evaluation system and process
CN110889896B (zh) * 2019-11-11 2024-03-22 苏州润迈德医疗科技有限公司 获取血管狭窄病变区间及三维合成方法、装置和系统
EP3884868A1 (en) * 2020-03-26 2021-09-29 Pie Medical Imaging BV Method and system for registering intra-object data with extra-object data
CN111667447A (zh) * 2020-06-05 2020-09-15 全景恒升(北京)科学技术有限公司 血管内图像融合方法、系统及图像采集装置
CN112669449A (zh) * 2020-12-31 2021-04-16 浙江理工大学 基于3d重建技术的cag和ivus精准联动分析方法及系统
CN113160189A (zh) * 2021-04-27 2021-07-23 中国科学院深圳先进技术研究院 血管中心线提取方法、装置、设备及存储介质
CN113724377B (zh) * 2021-11-01 2022-03-11 杭州晟视科技有限公司 冠脉血管的三维重建方法、装置、电子设备及存储介质
CN114145719B (zh) * 2022-02-08 2022-04-26 天津恒宇医疗科技有限公司 双模冠脉血管图像三维融合的方法和融合系统

Also Published As

Publication number Publication date
WO2023151280A1 (zh) 2023-08-17
CN114145719A (zh) 2022-03-08

Similar Documents

Publication Publication Date Title
CN114145719B (zh) 双模冠脉血管图像三维融合的方法和融合系统
US7359554B2 (en) System and method for identifying a vascular border
CN101422352B (zh) 一种交互式冠状动脉虚拟血管镜的实现方法
US9330461B2 (en) Image-based method for measuring elasticity of biological tissues and system thereof
CN108198174B (zh) 一种心血管ivoct与ivus自动配准方法与装置
CN108053429B (zh) 一种心血管oct与冠脉造影自动配准方法与装置
EP1534137A2 (en) System and method for identifying a vascular border
Chen et al. Coronary artery segmentation in cardiac CT angiography using 3D multi-channel U-net
CN113066091A (zh) 基于黑血管壁曲面重建的脑血管分割方法、装置及存储介质
WO2021115958A1 (en) Intraluminal image-based vessel diameter determination and associated devices, systems, and methods
CN114650778A (zh) 诊断支援装置、诊断支援系统以及诊断支援方法
WO2021058317A1 (en) Co-registration of intravascular and extravascular imaging for extravascular image with intravascular tissue morphology
Zheng et al. A deep learning method for motion artifact correction in intravascular photoacoustic image sequence
Zheng et al. Compensation of in-plane rigid motion for in vivo intracoronary ultrasound image sequence
CN114155243B (zh) 基于特征信息的ivus和oct图像融合方法及系统
CN115397335A (zh) 具有自适应缩放的管腔内图像可视化及相关系统、方法和装置
Chacko et al. Sequential functional analysis of left ventricle from 2D-echocardiography images.
Zheng et al. Reconstruction of coronary vessels from intravascular ultrasound image sequences based on compensation of the in-plane motion
Lopez-Perez et al. Bone surface reconstruction using localized freehand ultrasound imaging
CN117064446B (zh) 基于血管内超声的血管动态三维重建系统
Zheng Three-dimensional reconstruction of vessels from intravascular ultrasound sequence and X-ray angiograms
CN114224388B (zh) 基于多频率超声的颈动脉三维重建方法及系统
Jansen et al. Local and global distensibility assessment of abdominal aortic aneurysms in vivo from probe tracked 2D ultrasound images
CN116630648A (zh) 一种冠脉造影图像血管轮廓提取方法
JP2023008979A (ja) 超音波スライス強化

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant