CN112017175A - 支架显示方法、装置和存储介质 - Google Patents
支架显示方法、装置和存储介质 Download PDFInfo
- Publication number
- CN112017175A CN112017175A CN202010922088.8A CN202010922088A CN112017175A CN 112017175 A CN112017175 A CN 112017175A CN 202010922088 A CN202010922088 A CN 202010922088A CN 112017175 A CN112017175 A CN 112017175A
- Authority
- CN
- China
- Prior art keywords
- image
- stage
- frame
- predicted
- balloon
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 75
- 238000007781 pre-processing Methods 0.000 claims abstract description 10
- 230000008569 process Effects 0.000 claims description 27
- 238000012795 verification Methods 0.000 claims description 10
- 238000010200 validation analysis Methods 0.000 claims description 4
- 230000002708 enhancing effect Effects 0.000 claims description 3
- 239000003550 marker Substances 0.000 abstract description 6
- 230000004044 response Effects 0.000 description 10
- 238000010586 diagram Methods 0.000 description 9
- 230000000694 effects Effects 0.000 description 8
- 238000001914 filtration Methods 0.000 description 7
- 210000004351 coronary vessel Anatomy 0.000 description 5
- 230000009466 transformation Effects 0.000 description 5
- 238000004364 calculation method Methods 0.000 description 4
- 230000006870 function Effects 0.000 description 4
- 210000000988 bone and bone Anatomy 0.000 description 3
- 238000001514 detection method Methods 0.000 description 3
- 210000005077 saccule Anatomy 0.000 description 3
- 230000017531 blood circulation Effects 0.000 description 2
- 230000003902 lesion Effects 0.000 description 2
- WAIPAZQMEIHHTJ-UHFFFAOYSA-N [Cr].[Co] Chemical class [Cr].[Co] WAIPAZQMEIHHTJ-UHFFFAOYSA-N 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 210000004204 blood vessel Anatomy 0.000 description 1
- 238000002591 computed tomography Methods 0.000 description 1
- 238000006073 displacement reaction Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 238000005206 flow analysis Methods 0.000 description 1
- 210000003128 head Anatomy 0.000 description 1
- 210000005003 heart tissue Anatomy 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 230000000877 morphologic effect Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000008707 rearrangement Effects 0.000 description 1
- 230000011218 segmentation Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 239000010935 stainless steel Substances 0.000 description 1
- 229910001220 stainless steel Inorganic materials 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 238000001356 surgical procedure Methods 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 238000003325 tomography Methods 0.000 description 1
- 238000011426 transformation method Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0012—Biomedical image inspection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/136—Segmentation; Edge detection involving thresholding
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/30—Determination of transform parameters for the alignment of images, i.e. image registration
- G06T7/33—Determination of transform parameters for the alignment of images, i.e. image registration using feature-based methods
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20024—Filtering details
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
- G06T2207/30101—Blood vessel; Artery; Vein; Vascular
Landscapes
- Engineering & Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Medical Informatics (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Radiology & Medical Imaging (AREA)
- Quality & Reliability (AREA)
- Apparatus For Radiation Diagnosis (AREA)
Abstract
本发明实施例公开了一种支架显示方法、装置和存储介质。该方法包括:对目标对象的多帧扫描图像分为两个阶段;分别对目标对象的第一阶段的至少一帧扫描图像和第二阶段的至少一帧扫描图像进行预处理,分别得到第一阶段的至少一帧扫描图像的至少一个第一预测球囊点对和第二阶段的至少一帧扫描图像的至少一个第二预测球囊点对;将第一预测球囊点对和第一阶段的至少一帧扫描图像进行匹配,确定第一阶段的至少一帧扫描图像中的支架的第一目标球囊点对;基于第一目标球囊点对和第二预测球囊点对,确定第二阶段的第二目标球囊点对,基于第二目标球囊点对得到支架的目标图像。以高效、精确检测支架球囊标记点,清晰显示支架。
Description
技术领域
本发明实施例涉及图像处理技术,尤其涉及一种支架显示方法、装置和存储介质。
背景技术
在心脏介入手术中,可以对X光图像通过支架精显功能,放大展示冠脉血管、支架标记点,清晰显示支架结构,用于观察支架的形态、位置,从而精细导视支架放置过程,判断手术效果,加快手术流程,增强手术安全性。
由于在对心脏导入支架时,采集的图像的内容较为复杂,图像中包含:心脏组织、骨骼、导管、卷曲的导丝以及支架结构和它的球囊标记点等。现有技术中,将支架的球囊标记点进行检测出来,通常是医师人为的对支架放置过程中的各帧图像进行检测,这样检测效率低,且检测精度低,导致后续的支架精显出现偏差,支架结构模糊。
发明内容
本发明实施例提供一种支架显示方法、装置和存储介质,以实现高效、精确将支架球囊标记点检测出来,以清晰的显示支架的效果。
第一方面,本发明实施例提供了一种支架显示方法,该方法包括:
对目标对象的多帧扫描图像分为两个阶段,其中,各阶段均包括至少一帧扫描图像;
分别对目标对象的第一阶段的至少一帧扫描图像和第二阶段的至少一帧扫描图像进行预处理,分别得到所述目标对象的第一阶段的至少一帧扫描图像中的至少一个第一预测球囊点对和所述目标对象的第二阶段的至少一帧扫描图像中的至少一个第二预测球囊点对;
将所述第一预测球囊点对和所述第一阶段中的至少一帧扫描图像进行匹配,确定所述目标对象的第一阶段的至少一帧扫描图像中的支架的第一目标球囊点对;
基于所述第一目标球囊点对和所述第二预测球囊点对,确定所述第二阶段的第二目标球囊点对,基于所述第二目标球囊点对得到支架的目标图像。
第二方面,本发明实施例还提供了一种支架显示装置,该装置包括:
阶段确定模块,用于对目标对象的多帧扫描图像分为两个阶段,其中,各阶段均包括至少一帧扫描图像;
预测球囊点对确定模块,用于分别对目标对象的第一阶段的至少一帧扫描图像和第二阶段的至少一帧扫描图像进行预处理,分别得到所述目标对象的第一阶段的至少一帧扫描图像中的至少一个第一预测球囊点对和所述目标对象的第二阶段的至少一帧扫描图像中的至少一个第二预测球囊点对;
第一目标球囊点对确定模块,用于将所述第一预测球囊点对和所述第一阶段中的至少一帧扫描图像进行匹配,确定所述目标对象的第一阶段的至少一帧扫描图像中的支架的第一目标球囊点对;
目标图像确定模块,用于基于所述第一目标球囊点对和所述第二预测球囊点对,确定所述第二阶段的第二目标球囊点对,基于所述第二目标球囊点对得到支架的目标图像。
第三方面,本发明实施例还提供了一种包含计算机可执行指令的存储介质,所述计算机可执行指令在由计算机处理器执行时用于执行本发明实施例中任一所述的支架显示方法。
本发明实施例的技术方案,通过对目标对象的多帧扫描图像分为两个阶段,分别对目标对象的第一阶段的至少一帧扫描图像和第二阶段的至少一帧扫描图像进行预处理,分别得到目标对象的第一阶段的至少一帧扫描图像中的至少一个第一预测球囊点对和目标对象的第二阶段的至少一帧扫描图像中的至少一个第二预测球囊点对,将第一预测球囊点对和第一阶段中的至少一帧扫描图像进行匹配,确定目标对象的第一阶段的至少一帧扫描图像中的支架的第一目标球囊点对,这样可得到精确的目标对象的第一阶段的至少一帧扫描图像中的支架的第一目标球囊点对,实现了高效、精确的将支架球囊标记点检测出来的效果。将得到的第一目标球囊点对和第二预测球囊点对进行匹配,可得到第二阶段中的至少一帧扫描图像中的第二目标球囊点对,根据得到的第二目标球囊点对,对第二阶段的至少一帧扫描图像进行处理,即可得到支架的目标图像。这样可在保留支架的当前位置信息的同时,还增强了至少一帧扫描图像中支架结构的清晰度,进而得到清晰、精确的支架结构的目标图像。
附图说明
图1是本发明实施例一中的支架显示方法的流程图;
图2是本发明实施例一中的采集的支架放置过程中的任一帧扫描图像示意图;
图3是本发明实施例一中的支架示意图;
图4是本发明实施例一中的第一目标球囊点对的确定示意图;
图5是本发明实施例一中的凸显支架的目标图像;
图6是本发明实施例二中的支架显示方法的流程图;
图7是本发明实施例二中的第一预测球囊点确定示意图;
图8是本发明实施例三中的支架显示方法的流程图;
图9是本发明实施例三中的第二目标球囊点对确定示意图;
图10是本发明实施例四中的支架显示装置的结构示意图;
图11是本发明实施例五中的一种电子设备的结构示意图。
具体实施方式
下面结合附图和实施例对本发明作进一步的详细说明。可以理解的是,此处所描述的具体实施例仅仅用于解释本发明,而非对本发明的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与本发明相关的部分而非全部结构。
实施例一
图1为本发明实施例一提供的支架显示方法的流程图,本实施例可适用于对支架进行精确、清晰显示的情况,该方法可以由支架显示装置来执行,该支架显示装置可以由软件和/或硬件来实现,该支架显示装置可以配置在计算电子设备上,具体包括如下步骤:
S110、对目标对象的多帧扫描图像分为两个阶段,其中,各阶段均包括至少一帧扫描图像。
对目标对象的多帧扫描图像可以是在支架放置过程中的动态扫描图像,也可以是在支架取出、支架手术或其他过程中的动态扫描图像。进一步的,多帧扫描图像也可以是对动态扫描图像进行处理和/或挑选后的多帧扫描图像。
可以理解的是,步骤S110中将多帧扫描图像分为两个阶段是为了计算方便进行区分的,其中多帧扫描图像可以是一次扫描的多个图像,即两个阶段属于同一次扫描;当然多帧扫描图像也可以是多次扫描的多个图像,即两个阶段包括了多次扫描,其中每个阶段可以是包括了一个或多个同一次扫描,也可以每个阶段包括了不同次的扫描;两个阶段中的至少一帧扫描图像在时间上也并不一定需要是有序的,也可以是时间无序的,如可以将第一秒和第三秒的图像作为第一阶段,将第二秒和第四秒的图像作为第二阶段。
示例性的,目标对象可以是任一需要进行显示支架的目标,例如可以是人或动物等。
参考图2所述的采集的支架放置过程中的任一帧扫描图像示意图,在对目标对象放置支架过程中,采集支架放置过程中的扫描图像,这里的获取的可以是多帧扫描图像,将这多帧扫描图像分为两个阶段,每个阶段中均包含有至少一帧扫描图像。
实际采集扫描图像过程中,根据支架的长度、放置时间确定采集扫描图像的时间,一般采集整个支架放置过程为15秒,每秒可采集15帧扫描图像。
S120、分别对目标对象的第一阶段的至少一帧扫描图像和第二阶段的至少一帧扫描图像进行预处理,分别得到目标对象的第一阶段的至少一帧扫描图像中的至少一个第一预测球囊点对和目标对象的第二阶段的至少一帧扫描图像中的至少一个第二预测球囊点对。
示例性的,第一阶段可以是支架放置过程开始预设时间段内,例如,整个支架放置过程为15秒,第一阶段可以是从支架放置开始,一秒内的时间段,即15秒时间段内的第1秒内。
第二阶段可以是从第一阶段的最后时刻开始,截止到整个支架放置完成的时间段,例如,整个支架放置过程为15秒,第一阶段为15秒时间段内的第1秒内,则第二阶段为从2秒开始到第15秒。
需要说明的是,这里的第一阶段还可以是支架放置过程的后半截的预设时间段内,例如,整个支架放置过程为15秒,第一阶段可以是从支架放置的最后开始的,一秒内的时间段,即15秒时间段内的最后1秒内。
相对应的,第二阶段可以是从第一阶段的最后时刻开始,截止到整个支架放置完成的时间段,例如,整个支架放置过程为15秒,第一阶段为最后一秒时间段,则第二阶段为从第14秒开始到第0秒。
本发明实施例的技术方案,以第一阶段为支架放置过程开始预设时间段内,第二阶段为第一阶段的最后时刻开始,截止到整个支架放置完成的时间段为例,即第一阶段为整个支架放置过程的前半截预设时间段内,第二阶段为整个支架放置过程的后半截预设时间段内。
可以理解的是,参考图3所述的支架示意图,由于支架都是有两个球囊点(如图2中的A和B),这两个球囊点位于支架的两端,具有球囊的支架(例如球囊扩张式支架)是由医用不锈钢和钴铬合金等制成的预先装于球囊导管上的支架。与球囊一起输送到病变部位,球囊加压,释放支架,扩张后的支架使病变血管畅通。这两个球囊点可组成一个球囊点对。
第一预测球囊点对可以是对第一阶段的多帧扫描图像进行预处理后,得到的第一阶段的至少一帧扫描图像中的支架的球囊点对,其中,第一阶段的每一帧扫描图像中均包含有至少一个第一预测球囊点对。
第二预测球囊点对可以是对第二阶段的多帧扫描图像进行预处理后,得到的第二阶段的至少一帧扫描图像中的支架的球囊点对,其中,第二阶段的每一帧扫描图像中均包含有至少一个第二预测球囊点对。
分别对第一阶段的多帧扫描图像和第二阶段的多帧扫描图像进行预处理后,例如,顶帽变换、滤波和区域增长等,即可分别得到第一阶段中的至少一帧扫描图像的至少一个第一预测球囊点对和第二阶段中的至少一帧扫描图像的至少一个第二预测球囊点对。这样以便后续基于得到的第一球囊点对和第二球囊点对,准确在扫描图像中找到支架,以便后续可对支架进行精确、清晰的显示。
S130、将第一预测球囊点对和第一阶段中的至少一帧扫描图像进行匹配,确定目标对象的第一阶段的至少一帧扫描图像中的支架的第一目标球囊点对。
示例性的,第一目标球囊点对可以是确定出的支架的球囊点在第一阶段的至少一帧扫描图像中的位置,即将支架的两个球囊点在第一阶段的至少一帧扫描图像中检测出来。
当确定第一阶段的每一帧扫描图像的至少一个第一预测球囊点对后,对于第一阶段的任一帧扫描图像来说,将当前帧扫描图像中确定的至少一个第一预测球囊点对分别与第一阶段的其他至少一帧扫描图像中确定的至少一个第一个预测球囊点对进行匹配,根据预设的匹配规则,则可确定该目标对象的第一阶段的至少一帧扫描图像中的支架的第一目标球囊点对,即可确定支架在目标对象的第一阶段的至少一帧扫描图像中的球囊点对,如图4所述的第一目标球囊点对的确定示意图。这样可得到精确的目标对象的第一阶段的至少一帧扫描图像中的支架的第一目标球囊点对,实现了高效、精确的将支架球囊标记点检测出来的效果。
S140、基于第一目标球囊点对和第二预测球囊点对,确定第二阶段的第二目标球囊点对,基于第二目标球囊点对得到支架的目标图像。
示例性的,这里的第二目标球囊点对可以是第二阶段的至少一帧扫描图像中最终确定的支架的两个球囊点。
目标图像可以是得到的凸显出支架的图像,例如,如图5所述的凸显支架的目标图像。该图中支架相较于图2中的支架更加清晰。
将得到的第一目标球囊点对和第二预测球囊点对进行匹配,根据预设的匹配规则,可得到第二阶段中的至少一帧扫描图像中的第二目标球囊点对。根据得到的第二目标球囊点对,对第二阶段的至少一帧扫描图像进行处理,例如可以是裁剪处理等,将裁剪后的图像与第二阶段的至少一帧扫描图像进行配准叠加和增强处理,即可得到支架的目标图像。这样可在保留支架的当前位置信息的同时,还增强了至少一帧扫描图像中支架结构的清晰度,进而得到清晰、精确的支架结构的目标图像。
在实际应用中,第一阶段可以是前一阶段,第二阶段则是后一阶段,从而可以在第二阶段中实时显示中支架;也可以第一阶段是后一阶段,而第二阶段是前一阶段,从而可以追溯第二阶段即前一阶段中支架的位置及其位移变化。
更进一步,可以将扫描图像分为多于两个阶段。此时可以将任一阶段作为第二阶段,将另一阶段作为第一阶段,从而显示任一阶段中支架的实时位置。其中第一阶段可以使用同一阶段的扫描图像,从而减少设备的运算压力;第一阶段也可以使用与第二阶段最近的一个阶段,从而可以实时更新支架运算过程,增加了运算的准确性;还可以选取某一特定阶段作为第一阶段,选择依据可以是此阶段扫描图像的清晰度、扫描的精细度等,选择依据可以是在以上运算过程结果,也可以是扫描协议,还可以是图像处理工具或人工选择等。
本发明实施例的技术方案,通过对目标对象的支架的多帧扫描图像分为两个阶段,分别对目标对象的第一阶段的至少一帧扫描图像和第二阶段的至少一帧扫描图像进行预处理,分别得到目标对象的第一阶段的至少一帧扫描图像中的至少一个第一预测球囊点对和目标对象的第二阶段的至少一帧扫描图像中的至少一个第二预测球囊点对,将第一预测球囊点对和第一阶段中的至少一帧扫描图像进行匹配,确定目标对象的第一阶段的至少一帧扫描图像中的支架的第一目标球囊点对,这样可得到精确的目标对象的第一阶段的至少一帧扫描图像中的支架的第一目标球囊点对,实现了高效、精确的将支架球囊标记点检测出来的效果。将得到的第一目标球囊点对和第二预测球囊点对进行匹配,可得到第二阶段中的至少一帧扫描图像中的第二目标球囊点对,根据得到的第二目标球囊点对,对第二阶段的至少一帧扫描图像进行处理,即可得到支架的目标图像。这样可在保留支架的当前位置信息的同时,还增强了至少一帧扫描图像中支架结构的清晰度,进而得到清晰、精确的支架结构的目标图像。
实施例二
图6为本发明实施例二提供的支架显示方法的流程图,本发明实施例与上述实施例中各个可选方案可以结合。在本发明实施例中,可选的,所述对目标对象的第一阶段的至少一帧扫描图像进行预处理,得到目标对象的第一阶段的至少一帧扫描图像中的至少一个第一预测球囊点对,包括:处理第一阶段的至少一帧扫描图像,得到第一图像;确定第一图像中的至少一个第一预测球囊点;根据至少一个第一预测球囊点得到第二预测球囊点;计算第一预测球囊点和第二预测球囊点,得到第一预测球囊点对。可选的,所述将第一预测球囊点对和第一阶段中的至少一帧扫描图像进行匹配,确定目标对象的第一阶段的至少一帧扫描图像中的支架的第一目标球囊点对,包括:对于任一第一图像,将当前第一图像中的所述第一预测球囊点对逐帧与第一阶段中的至少一帧扫描图像中的第一预测球囊点对进行匹配,得到与当前第一图像中的第一预测球囊点对匹配成功的数量;当与当前第一图像中的第一预测球囊点对匹配成功的数量满足预设验证规则时,确定当前第一图像中的第一预测球囊点对为当前第一图像所对应的第一阶段的扫描图像中的支架的第一目标球囊点对。
如图6所示,本发明实施例的方法具体包括如下步骤:
S210、对目标对象的多帧扫描图像分为两个阶段,其中,各阶段均包括至少一帧扫描图像。
S220、处理第一阶段的至少一帧扫描图像,得到第一图像。
示例性的,第一图像可以是对第一阶段的多帧扫描图像进行处理,例如可以是tophat(顶帽)变换后,得到的第一阶段的至少一帧扫描图像的tophat(顶帽)变换后的图像。
将扫描图像进行tophat(顶帽)变换的目的是移除扫描图像中的骨骼和心脏等背景的影响。
需要说明的是,这里的tophat(顶帽)变换只是一种形态学方法,可以使暗背景下的亮物体(或者反过来亮背景下的暗物体)特征留下,做完tophat(顶帽)变换,可以使的特征更突出,适用于本发明实施例的技术方案,即是移除扫描图像中的骨骼和心脏等背景的影响,使支架的球囊点更加凸显。当然这里也可以用别的方法使得支架的球囊点更突出,这里不做限定。任何可使支架的球囊点更加突出的方法均属于本发明实施例的保护范围。
S230、确定第一图像中的至少一个第一预测球囊点。
示例性的,第一预测球囊点可以是第一图像进行多尺度高斯-拉普拉斯滤波后,得到的第一图像中的疑似球囊点,其中,在每一个第一图像中均有至少一个第一预测球囊点。
参考图7所述的第一预测球囊点确定示意图,将第一图像进行多尺度高斯-拉普拉斯滤波的目的是为了在图像中寻找局部极大值,即在第一图像中利用一个较小的值将第一图像中的较大的值进行抹除,然后将抹除后的图像与第一图像进行比对,被抹除的点即为局部极大值点,该局部极大值点即为第一图像中的疑似球囊点,即第一预测球囊点。这样可得到疑似支架的球囊点。
需要说明的是,这里的多尺度高斯-拉普拉斯滤波只是一种滤波方法,可以将第一图像中的局部极大值提取出来。当然这里也可以用别的方法第一图像中的局部极大值提取出来,例如阈值分割等,这里不做限定。任何可将第一图像中的局部极大值提取出来的方法均属于本发明实施例的保护范围。
S240、根据至少一个第一预测球囊点得到第二预测球囊点。
示例性的,第二预测球囊点可以是对第一预测球囊点进行区域增长后,将增长后面积过大的第一预测球囊点和圆度过低的第一预测球囊点进行删除。
由于支架的球囊点是很小的点,对其进行区域增长后,其面积也不会大于预设阈值(例如,预设阈值可以是1平方厘米),则区域增长后,面积过大的第一预测球囊点不会是支架的球囊点。
需要说明的是,这里的区域增长只是一种方法,可以将第一预测球囊点中圆度过低的第一预测球囊点等不符合支架的球囊点要求的第一预测球囊点进行删除。当然这里也可以用别的方法将不符合支架的球囊点要求的第一预测球囊点进行删除,这里不做限定。任何可将不符合支架的球囊点要求的第一预测球囊点进行删除的方法均属于本发明实施例的保护范围。
需要说明的是,在得到第二预测球囊点后,还需对第二预测球囊点进行检测,检测目的是将第二预测球囊点中响应值较低的第二预测球囊点去掉,然后将剩下的第二预测球囊点利用局部极大值方法抑制在一定范围内至保留一个相应最大的第二预测球囊点,参考图7,方框C圈起来的那两个点,面积接近,在预设一个范围内(例如,两个点相距10像素以内),则利用局部极大值法,将方框C内的这两个点抑制到只保留其中的一个点。
这里的响应值较低可以是指比之前删除掉的球囊点的响应值还要低的球囊点。例如,在对球囊点进行多尺度高斯-拉普拉斯滤波后,得到的球囊点中,每一个球囊点对应都会有一个响应值,若多尺度高斯-拉普拉斯滤波后得到的球囊点为6个,其各自对应的响应值分别为1、2、3、4、5和6,在对球囊点进行区域增长时,删除了增长后面积过大以及圆度过低的球囊点,比如,删除的增长后面积过大以及圆度过低的球囊点有3个,其各自对应的响应值分别为2、3和4,则剩下的球囊点中有一个球囊点的响应值为1,由于响应值为2、3和4的球囊点已删除,则响应值比2、3和4还低的球囊点也要删除,即将响应值为1的球囊点也对应删除。
S250、计算第一预测球囊点和第二预测球囊点,得到第一预测球囊点对。
示例性的,得到第二预测球囊点后,将每一个第一图像中的至少一个第二预测球囊点两两进行组合,根据预设计算规则,确定第一预测球囊点对。
可选的,这里的将每一个第一图像中的至少一个第二预测球囊点两两进行组合,根据预设计算规则,确定第一预测球囊点对,这里的预测计算规则可以是:将每一个第一图像中的两两组合的第二预测球囊点中,两两组合的第二预测球囊点的距离满足预设条件的两两组合的第二预测球囊点确定为第一预测球囊点对。
示例性的,预设条件可以是预设设置的两两组合的第二预测球囊点的距离要求。例如,可以是两两组合的第二预测球囊点的距离小于预设距离阈值,这里的预设距离阈值可以是预先设置的两两组合的第二预测球囊点之间的距离,当两两组合的第二预测球囊点之间的距离小于该值时,则可将该两两组合的第二预测球囊点作为第一与球囊点。
由于支架的两个球囊点之间的距离是与支架有关的,即当一个支架确定后,该支架中的两个球囊点之间的距离也就确定了。若两两组合的第二预测球囊点之间的距离大于预设距离阈值时,则该两两组合的第二预测球囊点可能不是支架的两个球囊点。这样可精确确定第一预测球囊点对。
S260、将第二阶段的至少一帧扫描图像重复执行S220-S250,得到第二阶段的至少一帧扫描图像中的至少一个第二预测球囊点对。
示例性的,这里对第一阶段的至少一帧扫描图像进行预处理后,得到第一阶段中的至少一帧扫描图像的至少一个第一预测球囊点对的过程,与对第二阶段的至少一帧扫描图像进行预处理后,得到第二阶段中的至少一帧扫描图像的至少一个第二预测球囊点对的过程是一致的。因此,按照上述S220-S250,即可得到第二阶段至少一帧扫描图像中的至少一个第二预测球囊点对。这里不再详细赘述。
S270、对于任一第一图像,将当前第一图像中的所述第一预测球囊点对逐帧与第一阶段中的至少一帧扫描图像中的第一预测球囊点对进行匹配,得到与当前第一图像中的第一预测球囊点对匹配成功的数量。
示例性的,当确定第一阶段的每一帧扫描图像的至少一个第一预测球囊点对后,对于第一阶段的任一帧扫描图像来说,将当前帧扫描图像中确定的至少一个第一预测球囊点对分别与第一阶段的其他至少一帧扫描图像中确定的至少一个第一个预测球囊点对进行匹配,根据预设的匹配规则,则可确定该目标对象的第一阶段的至少一帧扫描图像中的支架的第一目标球囊点对,即可确定支架在目标对象的第一阶段的至少一帧扫描图像中的球囊点对,如图4所示。这样可得到精确的目标对象的第一阶段的至少一帧扫描图像中的支架的第一目标球囊点对,实现了高效、精确的将支架球囊标记点检测出来的效果。
S280、当与当前第一图像中的第一预测球囊点对匹配成功的数量满足预设验证规则时,确定当前第一图像中的第一预测球囊点对为当前第一图像所对应的第一阶段的扫描图像中的支架的第一目标球囊点对。
示例性的,对于任一第一图像,将当前第一图像中的第一预测球囊点对与第一阶段中的其他至少一帧扫描图像中的第一预测球囊点对逐一进行匹配,确定其他至少一帧扫描图像中的第一预测球囊点对与当前第一图像中的第一预测球囊点对匹配成功的数量,当与当前第一图像中的第一预测球囊点对匹配成功的数量满足预设验证规则时,则确定当前第一图像中的第一预测球囊点对为当前第一图像所对应的第一阶段的扫描图像中的支架的第一目标球囊点对。
这里的预设验证规则可以是预先设置的验证与当前第一图像中的第一预测球囊点对匹配成功的数量的规则。
这里的验证规则具体可以是:
(1)存在与当前第一图像中的各第一预测球囊点对匹配成功的点对。
示例性的,首先,在第一阶段的其他各第一图像中,要存在与当前第一图像中的各第一预测球囊点对匹配成功的点对,若在第一阶段的其他各第一图像中,没有与当前第一图像中的各第一预测球囊点对匹配成功的点对,则证明在当前第一图像中的各第一预测球囊点对并不是支架的两个球囊点。
(2)与当前第一图像中的各第一预测球囊点对匹配成功的数量大于第一预设数量阈值。
示例性的,第一预设数量阈值可以是预先设置的,当与当前第一图像中的各第一预测球囊点对匹配成功的数量大于该值时,则证明当前第一图像中的各第一预测球囊点对可能为支架的两个球囊点。
这里的第一预设数量阈值一般至少为第一阶段的扫描图像的帧数的三分之二,例如,以第一阶段的扫描图像为15帧为例,这里的第一预设数量阈值可以是9。若当前第一图像为第2帧图像,则除了第2帧图像外,其他各帧第一图像中的各第一预测球囊点对与第2帧图像中的某一个第一预测球囊点对匹配成功的数量超过9个,则证明当前第一图像中的各第一预测球囊点对可能为支架的两个球囊点。
(3)当前第一图像中的各第一预测球囊点对的匹配成功的数量中仅有一个第一预测球囊点对的匹配成功的数量大于第二预设数量阈值。
示例性的,第二预设数量阈值可以是预先设置的,当前第一图像中的各第一预测球囊点对的匹配成功的数量中仅有一个第一预测球囊点对的匹配成功的数量大于该值时,则证明当前第一图像中的各第一预测球囊点对可能为支架的两个球囊点。
这里的第二预设数量阈值可以是一般至少为第一阶段的扫描图像的帧数的三分之二,即这里的第二预设数量阈值可以与第一预设数量阈值相同,也可以不同。例如,以第一阶段的扫描图像为15帧为例,这里的第一预设数量阈值可以是12。若当前第一图像为第2帧图像,则除了第2帧图像外,其他各帧第一图像中的各第一预测球囊点对与第2帧图像中的某一个第一预测球囊点对匹配成功的数量超过12个,且其他各帧第一图像中的各第一预测球囊点对与第2帧图像中的另一个第一预测球囊点对匹配成功的数量也超过12个,则说明这里的有两个第一预测球囊点对的数量超过12个,但支架的球囊点只有两个,因此不可能存在多个与第一预测球囊点对匹配的数量超过12个。因此,当只有一个第一预测球囊点对的匹配成功的数量大于第二预设数量阈值时,则证明当前第一图像中的各第一预测球囊点对可能为支架的两个球囊点。
(4)将各与当前第一图像中的各所述第一预测球囊点对匹配成功的数量进行降序排序后,第一排序位置的第一预测球囊点对匹配成功的数量与第二排序位置的第一预测球囊点对匹配成功的数量的差值大于第三预设数量阈值。
示例性的,这里的第一排序位置可以是将各与当前第一图像中的各所述第一预测球囊点对匹配成功的数量进行降序排序后,位于序列的第一位置,即头部位置。
第二排序位置可以是位于降序排序后的第二顺位的位置。
第三预设数量阈值可以是预先设置的,第一排序位置的第一预测球囊点对匹配成功的数量与第二排序位置的第一预测球囊点对匹配成功的数量的差值大于该值时,则证明当前第一图像中的各第一预测球囊点对可能为支架的两个球囊点。
这里的第三预设数量阈值可以是一般为第一阶段的扫描图像的帧数的二分之一。例如,以第一阶段的扫描图像为15帧为例,这里的第三预设数量阈值可以是7。若当前第一图像为第2帧图像,在第2帧图像中一共有3个第一预测球囊点对,则除了第2帧图像外的其他各帧第一图像中的至少一个第一预测球囊点对与第2帧图像中的这3个第一预测球囊点对进行匹配后,匹配成功的数量进行降序排序后为12、6和4,则说明其他各帧第一图像中的各第一预测球囊点对与第2帧图像中的3个第一预测球囊点对匹配成功的数量为12个的第一预测球囊点对可能为支架的两个球囊点。这是因为在第一预测球囊点对进行匹配的过程中,不可能出现两个匹配数量接近的第一预测球囊点对,若两个第一预测球囊点对匹配的数量很接近,且都很高(例如可以是都超过第一预设数量阈值),则说明这两个第一预测球囊点对均有可能是支架的两个球囊点,但是支架的球囊点只有两个,因此不可能存在多个与第一预测球囊点对匹配的数量很接近且都很高。
需要说明的是,与当前第一图像中的第一预测球囊点对匹配成功的数量需同时满足上述验证规则的4个条件。当上述验证规则都符合时,则可得到如图4所示的第一目标球囊点对。
上述通过确定的符合验证规则的与当前第一图像中的所述第一预测球囊点对匹配成功的数量,来确定第一目标球囊点对,这样可精确确定支架的球囊点,且确定的支架的球囊点符合实际。
S290、基于第一目标球囊点对和第二预测球囊点对,确定第二阶段的第二目标球囊点对,基于第二目标球囊点对得到支架的目标图像。
本发明实施例的技术方案,通过对第一阶段的多帧扫描图像进行处理和计算,得到第二预测球囊点,这样可得到更为精确的支架的球囊点,避免了背景噪声、导丝端点等的影响。将得到的第一预测球囊点两两进行组合,确定第一预测球囊点对,这样可精确确定第一预测球囊点对。通过确定的符合验证规则的与当前第一图像中的所述第一预测球囊点对匹配成功的数量,来确定第一目标球囊点对,这样可精确确定支架的球囊点,且确定的支架的球囊点符合实际。
实施例三
图8为本发明实施例三提供的支架显示方法的流程图,本发明实施例与上述实施例中各个可选方案可以结合。在本发明实施例中,可选的,所述基于第一目标球囊点对和第二预测球囊点对,确定第二阶段的第二目标球囊点对,包括:将各第二预测球囊点对与第一目标球囊点对进行匹配,将第二预测球囊点对中球囊点之间的距离与所述第一目标球囊点对中球囊点之间的距离小于预设阈值,且第二预测球囊点对与第一目标球囊点中所对应的球囊点距离相等的各第二预测球囊点,确定为第二目标球囊点对。所述基于第二目标球囊点对得到支架的目标图像,包括:基于第二阶段中的至少一帧扫描图像的第二目标球囊点对的中心,对第二阶段中的至少一帧扫描图像进行裁剪,得到第二阶段中至少一帧扫描图像所对应的裁剪图像;基于裁剪图像和第二阶段的任意一帧扫描图像,得到支架的目标图像。
S301、对目标对象的多帧扫描图像分为两个阶段,其中,各阶段均包括至少一帧扫描图像。
S302、处理第一阶段的至少一帧扫描图像,得到第一图像。
S303、确定第一图像中的至少一个第一预测球囊点。
S304、根据至少一个第一预测球囊点得到第二预测球囊点。
S305、计算第一预测球囊点和第二预测球囊点,得到第一预测球囊点对。
S306、将第二阶段的至少一帧扫描图像重复执行S302-S305,得到第二阶段的至少一帧扫描图像中的至少一个第二预测球囊点对。
S307、对于任一第一图像,将当前第一图像中的所述第一预测球囊点对逐帧与第一阶段中的至少一帧扫描图像中的第一预测球囊点对进行匹配,得到与当前第一图像中的第一预测球囊点对匹配成功的数量。
S308、当与当前第一图像中的第一预测球囊点对匹配成功的数量满足预设验证规则时,确定当前第一图像中的第一预测球囊点对为当前第一图像所对应的第一阶段的扫描图像中的支架的第一目标球囊点对。
S309、将各第二预测球囊点对与第一目标球囊点对进行匹配,将第二预测球囊点对中球囊点之间的距离与所述第一目标球囊点对中球囊点之间的距离小于预设阈值,且第二预测球囊点对与第一目标球囊点中所对应的球囊点距离相等的各第二预测球囊点,确定为第二目标球囊点对。
示例性的,预设阈值可以是预先设置的第二预测球囊点对中球囊点之间的距离与第一目标球囊点对中球囊点之间的距离。
参考图9所述的第二目标球囊点对确定示意图,图9中的M代表第二阶段的任一帧扫描图像,其中,P和Q为M中的第二预测球囊点对,N代表第一阶段的任一帧扫描图像,其中,G和H为N中确定的第一目标球囊点对。其中,点P与点G对应,点Q与点H对应。
将第二预测球囊点对与第一目标球囊点对进行匹配时,将第二预测球囊点对中球囊点之间的距离与所述第一目标球囊点对中球囊点之间的距离小于预设阈值(例如预设阈值可以是0.4),且第二预测球囊点对与第一目标球囊点中所对应的球囊点距离相等的各第二预测球囊点,确定为第二目标球囊点对。例如,如图9所示,图M中P和Q点之间的距离与N中G和H之间的距离小于预设阈值,且点P与点G之间的距离与点Q与点H之间的距离相等。这样即可确定M中的P和Q点为第二目标球囊点对。这样可精确确定第二阶段中至少一帧扫描图像中的支架的球囊点。
S310、基于第二阶段中的至少一帧扫描图像的第二目标球囊点对的中心,对第二阶段中的至少一帧图像进行裁剪,得到第二阶段中至少一帧图像所对应的裁剪图像。
示例性的,当确定第二阶段中至少一帧扫描图像的第二目标球囊点对后,基于第二目标球囊点对的中心,对第二阶段的至少一帧扫描图像进行裁剪处理,得到第二阶段中至少一帧图像所对应的裁剪图像。
这里对第二阶段的至少一帧扫描图像进行裁剪处理,可以是将至少一帧扫描图像,基于第二目标球囊中心进行裁剪,裁剪掉的图像一般为原始图像(即采集的第二阶段的至少一帧扫描图像)的三分之一,保留剩余的三分之二。
S311、基于裁剪图像和第二阶段的任意一帧扫描图像,得到支架的目标图像。
示例性的,这里根据裁剪图像和第二阶段的任意一帧扫描图像,得到支架的目标图像,这里的任意一帧扫描图像可以是从第二阶段中选取的任意一帧扫描图像,例如,可以是第二阶段的首帧扫描图像。
以下以首帧扫描图像为例进行说明:
根据裁剪后的图像以及第二阶段的首帧扫描图像进行配准叠加和增强处理,或者是将第二阶段的至少一帧扫描图像、裁剪图像和第二阶段的首帧扫描图像进行配准叠加和增强处理,即可得到支架的目标图像。
可选的,所述基于裁剪图像和第二阶段的任意一帧扫描图像,得到支架的目标图像,具体可以是:将裁剪图像和第二阶段的所述任意一帧扫描图像进行配准叠加和增强处理,得到支架的目标图像;或者,将裁剪前的第二阶段中除所述任意一帧扫描图像外的各帧扫描图像和第二阶段的所述任意一帧扫描图像进行配准叠加和增强处理,得到各帧扫描图像所对应的支架的第一目标图像;将第一目标图像和裁剪图像进行配准叠加和增强处理,得到支架的目标图像。
示例性的,以下以首帧扫描图像为例进行说明:
根据裁剪图像和第二阶段的首帧扫描图像,得到支架的目标图像可以是将裁剪图像和第二阶段的首帧扫描图像进配准叠加和增强处理,得到支架的目标图像。
第一目标图像可以是将裁剪前的第二阶段中除所述任意一帧(例如首帧)扫描图像外的各帧扫描图像和第二阶段的所述任意一帧(例如首帧)扫描图像进行配准叠加和增强处理,得到各帧扫描图像所对应的支架的图像。
根据裁剪图像和第二阶段的所述任意一帧扫描图像,得到支架的目标图像还可以是先将裁剪前的第二阶段中除所述任意一帧(例如首帧)扫描图像外的各帧扫描图像和第二阶段的首帧扫描图像进行配准叠加和增强处理,得到各帧扫描图像所对应的支架的第一目标图像。即将第二阶段的各帧扫描图像分别与第二阶段的首帧扫描图像进行配准叠加和增强处理,得到第二阶段各帧扫描图像所对应的支架的第一目标图像。然后再将第二阶段各帧扫描图像所对应的支架的第一目标图像和其对应的裁剪图像进行配准叠加和增强处理,得到支架的目标图像。
例如,第二阶段的扫描图像共有4帧,第二阶段的首帧扫描图像为第16帧扫描图像,则第二阶段的各帧扫描图像分别为第16帧扫描图像、第17帧扫描图像、第18帧扫描图像和第19帧扫描图像,先将第17帧扫描图像、第18帧扫描图像和第19帧扫描图像分别与第16帧扫描图像进行配准叠加和增强处理,得到第17帧扫描图像、第18帧扫描图像和第19帧扫描图像所对应的第一目标图像。然后将第17帧扫描图像、第18帧扫描图像和第19帧扫描图像进行裁剪后的图像,在分别与其对应的第一目标图像进行配准叠加和增强处理,即可得到支架的目标图像。这样可在保留支架的当前位置信息的同时,还增强了各帧扫描图像中支架结构的清晰度,进而得到清晰、精确的支架结构的目标图像。
本发明实施例的技术方案,通过将各第二预测球囊点对与第一目标球囊点对进行匹配,将第二预测球囊点对中球囊点之间的距离与所述第一目标球囊点对中球囊点之间的距离小于预设阈值,且第二预测球囊点对与第一目标球囊点中所对应的球囊点距离相等的各第二预测球囊点,这样得到精确的第二目标球囊点对。基于第二阶段中的至少一帧扫描图像的第二目标球囊点对的中心,对第二阶段中的至少一帧图像进行裁剪,得到第二阶段中至少一帧图像所对应的裁剪图像,基于裁剪图像和第二阶段的任意一帧扫描图像,得到支架的目标图像,这样可在保留支架的当前位置信息的同时,还增强了各帧扫描图像中支架结构的清晰度,进而得到清晰、精确的支架结构的目标图像。
以上支架显示方法流程可以得到当前支架所处位置和姿态,之后,还可以依据目标对象的历史冠脉数据和/或当前的冠脉数据,结合得到的当前支架所处位置和姿态以及支架的信息,计算此时冠脉的血流储备分数,并和放入支架之前的冠脉的血流储备分数进行对比,从而实时提供支架放置后的效果以及对比图。其中支架的信息包括支架的长短、直径等信息,支架的信息可以手动输入,也可以在预先存储的信息库中选取,还可以根据以上支架显示方法流程分析得到。历史冠脉数据和当前冠脉数据可以是不同模态的影像扫描数据。在实际应用中,历史冠脉数据一般是采用计算机断层扫描或磁共振断层扫描得到的数据,其精细度较高;而当前冠脉数据可以是数字化X光片的扫描数据或C型臂X光片的扫描数据,其更方便在手术过程中同步扫描。
实施例四
图10为本发明实施例四提供的支架显示装置的结构示意图,如图10所示,该装置包括:阶段确定模块31、预测球囊点对确定模块32、第一目标球囊点对确定模块33和目标图像确定模块34。
其中,阶段确定模块31,用于对目标对象的多帧扫描图像分为两个阶段,其中,各阶段均包括至少一帧扫描图像;
预测球囊点对确定模块32,用于分别对目标对象的第一阶段的至少一帧扫描图像和第二阶段的至少一帧扫描图像进行预处理,分别得到所述目标对象的第一阶段的至少一帧扫描图像中的至少一个第一预测球囊点对和所述目标对象的第二阶段的至少一帧扫描图像中的至少一个第二预测球囊点对;
第一目标球囊点对确定模块33,用于将所述第一预测球囊点对和所述第一阶段中的至少一帧扫描图像进行匹配,确定所述目标对象的第一阶段的至少一帧扫描图像中的支架的第一目标球囊点对;
目标图像确定模块34,用于基于所述第一目标球囊点对和所述第二预测球囊点对,确定所述第二阶段的第二目标球囊点对,基于所述第二目标球囊点对得到支架的目标图像。
在上述实施例的技术方案的基础上,预测球囊点对确定模块32包括:
第一图像确定单元,用于处理第一阶段的至少一帧扫描图像,得到第一图像;
第一预测球囊点确定单元,用于确定第一图像中的多个第一预测球囊点;
第二预测球囊点确定单元,用于根据至少一个第一预测球囊点得到第二预测球囊点;
第一预测球囊点对确定单元,用于计算第一预测球囊点和第二预测球囊点,得到第一预测球囊点对。
在上述实施例的技术方案的基础上,第一预测球囊点对确定单元具体用于:
将每一个第一图像中的两两组合的第二预测球囊点中,两两组合的第二预测球囊点的距离满足预设条件的两两组合的第二预测球囊点确定为第一预测球囊点对。
在上述实施例的技术方案的基础上,预测球囊点对确定模块32包括:
第二图像确定单元,用于处理第二阶段的至少一帧扫描图像,得到第二图像;
第三预测球囊点确定单元,用于确定第二图像中的多个第三预测球囊点;
第四预测球囊点确定单元,用于根据第三预测球囊点得到第四预测球囊点;
第二预测球囊点对确定单元,用于计算第三预测球囊点和第四预测球囊点,得到第二预测球囊点对。
在上述实施例的技术方案的基础上,第二预测球囊点对确定单元具体用于:
将每一个第二图像中的两两组合的第四预测球囊点中,两两组合的第四预测球囊点的距离满足预设条件的两两组合的第四预测球囊点确定为第二预测球囊点对。
在上述实施例的技术方案的基础上,第一目标球囊点对确定模块33包括:
匹配成功数量确定单元,用于对于任一第一图像,将当前第一图像中的所述第一预测球囊点对逐帧与第一阶段中的至少一帧扫描图像中的第一预测球囊点对进行匹配,得到与当前第一图像中的所述第一预测球囊点对匹配成功的数量;
第一目标球囊点对确定单元,用于当与当前第一图像中的所述第一预测球囊点对匹配成功的数量满足预设验证规则时,确定当前第一图像中的所述第一预测球囊点对为当前第一图像所对应的第一阶段的扫描图像中的支架的第一目标球囊点对;
可选的,所述预设验证规则包括:存在与当前第一图像中的各所述第一预测球囊点对匹配成功的点对、与当前第一图像中的各所述第一预测球囊点对匹配成功的数量大于第一预设数量阈值、当前第一图像中的各所述第一预测球囊点对的匹配成功的数量中仅有一个第一预测球囊点对的匹配成功的数量大于第二预设数量阈值、将各与当前第一图像中的各所述第一预测球囊点对匹配成功的数量进行降序排序后,第一排序位置的第一预测球囊点对匹配成功的数量与第二排序位置的第一预测球囊点对匹配成功的数量的差值大于第三预设数量阈值。
在上述实施例的技术方案的基础上,目标图像确定模块34包括:
第二目标球囊点对确定单元,用于将各所述第二预测球囊点对与所述第一目标球囊点对进行匹配,将第二预测球囊点对中球囊点之间的距离与所述第一目标球囊点对中球囊点之间的距离小于预设阈值,且所述第二预测球囊点对与所述第一目标球囊点中所对应的球囊点距离相等的各所述第二预测球囊点,确定为第二目标球囊点对。
在上述实施例的技术方案的基础上,目标图像确定模块34还包括:
裁剪图像确定单元,用于基于第二阶段中的至少一帧扫描图像的第二目标球囊点对的中心,对所述第二阶段中的至少一帧扫描图像进行裁剪,得到第二阶段中至少一帧扫描图像所对应的裁剪图像;
目标图像确定单元,用于基于所述裁剪图像和所述第二阶段的任意一帧扫描图像,得到支架的目标图像。
在上述实施例的技术方案的基础上,目标图像确定单元具体用于:
将所述裁剪图像和所述第二阶段的所述任意一帧扫描图像进行配准叠加和增强处理,得到支架的目标图像;
或者,
将裁剪前的所述第二阶段中除所述任意一帧扫描图像外的各帧扫描图像和所述第二阶段的所述任意一帧扫描图像进行配准叠加和增强处理,得到各帧扫描图像所对应的支架的第一目标图像;将所述第一目标图像和所述裁剪图像进行配准叠加和增强处理,得到支架的目标图像。
本发明实施例所提供的支架显示装置可执行本发明任意实施例所提供的支架显示方法,具备执行方法相应的功能模块和有益效果。
实施例五
图11为本发明实施例五提供的一种电子设备的结构示意图,如图11所示,该电子设备包括处理器70、存储器71、输入装置72和输出装置73;电子设备中处理器70的数量可以是一个或多个,图11中以一个处理器70为例;电子设备中的处理器70、存储器71、输入装置72和输出装置73可以通过总线或其他方式连接,图11中以通过总线连接为例。
存储器71作为一种计算机可读存储介质,可用于存储软件程序、计算机可执行程序以及模块,如本发明实施例中的支架显示方法对应的程序指令/模块(例如,阶段确定模块31、预测球囊点对确定模块32、第一目标球囊点对确定模块33和目标图像确定模块34)。处理器70通过运行存储在存储器71中的软件程序、指令以及模块,从而执行电子设备的各种功能应用以及数据处理,即实现上述的支架显示方法。
存储器71可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序;存储数据区可存储根据终端的使用所创建的数据等。此外,存储器71可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他非易失性固态存储器件。在一些实例中,存储器71可进一步包括相对于处理器70远程设置的存储器,这些远程存储器可以通过网络连接至电子设备。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
输入装置72可用于接收输入的数字或字符信息,以及产生与电子设备的用户设置以及功能控制有关的键信号输入。输出装置73可包括显示屏等显示设备。
实施例六
本发明实施例六还提供一种包含计算机可执行指令的存储介质,所述计算机可执行指令在由计算机处理器执行时用于执行一种支架显示方法。
当然,本发明实施例所提供的一种包含计算机可执行指令的存储介质,其计算机可执行指令不限于如上所述的方法操作,还可以执行本发明任意实施例所提供的支架显示方法中的相关操作。
通过以上关于实施方式的描述,所属领域的技术人员可以清楚地了解到,本发明可借助软件及必需的通用硬件来实现,当然也可以通过硬件实现,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品可以存储在计算机可读存储介质中,如计算机的软盘、只读存储器(Read-Only Memory,ROM)、随机存取存储器(RandomAccess Memory,RAM)、闪存(FLASH)、硬盘或光盘等,包括若干指令用以使得一台计算机电子设备(可以是个人计算机,服务器,或者网络电子设备等)执行本发明各个实施例所述的方法。
值得注意的是,上述支架显示装置的实施例中,所包括的各个单元和模块只是按照功能逻辑进行划分的,但并不局限于上述的划分,只要能够实现相应的功能即可;另外,各功能单元的具体名称也只是为了便于相互区分,并不用于限制本发明的保护范围。
注意,上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解,本发明不限于这里所述的特定实施例,对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此,虽然通过以上实施例对本发明进行了较为详细的说明,但是本发明不仅仅限于以上实施例,在不脱离本发明构思的情况下,还可以包括更多其他等效实施例,而本发明的范围由所附的权利要求范围决定。
Claims (10)
1.一种支架显示方法,其特征在于,包括:
对目标对象的多帧扫描图像分为两个阶段,其中,各阶段均包括至少一帧扫描图像;
分别对目标对象的第一阶段的至少一帧扫描图像和第二阶段的至少一帧扫描图像进行预处理,分别得到所述目标对象的第一阶段的至少一帧扫描图像中的至少一个第一预测球囊点对和所述目标对象的第二阶段的至少一帧扫描图像中的至少一个第二预测球囊点对;
将所述第一预测球囊点对和所述第一阶段中的至少一帧扫描图像进行匹配,确定所述目标对象的第一阶段的至少一帧扫描图像中的支架的第一目标球囊点对;
基于所述第一目标球囊点对和所述第二预测球囊点对,确定所述第二阶段的第二目标球囊点对,基于所述第二目标球囊点对得到支架的目标图像。
2.根据权利要求1所述的方法,其特征在于,对目标对象的第一阶段的至少一帧扫描图像进行预处理,得到所述目标对象的第一阶段的至少一帧扫描图像中的至少一个第一预测球囊点对,包括:
处理第一阶段的至少一帧扫描图像,得到第一图像;
确定第一图像中的至少一个第一预测球囊点;
根据至少一个第一预测球囊点得到第二预测球囊点;
计算第一预测球囊点和第二预测球囊点,得到第一预测球囊点对。
3.根据权利要求2所述的方法,其特征在于,所述计算第一预测球囊点和第二预测球囊点,得到第一预测球囊点对,包括:
将每一个第一图像中的两两组合的第二预测球囊点中,两两组合的第二预测球囊点的距离满足预设条件的两两组合的第二预测球囊点确定为第一预测球囊点对。
4.根据权利要求1所述的方法,其特征在于,所述将所述第一预测球囊点对和所述第一阶段中的至少一帧扫描图像进行匹配,确定所述目标对象的第一阶段的至少一帧扫描图像中的支架的第一目标球囊点对,包括:
对于任一第一图像,将当前第一图像中的所述第一预测球囊点对逐帧与第一阶段中的至少一帧扫描图像中的第一预测球囊点对进行匹配,得到与当前第一图像中的所述第一预测球囊点对匹配成功的数量;
当与当前第一图像中的所述第一预测球囊点对匹配成功的数量满足预设验证规则时,确定当前第一图像中的所述第一预测球囊点对为当前第一图像所对应的第一阶段的扫描图像中的支架的第一目标球囊点对。
5.根据权利要求4所述的方法,其特征在于,所述预设验证规则包括:存在与当前第一图像中的各所述第一预测球囊点对匹配成功的点对、与当前第一图像中的各所述第一预测球囊点对匹配成功的数量大于第一预设数量阈值。
6.根据权利要求1所述的方法,其特征在于,所述基于所述第一目标球囊点对和所述第二预测球囊点对,确定所述第二阶段的第二目标球囊点对,包括:
将各所述第二预测球囊点对与所述第一目标球囊点对进行匹配,将第二预测球囊点对中球囊点之间的距离与所述第一目标球囊点对中球囊点之间的距离小于预设阈值,且所述第二预测球囊点对与所述第一目标球囊点中所对应的球囊点距离相等的各所述第二预测球囊点,确定为第二目标球囊点对。
7.根据权利要求1所述的方法,其特征在于,所述基于所述第二目标球囊点对得到支架的目标图像,包括:
基于第二阶段中的至少一帧扫描图像的第二目标球囊点对的中心,对所述第二阶段中的至少一帧扫描图像进行裁剪,得到第二阶段中至少一帧扫描图像所对应的裁剪图像;
基于所述裁剪图像和所述第二阶段的任意一帧扫描图像,得到支架的目标图像。
8.根据权利要求7所述的方法,其特征在于,所述基于所述裁剪图像和所述第二阶段的任意一帧扫描图像,得到支架的目标图像,包括:
将所述裁剪图像和所述第二阶段的所述任意一帧扫描图像进行配准叠加和增强处理,得到支架的目标图像;
或者,
将裁剪前的所述第二阶段中除所述任意一帧扫描图像外的各帧扫描图像和所述第二阶段的所述任意一帧扫描图像进行配准叠加和增强处理,得到各帧扫描图像所对应的支架的第一目标图像;
将所述第一目标图像和所述裁剪图像进行配准叠加和增强处理,得到支架的目标图像。
9.一种支架显示装置,其特征在于,包括:
阶段确定模块,用于对目标对象的多帧扫描图像分为两个阶段,其中,各阶段均包括至少一帧扫描图像;
预测球囊点对确定模块,用于分别对目标对象的第一阶段的至少一帧扫描图像和第二阶段的至少一帧扫描图像进行预处理,分别得到所述目标对象的第一阶段的至少一帧扫描图像中的至少一个第一预测球囊点对和所述目标对象的第二阶段的至少一帧扫描图像中的至少一个第二预测球囊点对;
第一目标球囊点对确定模块,用于将所述第一预测球囊点对和所述第一阶段中的至少一帧扫描图像进行匹配,确定所述目标对象的第一阶段的至少一帧扫描图像中的支架的第一目标球囊点对;
目标图像确定模块,用于基于所述第一目标球囊点对和所述第二预测球囊点对,确定所述第二阶段的第二目标球囊点对,基于所述第二目标球囊点对得到支架的目标图像。
10.一种包含计算机可执行指令的存储介质,其特征在于,所述计算机可执行指令在由计算机处理器执行时用于执行如权利要求1-8中任一所述的支架显示方法。
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010922088.8A CN112017175B (zh) | 2020-09-04 | 2020-09-04 | 支架显示方法、装置和存储介质 |
EP21863734.6A EP4193301A4 (en) | 2020-09-04 | 2021-09-06 | SYSTEMS AND METHODS FOR IMAGE PROCESSING |
PCT/CN2021/116795 WO2022048672A1 (en) | 2020-09-04 | 2021-09-06 | Systems and methods for image processing |
US18/178,495 US20230206441A1 (en) | 2020-09-04 | 2023-03-04 | Systems and methods for image processing |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010922088.8A CN112017175B (zh) | 2020-09-04 | 2020-09-04 | 支架显示方法、装置和存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN112017175A true CN112017175A (zh) | 2020-12-01 |
CN112017175B CN112017175B (zh) | 2024-03-12 |
Family
ID=73516931
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010922088.8A Active CN112017175B (zh) | 2020-09-04 | 2020-09-04 | 支架显示方法、装置和存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112017175B (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2022048672A1 (en) * | 2020-09-04 | 2022-03-10 | Shanghai United Imaging Healthcare Co., Ltd. | Systems and methods for image processing |
CN116636866A (zh) * | 2023-05-17 | 2023-08-25 | 北京唯迈医疗设备有限公司 | 血管造影图像的支架的精显方法、装置以及存储介质 |
Citations (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2003043516A2 (en) * | 2001-11-21 | 2003-05-30 | Koninklijke Philips Electronics N.V. | Medical viewing system and method for detecting and enhancing arteries and stents in noisy images |
US20110144480A1 (en) * | 2009-12-10 | 2011-06-16 | Siemens Corporation | Stent marker detection using a learning based classifier in medical imaging |
US20110142318A1 (en) * | 2009-12-10 | 2011-06-16 | Siemens Corporation | Stent viewing using a learning based classifier in medical imaging |
US20140079308A1 (en) * | 2012-09-19 | 2014-03-20 | Siemens Aktiengesellschaft | Method and System for Real Time Stent Enhancement on Live 2D Fluoroscopic Scene |
US20140241599A1 (en) * | 2013-02-27 | 2014-08-28 | Siemens Aktiengesellschaft | Providing real-time marker detection for a stent in medical imaging |
US20160335766A1 (en) * | 2015-05-17 | 2016-11-17 | Lightlab Imaging, Inc. | Intravascular Imaging System Interfaces and Stent Detection Methods |
CA2986227A1 (en) * | 2015-05-17 | 2016-11-24 | Lightlab Imaging, Inc. | Intravascular imaging system interfaces and stent detection methods |
WO2018119718A1 (zh) * | 2016-12-28 | 2018-07-05 | 深圳迈瑞生物医疗电子股份有限公司 | 在超声扫描中的图像提取方法、装置及超声成像系统 |
US20180360408A1 (en) * | 2017-06-15 | 2018-12-20 | Shanghai United Imaging Healthcare Co., Ltd. | Imaging systems and methods thereof |
US20180360540A1 (en) * | 2017-06-16 | 2018-12-20 | Episurf Ip-Management Ab | System and method for creating a decision support material indicating damage to an anatomical joint |
CN109064504A (zh) * | 2018-08-24 | 2018-12-21 | 深圳市商汤科技有限公司 | 图像处理方法、装置和计算机存储介质 |
CN110879995A (zh) * | 2019-12-02 | 2020-03-13 | 上海秒针网络科技有限公司 | 目标物品检测方法及装置、存储介质及电子装置 |
CN111402406A (zh) * | 2020-03-23 | 2020-07-10 | 南京景三医疗科技有限公司 | 血管三维重建方法、装置及医疗设备 |
CN111462083A (zh) * | 2020-03-31 | 2020-07-28 | 北京东软医疗设备有限公司 | 图像处理方法、装置、电子设备及存储介质 |
-
2020
- 2020-09-04 CN CN202010922088.8A patent/CN112017175B/zh active Active
Patent Citations (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2003043516A2 (en) * | 2001-11-21 | 2003-05-30 | Koninklijke Philips Electronics N.V. | Medical viewing system and method for detecting and enhancing arteries and stents in noisy images |
US20110144480A1 (en) * | 2009-12-10 | 2011-06-16 | Siemens Corporation | Stent marker detection using a learning based classifier in medical imaging |
US20110142318A1 (en) * | 2009-12-10 | 2011-06-16 | Siemens Corporation | Stent viewing using a learning based classifier in medical imaging |
US20140079308A1 (en) * | 2012-09-19 | 2014-03-20 | Siemens Aktiengesellschaft | Method and System for Real Time Stent Enhancement on Live 2D Fluoroscopic Scene |
US20140241599A1 (en) * | 2013-02-27 | 2014-08-28 | Siemens Aktiengesellschaft | Providing real-time marker detection for a stent in medical imaging |
US20160335766A1 (en) * | 2015-05-17 | 2016-11-17 | Lightlab Imaging, Inc. | Intravascular Imaging System Interfaces and Stent Detection Methods |
CA2986227A1 (en) * | 2015-05-17 | 2016-11-24 | Lightlab Imaging, Inc. | Intravascular imaging system interfaces and stent detection methods |
WO2018119718A1 (zh) * | 2016-12-28 | 2018-07-05 | 深圳迈瑞生物医疗电子股份有限公司 | 在超声扫描中的图像提取方法、装置及超声成像系统 |
US20180360408A1 (en) * | 2017-06-15 | 2018-12-20 | Shanghai United Imaging Healthcare Co., Ltd. | Imaging systems and methods thereof |
US20180360540A1 (en) * | 2017-06-16 | 2018-12-20 | Episurf Ip-Management Ab | System and method for creating a decision support material indicating damage to an anatomical joint |
CN109064504A (zh) * | 2018-08-24 | 2018-12-21 | 深圳市商汤科技有限公司 | 图像处理方法、装置和计算机存储介质 |
CN110879995A (zh) * | 2019-12-02 | 2020-03-13 | 上海秒针网络科技有限公司 | 目标物品检测方法及装置、存储介质及电子装置 |
CN111402406A (zh) * | 2020-03-23 | 2020-07-10 | 南京景三医疗科技有限公司 | 血管三维重建方法、装置及医疗设备 |
CN111462083A (zh) * | 2020-03-31 | 2020-07-28 | 北京东软医疗设备有限公司 | 图像处理方法、装置、电子设备及存储介质 |
Non-Patent Citations (1)
Title |
---|
王启弘等: "血管内带膜支架在脑血管病治疗中的应用", 《国外医学(脑血管疾病分册)》, no. 08 * |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2022048672A1 (en) * | 2020-09-04 | 2022-03-10 | Shanghai United Imaging Healthcare Co., Ltd. | Systems and methods for image processing |
CN116636866A (zh) * | 2023-05-17 | 2023-08-25 | 北京唯迈医疗设备有限公司 | 血管造影图像的支架的精显方法、装置以及存储介质 |
CN116636866B (zh) * | 2023-05-17 | 2024-03-19 | 北京唯迈医疗设备有限公司 | 血管造影图像的支架的精显方法、装置以及存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN112017175B (zh) | 2024-03-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN106709917B (zh) | 神经网络模型训练方法、装置及系统 | |
CN111815599B (zh) | 一种图像处理方法、装置、设备及存储介质 | |
CN110956635A (zh) | 一种肺段分割方法、装置、设备及存储介质 | |
CN112017175A (zh) | 支架显示方法、装置和存储介质 | |
CN109712131B (zh) | 肺结节特征的量化方法、装置、电子设备及存储介质 | |
CN110378913B (zh) | 图像分割方法、装置、设备及存储介质 | |
CN109712695B (zh) | 血管图像的处理方法及交互显示方法、计算机装置 | |
KR910014841A (ko) | 패턴 매칭 방법 및 장치 | |
CN108022251A (zh) | 一种管状结构的中心线的提取方法及系统 | |
CN111178420B (zh) | 一种二维造影图像上冠脉段标注方法及系统 | |
CN114638292B (zh) | 一种基于多尺度分析的人工智能病理辅助诊断系统 | |
CN111914665A (zh) | 一种人脸遮挡检测方法、装置、设备及存储介质 | |
CN106548213A (zh) | 血管识别方法和装置 | |
CN110613417A (zh) | 一种输出上消化内镜操作信息的方法、设备及存储介质 | |
CN113628193A (zh) | 血管狭窄率确定方法、装置、系统及存储介质 | |
CN113313715B (zh) | 心脏动脉血管的分割方法、分割装置、设备和介质 | |
CN113033581B (zh) | 髋关节图像中骨骼解剖关键点定位方法、电子设备及介质 | |
EP3819862A1 (en) | Determination method, determination program, and information processing device | |
CN113763331A (zh) | 冠状动脉优势型判定方法、装置、存储介质及电子设备 | |
CN110428431B (zh) | 一种心脏医学图像的分割方法、装置、设备及存储介质 | |
CN115330696A (zh) | 一种支架的检测方法、装置、设备及存储介质 | |
CN112801994A (zh) | 骨龄评估方法和系统 | |
CN117058405B (zh) | 一种基于图像的情绪识别方法、系统、存储介质及终端 | |
CN113096141B (zh) | 冠状动脉分割方法以及冠状动脉分割装置 | |
CN115294014B (zh) | 一种头颈动脉图像处理方法、装置、存储介质及终端 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |