CN107347249B - 自动移动检测 - Google Patents
自动移动检测 Download PDFInfo
- Publication number
- CN107347249B CN107347249B CN201680015961.7A CN201680015961A CN107347249B CN 107347249 B CN107347249 B CN 107347249B CN 201680015961 A CN201680015961 A CN 201680015961A CN 107347249 B CN107347249 B CN 107347249B
- Authority
- CN
- China
- Prior art keywords
- sequence
- fluoroscopic
- image
- images
- fluoroscopic images
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000033001 locomotion Effects 0.000 title claims abstract description 49
- 238000001514 detection method Methods 0.000 title claims abstract description 11
- 210000003484 anatomy Anatomy 0.000 claims abstract description 21
- 230000002308 calcification Effects 0.000 claims description 17
- 238000004590 computer program Methods 0.000 claims description 12
- 238000012545 processing Methods 0.000 claims description 11
- 230000010354 integration Effects 0.000 claims description 9
- 238000006073 displacement reaction Methods 0.000 claims description 8
- 230000002123 temporal effect Effects 0.000 claims description 6
- 210000005166 vasculature Anatomy 0.000 claims description 3
- 230000000873 masking effect Effects 0.000 claims description 2
- 238000000034 method Methods 0.000 abstract description 35
- 208000004434 Calcinosis Diseases 0.000 description 16
- 238000002594 fluoroscopy Methods 0.000 description 8
- 230000002792 vascular Effects 0.000 description 8
- 239000002872 contrast media Substances 0.000 description 7
- 230000006870 function Effects 0.000 description 4
- 230000003068 static effect Effects 0.000 description 4
- 230000000007 visual effect Effects 0.000 description 4
- 238000002583 angiography Methods 0.000 description 3
- 210000000709 aorta Anatomy 0.000 description 3
- 230000000747 cardiac effect Effects 0.000 description 3
- 230000003936 working memory Effects 0.000 description 3
- 206010002329 Aneurysm Diseases 0.000 description 2
- 210000004204 blood vessel Anatomy 0.000 description 2
- 239000002131 composite material Substances 0.000 description 2
- 210000004351 coronary vessel Anatomy 0.000 description 2
- 230000001419 dependent effect Effects 0.000 description 2
- 239000007943 implant Substances 0.000 description 2
- 238000002347 injection Methods 0.000 description 2
- 239000007924 injection Substances 0.000 description 2
- 230000029058 respiratory gaseous exchange Effects 0.000 description 2
- 230000009466 transformation Effects 0.000 description 2
- 208000022211 Arteriovenous Malformations Diseases 0.000 description 1
- 206010053567 Coagulopathies Diseases 0.000 description 1
- 208000008883 Patent Foramen Ovale Diseases 0.000 description 1
- 208000031481 Pathologic Constriction Diseases 0.000 description 1
- 210000001765 aortic valve Anatomy 0.000 description 1
- 230000005744 arteriovenous malformation Effects 0.000 description 1
- 238000001574 biopsy Methods 0.000 description 1
- 230000035602 clotting Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000002059 diagnostic imaging Methods 0.000 description 1
- 239000003814 drug Substances 0.000 description 1
- 229940079593 drug Drugs 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 230000004927 fusion Effects 0.000 description 1
- 210000003709 heart valve Anatomy 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 238000003780 insertion Methods 0.000 description 1
- 230000037431 insertion Effects 0.000 description 1
- 238000013152 interventional procedure Methods 0.000 description 1
- 230000004807 localization Effects 0.000 description 1
- 238000007620 mathematical function Methods 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000000399 orthopedic effect Effects 0.000 description 1
- 230000005855 radiation Effects 0.000 description 1
- 238000001454 recorded image Methods 0.000 description 1
- 230000036262 stenosis Effects 0.000 description 1
- 208000037804 stenosis Diseases 0.000 description 1
- 230000001225 therapeutic effect Effects 0.000 description 1
- 238000012800 visualization Methods 0.000 description 1
Images
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/12—Arrangements for detecting or locating foreign bodies
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
- A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/46—Arrangements for interfacing with the operator or the patient
- A61B6/461—Displaying means of special interest
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/48—Diagnostic techniques
- A61B6/486—Diagnostic techniques involving generating temporal series of image data
- A61B6/487—Diagnostic techniques involving generating temporal series of image data involving fluoroscopy
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/50—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment specially adapted for specific body parts; specially adapted for specific clinical applications
- A61B6/504—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment specially adapted for specific body parts; specially adapted for specific clinical applications for diagnosis of blood vessels, e.g. by angiography
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0012—Biomedical image inspection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
- G06T7/246—Analysis of motion using feature-based methods, e.g. the tracking of corners or segments
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
- A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
- A61B2034/2046—Tracking techniques
- A61B2034/2065—Tracking using image or pattern recognition
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
- A61B90/36—Image-producing devices or illumination devices not otherwise provided for
- A61B2090/363—Use of fiducial points
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
- A61M25/00—Catheters; Hollow probes
- A61M25/01—Introducing, guiding, advancing, emplacing or holding catheters
- A61M25/09—Guide wires
- A61M2025/09166—Guide wires having radio-opaque features
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10016—Video; Image sequence
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10116—X-ray image
- G06T2207/10121—Fluoroscopy
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
- G06T2207/30021—Catheter; Guide wire
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
- G06T2207/30101—Blood vessel; Artery; Vein; Vascular
- G06T2207/30104—Vascular flow; Blood flow; Perfusion
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V2201/00—Indexing scheme relating to image or video recognition or understanding
- G06V2201/03—Recognition of patterns in medical or anatomical images
- G06V2201/034—Recognition of patterns in medical or anatomical images of medical instruments
Landscapes
- Health & Medical Sciences (AREA)
- Engineering & Computer Science (AREA)
- Life Sciences & Earth Sciences (AREA)
- Medical Informatics (AREA)
- Physics & Mathematics (AREA)
- Surgery (AREA)
- General Health & Medical Sciences (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Veterinary Medicine (AREA)
- Animal Behavior & Ethology (AREA)
- Radiology & Medical Imaging (AREA)
- Biomedical Technology (AREA)
- Heart & Thoracic Surgery (AREA)
- Molecular Biology (AREA)
- Public Health (AREA)
- Biophysics (AREA)
- Pathology (AREA)
- High Energy & Nuclear Physics (AREA)
- Optics & Photonics (AREA)
- Theoretical Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Vascular Medicine (AREA)
- Dentistry (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Human Computer Interaction (AREA)
- Quality & Reliability (AREA)
- Robotics (AREA)
- Apparatus For Radiation Diagnosis (AREA)
Abstract
提出了一种用于对其中设备正在离开在解剖结构内且相对于所述解剖结构的稳定位置的事件进行自动检测的方法和设备。所述方法包括以下步骤:接收荧光透视图像的序列,在所述荧光透视图像中的至少两幅荧光透视图像中检测设备,确定荧光透视图像的所述序列中的检测到的设备的运动场,通过考虑所述运动场而整合荧光透视图像的所述序列来生成经整合的图像的序列,基于所述经整合的图像来确定显著性度量,基于所述显著性度量来识别所述经整合的图像中的界标,并且基于所述显著性度量的变化来确定所述界标是否相对于所述设备正在移动。
Description
技术领域
本发明涉及用于对其中设备正在离开在解剖结构内且相对于解剖结构的稳定位置的事件进行自动检测的方法和系统。换句话说,本发明涉及一种用于自动检测设备在解剖结构内且相对于解剖结构的移动的方法和系统。此外,本发明涉及对应的计算机程序。
背景技术
导丝和介入设备的导航和精确定位是冗长乏味且耗时的,并且要求额外的造影剂爆发以使设备相对于相关血管的位置变得清晰。由于散射,患者和医务人员在采集诊断性血管造影和介入性荧光透视期间都会暴露于X射线。期望导航支持以减少介入时间并提高定位准确度。
因此,3D路线图绘制(roadmapping)在许多X射线引导下的介入中是非常重要的。由于在没有注入造影剂的情况下血管解剖结构在荧光透视图像中几乎不可见,因此经(静态或动态)配准的3D路线图绘制为介入医师提供了用于各种任务(例如,导航、定位或部署设备和/或评估结果)的视觉参考。
静态运动补偿涉及配准3D路线图以找到针对整个荧光透视序列的单个几何变换,而动态运动补偿要求为序列中的每个帧找到正确的几何变换。
有两种实现动态运动补偿的方法。第一种方法包括跟踪连接到脉管解剖结构的解剖学界标,所述解剖学界标具有与血管相同的运动,例如在TAVI流程期间的瓣膜定位和部署的背景中。
第二种方法包括跟踪连接到脉管解剖结构并因此具有相似运动的设备。设备清晰可见,是用于动态运动补偿算法的良好候选者。
这两种方法都有以下缺点:
·解剖学界标通常是非常模糊的且与不透明物体混杂,因此跟踪解剖学界标是一项艰巨的任务。额外地,检测和跟踪这样的界标要求来自用户的额外的输入。
·在血管内部锁定介入设备是方案的一部分,必须被最好地执行。如果要部署假体或支架,则该设备甚至可能被完全拉回。因此,设备解锁是常见的并且必须被检测到以评估运动补偿的有效性。
此外,导航系统能够通过提供接下来被显示或被叠加在实况荧光透视图片上的心脏路线图来帮助心脏病专家。在理想情况下,这种心脏路线图表示在血管造影期间采集的血管网络。
WO 2011/039681 A1描述了一种用于血管介入流程的准确定位的方法和医学成像系统。首先,利用注入的造影剂来采集感兴趣血管区域的至少一幅X射线图像。另外,在至少一幅采集到的图像内识别血管信息数据。然后,检测所述至少一幅采集到的图像中的所述感兴趣血管区域中的血管的第一钙化特征。另外,使用所述血管信息数据和检测到的钙化特征来生成血管表示。另外,采集所述感兴趣血管区域的至少一幅当前荧光透视图像。然后,检测在所述至少一幅当前荧光透视图像中的所述感兴趣血管区域中的所述血管的第二钙化特征,其中,所述第二钙化特征根据所述第一钙化特征。另外,将所述血管表示与所述荧光透视图像配准,其中,所述钙化特征用于所述配准。然后,通过将所述血管表示与所述至少一幅荧光透视图像进行组合来生成复合图像。最终显示所述复合图像。
在WO 2004/034329A2中,描述了依赖于对心脏和呼吸周期的提取以及(处于填充状态的)血管造影图像与实况图像之间的这些循环的匹配来实现心脏路线图绘制的基本方法。
发明内容
本发明提出了设备和解剖学界标两者的存在。尤其地,提出了一种使用解剖学界标进行自动设备解锁检测的方法,该方法结合基于设备的运动补偿,使得能够设计全自动的动态运动补偿方法。
能够看出,本发明的目的是提供一种消除或至少减少上述缺点的方法和设备。
本发明的另外的目的是提供器械在解剖部位中且相对于解剖部位的移动的指示。
这通过各自的独立权利要求中的每项的主题来实现。在各自的从属权利要求中描述了另外的实施例。
通常,一种用于对其中设备正在离开在解剖结构内且相对于所述解剖结构的稳定位置的事件进行自动检测的方法,所述方法包括以下步骤:接收荧光透视图像的序列,在荧光透视图像中的至少两幅荧光透视图像中检测设备,确定荧光透视图像的所述序列中的检测到的设备的运动场,通过考虑所述运动场而整个荧光透视图像的所述序列来生成经整合的图像的序列,基于所述经整合的图像来确定显著性度量,并且基于所述显著性度量来识别所述经整合的图像中的界标。另外,可以基于所述显著性度量的变化来确定所述界标是否相对于所述设备正在移动。
应当注意,可以以手动方式或借助于利用适当的图像处理计算机软件的自动程序在荧光透视图像中检测设备或设备的感兴趣部分。基于这种检测,也可以通过例如输入来手动定义器械的部分周围的区,或者可以根据先前确定的程序或软件算法来自动定义器械部分的周围的区。应当理解,在手动检测设备的部分之后,可以自动执行对区的定义,或者可以在系统在荧光透视图像中检测到包括设备的各方面之后手动定义区,并且通过例如对所述区进行突出显示来假定一部分。
在所描述的方法的背景中,设备可以是能够被引入到身体中的用于治疗或诊断目的的介入器械,例如,用于将支架插入脉管系统的导管。这种设备的感兴趣部分可以具体是设备的端部部分,即,设备的远端部分,例如,导管的远端部分,在该远端部分处容纳用于引入身体的支架。例如,该器械一方面可以是柔性的或刚性的导管或线端或电极,另一方面也可以是活检设备、套管或套管针。该器械也能够是内假体,例如,支架,封堵器(例如,专利卵圆孔封堵器),人造瓣膜等。
应当理解,运动场是一个数学函数,其给出了从给定图像到另一图像的像素的运动。例如,猪尾导管的运动场指示如何将猪尾从其当前帧中的位置移位且移位多少,以找到其在下一帧中的位置。换句话说,荧光透视图像的所述序列包括第一荧光透视图像和第二荧光透视图像,并且对运动场的所述确定包括例如对所述设备的在所述第一荧光透视图像中的检测到的位置与在所述第二荧光透视图像中的检测到的位置之间的位移的确定。因此,运动场可以包括与一个设备有关的多个像素的位移。在所描述的方法中,可以考虑与设备有关的至少一个像素的位移,以用于对多幅(即,至少两幅)荧光透视图像进行整合。
还应当注意,术语“显著性度量”指的是允许在图像中突出显示具有期望属性的区域的定量量度。显著性度量可以是根据经整合的图像计算出的地图,其中,像素值越高,该像素属于具有与该设备相同的运动的结构的可能性越高。给定属性的结构是“显著的”。这里,该属性“具有与设备相同的运动或位移”。换句话说,术语“显著性度量”指的是包括至少一个显著结构的地图,该显著结构可以被指代为界标。基于像素值的高度,在经整合的图像中确定界标,尤其是如钙化的解剖学界标。
本发明的目的是利用设备的运动场来增强这样的结构或界标,否则这些结构或界标将太模糊而无法检测到。
根据该方法的实施例,对荧光透视图像的所述序列的整合是时间整合。也就是说,根据已经生成这些荧光透视图像的时间序列来处理(即,整合)荧光透视图像的接收到的序列。
在多于两幅的经整合的图像的序列中,可以针对每幅新接收到的经整合的图像新确定显著性度量,使得生成显著性度量的序列。在这样的序列中,当将一个显著性度量中的界标的像素值与另一显著性度量进行比较时,显著性度量可能会变化。例如,当界标的像素值从一个显著性度量到下一显著性度量增加时,该设备相对于界标可能并不产生移位。另一方面,当界标的像素值从一个显著性度量到下一显著性度量降低时,能够假设该设备相对于界标正在移动。
根据一个实施例,该方法还可以包括以下步骤:将荧光透视图像的所述序列中的至少一幅荧光透视图像与路线图一起可视化为所述路线图在所述至少一幅荧光透视图像上的叠加。
当如上所述确定出所述界标相对于所述设备(或反之亦然)的运动时,可以掩蔽所述路线图。
应当注意,所述解剖学界标可以包括脉管系统中的钙化。要不然,所述界标还可以包括已经植入的元件,例如,已经植入被引入脉管系统的设备附近的支架或任何其它手术植入物或矫形植入物。
如果根据术前3D CT体积对钙化进行预分割,则能够将钙化实时投影在2D序列上。因此,钙化的2D形状和外观是已知的,并且能够用于改善显著性度量。
如果根据术前3D CT体积对钙化进行预分割,则钙化在2D序列上的投影可以用于细化执行时间整合的区域。
能够通过首先检测和掩蔽其他设备(例如,假体主动脉瓣)来缩小计算显著性度量的区域。
为了确保整个部署期间的动态运动补偿,检测解锁(并且因此故障)可以触发针对当前跟踪算法的替代方案,例如,钙化跟踪。
根据本发明的另一方面,一种用于对其中设备正在离开在解剖结构内且相对于所述解剖结构的稳定位置的事件进行自动检测的系统通常包括用于生成荧光透视图像的设备,以及用于根据上述方法处理所述荧光透视图像的处理设备。
所述系统还可以包括提供至少一幅路线图的数据库。
所述方法的结果(即,所实现的组合图像)可以被显示在合适的设备上,例如被显示在监视器上。
根据另外的方面,提供了一种用于对其中设备正在离开在解剖结构内且相对于所述解剖结构的稳定位置的事件进行自动检测的计算机程序,其中,所述计算机程序当在系统的处理设备上正被执行时令所述系统执行上述方法。
因此,可以基本上以自动方式执行根据本发明的方法,或至少主要以自动方式执行根据本发明的方法。因此,所述计算机程序可以包括用于收集和至少临时存储由适当系统生成的至少两幅荧光透视图像的指令集、用于识别荧光透视图像中示出的设备的指令集、用于确定荧光透视图像中的检测到的设备的运动场的指令集、用于基于运动场来整合荧光透视图像的指令集、用于基于经整合的图像来确定显著性度量的指令集、用于基于显著性度量来识别经整合的图像中的界标的指令集以及用于基于显著性度量的变化来确定界标是否相对于设备正在移动的指令集。
另外,所述计算机程序可以包括用于从包括先前记录的图像信息的数据库加载数据的指令集,或者可以包括用于从用户检索信息的指令集。
这样的计算机程序优选地被加载到数据处理器的工作存储器中。因此,数据处理器被配备为执行本发明的方法。另外,本发明涉及可以存储计算机程序的诸如CD-ROM的计算机可读介质。然而,所述计算机程序也可以通过诸如万维网的网络来呈现,并且能够从这样的网络下载到数据处理器的工作存储器中。
必须指出,本发明的实施例是参考不同主题来描述的。尤其地,一些实施例是参考方法型权利要求来描述的,而其他实施例是参考装置型权利要求来描述的。然而,除非另有说明,本领域技术人员将从以上和以下的描述中推断出,除属于一种类型的主题的特征的任意组合之外,涉及不同主题的特征之间的任意组合也被认为在本申请中被公开。
以上定义的各方面以及本发明的另外的方面、特征和优点还能够从下文中将要描述的实施例的范例中导出,并且参考附图中还示出的实施例的范例进行解释,但是本发明不限于此。
附图说明
图1是图示根据本发明的方法的流程图。
图2示出了根据本发明的系统的范例。
图3示出了具有突出显示的界标的荧光透视图像的范例。
图4示出了血管造影图像的范例。
图5示出了具有路线图的荧光透视图像的范例。
附图标记列表:
100 控制台
110 单元
120 设备
200 器械
220 器械的端部部分
300 患者
400 X射线设备
420 X射线源
430 C型臂
440 X射线探测器
460 表
500 界标
510 变暗区
520 路线图
600 处理单元
610 监视器
620 控制设备
具体实施方式
图1中的流程图图示了根据本发明的方法的原理。应当理解,关于该方法描述的步骤是主要步骤,其中这些主要步骤可以被区分成或被分成若干子步骤。此外,这些主要步骤之间可能还有一些子步骤。因此,如果一个子步骤对于理解根据本发明的方法的原理很重要,则仅提及该子步骤。
作为范例的方式,在以下考虑TAVI流程,其中动态运动补偿在瓣膜定位和瓣膜部署期间是特别有用的。
经受TAVI介入的患者通常会具有钙化的主动脉和/或冠状动脉。如果这些钙化足够接近主动脉根部,则它们可以充当解剖学界标。
诊断和介入规划是基于诊断性血管造影的。导管在进入部位处插入脉管系统后,沿着大血管前进到要求处置的脉管结构。经由导管注入造影剂,并且cathlab X射线装备记录血管造影序列,所述血管造影序列示出填充有造影剂的血管。能够利用不同的成像器几何来重复诊断性血管造影采集。
在随后的介入中,将柔性的、部分或完全不透射线的导丝推进到受影响的脉管结构(例如,冠状动脉中的狭窄、神经血管动脉瘤或动静脉畸形)。荧光低剂量X射线监视可视化导丝,并允许介入医师在推进导丝时手眼协调。当被定位时,导丝充当轨道以递送介入设备(例如,用于扩张和支架递送的气囊、用于动脉瘤凝血的可拆卸线圈)。介入设备的递送和部署也是荧光透视控制的。
介入医师可以将导管锁定在主动脉的尖端。作为输入,可以假设已经在术前3D CT体积中对主动脉根部进行分割(输入A到图1中的步骤S1)。另外,由X射线成像系统提供感兴趣区域的一幅或多幅血管造影图(输入B到图1中的步骤S1)。
在步骤S1中,可以将主动脉根部的3D路线图与先前的血管造影图静态地配准。然后,介入医师采集与血管造影图相同的几何参数的荧光透视序列,使得3D路线图的配准仍然有效(输入C到图1中的步骤S2)。
在步骤S2中,检测2D X射线序列中的注入导管的识别标志。也就是说,在X射线图像或帧中的至少两个中识别导管。
在步骤S3中,在X射线/荧光透视图像的序列中跟踪导管,使得获得针对当前帧的位移场或运动场。
在步骤S4中,在预期出现解剖学界标的区域中,运动场用于补偿各种运动(心跳、呼吸……)。在运动补偿区域中,执行对信号的时间整合。因此,具有与设备相同的运动的每个解剖结构将处于相同的位置处,因此它们的信号将通过时间整合而被增强。相反,时间整合将混合具有不同运动的目标或解剖结构,因此它们将显示为模糊区域。
然后在步骤S5中根据整合区域计算出显著性度量,其中,高值指示解剖结构已经被增强,而低值指示解剖结构已经被模糊化。
在步骤S6中,确定值是高还是低。在高值(图1中的路径H)的情况下,设备和解剖学界标遵循相同的位移/运动场,这意味着设备仍然被锁定到主动脉根部,并且该方法继续进行步骤S7。在低值(图1中的路径L)的情况下,至少一个解剖学界标具有与设备运动不相同的运动,使得能够断定该设备被解锁。在这种情况下,该方法将继续进行步骤S10。
在步骤S7中,由于血管结构本身不是不透射线的(即,在介入期间是不可见的),因此利用血管造影图到实况图像中的叠加技术(被称为路线图绘制)。可以在实况介入性荧光透视图旁边显示利用相似的成像器几何采集的静态诊断性血管造影图。对于血管内的导丝和设备的导航,静态血管造影图和实况荧光透视图的主观视觉融合是有利的。改进的背景丰富的可视化能够在导航中提供重要的支持。因此,将预处理的血管造影图的至少轮廓叠加在荧光透视图像流上,使得在一个屏幕上同步显示血管和介入设备。
在步骤S8中,可以显示显著性度量,即,可以显示其中指示设备附近的至少一个界标的地图。适当的显著性度量充当为对介入医师的视觉反馈,当设备被锁定时显示增强的解剖结构。应当注意,步骤S8也可以被省略。
在步骤S9中,检查当前处理的荧光透视帧是否是最后一帧。如果为是(y),则完成该流程,如果为否(n),则该流程通过在下一帧中跟踪设备来重复步骤S3。
如果在步骤S6中已经将值确定为低,即,已经检测到解锁,则在步骤S10中关闭3D路线图的显示,并且在步骤S11中能够发出视觉警告。
类似于步骤S9,在步骤S12中检查当前处理的荧光透视帧是否是最后一帧。如果为是(y),则完成该流程,如果为否(n),则该流程通过在下一帧中跟踪设备来重复步骤S3。
图2示出了根据本发明的示范性系统,该系统包括针对器械200的控制台100,该器械200可以被引入到患者300中。此外,X射线设备400相对于患者被布置为使得可以产生器械200的端部部分220所位于的区域的荧光透视图像。最后,提供处理单元600,所述处理单元600可以借助于X射线设备400以及控制台100来控制荧光透视图像的生成,以控制器械200的功能(如果适用)。
这里,控制器100还可以包括可以借以递送造影剂的单元110,使得可以生成例如血管造影图像或一系列血管造影图像。另一方面,借助于单元110,可以注入药物。另外,控制台100可以包括设备120,例如,借助于该设备120,可以控制器械200的端部部分220的取向,或者可以控制器械的特殊功能,如激光应用或对如支架的假体的放置,或引入气囊以及对气囊充气。应当注意,取决于想要的处置,控制台100还可以包括多于两个的单元或设备。
X射线设备400包括X射线源420以及用于X射线辐射的探测器440,其中,X射线源420以及X射线探测器440两者均被布置在C型臂430处,以确保两者相对于彼此的恰当取向。患者300可以被定位在诊察台460处。
处理单元600首先包括控制单元620,并且还包括监视器610,其中,可以在所述监视器上显示关于例如器械的端部的当前位置的信息的输出。
处理单元600还可以包括处理设备或工作存储器,在其上可以存储和/或执行根据本发明的执行解锁检测的计算机程序。
图3示出了荧光透视图像的一个范例,一方面示出了设备/导管200的远端部分,这里具体是导管上的基于塌缩的支架的心脏瓣膜,另一方面可以示出可以用作如图1所示的方法中的解剖学界标的钙化500。
图4示出了包括因升主动脉中具有造影剂的变暗区510的血管造影图像的范例。基于这样的血管造影图像,可以生成路线图520作为变暗区510的轮廓。
图5示出了荧光透视图像和在上述方法的步骤S1中生成的路线图的范例。
尽管已经在附图和前面的描述中详细图示和描述了本发明,但是这样的图示和描述应当被认为是图示性或示范性的,而非限制性的;本发明不限于所公开的实施例。
本领域技术人员通过研究附图、公开内容以及权利要求,在实践请求保护的发明时能够理解并实现对所公开的实施例的其他变型。在权利要求中,“包括”一词不排除其他元件或步骤,并且词语“一”或“一个”不排除多个。单个处理器或其他单元可以实现在权利要求中记载的若干项的功能。
尽管某些措施被记载在互不相同的从属权利要求中,但是这并不指示不能有利地使用这些措施的组合。计算机程序可以被存储/分布在合适的介质上,例如与其他硬件一起或作为其他硬件的部分供应的光学存储介质或固态介质,但是也可以被以其他形式分布,例如经由互联网或其他有线或无线的电信系统。权利要求中的任何附图标记都不应被解释为对范围的限制。
Claims (14)
1.一种用于对其中设备(200)正在离开在解剖结构内且相对于所述解剖结构的稳定位置的事件进行自动检测的装置,所述装置包括:
用于接收荧光透视图像的序列的模块,
用于在所述荧光透视图像中的至少两幅荧光透视图像中检测设备(200)的模块,
用于确定荧光透视图像的所述序列中的检测到的设备的运动场的模块,
用于通过考虑所述运动场而整合荧光透视图像的所述序列来生成经整合的图像的序列的模块,其中,具有与所述设备相同的运动的解剖结构的信号将被增强,而具有与所述设备不同的运动的解剖结构的信号将被模糊,
用于基于所述经整合的图像来确定显著性度量的模块,
用于基于所述显著性度量来识别所述经整合的图像中的界标(500)的模块。
2.根据权利要求1所述的装置,还包括:用于基于所述显著性度量的变化来确定所述界标(500)是否相对于所述设备(200)正在移动的模块。
3.根据权利要求1和2中的任一项所述的装置,其中,荧光透视图像的所述序列包括第一荧光透视图像和第二荧光透视图像,其中,对运动场的所述确定包括对所述设备(200)的在所述第一荧光透视图像中的检测到的位置与在所述第二荧光透视图像中的检测到的位置之间的位移的确定,并且其中,考虑所述位移以用于整合多幅荧光透视图像。
4.根据权利要求1至2中的任一项所述的装置,其中,对荧光透视图像的所述序列的所述整合是时间整合。
5.根据权利要求1至2中的任一项所述的装置,其中,基于像素值的高度来确定经整合的图像中的所述界标(500)。
6.根据权利要求1至2中的任一项所述的装置,其中,当所述经整合的图像的序列中的像素值变化时,所述显著性度量变化。
7.根据权利要求1至2中的任一项所述的装置,还包括:用于将荧光透视图像的所述序列中的至少一幅荧光透视图像与路线图(520)一起可视化为所述路线图在所述至少一幅荧光透视图像上的叠加的模块。
8.根据权利要求7所述的装置,还包括:用于当确定出所述界标(500)相对于所述设备(200)的运动时,掩蔽所述路线图(520)的模块。
9.根据权利要求1至2中的任一项所述的装置,其中,所述界标(500)包括脉管系统中的钙化。
10.根据权利要求1至2中的任一项所述的装置,其中,所述界标包括已经植入的元件。
11.一种用于对其中设备(200)正在离开在解剖结构内且相对于所述解剖结构的稳定位置的事件进行自动检测的系统,包括:
用于生成荧光透视图像(100、400)的设备(400),以及
根据权利要求1-10中的任一项所述的装置。
12.根据权利要求11所述的系统,还包括用于显示图像的监视器(610)。
13.根据权利要求11和12中的任一项所述的系统,还包括提供路线图的数据库。
14.一种计算机可读介质,其存储用于对其中设备正在离开在解剖结构内且相对于所述解剖结构的稳定位置的事件进行自动检测的计算机程序,所述计算机程序当在处理设备上被执行时令所述处理设备执行
接收荧光透视图像的序列,
在所述荧光透视图像中的至少两幅荧光透视图像中检测设备(200),
确定荧光透视图像的所述序列中的检测到的设备的运动场,
通过考虑所述运动场而整合荧光透视图像的所述序列来生成经整合的图像的序列,其中,具有与所述设备相同的运动的解剖结构的信号将被增强,而具有与所述设备不同的运动的解剖结构的信号将被模糊,
基于所述经整合的图像来确定显著性度量,
基于所述显著性度量来识别所述经整合的图像中的界标(500)。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
EP15305383 | 2015-03-16 | ||
EP15305383.0 | 2015-03-16 | ||
PCT/EP2016/054345 WO2016146380A1 (en) | 2015-03-16 | 2016-03-02 | Automatic movement detection |
Publications (2)
Publication Number | Publication Date |
---|---|
CN107347249A CN107347249A (zh) | 2017-11-14 |
CN107347249B true CN107347249B (zh) | 2021-10-01 |
Family
ID=52686305
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201680015961.7A Active CN107347249B (zh) | 2015-03-16 | 2016-03-02 | 自动移动检测 |
Country Status (5)
Country | Link |
---|---|
US (1) | US10869642B2 (zh) |
EP (1) | EP3270786B1 (zh) |
JP (2) | JP6636535B2 (zh) |
CN (1) | CN107347249B (zh) |
WO (1) | WO2016146380A1 (zh) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6636535B2 (ja) * | 2015-03-16 | 2020-01-29 | コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. | 自動的な動き検出 |
CN108605095B (zh) | 2016-02-26 | 2021-04-09 | 富士胶片株式会社 | 图像处理装置、摄像装置以及图像处理方法 |
WO2019019048A1 (en) * | 2017-07-26 | 2019-01-31 | Shenzhen Xpectvision Technology Co., Ltd. | RADIOLOGICAL IMAGING SYSTEM AND METHOD OF MONITORING RADIOLOGICAL IMAGE |
CN107874760B (zh) * | 2017-09-27 | 2020-12-25 | 中国科学院深圳先进技术研究院 | 一种医学影像中的导丝追踪方法、装置、设备及存储介质 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6320976B1 (en) * | 1999-04-01 | 2001-11-20 | Siemens Corporate Research, Inc. | Computer-assisted diagnosis method and system for automatically determining diagnostic saliency of digital images |
CN102573632A (zh) * | 2009-09-29 | 2012-07-11 | 皇家飞利浦电子股份有限公司 | 脉管路线图绘制 |
Family Cites Families (28)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2792133B2 (ja) * | 1989-08-30 | 1998-08-27 | 株式会社島津製作所 | 画像処理装置 |
US5253169A (en) * | 1991-11-29 | 1993-10-12 | General Electric Company | Method and apparatus for reducing x-ray dosage during fluoroscopic examinations |
US5274551A (en) * | 1991-11-29 | 1993-12-28 | General Electric Company | Method and apparatus for real-time navigation assist in interventional radiological procedures |
AU2002348833A1 (en) * | 2001-11-30 | 2003-06-10 | Koninklijke Philips Electronics N.V. | Medical viewing system and method for enhancing structures in noisy images |
DE10247299A1 (de) | 2002-10-10 | 2004-04-22 | Philips Intellectual Property & Standards Gmbh | Bildverarbeitungseinheit und Verfahren für die Zuordnung von gespeicherten zu aktuellen Aufnahmen |
WO2004110271A1 (en) * | 2003-06-16 | 2004-12-23 | Philips Intellectual Property & Standards Gmbh | Imaging system for interventional radiology |
DE102004004604B4 (de) * | 2004-01-29 | 2016-12-29 | Siemens Healthcare Gmbh | Verfahren und Bildgebungssystem zur Kompensation von Patientenbewegungen bei Serienaufnahmen in der medizinischen Bildgebung |
JP2009504222A (ja) * | 2005-08-09 | 2009-02-05 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | ブラインドデコンボリューションによりノイズの多い画像の構造を空間的に強調するシステム及び方法 |
US7826884B2 (en) * | 2006-07-31 | 2010-11-02 | Siemens Medical Solutions Usa, Inc. | Live fluoroscopic roadmapping including targeted automatic pixel shift for misregistration correction |
US7907217B2 (en) * | 2006-10-31 | 2011-03-15 | Siemens Medical Solutions Usa, Inc. | Systems and methods of subtraction angiography utilizing motion prediction |
US8111895B2 (en) * | 2006-12-06 | 2012-02-07 | Siemens Medical Solutions Usa, Inc. | Locally adaptive image enhancement for digital subtraction X-ray imaging |
US7609814B2 (en) * | 2008-01-15 | 2009-10-27 | Siemens Medical Solutions Usa, Inc. | Adaptive medical image and mask data processing system |
TWI535267B (zh) * | 2008-04-25 | 2016-05-21 | 湯姆生特許公司 | 影像序列的圖像之圖像部位寫碼方法及所用寫碼器和解碼器 |
JP5523791B2 (ja) * | 2008-10-27 | 2014-06-18 | 株式会社東芝 | X線診断装置および画像処理装置 |
JP2010115429A (ja) * | 2008-11-14 | 2010-05-27 | Toshiba Corp | X線診断装置および画像処理装置 |
RU2535608C2 (ru) * | 2009-09-29 | 2014-12-20 | Конинклейке Филипс Электроникс Н.В. | Совмещение в реальном времени для лечения сосудов |
US9189851B2 (en) * | 2010-01-07 | 2015-11-17 | Siemens Aktiengesellschaft | Method of motion compensation for trans-catheter aortic valve implantation |
US8565859B2 (en) * | 2010-06-29 | 2013-10-22 | Siemens Aktiengesellschaft | Method and system for image based device tracking for co-registration of angiography and intravascular ultrasound images |
US8712177B2 (en) * | 2011-01-25 | 2014-04-29 | Siemens Aktiengesellschaft | Motion compensated overlay |
CN103429158B (zh) * | 2011-03-15 | 2017-12-26 | 皇家飞利浦有限公司 | 用于提供支持介入设备的定位的图像表示的医疗成像设备 |
US8600538B2 (en) * | 2011-04-11 | 2013-12-03 | Disney Enterprises, Inc. | System and method for producing three-dimensional multi-layer objects from digital models |
US9186087B2 (en) * | 2011-04-13 | 2015-11-17 | Siemens Aktiengesellschaft | Combined cardiac and respiratory motion compensation for atrial fibrillation ablation procedures |
US8891009B2 (en) * | 2011-08-29 | 2014-11-18 | Futurewei Technologies, Inc. | System and method for retargeting video sequences |
WO2013165565A1 (en) * | 2012-04-30 | 2013-11-07 | Nikon Corporation | Method of detecting a main subject in an image |
US9082158B2 (en) * | 2012-09-19 | 2015-07-14 | Siemens Aktiengesellschaft | Method and system for real time stent enhancement on live 2D fluoroscopic scene |
US9259200B2 (en) * | 2012-10-18 | 2016-02-16 | Siemens Aktiengesellschaft | Method and system for obtaining a sequence of x-ray images using a reduced dose of ionizing radiation |
US9147255B1 (en) * | 2013-03-14 | 2015-09-29 | Hrl Laboratories, Llc | Rapid object detection by combining structural information from image segmentation with bio-inspired attentional mechanisms |
JP6636535B2 (ja) * | 2015-03-16 | 2020-01-29 | コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. | 自動的な動き検出 |
-
2016
- 2016-03-02 JP JP2017548943A patent/JP6636535B2/ja active Active
- 2016-03-02 EP EP16707718.9A patent/EP3270786B1/en active Active
- 2016-03-02 WO PCT/EP2016/054345 patent/WO2016146380A1/en active Application Filing
- 2016-03-02 US US15/557,855 patent/US10869642B2/en active Active
- 2016-03-02 CN CN201680015961.7A patent/CN107347249B/zh active Active
-
2019
- 2019-04-26 JP JP2019085270A patent/JP6828083B2/ja active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6320976B1 (en) * | 1999-04-01 | 2001-11-20 | Siemens Corporate Research, Inc. | Computer-assisted diagnosis method and system for automatically determining diagnostic saliency of digital images |
CN102573632A (zh) * | 2009-09-29 | 2012-07-11 | 皇家飞利浦电子股份有限公司 | 脉管路线图绘制 |
Non-Patent Citations (1)
Title |
---|
Temporal Spectral Residual for fast salient motion detection;Cui Xinyi,et al;《Neurocomputing》;20121231;第86卷;第24-32页 * |
Also Published As
Publication number | Publication date |
---|---|
JP6828083B2 (ja) | 2021-02-10 |
JP2018507758A (ja) | 2018-03-22 |
WO2016146380A1 (en) | 2016-09-22 |
EP3270786A1 (en) | 2018-01-24 |
EP3270786B1 (en) | 2018-12-19 |
US10869642B2 (en) | 2020-12-22 |
US20180055462A1 (en) | 2018-03-01 |
CN107347249A (zh) | 2017-11-14 |
JP2019162451A (ja) | 2019-09-26 |
JP6636535B2 (ja) | 2020-01-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP2482726B1 (en) | Vascular roadmapping | |
CN110248603B (zh) | 3d超声和计算机断层摄影结合用于引导介入医疗规程 | |
US8255037B2 (en) | Cardiac roadmapping | |
US9042628B2 (en) | 3D-originated cardiac roadmapping | |
US7725165B2 (en) | Method and apparatus for visualizing anatomical structures | |
US10682112B2 (en) | Suppression of independent movements in a series of 2D X-ray fluoroscopy images using a 3D pre-operative volume | |
US8554308B2 (en) | Phase-free cardiac roadmapping | |
JP6828083B2 (ja) | 自動的な動き検出 | |
US9875531B2 (en) | Bone suppression in X-ray imaging | |
US20120022366A1 (en) | Registration of aorta to patient via two 2d images for placement of a stent | |
US10478140B2 (en) | Nearest available roadmap selection | |
KR101703564B1 (ko) | 혈관 정보를 포함하는 의료 영상을 디스플레이하는 장치 및 방법 | |
US20230172571A1 (en) | Providing a result data set | |
CN116894865A (zh) | 结果数据集的提供 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |