CN103648394B - 使用外科工具曲线与x-射线图像的配准的实时3d血管造影 - Google Patents

使用外科工具曲线与x-射线图像的配准的实时3d血管造影 Download PDF

Info

Publication number
CN103648394B
CN103648394B CN201280031945.9A CN201280031945A CN103648394B CN 103648394 B CN103648394 B CN 103648394B CN 201280031945 A CN201280031945 A CN 201280031945A CN 103648394 B CN103648394 B CN 103648394B
Authority
CN
China
Prior art keywords
shape
ray image
ray
body cavity
instrument
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201280031945.9A
Other languages
English (en)
Other versions
CN103648394A (zh
Inventor
A·K·贾殷
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Koninklijke Philips NV
Original Assignee
Koninklijke Philips Electronics NV
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Koninklijke Philips Electronics NV filed Critical Koninklijke Philips Electronics NV
Publication of CN103648394A publication Critical patent/CN103648394A/zh
Application granted granted Critical
Publication of CN103648394B publication Critical patent/CN103648394B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment
    • A61B6/12Devices for detecting or locating foreign bodies
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment
    • A61B6/46Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment with special arrangements for interfacing with the operator or the patient
    • A61B6/461Displaying means of special interest
    • A61B6/466Displaying means of special interest adapted to display 3D data
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment
    • A61B6/48Diagnostic techniques
    • A61B6/481Diagnostic techniques involving the use of contrast agents
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment
    • A61B6/50Clinical applications
    • A61B6/504Clinical applications involving diagnosis of blood vessels, e.g. by angiography
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment
    • A61B6/50Clinical applications
    • A61B6/507Clinical applications involving determination of haemodynamic parameters, e.g. perfusion CT
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046Tracking techniques
    • A61B2034/2061Tracking techniques using shape-sensors, e.g. fiber shape sensors with Bragg gratings
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36Image-producing devices or illumination devices not otherwise provided for
    • A61B2090/364Correlation of different images or relation of image positions in respect to the body
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36Image-producing devices or illumination devices not otherwise provided for
    • A61B90/37Surgical systems with images on a monitor during operation
    • A61B2090/376Surgical systems with images on a monitor during operation using X-rays, e.g. fluoroscopy

Abstract

提供一种用于提供体腔的实时3D图像的方法、系统和程序产品。使用光学感测来确定所述体腔中的柔性外科工具的3D形状。获取所述体腔的X‑射线图像,所述体腔和所述外科工具中的至少一个是不透射线的。将确定的3D外科工具形状与所述X‑射线图像进行配准。

Description

使用外科工具曲线与X-射线图像的配准的实时3D血管造影
技术领域
本发明涉及医学成像领域,并且更具体而言,涉及一种用于在介入期间使用外科工具曲线与X-射线图像的配准来提供实时血管造影的方法和系统。
背景技术
在心脏介入中,同时进行工具跟踪和脉管重建是个重要的挑战。一个已知方法是使用对导管末端的电磁(EM)跟踪,并且将探测到的导管尖端位置覆盖到来自先前执行的CT扫描中的3D图像重建上。然而,至少部分由于来自身体机能的运动,诸如,呼吸和患者的心跳,该方法提供有限的准确度。同样,由于过程所需的时间,CT扫描并不是实时进行的。另一已知方法是使用CT扫描器来执行旋转锥束扫描,并且从X-射线上的多个2D投影中计算出导管形状。该方法需要多个X-射线以及相应的放射剂量,并且也受到姿势之间的运动的问题的影响。
血管造影是用于观察和测量患者冠状系统的结构特性和功能特性的实时模态,以用于诊断和矫正过程。当前,为了执行3D血管造影,造影导管被放置在脉管中的感兴趣区域处,以第一角度获取X-射线图像,X-射线机器被重新放置至第二角度,以第二角度获取第二X-射线图像,并且从X-射线图像中重建3D图像。然而,该方法受到因呼吸和心跳导致的图像之间的运动的影响。此外,向患者和医务人员暴露多次X-射线,以增加放射剂量。
发明内容
本发明提供一种用于使用外科工具曲线与X-射线图像的配准来提供实时3D血管造影的方法、系统和程序产品。通过光学形状感测(OSS)来确定外科工具的形状,其中,具有多个或者连续的光学传感器或者感测的至少一个纵向的光纤包括具有被布置在工具中的散射源(诸如,布拉格光纤光栅或瑞利散射体)的光纤核心,其响应于纤维中的局部应变而使反射光的波长偏移。OSS被理解为包括用于形状感测或定位的光纤,例如,所述形状感测或定位通常包括,根据使用反向散射、光纤力感测、纤维位置传感器、布拉格光纤光栅或瑞利散射来对纤维中的一个或多个部分的变化的探测进行感测或定位。光学控制台询问传感器并且探测反射光。处理器从反射波长的偏移来计算沿传感器的长度的局部曲率,以确定工具的三维形状。获取工具所位于的区域的X-射线图像,并且将3D工具形状与2D分割图像进行配准。根据2D图像和3D形状进行3D绘制。
根据一个实施例,提供一种用于提供体腔的实时3D图像的方法。所述方法包括使用光学形状感测来确定所述体腔中的柔性外科工具的3D形状。获取所述体腔的X-射线图像,所述体腔和所述外科工具中的至少一个是不透射线的。将确定的3D外科工具形状与所述X-射线图像进行配准。
在一个实施例中,所述配准步骤包括:分割所述X-射线图像中的工具的2D图像,以及恢复所述工具的2D X-射线图像的姿态。可以使用任何适当的技术来执行所述分割,以提供对应所述工具的坐标对的集合。可以利用任何适当的方法(诸如,迭代闭点(ICP)、Rosenhahn方法等)来执行所述姿态恢复。
根据本发明的一个实施例,所述方法还可以包括:计算X-射线空间中的所述3D工具形状;以及将来自该X-射线图像的特征叠加至确定的3D形状上。之后,可以将具有叠加在其上的X-射线特征的所述3D工具形状显示在显示器上。
根据一个实施例,所述工具是造影导管,并且获取X-射线图像的所述步骤包括通过所述导管递送造影染料,以使得所述导管是不透射线的。
根据一个实施例,所述体腔是至少一个血管。被显示具有叠加在其上的X-射线特征的所述3D工具形状可以是血管造影。
根据一个实施例,重复获取X-射线图像的所述步骤,实时确定所述3D工具形状,以及实时显示具有叠加在其上的X-射线特征的所述3D工具形状。
根据一个实施例,提供一种用于提供体腔的实时3D图像的系统。所述系统与其附着的外科工具,在所述外科工具中形成具有形状感测传感器的至少一个光纤。还提供至少一个处理器。光学模块可操作地连接至所述至少一个处理器,并且包括光源。X-射线系统可操作地连接至所述至少一个传感器。至少一个存储器也可操作地连接至所述至少一个传感器。至少一个指令程序被编码在所述至少一个存储器上,所述至少一个指令程序通过所述至少一个处理器可执行以:使用在所述光学模块中的所述光源来询问所述形状传感器,以及使用光学形状感测来确定所述体腔中的柔性外科工具的3D形状;获取所述体腔的X-射线图像,所述体腔和所述外科工具中的至少一个是不透射线的;以及将确定的3D外科工具形状与所述X-射线图像进行配准。
根据一个实施例,以上描述的系统还包括显示器,并且所述至少一个指令程序还包括,被编码在所述至少一个存储器上以将所述3D工具形状显示在所述显示器上的程序指令。
根据一个实施例,用于配准确定的3D工具形状的所述程序指令包括被编码在所述至少一个存储器上以:分割所述X-射线图像中的所述工具的2D图像,以及恢复所述工具的所述2D X-射线图像的姿态的程序指令。
根据一个实施例,所述程序指令还包括被编码在所述至少一个存储器上以计算X-射线空间中的所述3D工具形状、以及将来自该X-射线图像的特征叠加至确定的3D形状上的程序指令。
在一个实施例中,所述工具是造影导管,在获取X-射线图像之前通过导管递送造影染料,以使得所述导管是不透射线的。
根据一个实施例,提供一种包括有形的计算机可读存储设备的计算机程序产品,所述有形的计算机可读存储设备具有在其上编码的指令程序,所述计算机程序产品包括:用于使用光学形状感测来确定所述体腔中的柔性外科工具的3D形状的程序指令;用于获取所述体腔的X-射线图像的程序指令,所述体腔和所述外科工具中的至少一个是不透射线的;以及用于将确定的3D外科工具形状与所述X-射线进行配准的程序指令。
根据一个实施例,用于配准所述确定的3D外科工具形状的所述程序指令包括:用于分割所述X-射线图像中的工具的2D图像的程序指令,以及用于恢复所述工具的2D X-射线图像的姿态的程序指令。
根据一个实施例,所述计算机程序产品还包括:被编码在所述有形的计算机可读存储设备上用于计算X-射线空间中的所述3D工具形状的程序指令,以及被编码在所述有形的计算机可读存储设备上用于将来自所述X-射线图像的特征叠加至确定的3D形状上的程序指令。
根据一个实施例,所述计算机程序产品还包括:被编码在所述有形的计算机可读存储设备上用于显示具有叠加在其上的X-射线特征的所述3D工具形状的程序指令。
根据一个实施例,重复用于获取X-射线图像的所述程序指令,并且该计算机程序产品还包括:被编码在所述有形的计算机可读存储设备上用于实时确定所述3D工具形状的程序指令,以及被编码在所述有形的计算机可读存储设备上用于实时显示具有叠加在其上的X-射线特征的所述3D工具形状的程序指令。
附图说明
通过以下对优选实施例的详细描述,当结合附图阅读时将更加清楚地理解本发明的特征和优点。在附图中包括以下各图:
图1是在本发明的实施例中使用的成像系统的等距视图;
图2是根据本发明的实施例被配置为使用外科工具的曲线与X-射线图像的配准来将光学形状感测用于提供实时3D血管造影的外科工具的侧视图;
图3是从线A-A获取的图2的外科工具的剖视图;
图4是根据本发明的实施例用于使用外科工具曲线与X-射线图像的配准来进行实时3D血管造影的系统的方框图;以及
图5是根据本发明的实施例用于使用外科工具曲线与X-射线图像的配准来进行实时3D血管造影的方法的方框图。
具体实施方式
本发明提供一种用于使用外科工具曲线与X-射线图像的配准来提供实时3D血管造影的方法、系统和程序产品。
图1示出了根据本发明的实施例用于使用外科工具曲线与X-射线图像的配准来提供实时3D血管造影的成像系统。所述成像系统包括被布置为获取工作台10上的患者的X-射线图像的X-射线机器300。处理系统100(诸如,通用计算机)被可操作地连接至X-射线机器,并且处理来自所述X-射线机器300的X-射线图像。可以在显示器140上呈现经处理的图像。
柔性外科工具220被配置为光学形状感测(OSS)。根据一个实施例,通过光学形状感测(OSS)来确定外科工具220的形状,如图2和图3中所示,在所述光学形状感测中,至少一个纵向光纤222配备包括光纤核心的多个光学传感器224,所述光纤核心具有被布置在所述工具中的散射源(诸如,布拉格光纤光栅或瑞利散射体),其响应于光栅中的局部应变而使反射光波长偏移。光学控制台210询问传感器224,并且探测反射光。
根据一个实施例,外科工具220是造影导管221。所述造影导管是符合血管形状的柔性中空管,并且通过它的中空开口将造影染料递送至感兴趣区域,从而使得能够在X-射线图像上看到感兴趣区域。造影导管可以用于使血管可视化,诸如,用于堵塞和动脉瘤的探测,并且通过造影染料随时间的运动和扩散来确定血流,以及观察其他结构特性和功能特性。
至少一个光纤222在纵向方向上被固定至导管221。可以通过胶粘、缝制或任意其他适当的附接技术来将(一个或多个)光纤附着在导管的外壁上。备选地,可以使用任意适当的技术来将(一个或多个)光纤固定在导管的内部或所述壁自身中。尽管可以使用一个光纤222,但也可以使用多个纤维,并且所述多个纤维可以处于均匀的径向间距,如图3中所示。
光学控制台210可以包括处理器211,其用于控制传感器224的询问,并且用于在对应传感器224的位置的时间间隔处从反射光的反射波长的偏移来计算3D空间中的每个传感器224处的局部曲率。所述处理器211也可从该局部曲率计算外科工具220的3D形状。备选地,通过处理系统100中的处理器110来执行所述询问控制和所述计算中的一个或多个。所述3D形状可以被存储作为3坐标(x,y,z)三元组的集合。
图4中示出了根据本发明的实施例用于使用外科工具曲线与X-射线图像的配准来提供实时3D血管造影的系统。所述系统包括处理器110、存储器120、显示器140、X-射线系统300以及光学形状感测系统200。
处理器110可操作地被连接至存储器120。根据一个实施例,其通过总线130被连接。处理器110可以是能够执行程序指令的任意设备,诸如,一个或多个微处理器。所述存储器可以是任意易失性或非易失性存储设备,诸如,可移除磁盘、硬盘驱动器、CD、随机存取存储器(RAM)、只读存储器(ROM)等。此外,处理器110可以体现在通用计算机中。
显示器140也可操作地被连接至处理器110。所述显示器可以是适合用于呈现能够呈现医学图像的图形化用户界面(GUI)的任意监视器、屏幕等。
X-射线系统300可操作地被连接至处理器110。所述X-射线系统向处理器110提供X-射线成像数据,用于处理,以创建解剖特征的X-射线图像。之后,在显示器140上呈现所述X-射线图像。
存储器120具有在其上编码的程序指令122,所述程序指令112可以通过处理器110来执行,以处理来自X-射线系统300的X-射线图像。除了用于处理X-射线图像以呈现在显示器140上的程序指令122之外,也提供指令程序124,其执行2D X-射线图像与工具220形状的3D图像空间的配准。
配准指令程序124包括分割程序指令125,其可以通过处理器10来执行,以使用分割在2D X-射线图像内定位具有造影染料的血管或外科工具220。亦即,位置程序指令125在2D X-射线图像帧内定位血管或(符合血管的)工具220的位置。位置或分割程序指令125可以使用适合用于在X-射线图像内定位高对比度图像分割的中心的任意分割程序。这些分割程序是在本领域中众所周知的,并且在该申请中将不做进一步描述。位置程序指令125可以是配准程序124的一部分,或者可以是可以由所述配准程序124调用的单独程序或模块。
配准指令程序124还包括姿态恢复程序指令126,其可以由处理器110来执行,以恢复3D工具形状相对于X-射线源的姿态。所述姿态可以由矩阵来表示,以解析所述工具的六个自由度(3个平移:x、y和z方向中,以及三个旋转:关于x、y和z轴)。在已知该形状的3D形状和2D投影的情况下,能够使用任意的多个已知方法来计算姿态恢复矩阵,诸如,Rosenhahn方法、迭代闭点(ICP)方法或ICP方法与Procrustes方法的组合。
之后,配准指令程序124使用姿态恢复矩阵来计算X-射线空间中的3D曲线,以将3D形状与2D X-射线空间进行配准。换言之,能够使用姿态恢复矩阵将2D X-射线图像上的形状的每个体素转换成3坐标位置。
根据一个实施例,对应指令程序128也被编码在存储器120上。128由处理器110执行所述对应指令程序,以使用恢复矩阵将来自2D X-射线图像的特征叠加在工具/血管形状的3D表示上。所述对应程序可以被存储在与该配准程序相同的存储器上或被存储在不同的存储器上。同样,对应指令程序128可以是配准指令程序124的一部分。
对应指令程序128还包括由处理器110执行以在显示器140上显示具有叠加的特征的3D工具形状的指令。
图5是根据本发明的实施例用于使用外科工具曲线与X-射线图像的配准来进行实时3D血管造影的方法的方框图。尽管以下描述讨论了血管中的过程,但是应当理解,该发明并不限于该范例。而是可以在任意体腔中的过程期间实施本发明。此外,尽管以下描述论述了导管,但是应当理解,也可以使用其他外科工具,只要所述工具符合体腔的形状。
医师将具有在其上固定的光学形状感测传感器224的造影导管221推进至患者血管中的感兴趣区域。导管221符合血管的形状。OSS系统200确定导管221的形状,所述导管221的形状也是所述导管所位于的血管的形状(步骤510)。
医师通过导管221注射造影染料,以使得导管(或血管)是不透射线的,从而所述导管(或血管)在X-射线图像上将是可见的,并且获取示出导管221(或血管)的X-射线图像(步骤520)。在备选实施例中,所述导管或另一外科工具本身是不透射线的,并且不需要造影染料。
处理器110使用分割指令程序125来分割X-射线图像中的导管221(或血管)(步骤530),以在2D X-射线空间中定位血管,并且确定导管221的2D形状。亦即,导管在X-射线图像的平面上的2D投影。所述2D形状被存储作为对应包括2D X-射线空间中的形状的体素的多个(x,y)坐标对。应当注意,分割指令程序125也将确定和保存在临床上感兴趣的导管/血管的局部特性(例如,厚度、亮度等)。例如,厚度能够用作血管堵塞的度量。
姿态恢复指令程序126恢复导管/血管相对于X-射线源的姿态(步骤540)。亦即,所述姿态恢复指令程序126确定定义导管/血管在X-射线空间中的位置(位置和取向)的恢复矩阵(3个平移和3个旋转)。
之后,配准指令程序124使用所述姿态恢复矩阵来计算X-射线空间中的3D曲线,以将3D形状与2D X-射线空间进行配准(步骤550)。亦即,能够使用所述姿态恢复矩阵将2D X-射线图像上的工具形状的每个体素转换为3坐标位置(第三个坐标是与X-射线源的距离),以重建3D形状。
由处理器110执行对应指令程序128,以使用恢复矩阵将来自2D X-射线图像的特征叠加在工具/血管形状的3D表示上(步骤560)。例如,可以从X-射线图像的分割来计算工具/血管的厚度,并且将工具/血管的厚度叠加在工具/血管的3D表示上。对应程序可以被存储在与配准程序相同的存储器上或者被存储在不同的存储器上。同样,对应指令程序128可以是配准指令程序124的一部分。
由处理器110执行对应指令程序128,以将具有来自叠加其上的2D X-射线的特征的工具/血管的3D形状显示为3D血管造影(步骤570)。
根据本发明的实施例,以预定义的时间间隔来获取处于同一姿态的两个或更多的X-射线图像。将两个X-射线与其各自的3D工具/血管形状进行配准,由于患者心脏的跳动,所述两个X-射线是相对于彼此位移的。能够通过测量造影染料相对于3D工具/血管形状的运动来确定血流。
根据另一实施例,可以将多个3D血管造影拼接在一起,以创建更大的血管造影。
根据一个实施例,工具/血管的3D可视化可以用于介入过程的实时引导。
本发明能够采取被编码在有形介质上的程序指令的形式。由此,本发明能够是完全的硬件实施例或包含硬件和软件元素的实施例。在范例性实施例中,本发明体现在软件中,所述软件包括但不限于固件、常驻软件、微代码等。
此外,本发明可以采取可从计算机可使用介质或计算机可读介质访问的非易失性计算机程序产品的形式,所述计算机可使用介质或计算机可读介质提供用于由计算机或任意指令执行系统或设备使用或者与其结合使用的程序代码。为了达到本说明书的目的,计算机可使用介质或计算机可读介质可以是能够包含或存储用于由指令执行系统、仪器或设备使用或者与其结合使用的程序的任意仪器。
前述方法可通过包括机器可读介质的程序产品来实现,所述机器可读介质具有机器可执行指令程序,当由诸如计算机的机器执行时,所述机器可读介质执行所述方法的步骤。该程序产品可以被存储在任意的各种已知的机器可读介质中,包括但不限于光盘、软盘、USB存储设备等。
介质能是电子的、磁的、光学的、电磁的、红外的或半导体系统(或器械或设备)。计算机可读介质的范例包括半导体或固态存储器、磁带、可移除式计算机磁盘、随机访问存储器(RAM)、只读存储器(ROM)、刚性磁盘、光碟。光碟的当前例子包括光盘-只读存储器(CD-ROM)、光盘-读/写(CR-R/W)和DVD。
前述描述和附图旨在是说明性的而不是限制本发明。本发明的范围旨在涵盖对以下权利要求的全部范围的等价变型和配置。

Claims (15)

1.一种用于提供体腔的实时3D图像的方法,包括以下步骤:
使用光学形状感测来确定所述体腔中的柔性外科工具的3D形状;
获取所述体腔的X-射线图像,所述体腔和所述的外科工具中的至少一个是不透射线的;
分割所述X-射线图像中的所述工具的2D投影;以及
使用确定的3D形状和经分割的2D投影来计算姿态恢复矩阵,其中,所述姿态恢复矩阵用于将所述2D投影上的形状的每个体素转换成3D坐标位置。
2.如权利要求1所述的方法,还包括:
计算X-射线空间中的所述3D形状;以及
将来自所述X-射线图像的特征叠加至所述确定的3D形状上。
3.如权利要求2所述的方法,还包括:
显示具有叠加在其上的X-射线特征的所述3D形状。
4.如权利要求3所述的方法,其中,所述工具是造影导管,并且获取X-射线图像的所述步骤包括通过导管递送造影染料,以使得所述导管是不透射线的。
5.如权利要求4所述的方法,其中,所述体腔是至少一个血管。
6.如权利要求4所述的方法,其中,重复获取X-射线图像的所述步骤,实时确定所述3D形状,并且实时显示具有叠加其上的X-射线特征的所述3D形状。
7.一种用于提供体腔的实时3D图像的系统,包括:
外科工具,其具有与其附着的至少一个光纤,在所述至少一个光纤中形成形状感测传感器;
至少一个处理器;
光学模块,其能够操作地连接至所述至少一个处理器,并且包括光源;
X-射线系统,其能够操作地连接至所述至少一个处理器;以及
至少一个存储器,其能够操作地连接至所述至少一个处理器,
其中,所述至少一个处理器被配置为:
使用所述光学模块中的所述光源来询问所述形状传感器,并且使用光学形状感测来确定所述体腔中的柔性外科工具的3D形状;
获取所述体腔的X-射线图像,所述体腔和所述外科工具中的至少一个是不透射线的;以及
分割所述X-射线图像中的所述工具的2D投影;以及
使用确定的3D形状和经分割的2D投影来计算姿态恢复矩阵,其中,所述姿态恢复矩阵用于将所述2D投影上的形状的每个体素转换成3D坐标位置。
8.如权利要求7所述的系统,还包括显示器,其中,所述至少一个处理器还被配置为将所述3D形状显示在所述显示器上。
9.如权利要求7所述的系统,其中,所述至少一个处理器还被配置为计算X-射线空间中的所述3D形状以及将来自所述X-射线图像的特征叠加至确定的3D形状上。
10.如权利要求9所述的系统,其中,所述工具是造影导管,在获取X-射线图像之前通过所述导管递送造影染料,以使得所述导管是不透射线的。
11.一种用于提供体腔的实时3D图像的装置,包括:
用于使用光学形状感测来确定所述体腔中的柔性外科工具的3D形状的单元;
用于获取所述体腔的X-射线图像的单元,所述体腔和所述外科工具中的至少一个是不透射线的;
用于分割所述X-射线图像中的所述工具的2D投影的单元;以及
用于使用确定的3D形状和经分割的2D投影来计算姿态恢复矩阵的单元,其中,所述姿态恢复矩阵用于将所述2D投影上的形状的每个体素转换成3D坐标位置。
12.如权利要求11所述的装置,还包括:
用于计算X-射线空间中的3D形状的单元;以及
用于将来自所述X-射线图像的特征叠加至确定的3D形状上,并且将所述确定的3D形状配准到所述X-射线图像中的单元。
13.如权利要求12所述的装置,还包括:
用于显示具有叠加在其上的X-射线特征的所述3D形状的单元。
14.如权利要求13所述的装置,其中,所述工具是造影导管,并且在获取X-射线图像之前,通过所述导管递送造影染料,以使得所述导管是不透射线的。
15.如权利要求13所述的装置,其中,重复用于获取X-射线图像的单元,并且还包括:
用于实时确定所述3D形状的单元,以及
用于实时显示具有叠加在其上的X-射线特征的所述3D形状的单元。
CN201280031945.9A 2011-06-27 2012-06-07 使用外科工具曲线与x-射线图像的配准的实时3d血管造影 Active CN103648394B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201161501279P 2011-06-27 2011-06-27
US61/501,279 2011-06-27
PCT/IB2012/052877 WO2013001388A1 (en) 2011-06-27 2012-06-07 Live 3d angiogram using registration of a surgical tool curve to an x-ray image

Publications (2)

Publication Number Publication Date
CN103648394A CN103648394A (zh) 2014-03-19
CN103648394B true CN103648394B (zh) 2016-11-16

Family

ID=46458567

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201280031945.9A Active CN103648394B (zh) 2011-06-27 2012-06-07 使用外科工具曲线与x-射线图像的配准的实时3d血管造影

Country Status (5)

Country Link
US (1) US9675304B2 (zh)
EP (1) EP2723240B1 (zh)
JP (1) JP6061926B2 (zh)
CN (1) CN103648394B (zh)
WO (1) WO2013001388A1 (zh)

Families Citing this family (99)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8672837B2 (en) 2010-06-24 2014-03-18 Hansen Medical, Inc. Methods and devices for controlling a shapeable medical device
US20130303944A1 (en) 2012-05-14 2013-11-14 Intuitive Surgical Operations, Inc. Off-axis electromagnetic sensor
US9452276B2 (en) 2011-10-14 2016-09-27 Intuitive Surgical Operations, Inc. Catheter with removable vision probe
US9510771B1 (en) 2011-10-28 2016-12-06 Nuvasive, Inc. Systems and methods for performing spine surgery
EP2903552B1 (en) 2012-10-01 2017-07-05 Koninklijke Philips N.V. Three dimensional polyline registration using shape constraints
US20140148673A1 (en) 2012-11-28 2014-05-29 Hansen Medical, Inc. Method of anchoring pullwire directly articulatable region in catheter
US9057600B2 (en) 2013-03-13 2015-06-16 Hansen Medical, Inc. Reducing incremental measurement sensor error
US9271663B2 (en) 2013-03-15 2016-03-01 Hansen Medical, Inc. Flexible instrument localization from both remote and elongation sensors
CN108784702B (zh) * 2013-03-15 2021-11-12 直观外科手术操作公司 用于跟踪介入器械的形状传感器系统以及使用方法
US9014851B2 (en) 2013-03-15 2015-04-21 Hansen Medical, Inc. Systems and methods for tracking robotically controlled medical instruments
US9629595B2 (en) 2013-03-15 2017-04-25 Hansen Medical, Inc. Systems and methods for localizing, tracking and/or controlling medical instruments
US11020016B2 (en) 2013-05-30 2021-06-01 Auris Health, Inc. System and method for displaying anatomy and devices on a movable display
WO2015010859A1 (en) 2013-07-23 2015-01-29 Koninklijke Philips N.V. Registration system for registering an imaging device with a tracking device
US9848922B2 (en) 2013-10-09 2017-12-26 Nuvasive, Inc. Systems and methods for performing spine surgery
WO2015062898A1 (en) * 2013-10-30 2015-05-07 Koninklijke Philips N.V. Assisting apparatus for assisting in registering an imaging device with a position and shape determination device
EP3243476B1 (en) 2014-03-24 2019-11-06 Auris Health, Inc. Systems and devices for catheter driving instinctiveness
CN107124867A (zh) * 2014-09-08 2017-09-01 皇家飞利浦有限公司 用于骨科导航的形状感测
CN107427327A (zh) 2014-09-30 2017-12-01 奥瑞斯外科手术机器人公司 具有虚拟轨迹和柔性内窥镜的可配置机器人外科手术系统
US10314463B2 (en) 2014-10-24 2019-06-11 Auris Health, Inc. Automated endoscope calibration
CN106999130B (zh) * 2014-11-27 2022-03-01 皇家飞利浦有限公司 用于确定在投影图像中介入仪器的位置的装置
JP6794361B2 (ja) * 2015-01-22 2020-12-02 コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. 光学形状検出によるエンドグラフトの視覚化
EP3062142B1 (en) 2015-02-26 2018-10-03 Nokia Technologies OY Apparatus for a near-eye display
US10143523B2 (en) 2015-03-31 2018-12-04 7D Surgical Inc. Systems, methods and devices for tracking and calibration of flexible instruments
US10939889B2 (en) 2015-06-30 2021-03-09 Koninklijke Philips N.V. Optical shape sensing for fluoroscopic surgical navigation
US11253217B2 (en) 2015-09-16 2022-02-22 Koninklijke Philips N.V. Apparatus for vessel characterization
US9727963B2 (en) 2015-09-18 2017-08-08 Auris Surgical Robotics, Inc. Navigation of tubular networks
EP3380009A1 (en) * 2015-11-26 2018-10-03 Koninklijke Philips N.V. Methods and systems for visualizing shapes of tracked devices
US10143526B2 (en) 2015-11-30 2018-12-04 Auris Health, Inc. Robot-assisted driving systems and methods
US10896506B2 (en) 2016-02-12 2021-01-19 Intuitive Surgical Operations, Inc Systems and methods for using registered fluoroscopic images in image-guided surgery
CN106447707B (zh) * 2016-09-08 2018-11-16 华中科技大学 一种图像实时配准方法及系统
US9931025B1 (en) 2016-09-30 2018-04-03 Auris Surgical Robotics, Inc. Automated calibration of endoscopes with pull wires
US10244926B2 (en) 2016-12-28 2019-04-02 Auris Health, Inc. Detecting endolumenal buckling of flexible instruments
US10650552B2 (en) 2016-12-29 2020-05-12 Magic Leap, Inc. Systems and methods for augmented reality
EP4300160A2 (en) 2016-12-30 2024-01-03 Magic Leap, Inc. Polychromatic light out-coupling apparatus, near-eye displays comprising the same, and method of out-coupling polychromatic light
CN110087576B (zh) * 2017-01-09 2023-03-17 直观外科手术操作公司 用于在图像引导的程序中将细长装置配准到三维图像的系统和方法
WO2018183727A1 (en) 2017-03-31 2018-10-04 Auris Health, Inc. Robotic systems for navigation of luminal networks that compensate for physiological noise
CN110831498B (zh) 2017-05-12 2022-08-12 奥瑞斯健康公司 活检装置和系统
US10022192B1 (en) 2017-06-23 2018-07-17 Auris Health, Inc. Automatically-initialized robotic systems for navigation of luminal networks
JP7317723B2 (ja) 2017-06-28 2023-07-31 オーリス ヘルス インコーポレイテッド 電磁場の歪み検出
WO2019005872A1 (en) 2017-06-28 2019-01-03 Auris Health, Inc. INSTRUMENT INSERTION COMPENSATION
JP7330902B2 (ja) 2017-06-28 2023-08-22 オーリス ヘルス インコーポレイテッド 電磁歪み検出
US10426559B2 (en) 2017-06-30 2019-10-01 Auris Health, Inc. Systems and methods for medical instrument compression compensation
US10578870B2 (en) 2017-07-26 2020-03-03 Magic Leap, Inc. Exit pupil expander
US10016900B1 (en) 2017-10-10 2018-07-10 Auris Health, Inc. Surgical robotic arm admittance control
US10145747B1 (en) 2017-10-10 2018-12-04 Auris Health, Inc. Detection of undesirable forces on a surgical robotic arm
US11058493B2 (en) 2017-10-13 2021-07-13 Auris Health, Inc. Robotic system configured for navigation path tracing
US10555778B2 (en) 2017-10-13 2020-02-11 Auris Health, Inc. Image-based branch detection and mapping for navigation
KR102645922B1 (ko) 2017-12-06 2024-03-13 아우리스 헬스, 인코포레이티드 지시되지 않은 기구 롤을 수정하기 위한 시스템 및 방법
KR102596429B1 (ko) 2017-12-10 2023-10-30 매직 립, 인코포레이티드 광학 도파관들 상의 반사―방지 코팅들
US11510736B2 (en) 2017-12-14 2022-11-29 Auris Health, Inc. System and method for estimating instrument location
CN110809453B (zh) 2017-12-18 2023-06-06 奥瑞斯健康公司 用于腔网络内的器械跟踪和导航的方法和系统
US11187923B2 (en) 2017-12-20 2021-11-30 Magic Leap, Inc. Insert for augmented reality viewing device
EP3752085A4 (en) 2018-02-13 2021-11-24 Auris Health, Inc. SYSTEM AND METHOD FOR TRAINING A MEDICAL INSTRUMENT
WO2019178567A1 (en) 2018-03-15 2019-09-19 Magic Leap, Inc. Image correction due to deformation of components of a viewing device
EP3542747A1 (en) 2018-03-22 2019-09-25 Koninklijke Philips N.V. Visualization system for visualizing an alignment accuracy
CN110891469B (zh) 2018-03-28 2023-01-13 奥瑞斯健康公司 用于定位传感器的配准的系统和方法
EP3773304A4 (en) 2018-03-28 2021-12-22 Auris Health, Inc. SYSTEMS AND METHODS FOR DISPLAYING THE ESTIMATED POSITION OF AN INSTRUMENT
JP2021525902A (ja) 2018-05-30 2021-09-27 マジック リープ, インコーポレイテッドMagic Leap,Inc. 小型の可変焦点構成
US10905499B2 (en) 2018-05-30 2021-02-02 Auris Health, Inc. Systems and methods for location sensor-based branch prediction
KR102567087B1 (ko) 2018-05-31 2023-08-17 아우리스 헬스, 인코포레이티드 생리학적 잡음을 검출하는 내강 네트워크의 내비게이션을 위한 로봇 시스템 및 방법
MX2020012904A (es) 2018-05-31 2021-02-26 Auris Health Inc Analisis y mapeo de vias respiratorias basados en imagen.
WO2019231850A1 (en) 2018-05-31 2019-12-05 Magic Leap, Inc. Radar head pose localization
CN110831481B (zh) 2018-05-31 2022-08-30 奥瑞斯健康公司 管状网络的基于路径的导航
WO2019236495A1 (en) 2018-06-05 2019-12-12 Magic Leap, Inc. Homography transformation matrices based temperature calibration of a viewing system
EP3803545A4 (en) 2018-06-08 2022-01-26 Magic Leap, Inc. AUGMENTED REALITY VIEWER WITH AUTOMATED SURFACE SELECTION PLACEMENT AND CONTENT ALIGNMENT PLACEMENT
US11579441B2 (en) 2018-07-02 2023-02-14 Magic Leap, Inc. Pixel intensity modulation using modifying gain values
US11856479B2 (en) 2018-07-03 2023-12-26 Magic Leap, Inc. Systems and methods for virtual and augmented reality along a route with markers
WO2020010226A1 (en) 2018-07-03 2020-01-09 Magic Leap, Inc. Systems and methods for virtual and augmented reality
US20200015899A1 (en) 2018-07-16 2020-01-16 Ethicon Llc Surgical visualization with proximity tracking features
WO2020023543A1 (en) 2018-07-24 2020-01-30 Magic Leap, Inc. Viewing device with dust seal integration
EP3827224B1 (en) 2018-07-24 2023-09-06 Magic Leap, Inc. Temperature dependent calibration of movement detection devices
US11112862B2 (en) 2018-08-02 2021-09-07 Magic Leap, Inc. Viewing system with interpupillary distance compensation based on head motion
US10795458B2 (en) 2018-08-03 2020-10-06 Magic Leap, Inc. Unfused pose-based drift correction of a fused pose of a totem in a user interaction system
CN112955073A (zh) * 2018-08-22 2021-06-11 奇跃公司 患者观察系统
KR20210073542A (ko) 2018-09-28 2021-06-18 아우리스 헬스, 인코포레이티드 의료 기구를 도킹시키기 위한 시스템 및 방법
US10914949B2 (en) 2018-11-16 2021-02-09 Magic Leap, Inc. Image size triggered clarification to maintain image sharpness
WO2020163603A1 (en) 2019-02-06 2020-08-13 Magic Leap, Inc. Target intent-based clock speed determination and adjustment to limit total heat generated by multiple processors
CN113544766A (zh) 2019-03-12 2021-10-22 奇跃公司 在第一和第二增强现实观看器之间配准本地内容
WO2020223636A1 (en) 2019-05-01 2020-11-05 Magic Leap, Inc. Content provisioning system and method
CN114174895A (zh) 2019-07-26 2022-03-11 奇跃公司 用于增强现实的系统和方法
WO2021038495A1 (en) 2019-08-30 2021-03-04 Auris Health, Inc. Instrument image reliability systems and methods
WO2021038469A1 (en) 2019-08-30 2021-03-04 Auris Health, Inc. Systems and methods for weight-based registration of location sensors
EP4025921A4 (en) 2019-09-03 2023-09-06 Auris Health, Inc. ELECTROMAGNETIC DISTORTION DETECTION AND COMPENSATION
US11737832B2 (en) 2019-11-15 2023-08-29 Magic Leap, Inc. Viewing system for use in a surgical environment
US11648060B2 (en) 2019-12-30 2023-05-16 Cilag Gmbh International Surgical system for overlaying surgical instrument data onto a virtual three dimensional construct of an organ
US11219501B2 (en) * 2019-12-30 2022-01-11 Cilag Gmbh International Visualization systems using structured light
US11832996B2 (en) 2019-12-30 2023-12-05 Cilag Gmbh International Analyzing surgical trends by a surgical system
US11759283B2 (en) 2019-12-30 2023-09-19 Cilag Gmbh International Surgical systems for generating three dimensional constructs of anatomical organs and coupling identified anatomical structures thereto
US11284963B2 (en) 2019-12-30 2022-03-29 Cilag Gmbh International Method of using imaging devices in surgery
US11896442B2 (en) 2019-12-30 2024-02-13 Cilag Gmbh International Surgical systems for proposing and corroborating organ portion removals
US11744667B2 (en) 2019-12-30 2023-09-05 Cilag Gmbh International Adaptive visualization by a surgical system
US11776144B2 (en) 2019-12-30 2023-10-03 Cilag Gmbh International System and method for determining, adjusting, and managing resection margin about a subject tissue
CN114901194A (zh) 2019-12-31 2022-08-12 奥瑞斯健康公司 解剖特征识别和瞄准
WO2021137108A1 (en) 2019-12-31 2021-07-08 Auris Health, Inc. Alignment interfaces for percutaneous access
CN114901192A (zh) 2019-12-31 2022-08-12 奥瑞斯健康公司 用于经皮进入的对准技术
WO2021245193A1 (en) 2020-06-05 2021-12-09 Koninklijke Philips N.V. System for guiding interventional instrument to internal target
EP3944809A1 (en) * 2020-07-28 2022-02-02 Koninklijke Philips N.V. Arrangement and method for determining the position of an invasive device
US20230210627A1 (en) * 2021-12-31 2023-07-06 Auris Health, Inc. Three-dimensional instrument pose estimation
EP4282366A1 (en) 2022-05-23 2023-11-29 Koninklijke Philips N.V. Shape registration of a shape-sensing enabled device to an imaging system

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1886760A (zh) * 2003-11-28 2006-12-27 皇家飞利浦电子股份有限公司 从投影照片进行对象的三维重构
CN1977289A (zh) * 2004-06-28 2007-06-06 皇家飞利浦电子股份有限公司 特别用于植入物的图像的图像处理系统
CN101325912A (zh) * 2005-12-15 2008-12-17 皇家飞利浦电子股份有限公司 用于在电生理标测和治疗期间显现心脏形态的系统和方法
CN101453946A (zh) * 2006-05-26 2009-06-10 皇家飞利浦电子股份有限公司 使用医学成像数据改进用于导管跟踪系统的校准方法

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8442618B2 (en) * 1999-05-18 2013-05-14 Mediguide Ltd. Method and system for delivering a medical device to a selected position within a lumen
US7840252B2 (en) * 1999-05-18 2010-11-23 MediGuide, Ltd. Method and system for determining a three dimensional representation of a tubular organ
KR20080042808A (ko) 2005-08-05 2008-05-15 코닌클리케 필립스 일렉트로닉스 엔.브이. 캐씨터 네비게이션 시스템
US8676300B2 (en) * 2006-09-18 2014-03-18 Mediguide Ltd. Method and system for navigating through an occluded tubular organ
US20100030063A1 (en) 2008-07-31 2010-02-04 Medtronic, Inc. System and method for tracking an instrument
EP2187353B1 (de) 2008-11-10 2011-10-19 Siemens Aktiengesellschaft Verfahren zum Visualisieren von Strukturen in einem Körper, insbesondere im Körper eines Patienten
US8494245B2 (en) * 2010-03-09 2013-07-23 Siemens Aktiengesellschaft System and method for guiding transcatheter aortic valve implantations based on interventional C-Arm CT imaging

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1886760A (zh) * 2003-11-28 2006-12-27 皇家飞利浦电子股份有限公司 从投影照片进行对象的三维重构
CN1977289A (zh) * 2004-06-28 2007-06-06 皇家飞利浦电子股份有限公司 特别用于植入物的图像的图像处理系统
CN101325912A (zh) * 2005-12-15 2008-12-17 皇家飞利浦电子股份有限公司 用于在电生理标测和治疗期间显现心脏形态的系统和方法
CN101453946A (zh) * 2006-05-26 2009-06-10 皇家飞利浦电子股份有限公司 使用医学成像数据改进用于导管跟踪系统的校准方法

Also Published As

Publication number Publication date
JP2014518117A (ja) 2014-07-28
CN103648394A (zh) 2014-03-19
WO2013001388A1 (en) 2013-01-03
US9675304B2 (en) 2017-06-13
EP2723240A1 (en) 2014-04-30
US20140114180A1 (en) 2014-04-24
JP6061926B2 (ja) 2017-01-18
EP2723240B1 (en) 2018-08-08

Similar Documents

Publication Publication Date Title
CN103648394B (zh) 使用外科工具曲线与x-射线图像的配准的实时3d血管造影
US11445988B2 (en) Systems and methods for using x-ray field emission to determine instrument position and orientation
US10687777B2 (en) Vascular data processing and image registration systems, methods, and apparatuses
JP6166663B2 (ja) ナビゲーションガイダンスのための視覚化
US8409098B2 (en) Method and apparatus for collection of cardiac geometry based on optical or magnetic tracking
CA2905203C (en) Vascular data processing and image registration systems, methods, and apparatuses
JP5180367B2 (ja) 指定位置に治療装置をナビゲートする方法と装置
US11439358B2 (en) Methods and systems for high performance and versatile molecular imaging
WO1999013432A1 (en) Apparatus and method for determining three-dimensional representations of tortuous vessels
FR2908628A1 (fr) Procede et systeme de pilotage d'un instrument medical
JP2017511728A (ja) 同時x平面撮像を用いた画像レジストレーション及び誘導
US20140023250A1 (en) Medical imaging systen and method for providing an image representation supporting accurate guidance of an intervention device in a vessel intervention procedure
US11017531B2 (en) Shell-constrained localization of vasculature
Wang et al. Robotic ultrasound: View planning, tracking, and automatic acquisition of transesophageal echocardiography
EP3558151B1 (en) Navigation platform for an intracardiac catheter
JP2022517246A (ja) 超音波像とx線像とを融合させるための実時間追跡
US20220254131A1 (en) Methods, apparatus, and system for synchronization between a three-dimensional vascular model and an imaging device

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant