CN108113749B - 距解剖腔的壁的距离的可视化 - Google Patents

距解剖腔的壁的距离的可视化 Download PDF

Info

Publication number
CN108113749B
CN108113749B CN201711226597.1A CN201711226597A CN108113749B CN 108113749 B CN108113749 B CN 108113749B CN 201711226597 A CN201711226597 A CN 201711226597A CN 108113749 B CN108113749 B CN 108113749B
Authority
CN
China
Prior art keywords
image
wall
processor
tool
vivo tool
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201711226597.1A
Other languages
English (en)
Other versions
CN108113749A (zh
Inventor
V.格林尔
A.C.阿尔特曼恩
R.B.马耶
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Biosense Webster Israel Ltd
Original Assignee
Biosense Webster Israel Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Biosense Webster Israel Ltd filed Critical Biosense Webster Israel Ltd
Publication of CN108113749A publication Critical patent/CN108113749A/zh
Application granted granted Critical
Publication of CN108113749B publication Critical patent/CN108113749B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/06—Devices, other than using radiation, for detecting or locating foreign bodies ; determining position of probes within or on the body of the patient
    • A61B5/065—Determining position of the probe employing exclusively positioning means located on or in the probe, e.g. using position sensors arranged on the probe
    • A61B5/066—Superposing sensor position on an image of the patient, e.g. obtained by ultrasound or x-ray imaging
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/05—Detecting, measuring or recording for diagnosis by means of electric currents or magnetic fields; Measuring using microwaves or radio waves 
    • A61B5/055—Detecting, measuring or recording for diagnosis by means of electric currents or magnetic fields; Measuring using microwaves or radio waves  involving electronic [EMR] or nuclear [NMR] magnetic resonance, e.g. magnetic resonance imaging
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/02—Arrangements for diagnosis sequentially in different planes; Stereoscopic radiation diagnosis
    • A61B6/025—Tomosynthesis
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/02—Arrangements for diagnosis sequentially in different planes; Stereoscopic radiation diagnosis
    • A61B6/03—Computed tomography [CT]
    • A61B6/032—Transmission computed tomography [CT]
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/12—Arrangements for detecting or locating foreign bodies
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/46—Arrangements for interfacing with the operator or the patient
    • A61B6/461—Displaying means of special interest
    • A61B6/466—Displaying means of special interest adapted to display 3D data
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/54—Control of apparatus or devices for radiation diagnosis
    • A61B6/547—Control of apparatus or devices for radiation diagnosis involving tracking of position of the device or parts of the device
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B8/00—Diagnosis using ultrasonic, sonic or infrasonic waves
    • A61B8/46—Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient
    • A61B8/467—Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient characterised by special input means
    • A61B8/469—Ultrasonic, sonic or infrasonic diagnostic devices with special arrangements for interfacing with the operator or the patient characterised by special input means for selection of a region of interest
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36—Image-producing devices or illumination devices not otherwise provided for
    • A61B90/37—Surgical systems with images on a monitor during operation
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N23/00—Investigating or analysing materials by the use of wave or particle radiation, e.g. X-rays or neutrons, not covered by groups G01N3/00 – G01N17/00, G01N21/00 or G01N22/00
    • G01N23/02—Investigating or analysing materials by the use of wave or particle radiation, e.g. X-rays or neutrons, not covered by groups G01N3/00 – G01N17/00, G01N21/00 or G01N22/00 by transmitting the radiation through the material
    • G01N23/04—Investigating or analysing materials by the use of wave or particle radiation, e.g. X-rays or neutrons, not covered by groups G01N3/00 – G01N17/00, G01N21/00 or G01N22/00 by transmitting the radiation through the material and forming images of the material
    • G01N23/046—Investigating or analysing materials by the use of wave or particle radiation, e.g. X-rays or neutrons, not covered by groups G01N3/00 – G01N17/00, G01N21/00 or G01N22/00 by transmitting the radiation through the material and forming images of the material using tomography, e.g. computed tomography [CT]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G06T11/003—Reconstruction from projections, e.g. tomography
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/00—3D [Three Dimensional] image rendering
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B17/00—Surgical instruments, devices or methods, e.g. tourniquets
    • A61B17/24—Surgical instruments, devices or methods, e.g. tourniquets for use in the oral cavity, larynx, bronchial passages or nose; Tongue scrapers
    • A61B2017/246—Surgical instruments, devices or methods, e.g. tourniquets for use in the oral cavity, larynx, bronchial passages or nose; Tongue scrapers for cleaning of the nose
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/10—Computer-aided planning, simulation or modelling of surgical operations
    • A61B2034/107—Visualisation of planned trajectories or target regions
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046—Tracking techniques
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046—Tracking techniques
    • A61B2034/2051—Electromagnetic tracking systems
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046—Tracking techniques
    • A61B2034/2065—Tracking using image or pattern recognition
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00—Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2068—Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis using pointers, e.g. pointers having reference marks for determining coordinates of body points
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36—Image-producing devices or illumination devices not otherwise provided for
    • A61B2090/364—Correlation of different images or relation of image positions in respect to the body
    • A61B2090/365—Correlation of different images or relation of image positions in respect to the body augmented reality, i.e. correlating a live optical image with another image
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36—Image-producing devices or illumination devices not otherwise provided for
    • A61B2090/364—Correlation of different images or relation of image positions in respect to the body
    • A61B2090/367—Correlation of different images or relation of image positions in respect to the body creating a 3D dataset from 2D images using position information
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36—Image-producing devices or illumination devices not otherwise provided for
    • A61B90/37—Surgical systems with images on a monitor during operation
    • A61B2090/374—NMR or MRI
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00—Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36—Image-producing devices or illumination devices not otherwise provided for
    • A61B90/37—Surgical systems with images on a monitor during operation
    • A61B2090/376—Surgical systems with images on a monitor during operation using X-rays, e.g. fluoroscopy
    • A61B2090/3762—Surgical systems with images on a monitor during operation using X-rays, e.g. fluoroscopy using computed tomography systems [CT]
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2562/00—Details of sensors; Constructional details of sensor housings or probes; Accessories for sensors
    • A61B2562/02—Details of sensors specially adapted for in-vivo measurements
    • A61B2562/0223—Magnetic field sensors
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N2223/00—Investigating materials by wave or particle radiation
    • G01N2223/40—Imaging
    • G01N2223/419—Imaging computed tomograph
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2111/00—Details relating to CAD techniques
    • G06F2111/10—Numerical modelling
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2219/00—Indexing scheme for manipulating 3D models or images for computer graphics
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2219/00—Indexing scheme for manipulating 3D models or images for computer graphics
    • G06T2219/008—Cut plane or projection plane definition

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Medical Informatics (AREA)
  • Physics & Mathematics (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Surgery (AREA)
  • General Health & Medical Sciences (AREA)
  • Animal Behavior & Ethology (AREA)
  • Biomedical Technology (AREA)
  • Veterinary Medicine (AREA)
  • Public Health (AREA)
  • Molecular Biology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Pathology (AREA)
  • Radiology & Medical Imaging (AREA)
  • Biophysics (AREA)
  • High Energy & Nuclear Physics (AREA)
  • Theoretical Computer Science (AREA)
  • Optics & Photonics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Graphics (AREA)
  • Human Computer Interaction (AREA)
  • Gynecology & Obstetrics (AREA)
  • Pulmonology (AREA)
  • Software Systems (AREA)
  • Robotics (AREA)
  • Geometry (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Chemical & Material Sciences (AREA)
  • Analytical Chemistry (AREA)
  • Biochemistry (AREA)
  • Immunology (AREA)
  • Apparatus For Radiation Diagnosis (AREA)
  • Magnetic Resonance Imaging Apparatus (AREA)

Abstract

本发明题为“距解剖腔的壁的距离的可视化”。所述实施方案包括具有显示器和处理器的系统。处理器被配置成通过以下操作来修改包括解剖腔的壁的表征的图像：将表征体内工具的图标叠加在图像的与体内工具在解剖腔内的位置对应的部分上，以及在体内工具继续在体内工具指向的方向上朝壁移动的情况下将标记叠加在壁的表征的与体内工具将遇到壁的位置对应的部分上。处理器还被配置成在显示器上显示经修改的图像。还描述了其它实施方案。

Description

距解剖腔的壁的距离的可视化
相关申请的交叉引用
本申请涉及2016年11月29日提交的名称为“Improved visualization ofanatomical cavities”美国申请号15/364,144且代理人参考号为1002-1460/ID-839/BIO5678USNP的申请，该申请与本申请同日提交，其公开内容通过引用并入本文。
技术领域
本发明涉及医疗图像领域。
背景技术
计算机断层摄影(CT)扫描获取解剖结构的扫描部分的放射密度，也称为放射不透性。放射密度以霍斯菲尔德(Hounsfield)单位(HU)进行测量，其中空气的HU＝－1000，水的HU＝0，并且皮质骨的HU＝+3000。在CT图像中，所获取的放射密度值被映射到不同的灰度值。通常，在CT图像中，空气以黑色呈现，皮质骨以白色呈现，并且其它材料以变化的灰色色调呈现。
传统上，介入放射科医师已被训练成使用头部的二维(2D)图像来导航受治疗者的头部。例如，在鼻窦规程期间，介入放射科医师可参考受治疗者头部的三个计算机断层摄影(CT)切片：轴向切片、冠状切片以及矢状切片。
其公开内容以引用方式并入本文的美国专利8,532,738描述了一种方法，该方法包括构造体腔的模拟表面，并将探头的远侧端部按压贴靠在体腔的壁上。在将远侧端部按压贴靠在壁上的同时，从探头接收指示探头在体腔内的位置的位置测量值，并且从探头接收指示远侧端部和壁之间的力的力测量值。在检测到力测量值超过预定量时，在由位置测量值指示的位置处在模拟表面中创建扭曲，以便形成扭曲表面。随后，显示扭曲表面。
其公开内容以引用方式并入本文的美国专利7,924,279描述了一种用于可视化3D体积的系统，特别是用于医疗应用，该系统包括用于接收表征3D体积的体素值的三维数据集的输入设备。该数据集存储在存储装置中。处理器将体积从预定的视点投影到虚拟2D投影屏上。对于2D投影图像的每个像素，通过像素并通过体积投射射线。使用一种协议，该协议在沿着体积内的射线位置穿过时根据射线位置确定渲染算法和/或渲染参数。对于每个射线位置，所确定的渲染算法/渲染参数用于基于射线位置的预定范围内的至少一个体素值来计算对像素的像素值的贡献。输出设备用于提供在显示器上渲染的2D图像的像素值。
发明内容
根据本发明的一些实施方案，提供包括显示器和处理器的系统。处理器被配置成通过以下操作来修改包括解剖腔的壁的表征的图像：将表征体内工具的图标叠加在图像的与体内工具在解剖腔内的位置对应的部分上，以及在体内工具继续在体内工具指向的方向上朝壁移动的情况下将标记叠加在壁的表征的与体内工具将遇到壁的位置对应的部分上。处理器还被配置成在显示器上显示经修改的图像。
在一些实施方案中，处理器被配置成通过从体内工具的远侧末端投影虚拟射线来识别体内工具将遇到壁的位置。
在一些实施方案中，以三维渲染图像的至少一部分。
在一些实施方案中，解剖腔是鼻窦。
在一些实施方案中，解剖腔是鼻腔。
在一些实施方案中，图像是计算机断层摄影(CT)图像。
在一些实施方案中，图像是磁共振成像(MRI)图像。
根据本发明的一些实施方案，还提供一种方法，该方法包括使用处理器通过以下操作来修改包括解剖腔的壁的表征的图像：将表征体内工具的图标叠加在图像的与体内工具在解剖腔内的位置对应的部分上，以及在体内工具继续在体内工具指向的方向上朝壁移动的情况下将标记叠加在壁的表征的与体内工具将遇到壁的位置对应的部分上。该方法还包括显示经修改的图像。
根据本发明的一些实施方案，还提供包括其中存储程序指令的有形非暂态计算机可读介质的计算机软件产品。指令在由处理器读取时，促使处理器通过以下操作来修改包括解剖腔的壁的表征的图像：将表征体内工具的图标叠加在图像的与体内工具在解剖腔内的位置对应的部分上，以及在体内工具继续在体内工具指向的方向上朝壁移动的情况下将标记叠加在壁的表征的与体内工具将遇到壁的位置对应的部分上。该指令还促使处理器显示经修改的图像。
结合附图，从本发明的实施方案的以下详细说明，将更全面地理解本发明，其中：
附图说明
图1是根据本发明的一些实施方案的用于指导医疗规程的系统的示意图；并且
图2示出根据本发明的一些实施方案的原始CT图像切片和经修改的CT图像切片。
具体实施方式
概述
如上所述，介入放射科医师通常使用2D图像(或“切片”)用于导航。然而，使用2D图像的挑战在于缺乏包含在此类图像中的深度信息。例如，当使用2D图像来导航解剖腔内的导管时，可难以探知导管与腔的壁之间的距离。
本发明的实施方案通过在2D图像中提供解剖腔的增强的表征来解决该挑战。在该增强的表征中，经由从所显示的2D切片下面引入形态信息，给予腔以三维(3D)外观。例如，处理器可用虚拟光源“照明”腔，使得位于所显示的2D切片下面的腔的壁对于定位在虚拟光源附近的虚拟摄像机而言是“可视的”。然后可以用对应于虚拟摄像机的视图的具有变化的亮度色调的颜色渲染腔壁。
一些实施方案通过将表征导管的图标以及指示导管与腔壁的距离的标记叠加在图像上来进一步增强图像。为了产生标记，处理器可从导管的末端投影虚拟射线，并且在虚拟射线碰撞腔壁的点处将标记显示在图像中。
系统描述
首先参考图1，图1是根据本发明的一些实施方案的用于指导医疗规程的系统20的示意图。
图1描绘医师26对受治疗者22执行规程。在该规程期间，医师26将体内工具28诸如导管插入受治疗者22的鼻腔和/或鼻窦中，并且然后使用工具28在鼻腔和/或鼻窦上探测和/或操作。通常，使用例如磁跟踪系统跟踪工具的位置和取向。例如，系统20可包括一个或多个磁场发生器24，磁场发生器24在规程期间生成相应的磁场。这些场在耦合到工具28的一个或多个磁传感器中感应出相应的电压。基于这些感应电压，处理器34探知工具相对于跟踪系统的坐标系的位置和取向。
通常，在规程之前，使用例如CT扫描仪来获取受治疗者头部的体积。随后，在规程期间，处理器34将从该体积获得并且被如下所述增强的至少一个图像切片32显示在显示器30上。医生然后可参考切片32，以决定如何最佳地导航受治疗者的鼻腔和/或鼻窦。
应当注意，如在本申请(包括权利要求书)中使用的术语“图像切片”是指通过对三维对象的特定横截面进行成像，或通过获得对象的三维图像的特定横截面而获取的任何二维图像。(图像切片在本文中可另选地被简称为“图像”或“切片”。)例如，在规程之前，可通过在连续的深度处获取一叠矢状图像切片来获取受治疗者的头部的体积。随后，处理器34可通过从该体积获得原始矢状图像切片中的任一个，或者通过获得该体积的横截面来从该体积导出“图像切片”，以导出具有另一合适取向的新切片。(通常，在规程之前执行新切片的导出。)
通常，在规程之前，处理器34将磁跟踪系统与CT扫描仪配准，例如如美国专利申请15/290,968中所述，其公开内容以引用方式并入本文。该配准规程的输出是变换，处理器随后使用该变换计算体内工具的远侧端部相对于图像切片32的位置。
一般来讲，处理器34可被体现为单个处理器或协作式联网的或集群的处理器集。处理器34通常是编程化数字计算装置，该装置包括中央处理单元(CPU)、随机存取存储器(RAM)、非易失性辅助存储装置诸如硬盘驱动器或CDROM驱动器、网络接口和/或外围装置。如本领域中所公知的，将包括软件程序的程序代码和/或数据加载到RAM中用于由CPU执行和处理，并且生成结果用于显示、输出、传输或存储。程序代码和/或数据可以电子形式例如经网络下载到计算机，或者，另选地或除此之外，程序代码和/或数据可提供和/或存储在诸如磁性存储器、光学存储器或电子存储器的非暂态有形介质上。此类程序代码和/或数据在提供给处理器之后，产生被配置成执行本文所述任务的机器或专用计算机。
现在参考图2，图2示出根据本发明的一些实施方案的原始CT图像切片31和经修改的CT图像切片32。
如上所述，CT图像通常以黑色呈现空气，以白色呈现皮质骨，并且以变化的灰色色调呈现其它材料。例如，图像切片31包括与解剖腔对应的在本文中被称为空隙36的黑色部分；具体地，空隙36对应于受治疗者的鼻腔。(换句话讲，图像切片31“切穿”鼻腔，使得鼻腔内部作为空隙36出现在图像切片中。)图像切片31还包括对应于骨和/或围绕鼻腔的其它组织的白色或灰色区域38。
在本发明的实施方案中，处理器34修改图像切片31，以便生成经修改的图像切片32。为了修改图像切片31，处理器首先识别图像切片31的与解剖腔对应的那部分，即，由扫描仪的扫描平面与解剖腔相交所形成的部分。(如上所述，在CT图像中，这些部分表现为空隙，诸如空隙36。)处理器然后用对应的解剖腔的壁的表征填充所识别的部分中的每个，从而给予每个解剖腔以三维外观。(换句话说，处理器将对应的解剖腔的三维(3D)视图叠加在图像的每个所识别的部分上)。例如，在经修改的图像切片32中，空隙36被鼻腔的壁的三维表征44替换，该鼻腔的壁在获取图像切片的位置的后面(即，相对于观看图像的人的视角，壁在扫描平面的后面)。然后处理器显示经修改的图像切片32，如上文参考图1所述。
更一般地，处理器可针对示出部分解剖腔的每个图像切片执行本文所述的修改。通常，在规程之前，处理器遍历所有相关图像切片(包括原始图像切片和导出的图像切片)，并且如本文所述修改每个含腔的图像切片。随后，在规程期间，处理器连续地监测工具的位置，并且如果工具的位置已改变，则处理器可检索并显示穿过工具的新位置的一个或多个经修改的图像切片。(注意，处理器可另选地在紧接显示图像切片之前实时地如本文中所述那样修改图像切片。)
通常，处理器通过渲染腔的壁来计算表征44。首先，处理器从导出图像切片31的三维图像探知壁的形状。处理器然后使用任何合适的渲染技术来渲染壁。例如，处理器可用虚拟光源照明壁，并且根据定位在虚拟光源附近的虚拟摄像机的视图渲染壁。然后处理器用该渲染来替换图像切片31中的空隙。通常，壁以颜色进行渲染，以便于医生区分解剖腔和周围组织。
通常，处理器不修改图像切片31的其它部分，诸如图像切片的区域38。例如，处理器可不修改除对应于解剖腔的部分之外的图像切片的任何部分。因此，经修改的图像切片32通常是“混杂”图像，因为区域38以灰度被示为二维表面，而解剖腔的壁通常以颜色被渲染为三维表面。
现在具体参考图2底部的示意图，其重现了经修改的图像切片32的一部分。
通常，在经修改的图像切片32上，处理器还将表征体内工具28(具体为体内工具28的远侧端部)的图标40叠加在经修改的图像切片32的与体内工具在解剖腔内的位置对应的部分上。通常，处理器还在体内工具继续在体内工具指向的方向上朝壁移动的情况下将标记42叠加在表征44的与体内工具将遇到壁的位置对应的部分上。例如，处理器可从体内工具的远侧末端投影虚拟射线46，识别虚拟射线46遇到解剖腔的壁的位置，并且然后将标记42叠加在表征44的与该位置对应的那部分上。(虽然为了说明起见，在图2的示意性部分中示出虚拟射线46，但是应注意到，虚拟射线46通常在经修改的图像切片32中未示出)图标40和标记42通常有利于解剖腔内的工具的导航，因为例如图标40和标记42之间的距离指示工具与腔的壁的距离。
在一些实施方案中，显示完全三维图像(即，以三维完全渲染的图像)，而不是经修改的图像切片32(如上所述，其仅部分以三维渲染)，并且图标40和/或标记42被叠加在该图像中的解剖壁的表征上。
虽然本文的描述主要涉及CT图像，但是应当注意，本发明的实施方案也可应用于使用其它形式诸如磁共振成像(MRI)获取的图像。(在MRI图像中，解剖腔不一定表现为空隙，但通常是可识别的，使得它们可如本文所述那样被识别和修改。)
本领域技术人员应当理解，本发明不限于上文特别示出和描述的内容。相反，本发明实施方案的范围包括上文所述各种特征的组合与子组合两者，以及本领域的技术人员在阅读上述说明书时可能想到的未在现有技术范围内的变型和修改。以引用方式并入本专利申请的文献被视为本专利申请的整体部分，但是如果这些并入的文献中定义的任何术语与本说明书中明确或隐含地给出的定义相冲突，则应只考虑本说明书中的定义。

Claims (13)

1.一种医疗系统，包括：
显示器；以及
处理器，所述处理器被配置成：
通过以下操作来修改包括解剖腔的壁的表征的图像：
将表征体内工具的图标叠加在所述图像的与所述体内工具在所述解剖腔内的位置对应的部分上，以及
在所述体内工具继续在所述体内工具指向的方向上朝所述壁移动的情况下将标记叠加在所述壁的所述表征的与所述体内工具将遇到所述壁的位置对应的部分上，以及
在所述显示器上显示经修改的图像。
2.根据权利要求1所述的医疗系统，其中所述处理器被配置成通过从所述体内工具的远侧末端投影虚拟射线来识别所述体内工具将遇到所述壁的所述位置。
3.根据权利要求1所述的医疗系统，其中以三维渲染所述图像的至少一部分。
4.根据权利要求1所述的医疗系统，其中所述解剖腔是鼻窦。
5.根据权利要求1所述的医疗系统，其中所述解剖腔是鼻腔。
6.根据权利要求1所述的医疗系统，其中所述图像是计算机断层摄影（CT）图像。
7.根据权利要求1所述的医疗系统，其中所述图像是磁共振成像（MRI）图像。
8.一种有形非暂态计算机可读介质，其中存储有程序指令，所述程序指令在由处理器读取时，促使所述处理器：
通过以下操作来修改包括解剖腔的壁的表征的图像：
将表征体内工具的图标叠加在所述图像的与所述体内工具在所述解剖腔内的位置对应的部分上，以及
在所述体内工具继续在所述体内工具指向的方向上朝所述壁移动的情况下将标记叠加在所述壁的所述表征的与所述体内工具将遇到所述壁的位置对应的部分上；以及
显示经修改的图像。
9.根据权利要求8所述的有形非暂态计算机可读介质，其中所述程序指令还促使所述处理器通过从所述体内工具的远侧末端投影虚拟射线来识别所述体内工具将遇到所述壁的所述位置。
10.根据权利要求8所述的有形非暂态计算机可读介质，其中以三维渲染所述图像的至少一部分。
11.根据权利要求8所述的有形非暂态计算机可读介质，其中所述解剖腔是鼻窦。
12.根据权利要求8所述的有形非暂态计算机可读介质，其中所述图像是计算机断层摄影（CT）图像。
13.根据权利要求8所述的有形非暂态计算机可读介质，其中所述图像是磁共振成像（MRI）图像。
CN201711226597.1A 2016-11-29 2017-11-29 距解剖腔的壁的距离的可视化 Active CN108113749B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US15/364156 2016-11-29
US15/364,156 US11653853B2 (en) 2016-11-29 2016-11-29 Visualization of distances to walls of anatomical cavities

Publications (2)

Publication Number Publication Date
CN108113749A CN108113749A (zh) 2018-06-05
CN108113749B true CN108113749B (zh) 2023-01-24

Family

ID=60673443

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201711226597.1A Active CN108113749B (zh) 2016-11-29 2017-11-29 距解剖腔的壁的距离的可视化

Country Status (7)

Country Link
US (1) US11653853B2 (zh)
EP (1) EP3326537B1 (zh)
JP (1) JP7098308B2 (zh)
CN (1) CN108113749B (zh)
AU (1) AU2017261554A1 (zh)
CA (1) CA2986628A1 (zh)
IL (1) IL255700B (zh)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103313646A (zh) * 2011-01-14 2013-09-18 皇家飞利浦电子股份有限公司 突出了高风险结构的虚拟内窥镜成像
CN104936545A (zh) * 2012-12-31 2015-09-23 直观外科手术操作公司 设计介入程序的系统和方法

Family Cites Families (31)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5782762A (en) 1994-10-27 1998-07-21 Wake Forest University Method and system for producing interactive, three-dimensional renderings of selected body organs having hollow lumens to enable simulated movement through the lumen
US6055449A (en) * 1997-09-22 2000-04-25 Siemens Corporate Research, Inc. Method for localization of a biopsy needle or similar surgical tool in a radiographic image
WO2003045222A2 (en) * 2001-11-21 2003-06-05 Viatronix Incorporated System and method for visualization and navigation of three-dimensional medical images
US7924279B2 (en) 2002-12-20 2011-04-12 Koninklijke Philips Electronics N.V. Protocol-based volume visualization
US20060116576A1 (en) * 2004-12-01 2006-06-01 Scimed Life Systems, Inc. System and use thereof to provide indication of proximity between catheter and location of interest in 3-D space
JP4836122B2 (ja) 2006-02-09 2011-12-14 国立大学法人浜松医科大学 手術支援装置、方法及びプログラム
US7831096B2 (en) 2006-11-17 2010-11-09 General Electric Company Medical navigation system with tool and/or implant integration into fluoroscopic image projections and method of use
US20080183068A1 (en) 2007-01-25 2008-07-31 Warsaw Orthopedic, Inc. Integrated Visualization of Surgical Navigational and Neural Monitoring Information
US20080183188A1 (en) 2007-01-25 2008-07-31 Warsaw Orthopedic, Inc. Integrated Surgical Navigational and Neuromonitoring System
WO2009008750A1 (en) 2007-07-12 2009-01-15 Airway Limited Endoscope simulator
EP2249702A4 (en) * 2008-03-04 2012-01-25 Tomotherapy Inc METHOD AND SYSTEM FOR ENHANCED IMAGE SEGMENTATION
US8532734B2 (en) 2008-04-18 2013-09-10 Regents Of The University Of Minnesota Method and apparatus for mapping a structure
US8504139B2 (en) 2009-03-10 2013-08-06 Medtronic Xomed, Inc. Navigating a surgical instrument
WO2010144405A2 (en) 2009-06-08 2010-12-16 Surgivision, Inc. Mri-guided surgical systems with proximity alerts
JP2011024823A (ja) 2009-07-27 2011-02-10 Toshiba Corp 内視鏡装置及び内視鏡装置制御方法
US8819591B2 (en) 2009-10-30 2014-08-26 Accuray Incorporated Treatment planning in a virtual environment
US8532738B2 (en) 2010-11-04 2013-09-10 Biosense Webster (Israel), Ltd. Visualization of catheter-tissue contact by map distortion
US8942455B2 (en) 2011-08-30 2015-01-27 Siemens Aktiengesellschaft 2D/3D image registration method
US9237849B1 (en) 2012-05-23 2016-01-19 Intrinsic Medical Imaging, LLC Relative maximum intensity projection
US20150297151A1 (en) 2012-12-10 2015-10-22 Koninklijke Philips N.V. Positioning tool
US9788906B2 (en) 2013-03-15 2017-10-17 Synaptive Medical (Barbados) Inc. Context aware surgical systems for intraoperatively configuring imaging devices
US20140324400A1 (en) 2013-04-30 2014-10-30 Marquette University Gesture-Based Visualization System for Biomedical Imaging and Scientific Datasets
JP6785656B2 (ja) * 2013-08-15 2020-11-18 インテュイティブ サージカル オペレーションズ， インコーポレイテッド カテーテルの位置付け及び挿入のためのグラフィカル・ユーザインターフェイス
KR102185726B1 (ko) 2014-01-28 2020-12-02 삼성메디슨 주식회사 관심 영역에 대응하는 초음파 영상 표시 방법 및 이를 위한 초음파 장치
EP2923669B1 (en) 2014-03-24 2017-06-28 Hansen Medical, Inc. Systems and devices for catheter driving instinctiveness
JP6323184B2 (ja) 2014-06-04 2018-05-16 ソニー株式会社 画像処理装置、画像処理方法、並びにプログラム
US20160000414A1 (en) 2014-07-02 2016-01-07 Covidien Lp Methods for marking biopsy location
US10463242B2 (en) 2014-07-09 2019-11-05 Acclarent, Inc. Guidewire navigation for sinuplasty
US10835322B2 (en) 2015-04-24 2020-11-17 Medtronic Navigation, Inc. Direct visualization of a device location
US10152786B2 (en) 2016-10-11 2018-12-11 Biosense Webster (Israel) Ltd. Registration of a magnetic tracking system with an imaging device
US10510171B2 (en) 2016-11-29 2019-12-17 Biosense Webster (Israel) Ltd. Visualization of anatomical cavities

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103313646A (zh) * 2011-01-14 2013-09-18 皇家飞利浦电子股份有限公司 突出了高风险结构的虚拟内窥镜成像
CN104936545A (zh) * 2012-12-31 2015-09-23 直观外科手术操作公司 设计介入程序的系统和方法

Also Published As

Publication number Publication date
EP3326537B1 (en) 2021-11-03
US11653853B2 (en) 2023-05-23
JP7098308B2 (ja) 2022-07-11
IL255700B (en) 2022-02-01
US20180146884A1 (en) 2018-05-31
IL255700A0 (en) 2017-12-31
CA2986628A1 (en) 2018-05-29
JP2018102913A (ja) 2018-07-05
AU2017261554A1 (en) 2018-06-14
CN108113749A (zh) 2018-06-05
EP3326537A1 (en) 2018-05-30

Similar Documents

Publication Publication Date Title
JP5551957B2 (ja) 投影画像生成装置およびその作動方法、並びに投影画像生成プログラム
EP2573735B1 (en) Endoscopic image processing device, method and program
US8363048B2 (en) Methods and apparatus for visualizing data
US20220292786A1 (en) Method for controlling a display, computer program and mixed reality display device
JP2007537770A (ja) 内視鏡画像内の管腔状構造のディスプレイ最適化のための動的なクロップボックス決定方法
EP3025303B1 (en) Multi-modal segmentation of image data
JP6353827B2 (ja) 画像処理装置
US10342633B2 (en) Medical image data processing system and method
JP2006000205A (ja) 投影画像処理方法、投影画像処理プログラム、投影画像処理装置
WO2021130572A1 (en) 3d pathfinder visualization
WO2021130569A1 (en) 2d pathfinder visualization
US10803645B2 (en) Visualization of anatomical cavities
US9585569B2 (en) Virtual endoscopic projection image generating device, method and program
CN108113749B (zh) 距解剖腔的壁的距离的可视化
JP2017023834A (ja) 画像処理装置、撮影システム及び画像処理方法
JP2021157108A (ja) トレーニングシステム、画像処理装置、画像処理方法および画像処理プログラム
JP2006055402A (ja) 画像処理装置、画像処理方法及び画像処理プログラム
JP2009022307A (ja) 医用画像表示装置及びそのプログラム
KR101529659B1 (ko) 수술전 호흡 레벨과 수술장 호흡 레벨을 비교하는 방법

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant