CN104050313A - 路径规划系统和方法 - Google Patents

路径规划系统和方法 Download PDF

Info

Publication number
CN104050313A
CN104050313A CN201410095041.3A CN201410095041A CN104050313A CN 104050313 A CN104050313 A CN 104050313A CN 201410095041 A CN201410095041 A CN 201410095041A CN 104050313 A CN104050313 A CN 104050313A
Authority
CN
China
Prior art keywords
intermediate point
path
air flue
target
intrm intermediate
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201410095041.3A
Other languages
English (en)
Other versions
CN104050313B (zh
Inventor
M·W·贝克
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nellcor Puritan Bennett LLC
Covidien LP
Original Assignee
Nellcor Puritan Bennett LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nellcor Puritan Bennett LLC filed Critical Nellcor Puritan Bennett LLC
Publication of CN104050313A publication Critical patent/CN104050313A/zh
Application granted granted Critical
Publication of CN104050313B publication Critical patent/CN104050313B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/50ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for simulation or modelling of medical disorders
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482Interaction with lists of selectable items, e.g. menus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/003D [Three Dimensional] image rendering
    • G06T15/08Volume rendering
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/003Navigation within 3D models or images
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H40/00ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
    • G16H40/60ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices
    • G16H40/63ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices for local operation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00Indexing scheme for image data processing or generation, in general
    • G06T2200/24Indexing scheme for image data processing or generation, in general involving graphical user interfaces [GUIs]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2210/00Indexing scheme for image generation or computer graphics
    • G06T2210/41Medical

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Theoretical Computer Science (AREA)
  • Medical Informatics (AREA)
  • Biomedical Technology (AREA)
  • Public Health (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • General Health & Medical Sciences (AREA)
  • Epidemiology (AREA)
  • Primary Health Care (AREA)
  • Computer Graphics (AREA)
  • Human Computer Interaction (AREA)
  • Software Systems (AREA)
  • Business, Economics & Management (AREA)
  • General Business, Economics & Management (AREA)
  • Pathology (AREA)
  • Databases & Information Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Computer Hardware Design (AREA)
  • Remote Sensing (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Apparatus For Radiation Diagnosis (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Radiology & Medical Imaging (AREA)
  • Quality & Reliability (AREA)
  • Computer Vision & Pattern Recognition (AREA)

Abstract

一种用于规划通过病人的解剖内腔网络的路径的系统和方法,包括:具有至少一个处理器的计算设备;与所述计算设备进行通信的显示设备;以及用户界面,配置为显示在所述显示设备上并且配置为引导用户完成路径规划过程。所述用户界面包括:病人选择窗口,配置为接收用户输入以选择具有要对其执行路径规划的CT图像数据的病人;目标选择窗口,配置为接收用户输入以从所述CT图像数据选择至少一个目标;以及气道查找器窗口,配置为响应于用户输入,生成从所述至少一个目标到所述解剖内腔网络的入口点的至少一个路径。

Description

路径规划系统和方法
技术领域
本公开涉及用于规划通过病人的解剖内腔网络的路径的系统和方法。
背景技术
在外科手术过程中,临床医生常使用CT图像来确定经过病人的内腔网络的路径。然而,临床医生通常难以仅基于CT图像来有效地规划路径,特别是在支气管树的较小分支中,在那里CT图像通常不能提供用于准确导航的足够分辨率。
为了协助临床医生规划通过内腔网络的路径,已经实现了自动化路径规划系统和方法,它们自动地生成从CT图像上指定的目标到病人的入口点(例如,病人的嘴、鼻子、其他天然入口点或人工入口点,例如切口)的路径。自动化路径规划系统和方法的一个示例可见于美国专利No.8218846中,其通过引用整体合并于此。
然而,当使用完全自动化的路径规划系统时,医疗设备可能在医疗设备的工作末端不朝向目标取向的方向上到达路径末端。在此示例中,医疗设备的侧面可能取向为朝向目标而不是工作末端,临床医生可能很难或者不可能用工作末端到达目标。特别地,在导航通过支气管树的小气道时,当目标垂直于医疗设备在小气道中行进的路径时,可能难以或者甚至不可能朝向目标弯曲或转向医疗设备的工作末端。
发明内容
提供了用于规划通过病人的解剖内腔网络的路径的系统和方法。
在本公开的一个方面,公开了一种用于规划通过病人的解剖内腔网络的路径的系统,包括:具有至少一个处理器的计算设备;与计算设备进行通信的显示设备;以及用户界面,配置为显示在所述显示设备上并且配置为引导用户完成路径规划过程。所述用户界面包括:病人选择窗口,配置为接收用户输入以选择具有要对其执行路径规划的CT图像数据的病人;目标选择窗口,配置为接收用户输入以从所述CT图像数据选择至少一个目标;以及气道查找器窗口,配置为响应于用户输入,生成从所述至少一个目标到所述解剖内腔网络的入口点的至少一个路径。
在本公开的一个方面,所述病人选择窗口配置为从与所述计算设备相关联的至少一个存储设备导入病人和CT图像数据。
在本公开的一个方面,所述至少一个处理器配置为从由用户选择的CT图像数据生成三维CT体积(volume)。
在本公开的一个方面,所述至少一个处理器配置为从由用户选择的CT图像数据生成病人支气管树的三维模型以供显示在所述显示器上。
在本公开的一个方面,所述目标选择窗口包括:配置为显示CT图像数据的切片的CT图像窗口;配置为显示至少一个肺的图像的定位器窗口,所述定位器窗口包括配置为标识所显示的切片相对于所述至少一个肺的位置;以及配置为响应于用户输入,从所显示的CT图像数据的切片选择所述目标的目标选择元件。
在本公开的一个方面,所述CT图像窗口配置为响应于用户输入,显示所述CT图像数据的至少一个其他切片,所述定位器配置为相对于所述至少一个肺的图像移动,以标识所显示的至少一个其他切片相对于所述至少一个肺的位置。
在本公开的一个方面,所述气道查找器窗口配置为显示包括所选择的至少一个目标的CT图像,所述CT图像可绕预定轴旋转,以帮助用户识别所述解剖内腔网络的气道。
在本公开的一个方面,所述预定轴是定义为从所述目标到所述解剖内腔网络的已知气道的轴。
在本公开的一个方面,所述预定轴是定义为从所述目标到所述解剖内腔网络中的气管的一部分的轴。
在本公开的一个方面,所述预定轴是由从所述目标到中途点的路径定义的轴。
在本公开的一个方面,所述预定轴是由从第一中途点到第二中途点的路径定义的轴。
在本公开的一个方面,所述气道查找器窗口还包括配置为标识所述CT图像相对于所述CT图像的初始旋转取向绕所述预定轴的旋转量的旋转界面。
在本公开的一个方面,公开了一种用于规划通过病人的解剖内腔网络的路径的方法,所述方法包括下列步骤:导入由用户输入选择的病人的CT图像数据;从所述CT图像数据生成三维CT体积;显示所述三维CT体积的切片;接收标识目标的用户输入;定义从所标识的目标到所述三维CT体积的已知气道的旋转轴;绕所述旋转轴旋转所述三维CT体积的切片;接收来自用户的指示所旋转了的切片的气道中的新中途点的位置的输入;在所识别的气道中设置第一中途点;以及生成从所述目标到所述第一中途点的第一路径。
在本公开的一个方面,该方法还包括下列步骤:判断所述第一中途点是否位于所述三维CT体积的已知气道中;以及如果所述第一中途点位于已知气道中,则自动完成从所述第一中途点到所述入口点的路径。
在本公开的一个方面,该方法还包括下列步骤:沿所述第一路径定义所述旋转轴;绕所述旋转轴旋转所述三维CT体积的切片;接收来自用户的表示所旋转了的切片的气道中的新中途点的位置的输入;在所识别的气道中设置第二中途点;以及生成从所述第一中途点到所述第二中途点的第二路径。
在本公开的一个方面,该方法还包括下列步骤:判断所述第二中途点是否位于所述三维CT体积的已知气道中;以及如果所述第二中途点位于已知气道中,则自动完成从所述第二中途点到所述入口点的路径。
在本公开的一个方面,公开了一种非暂时性计算机可读储存介质,其编码有程序,该程序在由处理器运行时使用户界面执行下列步骤:导入由用户输入选择的病人的CT图像数据;从所述CT图像数据生成三维CT体积;显示所述三维CT体积的切片;接收标识目标的用户输入;定义从所标识的目标到所述三维CT体积的已知气道的旋转轴;绕所述旋转轴旋转所述三维CT体积的切片;接收来自用户的指示所旋转了的切片的气道中的新中途点的位置的输入;在所识别的气道中设置第一中途点;以及生成从所述目标到所述第一中途点的第一路径。
在本公开的一个方面,该程序还使所述用户界面执行下列步骤:判断所述第一中途点是否位于所述三维CT体积的已知气道中;以及如果所述第一中途点位于已知气道中,则自动完成从所述第一中途点到所述入口点的路径。
在本公开的一个方面,该程序还使所述用户界面执行下列步骤:沿所述第一路径定义所述旋转轴;绕所述旋转轴旋转所述三维CT体积的切片;接收来自用户的表示所旋转了的切片的气道中的新中途点的位置的输入;在所识别的气道中设置第二中途点;以及生成从所述第一中途点到所述第二中途点的第二路径。
在本公开的一个方面,该程序还使所述用户界面执行下列步骤:判断所述第二中途点是否位于所述三维CT体积的已知气道中;以及如果所述第二中途点位于已知气道中,则自动完成从所述第二中途点到所述入口点的路径。
在不偏离本公开的范围的情况下,可以组合本公开的任何以上方面和实施例。
附图说明
当参考附图来阅读对各实施例的描述时,当前公开的系统和方法的目标和特征将对本领域技术人员变得显而易见,附图中:
图1是根据本公开一实施例的用于路径规划的计算设备的示意图;
图2A是根据本公开一实施例的从轴方向(Axial direction)获取的病人的肺的CT扫描图像的视图;
图2B是根据本公开一实施例的示出轴方向的病人身体的透视图;
图2C是根据本公开一实施例的从冠方向(Coronal direction)获取的病人的肺的CT扫描图像的视图;
图2D是根据本公开一实施例的示出冠方向的病人身体的透视图;
图2E是根据本公开一实施例的从矢方向(Sagittal direction)获取的病人的肺的CT扫描图像的视图;
图2F是根据本公开一实施例的示出矢方向的病人身体的透视图;
图3是示出根据本公开一实施例的路径规划的四个阶段的流程图;
图4是根据本公开一实施例的用于选择病人数据的用户界面的图示;
图5是根据本公开一实施例的用于选择病人数据的方法的流程图;
图6是根据本公开一实施例的用于将目标添加到路径规划中的用户界面的图示;
图7是根据本公开一实施例的用于将目标添加到路径规划中的方法的流程图;
图8是根据本公开一实施例的用于编辑所添加的目标的目标细节的用户界面的图示;
图9是根据本公开一实施例的用于查看3D图的用户界面的图示;
图10是根据本公开一实施例的用于检查3D图的方法的流程图;
图11A是用于查找从目标到病人的入口点的路径的用户界面的图示;
图11B是在用户界面的CT图像绕初始轴旋转之后图11A的用户界面的图示;
图11C是根据本公开一实施例的示出了初始旋转轴的病人的支气管树的3D模型的透视图;
图11D是在添加了中途点并且创建了目标和中途点之间的路径之后图11B的用户界面的图示,CT图像绕作为轴的所述路径旋转了;
图11E是在添加了第二中途点并且创建了中途点和第二中途点之间的第二路径之后图11D的用户界面的图示;
图11F是在CT图像绕作为轴的第二路径旋转以显示已知气道之后图11E的用户界面的图示;
图11G是在已知气道内添加了第三中途点并且自动完成路径之后图11F的用户界面的图示;
图12是根据本公开一实施例的用于查找已知气道并且创建路径的方法的流程图;
图13是根据本公开一实施例的用于查看路径的用户界面的图示;
图14是根据本公开一实施例的用于查看路径的方法的流程图;
图15是根据本公开一实施例的用于查看目标和路径并且用于创建附加目标和路径的用户界面的图示;
图16是根据本公开一实施例的用于查看和导出路径规划的用户界面的图示;以及
图17是根据本公开一实施例的用于查看和导出目标、路径以及路径规划的方法的流程图。
具体实施方式
虽然将关于特定实施例来描述本发明,但是,本领域技术人员容易意识到,在不偏离本公开的思想的情况下,可以作出各种修改、重新布置和替换。本公开的范围由所附权利要求来定义。
现在参考图1,本公开总体上涉及用于规划通过病人的解剖内腔网络的路径以供在手术期间使用的路径规划系统10和方法。路径规划系统10可以包括计算设备100,诸如,例如膝上型计算机、桌面型计算机、平板计算机或其他类似设备,其具有显示器102、存储器104、一个或多个处理器106和/或常见于计算设备中的其他类型组件。显示器102可以是触敏的和/或语音激活的,使显示器102能充当输入和输出设备。替选地,可以使用键盘(未示出)、鼠标(未示出)或其他数据输入设备。
存储器104包括用于存储数据和/或可由处理器106执行并且控制计算设备100的操作的软件的任何非暂时性计算机可读存储介质。在一实施例中,存储器104可以包括诸如闪存芯片之类的一个或多个固态存储设备。在替选实施例中,存储器104可以是通过大容量存储控制器(未示出)和通信总线(未示出)连接到处理器106的大容量存储器。虽然此处包含的对计算机可读介质的描述引用了固态存储器,但是本领域技术人员应理解,计算机可读存储介质可以是可被处理器106访问的任何可用介质。即,计算机可读存储介质包括以任何信息存储方法和技术实现的非暂时性、易失性和非易失性、可移动和不可移动的介质,所述信息诸如为计算机可读指令、数据结构、程序模块或其他数据。例如,计算机可读存储介质包括RAM、ROM、EPROM、EEPROM、闪存或其它固态存储技术,CD-ROM、DVD或其它光学存储,磁盒、磁带、磁盘存储或其它磁存储设备,或能用于存储所需信息并且可由计算设备100访问的任何其它介质。
计算设备100还可包括通过有线或无线连接连接到分布式网络或因特网的网络模块108,以用于来往于其他源进行数据收发。例如,计算设备100可以从服务器(例如医院服务器、因特网服务器或其他类似服务器)接收计算机层析(CT)图像,以供在路径规划期间使用。也可以通过可移动存储器104向计算设备100提供病人的CT图像。
路径规划模块200包括存储在存储器104中并且由计算设备100的处理器106执行的软件程序。如下面将更详细地描述的那样,路径规划模块200引导临床医生完成一系列步骤以制定路径规划,用于供稍后在医疗过程中使用。路径规划模块200与用户界面模块202进行通信,以便在显示器102上向临床医生显示可视交互特征,并且接收临床医生的输入。
这里使用时,术语“临床医生”指的是在规划、执行、监视和/或监督涉及使用此处描述的实施例的医疗过程中涉及的任何医务专业人员(即,医生、外科医生、护士等)或路径规划系统10的其他用户。
临时参考图2A-2F,实际上,标识目标的最有效的方法涉及使用计算机层析(CT)图像。作为引言,使用CT图像作为诊断工具已经成为惯例,CT结果通常是临床医生关于病变、肿瘤或其他类似关注目标的大小和位置的主要信息来源。临床医生使用该信息用于规划诸如活组织检查之类的手术过程,但是其只可作为“离线”信息获得,一般必须在开始手术过程之前尽医生的最大能力记住。CT图像通常通过沿轴方向、冠方向和矢方向中的每个以切片方式对病人进行数字成像来获得。例如,图2A示出了从轴方向获取的一片CT图像,即,好像看起来平行于病人的脊柱,如图2B所示。图2C示出了从冠方向,即,如图2D所示从病人的鸟瞰视图,获取的一片CT图像。图2E示出了从矢方向,即,如图2F所示从病人的侧面,获取的一片CT图像。临床医生在尝试识别或定位目标时,可以从每个方向逐个切片地查看CT图像数据。
现在参考图3,在一实施例中,使用路径规划模块200的路径规划可以以四个单独阶段来执行。在第一阶段S1,临床医生选择用于路径规划的病人。在第二阶段S2,临床医生添加目标。在第三阶段S3,临床医生创建到目标的路径。最后,在第四阶段S4,临床医生查看和接受规划,并且可以导出规划以供在医疗过程期间使用。临床医生可以根据需要重复第二和第三阶段S2和S3中的任何一个或者两者,以针对特定病人选择附加目标和/或创建附加路径。例如,临床医生可以选择附加目标,并且可以创建到每个目标的路径。临床医生也可以或者替代地创建同一目标的多个路径。现在将参考图4-16来更详细地描述阶段S1-S4中的每一个。
这里使用时,术语“窗口”指的是由用户界面202在显示器102上投影或提供的任何屏幕、图像、图层、用户界面、或它们的组合,并且涵盖实现这些元素的功能的部件、组件、装置、模块等。
现在参考图4和5,在阶段S1,用户界面202向临床医生呈现用于选择要对其执行路径规划的病人数据212的窗口210。图4示出包括窗口210的用户界面202,图5示出根据本公开一实施例的选择病人数据的方法。用户界面202最初在步骤S500通过打开窗口210供临床医生查看来开始选择病人数据的方法。窗口210包括可选择的源位置菜单214,菜单214为临床医生提供选择从其接收病人数据212以用于路径规划的源的能力。在步骤S510中,临床医生从若干储存器或存储设备中进行选择,储存器或存储设备包括例如cd、dvd、蓝光、其他可插入光学介质、通用串行总线(USB)存储设备、外部或内部硬驱动器、固态存储设备、或者连接到计算设备100或与计算设备100进行数据通信的任何其他类型的存储器或储存器104,如上文描述的那样。窗口210还可以提供对存储在远程位置诸如网络或因特网上的服务器中的病人数据212的访问。源位置菜单214可允许临床医生选择单个病人数据源,或者可允许临床医生同时选择多个病人数据源。源位置菜单214还可以包括列出来自所有源的病人的选项。在步骤S504中,临床医生可以搜索病人的列表,或者可以在搜索框216中输入搜索项,以将病人的列表缩限到符合选择标准(例如,病人的姓或名、ID号、出生日期或其他类似标准)的那些病人。一旦临床医生选择了所需的病人,临床医生前进到步骤S506。
在步骤S506中,一旦临床医生选择了病人,就显示病人的下拉菜单218,包括病人的可用CT图像220的列表,以及先前为每幅CT图像220创建的所选病人的任何路径规划222。临床医生可以通过选择创建新规划选项224并且前进到步骤S510来选择基于CT图像创建新规划,或者如果对于所选CT图像220存在以前创建的规划的话,则可以通过选择打开规划选项226并且前进到步骤S514来打开以前创建的规划。当选择创建新规划选项224时,CT图像220优选以DICOM格式导入到路径规划模块200中。计算设备100处理CT图像220,并且通过按照CT图像220的拍摄顺序来排列CT图像220,以及根据拍摄它们时CT扫描设备上设置的切片之间的距离将它们分隔开,而将CT图像220组装成三维CT体积(volume)。路径规划模块200可以执行数据填充功能以创建病人的支气管树的无缝三维(3D)模型或CT体积。路径规划模块200使用新构建的CT体积来生成支气管树中的气道的三维图。三维图可以是精简的,使得每个气道表示为线,或者它可以包括具有尺寸的气道,尺寸表示气道相应的直径。优选地,当生成三维图时,用气流方向(吸气、呼气、或针对每一种的单独箭头)来标记气道,以供后面使用。在共同受让的Summers等人的美国专利No.6246784和6345112以及其中引用的参考文献中描述了用于生成三维CT体积和模型的技术,所有这些都通过引用合并于此。
窗口210还包括捕捉屏幕选项228,选项228可允许临床医生捕捉显示器102显示的当前屏幕的图像,例如窗口210,并且将所捕捉到的图像保存到存储器。捕捉屏幕选项228还可以配置为从所捕捉到的图像去除病人特定数据以保护病人隐私。病人特定数据的去除可以是可由临床医生选择的选项,并且可以默认设置为“选中”。
现在参考图6-8,如果临床医生从窗口210选择创建新规划选项224,则方法前进到步骤S512和阶段S2,添加目标。图6和8示出了包括窗口230和244的用户界面202,图7示出了根据本公开一实施例的添加目标的方法。当阶段S2开始时,方法前进到步骤S700,用户界面202打开窗口230,用于识别和选择将对其执行路径规划的目标232。在窗口230中,在主窗口236中向临床医生提供CT图像数据的切片234。可以从沿轴方向、冠方向和矢方向中的任何一个的CT图像数据获取切片234。临床医生可以在任何时间在来自轴方向、冠方向和矢方向的切片234之间自由地切换主窗口236所显示的切片234。在所示的示例中,提供了来自轴方向CT图像数据的切片234。应注意,通过一次只示出单个切片和方向,例如,只示出来自轴方向CT图像数据的切片234,向临床医生提供了从其中选择目标的简单而清洁的界面。临床医生可以在主窗口236中操纵和重新定位所选切片234的图像,并且可以放大或缩小所选切片234,以获得所选切片234的特定部分的放大或缩小的视图。
窗口230还包括提供病人的CT图像数据的一般总览以供临床医生使用的定位器238。在所示的示例中,定位器238提供定位器窗口240,其包括冠方向的病人的肺的一般视图。定位器窗口240可以例如显示冠方向的CT图像、类似于荧光镜检查的图像、或向临床医生提供病人肺视图的其他类似图像。定位器238包括跨定位器窗口240延伸的位置元件242,例如线或条,位置元件242向临床医生提供在主窗口236中显示的所选切片234相对于如定位器238所显示的病人的肺的位置。位置元件242是可由临床医生选择的,并且相对于定位器窗口240可移动或可滑动,以允许临床医生滚动浏览在主窗口236上显示的病人的肺的CT图像切片。例如,CT图像切片可以按由CT图像数据定义的序列顺序被滚动浏览或显示。临床医生还可以或者替选地点击或选择定位器窗口240的一部分,以将定位器238移动到病人的肺中的所选位置。临床医生还可以或者替选地通过输入设备诸如鼠标滚轮或其他设备滚动浏览主窗口236中显示的病人的肺的CT图像切片,而无需直接与用户界面202进行交互。当选择另一方向(例如冠方向)显示在主窗口236上时,定位器238可以显示其他方向中的一个方向(例如,轴方向或矢方向)的一般视图。定位器238向临床医生提供特定病变或其他目标232位于病人肺中何处的一般参考。定位器238还可以显示一个或多个先前选定的目标,以供临床医生参考。
在步骤S702中,临床医生滚动浏览CT图像切片234以识别CT图像上的目标232。在步骤S704中,一旦识别了当前CT切片234中的目标232,临床医生就可以使用目标选择元件243(例如十字准星、鼠标指针、手或其他类似选择元件)从主窗口236点击或以其他方式选择目标232。例如,临床医生可以拖动在主窗口236上显示的CT图像,使得目标选择元件243定位在目标232上方,或者替选地,可以通过使用鼠标(未示出)或其他输入设备来点击目标232而直接选择目标232。如果显示器102是触敏的,则临床医生可以触摸显示器102上的目标232以选择目标232。然后,可以在步骤S706中通过选择添加目标选项245来将目标232添加到规划中。
现在参考图8,一旦添加了目标232,就通过用户界面202显示目标细节窗口244。目标细节窗口244可以覆盖窗口230或者可以替代窗口230。目标细节窗口244向临床医生提供所选目标232,如轴视图246、冠视图248和矢视图250的放大或特写版本所示。在步骤S708中,临床医生可以输入目标232的宽度、高度以及深度尺寸,命名目标232,并且添加与目标232相关的附加评注。另外,目标大小调整元件252(例如,十字准星或其他类似元件)定位在视图246、248、250每个中的目标232上方,并且可由临床医生操纵或移动以在每个视图246、248、250中使目标232在目标大小调整元件252中居中。目标大小调整元件252还包括可由临床医生操纵以调整目标232的尺寸的可调边界环254。例如,临床医生可以在轴视图246、冠视图248和矢视图250每个中调整边界环254的大小,以准确定义目标232的尺寸。边界环254可以是圆形的、椭圆的或其他类似几何形状,可以调节边界环254的形状以基本匹配目标232的大体尺寸。在一实施例中,可以由临床医生以非几何方式调整边界环254,例如对边界环254进行自由形式的操纵,以符合目标232的非几何尺寸。应注意,由于目标232是三维对象,诸如病变、肿瘤等,并且各视图246、248、250是从不同方向获取的,所以临床医生对视图246、248、250之一上的边界环254的操纵和调整可能会导致其余视图246、248、250中的一个或两者中的边界环254的变化或调整。以此方式,临床医生可以在所有三个视图中准确选择目标232的目标尺寸和位置,有效地将目标映射到3D坐标空间中的特定坐标和维度。在步骤S710中,一旦临床医生选择了目标232的尺寸和位置,临床医生就选择保存目标选项256,并且前进到在步骤S712中查看所生成的病人支气管树的三维图。
现在参考图9和10,在临床医生选择了窗口230的保存目标选项256之后,该方法前进到步骤S1000,查看支气管树的3D图。在步骤S1000中,用户界面202打开窗口260,用于查看由路径规划模块200生成的三维图。窗口260包括显示病人支气管树的三维模型264的三维图窗口262以及显示轴方向、冠方向和矢方向之一的CT图像以供临床医生参考的扫描窗口266。在所示实施例中,显示了冠方向的CT图像。显示冠方向的CT图像是因为冠方向提供了病人支气管树的鸟瞰图像或正面视图,更可能向临床医生显示支气管树的主要可识别特征,例如主气道的干路和支路。通过将CT图像与三维模型264进行比较,临床医生能够确定或验证三维模型264包括病人支气管树的主要可识别特征,以及当与CT图像比较时三维模型264中没有恶劣的异常。在步骤S1002中,临床医生根据需要通过操纵三维图窗口262的旋转滑块268来旋转三维模型,以判断3D图是否是可接受的。在步骤S1004中,如果临床医生满意三维模型264基本准确,例如充分显示了主气道或中央气道,则临床医生选择批准图选项270,并且前进到阶段S3和气道查找器。如果3D图不可接受,则临床医生前进到步骤S1006,并且返回到步骤S500,以选择新病人数据,例如新病人或同一病人的新CT扫描。
现在参考图11A-11G和12,在临床医生选择了窗口260的批准图选项270之后,该方法前进到阶段S3和步骤S1200,以启动气道查找器。图11A-11B和11D-11G示出了包括窗口272的用户界面202,图11C示出了供气道查找器使用的初始轴“A”,图12示出了根据本公开一实施例的查找气道并且完成路径的方法。在步骤S1200中,最初参考图11A-11C,用户界面202打开用于创建从目标232到病人的入口点(例如,诸如嘴或鼻子之类的天然孔,或诸如切口之类的人工入口点)的路径的窗口272。窗口272包括显示包括目标232的CT图像276的气道查找器274以及描述CT图像276绕指定轴的旋转的旋转界面278。在一实施例中,在初始打开窗口272时,在气道查找器窗口274的CT图像276上只显示了目标232,在旋转界面278上,旋转指示器280(例如箭头280a和旋转条280b)被对准。旋转界面278提供关于CT图像276绕指定轴的相对旋转的旋转信息。现在参考图11B,目标标记器232A显示在CT图像276上,并且定位在目标232上方以向临床医生示出目标232的位置。引线(lead line)232B从目标标记器232A的中心延伸,并且可由临床医生通过指针、鼠标或其他输入设备的移动来移动。例如,临床医生对输入设备的移动会移动远离目标232延伸的引线232B的末端232C。临床医生使用引线232B来选择合适的气道,如下面将参考步骤S1208更详细地描述的那样。
在一实施例中,简要地参考图11C,在初始打开窗口272时,在步骤S1202中设置初始轴“A”,轴“A”定义为沿着从目标232到病人气管内腔的中心部分获取的轴。通过将初始轴“A”定义为沿着从目标232到气管的轴,临床医生能发现在目标232附近的、将目标232连接到入口点的气道的可能性增大。这是因为支气管树的树状或分支本质。在其他实施例中,初始轴“A”可以定义为沿着从目标232到病人支气管树的任何其他部分(例如,到支气管树的最近主分枝的中心部分,或者到病人支气管树的3D图的最近已知气道)获取的轴。
在步骤S1204中,临床医生通过例如滚动鼠标轮、操纵另一输入设备和/或通过操纵用户界面202的一部分(例如,旋转界面278)来绕初始轴旋转CT图像276。当临床医生绕初始轴旋转CT图像276时,旋转界面278上的指示器280沿旋转界面278在对应方向上相对于彼此移动以指示相对于初始视图的旋转量,例如,旋转条280b相对于箭头280a移动。当临床医生沿同一方向持续进行旋转之后旋转条280b到达旋转界面278的末端时,旋转条280b将从旋转界面278的末端处消失,重新出现在旋转界面278的相反端,并且继续在同一方向上沿旋转界面278滑动。当临床医生绕初始轴旋转CT图像276完整一圈时,指示器280(例如,箭头280a和旋转条280b)将在旋转界面278的中心处再次对准。
现在参考图11B和11D,当绕初始轴旋转CT图像276时,临床医生在步骤S1206中评估CT图像276以判断是否存在目标232附近的气道282。例如,CT图像276中远离目标232延伸或在目标232附近延伸的暗区可以是存在气道282的指示。如果临床医生确定存在气道282,则该方法前进到步骤S1208,临床医生将引线232B的末端232C定位到CT图像276上的气道282内的确定位置处,以在CT图像276上创建路径中途点282a。路径规划模块200在CT图像276上在目标232和路径中途点282a之间画路径线284,并且前进到步骤S1210。以此方式,临床医生定义气道282的与目标232最接近的部分。如果没有气道282存在,则临床医生返回到步骤S1204,并且继续绕指定轴旋转CT图像。如果路径中途点282a没有被正确地定位或者临床医生希望查找另一气道,则临床医生可以去除路径中途点282a并且返回到步骤S1204或S1208中的任一个。
在步骤S1210中,路径规划模块200判断由临床医生选择的路径中途点282a是否位于由路径规划模块200生成的三维图的已知气道内。如果路径中途点282a位于三维图的已知气道内,则该方法前进到步骤S1214,路径规划模块200从路径中途点282a通过三维图的已知气道到病人的气管和入口点自动完成路径,如下面在图11G中针对中途点282a进一步示出的那样。
如果路径中途点282不位于三维图的已知气道内,则该方法前进到步骤S1212。现在参考图11D和11E,气道查找器274显示包括目标232、目标标记器232A、路径中途点282a、路径线284以及旋转界面278的CT图像286,如上面描述的那样。如图11D所示,具有末端282c的引线282b现在从路径中途点282a延伸。
在步骤S1212中,指定轴被设置为由路径线284定义的轴。CT图像286绕路径线284而非初始轴“A”旋转,旋转界面278显示CT图像286绕由路径线284定义的轴的相对旋转。通过定义绕路径线284旋转的轴,临床医生在CT图像286上发现连接到包括路径中途点282a的气道282的气道的可能性增大。在指定轴已经被设置为路径线284之后,该方法返回到步骤S1204。当绕由路径线284定义的轴旋转CT图像286时,临床医生评估CT图像286以判断是否存在连接到包括路径中途点282a的路径的气道288,如上面描述的那样。如果在步骤S1206中临床医生确定存在气道288,则该方法前进到步骤S1208,临床医生将引线282B的末端282C定位到CT图像286上的气道288内的确定位置处,以在CT图像286上创建路径中途点288a。路径规划模块200在CT图像286上画从路径中途点282a到路径中途点288a的路径线290,如图11E所示。如果路径中途点288a没有被正确地定位或者临床医生希望查找另一气道,则临床医生可以去除路径中途点288a,并且返回到步骤S1204或S1208中的任一个。
在步骤S1210中,现在参考图11F,路径规划模块200判断临床医生选择的路径中途点288a是否位于由路径规划模块200生成的三维图的已知气道(例如,气道291)内。如果路径中途点288a不位于三维图的已知气道内,则该方法前进到步骤S1212,临床医生继续设置额外的路径中途点,如上面描述的那样,直到路径中途点位于三维图的已知气道内。
现在参考图11G,已经在气道291中以上述方式添加了路径中途点291a。在此图示中,气道291是三维图的已知气道。该方法前进到步骤S1214,路径291b从路径中途点291a经气道291和支气管树的三维图的已知分支到病人的入口点由路径规划模块200自动完成。一旦自动完成了路径,该方法就前进到步骤S1216,由用户界面202显示路径完成窗口293,向临床医生提供前进到查看路径选项293a和撤消自动完成选项293b。临床医生可以选择前进到查看路径选项293a以前进到步骤S1218,并且开始查看路径。替选地,如果临床医生想要使用气道查找器274来继续绘制中途点,则临床医生可以选择撤消自动完成选项293b,并且返回到步骤S1212,以便进一步创建路径中途点,如上文所描述的那样。
以此方式创建路径规划,以供稍后临床医生在手术过程期间使用。由于临床医生可以在自动完成之前手动选择和创建与目标232最接近的路径中途点和路径,因此临床医生能够创建这样的路径规划,该路径规划直接控制路径规划的末尾处医疗设备相对于目标232的最终取向。这允许临床医生为医疗设备创建路径规划,该路径规划将允许医疗设备在将允许医疗设备的工作末端基本取向为朝向目标232的方向上沿病人的小气道行进,其中基本朝向目标232包括临床医生可以在所使用的医疗设备的限制下有效地到达目标232的任何取向。
现在参考图13和14,在临床医生已经完成了路径之后,该方法前进到步骤S1400,用户界面202打开用于查看从目标232到病人的入口点的路径的窗口294。图13示出了包括窗口294的用户界面202,图14示出了根据本公开一实施例的查看路径的方法。窗口294包括虚拟窗口295和三维图窗口296。三维图窗口296显示与三维图窗口262类似的病人支气管树的三维模型298。虚拟窗口295显示基于CT的“虚拟支气管镜检查”,其描绘了与实际支气管镜视图类似的模拟视图,并且包括用于在虚拟支气管镜检查视图、局部视图以及径向视图之间进行选择的视图选择标签295a。在虚拟支气管镜检查过程中,临床医生可以根据需要在虚拟、局部以及径向视图之间切换,以查看路径。虚拟支气管镜检查视图显示从CT数据得到的气道的虚拟可视化,其近似于来自支气管镜的视频图像,局部视图显示当前导航位置处CT体积的截面的提升的透视图,径向视图显示与导航位置和局部路径片段垂直的CT体积的截面。在公共受让的Summers等人的美国专利No.6246784和No.6345112以及其中引用的参考文献中描述了虚拟支气管镜检查技术,其全部通过引用合并于此。
在步骤S1402中,一旦临床医生已经创建了路径,用户就通过随后在虚拟窗口295上的贯穿飞行虚拟支气管镜检查来查看规划、目标和路径。用户界面202在虚拟窗口295中生成代表所创建的路径的线300。临床医生沿着线300,从入口点通过气管和病人支气管树的气道,直到线300到达目标232。可以理解,当临床医生沿着线300通过病人的支气管树的越来越小的气道时,由于所导入的CT图像的分辨率不足,路径规划模块200解析较小气道的能力越来越难。由于这种分辨率不足,虚拟窗口295中显示的虚拟支气管镜检查的模拟视图可能最终不能显示清晰的气道内腔。无论如何,目标232和线300将显示在虚拟窗口295中以允许临床医生使用该系统用于路径规划目的。
在临床医生沿着线300通过病人支气管树到达目标232时,对应的标记298a沿三维模型298移动到目标232,指示虚拟窗口295的模拟视图相对于三维模型298的位置。在步骤S1404中,在查看虚拟支气管镜检查之后,临床医生判断路径是否是可接受的。如果路径是可接受的,则临床医生可以选择批准选项299a,该方法前进到步骤S1408。如果路径不是可接受的,则该方法前进到步骤S1406,临床医生可以选择放弃路径并且重新开始选项299b,从而返回到气道查找器窗口272以编辑路径或创建新路径。
现在参考图15-17,一旦临床医生已经查看并且接受了路径,该方法前进到阶段S4和步骤S1700。图15和16分别示出了包括窗口302和316的用户界面202,图17示出了根据本公开一实施例的查看规划的方法。在步骤S1700中,用户界面202打开窗口302,窗口302包括显示所选路径的三维图窗口304以及轴方向306、冠方向308和矢方向310中的每个的视图。窗口302包括目标标签312和路径列表314。目标标签312允许临床医生添加附加目标并且选择已经识别的目标,以供进一步检查。路径列表312允许临床医生检查与所选目标标签312相关联的路径,并且为所选目标标签312添加路径。在步骤S1704中,临床医生判断目标是否是可接受的。如果目标不是可接受的,则该方法前进到步骤S1706,路径规划模块200将临床医生返回到添加目标窗口230以添加新目标,如上文所描述的那样。如果目标是可接受的,则该方法前进到步骤S1708,临床医生判断路径是否是可以接受的。如果路径不是可接受的,则该方法前进到步骤S1710,路径规划模块200将临床医生返回到气道查找器窗口272,以便创建附加路径,如上文所描述的那样。如果目标和路径都是可接受的,则临床医生在步骤S1716中选择完成和导出选项315并且前进到查看规划。
现在参考图16,在步骤S1716中,用户界面202打开窗口316,其包括三维图窗口318和为所选规划识别的目标320的列表。每个目标320都可由临床医生选择,以显示相关联的路径322,每一路径322都可由临床医生通过对查看选项324的选择来查看。窗口316还提供是否已经查看和批准了三维图以及是否已经导出了当前规划的指示。在步骤S1712中,如果尚未批准3D图,则临床医生可以通过选择查看3D图选项326来重新查看三维图。如果已经选择了查看3D图选项326,则该方法前进到步骤S1714,路径规划模块200将临床医生返回到上文所描述的查看3D图窗口260。如果已经批准了3D图,则该方法前进到步骤S1716,临床医生判断总体规划是否是可以接受的。如果规划不可接受,则该方法前进到步骤S1718,路径规划模块200将临床医生返回到上文所描述的病人选择窗口210。如果临床医生对规划满意,则该方法前进到步骤S1720,临床医生可以通过选择导出选项328来导出规划,以供在手术过程中使用。规划可以被导出到任何形式的非暂时性计算机可读介质、存储器或存储设备,如上文对于存储器104所描述的那样,包括例如设备100上的存储器、可移动存储器设备、通过跨有线或无线连接的传输导出到远程或服务器存储器等。
参考图4、6、15和16,用户界面202可以包括可由临床医生操纵以返回到或重复任何上述阶段和/或步骤的一个或多个导航条。例如,如图4所示,临床医生可以操纵导航条330以在各阶段之间切换。还可以向临床医生提供返回到任何用户界面202窗口中的先前步骤或窗口的选项。
如上文所指出的那样,本公开使用CT图像用于路径规划。CT图像通常还由临床医生在医疗过程中使用,以用于导航目的。CT图像优于其他成像形式,因为它们具有自己的坐标系。匹配两个坐标系,例如CT图像的坐标系和病人的坐标系,通常称为配准。配准一般通过识别CT图像和身体上或内的位置并且测量它们的在两种系统中的坐标来执行。
在例如转让给Covidien LP的美国专利No.7233820中详细描述了CT数据和病人数据的手动和半自动化配准的方法,该专利通过引用合并于此。由于手动配准在某种程度上费时,并且需要多个步骤,因此许多实践者依赖于下面所描述的自动配准技术。然而,在某些情况下,特别是在CT图像数据质量不够高的情况下,仍可能需要或者期望进行手动配准。
对于大多数过程,自动配准已经成为常态,因为尽管上文引用的配准技术的手动基准点指定是高度有效的,但是采样点数的选择必然代表精确度和效率之间的折衷。类似地,尽管半自动技术是可行的选项,但是它需要在导管组合件远端的图像传感器,这会增大系统的复杂性。
在公共受让的美国专利申请No.12/780678中详细描述了自动配准技术,该专利申请通过引用合并于此。分支结构的数字图像和代表传感器在分支结构内的位置的实时指示器之间的自动配准是通过使用传感器来“画”该结构内部的数字图像来实现的。一旦收集了足够的位置数据,就实现了配准。在导航通过分支结构一定会导致收集额外的位置数据并且作为结果,配准被不断细化的意义上,配准是“自动”的。
虽然为了示范和说明而参考各个附图详细描述了各实施例,但是可以理解,本发明的过程和设备不应解释为被其限制。对本领域技术人员而言显而易见的是,在不偏离本公开的范围的情况下,可以对前述的各实施例作出各种修改。

Claims (20)

1.一种用于规划通过病人的解剖内腔网络的路径的系统,所述系统包括:
包括至少一个处理器的计算设备;
与所述计算设备进行通信的显示设备;以及
用户界面,配置为显示在所述显示设备上并且配置为引导用户完成路径规划过程,所述用户界面包括:
病人选择窗口,配置为接收用户输入以选择具有要对其执行路径规划的CT图像数据的病人;
目标选择窗口,配置为接收用户输入以从所述CT图像数据选择至少一个目标;以及
气道查找器窗口,配置为响应于用户输入,生成从所述至少一个目标到所述解剖内腔网络的入口点的至少一个路径。
2.根据权利要求1所述的系统,其中,所述病人选择窗口配置为从与所述计算设备相关联的至少一个存储设备导入病人和CT图像数据。
3.根据权利要求1所述的系统,其中,所述至少一个处理器配置为从由用户选择的所述CT图像数据生成三维CT体积。
4.根据权利要求1所述的系统,其中,所述至少一个处理器配置为从由用户选择的所述CT图像数据生成病人支气管树的三维模型,以供显示在所述显示器上。
5.根据权利要求1所述的系统,其中,所述目标选择窗口包括:
配置为显示所述CT图像数据的切片的CT图像窗口;
配置为显示至少一个肺的图像的定位器窗口,所述定位器窗口包括配置为标识所显示的切片相对于所述至少一个肺的位置的定位器;以及
配置为响应于用户输入,从所显示的CT图像数据的切片选择所述目标的目标选择元件。
6.根据权利要求5所述的系统,其中,所述CT图像窗口配置为响应于用户输入,显示所述CT图像数据的至少一个其他切片,所述定位器配置为相对于所述至少一个肺的所述图像移动,以标识所显示的至少一个其他切片相对于所述至少一个肺的位置。
7.根据权利要求1所述的系统,其中,所述气道查找器窗口配置为显示包括所选择的至少一个目标的CT图像,所述CT图像能绕预定轴旋转,以帮助用户识别所述解剖内腔网络的气道。
8.根据权利要求7所述的系统,其中,所述预定轴是定义为从所述目标到所述解剖内腔网络的已知气道的轴。
9.根据权利要求7所述的系统,其中,所述预定轴是定义为从所述目标到所述解剖内腔网络中的气管的一部分的轴。
10.根据权利要求7所述的系统,其中,所述预定轴是由从所述目标到中途点的路径定义的轴。
11.根据权利要求7所述的系统,其中,所述预定轴是由从第一中途点到第二中途点的路径定义的轴。
12.根据权利要求7所述的系统,其中,所述气道查找器窗口还包括配置为标识所述CT图像相对于所述CT图像的初始旋转取向绕所述预定轴的旋转量的旋转界面。
13.一种用于规划通过病人的解剖内腔网络的路径的方法,所述方法包括下列步骤:
导入通过用户输入选择的病人的CT图像数据;
从所述CT图像数据生成三维CT体积;
显示所述三维CT体积的切片;
接收标识目标的用户输入;
定义从所标识的目标到所述三维CT体积的已知气道的旋转轴;
绕所述旋转轴旋转所述三维CT体积的切片;
接收来自用户的表示所旋转了的切片的气道中的新中途点的位置的输入;
在所识别的气道中设置第一中途点;以及
生成从所述目标到所述第一中途点的第一路径。
14.根据权利要求13所述的方法,还包括下列步骤:
判断所述第一中途点是否位于所述三维CT体积的已知气道中;以及
如果所述第一中途点位于已知气道中,则自动完成从所述第一中途点到所述入口点的路径。
15.根据权利要求13所述的方法,还包括下列步骤:
沿所述第一路径定义所述旋转轴;
绕所述旋转轴旋转所述三维CT体积的切片;
接收来自用户的表示所旋转了的切片的气道中的新中途点的位置的输入;
在所识别的气道中设置第二中途点;以及
生成从所述第一中途点到所述第二中途点的第二路径。
16.根据权利要求15所述的方法,还包括下列步骤:
判断所述第二中途点是否位于所述三维CT体积的已知气道中;以及
如果所述第二中途点位于已知气道中,则自动完成从所述第二中途点到所述入口点的路径。
17.一种非暂时性计算机可读储存介质,其编码有程序,该程序在由处理器运行时使用户界面执行下列步骤:
导入通过用户输入选择的病人的CT图像数据;
从所述CT图像数据生成三维CT体积;
显示所述三维CT体积的切片;
接收标识目标的用户输入;
定义从所标识的目标到所述三维CT体积的已知气道的旋转轴;
绕所述旋转轴旋转所述三维CT体积的切片;
接收来自用户的表示所旋转了的切片的气道中的新中途点的位置的输入;
在所识别的气道中设置第一中途点;以及
生成从所述目标到所述第一中途点的第一路径。
18.根据权利要求17所述的非暂时性计算机可读储存介质,还执行下列步骤:
判断所述第一中途点是否位于所述三维CT体积的已知气道中;以及
如果所述第一中途点位于已知气道中,则自动完成从所述第一中途点到所述入口点的路径。
19.根据权利要求17所述的非暂时性计算机可读储存介质,还执行下列步骤:
沿所述第一路径定义所述旋转轴;
绕所述旋转轴旋转所述三维CT体积的切片;
接收来自用户的表示所旋转了的切片的气道中的新中途点的位置的输入;
在所识别的气道中设置第二中途点;以及
生成从所述第一中途点到所述第二中途点的第二路径。
20.根据权利要求19所述的非暂时性计算机可读储存介质,还执行下列步骤:
判断所述第二中途点是否位于所述三维CT体积的已知气道中;以及
如果所述第二中途点位于已知气道中,则自动完成从所述第二中途点到所述入口点的路径。
CN201410095041.3A 2013-03-15 2014-03-14 路径规划系统和方法 Active CN104050313B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US13/839,224 2013-03-15
US13/839,224 US9639666B2 (en) 2013-03-15 2013-03-15 Pathway planning system and method

Publications (2)

Publication Number Publication Date
CN104050313A true CN104050313A (zh) 2014-09-17
CN104050313B CN104050313B (zh) 2019-03-05

Family

ID=50280255

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410095041.3A Active CN104050313B (zh) 2013-03-15 2014-03-14 路径规划系统和方法

Country Status (6)

Country Link
US (3) US9639666B2 (zh)
EP (2) EP2779004B1 (zh)
JP (1) JP6487624B2 (zh)
CN (1) CN104050313B (zh)
AU (1) AU2014201319A1 (zh)
CA (1) CA2845918C (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109922753A (zh) * 2016-12-08 2019-06-21 直观外科手术操作公司 用于图像引导医疗程序中导航的系统和方法
CN110636813A (zh) * 2017-06-02 2019-12-31 泰尔茂株式会社 路径选择支援系统、记录了路径选择支援程序的记录介质、路径选择支援方法及诊断方法
CN110663084A (zh) * 2017-04-18 2020-01-07 直观外科手术操作公司 用于规划程序的图形用户界面
CN111374740A (zh) * 2020-04-22 2020-07-07 张家港汇致机电设备有限公司 一种房间隔穿刺术用增强现实辅助穿刺系统
CN112674881A (zh) * 2019-03-16 2021-04-20 韩志勇 面向微创手术体表投影轴调整的铰接轴调整方法
CN112700551A (zh) * 2020-12-31 2021-04-23 青岛海信医疗设备股份有限公司 虚拟胆道镜介入手术规划方法、装置、设备及存储介质
CN114067626A (zh) * 2021-09-30 2022-02-18 中日友好医院(中日友好临床医学研究所) 一种基于个性化数据的支气管镜模拟系统

Families Citing this family (39)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9925009B2 (en) * 2013-03-15 2018-03-27 Covidien Lp Pathway planning system and method
US9639666B2 (en) 2013-03-15 2017-05-02 Covidien Lp Pathway planning system and method
US9633431B2 (en) 2014-07-02 2017-04-25 Covidien Lp Fluoroscopic pose estimation
US9603668B2 (en) 2014-07-02 2017-03-28 Covidien Lp Dynamic 3D lung map view for tool navigation inside the lung
US9770216B2 (en) * 2014-07-02 2017-09-26 Covidien Lp System and method for navigating within the lung
CN106572834B (zh) * 2014-07-02 2019-12-03 柯惠有限合伙公司 对准ct
US11188285B2 (en) 2014-07-02 2021-11-30 Covidien Lp Intelligent display
US9934423B2 (en) * 2014-07-29 2018-04-03 Microsoft Technology Licensing, Llc Computerized prominent character recognition in videos
US10792100B2 (en) 2014-08-20 2020-10-06 Covidien Lp Systems and methods for spherical ablations
GB201501157D0 (en) * 2015-01-23 2015-03-11 Scopis Gmbh Instrument guidance system for sinus surgery
JP6527771B2 (ja) * 2015-07-21 2019-06-05 富士フイルム株式会社 情報分析支援装置とその作動方法および作動プログラム、並びに情報分析支援システム
WO2017015738A1 (en) * 2015-07-27 2017-02-02 Synaptive Medical (Barbados) Inc. Navigational feedback for intraoperative waypoint
US11172895B2 (en) 2015-12-07 2021-11-16 Covidien Lp Visualization, navigation, and planning with electromagnetic navigation bronchoscopy and cone beam computed tomography integrated
US10582914B2 (en) 2016-01-15 2020-03-10 Covidien Lp Navigable endobronchial tool to access tissue outside a bronchus
US10470839B2 (en) 2016-06-02 2019-11-12 Covidien Lp Assessment of suture or staple line integrity and localization of potential tissue defects along the suture or staple line
JP6239694B1 (ja) * 2016-06-15 2017-11-29 株式会社東芝 画像処理装置、画像処理方法、およびプログラム
US10478143B2 (en) 2016-08-02 2019-11-19 Covidien Lp System and method of generating and updatng a three dimensional model of a luminal network
US10881466B2 (en) 2016-08-29 2021-01-05 Covidien Lp Systems, methods, and computer-readable media of providing distance, orientation feedback and motion compensation while navigating in 3D
US10238455B2 (en) * 2016-08-31 2019-03-26 Covidien Lp Pathway planning for use with a navigation planning and procedure system
US10939963B2 (en) 2016-09-01 2021-03-09 Covidien Lp Systems and methods for providing proximity awareness to pleural boundaries, vascular structures, and other critical intra-thoracic structures during electromagnetic navigation bronchoscopy
US10799092B2 (en) 2016-09-19 2020-10-13 Covidien Lp System and method for cleansing segments of a luminal network
US10543044B2 (en) 2016-09-27 2020-01-28 Covidien Lp Systems and methods for detecting pleural invasion for surgical and interventional planning
US11222553B2 (en) 2016-09-27 2022-01-11 Covidien Lp Enhanced approaches to training for bronchoscopy and thoracic procedures
US10542953B2 (en) 2016-09-27 2020-01-28 Covidien Lp Fissural assessment and surgical and interventional planning
US20180140359A1 (en) 2016-11-21 2018-05-24 Covidien Lp Electromagnetic navigation registration using ultrasound
US10973396B2 (en) 2017-01-30 2021-04-13 Covidien Lp Enhanced ablation and visualization techniques
US11529190B2 (en) 2017-01-30 2022-12-20 Covidien Lp Enhanced ablation and visualization techniques for percutaneous surgical procedures
US11058489B2 (en) 2017-02-10 2021-07-13 Covidien Lp Devices, systems, and methods for a microwave ablation procedure
US11793579B2 (en) 2017-02-22 2023-10-24 Covidien Lp Integration of multiple data sources for localization and navigation
USD834040S1 (en) * 2017-09-05 2018-11-20 General Electric Company Display screen or portion thereof with graphical user interface
US11596477B2 (en) 2017-11-20 2023-03-07 Covidien Lp Systems and methods for generating energy delivery heat maps
US10646284B2 (en) 2017-12-05 2020-05-12 Covidien Lp Multi-rigid registration of magnetic navigation to a computed tomography volume
US12004849B2 (en) 2017-12-11 2024-06-11 Covidien Lp Systems, methods, and computer-readable media for non-rigid registration of electromagnetic navigation space to CT volume
US11471217B2 (en) 2017-12-11 2022-10-18 Covidien Lp Systems, methods, and computer-readable media for improved predictive modeling and navigation
US10984585B2 (en) 2017-12-13 2021-04-20 Covidien Lp Systems, methods, and computer-readable media for automatic computed tomography to computed tomography registration
US11224392B2 (en) 2018-02-01 2022-01-18 Covidien Lp Mapping disease spread
US11464576B2 (en) 2018-02-09 2022-10-11 Covidien Lp System and method for displaying an alignment CT
US20220020475A1 (en) * 2018-11-25 2022-01-20 Hologic, Inc. Multimodality hanging protocols
CN113456221B (zh) * 2021-06-30 2023-06-30 上海微创医疗机器人(集团)股份有限公司 可移动设备的摆位指引方法及系统、手术机器人系统

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1874717A (zh) * 2003-11-04 2006-12-06 奥林巴斯株式会社 插入支持系统
WO2009138871A2 (en) * 2008-05-15 2009-11-19 Superdimension, Ltd. Automatic pathway and waypoint generation and navigation method
US20120081362A1 (en) * 2010-09-30 2012-04-05 Siemens Corporation Dynamic graphical user interfaces for medical workstations

Family Cites Families (83)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3319518B2 (ja) 1992-06-26 2002-09-03 株式会社東芝 X線コンピュータ断層像撮影装置
JPH06337920A (ja) 1993-05-28 1994-12-06 Toshiba Medical Eng Co Ltd 画像処理装置
US5920319A (en) 1994-10-27 1999-07-06 Wake Forest University Automatic analysis in virtual endoscopy
US5782762A (en) 1994-10-27 1998-07-21 Wake Forest University Method and system for producing interactive, three-dimensional renderings of selected body organs having hollow lumens to enable simulated movement through the lumen
US5611025A (en) 1994-11-23 1997-03-11 General Electric Company Virtual internal cavity inspection system
JPH08166995A (ja) 1994-12-13 1996-06-25 Toshiba Corp 医用診断支援システム
CA2246287C (en) 1996-02-15 2006-10-24 Biosense, Inc. Medical procedures and apparatus using intrabody probes
US6047080A (en) 1996-06-19 2000-04-04 Arch Development Corporation Method and apparatus for three-dimensional reconstruction of coronary vessels from angiographic images
US5971767A (en) 1996-09-16 1999-10-26 The Research Foundation Of State University Of New York System and method for performing a three-dimensional virtual examination
US6246784B1 (en) 1997-08-19 2001-06-12 The United States Of America As Represented By The Department Of Health And Human Services Method for segmenting medical images and detecting surface anomalies in anatomical structures
JPH11155881A (ja) 1997-09-26 1999-06-15 Olympus Optical Co Ltd 手術経路検索装置
US6754374B1 (en) 1998-12-16 2004-06-22 Surgical Navigation Technologies, Inc. Method and apparatus for processing images with regions representing target objects
JP2001087228A (ja) * 1999-09-27 2001-04-03 Hitachi Medical Corp 読影支援装置
EP1095628A3 (en) * 1999-10-29 2001-05-16 Marconi Medical Systems, Inc. Planning minimally invasive procedures for in - vivo placement of objects
US6944330B2 (en) * 2000-09-07 2005-09-13 Siemens Corporate Research, Inc. Interactive computer-aided diagnosis method and system for assisting diagnosis of lung nodules in digital volumetric medical images
US7072501B2 (en) 2000-11-22 2006-07-04 R2 Technology, Inc. Graphical user interface for display of anatomical information
US6829379B1 (en) 2000-11-27 2004-12-07 Ge Medical Systems Global Technology Company, Llc Methods and apparatus to assist and facilitate vessel analysis
US7179220B2 (en) 2001-02-07 2007-02-20 Siemens Corporate Research, Inc. Method for guiding flexible instrument procedures
US6901277B2 (en) * 2001-07-17 2005-05-31 Accuimage Diagnostics Corp. Methods for generating a lung report
US7130457B2 (en) * 2001-07-17 2006-10-31 Accuimage Diagnostics Corp. Systems and graphical user interface for analyzing body images
US8721655B2 (en) * 2002-04-10 2014-05-13 Stereotaxis, Inc. Efficient closed loop feedback navigation
EP2380487B1 (en) * 2002-04-17 2021-03-31 Covidien LP Endoscope structures for navigating to a target in branched structure
JP2004105256A (ja) 2002-09-13 2004-04-08 Fuji Photo Film Co Ltd 画像表示装置
GB2395880B (en) * 2002-11-27 2005-02-02 Voxar Ltd Curved multi-planar reformatting of three-dimensional volume data sets
US7660623B2 (en) * 2003-01-30 2010-02-09 Medtronic Navigation, Inc. Six degree of freedom alignment display for medical procedures
JP2004254899A (ja) * 2003-02-26 2004-09-16 Hitachi Ltd 手術支援システム及び手術支援方法
US7822461B2 (en) * 2003-07-11 2010-10-26 Siemens Medical Solutions Usa, Inc. System and method for endoscopic path planning
JP4022192B2 (ja) * 2003-10-31 2007-12-12 オリンパス株式会社 挿入支援システム
EP2189107A3 (en) * 2003-10-31 2010-09-15 Olympus Corporation Insertion support system
EP1691666B1 (en) 2003-12-12 2012-05-30 University of Washington Catheterscope 3d guidance and interface system
US7894647B2 (en) * 2004-06-21 2011-02-22 Siemens Medical Solutions Usa, Inc. System and method for 3D contour tracking of anatomical structures
US7452357B2 (en) * 2004-10-22 2008-11-18 Ethicon Endo-Surgery, Inc. System and method for planning treatment of tissue
JP4507085B2 (ja) 2004-10-27 2010-07-21 株式会社ニコン 情報処理装置および方法、プログラム並びに記録媒体
JP4703193B2 (ja) * 2005-01-14 2011-06-15 株式会社東芝 画像処理装置
US8611983B2 (en) * 2005-01-18 2013-12-17 Philips Electronics Ltd Method and apparatus for guiding an instrument to a target in the lung
JP4776954B2 (ja) 2005-03-17 2011-09-21 オリンパス株式会社 内視鏡挿入支援装置
US8285011B2 (en) * 2005-06-02 2012-10-09 M2S Anatomical visualization and measurement system
US8077936B2 (en) * 2005-06-02 2011-12-13 Accuray Incorporated Treatment planning software and corresponding user interface
US20070092864A1 (en) * 2005-09-30 2007-04-26 The University Of Iowa Research Foundation Treatment planning methods, devices and systems
US7518619B2 (en) 2005-11-07 2009-04-14 General Electric Company Method and apparatus for integrating three-dimensional and two-dimensional monitors with medical diagnostic imaging workstations
US8303505B2 (en) * 2005-12-02 2012-11-06 Abbott Cardiovascular Systems Inc. Methods and apparatuses for image guided medical procedures
US20090052754A1 (en) * 2006-02-17 2009-02-26 Hitachi Medical Corporation Image display device and program
WO2007113703A2 (en) 2006-03-30 2007-10-11 Koninklijke Philips Electronics N. V. Targeting method, targeting device, computer readable medium and program element
WO2007129493A1 (ja) * 2006-05-02 2007-11-15 National University Corporation Nagoya University 医療画像観察支援装置
US7517320B2 (en) 2006-06-30 2009-04-14 Broncus Technologies, Inc. Airway bypass site selection and treatment planning
WO2008125910A2 (en) * 2006-11-10 2008-10-23 Superdimension, Ltd. Adaptive navigation technique for navigating a catheter through a body channel or cavity
JP2010510815A (ja) 2006-11-28 2010-04-08 スーパーディメンション, リミテッド 身体の通路または腔を通してカテーテルをナビゲートする適応的ナビゲーション技術
JP4762160B2 (ja) * 2007-01-16 2011-08-31 株式会社日立メディコ 手術支援システム
US9037215B2 (en) * 2007-01-31 2015-05-19 The Penn State Research Foundation Methods and apparatus for 3D route planning through hollow organs
JP4358262B2 (ja) * 2007-07-02 2009-11-04 ザイオソフト株式会社 医療画像処理装置およびプログラム
JP5191989B2 (ja) 2007-07-31 2013-05-08 株式会社日立メディコ 医用画像表示装置、医用画像表示方法
WO2009101504A2 (en) * 2008-02-12 2009-08-20 Superdimension, Ltd. Controlled perspective guidance method
EP2244633A4 (en) 2008-02-14 2013-10-23 Penn State Res Found MEDICAL IMAGING SYSTEM AND METHOD
JP5301197B2 (ja) * 2008-04-11 2013-09-25 富士フイルム株式会社 断面画像表示装置および方法ならびにプログラム
US8601385B2 (en) * 2008-11-25 2013-12-03 General Electric Company Zero pixel travel systems and methods of use
US8553952B2 (en) * 2008-11-29 2013-10-08 Supratik Kumar Moulik Method and system for automated interpretation of computer tomography scan data
US8493384B1 (en) * 2009-04-01 2013-07-23 Perceptive Pixel Inc. 3D manipulation using applied pressure
EP2438584A4 (en) 2009-05-12 2014-04-30 Edda Technology Inc SYSTEM, METHOD, APPARATUS AND COMPUTER PROGRAM FOR INTERACTIVE PREOPERATIVE ASSESSMENT
EP2448512B1 (en) 2009-06-29 2021-10-27 Koninklijke Philips N.V. Apparatus for tracking in a medical procedure
US9008386B2 (en) * 2009-10-14 2015-04-14 3Mensio Medical Imaging B.V. Method, a graphic user interface, a system and a computer program for optimizing workflow of a medical intervention
JP2011092405A (ja) * 2009-10-29 2011-05-12 Lexi:Kk 人工膝関節置換手術の術前計画用プログラム
US8819591B2 (en) * 2009-10-30 2014-08-26 Accuray Incorporated Treatment planning in a virtual environment
JP2011125568A (ja) 2009-12-18 2011-06-30 Canon Inc 画像処理装置、画像処理方法、プログラム及び画像処理システム
US9149210B2 (en) 2010-01-08 2015-10-06 Medtronic, Inc. Automated calibration of posture state classification for a medical device
WO2011102012A1 (ja) 2010-02-22 2011-08-25 オリンパスメディカルシステムズ株式会社 医療機器
JP4931027B2 (ja) 2010-03-29 2012-05-16 富士フイルム株式会社 医用画像診断支援装置および方法、並びにプログラム
JP6230787B2 (ja) * 2010-03-31 2017-11-15 株式会社日立製作所 検査情報表示装置及び方法
JP5908919B2 (ja) * 2010-11-02 2016-04-26 コビディエン エルピー 画像表示アプリケーションおよび配向感知可能な表示装置のための方法
CN103068294B (zh) 2011-01-24 2015-06-24 奥林巴斯医疗株式会社 医疗设备
US9757021B2 (en) * 2011-02-04 2017-09-12 The Penn State Research Foundation Global and semi-global registration for image-based bronchoscopy guidance
US20120249546A1 (en) * 2011-04-04 2012-10-04 Vida Diagnostics, Inc. Methods and systems for visualization and analysis of sublobar regions of the lung
EP2707851B1 (en) 2011-05-10 2019-10-16 Koninklijke Philips N.V. User-steered path planning for image guided endscopy
US20120290976A1 (en) * 2011-05-13 2012-11-15 Medtronic, Inc. Network distribution of anatomical models
RU2608322C2 (ru) * 2011-10-20 2017-01-17 Конинклейке Филипс Н.В. Голографические пользовательские интерфейсы для медицинских процедур
JP6189854B2 (ja) * 2011-12-03 2017-08-30 コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. 半自動経路プランニングのための自動奥行きスクローリング及びオリエンテーション調整
WO2013080123A2 (en) * 2011-12-03 2013-06-06 Koninklijke Philips Electronics N.V. Interstital lung access using nested cannulas
US8682049B2 (en) * 2012-02-14 2014-03-25 Terarecon, Inc. Cloud-based medical image processing system with access control
US9138165B2 (en) * 2012-02-22 2015-09-22 Veran Medical Technologies, Inc. Systems, methods and devices for forming respiratory-gated point cloud for four dimensional soft tissue navigation
US8548778B1 (en) * 2012-05-14 2013-10-01 Heartflow, Inc. Method and system for providing information from a patient-specific model of blood flow
US9449381B2 (en) * 2012-09-10 2016-09-20 Arizona Board Of Regents, A Body Corporate Of The State Of Arizona, Acting For And On Behalf Of Arizona State University Methods, systems, and media for generating and analyzing medical images having elongated structures
CN104994783B (zh) * 2013-02-08 2018-11-13 柯惠有限合伙公司 用于肺神经切除术的系统和方法
WO2014160341A2 (en) * 2013-03-14 2014-10-02 Vida Diagnostics, Inc. Treatment planning for lung volume reduction procedures
US9639666B2 (en) 2013-03-15 2017-05-02 Covidien Lp Pathway planning system and method

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1874717A (zh) * 2003-11-04 2006-12-06 奥林巴斯株式会社 插入支持系统
WO2009138871A2 (en) * 2008-05-15 2009-11-19 Superdimension, Ltd. Automatic pathway and waypoint generation and navigation method
US20120281903A1 (en) * 2008-05-15 2012-11-08 Superdimension, Ltd. Automatic pathway and waypoint generation and navigation method
US20120081362A1 (en) * 2010-09-30 2012-04-05 Siemens Corporation Dynamic graphical user interfaces for medical workstations

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109922753A (zh) * 2016-12-08 2019-06-21 直观外科手术操作公司 用于图像引导医疗程序中导航的系统和方法
US11547490B2 (en) 2016-12-08 2023-01-10 Intuitive Surgical Operations, Inc. Systems and methods for navigation in image-guided medical procedures
CN110663084A (zh) * 2017-04-18 2020-01-07 直观外科手术操作公司 用于规划程序的图形用户界面
CN110636813A (zh) * 2017-06-02 2019-12-31 泰尔茂株式会社 路径选择支援系统、记录了路径选择支援程序的记录介质、路径选择支援方法及诊断方法
US11596352B2 (en) 2017-06-02 2023-03-07 Terumo Kabushiki Kaisha Route selection assistance system, recording medium on which route selection assistance program is recorded, route selection assistance method, and diagnosis method
CN110636813B (zh) * 2017-06-02 2023-04-25 泰尔茂株式会社 路径选择支援系统、记录了路径选择支援程序的记录介质、路径选择支援方法及诊断方法
CN112674881A (zh) * 2019-03-16 2021-04-20 韩志勇 面向微创手术体表投影轴调整的铰接轴调整方法
CN111374740A (zh) * 2020-04-22 2020-07-07 张家港汇致机电设备有限公司 一种房间隔穿刺术用增强现实辅助穿刺系统
CN111374740B (zh) * 2020-04-22 2021-10-08 重庆市江津区中心医院 一种房间隔穿刺术用增强现实辅助穿刺系统
CN112700551A (zh) * 2020-12-31 2021-04-23 青岛海信医疗设备股份有限公司 虚拟胆道镜介入手术规划方法、装置、设备及存储介质
CN114067626A (zh) * 2021-09-30 2022-02-18 中日友好医院(中日友好临床医学研究所) 一种基于个性化数据的支气管镜模拟系统
CN114067626B (zh) * 2021-09-30 2023-12-15 浙江优亿医疗器械股份有限公司 一种基于个性化数据的支气管镜模拟系统

Also Published As

Publication number Publication date
EP2779004B1 (en) 2018-10-31
US20170161456A1 (en) 2017-06-08
CA2845918C (en) 2021-07-06
US20220059237A1 (en) 2022-02-24
EP3462347B1 (en) 2024-06-26
US9639666B2 (en) 2017-05-02
EP3462347A1 (en) 2019-04-03
JP2014180546A (ja) 2014-09-29
AU2014201319A1 (en) 2014-10-02
CA2845918A1 (en) 2014-09-15
JP6487624B2 (ja) 2019-03-20
US11200983B2 (en) 2021-12-14
US11804308B2 (en) 2023-10-31
EP2779004A1 (en) 2014-09-17
US20140282216A1 (en) 2014-09-18
CN104050313B (zh) 2019-03-05

Similar Documents

Publication Publication Date Title
CN104050313A (zh) 路径规划系统和方法
CN104050348A (zh) 路径规划系统和方法
CN104050347A (zh) 路径规划系统和方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant