CN103619407A - 用于在大脑的实时图像上重叠nbs功能数据的方法和系统 - Google Patents

用于在大脑的实时图像上重叠nbs功能数据的方法和系统 Download PDF

Info

Publication number
CN103619407A
CN103619407A CN201280027227.4A CN201280027227A CN103619407A CN 103619407 A CN103619407 A CN 103619407A CN 201280027227 A CN201280027227 A CN 201280027227A CN 103619407 A CN103619407 A CN 103619407A
Authority
CN
China
Prior art keywords
brain
real time
time imaging
anatomic landmark
nbs
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201280027227.4A
Other languages
English (en)
Other versions
CN103619407B (zh
Inventor
亨利·汉努拉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nackers Tim Public Co. Ltd.
Original Assignee
Nexstim Oyj
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nexstim Oyj filed Critical Nexstim Oyj
Publication of CN103619407A publication Critical patent/CN103619407A/zh
Application granted granted Critical
Publication of CN103619407B publication Critical patent/CN103619407B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0033Features or image-related aspects of imaging apparatus classified in A61B5/00, e.g. for MRI, optical tomography or impedance tomography apparatus; arrangements of imaging apparatus in a room
    • A61B5/004Features or image-related aspects of imaging apparatus classified in A61B5/00, e.g. for MRI, optical tomography or impedance tomography apparatus; arrangements of imaging apparatus in a room adapted for image acquisition of a particular organ or body part
    • A61B5/0042Features or image-related aspects of imaging apparatus classified in A61B5/00, e.g. for MRI, optical tomography or impedance tomography apparatus; arrangements of imaging apparatus in a room adapted for image acquisition of a particular organ or body part for the brain
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61NELECTROTHERAPY; MAGNETOTHERAPY; RADIATION THERAPY; ULTRASOUND THERAPY
    • A61N2/00Magnetotherapy
    • A61N2/02Magnetotherapy using magnetic fields produced by coils, including single turn loops or electromagnets
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/05Detecting, measuring or recording for diagnosis by means of electric currents or magnetic fields; Measuring using microwaves or radio waves 
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/24Detecting, measuring or recording bioelectric or biomagnetic signals of the body or parts thereof
    • A61B5/316Modalities, i.e. specific diagnostic methods
    • A61B5/389Electromyography [EMG]
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/74Details of notification to user or communication with user or patient ; user input means
    • A61B5/742Details of notification to user or communication with user or patient ; user input means using visual displays
    • A61B5/7425Displaying combinations of multiple images regardless of image source, e.g. displaying a reference anatomical image with a live image
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36Image-producing devices or illumination devices not otherwise provided for
    • A61B90/37Surgical systems with images on a monitor during operation
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61NELECTROTHERAPY; MAGNETOTHERAPY; RADIATION THERAPY; ULTRASOUND THERAPY
    • A61N2/00Magnetotherapy
    • A61N2/004Magnetotherapy specially adapted for a specific therapy
    • A61N2/006Magnetotherapy specially adapted for a specific therapy for magnetic stimulation of nerve tissue
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • A61B2034/2046Tracking techniques
    • A61B2034/2065Tracking using image or pattern recognition
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B90/00Instruments, implements or accessories specially adapted for surgery or diagnosis and not covered by any of the groups A61B1/00 - A61B50/00, e.g. for luxation treatment or for protecting wound edges
    • A61B90/36Image-producing devices or illumination devices not otherwise provided for
    • A61B2090/364Correlation of different images or relation of image positions in respect to the body
    • A61B2090/365Correlation of different images or relation of image positions in respect to the body augmented reality, i.e. correlating a live optical image with another image
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/25User interfaces for surgical systems
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/05Detecting, measuring or recording for diagnosis by means of electric currents or magnetic fields; Measuring using microwaves or radio waves 
    • A61B5/055Detecting, measuring or recording for diagnosis by means of electric currents or magnetic fields; Measuring using microwaves or radio waves  involving electronic [EMR] or nuclear [NMR] magnetic resonance, e.g. magnetic resonance imaging

Abstract

本发明公开了一种用于在大脑的实时图像上重叠导航脑刺激(NBS)功能数据的方法。所述方法包括步骤:获得大脑的实时图像;获得大脑的功能映射,包括大脑的解剖模型和与大脑有关的NBS功能数据;从大脑的实时图像中识别大脑的至少一个解剖标志;识别大脑的解剖模型上的所识别出的解剖标志中的至少一个;修改功能映射,使得模型中的所识别的至少一个解剖标志在尺寸和方位上对应于大脑的实时图像中的相应的至少一个解剖标志;以及根据相应的对准的解剖标志将至少所述NBS功能数据数字式重叠在所述大脑的实时图像上。

Description

用于在大脑的实时图像上重叠NBS功能数据的方法和系统
技术领域
本发明涉及用于在大脑的实时图像上重叠导航脑刺激(NBS)功能数据的方法和系统。尤其是,在手术前构建包括大脑的NBS功能数据的功能映射和大脑的解剖模型,从而在手术期间可将解剖模型上的解剖标志与大脑的实时图像上的对应解剖标志对准。
背景技术
在现代脑外科手术中,外科医生通常使用光学显微镜和/或专用成像装置来察看大脑。然而,长期以来都非常需要以高精度和及时的方式将局部脑功能显示给外科医生。目前,精确的方法需要在操作开始时花大量的时间,这给病人增加了风险。反过来,在操作期间需要较少时间来设定的方法不够准确,也会带来相应的风险。
当在大脑中进行手术时,重要的是外科医生应知道手术部位中的哪些大脑部分是脑功能区,去除它们将导致丧失运动功能、感觉功能、语言功能和视觉,等等。目前,用于确定这些局部脑功能的通用方法是用传递短脉冲电流的探针来物理刺激所打开的大脑形式为网格的多个位置,然后确定病人是否有相应的视觉反应或可测量的反应。当引发反应时,则大脑中的该点被标记为功能点。如果没有引发反应,则该点被认为是安全的,可以穿过。
最近,在手术之前,病人可经历用于功能映射的NBS。映射的程度可基于即将进行的手术的详情而定。例如,在从病人的大脑中切除肿瘤情况下,NBS功能映射可以被限制为映射肿瘤的紧邻区域内的大脑功能。在一种探索性的或更具侵入性的手术的情况下,该功能映射可以更全面。
NBS功能映射是通过使用导航经颅磁刺激(TMS)来准确地映射病人的大脑功能的非侵入式方法。通过对病人大脑上或大脑内的位置施加电磁刺激,并测量和/或确定病人的相应反应,就可以在非无菌的环境中提供病人大脑的精确的二维或三维映射。二维和三维NBS功能映射的更详细的描述例如可见于题为“Transcranial magnetic stimulation induction coil device with attachment portion forreceiving tracking device”的US2008/058582、题为“Stereotactic frame and methodfor supporting a stereotactic frame”的US2005/075560、题为“Method forthree-dimensional modeling of the skull and internal structures thereof”的美国专利US7720519、题为“A method for visualizing electric fields on the human cortex forthe purpose of navigated brain stimulation”的US11/853,232、题为“Improvedaccuracy of navigated brain stimulation by online or offline corrections toco-registration”的US11/853,256、题为“Transcranial magnetic stimulation inductioncoil device with attachment portion for receiving tracking device”的US2008/058582、题为“Transcranial magnetic stimulation induction coil device and method ofmanufacture”的US2008/058581、题为“Method and apparatus for dose computationof magnetic stimulation”的US6,849,040以及题为“Electrode structure for measuringelectrical responses from the human body”的US7,440,789,所有这些专利文献通过引用结合于本文中。
如在至少一些上述文献中更详细描述的,在NBS功能映射开始时或之前,获得或者选择病人大脑的模型以用于映射。虽然有很多选择可供使用,然而如本文所述,根据本发明的一个实施例,将病人大脑的MRI或CT用作针对映射的解剖模型。一旦MRI数据已被汇编,那么通过知道病人头部的确切位置和方位以及每个TMS脉冲,就可以将病人大脑的功能准确地映射到解剖模型。
发明内容
根据本发明的第一方面,提供了一种用于在大脑的实时图像上重叠导航脑刺激(NBS)功能数据的方法。
根据本发明的一些实施例,这里所述的方法包括一些或全部的以下步骤:获得大脑的实时图像;获得大脑的功能映射,包括大脑的解剖模型和与大脑有关的NBS功能数据;从大脑的实时图像中识别大脑的至少一个解剖标志;识别大脑的解剖模型上的所识别出的解剖标志中的至少一个;修改功能映射,使得模型中的所识别的至少一个解剖标志在尺寸和方位上对应于大脑的实时图像中的相应的至少一个解剖标志;并且根据相应的对准的解剖标志将至少所述NBS功能数据以数字方式重叠在所述大脑的实时图像上。
此外,根据一些实施例,该方法还包括以下步骤:连续地跟踪所述识别的解剖标志;以及连续地更新数字式重叠的NBS功能数据,以确保功能映射的所识别的解剖标志保持叠加在实时图像的相应解剖标志上。
另外,根据一些实施例,所述方法还包括以下步骤:从实时图像中确定至少两个解剖标志之间的距离变化;以及基于所述确定的距离变化来确定针对NBS功能数据的位置的可靠性指示。
有利的是,所述方法包括步骤:以图形方式显示所述可靠性指示。
作为备选或附加,该方法包括步骤:从实时图像中提取冻结帧;从所述冻结帧中识别所述解剖标志;在所述冻结帧上数字式重叠所述修改过的功能映射;确定所述冻结帧和所述实时图像之间的任何变化;以及基于所述确定的变化来更新至少NBS功能数据和实时图像的重叠。
根据一些实施例,所述方法包括步骤:修改功能映射的至少一部分的透明度。在一个示例版本中,仅调整功能映射的解剖模型部分的透明度。
修改功能映射的步骤可包括至少一个下述步骤:缩放、平移、倾斜、调整、定向和运动。
根据一些实施例,该方法进一步包括:在屏幕上显示所述功能映射和大脑的实时图像;以及提供图形用户界面(GUI)以使操作者能够修改功能映射,以便对齐模型的所识别的至少一个解剖标志和大脑的实时图像中的至少一个解剖标志。
根据本发明的第二方面,提供了一种存储在计算机可读介质上的用于使处理器来执行一些或全部下列步骤的计算机程序产品:从大脑的实时图像中识别大脑的至少一个解剖标志;在大脑的功能映射上识别至少一个所识别的解剖标志,所述功能映射包括大脑的解剖模型和与大脑有关的NBS功能数据;修改功能映射,使得该模型的所识别的至少一个解剖标志在大小和方位上对应于大脑实时图像中的那些标志;以及根据对应的对准的解剖标志将至少所述NBS功能数据以数字方式重叠在所述大脑的实时图像上。
根据本发明的第三方面,提供了配置为执行至少上述方法步骤中的至少一些的计算设备的处理器。
附图说明
下面将参照附图并仅通过示例来描述本发明:
图1示出了使用中的本发明的高级示意图;
图2显示了概括根据本发明的一个实施例的将NBS功能数据重叠在大脑的实时图像上的方法的流程图;
图3显示了产生用于病人的功能映射的一个典型的外科手术前的映射过程的示意图,该功能映射包括大脑的解剖模型和与大脑有关的NBS功能数据;
图4示出了在DCS过程之后用以确认已经记录的功能映射的图像;
图5示出了用于对准功能映射和相应的实时图像的自动过程的示意图;
图6显示了来自NBS过程的3维输出,其带有分割工具以允许操作者创建所需的部分,从而能根据实时显微图像来对NBS进行修改和对准;和
图7至图14显示了概述本发明在使用中的各种方面的各种图片。
具体实施方式
从广义上讲,具体说参照图1,在一个基本实施例中,本发明涉及通常使用显微镜14来在手术过程中获得大脑12的实时光学视图10。本发明还涉及使用将病人18的功能映射16与大脑12的实时视图10对准,该功能映射16包括大脑12的解剖模型20和针对病人18的导航脑刺激(NBS)功能数据。此对准步骤由虚线22示意性地表示。病人的NBS功能数据通常在手术前已经获得并汇编,但是这一方面将在说明书中更详细地进一步说明。
具体而言,这两个视图10、16的对准是通过将功能映射16中的解剖标志如静脉24、脑沟和脑回(由一个附图标记26表示)重叠到来自实时显微图像10的相应的解剖标志24上来实现的。一旦功能映射16与实时视图10对齐,则这两个视图可以有效地彼此粘结,从而限定出对齐的视图28。
现在参考图2,用于将NBS功能数据重叠在大脑的实时图像上的方法由附图标记40表示。该方法40包括获得大脑的实时图像(如方框42所示),例如图1中示出的实时图像10。
该方法40还包括获得大脑的包括大脑解剖模型和与大脑相关联的NBS功能数据的功能映射,如方框44所示。如上所述,功能映射通常在手术前使用MRI或CT成像技术构建,且功能映射存储在数据库中以供手术过程中的后续使用。图7示出了可以构建功能映射的一种方法。此过程120包括为病人加载MRI图像(箭头122),以及使MRI图像与病人的头部对准(箭头124)。靶向刺激实现了大脑的三维映射(箭头126),其中关于在哪个区域引出反应(且因此应当避开这些区域)(箭头128)的结果被输出并存储在数据库中(箭头130)。
利用MRI的一个优点是,解剖标志(静脉、脑沟、脑回等)可在图像中容易地看到,这在开颅手术中当解剖标志可容易地通过肉眼看到时特别有用。因此,在NBS映射会话过程中所标记的功能位置不仅作为三维位置来标记,而且也作为相对于解剖标志的位置来标记。例如,病人的运动功能可基于病人头部的方位而在一定的三维位置处被标记。作为附加或另选,相同的运动功能可以例如在与一特定的静脉和脑回有一定距离的地方被标记。类似地,当已经知道特定的静脉和脑回之间的距离时,那么运动功能例如可以标记为从所述静脉到所述脑回的距离的百分比或分数。作为一个例子,当外科医生切除癌组织时,附近的脑组织可能会因脑移现象而经历剧烈的压缩或拉伸。然而,通常在这种情况下,解剖标志如静脉会保持它们相对于功能皮层的位置。
下面将参照图3来更详细地介绍此术前映射。
如图3所示,病人50经历了NBS引导的TMS的术前映射过程,结果用肌电图仪(EMG)测量。在这种情况下,病人50具有接近大脑的Broca区54(其在人的语言功能中起作用)的肿瘤52。也显示了M1(远转移)区56。在此特定例子中,术前映射过程的一部分是语言映射,在此期间,例如给病人50一个任务,例如叫出出现在屏幕58上的对象的名称,监测并比较刺激前、刺激期间和刺激后的病人的反应。
在EMG之后,术前映射过程包括术前规划阶段,如箭头60示意性地表示。在这个阶段,构建通常是三维对象的NBS映射以及也通常是三维对象的肿瘤映射。此手术前规划阶段还包括确定手术的轨迹。
可在手术开始时通过执行DCS(直接皮层刺激)过程以确认上述获得的已经记录的功能映射来对术前映射过程进行再次检查。这可通过外科医生64用在病人大脑上的DCS刺激探针62与显微镜66一起来实现。如上所述,提供屏幕68以使病人50叫出所显示的对象,从而促进功能映射过程的准确度的确认/验证。在屏幕72上显示包括来自显微镜66的实时视图和所重叠的功能映射的视图70。使用包括部件76和78的跟踪系统74来确保功能映射的准确度,并使得能够构建三维功能映射。控制器80接收来自各种部件的输入和/或控制各种部件,诸如EMG输入82、DCS刺激探针62、显微镜66和屏幕68、70上的显示。
图4示出了在DCS过程之后以确认已经记录的功能映射的图像90、92。特别是,图像90示出了颜色不同的其中DCS产生反应的区域94。可提供额外的色彩工具,如图像92中所示,其中在注入标记荧光后可在荧光中看到肿瘤96。
回到图2,该方法40还包括从大脑的实时图像中识别大脑的至少一个解剖标志,如方框46所示,然后再识别大脑的解剖模型上的至少一个所识别的解剖标志,如方框48所示。这些步骤可以手动地进行(即通过外科医生或助理或技师),或通过使用例如光学识别软件来识别图像中的主要特征而自动地进行。可识别(或可用软件编程识别)的典型标志包括静脉、脑沟和脑回。
该方法40还包括修改功能映射,使得模型的所识别的至少一个解剖标志就尺寸和方位方面对应(即对齐)于大脑实时图像中的对应的至少一个解剖标志,如方框50所示。典型地是,修改功能映射的步骤包括下列步骤中的至少一个步骤:缩放映射、平移、倾斜、调整、定向和运动功能映射。
在一个实施例中,修改步骤50包括以下步骤:在屏幕(通常是外科医生正在观察的显微镜的屏幕)上显示功能映射和大脑的实时图像;以及提供GUI,以使操作者(外科医生或助理)能够修改功能映射,以便对准所识别的标志。
或者,例如通过使用光学识别软件,可以完全自动地实现两个图像的定向和对准,而无需任何人工交互的参与。在这样一个实施例中,光学识别软件例如可以分析两个图像,并确定相应的解剖标志。一旦已经识别解剖标志,定位软件便可修改功能映射,使其可与显微实时图像正确地对齐。在这种实施例中,助理或技术员可在边上确认和/或审核最终的合成图像的准确性。
用于自动对准的另一选择是例如用扫描激光98来扫描颅骨和颅骨切开部位,如图5所示。然后可进行三维功能映射、二维功能映射和/或分割的大脑图像之间的形状比较和/或表面匹配,以对功能映射进行准确的修改并将其与显微镜图像对准。在不脱离本发明的范围的情况下,本领域的普通技术人员可以认识到用于部分或完全自动化的对准的其他类似的方法。例如,图6显示了NBS过程之后的三维输出100,其带有分割工具允许操作者创建所需的部分,以便能根据实时显微图像来对NBS视图102进行修改和对准。
按照图2,通过根据对应的对准的解剖标志将至少NBS功能数据(以及在某些情况下是解剖模型和NBS功能数据两者)数字式重叠在大脑的实时图像上,来结束该方法40,如方框52所示。
一旦解剖标志对齐,计算机软件便可有效地将两个图形锁定在一起。因此,从广义上讲,如果显微镜移动,则功能映射会自动地移动(或被促发移动)相应的量。同样,如果显微镜放大或缩小,则功能映射自动地缩放(或被促发缩放)相应的量。相反地,如果功能映射以任何方式进行调整(即缩放、倾斜、旋转等),则该实时图像也相应地调整,以保持图像的对准(这可能需要对病人头部和/或显微镜的方位进行调整)。
因此,本发明构思了一些类型的跟踪装置,下面将更详细地对其进行说明。这种跟踪特性是重要的,因为手术期间病人的大脑很容易出现变形,如膨胀。此外,与心脏类似,病人的大脑在不断地扩张和收缩。因而,所希望的或甚至必要的是,响应于实际解剖标志之间和/或周围的大脑物质的实际比例的变化而周期性地或连续地改变所识别的解剖标志之间和/或周围的功能映射的比例。在这样一个实施例中,外科医生或技术人员可基于大脑的移动/变形程度和/或个人偏好来选择性地打开和关闭此特征。
承接上文,虽然未示出,然而在一个实施例中本发明的方法包括步骤:连续地跟踪所识别的解剖标志(按照图2中的方法步骤46),这可以通过使用其中对显微镜相对于病人头部的相对位置进行监视/跟踪的跟踪装置(其可类似于图3中的跟踪装置74)来完成。此后,这种跟踪方法不断地更新数字式重叠的功能NBS数据,以确保功能映射的所识别的解剖标志与实时图像的相应解剖标志保持叠加/对齐。因此,只要显微镜配备了位置跟踪系统或表面扫描型传感器,那么当显微镜在手术期间移动时,“所粘结的”MRI功能映射便可相应地移动。
本发明的方法可包括步骤:确定实时图像中至少两个解剖标志之间的距离的变化,并基于所确定的距离变化来确定针对NBS功能数据的位置的可靠性指示。在一个实施例中,可靠性指示可通过颜色或字母数字值以图形方式显示。这样的图形表示可以量化脑移,并在任何给定时间点提供术前映射的可靠指示和/或索引。这样的图形表示可以根据用户的决定打开和关闭。此外,该软件可设置报警功能,以警告操作者已经发生了或预期会发生足够大的距离变化,使得外科医生可意识到相应的功能区域的位置可能不准确。
作为附加或另选,跟踪方法可以包括步骤:从实时图像中提取冻结帧;从所述冻结帧中识别解剖标志;在冻结帧上数字式重叠所述修改过的功能映射;确定冻结帧和实时图像之间的任何变化;以及基于所确定的变化来更新至少NBS功能数据和实时图像的重叠。
本发明还可以包括:修改功能映射的至少一部分的透明度。在一个版本中,仅调整功能映射的解剖模型部分的透明度。因此,该功能映射和解剖模型上的功能数据的位置本身可以是单独的和/或是可分离的。例如,解剖模型可以仅仅用作对准的引导,在该点仅将功能数据叠加在实时显微图像上。此外,功能映射的解剖模型部分的透明度可独立于功能映射数据来调整。因此,一旦图形对齐,则可调整功能映射的解剖模型部分,使得它在手术期间在实时显微成像上几乎不可见或只是名义上可见。另外,可以降低解剖模型部分的透明度(即,使其更不透明),以便检查解剖标志的对齐。类似地,功能数据的透明度同样可与功能映射的解剖模型部分一起或独立于其进行调整。
如前面所指出的那样,至少一个上述步骤(或其组合)通常借助于计算机软件而自动进行。
根据本发明的一个实施例,显微成像可发送到手术室之外的远程位置。在这个位置,助理、技术人员和/或自动化软件可以执行步骤:将功能映射对准实时显微图像,然后把组合图形返回到显微镜以显示给外科医生。这种布置是特别有利的,因为它降低了在手术室里所需的设备和人员的数量。虽然本实施例在此描述的是通过利用助理或技师来执行初始对准,然而很明显,助手或技师的实际交互作用可从完全地到不存在地任意程度而变化。
使用解剖标志来将功能映射与实时显微图像对齐可以减少将NBS功能数据输入到神经导航器中的需要。通过从该过程中省去神经导航器,就可以从远程的非无菌位置迅速地对齐NBS数据,并补偿脑移。本发明还提供了一种更精确和有效的手术规划工具。由于NBS映射无需开颅手术即可生成功能映射,因此外科医生可以在规划期间查看功能映射,以便映射最佳的路线、甚至开颅的位置,从而避开功能区域。然后,当外科医生进入手术室时,他/她能够看到叠加在实时显微图像上的完全相同的熟悉的功能映射。在本发明的一个实施例中,外科医生能够在功能映射上标注、甚至绘制三维路线,使得标注和路线显示在叠加的组合图形中。关于上述透明度,外科医生的标记可以所需的透明度诸如与解剖模型和描述功能数据选择性地显示。
虽然上述实施例已经就显微镜叠加进行了描述,然而相同的方法和系统可在有任何成像装置和显示器时使用。例如,通过重叠的信息,照相机可位于开颅位置周围的一个固定或可动的位置,或者一个或多个计算机显示器或电视屏幕可位于手术室内或外的一个或多个位置处。
此外,根据本发明的一些实施例,所述功能映射是三维映射。因此,如果外科医生使用三维装置(例如三维显示护目镜或三维显示屏幕),则功能映射可与三维空间中的进行互动。作为一个例子,外科医生在手术或规划期间将能够穿过大脑的层,看看在上述表面之下有什么解剖结构和功能。作为附加或另选,在特定的深度处或者甚至在表面上,规划或手术软件将能够不仅指示当前位置处的功能点,而且还能指示位于离当前位置为一定深度处的任何功能点,如低于当前深度但容易受到当前深度处的切开的干扰的功能点。
图8至图14显示了概述本发明在使用中的各种方面的各种图片。例如,图8和图10分别显示出两个临床流140、160。流140、160包括了MRI步骤142、162,NBS步骤144、164,NBS分析146、166,输出步骤148、168,NBS数据到MRI功能映射中的融合150、170,以及数据投影152(如图8所示)或显示在工作站172上(如图10)。
图9显示了在显微镜屏幕182上显示的NBS结果180的一个例子。特别是显示了相对于靠近肿瘤的M1的NBS定位的肿瘤边界。
图11示出了叠加在大脑的实时图像上的在屏幕上显示的NBS功能数据。特别是,该图示出了通过缩放、平移、倾斜、调节、定向和/或移动功能映射来修改相关联的功能映射的能力。
图12示出了重叠有NBS数据的DCS数据,如上所述,这将被用于确认NBS数据。
图13示出了通过如上所述地使用分块化视图来实现NBS功能数据与相应的实时图形的自动对准。在这种特定情况下,术前NBS结果与术中通过单极皮层内刺激的结果相符。该肿瘤被成功地切除,由肿瘤附近的区域来控制的运动功能在手术后正常工作。
最后,图14示出了可产生令人惊讶的结果以改变手术策略的术前NBS。在术中进行直接皮层刺激(DCS)。DCS结果与术前NBS相当,手术的临床成功超出预期。这种情况说明,NBS可用于瘫痪病人的术前映射。甚至更重要的是,这一病例报告说明了为什么根据NBS的肿瘤切除手术有时会比根据fMRI规划的手术产生明显更好的临床结果。
当解剖标志可通过肉眼容易地看到时,利用功能映射中的解剖标志的优点在开颅手术中体现出来。至于大脑的最外表面而言,外科医生可以容易地辨认出解剖标志,并将其与MRI图像对齐而不管病人头部的方位如何。
因此,本发明提供了一种可靠的大脑映射的解决方案,其避免了意外运动的不足,从而提高了病人的安全。它还为外科医生提供了准确的数据,从而导致能成功地去除初级运动皮质附近的病理组织。本发明还减少了手术期间所花费的时间,从而进一步提高病人的安全性。
当将NBS与DCS相比时,NBS是非侵入式的,而DCS具非常侵入性。NBS在术前进行(从而需要神经技师和/或非手术室人员),而DCS要求病人保持清醒。对于经训练的人员,NBS可以花少于60分钟的时间(大多数情况下为45-60分钟,在更具挑战性的情况下可能会占用到90分钟),而DCS可能需要长达2时的手术室内时间。NBS通常具有100%的成功率,而DCS的成功率通常在80-85%。最后,NBS没有已知的不利影响,而DCS会发生感染和/或出血。

Claims (21)

1.一种用于在大脑的实时图像上重叠导航脑刺激(NBS)功能数据的方法,所述方法包括以下步骤:
获得大脑的实时图像;
获得大脑的功能映射,包括大脑的解剖模型和与大脑有关的NBS功能数据;
从大脑的实时图像中识别大脑的至少一个解剖标志;
识别大脑的解剖模型上的所识别出的解剖标志中的至少一个;
修改功能映射,使得模型中的所识别的至少一个解剖标志在尺寸和方位上对应于大脑的实时图像中的相应的至少一个解剖标志;以及
根据相应的对准的解剖标志将至少所述NBS功能数据以数字方式重叠在所述大脑的实时图像上。
2.根据权利要求1所述的方法,其特征在于,还包括以下步骤:
连续地跟踪所述识别的解剖标志;以及
连续地更新数字式重叠的NBS功能数据,以确保功能映射的所识别的解剖标志保持叠加在实时图像的相应解剖标志上。
3.根据权利要求1或2所述的方法,其特征在于,还包括以下步骤:
从实时图像中确定至少两个解剖标志之间的距离变化;以及
基于所述确定的距离变化来确定针对NBS功能数据的位置的可靠性指示。
4.根据权利要求3所述的方法,其特征在于,还包括步骤:图形式地显示所述可靠性指示。
5.根据上述权利要求中任一项所述的方法,其特征在于,还包括以下步骤:
从实时图像中提取冻结帧;
从所述冻结帧中识别所述解剖标志;
在所述冻结帧上数字式重叠所述修改过的功能映射;
确定所述冻结帧和所述实时图像之间的任何变化;以及
基于所述确定的变化来更新至少NBS功能数据和实时图像的重叠。
6.根据上述权利要求中任一项所述的方法,其特征在于,还包括步骤:修改功能映射的至少一部分的透明度。
7.根据权利要求6所述的方法,其特征在于,仅调整所述功能映射的解剖模型部分的透明度。
8.根据上述权利要求中任一项所述的方法,其特征在于,所述修改功能映射包括至少一个下述步骤:缩放、平移、倾斜、调整、定向和运动。
9.根据上述权利要求中任一项所述的方法,其特征在于,还包括以下步骤:
在屏幕上显示所述功能映射和大脑的实时图像;以及
提供图形用户界面以使操作者能够修改功能映射,以便对齐所述模型的所识别出的至少一个解剖标志和大脑的实时图像中的至少一个解剖标志。
10.根据上述权利要求中任一项所述的方法,其特征在于,自动地完成所述步骤中的至少一个步骤。
11.根据权利要求10所述的方法,其特征在于,自动地完成所述步骤的组合。
12.根据上述权利要求中任一项所述的方法,其特征在于,所述步骤中的至少一个步骤是借助于计算机软件而完成的。
13.根据上述权利要求中所述的方法,其特征在于,在所述步骤中的任一个或多个步骤中使用光学识别软件。
14.根据上述权利要求中任一项所述的方法,其特征在于,验证所述步骤中的至少一个步骤的精确度。
15.根据权利要求14所述的方法,其特征在于,所述验证通过使用者完成或使用软件自动地完成。
16.一种存储在计算机可读介质上的计算机程序产品,其用于使处理器执行下列步骤:
从大脑的实时图像中识别大脑的至少一个解剖标志;
在大脑的功能映射上识别至少一个所识别的解剖标志,所述功能映射包括大脑的解剖模型和与大脑有关的NBS功能数据;
修改功能映射,使得该模型的所识别的至少一个解剖标志在大小和方位上对应于大脑实时图像中的那些标志;以及
根据对应的对准的解剖标志将至少所述NBS功能数据以数字方式重叠在所述大脑的实时图像上。
17.根据权利要求16所述的计算机程序产品,其特征在于,所述计算机可读介质是暂时性介质。
18.根据权利要求16所述的计算机程序产品,其特征在于,所述计算机可读介质是非暂时性介质。
19.根据权利要求16到18中任一项所述的计算机程序产品,其特征在于,还包括使处理器执行根据权利要求1到15中任一项所述的方法中的步骤。
20.一种计算装置的处理器,其配置成用于执行根据权利要求1到15中任一项所述的方法中的至少一些步骤。
21.一种计算装置的处理器,其配置成用于自动地执行根据权利要求1到15中任一项所述的方法中的步骤。
CN201280027227.4A 2011-06-03 2012-06-04 用于在大脑的实时图像上重叠nbs功能数据的方法和系统 Active CN103619407B (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201161492821P 2011-06-03 2011-06-03
US61/492,821 2011-06-03
US201161564336P 2011-11-29 2011-11-29
US61/564,336 2011-11-29
PCT/FI2012/050551 WO2012164173A2 (en) 2011-06-03 2012-06-04 Method of and system for overlaying nbs functional data on a live image of a brain

Publications (2)

Publication Number Publication Date
CN103619407A true CN103619407A (zh) 2014-03-05
CN103619407B CN103619407B (zh) 2016-05-11

Family

ID=46548506

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201280027227.4A Active CN103619407B (zh) 2011-06-03 2012-06-04 用于在大脑的实时图像上重叠nbs功能数据的方法和系统

Country Status (8)

Country Link
US (1) US9082215B2 (zh)
EP (1) EP2714193B1 (zh)
JP (1) JP2014522274A (zh)
KR (1) KR101531620B1 (zh)
CN (1) CN103619407B (zh)
ES (1) ES2776526T3 (zh)
PL (1) PL2714193T3 (zh)
WO (1) WO2012164173A2 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109300168A (zh) * 2018-07-30 2019-02-01 福建中医药大学附属人民医院(福建省人民医院) 单次蛛网膜下腔阻滞术中信息收集处理系统及其处理方法
CN112381706A (zh) * 2019-11-05 2021-02-19 北京智拓视界科技有限责任公司 对大脑的三维数据进行平面化处理的方法,设备和计算机可读存储介质

Families Citing this family (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2015140413A1 (en) * 2014-03-21 2015-09-24 Nexstim Oy Navigated transcranial magnetic stimulation planning using a structural effectiveness index
EP3459442B1 (en) * 2014-04-03 2019-12-11 Brainlab AG Method and system for supporting a medical brain mapping procedure
CN105992996B (zh) * 2014-04-04 2019-11-26 外科手术室公司 外科手术环境中的动态和交互式导航
DE102014010350A1 (de) * 2014-07-10 2016-01-14 Carl Zeiss Meditec Ag Augenchirurgiesystem
US10013808B2 (en) * 2015-02-03 2018-07-03 Globus Medical, Inc. Surgeon head-mounted display apparatuses
JP6392190B2 (ja) * 2015-08-31 2018-09-19 富士フイルム株式会社 画像位置合せ装置、画像位置合せ装置の作動方法およびプログラム
US9933470B2 (en) * 2015-08-31 2018-04-03 The Boeing Company Energy spectrum visualization system
JP6461024B2 (ja) * 2016-02-05 2019-01-30 富士フイルム株式会社 画像位置合せ装置、方法およびプログラム
BR112019025107A2 (pt) * 2017-06-19 2020-06-23 Mohamed R. Mahfouz Navegação cirúrgica do quadril usando fluoroscopia e sensores de rastreamento
US20210267547A1 (en) * 2017-08-25 2021-09-02 NEUROPHET Inc. Patch guide method and program
KR101950815B1 (ko) * 2017-08-25 2019-02-21 뉴로핏 주식회사 패치 가이드 방법 및 프로그램
US10398855B2 (en) * 2017-11-14 2019-09-03 William T. MCCLELLAN Augmented reality based injection therapy
US20200016396A1 (en) * 2018-07-11 2020-01-16 Synchron Australia Pty Limited Systems and methods for improving placement of devices for neural stimulation
JP7189594B2 (ja) * 2018-07-23 2022-12-14 国立大学法人 大分大学 非侵襲的ヒト優位半球の大脳運動性言語野判定装置
US11497924B2 (en) * 2019-08-08 2022-11-15 Realize MedTech LLC Systems and methods for enabling point of care magnetic stimulation therapy
US11593972B2 (en) * 2020-04-29 2023-02-28 Medtronic Navigation, Inc. System and method for viewing a subject
US11628037B2 (en) 2020-04-29 2023-04-18 Medtronic Navigation, Inc. System and method for viewing a subject

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080058582A1 (en) * 2006-08-30 2008-03-06 Matti Aho Transcranial Magnetic Stimulation Induction Coil Device With Attachment Portion for Receiving Tracking Device
WO2008031847A1 (en) * 2006-09-13 2008-03-20 Nexstim Ltd. Method and apparatus for correcting an error in the co-registration of coordinate systems used to represent objects displayed during navigated brain stimulation
US20080262338A1 (en) * 2007-04-23 2008-10-23 Medtronic Navigation, Inc Method and apparatus for electromagnetic navigation of a magnetic stimulation probe

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FI114613B (fi) 2001-10-17 2004-11-30 Nexstim Oy Menetelmä ja laite magneettistimulaation annoslaskentaa varten
JP3849853B2 (ja) * 2001-10-19 2006-11-22 株式会社日立メディコ 手術用受信コイル及びこれを用いた磁気共鳴イメージング装置
FI117886B (fi) 2002-07-29 2007-04-13 Nexstim Oy Paikanninkehys ja menetelmä paikanninkehyksen tukemiseksi
FI113615B (fi) 2002-10-17 2004-05-31 Nexstim Oy Kallonmuodon ja sisällön kolmiulotteinen mallinnusmenetelmä
FI119172B (fi) 2003-11-18 2008-08-29 Nexstim Oy Elektrodirakenne sähköisten vasteiden mittaamiseksi ihmiskehosta
US7998053B2 (en) 2006-08-30 2011-08-16 Nexstim Oy Transcranial magnetic stimulation induction coil device and method of manufacture
RU2013142367A (ru) 2011-03-03 2015-04-10 Некстим Ой Способ картирования когнитивных функций с использованием транскраниальной магнитной стимуляции

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080058582A1 (en) * 2006-08-30 2008-03-06 Matti Aho Transcranial Magnetic Stimulation Induction Coil Device With Attachment Portion for Receiving Tracking Device
WO2008031847A1 (en) * 2006-09-13 2008-03-20 Nexstim Ltd. Method and apparatus for correcting an error in the co-registration of coordinate systems used to represent objects displayed during navigated brain stimulation
US20080262338A1 (en) * 2007-04-23 2008-10-23 Medtronic Navigation, Inc Method and apparatus for electromagnetic navigation of a magnetic stimulation probe

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109300168A (zh) * 2018-07-30 2019-02-01 福建中医药大学附属人民医院(福建省人民医院) 单次蛛网膜下腔阻滞术中信息收集处理系统及其处理方法
CN112381706A (zh) * 2019-11-05 2021-02-19 北京智拓视界科技有限责任公司 对大脑的三维数据进行平面化处理的方法,设备和计算机可读存储介质
CN112381706B (zh) * 2019-11-05 2024-02-02 北京智拓视界科技有限责任公司 对大脑的三维数据进行平面化处理的方法,设备和计算机可读存储介质

Also Published As

Publication number Publication date
WO2012164173A3 (en) 2013-01-24
KR20140051861A (ko) 2014-05-02
PL2714193T3 (pl) 2020-06-29
EP2714193A2 (en) 2014-04-09
US9082215B2 (en) 2015-07-14
CN103619407B (zh) 2016-05-11
EP2714193B1 (en) 2019-12-18
JP2014522274A (ja) 2014-09-04
KR101531620B1 (ko) 2015-06-25
ES2776526T3 (es) 2020-07-30
WO2012164173A2 (en) 2012-12-06
US20130176336A1 (en) 2013-07-11

Similar Documents

Publication Publication Date Title
CN103619407A (zh) 用于在大脑的实时图像上重叠nbs功能数据的方法和系统
CN109996511B (zh) 用于引导进程的系统
US11278353B2 (en) Trajectory alignment system and methods
CA2958494C (en) Feedback for providing artificial bone flap
US10413366B2 (en) Trajectory guidance alignment system and methods
CA2906414C (en) Systems and methods for navigation and simulation of minimally invasive therapy
Watanabe et al. The trans-visible navigator: a see-through neuronavigation system using augmented reality
US20190254757A1 (en) 3D Navigation System and Methods
US20220265355A1 (en) Systems and methods for augmented reality assisted trauma fixation
CN106061401A (zh) 用于执行索纳手术的系统和方法
US11622699B2 (en) Trajectory alignment system and methods
CA2927381A1 (en) Trajectory alignment system and methods
US20220354579A1 (en) Systems and methods for planning and simulation of minimally invasive therapy
TWI501749B (zh) 手術導引系統之器械導引方法
Zagzoog Feasibility of Skull Base Neuronavigation Using Optical Topographic Imaging Toward Guidance of Human and Robotic Drill Operators
Williamson et al. Image-guided microsurgery

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CP01 Change in the name or title of a patent holder
CP01 Change in the name or title of a patent holder

Address after: Helsinki

Patentee after: Nackers Tim Public Co. Ltd.

Address before: Helsinki

Patentee before: Nexstim Ltd.