CN103608842A - 用于处理医学图像的系统和方法 - Google Patents
用于处理医学图像的系统和方法 Download PDFInfo
- Publication number
- CN103608842A CN103608842A CN201280030115.4A CN201280030115A CN103608842A CN 103608842 A CN103608842 A CN 103608842A CN 201280030115 A CN201280030115 A CN 201280030115A CN 103608842 A CN103608842 A CN 103608842A
- Authority
- CN
- China
- Prior art keywords
- user
- segmentation
- segmentation result
- interest
- medical image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/0485—Scrolling or panning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20092—Interactive image processing based on input by user
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20112—Image segmentation details
Abstract
一种用于处理医学图像(102)的系统(100),所述系统被布置为在所述医学图像中建立感兴趣区域104,并且所述系统包括:分割部件(120),其用于向所述感兴趣区域应用多种不同分割方法(124),以获得关联的多个分割结果(122);可视化部件(140),其用于向用户同时显示所述多个分割结果;以及,用户输入部(160),其用于从所述用户接收指示对所述多个分割结果中的一个的选择的选择命令(162),以建立所述多种不同分割方法中的关联的一种作为选择的分割方法(164)。
Description
技术领域
本发明涉及一种用于处理医学图像的系统和方法。本发明还涉及一种包括该系统的工作站和成像设备,以及一种用于令处理器系统执行该方法的计算机程序产品。
在医学成像领域中,医学图像可以包括临床医生特别感兴趣的区域。例如,在由磁共振成像(MRI)采集的胸部医学图像中,检查病变可以允许临床医生确定该病变是否为恶性。类似地,在由单光子发射计算机断层摄影(SPECT)采集的心脏图像中,包括心脏左心室的区域可以允许临床医生评估心脏将血液泵至全身的效果如何。
将感兴趣区域与其周围分开是可取的,例如,以便更容易地观察其形状、大小或其随时间的变化。为了达到该目的,分割方法可以应用于感兴趣区域,产生分割结果。
分割方法可以是手动或自动的。由于需要临床医生的显著参与,手动分割方法通常太耗时,以至于在常规临床实践中是不可行的。相反地,自动分割方法需要较少临床医生的参与或者不需要临床医生的参与。从图像处理领域已知各种自动分割方法,其通常由分割算法和与其相关联的(一个或多个)分割参数值构成。
但是,为了针对特定感兴趣区域和/或临床应用微调分割结果,临床医生会仍然需要参与选择分割算法和/或(一个或多个)分割参数值。
背景技术
由Olabarriaga,S.D.等人发表在Medical Image Analysis,5,2001,pp.127-142上的出版物“Interaction in the segmentation of medical images:Asurvey”描述了一种包括计算部分、交互部分和用户接口的通用交互式分割方法。计算部分对应给定一些参数能够生成感兴趣对象的描述的一条或多条程序。交互部分负责在用户和计算部分之间传达信息。计算机和用户之间的实际交流是经由输出装置和通过用户接口控制的输入装置完成的。
用户接口允许用户通过控制分割算法的一个或多个参数来控制分割算法。可以使用三种类型的用户输入:(i)设置参数值,例如,通过使用滑块或类似的技术,(ii)直接在图像网格上进行图像输入,例如,通过指定图像网格上的点,用于对描述进行初始化,以及(iii)从菜单的预定义选项中进行选择。
发明内容
以上用户接口的问题在于,临床医生要在日常临床实践期间控制分割方法会很困难且耗时很久。
具有一种允许临床医生更容易在日常临床实践期间控制分割方法的系统或方法将是有利的。
为了解决该问题,在本发明的第一方面中,提供一种用于处理医学图像的系统,所述系统被布置为以在医学图像中建立感兴趣区域,并且所述系统包括分割部件,用于向所述感兴趣区域应用多种不同分割方法,以获得关联的多个分割结果;可视化部件,用于向用户同时显示所述多个分割结果;以及用户输入部,用于从所述用户接收指示对所述多个分割结果中的一个的选择的选择命令,以建立所述多种不同分割方法中的关联的一种作为选择的分割方法。
在本发明的另一方面中,提供一种包括所述系统的工作站和成像设备。
在本发明的另一方面中,提供一种处理医学图像的方法,包括:在所述医学图像中建立感兴趣区域;向所述感兴趣区域应用多种不同分割方法,以获得关联的多个分割结果;向用户同时显示所述多个分割结果;以及从所述用户接收指示对所述多个分割结果中的一个的选择的选择命令,以建立所述多种不同分割方法中的关联的一种作为选择的分割方法。
在本发明的另一方面中,提供了一种计算机程序产品,包括用于令处理器系统执行所述方法的指令。
上述措施获得了一种系统和方法,其提供或配备具有医学图像中的感兴趣区域,并随后执行不同的分割方法,以便通过不同方式分割感兴趣区域。多种不同分割方法包括如下中的至少一种:多种不同分割算法以及由多个不同的分割参数值配置的分割算法。因此,获得多个分割结果,每个分割结果都与感兴趣区域的分割对应。同时向用户显示分割结果,从而允许用户同时认知所有的分割结果,并选择其中一个分割结果来指示优选分割方法。
根据本发明的措施具有如下效果:用户能够同时观察和比较分割结果,并基于所述对分割结果的观察和比较来选择优选分割方法。因此,用户一目了然地获得针对特定感兴趣区域由不同分割方法提供的分割结果的印象,并能够基于他或她对这些结果的印象选择优选分割方法。
本发明部分地基于如下认识:分割结果的适合性以及关联分割方法的适合性,取决于用户当前解决的临床应用。根据例如是否应当生成示出带轮廓线肿瘤的报告屏幕快照、是否需要分割结果用于进一步处理或特征提取、或是否基于分割结果规划治疗(例如,手术切除肿瘤),它会有区别。例如,在后一种情况下,可能需要肿瘤周围有更大的裕度。
对于临床用户而言,难以确定应当使用哪种分割算法和哪个分割参数值以获得期望的分割结果。当不同的分割参数的含义具有技术性质并且不能在临床术语中描述时,试错方案中的参数优化会非常艰难。具体而言,临床医生难以预测参数中的变化将会如何影响分割结果。然而,临床用户通常能够通过查看分割结果来确定特定的分割方法是否适合用于临床应用。根据本发明的措施为用户提供同时访问多种不同分割方法的分割结果的通路,而无需用户了解分割算法或分割参数值的技术细节。
任选地,所述可视化部件被布置为将所述多个分割结果作为网格、转盘中的一个向所述用户显示。因此,以结构清晰且布置良好的形式向用户同时显示分割结果,允许用户直观地认知和比较分割结果。
任选地,根据选择的分割方法,所述分割部件被布置为向所述感兴趣区域应用另外的多种不同分割方法,以获得关联的另外的多个分割结果;所述可视化部件被布置为向所述用户同时显示另外的多个分割结果;并且所述用户输入部被布置为从所述用户接收表示对所述另外的多个分割结果中一个的另外的选择的另外的选择命令,以建立所述另外多种不同分割方法中的关联的一种作为另外的选择的分割方法。
在用户选择优选分割方法之后,在从另外数量的不同分割方法中获得另外数量的分割结果时使用优选分割方法。因此,对优选分割方法的选择影响被显示的另外数量的分割结果。同时向用户显示所述分割结果,从而允许用户同时认知所有另外的分割结果,并选择另外的分割结果中的至少一个来指示另外的优选的分割方法。
以上措施提供一种迭代过程,其中用户选择第一(例如,初始)优选分割方法,系统之后使用所述选择来获得另外数量的分割结果,并且用户之后选择另外数量的分割结果的手边的第二(例如,最终)优选分割方法。有利地,所述迭代过程比完全迭代过程或完全非迭代过程更适合用于日程临床实践,所述完全迭代过程非常耗时并且令临床医生混淆,在所述完全非迭代过程中,需要限制同时显示的分割结果的数量,以避免使临床医生混淆。有利地,可以为用户提供大量可供选择的分割方法,无需同时观察和比较所有分割结果。
任选地,所述选择的分割方法是由分割参数值配置的分割算法,并且由多个不同的分割参数值配置的所述分割算法构成所述另外的多种不同分割方法。在选择优选分割方法之后,为用户提供对应优选分割方法的相同分割算法的另外数量的分割结果,但每个分割结果都具有不同的分割参数值。有利地,不同的分割参数值是对选择的分割方法的分割参数值的细化,例如,轻微修改,以允许用户容易地细化优选分割方法。有利地,多个不同的分割参数值包括优选分割方法的分割参数值,以允许用户维持未修改形式的优选分割方法,作为另外的优选分割方法。
任选地,所述分割部件被布置为通过由先前选择的另外的分割方法替代所述多种不同分割方法内的先前选择的分割方法,使所述多种不同分割方法适于所述用户的选择偏好。因此,在系统的下一次或将来使用期间,为用户提供由另外的选择的分割方法获得的分割结果,而非由作为多种分割方法的原始部分的选择的分割方法获得的分割结果。有利地,在重复使用该系统之后,多种分割方法较好地适于用户的偏好。
任选地,所述分割部件被布置为向感兴趣区域应用多种分割方法中的一个,以获得关联的预览分割结果,并且所述可视化部件被布置为在同时显示多个分割结果之前向所述用户显示预览分割结果。因此,所述系统在同时显示多个分割结果之前向用户提供通过多种分割方法中的一个获得的预览分割结果。有利地,用户可以基于预览分割结果决定应当选择哪个感兴趣区域或究竟是否要选择感兴趣区域,一旦选择了感兴趣区域,仅向用户提供多个分割结果。有利地,在选择感兴趣区域时,不会为用户过载视觉信息。
任选地,所述可视化部件被布置为在多个分割结果间的预定义位置处显示预览分割结果。有利地,用户能够在多个分割结果间直观地识别和/或容易地发现预览分割结果。
任选地,所述分割部件被布置为根据所述用户的选择历史,建立所述多种分割方法中的一种作为预览分割方法。有利地,为用户提供通过优选分割方法获得的预览分割结果。
任选地,所述可视化部件被布置为同时显示包括多个分割结果的医学图像的视图,并且所述用户输入部被布置为从所述用户接收指示对多个视图的联合操控的视图命令,所述联合操控包括如下中的至少一个:相对于医学图像对多个视图进行平移、缩放、旋转。因此,在可以被联合操控的医学图像的视图中向用户示出多个分割结果。由此,以可比较的方式在视图中示出分割结果,而无需用户逐个操控每个视图。
任选地,所述医学图像为三维[3D]医学图像,所述多个分割结果为多个3D分割结果,并且所述视图命令指示旋转多个视图,以获得所述多个视图的正交配置。因此,用户可以容易地获得所有分割结果的正交视图。有利地,在初始视图是示出分割结果的医学图像的横向视图时,用户可以容易地获得医学图像的冠状或矢状视图,或反之亦然。
任选地,所述用户输入部被布置为从所述用户接收显示命令,所述显示命令用于在显示多个分割结果时指导可视化部件显示关于不同分割方法的技术信息。尽管,在正常情况下向用户显示分割结果,而不显示关于分割方法的技术信息,例如分割算法的名称或分割参数值,但用户能够使用显示命令请求显示所述信息。有利地,用户通常不会被技术性质的术语搞糊涂,而仍然可以请求显示这样的术语。
任选地,所述用户输入部被布置为从所述用户接收手动分割命令,并且所述分割部件被布置为根据手动分割命令向感兴趣区域应用手动辅助的分割方法。
本领域技术人员将认识到,可以通过任何被认为有用的方式组合两个或更多上述本发明的实施例、实施方式和/或方面。
可以由本领域技术人员基于本说明书对成像设备、工作站、方法和/或计算机程序产品进行与上述系统的描述的修改和变化对应的修改和变化。
本领域技术人员将认识到,所述系统可以应用于由各种采集模态采集的多维图像数据,例如二维(2-D)、三维(3-D)或四维(4-D)图像,各种采集模态诸如但不限于标准X-射线成像、计算机断层摄影(CT)、磁共振成像(MRI)、超声波(US)、正电子发射断层摄影(PET)、单光子发射计算机断层摄影(SPECT)和核医学(NM)。多维图像数据的维度可以涉及时间。例如,四维图像可以包括三维图像的时域系列。
在独立权利要求中定义本发明。在从属权利要求中定义有利实施例。
附图说明
通过参考下面描述的实施例,本发明的这些和其他方面将是显而易见的并且将得到说明。在附图中,
图1示出了根据本发明的系统;
图2示出了根据本发明的方法;
图3a示出了医学图像中的感兴趣区域;
图3b示出了感兴趣区域的分割结果;
图4示出了医学图像中的感兴趣区域以及将感兴趣区域的多个分割结果作为网格显示的弹出窗口;
图5示出了显示多个分割结果的网格;
图6示出了显示多个分割结果的转盘;
图7示出了根据本发明的迭代方法;
图8a示出了选择多个分割结果中的一个;
图8b示出了另外的多个分割结果;
图9a示出了多个分割结果的视图;
图9b示出了多个分割结果的正交视图。
具体实施方式
图1示出了用于处理医学图像102的系统100。系统100包括分割部件120,用于将多种不同分割方法应用于医学图像102中的感兴趣区域104。系统100被布置为建立医学图像102中的感兴趣区域104,并向分割部件120提供医学图像102和感兴趣区域104。分割部件120被布置为将多种不同分割方法124应用于医学图像102中的感兴趣区域104,并且因此,向系统100的可视化部件140提供多个分割结果122。
可视化部件140被布置为向用户同时显示多个分割结果122。为了达到该目的,可视化部件140可以被连接到显示器180,或者可以可连接到显示器180。显示器180可以是内部显示器,即,可以是系统100的一部分,或者是外部显示器。图1示出了显示器180,其显示了示出多个分割结果122的网格124。
系统100还包括用户输入部160,其用于从用户接收指示对多个分割结果122中的一个的选择的选择命令162。尽管在图1中未示出,用户可以通过用户输入装置,例如鼠标、键盘或者触摸屏表面,向用户输入部160提供选择命令162。例如,用户可以通过鼠标点击通过网格124示出的多个分割结果122中的一个来提供选择命令162。由于用户的选择,系统100建立多种不同分割方法124中的一种作为选择的分割方法164,所述多种不同分割方法124中的一种与选择的多个分割结果122中的一个相关联。
要指出的是,分割部件是被布置为向医学图像中的感兴趣区域应用分割方法的硬件或软件。此外,术语“分割方法”是指分割算法以及与其对应的分割参数值,后者指定分割算法的配置或配置的一方面。分割算法可以是图像处理领域中的任何已知分割算法,具体而言,医学图像处理领域中的任何已知分割算法。例如,所述分割算法可以是阈值化分割算法,并且分割参数值可以是阈值。类似地,分割算法可以是λ-连通区域生长分割算法,并且分割参数值可以是λ值。因此,术语“不同的分割方法”是指具有不同分割算法和/或具有不同分割参数值的分割方法。
图2示出了用于处理医学图像的方法200。所述方法包括:在医学图像中建立220感兴趣区域;向感兴趣区域应用240多种不同分割方法,以获得关联的多个分割结果;同时260向用户显示多个分割结果;以及从用户接收280指示对多个分割结果中的一个的选择的选择命令,以建立多种不同分割方法中的关联的一种作为选择的分割方法。
可以如下解释系统100的操作以及执行方法200的操作。图3a示出了包括感兴趣区域104的医学图像102。感兴趣区域104可以是组织、器官或任何其他医学感兴趣区域。例如,感兴趣区域104可以是医学图像中的病变,即,异常组织。可以通过各种方式在医学图像102中建立感兴趣区域104。例如,建立感兴趣区域104可以包括选择感兴趣区域104。所述选择可以是手动的,并且可以包括用户通过利用鼠标光标在感兴趣区域104上点击,在感兴趣区域104上方悬停鼠标光标等,来选择感兴趣区域104的一部分。所述选择也可以是自动的,例如,使用医学图像处理领域已知的计算机辅助诊断算法或自动种子点选择算法。所述选择还可以包括用户从通过系统100自动建议的感兴趣区域列表中手动地选择感兴趣区域104。建立感兴趣区域104还可以包括从外部源接收指示感兴趣区域104的适当数据,所述数据包括例如感兴趣区域104的坐标。在这一点上,要指出的是,建立感兴趣区域可以包括建立感兴趣区域的点或部分,例如,选择感兴趣区域的点或部分。分割部件120可以被布置为根据点或部分向感兴趣区域应用多种不同分割方法124。
图3b示出了系统100和方法200的任选特征,其中,将多种分割方法中的一种应用于感兴趣区域104,以获得关联的预览分割结果106,在同时显示多个分割结果之前向用户显示所述预览分割结果106。用户可以通过最初选择感兴趣区域104,例如,通过在感兴趣区域104上方悬停鼠标光标,来获得预览分割结果。用于获得预览分割结果106的多种分割方法中的一种可以是默认分割方法。具体而言,所述分割方法可以对应按平均值很适合用于分割感兴趣区域的分割方法,例如,通过具有平均或通常使用的分割参数值。而且,可以根据用户的选择历史来建立多种分割方法中的一种作为预览分割方法。因此,预览分割方法通常可以是频繁选择的分割方法,或频繁选择用于特定感兴趣区域的分割方法。
图4示出了用户通过例如利用鼠标光标490在感兴趣区域上点击来选择感兴趣区域的结果。因此,向用户提供网格400,所述网格400向用户同时显示多个分割结果。可以以所谓的弹出窗口的形式提供网格400,其仍然允许用户观察医学图像102。具体而言,可以以缩略图的形式显示多个分割结果,即,与医学图像102中的感兴趣区域104相比,所述多个分割结果被示为相对较小。备选地,可以与医学图像102相邻提供网格400、网格400取代医学图像102,或通过任何其他适当方式提供网格400。
图5示出了图4中先前所示网格400的更大视图。网格400包括通过3×3网格同时显示的九个分割结果402-418,网格的每块均示出感兴趣区域和多个分割结果中的一个。为了示出感兴趣区域,每块可以示出医学图像102的剪裁视图,所述剪裁视图示出感兴趣区域和多个分割结果中的一个。然而,将要认识到,可能不需要示出感兴趣区域。相反,网格400可以单独显示多个分割结果。此外,分割结果可以被显示为轮廓、网孔、线、透明着色区域、不透明着色区域等。
在图5中,多个分割结果402-418被示为不同的分割结果,即,每个分割结果均不同于其他分割结果。由于关联的分割方法不同,通常会发生这种情况。然而,将要认识到,例如,由于差异对于特定感兴趣区域而言不相关或相关性较小,在一些情况下,不同的分割方法可以获得类似或相同的分割结果。在该特定范例中,不同的分割方法产生多个分割结果,所述多个分割结果在一方面(例如,通过在分割结果中包括其他组织)过度分割与另一方面(例如,通过在分割结果中省略感兴趣区域的部分)分割不足之间变化。
多个分割结果402-418中的一个可以对应如图3b和图4中所示的预览分割结果106。在该特定范例中,多个分割结果的中间一个410对应预览分割结果106。预览分割结果106、410可以始终被示出在多个分割结果402-418间的预定义位置处,例如,中间位置或左上位置。此外,对应左上分割结果402的过度分割与右下分割结果418的分割不足之间的折衷,在图5中示出预览分割结果106、410。这可以是作为平均分割方法的关联的预览分割方法的结果,例如,多个分割方法间的折衷。
用户可以通过例如利用鼠标光标491在中上分割结果404上点击来选择多个分割结果中的一个。由此,建立多种不同分割方法中的关联的一种作为选择的分割方法。因此,通过选择特定分割方法的结果,将特定分割方法建立作为选择的分割方法。
图4中示出网格400,以示出多个分割结果402-418,而不示出关于关联的分割方法的技术信息。然而,尽管图4中未示出,技术信息可以被显示作为用户特定请求显示这种信息的结果。所述技术信息可以包括被显示在多个分割结果402-418中的一个或每个旁边或下方的分割算法的名称或分割参数值。
图6示出了向用户同时显示多个分割结果的备选方式。在这里,多个分割结果被显示为转盘420,即,多个分割结果的圆形布置。然而,将认识到,可以通过任何其他适当方式同时显示多个分割结果。例如,可以通过水平或垂直并排布置的形式同时显示多个分割结果。
图7示出了方法500,方法500是图2的方法200的扩展。图1的系统可以被配置为执行方法500的步骤,即,分割部件、可视化部件和用户输入部可以被相应地配置。在这里,在第一步510“选择”中,选择感兴趣区域,并向感兴趣区域应用多种不同分割方法,以获得关联的多个分割结果。在第二步520“检查”中,向用户同时显示多个分割结果,并且从用户接收指示对多个分割结果中的一个的选择的选择命令,以建立多种不同分割方法中的关联的一种作为选择的分割方法。正因如此,第一步510和第二步520可以对应图1的系统100和图2的方法200的上述配置。图8a中部分地示出了第二步420,其中,以上述网格400的形式向用户同时显示多个分割结果。用户可以通过利用鼠标光标492在中右分割结果412上点击来选择多个分割结果的中右一个412。
在第三步530“细化”中,可以向感兴趣区域应用另外多种不同分割方法,以获得关联的另外多个分割结果。在执行第三步之后,可以再次执行第二步520,提供另外多个分割结果作为先前显示的多个分割结果的更新。因此,向用户同时显示另外多个分割结果,并从用户接收指示对另外的多个分割结果中的一个的另外的选择的另外的选择命令,以建立另外的多种不同分割方法中的关联的一种作为另外的选择的分割方法。图8b中部分地示出了结果,其中,以另外的网格440的形式向用户同时显示另外的多个分割结果442-458。第三步530可以用于细化在第二步420期间选择的分割结果,例如,中右分割结果412。为了达到该目的,可以通过修改第二步520的选择的分割方法构成另外多个分割结果442-458。例如,在选择的分割方法是由分割参数值配置的分割算法时,可以由多个不同分割参数配置的分割算法来构成另外多种不同分割方法。由此,获得另外多个分割结果,其通常不同于选择的分割结果,但由于分割算法是选择的分割结果的分割算法,而与选择的分割结果共享某些特性。备选地,另外多个不同分割方法可以由不同分割算法构成,或者通过不同分割方法与具有不同分割参数值的一种或多种分割算法的组合来构成。
图8b示出了通过对选择的分割方法稍作修改获得的另外多个分割结果442-458。由此,另外多个分割结果442-458相对类似于第二步520的选择的分割结果412。此外,图8b示出了与图8a的选择的分割结果412相同的另外多个分割结果452的中右一个。这可以是由选择的分割方法构成的另外多个分割方法中的一个的结果。因此,在第三步530期间,用户可以将选择的分割结果的细化与选择的分割结果自身比较,并可以选择所述细化或备选地再次选择所述选择的分割结果。后者可以是由于细化未对选择的分割结果做出改进。因此,可以在第三步530期间保持选择的分割方法。通常,可以重复第三步530,以通过迭代方式进一步细化分割结果。
如果用户对通过第二步520获得的分割结果和/或通过第三步530提供的细化不满意,用户可以在任选的第四步540中手动地辅助分割。因此,第四步540可以涉及使用交互分割方法,其中,在提供的任何分割结果都不令人满意的情况下,获得用户输入,以改进分割结果。
最后,一旦用户对通过第二步520获得的分割结果和/或通过第三步530提供的细化和/或通过第四步540提供的手动辅助分割满意,用户可以在第五步550中接受该分割结果作为最终分割结果。这可以包括,例如点击显示的按钮,或可以包括省略执行第三步530和第四步540,因此隐含地接受通过第二步520提供的分割结果。
在方法500的任选步骤中,使第一步510中的多种分割方法适应于先前的最终分割结果,例如,先前执行方法500的最终分割结果。例如,如果并非已经是这样的情况,即,在细化或手动辅助之后获得先前的最终分割结果时,可以在第一步510的多种分割方法中包括与先前的最终分割结果相关联的分割方法。此外,在与先前的最终分割结果相关联的分割方法是对第一步510的多种分割方法中的一种的修改时,可以由其修改替代所述方法。正因如此,可以考虑用户的选择偏好,从而允许用户获得满意的分割结果,而无需细化或需要更少细化。
图9a示出了网格460,其用于同时显示多个分割结果,网格460包括示出多个分割结果的医学图像的多个视图。因此,连同医学图像内的感兴趣区域及其周围一起示出分割结果。尽管在图9a中未示出,但可以逐个操控每幅视图,例如以将视图相对于医学图像平移、缩放或旋转。此外,多个视图也可以允许联合操控,例如以将所有视图相对于医学图像联合平移、缩放或旋转。在图9a的具体情况中,医学图像是三维[3D]医学图像,并且多个分割结果是多个3D分割结果。例如,多个分割结果中的每个都可以由3D网孔构成。此外,联合操控可以是将所有视图相对于医学图像旋转90度,以获得多个视图的正交配置。为了达到该目的,提供视图接口480,其包括从上到下分别对应横向、矢状和冠状视图配置的按钮。图9a中示出的视图可以对应由通过鼠标指针496选择横向视图配置按钮482指示的横向视图配置。用户可以通过利用鼠标指针498选择矢状视图按钮484来选择矢状视图配置。因此,将每个视图相对于医学图像旋转90度,导致网格470示出多个视图的正交配置。
要认识到,以上系统为用户提供访问大量不同分割算法结果和/或分割参数值的通路,而无需了解关于算法或分割参数值的技术细节。用户将无需明确设置或改变任何参数。利用少量的例如鼠标点击,用户能够以可预测的方式向感兴趣区域的期望分割引导该系统。
要认识到,本发明还应用于适于将本发明付诸实践的计算机程序,尤其是载体上或载体中的计算机程序。程序可以是源代码、目标代码、居于源和目标代码中间的代码形式,例如部分编译的形式,或适合用于实施根据本发明的方法时的任何其他形式。还要认识到,这样的程序可以具有很多不同的架构设计。例如,实施根据本发明的方法或系统的功能的程序代码可以被细分成一个或多个子例程。对于技术人员而言,在这些子例程之间分配功能的很多不同方式将是显而易见的。子例程可以被共同存储在一个可执行文件中,以形成自含程序。这样的可执行文件可以包括计算机可执行指令,例如,处理器指令和/或解释器指令(例如,Java解释器指令)。备选地,一个或多个或所有子例程可以被存储在至少一个外部库文件中,并且例如在运行时间静态或动态地与主程序链接。主程序包含对至少一个子例程的至少一个调用。子例程还可以包括对彼此的函数调用。涉及计算机程序产品的实施例包括与本文所述的至少一个方法中的每个处理步骤对应的计算机可执行指令。这些指令可以被细分成子例程和/或存储在可以静态或动态链接的一个或多个文件中。涉及计算机程序产品的另一实施例包括与本文所述的至少一个系统和/或产品中的每个部件对应的计算机可执行指令。这些指令可以被细分成子例程和/或存储在可以静态或动态链接的一个或多个文件中。
计算机程序的载体可以是能够承载程序的任何实体或装置。例如,载体可以包括存储介质,诸如ROM(例如,CD ROM或半导体ROM)或磁性记录介质(例如,硬盘)。此外,载体可以是可传输载体,诸如电信号或光信号,其可以经由电缆或光缆或通过无线电或其他手段进行传递。当在这种信号中实现程序时,载体可以由这样的电缆或其他装置或部件构成。备选地,载体可以是嵌入程序的集成电路,所述集成电路适于执行相关方法或在执行相关方法时使用。
应当注意的是,上述实施例用来说明、而非限制本发明,并且,本领域普通技术人员能够在不脱离所附权利要求的保护范围的前提下设计出很多可替换的实施例。在权利要求书中,放置在圆括号之间的任何标记不应被解释成限制权利要求。动词“包括”及其词形变化的使用并不排除权利要求中所列元件或步骤之外还存在其他元件或步骤。元件之前的冠词“一”或“一个”并不排除存在多个这样的元件。本发明可以通过包括若干不同元件的硬件的部件来实现,也可以通过适当编程的计算机来实现。在罗列了若干部件的装置权利要求中,这些部件中的若干个可以具体实现为一个相同的硬件产品。有些手段记载在相互不同的从属权利要求中,这一事实并不表示不能用这些手段的组合来获益。
Claims (15)
1.一种用于处理医学图像(102)的系统(100),所述系统被布置为在所述医学图像中建立感兴趣区域(104),所述系统包括:
-分割部件(120),其用于向所述感兴趣区域应用多种不同分割方法(124),以获得关联的多个分割结果(122);
-可视化部件(140),其用于向用户同时显示所述多个分割结果;以及
-用户输入部(160),其用于从所述用户接收指示对所述多个分割结果中的一个的选择的选择命令(162),以建立所述多种不同分割方法中的关联的一种作为选择的分割方法(164)。
2.根据权利要求1所述的系统(100),其中,所述可视化部件(140)被布置为将所述多个分割结果(122)作为网格(400)、转盘(420)中的一个向所述用户显示。
3.根据权利要求1所述的系统(100),其中:
-根据所述选择的分割方法(164),所述分割部件(120)被布置为向所述感兴趣区域(104)应用另外的多种不同分割方法,以获得关联的另外的多个分割结果;
-所述可视化部件(140)被布置为向所述用户同时显示所述另外的多个分割结果;以及
-所述用户输入部(160)被布置为从所述用户接收指示对所述另外的多个分割结果中的一个的另外的选择的另外的选择命令,以建立所述另外的多种不同分割方法中的关联的一种作为另外的选择的分割方法。
4.根据权利要求3所述的系统(100),其中,所述选择的分割方法(162)是由分割参数值配置的分割算法,并且其中,所述另外的多种不同分割方法由多个不同分割参数值配置的所述分割算法构成。
5.根据权利要求3所述的系统(100),其中,所述分割部件(120)被布置为通过利用先前选择的另外的分割方法替代所述多种不同分割方法内的先前选择的分割方法,使所述多种不同分割方法(124)适用于所述用户的选择偏好。
6.根据权利要求1所述的系统(100),其中:
-所述分割部件(120)被布置为向所述感兴趣区域(104)应用多种分割方法(124)中的一种,以获得关联的预览分割结果;以及
-所述可视化部件(140)被布置为在同时显示所述多个分割结果(122)之前向所述用户显示所述预览分割结果。
7.根据权利要求6所述的系统(100),其中,所述可视化部件(140)被布置为在所述多个分割结果(122)中的预定义位置处显示所述预览分割结果。
8.根据权利要求6所述的系统(100),其中,所述分割部件(120)被布置为根据所述用户的选择历史,建立所述多种分割方法(124)中的一个作为预览分割方法。
9.根据权利要求1所述的系统(100),其中,所述可视化模块部件(140)被布置为同时显示包括所述多个分割结果(122)的所述医学图像(102)的多个视图(460、470),所述用户输入部(160)被布置为从所述用户接收指示对所述多个视图的联合操控的视图命令,所述联合操控包括以下中的至少一个:相对于所述医学图像对所述多个视图进行平移、缩放、旋转。
10.根据权利要求9所述的系统(100),其中,所述医学图像(102)为三维[3D]医学图像,所述多个分割结果(122)为多个3D分割结果,并且所述视图命令指示旋转所述多个视图,以获得所述多个视图(470)的正交配置。
11.根据权利要求1所述的系统(100),其中,所述用户输入部(160)被布置为从所述用户接收显示命令,所述显示命令用于指导所述可视化模块(140)在显示所述多个分割结果(122)时显示关于所述不同分割方法(124)的技术信息。
12.一种工作站,包括根据权利要求1所述的系统。
13.一种成像设备,包括根据权利要求1所述的系统。
14.一种处理医学图像的方法(200),包括:
-在所述医学图像中建立(220)感兴趣区域;
-向所述感兴趣区域应用(240)多种不同分割方法,以获得关联的多个分割结果;
-向用户同时(260)显示所述多个分割结果;以及
-从所述用户接收(280)指示对所述多个分割结果中的一个的选择的选择命令,以建立所述多种不同分割方法中的关联的一种作为选择的分割方法。
15.一种计算机程序产品,包括用于令处理器系统执行根据权利要求14所述的方法的指令。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910772426.1A CN110555854A (zh) | 2011-06-22 | 2012-06-14 | 用于处理医学图像的系统和方法 |
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
EP11171000.0 | 2011-06-22 | ||
EP11171000 | 2011-06-22 | ||
PCT/IB2012/053007 WO2012176100A1 (en) | 2011-06-22 | 2012-06-14 | System and method for processing a medical image |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910772426.1A Division CN110555854A (zh) | 2011-06-22 | 2012-06-14 | 用于处理医学图像的系统和方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN103608842A true CN103608842A (zh) | 2014-02-26 |
Family
ID=46458572
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201280030115.4A Pending CN103608842A (zh) | 2011-06-22 | 2012-06-14 | 用于处理医学图像的系统和方法 |
CN201910772426.1A Pending CN110555854A (zh) | 2011-06-22 | 2012-06-14 | 用于处理医学图像的系统和方法 |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910772426.1A Pending CN110555854A (zh) | 2011-06-22 | 2012-06-14 | 用于处理医学图像的系统和方法 |
Country Status (5)
Country | Link |
---|---|
US (1) | US20140143716A1 (zh) |
EP (1) | EP2724317B1 (zh) |
JP (1) | JP6088498B2 (zh) |
CN (2) | CN103608842A (zh) |
WO (1) | WO2012176100A1 (zh) |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106716496A (zh) * | 2014-09-24 | 2017-05-24 | 皇家飞利浦有限公司 | 对解剖结构的体积图像进行可视化 |
CN106887000A (zh) * | 2017-01-23 | 2017-06-23 | 上海联影医疗科技有限公司 | 医学图像的网格化处理方法及其系统 |
CN106880378A (zh) * | 2015-12-03 | 2017-06-23 | 美国西门子医疗解决公司 | 用于控制医学成像的基于图像的用户界面 |
CN107667340A (zh) * | 2015-05-28 | 2018-02-06 | 三星电子株式会社 | 用于显示医学图像的方法和装置 |
CN110148192A (zh) * | 2019-04-18 | 2019-08-20 | 上海联影智能医疗科技有限公司 | 医学影像成像方法、装置、计算机设备和存储介质 |
CN111226260A (zh) * | 2017-10-20 | 2020-06-02 | 皇家飞利浦有限公司 | 分割图像 |
Families Citing this family (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
MX2015006351A (es) * | 2012-11-23 | 2016-03-15 | Cadens Medical Imaging Inc | Metodo y sistema para exhibir a un usuario una transicion entre una primera proyeccion proporcionada y una segunda proyeccion proporcionada. |
US9539441B2 (en) * | 2013-09-13 | 2017-01-10 | Elekta Ab (Publ) | Radiotherapy system with advanced graphical user interface |
US10025479B2 (en) * | 2013-09-25 | 2018-07-17 | Terarecon, Inc. | Advanced medical image processing wizard |
US11166700B2 (en) | 2015-03-25 | 2021-11-09 | Koninklijke Philips N.V. | Optimal ultrasound-based organ segmentation |
WO2016156540A1 (en) | 2015-03-31 | 2016-10-06 | Koninklijke Philips N.V. | Calibration of ultrasonic elasticity-based lesion-border mapping |
CN104809740B (zh) * | 2015-05-26 | 2017-12-08 | 重庆大学 | 基于svm与弹性区域生长的膝软骨图像自动分割方法 |
EP3313233A1 (en) * | 2015-06-29 | 2018-05-02 | Koninklijke Philips N.V. | Methods and systems for extracting motion characteristics of a user using a hall effect sensor to provide feedback to the user |
WO2017034020A1 (ja) * | 2015-08-26 | 2017-03-02 | 株式会社根本杏林堂 | 医用画像処理装置および医用画像処理プログラム |
US10325412B2 (en) | 2015-11-05 | 2019-06-18 | Shenyang Neusoft Medical Systems Co., Ltd. | Cutting three-dimensional image |
EP4016541A1 (en) | 2018-11-23 | 2022-06-22 | Siemens Healthcare GmbH | Integrated medical image visualization and exploration |
CN112351282A (zh) * | 2020-10-28 | 2021-02-09 | 西安万像电子科技有限公司 | 图像数据的传输方法及装置、非易失性存储介质及处理器 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1846250A (zh) * | 2003-09-03 | 2006-10-11 | 奥林巴斯株式会社 | 图像显示装置、图像显示程序、图像显示方法、记录图像显示程序的记录介质 |
CN1864633A (zh) * | 2005-05-19 | 2006-11-22 | 西门子公司 | 扩大对象区域的立体图像的显示范围的方法 |
CN101046890A (zh) * | 2006-03-30 | 2007-10-03 | 西门子公司 | 用于扩展表示三维图像数据组的图像处理装置 |
CN101116109A (zh) * | 2004-09-10 | 2008-01-30 | 医学视像上市公司 | 用于ct扫描分析的用户接口 |
US20090252429A1 (en) * | 2008-04-03 | 2009-10-08 | Dan Prochazka | System and method for displaying results of an image processing system that has multiple results to allow selection for subsequent image processing |
CN101849248A (zh) * | 2007-10-09 | 2010-09-29 | 爱克发医疗保健公司 | 用于对数据集进行体绘制的方法和设备 |
Family Cites Families (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
BR9405791A (pt) * | 1993-12-01 | 1995-12-12 | Motorola Inc | Processo combinado baseado em dicionário e de conjunto de caracteres semelhantes para reconhecimento de caligrafia |
US6058322A (en) * | 1997-07-25 | 2000-05-02 | Arch Development Corporation | Methods for improving the accuracy in differential diagnosis on radiologic examinations |
TW502180B (en) * | 2001-03-30 | 2002-09-11 | Ulead Systems Inc | Previewing method of editing multimedia effect |
US6993174B2 (en) * | 2001-09-07 | 2006-01-31 | Siemens Corporate Research, Inc | Real time interactive segmentation of pulmonary nodules with control parameters |
WO2006033377A1 (ja) * | 2004-09-24 | 2006-03-30 | Hitachi Medical Corporation | 医用画像表示装置及び方法並びにプログラム |
GB2420641B (en) * | 2004-11-29 | 2008-06-04 | Medicsight Plc | Digital medical image analysis |
EP1875435B1 (en) * | 2005-04-13 | 2013-10-02 | Koninklijke Philips N.V. | A method, a system and a computer program for segmenting a surface in a multi-dimensional dataset |
KR20080021723A (ko) * | 2005-06-02 | 2008-03-07 | 더 메디패턴 코포레이션 | 컴퓨터보조 검진을 위한 시스템 및 방법 |
US20080281182A1 (en) * | 2007-05-07 | 2008-11-13 | General Electric Company | Method and apparatus for improving and/or validating 3D segmentations |
US8588492B2 (en) * | 2007-11-20 | 2013-11-19 | Koninklijke Philips N.V. | Visualization of vascularization |
US9436798B2 (en) * | 2007-12-13 | 2016-09-06 | Koninklijke Philips N.V. | Method of retrieving data from a medical image data set |
US20090319897A1 (en) * | 2008-06-20 | 2009-12-24 | Microsoft Corporation | Enhanced user interface for editing images |
US8214766B1 (en) * | 2008-07-09 | 2012-07-03 | Adobe Systems Incorporated | Method and system for preview control for image adjustment |
JP5284863B2 (ja) * | 2009-04-30 | 2013-09-11 | 独立行政法人理化学研究所 | 画像処理装置、画像処理方法およびプログラム |
-
2012
- 2012-06-14 EP EP12732712.0A patent/EP2724317B1/en active Active
- 2012-06-14 JP JP2014516466A patent/JP6088498B2/ja active Active
- 2012-06-14 US US14/125,635 patent/US20140143716A1/en not_active Abandoned
- 2012-06-14 WO PCT/IB2012/053007 patent/WO2012176100A1/en active Application Filing
- 2012-06-14 CN CN201280030115.4A patent/CN103608842A/zh active Pending
- 2012-06-14 CN CN201910772426.1A patent/CN110555854A/zh active Pending
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1846250A (zh) * | 2003-09-03 | 2006-10-11 | 奥林巴斯株式会社 | 图像显示装置、图像显示程序、图像显示方法、记录图像显示程序的记录介质 |
CN101116109A (zh) * | 2004-09-10 | 2008-01-30 | 医学视像上市公司 | 用于ct扫描分析的用户接口 |
CN1864633A (zh) * | 2005-05-19 | 2006-11-22 | 西门子公司 | 扩大对象区域的立体图像的显示范围的方法 |
CN101046890A (zh) * | 2006-03-30 | 2007-10-03 | 西门子公司 | 用于扩展表示三维图像数据组的图像处理装置 |
CN101849248A (zh) * | 2007-10-09 | 2010-09-29 | 爱克发医疗保健公司 | 用于对数据集进行体绘制的方法和设备 |
US20090252429A1 (en) * | 2008-04-03 | 2009-10-08 | Dan Prochazka | System and method for displaying results of an image processing system that has multiple results to allow selection for subsequent image processing |
Cited By (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106716496A (zh) * | 2014-09-24 | 2017-05-24 | 皇家飞利浦有限公司 | 对解剖结构的体积图像进行可视化 |
CN106716496B (zh) * | 2014-09-24 | 2021-01-26 | 皇家飞利浦有限公司 | 对解剖结构的体积图像进行可视化 |
CN107667340A (zh) * | 2015-05-28 | 2018-02-06 | 三星电子株式会社 | 用于显示医学图像的方法和装置 |
CN106880378A (zh) * | 2015-12-03 | 2017-06-23 | 美国西门子医疗解决公司 | 用于控制医学成像的基于图像的用户界面 |
US10682122B2 (en) | 2015-12-03 | 2020-06-16 | Siemens Medical Solutions Usa, Inc. | Image-based user interface for controlling medical imaging |
CN106887000A (zh) * | 2017-01-23 | 2017-06-23 | 上海联影医疗科技有限公司 | 医学图像的网格化处理方法及其系统 |
CN106887000B (zh) * | 2017-01-23 | 2021-01-08 | 上海联影医疗科技股份有限公司 | 医学图像的网格化处理方法及其系统 |
CN111226260A (zh) * | 2017-10-20 | 2020-06-02 | 皇家飞利浦有限公司 | 分割图像 |
CN110148192A (zh) * | 2019-04-18 | 2019-08-20 | 上海联影智能医疗科技有限公司 | 医学影像成像方法、装置、计算机设备和存储介质 |
CN110148192B (zh) * | 2019-04-18 | 2023-05-30 | 上海联影智能医疗科技有限公司 | 医学影像成像方法、装置、计算机设备和存储介质 |
Also Published As
Publication number | Publication date |
---|---|
EP2724317B1 (en) | 2018-08-29 |
JP6088498B2 (ja) | 2017-03-01 |
JP2014523772A (ja) | 2014-09-18 |
CN110555854A (zh) | 2019-12-10 |
WO2012176100A1 (en) | 2012-12-27 |
EP2724317A1 (en) | 2014-04-30 |
US20140143716A1 (en) | 2014-05-22 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN103608842A (zh) | 用于处理医学图像的系统和方法 | |
US9747421B2 (en) | Multi-factor brain analysis via medical imaging decision support systems and methods | |
Bitter et al. | Comparison of four freely available frameworks for image processing and visualization that use ITK | |
EP2486548B1 (en) | Interactive selection of a volume of interest in an image | |
CN103456002B (zh) | 用于显示分割的图像的方法和系统 | |
US20050228250A1 (en) | System and method for visualization and navigation of three-dimensional medical images | |
CN103814398B (zh) | 图像处理中使用的gui中的用于多维图像的子体的状态指示器 | |
EP2761515B1 (en) | Medical image system and method | |
US20050251021A1 (en) | Methods and systems for generating a lung report | |
CN103765475A (zh) | 具有对最优断层摄影切片的自动选择的交互式实况分割 | |
EP1694208A2 (en) | Systems and methods for automated segmentation, visualization and analysis of medical images | |
JP2016530051A (ja) | 高度グラフィカルユーザインターフェースを有する放射線治療システム | |
CN105103193A (zh) | 分层的二维投影生成和显示 | |
EP1877984B1 (en) | Multi-surface modelling | |
US10188361B2 (en) | System for synthetic display of multi-modality data | |
CN103635936A (zh) | 显示多个配准图像 | |
CN103049638A (zh) | 半自动化手术前切除规划 | |
CN103079467B (zh) | 用于高级结构生成和编辑的机制 | |
Manssour et al. | Visualizing inner structures in multimodal volume data | |
Wu et al. | Toward a multimodal diagnostic exploratory visualization of focal cortical dysplasia | |
Al-Rei | Automated 3D Visualization of Brain Cancer | |
WOON | U-NET AND BOUNDARY PRESERVING BLOCK LEARNING ALGORITHMS FOR 3D BRAIN TUMOR SEGMENTATION | |
JP2023056132A (ja) | 医用画像処理装置、方法及びプログラム | |
Sowell | Modeling Surfaces from Volume Data Using Nonparallel Contours | |
Rey et al. | A novel visualizer of medical images by integrating an extensible plugin framework |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20140226 |