CN105144242B - 对图像注释进行分组 - Google Patents

Abstract

公开了一种用于对图像注释进行分组的系统。显示单元(1)被布置用于显示与对象有关的、包括对解剖目标的表示的多幅医学图像(5)。注释单元(2)被布置用于经由用户接口(4)接收关于对所述多幅医学图像的多个注释(3)的输入的信息，其中，每个注释均包括相对于所述多幅医学图像的图像的几何信息。分组单元(4)被布置用于基于所述几何信息和一套规则来检测在所述多个注释之中的一组注释，所述套规则定义属于相同目标的注释(3)的几何关系的一般性质。对所述组注释的所述检测还基于所述多幅医学图像之间的几何关系。

Description

对图像注释进行分组

技术领域

本发明涉及对图像注释进行分组，尤其是对在放射学检查中在医学图像的复查期间做出的图像注释进行分组。

背景技术

在阅读放射学检查的过程中，放射科医生能够使用计算机工作站在图像上做出注释。例如，能够对图像添加注释以可视化对由图像表示的特定目标的测量结果，或者指出感兴趣的特定结构。例如，注释能够包括诸如箭头的符号或其他符号，和/或文本串。

例如，注释可以被叠加在数字图像上，并且与图像一起被存储为位图。备选地，注释可以与原始图像一起被存储为单独的数字目标；例如，被存储为展示状态。经注释的图像的快照可以例如被存储在放射学报告文件中。

WO 2004/057439(A2)描述了一种用于在视觉上注释图像的方法和系统。据说可以在单个非易失性的便携文件中将对诸如数字医学与健康护理图像的图像的注释和备注存储在图像信息旁边的结构化向量表示中，或者可以将其存储在与图像不同的单独文件中。注释可以包括点、线和多边形绘图及文本符号、标签或定义以及标题或描述。注释可以以促进分组并操纵为用户定义的组的方式被结构化。

Muhammad Masud Tarek在2009年第12届计算机与信息技术国际会议(ICIT 2009)的论文集第477-482页发表的“Textual labeling of segmented structures in 2D CTslice views”描述了一种用于针对分割的CT图像生成外部文本标签的动态标签系统。据说，该系统利用对不同标签方面的考虑在查看2D切片的同时发现了标签的良好放置。还据说，当相同的目标在CT切片中显现多于一次时，该系统可以将相同目标的这些不同部分分组在一个标签下，这据说使输出图像更具可读性。

发明内容

具有用于对图像做出注释的改进的系统将是有利的。为了更好地解决该关心问题，本发明的第一方面提供了一种用于对图像注释进行分组的系统。所述系统包括

显示单元，其用于在显示屏上显示与对象有关的多幅医学图像，其中，所述多幅医学图像包括对至少一个解剖目标的表示；以及

注释单元，其用于从用户接收与所述多幅医学图像有关的输入，并根据所述输入来创建在所述多幅医学图像上的一个或多个注释，每个注释均包括几何信息；

分组单元，其用于检测在所述一个或多个注释之中的一组注释，所述检测包括基于一套规则来处理所述几何信息，所述一套规则定义属于单个解剖目标的注释的几何关系的性质，并且其中，对所述组注释的检测是基于所述多幅医学图像之间的几何关系的。

所述系统允许对属于相同目标的注释进行分组，即使它们被绘制在图像数据集的不同的有关的图像上。甚至有可能对在与单个患者有关的不同图像数据集的有关的图像上的注释进行分组。这对所述注释添加了结构而无需来自用户的帮助。这样的结构可以有助于使注释机中含有的信息可用，并促使对注释的自动处理和对注释的信息的自动提取。所述规则可以定义属于单个解剖目标的注释的几何关系的一般性质。例如，所述规则可以适于在特定健康护理领域中的医学图像中频繁出现的解剖目标的大小和形状。因此，所述系统基于所述规则对似乎属于相同目标的两个或更多个注释进行自动分组。

所述显示单元可以被布置用于显示对哪些注释属于所述组的指示。这是所述分组的有用应用，这是因为其允许看到哪些注释是属于一起的。此外，其允许用户验证所述分组的正确性。此外，所述系统可以在所述用户提供另外的输入时将所述指示作为即时反馈而提供给所述用户。

所述几何信息可以包括所述注释关于所述医学图像的位置和/或所述注释关于所述医学图像的取向和/或所述注释的形状。这些类型的几何信息允许使用能够用于确定所述组的高度相关的规则。

所述分组单元可以包括几何单元，所述几何单元被布置用于基于不同医学图像之间的几何关系和与所述不同医学图像相关联的至少两个注释的几何信息来确定所述至少两个注释之间的几何关系。这提供了所述分组单元的有利的实施方式选项。

所述注释单元还可以被布置用于接收时间信息，所述时间信息指示所述多个注释中的至少两个注释的输入的时间。所述分组单元可以被布置用于还基于所述时间信息来执行所述检测。这使得所述检测更加可靠，这是因为注释的创建之间的时间延迟可以是对所述注释是否属于相同目标的指示物。

所述分组单元可以包括用于基于所述几何信息来确定在第一注释周围的第一区域和在第二注释周围的第二区域的区域单元，以及用于确定所述第一区域与所述第二区域的重叠区域的重叠单元。所述分组单元可以被布置用于基于所述重叠区域的大小来执行对所述组注释的所述检测。这允许所述分组基于将所述重叠区域考虑在内的规则而被执行，其被发现为提供了针对相关规则的基础。

第一注释的几何信息可以包括对第一线的指示，并且第二注释的几何信息可以包括对第二线的指示。所述分组单元可以被布置用于基于所述第一线与所述第二线的交点的位置来检测所述第一注释和所述第二注释是否属于相同的组。定义的交点被发现为提供了用于确定注释是否属于相同的组的相关信息。

所述注释单元可以被布置用于接收关于包括文本串的文本注释以及多个非文本注释的输入的信息。每个非文本注释可以包括符号。所述分组单元可以被布置用于基于所述几何信息来检测最接近所述文本注释的非文本注释，并将所述文本注释与所述多个非文本注释中的最接近的非文本注释一起分组。这被发现是用于对文本注释与非文本注释一起分组的合适规则。

所述多幅医学图像可以包括具有已知几何关系的不同取向的重建平面。在神经学磁共振(MR)检查以及其他类型的检查中，相当标准的是，在不同取向的重建平面中做出注释。如果放射科医生想要评估例如病灶的体积，则放射科医生能够使用两个不同的重建平面来在三个维度中做出测量。相应地，根据这样的测量得到的注释可以跨这样的不同取向的重建平面而被分组。

所述多幅医学图像可以包括两个图像系列。此外，所述系统可以包括配准单元，所述配准单元用于配准所述两个图像系列以获得所述多幅医学图像之间的几何关系。正因如此，能够如同所述注释是在相同的系列上被做出的那样来应用所述套规则。例如，可以配准对相同患者做出的两个图像系列以获得所述两个图像系列之间的几何关系。可以使用所述两个图像系列之间的几何关系来对在这两个图像系列中各自的一些中做出的注释进行分组。

所述分组单元可以被布置用于基于被定位在所述多幅医学图像中的相似坐标处的注释来检测所述组注释。相应地，关于不同图像系列的对应切片做出的注释，如果所述注释被定位在所述图像之内的相似坐标处，则所述注释可以是属于一起的，并且如果所述注释还在大小和/或形状上是可比较的则尤其如此。

所述套规则可以定义属于单个临床发现的注释的几何关系的性质。

在本发明的另一方面中，一种工作站包括如本文上面所阐述的系统。

在本发明的另一方面中，提供了一种对图像注释进行分组的方法。所述方法包括

在显示屏上显示与对象有关的多幅医学图像，其中，所述多幅医学图像包括对至少一个解剖目标的表示；

从用户接收与所述多幅医学图像有关的输入，并根据所述输入来创建跨所述多幅医学图像的一个或多个注释，其中，每个注释均包括几何信息；并且

基于所述几何信息和一套规则来检测在所述多个注释之中的一组注释，所述套规则定义属于相同目标的注释的几何关系的性质，并且其中，对所述组注释的检测是基于所述多幅医学图像之间的几何关系的。

在另一方面中，本发明提供了一种包括用于令处理器系统执行所述方法的指令的计算机程序产品。

在另一方面中，可以提供一种系统，所述系统包括

显示单元，其用于在显示屏上显示至少一幅图像，其中，所述至少一幅图像包括对至少一个目标的表示；以及

注释单元，其用于从用户接收与所述至少一幅图像有关的输入，并根据所述输入来创建一个或多个注释，每个注释均包括几何信息；

分组单元，其用于检测在所述一个或多个注释之中的一组注释，所述检测包括基于一套规则来处理所述几何信息，所述套规则定义属于单个目标的注释的几何关系的性质。

在另一方面中，可以提供一种方法，所述方法包括

在显示屏上显示至少一幅图像，其中，所述至少一幅图像包括对至少一个目标的表示；

接收关于所述至少一幅图像的多个注释的输入的信息，其中，每个注释均包括相对于所述至少一幅图像的图像的几何信息；并且

基于所述几何信息和一套规则来检测在所述多个注释之中的一组注释，所述套规则定义属于相同目标的注释的几何关系的性质。

本领域技术人员应当理解，可以以被视为有用的任何方式来对本发明的以上提及的实施例、实施方式和/或方面中的两个或更多个进行组合。

本领域技术人员能够在本描述的基础上执行对所述工作站、所述方法和/或所述计算机程序产品的修改和变型，这样的修改和变型对应于所描述的对所述系统的修改和变型。

附图说明

参考附图，本发明的这些方面和其他方面将是明显的并且得到阐明。

图1是用于对图像注释进行分组的系统的图。

图2是对图像注释进行分组的方法的流程图。

图3是用于对图像注释进行分组的系统的备选实施例的图。

图4图示了在其周围具有重叠区域的两个注释。

图5图示了具有在其周围的区域的注释。

图6示出了具有若干注释的医学图像。

具体实施方式

图1图示了用于对图像注释进行分组的系统。所述系统可以在软件中或在硬件中作为专用电子电路得以实施。例如，所述软件可以被配置为在计算机工作站上运行。备选地，所述软件可以被配置为在客户端-服务器系统或任何其他分布式计算机系统上运行。所述系统可以包括显示单元1，所述显示单元1被配置为控制被发送到具有显示屏10的显示设备的输出信号。显示单元10可以被配置为在显示屏10上显示至少一幅图像5。图像5可以是从图像数据库或者从任何(例如，图像采集设备)其他源获得的。图像数据库可以是医学图像数据库，例如，图片存档与通信系统(PACS)，或健康记录系统。图像5可以是二维图像或三维图像或更高维度的图像。图像5也可以是图像系列或包括多个图像切片的图像。图像可以是放射学图像、X射线图像、计算机断层摄影(CT)图像、磁共振(MR)图像、回波描记图像，或任何其他类型的图像。图像5可以表示至少一个目标。该目标可以是解剖结构或另一种类的目标。

应当理解，尽管本发明在本文中是使用医学成像系统的范例来解释的，但是本发明不限于此。例如，本发明也可以应用于摄影图像，其中，目标是能够被摄影的任何目标。

所述系统可以包括用户接口7，所述用户接口7被配置为提供可以由用户操作的控件。这些控件可以包括可以借助于例如鼠标、键盘和/或触摸屏来操作的按钮、滑块等。用户接口4可以用于从数据库选择图像5以用于查看和注释。

所述系统还可以包括与用户接口7操作性耦合的注释单元2。注释单元2可以从用户接口7接收关于由用户对图像注释的输入的信号。具体地，用户接口7可以允许用户指出图像5中的特定位置，并在图像之内的该位置处创建注释。每个注释可以包括几何信息，例如，确定注释的位置和/或取向的一个或多个特性点或特性参数。该信息由注释单元2接收。此外，注释单元2可以接收创建了哪种类型的注释的信息，例如，注释包括哪个符号或哪些符号。注释可以包括根据位置和/或取向被叠加在图像上的符号。符号可以是箭头、线，或任何其他合适的符号。注释也可以包括文本字符或文本串。该文本也可以根据特性参数而被叠加在图像上。用户接口7(与注释单元2一起)可以允许用户利用例如在不同位置处的不同几何信息来按次序地向图像5添加注释，而不限于下一注释将被绘制在图像上的何处。注释单元2可以被配置将其生成的注释存储为多个注释3，并将多个注释3转送到分组单元4。

备选地，注释单元2可以被配置为从数据库13(例如，图像数据库)接收具有对图像5的注释的注释信息。组合也是可能的，例如，用户接口7可以用于创建新注释，所述新注释可以被注释单元2存储在数据库13中。在以后被查看时，可以从数据库13加载这些注释，并且任选地可以由用户经由用户接口7来添加新注释。来自数据库13的注释和经由用户接口7接收的新创建的注释两者都可以被组合在被转送到分组单元4的多个注释3中。

分组单元4可以被布置用于检测在多个注释3之中的一组注释6。分组单元4可以被布置用于生成指示哪些注释是属于一组的分组信息6。分组信息6可以包含识别在多个注释3之中的若干组注释的信息。分组信息6可以被存储在数据库13中。对图像的分组可以以这样的方式来执行，使得注释在它们与由图像5表示的相同目标有关时被分组。分组单元4可以包括启发式算法，以确定哪些注释属于相同目标。该启发式算法可以包括多个规则。该算法和规则可以被设计为将特定应用领域中的目标和图像的一般性质考虑在内。这样的应用领域能够是特定类型的医学图像和/或病理学。例如，乳房摄影图像包含具有不同于腿部X射线图像的特别维度的特定目标。可以通过将规则设计为将利用系统注释的目标的合适维度考虑在内来使该规则可以将该差异考虑在内。基于几何信息和定义属于相同目标的注释的几何关系的一般性质的一套规则，分组单元4检测图像中属于相同目标的注释的组。这些组可以由分组单元4以特定概率或可能性来检测。不需要具有确定性。

显示单元1可以被布置用于显示对哪些注释属于该组的指示。该指示可以借助于对注释进行着色或突出显示来执行，或者通过显示额外的符号来执行。例如，一组中的全部注释可以被显示为相同的颜色，并且其他注释可以被显示为不同的颜色。该指示可以被暂时地(例如，几秒钟)或者连续地(只要注释和图像被显示)示出。例如，只要已经在用户接口7中创建了注释并由注释单元2接收了注释，分组单元4就可以检测新创建的注释是否与一个或多个已有的注释形成一组。如果新创建的注释属于一组，则对该组的指示可以被显示单元1显示为对用户的即时反馈。用户接口7可以提供接口以使得用户能够否决由分组单元4检测到的分组。例如，用户可以指示新创建的注释不属于该组，或者用户可以指示新创建的注释实际上属于某个其他注释或已有的一组注释，如果分组单元4未检测到该组的话。

作为对被分组注释的备选显示选项，也有可能(暂时地)隐藏不属于特定组的全部注释，或者(暂时地)隐藏属于特定组的全部注释。

由显示单元1显示的所述至少一幅图像可以是多幅图像。这些图像可以在这样的意义上具有已知的几何关系：即，每幅图像的坐标能够被变换成共同的坐标系，使得不同图像中的点能够与彼此有关。这样的坐标变换定义了所述多幅图像中的图像之间的几何关系。用户接口7和注释单元2可以被配置为允许用户在所述多幅图像中的这些图像中的每幅上创建注释。分组单元4可以被布置用于还基于所述多幅图像之间的几何关系来确定该组注释。以这种方式，如果不同图像的注释与相同目标有关的话，则所述不同图像的注释可以被分组，这是因为相同目标可以在多于一幅图像中得到描绘。

分组单元4可以包括几何单元8，所述几何单元8被布置用于基于不同图像之间的几何关系以及与不同图像相关联的至少两个注释3的几何信息来确定所述至少两个注释3之间的几何关系。

注释单元2还可以被布置用于接收时间信息，所述时间信息指示所述多个注释中的至少两个注释的输入的时间。分组单元4可以被布置用于还基于时间信息来执行对图像的组的检测。例如，启发式算法可以基于两个相继注释之间的时滞的阈值来确定两幅图像属于相同的组的可能性，并且这样的启发式算法可以在两个注释是快速一个接一个地被做出时增大该可能性。

分组单元4可以包括区域单元9，所述区域单元9用于基于几何信息来确定在第一注释周围的第一区域和在第二注释周围的第二区域。这样的区域可以是包含注释的最小矩形，例如，可能具有在矩形周围的边沿(margin)。然而，其他区域也是可能的。分组单元4还可以包括重叠单元11，所述重叠单元11被布置用于确定第一区域与第二区域的重叠区域。该重叠可以通过比较第一区域与第二区域来确定。分组单元4可以被布置用于基于重叠区域的大小来执行对该组注释的检测。例如，重叠区域与第一区域和/或第二区域的大小相比的大小可以被用作判据。参考图4和图5，在该描述中的其他地方描述了区域的进一步详细的范例。

第一注释的几何信息可以包括对第一线的指示，并且第二注释的几何信息可以包括对第二线的指示。这样的线例如可以是箭头的线性延伸或线段的线性延伸。分组单元4可以被布置用于检测第一线与第二线的交点的位置。该交点可以被用作对第一注释与第二注释是否属于相同的组的指示。例如，如果交点在距注释的预定距离之内，则可以认为两个注释属于相同的组。这在两个注释为箭头并且两个箭头都指向交点时更是如此。可以使用规则使这样的考虑形式化，以决定两个注释是否属于相同的组。在图6中给出了交点的范例。

注释单元2可以被布置用于接收关于文本注释和非文本注释的输入的信息。在本文中，文本注释包括文本串，并且非文本注释包括非文本符号。分组单元4可以被布置用于将文本注释与多个非文本注释中的最接近的非文本注释一起分组。为此，分组单元4可以被布置用于基于几何信息来检测在非文本注释之中最接近文本注释的非文本注释。

如上所述，所述系统可以是医学系统，所述至少一幅图像可以包括医学图像，并且所述至少一个目标可以包括解剖目标。然而，这并不是限制。

图2图示了对图像注释进行分组的方法。所述方法可以包括显示(步骤201)、接收(步骤202)以及检测(步骤203)的步骤。更具体地，显示的步骤201可以包括在显示屏上显示至少一幅图像。该至少一幅图像可以包括对至少一个目标的表示。

步骤202可以包括接收关于对所述至少一幅图像的多个注释的输入的信息。每个注释均可以包括相对于所述至少一幅图像的图像的几何信息。

步骤203可以包括检测在多个注释之中的一组注释。该检测可以基于几何信息和一套规则，所述套规则定义属于相同目标的注释的几何关系的性质。

可以例如基于对该描述中所描述的系统的功能的描述来修改和/或扩展该方法。所述方法可以在计算机程序产品上得以实施。

图3图示了包括用于对注释进行分组的系统的成像系统的另一实施例。所述系统可以包括查看环境302，所述环境302显示来自数据库或在用户301的控制下的采集装置(未示出)的图像。所述系统可以包括分组单元307，所述分组单元307在给定一套注释和元数据的情况下基于注释的空间坐标和/或额外的背景信息来决定哪些注释指的是图像302中描绘的相同物理实体。分组单元307的输出可以包括多组注释305，每组注释指另一物理实体。归一化单元309可以被提供为将目标305的列表格式化成机器可读格式304，例如，XML，其例如可以被附到由用户301授权的报告303。

注释爬虫(crawler)306可以被配置为生成针对分组单元的输入或消费其输出。注释爬虫306可以包括被连接到图像查看环境302并检测用户是否做出注释的单元。如果检测到图像注释，则注释爬虫306可以被配置为搜集注释的空间坐标。这些空间坐标可以包括例如起点和终点。空间坐标还可以包括一系列识别符和/或切片识别符(在多切片图像系列的情况中)。注释爬虫306还可以收集其他背景信息。注释爬虫306将信息发送到系统的其他部件，例如，分组单元307。背景信息可以包括以下中的任何项：指示注释在何时被创建的时间的时间戳；用于创建图像的成像模态；被成像的身体截面；系列信息(例如，成像的平面)；被成像患者的患者人口统计资料；在其下查看图像的状况(例如，对创建注释的用户301的眼球跟踪)；被配置为分割图像的图像分割软件的输出；和/或注释行为模式。

所述系统还可以包括用户交互单元308。用户交互单元308可以被配置为接受标准化格式(机器可读格式304)的多组注释并以图形形式将其显示给用户。该单元可以被配置为提供与用户的合适交互，例如，添加描述性标签，做出校正，或者将其发送到放射学报告。

分组单元307的输入可以包括配有图像坐标的一套注释。注释可以包括以下项的信息：检查系列、图像编号(在多切片数据库的情况中，例如，CT和MR)、注释类型、被附到注释的描述性标签、注释中涉及的特性点、指示注释的创建的时间的时间戳。例如，注释类型能够是长度测量结果、椭圆形、文本、角度测量结果或者箭头。在可用时，分组单元能够配有通过二次算法导出的其他背景信息。这样的信息可以包括与从注释的特性点导出的点有关的信息(例如，线周围的最小矩形或圆)。背景信息还包括图像分割数据(例如，用于检测图像中的器官)。背景信息也能够包括由眼部跟踪软件提供的放射学目光跟踪信息(例如，用于确定放射科医生在创建多个注释的同时是否仅专注于一个区)。

信息归一化单元309可以被配置为消费所有可用的信息，并关于“帧”或其他数据结构而将其标准化，例如，XML的注释图像标记扩展。潜在的数据结构(其可以是可公开得到的或有专利权的)可以在若干概念之间进行区分，所述概念包括抽象发现(包括多个注释)和个体注释。信息归一化单元309可以被配置为通过簿记逻辑来确保注释信息或元数据中的每条都被插入在数据结构中的正确地点中。结果，寻找一条或多条信息的机器能够自动找到它。

用户交互单元308可以被配置为以直观的方式向用户显示经分组的注释，允许用户做出修改、扩展并校正被分组单元错误推理的结果。

图4图示了能够用于检测两个注释是否属于相同的组的背景信息的范例。这可以应用于图1、图2或图3的实施例。例如，考虑为线段的两个注释401和402。线段401具有端点405和406；线段402具有端点407和408。这些端点可以是注释的“特性点”的范例。不同类型的注释可以具有可以充当特性点的特定的点，其中，注释的特性点可以用于表示注释的位置、大小和/或取向。然而，注释的其他种类的参数化也是可能的。区域单元9可以被配置为确定在线段401周围的第一区域403和在线段402周围的第二区域404。重叠单元11可以被配置为确定重叠区域405，其中，重叠区域405是在其中第一区域403与第二区域404重叠的区域。

在图4的范例中，区域为具有作为对角线的线段的矩形。图5示出了在注释401周围的扩展区域501。在图5中，区域501包括具有作为其对角线的线段401的矩形403和在该矩形403周围的边沿502。然而，图4和图5仅示出了可以如何确定区域403、404、501以及它们的重叠区域405的范例。根据应用的需要，可以以许多不同的方式(例如，涉及凸包)来确定这些区域和重叠区域。

例如，图4中图示的注释401和402可以表示两个测量注释。它们可以均是通过文本注释(其在该情况中报告长度)来完成的。能够从背景源获得涉及的检查系列、图像编号以及像素。分组单元4可以基于在注释401、402周围的区域403、404的重叠405来确定这两个注释401和402是否属于(图像中示出的)相同的身体目标。

图6示出了医学图像600，所述医学图像600为多切片图像数据集的轴向切片。已经由用户输入了两个箭头注释601和602。交点603为经过箭头601和602的线的交点。该交点相对接近箭头注释601和602的箭头头部。因此，分组单元4可以决定两个箭头注释601和602属于相同的目标。能够看出，该结论是正确的，这是因为两个箭头注释601和602都指向相同的目标604。

图像600的两个线注释605和607定义两条线段。这些线段相交。应用相交线段属于相同组的规则，分组单元4检测到线注释605和607形成一组。此外，文本注释606为文本串“B：16mm”。最接近文本注释606的非文本注释为线注释605。应用将文本注释与其最接近的非文本注释一起分组的规则，分组单元4可以检测到线注释605与文本注释606形成一组。文本注释608为文本串“A：18mm”。再次应用将文本注释与其最接近的非文本注释一起分组的规则，分组单元4可以检测到线注释607与文本注释608形成一组。可以联合这些组以确定注释605、606、607和608全都都属于相同的目标。在图像中能够辨识出目标609，并且清楚的是分组单元4进行的分组是正确的。

如果系统支持图像分割，则分组单元4还能够接收分割信息，即，目标604和609的几何信息。在该情况中，可以利用与目标重叠的注释属于该目标并且因此与相同目标重叠的所有目标都属于相同组的规则来扩展该规则。

能够使用(适当优先处理的)规则的库12来实施分组单元4，所述规则的库12确定任何给定的两个或更多个注释属于相同的物理实体。这样的规则的范例包括以下：

相同图像上的两条相交线段属于相同的物理实体。

在两个注释周围的区域重叠，并且重叠区域的面积与在两个注释周围的区域的面积的总和相比超过特定阈值。在注释周围的区域能够例如是包括注释的最小矩形，该最小矩形任选地利用边沿被扩展。然而，用于定义在注释周围的区域的其他方式也是可能的，例如，注释周围的凸包。

如果在相同图像上的两个线测量结果接近(例如，1cm)，并且是在特定的时间间隔(例如，2秒)之内做出的，则它们属于相同的实体。

在彼此相距预定距离(例如，最多相距2cm)之内并且是以使得用户在对这两个注释进行绘制之间的没有查阅(consult)另一切片的方式做出的任何两个注释属于相同的物理实体。为了确定这一点，分组单元4可以监测用户接口4以确定在对两个注释的创建之间是否查阅了其他切片。

如果两个注释是接近于彼此而被做出的，在特定大小的器官(例如，器官的最大直径为2cm)上的预定距离(例如，最多1cm)之内，则它们是属于一起的。图像分割可以用于确定器官的位置和大小。

如果通过在相同图像上做出的两个箭头注释的两条线的交点被两个箭头头部所指，并且两个箭头头部距离交点在预定距离(例如，2cm)之内，则箭头注释属于相同的组。

文本注释属于最接近的非文本注释。

应当理解，以上规则仅为有用规则的范例。它们并不旨在限制本发明的范围。此外，能够为了增加的精确度而设想以上规则的布尔组合。例如，规则能够被定义为“如果两条线段相交并且它们是在5秒间隔之内做出的，则它们属于相同的物理实体”。

分组单元4也能够用于使跨图像的注释相关。在神经学磁共振(MR)检查以及其他类型的检查中，相当标准的是，注释是在不同取向的重建平面上被做出的。例如，如果放射科医生想要评估病灶的体积，则放射科医生能够使用两个不同的重建平面在三个维度中做出测量。这两个不同的重建平面可以具有已知的几何关系，使得能够使用共同的三维坐标系来识别在两个重建平面中的点。该几何关系可以是根据重建方法或者通过使用例如图像配准技术而知晓的。例如，考虑由用户做出的两个注释，一个注释是在第一重建平面中的并且一个注释是在第二重建平面中的。这些注释可以是线段或各自平面的两个点之间的距离测量结果。这样的距离测量结果也表示连接两个测量点的线段。可以设定规则以确定不同重建平面中的两个这样的注释是否属于相同的组。这样的规则可以例如评价是否存在连接两条线段并且与两条线段正交的连接线段。如果这样的连接线段存在，则规则可以规定两个注释属于相同的组。备选地，规则可以规定如果这样的连接线段存在并且与注释中的任一个或两者的线段的长度相比较连接线段的长度在预定阈值以下，则两个注释属于相同的组。两个规则都还可以规定如果两个注释的线段相交，则这两个注释也属于相同的组。

例如，当一个测量结果是在轴向平面中做出的，并且另一个是在矢状面中做出的，即，在不同取向的平面中做出的，则可以基于注释的基于体素的几何关系来确定对应于测量结果的注释是有关的，并且因此与相同的临床发现有关。相应地，注释可以是相关的，这是因为它们被检测为属于相同的组。

如果配准单元(未示出)存在以配准两个检查系列，则该套规则能够被应用为如同注释是在相同的系列中被做出的那样。例如，对相同患者做出的两个图像系列可以被配准，以获得两个图像系列之间的几何关系。可以使用两个图像系列之间的几何关系来对在这两个图像系列中各自的一个中做出的注释进行分组。

备选地，关于不同图像系列的对应切片做出的注释，如果它们被定位在图像之内的相似坐标处，则它们可以是属于一起的，并且在它们还在大小和/或形状上是可比较的时尤其是这样。

随着用户创建注释而向用户提供关于哪些注释是属于一起的即时反馈能够是特别有用的。为此，分组单元4(或307)能够被配置为在后台持久地运行。在创建新注释时，注释单元2可以触发分组单元4。如果分组单元利用一个或多个已有注释来对新创建的注释进行分组，则可以由显示单元1或查看环境302突出显示该组注释。可以在短时期内或者连续地进行该突出显示。由显示单元1或查看环境302指示对两个注释进行分组的时刻，用户能够借助于合适的用户输入(例如，利用鼠标的手势或键盘上的热键)来撤销分组。.

所述系统能够用于建立对发现的患者特异性的资源库，所述资源库是在比个体图像注释更高的等级上而被定义的。发现能够与和物理实体有关的一组注释相关联。每个发现能够通过其注释被追溯回图像坐标。能够以若干种方式来使用这样的资源库，包括有效报告、填充临床数据库、在患者表示时驱动工作流、进行对发现的分级分析，或者在抽象发现目标与图像之间的即时导航。

应当理解，本发明也应用于计算机程序，尤其是在载波上或中的、适于将本发明付诸实践的计算机程序。该程序可以为源代码、目标代码、代码中间源，以及诸如为部分编译形式的或为适合于在根据本发明的方法的实施方式中使用的任何其他形式的目标代码的形式。还应当理解，这样的程序可以具有许多不同的架构设计。例如，实施根据本发明的方法或系统的功能的程序代码可以被细分成一个或多个子例程。在这些子例程之中分布功能的许多不同方式对本领域技术人员将是明显的。该子例程可以一起被存储在一个可执行文件中以形成自含程序。这样的可执行文件可以包括计算机可执行指令，例如，处理器指令和/或解读器指令(例如，Java解读器指令)。备选地，该子例程中的一个或多个或全部可以被存储在至少一个外部库文件中，并且例如在运行时间处与主程序静态或动态地链接。主程序包含对子例程中的至少一个的至少一个调用。子例程也可以包括对彼此的调用。与计算机程序产品有关的实施例包括与本文中阐述的方法中的至少一个的每个处理步骤相对应的计算机可执行指令。这些指令可以被细分成子例程和/或被存储在可以被静态或动态地链接的一个或多个文件中。与计算机程序产品有关的另一实施例包括与本文中阐述的系统和/或产品中的至少一个中的每个单元对应的计算机可执行指令。这些指令可以被细分成子例程和/或被存储在可以被静态或动态地链接的一个或多个文件中。

计算机程序的载体可以是能够承载程序的任何实体或设备。例如，载体可以包括存储介质，例如，ROM(例如，CD ROM或半导体ROM)或者磁性记录介质(例如，闪盘驱动器或硬盘)。此外，载体可以是可传输载体，例如，电信号或光学信号，它们可以经由电缆或光缆或通过射频或其他手段而被传送。当程序被实施在这样的信号中时，载体可以由这样的线缆或其他设备或单元构成。备选地，载体可以是程序被嵌入其中的集成电路，该集成电路适于执行相关方法，或被使用在对相关方法的执行中。

应当指出，上文提及的实施例说明了本发明而非限制了本发明，并且本领域技术人员将能够设计出许多备选实施例，而不偏离权利要求的范围。在权利要求中，被置于括号中的任何附图标记均不应被解释为对权利要求的限制。动词“包括”及其词形变化的使用不排除除了权利要求中记载的那些以外的其他元件或步骤的存在。元件前面的词语“一”或“一个”不排除多个这样的元件的存在。本发明可以借助于包括若干不同元件的硬件并且借助于适当编程的计算机来实施。在列举了若干单元的装置权利要求中，这些单元中的若干可以通过一个且同一项硬件来实施。在互不相同的从属权利要求中记载的特定措施的事实并不指示不能有利地使用这些措施的组合。

Claims (15)

1.一种用于对图像注释进行分组的系统，包括

显示单元(1)，其用于在显示屏(10)上显示与对象有关的多幅医学图像(5)，其中，所述多幅医学图像(5)包括对至少一个解剖目标的表示；以及

注释单元(2)，其用于从用户接收与所述多幅医学图像有关的输入，并根据所述输入来创建跨所述多幅医学图像的一个或多个注释(3)，每个注释均包括几何信息；

分组单元(4)，其用于检测在所述一个或多个注释之中的一组注释，所述检测包括基于一套规则来处理所述几何信息，所述套规则定义属于单个解剖目标的注释(3)的几何关系的性质，并且其中，对所述组注释的检测是基于所述多幅医学图像之间的几何关系的。

2.根据权利要求1所述的系统，其中，所述显示单元(1)被布置用于显示对哪些注释属于所述组的指示。

3.根据权利要求1所述的系统，其中，所述几何信息包括所述注释相对于所述至少一幅医学图像的位置和/或所述注释关于所述至少一幅医学图像的取向和/或所述注释的形状。

4.根据权利要求1所述的系统，其中，所述分组单元(4)包括几何单元(8)，所述几何单元用于基于图像数据集的不同医学图像之间的几何关系和与所述不同医学图像相关联的至少两个注释(3)的几何信息来确定所述至少两个注释之间的几何关系。

5.根据权利要求1所述的系统，

其中，所述注释单元(2)还被布置用于接收时间信息，所述时间信息指示所述多个注释中的至少两个注释的输入的时间，并且

其中，所述分组单元(4)被布置用于还基于所述时间信息来执行所述检测。

6.根据权利要求1所述的系统，

其中，所述分组单元(4)包括用于基于所述几何信息来确定在第一注释周围的第一区域和在第二注释周围的第二区域的区域单元(9)，以及用于确定所述第一区域与所述第二区域的重叠区域的重叠单元(11)，并且

其中，所述分组单元(4)被布置用于基于所述重叠区域的大小来执行对所述组注释的所述检测。

7.根据权利要求1所述的系统，其中，第一注释的所述几何信息包括对第一线的指示，并且第二注释的所述几何信息包括对第二线的指示，并且其中，所述分组单元(4)被布置用于基于所述第一线与所述第二线的交点的位置来检测所述第一注释和所述第二注释是否属于相同的组。

8.根据权利要求1所述的系统，其中，所述注释单元(2)被布置用于接收关于包括文本串的文本注释以及多个非文本注释的输入的信息，其中，每个非文本注释包括符号，并且其中，所述分组单元(4)被布置用于基于所述几何信息来检测最接近所述文本注释的非文本注释，并将所述文本注释与所述多个非文本注释中最接近的非文本注释一起分组。

9.根据权利要求1所述的系统，其中，所述多幅医学图像包括具有已知几何关系的不同取向的重建平面。

10.根据权利要求1所述的系统，其中，所述多幅医学图像包括两个图像系列，并且其中，所述系统还包括配准单元，所述配准单元用于配准所述两个图像系列，以获得所述多幅医学图像之间的所述几何关系。

11.根据权利要求10所述的系统，其中，所述分组单元(4)被布置用于基于被定位在所述多幅医学图像中的相似坐标处的注释来检测所述组注释。

12.根据权利要求1-11中的任一项所述的系统，其中，所述套规则定义属于单个临床发现的注释的几何关系的性质。

13.一种包括根据权利要求1所述的系统的工作站。

14.一种对图像注释进行分组的方法，包括

在显示屏上显示(201)与对象有关的多幅医学图像，其中，所述多幅医学图像包括对至少一个解剖目标的表示；

从用户接收(202)与所述多幅医学图像有关的输入，并根据所述输入来创建跨所述多幅医学图像的一个或多个注释，每个注释均包括几何信息；并且

检测(203)在所述一个或多个注释之中的一组注释，包括基于一套规则来处理所述几何信息，所述套规则定义属于单个解剖目标的注释(3)的几何关系的性质，并且其中，对所述组注释的检测是基于所述多幅医学图像之间的几何关系的。

15.一种包括指令的存储介质，所述指令用于令处理器系统执行根据权利要求14所述的方法。