CN108475532B - 医学报告装置 - Google Patents

医学报告装置 Download PDF

Info

Publication number
CN108475532B
CN108475532B CN201680077149.7A CN201680077149A CN108475532B CN 108475532 B CN108475532 B CN 108475532B CN 201680077149 A CN201680077149 A CN 201680077149A CN 108475532 B CN108475532 B CN 108475532B
Authority
CN
China
Prior art keywords
frames
sequence
subset
medical
frame
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201680077149.7A
Other languages
English (en)
Other versions
CN108475532A (zh
Inventor
V·M·A·奥夫雷
R·I·M-B·戈里奥
R·弗洛朗
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Koninklijke Philips NV
Original Assignee
Koninklijke Philips NV
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Koninklijke Philips NV filed Critical Koninklijke Philips NV
Publication of CN108475532A publication Critical patent/CN108475532A/zh
Application granted granted Critical
Publication of CN108475532B publication Critical patent/CN108475532B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00—ICT specially adapted for the handling or processing of medical images
    • G16H30/20—ICT specially adapted for the handling or processing of medical images for handling medical images, e.g. DICOM, HL7 or PACS
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/48—Diagnostic techniques
    • A61B6/481—Diagnostic techniques involving the use of contrast agents
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/50—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment specially adapted for specific body parts; specially adapted for specific clinical applications
    • A61B6/504—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment specially adapted for specific body parts; specially adapted for specific clinical applications for diagnosis of blood vessels, e.g. by angiography
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H15/00—ICT specially adapted for medical reports, e.g. generation or transmission thereof
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00—ICT specially adapted for the handling or processing of medical images
    • G16H30/40—ICT specially adapted for the handling or processing of medical images for processing medical images, e.g. editing
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
    • A61B6/46—Arrangements for interfacing with the operator or the patient
    • A61B6/467—Arrangements for interfacing with the operator or the patient characterised by special input means
    • A61B6/468—Arrangements for interfacing with the operator or the patient characterised by special input means allowing annotation or message recording
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H10/00—ICT specially adapted for the handling or processing of patient-related medical or healthcare data
    • G16H10/60—ICT specially adapted for the handling or processing of patient-related medical or healthcare data for patient-specific data, e.g. for electronic patient records

Landscapes

  • Health & Medical Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Medical Informatics (AREA)
  • Public Health (AREA)
  • General Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Radiology & Medical Imaging (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Primary Health Care (AREA)
  • Epidemiology (AREA)
  • Surgery (AREA)
  • High Energy & Nuclear Physics (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Molecular Biology (AREA)
  • Physics & Mathematics (AREA)
  • Animal Behavior & Ethology (AREA)
  • Pathology (AREA)
  • Optics & Photonics (AREA)
  • Veterinary Medicine (AREA)
  • Biomedical Technology (AREA)
  • Biophysics (AREA)
  • Vascular Medicine (AREA)
  • Dentistry (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Apparatus For Radiation Diagnosis (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Medical Treatment And Welfare Office Work (AREA)

Abstract

在诸如血管造影的医学介入期间，(例如被安装在C型臂上的)X射线检查仪器随着其工作进展而产生大量的介入成像帧。这些信息包含可能有效用于改进介入的医学报告的帧序列。这些序列将包含含有类似的临床信息的序列，尽管这些帧可能被认为是冗余的并且不适合被包括在医学报告中。本文详述的各方面使得能够在介入期间基于从图像序列和/或其他医学仪器获得的情境信息来选择非冗余序列和/或帧。通过这种方式，能够去除原始帧序列中固有的冗余，从而留下准备好的候选序列的集合以用于插入多媒体医学报告或文件医学报告中。

Description

医学报告装置
技术领域
本发明涉及用于计算机辅助医学报告提供的装置、用于计算机辅助医学报告提供的方法、被配置用于医学报告的系统、计算机程序单元，以及计算机可读介质。
背景技术
医学介入(例如，血管造影)涉及广泛的诊断步骤和介入步骤。以医学报告的形式正确记录这些步骤非常重要。在报告中呈现结果的直观方式是图形格式。然而，在导管插入实验室的时间密集型环境中，医学专业人员难以从成像仪器下载并提取带有有用信息的图像。另外，一些临床信息只能以动态格式进行传送，手动编辑对应视频的工作量更大。
因此，如所期望的那样，介入后的临床报告通常不会包含尽可能多的多媒体或成像内容。
Sanborn等人在2014年的美国心脏病学会杂志上发表的美国质量委员会报告的文件“Health Policy Statement on Structured Reporting for the CardiacCatheterization Laboratory”(ISSN 0735-1097，第63卷，第23期)中讨论了有关医学报告的问题。
发明内容
因此，具有用于在医学流程期间提供改进的流程内报告的技术将是有利的。
本发明的目的通过独立权利要求的主题来解决，其中，进一步的实施例被包含在从属权利要求中。
参考下文描述的实施例，本发明的这些方面和其他方面将变得明显并且得到阐明。
根据第一方面，提供了一种用于计算机辅助医学报告提供的装置。所述装置包括：
-处理单元。
所述处理单元被配置为接收从C型臂成像系统获得的表示患者的感兴趣区域的帧序列，以生成从来自医学仪器的物件的输入和所述C型臂成像系统的取向信息导出的情境信息。
所述处理单元还被配置为生成情境信息，其中，所述情境信息包括从以下获得的取向信息：(i)所述C型臂成像系统的方位角和仰角，或者(ii)应用于来自所述C型臂的所输入的图像序列的图像内容的图像处理算法。
帧聚类条件包括取向条件。
所述帧序列的帧被索引到所述情境信息，以生成所述帧序列的所述帧的至少一个代表性子集。
通过将所述帧序列的帧的所述情境信息与至少一个帧聚类条件进行比较来从所述帧序列中选择所述至少一个代表性子集的帧，以使用针对所述至少一个代表性子集定义的选择参数来选择所述至少一个代表性子集的所述帧的至少一个另外的子集，并且输出包括帧的所述另外的子集的多媒体报告或文件报告。
第一方面的效果在于：通过省略可能包含医学介入(例如，导管插入)的冗余信息的帧和/或帧子集，可以自动减少在医学介入期间获得的输入帧序列的高信息内容。因此，汇编多媒体报告或文件报告的过程得到简化。
根据第一方面的实施例，所述处理器还被配置为接收医学成像仪器的所述物件的取向信息，其中，所述情境信息包括所述取向信息，并且其中，所述帧聚类条件包括取向条件。
该实施例的效果在于：可以使用关于用于获得医学图像的仪器的取向的信息来进一步增强对帧序列的选择，该信息通常与图像内容高度相关。
根据第一方面的实施例，提供了如上所述的装置。所述处理器还被配置为接收包括关于与医学流程的阶段相联系的事件的信息的事件信号，并且被配置为使用所述事件信号来生成流程状态指示。所述情境信息还包括所述流程状态指示，并且，所述至少一个代表性子集的帧是基于所述流程状态指示和所述至少一个帧聚类条件从所述帧序列中选择的。
该实施例的效果在于：可以基于外部刺激来推断医学流程的阶段。
根据第一方面的实施例，在根据先前描述的装置中，所述事件信号是球囊膨胀状态信号。
该实施例的效果在于：可以通过识别球囊的球囊膨胀事件来跟踪医学流程的状态。
根据第一方面的实施例，所述处理器还被配置为接收来自患者监测设备的输出信号的测量设备活动参数，其中，所述情境信息还包括所述测量设备活动参数。所述至少一个代表性子集的所述帧是基于所述测量设备活动参数的存在来选择的，并且所述多媒体报告或文件报告包括来自所述测量仪器的、被显示在帧的所述另外的子集附近的测量结果。
该实施例的效果在于：与相关医学报告信息相关联的帧子序列或医学图像的提供得到简化。
根据第一方面的实施例，所述处理器还被配置为通过识别所述帧序列的帧中表示的特定动脉系统来对所述帧进行分类，从而为所述帧序列的帧提供动脉系统分类。所述情境信息还包括所述动脉系统分类，其中，所述帧聚类条件包括动脉系统分类参数。所述至少一个代表性子集的所述帧是基于每个帧的所述动脉系统分类与所述动脉系统参数的比较来选择的。
该实施例的效果在于：当医学仪器的取向不改变时，可以检测导管从一个动脉分支到另一个动脉分支的移动。这能防止错误创建报告序列或图像，例如，从相同的取向观察的右冠状动脉分支和左冠状动脉分支将被错误地视为是同一动脉分支的检查。这避免了生成不完整概述的风险，在所述不完整概述中，从不同角度显示左冠状动脉分支或右冠状动脉分支的相关序列将被忽略。
根据第一方面的实施例，所述处理器还被配置为计算针对所述帧的所述至少一个代表性子集中的多个帧的造影剂质量度量。所述选择参数是注射质量参数，并且所述帧的所述至少一个另外的子集的帧是基于所述造影剂质量度量与所述注射质量参数的比较来选择的。
该实施例的效果在于：可以通过确保在图像的另外的子集中仅存在注射质量良好的图像或者通过选择良好注射的图像以及在给定的持续时间内的后续图像来进一步减少所报告的另外的子集中的冗余信息的量。这意味着可以有效记录造影剂注射后的肌肉-血液灌注。在另外的子集是一幅图像的情况下，选择具有最佳造影剂质量的图像。
该实施例的另一个效果在于：当至少一个代表性子集包括被聚类在一起的不同序列时(例如利用取自相同成像系统取向、相同动脉系统和相同检查阶段的帧)，另外的子集能够被减少到这些图像中的最佳注射的图像。
根据第一方面的实施例，所述处理器还被配置为计算针对所述帧的所述至少一个代表性子集的多个帧的球囊膨胀进展度量。所述选择参数是球囊膨胀程度度量，并且，所述帧的所述至少一个另外的子集的帧是基于所述球囊膨胀进展度量与所述球囊膨胀程度度量的比较来选择的。
该实施例的效果在于：在采集对应于连续的球囊膨胀的一系列序列的情况下，通过确保在多媒体报告或文件报告中仅显示具有相关球囊膨胀状态的帧，可以进一步减少所报告的帧视频序列的冗余信息内容。
任选地，所述处理单元还被配置为生成从以下导出的情境信息：(i)所述帧序列和(ii)来自医学仪器的物件的输入。
根据第二方面，提供了一种用于使用C型臂成像系统的计算机辅助医学报告提供的方法。所述方法包括：
a)接收从C型臂成像系统获得的表示患者的感兴趣区域的帧序列；
b)生成情境信息，所述情境信息包括从以下获得的取向信息：(i)所述C型臂成像系统的方位角和仰角，或者(ii)应用于来自所述C型臂的所输入的图像序列的图像内容的图像处理算法；
其中，所述帧序列的帧被索引到所述情境信息；
c)生成(34)所述帧序列的所述帧的至少一个代表性子集，
其中，所述至少一个代表性子集的帧是通过将所述帧序列的帧的所述情境信息与至少一个帧聚类条件进行比较从所述帧序列中选择的，其中，所述帧聚类条件包括取向条件；
d)使用针对所述至少一个代表性子集定义的选择参数来选择(36)所述至少一个代表性子集的所述帧的至少一个另外的子集；并且
e)输出(38)包括帧的所述另外的子集的多媒体报告或文件报告。
第二方面的效果在于：可以提供包含减少(或零)数量的冗余帧的医学流程的多媒体报告或文件报告，同时保留具有临床意义的帧。因此，能够减少多媒体报告或文件报告的数据大小，同时保留有用的图像。还节省了医学专业人员生成报告的时间，因为不需要手动搜索图像序列。
根据第二方面的实施例，所述方法还包括：
a1)接收医学成像仪器的所述物件的取向信息；
其中，在步骤b)中，所述情境信息包括所述取向信息；并且
其中，在步骤c)中，所述帧聚类条件包括取向条件。
根据第二方面的实施例，提供了如前所述的方法，还包括以下步骤：
a2)接收包括关于与医学流程的阶段相联系的事件的信息的事件信号；
b1)使用所述事件信号来生成流程状态指示；
并且其中，在步骤c)中，所述至少一个代表性子集的所述帧是基于所述流程状态指示和所述至少一个帧聚类条件从所述帧序列中选择的。
根据第二方面的实施例，所述方法还包括：
c1)计算针对所述帧的所述至少一个代表性子集的多个帧的造影剂质量度量；
其中，在步骤d)中，所述选择参数是注射质量参数，并且所述帧的所述至少一个另外的子集的所述帧是基于所述造影剂质量度量与所述注射质量参数的比较来选择的。
根据第三方面，提供了一种被配置用于医学报告的系统。所述系统包括：
-C型臂成像系统，
-根据第一方面或其实施例所述的装置，以及
-显示布置。
所述C型臂成像系统被配置为生成帧序列。
所述装置被通信性地耦合到所述C型臂成像系统和所述显示布置，并且其中，在操作中，所述装置从所述C型臂成像系统接收所述帧序列以及方位角信号和仰角信号，并且输出包括所述帧序列的帧的子集的多媒体报告或文件报告。
根据本发明的第四方面，提供了一种用于医学报告的计算机程序单元，其包括指令，当所述计算机程序单元由处理单元运行时，所述指令适于执行根据第二方面或其实施例中的一个所述的方法的步骤。
根据本发明的第五方面，提供了一种存储了根据第四方面所述的计算机程序单元的计算机可读介质。
在以下描述中，术语“计算机辅助医学报告提供”意指针对医学专业人员的关注而至少部分地自动提供文件(或多媒体呈现)，其使用由医学成像设备(例如，X射线荧光检查设备或血管造影设备)获得的视频序列和/或静止图像来简要地概述医学介入的关键事件。视频序列包含很少的冗余信息或不包含冗余信息。
在以下描述中，术语“取向信息”是指医学检查的空间背景，例如，心脏导管插入。实际上，它是允许确定通过患者的感兴趣区域的成像仪器的物件的视线方向的信息。例如，取向信息可以是C型臂成像系统的方位角和仰角。这样的信号能够从C型臂的电子位置控制信号中获得，或者备选地可以基于应用于输入的图像序列的图像内容的图像处理算法来计算。
在以下描述中，术语“动脉系统分类”是指跟踪正在利用介入仪器检查动脉系统的哪个分支的动脉系统模型的状态。例如，在恒定的取向下，感兴趣区域的视图可能涉及导管进入左冠状动脉分支，然后是右冠状动脉分支，并在两个分支中执行血管造影。这种情况会产生不同的临床信息，即使在恒定的取向下。因此，可以使用例如脊形过滤器跟踪正在研究的动脉分支以识别正在检查的相关动脉分支。
在以下描述中，术语“流程状态指示”是指医学检查的基于时间的背景。一个简单的范例是球囊膨胀是一种事件信号，其能够用于将输入的序列分类为介入前子序列和介入后子序列。多个这样的膨胀能够将输入的图像序列分成多个子序列，每个子序列表征介入的独特阶段。
在以下描述中，术语“情境信息”意指可从导管插入实验室中通常可用的仪器获得的刺激，其可以单独地或组合地提供关于医学成像中的输入序列的帧的信息。
在范例中，情境信息可以是(i)取向信息和(ii)流程状态指示的组合。然而，基于导管插入实验室的特定设置，许多其他这样的信号将是可用的，并且所有这样的信号都可用于提供情境信息。
“帧聚类条件”是帧序列中的多个连续帧共同具有的性质，允许帧序列被分解成表示介入的不同阶段的帧聚类。各种各样的刺激能够用于生成帧聚类条件，例如，医学成像仪器取向。它使得能够对显示相同视图的帧序列的帧进行分组(例如，以相同的取向显示的相同的动脉分支)。
流程状态指示使得能够基于情境信息来分离输入的帧序列。因此，能够从输入的帧序列中去除冗余信息。冗余信息的范例是，当几幅血管造影照片是由心脏组成时，每幅血管造影照片都来自相同取向，在相同的动脉分支中并且在流程的相同阶段处。这些序列中只有一个序列需要保存，剩下的都是冗余的。
在以下描述中，术语“代表性子集”意指共享公共情境信息状态的输入的序列的帧的子集，其中，公共情境信息状态在另外的代表性子集中并不重复。
在以下描述中，术语“另外的子集”意指已经被选择用于最优呈现在代表性子集的帧中捕捉的事件的代表性子集的帧的子集。在关于血管造影的范例中，另外的子集能够是代表性子集的这样的一个帧：其显示具有最高质量造影剂暴发的帧。在另一范例中，另外的子集可以是显示造影剂的短暂释放的帧序列，其准确地概述了血管中的液体流动。在另一范例中，另外的子集可以是代表性子集的这样的一个帧：其显示最大膨胀时的球囊或者在刚刚紧缩之后的球囊，以使得能够准确地概述和报告支架的放置。
在以下描述中，术语“造影剂质量度量”是指在帧中可见多少造影剂的量度。注射造影剂后不久，血管可能会饱和(存在100％的造影剂)。几秒钟之后，造影剂的扩散可以是这样的：即在管腔中仅可见到一小部分造影剂。在这样的第二种情况下，不能辨别足够的管腔细节，因此这种状态可以被分配为存在10％的造影剂。这个度量可以使用公知的图像处理技术来计算。
在以下描述中，术语“注射质量参数”是指造影剂在管腔内分布的质量。例如，质量差的注射能够任选地被分类为在管腔中出现造影剂的“条纹”的注射。从这样的“条纹”中不能可靠地观察到管腔形状信息。例如，能够使用空间图像过滤器来确定这样的“条纹”的存在。
在以下描述中，术语“选择参数”意指使得能够选择帧的另外的子集中的帧或帧系列的变量。能够理解，有许多事件可能影响对这样的帧的选择。第一个范例是监测支架放置期间血管内球囊膨胀的程度。在这种情况下，选择参数是从视频或从医学仪器获得的硬件信号(例如，压力)确定的球囊膨胀程度的百分比。当球囊膨胀率在90％至100％的范围内时，帧可以被输入到“另外的子集”中。选择参数的第二个范例是被注射到管腔中的造影剂的密度。帧可以被输入到“另外的子集”中，在造影剂释放点的时刻开始，并且在检测到造影剂扩散时结束。
在以下描述中，术语“动脉系统分类参数”是指跟踪动脉树中的介入设备。在简单的范例中，动脉系统分类参数可以指冠状动脉树的“左分支”或“右分支”。
所讨论的技术至少适用于捕捉血管造影和荧光检查的输入的帧序列。在血管造影的情况下，例如，认为冗余帧至少包括显示相同的取向、动脉系统分类和流程状态的那些子序列。在荧光检查子序列的情况下，输入的帧序列中的大多数帧将是冗余的，除了偶尔的球囊膨胀操作和结果的“关键图像”以外，其任选地与相关测量结果一起呈现。
因此，简化的解释是提供关于导管插入的整体情境的信息的一系列刺激信号使得能够从输入的帧序列中隔离帧的第一集合。这被最佳地认为是“聚类步骤”，其中，基于例如检查阶段(诊断、介入、结果控制)和采集条件(系统几何结构和/或正在检查的动脉系统)对序列进行分组。然后，能够在“原型设计步骤”中进一步选择图像相关性，所述“原型设计步骤”对于每个聚类由指定表示该聚类的高质量的帧的子集(例如“最佳注射血管造影照片”)组成。能够利用组的输出及其原型来提供介入的简明摘要。因此，所描述的技术提出自动选择与记录介入的某些方面相关的医学图像序列(例如，X射线序列)，同时去除冗余帧。
附图说明
将参考以下附图来描述本发明的示范性实施例：
图1示出了根据第三方面的被配置用于医学报告的系统。
图2示出了根据第二方面的用于计算机辅助医学报告提供的方法。
图3示出了根据所讨论的方面所采用的冗余度降低方法的功能的概述。
图4示出了使用C型臂的典型医学介入的“取向空间”。
图5示出了用于选择表示血管造影照片的另外的子集的帧的示范性方法。
图6示出了根据第一方面的装置。
具体实施方式
对医学介入的一个重要后续措施是提供一份详细说明检查的重要阶段的报告。现代医学成像仪器在整个医学介入期间提供大量的帧。目前的情况是，医学成像设备的输出报告出比实际情况相比少得多的信息。
这种情况的一个潜在的原因可能是，为了获得合适的图示来概述整个医学流程，医学专业人员搜索大量图像是重复性的且耗时的。报告还可以被呈现为多媒体演示文稿(例如，内联网网页)，使得能够使用视频片段。然而，将整个介入序列加载到视频编辑仪器中以找到合适的帧是麻烦的。
在多媒体报告中不包括短视频片段会失去机会。定性现象(例如，动脉中的血流、可疑的狭窄，以及血液灌注进入心肌)都可以用动态血管造影序列很好地表征。
以下描述中的讨论集中于产生用于处置冠状动脉狭窄的PTCA(经皮腔内冠状动脉血管成形术)的多媒体报告或文件报告的情况，其中，使用具有X射线成像仪器的C型臂获得流程的医学视频。该技术适用于许多其他的医学视频成像场景，例如，咽喉、胃或肺的内窥镜检查，经主动脉血管介入治疗(TAVI)和神经介入治疗。
典型的血管造影照片通常持续5至20秒，并且成像仪器可以提供1至150帧/秒(通常为15帧/秒)的脉管系统的图像。这意味着典型的血管造影通常包含75帧。
典型的介入涉及大约10次血管造影，另外，能够产生持续10至30秒的荧光图像序列。要搜索的帧数将会快速增加。这使得手动搜索帧非常耗时。另外，许多血管造影序列取自相同的取向。从相同取向取得的这样的多个序列能够被认为是“冗余的”，因为在患者的临床状况在其采集之间未被修改的情况下，这样的多个序列含有与取自该取向的第一次血管造影相同的解剖信息。例如，可以通过使用球囊部署支架来修改临床状况。删除这样的冗余帧是可取的。
另一种冗余与非冗余帧序列的质量有关。一旦冗余的帧被去除，血管造影序列就将包含由于造影剂的不完全扩散造成的不锐利地显示血管的帧。这样的空血管造影照片通常对医学报告没有用。因此，例如通过选择具有良好血管边界性质的非冗余血管造影照片帧，能够进一步压缩报告的序列的大小。
现代导管实验室中的各种技术仪器提供了机会，因为这样的仪器通常是数字化的，并且经由开放的通信接口持续提供数字输出和更新。随着医学介入的工作进展，这些技术仪器的物件的输出将发生变化，从而使得能够自动推断关于医学流程的阶段的情境。该信息能够用于从介入中去除冗余的图像。
图1图示了导管实验室10。它包括支撑C型臂14的天花板导轨12。C型臂包括X射线源20和探测器22，探测器22被布置为对被支撑在床26上的对象24(例如，患者)的感兴趣区域进行成像。C型臂的轴承使得C型臂以及因此探测器和源能够被移动通过方位角θ和仰角φ。可以通过监测从C型臂控制装置发送的C型臂位置控制信号来电子跟踪C型臂的角度。提供C型臂取向信息的位置控制信号可以被提供给处理单元28以供进一步使用。这些信息能够用作医学介入的情境信息。
C型臂的X射线探测器22检测被施加到感兴趣区域24中的物件的X射线，作为X射线成像序列的帧。这些帧可以使用处理器28进行收集和记录，并被存储以供进一步使用。
导管插入实验室还包含对提供情境信息有用的其他仪器物件。尽管这些物件在图1中未被图示出，但是这样的物件可以提供指示造影剂正被注射到患者体内的信号。这些信号可以作为情境信息来供应。可以在介入的特定时刻处部署某些测量技术，例如，血流储备分数测量(FFR)、光学相干断层摄影(OCT)和血管内超声(IVUS)，从而提供关于医学流程的阶段的更多情境信息。所有这些信息可以由处理装置28通过适当的电子接口进行收集，并且被及时索引到由X射线探测器输出的帧。
图2示出了根据本发明的第二方面的用于计算机辅助医学报告提供的方法。所述方法包括以下步骤：
a)接收(30)从医学成像设备获得的表示患者的感兴趣区域的帧序列；
b)生成(32)从来自医学仪器的物件的输入导出的情境信息；
其中，所述帧序列的帧被索引到所述情境信息；
c)生成(34)所述帧序列的所述帧的至少一个代表性子集，
其中，所述至少一个代表性子集的帧是通过将所述帧序列的帧的所述情境信息与至少一个帧聚类条件进行比较从所述帧序列中选择的；
d)使用针对所述至少一个代表性子集定义的选择参数来选择(36)所述至少一个代表性子集的所述帧的至少一个另外的子集；并且
e)输出(38)包括帧的所述另外的子集的多媒体报告或文件报告。
这种效果在于：可以对输入的图像序列进行过滤以去除冗余的图像序列，仅留下包含具有临床重要性的独特信息和/或图像的序列。然后可以转发结果得到的较短序列和/或静止图像的集合以创建多媒体报告或文件报告。作为另一个考虑因素，存储报告中使用的图像和/或视频所需的总的存储器因此显著减少，使得能够高效地记录医学介入。
图3图示了第二方面的整体操作。该方法可以在例如个人计算机或其他合适的处理装置中实施。该方法可以在图像流和情境信息上“实况”运行，或者备选地可以被存储在数据载体上，或者通过计算机网络被传送，并且在远程计算机上“离线”运行。
在图3中，图示了帧40的序列S，其在被按顺序播放时提供被成像的医学流程的视频，例如，串联在一起的一系列血管造影序列和/或荧光检查序列。在t＝0至t＝T的时间间隔上记录帧。该序列的收集频率不需要是规则的，因为可以以高频率或低频率执行血管造影过程以控制患者对X射线的暴露。所接收的帧形成具有成员(i1…,in,…iN,∈S)的集合S。提供情境信息41，其使得能够做出对帧的代表性子集的选择。在该范例中，情境信息包括被索引到输入序列的每个帧的依赖时间的取向信息(θ(t),φ(t))以及流程状态参数x(t)。
在图3的范例中，输入序列已经被分成诊断帧C1的第一代表性子集42、介入帧C2的第二代表性子集44和结果控制帧C3的第三代表性子集46。应当理解，可以生成针对任何介入阶段的代表性帧的许多集合。C1、C2和C3可以是S的非重叠子集——换句话说，如果一个帧出现在C1中，那么它将不会出现在代表性帧的其他子集中(如图3中的符号所示)。
备选地，C1、C2和C3中的一个或多个可以是S的重叠子集。
在第一流程状态x(1)处，使用被包括在情境信息中的取向信息(θ(t),φ(t))导出第一代表性子集C1。基于包括第二流程状态x(2)的情境信息导出第二代表性子集C2。基于包括第三流程状态x(3)的情境信息导出第三代表性子集C3。C1、C2和C3之间的取向通常会改变。
在图3中图示的情况下，使用第一代表性子集、第二代表性子集和第三代表性子集来生成第一另外的子集48、第二另外的子集50和第三另外的子集52，从而产生输出序列(或帧)Q1、Q2和Q3。每个另外的子集的帧的选择可以基于相同或不同的选择参数。
能够针对每个特定的代表性子集来优化对选择参数的选择。如果代表性子集C1和C3指代血管造影序列，则可以基于例如第一代表性子集和第二代表性子集中的最佳质量造影剂暴发的一个或多个帧来选择Q1和Q3的帧作为第一另外的子集和第二另外的子集。造影剂暴发常常用于诊断和结果控制序列。
备选地，代表性子集C2是荧光检查序列的帧。在这种情况下，例如基于诸如球囊膨胀信号的事件信号来选择第三另外的子集Q2的帧，以记录示出支架部署的单个帧。
所选择的第一子集、第二子集和第三子集可以以如下形式输出：多媒体报告56(例如，Microsoft PowerPoint(TM)演示文稿)、专有安全内部网或安全互联网门户、或使得能够查看第一另外的子集、第二另外的子集和第三另外的子集的另一格式。在第一另外的子集、第二另外的子集和第三另外的子集已经被组装而使得每个另外的子集构成一个帧的情况下，报告可以以文件报告(其中，子集帧是静态图像)的形式输出，例如，以便携式文件格式(TM)。可以在报告58旁边提供相关的临床信息。
根据实施例，帧聚类条件识别情境信息的独特组合。
任选地，情境信息是从以下导出的：(i)帧序列和/或(ii)来自医学仪器的物件的输入。
任选地，情境信息是从医学仪器的物件的数据输出接收的数据。
任选地，帧的序列是从单个视频源获得的，使得帧序列是连续的不间断序列。
根据第二方面的实施例，提供了根据第二方面所述的方法，还包括步骤a1)：
a1)接收医学成像仪器的物件的取向信息；
其中，在步骤b)中，所述情境信息包括所述取向信息；并且
其中，在步骤c)中，所述帧聚类条件包括取向条件。
在实施例中，取向信息是从C型臂医学成像系统的取向信号中导出的。
例如，可以使用经典的无监督聚类来进行推导。这是指算法自动识别存在于C型臂的方位角和仰角空间的象限中的组的情况。目标是提供这样一种算法，其可以找到这样的聚类(由它们的中心来识别)：(i)使点到对应聚类中心的距离最小化，并且(ii)避免引入太多聚类。对于给定数量的聚类k，执行该任务的算法的范例是经由“k均值”算法。例如，完整的解决方案将提取2、3、……、10个聚类，并且选择在点(i)与(ii)之间给出最佳折衷的组合。
因此，聚类参数将是计算方法与测试聚类数量之间的折衷。
在实施例中，使用应用于表示患者的感兴趣区域的帧序列的帧的图像处理算法来导出取向信息。
合适的取向条件可以是经典的无监督聚类。
根据第二方面的实施例，提供了如上所述的根据本发明的方法，还包括：
a2)接收包括关于与医学流程的阶段相联系的事件的信息的事件信号；
b1)使用所述事件信号来生成流程状态指示；
并且其中，在步骤c)中，所述情境信息还包括所述流程状态指示，并且其中，所述至少一个代表性子集的帧是基于所述流程状态指示和所述至少一个帧聚类条件从所述帧序列中选择的。
在范例中，通过对发生的事件信号的数量进行计数来生成流程状态信号。例如，流程状态信号可以指示根据事件信号未发生的事实推断的程序的诊断阶段。
流程状态信号可以指示在接收到第一事件信号之后正在进行的介入阶段。应当理解，能够接收多个事件信号，其中，每个后续事件信号将输入的帧序列分成不表示多个介入的子序列。
根据范例，如果没有观察到新事件，则流程状态可以指示正在进行结果控制阶段。
因此，根据本实施例，情境信息是至少流程状态指示和取向信息以及任选的动脉分类的综合信息。
根据实施例，事件信号是来自球囊膨胀导管系统的球囊膨胀信号。
在范例中，球囊膨胀信号由用于使球囊膨胀的仪器的物件来提供。在另一范例中，通过使用应用于输入的图像序列的图像处理技术检测球囊膨胀来提供球囊膨胀信号。
因此，诸如球囊膨胀的事件被用于增强对冗余帧的搜索。根据该实施例，可以从事件信号中识别流程状态指示。
因此，根据该实施例，可以通过检测球囊膨胀来分离介入流程的阶段。结合流程状态指示应用帧聚类条件，例如可以识别共享(成像系统的)相同取向以及相同的流程状态指示的帧的输入序列的多个子序列。在这种情况下，多个冗余子序列中除了一个以外的所有冗余子序列都能够被去除，由此减少了冗余帧的数量。
根据实施例，提供了如前所述的方法，还包括以下步骤：
a3)通过识别所述帧序列的帧中表示的特定动脉系统来对所述帧进行分类，从而为所述帧序列的帧提供动脉系统分类；
其中，在步骤b)中，所述情境信息还包括所述动脉系统分类；并且
其中，在步骤c)中，所述帧聚类条件包括动脉系统分类参数，并且其中，所述至少一个代表性子集的所述帧是基于每个帧的所述动脉系统分类与所述动脉系统参数的比较来选择的。
根据实施例，动脉系统分类参数使用脊形过滤器来提供左冠状动脉和右冠状动脉分类。
表1中呈现了情境信息包括取向信息、动脉侧信息和流程状态信息的情况的简单的说明性范例。
表1
Figure GDA0001713483790000151
在表1中，表的每一行都表示涉及造影剂暴发的血管造影检查，因此表的每一行是输入的帧序列的子序列，其被索引到情境信息。在该范例中，根据阶段是在事件信号之前(1)还是之后(2)(在这种情况下事件信号是球囊部署)，情境信息被提供为取向信息(执行成像的C型臂的方位角和仰角)、检测到的动脉侧(例如，左冠状动脉树或右冠状动脉树，可以使用应用于输入帧的脊形过滤器来实现对其的检测)以及流程状态指示。
提供了识别情境信息的独特组合的帧聚类条件。
在表1中，第1行至第4行表示临床医生以不同角度(θ1,φ1)至(θ4,φ4)在左侧动脉侧搜索狭窄。搜索过程是在任何球囊膨胀之前执行的。在第5行，临床医生已经将导管从右心分支改变到左心分支，以在右心分支上执行诊断血管造影。应当注意，取向信息可以是(θ1,φ1)，即，第1行的取向信息与第5行的取向信息相同，即使观察到不同的临床结果(右心分支和左心分支的不同的解剖结构和/或狭窄状况)。
在第6行，临床医生似乎没有发现任何值得在右心分支中随后调查的事物，并返回到取向(θ1,φ1)，左心分支中的导管似乎包含可处置的狭窄。
在第7行，部署球囊以扩张支架，用于处置狭窄。因此，在第7行，检查阶段从“1”变为“2”。
在第8行，取向信息变为(θ2,φ2)，因为临床医生正在从不同角度验证支架的放置，而血管造影仍在左冠状动脉分支中进行。
因此，第1行至第5行是检查的诊断阶段。第7行是介入阶段。第8行是结果控制阶段。
在表1的简单范例中，虽然可以容纳大量球囊膨胀，但是球囊膨胀信号将用于生成具有两种状态(球囊膨胀之前和之后)的流程状态指示。
通过应用标识情境信息的独特组合的帧聚类参数，清楚的是可以删除第6行的帧的子集，因为这些帧将包含与第1行的帧的子集相同的冗余图像信息(在球囊膨胀之前，在取向(θ1,φ1)上取得左分支的血管造影)。
因此，在输入的帧序列的8个基本分区中，可以提供7个代表性子集，每个代表性子集表示具有不同情境信息的帧聚类。这些代表性子集被处理为另外的子集，以从所选择的血管造影序列中进一步去除冗余。
根据实施例，提供了根据上述实施例的方法，还包括步骤a3)：
a3)接收来自患者监测设备的输出信号的测量设备活动参数；
其中，在步骤b)中，情境信息还包括测量设备活动参数；
其中，在步骤c)中，至少一个代表性子集的帧是基于测量设备活动参数的存在来选择的；并且
其中，在步骤e)中，多媒体报告或文件报告包括患者监测设备的输出信号的、被显示在帧的另外的子集附近的测量结果。
因此，可以在收集来自其他监测仪器的有用医学信息(例如，流量储备分数(FFR)测量结果)的同时捕捉代表性子集。这提供了一个机会来呈现医学介入的视频或图像以及相关的测量结果。
根据实施例，提供了如上所述的方法，还包括步骤a4)：
a4)接收球囊膨胀状态信号；
其中，在步骤b)中，情境信息还包括球囊膨胀状态信号；并且
其中，在步骤c)中，至少一个代表性子集的帧是基于球囊膨胀状态信号的状态来选择的。
根据范例，至少一个代表性子集的帧是基于球囊膨胀状态信号的状态以及帧与球囊膨胀状态信号的时间接近度来选择的。
根据实施例，球囊膨胀状态信号是从球囊膨胀控制设备接收的。
根据实施例，球囊膨胀状态信号是使用图像处理算法来生成的，所述图像处理算法通过分析帧序列的帧来评估球囊的整体膨胀。
根据实施例，球囊膨胀状态信号是在球囊处于其最大膨胀时或在其刚刚紧缩之后生成的。备选地，该信号可以是在整个球囊膨胀时期生成的，使得能够捕捉整个球囊膨胀和紧缩序列。
根据实施例，提供了如前所述的方法，在步骤c)中还包括：
c1)计算针对帧的至少一个代表性子集的多个帧的造影剂质量度量；
其中，在步骤d)中，选择参数是注射质量参数，并且帧的至少一个另外的子集的帧是基于造影剂质量度量与注射质量参数的比较来选择的。
在实施例中，选择基于使用边缘过滤器基于最硬的边缘的识别来提供帧的另外的子集的算法。
在另一实施例中，选择基于提供由造影剂覆盖的帧的面积显示一个或多个帧中的造影剂的最大范围的帧的另外的子集的算法。
在另一实施例中，选择基于提供其中造影剂沿着给定动脉路径最远地传播的帧的另外的子集的算法。
根据实施例，提供了如前所述的方法，在步骤c)中还包括：
c2)计算针对帧的至少一个代表性子集的多个帧的球囊膨胀进展度量；
其中，在步骤d)中，选择参数是球囊膨胀程度度量，并且帧的至少一个另外的子集的帧是基于球囊膨胀进展度量与球囊膨胀程度度量的比较来选择的。
根据第二方面或者上述实施例中的任一个，输入的帧序列可以从选自以下组的医学成像仪器的物件导出：血管造影仪器、荧光检查仪器、内窥镜、医学超声成像、温度记录仪、超声心动图仪、功能性近红光谱仪或常规视频。
根据实施例，用户操作的输入(例如，按钮、踏板开关等)可以提供情境信息。
这使得医学专业人员能够提供一个指示当用户操作的输入被激活时在用户操作的输入激活期间记录的帧应当作为代表性子集进行存储的信号。这使得医学专业人员在介入期间能识别的医学兴趣的意外时刻能够作为代表性子集进行保存以在报告中呈现。
根据实施例，根据第二方面的方法可以间接地接收从医学成像设备获得的帧序列。例如，帧序列可以由医学成像设备存储到诸如DVD、USB棒或便携式硬盘驱动器的数据载体上。备选地，可以通过LAN或WAN传输数据。帧序列可以由例如个人计算机的处理设备来接收，并且得到“离线”处理。另外，可以一起提供被索引到帧序列的情境信息与从医学成像设备获得的帧序列，以使得离线处理能够根据上述方法发生。
图4示出了针对典型介入在C型臂空间中进行的测量结果的表示。θ轴表示方位角(旋转)，并且φ轴表示针对典型患者介入所经历的角度范围上的仰角轴(角度)。
为了进一步说明第二方面的操作，在心血管介入的情况下参考图4呈现了特定范例。
最初，临床医生将使用不同的C型臂角度从一系列不同的角度对患者的心脏进行成像，使得能够精细理解要获得的冠状动脉的几何结构。该任务是针对右冠状动脉树和左冠状动脉树来执行的。其结果是一系列长的、注射良好的诊断序列，这些序列在C型臂角度空间中很好地分开。
一旦决定要处置特定的病变，则选择特定的角度允许清楚地观察病变(因此没有血管混乱，并且有少许透视收缩)。这使得导丝能够被导航通过狭窄，允许将球囊和支架置于狭窄处。
根据从该过程获得的情境信息，可以在C臂空间中获得几个帧序列聚类，最感兴趣的是介入的独特记录。如果这些序列注射良好，则它们能够具有有用的诊断价值，因为它们集中于病变。
最后，从不同参考视图采集一系列血管造影序列，以便控制介入结果。它们在C型臂空间中的特征标志与初始诊断序列的特征标志相似。
在该图中，符号表60图示了诊断序列的不同点。实心三角形是右冠状动脉侧的诊断视图。未填充的三角形表示左冠状动脉侧的诊断视图。实心圆表示右冠状动脉侧的介入，空心圆指代左冠状动脉侧的介入。最后，实心正方形表示右冠状动脉侧的对照运行，并且空心正方形表示左冠状动脉侧的对照运行。
因此，在图4中，临床医生已经从两个不同的角度观察到右冠状动脉，然后决定不需要进行处置。从四个角度诊断出左冠状动脉树，结果发现狭窄。做出处置决定。取得用于描画左冠状动脉主干和主要分支近侧区域的“蜘蛛视图”(左前斜(LAO)尾视图)(在右下象限中图示)。导丝向近侧导航，并且导航从颅RAO视图(在左上象限)完成。然后从三个不同的位置进行支架定位的控制。
从类似的C型臂角度采集的序列提供了关于冠状动脉的几何结构的相同类型的信息，但前提是在视图之间没有执行介入。此规则的一个例外是：当从右冠状动脉树向左冠状动脉树改变动脉树时，或者反之亦然。这些分支能够从相同的角度采集，但包含不应被合并的临床信息。因此，如上所述，实施例使得冠状动脉分支信息能够用于避免该临床内容的合并。在这种情况下，情境信息至少包括C型臂取向信息和动脉树分类。例如，能够使用脊形过滤器对动脉树进行分类。Auvray等人在论文“improved vessel enhancement for fullyautomatic coronary modeling”(SPIE Proceedings，第7259卷，Medical Imaging 2009：Image Processing，doi：10.1117/12.810144)中进一步讨论了脊形过滤器。
对注射质量的评价使得几乎不能丢弃注射的序列。当选择一个序列来表示一个聚类(代表性子集)时，选择最佳注射图像可能是有意义的，以使这样的图像的临床内容更加明显。以技术术语来说，例如，能够通过计算序列中的脊的累积数量来估计注射质量，尽管其他技术也是适用的。
当球囊膨胀仪器用于介入时，对球囊膨胀的检测使得能够构建对扩张前、介入和扩张后的介入。
根据实施例，根据球囊膨胀的检测对每个代表性序列进行标记。这可以通过使用图像处理技术识别球囊特征标志(例如，在两个标记物之间呈现对比延长的对象的非注射序列)来实施。
来自测量工具的输入允许将本地测量结果和分析添加到检查中。当然，除了记录正在分析哪个分支以外，报告对于用于定位和撤回这些工具的X射线序列几乎没有兴趣。因此，根据实施例，测量的定时可以被索引到帧序列的帧。测量定时信息还可以被包括在情境信息中，以使得能够丢弃可能涉及测量工具定位的帧。
有利的是，如上所述的方法使得能够获得相关的医学序列：
诊断：在球囊膨胀之前执行充分良好注射的血管造影(其在C型臂角度空间中被隔离)；在相关的分支中在球囊膨胀之前执行最佳注射的血管造影，当考虑C型臂角度空间中的聚类时，在相关的分支中在球囊膨胀之前执行检查中心线的FFR、IVUS和OCT结果。
介入：可以进行一系列球囊膨胀，使得能够隔离对应的血管造影前序列和血管造影后序列。
结果控制：可以在球囊膨胀之后提供充分良好注射的血管造影(其在C型臂角度空间中被隔离)。当考虑C型臂角度空间中的聚类时，在球囊膨胀之后提供最佳注射的血管造影的序列。最后，在相关的分支中展开球囊之后，可以提供FFR、IVUS和OCT结果。
另外的子集的帧的选择旨在确保提供具有用于报告的足够好的质量的代表性帧。
图5图示了输入的帧序列中的五个示范性帧62、64、66、68、70，这五个示范性帧是如前所述使用情境信息被选择作为帧S的整个序列的诊断阶段的代表性子集DT。在帧62中，造影剂注射导管72被推进到脉管系统中，但没有进行注射。在帧64中，初始造影剂暴发被注射到脉管系统中。在帧66中，暴发开始传播通过脉管系统。在帧68中，暴发已扩散到脉管系统的整个范围，并且在血管造影照片中提供了良好质量的边缘。在帧70中，暴发开始通过脉管系统消散。
在该范例中，在应当从DT中选择一幅最优图像的情况下，例如使用脊形过滤器来搜索序列DT的帧，以获得在造影剂与周围软组织之间提供最高边缘性能的图像。帧68将被选择作为具有最佳边缘的帧。在这种情况下，另外的子集将被提供为单一图像DT(opt)。
根据备选实施例，例如，提供图像搜索运算器，其使得能够在帧64处检测造影剂暴发的开始。在知道具有第一造影剂暴发的帧64和最佳造影剂帧68的情况下，能够选择S的子集DT(seq)作为另外的子集，所述另外的子集是表征造影剂流过脉管系统的帧序列，它可以在不使用太多冗余帧的情况下提供对诊断流程的良好概述。任选地，例如，可以包括后续帧70以显示造影剂灌注到心肌中。
因此，根据实施例，可以识别来自每个另外的子集的最佳注射序列。这种方法在提供用于报告的序列的情况下也具有广泛的适用性。
根据本发明的第一方面，提供了一种用于计算机辅助医学报告提供的装置72，包括：
-处理单元74。
处理单元被配置为接收从医学成像设备获得的表示患者的感兴趣区域的帧序列，以生成从以下导出的情境信息：(i)帧序列和/或(ii)来自医学仪器的物件的输入。将帧序列的帧索引到情境信息，以生成帧序列的帧的至少一个代表性子集。
通过以下操作从帧序列中选择至少一个代表性子集的帧：将帧序列的帧的情境信息与至少一个帧聚类条件进行比较，使用针对至少一个代表性子集定义的选择参数来选择至少一个代表性子集的帧的至少一个另外的子集，并且输出包括帧的另外的子集的多媒体报告或文件报告。
例如，可以使用通用计算机、智能电话或平板计算机来实施根据本发明的第一方面的装置72。备选地，该装置可以被实施在局域网中的通用服务器中，互联网上或者被实施为“云”处理布置的部分。处理单元74可以被提供为图形处理单元(GPU)，或者可以被实施在硬件中，例如被实施在现场可编程门阵列(FPGA)或专用数字信号处理器(DSP)上。
装置72可以在医学介入期间“实况”接收输入的帧序列和/或来自医学仪器的物件的输入。备选地，可以将帧序列及其索引的情境信息存储在数据载体中，使得根据本发明的各方面的处理能够“离线”执行。
图6图示了根据第一方面所述的装置。
根据第一方面的实施例，提供了一种如前所述的装置72，其中，处理器74还被配置为接收医学成像仪器的物件的取向信息，其中，情境信息包括取向信息，并且其中，帧聚类条件包括取向条件。
根据第一方面的实施例，提供了如前所述的装置72，其中，处理器74还被配置为接收包括关于与医学流程的阶段相关联的事件的信息的事件信号，并且被配置为使用事件信号来生成流程状态指示。情境信息还包括流程状态指示。至少一个代表性子集的帧是基于流程状态指示和至少一个帧聚类条件从帧序列中选择的。
根据第一方面的实施例，提供了如前所述的装置72，其中，事件信号是球囊膨胀状态信号。
根据第一方面的实施例，提供了如前所述的装置72。处理器74还被配置为接收来自患者监测设备的输出信号的测量设备活动参数，其中，情境信息还包括测量设备活动参数，其中，至少一个代表性子集的帧是基于测量设备活动参数的存在来选择的，并且其中，多媒体报告或文件报告包括来自患者监测设备的输出信号的、被显示在帧的另外的子集附近的测量结果。
任选地，测量设备活动参数包括患者心跳监测器的输出。通过这种方式，情境信息可以与患者心跳同步。
任选地，测量设备活动参数包括患者呼吸监测器的输出。通过这种方式，情境信息可以与患者的呼吸循环同步。
根据第一方面的实施例，提供了如前所述的装置72。处理器74还被配置为通过识别帧序列的帧中表示的特定动脉系统来对帧进行分类，从而为帧序列的帧提供动脉系统分类，其中，情境信息还包括动脉系统分类，其中，帧聚类条件包括动脉系统分类参数，其中，帧聚类条件包括动脉系统分类参数，并且其中，至少一个代表性子集的帧是基于每个帧的动脉系统分类与动脉系统参数的比较来选择的。
根据第一方面的实施例，提供了如前所述的装置72。处理器74还被配置为计算针对帧的至少一个代表性子集的多个帧的造影剂质量度量，其中，选择参数是注射质量参数，并且帧的至少一个另外的子集的帧是基于造影剂质量度量与注射质量参数的比较来选择的。
根据第一方面的实施例，提供了如前所述的装置72。处理器还被配置为计算针对帧的至少一个代表性子集的多个帧的球囊膨胀进展度量，其中，选择参数是球囊膨胀程度度量，并且其中，帧的至少一个另外的子集的帧是基于球囊膨胀进展度量与球囊膨胀程度度量的比较来选择的。
根据本发明的第三方面，提供了一种被配置用于医学报告的系统10。所述系统如图1中所图示。所述系统包括：
-医学成像系统14；
-根据先前描述的第一方面及其实施例所述的装置28，
-显示布置29。
医学成像系统被配置为生成帧序列，并且装置被通信性地耦合到医学成像系统和显示布置，并且其中，在操作中，装置从医学成像系统接收帧序列，并且输出包括帧序列的帧的子集的多媒体报告或文件报告。
根据第四方面，提供了一种用于医学报告的计算机程序单元，其包括指令，当计算机程序单元由处理单元执行时，所述指令适于执行所述第二方面或其实施例所述的方法的步骤。
根据第四方面的实施例，提供了一种被配置为控制根据第一方面或其实施例所述的装置的计算机程序单元。
根据第五方面，提供了一种存储有根据第四方面所述的程序单元的计算机可读介质。
因此，计算机程序单元可以被存储在计算机单元中，所述计算机程序单元也可以是本发明的实施例的部分。该计算单元可以适于执行或引发对上述方法的步骤的执行。
此外，该计算单元可以适于操作上述装置的部件。该计算单元能够适于自动操作和/或运行用户的命令。计算机程序可以被加载到数据处理器的工作存储器中。因此，可以装备数据处理器来执行本发明的方法。
本发明的该示范性实施例涵盖从一开始就安装了本发明的计算机程序和借助于更新将现有程序变为使用本发明的程序的计算机程序。计算机程序可以存储和/或被分布在合适的介质上，例如与其一起供应的光学存储媒介或固态介质，或者作为其他硬件的部分，但是计算机程序也可以以其他形式进行分布，例如经由互联网或其他有线或无线的电信系统。
然而，所述程序也可以被呈现在网络上，如万维网，并且能够从这样的网络被下载到数据处理器的工作存储器中。根据本发明的另外的示范性实施例，提供了用于使计算机程序单元可用于下载的介质，所述计算机程序单元被布置为执行根据本发明的先前描述的实施例中的一个所述的方法。
应当注意，本发明的实施例是参考不同主题来描述的。尤其地，一些实施例是参考方法型权利要求来描述的，而其他实施例是参考装置型权利要求来描述的。然而，除非另有说明，本领域技术人员将从以上和以下的描述中推断出，除属于一种类型的主题的特征的任意组合之外，涉及不同主题的特征之间的任意组合也被认为在本申请中被公开。
所有的特征都能够被组合来提供多于特征的简单加合的协同效应。
尽管已经在附图和前面的描述中详细图示和描述了本发明，但是这样的图示和描述应当被认为是图示性或示范性的，而非限制性的；本发明不限于所公开的实施例。
本领域技术人员通过研究附图、公开内容以及权利要求，在实践请求保护的发明时能够理解并实现对所公开的实施例的其他变型。
在权利要求中，“包括”一词不排除其他元件或步骤，并且词语“一”或“一个”不排除多个。单个处理器或其他单元可以实现在权利要求中记载的若干项的功能。尽管某些措施被记载在互不相同的从属权利要求中，但是这并不指示不能有利地使用这些措施的组合。权利要求中的任何附图标记都不应被解释为对范围的限制。

Claims (11)

1.一种用于计算机辅助医学报告提供的装置(72)，包括：
-处理单元(74)；
其中，所述处理单元被配置为接收从C型臂成像系统获得的表示患者的感兴趣区域的帧序列，以生成从来自所述C型臂成像系统的输入和所述C型臂成像系统的取向信息导出的情境信息，
其中，所述情境信息包括从以下获得的取向信息：(i)所述C型臂成像系统的方位角和仰角，或者(ii)应用于来自所述C型臂成像系统的所输入的图像序列的图像内容的图像处理算法；
其中，所述帧序列的帧被索引到所述情境信息，以生成所述帧序列的所述帧的至少一个代表性子集，
其中，通过将所述帧序列的帧的所述情境信息与至少一个帧聚类条件进行比较来从所述帧序列中选择所述至少一个代表性子集的帧，以使用针对所述至少一个代表性子集定义的选择参数来选择所述至少一个代表性子集的所述帧的至少一个另外的子集，并且输出包括帧的所述另外的子集的多媒体报告或文件报告；
其中，所述帧聚类条件包括取向条件，
其中，所述处理单元(74)还被配置为：
接收包括关于与医学流程的阶段相联系的事件的信息的事件信号，以使用所述事件信号来生成流程状态指示，
其中，所述情境信息还包括所述流程状态指示，并且其中，所述至少一个代表性子集的帧是基于所述流程状态指示和所述至少一个帧聚类条件从所述帧序列中选择的。
2.根据权利要求1所述的装置(72)，
其中，所述事件信号是球囊膨胀状态信号。
3.根据权利要求1所述的装置(72)，其中，所述处理单元(74)还被配置为：
接收来自患者监测设备的输出信号的测量设备活动参数，其中，所述情境信息还包括所述测量设备活动参数，其中，所述至少一个代表性子集的所述帧是基于所述测量设备活动参数的存在来选择的，并且其中，所述多媒体报告或文件报告包括来自患者监测设备的所述输出信号的、被显示在帧的所述另外的子集附近的测量结果。
4.根据权利要求1所述的装置(72)，其中，所述处理单元(74)还被配置为：
通过识别所述帧序列的帧中表示的特定动脉系统来对所述帧进行分类，从而为所述帧序列的帧提供动脉系统分类，其中，所述情境信息还包括所述动脉系统分类，其中，所述帧聚类条件包括动脉系统分类参数，其中，所述动脉系统分类参数任选地基于脊形过滤器。
5.根据权利要求1所述的装置(72)，其中，所述处理单元(74)还被配置为：
计算针对所述帧的所述至少一个代表性子集中的多个帧的造影剂质量度量，其中，所述造影剂质量度量是在帧中有多少造影剂可见的量度，并且其中，所述选择参数是定义管腔中的造影剂的分布的质量的注射质量参数，并且所述帧的所述至少一个另外的子集的帧是基于所述造影剂质量度量与所述注射质量参数的比较来选择的。
6.根据权利要求1-5中的任一项所述的装置(72)，其中，所述处理单元(74)还被配置为：
计算针对所述帧的所述至少一个代表性子集的多个帧的球囊膨胀进展度量，其中，所述选择参数是球囊膨胀程度度量，并且其中，所述帧的所述至少一个另外的子集的帧是基于所述球囊膨胀进展度量与所述球囊膨胀程度度量的比较来选择的。
7.一种用于使用C型臂成像系统的计算机辅助医学报告提供的方法，包括以下步骤：
a)接收(30)从C型臂成像系统获得的表示患者的感兴趣区域的帧序列以及包括关于与医学流程的阶段相联系的事件的信息的事件信号；
b)使用所述事件信号来生成流程状态指示，并且生成(32)情境信息，所述情境信息包括从以下获得的取向信息：(i)所述C型臂成像系统的方位角和仰角，或者(ii)应用于来自所述C型臂的所输入的图像序列的图像内容的图像处理算法；
其中，所述帧序列的帧被索引到所述情境信息；
c)生成(34)所述帧序列的所述帧的至少一个代表性子集，
其中，所述至少一个代表性子集的帧是通过将所述帧序列的帧的所述情境信息与至少一个帧聚类条件进行比较从所述帧序列中选择的，其中，所述帧聚类条件包括取向条件，并且其中，所述情境信息还包括所述流程状态指示，并且其中，所述至少一个代表性子集的帧是基于所述流程状态指示和所述至少一个帧聚类条件从所述帧序列中选择的；
d)使用针对所述至少一个代表性子集定义的选择参数来选择(36)所述至少一个代表性子集的所述帧的至少一个另外的子集；并且
e)输出(38)包括帧的所述另外的子集的多媒体报告或文件报告。
8.根据权利要求7所述的方法，在步骤c)中还包括：
c1)计算针对所述帧的所述至少一个代表性子集的多个帧的造影剂质量度量，其中，所述造影剂质量度量是在帧中有多少造影剂可见的量度；
其中，在步骤d)中，所述选择参数是定义管腔中的造影剂的分布的质量的注射质量参数，并且所述帧的所述至少一个另外的子集的帧是基于所述造影剂质量度量与所述注射质量参数的比较来选择的。
9.一种被配置用于医学报告的系统(10)，包括：
-C型臂成像系统(14)
-根据权利要求1至6中的任一项所述的装置(28)，以及
-显示布置(29)；
其中，所述C型臂成像系统被配置为生成帧序列；
其中，所述装置被通信性地耦合到所述C型臂成像系统和所述显示布置，并且其中，在操作中，所述装置从所述C型臂成像系统接收所述帧序列以及方位角信号和仰角信号，并且输出包括所述帧序列的帧的子集的多媒体报告或文件报告。
10.一种用于医学报告的装置，其包括处理单元和存储指令的工作存储器，当由所述处理单元运行时，所述指令适于执行根据权利要求7至8中的一项所述的方法的步骤。
11.一种存储有用于医学报告的计算机程序单元的计算机可读介质，所述计算机程序单元包括指令，当所述计算机程序单元由处理单元运行时，所述指令适于执行根据权利要求7至8中的一项所述的方法的步骤。
CN201680077149.7A 2015-12-30 2016-12-20 医学报告装置 Active CN108475532B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
EP15307181.6 2015-12-30
EP15307181 2015-12-30
PCT/EP2016/081833 WO2017114685A1 (en) 2015-12-30 2016-12-20 Medical reporting apparatus

Publications (2)

Publication Number Publication Date
CN108475532A CN108475532A (zh) 2018-08-31
CN108475532B true CN108475532B (zh) 2022-12-27

Family

ID=55077387

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201680077149.7A Active CN108475532B (zh) 2015-12-30 2016-12-20 医学报告装置

Country Status (5)

Country Link
US (1) US11545252B2 (zh)
JP (1) JP6878438B2 (zh)
CN (1) CN108475532B (zh)
DE (1) DE112016006135T5 (zh)
WO (1) WO2017114685A1 (zh)

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10667776B2 (en) * 2016-08-11 2020-06-02 Siemens Healthcare Gmbh Classifying views of an angiographic medical imaging system
EP3293651A1 (en) * 2016-09-13 2018-03-14 Ebit srl Interventional radiology structured reporting workflow
US11997275B2 (en) * 2018-08-27 2024-05-28 AT Technologies ULC Benefit-based bitrate distribution for video encoding
WO2020044345A1 (en) * 2018-08-28 2020-03-05 Technion Research & Development Foundation Limited Correcting motion-related distortions in radiographic scans
GB2578485A (en) * 2018-09-18 2020-05-13 Univ Oxford Innovation Ltd Radiomic signature of a perivascular region
US20200273563A1 (en) 2019-02-21 2020-08-27 Theator inc. Adjusting an operating room schedule
WO2020172414A1 (en) 2019-02-21 2020-08-27 Theator inc. Systems and methods for analysis of surgical videos
CN111626974B (zh) * 2019-02-28 2024-03-22 苏州润迈德医疗科技有限公司 冠状动脉造影图像序列的质量评分方法和装置
US20210049809A1 (en) * 2019-08-12 2021-02-18 Canon Medical Systems Corporation Image processing method and apparatus
CN110600108A (zh) * 2019-09-01 2019-12-20 厦门影诺医疗科技有限公司 一种胶囊内镜的冗余图像处理方法
CN111076659B (zh) * 2019-12-02 2022-05-24 深圳市太赫兹科技创新研究院有限公司 一种信号处理方法、装置、终端和计算机可读存储介质
US11227686B2 (en) 2020-04-05 2022-01-18 Theator inc. Systems and methods for processing integrated surgical video collections to identify relationships using artificial intelligence

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103154928A (zh) * 2010-06-24 2013-06-12 奥比融移动有限公司 用于处理非参数化的多维的空间和时间人类行为或普遍测量的技术观测数据的网络服务器装配及其相关方法
WO2014102568A1 (en) * 2012-12-27 2014-07-03 Arria Data2Text Limited Method and apparatus for motion detection

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE3833309A1 (de) * 1987-09-30 1989-04-20 Toshiba Kawasaki Kk Bildverarbeitungseinrichtung
JP2005137798A (ja) * 2003-11-10 2005-06-02 Toshiba Corp Ｘ線撮像システム及びｘ線画像データ表示方法
US20070064987A1 (en) * 2005-04-04 2007-03-22 Esham Matthew P System for processing imaging device data and associated imaging report information
EP1916957A1 (en) * 2005-08-09 2008-05-07 Koninklijke Philips Electronics N.V. System and method for spatially enhancing structures in noisy images with blind de-convolution
WO2010068783A1 (en) * 2008-12-12 2010-06-17 Corindus Inc. Remote catheter procedure system
JP5800455B2 (ja) * 2008-12-25 2015-10-28 信示 芦田 Ｘ線診断装置
US8858443B2 (en) * 2009-02-17 2014-10-14 Siemens Medical Solutions Usa, Inc. System for cardiac ultrasound image acquisition
JP5725745B2 (ja) * 2010-07-05 2015-05-27 株式会社東芝 Ｘ線診断装置及び医用画像診断装置
US20120099768A1 (en) * 2010-10-20 2012-04-26 Medtronic Navigation, Inc. Method and Apparatus for Reconstructing Image Projections
CN103442643B (zh) * 2012-03-06 2016-03-09 株式会社东芝 图像处理装置以及x射线摄影装置
JP6425884B2 (ja) 2012-12-12 2018-11-21 キヤノンメディカルシステムズ株式会社 Ｘ線診断装置
US9974506B2 (en) * 2013-11-05 2018-05-22 International Business Machines Corporation Associating coronary angiography image annotations with syntax scores for assessment of coronary artery disease

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103154928A (zh) * 2010-06-24 2013-06-12 奥比融移动有限公司 用于处理非参数化的多维的空间和时间人类行为或普遍测量的技术观测数据的网络服务器装配及其相关方法
WO2014102568A1 (en) * 2012-12-27 2014-07-03 Arria Data2Text Limited Method and apparatus for motion detection

Also Published As

Publication number Publication date
JP6878438B2 (ja) 2021-05-26
US11545252B2 (en) 2023-01-03
WO2017114685A1 (en) 2017-07-06
JP2019508086A (ja) 2019-03-28
DE112016006135T5 (de) 2018-09-20
CN108475532A (zh) 2018-08-31
US20190019579A1 (en) 2019-01-17

Similar Documents

Publication Publication Date Title
CN108475532B (zh) 医学报告装置
US10687777B2 (en) Vascular data processing and image registration systems, methods, and apparatuses
US11324468B2 (en) Method for co-registering and displaying multiple imaging modalities
EP2967480B1 (en) Vascular data processing and image registration methods
US8649584B2 (en) Medical image processing apparatus and medical image processing method
US8275448B2 (en) Method for reconstructing a 3D presentation
JP2009011828A (ja) 血管系の中の障害を検出するための方法及びシステム
JP7237440B2 (ja) Ｘ線／血管内画像コロケーションの方法およびシステム
US20060293579A1 (en) Apparatus for angiographic x-ray photography
JP7278319B2 (ja) 内腔に沿った管腔内デバイスの管腔内経路の推定
US20190006032A1 (en) Interventional medical reporting apparatus
JP6523686B2 (ja) Ｘ線診断装置
US11481957B2 (en) Medical image processing apparatus and storage medium
US20180263574A1 (en) System for the capture and combined display of video and analog signals coming from electromedical instruments and equipment
JP6981807B2 (ja) 医用情報処理装置、ｘ線ｃｔ装置、医用情報処理プログラム、医用情報処理方法及び医用情報処理システム
US20070160273A1 (en) Device, system and method for modifying two dimensional data of a body part
JP7434008B2 (ja) 医用画像処理装置およびプログラム
CN110461238B (zh) 造影剂注射成像
US8489173B2 (en) CT tomographic imaging process and system
CN108024775B (zh) 再血管化定位和前后量化冠状动脉血管造影
EP2824636B1 (en) Method and corresponding system for automatically classifying at least one angiographic video recording of a part of a region comprising a human heart

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant