CN105074708B - 放射学发现的背景驱动的概要视图 - Google Patents

放射学发现的背景驱动的概要视图 Download PDF

Info

Publication number
CN105074708B
CN105074708B CN201480019266.9A CN201480019266A CN105074708B CN 105074708 B CN105074708 B CN 105074708B CN 201480019266 A CN201480019266 A CN 201480019266A CN 105074708 B CN105074708 B CN 105074708B
Authority
CN
China
Prior art keywords
research
macro
background information
previous
patient
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201480019266.9A
Other languages
English (en)
Other versions
CN105074708A (zh
Inventor
T·D·D·S·马博杜瓦纳
Y·徐
钱悦晨
G·R·曼科维奇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Koninklijke Philips NV
Original Assignee
Koninklijke Philips Electronics NV
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Koninklijke Philips Electronics NV filed Critical Koninklijke Philips Electronics NV
Publication of CN105074708A publication Critical patent/CN105074708A/zh
Application granted granted Critical
Publication of CN105074708B publication Critical patent/CN105074708B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00—ICT specially adapted for the handling or processing of medical images
    • G16H30/20—ICT specially adapted for the handling or processing of medical images for handling medical images, e.g. DICOM, HL7 or PACS
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/0002—Inspection of images, e.g. flaw detection
    • G06T7/0012—Biomedical image inspection
    • G06T7/0014—Biomedical image inspection using an image reference approach
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H15/00—ICT specially adapted for medical reports, e.g. generation or transmission thereof
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00—ICT specially adapted for the handling or processing of medical images
    • G16H30/40—ICT specially adapted for the handling or processing of medical images for processing medical images, e.g. editing
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/70—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for mining of medical data, e.g. analysing previous cases of other patients
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30004—Biomedical image processing

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Public Health (AREA)
  • General Health & Medical Sciences (AREA)
  • Epidemiology (AREA)
  • Primary Health Care (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Radiology & Medical Imaging (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Biomedical Technology (AREA)
  • Pathology (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Quality & Reliability (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)
  • Medical Treatment And Welfare Office Work (AREA)
  • Magnetic Resonance Imaging Apparatus (AREA)
  • Apparatus For Radiation Diagnosis (AREA)
  • Image Processing (AREA)
  • Artificial Intelligence (AREA)
  • Computing Systems (AREA)
  • Evolutionary Computation (AREA)
  • Software Systems (AREA)
  • Multimedia (AREA)

Abstract

本发明涉及一种用于通过以下生成医学发现的背景驱动的概要视图的系统、方法和计算机可读存储介质：检索包括要被分析的至少一幅图像的当前研究；提取来自所述当前研究的当前背景信息并且将所述当前背景信息存储于数据库中；并且将所述当前背景信息与来自先前研究的先前背景信息进行匹配以返回相关先前研究的集合。

Description

放射学发现的背景驱动的概要视图
背景技术
放射科医师需要处理越来越多的图像来以最优方式诊断和处置患者。例如，诸如癌症患者的患者经常经历很多成像检查，从而在其医学记录中积累与相同解剖区域有关的许多研究。每当需要读取新的研究时，放射科医师打开当前命令以理解为何已经执行所述研究以及患者具有何种先前发现。然而，成像命令包含与发现有关的有限的信息，使得放射科医师需要打开最相关先前研究的结果以更好地理解患者的发现的状态。然而，该先前报告可以不包含关于所有相关发现的足够信息，从而提供患者的发现历史的不完整概括。因此，放射科医师常常需要打开多个先前的报告和/或图像，并且建立在相关的发现之间的脑力链接以获得患者历史的全貌。该过程是困难并且耗时的。此外，目前没有质量保证工具来确保发现的一致性和寿命，使得一些先前识别的发现能够被忽视。如果没有如需要地对发现跟进，则能够对患者效果存在潜在不利影响。
发明内容
本发明提出了一种用于建议与患者的当前医学研究(120)有关的宏的第一方法。所述方法包括：检索包括要被分析的至少一幅图像的所述患者的所述当前研究；提取来自所述当前研究的当前背景信息并且将所述当前背景信息存储于数据库中；将所述当前背景信息与来自先前研究的先前背景信息进行匹配以返回所述患者的相关先前研究的集合；提取来自可用的宏的宏背景信息；将所述宏背景信息与所述先前相关研究的所述背景信息进行匹配以生成相关的宏的列表；并且响应于用户选择，使用所述患者的所述当前研究中的所列出的宏。
此外，本发明提出了一种用于建议与患者的当前医学研究有关宏或者文本片段的第二方法。所述方法包括：检索包括要被分析的至少一幅图像的所述患者的所述当前研究；提取来自所述当前研究的当前背景信息并且将所述当前背景信息存储于数据库中；将所述当前背景信息与来自先前研究的先前背景信息进行匹配以返回所述患者的相关先前研究的集合；识别并且列出在所述相关先前研究中使用的宏或文本片段；并且响应于用户选择，使用针对所述患者的所述当前研究的所列出的宏或文本片段。
此外，本发明提出了一种用于建议与患者的当前医学研究有关的宏的第一系统。所述系统具有处理器，所述处理器被配置为：检索包括要被分析的至少一幅图像的所述患者的所述当前研究，提取来自所述当前研究的当前背景信息并且将所述当前背景信息与来自先前研究的先前背景信息进行匹配以返回所述患者的相关先前研究的集合，提取来自可用的宏的宏背景信息，将所述宏背景信息与所述先前相关研究的所述背景信息进行匹配以生成相关的宏的列表，并且响应于用户选择而使用所述患者的所述当前研究中的所列出的宏。所述系统还包括存储器，所述存储器将所述当前背景信息和先前背景信息存储在数据库中。
此外，本发明提出了一种用于建议与患者的当前医学研究有关的宏或者文本片段的第二系统。所述系统包括处理器，所述处理器被配置为：检索包括要被分析的至少一幅图像的所述患者的所述当前研究，提取来自所述当前研究的当前背景信息并且将所述当前背景信息与来自先前研究的先前背景信息进行匹配以返回所述患者的相关先前研究的集合，识别并且列出在所述相关先前研究中使用的宏或文本片段，并且响应于用户选择而使用针对所述患者的所述当前研究的所列出的宏或文本片段。所述系统还包括存储器，所述存储器将所述当前背景信息和所述先前背景信息存储在数据库中。
此外，本发明提出了一种非暂态计算机可读存储介质，在其上存储有可运行程序，其中，所述程序指示处理器执行所述第一方法或所述第二方法的步骤。
附图说明
图1示出了根据第一示范性实施例的系统的示意图。
图2示出了图1的系统的另一示意图。
图3示出了根据第一示范性实施例的方法的流程图。
图4示出了根据图3的方法显示的概要视图的示范性屏幕截图。
图5示出了图4的概要视图的另一示范性屏幕截图。
图6示出了根据图3的方法显示的关键图像的示范性屏幕截图。
图7示出了根据图3的方法显示的概要视图的备选示范性屏幕截图。
图8示出了根据第二示范性实施例的系统和方法的示意图。
图9示出了根据图8的方法的流程图。
图10示出了根据第三示范性实施例的系统的示意图。
图11示出了根据第三示范性实施例的方法的流程图。
具体实施方式
可以参考下面的描述和附图进一步理解示范性实施例，其中，类似的元件被参考为具有相同附图标记。示范性实施例涉及用于查看医学图像的系统和方法。具体而言，示范性实施例描述提取当前成像研究的背景，以辅助报告当前成像研究的结果。当前成像研究的背景可以用于生成先前研究的背景驱动的概要，提出对应于当前研究的相关的模版/宏和/或识别应当在最终报告中报告的全部相关的发现。尽管关于读取在放射科室内的癌症患者的图像具体描述了示范性实施例，但是本领域的技术人员应理解本公开的系统和方法可以用于在各种医院部门中的任何内的具有各种疾病或状况中的任何的患者。
如图1和图2所示，根据本公开的示范性实施例的系统100生成先前相关的研究的背景驱动的概要视图。系统100包括处理器102、用户接口104、显示器106和存储器108。处理器102通过使用背景提取模块110提取当前研究120的背景信息，来生成包括要被分析的至少一幅图像的当前研究120的概要视图。背景提取模块110还可以从当前研究120的命令中提取关于患者的临床指示的背景信息。所述背景信息可以包括诸如模态(例如，MRI、乳房摄影)的数据，和/或当前研究120的图像中被成像的身体部分(例如，乳房、头部)。当放射科医师正在做出诊断(即当前研究还未被报告)时，背景提取模块110也可以从当前研究的图像检查命令中提取包括患者的临床指示的背景信息。该背景信息被存储于存储器108的数据库118中，所述数据库也存储针对患者的当前和/或先前研究的发现(例如，肿瘤)相关的信息。数据库118也可以存储例如与发现有关的注释(即，图像上的标记)。处理器102还包括：捕获模块112，其每当用户在图像上创建新的注释时捕获信息并将所述信息存储到数据库118；以及自然语言处理(NLP)模块122，其从当前研究和/或先前报告中提取文本数据。
处理器102还包括背景匹配模块114，所述背景匹配模块将从当前研究120的图像中提取的背景与所有先前的研究进行匹配以确定哪些先前研究与当前研究120有关。在一个范例中，当前和/或先前研究信息可以在显示器106上被显示在概要视图中。例如，所述概要视图可以示出关于发现中的每个的观测结果和/或关于发现中的每个的图像上的注释。一旦概要视图已经被显示，处理器102的导航/可视化模块116就允许用户选择所显示的观测结果和/或注释以显示所选择的发现的其他细节。在另一范例中，还可以筛选相关先前研究以显示应当被包括在当前研究的报告中的发现的最小集合，从而保持报告的一致性和寿命。在另一示范性实施例中，背景匹配模块114还可以将当前/先前研究的背景信息与可用于由用户使用的模板/宏的背景信息进行比较，以返回相关模板/宏的集合。因此，用户可以容易地选择模板/宏以减少报告时间。用户选择可以经由用户接口104实现，所述用户接口可以包括输入设备，例如，键盘、鼠标和/或显示器106上的触摸显示。
图3示出了通过其生成概要视图的方法200。在步骤210中，系统100检索在当前研究120中要被分析的图像。例如，所述图像可以在放射信息管理系统(RIS)内的影像归档与通信系统(PACS)中存储和查看。在步骤220中，背景提取模块110从在当前研究中要被分析的图像中提取内容信息。如上所述，所述背景信息可以包括例如模态和/或身体部分。存储于RIS/PACS系统上的图像例如以DICOM(医学数字成像和通信)文件格式来存储和查看，所述文件格式包括包含关于模态和身体部分的信息的标头。当放射科医师或其他用户正在做出针对其中要被分析的图像还未被报告的当前研究的诊断时，背景信息也可以包括来自当前研究的成像命令的患者的临床指示。在步骤230中，所提取的背景信息然后被存储于数据库118中。数据库118还包括之前已经提取并存储的针对先前研究的图像的背景信息。
在步骤240中，先前研究的图像由捕获模块114进行分析以识别与发现相关的信息并将其存储于数据库118中。在癌症患者的情况下，发现可以包括图像中识别的肿瘤或肿块。观测结果可以包括例如对所述肿块的描述和/或肿瘤的活检的结果。可以在图像上创建针对观测结果和发现中的每个的注释。每当创建新的发现时，与发现相关的信息(包括观测结果和注释)被存储于数据库118中。每个发现可以具有与其相关联的多个观测结果。例如，发现可以是患者的左侧乳房上的第一肿块。放射科医师可以输入关于第一肿块的一个或多个观测结果，例如对肿块是恶性或良性的指定和/或对所述肿块的描述。每个观测结果可以具有在与其相关联的图像上的一个或多个注释。放射科医师也可以指示注释是针对新的发现(例如，第二肿块)的，使得创建新的发现和观测结果。备选地，放射科医师可以指示注释与针对现有的发现的新观测结果相关联。还可以通过使用自然语言处理(NLP)模块122(例如，MEDLEE)处理先前报告来存储先前与发现相关的信息，使得可以快速提取来自先前报告/研究的发现。NLP模块独自仅提供发现的文本信息而不示出图像注释。因此，NLP模块122可以与上述的捕获模块112组合以从先前的研究中提取文本数据和图像数据二者。当前研究的与发现相关的信息以类似的方式来生成并存储于数据库118中。本领域的技术人员将理解，当进行并回顾每个研究时，每个研究的与发现相关的信息可以被创建并存储于数据库118中，使得与发现相关的信息可以被存储于数据库中并且之后当必要时被调用(recall)。
在步骤250，背景匹配模块114将当前研究120的背景信息与先前研究的背景信息进行比较，以返回匹配的先前研究的集合。背景匹配能够使用各种匹配技术中的一种来实现。在第一范例中，背景匹配模块114可以利用基于规则的方法，其中，背景匹配模块114首先对研究进行匹配以确定模态和身体部分是否对应。第二，背景匹配模块114提取并且比较当前研究的协议信息与先前研究的协议信息。协议信息可以包括例如如下信息：造影剂是否被应用，研究是否为侧向双向的，左侧或右侧，以及在研究包括MR图像的情况下，采集类型(即2D/3D)和/或T1/T2。第三，系统100可以从DICOM中提取诸如患者位置和取向的信息以确定其是否与在先前研究中的患者的位置/取向匹配。
在第二范例中，背景匹配模块114可以利用基于本体论的方法，其中，综合的本体论用于确定当前研究的背景信息是否与先前研究的背景信息匹配。所述本体论可以包括解剖体相关的信息和模态相关的信息。例如，解剖体可以包括诸如“头部和颈部”或“腹部和骨盆”的身体区域，在所述身体区域下可以列出属于每个区域的具体器官。例如，肾脏和肝脏可以被包括在“腹部和骨盆”区域下面。使用本体论方法，背景匹配模块114可以确定，如果器官彼此匹配，则先前研究与当前研究匹配。例如，如果当前研究的背景是肾脏，则具有包括肾脏、左肾和/或右肾的背景信息的任何先前研究将被返回为相关。
在第三范例中，背景匹配模块114可以利用数据驱动的方法，其中，通过先前数据确定合适的背景。如上面关于背景提取模块110和数据库118描述的，每当用户选择或改变在导航/可视化模块116中的背景时，这些改变被存储并记录于数据库118中。例如，对于具有脑转移的肺癌患者，当前背景可以是脑部。然而，先前肺部相关的研究将也是相关的。因此，放射科医师当分析图像时可以选择这些其他相关的研究。系统100将这些选择存储于数据库118中，使得一旦系统100已经积累了足够的数据，背景匹配模块114就可以自动运行数据挖掘算法(例如，K-最近邻和交互信息)，以确定相关研究。这些算法可以确定哪些背景最相关地给出当前背景。
在第四范例中，背景匹配模块114可以利用混合的方法，其中，可以组合上述方法中的任何。例如，背景匹配模块114可以将基于规则的方法与基于本体论的方法进行组合，使得除诸如模态和身体部分的背景的匹配外，考虑了概念之间的语义关系。尽管上面描述了四种具体方法，但是本领域的技术人员将理解，只要背景匹配模块114能够将当前研究120的背景信息与先前研究的背景信息匹配，背景匹配模块114就可以利用各种匹配技术中的任何。
一旦背景匹配模块114返回匹配的先前研究的集合，在步骤260中，导航/可视化模块116就生成返回的匹配的先前研究的概要视图的集合，并将所述概要视图显示在显示器106上。如图4所示，概要视图例如可以示出针对相关的先前研究中的每个的发现和相关观测结果。在图4所示的示范性情况中，患者在2009年进行乳房摄影，其得到左侧乳房中的发现。在2010年，在具有造影剂和没有造影剂的情况下执行了MRI，得到针对该特定发现的两个观测结果。如第二和第三列所示，此时还发现两个额外的发现。当前背景被设置为示出包括乳房摄影和MRI的模态，如图4所示，并且身体部分被设置为“乳房”，如图5所示。概要视图提供背景敏感的患者发现的快速概括，从而允许用户查看最新的和/或最重要的相关的先前研究，而不必通过多个先前报告来读取。概要视图还允许用户对发现的进展进行可视化。例如，用户可以容易地确定已经有多少新发现在过去两年中被识别，这将提供对特定癌症传播地多么迅速的指示。
在步骤270中，用户可以经由用户接口104输入用户偏好。例如，用户可以经由用户接口104筛选概要视图中示出的先前研究或指示对当前背景的任何期望的改变。例如，用户可以扩大或缩小当前背景(例如，将当前背景缩小到仅包括MRI)，指示要在概要视图中显示的多个先前研究或者指示所有显示的先前研究都应落入其期间的期望的周期。其他筛选例如可以包括病变的类型，所述类型可以包括肿块、对称性和增强。用户还可以对先前研究进行导航以获得关于该研究的更加详细的信息。例如，用户可以经由鼠标单击选择观测结果以打开对应于该特定研究的报告。将鼠标悬停在观测结果上可以自动示出针对该研究的对应的关键图像，如图6所示。双击这些关键图像中的一幅可以自动打开关键图像窗口，使得用户可以以其原始尺寸和/或分辨率查看这些关键图像。
如图7所示，在备选实施例中，相比于显示相关先前研究的观测结果，概要视图可以示出与相关先前研究中的每个相关联的图像。图像还可以被示出为具有其注释，使得选择图像或注释将打开与所选择的图像相关的报告和/或观测结果。本领域的技术人员将理解，所期望的显示(例如，观测结果或图像)可以由用户指示为用户偏好。用户还可以指示其他偏好，例如，与发现中的每个有关的观测结果是否应当纵向地(如图4所示)或者水平地(如图7所示)来显示。本领域技术人员将理解，尽管没有具体描述，但是用于显示概要视图的各种其他用户偏好也是可能的。
根据图8所示的另一示范性实施例，通过确定在当前研究的报告中需要包括的先前相关的发现的最小集合，系统100可以用于质量保证目的，如下面将关于方法300更加详细地描述的。在打开针对当前研究的报告创建环境后，背景提取模块110从当前研究中提取背景信息以经由例如先前发现确定模块确定相关先前发现，所述先前发现确定模块可以包括：捕获模块112，其用于识别先前发现信息并将其存储到数据库118，其中，结构化报告系统已经被利用；NLP模块122，其用于从先前研究的文本报告(例如，从非结构化报告系统)中提取发现信息；以及背景匹配模块114，其用于将当前背景信息与先前背景信息进行比较以识别需要在当前研究中报告的发现的最小集合。一旦发现的最小集合已经被识别，处理器102还可以确定由相关先前发现使用的宏，使得宏可以重新用在针对当前研究的报告中。
如图9所示，用于从最近、相关先前研究识别发现的最小集合的方法300能够基本上类似于上述方法200。尤其是，步骤310至步骤340基本上类似于方法200的步骤210至步骤240。在步骤310中，系统100检索要被分析的当前研究的图像，并且在步骤320中使用背景提取模块110来从当前研究中提取背景信息。当前研究的背景可以以与关于方法200描述的背景提取基本上类似的方式来提取。在步骤330中，该背景信息被存储于数据库118中。在步骤340中，先前研究的与发现相关的信息被识别并存储于数据库118中，如上面关于步骤240描述的。在不存在结构化报告的情况下，先前研究的完整报告可以被存储于数据库118中。备选地，该信息可以以标准PACS格式来存储。
在步骤350中，NLP模块122可以从先前研究的自由文本放射科报告的印象部分中提取发现的集合。例如，如果先前报告声明：“在左侧桥小脑角池中有16×11mm直径肿块，膨胀到左侧内耳道的开口中，其在T2加权的图像上对于脑部而言是稍微高信号的并在T1加权对比后图像上明亮，这是由于均匀对比增强，”，NLP模块122将确定存在具有被设置到16×11mm的属性直径的‘在左侧小脑脑桥角池中的肿块’的发现。NLP模块122可以与步骤340中检索的先前报告结合使用。
在步骤360中，匹配模块114将当前研究背景与先前研究的背景进行比较以返回在当前研究的报告中需要包括的发现的最小集合，基本上如上面关于方法200的步骤250描述的。背景匹配可以使用上述方法中的任何来执行。例如，匹配模块114可以利用以下中的任何：基于规则的方法、基于本体论的方法、数据驱动的方法或者利用不同匹配过程的任何组合的混合方法。在步骤370中，处理器102返回当前研究的报告中应当包括的发现的最小集合。导航/可视化模块116可以经由例如图形用户界面将发现的最小集合显示在显示器上，所述图形用户界面还允许用户筛选和/或指定在最小集合中要返回的发现。缺省可以被设置为包括最近、相关先前研究的发现。例如，如果当前研究为肝脏研究，则发现的最小集合将基于最近的肝脏研究。用户可以使用所显示的图形用户界面容易地改变该缺省设置。例如，在已经为发现分派了临床显著性得分之处，用户能够期望仅报告具有最小临床显著性得分为3的先前发现。在另一实施例中，除了显示返回的相关先前发现外或代替于显示返回的相关先前发现，可以显示警报以提醒用户当前报告已经被保存，而不包括在步骤370中被视为相关的所有先前发现。
一旦先前相关研究已经被识别，宏(例如，可以经由宏的预先定义的名称插入到报告中的预先定义的文本)或来自先前研究的文本片段可以用于当前研究。在步骤380中，与发现的最小集合相关联的宏/语句被列出在显示器106上以供用户如期望地查看和使用。重复使用宏/文本提供报告之间的一致性并且保持发现的寿命。当重复使用先前宏时，处理器102可以基于先前发现来在当前研究中自动占据发现的相关域(例如，发现的形状)。在相关先前研究中使用的宏被存储于数据库118中。在自由文本报告环境内，包含发现的文本被用作宏。
当在放射科报告中使用口述系统时，宏可以是尤其有用的。放射科医师使用宏和模板(预先定义的文档结构)来快速并且有效地报告观测结果。在口述期间，用户说出语音命令，所述语音命令与模板和宏的定义进行匹配，使得处理器102可以将预先定义的文档结构或文本插入到报告中。例如，当用户撰写报告时，用户可以包括五个部分：流程、临床信息、比较、发现和印象。北美放射学会(RSNA)推荐根据模态、解剖结构和在查临床问题在每部分中将要报告的信息。例如，用于胸部X射线研究的模板可以如下：
流程
临床信息
咳嗦
发烧
气短
术前检查
比较
发现
心脏
肺部
骨
印象
正常
无急性疾病
当使用宏时，用户定义宏的内容和名称。内容是一段文本并且名称是将内容插入到报告的语音命令。例如，描述胆囊壁钙化的宏能够是“存在胆囊壁钙化并且与瓷胆囊相符，瓷胆囊与胆囊癌的发展的增加的风险相关联”。与该宏相关联的名称可以是“瓷胆囊”，使得当用户说出“瓷胆囊”时，处理器102将上面定义的文本自动插入到报告中。
根据另一示范性实施例，如图10和图11所示，方法400使用系统100生成用户可以用于当前研究的相关模板/宏的列表。如图10所示，背景提取模块110和NLP模块122用于从当前研究中提取背景信息(例如，提取诸如模态和身体部分的信息)，从针对当前研究的图像命令(例如，提取诸如体征和症状的临床信息)中提取背景信息以及从先前报告(例如，提取患者的推荐)中提取背景信息。所提取的信息则然后可以由背景匹配模块114进行匹配以提出相关的模板和/或宏。存储器108还可以包括在数据库118中的可用模板和宏。每个模板具有名称并且定义其中发现将被插入的部分的集合。每个宏具有名称并且定义用于插入到报告中的一段文本。
在步骤410中，如图11所示，NLP模块122从每个报告模板/宏的叙述的内容中提取背景信息。例如，可以从模板/宏中提取解剖体和诊断术语，使得系统100将属性的列表与每个模板/宏进行关联。这些属性被存储于存储器108中，使得之后可以调用模板/宏。在步骤420中，从当前研究和/或相关先前研究中提取背景信息。背景信息可以基本上如上述在方法200的步骤220和方法300的步骤320中描述地来提取。例如，如果研究包括身体部分和模态，则背景提取模块110可以提取DICOM属性。NLP模块122还可以从图像命令的检查部分的原因中提取患者体征和症状和/或从相关先前报告中提取患者的推荐，其包括：在每个报告处所报告的日期、每个报告中使用的协议/模态(例如，MRI、超声)、随访检查的协议/模态和日期(例如，MRI，6个月)以及每个报告中的图像的发现(例如，肝脏肿块)。例如，可以通过当前研究与先前研究之间的背景匹配来识别相关先前报告，如上面关于方法200和方法300描述的。
在步骤430中，背景匹配模块114将在步骤410中获得的模板/宏的背景信息与在步骤420中获得的当前研究和/或先前相关研究的背景信息进行比较，以生成相关模板/宏的集合。处理器102可以使用基于规则的方法、基于本体论的方法和数据驱动的方法(例如统计学方法)的任何组合，如上面关于方法200描述的。例如，处理器102可以将来自当前研究/先前研究的背景信息(例如，与临床体征、解剖体和协议有关的词语)与来自模板/宏定义的背景信息进行匹配。系统100还可以在匹配中使用同义词和缩写或词语。例如，“MRI”等同于“MR”和“磁共振成像”二者。使用基于本体论的推理，例如，处理器120将腹部CT研究与关于胃部、结肠、肝脏、脾脏、胰腺、肾脏、膀胱等的模板/宏进行匹配。在另一范例中，如果检查命令包括“随访”，则处理器102可以例如使用NLP模块122将随访与关于随访的模板/宏进行匹配。处理器102还可以将当前研究的日期和/或协议与来自先前报告的患者的推荐信息进行比较。如果存在匹配，则具有相同发现的相关的模板/宏能够比其他的排位更高。
在步骤440中，导航/显示模块116在显示器106上向用户显示相关的模板/宏。在一个示范性实施例中，仅显示相关的模板/宏。在另一示范性实施例中，模板/宏以相关性顺序被列出，其中，例如，最相关的模板/宏在列表的顶部上。在又一示范性实施例中，可以例如以字母表顺序显示可用的模板/宏的列表，其中，最相关模板/宏被突出显示。本领域技术人员将理解，用户可以经由用户接口104指示用于显示模板/宏的他/她的偏好。
应注意，根据PCT规则6.2(b)，权利要求书可以包括附图标记/标号。然而，不应将本权利要求书视为被限制于与附图标记/标号相对应的示范性实施例。
本领域的技术人员将理解，上述示范性实施例可以以任意种方式被实施，包括作为单独的软件模块，作为硬件和软件的组合等。例如，背景提取模块110、捕获模块112、背景匹配模块114、NLP模块122以及导航/可视化模块116可以是包含代码行的程序，所述程序当被编译时，可以在处理器上运行。
对于本领域的技术人员将显而易见的是，可以对所公开的示范性实施例和方法以及备选进行各种修改，而不背离本公开的精神或范围。因此，本公开旨在覆盖所述修改和变型，只要它们进入权利要求书及其等价方案的范围之内。

Claims (11)

1.一种用于建议与患者的当前医学研究(120)有关的宏的方法，包括：
检索包括要被分析的至少一幅图像的所述患者的所述当前医学研究(120)；
提取来自所述当前医学研究(120)的当前背景信息并且将所述当前背景信息存储于数据库(118)中；
将所述当前背景信息与来自所述患者的先前研究的先前背景信息进行匹配以返回所述患者的相关先前研究的集合；
提取来自可用宏的宏的背景信息，其中，每个宏包括要被插入所述当前医学研究中的预先定义的文本并具有预先定义的名称；
将所述宏的所述背景信息与所述当前背景信息和所述相关先前研究的先前背景信息进行匹配以生成相关的宏的列表；并且
响应于对所列出的宏的用户选择，在所述患者的所述当前医学研究(120)中使用所述所列出的宏。
2.根据权利要求1所述的方法，还包括：
显示相关先前研究的所述集合的概要视图，所述概要视图包括针对所述相关先前研究中的每个的与发现相关的信息。
3.根据权利要求1所述的方法，还包括：
分析先前研究的图像以识别并且存储与发现相关的信息。
4.根据权利要求3所述的方法，其中，所述与发现相关的信息包括描述所述发现的观测结果和与所述观测结果相关联的图像上的注释中的一个。
5.根据权利要求4所述的方法，其中，所显示的概要视图示出与每个相关先前研究的发现有关的观测结果和关键图像中的一个。
6.根据权利要求2所述的方法，还包括：
基于用户偏好来筛选所述概要视图。
7.根据权利要求6所述的方法，其中，筛选所述概要视图包括以下中的一个：修改当前背景；识别病变的类型；识别所显示的先前研究应当落入在其内的时间周期以及指示要被示出的多个先前研究。
8.根据权利要求1所述的方法，其中，将所述当前背景信息与所述先前背景信息进行匹配是通过使用基于规则的方法、本体论方法以及数据驱动的方法中的至少一个来执行的。
9.根据权利要求2所述的方法，还包括：
选择所述相关先前研究中的一个的与发现相关的信息，以显示对应于所选择的相关先前研究的进一步的信息。
10.一种用于建议与患者的当前医学研究(120)有关的宏的系统(100)，包括：
处理器(102)，其被配置为：
检索包括要被分析的至少一幅图像的所述患者的所述当前医学研究(120)，
提取来自所述当前医学研究(120)的当前背景信息，并且将所述当前背景信息与来自所述患者的先前研究的先前背景信息进行匹配以返回所述患者的相关先前研究的集合，
提取来自可用宏的宏的背景信息，其中，每个宏包括要被插入所述当前医学研究中的预先定义的文本并具有预先定义的名称，
将所述宏的所述背景信息与所述当前背景信息和所述相关先前研究的先前背景信息进行匹配以生成相关宏的列表，并且
响应于对所列出的宏的用户选择，在所述患者的所述当前医学研究(120)中使用所述所列出的宏；以及
存储器(108)，其将所述当前背景信息和先前背景信息存储在数据库(118)中。
11.一种非暂态计算机可读存储介质，在其上存储有可运行程序，其中，所述程序指示处理器(102)执行根据权利要求1所述的方法。
CN201480019266.9A 2013-03-29 2014-03-24 放射学发现的背景驱动的概要视图 Active CN105074708B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201361806550P 2013-03-29 2013-03-29
US61/806,550 2013-03-29
PCT/IB2014/060096 WO2014155273A1 (en) 2013-03-29 2014-03-24 A context driven summary view of radiology findings

Publications (2)

Publication Number Publication Date
CN105074708A CN105074708A (zh) 2015-11-18
CN105074708B true CN105074708B (zh) 2019-09-27

Family

ID=50486925

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201480019266.9A Active CN105074708B (zh) 2013-03-29 2014-03-24 放射学发现的背景驱动的概要视图

Country Status (5)

Country Link
US (2) US11289188B2 (zh)
EP (1) EP2979210A1 (zh)
JP (1) JP6461909B2 (zh)
CN (1) CN105074708B (zh)
WO (1) WO2014155273A1 (zh)

Families Citing this family (39)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11871901B2 (en) 2012-05-20 2024-01-16 Cilag Gmbh International Method for situational awareness for surgical network or surgical network connected device capable of adjusting function based on a sensed situation or usage
US10340041B2 (en) * 2014-05-09 2019-07-02 Acupath Laboratories, Inc. Biopsy mapping tools
CN107257977B (zh) * 2015-02-25 2021-08-24 皇家飞利浦有限公司 检测缺失的发现用于自动创建纵向发现视图
US20170061099A1 (en) * 2015-08-26 2017-03-02 Merge Healthcare Incorporated Context-specific element selection for structured image reporting
EP3356971B1 (en) 2015-10-02 2024-03-13 Koninklijke Philips N.V. System for mapping findings to pertinent echocardiogram loops
BR112018008905A8 (pt) * 2015-11-05 2019-02-26 Koninklijke Philips Nv método, e sistema
US20170337329A1 (en) * 2016-05-18 2017-11-23 Siemens Healthcare Gmbh Automatic generation of radiology reports from images and automatic rule out of images without findings
EP3475857A1 (en) * 2016-06-23 2019-05-01 Koninklijke Philips N.V. Facilitated structured measurement management tool progress and compliance analytics solution
EP3475860A1 (en) * 2016-06-28 2019-05-01 Koninklijke Philips N.V. System and architecture for seamless workflow integration and orchestration of clinical intelligence
WO2018077776A1 (en) * 2016-10-25 2018-05-03 Koninklijke Philips N.V. Device, system, and method for optimizing usage of prior studies
JP7278256B2 (ja) * 2017-07-25 2023-05-19 コーニンクレッカ フィリップス エヌ ヴェ 画像獲得ワークフローを最適化するためのデバイス、システム、及び方法
US11244746B2 (en) * 2017-08-04 2022-02-08 International Business Machines Corporation Automatically associating user input with sections of an electronic report using machine learning
US11071560B2 (en) 2017-10-30 2021-07-27 Cilag Gmbh International Surgical clip applier comprising adaptive control in response to a strain gauge circuit
US11801098B2 (en) 2017-10-30 2023-10-31 Cilag Gmbh International Method of hub communication with surgical instrument systems
US20190201130A1 (en) * 2017-12-28 2019-07-04 Ethicon Llc Communication of data where a surgical network is using context of the data and requirements of a receiving system / user to influence inclusion or linkage of data and metadata to establish continuity
US11257589B2 (en) 2017-12-28 2022-02-22 Cilag Gmbh International Real-time analysis of comprehensive cost of all instrumentation used in surgery utilizing data fluidity to track instruments through stocking and in-house processes
US11896443B2 (en) 2017-12-28 2024-02-13 Cilag Gmbh International Control of a surgical system through a surgical barrier
US11969142B2 (en) 2017-12-28 2024-04-30 Cilag Gmbh International Method of compressing tissue within a stapling device and simultaneously displaying the location of the tissue within the jaws
US11026751B2 (en) 2017-12-28 2021-06-08 Cilag Gmbh International Display of alignment of staple cartridge to prior linear staple line
US11013563B2 (en) 2017-12-28 2021-05-25 Ethicon Llc Drive arrangements for robot-assisted surgical platforms
US11389164B2 (en) 2017-12-28 2022-07-19 Cilag Gmbh International Method of using reinforced flexible circuits with multiple sensors to optimize performance of radio frequency devices
US11109866B2 (en) 2017-12-28 2021-09-07 Cilag Gmbh International Method for circular stapler control algorithm adjustment based on situational awareness
US11857152B2 (en) 2017-12-28 2024-01-02 Cilag Gmbh International Surgical hub spatial awareness to determine devices in operating theater
US11969216B2 (en) 2017-12-28 2024-04-30 Cilag Gmbh International Surgical network recommendations from real time analysis of procedure variables against a baseline highlighting differences from the optimal solution
US11832899B2 (en) 2017-12-28 2023-12-05 Cilag Gmbh International Surgical systems with autonomously adjustable control programs
US11844579B2 (en) 2017-12-28 2023-12-19 Cilag Gmbh International Adjustments based on airborne particle properties
US11998193B2 (en) 2017-12-28 2024-06-04 Cilag Gmbh International Method for usage of the shroud as an aspect of sensing or controlling a powered surgical device, and a control algorithm to adjust its default operation
US11864728B2 (en) 2017-12-28 2024-01-09 Cilag Gmbh International Characterization of tissue irregularities through the use of mono-chromatic light refractivity
US11896322B2 (en) 2017-12-28 2024-02-13 Cilag Gmbh International Sensing the patient position and contact utilizing the mono-polar return pad electrode to provide situational awareness to the hub
US11986233B2 (en) 2018-03-08 2024-05-21 Cilag Gmbh International Adjustment of complex impedance to compensate for lost power in an articulating ultrasonic device
US11534196B2 (en) 2018-03-08 2022-12-27 Cilag Gmbh International Using spectroscopy to determine device use state in combo instrument
US11090047B2 (en) 2018-03-28 2021-08-17 Cilag Gmbh International Surgical instrument comprising an adaptive control system
EP3779997A4 (en) * 2018-04-04 2021-05-19 FUJIFILM Corporation DEVICE FOR CONTROLLING THE DISPLAY OF A MEDICAL DOCUMENT, METHOD FOR CONTROLLING THE DISPLAY OF A MEDICAL DOCUMENT, AND PROGRAM FOR CONTROLLING THE DISPLAY OF A MEDICAL DOCUMENT
US11756691B2 (en) * 2018-08-01 2023-09-12 Martin Reimann Brain health comparison system
WO2020043684A1 (en) * 2018-08-28 2020-03-05 Koninklijke Philips N.V. Advanced loop selection systems and methods for supporting efficient echo comparison
US20200245925A1 (en) * 2019-02-06 2020-08-06 OptimDosing, LLC Smart multidosing
US11331101B2 (en) 2019-02-19 2022-05-17 Cilag Gmbh International Deactivator element for defeating surgical stapling device lockouts
CN112420167A (zh) * 2019-08-20 2021-02-26 阿里巴巴集团控股有限公司 影像报告的生成方法、装置及设备
JP7426908B2 (ja) * 2020-06-22 2024-02-02 キヤノン株式会社 医用情報処理装置、医用情報処理システム、医用情報処理方法、およびプログラム

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102844761A (zh) * 2010-04-19 2012-12-26 皇家飞利浦电子股份有限公司 使用放射学描述符的报告查看器
WO2013001678A1 (ja) * 2011-06-30 2013-01-03 パナソニック株式会社 類似症例検索装置および関連度データベース作成装置並びに類似症例検索方法および関連度データベース作成方法
WO2013018363A1 (ja) * 2011-08-04 2013-02-07 パナソニック株式会社 類似症例検索装置および類似症例検索方法

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003108664A (ja) 2001-09-27 2003-04-11 Yokogawa Electric Corp 所見作成システム
JP2004305551A (ja) 2003-04-09 2004-11-04 Konica Minolta Medical & Graphic Inc 医用画像読影システム
JP4719408B2 (ja) 2003-07-09 2011-07-06 富士通株式会社 医療情報システム
JP2005160502A (ja) * 2003-11-28 2005-06-23 Hitachi Medical Corp 画像診断支援装置
US8064663B2 (en) * 2004-12-02 2011-11-22 Lieven Van Hoe Image evaluation system, methods and database
JP2007072649A (ja) 2005-09-06 2007-03-22 Fujifilm Corp 読影レポート作成装置
US20070133736A1 (en) * 2005-10-17 2007-06-14 Siemens Corporate Research Inc Devices, systems, and methods for imaging
JP5128154B2 (ja) * 2006-04-10 2013-01-23 富士フイルム株式会社 レポート作成支援装置、レポート作成支援方法およびそのプログラム
JP2008021267A (ja) * 2006-07-14 2008-01-31 Fuji Xerox Co Ltd 文献検索システム、文献検索処理方法及び文献検索処理プログラム
JP5098253B2 (ja) * 2006-08-25 2012-12-12 コニカミノルタエムジー株式会社 データベースシステム、プログラム、及びレポート検索方法
JP5172262B2 (ja) 2007-09-27 2013-03-27 富士フイルム株式会社 レポート作成支援システム及びレポート作成支援方法
US8046226B2 (en) * 2008-01-18 2011-10-25 Cyberpulse, L.L.C. System and methods for reporting
US8485042B2 (en) * 2008-08-05 2013-07-16 Endress + Hauser Gmbh + Co. Kg Method for manufacturing an elastic body of Al2O3 ceramic, measuring membrane for a pressure sensor and pressure sensor with such a membrane
JP5173700B2 (ja) 2008-09-25 2013-04-03 キヤノン株式会社 データ検索装置およびその制御方法、データ検索システム
JP2011018111A (ja) 2009-07-07 2011-01-27 Konica Minolta Medical & Graphic Inc 情報処理システム、およびプログラム
JP2012053632A (ja) 2010-08-31 2012-03-15 Fujifilm Corp 医用レポート作成支援装置、医用レポート作成支援方法、並びに医用レポート作成支援プログラム
JP6143494B2 (ja) 2012-03-02 2017-06-07 東芝メディカルシステムズ株式会社 読影レポート作成支援システム、読影レポート作成支援装置、及び読影依頼装置
CN103324823A (zh) 2012-03-05 2013-09-25 株式会社东芝 阅片报告制作支援装置
WO2014169164A1 (en) * 2013-04-13 2014-10-16 The Trustees Of The University Of Pennsylvania System and method for medical image analysis and probabilistic diagnosis
US20170061099A1 (en) * 2015-08-26 2017-03-02 Merge Healthcare Incorporated Context-specific element selection for structured image reporting

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102844761A (zh) * 2010-04-19 2012-12-26 皇家飞利浦电子股份有限公司 使用放射学描述符的报告查看器
WO2013001678A1 (ja) * 2011-06-30 2013-01-03 パナソニック株式会社 類似症例検索装置および関連度データベース作成装置並びに類似症例検索方法および関連度データベース作成方法
WO2013018363A1 (ja) * 2011-08-04 2013-02-07 パナソニック株式会社 類似症例検索装置および類似症例検索方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
"医学影像挂片协议的相关技术研究";李永毅;《中国优秀硕士学位论文全文数据库 信息科技辑》;20130115;第2013年卷(第1期);第I138-1705页 *

Also Published As

Publication number Publication date
JP6461909B2 (ja) 2019-01-30
JP2016521149A (ja) 2016-07-21
US20160012319A1 (en) 2016-01-14
US20220199230A1 (en) 2022-06-23
US11289188B2 (en) 2022-03-29
CN105074708A (zh) 2015-11-18
WO2014155273A1 (en) 2014-10-02
EP2979210A1 (en) 2016-02-03

Similar Documents

Publication Publication Date Title
CN105074708B (zh) 放射学发现的背景驱动的概要视图
US20190220978A1 (en) Method for integrating image analysis, longitudinal tracking of a region of interest and updating of a knowledge representation
US7607079B2 (en) Multi-input reporting and editing tool
JP6914839B2 (ja) 放射線レポートのためのレポート内容のコンテキスト生成
US9014485B2 (en) Image reporting method
US8423571B2 (en) Medical image information display apparatus, medical image information display method, and recording medium on which medical image information display program is recorded
JP5517524B2 (ja) 医療診断支援装置、医療診断支援装置の制御方法およびプログラム
US8625867B2 (en) Medical image display apparatus, method, and program
US20110028825A1 (en) Systems and methods for efficient imaging
CN105940401A (zh) 背景敏感医学数据输入系统
JP2015524107A (ja) 患者情報を臨床基準にマッチングするシステム及び方法
CN102915400A (zh) 用于计算机支持地显示或分析医学检查数据的方法和装置
JP2017501494A (ja) 患者所見の所見中心の縦断的なビューの自動生成
US8503741B2 (en) Workflow of a service provider based CFD business model for the risk assessment of aneurysm and respective clinical interface
CN115830017B (zh) 基于图文多模态融合的肿瘤检测系统、方法、设备及介质
Roth et al. Multispecialty enterprise imaging workgroup consensus on interactive multimedia reporting current state and road to the future: HIMSS-SIIM collaborative white paper
JP2009080731A (ja) レポート作成支援システム及びレポート作成支援方法
JP5816321B2 (ja) 情報処理装置、情報処理システム、情報処理方法およびプログラム
US20230099284A1 (en) System and method for prognosis management based on medical information of patient
US12014495B2 (en) Generating reports from scanned images
WO2021172477A1 (ja) 文書作成支援装置、方法およびプログラム
US20230102428A1 (en) Generating reports from scanned images
EP4134977A1 (en) Predicting radiologic findings with machine-learning
WO2007143084A2 (en) Multi-input reporting and editing tool
CN114067961A (zh) 一种医学图像归档系统、方法及存储介质

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant