CN110741441A - 用于在图像解释环境中递送基于发现的相关临床背景的动态系统 - Google Patents

用于在图像解释环境中递送基于发现的相关临床背景的动态系统 Download PDF

Info

Publication number
CN110741441A
CN110741441A CN201880037449.1A CN201880037449A CN110741441A CN 110741441 A CN110741441 A CN 110741441A CN 201880037449 A CN201880037449 A CN 201880037449A CN 110741441 A CN110741441 A CN 110741441A
Authority
CN
China
Prior art keywords
discovery
image interpretation
image
patient information
user input
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201880037449.1A
Other languages
English (en)
Inventor
M·塞芬斯特
A·M·塔赫玛塞比马拉古奥施
K·斯潘塞
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Koninklijke Philips NV
Original Assignee
Koninklijke Philips NV
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Koninklijke Philips NV filed Critical Koninklijke Philips NV
Publication of CN110741441A publication Critical patent/CN110741441A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00—ICT specially adapted for the handling or processing of medical images
    • G16H30/20—ICT specially adapted for the handling or processing of medical images for handling medical images, e.g. DICOM, HL7 or PACS
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00—ICT specially adapted for the handling or processing of medical images
    • G16H30/40—ICT specially adapted for the handling or processing of medical images for processing medical images, e.g. editing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/60—Type of objects
    • G06V20/62—Text, e.g. of license plates, overlay texts or captions on TV images
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H10/00—ICT specially adapted for the handling or processing of patient-related medical or healthcare data
    • G16H10/60—ICT specially adapted for the handling or processing of patient-related medical or healthcare data for patient-specific data, e.g. for electronic patient records
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H15/00—ICT specially adapted for medical reports, e.g. generation or transmission thereof

Landscapes

  • Health & Medical Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Epidemiology (AREA)
  • Public Health (AREA)
  • Primary Health Care (AREA)
  • Medical Informatics (AREA)
  • General Health & Medical Sciences (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Radiology & Medical Imaging (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • General Physics & Mathematics (AREA)
  • Medical Treatment And Welfare Office Work (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)

Abstract

一种图像解释工作站包括：显示器(12)；用户输入设备(14、16、18)；电子处理器(20、22)；以及非瞬态存储介质，其存储由所述电子处理器可读并且可执行的指令。图像解释环境(31)由指令(30)实现，其将医学图像显示在至少一个显示器上，操纵所显示的医学图像，生成发现对象，并且构建图像检查发现报告(40)。发现对象检测指令(32)监测所述图像解释环境以检测发现对象的生成或者发现对象的用户选择。患者记录检索指令(34)从至少一个电子患者记录(24、25、26)识别并检索与由发现对象检测指令检测到的发现对象(40)相关的患者信息。患者记录显示指令(36)将由所述患者记录检索指令检索的患者信息显示在至少一个显示器上。

Description

用于在图像解释环境中递送基于发现的相关临床背景的动态 系统
技术领域
下文总体上涉及图像解释工作站领域、放射学领域、超声心动描记领域和相关领域。
背景技术
图像解释工作站给医学专业人员(诸如放射科医师或者心脏科医生)提供工具以通过诸如平移、缩放、三维(3D)绘制或者投影等的操作来查看图像，操纵图像，并且还提供用于选择和注释图像的部分并且用于生成图像检查发现报告的用户接口。作为范例，在放射学检查工作流程中，放射学检查有序并且请求的图像使用适合的成像设备来采集，例如用于MR成像的磁共振成像(MRI)设备、用于PET成像的正电子发射断层摄影(PET)成像设备、用于单光子发射计算机断层摄影(SPECT)成像的伽玛相机、用于CT成像的透射计算机断层摄影(CT)成像设备等。医学图像通常被存储在影像归档和通信系统(PACS)中，或者在诸如心血管信息系统(CVIS)的专门系统中。在实际成像检查之后，操作放射学解释工作站的放射科医师从PACS检索图像，在工作站的显示器上查看它们，并且键入、口述或以其他方式生成放射学发现报告。
作为另一说明性工作流范例，超声心动图有序，并且超声技术人员或者其他医学专业人员采集所请求的超声心动图图像。操作图像解释工作站的心脏科医生或者其他专业人员检索超声心动图图像，在工作站的显示器上查看它们，并且键入、口述或以其他方式生成超声心动图发现报告。
在这样的成像检查中，执行图像解释的放射科医师、心脏科医生或者其他医学专业人员可以从查看患者的医学记录(即，患者记录)获益，所述医学记录可以包含在从图像得出适当的临床发现中提供信息的关于患者的信息。患者的医学记录优选地电子地存储在电子数据库(诸如电子医学记录(EMR)、电子健康记录(EHR))中，或者在特定领域电子数据库(诸如用于心血管处置设施的前述CVIS)中。为此，已知经由图像解释工作站提供对被存储在EMR、EHR、CVIS、或者其他数据库处的患者记录的访问。例如，图像解释环境可以执行为在工作站上运行的一个程序，并且EMR接口可以执行为在工作站上并行运行的第二程序。
下文公开了某些改进。
发明内容
在一个所公开的方面中，一种图像解释工作站，包括：至少一个显示器；至少一个用户输入设备；电子处理器，其操作性地与所述至少一个显示器和所述至少一个用户输入设备连接；以及非瞬态存储介质，其存储由所述电子处理器可读并且可执行的指令。图像解释环境指令由所述电子处理器可读并且可执行以根据经由所述至少一个用户输入设备接收到的用户输入执行操作，包括医学图像在所述至少一个显示器上的显示、所显示的医学图像的操纵、发现对象的生成、和图像检查发现报告的构建。发现对象检测指令由所述电子处理器可读并且可执行以检测发现对象的生成或者经由所述至少一个用户输入设备对发现对象的用户选择。患者记录检索指令由所述电子处理器可读并且可执行以从至少一个电子患者记录识别并检索与由发现对象检测指令检测到的发现对象相关的患者信息。患者记录显示指令由所述电子处理器可读并且可执行以在所述至少一个显示器上显示由患者记录检索指令检索的患者信息。
在另一所公开的方面中，一种非瞬态存储介质存储指令，所述指令由电子处理器可读并且可执行以执行图像解释方法，所述电子处理器操作性地与至少一个显示器和至少一个用户输入设备连接。所述方法包括：提供图像解释环境以根据经由所述至少一个用户输入设备接收到的用户输入执行操作，包括：医学图像在所述至少一个显示器上的显示、所显示的医学图像的操纵、发现对象的生成、和图像检查发现报告的构建；监测所述图像解释环境以检测发现对象的生成或者用户选择；从至少一个电子患者记录识别并检索与生成或者用户选择的发现对象相关的患者信息；并且将所检索的患者信息显示在所述至少一个显示器上并且在所述图像解释环境中。
在另一所公开的方面中，一种图像解释方法由操作性地与至少一个显示器和至少一个用户输入设备连接的电子处理器执行。所述图像解释方法包括：提供图像解释环境以根据经由所述至少一个用户输入设备接收到的用户输入执行操作，包括：医学图像在所述至少一个显示器上的显示、所显示的医学图像的操纵、发现对象的生成、和图像检查发现报告的构建；监测所述图像解释环境以检测发现对象的生成或者用户选择；从至少一个电子患者记录识别并检索与生成或者用户选择的发现对象相关的患者信息；并且将所检索的患者信息显示在所述至少一个显示器上并且在所述图像解释环境中。
一个优点存在于响应于该发现的创建或者选择而自动地提供与图像发现相关的患者记录内容。
另一优点存在于提供具有经改进的用户接口的图像解释工作站。
另一优点存在于提供具有显著患者信息的更高效检索的图像解释工作站。
另一优点存在于提供与医学成像发现有关的背景信息。
给定实施例可以不提供前述优点，提供前述优点中一个、两个、更多或全部，和/或可以提供其他优点，如对于本领域的普通技术人员而言在阅读并且理解本公开之后将变得显而易见的。
附图说明
本发明可以采取各种部件和部件布置的形式，并且可以采取各种步骤和各步骤安排的形式。附图仅出于图示优选的实施例的目的而不应被解释为对本发明的限制。
图1图解地图示了具有与图像发现相关的患者记录信息的自动化检索的图像解释工作站；
图2和3呈现了由图1的图像解释工作站适合地生成的说明性显示范例；并且
图4图解地图示了用于与图像发现相关的患者记录信息的自动化检索的过程工作流程，其由图1的图像解释工作站适合地执行。
具体实施方式
在本文中应认识到，用于将患者记录信息集成到图像解释工作流程中的现有方法具有某些缺陷。例如，提供分离的并行运行患者记录接口程序未提供对相关患者信息的适时访问。为了使用这样的患者记录接口，放射科医师、内科医师、超声专家、或者其他图像解释者必须认识到，患者记录可以包含图像分析中的给定点处的相关信息，并且必须知道最可能相关的先验特定患者信息项，并且必须知道那些项必须位于电子患者记录中何处。关于最后一点，电子患者记录可以跨多个不同数据库散布，例如电子医学/健康记录(EMR或者EHR)可以存储一般患者信息，心血管信息系统(CVIS)可以存储特别地与心血管护理有关的信息，影像归档和通信系统(PACS)可以存储放射学图像和相关内容(诸如放射学报告)等。(一个或多个)特定数据库也可能特定于特定医院，其能够对于在若干不同医院处实践的图像解释者是混乱的。
在本文中还应认识到，图像解释期间发现的生成(或者，在一些情况下，先前生成的发现的选择)可以被用于提供用于发起来自电子患者记录的相关患者信息的识别和检索的特定触发器，以及用于这样的识别和检索的信息基础两者。更特别地，一些图像解释工作站提供标准化和/或结构化发现对象的自动化或者半自动化生成。在一些放射学工作站环境中，以标准化注释图像标记(AIM)格式生成发现对象。类似地，一些超声图像解释环境以标准化发现代码(FC)(即，表达特定图像发现的标准词语或者短语)的形式生成发现对象。这样的发现对象的生成或者用户选择在本文中的实施例中被用于触发患者记录检索操作，并且标准化和/或结构化发现对象为该检索操作提供信息基础。患者记录检索过程优选地自动地由发现对象的生成或者用户选择触发，并且标准化和/或结构化发现对象提供数据输入的有限空间从而使能使用将发现对象映射到患者信息项的相关患者信息查找表，从而使能自动化检索过程。优选地，检索的患者信息自动地被呈现给由图像解释者使用的(相同)图像解释环境中的解释者以执行图像解释过程。以这种方式，在没有图像解释环境内的任何额外用户交互的情况下，电子患者记录中的相关患者信息被自动地检索并且自动地呈现给图像解释者，因此改进图像解释工作站的用户接口和操作效率。
参考图1，说明性图像解释工作站包括至少一个显示器12和至少一个用户输入设备，例如说明性键盘14；说明性鼠标16、小键盘18、轨迹球、显示器12的触敏涂层、或者其他指点设备；听写麦克风(未示出)等。说明性图像解释工作站还包括电子处理器20、22-在说明性范例中，电子处理器20例如被实现为由放射科医师、超声专家或者图像解释者操作的本地台式或者笔记本计算机(例如，本地用户接口计算机)并且包括至少一个微处理器或者微控制器，并且电子处理器22例如被实现为经由局域网(LAN)、无线局域网(WLAN)、因特网、其各种组合、和/或一些其他电子数据网络与电子处理器20连接的远程服务器计算机。电子处理器22任选地自身可以包括多个互连的计算机，例如计算机集群、云计算资源等。电子处理器20、22包括或者与电子患者记录24、25、26操作性电子通信，其在说明性实施例中跨若干不同数据库分布：电子医学(或者健康)记录(EMR或者EHR)24，其存储一般患者信息；心血管信息系统(CVIS)25，其存储特别地与心血管护理有关的信息；以及影像归档和通信服务(PACS)25，其存储放射学图像。电子患者记录24、25、26仅是患者记录组合的一个示范性实施例并且可以排除电子患者记录24、25、26中的一个或多个，或者可以包括额外类型的电子患者记录，其将以其他方式预期在本公开的一般性质或者精神内(例如，在其他医疗保健领域中)，其中，电子患者记录的各种排列或组合是可能的，并且其中，电子患者记录构成任何数目的数据库或者甚至单个数据库。组成电子患者记录的(一个或多个)数据库可以具有与说明性图1的名字不同的名字，并且可以特定于除说明性一般心血管和放射学领域之外的特定信息领域。
图像解释工作站还包括存储由电子处理器20、22可读并且可执行以执行各种任务的非瞬态存储介质。非瞬态存储介质可以例如包括以下各项中的一项或多项：硬盘驱动器或者其他磁性存储介质、光盘或其他光学存储介质、固态驱动器(SSD)、FLASH存储器、或者其他电子存储介质、其各种组合等。在说明性实施例中，非瞬态存储介质存储图像解释环境指令30，其由电子处理器20、22可读并且可执行以根据经由至少一个用户输入设备14、16、18接收到的用户输入执行操作从而实现图像解释环境31。这些操作包括至少一个显示器12上的医学图像的显示、所显示的医学图像的操纵、发现对象的生成和图像检查发现报告的构建。图像解释环境指令30可以实现基本上任何适合的图像解释环境31，例如放射学读取环境、超声成像解释环境、其组合等。放射学读取环境通常操作性地与PACS 26连接以检索放射学检查的图像并且使能输入图像检查发现报告，有时被称为放射学读取背景中的放射学报告。类似地，对于心血管护理背景中的超声图像解释(例如超声心动图采集)，图像解释环境31通常通常与CVIS 25操作性连接以检索超声心动图检查图像并且使能输入图像检查发现报告，其可以被称为该背景下的超声心动图报告。
为了提供对被存储在电子患者记录24、25、26中的相关患者信息的发现对象触发的自动化访问，如本文所公开的，非瞬态存储介质还存储发现对象检测指令32，其由电子处理器20、22可读并且可执行以监测由图像解释环境指令30实现的图像解释环境31从而检测对发现对象的生成或者经由至少一个用户输入设备14、16、18对发现对象的用户选择。非瞬态存储介质还存储患者记录检索指令34，其由电子处理器20、22可读并且可执行以识别并检索来自至少一个电子患者记录24、25、26的与由发现对象检测指令32检测到的发现对象相关的患者信息。另外，非瞬态存储介质存储患者记录显示指令36，其由电子处理器20、22可读并且可执行以将由患者记录检索指令34检索的患者信息显示在至少一个显示器12上并且在由图像解释环境指令30实现的图像解释环境31中。
在下文中，更详细地描述了这些部件的一些说明性实施例。
图像解释环境指令30实现图像解释环境31(例如放射学读取环境、或者超声图像解释环境)。图像解释环境31根据经由至少一个用户输入设备14、16、18接收到的用户输入执行操作，包括至少一个显示器12上的医学图像的显示、所显示的医学图像的操纵(例如所显示的医学图像的至少平移和缩放，以及任选地其他操纵，诸如应用所选择的图像滤波器、调节对比度功能、轮廓器官、肿瘤、或者其他图像特征和/或等等)，以及图像检查发现报告40的构建。为了构建发现报告40，图像解释环境31提供发现的生成。
更特别地，图像解释环境31提供标准化和/或结构化发现对象的自动化或者半自动化生成。在一些放射学工作站环境中，以标准化注释图像标记(AIM)格式生成发现对象。在一个预期用户接口中，用户选择图像位置，诸如在相关发现(例如，肿瘤或者动脉瘤)处或附近的计算机断层摄影(CT)、磁共振(MR)或者其他放射学图像的像素。这带来背景TIM图形用户接口(GUI)对话框42(例如作为弹出式用户对话框)，经由背景AIM图形用户接口(GUI)对话框42，图像解释者利用表征其大小、形态、增强、本体论和/或等等的元数据(即，注释)标记发现。这些数据以AIM格式形成发现对象。将理解到，AIM是用于编码结构化发现对象的说明性标准。还预期了用于编码结构化发现对象的备选标准。一般而言，结构化发现对象优选地编码指定用于各种数据字段(键)的值的“键值”对，例如“解剖结构＝肺”是AIM格式的说明性范例，其中，“解剖结构”是键字段并且“肺”是值字段。以AIM格式，键值对通过定义XML标准分层相关。其他结构化发现对象格式可以被用于类似地提供用于表示发现对象的结构，例如作为适合地设计的关系数据库表等的键值元组(任选地具有表示键字段的属性的另外的列等)。
在适于超声心动图解释环境的另一说明性范例中，用户接口响应于通过提出指点发现代码GUI对话框44点击图像上的位置，经由该指点发现代码GUI对话框44，图像解释者可以例如从背景下拉菜单选择适当的发现代码。每个发现代码(FC)是关于心脏解剖结构的唯一和编码的观察或者诊断语句，例如发现代码可以是描述解剖结构特征的词语或者短语。
发现对象的生成或者用户选择在本文所公开的实施例中被用于触发患者记录检索操作，并且标准化和/或结构化发现对象为该检索操作提供信息基础。发现对象的生成(或者，备选地，先前地创建的发现对象的用户选择)由FO检测指令32检测，从而生成选择的发现对象(FO)46。检测可以例如通过检测用户操作用户输入设备14、16、18关闭FO生成(或者编辑)GUI对话框42、44触发。取决于发现对象的特定格式，可以任选地执行某种转换以生成FO 46作为用于搜索电子患者记录24、25、26的适合的信息元素。例如，在AIM或者另一结构化格式的发现对象的情况下，可以参考医学本体论48以将发现对象转换为自然语言词语或者短语。例如，诸如SNOMED或者RadLex的本体论可以被用于该目的。
患者记录检索指令34在服务器计算机22上执行以接收FO 46并且使用FO 46的信息内容从至少一个电子患者记录24、25、26识别并检索与FO46相关的患者信息。在一个方法中，非瞬态存储介质存储将发现对象映射到患者信息项的相关患者信息查找表50。查找表50可以被存储在存储指令30、32、34、36中的一些或全部的相同非瞬态存储介质上，或者可以被存储在不同非瞬态存储介质上。如使用在该背景下的术语“信息项”指代足以使得执行患者记录检索指令34能够定位并且检索某些相关患者信息的数据库字段、搜索项、或者其他位置信息的识别。例如，如果FO指示肺肿瘤，则相关患者信息可以是患者是否是吸烟者或者非吸烟者-因此，用于该FO的查找表可以包括包含该信息的EMR或者EHR 24中的数据库字段的位置。类似地，查找表50可以包括关于组织病理学检查是否已经执行以评估肺癌和/或等的条目定位信息。作为另一范例，在超声心动图解释的背景下的发现“隔膜变厚”的情况下，查找表50可以包括关键词“肥厚型心肌病”和“糖尿病”，因为这些状况通常与变厚的隔膜相关联，并且针对这些术语的发生搜索电子患者记录24、25、26。如果电子患者记录的内容使用诸如国际疾病分类版本10(ICD 10)、当代操作术语集(CPT)或者医学系统命名法(SNOMED)的本体论编码，那么这些术语适合地采用在查找表50中。在这样的情况下，查找表50还可以包括提供ICD 10代码等的自然语言词语或者短语的额外列。在AIM兼容对象与历史项之间维持映射，例如，ICD10。由查找表50提供的映射可以针对一些条目包含部分对象，这意指其不需要完全指定。用于放射学读取的样本查找表项目可以是：
·发现对象：解剖结构＝肺并且形态＝结节
·相关历史：“F17-尼古丁成瘾性”
而用于FC与患者记录项之间的超声心动图解释映射的样本查找表项目可以是：
·发现对象：“隔膜变厚”
·相关历史：“I42.2-肥厚型心肌病”
电子患者记录检索指令34由电子处理器22可执行以通过参考用于位置信息的相关患者信息查找表50识别并检索与发现对象46相关的患者信息并且然后搜索用于该位置处的相关患者信息的电子患者记录24、25、26(例如指定为特定数据字段，或者为搜索项以采用在SQL查询等中等等)。
在变型实施例中，背景映射从FC被部署到本体论概念上，因为FC被包含在非结构化“平坦”词典中。这样的次级映射可以手动构建或者使用概念提取引擎(例如MetaMap)自动生成。
在以下中，描述了电子患者记录检索指令34的说明性实现方案。执行指令34具有对潜在地异质医学文档和数据的一个或多个存储库的访问权。电子医学(或者健康)记录(EMR或者EHR)24是这样的存储库的一个实例。数据源可以具有多个形式，例如：ICD10代码的列表(例如，问题列表、过往医学历史、过敏反应列表)；CPT代码的列表(例如，过往手术列表)；RxNorm代码的列表(例如，药物列表)；分立数值数据元素(例如，包含在实验室报告和血压中)；叙述文档(例如，进展、手术、放射学、病理学和操作报告)；和/或等等。利用每个临床状况，定义零个或多个专用搜索模块，每个专用搜索模块搜索一种类型的数据源。例如，利用临床状况“糖尿病”，搜索模块可以与以下相关联：将已知ICD10糖尿病的列表与患者的问题列表匹配；将已知与糖尿病处置相关联的药物(例如，胰岛素)的列表与患者的药物列表匹配；将葡萄糖阈值与患者的最新实验室报告匹配；匹配叙述进展报告中的关键词(例如，“糖尿病”、“DM2”、“糖尿病患者”)的列表；和/或等等。如果存在匹配，则执行电子患者记录检索指令34将指针返回到(一个或多个)匹配源文档中的(一个或多个)位置以及信息的匹配元素。在一个实现方案中，执行电子患者记录检索指令34基于从发现对象46(例如，“下叶肺结节”)导出的搜索查询执行自由文本搜索。该搜索可以使用各种搜索方法(例如，弹性搜索)实现。如果仅采用基于FO的基于文本的搜索，那么适合地省略相关历史查找表50。在其他实施例中，使用发现对象46的词语或者短语的自由文本搜索使用相关历史查找表50增加检索操作。
所识别和所检索的患者历史通过执行患者记录显示指令36被显示在至少一个显示器12上。优选地，检索的患者信息被显示在至少一个显示器12上并且在图像解释环境31中，(例如在图像解释环境31的专用患者历史窗口中)，作为被叠加在被显示在图像解释环境31中的医学图像上的弹出式窗口等等。以这种方式，用户不需要切换到在电子处理器20上运行的不同应用(例如，分离的电子患者记录接口应用)以便访问检索的患者信息，并且该信息存在于图像解释者正用于观察被解释的医学图像的图像解释环境31中。在一些实施例(下文稍后所描述的)中，相关性学习指令52由电子处理器20、22可读并且可执行以通过将机器学习应用到经由至少一个用户输入设备14、16、18与所显示的患者信息的用户交互更新相关患者信息查找表50。
参考图2和3，在一些实施例中，执行患者记录显示指令36是交互式的(例如，通过点击特定所显示的患者信息部分)，面板出现，其显示源文档(例如，叙述报告)突出显示匹配信息和其周围内容。图2图示了图像解释环境31是放射学读取环境的预期的显示器。在该范例中，发现对象46是“右下叶结节”并且通过执行FO检测指令32创建(例如使用AIM GUI对话框42，或者更一般地用于以另一结构化格式输入发现从而创建结构化发现对象的GUI对话框)和检测，FO检测指令32监测用于FO的生成或者用户选择的图像解释环境31。FO 46的该检测触发患者记录检索指令34的执行，并且相关患者信息的检索然后触发患者记录显示指令36的执行以显示图2的说明性范例中的弹出式窗口60中的相关临床历史。窗口60中示出的加下划线元素[...]指示将打开集中在匹配信息处的源文档的动态超链接。此外，窗口60包括“添加到报告”按钮，其可以点击以将对应的患者信息添加到图像检查发现报告40(参见图1)。可以点击窗口60中的“关闭”按钮以关闭患者信息窗口60。
图3图示了图像解释环境31是超声心动图图像解释环境的预期的显示器。在该范例中，发现对象46是“隔膜变厚”并且通过执行FO检测指令32创建(例如使用FC GUI对话框44)和检测，FO检测指令32监测用于FO的生成或者用户选择的图像解释环境31。FO 46的该检测触发患者记录检索指令34的执行，并且相关患者信息的检索然后触发患者记录显示指令36的执行以显示图像解释环境31的分离的患者信息窗口62中的相关临床历史。窗口62中示出的加下划线元素[...]指示将打开集中在匹配信息处的源文档的动态超链接。此外，窗口62包括“添加到报告”按钮，其可以被点击以将对应的患者信息添加到图像检查发现报告40(参见图1)。可以点击窗口62中的“关闭”按钮以关闭患者信息窗口62。
返回参考图1，相关性学习指令52由电子处理器20、22可读并且可执行以通过将机器学习应用到经由至少一个用户输入设备14、16、18与所显示的患者信息的用户交互更新相关患者信息查找表50。例如，如果用户点击图2的窗口60中的“添加到报告”按钮之一(或者图3的窗口62中的“添加到报告”按钮之一)，则这可以被当作图像解释者已经推断添加到图像检查发现报告40的对应的患者信息实际上在图像解释者的视图中相关的指示。相反，未通过其对应的“添加到报告”按钮的选择添加到报告40的任何患者信息部分推测上不被认为由图像解释者相关。这些用户交互因此使得患者信息部分能够被标记为“相关的”(如果对应的“添加到报告”按钮被点击)或者“不相关的”(如果对应的“添加到报告”按钮未被点击)，并且这些标记可以然后被认为是人类注释，例如，真实结果值。执行相关性学习指令52然后通过将机器学习应用到这些用户交互(例如通过移除基于交互产生其“相关的”与“不相关的”比率低于某个阈值的患者信息部分的查找表50的任何条目)更新相关患者信息查找表50。为了使能新信息的添加，其被预期统计上添加不作为查找表50的一部分的患者信息检索的额外信息—如果这些添加由用户选择为具有大于某个阈值的统计结果的“相关的”，那么其可以被添加到查找表50。这些仅是说明性范例，并且可以使用其他机器学习方法。
在说明性实施例中，在本地工作站计算机20与远程计算机系统22之间分布各种可执行指令30、32、34、36的执行。特别地，在说明性实施例中，图像解释环境指令30、发现对象检测指令32和患者记录显示指令36由本地工作站计算机20本地执行；然而，患者记录检索指令34由远程服务器计算机22远程执行。这仅是说明性范例，并且指令执行可以不同地被分布在两个或更多个提供的电子处理器20、22中间，或者可以存在执行所有指令的单个电子处理器。
参考图4并且继续参考图1，描述了由图1的图像解释工作站适合地执行的说明性图像解释方法。在操作70中，监测图像解释环境31以检测发现对象46的创建或者用户选择。在操作72中，相关患者信息从电子患者记录24、25、26识别和检索，例如使用相关患者信息查找表50。在操作74中，所检索的相关患者信息被显示在图像解释环境31中。在任选操作76中，如果患者点击相应图2和3的窗口60、62中的“添加到报告”按钮，或者以其他方式选择以将检索的患者信息部分添加到图像检查发现报告40，那么该信息被添加到报告40。在任选操作78中，所检索的患者信息部分实际上被添加到图像检查发现报告40的用户交互数据由机器学习处理以更新相关患者信息查找表50。
已经参考优选的实施例描述本发明。在阅读并且理解前述详细描述之后可以想到修改和变化。本发明旨在被理解为包括所有这样的修改和变化，只要其落入权利要求书或其等价方案的范围之内。

Claims (21)

1.一种图像解释工作站，包括：
至少一个显示器(12)；
至少一个用户输入设备(14、16、18)；以及
电子处理器(20、22)，其操作性地与所述至少一个显示器和所述至少一个用户输入设备连接；以及
非瞬态存储介质，其存储：
图像解释环境指令(30)，其能够由所述电子处理器读取并运行以根据经由所述至少一个用户输入设备接收到的用户输入来执行操作，所述操作包括医学图像在所述至少一个显示器上的显示、对所显示的医学图像的操纵、对发现对象的生成、以及对图像检查发现报告(40)的构建；
发现对象检测指令(32)，其能够由所述电子处理器读取并运行以检测对发现对象的生成或者经由所述至少一个用户输入设备对发现对象的用户选择；
患者记录检索指令(34)，其能够由所述电子处理器读取并运行以从至少一个电子患者记录(24、25、26)识别并检索与由所述发现对象检测指令检测到的发现对象(40)相关的患者信息；以及
患者记录显示指令(36)，其能够由所述电子处理器读取并运行以在所述至少一个显示器上显示由所述患者记录检索指令检索到的患者信息。
2.根据权利要求1所述的图像解释工作站，其中：
所述非瞬态存储介质还存储将发现对象映射到患者信息项的相关患者信息查找表(50)；并且
所述患者记录检索指令(34)能够由所述电子处理器(20、22)运行以通过参考所述相关患者信息查找表来识别并检索与发现对象(46)相关的患者信息。
3.根据权利要求2所述的图像解释工作站，其中，所述非瞬态存储介质还存储：
相关性学习指令(52)，其能够由所述电子处理器(20、22)读取并运行以通过将机器学习应用到经由所述至少一个用户输入设备(14、16、18)与所显示的患者信息的用户交互来更新所述相关患者信息查找表(50)。
4.根据权利要求1-3中的任一项所述的图像解释工作站，其中：
对所述患者记录检索指令(34)的运行是由通过运行发现对象检测指令(34)对发现对象(46)的生成或者用户选择的检测触发的；并且
对所述患者记录显示指令(36)的运行是由通过执行患者记录检索指令对与发现对象相关的患者信息的检索触发的。
5.根据权利要求1-4中的任一项所述的图像解释工作站，其中，所述患者记录显示指令(36)还能够由所述电子处理器(20、22)读取并运行以监测经由所述至少一个用户输入设备(14、16、18)对由所述患者记录检索指令(34)检索到的所显示的患者信息的选择并且显示从至少一个电子患者记录(24、25、26)检索到的对应的源文档。
6.根据权利要求1-5中的任一项所述的图像解释工作站，其中：
所述图像解释环境指令(30)能够运行以通过包括以下项的操作以结构化格式生成发现对象：经由所述至少一个用户输入设备(14、16、18)对所显示的医学图像的图像特征的用户选择；以及经由所述至少一个用户输入设备与图形用户接口对话框(42)的交互对至少一个发现注释的输入；并且
所述发现对象检测指令(32)能够由所述电子处理器(20、22)运行以检测所述结构化格式的发现对象并且使用医学本体论(48)将所述结构化格式的所述发现对象转换为自然语言词语或者短语。
7.根据权利要求1-5中的任一项所述的图像解释工作站，其中：
所述图像解释环境指令(30)能够运行以通过经由所述至少一个用户输入设备(14、16、18)与图形用户接口对话框(44)的交互对发现代码的用户选择来生成发现对象；并且
所述发现对象检测指令能够由所述电子处理器(20、22)运行以检测对发现代码的生成或者用户选择。
8.根据权利要求1-7中的任一项所述的图像解释工作站，其中：
所述患者记录显示指令(36)还由所述电子处理器(20、22)读取并运行以根据经由所述至少一个用户输入设备(14、16、18)接收到的用户输入将由所述患者记录检索指令(34)检索到的患者信息复制到所述图像检查发现报告(40)。
9.根据权利要求1-8中的任一项所述的图像解释工作站，其中，所述图像解释环境指令(30)能够运行以根据经由所述至少一个用户输入设备(14、16、18)接收到的用户输入来执行至少包括对所显示的医学图像的平移和缩放的操纵。
10.一种存储指令的非瞬态存储介质，所述指令能够由电子处理器(20、22)读取并运行以执行图像解释方法，所述电子处理器操作性地与至少一个显示器(12)和至少一个用户输入设备(14、16、18)连接，所述图像解释方法包括：
提供图像解释环境(31)以根据经由所述至少一个用户输入设备接收到的用户输入来执行操作，所述操作包括医学图像在所述至少一个显示器上的显示、对所显示的医学图像的操纵、对发现对象的生成、以及对图像检查发现报告(40)的构建；
监测所述图像解释环境以检测对发现对象(46)的生成或者用户选择；
从至少一个电子患者记录(24、25、26)识别并检索与所生成的或者用户选择的发现对象相关的患者信息；并且
在所述至少一个显示器上并且在所述图像解释环境中显示所检索的患者信息。
11.根据权利要求10所述的非瞬态存储介质，还存储将发现对象映射到患者信息项的相关患者信息查找表(50)，其中，对患者信息的所述识别和所述检索通过参考所述相关患者信息查找表进行操作。
12.根据权利要求10-11中的任一项所述的非瞬态存储介质，其中，所述图像解释方法还包括：
通过将机器学习应用到经由所述至少一个用户输入设备(14、16、18)与所显示的患者信息的用户交互来更新所述相关患者信息查找表(50)。
13.根据权利要求10-12中的任一项所述的非瞬态存储介质，其中：
对患者信息的所述识别和所述检索是由对所生成的或者用户选择的发现对象(46)的检测触发的；并且
对所检索的患者信息的所述显示是由对所述患者信息的所述检索触发的。
14.根据权利要求10-13中的任一项所述的非瞬态存储介质，其中，对所检索的患者信息的所述显示还包括：
检测经由所述至少一个用户输入设备(14、16、18)对所选择的显示的患者信息的选择；以及
显示从至少一个电子患者记录检索到的并且包含所选择的显示的患者信息的源文档。
15.根据权利要求10-14中的任一项所述的非瞬态存储介质，其中：
所述图像解释环境(31)通过包括以下项的操作以注释图像标记(AIM)格式生成发现对象：经由所述至少一个用户输入设备(14、16、18)对所显示的医学图像的图像特征的用户选择；以及经由与图形用户接口对话框(42)交互的所述至少一个用户输入设备对至少一个发现注释的输入；并且
监测所述图像解释环境以检测对发现对象(46)的生成或者用户选择包括检测所述AIM格式的发现对象并且使用医学本体论(48)将所述AIM格式的所述发现对象转换为自然语言词语或者短语。
16.根据权利要求10-14中的任一项所述的非瞬态存储介质，其中：
所述图像解释环境(31)通过经由所述至少一个用户输入设备(14、16、18)与图形用户接口对话框(44)的交互对发现代码的用户选择来生成发现对象；并且
监测所述图像解释环境以检测对发现对象(46)的生成或者用户选择包括检测对发现代码的生成或者用户选择。
17.根据权利要求10-16中的任一项所述的非瞬态存储介质，其中，对由所述图像解释环境(31)提供的所显示的医学图像的所述操纵至少包括根据经由所述至少一个用户输入设备(14、16、18)接收到的用户输入对所显示的医学图像的平移和缩放。
18.一种图像解释方法，由操作性地与至少一个显示器(12)和至少一个用户输入设备(14、16、18)连接的电子处理器(20、22)执行，所述图像解释方法包括：
提供图像解释环境(31)以根据经由所述至少一个用户输入设备接收到的用户输入来执行操作，所述操作包括医学图像在所述至少一个显示器上的显示、对所显示的医学图像的操纵、对发现对象的生成、以及对图像检查发现报告(40)的构建；
监测所述图像解释环境以检测对发现对象(46)的生成或者用户选择；
从至少一个电子患者记录(24、25、26)识别并检索与所生成的或者用户选择的发现对象相关的患者信息；并且
在所述至少一个显示器上并且在所述图像解释环境中显示所检索的患者信息。
19.根据权利要求18所述的图像解释方法，其中，对患者信息的所述识别和所述检索通过参考将发现对象映射到患者信息项的相关患者信息查找表(50)进行操作。
20.根据权利要求18-19中的任一项所述的图像解释方法，其中：
所述图像解释环境(31)通过包括以下项的操作以注释图像标记(AIM)格式生成发现对象：经由所述至少一个用户输入设备(14、16、18)对所显示医学图像的图像特征的用户选择；以及经由所述至少一个用户输入设备与图形用户接口对话框(42)的交互对至少一个发现注释的输入；并且
监测所述图像解释环境以检测对发现对象(46)的生成或者用户选择包括检测所述AIM格式的发现对象并且使用医学本体论(48)将所述AIM格式的所述发现对象转换为自然语言词语或者短语。
21.根据权利要求18-19中的任一项所述的图像解释方法，其中：
所述图像解释环境(31)通过经由所述至少一个用户输入设备(14、16、18)与图形用户接口对话框(44)的交互对发现代码的用户选择来生成发现对象；并且
监测所述图像解释环境以检测对发现对象(46)的生成或者用户选择包括检测对发现代码的生成或者用户选择。
CN201880037449.1A 2017-05-05 2018-04-25 用于在图像解释环境中递送基于发现的相关临床背景的动态系统 Pending CN110741441A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201762501853P 2017-05-05 2017-05-05
US62/501,853 2017-05-05
PCT/EP2018/060513 WO2018202482A1 (en) 2017-05-05 2018-04-25 Dynamic system for delivering finding-based relevant clinical context in image interpretation environment

Publications (1)

Publication Number Publication Date
CN110741441A true CN110741441A (zh) 2020-01-31

Family

ID=62063532

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201880037449.1A Pending CN110741441A (zh) 2017-05-05 2018-04-25 用于在图像解释环境中递送基于发现的相关临床背景的动态系统

Country Status (5)

Country Link
US (1) US20200058391A1 (zh)
EP (1) EP3619714A1 (zh)
JP (1) JP7370865B2 (zh)
CN (1) CN110741441A (zh)
WO (1) WO2018202482A1 (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US12014807B2 (en) * 2021-12-10 2024-06-18 Merative Us L.P. Automated report generation using artificial intelligence algorithms

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104956399A (zh) * 2013-01-28 2015-09-30 皇家飞利浦有限公司 医学图像处理
WO2016125039A1 (en) * 2015-02-05 2016-08-11 Koninklijke Philips N.V. Communication system for dynamic checklists to support radiology reporting
CN106456125A (zh) * 2014-05-02 2017-02-22 皇家飞利浦有限公司 用于将医学图像中的特征链接到解剖结构模型的系统以及其操作方法

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6785410B2 (en) * 1999-08-09 2004-08-31 Wake Forest University Health Sciences Image reporting method and system
JP4389011B2 (ja) * 2004-04-07 2009-12-24 国立大学法人名古屋大学 医用レポート作成装置、医用レポート作成方法及びそのプログラム
JP4959996B2 (ja) * 2006-03-23 2012-06-27 株式会社東芝 読影レポート表示装置
JP5308973B2 (ja) * 2009-09-16 2013-10-09 富士フイルム株式会社 医用画像情報表示装置および方法並びにプログラム
US20120131436A1 (en) * 2010-11-24 2012-05-24 General Electric Company Automated report generation with links
JP5715850B2 (ja) * 2011-02-24 2015-05-13 株式会社東芝 読影レポート表示装置及び読影レポート作成装置
CN103140160B (zh) * 2011-03-30 2015-06-17 奥林巴斯医疗株式会社 图像管理装置、图像管理装置的工作方法以及胶囊型内窥镜系统
CN103733200B (zh) * 2011-06-27 2017-12-26 皇家飞利浦有限公司 由带有解剖学标记临床管理促进的检查审阅
US20150149215A1 (en) * 2013-11-26 2015-05-28 Koninklijke Philips N.V. System and method to detect and visualize finding-specific suggestions and pertinent patient information in radiology workflow
US20160335403A1 (en) * 2014-01-30 2016-11-17 Koninklijke Philips N.V. A context sensitive medical data entry system
JP2015156898A (ja) * 2014-02-21 2015-09-03 株式会社東芝 医用情報処理装置
US10438380B2 (en) * 2014-12-10 2019-10-08 Koninklijke Philips N.V. Systems and methods for translation of medical imaging using machine learning
US20160364527A1 (en) * 2015-06-12 2016-12-15 Merge Healthcare Incorporated Methods and Systems for Automatically Analyzing Clinical Images and Determining when Additional Imaging May Aid a Diagnosis

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104956399A (zh) * 2013-01-28 2015-09-30 皇家飞利浦有限公司 医学图像处理
CN106456125A (zh) * 2014-05-02 2017-02-22 皇家飞利浦有限公司 用于将医学图像中的特征链接到解剖结构模型的系统以及其操作方法
WO2016125039A1 (en) * 2015-02-05 2016-08-11 Koninklijke Philips N.V. Communication system for dynamic checklists to support radiology reporting

Also Published As

Publication number Publication date
EP3619714A1 (en) 2020-03-11
JP7370865B2 (ja) 2023-10-30
JP2020520500A (ja) 2020-07-09
US20200058391A1 (en) 2020-02-20
WO2018202482A1 (en) 2018-11-08

Similar Documents

Publication Publication Date Title
CN108475538B (zh) 用于将第三方应用集成在图像解读工作流中的结构化发现对象
CN110140178B (zh) 用于知道上下文的图像质量收集和反馈的闭环系统
US10248759B2 (en) Medical imaging reference retrieval and report generation
JP2017509946A (ja) コンテキスト依存医学データ入力システム
JP6875993B2 (ja) 臨床の所見のコンテキストによる評価のための方法及びシステム
US8799286B2 (en) System and method for organizing and displaying of longitudinal multimodal medical records
EP2191399A1 (en) System and method for analyzing electronic data records
JP2017533522A (ja) テキスト認識に基づくテキストイメージリンキングを伴うピクチャアーカイビングシステム
KR20140024788A (ko) 고급 멀티미디어 구조화 리포트
US9922026B2 (en) System and method for processing a natural language textual report
US20190108175A1 (en) Automated contextual determination of icd code relevance for ranking and efficient consumption
Möller et al. Radsem: Semantic annotation and retrieval for medical images
Cotik et al. An approach for automatic classification of radiology reports in Spanish
JP7370865B2 (ja) 画像読影環境において所見ベースの関連する臨床的コンテキストを提供する動的システム
EP4300505A1 (en) Medical structured reporting workflow assisted by natural language processing techniques
US11990232B2 (en) Clinical discovery wheel—a system to explore clinical concepts
Sasso et al. A visual query-by-example image database for chest CT images: potential role as a decision and educational support tool for radiologists
US20200051676A1 (en) Device, system, and method for optimizing usage of prior studies
CN110709941A (zh) 通过订单代码的医学研究时间线的智能组织
Sonntag et al. Design and implementation of a semantic dialogue system for radiologists
US20120191720A1 (en) Retrieving radiological studies using an image-based query
Seifert et al. Intelligent healthcare applications
EP4374380A1 (en) Data-based clinical decision-making utilising knowledge graph
Basilicata et al. Journal of Digitei Imaging

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination