CN116057519A - 用于增强临床图像管理的成像发现实用程序 - Google Patents

用于增强临床图像管理的成像发现实用程序 Download PDF

Info

Publication number
CN116057519A
CN116057519A CN202180055193.9A CN202180055193A CN116057519A CN 116057519 A CN116057519 A CN 116057519A CN 202180055193 A CN202180055193 A CN 202180055193A CN 116057519 A CN116057519 A CN 116057519A
Authority
CN
China
Prior art keywords
medical image
image files
metadata
files
nosql
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202180055193.9A
Other languages
English (en)
Inventor
M·帕尔玛
K·帕尔曼
R·P·拉姆
M·L·哈里斯
S·瓦拉胡尔
P·奈尔
J·H·斯潘塞
W·W·巴克斯特
C·C·迈尔斯
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Medtronic Inc
Original Assignee
Medtronic Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Medtronic Inc filed Critical Medtronic Inc
Publication of CN116057519A publication Critical patent/CN116057519A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00ICT specially adapted for the handling or processing of medical images
    • G16H30/20ICT specially adapted for the handling or processing of medical images for handling medical images, e.g. DICOM, HL7 or PACS
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/22Indexing; Data structures therefor; Storage structures
    • G06F16/221Column-oriented storage; Management thereof
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00ICT specially adapted for the handling or processing of medical images
    • G16H30/40ICT specially adapted for the handling or processing of medical images for processing medical images, e.g. editing
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/70ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for mining of medical data, e.g. analysing previous cases of other patients

Abstract

本发明提供了用于实现成像发现实用程序以增强临床图像管理的新工具和技术。在一些实施方案中,响应于从请求设备接收到对第一医学图像文件的请求,非关系型(“NoSQL”)数据管理系统(“DMS”)可访问NoSQL数据库,该NoSQL数据库尤其包含多个医学图像文件,这些医学图像文件是存储在关系型(“SQL”)数据库中的多个医学图像文件的镜像副本,这些医学图像文件各自按照以图像为中心的分层结构进行组织,其中图像数据处于顶层,并且与该图像数据相关联的患者信息处于低层。根据基于该请求中的搜索项而对该NoSQL数据库的成功搜索,该NoSQL DMS可识别该SQL数据库中的对应的第二医学图像,并且可检索以及(向该请求设备)发送所识别的第二医学图像。

Description

用于增强临床图像管理的成像发现实用程序
相关申请的交叉引用
本申请要求以下专利申请的优先权:Mark Palmer等人(代理人案卷号A0003326US01)于2020年9月8日提交的标题为“Imaging Discovery Utility forAugmenting Clinical Image Management”的美国专利申请序列号63/075,413(“'413申请”);以及Mark Palmer等人(代理人案卷号A0003326US02)于2021年6月16日提交的标题为“Imaging Discovery Utility for Augmenting Clinical Image Management”的美国专利申请序列号17/349,361(“'361申请”),其也要求'413申请的优先权。
这些申请/专利的相应公开内容(本文档将这些申请/专利统称为“相关申请”)出于所有目的全文以引用方式并入本文。
版权声明
本专利文档的公开内容的一部分包含受版权保护的材料。当本专利文档或专利公开出现在专利和商标局专利文件或记录中时,版权拥有人不反任何人对其进行拓制,但是无论如何在其他方面都保留所有版权权利。
技术领域
本公开整体涉及用于实现图像管理的方法、系统和装置,并且更具体地,涉及用于实现成像发现实用程序以增强临床图像管理的方法、系统和装置。
背景技术
临床成像约占美国采集的所有临床数据的80%。常规的商用临床图像管理系统通常专注于通过具体记录标识符进行一次性患者安全访问。与图像系统所含内容相关的元数据被存储在单独的储存库中,诸如电子健康记录或其他数据库,而没有与图像的直接链接。一些常规系统也将工件(或工件文件)附加为嵌入列表,这使附件浏览出现问题。此类具体实施使得难以(如果不是不可能的话)标记、挖掘所导出的工件(或工件文件)并将其与图像关联。
因此,需要更稳健且可扩展的解决方案用于实现图像管理,并且更具体地,需要用于实现成像发现实用程序以增强临床图像管理的方法、系统和装置。
附图说明
可通过参考说明书和图式的其余部分来实现对特定实施方案的性质和优点的进一步理解,在图式中,相同的附图标号用于指代类似的部件。在一些实例中,子标签与附图标号相关联以标示多个类似部件中的一个部件。当参考附图标号而不说明现有子标签时,旨在指代所有此类多个类似部件。
图1是示出了根据各种实施方案的用于实现成像发现实用程序以增强临床图像管理的系统的示意图。
图2是示出了根据各种实施方案的用于实现成像发现实用程序以增强临床图像管理的系统的部件之间的交互的非限制性示例的示意图。
图3A-图3D是示出了根据各种实施方案的当实现用于增强临床图像管理的成像发现实用程序时可使用的图像数据库元数据的各种非限制性示例的示意图。
图4A-图4L是示出了根据各种实施方案的当实现用于增强临床图像管理的成像发现实用程序时可使用的用户界面的各种非限制性示例的示意图。
图5A-图5D是示出了根据各种实施方案的用于实现成像发现实用程序以增强临床图像管理的方法的流程图。
图6是示出了根据各种实施方案的示例性计算机或系统硬件架构的框图。
图7是示出了可根据各种实施方案使用的计算机、计算系统或系统硬件架构的联网系统的框图。
具体实施方式
概述
各种实施方案提供了用于实现图像管理的工具和技术,并且更具体地,提供了用于实现成像发现实用程序以增强临床图像管理的方法、系统和装置。
在各种实施方案中,非关系型(“NoSQL”)数据管理系统(“DMS”)可以从与用户相关联的请求设备接收对至少一个第一医学图像文件的请求,该请求包括一个或多个搜索项。在一些实施方案中,一个或多个搜索项可包括但不限于以下至少一项:一项或多项搜索标准、与至少一个项目描述相关的一个或多个关键字、与至少一个源研究名称相关的一个或多个关键字、与至少一个解剖区域相关的一个或多个关键字、与患者类别的至少一个特征相关的一个或多个关键字、与患者的至少一个人口统计相关的一个或多个关键字、与患者的至少一个身体特征相关的一个或多个关键字、与疾病的至少一个特征相关的一个或多个关键字、与一种或多种并存病的至少一个特征相关的一个或多个关键字、与满足一项或多项搜索标准的每张医学图像的至少一个特征相关的一个或多个关键字、与用于获得满足一项或多项搜索标准的一张或多张医学图像的至少一个模态的至少一个特征相关的一个或多个关键字、与用于获得满足一项或多项搜索标准的一张或多张医学图像的至少一个成像设备的至少一个特征相关的一个或多个关键字、以及/或者与至少一个附加参数相关的一个或多个关键字等。
NoSQL DMS可访问由NoSQL DMS管理的NoSQL数据库,并且通过对与NoSQL数据库中的多个医学图像文件中的每个医学图像文件相关联的多个元数据标签中的一个或多个搜索项的每个搜索项进行搜索,可执行对NoSQL数据库的搜索。基于确定与多个医学图像文件中的一个或多个第二医学图像文件相关联的至少一个元数据标签包含了与一个或多个搜索项中的至少一个搜索项对应或匹配的关键字,NoSQL DMS可识别存储在由SQL DMS管理的关系型(“SQL”)数据库中的对应的一个或多个第二医学图像文件,其中由于镜像数据存储在NoSQL和SQL数据库中,所以对NoSQL数据库的搜索用作对SQL数据库的索引搜索。NoSQLDMS和/或SQL DMS中的至少一者可以从SQL数据库中检索一个或多个第二医学图像文件,并且可以向请求设备发送所检索的一个或多个第二医学图像文件。在一些情况下,向请求设备发送所检索的一个或多个第二医学图像文件另选地或另外地包括:利用NoSQL DMS或SQLDMS中的至少一者向请求设备发送相关搜索结果的列表,相关搜索结果的列表包括所检索的一个或多个第二医学图像文件,其中所检索的一个或多个第二医学图像文件可包括但不限于与多个不同患者相关联的两个或更多个医学图像文件。
在一些实施方案中,计算系统可以从请求设备接收对至少一个第一医学图像文件的请求,并且通过将请求转发到NoSQL DMS,可以向NoSQL DMS查询所请求的至少一个第一医学图像文件。在一些情况下,计算系统可经由请求设备来呈现用户界面(“UI”)。在此类情况下,可经由UI来接收请求。在一些情况下,向请求设备发送所检索的一个或多个第二医学图像文件可包括:在UI中,显示所检索的一个或多个第二医学图像文件。
根据一些实施方案,计算系统可以将所检索的一个或多个第二医学图像文件转换为一个或多个符合DICOM的搜索结果。在一些情况下,在UI中显示所检索的一个或多个第二医学图像文件可包括:在UI中,将所检索的一个或多个第二医学图像文件显示为所转换的一个或多个符合DICOM的搜索结果。在一些情况下,基于确定用户的鼠标光标悬停在符合DICOM的搜索结果上,计算系统可至少部分地基于一个或多个搜索项来生成并显示指示与符合DICOM的搜索结果相关联的特定信息或值的弹出显示项。
在一些实施方案中,计算系统可以为UI中显示的所检索的一个或多个第二医学图像文件中的每个第二医学图像文件提供一个或多个任务选项。在一些情况下,一个或多个任务选项可包括但不限于以下至少一项:下载一个或多个第二医学图像文件中的具体一个或多个第三医学图像文件的选项;将一个或多个第二医学图像文件中的具体一个或多个第四医学图像文件添加到至少一个项目组文件夹中的选项;将一个或多个第二医学图像文件中的至少两个第五医学图像文件链接起来的选项;导出一个或多个第二医学图像文件中的一个或多个第六医学图像文件的选项;共享一个或多个第二医学图像文件中的一个或多个第七医学图像文件的选项;上传一个或多个第八医学图像文件的选项;开始新搜索的选项;保存当前搜索的选项;管理所保存的搜索的选项;查看最近搜索的选项;导出搜索的选项;打开新项目文件夹的选项;保存当前项目文件夹的选项;管理项目文件夹的选项;完成当前项目的选项;查看活动项目的选项;以及/或者导出项目文件夹的选项等。
根据一些实施方案,至少部分地基于所检索的一个或多个第二医学图像文件中的至少一个第十二医学图像文件,模型生成系统(在一些情况下,其可实现于计算系统等之中)可生成一个或多个三维(“3D”)模型。
在一些方面,基于确定由NoSQL DMS管理的NoSQL数据库或由SQL DMS管理的SQL数据库中的一个数据库的内容已经改变,该系统(即,NoSQL DMS、SQL DMS或计算系统等中的至少一者;本文也称为“图像发现实用程序”等)可以自主地将所改变的内容镜射到NoSQL数据库或SQL数据库中的另一数据库中。
重要的是,参照各种实施方案所述的成像发现实用程序通过以下方式解决了上文参照常规的商用临床图像管理系统所述的每个挑战(即,在将所导出的工件或工件文件与临床图像进行标记、挖掘和关联方面的挑战):启用对成像记录的动态标记;启用对图像管理下的所有图像(不管图像与哪个患者相关联)的搜索;以及启用将图像链接到从图像导出的数据和工件(或工件文件)。
该解决方案实现了结构化和非结构化数据库的耦接。结构化数据库可包含使图像可发现或可搜索所需的最小数据字段,而非结构化数据库可提供基于用户需要或当从图像中导出更多信息时动态增强或丰富数据字段的能力。数据结构也将工件链接到图像,此类工件包括但不限于图像处理分析文件、分割文件、三维(“3D”)打印文件和/或机器学习(“ML”)算法文件等。可以跨数据字段以及跨相关联的文件和工件来执行搜索。该系统的另外特征是基于搜索标准将图像聚集成集子或集合的能力。该系统能够搜索可组织成项目集合的成像资产和相关工件。该系统也允许发现并重用耗资不菲从图像中提取出的信息和工件。成像的重用为研发应用以及/或者为监管应用提供了大量证据,同时提高了研发生产率并避免了购买复本成像所带来的成本。该系统提供了对监管或临床问题的快速响应,同时提供了不同商用单位之间的知识获取和共享,并且提供了识别与战略性地满足超出一个商用单位或公司之外的成像需求的能力。应用场景包括:利用一组公共标准来创建重点数据集,该公共标准用以创建或应用人工智能(“AI”)和/或ML方法、基于图集的分割方法或其他类型的分析等。
参照附图更加详细地描述了用于增强临床图像管理的成像发现实用程序的这些和其他方面。
以下详细描述进一步详细地说明了一些示例性实施方案,以使本领域技术人员能够实践此类实施方案。因此,所描述示例仅是为了说明性目的而提供的,并不意图限制本发明的范围。
在以下描述中,出于解释的目的,阐述了众多具体细节以便提供对所描述实施方案的透彻理解。然而,对本领域技术人员将显而易见的是,可在没有这些具体细节中的一些具体细节的情况下实践本发明的其他实施方案。在其他实例中,以框图形式示出某些结构和设备。本文描述了若干实施方案,并且虽然各种特征归属于不同实施方案,但是应当了解,关于一个实施方案所描述的特征也可与其他实施方案结合。然而,由于同样的原因,任何所描述实施方案的单个特征或多个特征都不应当被认为对于本发明的每个实施方案是必不可少的,因为本发明的其他实施方案可省略此类特征。
除非另外指明,否则本文用来表达数量、尺寸等的所有数字应当被理解为在所有实例中由术语“约”修饰。在本专利申请中,除非另外特别说明,否则单数的使用包括复数,并且除非另外指明,否则术语“和”和“或”的使用意指“和/或”。此外,术语“包括(including)”以及其他形式诸如“包括(includes)”和“包括(included)”的使用应当被认为是非排他性的。而且,除非另外特别说明,否则术语诸如“元件”或“部件”涵盖包括一个单元的元件和部件以及包括多于一个单元的元件和部件两者。
本文所述的各种实施方案虽然(在一些情况下)体现了软件产品、计算机执行的方法和/或计算机系统,但其代表对现有技术领域的有形的具体改进,包括但不限于图像管理技术、医学图像管理技术、医学图像发现技术和/或用户界面技术等。在其他方面,例如通过如下方式,某些实施方案可改进用户设备或系统本身(例如,图像管理系统、医学图像管理系统、医学图像发现系统、用户界面系统等)的运转:利用非关系型(“NoSQL”)数据管理系统(“DMS”)并从请求设备接收对至少一个第一医学图像文件的请求,该请求包括一个或多个搜索项;利用NoSQL DMS来访问由NoSQL DMS管理的NoSQL数据库,NoSQL数据库包含多个医学图像文件、与每个医学图像文件相关联的多个元数据标签、以及与多个医学图像文件中的两个或更多个医学图像文件相关联的多个工件文件,NoSQL数据库包含存储在由SQL DMS管理的关系型(“SQL”)数据库中的多个医学图像文件的镜像副本,其中NoSQL数据库和SQL数据库中所包含的多个医学图像文件各自按照以图像为中心的分层结构进行组织,其中图像数据处于以图像为中心的分层结构的顶层,并且与图像数据相关联的患者信息处于以图像为中心的分层结构的顶层之下的层;通过在与NoSQL数据库中的多个医学图像文件中的每个医学图像文件相关联的多个元数据标签中搜索一个或多个搜索项中的每项,利用NoSQL DMS来执行对NoSQL数据库的搜索;以及基于确定与多个医学图像文件中的一个或多个第二医学图像文件相关联的至少一个元数据标签包含与一个或多个搜索项中的至少一个搜索项对应或匹配的关键字:利用NoSQL DMS来识别存储在SQL数据库中的对应的一个或多个第二医学图像文件,其中对NoSQL数据库的搜索用作对SQL数据库的索引搜索;利用NoSQL DMS或SQL DMS中的至少一者并从SQL数据库中检索一个或多个第二医学图像文件;以及利用NoSQL DMS或SQL DMS中的至少一者,向请求设备发送所检索的一个或多个第二医学图像文件等。
具体地,就各种实施方案中存在任何抽象概念来说,这些概念可以如本文所述由涉及特定新颖功能性(例如,步骤或操作)的设备、软件、系统和方法来实现,诸如NoSQL数据库和SQL数据库中镜像医学图像数据;将NoSQL DMS和NoSQL数据库用于执行稳健的索引搜索功能以搜索存储在SQL数据库中的镜像医学图像数据;在NoSQL数据库内和SQL数据库内,按照以图像为中心的分层结构来组织该医学图像数据,其中图像数据处于以图像为中心的分层结构的顶层,并且与图像数据相关联的患者信息处于以图像为中心的分层结构的顶层之下的层等,仅举数例而言,它们延伸超过仅仅常规的计算机处理操作。这些功能性可以在所实现的计算机系统之外产生有形的结果,包括(仅以举例的方式):启用对成像记录的动态标记;启用对图像管理下的所有图像(不管图像与哪个患者相关联)的搜索;启用将图像链接到从图像导出的数据和工件(或工件文件);基于搜索标准,将图像聚集成集子或集合;允许发现与重用耗资不菲从图像中提取出的信息和工件;提供对监管或临床问题的快速响应;同时提供不同商用单位之间的知识获取和共享,并提供识别与战略性地满足超出一个商用单位或公司之外的成像需求的能力等,其中至少一些结果可以由用户(例如,医护专业人员、研究员等)和/或服务提供商进行观察或测量。
在一个方面,一种方法可包括:利用非关系型(“NoSQL”)数据管理系统(“DMS”)并从请求设备接收对至少一个第一医学图像文件的请求,该请求包括一个或多个搜索项;以及利用NoSQL DMS来访问由NoSQL DMS管理的NoSQL数据库,NoSQL数据库包含多个医学图像文件、与每个医学图像文件相关联的多个元数据标签、以及与多个医学图像文件中的两个或更多个相关联的多个工件文件。NoSQL数据库可包含存储在由SQL DMS管理的关系型(“SQL”)数据库中的多个医学图像文件的镜像副本,其中包含在NoSQL数据库和SQL数据库中的多个医学图像文件各自按照以图像为中心的分层结构进行组织,其中图像数据处于以图像为中心的分层结构的顶层,并且与图像数据相关联的患者信息处于以图像为中心的分层结构的顶层之下的层。该方法也可包括:通过在与NoSQL数据库中的多个医学图像文件中的每个医学图像文件相关联的多个元数据标签中搜索一个或多个搜索项中的每项,利用NoSQL DMS来执行对NoSQL数据库的搜索。该方法还可包括基于确定与多个医学图像文件中的一个或多个第二医学图像文件相关联的至少一个元数据标签包含与一个或多个搜索项中的至少一个搜索项对应或匹配的关键字:利用NoSQL DMS来识别存储在SQL数据库中的对应的一个或多个第二医学图像文件,其中对NoSQL数据库的搜索用作对SQL数据库的索引搜索;利用NoSQL DMS或SQL DMS中的至少一者并从SQL数据库中检索一个或多个第二医学图像文件;以及利用NoSQL DMS或SQL DMS中的至少一者,向请求设备发送所检索的一个或多个第二医学图像文件。
在一些实施方案中,该方法还可包括:利用计算系统并从请求设备接收对至少一个第一医学图像文件的请求;以及通过将请求转发到NoSQL DMS,利用计算系统向NoSQLDMS查询所请求的至少一个第一医学图像文件。在一些情况下,该方法还可包括:经由请求设备,利用计算系统来呈现用户界面(“UI”);其中请求经由UI来接收;并且其中向请求设备发送所检索的一个或多个第二医学图像文件可包括:在UI中,显示所检索的一个或多个第二医学图像文件。在一些情况下,该方法还可包括:利用计算系统将所检索的一个或多个第二医学图像文件转换为一个或多个符合医学数字成像和通信(“DICOM”)的搜索结果;其中在UI中显示所检索的一个或多个第二医学图像文件可包括:在UI中,将所检索的一个或多个第二医学图像文件显示为所转换的一个或多个符合DICOM的搜索结果。在一些情况下,该方法还可包括:基于确定用户的鼠标光标悬停在符合DICOM的搜索结果上,利用计算系统,至少部分地基于一个或多个搜索项,来生成并显示指示与符合DICOM的搜索结果相关联的特定信息或值的弹出显示项。
根据一些实施方案,该方法还可包括:利用计算系统,为UI中显示的所检索的一个或多个第二医学图像文件中的每个第二医学图像文件提供一个或多个任务选项。在一些情况下,一个或多个任务选项可包括以下至少一项:下载一个或多个第二医学图像文件中的具体一个或多个第三医学图像文件的选项;将一个或多个第二医学图像文件中的具体一个或多个第四医学图像文件添加到至少一个项目组文件夹中的选项;将一个或多个第二医学图像文件中的至少两个第五医学图像文件链接起来的选项;导出一个或多个第二医学图像文件中的一个或多个第六医学图像文件的选项;共享一个或多个第二医学图像文件中的一个或多个第七医学图像文件的选项;上传一个或多个第八医学图像文件的选项;开始新搜索的选项;保存当前搜索的选项;管理所保存的搜索的选项;查看最近搜索的选项;导出搜索的选项;打开新项目文件夹的选项;保存当前项目文件夹的选项;管理项目文件夹的选项;完成当前项目的选项;查看活动项目的选项;以及/或者导出项目文件夹的选项等。在一些情况下,可以将单个成像会话期间所获得的一个或多个第二医学图像文件中的两个或更多个第九医学图像文件与共享元数据、公共元数据和/或链接元数据等之中的至少一项作为单个成像资产而组合起来。在一些情况下,一个或多个任务选项还可包括以下至少一项:在UI中一起预览两个或更多个第九医学图像文件的选项;将两个或更多个第九医学图像文件作为单个图像文件集而下载的选项;将两个或更多个第九医学图像文件作为单个图像文件集而导出的选项;将两个或更多个第九医学图像文件作为单个图像文件集而共享的选项;以及/或者单独地或分组地编辑与两个或更多个第九医学图像文件中的每个第九医学图像文件相关联的元数据的选项等。另选地或另外地,一个或多个任务选项还可包括以下至少一项:对一个或多个第二医学图像文件中的一个或多个第十医学图像文件执行自动分割的选项;以及/或者对一个或多个第二医学图像文件中的一个或多个第十一医学图像文件执行自动测量的选项等。
在一些实施方案中,计算系统可包括以下至少一项:NoSQL DMS的处理器、SQL DMS的处理器、混合型NoSQL/SQL DMS的处理器、用于NoSQL DMS和SQL DMS两者的控制器、网络上的服务器计算机、网络上的基于云的计算系统、和/或分布式计算系统等。在一些情况下,请求设备可包括以下至少一项:膝上型计算机、台式计算机、平板计算机、智能电话、移动电话和/或web客户端等。在一些情况下,多个工件文件可包括以下至少一项:一个或多个原始图像数据文件、一个或多个文档文件、一个或多个图像处理分析文件、一个或多个分割文件、一个或多个三维(“3D”)打印文件、一个或多个立体光刻(“STL”)文件、一个或多个测量文件、一个或多个实验文件、一个或多个项目文件、一个或多个机器算法文件、以及/或者一个或多个报告文件等。
仅以举例的方式,在一些情况下,一个或多个搜索项可包括以下至少一项:一项或多项搜索标准、与至少一个项目描述相关的一个或多个关键字、与至少一个源研究名称相关的一个或多个关键字、与至少一个解剖区域相关的一个或多个关键字、与患者类别的至少一个特征相关的一个或多个关键字、与患者的至少一个人口统计相关的一个或多个关键字、与患者的至少一个身体特征相关的一个或多个关键字、与疾病的至少一个特征相关的一个或多个关键字、与一种或多种并存病的至少一个特征相关的一个或多个关键字、与满足一项或多项搜索标准的每张医学图像的至少一个特征相关的一个或多个关键字、与用于获得满足一项或多项搜索标准的一张或多张医学图像的至少一个模态的至少一个特征相关的一个或多个关键字、与用于获得满足一项或多项搜索标准的一张或多张医学图像的至少一个成像设备的至少一个特征相关的一个或多个关键字、以及/或者与至少一个附加参数相关的一个或多个关键字等。
根据一些实施方案,多个元数据标签可包括灵活的图像标签,其能够定制为包括一个或多个标准医学图像元数据和一个或多个非标准医学图像元数据。在一些情况下,一个或多个标准医学图像元数据可包括符合医学数字成像和通信(“DICOM”)的元数据。在一些情况下,一个或多个非标准医学图像元数据可包括以下至少一项:造影剂元数据、与设备属性相关联的元数据、与植入技术相关联的元数据、与患者是否健康相关的元数据、与图像扫描质量相关的元数据、与至少一个医学专业所用的一个或多个特定参数相关联的元数据、以及/或者一个或多个能够定制的元数据等。
在一些实施方案中,向请求设备发送所检索的一个或多个第二医学图像文件可包括:利用NoSQL DMS或SQL DMS中的至少一者向请求设备发送相关搜索结果的列表,相关搜索结果的列表包括所检索的一个或多个第二医学图像文件,其中所检索的一个或多个第二医学图像文件可包括与多个不同患者相关联的两个或更多个第十二医学图像文件。
根据一些实施方案,该方法还可包括:至少部分地基于所检索的一个或多个第二医学图像文件中的至少一个第十三医学图像文件,利用模型生成系统来生成一个或多个三维(“3D”)模型。
在另一方面,系统可包括由SQL数据管理系统(“DMS”)管理的关系型(“SQL”)数据库;SQL DMS;由NoSQL DMS管理的非关系型(“NoSQL”)数据库;和NoSQL DMS。NoSQL数据库可包含多个医学图像文件、与每个医学图像文件相关联的多个元数据标签、以及与多个医学图像文件中的两个或更多个医学图像文件相关联的多个工件文件,NoSQL数据库包含存储在由SQL DMS管理的SQL数据库中的多个医学图像文件的镜像副本,其中NoSQL数据库和SQL数据库中所包含的多个医学图像文件各自按照以图像为中心的分层结构进行组织,其中图像数据处于以图像为中心的分层结构的顶层,并且与图像数据相关联的患者信息处于以图像为中心的分层结构的顶层之下的层;
NoSQL DMS可包括至少一个第一处理器以及通信地耦接到该至少一个第一处理器的第一非瞬态计算机可读介质。第一非瞬态计算机可读介质上可存储有包括第一指令集的计算机软件,该第一指令集在由至少一个第一处理器执行时,使NoSQL DMS:从请求设备接收对至少一个第一医学图像文件的请求,该请求包括一个或多个搜索项;访问由NoSQL DMS管理的NoSQL数据库;通过在与NoSQL数据库中的多个医学图像文件中的每个医学图像文件相关联的多个元数据标签中搜索一个或多个搜索项中的每项,执行对NoSQL数据库的搜索;以及基于确定与多个医学图像文件中的一个或多个第二医学图像文件相关联的至少一个元数据标签包含与一个或多个搜索项中的至少一个搜索项对应或匹配的关键字:识别存储在SQL数据库中的对应的一个或多个第二医学图像文件,其中对NoSQL数据库的搜索用作对SQL数据库的索引搜索;从SQL数据库中检索一个或多个第二医学图像文件;以及向请求设备发送所检索的一个或多个第二医学图像文件。
在一些实施方案中,该系统还可包括计算系统,该计算系统包括:至少一个第二处理器;以及通信地耦接到该至少一个第二处理器的第二非瞬态计算机可读介质,第二非瞬态计算机可读介质上存储有包括第二指令集的计算机软件,第二指令集在由至少一个第二处理器执行时,使计算系统:从请求设备接收对至少一个第一医学图像文件的请求;以及通过将请求转发到NoSQL DMS,向NoSQL DMS查询所请求的第一医学图像文件。
在又一方面,一种方法可包括:基于确定由NoSQL数据管理系统(“DMS”)管理的非关系型(“NoSQL”)数据库或由SQL DMS管理的关系型(“SQL”)数据库中的一个数据库的内容已经改变,自主地将所改变的内容镜射到NoSQL数据库或SQL数据库中的另一数据库中,NoSQL数据库包含多个医学图像文件、与每个医学图像文件相关联的多个元数据标签、以及与多个医学图像文件中的两个或更多个医学图像文件相关联的多个工件文件,NoSQL数据库包含存储在SQL数据库中的多个医学图像文件的镜像副本,其中NoSQL数据库和SQL数据库中所包含的多个医学图像文件各自按照以图像为中心的分层结构进行组织,其中图像数据处于以图像为中心的分层结构的顶层,并且与图像数据相关联的患者信息处于以图像为中心的分层结构的顶层之下的层。
在再一方面,一种方法可包括:利用非关系型(“NoSQL”)数据管理系统(“DMS”)或关系型(“SQL”)DMS中的一个DMS并从与用户相关联的用户设备,接收用以修改与医学图像文件相关联的元数据属性的请求,该医学图像文件被存储并镜射在由NoSQL DMS管理的NoSQL数据库以及由SQL DMS管理的SQL数据库中的每个数据库之中。该方法也可包括:利用NoSQL DMS或SQL DMS中的一个DMS来呈现用户界面(“UI”),该用户界面具有供用户动态地修改与医学图像文件相关联的元数据属性的选项,其中动态地修改元数据属性的选项包括以下至少一项:动态地将分组特定元数据属性添加到医学图像文件的元数据字段中;动态地修改医学图像文件的元数据字段中的分组特定元数据属性;动态地删除医学图像文件的元数据字段中的分组特定元数据属性;动态地定义医学图像文件中新的分组特定元数据字段;动态地修改医学图像文件的分组特定元数据字段;动态地删除医学图像文件的分组特定元数据字段;以及/或者动态地将元数据字段与一个或多个工件文件链接等。该方法还可包括:响应于基于所呈现的选项而接收用户输入以动态地修改与医学图像文件相关联的元数据属性,更新NoSQL数据库或SQL数据库中的一个数据库之中且与该医学图像文件相关联的分组特定元数据字段或分组特定元数据属性中的至少一项,以及将与该医学图像文件相关联的分组特定元数据字段或分组特定元数据属性中的至少一项的改变镜射到NoSQL数据库或SQL数据库中的另一数据库之中。
在另一方面,一种方法可包括:利用非关系型(“NoSQL”)数据管理系统(“DMS”)或关系型(“SQL”)DMS中的一个DMS并从与用户相关联的用户设备,接收将一个或多个工件文件与元数据属性相关联的请求,该医学图像文件被存储并镜射在由NoSQL DMS管理的NoSQL数据库以及由SQL DMS管理的SQL数据库中的每个数据库之中。该方法也可包括:利用NoSQLDMS或SQL DMS中的一个DMS来呈现用户界面(“UI”),该用户界面具有供用户修改与医学图像文件相关联的元数据属性以包括元数据属性与一个或多个工件文件之间的链接的选项。该方法还可包括:响应于基于所呈现的选项而接收用户输入以修改与医学图像文件相关联的元数据属性,更新与NoSQL数据库或SQL数据库中的一个数据库之中的元数据属性相关联的元数据字段以包括元数据属性与一个或多个工件文件之间的链接,以及将对元数据字段或元数据属性中的至少一项的改变镜射到NoSQL数据库或SQL数据库中的另一数据库之中,其中元数据属性与一个或多个工件文件之间的链接包括元数据属性与一个或多个工件文件中的每个文件之间的关系映射。
在再一方面,一种方法可包括:响应于收到对至少一个第一医学图像文件的请求,利用非关系型(“NoSQL”)数据管理系统(“DMS”)来针对与多个对象相关联的医学图像文件,对NoSQL数据库进行索引搜索,NoSQL数据库包含多个医学图像文件、与每个医学图像文件相关联的多个元数据标签、以及与多个医学图像文件中的两个或更多个医学图像文件相关联的多个工件文件,NoSQL数据库包含存储在由SQL DMS管理的关系型(“SQL”)数据库中的多个医学图像文件的镜像副本。该方法还可包括:基于对NoSQL数据库的索引搜索,从SQL数据库中检索所请求的至少一个第一医学图像文件。在一些情况下,执行索引搜索可包括:基于医学图像文件的属性,在多个对象之间,执行与多个医学图像文件相关联的元数据搜索,而无需基于患者数据每次对一个对象进行搜索,每个医学图像文件被定义为每个数据结构的根节点,并且与医学图像文件相关联的每个对应对象被定义为该数据结构的从属节点。
在不脱离本发明的范围的情况下,可对所讨论的实施方案进行各种修改和添加。例如,虽然上述实施方案提及特定特征,但是本发明的范围还包括具有不同特征组合的实施方案以及并非包括上述特征中的全部特征的实施方案。
具体示例性实施方案
现在转向如图式所例示的实施方案。图1-图7示出了用于实现图像管理的方法、系统和装置的一些功能,并且更具体地,涉及用于实现成像发现实用程序以增强临床图像管理的方法、系统和装置,如上所述。图1-图7所示的方法、系统和装置是指包括各种部件和步骤的不同实施方案的示例,这些部件和步骤可被认为是另选方案或可在各种实施方案中彼此结合使用。对图1-图7所示的所例示的方法、系统和装置的描述是出于说明性目的而提供的,并且不应当被认为限制不同实施方案的范围。
参考附图,图1是示出了根据各种实施方案的用于实现成像发现实用程序以增强临床图像管理的系统100的示意图。
在图1的非限制性实施方案中,系统100可包括非关系型(“NoSQL”)数据管理系统(“DMS”)105和对应的NoSQL数据库110。在一些实施方案中,NoSQL数据库110可包含医学图像数据115,其可包括但不限于多个医学图像文件、与每个医学图像文件相关联的多个元数据标签、以及/或者与多个医学图像文件中的两个或更多个医学图像文件相关联的多个工件文件等。系统100还可包括关系型(“SQL”)DMS 120和对应的SQL数据库125。根据一些实施方案,SQL数据库125可包含医学图像数据130,其可包括但不限于多个医学图像文件、与每个医学图像文件相关联的多个元数据标签、以及/或者与多个医学图像文件中的两个或更多个医学图像文件相关联的多个工件文件等。在一些情况下,NoSQL数据库110可包含存储在SQL DMS 120管理的SQL数据库125中的多个医学图像文件的镜像副本(在图1中由标记为“镜像数据”的符号来表示)。NoSQL数据库110和SQL数据库125中所包含的多个医学图像文件中的每个文件均可按照以图像为中心的分层结构进行组织,其中图像数据处于以图像为中心的分层结构的顶层,并且与图像数据相关联的患者信息处于以图像为中心的分层结构的顶层之下的层,这在图像发现和管理方面优于以患者为中心的常规数据管理系统,在常规数据管理系统中,患者信息处于以患者为中心的分层结构的顶层,并且与患者数据相关联的图像信息处于以患者为中心的分层结构的顶层之下的层。
在本文中,结构化查询语言(“SQL”)可以指用于处理关系型数据库的标准语言,该语言按表格的形式来定义关系。另一方面,NoSQL(其可代表“不仅仅是SQL”或“不是SQL”等)可以指非关系型数据管理系统(“DMS”),该非关系型DMS使用动态模式(而非SQL数据库所用的固定或预定义模式),避免连接,易于扩展(因为NoSQL可利用公共硬件并因此通过增加资源池中的数据库服务器来扩展以减少负载(“水平可扩展”),而SQL需要专用数据库硬件以获得更好的性能,并因此通过增加专用设备的性能来扩展(“垂直可扩展”),并且可以是以下至少一项:基于文档的、基于键值对的、基于列的和/或基于图形的等。虽然传统的关系型数据库管理系统使用SQL语法来存储和检索数据,但是NoSQL数据库系统涵盖了可用于存储结构化、半结构化、非结构化和/或多态数据的广泛数据库技术。
在一些情况下,多个工件文件可包括但不限于以下至少一项:一个或多个原始图像数据文件、一个或多个文档文件、一个或多个图像处理分析文件、一个或多个分割文件、一个或多个三维(“3D”)打印文件、一个或多个立体光刻(“STL”)文件、一个或多个测量文件、一个或多个实验文件、一个或多个项目文件、一个或多个机器算法文件、以及/或者一个或多个报告文件等。在一些情况下,多个元数据标签可包括但不限于能够定制为包括一个或多个标准医学图像元数据和一个或多个非标准医学图像元数据的灵活图像标签。在一些情况下,一个或多个标准医学图像元数据可包括符合医学数字成像和通信(“DICOM”)的元数据。在一些情况下,一个或多个非标准医学图像元数据可包括但不限于以下至少一项:造影剂元数据、与设备属性相关联的元数据、与植入技术相关联的元数据、与患者是否健康相关的元数据、与图像扫描质量相关的元数据、与至少一个医学专业所用的一个或多个特定参数相关联的元数据、以及/或者一个或多个能够定制的元数据等。
系统100还可包括一个或多个网络135、计算系统140和对应的数据库145、以及web服务器150和对应的数据库155,计算系统140和web服务器150均可经由一个或多个网络135而与NoSQL DMS 105和/或SQL DMS 120通信地耦接。在一些实施方案中,计算系统可包括但不限于以下至少一项:NoSQL DMS的处理器、SQL DMS的处理器、混合型NoSQL/SQL DMS的处理器、用于NoSQL DMS和SQL DMS两者的控制器、网络上的服务器计算机、网络上的基于云的计算系统、和/或分布式计算系统等。
系统100还可包括分别与第一到第N用户165a-165n(统称为“用户165”等)相关联的一个或多个请求设备160a-160n(统称为“请求设备160”等)。在一些情况下,一个或多个请求设备均可包括但不限于以下至少一项:膝上型计算机、台式计算机、平板计算机、智能电话、移动电话和/或web客户端等。经由一个或多个网络135以及一个或多个网络170,一个或多个请求设备160可以与NoSQL DMS 105、SQL DMS 120、计算系统140和/或web服务器150中的至少一项通信地耦接。系统100还可包括一个或多个用户界面(“UI”)175a-175n(统称为“UI 175”等),每个用户界面显示在一个或多个请求设备160a-160n中的对应请求设备160中。
仅以举例的方式,网络135和/或网络170均可包括局域网(“LAN”),包括但不限于光纤网络、以太网和/或令牌环TM网络等;广域网(“WAN”);无线广域网(“WWAN”);虚拟网络,诸如虚拟专用网络(“VPN”);互联网;内联网;外联网;公用交换电话网(“PSTN”);红外网络;无线网络,包括但不限于在IEEE 802.11协议套组中的任何协议、本领域中已知的BluetoothTM协议和/或任何其他无线协议下操作的网络;和/或这些和/或其他网络的任何组合。在具体实施方案中,网络135和/或网络170均可包括因特网服务提供商(“ISP”)的接入网络。在另一实施方案中,网络135和/或网络170均可包括ISP的核心网络、和/或因特网。
在操作中,NoSQL DMS 105可以从与用户165相关联的请求设备160(经由网络135和170等)接收对至少一个第一医学图像文件的请求,该请求包括一个或多个搜索项。在一些实施方案中,一个或多个搜索项可包括但不限于以下至少一项:一项或多项搜索标准、与至少一个项目描述相关的一个或多个关键字、与至少一个源研究名称相关的一个或多个关键字、与至少一个解剖区域相关的一个或多个关键字、与患者类别的至少一个特征相关的一个或多个关键字、与患者的至少一个人口统计相关的一个或多个关键字、与患者的至少一个身体特征相关的一个或多个关键字、与疾病的至少一个特征相关的一个或多个关键字、与一种或多种并存病的至少一个特征相关的一个或多个关键字、与满足一项或多项搜索标准的每张医学图像的至少一个特征相关的一个或多个关键字、与用于获得满足一项或多项搜索标准的一张或多张医学图像的至少一个模态的至少一个特征相关的一个或多个关键字、与用于获得满足一项或多项搜索标准的一张或多张医学图像的至少一个成像设备的至少一个特征相关的一个或多个关键字、以及/或者与至少一个附加参数相关的一个或多个关键字等。
NoSQL DMS 105可访问由NoSQL DMS 105管理的NoSQL数据库110,并且通过对与NoSQL数据库110中的多个医学图像文件(即,医学图像数据115等)中的每个医学图像文件相关联的多个元数据标签中的一个或多个搜索项的每个搜索项进行搜索,可执行对NoSQL数据库110的搜索。基于确定与多个医学图像文件中的一个或多个第二医学图像文件相关联的至少一个元数据标签包含了与一个或多个搜索项中的至少一个搜索项对应或匹配的关键字,NoSQL DMS 105可识别存储在SQL数据库125中的对应的一个或多个第二医学图像文件(即,医学图像数据130等),其中由于NoSQL数据库110和SQL数据库125中所存储的镜像数据115和130,对NoSQL数据库110的搜索用作对SQL数据库125的索引搜索。NoSQL DMS105和/或SQL DMS 120中的至少一个DMS可以从SQL数据库125中检索一个或多个第二医学图像文件,并且可以向请求设备160发送所检索的一个或多个第二医学图像文件。在一些情况下,向请求设备发送所检索的一个或多个第二医学图像文件可另选地或另外地包括:利用NoSQL DMS 105或SQL DMS 120中的至少一个DMS向请求设备发送相关搜索结果的列表,相关搜索结果的列表包括所检索的一个或多个第二医学图像文件,其中所检索的一个或多个第二医学图像文件可包括但不限于与多个不同患者相关联的两个或更多个医学图像文件。
在一些实施方案中,计算系统140和/或web服务器150(统称为“计算系统”等)可以从请求设备160接收对至少一个第一医学图像文件的请求,并且通过将请求转发到NoSQLDMS 105,可以向NoSQL DMS 105查询所请求的至少一个第一医学图像文件。在一些情况下,计算系统可经由请求设备160来呈现UI 175。在此类情况下,可经由UI 175来接收请求。在一些情况下,向请求设备发送所检索的一个或多个第二医学图像文件可包括:在UI 175中,显示所检索的一个或多个第二医学图像文件。
根据一些实施方案,计算系统可以将所检索的一个或多个第二医学图像文件转换为一个或多个符合DICOM的搜索结果。在一些情况下,在UI175中显示所检索的一个或多个第二医学图像文件可包括:在UI 175中,将所检索的一个或多个第二医学图像文件显示为所转换的一个或多个符合DICOM的搜索结果。在一些情况下,基于确定用户的鼠标光标悬停在符合DICOM的搜索结果上,计算系统可至少部分地基于一个或多个搜索项来生成并显示指示与符合DICOM的搜索结果相关联的特定信息或值的弹出显示项。
在一些实施方案中,计算系统可以为UI 175中显示的所检索的一个或多个第二医学图像文件中的每个第二医学图像文件提供一个或多个任务选项。在一些情况下,一个或多个任务选项可包括但不限于以下至少一项:下载一个或多个第二医学图像文件中的具体一个或多个第三医学图像文件的选项;将一个或多个第二医学图像文件中的具体一个或多个第四医学图像文件添加到至少一个项目组文件夹中的选项;将一个或多个第二医学图像文件中的至少两个第五医学图像文件链接起来的选项;导出一个或多个第二医学图像文件中的一个或多个第六医学图像文件的选项;共享一个或多个第二医学图像文件中的一个或多个第七医学图像文件的选项;上传一个或多个第八医学图像文件的选项;开始新搜索的选项;保存当前搜索的选项;管理所保存的搜索的选项;查看最近搜索的选项;导出搜索的选项;打开新项目文件夹的选项;保存当前项目文件夹的选项;管理项目文件夹的选项;完成当前项目的选项;查看活动项目的选项;以及/或者导出项目文件夹的选项等。
根据一些实施方案,可以将单个成像会话期间所获得的一个或多个第二医学图像文件中的两个或更多个第九医学图像文件与共享元数据、公共元数据和/或链接元数据等之中的至少一项作为单个成像资产而组合起来。例如,在单个成像会话中采集多个图像集的情况下(例如,为了理解解剖结构的动态交互或操作等),图像发现实用程序可以对这多个图像集进行分组,以便将它们视为单个图像资产或单个图像资产集。在这样做时,图像发现实用程序可以将作为一项资产而组合起来的多个图像集呈现在UI中,并且可以向用户呈现选项以单独地选择每个图像组以供操作(诸如预览或下载等)。在一个非限制性示例中,心脏计算机断层(“CT”)扫描可包括在单个成像会话中采集的10个图像集(有时称为“多相扫描”或“多相图像”等)以理解患者的心跳。可以向用户提供将该组10个图像集提供给成像发现实用程序的选项,以便可以将它们视为一个图像资产。另选地或另外地,可以在不同的成像会话期间获得两个或更多个第九医学图像文件。在一些实施方案中,两个或更多个第九医学图像可以是单个解剖结构的图像集的集合、或两个或更多个解剖结构的图像集的集合(在一些情况下,对象身体各处的解剖结构的图像集)等。此类功能性的好处是:所有元数据和工件(或工件文件)可以在图像资产层进行链接。然而,当查看资产时,UI可允许用户看到存在多个图像集(是否表示单个解剖结构或多个解剖结构等,以及/或者是否在单个会话或多个会话期间获得等)作为该项资产而组合起来,并且可允许用户单独选择每个图像组以供操作(例如,以供预览或下载等)。
在一些情况下,一个或多个任务选项还可包括以下至少一项:在UI中一起预览两个或更多个第九医学图像文件的选项;将两个或更多个第九医学图像文件作为单个图像文件集而下载的选项;将两个或更多个第九医学图像文件作为单个图像文件集而导出的选项;将两个或更多个第九医学图像文件作为单个图像文件集而共享的选项;以及/或者单独地或分组地编辑与两个或更多个第九医学图像文件中的每个第九医学图像文件相关联的元数据的选项等。在一些情况下,一个或多个任务选项还可包括以下至少一项:对一个或多个第二医学图像文件中的一个或多个第十医学图像文件执行自动分割的选项;以及/或者对一个或多个第二医学图像文件中的一个或多个第十一医学图像文件执行自动测量的选项等。
在一些实施方案中,至少部分地基于所检索的一个或多个第二医学图像文件中的至少一个第十二医学图像文件,模型生成系统(在一些情况下,其可实现于计算系统等之中)可生成一个或多个三维(“3D”)模型。
在一些方面,基于确定由NoSQL DMS 105管理的NoSQL数据库110或由SQL DMS 120管理的SQL数据库125中的一个数据库的内容已经改变,该系统(即,NoSQL DMS 105、SQLDMS 120、计算系统140和/或web服务器150等中的至少一者;本文也称为“图像发现实用程序”等)可以自主地将所改变的内容镜射到NoSQL数据库110或SQL数据库125中的另一数据库中。
另选地或另外地,根据一些方面,该系统(即,NoSQL DMS 105、SQL DMS 120、计算系统140和/或web服务器150等中的至少一者;本文也称为“图像发现实用程序”等)可接收用以修改与医学图像文件相关联的元数据属性的请求,该医学图像文件被存储并镜射在由NoSQL DMS管理的NoSQL数据库以及由SQL DMS管理的SQL数据库中的每个数据库之中。该系统可呈现带选项的UI以供用户动态地修改与医学图像文件相关联的元数据属性,其中动态地修改元数据属性的选项可包括但不限于以下至少一项:动态地将分组特定元数据属性添加到医学图像文件的元数据字段中;动态地修改医学图像文件的元数据字段中的分组特定元数据属性;动态地删除医学图像文件的元数据字段中的分组特定元数据属性;动态地定义医学图像文件中新的分组特定元数据字段;动态地修改医学图像文件的分组特定元数据字段;动态地删除医学图像文件的分组特定元数据字段;以及/或者动态地将元数据字段与一个或多个工件文件链接等。响应于基于所呈现的选项而接收用户输入以动态地修改与医学图像文件相关联的元数据属性,该系统可更新NoSQL数据库或SQL数据库中的一个数据库之中且与该医学图像文件相关联的分组特定元数据字段或分组特定元数据属性中的至少一项,并且可以将与该医学图像文件相关联的分组特定元数据字段或分组特定元数据属性中的至少一项的改变镜射到NoSQL数据库或SQL数据库中的另一数据库之中。
另选地或另外地,在一些方面,该系统(即,SQL DMS 105、SQL DMS 120、计算系统140和/或web服务器150等中的至少一者;本文也称为“图像发现实用程序”等)可接收将一个或多个工件文件与元数据属性相关联的请求,该元数据属性与医学图像文件相关联,该医学图像文件被存储并镜射在由NoSQL DMS管理的NoSQL数据库以及由SQL DMS管理的SQL数据库中的每个数据库之中。该系统可呈现带选项的UI以供用户修改与医学图像文件相关联的元数据属性以包括元数据属性与一个或多个工件文件之间的链接。响应于基于所呈现的选项而接收用户输入以修改与医学图像文件相关联的元数据属性,该系统可更新与NoSQL数据库或SQL数据库中的一个数据库之中的元数据属性相关联的元数据字段以包括元数据属性与一个或多个工件文件之间的链接,并且可以将对元数据字段或元数据属性中的至少一项的改变镜射到NoSQL数据库或SQL数据库中的另一数据库之中,其中元数据属性与一个或多个工件文件之间的链接包括元数据属性与一个或多个工件文件中的每个文件之间的关系映射。
另选地或另外地,根据一些方面,响应于收到对至少一个第一医学图像文件的请求,该系统(即,NoSQL DMS 105、SQL DMS 120、计算系统140和/或web服务器150等中的至少一者;本文也称为“图像发现实用程序”等)可针对与多个对象相关联的医学图像文件而对NoSQL数据库执行索引搜索,NoSQL数据库包含多个医学图像文件、与每个医学图像文件相关联的多个元数据标签、以及与多个医学图像文件中的两个或更多个医学图像文件相关联的多个工件文件,NoSQL数据库包含存储在由SQL DMS管理的关系型(“SQL”)数据库中的多个医学图像文件的镜像副本。基于对NoSQL数据库的索引搜索,该系统可以从SQL数据库中检索所请求的至少一个第一医学图像文件。在一些情况下,执行索引搜索可包括:基于医学图像文件的属性,在多个对象之间,执行与多个医学图像文件相关联的元数据搜索,而无需基于患者数据每次对一个对象进行搜索,每个医学图像文件被定义为每个数据结构的根节点,并且与医学图像文件相关联的每个对应对象被定义为该数据结构的从属节点。
根据一些方面,参照各种实施方案所述的成像发现实用程序通过以下方式解决了与常规的商用临床图像管理系统相关联的每个挑战(即,在将所导出的工件或工件文件与临床图像进行标记、挖掘和关联方面的挑战):启用对成像记录的动态标记;启用对图像管理下的所有图像(不管图像与哪个患者相关联)的搜索;以及启用将图像链接到从图像导出的数据和工件。此外,一些常规的商用临床图像管理系统可以被固有地设计或配置为防止对多个患者及其数据进行交叉搜索,以此作为一项措施以确保遵守隐私安全规则和协议(诸如但不限于1996年的健康保险可移植性和责任法案(“HIPAA”)下的隐私安全规则和协议等)。由于根据各种实施方案的成像发现实用程序被设计成主要由医护专业人员或医学研究人员使用,所以认证功能性和功能(诸如下文参照图2的认证方面所示和所述的功能等),在图像发现实用程序内对多个患者进行交叉搜索,这仍然符合此类隐私安全规则和协议。即使其他用户利用成像发现实用程序,认证过程仍将避免不符合这些隐私安全规则和协议。
该解决方案实现了结构化和非结构化数据库的耦接。结构化数据库可包含使图像可发现或可搜索所需的最小数据字段,而非结构化数据库可提供基于用户需要或当从图像中导出更多信息时动态增强或丰富数据字段的能力。数据结构也将工件链接到图像,此类工件包括但不限于图像处理分析文件、分割文件、三维(“3D”)打印文件和/或机器学习(“ML”)算法文件等。可以跨数据字段以及跨相关联的文件和工件来执行搜索。该系统的另外特征是基于搜索标准将图像聚集成集子或集合的能力。该系统能够搜索可组织成项目集合的成像资产和相关工件。该系统也允许发现并重用耗资不菲从图像中提取出的信息和工件。成像的重用为研发应用以及/或者为监管应用提供了大量证据,同时提高了研发生产率并避免了购买复本成像所带来的成本。该系统提供了对监管或临床问题的快速响应,同时提供了不同商用单位之间的知识获取和共享,并且提供了识别与战略性地满足超出一个商用单位或公司之外的成像需求的能力。应用场景包括:利用一组公共标准来创建重点数据集,该公共标准用以创建或应用人工智能(“AI”)和/或ML方法、基于图集的分割方法或其他类型的分析等。
下文参照图2-图5更详细地描述了系统100(及其部件)的这些和其他功能。
图2是示出了根据各种实施方案的用于实现成像发现实用程序以增强临床图像管理的系统200的部件之间的交互的非限制性示例的示意图。
在图2的非限制性实施方案中,系统200可包括成像发现实用程序205,其可包括用户界面(“UI”)系统210和/或web服务器215。系统200还可包括与用户225相关联的请求设备220。
在操作中,UI系统210和/或成像发现实用程序205可建立web框架API 230,在一些情况下,使用web框架(诸如AngularJS或其他web框架系统等)来生成UI并将其呈现给用户225,web框架API 230利用javascript(“JS”)、超文本标记语言(“HTML”)和/或级联样式表(“CSS”)等。
请求设备220可通过如下方式与web服务器215通信(经由至少一个第一通信链路(在图2中由双头箭头235表示)等):向web服务器215发送请求(例如,对至少一个第一医学图像文件的请求等)并接收系统数据(包括但不限于一个或多个医学图像文件、与一个或多个医学图像文件中的每个文件相关联的至少一个元数据标签、以及/或者与一个或多个医学图像文件中的每个文件相关联的至少一个工件文件等)等。
成像发现实用程序205可通过如下方式与关系型(“SQL”)数据库240通信(经由至少一个第二通信链路(在图2中由双头箭头245表示)等):向SQL数据库240发送更新(用于更新和/或维护SQL数据库240的功能性等)并接收存储在SQL数据库240中的数据(包括但不限于一个或多个医学图像文件、与一个或多个医学图像文件中的每个文件相关联的至少一个元数据标签、以及/或者与一个或多个医学图像文件中的每个文件相关联的至少一个工件文件等)。
成像发现实用程序205可通过如下方式与非关系型(“NoSQL”)数据库250通信(经由至少一个第三通信链路(在图2中由双头箭头255表示)等):向SQL数据库250发送搜索请求并从NoSQL数据库250接收索引数据(包括但不限于针对一个或多个医学图像文件的索引数据、针对与一个或多个医学图像文件中的每个文件相关联的至少一个元数据标签的索引数据、以及/或者针对与一个或多个医学图像文件中的每个文件相关联的至少一个工件文件的索引数据等)。可以由NoSQL数据管理系统(“DMS”)(类似于图1的NoSQL DMS 105等)管理的NoSQL数据库250可包含存储在由SQL DMS(类似于图1的SQL DMS 120等)管理的SQL数据库240中的多个医学图像文件的镜像副本。
成像发现实用程序205可通过如下方式与系统文件夹260通信(经由至少一个第四通信链路(在图2中由双头箭头265表示)等):将系统数据文件保存和/或更新到系统文件夹260并从系统文件夹260中检索系统数据文件。
通过与LDAP提供商系统270交换认证数据,成像发现实用程序205可以与轻量目录访问协议(“LDAP”)提供商系统270通信(经由至少一个第五通信链路(在图2中由双头箭头275表示)等)。
响应于经由至少一个第一通信链路而从请求设备220收到对至少一个第一医学图像文件的请求,成像发现实用程序205可经由至少一个第五通信链路,向LDAP提供商系统270认证以下至少一项:请求设备220、用户225和/或请求。在对请求设备220、用户225和/或请求中的至少一项进行认证之后,成像发现实用程序205可以向NoSQL数据库250发送对至少一个第一医学图像文件的搜索请求,并且可接收与所请求的至少一个第一医学图像文件相关联的索引数据。由于NoSQL数据库250包含存储在SQL数据库240中的多个医学图像文件的镜像副本,所以索引数据也提供了关于为SQL数据库240中所包含的数据建立索引的信息。重要的是,由于与SQL数据库240相比,NoSQL数据库250提供了更稳健的搜索功能性,所以为存储在NoSQL数据库250中的至少一个第一医学图像文件建立索引,这导致为存储在SQL数据库240中的至少一个第一医学图像镜像文件建立了有效索引。基于索引数据,成像发现实用程序205随后可以从SQL数据库240中检索至少一个第一医学图像镜像文件。响应于检索至少一个第一医学图像镜像文件,经由至少一个第一通信链路235,成像发现实用程序205可以向请求设备220发送或转发所请求的至少一个第一医学图像文件。
系统200可另外按照与图1的系统100类似(如果不完全相同的话)的方式运行。
图3A-图3D(统称为“图3”)是示出了根据各种实施方案的图像数据库元数据的各种非限制性示例300、300'、300”和300”'的示意图,该图像数据库元数据可以在实现用于增强临床图像管理的成像发现实用程序时使用。
参考图3,可以将各种图像数据库元数据实现为电子表格数据,该电子表格数据包含用于一个或多个医学图像文件的元数据标签,尽管图像数据库元数据不限于此并且可将其实现为任何合适的数据结构或按任何合适的格式或文件来实现。在一些实施方案中,图像数据库元数据可包括但不限于用于输入元数据或元数据标签的一个或多个指令、一个或多个源库元数据、一个或多个对象库元数据、一个或多个扫描库元数据和/或一个或多个设备库元数据等。根据一些实施方案,图像数据库元数据可包括但不限于所需的数据点(在图3中由元数据标签的深灰色突出显示和白色文本等表示)、分组特定的可选数据点(在图3中由元数据标签的浅灰色突出显示和黑色文本等表示)、以及/或者从医学图像文件的DICOM报头中挖掘出的数据(在图3中由元数据标签的中灰色突出显示和白色文本等表示)等。尽管在图3中使用了具体的彩色突出显示和具体的彩色文本,但是各种实施方案不限于此,并且可使用任何合适的突出显示或颜色等来突出显示或区分所需的数据点、分组特定的可选数据点、以及/或者从医学图像文件的DICOM报头中挖掘出的数据等。另选地或另外地,数据字段可用于将元数据识别为所需的元数据点、分组特定的可选元数据点、或从医学图像文件的DICOM报头中挖掘出的元数据点等。
在一些实施方案中,一个或多个指令可包括但不限于:在所需文件结构(具有注明了或引用了支持文档的注释)内准备资产(在此情况下是医学图像或医学图像文件)的第一步骤;将资产和支持性描述添加到数据库中的第二步骤;完成电子表格内所有所需的灵活元数据点的第三步骤;以及/或者附上任何支持性文件结构的第四步骤等。
图3A描绘了公共图像数据库元数据的示例的非限制性实施方案300。根据一些实施方案,公共图像数据库元数据(尽管未在图3A中完全示出)可包括但不限于一个或多个源库元数据字段、一个或多个对象库元数据字段、一个或多个扫描库元数据字段、以及/或者一个或多个设备库元数据(例如在图3D中示出)等。
在一些情况下,一个或多个源库元数据字段可包括但不限于源机构元数据字段(其是文本数据类型并且被配置为包含与资产接收源有关的信息)、学习代码元数据字段(其是文本数据类型并且被配置为包含与资产采集原因有关的信息)、学习描述元数据字段(其是文本数据类型并且被配置为包含与资产采集原因描述有关的信息)、源机构城市元数据字段(其是文本数据类型并且被配置为包含与源机构的地理所处城市有关的信息)、以及/或者源地理元数据字段(其是文本数据类型并且被配置为包含与源机构地理位置有关的信息)等。
在一些情况下,一个或多个对象库元数据字段可包括但不限于学习代码元数据字段(其是文本数据类型并且被配置为包含与资产采集原因有关的信息)、对象标识(“ID”)元数据字段(其是文本数据类型并且被配置为包含与扫描对象的标识符有关的信息)、物种元数据字段(其是文本数据类型并且被配置为包含与扫描对象的物种有关的信息)、性别元数据字段(其是文本选项数据类型并且被配置为包含与扫描对象的性别有关的信息)、出生年份(“YOB”)元数据字段(其是数字数据类型并且被配置为包含与扫描对象的出生年份有关的信息(在一些情况下,表示为4位数))、以及/或者种族元数据字段(其是文本数据类型并且被配置为包含与扫描对象的种族有关的信息)等。
在一些情况下,一个或多个扫描库元数据字段可包括但不限于对象ID元数据字段(其是文本数据类型并且被配置为包含与扫描对象的标识符有关的信息)、扫描ID元数据字段(其是文本数据类型并且被配置为包含与扫描资产的标识符有关的信息)、扫描日期元数据字段(其是日期数据类型并且被配置为包含与扫描采集日期有关的信息(在一些情况下,依照“月/日/年”或任何合适的日期格式等来表示))、主要解剖结构元数据字段(其是文本数据类型并且被配置为包含与扫描中所绘的主要解剖结构有关的信息)、以及/或者预期时相数元数据字段(其是数字数据类型并且被配置为包含与预期或已知将在扫描中反映的时相数有关的信息)等。
如图3A所示,源机构元数据字段、研究代码元数据字段、研究描述元数据字段、对象ID元数据字段、物种元数据字段、性别元数据字段、YOB元数据字段、种族元数据字段、扫描ID元数据字段、扫描日期元数据字段、主要解剖结构元数据字段和预期时相数元数据字段被标记或表示为所需的数据点字段,而源机构城市元数据字段和源地理元数据字段被标记或表示为分组特定的可选数据点字段。尽管在具体部分(即,源库元数据部分、对象库元数据部分、扫描库元数据部分等)中,在如图3A所示的数据库中示出了具体元数据字段,但是各种实施方案不限于此,并且可使用或包括任何合适的元数据字段,并且可以将其分组(并且在一些情况下,复制)到任何合适的部分(不限于上文参照图3A所示或所述的部分)中。此外,尽管具体元数据字段被标记或表示为所需的数据点字段或分组特定的可选数据点字段中的一项,但是各种实施方案不限于此,并且每个元数据字段可被适当地标记或表示为任何类型的数据点字段等(不限于所需的数据点字段、分组特定的可选数据点字段、以及/或者从DICOM报头数据点字段中挖掘出的数据等)。
图3B描绘了与心律和心力衰竭(“CRHF”)疗法和手术相关联的医学图像或医学图像文件的图像数据库元数据的示例的非限制性实施方案300'。根据一些实施方案,用于与CRHF疗法和手术相关联的医学图像或医学图像文件的图像数据库元数据(尽管未在图3B中完全示出)可包括但不限于一个或多个源库元数据字段(例如在图3A中示出)、一个或多个对象库元数据字段(例如在图3A中示出)、一个或多个扫描库元数据字段、以及/或者一个或多个设备库元数据(例如在图3D中示出)等。
在一些情况下,一个或多个扫描库元数据字段可包括但不限于对象ID元数据字段(其是文本数据类型并且被配置为包含与扫描对象的标识符有关的信息)、扫描ID元数据字段(其是文本数据类型并且被配置为包含与扫描资产的标识符有关的信息)、扫描日期元数据字段(其是日期数据类型并且被配置为包含与扫描采集日期有关的信息(在一些情况下,依照“月/日/年”或任何合适的日期格式等来表示))、主要解剖结构元数据字段(其是文本数据类型并且被配置为包含与扫描中所绘的主要解剖结构有关的信息)、以及/或者预期时相数元数据字段(其是数字数据类型并且被配置为包含与预期或已知将在扫描中反映的时相数有关的信息)等。与图3A的示例中一样,对象ID元数据字段、扫描ID元数据字段、扫描日期元数据字段、主要解剖结构元数据字段和预期时相数元数据字段被标记或表示为所需的数据点字段。
在一些情况下,一个或多个扫描库元数据字段还可包括但不限于对象体重元数据字段(其是测量数据类型并且被配置为包含与扫描之时以磅和/或千克计的扫描对象的体重有关的信息(在一些情况下,具有指示用户仅需要提供以磅或千克计的体重测量结果而非两者的注释))、对象身高元数据字段(其是测量数据类型并且被配置为包含与扫描之时以英寸和/或厘米计的扫描对象的身高有关的信息(在一些情况下,具有指示用户仅需要提供以英寸或厘米计的身高测量结果而非两者的注释))、对象体重指数(“BMI”)元数据字段(其是测量数据类型并且被配置为包含与扫描之时扫描对象的BMI有关的信息)、对象扫描年龄元数据字段(其是数字数据类型并且被配置为包含与扫描之时的对象年龄有关的信息)、造影剂元数据字段(其是文本选项数据类型并且被配置为包含与扫描中存在造影剂有关的信息(在一些情况下,选项为是(“Y”)或否(“N”)))、质量元数据字段(其是文本选项数据类型并且被配置为包含与扫描的质量分级有关的信息(在一些情况下,选项为高(“H”)、中(“M”)或低(“L”)))、对象健康元数据字段(其是文本选项数据类型并且被配置为包含与扫描之时患者或扫描对象是否健康的对象考虑有关的信息(在一些情况下,选项为是(“Y”)或否(“N”))、对象纽约心脏病协会(“NYHA”)分级元数据字段(其是文本选项数据类型并且被配置为包含与扫描之时扫描对象的NYHA分级有关的信息)、以及/或者次要解剖结构元数据字段(其是文本列表数据类型并且被配置为包含与扫描中所绘的次要解剖结构的列表(在一些情况下,逗号分隔列表等)有关的信息(在一些情况下,具有用户可以在单个单元格或字段内添加多个值的注释))等。这些元数据字段可被标记或表示为分组特定的可选数据点字段(在此情况下,是与CRHF组相关联的可选数据点字段)。
在一些情况下,一个或多个扫描库元数据字段可包括但不限于心动周期时相元数据字段(其是文本数据类型并且被配置为包含与心动周期时相有关的信息(在一些情况下,具有列出了包括例如10、20、30或多相等示例的注释))、门控/非门控元数据字段(其是文本选项数据类型并且被配置为包含与使用心脏门控扫描采集还是心脏非门控扫描采集有关的信息(在一些情况下,选项为门控(“G”)或非门控(“U”)))、备注元数据字段(其是文本数据类型并且被配置为包含与来自用户或研究人员的开放字段注释有关的信息)、手术间隔元数据字段(其是文本数据类型并且被配置为包含与术后随访时间点有关的信息)、适应症元数据字段(其是文本数据类型并且被配置为包含与扫描采集原因有关的信息)、左心室射血分数(“LVEF”)元数据字段(其是测量数据类型并且被配置为包含与LVEF值(以百分比计)有关的信息(在一些情况下,具有指示该字段必须填充不同的值并且范围必须计算为平均值等的注释)、LVEF采集模态元数据字段(其是文本选项数据类型并且被配置为包含与所用LVEF采集模态类型有关的信息(在一些情况下,选项为回波(“E”)、超声(“U”)等))、左心室(外部)舒张末期直径(“LVEDD”)元数据字段(其是测量数据类型并且被配置为包含与LVEDD值(以毫米计)有关的信息)、胸围元数据字段(其是测量数据类型并且被配置为包含与扫描之时扫描对象以英寸和/或厘米计的胸围有关的信息(在一些情况下,具有指示用户仅需要提供以英寸或厘米计的胸围测量结果的注释)、以及/或者平面内像素分辨率元数据字段(其是测量数据类型并且被配置为包含与平面内像素分辨率(以毫米计)有关的信息(在一些情况下,具有将从DICOM报头中挖掘出该数据的注释,除非在该字段或电子表格中,该数据被可选数据点所覆盖))等。除了最后的元数据字段(其可被标记或表示为从DICOM报头数据点字段中挖掘出的数据)之外,这些元数据字段可被标记或表示为分组特定的可选数据点字段(在此情况下,是与CRHF组相关联的可选数据点字段)。
尽管在具体部分(即,扫描库元数据部分等)中,在如图3B所示的数据库中示出了具体元数据字段,但是各种实施方案不限于此,并且可使用或包括任何合适的元数据字段,并且可以将其分组(并且在一些情况下,复制)到任何合适的部分(不限于上文参照图3B所示或所述的部分)中。此外,尽管具体元数据字段被标记或表示为所需的数据点字段、分组特定的可选数据点字段、或从DICOM报头数据点字段中挖掘出的数据中的一项,但是各种实施方案不限于此,并且每个元数据字段可被适当地标记或表示为任何类型的数据点字段等(不限于所需的数据点字段、分组特定的可选数据点字段、以及/或者从DICOM报头数据点字段中挖掘出的数据等)。
图3C描绘了与结构性心脏相关疗法和手术相关联的医学图像或医学图像文件的图像数据库元数据的示例的非限制性实施方案300”。根据一些实施方案,用于与结构性心脏相关疗法和手术相关联的医学图像或医学图像文件的图像数据库元数据(尽管未在图3C中完全示出)可包括但不限于一个或多个源库元数据字段(例如在图3A中示出)、一个或多个对象库元数据字段(例如在图3A中示出)、一个或多个扫描库元数据字段、以及/或者一个或多个设备库元数据(例如在图3D中示出)等。
在一些情况下,一个或多个扫描库元数据字段可包括但不限于对象ID元数据字段(其是文本数据类型并且被配置为包含与扫描对象的标识符有关的信息)、扫描ID元数据字段(其是文本数据类型并且被配置为包含与扫描资产的标识符有关的信息)、扫描日期元数据字段(其是日期数据类型并且被配置为包含与扫描采集日期有关的信息(在一些情况下,依照“月/日/年”或任何合适的日期格式等来表示))、主要解剖结构元数据字段(其是文本数据类型并且被配置为包含与扫描中所绘的主要解剖结构有关的信息)、以及/或者预期时相数元数据字段(其是数字数据类型并且被配置为包含与预期或已知将在扫描中反映的时相数有关的信息)等。与图3A或图3B的示例中一样,对象ID元数据字段、扫描ID元数据字段、扫描日期元数据字段、主要解剖结构元数据字段和预期时相数元数据字段被标记或表示为所需的数据点字段。
在一些情况下,一个或多个扫描库元数据字段还可包括但不限于对象体重元数据字段(其是测量数据类型并且被配置为包含与扫描之时以磅和/或千克计的扫描对象的体重有关的信息(在一些情况下,具有指示用户仅需要提供以磅或千克计的体重测量结果而非两者的注释))、对象身高元数据字段(其是测量数据类型并且被配置为包含与扫描之时以英寸和/或厘米计的扫描对象的身高有关的信息(在一些情况下,具有指示用户仅需要提供以英寸或厘米计的身高测量结果而非两者的注释))、对象体重指数(“BMI”)元数据字段(其是测量数据类型并且被配置为包含与扫描之时扫描对象的BMI有关的信息)、对象扫描年龄元数据字段(其是数字数据类型并且被配置为包含与扫描之时的对象年龄有关的信息)、造影剂元数据字段(其是文本选项数据类型并且被配置为包含与扫描中存在造影剂有关的信息(在一些情况下,选项为是(“Y”)或否(“N”)))、质量元数据字段(其是文本选项数据类型并且被配置为包含与扫描的质量分级有关的信息(在一些情况下,选项为高(“H”)、中(“M”)或低(“L”)))、对象纽约心脏协会(“NYHA”)分级元数据字段(其是文本选项数据类型并且被配置为包含与扫描之时扫描对象的NYHA分级有关的信息)、以及/或者次要解剖结构元数据字段(其是文本列表数据类型并且被配置为包含与扫描中所绘的次要解剖结构的列表(在一些情况下,逗号分隔列表等)有关的信息(在一些情况下,具有用户可以在单个单元格或字段内添加多个值的注释)等。这些元数据字段可被标记或表示为分组特定的可选数据点字段(在此情况下,是与结构性心脏组相关联的可选数据点字段)。
在一些情况下,一个或多个扫描库元数据字段可包括但不限于心动周期时相元数据字段(其是文本数据类型并且被配置为包含与心动周期时相有关的信息(在一些情况下,具有列出了包括例如10、20、30或多相等示例的注释))、门控/非门控元数据字段(其是文本选项数据类型并且被配置为包含与使用心脏门控扫描采集还是心脏非门控扫描采集有关的信息(在一些情况下,选项为门控(“G”)或非门控(“U”)))、备注元数据字段(其是文本数据类型并且被配置为包含与来自用户或研究人员的开放字段注释有关的信息)、手术间隔元数据字段(其是文本数据类型并且被配置为包含与术后随访时间点有关的信息)、适应症元数据字段(其是文本数据类型并且被配置为包含与扫描采集原因有关的信息)、左心室射血分数(“LVEF”)元数据字段(其是测量数据类型并且被配置为包含与LVEF值(以百分比计)有关的信息(在一些情况下,具有指示该字段必须填充不同的值并且范围必须计算为平均值等的注释)、LVEF采集模态元数据字段(其是文本选项数据类型并且被配置为包含与所用LVEF采集模态类型有关的信息(在一些情况下,选项为回波(“E”)、超声(“U”)等))、以及/或者左心室(外部)舒张末期直径(“LVEDD”)元数据字段(其是测量数据类型并且被配置为包含与LVEDD值(以毫米计)有关的信息)等。这些元数据字段可被标记或表示为分组特定的可选数据点字段(在此情况下,是与结构性心脏组相关联的可选数据点字段)。
在一些情况下,一个或多个扫描库元数据字段还可包括但不限于主动脉瓣峰值梯度元数据字段(其是测量数据类型并且被配置为包含与主动脉瓣上的峰值压力梯度(以mmHg计)有关的信息)、主动脉瓣平均梯度元数据字段(其是测量数据类型并且被配置为包含与主动脉瓣上的平均压力梯度(以mmHg计)有关的信息)、主动脉瓣峰值速度元数据字段(其是测量数据类型并且被配置为包含与主动脉瓣峰值或射流速度(以m/s计)有关的信息)、主动脉瓣面积元数据字段(其是测量数据类型并且被配置为包含与主动脉瓣面积(以cm2计)有关的信息)、主动脉瓣回流元数据字段(其是文本数据类型并且被配置为包含与主动脉瓣回流量有关的信息)、二尖瓣峰值梯度元数据字段(其是测量数据类型并且被配置为包含与二尖瓣上的峰值压力梯度(以mmHg计)有关的信息)、二尖瓣平均梯度元数据字段(其是测量数据类型并且被配置为包含与二尖瓣上的平均压力梯度(以mmHg计)有关的信息)、二尖瓣峰值速度元数据字段(其是测量数据类型并且被配置为包含与二尖瓣峰值或射流速度(以m/s计)有关的信息)、二尖瓣面积元数据字段(其是测量数据类型并且被配置为包含与二尖瓣面积(以cm2计)有关的信息)、二尖瓣回流元数据字段(其是文本数据类型并且被配置为包含与二尖瓣回流量有关的信息)、肺动脉瓣峰值梯度元数据字段(其是测量数据类型并且被配置为包含与肺动脉瓣上的峰值压力梯度(以mmHg计)有关的信息)、肺动脉瓣平均梯度元数据字段(其是测量数据类型并且被配置为包含与肺动脉瓣上的平均压力梯度(以mmHg计)有关的信息)、肺动脉瓣峰值速度元数据字段(其是测量数据类型并且被配置为包含与肺动脉瓣峰值或射流速度(以m/s计)有关的信息)、肺动脉瓣面积元数据字段(其是测量数据类型并且被配置为包含与肺动脉瓣面积(以cm2计)有关的信息)、肺动脉瓣回流元数据字段(其是文本数据类型并且被配置为包含与肺动脉瓣回流量有关的信息)、三尖瓣峰值梯度元数据字段(其是测量数据类型并且被配置为包含与三尖瓣上的峰值压力梯度(以mmHg计)有关的信息)、三尖瓣平均梯度元数据字段(其是测量数据类型并且被配置为包含与三尖瓣上的平均压力梯度(以mmHg计)有关的信息)、三尖瓣峰值速度元数据字段(其是测量数据类型并且被配置为包含与三尖瓣峰值或射流速度(以m/s计)有关的信息)、三尖瓣面积元数据字段(其是测量数据类型并且被配置为包含与三尖瓣面积(以cm2计)有关的信息)、以及/或者三尖瓣回流元数据字段(其是文本数据类型并且被配置为包含与三尖瓣回流量有关的信息)等。这些元数据字段可被标记或表示为分组特定的可选数据点字段(在此情况下,是与结构性心脏组相关联的可选数据点字段)。
尽管在具体部分(即,扫描库元数据部分等)中,在如图3C所示的数据库中示出了具体元数据字段,但是各种实施方案不限于此,并且可使用或包括任何合适的元数据字段,并且可以将其分组(并且在一些情况下,复制)到任何合适的部分(不限于上文参照图3C所示或所述的部分)中。此外,尽管具体元数据字段被标记或表示为所需的数据点字段或分组特定的可选数据点字段中的一项,但是各种实施方案不限于此,并且每个元数据字段可被适当地标记或表示为任何类型的数据点字段等(不限于所需的数据点字段、分组特定的可选数据点字段、以及/或者从DICOM报头数据点字段中挖掘出的数据等)。
图3D描绘了与神经疗法和手术相关联的医学图像或医学图像文件的图像数据库元数据的示例的非限制性实施方案300”'。根据一些实施方案,用于与神经疗法和手术相关联的医学图像或医学图像文件的图像数据库元数据(尽管未在图3D中完全示出)可包括但不限于一个或多个源库元数据字段(例如,在图3A中示出)、一个或多个对象库元数据字段(例如,在图3A中示出)、一个或多个扫描库元数据字段、以及/或者一个或多个设备库元数据等。
在一些情况下,一个或多个扫描库元数据字段可包括但不限于对象ID元数据字段(其是文本数据类型并且被配置为包含与扫描对象的标识符有关的信息)、扫描ID元数据字段(其是文本数据类型并且被配置为包含与扫描资产的标识符有关的信息)、扫描日期元数据字段(其是日期数据类型并且被配置为包含与扫描采集日期有关的信息(在一些情况下,依照“月/日/年”或任何合适的日期格式等来表示))、主要解剖结构元数据字段(其是文本数据类型并且被配置为包含与扫描中所绘的主要解剖结构有关的信息)、以及/或者预期时相数元数据字段(其是数字数据类型并且被配置为包含与预期或已知将在扫描中反映的时相数有关的信息)等。与图3A、图3B或图3C的示例中一样,对象ID元数据字段、扫描ID元数据字段、扫描日期元数据字段、主要解剖结构元数据字段和预期时相数元数据字段被标记或表示为所需的数据点字段。
在一些情况下,一个或多个扫描库元数据字段还可包括但不限于对象体重元数据字段(其是测量数据类型并且被配置为包含与扫描之时以磅和/或千克计的扫描对象的体重有关的信息(在一些情况下,具有指示用户仅需要提供以磅或千克计的体重测量结果而非两者的注释))、对象身高元数据字段(其是测量数据类型并且被配置为包含与扫描之时以英寸和/或厘米计的扫描对象的身高有关的信息(在一些情况下,具有指示用户仅需要提供以英寸或厘米计的身高测量结果而非两者的注释))、对象体重指数(“BMI”)元数据字段(其是测量数据类型并且被配置为包含与扫描之时扫描对象的BMI有关的信息)、对象扫描年龄元数据字段(其是数字数据类型并且被配置为包含与扫描之时的对象年龄有关的信息)、造影剂元数据字段(其是文本选项数据类型并且被配置为包含与扫描中存在造影剂有关的信息(在一些情况下,选项为是(“Y”)或否(“N”)))、质量元数据字段(其是文本选项数据类型并且被配置为包含与扫描质量分级有关的信息(在一些情况下,选项为高(“H”)、中(“M”)或低(“L”)))、以及/或者对象健康元数据字段(其是文本选项数据类型并且被配置为包含与扫描之时患者或扫描对象是否健康的对象考虑有关的信息(在一些情况下,选项为是(“Y”)或否(“N”))等。这些元数据字段可被标记或表示为分组特定的可选数据点字段(在此情况下,是与神经学组相关联的可选数据点字段)。
在一些情况下,一个或多个扫描库元数据字段可包括但不限于平面内像素分辨率元数据字段(其是测量数据类型并且被配置为包含与平面内像素分辨率(以毫米计)有关的信息)、切片厚度元数据字段(其是测量数据类型并且被配置为包含与切片厚度(以毫米计)有关的信息)、增量元数据字段(其是测量数据类型并且被配置为包含与增量有关的信息)、模态元数据字段(其是文本选项数据类型并且被配置为包含与模态有关的信息)、分辨率元数据字段(其是数字数据类型并且被配置为包含与分辨率有关的信息)、每切片的帧数元数据字段(其是数字数据类型并且被配置为包含与每切片的帧数有关的信息)、源扫描器元数据字段(其是文本数据类型并且被配置为包含与源扫描器有关的信息)、以及/或者帧数元数据字段(其是数字数据类型并且被配置为包含与帧数有关的信息)等。这些元数据字段可被标记或表示为从DICOM报头数据点字段中挖掘出的数据。在一些情况下,这些元数据字段均可包括以下注释:将从DICOM报头中挖掘出对应字段中的数据,除非在所述字段或电子表格中,该数据被可选数据点等所覆盖。
在一些情况下,一个或多个设备库元数据字段还可包括但不限于对象ID元数据字段(其是文本数据类型并且被配置为包含与扫描对象的标识符有关的信息)、扫描ID元数据字段(其是文本数据类型并且被配置为包含与扫描资产的标识符有关的信息)、以及/或者扫描日期元数据字段(其是日期数据类型并且被配置为包含与扫描采集日期有关的信息(在一些情况下,依照“月/日/年”或任何合适的日期格式等来表示))等。这些元数据字段可被标记或表示为所需的数据点字段。
尽管在具体部分(即,扫描库元数据部分、设备库元数据部分等)中,在如图3D所示的数据库中示出了具体元数据字段,但是各种实施方案不限于此,并且可使用或包括任何合适的元数据字段,并且可以将其分组(并且在一些情况下,复制)到任何合适的部分(不限于上文参照图3D所示或所述的部分)中。此外,尽管具体元数据字段被标记或表示为所需的数据点字段、分组特定的可选数据点字段、或从DICOM报头数据点字段中挖掘出的数据中的一项,但是各种实施方案不限于此,并且每个元数据字段可被适当地标记或表示为任何类型的数据点字段等(不限于所需的数据点字段、分组特定的可选数据点字段、以及/或者从DICOM报头数据点字段中挖掘出的数据等)。
图4A-图4L(统称为“图4”)是示出了根据各种实施方案的当实现用于增强临床图像管理的成像发现实用程序时可使用的用户界面(“UI”)405-460的各种非限制性示例400的示意图。图4所示的UI包含示例性对象信息,该示例性对象信息不与任何实际的或活着的患者或对象相关联,但仅被提供来给出上下文并对作为UI的一部分的概念进行说明。
根据一些实施方案,UI可以向用户提供选项,以通过依据疾病、设备、解剖区域和/或附加参数(包括但不限于源研究描述、项目开始日期、次要解剖结构、源研究或试验、源研究ID、源研究日期和/或临床试验研究中心等)等(诸如如图4A、图4B和图4K等所示)之中的至少一项进行搜索,来对图像发现使用程序(其在本文也可称为“解剖成像集合的美敦力在线共享”或“MOSAIC”等)中的资产(即,医学图像或医学图像文件等)进行搜索。UI还可向用户提供以下选项:基于输入参数,启动搜索,以清除所有字段,输出结果,保存搜索,将搜索或搜索结果添加到项目中,以及/或者管理所保存的搜索等(如图4A-图4C、图4K和图4L等所示)。
如图4C或图4L的非限制性实施方案所示,因为资产(即,医学图像或医学图像文件)处于以图像为中心的分层系统的分层结构顶部(如上文参照图1等所述),图像发现实用程序能够对多个患者或对象的解剖结构(或类似物)的相关或类似图像进行搜索(常规的数据管理系统,因为此类常规系统是以患者为中心的分层系统,其固有地被限制为仅搜索患者信息,其中与每个患者相关联的低层图像即使不是不可能,也是难以进行搜索的,更不用提对多个患者或对象进行搜集)。以此方式,本文所述的(且根据不同的实施方案)的图像发现实用程序和功能性启用了对多个患者的解剖结构的相关或类似图像或其他图像资产的稳健且完整的搜索,由此促进了诊断、治疗、手术和/或药物产品等的研发。
如图4D中的UI 420的非限制性示例所示,UI可显示或另外呈现资产有关信息(在此情况下,“扫描1923”,其是对象或患者上半身的计算机断层(“CT”)扫描的图像,在此情况下,该对象与匿名字母数字代码“IU_Code_0697”相关联)。在一些情况下,在UI(例如,图4D的UI 420等)中呈现的信息可包括但不限于扫描ID(在此情况下,“扫描1923”等)、研究描述(在此情况下,“CT-Torso”等)、主要解剖结构(在此情况下,“Torso”等)、扫描日期(在此情况下,“2020-03-29”等)、对象ID(在此情况下,“IU_Code_0697”等)、物种(在此情况下,“人类”等)、性别(在此情况下,“男性”等)、出生年份(“YOB”)、种族(在此情况下,“高加索人”等)、对象体重(在此情况下,“165.72lbs”等)、对象身高(在此情况下,“5英尺11英寸”等)、对象BMI(在此情况下,“23.1”等)、对象扫描年龄(在此情况下,“34岁”等)、对象NYHA分级(在此情况下,空白或不适用)、研究代码(在此情况下,“IU_CT_Torso_FY20Q1”等)、源机构(在此情况下,“Center 2”等)、分区或分组代码(在此情况下,“Core Test Group”等)、已知疾病(在此情况下,无)和/或扫描设备(在此情况下,无)等。
如图4E中的UI 425的非限制性示例所示,UI可显示或另外呈现资产有关信息。在一些情况下,在UI(例如,图4E的UI 425等)中呈现的信息可包括但不限于资产本身(即,医学图像或医学图像文件等)、质量(在此情况下,“High”或“H”等)、造影剂(在此情况下,“No”或“N”等)、平面内像素分辨率(在此情况下,“0.74×0.74”等)、切片厚度、增量(在此情况下,“5”等)、和/或预期时相数(在此情况下,“1”等)等。在一些情况下,UI可显示或另外呈现以下至少一项:供用户输入资产或对象有关备注的备注字段;供用户将资产添加到项目中的选项;以及/或者供用户下载资产的选项等。根据一些实施方案,图像发现实用程序可以对资产进行分组。例如,在单个成像会话中采集多个图像集的情况下(例如,以理解解剖结构的动态交互或操作等;有时称为“多相扫描”或“多相图像”等),图像发现实用程序可以对这多个图像集进行分组,以便将它们视为单个图像资产或单个图像资产集。另选地或另外地,可以在不同的成像会话期间获得多个图像集。在一些实施方案中,多个图像集可以是单个解剖结构的图像集的集合或者两个或更多个解剖结构的图像集的集合(在一些情况下,对象身体各处的解剖结构的图像集)等。在这样做时,图像发现实用程序可以将作为一项资产而组合起来的多个图像集(表示单个解剖结构还是多个解剖结构等,以及/或者在单个会话期间还是在多个会话期间获得等)呈现在UI中,并且可以向用户呈现选项以单独地选择每个图像组以供操作(诸如预览或下载等)。如图4E所示,该资产包含解剖结构的143张帧或图像。
如图4F中的UI 430或图4G中的UI 435的非限制性示例所示,UI可显示或另外呈现信息,包括但不限于基线DICOM译本(包括但不限于.raw文件、.txt文件、.mcs文件等)等。UI也可呈现以下至少一项:供用户输入资产或患者有关备注的选项;供用户将资产添加到项目中的选项;供用户下载资产的选项;供用户上传新的DICOM译本的选项;供用户将一个或多个DICOM译本添加到项目中的选项;以及/或者供用户下载一个或多个DICOM译本的选项等。
如图4H中的UI 440的非限制性示例所示,UI可显示或另外呈现信息,包括但不限于项目资产等。UI也可呈现以下至少一项:上载新项目资产的选项、选择项目资产的选项、清除选择的选项、下载所有选定项目资产的选项、下载所有项目资产的选项、上载选定项目内的新资产的选项、以及/或者展开/收起具体资产或项目资产视图的选项等。
图4I-图4L描绘了UI 445-460的非限制性示例,这些UI显示或另外呈现了针对非人类扫描或医学图像(在此情况下,猪的医学图像或医学图像文件,尽管不限于此具体物种)的信息。例如,如图4I中的UI 445的非限制性示例所示,UI可显示或另外呈现资产有关信息(在此情况下,“扫描314”,其是对象或患者(在此情况下,猪)的计算机断层(“CT”)扫描的图像,在此情况下,该对象与匿名字母数字代码“Pig_168470”相关联)。在一些情况下,在UI(例如,图4I的UI 445等)中呈现的信息可包括但不限于扫描ID(在此情况下,“扫描314”等)、研究描述(在此情况下,“CT-Pig”等)、主要解剖结构(在此情况下,“Pig”等)、扫描日期(在此情况下,“2019-12-31”等)、对象ID(在此情况下,“Pig_168470”等)、物种(在此情况下,“Pig”等)、性别(在此情况下,“雄性”等)、出生年份(“YOB”)、种族(在此情况下,“Yorkshire”等)、对象体重(在此情况下,“154lbs”等)、对象身高(在此情况下,空白等)、对象BMI(在此情况下,空白等)、对象扫描年龄(在此情况下,“17周龄”等)、对象NYHA分级(在此情况下,空白或不适用)、研究代码(在此情况下,“Pig”等)、源机构(在此情况下,“Center3”等)、分区或分组代码(在此情况下,“Core Test Group”等)、已知疾病(在此情况下,无)和/或扫描设备(在此情况下,无)等。
如图4J中的UI 450的非限制性示例所示,UI可显示或另外呈现资产有关信息。在一些情况下,在UI(例如,图4J的UI 450等)中呈现的信息可包括但不限于资产本身(即,医学图像或医学图像文件等)、质量(在此情况下,“未知”等)、造影剂(在此情况下,“未知”等)、平面内像素分辨率(在此情况下,“0.38×0.38”等)、切片厚度(在此情况下,“0.75”等)、增量(在此情况下,空白等)、和/或预期时相数(在此情况下,“1”等)等。在一些情况下,UI可显示或另外呈现以下至少一项:供用户输入资产或对象有关备注的备注字段;供用户将资产添加到项目中的选项;以及/或者供用户下载资产的选项等。根据一些实施方案,图像发现实用程序可以对资产进行分组。例如,在单个成像会话中采集多个图像集的情况下(例如,以理解解剖结构的动态交互或操作等;有时称为“多相扫描”或“多相图像”等),图像发现实用程序可以对这多个图像集进行分组,以便将它们视为单个图像资产或单个图像资产集。另选地或另外地,可以在不同的成像会话期间获得多个图像集。在一些实施方案中,多个图像集可以是单个解剖结构的图像集的集合或者两个或更多个解剖结构的图像集的集合(在一些情况下,对象身体各处的解剖结构的图像集)等。在这样做时,图像发现实用程序可以将作为一项资产而组合起来的多个图像集(表示单个解剖结构还是多个解剖结构等,以及/或者在单个会话期间还是在多个会话期间获得等)呈现在UI中,并且可以向用户呈现选项以单独地选择每个图像组以供操作(诸如预览或下载等)。如图4J所示,该资产包含解剖结构的232张帧或图像。
图5A-图5D(统称为“图5”)是示出了根据各种实施方案的用于实现成像发现实用程序以增强临床图像管理的方法500的流程图。图5A的方法500继续到跟在“A”所表示的圆形标记之后的图5B,继续到跟在“B”所表示的圆形标记之后的图5C,或者继续到跟在“C”所表示的圆形标记之后的图5D。
虽然出于例示的目的以一定次序描绘和/或描述了技术和手术,但是应当理解,在各种实施方案的范围内,可重新排序和/或省略某些手术。此外,虽然图5所示的方法500可分别通过或利用图1、图2、图3A、图3B、图3C、图3D和图4A-图4H的系统、示例或实施方案100、200、300、300'、300”、300”'和400(或其部件)来实现(并且在一些情况下,在下文参照这些系统、示例、或实施方案进行描述),但是此类方法也可使用任何合适的硬件(或软件)具体实施来实现。类似地,虽然图1、图2、图3A、图3B、图3C、图3D和图4A-图4H的系统、示例或实施方案100、200、300、300'、300”、300”'和400中的每项(或其部件)可分别根据图5所示的方法500(例如,通过执行计算机可读介质上包含的指令)来运行,但是图1、图2、图3A、图3B、图3C、图3D和图4A-图4H的系统、示例或实施方案100、200、300、300'、300”、300”'和400也均可根据其他操作模式来操作以及/或者执行其他合适的步骤。
在图5A的非限制性实施方案中,在可选框505处,方法500可包括:经由请求设备,利用计算系统来呈现用户界面(“UI”)。方法500还可包括:利用计算系统并从请求设备接收对至少一个第一医学图像文件的请求(可选框510),该请求包括一个或多个搜索项;以及通过将请求转发到非关系型(“NoSQL”)数据管理系统(“DMS”),利用计算系统向NoSQL DMS查询所请求的至少一个第一医学图像文件(可选框515)。在一些情况下,可经由UI来接收请求。
根据一些实施方案,计算系统可包括但不限于以下至少一项:NoSQL DMS的处理器、SQL DMS的处理器、混合型NoSQL/SQL DMS的处理器、用于NoSQL DMS和SQL DMS两者的控制器、网络上的服务器计算机、网络上的基于云的计算系统、和/或分布式计算系统等。在一些情况下,请求设备均可包括但不限于以下至少一项:膝上型计算机、台式计算机、平板计算机、智能电话、移动电话和/或web客户端等。
在一些实施方案中,一个或多个搜索项可包括但不限于以下至少一项:一项或多项搜索标准、与至少一个项目描述相关的一个或多个关键字、与至少一个源研究名称相关的一个或多个关键字、与至少一个解剖区域相关的一个或多个关键字、与患者类别的至少一个特征相关的一个或多个关键字、与患者的至少一个人口统计相关的一个或多个关键字、与患者的至少一个身体特征相关的一个或多个关键字、与疾病的至少一个特征相关的一个或多个关键字、与一种或多种并存病的至少一个特征相关的一个或多个关键字、与满足一项或多项搜索标准的每张医学图像的至少一个特征相关的一个或多个关键字、与用于获得满足一项或多项搜索标准的一张或多张医学图像的至少一个模态的至少一个特征相关的一个或多个关键字、与用于获得满足一项或多项搜索标准的一张或多张医学图像的至少一个成像设备的至少一个特征相关的一个或多个关键字、以及/或者与至少一个附加参数相关的一个或多个关键字等。
方法500可包括:在框520处,利用NoSQL DMS并从请求设备(在一些情况下,经由计算系统和/或经由UI),接收对至少一个第一医学图像文件的请求。在框525处,方法500可包括:利用NoSQL DMS来访问由NoSQL DMS管理的NoSQL数据库,NoSQL数据库包含多个医学图像文件、与每个医学图像文件相关联的多个元数据标签、以及与多个医学图像文件中的两个或更多个医学图像文件相关联的多个工件文件,NoSQL数据库包含存储在由SQL DMS管理的关系型(“SQL”)数据库中的多个医学图像文件的镜像副本。在一些实施方案中,NoSQL数据库和SQL数据库中所包含的多个医学图像文件均可按照以图像为中心的分层结构进行组织,其中图像数据处于以图像为中心的分层结构的顶层,并且与图像数据相关联的患者信息处于以图像为中心的分层结构的顶层之下的层。
根据一些实施方案,多个工件文件可包括但不限于以下至少一项:一个或多个原始图像数据文件、一个或多个文档文件、一个或多个图像处理分析文件、一个或多个分割文件、一个或多个三维(“3D”)打印文件、一个或多个立体光刻(“STL”)文件、一个或多个测量文件、一个或多个实验文件、一个或多个项目文件、一个或多个机器算法文件、以及/或者一个或多个报告文件等。在一些情况下,多个元数据标签可包括但不限于能够定制为包括一个或多个标准医学图像元数据和一个或多个非标准医学图像元数据的灵活图像标签。在一些情况下,一个或多个标准医学图像元数据可包括但不限于一个或多个符合医学数字成像和通信(“DICOM”)的元数据等。在一些情况下,一个或多个非标准医学图像元数据可包括但不限于以下至少一项:造影剂元数据、与设备属性相关联的元数据、与植入技术相关联的元数据、与患者是否健康相关的元数据、与图像扫描质量相关的元数据、与至少一个医学专业所用的一个或多个特定参数相关联的元数据、以及/或者一个或多个能够定制的元数据等。
方法500还可包括:在框530处,通过在与NoSQL数据库中的多个医学图像文件中的每个医学图像文件相关联的多个元数据标签中搜索一个或多个搜索项中的每项,利用NoSQL DMS来执行对NoSQL数据库的搜索。在框535处,方法500可包括基于确定与多个医学图像文件中的一个或多个第二医学图像文件相关联的至少一个元数据标签包含与一个或多个搜索项中的至少一个搜索项对应或匹配的关键字:利用NoSQL DMS来识别存储在SQL数据库中的对应的一个或多个第二医学图像文件(框540),其中对NoSQL数据库的搜索用作对SQL数据库的索引搜索;利用NoSQL DMS或SQL DMS中的至少一者并从SQL数据库中检索一个或多个第二医学图像文件(框545);以及利用NoSQL DMS或SQL DMS中的至少一者,向请求设备发送所检索的一个或多个第二医学图像文件(框550)。在一些情况下,向请求设备发送所检索的一个或多个第二医学图像文件可包括:在UI中,显示所检索的一个或多个第二医学图像文件。另选地或另外地,向请求设备发送所检索的一个或多个第二医学图像文件可包括:利用NoSQL DMS或SQL DMS中的至少一者向请求设备发送相关搜索结果的列表,相关搜索结果的列表包括所检索的一个或多个第二医学图像文件,其中所检索的一个或多个第二医学图像文件可包括但不限于与多个不同患者相关联的两个或更多个医学图像文件。
方法500可继续到图5B中的框555处的过程,跟在“A”所表示的圆形标记之后;可继续到图5C中的框565处的过程,跟在“B”所表示的圆形标记之后;可继续到图5D中的框570处的过程,跟在“C”所表示的圆形标记之后。
在图5B中的框555处(跟在“A”所表示的圆形标记之后),方法500可包括:利用计算系统,将所检索的一个或多个第二医学图像文件转换为一个或多个符合DICOM的搜索结果。在一些情况下,在UI中显示所检索的一个或多个第二医学图像文件可包括:在UI中,将所检索的一个或多个第二医学图像文件显示为所转换的一个或多个符合DICOM的搜索结果。
方法500还可包括:基于确定用户的鼠标光标悬停在符合DICOM的搜索结果上,利用计算系统,至少部分地基于一个或多个搜索项,来生成并显示指示与符合DICOM的搜索结果相关联的特定信息或值的弹出显示项(框560)。
在图5C中的框565处(跟在图5A中“B”所表示的圆形标记之后),方法500可包括:利用计算系统,为UI中显示的所检索的一个或多个第二医学图像文件中的每个第二医学图像文件提供一个或多个任务选项。在一些实施方案中,一个或多个任务选项可包括但不限于以下至少一项:下载一个或多个第二医学图像文件中的具体一个或多个第三医学图像文件的选项;将一个或多个第二医学图像文件中的具体一个或多个第四医学图像文件添加到至少一个项目组文件夹中的选项;将一个或多个第二医学图像文件中的至少两个第五医学图像文件链接起来的选项;导出一个或多个第二医学图像文件中的一个或多个第六医学图像文件的选项;共享一个或多个第二医学图像文件中的一个或多个第七医学图像文件的选项;上传一个或多个第八医学图像文件的选项;开始新搜索的选项;保存当前搜索的选项;管理所保存的搜索的选项;查看最近搜索的选项;导出搜索的选项;打开新项目文件夹的选项;保存当前项目文件夹的选项;管理项目文件夹的选项;完成当前项目的选项;查看活动项目的选项;以及/或者导出项目文件夹的选项等。
在一些情况下,可以将单个成像会话期间所获得的一个或多个第二医学图像文件中的两个或更多个第九医学图像文件与共享元数据、公共元数据或链接元数据中的至少一项作为单个成像资产分组在一起,其中一个或多个任务选项还可包括以下至少一项:在UI中一起预览两个或更多个第九医学图像文件的选项;将两个或更多个第九医学图像文件作为单个图像文件集而下载的选项;将两个或更多个第九医学图像文件作为单个图像文件集而导出的选项;将两个或更多个第九医学图像文件作为单个图像文件集而共享的选项;以及/或者单独地或分组地编辑与两个或更多个第九医学图像文件中的每个第九医学图像文件相关联的元数据的选项等。在一些情况下,一个或多个任务选项还可包括以下至少一项:对一个或多个第二医学图像文件中的一个或多个第十医学图像文件执行自动分割的选项;以及/或者对一个或多个第二医学图像文件中的一个或多个第十一医学图像文件执行自动测量的选项等。
在图5D中的框570处(跟在图5A中“C”所表示的圆形标记之中),方法500可包括:至少部分地基于所检索的一个或多个第二医学图像文件中的至少一个第十三医学图像文件,利用模型生成系统来生成一个或多个三维(“3D”)模型。
示例性系统和硬件具体实施
图6是示出了根据各种实施方案的示例性计算机或系统硬件架构的框图。图6提供了服务提供商系统硬件的计算机系统600的一个实施方案的示意图,该系统可执行如本文所述的各种其他实施方案所提供的方法,以及/或者可执行如上所述的计算机或硬件系统(即,非关系型(“NoSQL”)数据管理系统(“DMS”)105、关系型(“SQL”)DMS 120、计算系统140、web服务器150和215、请求设备160a-160n和220、成像发现实用程序205和轻量目录访问协议(“LDAP”)提供商系统270等)的功能。应当指出的是,图6仅旨在提供各种部件的一般化图示,可视情况利用(或不利用)其中每个部件中的一个或多个部件。因此,图6广义地示出了如何可以按相对分离或相对更集成的方式来实现各个系统元件。
计算机或硬件系统600——其可表示上文参照图1-图5所述的计算机或硬件系统(即,NoSQL DMS 105、SQL DMS 120、计算系统140、web服务器150和215、请求设备160a-160n和220、成像发现实用程序205和LDAP提供商系统270等)的实施方案——被示为包括硬件元件,这些硬件元件可经由总线605电耦接(或者视情况可以按其他方式进行通信)。硬件元件可包括:一个或多个处理器610,包括但不限于一个或多个通用处理器和/或一个或多个专用处理器(诸如微处理器、数字信号处理芯片和/或图形加速处理器等);一个或多个输入设备615,其可包括但不限于鼠标和/或键盘等;以及一个或多个输出设备620,其可包括但不限于显示设备和/或打印机等。
计算机或硬件系统600还可包括一个或多个存储设备625(和/或与该一个或多个存储设备通信),其可包括但不限于本地和/或网络可访问存储装置,以及/或者可包括但不限于磁盘驱动器、驱动器阵列、光学存储设备、固态存储设备诸如可能够编程的可闪速更新的随机存取存储器(“RAM”)和/或只读存储器(“ROM”)等。此类存储设备可被配置为实现任何适当的数据存储,包括但不限于各种文件系统、数据库结构等。
计算机或硬件系统600也可包括通信子系统630,其可包括但不限于调制解调器、网卡(无线或有线)、红外通信设备、无线通信设备和/或芯片组(诸如BluetoothTM设备、802.11设备、WiFi设备、WiMax设备、WWAN设备、蜂窝通信设施等)等。通信子系统630可容许与网络(诸如下述网络,举一个例子而言)、其他计算机或硬件系统、和/或本文所述的任何其他设备交换数据。在许多实施方案中,计算机或硬件系统600还将包括工作存储器635,其可包括RAM或ROM设备,如上所述。
计算机或硬件系统600也可包括被示出为当前位于工作存储器635内的软件元件,这些软件元件包括操作系统640、设备驱动器、可执行库和/或其他代码,诸如一个或多个应用程序645,该一个或多个应用程序可包括由各种实施方案提供的计算机程序(包括但不限于超管理器、VM等),以及/或者可被设计来实现由其他实施方案提供的方法和/或配置由其他实施方案提供的系统,如本文所述。仅以举例的方式,关于以上所论述的方法描述的一个或多个规程可被实现为可由计算机(和/或计算机内的处理器)执行的代码和/或指令;接着,在一个方面,此类代码和/或指令可用于配置和/或适配通用计算机(或其他设备)以根据所描述的方法执行一个或多个操作。
这些指令集和/或代码集可编码和/或存储在非暂态计算机可读存储介质诸如上述存储设备625上。在一些情况下,存储介质可并入计算机系统诸如系统600内。在其他实施方案中,存储介质可与计算机系统分离(即,可移除介质,诸如紧凑型盘等),和/或设置在安装包中,使得存储介质可用于编程、配置和/或适配上面存储有指令/代码的通用计算机。这些指令可采取可由计算机或硬件系统600执行的可执行代码的形式,和/或可采取源代码和/或可安装代码的形式,这些指令在(例如,使用多种通常可用的编译器、安装程序、压缩/解压缩实用程序等中的任一种)编译和/或安装在计算机或硬件系统600上时则采取可执行代码的形式。
对于本领域的技术人员将显而易见的是,可根据具体要求进行实质性变化。例如,也可使用定制的硬件(诸如可编程逻辑控制器、现场可编程门阵列、专用集成电路等),和/或可在硬件、软件(包括便携式软件,诸如小应用程序等)或两者中实现特定元件。此外,可采用与其他计算设备诸如网络输入/输出设备的连接。
如上所述,在一个方面,一些实施方案可采用计算机或硬件系统(诸如计算机或硬件系统600)来执行根据本发明的各种实施方案的方法。根据一组实施方案,此类方法的一些或全部步骤由计算机或硬件系统600响应于处理器610执行包含在工作存储器635中的一个或多个指令的一个或多个序列(其可并入到操作系统640和/或其他代码诸如应用程序645中)来执行。此类指令可从另一计算机可读介质诸如存储设备625中的一个或多个存储设备读入工作存储器635。仅以举例的方式,包含在工作存储器635中的指令的序列的执行可使处理器610执行本文所述的方法的一个或多个步骤。
如本文所用,术语“机器可读介质”和“计算机可读介质”指代参与提供使机器以具体方式操作的数据的任何介质。在使用计算机或硬件系统600实现的实施方案中,各种计算机可读介质可涉及向处理器610提供指令/代码以供执行,和/或可用于存储和/或携载此类指令/代码(例如,作为信号)。在许多具体实施中,计算机可读介质是非暂态的、物理的和/或有形的存储介质。在一些实施方案中,计算机可读介质可采取许多形式,包括但不限于非易失性介质、易失性介质等。非易失性介质包括例如光盘和/或磁盘,诸如存储设备625。易失性介质包括但不限于动态存储器,诸如工作存储器635。在一些另选的实施方案中,计算机可读介质可采取传输介质的形式,传输介质包括但不限于同轴电缆、铜线和光纤(包括电线,电线包括总线605)以及通信子系统630的各种部件(和/或通信子系统630借以提供与其他设备的通信的介质)。在一组另选的实施方案中,传输介质还可采取波(包括但不限于无线电波、声波和/或光波,诸如在无线电波和红外数据通信期间生成的那些)的形式。
物理和/或有形计算机可读介质的常见形式包括例如软盘、软磁盘、硬盘、磁带、或任何其他磁性介质、CD-ROM、任何其他光学介质、穿孔卡、纸带、任何其他具有孔图案的物理介质、RAM、PROM和EPROM、闪存EPROM、任何其他存储器芯片或存储器盒、如下文所描述的载波、或计算机可从其读取指令和/或代码的任何其他介质。
各种形式的计算机可读介质可涉及将一个或多个指令的一个或多个序列携载到处理器610以供执行。仅以举例的方式,指令最初可携载在远程计算机的磁盘和/或光盘上。远程计算机可将指令加载到它的动态存储器中,并且通过传输介质作为信号发送指令以便由计算机或硬件系统600接收和/或执行。可呈电磁信号、声学信号、光学信号等形式的这些信号是根据本发明的各种实施方案的可在其上编码指令的载波的所有示例。
通信子系统630(和/或其部件)通常将接收信号,并且总线605接着可将信号(和/或由信号携载的数据、指令等)携载到工作存储器635,处理器605从该工作存储器检索并执行指令。由工作存储器635接收的指令可在由处理器610执行之前或之后任选地存储在存储设备625上。
如上所述,一组实施方案包括用于实现图像管理的方法和系统,并且更具体地,涉及用于实现成像发现实用程序以增强临床图像管理的方法、系统和装置。图7示出了根据一组实施方案可使用的系统700的示意图。系统700可包括一个或多个用户计算机、用户设备或客户设备705。用户计算机、用户设备或客户设备705可以是通用个人计算机(仅以举例的方式,包括运行任何适当的操作系统的台式计算机、平板计算机、膝上型计算机、手持式计算机等,任何适当的操作系统中的若干操作系统可从供应商诸如Apple、Microsoft公司等获得)、运行多种可商购获得的UNIXTM或UNIX样操作系统中的任何操作系统的云计算设备、服务器和/或工作站计算机。用户计算机、用户设备或客户设备705也可具有多种应用程序中的任何应用程序,多种应用程序包括被配置为执行(例如如上所述的)由各种实施方案提供的方法的一个或多个应用程序,以及一个或多个办公室应用程序、数据库客户端和/或服务器应用程序、和/或web浏览器应用程序。另选地,用户计算机、用户设备或客户设备705可以是能够经由网络(例如,以下描述的网络710)进行通信和/或能够显示和导航web页面或其他类型的电子文档的任何其他电子设备,诸如瘦客户端计算机、启用互联网的移动电话、和/或个人数字助理。尽管示例性系统700被示出为具有两个用户计算机、用户设备或客户设备705,但可支持任何数量的用户计算机、用户设备或客户设备。
某些实施方案在可包括网络710的联网环境中运行。网络710可以是本领域的技术人员熟悉的任何类型的网络,该网络可支持使用多种可商购获得的(和/或自由或专有)协议中的任何协议进行数据通信,这些协议包括但不限于TCP/IP、SNATM、IPXTM、AppleTalkTM等。仅以举例的方式,网络710(类似于图1的网络135和/或170等)均可包括:局域网(“LAN”),包括但不限于光纤网络、以太网和/或Token-RingTM网络等;广域网(“WAN”);无线广域网(“WWAN”);虚拟网络,诸如虚拟专用网络(“VPN”);互联网;内联网;外联网;公用交换电话网(“PSTN”);红外网络;无线网络,包括但不限于在IEEE 802.11协议套组中的任何协议、本领域中已知的BluetoothTM协议和/或任何其他无线协议下操作的网络;和/或这些和/或其他网络的任何组合。在特定实施方案中,网络可包括服务提供商(例如,互联网服务提供商(“ISP”))的接入网络。在另一实施方案中,网络可包括服务提供商的核心网络、和/或互联网。
实施方案还可包括一个或多个服务器计算机715。服务器计算机715中的每个服务器计算机可配置有操作系统,包括但不限于以上所论述的那些中的任一者以及任何商业(或免费)可获得的服务器操作系统。服务器715中的每个服务器也可运行一个或多个应用程序,该一个或多个应用程序可被配置为向一个或多个客户端705和/或其他服务器715提供服务。
仅以举例的方式,服务器715中的一个服务器可以是数据服务器、web服务器、云计算设备等,如上所述。数据服务器可包括web服务器(或与web服务器通信),仅以举例的方式,web服务器可用于处理来自用户计算机705的对web页面或其他电子文档的请求。web服务器还可运行多种服务器应用程序,包括HTTP服务器、FTP服务器、CGI服务器、数据库服务器、Java服务器等。在本发明的一些实施方案中,web服务器可被配置为服务web页面,这些web页面可在用户计算机705中的一个或多个用户计算机上的web浏览器内操作以执行本发明的方法。
在一些实施方案中,服务器计算机715可包括:一个或多个应用服务器,该一个或多个应用服务器可配置有可由在客户端计算机705和/或其他服务器715中的一者或多者上运行的客户端访问的一个或多个应用程序。仅以举例的方式,服务器715可以是能够响应于用户计算机705和/或其他服务器715执行程序或脚本的一个或多个通用计算机,这些程序或脚本包括但不限于web应用程序(在一些情况下,这些web应用程序可被配置为执行由各种实施方案提供的方法)。仅以举例的方式,web应用程序可实现为以任何合适的编程语言(诸如JavaTM、C、C#TM或C++)和/或任何脚本语言(诸如Perl、Python或TCL)以及任何编程和/或脚本语言的组合编写的一个或多个脚本或程序。应用服务器还可包括数据库服务器,包括但不限于可从OracleTM、MicrosoftTM、SybaseTM、IBMTM等商购获得的那些,这些数据库服务器可处理来自在用户计算机、用户设备或客户设备705和/或另一服务器715上运行的客户端(根据配置,客户端包括专用数据库客户端、API客户端、web浏览器等)的请求。在一些实施方案中,应用服务器可执行用于实现图像管理的一个或多个过程,并且更具体地,涉及用于实现成像发现实用程序以增强临床图像管理的方法、系统和装置,如上文所详述。由应用服务器提供的数据可被格式化为一个或多个web页面(包括例如HTML、JavaScript等)和/或可经由web服务器转发到用户计算机705(例如,如上所述)。类似地,web服务器可从用户计算机705接收web页面请求和/或输入数据,和/或将web页面请求和/或输入数据转发到应用服务器。在一些情况下,web服务器可与应用服务器集成。
根据另外的实施方案,一个或多个服务器715可用作文件服务器和/或可包括实现各种所公开的方法所需的一个或多个文件(例如,应用代码、数据文件等),这些文件由在用户计算机705和/或另一服务器715上运行的应用并入。另选地,如本领域技术人员将理解的,文件服务器可包括所有必需的文件,从而允许此类应用由用户计算机、用户设备或客户设备705和/或服务器715远程调用。
应当指出的是,根据具体实施特定的需要和参数,关于本文的各种服务器(例如,应用服务器、数据库服务器、web服务器、文件服务器等)所描述的功能可由单个服务器和/或多个专用服务器执行。
在某些实施方案中,该系统可包括一个或多个数据库720a-720n(统称为“数据库720”)。数据库720中的每个数据库的位置是随意的:仅以举例的方式,数据库720a可驻留在服务器715a(和/或用户计算机、用户设备或客户设备705)本地(和/或驻留在其中)的存储介质上。另选地,数据库720n可远离任何或所有计算机705、715,只要它可(例如,经由网络710)与这些计算机中的一个或多个计算机通信即可。在一组特定实施方案中,数据库720可驻留在本领域的技术人员熟悉的存储区域网络(“SAN”)中。(同样,用于执行归属于计算机705、715的功能的任何必需文件可视情况本地存储在相应计算机上和/或远程地存储。在一组实施方案中,数据库720可以是关系数据库,诸如Oracle数据库,关系数据库适于响应于SQL格式化命令而存储、更新和检索数据。如上所述,数据库可由例如数据库服务器控制和/或维护。
根据一些实施方案,系统700还可包括计算系统725和对应数据库730(类似于图1中的计算系统140和对应数据库145等)、非关系型(“NoSQL”)数据管理系统(“DMS”)735和对应NoSQL数据库740(类似于图1中的NoSQL DMS 105和对应数据库110等)。在一些实施方案中,NoSQL数据库740可包含医学图像数据745,其可包括但不限于多个医学图像文件、与每个医学图像文件相关联的多个元数据标签、以及/或者与多个医学图像文件中的两个或更多个医学图像文件相关联的多个工件文件等。系统700还可包括关系型(“SQL”)DMS750和对应SQL数据库755(类似于图1中的SQL DMS 120和对应数据库125等)。根据一些实施方案,SQL数据库755可包含医学图像数据760,其可包括但不限于多个医学图像文件、与每个医学图像文件相关联的多个元数据标签、以及/或者与多个医学图像文件中的两个或更多个医学图像文件相关联的多个工件文件等。在一些情况下,NoSQL数据库740可包含存储在SQLDMS 750管理的SQL数据库755中的多个医学图像文件的镜像副本(在图7中由标记为“镜像数据”的符号来表示)。NoSQL数据库740和SQL数据库755中所包含的多个医学图像文件中的每个文件均可按照以图像为中心的分层结构进行组织,其中图像数据处于以图像为中心的分层结构的顶层,并且与图像数据相关联的患者信息处于以图像为中心的分层结构的顶层之下的层,这在图像发现和管理方面优于以患者为中心的常规数据管理系统,在常规数据管理系统中,患者信息处于以患者为中心的分层结构的顶层,并且与患者数据相关联的图像信息处于以患者为中心的分层结构的顶层之下的层。在一些情况下,计算系统725可包括但不限于以下至少一项:NoSQL DMS的处理器、SQL DMS的处理器、混合型NoSQL/SQL DMS的处理器、用于NoSQL DMS和SQL DMS两者的控制器、网络上的服务器计算机、网络上的基于云的计算系统、和/或分布式计算系统等。
在一些情况下,多个工件文件可包括但不限于以下至少一项:一个或多个原始图像数据文件、一个或多个文档文件、一个或多个图像处理分析文件、一个或多个分割文件、一个或多个三维(“3D”)打印文件、一个或多个立体光刻(“STL”)文件、一个或多个测量文件、一个或多个实验文件、一个或多个项目文件、一个或多个机器算法文件、以及/或者一个或多个报告文件等。在一些情况下,多个元数据标签可包括但不限于能够定制为包括一个或多个标准医学图像元数据和一个或多个非标准医学图像元数据的灵活图像标签。在一些情况下,一个或多个标准医学图像元数据可包括符合医学数字成像和通信(“DICOM”)的元数据。在一些情况下,一个或多个非标准医学图像元数据可包括但不限于以下至少一项:造影剂元数据、与设备属性相关联的元数据、与植入技术相关联的元数据、与患者是否健康相关的元数据、与图像扫描质量相关的元数据、与至少一个医学专业所用的一个或多个特定参数相关联的元数据、以及/或者一个或多个能够定制的元数据等。
系统700还可包括web服务器765和对应数据库770(类似于图1中的web服务器150和对应数据库155等)。系统700还可包括一个或多个请求设备775a-775n(统称为“请求设备775”等;类似于图1中的请求设备160a-160n等),该一个或多个请求设备分别与第一到第N用户780a-780n(统称为“用户780”等;类似于图1中的用户165a-165n等)相关联。在一些情况下,一个或多个请求设备均可包括但不限于以下至少一项:膝上型计算机、台式计算机、平板计算机、智能电话、移动电话和/或web客户端等。系统700还可包括一个或多个用户界面(“UI”)785a-785n(统称为“UI 785”等;类似于图1中的UI 175a-175n等),每个UI显示于一个或多个请求设备775a-775n中的对应请求设备775中,或者显示于用户设备705a或705b中等。
在操作中,NoSQL DMS735可以(经由网络710等)从与用户780相关联的请求设备775接收对至少一个第一医学图像文件的请求,该请求包括一个或多个搜索项。在一些实施方案中,一个或多个搜索项可包括但不限于以下至少一项:一项或多项搜索标准、与至少一个项目描述相关的一个或多个关键字、与至少一个源研究名称相关的一个或多个关键字、与至少一个解剖区域相关的一个或多个关键字、与患者类别的至少一个特征相关的一个或多个关键字、与患者的至少一个人口统计相关的一个或多个关键字、与患者的至少一个身体特征相关的一个或多个关键字、与疾病的至少一个特征相关的一个或多个关键字、与一种或多种并存病的至少一个特征相关的一个或多个关键字、与满足一项或多项搜索标准的每张医学图像的至少一个特征相关的一个或多个关键字、与用于获得满足一项或多项搜索标准的一张或多张医学图像的至少一个模态的至少一个特征相关的一个或多个关键字、与用于获得满足一项或多项搜索标准的一张或多张医学图像的至少一个成像设备的至少一个特征相关的一个或多个关键字、以及/或者与至少一个附加参数相关的一个或多个关键字等。
NoSQL DMS 735可访问由NoSQL DMS 735管理的NoSQL数据库740,并且通过对与NoSQL数据库740中的多个医学图像文件(即,医学图像数据745等)中的每个医学图像文件相关联的多个元数据标签中的一个或多个搜索项的每项进行搜索,可执行对NoSQL数据库740的搜索。基于确定与多个医学图像文件中的一个或多个第二医学图像文件相关联的至少一个元数据标签包含了与一个或多个搜索项中的至少一个搜索项对应或匹配的关键字,NoSQL DMS 735可识别存储在SQL数据库755中的对应的一个或多个第二医学图像文件(即,医学图像数据760等),其中由于NoSQL数据库740和SQL数据库755中所存储的镜像数据745和760,对NoSQL数据库740的搜索用作对SQL数据库755的索引搜索。NoSQL DMS 735和/或SQL DMS 750中的至少一个DMS可以从SQL数据库755中检索一个或多个第二医学图像文件,并且可以向请求设备775发送所检索的一个或多个第二医学图像文件。在一些情况下,向请求设备发送所检索的一个或多个第二医学图像文件可包括:利用NoSQL DMS 735或SQL DMS750中的至少一个DMS向请求设备发送相关搜索结果的列表,相关搜索结果的列表包括所检索的一个或多个第二医学图像文件,其中所检索的一个或多个第二医学图像文件可包括但不限于与多个不同患者相关联的两个或更多个医学图像文件。
在一些实施方案中,计算系统725和/或web服务器765(统称为“计算系统”等)可以从请求设备775接收对至少一个第一医学图像文件的请求,并且通过将请求转发到NoSQLDMS 735,可以向NoSQL DMS 735查询所请求的至少一个第一医学图像文件。在一些情况下,计算系统可经由请求设备775来呈现UI 785。在此类情况下,可经由UI 785来接收请求。在一些情况下,向请求设备发送所检索的一个或多个第二医学图像文件可包括:在UI 785中,显示所检索的一个或多个第二医学图像文件。
根据一些实施方案,计算系统可以将所检索的一个或多个第二医学图像文件转换为一个或多个符合DICOM的搜索结果。在一些情况下,在UI785中显示所检索的一个或多个第二医学图像文件可包括:在UI 785中,将所检索的一个或多个第二医学图像文件显示为所转换的一个或多个符合DICOM的搜索结果。在一些情况下,基于确定用户的鼠标光标悬停在符合DICOM的搜索结果上,计算系统可至少部分地基于一个或多个搜索项来生成并显示指示与符合DICOM的搜索结果相关联的特定信息或值的弹出显示项。
在一些实施方案中,计算系统可以为UI 785中显示的所检索的一个或多个第二医学图像文件中的每个第二医学图像文件提供一个或多个任务选项。在一些情况下,一个或多个任务选项可包括但不限于以下至少一项:下载一个或多个第二医学图像文件中的具体一个或多个第三医学图像文件的选项;将一个或多个第二医学图像文件中的具体一个或多个第四医学图像文件添加到至少一个项目组文件夹中的选项;将一个或多个第二医学图像文件中的至少两个第五医学图像文件链接起来的选项;导出一个或多个第二医学图像文件中的一个或多个第六医学图像文件的选项;共享一个或多个第二医学图像文件中的一个或多个第七医学图像文件的选项;上传一个或多个第八医学图像文件的选项;开始新搜索的选项;保存当前搜索的选项;管理所保存的搜索的选项;查看最近搜索的选项;导出搜索的选项;打开新项目文件夹的选项;保存当前项目文件夹的选项;管理项目文件夹的选项;完成当前项目的选项;查看活动项目的选项;以及/或者导出项目文件夹的选项等。
上文参照图1-图5更详细地描述了系统700(及其部件)的这些和其他功能。
虽然已经关于示例性实施方案描述了某些特征和方面,但是本领域的技术人员将认识到,众多修改是可能的。例如,本文所述的方法和过程可使用硬件部件、软件和/或其任何组合来实现。此外,虽然可关于特定结构和/或功能部件描述本文所述的各种方法和过程以便于描述,但是由各种实施方案提供的方法不限于任何特定结构和/或功能架构,而是可在任何合适的硬件、固件和/或软件配置上实现。类似地,虽然某些功能归属于某些系统部件,但是除非上下文另外规定,否则该功能可根据若干实施方案分布在各种其他系统部件之间。
此外,虽然以特定次序描述了本文所述的方法和过程的规程以便于描述,但是除非上下文另外规定,否则可根据各种实施方案重新排序、添加和/或省略各种规程。此外,关于一种方法或过程描述的规程可并入其他所描述的方法或过程中;同样,根据特定结构架构和/或关于一个系统描述的系统部件可以另选的结构架构组织和/或并入其他所描述的系统中。因此,虽然在具有或没有某些特征的情况下描述了各种实施方案以便于描述并且例示那些实施方案的示例性方面,但是除非上下文另外规定,否则本文关于特定实施方案描述的各种部件和/或特征可在其他所描述的实施方案之间被取代、添加和/或减去。因此,尽管以上描述了若干示例性实施方案,但应当理解,本发明旨在涵盖在以下权利要求的范围内的所有修改和等效物。

Claims (15)

1.一种方法,包括:
利用非关系型(“NoSQL”)数据管理系统(“DMS”)并从请求设备接收对至少一个第一医学图像文件的请求,所述请求包括一个或多个搜索项;
利用所述NoSQL DMS来访问由所述NoSQL DMS管理的NoSQL数据库,所述NoSQL数据库包含多个医学图像文件、与每个医学图像文件相关联的多个元数据标签、以及与所述多个医学图像文件中的两个或更多个医学图像文件相关联的多个工件文件,
所述NoSQL数据库包含存储在由SQL DMS管理的关系型(“SQL”)数据库中的所述多个医学图像文件的镜像副本,其中所述NoSQL数据库和所述SQL数据库中所包含的所述多个医学图像文件各自按照以图像为中心的分层结构进行组织,其中图像数据处于所述以图像为中心的分层结构的顶层,并且与所述图像数据相关联的患者信息处于所述以图像为中心的分层结构的所述顶层之下的层;
通过在与所述NoSQL数据库中的所述多个医学图像文件中的每个医学图像文件相关联的所述多个元数据标签中搜索所述一个或多个搜索项中的每项,利用所述NoSQL DMS来执行对所述NoSQL数据库的搜索;以及
基于确定与所述多个医学图像文件中的一个或多个第二医学图像文件相关联的至少一个元数据标签包含与所述一个或多个搜索项中的至少一个搜索项对应或匹配的关键字:
利用所述NoSQL DMS识别存储在所述SQL数据库中的对应的一个或多个第二医学图像文件,其中对所述NoSQL数据库的所述搜索用作对所述SQL数据库的索引搜索;
利用所述NoSQL DMS或所述SQL DMS中的至少一者并从所述SQL数据库中检索所述一个或多个第二医学图像文件;以及
利用所述NoSQL DMS或所述SQL DMS中的至少一者,向所述请求设备发送所检索的一个或多个第二医学图像文件。
2.根据权利要求1所述的方法,还包括:
利用计算系统并从所述请求设备接收对所述至少一个第一医学图像文件的请求;以及
通过将所述请求转发到所述NoSQL DMS,利用所述计算系统向所述NoSQL DMS查询所请求的至少一个第一医学图像文件。
3.根据权利要求1-2中任一项所述的方法,还包括:
经由所述请求设备,利用所述计算系统来呈现用户界面(“UI”);
其中所述请求经由所述UI来接收;并且
其中向所述请求设备发送所检索的一个或多个第二医学图像文件包括在所述UI中显示所检索的一个或多个第二医学图像文件。
4.根据权利要求3所述的方法,还包括:
利用所述计算系统将所检索的一个或多个第二医学图像文件转换为一个或多个符合医学数字成像和通信(“DICOM”)的搜索结果;
其中在所述UI中显示所检索的一个或多个第二医学图像文件包括在所述UI中将所检索的一个或多个第二医学图像文件显示为所转换的一个或多个符合DICOM的搜索结果。
5.根据权利要求4所述的方法,还包括:
基于确定用户的鼠标光标悬停在符合DICOM的搜索结果上,利用所述计算系统,至少部分地基于所述一个或多个搜索项,来生成并显示指示与所述符合DICOM的搜索结果相关联的特定信息或值的弹出显示项。
6.根据权利要求3-5中任一项所述的方法,还包括:
利用所述计算系统,为所述UI中显示的所检索的一个或多个第二医学图像文件中的每个第二医学图像文件提供一个或多个任务选项;
其中所述一个或多个任务选项包括以下至少一项:下载所述一个或多个第二医学图像文件中的具体一个或多个第三医学图像文件的选项;将所述一个或多个第二医学图像文件中的具体一个或多个第四医学图像文件添加到至少一个项目组文件夹中的选项;
将所述一个或多个第二医学图像文件中的至少两个第五医学图像文件链接起来的选项;导出所述一个或多个第二医学图像文件中的一个或多个第六医学图像文件的选项;共享所述一个或多个第二医学图像文件中的一个或多个第七医学图像文件的选项;上传一个或多个第八医学图像文件的选项;开始新搜索的选项;保存当前搜索的选项;管理所保存的搜索的选项;查看最近搜索的选项;导出搜索的选项;打开新项目文件夹的选项;
保存当前项目文件夹的选项;管理项目文件夹的选项;完成当前项目的选项;查看活动项目的选项;或者导出项目文件夹的选项。
7.根据权利要求6所述的方法,其中将单个成像会话期间所获得的所述一个或多个第二医学图像文件中的两个或更多个第九医学图像文件与共享元数据、公共元数据或链接元数据中的至少一项作为单个成像资产分组在一起,其中所述一个或多个任务选项还包括以下至少一项:在所述UI中一起预览所述两个或更多个第九医学图像文件的选项;将所述两个或更多个第九医学图像文件作为单个图像文件集而下载的选项;将所述两个或更多个第九医学图像文件作为单个图像文件集而导出的选项;将所述两个或更多个第九医学图像文件作为单个图像文件集而共享的选项;或者单独地或分组地编辑与所述两个或更多个第九医学图像文件中的每个第九医学图像文件相关联的元数据的选项,其中所述一个或多个任务选项还包括以下至少一项:对所述一个或多个第二医学图像文件中的一个或多个第十医学图像文件执行自动分割的选项;或者对所述一个或多个第二医学图像文件中的一个或多个第十一医学图像文件执行自动测量的选项。
8.根据权利要求2-7中任一项所述的方法,其中所述计算系统包括以下至少一项:NoSQL DMS的处理器、SQL DMS的处理器、混合型NoSQL/SQL DMS的处理器、用于所述NoSQLDMS和所述SQL DMS两者的控制器、网络上的服务器计算机、网络上的基于云的计算系统、或分布式计算系统。
9.根据权利要求1-8中任一项所述的方法,其中所述请求设备包括以下至少一项:膝上型计算机、台式计算机、平板计算机、智能电话、移动电话或web客户端。
10.根据权利要求1-9中任一项所述的方法,其中所述多个工件文件包括以下至少一项:一个或多个原始图像数据文件、一个或多个文档文件、一个或多个图像处理分析文件、一个或多个分割文件、一个或多个三维(“3D”)打印文件、一个或多个立体光刻(“STL”)文件、一个或多个测量文件、一个或多个实验文件、一个或多个项目文件、一个或多个机器算法文件、或者一个或多个报告文件。
11.根据权利要求1-10中任一项所述的方法,其中所述一个或多个搜索项包括以下至少一项:一项或多项搜索标准、与至少一个项目描述相关的一个或多个关键字、与至少一个源研究名称相关的一个或多个关键字、与至少一个解剖区域相关的一个或多个关键字、与患者类别的至少一个特征相关的一个或多个关键字、与患者的至少一个人口统计相关的一个或多个关键字、与患者的至少一个身体特征相关的一个或多个关键字、与疾病的至少一个特征相关的一个或多个关键字、与一种或多种并存病的至少一个特征相关的一个或多个关键字、与满足一项或多项搜索标准的每张医学图像的至少一个特征相关的一个或多个关键字、与用于获得满足一项或多项搜索标准的一张或多张医学图像的至少一个模态的至少一个特征相关的一个或多个关键字、与用于获得满足一项或多项搜索标准的一张或多张医学图像的至少一个成像设备的至少一个特征相关的一个或多个关键字、或者与至少一个附加参数相关的一个或多个关键字。
12.根据权利要求1-11中任一项所述的方法,其中所述多个元数据标签包括灵活图像标签,所述灵活图像标签能够定制为包括一个或多个标准医学图像元数据以及一个或多个非标准医学图像元数据,其中所述一个或多个标准医学图像元数据包括一个或多个符合医学数字成像和通信(“DICOM”)的元数据,其中所述一个或多个非标准医学图像元数据包括以下至少一项:造影剂元数据、与设备属性相关联的元数据、与植入技术相关联的元数据、与患者是否健康有关的元数据、与图像扫描质量相关的元数据、与至少一个医学专业所用的一个或多个特定参数相关联的元数据、或者一个或多个能够定制的元数据。
13.根据权利要求1-12中任一项所述的方法,其中向所述请求设备发送所检索的一个或多个第二医学图像文件包括:利用所述NoSQL DMS或所述SQL DMS中的所述至少一者向所述请求设备发送相关搜索结果的列表,所述相关搜索结果的列表包括所检索的一个或多个第二医学图像文件,其中所检索的一个或多个第二医学图像文件包括与多个不同患者相关联的两个或更多个第十二医学图像文件。
14.根据权利要求1-13中任一项所述的方法,还包括:
至少部分地基于所检索的一个或多个第二医学图像文件中的至少一个第十三医学图像文件,利用模型生成系统来生成一个或多个三维(“3D”)模型。
15.一种用于执行根据权利要求1-14中任一项所述的方法的系统,包括:
由SQL数据管理系统(“DMS”)管理的关系型(SQL)数据库;
所述SQL DMS;
由NoSQL DMS管理的非关系型(“NoSQL”)数据库,所述NoSQL数据库包含多个医学图像文件、与每个医学图像文件相关联的多个元数据标签、以及与所述多个医学图像文件中的两个或更多个医学图像文件相关联的多个工件文件,所述NoSQL数据库包含存储在由所述SQL DMS管理的所述SQL数据库中的所述多个医学图像文件的镜像副本,其中所述NoSQL数据库和所述SQL数据库中所包含的所述多个医学图像文件各自按照以图像为中心的分层结构进行组织,其中图像数据处于所述以图像为中心的分层结构的顶层,并且与所述图像数据相关联的患者信息处于所述以图像为中心的分层结构的所述顶层之下的层;
所述NoSQL DMS,包括:
至少一个第一处理器;和
第一非暂态计算机可读介质,所述第一非暂态计算机可读介质通信地耦接到所述至少一个第一处理器,所述第一非暂态计算机可读介质上存储有计算机软件,所述计算机软件包括第一指令集,所述第一指令集在由所述至少一个第一处理器执行时,使所述NoSQLDMS:
从请求设备接收对至少一个第一医学图像文件的请求,所述请求包括一个或多个搜索项;
访问由所述NoSQL DMS管理的所述NoSQL数据库;
通过在与所述NoSQL数据库中的所述多个医学图像文件中的每个医学图像文件相关联的所述多个元数据标签中搜索所述一个或多个搜索项中的每项,执行对所述NoSQL数据库的搜索;以及
基于确定与所述多个医学图像文件中的一个或多个第二医学图像文件相关联的至少一个元数据标签包含与所述一个或多个搜索项中的至少一个搜索项对应或匹配的关键字:
识别存储在所述SQL数据库中的对应的一个或多个第二医学图像文件,其中对所述NoSQL数据库的所述搜索用作对所述SQL数据库的索引搜索;
从所述SQL数据库中检索所述一个或多个第二医学图像文件;以及
向所述请求设备发送所检索的一个或多个第二医学图像文件。
CN202180055193.9A 2020-09-08 2021-06-16 用于增强临床图像管理的成像发现实用程序 Pending CN116057519A (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US202063075413P 2020-09-08 2020-09-08
US63/075,413 2020-09-08
PCT/US2021/037655 WO2022055588A1 (en) 2020-09-08 2021-06-16 Imaging discovery utility for augmenting clinical image management
US17/349,361 US11817201B2 (en) 2020-09-08 2021-06-16 Imaging discovery utility for augmenting clinical image management
US17/349,361 2021-06-16

Publications (1)

Publication Number Publication Date
CN116057519A true CN116057519A (zh) 2023-05-02

Family

ID=80469938

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202180055193.9A Pending CN116057519A (zh) 2020-09-08 2021-06-16 用于增强临床图像管理的成像发现实用程序

Country Status (4)

Country Link
US (2) US11817201B2 (zh)
EP (1) EP4211547A1 (zh)
CN (1) CN116057519A (zh)
WO (1) WO2022055588A1 (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022055588A1 (en) 2020-09-08 2022-03-17 Medtronic, Inc. Imaging discovery utility for augmenting clinical image management
US20220276985A1 (en) * 2021-02-26 2022-09-01 Intellix.AI Inc. System and methods for massive data management and tagging

Family Cites Families (78)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6556695B1 (en) 1999-02-05 2003-04-29 Mayo Foundation For Medical Education And Research Method for producing high resolution real-time images, of structure and function during medical procedures
US8241274B2 (en) 2000-01-19 2012-08-14 Medtronic, Inc. Method for guiding a medical device
US6697818B2 (en) 2001-06-14 2004-02-24 International Business Machines Corporation Methods and apparatus for constructing and implementing a universal extension module for processing objects in a database
US7187964B2 (en) 2001-09-27 2007-03-06 Dirar S. Khoury Cardiac catheter imaging system
US9492241B2 (en) 2005-01-13 2016-11-15 Mazor Robotics Ltd. Image guided robotic system for keyhole neurosurgery
US7998095B2 (en) 2005-08-19 2011-08-16 Boston Scientific Scimed, Inc. Occlusion device
US7824397B2 (en) 2005-08-19 2010-11-02 Boston Scientific Scimed, Inc. Occlusion apparatus
US9717468B2 (en) 2006-01-10 2017-08-01 Mediguide Ltd. System and method for positioning an artificial heart valve at the position of a malfunctioning valve of a heart through a percutaneous route
US20080033527A1 (en) 2006-07-07 2008-02-07 Anthony Nunez Methods and systems for monitoring an endoprosthetic implant
US7892165B2 (en) 2006-10-23 2011-02-22 Hoya Corporation Camera calibration for endoscope navigation system
CA2670261A1 (en) 2006-11-16 2008-05-29 Vanderbilt University Apparatus and methods of compensating for organ deformation, registration of internal structures to images, and applications of same
WO2009148317A1 (en) 2008-06-05 2009-12-10 Technische Universiteit Delft Automatic catheter positioning system
GB2464092A (en) 2008-09-25 2010-04-07 Prosurgics Ltd Surgical mechanism control system
DE102009025077A1 (de) 2009-06-10 2010-12-16 Karl Storz Gmbh & Co. Kg System zur Orientierungsunterstützung und Darstellung eines Instruments im Inneren eines Untersuchungsobjektes insbesondere im menschlichen Körper
US9728006B2 (en) 2009-07-20 2017-08-08 Real Time Companies, LLC Computer-aided system for 360° heads up display of safety/mission critical data
DE102009040430B4 (de) 2009-09-07 2013-03-07 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Vorrichtung, Verfahren und Computerprogramm zur Überlagerung eines intraoperativen Livebildes eines Operationsgebiets oder des Operationsgebiets mit einem präoperativen Bild des Operationsgebiets
US8482859B2 (en) 2010-02-28 2013-07-09 Osterhout Group, Inc. See-through near-eye display glasses wherein image light is transmitted to and reflected from an optically flat film
US9134534B2 (en) 2010-02-28 2015-09-15 Microsoft Technology Licensing, Llc See-through near-eye display glasses including a modular image source
US10180572B2 (en) 2010-02-28 2019-01-15 Microsoft Technology Licensing, Llc AR glasses with event and user action control of external applications
US9128281B2 (en) 2010-09-14 2015-09-08 Microsoft Technology Licensing, Llc Eyepiece with uniformly illuminated reflective display
US9223134B2 (en) 2010-02-28 2015-12-29 Microsoft Technology Licensing, Llc Optical imperfections in a light transmissive illumination system for see-through near-eye display glasses
US9888973B2 (en) 2010-03-31 2018-02-13 St. Jude Medical, Atrial Fibrillation Division, Inc. Intuitive user interface control for remote catheter navigation and 3D mapping and visualization systems
WO2011127379A2 (en) 2010-04-09 2011-10-13 University Of Florida Research Foundation Inc. Interactive mixed reality system and uses thereof
US10026227B2 (en) 2010-09-02 2018-07-17 The Boeing Company Portable augmented reality
US8902254B1 (en) 2010-09-02 2014-12-02 The Boeing Company Portable augmented reality
EP2713894B1 (en) 2011-06-01 2021-01-20 NeoChord, Inc. System for minimally invasive repair of heart valve leaflets
RU2013156812A (ru) 2011-06-07 2015-07-20 Конинклейке Филипс Электроникс Н.В. Устройство для определения углового положения
US9652655B2 (en) 2011-07-09 2017-05-16 Gauss Surgical, Inc. System and method for estimating extracorporeal blood volume in a physical sample
WO2013170129A1 (en) 2012-05-10 2013-11-14 President And Fellows Of Harvard College A system and method for automatically discovering, characterizing, classifying and semi-automatically labeling animal behavior and quantitative phenotyping of behaviors in animals
US9773312B2 (en) 2012-05-25 2017-09-26 Koh Young Technology Inc. Method of registrating a camera of a surgical navigation system for an augmented reality
US9642606B2 (en) 2012-06-27 2017-05-09 Camplex, Inc. Surgical visualization system
KR101997566B1 (ko) 2012-08-07 2019-07-08 삼성전자주식회사 수술 로봇 시스템 및 그 제어방법
JP2015527144A (ja) 2012-08-27 2015-09-17 ユニバーシティ オブ ヒューストンUniversity Of Houston ロボット装置およびシステムソフトウェア、ハードウェア、および画像誘導手術およびロボット支援手術に使用するための方法
US9615788B2 (en) 2012-08-31 2017-04-11 Nuvectra Corporation Method and system of producing 2D representations of 3D pain and stimulation maps and implant models on a clinician programmer
US20140128726A1 (en) 2012-11-05 2014-05-08 Medtronic, Inc. Alignment of Imaging Modalities
US10496640B2 (en) 2012-12-19 2019-12-03 Salesforce.Com, Inc. Querying a not only structured query language (NoSQL) database using structured query language (SQL) commands
US20140176661A1 (en) 2012-12-21 2014-06-26 G. Anthony Reina System and method for surgical telementoring and training with virtualized telestration and haptic holograms, including metadata tagging, encapsulation and saving multi-modal streaming medical imagery together with multi-dimensional [4-d] virtual mesh and multi-sensory annotation in standard file formats used for digital imaging and communications in medicine (dicom)
CN105027190B (zh) 2013-01-03 2019-06-21 美达视野股份有限公司 用于虚拟或增强介导视觉的射出空间成像数字眼镜
US9526443B1 (en) 2013-01-19 2016-12-27 Bertec Corporation Force and/or motion measurement system and a method of testing a subject
JP6364428B2 (ja) 2013-02-25 2018-07-25 スン−シオン,パトリック リンク接続分析システムおよび方法
KR20140112207A (ko) 2013-03-13 2014-09-23 삼성전자주식회사 증강현실 영상 표시 시스템 및 이를 포함하는 수술 로봇 시스템
US9931511B2 (en) 2013-05-16 2018-04-03 Nuvectra Corporation Method and apparatus for visualizing a migration history of pain maps and stimulation maps
WO2014200468A1 (en) 2013-06-12 2014-12-18 Thomson Licensing Context based image search
EP3020022B1 (en) 2013-07-11 2018-11-28 Brainlab AG Generation of a patient-specific anatomical atlas
US20150142844A1 (en) * 2013-11-15 2015-05-21 Salesforce.Com, Inc. Scalable objects for use in an on-demand services environment
US10126822B2 (en) 2013-12-16 2018-11-13 Leap Motion, Inc. User-defined virtual interaction space and manipulation of virtual configuration
US9626801B2 (en) 2013-12-31 2017-04-18 Daqri, Llc Visualization of physical characteristics in augmented reality
US9558592B2 (en) 2013-12-31 2017-01-31 Daqri, Llc Visualization of physical interactions in augmented reality
JP6929644B2 (ja) 2013-12-31 2021-09-01 グーグル エルエルシーGoogle LLC 注視によるメディア選択及び編集のためのシステム並びに方法
US10152796B2 (en) 2014-02-24 2018-12-11 H. Lee Moffitt Cancer Center And Research Institute, Inc. Methods and systems for performing segmentation and registration of images using neutrosophic similarity scores
US9280825B2 (en) 2014-03-10 2016-03-08 Sony Corporation Image processing system with registration mechanism and method of operation thereof
US9659367B2 (en) 2014-04-04 2017-05-23 International Business Machines Corporation Head mounted video and touch detection for healthcare facility hygiene
EP4343707A2 (en) 2014-05-15 2024-03-27 Brainlab AG Indication-dependent display of a medical image
EP3152737A4 (en) 2014-06-03 2018-01-24 Jones, Freddy In-time registration of temporally separated image acquisition
US10083233B2 (en) 2014-09-09 2018-09-25 Microsoft Technology Licensing, Llc Video processing for motor task analysis
AU2015325052B2 (en) 2014-09-30 2020-07-02 Auris Health, Inc. Configurable robotic surgical system with virtual rail and flexible endoscope
US9974525B2 (en) 2014-10-31 2018-05-22 Covidien Lp Computed tomography enhanced fluoroscopic system, device, and method of utilizing the same
US9298884B1 (en) 2014-12-17 2016-03-29 Vitaax Llc Remote instruction and monitoring of health care
EP3251087B1 (en) 2015-01-29 2018-11-28 Ventana Medical Systems, Inc. Dot detection, color classification of dots and counting of color classified dots
US10013808B2 (en) 2015-02-03 2018-07-03 Globus Medical, Inc. Surgeon head-mounted display apparatuses
US9947104B2 (en) 2015-02-11 2018-04-17 Brainlab Ag Preview visualisation of tracked nerve fibers
EP3274040A4 (en) 2015-03-27 2018-12-05 Project Moray, Inc. Fluid-expandable body articulation of catheters and other flexible structures
EP3138025A4 (en) * 2015-03-28 2017-06-14 Huawei Technologies Co., Ltd. Apparatus and method for creating user defined variable size tags on records in rdbms
US10642863B2 (en) 2015-05-27 2020-05-05 Kaseya International Limited Management of structured, non-structured, and semi-structured data in a multi-tenant environment
US9911225B2 (en) 2015-09-29 2018-03-06 Siemens Healthcare Gmbh Live capturing of light map image sequences for image-based lighting of medical data
US10667904B2 (en) 2016-03-08 2020-06-02 Edwards Lifesciences Corporation Valve implant with integrated sensor and transmitter
WO2018097902A1 (en) 2016-10-04 2018-05-31 Ohio State Innovation Foundation Systems and methods for predictive heart valve simulation
KR101715019B1 (ko) * 2016-11-24 2017-03-10 주식회사 올피아 영상저장장치의 클라우드 가상 디바이스 처리시스템
US11179200B2 (en) 2017-12-15 2021-11-23 Medtronic, Inc. Augmented reality solution to disrupt, transform and enhance cardiovascular surgical and/or procedural mapping navigation and diagnostics
US10413363B2 (en) 2017-12-15 2019-09-17 Medtronic, Inc. Augmented reality solution to optimize the directional approach and therapy delivery of interventional cardiology tools
CN108009296B (zh) * 2017-12-27 2020-10-16 北京中关村科金技术有限公司 一种基于Hbase的SQL查询方法、系统及相关装置
US20190350671A1 (en) 2018-05-21 2019-11-21 University Of Maryland, College Park Augmented reality catheter tracking and visualization methods and systems
US11494988B2 (en) 2018-05-22 2022-11-08 Agilent Technologies, Inc. Method and system for implementing augmented reality (AR)-based assistance within work environment
CN108984598A (zh) * 2018-05-31 2018-12-11 中国地质大学(武汉) 一种关系型地质数据库与NoSQL的融合方法及系统
US10898151B2 (en) 2018-10-31 2021-01-26 Medtronic Inc. Real-time rendering and referencing for medical procedures
CN111739613B (zh) * 2020-05-20 2023-01-31 中国电信集团工会上海市委员会 一种基于分布式计算技术的医疗影像云归档平台
WO2021243313A1 (en) 2020-05-29 2021-12-02 Medtronic, Inc. Extended reality (xr) applications for cardiac blood flow procedures
WO2022055588A1 (en) 2020-09-08 2022-03-17 Medtronic, Inc. Imaging discovery utility for augmenting clinical image management

Also Published As

Publication number Publication date
EP4211547A1 (en) 2023-07-19
US11817201B2 (en) 2023-11-14
US20240029865A1 (en) 2024-01-25
US20220076804A1 (en) 2022-03-10
WO2022055588A1 (en) 2022-03-17

Similar Documents

Publication Publication Date Title
US11935643B2 (en) Federated, centralized, and collaborative medical data management and orchestration platform to facilitate healthcare image processing and analysis
US11107015B2 (en) Information exchange system and method
Fonseca et al. The Cardiac Atlas Project—an imaging database for computational modeling and statistical atlases of the heart
US10692594B2 (en) Methods for improving natural language processing with enhanced automated screening for automated generation of a clinical summarization report and devices thereof
US10764289B2 (en) Cross-enterprise workflow
US10515721B2 (en) Automated cloud image processing and routing
Costa et al. Dicoogle-an open source peer-to-peer PACS
US9542481B2 (en) Radiology data processing and standardization techniques
US8856169B2 (en) Multi-modality, multi-resource, information integration environment
US20240029865A1 (en) Imaging discovery utility for augmenting clinical image management
Genereaux et al. DICOMweb™: Background and application of the web standard for medical imaging
US20140316807A1 (en) Cross-Enterprise Electronic Healthcare Document Sharing
US10733370B2 (en) Method, apparatus, and computer program product for generating a preview of an electronic document
US11194853B2 (en) Rapid cross-validated ground truth annotation of large image datasets for image analytics
EP3444824B1 (en) Detecting and classifying medical images based on continuously-learning whole body landmarks detections
Jodogne et al. Orthanc-a lightweight, restful dicom server for healthcare and medical research
Rascovsky et al. Informatics in radiology: use of CouchDB for document-based storage of DICOM objects
US20180004897A1 (en) Ris/pacs integration systems and methods
EP3994698A1 (en) Image processing and routing using ai orchestration
US20190259491A1 (en) Instance level metadata population of a pacs database
Bui et al. OpenSourcePACS: an extensible infrastructure for medical image management
Langer A flexible database architecture for mining DICOM objects: the DICOM data warehouse
Hosny et al. Unlocking vendor-specific tags: Three-dimensional printing of echocardiographic data sets
McCusker et al. Next generation cancer data discovery, access, and integration using prizms and nanopublications
Ding et al. Labelecg: A web-based tool for distributed electrocardiogram annotation

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination