CN106557647B - 控制方法 - Google Patents

控制方法 Download PDF

Info

Publication number
CN106557647B
CN106557647B CN201610805940.7A CN201610805940A CN106557647B CN 106557647 B CN106557647 B CN 106557647B CN 201610805940 A CN201610805940 A CN 201610805940A CN 106557647 B CN106557647 B CN 106557647B
Authority
CN
China
Prior art keywords
information
disease
medical
similar
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201610805940.7A
Other languages
English (en)
Other versions
CN106557647A (zh
Inventor
近藤坚司
高田和丰
小冢和纪
木村浩彦
坂井丰彦
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Intellectual Property Management Co Ltd
Original Assignee
Panasonic Intellectual Property Management Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Panasonic Intellectual Property Management Co Ltd filed Critical Panasonic Intellectual Property Management Co Ltd
Publication of CN106557647A publication Critical patent/CN106557647A/zh
Application granted granted Critical
Publication of CN106557647B publication Critical patent/CN106557647B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00ICT specially adapted for the handling or processing of medical images
    • G16H30/20ICT specially adapted for the handling or processing of medical images for handling medical images, e.g. DICOM, HL7 or PACS
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00ICT specially adapted for the handling or processing of medical images
    • G16H30/40ICT specially adapted for the handling or processing of medical images for processing medical images, e.g. editing
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/20ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for computer-aided diagnosis, e.g. based on medical expert systems
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/70ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for mining of medical data, e.g. analysing previous cases of other patients
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H70/00ICT specially adapted for the handling or processing of medical references
    • G16H70/60ICT specially adapted for the handling or processing of medical references relating to pathologies

Landscapes

  • Health & Medical Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Medical Informatics (AREA)
  • Public Health (AREA)
  • General Health & Medical Sciences (AREA)
  • Primary Health Care (AREA)
  • Epidemiology (AREA)
  • Data Mining & Analysis (AREA)
  • Biomedical Technology (AREA)
  • Radiology & Medical Imaging (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Pathology (AREA)
  • Databases & Information Systems (AREA)
  • Medical Treatment And Welfare Office Work (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)
  • Apparatus For Radiation Diagnosis (AREA)

Abstract

本发明提供一种控制方法。使在信息终端(10)的显示器(101)显示的病例显示区域(710)显示从病例检索系统(300)接收到的相似病例的缩略图,使病名列表显示区域(730)显示由相似病例的病名的一览和件数构成的病名列表。在检索开始时由用户设定了多个关心区域的情况下,将病名列表转换成能够显示并发病名的模式。

Description

控制方法
技术领域
本公开涉及用于检索与读片(日文:読影)对象的医用图像相似的相似医用图像的信息终端的控制方法和程序。
背景技术
近年来,例如,CT(计算机断层扫描:Computed Tomography)、MRI(磁共振成像:Magnetic Resonance Imaging)等医用图像装置正在发展和普及。这些CT或MRI等能够以大容量取得数字化后的高精细的医用图像。另外,医生进行了读片后的医用图像与读片报告一起依次储存于PACS(影像归档和通信系统:Picture Archiving and CommunicationSystems)。在此,例如,开始开发像专利文献1所公开那样为了作为新的读片的参考而从已存储于PACS的过去病例中检索与读片对象的医用图像相似的过去的医用图像的技术。
现有技术文献
专利文献
专利文献1:日本特开2008-257292号公报
专利文献2:日本特开2010-79568号公报
专利文献3:日本特开2014-39852号公报
专利文献4:日本特开2010-17410号公报
专利文献5:日本特开2014-233611号公报
发明内容
然而,在以往的医用图像装置中,需要进一步的改善。
本公开的一技术方案的控制方法是如下的信息终端的控制方法,所述信息终端与病例检索系统连接,并具有显示器,所述病例检索系统参照登记医用图像的医用图像数据库来检索医用图像,所述控制方法使所述信息终端的计算机进行:
检测表示读片对象的医用图像中的至少一个关心区域的指定信息,
根据由所述指定信息表示的关心区域,从所述病例检索系统接收与所述关心区域的特征量具有预定的相似度的多个相似医用图像,
所述多个相似医用图像具有表示至少一个病名的信息,
使所述显示器显示如下的显示画面,该显示画面包括显示所述多个相似医用图像的第1显示区域和用于病名选择的第2显示区域,
在所述第2显示区域,在所述指定信息表示一个关心区域的情况下,显示基于所述表示至少一个病名的信息的列表,在所述指定信息表示两个以上的关心区域的情况下,显示基于所述表示至少一个病名的信息的并发病名的组合列表。
此外,该总括性的或具体的技术方案既可以由装置、方法、集成电路、计算机程序或计算机可读取的记录介质实现,也可以由装置、系统、方法、集成电路、计算机程序以及记录介质的任意的组合实现。计算机可读取的记录介质包括例如CD-ROM(Compact Disc-ReadOnly Memory)等非易失性的记录介质。
根据上述技术方案,能够实现进一步的改善。本公开的一技术方案的附加的好处和有利的点可从本说明书和附图明确。该好处和/或有利的点可通过本说明书和附图所公开的各种技术方案和特征单独地提供,为了获得一个以上的该好处和/或优点,无需所有的各种技术方案和特征。
附图说明
图1是应用了本实施方式中的信息终端的医院信息系统的整体构成图。
图2是示出信息终端、医用信息管理系统、以及病例检索系统的构成的框图。
图3是两台显示器的外观图。
图4是示出信息终端的安装形态的构成例的图。
图5是示出在通过信息终端使相似病例检索应用程序刚启动之后在显示器所显示的基本画面的一例的图。
图6是示出在通过信息终端使相似病例检索应用程序刚启动之后在显示器所显示的基本画面的一例的图。
图7是将在病例显示区域所显示的某一个相似病例的显示区域取出来表示的图。
图8是病名列表显示区域的放大图。
图9是示出以“真菌病”筛选了相似病例时的基本画面的图。
图10是示出以“转移性肺癌”筛选了相似病例时的基本画面的图。
图11是示出患者信息的数据结构的图。
图12是示出登记于图11所示的患者信息的检查信息的数据结构的图。
图13是示出医用图像数据库的数据结构的图。
图14是示出诊断报告的数据结构的图。
图15是示出相似病例数据的数据结构的图。
图16是示意性地示出设定于切片图像的关心区域的图。
图17是示出信息终端在从医用信息管理系统取得了诊断对象病例之后到对病例检索系统进行相似病例检索的请求、病例检索系统接受相似病例检索的请求为止的处理的时序图。
图18是检查列表的画面图。
图19是选择了检查后的检查列表的画面图。
图20是示出由用户选择了系列时显示于医用图像查看器的切片图像的图。
图21是示出在病例检索系统接受相似病例检索的请求之后到将相似病例检索的结果返回给信息终端为止的处理的时序图。
图22是说明检索查询图像的关心区域数(图像特征集数)为1的情况下的图像特征集的比较方法的图。
图23是说明检索查询图像的关心区域数(图像特征集数)以及作为比较对象的病例的关心区域数(图像特征集数)均为2时的图像特征集的比较方法的图。
图24是说明检索查询的关心区域数(图像特征集数)为2、作为比较对象的病例的关心区域数(图像特征集数)为3时的图像特征集的比较方法的图。
图25是示出生成图21的S650所示的初始的基本画面的处理的详情的流程图。
图26是示出图25的S1300所示的处理的详情的流程图。
图27是示出病名列表信息的一例的图。
图28是示出病名列表信息的一例的图。
图29是示出病名列表信息的一例的图。
图30是示出并发病名列表信息的一例的图。
图31是示出病名列表显示区域的第1显示例的图。
图32是示出病名列表显示区域的第2显示例的图。
图33是示出病名列表显示区域的第3显示例的图。
图34是示出病名列表显示区域的画面迁移的图。
图35是并发病名列表处理的流程图。
图36是示出储存于疾患体系定义部的、疾患体系的数据结构的图。
图37是示出并发病名列表的第一例的图。
图38是示出并发病名列表的第二例的图。
图39是示出并发病名列表的第三例的图。
图40是示出并发病名列表的第四例的图。
图41是示出并发病名列表的第五例的图。
图42是示出并发病名列表的第六例的图。
图43是示出并发病名列表的第七例的图。
图44是示出并发病名列表的第八例的图。
图45是示出通过选择并发疾患列表的疾患来筛选相似病例的一例的图。
图46是示出通过选择并发疾患列表的疾患来筛选相似病例的一例的图。
图47是示出实施方式1的变形例中的、信息终端、医用信息管理系统、以及病例检索系统的构成的框图。
图48是示出在实施方式1的变形例中病例检索系统接受相似病例检索的请求之后到将相似病例检索的结果返回给信息终端为止的处理的时序图。
图49是示出预先设定分类好的图像观察结果的图。
图50是示出实施方式1的变形例中的、关心区域的设定的一例的图。
图51是说明实施方式1的变形例中的、从检索查询图像提取到的多个图像特征集的比较的图。
图52是说明实施方式1的变形例中的、从检索查询图像提取到的多个图像特征集的比较的图。
图53是实施方式1的变形例中的、并发病名列表处理的流程图。
图54是示出实施方式2中的、关心区域的设定的一例的图。
图55是示出在实施方式2中在病例检索系统接受相似病例检索的请求之后到将相似病例检索的结果返回给信息终端为止的处理的时序图。
图56是示出在实施方式2中用于促使输入图像观察结果的输入画面的一例的图。
图57是示出在实施方式2中用于促使输入图像观察结果的输入画面的一例的图。
图58是示出在实施方式2中用于促使输入图像观察结果的输入画面的一例的图。
图59是示出在实施方式2中用于促使输入图像观察结果的输入画面的一例的图。
图60是示出在实施方式2中用于促使输入图像观察结果的输入画面的一例的图。
图61是示出在实施方式2中用于促使输入图像观察结果的输入画面的一例的图。
图62是示出实施方式2中的相似病例数据的数据结构的图。
图63是示出实施方式2中的、并发病名列表处理的流程图。
图64是示出在实施方式3中在病例检索系统接受相似病例检索的请求之后到将相似病例检索结果返回给信息终端为止的处理的时序图。
图65是示出在实施方式3中通过信息终端使相似病例检索应用程序刚启动之后显示器所显示的基本画面的一例的图。
图66是示出实施方式3中的、通过信息终端输入筛选图像观察结果的操作期间的基本画面的一例的图。
图67是实施方式3中的、并发病名列表处理的流程图。
图68是实施方式4的信息终端、医用信息管理系统、以及病例检索系统的框图。
图69是示出在实施方式4中在病例检索系统接受相似病例检索的请求之后到将相似病例检索结果返回给信息终端为止的处理的时序图。
图70是示出在病例检索系统接受相似病例检索的请求之后到将相似病例检索结果返回给信息终端为止的处理的时序图。
具体实施方式
(得到本公开的一技术方案的始末)
首先,对本公开的一技术方案的着眼点进行说明。
以下,作为脏器以肺为例、作为成像设备以CT为例进行说明,但本公开并不限定于此,也能够适用于其他脏器、成像设备。
能够利用成像设备来观测体内的病变。病变的形态(外在表现)与所罹患的疾患之间存在关联,因此,图像诊断医生通过详细地观察拍摄图像,判断出所罹患的疾患名。在此,在拍摄图像中观察到了多个种类的病变时,图像诊断医生迫切需要判断这些病变是由单一疾患引起的、还是由不同的疾患引起的。
专利文献1公开一种在基于诊断对象图像的图像诊断时提示对疾患的判断有用的病例图像或与该疾患有关的统计信息等的图像诊断支援装置。该图像诊断支援装置的检索结果的画面显示诊断对象图像和按疾患区分的代表病例的信息。具体而言,所述检索结果的画面显示:i)前三个疾患A、D、G的代表病例的图像、ii)按疾患区分的与诊断对象图像之间的相似度、登记病例数以及代表病例数、iii)检索件数(检索到的疾患的总数)、以及、iv)用于参照无法显示于一个画面中的其他疾患的信息的“翻页”的软按钮等(段落[0062]~[0063]以及图6(E))。
专利文献2公开一种数据检索装置,该数据检索装置基于确定出的诊断信息将存储于病例数据库的病例数据分类成多个诊断群组,从各诊断群组中分别检索病例数据。具体而言,所述检索结果的画面显示:i)来自诊断群组G3、G4、G6的相似病例检索结果的图像、ii)针对诊断群组的提示(Tips)(诊断上的注意点等)(图7)。
专利文献3公开一种基于进行相似病例检索的对象的诊疗行为的难易度决定相似病例数据的显示方法的信息处理装置。例如,在诊断容易且是初诊的情况下,减少显示的相似病例数,在多出来的富余的区域提示医学参考信息,在诊断容易且存在过去图像的情况下,减少相似病例图像数,在多出来的富余的区域显示过去图像。具体而言,所述检索结果的画面,i)按照相似度由高到低的顺序将病例[1]~病例[3]与相似度和病名一起显示(图5)。
专利文献4公开了如下内容:参照统计信息数据库,检索与对检索对象图像或相似病例图像所赋予的患者信息或病状信息相关联的统计信息。例如,在数据库中登记有关于易于与疾患A并发的疾患(每1万名疾患A的患者中的有该并发症的患者数)的统计信息(与统计信息相关联的信息、以及统计信息)(段落号0046、0047以及图3)。此时,关于易于与相似病例图像的疾患名A并发的疾患的统计信息被判断为相关联的统计信息,而被从统计信息数据库中提取出。
专利文献5公开一种治疗计划制定支援系统,该治疗计划制定支援系统使用相似病例检索结果的医用图像,掌握诊断对象的疾病的发展状况,来制定治疗计划。尤其是,公开了如下内容:在附属于相似病例图像的信息中存在与并发症有关的信息的情况下,也一并显示与该并发症有关的信息(段落号0075)。
在专利文献1~3的任一个中,都显示每个疾患的病例图像与疾患名的组合信息,通过比较诊断对象图像和各相似病例图像,能够对诊断对象病例是否似乎罹患了各疾患的判断进行支援。然而,无法充分地对并发的疾患的判断进行支援。
在专利文献4中,通过利用相似病例的疾患名和统计信息数据库,能够唤起对诊断对象的病例是否罹患了多个疾患的注意。然而,即使是相同的疾患,单独罹患了该疾患的情况和同时还罹患了其他疾患的情况的病变图像样式不同,因此,与单纯的疾患名彼此的统计信息相比,更期望提供与诊断对象图像相应的并发疾患信息。
在专利文献5中,通过参照附属于相似病例的并发症名,能够唤起对诊断对象的病例是否罹患了多个疾患的注意。然而,由于并发症只是附属于个别的相似病例,因此,无法跨多个检索结果地了解并发症的倾向。
通过以上的考察,本申请发明人想到了以下各技术方案。
本公开的一技术方案是一种信息终端的控制方法,所述信息终端与病例检索系统连接,并具有显示器,所述病例检索系统参照登记医用图像的医用图像数据库来检索医用图像,所述控制方法使所述信息终端的计算机进行:
检测表示读片对象的医用图像中的至少一个关心区域的指定信息,
根据由所述指定信息表示的关心区域,从所述病例检索系统接收与所述关心区域的特征量具有预定的相似度的多个相似医用图像,
所述多个相似医用图像具有表示至少一个病名的信息,
使所述显示器显示如下的显示画面,该显示画面包括显示所述多个相似医用图像的第1显示区域和用于病名选择的第2显示区域,
在所述指定信息表示一个关心区域的情况下,显示基于所述表示至少一个病名的信息的列表,
在所述指定信息表示两个以上的关心区域的情况下,显示基于所述表示至少一个病名的信息的并发病名的组合列表。
根据本技术方案,在所述指定信息表示两个以上的关心区域的情况下,显示基于所述表示至少一个病名的信息的并发病名的组合列表。由此,在罹患了多个疾患的可能性较高的情况下,读片对象的医用图像容易确认与诊断对象图像相似的过去病例中的并发疾患。
另外,根据本技术方案,在所述指定信息表示一个关心区域的情况下,显示基于所述表示至少一个病名的信息的列表。也就是说,在本技术方案中,仅在所述指定信息表示多个关心区域的情况下,显示并发病名的组合列表。因而,本技术方案能够使医生专心于单一病名的疾患的诊断。
也可以是,所述并发病名的组合列表插入在所述列表中。
也可以是,所述表示至少一个病名的信息包括:含有确定一个病名的信息且不含有确定多个病名的信息的相似病例数据中所含有的相似医用图像、以及含有确定所述多个病名的信息的相似病例数据中所含有的相似医用图像。
也可以是,在所述指定信息表示一个关心区域的情况下,显示基于所述含有确定一个病名的信息且不含有确定多个病名的信息的相似病例数据中所含有的相似医用图像的列表,在所述指定信息表示两个以上的关心区域的情况下,显示基于所述含有确定多个病名的信息的相似病例数据中所含有的相似医用图像的并发病名的组合列表。
另外,也可以是,在上述技术方案中,在所述第2显示区域显示所述病名的组合列表的条件是:
所述指定信息表示两个以上的关心区域,且所述两个以上的关心区域含有两种以上的图像观察结果。
根据本技术方案,即使是指定信息表示两个以上的关心区域的情况下,在两个以上的关心区域含有同一种的图像观察结果时,也不显示组合列表,因此,能够使医生专心于单一疾患的诊断。
本公开的另一技术方案是一种信息终端的控制方法,所述信息终端与病例检索系统连接,并具有显示器,所述病例检索系统参照登记医用图像的医用图像数据库来检索医用图像,所述控制方法使所述信息终端的计算机进行:
检测表示读片对象的医用图像中的关心区域的指定信息,
检测表示所述读片对象的医用图像中的至少一个图像观察结果的指定信息,
根据由所述指定信息表示的关心区域、以及由所述指定信息表示的图像观察结果,从所述病例检索系统接收与所述关心区域的特征量具有预定的相似度的多个相似医用图像,
所述多个相似医用图像具有表示至少一个病名的信息,
使所述显示器显示如下的显示画面,该显示画面包括显示所述多个相似医用图像的第1显示区域和用于病名选择的第2显示区域,
在所述第2显示区域,在所述指定信息表示一个所述图像观察结果的情况下,显示基于所述表示至少一个病名的信息的列表,在所述指定信息表示两个以上的所述图像观察结果的情况下,显示基于所述表示至少一个病名的信息的并发病名的组合列表。
根据本技术方案,与关心区域的个数无关,在指定并检索到多个图像观察结果的情况下,显示并发病名的组合列表。因而,也能够应对在一个关心区域指定了多个图像观察结果的情况等。
另外,根据本技术方案,在指定并检索到一个图像观察结果的情况下,显示基于所述表示至少一个病名的信息的列表。因而,本技术方案能够使医生专心于单一病名的疾患的诊断。
也可以是,所述表示至少一个病名的信息包括:含有确定一个病名的信息且不含有确定多个病名的信息的相似病例数据中所含有的相似医用图像、以及含有确定所述多个病名的信息的相似病例数据中所含有的相似医用图像。
也可以是,在所述指定信息表示一个关心区域的情况下,显示基于所述含有确定一个病名的信息且不含有确定多个病名的信息的相似病例数据中所含有的相似医用图像的列表,在所述指定信息表示两个以上的关心区域的情况下,显示基于所述含有确定多个病名的信息的相似病例数据中所含有的相似医用图像的并发病名的组合列表。
本公开的又一技术方案是一种信息终端的控制方法,所述信息终端与病例检索系统连接,并具有显示器,所述病例检索系统参照登记医用图像的医用图像数据库来检索医用图像,所述控制方法使所述信息终端的计算机进行:
检测表示读片对象的医用图像中的关心区域的指定信息,
根据由所述指定信息表示的关心区域,从所述病例检索系统接收与所述关心区域的特征量具有预定的相似度的多个相似医用图像,
所述多个相似医用图像具有表示至少一个病名的信息,
使所述显示器显示如下的显示画面,该显示画面包括显示所述多个相似医用图像的第1显示区域、用于病名选择的第2显示区域、以及用于选择图像观察结果的第3显示区域,
在所述第2显示区域,在所述第3显示区域中选择的图像观察结果是一个的情况下,显示基于所述表示至少一个病名的信息的列表,在所述第3显示区域中选择的图像观察结果是两个以上的情况下,显示基于所述表示至少一个病名的信息的并发病名的组合列表。
根据本技术方案,与关心区域的指定信息的个数无关,在作为检索的筛选条件指定了多个图像观察结果的情况下,显示并发病名的组合列表,因此,也能够应对综合多个图像观察结果而指定了关心区域的情况等。
另外,根据本技术方案,在作为检索的筛选条件指定了一个图像观察结果的情况下,显示基于所述表示至少一个病名的信息的列表。因而,本技术方案能够使医生专心于单一病名的疾患的诊断。
也可以是,所述表示至少一个病名的信息包括:含有确定一个病名的信息且不含有确定多个病名的信息的相似病例数据中所含有的相似医用图像、以及含有确定所述多个病名的信息的相似病例数据中所含有的相似医用图像。
也可以是,在所述指定信息表示一个关心区域的情况下,显示基于所述含有确定一个病名的信息且不含有确定多个病名的信息的相似病例数据中所含有的相似医用图像的列表,在所述指定信息表示两个以上的关心区域的情况下,显示基于所述含有确定多个病名的信息的相似病例数据中所含有的相似医用图像的并发病名的组合列表。
另外,在上述技术方案中,也可以是,在所述第2显示区域中,
在所述列表中基于所述确定一个病名的信息以及确定多个病名的信息而显示多个病名,在从所述显示的多个病名中选择了病名的情况下,从显示于所述第1显示区域的多个相似医用图像中,选择并显示与如下的信息相对应的相似医用图像,该信息是确定与所述选择出的病名相对应的病名的信息,
所述确定多个病名的信息包括第1信息,所述第1信息包括确定第1病名的第2信息以及确定第2病名的第3信息,所述第2病名是第1并发病名,所述第1并发病名是与由所述第1病名确定的病症并发的病名,
在从所述并发病名的组合列表中选择了所述第1并发病名的情况下,从显示于所述第1显示区域的多个相似医用图像中,选择并显示在含有所述第1信息的相似病例数据中所含有的相似医用图像。
根据本技术方案,在选择了所述组合列表中的病名的情况下,从在第1显示区域显示的多个相似医用图像中,至少选择并显示含有所述选择出的病名的组合的相似医用图像。由此,能够容易地选择并显示疾患的组合中的相似病例,对于诊断对象病例,容易进行是否产生了多个疾患的诊断。
也可以是,所述确定多个病名的信息包括第1信息,所述第1信息包括确定第1病名的第2信息以及确定第2病名的第3信息,所述第2病名是第1并发病名,所述第1并发病名是与由所述第1病名确定的病症并发的病名,显示含有所述第1信息的相似病例数据的数。
在病名列表中,与病名一并显示相似医用图像的件数,因此,在单独的病名列表中,能够掌握在诊断对象图像的相似病例中取得了多少件什么样的疾患。另外,在并发疾患的病名列表中,与病名的组一并显示相似医用图像的件数,因此,能够掌握取得了多少件什么样的并发疾患。
也可以是,所述并发病名的组合列表显示表示存在如下病例的信息,该病例没有与由所述第1病名确定的病症并发的病症。
在组合列表中,通过显示单独罹患了的病名,能够将罹患了单独疾患的一个以上的相似医用图像的集合和罹患了特定的并发疾患的一个以上的相似医用图像的集合作为具体的事例简单地选择显示,能够对诊断对象的病例是罹患了单独的疾患还是罹患了多个疾患的判断进行支援。
也可以是,所述并发病名的组合列表显示没有与由所述第1病名确定的病症并发的病症的相似病例数据的件数。
另外,也可以是,在上述技术方案中,所述控制方法使所述信息终端的计算机进行:
检测表示所述读片对象的医用图像中的关心区域的指定信息,
将表示所述关心区域的特征量的信息发送给所述病例检索系统,
从所述病例检索系统接收与所述关心区域的特征量具有所述预定的相似度的相似医用图像。
另外,也可以是,在上述技术方案中,所述控制方法使所述信息终端的计算机进行:
检测表示所述读片对象的医用图像中的关心区域的指定信息,
将所述读片对象的医用图像以及所述指定信息发送给所述病例检索系统,
从所述病例检索系统接收与从所述读片对象的医用图像以及所述指定信息获得的所述关心区域的特征量具有所述预定的相似度的相似医用图像。
(实施方式1)
以下,参照附图说明本公开的一实施方式。此外,在各附图中,对相同的构成要素使用了相同的附图标记。
图1是应用了实施方式1中的信息终端的医院信息系统的整体构成图。如图1所示,医院信息系统具备信息终端100、医用信息管理系统200、以及病例检索系统300。
信息终端100、医用信息管理系统200、以及病例检索系统300经由网络400能够相互通信地连接。
此外,医用信息管理系统200和病例检索系统300不一定必须配置在医院中,也可以是在医院外的数据中心、私有云服务器、公共云服务器等上工作的软件。在医用信息管理系统200和病例检索系统300设置于医院内的情况下,作为网络400,可以采用局域网。作为局域网,可以采用IEEE802.3系列的有线LAN、IEEE802.11系列的无线LAN、或者两者混合存在的网络。在医用信息管理系统200和病例检索系统300使用医院外的服务器来实现的情况下,作为网络400,可以采用互联网。
作为信息终端100,采用个人计算机、平板终端等信息终端。作为医用信息管理系统200,采用PACS(影像归档和通信系统:Picture Archiving and CommunicationSystems)、电子病历系统等。
图2是示出信息终端100、医用信息管理系统200、以及病例检索系统300的构成的框图。如图2所示,信息终端100具备显示器101、操作部102、输入控制部103、显示控制部104、ROI管理部105、病名列表管理部106、以及通信控制部107。
显示器101例如包括液晶监视器,显示作为诊断对象的医用图像和病历图像,并显示用于填写诊断结果的报告输入图像等。显示器101最少需要一台。通常,在图像诊断中使用2~3台显示器101。在本实施方式中,使用2台显示器101,将一方的显示器101设为显示器101a,将另一方的显示器101设为显示器101b(参照图3)。
图3是2台显示器101a、101b的外观图。在显示器101a上,信息终端100从医用信息管理系统200取得的诊断对象病例的图像显示在医用图像查看器上。在显示器101b显示有病例检索系统300的画面。此外,在显示器101为一台的情况下,这些画面分区域地显示在一台显示器101的显示画面上。
操作部102例如包括键盘和鼠标,受理用户对信息终端100输入的各种操作。例如,操作部102受理来自用户的对显示于显示器101的医用图像和病历图像的操作、以及对报告输入画面输入诊断结果的操作等。
输入控制部103当检测到用户对操作部102的操作时,对该操作的内容进行解释,向其他构成要素通知操作内容。例如,输入控制部103根据从作为操作部102的鼠标输出的坐标数据检测显示器101上的鼠标指针的位置,并在显示器101上显示鼠标指针。并且,在检测到对鼠标进行了点击时在鼠标指针的显示位置显示有由显示控制部104生成的GUI部件(例如,GUI按钮)的情况下,输入控制部103判定用户选择了该GUI部件,向其他构成要素通知由用户选择了该GUI部件。
显示控制部104生成信息终端100的GUI(图形用户界面:Graphical UserInterface),并显示于显示器101。
ROI管理部105在进行相似病例检索时,生成表示针对后述的检索查询图像至少设定了一个的关心区域(Region Of Interest)的关心区域信息并储存于存储器,管理关心区域信息。
病名列表管理部106将为了显示病名列表显示区域730而生成的病名列表信息6000(参照图27、图28、图29)储存于存储器,对病名列表信息6000进行管理。病名列表的格式、生成方法后述。
通信控制部107例如包括用于将信息终端100与网络400连接的通信装置,对信息终端100与医用信息管理系统200间的通信、信息终端100与病例检索系统300间的通信进行控制。另外,通信控制部107从其他模块受理各种数据的发送委托,向医用信息管理系统200或病例检索系统300发送数据,并且接收从医用信息管理系统200或病例检索系统300发送来的数据,转发给相关模块。
如图2所示,医用信息管理系统200具备患者信息储存部201、患者信息管理部202、医用图像数据储存部203、医用图像数据管理部204、诊断报告管理部205、以及通信控制部206。
患者信息储存部201储存登记有患者的性别和年龄等个人信息、既往病史等临床信息、以及血液检查等检查信息的患者信息1000(图11)。
患者信息管理部202对储存于患者信息储存部201的患者信息1000(图11),执行登记由用户输入的数据来更新患者信息1000的处理、以及将患者信息1000向显示控制部104输出的处理等,对患者信息1000进行管理。医用图像数据储存部203储存作为患者的检查图像的医用图像数据。
医用图像数据管理部204将医用图像数据储存于医用图像数据储存部203,对医用图像数据进行管理。
诊断报告管理部205对表示医生针对已对患者进行的各检查的诊断结果的诊断报告3000(图14)进行管理。
通信控制部206例如包括用于将医用信息管理系统200与网络400连接的通信装置,从其他模块受理各种数据的发送委托,向信息终端100或病例检索系统300发送数据,并且接收从信息终端100或病例检索系统300发送来的数据,转发给相关模块。
如图2所示,病例检索系统300具备相似病例数据储存部301、图像特征提取部302、相似病例检索部303、疾患体系定义部304、以及通信控制部305。
相似病例数据储存部301预先储存登记有从由医用信息管理系统200管理的相似病例中的作为相似病例检索的对象数据而被选定的许多相似病例提取出的图像特征、和/或生成的缩略图等的相似病例数据4000(图15)。
图像特征提取部302提取从信息终端100的通信控制部107发送来的检索查询图像的关心区域信息的图像特征。此外,关心区域信息是表示关心区域的指定信息的一例。在此,与所指定的关心区域的个数相应地按每个关心区域提取图像特征。
相似病例检索部303通过对由图像特征提取部302提取出的图像特征和在相似病例数据储存部301储存的与病例数相应的量的相似病例的图像特征分别进行比较,生成相似病例检索结果。此外,由图像特征提取部302提取到的图像特征的数量和在相似病例数据储存部301储存的病例的图像特征的数量由于按每个病例设定的关心区域的数量的不同而不一定一致。图像特征的数量不同的情况下的检索方法后述。
疾患体系定义部304定义疾患体系5000(参照图36)。疾患体系是指储存于相似病例数据4000(参照图15)的疾患ID4500的体系。具体而言,如图36所示,疾患体系5000将疾患ID、大分类病名表述、以及详细分类病名表述相关联地存储。疾患ID由英文字母表述“DIS”、设于“DIS”后的表示大分类病名的三位的ID、设于大分类病名后的表示详细分类病名的三位的ID构成。通过使疾患ID成为这样的格式,疾患ID能够明确表示大分类病名和详细分类病名的亲子关系和详细分类病名彼此的兄弟关系。即,疾患ID能够定义病名的体系。
对于向各病例赋予疾患ID,基于患者信息1000(图11)来进行。具体而言,在图15的相似病例数据4000中,取得了设定于关心区域的切片图像的切片ID4700后,根据图13的医用图像数据库2000中的切片ID2200确定系列ID2100。并且,根据所确定的系列ID2100,在检查信息1800(图12)中确定检查ID1810,根据检查ID1810,确定所对应的患者信息1000(图11),根据所确定的患者信息1000,确定相关患者的确诊1900。并且,根据图11中的确诊1900,在疾患体系5000(图36)中决定疾患ID,赋予决定好的疾患ID来作为相似病例数据4000的疾患ID4500。
在此,疾患体系5000用于相似病例检索。
疾患体系5000在将对许多相似病例赋予的确诊病名一览显示于病名列表显示区域730(参照图6)、或从许多相似病例中以用户指定的大分类病名或者详细分类病名筛选显示相似病例时使用。
此外,疾患体系5000所定义的大分类病名的ID和详细分类病名的ID也可以不仅用于相似病例检索,还用于例如电子病历中的病名的记述。
通信控制部305例如由使病例检索系统300与网络400连接的通信装置构成,从其他模块受理各种数据的发送委托,向信息终端100或医用信息管理系统200发送数据,并且接收从信息终端100或医用信息管理系统200发送来的数据,转发给相关模块。
图4是表示信息终端100的安装形态的构成例的图。如图4所示,信息终端100具备应用程序501、OS(操作系统:Operating System)502、存储器503、以及未图示的其他硬件。
应用程序501是用于使个人计算机、平板终端作为信息终端100发挥功能的应用软件,由信息终端100的处理器执行。信息终端100既可以从计算机可读取的记录介质将应用程序501读出来并安装应用程序501,也可以通过从网络下载来安装应用程序501。
在此,应用程序501包括医用信息管理应用程序和相似病例检索应用程序。医用信息管理应用程序是用于使信息终端100与医用信息管理系统200协作的应用程序,相似病例检索应用程序是用于使信息终端100与病例检索系统300协作的应用程序。并且,两应用程序相互收发数据,在信息终端100中,使医用信息管理系统200和病例检索系统300提供的服务统合。
OS502是信息终端100的基本软件,由信息终端100的处理器执行。存储器503包括信息终端100所具备的RAM、ROM等存储装置,存储应用程序501所包含的数据群。
通过信息终端100的处理器执行应用程序501,可实现图2所示的输入控制部103、显示控制部104、ROI管理部105、病名列表管理部106、以及通信控制部107的功能。
不过,在本实施方式中,信息终端100既可以单独安装应用程序501,也可以安装应用程序501和OS502,还可以安装应用程序501、OS502、以及存储器503,也可以安装应用程序501、OS502、存储器503以及其他未图示的硬件。在任一个安装形态下,都能够实现本实施方式的信息终端100。
图5是示出在信息终端100上在显示器101a显示的基本画面的一例的图。图5所示的基本画面K1由一个医用图像查看器610构成。医用图像通常以DICOM(医学数字成像和通信:Digital Imaging and Communication in Medicine)格式记录,医用图像查看器610是可处理DICOM的查看器。本实施方式中处理的医用图像设为由DICOM格式的许多断层图像(以下称为切片图像。)构成的胸部CT图像。不过,这只不过是一例,也可以采用其他部位(例如,头部、腹部、腿、或者胳膊)的CT图像。
显示于医用图像查看器610的胸部CT图像通过鼠标、键盘的操作来切换切片图像。在此,构成胸部CT图像的切片图像例如以从颈侧朝向腹侧的顺序配置。
例如,鼠标指针定位在医用图像查看器610上,在由输入控制部103检测到鼠标轮的旋转时,显示控制部104根据检测到的旋转量对显示于医用图像查看器610的切片图像进行切换。在此,例如在医用图像查看器610中鼠标轮向鼠标的后方侧旋转与一次点击相应的量,则显示控制部104将显示中的切片图像切换成下一个切片位置的切片图像。另一方面,例如,若在医用图像查看器610中鼠标轮向鼠标的前方侧旋转与一次点击相应的量,则显示控制部104将显示中的切片图像切换成切片位置为前一个的切片图像。因而,医生等用户一边使鼠标轮向前方侧或后方侧旋转,一边将显示于医用图像查看器610的切片图像适当切换,来搜寻所期望的切片图像。
此外,作为医用图像,也可以采用MRI(磁共振成像:Magnetic ResonanceImaging)图像、普通X射线图像替代胸部CT图像。另外,在图5的例子中,医用图像查看器的个数是一个,但这只不过是一例,也可以采用两个、三个等别的个数。在多个医用图像查看器启动的情况下,能够同时显示诊断对象的检查下的其他拍摄图像(造影图像、其他模态)、其他显示条件(肺野条件、纵膈条件)、或者同一患者过去检查的图像等。若医用图像查看器的个数变多,则能够同时比较的图像增多,但每个图像的显示面积变小。因此,采用该个数可根据显示器101a的显示尺寸适当变更的构成即可。在此,医用图像查看器的个数可由用户或管理者自由地变更。
在相似病例检索应用程序启动前,在显示器101a上显示有某一患者的胸部CT图像的切片图像。并且,在该状态下,由读片者等用户设定一个以上的进行相似病例检索的对象的关心区域(ROI:Region OfInterest)之后,相似病例检索应用程序启动。此外,显示控制部104也可以将进行相似病例检索的对象的关心区域重叠显示于检索查询图像上。检索查询图像是读片对象的医用图像的一例。
图6是示出在信息终端100上刚启动相似病例检索应用程序之后在显示器101b显示的基本画面K2的一例的图。图6所示的基本画面K2具备病例显示区域710、病例件数显示区域714、疾患条件显示区域715、诊断对象图像显示区域720、以及病名列表显示区域730。此外,病例显示区域710是第1显示区域的一例,病名列表显示区域730是第2显示区域的一例。
病例显示区域710是按照相似度的顺序显示与检索查询图像相似的相似病例的缩略图的区域。在此,相似病例的缩略图是相似医用图像的一例。
在病例显示区域710显示有许多相似病例,因此,如当场进行分辨率、像素值的转换,则处理会花费时间。因而,缩略图根据原始的切片图像预先制成,并保存于病例检索系统300。
以下,对于分辨率、像素值的转换稍微加以补充。原始的切片图像的分辨率是512×512像素,但缩略图分辨率更低,因此,需要进行分辨率转换。于是,缩略图是对作为基础的切片图像进行低分辨率处理和灰度转换处理而生成的。
灰度转换处理例如像下述这样进行。通过CT取得的切片图像中,各像素值(CT值)取-1000~+1000(亨氏单位:单位HU:Hounsfield Unit)的2000灰度的值,无法直接显示于通常的8位灰度的显示器。另外,即使能够显示,在2000灰度中,人类也难以凭肉眼区别肺气肿区域(CT值:-1000HU)、肺野的正常组织(CT值:约-900HU)、毛玻璃样征区域(CT值:-800HU)、软组织(CT值:-100~-50HU)、水(CT值:0HU)、以及骨骼(CT值:1000HU)。
因而,通常,切片图像针对各像素值设定窗位和窗宽,重建为8位的像素值,显示于显示器。在此,窗位表示作为窗的中心的CT值,窗宽表示窗中心的上下的宽度。
例如,在以肺野条件重建DICOM图像的情况下,窗位设定成-550~-800,窗宽设定成1000~1600。因此,缩略图也通过从作为基础的切片图像利用上述处理使像素值降低到8位而生成的。
此外,显示于病例显示区域710的缩略图是表示诊断对象病例的相对于特征向量的距离为预定的阈值以下的相似病例的缩略图。在此,作为距离,例如使用欧几里得距离。此外,作为距离,也可以采用市区距离等别的距离尺度。作为比较对象的两个图像的距离越近,则越相似。另外,特征向量不采用从缩略图获得的向量,而是采用从作为基础图像的切片图像获得的向量。
病例件数显示区域714是将显示中的病例数显示于病例显示区域710的区域,疾患条件显示区域715是将显示中的病例的疾患名显示于病例显示区域710的区域。
图7是将显示于病例显示区域710的某一个相似病例的显示区域取出而示出的图。在相似病例的显示区域显示有缩略图,在该缩略图的下部配置有确诊病名显示区域711和距离显示区域712。在确诊病名显示区域711显示作为对象的相似病例的确诊病名。确诊病名是指对作为对象的相似病例确诊的病名。在距离显示区域712显示作为对象的相似病例的切片图像的特征向量与检索查询图像的特征向量之间的距离。在图7的例子中,在确诊病名显示区域711显示有“非结核分枝杆菌病”,因此,该缩略图表示确诊为“非结核分枝杆菌病”的相似病例的缩略图。另外,在距离显示区域712显示为“0.05”,因此,表示该相似病例的切片图像与检索查询图像之间的距离是“0.05”。
返回图6,在基本画面K2的例如病例显示区域710的上部配置有病例件数显示区域714。在病例件数显示区域714显示检索处理的结果,即从病例检索系统300取得的、与诊断对象病例相似的相似病例的数量。
此外,在相似病例的数量庞大的情况下,病例显示区域710无法一次性显示全部的相似病例。于是,在病例显示区域710的例如右侧设有上下方向上较长的滚动条713。显示控制部104根据滚动条713的移动量使显示于病例显示区域710内的缩略图沿上下方向滚动显示。由此,用户使处于非显示状态的相似病例显示于病例显示区域710,能够观察该相似病例。
此外,滚动条713也可以是左右方向上较长。在该情况下,显示控制部104根据滚动条713的移动量使显示于病例显示区域710内的缩略图沿左右方向滚动显示即可。或者,也可以是,在鼠标指针定位于病例显示区域710的状态下,当键盘的方向键被按下时,显示控制部104在按键被按着的期间内使显示于病例显示区域710内的缩略图向被按着的按键的方向滚动显示。
此外,信息终端100从病例检索系统300取得与检索查询图像之间的距离为预定的阈值以下的缩略图,但这只不过是一例。也可以是,例如,信息终端100以相似度由高到低的顺序始终从病例检索系统300取得一定数量的缩略图。或者,也可以是,信息终端100以始终包含一定数量的某个确诊病名的缩略图的方式,从病例检索系统300取得缩略图。
此外,作为病例显示区域710中的缩略图的显示方法,例如可以采用这样的显示方法:在最上段的行的左端显示与检索查询图像之间的距离最小的缩略图,以随着朝向右侧去距离依次变大的方式显示缩略图,若到达同一行的右端,则在上数第2行的左端接着显示距离较大的缩略图。即,也就是说,可以采用如下显示方法:在病例显示区域710中,从左上朝向右下蛇行地以距离从小到大的顺序显示缩略图。
当然,本实施方式也可以采用别的显示方法。例如也可以采用如下显示方法:在左数第1列的上端显示距离最小的缩略图,以随着朝向下侧去距离依次变大的方式显示缩略图,若到达同一列的下端,则在左数第2列的上端接着显示距离较大的缩略图。另外,也可以采用用户能够切换该多个显示方法的构成。
另外,在上述的例子中,作为相似度,采用了距离,但只要是余弦相似度那样的表示图像彼此的相似性的指标即可,可以采用任何指标。在采用了余弦相似度的情况下,随着值接近1,作为比较对象的两个图像的相似性变高。
此外,详情后述,但显示于病例显示区域710的相似病例能够以在病名列表显示区域730显示的病名进行筛选。当前所设定的相似病例的筛选条件显示于疾患条件显示区域715。在图6的例子中,是刚进行相似病例刚检索之后的状态,没有进行任何筛选,因此,在疾患条件显示区域715显示为“全部疾患”。
如图5所示,在医用图像查看器610显示有检索查询图像,与此相配合,在诊断对象图像显示区域720初始显示检索查询图像的缩略图。
在图6所示的基本画面K2的左侧的下段,配置有附带“病名列表”这一标题的病名列表显示区域730。在病名列表显示区域730显示作为相似病例检索的结果而取得的全部的相似病例的确诊病名。诊断对象病例在诊断结束而赋予了确诊病名后,作为相似病例储存于病例检索系统300。因此,对各相似病例分别预先赋予了通过诊断而赋予的确诊病名。
图8是病名列表显示区域730的放大图。在此,对病名列表显示区域730的基本的工作和功能进行说明。作为本公开的特征的、并发病名列表的工作和功能后述。在图8中,确诊病名分成大分类病名(731、734、737、741、744)和详细分类病名(732、733、735、736、738、739、740、742、743、745)来显示。在图8的例子中,作为大分类病名,显示了真菌病731(mycosis)、肿瘤性734(neoplastic)、非肿瘤性737(nonneoplastic)、分支杆菌病741(mycobacteriosis)、以及其他744。
另外,在图8的例子中,作为真菌病731的详细分类病名,显示了曲霉病732(aspergillosis)、隐球菌病733(cryptococcosis)。另外,作为肿瘤性734的详细分类病名,显示了原发性肺癌735(lung cancer)、转移性肺癌736(metastatic lung cancer)。另外,作为非肿瘤性737的详细分类病名,显示了肺脓肿738(lung abscess)、结节病739(sarcoidosis)、败血性血栓740(septic emboli)。另外,作为分支杆菌病741的详细分类病名,显示了非结核分枝杆菌病742(NTM:nontuberculous mycobacteria)、肺结核743(tuberculosis)。另外,作为其他744的详细分类病名,显示了支气管扩张745(bronchiectasis)。
另外,在大分类病名和详细分类病名的旁边显示了该病名的病例数。用户通过选择该病名列表显示区域730中的大分类病名或详细分类病名的任意的行,能够筛选在病例显示区域710显示的相似病例。如图6所示在刚进行相似病例检索之后的状态下,含有多样疾患的62个相似病例成为了显示对象,但在用鼠标点击了图8的真菌病731的行的情况下,如图9所示,显示控制部104仅将真菌病的相似病例显示于病例显示区域710。另外,在用鼠标点击了图8的转移性肺癌736的行的情况下,如图10所示,显示控制部104仅将转移性肺癌的相似病例显示于病例显示区域710。
此时,显示控制部104以知晓当前在病例显示区域710显示的相似病例是什么样的筛选条件的方式,将筛选的病名显示于疾患条件显示区域715。图9是示出以“真菌病”筛选了相似病例时的基本画面K2的图。图10是示出以“转移性肺癌”筛选了相似病例时的基本画面K2的图。
在图9的例子中,以“真菌病”进行了筛选(900),因此,在疾患条件显示区域715显示为“真菌病”,在图10的例子中,以“转移性肺癌”进行了筛选(900),因此,在疾患条件显示区域715显示为“转移性肺癌”。
另外,此时,显示控制部104将当前在病例显示区域710显示的相似病例的件数显示于病例件数显示区域714,以使人知晓该件数。在图9的例子中,符合“真菌病”的相似病例是14件,因此,在病例件数显示区域714中显示为14件,在图10的例子中,符合“转移性肺癌”的相似病例是3件,因此,在病例件数显示区域714中显示为3件。
通过该功能,将只是医生所估计的病名的相似病例作为图像诊断的对象而显示于病例显示区域710,医生能够容易地确认诊断对象病例是否与所估计的病名矛盾。
图11是示出患者信息1000的数据结构的图。患者信息1000通过医用信息管理系统200中的患者信息管理部202,按患者区分地储存于患者信息储存部201来进行管理。在患者信息1000中登记有患者的性别和年龄等个人信息、既往病史等临床信息、以及血液检查等检查信息。如图11所示,患者信息1000具备患者ID1100、姓名1200、年龄1300、性别1400、既往病史1500、家族病史1600、主诉1700、检查信息1800、以及确诊1900。
患者ID1100是患者所固有的识别符。姓名1200、年龄1300、性别1400、既往病史1500、家族病史1600、以及主诉1700分别是患者ID1100的患者的姓名、年龄、性别、既往病史、家族病史、以及主诉。如图12所示,检查信息1800表示与该患者过去接受过的一个以上的检查有关的信息。
图12是示出登记于图11所示的患者信息1000的检查信息1800的数据结构的图。检查信息1800是与对患者所进行的检查有关的信息,与检查一对一地逐一制作。检查信息1800具备检查ID1810、检查日期时间1820、检查种类1830、以及检查结果1840。检查ID1810是检查所固有的识别符。检查日时1820是进行检查的日期时间。检查种类1830是检查的种类。作为检查的种类,例如有血液检查、呼吸功能检查、内窥镜检查、普通X射线拍摄、CT拍摄等。
如果是血液检查,则检查结果1840有白血球数、LDH、以及GPT等各种指标的值。另外,检查结果1840也包括医生基于各种指标所下的判断等。另外,如果是普通X射线拍摄、CT拍摄等图像检查,则包括针对所拍摄到的图像的指针信息、针对图像诊断结果的报告的指针信息。此外,在检查中所拍摄到的图像以DICOM的格式储存于医用信息管理系统200的医用图像数据储存部203。
另外,在检查种类1830是普通X射线、CT、MRI、PET等图像检查的情况下,这些医用图像数据储存于医用信息管理系统200的医用图像数据储存部203所存储的医用图像数据库2000。
图13是示出医用图像数据库2000的数据结构的图。医用图像数据库2000具有检查ID1810和系列ID2100。在一次检查中,存在进行多个种类的拍摄(例如,普通CT和造影CT等)的情况,因此,也存在多个系列ID2100与一个检查ID1810相关联的情况。也就是说,可获得与拍摄的种类相应的个数的系列。
另外,系列除了可按照拍摄的种类获得以外,还可按照拍摄到的图像的重建的每个条件来获得。例如,在拍摄到的图像以肺野条件和纵膈条件重建了的情况下,可按照这些条件中的每一个获得一个系列。此外,以肺野条件重建的图像强调显示肺中的血管、支气管、以及肺泡等。另外,以纵膈条件重建的图像强调显示血管、淋巴结等的纵膈。肺野条件和纵膈条件通过重建在一次拍摄中获得的图像而获得,所以,在以普通CT和造影CT进行了两次拍摄,针对这两次拍摄分别以肺野条件和纵膈条件重建了图像的情况下,能够获得两个肺野条件的系列,能够获得两个纵膈条件的系列。
在CT和MRI的图像检查的情况下,通过一次拍摄取得多个切片图像,因此,多个切片ID2200与一个系列ID2100相关联。两个系列ID“CT149123”、“CT149124”与图13的检查ID“13227989”相关联,因此,可知从该检查获得了两个系列的CT图像。另外,可知:与“CT149123”、“CT149124”分别对应有多个切片ID2200系列ID。
在检查种类1830是普通X射线、CT、MRI、PET等图像检查的情况下,如图14所示的诊断报告3000储存于医用信息管理系统200中的诊断报告管理部205。在诊断报告3000中登记有医生对各检查的诊断结果。图14是示出诊断报告3000的数据结构的图。
诊断报告3000具备检查ID1810、观察结果3100、以及诊断3200。检查ID1810与图12所示的检查ID1810相同。由此,诊断报告3000和检查信息1800相关联。观察结果3100登记有表示医生对于检查的观察结果的语句。诊断3200登记有表示医生对于检查的诊断的语句。
图15是示出相似病例数据4000的数据结构的图。相似病例数据4000是针对诊断对象病例检索相似的相似病例时参照的数据,与相似病例一对一地逐一制作。此外,相似病例数据4000是相似医用图像的附加信息的一例。相似病例数据4000按照每个相似病例储存于病例检索系统300的相似病例数据储存部301。如图15所示,相似病例数据4000具备相似病例ID4100、关心区域数4200、缩略图数据4300、确诊数4400、以及与确诊数4400相应的量的疾患ID4500。附加信息相当于表示至少一个病名的信息。换言之,附加信息与为了确定病名所用的信息一起表述。
相似病例ID4100是相似病例数据4000的识别符。在图15的例子中,相似病例ID4100包括由“SIM”和接在其后的编号构成的记号列。
关心区域数4200是针对由相似病例ID表示的病例事先设定的关心区域的数量。此外,相似病例数据4000具有与该关心区域数4200的数量相应的量的关心区域ID4600、切片ID4700、关心区域坐标4800、以及图像特征数据4900的信息。关心区域ID4600是对由相似病例ID4100表示的相似病例赋予的关心区域的ID。因此,关心区域ID4600在由相似病例ID4100所示的记号列后赋予连号来表现。切片ID4700是设定有关心区域的切片图像的识别符,与图13所示的切片ID2200相同。关心区域坐标4800是表示在切片图像设定的关心区域的位置的信息。图16是示意性地示出在切片图像设定的关心区域的图。在图16的例子中,关心区域设定成矩形状。因此,关心区域坐标4800由关心区域的左上的顶点的坐标(xl、yt)和右下的顶点的坐标(xr、yb)这4个值构成。当然,关心区域也可以是矩形以外的形状,在该情况下,可采用能够唯一确定区域的参数作为关心区域坐标4800。例如,如果关心区域是圆形,则采用圆的中心坐标和半径作为关心区域坐标4800。图像特征数据4900是从由关心区域坐标4800定义的关心区域提取出的预定维度(在此,为N维)的特征值。
缩略图数据4300是基于由切片ID确定的DICOM格式的切片图像,为了显示于病例显示区域710而生成的缩略图的图像数据。在本公开中,关心区域能够跨不同切片图像地设定有多个。因此,针对相似病例ID4100存在多个缩略图的候选。不过,在此,预先将最佳地表现相似病例ID4100的相似病例的特征的切片图像的缩略图选定为缩略图数据4300。当然,也可以按被赋予了关心区域的每个切片图像,制作并保持缩略图。
在此,缩略图数据4300例如按照从缩略图的左上的顶点朝向右下的顶点的光栅扫描的顺序配置有缩略图的像素值。之前进行了说明,通过CT检查获得的DICOM图像是512×512像素的11位(像素值:-1000~+1000)图像。于是,在本实施方式中,为了使缩略图的显示高速化,针对作为缩略图的基础的DICOM图像进行低分辨率处理和灰度转换处理,而预先制作具有8位的像素值的缩略图,并登记于相似病例数据4000。此外,对于缩略图的制作,例如既可以由医用信息管理系统200制作并发送给病例检索系统300,也可以由病例检索系统300从医用信息管理系统200取得DICOM图像来制作。
确诊数4400是作为确诊所赋予的病名的数量。在该例子中,对由相似病例ID4100表示的病例赋予了两个病名,因此,在确诊数4400登记有“2”。
疾患ID4500存储有与确诊数4400的个数相应的量的由疾患体系5000(图36)定义的疾患ID。在该例子中,对由相似病例ID表示的病例赋予了由“DIS012_007”表示的病名和由“DIS015_019”表示的病名,因此,在疾患ID4500登记有“DIS012_007”和“DIS012_019”。
所储存的一个或多个疾患ID(例:DIS012_007、DIS015_019)与关心区域ID(SIM5232_0、SIM5232_1)也可以一一对应。即,也可以是,SIM5232_0与DIS012_007相对应,SIM5232_1与DIS015_019相对应。
接着,对信息终端100与医用信息管理系统200和病例检索系统300协作而从读片作业开始到开始相似病例检索为止的流程进行说明。
图17是示出信息终端100从医用信息管理系统200取得诊断对象病例之后、到对病例检索系统300进行相似病例检索的请求、病例检索系统300接受相似病例检索的请求为止的处理的时序图。此外,在图17中,时序图的左侧所示的两列的矩形表示通过相关步骤的处理显示于显示器101a、101b的画面。另外,在图17中,信息终端的“A”表示医用信息管理应用程序,“B”表示相似病例检索应用程序。设为在该序列开始之前使医用信息管理应用程序预先启动。
首先,信息终端100通过操作部102受理作为用户(进行读片的医生)的读片对象的检查列表的显示请求,通过输入控制部103和通信控制部107向医用信息管理系统200的通信控制部206发送检查列表的显示请求(S510)。
医用信息管理系统200的患者信息管理部202在图像检查实施之后将读片未结束的检查列表化,生成作为读片对象的检查列表。并且,患者信息管理部202通过通信控制部206,将所生成的检查列表发送给信息终端100的通信控制部107(S520)。在此,检查列表含有相关患者的患者信息1000和检查信息1800。
信息终端100的显示控制部104将由通信控制部107接收到的检查列表显示于显示器101(S530)。
在该情况下,在显示器101a显示有检查列表,在显示器101b没有任何显示。
图18是检查列表的画面图。检查列表具备显示读片未结束的检查的区域800和显示与检查所含有的系列有关的信息的区域810。在区域800设有“患者ID”、“患者姓名”、“检查日期时间”、“检查ID”、以及“检查种类”这些栏。“患者ID”、“患者姓名”的栏显示有登记于患者信息1000的患者ID1100和姓名1200,在“检查日期时间”、“检查ID”、以及“检查种类”的栏显示有登记于检查信息1800的检查日期时间1820、检查ID1810、以及检查种类1830。区域810是用于显示由用户在区域800中选择出的检查的详情的区域,设有“系列ID”、“定义”、以及“图像”这些栏。在此,用户没有在区域800中选择检查(与行相对应),因此,在区域810没有任何显示。
用户从显示于区域800的检查中选择将要进行读片的检查。当该选择由输入控制部103检测到时,如图17所示,通信控制部107将选择出的检查的检查ID所含有的全系列的显示请求发送给医用信息管理系统200(S540)。
在医用信息管理系统200的通信控制部206接收到该显示请求后,患者信息管理部202参照图13所示的医用图像数据库2000,取得显示请求所指定的检查ID所含有的全系列的全部切片图像,通过通信控制部206发送给信息终端100(S550)。例如,在图13的例子中,若检查ID为“13227989”的检查被用户选择,则在S550中发送系列ID为“CT149123”、“CT149124”的系列所含有的全部的切片图像。
在信息终端100的通信控制部107取得全系列的图像后,显示控制部104将对与所指定的检查ID所含有的全系列有关的信息进行一览显示的系列列表显示于区域810(S560)。
在该情况下,在显示于显示器101a的检查列表的区域810中,显示与在区域800中选择出的检查相对应的系列的系列列表,在显示器101b没有任何显示。
图19是选择了检查后的检查列表的画面图。在图19的区域800中,在所选择的行的背后带有高亮。在图19的例子中,在区域800中,选择了第2行的“巴拿太郎”的检查。因此,在区域810中,显示关于所选择出的检查的“系列ID”、“定义”、以及“图像”。在此,“系列ID”的栏显示医用图像数据库2000中的与选择出的检查的检查ID相关联的系列ID,在“图像”的栏显示代表所显示的系列ID的1张切片图像的缩略图。在此,作为代表系列ID的1张切片图像,采用预定的切片位置的图像。作为预定的切片位置,既可以是前头的切片位置,也可以是中央的切片位置。“定义”表示针对相关系列的拍摄条件、重建的条件。该“定义”省略了图示,但例如,在图13的医用图像数据库2000中,与系列ID相关联地登记。
在区域810中,当由用户选择读片对象的系列、输入控制部103检测到该选择时,如图20所示,显示控制部104使所选择的系列的前头的切片图像显示于显示器101a(S570)。图20是示出在由用户选择了系列时显示于显示器101a的切片图像的图。图20是示出胸部CT拍摄下的前头的切片图像的图。在图20的例子中,示出了比肺尖部稍靠头方向的肩位置处的切片图像。
在此,代表系列的切片图像由对医用图像进行了读片的医生决定,因此,在医生未读片的状态下,例如前头的切片图像作为默认的切片图像显示于显示器101a。另外,图20的切片图像没有由医生设定关心区域,因此,没有显示关心区域。
另外,显示控制部104以能够按系列进行翻页的状态将所选择的系列的全部的切片图像显示于显示器101a。此外,在显示器101b上没有任何显示。例如,由用户在显示器101a上定位鼠标指针,输入使鼠标轮旋转的切片翻页的操作,输入控制部103检测该操作。于是,显示控制部104根据鼠标轮的旋转量而将显示于显示器101a的切片图像切换成别的切片位置的切片图像。用户一边输入切片翻页的操作一边进行图像诊断。并且,用户在对图像诊断感到困惑的情况下,使相似病例检索应用程序启动。
在此,对于相似病例检索应用程序,既可以在操作部102的键盘中输入预先设定的快捷键来启动,也可以通过鼠标的右击来显示医用图像查看器的菜单,从该菜单中指定相似病例检索菜单来启动。若指示相似病例检索应用程序的启动,则信息终端100的管理被移交给ROI管理部105,信息终端100成为关心区域(ROI)的待受理状态。
用户通过操作部102在显示于显示器101a的切片图像上的病变设定关心区域(ROI)(S580)。在此,如图16所示,用户例如左击鼠标而输入关心区域的左上的顶点的坐标。并且,用户只要在左击了的状态下将鼠标向右斜下方向拖动后解除左击,从而输入关心区域的右下的顶点即可。
图5是示出针对病变设定了关心区域后的切片画面的一例的图。关心区域能够设定一个以上。在读片对象的系列中,用户所着眼的病变区域是一处的情况下,设定一个关心区域,在是两处的情况下,设定两个关心区域即可。
作为想要设定两个关心区域的例子,有如图5那样存在不同的两种病变的情况。例如,用户通过对空洞性病变设定ROI_A、对粒状阴影设定ROI_B,能够以这两种病变,检索与其分别相似的过去的相似病例。此外,在设定多个ROI的情况下,作为ROI的设定对象的切片图像也不一定是同一切片图像。例如,也可以对相同系列的多个切片图像设定ROI。
当输入控制部103检测到设定关心区域的操作时,ROI管理部105从输入控制部103接受关心区域的左上以及右下的顶点的坐标数据,将接受到的坐标数据作为关心区域信息而生成。然后,ROI管理部105将所生成的关心区域信息发送给通信控制部107(S590)。
同时,ROI管理部105将诊断对象病例的切片图像发送给通信控制部107(S600)。在该情况下,在S550中,信息终端100从医用信息管理系统200接受到的全系列的切片图像中的、在用户所选择的系列中由用户设定了关心区域的切片图像被发送。在设定有关心区域的切片图像存在多张的情况下,发送多个切片图像。
接着,通信控制部107接受从ROI管理部105发送来的关心区域信息,并发送给病例检索系统300的通信控制部305(S601)。
同时,通信控制部107接受从ROI管理部105发送来的切片图像,并发送给病例检索系统300的通信控制部305(S602)。
在此,在S600、S601中,发送了切片图像本身,但也可以仅发送切片图像的切片ID。在该情况下,接收到切片ID的病例检索系统300指定该切片ID而从医用信息管理系统200取得切片图像即可。
接着,对病例检索系统300进行相似病例检索、到信息终端100初始显示相似病例检索的结果为止的处理进行说明。
图21是示出在病例检索系统300接受相似病例检索的请求之后到将相似病例检索的结果返回给信息终端100为止的处理的时序图。
病例检索系统300的图像特征提取部302按照所设定的每个关心区域提取预先设定的多维度的图像特征(以下称为“图像特征集”)(S610)。
作为图像特征集,可以采用医用图像中的与脏器或者病变部分的形状有关的图像特征集、或与辉度分布有关的图像特征集等。例如,在非专利文献:“根本,清水,萩原,小畑,縄野,“多数の特徴量からの特徴選択による乳房X線像上の腫瘤影判別精度の改善と高速な特徴選択法の提案(基于从大量特征量进行的特征选择的乳房X射线像上的肿瘤影判别精度的改善和高速的特征选择法的提案)”,电子信息通信学会论文志D-II,Vol.J88-D-II,No.2,pp.416-426,2005年2月”中记载有使用490维的图像特征集。在本实施方式中,例如采用该非专利文献所记载的图像特征集。不过,这只不过是一例,也可以采用其他图像特征集。在本实施方式中,在关心区域是两个的情况下,从各关心区域分别提取图像特征集。
相似病例检索部303对由图像特征提取部302提取出的图像特征集和储存于相似病例数据储存部301的各相似病例的图像特征集进行比较(S620)。在此,相似病例检索部303通过算出从检索查询图像提取出的图像特征集与在按照每个相似病例储存于相似病例数据储存部301的相似病例数据4000(图15)中登记的图像特征数据4400(图像特征集)之间的距离,来对两图像特征集进行比较。
在此,对关心区域数、即图像特征集数在检索查询图像和相似病例中不同的情况下的检索方法进行说明。
图22是对检索查询图像的关心区域数(图像特征集数)是1的情况下的图像特征集的比较方法进行说明的图。在图22的例子中,示出了检索查询图像的图像特征集是一个(FQ1)与相似病例ID是i、i+1、i+2这三个相似病例之间的比较方法。在图22的例子中,相似病例ID是i的相似病例的图像特征集数为1、相似病例ID是i+1的相似病例的图像特征集数为2、相似病例ID是i+2的相似病例的图像特征集数为3。
对于检索查询图像与相似病例ID是i的相似病例之间的比较,两者的图像特征集数都是1,因此,相似病例检索部303进行通常的距离计算、即一次距离计算(P1)。对于检索查询图像与相似病例ID是i+1的相似病例之间的比较,相似病例ID是i+1的图像特征集数为2,因此,相似病例检索部303进行两次距离计算(P2、P3)。即,相似病例检索部303分别进行检索查询图像的图像特征集与相似病例ID是i+1的相似病例的两个图像特征集之间的距离计算。并且,相似病例检索部303将计算出的两个距离中的较小的距离决定为检索查询图像与相似病例ID是i+1的相似病例之间的距离。
同样,对于检索查询图像与相似病例ID是i+2的相似病例之间的比较,相似病例ID是i+2的图像特征集数为3,因此,相似病例检索部303进行三次距离计算(P4、P5、P6)。即,相似病例检索部303分别进行检索查询图像的图像特征集与相似病例ID是i+2的相似病例的三个图像特征集之间的距离计算。
并且,相似病例检索部303将计算出的三个距离中的最小的距离决定为检索查询图像与相似病例ID是i+2的相似病例之间的距离。
接着,对具有两个图像特征集数的检索查询图像与相似病例ID是i、i+1、i+2的相似病例之间的比较方法进行说明。此外,如图22所示,相似病例ID是i、i+1、i+2的相似病例分别具有一个、两个、三个图像特征集。
在检索查询图像具有两个图像特征集的情况下,检索对象的相似病例限定于具有两个以上的图像特征集的相似病例。因而,相似病例ID是i的相似病例被从检索对象中排除,相似病例ID是i+1、i+2的相似病例成为检索对象。
图23是对检索查询图像的关心区域数(图像特征集数)和作为比较对象的相似病例的关心区域数(图像特征集数)均是2时的图像特征集的比较方法进行说明的图。
此外,在图23中,检索查询图像的两个图像特征集分别以FQ1、FQ2表示。
另外,在图23中,图像特征集FQ1与相似病例ID是i+1的相似病例的第1个图像特征集(FDi+1、1)之间的距离以P1表示,图像特征集FQ1与相似病例ID是i+1的相似病例的第2个图像特征集(FDi+1、2)之间的距离以P3表示,图像特征集FQ2与相似病例ID是i+1的相似病例的第1个图像特征集(FDi+1、1)之间的距离以P4表示,图像特征集FQ2与相似病例ID是i+1的相似病例的第2个图像特征集(FDi+1、2)之间的距离以P2表示。
检索查询图像的图像特征集数和比较对象的相似病例的图像特征集数均是两个,因此,相似病例检索部303进行2×2=4次距离计算(P1~P4)。在此,两个图像特征集的比较的组合是“P1和P2”以及“P3和P4”这两个组合。于是,相似病例检索部303将“P1和P2”的距离的平均、“P3和P4”的距离的平均中的较小的距离的平均决定为检索查询图像与相似病例ID是i+1的病例之间的距离。
图24是对检索查询图像的关心区域数(图像特征集数)是2与作为比较对象的相似病例的关心区域数(图像特征集数)是3时的图像特征集的比较方法进行说明的图。在图24的例子中,检索查询图像的图像特征集数是两个,比较对象的相似病例的图像特征集数是三个,因此,相似病例检索部303进行2×3=6次距离计算(P1~P6)。
此外,在图24中,检索查询图像的两个图像特征集分别以FQ1、FQ2表示。
另外,在图24中,图像特征集FQ1与相似病例ID是i+2的相似病例的第1个图像特征集(FDi+2、1)之间的距离以P1表示,图像特征集FQ1与相似病例ID是i+2的相似病例的第2个图像特征集(FDi+2、2)之间的距离以P2表示,图像特征集FQ1与相似病例ID是i+2的相似病例的第3个图像特征集(FDi+2、3)之间的距离以P3表示。另外,图像特征集FQ2与相似病例ID是i+2的相似病例的第1个图像特征集(FDi+2、1)之间的距离以P4表示,图像特征集FQ2与相似病例ID是i+2的相似病例的第2个图像特征集(FDi+2、2)之间的距离以P5表示,图像特征集FQ2与相似病例ID是i+2的相似病例的第3个图像特征集(FDi+2、3)之间的距离以P6表示。
在此,两个图像特征集的比较的组合是“P1和P5”、“P1和P6”、“P2和P4”、“P2和P6”、“P3和P4”、“P3和P5”这6个组合。于是,相似病例检索部303将这6个组合的距离的平均中的、最小的距离的平均决定为检索查询图像与相似病例ID是i+2的相似病例之间的距离。
这样一来,能够计算图像特征集数(即、关心区域数)不同的检索查询图像与相似病例之间的距离。
使参照返回图21。接着,相似病例检索部303将距离是预定的阈值以下的相似病例按照距离从小到大的顺序排序,决定为发送对象的相似病例(S630)。接着,通信控制部305将储存于相似病例数据储存部301的相似病例数据4000中的、被决定为发送对象的相似病例的相似病例ID4100、缩略图数据4300、确诊数4400、疾患ID4500、以及由相似病例检索部303算出来的距离发送给信息终端100(S640)。
以下,执行生成显示有相似病例检索结果的初始的基本画面K2(图6)的处理(S650)。
图25是示出生成图21的S650所示的初始的基本画面K2的处理的详情的流程图。
首先,在S1000中,显示控制部104对在图21的S640中接收到的相似病例的数量进行计数,将计数值显示于病例件数显示区域714。
接着,在S1100中,显示控制部104在疾患条件显示区域715显示为“全部疾患”。在此,显示为“全部疾患”的原因在于,在初始的基本画面K2中,没有由用户以病名实施筛选。
接着,在S1200中,显示控制部104将与图21的S640中接收到的相似病例中的缩略图能够显示于病例显示区域710的相似病例的件数相应的量的、相似病例的缩略图显示于病例显示区域710,并且与各缩略图相关联地显示确诊和相似度。
能够显示于病例显示区域710的相似病例的件数的最大值在图6的例子中是15(若包括能够仅显示图像的上半部分的相似病例,则是20)。该最大值预先设定。另外,也可以构成为该最大值可由用户自由地变更。在图21的S640中接收到的相似病例的数量比最大值多的情况下,显示控制部104使纵向较长的滚动条713显示于病例显示区域710的右端。由此,用户使滚动条713移动,能够阅览在初始的基本画面K2中没有显示的相似病例的缩略图。
接着,在S1300中,显示控制部104生成病名列表信息6000(参照图27、图28、图29),显示病名列表显示区域730。病名列表信息6000是针对在图21的S640中接收到的相似病例的全部病例,按每个疾患ID记录有病例的件数和相似病例ID的表格。病名列表显示区域730基于病名列表信息6000,使确诊病名和病例数可视化。
接着,以图26的流程图对S1300的处理的详情进行说明。
在S1310中,显示控制部104针对在图21的S640中接收到的相似病例的全部病例,按每个疾患ID4500将病例数和相似病例ID记录于病名列表信息6000。
在此,将在S640中接收到的相似病例的件数设为NC件。此时,根据相似病例数据4000,也存在具有多个确诊(疾患ID)的数据。在此,显示控制部104不是对相似病例的件数进行计数,而是单纯地对疾患ID的出现频度进行计数。因而,病名列表信息6000中的病例数的合计有可能超过NC件。
图27、图28、图29是示出病名列表信息6000的一例的图。如图27、图28、图29所示,病名列表信息6000有三个样式。图27所示的第1个病名列表信息6000是以详细分类病名单位计数的病例数按照从多到少的顺序排列而成的。因此,在图27所示的病名列表信息6000中,在“件数”的栏登记有以详细分类病名单位计数的病例数。
具体而言,图27所示的病名列表信息6000具备“疾患ID”、“大分类病名表述”、“详细分类病名表述”、“件数”、以及“相似病例ID”这些栏。“疾患ID”与图15中所示的疾患ID4500相同。在“大分类病名表述”的栏中登记有所对应的疾患ID的大分类病名。在“详细分类病名表述”的栏中登记有所对应的疾患ID的详细分类病名。在“相似病例”的栏中登记有具有所对应的疾患ID的相似病例的相似病例ID。相似病例ID与图15所示的相似病例ID4100相同。
例如,疾患ID“DIS002_001”的大分类病名是肿瘤性“002”,详细分类病名是原发性肺癌“001”,因此,在“大分类病名表述”、“详细分类病名表述”的栏中登记有“肿瘤性”、“原发性肺癌”。另外,作为疾患ID“DIS002_001”的详细分类病名的原发性肺癌的件数是10件,因此,在“件数”的栏中登记有“10”。另外,具有疾患ID“DIS002_001”的10件的相似病例的相似病例ID(SIM1592、SIM2205、SIM8137、…)登记在“相似病例ID”的栏中。
图28所示的第2个病名列表信息6000是以大分类病名单位计数的病例数按照从多到少的顺序排序而成的。
因此,在图28所示的病名列表信息6000的“件数”的栏中登记有以大分类病名单位计数的病例数。具体而言,图28所示的病名列表信息6000具备“疾患ID”、“大分类病名表述”、“件数”以及“相似病例ID”这些栏。在此,图28所示的病名列表信息6000是病例数以大分类病名单位进行计数,因此,省略了“详细分类病名表述”的栏这一点与图27所示的病名列表信息6000不同。
例如,疾患ID“DIS011”的大分类病名是真菌病“011”,因此,在“大分类病名表述”的栏登记有“真菌病”。另外,作为疾患ID“DIS011”的大分类病名的真菌病的件数是14件,因此,在“件数”的栏登记有“14”。另外,具有疾患ID“DIS011”的14件的相似病例的相似病例ID(SIM2205、SIM4172、SIM6089、…)登记在“相似病例ID”的栏中。
图29所示的第3个病名列表信息6000是将在S640中接收到的全部病例以大分类病名单位分类并按照件数从多到少的顺序排序、进一步以详细分类病名分类并按照件数从多到少的顺序排序而制作成的。具体而言,图29所示的病名列表信息6000具备“疾患ID”、“大分类病名表述”、“详细分类病名表述”、“件数”、以及“相似病例ID”这些栏。在图29的例子中,真菌病“011”的件数是14件,其明细如下:“曲霉病”是8件,“隐球菌病”是6件。因此,图29所示的病名列表信息6000具备表示大分类病名的疾患ID“DIS011”的行、表示详细分类病名的疾患ID“DIS011_002”的行以及疾患ID“DIS011_003”的行。
另外,在疾患ID“DIS011”的行中,在“大分类病名表述”的栏中登记有“真菌病”,在“详细分类病名表述”的栏登记有表示空白的“-”,在“件数”的栏中登记有“14”。另外,在疾患ID“DIS011_002”的行中,在“大分类病名表述”的栏登记有“真菌病”,在“详细分类病名表述”的栏中登记有“曲霉病”,在“件数”的栏中登记有“8”。另外,在疾患ID“DIS011_003”的行中,在“大分类病名表述”的栏中登记有“真菌病”,在“详细分类病名表述”的栏中登记有“隐球菌病”,在“件数”的栏中登记有“6”。
在图27、图28、图29所示的任一个病名列表信息6000中,均含有“疾患ID”、“件数”、以及“相似病例ID”的栏。在此,在图27、图28、图29中,“大分类病名表述”、“详细分类病名表述”的栏是为了方便说明而设置的,也可以省略。其原因在于,只要使用储存于疾患体系定义部304的疾患体系5000(图36),显示控制部104就能够根据疾患ID唯一地确定大分类病名和详细分类病名。
将参照返回图26。接着,在S1320中,显示控制部104针对在图21的S640中接收到的相似病例的全部病例,选拔具有多个疾患ID的相似病例。然后,显示控制部104生成按照每个疾患ID记录有表示并发病名的“疾患ID”、“病例数”和“相似病例ID”的并发病名列表信息6500(图30)。图30是示出并发病名列表信息6500的一例的图。
并发病名列表信息6500为了容易地从疾患ID检索并发疾患ID,按照每个“疾患ID”,将“并发疾患ID”、“病例数”、以及“相似病例ID”相关联地记录。“疾患ID”与图15所示的疾患ID4500相同。“并发疾患ID”是与所对应的“疾患ID”所表示的病名并发的病名的“疾患ID”。“病例数”是“疾患ID”所表示的病名和“并发疾患ID”所表示的病名并发了的相似病例的件数。“相似病例ID”是并发“疾患ID”所表示的病名和“并发疾患ID”所表示的病名的相似病例的相似病例ID。
在并发病名列表信息6500中,按照每个“疾患ID”,对“病例数”进行了计数。因而,在并发病名列表信息6500中,与病名A并发了的病名B的“病例数”和与病名B并发了的病名A的“病例数”被重复地计数。在相似病例中也存在被赋予了三个以上的确诊的具有三个以上的疾患ID的相似病例。不过,在本实施方式中,仅着眼于两个病名的关系。例如,某个相似病例被赋予了病名A、B、C这三个确诊。在该情况下,该相似病例分成A-B、A-C、B-A、B-C、C-A、C-B这6个样式而登记于并发病名列表信息6500。此外,所生成的病名列表信息6000和并发病名列表信息6500由病名列表管理部108管理。
在图15的例子中,作为疾患ID4500,登记有“DIS012_007”、“DIS015_019”,因此,与“DIS012_007”相对应的行和与“DIS015_019”相对应的行登记于并发病名列表信息6500。并且,在疾患ID是“DIS012_007”的行中登记“DIS015_019”作为“并发疾患ID”,在疾患ID是“DIS015_019”的行中登记“DIS012_007”作为“并发疾患ID”。
使参照返回图26。在S1330中,显示控制部104使用如此生成的病名列表信息6000来生成病名列表显示区域730,并显示于显示器101。
图31、图32、图33是分别示出病名列表显示区域730的第1显示例、第2显示例、第3显示例的图。此外,图31~图33所示的病名列表显示区域730是病名的单独列表的一例。
如图31所示,在第1显示例子中,相似病例检索的结果所获得的相似病例按照详细分类病名的件数从多到少的顺序,与件数相关联地一览显示。该显示使用图27的病名列表信息6000。
具体而言,在图27所示的病名列表信息6000中,从原发性肺癌到支气管扩张症,详细分类病名按照件数从多到少的顺序排序。因此,在图31的病名列表显示区域730中,从第1行到第10行,依次显示从原发性肺癌到支气管扩张症的详细分类病名。由此,用户能够按照件数从多到少的顺序容易地识别作为检索查询图像的候选的详细分类病名。
如图32所示,在第2显示例子中,相似病例检索的结果所获得的相似病例按照大分类病名的件数从多到少的顺序,与件数相关联地一览显示。该显示使用图28的病名列表信息6000。
具体而言,在图28所示的病名列表信息6000中,从真菌病到其他的大分类病名按照件数从多到少的顺序排序。因此,在图32的病名列表显示区域730中,从第1行到第5行,依次显示从真菌病到其他。由此,用户能够按照件数从多到少的顺序容易地识别检索查询图像的大分类病名的候选。
如图33所示,在第3显示例子中,相似病例检索的结果所获得的相似病例按照大分类病名的件数从多到少的顺序,与件数相关联地一览显示,且针对每个大分类病名,按照其中所含有的详细分类病名的件数从多到少的顺序,与件数相关联地一览显示。这样,在第3显示例子中,确诊病名以大分类病名和详细分类病名的阶层构造表现。该显示使用图29的病名列表信息6000。
具体而言,在图29所示的病名列表信息6000中,大分类病名按照“真菌病”、“肿瘤性”、“非肿瘤性”、“分支杆菌病”的顺序排序。因此,在图33的病名列表显示区域730中,“真菌病”、“肿瘤性”、“非肿瘤性”、以及“分支杆菌病”的大分类项目7301依次显示。另外,在图29所示的病名列表信息6000中,例如,对于真菌病,作为详细分类病名,按照“曲霉病”和“隐球菌病”的顺序排序。因此,在第3显示例子中,作为“真菌病”的详细分类病名的“曲霉病”和“隐球菌病”的详细分类项目7302依次显示。由此,用户能够按照件数从多到少的顺序容易地识别检索查询图像的大分类病名和详细分类病名的候选。
经由以上的处理,生成显示有相似病例检索结果的初始的基本画面K2(参照图6)。使参照返回图21,接着,当输入控制部103检测到对基本画面K2中的病名列表显示区域730的操作时,显示控制部104执行与检测的操作相对应的处理(S660)。
此外,即使是显示有图32所示的大分类病名的病名列表显示区域730,显示控制部104也可以根据用户的操作来显示详细分类病名。在该情况下,显示控制部104预先求出图29所示的病名列表信息6000,从该病名列表信息6000仅提取大分类病名而显示于图32所示的病名列表显示区域730即可。
图34是表示图32所示的病名列表显示区域730的画面迁移的图。如图34的上段所示,当输入控制部103检测到一览显示的大分类病名中的一个大分类病名由用户选择的操作时,显示控制部104如图34的下段所示,使属于所选择的大分类病名的详细分类病名按照件数从多到少的顺序,与件数相关联地显示。在此,用户例如通过双击或者单击例如在病名列表显示区域730中一览显示的大分类病名中的、所期望的一个大分类病名,来选择一个大分类病名即可。在图34的例子中,非肿瘤性被双击,因此,属于非肿瘤性的详细分类病名被一览显示。
在图34的下段,当一览显示有详细分类病名的区域被用户双击或者单击时,显示控制部104将显示于相关区域的详细分类病名设为非显示即可。
接着,利用图35的流程图,对输入了对病名列表显示区域730的操作时的信息终端100的处理(并发病名列表处理)进行说明。在此,为了简化说明,省略从图34的大分类病名向详细分类病名展开时的动作。以下的处理是在详细分类病名下的病名列表显示区域730(图31)、大分类病名下的病名列表显示区域730(图32)、以及并用了大分类病名和详细分类病名的病名列表显示区域730(图33)中共通的处理。
在S3100中,输入控制部103判定是否在两个以上的关心区域中开始了检索。在否的情况下,即、在一个关心区域中开始了检索的情况下,处理进入S3200,在是的情况下,处理进入S3300。
在S3200中,输入控制部103判定鼠标是否点击了病名列表显示区域730。在否的情况下,处理返回S3200。在是的情况下,处理进入S3210,输入控制部103取得所点击的病名的疾患ID。例如,在点击了作为大分类病名的“真菌病”的情况下,输入控制部103根据所点击的坐标检测到“真菌病”被点击,参照疾患体系5000,取得疾患ID“DIS011”。例如,在作为详细分类病名的“转移性肺癌”被点击的情况下,输入控制部103根据所点击的坐标检测到“转移性肺癌”被点击,参照疾患体系5000,取得疾患ID“DIS002_004”。
接着,在S3220中,显示控制部104将显示于病例显示区域710的相似病例以与在S3210中取得的疾患ID相对应的相似病例筛选,将筛选后的相似病例显示于病例显示区域710,结束处理。例如,在作为大分类病名的“真菌病”被点击了的情况下,显示控制部104将图29的病名列表信息6000所含有的相似病例筛选成与真菌病(疾患ID=DIS011)相对应的14件的相似病例(相似病例ID=SIM2205、SIM4172、SIM6089、…),将筛选后的相似病例显示于病例显示区域710(图9)。
例如,在作为详细分类病名的“转移性肺癌”被点击了的情况下,显示控制部104将图29的病名列表信息6000所含有的相似病例筛选成与转移性肺癌(疾患ID=DIS002_004)相对应的3件相似病例(相似病例ID=SIM0157、…),将筛选后的相似病例显示于病例显示区域710(图10)。
在S3300中,输入控制部103判定鼠标是否位于病名列表显示区域730。在鼠标位于该区域的情况下(S3300中为是),处理进入S3400。若鼠标没有位于该区域(S3300中为否),则处理返回S3300。在此,“鼠标位于”是指例如将鼠标定位于病名列表显示区域730。
在S3400中,输入控制部103取得鼠标所位于的病名的疾患ID。在此,将取得的疾患ID设为X。
在S3500中,显示控制部104参照并发病名列表信息6500,判定是否存在与在S3400中取得的疾患ID(X)相关联的并发疾患ID。若不存在(S3500中为否),则处理返回S3300。若存在(S3500中为是),则处理进入S3600。
在S3600中,显示控制部104从并发病名列表信息6500取得与疾患ID(X)相关联的并发疾患ID和病例数,将所取得的并发疾患ID所表示的病名和病例数显示于病名列表显示区域730。
例如,病名列表显示区域730如图31所示显示详细分类病名的情况下,设为鼠标位于“曲霉病”上。在该情况下,显示控制部104根据鼠标所位于的坐标判定为鼠标位于“曲霉病”,参照并发病名列表信息6500,取得与“曲霉病”(DIS011_002)相对应的并发疾患ID(DIS002_001、DIS003_002)和病例数(3=2+1)。并且,显示控制部104参照疾患体系5000,取得与所取得的并发疾患ID相对应的详细分类病名。在此,作为详细分类病名,取得“原发性肺癌”和“非结核性抗酸菌”,作为病例数,取得2件“原发性肺癌”、1件“非结核性抗酸菌”。并且,如图37所示,显示控制部104在鼠标所位于的“曲霉病”的正下方插入显示将“曲霉病”的并发疾患一览显示的并发病名列表750。图37是示出并发病名列表750的第一例的图。并发病名列表750是并发病名的组合列表的一例。在图37所示的并发病名列表750的例子中,在标题<并发疾患>下,“原发性肺癌”和“非结核分枝杆菌病”分别显示为病例数“2”和“1”。另外,“原发性肺癌”的病例数比“非结核分枝杆菌病”的病例数多,因此,在并发病名列表750中,依次显示“原发性肺癌”和“非结核分枝杆菌病”。
图38是示出并发病名列表750的第二例的图。在图38的例子中,并发病名列表750不是插入病名列表显示区域730,而是以弹出形式显示。在图38的例子中,并发病名列表750以从曲霉病的显示栏冒出的方式弹出显示。
在病名列表显示区域730如图32那样以大分类病名显示的情况下,能够如图39、图40所示那样采用以大分类病名一览显示并发疾患的并发病名列表750。图39是示出并发病名列表750的第三例的图。图40是示出并发病名列表750的第四例的图。
在图39的例子中,鼠标位于“真菌病”,因此,在“真菌病”的正下方显示有并发病名列表750。在此,“真菌病”的并发疾患是“肿瘤症”和“分支杆菌病”,“肿瘤症”的病例数比“分支杆菌病”的病例数多,因此在并发病名列表750中,“肿瘤症”和“分支杆菌病”依次显示。
图40的并发病名列表750以弹出形式显示图39所示的第三例的并发病名列表750。
另外,在病名列表显示区域730如图33那样并用显示大分类病名和详细分类病名的情况下,显示控制部104也可以如图41~图44那样,在鼠标位于大分类病名的情况下,显示以大分类病名一览显示并发疾患的并发病名列表750,在鼠标位于详细分类病名的情况下,显示以详细分类病名一览显示并发疾患的并发病名列表750。
图41是示出并发病名列表750的第五例的图。图42是示出并发病名列表750的第六例的图。图43是示出并发病名列表750的第七例的图。图44是示出并发病名列表750的第八例的图。
在图41的左图的例子中,在病名列表显示区域730中,鼠标位于作为详细分类病名的“曲霉病”。因此,在图41的右图的例子中,在“曲霉病”的正下方显示有一览显示作为“曲霉病”的并发疾患的、“原发性肺癌”和“非结核分枝杆菌病”的并发病名列表750。
图42的并发病名列表750以弹出形式显示图41所示的第五例的并发病名列表750。
在图43的左图的例子中,在病名列表显示区域730中,鼠标位于作为大分类病名的“真菌病”。因此,在图43的右图的例子中,在“真菌病”的正下方显示有一览显示作为“真菌病”的并发疾患的、“肿瘤症”和“分支杆菌病”的并发病名列表750。
图44的并发病名列表750以弹出形式显示图43所示的第七例的并发病名列表750。
此外,在图37~图44所示的并发病名列表750中,并发疾患与病例数相关联地显示,但对于不存在并发疾患的病名,也可以在病名后标注“单独”这语句并显示病例数。例如,在图37的例子中,也可以追加显示“曲霉病单独5”这一行。由此,可以明确,曲霉病的病例数全8件中的、2件并发有“原发性肺癌”、1件并发有“非结核分枝杆菌病”、剩余5件是“曲霉病”单独发病。
另外,在S3300中,并发病名列表750以鼠标的位于为触发点而显示,但这只不过是一例。例如,也可以以点击、双击、左击、右击为触发点使并发病名列表750显示。或者,也可以是,在点击、双击、左击、右击后,显示用于选择并发病名列表750的显示的菜单列表,在菜单列表中,在选择了并发病名列表750的显示时,显示并发病名列表750。无论如何,以与从图34中的大分类病名向详细分类病名展开时的操作相独立的操作为触发点来显示并发病名列表750即可。
使参照返回图35。接着,在S3700中,输入控制部103进行鼠标对并发病名列表750的区域内的点击的检测等待。在没有检测到鼠标的点击的情况下(S3700中为否),反复进行S3700。在检测到鼠标的点击的情况下(S3700中为是),处理进入S3800。在S3800中,显示控制部104取得鼠标所点击的并发疾患的并发疾患ID。在此,将所取得的疾患ID设为Y。
接着,在S3900中,显示控制部104参照并发病名列表信息6500中的登记在疾患ID=X以及并发疾患ID=Y的行,取得与“病例数”相应的量的“相似病例ID”。例如,在图30中,在取得了疾患ID=DIS011_002(曲霉病)和并发疾患ID=DIS002_001(原发性肺癌)的情况下,“病例数”是“2”,因此,显示控制部104取得两个相似病例ID(SIM2205、SIM8137)。并且,显示控制部104将显示于病例显示区域710的相似病例筛选成与所取得的相似病例ID相对应的相似病例。图45示出这一例。
在图45的例子中,以并发“原发性肺癌”的相似病例对“曲霉病”进行了筛选。因此,在病例件数显示区域714中作为病例数显示有2件,在疾患条件显示区域715中显示为“曲霉病和原发性肺癌的并发”。不过,这是一例,也可以在疾患条件显示区域715中显示“曲霉病和原发性肺癌”这样的语句。
此外,在采用了在并发病名列表750中存在“曲霉病单独”的行的形态的情况下,显示控制部104如图46所示那样仅将曲霉病单独发病的相似病例显示于病例显示区域710即可。
这样,在本实施方式中,显示并发病名列表750,因此,用户容易对检索查询图像进行是否并发了多个疾患的诊断。具体而言,用户使病例数显示于并发病名列表750中,因此,能够一边以病例的频度为参考一边判断检索查询图像的相似病例具有什么样的疾患。
另外,如图45所示,当指定了显示于并发病名列表750的并发疾患(原发性肺癌)时,将并发了并发病名列表750的展开基础的疾患(曲霉病)和所指定的并发疾患(原发性肺癌)的相似病例一览显示于病例显示区域710。因此,用户能够容易地判断检索查询图像是否同时罹患了展开基础的疾患和所指定的并发疾患。
此外,即使没有设定多个关心区域,在医生想调查多个疾患的可能性的情况下,也可以设置并发病名列表750的手动启动模式,以使得能够显示并发病名列表750。
(实施方式1的变形例)
以下,对实施方式1的变形例进行说明。在该变形例中,只要没有特别声明,则没有说明的部分与实施方式1就是相同的。
图47是示出实施方式1的变形例中的、信息终端100、医用信息管理系统200、以及病例检索系统300的构成的框图。在变形例中,与实施方式1的不同点在于,病例检索系统300具备图像观察结果判定部306。图像观察结果判定部306判定在通过信息终端100设定的多个关心区域内是否包含多个(彼此不同的)图像观察结果。
图48是示出在实施方式1的变形例中在病例检索系统300接受相似病例检索的请求之后、到将相似病例检索的结果返回给信息终端100为止的处理的时序图。此外,图48的前段的时序图与实施方式1相同,是图17。在图48的S610中,病例检索系统300的图像特征提取部302从在S601中发送来的一个以上的关心区域信息和切片图像中,按每个关心区域提取图像特征集。
在S615中,在通过信息终端100设定的关心区域是多个的情况下,图像观察结果判定部306判定是否含有不同的图像观察结果。
图像观察结果判定部306预先具备用于将与关心区域相对应的图像特征集分类成预定个数的图像观察结果的识别器。例如,如图49所示,图像观察结果判定部306针对由图像诊断医生预先设定的10个图像观察结果分别从预先收集到的数百~数千个图像中提取图像特征集。然后,图像观察结果判定部306使用提取出的图像特征集来进行学习,由此生成识别器。在图49的例子中,作为图像观察结果,采用了“GGO”、“毛玻璃影”、“带状阴影”、“网状影”、“囊肿”、“结节”、“实变(consolidation)”、“多发粒状阴影”、“空洞性结节”、以及“蜂窝肺”这10个,但这是一例。
作为识别器,能够采用SVM(支持向量机:Support Vector Machine)、逻辑回归、ANN(人工神经网络:Artificial Neural Networks)等。此外,图像观察结果也可以与图49不同,只要是在数个~数十个的范围内,也可以采用其他分类方法、分类数。
使参照返回图48。在S615中,图像观察结果判定部306将按照用户通过信息终端100设定的每个关心区域在S610提取出的图像特征集输入上述的识别器,判定图像观察结果存在有几种。例如,假设如图5所示设定了两个关心区域ROI_A、ROI_B。在该情况下,关心区域ROI_A的图像特征集被识别为图49所示的“空洞性结节”,关心区域ROI_B的图像特征集被识别为图49所示的“多发粒状阴影”。因而,S615中的判定结果成为两个。
例如,假设如图50所示设定了两个关心区域ROI_A、ROI_B。在该情况下,双方的图像特征集都被识别为图49所示的“结节”。因而,S615中的判定结果成为一个。
如图50所示,在同一系列中,有时也在2张切片图像各自的病变设定有关心区域。在该情况下,如果S615中的判定结果是一个,则图像观察结果判定部306判定通过信息终端100设定的多个关心区域不含有彼此不同的图像观察结果。另一方面,如果S615中的判定结果是两个以上,则图像观察结果判定部306判定为通过信息终端100设定的多个关心区域含有彼此不同的图像观察结果。关心区域的个数是三个以上的情况,图像观察结果判定部306也进行与上述同样的处理,判定关心区域是否含有彼此不同的图像观察结果。
此外,识别器只要能够将所输入的图像特征集识别成预定的图像观察结果即可,也可以采用其他识别器。
另外,图像观察结果判定部306也可以不使用识别器。例如,也可以是,图像观察结果判定部306将在S610中提取出的多个图像特征集相互比较,由此判定关心区域是否含有不同的图像观察结果。例如,假设在关心区域的个数是两个,从各自提取出的图像特征集为FQ1、FQ2。在该情况下,如图51所示,图像观察结果判定部306求出图像特征集FQ1与图像特征集FQ2之间的距离D51。并且,若距离D51小于预定的阈值,则图像观察结果判定部306判定为通过信息终端100设定的多个关心区域不含有彼此不同的图像观察结果即可。另一方面,若该距离是预定的阈值以上,则图像观察结果判定部306判定为通过信息终端100设定的多个关心区域含有彼此不同的图像观察结果即可。
在关心区域的个数是三个的情况下,图像观察结果判定部306如图52所示,算出图像特征集FQ1、FQ2、FQ3的相互间的距离D521、D522、D523。并且,若全部的距离D521、D522、D523小于预定的阈值,则图像观察结果判定部306判定为通过信息终端100设定的多个关心区域不含有彼此不同的图像观察结果即可。另一方面,若全部的距离D521、D522、D523中的至少一个是预定的阈值以上的距离,则图像观察结果判定部306判定为通过信息终端100设定的多个关心区域含有彼此不同的图像观察结果即可。此外,在关心区域的个数是4个以上的情况下,图像观察结果判定部306也通过进行与上述同样的处理,判定关心区域是否含有多个图像观察结果即可。
将参照返回图48。S620~S650的处理与图21所示的S620~S650的处理是相同的。
接着,当输入控制部103检测到对基本画面K2中的病名列表显示区域730的操作时,显示控制部104和图像观察结果判定部306执行与所检测到的操作相对应的处理(S660)。利用图53的流程图,对被输入了对病名列表显示区域730的操作时的信息终端100的处理(并发病名列表处理)进行说明。
在S3105中,输入控制部103和图像观察结果判定部306在两个以上的关心区域中开始检索,并且,判定在两个以上的关心区域中是否含有多个图像观察结果。在否的情况下,即在一个关心区域中开始了检索的情况下,处理进入S3200,在是的情况下,处理进入S3300。在此,是否在两个以上的关心区域中开始了检索的判定与实施方式1中的S3100是同样的。在两个以上的关心区域中是否含有多个图像观察结果的判定使用图48中的S615的结果。
以后的步骤的处理与实施方式1的处理(图35)是同样的。
根据实施方式1的变形例,与实施方式1同样,显示并发病名列表750,因此,用户容易对诊断对象病例进行是否产生了多个疾患的诊断。另外,在实施方式1的变形例中,不仅在多个关心区域中开始检索,还“在多个关心区域中含有多个图像观察结果的情况下”显示并发病名列表750。也就是说,仅在并发多个疾患的可能性进一步提高的情况下显示并发病名列表750。因而,在多个疾患并发的可能性较低的情况下,医生能够专心于单一疾患的诊断。
在多个关心区域中含有多个图像观察结果的情况下显示并发病名列表750的理由如下。
作为设定多个关心区域的状况,可举出以下的(案例1)、(案例2)的情况。
(案例1)案例1是如图5所示在检索查询图像中存在不同病变、因此针对各个病变设定关心区域的情况。
(案例2)案例2是如图50所示同一病变存在于不同切片图像的情况。在该情况下,想使多发病变这一情况反映于关心区域的设定,但无法以切片图像单位设定关心区域,因此,针对不同切片图像分别设定关心区域。
在同一病变多发的情况下,诊断对象病例不是罹患了多个疾患、而是罹患了单一疾患的可能性较高。因此,在实施方式1的变形例中,将“在多个关心区域中含有多个图像观察结果的情况下”作为显示并发病名列表750的条件。
(实施方式2)
以下说明实施方式2。在实施方式2中,只要没有特别声明,关于没有说明的部分与实施方式1就是相同的。
在实施方式2中,使用图17对信息终端100从医用信息管理系统200取得了诊断对象病例之后、到对病例检索系统300请求进行相似病例检索、病例检索系统300接受相似病例检索的请求为止的处理进行说明。此外,图17自身与实施方式1是相同的。
在实施方式2中,如图54所示,在S580中设定的关心区域(ROI)含有两种病变。在图54的例子中,作为两种病变,包括空洞性结节和多发粒状阴影的病变。
图55是示出在实施方式2中病例检索系统300接受相似病例检索的请求之后、到将相似病例检索的结果返回给信息终端100为止的处理的时序图。在实施方式2中,与实施方式1的不同点在于,在从提取图像特征的处理(S610)到检索相似病例的处理(S620)之间,新追加了S611、S612、S613的处理。另外,检索相似病例的处理(S620)和检测对病名列表显示区域730的操作的处理(S660)与所输入的图像观察结果相关联而与实施方式1稍微不同。以下,对图55中的本实施方式的特有的处理进行说明。
在S610中,病例检索系统300的图像特征提取部302从设定的关心区域提取多维度的图像特征(图像特征集)。
接着,在S611中,病例检索系统300的通信控制部305将输入在相似病例检索时所使用的图像观察结果的指示发送给信息终端100。相似病例检索中的图像观察结果的使用方法后述。
在S612中,信息终端100生成用于促使用户输入图像观察结果的输入画面。图56是示出用于促使用户输入图像观察结果的输入画面G560的一例的图。在图56中,向用户提示预先设定的10种图像观察结果,促使其选择图像观察结果。
具体而言,输入画面G560具备诊断对象图像显示区域720和选择区域R560。
选择区域R560具备与多个图像观察结果分别对应的缩略图S560。在图56的例子中,选择区域R560具备2行×5列=10个缩略图S560,但这是一例。
图像观察结果的选择通过用鼠标点击与各图像观察结果相对应的各缩略图S560来进行。另外,在选择区域R560中,能够同时选择多个缩略图S560。例如,在选择区域R560中,通过触发(toggle)方式而能够切换选择状态和非选择状态。图57示出选择了两个图像观察结果的状态下的输入画面G560。
在图57的例子中,多发带状阴影和空洞性结节这两个图像观察结果成为了选择状态。此外,图像观察结果的选择不仅限于缩略图S560的区域,也可以用鼠标点击显示有图像观察结果的名称的文字区域或其周边区域。
用户通过选择缩略图S560来选择图像观察结果。并且,当输入控制部103检测到选择图57所示的画面右下的“OK”按钮B560的操作时,信息终端100的通信控制部107将表示所选择的图像观察结果的信息发送给病例检索系统300(S613)。
此外,在S612中生成的输入画面G560不限于在图57中生成的输入画面G560。图58是示出输入画面G560的另一例的图。例如,在图58所示的输入画面G560中,替代缩略图S560而使用了文字图标I560。图59是示出选择了文字图标I560的状态下的输入画面G560的图。在图59所示的输入画面G560中,记载有图像观察结果的名称的矩形状的文字图标I560排列于选择区域R560。用户与图56所示的输入画面G560同样地,通过点击文字图标I560而能够选择图像观察结果。
图60是示出输入画面G560的另一例的图。在图60所示的输入画面G560中,将能够记述所瞩目的图像观察结果的记述栏D560设于诊断对象图像显示区域720。
图60是示出在记述栏D560记述有文本的状态下的输入画面G560的图。用户对操作部102进行操作而能够在记述栏D560记述表示图像观察结果的文本。在采用了具备记述栏D560的输入画面G560的情况下,相似病例检索部303在S620中进行自然语言解析,从输入到记述栏D560的文本提取与图像观察结果相当的一个以上的单词。并且,相似病例检索部303判定所提取出的单词是否与预先设定的预定数的图像观察结果(例如,图49所示的10个图像观察结果)中的任一个图像观察结果相符。该判定通过使用预先准备的同义词词典并将所提取出的一个以上的单词与预先设定的图像观察结果相关联来实现。例如,在图61的例子中,从记述于记述栏D560的文本提取“空洞性结节”和“粒状阴影”等单词作为相当于图像观察结果的单词。并且,“空洞性结节”与提取出的“空洞性结节”相关联,“多发粒状阴影”与“粒状阴影”相关联。在该情况下,相似病例检索部303判定为选择了“空洞性结节”和“多发粒状阴影”的图像观察结果。
接着,对图55所示的S620中的相似病例检索的处理进行说明。
相似病例检索部303例如采用如下方法:使用在检索时输入的图像观察结果,并增大从关心区域提取出的多个维度的图像特征集中的受重视的维度(dimension)的权重来进行检索。
在此,对预先设定的预定数的图像观察结果(在此,图49所示的10种的图像观察结果)的每一个,预先设定受重视的维度。作为受重视的维度,可采用图像观察结果的特征良好地呈现的维度。并且,相似病例检索部303对在检索时所指定的图像观察结果增大预先设定的受重视的维度的加权来进行检索处理。由此,能够根据用户所指定的图像观察结果实现适当的检索处理。具体而言,作为检索处理,可采用PCT/JP2011/006161所公开的方法。
另外,作为检索处理的另一形态,可采用如图62所示在相似病例数据4000中使每个关心区域含有图像观察结果ID4950的形态。图62是示出相似病例数据4000的另一例的图。
在图62所示的相似病例数据4000中,与图15所示的相似病例数据4000之间的不同点在于新设有图像观察结果ID4950这一点。
作为图像观察结果ID4950,可采用用于识别与在检索时(S612)输入的图像观察结果同体系的图像观察结果的识别符。例如,对于图62的相似病例数据4000所具备的两个关心区域中的、关心区域ID=SIM5232_0的关心区域,关联有CAT3、CAT7的图像观察结果ID4950,对于关心区域ID=SIM5232_1的关心区域,关联有CAT3的图像观察结果ID4950。
在此,假设在检索时输入的图像观察结果的图像观察结果ID4950是CAT3。在该情况下,相似病例检索部303将图像观察结果ID=SIM5232_0以及图像观察结果ID=SIM5232_1的关心区域作为检索对象。另外,假设在检索时输入的图像观察结果ID是CAT7。在该情况下,相似病例检索部303将图像观察结果ID=SIM5232_0的关心区域作为检索对象。另外,假设在检索时输入的图像观察结果ID是CAT3和CAT7。在该情况下,相似病例检索部303将图像观察结果ID=SIM5232_0的关心区域作为检索对象。并且,相似病例检索部303将作为检索对象的关心区域的图像特征集与检索查询图像的关心区域的图像特征集之间的距离为阈值以下的相似病例决定为检索查询图像的相似病例。
使用图63所示的流程图来对图55的S660所示的病名列表显示区域730被操作了时的信息终端100的处理(并发病名列表处理)进行说明。在图63的流程图中,与图35所示的实施方式1的流程图之间的不同点在于S3106。在S3106中,在“检索开始时(图55的S612)输入的图像观察结果是两个以上”的情况下(S3106中为是),处理进入S3300,在非“检索开始时(图55的S612)输入的图像观察结果是两个以上”的情况下(S3106中为否),处理进入S3200。其他处理与实施方式1的处理(图35)同样。
根据实施方式2,与实施方式1同样地显示并发病名列表750,因此,用户容易对诊断对象病例进行是否产生了多个疾患的诊断。另外,在实施方式2中,在检索开始时(图55的S612)输入的图像观察结果是两个以上的情况下显示并发病名列表750。也就是说,仅在多个疾患并发的可能性较高的情况下显示并发病名列表750。因而,在多个疾患并发的可能性较低的情况下,医生能够专心于单一疾患的诊断。
(实施方式3)
以下,对实施方式3进行说明。在实施方式3中,只要没有特别声明,关于没有说明的部分,与实施方式1就是相同的。
图64是示出在实施方式3中病例检索系统300接受相似病例检索的请求之后、到将相似病例检索的结果返回给信息终端100为止的处理的时序图。在实施方式3中,与实施方式1的不同点在于S650和S661。
图65是示出在实施方式3中通过信息终端100使相似病例检索应用程序刚启动之后显示于显示器101b的基本画面K2的一例的图。在实施方式3的基本画面K2中,与实施方式1的不同点在于,在画面的上部设有图像观察结果筛选区域716(第3显示区域的一例)。图像观察结果筛选区域716具备多个图像观察结果选择按钮B650。图像观察结果选择按钮B650是用于筛选显示于病例显示区域710的相似病例的按钮。此外,所显示的图像观察结果选择按钮B650的种类预先设定。在本实施方式中,与图49表示的10个图像观察结果相对应的10个图像观察结果选择按钮B650设于图像观察结果筛选区域716。另外,在图65的例子中,除了与10个图像观察结果相对应的10个图像观察结果选择按钮B650之外,记载为“全部类别”的图像观察结果选择按钮B650也设于图像观察结果筛选区域716。记载为“全部类别”的图像观察结果选择按钮B650是在不选择图像观察结果的情况下使用的按钮。
在基本画面K2刚生成之后,记载为“全部类别”的图像观察结果选择按钮B650成为了选择状态。这是为了在由用户选择图像观察结果选择按钮B650之前,示出全部的图像观察结果成为了显示对象。即,在基本画面K2刚生成之后,在病例显示区域710显示全部的检索查询图像的相似病例。
在图64的S661中,输入控制部103检测用户对图像观察结果选择按钮B650和病名列表显示区域730的操作。
在病例显示区域710中,与实施方式1相同地,按照相对于从检索查询图像的关心区域提取出的图像特征集的距离从小到大的顺序,显示有储存于相似病例数据4000的相似病例。在此,用户通过进一步输入要重视的图像观察结果、病名,能够筛选显示于病例显示区域710的相似病例。在图66的例子中,图像观察结果选择按钮B650中的、“多发粒状阴影”和“空洞性结节”被选择。因此,显示控制部104将显示于病例显示区域710的相似病例筛选成与“多发粒状阴影”和“空洞性结节”的图像观察结果有关系的相似病例来显示。
为了实现这一点,在本实施方式中,作为相似病例数据4000,采用在实施方式2中进行说明的图62所示的相似病例数据4000。图62所示的相似病例数据4000按每个关心区域具备图像观察结果ID4950。作为图像观察结果ID4950,可采用用于识别与在检索时(S612)输入的图像观察结果同体系的图像观察结果的ID。当由输入控制部103检测到选择图像观察结果选择按钮B650的操作时,显示控制部104实施将显示于病例显示区域710的相似病例筛选成具有与所选择的图像观察结果选择按钮B650相对应的图像观察结果ID4950的相似病例的处理。此时,显示控制部104根据筛选结果更新病例件数显示区域714和病名列表显示区域730的显示。
在图66的例子中,“多发性粒状阴影”和“空洞性结节”的病例数是21件,因此,在病例件数显示区域714显示为“21件”。另外,在图66的例子中,选择了“多发性粒状阴影”和“空洞性结节”,因此,在疾患条件显示区域715中显示为“多发性粒状阴影空洞性结节”。另外,在图66的例子中,具有多发性粒状阴影和空洞性结节的图像观察结果的相似病例中的、大分类病名是分支杆菌病的相似病例为11件、大分类病名是真菌病的相似病例为6件、大分类病名是非肿瘤性的相似病例为4件。因此,病名列表显示区域730更新成该内容。另外,详细分类病名也根据筛选的结果来更新。
在上述内容中,作为将显示于病例显示区域710的相似病例筛选的方法,采用了使用对相似病例数据4000所赋予的图像观察结果ID4950的方法,但这是一例。也可以采用在实施方式2中进行说明的、增大图像特征集中的受重视的维度的加权来进行检索的方法。具体而言,显示控制部104针对所选择的图像观察结果,将预先设定的维度的权重设定得较大,来算出检索查询图像的图像特征集与显示于病例显示区域710的相似病例的图像特征集之间的距离即可。并且,显示控制部104将距离为预定的阈值以下的相似病例显示于病例显示区域710即可。
接着,对针对病名列表显示区域730的操作进行说明。在图64的S661中,使用图67所示的流程图来对输入了对病名列表显示区域730的操作时的信息终端100的处理(并发病名列表处理)进行说明。在实施方式3中,与实施方式1的不同点在于S3107。在S3107中,在“图像观察结果筛选区域716中的筛选条件(按下的图像观察结果)是两个以上”的情况下(S3107中为是),处理进入S3300,在非“图像观察结果筛选区域716中的筛选条件(按下的图像观察结果)是两个以上”的情况下(S3107中为否),处理进入S3200。以后的处理与实施方式1的处理(图35)同样。
根据实施方式3,与实施方式1同样地显示并发病名列表750,因此,用户容易对诊断对象病例进行是否产生了多个疾患的诊断。另外,在实施方式3中,在检索中(图64的S661)输入的图像观察结果是两个以上的情况下显示并发病名列表750。也就是说,仅在多个疾患并发的可能性较高的情况下,显示并发病名列表750。因而,在多个疾患并发的可能性较低的情况下,医生能够专心于单一疾患的诊断。
(实施方式4)
实施方式4以由信息终端100提取图像特征为特征。图68是实施方式4中的信息终端100、医用信息管理系统200以及病例检索系统300的框图。
与图2的不同点在于,在信息终端100追加有图像特征提取部112这一点、以及从病例检索系统300省略了图像特征提取部302这一点。
图69是示出信息终端100从医用信息管理系统200取得诊断对象病例之后、到病例检索系统300接受相似病例检索的请求为止的处理的时序图。
与图17的不同点在于,在ROI管理部105将诊断对象病例的切片图像发送给通信控制部107的处理(S600)之后,图像特征的提取由信息终端100进行(S601a),提取出的图像特征与切片图像一并被发送给病例检索系统300(S602a)。图像特征的提取(S601a)的处理内容与图像特征的提取由病例检索系统300进行的情况相同。
图70是示出病例检索系统300接受相似病例检索的请求之后、到将相似病例检索结果返回给信息终端100为止的处理的时序图。与图21的不同点在于,图像特征的提取在信息终端100侧进行,因此,在图70中,省略了图21中的图像特征的提取(S610)。
本公开能够利用于在诊断作为读片对象的医用图像时提示作为参考的相似病例的相似病例检索装置、以及研修读片医生用的读片教育装置等。
附图标记说明
100 信息终端
101 显示器
101a 显示器
101b 显示器
102 操作部
103 输入控制部
104 显示控制部
105 管理部
106 病名列表管理部
107 通信控制部
108 病名列表管理部
112 图像特征提取部
200 医用信息管理系统
201 患者信息储存部
202 患者信息管理部
203 医用图像数据储存部
204 医用图像数据管理部
205 诊断报告管理部
206 通信控制部
300 病例检索系统
301 相似病例数据储存部
302 图像特征提取部
303 相似病例检索部
304 疾患体系定义部
305 通信控制部
306 图像观察结果判定部
400 网络

Claims (17)

1.一种信息终端的控制方法,所述信息终端与病例检索系统连接,并具有显示器,所述病例检索系统参照登记医用图像的医用图像数据库来检索医用图像,所述控制方法使所述信息终端的计算机进行:
检测表示读片对象的医用图像中的至少一个关心区域的指定信息,
根据由所述指定信息表示的关心区域,从所述病例检索系统接收与所述关心区域的特征量具有预定的相似度的多个相似医用图像,
所述多个相似医用图像具有表示至少一个病名的信息,
使所述显示器显示如下的显示画面,该显示画面包括显示所述多个相似医用图像的第1显示区域和用于病名选择的第2显示区域,
在所述第2显示区域,
在所述指定信息表示一个关心区域的情况下,显示基于所述表示至少一个病名的信息的列表,
在所述列表中基于确定一个病名的信息以及确定多个病名的信息而显示多个病名,在从所述显示的多个病名中选择了病名的情况下,从显示于所述第1显示区域的多个相似医用图像中,选择并显示与如下的信息相对应的相似医用图像,该信息是确定与所述选择出的病名相对应的病名的信息;
在所述指定信息表示两个以上的关心区域的情况下,显示基于所述表示至少一个病名的信息的并发病名的组合列表,
在所述组合列表中基于确定一个病名的信息以及确定多个病名的信息而显示多个病名,在从所述显示的多个病名中选择了病名的情况下,从显示于所述第1显示区域的多个相似医用图像中,选择并显示与如下的信息相对应的相似医用图像,该信息是确定与所述选择出的病名相对应的病名的信息。
2.根据权利要求1所述的控制方法,
所述并发病名的组合列表插入在所述列表中。
3.根据权利要求1所述的控制方法,
所述表示至少一个病名的信息包括:含有确定一个病名的信息且不含有确定多个病名的信息的相似病例数据中所含有的相似医用图像、以及含有确定所述多个病名的信息的相似病例数据中所含有的相似医用图像。
4.根据权利要求3所述的控制方法,
在所述指定信息表示一个关心区域的情况下,显示基于所述含有确定一个病名的信息且不含有确定多个病名的信息的相似病例数据中所含有的相似医用图像的列表,
在所述指定信息表示两个以上的关心区域的情况下,显示基于所述含有确定多个病名的信息的相似病例数据中所含有的相似医用图像的并发病名的组合列表。
5.根据权利要求1所述的控制方法,
在所述第2显示区域显示所述病名的组合列表的条件是:
所述指定信息表示两个以上的关心区域,且所述两个以上的关心区域含有两种以上的图像观察结果。
6.一种信息终端的控制方法,所述信息终端与病例检索系统连接,并具有显示器,所述病例检索系统参照登记医用图像的医用图像数据库来检索医用图像,所述控制方法使所述信息终端的计算机进行:
检测表示读片对象的医用图像中的关心区域的指定信息,
检测表示所述读片对象的医用图像中的至少一个图像观察结果的指定信息,
根据由所述指定信息表示的关心区域、以及由所述指定信息表示的图像观察结果,从所述病例检索系统接收与所述关心区域的特征量具有预定的相似度的多个相似医用图像,
所述多个相似医用图像具有表示至少一个病名的信息,
使所述显示器显示如下的显示画面,该显示画面包括显示所述多个相似医用图像的第1显示区域和用于病名选择的第2显示区域,
在所述第2显示区域,
在所述指定信息表示一个所述图像观察结果的情况下,显示基于所述表示至少一个病名的信息的列表,
在所述列表中基于确定一个病名的信息以及确定多个病名的信息而显示多个病名,在从所述显示的多个病名中选择了病名的情况下,从显示于所述第1显示区域的多个相似医用图像中,选择并显示与如下的信息相对应的相似医用图像,该信息是确定与所述选择出的病名相对应的病名的信息;
在所述指定信息表示两个以上的所述图像观察结果的情况下,显示基于所述表示至少一个病名的信息的并发病名的组合列表,
在所述组合列表中基于确定一个病名的信息以及确定多个病名的信息而显示多个病名,在从所述显示的多个病名中选择了病名的情况下,从显示于所述第1显示区域的多个相似医用图像中,选择并显示与如下的信息相对应的相似医用图像,该信息是确定与所述选择出的病名相对应的病名的信息。
7.根据权利要求6所述的控制方法,
所述表示至少一个病名的信息包括:含有确定一个病名的信息且不含有确定多个病名的信息的相似病例数据中所含有的相似医用图像、以及含有确定所述多个病名的信息的相似病例数据中所含有的相似医用图像。
8.根据权利要求7所述的控制方法,
在所述指定信息表示一个关心区域的情况下,显示基于所述含有确定一个病名的信息且不含有确定多个病名的信息的相似病例数据中所含有的相似医用图像的列表,
在所述指定信息表示两个以上的关心区域的情况下,显示基于所述含有确定多个病名的信息的相似病例数据中所含有的相似医用图像的并发病名的组合列表。
9.一种信息终端的控制方法,所述信息终端与病例检索系统连接,并具有显示器,所述病例检索系统参照登记医用图像的医用图像数据库来检索医用图像,所述控制方法使所述信息终端的计算机进行:
检测表示读片对象的医用图像中的关心区域的指定信息,
根据由所述指定信息表示的关心区域,从所述病例检索系统接收与所述关心区域的特征量具有预定的相似度的多个相似医用图像,
所述多个相似医用图像具有表示至少一个病名的信息,
使所述显示器显示如下的显示画面,该显示画面包括显示所述多个相似医用图像的第1显示区域、用于病名选择的第2显示区域、以及用于选择图像观察结果的第3显示区域,
在所述第2显示区域,
在所述第3显示区域中选择的图像观察结果是一个的情况下,显示基于所述表示至少一个病名的信息的列表,
在所述列表中基于确定一个病名的信息以及确定多个病名的信息而显示多个病名,在从所述显示的多个病名中选择了病名的情况下,从显示于所述第1显示区域的多个相似医用图像中,选择并显示与如下的信息相对应的相似医用图像,该信息是确定与所述选择出的病名相对应的病名的信息;
在所述第3显示区域中选择的图像观察结果是两个以上的情况下,显示基于所述表示至少一个病名的信息的并发病名的组合列表,
在所述组合列表中基于确定一个病名的信息以及确定多个病名的信息而显示多个病名,在从所述显示的多个病名中选择了病名的情况下,从显示于所述第1显示区域的多个相似医用图像中,选择并显示与如下的信息相对应的相似医用图像,该信息是确定与所述选择出的病名相对应的病名的信息。
10.根据权利要求9所述的控制方法,
所述表示至少一个病名的信息包括:含有确定一个病名的信息且不含有确定多个病名的信息的相似病例数据中所含有的相似医用图像、以及含有确定所述多个病名的信息的相似病例数据中所含有的相似医用图像。
11.根据权利要求10所述的控制方法,
在所述指定信息表示一个关心区域的情况下,显示基于所述含有确定一个病名的信息且不含有确定多个病名的信息的相似病例数据中所含有的相似医用图像的列表,
在所述指定信息表示两个以上的关心区域的情况下,显示基于所述含有确定多个病名的信息的相似病例数据中所含有的相似医用图像的并发病名的组合列表。
12.根据权利要求1、6以及9中的任一项所述的控制方法,
在所述第2显示区域中,
所述确定多个病名的信息包括第1信息,所述第1信息包括确定第1病名的第2信息以及确定第2病名的第3信息,所述第2病名是第1并发病名,所述第1并发病名是与由所述第1病名确定的病症并发的病名,
在从所述并发病名的组合列表中选择了所述第1并发病名的情况下,从显示于所述第1显示区域的多个相似医用图像中,选择并显示在含有所述第1信息的相似病例数据中所含有的相似医用图像。
13.根据权利要求1、6以及9中任一项所述的控制方法,
确定多个病名的信息包括第1信息,所述第1信息包括确定第1病名的第2信息以及确定第2病名的第3信息,所述第2病名是第1并发病名,所述第1并发病名是与由所述第1病名确定的病症并发的病名,
显示含有所述第1信息的相似病例数据的数量。
14.根据权利要求13所述的控制方法,
所述并发病名的组合列表显示表示存在如下病例的信息,该病例没有与由所述第1病名确定的病症并发的病症。
15.根据权利要求14所述的控制方法,
所述并发病名的组合列表显示没有与由所述第1病名确定的病症并发的病症的相似病例数据的件数。
16.根据权利要求1、6以及9中任一项所述的控制方法,
所述控制方法使所述信息终端的计算机进行:
检测表示所述读片对象的医用图像中的关心区域的指定信息,
将表示所述关心区域的特征量的信息发送给所述病例检索系统,
从所述病例检索系统接收与所述关心区域的特征量具有所述预定的相似度的相似医用图像。
17.权利要求1、6以及9中任一项所述的控制方法,
所述控制方法使所述信息终端的计算机进行:
检测表示所述读片对象的医用图像中的关心区域的指定信息,
将所述读片对象的医用图像以及所述指定信息发送给所述病例检索系统,
从所述病例检索系统接收与从所述读片对象的医用图像以及所述指定信息获得的所述关心区域的特征量具有所述预定的相似度的相似医用图像。
CN201610805940.7A 2015-09-29 2016-09-06 控制方法 Active CN106557647B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2015-191313 2015-09-29
JP2015191313 2015-09-29

Publications (2)

Publication Number Publication Date
CN106557647A CN106557647A (zh) 2017-04-05
CN106557647B true CN106557647B (zh) 2022-03-22

Family

ID=56943413

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610805940.7A Active CN106557647B (zh) 2015-09-29 2016-09-06 控制方法

Country Status (4)

Country Link
US (2) US10593430B2 (zh)
EP (1) EP3151142B1 (zh)
JP (1) JP6697743B2 (zh)
CN (1) CN106557647B (zh)

Families Citing this family (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
AU2015234329A1 (en) * 2015-09-30 2017-04-13 Canon Kabushiki Kaisha Method, system and apparatus for processing an image
CN106560827B (zh) * 2015-09-30 2021-11-26 松下知识产权经营株式会社 控制方法
JP6818424B2 (ja) * 2016-04-13 2021-01-20 キヤノン株式会社 診断支援装置、情報処理方法、診断支援システム及びプログラム
WO2019030906A1 (ja) 2017-08-10 2019-02-14 オリンパス株式会社 観察システム及び情報管理方法
JP6807820B2 (ja) * 2017-10-31 2021-01-06 富士フイルム株式会社 画像検索装置、方法およびプログラム
WO2019086586A1 (en) * 2017-11-02 2019-05-09 Koninklijke Philips N.V. A method and apparatus for analysing echocardiograms
EP3506279A1 (en) * 2018-01-02 2019-07-03 Koninklijke Philips N.V. Automatic diagnosis report preparation
US10916343B2 (en) 2018-04-26 2021-02-09 International Business Machines Corporation Reduce discrepancy of human annotators in medical imaging by automatic visual comparison to similar cases
EP3806101A4 (en) 2018-05-28 2021-07-21 FUJIFILM Corporation TRAINING DATA COLLECTION DEVICE, TRAINING DATA COLLECTION METHOD AND PROGRAM, TRAINING SYSTEM, TRAINED MODEL AND ENDOSCOPE IMAGE PROCESSING DEVICE
JP6987721B2 (ja) * 2018-08-31 2022-01-05 富士フイルム株式会社 画像処理装置、方法およびプログラム
CN113556978A (zh) * 2018-12-11 2021-10-26 深圳市智慧健康产业发展有限公司 一种b超智能辅助采集方法及系统
JP7308258B2 (ja) * 2019-02-19 2023-07-13 富士フイルム株式会社 医療画像処理装置及び医療画像処理装置の作動方法
EP3912132A4 (en) 2019-02-28 2022-12-07 Stats Llc SYSTEM AND METHOD FOR GENERATION OF PLAYER TRACKING DATA FROM BROADCAST VIDEO
US20220327157A1 (en) * 2019-12-25 2022-10-13 Nec Corporation Image retrieval system, image retrieval method, and storage medium
JP2021118837A (ja) * 2020-01-30 2021-08-12 コニカミノルタ株式会社 放射線撮影制御装置、放射線撮影システム、表示制御方法及びプログラム
JP7048024B1 (ja) 2021-09-30 2022-04-05 株式会社ShareFair 情報処理装置、情報処理方法、および情報処理プログラム

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101281558A (zh) * 2007-04-06 2008-10-08 株式会社东芝 图像管理系统、报告制成终端、医用图像管理服务器、图像管理方法
CN102958425A (zh) * 2011-06-30 2013-03-06 松下电器产业株式会社 类似病例检索装置以及类似病例检索方法
CN102985924A (zh) * 2011-02-14 2013-03-20 松下电器产业株式会社 相似病例检索装置以及相似病例检索方法
CN103200861A (zh) * 2011-11-04 2013-07-10 松下电器产业株式会社 类似病例检索装置以及类似病例检索方法
CN104823211A (zh) * 2012-11-30 2015-08-05 富士胶片株式会社 医疗检查结果显示装置、其工作方法及程序

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6901156B2 (en) * 2000-02-04 2005-05-31 Arch Development Corporation Method, system and computer readable medium for an intelligent search workstation for computer assisted interpretation of medical images
US7194119B2 (en) * 2002-11-21 2007-03-20 Siemens Aktiengesellschaft Method and system for retrieving a medical picture
EP1665113A2 (en) * 2003-09-17 2006-06-07 Koninklijke Philips Electronics N.V. Repeated examination reporting
JP2007287018A (ja) * 2006-04-19 2007-11-01 Fujifilm Corp 診断支援システム
JP4979334B2 (ja) * 2006-10-18 2012-07-18 富士フイルム株式会社 医用画像読影支援システム及びプログラム
JP5128161B2 (ja) 2007-03-30 2013-01-23 富士フイルム株式会社 画像診断支援装置及びシステム
JP2010017410A (ja) 2008-07-11 2010-01-28 Fujifilm Corp 類似症例画像検索システム及び類似症例画像検索装置
JP5173700B2 (ja) 2008-09-25 2013-04-03 キヤノン株式会社 データ検索装置およびその制御方法、データ検索システム
JP5502346B2 (ja) * 2009-03-09 2014-05-28 富士フイルム株式会社 症例画像登録装置、方法およびプログラムならびに症例画像検索装置、方法、プログラムおよびシステム
JP5383431B2 (ja) * 2009-10-27 2014-01-08 キヤノン株式会社 情報処理装置、情報処理方法及びプログラム
US20120283574A1 (en) * 2011-05-06 2012-11-08 Park Sun Young Diagnosis Support System Providing Guidance to a User by Automated Retrieval of Similar Cancer Images with User Feedback
JP6316546B2 (ja) 2013-06-05 2018-04-25 キヤノンメディカルシステムズ株式会社 治療計画策定支援装置及び治療計画策定支援システム
JP5661890B2 (ja) 2013-10-03 2015-01-28 キヤノン株式会社 情報処理装置、情報処理方法及びプログラム
US9943455B2 (en) * 2015-04-30 2018-04-17 Crescia E. Hagler “P.C. Bubble” protective bubble for mobility vehicle

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101281558A (zh) * 2007-04-06 2008-10-08 株式会社东芝 图像管理系统、报告制成终端、医用图像管理服务器、图像管理方法
CN102985924A (zh) * 2011-02-14 2013-03-20 松下电器产业株式会社 相似病例检索装置以及相似病例检索方法
CN102958425A (zh) * 2011-06-30 2013-03-06 松下电器产业株式会社 类似病例检索装置以及类似病例检索方法
CN103200861A (zh) * 2011-11-04 2013-07-10 松下电器产业株式会社 类似病例检索装置以及类似病例检索方法
CN104823211A (zh) * 2012-11-30 2015-08-05 富士胶片株式会社 医疗检查结果显示装置、其工作方法及程序

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
Automated Storage and Retrieval of Thin-Section CT Images to Assist Diagnosis: System Description and Preliminary Assessment;Alex M. Aisen etc.;《Radiology》;20030701;第228卷(第1期);第265-270页 *

Also Published As

Publication number Publication date
US10593430B2 (en) 2020-03-17
US20170091413A1 (en) 2017-03-30
JP6697743B2 (ja) 2020-05-27
US20200176123A1 (en) 2020-06-04
US11322242B2 (en) 2022-05-03
CN106557647A (zh) 2017-04-05
JP2017068838A (ja) 2017-04-06
EP3151142B1 (en) 2023-06-21
EP3151142A1 (en) 2017-04-05

Similar Documents

Publication Publication Date Title
CN106557647B (zh) 控制方法
JP6907381B2 (ja) 制御方法及びプログラム
CN106560827B (zh) 控制方法
US20200320336A1 (en) Control method and recording medium
US11179036B2 (en) Control method of information terminal and computer-readable recording medium
JP6799115B2 (ja) 情報端末の制御方法及びプログラム
US11185228B2 (en) Control method of information terminal and computer-readable recording medium
JP6578135B2 (ja) 制御方法及びプログラム
US10261681B2 (en) Method for displaying a medical image and a plurality of similar medical images obtained from a case search system
CN105912831B (zh) 信息终端的控制方法
JP2018130408A (ja) 情報端末の制御方法
JP2018142072A (ja) 情報端末の制御方法及びプログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant