CN113327665A - 医用信息处理系统以及医用信息处理方法 - Google Patents
医用信息处理系统以及医用信息处理方法 Download PDFInfo
- Publication number
- CN113327665A CN113327665A CN202110212071.8A CN202110212071A CN113327665A CN 113327665 A CN113327665 A CN 113327665A CN 202110212071 A CN202110212071 A CN 202110212071A CN 113327665 A CN113327665 A CN 113327665A
- Authority
- CN
- China
- Prior art keywords
- abnormality
- information
- medical
- urgency
- confirmation
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000010365 information processing Effects 0.000 title claims abstract description 65
- 238000003672 processing method Methods 0.000 title claims description 8
- 230000005856 abnormality Effects 0.000 claims abstract description 233
- 238000012790 confirmation Methods 0.000 claims abstract description 143
- 238000001514 detection method Methods 0.000 claims abstract description 126
- 201000010099 disease Diseases 0.000 claims abstract description 45
- 208000037265 diseases, disorders, signs and symptoms Diseases 0.000 claims abstract description 45
- 238000007689 inspection Methods 0.000 claims abstract description 16
- 230000004044 response Effects 0.000 claims description 10
- 230000002159 abnormal effect Effects 0.000 claims description 3
- 230000006870 function Effects 0.000 description 127
- 238000012545 processing Methods 0.000 description 61
- 230000015654 memory Effects 0.000 description 50
- 238000004891 communication Methods 0.000 description 42
- 238000000034 method Methods 0.000 description 27
- 230000008569 process Effects 0.000 description 19
- 238000010586 diagram Methods 0.000 description 16
- 238000003745 diagnosis Methods 0.000 description 15
- 238000004458 analytical method Methods 0.000 description 12
- 230000004048 modification Effects 0.000 description 12
- 238000012986 modification Methods 0.000 description 12
- 230000005855 radiation Effects 0.000 description 10
- 238000003860 storage Methods 0.000 description 8
- 208000006011 Stroke Diseases 0.000 description 6
- 238000003384 imaging method Methods 0.000 description 6
- 206010008111 Cerebral haemorrhage Diseases 0.000 description 5
- 208000002251 Dissecting Aneurysm Diseases 0.000 description 5
- 206010002895 aortic dissection Diseases 0.000 description 5
- 238000011156 evaluation Methods 0.000 description 5
- 208000030090 Acute Disease Diseases 0.000 description 4
- 238000002591 computed tomography Methods 0.000 description 4
- 239000000284 extract Substances 0.000 description 4
- 230000000747 cardiac effect Effects 0.000 description 3
- 208000020658 intracerebral hemorrhage Diseases 0.000 description 3
- 239000004065 semiconductor Substances 0.000 description 3
- 206010028980 Neoplasm Diseases 0.000 description 2
- 206010056342 Pulmonary mass Diseases 0.000 description 2
- 230000001154 acute effect Effects 0.000 description 2
- 210000004556 brain Anatomy 0.000 description 2
- 206010008118 cerebral infarction Diseases 0.000 description 2
- 208000026106 cerebrovascular disease Diseases 0.000 description 2
- 238000004195 computer-aided diagnosis Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000002595 magnetic resonance imaging Methods 0.000 description 2
- 238000009877 rendering Methods 0.000 description 2
- 206010003011 Appendicitis Diseases 0.000 description 1
- 206010008190 Cerebrovascular accident Diseases 0.000 description 1
- 206010000891 acute myocardial infarction Diseases 0.000 description 1
- 230000004931 aggregating effect Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000002059 diagnostic imaging Methods 0.000 description 1
- 238000009826 distribution Methods 0.000 description 1
- 229940079593 drug Drugs 0.000 description 1
- 239000003814 drug Substances 0.000 description 1
- 230000036541 health Effects 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 210000004072 lung Anatomy 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000001151 other effect Effects 0.000 description 1
- 230000002980 postoperative effect Effects 0.000 description 1
- 238000002360 preparation method Methods 0.000 description 1
- 238000004393 prognosis Methods 0.000 description 1
- 238000011084 recovery Methods 0.000 description 1
- 238000011946 reduction process Methods 0.000 description 1
- 230000011218 segmentation Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H30/00—ICT specially adapted for the handling or processing of medical images
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0012—Biomedical image inspection
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H10/00—ICT specially adapted for the handling or processing of patient-related medical or healthcare data
- G16H10/60—ICT specially adapted for the handling or processing of patient-related medical or healthcare data for patient-specific data, e.g. for electronic patient records
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H15/00—ICT specially adapted for medical reports, e.g. generation or transmission thereof
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H20/00—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H30/00—ICT specially adapted for the handling or processing of medical images
- G16H30/20—ICT specially adapted for the handling or processing of medical images for handling medical images, e.g. DICOM, HL7 or PACS
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H30/00—ICT specially adapted for the handling or processing of medical images
- G16H30/40—ICT specially adapted for the handling or processing of medical images for processing medical images, e.g. editing
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H40/00—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
- G16H40/60—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices
- G16H40/67—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices for remote operation
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H50/00—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
- G16H50/20—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for computer-aided diagnosis, e.g. based on medical expert systems
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H50/00—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
- G16H50/30—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for calculating health indices; for individual health risk assessment
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/05—Detecting, measuring or recording for diagnosis by means of electric currents or magnetic fields; Measuring using microwaves or radio waves
- A61B5/055—Detecting, measuring or recording for diagnosis by means of electric currents or magnetic fields; Measuring using microwaves or radio waves involving electronic [EMR] or nuclear [NMR] magnetic resonance, e.g. magnetic resonance imaging
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/50—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment specially adapted for specific body parts; specially adapted for specific clinical applications
- A61B6/504—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment specially adapted for specific body parts; specially adapted for specific clinical applications for diagnosis of blood vessels, e.g. by angiography
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/04812—Interaction techniques based on cursor appearance or behaviour, e.g. being affected by the presence of displayed objects
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/0482—Interaction with lists of selectable items, e.g. menus
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
- G06T2207/30101—Blood vessel; Artery; Vein; Vascular
Landscapes
- Health & Medical Sciences (AREA)
- Engineering & Computer Science (AREA)
- Medical Informatics (AREA)
- Public Health (AREA)
- General Health & Medical Sciences (AREA)
- Epidemiology (AREA)
- Primary Health Care (AREA)
- Biomedical Technology (AREA)
- Radiology & Medical Imaging (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Pathology (AREA)
- Databases & Information Systems (AREA)
- Data Mining & Analysis (AREA)
- Quality & Reliability (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Business, Economics & Management (AREA)
- General Business, Economics & Management (AREA)
- Medical Treatment And Welfare Office Work (AREA)
- Measuring And Recording Apparatus For Diagnosis (AREA)
Abstract
提供与对医用图像中检测出的异常确认正确性相关的信息。本实施方式的医用信息处理系统具备紧急性判断部和显示部。所述紧急性判断部基于被输入与被检体相关的医用图像的至少一个异常检测算法的种类、或者通过向所述异常检测算法输入所述医用图像而检测出的异常所关联的信息,判断与所述异常相关的疾病的紧急性的有无。所述显示部在判断为存在所述紧急性的情况下,在表示检查命令的一览的检查列表中,将与所述异常的确认相关的确认信息以及表示所述紧急性的紧急信息,和与所述异常相关的检查命令相邻地显示。
Description
相关申请的参照:
本申请基于2020年2月28日申请的日本专利申请2020-033940号以及2021年1月13日申请的日本专利申请2021-003734号,并要求该两个申请的优先权,该两个申请的全部内容通过引用合并于此。
技术领域
实施方式一般涉及医用信息处理系统以及医用信息处理方法。
背景技术
以往,存在显示由放射科医生进行图像诊断的检查的顺序的工作清单。放射科医生根据显示的工作清单输入与检查的显示相关的指示。此时,与所指示的检查相关的医用图像显示在查看器上。放射科医生对所显示的医用图像进行阅片,向也被称作图像诊断报告的阅片报告记载诊断结果。例如,当发生急性病例等紧急的阅片的情况下,在工作清单显示表示该紧急的标记。此时,放射科医生优先对附带有紧急的标记的检查进行阅片。
近年来,由于针对医用图像的图像处理技术的进步,逐渐能够通过与例如计算机辅助诊断(Computer-Aided Diagnosis:以下称作CAD)相关的计算机算法来发现医用图像中的异常。通过计算机算法发现的异常例如也包括急性阑尾炎、急性心肌梗塞、脑梗塞等急性疾病。急性疾病是需要紧急地进行诊疗、治疗的异常。然而,基于计算机算法的异常的检测精度并不完美。即,通过计算机算法检测出的急性疾病并非全部正确。因此,有时放射科医生对通过计算机算法检测出的急性疾病相关的医用图像优先地进行阅片。此时存在发生下述事态的问题:该检测是计算机算法的误检测,无需放射科医生紧急阅片。
发明内容
实施方式的医用信息处理系统具备处理电路与显示器。处理电路基于被输入与被检体相关的医用图像的至少一个异常检测算法的种类、或者通过所述医用图像向异常检测算法的输入而检测出的异常所关联的信息,来判断与异常相关的疾病的紧急性的有无。显示器在判断为存在紧急性的情况下,在表示检查命令的一览的检查列表中,将与异常的确认相关的确认信息以及表示紧急性的紧急信息,和与异常相关的检查命令相邻地显示。
附图说明
图1是表示实施方式的医用信息处理系统的构成例的图。
图2是表示实施方式的确认信息提供处理的顺序的一例的流程图。
图3是表示实施方式的附加目的对应表的一例的图。
图4是表示在实施方式的检查列表中,确认信息与紧急信息的一例的图。
图5是表示实施方式的、光标移动到与确认信息中的“主动脉夹层”对应的缩略图像的显示区域内的情况下的放大图像的显示例的图。
图6是表示在实施方式的与图4所示的“主动脉夹层”相关的确认信息中,附带有链接信息的缩略图像的一例的图。
图7是表示实施方式的、以确认布局显示的关键图像与确认参照图像的一例的图。
图8是表示在实施方式的变形例的检查列表中,确认信息与紧急信息的一例的图。
图9是表示在实施方式的变形例的检查列表中,确认信息与紧急信息的一例的图。
具体实施方式
以下,参照附图对医用信息处理系统、医用信息处理方法以及医用信息处理程序详细地进行说明。在以下的实施方式中,对于标注了相同的参照附图标记的部分设为进行相同的动作,适当省略重复的说明。另外,本申请的医用信息处理系统不限于以下所示的实施方式。
(实施方式)
实施方式的医用信息处理系统具备处理电路与显示器。处理电路基于被输入与被检体相关的医用图像的至少一个异常检测算法的种类、或者通过所述医用图像向异常检测算法的输入而检测出的异常所关联的信息,来判断与异常相关的疾病的紧急性的有无。显示器在判断为存在紧急性的情况下,在表示检查命令的一览的检查列表中,将与异常的确认相关的确认信息以及表示紧急性的紧急信息,和与异常相关的检查命令相邻地显示。
对实施方式的医用信息处理系统的整体构成进行说明。图1是表示实施方式的医用信息处理系统1的构成例的图。医用信息处理系统1具有电子病历服务器装置3、放射线部门信息服务器装置5、医用图像诊断装置7、医用图像管理服务器装置9、医用信息处理服务器装置11、以及客户端装置20。另外,客户端装置20也可以作为对每个上述的各种服务器装置设有一个或者多个的终端装置而设于医用信息处理系统1。如图1所示,医用信息处理系统1记载为客户服务器系统,但不限于此。例如,医用信息处理系统1也可以如图1示出的虚线2的框内所示,由医用信息处理服务器装置11、以及客户端装置20构成。此外,医用信息处理系统1中的各种服务器装置也可以作为将各个服务器装置所具有的功能统合而成的统合服务器来实现。即,医用信息处理系统1中的服务器装置也可以由一个统合服务器实现。
此外,医用信息处理系统1也可以作为单独的医用信息处理装置来实现。此时,医用信息处理装置具有:根据需要而将第一通信接口13与第二通信接口21中的功能等统合而成的通信接口、根据需要而将第一存储器15与第二存储器23中的存储内容等统合而成的存储器(存储部)、根据需要而将第一处理电路17与第二处理电路25中的功能等统合而成的处理电路(处理部)、显示器27(显示部)、以及输入接口29(输入部)。
电子病历服务器装置3、以及电连接于电子病历服务器装置3的终端装置(以下称作电子病历终端装置)构成电子病历系统。电子病历系统是管理用于记录诊疗内容的电子病历的信息系统。电子病历服务器装置3是执行与电子病历的管理相关的处理的计算机装置。电子病历终端装置由进行电子病历的输入/参照的医师/护士等利用。电子病历服务器装置3以及电子病历终端装置连接于通信网络。电子病历终端装置通过临床医生的指示,输入针对被检体的检查命令。在检查命令是与图像诊断相关的被检体的摄影的情况下,检查命令包括例如检查部位、检查种类(与医用设备(modality)等的检查内容相关的信息)、疾病的名称(以下称作疾病名)、检查目的等。此外,检查命令也可以还包括接受检查的被检体的患者ID、患者姓名、检查ID以及检查日期等信息。电子病历服务器装置3与检查命令的输入相应地将检查命令与被检体的患者信息等一同向放射线部门信息服务器装置5发送。
放射线部门信息服务器装置5、以及电连接于放射线部门信息服务器装置5的终端装置(以下称作放射线部门终端装置)构成放射线部门信息系统(以下称作RIS(RadiologyInformation Systems))。RIS是管理医院内的放射线部门的信息的信息系统。放射线部门信息服务器装置(以下称作RIS服务器)5是执行放射线部门的信息的管理所涉及的处理的计算机装置。作为动作的一例,RIS服务器5从电子病历服务器装置3接受检查命令,从检查命令中取得与医用图像诊断装置7相关的信息(例如检查种类)等。RIS服务器5向通过检查命令而确定的医用图像诊断装置7发送该检查命令。另外,在向医用图像诊断装置7发送检查命令时,RIS服务器5也可以向DICOM(Digital Imaging and Communications inMedicine:医学数字成像与通信)标签等附加患者ID、检查日期等信息。放射线部门终端装置也可以用于放射科医生制作与医用图像相关的阅片报告。
医用图像诊断装置7例如是X射线诊断装置、X射线计算机断层摄影(CT:CompuedTomography)装置以及磁共振成像(MRI:Magnetic Resonance Imaging)装置等取得医用图像的装置。医用图像诊断装置7基于来自RIS服务器5的检查命令,响应由技师等开始摄影的操作,执行对被检体的摄影。通过摄影的执行,医用图像诊断装置7收集表示被检体的体内组织的状态的数据。医用图像诊断装置7基于该数据生成医用图像,并将生成的医用图像与检查命令一同向医用图像管理服务器装置9发送。此外,医用图像诊断装置7将生成的医用图像向医用信息处理服务器装置11发送。
医用图像管理服务器装置9、以及电连接于医用图像管理服务器装置9的终端装置(以下称作图像管理终端装置)构成医用图像管理系统(以下称作PACS(PictureArchivingand Communication Systems))。PACS是管理X射线CT图像、MR图像等医用图像、以及也被称作图像诊断报告的阅片报告的信息系统。医用图像管理服务器装置(以下称作PACS服务器)9是执行与医用图像的管理相关的处理的计算机装置。PACS服务器9从医用图像诊断装置7接收医用图像以及检查命令后,将医用图像与检查命令建立关联地存储。医用图像附带有DICOM的元信息(以下称作附带信息)。附带信息具有患者姓名、患者ID、以及与该医用图像相关的说明(例如切片厚度、切片编号、造影的有无等)等。图像管理终端装置例如用于放射科医生制作阅片报告。
医用信息处理服务器装置11具有第一通信接口13、第一存储器15、以及第一处理电路17。另外,第一存储器15与第一处理电路17也可以组入PACS服务器9等其他服务器装置中。
第一通信接口13例如与电子病历服务器装置3、RIS服务器5、PACS服务器9、第二通信接口21之间进行数据通信。通过第一通信接口13进行通信的标准可以是任何标准,例如可列举出HL7(Health Level 7:卫生信息交换标准)、DICOM、或者该两方等。第一通信接口13将通过与各种服务器装置进行的数据通信而取得的数据向第一存储器15输出。第一通信接口13经由第二通信接口21接收向客户端装置20中的输入接口29输入的输入操作的电信号。第一通信接口13将接收到的电信号向第一处理电路17输出。
第一存储器15是存储各种信息的HDD(Hard disk Drive:硬盘驱动器)、SSD(SolidState Drive:固态驱动器)、集成电路存储装置等存储装置。第一存储器15除了HDD、SSD等以外,还可以是与CD(Compact Disc:光盘)、DVD(Digital Versatile Disc:数字通用光盘)、闪存等便携式存储介质、或RAM(Random Access Memory:随机存取存储器)等半导体存储器元件等之间读写各种信息的驱动装置。
第一存储器15存储本实施方式的各种程序。第一存储器15存储通过选择功能172、异常检测功能173、紧急性判断功能174、确认信息生成功能175、布局生成功能176等的执行而生成的数据等。该生成的数据以及这些功能在后进行说明。第一存储器15存储经由第一通信接口13从各种服务器装置以及医用图像诊断装置7收集到的各种诊疗信息。例如,第一存储器15存储检查命令、以及按照该检查命令摄影的至少一个医用图像。由第一处理电路17例如从电子病历服务器装置3或者RIS服务器5经由第一通信接口13取得检查命令。由第一处理电路17从医用图像诊断装置7或者PACS服务器9经由第一通信接口13取得医用图像。
第一存储器15存储使用医用图像对该医用图像中的至少一个异常进行检测的算法(以下称作异常检测算法)。第一存储器15例如与异常的种类、与医用图像诊断装置7的种类相当的医用图像的种类、被检体的摄影部位等相应地存储多个异常检测算法。异常检测算法例如相当于将医用图像作为输入,并将该医用图像中的异常位置、与异常相关的疾病名、与异常相关的各种数值、疾病名的准确度等作为异常检测结果加以输出的分析应用程序。异常检测结果例如有叠加图像和异常关联信息。叠加图像对应于以与医用图像的色调不同的色调在医用图像上重叠异常位置而成的图像。异常关联信息对应于与上述疾病名、与异常相关的各种数值、疾病名的准确度等异常相关联的信息。
第一存储器15存储表示针对疾病名的、紧急度的有无的对应表(以下称作疾病紧急对应表)或者表示针对异常检测算法的种类的、紧急度的有无的对应表(以下称作算法紧急对应表)。另外,第一存储器15也可以存储对疾病紧急对应表或者算法紧急对应表进一步附加了检查目的而成的对应表(以下称作附加目的对应表)。
分析应用程序例如是DNN等已训练模型、基于规则的分析程序等。另外,异常检测算法不限于这些,也可以是与计算机辅助诊断(Computer-Aided Diagnosis:以下称作CAD)相关的各种计算机算法。第一存储器15将异常检测算法的输出中的疾病名的接受率与关联的异常检测算法建立对应地存储。例如根据放射科医生对于在显示器27显示的异常检测结果的判断(接受(accept)或忽略(ignore))的输入来决定接受率。即,根据放射科医生对于异常检测结果的判断结果而变动接受率。
另外,异常检测算法也可以存储于检测医用图像中的异常的分析服务器装置(以下称作分析服务器)中的存储器。此时,医用信息处理系统1还具有分析服务器。此外,接受率以及异常检测结果等也可以存储于PACS服务器9中的存储器。此时,PACS服务器9将客户端装置20中的放射科医生对于异常检测结果的判断结果汇总,来更新接受率。
第一处理电路17例如作为硬件资源而具有CPU(Central Processing Unit:中央处理器)、MPU(Micro Processing Unit:微处理器)、GPU(Graphics Processing Unit)等处理器以及ROM(Read Only Memory:只读存储器)、RAM等存储器。此外,第一处理电路17也可以通过面向特定用途的集成电路(Application Specific Integrated Circuit:ASIC)、现场可编程门阵列(Field Programmable GateArray:FPGA)、其他复杂可编程逻辑器件(Complex Programmable Logic Device:CPLD)、简单可编程逻辑器件(SimpleProgrammable Logic Device:SPLD)等实现。
第一处理电路17具有系统控制功能171、选择功能172、异常检测功能173、紧急性判断功能174、确认信息生成功能175、以及布局生成功能176。在系统控制功能171、选择功能172、异常检测功能173、紧急性判断功能174、确认信息生成功能175、布局生成功能176中,各功能以能够由计算机执行的程序的方式存储于第一存储器15。第一处理电路17通过用于执行在存储器中展开的程序的处理器,来执行系统控制功能171、选择功能172、异常检测功能173、紧急性判断功能174、确认信息生成功能175、以及布局生成功能176。
即,第一处理电路17相当于通过从第一存储器15读出并执行程序来实现与各程序对应的功能的处理器。换言之,读出了各程序的状态下的第一处理电路17具有与读出的程序对应的功能。另外,各功能(171至176)不限于由单一的处理电路实现的情况。也可以将多个独立的处理器组合来构成处理电路,各处理器通过执行程序来实现各功能(171至176)。
第一处理电路17通过系统控制功能171,基于经由输入接口29从操作者受理到的输入操作所对应的电信号,控制第一处理电路17的各功能。具体而言,第一处理电路17读出存储于第一存储器15的控制程序并在第一处理电路17内的存储器上展开,按照展开后的控制程序控制医用信息处理服务器装置11的各部。在异常检测算法搭载于分析服务器的情况下,分析服务器中的处理电路(处理器)具有选择功能172以及异常检测功能173。此外,系统控制功能171、紧急性判断功能174、确认信息生成功能175以及布局生成功能176也可以搭载于PACS服务器9。即,医用信息处理服务器装置11中的各种功能也可以适当分散地配置于分析服务器与PACS服务器9。此时,通过分析服务器与PACS服务器9的组合来实现医用信息处理服务器装置11。
选择功能172基于与被检体相关的医用图像,选择被输入医用图像的至少一个异常检测算法。异常检测功能173通过对所选择的异常检测算法输入医用图像,从而检测医用图像中的异常。紧急性判断功能174基于与异常相关的信息或者异常检测算法的种类,来判断与异常相关的疾病的紧急性的有无,即是否有必要对与检测出的异常相关的疾病紧急进行诊疗。另外,紧急性判断功能174也可以进一步使用与医用图像相关的被检体的检查命令中的检查目的,来判断紧急性的有无。确认信息生成功能175基于来自异常检测算法的输出,生成用于确认对于通过异常检测算法检测出的异常的紧急性的信息(以下称作确认信息)。在判断为存在紧急性的情况下,布局生成功能176生成能够执行基于放射科医生的异常确认的、与包含检测出的异常的医用图像的显示相关的布局(以下称作确认布局)。确认布局相当于适合对与检测出的异常相关的医用图像进行阅片的环境的显示布局。
实现系统控制功能171、选择功能172、异常检测功能173、紧急性判断功能174、确认信息生成功能175、布局生成功能176的第一处理电路17是系统控制部、选择部、异常检测部、紧急性判断部、确认信息生成部、布局生成部的一例。对于由第一处理电路17实现的选择功能172、异常检测功能173、紧急性判断功能174、确认信息生成功能175、布局生成功能176,按照执行向放射科医生等操作者提供确认信息的处理(以下称作确认信息提供处理)的顺序,在后进行说明。
客户端装置20具有第二通信接口21、第二存储器23、第二处理电路25、显示器27、以及输入接口29。客户端装置20也可以用作图像管理终端装置等其他终端装置。例如,客户端装置20用于放射科医生制作针对医用图像的阅片报告。
第二通信接口21与电子病历服务器装置3、RIS服务器5、PACS服务器9、第一通信接口13之间进行数据通信。第二通信接口21进行的通信的标准可以是任意标准,例如可列举出HL7(Hearth Level7)、DICOM、或者该两方等。第二通信接口21将通过与各种服务器装置进行的数据通信而取得的数据向第二存储器23输出。第二通信接口21将输入到输入接口29的输入操作的电信号向第一通信接口13发送。
第二存储器23是存储各种信息的HDD、SSD、集成电路存储装置等存储装置。第二存储器23除了HDD、SSD等以外,还可以是与CD、DVD、闪存等便携式存储介质、或RAM等半导体存储器元件等之间读写各种信息的驱动装置。第二存储器23经由第二通信接口21,存储从各种服务器装置收集到的各种诊疗信息。例如,第二存储器23存储经由第二通信接口21由第二处理电路25取得的检查命令、以及按照该检查命令摄影的至少一个医用图像。第二存储器23存储表示所取得的多个检查命令的一览的检查列表(也称作工作清单)。对于检查列表,按照执行确认信息提供处理的顺序,在后进行说明。第二存储器23存储与显示功能251相关的程序。
第二处理电路25例如作为硬件资源而具有CPU、MPU、GPU等处理器以及ROM、RAM等存储器。此外,第二处理电路25也可以通过ASIC、FPGA、CPLD、SPLD等实现。第二处理电路25具有显示功能251等。显示功能251以能够由计算机执行的程序的方式存储于第二存储器23。第二处理电路25通过执行在存储器展开的程序的处理器来执行显示功能251。即,第二处理电路25相当于通过从第二存储器23读出并执行程序来实现程序所对应的功能的处理器。
换言之,读出了程序的状态下的第二处理电路25具有所读出的程序所对应的功能。另外,显示功能251不限于由单一的处理电路实现的情况。也可以将多个独立的处理器组合来构成处理电路,通过各处理器执行程序来实现显示功能251。实现显示功能251的第二处理电路25是显示控制部的一例。第二处理电路25通过显示功能251针对显示器27中的各种显示控制显示器27。关于显示功能251的详细内容,按照执行确认信息提供处理的顺序,在后进行说明。
显示器27显示各种信息。例如,显示器27输出用于受理来自操作者的各种操作的GUI(Graphical User Interface:用户图形界面)等。作为显示器27,例如能够适当使用液晶显示器(LCD:Liquid Crystal Display)、CRT(Cathode Ray Tube:阴极射线管)显示器、有机EL显示器(OELD:Organic Electro Luminescence Display)、等离子显示器或者其他任意的显示器。此外,显示器27可以是台式显示器,也可以由能够与医用信息处理服务器装置11进行无线通信的平板终端等构成。
在通过紧急性判断功能174判断为存在紧急性的情况下,显示器27在表示检查命令的一览的检查列表中,将与检测出的异常的确认相关的确认信息以及表示紧急性的紧急信息,和与异常相关的检查命令相邻地显示。此时,检查列表也可以具有与确认信息以及紧急信息的显示的解除相关的紧急解除区域。在包含异常的医用图像的缩略图像作为确认信息显示的情况下,显示器27在显示功能251的控制下,以光标移动到缩略图像的显示区域内为契机,显示将缩略图像放大的放大图像。显示器27响应经由输入接口29的紧急解除区域内的解除操作,解除确认信息与紧急信息的显示。显示器27响应确认信息的显示区域中的规定的操作,以确认布局显示与异常相关的至少一个医用图像。
输入接口29受理来自操作者的各种输入操作,并将受理到的输入操作转换为电信号,向第二处理电路25输出。此外,转换后的电信号经由第二通信接口21以及第一通信接口13,向第一处理电路17输出。例如,输入接口29从操作者受理选择指示、各种条件等。作为输入接口29,例如能够适当使用鼠标、键盘、跟踪球、开关、按钮、操纵杆、触摸板以及触摸面板显示器等。
另外,在本实施方式中,输入接口29不限于鼠标、键盘、跟踪球、开关、按钮、操纵杆、触摸板以及触摸面板显示器等物理操作部件。例如,从独立于装置设置的外部的输入设备接收与输入操作对应的电信号并将该电信号向第一处理电路17以及第二处理电路25输出的电信号的处理电路也包含于输入接口29的例子中。此外,输入接口29也可以由能够与医用信息处理服务器装置11进行无线通信的平板终端等构成。
以上,对医用信息处理系统1的整体构成进行了说明。以下,对确认信息提供处理的顺序进行说明。图2是表示确认信息提供处理的顺序的一例的流程图。
(确认信息提供处理)
(步骤S201)
选择功能172通过利用现有的图像处理从医用图像中确定解剖学标志(Anatomical Landmark),从而确定检查部位。选择功能172通过使用现有的分割算法对医用图像进行分析,从而确定医用图像中的造影的有无。选择功能172从医用图像中的附带信息提取造影的有无以及与医用图像的生成相关的医用设备的种类等检查种类。选择功能172使用检查种类、检查部位、造影的有无、医用设备的种类等,从多个异常检测算法中选择被输入医用图像的至少一个异常检测算法。另外,选择功能172也可以根据从电子病历服务器装置3或RIS服务器5取得的检查命令,提取检查目的、检查种类、检查部位、造影的有无等,来选择异常检测算法。
例如,在医用图像是基于造影的图像、检查部位为脑的情况下,选择功能172选择与脑梗塞相关的异常检测算法(以下称作LVO(Large Vessel Occlusion:大血管闭塞))。此外,在医用图像是基于非造影的图像、检查部位为脑的情况下,选择功能172选择与脑出血相关的异常检测算法(以下称作ICH(Intracranial Hemorrhage:颅内出血))。此外,在医用图像是基于非造影的图像、检查部位为肺的情况下,选择功能172选择检测肺结节的异常检测算法(以下称作肿瘤(oncology))。
(步骤S202)
异常检测功能173向所选择的异常检测算法输入医用图像。异常检测功能173通过异常检测算法检测所输入的医用图像中的异常,并输出异常检测结果。异常检测结果例如以JSON(Java Script(注册商标)Object Notation:对象标记)形式输出。在医用图像中未检测到异常的情况下,异常检测功能173输出在医用图像中未检测到异常的情况(以下称作异常未检出)。
(步骤S203)
在通过异常检测功能173输出了异常检测结果的情况下(步骤S203的是),执行步骤S204的处理。在未通过异常检测功能173输出异常检测结果的情况下,即在通过异常检测功能173输出异常未检出的情况下(步骤S203的否),确认信息提供处理结束。
(步骤S204)
紧急性判断功能174使用异常关联信息或者异常检测算法的种类,判断通过异常检测功能173检测出的异常有无紧急性。具体而言,紧急性判断功能174从异常关联信息中提取疾病名,通过对照提取出的疾病名与疾病紧急对应表,来判断紧急性的有无。判断为存在紧急性的疾病名例如为中风、脑出血、大血管闭塞等。此外,判断为无紧急性的疾病名例如为肺结节、各种癌等。紧急性判断功能174通过对照用于异常的检测的异常检测算法的种类与算法紧急对应表,来判断紧急性的有无。判断为存在紧急性的异常检测算法例如为ICH、LVO等。判断为无紧急性的异常检测算法例如为肿瘤等。
另外,紧急性判断功能174也可以从被检体的检查命令中提取检查目的,并对照提取出的检查目的与附加目的对应表,从而判断紧急性的有无。图3是表示附加目的对应表ALT的一例的图。如图3所示,例如在检查目的为对被检体进行随访(观察经过)的情况下,即使紧急性判断功能174检测出异常,也判断为无紧急性。
在通过紧急性判断功能174判断为存在紧急性的情况下(步骤S204的是),执行步骤S205的处理与步骤S206的处理。此时,紧急性判断功能174将检测出的异常具有紧急性这一情况,经由第一通信接口13以及第二通信接口21向客户端装置20发送。在通过紧急性判断功能174判断为无紧急性的情况下(步骤S204的否),确认信息提供处理结束。
(步骤S205)
确认信息生成功能175基于异常检测结果生成确认信息。确认信息例如具有包含检测出的异常在内的医用图像即叠加图像的缩略图像、与检测出的异常相关的疾病名、异常检测算法的名称(以下称作算法名)、以及与疾病名相关的接受率中的至少一个。即,确认信息对应于表示与异常检测结果相关的概要(summary)的信息。
具体而言,确认信息生成功能175通过使用检测出异常的医用图像中的检查部位、疾病名、以及算法名,对第一存储器15进行检索,从而从第一存储器15中取得与该异常检测结果对应的接受率。确认信息生成功能175通过对叠加图像执行规定的缩小处理,来生成缩略图像。此时,确认信息生成功能175将生成的缩略图像、与作为缩略图像的来源的叠加图像相关联。此外,确认信息生成功能175从异常检测结果中的异常关联信息中提取疾病名、算法名以及接受率。确认信息生成功能175通过将缩略图像、疾病名、算法名、以及接受率统合来生成确认信息。确认信息经由第一通信接口13以及第二通信接口21向客户端装置20发送,并存储于第二存储器23。
(步骤S206)
布局生成功能176基于叠加图像生成确认布局。确认布局对应于适合对具有检测出的异常的医用图像(以下称作关键图像)进行阅片的显示布局。在关键图像为CT图像、MRI图像的情况下,关键图像的切片位置对应于检测出异常的切片位置。布局生成功能176基于与被检体相关的多个医用图像,生成适合与异常相关的疾病的诊断即阅片的至少一个图像。例如,布局生成功能176通过对与被检体相关的体数据进行的截面转换处理(multiplanar reconstruction:多平面重构),来生成包含关键图像的正交三截面图像、包含异常的大倾角图像、包含异常的曲面MPR图像(curved multi planar reconstruction)等。
此外,布局生成功能176通过对体数据的绘制处理,来生成包含异常的各种绘制图像(3D图像)。以下,为了使说明简便,将通过布局生成功能176生成的、包含异常的医用图像称作确认参照图像。另外,确认参照图像也可以通过确认信息生成功能175生成。确认参照图像与有助于对异常检测结果进行确认以及诊断的图像对应。布局生成功能176生成能够显示关键图像与确认参照图像的确认布局。另外,也可以在确认布局中进一步显示异常关联信息。确认布局、关键图像、以及确认参照图像经由第一通信接口13以及第二通信接口21向客户端装置20发送,并存储于第二存储器23。另外,确认布局、关键图像、以及确认参照图像也可以存储于第一存储器15。布局生成功能176使缩略图像附带缩略图像与确认布局的链接信息。另外,布局生成功能176也可以使确认信息附带该链接信息。以下,为了使说明简便,设为对缩略图像附带链接信息。
(步骤S207)
显示功能251在检查列表中,将确认信息以及表示紧急性的紧急信息,和与异常相关的检查命令相邻地显示于显示器27。图4是表示在检查列表SL中,确认信息CI以及表示紧急性的紧急信息EI的一例的图。在检查列表SL中,例如按照检查命令的受理顺序或者医用图像的取得顺序排列检查命令。在检查列表SL中的最上段的检查命令中,根据临床医生对患者A的指示而显示“紧急”的标志。除此之外,在紧急性判断功能174的判断结果(以下称作CAD结果)的项目中无紧急性时,紧急信息EI成为不显示。在图4中的检查列表SL中,作为与紧急相关的列,示出了临床医生的指示与CAD结果这两个列,但不限于此。例如,也可以在检查列表SL中的一个列中,以不同的显示方式显示临床医生进行的紧急阅片的标志与基于CAD结果的紧急阅片的标志。
如图4所示,在检查列表SL中的第二段检查命令SOI中,由于无临床医生对患者B的紧急指示,因此未显示“紧急”的标志。另一方面,在第二段检查命令SOI中,对于基于异常检测算法的医用图像的分析结果,判断为存在紧急性,因此在CAD结果的项目中,“紧急”这一字符串被显示作为紧急信息EI。除此之外,在第二段检查命令SOI中显示有确认信息CI。
在图4所示的确认信息CI中,疾病名“主动脉夹层”、输出该疾病名的异常检测算法的名称“心脏深层思维(Cardiac Deep Mind)”、以及输出该疾病名的异常检测算法的接受率(Accept率)“80%”与关键图像的缩略图像SI一同被显示。而且,在确认信息CI中,疾病名“中风”、输出该疾病名的异常检测算法的名称“中风检测(Stroke Finder)”、以及输出该疾病名的异常检测算法的接受率(Accept率)“95%”与关键图像的缩略图像SI一同显示。
显示于显示器27的光标通过放射科医生等操作者的指示而移动到缩略图像SI的显示区域内的情况下,显示功能251将放大该缩略图像SI后的放大图像与检查列表SL重叠地显示于显示器27。另外,显示功能251也可以取代放大图像而以比缩略图像SI大的显示区域将关键图像显示于显示器27。图5是表示光标KSR移动到与确认信息CI中的“主动脉夹层”对应的缩略图像SI的显示区域内的情况下的放大图像EXI的显示例的图。若光标KSR的位置从缩略图像SI的显示区域离开,则显示功能251解除放大图像EXI的显示。
(步骤S208)
若在缩略图像SI的显示区域中输入规定的操作(步骤S208的是),则执行步骤S209的处理。规定的操作是光标KSR移动到缩略图像SI的显示区域的状态下的一个简单的操作,例如鼠标的单击操作。若在缩略图像SI的显示区域中未输入规定的操作(步骤S208的否),则执行步骤S210的处理。另外,在确认信息CI中附带链接信息的情况下,规定的操作有效的区域为确认信息CI的显示区域。图6是表示在与图4示出的“主动脉夹层”相关的确认信息CI中,附带有链接信息的缩略图像SI的一例的图。在图6所示的缩略图像SI中记载有“附带链接信息”,但在显示器27的显示时,不显示“附带链接信息”的文字。
(步骤S209)
显示功能251响应确认信息CI的显示区域中的规定的操作,以确认布局显示与检测出的异常相关的至少一个医用图像即确认参照图像。若在光标KSR移动到图4以及图6所示的缩略图像SI的显示区域的状态下输入单击操作,则显示功能251将关键图像以及确认参照图像以确认布局显示于显示器27。图7是表示以确认布局CL显示的关键图像KI与确认参照图像CRI的一例的图。如图7所示,在确认布局CL中,向放射科医生等操作者提供针对关键图像KI以及确认参照图像CRI的阅片环境。
(步骤S210)
在与检查命令相邻地显示确认信息CI的情况下,检查列表SL具有与确认信息CI以及紧急信息EI的显示解除(以下称作紧急显示解除)相关的紧急解除区域。如图4所示,紧急解除区域例如是检查命令SOI中的空白的区域、显示紧急信息EI的区域等。另外,紧急解除区域不限于上述例子,在检查列表SL的显示画面中,能够设于任意的位置。若经由输入接口29,由操作者输入紧急显示解除的指示(步骤S210的是),则执行步骤S211的处理。紧急显示解除的指示输入例如相当于在光标KSR移动到紧急解除区域的状态下通过鼠标进行的单击操作。在未输入紧急显示解除的指示的情况下(步骤S210的否),确认信息提供处理结束。
(步骤S211)
显示功能251响应紧急显示解除的指示输入,在检查列表SL中,解除确认信息CI与紧急信息EI的显示。即,显示器27响应紧急解除区域内的紧急显示解除的操作,解除确认信息CI与紧急信息EI的显示。由此,在检查列表SL中,确认信息CI与紧急信息EI成为不显示。根据以上所述,确认信息提供处理结束。步骤S201至步骤S211的处理例如在每次根据检查命令而将由医用图像诊断装置7收集到的医用图像发送到医用信息处理服务器装置11或者分析装置时执行。
根据以上所述的实施方式的医用信息处理系统1,基于与被检体相关的医用图像,选择被输入医用图像的至少一个异常检测算法,通过对异常检测算法输入医用图像来检测医用图像中的异常,并基于异常关联信息或者异常检测算法的种类,判断与异常相关的疾病的紧急性的有无,在判断为存在紧急性的情况下,在检查列表SL中和与异常相关的检查命令相邻地显示确认信息CI以及紧急信息EI。即,根据本医用信息处理系统1,若由异常检测算法输出的异常检测结果是具有紧急性的结果,则在检查列表SL中显示具有缩略图像SI、与异常相关的疾病的名称、异常检测算法的名称以及接受率中的至少一个的确认信息CI和紧急信息EI。
换言之,能够在检查列表SL上向放射科医生等操作者提供能够判断异常检测结果的正确性的信息。由此,根据医用信息处理系统1,操作者无需进行根据检查列表SL显示医用图像的阅片画面的正式阅片准备,就能够在检查列表SL上对通过异常检测算法检测出异常的医用图像,确认是否需要紧急阅片、以及异常检测结果的正确性。
此外,根据医用信息处理系统1,进一步使用与医用图像相关的被检体的检查命令中的检查目的,来判断紧急性的有无。由此,在检查目的为术后的随访、诊疗后的随访的情况下,将与通过异常检测算法检测出的异常相关的疾病判断为无紧急性,因此能够减轻操作者进行的与紧急阅片相关的作业负担。
此外,根据医用信息处理系统1,在包含通过异常检测算法检测出的异常在内的医用图像的缩略图像SI作为确认信息CI显示于显示器27的情况下,显示器27将光标KSR向缩略图像SI的显示区域内的移动作为契机,显示放大缩略图像SI后的放大图像EXI。由此,无需进行通过鼠标的点击操作等附加的操作,而是通过光标KSR向缩略图像SI的显示区域内的移动来显示放大图像EXI,因此能够减轻操作者进行操作的作业负担。
此外,根据医用信息处理系统1,检查列表SL具有与确认信息CI以及紧急信息EI的显示解除相关的紧急解除区域,响应紧急解除区域内的解除的操作,解除检查列表SL中的确认信息CI与紧急信息EI的显示。由此,能够通过光标KSR移动到紧急解除区域的状态下的一个操作,解除确认信息CI与紧急信息EI的显示,能够减轻操作者进行操作的作业负担。
此外,根据医用信息处理系统1,在关于检测出的异常判断为存在紧急性的情况下,生成能够执行异常的确认、且与包含异常的医用图像的显示相关的确认布局CL,并响应确认信息CI的显示区域中的规定的操作,以确认布局CL显示与异常相关的至少一个医用图像。即,根据医用信息处理系统1,由于预先生成能够显示关键图像与确认参照图像的确认布局,因此无需在阅片之前检索具有异常的医用图像,能够通过对缩略图像SI等显示区域进行的单击操作等一个简单的操作,立即向操作者提供能够诊断以及确认对象的疾病的阅片环境。由此,能够提高对阅片具有紧急性的异常检测结果的确认以及诊断的效率。
此外,作为本实施方式的其他变形例,本医用信息处理系统1也可以组入医院信息系统(Hospital Information Systems:HIS)。此外,本医用信息处理系统1也可以通过云计算等实现。此时,第一通信接口13、第一存储器15以及第一处理电路17搭载于网络上的服务器。
(变形例)
在本变形例中,作为确认信息具有与通过异常检测算法检测出的异常的可靠性相关的指标(以下称作可靠指标)、以及与对该异常进行治疗的优先级相关的指标(以下称作优先指标)中的至少一个。可靠指标具有表示从异常检测算法输出的异常检测结果(分析结果)的可靠性、可信性的可靠度或者置信度(confidence level),与过去相同的病例、医用图像相关的多个该可靠度的平均值、该可靠度的众数值、该可靠度的中间值、该可靠度的直方图、与该可靠度相关的标准偏差、与该可靠度相关的置信区间(confidence intervals)等。
可靠度或者置信度例如是表示通过异常检测算法检测出的异常的准确性(异常检测算法的自信)的程度的数值。该可靠度的平均值、该可靠度的众数值、该可靠度的中间值、该可靠度的直方图、与该可靠度相关的标准偏差、与该可靠度相关的置信区间等是操作者判断通过异常检测算法检测出的异常的可靠性时的指标。此外,该可靠度的直方图、与该可靠度相关的标准偏差、与该可靠度相关的置信区间等相当于表示过去检测出的多个相同的异常所对应的多个可靠度的偏差的数据。
优先指标例如是表示通过对该异常进行治疗而被检体恢复的预期的值(例如不匹配率(Mismatch ratio))、通过该治疗而异常的预后良好的程度、表示该治疗的有效性的程度、对异常进行治疗的优先顺序等数值数据。优先指标例如成为是否应当对检测出的异常优先地进行阅片、治疗的判断材料。
异常检测功能173通过异常检测算法将可靠指标与优先指标中的至少一个与异常检测结果一同输出。另外,异常检测功能173也可以通过向与异常检测算法不同的算法输入异常检测结果,来输出可靠指标与优先指标中的至少一个。该不同的算法例如是DNN等已训练模型、基于规则的分析程序等。另外,也可以基于从异常检测算法输出的异常检测结果,由确认信息生成功能175生成可靠指标与优先指标中的至少一个。
此外,异常检测功能173或者确认信息生成功能175也可以基于通过异常检测功能173输出的异常检测结果所对应的可靠指标、以及与存储于第一存储器15的过去的相同的病例、医用图像相关的可靠指标,计算并更新该可靠指标中的可靠度的平均值、可靠度的众数值、可靠度的中间值、可靠度的直方图、与可靠度相关的标准偏差、以及与可靠度相关的置信区间等。此时,更新后的平均值、众数值、中间值、直方图、标准偏差、置信区间等存储于第一存储器15。
第一存储器15存储与异常检测结果中的相同的病例、医用图像相关的多个该可靠度的平均值、该可靠度的众数值、该可靠度的直方图、与该可靠度相关的标准偏差、与该可靠度相关的置信区间(confidence intervals)。另外,也可以在每次由异常检测功能173输出新的可靠指标时,适当更新上述平均值、众数值、直方图、标准偏差以及置信区间。
(确认信息生成处理)
本变形例中的处理顺序与图6所示的流程图相同,但以下对不同的处理中的步骤进行说明。
(步骤S205)
确认信息生成功能175通过将缩略图像、疾病名、算法名、接受率、以及可靠指标统合,来生成确认信息。此外,确认信息生成功能175通过将缩略图像、疾病名、算法名、接受率、以及优先指标统合,来生成确认信息。此外,确认信息生成功能175也可以通过将缩略图像、疾病名、算法名、接受率、可靠指标、以及优先指标统合来生成确认信息。
(步骤S207)
显示功能251在检查列表中,将确认信息以及表示紧急性的紧急信息和与异常相关的检查命令相邻地显示于显示器27。图8是表示在检查列表SL中,确认信息CI以及表示紧急性的紧急信息EI的一例的图。图8与图4的区别是在确认信息CI中,与异常检测结果相应地显示可靠指标。如图8所示,可靠度CLV例如以0至100的范围表示。如图8所示,例如基于“心脏深层思维(Cardiac Deep Mind)”的异常检测结果的可靠度CLV为80。此外,如图8所示,例如基于“中风检测(Stroke Finder)”的异常检测结果的可靠度CLV为75。如图8所示,对于所显示的可靠度也可以显示表示置信区间的条(误差条)。此外,如图8所示,也可以在表示可靠度的配置的范围的条附近,显示表示多个可靠度的频率的分布的直方图HIS。此时,也可以在直方图HIS显示可靠度的众数值MOD、可靠度的中间值MED、可靠度的平均值MEA。
图9是表示在检查列表SL中,确认信息CI以及表示紧急性的紧急信息EI的一例的图。图9与图4的区别是在确认信息CI中,与异常检测结果相应地显示优先指标。在图9中,作为优先指标而显示不匹配率。例如如图9所示,基于“心脏深层思维(Cardiac Deep Mind)”的异常检测结果的不匹配率为90,基于“中风检测(Stroke Finder)”的异常检测结果的不匹配率为75。另外,作为本变形例的应用例,在确认信息具有可靠指标与优先指标的情况下,在图8所示的确认信息CI中,显示器27还显示不匹配率等优先指标。
根据以上所述的实施方式的变形例的医用信息处理系统1,确认信息还具有与检测出的异常的可靠性相关的可靠指标、与对异常进行治疗的优先级相关的优先指标中的至少一个。由此,显示器27还显示可靠指标与优先指标中的至少一个。由此,根据本变形例,能够向操作者提示针对基于异常检测算法的异常检测结果的可靠性、以及与该可靠性相关的统计的信息。除此之外,根据本变形例,能够向操作者提示与对检测出的异常进行治疗的优先级相关的信息。因此,根据本变形例的医用信息处理系统1,能够容易地确认是否需要紧急阅片、以及异常检测结果的正确性,能够减轻操作者进行的与紧急阅片相关的阅片顺序的判断等作业负担。其他效果与实施方式相同,因此省略说明。
在通过医用信息处理方法实现本实施方式中的技术思想的情况下,医用信息处理方法为,基于至少一个异常检测算法的种类或者与异常关联的信息,判断与异常相关的疾病的紧急性的有无,该异常检测算法基于与被检体相关的医用图像而被输入医用图像,该异常是通过向所述异常检测算法输入所述医用图像而检测出的,在判断为存在紧急性的情况下,在表示检查命令的一览的检查列表SL中,将与异常的确认相关的确认信息CI以及表示紧急性的紧急信息EI,和与异常相关的检查命令相邻地显示于显示器27。医用信息处理方法中的处理顺序以及效果与实施方式相同,因此省略说明。
在通过医用信息处理程序实现本实施方式中的技术思想的情况下,医用信息处理程序使计算机实现:基于至少一个异常检测算法的种类或者与异常关联的信息,判断与异常相关的疾病的紧急性的有无,该异常检测算法基于与被检体相关的医用图像而被输入医用图像,该与异常关联的信息通过向所述异常检测算法输入所述医用图像而检测出;以及在判断为存在紧急性的情况下,在表示检查命令的一览的检查列表SL中,将与异常的确认相关的确认信息CI以及表示紧急性的紧急信息EI,和与异常相关的检查命令相邻地显示于显示器27。
例如,也能够通过向医院信息系统中的PACS服务器9、统合服务器等中的计算机安装医用信息处理程序,并将其在存储器上展开,来实现确认信息提供处理。此时,能够使计算机执行该方法的程序也能够储存于磁盘(硬盘等)、光盘(CD-ROM、DVD等)、半导体存储器等存储介质来分发。医用信息处理程序中的处理顺序以及效果与实施方式相同,因此省略说明。
根据以上说明的至少一个实施方式等,能够提供与对医用图像中检测出的异常确认正确性相关的信息。由此,根据本医用信息处理系统1,关于具有阅片的紧急性的异常检测结果的正确性的确认等,能够减轻操作者的作业负担,并且能够降低时间以及劳动力,因此能够提高阅片的吞吐量。
尽管说明了几个实施例,但是这些实施例仅作为示例而提示,无意限定本发明的范围。实际上,说明书中描述的新的实施例可以以其他各种方式来实现。此外,在不脱离本发明的主旨的范围内,能够进行各种省略、替换、变更。这些实施方式及其变形包含于发明的范围、主旨内,同样也包含于权利要求书所记载的发明及其等同的范围内。
Claims (8)
1.一种医用信息处理系统,其中,具备:
紧急性判断部,基于被输入与被检体相关的医用图像的至少一个异常检测算法的种类、或者通过向所述异常检测算法输入所述医用图像而检测出的异常所关联的信息,判断与所述异常相关的疾病的紧急性的有无;以及
显示部,在判断为存在所述紧急性的情况下,在表示检查命令的一览的检查列表中,将与所述异常的确认相关的确认信息以及表示所述紧急性的紧急信息,和与所述异常相关的检查命令相邻地显示。
2.如权利要求1所述的医用信息处理系统,其中,
所述确认信息具有包含所述异常的医用图像的缩略图像、所述疾病的名称、所述异常检测算法的名称、与所述疾病的名称相关的接受率、与检测出的所述异常的可靠性相关的指标、与对所述异常进行治疗的优先级相关的指标中的至少一个。
3.如权利要求1或2所述的医用信息处理系统,其中,
所述紧急性判断部进一步使用与所述医用图像相关的所述被检体的检查命令中的检查目的,来判断所述紧急性的有无。
4.如权利要求1所述的医用信息处理系统,其中,
在包含所述异常的医用图像的缩略图像作为所述确认信息被显示的情况下,所述显示部将光标向所述缩略图像的显示区域内的移动作为契机,显示将所述缩略图像放大后的放大图像。
5.如权利要求1所述的医用信息处理系统,其中,
所述检查列表具有与所述确认信息以及所述紧急信息的显示解除相关的紧急解除区域,
所述显示部响应所述紧急解除区域内的所述解除的操作,解除所述确认信息与所述紧急信息的显示。
6.如权利要求1所述的医用信息处理系统,其中,
还具备布局生成部,在判断为存在所述紧急性的情况下,所述布局生成部生成能够执行所述异常的确认、且与包含所述异常的医用图像的显示相关的确认布局,
所述显示部响应所述确认信息的显示区域中的规定的操作,以所述确认布局显示与所述异常相关的至少一个医用图像。
7.如权利要求1所述的医用信息处理系统,其中,还具备:
选择部,基于与所述被检体相关的所述医用图像,选择被输入所述医用图像的至少一个所述异常检测算法;以及
异常检测部,通过向所述异常检测算法输入所述医用图像,来检测所述医用图像中的异常。
8.一种医用信息处理方法,其中,包括:
基于被输入与被检体相关的医用图像的至少一个异常检测算法的种类、或者通过向所述异常检测算法输入所述医用图像而检测出的异常所关联的信息,判断与所述异常相关的疾病的紧急性的有无;以及
在判断为存在所述紧急性的情况下,在表示检查命令的一览的检查列表中,将与所述异常的确认相关的确认信息以及表示所述紧急性的紧急信息,和与所述异常相关的检查命令相邻地显示于显示器。
Applications Claiming Priority (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020-033940 | 2020-02-28 | ||
JP2020033940 | 2020-02-28 | ||
JP2021003734A JP2021140757A (ja) | 2020-02-28 | 2021-01-13 | 医用情報処理システム、医用情報処理方法、および医用情報処理プログラム |
JP2021-003734 | 2021-01-13 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN113327665A true CN113327665A (zh) | 2021-08-31 |
Family
ID=77414415
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110212071.8A Pending CN113327665A (zh) | 2020-02-28 | 2021-02-25 | 医用信息处理系统以及医用信息处理方法 |
Country Status (2)
Country | Link |
---|---|
US (1) | US11954850B2 (zh) |
CN (1) | CN113327665A (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20240119250A (ko) * | 2021-12-07 | 2024-08-06 | 퀄컴 인코포레이티드 | 역방향 호환가능 원샷 초기 액세스 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20040083257A1 (en) * | 2002-07-09 | 2004-04-29 | Georg Gortler | Method and computerized system for automatically processing studies acquired by an imaging examination system |
US20080152086A1 (en) * | 2006-12-21 | 2008-06-26 | Sectra Ab | Synchronized viewing of tomosynthesis and/or mammograms |
JP2011004951A (ja) * | 2009-06-25 | 2011-01-13 | Toshiba Corp | 画像診断支援システム |
WO2012005023A1 (ja) * | 2010-07-07 | 2012-01-12 | コニカミノルタエムジー株式会社 | 医用画像表示システム及びプログラム |
CN102930138A (zh) * | 2012-10-08 | 2013-02-13 | 成都君晟科技有限公司 | 一种纯数字方式载入数据的超声图文管理系统 |
WO2013036842A2 (en) * | 2011-09-08 | 2013-03-14 | Radlogics, Inc. | Methods and systems for analyzing and reporting medical images |
CN110709937A (zh) * | 2017-06-12 | 2020-01-17 | 奥林巴斯株式会社 | 医疗信息处理系统 |
Family Cites Families (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4104036B2 (ja) * | 1999-01-22 | 2008-06-18 | 富士フイルム株式会社 | 異常陰影検出処理方法およびシステム |
US20040122787A1 (en) | 2002-12-18 | 2004-06-24 | Avinash Gopal B. | Enhanced computer-assisted medical data processing system and method |
JP2004357866A (ja) * | 2003-06-03 | 2004-12-24 | Konica Minolta Medical & Graphic Inc | 医用画像処理装置及び表示制御方法 |
JP2005065944A (ja) * | 2003-08-22 | 2005-03-17 | Konica Minolta Medical & Graphic Inc | 診断支援装置 |
US20070185730A1 (en) * | 2006-02-06 | 2007-08-09 | General Electric Company | Systems and methods for dynamic exam priority |
WO2017011532A1 (en) * | 2015-07-13 | 2017-01-19 | The Trustees Of Columbia University In The City Of New York | Processing candidate abnormalities in medical imagery based on a hierarchical classification |
US20200265946A1 (en) * | 2016-06-17 | 2020-08-20 | Algotec Systems Ltd. | Medical image workflow system and method |
US10140421B1 (en) * | 2017-05-25 | 2018-11-27 | Enlitic, Inc. | Medical scan annotator system |
WO2019107134A1 (ja) * | 2017-12-01 | 2019-06-06 | 富士フイルム株式会社 | 検査情報表示装置、方法およびプログラム |
JP6933617B2 (ja) * | 2018-09-03 | 2021-09-08 | 富士フイルム株式会社 | 診療支援装置 |
-
2021
- 2021-02-11 US US17/173,248 patent/US11954850B2/en active Active
- 2021-02-25 CN CN202110212071.8A patent/CN113327665A/zh active Pending
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20040083257A1 (en) * | 2002-07-09 | 2004-04-29 | Georg Gortler | Method and computerized system for automatically processing studies acquired by an imaging examination system |
US20080152086A1 (en) * | 2006-12-21 | 2008-06-26 | Sectra Ab | Synchronized viewing of tomosynthesis and/or mammograms |
JP2011004951A (ja) * | 2009-06-25 | 2011-01-13 | Toshiba Corp | 画像診断支援システム |
WO2012005023A1 (ja) * | 2010-07-07 | 2012-01-12 | コニカミノルタエムジー株式会社 | 医用画像表示システム及びプログラム |
WO2013036842A2 (en) * | 2011-09-08 | 2013-03-14 | Radlogics, Inc. | Methods and systems for analyzing and reporting medical images |
CN102930138A (zh) * | 2012-10-08 | 2013-02-13 | 成都君晟科技有限公司 | 一种纯数字方式载入数据的超声图文管理系统 |
CN110709937A (zh) * | 2017-06-12 | 2020-01-17 | 奥林巴斯株式会社 | 医疗信息处理系统 |
Also Published As
Publication number | Publication date |
---|---|
US20210272278A1 (en) | 2021-09-02 |
US11954850B2 (en) | 2024-04-09 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5398518B2 (ja) | 医療診断支援装置 | |
JP2006181037A (ja) | 診断支援装置、診断支援方法およびそのプログラム | |
US20190189270A1 (en) | Hospital information apparatus, hospital information system, and hospital information processing method | |
JP2007307290A (ja) | 医用画像読影システム | |
JP7552845B2 (ja) | 情報処理装置、医用画像表示装置及びプログラム | |
WO2020129385A1 (ja) | 医療文書作成支援装置、方法およびプログラム | |
JP2011101759A (ja) | 医用画像表示システム及びプログラム | |
CN113327665A (zh) | 医用信息处理系统以及医用信息处理方法 | |
JP7462424B2 (ja) | 医用情報処理装置、学習用データ生成プログラムおよび学習用データ生成方法 | |
EP3362925B1 (en) | Systems and methods for generating correct radiological recommendations | |
JP4991128B2 (ja) | 画像管理システム、画像表示装置、管理サーバ、及び画像データ管理方法 | |
WO2012005023A1 (ja) | 医用画像表示システム及びプログラム | |
JP2012143368A (ja) | 医用画像表示装置及びプログラム | |
JP2020086730A (ja) | 優先度判定装置、方法およびプログラム | |
JP7341686B2 (ja) | 医用情報収集装置 | |
WO2020241857A1 (ja) | 医療文書作成装置、方法およびプログラム、学習装置、方法およびプログラム、並びに学習済みモデル | |
JP2022099055A (ja) | 医用情報表示装置、および医用情報表示システム | |
JP2021140757A (ja) | 医用情報処理システム、医用情報処理方法、および医用情報処理プログラム | |
JP2009066060A (ja) | 医用画像システム、所見レポート生成装置、所見レポート生成方法及びプログラム | |
JP2017189237A (ja) | 読影支援装置 | |
JP5605246B2 (ja) | 異常陰影候補検出システム、サーバ装置及びプログラム | |
JP5533198B2 (ja) | 医用画像表示装置及びプログラム | |
JP7510761B2 (ja) | 診療支援システム、診療支援装置、及び診療支援プログラム | |
JP7443080B2 (ja) | 医用情報処理システム、医用情報処理方法、および医用情報処理プログラム | |
US12094592B2 (en) | Analysis support apparatus, analysis support system, and analysis support method |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |