CN114269253A - 医疗支援装置、其工作方法及工作程序、以及医疗支援系统 - Google Patents
医疗支援装置、其工作方法及工作程序、以及医疗支援系统 Download PDFInfo
- Publication number
- CN114269253A CN114269253A CN202080058763.5A CN202080058763A CN114269253A CN 114269253 A CN114269253 A CN 114269253A CN 202080058763 A CN202080058763 A CN 202080058763A CN 114269253 A CN114269253 A CN 114269253A
- Authority
- CN
- China
- Prior art keywords
- foreign object
- image
- information
- medical
- medical image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims description 39
- 238000003384 imaging method Methods 0.000 claims description 129
- 238000012545 processing Methods 0.000 claims description 19
- 238000011017 operating method Methods 0.000 abstract 1
- 239000000126 substance Substances 0.000 description 18
- 239000002184 metal Substances 0.000 description 16
- 230000006870 function Effects 0.000 description 15
- 238000010586 diagram Methods 0.000 description 14
- 238000003860 storage Methods 0.000 description 11
- 238000004891 communication Methods 0.000 description 10
- 230000000747 cardiac effect Effects 0.000 description 6
- 238000012549 training Methods 0.000 description 6
- 238000002591 computed tomography Methods 0.000 description 5
- 238000007689 inspection Methods 0.000 description 5
- 238000003745 diagnosis Methods 0.000 description 4
- 210000003238 esophagus Anatomy 0.000 description 4
- 230000005856 abnormality Effects 0.000 description 3
- 238000010801 machine learning Methods 0.000 description 3
- 230000008569 process Effects 0.000 description 3
- 238000002601 radiography Methods 0.000 description 3
- 238000002059 diagnostic imaging Methods 0.000 description 2
- 239000007943 implant Substances 0.000 description 2
- 230000003902 lesion Effects 0.000 description 2
- 238000002595 magnetic resonance imaging Methods 0.000 description 2
- 238000001356 surgical procedure Methods 0.000 description 2
- 208000019901 Anxiety disease Diseases 0.000 description 1
- 230000002159 abnormal effect Effects 0.000 description 1
- 230000004913 activation Effects 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 230000036506 anxiety Effects 0.000 description 1
- 210000000988 bone and bone Anatomy 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 230000004069 differentiation Effects 0.000 description 1
- 238000009826 distribution Methods 0.000 description 1
- 229940079593 drug Drugs 0.000 description 1
- 239000003814 drug Substances 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 230000002439 hemostatic effect Effects 0.000 description 1
- 238000002513 implantation Methods 0.000 description 1
- 238000000338 in vitro Methods 0.000 description 1
- 238000001727 in vivo Methods 0.000 description 1
- 238000009607 mammography Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 229920001296 polysiloxane Polymers 0.000 description 1
- 230000002980 postoperative effect Effects 0.000 description 1
- 230000002265 prevention Effects 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000007920 subcutaneous administration Methods 0.000 description 1
- 239000002023 wood Substances 0.000 description 1
Images
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/12—Arrangements for detecting or locating foreign bodies
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/05—Detecting, measuring or recording for diagnosis by means of electric currents or magnetic fields; Measuring using microwaves or radio waves
- A61B5/055—Detecting, measuring or recording for diagnosis by means of electric currents or magnetic fields; Measuring using microwaves or radio waves involving electronic [EMR] or nuclear [NMR] magnetic resonance, e.g. magnetic resonance imaging
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/46—Arrangements for interfacing with the operator or the patient
- A61B6/461—Displaying means of special interest
- A61B6/463—Displaying means of special interest characterised by displaying multiple images or images and diagnostic data on one display
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0012—Biomedical image inspection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
- G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
- G06T7/75—Determining position or orientation of objects or cameras using feature-based methods involving models
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
- G06V10/764—Arrangements for image or video recognition or understanding using pattern recognition or machine learning using classification, e.g. of video objects
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H20/00—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance
- G16H20/40—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance relating to mechanical, radiation or invasive therapies, e.g. surgery, laser therapy, dialysis or acupuncture
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H30/00—ICT specially adapted for the handling or processing of medical images
- G16H30/40—ICT specially adapted for the handling or processing of medical images for processing medical images, e.g. editing
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H40/00—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
- G16H40/20—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the management or administration of healthcare resources or facilities, e.g. managing hospital staff or surgery rooms
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H50/00—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
- G16H50/20—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for computer-aided diagnosis, e.g. based on medical expert systems
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/02—Arrangements for diagnosis sequentially in different planes; Stereoscopic radiation diagnosis
- A61B6/03—Computed tomography [CT]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10072—Tomographic images
- G06T2207/10081—Computed x-ray tomography [CT]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10072—Tomographic images
- G06T2207/10088—Magnetic resonance imaging [MRI]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10116—X-ray image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V2201/00—Indexing scheme relating to image or video recognition or understanding
- G06V2201/03—Recognition of patterns in medical or anatomical images
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B21/00—Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
- G08B21/18—Status alarms
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Medical Informatics (AREA)
- General Health & Medical Sciences (AREA)
- Physics & Mathematics (AREA)
- Life Sciences & Earth Sciences (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Public Health (AREA)
- Theoretical Computer Science (AREA)
- Radiology & Medical Imaging (AREA)
- Biomedical Technology (AREA)
- Computer Vision & Pattern Recognition (AREA)
- General Physics & Mathematics (AREA)
- Pathology (AREA)
- Epidemiology (AREA)
- Primary Health Care (AREA)
- Surgery (AREA)
- Animal Behavior & Ethology (AREA)
- High Energy & Nuclear Physics (AREA)
- Veterinary Medicine (AREA)
- Biophysics (AREA)
- Molecular Biology (AREA)
- Heart & Thoracic Surgery (AREA)
- Quality & Reliability (AREA)
- Databases & Information Systems (AREA)
- Optics & Photonics (AREA)
- Business, Economics & Management (AREA)
- General Business, Economics & Management (AREA)
- Computing Systems (AREA)
- Artificial Intelligence (AREA)
- Evolutionary Computation (AREA)
- Software Systems (AREA)
- Multimedia (AREA)
- Urology & Nephrology (AREA)
- Human Computer Interaction (AREA)
- Data Mining & Analysis (AREA)
- Medical Treatment And Welfare Office Work (AREA)
- Measuring And Recording Apparatus For Diagnosis (AREA)
- Apparatus For Radiation Diagnosis (AREA)
Abstract
本发明提供一种医疗支援装置(10、100)、其工作方法及工作程序、以及医疗支援系统,所述医疗支援装置(10、100)能够支援用于适当地判定医用图像中包括的异物图像的有无及形成异物图像的异物的种类。具备处理器(CPU、14)的医疗支援装置(10、100)中,处理器(14)获取医用图像,且获取将医用图像与医用图像中包括的异物图像的有无预先建立对应关联的对应信息,并根据医用图像和对应信息,生成推断出医用图像中包括的异物图像的有无等的异物推断信息,根据异物推断信息来控制告知。
Description
技术领域
本发明涉及一种医疗支援装置、其工作方法及工作程序、以及医疗支援系统。
背景技术
在医疗现场,重要的是防止作为医疗事故的意外或可能发生医疗事故的事件(Incident)。在使用医用图像进行诊断时发生的事件或意外的原因之一是拍摄时的异物残留。由于被摄体存在异物残留,生成妨碍读影的画质不充分的医用图像,从而导致诊断能力降低。并且,手术时发生的异物残留,除了会对患者造成伤害以外,原因分析、防止再次发生的对策研究或诉讼风险等在医疗设施中也会引起很多问题,因此必须尽早发现。
作为检测存在于包括人体的对象物的内部的异物的装置等,公开了由多个断层面的帧数据制作断层图像,并通过根据断层图像演算出的边缘信息的三维分布检测异物的X射线检查装置等(专利文献1)。并且,公开了一种检测部位的医用图像诊断装置,即在体内存在金属等异物的情况下提示警告信息等的医用图像诊断装置(专利文献2)。
以往技术文献
专利文献
专利文献1:国际公开第2015/111728号
专利文献2:日本专利特开2017-202315号公报
发明内容
发明要解决的技术课题
在医用图像的读影中,读影医生必须熟练地判定病变或异物等。并且,由于医疗的性质,很难将使用装置等进行图像处理等的读影结果直接用作诊断结果。另外,即使在通过读影检测出异物的情况下,也存在需要处置的异物和不需要处置的异物,因此需要进一步判断对异物的处置。例如,在拍摄X射线图像时忘记取下的磁性治疗器需要去除并重新拍摄,因此是在将原图像作为拍摄失败的基础上,需要去除异物及重新拍摄等处理的异物。并且,在医用图像中检测出基于心脏起搏器的异物图像的情况下,由于不需要去除以及重新拍摄,因此是不需要处理的异物。因此,不仅要检测异物,还要进一步准确判定异物的种类,这对于防止事件或意外、以及提高医疗业务的效率非常重要。
本发明的目的在于,提供一种能够对医务人员进行支援,以用于适当地判定医用图像中包括的异物图像的有无及形成异物图像的异物的种类的医疗支援装置、其工作方法及工作程序、以及医疗支援系统。
用于解决技术课题的手段
本发明的一种医疗支援装置,其具备处理器。处理器获取包括被摄体图像的医用图像,获取将医用图像与医用图像中包括的异物图像的有无及具有异物图像的情况下的形成异物图像的异物的种类预先建立对应关联的对应信息,基于医用图像和对应信息,生成推断出医用图像中包括的异物图像的有无、及具有异物图像的情况下的形成异物图像的所述异物的种类的异物推断信息,并基于异物推断信息来控制告知。
优选处理器获取将医用图像与异物的位置建立对应关联的对应信息,并基于医用图像及对应信息生成推断出异物的位置的异物推断信息。
优选处理器基于告知获取与对应于医用图像的处置有关的处置信息,并具备存储将医用图像与处置信息建立对应关联的处置对应信息的数据库。
优选处理器基于处置对应信息来控制告知。
优选处理器获取用于获取医用图像的摄影指示信息,在再次获取基于摄影指示信息的包括被摄体图像的医用图像的情况下,基于摄影指示信息和/或与医用图像有关的处置对应信息来控制告知。
告知优选基于图像的显示、声音的输出、及振动的产生中的至少一种。
优选告知针对具有形成被摄体图像的被摄体的患者以外的人进行。
优选处理器基于异物推断信息进行对具有被摄体的患者的引导。
引导优选包括异物的种类。
优选处理器根据异物的种类变更引导的内容。
优选处理器基于异物推断信息生成判定医用图像是否为拍摄失败的拍摄失败判定信息。
优选处理器基于异物推断信息生成摄影指示信息。
并且,本发明为一种医疗支援系统,其具备上述中的任一个医疗支援装置。
优选具备小型移动终端,该小型移动终端具有进行告知的功能,且处理器通过小型移动终端进行告知。
并且,本发明的一种医疗支援装置的工作方法,其具备:图像获取步骤,获取包括被摄体图像的医用图像;对应信息获取步骤,获取将医用图像与医用图像中包括的异物图像的有无及具有异物图像的情况下的形成异物图像的异物的种类建立对应关联的对应信息;异物推断信息生成步骤,基于医用图像及对应信息,生成推断出医用图像中包括的异物图像的有无及具有异物图像的情况下的形成异物图像的异物的种类的异物推断信息;及告知控制步骤,基于异物推断信息来控制告知。
并且,本发明的一种医疗支援程序,其使计算机作为医疗支援装置发挥作用,该医疗支援程序具备:图像获取步骤,获取包括被摄体图像的医用图像;对应信息获取步骤,获取将医用图像与医用图像中包括的异物图像的有无及具有异物图像的情况下的形成异物图像的异物的种类建立对应关联的对应信息;异物推断信息生成步骤,基于医用图像及对应信息生成推断出医用图像中包括的异物图像的有无及具有异物图像的情况下的形成异物图像的异物的种类的异物推断信息;及告知控制步骤,基于异物推断信息来控制告知。
发明效果
根据本发明,能够对医务人员进行支援,以用于适当地判定医用图像中包括的异物图像的有无及形成异物图像的异物的种类。
附图说明
图1是表示医疗支援装置的结构的块图。
图2是对获取医用图像的流程进行说明的说明图。
图3是表示医疗支援装置的功能的块图。
图4是对对应信息进行说明的说明图。
图5是对异物推断部推断出异物的种类等的流程进行说明的说明图。
图6是对包括异物的位置的对应信息进行说明的说明图。
图7是对异物推断部推断出异物的位置等的流程进行说明的说明图。
图8是对由异物推断部赋予适合度并推断出异物的种类等的流程进行说明的说明图。
图9是对推断为没有异物图像的情况下的告知进行说明的说明图。
图10是对推断为存在异物图像的情况下的告知进行说明的说明图。
图11是表示具备拍摄失败判定部等的医疗支援装置的功能的块图。
图12是表示具备摄影指示信息获取部等的医疗支援装置的功能的块图。
图13是对处置信息进行说明的说明图。
图14是对处置信息的利用进行说明的说明图。
图15是表示推断出异物的流程的流程图。
具体实施方式
本发明的医疗支援装置在医务人员获取或读影医用图像的场合使用。医务人员是指与医用图像有关的医务人员,例如获取医用图像的放射技师、读影医用图像的读影医师、或在医师指示下与医用图像有关的护士或临床检验技师等。医疗支援装置设置于图像检查室或诊察室等,在本实施方式中,设置于图像检查室的操作室。医疗支援装置例如是安装有用于执行规定功能的应用程序的个人电脑等计算机。
如图1所示,医疗支援装置10除了显示器等输出器件12及鼠标、麦克风或键盘等输入器件13以外,还具备作为处理器的CPU(Central Processing Unit:中央处理单元)14、存储器15、存储器件16及通信部17。这些经由数据总线18彼此连接。通信部17具有与其他装置或网络19通信的功能。
存储器件16是内置于医疗支援装置10中或通过电缆或网络19连接的硬盘驱动器,或者是联装多个硬盘驱动器的磁盘阵列。因此,存储器件16作为存储部发挥作用。在存储器件16中存储有操作系统等的控制程序、各种应用程序及这些程序所附带的各种数据等、以及数据库等。
存储器15是用于CPU14执行处理的工作存储器。CPU14将存储在存储器件16中的程序加载到存储器15,并按照程序执行处理,由此集中控制医疗支援装置10的各部分。
医疗支援装置10可以经由通信部17与将患者信息、诊疗信息、检查信息、计费信息及图像诊断的摄影指示等信息针对每个患者进行登记和管理的HI S(HospitalInformation System:医院信息系统)、RIS(Radiology Infor mation System:放射线信息系统)等信息管理服务器、或者例如对所拍摄的医用图像和与该医用图像有关的信息等进行管理的PACS(Picture Archiving and Communication System for medicalapplication:医用图像保管通信系统)等图像服务器连接。在与这些服务器相互连接的情况下,与这些服务器进行各种信息的相互通信。首先,医疗支援装置10的计算机也能够用作这些服务器的客户终端。
如图2所示,在本实施方式中,医疗支援装置10设置于图像检查室20的操作室20a,且由放射技师RT等负责读影医用图像的人进行操作。图像检查室20包括操作室20a和检查室20b。在检查室20b例如设置X射线摄像装置21,并对患者PA进行拍摄。
作为医用图像获取的对象,例如可举出前来诊察的患者PA1或患者PA2。患者PA1或患者PA2在诊察室30接受除图像检查以外的检查,接着在图像检查室20接受图像检查。并且,作为医用图像获取的对象,例如可举出在具备手术台42的手术室40中,通过医生DR接受手术的患者PA3。患者PA3为了通过图像检查确认术后状态而进行图像检查。另外,患者PA是患者的统称。因此,患者PA包括患者PA1、患者PA2及患者PA3。
例如,接受检查的患者PA1在皮下安装作为植入型器件的心脏起搏器。将该心脏起搏器作为异物31。并且,接受检查的患者PA2在佩戴作为金属制项链的异物32的状态下接受了检查。并且,接受了手术的患者PA3在体内具有能够通过X射线检测的纱布的状态下结束了手术,具有纱布即异物41。异物31及异物41在获取医用图像时无法从外部确认。另外,异物32也有因检查穿着等而在获取医用图像时无法从外部确认的情况。
针对具有异物31的患者PA1、具有异物32的患者PA2、以及具有异物41的患者PA3,在图像检查室20等中,例如进行基于X射线的拍摄。放射技师RT对于具有异物31的患者PA1、具有异物32的患者PA2以及具有异物41的患者PA3,例如根据在兼作RIS(未图示)的控制台的医疗支援装置10的显示器上示出的摄影指示,在没有注意到异物31、异物32及异物41的状态下,使用X射线摄像装置21获取各自的医用图像。对于通过拍摄获取的医用图像,放射技师RT为了判定拍摄失败,并获取按照摄影指示拍摄成功的医用图像,将其显示在医疗支援装置10的显示器上。
如图3所示,在医疗支援装置10中,存储器件16存储工作程序51。通过工作程序51的启动,作为处理器的CPU14与存储器15等协作,作为图像获取部61、对应信息获取部62、异物推断部63、告知控制部64、拍摄失败判定部98、处置信息获取部101(参考图12)、摄影指示信息生成部99、及摄影指示信息获取部105(参考图12)等发挥作用。因此,医疗支援装置10具备图像获取部61、对应信息获取部62、异物推断部63、告知控制部64、拍摄失败判定部98、处置信息获取部101、摄影指示信息生成部99及摄影指示信息获取部105等。
图像获取部61获取所拍摄的医用图像。医用图像以患者PA为对象进行拍摄,因此包括患者PA的身体的一部分或全部、及根据情况将异物作为被摄体的被摄体图像。因此,被摄体图像根据情况包括异物图像。对应信息获取部62获取将医用图像与医用图像中包括的异物图像的有无及具有异物图像的情况下的形成异物图像的异物的种类预先建立对应关联的对应信息。对应信息例如使用保存在存储器件16中的信息。异物推断部63从图像获取部61获取医用图像,并且,从对应信息获取部62获取对应信息。异物推断部63根据医用图像及对应信息,生成推断出医用图像中包括的异物图像的有无、及具有异物图像的情况下的形成异物图像的异物的种类的异物推断信息。所生成的异物推断信息由告知控制部64获取。告知控制部64控制基于从异物推断部63获取的异物推断信息的告知。在进行告知的情况下,使用显示器等输出器件12等进行告知。
接着,对医疗支援装置10具备的各部分等进行详细说明。首先,由图像获取部61获取的医用图像是为了诊断或检查等而获取的医用图像,通过各种医学影像设备进行拍摄。医用图像主要包括由放射科处理的图像,例如,由计算机X射线摄影(ComputedRadiography、CR)所拍摄的X射线图像、由计算机断层扫描(Computed Tomography、CT)所拍摄的所谓CT图像、由乳房X射线摄影(mammography、MG)所拍摄的乳腺摄影图像、以及由磁共振断层摄影(Magnetic Resonance Imaging、MRI)所拍摄的所谓MRI图像等。医用图像只要是能够由计算机处理的图像数据即可。
医用图像在本实施方式中是符合DICOM(Digital Imaging and Communica tionsin Medicine:医学数字成像和通信标准)标准的图像数据。由于依据医用图像的规范标准即DICOM标准,因此能够在处理医用图像的诊疗设施内外的设备之间,进行与医用图像和在医用图像上附带的信息有关的相互通信。医疗支援装置10兼作RIS的控制台,因此能够使用作为医疗支援装置10的计算机,针对RIS发送和接收医用图像和在医用图像上附带的信息。例如,在由RIS发送到控制台的摄影指示信息上附带有患者信息,按照该摄影指示信息,例如,在使用X射线摄像装置21进行拍摄并获取的X射线图像上附带有患者信息。因此,所获取的医用图像即X射线图像是按照附带有摄影指示信息和/或患者信息的DICOM拍摄的X射线图像。除了由图像获取部61获取所获取的X射线图像之外,在进行拍摄之后发送到RIS的服务器。并且,对于所获取的X射线图像,放射技师RT为了判定拍摄失败,并获取按照摄影指示拍摄成功的医用图像,将其显示在医疗支援装置10上。
对应信息获取部62获取预先将医用图像与医用图像中包括的异物图像的有无建立对应关联的对应信息。另外,医用图像具有异物图像的情况下,进一步获取将医用图像与形成异物图像的异物的种类建立对应关联的对应信息。形成异物图像的异物是指,虽然包括在医用图像中的患者PA等的图像中,但并非来自成为医用图像的对象的患者PA等活体的异物。因此,例如,患者PA患有的病变等并不包括在异物中。并且,例如通过摄像装置或图像处理形成的阴影等也不包括在异物中。
虽然并非来自成为摄影对象的患者PA等活体,但是,作为患者PA所具有的异物,可举出患者PA在体内所具有的异物和在体外所具有的异物。在体内所具有的异物中,需要处置的异物例如可举出纱布、钳子(止血钳)、针或各种塞栓等手术时的体内残留(残留痕迹)异物、因事故等残留在体内的玻璃或木质等异物、或例如吞下异物时应通过医用图像检测的异物等。作为无需处置的异物,是指为了治疗患者PA等而埋入患者PA体内的异物等的位置或功能等正常存在的情况,可举出由心脏起搏器、人工关节、支架或固定骨骼等的金属制或硅树脂等构成的移植物等,且位置或功能等正常存在的异物。另外,这些埋入体内的异物等的位置或功能等存在异常的情况下,也可以作为需要处置的异物。另外,在患者PA在体外具有的异物之中,作为需要处置的异物,例如可举出放射技师RT在进行摄影时没有注意到的项链等饰品、或者一次性取暖袋等,作为不需要处置的异物,可举出异物的种类明确、且不影响读影的异物,例如从阴影可明显辨别出的衣服等。
医用图像中包括的异物图像的有无是指如上述异物的图像是否包括在医用图像中。并且,与医用图像建立对应关联的异物的种类,并不限定于异物的种类名本身,也可以是与异物的种类有关的信息。对应信息是预先将医用图像与医用图像中包括的异物图像的有无建立对应关联的信息、或者在医用图像具有异物图像的情况下为将医用图像与形成异物图像的异物的种类建立对应关联的信息。
用于对应信息的医用图像、以及该医用图像是否具有异物图像的信息,使用过去获取的、已经判明是否具有异物图像、并且在具有异物图像的情况下已经判明形成该异物图像的异物的种类的医用图像。并且,也可以使用实际上以前没有获取的医用图像。例如,可以是将实际没有获取的图像、即将假定的医用图像通过图像处理而生成的图像与和对应于该图像的异物图像及异物的种类有关的信息建立对应关联的对应信息、或者将合成实际获取的图像而得到的图像与和对应于该图像的异物图像及异物的种类有关的信息建立对应关联的对应信息等。
对应信息只要是将医用图像与医用图像中包括的异物图像的有无及具有异物图像的情况下形成异物图像的异物的种类预先建立对应关联的信息,则形式或生成方法等不受限定。如上所述,医用图像可通过各种医学影像设备获得。
另一方面,异物图像的有无是“有”或“无”的信息,异物的种类是与异物有关的信息。因此,对应信息能够采用与这些医用图像、及与异物有关的信息对应的各种形式。例如,可以以表的形式生成将与医用图像有关的信息与异物图像的“有”或“无”及异物的种类名建立关联的对应信息。
并且,可以将预先制成的训练完成模型设为对应信息。另外,训练完成模型是指,通过对多个医用图像进行机械学习中的学习,在加权相加的基础上,将医用图像与医用图像中包括的异物图像的有无及异物的种类建立对应关联的模型数据,是对应信息的一种。另外,在对应信息中使用的医用图像或形成异物图像的异物的种类也可以是多个。因此,例如,可以将相关的多个异物的种类等信息与一个医用图像建立关联。另外,也可以使用在后面说明的数据库中存储的包括将医用图像与医务人员对医用图像进行判定或读影的结果的信息即处置信息建立对应关联的信息的处置对应信息来作为对应信息。
对应信息根据各种条件,可以区分使用多个对应信息以得到优选的异物推断信息。因此,也可以根据各种条件,制作多个表来区分使用,或者制作多个训练完成模型来区分使用等。例如,根据患者PA的年龄,通过区分使用作为对应信息的数据或训练完成模型,可以得到优选的异物推断信息。另外,优选的异物推断信息是指,异物推断信息中包括的异物的有无及异物的种类等信息和实际接近,最优选的异物推断信息与实际一致。因此,异物推断信息中包括的异物的有无或异物的种类等信息越与实际一致,用于生成异物推断信息的医用图像和/或对应信息越优选。
如图4所示,对应信息66是将医用图像与医用图像中包括的异物图像的有无及具有异物图像的情况下的形成异物图像的异物的种类建立关联的信息。对应信息66中,医用图像与异物图像的有无及异物的种类例如一对一建立有关联。例如医用图像为医用图像66a的情况下,对应信息66是作为异物图像的有无而与“无”建立关联的信息。并且,医用图像66b的情况下,作为异物图像的有无与“有”建立关联,以及作为异物的种类与“金属制项链”建立关联,并且,医用图像66c的情况下,作为异物图像的有无与“有”建立关联,以及作为异物的种类与“植入型器件、ABC公司型号:X-111”建立关联,并且,医用图像66d的情况下,作为异物图像的有无与“有”建立关联,以及作为异物的种类与“食管内异物、纽扣电池”建立关联,并且,医用图像66e的情况下,作为异物图像的有无与“有”建立关联,以及作为异物的种类与“手术残留异物、纱布”建立关联。另外,医用图像66a、医用图像66b、医用图像66c及医用图像66d是通过计算机X射线摄影获取的X射线图像,医用图像66e是通过计算机断层摄影获取的CT图像。
对应信息获取部62获取对应信息66的方法不受限定。例如,将对应信息66预先保存在存储器件16或其他存储装置(未图示)中,对应信息获取部62获取保存在存储器件16或其他存储装置中的对应信息66。
异物推断部63根据医用图像及对应信息66,生成推断出该医用图像中包括的异物图像的有无、及具有异物图像的情况下的形成异物图像的异物的种类的异物推断信息。如上述,异物推断部63与图像获取部61连接,并接收由图像获取部61获取的医用图像。并且,异物推断部63与对应信息获取部62连接,并接收由对应信息获取部62获取的对应信息66。异物推断部63通过从图像获取部61接收的医用图像、及从对应信息获取部62接收的对应信息66,推断从图像获取部61接收的医用图像是否具有异物图像,推断出具有异物图像的情况下,生成推断出形成该异物图像的异物的种类的异物推断信息。异物推断信息不仅包括异物推断信息等与异物有关的信息,还包括与包括该异物的医用图像有关的信息,例如患者数据等。异物推断部63例如每次接收医用图像时,一旦接收到就自动生成异物推断信息。被推断的异物的种类并不限定于一种,也可以包括多种异物的种类。并且,异物推断部63生成异物推断信息时,可以在对所使用的医用图像和/或对应信息66的各信息进行加权相加的基础上生成。
如图5所示,异物推断部63例如在生成从图像获取部61接收的医用图像65的异物推断信息时,根据医用图像65及对应信息66,作为异物推断信息生成异物图像的有无推断为“有”且异物的种类推断为“金属制项链”的异物推断信息67。异物推断信息67发送到告知控制部64,例如,通过在医疗支援装置10的显示器上显示来进行告知,为了表示其是推断出的异物的种类的信息,通过基于“推断”这种字符的显示来进行告知,及通过基于“金属制项链”这种字符的显示来告知推断出的异物的种类。
另外,医用图像包括异物图像的情况下,对应信息获取部62可以获取将医用图像与形成异物图像的异物的种类建立对应关联之外,还与异物的位置建立对应关联的对应信息。即,异物的种类的信息可以包括其异物的位置信息。异物的位置是指包括异物的绝对位置和/或异物的相对位置的异物的位置信息。因此,异物推断部63可以根据医用图像及将异物的位置建立对应关联的对应信息,生成推断出异物的位置的异物推断信息。
如图6所示,对应信息71是将医用图像与医用图像中包括的异物图像的有无、以及具有异物图像的情况下的形成异物图像的异物的种类和/或异物的位置建立关联的信息。对应信息71中,医用图像与异物图像的有无及形成异物图像的异物的种类和/或异物的位置分别一对一建立有关联。关于对应信息71,例如,医用图像66b的情况下,作为异物图像的有无与“有”建立关联,以及作为异物的种类与“金属制项链”建立关联,作为异物的位置与“颈部、体外”建立关联,并且,医用图像66c的情况下,作为异物图像的有无与“有”建立关联,以及作为异物的种类与“植入型器件、ABC公司型号:X-111”建立关联,作为异物的位置与“左肩部前、皮肤正下方”建立关联,并且,医用图像66d的情况下,作为异物图像的有无与“有”建立关联,以及作为异物的种类与“食管内异物、纽扣电池”建立关联,作为异物的位置与“食管、中央”建立关联,并且,医用图像66e的情况下,作为异物图像的有无与“有”建立关联,以及作为异物的种类与“手术残留异物、纱布”建立关联,作为异物的位置与“横隔膜、右下方”建立关联。
异物推断部63根据医用图像及对应信息71生成推断出该医用图像中包括的异物图像的有无、以及具有异物图像的情况下的形成异物图像的异物的种类和/或异物的位置的异物推断信息。异物推断部63通过从图像获取部61接收的医用图像、及从对应信息获取部53接收的对应信息,推断从图像获取部61接收的医用图像是否具有异物图像,推断出具有异物图像的情况下,生成推断出形成该异物图像的异物的种类和/或异物的位置的异物推断信息。
如图7所示,异物推断部63例如在生成从图像获取部61接收的医用图像65的异物推断信息时,根据医用图像65及对应信息71,作为异物推断信息生成异物图像的有无推断为“有”,异物的种类推断为“金属制项链”,且异物的位置推断为“颈部、体外”的异物推断信息72。在图7中,异物推断信息72表示通过显示进行告知时的状态。异物推断信息72发送到告知控制部64,例如,通过在医疗支援装置10的显示器上显示而进行告知,为了表示其是推断出的异物的种类的信息,通过基于“推断”这种字符的显示来进行告知,通过基于“金属制项链”这种字符的显示来告知推断出的异物的种类,通过基于“颈部、体外”这种字符的显示来告知推断出的异物的位置。
并且,异物推断部63可以对异物图像的有无、以及形成异物图像的异物的种类和/或异物的位置分别赋予适合度,并生成推断出赋予了特定值以上的适合度的异物图像的有无的结果、以及异物的种类和/或异物的位置的异物推断信息。异物推断部63所赋予的适合度是指,异物推断部63根据医用图像及对应信息,对异物进行推断时,与推断出的异物图像的有无以及异物的种类和/或异物的位置与实际一致的概率对应的数值。关于赋予适合度的方法不受限定,例如可以通过将训练完成模型设为对应信息的机器学习技术等,对异物图像的有无以及异物的种类和/或异物的位置分别赋予适合度来进行推断。由于对异物的有无、以及形成异物图像的异物的种类和/或异物的位置分别赋予了适合度,因此可以根据适合度制作异物推断信息。例如,可以制作将适合度设定为特定以上的值时的异物推断信息。适合度能够任意设定。
如图8所示,异物推断部63例如根据从图像获取部61接收的医用图像65及从对应信息获取部62接收的对应信息66生成推断出赋予了适合度的异物的种类的推断异物目录81。对应信息66中,医用图像66f与异物图像的有无为“有”及异物的种类为“食管内异物、纽扣电池”建立有对应关联,医用图像66g与异物图像的有无为“有”及异物的种类为“衣服、金属制纽扣”建立有对应关联。例如,以适合度为70%以上的检查的种类的条件生成异物推断信息82的情况下,使用推断异物目录81中适合度为“90%”的“食管内异物、纽扣电池”生成异物推断信息82。另外,可以通过设定,利用告知控制部64告知推断异物目录81的生成。作为告知,例如可以将所生成的推断异物目录81作为推断出的异物的候选显示于医疗支援装置10的显示器上。
告知控制部64根据异物推断信息控制告知。告知控制是指,确定用于执行告知的事项并执行告知,例如,进行或不进行告知的有无告知、进行告知时的告知内容、进行告知时的告知次数、或进行告知时的告知对象等。这些事项能够通过设定进行变更。作为进行告知的情况下的告知内容,能够设为有无异物、异物的种类、或异物的位置等与异物有关的信息。
本实施方式中,使用医疗支援装置10对进行医用图像的拍摄失败的判定的放射技师RT等进行告知。关于告知方法,只要能够识别由放射技师RT告知的内容即可,方法等不受限定。告知可以基于图像的显示、声音的输出、及振动的产生中的至少一种。基于图像的显示进行告知是指包括字符和/或图像的图像的显示。例如,在基于医疗支援装置10的输出器件12进行告知的情况下,通过在显示器上显示字符或图像,对放射技师RT进行告知。基于声音的输出进行的告知或基于振动的产生进行的告知是指,例如在所生成的异物推断信息包括具有异物图像这种信息的情况下,使用医疗支援装置10所具备的发声的输出器件12输出声音,或者与医疗支援装置10通信,并使用放射技师RT所具有的小型移动终端(未图示)产生振动等。
并且,优选对除患者PA以外的人进行告知。例如,通过限定为对除X射线摄影的对象即患者PA以外的人进行告知,在摄影时不会给患者PA带来不安。例如,在进行拍摄时,为了进行患者PA所具有的被摄体的定位而进行初步拍摄,此时,在通过医疗支援装置10向放射技师RT告知基于异物推断信息的告知的情况下,放射技师RT能够根据异物推断信息进行异物的处置的基础上进行拍摄,而不会给患者PA带来焦虑。因此,例如,在基于声音的输出进行告知的情况下,可以使用与医疗支援装置10或与医疗支援装置10进行通信的小型移动终端连接的耳机进行控制,以输出声音。
告知例如能够如下进行。例如,如图9所示,异物推断信息68具有推断出的异物图像的有无为“无”的信息的情况下,告知控制部64进行如下控制,即例如在医疗支援装置10的显示器上显示将告知内容确定为基于“异物推断信息”及“好像没有异物”这种字符的显示的告知显示91。
并且,如图10所示,异物推断信息69具有作为推断出的异物图像的有无为“有”的信息,且具有作为推断出的异物的种类为“食管内异物、纽扣电池”的信息的情况下,告知控制部64进行如下控制,即例如在医疗支援装置10的显示器上显示将告知内容确定为“异物推断信息”和基于引起注意的图标、“好像有异物。请确认”这种字符、及记载为“详细”的按钮93的显示的告知显示92。通过用光标94指定并点击告知显示92中记载为“详细”的按钮93,使告知显示95显示于显示器上。告知显示95为表示与异物有关的详细信息的显示,告知显示95例如进行如下控制,即例如在医疗支援装置10的显示器上显示告知内容包括“异物推断信息”和基于引起注意的图标、“食管内异物、有可能为纽扣电池。”这种字符、及表示为“确认”的按钮96的显示的告知显示95的控制。
如以上,根据本发明的医疗支援装置10,能够支援包括放射技师RT或读影医师在内的医务人员不忽略医用图像中包括的异物图像。例如,获取医用图像时,在医用图像中,包括放射技师RT没有注意到的异物图像的情况下,也生成异物推断信息,并根据异物推断信息,进行通过告知控制部64控制的告知,由此能够支援放射技师RT更准确地判定医用图像中包括的异物图像的有无及形成异物图像的异物的种类。并且,异物推断信息包括与异物的位置有关的信息的情况下,能够向放射技师RT告知与异物的位置有关的信息。因此,放射技师RT能够通过基于医疗支援装置10的告知,在对异物进行处置的基础上进行拍摄。因此,放射技师RT能够更准确地按照摄影指示进行成功的拍摄,从而能够抑制因拍摄失败而进行重新拍摄的状况。
并且,例如,由读影医师对医用图像进行读影的情况下,例如,在医用图像中包括读影医师没有注意到的异物图像的情况下,也进行基于包括形成该异物图像的异物的种类的信息的异物推断信息的告知,由此能够尽快发现因手术遗留在体内的异物。另外,例如,能够有助于不精通读影的读影医师用于判定在医用图像中是否包括异物图像的训练。
另外,如图11所示,医疗支援装置10可以具备拍摄失败判定部98,该拍摄失败判定部根据异物推断信息生成判定医用图像是否为拍摄失败(以下,称为拍摄失败判定)的拍摄失败判定信息。拍摄失败判定部98接收由异物推断部63针对医用图像生成的异物推断信息,根据该异物推断信息生成对该医用图像进行拍摄失败判定的结果的拍摄失败判定信息。拍摄失败判定部98具备将异物的种类与拍摄失败建立对应关联的异物-拍摄失败对应信息。因此,拍摄失败判定部98通过异物推断信息所包括的与异物有关的信息即异物的种类、及异物-拍摄失败对应信息,能够生成进行医用图像的拍摄失败判定的拍摄失败判定信息。
异物-拍摄失败对应信息是将异物的种类与拍摄失败建立对应关联并预先保存的表。例如,在医用图像中,异物推断信息所具有的异物的种类为“金属制项链”的情况下,该医用图像与作为拍摄失败的“需要处置”建立对应关联。“需要处置”表示拍摄失败的可能性高,且需要重新拍摄等处置。对于需要重新拍摄的处置的医用图像,优选通知给放射技师RT等。另外,异物-拍摄失败对应信息可以是基于机械学习的训练完成模型。
由拍摄失败判定部98判定为拍摄失败的情况下,对放射技师RT等确定拍摄失败的人进行通知。关于通知,只要能够对判定拍摄失败的人进行通知即可,例如通过在显示器等上的显示、声音、光或振动等的产生进行通知。
根据异物的种类,不与“需要处置”建立对应关联。关于在异物推断信息中具有没有与“需要处置”建立对应关联的异物的种类的医用图像,拍摄失败的可能性低,重新拍摄的必要性低,因此无需进行拍摄失败判定,也不进行通知。
并且,拍摄失败判定部98优选对考虑适合度而推断的异物推断信息进行拍摄失败判定。即,在推断异物目录81中,可以对适合度最高的异物进行拍摄失败判定,而不会对除适合度最高的异物以外的异物进行拍摄失败判定。
具体而言,拍摄失败判定部98在针对医用图像的异物推断信息中,作为适合度最高的异物的种类包括“金属制项链”的情况下,根据异物-拍摄失败对应信息将该医用图像判定为“需要处置”。在通过拍摄失败判定部98判定为“需要处置”的医用图像显示在显示器上时,还显示“需要处置”这种字符。因此,放射技师RT等能够在显示器上显示“需要处置”的基础上,确认医用图像并进行拍摄失败判定。进行拍摄失败判定的结果,经由通信部17发送到网络19上的RIS(radiology Information System:放射科信息系统)(未图示),并进行重新拍摄的设定、及摄影菜单等的设定等。
并且,根据情况,可以自动进行拍摄失败判定。自动进行是指,通过拍摄失败判定部98被判定为“需要处置”这种拍摄失败的医用图像,即使不由放射技师RT等进行拍摄失败判定,也确定为拍摄失败。该情况下,向放射技师RT等通知确定为拍摄失败。并且,通过拍摄失败判定部98确定为拍摄失败的情况下,之后的重新拍摄的指示等也与基于放射技师RT的拍摄失败的确定相同地进行,这些指示也可以自动进行。
另外,医疗支援装置可以具备:处置信息获取部,根据告知获取与对应于医用图像的处置有关的处置信息;及数据库,存储将医用图像与处置信息建立对应关联的处置对应信息。处置信息是由医务人员对医用图像进行判定或读影的结果的信息。处置信息例如包括与对应于医用图像的处置有关的信息,与处置有关的信息例如包括与是否需要处置及处置的内容有关的信息。
处置信息与对应于医用图像的处置有关,由放射技师RT或医生DR等确定。例如,通过基于医疗支援装置的告知,告知医用图像包括异物图像,放射技师RT在医用图像中确认到因异物导致的阴影的情况下,放射技师RT参考被告知的推断出的异物的种类的信息,确定异物的种类,并确定对包括异物图像的医用图像的处置。而且,放射技师RT在将所拍摄的医用图像判定为拍摄失败,并决定去除异物重新拍摄的情况下,将因异物图像无法正确诊断而成为拍摄失败、及异物为需要处置的异物从而重新拍摄时去除异物等确定为处置信息,并将所确定的内容作为处置信息输入到医疗支援装置。另一方面,放射技师RT对包括异物图像的医用图像确定不需要重新拍摄的处置的情况下,将该异物图像为不需要处置的异物,及该医用图像没有拍摄失败确定为处置信息,并将确定的内容作为处置信息输入到医疗支援装置。
如图12所示,医疗支援装置100具备处置信息获取部101。处置信息获取部101获取处置信息。由处置信息获取部101获取的处置信息发送到数据库102。数据库102存储将医用图像与处置信息建立对应关联的处置对应信息。
如图13所示,生成的处置对应信息111例如为将处置信息112与对应信息所具有的将医用图像与异物图像的有无建立对应关联的信息进一步建立对应关联的信息。处置信息112例如为对被推断为具有异物图像而被告知的医用图像66b,由放射技师RT进行研究,包括处理的内容等进行判定的结果的信息。因此,例如,由放射技师RT对推断为异物图像的有无为“有”,该异物的种类为“金属制项链”,并且,异物的位置为“颈部、体外”的医用图像66b进行精密检查的结果,确定处置信息112。该情况下的处置信息112例如为“异常、拍摄失败、重新拍摄(去除项链)”,为需要处置的异物。因此,作为处置,医用图像66b被判定为拍摄失败,重新拍摄的摄影指示由RIS获取。
并且,例如,关于被推断为具有异物图像并被告知的医用图像66c,由放射技师RT对被推断为异物图像的有无为“有”,该异物的种类为“植入型器件”,并且,异物的位置为“左肩部前、皮下”的医用图像66c进行精密检查的结果,作为处置信息112,确定为“正常”处置信息112包括“正常”的情况下,不需要处置,医用图像66c不判定为拍摄失败,也不进行重新拍摄。该处置信息112也由RIS获取。
另外,处置信息112可以是参考异物推断信息由医务人员对医用图像进行判定或读影的结果的信息,也可以是推断为异物推断信息的信息。因此,处置信息112可以包括与由异物推断信息所推断的信息不同的信息。例如,即使是异物推断信息推断为“正常”的医用图像,当读影医师确定为认可异物图像的情况下,处置信息112包括读影医师判定的结果的信息。读影医师所判定的结果的信息可以包括异物图像的有无、异物的种类、及异物的位置中的至少一个。另外,例如在获取医用图像时,处置对应信息111也可以包括摄影指示信息所包括的患者信息、或医用图像所具有的患者信息等信息。因此,在图13中,为了放射技师RT等的便利,在处置信息栏中也显示了一部分患者信息,但是,关于显示哪个患者信息等的显示方法等能够适当设定。
医疗支援装置100通过具备处置信息获取部101、及存储将医用图像与处置信息建立对应关联的处置对应信息111的数据库102,无需将与医疗图像有关的判定委托于装置,可由医务人员进行与医疗图像有关的判定,并且,能够将包括由医务人员判定的内容的处置对应信息有效地应用于各种场景或用途。
另外,根据情况,处置信息获取部101例如可以从拍摄失败判定部98或者经由通信部17获取基于拍摄失败判定部98的拍摄失败判定信息来作为处置信息。该情况下,还能够将与医疗图像有关的判定委托给装置。该情况下,处置信息获取部101获取拍摄失败判定信息作为处置信息,以与由医务人员进行与医疗图像有关的判定的情况相同的方式,自动进行与医疗图像有关的判定。
并且,告知控制部64可以根据处置对应信息来控制告知。例如,当从异物推断部63发送的异物推断信息包括患者数据等与医用图像有关的信息的情况下,告知控制部64以使用异物推断信息所包括的信息等,从数据库所存储的处置对应信息中参考与医用图像有关的处置对应信息来进行告知的方式控制告知。
并且,医疗支援装置100可以具备获取用于获取医用图像的摄影指示信息的摄影指示信息获取部105(图12)。而且,图像获取部61再次获取包括基于摄影指示信息的被摄体图像的医用图像的情况下,告知控制部64可以根据摄影指示信息和/或与医用图像有关的处置对应信息来控制告知。摄影指示信息获取部105例如从RIS获取摄影指示信息。摄影指示信息是与医生等发送到图像检查室20等的摄影指示有关的信息。摄影指示由RIS管理,医疗支援装置10从彼此进行通信的RIS获取摄影指示信息。因此,摄影指示信息除与摄影指示有关的信息,还包括患者信息等。
如图14所示,当摄影指示信息获取部105作为摄影指示信息获取进行患者PA2的摄影等时,告知控制部64通过该摄影指示信息中包括的患者PA2的患者数据等,利用数据库102中存储的处置对应信息111,获取该患者PA2的处置信息。处置信息包括摄影指示信息中包括的患者PA2的姓名等患者数据。而且,例如根据在过去1年内等特定条件下的处置信息中,是否包括“异常”等需要注意的信息,由告知控制部64控制告知。
例如,患者PA2上次在获取医用图像时,因在佩戴异物32即项链的状态下获取了医用图像,因此进行再次拍摄从而在处置信息中记载有“异常”的信息。因此,根据拍摄患者PA2的摄影指示信息及处置信息,在再次重新对患者PA2进行相同部位的拍摄时,在进行拍摄之前,告知控制部64以向放射技师RT等告知该内容的方式控制告知。因此,通过摄影指示信息及处置信息,在进行拍摄之前对存在佩戴异物进行拍摄的倾向的患者,能够预先由放射技师RT等进行提醒WA,由此有助于抑制拍摄失败或重新拍摄等。
另一方面,例如,患者PA1在上次获取的医用图像中存在心脏起搏器的异物,并由放射技师RT等进行判定从而存在其为正常的处置信息的情况下,再次重新对患者PA1进行相同的部位的拍摄时,在拍摄之前,告知控制部64以向放射技师RT等告知该内容的方式控制告知。因此,通过摄影指示信息及处置信息,能够预先对应正常的异物,例如,通过由异物推断部63检测的异物,能够防止发生医用图像的判定等的工作效率降低。
另外,如图12所示,医疗支援装置100具备摄影指示信息生成部99,可以将由摄影指示信息生成部99生成的摄影指示信息发送到摄影指示信息获取部105,并且,可以同样地经由通信部17发送到RIS等(未图示)。摄影指示信息生成部99根据异物推断信息、处置信息、和/或拍摄失败判定信息生成摄影指示信息。根据情况,通过摄影指示信息生成部99自动生成重新拍摄的实施及摄影菜单等详细信息,并通过发送到摄影指示信息获取部105等,能够自动设定重新拍摄的实施及摄影菜单的详细信息。
并且,告知控制部64可以根据异物推断信息对具有被摄体的患者进行引导。引导是指进行拍摄时需要告知患者的通知。引导是指,在进行拍摄时,根据异物推断信息,以患者能够识别的形式通知,在患者身上佩戴有可能造成拍摄失败的异物时请求去除异物的内容。例如,异物推断信息82包括“金属制项链”的情况下,造成拍摄失败的可能性高,需要必须去除,因此对患者PA利用语音进行引导。另外,引导包括异物的种类,优选根据异物的种类或去除的必要性,变更包括引导的内容、引导的方法、及引导的次数的引导的内容。
在对作为放射线摄影对象的患者PA的引导中,能够将去除异物的指示等作为引导的内容。例如,异物推断信息82包括“金属制项链”的情况下,告知控制部64对位于检查室20b的患者PA,通过声音或图像等广播,进行“请摘下项链”的引导、及异物推断信息包括“金属制纽扣”的情况下,进行“请脱下衣服”的引导。
除告知给放射技师RT等以外,优选对患者进行引导,由此能够可靠地去除异物,并进行顺畅的摄影。
并且,具备医疗支援装置10的医疗支援系统具备上述医疗支援装置10。另外,可以如上述具备与医疗支援装置10连接的其他装置。
接着,参考图15所示的流程图,对基于上述结构的作用进行说明。首先,告知控制部64从摄影指示信息获取部105获取摄影指示信息(步骤ST110)。接着,告知控制部64根据摄影指示信息选择存储于数据库102的处置对应信息,进行是否进行告知的控制,进行显示处置对应信息的告知的情况下(步骤ST120中为是)、显示处置对应信息(步骤ST130),且进行不显示处置对应信息的控制的埸合下(步骤ST120中为否),不显示处置对应信息。
在显示了处置对应信息的情况下,放射技师RT等例如按照所显示的处置对应信息,若有患者PA时常穿戴的异物等,则将其去除后获取医用图像,若是具有心脏起搏器的患者PA,则考虑该情况,由图像获取部61获取欲推断是否具有异物图像等的医用图像(步骤ST140)。接着,对应信息获取部62获取预先将判明有异物图像的医用图像与医用图像包括异物图像和/或形成预先判明的异物图像的异物的种类建立对应关联的对应信息(步骤ST150)。
异物推断部63根据所获取的医用图像及对应信息,制作推断出所获取的医用图像中包括的异物图像的有无、以及异物的种类或异物的位置的异物推断信息(步骤ST160)。在异物推断信息中包括存在异物图像的信息的情况下(步骤ST170中为是)、以由告知控制部进行告知的方式进行控制(步骤ST180)。另一方面,在异物推断信息中包括不存在异物图像的信息的情况下(步骤ST170中为否),以告知控制部不进行告知的方式控制告知。
根据告知,由放射技师RT等输入处置对应信息111(步骤ST190)。而且,处置对应信息111存储于数据库102(步骤ST200)。作为其他变形例,可以使用处置对应信息111,重新制作训练完成模型,作为新的对应信息或异物推断部。
在上述实施方式中,执行图像获取部61、对应信息获取部62、异物推断部63、告知控制部64、处置信息获取部101、处置对应信息获取部102、及摄影指示信息获取部105等各种处理的处理部(processing unit:处理单元)的硬件结构是如下所示的各种处理器(processor)。各种处理器中包括执行软件(程序)来作为各种处理部发挥功能的通用的处理器即CPU(Central Pro cessing Unit:中央处理单元)、FPGA(Field Programmable GateArray:现场可编程门阵列)等在制造后能够变更电路结构的处理器即可编程逻辑器件(Programmable Logic Device:PLD)、具有为了执行各种处理而专门设计的电路结构的处理器即专用电路(Graphical Processing Unit:GPU:图形处理单元)等。
一个处理部可以由这些各种处理器中的一个构成,也可以由相同类型或不同类型的两个以上的处理器的组合(例如多个FPGA或CPU和FPGA的组合、GP U和CPU的组合)构成。并且,可以由一个处理器构成多个处理部。作为由一个处理器构成多个处理部的例子,第一,存在如下方式:如以客户端、服务器等计算机为代表,由一个以上的CPU和软件的组合构成一个处理器,该处理器作为多个处理部发挥作用。第二,存在如下方式:如以片上系统(System On Chip:SoC)等为代表,使用由一个IC(Integrated Circuit:集成电路)芯片实现包括多个处理部的整个系统的功能的处理器。如此,作为硬件结构,各种处理部使用一个以上上述各种处理器构成。
此外,更具体而言,这些各种处理器的硬件结构是将半导体元件等电路元件组合而成的形式的电路(circuitry)。本发明的另一实施方式为一种医疗支援装置,其中,处理器获取包括被摄体图像的医用图像,并获取将医用图像与医用图像中包括的异物图像的有无和具有异物图像的情况下的形成异物图像的异物的种类预先建立对应关联的对应信息,根据医用图像和对应信息,生成推断出医用图像中包括的异物图像的有无、及具有异物图像的情况下的形成异物图像的异物的种类的异物推断信息,并根据异物推断信息来控制告知。
本发明并不限定于上述实施方式,本发明只要不脱离主旨,当然可以采用各种结构。此外,本发明除了程序以外,还涉及到存储程序的存储介质。
符号说明
10、100-医疗支援装置,12-输出器件,13-输入器件,14-CPU,15-存储器,16-存储器件,17-通信部,18-数据总线,19-网络,20-图像检查室,20a-操作室,20b-检查室,21-X射线摄像装置,30-诊察室,31、32、41-异物,40-手术室,42-手术台,51-工作程序,61-图像获取部,62-对应信息获取部,63-异物推断部,64-告知控制部,65-医用图像,66、71-对应信息,66a、66b、66c、66d、66e、66f、66g-医用图像,67、72、82、68、69-异物推断信息,81-推断异物目录,91、92、95-告知显示,93、96-按钮,94-光标,98-拍摄失败判定部,99-摄影指示信息生成部,101-处置信息获取部,102-数据库,105-摄影指示信息获取部,111-处置对应信息,112-处置信息,PA、PA1、PA2、PA3-患者,RT-放射技师,DR-医生,WA-注意,ST110~ST200-步骤。
Claims (16)
1.一种医疗支援装置,其具备处理器,
所述处理器进行如下处理:
获取包括被摄体图像的医用图像;
获取将所述医用图像与所述医用图像中包括的异物图像的有无及具有所述异物图像的情况下的形成所述异物图像的异物的种类预先建立对应关联的对应信息;
基于所述医用图像和所述对应信息,生成推断出所述医用图像中包括的异物图像的有无、及具有所述异物图像的情况下的形成所述异物图像的所述异物的种类的异物推断信息;及
基于所述异物推断信息来控制告知。
2.根据权利要求1所述的医疗支援装置,其中,
所述处理器获取将所述医用图像与所述异物的位置预先建立对应关联的所述对应信息,
所述处理器基于所述医用图像和所述对应信息,生成推断出所述异物的位置的所述异物推断信息。
3.根据权利要求1或2所述的医疗支援装置,其中,
所述处理器基于所述告知获取与对应于所述医用图像的处置有关的处置信息,
该医疗支援装置具备数据库,该数据库存储将所述医用图像与所述处置信息建立对应关联的处置对应信息。
4.根据权利要求3所述的医疗支援装置,其中,
所述处理器基于所述处置对应信息来控制所述告知。
5.根据权利要求4所述的医疗支援装置,其中,
所述处理器获取用于获取所述医用图像的摄影指示信息,
在再次获取基于所述摄影指示信息的包括所述被摄体图像的所述医用图像的情况下,基于所述摄影指示信息和/或与所述医用图像有关的所述处置对应信息来控制所述告知。
6.根据权利要求1至5中任一项所述的医疗支援装置,其中,
所述告知基于图像的显示、声音的输出及振动的产生中的至少一种。
7.根据权利要求1至6中任一项所述的医疗支援装置,其中,
所述告知针对具有形成所述被摄体图像的被摄体的患者以外的人进行。
8.根据权利要求1至7中任一项所述的医疗支援装置,其中,
所述处理器基于所述异物推断信息进行对具有被摄体的患者的引导。
9.根据权利要求8所述的医疗支援装置,其中,
所述引导包括所述异物的种类。
10.根据权利要求8或9所述的医疗支援装置,其中,
所述处理器根据所述异物的种类变更所述引导的内容。
11.根据权利要求1至10中任一项所述的医疗支援装置,其中,
所述处理器基于所述异物推断信息生成判定所述医用图像是否为拍摄失败的拍摄失败判定信息。
12.根据权利要求1至8中任一项所述的医疗支援装置,其中,
所述处理器基于所述异物推断信息生成摄影指示信息。
13.一种医疗支援系统,其具备权利要求1至12中任一项所述的医疗支援装置。
14.根据权利要求13所述的医疗支援系统,其具备小型移动终端,该小型移动终端具有进行所述告知的功能,
所述处理器通过所述小型移动终端进行所述告知。
15.一种医疗支援装置的工作方法,其包括:
图像获取步骤,获取包括被摄体图像的医用图像;
对应信息获取步骤,获取将所述医用图像与所述医用图像中包括的异物图像的有无及具有所述异物图像的情况下的形成所述异物图像的异物的种类预先建立对应关联的对应信息;
异物推断信息生成步骤,基于所述医用图像和所述对应信息,生成推断出所述医用图像中包括的异物图像的有无、及具有所述异物图像的情况下的形成所述异物图像的所述异物的种类的异物推断信息;及
告知控制步骤,基于所述异物推断信息来控制告知。
16.一种医疗支援装置的工作程序,通过使计算机执行如下步骤,使计算机作为医疗支援装置发挥作用,
图像获取步骤,获取包括被摄体图像的医用图像;
对应信息获取步骤,获取将所述医用图像与所述医用图像中包括的异物图像的有无及具有所述异物图像的情况下的形成所述异物图像的异物的种类预先建立对应关联的对应信息;
异物推断信息生成步骤,基于所述医用图像和所述对应信息,生成推断出所述医用图像中包括的异物图像的有无、及具有所述异物图像的情况下的形成所述异物图像的所述异物的种类的异物推断信息;及
告知控制步骤,基于所述异物推断信息来控制告知。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019-150031 | 2019-08-19 | ||
JP2019150031 | 2019-08-19 | ||
PCT/JP2020/031012 WO2021033667A1 (ja) | 2019-08-19 | 2020-08-17 | 医療支援装置、その作動方法及び作動プログラム、並びに医療支援システム |
Publications (1)
Publication Number | Publication Date |
---|---|
CN114269253A true CN114269253A (zh) | 2022-04-01 |
Family
ID=74661093
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202080058763.5A Pending CN114269253A (zh) | 2019-08-19 | 2020-08-17 | 医疗支援装置、其工作方法及工作程序、以及医疗支援系统 |
Country Status (5)
Country | Link |
---|---|
US (1) | US20220172366A1 (zh) |
EP (1) | EP4018934A4 (zh) |
JP (1) | JPWO2021033667A1 (zh) |
CN (1) | CN114269253A (zh) |
WO (1) | WO2021033667A1 (zh) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7151841B1 (ja) | 2021-08-27 | 2022-10-12 | コニカミノルタ株式会社 | 画像処理装置、放射線撮影システム、画像処理プログラム及び画像処理方法 |
CN115661152B (zh) * | 2022-12-27 | 2023-04-07 | 四川大学华西医院 | 基于模型预测的目标发展情况分析方法 |
Family Cites Families (22)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
ATE278293T1 (de) * | 2000-01-31 | 2004-10-15 | Mike Maas | Verfahren zur detektion und identifikation von zeitlich konstanten mustern in videosignalen, insbesondere zur detektion von werbespots in fernsehübertragungen, und vorrichtung zur ausführung dieses verfahrens |
US7417740B2 (en) * | 2004-11-12 | 2008-08-26 | Medeikon Corporation | Single trace multi-channel low coherence interferometric sensor |
US8908949B2 (en) * | 2010-02-22 | 2014-12-09 | The Johns Hopkins University | Method of detecting foreign bodies |
JPWO2012164901A1 (ja) * | 2011-05-30 | 2015-02-23 | 富士フイルム株式会社 | 放射線被曝量取得方法および装置並びに放射線画像撮影システム |
EP2729901B1 (en) * | 2011-07-09 | 2016-09-14 | Gauss Surgical | Methods for estimating extracorporeal blood volume |
WO2013101806A1 (en) * | 2011-12-30 | 2013-07-04 | Pioneer Hi-Bred International, Inc. | Immature ear photometry in maize |
US10357183B2 (en) * | 2012-02-03 | 2019-07-23 | The Regents Of The University Of Michigan | Retained object tag and detection method |
US20130279750A1 (en) * | 2012-04-20 | 2013-10-24 | Dmetrix, Inc. | Identification of foreign object debris |
US20160166173A9 (en) * | 2012-11-16 | 2016-06-16 | Integrated Medical Technologies, Inc. | Device For The Detection Of Metallic Surgical Articles And Harmonic And RFID Tagging Markers |
JP6113024B2 (ja) * | 2013-08-19 | 2017-04-12 | 株式会社Screenホールディングス | 分類器取得方法、欠陥分類方法、欠陥分類装置およびプログラム |
JP6309859B2 (ja) * | 2013-09-25 | 2018-04-11 | 株式会社東芝 | 超伝導アンテナ装置 |
US10024807B2 (en) | 2014-01-23 | 2018-07-17 | Job Corporation | X-ray inspection apparatus and X-ray inspection method |
WO2016037160A2 (en) * | 2014-09-06 | 2016-03-10 | RaPID Medical Technologies, LLC | Foreign object detection protocol system and method |
CN106461578B (zh) * | 2015-04-20 | 2019-08-02 | 株式会社蛟簿 | X射线检查用的数据处理装置、以及搭载有该装置的x射线检查装置 |
US9792682B2 (en) * | 2015-09-07 | 2017-10-17 | Rapid Platforms Llc | Training system for detection and classification of artificial objects in X-ray images |
JP6638537B2 (ja) * | 2016-04-21 | 2020-01-29 | 株式会社島津製作所 | 試料解析システム |
JP6951117B2 (ja) | 2016-05-09 | 2021-10-20 | キヤノンメディカルシステムズ株式会社 | 医用画像診断装置 |
JP2018021817A (ja) * | 2016-08-03 | 2018-02-08 | 日東電工株式会社 | 検査装置及び検査方法 |
JP6878038B2 (ja) * | 2017-02-15 | 2021-05-26 | キヤノン株式会社 | 放射線撮影装置、放射線撮影システム、画像処理装置、画像処理装置の作動方法、及びプログラム |
US11639904B2 (en) * | 2017-04-26 | 2023-05-02 | Nikon Corporation | Inspection device, inspection method, and method for producing object to be inspected |
US10799189B2 (en) * | 2017-11-22 | 2020-10-13 | General Electric Company | Systems and methods to deliver point of care alerts for radiological findings |
US10722210B2 (en) * | 2017-12-14 | 2020-07-28 | Siemens Healthcare Gmbh | Method for memorable image generation for anonymized three-dimensional medical image workflows |
-
2020
- 2020-08-17 EP EP20854106.0A patent/EP4018934A4/en active Pending
- 2020-08-17 CN CN202080058763.5A patent/CN114269253A/zh active Pending
- 2020-08-17 JP JP2021540938A patent/JPWO2021033667A1/ja active Pending
- 2020-08-17 WO PCT/JP2020/031012 patent/WO2021033667A1/ja unknown
-
2022
- 2022-02-17 US US17/674,818 patent/US20220172366A1/en active Pending
Also Published As
Publication number | Publication date |
---|---|
EP4018934A1 (en) | 2022-06-29 |
JPWO2021033667A1 (zh) | 2021-02-25 |
WO2021033667A1 (ja) | 2021-02-25 |
EP4018934A4 (en) | 2022-08-17 |
US20220172366A1 (en) | 2022-06-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4942024B2 (ja) | 医用画像撮影方法及び医用画像撮影装置 | |
US11610676B2 (en) | Information processing device and information processing method | |
JP2006116313A (ja) | 3次元画像化における診断方法 | |
US20220172366A1 (en) | Medical support device, operation method of medical support device, non-transitory computer readable medium, and medical support system | |
US20220028075A1 (en) | Radiography apparatus and radiography system | |
CN108472085A (zh) | 用于计划医疗过程的系统和方法 | |
JP2020130603A (ja) | マンモグラフィ装置及びプログラム | |
JP7223539B2 (ja) | 乳がん診断支援装置、乳がん診断支援システム、および乳がん診断支援方法 | |
US20170316156A1 (en) | Information processing apparatus, information processing system, information processing method, and recording medium | |
JPWO2021033667A5 (zh) | ||
JP2021049111A (ja) | 放射線画像処理装置、方法およびプログラム | |
JP6925786B2 (ja) | X線ct装置 | |
US11803970B2 (en) | Image judgment device, image judgment method, and storage medium | |
EP3954295A1 (en) | Radiation imaging system and method of operating same, and console for radiation imaging system | |
US11311262B2 (en) | Information processing apparatus and program | |
JP7358120B2 (ja) | 情報処理装置、断層撮影装置、情報処理方法およびプログラム | |
JP2017202308A (ja) | X線ct装置及び医用情報管理装置 | |
JP2022084978A (ja) | プログラム、医用画像管理装置及び医用画像管理システム | |
JP5170287B2 (ja) | 医用画像システム | |
JPWO2008099777A1 (ja) | 小規模診断システム及び表示制御方法 | |
JP7255328B2 (ja) | 医用情報処理システム | |
JP7529416B2 (ja) | 医用情報処理装置、医用情報処理方法及びプログラム | |
JP7290766B2 (ja) | 情報処理装置、及び、プログラム | |
US20230107439A1 (en) | Medical image processing apparatus, medical image processing method, and storage medium | |
US20230186539A1 (en) | Medical information processing apparatus and medical information processing method |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |