CN117460456A - 成像损失图像管理装置、成像损失图像管理装置的工作方法及工作程序、以及放射线图像摄影系统 - Google Patents
成像损失图像管理装置、成像损失图像管理装置的工作方法及工作程序、以及放射线图像摄影系统 Download PDFInfo
- Publication number
- CN117460456A CN117460456A CN202280025678.8A CN202280025678A CN117460456A CN 117460456 A CN117460456 A CN 117460456A CN 202280025678 A CN202280025678 A CN 202280025678A CN 117460456 A CN117460456 A CN 117460456A
- Authority
- CN
- China
- Prior art keywords
- imaging
- loss
- data set
- determination result
- determiner
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000003384 imaging method Methods 0.000 title claims abstract description 669
- 238000000034 method Methods 0.000 title claims abstract description 126
- 230000005855 radiation Effects 0.000 claims abstract description 131
- 230000008569 process Effects 0.000 claims abstract description 106
- 238000012545 processing Methods 0.000 claims abstract description 105
- 238000012937 correction Methods 0.000 claims abstract description 50
- 238000010801 machine learning Methods 0.000 claims abstract description 12
- 238000012360 testing method Methods 0.000 claims description 48
- 238000003860 storage Methods 0.000 claims description 45
- 230000006870 function Effects 0.000 claims description 37
- 238000012552 review Methods 0.000 claims description 10
- 238000010586 diagram Methods 0.000 description 14
- 238000001514 detection method Methods 0.000 description 10
- 238000012790 confirmation Methods 0.000 description 9
- 238000002601 radiography Methods 0.000 description 8
- 238000004891 communication Methods 0.000 description 7
- 210000000629 knee joint Anatomy 0.000 description 7
- 230000000694 effects Effects 0.000 description 6
- 238000005516 engineering process Methods 0.000 description 6
- 238000011156 evaluation Methods 0.000 description 6
- 230000002411 adverse Effects 0.000 description 5
- 238000013527 convolutional neural network Methods 0.000 description 5
- 238000011176 pooling Methods 0.000 description 5
- 239000008186 active pharmaceutical agent Substances 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 3
- 238000003745 diagnosis Methods 0.000 description 3
- 210000003127 knee Anatomy 0.000 description 3
- 238000012935 Averaging Methods 0.000 description 2
- 238000013473 artificial intelligence Methods 0.000 description 2
- 238000010923 batch production Methods 0.000 description 2
- 238000005452 bending Methods 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 2
- 238000013145 classification model Methods 0.000 description 2
- 238000007796 conventional method Methods 0.000 description 2
- 230000007547 defect Effects 0.000 description 2
- 238000012423 maintenance Methods 0.000 description 2
- 230000000877 morphologic effect Effects 0.000 description 2
- 206010057362 Underdose Diseases 0.000 description 1
- 230000004913 activation Effects 0.000 description 1
- 238000013528 artificial neural network Methods 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 230000001186 cumulative effect Effects 0.000 description 1
- 230000002950 deficient Effects 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 238000010191 image analysis Methods 0.000 description 1
- 238000007689 inspection Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 238000010606 normalization Methods 0.000 description 1
- 238000011017 operating method Methods 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 238000012795 verification Methods 0.000 description 1
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/58—Testing, adjusting or calibrating thereof
- A61B6/586—Detection of faults or malfunction of the device
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
Landscapes
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Engineering & Computer Science (AREA)
- Medical Informatics (AREA)
- Physics & Mathematics (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Animal Behavior & Ethology (AREA)
- Biophysics (AREA)
- High Energy & Nuclear Physics (AREA)
- Veterinary Medicine (AREA)
- Public Health (AREA)
- Optics & Photonics (AREA)
- Pathology (AREA)
- Radiology & Medical Imaging (AREA)
- Biomedical Technology (AREA)
- Heart & Thoracic Surgery (AREA)
- Molecular Biology (AREA)
- Surgery (AREA)
- General Health & Medical Sciences (AREA)
- Theoretical Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- General Physics & Mathematics (AREA)
- Apparatus For Radiation Diagnosis (AREA)
Abstract
本发明的一种成像损失图像管理装置,其中,处理器执行如下处理:数据集获取处理,获取数据集,所述数据集包括输入到由机械学习模型构成并搭载于放射线图像摄影装置(11)的第1成像损失判定器(LM1)的放射线图像和从第1成像损失判定器(LMl)输出的判定结果;显示控制处理,进行在显示画面(19A、12A)上显示数据集的控制;修正处理,在输入有针对所显示的数据集的判定结果的修正命令的情况下,针对判定结果实施修正;及学习处理,使可与第1成像损失判定器(LM1)替换的第2成像损失判定器(LM2)学习,其中,将从所显示的数据集中选择的数据集作为学习数据,使第2成像损失判定器(LM2)进行学习。
Description
技术领域
本发明的技术涉及一种成像损失图像管理装置、成像损失图像管理装置的工作方法及工作程序、以及放射线图像摄影系统。
背景技术
在医疗领域中,已知一种拍摄被摄体的放射线图像的放射线图像摄影装置。在放射线摄影领域中,通常,将拍摄失败称为“成像损失”,将拍摄失败的放射线图像称为“成像损失图像”。作为判定为成像损失的理由,存在摄影部位的定位不恰当及放射线的剂量的不足等。在放射线图像摄影装置中,所拍摄的放射线图像在放射线摄影之后立即显示在控制台上。工程师确认显示在控制台上的放射线图像,判断是否产生了成像损失,在产生了成像损失的情况下,进行再拍摄。
在日本特开2020-025781号公报中,记载有搭载有由机械学习模型构成的成像损失判定器(在日本特开2020-025781号公报中对应于判定部)的放射线图像摄影装置。成像损失判定器将由放射线图像摄影装置拍摄的放射线图像设为输入,并输出所输入的放射线图像是否为成像损失图像的判定结果。在日本特开2020-025781号公报中所记载的放射线图像摄影装置中,设置有如下功能:工程师等放射线图像摄影装置的操作者对成像损失判定器输出的判定结果进行修正,利用使用所修正的判定结果的学习数据使成像损失判定器进行追加学习的功能。
发明内容
发明要解决的技术课题
由于成像损失判定器由机械学习模型构成,因此通常学习数据越多,判定精度越提高。因此,通过使暂时完成学习的成像损失判定器也利用新的学习数据进行追加学习,有时能够提高成像损失判定器的判定精度。
然而,在日本特开2020-025781号公报中所记载的放射线图像摄影装置中,将通过放射线图像摄影装置的操作者的判断所修正的判定结果用作学习数据,从而使成像损失判定器进行追加学习。因此,在操作者的判断错误的情况下,成像损失判定器会以判定结果错误的学习数据进行追加学习,因此有可能降低成像损失判定器的判定精度。
本发明的技术提供一种能够抑制搭载于放射线图像摄影装置的成像损失判定器的判定精度的降低的成像损失图像管理装置、成像损失图像管理装置的工作方法及工作程序、以及放射线图像摄影系统。
用于解决技术课题的手段
为了达成上述目的,提供一种成像损失图像管理装置,在由放射线图像摄影装置拍摄的被摄体的放射线图像中,至少管理成像损失图像,所述成像损失图像管理装置具备:处理器及内置或连接于处理器的存储器,处理器执行如下处理:数据集获取处理,获取数据集,所述数据集包括输入到第1成像损失判定器的放射线图像和从第1成像损失判定器输出的判定结果,所述第1成像损失判定器由机械学习模型构成,进行针对放射线图像的成像损失判定,并且搭载于放射线图像摄影装置;显示控制处理,进行在显示器上显示数据集的控制;修正处理,在输入有针对所显示的数据集的判定结果的修正命令的情况下,针对判定结果实施修正;及学习处理,使可与第1成像损失判定器替换并且未搭载于放射线图像摄影装置的第2成像损失判定器学习,其中,将从所显示的数据集中选择的数据集作为学习数据,使第2成像损失判定器学习。
在数据集中,除了第1成像损失判定器输出的判定结果即一次判定结果之外,还包括基于放射线图像摄影装置的操作者的判定结果即二次判定结果这两者的情况下,处理器在显示控制处理中,可以可区分地显示一次判定结果和二次判定结果。
处理器在数据集获取处理中,可以获取数据集中的、在一次判定结果及二次判定结果中的至少一方中包括放射线图像有可能相当于成像损失图像的成像损失判定结果的数据集。
在对所显示的数据集的判定结果输入基于用户的批准命令的情况下,处理器可以将表示被批准的批准信息与批准对象的数据集建立关联而进行记录。
在用户对判定结果进行审查的情况下,处理器可以将表示实施了审查的信息与审查对象的数据集建立关联而进行记录。
处理器也可以能够将学习数据累积在存储部中。
处理器可以在学习数据的累积页数小于预先设定的设定页数时,不执行学习处理,并且在累积页数达到设定页数的情况下,执行学习处理。
处理器可以在对第2成像损失判定器执行学习处理的情况下,向放射线图像摄影装置发送表示能够通过第2成像损失判定器更新第1成像损失判定器的更新通知。
更新通知可以是放射线图像摄影装置开始第1成像损失判定器的更新处理的触发、或者可以是能够在放射线图像摄影装置的控制台中显示的通知。
处理器可以将执行了学习处理的第2成像损失判定器,存储在放射线图像摄影装置可访问的存储部。
处理器可以对执行了学习处理的第2成像损失判定器,执行使用测试数据的测试处理,并能够控制在显示器上显示测试结果。
即将执行学习处理之前的第2成像损失判定器与第1成像损失判定器相同,处理器可以对第2成像损失判定器执行追加学习。
本发明的技术所涉及的成像损失图像管理装置的工作方法中,所述成像损失图像管理装置在由放射线图像摄影装置拍摄的被摄体的放射线图像中,至少管理成像损失图像,所述成像损失图像管理装置的工作方法包括如下处理:数据集获取处理,获取数据集,所述数据集包括输入到第1成像损失判定器的放射线图像和从第1成像损失判定器输出的判定结果,所述第1成像损失判定器由机械学习模型构成,进行针对放射线图像的成像损失判定,并且搭载于放射线图像摄影装置;显示控制处理,进行在显示器上显示数据集的控制;修正处理,在输入有针对所显示的数据集的判定结果的修正命令的情况下,针对判定结果实施修正;及学习处理,使可与第1成像损失判定器替换并且未搭载于放射线图像摄影装置的第2成像损失判定器学习,其中,将从所显示的数据集中选择的数据集作为学习数据,使第2成像损失判定器学习。
本发明的技术所涉及的工作程序使计算机执行如下处理:数据集获取处理,获取数据集,所述数据集包括输入到第1成像损失判定器的放射线图像和从第1成像损失判定器输出的判定结果,所述第1成像损失判定器由机械学习模型构成,进行针对放射线图像的成像损失判定,并且搭载于放射线图像摄影装置;显示控制处理,进行在显示器上显示数据集的控制;修正处理,在输入有针对所显示的数据集的判定结果的修正命令的情况下,针对判定结果实施修正;及学习处理,使可与第1成像损失判定器替换并且未搭载于放射线图像摄影装置的第2成像损失判定器学习,其中,将从所显示的数据集中选择的数据集作为学习数据,使第2成像损失判定器学习。
工作程序可以使计算机作为成像损失图像管理装置发挥作用,所述成像损失图像管理装置在由放射线图像摄影装置拍摄的被摄体的放射线图像中,至少管理成像损失图像。
本发明的技术所涉及的放射线图像摄影系统具备上述任一个成像损失图像管理装置和放射线图像摄影装置。
发明效果
根据本发明的技术,能够抑制搭载于放射线图像摄影装置的成像损失判定器的判定精度的降低。
附图说明
图1是表示放射线图像摄影系统的整体结构的图。
图2是表示成像损失图像的例子的图。
图3是表示控制台的结构的图。
图4是表示成像损失判定器的图。
图5是表示成像损失判定结果的分类的图。
图6是表示未批准数据集的一例的图。
图7是成像损失图像管理装置的硬件结构图。
图8是成像损失图像管理装置的功能框图。
图9是表示会议画面的图。
图10是表示成像损失理由被修正时的会议画面的图。
图11是表示显示已批准数据集的会议画面的图。
图12是表示成像损失理由中没有修正时的会议画面的图。
图13是表示显示已批准数据集的会议画面的另一例的图。
图14是表示学习部的图。
图15是表示测试处理的图。
图16是表示更新通知的图。
图17是更新成像损失判定器时的系统整体的流程图。
图18是表示未批准数据集的生成及输出的步骤的流程图。
图19是表示已批准数据集的生成及输出的步骤的流程图。
图20是表示学习处理的步骤的流程图。
图21是缩小审查对象时的说明图。
具体实施方式
图1所示的放射线图像摄影系统10具备放射线图像摄影装置11及成像损失图像管理装置12。作为一例,放射线图像摄影系统10设置在医疗设施内。在本例子中,放射线图像摄影系统10具备更新搭载于放射线图像摄影装置11的成像损失判定器的成像损失判定器更新功能。成像损失判定器是指由机械学习模型构成,进行针对放射线图像摄影装置11所拍摄的放射线图像P的成像损失判定的机械学习模型。当输入放射线图像P作为输入数据时,成像损失判定器输出成像损失判定结果RS作为输出数据。成像损失判定结果RS为本发明的技术所涉及的“判定结果”的一例。
在本例子的放射线图像摄影装置11中搭载有第1成像损失判定器LM1作为成像损失判定器。放射线图像摄影装置11通过搭载有第1成像损失判定器LM1,具备在刚进行放射线摄影之后,将针对所拍摄的放射线图像P的成像损失判定结果RS提示给操作者OP的功能。另一方面,成像损失图像管理装置12具备第2成像损失判定器LM2作为成像损失判定器。第2成像损失判定器LM2是可以与第1成像损失判定器LM1替换,但未搭载于放射线图像摄影装置11的成像损失判定器。成像损失图像管理装置12具备使第2成像损失判定器LM2学习的学习功能。放射线图像摄影系统10能够通过在成像损失图像管理装置12中学习的第2成像损失判定器LM2,更新搭载于放射线图像摄影装置11的第1成像损失判定器LM1。
众所周知,放射线图像摄影装置11通过利用X射线等放射线拍摄受检者H,从而获得受检者H的放射线图像P。受检者H为被摄体的一例。作为一例,放射线图像摄影装置11设置于摄影室等。放射线图像摄影装置11具备放射线源16、射线源控制装置17、放射线图像检测装置18及控制台19。
放射线源16照射放射线。射线源控制装置17控制放射线源16。射线源控制装置17中设置有未图示的操作面板。通过操作者OP操作操作面板而设定放射线的照射条件。放射线的照射条件中包括施加于放射线源16的管电压(单位:kv)、管电流(单位:mA)及放射线的照射时间(单位:mS)。并且,放射线源16中设置有限制放射线的照射场的准直器。通过手动操作或电动来调整照射场。并且,放射线源16安装在未图示的移动机构,能够调整与受检者H的相对距离、高度及照射方向等。
放射线图像检测装置18通过受到从放射线源16照射并透过受检者H的放射线,检测受检者H的放射线图像P。放射线图像检测装置18使用二维地排列有将放射线转换为电信号的像素的平板探测器等。作为放射线图像检测装置18,作为将放射线转换为电信号的方式,存在直接转换型及间接转换型等。并且,作为形态,例如,存在安装在卧位用摄影台及立位用摄影台上的台式、及移动式的电子暗盒等。电子暗盒除了能够单独使用之外,还能够与摄影台组合使用。对于台式,能够调整放射线图像检测装置18的高度等。
在使用放射线图像摄影装置11进行放射线摄影的情况下,放射线工程师等操作者OP通过调整放射线源16及放射线图像检测装置18与受检者H的相对位置关系,进行受检者H相对于放射线图像摄影装置11的定位。并且,操作者OP根据摄影部位及受检者H的体厚等设定照射条件等。
控制台19获取放射线图像检测装置18检测到的放射线图像P,并将其显示在显示器19A上。显示器19A上例如显示有摄影图像确认画面19B。第1成像损失判定器LM1搭载于控制台19上,使用第1成像损失判定器LM1的成像损失判定在控制台19中执行。摄影图像确认画面19B中除了放射线图像P之外,还能够显示基于第1成像损失判定器LM1的成像损失判定结果RS。
作为放射线图像P应该设为成像损失图像的根据的成像损失理由,存在因定位失误导致的摄影部位的定位不恰当、及放射线的剂量不足等。操作者OP在放射线摄影时设定受检者H的定位及照射条件。由于放射线图像摄影装置11具有成像损失判定功能,因此操作者OP能够在拍摄放射线图像P之后,立即确认有无放射线图像P对应于成像损失图像的可能性。然后,在需要再拍摄的情况下,操作者OP能够通过确认成像损失判定结果RS,进行定位及照射条件等修正。
成像损失判定并不只限于放射线图像P是否为成像损失图像的判定,只要至少包括有无放射线图像P对应于成像损失图像的可能性的判定即可。有无对应于成像损失图像的可能性的判定中包括:有无作为设为成像损失图像的根据的成像损失理由的判定、有无有可能对应的成像损失理由、成像损失理由的内容的判定、以及是否需要再拍摄的判定中的至少一个。然后,在有可能对应于成像损失图像的成像损失判定结果RS中,包括“为成像损失图像”、“有可能对应于成像损失图像”、“有无成像损失理由及其内容”以及“需要再拍摄”等成像损失判定结果RS。
在基于本例子的第1成像损失判定器LM1的成像损失判定中,判定有无针对放射线图像P的成像损失理由及其内容。作为成像损失判定结果RS,在本例子中,仅在存在成像损失理由的情况下输出“剂量不足”等成像损失理由,在没有成像损失理由的情况下,不做任何输出。即,在成像损失判定结果RS中,根据是否包含有具体的成像损失理由来显示有无成像损失理由。当然,除了具体的成像损失理由之外,也可以输出“有或无成像损失理由”及“恰当或不恰当”等成像损失判定结果RS。
控制台19具备使用第1成像损失判定器LM1的成像损失判定功能,除此以外,还可以在操作者OP针对第1成像损失判定器LM1的成像损失判定结果RS判定为错误的情况下,接受基于操作者OP的成像损失判定结果RS的输入。在此,将基于第1成像损失判定器LM1的成像损失判定结果RS称为一次判定结果RS1,将基于操作者OP的成像损失判定结果RS称为二次判定结果RS2。
控制台19将包括放射线图像P和成像损失判定结果RS的数据集DS1发送至成像损失图像管理装置12。在本例子中,如后面叙述,使用成像损失图像管理装置12进行与数据集DS1相关的会议。会议是用户对数据集DS1中所包含的成像损失判定结果RS的妥当性进行审查的会议。本例子的用户是设置有成像损失图像管理装置12的医疗设施的医生及工程师等医疗人员ST。在会议中,当用户批准数据集DS1的成像损失判定结果RS时,数据集DS1成为已批准。在此,为了根据是否已被用户批准来区分数据集,将未批准的数据集称为未批准数据集DS1,将被批准的数据集称为已批准数据集DS2。控制台19将未批准数据集DS1发送至成像损失图像管理装置12的成像损失图像DB(Data Base:数据库)12C。
成像损失图像管理装置12在由放射线图像摄影装置11拍摄的放射线图像P中,至少管理成像损失图像。成像损失图像是指拍摄失败的放射线图像,是指无法用于诊断的图像。是否拍摄失败的判断通常以操作者OP的判断为基础。一般的成像损失图像管理装置收集这些成像损失图像,并管理所收集的成像损失图像。本例子的成像损失图像管理装置12除了成像损失图像之外,还管理有可能成像损失的放射线图像P。如后面叙述,其理由是因为除了成像损失图像之外,对于有可能成像损失的放射线图像P,也用作使第2成像损失判定器LM2学习的学习数据。当然,成像损失图像管理装置12除了成像损失图像之外,还能够管理除了与成像损失图像相关联的再拍摄图像PR等成像损失图像以外的放射线图像P。在初次拍摄的放射线图像P为成像损失图像的情况下,与成像损失图像相关联的再拍摄图像PR为所再拍摄的放射线图像P。
成像损失图像管理装置12具备例如通过管理在医疗设施中产生的成像损失图像,执行成像损失图像及成像损失理由等统计处理的功能。作为统计处理是计算例如成像损失图像的件数、成像损失理由的不同内容的件数、后述的各摄影技术的成像损失图像的件数等统计数据的处理。成像损失图像管理装置12例如设置于与摄影室不同的房间。
成像损失图像管理装置12除了这些功能之外,还具备会议功能。会议功能是用于例如多名医疗人员ST进行有关成像损失图像的意见交换的会议的功能。在会议中,通过多名医疗人员ST的意见交换,验证审查对象的未批准数据集DS1中所包含的成像损失判定结果RS的妥当性。例如,对于成像损失判定结果RS,验证放射线图像P中有或无成像损失理由的判断是否妥当、或者成像损失理由的具体内容是否妥当等。在会议中,在判断为未批准数据集DS1的成像损失判定结果RS妥当的情况下,成像损失判定结果RS不会被修正而直接被批准,在判断为成像损失判定结果RS不妥当的情况下,根据需要,对成像损失判定结果RS进行修正,批准修正后的成像损失判定结果RS。
并且,未批准数据集DS1中有时包括再拍摄图像PR(参考图6等)。在这种情况下,对于再拍摄图像PR也进行同样的验证。通过这样的会议,对成像损失判定结果RS的妥当性进行验证,批准得到验证的成像损失判定结果RS。
在成像损失图像管理装置12的会议功能中,将成为审查对象的未批准数据集DS1显示在显示器12A的会议画面12B等显示画面上,除此以外,如后面叙述,能够对未批准数据集DS1中所包含的成像损失判定结果RS进行修正、对妥当性得到验证的未修正的或修正后的成像损失判定结果RS记录表示被批准的批准信息等。
作为一例,会议的目的是用于教育经验尚浅的医疗人员ST。参加会议的医疗人员ST包括经验丰富的处于领导地位的医生或工程师。由于通过这样的多个医疗人员ST来验证成像损失判定结果RS的妥当性,因此与操作者OP的单独判断相比,认为经过会议审查的已批准数据集DS2的成像损失判定结果RS的可靠性更高。
若未批准数据集DS1被批准,则成像损失图像管理装置12作为已批准数据集DS2存储于成像损失图像DB12C中。并且,成像损失图像管理装置12具备使可与第1成像损失判定器LM1替换的第2成像损失判定器LM2学习的功能。成像损失图像管理装置12使用已批准数据集DS2使第2成像损失判定器LM2进行追加学习。在本例子中,即将执行追加学习的学习处理之前的第2成像损失判定器LM2与第1成像损失判定器LM1相同。追加学习是指,通过编程和学习处理生成第2成像损失判定器LM2之后,在实际运用过程中追加进行的学习。当执行追加学习时,通过追加学习完毕的第2成像损失判定器LM2更新第1成像损失判定器LM1。如此,放射线图像摄影系统10具备通过放射线图像摄影装置11和成像损失图像管理装置12,更新搭载于放射线图像摄影装置11的第1成像损失判定器LM1的功能。
图2表示成像损失图像的样本SP1~SP3。样本SP1是摄影技术为“胸部/背面”的放射线图像P,即,是将胸部作为摄影部位而从背面拍摄的放射线图像P。样本SP1的成像损失理由是放射线的剂量不足。剂量不足主要因照射条件的设定失误所产生。摄影技术是指至少由摄影部位和摄影方向的组合规定的摄影方法。医生在摄影指令中,根据受检者H的诊断目的,指定包括摄影部位及摄影方向的摄影技术。
样本SP2是摄影技术与样本SP1相同“胸部/背面”的放射线图像P。样本SP2的成像损失理由是摄影部位的一部分缺损。在本例子中,左侧胸部的一部分缺损。一部分缺损主要由定位失误造成。样本SP3是摄影技术为“膝盖/弯曲位/侧面”,即,摄影部位为膝盖,从侧面拍摄了膝盖弯曲的状态的放射线图像P。样本SP3的成像损失理由是膝关节的内旋。膝关节根据其诊断目的所关注的部位不同,因此在定位中,膝关节的弯曲方法等很重要。因此,膝关节的内旋或外旋根据诊断目的有时成为成像损失理由。
接着,使用图3~图5,对放射线图像摄影装置11的控制台19的结构及功能进行更详细地说明。
控制台19例如通过以个人电脑及工作站等计算机为基础,安装控制台程序(在图中表示为CSL程序)36而构成。控制台19具备显示器19A、输入器件31、CPU(CentralProcessing Unit:中央处单元)32、存储装置34、存储器33及通信部35。它们经由数据总线而相互连接。
显示器19A是显示基于GUI(Graphical User Interface:图形用于界面)的操作功能所具备的各种操作画面及放射线图像P等的显示部。输入器件31是包括触摸面板或键盘等的输入操作部。
存储装置34例如为HDD(Hard Disk Drive:硬盘驱动器)及SSD(Solid StateDrive:固态驱动器)等,内置于控制台19,或者外部连接于控制台19。在存储装置34中存储有操作系统等控制程序、各种应用程序及伴随这些程序的各种数据等。
并且,在存储装置34中存储有用于使计算机作为控制台19发挥作用的控制台程序36、及第1成像损失判定器LM1。并且,在存储装置34中存储有从放射线图像检测装置18接收的放射线图像P。
存储器33是用于使CPU32执行处理的工作存储器。CPU32将存储在存储装置34中的控制台程序36加载到存储器33中,并根据控制台程序36执行处理,从而总体控制控制台19的各部分。通信部35与放射线图像检测装置18之间,进行放射线图像P等各种数据的收发。并且,通信部35进行与射线源控制装置17及成像损失图像管理装置12的通信。通信部35例如经由LAN(Local Area Network:局域网)等网络进行通信。
并且,图像DB37例如是PACS(Picture Archiving and Communication System:医疗用图像管理系统)的存储装置。未批准数据集DS1除了成像损失图像管理装置12之外,还被发送至PACS,存储在图像DB37中。
摄影图像确认画面19B为显示在控制台19的显示器19A上的显示画面的一例,是用于操作者OP确认进行了放射线摄影的放射线图像P的画面。操作者OP在摄影图像确认画面19B中确认放射线图像P,并判断放射线图像P是否为成像损失图像、是否有可能对应于成像损失图像、成像损失理由的具体的内容是什么、以及是否需要再拍摄。控制台19所具有的成像损失判定功能支援这种操作者OP的作业。
在摄影图像确认画面19B上设置有AI(Artificial Intelligence:人工智能)判定按钮41、二次判定输入按钮42、再拍摄按钮43、以及图像输出按钮44等操作按钮。AI判定按钮41是用于执行使用第1成像损失判定器LM1的第1成像损失判定处理的操作按钮。
当操作AI判定按钮41时,CPU32执行使用第1成像损失判定器LM1的第1成像损失判定处理。
如图4所示,作为第1成像损失判定器LM1,例如,使用适于图像分析的卷积神经网络(CNN:Convolutional Neural Network)。第1成像损失判定器LM1例如具有编码器46和分类部47。
编码器46由CNN构成,通过对所输入的放射线图像P进行卷积处理和池化处理,提取出表示放射线图像P的特征的多种特征图。众所周知,在CNN中,卷积例如是使用多种具有3×3等尺寸的滤波器的空间滤波处理。3×3的滤波器的情况下,对9格的每一个分配滤波器系数。在卷积中,使这种滤波器中心的格与放射线图像P的关注像素一致,输出关注像素和包围其周围的8个像素的合计9个像素的像素值的积和。所输出的积和表示适用了滤波器的关注区域的特征量。然后,例如通过在逐个移动关注像素的同时将滤波器适用于放射线图像P的所有像素,输出与放射线图像P的像素数具有相同特征量的特征图。通过适用滤波器系数不同的多种滤波器,输出多种特征图。与滤波器的数量相对应的特征图的数量也被称为通道数量。
在缩小放射线图像P的尺寸的同时重复这种卷积。缩小放射线图像P的处理被称为池化处理。通过实施相邻像素的间拔处理及平均处理等来进行池化处理。通过池化处理,放射线图像P的尺寸阶段性地缩小成1/2、1/4及1/8。对放射线图像P的每个尺寸输出多个通道的特征图。在放射线图像P的尺寸较大的情况下,在放射线图像P中描绘出被摄体的细微的形态特征,相对于此,在放射线图像P的尺寸较小的情况下(即分辨率较低的情况下),从放射线图像P中舍弃细微的形态特征,在放射线图像P中仅描绘出被摄体的大致的形态特征。因此,在放射线图像P较大时的特征图表示放射线图像P中所描绘出的被摄体的微观特征,尺寸较小时的特征图表示放射线图像P中所描绘出的被摄体的宏观特征。编码器46通过对放射线图像P实施这种卷积处理和池化处理,提取表示放射线图像P的宏观及微观特征的多个通道的特征图。
作为一例,第1成像损失判定器LM1是从多个成像损失理由中,导出作为放射线图像P所示的成像损失理由可能性最高的1个成像损失理由(包括没有成像损失理由的情况)的分类模型。因此,基于编码器46所提取的放射线图像P的特征量,设置分类部47作为导出1个成像损失理由的结构。分类部47例如具备多个针对多个输入节点具有1个输出节点的感知器。并且,感知器被分配了表示多个输入节点的重要度的权重。在各感知器中,从输出节点输出积和作为输出值,所述积和是对输入到多个输入节点的输入值的每一个乘以权重而得的值的和。作为一例,感知器通过S型函数等激活函数而公式化。
在分类部47中,通过结合多个感知器的输出和输入,形成在输入层与输出层之间具有多个中间层的多层次神经网络。作为层次之间的多个感知器的结合方法,例如,采用在下一层次的1个输入节点上结合上一层次的所有输出节点的全结合。
在分类部47的输入层中,输入放射线图像P的特征图中所包含的所有特征量。在构成分类部47的各层次的感知器中,向输入节点输入特征量作为输入值。然后,从输出节点输出对每个输入节点的特征量乘以权重而得的值的和即积和,作为输出值,并且输出值被传递到下一层次的感知器的输入节点。在分类部47中,在最后层次的输出层中,基于多个感知器的输出值,使用归一化指数函数等输出多种成像损失理由的各自的概率。然后,基于该概率导出可能性最高的1个成像损失理由。在图4中,示出有基于放射线图像P,导出“剂量不足”等成像损失理由的例子。第1成像损失判定器LM1输出的成像损失判定结果成为一次判定结果。
本例子为一例,作为第1成像损失判定器LM1,只要是能够基于放射线图像P导出成像损失理由的分类模型,则也可以为其他方式。并且,在本例子中,不区分摄影技术而仅使用1个第1成像损失判定器LM1,但也可以针对每个摄影技术准备第1成像损失判定器LM1。由于成像损失理由根据每个摄影技术而不同,因此通过使用每个摄影技术的第1成像损失判定器LM1来提高判定精度。
在图3中,在摄影图像确认画面19B中显示第1成像损失判定器LM1输出的成像损失判定结果RS即一次判定结果RS1。
二次判定输入按钮42是用于输入基于操作者OP的成像损失判定结果RS即二次判定结果RS2的操作按钮。在一次判定结果RS1与操作者OP的判断不同的情况下,操作者OP能够输入操作者OP的二次判定结果RS2。当操作二次判定输入按钮42时,能够输入二次判定结果RS2,操作者OP操作输入器件31而输入二次判定结果RS2。在图3的例子中,示出有相对于一次判定结果RS1为剂量不足,操作者OP的二次判定结果RS2被输入为“无成像损失理由”的例子。
再拍摄按钮43是在需要再拍摄时操作的操作按钮。在操作者OP判断为需要再拍摄的情况下,操作再拍摄按钮43而进行再拍摄。当操作再拍摄按钮43时,例如,进行初次拍摄的放射线图像P和再拍摄的放射线图像P的关联。关联例如通过摄影指令的指令ID(Identification Data:识别数据)来进行。由此,能够集中处理初次拍摄的放射线图像P和再拍摄的放射线图像P。
图像输出按钮44是用于将包括放射线图像P和成像损失判定结果RS的未批准数据集DS1输出至图像DB37及成像损失图像DB12C的按钮。在未批准数据集DS1的成像损失判定结果RS中输入有二次判定结果RS2的情况下,包含一次判定结果RS1和二次判定结果RS2这两者。在未输入有二次判定结果RS2的情况下,仅包含一次判定结果RS1。
如图5所示,未批准数据集DS1中除了成像损失判定结果RS之外,还包含放射线图像P中所附带的附带信息。附带信息是受检者H的姓名、年龄、性别、指令ID及摄影技术等数据。在图5的例子中,作为成像损失判定结果RS,包含有一次判定结果RS1和二次判定结果RS2这两者。
关于未批准数据集DS1中所包含的成像损失判定结果RS的种类,根据一次判定结果RS1的成像损失理由的有无和二次判定结果RS2的成像损失理由的有无的组合,大致能够分类为图5所示的4种。即,一次判定结果RS1及二次判定结果RS2这两者中均具有理由的情况,仅一次判定结果RS1中具有成像损失理由的情况,仅二次判定结果RS2中具有理由的情况,以及两者中均没有理由的情况这4种。
当然,由于二次判定结果RS2是通过操作者OP的判断而根据需要所输入的信息,因此更详细而言,除了图5所示的4种以外,还具有未输入二次判定结果RS2的情况。并且,即使在一次判定结果RS1和二次判定结果RS2这两者均具有成像损失理由的情况下,一次判定结果RS1和二次判定结果RS2中也存在成像损失理由相同的情况和不同的情况。为了能够区分它们,未批准数据集DS4中除了一次判定结果RS1的成像损失理由的有无及成像损失理由的具体内容(在图5的例子中为“剂量不足”)之外,在具有二次判定结果RS2的情况下,还记录二次判定结果RS2的成像损失理由的有无及成像损失理由的具体内容(在图5的例子中为“剂量不足”)。
并且,如图6所示,在进行再拍摄的情况下,未批准数据集DS1中包括再拍摄图像PR。对于再拍摄图像PR,分别记录一次判定结果RS1和二次判定结果RS2。再拍摄图像PR是由操作者OP判定为无成像损失理由的图像。因此,在再拍摄图像PR的成像损失判定结果RS中,至少二次判定结果RS2为无成像损失理由。图6的再拍摄图像PR是一次判定结果RS1及二次判定结果RS2均没有成像损失理由的例子。
通过进行使用放射线图像摄影装置11的放射线摄影及成像损失判定而生成未批准数据集DS1的情况下,控制台19对成像损失图像管理装置12通知生成了未批准数据集DS1的情况。成像损失图像管理装置12能够通过该通知而识别生成了未批准数据集DS1的情况。
接着,使用图7~图16,对成像损失图像管理装置12的结构及功能进行更详细地说明。如图7所示,成像损失图像管理装置12与控制台19同样地,例如通过以个人电脑及工作站等计算机为基础,安装工作程序56而构成。工作程序56是本发明的技术所涉及的成像损失图像管理装置12的工作程序的一例。成像损失图像管理装置12具备显示器12A、输入器件51、CPU52、存储装置54、存储器53及通信部55。它们经由数据总线58而相互连接。
显示器12A是显示基于GUI的操作功能所具备的各种操作画面及放射线图像P等的显示部。输入器件51是包括触摸面板或键盘等的输入操作部。
存储装置54例如为HDD及SSD等,内置于成像损失图像管理装置12或者外部连接于成像损失图像管理装置12。在存储装置54中存储有操作系统等控制程序、各种应用程序及伴随这些程序的各种数据等。
并且,在存储装置54中存储有用于使计算机作为成像损失图像管理装置12发挥作用的工作程序56和第2成像损失判定器LM2。并且,在存储装置54中还可以暂时存储从控制台19或图像DB37获取的未批准数据集DS1等。
存储器53是用于使CPU52执行处理的工作存储器。CPU52将存储在存储装置54中的工作程序56加载到存储器53,并根据工作程序56执行处理,从而总体控制成像损失图像管理装置12的各部分。通信部55例如经由LAN(Local Area Network:局域网)等网络与控制台19进行通信。
并且,成像损失图像DB12C为成像损失图像管理装置12的外部存储装置。如上所述,成像损失图像DB12C中存储有未批准数据集DS1和已批准数据集DS2。
CPU52通过执行工作程序56,作为数据集获取部61、显示控制部62、修正处理部63、批准处理部64、存储处理部66、学习部67、测试处理部68及更新通知部69等各种处理部发挥作用。
如图8所示,数据集获取部61从成像损失图像DB12C获取未批准数据集DS1,将所获取的未批准数据集DS1存储在存储装置54中。如此,数据集获取部61执行获取未批准数据集DS1的数据集获取处理,所述未批准数据集DS1包括输入到搭载于放射线图像摄影装置11的第1成像损失判定器LM1的放射线图像P和从第1成像损失判定器LM1输出的成像损失判定结果RS。在本例子中,数据集获取部61从成像损失图像管理装置12的外部存储器即成像损失图像DB12C获取未批准数据集DS1,但也可以访问PACS的图像DB37而从图像DB37获取。并且,在控制台19的存储装置34的共享文档等中存储有未批准数据集DS1的情况下,数据集获取部61也可以访问控制台19的存储装置34而从共享文档获取。
显示控制部62进行如下控制:将包括未批准数据集DS1的会议画面12B的画面数据在存储器53中拓展,并基于在存储器53中所拓展的画面数据将会议画面12B显示在显示器12A上。如此,显示控制部62执行显示控制处理,所述显示控制处理进行将未批准数据集DS1显示在显示器12A上的控制。
在由用户输入针对显示在会议画面12B上的未批准数据集DS1的成像损失判定结果RS的修正命令的情况下,修正处理部63执行对成像损失判定结果RS实施修正的修正处理。修正处理部63更新修正对象的未批准数据集DS1的成像损失判定结果RS。
在对显示在会议画面12B上的未批准数据集DS1的成像损失判定结果RS输入基于用户的批准命令的情况下,批准处理部64执行批准处理。批准处理是将表示成像损失判定结果RS被批准的批准信息与批准对象的未批准数据集DS1建立关联而进行记录的处理。批准信息例如被记录作为批准履历HSA。若未批准数据集DS1被批准,则变为已批准数据集DS2。批准履历HSA中例如记录有已批准数据集DS2的ID信息和批准日期和时间等。批准履历HSA例如与已批准数据集DS2同样地,存储在成像损失图像DB12C中。
批准履历HSA具有作为表示未批准数据集DS1显示在会议画面12B上的信息的含义。并且,关于在会议画面12B上显示有未批准数据集DS1,认为所显示的未批准数据集DS1成为会议中的审查对象的可能性较高。因此,批准履历HSA在会议中具有作为如下信息的含义,所述信息表示作为用户的医疗人员ST对未批准数据集DS1的成像损失判定结果RS实施了审查。如此,批准履历HSA是表示未批准数据集DS1显示在显示画面上的信息,或者是表示实施了审查的信息的一例。
在从用户输入保存命令的情况下,存储处理部66执行将已批准数据集DS2及批准履历HSA存储在成像损失图像DB12C中的存储处理。
图9表示会议画面12B的一例。在会议画面12B上显示有未批准数据集DS1。作为一例,在会议画面12B上逐个显示在会议中成为审查对象的未批准数据集DS1。在会议画面12B上显示有未批准数据集DS1中所包含的放射线图像P及成像损失判定结果RS。图9所示的未批准数据集DS1是包含初次拍摄的放射线图像P和再拍摄图像PR这两者的例子,还包含有初次拍摄的放射线图像P和再拍摄图像PR这两者的成像损失判定结果RS。而且,在图9的例子的成像损失判定结果RS中包含有一次判定结果RS1和二次判定结果RS2。
在未批准数据集DS1中包含有第1成像损失判定器LM1输出的一次判定结果RS1和基于操作者OP的二次判定结果RS2这两者的情况下,显示控制部62在显示控制处理中,可区分地显示一次判定结果RS1和二次判定结果RS2。由此,能够区分并验证一次判定结果RS1和二次判定结果RS2各自的妥当性。作为一例,会议通过多个医疗人员ST一边观察该会议画面12B一边进行意见交换而进行。
在会议画面12B上设置有显示按钮71、结束按钮72、修正按钮73、批准按钮74及保存按钮75的各种操作按钮。显示按钮71是用于显示未批准数据集DS1的操作按钮。当操作显示按钮71时,对显示控制部62输入显示命令,从而通过数据集获取部61获取的未批准数据集DS1被显示在会议画面12B上。结束按钮72是关闭会议画面12B的操作按钮。当结束会议时,会议画面12B被关闭。
修正按钮73是在修正未批准数据集DS1的成像损失判定结果RS时操作的按钮。当操作修正按钮73时,能够编辑未批准数据集DS1的成像损失判定结果RS。使用输入器件51的键盘等进行修正。基于修正按钮73的修正命令被输入到修正处理部63,修正处理部63根据修正命令对成像损失判定结果RS进行修正。
批准按钮74是在批准未批准数据集DS1的成像损失判定结果RS时操作的按钮。当操作批准按钮74时,批准命令被输入到批准处理部64,在批准处理部64中执行批准处理。
保存按钮75是在未批准数据集DS1被批准的情况下,将其保存为已批准数据集DS2的按钮。当操作保存按钮75时,保存命令被输入到存储处理部66。基于保存命令,存储处理部66执行将已批准数据集DS2存储于成像损失图像DB12C的存储处理。
并且,在会议画面12B上显示有表示在成像损失图像DB12C内有几件未批准数据集DS1的信息。在本例子中,显示有表示有6件未批准数据集DS1的信息。
图10表示图9所示的未批准数据集DS1的成像损失判定结果RS被修正的例子。在图10所示的例子中,对再拍摄图像PR的成像损失判定结果RS进行了修正。如图9所示,在初次拍摄的放射线图像P中,在一次判定结果RS1及二次判定结果RS2这两者中,判定为具有“剂量不足”的成像损失理由,但在再拍摄图像PR的成像损失判定结果RS中,在一次判定结果RS1及二次判定结果RS2中均出现无成像损失理由的结果。在会议中,通过对该未批准数据集DS1进行审查,作为一例,如图10所示,再拍摄图像PR的成像损失判定结果RS从“无成像损失理由”被修正为“剂量不足”。另一方面,对于初次拍摄的放射线图像P的成像损失判定结果RS,判定其为妥当,没有进行修正。
当针对图10所示的未批准数据集DS1,通过批准按钮74的操作进行批准处理时,如图11所示,图10所示的未批准数据集DS1变更为已批准数据集DS2。在图11的例子中,在会议画面12B中,在已批准数据集DS2中显示有表示被批准的标志70。作为一例,标志70为“已批准的”的文字。如图11所示,在已批准数据集DS2中,在初次拍摄的放射线图像P及再拍摄图像PR的各个中,作为会议的审查员的多个医疗人员ST的统一意见,记录有1个成像损失判定结果RS。当操作保存按钮75时,该已批准数据集DS2被存储在成像损失图像DB12C中。当新存储1件已批准数据集DS2时,未批准数据集DS1的剩余件数的显示会减少。在图10中的件数为6件,但在图11中变更为5件。
图12及图13的例子表示针对图12所示的未批准数据集DS1的成像损失判定结果RS不进行修正而直接被批准,从而如图13所示变更为已批准数据集DS2的例子。无论是图12所示的未批准数据集DS1还是图13所示的已批准数据集DS2,其成像损失判定结果RS均相同。如此,通过未批准数据集DS1的成像损失判定结果RS直接被批准,有时也会成为已批准数据集DS2的成像损失判定结果RS。
如图14所示,学习部67执行如下学习处理,即,使可与第1成像损失判定器LM1替换并且未搭载于放射线图像摄影装置11的第2成像损失判定器LM2学习。学习部67执行的学习处理为如下学习处理:使用从显示在成像损失图像管理装置12的显示器12A上的已批准数据集DS2,即,存储在成像损失图像DB12C中的已批准数据集DS2中选择的学习数据,使第2成像损失判定器LM2进行学习。并且,学习部67执行的学习处理是对第2成像损失判定器LM2的追加学习。学习部67基于批准履历HSA,从成像损失图像DB12C中选择已批准数据集DS2作为学习数据。不需要选择所有已批准数据集DS2作为学习数据,一部分即可。在已批准数据集DS2中,选择作为学习数据的标准能够适当进行设定。并且,学习数据的选择可以由学习部67进行,也可以由用户选择。
已批准数据集DS2中包括放射线图像P和成像损失判定结果RS。成像损失判定结果RS被用作与第2成像损失判定器LM2输出的成像损失判定结果RS进行对照的正解数据。在已批准数据集DS2中,除了初次拍摄的放射线图像P之外,有时还包括再拍摄图像PR。在这种情况下,初次拍摄的放射线图像P与成像损失判定结果RS的组、以及再拍摄图像PR与成像损失判定结果RS的组分别作为1件学习数据进行处理。
学习部67能够将作为所选择的已批准数据集DS2的学习数据累积在成像损失图像DB12C中。学习部67可以在学习数据的累积页数小于预先设定的设定页数时,不执行学习处理,并且在累积页数达到设定页数的情况下,执行第2成像损失判定器LM2的学习处理。设定页数等设定信息被记录在存储装置54中,能够进行适当变更。
学习部67具有主处理部67A、评价部67B及更新部67C。主处理部67A从存储装置54读入成为学习处理的对象的第2成像损失判定器LM2,对所读入的第2成像损失判定器LM2输入选择作为学习数据的已批准数据集DS2中所包含的放射线图像P或再拍摄图像PR。然后,使第2成像损失判定器LM2执行成像损失判定处理,该成像损失判定处理基于放射线图像P或再拍摄图像PR,输出包含成像损失理由的有无及其内容的成像损失判定结果RS。第2成像损失判定器LM2的基本结构与在图4中所说明的第1成像损失判定器LM1相同。
主处理部67A中,第2成像损失判定器LM2将成像损失判定结果RS作为输出数据OD输出至评价部67B。评价部67B对作为输出数据OD的成像损失判定结果RS和作为学习数据的已批准数据集DS2中所包含的正解数据AD进行比较,利用损失函数将两者之差评价为损失。与上述的第1成像损失判定器LM1同样地,在第2成像损失判定器LM2中,多个成像损失理由分别作为概率被输出。因此,输出数据OD的成像损失理由不正确时的损失自然不必多说,即使是正解的情况,在作为其概率而输出的输出值低于目标值的情况下,将目标值和输出值之差评价为损失。评价部67B将所评价的损失作为评价结果输出至更新部67C。
更新部67C以减小评价结果中所包含的损失的方式,更新第2成像损失判定器LM2的编码器46中的滤波器系数及分类部47中的感知器的权重等的值。
学习处理在学习数据累积到设定页数以上的情况下执行。因此,学习处理通过使用了多个学习数据的批量处理进行。重复从作为学习数据的已批准数据集DS2的输入到更新的一系列的处理,直到结束定时为止。作为结束定时,例如,是预定数量的已批准数据集DS2的学习全部结束的情况、损失低于目标值的情况等。
在结束定时到来的情况下,学习部67将追加学习完毕的第2成像损失判定器LM2A存储在存储装置54中。此时,追加学习完毕的第2成像损失判定器LM2A由测试处理部68进行测试。
如图15所示,测试处理部68对追加学习完毕的第2成像损失判定器LM2A执行测试处理。作为一例,测试处理根据来自输入器件51的用户的命令而开始。在测试处理中,测试处理部68将测试数据TD输入至第2成像损失判定器LM2A,使第2成像损失判定器LM2A执行成像损失判定处理,并输出测试结果TR。如此,测试处理部68对执行了学习处理的第2成像损失判定器LM2A执行使用测试数据TD的测试处理,并能够控制在显示器12A上显示测试结果TR。
测试数据TD与已批准数据集DS2同样地,由放射线图像P、作为正解数据AD的成像损失判定结果RS的组构成。在测试处理中,追加学习完毕的第2成像损失判定器LM2A基于测试数据TD的放射线图像P,输出作为测试结果TR的成像损失判定结果RS。测试数据TD例如从已批准数据集DS2中的、除了选择作为学习数据的数据以外的数据中选择。测试结果TR例如由用户进行判定。在该测试结果TR不良的情况下,进一步执行基于学习部67的追加学习。在测试结果TR良好的情况下,判定为追加学习完毕的第2成像损失判定器LM2A发挥目标性能,并结束追加学习。
当追加学习结束时,通过由追加学习完毕的第2成像损失判定器LM2A替换追加学习前的第2成像损失判定器LM2,更新第2成像损失判定器LM2。
在追加学习结束并且更新了第2成像损失判定器LM2的情况下,更新通知部69将更新通知发送到放射线图像摄影装置11的控制台19。即,在学习部67对第2成像损失判定器LM2执行学习处理的情况下,更新通知部69向控制台19发送更新通知。更新通知的发送命令例如由确认了成像损失图像管理装置12中的测试处理的测试结果TR的用户,通过输入器件51进行输入。更新通知是表示能够更新控制台19的第1成像损失判定器LM1的通知。
在CPU32接收到更新通知的情况下,例如,在显示器19A上显示“能够更新第1成像损失判定器LM1”等消息。然后,当看到该消息的用户在任意的定时对CPU32输入更新命令时,CPU32通过将第1成像损失判定器LM1替换为所更新的第2成像损失判定器LM2,执行更新第1成像损失判定器LM1的更新处理。当然,在CPU32接收到更新通知的情况下,也可以不等待用户的更新命令的输入,而由CPU32在适当的定时执行更新第1成像损失判定器LM1的更新处理。如此,更新通知是放射线图像摄影装置11开始第1成像损失判定器LM1的更新处理的触发、或是能够在控制台19中显示的通知。
所更新的第2成像损失判定器LM2例如从成像损失图像管理装置12发送到控制台19的存储装置34的共享文档。发送处理例如在从输入器件51输入更新通知的发送命令的定时,由存储处理部66进行。如此,存储处理部66将执行了学习处理的第2成像损失判定器LM2,存储在放射线图像摄影装置11的控制台19可访问的存储部即存储装置34的共享文档中。另外,在成像损失图像管理装置12的共享文档中存储所更新的第2成像损失判定器LM2,通过从控制台19侧访问,控制台19可以获取第2成像损失判定器LM2。并且,也可以经由控制台19的维护装置等除了成像损失图像管理装置12及控制台19以外的计算机,进行使用第2成像损失判定器LM2的第1成像损失判定器LM1的更新处理。
以下,使用图17~图20所示的流程图,对基于上述结构的作用进行说明。当使用放射线图像摄影装置11进行放射线摄影时,在步骤S1100中,进行使用控制台19的未批准数据集DS1的生成及输出。
如图18所示,在步骤S1100中,控制台19首先在步骤S1101中,获取由放射线图像检测装置18拍摄的放射线图像P,在步骤S1102中,将所获取的放射线图像P显示在摄影图像确认画面19B上(参考图3)。在步骤S1103中,控制台19等待基于AI判定按钮41(参考图3)的操作的AI判定命令的输入。当由操作者OP输入AI判定命令时,控制台19执行基于以放射线图像P作为输入数据的第1成像损失判定器LM1的成像损失判定(步骤S1104)。当执行基于第1成像损失判定器LM1的成像损失判定时,输出基于第1成像损失判定器LMl的成像损失判定结果RS即一次判定结果RS1。将所输出的一次判定结果RS1显示在摄影图像确认画面19B上(步骤S1 105)。一次判定结果RS1和放射线图像P显示未未批准数据集DS1。
操作者OP确认一次判定结果RS1和放射线图像P,在判断为一次判定结果RS1不妥当时等根据需要,通过操作二次判定输入按钮42(参考图3),输入基于操作者OP的成像损失判定结果即二次判定结果RS2。由于二次判定结果RS2的输入由操作者OP任意进行,因此在一次判定结果RS1和操作者OP的判断相同的情况下,可以输入相同的成像损失理由,也可以省略二次判定结果RS2。
在步骤S1106中,具有二次判定结果RS2的输入的情况下,在步骤S1107中,将基于操作者OP的二次判定结果RS2显示在摄影图像确认画面19B上。在未输入二次判定结果RS2的情况下,转移到步骤S1108。
在需要再拍摄的情况下,操作者OP通过操作再拍摄按钮43而进行再拍摄。在进行再拍摄的情况下,控制台19对所再拍摄的放射线图像P即再拍摄图像PR重复步骤S1101~步骤S1107的处理。
然后,当由操作者OP操作图像输出按钮44时,包括放射线图像P和成像损失判定结果RS的未批准数据集DS1被输出到图像DB37及成像损失图像DB12C中(步骤S1109)。
在图17中,控制台19在步骤S1100中进行未批准数据集DS1的生成及输出时,在步骤S1200中,将未批准数据集DS1的生成通知发送到成像损失图像管理装置12。
成像损失图像管理装置12等待接收未批准数据集DS1的生成通知(步骤S2100)。在具有未批准数据集DS1的情况下(在步骤S2100中为是),例如,成像损失图像管理装置12通过将其显示在显示画面上来通知作为用户的医疗人员ST。然后,基于医疗人员ST的命令,成像损失图像管理装置12进行基于会议的批准数据集的生成及输出(步骤S2200)。
如图19所示,在步骤S2200中,成像损失图像管理装置12等待通过会议画面12B的显示按钮71(参考图9)的显示命令的输入。当成像损失图像管理装置12通过显示按钮71接受显示命令的输入时,数据集获取部61从成像损失图像DB12C获取未批准数据集DS1(步骤S2202)。然后,在步骤S2203中,显示控制部62将包括放射线图像P和成像损失判定结果RS的未批准数据集DS1显示在会议画面12B(参考图9)上。在未批准数据集DS1包括再拍摄图像PR的情况下,再拍摄图像PR也显示在会议画面12B上。多个医疗人员ST一边确认显示在图9的会议画面12B上的未批准数据集DS1,一边针对成像损失判定结果RS的妥当性实施审查。
在步骤S2204中,成像损失图像管理装置12针对成像损失判定结果RS,等待基于医疗人员ST的修正命令的输入。然后,通过修正按钮73的操作,对成像损失判定结果RS输入修正命令时,修正处理部63基于修正命令,对成像损失判定结果RS进行修正(步骤S2205)。然后,在步骤S2206中,显示由医疗人员ST修正的成像损失判定结果RS。在步骤S2204中,在未输入修正命令的情况下,成像损失图像管理装置12转移到步骤S2207。
在步骤S2207中,成像损失图像管理装置12针对成像损失判定结果RS,等待基于医疗人员ST的批准命令的输入。然后,通过批准按钮74的操作,对成像损失判定结果RS输入批准命令时,批准处理部64记录批准信息(步骤S2208)。若批准信息被记录,则未批准数据集DS1变更为已批准数据集DS2。批准信息作为批准履历HSA,与包括成像损失判定结果RS的已批准数据集DS2建立关联而进行记录。成像损失图像管理装置12在步骤2209中,等待基于保存按钮75的操作的保存命令,当输入保存命令时,输出包括放射线图像P及再拍摄图像PR和被批准的成像损失判定结果RS的已批准数据集DS2。已批准数据集DS2通过存储处理部66存储在成像损失图像DB12C中。
在图17所示的步骤S2300中,成像损失图像管理装置12判定从已批准数据集DS2中选择的学习数据的累积页数是否为设定页数以上。学习部67在学习数据的累积页数小于设定页数时,不执行学习处理,在学习数据的累积页数为设定页数以上的情况下(在步骤S2300中为是),转移到步骤S2400,执行第2成像损失判定器LM2的追加学习。
在图20所示的步骤S2400中,首先,学习部67使用从已批准数据集DS2中选择的学习数据执行学习处理(步骤S2401)。在学习处理中,如图14所示,进行第2成像损失判定器LM2的追加学习。当学习处理结束时,如图15所示,对追加学习完毕的第2成像损失判定器LM2执行使用测试数据TD的测试处理(步骤S2402)。当执行测试处理时,显示测试结果TR(步骤S2403)。测试结果TR由用户进行确认。在由用户判定为测试结果TR良好的情况下,通过摄入测试处理的结束命令,结束追加学习(在步骤S2404中为是)。在测试结果TR不良的情况下,不输入结束命令(步骤S2404),重复学习处理。
在图17所示的步骤S2500中,在追加学习结束了的情况下,将追加学习完毕的第2成像损失判定器LM2A存储在存储装置54中。通过追加学习完毕的第2成像损失判定器LM2A更新存储装置54内的第2成像损失判定器LM2。然后,在步骤S2600中,更新通知部69向放射线图像摄影装置11的控制台19发送表示能够通过第2成像损失判定器LM2更新第1成像损失判定器LM1的更新通知。
在步骤S1300中,控制台19等待接收更新通知。然后,当控制台19接收更新通知时(在步骤S1300中为是),如图16所示,在显示器19A上显示更新通知,并且基于用户的命令执行步骤S1400的处理。在步骤S1400中,控制台19的CPU32通过替换为通过追加学习而更新的第2成像损失判定器LM2来更新第1成像损失判定器LM1。
如上所述,本发明的技术所涉及的成像损失图像管理装置12在由放射线图像摄影装置11拍摄的被摄体的放射线图像(作为一例,放射线图像P及再拍摄图像PR)中至少管理成像损失图像。成像损失图像管理装置12的处理器(作为一例,CPU52)执行如下处理:数据集获取处理,获取数据集(作为一例,未批准数据集DS1),所述数据集包括输入到第1成像损失判定器的放射线图像和从第1成像损失判定器LM1输出的判定结果(作为一例,成像损失判定结果RS),所述第1成像损失判定器(作为一例,第1成像损失判定器LM1)由机械学习模型构成,进行针对放射线图像P的成像损失判定,并搭载于放射线图像摄影装置11的控制台19;及显示控制处理,进行在显示器上显示数据集的控制。而且,处理器执行如下处理:修正处理,在输入有针对所显示的数据集的判定结果的修正命令的情况下,针对成像损失判定结果实施修正;及学习处理,使可与第1成像损失判定器替换并且未搭载于放射线图像摄影装置的第2成像损失判定器(作为一例,第2成像损失判定器LM2)学习,其中,将从所显示的数据集中选择的数据集作为学习数据,使第2成像损失判定器进行追加学习。
由此,能够抑制搭载于放射线图像摄影装置的第1成像损失判定器的判定精度的降低。即,由于本发明的技术所涉及的成像损失图像管理装置12具备将未批准数据集DS1等数据集显示在显示器上的功能,因此例如能够用于由医生及工程师等多名医疗人员ST对成像损失判定结果RS进行审查的会议中。然后,当进行这样的会议时,通过多名医疗人员ST对所显示的数据集中所包含的成像损失判定结果RS的妥当性进行验证。并且,成像损失图像管理装置12在成像损失判定结果RS有误的情况下,还能够根据需要进行成像损失判定结果RS的修正。因此,在成像损失图像管理装置12中所显示的数据集的成像损失判定结果RS与操作者OP单独的判断相比,可靠性更高。
然后,成像损失图像管理装置12执行学习处理,所述学习处理将从所显示的数据集中选择的数据集作为学习数据,使可与第1成像损失判定器替换的第2成像损失判定器学习。因此,能够通过利用比以往可靠性更高的学习数据,使第2成像损失判定器进行追加学习,并通过追加学习完毕的第2成像损失判定器进行替换,更新第1成像损失判定器。因此,根据本发明的技术,与利用通过操作者单独的判断而修正判定结果的学习数据使第1成像损失判定器学习的以往技术相比,能够抑制搭载于放射线图像摄影装置的第1成像损失判定器的判定精度的降低。
并且,如图9等所示,在作为数据集的一例的未批准数据集DS1包含有第1成像损失判定器输出的一次判定结果RS1和基于操作者OP的二次判定结果RS2这两者的情况下,CPU52的显示控制部62在显示控制处理中,可区分地显示一次判定结果RS1和二次判定结果RS2。由此,能够区分并验证一次判定结果RS1和二次判定结果RS2各自的妥当性。
在CPU52中,批准处理部64对作为所显示的数据集的一例的未批准数据集DS1的成像损失判定结果RS,输入基于用户的批准命令的情况下,将表示被批准的批准信息(作为一例,批准履历HSA)与批准对象的数据集建立关联而进行记录。通过将批准信息与数据集建立关联而进行记录,容易搜索已批准数据集。并且,通过记录有批准信息,在会议等中被批准的事实变得明确,因此与没有批准信息的情况相比,容易搜索可靠性更高的数据集。
并且,批准信息是指表示针对作为判定结果的一例的成像损失判定结果RS实施了基于用户的审查的信息。然后,已批准数据集为审查对象的数据集,批准信息为表示实施了审查的信息的一例。即,在针对成像损失判定结果RS进行基于用户的审查的情况下,批准处理部64将表示实施了审查的信息(作为一例,批准信息)与审查对象的未批准数据集DS1建立关联而进行记录。认为实施了审查的数据集的判定结果的可靠性更高,因此若记录有表示实施了审查的信息,则容易搜索可靠性更高的数据集。
另外,在本例子中,将批准信息作为表示实施了审查的信息的一例进行了表示,但也可以将批准信息和表示实施了审查的信息进行区分。可以将这些信息双方进行记录,也可以仅记录其中一方。作为表示是可靠性更高的数据集的根据的信息,优选为批准信息,但即使只是表示实施了审查的信息,作为表示是可靠性更高的数据集的根据的信息也是有效的。在记录表示实施了审查的信息的情况下,例如,在成像损失图像管理装置12的会议画面12B上,除了批准按钮74或者代替它,设置用于输入审查记录的操作按钮。然后,在操作该操作按钮的情况下,CPU52将表示实施了审查的信息与数据集建立关联而记录。
并且,也可以代替批准信息及表示实施了审查的信息,而仅记录有表示数据集显示在成像损失图像管理装置12的显示画面上的显示履历。在数据集通过成像损失图像管理装置12而显示的情况下,在会议等中,对数据集中所包含的判定结果实施了审查的可能性较高。在成像损失图像管理装置12中,在会议画面12B等显示画面上显示未批准数据集DS1等数据集的情况下,CPU52将数据集与表示显示有数据集的信息建立关联而进行记录。CPU52将表示所显示的信息例如记录为显示履历。显示履历中例如与批准履历HSA同样地,记录有数据集的ID信息和显示日期和时间。
即,在上述例子中,以从已批准数据集DS2中选择学习数据的例子进行了说明,但学习数据的选择源也可以不是已批准数据集DS2。具体而言,学习数据的选择源可以为记录有表示实施了审查的信息的数据集,而且,只要是至少有在成像损失图像管理装置12上显示的记录的数据集即可。
并且,CPU52能够将作为学习数据的一例的已批准数据集DS2累积在作为存储部的一例的成像损失图像DB12C中。如本例子中所示,通过累积学习数据,能够通过使用了多个学习数据的批量处理进行第2成像损失判定器LM2的学习处理。通过在批量处理中进行学习处理,具有如下效果。
第一,与在每次产生1个学习数据时执行学习处理的逐次处理相比,批量处理更能够减少学习处理的执行次数,因此能够抑制处理的负荷。
并且,第二,与逐次处理相比,批量处理更能够减少对第2成像损失判定器LM2的判定精度的不利影响。这是因为在逐次处理的情况下,在每产生1件学习数据时就进行处理,因此例如,在相同的成像损失理由的学习数据连续的情况下,由于参数会被该成像损失理由优化,因此其他成像损失理由的判定精度有可能会降低。例如,在膝关节内旋等成像损失理由的学习数据连续的情况下,剂量不足等成像损失理由的判定精度会降低。如此,在学习数据中存在偏差的情况下,若进行逐次处理,则容易产生对判定精度的不利影响。在批量处理中,由于学习数据的数量较多,因此学习数据的偏差被降低的可能性较高,因此与逐次处理相比,能够抑制判定精度的不利影响。
并且,在逐次处理中,例如,在1件学习数据已经是明显偏离学习完毕的学习数据的平均特征的特定学习数据的情况下,由于仅由特定学习数据进行学习处理,因此有可能导致判定精度的不利影响。在批量处理的情况下,通过用其他学习数据对特定学习数据的特征进行平均化,能够抑制判定精度的不利影响可能性较高。由于这些理由,与逐次处理相比,更优选为批量处理。另外,在本例子中,用批量处理进行了说明,但也可以进行逐次处理。
并且,如图16及图17所示,在CPU52对第2成像损失判定器LM2执行学习处理的情况下,向放射线图像摄影装置11的控制台19发送表示能够通过第2成像损失判定器LM2更新第1成像损失判定器LM1的更新通知。在控制台19中,通过接收更新通知,能够在放射线图像摄影装置11侧适当地判定第1成像损失判定器LM1的更新定时。
并且,更新通知是放射线图像摄影装置11开始第1成像损失判定器LM1的更新处理的触发、或者是能够在放射线图像摄影装置11的控制台19中显示的通知。放射线图像摄影装置11的控制台19通过将更新通知作为触发而开始更新处理,能够在适当的更新定时更新第1成像损失判定器LM1。并且,若更新通知是能够在控制台19中显示的通知,则用户能够在适当的定时更新第1成像损失判定器LM1。
CPU52将执行了追加学习的学习处理的第2成像损失判定器LM2存储在放射线图像摄影装置11可访问的存储部中。如图16所示,作为一例,存储部为图16所示的控制台19的存储装置34的共享文档。若在放射线图像摄影装置11可访问的存储部中存储第2成像损失判定器LM2,则能够在放射线图像摄影装置11侧,在适当的定时进行更新。
另外,对于通过第2成像损失判定器LM2更新第1成像损失判定器LM1的方式,并不限定于此,也可以为成像损失图像管理装置12的CPU52访问放射线图像摄影装置11的第1成像损失判定器LM1而强制进行更新的方式。并且,也可以使用除了控制台19及成像损失图像管理装置12以外的维护装置等更新第1成像损失判定器LM1。
CPU52对执行了追加学习的学习处理的第2成像损失判定器LM2执行使用测试数据的测试处理,并能够控制在显示器12A上显示测试结果TR。由于成像损失图像管理装置12具备针对第2成像损失判定器LM2利用测试数据进行测试的功能,因此与不执行测试处理的情况相比,能够将判定精度更高的第2成像损失判定器作为更新对象而提供。
即将执行追加学习的学习处理之前的第2成像损失判定器LM2与第1成像损失判定器LM1相同,CPU52对第2成像损失判定器LM2执行追加学习。由此,在成像损失图像管理装置12侧,容易掌握在放射线图像摄影装置11中运用的第1成像损失判定器LM1的状态、以及通过追加学习而判定精度提高了何种程度等的性能。
另外,第1成像损失判定器LM1与第2成像损失判定器LM2不同,第2成像损失判定器LM2可以对第1成像损失判定器LM1加以改良。
另外,在上述例子中,对进行第2成像损失判定器LM2的追加学习之后,执行测试处理的例子进行了说明,但也可以不进行测试处理。当然,在可靠地确保第2成像损失判定器LM2的品质的含义上,更优选执行测试处理。
并且,在上述例子中,示出了成像损失图像管理装置12获取所有成像损失图像DB12C内的未批准数据集DS1作为会议的审查对象的例子,但也可以获取未批准数据集DS1的一部分,将所获取的一部分设为审查对象。例如,CPU52可以在数据集获取处理中,获取将未批准数据集DS1作为一例表示的数据集中的、在一次判定结果RS1及二次判定结果RS2中的至少一方中包括放射线图像P有可能为成像损失图像的成像损失判定结果的数据集。
即,如图21所示,CPU52从会议中的审查对象中去除在一次判定结果RS1及二次判定结果RS2这两者中没有成像损失理由的未批准数据集DS1。由此,若将包括由放射线图像摄影装置11拍摄的放射线图像P的所有数据集设为审查对象,则基于医疗人员ST的审查负荷较大。通过缩小获取的数据集,能够减轻审查的负荷。并且,在一次判定结果RS1及二次判定结果RS2这两者没有成像损失理由的数据集不对应于成像损失图像的可能性较高。即使去除这些数据集,也能够确保具有成像损失理由的学习数据的数量。
并且,在上述实施方式中,虽然用字符表示了成像损失判定结果RS,但也可以利用图像显示。例如,也可以输出在放射线图像P内强调显示了成为成像损失理由的根据的区域的图像。作为该图像的例子,也可以使用添加了表示成为根据的区域的注释的图像。并且,作为另一例,也可以使用根据针对成像损失理由的判定的贡献度的程度而改变颜色或浓度的热图。另外,除了热图之外,也可以利用字符显示成像损失判定结果RS。并且,在成像损失判定结果RS中可以包含在放射线图像P中放大了成为成像损失理由的根据的区域的放大图像。例如,膝关节的内旋等成像损失理由的情况下,成像损失判定结果RS中包含膝关节的放大图像。
并且,在上述实施方式中,以成像损失图像管理装置12仅具有第2成像损失判定器LM2的追加学习功能,放射线图像摄影装置11不具有追加学习功能的例子进行了说明,但放射线图像摄影装置11也可以具有第1成像损失判定器LM1的追加学习功能。虽然基于放射线图像摄影装置11的追加学习功能中也存在以往技术的课题,但通过与本例子的成像损失图像管理装置12组合,能够期待抑制判定精度的降低的效果。
并且,作为放射线图像摄影装置11,以安装在摄影室中的放射线图像摄影装置11为例子进行了说明,但作为放射线图像摄影装置11也可以具有能够通过手推车移动的移动型摄影装置。
并且,本发明的技术并不只限于X射线,还能够适用于使用γ射线等其他放射线对被摄体进行拍摄的系统。
在上述各实施方式中,例如,执行数据集获取部61、显示控制部62、修正处理部63、批准处理部64、存储处理部66、学习部67、测试处理部68及更新通知部69等各种处理的处理部(processing unit:处理单元)的硬件结构为如下所示的各种处理器(processor)。
各种处理器中包括CPU、可编程逻辑器件(Programmable Logic Device:PLD)、专用电路等。总所周知,CPU为执行软件(程序)而作为各种处理部发挥作用的通用的处理器。PLD为FPGA(Field Programmable Gate Array:现场可编程门阵列)等在制造后能够变更电路结构的处理器。专用电路为ASIC(Application Specific Integrated Circuit:专用集成电路)等具有为了执行特定的处理而专门设计的电路结构的处理器。如经由数据总线而连接于CPU的存储器那样,存储器可以连接于处理器,也可以如FPGA那样内置于处理器本身。
1个处理部可以由这些各种处理器中的一个构成,也可以由相同种类或不同种类的2个以上的处理器的组合(例如,多个FPGA或CPU与FPGA的组合)构成。并且,也可以由1个处理器构成多个处理部。
作为由1个处理器构成多个处理部的例子,第一,有由1个以上的CPU与软件的组合构成1个处理器且该处理器作为多个处理部发挥作用的方式。第二,有如下方式:以片上系统(System On Chip:SoC)等为代表,使用由1个IC芯片实现包含多个处理部的系统整体的功能的处理器。如此,各种处理部使用1个以上的上述各种处理器来构成为硬件结构。
另外,更具体而言,这些各种处理器的硬件结构为将半导体元件等电路元件组合而成的电路(circuitry)。
本发明并不限于上述各实施方式,只要不脱离本发明的宗旨,则当然能够采用各种结构。而且,本发明除了程序之外,还涉及非暂时存储程序的、可由计算机读取的存储介质。
Claims (16)
1.一种成像损失图像管理装置,在由放射线图像摄影装置拍摄的被摄体的放射线图像中,至少管理成像损失图像,所述成像损失图像管理装置具备:
处理器及内置或连接于处理器的存储器,
所述处理器执行如下处理:
数据集获取处理,获取数据集,所述数据集包括输入到第1成像损失判定器的所述放射线图像和从所述第1成像损失判定器输出的判定结果,所述第1成像损失判定器由机械学习模型构成,进行针对所述放射线图像的成像损失判定,并且搭载于所述放射线图像摄影装置;
显示控制处理,进行在显示器上显示所述数据集的控制;
修正处理,在输入有针对所显示的所述数据集的所述判定结果的修正命令的情况下,针对所述判定结果实施修正;及
学习处理,使可与所述第1成像损失判定器替换并且未搭载于所述放射线图像摄影装置的第2成像损失判定器学习,其中,将从所显示的所述数据集中选择的数据集作为学习数据,使第2成像损失判定器进行学习。
2.根据权利要求1所述的成像损失图像管理装置,其中,
在所述数据集中,除了所述第1成像损失判定器输出的判定结果即一次判定结果之外,还包括基于所述放射线图像摄影装置的操作者的判定结果即二次判定结果这两者的情况下,
所述处理器在所述显示控制处理中,可区分地显示所述一次判定结果和所述二次判定结果。
3.根据权利要求2所述的成像损失图像管理装置,其中,
所述处理器在所述数据集获取处理中,获取所述数据集中的、在所述一次判定结果及所述二次判定结果中的至少一方中包括所述放射线图像有可能相当于成像损失图像的成像损失判定结果的数据集。
4.根据权利要求1至3中任一项所述的成像损失图像管理装置,其中,
在对所显示的所述数据集的所述判定结果输入基于用户的批准命令的情况下,所述处理器将表示被批准的批准信息与批准对象的所述数据集建立关联而进行记录。
5.根据权利要求1至4中任一项所述的成像损失图像管理装置,其中,
在用户对所述判定结果进行审查的情况下,
所述处理器将表示实施了所述审查的信息与审查对象的所述数据集建立关联而进行记录。
6.根据权利要求1至5中任一项所述的成像损失图像管理装置,其中,
所述处理器能够将所述学习数据累积在存储部中。
7.根据权利要求1至6中任一项所述的成像损失图像管理装置,其中,
所述处理器在所述学习数据的累积页数小于预先设定的设定页数时,不执行所述学习处理,并且在所述累积页数达到设定页数的情况下,执行所述学习处理。
8.根据权利要求1至7中任一项所述的成像损失图像管理装置,其中,
所述处理器对所述第2成像损失判定器执行所述学习处理的情况下,向所述放射线图像摄影装置发送表示能够通过所述第2成像损失判定器更新所述第1成像损失判定器的更新通知。
9.根据权利要求8所述的成像损失图像管理装置,其中,
所述更新通知是所述放射线图像摄影装置开始所述第1成像损失判定器的更新处理的触发、或者是能够在所述放射线图像摄影装置的控制台中显示的通知。
10.根据权利要求1至9中任一项所述的成像损失图像管理装置,其中,
所述处理器将执行了所述学习处理的所述第2成像损失判定器,存储在所述放射线图像摄影装置可访问的存储部。
11.根据权利要求1至10中任一项所述的成像损失图像管理装置,其中,
所述处理器对执行了所述学习处理的所述第2成像损失判定器,执行使用测试数据的测试处理,
能够控制在显示器上显示测试结果。
12.根据权利要求1至11中任一项所述的成像损失图像管理装置,其中,
即将执行所述学习处理之前的所述第2成像损失判定器与所述第1成像损失判定器相同,
所述处理器对所述第2成像损失判定器执行所述学习处理。
13.一种成像损失图像管理装置的工作方法,所述成像损失图像管理装置在由放射线图像摄影装置拍摄的被摄体的放射线图像中,至少管理成像损失图像,所述成像损失图像管理装置的工作方法包括如下处理:
数据集获取处理,获取数据集,所述数据集包括输入到第1成像损失判定器的所述放射线图像和从所述第1成像损失判定器输出的判定结果,所述第1成像损失判定器由机械学习模型构成,进行针对所述放射线图像的成像损失判定,并且搭载于所述放射线图像摄影装置;
显示控制处理,进行在显示器上显示所述数据集的控制;
修正处理,在输入有针对所显示的所述数据集的所述判定结果的修正命令的情况下,针对所述判定结果实施修正;及
学习处理,使可与所述第1成像损失判定器替换并且未搭载于所述放射线图像摄影装置的第2成像损失判定器学习,其中,将从所显示的所述数据集中选择的数据集作为学习数据,使第2成像损失判定器进行学习。
14.一种工作程序,其使计算机执行如下处理:
数据集获取处理,获取数据集,所述数据集包括输入到第1成像损失判定器的放射线图像和从所述第1成像损失判定器输出的判定结果,所述第1成像损失判定器由机械学习模型构成,进行针对所述放射线图像的成像损失判定,并且搭载于放射线图像摄影装置;
显示控制处理,进行在显示器上显示所述数据集的控制;
修正处理,在输入有针对所显示的所述数据集的所述判定结果的修正命令的情况下,针对所述判定结果实施修正;及
学习处理,使可与所述第1成像损失判定器替换并且未搭载于所述放射线图像摄影装置的第2成像损失判定器学习,其中,将从所显示的所述数据集中选择的数据集作为学习数据,使第2成像损失判定器进行学习。
15.根据权利要求14所述的工作程序,其使所述计算机作为成像损失图像管理装置发挥作用,所述成像损失图像管理装置在由所述放射线图像摄影装置拍摄的被摄体的放射线图像中,至少管理成像损失图像。
16.一种放射线图像摄影系统,其具备:权利要求1至12中任一项所述的成像损失图像管理装置及放射线图像摄影装置。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2021-057320 | 2021-03-30 | ||
JP2021057320 | 2021-03-30 | ||
PCT/JP2022/015617 WO2022210753A1 (ja) | 2021-03-30 | 2022-03-29 | 写損画像管理装置、写損画像管理装置の作動方法及び作動プログラム、並びに放射線画像撮影システム |
Publications (1)
Publication Number | Publication Date |
---|---|
CN117460456A true CN117460456A (zh) | 2024-01-26 |
Family
ID=83456373
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202280025678.8A Pending CN117460456A (zh) | 2021-03-30 | 2022-03-29 | 成像损失图像管理装置、成像损失图像管理装置的工作方法及工作程序、以及放射线图像摄影系统 |
Country Status (5)
Country | Link |
---|---|
US (1) | US20240008834A1 (zh) |
EP (1) | EP4318392A1 (zh) |
JP (1) | JPWO2022210753A1 (zh) |
CN (1) | CN117460456A (zh) |
WO (1) | WO2022210753A1 (zh) |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006218139A (ja) * | 2005-02-14 | 2006-08-24 | Fuji Photo Film Co Ltd | 写損情報集計システム |
US10755407B2 (en) * | 2018-01-30 | 2020-08-25 | General Electric Company | Systems and methods for capturing deep learning training data from imaging systems |
JP7376982B2 (ja) | 2018-08-14 | 2023-11-09 | キヤノン株式会社 | 情報処理装置、放射線撮影システム、情報処理方法およびプログラム |
CN113677273A (zh) * | 2019-04-11 | 2021-11-19 | 富士胶片株式会社 | 放射线摄影装置及放射线摄影系统 |
JP2020199163A (ja) * | 2019-06-12 | 2020-12-17 | キヤノン株式会社 | 放射線撮影支援システム、放射線撮影支援方法及びプログラム |
JP2022035719A (ja) * | 2020-08-21 | 2022-03-04 | コニカミノルタ株式会社 | 写損判断支援装置及びプログラム |
-
2022
- 2022-03-29 WO PCT/JP2022/015617 patent/WO2022210753A1/ja active Application Filing
- 2022-03-29 JP JP2023511404A patent/JPWO2022210753A1/ja active Pending
- 2022-03-29 EP EP22780964.7A patent/EP4318392A1/en active Pending
- 2022-03-29 CN CN202280025678.8A patent/CN117460456A/zh active Pending
-
2023
- 2023-09-27 US US18/475,224 patent/US20240008834A1/en active Pending
Also Published As
Publication number | Publication date |
---|---|
EP4318392A1 (en) | 2024-02-07 |
WO2022210753A1 (ja) | 2022-10-06 |
JPWO2022210753A1 (zh) | 2022-10-06 |
US20240008834A1 (en) | 2024-01-11 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110114834B (zh) | 用于医疗程序的深度学习医疗系统和方法 | |
US8831324B2 (en) | Surgical method and workflow | |
US7949098B2 (en) | Method for determining reduced exposure conditions for medical images | |
US20140119514A1 (en) | Radiation imaging control apparatus, method of controlling radiation imaging control apparatus, medical imaging apparatus, medical image display method, and storage medium | |
CN103505227B (zh) | 放射线摄像控制设备和放射线摄像系统 | |
US20110246521A1 (en) | System and method for discovering image quality information related to diagnostic imaging performance | |
US20090279764A1 (en) | Small-scale diagnosis system | |
JP2007012071A (ja) | 臨床および/または医療技術のシステムの試験方法ならびに臨床および/または医療技術のシステムにおける医学技術検査経過の制御方法 | |
CN112699868A (zh) | 一种基于深度卷积神经网络的图像识别方法、设备 | |
CN113747838A (zh) | 基于医学设备的日志分析来自动校正图像质量的医学成像系统和方法 | |
US20230071965A1 (en) | Methods and systems for automated scan protocol recommendation | |
CN1307587C (zh) | 图像管理方法和装置、以及程序 | |
JP2017184875A (ja) | 放射線撮影システム、情報端末、放射線撮影装置、放射線撮影方法、及びプログラム | |
US20200111558A1 (en) | Information processing apparatus, medical image display apparatus, and storage medium | |
US20100042434A1 (en) | System and method for discovering information in medical image database | |
EP4211545A1 (en) | System and method for image quality review of medical images | |
CN111386576A (zh) | 基于实时工作流程分析的人员自动化辅助和质量保证 | |
CN117460456A (zh) | 成像损失图像管理装置、成像损失图像管理装置的工作方法及工作程序、以及放射线图像摄影系统 | |
CN115311302B (zh) | 股骨头缺血坏死分期诊断系统和存储介质 | |
JP5693659B2 (ja) | 制御装置、撮影装置、制御システム、撮影システム、制御方法、プログラム | |
US7558427B2 (en) | Method for analyzing image data | |
JPH07320034A (ja) | Pacs | |
CN110568471A (zh) | 确定能带的阈值的方法、计算单元和医学成像设备 | |
JP3930472B2 (ja) | マンモグラフィ装置 | |
EP3680912B1 (en) | Technique for performing a quality assessment for a medical image |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |