CN107788998A - 医用图像系统以及计算机可读取的记录介质 - Google Patents
医用图像系统以及计算机可读取的记录介质 Download PDFInfo
- Publication number
- CN107788998A CN107788998A CN201710747065.6A CN201710747065A CN107788998A CN 107788998 A CN107788998 A CN 107788998A CN 201710747065 A CN201710747065 A CN 201710747065A CN 107788998 A CN107788998 A CN 107788998A
- Authority
- CN
- China
- Prior art keywords
- region
- information
- clinical location
- interest
- breast
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment
- A61B6/46—Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment with special arrangements for interfacing with the operator or the patient
- A61B6/461—Displaying means of special interest
- A61B6/465—Displaying means of special interest adapted to display user selection data, e.g. graphical user interface, icons or menus
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment
- A61B6/46—Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment with special arrangements for interfacing with the operator or the patient
- A61B6/467—Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment with special arrangements for interfacing with the operator or the patient characterised by special input means
- A61B6/469—Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment with special arrangements for interfacing with the operator or the patient characterised by special input means for selecting a region of interest [ROI]
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment
- A61B6/50—Clinical applications
- A61B6/502—Clinical applications involving diagnosis of breast, i.e. mammography
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment
- A61B6/52—Devices using data or image processing specially adapted for radiation diagnosis
- A61B6/5294—Devices using data or image processing specially adapted for radiation diagnosis involving using additional data, e.g. patient information, image labeling, acquisition parameters
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus for radiation diagnosis, e.g. combined with radiation therapy equipment
- A61B6/52—Devices using data or image processing specially adapted for radiation diagnosis
- A61B6/5211—Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data
- A61B6/5229—Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data combining image data of a patient, e.g. combining a functional image with an anatomical image
- A61B6/5247—Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data combining image data of a patient, e.g. combining a functional image with an anatomical image combining images from an ionising-radiation diagnostic technique and a non-ionising radiation diagnostic technique, e.g. X-ray and ultrasound
Abstract
本发明涉及一种医用图像系统以及计算机可读取的记录介质。能够适当地通知关注区域的临床位置。根据医用图像系统(100),当在图像显示装置(4)中从乳房图像指定了关注区域时,服务器装置(3)的控制部(31)推测从正面观察乳房时的关注区域的位置(临床位置),生成表示推测出的关注区域的位置的临床位置信息,使生成的推测临床位置信息显示于图像显示装置(4)的显示部(43)。另外,控制部(31)根据图像显示装置(4)中的用户的操作编辑临床位置信息。
Description
技术领域
本发明涉及医用图像系统以及计算机可读取的记录介质。
背景技术
乳腺癌检查的基础为乳腺X射线摄影(MMG)检查和超声波(US)检查,两种医用图像摄影装置的特征为互补关系。近年来,通过被称为J-START(Japan Strategic Anti-cancer Randomized Trial,日本战略抗癌随机试验)的国家级课题的研究成果示出了联合诊察的有效性,联合乳腺X射线摄影检查和超声波检查的乳房图像诊断的实施开始普及。
据说乳腺X射线摄影检查和超声波检查的联合检查不是对乳腺X射线摄影检查简单地追加超声波检查并独立地得出检查结果,而是对与利用乳腺X射线摄影检查得到的乳房X射线图像(以下,简记为乳房图像)上的异常阴影候补等关注区域对应的位置进行超声波检查,并综合判定各个检查结果,从而能够期待提高灵敏度并且提高特异度。
因此,一般来说,在联合检查中首先放射线技师等实施乳腺X射线摄影检查,在所得到的乳房图像上俯瞰地掌握异常阴影候补等关注区域的位置信息。之后,超声波检查人员(临床检查技师等)寻找与利用乳腺X射线摄影检查得到的乳房图像上的关注区域对应的实际乳房内的位置,重点进行超声波检查。在超声波检查中,在存在异常的阴影的情况下,超声波检查人员保存超声波图像,并对存在阴影的位置赋予体位标记。医师在头脑中将乳房图像上的关注区域与超声波图像的体位标记建立关联,在综合地判定乳腺X射线摄影检查和超声波检查的结果之后进行诊断。
但是,一般而言,乳腺X射线摄影检查是立位及乳房压迫下的检查,乳房的超声波检查是仰卧位及乳房非压迫下的检查,在超声波检查时难以找到与乳房图像上的关注区域对应的实际乳房位置(既花费时间,精度也差)。
另外,一般而言,进行乳房图像的拍摄及读影的技师(放射线技师等)与进行超声波检查的技师(临床检查技师等)不是同一人的情况居多,超声波检查人员不具有与乳房图像的读影有关的足够的知识的情况居多。因此,超声波检查人员从乳房图像推测实际乳房中的与关注区域对应的位置比放射线技师推测更难。
因此,例如,专利文献1中记载了根据对进行CC(上下方向)摄影以及MLO(斜位方向)摄影得到的乳房图像分别指定的关注区域的位置推测从正面观察乳房时的关注区域的位置(临床位置),生成表示推测出的从正面观察乳房时的关注区域的位置的临床位置信息并显示于显示单元。
现有技术文献
专利文献
专利文献1:日本特开2015-104465号公报
发明内容
然而,如上所述,超声波检查人员不具有与乳房图像的读影有关的足够的知识的情况居多。因此,在利用专利文献1的技术的情况下,理想的情况是直到乳房图像上的关注区域的指定以及临床位置的推测结果的确认的操作由放射线技师进行,超声波检查人员一边参照推测出的关注区域的临床位置信息一边进行超声波检查。
但是,在专利文献1中,即使在放射线技师判断为想要将与推测出的位置不同的位置作为关注区域的临床位置通知给超声波检查人员的情况下(例如,判断为推测出的临床位置错误的情况下或判断为扩张范围后的检查更好等的情况下)也无法应对。因此,没有反映出放射线技师的判断,无法通知准确的临床位置。其结果是超声波检查人员寻找与实际关注区域的位置不同的位置并进行检查,可能由于通过超声波检查没找到病变而导致检查人员不安或由于探索范围扩大而导致检查时间变长。
本发明的课题在于使得能够适当地通知关注区域的临床位置。
为了解决上述课题,技术方案1所记载的发明的医用图像系统具备:
显示单元,显示通过拍摄被摄体部位而得到的1个以上的医用图像;
指定单元,用于从所述医用图像指定关注区域;
推测单元,根据所述医用图像的所述关注区域的位置推测从正面观察所述被摄体部位时的所述关注区域的位置;
生成单元,生成临床位置信息,该临床位置信息表示由所述推测单元推测出的从正面观察所述被摄体部位时的所述关注区域的位置;
显示控制单元,使所生成的所述临床位置信息显示于所述显示单元;以及
编辑单元,对显示于所述显示单元的临床位置信息进行编辑。
技术方案2所记载的发明在技术方案1所记载的发明中,
所述编辑单元根据用户操作而变更显示于所述显示单元的临床位置信息中的所述关注区域的位置。
技术方案3所记载的发明在技术方案1或者2所记载的发明中,
所述编辑单元根据用户操作而追加显示于所述显示单元的临床位置信息中的所述关注区域的位置。
技术方案4所记载的发明在技术方案1~3中的任意一项所记载的发明中,
所述编辑单元根据用户操作而删除显示于所述显示单元的临床位置信息。
技术方案5所记载的发明在技术方案1~4中的任意一项所记载的发明中,
所述临床位置信息是在超声波检查所使用的从正面观察所述被摄体部位时的图解图像上示出所述关注区域的位置的图像。
技术方案6所记载的发明在技术方案1~5中的任意一项所记载的发明中,
所述医用图像系统具备保存单元,针对所述医用图像上的关注区域的位置,在未利用所述编辑单元进行所述临床位置信息的编辑时该保存单元对应关联地保存由所述生成单元生成的所述关注区域的临床位置信息,在利用所述编辑单元进行了所述临床位置信息的编辑时该保存单元对应关联地保存编辑后的所述关注区域的临床位置信息。
技术方案7所记载的发明在技术方案1~6中的任意一项所记载的发明中,
所述医用图像系统具备:
第2生成单元,针对所述医用图像上的关注区域的位置,在未利用所述编辑单元进行所述临床位置信息的编辑时该第2生成单元生成对应关联有由所述生成单元生成的所述关注区域的临床位置信息的图像,在利用所述编辑单元进行了所述临床位置信息的编辑时该第2生成单元生成对应关联有编辑后的所述关注区域的临床位置信息的图像;以及
发送单元,将由所述第2生成单元生成的图像发送到诊断用终端。
技术方案8所记载的发明在技术方案1~7中的任意一项所记载的发明中,
所述医用图像系统具备检测单元,该检测单元从所述医用图像检测异常阴影候补,
所述显示单元将由所述检测单元检测出的异常阴影候补的区域显示于所述医用图像。
技术方案9所记载的发明在技术方案1~8中的任意一项所记载的发明中,
所述被摄体部位为乳房,所述医用图像是通过对乳房进行X射线摄影而得到的乳房图像。
技术方案10所记载的发明在技术方案1~9中的任意一项所记载的发明中,
所述医用图像系统具备附带信息生成单元,该附带信息生成单元生成与所述被摄体部位有关的附带信息。
技术方案11所记载的发明在技术方案10所记载的发明中,
所述显示控制单元使所述临床位置信息以及/或者所述附带信息与显示有所述关注区域的医用图像显示在同一画面上。
技术方案12所记载的发明在技术方案10或者11所记载的发明中,
所述医用图像系统具备输入单元,该输入单元用于用户输入所述附带信息,
所述附带信息生成单元根据来自所述输入单元的输入而生成所述附带信息。
技术方案13所记载的发明在技术方案12所记载的发明中,
所述附带信息包括所述被摄体部位的视诊触诊信息、针对所述关注区域的意见信息中的至少一种信息。
技术方案14所记载的发明在技术方案10~13中的任意一项所记载的发明中,
所述附带信息生成单元通过解析所述医用图像而生成所述附带信息。
技术方案15所记载的发明在技术方案14所记载的发明中,
在所述被摄体部位为乳房、所述医用图像是通过对乳房进行X射线摄影而得到的乳房图像的情况下,所述附带信息生成单元解析所述乳房图像而进行与所述乳房的结构有关的评价,生成其评价结果来作为所述附带信息。
技术方案16所记载的发明的计算机可读取的记录介质,存储有用于使计算机作为如下单元发挥功能的程序:
显示单元,显示通过拍摄被摄体部位而得到的1个以上的医用图像;
指定单元,用于从所述医用图像指定关注区域;
推测单元,根据所述医用图像的所述关注区域的位置推测从正面观察所述被摄体部位时的所述关注区域的位置;
生成单元,生成临床位置信息,该临床位置信息表示由所述推测单元推测出的从正面观察所述被摄体部位时的所述关注区域的位置;
显示控制单元,使所生成的所述临床位置信息显示于所述显示单元;以及
编辑单元,对显示于所述显示单元的临床位置信息进行编辑。
技术方案17所记载的发明在技术方案16所记载的发明中,
所述编辑单元根据用户操作而变更显示于所述显示单元的临床位置信息中的所述关注区域的位置。
技术方案18所记载的发明在技术方案16或者17所记载的发明中,
所述编辑单元根据用户操作而追加显示于所述显示单元的临床位置信息中的所述关注区域的位置。
技术方案19所记载的发明在技术方案16~18中的任意一项所记载的发明中,
所述编辑单元根据用户操作而删除显示于所述显示单元的临床位置信息。
技术方案20所记载的发明在技术方案16~19中的任意一项所记载的发明中,
所述临床位置信息是在超声波检查所使用的从正面观察所述被摄体部位时的图解图像上示出所述关注区域的位置的图像。
技术方案21所记载的发明在技术方案16~20中的任意一项所记载的发明中,
所述程序使所述计算机进一步作为保存单元发挥功能,针对所述医用图像上的关注区域的位置,在未利用所述编辑单元进行所述临床位置信息的编辑时该保存单元对应关联地保存由所述生成单元生成的所述关注区域的临床位置信息,在利用所述编辑单元进行了所述临床位置信息的编辑时该保存单元对应关联地保存编辑后的所述关注区域的临床位置信息。
技术方案22所记载的发明在技术方案16~21中的任意一项所记载的发明中,
所述程序使所述计算机进一步作为如下单元发挥功能:
第2生成单元,针对所述医用图像上的关注区域的位置,在未利用所述编辑单元进行所述临床位置信息的编辑时该第2生成单元生成对应关联有由所述生成单元生成的所述关注区域的临床位置信息的图像,在利用所述编辑单元进行了所述临床位置信息的编辑时该第2生成单元生成对应关联有编辑后的所述关注区域的临床位置信息的图像;以及
发送单元,将由所述第2生成单元生成的图像发送到诊断用终端。
技术方案23所记载的发明在技术方案16~22中的任意一项所记载的发明中,
所述程序使所述计算机进一步作为检测单元发挥功能,该检测单元从所述医用图像检测异常阴影候补,
所述显示单元将由所述检测单元检测出的异常阴影候补的区域显示于所述医用图像。
技术方案24所记载的发明在技术方案16~23中的任意一项所记载的发明中,
所述被摄体部位为乳房,所述医用图像是通过对乳房进行X射线摄影而得到的乳房图像。
技术方案25所记载的发明在技术方案16~24中的任意一项所记载的发明中,
所述程序使所述计算机进一步作为附带信息生成单元发挥功能,该附带信息生成单元生成与所述被摄体部位有关的附带信息。
技术方案26所记载的发明在技术方案25所记载的发明中,
所述显示控制单元使所述临床位置信息以及/或者所述附带信息与显示有所述关注区域的医用图像显示在同一画面上。
技术方案27所记载的发明在技术方案25或者26所记载的发明中,
所述程序使所述计算机进一步作为输入单元发挥功能,该输入单元用于用户输入所述附带信息,
所述附带信息生成单元根据来自所述输入单元的输入而生成所述附带信息。
技术方案28所记载的发明在技术方案27所记载的发明中,
所述附带信息包括所述被摄体部位的视诊触诊信息、针对所述关注区域的意见信息中的至少一种信息。
技术方案29所记载的发明在技术方案25~28中的任意一项所记载的发明中,
所述附带信息生成单元通过解析所述医用图像而生成所述附带信息。
技术方案30所记载的发明在技术方案29所记载的发明中,
在所述被摄体部位为乳房、所述医用图像是通过对乳房进行X射线摄影而得到的乳房图像的情况下,所述附带信息生成单元解析所述乳房图像而进行与所述乳房的结构有关的评价,生成其评价结果来作为所述附带信息。
根据本发明,能够适当地通知关注区域的临床位置。
附图说明
图1是示出本实施方式中的医用图像系统的整体结构例子的图。
图2是示出图1的服务器装置的功能结构的框图。
图3是示出图1的图像显示装置的功能结构的框图。
图4的(a)是示出合并胸壁而排列配置左右的MLO图像所得到的图像的图,(b)是示出合并胸壁而排列配置左右的CC图像所得到的图像的图。
图5A是示出由图2的控制部执行的临床位置信息生成处理的流程图。
图5B是示出由图2的控制部执行的临床位置信息生成处理的流程图。
图6是示出显示于图1的图像显示装置的阅览画面的一个例子的图。
图7是示出在图5A的步骤S7中执行的关注区域的临床位置的推测处理的流程图。
图8的(a)是用于说明乳房图像的坐标的图,(b)是用于说明乳头位置的检测的图。
图9是用于说明向能够进行理想的推测的乳房区域的变换的图。
图10是用于说明关注区域的临床位置的推测方法的图。
图11的(a)是示出右乳房的正面图解图像的图,(b)是示出左乳房的正面图解图像的图。
图12是用于说明单方向推测方法的图。
图13的(a)是分割正面图解图像的区域并附加有编号的图,(b)是示出当(a)的各区域存在临床位置时所生成的临床位置信息的例子的图。
图14是示出临床位置信息的例子的图。
图15是示出临床位置信息的例子的图。
图16是示出临床位置信息的例子的图。
图17是示出意见记入画面的一个例子的图。
图18是示出显示有关注区域的临床位置信息的阅览画面的例子的图。
图19是用于说明用于变更临床位置信息中的临床位置的操作方法的图。
图20是示出拍摄时的视诊触诊信息的输入画面的一个例子的图。
图21是用于说明用于追加临床位置信息中的临床位置的操作方法的图。
图22是示出检查结果图像的一个例子的图。
图23是示出与乳房的结构有关的评价结果的显示例子的图。
符号说明
100:医用图像系统;1:图像生成装置;2:异常阴影候补检测装置;3:服务器装置;31:控制部;32:操作部;33:显示部;34:通信部;35:存储部;351:图像DB;36:总线;4:图像显示装置;41:控制部;42:操作部;43:显示部;431:阅览画面;432:意见记入画面;433:输入画面;44:通信部;45:存储部;46:总线;5:超声波诊断装置;6:诊断用终端。
具体实施方式
(医用图像系统100的结构)
首先,说明本发明的实施方式的结构。
图1示出本实施方式的医用图像系统100的系统结构。
如图1所示,医用图像系统100构成为具备图像生成装置1、异常阴影候补检测装置2、服务器装置3、图像显示装置4、超声波诊断装置5以及诊断用终端6。这些各装置1~6连接为能够经由LAN(Local Area Network,局域网)等构建在医疗设施内的通信网络N来相互发送接收数据。通信网络N应用了DICOM(Digital Imaging and Communication inMedicine,医学数字成像和通信)标准。此外,各装置的台数不特别限定。
医用图像系统100是如下系统:对被摄体部位进行X射线摄影,存储、管理所得到的医用图像,推测医用图像上的异常阴影候补等关注区域的临床位置,生成表示推测出的关注区域的临床位置的临床位置信息并进行显示,从而支援以仰卧位进行的超声波诊断装置5中的检查等。临床位置是指从人体正面观察被摄体部位时的位置信息。医用图像系统100对各种被摄体部位的医用图像进行处理,但在本实施方式中,主要以对乳房进行X射线摄影并根据得到的乳房图像来支援乳房的超声波检查的情况为例进行说明。
以下,说明各结构装置1~6。
图像生成装置1构成为具备摄影装置11以及控制台12。
摄影装置11是对人体中的被摄体部位进行X射线摄影并生成其摄影图像(医用图像)的数字数据的装置,例如能够应用CR(Computed Radiography,计算机X射线摄影)装置、FPD(Flat Panel Detector,平板检测器)装置等医用图像摄影装置。在本实施方式中,作为摄影装置11而应用进行左右乳房的X射线摄影的FPD装置,作为医用图像生成乳房图像的数据。
控制台12是如下计算机装置:该计算机装置具备CPU(Central Processing Unit,中央处理单元)、由RAM(Random Access Memory,随机存取存储器)、HDD(Hard Disk Drive,硬盘驱动器)等构成的存储部、由鼠标等指向设备或键盘、触摸面板等构成的操作部、由LCD(Liquid Crystal Display,液晶显示器)等构成的显示部、由LAN卡等构成的通信部等。控制台12将从未图示的RIS(Radiology Information System,放射科信息系统)等发送的摄影命令信息以列表形式显示于显示部,根据通过操作部从所显示的列表中选择出的摄影命令信息所包含的检查条件对摄影装置11设定放射线照射条件以及图像读取条件,使之进行摄影。另外,显示从摄影装置11发送的医用图像,用于放射线技师确认,并且将用于识别患者信息、检查信息、图像的UID(Unique ID,唯一ID)等作为头信息附加到所接收的医用图像,经由通信网络N发送到异常阴影候补检测装置2以及服务器装置3。
在此,摄影命令信息包含患者信息以及检查信息。患者信息包含用于识别患者(被检人员)的患者识别信息(例如,患者ID),患者的名字、性别、出生年月日等信息。检查信息包含患者ID、用于识别检查的检查识别信息(例如,检查ID),检查日期时间、检查条件(检查部位、侧性(左、右)、方向(例如,上下方向(CC)、斜位方向(MLO))、摄影角度、医用图像摄影装置种类等信息。此外,在本实施方式中,关于检查ID设为对同一患者的通过乳腺X射线摄影检查获取的一连串的图像(左右两张MLO图像、CC图像)赋予相同的检查ID来管理。
作为检测单元的异常阴影候补检测装置(CAD)2是对从图像生成装置1供给的医用图像进行图像解析,从而进行存在病变怀疑的异常阴影候补的检测处理的计算机。异常阴影候补检测装置2具备CPU、由RAM、HDD等构成的存储部、由LAN卡等构成的通信部。异常阴影候补检测装置2的存储部存储有与异常阴影的种类相应的检测算法的检测程序,异常阴影候补检测装置2的CPU通过与存储于存储部的检测程序的协作来执行异常阴影候补检测处理,从经由通信部输入的各医用图像检测异常阴影候补。例如,异常阴影候补检测装置2检测乳房图像中的肿瘤、微小钙化群的异常阴影候补。
作为异常阴影候补的检测算法能够应用公知的检测算法。例如,作为乳房图像中的肿瘤阴影候补的算法能够应用日本特开平10-91758号公报所公开的使用Iris滤波器的方法、使用拉普拉斯滤波器的方法(電気情報通信学会論文誌(D-I I),Vol.J76-D-I I,no.2,pp.241-249,1993)等。另外,作为微小钙化群阴影候补的检测算法,例如能够应用使用形态学滤波器(電気情報通信学会論文誌(D-II),Vol.J71-D-II,no.7,pp.1170-1176,1992)、拉普拉斯滤波器(電気情報通信学会論文誌(D-II),Vol.J71-D-II,no.10,pp.1994-2001,1998)、3重环滤波器等的方法等。
当异常阴影候补的检测结束时,异常阴影候补检测装置2的CPU根据异常阴影候补的检测结果生成异常阴影候补信息。异常阴影候补信息例如包含检测到的各异常阴影候补的区域的位置信息(医用图像上的坐标信息)以及异常阴影候补的种类(例如,肿瘤、微小钙化群等)的信息。然后,异常阴影候补检测装置2将检测源的医用图像的头信息(至少UID)附加到所生成的异常阴影候补信息,通过通信部发送到服务器装置3。
服务器装置3与作为客户端的图像显示装置4一起构成PACS(Picture Archivingand Communication System,图象编档和通信系统)。服务器装置3将由图像生成装置1生成的医用图像与根据该医用图像生成的异常阴影候补信息、关注区域信息(关注区域的坐标信息)、临床位置信息、附带信息、检查结果图像等对应关联地存储于数据库(图像DB351)并进行管理。关于附带信息、检查结果图像在后面叙述。另外,服务器装置3具有作为与搭载于图像显示装置4的Web浏览器进行基于HTTP协议的通信而对Web浏览器提供各种Web画面的Web服务器的功能,通过该Web服务器功能将用于选择处理对象的检查的医用图像的选择画面、用于显示所选择的检查的医用图像的阅览画面等显示于图像显示装置4,根据从图像显示装置4发送的操作信息执行以后述的临床位置信息生成处理为首的各种处理。
图2示出服务器装置3的功能结构例。
如图2所示,服务器装置3构成为具备控制部31、操作部32、显示部33、通信部34、存储部35,各部分由总线36连接。
控制部31由CPU(Central Processing Unit,中央处理单元)、RAM(Random AccessMemory,随机存取存储器)等构成。控制部31的CPU读出存储于存储部35的系统程序、处理程序等各种程序,在RAM中展开,依照展开的程序执行各种处理。控制部31通过执行后述的临床位置信息生成处理而作为推测单元、生成单元、显示控制单元、第2生成单元、附带信息生成单元发挥功能。另外,利用与图像显示装置4的协作而作为编辑单元发挥功能。
操作部32构成为包括键盘和鼠标等指向设备,将键盘中被按下操作的键的按下信号和通过鼠标进行的操作信号作为输入信号输出到控制部31,其中,键盘具备字符输入键、数字输入键以及各种功能键等。
显示部33例如构成为具备LCD等监视器,依照从控制部31输入的显示信号的指示显示各种画面。
通信部34由LAN卡等构成,在与外部设备之间进行数据的发送接收,该外部设备经由交换集线器连接于通信网络N。
存储部35例如由HDD、半导体的非易失性存储器等构成。如前所述,存储部35存储有各种程序。另外,在存储部35中,将可登录到医用图像系统100的用户的用户认证信息(例如,用户ID以及密码)与赋予给该用户的权限对应关联地存储。在本实施方式中,设为对放射线技师赋予了临床位置信息的变更权限、删除权限、意见记录权限以及视诊触诊信息的输入权限,对超声波检查人员赋予了临床位置信息中的临床位置的追加权限。
另外,存储部35设置有作为保存单元的图像DB351。
图像DB351是用于将医用图像与根据该医用图像生成的异常阴影候补信息、关注区域信息、临床位置信息、附带信息、检查结果图像等对应关联地储存的数据库。例如,图像DB351具有图像管理表格,该图像管理表格储存与存储于图像DB351的各医用图像有关的管理信息。在图像管理表格中,将关于各医用图像的管理信息储存为1条记录。管理信息包含UID、患者信息、检查信息、文件信息(医用图像的文件名、与其对应的异常阴影候补信息、关注区域信息、临床位置信息、附带信息、检查结果图像各自的文件名、各文件的文件储存部位、更新日期、文件大小等)。此外,关于附带信息以及检查结果图像在后面叙述。
当通过通信部34接收到来自图像生成装置1的医用图像时,控制部31将接收到的医用图像储存于图像DB351,并且根据接收到的医用图像的头信息制作管理信息并储存到图像DB351的图像管理表格。另外,当通过通信部34接收到来自异常阴影候补检测装置2的异常阴影候补信息时,将接收到的异常阴影候补信息储存于图像DB351,并且从图像管理表格检索异常阴影候补信息所包含的UID一致的记录,将异常阴影候补信息的文件名、储存部位等写入所检索到的记录。另外,控制部31将通过后述临床位置信息生成处理生成的关注区域信息、临床位置信息、附带信息、检查结果图像储存于图像DB351,并且从图像管理表格检索处理对象的医用图像的UID的记录,将关注区域信息、临床位置信息、附带信息、检查结果图像的文件名、储存部位等写入所检索到的记录。
这样,图像DB351中以能够检索的方式将医用图像与从该医用图像检测到的异常阴影候补的异常阴影候补信息、根据该医用图像生成的临床位置信息、附带信息、检查结果图像对应关联地进行存储。
图像显示装置4经由Web浏览器显示从服务器装置3发送的选择画面、阅览画面等,并且例如将从这些画面输入的操作信息发送到服务器装置3,在阅览画面上显示从服务器装置3发送的、与操作相应的处理结果。图像显示装置4只要是能够经由Web浏览器与服务器装置3通信连接的终端即可,例如,能够应用通用PC(Personal Computer,个人计算机)、移动终端。另外,图像显示装置4也可以与控制台12、超声波诊断装置5、未图示的电子医疗图表终端等一体地构成。图像显示装置4作为显示单元、指定单元、输入单元发挥功能。
图3示出图像显示装置4的功能结构例。
如图3所示,图像显示装置4构成为具备控制部41、操作部42、显示部43、通信部44、存储部45,各部分由总线46连接。
控制部41由CPU、RAM等构成。控制部41的CPU读出存储于存储部45的系统程序、处理程序等各种程序,在RAM中展开,依照展开的程序执行各种处理。
操作部42构成为包括键盘和鼠标等指向设备,将键盘中被按下操作的键的按下信号和通过鼠标输入的操作信号作为输入信号输出到控制部41,其中该键盘具备字符输入键、数字输入键以及各种功能键等。
显示部43例如构成为具备LCD等监视器,依照从控制部41输入的显示信号的指示来显示各种画面。
通信部44由LAN卡等构成,在与外部设备之间进行数据的发送接收,该外部设备经由交换集线器连接于通信网络N。
存储部45例如由HDD(Hard Disk Drive,硬盘驱动器)、半导体的非易失性存储器等构成。如前所述,存储部45存储有系统程序、Web浏览器等。
超声波诊断装置5包括:超声波探头,输出超声波;以及电子装置,与超声波探头连接,将由超声波探头接收到的声波(回波信号)变换为图像数据(超声波图像)(都未图示)。超声波诊断装置5将超声波从超声波探头送到被摄体内部,再次利用超声波探头接收体内组织反射的声波(回波信号),通过电子装置生成与该回波信号相应的超声波图像。
诊断用终端6是用于显示乳房图像和超声波图像来供医师进行读影诊断的终端。
(医用图像系统100的动作)
接下来,说明医用图像系统100的动作。
在此,在乳腺癌检查中进行联合乳腺X射线摄影检查和超声波检查这两个检查的联合检查。在联合检查中,一般而言,首先,放射线技师实施乳腺X射线摄影检查,在所得到的乳房图像上得到异常阴影候补等关注区域的俯瞰的位置信息。之后,临床检查技师观察乳房图像,寻找乳房中的、与乳房图像上的关注区域对应的位置而重点地进行超声波检查。当两个检查结束时,医师对乳房图像和超声波图像进行读影,进行最终的诊断。
在乳腺X射线摄影检查中,一般而言,通过图像生成装置1针对一个患者在立位及乳房压迫的状态下对左右乳房的每一个在斜位方向(MLO)以及上下方向(CC)的摄影方向进行合计4次摄影,生成左右分别两张乳房图像。另一方面,在超声波检查中,在仰卧位及乳房非压迫状态下进行检查。因此,实施超声波检查的超声波检查人员必须将乳房图像上的关注区域的位置直观地变换为从人体正面观察乳房时的位置即临床位置来实施检查。
图4的(a)示出合并胸壁而排列配置左右的MLO图像的图像,图4的(b)示出合并胸壁而排列配置左右的CC图像的图像。一般而言,在观察乳房图像的情况下,如图4的(a)、(b)所示,在图像端与显示部(监视器)的端部平行配置的状态下进行观察。
CC图像是在图像生成装置1中在立位的状态下从乳房的正上方照射放射线而拍摄到的图像,所以在如图4的(b)所示以合并胸壁来排列左右CC图像并配置为图像端平行于监视器的端部、使MLO图像与显示左右乳房的位置对应的情况下(在从正面观察时,右乳房的图像为左,左乳房的图像为右),CC图像的上方向为乳房的外侧方向,CC图像的下方向为乳房的内侧方向。即,观察人员能够根据CC图像推测关注区域处于乳房的内侧还是外侧。例如,根据图4的(b)所示的CC图像可知,应关注的区域P在右乳房的外侧。
另一方面,MLO图像是对每个摄影附加最佳的摄影角度并从斜向拍摄乳房而得到的图像。在此,在假设MLO图像是从正侧面拍摄乳房而得到的图像的情况下(放射线照射方向与CC图像的摄影时的放射线照射方向正交的情况下),能够根据图4的(a)所示的配置为图像端与监视器的端部平行的MLO图像推测关注区域P的乳房的上下方向(头-脚方向)的位置,通过将MLO图像和CC图像结合起来观察,从而能够大致掌握关注区域P所存在的位置。但是,如上所述,MLO图像是从斜向拍摄被摄体乳房而得到的图像。因此,实际上,难以观察配置为图4的(a)所示的MLO图像来推测乳房的上下方向的位置。乳房图像的头信息包含摄影角度的信息,但即使知道摄影角度,根据摄影角度推测位置也花费时间,检查效率下降。另外,错误推测的可能性也高。
即使将探头抵接在错误的位置来实施超声波检查,也无法得到与关注区域对应的阴影,导致给患者带来不安的回忆、给检查实施人员带来焦虑的回忆、检查时间变长、不完全的检查等各种不利。
因此,在本实施方式的医用图像系统100中,根据通过乳腺X射线摄影检查得到的乳房图像来推测关注区域的临床位置并显示该临床位置信息,从而检查实施人员能够容易地认出乳房中的与关注区域对应的位置。
另外,一般而言,超声波检查人员不具有与乳房图像的读影有关的足够的知识的情况居多。因此,优选放射线技师进行直至指定乳房图像上的关注区域以及确认临床位置的推测结果的操作,超声波检查人员一边参照推测出的关注区域的临床位置信息一边进行超声波检查,但例如还存在判断为推测结果错误的情况等放射线技师判断为想要将与推测出的临床位置不同的位置作为关注区域的临床位置通知给超声波检查人员的情况。在本实施方式的医用图像系统100中,能够编辑临床位置信息,从而能够将适当的临床位置信息通知给超声波检查人员。
另外,以往,医师需要在头脑中推测与乳房图像上的关注区域对应的临床位置,并将被赋予与推测出的位置相当的体位标记(参照图11)的超声波图像与该关注区域对应关联地进行诊断,花费时间和劳力,效率低。另外,在没有被赋予与乳房图像的关注区域相当的体位标记的超声波图像的情况下,超声波检查人员不知道是在乳房中的与关注区域对应的临床位置进行了检查之后没有阴影,还是本来就没有进行与关注区域对应的临床位置的检查,医师再次进行追加检查,从而可能引起检查时间变长等。在本实施方式的医用图像系统100中,在从放射线技师通知的临床位置与实际进行超声波检查的临床位置不同的情况下,能够保留原来通知的临床位置,并将实际进行检查的临床位置追加到临床位置信息,从而能够将针对乳房图像上的关注区域实际获取到超声波图像的临床位置通知给医师,能够有效地进行由医师实施的乳房图像上的关注区域与超声波图像的关联建立。
图5A~图5B示出由服务器装置3执行的临床位置信息生成处理的流程图。在从图像显示装置4选择了处理对象的要检查的乳房图像并通过通信部34接收到确定所选择的要检查的乳房图像的信息(检查ID等)时,通过控制部31与存储于存储部35的程序的协作来执行临床位置信息生成处理。
首先,控制部31从图像DB351检索所选择出的要检查的乳房图像并读出,生成显示有读出的乳房图像的阅览画面431的画面信息,通过通信部34将该画面信息发送到请求源的图像显示装置4,使显示有所选择的要检查的乳房图像的阅览画面431显示于图像显示装置4的显示部43(步骤S1)。
此外,服务器装置3的控制部31在有来自图像显示装置4的结束指示之前将由图像显示装置4显示中的乳房图像的检查ID以及UID临时存储到存储器。
图6示出显示于图像显示装置4的阅览画面431的一个例子。阅览画面431设置有图像显示栏431a、用于指示显示右乳房图像的R按钮431b、用于指示显示左乳房图像的L按钮431c、用于指示显示异常阴影候补的CAD按钮431d、用于选择推测模式的推测模式选择按钮431e、用于选择确认模式的确认模式选择按钮431f、用于指示结节及分泌等摄影时的乳房的视诊触诊信息(以下,称为摄影时的视诊触诊信息)的输入的结节及分泌按钮431g、用于显示临床位置信息和附带信息的区域431h、用于指示保存的保存按钮431i、用于指示关注区域的指定完成的ROI选择完成按钮431j等。通过按下R按钮431b或者L按钮431c,能够变更显示于图像显示栏431a的乳房图像的左右。在步骤S1中显示按照默认设定的右乳房图像或者左乳房图像。
在此,推测模式主要是用于生成放射线技师向超声波检查人员通知的信息的模式。具体而言,在推测模式下,用户能够通过操作部42的操作来指定乳房图像上的关注区域,使服务器装置3进行所指定的关注区域的临床位置的推测处理,或者对表示推测出的临床位置的临床位置信息进行编辑(变更、删除),或者输入摄影时的视诊触诊信息以及针对关注区域的用户的意见等附带信息。
另一方面,确认模式主要是用于超声波检查人员确认在推测模式下生成的临床位置信息,或者使超声波检查的日志留下的模式。具体而言,在确认模式下,显示在推测模式下生成的临床位置信息并进行超声波检查,当在由显示的临床位置信息确定的临床位置不存在阴影而在不同的位置存在阴影的情况下,能够保留原来的临床位置并将该存在阴影的位置追加到临床位置信息。进而,能够将示出乳房图像上的关注区域的位置与临床位置信息的对应关联的图像(检查结果图像)发送到诊断用终端6。
控制部31判断是通过通信部34从图像显示装置4接收到表示推测模式的选择的操作信息还是接收到表示确认模式的选择的操作信息(步骤S2)。在通过通信部34从图像显示装置4接收到表示推测模式的选择的操作信息的情况下(步骤S2:推测模式),控制部31转移到步骤S3。
在步骤S3中,控制部31判断是否通过通信部34从图像显示装置4接收到表示异常阴影候补的显示指示的操作信息(步骤S3)。在判断为未通过通信部34从图像显示装置4接收到表示异常阴影候补的显示指示的操作信息的情况下(步骤S3:否),控制部31转移到步骤S5。在判断为通过通信部34从图像显示装置4接收到表示异常阴影候补的显示指示的操作信息的情况下(步骤S3:是),控制部31从图像DB351检索与显示于图像显示装置4的乳房图像对应的异常阴影候补信息并读出,生成使显示于阅览画面431的乳房图像显示表示异常阴影候补的位置的注释的画面信息。然后,通过通信部34将该画面信息发送到请求源的图像显示装置4,使在乳房图像上显示有表示异常阴影候补的位置的注释的阅览画面431显示于图像显示装置4的显示部43(步骤S4),转移到步骤S5。
在步骤S5中,控制部31判断是否通过通信部34从图像显示装置4接收到关注区域的位置信息(步骤S5)。在图像显示装置4中,在存在MLO图像和CC图像的情况下,当通过操作部42从显示于阅览画面431的MLO图像和CC图像这双方的乳房图像上指定了关注区域时,通过通信部44将所指定的关注区域的位置信息作为操作信息发送到服务器装置3。关于仅能够在某一方的图像中确认的关注区域,通过操作部42指定关注区域,当按下ROI选择完成按钮431j时,通过通信部44将所指定的关注区域的位置信息作为操作信息发送到服务器装置3。在仅存在MLO图像和CC图像中的某一方的乳房图像的情况下,当通过操作部42从一方的乳房图像指定了关注区域时,通过通信部44将所指定的关注区域的位置信息作为操作信息发送到服务器装置3。关注区域例如是异常阴影候补的区域等、在超声波检查中是应关注的区域,当能够在MLO图像和CC图像中确认同一异常阴影候补时,放射线技师将两个区域作为关注区域,通过操作部42进行指定;对于仅能够在某一方的图像中确认的异常阴影候补,放射线技师将该1个区域作为关注区域,通过操作部42进行指定。
在判断为通过通信部34接收到来自图像显示装置4的关注区域的位置信息的情况下(步骤S5:是),控制部31获取显示于图像显示装置4的乳房图像(MLO图像、CC图像)各自的头信息所包含的摄影角度(步骤S6),根据摄影角度、关注区域的位置信息,执行乳房图像上的关注区域的临床位置的推测处理(步骤S7)。摄影角度是指在乳房图像摄影时使摄影装置11倾斜的角度(X射线照射方向的倾斜角度)。摄影装置11在初始状态下按照照射X射线的放射线源、配置被摄体的被摄体台、对透过被摄体的X射线进行检测的FPD的顺序在铅垂方向排列放射线源、被摄体台以及FPD,但在MLO图像的摄影时,使它们一体地倾斜与被摄体乳房相应的角度来进行摄影。此外,在CC图像摄影时,使图像生成装置1不倾斜而以初始状态进行摄影,所以摄影角度为0°。
图7示出步骤S7中的关注区域的临床位置的推测处理的流程图。
首先,在步骤S7中,控制部31从乳房图像(MLO图像以及CC图像)的每一个检测皮肤线以及乳头的(步骤S701)。
在此,如图8的(a)所示,用以乳房图像中的乳房的上下方向为X轴、以与其垂直的方向为Y轴的坐标(X,Y)表示各乳房图像中的各像素的位置。另外,将坐标(X,Y)的像素值表示为V(X,Y),将X轴方向的图像端的坐标表示为Xmax,将Y轴方向的图像端的坐标表示为Ymax。
在步骤S701中,控制部31首先在各乳房图像中将各像素作为关注像素,通过索贝尔(Sobel)滤波器实施滤波处理。接着,控制部31在实施索贝尔滤波后的乳房图像的各X坐标(0~Xmax)处在Y方向进行探索,将V(X,Y)为最大的坐标(S)抽取为各X坐标处的边缘。该抽取出的边缘构成作为乳房区域与乳房外区域的边界的皮肤线SL。
接着,如图8的(b)所示,控制部31对皮肤线SL上的各点S(X)分别计算将S(X)和S(X+d(d例如为10))连结起来的直线与S(X)~S(X+d)之间的各点(S(X+1)、S(X+2)…S(X+d-1))的距离D,将具有计算出的距离D的最大值D(X)中的最大的值的S(X)的位置检测为乳头位置。
接着,控制部31将各乳房图像的乳房区域变换为能够进行理想的推测的乳房区域(步骤S702)。在此,在步骤S703以后的处理中,在能够进行理想的推测的乳房区域,垂直于乳头的切线的线与胸壁(图像端)垂直。但是,如图9所示,实际上,乳房因摄影时的重力以及技师的摄影手艺而变形,垂直于乳头(在图9中用601表示)的切线(乳头与皮肤线的接点处的切线)的线不与胸壁(图像端)垂直而倾斜角度α[°]。因此,在步骤S702中,计算倾斜角度α,根据倾斜角度α变换乳房,以使垂直于乳头的切线的线与胸壁(图像端)垂直。
接着,如图10所示,控制部31根据MLO图像摄影时的摄影角度与CC图像摄影时的摄影角度的角度差θ[°],在RAM上配置乳房的正面图解图像(图10的500)、MLO图像(图10的600)、CC图像(图10的700)(步骤S703)。此外,θ[°]与MLO图像摄影时的摄影角度一致。
在此,图11的(a)示出右乳房的正面图解图像的一个例子,图11的(b)示出左乳房的正面图解图像的一个例子。左右各乳房的正面图解图像示意地示出从正面观察各乳房所看到的状态,是用于重叠关注区域的临床位置而显示的图像。正面图解图像中的圆表示乳房,圆的中心O表示乳头位置。区域A表示乳房的内侧上的区域,区域B表示乳房的内侧下的区域,区域C表示乳房的外侧上的区域,区域D表示乳房的外侧下的区域。与区域C邻接的区域C’表示腋下。该乳房的正面图解图像是与用于在利用超声波诊断得到的超声波图像中示出放置超声波探头(超声波探触子)的位置、即检查位置的体位标记同样的结构,是对于超声波检查人员而言易于掌握乳房位置的显示。
如图10所示,在步骤S702中,首先,在RAM上配置正面图解图像500。接着,以使从MLO图像600的乳头601向胸壁下降的垂线602和从CC图像700的乳头701向胸壁下降的垂线702分别通过正面图解图像500的乳头501、且相互的垂线的角度差为MLO图像摄影时的摄影角度与CC图像摄影时的摄影角度的角度差θ[°]的方式配置MLO图像600、CC图像700。也就是说,使MLO图像600和CC图像700分别相对于正面图解图像500倾斜摄影角度而配置。
接着,控制部31与正面图解图像500相匹配地对MLO图像600以及CC图像700进行标准化(步骤S704)。具体而言,以保持从乳头701向胸壁下降的垂线702与正面图解图像500的乳头501相交的状态,并使乳房区域的两端703与正面图解图像500的圆的两端相合的方式扩大或缩小CC图像700。MLO图像600被以保持从乳头601向胸壁下降的垂线602与正面图解图像500的乳头501相交的状态、并使从乳房区域的下端向胸壁下降的垂线603与正面图解图像500的圆相接的方式扩大或者缩小。此外,能够根据检测到的皮肤线来确定CC图像700中的乳房区域的两端703以及MLO图像600中的乳房区域的下端。
接着,控制部31将MLO图像600的关注区域604、CC图像700的关注区域704分别投影到正面图解图像500,将叠合的投影区域的位置推测为关注区域的临床位置(步骤S705)。具体而言,首先,从MLO图像600的移动后的关注区域604的头部端604a、尾部端604b分别引出与胸壁垂直的直线605a、605b,在正面图解图像500上投影由直线605a和605b包围的带状区域。同样地,从CC图像700的移动后的关注区域704的外侧端704a、内侧端704b分别引出与胸壁垂直的直线705a、705b,在正面图解图像500上投影由直线705a和705b包围的带状区域。然后,将两个投影区域叠合的区域502推测为关注区域的临床位置。
此外,在仅从MLO图像、CC图像中的某一个图像指定了关注区域的情况下,对于指定有关注区域的图像进行步骤S701~步骤S705的处理,将上述带状区域推测为关注区域的临床位置。或者,也可以利用以下的单方向推测方法来推测关注区域的临床位置。
图12的(a)示意地示出基于CC图像的单方向推测方法的第1方法。图12的(b)示意地示出基于CC图像的单方向推测方法的第2方法。此外,在以下说明中,以CC图像为例进行说明,但关于MLO图像也能够使用同样的方法进行推测。
在第1方法中,求出CC图像700的乳头701与关注区域704的中心之间的距离Rc,在正面图解图像上描绘以乳头501为中心的半径Rc的圆706,将离圆706预定宽度的范围的环状区域、与将CC图像700的关注区域704投影到正面图解图像500而得到的带状区域的叠合的区域(在图12的(a)中用点示出的区域)推测为关注区域的临床位置。此外,环状区域的宽度例如是与关注区域704的大小对应的宽度。
关于第1方法,一般而言,乳房区域内的病变即使由于压迫而移动,离乳头的距离也几乎不变化,所以根据乳头与关注区域的距离来锁定推测位置。
在第2方法中,求出CC图像700的乳头701与关注区域704(移动与变形量相应的量之后)之间的距离Ro(例如,与关注区域704的离乳头701最远的端部之间的距离Ro),在正面图解图像500上描绘以乳头501为中心的半径Ro的圆707,将该圆707的区域与将CC图像700的关注区域704投影到正面图解图像500而得到的带状区域的叠合的区域(在图12的(b)中用浓点示出的区域)推测为关注区域的临床位置。
关于第2方法,乳房区域内的病变即使由于压迫而移动,离乳头的距离也几乎不变化,另外,乳腺几乎不伸长,所以病变几乎不会向远离乳头的方向移动,由此锁定推测位置。
当与关注区域对应的临床位置的推测结束时,控制部31转移到图5A的步骤S8,生成表示推测出的临床位置的临床位置信息(步骤S8)。
例如,将正面图解图像分为图13的(a)所示的1~9这9个区域,在图13的(a)的区域中,当推测出的临床位置的中心坐标存在于图13的(a)的1(2、3、4、…9)的情况下,生成对图13的(b)的1(2、3、4、…9)中用点示出的区域附加有颜色的正面图解图像,作为临床位置信息。
另外,例如,也可以如图14的(a)所示将推测出的临床位置的中心坐标包含于中央部,将以乳头为中心角的顶点的扇形区域的注释叠合描画在正面图解图像上来生成临床位置信息。此外,乳房区域的病变因部位不同而移动难易不同,所以也可以根据推测出的临床位置所存在的部位来使中心角的角度变化(越是容易移动的部位,越增大角度)。另外,如图14的(b)所示,也可以根据推测出的临床位置求出存在关注区域的概率分布,将表示该概率分布的注释叠合描画在正面图解图像上来作为临床位置信息。在此,在图14的(b)中,存在关注区域的概率越高则以越高的浓度示出。
另外,也可以生成用点以及数值(x,y)示出正面图解图像上的推测出的临床位置的中心坐标的图来作为临床位置信息。
另外,例如,如图15的(a)所示,也可以将包围正面图解图像中的推测出的临床位置(平行四边形的区域)、或者对推测出的临床位置叠加颜色等、或者将圆等标记与推测出的临床位置叠合等的注释附加到正面图解图像而得到的图像(叠合而描画出的图像)作为临床位置信息。另外,如图15的(b)所示,也可以将包含推测出的临床位置的区域、且主轴(长轴)与表示临床位置的平行四边形的长的一方的对角线同样倾斜的椭圆形的注释叠合描绘到正面图解图像上而生成临床位置信息。另外,如图15的(c)所示,也可以计算临床位置的区域在正面图解图像上的A~D的各区域中所占的面积(对像素数进行计数),生成表示计算出的面积最大的区域的信息(或者,表示计算出的面积大小的次序的信息)来作为临床位置信息。
另外,例如,如图16的(a)、的(b)所示,也可以生成注释的面积以及形状根据推测出的临床位置的部位而变化的临床位置信息。例如,因为与正面分解图像的斜向的圆周附近相当的乳房区域的病变不易移动,所以也可以如图16的(a)所示,在正面图解图像的推测出的临床位置的中心部的比较小的区域叠合描画圆形的注释来作为临床位置信息,因为乳头的下部附近的病变容易在上下方向移动,所以也可以如图16的(b)所示,以正面图解图像的推测出的临床位置为中心,将以上下方向为长轴的比较大的椭圆形的注释叠合描画到正面图解图像来作为临床位置信息。
在以下说明中,以按照图13的(b)所示的方式示出临床位置信息的情况为例进行说明。
此外,在仅从MLO图像、CC图像中的某一个图像指定关注区域的情况下,生成包围正面图解图像中的所推测出的临床位置、或者将颜色等叠合到推测出的临床位置而得到的注释,来作为临床位置信息。
接着,控制部31解析所选择出的乳房图像来进行与乳房的结构有关的评价(步骤S9)。
在此,在利用乳腺X射线摄影检查得到的乳房图像中乳腺和病变(肿瘤等)以相同程度的浓度表现,所以在具有高浓度的乳腺的患者的情况下难以发现病变。另一方面,脂肪区域在乳房图像上用与病变不同的浓度表现,所以脂肪区域越多,越易于发现病变。因此,为了对放射线技师、医师提供所显示的乳房图像的病变的看漏风险的指标,进行与乳房的结构有关的评价。此外,从病变看漏的风险低的区域起依次评价为1.脂肪性、2.乳腺分布、3.不均匀高浓度、4.高浓度。
步骤S9中的与乳房的结构有关的评价例如如参考文献1所记载那样,能够使用公知的图像处理技术进行(参考文献1:松原友子、土本多美子、原武史、藤田広志、岩瀬拓士、遠藤登喜子著“乳腺実質濃度的評価に基づくマンモグラム的自動分類法”医用电子与生物体工学,第38卷第2号(2000年6月))。
接着,控制部31生成显示有临床位置信息以及与乳房的结构有关的评价结果的阅览画面431的画面信息,通过通信部34发送到图像显示装置4,在显示部43的阅览画面431上显示临床位置信息以及与乳房的结构有关的评价结果(参照步骤S10,图18)。
此外,在已使用所显示的乳房图像实施了与乳房的结构有关的评价的情况下,省略步骤S9的判定。
接着,控制部31参照存储部35来判断图像显示装置4的用户是否为被赋予了意见记录权限的用户(步骤S11)。在此,在从图像显示装置4登录到医用图像系统100时,用户通过操作部42输入用户认证信息(在此为用户ID以及密码),控制部31获取所输入的用户ID以及密码,进行登录认证。在步骤S11中,控制部31参照存储部35,根据从图像显示装置4登录的用户的用户ID判断图像显示装置4的用户是否为被赋予了意见记录权限的用户。
在判断为图像显示装置4的用户是被赋予了意见记录权限的用户的情况下(步骤S11:是),控制部31通过通信部34向图像显示装置4发送意见记入画面432的画面信息,使显示部43弹出显示意见记入画面432(步骤S12)。
图17示出在步骤S12中显示的意见记入画面432的一个例子。意见记入画面432是用于记录用户对关注区域的意见的画面。如图17所示,意见记入画面432设置有用于记录关注区域的病变名和分类的意见记录区域432a、用于输入意见记录完成的指示的OK按钮432b以及用于取消意见记录的取消(Cancel)按钮432c。当通过操作部42在意见记录区域432a输入意见并按下OK按钮432b时,图像显示装置4的控制部41通过通信部44将意见记录完成的指示以及所输入的意见信息发送到服务器装置3。
当通过通信部34接收到来自图像显示装置4的意见记录完成的指示以及意见信息(步骤S13:是)时,控制部31在图像显示装置4中生成显示有所记录的意见信息的阅览画面431的画面信息,通过通信部34发送到图像显示装置4,在显示部43的阅览画面431上显示意见信息(步骤S14)。
图18示出显示有推测出的临床位置信息、记录的意见信息以及与乳房的结构有关的评价结果的阅览画面431的一个例子。如图18所示,阅览画面431上的区域431h显示在显示于图像显示栏431a的乳房图像上指定的关注区域(用1示出)的临床位置信息4311以及意见信息4312、基于显示于图像显示栏431a的乳房图像的与乳房的结构有关的评价结果4313。
这样,在阅览画面431上显示乳房图像上的关注区域、推测出的该关注区域的临床位置信息以及针对被摄体部位的附带信息(与乳房的结构有关的评价结果、意见信息),所以用户(放射线技师)能够通过阅览画面431将乳房图像上的关注区域与临床位置信息进行比较,判断推测出的临床位置是否准确。另外,显示作为病变的看漏风险的指标的与乳房的结构有关的评价结果,所以例如在与乳房的结构有关的评价结果为病变的看漏风险高的不均匀高浓度或高浓度的情况下,能够唤起用户注意,以使用户在从乳房图像上探索有无其它关注区域时慎重地进行。
接着,控制部31参照存储部35来判断图像显示装置4的用户是否为被赋予了临床位置信息的编辑权限中的变更或删除权限的用户(步骤S15)。临床位置信息的编辑是指临床位置信息的变更、删除、追加。在推测模式下,能够进行编辑中的临床位置信息的变更或者删除。
在判断为图像显示装置4的用户是被赋予了变更或追加权限的用户的情况下(步骤S15:是),控制部31经由通信部34使显示于图像显示装置4的阅览画面431显示用于指示开始变更所显示的临床位置信息的变更按钮B1以及用于指示删除所显示的临床位置信息的删除按钮B2(步骤S16)。
通过从阅览画面431通过操作部42按下变更按钮B1能够将临床位置信息的变更开始指示发送到服务器装置3。另外,能够在作为临床位置信息的正面图解图像上进行临床位置的变更操作。通过按下删除按钮B2能够将临床位置信息的删除指示发送到服务器装置3。
控制部31判断是否通过通信部34从图像显示装置4接收到变更开始指示(步骤S17)。在判断为未接收到变更开始指示的情况下(步骤S17:否),控制部31转移到步骤S20。
在判断为通过通信部34接收到变更开始指示的情况下(步骤S17:是),控制部31经由通信部34获取针对显示于区域431h的临床位置信息(推测出的临床位置信息)的操作信息,根据获取到的操作信息来变更临床位置信息并使之显示于区域431h(步骤S18)。
例如,当如图19的(a)所示通过操作部42按下所显示的临床位置信息的任意的位置时,控制部31将临床位置变更为与被按下的位置(图19的(a)所示的区域1~9)对应的位置,使变更了临床位置的临床位置信息显示于区域431h。变更后的位置优选与推测出的临床位置区分颜色或纹路而显示,以使得在后面知道被变更了的情况。另外,例如,也可以如图19的(c)所示,在临床位置信息上显示两个点P1、P2,通过操作部42使两个点P1、P2移动,从而能够自由地变更临床位置。此外,再次按下变更按钮B1的操作为变更完成指示的操作信息。
这样,在本实施方式中,能够变更推测出的临床位置信息中的临床位置,所以例如在用户(放射线技师)判断为步骤S7中的推测结果错误的情况下、或认为对进一步扩张后的范围进行超声波检查更好的情况下,能够反映用户的判断而将关注区域的临床位置适当地通知给超声波检查人员。
当通过通信部34从图像显示装置4接收到变更完成指示时(步骤S19:是),控制部31转移到步骤S20。
在步骤S20中,控制部31判断是否通过通信部34从图像显示装置4接收到删除指示(步骤S20)。
在判断为未接收到删除指示的情况下(步骤S20:否),控制部31转移到步骤S22。
在判断为接收到删除指示的情况下(步骤S20:是),控制部31删除显示于区域431h的推测出的临床位置信息、与该临床位置信息对应的关注区域以及意见信息(步骤S21),转移到步骤S22。
这样,在本实施方式中,能够删除推测出的临床位置信息,所以例如能够防止当在乳房图像上的错误位置指定了关注区域时等将错误的信息直接通知给超声波检查人员。
当推测出的临床位置信息的确认以及编辑结束时,用户能够通过操作部42从显示于阅览画面431的乳房图像指定其它关注区域。另外,能够通过操作部42R按下按钮431b或L按钮431c,切换显示对象的乳房图像的左右,指定其它关注区域。当指定了其它关注区域时,图像显示装置4的控制部41通过通信部44将所指定的关注区域的位置信息发送到服务器装置3。
另外,在想要输入摄影时的视诊触诊信息的情况下,用户能够通过操作部42按下结节及分泌按钮431g,指示开始输入摄影时的视诊触诊信息。当按下结节及分泌按钮431g时,图像显示装置4的控制部41通过通信部44将摄影时的视诊触诊信息的输入开始指示发送到服务器装置3。
在结束针对该检查的处理而将处理结果保存于DB351的情况下,用户通过操作部42按下保存按钮431i而输入保存指示。当通过操作部42按下保存按钮431i时,图像显示装置4的控制部41通过通信部44将保存指示发送到服务器装置3。
在步骤S22中,控制部31判断在显示临床位置信息之后是否通过通信部34从图像显示装置4接收到接下来的关注区域的位置信息(步骤S22)。在判断为从图像显示装置4接收到接下来的关注区域的位置信息的情况下(步骤S22:是),控制部31返回到步骤S6。
在判断为未从图像显示装置4接收到接下来的关注区域的位置信息的情况下(步骤S22:否),控制部31转移到步骤S23。
在步骤S23中,控制部31参照存储部35来判断图像显示装置4的用户是否为被赋予了视诊触诊信息的输入权限的用户(步骤S23)。在判断为从图像显示装置4登录的用户不是被赋予了视诊触诊信息的输入权限的用户的情况下(步骤S23:否),控制部31向步骤S27转移。
在判断为从图像显示装置4登录的用户是被赋予了视诊触诊信息的输入权限的用户的情况下(步骤S23:是),控制部31判断是否通过通信部34从图像显示装置4接收到摄影时的视诊触诊信息的输入开始指示(步骤S24)。在判断为未从图像显示装置4接收到摄影时的视诊触诊信息的输入开始指示的情况下(步骤S24:否),控制部31转移到步骤S27。
在判断为从图像显示装置4接收到摄影时的视诊触诊信息的输入开始指示的情况下(步骤S24:是),控制部31通过通信部34将输入画面433的画面信息发送到图像显示装置4,使显示部43弹出显示输入画面433(步骤S25)。
图20示出在步骤S25中显示的输入画面433的一个例子。输入画面433是用于输入摄影时的视诊触诊信息的画面。如图20所示,输入画面433关于右(R)和左(L)的每一边设置有用于输入摄影时的乳头分泌状态以及结节部位的视诊触诊信息输入区域433a、用于输入输入完成的指示的OK按钮433b以及用于取消视诊触诊信息的输入的取消按钮433c。当通过操作部42从视诊触诊信息输入区域433a进行输入并按下OK按钮433b时,图像显示装置4的控制部41通过通信部44将输入完成的指示以及所输入的摄影时的视诊触诊信息发送到服务器装置3。
当通过通信部34接收到来自图像显示装置4的输入完成的指示以及摄影时的视诊触诊信息时(步骤S26:是),控制部31转移到步骤S27。
在步骤S27中,控制部31判断是否通过通信部34从图像显示装置4接收到保存指示(步骤S27)。在判断为未接收到保存指示的情况下(步骤S27:否),控制部31返回到步骤S22。
在判断为接收到保存指示的情况下(步骤S27:是),控制部31将在步骤S6~步骤S26中生成的各关注区域信息、临床位置信息、以及附带信息(针对关注区域的意见信息、乳房的结构的评价结果、摄影时的视诊触诊信息等)与乳房图像对应关联地保存到图像DB351(步骤S28),结束临床位置信息生成处理。此外,在未进行临床位置信息的编辑(在此,变更)的情况下,控制部31将推测出的临床位置信息保存于图像DB351,在进行了编辑的情况下将编辑后的临床位置信息保存于图像DB351。另外,在乳房图像上指定的各关注区域和与其对应的临床位置信息、意见信息以及摄影时的视诊触诊信息被赋予同一识别信息,相互对应关联地保存。
另一方面,在步骤S2中,在通过通信部34从图像显示装置4接收到表示确认模式的选择的操作信息的情况下(步骤S2;确认模式),控制部31转移到步骤S29。
在步骤S29中,控制部31从图像DB351读出与所显示的乳房图像对应的关注区域信息、临床位置信息以及附带信息,生成在图像显示栏431a在关注区域显示有注释的乳房图像、在区域431h一览显示有与各关注区域对应的临床位置信息以及附带信息(针对关注区域的意见信息、与乳房有关的评价结果)的阅览画面431的画面信息,通过通信部34发送到图像显示装置4,使之显示于显示部43(步骤S29)。此外,关注区域和与其对应的临床位置信息以及附带信息通过附加同一识别信息等相互对应关联地显示。
在此,在阅览画面431中对应关联地显示有乳房图像上的关注区域以及其临床位置信息,所以用户(超声波检查人员)能够容易地掌握应重点地进行超声波检查的关注区域的临床位置,能够提高检查效率。另外,在阅览画面431上显示基于所显示的乳房图像的与乳房有关的评价结果等,所以在病变的看漏风险高的情况下,能够唤起用户的注意,以使用户慎重地进行超声波检查。
此外,当通过操作部42从一览显示于区域431h的临床位置信息中选择出一个临床位置信息时,能够将与所选择出的临床位置信息对应的识别信息发送到服务器装置3,将参照所选择出的临床位置信息实际进行了超声波检查的临床位置的信息追加到所选择出的临床位置信息。
接着,控制部31判断是否通过通信部34从图像显示装置4接收到所选择的临床位置信息的识别信息(步骤S30)。在图像显示装置4中,当通过操作部42从显示于阅览画面431的临床位置信息之中选择出临床位置信息时,通过通信部44将选择出的临床位置信息的识别信息发送到服务器装置3。
在判断为通过通信部34从图像显示装置4接收到所选择的临床位置信息的识别信息的情况下(步骤S30:是),控制部31参照存储部35判断图像显示装置4的用户是否为具有临床位置信息中的临床位置的追加权限的用户(步骤S31)。
在判断为图像显示装置4的用户不是具有临床位置信息中的临床位置的追加权限的用户的情况下(步骤S31:否),控制部31转移到步骤S34。
在判断为图像显示装置4的用户是具有临床位置信息中的临床位置的追加权限的用户的情况下(步骤S31:是),控制部31经由通信部34获取针对显示于区域431h的临床位置信息的操作信息,根据获取到的操作信息对临床位置信息追加临床位置,并使之显示于区域431h(步骤S32)。
例如,如图21的(a)所示,在所显示的临床位置信息中,当通过操作部42按下正面图解图像上的任意的位置时,控制部31对与被按下的位置(图21的(a)所示的区域1~9)对应的位置(参照图13的(a)、(b))追加临床位置,使追加了临床位置的临床位置信息显示于区域431h。追加的临床位置优选与原来的临床位置区分颜色或纹路而显示,以使得在后面知道被追加的情况。另外,例如,也可以如图21的(b)所示,在临床位置信息上显示两个点P1、P2并使位置或两个点移动,从而能够自由地追加临床位置。
这样,在本实施方式中,能够追加临床位置信息的临床位置,所以例如在用户(超声波检查人员)参照临床位置信息进行检查但此处却没有阴影、而在扩张后的范围进行检查并获取到阴影的超声波图像的情况下,能够将实际存在阴影的临床位置追加到临床位置信息。另外,原来的临床位置能够作为超声波检查人员检查过的位置的历史而保留。
接着,控制部31判断是否通过通信部34从图像显示装置4接收到其它的临床位置信息的识别信息(步骤S33)。在判断为接收到其它的临床位置信息的识别信息的情况下(步骤S33:是),控制部31返回到步骤S32。
在判断为未接收到其它临床位置信息的识别信息的情况下(步骤S33:否),控制部31转移到步骤S34。
在步骤S34中,控制部31判断是否通过通信部34从图像显示装置4接收到保存指示(步骤S34)。在判断为未接收到保存指示的情况下(步骤S34:否),控制部31结束临床位置信息生成处理。
另一方面,在判断为通过通信部34从图像显示装置4接收到保存指示的情况下(步骤S34:是),控制部31通过各关注区域的最新的临床位置信息(在进行了编辑的情况下为编辑后的临床位置信息)改写保存于图像DB351的临床位置信息并保存(步骤S35)。另外,控制部31生成将通过乳腺X射线摄影检查得到的乳房图像的关注区域的位置与该关注区域的最新的临床位置信息(在进行了编辑的情况下为编辑后的临床位置信息,在未编辑的情况下为推测出的临床位置信息)对应关联地显示的检查结果图像,通过通信部34发送到诊断用终端6(步骤S36),结束临床位置信息生成处理。
图22示出检查结果图像的一个例子。如图22所示,在检查结果图像中,通过相同的识别编号将通过乳腺X射线摄影检查得到的乳房图像的关注区域的位置与该关注区域的临床位置信息对应关联地显示。关注区域的临床位置信息所表示的临床位置表示超声波检查人员实际检查的临床位置,所以显示为<超声波检查位置>。将该检查结果图像发送到医师的诊断用终端6,从而医师无需在头脑中推测与乳房图像上的关注区域对应的临床位置并与超声波图像对应关联,能够提高诊断效率。另外,医师能够容易地掌握超声波检查人员所检查出的范围,所以能够防止多余的追加检查。
如以上说明,根据医用图像系统100,当在图像显示装置4中从乳房图像指定了关注区域时,服务器装置3的控制部31推测从正面观察乳房时的关注区域的位置(临床位置),生成表示推测出的关注区域的位置的临床位置信息,使生成的推测临床位置信息显示于图像显示装置4的显示部43。另外,控制部31根据图像显示装置4中的用户的操作来编辑显示于显示部43的临床位置信息。
例如,控制部31根据用户操作来变更显示于图像显示装置4的临床位置信息中的关注区域的位置。因此,例如,在用户判断为推测出的临床位置错误的情况下等,能够变更临床位置信息中的关注区域的位置,能够将关注区域的临床位置适当地通知给之后观察临床位置信息来进行超声波检查的检查人员等。
另外,例如,控制部31根据用户操作而删除显示于图像显示装置4的临床位置信息。因此,例如,在用户错误地指定关注区域时等能够删除临床位置信息,能够防止将错误的信息通知给之后观察临床位置信息来进行超声波检查的检查人员等。
另外,例如,控制部31根据用户操作而追加显示于图像显示装置4的临床位置信息中的关注区域的位置。因此,例如,当在超声波检查时在临床位置信息所表示的临床位置没有阴影、进而将其它位置作为关注区域的临床位置进行检查并检测到与关注区域对应的阴影的情况下等,能够将实际检测到与关注区域对应的阴影的位置追加到临床位置信息,能够将实际存在有与关注区域对应的阴影的临床位置适当地通知给要根据检查结果进行诊断的医师。
另外,临床位置信息是在从正面观察超声波检查所使用的被摄体部位时的图解图像上示出关注区域的位置的图像,所以能够将关注区域的临床位置显示为超声波检查人员容易一看就懂。
另外,控制部31生成乳房图像上的关注区域的位置与该关注区域的临床位置对应关联的图像并发送到诊断用终端6,所以医师无需在头脑中推测与乳房图像上的关注区域对应的临床位置,能够提高诊断效率。
另外,控制部31将在异常阴影候补检测装置2中检测到的异常阴影候补的区域显示于乳房图像,所以用户能够容易地指定关注区域。
另外,控制部31根据用户实施的输入生成摄影时的视诊触诊信息、针对关注区域的意见信息中的至少一个信息并显示,所以能够对超声波检查人员或医师提供摄影时的视诊触诊信息以及针对关注区域的意见。
另外,控制部31通过解析乳房图像而进行与乳房的结构有关的评价,将其评价结果显示为附带信息,所以能够对放射线技师、超声波检查人员以及医师提供乳房图像中的病变的看漏难易度的信息。
另外,控制部31使临床位置信息以及/或者附带信息与显示有关注区域的乳房图像显示在同一画面上,所以超声波检查人员能够一边参照乳房图像上的关注区域和附带信息一边进行超声波检查,能够提高超声波检查时的检查效率。
此外,上述实施方式中的记述内容是本发明的优选的一个例子,并非限定于此。
例如,在上述实施方式中,设为用字符显示与乳房的结构有关的评价结果,但不限定于此。
例如,如图23的(a)所示,也可以以和与乳房的结构有关的评价结果相应的单色浓淡或颜色来显示作为临床位置信息的正面图解图像上的临床位置的颜色。例如,也可以以最接近白色的浓度(亮度)来显示评价的得分最高的“高浓度”,并随着得分下降而以接近黑色的显示浓度(亮度)来显示。
另外,例如,如图23的(b)所示,也可以以和与乳房的结构有关的评价结果的得分相应的单色浓淡或颜色来显示作为临床位置信息的正面图解图像的乳房区域的线条。
另外,例如,如图23的(c)所示,也可以显示根据与乳房的结构有关的评价结果的得分来变更乳房的涂抹量的图。
另外,如图23(d)所示,也可以显示表示与乳房的结构有关的评价结果的得分。
另外,上述实施方式所示的阅览画面431是一个例子,例如,也可以根据图像显示装置4的监视器尺寸来变更布局、尺寸、CAD标记(注释)。
另外,在上述实施方式中,设为在图像显示装置4中选择处理对象的检查而进行了说明,但也可以将与在其它装置中选择出的检查有关的阅览画面431显示于图像显示装置4。例如,也可以在具有使检查(摄影命令信息)的列表显示于显示部的功能的控制台12或超声波诊断装置5中,在通过操作部选择出检查(摄影命令信息)的情况下,将选择出的检查的检查ID等发送到服务器装置3,在服务器装置3中生成关于接收到的检查ID的检查的阅览画面431,并通过通信部34发送到图像显示装置4,使关于在控制台12或超声波诊断装置5中选择出的检查的阅览画面431显示于图像显示装置4。由此,例如,当放射线技师(超声波检查人员)在控制台12(超声波诊断装置5)选择出要实施的检查(摄影命令信息)时,将关于该检查的阅览画面431显示于图像显示装置4,所以无需在图像显示装置4中重复地进行选择操作,操作性提高。此外,也可以由用户变更显示于阅览画面431的初始画面(推测模式的画面、确认模式的画面)。
另外,例如,在图像显示装置4为移动终端的情况下等,在控制台12和图像显示装置4设置在附近的情况下,也可以由控制台12和图像显示装置4共有指示器,使得能够利用1个指向设备进行双方的操作。控制台12与图像显示装置4共有指示器例如能够通过将图像显示装置4作为副显示器登记到控制台12来实现。由此,放射线技师在一边通过控制台12确认拍摄到的图像一边进行临床位置的推测操作时只要操作一个指向设备即可,所以能够提高作业效率。
另外,例如,也可以设为当在控制台12上指定了乳房图像的关注区域时,将指定的关注区域的位置信息发送到服务器装置3,在服务器装置3中根据接收到的位置信息进行临床位置的推测,生成推测出的临床位置的临床位置信息并发送到图像显示装置4而使之显示。由此,例如,在图像显示装置4为移动终端的情况下,能够在控制台12的易于观察的画面(大的画面)指定乳房图像上的关注区域的位置。
另外,例如,也可以使生成的(编辑后的)临床位置信息在超声波诊断装置5中作为体位标记的默认来显示。例如,也可以当在超声波诊断装置5中选择出检查对象的患者的患者信息时,超声波诊断装置5将患者ID等发送到服务器装置3并从服务器装置3获取与该患者ID对应的临床位置信息(最新的检查的信息),并默认显示获取到的临床位置信息。由此,能够免去超声波检查时的体位标记的误记、节省记录的工夫。
另外,在上述实施方式中,说明为作为与被摄体部位有关的附带信息生成摄影时的视诊触诊信息、针对关注区域的意见信息、与乳房的结构有关的评价结果并显示,但未必需要全部都生成为附带信息。
另外,例如,在上述实施方式中,设为服务器装置3与图像显示装置4以分体的装置构成客户端服务器系统,但也可以用1个装置实现两个装置的功能。即,也可以设为在装置的存储部(记录介质)存储用于使计算机作为显示单元、指定单元、推测单元、生成单元、显示控制单元、编辑单元、保存单元、第2生成单元、发送单元、附带信息生成单元、输入单元发挥功能的程序,利用CPU等控制部与程序的协作来实现这些功能。另外,也可以将异常阴影候补检测装置2的功能也编入到同一个装置。即,除了上述单元之外,也可以在装置的存储部(记录介质)中还存储有用于使计算机作为检测单元发挥功能的程序。
另外,在上述实施方式中,以在图像显示装置4中将通过操作部42在显示于阅览画面431的乳房图像上指定的区域指定为关注区域的情况为例进行了说明,但也可以设为通过异常阴影候补检测装置2将从乳房图像检测出的异常阴影候补的区域指定为关注区域。
另外,在上述实施方式中,以被摄体部位为乳房的情况为例进行了说明,但也可以将本发明应用于关于其它部位的X射线检查与超声波检查的联合检查的支援。
另外,在上述说明中,公开了作为本发明的程序的计算机可读取的介质使用了硬盘或半导体的非易失性存储器等的例子,但不限于该例子。作为其它计算机可读取的介质还能够应用CD-ROM等便携式记录介质。另外,作为经由通信线路提供本发明的程序数据的介质,还能够应用载波(Carrier wave)。
除此之外,在构成医用图像系统的各装置的细部结构以及细部动作方面,也能够在不脱离本发明的主旨的范围适当地变更。
Claims (30)
1.一种医用图像系统,具备:
显示单元,显示通过拍摄被摄体部位而得到的1个以上的医用图像;
指定单元,用于从所述医用图像指定关注区域;
推测单元,根据所述医用图像的所述关注区域的位置推测从正面观察所述被摄体部位时的所述关注区域的位置;
生成单元,生成临床位置信息,该临床位置信息表示由所述推测单元推测出的从正面观察所述被摄体部位时的所述关注区域的位置;
显示控制单元,使所生成的所述临床位置信息显示于所述显示单元;以及
编辑单元,对显示于所述显示单元的临床位置信息进行编辑。
2.根据权利要求1所述的医用图像系统,其中,
所述编辑单元根据用户操作而变更显示于所述显示单元的临床位置信息中的所述关注区域的位置。
3.根据权利要求1或者2所述的医用图像系统,其中,
所述编辑单元根据用户操作而追加显示于所述显示单元的临床位置信息中的所述关注区域的位置。
4.根据权利要求1~3中的任意一项所述的医用图像系统,其中,
所述编辑单元根据用户操作而删除显示于所述显示单元的临床位置信息。
5.根据权利要求1~4中的任意一项所述的医用图像系统,其中,
所述临床位置信息是在超声波检查所使用的从正面观察所述被摄体部位时的图解图像上示出所述关注区域的位置的图像。
6.根据权利要求1~5中的任意一项所述的医用图像系统,其中,
所述医用图像系统具备保存单元,针对所述医用图像上的关注区域的位置,在未利用所述编辑单元进行所述临床位置信息的编辑时该保存单元对应关联地保存由所述生成单元生成的所述关注区域的临床位置信息,在利用所述编辑单元进行了所述临床位置信息的编辑时该保存单元对应关联地保存编辑后的所述关注区域的临床位置信息。
7.根据权利要求1~6中的任意一项所述的医用图像系统,其中,
所述医用图像系统具备:
第2生成单元,针对所述医用图像上的关注区域的位置,在未利用所述编辑单元进行所述临床位置信息的编辑时该第2生成单元生成对应关联有由所述生成单元生成的所述关注区域的临床位置信息的图像,在利用所述编辑单元进行了所述临床位置信息的编辑时该第2生成单元生成对应关联有编辑后的所述关注区域的临床位置信息的图像;以及
发送单元,将由所述第2生成单元生成的图像发送到诊断用终端。
8.根据权利要求1~7中的任意一项所述的医用图像系统,其中,
所述医用图像系统具备检测单元,该检测单元从所述医用图像检测异常阴影候补,
所述显示单元将由所述检测单元检测出的异常阴影候补的区域显示于所述医用图像。
9.根据权利要求1~8中的任意一项所述的医用图像系统,其中,
所述被摄体部位为乳房,所述医用图像是通过对乳房进行X射线摄影而得到的乳房图像。
10.根据权利要求1~9中的任意一项所述的医用图像系统,其中,
所述医用图像系统具备附带信息生成单元,该附带信息生成单元生成与所述被摄体部位有关的附带信息。
11.根据权利要求10所述的医用图像系统,其中,
所述显示控制单元使所述临床位置信息以及/或者所述附带信息与显示有所述关注区域的医用图像显示在同一画面上。
12.根据权利要求10或者11所述的医用图像系统,其中,
所述医用图像系统具备输入单元,该输入单元用于用户输入所述附带信息,
所述附带信息生成单元根据来自所述输入单元的输入而生成所述附带信息。
13.根据权利要求12所述的医用图像系统,其中,
所述附带信息包括所述被摄体部位的视诊触诊信息、针对所述关注区域的意见信息中的至少一种信息。
14.根据权利要求10~13中的任意一项所述的医用图像系统,其中,
所述附带信息生成单元通过解析所述医用图像而生成所述附带信息。
15.根据权利要求14所述的医用图像系统,其中,
在所述被摄体部位为乳房、所述医用图像是通过对乳房进行X射线摄影而得到的乳房图像的情况下,所述附带信息生成单元解析所述乳房图像而进行与所述乳房的结构有关的评价,生成其评价结果来作为所述附带信息。
16.一种计算机可读取的记录介质,存储有用于使计算机作为如下单元发挥功能的程序:
显示单元,显示通过拍摄被摄体部位而得到的1个以上的医用图像;
指定单元,用于从所述医用图像指定关注区域;
推测单元,根据所述医用图像的所述关注区域的位置推测从正面观察所述被摄体部位时的所述关注区域的位置;
生成单元,生成临床位置信息,该临床位置信息表示由所述推测单元推测出的从正面观察所述被摄体部位时的所述关注区域的位置;
显示控制单元,使所生成的所述临床位置信息显示于所述显示单元;以及
编辑单元,对显示于所述显示单元的临床位置信息进行编辑。
17.根据权利要求16所述的计算机可读取的记录介质,其中,
所述编辑单元根据用户操作而变更显示于所述显示单元的临床位置信息中的所述关注区域的位置。
18.根据权利要求16或者17所述的计算机可读取的记录介质,其中,
所述编辑单元根据用户操作而追加显示于所述显示单元的临床位置信息中的所述关注区域的位置。
19.根据权利要求16~18中的任意一项所述的计算机可读取的记录介质,其中,
所述编辑单元根据用户操作而删除显示于所述显示单元的临床位置信息。
20.根据权利要求16~19中的任意一项所述的计算机可读取的记录介质,其中,
所述临床位置信息是在超声波检查所使用的从正面观察所述被摄体部位时的图解图像上示出所述关注区域的位置的图像。
21.根据权利要求16~20中的任意一项所述的计算机可读取的记录介质,其中,
所述程序使所述计算机进一步作为保存单元发挥功能,针对所述医用图像上的关注区域的位置,在未利用所述编辑单元进行所述临床位置信息的编辑时该保存单元对应关联地保存由所述生成单元生成的所述关注区域的临床位置信息,在利用所述编辑单元进行了所述临床位置信息的编辑时该保存单元对应关联地保存编辑后的所述关注区域的临床位置信息。
22.根据权利要求16~21中的任意一项所述的计算机可读取的记录介质,其中,
所述程序使所述计算机进一步作为如下单元发挥功能:
第2生成单元,针对所述医用图像上的关注区域的位置,在未利用所述编辑单元进行所述临床位置信息的编辑时该第2生成单元生成对应关联有由所述生成单元生成的所述关注区域的临床位置信息的图像,在利用所述编辑单元进行了所述临床位置信息的编辑时该第2生成单元生成对应关联有编辑后的所述关注区域的临床位置信息的图像;以及
发送单元,将由所述第2生成单元生成的图像发送到诊断用终端。
23.根据权利要求16~22中的任意一项所述的计算机可读取的记录介质,其中,
所述程序使所述计算机进一步作为检测单元发挥功能,该检测单元从所述医用图像检测异常阴影候补,
所述显示单元将由所述检测单元检测出的异常阴影候补的区域显示于所述医用图像。
24.根据权利要求16~23中的任意一项所述的计算机可读取的记录介质,其中,
所述被摄体部位为乳房,所述医用图像是通过对乳房进行X射线摄影而得到的乳房图像。
25.根据权利要求16~24中的任意一项所述的计算机可读取的记录介质,其中,
所述程序使所述计算机进一步作为附带信息生成单元发挥功能,该附带信息生成单元生成与所述被摄体部位有关的附带信息。
26.根据权利要求25所述的计算机可读取的记录介质,其中,
所述显示控制单元使所述临床位置信息以及/或者所述附带信息与显示有所述关注区域的医用图像显示在同一画面上。
27.根据权利要求25或者26所述的计算机可读取的记录介质,其中,
所述程序使所述计算机进一步作为输入单元发挥功能,该输入单元用于用户输入所述附带信息,
所述附带信息生成单元根据来自所述输入单元的输入而生成所述附带信息。
28.根据权利要求27所述的计算机可读取的记录介质,其中,
所述附带信息包括所述被摄体部位的视诊触诊信息、针对所述关注区域的意见信息中的至少一种信息。
29.根据权利要求25~28中的任意一项所述的计算机可读取的记录介质,其中,
所述附带信息生成单元通过解析所述医用图像而生成所述附带信息。
30.根据权利要求29所述的计算机可读取的记录介质,其中,
在所述被摄体部位为乳房、所述医用图像是通过对乳房进行X射线摄影而得到的乳房图像的情况下,所述附带信息生成单元解析所述乳房图像而进行与所述乳房的结构有关的评价,生成其评价结果来作为所述附带信息。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016-168831 | 2016-08-31 | ||
JP2016168831A JP2018033657A (ja) | 2016-08-31 | 2016-08-31 | 医用画像システム及びプログラム |
Publications (1)
Publication Number | Publication Date |
---|---|
CN107788998A true CN107788998A (zh) | 2018-03-13 |
Family
ID=61531622
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201710747065.6A Pending CN107788998A (zh) | 2016-08-31 | 2017-08-28 | 医用图像系统以及计算机可读取的记录介质 |
Country Status (2)
Country | Link |
---|---|
JP (1) | JP2018033657A (zh) |
CN (1) | CN107788998A (zh) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7258640B2 (ja) * | 2018-04-27 | 2023-04-17 | キヤノンメディカルシステムズ株式会社 | 医用情報処理システム及び医用情報処理プログラム |
JP6957771B2 (ja) | 2018-11-28 | 2021-11-02 | オリンパス株式会社 | 内視鏡システム、及び、内視鏡用画像処理方法、並びに、内視鏡用画像処理プログラム |
JP7407525B2 (ja) * | 2019-05-20 | 2024-01-04 | 株式会社イーエムシステムズ | 診療情報処理システム |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2006126384A1 (ja) * | 2005-05-23 | 2006-11-30 | Konica Minolta Medical & Graphic, Inc. | 異常陰影候補の表示方法及び医用画像処理システム |
CN101518454A (zh) * | 2008-02-28 | 2009-09-02 | 富士胶片株式会社 | 放射线图像摄影系统、放射线图像摄影方法及程序 |
CN102103662A (zh) * | 2009-12-22 | 2011-06-22 | 株式会社东芝 | 医用图像诊断装置、医用信息显示装置及个人信息管理系统 |
CN103536305A (zh) * | 2012-07-11 | 2014-01-29 | 通用电气公司 | 用于执行图像类型识别的系统和方法 |
US20150150531A1 (en) * | 2013-11-29 | 2015-06-04 | Konica Minolta, Inc. | Medical Imaging System And Program |
JP2015112123A (ja) * | 2013-12-09 | 2015-06-22 | 株式会社東芝 | 医用画像診断装置 |
CN105433969A (zh) * | 2014-09-22 | 2016-03-30 | 柯尼卡美能达株式会社 | 医用图像系统以及推定临床位置信息显示方法 |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005065856A (ja) * | 2003-08-21 | 2005-03-17 | Fuji Photo Film Co Ltd | 異常陰影検出方法および装置並びにプログラム |
JP2005103055A (ja) * | 2003-09-30 | 2005-04-21 | Konica Minolta Medical & Graphic Inc | 医用画像処理装置 |
JP2013198683A (ja) * | 2012-03-26 | 2013-10-03 | Canon Inc | 撮影システム及びその制御方法、並びに、プログラム |
-
2016
- 2016-08-31 JP JP2016168831A patent/JP2018033657A/ja active Pending
-
2017
- 2017-08-28 CN CN201710747065.6A patent/CN107788998A/zh active Pending
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2006126384A1 (ja) * | 2005-05-23 | 2006-11-30 | Konica Minolta Medical & Graphic, Inc. | 異常陰影候補の表示方法及び医用画像処理システム |
CN101518454A (zh) * | 2008-02-28 | 2009-09-02 | 富士胶片株式会社 | 放射线图像摄影系统、放射线图像摄影方法及程序 |
CN102103662A (zh) * | 2009-12-22 | 2011-06-22 | 株式会社东芝 | 医用图像诊断装置、医用信息显示装置及个人信息管理系统 |
CN103536305A (zh) * | 2012-07-11 | 2014-01-29 | 通用电气公司 | 用于执行图像类型识别的系统和方法 |
US20150150531A1 (en) * | 2013-11-29 | 2015-06-04 | Konica Minolta, Inc. | Medical Imaging System And Program |
JP2015112123A (ja) * | 2013-12-09 | 2015-06-22 | 株式会社東芝 | 医用画像診断装置 |
CN105433969A (zh) * | 2014-09-22 | 2016-03-30 | 柯尼卡美能达株式会社 | 医用图像系统以及推定临床位置信息显示方法 |
Also Published As
Publication number | Publication date |
---|---|
JP2018033657A (ja) | 2018-03-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US8929627B2 (en) | Examination information display device and method | |
CN103649961B (zh) | 对图像数据中的发现的解剖学标记的方法 | |
US20130093781A1 (en) | Examination information display device and method | |
JP5309187B2 (ja) | 医用情報表示装置およびその動作方法、並びに医用情報表示プログラム | |
JP5572440B2 (ja) | 診断支援システム、診断支援プログラムおよび診断支援方法 | |
JP4786246B2 (ja) | 画像処理装置及び画像処理システム | |
JP5551960B2 (ja) | 診断支援システム、診断支援プログラムおよび診断支援方法 | |
CN103635909B (zh) | 一种临床发现管理系统 | |
JP5487157B2 (ja) | 画像処理装置および画像処理装置の作動方法並びに画像処理プログラム | |
CN103733200B (zh) | 由带有解剖学标记临床管理促进的检查审阅 | |
JP2009086765A (ja) | 医用レポートシステム、医用レポート作成装置、及び医用レポート作成方法 | |
JP6331922B2 (ja) | 医用画像システム及びプログラム | |
JP4744926B2 (ja) | 医用画像表示装置及び医用画像表示方法 | |
WO2011132468A1 (ja) | 医用画像表示装置及びプログラム | |
EP2878266A1 (en) | Medical imaging system and program | |
CN105473071A (zh) | 用于提供医疗信息的设备和方法 | |
CN107788998A (zh) | 医用图像系统以及计算机可读取的记录介质 | |
JP4755863B2 (ja) | 読影支援装置、読影支援方法、およびそのプログラム | |
JP2011103095A (ja) | 医用画像表示システム及びプログラム | |
JP2016195655A (ja) | 医用画像システム及びプログラム | |
JP2015104464A (ja) | 医用画像システム及びプログラム | |
JPH0736935A (ja) | 参照画像準備支援装置 | |
JP3167365B2 (ja) | 画像表示システム | |
JP6966403B2 (ja) | 診断支援装置 | |
JP4617116B2 (ja) | 即時医療映像自動的サーチ対照方法及びそのシステム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
WD01 | Invention patent application deemed withdrawn after publication | ||
WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20180313 |