CN113539436A - 医用图像显示装置、医用图像输出装置、医用图像用介质以及医用图像显示装置控制方法 - Google Patents
医用图像显示装置、医用图像输出装置、医用图像用介质以及医用图像显示装置控制方法 Download PDFInfo
- Publication number
- CN113539436A CN113539436A CN202110419630.2A CN202110419630A CN113539436A CN 113539436 A CN113539436 A CN 113539436A CN 202110419630 A CN202110419630 A CN 202110419630A CN 113539436 A CN113539436 A CN 113539436A
- Authority
- CN
- China
- Prior art keywords
- medical image
- information
- layout
- display
- captured
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims description 16
- 238000012634 optical imaging Methods 0.000 claims abstract description 17
- 238000003745 diagnosis Methods 0.000 abstract description 7
- 230000006870 function Effects 0.000 description 59
- 238000012545 processing Methods 0.000 description 45
- 238000010586 diagram Methods 0.000 description 22
- 238000004891 communication Methods 0.000 description 17
- 238000012986 modification Methods 0.000 description 8
- 230000004048 modification Effects 0.000 description 8
- 230000005855 radiation Effects 0.000 description 7
- 238000005516 engineering process Methods 0.000 description 4
- 238000003384 imaging method Methods 0.000 description 4
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 238000007639 printing Methods 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 230000003190 augmentative effect Effects 0.000 description 1
- 238000002591 computed tomography Methods 0.000 description 1
- 239000002872 contrast media Substances 0.000 description 1
- 238000002059 diagnostic imaging Methods 0.000 description 1
- 239000003814 drug Substances 0.000 description 1
- 238000007689 inspection Methods 0.000 description 1
- 238000002595 magnetic resonance imaging Methods 0.000 description 1
- 239000003550 marker Substances 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000002603 single-photon emission computed tomography Methods 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 238000003325 tomography Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H30/00—ICT specially adapted for the handling or processing of medical images
- G16H30/20—ICT specially adapted for the handling or processing of medical images for handling medical images, e.g. DICOM, HL7 or PACS
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/44—Constructional features of apparatus for radiation diagnosis
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
- G06K17/00—Methods or arrangements for effecting co-operative working between equipments covered by two or more of main groups G06K1/00 - G06K15/00, e.g. automatic card files incorporating conveying and reading operations
- G06K17/0022—Methods or arrangements for effecting co-operative working between equipments covered by two or more of main groups G06K1/00 - G06K15/00, e.g. automatic card files incorporating conveying and reading operations arrangements or provisions for transferring data to distant stations, e.g. from a sensing device
- G06K17/0025—Methods or arrangements for effecting co-operative working between equipments covered by two or more of main groups G06K1/00 - G06K15/00, e.g. automatic card files incorporating conveying and reading operations arrangements or provisions for transferring data to distant stations, e.g. from a sensing device the arrangement consisting of a wireless interrogation device in combination with a device for optically marking the record carrier
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H30/00—ICT specially adapted for the handling or processing of medical images
- G16H30/40—ICT specially adapted for the handling or processing of medical images for processing medical images, e.g. editing
Landscapes
- Health & Medical Sciences (AREA)
- Engineering & Computer Science (AREA)
- Medical Informatics (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Radiology & Medical Imaging (AREA)
- General Health & Medical Sciences (AREA)
- Public Health (AREA)
- Life Sciences & Earth Sciences (AREA)
- Epidemiology (AREA)
- Primary Health Care (AREA)
- Physics & Mathematics (AREA)
- Pathology (AREA)
- Veterinary Medicine (AREA)
- Optics & Photonics (AREA)
- Biophysics (AREA)
- Biomedical Technology (AREA)
- Heart & Thoracic Surgery (AREA)
- Molecular Biology (AREA)
- Surgery (AREA)
- Animal Behavior & Ethology (AREA)
- High Energy & Nuclear Physics (AREA)
- Computer Networks & Wireless Communication (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Apparatus For Radiation Diagnosis (AREA)
- Medical Treatment And Welfare Office Work (AREA)
- Measuring And Recording Apparatus For Diagnosis (AREA)
Abstract
在使用了被拍片的医用图像的图像诊断中,与以往相比能够提高图像以及附带信息的视觉辨认性。本实施方式的医用图像显示装置具备光学摄像部和显示控制部。光学摄像部对由医用图像诊断装置摄像到的医用图像和包含布局信息在内的代码化信息进行摄像,该布局信息是与该医用图像的附带信息的显示布局有关的信息。显示控制部基于摄像到的代码化信息中包含的布局信息,显示由光学摄像部摄像到的医用图像和附带信息。
Description
本申请基于并主张2020年4月20日申请的日本国专利申请 2020-074598的优先权的利益,该日本国专利申请的全部内容被引用于本申请。
技术领域
本发明的实施方式涉及医用图像显示装置、医用图像输出装置、医用图像用介质以及医用图像显示装置控制方法。
背景技术
例如,在X射线诊断装置中,有在向胶片等印刷(转印:也称为拍片(filming))时,与图像一起同时印刷意见(comment)、注释 (annotation)、拍摄条件等附带信息的技术。这样的附带信息一般在被印刷的胶片中以与诊断部位等不重叠的方式配置于该图像的角部。
但是,在一张胶片内配置多个图像的情况下或较多地配置附带信息的情况下,有时无法充分确保附带信息的印刷区域。在该情况下,若过于缩小字符则难以阅读,另一方面,若减小图像尺寸,则图像的视觉辨认性降低。在X射线图像检查中,例如也有对纵5张、横5 张的合计25张图像同时拍片的情况。在这样同时对多张图像进行拍片的情况下,使图像及附带信息的视觉辨认性并存是特别困难的。
发明内容
实施方式的医用图像显示装置具备:光学摄像部,对由医用图像诊断装置摄像到的医用图像和包含布局信息在内的代码化信息进行摄像,该布局信息是与该医用图像的附带信息的显示布局有关的信息;以及显示控制部,基于摄像到的所述代码化信息中包含的所述布局信息,显示由所述光学摄像部摄像到的所述医用图像和所述附带信息。
实施方式的医用图像输出装置,具备:代码化信息生成部,生成包含布局信息在内的代码化信息,该布局信息是与附带信息的显示布局有关的信息,该附带信息与由医用图像诊断装置摄像到的医用图像有关;以及输出部,将所述医用图像和所述代码化信息印刷或转印到介质并进行输出。
实施方式的医用图像用介质,印刷或转印有由医用图像诊断装置摄像到的医用图像和包含布局信息在内的代码化信息,该布局信息是与附带信息的显示布局有关的信息,该附带信息与所述医用图像有关。
实施方式的医用图像显示装置控制方法,具备如下步骤:取得包含布局信息在内的代码化信息,该布局信息是与由医用图像诊断装置摄像到的医用图像的附带信息的显示布局有关的信息;以及基于所取得的所述代码化信息中包含的所述布局信息,显示由光学摄像部摄像到的所述医用图像和所述附带信息。
附图说明
图1是表示具有实施方式的医用图像输出装置以及医用图像显示装置的医用图像显示系统S的图。
图2是表示实施方式的医用图像显示装置的结构的框图。
图3是表示印刷有带代码化信息的图像的医用图像用介质的一例的图。
图4是表示印刷有多个带代码化信息的图像的医用图像用介质的一例的图。
图5是表示实施方式的医用图像显示装置的结构的框图。
图6是表示在胶片观察器(Schaukasten)上设置的医用图像用介质和在由医用图像显示装置摄像到的医用图像用介质内的医用图像上叠加显示的附带信息的图。
图7是用于说明在使在医用图像显示装置中显示的图像的一部分旋转的情况下的、作为字符信息的附带信息的显示例的图。
图8是用于说明将在医用图像显示装置中显示的图像的一部分放大的情况下的、作为字符信息的附带信息的显示例的图。
图9是用于说明在使在医用图像显示装置中显示的图像的一部分旋转的情况下的、作为ROI的附带信息的显示例的图。
图10是用于说明将在医用图像显示装置中显示的图像的一部分放大的情况下的、作为ROI的附带信息的显示例的图。
图11A是表示本实施方式中的带代码化信息的图像输出处理的流程的流程图。
图11B是表示本实施方式中的附带信息叠加显示处理的流程的流程图。
图12A是用于说明作为眼镜的医用图像显示装置的图。
图12B是用于说明作为眼镜的医用图像显示装置的图。
具体实施方式
实施方式的医用图像显示装置具备:光学摄像部,对由医用图像诊断装置摄像到的医用图像和包含布局信息在内的代码化信息进行摄像,该布局信息是与该医用图像的附带信息的显示布局有关的信息;以及显示控制部,基于摄像到的所述代码化信息中包含的所述布局信息,显示由所述光学摄像部摄像到的所述医用图像和所述附带信息。
以下,参照附图对实施方式的医用图像显示装置、医用图像输出装置以及医用图像用介质进行说明。
首先,对实施方式的医用图像显示装置以及医用图像输出装置被利用的环境进行说明。图1是示出具有实施方式的医用图像输出装置 1以及医用图像显示装置5的医用图像显示系统S的图。如图1所示,医用图像显示系统S具有内置医用图像输出装置1的医用图像诊断装置2、智能手机、平板型计算机等医用图像显示装置5。另外,医用图像诊断装置2能够经由网络与放射线部门服务器装置3、医用图像管理服务器装置4进行通信。
医用图像输出装置1是将由医用图像诊断装置2摄像到的医用图像、从医用图像管理服务器装置4取得的医用图像印刷到胶片、纸等医用图像用介质上的装置。医用图像输出装置1既可以如图1所示那样内置于医用图像诊断装置2,也可以是作为单体的医用图像输出装置1与医用图像诊断装置2以能够通过有线或无线的方式通信地连接。另外,在本实施方式中,为了具体说明而设为:将医用图像诊断装置2作为X射线诊断装置(以下,称为“X射线诊断装置2”),医用图像输出装置1内置于X射线诊断装置2。关于医用图像输出装置 1所具有的具体的结构、功能,在后面详细说明。
医用图像显示装置5是使附带信息与从医用图像输出装置1输出的医用图像叠加显示的显示装置。医用图像显示装置5典型的是智能手机、平板型计算机等。另外,在本实施方式中,为了具体地进行说明,设为医用图像显示装置5为智能手机。另外,关于医用图像显示装置5所具有的具体结构、功能,在后面详细说明。
放射线部门服务器装置3是执行与对医院内的放射线部门中的信息进行管理的放射线部门信息系统(Radiology Information Systems:RIS)中的信息的管理相关的处理的计算机装置。放射线部门服务器装置3作为动作的一例,接受检查指令,并从检查指令取得与X射线诊断装置2有关的信息(例如检查种类)等。放射线部门服务器装置3向由检查指令确定的X射线诊断装置2发送该检查指令。另外,在向X射线诊断装置2发送检查指令时,放射线部门服务器装置3也可以将患者ID、检查日期等信息附加到作为DICOM (DigitalImaging and Communications in Medicine)标签的元(meta) 信息中。
医用图像管理服务器装置4是执行与医用图像管理系统(Picture Archiving andCommunication Systems:PACS)中的信息的管理相关的处理的计算机装置。PACS是对X射线图像、X射线CT图像、MR 图像等医用图像以及也被称为像诊断报告的阅片报告进行管理的信息系统。医用图像管理服务器装置4若从X射线诊断装置2接收医用图像及检查指令,则将医用图像与检查指令建立关联而进行存储。在医用图像中作为DICOM的标签而附带有元信息。
图2是表示实施方式的医用图像输出装置1的结构的框图。如图 2所示,医用图像输出装置1具备第一存储电路10、第一处理电路 11、第一输入电路12、通信I/F电路13、第一显示电路14、印刷电路15。
第一存储电路10由RAM(Random Access Memory)、闪存器 (flash memory)等半导体存储器元件、硬盘、光盘等构成。第一存储电路10也可以由USB(Universal Serial Bus:通用串行总线)存储器以及DVD(Digital Video Disk:数字视频光盘)等可移动型介质构成。
第一存储电路10存储在第一处理电路11中使用的OS(Operating System)用程序、各种处理程序(也包含应用程序等)、程序的执行所需的数据、体数据以及医用图像。
第一处理电路11是通过从第一存储电路10读出并执行程序来实现与各程序对应的功能的处理器。第一处理电路11例如读出在第一存储电路10中存储的各种控制程序并实现图像数据取得功能110、代码化信息生成功能111、带代码化信息的图像生成功能112,并且对第一存储电路10、第一输入电路12、通信I/F电路13、第一显示电路14中的处理动作进行总括控制。换言之,读出了各程序的状态的第一处理电路11具有在图2的第一处理电路11内所示的各功能。
图像数据取得功能110取得由X射线诊断装置2摄像到的医用图像的图像数据。另外,图像数据取得功能110经由网络从医用图像管理服务器装置4取得医用图像的图像数据。
代码化信息生成功能111基于由图像数据取得功能110所取得的图像数据所附带的附带信息,生成布局信息。另外,代码化信息生成功能111使用该图像数据所附带的附带信息和基于该附带信息所生成的布局信息,生成与该图像数据对应的代码化信息。
在此,附带信息是指患者信息(患者姓名、患者ID、性别等)、摄像条件(管电流值、管电压值、造影剂的有无等)、检查信息、在对应的图像中设定的关注区域(ROI)和/或标记、在图像上附加的意见(或注释)、使用该图像所计测出的计测值、对该图像所附的观察 (日语:所見)等。典型地,附带信息附带于作为DICOM的标签信息而对应的图像。但是,并不限定于DICOM的标签信息,只要是与图像建立对应地管理的信息,则用于附带的方式可以是任意的方式。
另外,布局信息是与以对应的医用图像为基准的附带信息的显示布局有关的信息。更具体而言,布局信息是指,在显示医用图像的情况下,对于针对以该医用图像为基准的位置关系以及大小关系而在哪个位置以哪个尺寸配置并显示所对应的附带信息进行规定的布局有关的信息。
此外,代码化信息是指,通过一维条形码、二维条形码(例如 QR码(注册商标)、数据矩阵(注册商标))等对附带信息以及布局信息进行代码化(编码)而得到的信息。另外,在本实施方式中,为了使说明具体地进行而设为,代码化信息通过二维条形码而生成。但是,并不限定于该例子,也可以通过其他的代码化方法对附带信息以及布局信息进行代码化,生成代码化信息。
带代码化信息的图像生成功能112生成带代码化信息的图像。在此,带代码化信息的图像是指,由代码化信息生成功能111所生成的代码化信息被附加于所对应的医用图像而得到的图像。带代码化信息的图像生成功能112使印刷电路15印刷带代码化信息的图像。
另外,在图2中,说明了由作为单一的处理器的第一处理电路 11实现图像数据取得功能110、代码化信息生成功能111、带代码化信息的图像生成功能112的情况,但也可以设为将多个独立的处理器组合而构成处理电路,各处理器通过执行程序来实现功能。另外,在图2中,说明了单一的第一存储电路10存储与各处理功能对应的程序的情况,但也可以采用如下构成:分散配置多个第一存储电路10,第一处理电路11从独立的第一存储电路10读出对应的程序。
图3是表示印刷有带代码化信息的图像60的医用图像用介质6 的一例的图。如果医用图像用介质6是胶片,则设置在胶片观察器上,用于图像诊断。
如图3所示,带代码化信息的图像60包括医用图像60a和对与该医用图像60a有关的附带信息以及布局信息进行了代码化而得到的代码化信息60b。通过使用了该医用图像用介质6的医用图像显示装置5的附带信息叠加显示功能(后述),能够经由医用图像显示装置5的监视器在医用图像60a上叠加显示附带信息。
另外,在图3中,示出了在医用图像60a的左下配置有代码化信息60b的带代码化信息的图像60的例子。但是,并不限定于该例子,只要规定了与医用图像60a的相对位置关系,则代码化信息60b也可以配置于医用图像用介质6上的任意位置。
图4是表示印刷有多个带代码化信息的图像60~63的医用图像用介质6的一例的图。在图像诊断中,存在如图4所示那样、多个(在图4中例示4个)医用图像60a~63a同时被印刷在一个医用图像用介质6上的情况。在该情况下,分别印刷与医用图像60a~63a以确定的位置关系对应的代码化信息60b~63b。
返回到图2,第一输入电路12是将来自能够由操作者进行操作的指示器(鼠标等)、键盘等输入设备的信号输入的电路,在此,设为输入设备自身也包含在第一输入电路12中。若操作者操作输入设备,则第一输入电路12生成与该操作对应的输入信号并输出至第一处理电路11。另外,第一输入电路12也可以具备输入设备与第一显示电路14构成为一体的触摸面板。
另外,第一输入电路12不限于具备鼠标、键盘等物理的操作部件的电路。例如,从与装置分体设置的外部的输入设备接收与输入操作对应的电信号,并将该电信号向控制电路输出的电信号的处理电路也包含在第一输入电路12的例子中。
通信I/F(interface)电路13按照规定的通信标准,进行与外部装置的通信动作。在医用图像输出装置1设置于网络上的情况下,通信I/F电路13与网络上的外部装置进行信息的发送接收。例如,通信 I/F电路13从X射线诊断装置2或医用图像管理服务器装置4接收通过摄像而得到的数据。
第一显示电路14是显示图像的显示器,由LCD(Liquid Crystal Display:液晶显示器)等构成。第一显示电路14根据来自第一处理电路11的指示,在LCD上显示各种操作画面、图像数据等各种显示信息。
印刷电路15基于来自带代码化信息的图像生成功能112的控制信号以及图像数据,将带代码化信息的图像印刷(转印)于胶片、纸等医用图像用介质。
(医用图像显示装置)
图5是示出实施方式的医用图像显示装置5的结构的框图。如图 5所示,医用图像显示装置5具备对医用图像显示装置5进行综合控制的处理器即第二处理电路50、第二显示电路51、第二存储电路52、通信电路53、第二输入电路54、相机55、麦克风56、扬声器57。
第二显示电路51基于从第二处理电路50接收到的信号进行显示。第二显示电路51例如是液晶显示器、等离子显示器或有机EL 显示器等。
第二存储电路52由RAM、闪存器等半导体存储器元件、硬盘、 USB存储器等构成。第二存储电路52存储了在第二处理电路50中使用的各种处理程序(也包括OS用程序、应用程序等)、执行程序所需的数据。
通信电路53能够按照规定的方式在通信运营商的通信网中进行通信。另外,通信电路53例如能够通过WiFi(注册商标)、Bluetooth (注册商标)进行近距离无线通信。
第二输入电路54能够接受来自用户的输入,并向第二处理电路 50发送基于该输入的信号。第二输入电路54包括作为操作部的触摸面板540和电源按钮541。用户能够从第二输入电路54进行医用图像显示装置5的操作所需的输入。
相机55是用于对由医用图像诊断装置摄像到的医用图像进行摄像,并读入一维条形码、二维条形码等的代码化信息的读入装置,是以数码相机等为代表的光学摄像装置。此外,相机55是光学摄像部的一例。
第二处理电路50是综合控制医用图像显示装置5的处理器。第二处理电路50具有CPU、SRAM、DRAM等存储电路(存储元件)。另外,第二处理电路50通过从第二存储电路52读出并执行程序来实现与各程序对应的功能。
例如,第二处理电路50读出存储在第二存储电路52中的各种控制程序并实现解码功能500、显示控制功能502,并且对第二显示电路51、第二存储电路52、通信电路53、第二输入电路54、相机55、麦克风56、扬声器57中的处理动作进行总括控制。换言之,读出了各程序的状态的第二处理电路50具有图5的第二处理电路50内所示的各功能。
解码功能500对由相机55摄像到的(读入的)代码化信息60b 进行译码(解码),取得附带信息以及布局信息。另外,解码功能500 是信息取得部的一例。
显示控制功能502基于由相机55摄像到的代码化信息中包含的布局信息,在由相机55摄像到的医用图像上显示附带信息。即,显示控制功能502例如通过AR(AugmentedReality)技术,在由相机 55摄像到的图像上,在布局信息所规定的位置叠加显示(合成显示) 附带信息。另外,显示控制功能502例如通过AR技术等,使由相机 55摄像到的图像和附带信息并列显示,该附带信息被叠加显示于布局信息所规定的位置。另外,显示控制功能502在由相机55依次摄像医用图像的情况下,使依次摄像的各医用图像和附带信息进行显示,该附带信息被叠加显示于布局信息所规定的位置。
并且,显示控制功能502追随从触摸面板540输入的放大操作、缩小操作、旋转操作,控制叠加在由相机55摄像到的图像上的附带信息的位置大小中的至少一方。另外,显示控制功能502是显示控制部的一例。
另外,在图5中,说明了由作为单一的处理器的第二处理电路 50实现解码功能500、显示控制功能502的情况,但也可以设为将多个独立的处理器组合而构成处理电路,各处理器执行程序来实现功能。另外,在图5中,说明了单一的第二存储电路52存储与各处理功能对应的程序的构成,但也可以采用如下构成;分散配置多个第二存储电路52,第二处理电路50从独立的第二存储电路52读出对应的程序。
图6是表示在胶片观察器上设置的医用图像用介质6和叠加显示在由医用图像显示装置5摄像到的医用图像用介质6内的医用图像 61a上的代码化信息61b的图。如图6所示,假设在通过医用图像显示装置5的相机55摄像了例如代码化信息61b之后,同样由医用图像显示装置5的相机55对在胶片观察器上设置的医用图像用介质6 所包含的医用图像61a进行摄像的情况。
在该情况下,通过解码功能500,取得基于代码化信息61b的医用图像61a的附带信息、以及针对该附带信息的医用图像61a的布局信息。如图6所示,通过显示控制功能502,基于布局信息,将所取得的附带信息5a、5b以规定的尺寸叠加显示或并列显示在由相机55 摄像到的医用图像61a上的对应的位置。
该叠加显示例如通过AR技术来实现,因此附带信息5a、5b基于布局信息,与对应的医用图像61a维持确定的位置关系。因此,例如,在将医用图像显示装置5的相机55进行摇镜头(PAN)而医用图像61a出画(frame out)的情况下,与医用图像61a叠加的附带信息也出画。另一方面,在从医用图像61a出画的状态起对医用图像显示装置5的相机55进行摇镜头而使医用图像61a入画(frame in)的情况下,与医用图像61a叠加的附带信息也入画。
另外,例如,假定如下情况,即,在正在显示在所确定的位置叠加有附带信息5a、5b的医用图像61a的状态下,对医用图像显示装置5的相机55进行摇镜头,例如在摄像相邻的代码化信息60b之后,同样由医用图像显示装置5的相机55对在胶片观察器上设置的医用图像60a进行摄像的情况。
在该情况下,通过解码功能500,新取得基于代码化信息60b的医用图像60a的附带信息、以及该附带信息相对于医用图像60a的布局信息。所取得的附带信息通过显示控制功能502,基于布局信息,以规定的尺寸叠加显示于由相机55摄像到的医用图像60a上的对应的位置。
另外,从代码化信息取得的附带信息按照从相同的代码化信息取得的布局信息,在与对应的医用图像维持确定的位置关系的同时,叠加显示在该对应的医用图像上。因此,附带信息不会叠加显示在不对应的医用图像上。
图7是用于说明在使在医用图像显示装置5中显示的图像的一部分旋转的情况下的、作为字符信息的附带信息的显示例的图。图8是用于说明将在医用图像显示装置5中显示的图像的一部分放大的情况下的、作为字符信息的附带信息的显示例的图。首先,在通过相机 55读入了在胶片观察器上设置的医用图像用介质的代码化信息之后,利用相机55摄像对应的医用图像61a。由此,在医用图像显示装置5 的第二显示电路51中显示在确定的位置上叠加了作为字符信息的附带信息5b的医用图像61a。设为针对该医用图像61a、通过用户对触摸面板540的操作而输入了旋转操作。此时,在第二显示电路51中,如图7所示,在医用图像61a被旋转显示的同时,在与医用图像61a 之间维持确定的位置关系的状态下,显示作为字符信息的附带信息 5b。
另外,设为例如在图7所示的状态下,通过用户对触摸面板540 的操作,输入医用图像61a的放大操作。此时,在第二显示电路51 中,如图8所示,在医用图像61a被放大显示的同时,在与医用图像 61a之间维持确定的位置关系的状态下,显示作为字符信息的附带信息5b。另外,此时,也可以追随放大操作而放大显示附带信息5b。另外,即使在放大了医用图像61a的情况下,也可以在维持与医用图像61a的位置关系的状态下,控制附带信息5b的尺寸,以使得附带信息5b收敛在画面内。
图9是用于说明在使在医用图像显示装置中显示的图像的一部分旋转的情况下的、作为ROI的附带信息的显示例的图。图10是用于说明将在医用图像显示装置中显示的图像的一部分放大的情况下的、作为ROI的附带信息的显示例的图。首先,在通过相机55读入了在胶片观察器上设置的医用图像用介质的代码化信息之后,利用相机55摄像对应的医用图像61a。由此,在医用图像显示装置5的第二显示电路51中,显示叠加有作为ROI的附带信息5c的医用图像61a。设为针对该医用图像61a、通过用户对触摸面板540的操作而输入了旋转操作。此时,在第二显示电路51中,如图9所示,医用图像61a被旋转表示,并且在与医用图像61a之间维持确定的位置关系的状态下,显示作为ROI的附带信息5b。
另外,设为例如在图9所示的状态下,通过用户对触摸面板540 的操作,输入医用图像61a的放大操作。此时,在第二显示电路51 中,如图10所示,在放大显示医用图像61a的同时,在与医用图像 61a之间维持确定的位置关系的状态下,显示作为ROI的附带信息5c。另外,此时,追随放大操作,作为ROI的附带信息5c也被放大显示。另外,即使在放大了医用图像61a的情况下,也可以在维持与医用图像61a的位置关系的状态下,控制附带信息5c的尺寸,以使得附带信息5c收敛在画面内。
(带代码化信息的图像输出处理)
接着,对由医用图像输出装置1执行的带代码化信息的图像输出处理、由医用图像显示装置5执行的附带信息叠加显示处理进行说明。
图11A是表示本实施方式中的带代码化信息的图像输出处理的流程的流程图。
首先,医用图像输出装置1经由第一输入电路12接受针对特定的医用图像的拍片指示(步骤S1)。医用图像输出装置1的图像数据取得功能110取得成为拍片指示的对象的图像数据、以及该图像数据附带的附带信息(步骤S2)。
医用图像输出装置1的代码化信息生成功能111基于由图像数据取得功能110所取得的图像数据和附带信息,生成布局信息。另外,医用图像输出装置1的代码化信息生成功能111对附带信息和基于该附带信息生成的布局信息进行代码化,生成与该图像数据对应的代码化信息(步骤S3)。
医用图像输出装置1的带代码化信息的图像生成功能112将由代码化信息生成功能111生成的代码化信息附加到作为印刷对象的医用图像中,生成带代码化信息的图像(步骤S4)。另外,带代码化信息的图像生成功能112使印刷电路15印刷带代码化信息的图像。印刷电路15输出印刷有带代码化信息的图像的医用图像用介质(步骤 S5)。
(附带信息叠加显示处理)
图11B是表示本实施方式中的附带信息叠加显示处理的流程的流程图。以下,假定在步骤S5中输出的医用图像用介质被设置在胶片观察器上、医师等用户对其进行观察的情况。
通过医用图像显示装置5的相机55,对设置在胶片观察器上的带代码化信息的图像内的代码化信息进行摄像(读取)(步骤S11) 后,医用图像显示装置5的解码功能500对由相机55摄像到的代码化信息进行译码,取得附带信息以及布局信息(步骤S12)。
医用图像显示装置5的显示控制功能502通过AR技术,在由相机55摄像并显示于第二显示电路51的图像上,在布局信息所规定的位置上叠加附带信息(步骤S13)。
以上所述的实施方式的医用图像显示装置5具备作为光学摄像部的相机55和作为显示控制部的显示控制功能502。相机55对由X 射线诊断装置2摄像到的医用图像和包含布局信息在内的代码化信息进行摄像,该布局信息是与该医用图像的附带信息的显示布局有关的信息。显示控制功能502基于相机55所摄像的代码化信息中包含的布局信息,显示由相机55摄像到的医用图像和附带信息。
即,用户仅通过例如智能手机、平板型计算机等设备读取与医用图像一起印刷的代码化信息并摄像医用图像,就能够将该医用图像的附带信息仅显示于例如智能手机等画面。用户能够在胶片观察器等中观察没有附带信息的医用图像,并且能够在智能手机等的画面中确认附带信息。印刷在胶片上的医用图像由于没有叠加附带信息,因此不会成为观察的障碍。另外,与医用图像一起显示于智能手机等的附带信息在不缩小字符等的情况下而被显示于特定的位置。
因此,用户能够在不会由于附带信息而医用图像变得难以观察或者字符被缩小而附带信息变得难以读取的情况下,观察医用图像并掌握附带信息。特别是,用户能够利用印刷有医用图像的胶片等进行观察,关于附带信息,能够通过智能手机等来观察。因此,即使在观察印刷有多个图像的胶片等的情况下、附带信息的信息量增加的情况下,也能够兼顾医用图像的良好的视觉辨认性和附带信息的易读性以及信息量的确保。其结果是,在使用了被拍片的医用图像的图像诊断中,与以往相比能够提高图像以及附带信息的视觉辨认性。
另外,附带信息按照布局信息、并以对应的医用图像为基准而被显示于特定的位置。因此,医用图像与附带信息的建立关联也是容易的,也不会在与其他医用图像或其他附带信息之间产生错取。
另外,即使在对智能手机等的医用图像进行放大、缩小、旋转、或对医用图像显示装置5的相机55进行了摇镜头的情况下,也能够追踪并显示包含标记、意见等的附带信息的位置、尺寸。另外,在设定了ROI等的情况下,能够追随该ROI的位置和尺寸进行显示。
(变形例1)
在上述实施方式中,以医用图像诊断装置为X射线诊断装置的情况为例进行了说明。与此相对,即使在医用图像诊断装置是X射线计算机断层摄像装置、磁共振成像装置、PET(Positron Emission Tomography)、SPECT(Single Photon Emission ComputedTomography) 的情况下,也能够应用上述带代码化信息的图像生成/输出处理、附带信息叠加显示处理。
(变形例2)
在上述实施方式中,以内置于X射线诊断装置2中的医用图像输出装置1执行上述带代码化信息的图像生成/输出处理的结构为例进行了说明。与此相对,例如也可以是将执行带代码化信息的图像生成/输出处理的医用图像输出装置1作为单独的装置而设置在网络上或者云上的结构。在这样的结构的情况下,该医用图像输出装置1使用从X射线诊断装置2、医用图像管理服务器装置4或者未图示的医用图像观察装置(查看器)等经由网络取得的医用图像,执行上述带代码化信息的图像生成/输出处理。
(变形例3)
在上述实施方式中,例示了在带代码化信息的图像生成/输出处理中,生成包含医用图像和代码化信息在内的带代码化信息的图像作为一个图像数据,并印刷或转印到一张医用图像用介质的情况。与此相对,在将在X射线诊断装置2中摄像到的医用图像例如显影为于胶片的情况下,通过将对应的代码化信息显影于相同的胶片,也能够生成包含医用图像和代码化信息在内的带代码化信息的图像。
由此,能够取得被显影有包含X射线图像与对应的代码化信息在内的带代码化信息的图像的胶片。用户能够使用这样取得的胶片来实现上述的附带信息显示处理。另外,不限于胶片,例如在将在X 射线诊断装置2中摄像到的医用图像印刷在例如纸上的情况下也是同样的。
(变形例4)
在上述实施方式中,以使用智能手机、平板PC作为观察带代码化信息的图像时的医用图像显示装置的情况为例。与此相对,也可以使用具有附带信息显示功能的专用的眼镜型的医用图像显示装置。
图12A、图12B是用于说明变形例4的眼镜型的医用图像显示装置8的图。用户在佩戴该眼镜型的医用图像显示装置8并将附带信息显示功能开启(ON)而观察配置于胶片观察器的医用图像61a的情况下,如图12A所示,能够根据附带信息显示功能,观察与医用图像61a叠加的附带信息5e、5f。另一方面,用户在将该眼镜型的医用图像显示装置8的附带信息显示功能关闭(OFF)而观察配置于胶片观察器的医用图像61a的情况下,如图12B所示,能够观察没有叠加显示附带信息的医用图像61a。
根据所述眼镜型的医用图像显示装置8,用户能够在免提的状态下观察叠加有附带信息的医用图像或者未叠加附带信息的医用图像。其结果是,用户能够无负担地观察医用图像及其附带信息,在使用了拍片的医用图像的图像诊断中,能够实现便利性更高的医用图像显示装置。
(变形例5)
在上述实施方式中,以在医用图像显示装置5中使用AR技术将附带信息叠加显示在医用图像上的情况为例进行了说明。与此相对,在医用图像显示装置5中,也可以使用MR(Mixed Reality)技术将附带信息叠加显示于医用图像。
(变形例6)
在上述实施方式中,例示了代码化信息包含附带信息的情况。与此相对,代码化信息也可以不包含附带信息,而包含布局信息、向作为观察对象的医用图像的附带信息被保存的场所(例如,对作为观察对象的医用图像的附带信息进行管理的服务器)的链接信息、向按照作为观察对象的医用图像的DICOM标准的附带信息的链接信息。
另外,在所述实施方式中使用的“处理器”这样的用语例如是 CPU(CentralProcessing Unit:中央处理单元)、GPU(Graphics Processing Unit:图形处理单元)、或者面向特定用途的集成电路 (Application Specific Integrated Circuit:ASIC)、可编程逻辑器件(例如,简单可编程逻辑器件(Simple Programmable Logic Device:SPLD)、复合可编程逻辑器件(Complex Programmable Logic Device:CPLD)、以及现场可编程门阵列(Field Programmable Gate Array:FPGA))等电路。处理器通过读出并执行第一存储电路10、第二存储电路52所保存的程序来实现功能。另外,也可以代替在第一存储电路10、第二存储电路52中保存程序,而构成为在处理器的电路内直接编入程序。在该情况下,处理器通过读出并执行组装在电路内的程序来实现功能。
根据以上所述的至少一个实施方式,在使用了被拍片的医用图像的图像诊断中,与以往相比能够提高图像以及附带信息的视觉辨认性。
说明了几个实施方式,但这些实施方式是作为例子提示的,并不意图限定发明的范围。这些实施方式能够以其他各种方式实施,在不脱离发明的主旨的范围内,能够进行各种省略、置换、变更、实施方式彼此的组合。这些实施方式及其变形包含在发明的范围及主旨中,同样包含在权利要求书所记载的发明及其等同的范围内。
Claims (11)
1.一种医用图像显示装置,具备:
光学摄像部,对由医用图像诊断装置摄像到的医用图像和包含布局信息在内的代码化信息进行摄像,该布局信息是与该医用图像的附带信息的显示布局有关的信息;以及
显示控制部,基于摄像到的所述代码化信息中包含的所述布局信息,显示由所述光学摄像部摄像到的所述医用图像和所述附带信息。
2.根据权利要求1所述的医用图像显示装置,其中,
所述显示控制部在所述光学摄像部依次摄像所述医用图像的情况下,基于摄像到的所述代码化信息中包含的所述布局信息,显示依次摄像的所述医用图像和所述附带信息。
3.根据权利要求1或2所述的医用图像显示装置,其中,
还具备操作部,该操作部接受对所述附带信息和所显示的所述医用图像的放大操作、缩小操作、旋转动作中的至少任一个,
所述显示控制部追随所述操作部所接受的放大操作、缩小操作、旋转动作中的至少任一个,对所述医用图像和显示的所述附带信息的位置及大小中的至少一方进行控制。
4.根据权利要求1或2所述的医用图像显示装置,其中,
所述显示控制部通过AR技术来显示由所述光学摄像部摄像到的所述医用图像和所述附带信息。
5.根据权利要求1或2所述的医用图像显示装置,其中,
所述医用图像显示装置是眼镜型。
6.根据权利要求1或2所述的医用图像显示装置,其中,
所述布局信息包含与以所述医用图像为基准的所述附带信息的显示布局有关的信息。
7.根据权利要求1或2所述的医用图像显示装置,其中,
所述代码化信息包含所述医用图像的所述附带信息。
8.根据权利要求1或2所述的医用图像显示装置,其中,
所述显示控制部基于包含摄像到的所述代码化信息的所述布局信息,在由所述光学摄像部摄像到的所述医用图像上叠加显示所述附带信息。
9.一种医用图像输出装置,具备:
代码化信息生成部,生成包含布局信息在内的代码化信息,该布局信息是与附带信息的显示布局有关的信息,该附带信息与由医用图像诊断装置摄像到的医用图像有关;以及
输出部,将所述医用图像和所述代码化信息印刷或转印到介质并进行输出。
10.一种医用图像用介质,印刷或转印有由医用图像诊断装置摄像到的医用图像和包含布局信息在内的代码化信息,该布局信息是与附带信息的显示布局有关的信息,该附带信息与所述医用图像有关。
11.一种医用图像显示装置控制方法,具备如下步骤:
取得包含布局信息在内的代码化信息,该布局信息是与由医用图像诊断装置摄像到的医用图像的附带信息的显示布局有关的信息;以及
基于所取得的所述代码化信息中包含的所述布局信息,显示由光学摄像部摄像到的所述医用图像和所述附带信息。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020-074598 | 2020-04-20 | ||
JP2020074598A JP7486338B2 (ja) | 2020-04-20 | 2020-04-20 | 医用画像表示装置、医用画像出力装置、医用画像用媒体及び医用画像表示プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
CN113539436A true CN113539436A (zh) | 2021-10-22 |
CN113539436B CN113539436B (zh) | 2024-07-19 |
Family
ID=78094584
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110419630.2A Active CN113539436B (zh) | 2020-04-20 | 2021-04-19 | 医用图像显示装置、医用图像输出装置、医用图像用介质以及医用图像显示装置控制方法 |
Country Status (2)
Country | Link |
---|---|
JP (1) | JP7486338B2 (zh) |
CN (1) | CN113539436B (zh) |
Citations (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20010041991A1 (en) * | 2000-02-09 | 2001-11-15 | Segal Elliot A. | Method and system for managing patient medical records |
JP2006304841A (ja) * | 2005-04-26 | 2006-11-09 | Konica Minolta Medical & Graphic Inc | 医用画像情報管理システム |
JP2012242938A (ja) * | 2011-05-17 | 2012-12-10 | Toshiba Corp | 読影レポート装置、読影レポートプログラム及び読影レポートシステム |
CN103530594A (zh) * | 2013-11-05 | 2014-01-22 | 深圳市幻实科技有限公司 | 一种提供增强现实的方法、系统及终端 |
CN105190633A (zh) * | 2013-05-06 | 2015-12-23 | 皇家飞利浦有限公司 | 图像可视化 |
CN105740743A (zh) * | 2014-12-30 | 2016-07-06 | 手持产品公司 | 增强现实视觉条形码扫描系统和方法 |
CN107564106A (zh) * | 2017-07-07 | 2018-01-09 | 湖南简成信息技术有限公司 | 基于增强现实的运动活动控制方法、控制装置及设备 |
CN108038916A (zh) * | 2017-12-27 | 2018-05-15 | 上海徕尼智能科技有限公司 | 一种增强现实的显示方法 |
CN109106448A (zh) * | 2018-08-30 | 2019-01-01 | 上海霖晏医疗科技有限公司 | 一种手术导航方法和装置 |
CN109464194A (zh) * | 2018-12-29 | 2019-03-15 | 上海联影医疗科技有限公司 | 医学图像的显示方法、装置、医学设备及计算机存储介质 |
CN110891163A (zh) * | 2019-12-29 | 2020-03-17 | 歌尔科技有限公司 | 一种ar眼镜系统、一种图像显示方法和存储介质 |
US20200100744A1 (en) * | 2017-03-27 | 2020-04-02 | Sony Olympus Medical Solutions Inc. | Medical display control device, medical observation device, display control method, and medical observation system |
CN114222374A (zh) * | 2018-04-04 | 2022-03-22 | 华为技术有限公司 | 一种通信方法及装置 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2019128758A (ja) | 2018-01-24 | 2019-08-01 | セイコーエプソン株式会社 | 頭部装着型表示装置、及び頭部装着型表示装置の制御方法 |
-
2020
- 2020-04-20 JP JP2020074598A patent/JP7486338B2/ja active Active
-
2021
- 2021-04-19 CN CN202110419630.2A patent/CN113539436B/zh active Active
Patent Citations (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20010041991A1 (en) * | 2000-02-09 | 2001-11-15 | Segal Elliot A. | Method and system for managing patient medical records |
JP2006304841A (ja) * | 2005-04-26 | 2006-11-09 | Konica Minolta Medical & Graphic Inc | 医用画像情報管理システム |
JP2012242938A (ja) * | 2011-05-17 | 2012-12-10 | Toshiba Corp | 読影レポート装置、読影レポートプログラム及び読影レポートシステム |
CN105190633A (zh) * | 2013-05-06 | 2015-12-23 | 皇家飞利浦有限公司 | 图像可视化 |
CN103530594A (zh) * | 2013-11-05 | 2014-01-22 | 深圳市幻实科技有限公司 | 一种提供增强现实的方法、系统及终端 |
CN105740743A (zh) * | 2014-12-30 | 2016-07-06 | 手持产品公司 | 增强现实视觉条形码扫描系统和方法 |
US20200100744A1 (en) * | 2017-03-27 | 2020-04-02 | Sony Olympus Medical Solutions Inc. | Medical display control device, medical observation device, display control method, and medical observation system |
CN107564106A (zh) * | 2017-07-07 | 2018-01-09 | 湖南简成信息技术有限公司 | 基于增强现实的运动活动控制方法、控制装置及设备 |
CN108038916A (zh) * | 2017-12-27 | 2018-05-15 | 上海徕尼智能科技有限公司 | 一种增强现实的显示方法 |
CN114222374A (zh) * | 2018-04-04 | 2022-03-22 | 华为技术有限公司 | 一种通信方法及装置 |
CN109106448A (zh) * | 2018-08-30 | 2019-01-01 | 上海霖晏医疗科技有限公司 | 一种手术导航方法和装置 |
CN109464194A (zh) * | 2018-12-29 | 2019-03-15 | 上海联影医疗科技有限公司 | 医学图像的显示方法、装置、医学设备及计算机存储介质 |
CN110891163A (zh) * | 2019-12-29 | 2020-03-17 | 歌尔科技有限公司 | 一种ar眼镜系统、一种图像显示方法和存储介质 |
Also Published As
Publication number | Publication date |
---|---|
JP2021174047A (ja) | 2021-11-01 |
CN113539436B (zh) | 2024-07-19 |
JP7486338B2 (ja) | 2024-05-17 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20100171682A1 (en) | Medical image display apparatus and computer readable medium | |
JP4832997B2 (ja) | 画像診断支援装置 | |
JP2007307290A (ja) | 医用画像読影システム | |
JP6489709B2 (ja) | 画像視覚化 | |
JP2020102214A (ja) | 医用情報匿名化システム、及び匿名化方法設定装置 | |
JP2007087285A (ja) | 読影レポート作成装置及び依頼者端末 | |
US20100114608A1 (en) | Medical image display system | |
JP2007094515A (ja) | 読影レポート作成装置 | |
JP2005287574A (ja) | 医用情報表示方法および装置並びにプログラム | |
JP5925517B2 (ja) | 検査レポート表示制御装置 | |
CN113539436B (zh) | 医用图像显示装置、医用图像输出装置、医用图像用介质以及医用图像显示装置控制方法 | |
CN105246408B (zh) | 用于采用直接射线照相板进行射线照相的改进方法 | |
JP2006309550A (ja) | 二重読影支援システム | |
JP7182363B2 (ja) | 医用画像表示装置及び医用画像表示方法 | |
JP2014160368A (ja) | 医用情報表示システム、医用情報表示プログラム及び画像診断装置 | |
JP2012183203A (ja) | 医用情報処理装置、医用情報処理方法及びプログラム | |
JP2010029284A (ja) | プログラム、可搬型記憶媒体及び情報処理装置 | |
JP2010015494A (ja) | プログラム、可搬型記憶媒体及び情報処理装置 | |
JP2009294985A (ja) | プログラム、可搬型記憶媒体及び情報処理装置 | |
JP2006340904A (ja) | 医用画像出力システム及び医用画像出力プログラム | |
JP2024072310A (ja) | プログラム、表示装置、表示システム及び表示方法 | |
JP2010040019A (ja) | Dicomシステム、dicomワークステーション及びプログラム | |
Mirza | DICOM: WHAT RADIOLOGISTS NEED TO KNOW? | |
JP2021033890A (ja) | 情報処理装置、医療情報管理システム及び情報処理方法 | |
JP2006149944A (ja) | 医用画像記録システム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |