CN105142493A - 图像管理装置 - Google Patents
图像管理装置 Download PDFInfo
- Publication number
- CN105142493A CN105142493A CN201480022737.1A CN201480022737A CN105142493A CN 105142493 A CN105142493 A CN 105142493A CN 201480022737 A CN201480022737 A CN 201480022737A CN 105142493 A CN105142493 A CN 105142493A
- Authority
- CN
- China
- Prior art keywords
- image
- mentioned
- images
- pictures
- group
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
- A61B1/00009—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
- A61B1/000095—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope for image enhancement
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/0002—Operational features of endoscopes provided with data storages
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
- A61B1/041—Capsule endoscopes for imaging
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
- G06F16/54—Browsing; Visualisation therefor
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
- G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
- G06F16/583—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
- G06F16/5838—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using colour
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H15/00—ICT specially adapted for medical reports, e.g. generation or transmission thereof
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H30/00—ICT specially adapted for the handling or processing of medical images
- G16H30/20—ICT specially adapted for the handling or processing of medical images for handling medical images, e.g. DICOM, HL7 or PACS
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H30/00—ICT specially adapted for the handling or processing of medical images
- G16H30/40—ICT specially adapted for the handling or processing of medical images for processing medical images, e.g. editing
Landscapes
- Health & Medical Sciences (AREA)
- Engineering & Computer Science (AREA)
- Life Sciences & Earth Sciences (AREA)
- Surgery (AREA)
- Medical Informatics (AREA)
- General Health & Medical Sciences (AREA)
- Public Health (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Radiology & Medical Imaging (AREA)
- Physics & Mathematics (AREA)
- Animal Behavior & Ethology (AREA)
- Heart & Thoracic Surgery (AREA)
- Biomedical Technology (AREA)
- Molecular Biology (AREA)
- Pathology (AREA)
- Optics & Photonics (AREA)
- Biophysics (AREA)
- Veterinary Medicine (AREA)
- Primary Health Care (AREA)
- Epidemiology (AREA)
- Theoretical Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Signal Processing (AREA)
- Library & Information Science (AREA)
- Endoscopes (AREA)
- Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
Abstract
提供一种能够无遗漏地提取对诊断有用的图像并且以比以往的存储容量少的存储容量来生成备份的图像管理装置。图像管理装置(1)具备:图像存储部(131),其按每个检查来存储一系列图像的图像数据;显示部(15),其显示一系列图像;输入部(11),其输入对于所显示的图像的操作信号;操作信息存储部(133),其将表示对于正显示的图像的操作的信息与作为操作对象的图像相关联地存储;图像提取部(162),其基于与表示该操作的信息相关联的图像来提取图像群;以及备份图像存储部(17),其存储所提取出的图像群的图像数据,其中,操作信息存储部(133)将一个检查中包含的由多个用户进行的操作的信息,按每个用户,与成为该操作的对象的图像相关联地存储,图像提取部(162)基于一次检查中包含的与由多个用户进行的操作的信息相关联的图像来提取图像群。
Description
技术领域
本发明涉及一种对通过使用胶囊型内窥镜等医疗用图像获取装置的检查而获取到的图像进行管理的图像管理装置。
背景技术
近年来,在内窥镜的领域,已知一种使用被导入患者等被检体内并在该被检体内进行拍摄的胶囊型内窥镜的检查。胶囊型内窥镜是在形成为能够被导入被检体的消化道内的大小的胶囊形状的壳体内内置有摄像功能、无线通信功能等的装置,通过在被检体内进行拍摄来生成图像数据,并将该图像数据依次以无线方式发送到被检体外。从胶囊型内窥镜以无线方式发送来的图像数据被暂时存储在设置于被检体外的接收装置中,并从接收装置被传送到工作站等图像管理装置。在图像管理装置中,通过对所获取到的图像数据实施各种图像处理来生成拍到了被检体内的脏器等的一系列图像。
使用这种胶囊型内窥镜的检查每次进行大约8个小时,在此期间获取到的图像多达大约6万个。因此,观察全部这些图像非常花费时间。另外,在这些图像中还包含多个在被检体外进行拍摄得到的图像、胶囊型内窥镜在被检体内滞留而反复拍摄同一部位得到的图像等进行诊断时不需要的图像。因此,以往提出了一种从一系列图像中提取对诊断有用的图像并呈现给用户的技术。例如,在专利文献1中公开了一种根据由用户的操作指定的图像及其前后的图像群来生成运动图像的技术。
专利文献1:日本特开2007-75163号公报
发明内容
发明要解决的问题
另外,针对通过检查获取到的图像数据,为了防备图像管理装置的故障、存储介质的破损、丢失、数据本身的破损等情况而生成了备份。以往,作为备份,生成并保存与一系列图像对应的所有图像数据的复制品。或者,有时也将所有图像数据以压缩的方式进行保存。然而,如上所述,通过一次检查获取的图像的个数庞大,因此,当保存所有图像数据的复制品时,需要巨大的存储容量,存储装置的负担非常大。其结果,需要增设、更换存储装置之类的对策,从而发生了成本增加这样的问题。另外,还发生了生成备份所需的时间长这样的问题。
因此,如上述专利文献1所公开那样,还考虑仅将对诊断有用的图像群提取出来并作为备份来保存的技术。然而,在专利文献1中,关于用户在指定时遗漏的图像及其前后的图像,虽然对诊断来说是有用的,但也没有生成备份。
本发明是鉴于上述情况而完成,其目的在于提供如下一种图像管理装置:能够针对通过使用胶囊型内窥镜等医疗用图像获取装置的检查而获取到的一系列图像无遗漏地提取对诊断有用的图像,并且能够以比以往的存储容量少的存储容量来生成备份。
用于解决问题的方案
为了解决上述问题而实现目的,本发明所涉及的图像管理装置是对通过检查获取到的一系列图像进行管理的图像管理装置,其特征在于,具备:第一图像存储部,其按每个检查来存储与上述一系列图像对应的图像数据;显示部,其显示上述一系列图像;输入部,其根据来自外部的操作来输入与对上述显示部中显示的图像进行的操作有关的信号;操作信息存储部,其将表示对上述显示部中显示的图像进行的规定的操作的信息与成为该规定的操作的对象的图像相关联地存储;图像提取部,其基于上述操作信息存储部中存储的与表示上述规定的操作的信息相关联的至少一个图像,来从上述一系列图像中提取至少一个图像群;以及第二图像存储部,其存储与由上述图像提取部提取出的上述至少一个图像群对应的图像数据,其中,上述操作信息存储部将表示由多个用户经由上述输入部对一个检查中包含的上述一系列图像进行的操作的上述规定的操作的信息,按每个用户,与成为该操作的对象的图像相关联地存储,上述图像提取部基于上述一个检查中包含的与表示由上述多个用户进行的上述规定的操作的信息相关联的上述至少一个图像,来提取上述至少一个图像群。
上述图像管理装置的特征在于,上述图像提取部将排列在与表示上述规定的操作的信息相关联的上述至少一个图像的之前和之后的规定数量的图像作为一个图像群提取出来。
上述图像管理装置的特征在于,在表示上述规定的操作的信息与多个图像相关联的情况下,上述图像提取部将针对上述多个图像分别提取出的多个图像群中的、包含重复的图像的两个以上的图像群合并为一个图像群。
上述图像管理装置的特征在于,上述图像提取部从基于与表示上述规定的操作的信息相关联的上述至少一个图像而提取出的至少一个图像群中包含的多个图像中,提取包含在上述多个用户间重复的图像的图像群。
上述图像管理装置的特征在于,还具备图像处理部,该图像处理部对上述一系列图像中包含的各图像进行图像处理,基于该图像处理的结果对具有规定的特性的图像附加标记,上述显示部显示由上述图像处理部附加了标记的至少一个图像,在上述多个用户的全部对由上述图像处理部附加了标记的至少一个图像进行了删除该标记的操作的情况下,上述图像提取部基于由上述图像处理部附加了标记的至少一个图像中的除被进行了删除该标记的操作的图像以外的图像以及与表示由上述多个用户进行的上述规定的操作的信息相关联的至少一个图像,来提取上述至少一个图像群。
上述图像管理装置的特征在于,上述图像提取部还基于由上述图像处理部附加了标记的至少一个图像,来从上述一系列图像中提取至少一个第二图像群,上述第二图像存储部还存储与上述至少一个第二图像群对应的图像数据。
上述图像管理装置的特征在于,上述图像提取部还基于由上述图像处理部附加了标记的至少一个图像,来从上述一系列图像中提取至少一个第二图像群,上述第二图像存储部存储与上述至少一个第二图像群对应的图像数据,将与该第二图像群对应的图像数据以覆盖与上述至少一个图像群对应的图像数据的方式存储。
上述图像管理装置的特征在于,上述图像提取部根据所提取出的上述至少一个图像群来生成运动图像,将所生成的该运动图像存储于上述第二图像存储部。
上述图像管理装置的特征在于,上述一系列图像是通过胶囊型内窥镜获取到的一系列体内图像,该胶囊型内窥镜被导入被检体内,在该被检体内一边移动一边进行拍摄。
上述图像管理装置的特征在于,上述规定的操作是捕获图像的操作。
上述图像管理装置的特征在于,上述规定的操作是对图像附加标签、注释或注解的操作。
上述图像管理装置的特征在于,上述规定的操作是使图像暂时停止地显示的操作、使图像反复显示的操作、使图像降低帧频地显示的操作或使图像逐帧播放地显示的操作。
发明的效果
根据本发明,基于同与由多个用户对一系列图像进行的规定的操作有关的信息相关联的图像来提取图像群,因此能够将对诊断有用的图像无遗漏地提取出来,并且能够以比以往的存储容量少的存储容量来生成备份。
附图说明
图1是表示包括本发明的实施方式1所涉及的图像管理装置的胶囊型内窥镜系统的示意图。
图2是表示本发明的实施方式1所涉及的图像管理装置的结构的框图。
图3是表示在医师等用户观察一系列图像时显示的画面的例子的示意图。
图4是表示图2所示的图像管理装置的动作的流程图。
图5是表示在用户结束了一系列图像的观察时显示的画面的例子的示意图。
图6是表示报告生成画面的例子的示意图。
图7是表示本发明的实施方式1的运动图像的生成处理的流程图。
图8是说明本发明的实施方式1的运动图像的生成处理的示意图。
图9是说明本发明的实施方式1的变形例1的运动图像的生成处理的示意图。
图10是表示本发明的实施方式2的胶囊型内窥镜系统的动作的流程图。
图11是表示本发明的实施方式4所涉及的图像管理装置的动作的流程图。
图12是说明本发明的实施方式4的运动图像的生成处理的示意图。
图13是表示本发明的实施方式5所涉及的图像管理装置的动作的流程图。
图14是说明本发明的实施方式5的运动图像的生成处理的示意图。
图15是表示本发明的实施方式6所涉及的图像管理装置的动作的流程图。
图16是表示本发明的实施方式7所涉及的图像管理装置的动作的流程图。
图17是说明本发明的实施方式7的运动图像的生成处理的示意图。
具体实施方式
下面,参照附图来说明本发明的实施方式所涉及的图像管理装置。此外,本发明并不限定于这些实施方式。在以下的实施方式中,说明对通过使用胶囊型内窥镜的检查而获取到的一系列图像进行管理的情况,但本发明所涉及的图像管理装置能够应用于对通过各种医疗用图像获取装置获取到的图像进行管理的情况。另外,在各附图的记载中,对相同部分附加相同的附图标记来显示。
(实施方式1)
图1是表示用于进行使用胶囊型内窥镜的检查的胶囊型内窥镜系统的示意图。图1所示的胶囊型内窥镜系统具备:本发明的实施方式1所涉及的图像管理装置1;胶囊型内窥镜2,其被导入被检体6内,通过在该被检体6内进行拍摄来生成图像数据,并将该图像数据以无线方式发送;以及接收装置3,其经由安装于被检体6的接收天线单元4来接收从胶囊型内窥镜2发送来的图像数据。
图像管理装置1是对通过检查按时间顺序获取到的一系列图像进行管理的装置,例如包括工作站、个人计算机等通用的计算机。此外,在实施方式1中,说明对通过使用胶囊型内窥镜2的检查而获取到的图像进行管理的情况,但是,在对通过除胶囊型内窥镜2以外的各种图像获取装置获取到的图像进行管理时,也能够应用图像管理装置1。在后文中对图像管理装置1的详细结构和动作进行叙述。
胶囊型内窥镜2是在被检体6能够咽下的大小的胶囊形状的壳体中内置有CCD等摄像元件、LED等照明元件、存储器、信号处理单元、无线通信单元、其它各种部件的装置。摄像元件设置于壳体的一端侧,对由照明元件照明的壳体的外部的规定范围进行拍摄并输出摄像信号。胶囊型内窥镜2通过对从摄像元件输出的摄像信号实施规定的信号处理来生成图像数据,并将该图像数据和关联信息以叠加到无线信号的方式进行发送。
接收装置3经由具有多个(在图1中为8个)接收天线4a~4h的接收天线单元4来接收从胶囊型内窥镜2发送来的无线信号。例如使用环形天线来构成各接收天线4a~4h,各接收天线4a~4h配置在被检体6的体外表面上的规定位置处(例如胶囊型内窥镜2的通过路径上的与被检体6内的各脏器对应的位置处)。
接收装置3通过对接收到的无线信号进行解调来获取图像数据和关联信息,并将该图像数据和关联信息保存于内置的存储器。另外,接收装置3具备:显示部3a,其显示基于获取到的图像数据的图像;以及操作按钮3b,在用户对该接收装置3进行规定的操作时使用该操作按钮3b。接收装置3还具备数据发送部,该数据发送部包括能够与USB或有线LAN、无线LAN等通信线路连接的接口,经由这些接口将图像数据和关联信息传送到外部设备。
图2是表示图像管理装置1的结构的框图。如图2所示,图像管理装置1具备输入部11、图像数据获取部12、存储部13、图像处理部14、显示部15、控制部16以及备份图像存储部17。
输入部11包括键盘、各种按钮、各种开关等输入设备和/或鼠标、触摸面板等指示设备,将与由用户从外部进行的操作相应的信号输出到控制部16。
图像数据获取部12是能够与USB或有线LAN、无线LAN等通信线路连接的接口,包括USB端口、LAN端口等。图像数据获取部12经由连接于USB端口的外部设备、各种线路来获取图像数据和关联信息,并将所获取到的图像数据和关联信息存储于存储部13。如图1所示,在实施方式1中,通过在连接于图像管理装置1的USB端口的托架3c处设置接收装置3来将接收装置3与图像管理装置1连接。由此,接收装置3的存储器中存储的图像数据被依次取入到图像管理装置1中。
存储部13是包括快闪存储器、RAM、ROM等半导体存储器、HDD、MO、CD-R、DVD-R等记录介质以及对该记录介质进行信息的写入和读出的读写装置等的第一存储部。存储部13存储用于使图像管理装置1动作来执行各种功能的程序和各种设定信息。
另外,存储部13具备图像存储部131、检查数据库(DB)存储部132以及操作信息存储部133。其中,图像存储部131是用于存储从图像数据获取部12取入的图像数据、由后述的图像处理部14实施了规定的图像处理的图像数据的第一图像存储部。
检查数据库存储部132存储用于对使用胶囊型内窥镜2的检查等进行管理的检查数据库。在检查数据库中存储有与作为检查的对象的患者有关的信息、与检查的内容有关的信息、记录有检查的结果的报告以及表示通过检查获取到的图像的保存目的地的链接信息等。
在显示部15中显示有通过检查获取到的一系列图像时,操作信息存储部133将表示用户对这些图像进行的操作的信息,按每个用户,与成为该操作的对象的图像的识别信息相关联地存储。例如,将与一系列图像中的图像的排列顺序对应的图像编号用作图像的识别信息。
图像处理部14例如包括CPU等硬件,通过读入存储部13中存储的程序来对与经由图像数据获取部12输入的图像数据对应的一系列图像中的各图像执行规定的图像处理。具体地说,图像处理部14对各图像实施白平衡处理、去马赛克、颜色转换、浓度转换(伽玛转换等)、平滑化(噪声去除等)、锐化(边缘增强等)等图像处理,并且执行计算各图像的平均色的图像处理、从各图像中检测病变等的图像处理。
显示部15例如是CRT显示器、液晶显示器等显示装置,在控制部16的控制下显示包含图像的规定的形式的画面、其它信息。
控制部16例如包括CPU等硬件,通过读入存储部13中存储的程序,来基于从输入部11输入的信号等向构成图像管理装置1的各部进行指示、数据的传送等,从而统一控制图像管理装置1整体的动作。另外,控制部16具备:显示控制部161,其根据由图像处理部14实施了规定的图像处理的图像数据,使在被检体6内拍到的一系列图像以规定的形式依次显示于显示部15;以及图像提取部162,其从该一系列图像中提取要备份的多个图像,并根据所提取出的图像来生成运动图像。此处所说的运动图像既可以是MPEG、AVI等标准格式的运动图像,也可以是图像管理装置1所特有的格式的运动图像。
备份图像存储部17是包括快闪存储器、RAM、ROM等半导体存储器、HDD、MO、CD-R、DVD-R等记录介质以及对该记录介质进行信息的写入和读出的读写装置等的第二存储部,对图像存储部131中存储的图像数据的备份用的图像数据进行存储。在图2中,将备份图像存储部17设置在图像管理装置1的内部,但也可以将该备份图像存储部17设置在包括外置HDD或者包括经由网络连接的服务器等的图像管理装置1的外部。
图3是表示在显示控制部161的控制下显示于显示部15的画面的例子的示意图。图3所示的画面D1是在医师等用户观察一系列图像时显示的画面,该画面包括用于显示与作为被检体6的患者有关的信息的患者信息显示区域D11、用于显示与被检体6的检查有关的信息的检查信息显示区域D12、用于对通过检查获取到的一系列图像依次进行再现显示的主显示区域D13、再现操作按钮群D14、捕获按钮D15、平均色条D16、捕获图像显示区域D17、标签框D18以及注释记入栏D19。
再现操作按钮群D14是在用户输入用于控制主显示区域D13内的图像的再现动作的指示时使用的操作按钮的集合,例如包括定位按钮、逐帧播放按钮、暂停按钮、快进按钮、再现按钮、快退按钮、停止按钮等。当使用输入部11对再现操作按钮群D14进行规定的指针操作(例如利用指针P1来点击某一个操作按钮)时,与该指针操作相应的操作信号被输入到显示控制部161。
捕获按钮D15是在用户捕获主显示区域D13内正显示的图像时使用的按钮。当使用输入部11对捕获按钮D15进行规定的指针操作(例如利用指针P1来点击)时,用于指示捕获主显示区域D13内正显示的图像的信号从输入部11被输入到控制部16。由此,对该图像附加用于识别为捕获图像的标记,并将该图像登记为捕获图像。
平均色条D16是将一系列图像的平均色按时间顺序配置的带状的影像,基于由图像处理部14计算出的各图像的平均色来生成该平均色条D16。在平均色条D16处设置有与主显示区域D13内正显示的图像对应的表示在平均色条D16上的位置的滑块d1。在主显示区域D13内进行一系列图像的自动再现的期间,该滑块d1根据正显示的图像的摄像时刻来在平均色条D16上移动。此外,在本申请中,摄像时刻是指从摄像开始(检查开始)时起的经过时间。用户通过参照滑块d1能够掌握正显示的图像是什么时候拍摄到的。另外,当通过使用输入部11对滑块d1进行规定的指针操作(例如拖放操作)来使滑块d1沿着平均色条D16进行移动时,能够使与滑块d1的位置相应的摄像时刻的图像显示于主显示区域D13。
捕获图像显示区域D17是将被登记为捕获图像的图像的缩小图像(以下称为缩略图图像)按时间顺序进行一览显示的区域。在捕获图像显示区域D17内设置有在缩略图图像的显示范围内滑动时使用的滑块d2。另外,也可以设置表示该捕获图像显示区域D17内的缩略图图像与在平均色条D16上的位置的对应关系的连线d3。
在标签框D18中设置有在对该图像附加标签时使用的多个图标d4~d7,该标签用于根据在图像中观察到的特征对图像进行分类。图3所示的图标d4~d7中记载有病变名称(溃疡、糜烂、出血、肿瘤等)。当通过使用输入部11对标签框D18进行规定的指针操作来选择图标d4~d7中的某一图标时,与所选择的图标相关联的标签(病变名称)被附加于主显示区域D13内正显示的图像。
注释记入栏D19是能够使用键盘等输入设备来输入文本信息的区域,在用户对主显示区域D13内正显示的图像输入注释时使用该注释记入栏D19。当对注释记入栏D19输入文本信息时,对主显示区域D13内正显示的图像附加包括该文本信息的注释。
接着,对图像管理装置1的动作进行说明。图4是表示图像管理装置1的动作的流程图。
首先,在步骤S100中,图像数据获取部12获取通过使用胶囊型内窥镜2等的检查而获取到的一系列图像的图像数据,并将该图像数据存储于图像存储部131。此时,图像数据获取部12既可以经由托架3c从图1所示的接收装置3获取图像数据,也可以经由各种通信线路获取图像数据。
接着,在步骤S101中,图像处理部14对与在步骤S100中获取到的图像数据对应的一系列图像中的各图像进行白平衡处理、去马赛克、颜色转换、浓度转换、平滑化、锐化等图像处理,并且执行检测各图像的平均色的图像处理、从各图像中检测病变等的图像处理。此外,在步骤S100中,也可以获取已被实施上述图像处理的图像数据,在该情况下,省略步骤S101。
接着,图像管理装置1按观察一系列图像的每个用户(观察者)来执行循环A的处理。即,首先,在步骤S102中,显示控制部161使基于由图像处理部14实施了图像处理的图像数据的一系列图像依次显示于显示部15(参照图3)。
在接下来的步骤S103中,控制部16判定是否输入了用于指示捕获主显示区域D13内正显示的图像的信号。在输入了用于指示捕获的信号的情况下(步骤S103:“是”),控制部16对该图像附加用于识别为捕获图像的标记(步骤S104),并且,使该图像缩小地显示于捕获图像显示区域D17。另一方面,在没有输入用于指示图像的捕获的信号的情况下(步骤S103:“否”),图像管理装置1的动作转移到步骤S105。
在步骤S105中,控制部16判定是否使该用户对图像的观察结束。例如,在主显示区域D13内正显示的图像为一系列图像的最终图像的情况下,控制部16判定为使观察结束。或者,也可以是,在用户使用输入部11进行了规定的结束操作时,控制部16判定为使观察结束。
在不使观察结束的情况下(步骤S105:“否”),图像管理装置1的动作转移到步骤S102。另一方面,在使观察结束的情况下(步骤S105:“是”),控制部16使在步骤S104中被附加了标记的图像(捕获图像)的识别信息(例如图像编号)按每个用户存储于操作信息存储部133(步骤S106)。
在接下来的步骤S107中,控制部16判定是否输入了用于指示开始生成报告的信号。在预定的多个用户全部结束了对一系列图像的观察时,根据由某一个用户进行的操作来输入用于指示开始生成报告的信号。例如,既可以根据输入部11所具备的特定的按键、按钮等的按下来输入该信号,也可以根据使用输入部11在显示部15的画面上进行的指针操作来输入该信号。
图5是表示在用户结束观察一系列图像时显示于显示部15的画面的例子的示意图。图5所示的画面D2包括用于询问用户是否开始生成报告的文本消息D21、在用户输入是否开始生成报告时使用的图标D22、D23、用于显示对该一系列图像进行了观察的用户名(例如观察者A、B、……)的观察者显示栏D24以及在确定从显示于观察者显示栏D24的用户名中选择出的用户时使用的OK按钮D25。当使用输入部11对这种画面D2进行规定的指针操作(例如点击图标D22)时,用于指示开始生成报告的信号被输入到控制部16。
在没有输入用于指示开始生成报告的信号的情况下(步骤S107:“否”),图像管理装置1对其他用户执行循环A的处理。
另一方面,在输入了用于指示开始生成报告的信号的情况下(步骤S107:“是”),控制部16决定多个用户的观察结果中的应用于报告的观察结果(步骤S108)。在此,在预先决定了多个用户中的负责生成报告的用户的情况下,控制部16将该用户的观察结果决定为应用于报告的观察结果。或者,也可以是,在输入了用于指示开始生成报告的信号时,使用户选择应用于报告的观察结果。例如,还可以设为以下结构:当通过使用输入部11对画面D2进行指针操作来从显示于观察者显示栏D24的多个用户中选择出一个人并按下OK按钮D25时,用于选择该用户的信号从输入部11被输入到控制部16,与之相应地,控制部16决定将该用户的观察结果应用于报告。
在步骤S109中,控制部16使显示部15显示报告生成用的图像,并使用户生成报告。图6是表示显示部15中显示的报告生成画面的例子的示意图。该报告生成画面D3包括用于显示与作为被检体6的患者有关的信息的患者信息显示区域D31、用于显示与对患者进行的检查有关的信息的检查信息显示区域D32、用于显示负责生成报告的用户的姓名的报告生成者显示区域D33、用于供用户记入意见的意见记入区域D34、将用户观察一系列图像时选择出的捕获图像缩小地显示的捕获图像显示区域D35以及确定按钮D36。其中,在捕获图像显示区域D35内显示在步骤S108中决定的观察结果、即包含应用于报告的观察结果的捕获图像的缩小图像。用户通过使用输入部11在报告生成画面D3上进行操作来对意见进行文本输入,在从捕获图像中选择了要附加于报告的图像之后按下确定按钮D36。
在步骤S110中,控制部16确定由用户进行文本输入的报告的内容,并使该内容存储于存储部13。
在接下来的步骤S111中,控制部16生成作为一系列图像的备份保存的运动图像。在本实施方式1中,提取捕获图像以及排列在该捕获图像的之前和之后的规定数量的图像,根据所提取的连续的多个图像来生成一个运动图像并将该运动图像作为备份进行保存。图7是表示运动图像的生成处理的流程图。另外,图8是说明运动图像的生成处理的示意图。
首先,在步骤S121中,图像提取部162从存储部13获取从捕获图像的之前和之后提取的图像(以下称为前图像和后图像并将它们统称为前后图像)的个数信息。前图像的个数和后图像的个数既可以相同也可以不同。在本实施方式1中,将前图像和后图像的个数分别设定为k个(k是自然数)。
在接下来的步骤S122中,图像提取部162基于对该一系列图像进行了观察的所有用户(观察者)的观察结果,来从操作信息存储部133获取捕获图像的识别信息。在本实施方式1中,将图像编号用作识别信息。例如,如图8所示,在由观察者A和B这两个观察者对一系列图像m(1)~m(N)进行了观察的情况下,图像提取部162获取由观察者A捕获到的图像m(a1)、m(a2)、m(a3)、m(a4)的图像编号a1、a2、a3、a4和由观察者B捕获到的图像m(b1)、m(b2)、m(b3)的图像编号b1、b2、b3。在此,1≤a1<a2<a3<a4≤N,1≤b1<b2<b3≤N(N是自然数)。
接着,图像提取部162对被获取到识别信息的各捕获图像执行循环a的处理。即,首先,在步骤S123中,图像提取部162依次获取捕获图像的前后图像的识别信息。
在接下来的步骤S124中,图像提取部162判定作为处理对象的捕获图像及其前后图像的识别信息是否与已作为备份对象提取出的图像的识别信息重复,将识别信息不重复的图像重新作为备份对象提取出来。
通过这种循环a的处理,例如,在图8的情况下,提取以下的图像。首先,将捕获图像m(a1)及其前图像m(a1-k)~m(a1-1)和后图像m(a1+1)~m(a1+k)作为备份对象提取出来。此外,在图8中,对作为备份对象提取出的图像附加斜线或格子状的网格线。
接着,由于捕获图像m(a2)及其前图像m(a2-k)~m(a2-1)和后图像m(a2+1)~m(a2+k)与已提取出的图像m(a1-k)~m(a1+k)的图像编号不重复,因此将其全部作为备份对象提取出来。
关于捕获图像m(a3)及其前图像m(a3-k)~m(a3-1)和后图像m(a3+1)~m(a3+k),在前图像m(a3-k)~m(a3-1)的一部分与图像m(a2)的后图像m(a2+1)~m(a2+k)的一部分中,图像编号的一部分重复。因而,仅将图像编号不重复的图像m(a2+k+1)~m(a3+k)作为备份对象提取出来。
关于捕获图像m(b1)及其前图像m(b1-k)~m(b1-1)和后图像m(b1+1)~m(b1+k),在其一部分与已提取出的图像m(a2+1)~m(a3+k)中,图像编号的一部分重复。因而,仅将图像编号不重复的图像m(a3+k+1)~m(b1+k)作为备份对象提取出来。
通过同样地对捕获图像m(b2)、m(b3)、m(a4)也依次进行处理,来将图像m(b1+k+1)~m(b2+k)、m(b3-k)~m(b3+k)、m(a4-k)~m(a4+k)作为备份对象提取出来。
在对所有捕获图像执行了循环a的处理之后,在步骤S125中,图像提取部162获取运动图像的帧频信息和画质信息。
在接下来的步骤S126中,图像提取部162从通过循环a的处理提取出的图像中提取识别信息连续的图像群。例如,在图8的情况下,将图像编号连续的图像m(a1-k)~m(a1+k)、m(a2-k)~m(b2+k)、m(b3-k)~m(b3+k)、图像m(a4-k)~m(a4+k)分别作为一个图像群提取出来。即,在包括各捕获图像及其前后图像的图像群之间存在重复的图像的情况下,这些图像群被合并为一个。
在接下来的步骤S127中,图像提取部162应用在步骤S125中获取到的帧频信息和画质信息,根据在步骤S126中提取出的各图像群来生成运动图像。由此,在图8的情况下,生成四个运动图像M1~M4。
在步骤S128中,图像提取部162判定是否根据通过循环a的处理提取出的所有作为备份对象的图像生成了运动图像。在根据所有作为备份对象的图像生成了运动图像的情况下(步骤S128:“是”),处理返回到主程序。另一方面,在还残留有尚未生成运动图像的作为备份对象的图像的情况下(步骤S128:“否”),处理返回到步骤S126。
当再次参照图4时,在步骤S111之后的步骤S112中,控制部16使在步骤S111中生成的运动图像存储于备份图像存储部17。
并且,在步骤S113中,控制部16将对于在步骤S112中存储的运动图像的链接信息登记到检查数据库存储部132中存储的与该检查有关的数据库中。
之后,与该一系列图像有关的图像管理装置1的动作结束。
如以上所说明那样,根据实施方式1,由多个用户针对通过使用胶囊型内窥镜等的检查而获取到的一系列图像进行捕获得到图像,根据基于该图像提取出的图像来生成运动图像,并将该运动图像作为备份进行保存。因而,能够将对诊断有用的图像无遗漏地提取出来,并且以比以往的存储容量少的存储容量来生成备份。
(变形例1)
接着,对本发明的实施方式1的变形例1进行说明。图9是说明本变形例1的运动图像的生成处理的示意图。
在上述实施方式1中,将由至少一个用户捕获到的图像及其前后图像作为备份对象提取出来。然而,也可以是,在由各用户捕获到的图像及其前后图像中,仅将所有用户之间共同的图像作为备份对象提取出来。例如,如图9所示,也可以在由观察者A捕获到的图像m(a1)、m(a2)、m(a3)、m(a4)及其前后图像和由观察者B捕获到的图像m(b1)、m(b2)、m(b3)及其前后图像中提取识别信息(图像编号)重复的图像m(b1-k)~m(a3+k),根据这些图像来生成运动图像并作为备份进行保存。
根据本变形例1,能够对多个用户共同认为对诊断有用的图像进行备份。
(实施方式2)
接着,对本发明的实施方式2进行说明。
在上述实施方式1中,在检查结束后,各用户对基于被传送到图像管理装置1的图像数据而显示于显示部15的图像进行观察,根据其观察结果来生成备份的运动图像。然而,也可以是,用户在正进行检查时实时地观察图像,并根据在此期间捕获到的图像来生成备份的运动图像。
图10是表示实施方式2的胶囊型内窥镜系统的动作的流程图。此外,本实施方式2的胶囊型内窥镜系统的结构与实施方式1相同(参照图2)。
在步骤S200中,当接通胶囊型内窥镜2的电源时,胶囊型内窥镜2开始进行拍摄并将图像数据以无线方式发送(步骤S201)。与之相应地,接收装置3接收图像数据(步骤S202)。
在步骤S203中,接收装置3通过对所接收到的图像数据实施规定的信号处理来在显示部3a中显示图像。医师等用户在确认了由胶囊型内窥镜2拍摄到的图像被显示于显示部3a之后,使作为被检体6的患者咽下胶囊型内窥镜2。
在步骤S204中,接收装置3判定是否进行了用于指示捕获显示部3a内正显示的图像的操作。作为用于指示捕获的操作,例如能够列举在正显示图像时按下操作按钮3b之类的规定的操作。在进行了用于指示图像的捕获的操作的情况下(步骤S204:“是”),接收装置3对图像数据附加用于将正显示的图像作为捕获图像提取出来的标记(步骤S205)。另一方面,在没有进行用于指示图像的捕获的操作的情况下(步骤S204:“否”),接收装置3的动作转移到步骤S206。
此外,在医师等用户确认了胶囊型内窥镜2正在对被检体6内的图像正常地进行拍摄之后,如果无需实时地捕获图像,则也可以使被检体6离开检查室等并以携带着接收装置3的状态自由行动至规定的时刻。
在步骤S206中,接收装置3判定检查是否结束。例如,在停止了发送来自胶囊型内窥镜2的图像数据的情况下或者进行了对接收装置3指示检查的结束的操作的情况下,接收装置3判定为检查结束。
在检查尚未结束的情况下(步骤S206:“否”),接收装置3的动作转移到步骤S202。另一方面,在检查结束的情况下(步骤S206:“是”),接收装置3向图像管理装置1传送图像数据(步骤S207)。通过用户在与图像管理装置1连接的托架3c上设置接收装置3来开始传送图像数据。
在步骤S208中,图像管理装置1对从接收装置3接收到的图像数据进行规定的图像处理,并使完成图像处理的图像数据存储于存储部13。
接着,图像管理装置1按观察一系列图像的每个用户(观察者)来执行循环B的处理。即,首先,在步骤S209中,显示控制部161提取在步骤S205中被附加了标记的图像(捕获图像),并使该图像显示于显示部15的捕获图像显示区域D17(参照图3)。此时,用户也可以参照捕获图像显示区域D17来从捕获图像显示区域D17内删除无需预先捕获的图像。能够通过使用输入部11对画面D1进行规定的指针操作(例如对捕获图像显示区域D17内显示的期望的图像等进行双击)来进行图像的删除。另外,也可以是,在除负责检查的用户(即、在接收装置3中进行了捕获的用户)以外的用户在图像管理装置1中观察一系列图像时,不在捕获图像显示区域D17内显示在接收装置3中捕获到的图像。
在接下来的步骤S210中,显示控制部161使基于存储部13中存储的图像数据的一系列图像依次显示于显示部15的主显示区域D13。
在步骤S211中,控制部16判定是否输入了用于指示对主显示区域D13内正显示的图像进行捕获的信号。该判定方法与实施方式1相同(参照图4的步骤S103)。
在输入了用于指示图像的捕获的信号的情况下(步骤S211:“是”),控制部16对该图像附加用于识别为捕获图像的标记(步骤S212),并且,使该图像缩小地显示于捕获图像显示区域D17。另一方面,在没有输入用于指示图像的捕获的信号的情况下(步骤S211:“否”),图像管理装置1的动作转移到步骤S213。
在步骤S213中,控制部16判定是否使该用户对图像的观察结束。该判定方法与实施方式1相同(参照图4的步骤S105)。
在不使观察结束的情况下(步骤S213:“否”),图像管理装置1的动作返回到步骤S210。另一方面,在使观察结束的情况下(步骤S213:“是”),控制部16使在步骤S205和S212中被附加了标记的图像(捕获图像)的识别信息(例如图像编号)按每个用户存储于操作信息存储部133(步骤S214)。
在接下来的步骤S215中,控制部16判定是否输入了用于指示开始生成报告的信号。该判定方法与实施方式1相同(参照图4的步骤S107)。
在没有输入用于指示开始生成报告的信号的情况下(步骤S215:“否”),图像管理装置1对其他用户执行循环B的处理。
另一方面,在输入了用于指示开始生成报告的信号的情况下(步骤S215:“是”),图像管理装置1的动作转移到步骤S108。接下来的步骤S108~S113的动作与实施方式1相同。
如以上所说明那样,根据实施方式2,能够根据在检查期间被实时地显示于接收装置3的图像中的由医师等用户捕获到的图像来生成备份的运动图像。因而,能够无遗漏地生成医师等用户认为在检查中要确认的图像的备份。
(实施方式3)
接着,对本发明的实施方式3进行说明。
在上述实施方式1中,根据用户捕获到的所有图像来生成备份用的运动图像。然而,也可以根据捕获图像中的附加有标签、注释、注解的图像即用户特别关注的图像来生成备份用的运动图像。
在此,能够通过使用画面D1(参照图3)中的输入部11的规定的操作来附加标签、注释以及注解。例如,通过选择设置在标签框D18内的图标d4~d7中的某一个图标来附加标签。另外,通过向注释记入栏D19输入文本来附加注释。并且,能够通过对捕获图像显示区域D17内显示的捕获图像进行规定的指针操作(例如点击右键等)来显示用于附加注解的画面,通过在该画面中向图像上输入图形(箭头、椭圆形、四边形、三角形等)、文本(省略图示)来附加注解。
在本实施方式3中,在图7的步骤S122中,控制部16获取捕获图像中的附加有标签、注释、注解的图像的识别信息。然后,在接下来的步骤S123~S128中,根据在步骤S122中获取到的识别信息来进行处理,由此生成运动图像。
根据这种实施方式3,根据捕获图像中的各用户特别关注的图像来生成备份用的运动图像,因此能够进一步减少备份所需的存储容量。
(实施方式4)
接着,对本发明的实施方式4进行说明。
在上述实施方式1中,根据在观察一系列图像时由各用户捕获到的图像来生成备份用的运动图像。然而,在生成报告时,负责生成报告的用户有时会选择除自己捕获到的图像以外的图像作为报告用图像。在这种情况下,还可以根据作为报告用图像选择出的图像来生成备份用的运动图像。
图11是表示本实施方式4所涉及的图像管理装置的动作的流程图。另外,图12是说明本实施方式4的运动图像的生成处理的示意图。此外,图11所示的步骤S100~S109与实施方式1相同(参照图4)。
在步骤S109之后的步骤S150中,判定是否输入了用于指示捕获除已捕获的图像以外的图像的信号。在输入了用于指示捕获的信号的情况下(步骤S150:“是”),控制部16对该图像附加用于识别为捕获图像的标记(步骤S151)。另一方面,在没有输入用于指示图像的捕获的信号的情况下(步骤S150:“否”),图像管理装置1的动作转移到步骤S110。
步骤S110~S113的动作与实施方式1相同。其中,在步骤S111中,基于在步骤S104和S151中被附加了标记的图像的识别信息来生成运动图像。即,在图7的步骤S122中,除了提取由观察者A和B捕获到的图像m(a1)、m(a2)、m(a3)、m(b1)、m(b2)、m(b3)、m(a4)的识别信息以外,还提取观察者A在生成报告时作为报告用图像而捕获到的图像m(D1)的识别信息。在此,1≤D1≤N。然后,在接下来的步骤S123~S128中,根据这些识别信息来进行处理。其结果,将图像群m(a1-k)~m(a1+k)、m(a2-k)~m(b2+k)、m(b3-k)~m(b3+k)以及m(D1-k)~m(a4+k)作为备份对象图像提取出来,生成包含这些各图像群的运动图像。
根据本实施方式4,除了根据多个用户对一系列图像的观察结果来生成备份用的运动图像以外,还根据在生成报告时作为报告用图像选择出来的图像来生成备份用的运动图像,因此能够进一步无遗漏地生成对诊断有用的图像的备份。
(实施方式5)
接着,对本发明的实施方式5进行说明。
图13是表示本实施方式5所涉及的图像管理装置的动作的流程图。此外,实施方式5所涉及的图像管理装置的结构与实施方式1相同(参照图2)。本实施方式5的特征在于,除了根据由各用户捕获到的图像来生成备份用的运动图像以外,还根据通过图像处理被判断为要关注的图像来生成备份用的运动图像。
首先,在步骤S300中,图像数据获取部12获取通过使用胶囊型内窥镜2等的检查而获取到的一系列图像的图像数据,并使图像数据存储于图像存储部131。
在接下来的步骤S301中,图像处理部14对在步骤S300中获取到的图像数据实施白平衡处理、去马赛克、颜色转换、浓度转换(伽玛转换等)、平滑化(噪声去除等)、锐化(边缘增强等)等图像处理,还执行检测各图像的平均色的图像处理,并且执行从各图像中检测溃疡、出血、肿瘤之类的病变等的图像处理。
在接下来的步骤S302中,图像处理部14基于图像处理的结果来对具有规定的特性的图像附加表示具有该特性的意思的标记。具体地说,具有规定的特性的图像是指特定的特征量为基准值以上的图像、被检测出特定的病变的图像、所检测出的病变的程度为规定的基准以上的图像等。
接着,图像管理装置1按观察一系列图像的每个用户(观察者)来执行循环C的处理。即,首先,在步骤S303中,显示控制部161提取在步骤S302中被附加了标记的图像,并使该图像显示于显示部15的捕获图像显示区域D17(参照图3)。此时,用户也可以参照捕获图像显示区域D17来从捕获图像显示区域D17内删除无需预先捕获的图像。能够通过使用输入部11对画面D1进行规定的指针操作(例如对捕获图像显示区域D17内显示的图像等进行双击)来进行图像的删除。还对从捕获图像显示区域D17内删除的图像附加表示该用户已删除的意思的标记。
在接下来的步骤S304中,显示控制部161使基于存储部13中存储的图像数据的一系列图像依次显示于显示部15的主显示区域D13。
在步骤S305中,控制部16判定是否输入了用于指示对主显示区域D13内正显示的图像进行捕获的信号。该判定方法与实施方式1相同(参照图4的步骤S103)。
在输入了用于指示图像的捕获的信号的情况下(步骤S305:“是”),控制部16对该图像附加用于识别为捕获图像的标记(步骤S306),并且,使该图像缩小地显示于捕获图像显示区域D17。另一方面,在没有输入用于指示图像的捕获的信号的情况下(步骤S305:“否”),图像管理装置1的动作转移到步骤S307。
在步骤S307中,控制部16判定是否使该用户对图像的观察结束。该判定方法与实施方式1相同(参照图4的步骤S105)。
在不使观察结束的情况下(步骤S307:“否”),图像管理装置1的动作转移到步骤S304。另一方面,在使观察结束的情况下(步骤S307:“是”),控制部16使在步骤S302和S306中被附加了标记的图像(捕获图像)的识别信息(例如图像编号)按每个用户存储于操作信息存储部133(步骤S308)。
在接下来的步骤S309中,控制部16判定是否输入了用于指示开始生成报告的信号。该判定方法与实施方式1相同(参照图4的步骤S107)。
在没有输入用于指示开始生成报告的信号的情况下(步骤S309:“否”),图像管理装置1对其他用户执行循环C的处理。
另一方面,在输入了用于指示开始生成报告的信号的情况下(步骤S309:“是”),图像管理装置1的动作转移到步骤S108。接下来的步骤S108~S113的动作与实施方式1相同。
图14是说明本实施方式5的运动图像的生成处理(步骤S111)的示意图。在本实施方式5中,除了根据多个用户(在图14中为观察者A和B)对一系列图像的观察结果来生成备份用的运动图像以外,还根据图像处理的结果来生成备份用的运动图像。即,在图7的步骤S122中,除了提取由观察者A和B捕获到的图像m(a1)、m(a2)、m(a3)、m(b1)、m(b2)、m(b3)、m(a4)的识别信息以外,还提取基于图像处理的结果被附加了标记的图像m(c1)、m(c2)、m(c3)、m(c4)、m(c5)、m(c6)的识别信息。在此,1≤c1<c2<c3<c4<c5<c6≤N。然后,在接下来的步骤S123~S128中,根据这些识别信息来进行处理。
但是,关于在观察图像时由所有用户从捕获图像显示区域D17内删除的图像(参照步骤S303),即使是基于图像处理的结果被附加了标记的图像也可以不用于生成运动图像。例如,在图14的情况下,图像m(c5)是被观察者A和B共同删除的图像,因此不用于生成运动图像。另一方面,图像m(c6)是被观察者A删除但未被观察者B删除的图像,因此用于生成运动图像。其结果,将图像群m(c1-k)~m(a1+k)、m(a2-k)~m(b2+k)、m(b3-k)~m(b3+k)、m(c6-k)~m(c6+k)以及m(a4-k)~m(a4+k)作为备份对象图像提取出来,并生成包含这些图像群的运动图像。
如以上所说明那样,根据本实施方式5,除了利用多个用户对一系列图像的观察结果来生成备份用的运动图像以外,还利用图像处理的结果来生成备份用的运动图像,因此能够进一步无遗漏地生成对诊断有用的图像的备份。
(实施方式6)
接着,对本发明的实施方式6进行说明。
图15是表示本发明的实施方式6所涉及的图像管理装置的动作的流程图。此外,实施方式6所涉及的图像管理装置的结构与实施方式1相同(参照图2)。另外,图15的步骤S300~S302与实施方式5相同(参照图13)。
在步骤S302之后的步骤S400中,控制部16根据在步骤S302中被附加了标记的图像及其前后图像来生成备份用的运动图像。将图7所示的捕获图像替换为被附加了标记的图像并按照步骤S121~S128进行生成运动图像的处理。例如图14所示,在对图像m(c1)、m(c2)、m(c3)、m(c4)、m(c5)、m(c6)附加了标记的情况下,将图像群m(c1-k)~m(c1+k)、m(c2-k)~m(c4+k)、m(c5-k)~m(c5+k)以及m(c6-k)~m(c6+k)作为备份对象图像提取出来,并分别生成包含这些图像群的运动图像。
在接下来的步骤S401中,控制部16使在步骤S400中生成的运动图像存储于备份图像存储部17。
在接下来的步骤S402中,控制部16将对于在步骤S401中存储的运动图像的链接信息登记到检查数据库存储部132中存储的与该检查有关的数据库中。
接下来的步骤S303~S113的动作与实施方式5及实施方式1相同。其结果,在图14的情况下,将图像群m(c1-k)~m(a1+k)、m(a2-k)~m(b2+k)、m(b3-k)~m(b3+k)、m(c6-k)~m(c6+k)以及m(a4-k)~m(a4+k)作为备份对象图像提取出来,并生成包含这些图像群的运动图像(步骤S111),使该运动图像存储于备份图像存储部17。此外,在步骤S112中,使在步骤S111中生成的运动图像存储于与步骤S401中的存储区域不同的存储区域。
根据这种实施方式6,基于图像处理的结果尽早地生成运动图像并进行保存,因此在所有用户对一系列图像的观察结束之前的期间,能够确保用于防备图像存储部131中存储的图像数据的丢失的备份。
(变形例2)
接着,对本发明的实施方式6的变形例2进行说明。
对于上述实施方式6,也可以是,在图15的步骤S112中,将基于多个用户的观察结果生成的运动图像(参照步骤S111)以覆盖基于图像处理的结果生成的运动图像(参照步骤S400)的方式进行保存。在该情况下,在所有用户对一系列图像的观察结束之前的期间,能够确保用于防备图像存储部131中存储的图像数据的丢失的备份,并且能够减少最终保存的备份的存储容量。
(实施方式7)
接着,对本发明的实施方式7进行说明。
图16是表示本发明的实施方式7所涉及的图像管理装置的动作的流程图。此外,实施方式7所涉及的图像管理装置的结构与实施方式1相同(参照图2)。另外,图16的步骤S100和S101与实施方式1相同(参照图4)。
在步骤S101之后,图像管理装置1按观察一系列图像的每个用户(观察者)来执行循环D的处理。即,首先,在步骤S102中,显示控制部161使基于由图像处理部14实施了图像处理的图像数据的一系列图像依次显示于显示部15(参照图3)。在显示部15中显示有图像的期间,用户能够通过使用输入部11对画面D1中显示的再现操作按钮群D14进行规定的指针操作(例如点击期望的操作按钮)来进行期望的再现操作。
在接下来的步骤S103中,控制部16判定是否输入了用于指示捕获主显示区域D13内正显示的图像的信号。在输入了用于指示捕获的信号的情况下(步骤S103:“是”),控制部16对该图像附加用于识别为捕获图像的标记(步骤S104),并且使该图像缩小地显示于捕获图像显示区域D17。另一方面,在没有输入用于指示图像的捕获的信号的情况下(步骤S103:“否”),图像管理装置1的动作转移到步骤S500。
在步骤S500中,控制部16在对主显示区域D13内正显示的图像进行了规定的再现操作的情况下,对该图像附加用于表示该再现操作的标记。所谓规定的再现操作,例如能够列举暂停、反向再现、反复再现、使帧频降低了的状态下的再现、逐帧播放再现等。
在接下来的步骤S105中,控制部16判定是否使该用户对图像的观察结束。该判定方法与实施方式1相同(参照图4)。在不使观察结束的情况下(步骤S105:“否”),图像管理装置1的动作返回到步骤S102。另一方面,在使观察结束的情况下(步骤S105:“是”),控制部16使在步骤S104中被附加了标记的图像(捕获图像)和在步骤S500中被附加了标记的图像、即接受到规定的再现操作的图像的识别信息按每个用户存储于操作信息存储部133(步骤S501)。
在接下来的步骤S107中,控制部16判定是否输入了用于指示开始生成报告的信号。该判定方法与实施方式1相同(参照图4)。在没有输入用于指示开始生成报告的信号的情况下(步骤S107:“否”),图像管理装置1对其他用户执行循环D的处理。
另一方面,在输入了用于指示开始生成报告的信号的情况下(步骤S107:“是”),图像管理装置1的动作转移到步骤S108。接下来的步骤S108~S113的动作与实施方式1相同。
图17是说明本实施方式7的运动图像的生成处理(步骤S111)的示意图。在本实施方式7中,除了根据各用户(在图17中为观察者A、B)在观察一系列图像期间捕获到的图像信号来生成运动图像以外,还根据进行了规定的再现操作的图像来生成运动图像。即,在图7的步骤S122中,除了获取由观察者A和B捕获到的图像m(a1)、m(a2)、m(a3)、m(b1)、m(b2)、m(b3)、m(a4)的识别信息以外,还获取成为观察者A进行的规定的再现操作的对象的图像m(t1)~m(t2)、m(t3)~m(t4)的识别信息。在此,1≤t1<t2<t3<t4≤N。
然后,在接下来的步骤S123~S128中,根据这些识别信息进行处理。此外,针对成为规定的再现操作的对象的图像获取到的前后图像与针对捕获图像获取到的前后图像的个数既可以相同也可以不同。在图17中,将针对图像m(t1)~m(t2)、m(t3)~m(t4)获取到的前图像和后图像的个数设为零个。其结果,将图像群m(a1-k)~m(a1+k)、m(a2-k)~m(b2+k)、m(t1)~m(t2)、m(b3-k)~m(t4)以及m(a4-k)~m(a4+k)作为备份对象图像提取出来,并生成包含这些图像群的运动图像。
如以上说明那样,根据本实施方式7,能够将反复再现的图像、降低帧频地再现的图像、逐帧播放再现的图像等被认为由用户仔细进行了观察的图像作为备份进行保存。
(变形例3)
接着,对本发明的实施方式1~7的变形例3进行说明。
在上述实施方式1~7中,通过使用设置有一个摄像元件且能够在壳体的一端侧进行拍摄的胶囊型内窥镜2,能够在一次检查中获取按时间顺序排列的一系列图像。然而,也可以使用设置有两个摄像元件且能够在壳体的两端侧(例如前方侧和后方侧)进行拍摄的胶囊型内窥镜。在该情况下,在一次检查中获取由两个摄像元件分别拍摄到的一组两个的图像群,因此只要根据多个用户对一组两个的图像群中的每个图像群进行观察的结果将一组两个的运动图像作为备份而生成即可。
(变形例4)
接着,对本发明的实施方式1~7的变形例4进行说明。
在上述实施方式1~7中,在将多个运动图像(例如在图8的情况下为运动图像M1~M4)作为备份而生成的情况下,将这些运动图像保持原样地进行保存。然而,也可以将这些运动图像按时间顺序连接起来,并作为一个运动图像进行保存。
(变形例5)
接着,对本发明的实施方式1~7的变形例5进行说明。
在上述实施方式1~7中,使通过检查获取到的一系列图像存储于图像存储部131,使根据该一系列图像生成的备份用的运动图像存储于备份图像存储部17。然而,只要是在生成备份的运动图像之后,就可以通过用户的选择来从图像存储部131中删除原来的一系列图像。
以上说明的本发明并不限定于实施方式1~7以及变形例1~5,能够根据规范等进行各种变形,例如,也可以以从上述实施方式1~7以及变形例1~5所示的所有结构要素中去除几个结构要素的方式形成。根据上述记载,显而易见的是,在本发明的范围内能够实施其它各种实施方式。
附图标记说明
1:图像管理装置;2:胶囊型内窥镜;3:接收装置;3a:显示部;3b:操作按钮;3c:托架;4:接收天线单元;4a~4h:接收天线;6:被检体;11:输入部;12:图像数据获取部;13:存储部;14:图像处理部;15:显示部;16:控制部;17:备份图像存储部;131:图像存储部;132:检查数据库(DB)存储部;133:操作信息存储部;161:显示控制部;162:图像提取部。
Claims (12)
1.一种图像管理装置,对通过检查获取到的一系列图像进行管理,其特征在于,具备:
第一图像存储部,其按每个检查来存储与上述一系列图像对应的图像数据;
显示部,其显示上述一系列图像;
输入部,其根据来自外部的操作来输入与对上述显示部中显示的图像进行的操作有关的信号;
操作信息存储部,其将表示对上述显示部中正在显示的图像进行的规定的操作的信息与成为该规定的操作的对象的图像相关联地存储;
图像提取部,其基于上述操作信息存储部中存储的与表示上述规定的操作的信息相关联的至少一个图像,来从上述一系列图像中提取至少一个图像群;以及
第二图像存储部,其存储与由上述图像提取部提取出的上述至少一个图像群对应的图像数据,
其中,上述操作信息存储部将表示由多个用户经由上述输入部对一个检查中包含的上述一系列图像进行的操作的上述规定的操作的信息,按每个用户,与成为该操作的对象的图像相关联地存储,
上述图像提取部基于上述一个检查中包含的与表示由上述多个用户进行的上述规定的操作的信息相关联的上述至少一个图像,来提取上述至少一个图像群。
2.根据权利要求1所述的图像管理装置,其特征在于,
上述图像提取部将排列在与表示上述规定的操作的信息相关联的上述至少一个图像的各个图像之前和之后的规定数量的图像作为一个图像群提取出来。
3.根据权利要求2所述的图像管理装置,其特征在于,
在表示上述规定的操作的信息与多个图像相关联的情况下,上述图像提取部将针对上述多个图像分别提取出的多个图像群中的、包含重复的图像的两个以上的图像群合并为一个图像群。
4.根据权利要求2所述的图像管理装置,其特征在于,
上述图像提取部从基于与表示上述规定的操作的信息相关联的上述至少一个图像而提取出的至少一个图像群中包含的多个图像中,提取包含在上述多个用户间重复的图像的图像群。
5.根据权利要求1所述的图像管理装置,其特征在于,
还具备图像处理部,该图像处理部对上述一系列图像中包含的各图像进行图像处理,基于该图像处理的结果对具有规定的特性的图像附加标记,
上述显示部显示由上述图像处理部附加了标记的至少一个图像,
在上述多个用户的全部对由上述图像处理部附加了标记的至少一个图像进行了删除该标记的操作的情况下,上述图像提取部基于由上述图像处理部附加了标记的至少一个图像中的除被进行了删除该标记的操作的图像以外的图像以及与表示由上述多个用户进行的上述规定的操作的信息相关联的至少一个图像,来提取上述至少一个图像群。
6.根据权利要求5所述的图像管理装置,其特征在于,
上述图像提取部还基于由上述图像处理部附加了标记的至少一个图像,来从上述一系列图像中提取至少一个第二图像群,
上述第二图像存储部还存储与上述至少一个第二图像群对应的图像数据。
7.根据权利要求5所述的图像管理装置,其特征在于,
上述图像提取部还基于由上述图像处理部附加了标记的至少一个图像,来从上述一系列图像中提取至少一个第二图像群,
上述第二图像存储部存储与上述至少一个第二图像群对应的图像数据,将与上述至少一个图像群对应的图像数据以覆盖与该第二图像群对应的图像数据的方式进行存储。
8.根据权利要求1所述的图像管理装置,其特征在于,
上述图像提取部根据所提取出的上述至少一个图像群来生成运动图像,将所生成的该运动图像存储于上述第二图像存储部。
9.根据权利要求1所述的图像管理装置,其特征在于,
上述一系列图像是通过胶囊型内窥镜获取到的一系列体内图像,该胶囊型内窥镜被导入被检体内,在该被检体内一边移动一边进行拍摄。
10.根据权利要求1所述的图像管理装置,其特征在于,
上述规定的操作是捕获图像的操作。
11.根据权利要求1所述的图像管理装置,其特征在于,
上述规定的操作是对图像附加标签、注释或注解的操作。
12.根据权利要求1所述的图像管理装置,其特征在于,
上述规定的操作是使图像暂时停止地显示的操作、使图像反复显示的操作、使图像降低帧频地显示的操作或使图像逐帧播放地显示的操作。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013180020 | 2013-08-30 | ||
JP2013-180020 | 2013-08-30 | ||
PCT/JP2014/067569 WO2015029584A1 (ja) | 2013-08-30 | 2014-07-01 | 画像管理装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN105142493A true CN105142493A (zh) | 2015-12-09 |
Family
ID=52586163
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201480022737.1A Pending CN105142493A (zh) | 2013-08-30 | 2014-07-01 | 图像管理装置 |
Country Status (5)
Country | Link |
---|---|
US (1) | US9411932B2 (zh) |
EP (1) | EP3040016A4 (zh) |
JP (1) | JP5784859B2 (zh) |
CN (1) | CN105142493A (zh) |
WO (1) | WO2015029584A1 (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107231507A (zh) * | 2016-03-25 | 2017-10-03 | 奥林巴斯株式会社 | 摄像装置和摄像方法 |
CN112534804A (zh) * | 2018-09-26 | 2021-03-19 | 欧姆龙株式会社 | 图像处理系统、图像处理装置、图像处理方法以及图像处理程序 |
Families Citing this family (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6637291B2 (ja) * | 2015-11-05 | 2020-01-29 | オリンパス株式会社 | 医療支援システムおよび検査画像検索方法 |
US10638084B2 (en) * | 2017-03-28 | 2020-04-28 | Olympus Corporation | Endoscope apparatus, endoscope system, and endoscope image recording method |
WO2018216617A1 (ja) * | 2017-05-25 | 2018-11-29 | 日本電気株式会社 | 情報処理装置、制御方法、及びプログラム |
JP2019030502A (ja) * | 2017-08-08 | 2019-02-28 | オリンパス株式会社 | 内視鏡画像観察支援システム |
JP7091349B2 (ja) * | 2017-09-07 | 2022-06-27 | 富士フイルム株式会社 | 診断支援システム、内視鏡システム、プロセッサ、及び診断支援システムの作動方法 |
EP3539455A1 (fr) * | 2018-03-14 | 2019-09-18 | Sorbonne Université | Procédé pour déterminer automatiquement la qualité de visualisation des images en vidéocapsule endoscopique |
CN111936032B (zh) | 2018-04-13 | 2024-03-26 | 富士胶片株式会社 | 图像处理装置、内窥镜系统及图像处理方法 |
CN113015476A (zh) * | 2018-10-19 | 2021-06-22 | 吉温成象有限公司 | 用于生成和显示体内图像流的研究的系统和方法 |
WO2020236683A1 (en) * | 2019-05-17 | 2020-11-26 | Given Imaging Ltd. | Systems, devices, apps, and methods for capsule endoscopy procedures |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20080232702A1 (en) * | 2005-06-27 | 2008-09-25 | Seiichiro Kimoto | Image display apparatus |
CN102096917A (zh) * | 2010-12-22 | 2011-06-15 | 南方医科大学 | 胶囊内窥镜冗余图像数据的自动剔除方法 |
CN102256533A (zh) * | 2009-07-29 | 2011-11-23 | 奥林巴斯医疗株式会社 | 图像显示装置、解读辅助系统以及解读辅助程序 |
WO2012056802A1 (ja) * | 2010-10-26 | 2012-05-03 | Hoya株式会社 | 電子内視鏡用プロセッサ及び電子内視鏡装置 |
EP2557539A2 (en) * | 2011-07-29 | 2013-02-13 | Olympus Corporation | Image processing apparatus, image processing method, and image processing program |
CN103269635A (zh) * | 2011-08-12 | 2013-08-28 | 奥林巴斯医疗株式会社 | 图像管理装置、方法和读片用程序 |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3810381B2 (ja) * | 2003-04-25 | 2006-08-16 | オリンパス株式会社 | 画像表示装置、画像表示方法および画像表示プログラム |
EP1790277B1 (en) * | 2004-08-23 | 2018-11-21 | Olympus Corporation | Image display device and image display program |
JP2007075163A (ja) * | 2005-09-09 | 2007-03-29 | Olympus Medical Systems Corp | 画像表示装置 |
US8169472B2 (en) * | 2005-08-22 | 2012-05-01 | Olympus Corporation | Image display apparatus with interactive database |
EP1918870A4 (en) * | 2005-08-22 | 2012-05-02 | Olympus Corp | IMAGE DISPLAY DEVICE |
AU2006285699B2 (en) * | 2005-09-02 | 2010-05-27 | Olympus Corporation | Portable simplified image display device and receiving system |
US20140121474A1 (en) * | 2011-04-26 | 2014-05-01 | The Trustees Of Columbia University In The City Of New York | Apparatus, method, and computer-accessible medium for transform analysis of biomedical data |
-
2014
- 2014-07-01 EP EP14841243.0A patent/EP3040016A4/en not_active Withdrawn
- 2014-07-01 CN CN201480022737.1A patent/CN105142493A/zh active Pending
- 2014-07-01 WO PCT/JP2014/067569 patent/WO2015029584A1/ja active Application Filing
- 2014-07-01 JP JP2015503391A patent/JP5784859B2/ja active Active
-
2015
- 2015-10-27 US US14/923,691 patent/US9411932B2/en active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20080232702A1 (en) * | 2005-06-27 | 2008-09-25 | Seiichiro Kimoto | Image display apparatus |
CN102256533A (zh) * | 2009-07-29 | 2011-11-23 | 奥林巴斯医疗株式会社 | 图像显示装置、解读辅助系统以及解读辅助程序 |
WO2012056802A1 (ja) * | 2010-10-26 | 2012-05-03 | Hoya株式会社 | 電子内視鏡用プロセッサ及び電子内視鏡装置 |
CN102096917A (zh) * | 2010-12-22 | 2011-06-15 | 南方医科大学 | 胶囊内窥镜冗余图像数据的自动剔除方法 |
EP2557539A2 (en) * | 2011-07-29 | 2013-02-13 | Olympus Corporation | Image processing apparatus, image processing method, and image processing program |
CN103269635A (zh) * | 2011-08-12 | 2013-08-28 | 奥林巴斯医疗株式会社 | 图像管理装置、方法和读片用程序 |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107231507A (zh) * | 2016-03-25 | 2017-10-03 | 奥林巴斯株式会社 | 摄像装置和摄像方法 |
CN107231507B (zh) * | 2016-03-25 | 2020-12-29 | 奥林巴斯株式会社 | 摄像装置和摄像方法 |
CN112534804A (zh) * | 2018-09-26 | 2021-03-19 | 欧姆龙株式会社 | 图像处理系统、图像处理装置、图像处理方法以及图像处理程序 |
US11671565B2 (en) | 2018-09-26 | 2023-06-06 | Omron Corporation | Image processing system, image processing device, image processing method, and non-transitory computer readable medium storing program |
Also Published As
Publication number | Publication date |
---|---|
US20160048637A1 (en) | 2016-02-18 |
EP3040016A4 (en) | 2017-04-19 |
US9411932B2 (en) | 2016-08-09 |
JPWO2015029584A1 (ja) | 2017-03-02 |
JP5784859B2 (ja) | 2015-09-24 |
EP3040016A1 (en) | 2016-07-06 |
WO2015029584A1 (ja) | 2015-03-05 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN105142493A (zh) | 图像管理装置 | |
KR100868339B1 (ko) | 의료용 영상 데이터의 디스플레이 방법과 의료용 영상데이터를 이용한 캡쳐 영상 제공 시스템 및 그 방법 | |
US10282517B2 (en) | Apparatus, method, and non-transitory computer-readable medium for supporting viewing examination images | |
US20020171669A1 (en) | System and method for annotation on a moving image | |
JP3041015B2 (ja) | 内視鏡画像ファイルシステム | |
JP6091137B2 (ja) | 画像処理装置、画像処理システム、画像処理方法およびプログラム | |
CN102915323B (zh) | 检查图像显示装置以及检查图像显示方法 | |
US20060106284A1 (en) | Communication method of storage device, image storage system and image storage device | |
US20090051691A1 (en) | Image display apparatus | |
JP2006095304A (ja) | 生体内でキャプチャされた画像ストリームを編集するシステムおよび方法 | |
US20080232702A1 (en) | Image display apparatus | |
CN101257838A (zh) | 图像显示装置 | |
US20140306992A1 (en) | Image processing apparatus, image processing system and image processing method | |
CN104640496A (zh) | 医疗装置 | |
JP5856931B2 (ja) | 医療画像管理装置、医療画像管理方法、医療画像管理プログラム | |
WO2018142664A1 (ja) | 内視鏡画像観察支援システム | |
JP2013152701A (ja) | 画像処理装置、画像処理システム、画像処理方法 | |
JP5337374B2 (ja) | 医用情報再生表示システム | |
CN105578964A (zh) | 图像显示控制装置及其动作方法以及图像显示控制程序 | |
JP6335412B1 (ja) | 内視鏡画像観察支援システム | |
JP6425868B1 (ja) | 内視鏡画像観察支援システム、内視鏡画像観察支援装置、内視鏡画像観察支援方法 | |
JP2007296079A (ja) | 医用画像処理装置及びプログラム | |
CN109310300A (zh) | 内窥镜装置、信息处理装置以及程序 | |
JP6637291B2 (ja) | 医療支援システムおよび検査画像検索方法 | |
JP2010200935A (ja) | マルチフレーム画像の圧縮装置、方法、及びプログラム、並びに読影システム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
AD01 | Patent right deemed abandoned | ||
AD01 | Patent right deemed abandoned |
Effective date of abandoning: 20180126 |