CN103140160B - 图像管理装置、图像管理装置的工作方法以及胶囊型内窥镜系统 - Google Patents

图像管理装置、图像管理装置的工作方法以及胶囊型内窥镜系统 Download PDF

Info

Publication number
CN103140160B
CN103140160B CN201280003184.6A CN201280003184A CN103140160B CN 103140160 B CN103140160 B CN 103140160B CN 201280003184 A CN201280003184 A CN 201280003184A CN 103140160 B CN103140160 B CN 103140160B
Authority
CN
China
Prior art keywords
image
additional information
icon
label
management apparatus
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201280003184.6A
Other languages
English (en)
Other versions
CN103140160A (zh
Inventor
西山武志
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Olympus Corp
Original Assignee
Olympus Medical Systems Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Olympus Medical Systems Corp filed Critical Olympus Medical Systems Corp
Publication of CN103140160A publication Critical patent/CN103140160A/zh
Application granted granted Critical
Publication of CN103140160B publication Critical patent/CN103140160B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002Operational features of endoscopes
    • A61B1/00004Operational features of endoscopes characterised by electronic signal processing
    • A61B1/00009Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
    • A61B1/000094Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope extracting biological structures
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002Operational features of endoscopes
    • A61B1/00039Operational features of endoscopes provided with input arrangements for the user
    • A61B1/0004Operational features of endoscopes provided with input arrangements for the user for electronic operation
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002Operational features of endoscopes
    • A61B1/00043Operational features of endoscopes provided with output arrangements
    • A61B1/00045Display arrangement
    • A61B1/0005Display arrangement combining images e.g. side-by-side, superimposed or tiled
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/04Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
    • A61B1/041Capsule endoscopes for imaging
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0012Biomedical image inspection
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00ICT specially adapted for the handling or processing of medical images
    • G16H30/20ICT specially adapted for the handling or processing of medical images for handling medical images, e.g. DICOM, HL7 or PACS
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16HHEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00ICT specially adapted for the handling or processing of medical images
    • G16H30/40ICT specially adapted for the handling or processing of medical images for processing medical images, e.g. editing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00Indexing scheme for image data processing or generation, in general
    • G06T2200/24Indexing scheme for image data processing or generation, in general involving graphical user interfaces [GUIs]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10068Endoscopic image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30004Biomedical image processing
    • G06T2207/30028Colon; Small intestine
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2219/00Indexing scheme for manipulating 3D models or images for computer graphics
    • G06T2219/004Annotating, labelling

Abstract

本发明提供能够通过简单的作业对胶囊型内窥镜所取得的体内图像等图像赋予标签的图像管理装置等。图像管理装置具有:输入部(10),其受理与来自外部的操作对应的信号的输入;存储部(14),其存储对图像赋予的多种标签;图像处理部(13),其计算各图像的特征量;图像选择部(17),其根据由输入部受理的信号来选择图像;标签提取部(18),其根据上述特征量,从多种标签中提取1种以上的标签;显示控制部(19),其生成与上述1种以上的标签对应的1个以上的图标,并将其显示在画面中;以及标签赋予部(20),其在输入了将图像选择部选择出的图像和上述1个以上的图标中的任意一方关联起来的操作信号的情况下,对选择出的图像赋予对应于与该图像相关联的图标的标签。

Description

图像管理装置、图像管理装置的工作方法以及胶囊型内窥镜系统
技术领域
本发明涉及对导入被检体内的胶囊型内窥镜所取得的体内图像进行显示的图像管理装置、方法、程序以及胶囊型内窥镜系统。
背景技术
在使用导入被检体内对体内进行摄像的胶囊型内窥镜进行被检体的诊察时,进行如下作业:通过虚拟动态图像或静态图像一览地对胶囊型内窥镜所取得的体内图像群进行观察,选出存在异常结果的体内图像。该作业被称为读影。
通常,用户(例如读影医生)在发现了存在异常结果的体内图像的情况下,对图像赋予标签等附加信息进行管理,使得在此后的诊断时能够提取该体内图像。以往,通过对每个体内图像进行文本输入来赋予该标签。但是,由于在1次检查中通过摄像而得到的体内图像群例如大约为6万张(大约8小时)那么多,所以,标签赋予作业的负担非常大。
因此,寻求能够简单地对各体内图像赋予标签而不用逐一进行文本输入等操作的技术。例如在专利文献1中公开了如下技术:在画面上通过鼠标拖拽等方法选择图像,通过将其拖放到分类项目的图标上,对图像进行分类。
现有技术文献 
专利文献
专利文献1:日本特开平11-132932号公报
发明内容
发明要解决的课题
但是,在体内图像的情况下,对应于异常结果的种类等,标签的种类较多。因此,在应用上述专利文献1所公开的技术的情况下,用户必须从画面显示的多个图标中选 择与应该对各体内图像赋予的标签对应的图标,作业负担依然很大。
本发明是鉴于上述情况而完成的,其目的在于,提供能够通过简单的作业对胶囊型内窥镜所取得的体内图像等图像赋予附加信息的图像管理装置、图像管理方法、图像管理程序和胶囊型内窥镜系统。
用于解决课题的手段
为了解决上述课题并实现目的,本发明的图像管理装置的特征在于,具有:输入部,其受理与来自外部的操作对应的信号的输入;存储部,其存储对多个图像赋予的多种附加信息;运算部,其计算所述多个图像各自的特征量;图像选择部,其根据由所述输入部受理的信号,从所述多个图像中选择图像;附加信息提取部,其根据所述特征量,从所述多种附加信息中提取一种以上的附加信息;显示控制部,其生成与所述一种以上的附加信息对应的一个以上的图标,并将该图标显示在画面中;以及附加信息赋予部,其在输入了将所述图像选择部选择出的图像与所述一个以上的图标中的任意一方关联起来的操作信号的情况下,针对所述选择出的图像,赋予对应于与该图像相关联的图标的附加信息。
在上述图像管理装置中,其特征在于,所述附加信息提取部按照根据所述特征量对所述多个图像进行分类而得到的每个组,提取所述一种以上的附加信息。
在上述图像管理装置中,其特征在于,所述图像是医用图像,所述组是脏器组。
在上述图像管理装置中,其特征在于,所述显示控制部在所述画面中显示表示与所述多个图像对应的时间或空间的指标的条以及指示该条上的点的滑块,所述附加信息提取部根据与所述滑块所指示的点对应的时间或空间处的脏器组,提取所述一种以上的附加信息。
在上述图像管理装置中,其特征在于,所述附加信息提取部提取与所述图像选择部选择出的图像的所述特征量对应的所述一种以上的附加信息。
在上述图像管理装置中,其特征在于,所述显示控制部按照与赋予了对应的附加信息相应的频度的方式,在画面中显示所述一个以上的图标。
在上述图像管理装置中,其特征在于,所述显示控制部按照与所述多个图像的特征量相应的方式,在画面中显示所述一个以上的图标。
在上述图像管理装置中,其特征在于,所述显示控制部将对所述选择出的图像赋予的附加信息与该图像相关联地显示在画面中。
上述图像管理装置的特征在于,还具有:附加信息选择部,其选择与根据所述输入部所受理的信号而从所述画面显示的所述一个以上的图标中选择出的图标对应的附加信息;以及图像提取部,其从所述多个图像中提取赋予了所述附加信息选择部选择出的附加信息的图像。
在上述图像管理装置中,其特征在于,所述图像是医用图像,所述附加信息是与所述医用图像中反映出的病变对应的病变标签。
本发明的图像管理方法的特征在于,包括以下步骤:输入步骤,受理与来自外部的操作对应的信号的输入;运算步骤,计算多个图像各自的特征量;附加信息提取步骤,根据所述特征量,从对所述多个图像赋予的预先存储在存储部中的多种附加信息中提取一种以上的附加信息;显示控制步骤,生成与所述一种以上的附加信息对应的一个以上的图标,并将该图标显示在画面中;图像选择步骤,根据在所述输入步骤中受理的信号,从所述多个图像中选择图像;以及附加信息赋予步骤,在输入了将在所述图像选择步骤中选择出的图像与所述一个以上的图标中的任意一方关联起来的操作信号的情况下,针对所述选择出的图像,赋予对应于与该图像相关联的图标的附加信息。
本发明的图像管理程序的特征在于,使计算机执行以下步骤:输入步骤,受理与来自外部的操作对应的信号的输入;运算步骤,计算多个图像各自的特征量;附加信息提取步骤,根据所述特征量,从对所述多个图像赋予的预先存储在存储部中的多种附加信息中提取一种以上的附加信息;显示控制步骤,生成与所述一种以上的附加信息对应的一个以上的图标,并将该图标显示在画面中;图像选择步骤,根据在所述输入步骤中受理的信号,从所述多个图像中选择图像;以及附加信息赋予步骤,在输入了将在所述图像选择步骤中选择出的图像与所述一个以上的图标中的任意一方关联起来的操作信号的情况下,针对所述选择出的图像,赋予对应于与该图像相关联的图标的附加信息。
本发明的胶囊型内窥镜系统的特征在于,具有:胶囊型内窥镜,其被导入被检体的体内进行摄像,生成与该被检体的体内图像对应的图像数据;接收装置,其通过与所述胶囊型内窥镜之间的无线通信来接收由所述胶囊型内窥镜生成的图像数据;以及上述的图像管理装置。
发明效果
根据本发明,由于在画面中显示与根据图像的特征量而提取出的附加信息对应的图标,所以,用户仅进行在画面上将期望图像和图标相关联的操作,就能够简单且高效地对图像赋予附加信息。
附图说明
图1是示出本发明的实施方式1的胶囊型内窥镜系统的结构的示意图。
图2是示出图1所示的图像管理装置的结构的框图。
图3是示出实施方式1的读影画面的显示例的示意图。
图4是示出实施方式1的读影画面的显示例的示意图。
图5是示出实施方式1的读影画面的显示例的示意图。
图6是示出变形例1-1的读影画面的显示例的示意图。
图7是示出变形例1-2的读影画面的显示例的示意图。
图8是示出变形例1-3的读影画面的显示例的示意图。
图9是示出变形例1-4的读影画面的显示例的示意图。
图10是示出变形例1-6的读影画面的显示例的示意图。
图11是示出变形例1-7的读影画面的显示例的示意图。
图12是示出变形例1-8的报告生成画面的显示例的示意图。
图13是示出本发明的实施方式2的图像管理装置的结构的框图。
图14是示出实施方式2的读影画面的显示例的示意图。
图15是示出实施方式2的读影画面的显示例的示意图。
图16是示出实施方式2的读影画面的显示例的示意图。
图17是示出变形例2-1的读影画面的显示例的示意图。
图18是示出变形例2-2的读影画面的显示例的示意图。
图19是示出变形例2-3的读影画面的显示例的示意图。
图20是示出变形例2-4的概述(静态图像一览显示)画面的显示例的示意图。
图21是示出变形例2-7的动态图像用的读影画面的显示例的示意图。
图22是示出变形例2-9的经过观察画面的显示例的示意图。
图23是示出变形例2-10的图册画面的显示例的示意图。
图24是示出实施方式3的读影画面的显示例的示意图。
图25是示出本发明的实施方式4的图像管理装置的结构的框图。
图26是实施方式4的读影画面的显示例。
具体实施方式
下面,参照附图对本发明的实施方式的胶囊型内窥镜系统进行说明。另外,在以下的说明中,作为一例,例示了包含被导入被检体的体内对体内图像进行摄像的胶囊型内窥镜的系统,但是,该实施方式并不限定本发明。
(实施方式1)
图1是示出本发明的实施方式1的胶囊型内窥镜系统的概略结构例的示意图。图1所示的内窥镜系统具有:胶囊型内窥镜2,其被导入被检体1的体内,对通过进行摄像而取得的图像数据进行无线发送;接收装置3,其接收从胶囊型内窥镜2无线发送的图像数据;以及图像管理装置5,其对基于从接收装置3经由托架4转送的图像数据的体内图像进行管理。
胶囊型内窥镜2内置有对被检体内进行照明的照明元件、使来自被检体内的反射光会聚的会聚透镜、将所接受的光转换为电信号(摄像信号)的CCD等摄像元件、构成对摄像元件所取得的摄像信号进行处理的信号处理部的IC、以及发送用无线天线等的各种部件。胶囊型内窥镜2从被检体1的口中吞入后,通过脏器的蠕动运动等在被检体1的消化道内移动,并且以规定时间间隔(例如0.5秒间隔)依次对活体部位(食道、胃、小肠和大肠等)进行摄像。然后,通过对摄像而得到的摄像信号实施规定信号处理,生成图像数据,将该图像数据与该图像数据的关联信息一起依次无线发送到接收装置3。该关联信息包括为了对胶囊型内窥镜2的个体进行识别而分配的识别信息(例如序列号)等。
接收装置3经由包含多个(图1中为8个)接收天线30a~30h的天线单元30,接收从胶囊型内窥镜2无线发送的图像数据和关联信息。各接收天线30a~30h例如使用环形天线而实现,配置在被检体1的体外表面上的规定位置(例如与胶囊型内窥镜2的通过路径即被检体1内的各脏器对应的位置)。
接收装置3在通过胶囊型内窥镜2进行摄像的期间(例如胶囊型内窥镜2从被检体1的口中导入、通过消化道内到被排出为止的期间)内由被检体1携带。在该期间内,接收装置3进一步对经由天线单元30接收到的图像数据附加各接收天线30a~ 30h中的接收强度信息或接收时刻信息等关联信息,将图像数据和关联信息存储在内置存储器中。在胶囊型内窥镜2的摄像结束后,从被检体1上取下接收装置3,将其放置在与图像管理装置5的USB端口等连接的托架4上。由此,接收装置3与图像管理装置5连接,存储在内置存储器中的图像数据和关联信息被转送到图像管理装置5。
另外,向图像管理装置5取入图像数据等不限于经由上述托架4的方法。例如,在对服务器上保存的图像数据等进行处理的情况下,也可以经由与服务器连接的通信装置取入图像数据等,在对CD-R、DVD-R等移动型记录介质中记录的图像数据等进行处理的情况下,例如可以通过内置于图像管理装置5中的读取装置而从记录介质中读入图像数据等。或者,也可以在图像管理装置5上连接医用观察装置,从该医用观察装置直接取入图像数据等。
图2是示出本发明的实施方式1的图像管理装置的结构的框图。图2所示的图像管理装置5具有输入部10、接口(I/F)部11、临时存储部12、图像处理部13、存储部14、显示部15、对这些各部进行控制的控制部16。
输入部10例如通过键盘、鼠标、触摸面板、各种开关等输入器件而实现。输入部10受理与用户的操作对应的操作信号的输入,经由接口部11输入到控制部16。
接口部11包括USB端口等与外部设备(从移动型记录介质中读取图像数据的读取装置等)连接的连接端口,受理表示经由输入部10输入的各种命令和信息、经由USB端口等输入的图像数据及其关联信息的信号的输入等。
临时存储部12通过DRAM、SRAM等易失性存储器而实现,临时存储经由接口部11输入的图像数据及其关联信息。或者,也可以代替临时存储部12而设置HDD、MO、CD-R、DVD-R等记录介质和驱动该记录介质的驱动装置,在上述记录介质中临时存储从接口部11输入的图像数据。
图像处理部13是如下的运算部:对存储在临时存储部12中的图像数据实施白平衡处理、去马赛克、颜色转换、浓度转换(伽马转换等)、平滑化(噪声去除等)、清晰化(边缘强调等)等图像处理,生成一连串的体内图像,并且,计算各体内图像的特征量。作为由图像处理部13计算出的特征量,使用体内图像的亮度值、颜色特征量(RGB值、色相值等)、构造特征量(边缘量等)以及这些特征量的分布等。
存储部14通过闪存、RAM、ROM等半导体存储器、或HDD、MO、CD-R、DVD-R 等记录介质和驱动该记录介质的驱动装置等而实现。存储部14存储用于使图像管理装置5进行动作并使图像管理装置5执行各种功能的程序、程序的执行过程中使用的数据(辞典数据等)。具体而言,存储部14具有:图像数据存储部14a,其存储与实施了图像处理后的体内图像对应的图像数据;特征量存储部14b,其存储由图像处理部13计算出的体内图像的特征量;标签存储部14c,其存储多种对体内图像赋予的附加信息即标签;以及程序存储部14d,其存储使控制部16执行用于对体内图像赋予标签来进行管理的一连串处理的图像管理程序。
图像数据存储部14a可以按照时间序列存储体内图像,也可以根据控制部16的控制而将体内图像分类为多个组进行存储。例如,在根据图像处理部13计算出的颜色特征量确定按照时间序列排列体内图像时的脏器的边界(食道与胃的边界、胃与小肠的边界、小肠与大肠的边界等)的情况下,图像数据存储部14a根据脏器的边界将一连串的体内图像分类为脏器组并进行存储。这里,脏器的边界可以是按照表示根据胶囊型内窥镜2在被检体内移动时的规定通过位置(例如食道的入口或胃的入口)而计算出的消化道的长度的距离(以下也称为移动距离)的顺序排列体内图像时的边界、根据胶囊型内窥镜2在被检体内移动的轨迹排列体内图像时的边界这样的基于空间指标的边界。另外,例如,根据图像数据的关联信息(接收强度信息和接收时刻信息),估计取得各体内图像的时刻的胶囊型内窥镜2的位置,通过连结这些位置而取得胶囊型内窥镜2的轨迹。
标签存储部14c存储的标签是由在医学上具有意义的关键字构成的信息,包括病名(例如胃溃疡、胃癌、溃疡性大肠炎)、病变的症状名(例如出血、血管形成异常、溃烂、溃疡、息肉、癌)等。或者,作为标签,也可以使用根据颜色特征量而分类的脏器标签(例如胃、小肠、大肠)。
显示部15通过CRT显示器、液晶显示器、EL显示器等显示装置而实现。显示部15在控制部16的控制下,以规定形式在画面中显示体内图像等。
控制部16通过CPU等硬件而实现,通过读入存储在程序存储部14d中的各种程序,根据经由接口部11输入的图像数据和各种操作信号,针对构成图像管理装置5的各部进行指示和数据转送等,统一对图像管理装置5全体的动作进行控制。具体而言,控制部16包括图像选择部17、标签提取部18、显示控制部19、标签赋予部20。
图像选择部17根据从输入部10输入的信号,从与存储在图像数据存储部14a中 的图像数据对应的多个体内图像内选择体内图像。
标签提取部18根据存储在特征量存储部14b中的特征量,从存储在标签存储部14c中的多种标签内提取1种以上的标签,作为对图像选择部17所选择出的体内图像赋予的标签候选。更详细地讲,标签提取部18判别与选择出的体内图像对应的脏器,提取能够按照每个脏器而生成的病变标签。例如,在选择出的体内图像与胃对应的情况下,提取溃疡标签、溃烂标签、出血标签和癌标签。并且,在选择出的体内图像与小肠对应的情况下,提取出血标签、血管形成异常标签和肿瘤标签。进而,在选择出的体内图像与大肠对应的情况下,提取出血标签、癌标签和息肉标签。
此时,标签提取部18也可以根据取得所选择出的体内图像的时间(摄像时间)来判别对应的脏器,还可以根据选择出的体内图像的特征量来判别对应的脏器。或者,标签提取部18可以根据与选择出的体内图像对应的胶囊型内窥镜2的移动距离来判别对应的脏器,还可以根据取得所选择出的体内图像的胶囊型内窥镜2的轨迹来判别对应的脏器。进而,可以在显示部15显示的读影画面(后述)中设置能够由用户进行输入的脏器信息的输入栏,标签提取部18根据通过用户的判断而在该输入栏中输入的脏器信息来判别对应的脏器。
显示控制部19根据存储在图像数据存储部14a中的图像数据和其它各种信息,生成以规定形式配置体内图像等的画面,并显示在显示部15中。例如,显示控制部19生成与标签提取部18所提取出的病变标签对应的标签盒的图标,将其显示在显示部15中。
在从输入部10输入了将图像选择部17所选择出的体内图像和显示部15显示的标签盒的图标关联起来的信号的情况下,标签赋予部20对该选择出的体内图像赋予与相关联的图标对应的标签。
这种图像管理装置5例如通过工作站或个人计算机而实现。
接着,参照图3~图5对图像管理装置5的动作进行说明。图3~图5是示出显示部15显示的读影画面的显示例的示意图。
图3所示的读影画面100包括:患者信息区域101,其显示作为患者的被检体1的识别信息;诊察信息区域102,其显示针对被检体1进行的诊察的识别信息;主显示区域103,其依次再现一连串的体内图像;再现操作按钮群104,其受理主显示区域103中显示的体内图像103a和103b的再现操作的输入;缩略图区域105,其显示 缩小了体内图像的图像尺寸后的缩小图像105a、105b、…作为缩略图;时间条107,其表示与一连串的体内图像对应的时间(例如摄像时间)的指标;滑块106,其指示该时间条上的点;以及标签盒显示区域108,其显示与对体内图像赋予的病变标签对应的标签盒的图标111a~111d。
时间条107是与从胶囊型内窥镜2被导入被检体1内到被排出为止的时间对应的尺度,对应于摄像时间按照每个脏器区分颜色进行显示(图3中通过图案的差异来显示颜色的差异)。具体而言,例如,时间条107上的区域107a、107b、107c、107d分别对应于食道、胃、小肠、大肠。另外,摄像时间表示从胶囊型内窥镜2被导入被检体1内的时刻起的经过时间。滑块106指示与主显示区域103中正在显示的体内图像对应的时间条107上的点。
另外,也可以代替显示时间条107而显示表示与一连串体内图像对应的空间(例如摄像部位)的指标的条。例如,可以是表示根据胶囊型内窥镜2在被检体内移动时的规定通过位置(例如食道的入口或胃的入口)而计算出的消化道的长度的距离条、描绘胶囊型内窥镜2移动的轨迹的胶囊轨迹图这样的空间指标。并且,滑块106可以指示上述距离条或上述胶囊轨迹图上的点。
在缩略图区域105中,例如缩小显示通过对主显示区域103进行指针操作而选择出的体内图像的捕捉图像。在图3中,各缩小图像105a、105b、…与表示摄像时间的时间条107上的各个点进行连线显示。
在标签盒显示区域108中,显示基于与包含滑块106指示的点(对应于体内图像103a、103b的摄像时间)的区域对应的脏器的图标。例如,在图3中,由于滑块106指示与胃对应的区域107b内,所以,在标签盒显示区域108中,对应于与胃有关的病变标签而显示表示肿瘤的图标111a、表示溃烂的图标111b、表示出血的图标111c和表示癌的图标111d。
另外,在图3中,在主显示区域103中显示2个体内图像103a和103b,但是,主显示的图像也可以是1个,还可以是3个以上。并且,主显示的体内图像可以是动态图像,也可以是静态图像。
如图4所示,通过进行利用鼠标或触摸面板等而使画面上的指针109移动的操作,当使指针109的前端指示的滑块106移动时,主显示区域103的图像被切换为与滑块106指示的摄像时间对应的体内图像103c、103d。并且,根据滑块106的移动,标签 提取部18从标签存储部14c中提取基于与滑块106指示的区域对应的脏器的病变标签。并且,显示控制部19使显示部15在标签盒显示区域108内显示与提取出的病变标签对应的图标。例如,图4示出滑块106指示与小肠对应的区域107c的状态。此时,在标签盒显示区域108中,对应于小肠而显示表示出血的图标112a、表示血管形成异常的图标112b和表示肿瘤的图标112c。
在这种读影画面100中,在进行了将缩略图区域105中显示的缩小图像105a、105b、…中的任意一方和图标112a~112c中的任意一方相关联的指针操作的情况下,标签赋予部20对与通过指针选择出的缩小图像对应的体内图像赋予和与其相关联的图标对应的病变标签。
例如,用户在判断为通过目视在缩小图像105d中识别到血管形成异常的情况下,拖拽缩小图像105d并将其拖放到表示血管形成异常的图标112b上(图4的虚线箭头)。与其对应地,标签赋予部20对与缩小图像105d对应的体内图像赋予血管形成异常标签,与图像数据相关联地存储在图像数据存储部14a中。
另外,将缩小图像和图标关联起来的操作不限于上述拖拽和拖放,例如,也可以是拖拽图标侧并将其拖放到缩小图像上或者在选择了缩小图像的状态下点击图标等操作。
然后,显示控制部19使显示部15在缩小图像的附近显示与对体内图像赋予的病变标签对应的文字信息。例如在图5所示的读影画面100中,在缩小图像105d下部的标签显示区域110中显示与血管形成异常标签对应的“血管形成异常”这样的文字信息。
如以上说明的那样,根据实施方式1,用户仅通过选择缩小图像105a、105b、…并拖拽和拖放到标签盒显示区域108内的图标上这样的简单操作,就能够对期望的体内图像赋予病变标签。并且,由于在标签盒显示区域108中仅显示与滑块106指示的脏器对应的图标,所以,用户能够容易地选择期望的图标。因此,能够大幅减轻标签赋予作业中的用户负担。
并且,根据实施方式1,由于对各体内图像赋予病变标签并进行管理,所以,例如能够在后面阶段(例如报告生成阶段)中容易地提取读影时关注的体内图像。
(变形例1-1)
也可以通过将主显示区域103中显示的体内图像103a、103b与期望的图标关联 起来的操作来进行上述标签赋予作业。具体而言,如图6所示,进行将主显示的体内图像103c、103d拖拽和拖放到标签盒显示区域108内的期望图标上等的操作。另外,图6示出将体内图像103c拖拽和拖放到表示出血的图标112a上的状况,该情况下,标签赋予部20对体内图像103a赋予出血标签。此时,显示控制部19可以在体内图像103a的附近显示与所赋予的病变标签对应的文字信息。例如,在图6中,在体内图像103b下部的标签显示区域113中显示与出血标签对应的“出血”这样的文字信息。或者,显示控制部19也可以在缩略图区域105中显示赋予了病变标签的体内图像的缩小图像,在缩小图像附近的标签显示区域110中显示与所赋予的病变标签对应的文字信息。
(变形例1-2)
可以根据由用户选择出的图像来设定标签盒显示区域108内显示的图标。例如,如图7所示,在通过画面上的指针操作而选择了缩小图像105f的情况下,标签提取部18根据与该缩小图像105f对应的体内图像的颜色特征量(或者,在预先赋予了脏器标签的情况下,根据脏器标签),提取对应的病变标签。并且,显示控制部19使显示部15显示与提取出的病变标签对应的图标。另外,图7示出如下状态:对应于表示大肠的缩小图像105f,在标签盒显示区域108中显示表示癌的图标114a、表示息肉的图标114b和表示出血的图标114c。
(变形例1-3)
标签盒显示区域可以以任意方式配置在画面内的任意位置。具体而言,可以将标签盒显示区域配置在画面内的上边侧、下边侧、右边侧、左边侧中的任意一个位置,也可以配置成水平方向或垂直方向中的任意一个朝向。例如图8示出沿着读影画面120的下边配置标签盒显示区域121的例子。该情况下,由于标签盒显示区域121内的图标111a~111d与缩略图区域105内的缩小图像105a、105b、…之间的间隔较近,所以,能够减少拖拽和拖放中的移动量,能够进一步减轻标签赋予作业中的用户负担。
(变形例1-4)
可以通过用户的选择来切换标签盒显示区域内显示的图标。例如如图9所示,在读影画面130的标签盒显示区域108内设置根据脏器而分类的多个突出画面131~133,在各突出画面131~133中显示与每个脏器的病变标签对应的图标。另外,图9示出选择与胃对应的突出画面131而显示在最前面的状态。用户通过这种读影画面 130上的指针操作选择突出画面,由此,能够在最前面显示期望的突出画面。或者,也可以与通过对时间条107上的滑块106进行操作而示出的脏器连动地更换最前面显示的突出画面。
(变形例1-5)
标签盒显示区域内的图标的显示方式和排列没有特别限定。
关于个别图标的显示方式,在各图标上,可以通过文本方式显示对应的病变名(例如参照图3的图标111a~111d),也可以显示表示对应病变的标志。并且,可以根据用户的喜好来编集或变更各图标上显示的文本或标志。在对图标上显示的病变名进行编集的情况下,可以与内置于该图像管理装置5中的辞典数据(报告生成等中使用的用语数据)连动。由此,能够简化用户生成报告时的操作。
并且,可以通过默认的方式设定标签盒显示区域内按照每个脏器而显示的图标的种类,用户也可以根据喜好进行追加、删除、编集(标签名的变更)等。
关于标签盒显示区域内的图标的排列,例如可以按照病变名的五十音顺序或字母顺序进行设定,也可以根据图标的使用频度(即赋予病变标签的频度)进行设定。在根据图标的使用频度设定排列的情况下,可以根据通过统计而取得的病变的产生频度进行设定,也可以对在该图像管理装置5中对体内图像赋予各病变标签的次数进行计数,根据该次数进行设定。
另外,在根据图标的使用频度来决定图标的排列的情况下,可以在缩略图区域的附近配置使用频度高的图标。例如,如图3所示,在沿着读影画面100的右边配置标签盒显示区域108的情况下,在画面的下侧配置使用频度高的图标。由此,减少了将缩小图像105a、105b、…拖拽和拖放到图标111a~111d上时的指针的移动量,所以,能够减轻标签赋予作业中的用户负担。
(变形例1-6)
通过进行将画面中显示的图像(缩小图像或主显示图像)与标签盒显示区域内的图标关联起来的操作,也可以对体内图像赋予病变标签以外的各种信息。图10是能够对体内图像附加建议的读影画面的显示例。在图10所示的读影画面140中,在对用户期望的图标进行了规定指针操作(例如鼠标的右击)的情况下,显示控制部19使显示部15显示设有文本输入栏的建议输入窗口141。控制部16根据针对建议输入窗口141的文本输入操作,将所输入的文本信息和与选择出的图标对应的病变标签相 关联地存储在标签存储部14c中。另外,图10示出针对表示溃烂的图标111b显示建议输入窗口141的状态。
在通过画面上的指针操作将体内图像与这样输入建议的图标关联起来的情况下,标签赋予部20对该体内图像赋予该病变标签,并且附加建议,与图像数据相关联地存储在存储部14中。由此,由于例如在报告生成时成为预先输入建议的状态,所以,用户能够节省建议输入的时间和劳力。进而,在读影者和报告生成者不同的情况下,也能够借助附加的建议而正确地对报告生成者传达读影者的医学判断。
(变形例1-7)
当用户在读影中的体内图像中认为结果令人担心但是无法确定病变时,有时希望将这种体内图像与其它体内图像区分进行管理。因此,也可以设置用于临时对保留判断的体内图像赋予的标签(例如保留标签)。图11所示的读影画面150示出在标签盒显示区域108内显示与保留标签对应的图标151的例子。通过设置这种图标,用户能够在之后提取赋予了保留标签的体内图像详细进行观察,确定判断。因此,用户能够顺畅地观察一连串的体内图像,能够提高作业效率。
(变形例1-8)
也可以在读影画面以外的画面中实施使用了与病变标签对应的图标的标签赋予作业。图12是在报告生成画面中实施这种标签赋予作业的情况下的显示例。
除了患者信息区域101和诊察信息区域102以外,图12所示的报告生成画面160还包括用于供用户记入结果的结果输入区域161、缩小显示用户在读影中选择出的捕捉图像的捕捉图像显示区域162、以及配置有与病变标签对应的图标163a~163d的标签盒显示区域163。其中,在结果输入区域161和捕捉图像显示区域162中分别设有滚动条164、165。
通过这种报告生成画面160中的指针操作,当选择了任意一个捕捉图像时,标签提取部18提取与选择出的捕捉图像对应的病变标签。与其对应地,显示控制部19使显示部15在标签盒显示区域163中显示与提取出的病变标签对应的图标。例如在图12中,对应于表示胃的捕捉图像162a,在标签盒显示区域163内显示与胃对应的病变标签即表示出血的图标163a、表示溃烂的图标163b、表示肿瘤的图标163c和表示癌的图标163d。
进而,当通过画面上的指针操作将选择出的捕捉图像和图标163a~163d中的任 意一方关联起来时,标签赋予部20对与选择出的捕捉图像对应的体内图像赋予与该图标对应的病变标签。例如,图12示出拖拽捕捉图像162a并将其拖放到图标163a上的状况。
这样,在报告生成画面160中,用户也能够通过简单的操作对体内图像赋予病变标签。因此,在报告生成阶段中,不需要为了对体内图像赋予病变标签而再次重新观察读影画面这样的作业,能够提高作业效率。
(变形例1-9)
能够对1个体内图像赋予的病变标签的数量没有限定。例如,在希望对某个体内图像赋予2个以上的病变标签的情况下,只要依次进行拖拽画面中显示的体内图像(或缩略图区域内的缩小图像)并将其拖放到期望图标上的操作即可。由此,依次对体内图像追加并赋予与拖放该体内图像的图标对应的病变标签。
并且,也可以删除临时对体内图像赋予的病变标签。该情况下,例如,通过针对期望的体内图像(或缩略图区域内的缩小图像)的规定指针操作(例如鼠标的右击),显示病变标签的删除菜单,根据针对该删除菜单的指针操作,删除对体内图像赋予的病变标签即可。或者,也可以在画面上设置用于删除病变标签的删除图标,通过拖拽赋予了病变标签的体内图像并将其拖放到删除图标上的指针操作,从该体内图像中删除病变标签。
进而,也可以变更临时对体内图像赋予的病变标签。该情况下,进行如上所述那样删除病变标签并重新赋予病变标签的指针操作(向与期望病变标签对应的图标的拖拽和拖放)即可。或者,也可以通过进行将已经赋予了病变标签的体内图像与对应于其它病变标签的图标关联起来的指针操作,将该体内图像的病变标签变更为其它病变标签。该情况下,只要设定操作以使得追加病变标签的情况下的指针操作和变更病变标签的情况下的指针操作相互不同即可。例如,在追加病变标签的情况下,在按压鼠标的左按钮的状态下拖拽体内图像,将其拖放到与期望病变标签对应的图标上。另一方面,在变更病变标签的情况下,在按压鼠标的右按钮的状态下拖拽体内图像,将其拖放到与期望病变标签对应的图标上。
(实施方式2)
接着,对本发明的实施方式2进行说明。 
图13是示出实施方式2的图像管理装置的结构的框图。如图13所示,实施方式 2的图像管理装置6具有控制部21,该控制部21针对图2所示的控制部16的结构追加了标签选择部22和标签赋予图像提取部23。标签选择部22选择与通过画面上的指针操作而选择出的图标对应的病变标签。标签赋予图像提取部23提取赋予了由标签选择部22选择出的病变标签的体内图像。其它结构与图2所示的结构相同。
接着,参照图14~16对图像管理装置6的动作进行说明。图14~图16是示出显示部15显示的读影画面的显示例的示意图。
在图14所示的读影画面200中,在标签盒显示区域108内的图标111a~111d的附近分别显示展开按钮201a~201d。并且,在缩略图区域105内的缩小图像105a、105b、…中的已经赋予标签的缩小图像105a、105b、105f附近的标签显示区域110中分别显示所赋予的病变标签。
在通过这种读影画面200中的指针操作而选择了展开按钮201a~201d中的任意一方的情况下,标签赋予图像提取部23从存储在存储部14中的体内图像内,提取赋予了与选择出的展开按钮对应的图标的病变标签的体内图像。并且,显示控制部19使显示部15在缩略图区域105中显示由标签赋予图像提取部23提取出的体内图像的缩小图像。图15所示的读影画面210示出如下例子:选择了与表示溃疡的图标111a对应的展开按钮201a的结果为,在缩略图区域105中展开显示赋予了溃疡标签的体内图像的缩小图像202a~202f。此时,图标111a附近显示的展开按钮201a(参照图14)变化为折叠按钮203。
并且,在通过读影画面210中的指针操作而选择了折叠按钮203的情况下,显示控制部19将缩略图区域105中的显示切换为原来的缩小图像(用户选择出的缩小图像105a、105b、…的显示)(参照图14)。
另一方面,在读影画面210中,在通过规定指针操作(例如点击期望的缩小图像)而选择了缩小图像202a~202f中的任意一方的情况下,显示控制部19在主显示区域103中显示与选择出的缩小图像对应的体内图像及其附近图像(摄像时间相邻的体内图像),并且,将缩略图区域105中的显示切换为基于用户选择的通常的缩小图像。例如,在图15中选择了缩小图像202f的情况下,在主显示区域103中显示与缩小图像202f对应的体内图像103e和紧接着摄像的体内图像103f(图16)。另外,此时,伴随主显示区域103中的图像的迁移(即滑块106的移动),标签盒显示区域108中显示的图标114a~114c也变化。
如以上说明的那样,根据实施方式2,由于仅通过选择与病变标签对应的图标的操作就能够提取赋予了用户期望的该病变标签的体内图像并进行显示,所以,能够提高进行读影作业的用户的便利性。
并且,根据实施方式2,由于能够按照每个病变标签对体内图像进行分组管理,所以,用户能够通过简单的操作来利用赋予了期望的病变标签的体内图像群。
(变形例2-1)
通过利用与病变标签对应的图标,能够对每个病变标签的体内图像群实施各种处理。
图17示出统一输出每个病变标签的体内图像群的情况。在图17所示的读影画面220中,在对用户期望的图标进行了规定指针操作(例如图标的双击、右击等)的情况下,显示控制部19使显示部15在该图标的附近显示记载了与体内图像的处理有关的命令的菜单。例如,图17示出如下状态:针对表示癌的图标111d显示了菜单221,该菜单221记载了向报告文件附加体内图像的输出处理(输出)以及向外部设备输出体内图像的输出处理。
在通过针对这种菜单221的指针操作而选择了用户期望的处理的情况下,标签赋予图像提取部23提取赋予了与该图标(图17的情况下为图标111d)对应的病变标签的体内图像群,控制部21针对提取出的体内图像群统一执行所选择出的处理。例如,在图17的情况下,通过附加将赋予了癌标签的体内图像群输出到报告文件中。
(变形例2-2)
在对每个病变标签的体内图像群进行统一处理的情况下,也可以在画面中显示与针对体内图像群的处理对应的图标。例如,在图18所示的读影画面230中,设有显示表示报告输出处理的图标231a和表示输出处理的图标231b的操作盒显示区域231。在这种读影画面230中,当进行了将与用户期望的病变标签对应的图标和与用户期望的处理对应的图标关联起来的指针操作时,控制部21对赋予了用户期望的病变标签的体内图像群实施与选择出的图标对应的处理。例如,图18示出拖拽表示溃疡的图标111a并将其拖放到图标231a上的状态。该情况下,将赋予了溃疡标签的体内图像群统一附加到报告文件中。
(变形例2-3)
图19是对每个病变标签的体内图像群进行附带信息的统一编集的画面的显示 例。在图19所示的读影画面240中,在针对与用户期望的病变标签对应的图标进行了规定指针操作(例如鼠标的双击、右击等)的情况下,显示控制部19使显示部15在该图标的附近显示文本输入用的窗口。例如,图19示出如下状态:在表示癌的图标111d附近显示设有病变名编集用的文本输入栏和建议输入用的文本输入栏的标签编集窗口241。
在针对这种标签编集窗口241进行了文本输入操作的情况下,控制部21针对赋予了与选择出的图标对应的病变标签的体内图像,统一进行病变名的变更/修正、建议附加等处理。例如在图19的情况下,针对赋予了癌标签的体内图像,统一附加建议。由此,即使在病变标签的病变名或建议中存在误记等的情况下,也不需要针对每一张体内图像进行修正,能够统一进行修正。
(变形例2-4)
图20是在概述(静态图像一览显示)画面上实施针对每个病变标签的体内图像群的统一处理的情况下的显示例。另外,概述画面250中的显示对象的图像是全部体内图像、或者根据预先确定的提取条件或由用户设定的提取条件而提取出的体内图像(代表图像)。
图20所示的概述画面250包括显示作为患者的被检体1的识别信息的患者信息区域101、显示对被检体1进行的诊察的识别信息的诊察信息区域102、一览显示体内图像的静态图像的一览显示区域251、显示与病变标签对应的图标252a~252h的标签盒显示区域252。其中,在一览显示区域251中设有滚动条253。并且,在标签盒显示区域252中,还显示有在解除针对图标252a~252h的选择时使用的解除按钮254。
在概述画面250中未选择图标252a~252h中的任意一方的情况下,显示控制部19根据存储在存储部14中的图像数据,使显示部15按照规定顺序(例如摄像时间顺序)和规定排列(例如从左向右的顺序)在一览显示区域251中显示全部体内图像。
另一方面,在通过画面上的指针操作而选择了图标252a~252h中的任意一方的情况下,标签赋予图像提取部23从存储部14中提取赋予了与选择出的图标对应的病变标签的体内图像。并且,显示控制部19使显示部15按照上述规定顺序和规定排列在一览显示区域251中显示提取出的体内图像。例如,图20示出选择了表示出血的图标252a并显示赋予了出血标签的体内图像群的状态。
并且,在通过画面上的指针操作而选择了图标252a~252h中的任意一方的状态下还选择了其它图标的情况下,标签赋予图像提取部23进一步提取与新选择出的图标对应的体内图像。并且,显示控制部19使显示部15紧接着已经显示在一览显示区域251中的体内图像而显示新提取出的体内图像。例如,在图20的情况下,当紧接着表示出血的图标252a而选择了表示溃疡的图标252c时,紧接着赋予了出血标签的体内图像群而在一览显示区域251中显示赋予了溃疡标签的体内图像群。
进而,当针对解除按钮254进行了规定指针操作(例如点击)时,解除针对图标252a~252h的选择。该情况下,显示控制部19再次使显示部15在一览显示区域251中显示该概述画面250的显示对象即体内图像全体。
如以上说明的那样,根据该变形例2-4,能够按照每个病变标签而一览显示体内图像。
(变形例2-5)
在变形例2-4中,在画面中仅一览显示赋予了用户期望的病变标签的体内图像群,但是,也可以按照每个病变标签将全部体内图像更换为用户期望的顺序进行显示。该情况下,例如,按照用户期望的顺序显示图20所示的全部图标252a~252h即可。
(变形例2-6)
图20所示的概述画面可以直接从通常的读影画面进行迁移。例如,在图3所示的读影画面100中,在通过规定点操作(例如双击)而选择了标签盒显示区域108内的图标111a~111d中的任意一方的情况下,显示控制部19使显示部15显示概述画面250,该概述画面250一览显示赋予了与操作对象的图标对应的病变标签的体内图像群。相反,在概述画面250中,在通过规定点操作(例如双击)而选择了一览显示区域251内的体内图像中的任意一方的情况下,显示控制部19使显示部15显示读影画面100,该读影画面100在主显示区域103中配置有所选择出的体内图像及其附近图像。
(变形例2-7)
图21是示出动态图像用的读影画面的显示例的示意图。图21所示的读影画面260包括显示作为患者的被检体1的识别信息的患者信息区域101、显示对被检体1进行的诊察的识别信息的诊察信息区域102、显示体内图像的动态图像的主显示区域261、受理以动态图像的方式显示在主显示区域261中的体内图像的再现操作的输入 的再现操作按钮群262、缩小显示被主显示的动态图像的捕捉图像作为缩略图的缩略图区域105、以及显示与病变标签对应的图标111a~111d的标签盒显示区域108。
在这种动态图像用的读影画面260中,也能够按照每个病变标签对体内图像进行处理。例如,在读影画面260中,在通过规定指针操作(例如双击)而选择了标签盒显示区域108内的图标111a~111d中的任意一方的情况下,标签赋予图像提取部23从存储部14中提取赋予了与选择出的图标对应的病变标签的体内图像。并且,显示控制部19使显示部15以动态图像显示或帧进显示(幻灯片)的方式在主显示区域261中显示所提取出的体内图像。例如在图21的情况下,示出选择了表示溃疡的图标111a并对赋予了溃疡标签的体内图像进行帧进显示的状态。
或者,在通过画面上的指针操作而选择了标签盒显示区域108内的图标111a~111d中的任意一方的状态下还选择了其它图标的情况下,标签赋予图像提取部23进一步提取与新选择出的图标对应的体内图像。并且,显示控制部19使显示部15紧接着主显示区域261中当前显示的体内图像而进一步显示新提取出的体内图像。
(变形例2-8)
也可以在读影画面以外的画面中进行针对每个病变标签的体内图像群的统一处理。例如在图12所示的报告生成画面160中,能够进行如下处理:通过选择图标163a~163d对赋予了对应的病变标签的体内图像的缩小图像进行一览显示,或者通过针对图标163a~163d的操作对赋予了相同病变标签的体内图像统一附加建议等。
(变形例2-9)
在上述实施方式2中,说明了针对通过一次检查而取得的一连串的体内图像进行的处理,但是,也可以对通过针对一名患者实施的多个检查而取得的体内图像、或者通过针对多名患者实施的检查而取得的体内图像进行管理。
图22是对在不同时期对一名患者实施的检查的结果进行比较而示出的经过观察画面的显示例。在图22所示的经过观察画面270的主显示区域271中,并列显示上次检查中取得的体内图像和本次检查中取得的体内图像。当通过这种经过观察画面270中的指针操作而选择了标签盒显示区域108内的图标111a~111d中的任意一方时,标签赋予图像提取部23从上次检查中取得的体内图像和本次检查中取得的体内图像内,分别提取赋予了与选择出的图标对应的病变标签的体内图像。并且,显示控制部19使显示部15在主显示区域271中并列显示所提取出的体内图像。例如,图 22示出显示赋予了溃疡标签的体内图像271a(检查日:2010年3月3日)和体内图像271b(检查日:2011年3月3日)的状态。
(变形例2-10)
图23是示出对多个患者实施的检查的结果作为病例集的图册画面的显示例。图23所示的图册画面280包括记载病例名等信息的标题显示区域281、显示病例图像282a~282d和关联信息的病例显示区域282、显示与病变标签对应的图标283a~283h的标签盒显示区域283。其中,在病例显示区域282中设有滚动条284。
当通过这种图册画面280中的指针操作而选择了标签盒显示区域283内的图标283a~283h中的任意一方时,标签赋予图像提取部23从分别对多名患者进行的检查的结果(体内图像群)中,提取赋予了与选择出的图标对应的病变标签的体内图像。并且,显示控制部19使显示部15在病例显示区域282中与患者名和检查日等关联信息以及各体内图像中插入的建议一起显示所提取出的体内图像。例如,图23示出选择了表示溃疡的图标283d并显示赋予了溃疡标签的体内图像的情况。
(实施方式3)
接着,对本发明的实施方式3进行说明。 
实施方式3的图像管理装置的结构与图2所示的结构相同,与实施方式1的不同之处在于,在标签提取部18提取病变标签时,根据体内图像的特征量对病变标签赋予优先顺位。
在本实施方式3中,标签提取部18根据存储在特征量存储部14b中的特征量,取得作为一连串体内图像全体的病变的倾向,根据该倾向对病变标签赋予优先顺位。例如,在包含规定数或规定比例(例如一般的病例的平均值)以上的红色较重的体内图像的情况下,提高出血标签和血管形成异常标签的优先顺位。并且,在包含规定数或规定比例以上的白色较重的体内图像的情况下,提高侵蚀标签的优先顺位。
显示控制部19根据由标签提取部18赋予的优先顺位,使显示部15在标签盒显示区域内显示与各病变标签对应的图标。
图24是示出读影画面的显示例的示意图。如主显示区域103内的体内图像301a、301b、缩略图区域105内的缩小图像302a~302f所示,图24的读影画面300中显示的体内图像群包含大量红色区域的比例较高的体内图像。因此,在标签盒显示区域108中,按照顺位从画面的上方起显示图标303a~303h内的、优先顺位高的表示出 血的图标303a和表示血管形成异常的图标303b。另外,作为图标的优先显示的方式,不限于按照优先顺位而从上方起进行配置的方式,例如,也可以使优先顺位高的图标的颜色、形状、大小与其它图标不同,或者为了易于操作优先顺位高的图标,也可以将其配置在主显示区域103或缩略图区域105的附近等。
(变形例3-1)
在上述实施方式3中,按照病变标签的优先顺位将全部图标配置在标签盒显示区域108中,但是,也可以按照优先顺位来显示与根据选择出的体内图像的脏器而提取出的病变对应的图标。
(实施方式4)
接着,对本发明的实施方式4进行说明。 
图25是示出实施方式4的图像管理装置的结构的框图。如图25所示,实施方式4的图像管理装置7具有控制部24,该控制部24相对于图13所示的控制部21的结构,代替标签赋予图像提取部23而包括病变图像提取部25。病变图像提取部25根据存储在存储部14中的各体内图像的特征量,提取能够与标签选择部22选择出的病变标签对应的体内图像。并且,在实施方式4中,标签存储部14c存储与各病变标签对应的体内图像的特征量信息。其它结构与图13所示的结构相同。
图26是示出读影画面的显示例的示意图。在图26所示的读影画面400中,在标签盒显示区域108中显示与存储在标签存储部14c中的标签对应的图标401a~401h。
当通过读影画面400中的指针操作而选择了图标401a~401h中的任意一方时,标签选择部22选择与选择出的图标对应的病变标签。与其对应地,病变图像提取部25从标签存储部14c中取得与选择出的病变标签对应的特征量信息。并且,病变图像提取部25取得存储在特征量存储部14b中的各体内图像的特征量,通过参照所选择出的病变标签的特征量信息,提取与该病变标签对应的体内图像。进而,显示控制部19使显示部15在缩略图区域105中显示与病变图像提取部25提取出的体内图像对应的缩小图像。
例如图26示出如下状态:选择了表示肿瘤的图标401e,在缩略图区域105中显示与符合肿瘤的特征量信息的体内图像对应的缩小图像402a~402f。用户通过直接观察各缩小图像402a~402f或在主显示区域103中显示对应的体内图像进行观察,能够确认提取出的体内图像实际上是否相当于该病变。
进而,当通过画面上的指针操作而将缩小图像402a~402f(或其在主显示区域103内的体内图像)和选择出的图标关联起来时,确定对提取出的体内图像赋予该病变标签。
如以上说明的那样,根据实施方式4,用户针对与各病变标签对应地提取出的体内图像确认是否相当于该病变即可,所以,能够节省对全部体内图像进行观察的劳力和时间,能够提高读影作业的效率。
以上说明的实施方式只不过是用于实施本发明的例子,本发明不限于此。本发明能够根据规格等进行各种变形,进而,根据上述记载可知,能够在本发明的范围内实现其它各种实施方式。
标号说明
1:被检体;2:胶囊型内窥镜;3:接收装置;4:托架;5、6、7:图像管理装置;10:输入部;11:接口部;12:临时存储部;13:图像处理部;14:存储部;14a:图像数据存储部;14b:特征量存储部;14c:标签存储部;14d:程序存储部;15:显示部;16、21、24:控制部;17:图像选择部;18:标签提取部;19:显示控制部;20:标签赋予部;22:标签选择部;23:标签赋予图像提取部;25:病变图像提取部;30:天线单元;30a~30h:接收天线。

Claims (13)

1.一种图像管理装置,其特征在于,该图像管理装置具有:
存储部,其存储对多个图像赋予的多种附加信息;
运算部,其计算所述多个图像各自的特征量;
输入部,其受理与用户操作对应的信号的输入;
图像选择部,其根据由所述输入部受理的信号,从所述多个图像中选择图像;
附加信息提取部,其根据所述选择出的图像的所述特征量,从所述多种附加信息中提取一种以上的附加信息,作为对所述选择出的图像赋予的附加信息的候补;
显示控制部,其生成与所述一种以上的附加信息对应的一个以上的图标,并将该图标显示在画面中;以及
附加信息赋予部,其在所述输入部受理了将所述选择出的图像与用户从所述一个以上的图标中选择出的图标关联起来的操作信号的输入的情况下,针对所述选择出的图像,赋予对应于与该图像相关联的图标的附加信息。
2.根据权利要求1所述的图像管理装置,其特征在于,
所述附加信息提取部按照根据所述特征量对所述多个图像进行分类而得到的每个组,提取所述一种以上的附加信息。
3.根据权利要求2所述的图像管理装置,其特征在于,
所述图像是医用图像,
所述组是脏器组。
4.根据权利要求3所述的图像管理装置,其特征在于,
所述显示控制部在所述画面中显示表示与所述多个图像对应的时间或空间的指标的条以及指示该条上的点的滑块,
所述附加信息提取部根据与所述滑块所指示的点对应的时间或空间处的脏器组,提取所述一种以上的附加信息。
5.根据权利要求1所述的图像管理装置,其特征在于,
所述附加信息提取部提取与所述图像选择部选择出的图像的所述特征量对应的所述一种以上的附加信息。
6.根据权利要求1所述的图像管理装置,其特征在于,
所述显示控制部按照与赋予了对应的附加信息的频度相应的方式,在画面中显示所述一个以上的图标。
7.根据权利要求1所述的图像管理装置,其特征在于,
所述显示控制部按照与所述多个图像的特征量相应的方式,在画面中显示所述一个以上的图标。
8.根据权利要求1所述的图像管理装置,其特征在于,
所述显示控制部将对所述选择出的图像赋予的附加信息与该图像相关联地显示在画面中。
9.根据权利要求1所述的图像管理装置,其特征在于,
所述图像管理装置还具有:
附加信息选择部,其选择与根据所述输入部所受理的信号而从所述画面显示的所述一个以上的图标中选择出的图标对应的附加信息;以及
图像提取部,其从所述多个图像中提取赋予了所述附加信息选择部选择出的附加信息的图像。
10.根据权利要求1所述的图像管理装置,其特征在于,
所述图像是医用图像,
所述附加信息是与所述医用图像中反映出的病变对应的病变标签。
11.根据权利要求1所述的图像管理装置,其特征在于,
所述显示控制部将对所述选择出的图像赋予的附加信息对应的文字信息显示在该图像的缩略图像的附近。
12.一种图像管理装置的工作方法,其特征在于,该工作方法包括以下步骤:
运算步骤,在该步骤中,运算部计算多个图像各自的特征量;
输入步骤,在该步骤中,输入部受理与用户操作对应的信号的输入;
图像选择步骤,在该步骤中,图像选择部根据在所述输入步骤中受理的信号,从所述多个图像中选择图像;
附加信息提取步骤,在该步骤中,附加信息提取部根据所述选择出的图像的所述特征量,从对所述多个图像赋予的预先存储在存储部中的多种附加信息中提取一种以上的附加信息,作为对所述选择出的图像赋予的附加信息的候补;
显示控制步骤,在该步骤中,显示控制部生成与所述一种以上的附加信息对应的一个以上的图标,并将该图标显示在画面中;以及
附加信息赋予步骤,在该步骤中,在受理了将在所述图像选择步骤中选择出的图像与用户从所述一个以上的图标中选择出的图标关联起来的操作信号的输入的情况下,附加信息赋予部针对所述选择出的图像,赋予对应于与该图像相关联的图标的附加信息。
13.一种胶囊型内窥镜系统,其特征在于,该胶囊型内窥镜系统具有:
胶囊型内窥镜,其被导入被检体的体内进行摄像,生成与该被检体的体内图像对应的图像数据;
接收装置,其通过与所述胶囊型内窥镜之间的无线通信来接收由所述胶囊型内窥镜生成的图像数据;以及
权利要求1所述的图像管理装置。
CN201280003184.6A 2011-03-30 2012-03-09 图像管理装置、图像管理装置的工作方法以及胶囊型内窥镜系统 Expired - Fee Related CN103140160B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2011-076716 2011-03-30
JP2011076716 2011-03-30
PCT/JP2012/056131 WO2012132840A1 (ja) 2011-03-30 2012-03-09 画像管理装置、方法、及びプログラム、並びにカプセル型内視鏡システム

Publications (2)

Publication Number Publication Date
CN103140160A CN103140160A (zh) 2013-06-05
CN103140160B true CN103140160B (zh) 2015-06-17

Family

ID=46930579

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201280003184.6A Expired - Fee Related CN103140160B (zh) 2011-03-30 2012-03-09 图像管理装置、图像管理装置的工作方法以及胶囊型内窥镜系统

Country Status (5)

Country Link
US (1) US8918740B2 (zh)
EP (1) EP2601880B1 (zh)
JP (1) JP5197892B2 (zh)
CN (1) CN103140160B (zh)
WO (1) WO2012132840A1 (zh)

Families Citing this family (46)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102043133B1 (ko) * 2012-11-16 2019-11-12 삼성전자주식회사 컴퓨터 보조 진단 지원 장치 및 방법
US9095315B2 (en) * 2012-11-21 2015-08-04 Mckesson Financial Holdings Method and apparatus integrating clinical data with the review of medical images
USD750112S1 (en) * 2013-01-04 2016-02-23 Samsung Electronics Co., Ltd. Portable electronic device with graphical user interface
WO2014184887A1 (ja) * 2013-05-15 2014-11-20 株式会社日立製作所 画像診断支援システム
EP3005934A4 (en) * 2013-05-31 2017-03-15 Olympus Corporation Medical device
JP6276529B2 (ja) * 2013-07-17 2018-02-07 キヤノン株式会社 読影支援装置、その方法、及びプログラム
JP5747364B1 (ja) 2013-09-09 2015-07-15 オリンパス株式会社 画像表示装置、符号化方法、及び符号化プログラム
JP6196900B2 (ja) * 2013-12-18 2017-09-13 オリンパス株式会社 内視鏡装置
WO2015093295A1 (ja) * 2013-12-20 2015-06-25 オリンパス株式会社 内視鏡装置
WO2015115209A1 (ja) * 2014-01-29 2015-08-06 オリンパス株式会社 医療システム
US9691433B2 (en) * 2014-04-18 2017-06-27 Toshiba Medical Systems Corporation Medical image diagnosis apparatus and medical image proccessing apparatus
US10586618B2 (en) * 2014-05-07 2020-03-10 Lifetrack Medical Systems Private Ltd. Characterizing states of subject
JP2015215740A (ja) * 2014-05-09 2015-12-03 キヤノン株式会社 情報処理装置、情報処理方法及びプログラム
US10599810B2 (en) * 2014-06-04 2020-03-24 Panasonic Corporation Control method and recording system
JP6339872B2 (ja) * 2014-06-24 2018-06-06 オリンパス株式会社 画像処理装置、内視鏡システム及び画像処理方法
US10740552B2 (en) * 2014-10-08 2020-08-11 Stryker Corporation Intra-surgical documentation system
USD791801S1 (en) * 2014-10-14 2017-07-11 Tencent Technology (Shenzhen) Company Limited Display screen or portion thereof with graphical user interface
US10440246B2 (en) * 2014-11-19 2019-10-08 Kiran K. Bhat System for enabling remote annotation of media data captured using endoscopic instruments and the creation of targeted digital advertising in a documentation environment using diagnosis and procedure code entries
EP3226551A1 (en) * 2014-11-27 2017-10-04 Olympus Corporation Image playback apparatus and image playback program
JP6017743B1 (ja) 2014-12-15 2016-11-02 オリンパス株式会社 医療機器システム、医療機器システムの作動方法
KR102366316B1 (ko) * 2014-12-29 2022-02-23 삼성메디슨 주식회사 초음파 영상 장치 및 그에 따른 초음파 영상 처리 방법
JP6520428B2 (ja) * 2015-06-09 2019-05-29 セイコーエプソン株式会社 表示制御装置
JP6408436B2 (ja) * 2015-07-29 2018-10-17 富士フイルム株式会社 診療支援装置とその作動方法および作動プログラム、並びに診療支援システム
KR102519424B1 (ko) * 2015-09-25 2023-04-10 삼성메디슨 주식회사 초음파 이미지 디스플레이 방법 및 이를 위한 장치
CN106557536B (zh) * 2015-09-30 2021-12-21 松下知识产权经营株式会社 控制方法
JP2017205292A (ja) * 2016-05-18 2017-11-24 オリンパス株式会社 画像ファイル作成方法、画像ファイル作成プログラム及び画像ファイル作成装置
JP7370865B2 (ja) * 2017-05-05 2023-10-30 コーニンクレッカ フィリップス エヌ ヴェ 画像読影環境において所見ベースの関連する臨床的コンテキストを提供する動的システム
WO2018207264A1 (ja) * 2017-05-09 2018-11-15 オリンパス株式会社 画像再生装置及び観察システム
JP7091349B2 (ja) * 2017-09-07 2022-06-27 富士フイルム株式会社 診断支援システム、内視鏡システム、プロセッサ、及び診断支援システムの作動方法
WO2019064704A1 (ja) 2017-09-29 2019-04-04 オリンパス株式会社 内視鏡画像観察支援システム、内視鏡画像観察支援装置、内視鏡画像観察支援方法
JP6425868B1 (ja) * 2017-09-29 2018-11-21 オリンパス株式会社 内視鏡画像観察支援システム、内視鏡画像観察支援装置、内視鏡画像観察支援方法
WO2019082741A1 (ja) * 2017-10-26 2019-05-02 富士フイルム株式会社 医療画像処理装置
WO2019220801A1 (ja) 2018-05-15 2019-11-21 富士フイルム株式会社 内視鏡画像処理装置、内視鏡画像処理方法、及びプログラム
EP3841957B1 (en) * 2018-08-20 2024-05-01 FUJIFILM Corporation Medical image processing system
CN112584746A (zh) * 2018-08-23 2021-03-30 富士胶片株式会社 医用图像处理装置和内窥镜系统以及医用图像处理装置的工作方法
JP7110069B2 (ja) * 2018-11-22 2022-08-01 富士フイルム株式会社 内視鏡情報管理システム
CN109965829B (zh) * 2019-03-06 2022-05-06 重庆金山医疗技术研究院有限公司 成像优化方法、图像处理装置、成像装置及内窥镜系统
JP7373335B2 (ja) * 2019-09-18 2023-11-02 富士フイルム株式会社 医用画像処理装置、プロセッサ装置、内視鏡システム、医用画像処理装置の作動方法、及びプログラム
CN110598032B (zh) * 2019-09-25 2022-06-14 京东方艺云(杭州)科技有限公司 一种图像标签生成方法、服务器及终端设备
US10835106B1 (en) 2020-02-21 2020-11-17 Ambu A/S Portable monitor
US10980397B1 (en) * 2020-02-21 2021-04-20 Ambu A/S Video processing device
US11109741B1 (en) 2020-02-21 2021-09-07 Ambu A/S Video processing apparatus
US11166622B2 (en) 2020-02-21 2021-11-09 Ambu A/S Video processing apparatus
EP4230111A4 (en) * 2020-10-19 2024-03-27 Fujifilm Corp MEDICAL IMAGE PROCESSING DEVICE, OPERATING METHOD FOR MEDICAL IMAGE PROCESSING DEVICE AND PROGRAM FOR MEDICAL IMAGE PROCESSING DEVICE
USD994693S1 (en) * 2020-12-15 2023-08-08 Samsung Electronics Co., Ltd. Display screen or portion thereof with transitional graphical user interface
USD993969S1 (en) * 2020-12-15 2023-08-01 Samsung Electronics Co., Ltd. Display screen or portion thereof with graphical user interface

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6810149B1 (en) * 2000-08-17 2004-10-26 Eastman Kodak Company Method and system for cataloging images
CN1777391A (zh) * 2003-04-25 2006-05-24 奥林巴斯株式会社 图像显示装置、图像显示方法及图像显示程序
WO2010113479A1 (ja) * 2009-03-31 2010-10-07 富士フイルム株式会社 画像処理装置および方法並びにプログラム

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4906940A (en) * 1987-08-24 1990-03-06 Science Applications International Corporation Process and apparatus for the automatic detection and extraction of features in images and displays
JPH11132932A (ja) * 1997-10-29 1999-05-21 Hitachi Ltd 生体に関する粒子画像分類システムおよび粒子の再分類方法
US7283857B1 (en) * 1998-11-30 2007-10-16 Hologic, Inc. DICOM compliant file communication including quantitative and image data
US7119814B2 (en) * 2001-05-18 2006-10-10 Given Imaging Ltd. System and method for annotation on a moving image
US7130457B2 (en) * 2001-07-17 2006-10-31 Accuimage Diagnostics Corp. Systems and graphical user interface for analyzing body images
US8467583B2 (en) * 2005-04-04 2013-06-18 Yissum Research Development Company Of The Hebrew University Of Jerusalem Ltd. Medical imaging method and system
US7783135B2 (en) * 2005-05-09 2010-08-24 Like.Com System and method for providing objectified image renderings using recognition information from images
US8259995B1 (en) * 2006-01-26 2012-09-04 Adobe Systems Incorporated Designating a tag icon
JP4906404B2 (ja) * 2006-06-13 2012-03-28 富士フイルム株式会社 診断支援方法、診断支援装置、診断支援システム、及び診断支援プログラム
US8051386B2 (en) * 2006-12-21 2011-11-01 Sectra Ab CAD-based navigation of views of medical image data stacks or volumes
WO2008150840A1 (en) * 2007-05-29 2008-12-11 University Of Iowa Research Foundation Methods and systems for determining optimal features for classifying patterns or objects in images
KR100868339B1 (ko) * 2007-11-15 2008-11-12 주식회사 인트로메딕 의료용 영상 데이터의 디스플레이 방법과 의료용 영상데이터를 이용한 캡쳐 영상 제공 시스템 및 그 방법
CN109584996A (zh) * 2007-12-13 2019-04-05 皇家飞利浦电子股份有限公司 一系列图像中的导航
JP2009233177A (ja) * 2008-03-27 2009-10-15 Hitachi Medical Corp 医用画像診断装置及びそのプログラム
CN102361585B (zh) * 2009-03-23 2014-06-25 奥林巴斯医疗株式会社 图像处理系统、外部装置以及图像处理系统的图像处理方法
WO2011005865A2 (en) * 2009-07-07 2011-01-13 The Johns Hopkins University A system and method for automated disease assessment in capsule endoscopy
CN102256533B (zh) * 2009-07-29 2014-03-05 奥林巴斯医疗株式会社 图像显示装置、解读辅助系统以及解读辅助方法
US8463741B2 (en) * 2009-09-04 2013-06-11 Omnyx, LLC Digital pathology system
US8446465B2 (en) * 2010-01-05 2013-05-21 Given Imaging Ltd. System and method for displaying an image stream captured in-vivo

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6810149B1 (en) * 2000-08-17 2004-10-26 Eastman Kodak Company Method and system for cataloging images
CN1777391A (zh) * 2003-04-25 2006-05-24 奥林巴斯株式会社 图像显示装置、图像显示方法及图像显示程序
WO2010113479A1 (ja) * 2009-03-31 2010-10-07 富士フイルム株式会社 画像処理装置および方法並びにプログラム

Also Published As

Publication number Publication date
EP2601880A1 (en) 2013-06-12
US8918740B2 (en) 2014-12-23
US20130152020A1 (en) 2013-06-13
WO2012132840A1 (ja) 2012-10-04
JP5197892B2 (ja) 2013-05-15
JPWO2012132840A1 (ja) 2014-07-28
EP2601880A4 (en) 2013-12-04
EP2601880B1 (en) 2014-09-03
CN103140160A (zh) 2013-06-05

Similar Documents

Publication Publication Date Title
CN103140160B (zh) 图像管理装置、图像管理装置的工作方法以及胶囊型内窥镜系统
US7119814B2 (en) System and method for annotation on a moving image
JP4971615B2 (ja) 生体内でキャプチャされた画像ストリームを編集するシステムおよび方法
US20210345865A1 (en) Systems and methods for generating and displaying a study of a stream of in-vivo images
CN101669807B (zh) 图像显示装置、图像显示方法和图像显示程序
US9304669B2 (en) System and method for displaying annotated capsule images
US8446465B2 (en) System and method for displaying an image stream captured in-vivo
AU2007201418B2 (en) System and method for assessing a patient condition
CN100562284C (zh) 图像显示装置、图像显示方法
CN103269635B (zh) 图像管理装置和方法
KR101047253B1 (ko) 화상 표시 장치
CN104350742B (zh) 用于显示图像流的系统和方法
CN104054092A (zh) 用于显示体内图像流中的活动力事件的系统和方法
CN104114077A (zh) 图像处理装置和图像处理方法
US11478125B2 (en) Systems and methods for assessment and monitoring of a mucosal disease in a subjects gastrointestinal tract
JP5676063B1 (ja) 医療装置及び医療装置の作動方法
US20100083178A1 (en) Image display apparatus, image display method, and computer program product
CN105142493A (zh) 图像管理装置
US20070066875A1 (en) System and method for identification of images in an image database
EP1770570A2 (en) System and method for identification of images in an image database
CN106455947A (zh) 图像显示装置、图像显示方法以及图像显示程序
CN101248452A (zh) 图像显示装置
US20170180674A1 (en) System and Method for Displaying Bookmarked Capsule Images

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
C41 Transfer of patent application or patent right or utility model
TR01 Transfer of patent right

Effective date of registration: 20151116

Address after: Tokyo, Japan, Japan

Patentee after: Olympus Corporation

Address before: Tokyo, Japan, Japan

Patentee before: Olympus Medical Systems Corp.

CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20150617

Termination date: 20180309

CF01 Termination of patent right due to non-payment of annual fee