CN101686799A - 图像处理装置、该图像处理装置的动作方法以及程序 - Google Patents
图像处理装置、该图像处理装置的动作方法以及程序 Download PDFInfo
- Publication number
- CN101686799A CN101686799A CN200880023920A CN200880023920A CN101686799A CN 101686799 A CN101686799 A CN 101686799A CN 200880023920 A CN200880023920 A CN 200880023920A CN 200880023920 A CN200880023920 A CN 200880023920A CN 101686799 A CN101686799 A CN 101686799A
- Authority
- CN
- China
- Prior art keywords
- image
- mentioned
- guide look
- processing apparatus
- time
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000012545 processing Methods 0.000 title claims abstract description 104
- 238000011017 operating method Methods 0.000 title 1
- 239000002775 capsule Substances 0.000 claims abstract description 43
- 238000000034 method Methods 0.000 claims description 69
- 238000001514 detection method Methods 0.000 claims description 65
- 238000007689 inspection Methods 0.000 claims description 47
- 230000008859 change Effects 0.000 claims description 31
- 238000002372 labelling Methods 0.000 claims description 24
- 239000000284 extract Substances 0.000 claims description 21
- 230000033458 reproduction Effects 0.000 claims description 14
- 230000009471 action Effects 0.000 claims description 8
- 239000000203 mixture Substances 0.000 claims description 5
- 238000003745 diagnosis Methods 0.000 claims description 4
- 230000003902 lesion Effects 0.000 claims description 4
- 238000012935 Averaging Methods 0.000 claims description 3
- 238000011084 recovery Methods 0.000 claims description 3
- 230000001932 seasonal effect Effects 0.000 claims 2
- 238000004519 manufacturing process Methods 0.000 claims 1
- 238000012360 testing method Methods 0.000 description 20
- 230000008569 process Effects 0.000 description 17
- 238000003825 pressing Methods 0.000 description 16
- 238000003860 storage Methods 0.000 description 14
- 238000001727 in vivo Methods 0.000 description 10
- 238000005096 rolling process Methods 0.000 description 10
- 210000001835 viscera Anatomy 0.000 description 9
- 210000000056 organ Anatomy 0.000 description 8
- 231100000915 pathological change Toxicity 0.000 description 8
- 230000036285 pathological change Effects 0.000 description 8
- 230000033001 locomotion Effects 0.000 description 7
- 238000012856 packing Methods 0.000 description 7
- 208000032843 Hemorrhage Diseases 0.000 description 5
- 230000006870 function Effects 0.000 description 5
- 208000037062 Polyps Diseases 0.000 description 4
- 230000003321 amplification Effects 0.000 description 4
- 238000000605 extraction Methods 0.000 description 4
- 238000003199 nucleic acid amplification method Methods 0.000 description 4
- 230000000968 intestinal effect Effects 0.000 description 3
- 230000006399 behavior Effects 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 2
- 238000004040 coloring Methods 0.000 description 2
- 238000007599 discharging Methods 0.000 description 2
- 239000012467 final product Substances 0.000 description 2
- 241000167880 Hirundinidae Species 0.000 description 1
- 230000000740 bleeding effect Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 238000005520 cutting process Methods 0.000 description 1
- 238000012217 deletion Methods 0.000 description 1
- 230000037430 deletion Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000002708 enhancing effect Effects 0.000 description 1
- 230000005021 gait Effects 0.000 description 1
- 238000009499 grossing Methods 0.000 description 1
- 238000000926 separation method Methods 0.000 description 1
- 238000004904 shortening Methods 0.000 description 1
- 210000002784 stomach Anatomy 0.000 description 1
- 230000009747 swallowing Effects 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
- 238000012876 topography Methods 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
Images
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
- A61B1/041—Capsule endoscopes for imaging
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H10/00—ICT specially adapted for the handling or processing of patient-related medical or healthcare data
- G16H10/60—ICT specially adapted for the handling or processing of patient-related medical or healthcare data for patient-specific data, e.g. for electronic patient records
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H40/00—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
- G16H40/60—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices
- G16H40/63—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices for local operation
Landscapes
- Health & Medical Sciences (AREA)
- Engineering & Computer Science (AREA)
- General Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Public Health (AREA)
- Medical Informatics (AREA)
- Biomedical Technology (AREA)
- Epidemiology (AREA)
- Surgery (AREA)
- Primary Health Care (AREA)
- Animal Behavior & Ethology (AREA)
- Heart & Thoracic Surgery (AREA)
- Optics & Photonics (AREA)
- Molecular Biology (AREA)
- Pathology (AREA)
- Physics & Mathematics (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Veterinary Medicine (AREA)
- Biophysics (AREA)
- Radiology & Medical Imaging (AREA)
- Business, Economics & Management (AREA)
- General Business, Economics & Management (AREA)
- Endoscopes (AREA)
Abstract
本发明所涉及的图像处理装置具备:获取单元,其获取作为由胶囊型内窥镜按时间序列拍摄得到的图像数据的时间序列图像数据;图像检测单元,其从所获取的上述时间序列图像数据中检测上述规定的图像数据;以及显示控制单元,其以一览形式显示所获取的上述图像数据中的规定的图像数据。
Description
技术领域
本发明涉及由胶囊型内窥镜所拍摄到的观察图像的显示。
背景技术
近年来,胶囊型内窥镜系统受到关注。胶囊型内窥镜系统是如下的系统(例如,专利文献1):在从患者的口中吞服具备摄像装置和无线装置的胶囊形状的内窥镜之后直到从人体自然排出该胶囊型内窥镜为止的观察期间,该胶囊型内窥镜能够依次拍摄胃、小肠等脏器,向外部的接收机发送该摄像图像并进行记录,将所记录的该图像显示在工作站等的计算机的显示器上来进行再现。
如上所述,胶囊型内窥镜与普通的内窥镜不同,在受验者吞服该胶囊型内窥镜之后直到自然排出为止的期间该胶囊型内窥镜拍摄各脏器,因此如观察(检查)时间为大约8个小时那样所需时间较长。因此,在诊察等阶段,确认长时间拍摄到的庞大数量的所有图像或者检测所期望的图像也要花费大量的时间、劳力。因此,公开了一种具有如下功能的胶囊型内窥镜系统:将小肠用胶囊型内窥镜的大约8个小时的检查数据归纳为大约1~2分钟的摘要(digest),并以运动图像的方式进行显示。
然而,以运动图像的方式显示该摘要并不是最好的方法。这是因为以运动图像的方式进行显示是指一个一个地依次显示静止图像,例如在病变部分存在于最后图像中的情况下,直到再现结束之前无法看到病变部分,另外,有时该运动图像的再现速度也不适合用户。
另外,胶囊型内窥镜的观察装置具有从最长8个小时、大约60000个的图像中检测出血等病变的红色检测功能。在红色检测条上显示所检测出的红色的位置。以往,医生为了观察所检测出的图像,需要一边使图像的再现位置与红色检测条所显示的检测位置一致,一边逐一确认图像。例如,在将通过红色检测所检测出的所有图像都作为要记载在报告中的图像而进行选择时,需要按下逐帧播放按钮来逐一进行选择,花费时间。
鉴于上述问题,本发明的目的在于在对由胶囊型内窥镜所拍摄的一系列图像群的摘要或通过规定的图像处理所检测出的图像进行显示的情况下进行一览显示。
专利文献1:日本特开2007-75158号公报
发明内容
本发明所涉及的图像处理装置具备:获取单元,其获取时间序列图像数据,该时间序列图像数据是由胶囊型内窥镜按时间序列拍摄得到的图像数据;图像检测单元,其从所获取的上述时间序列图像数据中检测规定的图像数据;以及显示控制单元,其对作为上述检测出的图像数据的检测图像数据进行一览显示。
本发明所涉及的图像处理装置的特征在于,具备:获取单元,其获取时间序列图像数据,该时间序列图像数据是由胶囊型内窥镜按时间序列拍摄得到的图像数据;图像检测单元,其从所获取的上述时间序列图像数据中检测规定的图像数据;显示单元,其具有用于显示图像的主显示区域和两个副显示区域,该副显示区域小于该主显示区域;以及显示控制单元,其在上述主显示区域上再现由上述图像检测单元从上述时间序列图像数据中检测出的检测图像数据,并且在各上述副显示区域上对该检测图像数据前后的检测图像数据进行再现显示,如果该再现停止,则在该主显示区域上显示停止该再现时的检测图像数据,并且在该副显示区域上显示与该检测图像数据前后的帧图像相当的该时间序列图像数据。
本发明所涉及的图像处理装置的动作方法的特征在于,获取时间序列图像数据,该时间序列图像数据是由胶囊型内窥镜按时间序列拍摄得到的图像数据,从所获取的上述时间序列图像数据中检测规定的图像数据,对作为上述检测出的图像数据的检测图像数据进行一览显示。
另外,本发明所涉及的图像处理装置的动作方法的特征在于,获取时间序列图像数据,该时间序列图像数据是由胶囊型内窥镜按时间序列拍摄得到的图像数据,从所获取的上述时间序列图像数据中检测规定的图像数据,对具有用于显示图像的主显示区域和两个副显示区域的显示画面进行显示,该副显示区域小于该主显示区域;以及在上述主显示区域上再现从上述时间序列图像数据中检测出的上述检测图像数据,并且在各上述副显示区域上对该检测图像数据前后的检测图像数据进行再现显示,如果该再现停止,则在该主显示区域上显示停止该再现时的检测图像数据,并且在该副显示区域上显示与该检测图像数据前后的帧图像相当的该时间序列图像数据。
本发明所涉及的使计算机执行显示图像的处理的图像显示程序的特征在于,使计算机执行如下处理:获取处理,获取时间序列图像数据,该时间序列图像数据是由胶囊型内窥镜按时间序列拍摄得到的图像数据;图像检测处理,从所获取的上述时间序列图像数据中检测规定的图像数据;以及显示控制处理,以一览形式显示作为上述检测出的图像数据的检测图像数据。
附图说明
图1表示第一实施方式中的在体腔内检查中利用的胶囊型内窥镜及其外围设备。
图2表示第一实施方式中的对由胶囊型内窥镜1所拍摄得到的图像数据进行图像处理的工作站7的内部结构的概要。
图3表示第一实施方式的内窥镜系统的观察画面。
图4表示第一实施方式的摘要显示的显示方法为一览显示的情况下的显示画面。
图5是用于说明第一实施方式中的选择了命令“再现该帧周围的帧”54f的情况下的一例(之一)的图。
图6是用于说明第一实施方式中的选择了命令“再现该帧周围的帧”54f的情况下的一例(之二)的图。
图7表示第一实施方式的摘要显示的显示方法为运动图像显示的情况下的显示画面。
图8是用于说明第二实施方式的一览显示的图。
图9是用于说明第二实施方式中的针对被一览显示的各图像附加注释的情形的图。
图10是用于说明第二实施方式中的用于将一览显示的图像成批输出到报告中的按钮的图。
图11表示第三实施方式(实施例1)的同时显示一览显示和彩色条或时间条并明确示出了在一览显示上所选择的图像的位置关系的显示画面。
图12表示第三实施方式(实施例2)的以不同的画面同时显示一览显示和彩色条或时间条并明确示出了在一览显示上所选择的图像的位置关系的一览显示窗口和概要信息显示窗口。
图13表示第四实施方式(实施例1)中的在彩色条或时间条上显示一览显示区间的一览显示画面。
图14表示第四实施方式(实施例2)中的在彩色条或时间条上显示一览显示区间的一览显示画面。
图15表示第四实施方式(实施例3)中的在彩色条或时间条上显示一览显示区间的一览显示画面。
图16表示第四实施方式(实施例4)中的在彩色条或时间条上显示一览显示区间的一览显示画面。
图17表示第五实施方式中的以任意的单位实施一览显示上的滚动的一览显示画面。
图18表示第六实施方式(实施例1)中的从运动图像显示画面转变为一览显示画面的情形。
图19表示第六实施方式(实施例2)中的从运动图像显示画面转变为一览显示画面的情形。
图20表示第六实施方式(实施例3)中的从运动图像显示画面31转变为一览显示画面100的情形。
图21表示第六实施方式(实施例4)中的从运动图像显示画面31转变为一览显示画面100的情形。
图22表示第六实施方式(实施例5)中的从运动图像显示画面31转变为一览显示画面100的情形。
图23表示第七实施方式(实施例1)中的从一览显示画面转变为运动图像显示画面的情形。
图24表示第七实施方式(实施例2)中的从一览显示画面转变为运动图像显示画面的情形。
图25表示第七实施方式(实施例3)中的从一览显示画面转变为运动图像显示画面的情形。
图26表示第八实施方式中的在彩色条或时间条上显示一览显示的页区间的一览显示画面。
图27表示第九实施方式(实施例1)中的能够对一览显示上的关注图像作出记号的一览显示画面。
图28表示第九实施方式(实施例2)中的能够对一览显示上的关注图像作出记号的一览显示画面。
图29表示第十实施方式(实施例1)中的一览显示用副显示区域的关注图像的显示状态发生变化的情形。
图30表示第十实施方式(实施例2)中的一览显示用副显示区域的关注图像的显示状态发生变化的情形。
图31表示第十一实施方式中的在运动图像显示画面中所选出的图像被追加到一览显示画面中的情形。
图32表示第十二实施方式中的在彩色条或时间条上对为了一览显示而抽取出的图像作出标记的一览显示画面。
图33表示第十二实施方式(变形例1)中的对在与为了一览显示而抽取出的图像对应的位置处作出标记的彩色条或时间条中的期望范围进行显示的一览显示画面的一例。
图34表示第十二实施方式(实施例2)的一览显示画面。
图35表示第十三实施方式的一览显示画面100。
图36表示第十四实施方式中的使鼠标光标161移动到一览显示区域101上所显示的图像时的图像的放大显示。
图37表示第十五实施方式中的对用于检测摘要图像的检测条件进行设定的检测条件设定画面。
图38表示第十六实施方式中的从时间序列图像群中指定位于特定区间的图像群并对所指定的该范围内的时间序列图像进行一览显示的一览显示画面100。
图39表示第十七实施方式中的用于按每个脏器(部位)或每个特定区间检测摘要图像的检测条件设定画面。
图40表示第十八实施方式中的在一览显示跨越多页的情况下在经过操作者所设定的时间之后依次对一览显示的页进行翻页的情形。
图41表示第十九实施方式中的用于设定观察时间的检测条件设定画面200。
图42表示第二十实施方式中的内窥镜系统的观察画面。
具体实施方式
<第一实施方式>
在本实施方式中,说明在显示由胶囊型内窥镜所拍摄的一系列图像群的摘要的情况下以一览形式进行显示的情形。通过使用本实施方式,在对由胶囊型内窥镜所拍摄的一系列图像群的摘要或通过规定的图像处理所检测出的图像进行显示的情况下能够进行一览显示,能够高效地辨认所需的图像。
图1表示本实施方式的在体腔内检查中利用的胶囊型内窥镜及其外围设备。如图1的(A)所示,使用了胶囊型内窥镜1的检查系统由胶囊型内窥镜1、天线衬垫(antenna pad)4、外部装置5构成。
通过患者2从口中吞服胶囊型内窥镜1,该胶囊型内窥镜1检查体腔内。外部装置5是被配置在该患者2的体外的接收机,该接收机与通过无线接收由胶囊型内窥镜1所拍摄的图像数据的多个天线衬垫4相连接。
在进行体腔内检查时,将Compact Flash(注册商标)存储器等可移动式存储介质安装于外部装置5,来记录从胶囊型内窥镜1发送并由外部装置5所接收到的图像信息。
并且,通过该可移动式存储介质,将上述图像信息取入到个人计算机、工作站等终端装置7(在本实施方式中使用工作站7)。
或者,如图1的(B)所示,该外部装置5能够安装于托架6中或者能够通过未图示的USB线缆等来与工作站7进行电连接,能够进行信息的传送。由此,能够将插入到该外部装置5的可移动式存储介质所存储的图像数据取入到工作站7。另外,也可以对工作站7连接移动式存储介质的读取装置,对该读取装置插入可移动式存储,从而读出可移动式存储所存储的图像数据,并将该图像数据取入到工作站7。
通过键盘9、鼠标10等输入操作设备的操作来执行上述图像的取入。此时,也可以检测USB等的电连接,以该电连接的检测为触发来取入图像。取入到工作站7的图像能够显示在显示器8上或者输出到打印机。
如图1的(A)所示,在吞服胶囊型内窥镜1来进行内窥镜检查的情况下,在患者2所穿上的夹克3上安装有多个天线衬垫4。此时,也可以对患者直接粘贴天线衬垫4。由胶囊型内窥镜1拍摄得到的图像数据通过无线向天线衬垫4发送,并由天线衬垫4接收该图像数据。然后,该图像数据被保存到与天线衬垫4相连接的外部装置5中。该外部装置5例如通过装卸自如的挂钩(hook)安装在患者2的腰带上。
图2表示本实施方式的对由胶囊型内窥镜1拍摄得到的图像数据进行图像处理的工作站7的内部结构的概要。工作站7由存储器20、大容量存储装置21、控制部22、输入接口(I/F)23、输出接口(I/F)24、图像处理部25以及连接这些部件的总线26构成。
存储器20是在各种处理中利用的RAM(Random AccessMemory:随机存取存储器)、ROM(Read Only Memory:只读存储器)等存储器。大容量存储装置21是保存大容量的数据的硬盘驱动器(HDD)。
输入接口23是取入来自外部装置5(或者Compact Flash(注册商标)存储器等的可移动式存储介质)的图像数据或者从键盘9、鼠标10等操作部输入数据或指示的输入接口。输出接口24是用于向显示器8输出由胶囊型内窥镜所拍摄的图像等或者向打印机等输出数据的输出接口。
控制部22通过CPU等来实现,该CPU执行大容量存储装置21所存储的各种处理程序。另外,进行画面的控制、各种控制,该画面用于进行上述本发明的实施方式的一览显示、运动图像显示。
图像处理部25根据控制部22的控制,从外部装置5或大容量存储装置21获取图像数据,对所获取的该图像数据进行浓度变换(伽马变换等)、平滑化(噪声去除等)、锐化(边缘增强等)、图像识别(特征图像区域的检测、平均色的运算等)等各种图像处理。
由胶囊型内窥镜1拍摄得到的图像数据被逐一发送到外部装置5,并被存储到外部装置5内的可移动式存储介质中。如上所述,通过将外部装置5安装于托架6中或者将可移动式存储介质设置于读取装置中来与工作站7进行电连接,将所存储的该图像数据保存到工作站7内的大容量存储装置21中。这样,由胶囊型内窥镜1所拍摄的图像被取入到工作站7中。
图3表示本实施方式的内窥镜系统的观察画面。如图3所示,在显示器8上显示作为GUI画面的窗口31(“诊察/诊断”窗口)。在窗口31内,主显示区域32、图像操作区域39、作为表示一系列被检体内图像的摄像期间的时间刻度的彩色条36和时间条37以及副显示区域38在显示画面上按该顺序从上到下排列显示,其中,该主显示区域32显示主显示图像等,该图像操作区域39显示表示为图标的各种图像操作按钮,该副显示区域38显示缩略图等。
在主显示区域32内显示主显示图像33、天线配置图34、患者信息显示栏35以及摘要显示操作区域40,该主显示图像33是根据从键盘9、鼠标10等操作部输入的指示信息而从一系列被检体内图像中选择的图像,该天线配置图34示意性地表示患者2上的天线11的配置。
在患者信息显示栏35中作为文字信息而显示与选择作为主显示图像33的被检体内图像相对应的患者2的姓名、ID编号、性别、年龄、出生年月日、摄像年月日、摄像时刻等。此外,在主显示区域32中根据规定操作能够显示两个以上的规定数量的主显示图像。
在天线配置图34中,示意性地显示天线4的配置和患者2的一部分轮廓。另外,在天线配置图34中,在天线11的附近以文字方式显示作为该各天线的识别编号的天线编号。
在摘要显示操作区域40中显示摘要显示算法选择开关41(41a、41b、41c、41d、41e)、摘要显示方法选择开关42(“一览”开关42a、“运动图像”开关42b)以及运动图像控制键43。
摘要显示算法选择开关41是如下的开关:在从由胶囊型内窥镜所拍摄的庞大数量的时间序列图像(病例数据)中例如抽取几百个~几千个的图像来作为摘要进行显示的情况下,指定用于选择作为被显示为该摘要的对象的图像(以下称为摘要图像)的算法。
当按下开关1(41a)时,例如抽取第20个、第40个、第60个…那样,从由胶囊型内窥镜所拍摄的庞大数量的图像中每隔固定间隔而抽取图像来显示为摘要。
当按下开关2(41b)时,例如在第n个图像与第n+1个图像相似的情况下,删除第n个图像,对所有图像进行这种删除操作,其结果所得到的图像仅为图像之间有较大变化(运动)的图像,因此将该图像显示为摘要。例如,能够取两个图像间的像素值的差,根据该差是否超过阈值来判断图像间的相似。
此外,进行比较的图像不限定于第n个图像和第n+1个图像,也可以是第n个图像和第n±m个(m:任意的整数)图像。另外,也可以根据第n个的图像数据与第n个的前后p个(n、p:任意的整数)的图像平均值的图像数据间的差来抽取图像数据。
当按下开关3(41c)时,仅抽取拍摄到被认为出血、病变的特征部位的图像,并作为摘要进行显示。作为抽取拍摄到出血部位的图像的方法,例如也可以抽取在局部图像区域具有超过规定阈值的红色成分的图像。另外,作为抽取拍摄到病变部位的图像的方法,例如也可以预先登记病变形状、病变的颜色等的图案,抽取具有与该图案一致或在规定的误差范围内一致的图案的图像。
当按下开关4(41d)时,例如不抽取如仅反映出除了作为观察对象的器官部分以外的器官(例如管腔部分)、残渣那样的进行诊断所不需要的图像,而抽取除此以外的图像来显示为摘要。作为抽取拍摄到除了作为观察对象的器官部分以外的器官的图像的方法,例如能够根据图像整体的颜色成分的平均等来确定器官,因此也可以根据目标器官的图像的特征(颜色成分等)的相似度来进行抽取。
当按下开关5(41e)时,能够显示将开关2(41b)、开关3(41c)以及开关4(41d)的功能组合得到的摘要图像。即,能够仅抽取有运动且存在病变、红色的图像来显示摘要。
当按下开关6(41f)时,能够仅对大约8个小时的病例数据之中用户预先选择的器官部分(例如小肠部分)应用开关1(41a)~5(41e)中的任一个开关的功能。
当按下“一览”开关42a时,以一览的方式显示摘要图像。此时,运动图像控制键43成为不显示状态或不可用状态。在图4中详细记述该摘要图像的一览显示。
当按下“运动图像”开关42b时,将摘要图像一个一个地按顺序显示为运动图像。此时,在运动图像控制键43处于不显示状态或不可用状态的情况下,“运动图像”控制键43被显示并成为可使用状态。在图7中详细记述该摘要图像的运动图像显示。
“运动图像”控制键43是以运动图像的方式显示摘要图像的情况下控制运动图像的再现、反向再现、暂停的开关。
在彩色条36上按时间序列整体地显示包含在一系列被检体内图像中的各图像的平均色。即,在彩色条36上的各时刻的显示区域中显示有在该时刻所拍摄到的被检体内图像的平均色。一系列被检体内图像由于与所拍摄到的脏器相应地具有特有的平均色,因此观察者等根据沿着彩色条36上的时间轴(图3中是横轴)的平均色的变化,能够容易地辨别各时刻的被检体内图像中所拍摄到的脏器。
在时间条37上显示滑块37a,该滑块37a在该时间条37上能够沿时间轴方向移动。滑块37a在时间条37上指示作为主显示图像33而显示的被检体内图像的拍摄时刻,并且随着主显示图像33的显示切换而在时间条37上移动。
在副显示区域38上作为缩略图而显示从一系列被检体内图像中选择并抽取出的图像。具体地说,例如与规定的按钮操作或鼠标操作等相应地,在该操作时刻显示为主显示图像33的被检体内图像作为缩略图而追加显示在副显示区域38上。
图4表示本实施方式中的摘要显示的显示方法为一览显示的情况下的显示画面。如上所述,当按下“一览”开关42a时,能够显示该摘要一览显示画面51。一览显示的各图像是缩略图。以一览方式显示的缩略图的个数例如是纵向7个×横向7个、纵向10个×横向10个等,能够由用户任意地进行选择。另外,缩略图的大小也能够由用户任意地进行选择。此外,也可以设为当指定缩略图的大小时自动地显示与所指定的图像大小相应的个数的缩略图。
当一览显示了摘要图像时,如附图标记52所示的帧那样,拍摄到认为出血、病变的特征部位的帧图像自动地以高亮等方式被增强显示,或者被附加规定的识别信息来进行显示。由此,容易引起用户的注意。
当选择一览显示的摘要图像中的任意图像时,对显示有多个命令的弹出式菜单54进行显示。弹出式菜单54所显示的命令中有“追加注释”54a、“追加缩略图”54b、“追加报告”54c、“附加界标”54d、“从该帧起再现”54e、“再现该帧周围的帧”54f。
当选择“追加注释”54a时,显示注释输入画面53,能够在一览显示的基础上对所选择的该帧图像追加对该帧图像的意见等来作为注释。此外,追加了注释的帧图像也可以自动地追加到报告中。
当选择“追加缩略图”54b时,能够将所选择的该帧图像的缩略图登记到副显示区域38(缩略图登记)。此外,也能够通过双击或右击所选择的该帧图像来追加缩略图。
当选择“追加报告”54c时,能够将所选择的该帧图像直接粘贴在记载对病例的意见、诊断等的报告中。
当选择“附加界标”54d时,能够对所选择的该帧图像附加界标。当附加界标时,在时间条37上的与附加有该界标的图像相当的时间的位置处显示规定的标记。
当选择“从该帧起再现”54e时,转变为窗口31,在主显示区域32上再现所选择的该帧图像以后的普通的运动图像。
当选择“再现该帧周围的帧”54f时,转变为窗口31,在主显示区域32上一个一个地依次显示以所选择的该帧图像为中心的前后x(x:任意的整数)个图像来进行再现显示。关于x个的设定方法,既可以在菜单条的“设定”中预先设定,也可以从通过右击所显示的弹出式菜单中选择“再现该帧周围的帧”54f后,进一步显示弹出式菜单,在该弹出式菜单内设置设定命令。另外,当选择“再现该帧周围的帧”54f时,如图5和图6所示,转变为窗口31,在主显示区域32上一个一个地依次显示如下的图像来进行再现显示:处于所选择的该帧图像与前一个抽取图像之间的所有图像;以及处于所选择的帧图像与后一个抽取图像之间的所有图像。
图7表示本实施方式的摘要显示的显示方法为运动图像显示的情况下的显示画面。当按下“运动图像”开关42b时,在主显示区域32内能够将摘要图像一个一个地按顺序显示为运动图像。
在画面左侧显示“帧频”设定栏61、“个数”设定栏62、“时间”显示栏63。在“帧频”设定栏61中能够设定将由摘要显示算法选择开关41所抽取的图像一个一个地按顺序显示为运动图像的情况下的帧频。在“个数”设定栏62中能够设定将由摘要显示算法选择开关41所抽取的图像一个一个地按顺序显示为运动图像的情况下的显示个数。在“时间”显示栏63中根据“帧频”设定栏61和“个数”设定栏62中所设定的帧频和个数来显示运动图像的再现时间。
当以运动图像的方式显示摘要图像时,拍摄到认为出血、病变的特征部位的帧图像自动地以高亮等方式被增强显示,或者被附加规定的识别信息来进行显示。由此,容易引起用户的注意。
在运动图像显示过程中按下“运动图像”控制键43的暂停键,从而在显示任意帧图像的状态下停止该运动图像再现。当对停止后的该画面进行右击或双击时,对显示有多个命令的弹出式菜单64进行显示。弹出式菜单54所显示的命令中有“追加注释”64a、“追加缩略图”64b、“追加报告”64c、“附加界标”64d、“从该帧起再现”64e、“再现该帧周围的帧”64f。
当选择“追加注释”64a时,显示注释输入画面63,能够在一览显示的基础上对所选择的该帧图像追加注释。此外,追加了注释的帧图像也可以自动地追加到报告中。
当选择“追加缩略图”64b时,能够将所选择的该帧图像的缩略图登记到副显示区域38(缩略图登记)。此外,也能够通过双击或右击所选择的该帧图像来追加缩略图。
当选择“追加报告”64c时,能够将所选择的该帧图像直接粘贴在报告中。
当选择“附加界标”64d时,能够对所选择的该帧图像附加界标。当附加界标时,在时间条37上的与附加有该界标的图像相当的时间的位置处显示规定的标记。
当选择“从该帧起再现”64e时,再现所选择的该帧图像以后的普通的运动图像。
当选择“再现该帧周围的帧”64f时,一个一个地依次显示以所选择的该帧图像为中心的前后x(x:任意的整数)个图像来进行再现显示。关于x个的设定方法,既可以在菜单条的“设定”中预先设定,也可以从通过右击所显示的弹出式菜单中选择“再现该帧周围的帧”64f后,进一步显示弹出式菜单,在该弹出式菜单内设置设定命令。
此外,在本实施方式中,在弹出式菜单中显示命令群,但是不限定于此,例如也可以将命令群显示在预先显示的按钮、下拉菜单等中。
另外,在本实施方式中,对通过摘要显示算法所抽取的图像进行了一览显示,但是不限定于此,也可以对除了通过摘要显示算法所抽取的图像以外的图像进行一览显示。
根据本实施方式,能够按照用户的目的来选择摘要显示的算法。另外,能够将摘要显示的显示方法设为多个来使用户选择。另外,提供以摘要显示为中心的观察方式,可期待观察时间的缩短。
<第二实施方式>
在第一实施方式中,以摘要图像为对象进行了一览显示,但是在本实施方式中,对由胶囊型内窥镜拍摄得到的病例数据实施一个以上的图像处理例程,对通过各个图像处理所检测出的图像以标签的方式附加该图像处理例程名来进行一览显示。此外,在本实施方式中,由于也使用第一实施方式所使用的工作站7,因此省略其说明。
图8是用于说明本实施方式的一览显示的图。首先,由外部装置5向工作站7传输由胶囊型内窥镜拍摄得到的大约60000个的图像所构成的病例数据71。图像处理部25对该病例数据71实施例如颜色检测(红色检测、白色检测等)、息肉检测等的一个以上的图像处理例程,其中,在该颜色检测中对基于规定的颜色成分的亮度值大于规定的阈值的图像进行检测,在该息肉检测中根据预先登记的息肉的形状、颜色等图案来检测息肉。
接着,控制部22制作仅针对该病例数据71中的通过图像处理所检测出的图像的列表数据72。列表数据72中通过上述图像处理所检测出的图像与标签名相对应。标签名是通过上述图像处理所检测出的图像的图像检测例程名(例如红色检测、白色检测等)。
接着,控制部22根据该列表数据72,使显示器8将病例数据的图像作为检测结果一览显示73而进行一览显示。此时,在一览显示的各图像的附近显示标签名。此外,作为标签名而显示的内容不限定于文本,也可以是通过识别用图形等作出的标记。
由此,能够以一览显示的方式观察通过规定的图像处理例程所检测出的图像,因此能够缩短观察这些检测结果时所花费的时间。
接着,说明对一览显示的各图像附加注释的情形。
图9是用于说明本实施方式中的对一览显示的各图像附加注释的情形的图。使用鼠标、键盘等输入装置对检测结果一览显示73所显示的图像中的任一个图像进行选择,对所选择的该图像输入注释。
于是,所输入的该注释数据72c被附加到列表数据72内的与该注释数据对应的图像数据中。
并且,当使用鼠标等输入装置选择要记载在报告中的图像时,在选择了附加有注释的图像的情况下,该注释被自动地插入到报告74中。
由此,能够简单地对通过红色检测功能或白色检测功能等所检测出的图像附加注释,因此能够高效地进行诊断。另外,由于能够从所检测出的图像中简单地选择要记载在报告中的图像,因此能够有效地制作报告。
此外,也可以如图10所示那样,通过按下设置于检测结果一览显示73的画面上的规定的按钮75,来将列表数据72的图像成批地记载到报告中。由此,由于能够简单地制作登载有所检测出的所有图像的报告,因此能够高效地制作报告。
根据本实施方式,为了快速地浏览检测结果,而能够制作包含所检测出的所有图像的列表数据,根据该列表数据来将图像的一览显示在画面上。另外,能够使用键盘等输入装置来对显示为检测结果的一览的图像输入能够使用于报告等的注释。另外,通过按下设置在画面上的规定的按钮,能够将所检测出的所有图像自动地输出到报告中。
<第三实施方式>
在本实施方式中,对如下的操作进行说明:在同一画面上实施缩略图的一览显示和所有图像的概要信息显示(彩色条、时间条等),显示将在一览显示中选择或显示的缩略图与所有图像的概要信息进行链接的信息。
图11表示如下的第三实施方式(实施例1)的显示画面:同时显示一览显示和彩色条或时间条,明确示出了在一览显示上所选择的图像的位置关系。在一览显示画面100上存在显示有缩略图的一览的一览显示区域101和显示有彩色条或时间条103等的所有图像的概要信息的概要信息显示区域105。
在彩色条或时间条103上,能够通过光标104等标记或线、颜色变化等来对在一览显示上聚焦的图像102的位置信息进行显示。
另外,当移动一览显示上的焦点(以下将一览显示上的通过焦点所选择的图像称为焦点图像102。)时,随之,光标104等的位置显示也移动到该焦点图像的位置。相反地,当移动彩色条或时间条103上的光标104时,随之,一览显示上的焦点也移动,焦点图像102被变更。此时,在光标104移动到没被一览显示的区域的情况下,一览显示进行滚动,从而一览显示上的焦点聚焦于与光标104的移动位置对应的图像上。
图12表示第三实施方式(实施例2)的如下的一览显示窗口111和概要信息显示窗口112:在不同的画面同时显示一览显示和彩色条或时间条,明确示出了在一览显示上所选择的图像的位置关系。
本实施例与上述实施例1不同,缩略图的一览显示区域与彩色条或时间条103等的显示所有图像的概要信息的概要信息显示区域分离,分别如一览显示窗口111、概要信息显示窗口112那样成为不同的窗口。
作为画面上的动作,与实施例1相同,一览显示窗口上的焦点随着概要信息显示窗口112上的光标104的位置而进行移动。因而,当对这两个画面中的一个画面进行操作时,根据该操作,另一个画面的显示也随之发生变化。此外,画面的数量可以是若干个,也可以存在与所显示的数据项目的数量相应的个数的画面。
<第四实施方式>
在本实施方式中,针对如下内容进行说明:显示正在一览显示的图像的区间相当于所有图像的概要信息中的哪个部分。作为表示相当于所有图像的概要信息中的哪个部分的方法,具有画线、上色等各种方法。
图13表示第四实施方式(实施例1)的在彩色条或时间条上显示一览显示区间的一览显示画面。如该图所示,通过在彩色条或时间条103上画线115,能够明确在一览显示区域101中正在一览显示的图像的区间。
图14表示第四实施方式(实施例2)的在彩色条或时间条上显示一览显示区间的一览显示画面。如该图所示,通过改变颜色来显示与正在一览显示的图像对应的区间所对应的彩色条或时间条103上的区间部分116。由此,能够明确正在一览显示的区间。
图15表示第四实施方式(实施例3)的在彩色条或时间条上显示一览显示区间的一览显示画面。如该图所示,通过标记117来显示与正在一览显示的图像对应的区间所对应的彩色条或时间条103上的区间部分116。由此,能够明确正在一览显示的区间。
图16表示第四实施方式(实施例4)中的在彩色条或时间条上显示一览显示区间的一览显示画面。在本实施例中,为了确定一览显示的图像的区间,而改变对位置进行显示的光标104的形状。在该图中,与光标104的宽度对应的区间的图像正在进行一览显示。由此,能够明确正在一览显示的区间。
<第五实施方式>
在本实施方式中,针对如下内容进行说明:一览显示画面能够进行滚动,不仅是按每行进行该滚动,也可以选择每多行、每个画面、每个图像来进行该滚动。
图17表示第五实施方式中的以任意的单位实施一览显示上的滚动的一览显示画面。图17的(A)表示以一行为单位将一览进行滚动的情况。图17的(B)表示以多行为单位将一览进行滚动的情况。图17的(C)表示以画面(页)为单位将一览进行滚动的情况。图17的(D)表示以一个图像为单位将一览进行滚动的情况。
能够预先设定这种实施滚动操作的情况下的滚动量。因而,根据设定值,滚动操作时的图像的滚动量不同。
<第六实施方式>
在本实施方式中,针对如下内容进行说明:在从进行运动图像显示的画面转变为一览显示画面时,(1)从连续图像的开头起选择或显示特征图像;(2)以在运动图像显示画面上正在显示的画面为中心选择或显示特征图像;(3)选择或显示包含运动图像显示画面上正在显示的画面的范围的特征图像。
图18表示第六实施方式(实施例1)中的从运动图像显示画面转变为一览显示画面的情形。该图左侧的运动图像显示画面是相当于图3的画面31的画面。另外,光标120是表示图3的画面31的彩色条36或时间条37上的当前的动作再现位置的光标。
在本实施例中,在从运动图像显示画面31转变为一览显示画面100时,与当前的运动图像的再现无关地,从连续图像的开头起对特征图像进行一览显示。
由此,在从运动图像显示画面31转变为一览显示画面100时,无论是什么样的状况都能够从连续图像的开头起选择或显示特征图像。另外,无论在什么样的操作的过程中都能够从连续运动图像的开头起确认图像。
图19表示第六实施方式(实施例2)中的从运动图像显示画面转变为一览显示画面的情形。在本实施例中,在从运动图像显示画面31转变为一览显示画面100时,以在运动图像显示画面31上当前正在再现的图像位置为中心来对规定个数的图像进行一览显示。由此,能够对位于运动图像显示画面31上正在观察的图像前后的特征图像进行观察。
图20表示第六实施方式(实施例3)中的从运动图像显示画面31转变为一览显示画面100的情形。在本实施例中,在从运动图像显示画面31转变为一览显示画面100时,对包含当前的图像位置的页的图像进行一览显示。由此,无论从什么样的操作开始,在光标处于规定的区间内的情况下,都选择或显示相同的图像群。
图21表示第六实施方式(实施例4)中的从运动图像显示画面31转变为一览显示画面100的情形。在本实施例中,在从运动图像显示画面31转变为一览显示画面100时,从页的开头起对当前正在显示的图像进行一览显示。
图22表示第六实施方式(实施例5)中的从运动图像显示画面31转变为一览显示画面100的情形。在本实施例中,在从运动图像显示画面31转变为一览显示画面100时,以当前正在再现的图像成为页的末尾的方式进行一览显示。
另外,能够设定选择图18所示的第六实施方式(实施例1)、图19所示的第六实施方式(实施例2)、图20所示的第六实施方式(实施例3)、图21所示的第六实施方式(实施例4)、图22所示的第六实施方式(实施例5)中的哪一个实施例。
<第七实施方式>
在本实施方式中,针对如下的内容进行说明:在从一览显示画面100转变为运动图像显示画面31时,(1)对连续图像的开头图像进行显示;(2)对显示为一览显示画面之前的画面进行显示;(3)对在一览显示画面上所选择的画面进行显示。
图23表示第七实施方式(实施例1)中的从一览显示画面转变为运动图像显示画面的情形。在该图中,在从一览显示画面100转变为运动图像显示画面31时,选择或显示连续图像的开头图像。由此,无论在什么样的操作的过程中都能够从连续运动图像的开头起确认图像。
图24表示第七实施方式(实施例2)中的从一览显示画面转变为运动图像显示画面的情形。在该图中,在从一览显示画面100转变为运动图像显示画面31时,选择或显示转变为一览显示之前的图像。由此,无论在什么样的操作的过程中都能够返回到一览显示画面显示前的操作。
图25表示第七实施方式(实施例3)中的从一览显示画面转变为运动图像显示画面的情形。在该图中,在从一览显示画面100转变为运动图像显示画面31时,选择或显示当前在一览上所聚焦的图像。由此,能够以在一览显示图像中正在关注的图像为起点来确认图像。
<第八实施方式>
在本实施方式中,针对如下内容进行说明:在一览显示画面上选择或显示的画面跨越多页的情况下,将获知其页分隔那样的显示线显示在所有图像的概要信息(彩色条或时间条)上。显示方法中有画线、上色等各种方法。
图26表示第八实施方式中的在彩色条或时间条上显示一览显示的页区间的一览显示画面。如该图所示,在彩色条或时间条103上所画的线130的间隔与被一览显示的图像的显示区间相对应。
由此,能够明确一览显示中的页区间。此外,不仅仅用线表示页的分割,例如也可以采用第四实施方式所示的各种标记方法。
<第九实施方式>
在本实施方式中,说明在一览显示画面上能够对所关心的图像作出记号的一览显示画面。
图27表示第九实施方式(实施例1)中的能够对一览显示上的关注图像作出记号的一览显示画面。在本实施例中,在一览显示画面100上能够选择所关注的图像并作出记号131。
如该图所示,能够通过显示标记等或改变框的颜色等在图像附近进行显示来辨别作出记号的图像。此外,用于识别作出记号的图像的标记只要是识别记号即可,标记的颜色、形状是任意的。也可以是文本。
图28表示第九实施方式(实施例2)中的能够对一览显示上的关注图像作出记号的一览显示画面。在本实施例中,与图27同样地,在一览显示画面100上能够选择所关注的图像并作出记号。
如该图所示,在一览显示区域101上作出记号的图像作为缩略图136被登记在副显示区域135上。此外,与一览显示相关联的标记只要是识别记号即可,标记的颜色、形状是任意的。也可以是文本。
这样,在对一览显示的任意的图像作出记号的情况下,除了对该图像附加标记或者变更该图像的框的颜色(增强显示)等在一览显示用缩略图的附近附加识别信息之外,还能够准备用于显示作出记号的该图像的副显示区域,在该区域追加作出记号的图像。
<第十实施方式>
在本实施方式中针对如下内容进行说明:当将一览显示区域进行滚动时,与此同时地,在一览显示图像上作为关心图像而作出记号并显示在副显示区域上的图像进行滚动。此时,在副显示区域所显示的图像不存在于正在一览显示的图像区间内的情况下,也能够选择显示该图像的方法或不显示该图像的方法。
图29表示第十实施方式(实施例1)的一览显示用副显示区域的关注图像的显示状态发生变化的情形。如该图所示,在一览显示区域101上作出记号的关注图像作为缩略图而显示在副显示区域135。
在副显示区域135仅显示处于当前在一览显示区域101上正在显示的图像的区间的关注图像。因此,当滚动一览显示区域101来替换所有图像时,与其相应地副显示区域135的缩略图也被替换。此外,能够通过设定来切换当在一览显示区域101上替换图像时副显示区域135是否也要替换。
图30表示第十实施方式(实施例2)的一览显示用副显示区域的关注图像的显示状态发生变化的情形。如该图所示,在一览显示区域101上作出记号的关注图像作为缩略图而显示在副显示区域135上。
在本实施例中,没有被显示在一览显示区域101上的区间的关注图像也全部都显示在副显示区域135上。因此,即使滚动一览显示区域101来替换所有图像,副显示区域的缩略图也不会发生变化。
但是,在具有副显示区域135无法完全放置的数量的缩略图的情况下,在中央显示与图像的显示位置最靠近的缩略图。此外,能够通过设定来切换当在一览显示区域101上替换图像时副显示区域135是否也要替换。
<第十一实施方式>
在本实施方式中,在进行运动图像显示的图像中存在已经作为特征图像而拾取的图像的情况下,也能够设定为对通过为了一览显示而选择的算法没被选择的图像也进行一览显示。另外,针对如下的内容进行说明:对这些图像显示表示通过其它算法而被选择的情形的标记或者通过变更框的颜色等来作出标记。
图31表示第十一实施方式中的在运动图像显示画面中拾取的图像被追加到一览显示画面的情形。如该图所示,即使在运动图像显示画面31中拾取的图像是通过所选择的一览显示用算法(病变部检测等)没有被选择的图像,也能够进行显示为一览显示画面上的缩略图的设定。也可以通过显示表示不是通过所选择的一览显示用算法而选择的图像的标记来区分该拾取图像。
<第十二实施方式>
在本实施方式中,针对如下内容进行说明:将一览显示画面所显示的每个图像的位置叠加显示在所有图像的概要信息上。由此,能够判断通过所选择的算法抽取出的图像存在于所有图像的哪个部分。
图32表示第十二实施方式中的在彩色条或时间条上对为了一览显示而抽取出的图像作出标记的一览显示画面。如该图所示,通过线140在彩色条或时间条103上的与为了一览显示而抽取出的各个图像相对应的位置作出标记。由此,能够明确为了一览显示而抽取出的图像在彩色条或时间条103上的位置。此外,不仅仅用线表示图像的位置,也可以采用第四实施方式所示的各种标记方法。
图33表示第十二实施方式(变形例1)中的对在与为了一览显示而抽取出的图像对应的位置处作出标记的彩色条或时间条中的期望范围进行显示的一览显示画面的一例。在图32中,在表示所有时间序列图像的彩色条或时间条103上,在与为了一览显示而抽取出的各个图像对应的位置处作出标记。另一方面,在本变形例中,选择图32所示的表示所有时间序列图像的彩色条或时间条103中的期望范围,来使与所选择的该范围相应的彩色条或时间条进行放大显示(彩色条或时间条103a)。在一览显示区域101中仅显示与该彩色条或时间条103a上的标记相对应的图像。
图34表示第十二实施方式(变形例2)的一览显示画面。从没有缩小到期望范围的一览显示画面(图32)中,既可以如图34的标记141所示那样以行为单位指定范围,或者也可以以页为单位指定范围。
<第十三实施方式>
在本实施方式中,示出如下的显示例:将如上述实施方式所说明的那样通过规定的检测算法所检测出的摘要图像和该摘要图像前后的时间序列图像(不执行检测算法的情况下的图像)显示在一览显示区域101上。
图35表示本实施方式的一览显示画面100。在一览显示区域101上,在中央的列151中从上开始按顺序沿时间序列显示摘要图像T1、T2、T3、…Tn。夹着各摘要图像T1、T2、T3、…Tn在左右显示有各摘要图像T1、T2、T3、…Tn前后的时间序列图像。具体地说,在图像区域153上连续显示时间序列上早于摘要图像的一个以上的图像。另外,在图像区域152上连续显示时间序列上晚于摘要图像的0个以上的图像。也可以为了容易获知图像区域151是摘要图像而对图像区域151进行放大显示或附加标记。
根据本实施方式,能够确认通过规定的检测算法所检测出的摘要图像前后的时间序列图像。由此,通过在一览显示的时刻显示具有特征的图像前后的图像,能够提高观察的效率。
<第十四实施方式>
在本实施方式中,针对使鼠标光标161移动到一览显示区域101所显示的各图像时的图像的放大显示进行说明。
图36表示本实施方式中的使鼠标光标161移动到一览显示区域101所显示的图像时的图像的放大显示。最靠近鼠标光标161的图像如附图标记160所示那样被放大显示。在显示由附图标记160所示出的放大显示时,也可以同时进行属性显示。
根据本实施方式,当将光标置于被一览显示的图像中的想要关注的图像时,能够使该图像进行放大显示。由此,即使不转变为其它画面也能够使想要关注的该图像进行放大显示,从而提高观察效率。
<第十五实施方式>
在本实施方式中,说明设定用于检测摘要图像的阈值的情况。
图37表示本实施方式中的对用于检测摘要图像的检测条件进行设定的检测条件设定画面。如第一实施方式所说明的那样,当按下开关2(41b)时,从时间序列图像中根据相似度来检测摘要图像,在检测条件设定画面170中能够设定该相似度。
在图37中“特征水平”171相当于上述相似度。在“特征水平”171中例如能够通过光标172从五个等级选择并设定特征水平。如上所述,例如取两个图像间的像素值的差,根据该差是否超过阈值来判断图像间的相似。因而,将特征水平设定得越大,该差变得越大。
在设定上述检测条件来更新该设定内容的情况下,按下“确定”按钮174。在关闭该画面的情况下,按下“关闭”按钮175。
根据本实施方式,在进行检测时,能够由用户设定检测条件,因此能够进行更适合用户的检测。
<第十六实施方式>
在本实施方式中,针对如下内容进行说明:从时间序列图像群中指定处于特定区间的图像群,并对所指定的该范围内的时间序列图像进行一览显示。
图38表示本实施方式中的从时间序列图像群中指定处于特定区间的图像群并对所指定的该范围内的时间序列图像进行一览显示的一览显示画面100。
在彩色条或时间条103上,通过特定区间开始光标181指定区间的开始,通过特定区间结束光标182指定区间的结束。于是,检测出所指定的该区间内的时间序列图像,并如附图标记183所示那样进行一览显示。此时,所指定的区间以外的时间序列图像也可以包含在一览显示图像中。
根据本实施方式,能够仅针对特定区间的时间序列图像进行显示。因此,通过将拍摄到任意脏器的图像的摄像区间设定为该特定区间,能够仅显示相应脏器的时间序列图像。
并且,通过与第十五实施方式组合,也可以对所设定的该特定区间内设定特征检测的阈值。由此,能够显示该特定区间内的摘要图像的一览。
<第十七实施方式>
在本实施方式中,针对如下内容进行说明:指定时间序列图像的多个特定区间,对所指定的每个该区间设定用于检测摘要图像的阈值。
图39表示本实施方式中的用于按每个脏器(部位)或每个特定区间检测摘要图像的检测条件设定画面。该图的画面由以下部分构成:特定区间开始光标191,其指定区间的开始;特定区间结束光标192,其指定区间的结束;指定各区间的指定光标193-1、…、193-n;设定画面196,其对用于检测所指定的区间内的具有特征的图像的特征水平(阈值)进行设定;以及设定各区间的阈值的设定字段195-1、…、195-n。
首先,通过特定区间开始光标191、特定区间结束光标192、指定光标193-1、…、193-n来指定各区间。接着,在设定画面196的设定字段195-1、…、195-n中设定对应的指定区间的特征水平(阈值)。
根据上述设定内容,当检测摘要图像时,检测各区间内的摘要图像,并显示在一览显示画面上。此时,所指定的区间外的时间序列图像也可以包含在一览显示图像中。
根据本实施方式,能够按每个脏器(部位)或每个特定区间设定检测阈值。由此,能够应对如下问题:由于胶囊型内窥镜的行进速度根据每个脏器(部位)而不同,因此特征检测的阈值根据每个部位而不同。
<第十八实施方式>
在本实施方式中,说明在经过操作者所设定的时间之后依次对一览显示的页进行翻页的情况。
图40表示本实施方式中的在一览显示跨越多页的情况下经过操作者所设定的时间之后依次对一览显示的页进行翻页的情形。附图标记199表示滚动条。随着对一览显示进行翻页,滚动条也进行移动。
根据本实施方式,在即使进行一览显示也跨越多页的情况下,能够自动地进行翻页,因此能够省去用户进行滚动的麻烦。
<第十九实施方式>
在本实施方式中,针对如下内容进行说明:通过将观察时间指定为检测条件,来决定检测摘要图像的阈值。
图41表示本实施方式中的用于设定观察时间的检测条件设定画面200。检测条件设定画面200由“观察时间”输入栏201、“确定”按钮174、“关闭”按钮175构成。当按下“关闭”按钮175时,关闭检测条件设定画面200。
当在“观察时间”输入栏201中设定时间(分钟)并按下“确定”按钮174时,能够在所设定的该观察时间内再现摘要图像。具体地说,基于所设定的该时间信息,根据帧频来计算作为观察对象的图像个数使得能够在操作者所设定的时间内进行观察。决定在从时间序列图像中进行检测时所使用的相似度的阈值(特征水平)以能够得到与所计算出的该图像个数相应的数量的摘要图像。
根据本实施方式,能够在忙碌的观察者所限定的时间内抽取特征水平较大的图像并进行观察。
<第二十实施方式>
在本实施方式中,针对如下内容进行说明:在图3所说明的主显示区域32上作为主显示图像33显示摘要图像,在主显示图像33的左右(或上下)显示该摘要图像前后的时间序列图像。
图42表示本实施方式的内窥镜系统的观察画面。在窗口31内显示主显示区域32和彩色条或时间条103,该主显示区域32显示主显示图像等。
在主显示区域32内,在中央显示主显示图像33,夹着主显示图像33而在左右显示副显示图像211、212。在摘要图像的再现过程中,当例如作为主显示图像33而再现摘要图像T2时,在副显示图像211、212处再现该摘要图像T2前后的摘要图像T1、T3。
当停止摘要图像的再现时,在主显示图像33处显示指示停止时的摘要图像T2。此时,在副显示图像211、212处分别显示摘要图像T2前后的时间序列图像T2-1、T2+1。
根据本实施方式,能够在显示摘要图像的同时显示摘要图像前后的时间序列图像,因此能够提高观察效率。
根据本发明的实施方式,在通过一览图像显示来确认病例数据时,通过与整体的位置关系相对照来进行观察,能够容易掌握图像的时间序列上的信息。另外,通过提高现有的功能以及一览图像与运动图像显示的协作性,能够提高从连续图像中检测特征部位的检测速度。
此外,在本发明所说明的任一个实施方式中,只要不脱离其宗旨就能够进行各种变形。另外,在能够实施的限度内也能够任意地组合两个以上上述实施方式。
Claims (75)
1.一种图像处理装置,其特征在于,具备:
获取单元,其获取时间序列图像数据,该时间序列图像数据是由胶囊型内窥镜按时间序列拍摄得到的图像数据;
图像检测单元,其从所获取的上述时间序列图像数据中检测规定的图像数据;以及
显示控制单元,其对作为上述检测出的图像数据的检测图像数据进行一览显示。
2.根据权利要求1所述的图像处理装置,其特征在于,
上述图像处理装置还具备显示指示输入单元,该显示指示输入单元被输入对上述显示控制单元的指示,
显示指示输入单元具备:
检测方法选择单元,其选择通过上述图像检测单元进行检测时所使用的检测方法;
一览显示选择单元,其用于通过上述显示控制单元来一览显示上述图像数据;以及
运动图像再现选择单元,其以运动图像的方式再现按时间序列拍摄得到的上述图像数据。
3.根据权利要求2所述的图像处理装置,其特征在于,
能够由上述检测方法选择单元选择的检测方法是如下方法中的至少一个或两个以上的组合:
每隔固定间隔抽取按时间序列拍摄得到的上述图像数据;
根据按时间序列排列的第n个的图像数据与第n±m个(n、m:任意的整数)的图像数据间的差来抽取图像数据;
根据病变位置的特征来抽取上述图像数据;
根据上述图像数据的颜色成分来抽取图像数据;以及
根据按时间序列排列的第n个的图像数据与第n个的前后p个(n、p:任意的整数)的图像平均值的图像数据间的差来抽取图像数据。
4.根据权利要求3所述的图像处理装置,其特征在于,
上述显示控制单元能够显示通过上述检测方法没有被抽取出的图像。
5.根据权利要求1所述的图像处理装置,其特征在于,
上述显示控制单元以纵向j(j:任意的整数)个×横向k(k:任意的整数)个的方式一览显示上述图像数据的缩略图。
6.根据权利要求5所述的图像处理装置,其特征在于,
关于上述j×k的设定,能够由用户任意地进行设定,或者根据上述缩略图的大小来进行设定。
7.根据权利要求5所述的图像处理装置,其特征在于,
上述显示控制单元还将一览显示的上述缩略图中的拍摄到病变部位的缩略图进行增强显示,或者对该缩略图附加规定的识别信息。
8.根据权利要求5所述的图像处理装置,其特征在于,
上述显示控制单元还在一览显示的上述缩略图中的规定的缩略图被选择的情况下,显示如下命令中的至少一个命令:
对与所选择的该缩略图对应的图像数据附加意见信息的命令;
将所选择的该缩略图追加到规定的图像显示区域中的命令;
在与病例有关的报告中添加与所选择的该缩略图对应的图像数据的命令;
在作为时间刻度而显示的时间显示轴上标记出与所选择的该缩略图对应的图像数据处于哪个位置的命令,该时间刻度表示按时间序列拍摄得到的一系列的上述图像数据的摄像期间;
转变为以运动图像的方式对与所选择的该缩略图对应的图像数据以后的图像数据进行再现的运动图像显示画面,来以运动图像的方式再现该图像数据的命令;
显示与所选择的该缩略图对应的图像数据的前后x(x:任意的整数)个图像数据的命令;
显示处于所选择的该缩略图与时间序列上的所选择的该缩略图的前一个上述一览显示的缩略图之间的所有图像的命令;以及
显示处于所选择的该缩略图与时间序列上的所选择的该缩略图的后一个上述一览显示的缩略图之间的所有图像的命令。
9.根据权利要求1所述的图像处理装置,其特征在于,
上述图像检测单元使用如下图像检测例程中的至少一个图像检测例程来从按时间序列拍摄得到的图像数据中检测上述规定的图像作为上述检测图像数据:
检测每隔固定时间的图像的图像检测例程;
检测相邻的图像之间相似度低的图像的图像检测例程;
检测拍摄到病变部位的图像的图像检测例程;
检测除了诊断所不需要的图像以外的图像的图像检测例程;以及
检测规定颜色成分的像素的比例多的图像或包含规定颜色成分的像素的比例多的区域的图像的图像检测例程。
10.根据权利要求9所述的图像处理装置,其特征在于,
上述显示控制单元能够显示通过上述图像检测例程没有被抽取出的图像。
11.根据权利要求9所述的图像处理装置,其特征在于,
上述图像处理装置还具备图像检测例程选择单元,该图像检测例程选择单元用于选择上述图像检测例程。
12.根据权利要求11所述的图像处理装置,其特征在于,
上述图像处理装置还具备关联单元,该关联单元将由上述图像检测单元检测出的上述检测图像数据与在该检测中使用的图像检测例程名进行关联,
上述显示控制单元在显示上述一览显示的图像的同时,将上述图像检测例程名作为标签名进行显示。
13.根据权利要求9所述的图像处理装置,其特征在于,
上述图像处理装置还具备意见信息附加单元,该意见信息附加单元对上述一览显示的图像中的被选择的图像附加意见信息。
14.根据权利要求13所述的图像处理装置,其特征在于,
上述图像处理装置还具备:
报告制作单元,其制作与针对上述一览显示的图像中的被选择的图像的病例有关的报告;以及
意见信息插入单元,其在上述被选择的图像中附加有上述意见信息的情况下,在对上述报告插入该被选择的图像的同时插入该意见信息。
15.根据权利要求14所述的图像处理装置,其特征在于,
上述图像处理装置还具备成批输出单元,该成批输出单元将由上述图像检测单元检测出的所有的检测图像数据成批输出到上述报告中。
16.根据权利要求1所述的图像处理装置,其特征在于,
上述显示控制单元对作为检测出的图像数据的上述检测图像数据进行一览显示,并且显示按时间序列拍摄的所有图像的概要信息,并且随着进行从该一览显示的检测图像中选择任意的图像的动作,将表示所选择的该图像在上述概要信息中的位置的标记信息附加到上述概要信息中来进行显示。
17.根据权利要求16所述的图像处理装置,其特征在于,
上述显示控制单元将表示上述概要信息所包含的图像群中的上述一览显示的图像群的区间的标记信息附加到该概要信息中来进行显示。
18.根据权利要求16所述的图像处理装置,其特征在于,
上述显示控制单元在对上述检测图像进行一览显示的情况下,以行为单位、以页为单位或以图像为单位使上述检测图像滚动。
19.根据权利要求16所述的图像处理装置,其特征在于,
上述显示控制单元在从以运动图像的方式显示按时间序列拍摄的上述图像的运动图像显示画面转变为对上述检测图像进行一览显示的一览显示画面时,从所检测出的上述时间序列的检测图像群的开头起进行一览显示,或者以在该运动图像显示画面上正在显示的画面为中心对上述检测图像进行一览显示,或者对包含该运动图像显示画面上正在显示的画面的范围的上述检测图像进行一览显示,或者在上述检测图像的一览的页的开头显示该运动图像显示画面上正在显示的图像,或者在上述检测图像的一览的页的末尾显示该运动图像显示画面上正在显示的图像。
20.根据权利要求19所述的图像处理装置,其特征在于,
在从以运动图像的方式显示按时间序列拍摄的上述图像的运动图像显示画面转变为对上述检测图像进行一览显示的一览显示画面时,能够设定将该图像显示在一览显示画面上的位置。
21.根据权利要求16所述的图像处理装置,其特征在于,
上述显示控制单元在从对上述检测图像进行一览显示的一览显示画面转变为以运动图像的方式显示按时间序列拍摄的上述图像的运动图像显示画面时,对按上述时间序列拍摄的开头图像进行显示,或者再次对转变为上述一览显示画面之前的前一次在上述运动图像显示画面上所显示的图像进行显示,或者对上述一览显示画面上所选择的画面进行显示。
22.根据权利要求16所述的图像处理装置,其特征在于,
上述显示控制单元将表示页区间的标记信息附加在上述概要信息中来进行显示,该页区间是一次一览显示的图像群的单位。
23.根据权利要求16所述的图像处理装置,其特征在于,
上述显示控制单元对一览显示的上述图像中的被选择的图像附加表示已选择的意思的识别信息,并对该识别信息进行标记显示或增强显示,或者在仅显示被选择的图像的副显示区域上追加显示上述被选择的图像。
24.根据权利要求23所述的图像处理装置,其特征在于,
上述显示控制单元使上述副显示区域所显示的图像随着一览显示画面的滚动动作而进行滚动,并且在该副显示区域仅显示上述一览显示的区间的图像。
25.根据权利要求16所述的图像处理装置,其特征在于,
上述显示控制单元还进行如下处理:将在以运动图像的方式显示按时间序列拍摄的上述图像的运动图像显示画面上任意选择的图像追加显示在对上述检测图像进行一览显示的一览显示画面,并且将从检测出并被一览显示的上述图像中任意选择的该图像进行增强显示或者附加用于识别所选择的该图像的识别信息来进行显示。
26.根据权利要求16所述的图像处理装置,其特征在于,
上述显示控制单元将表示上述检测出的所有图像数据在上述概要信息中的位置的识别信息附加到上述概要信息中来进行显示。
27.根据权利要求26所述的图像处理装置,其特征在于,
上述显示控制单元还进行如下处理:仅对与包含在上述概要信息中的期望范围中的上述识别信息对应的图像进行一览显示,放大显示该期望范围的概要信息。
28.根据权利要求16所述的图像处理装置,其特征在于,
能够以行为单位或以页为单位指定被一览显示的上述检测图像。
29.根据权利要求1所述的图像处理装置,其特征在于,
上述显示控制单元在第一方向上显示由上述图像检测单元从上述时间序列图像数据中检测出的检测图像数据,将与各个该检测图像数据前后的帧图像相当的0个以上的上述时间序列图像数据从该检测图像数据起显示在第二方向上。
30.根据权利要求1所述的图像处理装置,其特征在于,
上述显示控制单元在光标被置于上述一览显示的各图像的情况下,放大显示该图像。
31.根据权利要求3所述的图像处理装置,其特征在于,
上述图像处理装置还具备相似度阈值设定单元,该相似度阈值设定单元通过设定关于上述图像数据间的相似度的阈值,能够调整要检测的图像的相似度的水平。
32.根据权利要求1所述的图像处理装置,其特征在于,
上述图像处理装置还具备区间设定单元,该区间设定单元从上述时间序列图像数据中指定处于任意的区间的时间序列图像,
上述显示控制单元对所指定的上述区间内的时间序列图像群进行一览显示。
33.根据权利要求31所述的图像处理装置,其特征在于,
上述图像处理装置还具备区间设定单元,该区间设定单元从上述时间序列图像数据中指定处于任意的区间的时间序列图像,
上述显示控制单元根据上述阈值,从所指定的上述区间内的时间序列图像中一览显示检测图像数据。
34.根据权利要求1所述的图像处理装置,其特征在于,
上述图像处理装置还具备设定单元,该设定单元从上述时间序列图像数据中指定多个任意的区间,对所指定的每个该区间设定用于由上述图像检测单元进行检测的阈值。
35.根据权利要求1所述的图像处理装置,其特征在于,
上述显示控制单元在以多页一览显示了上述图像的情况下,每当经过规定时间时翻页。
36.根据权利要求3所述的图像处理装置,其特征在于,
上述图像显示单元还具备再现时间设定单元,该再现时间设定单元能够设定对上述检测图像进行再现的时间,
上述显示控制单元基于所设定的上述时间,根据帧频计算要再现的图像个数,决定关于上述图像数据间的差的阈值以能够得到所计算出的该图像个数的上述检测图像数据。
37.一种图像处理装置,其特征在于,具备:
获取单元,其获取时间序列图像数据,该时间序列图像数据是由胶囊型内窥镜按时间序列拍摄得到的图像数据;
图像检测单元,其从所获取的上述时间序列图像数据中检测规定的图像数据;
显示单元,其具有用于显示图像的主显示区域和两个副显示区域,该副显示区域小于该主显示区域;以及
显示控制单元,其在上述主显示区域上再现由上述图像检测单元从上述时间序列图像数据中检测出的检测图像数据,并且在各上述副显示区域上对该检测图像数据前后的检测图像数据进行再现显示,如果该再现停止,则在该主显示区域上显示停止该再现时的检测图像数据,并且在该副显示区域上显示与该检测图像数据前后的帧图像相当的该时间序列图像数据。
38.一种图像处理装置的动作方法,其特征在于,
获取时间序列图像数据,该时间序列图像数据是由胶囊型内窥镜按时间序列拍摄得到的图像数据,
从所获取的上述时间序列图像数据中检测规定的图像数据,
对作为上述检测出的图像数据的检测图像数据进行一览显示。
39.根据权利要求38所述的图像处理装置的动作方法,其特征在于,
根据在显示指示输入画面上输入的指示,选择在进行上述检测时使用的检测方法、选择用于进行上述一览显示的一览显示或者以运动图像的方式对按时间序列拍摄得到的上述图像数据进行再现,上述显示指示输入画面被输入与显示有关的指示。
40.根据权利要求39所述的图像处理装置的动作方法,其特征在于,
能够通过上述显示指示输入画面选择的检测方法是如下方法中的至少一个或两个以上的组合:
每隔固定间隔抽取按时间序列拍摄得到的上述图像数据;
根据按时间序列排列的第n个的图像数据与第n±m个(n、m:任意的整数)的图像数据间的差来抽取图像数据;
根据病变位置的特征来抽取上述图像数据;以及
根据上述图像数据的颜色成分来抽取图像数据;
根据按时间序列排列的第n个的图像数据与第n个的前后p个(n、p:任意的整数)的图像平均值的图像数据间的差来抽取图像数据。
41.根据权利要求40所述的图像处理装置的动作方法,其特征在于,
还显示通过上述检测方法没有被抽取出的图像。
42.根据权利要求38所述的图像处理装置的动作方法,其特征在于,
以纵向j(j:任意的整数)个×横向k(k:任意的整数)个的方式一览显示上述图像数据的缩略图。
43.根据权利要求42所述的图像处理装置的动作方法,其特征在于,
关于上述j×k的设定,能够由用户任意地进行设定,或者根据上述缩略图的大小进行设定。
44.根据权利要求42所述的图像处理装置的动作方法,其特征在于,
还将一览显示的上述缩略图中的拍摄到病变部位的缩略图进行增强显示,或者对该缩略图附加规定的识别信息。
45.根据权利要求42所述的图像处理装置的动作方法,其特征在于,
还在一览显示的上述缩略图中的规定的缩略图被选择的情况下,显示如下命令中的至少一个命令:
对与所选择的该缩略图对应的图像数据附加意见信息的命令;
将所选择的该缩略图追加到规定的图像显示区域中的命令;
在与病例有关的报告中添加与所选择的该缩略图对应的图像数据的命令;
在作为时间刻度而显示的时间显示轴上标记出与所选择的该缩略图对应的图像数据处于哪个位置的命令,该时间刻度表示按时间序列拍摄得到的一系列的上述图像数据的摄像期间;
转变为以运动图像的方式对与所选择的该缩略图对应的图像数据以后的图像数据进行再现的运动图像显示画面,来以运动图像的方式再现该图像数据的命令;
显示与所选择的该缩略图对应的图像数据的前后x(x:任意的整数)个图像的命令;
显示处于所选择的该缩略图与时间序列上的所选择的该缩略图的前一个上述一览显示的缩略图之间的所有图像的命令;以及
显示处于所选择的该缩略图与时间序列上的所选择的该缩略图的后一个上述一览显示的缩略图之间的所有图像的命令。
46.根据权利要求38所述的图像处理装置的动作方法,其特征在于,
在检测上述图像数据的情况下,使用如下图像检测例程中的至少一个图像检测例程来从按时间序列拍摄得到的图像数据中检测上述规定的图像作为上述检测图像数据:
检测每隔固定时间的图像的图像检测例程;
检测相邻的图像之间相似度低的图像的图像检测例程;
检测拍摄到病变部位的图像的图像检测例程;
检测除了诊断所不需要的图像以外的图像的图像检测例程;以及
检测规定颜色成分的像素的比例多的图像或包含规定颜色成分的像素的比例多的区域的图像的图像检测例程。
47.根据权利要求46所述的图像处理装置的动作方法,其特征在于,
显示通过上述图像检测例程没有被抽取出的图像。
48.根据权利要求46所述的图像处理装置的动作方法,其特征在于,
还能够选择上述图像检测例程。
49.根据权利要求46所述的图像处理装置的动作方法,其特征在于,
还将作为所检测出的图像数据的上述检测图像数据与在该检测中使用的图像检测例程名进行关联,在显示上述一览显示的图像的同时,将该图像检测例程名作为标签名进行显示。
50.根据权利要求46所述的图像处理装置的动作方法,其特征在于,
还对上述一览显示的图像中的被选择的图像附加意见信息。
51.根据权利要求50所述的图像处理装置的动作方法,其特征在于,
还制作与针对上述一览显示的图像中的被选择的图像的病例有关的报告,
在上述被选择的图像中附加有上述意见信息的情况下,在对上述报告插入该被选择的图像的同时插入该意见信息。
52.根据权利要求51所述的图像处理装置的动作方法,其特征在于,
还将所检测出的所有的上述检测图像数据成批输出到上述报告中。
53.根据权利要求38所述的图像处理装置的动作方法,其特征在于,
对作为检测出的图像数据的上述检测图像数据进行一览显示,并且显示按时间序列拍摄的所有图像的概要信息,并且随着进行从该一览显示的检测图像中选择任意的图像的动作,将表示所选择的该图像在上述概要信息中的位置的标记信息附加到上述概要信息中来进行显示。
54.根据权利要求53所述的图像处理装置的动作方法,其特征在于,
将表示上述概要信息所包含的图像群中的上述一览显示的图像群的区间的标记信息附加到该概要信息中来进行显示。
55.根据权利要求53所述的图像处理装置的动作方法,其特征在于,
在对上述检测图像进行一览显示的情况下,以行为单位、以页为单位或以图像为单位使上述检测图像滚动。
56.根据权利要求53所述的图像处理装置的动作方法,其特征在于,
在从以运动图像的方式显示按时间序列拍摄的上述图像的运动图像显示画面转变为对上述检测图像进行一览显示的一览显示画面时,从所检测出的上述时间序列的检测图像群的开头起进行一览显示,或者以在该运动图像显示画面上正在显示的画面为中心对上述检测图像进行一览显示,或者对包含该运动图像显示画面上正在显示的画面的范围的上述检测图像进行一览显示,或者在上述检测图像的一览的页的开头显示该运动图像显示画面上正在显示的图像,或者在上述检测图像的一览的页的末尾显示该运动图像显示画面上正在显示的图像。
57.根据权利要求13所述的图像处理装置的动作方法,其特征在于,
在从以运动图像的方式显示按时间序列拍摄的上述图像的运动图像显示画面转变为对上述检测图像进行一览显示的一览显示画面时,能够设定将该图像显示在一览显示画面上的位置。
58.根据权利要求53所述的图像处理装置的动作方法,其特征在于,
在从对上述检测图像进行一览显示的一览显示画面转变为以运动图像的方式显示按时间序列拍摄的上述图像的运动图像显示画面时,对上述按时间序列拍摄的开头图像进行显示,或者再次对转变为上述一览显示画面之前的前一次在上述运动图像显示画面上所显示的图像进行显示,或者对上述一览显示画面上所选择的画面进行显示。
59.根据权利要求53所述的图像处理装置的动作方法,其特征在于,
将表示页区间的标记信息附加在上述概要信息中来进行显示,该页区间是一次一览显示的图像群的单位。
60.根据权利要求53所述的图像处理装置的动作方法,其特征在于,
对一览显示的上述图像中的被选择的图像附加表示已选择的意思的识别信息,并对该识别信息进行标记显示或增强显示,或者在仅显示被选择的图像的副显示区域上追加显示上述被选择的图像。
61.根据权利要求60所述的图像处理装置的动作方法,其特征在于,
使上述副显示区域所显示的图像随着一览显示画面的滚动动作而进行滚动,并且在该副显示区域仅显示上述一览显示的区间的图像。
62.根据权利要求53所述的图像处理装置的动作方法,其特征在于,
还将在以运动图像的方式显示按时间序列拍摄的上述图像的运动图像显示画面上任意选择的图像追加显示在对上述检测图像进行一览显示的一览显示画面,并且将从检测出并被一览显示的上述图像中任意选择的该图像进行增强显示或者附加用于识别所选择的该图像的识别信息来进行显示。
63.根据权利要求53所述的图像处理装置的动作方法,其特征在于,
将表示上述检测出的所有图像数据在上述概要信息中的位置的识别信息附加到上述概要信息中来进行显示。
64.根据权利要求63所述的图像处理装置的动作方法,其特征在于,
还仅对与包含在上述概要信息中的期望范围中的上述识别信息对应的图像进行一览显示,放大显示该期望范围的概要信息。
65.根据权利要求53所述的图像处理装置的动作方法,其特征在于,
能够以行为单位或以页为单位指定被一览显示的上述检测图像。
66.根据权利要求38所述的图像处理装置的动作方法,其特征在于,
在第一方向上显示从上述时间序列图像数据中检测出的上述检测图像数据,将与各个该检测图像数据前后的帧图像相当的0个以上的上述时间序列图像数据从该检测图像数据起显示在第二方向上。
67.根据权利要求38所述的图像处理装置的动作方法,其特征在于,
在光标被置于一览显示的上述各图像的情况下,放大显示该图像。
68.根据权利要求40所述的图像处理装置的动作方法,其特征在于,
还通过设定关于上述图像数据间的相似度的阈值,来调整要检测的图像的相似度的水平。
69.根据权利要求38所述的图像处理装置的动作方法,其特征在于,
还从上述时间序列图像数据中指定处于任意的区间的时间序列图像,并对所指定的该区间内的时间序列图像群进行一览显示。
70.根据权利要求68所述的图像处理装置的动作方法,其特征在于,
从上述时间序列图像数据中指定处于任意的区间的时间序列图像,
根据上述阈值,从所指定的上述区间内的时间序列图像中一览显示检测图像数据。
71.根据权利要求38所述的图像处理装置的动作方法,其特征在于,
还从上述时间序列图像数据中指定多个任意的区间,对所指定的每个该区间设定用于检测上述规定的图像的阈值。
72.根据权利要求38所述的图像处理装置的动作方法,其特征在于,
在以多页一览显示了上述图像的情况下,每当经过规定时间时翻页。
73.根据权利要求40所述的图像处理装置的动作方法,其特征在于,
设定对上述检测图像进行再现的时间,
基于所设定的上述时间,根据帧频计算要再现的图像个数,决定关于上述图像数据间的差的阈值以能够得到所计算出的该图像个数的上述检测图像数据。
74.一种图像处理装置的动作方法,其特征在于,
获取时间序列图像数据,该时间序列图像数据是由胶囊型内窥镜按时间序列拍摄得到的图像数据,
从所获取的上述时间序列图像数据中检测规定的图像数据,
对具有用于显示图像的主显示区域和两个副显示区域的显示画面进行显示,该副显示区域小于该主显示区域;以及
在上述主显示区域上再现从上述时间序列图像数据中检测出的上述检测图像数据,并且在各上述副显示区域上对该检测图像数据前后的检测图像数据进行再现显示,如果该再现停止,则在该主显示区域上显示停止该再现时的检测图像数据,并且在该副显示区域上显示与该检测图像数据前后的帧图像相当的该时间序列图像数据。
75.一种图像显示程序,使计算机执行显示图像的处理,该图像显示程序的特征在于,使计算机执行如下处理:
获取处理,获取时间序列图像数据,该时间序列图像数据是由胶囊型内窥镜按时间序列拍摄得到的图像数据;
图像检测处理,从所获取的上述时间序列图像数据中检测规定的图像数据;以及
显示控制处理,以一览形式显示作为上述检测出的图像数据的检测图像数据。
Applications Claiming Priority (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP183582/2007 | 2007-07-12 | ||
JP2007183582 | 2007-07-12 | ||
JP268144/2007 | 2007-10-15 | ||
JP2007268144 | 2007-10-15 | ||
PCT/JP2008/001549 WO2009008125A1 (ja) | 2007-07-12 | 2008-06-16 | 画像処理装置、該動作方法及び該プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
CN101686799A true CN101686799A (zh) | 2010-03-31 |
CN101686799B CN101686799B (zh) | 2012-08-22 |
Family
ID=40228319
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN2008800239208A Expired - Fee Related CN101686799B (zh) | 2007-07-12 | 2008-06-16 | 图像处理装置以及图像处理装置的动作方法 |
Country Status (5)
Country | Link |
---|---|
US (1) | US20100182412A1 (zh) |
EP (1) | EP2174578A4 (zh) |
JP (1) | JP5385138B2 (zh) |
CN (1) | CN101686799B (zh) |
WO (1) | WO2009008125A1 (zh) |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102376332A (zh) * | 2010-08-19 | 2012-03-14 | 上海博泰悦臻电子设备制造有限公司 | 专辑的播放显示界面的显示控制方法和装置 |
CN103764029A (zh) * | 2011-09-29 | 2014-04-30 | 株式会社日立医疗器械 | 图像显示控制装置、图像显示控制方法以及程序 |
CN104768473A (zh) * | 2012-11-08 | 2015-07-08 | 株式会社岛津制作所 | 光生物体测量装置 |
CN104902800A (zh) * | 2013-09-09 | 2015-09-09 | 奥林巴斯株式会社 | 图像显示装置、图像显示方法以及图像显示程序 |
CN105376511A (zh) * | 2014-08-07 | 2016-03-02 | 株式会社理光 | 图像处理装置、图像处理系统以及图像处理方法 |
CN110868907A (zh) * | 2017-04-28 | 2020-03-06 | 奥林巴斯株式会社 | 内窥镜诊断辅助系统、内窥镜诊断辅助程序和内窥镜诊断辅助方法 |
CN111932507A (zh) * | 2020-07-31 | 2020-11-13 | 苏州慧维智能医疗科技有限公司 | 一种基于消化内镜实时识别病变的方法 |
CN112938673A (zh) * | 2021-02-20 | 2021-06-11 | 上海吉盛网络技术有限公司 | 使用不间断位置数据实现连续图像显示电梯运动的方法 |
Families Citing this family (41)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5457688B2 (ja) * | 2009-02-04 | 2014-04-02 | オリンパス株式会社 | 画像処理装置、画像処理プログラムおよび画像処理方法 |
CN102361585B (zh) | 2009-03-23 | 2014-06-25 | 奥林巴斯医疗株式会社 | 图像处理系统、外部装置以及图像处理系统的图像处理方法 |
JP2011141683A (ja) * | 2010-01-06 | 2011-07-21 | Ricoh Co Ltd | 画像処理装置、表示装置、認証システム、表示制御方法、表示制御プログラム、及びそのプログラムを記録した記録媒体 |
EP3852010A1 (en) * | 2010-04-28 | 2021-07-21 | Given Imaging Ltd. | System and method for displaying portions of in-vivo images |
JP2011242936A (ja) * | 2010-05-17 | 2011-12-01 | Fujifilm Corp | 検版支援方法、その装置及びそのプログラム |
WO2012042966A1 (ja) * | 2010-09-28 | 2012-04-05 | オリンパスメディカルシステムズ株式会社 | 画像表示装置、画像表示方法および画像表示プログラム |
EP2662016A4 (en) * | 2011-01-28 | 2017-04-12 | Olympus Corporation | Capsule endoscope system |
US10475754B2 (en) | 2011-03-02 | 2019-11-12 | Nokomis, Inc. | System and method for physically detecting counterfeit electronics |
WO2012173120A1 (ja) * | 2011-06-14 | 2012-12-20 | 株式会社東芝 | 医用画像表示装置およびプログラム |
JP2013073392A (ja) * | 2011-09-27 | 2013-04-22 | Fujitsu Ltd | 表示制御装置、表示制御プログラムおよび表示制御方法 |
WO2013051431A1 (ja) * | 2011-10-06 | 2013-04-11 | オリンパス株式会社 | 蛍光観察装置 |
US10405734B2 (en) | 2012-06-29 | 2019-09-10 | Given Imaging Ltd. | System and method for displaying an image stream |
US9785307B1 (en) * | 2012-09-27 | 2017-10-10 | Open Text Corporation | Reorder and selection persistence of displayed objects |
WO2014178233A1 (ja) * | 2013-04-30 | 2014-11-06 | ソニー株式会社 | 画像処理装置、画像処理方法、プログラム |
CN105144230A (zh) | 2013-04-30 | 2015-12-09 | 索尼公司 | 图像处理设备、图像处理方法和程序 |
JP5622903B2 (ja) * | 2013-08-05 | 2014-11-12 | オリンパス株式会社 | 画像処理装置、画像処理装置の作動方法および画像処理プログラム |
JP6425444B2 (ja) * | 2014-07-28 | 2018-11-21 | 株式会社ソディック | 射出成形機および射出成形機で実行される表示制御方法 |
JP5959787B1 (ja) * | 2014-11-27 | 2016-08-02 | オリンパス株式会社 | 画像再生装置および画像再生プログラム |
WO2016111178A1 (ja) * | 2015-01-05 | 2016-07-14 | オリンパス株式会社 | 内視鏡システム |
CN108697314B (zh) * | 2016-01-28 | 2021-04-06 | 基文影像公司 | 控制体内装置中的图像捕获和传输速率的方法及系统 |
WO2017216922A1 (ja) * | 2016-06-16 | 2017-12-21 | オリンパス株式会社 | 画像処理装置及び画像処理方法 |
JPWO2018020558A1 (ja) * | 2016-07-25 | 2019-05-09 | オリンパス株式会社 | 画像処理装置、画像処理方法およびプログラム |
JP6747227B2 (ja) * | 2016-09-30 | 2020-08-26 | 株式会社ニデック | 眼底画像観察プログラム |
DE102016121668A1 (de) * | 2016-11-11 | 2018-05-17 | Karl Storz Se & Co. Kg | Automatische Identifizierung medizinisch relevanter Videoelemente |
JP6899903B2 (ja) * | 2017-07-03 | 2021-07-07 | 富士フイルム株式会社 | 医療画像処理装置、内視鏡装置、診断支援装置、医療業務支援装置、及び、レポート作成支援装置 |
WO2019016912A1 (ja) * | 2017-07-20 | 2019-01-24 | オリンパス株式会社 | 診断支援装置、診断支援方法及びプログラム |
JP2019030502A (ja) * | 2017-08-08 | 2019-02-28 | オリンパス株式会社 | 内視鏡画像観察支援システム |
CN111031889B (zh) * | 2017-08-24 | 2022-04-05 | 富士胶片株式会社 | 医疗图像处理装置及医疗图像处理方法 |
JP7091349B2 (ja) * | 2017-09-07 | 2022-06-27 | 富士フイルム株式会社 | 診断支援システム、内視鏡システム、プロセッサ、及び診断支援システムの作動方法 |
JP6596741B2 (ja) | 2017-11-28 | 2019-10-30 | エスゼット ディージェイアイ テクノロジー カンパニー リミテッド | 生成装置、生成システム、撮像システム、移動体、生成方法、及びプログラム |
JP7100505B2 (ja) * | 2018-06-19 | 2022-07-13 | オリンパス株式会社 | 画像処理装置、画像処理装置の作動方法、及び画像処理装置の作動プログラム |
JP7192321B2 (ja) * | 2018-09-05 | 2022-12-20 | 富士フイルムビジネスイノベーション株式会社 | 情報処理装置及び情報処理プログラム |
EP3866667A4 (en) | 2018-10-19 | 2022-04-20 | Given Imaging Ltd. | SYSTEMS AND METHODS FOR GENERATION AND DISPLAY OF AN IN VIVO IMAGE STREAM STUDY |
JP6930515B2 (ja) * | 2018-12-07 | 2021-09-01 | コニカミノルタ株式会社 | 画像表示装置、画像表示方法及び画像表示プログラム |
WO2020144862A1 (ja) * | 2019-01-11 | 2020-07-16 | オリンパス株式会社 | カプセル型内視鏡システム及び受信装置 |
WO2020170809A1 (ja) * | 2019-02-19 | 2020-08-27 | 富士フイルム株式会社 | 医療画像処理装置、内視鏡システム、及び医療画像処理方法 |
JP2021149870A (ja) * | 2020-03-23 | 2021-09-27 | 株式会社リコー | 表示処理装置、表示処理方法およびプログラム |
EP4226840A4 (en) | 2020-10-09 | 2024-03-20 | FUJIFILM Corporation | DEVICE FOR PROCESSING MEDICAL IMAGES AND OPERATING METHOD THEREFOR |
JPWO2022074992A1 (zh) | 2020-10-09 | 2022-04-14 | ||
WO2022195725A1 (ja) * | 2021-03-16 | 2022-09-22 | オリンパスメディカルシステムズ株式会社 | 情報処理装置および画像表示方法 |
JP2022181693A (ja) * | 2021-05-26 | 2022-12-08 | 株式会社トーメーコーポレーション | 光断層画像撮影装置 |
Family Cites Families (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3087668B2 (ja) * | 1996-05-01 | 2000-09-11 | 日本電気株式会社 | 液晶表示装置、その製造方法およびその駆動方法 |
JP3819669B2 (ja) * | 2000-04-13 | 2006-09-13 | 三洋電機株式会社 | ディジタルカメラ |
FR2852422B1 (fr) * | 2003-03-14 | 2005-05-06 | Eastman Kodak Co | Procede d'identification automatique d'entites dans une image numerique |
JP4574983B2 (ja) * | 2003-11-04 | 2010-11-04 | オリンパス株式会社 | 画像表示装置、画像表示方法、及び画像表示プログラム |
EP1699530B1 (en) * | 2003-12-31 | 2012-07-04 | Given Imaging Ltd. | System and method for displaying an image stream |
US7522175B2 (en) * | 2004-11-23 | 2009-04-21 | General Electric Company | Workflow engine based dynamic modification of image processing and presentation in PACS |
JP2006302043A (ja) * | 2005-04-21 | 2006-11-02 | Olympus Medical Systems Corp | 画像表示装置、画像表示方法および画像表示プログラム |
JP2007075163A (ja) * | 2005-09-09 | 2007-03-29 | Olympus Medical Systems Corp | 画像表示装置 |
AU2006220372A1 (en) * | 2005-09-18 | 2007-04-05 | Given Imaging Ltd | System and method for identification of images in an image database |
-
2008
- 2008-06-16 WO PCT/JP2008/001549 patent/WO2009008125A1/ja active Application Filing
- 2008-06-16 CN CN2008800239208A patent/CN101686799B/zh not_active Expired - Fee Related
- 2008-06-16 EP EP08764144.5A patent/EP2174578A4/en not_active Withdrawn
- 2008-06-16 JP JP2009522508A patent/JP5385138B2/ja not_active Expired - Fee Related
-
2010
- 2010-01-07 US US12/683,679 patent/US20100182412A1/en not_active Abandoned
Cited By (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102376332A (zh) * | 2010-08-19 | 2012-03-14 | 上海博泰悦臻电子设备制造有限公司 | 专辑的播放显示界面的显示控制方法和装置 |
CN103764029A (zh) * | 2011-09-29 | 2014-04-30 | 株式会社日立医疗器械 | 图像显示控制装置、图像显示控制方法以及程序 |
CN103764029B (zh) * | 2011-09-29 | 2016-06-01 | 株式会社日立医疗器械 | 图像显示控制装置、图像显示控制方法以及程序 |
CN104768473A (zh) * | 2012-11-08 | 2015-07-08 | 株式会社岛津制作所 | 光生物体测量装置 |
CN104902800A (zh) * | 2013-09-09 | 2015-09-09 | 奥林巴斯株式会社 | 图像显示装置、图像显示方法以及图像显示程序 |
CN105376511A (zh) * | 2014-08-07 | 2016-03-02 | 株式会社理光 | 图像处理装置、图像处理系统以及图像处理方法 |
CN110868907A (zh) * | 2017-04-28 | 2020-03-06 | 奥林巴斯株式会社 | 内窥镜诊断辅助系统、内窥镜诊断辅助程序和内窥镜诊断辅助方法 |
CN111932507A (zh) * | 2020-07-31 | 2020-11-13 | 苏州慧维智能医疗科技有限公司 | 一种基于消化内镜实时识别病变的方法 |
CN112938673A (zh) * | 2021-02-20 | 2021-06-11 | 上海吉盛网络技术有限公司 | 使用不间断位置数据实现连续图像显示电梯运动的方法 |
CN112938673B (zh) * | 2021-02-20 | 2022-04-01 | 上海吉盛网络技术有限公司 | 使用不间断位置数据实现连续图像显示电梯运动的方法 |
Also Published As
Publication number | Publication date |
---|---|
WO2009008125A1 (ja) | 2009-01-15 |
EP2174578A1 (en) | 2010-04-14 |
US20100182412A1 (en) | 2010-07-22 |
CN101686799B (zh) | 2012-08-22 |
EP2174578A4 (en) | 2013-07-03 |
JP5385138B2 (ja) | 2014-01-08 |
JPWO2009008125A1 (ja) | 2010-09-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN101686799B (zh) | 图像处理装置以及图像处理装置的动作方法 | |
CN101669807B (zh) | 图像显示装置、图像显示方法和图像显示程序 | |
US8233037B2 (en) | Image display apparatus | |
US8467615B2 (en) | Image display apparatus | |
CN100562284C (zh) | 图像显示装置、图像显示方法 | |
US8413079B2 (en) | Display processing apparatus for image information | |
JP4537803B2 (ja) | 画像表示装置 | |
EP2149332B1 (en) | Image information display processing device and display processing method | |
US8225209B2 (en) | Capsule endoscope image display device | |
US20080184168A1 (en) | Image display apparatus | |
EP2742847A1 (en) | Image management device, method, and program for image reading | |
JP5676063B1 (ja) | 医療装置及び医療装置の作動方法 | |
JP4885432B2 (ja) | 画像表示装置、画像表示方法および画像表示プログラム | |
JP2007105458A (ja) | 画像データベースにおける画像の認識のためのシステム及び方法 | |
JP4574983B2 (ja) | 画像表示装置、画像表示方法、及び画像表示プログラム | |
JP4472602B2 (ja) | 画像表示装置 | |
US8169472B2 (en) | Image display apparatus with interactive database | |
US8406489B2 (en) | Image display apparatus | |
JP5231160B2 (ja) | 画像表示装置、画像表示方法、および画像表示プログラム | |
JP4464894B2 (ja) | 画像表示装置 | |
JP4445742B2 (ja) | 画像表示装置、画像表示方法、及び画像表示プログラム | |
JP4789961B2 (ja) | 画像表示装置 | |
JP5684300B2 (ja) | 画像表示装置、画像表示方法、および画像表示プログラム | |
JP4923096B2 (ja) | 画像表示装置 | |
KR100921655B1 (ko) | 촬영 이미지에 대한 병증 소견 입력이 편리한 소화 기관의 이미지 프로세싱 시스템 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
C41 | Transfer of patent application or patent right or utility model | ||
TR01 | Transfer of patent right |
Effective date of registration: 20151207 Address after: Tokyo, Japan Patentee after: OLYMPUS Corp. Address before: Tokyo, Japan Patentee before: Olympus Medical Systems Corp. |
|
CF01 | Termination of patent right due to non-payment of annual fee | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20120822 |