CN102361585B - 图像处理系统、外部装置以及图像处理系统的图像处理方法 - Google Patents
图像处理系统、外部装置以及图像处理系统的图像处理方法 Download PDFInfo
- Publication number
- CN102361585B CN102361585B CN200980158331.5A CN200980158331A CN102361585B CN 102361585 B CN102361585 B CN 102361585B CN 200980158331 A CN200980158331 A CN 200980158331A CN 102361585 B CN102361585 B CN 102361585B
- Authority
- CN
- China
- Prior art keywords
- view data
- mentioned
- identifying information
- attached
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
- A61B1/041—Capsule endoscopes for imaging
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
- A61B1/00009—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
- A61B1/000095—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope for image enhancement
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00011—Operational features of endoscopes characterised by signal transmission
- A61B1/00016—Operational features of endoscopes characterised by signal transmission using wireless means
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00043—Operational features of endoscopes provided with output arrangements
- A61B1/00045—Display arrangement
- A61B1/0005—Display arrangement combining images e.g. side-by-side, superimposed or tiled
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00059—Operational features of endoscopes provided with identification means for the endoscope
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/41—Detecting, measuring or recording for evaluating the immune or lymphatic systems
- A61B5/414—Evaluating particular organs or parts of the immune or lymphatic systems
- A61B5/416—Evaluating particular organs or parts of the immune or lymphatic systems the spleen
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/07—Endoradiosondes
- A61B5/073—Intestinal transmitters
Abstract
胶囊型医疗装置(100)具备第一摄像单元(101A)和第二摄像单元(101B)。胶囊型医疗装置(100)的处理单元(102)将用于识别生成了图像数据的摄像单元的摄像机ID附加在图像数据中。被输入了图像数据的显示装置(150)将图像数据按每个摄像机ID在概览画面(10A/10B)上进行一览显示。观察者通过使用输入部(156)选择概览画面(10A/10B)中的视图切换按钮(12A/12B),使显示在显示部155上的概览画面切换为概览画面(10A/10B)。
Description
技术领域
本发明涉及一种图像处理系统、外部装置以及图像处理系统的图像处理方法,尤其是涉及一种具备设置有摄像部件的被检体内导入装置的图像处理系统、其外部装置及其图像处理方法。
背景技术
以往,在对人、动物等被检体的内部进行观察的装置中存在管式内窥镜、胶囊型的内窥镜(以下简称为被检体内导入装置)等。管式内窥镜存在电子内窥镜、纤维镜等,将管从被检体的口或者肛门等插入来获取被检体内部的图像,该电子内窥镜在前端部设置有CCD(Charge Coupled Device:电荷耦合器件)传感器,该纤维镜使光纤束通过管内(例如参照下面示出的专利文献1)。另一方面,被检体内导入装置具有人、动物等能够吞入的程度的大小,例如经口导入到被检体内,定期地拍摄被检体内部。另外,拍摄得到的被检体内部的图像作为无线信号被发送到外部的接收装置。观察者将利用管式内窥镜、被检体内导入装置得到的多个图像通过显示装置单独地或者连续地进行再现,通过观察再现的图像来对被检体的内部进行诊断。
另外,近年来,公开了具备多个(例如两个)摄像单元的所谓的复眼的被检体内导入装置。根据该复眼的被检体内导入装置,能够多角度地拍摄被检体内部,因此能够进行更详细且准确的诊断(例如参照下面示出的专利文献3)。
另外,近年来,响应于想要通过一次确认很多图像来提高通过解读图像进行诊断的效率这种期望,提出了一种在显示装 置中装载了概览(Overview)功能的医疗系统(例如参照下面示出的专利文献4),所谓概览功能是缩小通过一次检查得到的多个图像数据,对这些图像数据进行一览显示的功能。
专利文献1:日本专利第3898781号公报
专利文献2:日本特开2003-70728号公报
专利文献3:日本特开2008-246147号公报
专利文献4:日本特开2007-75155号公报
发明内容
发明要解决的问题
然而,在使用复眼的被检体内导入装置、例如双眼的被检体内导入装置的情况下,与使用单眼的被检体内导入装置的情况相比,对被检体内的同一区间进行拍摄而得到的图像的张数大致加倍。因此,存在使用概览功能能够在一个画面上向观察者呈现的信息的量实质上减少这样的问题。即,当要一次性呈现关于某区间的信息时,在使用双眼的被检体内导入装置的情况下,必须一次性显示使用单眼的被检体内导入装置时的大致两倍的图像。因此,需要更加缩小各个图像或者以更严格的条件缩小要显示的图像的范围,其结果是存在向观察者提供的信息减少这样的问题。
因此,本发明是鉴于上述的问题而完成的,其目的在于提供一种即使使用复眼的被检体内导入装置也能够避免能够一次性向观察者呈现的信息的量减少的图像处理系统、外部装置以及图像处理系统的图像处理方法。
用于解决问题的方案
为了达到上述目的,本发明的图像处理系统的特征在于,包括被检体内导入装置和外部装置,其中,上述被检体内导入 装置具备:多个摄像部件,其拍摄被检体内部来生成图像数据;识别信息附加部件,其对上述图像数据附加用于识别生成了该图像数据的摄像部件的识别信息;以及输出部件,其向外部输出附加有上述识别信息的图像数据,上述外部装置具备:输入部件,其输入上述图像数据;一览显示部件,其按上述识别信息对上述图像数据进行一览显示;以及切换部件,其将由上述一览显示部件设为显示对象的图像数据从当前显示的一个识别信息的图像数据切换为另一个识别信息的图像数据。
上述本发明的图像处理系统的特征在于,上述外部装置还具备同步部件,该同步部件使上述一个识别信息的图像数据和从不同的方向拍摄上述被检体内部而生成的上述另一个识别信息的图像数据同步,上述一览显示部件基于由上述同步部件进行的同步对每个识别信息的图像数据进行一览显示。
上述本发明的图像处理系统的特征在于,上述被检体内导入装置还具备摄像时刻附加部件,该摄像时刻附加部件对附加有识别信息的各图像数据附加摄像时刻,上述同步部件通过将附加于图像数据中的一个识别信息的图像数据的摄像时刻与规定时间进行相加或者相减来使上述一个识别信息的图像数据和上述另一个识别信息的图像数据同步。
上述本发明的图像处理系统的特征在于,上述外部装置还具备挑选部件,该挑选部件从每个识别信息的一系列的图像数据中挑选设为显示对象的图像数据,上述一览显示部件按识别信息对挑选出的图像数据进行一览显示。
上述本发明的图像处理系统的特征在于,上述一览显示部件在不同的画面上显示第一一览显示区域和第二一览显示区域,其中,在该第一一览显示区域中对上述一个识别信息的图像数据进行一览显示,在该第二一览显示区域中对上述另一个 识别信息的图像数据进行一览显示。
上述本发明的图像处理系统的特征在于,上述挑选部件在每个识别信息的一系列的图像数据中根据前后的图像数据间的图像处理结果来挑选设为显示对象的图像数据,在针对上述一个识别信息的图像数据而与该一个识别信息的图像数据同步的另一个识别信息的图像数据未被挑选为显示对象的情况下,上述同步部件针对上述一个识别信息的图像数据生成与该一个识别信息的图像数据同步的上述另一个识别信息的空的图像数据。
上述本发明的图像处理系统的特征在于,上述挑选部件在上述一个识别信息的一系列的图像数据中根据前后的图像数据间的图像处理结果来挑选设为显示对象的图像数据,并且挑选与所挑选出的该图像数据同步的上述另一个识别信息的图像数据。
上述本发明的图像处理系统的特征在于,上述挑选部件在每个识别信息的一系列的图像数据中根据前后的图像数据间的图像处理结果来分别挑选设为显示对象的图像数据,并且在针对上述一个识别信息的图像数据而与该一个识别信息的图像数据同步的上述另一个识别信息的图像数据未被挑选的情况下,在没有被挑选出的上述另一个识别信息的图像数据中进一步挑选与上述一个识别信息的图像数据同步的图像数据作为显示对象。
上述本发明的图像处理系统的特征在于,上述挑选部件在每个识别信息的一系列的图像数据中根据前后的图像数据间的图像处理结果分别挑选设为显示对象的图像数据,并且在针对上述一个识别信息的图像数据而与该一个识别信息的图像数据同步的上述另一个识别信息的图像数据未被挑选的情况下,将 该一个识别信息的图像数据从设为显示对象的图像数据中排除。
上述本发明的图像处理系统的特征在于,上述外部装置还具备起点图像选择部件,该起点图像选择部件选择设为上述同步的起点的图像数据,上述同步部件以由上述起点图像选择部件选择出的图像数据为起点,来使上述一个识别信息的图像数据与上述另一个识别信息的图像数据同步。
上述本发明的图像处理系统的特征在于,上述切换部件对设为显示对象的图像数据的识别信息个别地进行切换,上述一览显示部件将进行一览显示的图像数据中的由上述切换部件将识别信息从上述一个识别信息切换为上述另一个识别信息的图像数据切换为与上述一个识别信息的图像数据同步的上述另一个识别信息的图像数据来进行一览显示。
上述本发明的图像处理系统的特征在于,上述一览显示部件将用于视觉识别获取到进行上述一览显示的各个图像数据的摄像部件的影像显示在各图像数据的附近。
上述本发明的图像处理系统的特征在于,上述外部装置还具备判断部件,该判断部件判断上述一个识别信息的图像数据是否适合于进行观察,在上述一个识别信息的图像数据不适合于进行观察的情况下,上述一览显示部件将该图像数据切换为与该图像数据同步的上述另一个识别信息的图像数据来进行一览显示。
上述本发明的图像处理系统的特征在于,上述外部装置还具备:旋转指示输入部件,其输入正在进行上述一览显示的图像数据的旋转指示;以及旋转校正部件,其对被输入了上述旋转指示的图像数据进行旋转校正,其中,上述一览显示部件将旋转校正后的图像数据包含在上述一览显示中进行显示。
上述本发明的图像处理系统的特征在于,上述一览显示部件显示包含有一览显示区域的画面,在该一览显示区域中对每个识别信息的图像数据进行一览显示,将该一览显示区域一次显示不完的图像数据显示在下一页的一览显示区域上。
上述本发明的图像处理系统的特征在于,上述一览显示部件对图像数据的缩小图像进行一览显示。
另外,本发明的外部装置的特征在于,具备:输入部件,其从被检体内导入装置输入图像数据,该被检体内导入装置具备多个摄像部件和识别信息附加部件,上述多个摄像部件拍摄被检体内部来生成上述图像数据,上述识别信息附加部件对上述图像数据附加用于识别生成了该图像数据的摄像部件的识别信息;一览显示部件,其按上述识别信息对上述图像数据进行一览显示;以及切换部件,其将由上述一览显示部件设为显示对象的图像数据从当前显示的一个识别信息的图像数据切换为另一个识别信息的图像数据。
另外,本发明的图像处理方法的特征在于,包括以下步骤:输入步骤,从被检体内导入装置输入图像数据,该被检体内导入装置具备多个摄像部件和识别信息附加部件,上述多个摄像部件拍摄被检体内部来生成上述图像数据,上述识别信息附加部件对上述图像数据附加用于识别生成了该图像数据的摄像部件的识别信息;一览显示步骤,按上述识别信息对上述图像数据进行一览显示;以及切换步骤,其将在上述一览显示步骤中设为显示对象的图像数据从当前显示的一个识别信息的图像数据切换为另一个识别信息的图像数据。
发明的效果
根据本发明,即使利用使用了多个摄像部件的所谓的复眼的被检体内导入装置,也能够适当地切换每个摄像部件的图像 数据来进行一览显示,因此能够实现可避免减少能够向观察者一次性呈现的信息的量的图像处理系统、外部装置及其图像处理方法。
附图说明
图1是表示本发明的实施方式1的医疗系统的概要结构的示意图。
图2是表示本发明的实施方式1~4或者其变形例的胶囊型医疗装置以及与其进行无线通信的接收装置的概要内部结构的框图。
图3是表示本发明的实施方式1~4或者其变形例的胶囊型医疗装置的概要外观的立体图。
图4是表示本发明的实施方式1的显示装置的概要结构例的框图。
图5是表示本发明的实施方式1的概览画面的一例的图。
图6是表示本发明的实施方式1的胶囊型医疗装置的概要动作例的流程图。
图7是表示本发明的实施方式1的接收装置的概要动作例的流程图。
图8是表示本发明的实施方式1的显示装置的概要动作例的流程图。
图9是表示本发明的实施方式1的变形例1-1的概览画面的一例的图。
图10是表示本发明的实施方式1的变形例1-2a中由配设成彼此朝向相反的第一摄像单元和第二摄像单元拍摄管腔内的同一特定部位(突起)时的流程的概念图。
图11是用于说明本发明的实施方式1的变形例1-2a中第一 摄像单元拍摄得到的图像数据和第二摄像单元拍摄得到的图像数据沿时间轴T的顺序性的图。
图12是表示本发明的实施方式1的变形例1-2a的显示装置的概要结构例的框图。
图13是表示本发明的实施方式1的变形例1-2a的显示装置的概要动作例的流程图。
图14是表示图13的步骤S135-2a所示的同步处理的具体例子的流程图。
图15是表示本发明的实施方式1的变形例1-2a的概览画面的一例的图。
图16是表示本发明的实施方式1的变形例1-2b的概览画面的一例的图。
图17是表示本发明的实施方式1的变形例1-2b的显示装置的概要结构例的框图。
图18是表示本发明的实施方式1的变形例1-2b的显示装置的概要动作例的流程图。
图19是表示图18的步骤S130-2b所示的图像数据挑选处理的具体例子的流程图。
图20是表示本发明的实施方式1的变形例1-2b的概览画面的另一例的图。
图21是表示本发明的实施方式1的变形例1-2c的概览画面的一例的图。
图22是表示本发明的实施方式1的变形例1-2c的同步挑选处理的具体例子的流程图。
图23是表示本发明的实施方式1的变形例1-2d的概览画面的一例的图。
图24是表示本发明的实施方式1的变形例1-2d的同步挑选 处理的具体例子的流程图。
图25是表示本发明的实施方式1的变形例1-3的概览画面的一例的图。
图26是表示本发明的实施方式1的变形例1-4的概览画面的一例的图。
图27是表示本发明的实施方式1的变形例1-5的概览画面的一例的图。
图28是表示本发明的实施方式1的变形例1-6的概览画面的一例的图。
图29是表示本发明的实施方式1的变形例1-7的概览画面的一例的图。
图30是表示本发明的实施方式1的变形例1-8的同步前的概览画面的一例的图。
图31是表示本发明的实施方式1的变形例1-8的同步后的概览画面的一例的图。
图32是表示本发明的实施方式2的显示装置的概要结构例的框图。
图33是表示本发明的实施方式2的概览画面的一例的图。
图34是表示本发明的实施方式2的显示装置的概要动作例的流程图。
图35是表示图34的步骤S241所示的缩小图像切换处理的具体例子的流程图。
图36是用于说明在本发明的实施方式2中由第一摄像单元和第二摄像单元拍摄同一特定部位时得到清晰度不同的图像数据的情形的图。
图37是表示本发明的实施方式2的变形例2-1的显示装置的概要结构例的框图。
图38是表示本发明的实施方式2的变形例2-1的显示装置的概要动作例的流程图。
图39是表示图38的步骤S236-1所示的图像清晰度判断处理的具体例子的流程图。
图40是表示本发明的实施方式2的变形例2-2的概览画面的一例的图。
图41是表示本发明的实施方式2的变形例2-3的概览画面的一例的图。
图42是表示本发明的实施方式3的显示装置的概要结构例的框图。
图43是表示本发明的实施方式3的概览画面的一例的图。
图44是表示本发明的实施方式3的显示装置的概要动作例的流程图。
图45是表示本发明的实施方式3的变形例3-1a的显示装置的概要结构例的框图。
图46是表示本发明的实施方式3的变形例3-1a的概览画面的一例的图。
图47是表示本发明的实施方式3的变形例3-1a的显示装置的概要动作的流程图。
图48是表示本发明的实施方式3的变形例3-1b的显示装置的概要结构例的框图。
图49是表示本发明的实施方式3的变形例3-1b的概览画面的一例的图。
图50是表示本发明的实施方式3的变形例3-1b的显示装置的概要动作例的流程图。
图51是表示本发明的实施方式3的变形例3-1b的概览画面的另一例的图。
图52是表示本发明的实施方式3的变形例3-1c的概览画面的一例的图。
图53是表示本发明的实施方式3的变形例3-1d的概览画面的一例的图。
图54是表示本发明的实施方式3的变形例3-2的同步前的概览画面的一例的图。
图55是表示本发明的实施方式3的变形例3-3的同步前的概览画面的一例的图。
图56是表示本发明的实施方式3的变形例3-4的同步前的概览画面的一例的图。
图57是表示本发明的实施方式4的显示装置的概要结构例的框图。
图58是表示本发明的实施方式4的概览画面的一例的图。
图59是表示本发明的实施方式4的显示装置的概要动作例的流程图。
具体实施方式
下面,与附图一起详细说明用于实施本发明的较佳的方式。此外,在下面的说明中,各图不过是以能够理解本发明的内容的程度概要地示出形状、大小以及位置关系,因而,本发明并不仅仅被限定于各图例示的形状、大小以及位置关系。另外,在各图中为了结构明了化,省略了截面上的阴影部分。
<实施方式1>
下面,使用附图详细说明作为本发明的实施方式1的图像处理系统的医疗系统1的结构和动作。在本实施方式1中,以使用胶囊型的被检体内导入装置(下面称为胶囊型医疗装置)100的情况为例进行说明,该胶囊型的被检体内导入装置经口部被导入到被检体900内,在从被检体900的食道朝向肛门在管腔902(参照图1)内移动的过程中执行摄像动作,来获取被检体900内部的图像。但是,本发明不限定于此,也可以是使用漂浮于蓄积在被检体900的胃、小肠、大肠等的液体中的胶囊型医疗装置的情况等,能够进行各种变形。
(结构)
图1是表示本实施方式1的医疗系统1的概要结构的示意图。如图1所示,医疗系统1具备:胶囊型医疗装置100,其例如经口部被导入到被检体900内;接收装置130,其通过与该胶囊型医疗装置100进行无线通信,来与胶囊型医疗装置100之间发送接收图像数据、控制命令等;以及显示装置150,其对接收装置130从胶囊型医疗装置100接收到的图像数据执行规定的处理并向观察者显示。此外,接收装置130和显示装置150是配置在被检体900外的外部装置。
能够将快闪存储器、智能卡等便携式记录介质140安装到接收装置130和从接收装置130拆卸。在便携式记录介质140中存储例如从胶囊型医疗装置100接收到的图像数据等。观察者通过将便携式记录介质140从接收装置130转移插入到显示装置150,来将接收装置130从胶囊型医疗装置100接收到的图像数据转移到显示装置150。但是,不限于此,也可以将接收装置130接收到的图像数据经由通信线缆159等大致实时地发送到显示装置150。另外,观察者使用显示装置150对存储在便携式记录介质140中的图像数据执行再现处理、变换处理等规定的处理。此外,显示装置150能够使用个人计算机、工作站等信息处理装置或者液晶显示器、有机EL显示器等显示器等。
·胶囊型医疗装置
在此,图2和图3示出胶囊型医疗装置100的概要结构例。图2是表示胶囊型医疗装置100以及与其进行无线通信的接收装置130的概要内部结构的框图。图3是表示胶囊型医疗装置100的概要外观的立体图。
如图2所示,胶囊型医疗装置100具备:两个摄像单元(下面,为了方便,设为第一摄像单元101A和第二摄像单元101B),其对被检体900的内部进行照明和拍摄;处理单元102,其执行针对由第一摄像单元101A和第二摄像单元101B分别生成的图像数据的处理以及其它各种处理;存储单元103,其保存由处理单元102处理后的图像数据等;发送接收单元104和天线105,其与接收装置130之间进行信号的发送接收;以及一个以上的电池106,其向胶囊型医疗装置100内部提供电力。
第一摄像单元101A和第二摄像单元101B、处理单元102、存储单元103、发送接收单元104以及电池106被收容在由容器108a以及罩108A和108B构成的水密性的壳体108内部。在此,如图3所示,容器108a具有中空的圆筒形状。另一方面,罩108A和108B各自具有中空的半球形状,通过分别嵌在设置于容器108a的两个开口中来将壳体108内密封成不透水。另外,至少罩108A和108B由透明的树脂等形成。
第一摄像单元101A和第二摄像单元101B分别是拍摄被检体900内来生成图像数据的摄像部件,包括用于照明被检体900内部的LED 101c、将作为受光元件的CCD(Charge Coupled Device)排列成矩阵状得到的CCD阵列101a、配置在各CCD阵列101a的受光面侧的物镜101b、以及驱动LED 101c的驱动电路(未图示)和驱动CCD阵列101a的驱动电路(未图示)。第一摄像单元101A和第二摄像单元101B分别定期地(例如一秒两次)进行动作,来拍摄被检体900内部并生成图像数据。另外,生成的图像 数据被驱动电路读取,大致实时地输入到处理单元102。
处理单元102对被输入的图像数据执行规定的信号处理,将处理后的图像数据输入到发送接收单元104。发送接收单元104主要作为将由第一摄像单元101A或者第二摄像单元101B生成的图像数据输出到外部的接收装置130的输出部件而发挥功能。因而,由处理单元102进行规定的信号处理后的图像数据在之后从发送接收单元104通过天线105大致实时地无线发送到接收装置130。但是,不限定于此,也可以构成为事先将进行规定的图像信号处理后的图像数据存储到存储单元103中,在从被检体900取出胶囊型医疗装置100之后,从存储单元103取出图像数据。
此外,在所发送/存储的图像数据中,为了获知生成该图像数据的摄像单元(第一摄像单元101A或者第二摄像单元101B)而通过处理单元102附加例如用于识别第一摄像单元101A或者第二摄像单元101B的摄像机ID。另外,在所发送/存储的图像数据中,为了获知其摄像时刻而通过处理单元102附加表示摄像时刻的时间戳。即,处理单元102作为识别信息附加部件以及摄像时刻附加部件而发挥功能,该识别信息附加部件对图像数据附加作为用于识别生成该图像数据的摄像单元的识别信息的摄像机ID,该摄像时刻附加部件对各图像数据附加其摄像时刻。此外,在下面的说明中,设为对第一摄像单元101A赋予摄像机ID=‘1’,对第二摄像单元101B赋予摄像机ID=‘2’。
第一摄像单元101A的LED 101c和CCD阵列101a在壳体108内部被配置成照明/摄像方向Dr_A如图1和图3所示那样通过透明的罩108A而朝向壳体108的外部。同样地,第二摄像单元101B的LED 101c和CCD阵列101a在壳体108内部被配置成照明/摄像方向Dr_B如图1和图3所示那样通过透明的罩108B而朝向壳体 108的外部。此时,CCD阵列101a配置在与壳体108的长度方向垂直的截面的大致中央。另一方面,多个LED 101c在上述截面内以包围CCD阵列101a的方式呈点或线对称地进行配置。
另外,胶囊型医疗装置100的天线105例如使用环形天线。但是,不限定于此,能够使用偶极天线等与有无指向性无关地使用各种天线。
·接收装置
从胶囊型医疗装置100无线发送的图像数据如图1和图2所示那样由配设在被检体900的身体表面上的多个天线120a~120i(下面将任意的天线120a~120i的附图标记设为120)进行接收,通过线缆121输入到配置在被检体900外的接收装置130。在此,使用图2说明本实施方式1的接收装置130的概要结构例。
如图2所示,接收装置130具备:发送接收电路131,其与胶囊型医疗装置100之间通过天线120进行信号的发送接收;信号处理电路132,其对从发送接收电路131输入的信号(特别是图像数据)执行规定的处理;存储器134,其存储进行规定的处理后的图像数据等;以及操作部135和显示部136,其实现使观察者输入对胶囊型医疗装置100、接收装置130的各种操作、指示的GUI(Graphical User Interface:图形用户界面)功能。
多个天线120例如由偶极天线、环形天线等构成,被固定在被检体900能够穿着的夹克122上。但是,天线120的个数和配置模式以及天线120的固定目的地能够进行各种变形。
从胶囊型医疗装置100通过天线120输入的图像数据通过发送接收电路131输入到信号处理电路132,在信号处理电路132中进行规定的信号处理之后,暂时存储到存储器134中。之后,保存在存储器134中的图像数据通过接口(I/F)部137存储到便携 式记录介质140中、或者从接口(I/F)部137通过通信线缆159大致实时地发送到显示装置150。此外,接口部137例如是USB(Universal Serial Bus:通用串行总线)接口、在LAN(Local Area Network:局域网)等中使用的通信接口等,能够根据数据的输入输出方式进行各种变形。
·显示装置
显示装置150如上述那样由个人计算机、工作站等信息处理装置或者液晶显示器、有机EL显示器等显示器等构成。在此,使用图1和图4详细说明本实施方式1的显示装置150的结构例。图4是表示本实施方式1的显示装置150的概要结构例的框图。
如图1和图4所示,显示装置150具备:控制部151,其控制内部的动作、数据的输入输出;存储部153,其暂时保存通过便携式记录介质140或通信线缆159从接口部152输入的图像数据等;图像处理部154,其对被输入的图像数据执行规定的处理,来生成向观察者提供的GUI画面;显示部155,其显示图像处理部154生成的GUI画面;以及输入部156,其用于观察者根据显示在显示部155上的GUI画面来输入各种指示。
接口部152作为经由接收装置130输入从胶囊型医疗装置100输出的图像数据的输入单元而发挥功能。从接口部152输入的图像数据通过控制部151而暂时保存到存储部153中。之后,图像数据被适当地输入到图像处理部154,进行规定的处理。进行处理后的图像数据例如也可以再次保存到存储部153中。
图像处理部154对被输入的图像数据执行后述的规定的处理,之后,使用处理后的图像数据生成向观察者提供的GUI画面。生成的GUI画面通过控制部151输入到显示部155,显示在显示部155上。显示部155和输入部156向观察者提供使用了正在显示的GUI画面的GUI功能。观察者从鼠标、键盘等输入部156 输入各种操作来选择目标功能,在显示部155上显示/再现期望的图像。另外,观察者通过解读显示/再现出的图像来诊断被检体900内部。
在此,更详细地说明图像处理部154。如图4所示,图像处理部154包括:图像数据输入部154a,其用于从控制部151等输入图像数据;图像挑选部154c,其挑选设为显示对象的图像数据;平均颜色条生成部154d,其使用挑选出的图像数据生成后述的平均颜色条15A和15B;场景变化判断部154e,其判断一系列的图像数据的场景变化;以及画面生成部154f,其使用挑选出的图像数据及平均颜色条15A和15B来生成GUI画面。
输入到图像处理部154的图像数据首先通过图像数据输入部154a被输入到图像挑选部154c。
图像挑选部154c从图像数据输入部154a输入的图像数据中根据前后的图像数据间的图像处理结果来挑选设为显示对象的图像数据。此外,能够使用例如根据图像数据中的特征点计算出的前后的图像数据间的相似度、相关度、运动矢量等作为图像处理结果。即,图像挑选部154c例如对从图像数据输入部154a输入的图像数据进行图像处理,根据通过该图像处理得到的前后的图像数据间的相似度、相关度、运动矢量等来挑选设为显示对象的图像数据。这样,图像挑选部154c作为挑选单元而发挥功能,该挑选单元从按摄像机ID的一系列的图像数据中挑选出设为显示对象的图像数据。另外,挑选出的图像数据例如被分别输入到平均颜色条生成部154d、场景变化判断部154e以及画面生成部154f。
平均颜色条生成部154d计算图像数据的平均颜色。另外,平均颜色条生成部154d将计算出的平均颜色的影像按进行了拍摄的每个摄像单元、即每个摄像机ID并遵循图像数据的顺序性 彼此连接,由此分别生成平均颜色条15A和15B。此外,平均颜色条生成部154d也可以将图像数据分割为多个区域,针对由此划分出的多个分割区域的每个分割区域来计算平均颜色。例如可以将图像数据分割为纵向排列的四个区域,针对各个分割区域计算平均颜色,将计算出的平均颜色的影像按相同的分割区域彼此连接,来生成平均颜色条15A和15B。在这种情况下,平均颜色条15A和15B成为各分割区域的平均颜色的影像沿图像数据的时间轴(时间序列)排列的多个通道(lane)的带状的影像。
场景变化判断部154e根据从图像挑选部154c输入的图像数据来判断产生了场景变化的图像数据,将其结果输入到画面生成部154f。但是,不限于此,也可以对场景变化判断部154e输入由平均颜色条生成部154d生成的平均颜色条15A和15B的影像,场景变化判断部154e据此判断产生了场景变化的图像数据。另外,也可以构成为由观察者适当地选择产生了场景变化的图像。
此外,产生了场景变化的图像数据是指例如通过被检体900内部的管腔902中的特定部位(幽门、盲肠、肝弯曲、脾弯曲、S状结肠等)时的图像数据。另外,在本实施方式1中,将一系列的图像数据划分为以被检体900内部的管腔902中的特定部位进行分割得到的多个区域(将其称为场景)。
在此,图5示出本实施方式1中画面生成部154f生成的GUI画面(概览画面10A和10B)的一例。
如图5所示,在本实施方式1的GUI画面上主要有概览画面10A和概览画面10B。在概览画面10A中嵌入有以下部分:概览图像显示区域11A,其是按页对由第一摄像单元101A(摄像机ID=1)拍摄到的图像数据进行一览显示的GUI画面,将页内的图像数据缩小到规定的大小来进行一览显示;视图切换按钮12A, 其将显示画面切换为概览画面10A和概览画面10B中的任一个;时间刻度条13A,其与所有图像数据的摄像时间轴链接;滑块14A,其表示在概览图像显示区域11A中当前选择的缩小图像是在所有图像数据的摄像时间轴上的哪个位置拍摄到的图像,并且向观察者提供GUI功能,该GUI功能对要显示的页进行切换;平均颜色条15A,其与时间刻度条13A链接;当前显示场景栏16A,其表示在概览图像显示区域11A中正在显示的场景是所有场景(参照图5的场景A1~A7/B1~B7)中的第几个场景;以及场景切换按钮17A,其对在概览图像显示区域11A中显示的场景进行切换。此外,在概览图像显示区域11A中,对当前选择的缩小图像例如附加表示处于选择状态的选择框11a。
同样地,在概览画面10B中嵌入有以下部分:概览图像显示区域11B,其是按页对由第二摄像单元101B(摄像机ID=2)拍摄到的图像数据进行一览显示的GUI画面,将场景内的图像数据缩小到规定的大小来进行一览显示;视图切换按钮12B,其将显示画面切换为概览画面10A和概览画面10B中的任一个;时间刻度条13B,其与所有图像数据的摄像时间轴链接;滑块14B,其表示在概览图像显示区域11B中当前选择的缩小图像是在所有图像数据的摄像时间轴上的哪个位置拍摄到的图像,并且向观察者提供对所显示的页进行切换的功能;平均颜色条15B,其与时间刻度条13B链接;当前显示场景栏16B,其表示在概览图像显示区域11B中正在显示的场景是所有场景中的第几个场景;以及场景切换按钮17B,其对在概览图像显示区域11B中显示的场景进行切换。此外,在概览图像显示区域11B中,对当前选择的缩小图像例如附加表示处于选择状态的选择框11b。
即,画面生成部154f(在后述内容中适当地被替换为画面生成部154f、254f、354f或454f)和画面生成部154f所生成的概览 画面10A/10B(在后述内容中适当地被替换为概览画面10A-1、10B-1、10A-2a、10B-2a、10A-2b、10B-2b、10A-2c、10B-2c、10A-2d、10B-2d、10A-3、10A-4、10-5、10-6、10-7、10A-8、10B-8、20、20-2、20-3、30、30-1a、30-1b、30-1c、30-1d、30-2、30-3、30-4或40)以及显示部155作为对图像数据进行一览显示的一览显示部件而发挥功能。
观察者通过视觉观察概览画面10A/10B的概览图像显示区域11A/11B上正在显示的缩小图像的一览,能够获知各场景中的被检体900内部的整体图像。另外,观察者例如利用输入部156的鼠标、键盘、操纵杆等操作指针19来点击视图切换按钮12A,来将显示部155显示的GUI画面切换为概览画面10A和10B中的任一个。即,视图切换按钮12A/12B、对其进行操作/输入的输入部156以及根据来自视图切换按钮12A/12B的切换指示进行动作的画面生成部154f作为将设为显示对象的图像数据从正在显示的一个摄像机ID的图像数据切换为另一个摄像机ID的图像数据的切换部件而发挥功能。
这样,在本实施方式1中,将按生成了图像数据的摄像单元(第一眼(即,第一摄像单元101A)或第二眼(即,第二摄像单元101B))且按场景的缩小图像一览显示在一个画面上,因此即使是使用了复眼(例如双眼)的胶囊型医疗装置100的医疗系统1,也不会使向观察者一次性呈现的图像数据的张数减少、大小减小。其结果,即使使用复眼(例如双眼)的胶囊型医疗装置100,也可避免能够向观察者一次性呈现的信息的量减少。
此外,在本说明中,用‘#’表示的附图标记是按时间序列对每个场景的图像数据赋予的编号且是用于识别各图像数据(或者缩小图像)的图像ID。
在此,当观察者使用指针19点击某一个缩小图像时,成为 点击对象的缩小图像被选择,对其附加选择框11a/11b。另外,当观察者例如使滑块14A/14B沿时间刻度条13A/13B滑动时,在时间刻度条13A/13B的时间轴上响应于滑动后的该滑块14A/14B的位置的缩小图像自动被选择。此时,如果滑块14A/14B跨越场景进行移动,则在概览图像显示区域11A/11B上显示的场景切换。并且,当观察者使用指针19操作场景切换按钮17A时,在概览图像显示区域11A/11B上一览显示操作目的地的场景中的缩小图像,并且滑块14A/14B移动到时间刻度条13A/13B上的相当于移动目的地的场景的例如开头的位置处。此时,例如自动地设定开头的缩小图像作为初始的选择图像。
(动作)
接着,使用附图详细说明本实施方式1的医疗系统1的动作。图6是表示本实施方式1的胶囊型医疗装置100的概要动作例的流程图。图7是表示本实施方式1的接收装置130的概要动作例的流程图。图8是表示本实施方式1的显示装置150的概要动作例的流程图。
首先,针对胶囊型医疗装置100的动作进行说明。如图6所示,胶囊型医疗装置100在起动后通过定期地(规定时间间隔)驱动第一摄像单元101A,来从第一摄像单元101A获取图像数据(步骤S101的“是”~S102)。接着,胶囊型医疗装置100对从第一摄像单元101A获取到的图像数据附加对第一摄像单元101A赋予的摄像机ID(=1),并且获取得到图像数据的时刻,将表示该时刻的时间戳附加到图像数据中(步骤S103)。接着,胶囊型医疗装置100将附加有摄像机ID(=1)和时间戳的图像数据作为无线信号从发送接收单元104通过天线105发送到接收装置130(步骤S104)。
接着,胶囊型医疗装置100判断从步骤S101的判断起是否 经过了规定时间(步骤S105),当经过规定时间时(步骤S105:“是”),通过驱动第二摄像单元101B来从第二摄像单元101B获取图像数据(步骤S106)。接着,胶囊型医疗装置100对从第二摄像单元101B获取到的图像数据附加对第二摄像单元101B赋予的摄像机ID(=2),并且获取得到图像数据的时刻,将表示该时刻的时间戳附加到图像数据中(步骤S107)。接着,胶囊型医疗装置100将附加有摄像机ID(=2)和时间戳的图像数据作为无线信号从发送接收单元104通过天线105发送到接收装置130(步骤S108),返回到步骤S101。通过这样进行动作,从胶囊型医疗装置100定期地向接收装置130无线发送由第一摄像单元101A和第二摄像单元101B获取到的图像数据。图6所示的胶囊型医疗装置100的动作持续进行直到胶囊型医疗装置100内的电池106的电力用尽为止。
另一方面,接收装置130如图7所示那样例如始终监视是否从胶囊型医疗装置100接收到图像数据(步骤S111:“否”),在接收到图像数据的情况下(步骤S111:“是”),将接收到的附加有摄像机ID和时间戳的该图像数据经接口部137保存到便携式记录介质140中、或者将该图像数据从接口部137通过通信线缆159发送到显示装置150(步骤S112)。之后,接收装置130判断是否继续进行动作、例如是否从操作部135输入了动作的结束指示(步骤S113),在继续进行动作的情况下(步骤S113:“是”),返回步骤S111,等待接下来的图像数据的接收。另一方面,在不继续进行动作的情况下(步骤S113:“否”),结束该动作。
另外,如图8所示,当以便携式记录介质140或通信线缆159为介质经接口部152对显示装置150输入图像数据时(步骤S121),通过控制部151事先将图像数据暂时存储到存储部153等中(步骤S122)。
接着,显示装置150监视是否存在摄像机ID的指定(步骤S123:“否”)。此外,在概览画面初始启动之初,例如被设定成自动指定第一摄像单元101A的摄像机ID(=1)。即,当本GUI功能的启动被输入时,在启动动作中自动地指定摄像机ID=1。另外,在显示了概览画面10A或10B之后,观察者使用鼠标等从输入部156点击视图切换按钮12A/12B,由此输入摄像机ID的指定。
当摄像机ID的指定被输入时(步骤S123:“是”),显示装置150从存储部153等读取事先存储的图像数据(步骤S124)。此外,读取出的图像数据被输入到图像处理部154的图像数据输入部154a。另外,还对图像数据输入部154a输入在步骤S123中指定的摄像机ID。以后着眼于实现各步骤的部分(参照图4)的动作进行说明。
图像数据输入部154a分别确定附加在被输入的图像数据中的摄像机ID(步骤S125),根据该摄像机ID,将图像数据按拍摄图像数据的摄像单元(101A/101B)、即按摄像机ID进行划分(步骤S126)。
接着,图像数据输入部154a判断在步骤S123中是否指定了摄像机ID=1(步骤S127),在指定了摄像机ID=1的情况下(步骤S127:“是”),选择摄像机ID=1的图像数据(步骤S128)。另一方面,在指定的摄像机ID不是“1”的情况下(步骤S127:“否”)、即选择了摄像机ID=2的情况下,图像数据输入部154a选择摄像机ID=2的图像数据(步骤S129)。在从I/F部152取入图像数据的时刻,图像处理部154从控制部151接收图像数据,按摄像机ID进行图像处理。其结果,按摄像机ID决定代表图像的对象。
图像挑选部154c根据通过对被输入的图像数据进行图像处理而得到的图像处理结果来确定设为显示对象的图像数据,并 挑选出该图像数据(步骤S131)。此外,挑选出的图像数据被分别输入到平均颜色条生成部154d、场景变化判断部154e以及画面生成部154f。
被输入了挑选出的图像数据的平均颜色条生成部154d按摄像机ID选择图像数据,计算各图像数据(或者对各图像数据进行分割得到的每个分割区域)的平均颜色(步骤S132),根据其计算结果生成将平均颜色的影像沿着图像数据的时间序列彼此连接而成的平均颜色条15A/15B(步骤S133)。此外,例如能够按照分别附加在挑选出的图像数据中的时间戳来沿时间序列将影像彼此连接。另外,平均颜色的计算也可以是按照包含在各图像数据(或者各图像数据的各分割区域)中的成为特征的部分的颜色进行计算。进一步,生成的平均颜色条15A/15B被输入到画面生成部154f。但是,生成的平均颜色条15A/15B也可以被输入到场景变化判断部154e。
场景变化判断部154e根据从图像挑选部154c输入的图像数据中前后的图像数据间的图像处理结果,判断产生了场景变化的图像数据(步骤S134)。此外,场景变化判断结果被输入到画面生成部154f。
画面生成部154f按场景对所输入的挑选出的图像数据、场景变化的判断结果以及按摄像机ID挑选出的图像数据进行划分(步骤S135)。接着,画面生成部154f根据按场景划分后的图像数据和平均颜色条15A/15B的影像来生成图5所示的概览画面10A/10B(步骤S136),将其通过控制部151输出到显示部155(步骤S137)。由此,在显示部155上显示作为GUI画面的概览画面10A/10B,向观察者提供使用了该概览画面的GUI功能。
之后,显示装置150判断是否继续进行动作、例如是否从输入部156输入了动作的结束指示(步骤S138),在继续进行动作的 情况下(步骤S138:“是”),返回到步骤S123,等待接下来的摄像机ID的指定。另一方面,在不继续进行动作的情况下(步骤S138:“否”),结束该动作。
如上所述,在本实施方式1中,由于将按生成了图像数据的摄像单元(第一眼(即,第一摄像单元101A)或第二眼(即,第二摄像单元101B))且按场景的缩小图像一览显示在一个画面上,因此即使是使用了复眼(例如双眼)的胶囊型医疗装置100的医疗系统1,也不会使向观察者一次性呈现的图像数据的张数减少、大小减小。其结果,即使使用复眼(例如双眼)的胶囊型医疗装置100,也可避免能够向观察者一次性呈现的信息的量减少。
(变形例1-1)
此外,在上述的本实施方式1中,将包含在各场景中的所有的图像数据的缩小图像的一览一次性显示在概览画面10A中的概览图像显示区域11A上,但是本发明不限于此。即,也可以如图9的本实施方式1的变形例1-1的概览画面10A-1所示那样,构成为将在一个概览图像显示区域11A-1上显示的缩小图像的张数设为固定,如果要显示的各场景的缩小图像的张数超过了各页的概览图像显示区域11A-1的限制张数,则将剩余的缩小图像显示在后面的页的概览图像显示区域(例如第二页的概览图像显示区域11A-2)上。在这种情况下,例如通过点击概览图像显示区域11A-1/11B-1中的页切换按钮11-1a/11-1b来切换当前显示的页。
此外,这种概览图像显示区域的页分割能够在图4的图像处理部154中的画面生成部154f中容易地实现,因此在此省略详细的说明。另外,本变形例1-1对概览画面10B也相同。
(变形例1-2a)
另外,在将两个摄像单元(101A和101B)配设成在胶囊型医疗装置100的长度方向上的照明/摄像方向Dr_A/Dr_B彼此朝向相反方向的情况下,照明/摄像方向朝向移动方向的摄像单元(为了便于说明,将其设为第一摄像单元101A)在通过管腔902内的突起等部位(特定部位p1)之前拍摄该特定部位p1,相对于此,照明/摄像方向朝向与移动方向相反的方向的摄像单元(为了便于说明,将其设为第二摄像单元101B)在通过特定部位p1之后拍摄该特定部位p1。
在此,当如图10所示那样将胶囊型医疗装置100通过特定部位p1所需要的移动时间设为t时,如图11所示那样在第一摄像单元101A拍摄到特定部位p1的时刻和第二摄像单元101B拍摄到特定部位p1的时刻之间产生胶囊型医疗装置100通过特定部位p1所需要的移动时间t的时间滞后(time lag)。此外,图10是表示由配设成朝向彼此相反的第一摄像单元101A和第二摄像单元101B拍摄管腔902内的同一特定部位(突起)p1时的流程的概念图。图11是用于说明通过第一摄像单元101A得到的图像数据和通过第二摄像单元101B得到的图像数据沿时间轴T(摄像动作的实际时间轴)的顺序性的图。
因此,在本变形例1-2a中,根据移动时间t变更任一方或者两方的图像数据的图像的同步间隔使得能够将拍摄被检体900内部的相同位置得到的摄像机ID=1的图像数据和摄像机ID=2的图像数据设为例如是在相同或者相近的时刻拍摄到的图像数据来进行处理。由此,能够在对一方的摄像机ID(=1)的图像数据进行一览显示的概览画面(参照图15的概览画面10A-2a)和对另一方的摄像机ID(=2)的图像数据进行一览显示的概览画面(参照图15的概览画面10B-2a)之间在概览画面图像显示区域11A-2a/11B-2a上取得位置的对应,同时能够显示拍摄相同位置 得到的图像数据。此外,在下面的说明中,将这样变更图像的同步间隔称为进行同步。下面,将在不同的概览画面(11A-2a/11B-2a)之间对应显示第一摄像单元101A拍摄到的图像数据和第二摄像单元101B拍摄到的图像数据的情况作为本实施方式的变形例1-2a,使用附图详细进行说明。
附加有不同的摄像机ID的图像数据间的同步例如能够如下这样进行:确定朝向与胶囊型医疗装置100的移动方向相反的方向的摄像单元(101A/101B),对该摄像单元(本说明中将朝向移动方向的摄像单元设为第二摄像单元101B)获取到的图像数据的摄像时刻加上移动时间t。但是,不限定于此,也可以对图像数据附加表示时间序列上的顺序的信息(图像编号),基于该信息来实现不同的摄像机ID的图像数据间的同步等,能够进行各种变形。另外,摄像时刻可以是附加在图像数据中的时间戳、从胶囊型医疗装置100起动时起进行计数而得到的经过时间(设为其也被附加到图像数据中)等,只要是能够确定拍摄的时刻的信息,能够使用任意的信息。
另外,通过设为能够自由地变更作为进行同步的要素的移动时间t,能够进一步提高同步精确度。例如,有时胶囊型医疗装置100的移动速度按管腔902内的部位(场景)不同而不同。因此,在本变形例1-2a中,按场景改变胶囊型医疗装置100的移动速度(即,移动时间t)来进行图像数据间的同步。此外,胶囊型医疗装置100在管腔902内的移动速度例如能够事先以实验、仿真、经验进行确定。另外,通过设计成观察者或者管理者等能够在医疗系统使用前或使用过程中适当地变更该移动时间t、图像编号等进行同步的要素的值,能够进一步提高同步的准确度、灵活性。
本变形例1-2a的医疗系统能够设为与上述实施方式1的医 疗系统1相同的结构。但是,在本变形例1-2a中,显示装置150被替换为图12所示的显示装置150-2a。此外,在下面的说明中,对于与上述实施方式1或者其变形例相同的结构附加相同的附图标记,并省略其重复说明。
图12是表示本变形例1-2a的显示装置150-2a的概要结构例的框图。如图12所示,在显示装置150-2a中,图4所示的图像处理部154被替换为图像处理部154-2a。图像处理部154-2a除了与图像处理部154相同的结构以外,还具备同步部154g,该同步部154g使由第一摄像单元101A拍摄到的图像数据(即,摄像机ID=1的图像数据)与由第二摄像单元101B拍摄到的图像数据(即,摄像机ID=2的图像数据)同步。
在本变形例1-2a中,场景变化判断部154e的场景变化判断结果也被输入到同步部154g。同步部154g例如根据被输入的场景变化判断结果来确定朝向与胶囊型医疗装置100在管腔902内的移动方向相反的方向的摄像单元的摄像机ID。另外,同步部154g对附加有所确定的摄像机ID的各图像数据的时间戳所示的摄像时刻加上预先设定的每个场景的移动时间t来生成新的摄像时刻,使其与各图像数据相对应。由此,进行由第一摄像单元101A拍摄到的图像数据与由第二摄像单元101B拍摄到的图像数据之间的同步。即,同步部154g通过对附加在图像数据中的一方的摄像机ID(朝向与胶囊型医疗装置100在管腔902内的移动方向相反的方向的摄像单元的摄像机ID)的图像数据中的时间戳所示的摄像时刻加上移动时间(规定时间)t,来使该摄像机ID的图像数据与另一方的摄像机ID的图像数据同步。但是,不限于此,也可以通过从附加在朝向胶囊型医疗装置100在管腔902内的移动方向的摄像单元的摄像机ID的图像数据中的时间戳所示的摄像时刻减去移动时间(规定时间)t,来使该摄 像机ID的图像数据与另一方的摄像机ID的图像数据同步。
即,同步部154g作为同步部件而发挥功能,该同步部件使一方的摄像机ID的图像数据与从不同的方向拍摄相同的特定部位p1而生成的另一方的摄像机ID的图像数据同步。因而,在概览画面10A-2a/10B-2a上基于由同步部154g进行的同步来对每个摄像机ID的图像数据(其缩小图像)进行一览显示。
接着,使用附图详细说明本变形例1-2a的显示装置150-2a的动作。图13是表示本变形例1-2a的显示装置150-2a的概要动作例的流程图。图14是表示图13的步骤S15-2a所示的同步处理的具体例子的流程图。
在本变形例1-2a中,显示装置150-2a首先执行与图8的步骤S121~S135所示的动作相同的动作,来将按摄像机ID挑选出的图像数据按场景进行划分(参照图13的步骤S121~S135)。接着,显示装置150-2a的同步部154g根据挑选出的图像数据和场景变化判断结果,来执行摄像机ID=1的图像数据与摄像机ID=2的图像数据之间的同步处理(步骤S135-2a)。此外,之后使用图14详细说明同步处理。
接着,画面生成部154f使用进行了同步的图像数据和所生成的平均颜色条15A/15B来生成概览画面10A-2a/10B-2a(参照图15)(步骤S136-2a),并将其通过控制部151输出到显示部155(步骤S137)。由此,在显示部155上显示作为GUI画面的概览画面10A-2a/10B-2a,向观察者提供使用了该GUI画面的GUI功能。
之后,显示装置150-2a判断是否继续进行动作、例如是否从输入部156输入了动作的结束指示(步骤S138),在继续进行动作的情况下(步骤S138:“是”),返回步骤S123,等待接下来的摄像机ID的指定。另一方面,在不继续进行动作的情况下(步骤 S138:“否”),结束该动作。
另外,在图13的步骤S135-2a所示的同步处理中,对图像处理部154-2a的同步部154g输入由图像选择部154c挑选出的图像数据(步骤S141-2a),并且输入从场景变化判断部154e输出的场景变化判断结果(步骤S142-2a)。
接着,同步部154g根据被输入的场景变化判断结果,来确定朝向与胶囊型医疗装置100的移动方向相反的方向的摄像单元的摄像机ID(步骤S143-2a)。此外,朝向与胶囊型医疗装置100的移动方向相反的方向的摄像单元能够根据由各个摄像单元依次拍摄到的图像数据中的运动矢量来确定。但是,不限定于此,也可以根据产生了场景变化的图像数据的摄像时刻之差来进行确定等,能够进行各种变形。即,也能够将先拍摄到产生了同一场景变化的图像数据的摄像单元确定为朝向胶囊型医疗装置100的移动方向的摄像单元。这样,场景变化判断部154e和同步部154g作为确定部件而发挥功能,该确定部件根据每个摄像机ID的一系列的图像数据中的前后的图像数据间的图像处理结果来确定摄像方向朝向胶囊型医疗装置100的移动方向的摄像单元。
接着,同步部154g从由图像挑选部154c输入的图像数据中提取附加有在步骤S143-2a中确定出的摄像机ID的图像数据(步骤S144-2a),根据场景变化判断结果将该提取出的图像数据按场景进行划分(步骤S145-2a)。
接着,同步部154g对按场景划分后的图像数据的时间戳所示的摄像时刻加上预先按场景设定的移动时间t,将其作为更新后的摄像时刻信息并使其与图像数据相对应(步骤S146-2a)。此外,与更新后的摄像时刻信息相对应的图像数据与非更新对象的图像数据(即,附加有朝向胶囊型医疗装置100的移动方向的 摄像单元的摄像机ID的图像数据)一起被存储到例如存储部153等中。
接着,同步部154g从存储部153等读取出事先存储的挑选出的图像数据,选择该图像数据中的摄像机ID=1的图像数据(步骤S147-2a)。接着,同步部154g将所选择的摄像机ID=1的图像数据按照时间戳所示的摄像时刻,沿时间序列依次进行选择(步骤S148-2a),并判断是否存在与所选择的图像数据同步的摄像机ID=2的被挑选出的图像数据(步骤S149-2a)。此外,例如能够通过确认在摄像机ID=1的被挑选出的图像数据和摄像机ID=2的被挑选出的图像数据中是否存在摄像时刻(时间戳或更新后的摄像时刻信息所表示的摄像时刻)相互处在规定的时间以内的图像数据来判断有无该同步的图像数据。
在步骤S149-2a的判断的结果为存在同步的摄像机ID=2的被挑选出的图像数据的情况下(步骤S149-2a:“是”),同步部154g转移到步骤S151-2a。此外,摄像机ID=1的图像数据与摄像机ID=2的图像数据之间的同步通过更新后的摄像时刻信息的对应而实现。但是,不限定于此,也可以设定新的标志等来使同步的两个图像数据相关联等,另外设置用于使两个图像数据同步的结构。
另一方面,在不存在同步的摄像机ID=2的被挑选出的图像数据的情况下(步骤S149-2a:“否”),同步部154g生成摄像机ID=2且时间戳与成为对象的摄像机ID=1的图像数据的时间戳相同的空(Null)的图像数据(步骤S150-2a)。即,作为伪数据而生成摄像时刻与成为对象的摄像机ID=1的图像数据的摄像时刻相同的空的摄像机ID=2的图像数据。即,在本变形例1-2a中,在针对一方的摄像机ID的图像数据未挑选出与该一方的摄像机ID的图像数据同步的另一方的摄像机ID的图像数据作为显 示对象的情况下,同步部154g生成另一方的摄像机ID的空(Null)的图像数据,使其与一方的摄像机ID的图像数据同步。
接着,同步部154g判断在步骤S148-2a中是否已选择所有摄像机ID=1的被挑选出的图像数据(步骤S151-2a),在未选择完的情况下(步骤S151-2a:“否”),返回到步骤S148-2a来选择摄像机ID=1的下一个被挑选出的图像数据。
另一方面,在步骤S148-2a中已选择所有摄像机ID=1的被挑选出的图像数据的情况下(步骤S151-2a:“是”),同步部154g接下来选择事先存储于存储部153等的被挑选出的图像数据中的摄像机ID=2的图像数据(步骤S152-2a),将所选择出的摄像机ID=2的图像数据按照时间戳或者更新后的摄像时刻信息所表示的摄像时刻,沿时间序列依次进行选择(步骤S153-2a)。接着,同步部154g判断是否存在与所选择的图像数据同步的摄像机ID=1的被挑选出的图像数据(步骤S154-2a)。
在步骤S154-2a的判断结果为存在同步的摄像机ID=1的被挑选出的图像数据的情况下(步骤S154-2a:“是”),同步部154g转移到步骤S156-2a。另一方面,在不存在同步的摄像机ID=1的被挑选出的图像数据的情况下(步骤S154-2a:“否”),同步部154g生成摄像机ID=1且时间戳与成为对象的摄像机ID=2的图像数据的时间戳相同的空(Null)的图像数据(步骤S155-2a)。即,作为伪数据而生成摄像时刻与成为对象的摄像机ID=2的图像数据的摄像时刻相同的空的摄像机ID=1的图像数据。
接着,同步部154g判断在步骤S153-2a中是否已选择所有摄像机ID=2的被挑选出的图像数据(步骤S156-2a),在未选择完的情况下(步骤S156-2a:“否”),返回到步骤S153-2a来选择摄像机ID=2的下一个被挑选出的图像数据。另一方面,在步骤S153-2a中已选择所有摄像机ID=2的被挑选出的图像数据的情 况下(步骤S156-2a:“是”),将进行了同步的图像数据输出到画面生成部154f(步骤S157-2a),返回到图13所示的动作。
通过如上述那样构成以及进行动作,在本变形例1-2a中,生成如图15所示那样的概览画面10A-2a和10B-2a并进行显示。图15是表示本变形例1-2a的概览画面10A-2a和10B-2a的一例的图。
如图15所示,在概览画面10A-2a的概览图像显示区域11A-2a上显示根据从摄像机ID=1的图像数据#a1~#a50中挑选出的图像数据生成的缩小图像。另一方面,在概览图像显示区域11B-2a上显示根据从摄像机ID=2的图像数据#b1~#b50中挑选出的图像数据生成的缩小图像。另外,在各概览图像显示区域11A-2a和11B-2a中,对于不存在同步的图像数据的显示部分被设为空白。例如,概览图像显示区域11B-2a上应该显示与概览图像显示区域11A-2a中的摄像机ID=1的图像数据#a1的缩小图像同步的摄像机ID=2的图像数据#b1的缩小图像的区域被设为空白。换言之,不存在同步的图像数据的部分设为虫蚀状态。
如上所述,在本变形例1-2a中,除了与上述实施方式1相同的效果以外,还能够使不同的眼拍摄同一位置得到的图像数据同步并显示,因此观察者能够从多个角度容易地观察被检体900内的部位。
(变形例1-2b)
另外,也能够将针对摄像机ID=1的图像数据的概览画面所显示的缩小图像和摄像机ID=2的概览画面所显示的缩小图像如图16的本实施方式1的变形例1-2b的概览画面10A-2b和10B-2b所示那样,将一览显示在概览图像显示区域11A-2b/11B-2b上的缩小图像设为摄像机ID=1的被挑选出的图像数据的缩小图像和与该摄像机ID=1的被挑选出的图像数据同步的 摄像机ID=2的图像数据的缩小图像。即,也能够自动地挑选与摄像机ID=1的被挑选出的图像数据同步的摄像机ID=2的图像数据来进行一览显示。下面,将该情况作为本实施方式1的变形例1-2b,使用附图详细进行说明。
本变形例1-2b的医疗系统是与上述实施方式1的医疗系统1相同的结构。但是,在本变形例1-2b中,显示装置150被替换为图17所示的显示装置150-2b。此外,在下面的说明中,对于与上述实施方式1或其变形例相同的结构附加相同的附图标记,省略其重复说明。
图17是表示本变形例1-2b的显示装置150-2b的概要结构例的框图。如图17所示,在显示装置150-2b中,图4所示的图像处理部154被替换为图像处理部154-2b。图像处理部154-2b是在与图像处理部154相同的结构中将图像挑选部154c替换为同步挑选部154h。并且,在图像处理部154-2b中,从图像数据输入部154a输出的图像数据被分别输入到场景变化判断部154e和同步挑选部154h,场景变化判断部154e的场景变化判断结果被输入到同步挑选部154h。
在此,使用附图详细说明本变形例1-2b的显示装置150-2b和同步挑选部154h的动作。图18是表示本变形例1-2b的显示装置150-2b的概要动作例的流程图。图19是图18的步骤S130-2b所示的图像数据挑选处理的具体例子,且是表示本变形例1-2b的同步挑选部154h的概要动作例的流程图。
在本变形例1-2b中,显示装置150-2b首先执行与图8的步骤S121~S126所示的动作相同的动作,来将图像数据划分为摄像机ID=1的图像数据和摄像机ID=2的图像数据(参照图8的步骤S121~S126)。接着,场景变化判断部154e根据从图像数据输入部154a输入的图像数据中的前后的图像数据间的图像处理结 果,来判断产生了场景变化的图像数据(步骤S129-2b)。此外,场景变化判断结果被输入到同步挑选部154h。
同步挑选部154h根据从场景变化判断部154e输入的场景变化判断结果,来执行同步挑选处理(步骤S130-2b),在该同步挑选处理中挑选摄像机ID=1的图像数据和与被挑选出的摄像机ID=1的图像数据同步的摄像机ID=2的图像数据。此外,在后面使用图19详细说明同步挑选处理。
接着,同步挑选部154h判断在步骤S123中是否指定了摄像机ID=1(例如生成观察者从输入部156输入了显示指示的概览画面所要求的摄像机ID是否为‘1’)(步骤S131-2b),在指定了摄像机ID=1的情况下(步骤S131-2b:“是”),选择摄像机ID=1的被挑选出的图像数据(步骤S132-2b)。另一方面,在被指定的摄像机ID不是‘1’的情况下(步骤S131-2b:“否”)、即选择了摄像机ID=2的情况下,图像数据输入部154a选择摄像机ID=2的被挑选出的图像数据(步骤S133-2b)。此外,在步骤S132-2b或者步骤S133-2b中被选择的图像数据分别输入到平均颜色条生成部154d和画面生成部154f。
被输入挑选出的图像数据的平均颜色条生成部154d计算各图像数据(或者对各图像数据进行分割得到的每个分割区域)的平均颜色(步骤S134-2b),根据其计算结果生成平均颜色的影像沿图像数据的时间序列彼此连接而成的平均颜色条15A/15B(步骤S135-2b)。此外,所生成的平均颜色条15A/15B被输入到画面生成部154f。
画面生成部154f根据被输入的挑选出的图像数据和平均颜色条15A/15B的影像,生成图16所示的概览画面10A-2b/10B-2b(步骤S136-2b),将其通过控制部151输出到显示部155(步骤S137-2b)。由此,在显示部155上显示作为GUI画面的 概览画面10A-2b/10B-2b,向观察者提供使用了该GUI画面的GUI功能。
之后,显示装置150-2b判断是否继续进行动作、例如是否从输入部156输入了动作的结束指示(步骤S138-2b),在继续进行动作的情况下(步骤S138-2b:“是”),返回到步骤S123,等待下一个摄像机ID的指定。另一方面,在不继续进行动作的情况下(步骤S138-2b:“否”),结束该动作。
另外,在图18的步骤S130-2b所示的同步挑选处理中,从图像数据输入部154a对图像处理部154-2b中的同步挑选部154h输入图像数据(步骤S141-2b),从场景变化判断部154e输入场景变化判断结果(步骤S143-2b)。
接着,同步挑选部154h例如根据被输入的场景变化判断结果,来确定朝向与胶囊型医疗装置100的移动方向相反的方向的摄像单元的摄像机ID(步骤S144-2b)。接着,同步挑选部154h从由图像数据输入部154a输入的图像数据中提取在步骤S144-2b中确定出的摄像机ID的图像数据(步骤S145-2b),根据场景变化判断结果将该图像数据按场景进行划分(步骤S146-2b)。接着,同步挑选部154h对按场景划分后的图像数据的时间戳所示的摄像时刻加上预先按场景设定的移动时间t,将其作为更新后的摄像时刻信息使其与图像数据相对应(步骤S147-2b)。此外,将更新后的摄像时刻信息所对应的图像数据与非更新对象的图像数据(即,附加有朝向胶囊型医疗装置100的移动方向的摄像单元的摄像机ID的图像数据)一起存储到例如存储部153等中。
接着,同步挑选部154h读取出事先存储在存储部153等中的图像数据,根据图像处理结果挑选该图像数据中的摄像机ID=1的图像数据(步骤S148-2b)。接着,同步挑选部154h将挑选出的 摄像机ID=1的图像数据按照时间戳所示的摄像时刻,沿时间序列依次进行选择(步骤S149-2b),从事先存储于存储部153等的图像数据等中确定与所选择的摄像机ID=1的图像数据同步的摄像机ID=2的图像数据并挑选出该图像数据(步骤S150-2b)。即,本变形例1-2b的同步挑选部154h在一方的摄像机ID的一系列的图像数据中根据前后的图像数据间的图像处理结果来挑选设为显示对象的图像数据(步骤S148-2b),并且挑选从不同的方向拍摄与挑选出的一方的摄像机ID的图像数据相同的位置而生成的另一方的摄像机ID的图像数据(步骤S150-2b)。
接着,同步挑选部154h判断在步骤S149-2b中是否已选择所有摄像机ID=1的被挑选出的图像数据(步骤S151-2b),在未选择完的情况下(步骤S151-2b:“否”),返回到步骤S149-2b来选择摄像机ID=1的下一个图像数据。
另一方面,在步骤S149-2b中已选择所有摄像机ID=1的被挑选出的图像数据的情况下(步骤S151-2b:“是”),同步挑选部154h将进行了同步的图像数据输出到画面生成部154f(步骤S152-2b),返回图18所示的动作。
如上所述,在本变形例1-2b中,除了与上述实施方式1相同的效果以外,还能够使不同的眼拍摄同一位置得到的图像数据同步并显示,因此观察者能够从多个角度容易地观察被检体900内的部位。
此外,在本变形例1-2b中,为了便于说明,将挑选同步的图像数据时作为基准的图像数据设为摄像机ID=1的被挑选出的图像数据,但是本发明不限定于此,例如也能够将摄像机ID=2的被挑选出的图像数据设为基准。在这种情况下,由画面生成部154f(步骤S136-2b)生成的概览画面10A-2b/10B-2b成为图20所示那样。
(变形例1-2c)
另外,在上述变形例1-2b中,列举了以一方的图像数据(例如摄像机ID=1的被挑选出的图像数据)为基准无条件地挑选与其同步的另一方的图像数据(例如摄像机ID=2的图像数据)的情况,但是本发明不限定于此,例如也可以如图21所示的概览画面10A-2c/10B-2c的概览图像显示区域11A-2c/11B-2c所示那样,对摄像机ID=1的被挑选出的图像数据与摄像机ID=2的被挑选出的图像数据取所谓的逻辑或(OR),挑选与其相匹配的图像数据。下面,将该情况作为本实施方式1的变形例1-2c,使用附图详细说明。此外,在下面的说明中,对于与上述实施方式1或其变形例相同的结构附加相同的附图标记,省略其重复说明。另外,图21是表示本变形例1-2c的概览画面10A-2c和10B-2c的一例的图。
在本变形例1-2c中,能够应用与图17所示的显示装置150-2b相同的结构和与图18所示的显示装置150-2b的动作相同的动作。但是,本变形例1-2c的同步挑选部154h的动作、即图18的步骤S130-2b所示的同步挑选处理的流程如图22所示。图22是表示本变形例1-2c的同步挑选处理的具体例子的流程图。
在本变形例1-2c中,在图18的步骤S130-2b所示的同步挑选处理中,图像处理部154-2b中的同步挑选部154h执行与图19的步骤S141-2b~151-2b所示的动作相同的动作,来从所有的摄像机ID=2的图像数据中挑选与被挑选出的摄像机ID=1的图像数据同步的摄像机ID=2的图像数据(参照图22的步骤S141-2b~151-2b)。
接着,同步挑选部154h根据图像处理结果在事先存储于存储部153等的图像数据中挑选摄像机ID=2的图像数据(步骤S152-2c)。接着,同步挑选部154h将挑选出的摄像机ID=2的图 像数据按时间戳或更新后的摄像时刻信息所示的摄像时刻,沿时间序列依次进行选择(步骤S153-2c),判断与所选择的摄像机ID=2的图像数据同步的摄像机ID=1的图像数据在步骤S148-2b中是否已挑选完(步骤S154-2c),在已挑选完的情况下(步骤S154-2c:“是”),转移到步骤S156-2c。
另一方面,在步骤S154-2c的判断结果为未挑选完同步的摄像机ID=1的图像数据的情况下(步骤S154-2c:“否”),同步挑选部154h从事先存储于存储部153等的图像数据等中确定与成为对象的摄像机ID=2的图像数据同步的摄像机ID=1的图像数据并将其追加到挑选出的图像数据中(步骤S155-2c)。即,本变形例1-2c的同步挑选部154h在每个摄像机ID的一系列的图像数据中根据前后的图像数据间的图像处理结果来分别挑选设为显示对象的图像数据(步骤S148-2b、152-2c),并且在针对一方的摄像机ID的图像数据,与其同步的另一方的摄像机ID的图像数据未被挑选的情况下,进一步在没有被挑选出的另一方的摄像机ID的图像数据中挑选与一方的摄像机ID的图像数据同步的图像数据作为显示对象(步骤S150-2b、155-2c)。
接着,同步挑选部154h判断在步骤S155-2c中是否已选择所有摄像机ID=2的被挑选出的图像数据(步骤S156-2c),在未选择完的情况下(步骤S156-2c:“否”),返回到步骤S152-2c来选择摄像机ID=2的下一个被挑选出的图像数据。
另一方面,在步骤S156-2c中已选择所有摄像机ID=2的被挑选出的图像数据的情况下(步骤S156-2c:“是”),同步挑选部154h将进行了同步的图像数据输出到画面生成部154f(步骤S157-2c),返回图18所示的动作。
如上所述,在本变形例1-2c中,除了与上述实施方式1相同的效果以外,还能够使不同的眼拍摄同一位置得到的图像数据 同步并显示,因此观察者能够从多个角度容易地观察被检体900内的部位。
(变形例1-2d)
另外,在上述变形例1-2c中,取逻辑或(OR)来挑选图像数据,但是本发明不限定于此,例如也能够如图23所示的概览画面10A-2d/10B-2d的概览图像显示区域11A-2d/11B-2d所示那样,将其设为逻辑与(AND)。下面,将该情况作为本实施方式1的变形例1-2d,使用附图详细说明。此外,在下面的说明中,对于与上述实施方式1或其变形例相同的结构附加相同的附图标记,省略其重复说明。另外,图23是表示本变形例1-2d的概览画面10A-2d/10B-2d的一例的图。
在本变形例1-2d中,能够应用与图17所示的显示装置150-2b相同的结构和与图18所示的显示装置150-2b的动作相同的动作。但是,本变形例1-2d的同步挑选部154h的动作、即图18的步骤S130-2b所示的同步挑选处理的流程如图24所示。图24是表示本变形例1-2d的同步挑选处理的具体例子的流程图。
在本变形例1-2d中,在图18的步骤S130-2b所示的同步挑选处理中,图像处理部154-2b中的同步挑选部154h执行与图19的步骤S141-2b~148-2b所示的动作相同的动作,来挑选摄像机ID=1的图像数据(参照图24的步骤S141-2b~148-2b)。
接着,同步挑选部154h同样地,根据图像处理结果在事先存储于存储部153等的图像数据中挑选摄像机ID=2的图像数据(步骤S148-2d)。
接着,同步挑选部154h将在步骤S148-2b中挑选出的摄像机ID=1的图像数据按时间戳所示的摄像时刻,沿时间序列依次进行选择(步骤S149-2d)。接着,同步挑选部154h判断与所选择的摄像机ID=1的图像数据同步的摄像机ID=2的图像数据在步 骤S148-2d中是否被挑选(步骤S150-2d),在被挑选的情况下(步骤S150-2d:“是”),挑选该摄像机ID=2的图像数据(步骤S151-2d)。另一方面,在同步的摄像机ID=2的图像数据未被挑选的情况下(步骤S150-2d:“否”),同步挑选部154h从所挑选出的图像数据中排除当前选择的摄像机ID=1的图像数据(步骤S153-2d)。即,本变形例1-2d的同步挑选部154h在每个摄像机ID的一系列的图像数据中根据前后的图像数据间的图像处理结果来分别挑选设为显示对象的图像数据(步骤S148-2b、148-2d),并且在针对一方的摄像机ID的图像数据,与其同步的另一方的摄像机ID的图像数据未被挑选的情况下,从设为显示对象的图像数据中排除一方的摄像机ID的图像数据(步骤S153-2d)。
接着,同步挑选部154h判断在步骤S149-2d中是否已选择所有摄像机ID=1的被挑选出的图像数据(步骤S154-2d),在未选择完的情况下(步骤S154-2d:“否”),返回到步骤S149-2d来选择摄像机ID=1的下一个被挑选出的图像数据。
另一方面,在步骤S149-2d中已选择所有摄像机ID=1的被挑选出的图像数据的情况下(步骤S154-2d:“是”),同步挑选部154h将进行了同步的图像数据输出到画面生成部154f(步骤S155-2d),并返回图18所示的动作。
如上所述,在本变形例1-2d中,除了与上述实施方式1相同的效果以外,还能够使不同的眼拍摄同一位置得到的图像数据同步并显示,因此观察者能够从多个角度容易地观察被检体900内的部位。
(变形例1-3)
另外,在上述的本实施方式1及其变形例中,也可以构成为能够由观察者任意地旋转概览图像显示区域(例如概览图像显 示区域11A)中的各个缩小图像。下面将该例作为本实施方式1的变形例1-3,使用附图进行说明。但是,下面为了便于说明,以上述实施方式1为基础说明本变形例1-3,但是本发明不限定于此,也能够将本变形例1-3应用于上述实施方式1及其变形例的任一个中是不言而喻的。并且,下面以对摄像机ID=1的图像数据的缩小图像进行一览显示的概览画面10A-3为例进行说明,但是也能够将其应用于对摄像机ID=2的图像数据的缩小图像进行一览显示的概览画面是不言而喻的。
图25是表示本变形例1-3的概览画面10A-3的一例的图。此外,图25的(a)示出旋转缩小图像之前的概览画面10A-3的一例,图25的(b)示出旋转缩小图像之后的概览画面10A-3的一例。
如图25的(a)所示,例如当观察者使用输入部156的鼠标等操作指针19来单击概览图像显示区域11A-3中的缩小图像#A1时,成为对象的缩小图像#A1被选择,对其附加选择框11a。另外,例如当观察者使用输入部156的鼠标等操作指针19来双击缩小图像#A1时,如图25的(b)所示那样,成为对象的缩小图像#A1向规定方向(例如顺时针方向)旋转规定角度(例如30°或90°)。
另外,也可以构成为通过使用指针19将缩小图像的角向期望的旋转方向拖拽,能够以任意的旋转方向和旋转角度来旋转成为对象的缩小图像。
这样,概览画面10A-3和输入部156作为用于输入正在一览显示的图像数据(缩小图像)的旋转指示的旋转指示输入部件而发挥功能,画面生成部154f作为对被输入了旋转指示的图像数据进行旋转校正的旋转校正部件而发挥功能。
此外,像这种使各个缩小图像旋转的图像处理能够在图4的图像处理部154中的画面生成部154f中容易地实现,因此在此省略详细说明。
(变形例1-4)
另外,在上述的本实施方式1及其变形例中,也可以构成为观察者能够任意地变更概览图像显示区域的大小和/或在概览图像显示区域上一览显示的缩小图像的张数。下面,将该例作为本实施方式1的变形例1-4,使用附图进行说明。但是,下面为了便于说明,以上述实施方式1为基础说明本变形例1-4,但是本发明不限定于此,也能够将本变形例1-4应用于上述实施方式1及其变形例的任一个中是不言而喻的。并且,下面以对摄像机ID=1的图像数据的缩小图像进行一览显示的概览画面10A-4为例进行说明,但是也能够将其应用于对摄像机ID=2的图像数据的缩小图像进行一览显示的概览画面是不言而喻的。
图26是表示本变形例1-4的概览画面10A-4的一例的图。此外,图26的(a)示出旋转缩小图像之前的概览画面10A-4的一例,图26的(b)示出旋转缩小图像之后的概览画面10A-4的一例。
如图26的(a)所示,例如当观察者使用输入部156的鼠标等操作指针19来拖拽概览图像显示区域11A-4的边缘部分时,如图26的(b)所示那样,与指针19的移动相应地概览图像显示区域11A-4的显示范围发生变化。在此,如果事先固定缩小图像的大小,则与概览图像显示区域11A-4的大小相应地,在其上一览显示的缩小图像的张数改变。此外,例如在将同一场景中的缩小图像分割为多页进行显示的情况下,与能够显示在概览图像显示区域11A-4上的缩小图像的张数变化相应地,各场景的总页数增加/减少。
此外,这种概览图像显示区域11A-4的大小变更、显示在其上的缩小图像的张数的自动调整和总页数的自动增减能够在图4的图像处理部154中的画面生成部154f中容易地实现,因此在此省略详细说明。
(变形例1-5)
另外,在上述的本实施方式1及其变形例中,在不同的GUI画面(例如实施方式1中是概览画面10A和10B)上显示摄像机ID=1的图像数据的缩小图像和摄像机ID=2的图像数据的缩小图像,但是不限于此,例如也可以如图27所示的本实施方式1的变形例1-5的概览画面10-5所示那样,在一个概览画面10-5上并列显示对摄像机ID=1的图像数据的缩小图像进行一览显示的概览图像显示区域11A和对摄像机ID=2的图像数据的缩小图像进行一览显示的概览图像显示区域11B。但是,下面为了便于说明,以上述实施方式1为基础说明本变形例1-5,但是本发明不限定于此,也能够将本变形例1-5应用于上述实施方式1及其变形例的任一个中是不言而喻的。
在图27所示的概览画面10-5的例子中,概览图像显示区域11A和概览图像显示区域11B横向排列,在各自之下的区域上配置有与其相对应的时间刻度条13A/13B和滑块14A/14B、平均颜色条15A/15B、当前显示场景栏16A/16B以及场景切换按钮17A/17B。
此外,这种概览画面10-5的生成能够根据上述实施方式1或其变形例容易地实现,因此在此省略详细说明。
(变形例1-6)
另外,在上述的变形例1-5中,横向并列显示概览图像显示区域11A和概览图像显示区域11B,但是不限定于此,例如也可以如图28所示的本实施方式1的变形例1-6的概览画面10-6所示那样,将对摄像机ID=1的图像数据的缩小图像进行一览显示的概览图像显示区域11A和对摄像机ID=2的图像数据的缩小图像进行一览显示的概览图像显示区域11B纵向并列显示。但是,下面为了便于说明,以上述实施方式1为基础说明本变形例1-6, 但是本发明不限定于此,也能够将本变形例1-6应用于上述实施方式1及其变形例的任一个中是不言而喻的。
在图28所示的概览画面10-6的例子中,概览图像显示区域11A和概览图像显示区域11B纵向排列,在各自的侧面(例如右侧)的区域上配置有与其相对应的时间刻度条13A/13B和滑块14A/14B、平均颜色条15A/15B、当前显示场景栏16A/16B以及场景切换按钮17A/17B。
此外,这种概览画面10-6的生成能够根据上述实施方式1或其变形例容易地实现,因此在此省略详细说明。
(变形例1-7)
另外,在上述的变形例1-5中,与各概览图像显示区域11A和11B对应的时间刻度条13A/13B和滑块14A/14B以及平均颜色条15A/15B配置在了各概览图像显示区域的下侧的区域上。即,将时间刻度条13A和滑块14A、时间刻度条13B和滑块14B以及平均颜色条15A和平均颜色条15B分别横向排列进行显示,但是不限于此,例如也可以如图29所示的本实施方式1的变形例1-7的概览画面10-7所示那样,将时间刻度条13A和滑块14A、时间刻度条13B和滑块14B以及平均颜色条15A和平均颜色条15B分别纵向排列进行显示。但是,下面为了便于说明,以上述实施方式1为基础说明本变形例1-7,但是本发明不限定于此,也能够将本变形例1-7应用于上述实施方式1及其变形例的任一个中是不言而喻的。
在图29所示的概览画面10-7的例子中,概览图像显示区域11A和概览图像显示区域11B横向排列,在其下侧时间刻度条13A和滑块14A、时间刻度条13B和滑块14B、平均颜色条15A以及平均颜色条15B分别从概览图像显示区域11A下向概览图像显示区域11B下延伸,纵向排列显示。
此外,这种概览画面10-7的生成能够根据上述实施方式1或其变形例容易地实现,因此在此省略详细说明。
(变形例1-8)
另外,在上述的变形例1-2a~1-2d中,以利用根据胶囊型医疗装置100在管腔902内的移动速度而预先设定的移动时间t来使摄像机ID=1的图像数据与摄像机ID=2的图像数据同步的情况为例,但是作为两个图像数据的同步方法,不限定于此,例如也可以构成为使分别拍摄同一位置的图像数据同步,以该图像数据为起点使两个图像数据同步。下面,将该例作为本实施方式1的变形例1-8,使用附图进行说明。但是,下面为了便于说明,以上述实施方式1为基础说明本变形例1-8,但是本发明不限定于此,也能够将本变形例1-8应用于上述实施方式1及其变形例的任一个中是不言而喻的。
图30是表示本变形例1-8的同步前的概览画面10A-8和10B-8的一例的图。图31是表示本变形例1-8的同步后的概览画面10A-8和10B-8的一例的图。
如图30所示,在概览画面10A-8和10B-8上分别设置有同步按钮18A和18B作为用于观察者输入可动数据的同步指示的GUI。观察者在选择了概览图像显示区域11A或11B的某一个缩小图像的状态下,使用输入部156的鼠标等操作指针19来点击同步按钮18A或18B。由此,如图31所示那样,以成为处于选择状态的缩小图像的生成源的图像数据(在图30和图31所示的例子中是图像数据#a47或#b47)作为同步的起点,来使摄像机ID=1的图像数据与摄像机ID=2的图像数据同步,按其顺序将缩小图像显示在概览图像显示区域11A或11B上。在此,通过概览画面10A-8和10B-8以及输入部156提供的GUI功能作为起点图像选择部件而发挥功能,使观察者选择设为同步的起点的图像数据。
此时,也可以如图31所示那样,对成为同步的起点的图像数据(在图30和图31所示的例子中是图像数据#a47或#b47)的缩小图像附加用于对其进行强调显示的同步起点框12a/12b。
此外,这种同步处理能够在图4的图像处理部154中的画面生成部154f中容易地实现,因此在此省略详细说明。
<实施方式2>
另外,在上述实施方式1及其变形例中,以将由不同的摄像单元拍摄到的图像数据的缩小图像分别一览显示在各自的概览图像显示区域上的情况为例,但是本发明不限定于此,也可以将由不同的摄像单元拍摄到的图像数据的缩小图像显示在一个概览图像显示区域上。下面,将该情况作为本发明的实施方式2,使用附图详细说明。
本实施方式2的医疗系统能够设为与上述实施方式1的医疗系统1相同的结构。但是,在本实施方式2中,显示装置150被替换为图32所示的显示装置250。此外,在下面的说明中,对于与上述实施方式1或者其变形例相同的结构附加相同的附图标记,并省略其重复说明。
图32是表示本实施方式2的显示装置250的概要结构例的框图。如图32所示,在显示装置250中,图4所示的图像处理部154被替换为图像处理部254。图像处理部254是在与上述变形例1-2b的图像处理部154-2b相同的结构(参照图17)中将画面生成部154f替换为画面生成部254f。
画面生成部254f使用从同步挑选部154h输出的被挑选出的图像数据以及从平均颜色条生成部154d输出的平均颜色条15A和15B的影像,生成如图33所示的概览画面20。图33是本实施方式2的概览画面20的一例。此外,图33的(a)示出切换缩小图像之前的概览画面20,图33的(b)示出切换缩小图像之后的概览 画面20。
如图33所示,在本实施方式2的概览画面20上嵌入有对挑选出的图像数据的缩小图像进行一览显示的概览图像显示区域21、针对摄像机ID=1的图像数据的时间刻度条13A、滑块14A及平均颜色条15A、针对摄像机ID=2的图像数据的时间刻度条13B、滑块14B及平均颜色条15B、表示当前显示在概览图像显示区域21上的场景是所有场景中的第几个场景的当前显示场景栏26、以及对显示在概览图像显示区域21上的场景进行切换的场景切换按钮27。
在初始状态的概览图像显示区域21上例如对摄像机ID=1的被挑选出的图像数据的缩小图像(#a1~#a50中的一部分)进行一览显示。在各缩小图像的附近(例如下侧)显示影像(下面称为胶囊影像)21a/21b,该影像21a/21b可视地向观察者呈现各缩小图像是由胶囊型医疗装置100的哪个摄像单元(101A或101B)拍摄到的。此外,为了便于说明,设为胶囊影像21a表示摄像机ID=1的摄像单元(即,第一摄像单元101A),胶囊影像21b表示摄像机ID=2的摄像单元(即,第二摄像单元101B)。此外,在胶囊影像21a/21b的显示中也可以按摄像机ID变更该影像的形状、颜色等来显示。
在此,当观察者操作指针19点击图33的(a)的概览图像显示区域21中的对缩小图像#a34附加的胶囊影像21a时,在与被点击的胶囊影像21a对应的缩小图像的显示部分如图33的(b)所示那样显示摄像机ID=2的图像数据的缩小图像#b34。即,与被点击的胶囊影像21a/21b对应的缩小图像被切换为另一方的摄像机ID的缩小图像。
接着,使用附图详细说明本实施方式2的医疗系统的动作。其中,本实施方式2的胶囊型医疗装置100的动作和接收装置130 的动作与上述实施方式1的动作(参照图6和图7)相同,因此在此省略详细的说明。图34是表示本实施方式2的显示装置250的概要动作例的流程图。图35是表示图34所示的步骤S241所示的缩小图像切换处理的具体例子的流程图。
本实施方式2的显示装置250如图34所示那样,当以便携式记录介质140或通信线缆159为介质从接口部152输入图像数据时(步骤S221),通过控制部151事先将图像数据暂时存储到存储部153等中(步骤S222)。
接着,显示装置250待机直到从输入部156等输入概览画面20的显示指示为止(步骤S223:“否”),在存在显示指示的情况下(步骤S223:“是”),显示装置250从存储部153等读取出事先存储的图像数据(步骤S224)。此外,读取出的图像数据被输入到图像处理部254中的图像数据输入部154a。
图像数据输入部154a分别确定附加在被输入的图像数据中的摄像机ID(步骤S225),根据该摄像机ID将图像数据按其摄像单元(101A/101B)、即按摄像机ID进行划分(步骤S226)。
接着,图像数据输入部154a选择摄像机ID=1的图像数据(步骤S227)。此外,被选择的摄像机ID=1的图像数据被输入到场景变化判断部154e。
另外,场景变化判断部154e根据从图像数据输入部154a输入的摄像机ID=1的图像数据中的前后的图像数据间的图像处理结果,来判断产生了场景变化的图像数据(步骤S229)。此外,场景变化判断结果被输入到同步挑选部154h。
同步挑选部154h根据从场景变化判断部154e输入的场景变化判断结果,执行使图像数据同步并进行挑选的同步挑选处理(步骤S230)。此外,本实施方式的同步挑选处理能够设为与上述实施方式1的变形例1-2a~1-2d所示的同步挑选处理(参照图 18的步骤S130-2b和图19、图22或图24)相同。其中,在步骤S230中挑选出的图像数据被分别输入到平均颜色条生成部154d和画面生成部254f。
被输入挑选出的图像数据的平均颜色条生成部154d首先选择摄像机ID=1的图像数据(步骤S231),计算所选择的各图像数据(或对图像数据进行分割得到的每个分割区域)的平均颜色(步骤S232),基于其计算结果生成将平均颜色的影像沿图像数据的时间序列彼此连接而成的平均颜色条15A(步骤S233)。此外,所生成的平均颜色条15A被输入到画面生成部254f。
另外,平均颜色条生成部154d接下来选择摄像机ID=2的图像数据(步骤S234),计算所选择的各图像数据(或对图像数据进行分割得到的每个分割区域)的平均颜色(步骤S235),基于其计算结果生成将平均颜色的影像沿图像数据的时间序列彼此连接而成的平均颜色条15B(步骤S236)。此外,所生成的平均颜色条15B被输入到画面生成部254f。
被输入平均颜色条15A和15B的影像以及挑选出的图像数据的画面生成部254f首先针对被输入的挑选出的图像数据,基于其摄像机ID生成胶囊影像21a(步骤S237),接着,使用所生成的胶囊影像21a、摄像机ID=1的被挑选出的图像数据以及平均颜色条15A和15B的影像来生成如图33的(a)所示那样的每个场景的概览画面20(步骤S238),将所生成的该概览画面20输出到显示部155(步骤S239)。由此,在显示部155上显示作为GUI画面的概览画面20,向观察者提供使用了该GUI画面的GUI功能。
之后,显示装置250判断观察者是否使用例如输入部156的鼠标等输入了概览画面20的概览图像显示区域21上正在显示的缩小图像的切换指示(步骤S240),在输入了切换指示的情况下(步骤S240:“是”),执行对显示在概览图像显示区域21上的缩 小图像进行切换的缩小图像切换处理(步骤S241)。此外,在后面使用图35详细说明缩小图像切换处理。
另一方面,在未输入缩小图像的切换指示的情况下(步骤S240:“否”),显示装置250判断是否继续进行动作、例如是否从输入部156输入了动作的结束指示(步骤S242),在继续进行动作的情况下(步骤S242:“是”),返回步骤S239。另一方面,在不继续进行动作的情况下(步骤S242:“否”),结束该动作。
另外,在图34的步骤S241所示的缩小图像切换处理中,显示装置250的画面生成部254f如图35所示那样,首先确定成为生成被输入了切换指示的正在显示的缩小图像的生成源的图像数据(步骤S251),接着,确定附加在所确定的图像数据中的摄像机ID和时间戳(步骤S252)。
接着,画面生成部254f判断所确定的摄像机ID是否为‘1’(步骤S253),在是摄像机ID=1的情况下(步骤S253:“是”),例如从存储部153等中确定与在步骤S251中确定的图像数据对应的摄像机ID=2的图像数据(步骤S254)。另一方面,在步骤S253中确定的摄像机ID不是‘1’、即是‘2’的情况下(步骤S253:“否”),画面生成部254f例如从存储部153等中确定与在步骤S251中确定的图像数据对应的摄像机ID=1的图像数据(步骤S255)。
接着,画面生成部254f生成在步骤S254或步骤S255中确定的图像数据的缩小图像(步骤S256),并且生成与作为该缩小图像的生成源的图像数据的摄像机ID相对应的胶囊影像(例如图33的胶囊影像21a或21b)(步骤S257)。即,概览画面20和对其进行操作/输入的输入部156以及画面生成部254f作为切换部件而发挥功能,该切换部件对设为显示对象的图像数据的摄像机ID个别地进行切换。另外,画面生成部254f将进行一览显示的图像数据中的通过切换部件而摄像机ID已被切换的图像数据切 换为切换目的地的摄像机ID的同步的图像数据来进行一览显示。
接着,画面生成部254f使用在步骤S256中生成的缩小图像和在步骤S257中生成的胶囊影像21a/21b,来更新当前显示在显示部155上的概览画面20的概览图像显示区域21中的成为对象的缩小图像和胶囊影像(步骤S258)。例如将图33的(a)所示的缩小图像#a34和胶囊影像21a更新为图33的(b)所示的缩小图像#b34和胶囊影像21b(步骤S258),返回图34所示的动作。
如上所述,在本实施方式2中,能够根据需要对当前一览显示的图像数据个别地进行切换,因此即使是使用了复眼(例如双眼)的胶囊型医疗装置100的医疗系统,也不会使向观察者一次性呈现的图像数据的张数减少、大小减小。其结果,即使使用复眼(例如双眼)的胶囊型医疗装置100,也能够避免可向观察者一次性呈现的信息的量减少。
(变形例2-1)
另外,如图36的(a)所示,存在由于管腔902内的气泡等导致图像数据中的部位(特定部位p1)变得不清晰的情况。另一方面,存在如下情况:在从相反侧对该特定部位p1进行拍摄得到的图像数据(参照图36的(b))中没有拍摄到气泡等,清楚地拍摄到了特定部位p1。因此,在这种情况下,将由于不清晰等原因而不适合进行观察的图像数据自动地替换为与其同步的另一方的摄像机ID的图像数据。下面,将该情况作为本实施方式2的变形例2-1,使用附图详细说明。此外,图36是用于说明由第一摄像单元101A和第二摄像单元101B拍摄同一特定部位p1时得到清晰度不同的图像数据的情形的图。
本变形例2-1的医疗系统能够设为与上述实施方式1的医疗系统1相同的结构。但是,在本变形例2-1中,显示装置150被替 换为图37所示的显示装置250-1。此外,在下面的说明中,对于与上述实施方式1、2或者其变形例相同的结构附加相同的附图标记,并省略其重复说明。
图37是表示本变形例2-1的显示装置250-1的概要结构例的框图。如图37所示,在显示装置250-1中,图4所示的图像处理部154被替换为图像处理部254-1。图像处理部254-1除了与上述实施方式2的图像处理部254相同的结构以外(参照图32),还具备清晰度判断部254i。
清晰度判断部254i作为判断部件而发挥功能,判断从同步挑选部154h输出的被挑选出的图像数据中的一方的摄像机ID(作为例子将其设为摄像机ID=1)是否不适合进行观察,将其判断结果输入到画面生成部254f。
画面生成部254f使用从同步挑选部154h输入的被挑选出的图像数据、从清晰度判断部254i输入的清晰度的判断结果以及从平均颜色条生成部154d输入的平均颜色条15A和15B的影像来生成概览画面。此外,本变形例2-1的概览画面与图33的(b)所示的概览画面20相同。在下面的说明中,将本变形例2-1的概览画面的附图标记设为20。
接着,使用附图详细说明本变形例2-1的医疗系统的动作。其中,本变形例2-1中的胶囊型医疗装置100的动作和接收装置130的动作与上述实施方式1的动作(参照图6和图7)相同,因此在此省略详细的说明。图38是表示本变形例2-1的显示装置250-1的概要动作例的流程图。图39是表示图38的步骤S236-1所示的图像清晰度判断处理的具体例子的流程图。
在本变形例2-1中,显示装置250-1首先通过执行与图34的步骤S221~S236所示的动作相同的动作,来生成针对摄像机ID=1的被挑选出的图像数据的平均颜色条15A的影像和针对摄 像机ID=2的被挑选出的图像数据的平均颜色条15B的影像(参照图38的步骤S221~S236)。接着,显示装置250-1的清晰度判断部254i执行图像清晰度判断处理,对从同步挑选部154h输入的被挑选出的各图像数据的清晰度进行判断(步骤S236-1)。此外,在后面使用图39详细说明图像清晰度判断处理。另外,图像清晰度判断处理的判断结果被输入到画面生成部254f。并且,也可以构成为能够由观察者手动选择不适合进行观察的图像。由此,能够进行对观察者来说便利性更高的图像数据的选择。
被输入了清晰度判断结果、挑选出的图像数据以及平均颜色条15A/15B的影像的画面生成部254f首先针对被输入的挑选出的图像数据,基于其摄像机ID来生成胶囊影像21a/21b(步骤S237-1),接着,从摄像机ID=1的被挑选出的图像数据中将由于不清晰等原因而判断为不适合进行观察的图像数据替换为摄像机ID=2的被挑选出的图像数据(步骤S238-1)。但是不限定于此,也可以代替被判断为不适合进行观察的图像数据而显示空白(Null)或者灰化图像。
接着,画面生成部254f使用进行了替换整理后的图像数据、与其对应的胶囊影像21a/21b以及平均颜色条15A/15B的影像来生成如图33的(a)所示的每个场景的概览画面20(步骤S239-1),将生成的该概览画面20输出到显示部155(步骤S240-1)。由此,在显示部155上显示作为GUI画面的概览画面20,向观察者提供使用了该GUI画面的GUI功能。
之后,显示装置250-1判断观察者是否使用例如输入部156的鼠标等输入了概览画面20的概览图像显示区域21上正在显示的缩小图像的切换指示(步骤S241-1),在输入了切换指示的情况下(步骤S241-1:“是”),执行对显示在概览图像显示区域21上的缩小图像进行切换的缩小图像切换处理(步骤S242-1)。此 外,使用图35详细说明缩小图像切换处理。
另一方面,在没有输入缩小图像的切换指示的情况下(步骤S241-1:“否”),显示装置250-1判断是否继续进行动作、例如是否从输入部156输入了动作的结束指示(步骤S243-1),在继续进行动作的情况下(步骤S243-1:“是”),返回步骤S240-1。另一方面,在不继续进行动作的情况下(步骤S243-1:“否”),结束该动作。
另外,在图38所示的步骤S236-1所示的图像清晰度判断处理中,如图39所示那样首先从同步挑选部154h对显示装置250-1的清晰度判断部254i输入被挑选出的图像数据(步骤S251-1),接着,清晰度判断部254i将被输入的图像数据中的摄像机ID=1的图像数据按时间戳所示的摄像时刻,沿时间序列依次进行选择(步骤S252-1),判断所选择的图像数据是否不清晰(步骤S253-1)。此外,能够基于例如在图像中是否拍摄到了气泡等特定的图案、各区域的边缘是否陡峭等来判断图像是否清晰。
之后,清晰度判断部254i判断在步骤S252-1中是否已选择所有摄像机ID=1的被挑选出的图像数据(步骤S254-1),在未选择完的情况下(步骤S254-1:“否”),返回到步骤S252-1来选择摄像机ID=1的下一个被挑选出的图像数据。
另一方面,在步骤S252-1中已选择所有摄像机ID=1的被挑选出的图像数据的情况下(步骤S254-1:“是”),清晰度判断部254i将步骤S253-1的清晰度判断结果按每个图像数据输出到画面生成部254f(步骤S255-1),之后返回图38所示的动作。
如上所述,在本变形例2-1中,除了与上述实施方式2相同的效果以外,还能够自动地辨别不适合进行观察的图像数据并将其切换为另一方的摄像机ID的图像数据。
(变形例2-2)
另外,上述的本实施方式2及其变形例也可以构成为如图40所示的本实施方式2的变形例2-2的概览画面20-2所示那样,观察者能够任意地旋转概览图像显示区域(例如概览图像显示区域21-2)上的各个缩小图像。其中,其结构和动作能够从上述的实施方式2和实施方式1的变形例1-3容易地实现,因此在此省略详细的说明。此外,图40是表示本变形例2-2的概览画面20-2的一例的图。另外,图40的(a)示出旋转缩小图像#A2之前的概览画面20-2的一例,图40的(b)示出旋转缩小图像#A2之后的概览画面20-2的一例。
(变形例2-3)
另外,上述的本实施方式2及其变形例也可以构成为如图41所示的本实施方式2的变形例2-3的概览画面20-3所示那样,观察者能够任意地变更概览图像显示区域21-3的大小和/或一览显示在概览图像显示区域21-3上的缩小图像的张数。其中,其结构和动作能够从上述的实施方式2和实施方式1的变形例1-4容易地实现,因此在此省略详细的说明。此外,图41是表示本变形例2-3的概览画面20-3的一例的图。另外,图41的(a)示出变更概览图像显示区域21-3的大小和/或一览显示在概览图像显示区域21-3上的缩小图像的张数之前的概览画面20-3的一例,图41的(b)示出变更概览图像显示区域21-3的大小和/或一览显示在概览图像显示区域21-3上的缩小图像的张数之后的概览画面20-3的一例。
<实施方式3>
另外,将由不同的摄像单元拍摄到的图像数据的缩小图像显示在一个概览图像显示区域上的另一方式作为本发明的实施方式3,在下面使用附图详细说明。
本实施方式3的医疗系统能够设为与上述实施方式1的医疗 系统1相同的结构。但是,在本实施方式3中,显示装置150被替换为图42所示的显示装置350。此外,在下面的说明中,对于与上述实施方式1、2或其变形例相同的结构附加相同的附图标记,省略其重复的说明。
图42是表示本实施方式3的显示装置350的概要结构例的框图。如图42所示,在显示装置350中,图4所示的图像处理部154被替换为图像处理部354。图像处理部354是在与上述实施方式1的图像处理部154相同的结构(参照图4)中将画面生成部154f替换为画面生成部354f。
画面生成部354f使用从图像挑选部154c输出的被挑选出的图像数据以及从平均颜色条生成部154d输出的平均颜色条15A和15B的影像,来生成如图43所示的概览画面30。图43是本实施方式3的概览画面30的一例。
如图43所示,在本实施方式3的概览画面30上嵌入有以下部分:概览图像显示区域31,在该概览图像显示区域31中对摄像机ID=1的被挑选出的图像数据的缩小图像和摄像机ID=2的被挑选出的图像数据的缩小图像横向排列以成对方式进行一览显示;针对摄像机ID=1的图像数据的时间刻度条13A和滑块14A及平均颜色条15A;针对摄像机ID=2的图像数据的时间刻度条13B和滑块14B及平均颜色条15B;当前显示场景栏26,其表示当前显示在概览图像显示区域31上的场景是所有场景中的第几个场景;以及场景切换按钮27,其对显示在概览图像显示区域31上的场景进行切换。
在概览图像显示区域31上将摄像机ID=1的被挑选出的图像数据的缩小图像和摄像机ID=2的被挑选出的图像数据的缩小图像的对沿时间序列排列来进行一览显示。也可以在各缩小图像的附近(例如下侧)显示影像(下面称为胶囊影像)21a/21b, 用于可视地向观察者呈现各缩小图像是由胶囊型医疗装置100的哪个摄像单元(101A或101B)拍摄到的。
接着,使用附图详细说明本实施方式3的医疗系统的动作。其中,本实施方式3的胶囊型医疗装置100的动作和接收装置130的动作与上述实施方式1的动作(参照图6和图7)相同,因此在此省略详细的说明。图44是表示本实施方式3的显示装置350的概要动作例的流程图。
本实施方式3的显示装置350如图44所示那样,当以便携式记录介质140或通信线缆159为介质通过接口部152输入图像数据时(步骤S321),通过控制部151事先将图像数据暂时存储到存储部153等中(步骤S322)。
接着,显示装置350待机直到从输入部156等输入概览画面30的显示指示为止(步骤S323:“否”),在存在显示指示的情况下(步骤S323:“是”),显示装置350从存储部153等读取出事先存储的图像数据(步骤S324)。此外,读取出的图像数据被输入到图像处理部354中的图像数据输入部154a。
图像数据输入部154a对附加在被输入的图像数据中的摄像机ID分别进行确定(步骤S325),根据该摄像机ID,将图像数据按其摄像单元(101A/101B)、即按摄像机ID进行划分(步骤S326)。此外,划分后的图像数据被输入到场景变化判断部154e。
图像挑选部154c基于对被输入的图像数据进行图像处理而得到的图像处理结果来确定设为显示对象的图像数据,并挑选出该图像数据(步骤S328)。此外,挑选出的图像数据被分别输入到平均颜色条生成部154d、场景变化判断部154e以及画面生成部354f。
被输入了挑选出的图像数据的平均颜色条生成部154d按摄像机ID选择图像数据并计算各图像数据(或者对各图像数据进 行分割得到的每个分割区域)的平均颜色(步骤S329),基于其计算结果生成将平均颜色的影像沿图像数据的时间序列彼此连接而成的平均颜色条15A和15B(步骤S330)。此外,所生成的平均颜色条15A和15B被输入到画面生成部354f。但是,所生成的平均颜色条15A和15B也可以输入到场景变化判断部154e。
场景变化判断部154e根据从图像挑选部154c输入的图像数据中的前后的图像数据间的图像处理结果,判断产生了场景变化的图像数据(步骤S331)。此外,场景变化判断结果被输入到画面生成部354f。
画面生成部354f根据被输入的挑选出的图像数据和场景变化的判断结果,来将每个摄像机ID的被挑选出的图像数据按场景进行划分(步骤S332),按场景将摄像机ID=1的图像数据和摄像机ID=2的图像数据进行配对(步骤S333)。接着,画面生成部354f根据按场景划分并配对的图像数据以及平均颜色条15A和15B的影像来生成图43所示的概览画面30(步骤S334),将其通过控制部151输出到显示部155(步骤S335),结束该动作。
如上所述,在本实施方式3中,能够将不同的眼拍摄得到的图像数据横向排列来进行一览显示,因此观察者能够从多个角度容易地观察被检体900内的部位。
(变形例3-1a)
另外,不同的摄像机ID的图像数据间的配对例如也可以在如上述实施方式1的变形例1-2a所例示的那样的同步的图像数据之间进行。下面,将该情况作为本实施方式3的变形例3-1a,使用附图详细说明。
本变形例3-1a的医疗系统能够设为与上述实施方式1的医疗系统1相同的结构。但是,在本变形例3-1a中,显示装置150被替换为图45所示的显示装置350-1a。此外,在下面的说明中, 对于与上述实施方式1、2、3或其变形例相同的结构附加相同的附图标记,省略其重复的说明。
图45是表示本变形例3-1a的显示装置350-1a的概要结构例的框图。如图45所示,在显示装置350-1a中,将图4所示的图像处理部154替换为图像处理部354-1a。图像处理部354-1a除了与上述实施方式3的图像处理部354相同的结构(参照图42)以外,还具备同步部154g。此外,同步部154g与上述实施方式1的变形例1-2a的同步部154g(参照图12)相同。
在本变形例3-1a中,画面生成部354f使用从图像挑选部154c输入的被挑选出的图像数据、从场景变化判断部154e输入的场景变化判断结果以及从平均颜色条生成部154d输入的平均颜色条15A和15B的影像来生成如图46所示的概览画面30-1a。图46是本变形例3-1a的概览画面30-1a的一例。
如图46所示,在概览画面30-1a的概览图像显示区域31-1a上将根据从摄像机ID=1的图像数据#a1~#a50中挑选出的图像数据生成的缩小图像和根据从摄像机ID=2的图像数据#b1~#b47中挑选出的图像数据生成的缩小图像配对并进行显示。另外,在概览图像显示区域31-1a上对于不存在同步的图像数据的显示部分设为空白。换言之,不存在同步的图像数据的部分被设为虫蚀的状态。
接着,使用附图详细说明本变形例3-1a的医疗系统的动作。其中,本变形例3-1a的胶囊型医疗装置100的动作和接收装置130的动作与上述实施方式1的动作(参照图6和图7)相同,因此在此省略详细的说明。图47是表示本变形例3-1a的显示装置350-1a的概要动作的流程图。
本变形例3-1a的显示装置350-1a首先通过执行与图44的步骤S321~S332所示的动作相同的动作,来将挑选出的图像数据 按场景进行划分(参照图47的步骤S321~S332)。接着,显示装置350-1a的同步部154g基于挑选出的图像数据和场景变化判断结果,来执行摄像机ID=1的图像数据与摄像机ID=2的图像数据的同步处理(步骤S332-1a)。此外,同步处理的详细内容与上述实施方式1的变形例1-2a的同步处理(参照图14)相同,因此在此省略详细的说明。
接着,画面生成部354f按场景对进行了同步的图像数据中的摄像机ID=1的图像数据和摄像机ID=2的图像数据进行配对(步骤S333)。接着,画面生成部354f根据按场景进行划分并配对的图像数据以及平均颜色条15A和15B的影像来生成图46所示的概览画面30-1a(步骤S334),将其通过控制部151输出到显示部155(步骤S335),结束该动作。
如上所述,在本变形例3-1a中,能够将不同的眼拍摄同一位置得到的图像数据横向排列来进行一览显示,因此观察者能够从多个角度容易地观察被检体900内的部位。
(变形例3-1b)
另外,不同的摄像机ID的图像数据间的配对例如也可以在如上述实施方式1的变形例1-2b所例示的那样的同步的图像数据之间进行。下面,将该情况作为本实施方式3的变形例3-1b,使用附图详细说明。
本变形例3-1b的医疗系统能够设为与上述实施方式1的医疗系统1相同的结构。但是,在本变形例3-1b中,显示装置150被替换为图48所示的显示装置350-1b。此外,在下面的说明中,对于与上述实施方式1、2、3或其变形例相同的结构附加相同的附图标记,省略其重复的说明。
图48是表示本变形例3-1b的显示装置350-1b的概要结构例的框图。如图48所示,在显示装置350-1b中,将图4所示的图像 处理部154替换为图像处理部354-1b。图像处理部354-1b是在与上述的实施方式3的图像处理部354相同的结构(参照图42)中将图像挑选部154c替换为同步挑选部154h。并且,在图像处理部354-1b中,从图像数据输入部154a输出的图像数据被分别输入到场景变化判断部154e和同步挑选部154h,场景变化判断部154e的场景变化判断结果被输入到同步挑选部154h。此外,本变形例3-1b的同步挑选部154h与上述实施方式1的变形例1-2b的同步挑选部154h相同,因此在此省略详细的说明。
在本变形例3-1b中,画面生成部354f使用从同步挑选部154h输入的挑选出的同步后的图像数据、从场景变化判断部154e通过同步挑选部154h输入的场景变化判断结果以及从平均颜色条生成部154d输入的平均颜色条15A和15B的影像来生成如图49所示那样的概览画面30-1b。图49是本变形例3-1b的概览画面30-1b的一例。
如图49所示,在概览画面30-1b的概览图像显示区域31-1b上将根据从摄像机ID=1的被挑选出的图像数据#a1~#a50中挑选出的图像数据生成的缩小图像和根据与该摄像机ID=1的被挑选出的图像数据同步的摄像机ID=2的图像数据生成的缩小图像配对进行显示。
接着,使用附图详细说明本变形例3-1b的医疗系统的动作。其中,本变形例3-1b的胶囊型医疗装置100的动作和接收装置130的动作与上述实施方式1的动作(参照图6和图7)相同,因此在此省略详细的说明。图50是表示本变形例3-1b的显示装置350-1b的概要动作例的流程图。
本变形例3-1b的显示装置350-1b首先通过执行与图44的步骤S321~S326所示的动作相同的动作,来将图像数据划分为摄像机ID=1的图像数据和摄像机ID=2的图像数据(参照图50的步 骤S321~S326)。接着,场景变化判断部154e根据从图像数据输入部154a输入的图像数据中的前后的图像数据间的图像处理结果,来判断产生了场景变化的图像数据(步骤S328-1b)。此外,场景变化判断结果被输入到同步挑选部154h。
同步挑选部154h基于从场景变化判断部154e输入的场景变化判断结果来执行同步挑选处理(步骤S329-1b),该同步挑选处理进行摄像机ID=1的图像数据的挑选以及与挑选出的摄像机ID=1的图像数据同步的摄像机ID=2的图像数据的挑选。此外,同步挑选处理的详细内容与上述实施方式1的变形例1-2b的同步挑选处理(参照图19)相同,因此在此省略详细的说明。另外,挑选出的图像数据被分别输入到平均颜色条生成部154d和画面生成部354f。
被输入了挑选出的图像数据的平均颜色条生成部154d按摄像机ID选择图像数据并计算各图像数据(或者对各图像数据进行分割得到的每个分割区域)的平均颜色(步骤S330-1b),基于其计算结果生成将平均颜色的影像沿着图像数据的时间序列彼此连接而成的平均颜色条15A和15B(步骤S331-1b)。此外,所生成的平均颜色条15A和15B被输入到画面生成部354f。
画面生成部354f根据被输入的挑选出的图像数据和通过同步挑选部154h输入的场景变化判断结果,将每个摄像机ID的被挑选出的图像数据按场景进行划分(步骤S332-1b),按场景将摄像机ID=1的图像数据和摄像机ID=2的图像数据进行配对(步骤S333-1b)。接着,画面生成部354f根据按场景进行划分并配对的图像数据以及平均颜色条15A和15B的影像来生成图49所示的概览画面30-1b(步骤S334-1b),将其通过控制部151输出到显示部155(步骤S335-1b),结束该动作。
如上所述,在本变形例3-1b中,能够将不同的眼拍摄同一 位置得到的图像数据横向排列来进行一览显示,因此观察者能够从多个角度容易地观察被检体900内的部位。
此外,在本变形例3-1b中,为了便于说明,将挑选同步的图像数据时作为基准的图像数据设为摄像机ID=1的被挑选出的图像数据,但是本发明不限定于此,例如也能够以摄像机ID=2的被挑选出的图像数据为基准。在这种情况下,由画面生成部354f(步骤S334-1b)生成的概览画面30-1b如图51所示那样。
(变形例3-1c)
另外,不同的摄像机ID的图像数据间的配对例如也可以在如上述的实施方式1的变形例1-2c所例示那样的同步的图像数据之间进行。下面,将该情况作为本实施方式3的变形例3-1c,使用附图详细说明。
在本变形例3-1c中,能够应用与图48所示的显示装置350-1b相同的结构和与图50所示的显示装置350-1b的动作相同的动作。另外,本变形例3-1c的同步挑选部154h的动作、即图50的步骤S329-1b所示的同步挑选处理的流程能够应用与上述实施方式1的变形例1-2c所示的动作(参照图22)相同的动作。
通过如上述那样构成以及进行动作,在本变形例3-1c中,生成如图52所示那样的概览画面30-1c并显示。图52是本变形例3-1c的概览画面30-1c的一例。
如图52所示,在概览画面30-1c的概览图像显示区域31-1c上,对摄像机ID=1的被挑选出的图像数据和摄像机ID=2的被挑选出的图像数据取所谓的逻辑或(OR),对与其相匹配的各个图像数据的缩小图像进行配对显示。
如上所述,在本变形例3-1c中,能够将不同的眼拍摄同一位置得到的图像数据横向排列来进行一览显示,因此观察者能 够从多个角度容易地观察被检体900内的部位。
(变形例3-1d)
另外,不同的摄像机ID的图像数据间的配对例如也可以在如上述实施方式1的变形例1-2d所例示那样的同步的图像数据之间进行。下面,将该情况作为本实施方式3的变形例3-1d,使用附图详细说明。
在本变形例3-1d中,能够应用与图48所示的显示装置350-1b相同的结构和与图50所示的显示装置350-1b的动作相同的动作。另外,本变形例3-1d的同步挑选部154h的动作、即图50的步骤S329-1b所示的同步挑选处理的流程能够应用与上述实施方式1的变形例1-2d所示的动作(参照图22)相同的动作。
通过如上述那样构成以及进行动作,在本变形例3-1d中,生成如图53所示那样的概览画面30-1d并显示。图53是本变形例3-1d的概览画面30-1d的一例。
如图53所示,在概览画面30-1d的概览图像显示区域31-1d上,对摄像机ID=1的被挑选出的图像数据和摄像机ID=2的被挑选出的图像数据取所谓的逻辑与(AND),对与其相匹配的各个图像数据的缩小图像进行配对显示。
如上所述,在本变形例3-1d中,能够将不同的眼拍摄同一位置得到的图像数据横向排列来进行一览显示,因此观察者能够从多个角度容易地观察被检体900内的部位。
(变形例3-2)
另外,不同的摄像机ID的图像数据间的配对例如也可以是上述实施方式1的变形例1-8所例示那样的方法。在这种情况下,也可以如图54所示的本实施方式的变形例3-2的概览画面30-2的概览图像显示区域31-2所示那样,对设为起点的图像数据(在图54所示的例子中是图像数据#a1或#b1)的缩小图像对附加用 于对其进行强调显示的同步起点框32a。图54是表示本变形例3-2的同步前的概览画面30-2的一例的图。
此外,这种强调显示处理能够在图42的图像处理部354中的画面生成部354f中容易地实现,因此在此省略详细的说明。
(变形例3-3)
另外,也可以构成为如图55所示的本实施方式的变形例3-3的概览画面30-3所示那样,在被配对的不同的摄像机ID的图像数据的缩小图像中,将关注的一方的摄像机ID(本说明中设为摄像机ID=1)的图像数据的缩小图像与另一方的摄像机ID(本说明中设为摄像机ID=2)的图像数据的缩小图像相比进行放大显示。图55是表示本变形例3-3的同步前的概览画面30-3的一例的图。
观察者例如使用输入部156的鼠标等点击显示在概览画面30-3的概览图像显示区域31-3上的缩小图像中的关注侧的任一个缩小图像。例如,点击根据摄像机ID=1的图像数据生成的缩小图像(#a1~)中的任一个。由此,在概览图像显示区域31-3上,如图55所示那样将根据摄像机ID=1的图像数据(#a1、…)生成的缩小图像显示得比根据摄像机ID=2的图像数据(#b1、…)生成的缩小图像大。
此外,这种放大处理能够在图42的图像处理部354中的画面生成部354f中容易地实现,因此在此省略详细的说明。
(变形例3-4)
另外,优选对关注的一方的摄像机ID(本说明中设为摄像机ID=1)的图像数据的缩小图像进行放大时的大小能够如图56所示的本实施方式的变形例3-4的概览画面30-4的概览图像显示区域31-3所示那样由观察者使用输入部156的鼠标等任意地进行设定。图56是表示本变形例3-4的同步前的概览画面30-4的一例的图。
此外,这种放大处理能够在图42的图像处理部354中的画面生成部354f中容易地实现,因此在此省略详细的说明。
此外,在上述实施方式3及其变形例中,由画面生成部354f进行不同的摄像机ID的图像数据间的配对处理,但是将作为这些处理的结果而得到的图像数据群显示在显示部155上的方式并不限定于上述概览画面。
具体地说,也可以在显示部155的显示画面上设置按摄像单元而不同的显示区域,仅将由画面生成部354f进行了配对处理的图像数据群依次显示在与各个摄像单元对应的显示区域上。此外,将该显示画面称为顺序显示画面。
另外,显示装置350的控制部151也可以具备进行控制来在概览画面和顺序显示画面之间进行切换的功能。由此,能够使观察者仅确认由画面生成部354f进行了配对处理的图像数据群,其结果是能够使观察者容易且有效地观察被检体内。
<实施方式4>
另外,还能够与摄像单元无关地将图像数据的缩小图像沿时间序列显示在一个概览图像显示区域上。下面,将该情况作为本发明的实施方式4,使用附图详细说明。
本实施方式4的医疗系统能够设为与上述实施方式1的医疗系统1相同的结构。但是,在本实施方式4中,显示装置150被替换为图57所示的显示装置450。此外,在下面的说明中,对于与上述实施方式1、2、3或其变形例相同的结构附加相同的附图标记,并省略其重复说明。
图57是表示本实施方式4的显示装置450的概要结构例的框图。如图57所示,在显示装置450中,图4所示的图像处理部154被替换为图像处理部454。图像处理部454是在与上述的变形例1-2b的图像处理部150-2b相同的结构(参照图17)中将画面生成 部154f替换为画面生成部454f。
画面生成部454f使用从同步挑选部154h输出的被挑选出的图像数据以及从平均颜色条生成部154d输出的平均颜色条15A和15B的影像,生成如图58所示的概览画面40。图58是本实施方式4的概览画面40的一例。
如图58所示,在本实施方式4的概览画面40上嵌入有对挑选出的图像数据的缩小图像进行一览显示的概览图像显示区域41、针对摄像机ID=1的图像数据的时间刻度条13A和滑块14A及平均颜色条15A、针对摄像机ID=2的图像数据的时间刻度条13B和滑块14B及平均颜色条15B、表示当前显示在概览图像显示区域41上的场景是所有场景中的第几个场景的当前显示场景栏26、以及对显示在概览图像显示区域41上的场景进行切换的场景切换按钮27。
在概览图像显示区域41上将摄像机ID=1的被挑选出的图像数据的缩小图像和摄像机ID=2的被挑选出的图像数据的缩小图像沿时间序列排列来进行一览显示。在各缩小图像的附近(例如下侧)显示有影像(下面称为胶囊影像)21a/21b,该影像21a/21b用于可视地向观察者呈现各缩小图像是由胶囊型医疗装置100的哪个摄像单元(101A或101B)拍摄到的。
接着,使用附图详细说明本实施方式4的医疗系统的动作。其中,本实施方式4的胶囊型医疗装置100的动作和接收装置130的动作与上述实施方式1的动作(参照图6和图7)相同,因此在此省略详细的说明。图59是表示本实施方式4的显示装置450的概要动作例的流程图。
如图59所示那样,当以便携式记录介质140或通信线缆159为介质从接口部152输入图像数据时(步骤S421),本实施方式4的显示装置450通过控制部151事先将图像数据暂时存储到存储 部153等中(步骤S422)。
接着,显示装置450待机直到从输入部156等输入概览画面40的显示指示为止(步骤S423:“否”),在存在显示指示的情况下(步骤S423:“是”),显示装置450从存储部153等读取出事先存储的图像数据(步骤S424)。此外,读取出的图像数据被输入到图像处理部454中的图像数据输入部154a。
图像数据输入部154a对附加在被输入的图像数据中的摄像机ID分别进行确定(步骤S425),基于该摄像机ID,将图像数据按其摄像单元(101A/101B)、即按摄像机ID进行划分(步骤S426)。此外,划分后的图像数据被输入到场景变化判断部154e。
另外,场景变化判断部154e对于从图像数据输入部154a输入的图像数据,按摄像机ID,基于前后的图像数据间的图像处理结果来判断产生了场景变化的图像数据(步骤S428)。此外,场景变化判断结果被输入到同步挑选部154h。
同步挑选部154h根据从场景变化判断部154e输入的场景变化判断结果,执行使图像数据进行同步并挑选图像数据的同步挑选处理(步骤S429)。此外,本实施方式的同步挑选处理能够设为与上述实施方式1的变形例1-2a~1-2d所示的同步挑选处理(参照图18的步骤S130-2b和图19、图22或图24)相同。其中,在步骤S429中挑选出的图像数据被分别输入到平均颜色条生成部154d和画面生成部454f。
被输入了挑选出的图像数据的平均颜色条生成部154d按摄像机ID选择图像数据并计算各图像数据(或将图像数据进行分割得到的每个分割区域)的平均颜色(步骤S430),基于其计算结果生成将平均颜色的影像沿图像数据的时间序列彼此连接得到的平均颜色条15A和15B(步骤S431)。此外,所生成的平均颜色条15A和15B被输入到画面生成部454f。
被输入了平均颜色条15A和15B的影像以及挑选出的图像数据的画面生成部454f不区分摄像机ID=1的图像数据和摄像机ID=2的图像数据而将挑选出的图像数据沿时间序列排列(步骤S432),并且针对被输入的挑选出的每个图像数据,根据其摄像机ID来生成胶囊影像21a(步骤S433),接着,使用平均颜色条15A和15B的影像生成如图58所示的每个场景的概览画面40(步骤S434),将生成的该概览画面40输出到显示部155(步骤S435),之后,结束本动作。由此,在显示部155上显示作为GUI画面的概览画面40,向观察者提供使用了该GUI画面的GUI功能。
如上所述,在本实施方式4中,能够将不同的眼拍摄得到的图像数据横向排列来进行一览显示,因此观察者能够从多个角度容易地观察被检体900内的部位。
另外,上述实施方式只不过是用于实施本发明的例子,本发明并不限定于这些实施方式,根据设计等进行各种变形包含在本发明的范围内,并且根据上述记载,在本发明的范围内能够形成其它各种实施方式是不言自明的。例如平均颜色条15A和15B也可以根据得到的所有图像数据来生成。
附图标记说明
1:医疗系统;10A、10B:概览画面;11A、11B:概览图像显示区域;11a、11b:选择框;12A、12B:视图切换按钮;13A、13B:时间刻度条;14A、14B:滑块;15A、15B:平均颜色条;16A、16B、26:当前显示场景栏;17A、17B、27:场景切换按钮;19:指针;12a、12b:同步起点框;18A、18B:同步按钮;21a、21b:胶囊影像;32a:同步起点框;100:胶囊型医疗装置;101A:第一摄像单元;101B:第二摄像单元;101a:CCD阵列;101c:LED;102:处理单元;103:存储单元;104:发送接收单元;105:天线;106:电池;108:壳体; 108A、108B:罩;108a:容器;120、120a~120i:天线;121:线缆;122:夹克;130:接收装置;131:发送接收电路;132:信号处理电路;134:存储器;135:操作部;136:显示部;137:接口部;140:便携式记录介质;150、150-2a、150-2b、250、250-1、350、350-1a、350-1b、450:显示装置;151:控制部;152:接口部;153:存储部;154、154-2a、154-2b、254、254-1、354、354-1a、354-1b、454:图像处理部;154a:图像数据输入部;154c:图像挑选部;154d:平均颜色条生成部;154e:场景变化判断部;154f、254f、354f、454f:图像生成部;154g:同步部;154h:同步挑选部;155:显示部;156:输入部;159:通信线缆;254i:清晰度判断部;10A-1、10B-1、10A-2a、10B-2a、10A-2b、10B-2b、10A-2c、10B-2c、10A-2d、10B-2d、10A-3、10A-4、10-5、10-6、10-7、10A-8、10B-8、20、20-2、20-3、30、30-1a、30-1b、30-1c、30-1d、30-2、30-3、30-4、40:概览画面;11A-1、11B-1、11A-2、11A-2a、11B-2a、11A-2b、11B-2b、11A-2c、11B-2c、11A-2d、11B-2d、11A-3、11A-4、21、21-2、21-3、31、31-1a、31-1b、31-1c、31-1d、31-3、41:概览图像显示区域;Dr_A、Dr_B:照明/摄像方向;p1:特定部位。
Claims (13)
1.一种图像处理系统,其特征在于,包括被检体内导入装置和外部装置,
其中,上述被检体内导入装置具备:
两个摄像部件,其拍摄被检体内部来生成图像数据;
识别信息附加部件,其对上述图像数据附加用于识别生成了该图像数据的摄像部件的识别信息;以及
输出部件,其向外部输出附加有上述识别信息的图像数据,
上述外部装置具备:
输入部件,其输入上述图像数据;
挑选部件,其针对附加有一个识别信息的图像数据,为了使该附加有一个识别信息的图像数据与拍摄上述被检体内的同一特定部位的附加有另一个识别信息的图像数据同步,而在附加有上述一个识别信息的一系列的图像数据中,根据基于图像数据中的特征点计算出的前后的图像数据间的相似度来挑选图像数据作为显示对象,并且在附加有上述另一个识别信息的一系列的图像数据中,根据基于图像数据中的特征点计算出的前后的图像数据间的相似度来挑选图像数据作为显示对象;
同步部件,其针对由上述挑选部件挑选出的附加有上述一个识别信息的图像数据,使其与拍摄上述被检体内的同一特定部位的摄像时刻与附加有上述一个识别信息的图像数据的摄像时刻之差在规定时间以内的附加有上述另一个识别信息的图像数据同步;
一览显示部件,其按上述识别信息对由上述同步部件进行了同步的图像数据进行一览显示;以及
切换部件,其将由上述一览显示部件设为显示对象的图像数据从当前显示的附加有一个识别信息的图像数据切换为由上述同步部件进行了同步的附加有另一个识别信息的图像数据,
其中,在针对由上述同步部件确定的附加有上述一个识别信息的图像数据,没有从已挑选出的附加有上述另一个识别信息的一系列的图像数据中挑选出与该附加有上述一个识别信息的图像数据同步的附加有上述另一个识别信息的图像数据的情况下,上述挑选部件在未被挑选出的附加有上述另一个识别信息的一系列的图像数据中进一步挑选与该附加有上述一个识别信息的图像数据同步的图像数据作为显示对象。
2.一种图像处理系统,其特征在于,包括被检体内导入装置和外部装置,
其中,上述被检体内导入装置具备:
两个摄像部件,其拍摄被检体内部来生成图像数据;
识别信息附加部件,其对上述图像数据附加用于识别生成了该图像数据的摄像部件的识别信息;以及
输出部件,其向外部输出附加有上述识别信息的图像数据,
上述外部装置具备:
输入部件,其输入上述图像数据;
挑选部件,其针对附加有一个识别信息的图像数据,为了使该附加有一个识别信息的图像数据与拍摄上述被检体内的同一特定部位的附加有另一个识别信息的图像数据同步,而在附加有上述一个识别信息的一系列的图像数据中,根据基于图像数据中的特征点计算出的前后的图像数据间的相似度来挑选图像数据作为显示对象,并且在附加有上述另一个识别信息的一系列的图像数据中,根据基于图像数据中的特征点计算出的前后的图像数据间的相似度来挑选图像数据作为显示对象;
同步部件,其针对由上述挑选部件挑选出的附加有上述一个识别信息的图像数据,使其与拍摄上述被检体内的同一特定部位的摄像时刻与附加有上述一个识别信息的图像数据的摄像时刻之差在规定时间以内的附加有上述另一个识别信息的图像数据同步;
一览显示部件,其按上述识别信息对由上述同步部件进行了同步的图像数据进行一览显示;以及
切换部件,其将由上述一览显示部件设为显示对象的图像数据从当前显示的附加有一个识别信息的图像数据切换为由上述同步部件进行了同步的附加有另一个识别信息的图像数据,
其中,在针对附加有上述一个识别信息的图像数据没有挑选出与该附加有上述一个识别信息的图像数据同步的附加有上述另一个识别信息的图像数据的情况下,上述同步部件将该附加有上述一个识别信息的图像数据从设为显示对象的图像数据中排除。
3.一种图像处理系统,其特征在于,包括被检体内导入装置和外部装置,
其中,上述被检体内导入装置具备:
两个摄像部件,其拍摄被检体内部来生成图像数据;
识别信息附加部件,其对上述图像数据附加用于识别生成了该图像数据的摄像部件的识别信息;以及
输出部件,其向外部输出附加有上述识别信息的图像数据,
上述外部装置具备:
输入部件,其输入上述图像数据;
挑选部件,其针对附加有一个识别信息的图像数据,为了使该附加有一个识别信息的图像数据与拍摄上述被检体内的同一特定部位的附加有另一个识别信息的图像数据同步,而在附加有上述一个识别信息的一系列的图像数据中,根据基于图像数据中的特征点计算出的前后的图像数据间的相似度来挑选图像数据作为显示对象,并且在附加有上述另一个识别信息的一系列的图像数据中,根据基于图像数据中的特征点计算出的前后的图像数据间的相似度来挑选图像数据作为显示对象;
同步部件,其针对由上述挑选部件挑选出的附加有上述一个识别信息的图像数据,使其与拍摄上述被检体内的同一特定部位的摄像时刻与附加有上述一个识别信息的图像数据的摄像时刻之差在规定时间以内的附加有上述另一个识别信息的图像数据同步;
判断部件,其根据附加有上述一个识别信息的图像数据中所拍摄的特定的图案或者各区域的边缘,来判断清晰度;
一览显示部件,其按上述识别信息对由上述同步部件进行了同步的图像数据进行一览显示;以及
切换部件,其将由上述一览显示部件设为显示对象的图像数据从当前显示的附加有一个识别信息的图像数据切换为由上述同步部件进行了同步的附加有另一个识别信息的图像数据,
其中,上述切换部件能够对进行一览显示的多个图像数据个别地进行切换,在由上述判断部件判断为附加有上述一个识别信息的图像数据不清晰的情况下,将该图像数据切换为与该图像数据同步的附加有上述另一个识别信息的图像数据。
4.根据权利要求1~3中的任一项所述的图像处理系统,其特征在于,
上述被检体内导入装置还具备摄像时刻附加部件,该摄像时刻附加部件对附加有识别信息的各图像数据附加摄像时刻,
上述同步部件通过将附加于上述图像数据中的附加有一个识别信息的图像数据的摄像时刻与规定时间进行相加或者相减来使附加有上述一个识别信息的图像数据和附加有上述另一个识别信息的图像数据同步。
5.根据权利要求1~3中的任一项所述的图像处理系统,其特征在于,
上述一览显示部件在不同的画面上显示第一一览显示区域和第二一览显示区域,其中,在该第一一览显示区域中对附加有上述一个识别信息的图像数据进行一览显示,在该第二一览显示区域中对附加有上述另一个识别信息的图像数据进行一览显示。
6.根据权利要求1~3中的任一项所述的图像处理系统,其特征在于,
针对附加有上述一个识别信息的图像数据,在与该附加有上述一个识别信息的图像数据同步的附加有上述另一个识别信息的图像数据未被上述挑选部件挑选为显示对象的情况下,上述同步部件生成与该附加有上述一个识别信息的图像数据同步的附加有上述另一个识别信息的空的图像数据。
7.根据权利要求1~3中的任一项所述的图像处理系统,其特征在于,
上述外部装置还具备起点图像选择部件,该起点图像选择部件选择设为上述同步的起点的图像数据,
上述同步部件以由上述起点图像选择部件选择出的图像数据为起点,来使附加有上述一个识别信息的图像数据与附加有上述另一个识别信息的图像数据同步。
8.根据权利要求3所述的图像处理系统,其特征在于,
上述一览显示部件将用于视觉识别获取到进行上述一览显示的各个图像数据的摄像部件的影像显示在各图像数据的附近。
9.根据权利要求1~3中的任一项所述的图像处理系统,其特征在于,
上述外部装置还具备:
旋转指示输入部件,其输入正在进行上述一览显示的图像数据的旋转指示;以及
旋转校正部件,其对被输入了上述旋转指示的图像数据进行旋转校正,
其中,上述一览显示部件将旋转校正后的上述图像数据包含在上述一览显示中进行显示。
10.根据权利要求1~3中的任一项所述的图像处理系统,其特征在于,
上述一览显示部件显示包含有一览显示区域的画面,在该一览显示区域中对附加有识别信息的图像数据进行一览显示,将该一览显示区域一次显示不完的图像数据显示在下一页的一览显示区域上。
11.根据权利要求1~3中的任一项所述的图像处理系统,其特征在于,
上述一览显示部件对图像数据的缩小图像进行一览显示。
12.一种外部装置,其特征在于,具备:
输入部件,其从被检体内导入装置输入图像数据,该被检体内导入装置具备两个摄像部件和识别信息附加部件,上述两个摄像部件拍摄被检体内部来生成上述图像数据,上述识别信息附加部件对上述图像数据附加用于识别生成了该图像数据的摄像部件的识别信息;
挑选部件,其针对附加有一个识别信息的图像数据,为了使该附加有一个识别信息的图像数据与拍摄上述被检体内的同一特定部位的附加有另一个识别信息的图像数据同步,而在附加有上述一个识别信息的一系列的图像数据中,根据基于图像数据中的特征点计算出的前后的图像数据间的相似度来挑选图像数据作为显示对象,并且在附加有上述另一个识别信息的一系列的图像数据中,根据基于图像数据中的特征点计算出的前后的图像数据间的相似度来挑选图像数据作为显示对象;
同步部件,其针对由上述挑选部件挑选出的附加有上述一个识别信息的图像数据,使其与拍摄上述被检体内的同一特定部位的摄像时刻与附加有上述一个识别信息的图像数据的摄像时刻之差在规定时间以内的附加有上述另一个识别信息的图像数据同步;
一览显示部件,其按上述识别信息对由上述同步部件进行了同步的图像数据进行一览显示;以及
切换部件,其将由上述一览显示部件设为显示对象的图像数据从当前显示的附加有一个识别信息的图像数据切换为附加有另一个识别信息的图像数据,
其中,在针对由上述同步部件确定的附加有上述一个识别信息的图像数据,没有从已挑选出的附加有上述另一个识别信息的一系列的图像数据中挑选出与该附加有上述一个识别信息的图像数据同步的附加有上述另一个识别信息的图像数据的情况下,上述挑选部件在未被挑选出的附加有上述另一个识别信息的一系列的图像数据中进一步挑选与该附加有上述一个识别信息的图像数据同步的图像数据作为显示对象。
13.一种图像处理方法,其特征在于,包括以下步骤:
输入步骤,从被检体内导入装置输入图像数据,该被检体内导入装置具备两个摄像部件和识别信息附加部件,上述两个摄像部件拍摄被检体内部来生成上述图像数据,上述识别信息附加部件对上述图像数据附加用于识别生成了该图像数据的摄像部件的识别信息;
挑选步骤,针对附加有一个识别信息的图像数据,为了使该附加有一个识别信息的图像数据与拍摄上述被检体内的同一特定部位的附加有另一个识别信息的图像数据同步,而在附加有上述一个识别信息的一系列的图像数据中,根据基于图像数据中的特征点计算出的前后的图像数据间的相似度来挑选图像数据作为显示对象,并且在附加有上述另一个识别信息的一系列的图像数据中,根据基于图像数据中的特征点计算出的前后的图像数据间的相似度来挑选图像数据作为显示对象;
同步步骤,针对通过上述挑选步骤挑选出的附加有上述一个识别信息的图像数据,使其与拍摄上述被检体内的同一特定部位的摄像时刻与附加有上述一个识别信息的图像数据的摄像时刻之差在规定时间以内的附加有上述另一个识别信息的图像数据同步;
一览显示步骤,按上述识别信息对进行了同步的上述图像数据进行一览显示;以及
切换步骤,其将在上述一览显示步骤中设为显示对象的图像数据从当前显示的附加有一个识别信息的图像数据切换为附加有另一个识别信息的图像数据,
其中,在上述挑选步骤中,在针对通过上述同步步骤确定的附加有上述一个识别信息的图像数据,没有从已挑选出的附加有上述另一个识别信息的一系列的图像数据中挑选出与该附加有上述一个识别信息的图像数据同步的附加有上述另一个识别信息的图像数据的情况下,在未被挑选出的附加有上述另一个识别信息的一系列的图像数据中进一步挑选与该附加有上述一个识别信息的图像数据同步的图像数据作为显示对象。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009070939 | 2009-03-23 | ||
JP2009-070939 | 2009-03-23 | ||
PCT/JP2009/070188 WO2010109726A1 (ja) | 2009-03-23 | 2009-12-01 | 画像処理システム、外部装置およびその画像処理方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN102361585A CN102361585A (zh) | 2012-02-22 |
CN102361585B true CN102361585B (zh) | 2014-06-25 |
Family
ID=42780428
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN200980158331.5A Active CN102361585B (zh) | 2009-03-23 | 2009-12-01 | 图像处理系统、外部装置以及图像处理系统的图像处理方法 |
Country Status (5)
Country | Link |
---|---|
US (1) | US8328712B2 (zh) |
EP (1) | EP2412299B1 (zh) |
JP (1) | JP4865912B2 (zh) |
CN (1) | CN102361585B (zh) |
WO (1) | WO2010109726A1 (zh) |
Families Citing this family (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5460488B2 (ja) * | 2010-06-29 | 2014-04-02 | 富士フイルム株式会社 | 電子内視鏡システム、電子内視鏡用のプロセッサ装置、画像検索システム、及び電子内視鏡システムの作動方法 |
KR101136009B1 (ko) * | 2010-10-27 | 2012-04-17 | 아이쓰리시스템 주식회사 | 캡슐내시경용 이미지센서의 영상데이터 제어시스템 |
WO2012132840A1 (ja) | 2011-03-30 | 2012-10-04 | オリンパスメディカルシステムズ株式会社 | 画像管理装置、方法、及びプログラム、並びにカプセル型内視鏡システム |
WO2013111684A1 (ja) * | 2012-01-26 | 2013-08-01 | オリンパスメディカルシステムズ株式会社 | 医療情報記録装置 |
KR101702885B1 (ko) * | 2012-05-02 | 2017-02-06 | 한화테크윈 주식회사 | 시간 동기화 장치 및 방법 |
JP5568196B1 (ja) * | 2012-10-18 | 2014-08-06 | オリンパスメディカルシステムズ株式会社 | 画像処理装置及び画像処理方法 |
JP5690450B2 (ja) * | 2012-12-26 | 2015-03-25 | オリンパスメディカルシステムズ株式会社 | 画像記録装置 |
EP3005934A4 (en) * | 2013-05-31 | 2017-03-15 | Olympus Corporation | Medical device |
JP6335007B2 (ja) * | 2014-04-18 | 2018-05-30 | オリンパス株式会社 | カプセル内視鏡システム、カプセル内視鏡、受信装置、カプセル内視鏡の作動方法、及びプログラム |
JP6249867B2 (ja) * | 2014-04-18 | 2017-12-20 | オリンパス株式会社 | カプセル内視鏡システム、カプセル内視鏡、受信装置、カプセル内視鏡の撮像制御方法、及びプログラム |
CN106231985B (zh) * | 2014-12-02 | 2018-01-23 | 奥林巴斯株式会社 | 图像处理装置、图像处理装置的工作方法 |
JP6072400B1 (ja) | 2015-07-28 | 2017-02-01 | オリンパス株式会社 | 画像処理装置、画像処理方法及び画像処理プログラム |
CN107391905B (zh) * | 2017-06-16 | 2019-12-31 | 深圳市德力凯医疗设备股份有限公司 | 一种彩超与超声经颅多普勒报告生成方法及装置 |
JP6834001B2 (ja) | 2017-07-03 | 2021-02-24 | 富士フイルム株式会社 | 医療画像処理装置、診断支援装置、医療業務支援装置、及び、レポート作成支援装置 |
JP6889282B2 (ja) * | 2017-12-22 | 2021-06-18 | 富士フイルム株式会社 | 医療画像処理装置及び方法、内視鏡システム、プロセッサ装置、診断支援装置並びにプログラム |
CN113288007B (zh) * | 2019-12-06 | 2022-08-09 | 腾讯科技(深圳)有限公司 | 内窥镜移动时间确定方法、装置和计算机设备 |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101246517A (zh) * | 2007-02-16 | 2008-08-20 | 东芝医疗系统株式会社 | 图像诊断支持装置 |
Family Cites Families (31)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH102014A (ja) | 1996-06-13 | 1998-01-06 | Misawa Homes Co Ltd | ユニット式建物の玄関構造およびその形成方法 |
JP3898781B2 (ja) | 1996-07-01 | 2007-03-28 | オリンパス株式会社 | 内視鏡 |
US6939292B2 (en) | 2001-06-20 | 2005-09-06 | Olympus Corporation | Capsule type endoscope |
JP4166509B2 (ja) | 2001-06-20 | 2008-10-15 | オリンパス株式会社 | カプセル式内視鏡 |
US6951536B2 (en) * | 2001-07-30 | 2005-10-04 | Olympus Corporation | Capsule-type medical device and medical system |
DE10323216B3 (de) * | 2003-05-22 | 2004-12-23 | Siemens Ag | Endoskopieeinrichtung |
DE10327034A1 (de) * | 2003-06-16 | 2005-01-20 | Siemens Ag | Vorrichtung zur Untersuchung im Körper mit Licht |
EP1699530B1 (en) * | 2003-12-31 | 2012-07-04 | Given Imaging Ltd. | System and method for displaying an image stream |
US7486981B2 (en) * | 2004-11-15 | 2009-02-03 | Given Imaging Ltd. | System and method for displaying an image stream |
US8310530B2 (en) * | 2006-05-19 | 2012-11-13 | Avantis Medical Systems, Inc. | Device and method for reducing effects of video artifacts |
US20060217593A1 (en) * | 2005-03-24 | 2006-09-28 | Zvika Gilad | Device, system and method of panoramic multiple field of view imaging |
JP4695432B2 (ja) | 2005-04-12 | 2011-06-08 | オリンパスメディカルシステムズ株式会社 | 被検体内導入装置、被検体内情報表示装置、及び被検体内情報取得システム |
JP4709578B2 (ja) | 2005-04-25 | 2011-06-22 | オリンパスメディカルシステムズ株式会社 | 画像表示装置 |
JP4594835B2 (ja) | 2005-09-09 | 2010-12-08 | オリンパスメディカルシステムズ株式会社 | 画像表示装置 |
JP4914600B2 (ja) * | 2005-11-10 | 2012-04-11 | オリンパスメディカルシステムズ株式会社 | 生体内画像取得装置、受信装置および生体内情報取得システム |
JP4891646B2 (ja) * | 2006-04-14 | 2012-03-07 | オリンパスメディカルシステムズ株式会社 | 画像表示装置 |
JP4868965B2 (ja) * | 2006-07-18 | 2012-02-01 | オリンパスメディカルシステムズ株式会社 | 画像表示装置 |
AU2007239598B2 (en) * | 2006-04-14 | 2010-09-16 | Olympus Medical Systems Corp. | Image display apparatus |
US8900124B2 (en) * | 2006-08-03 | 2014-12-02 | Olympus Medical Systems Corp. | Image display device |
JP5019589B2 (ja) * | 2007-03-28 | 2012-09-05 | 富士フイルム株式会社 | カプセル内視鏡、およびカプセル内視鏡システム、並びにカプセル内視鏡の作動方法 |
JP5000356B2 (ja) | 2007-03-30 | 2012-08-15 | オリンパスメディカルシステムズ株式会社 | カプセル型医療装置 |
JP5265139B2 (ja) * | 2007-06-13 | 2013-08-14 | オリンパスメディカルシステムズ株式会社 | 体内画像取得システム |
JP5147308B2 (ja) * | 2007-06-20 | 2013-02-20 | オリンパス株式会社 | 画像抽出装置および画像抽出プログラム |
JP5403880B2 (ja) | 2007-06-27 | 2014-01-29 | オリンパスメディカルシステムズ株式会社 | 画像情報の表示処理装置 |
CN101686799B (zh) | 2007-07-12 | 2012-08-22 | 奥林巴斯医疗株式会社 | 图像处理装置以及图像处理装置的动作方法 |
JP5203648B2 (ja) | 2007-07-20 | 2013-06-05 | オリンパス株式会社 | 画像抽出装置および画像抽出プログラム |
JP4918438B2 (ja) * | 2007-08-31 | 2012-04-18 | オリンパスメディカルシステムズ株式会社 | 被検体内情報取得システム |
JP4914790B2 (ja) * | 2007-09-04 | 2012-04-11 | オリンパスメディカルシステムズ株式会社 | 被検体内導入装置、及び被検体内導入装置の作製方法 |
JP4789961B2 (ja) * | 2008-02-08 | 2011-10-12 | オリンパス株式会社 | 画像表示装置 |
US8241206B2 (en) * | 2008-07-08 | 2012-08-14 | Olympus Medical Systems Corp. | System for guiding capsule medical device |
US20110122146A1 (en) * | 2009-11-25 | 2011-05-26 | Fujifilm Corporation | Systems and methods for matching medical images |
-
2009
- 2009-12-01 CN CN200980158331.5A patent/CN102361585B/zh active Active
- 2009-12-01 EP EP09842336.1A patent/EP2412299B1/en not_active Not-in-force
- 2009-12-01 JP JP2010533783A patent/JP4865912B2/ja not_active Expired - Fee Related
- 2009-12-01 WO PCT/JP2009/070188 patent/WO2010109726A1/ja active Application Filing
-
2010
- 2010-09-21 US US12/886,856 patent/US8328712B2/en active Active
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101246517A (zh) * | 2007-02-16 | 2008-08-20 | 东芝医疗系统株式会社 | 图像诊断支持装置 |
Non-Patent Citations (3)
Title |
---|
JP特开2008-173490A 2008.07.31 |
JP特开2008-6301A 2008.01.17 |
JP特开2009-5866A 2009.01.15 |
Also Published As
Publication number | Publication date |
---|---|
WO2010109726A1 (ja) | 2010-09-30 |
US20110218397A1 (en) | 2011-09-08 |
JP4865912B2 (ja) | 2012-02-01 |
EP2412299A1 (en) | 2012-02-01 |
US8328712B2 (en) | 2012-12-11 |
EP2412299A4 (en) | 2014-06-25 |
EP2412299B1 (en) | 2017-02-01 |
JPWO2010109726A1 (ja) | 2012-09-27 |
CN102361585A (zh) | 2012-02-22 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN102361585B (zh) | 图像处理系统、外部装置以及图像处理系统的图像处理方法 | |
CN102256533B (zh) | 图像显示装置、解读辅助系统以及解读辅助方法 | |
CN100431475C (zh) | 图像显示装置、图像显示方法以及图像显示程序 | |
EP1857042B1 (en) | Image display apparatus and image display method | |
CN100486514C (zh) | 图像显示装置和图像显示方法 | |
CN101778592B (zh) | 体内观察系统 | |
CN101530326B (zh) | 胶囊引导系统 | |
CN102256532B (zh) | 胶囊型医疗装置用引导系统 | |
CN102753078B (zh) | 图像显示装置以及胶囊型内窥镜系统 | |
CN105491936A (zh) | 胶囊型内窥镜系统 | |
CN102843950A (zh) | 图像显示装置以及胶囊型内窥镜系统 | |
CN105283114B (zh) | 胶囊型内窥镜系统 | |
US9392230B2 (en) | Endoscopic apparatus and measuring method | |
CN101252874B (zh) | 移动式简易图像显示装置和接收系统 | |
JPWO2016092941A1 (ja) | カプセル内視鏡システム及びその撮像方法 | |
Király et al. | Stereoscopic vision system | |
CN201822837U (zh) | 无线视频影像鼻腔检查镜 | |
JP2016220839A (ja) | 内視鏡システム及び内視鏡システムにおける内視鏡画像の表示切替方法 | |
AU2007221810B2 (en) | Image display unit, image display method and image display program |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
C41 | Transfer of patent application or patent right or utility model | ||
TR01 | Transfer of patent right |
Effective date of registration: 20151127 Address after: Tokyo, Japan, Japan Patentee after: Olympus Corporation Address before: Tokyo, Japan, Japan Patentee before: Olympus Medical Systems Corp. |