CN103512492A - 内窥镜装置以及测量方法 - Google Patents
内窥镜装置以及测量方法 Download PDFInfo
- Publication number
- CN103512492A CN103512492A CN201210428863.XA CN201210428863A CN103512492A CN 103512492 A CN103512492 A CN 103512492A CN 201210428863 A CN201210428863 A CN 201210428863A CN 103512492 A CN103512492 A CN 103512492A
- Authority
- CN
- China
- Prior art keywords
- image
- mentioned
- shot object
- images
- processing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
- A61B1/00009—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00043—Operational features of endoscopes provided with output arrangements
- A61B1/00045—Display arrangement
- A61B1/0005—Display arrangement combining images e.g. side-by-side, superimposed or tiled
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00064—Constructional details of the endoscope body
- A61B1/00071—Insertion part of the endoscope body
- A61B1/0008—Insertion part of the endoscope body characterised by distal tip features
- A61B1/00096—Optical elements
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00163—Optical arrangements
- A61B1/00193—Optical arrangements adapted for stereoscopic vision
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
- G01B11/00—Measuring arrangements characterised by the use of optical techniques
- G01B11/24—Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures
- G01B11/245—Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures using a plurality of fixed, simultaneously operating transducers
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/60—Analysis of geometric attributes
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10068—Endoscopic image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20092—Interactive image processing based on input by user
- G06T2207/20101—Interactive definition of point of interest, landmark or seed
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30108—Industrial image inspection
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
- H04N7/183—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source
- H04N7/185—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source from a mobile camera, e.g. for remote control
Landscapes
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Surgery (AREA)
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Molecular Biology (AREA)
- General Health & Medical Sciences (AREA)
- Optics & Photonics (AREA)
- Pathology (AREA)
- Radiology & Medical Imaging (AREA)
- Biophysics (AREA)
- Biomedical Technology (AREA)
- Heart & Thoracic Surgery (AREA)
- Medical Informatics (AREA)
- Veterinary Medicine (AREA)
- Animal Behavior & Ethology (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Public Health (AREA)
- General Physics & Mathematics (AREA)
- Signal Processing (AREA)
- Geometry (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Endoscopes (AREA)
- Instruments For Viewing The Inside Of Hollow Bodies (AREA)
- Closed-Circuit Television Systems (AREA)
- Studio Devices (AREA)
Abstract
提供一种能够保持图像的视觉辨认性、且使用户容易地确认测量结果的准确性的内窥镜装置以及测量方法。图像生成部(30)生成包含一个以上的被摄体像的图像。显示部(33)显示图像。控制部(43)执行:第一处理,使包含一个被摄体像的运动图像显示在显示部(33)上;第二处理,在第一处理之后使测量中使用的所有的多个被摄体像、或者基于测量中使用的一个被摄体像的所有的多个图像作为静止图像显示在显示部(33)上;以及第三处理,在第二处理之后根据用户的指示指定测量点,根据基于所有的多个被摄体像的图像、或者基于一个被摄体像的所有的多个图像测量所指定的测量点处的被摄体的大小。
Description
技术领域
本发明涉及一种具有测量功能的内窥镜装置以及测量方法。
背景技术
在锅炉、涡轮机、发动机、化学设备等的检查中为了观察内部的损伤、腐蚀而广泛使用了工业用内窥镜。在工业用内窥镜中为了能够观察及检查多种观察物而准备了多个种类的光学适配器,使得能够更换内窥镜的前端部分。
作为上述的光学适配器之一,存在具有用于形成与不同的视点相对应的左右两个被摄体像的两个光学系统的立体测量用光学适配器。在日本特开2005-348870号公报中记载有如下的内窥镜装置:使用立体测量用光学适配器,通过利用了三角测量原理的立体测量来实现了三维测量。
在日本特开2005-348870号公报的内窥镜装置中显示了包含通过两个光学系统形成的、具有视差的左右的被摄体像的图像。因此,由于用户在左右的被摄体像之间频繁地移动视线,导致视觉辨认性下降,用户觉得麻烦。
在日本特开2009-198787号公报、日本特开2010-128354号公报中记载有如下的内窥镜装置:为了防止由于显示包含测量中使用的多个被摄体像的图像所导致的视觉辨认性的下降,而显示只包含多个被摄体像中的一部分的图像。更具体地说,在日本特开2009-198787号公报中,从同时拍摄通过两个光学系统形成的两个被摄体像所得到的图像中抽取只包含一个被摄体像的图像并放大显示该图像,在该状态下进行测量。在日本特开2010-128354号公报中,按时间序列拍摄通过两个光学系统形成的两个被摄体像并显示只包含一个被摄体像的图像,在该状态下进行测量。
在如上述那样显示只包含多个被摄体像中的一部分的图像的情况下,视觉辨认性不会下降。但是,由于只显示测量中使用的图像的一部分,因此,测量中使用的剩余的图像在没有被用户确认的状态下直接用于测量。若在测量中使用例如没有捕捉到测量对象的部位的图像、明亮度不恰当的图像则测量精度下降,因此用户在测量前确认测量中使用的包含各个被摄体像的图像是重要的。但是,在日本特开2009-198787号公报、日本特开2010-128354号公报中,由于测量中使用的图像的一部分在没有被用户确认的状态下直接用于测量,因此测量结果的准确性(可靠性)下降。
在日本专利第4409625号公报中记载有能够由用户确认测量结果的准确性的内窥镜装置。在日本专利第4409625号公报中,当启动测量功能时,显示只包含通过两个光学系统形成的两个被摄体像中的一个被摄体像的图像(日本专利第4409625号公报的图7)。当在显示有该图像的状态下通过用户输入表示图像上的测量位置的测量点时进行测量(日本专利第4409625号公报的图10的ST115中的图像的匹配度的计算)。在测量结果的准确性低的情况下,切换所显示的图像而显示包含两个被摄体像的图像(日本专利第4409625号公报的图12)。这样,在测量结果的准确性低的情况下,自动地显示包含两个被摄体像的图像,因此用户能够一边比较两个被摄体像一边确认测量结果的准确性。
另外,在日本专利第4409625号公报中,在如上述那样进行测量而显示测量结果(日本专利第4409625号公报中的图像的匹配度)之后,还能够通过由用户输入所显示的图像的切换的指示来在只包含通过两个光学系统形成的两个被摄体像中的一个被摄体像的图像和包含两个被摄体像的图像之间进行切换(日本专利第4409625号公报的段落0081、0082)。这样,用户能够以自己的意思来切换要显示的图像,因此当用户对测量结果感到不安时能够切换所显示的图像来一边确认图像一边确认测量结果的准确性。
如上述那样在日本专利第4409625号公报中,在测量结果的准确性低的情况下自动地切换所显示的图像来显示包含两个被摄体像的图像。因此,用户能够一边比较两个被摄体像一边确认测量结果的准确性。但是,不一定在用户想要确认图像的时刻图像被切换,因此用户有时对测量结果的准确性感到不安。
对此,如上述那样在日本专利第4409625号公报中,用户能够以自己的意思来切换图像,因此当用户对测量结果感到不安时,还能够切换所显示的图像来一边确认图像一边确认测量结果的准确性。但是,考虑到根据用户的技能而进行或不进行图像的确认的情况。另外,确认图像的时刻是在暂时指定测量点来进行了测量之后。根据上述,有可能用户没有确认测量中使用的所有图像是否适于测量、或用户判断为图像不适于测量的时刻滞后。因而,测量结果的准确性、检查效率下降。
发明内容
本发明是鉴于上述的问题而作出的,其目的在于提供一种能够保持图像的视觉辨认性、且使用户容易地确认测量结果的准确性的内窥镜装置以及测量方法。
根据本发明的第一方式,是一种内窥镜装置,具备:图像生成部,其生成包含一个以上的被摄体像的图像;显示部,其显示上述图像;以及控制部,其控制基于上述图像进行的被摄体的大小的测量,其中,上述控制部执行以下处理:第一处理,使包含一个被摄体像的运动图像显示在上述显示部上;第二处理,在上述第一处理之后使测量中使用的所有的多个被摄体像、或者基于测量中使用的一个被摄体像的所有的多个图像作为静止图像显示在上述显示部上;以及第三处理,在上述第二处理之后根据用户的指示指定测量点,并根据基于所有的上述多个被摄体像的图像、或者基于上述测量中使用的一个被摄体像的所有的多个图像,测量所指定的测量点处的被摄体的大小。
另外,根据本发明的第二方式,在上述内窥镜装置中,上述控制部在上述第二处理中使测量中使用的所有的多个被摄体像、或者基于测量中使用的一个被摄体像的所有的多个图像分别按时间序列作为静止图像显示在上述显示部上。
另外,根据本发明的第三方式,在上述内窥镜装置中,上述控制部在上述第二处理中使测量中使用的所有的多个被摄体像、或者基于测量中使用的一个被摄体像的所有的多个图像作为静止图像同时显示在上述显示部上。
另外,根据本发明的第四方式,在上述内窥镜装置中,上述控制部在上述第二处理中使测量中使用的所有的多个被摄体像分别按时间序列作为静止图像显示在上述显示部上,之后使测量中使用的所有的多个被摄体像作为静止图像同时显示在上述显示部上,或者,使基于测量中使用的一个被摄体像的所有的多个图像分别按时间序列作为静止图像显示在上述显示部上,之后使基于测量中使用的一个被摄体像的所有的多个图像作为静止图像同时显示在上述显示部上。
另外,根据本发明的第五方式,在上述内窥镜装置中,上述控制部在上述第二处理中使对测量中使用的所有的多个被摄体像、或者基于测量中使用的一个被摄体像的所有的多个图像实施图像处理后的图像作为静止图像显示在上述显示部上。
另外,根据本发明的第六方式,上述内窥镜装置能够切换是否进行上述图像处理。
另外,根据本发明的第七方式,一种测量方法,包括:第一步骤,使包含由内窥镜装置拍摄到的一个被摄体像的运动图像显示在显示部上;第二步骤,在上述第一步骤之后使测量中使用的所有的多个被摄体像、或者基于测量中使用的一个被摄体像的所有的多个图像作为静止图像显示在上述显示部上;以及第三步骤,在上述第二步骤之后根据用户的指示指定测量点,并根据基于所有的上述多个被摄体像的图像、或者基于上述测量中使用的一个被摄体像的所有的多个图像,测量所指定的测量点处的被摄体的大小。
根据上述内窥镜装置以及测量方法,显示包含一个被摄体像的运动图像,因此在被摄体的观察时能够保持图像的视觉辨认性。另外,根据上述内窥镜装置以及测量方法,测量中使用的多个被摄体像的全部、或者基于测量中使用的一个被摄体像的多个图像的全部作为静止图像而显示,因此能够使用户容易地确认测量结果的准确性。
附图说明
图1是本发明的第一实施方式的内窥镜装置的立体图。
图2是表示本发明的第一实施方式的内窥镜装置的结构的框图。
图3是表示本发明的第一实施方式的内窥镜装置的功能结构的框图。
图4是表示本发明的第一实施方式的内窥镜装置的动作的过程的流程图。
图5是表示本发明的第一实施方式的内窥镜装置的动作的过程的流程图。
图6A是表示本发明的第一实施方式中的图像的参考图。
图6B是表示本发明的第一实施方式中的图像的参考图。
图6C是表示本发明的第一实施方式中的图像的参考图。
图6D是表示本发明的第一实施方式中的图像的参考图。
图6E是表示本发明的第一实施方式中的图像的参考图。
图7是表示本发明的第一实施方式的内窥镜装置的动作的过程的流程图。
图8是表示本发明的第一实施方式中的图像的参考图。
图9是表示安装在本发明的第二实施方式的内窥镜装置的内窥镜插入部的前端的光学适配器的结构的框图。
图10是表示本发明的第二实施方式的内窥镜装置的动作的过程的流程图。
图11是表示本发明的第二实施方式的内窥镜装置的动作的过程的流程图。
图12A是表示本发明的第二实施方式中的图像的参考图。
图12B是表示本发明的第二实施方式中的图像的参考图。
图12C是表示本发明的第二实施方式中的图像的参考图。
图12D是表示本发明的第二实施方式中的图像的参考图。
图13是表示本发明的第二实施方式的内窥镜装置的动作的过程的流程图。
图14是表示本发明的第二实施方式中的图像的参考图。
图15是表示本发明的第三实施方式的内窥镜装置的动作的过程的流程图。
图16是表示本发明的第三实施方式中的图像确认时的画面的参考图。
具体实施方式
以下参照附图来说明本发明的实施方式。
(第一实施方式)
首先,说明本发明的第一实施方式。图1表示本实施方式的内窥镜装置的外观。图2表示本实施方式的内窥镜装置的功能结构。图3表示本实施方式的内窥镜装置所具备的控制单元的功能结构。
本实施方式的内窥镜装置1为了拍摄作为检查对象的被摄体即被检体并使用该图像来进行测量,通过更换内窥镜插入部前端的光学适配器、或适当选择内置的测量用程序、或适当追加测量用程序来能够进行各种观察、测量。下面,作为测量的一个例子,说明进行立体测量的情况。
如图1和图2所示,内窥镜装置1包括立体测量用光学适配器2、内窥镜插入部3、内窥镜单元7、CCU9(照相机控制单元)、液晶监视器6(显示部)、遥控器5以及控制单元4。立体测量用光学适配器2具有将物镜2A、2B配置在大致圆筒状的适配器主体2a内的结构,该物镜2A、2B为了获取具有视差的图像而相互分开规定距离而配置,该立体测量用光学适配器2例如通过形成有内螺纹等的安装部2b能够装卸地安装在内窥镜插入部3的前端。
物镜2A、2B的位置在直视类型和侧视类型中不同,该直视类型为在立体测量用光学适配器2的轴向上具有视场,该侧视类型为在立体测量用光学适配器2的侧面方向上具有视场,在本实施方式中图示为直视类型。因此,物镜2A、2B在使光轴朝向立体测量用光学适配器2的轴向的状态下配置于设置在前端面的开口部的附近。另外,在立体测量用光学适配器2的前端面设置有朝向被检体射出被引导至适配器主体2a内的照明光的照明窗2c。
内窥镜插入部3在插入到被检体的内部的状态下拍摄测量对象的部位,并将摄像信号输出到控制单元4。在能够弯曲的内窥镜插入部3的前端部设置有在立体测量用光学适配器2等的多个光学适配器中共用的安装部,该内窥镜插入部3的前端部构成为能够更换地安装各光学适配器。虽然没有特别图示,但是在前端部的内部配置有拍摄通过光学适配器的多个物镜所成像的像的例如CCD等的摄像元件,并且设置有向被检体照射照明光的光导件。
内窥镜插入部3的前端部至基端部形成为能够弯曲的细长的管状。在内窥镜插入部3的内部配置有摄像元件的信号线、光导件主体以及用于操作前端部的弯曲的线机构等(均未图示)。在内窥镜插入部3中安装了立体测量用光学适配器2的情况下,通过摄像元件同时获取具有视差的一对图像(以下称为视差图像),并通过内窥镜插入部3内部的信号线将摄像信号传输到CCU9。
内窥镜单元7是具备产生引导到内窥镜插入部3的光导件的照明光的照明用光源、线机构的电动弯曲驱动单元以及用于存储驱动电动弯曲驱动单元的控制参数的EEPROM8等的装置,在与内窥镜插入部3的基端部相连接的状态下内置于控制单元4。
CCU9对设置在内窥镜插入部3的摄像元件的摄像动作进行控制,并且将由摄像元件获取的摄像信号变换为例如NTSC信号等的图像信号,并将其作为输入图像信号100(参照图3)输出到控制单元4。
液晶监视器6根据从控制单元4输出的显示用图像信号101a(参照图3)显示被检体的图像以及其它信息。这些图像、信息分别根据需要单独地或者被合成后进行显示。在如本实施方式那样进行立体测量的情况下,显示用图像信号101a对应于包含视差图像中的一方或者两方的图像。
作为显示在液晶监视器6上的其它信息,例如列举出从后述的遥控器5等的操作部输入的信息、操作菜单、操作用的图形用户界面(GUI)。另外,列举出测量时使用的光标的图像、包含测量结果等的测量用信息102(参照图3)。以下将包含与操作相关联的信息的图像称为操作图像。
遥控器5是用于用户对内窥镜装置1进行各种操作输入的操作部,遥控器5连接在控制单元4。作为用户经由遥控器5进行的操作输入,例如有与电源的接通/断开有关的操作、与摄像动作有关的操作、与照明有关的操作、内窥镜插入部3的弯曲驱动的操作、与测量有关的操作、对于显示在液晶监视器6上的图像的图像处理的选择操作、向外部存储介质的图像的记录操作、记录在外部存储介质中的图像的读出操作等。这些操作能够适当地经由用户界面来进行。
例如,虽然没有特别图示,但是操纵杆、杠杆开关(leverswitch)、定格开关(freeze switch)、存储开关以及测量执行开关等设置在遥控器5。用户经由这些进行操作菜单的选择以及输入、或直接输入指示、或操作显示在液晶监视器6上的GUI,由此能够进行各种操作输入。
控制单元4进行包括所拍摄到的图像的图像处理以及测量处理在内的内窥镜装置1的整体控制。在本实施方式中,如图2所示,控制单元4包括CPU10、ROM11、RAM12、各种输入输出接口以及图像处理电路16。
CPU10将存储在ROM11或者外部存储介质44(参照图3)中的控制用程序加载到RAM12来执行,进行后述的各功能的动作。作为输入输出接口,例如有RS-232C接口15、PC卡接口13、USB接口14。
RS-232C接口15在与遥控器5、内窥镜单元7、CCU9之间进行用于动作控制的通信。PC卡接口13为了连接遵循PCMCIA的PC卡而使用。在本实施方式中,主要是可移动的外部存储介质连接在PC卡接口13,经由PC卡接口13来保存与测量结果等有关的信息以及图像信息等。
因此,在PC卡接口13中安装使用快闪存储器作为外部存储介质的各种存储卡、例如PCMCIA存储卡18、快闪存储卡19。
USB接口14为了连接USB设备而使用。在本实施方式中,为了可装卸地连接个人计算机17而设置有USB接口14。在个人计算机17连接在USB接口14的情况下,在控制单元4与个人计算机17内的存储装置之间经由PC卡接口13发送接收各种信息。
在连接个人计算机17的情况下,个人计算机17能够同时发挥连接在控制单元4的液晶监视器6、遥控器5以及外部存储介质的功能。因此,例如,能够根据需要利用个人计算机17的资源来进行与测量有关的控制、图像处理、图像显示等。
图像处理电路16对从CCU9提供的输入图像信号100(参照图3)实施经由遥控器5指定的图像处理来生成输出图像信号101A、101B(参照图3)。另外,图像处理电路16根据需要将输出图像信号101A、101B与通过CPU10生成的操作图像、测量用信息102(参照图3)进行合成并进一步变换为例如NTSC信号等以在液晶监视器6上显示图像,从而作为显示用图像信号101a输出到液晶监视器6。
接着,参照图3说明内窥镜装置1的主要的功能结构。内窥镜装置1具有图像生成部30、操作部31以及显示部33,并且在控制单元4内具有图像处理部34、信号变换部38、图像存储部42以及控制部43。
图像生成部30与内窥镜插入部3内的摄像元件、内窥镜单元7以及CCU9相对应,生成将通过立体测量用光学适配器2的两个光学系统(物镜2A、2B)同时成像的两个被摄体像作为视差图像而包含的图像。操作部31是为了用户进行测量等的操作输入而设置的,其与遥控器5相对应。显示部33与液晶监视器6相对应,根据显示用图像信号101a显示图像。个人计算机17也可以具备操作部31、显示部33的功能。
从图像生成部30将通过CCU9实施亮度水平调整、噪声消除处理等的前处理后的、包含一对视差图像的1帧的图像信息作为输入图像信号100而输入到图像处理部34。前处理也可以由图像处理部34作为图像处理而进行。
图像处理部34及信号变换部38与图像信号处理电路16相对应。图像处理部34构成为能够对所输入的输入图像信号100实施图像处理来生成输出图像信号101A并输出到信号变换部38、并且生成输出图像信号101B并输出到图像存储部42。另外,图像处理部34适当处理输入图像信号100使得从包含通过立体测量用光学适配器2的两个光学系统同时成像的两个被摄体像的图像中抽取由一个被摄体像构成的视差图像,并作为输出图像信号101A输出到信号变换部38。此外,输出图像信号101A、101B不限于不同的信号,也可以是实施相同的图像处理所得到的相同的信号。
信号变换部38将从图像处理部34输出的输出图像信号101A作为显示用图像信号101a输出到显示部33。此时,能够根据需要对显示用图像信号101a合成操作图像等的其它图像数据。另外,在从控制部43输出了测量用信息102的情况下,能够以测量用信息102也被合成的状态生成显示用图像信号101a。
图像存储部42与RAM12相对应,将从图像处理部34输出的输出图像信号101B作为静止图像数据进行存储。另外,在经由操作部31进行了记录处理的操作输入的情况下,按照控制部43的控制,静止图像数据从图像存储部42被读出而向外部存储介质44输出并存储在外部存储介质44中。外部存储介质44与个人计算机17、PCMCIA存储卡18以及快闪存储卡19相对应。
控制部43与CPU10相对应。控制部43读出保存在ROM11或者外部存储介质44中的控制用程序并加载到RAM12中,通过执行控制用程序所描述的命令来控制内窥镜装置1内的各部分。在经由操作部31进行了测量处理的操作输入的情况下,控制部43使用存储在图像存储部42中的静止图像数据来进行基于立体测量的测量处理,并且生成测量的操作输入所需的测量用GUI图像。例如,当经由操作部31在液晶监视器6的显示图像上输入了测量点时,控制部43将与测量点相对应的各视差图像的对应点的位置信息根据各自的亮度信息进行匹配处理而获取,进行根据三角测量原理换算为三维位置坐标的处理。
显示在显示部33上的光标、测量点的信息、测量结果等与测量用GUI图像一起作为测量用信息102从控制部43输出到信号变换部38、并通过信号变换部38合成到输出图像信号101A。
也可以将内窥镜装置1的控制用程序记录在计算机可读取的记录介质中,并使内窥镜装置1以外的计算机读入记录在该记录介质中的控制用程序来执行。例如,也可以由个人计算机17读入控制用程序来执行,按照控制用程序将用于控制内窥镜装置1的控制信息发送给内窥镜装置1,使内窥镜装置1以图像显示模式、图像确认模式等进行动作。
在此,在利用了WWW系统的情况下,“计算机”还包含主页提供环境(或者显示环境)。另外,“计算机可读取的记录介质”是指软盘、光磁盘、ROM、CD-ROM、DVD-ROM、快闪存储器等的可移动介质、内置于计算机的硬盘等的存储装置。并且,“计算机可读取的记录介质”还包含如经由因特网等的网络、电话线路等的通信线路发送程序的情况下的成为服务器、客户端的计算机系统内部的易失性存储器(RAM)那样将程序保持固定时间的介质。
另外,上述程序也可以从将该程序保存在存储装置等中的计算机经由传输介质或者通过传输介质中的传输波传输给其它计算机。在此,传输程序的“传输介质”是指如因特网等的网络(通信网)、电话线路等的通信线路(通信线)那样具有传输信息的功能的介质。另外,上述程序也可以是用于实现上述功能的一部分的程序。并且,也可以是能够与已经记录在计算机中的程序的组合来实现上述功能的所谓差分文件(差分程序)。
接着,说明内窥镜装置1的动作。图4和图5表示内窥镜装置1的动作的过程。当接通电源时,内窥镜装置1以将通过立体测量用光学适配器2获取到的图像显示在液晶监视器6上的图像显示模式进行动作。另外,当经由操作部31进行了操作输入时,内窥镜装置1以使用户确认测量中使用的所有图像的图像确认模式进行动作。当在图像确认模式下的动作过程中结束了测量中使用的所有图像的确认并经由操作部31进行了操作输入时,内窥镜装置1以与操作输入相应的各种处理模式进行动作。以下,作为各种处理模式以进行测量处理、图像信息的记录处理的模式的情况为例进行说明。
在图像显示模式下,用户将安装了立体测量用光学适配器2的内窥镜插入部3插入到被检体。包含通过立体测量用光学适配器2在摄像元件上成像的两个被摄体像的图像信息通过CCU9作为输入图像信号100而输出到控制单元4。
如图4所示,在ST101中,控制单元4从图像生成部30获取1帧的图像信息。即,按照控制部43的控制,输入图像信号100从图像生成部30输出到控制单元4的图像处理部34,通过图像处理部34将1帧的输入图像信号100作为图像信息来获取。
接着,在ST102中,按照控制部43的控制,图像处理部34分割1帧的输入图像信号100。即,图像处理部34进行将从图像生成部30获取的图像信息分割为两个视场区域的处理。具体地说,将图像信息分割为包含左右两个被摄体像中的左侧被摄体像的视场区域和包含左右两个被摄体像中的右侧被摄体像的视场区域。此时,既可以在图像的中央处将图像分割为两个,也可以使用预先通过测量获得的与两个视场区域的位置有关的信息来抽取只有视场区域的图像。分割得到的两个图像信息作为输出图像信号101B输出到图像存储部42并存储在图像存储部42中。
接着,在ST103中,按照控制部43的控制,图像处理部34将与分割得到的两个图像信息中的一个图像信息(作为一个例子,在本实施方式中设为与左视场区域相对应的视差图像)相对应的1帧的图像信号作为输出图像信号101A而输出到信号变换部38。
接着,在ST104中,按照控制部43的控制,信号变换部38对所输入的输出图像信号101A实施将图像大小变更为显示部33所能够显示的大小等的处理,将处理后的输出图像信号101A作为显示用图像信号101a而输出到显示部33。显示部33根据显示用图像信号101a显示图像。
由此,包含与左视场区域相对应的视差图像的图像显示在显示部33上。
图6A、图6B、图6C、图6D、图6E表示由本实施方式的内窥镜装置1生成及显示的图像。图6A表示由图像生成部30生成后由图像处理部34分割为各个视场区域之前的图像。图像60由在图像的上下及中央处以I字状设置的图像区域和除该区域以外的两个大致矩形的图像区域构成。左侧的图像区域由与通过立体测量用光学适配器2的两个光学系统同时成像的两个被摄体像中的左侧的被摄体像相对应的视差图像61L构成。右侧的图像区域由与通过立体测量用光学适配器2的两个光学系统同时成像的两个被摄体像中的右侧的被摄体像相对应的视差图像61R构成。
图6B表示在ST104中显示在显示部33上的图像。在图像50a中包含与通过立体测量用光学适配器2的两个光学系统同时成像的两个被摄体像中的左侧的被摄体像相对应的视差图像51L。也可以放大显示视差图像51L,在这种情况下,图像处理部34对与分割得到的两个图像信息中的一个图像信息相对应的1帧的图像信号进行放大处理,并将处理后的图像信号作为输出图像信号101A而输出到信号变换部38。
当ST104的处理结束时,进行ST105的处理。在ST105中,控制部43判断是否经由操作部31进行了操作输入。在进行了操作输入的情况下进行ST106的处理。另外,在没有进行操作输入的情况下进行ST101的处理,关于下一帧的图像信息再次进行上述的处理。即,在没有发生操作输入的情况下,实现将实施图像处理后的1帧的图像按时间序列实时地作为运动图像显示在显示部33上的图像显示模式。用户一边观察所显示的图像一边通过遥控器5调整内窥镜插入部3的前端部的弯曲使得被检体的期望的测量部位包含在图像中。
接着,说明在ST106中进行的处理(图像确认处理)的详细过程。图5表示在ST106中进行的处理的过程。如图5所示,在ST201中按照控制部43的控制,图像处理部34将存储在图像存储部42中的与两个图像信息中的一个图像信息(作为一个例子,在本实施方式中设为与左视场区域相对应的视差图像)相对应的1帧的图像信号作为输出图像信号101A而输出到信号变换部38。按照控制部43的控制,信号变换部38对所输入的输出图像信号101A实施将图像大小变更为显示部33所能够显示的大小等的处理,并将处理后的输出图像信号101A作为显示用图像信号101a而输出到显示部33。显示部33根据显示用图像信号101a显示图像。由此,包含与左视场区域相对应的视差图像的图像显示在显示部33上。在ST201中显示的与左视场区域相对应的视差图像与刚刚之前在ST104中显示的与左视场区域相对应的视差图像相同。
图6C表示在ST201中显示在显示部33上的图像。在图像50b中包含与通过立体测量用光学适配器2的两个光学系统同时成像的两个被摄体像中的左侧的被摄体像相对应的视差图像51L、操作输入用的按钮70以及用于用户操作按钮70的光标71。如上所述,图像50b中的视差图像51L与刚刚之前在ST104中显示的图像50a中的视差图像51L相同。也可以将表示显示了与左右的哪个视场区域相对应的视差图像的文字等的信息与视差图像一起进行显示。
接着,在ST202中,控制部43判断是否经由操作部31进行了操作输入。直到进行操作输入为止,在ST201中显示的图像(静止图像)不变化。在ST202中,在操作了意味着进入下一步的按钮70的情况下,进行ST203的处理。
在ST203中,按照控制部43的控制,图像处理部34将存储在图像存储部42中的与两个图像信息中的另一个图像信息(作为一个例子,在本实施方式中设为与右视场区域相对应的视差图像)相对应的1帧的图像信号作为输出图像信号101A而输出到信号变换部38。以后通过上述的处理在显示部33上显示图像。由此,包含与右视场区域相对应的视差图像的图像显示在显示部33上。也可以将表示显示了与左右的哪个视场区域相对应的视差图像的文字等的信息与视差图像一起进行显示。
图6D表示在ST203中显示在显示部33上的图像。在图像50c中包含与通过立体测量用光学适配器2的两个光学系统同时成像的两个被摄体像中的右侧的被摄体像相对应的视差图像51R、操作输入用的按钮70以及用于用户操作按钮70的光标71。
接着,在ST204中,控制部43判断是否经由操作部31进行了操作输入。直到进行操作输入为止,在ST203中显示的图像(静止图像)不变化。在ST204中,在操作了意味着进入下一步的按钮70的情况下,进行ST205的处理。
在ST205中,与ST201同样地将包含与左视场区域相对应的视差图像的图像显示在显示部33上。在ST205中,也可以显示包含与右视场区域相对应的视差图像的图像。当ST205的处理结束时,ST106的处理(图像确认处理)结束,进行ST107的处理。另外,在ST204中,在进行了意味着返回到之前的操作输入的情况下,进行ST201的处理,包含与左视场区域相对应的视差图像的图像再次显示在显示部33上。另外,在ST202、ST204中,在进行了意味着中止图像的确认的操作输入的情况下,进行ST101的处理,内窥镜装置1以图像显示模式进行动作。
在ST107中,控制部43判断是否经由操作部31进行了操作输入,在进行了操作输入的情况下进行与动作输入相应的各个处理。在进行了意味着指示测量的操作输入的情况下,进行ST108的处理(测量处理)。在ST108中,按照控制部43的控制,图像处理部34将存储在图像存储部42中的与两个图像信息中的一个图像信息(作为一个例子,在本实施方式中设为与左视场区域相对应的视差图像)相对应的1帧的图像信号作为输出图像信号101A而输出到信号变换部38。以后通过上述的处理在显示部33上显示图像。由此,包含与左视场区域相对应的视差图像的图像显示在显示部33上。
图6E表示在ST108中显示在显示部33上的图像。在图像50d中包含:与通过立体测量用光学适配器2的两个光学系统同时成像的两个被摄体像中的左侧的被摄体像相对应的视差图像51L;用于用户在输入测量点之后指示执行测量的运算处理的操作输入用的按钮72;用于用户指示结束测量处理的操作输入用的按钮73;以及用于用户指定测量点或操作按钮72、73的光标71。在图6E中显示有与左视场区域相对应的视差图像,但是也可以显示与右视场区域相对应的视差图像。另外,图6E中的操作输入用的按钮是一个例子,也可以存在用于指定测量的运算处理的种类(两点间距离、深度、面积等)的按钮等。
另外,在ST108中,控制部43从图像存储部42读出与两个图像信息相对应的1帧的图像信号,并根据经由操作部31输入的测量点的指示来指定两个图像信息中的一个图像信息中的测量点。并且,控制部43求出另一个图像信息中的、与测量点相对应的点(对应点)的位置,根据测量点和对应点的位置计算出被摄体上的三维坐标,从而对测量点处的被摄体的大小(两点间距离、深度、面积等)进行测量。
在ST107中进行了指示图像信息的记录的操作输入的情况下,进行ST109的处理(图像信息的记录处理)。在ST109中,按照控制部43的控制,从图像存储部42读出与两个图像信息相对应的1帧的图像信号并向外部存储介质44进行输出而存储在外部存储介质44中。在图像信息的记录中,既可以记录如图6A那样包含与左右视场区域相对应的两个视差图像的图像,也可以将与左右视场区域相对应的视差图像作为单独的图像并以将这些图像关联起来的状态进行记录。
另外,在ST107中进行了意味着将测量和图像信息的记录都不进行的操作输入的情况下,进行ST101的处理,内窥镜装置1以图像显示模式进行动作。
如上所述,除了图像的确认时(ST106)以外,显示只与左右视场区域中的一个视场区域相对应的视差图像。因此,不会发生由于在同时显示与左右视场区域相对应的两个视差图像的情况下用户在两个视差图像之间频繁地移动视线而导致的视觉辨认性的下降。
另外,在用户输入测量点之前,能够通过简单的操作输入使内窥镜装置的动作模式转变为图像确认模式。在图像确认模式中,通过ST201、ST203的处理,进行测量中使用的所有视差图像的确认,在ST201、ST203这两方的处理完成的情况下能够转移到测量处理。在图像的确认时,在图像静止的状态下用户能够以自己的步调来确认所有视差图像,因此即使在测量时显示只包含两个视差图像中的一个视差图像的图像的状态下进行测量的情况下,也能够在实施测量前容易地确认测量结果的准确性。另外,在图像的确认过程中用户判断为所显示的图像不适于测量的情况下,能够通过简单的操作输入使内窥镜装置的动作模式转变为图像显示模式来重新拍摄图像,因此检查效率得到提高。
在由内窥镜装置进行被检体的检查的情况下,大多情况下将内窥镜插入部的前端靠近被检体来观察被检体,左右的视差变大。若左右的视差变大则测量结果的准确性容易变低,因此在如日本专利第4409625号公报那样在测量结果的准确性低的情况下自动地显示包含两个视差图像的图像的内窥镜装置中,显示包含两个视差图像的图像的情况变多,测量中的视觉辨认性下降。与此相对,在本实施方式的内窥镜装置中,在测量过程中不需要显示包含两个视差图像的图像,因此测量过程中的视觉辨认性不会下降。
在利用内窥镜装置观察了被检体之后,不是始终在现场进行测量,而是也有时通过如下方法来进行检查:在现场只进行图像的拍摄,在此之后一边再现图像一边进行测量。在使用以往的内窥镜装置通过该方法进行检查的情况下,会产生若拍摄的图像不适于测量则再次返回现场来重新拍摄图像的麻烦。与此相对,在使用本实施方式的内窥镜装置来进行检查的情况下,通过ST201、ST203的处理来确认测量中使用的所有视差图像之后在ST109中记录图像信息。因此,能够减少记录不适于测量的图像的错误,能够事先防止产生再次返回现场来重新拍摄图像的麻烦。
接着,说明本实施方式的变形例。图7表示在ST106中进行的处理的过程的其它例子。在ST210中,按照控制部43的控制,图像处理部34将存储在图像存储部42中的与两个图像信息相对应的1帧的图像信号作为输出图像信号101A而输出到信号变换部38。以后通过上述的处理在显示部33上显示图像。由此,包含与左右视场区域相对应的两个视差图像的图像显示在显示部33上。
图8表示在ST210中显示在显示部33上的图像,与图6A所示的图像相同。在ST210中显示如图8所示那样包含与左右视场区域相对应的两个视差图像的图像。在ST210中,也可以将两个视差图像放大到不会导致各个视差图像隐藏在液晶监视器6上的程度后排列显示。
接着,在ST202中,控制部43判断是否经由操作部31进行了操作输入。直到进行操作输入为止,在ST210中显示的图像(静止图像)不变化。在ST202中,在操作了意味着进入下一步的按钮70的情况下,进行ST205的处理。
在ST205中,如上所述那样包含与左视场区域相对应的视差图像的图像显示在显示部33上。当ST205的处理结束时,ST106的处理(图像确认处理)结束,进行ST107的处理。另外,在ST202中,在进行了意味着中止图像的确认的操作输入的情况下,进行ST101的处理,内窥镜装置1以图像显示模式进行动作。
通过如上述那样在图像的确认时同时显示两个视差图像,用户变得容易比较它们,能够容易地确认测量结果的准确性。
在图像的确认时不仅可以将两个视差图像(图6B~图6E)轮流显示、或将两个视差图像(图8)同时显示,而且也可以将两个视差图像轮流显示后再将两个视差图像同时显示。例如,在图像的确认时也可以使图6C的图像50b、图6D的图像50c、图8的图像60轮流显示在显示部33上。
另外,也可以在将两个视差图像同时显示之后再将两个视差图像轮流显示。
当同时显示两个视差图像时,所显示的视差图像变小,有时难以确认视差图像,但是根据上述的方法,在只显示两个视差图像中的一个视差图像的情况下用户能够详细地确认该视差图像,在显示两个视差图像这两方的情况下用户能够比较这两方。也可以设为与同时显示两个视差图像还是单独显示无关地能够放大各视差图像中的至少一部分。
在图像的确认时也可以对所显示的图像进行用于辅助确认的图像处理后显示图像。例如,按照控制部43的控制,图像处理部34在对存储在图像存储部42中的与两个图像信息中的一个或两个图像信息相对应的1帧的图像信号进行边缘增强、或判别图像中的晕影(halation)部并以规定的颜色(红色等)使该区域显眼的处理后,将处理后的图像信号作为输出图像信号101A而输出到信号变换部38。以后通过上述的处理在显示部33上显示图像。也可以用户通过简单的操作来切换是否进行用于辅助确认的图像处理。通过实施这种图像处理,用户能够更容易地确认测量结果的准确性。
在图像的确认时也可以不依赖于用户的操作输入而自动地将两个视差图像轮流显示。例如,也可以如幻灯片放映(slideshow)那样以固定时间间隔切换所显示的视差图像。切换视差图像的时间间隔也可以在用户能够确认图像的时间的范围内任意地进行设定。
在本实施方式中,说明了拍摄包含通过两个光学系统同时成像的两个被摄体像的图像的例子,但是在拍摄包含与互不相同的视点相对应的三个以上的被摄体像的图像的情况下也能够以与本实施方式相同的过程使用户进行图像的确认。
如上所述,根据实施方式,在图像显示模式下显示只包含左右的视差图像中的一个视差图像的运动图像,因此能够保持观察被摄体时的视觉辨认性。
另外,在图像确认模式下,测量中使用的左右的视差图像全部显示为静止图像,因此能够在实施测量前使用户容易地确认测量结果的准确性。
(第二实施方式)
接着,说明本发明的第二实施方式。第一实施方式的内窥镜装置拍摄包含通过两个光学系统同时成像的两个被摄体像的图像,但是第二实施方式的内窥镜装置拍摄分别包含通过两个光学系统按时间序列成像的两个被摄体像的图像。
在本实施方式中,代替第一实施方式中的立体测量用光学适配器2而将能够切换入射到摄像元件的光的光路的光学适配器安装在内窥镜插入部3的前端。图9表示本实施方式中的光学适配器的结构。在内窥镜插入部3的前端安装有光学适配器21。光学适配器21具有凹透镜23a、23b、凸透镜24a、24b、切换部25以及成像光学系统26。在内窥镜插入部3的前端内配置有摄像元件3a。
凹透镜23a、凸透镜24a、成像光学系统26构成将来自被摄体的光所形成的第一被摄体像成像在摄像元件3a的区域S1的第一光学系统。凹透镜23b、凸透镜24b、成像光学系统26构成将来自被摄体的光所形成的第二被摄体像成像在摄像元件3a的区域S1的第二光学系统。入射到第一光学系统的来自被摄体的光通过光路L1而在摄像元件3a的区域S1成像为第一被摄体像。入射到第二光学系统的来自被摄体的光通过光路L2而在摄像元件3a的区域S1成像为第二被摄体像。第一被摄体像和第二被摄体像成像在摄像元件3a的共用的区域S1。
切换部25在光路L1与光路L2之间切换光路使得只有第一被摄体像和第二被摄体像中的某一个被摄体像成像在区域S1。由切换部25进行的光路的切换动作是通过控制单元4内的CPU10来控制的。在通过切换部25设定了光路L1的情况下,摄像元件3a生成包含成像在区域S1的第一被摄体像的第一图像,在通过切换部25设定了光路L2的情况下,摄像元件3a生成包含成像在区域S1的第二被摄体像的第二图像。
第一图像相对于第二图像、或者第二图像相对于第一图像具有视差。第一图像与第一实施方式中的左视场区域的视差图像相对应,第二图像与第二实施方式中的右视场区域的视差图像相对应。通过摄像元件3a生成的第一图像和第二图像输出到控制单元4。
通过了两个光路的光所形成的两个被摄体像在摄像元件3a的共用的区域S1上成像。因此,能够增大摄像面积,能够提高摄像画质和测量精度。
接着,说明内窥镜装置1的动作。图10和图11表示内窥镜装置1的动作的过程。如图10所示,在ST110中,按照控制部43的控制,切换部25将光路设定为光路L1。接着,在ST111中控制单元4从图像生成部30获取1帧的图像信息。即,按照控制部43的控制,输入图像信号100从图像生成部30被输出到控制单元4的图像处理部34,通过图像处理部34将1帧的输入图像信号100作为图像信息来获取。图像处理部34对所获取的输入图像信号100进行规定的图像处理,将处理后的输入图像信号100作为输出图像信号101A输出到信号变换部38,并且作为输出图像信号101B输出到图像存储部42。输出到图像存储部42的输出图像信号101B作为第一图像信息存储在图像存储部42中。
接着,在ST112中,按照控制部43的控制,信号变换部38对所输入的输出图像信号101A实施将图像大小变更为显示部33所能够显示的大小等的处理,并将处理后的输出图像信号101A作为显示用图像信号101a输出到显示部33。显示部33根据显示用图像信号101a显示图像。
由此,第一图像显示在显示部33上。
图12A、图12B、图12C、图12D表示在本实施方式的内窥镜装置1中显示的图像。图12A表示在ST112中显示在显示部33上的图像,显示基于通过了光路L1的光的第一图像52L。
当ST112的处理结束时进行ST105的处理。ST105~ST109的处理除了ST106的处理以外与在第一实施方式中说明的处理相同,因此省略这些处理的说明。
接着,说明在ST106中进行的处理(图像确认处理)的详细过程。图11表示在ST106中进行的处理的过程。如图11所示,在ST220中,按照控制部43的控制,图像处理部34将存储在图像存储部42中的与第一图像信息相对应的1帧的图像信号作为输出图像信号101A而输出到信号变换部38。按照控制部43的控制,信号变换部38对所输入的输出图像信号101A实施将图像大小变更为显示部33所能够显示的大小等的处理,并将处理后的输出图像信号101A作为显示用图像信号101a输出到显示部33。显示部33根据显示用图像信号101a显示图像。由此,第一图像显示在显示部33上。在ST220中显示的第一图像与刚刚之前在ST112中显示的第一图像相同。
图12B表示在ST220中显示在显示部33上的图像,显示基于通过了光路L1的光的第一图像52L、操作输入用的按钮70以及用于用户操作按钮70的光标71。也可以将表示显示了第一图像和第二图像中的哪个图像的文字等的信息与图像一起进行显示。
与ST220的处理并行地进行ST221、ST222的处理。在ST221中,按照控制部43的控制,切换部25将光路设定为光路L2。接着,在ST222中,控制单元4从图像生成部30获取1帧的图像信息。即,按照控制部43的控制,输入图像信号100从图像生成部30输出到控制单元4的图像处理部34,通过图像处理部34将1帧的输入图像信号100作为图像信息来获取。图像处理部34对所获取的输入图像信号100进行规定的图像处理,将处理后的输入图像信号100作为输出图像信号101B输出到图像存储部42。输出到图像存储部42的输出图像信号101B作为第二图像信息存储在图像存储部42中。
接着,在ST223中,控制部43判断是否经由操作部31进行了操作输入。直到进行操作输入为止,在ST220中显示的图像(静止图像)不变化。在ST223中,在进行了意味着进入下一步的操作输入的情况下,进行ST224的处理。
在ST224中,按照控制部43的控制,图像处理部34将存储在图像存储部42中的与第二图像信息相对应的1帧的图像信号作为输出图像信号101A而输出到信号变换部38。以后通过上述的处理在显示部33上显示图像。由此,第二图像显示在显示部33上。也可以将表示显示了第一图像和第二图像中的哪个图像的文字等的信息与图像一起进行显示。
图12C表示在ST224中显示在显示部33上的图像,显示基于通过了光路L2的光的第二图像52R、操作输入用的按钮70以及用于用户操作按钮70的光标71。也可以将表示显示了第一图像和第二图像中的哪个图像的文字等的信息与图像一起进行显示。
接着,在ST225中,控制部43判断是否经由操作部31进行了操作输入。直到进行操作输入为止,在ST224中显示的图像(静止图像)不变化。在ST225中,在进行了意味着进入下一步的操作输入的情况下,进行ST226的处理。
在ST226中,与ST220同样地第一图像显示在显示部33上。在ST226中,也可以显示第二图像。当ST226的处理结束时,ST106的处理(图像确认处理)结束,进行ST107的处理。另外,在ST225中,进行了意味着返回到之前的操作输入的情况下,进行ST220的处理,包含与左视场区域相对应的视差图像的图像再次显示在显示部33上。此时,不进行ST221、ST222的处理。另外,在ST223、ST225中,在进行了意味着中止图像的确认的操作输入的情况下,进行ST110的处理,内窥镜装置1以图像显示模式进行动作。
在ST108(测量处理)中,使用第一图像和第二图像来进行测量。图12D表示在ST108中显示在显示部33上的图像,包含:基于通过了光路L1的光的第一图像52L;用于用户在输入测量点后指示执行测量的运算处理的操作输入用的按钮72;用于用户指示结束测量处理的操作输入用的按钮73以及用于用户指定测量点或操作按钮72、73的光标71。在图12D中显示有第一图像,但是也可以显示第二图像。
如上所述,除了图像的确认时(ST106)以外,显示基于只通过了两个光路中的一个光路的光的图像。因此,不会发生由于在同时显示基于通过了两个光路中的各个光路的光的两个图像的情况下用户在两个视差图像之间频繁地移动视线而导致的视觉辨认性的下降。另外,在图像确认模式下通过ST220、ST224的处理确认测量中使用的所有图像,因此用户能够在实施测量前容易地确认测量结果的准确性。
接着,说明本实施方式的变形例。图13是表示在ST106中进行的处理的过程的其它的例子。在图13中在图11所示的ST224中进行的处理变更为以下说明的ST227中进行的处理。
在ST227中,按照控制部43的控制,图像处理部34将存储在图像存储部42中的与第一图像信息相对应的1帧的图像信号和与第二图像信息相对应的1帧的图像信号进行合成使得排列显示两张图像,将合成后的图像信号作为输出图像信号101A而输出到信号变换部38。以后通过上述的处理在显示部33上显示图像。由此,第一图像和第二图像显示在显示部33上。
图14表示在ST227中显示在显示部33上的图像。在图像53中包含缩小基于通过了光路L1的光的第一图像所得到的第一图像54L以及缩小基于通过了光路L2的光的第二图像所得到的第二图像54R。
在图13中,除了ST227的处理以外的处理是已经说明过的,因此省略说明。
在图像的确认时不仅可以将两个图像(图12A~图12D)轮流显示、或将两个图像(图14)同时显示,而且也可以将两个图像轮流显示后再将两个图像同时显示。例如,在图像的确认时也可以使图12B的图像52L、图12C的图像52R、图14的图像53轮流显示在显示部33上。
另外,既可以如在第一实施方式中说明的那样在图像的确认时对所显示的图像进行用于辅助确认的图像处理后显示图像,也可以在图像的确认时不依赖于用户的操作输入而自动地将两个图像轮流显示。
在本实施方式中,说明了拍摄分别包含通过两个光学系统按时间序列成像的两个被摄体像的图像的例子,但是在拍摄包含与互不相同的视点相对应的三个以上的被摄体像的图像的情况下也能够以与本实施方式相同的过程使用户进行图像的确认。
另外,还能够将本实施方式应用于对被检体依次投影多个图案并使用拍摄各图案所得到的多个图像来进行测量的装置。例如,在启动测量的功能之前为了观察而显示拍摄了被检体的运动图像(基于一个被摄体像的运动图像)。当指示了用于测量的摄影时,对被检体依次投影多个图案来进行拍摄,生成测量中使用的多个图像(基于一个被摄体像的静止图像)。之后,测量中使用的多个图像的全部作为静止图像而依次或者同时地显示,由此进行用户的确认。在对于所有图像的确认结束之后输入测量点来进行测量。
如上所述,根据本实施方式,在拍摄分别包含通过两个光学系统按时间序列成像的两个被摄体像的图像的内窥镜装置中,也能够在图像显示模式下保持观察被摄体时的视觉辨认性,能够在图像确认模式下在实施测量前使用户容易地确认测量结果的准确性。
(第三实施方式)
接着,说明本发明的第三实施方式。在本实施方式中,说明再现所记录的图像来进行测量的情况。下面,以在个人计算机17上进行测量的情况为例说明使用户确认测量中使用的图像的方法。
例如,通过ST109的处理(图像信息的记录处理)将包含测量中使用的所有图像信息的文件记录在个人计算机17中。此时,表示作为所记录的所有图像信息的代表的图像信息(以下称为代表图像信息)的信息也记录在文件中。在S T109的处理中,也可以在连接在内窥镜装置1上的卡介质等的外部存储介质中记录文件,并将该外部存储介质连接到个人计算机17,使个人计算机17读入文件。
在个人计算机17中记录了文件之后,当用户在个人计算机17上打开了文件时,通过图15所示的过程进行图像的确认以及测量。图15表示个人计算机17的控制部的动作的过程。
如图15所示,在ST301中,控制部在个人计算机17的显示部上显示基于代表图像信息的图像(以下称为代表图像),并且显示记录在文件中的所有图像信息的缩略图。图16表示用户进行图像的确认时的个人计算机17的显示部的画面。在显示部的画面80中显示有确认用的静止图像81以及作为记录在文件中的图像信息的缩小图像的缩略图82、83、84。在图16中,示出了同时或者按时间序列拍摄包含与互不相同的视点相对应的三个被摄体像的图像、并生成与各个被摄体像相对应的三个图像的情况下的例子,但是所生成的图像只要是两个以上即可。
在ST301中作为静止图像81而显示代表图像。另外,显眼地显示与静止图像81相对应的缩略图82。在图16中缩略图82是代表图像的缩略图。在图16所示的例子中显示有缩略图82、83、84,但是在图像的确认时也可以不显示缩略图82、83、84。
接着,在ST302中,控制部判断是否对个人计算机17进行了操作输入。直到进行操作输入为止,在ST301中显示的图像(静止图像)不变化。在ST302中,在进行了意味着进入下一步的操作输入的情况下,进行ST303的处理。
在ST303中,控制部使与所显示的静止图像不同的其它静止图像显示在显示部上。例如,在ST301中与图16的缩略图82相对应的图像显示为静止图像81的情况下在ST303中与缩略图83相对应的图像显示为静止图像81,在ST301中与缩略图83相对应的图像显示为静止图像81的情况下在ST303中与缩略图84相对应的图像显示为静止图像81。直到进行后续的操作输入为止,在ST303中显示的图像(静止图像)不变化。
接着,在ST304中,控制部判断同一文件内的所有图像是否都作为静止图像显示过。在存在没有显示过的图像的情况下,再次进行ST302的处理。另外,在所有图像都作为静止图像显示过的情况下,进行ST305的处理。
在ST305中,控制部判断是否对个人计算机17进行了操作输入。在ST305中,在进行了意味着进入下一步的操作输入的情况下,进行ST306的处理。在ST306中,控制部进行测量处理。在测量处理中,代表图像、包含测量用的菜单等的测量用图像显示在显示部上,进行测量点的输入。另外,在测量处理中使用代表图像信息以及与在ST303中所显示的静止图像相对应的所有图像信息来测量所指定的测量点处的被摄体的大小(两点间距离、深度、面积等)。当测量处理结束时,图像的确认以及测量的处理结束。
另外,在ST305中,在进行了意味着返回到之前的操作输入的情况下,进行ST307的处理。在ST307中,控制部将显示在显示部上的静止图像恢复为代表图像并再次进行ST302的处理。另外,在ST302、ST305中,在进行了意味着中止图像的确认的操作输入的情况下,图像的确认以及测量的处理结束。
在本实施方式中,说明了使用除内窥镜装置1以外的装置来再现所记录的图像并进行测量的方法,但是也可以在内窥镜装置1上以与上述相同的方法来再现图像并进行测量。
如上所述,根据实施方式,在再现所记录的图像并进行测量的情况下也将测量中使用的所有图像显示为静止图像,因此能够在实施测量前使用户容易地确认测量结果的准确性。
以上参照附图详述了本发明的实施方式,但是具体结构不限于上述的实施方式,还包括不脱离本发明的宗旨的范围内的设计变更等。
Claims (8)
1.一种内窥镜装置,具备:
图像生成部,其生成包含一个以上的被摄体像的图像;
显示部,其显示上述图像;以及
控制部,其控制基于上述图像进行的被摄体的大小的测量,
其中,上述控制部执行以下处理:
第一处理,使包含一个被摄体像的运动图像显示在上述显示部上;
第二处理,在上述第一处理之后使测量中使用的所有的多个被摄体像、或者基于测量中使用的一个被摄体像的所有的多个图像作为静止图像显示在上述显示部上;以及
第三处理,在上述第二处理之后根据用户的指示指定测量点,并根据基于所有的上述多个被摄体像的图像、或者基于上述测量中使用的一个被摄体像的所有的多个图像,测量所指定的测量点处的被摄体的大小。
2.根据权利要求1所述的内窥镜装置,其特征在于,
上述控制部在上述第二处理中使测量中使用的所有的多个被摄体像、或者基于测量中使用的一个被摄体像的所有的多个图像分别按时间序列作为静止图像显示在上述显示部上。
3.根据权利要求1所述的内窥镜装置,其特征在于,
上述控制部在上述第二处理中使测量中使用的所有的多个被摄体像、或者基于测量中使用的一个被摄体像的所有的多个图像作为静止图像同时显示在上述显示部上。
4.根据权利要求1所述的内窥镜装置,其特征在于,
上述控制部在上述第二处理中使测量中使用的所有的多个被摄体像分别按时间序列作为静止图像显示在上述显示部上,之后使测量中使用的所有的多个被摄体像作为静止图像同时显示在上述显示部上,
或者,使基于测量中使用的一个被摄体像的所有的多个图像分别按时间序列作为静止图像显示在上述显示部上,之后使基于测量中使用的一个被摄体像的所有的多个图像作为静止图像同时显示在上述显示部上。
5.根据权利要求1所述的内窥镜装置,其特征在于,
上述控制部在上述第二处理中使测量中使用的所有的多个被摄体像作为静止图像同时显示在上述显示部上,之后使测量中使用的所有的多个被摄体像分别按时间序列作为静止图像显示在上述显示部上,
或者,使基于测量中使用的一个被摄体像的所有的多个图像作为静止图像同时显示在上述显示部上,之后使基于测量中使用的一个被摄体像的所有的多个图像分别按时间序列作为静止图像显示在上述显示部上。
6.根据权利要求1所述的内窥镜装置,其特征在于,
上述控制部在上述第二处理中使对测量中使用的所有的多个被摄体像、或者基于测量中使用的一个被摄体像的所有的多个图像实施图像处理后的图像作为静止图像显示在上述显示部上。
7.根据权利要求6所述的内窥镜装置,其特征在于,
能够切换是否进行上述图像处理。
8.一种测量方法,包括:
第一步骤,使包含由内窥镜装置拍摄到的一个被摄体像的运动图像显示在显示部上;
第二步骤,在上述第一步骤之后使测量中使用的所有的多个被摄体像、或者基于测量中使用的一个被摄体像的所有的多个图像作为静止图像显示在上述显示部上;以及
第三步骤,在上述第二步骤之后根据用户的指示指定测量点,并根据基于所有的上述多个被摄体像的图像、或者基于上述测量中使用的一个被摄体像的所有的多个图像,测量所指定的测量点处的被摄体的大小。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012-145583 | 2012-06-28 | ||
JP2012145583A JP6017198B2 (ja) | 2012-06-28 | 2012-06-28 | 内視鏡装置およびプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
CN103512492A true CN103512492A (zh) | 2014-01-15 |
CN103512492B CN103512492B (zh) | 2018-07-17 |
Family
ID=49777739
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201210428863.XA Active CN103512492B (zh) | 2012-06-28 | 2012-10-31 | 内窥镜装置以及测量方法 |
Country Status (3)
Country | Link |
---|---|
US (1) | US9392230B2 (zh) |
JP (1) | JP6017198B2 (zh) |
CN (1) | CN103512492B (zh) |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9769366B2 (en) * | 2012-07-13 | 2017-09-19 | SeeScan, Inc. | Self-grounding transmitting portable camera controller for use with pipe inspection system |
JP2016095458A (ja) * | 2014-11-17 | 2016-05-26 | オリンパス株式会社 | 内視鏡装置 |
CN105243672A (zh) * | 2015-11-03 | 2016-01-13 | 苏交科集团股份有限公司 | 防腐涂层损伤辨别系统及其评估方法 |
JP6635450B2 (ja) * | 2016-07-12 | 2020-01-22 | オリンパス株式会社 | 内視鏡装置 |
US11839433B2 (en) | 2016-09-22 | 2023-12-12 | Medtronic Navigation, Inc. | System for guided procedures |
US20190175059A1 (en) | 2017-12-07 | 2019-06-13 | Medtronic Xomed, Inc. | System and Method for Assisting Visualization During a Procedure |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101112303A (zh) * | 2006-07-28 | 2008-01-30 | 奥林巴斯医疗株式会社 | 内窥镜装置及其拍摄方法 |
CN101123694A (zh) * | 2006-08-08 | 2008-02-13 | 松下电器产业株式会社 | 摄像装置及使用它的内窥镜装置 |
CN101257836A (zh) * | 2005-09-09 | 2008-09-03 | 奥林巴斯医疗株式会社 | 图像显示装置 |
CN101420529A (zh) * | 2007-10-23 | 2009-04-29 | 富士能株式会社 | 摄影装置及内窥镜系统 |
CN101842734A (zh) * | 2007-10-30 | 2010-09-22 | 奥林巴斯株式会社 | 内窥镜装置 |
US20120086790A1 (en) * | 2010-10-12 | 2012-04-12 | Masayuki Takahira | Endoscope apparatus |
Family Cites Families (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3337682B2 (ja) * | 1991-03-11 | 2002-10-21 | オリンパス光学工業株式会社 | 画像処理装置 |
JPH08123899A (ja) * | 1994-10-21 | 1996-05-17 | Oki Electric Ind Co Ltd | 画像取得/処理装置 |
JP5079973B2 (ja) | 2004-06-09 | 2012-11-21 | オリンパス株式会社 | 計測用内視鏡装置及び計測用内視鏡装置用プログラム |
US20060176321A1 (en) * | 2005-02-07 | 2006-08-10 | Olympus Corporation | Endoscope apparatus |
JP4780980B2 (ja) * | 2005-03-11 | 2011-09-28 | 富士フイルム株式会社 | 内視鏡装置 |
JP2007215646A (ja) * | 2006-02-15 | 2007-08-30 | Pentax Corp | 内視鏡プロセッサ、静止画像選択プログラム、及び内視鏡システム |
JP5153381B2 (ja) | 2008-02-21 | 2013-02-27 | オリンパス株式会社 | 内視鏡装置 |
JP4750175B2 (ja) | 2008-11-28 | 2011-08-17 | オリンパスメディカルシステムズ株式会社 | ステレオ光学系、並びにそれを用いたステレオ計測用光学装置、ステレオ計測装置及びステレオ観察装置 |
-
2012
- 2012-06-28 JP JP2012145583A patent/JP6017198B2/ja not_active Expired - Fee Related
- 2012-10-31 CN CN201210428863.XA patent/CN103512492B/zh active Active
-
2013
- 2013-01-23 US US13/747,821 patent/US9392230B2/en active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101257836A (zh) * | 2005-09-09 | 2008-09-03 | 奥林巴斯医疗株式会社 | 图像显示装置 |
CN101112303A (zh) * | 2006-07-28 | 2008-01-30 | 奥林巴斯医疗株式会社 | 内窥镜装置及其拍摄方法 |
CN101123694A (zh) * | 2006-08-08 | 2008-02-13 | 松下电器产业株式会社 | 摄像装置及使用它的内窥镜装置 |
CN101420529A (zh) * | 2007-10-23 | 2009-04-29 | 富士能株式会社 | 摄影装置及内窥镜系统 |
CN101842734A (zh) * | 2007-10-30 | 2010-09-22 | 奥林巴斯株式会社 | 内窥镜装置 |
US20120086790A1 (en) * | 2010-10-12 | 2012-04-12 | Masayuki Takahira | Endoscope apparatus |
Also Published As
Publication number | Publication date |
---|---|
JP2014010235A (ja) | 2014-01-20 |
US9392230B2 (en) | 2016-07-12 |
JP6017198B2 (ja) | 2016-10-26 |
CN103512492B (zh) | 2018-07-17 |
US20140002630A1 (en) | 2014-01-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN103512492A (zh) | 内窥镜装置以及测量方法 | |
CN103869468B (zh) | 信息处理设备 | |
JP4262014B2 (ja) | 画像撮影装置および画像処理方法 | |
US20060268257A1 (en) | Endoscope apparatus, method of operating the endoscope apparatus, and program to be executed to implement the method | |
JP4468544B2 (ja) | 内視鏡装置 | |
US6914623B2 (en) | Image processing measuring apparatus and measuring endoscope apparatus | |
US6890296B2 (en) | Measuring endoscope apparatus | |
US20060176321A1 (en) | Endoscope apparatus | |
WO2011118066A1 (ja) | 撮影装置及びその制御方法 | |
US20060178561A1 (en) | Endoscope apparatus | |
JP2004193962A (ja) | 画像通信装置、および画像通信方法、並びにコンピュータ・プログラム | |
JP2019201397A (ja) | 撮影装置及びプログラム | |
JP6388532B2 (ja) | 画像提供システムおよび画像提供方法 | |
US8372002B2 (en) | Endoscope apparatus | |
JP2007259002A (ja) | 画像再生装置ならびにその制御方法およびその制御プログラム | |
JPWO2005018236A1 (ja) | カメラ、画像処理装置、画像データ処理方法、及びプログラム | |
JP5209100B2 (ja) | 撮像装置 | |
JP2016065989A (ja) | 焦点検出装置、焦点検出方法およびプログラム、並びに撮像装置 | |
JP2014120815A (ja) | 情報処理装置、撮像装置、情報処理方法、プログラムならびに記憶媒体 | |
JP2005050034A (ja) | 画像処理方法および装置 | |
JP4266737B2 (ja) | 画像処理方法および装置 | |
JP2005050033A (ja) | 画像処理方法および画像生成装置 | |
JP5042550B2 (ja) | 内視鏡装置 | |
US20230288690A1 (en) | Microscope system and system, method, and computer program for a microscope system | |
JP2014010806A (ja) | 光源情報抽出装置、光源情報抽出方法、および光源情報抽出プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
TR01 | Transfer of patent right | ||
TR01 | Transfer of patent right |
Effective date of registration: 20230106 Address after: Nagano Patentee after: Yijingtong Co.,Ltd. Address before: Tokyo, Japan Patentee before: OLYMPUS Corp. |