CN101400294A - 生物体观测装置 - Google Patents

生物体观测装置 Download PDF

Info

Publication number
CN101400294A
CN101400294A CNA2007800084664A CN200780008466A CN101400294A CN 101400294 A CN101400294 A CN 101400294A CN A2007800084664 A CNA2007800084664 A CN A2007800084664A CN 200780008466 A CN200780008466 A CN 200780008466A CN 101400294 A CN101400294 A CN 101400294A
Authority
CN
China
Prior art keywords
light
signal
image
spectral
filter
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CNA2007800084664A
Other languages
English (en)
Other versions
CN101400294B (zh
Inventor
山崎健二
后野和弘
浦崎刚
竹村尚
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Olympus Corp
Original Assignee
Olympus Medical Systems Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Olympus Medical Systems Corp filed Critical Olympus Medical Systems Corp
Publication of CN101400294A publication Critical patent/CN101400294A/zh
Application granted granted Critical
Publication of CN101400294B publication Critical patent/CN101400294B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002Operational features of endoscopes
    • A61B1/00004Operational features of endoscopes characterised by electronic signal processing
    • A61B1/00009Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
    • A61B1/000094Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope extracting biological structures
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/06Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
    • A61B1/0638Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements providing two or more wavelengths
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/06Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
    • A61B1/0646Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements with illumination filters
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/06Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
    • A61B1/0655Control therefor
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B23/00Telescopes, e.g. binoculars; Periscopes; Instruments for viewing the inside of hollow bodies; Viewfinders; Optical aiming or sighting devices
    • G02B23/24Instruments or systems for viewing the inside of hollow bodies, e.g. fibrescopes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/56Cameras or camera modules comprising electronic image sensors; Control thereof provided with illuminating means
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/04Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
    • A61B1/044Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances for absorption imaging
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/06Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
    • A61B1/063Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements for monochromatic or narrow-band illumination
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50Constructional details
    • H04N23/555Constructional details for picking-up images in sites, inaccessible due to their dimensions or hazardous conditions, e.g. endoscopes or borescopes

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Surgery (AREA)
  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • Biomedical Technology (AREA)
  • Veterinary Medicine (AREA)
  • Biophysics (AREA)
  • Pathology (AREA)
  • Radiology & Medical Imaging (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Public Health (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Molecular Biology (AREA)
  • Animal Behavior & Ethology (AREA)
  • General Health & Medical Sciences (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Astronomy & Astrophysics (AREA)
  • General Physics & Mathematics (AREA)
  • Endoscopes (AREA)
  • Instruments For Viewing The Inside Of Hollow Bodies (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

光源部(41)与控制部(42)和内窥镜(101)连接,根据来自控制部(42)的信号,以规定光量照射白色光。并且,光源部(41)具有:作为白色光源的灯(15);红外截止滤波器(15a);光量限制滤波器(16),其在光路上插入/取出,限制白色光在规定波长频带的光量;滤波器插入/取出驱动部(17),其在光路上插入/取出光量限制滤波器(16);以及射出白色光的聚光透镜(18)。例如,当光量限制滤波器(16)设蓝色频带的透射率为100%时,将其他频带的透射率限制为50%。由此,能够改善基于可见光区域的照明光的离散的光谱图像生成中的S/N。

Description

生物体观测装置
技术领域
本发明涉及利用拍摄生物体而获得的彩色图像信号,并通过信号处理作为光谱图像显示在显示装置上的生物体观测装置。
背景技术
以往,作为生物体观测装置,广泛使用照射照明光来获得体腔内的内窥镜图像的内窥镜装置。在这种内窥镜装置中,使用具有摄像部的电子内窥镜,该摄像部使用光导等将来自光源装置的照明光导入到体腔内,并通过其返回光拍摄被摄体,该内窥镜装置通过视频处理器对来自摄像部的摄像信号进行信号处理,从而在观察监视器上显示内窥镜图像,来观察患部等观察部位。
在内窥镜装置中进行通常的生物体组织观察的情况下,作为一种方式,利用光源装置发出可见光区域的白色光,经由例如RGB等的旋转滤波器,向被摄体照射面顺次光,由视频处理器对该面顺次光的返回光进行同时化来进行图像处理,从而获得彩色图像。并且,在内窥镜装置中进行通常的生物体组织观察的情况下,作为其他方式,在内窥镜的摄像部的摄像面的前表面配置色卡(color chip),利用光源装置发出可见光区域的白色光,利用色卡将该白色光的返回光按照各颜色成分进行分离,从而进行拍摄,利用视频处理器进行图像处理,由此获得彩色图像。
根据所照射的光的波长,生物体组织的光吸收特性和散射特性不同,所以,例如在日本特开2002-95635号公报中公开了如下的窄频带光内窥镜装置:向生物体组织照射离散的光谱特性的窄频带的RGB面顺次光作为可见光区域的照明光,获得生物体组织的期望深部的组织信息。
在日本特开2003-93336号公报中公开了如下的窄频带光内窥镜装置:对基于可见光区域的照明光的图像信号进行信号处理,生成离散的光谱图像,获得生物体组织的期望深部的组织信息。
在该日本特开2003-93336号公报的装置中,进行如下处理:针对获得通常光观察图像时的照明光量,利用光量控制部降低获得光谱图像时的照明光量(例如,照明光照射定时控制、光斩波器控制、灯施加电流控制和电子快门控制等),并进行避免作为摄像部的CCD的饱和的控制。
但是,例如在上述日本特开2003-93336号公报所记载的装置中,在向被摄体照射来自灯的照明光的照明光学系统以及拍摄被摄体像的摄像光学系统中,例如,由于遮断近紫外光用的内窥镜的光导的传送特性以及插入在光源光路上的红外截止滤波器的透射特性等,大多为蓝色波长频带的照明光量降低,并且CCD的灵敏度特性也在蓝色波长频带降低,所以,根据所拍摄的图像信息来生成该蓝色波长频带的光谱图像时,与其他波长频带的光谱图像相比,具有S/N相对较低的问题。
发明内容
本发明是鉴于上述问题而完成的,其目的在于,提供一种生物体观测装置,该生物体观测装置能够改善基于可见光区域的照明光的离散的光谱图像生成中的S/N。
本发明的一个方式的生物体观测装置具有:照明部,其向作为被检体的生物体照射光;和/或信号处理控制部,其对摄像部的动作进行控制并向显示装置输出摄像信号,所述摄像部根据来自该照明部的照明光,对从所述生物体反射的光进行光电转换并生成所述摄像信号,该生物体观测装置的特征在于,其具有:光谱信号生成部,其根据所述摄像信号,通过信号处理来生成与光学波长窄频带的图像对应的光谱信号;以及颜色调节部,在向所述显示装置输出所述光谱信号时,该颜色调节部按照形成该光谱信号的多个频带来调节色调,在从所述照明部到所述摄像部的光路上还设置光谱特性控制部,该光谱特性控制部控制针对所述光路上的光的光谱特性。
附图说明
图1是示出本发明的实施例1的电子内窥镜装置的外观的外观图。
图2是示出图1的电子内窥镜装置的结构的框图。
图3是示出图2的光量限制滤波器的透射特性的图。
图4是示出在图2的CCD前表面设置的颜色滤波器的排列的图。
图5是说明图2的矩阵运算部中计算矩阵的矩阵计算方法的图。
图6是示出由图2的矩阵运算部所生成的光谱图像的光谱特性的图。
图7是示出通过图2的电子内窥镜装置观察到的生物体组织的层方向结构的图。
图8是说明来自图2的电子内窥镜装置的照明光到达生物体组织的层方向的状态的图。
图9是示出通过图2的电子内窥镜装置进行通常观察时的RGB光的各波段的光谱特性的图。
图10是示出图9的通常观察时的基于RGB光的各波段图像的第1图。
图11是示出图9的通常观察时的基于RGB光的各波段图像的第2图。
图12是示出图9的通常观察时的基于RGB光的各波段图像的第3图。
图13是示出图6的各光谱图像的第1图。
图14是示出图6的各光谱图像的第2图。
图15是示出图6的各光谱图像的第3图。
图16是说明使用了图2的触摸面板功能的图形用户界面的第1图。
图17是说明使用了图2的触摸面板功能的图形用户界面的第2图。
图18是说明使用了图2的触摸面板功能的图形用户界面的第3图。
图19是说明使用了图2的触摸面板功能的图形用户界面的第4图。
图20是说明使用了图2的触摸面板功能的图形用户界面的第5图。
图21是说明使用了图2的触摸面板功能的图形用户界面的第6图。
图22是说明使用了图2的触摸面板功能的图形用户界面的第7图。
图23是说明使用了图2的触摸面板功能的图形用户界面的第8图。
图24是说明使用了图2的触摸面板功能的图形用户界面的第9图。
图25是说明使用了图2的触摸面板功能的图形用户界面的第10图。
图26是说明使用了图2的触摸面板功能的图形用户界面的第11图。
图27是说明使用了图2的触摸面板功能的图形用户界面的第12图。
图28是说明由图2的矩阵运算部所生成的光谱图像的白平衡处理的图。
图29是说明使用了图2的触摸面板功能的图形用户界面的第13图。
图30是说明使用了图2的触摸面板功能的图形用户界面的第14图。
图31是示出图1的内窥镜装置主体的背面的板槽(board slot)的结构的图。
图32是说明插入设置在图31的板槽中的功能扩张基板的追加功能菜单的第1图。
图33是说明插入设置在图31的板槽中的功能扩张基板的追加功能菜单的第2图。
图34是说明插入设置在图31的板槽中的功能扩张基板的追加功能菜单的第3图。
图35是示出可以连接在图2的内窥镜装置主体上的波长选择用的专用键盘的一例的图。
图36是示出图4的颜色滤波器的变形例的排列的图。
图37是示出本发明的实施例2的电子内窥镜装置的结构的框图。
图38是示出图37的RGB旋转滤波器的结构的图。
图39是示出第1光谱图像生成模式即在光路上没有光量限制滤波器时、透过图38的RGB旋转滤波器的光的光谱特性的图。
图40是示出第2光谱图像生成模式即在光路上存在光量限制滤波器时、透过图38的RGB旋转滤波器的光的光谱特性的图。
图41是示出图37的电子内窥镜装置的变形例的结构的框图。
图42是示出图41的RGB旋转滤波器的结构的图。
图43是示出图37的RGB旋转滤波器的变形例的结构的图。
具体实施方式
下面,参照附图叙述本发明的实施例。
(实施例1)
图1~图36涉及本发明的实施例1,图1是示出电子内窥镜装置的外观的外观图,图2是示出图1的电子内窥镜装置的结构的框图,图3是示出图2的光量限制滤波器的透射特性的图,图4是示出在图2的CCD前表面设置的颜色滤波器的排列的图,图5是说明图2的矩阵运算部中计算矩阵的矩阵计算方法的图,图6是示出由图2的矩阵运算部所生成的光谱图像的光谱特性的图,图7是示出通过图2的电子内窥镜装置观察到的生物体组织的层方向结构的图,图8是说明来自图2的电子内窥镜装置的照明光到达生物体组织的层方向的状态的图,图9是示出通过图2的电子内窥镜装置进行通常观察时的RGB光的各波段的光谱特性的图,图10是示出图9的通常观察时的基于RGB光的各波段图像的第1图。
图11是示出图9的通常观察时的基于RGB光的各波段图像的第2图,图12是示出图9的通常观察时的基于RGB光的各波段图像的第3图,图13是示出图6的各光谱图像的第1图,图14是示出图6的各光谱图像的第2图,图15是示出图6的各光谱图像的第3图,图16是说明使用了图2的触摸面板功能的图形用户界面的第1图,图17是说明使用了图2的触摸面板功能的图形用户界面的第2图,图18是说明使用了图2的触摸面板功能的图形用户界面的第3图,图19是说明使用了图2的触摸面板功能的图形用户界面的第4图,图20是说明使用了图2的触摸面板功能的图形用户界面的第5图。
图21是说明使用了图2的触摸面板功能的图形用户界面的第6图,图22是说明使用了图2的触摸面板功能的图形用户界面的第7图,图23是说明使用了图2的触摸面板功能的图形用户界面的第8图,图24是说明使用了图2的触摸面板功能的图形用户界面的第9图,图25是说明使用了图2的触摸面板功能的图形用户界面的第10图,图26是说明使用了图2的触摸面板功能的图形用户界面的第11图,图27是说明使用了图2的触摸面板功能的图形用户界面的第12图,图28是说明由图2的矩阵运算部所生成的光谱图像的白平衡处理的图,图29是说明使用了图2的触摸面板功能的图形用户界面的第13图,图30是说明使用了图2的触摸面板功能的图形用户界面的第14图。
图31是示出图1的内窥镜装置主体的背面的板槽(board slot)的结构的图,图32是说明插入设置在图31的板槽中的功能扩张基板的追加功能菜单的第1图,图33是说明插入设置在图31的板槽中的功能扩张基板的追加功能菜单的第2图,图34是说明插入设置在图31的板槽中的功能扩张基板的追加功能菜单的第3图,图35是示出可以连接在图2的内窥镜装置主体上的波长选择用的专用键盘的一例的图,图36是示出图4的颜色滤波器的变形例的排列的图。
在作为本发明的实施例中的生物体观测装置的电子内窥镜装置中,从照明用光源向作为被检体的生物体照射光,利用作为摄像部的固体摄像元件接收根据该照射光从生物体反射的光,并对其进行光电转换,从而生成彩色图像信号即摄像信号,根据该摄像信号,通过信号处理,生成与光学波长窄频带的图像对应的光谱信号即光谱图像信号(以下简称为光谱图像)。
如图1所示,实施例1的电子内窥镜装置100具有:作为观察部的内窥镜101、内窥镜装置主体105、作为显示装置的显示监视器106。并且,内窥镜101主要由以下部分构成:插入部102,其插入到被检体的体内;前端部103,其设置在该插入部102前端;以及角度操作部104,其设置在插入部102的前端侧的相反侧,用于指示前端部103的弯曲动作等。
在内窥镜装置主体105中,对由软性镜即内窥镜101所取得的被检体图像进行规定的信号处理,在显示监视器106上显示处理后的图像。在显示监视器106的显示部上设有触摸面板106a,在显示监视器106的显示部上显示各种设定画面,实现使用了触摸面板106a的指示设备功能(以下称为触摸面板功能)的图形界面。
接着,参照图2详细说明内窥镜装置主体105。另外,图2是电子内窥镜装置100的框图。
如图2所示,内窥镜装置主体105主要由以下部分构成:作为照明部的光源部41、作为信号处理控制部的控制部42、主体处理装置43。控制部42和主体处理装置43构成如下的信号处理控制部:其控制所述光源部41和/或作为摄像部的CCD21的动作,向作为显示装置的显示监视器106输出图像信号,并控制触摸面板106a的触摸面板功能。并且,控制部42与存储各种数据的数据存储部44连接。
另外,在本实施例中,对在作为1个单元的内窥镜装置主体105内具有光源部41和进行图像处理等的主体处理装置43的情况进行了说明,但是,这些光源部41和主体处理装置43也可以作为独立于内窥镜装置主体105的单元以可以取下的方式构成。
作为照明部的光源部41与控制部42和内窥镜101连接,根据来自控制部42的信号,以规定光量照射白色光(也包含不完全是白色光的情况)。并且,光源部41具有:作为白色光源的灯15;红外截止滤波器15a;作为光谱特性控制部的光量限制滤波器16,其在光路上插入/取出,限制白色光在规定波长频带的光量;滤波器插入/取出驱动部17,其在光路上插入/取出光量限制滤波器16;以及射出白色光的聚光透镜18。
图3示出光量限制滤波器16的透射特性。例如如图3所示,当光量限制滤波器16设蓝色频带的透射率为100%时,将其他频带的透射率限制为50%。
并且,经由连接器11连接在光源部41上的内窥镜101,在前端部103上具有物镜19和CCD等固体摄像元件21(以下简称为CCD)。本实施例中的CCD 21是单板式(用于同时式电子内窥镜的CCD),是原色型。另外,图4示出在CCD 21的摄像面上配置的颜色滤波器的排列。在CCD21的摄像面上配置的颜色滤波器构成颜色分解部。
并且,如图2所示,插入部102在内部具有:光导14,其将从光源部41照射的光引导到前端部103;信号线,其用于将由CCD 21所获得的被检体图像传送到主体处理装置43;以及钳子通道28等,其用于进行处置。另外,用于向钳子通道28插入钳子的钳子口29设置于操作部104附近。
操作部104在内部设置有用于存储内窥镜101的类别信息的ID部110。并且,操作部104在外表面设置有用于指示各种操作的指示开关部111。指示开关部111至少具有模式切换开关,该模式切换开关指示用于生成改善了S/N的光谱图像的后述的光谱图像生成模式。
并且,作为生物体观测装置用的信号处理装置的主体处理装置43与光源部41同样,经由连接器11连接在内窥镜101上。主体处理装置43在内部具有用于驱动所述内窥镜101内的所述CCD 21的CCD驱动器431。并且,主体处理装置43具有亮度信号处理系统和颜色信号处理系统,作为用于获得通常图像即彩色图像的信号电路系统。
主体处理装置43的所述亮度信号处理系统具有:轮廓校正部432,其与所述CCD 21连接,对来自CCD 21的摄像信号进行轮廓校正;以及亮度信号处理部434,其根据该轮廓校正部432所校正的数据,生成亮度信号。并且,主体处理装置43的所述颜色信号处理系统具有:采样保持电路(S/H电路)433a~433c,其与所述CCD 21连接,进行由CCD 21所获得的摄像信号的采样等,生成RGB信号;以及颜色信号处理部435,其与该S/H电路433a~433c的输出连接,生成颜色信号。
并且,主体处理装置43具有通常图像生成部437,该通常图像生成部437根据亮度信号处理系统和颜色信号处理系统的输出生成1个通常图像即彩色图像。该通常图像生成部437向显示图像生成部439输出亮度信号即Y信号、以及色差信号即R-Y信号和B-Y信号,显示图像生成部439根据Y信号、R-Y信号和B-Y信号,生成在显示监视器106上显示的通常图像即彩色图像的通常图像信号。
另一方面,作为用于获得光谱信号即光谱图像信号的信号电路系统,主体处理装置43具有作为光谱信号生成部的矩阵运算部436,该矩阵运算部436被输入S/H电路433a~433c的输出(RGB信号),并对RGB信号进行规定的矩阵运算。所述矩阵运算部436中的矩阵运算是指进行如下处理:对彩色图像信号彼此进行相加处理等,并且,乘以通过后述的矩阵计算方法所求出的矩阵。
另外,在本实施例中,作为该矩阵运算的方法,对使用了电子电路处理(由使用了电子电路的硬件进行的处理)的方法进行了说明,但是,也可以是使用了数值数据处理(由使用了程序的软件进行的处理)的方法。并且,在实施时还可以对这些方法进行组合。
利用颜色调节部即颜色调节部440对矩阵运算部436的输出即光谱图像信号F1~F3进行颜色调节运算,通过光谱图像信号F1~F3生成光谱彩色通道图像信号Rch、Gch、Bch。所生成的光谱彩色通道图像信号Rch、Gch、Bch经由显示图像生成部439发送到显示监视器106的RGB的彩色通道R-(ch)、G-(ch)、B-(ch)。
另外,显示图像生成部439生成由通常图像和/或光谱图像等构成的显示图像,向显示监视器106输出显示图像,并且,还可以进行显示光谱图像彼此之间的切换。即,操作者可以根据通常图像、基于彩色通道R-(ch)的光谱彩色通道图像、基于彩色通道G-(ch)的光谱彩色通道图像、基于彩色通道B-(ch)的光谱彩色通道图像,在显示监视器106上选择性地进行显示。并且,也可以构成为能够同时在显示监视器106上显示任意2个以上的图像。特别地,在能够同时显示通常图像和光谱彩色通道图像(以下也称为光谱通道图像)的情况下,能够简单地对比进行一般观察的通常图像和光谱通道图像,能够在参考各自的特征(通常图像的特征在于,颜色程度接近通常的肉眼观察,易于进行观察。光谱通道图像的特征在于,能够观察在通常图像中无法观察的规定的血管等。)的基础上进行观察,在诊断上非常有用。
这里,对矩阵运算部436中计算矩阵的矩阵计算方法进行说明。
(矩阵计算方法)
图5是示出根据彩色图像信号(这里,为了便于说明设为R·G·B,但是如后所述,在补色型固体摄像元件中,也可以是G·Cy·Mg·Ye的组合)生成相当于与光学波长窄频带的图像对应的图像的光谱图像信号时的信号的流程的概念图。下面,向量和矩阵用粗字体或“”(例如,将矩阵A标记为A的粗字体或者“A”)进行标记,除此之外用没有修饰的字体进行标记。
首先,电子内窥镜装置100对R·G·B的各个摄像部的作为光谱灵敏度特性的彩色灵敏度特性进行数值数据化。这里,R·G·B的彩色灵敏度特性是指,使用白色光的光源,拍摄白色的被摄体时分别获得的相对于波长的输出特性。
另外,R·G·B的各个彩色灵敏度特性以简化的曲线图的方式示于各图像数据的右侧。并且,将此时的R·G·B的彩色灵敏度特性分别设为n维的列向量“R”·“G”·“B”。
接着,作为希望提取的光谱信号、例如3个光谱信号的基本光谱特性,电子内窥镜装置100对中心波长λ1、λ2、λ3(例如λ1=420nm、λ2=540nm、λ3=605nm)的光谱图像用的窄频带带通滤波器F1·F2·F3的特性进行数值数据化。另外,将此时的滤波器的特性分别设为n维的列向量“F1”·“F2”·“F3”。
根据所获得的数值数据,求出对以下关系进行近似的最佳系数集合。即,只要求出满足下式的矩阵的要素即可。
[数1]
R G B a 1 a 2 a 3 b 1 b 2 b 3 c 1 c 2 c 3 = F 1 F 2 F 3 · · · ( 1 )
上面的最佳命题的解在数学上如下求出。将表示R·G·B的彩色灵敏度特性的矩阵设为“C”,将表示希望提取的窄频带带通滤波器的光谱特性的矩阵设为“F”,将执行主成分分析或正交展开(或者正交变换)时要求出的系数矩阵设为“A”,则得到下式:
[数2]
C = R G B A = a 1 a 2 a 3 b 1 b 2 b 3 c 1 c 2 c 3 F = F 1 F 2 F 3 · · · ( 2 )
因此,(1)式所示的命题相当于求出满足以下关系的矩阵“A”。
[数3]
CA=F       …(3)
这里,作为表示光谱特性的光谱数据的点列数n,满足n>3的关系,所以,(3)式不是作为一元联立方程式的解,而是作为线性最小二乘法的解来求出。即,只要根据(3)式求解伪逆矩阵即可。若将矩阵“C”的转置矩阵设为“tC”,则(3)式如下:
[数4]
tCCA=tCF          …(4)
“tCC”为n×n的正方矩阵,所以,(4)式可以视为矩阵“A”的联立方程式,其解如下求出。
[数5]
A=(tCC)-1tCF       …(5)
对于由(5)式求出的矩阵“A”,电子内窥镜装置100通过进行(3)式左边的变换,能够近似希望提取的窄频带带通滤波器F1·F2·F3的特性。
使用这样计算出的矩阵,矩阵运算部436根据通常彩色图像信号生成光谱图像信号。
接着,参照图2详细说明本实施方式的电子内窥镜装置100的动作。
另外,下面首先说明通常图像生成的动作,然后说明光谱图像生成的动作。
通常图像生成:
首先,说明光源部41的动作。根据来自控制部42的控制信号,将滤波器插入/取出驱动部17设定在从光路上取出了光量限制滤波器16的位置上。来自灯15的光束不经由红外截止滤波器15a透过光量限制滤波器16,而是通过聚光透镜18汇聚在作为光纤束的光导14的入射端,该光导14设置在位于内窥镜101和光源部41的连接部上的连接器11内。
汇聚后的光束通过光导14,从设于前端部103的照明光学系统照射到被检体的体内。所照射的光束在被检体内反射,经由物镜19,在CCD21中按照图4所示的颜色滤波器来收集信号。
所收集的信号并行地输入到上述亮度信号处理系统和颜色信号处理系统。将按照各个颜色滤波器收集到的信号按照每个像素进行相加之后输入到亮度信号系统的轮廓校正部432,进行轮廓校正后,输入到亮度信号处理部434。在亮度信号处理部434中生成亮度信号,并将其输入到通常图像生成部437。
并且,另一方面,在CCD 21中收集到的信号按照各个滤波器输入到S/H电路433a~433c,分别生成R·G·B信号。进而,利用颜色信号处理部435针对R·G·B信号生成颜色信号,在通常图像生成部437中,根据所述亮度信号和颜色信号生成Y信号、R-Y信号、B-Y信号,通过显示图像生成部439在显示监视器106上显示被检体的通常图像。
光谱图像生成:
在光谱图像生成中具有2个生成模式。第1光谱图像生成模式与通常图像生成时同样,是不使来自灯15的光束透过光量限制滤波器16的模式。第2光谱图像生成模式是使来自灯15的光束透过光量限制滤波器16的模式。在默认状态下,控制部42将光谱图像的生成模式设定为所述第1光谱图像生成模式。然后,当操作指示开关部111的模式切换开关时,控制部42驱动控制滤波器插入/取出驱动部17,将滤波器插入/取出驱动部17配置在来自灯15的光束的光路上,设定为第2光谱图像生成模式。其结果,在第2光谱图像生成模式中,来自灯15的光束透过光量限制滤波器16。
另外,在本实施例中,不限于指示开关部111的模式切换开关,通过操作设置在主体105上的键盘或触摸面板106a,也可以将光谱图像的生成模式设定为第2光谱图像生成模式。除此之外的动作在第1光谱图像生成模式和第2光谱图像生成模式中相同,所以,以第1光谱图像生成模式为例进行说明。并且,省略进行与通常图像生成同样的动作的说明。
在第1光谱图像生成模式的光谱图像生成时,在矩阵运算部436中对S/H电路433a~433c的输出(RGB信号)进行放大/相加处理。然后,利用颜色调节部440对矩阵运算部436的输出即光谱图像信号F1~F3进行颜色调节运算,通过光谱图像信号F1~F3生成光谱彩色通道图像信号Rch、Gch、Bch。将所生成的光谱彩色通道图像信号Rch、Gch、Bch发送到显示监视器106的RGB的彩色通道R-(ch)、G-(ch)、B-(ch)。
由此,主体处理装置43能够在显示监视器106上显示光谱图像,该光谱图像相当于利用经由图6所示的中心波长λ1、λ2、λ3的窄频带带通滤波器F1·F2·F3的窄频带光获得的窄频带光观察图像。
以下示出与窄频带带通滤波器F1·F2·F3对应的、利用其伪滤波器特性生成的光谱图像的一例。
如图7所示,体腔内组织51大多具有例如深度方向不同的血管等吸收体分布结构。在粘膜表层附近主要分布有较多毛细血管52,并且,在比该层深的中层上除了毛细血管之外还分布有比毛细血管粗的血管53,进而在深层上分布有更粗的血管54。
另一方面,光对体腔内组织51的深度方向的到达深度依赖于光的波长,如图8所示,在包含可见区域的照明光为蓝(B)色这种波长短的光的情况下,由于生物体组织中的吸收特性和散射特性,光只能到达表层附近,在到达表层的深度范围内被吸收、散射,可观测到从表面发出的光。并且,在为波长比蓝(B)色光长的绿(G)色光的情况下,到达比蓝(B)色光所到达的范围更深的地方,在该范围内被吸收、散射,观测到从表面发出的光。进而,在为波长比绿(G)色光长的红(R)色光的情况下,光到达更深的范围。
体腔内组织51的通常观察时的RGB光如图9所示,各波长频带重叠,因此,
(1)在通过B频带光利用CCD 21所拍摄的摄像信号中,拍摄到图10所示的具有包含较多浅层上的组织信息的浅层和中层组织信息的波段图像,
(2)并且,在通过G频带光利用CCD 21所拍摄的摄像信号中,拍摄到图11所示的具有包含较多中层上的组织信息的浅层和中层组织信息的波段图像,
(3)进而,在通过R频带光利用CCD 21所拍摄的摄像信号中,拍摄到图12所示的具有包含较多深层上的组织信息的中层和深层组织信息的波段图像。
而且,通过内窥镜装置主体105对这些RGB摄像信号进行信号处理,由此,作为内窥镜图像可以获得期望或自然的颜色再现的内窥镜图像。
在上述矩阵运算部436的矩阵处理中,使用如上所述预先生成的伪带通滤波器(矩阵),对彩色图像信号制作光谱图像信号。例如使用图6所示的可提取期望的深层组织信息的离散且窄频带的光谱特性的伪带通滤波器F1~F3,获得光谱图像信号F1~F3。伪带通滤波器F1~F3如图6所示,各波长频带未重叠,因此,
(4)在基于伪带通滤波器F1的光谱图像信号F1中,拍摄到图13所示的具有浅层上的组织信息的波段图像,并且,
(5)在基于伪带通滤波器F2的光谱图像信号F2中,拍摄到图14所示的具有中层上的组织信息的波段图像,而且,
(6)在基于伪带通滤波器F3的光谱图像信号F3中,拍摄到图15所示的具有深层上的组织信息的波段图像。
针对这样获得的光谱图像信号F1~F3,颜色调节部440作为最单纯的颜色转换的例子,将光谱图像信号F3分配给光谱彩色通道图像信号Rch,将光谱图像信号F2分配给光谱彩色通道图像信号Gch,将光谱图像信号F1分配给光谱彩色通道图像信号Bch,并经由显示图像生成部439输出到显示监视器106的RGB的彩色通道R-(ch)、G-(ch)、B-(ch)。
在利用显示监视器106观察基于这些的彩色通道R-(ch)、G-(ch)、B-(ch)的彩色图像的情况下,得到例如图16所示的图像。粗血管位于深的位置,反映出光谱图像信号F3,作为规定的目标颜色的彩色图像,显示为红色系的图案。位于中层附近的血管网较强地反应出光谱图像信号F2,所以,作为规定的目标颜色的彩色图像,显示为品红色系的图案。存在于血管网内、粘膜表面附近的部分表现为黄色系的图案。
另外,除了被摄体的光谱反射率以外,光谱图像信号F1~F3还依赖于透镜和光电转换系统等内窥镜的光谱灵敏度,所以,控制部43从操作部104内的ID部110读出内窥镜101的类别信息即ID,根据ID,使用存储在数据存储部44中的与所连接的内窥镜101对应的校正系数,来校正光谱图像信号F1~F3。另外,本实施例也可以构成为,预先将校正系数存储在ID部110中,控制部43从ID部110与ID一起读出校正系数。
如上所述,通过相当于伪带通滤波器F1~F3的矩阵来生成光谱图像信号F1~F3,通过中心波长λ1、λ2、λ3对伪带通滤波器F1~F3赋予特征。即,主体处理装置43通过设定1个中心波长λ,来决定1个伪带通滤波器F,根据该伪带通滤波器F,生成光谱图像信号F。
本实施例可以使用触摸面板106a的功能,通过图形用户界面设定中心波长λ,来生成期望的光谱图像信号F。
以下,说明基于触摸面板106a的功能的图形用户界面。
在本实施例中,如图17所示,主体处理装置43在具有触摸面板106a的观察监视器106上显示设定画面,该设定画面用于设定与光谱图像信号对应的伪带通滤波器的中心波长。该设定画面可以设定多个、例如6个中心波长λ11、λ12、λ13、λ21、λ22、λ23。例如,当使用触摸面板功能选择开始设定波长λ11的λ11按钮201时,主体处理装置43在观察监视器106上展开显示具有多个可以选择的波长的弹出窗口207。然后,通过使用触摸面板功能选择该弹出窗口207的设定波长值,由此,主体处理装置43将波长λ11设定为设定波长值。图17示出主体处理装置43将设定波长值425nm设定为波长λ11的状态。其他波长即λ12按钮202、λ13按钮203、λ212按钮204、λ22按钮205、λ23按钮206的设定操作也与波长λ11同样,能够在设定画面上使用触摸面板功能对设定波长值进行设定。通过在该设定画面上分别对至少3个波长(例如波长λ11、λ12、λ13)的设定波长值进行设定,由此,能够使光谱图像彩色化。以下,将彩色化的光谱图像称为彩色光谱图像。
在本实施例中,用于设定伪带通滤波器的中心波长的设定画面不限于图17,作为本实施例的第1变形例,如图18所示,也可以是具有如下的集合表208的设定画面,该集合表208为了彩色化而预先设定以3个波长为一组的多个波长集合。在具有触摸面板106a的观察监视器106上显示该图18的设定画面的情况下,可以使用触摸面板功能来选择设定在集合表208中的多个波长集合中的更期望的波长集合。
并且,作为本实施例的第2变形例,如图19所示,也可以设置选择按钮209,每当使用触摸面板功能来操作选择按钮209时,使波长集合跳转移动来设定集合表208。具体而言,每当使用触摸面板功能来操作选择按钮209时,使设定的集合以集合1→集合2→集合3→集合4→集合1→这样的方式移动来进行选择。图20示出在图19的状态下使用触摸面板功能操作选择按钮209时的设定画面,如图20所示,利用选择按钮209的操作,将图19所示的集合1的选择移动到集合2的选择。
在本实施例中,作为在触摸面板106a(即观察监视器106)的显示画面上显示彩色光谱图像的显示方式,显示图像生成部439通过如下的显示方式等来实施:(1)通常光观察图像和彩色光谱图像同时显示的显示方式;(2)仅显示彩色光谱图像的显示方式;(3)仅显示通常光观察图像的显示方式。
在通常光观察图像和彩色光谱图像同时显示的显示方式中,如图21所示,主体处理装置43能够通过显示图像生成部439在观察监视器106上同时显示通常光观察图像210和彩色化的彩色光谱图像211。此时,除了通常光观察图像210和彩色光谱图像211以外,显示图像生成部439还显示可以在彩色光谱图像211的彩色化中使用的、例如在上述设定画面中所设定的6个中心波长的光谱图像的缩略图像221~226。而且,利用与其他缩略图像不同的显示方式(例如亮度或色调),来显示构成彩色光谱图像211的3个光谱图像的缩略图像。在本实施例中,通过使用触摸面板功能来选择缩略图像221~226,由此,能够任意地变更构成彩色光谱图像211的3个光谱图像。具体而言,例如当触摸彩色光谱图像211时,缩略图像221~226成为可以选择的状态,通过选择用于彩色化的3个中心波长的光谱图像的缩略图像,来变更构成彩色光谱图像211的3个光谱图像。图21示出通过中心波长λ11、λ12、λ13的3个光谱图像来生成彩色光谱图像211的状态,图22示出通过中心波长λ12、λ21、λ23的3个光谱图像来生成彩色光谱图像211的状态。
并且,如图23所示,在触摸面板106a上仅显示通常光图像的情况下,主体处理装置43能够重叠显示用于变更通常光图像的色调的着色设定窗口230,通过使用触摸面板功能来触摸着色设定窗口203的指示器230a,来变更红色相对于蓝色的比率,由此,能够变更通常光图像的色调。
在仅显示彩色光谱图像的显示方式的情况下,如图24所示,该着色设定窗口203可以用作中心波长λ的波长选择窗口230。作为波长选择窗口230使用时,指示器230a指示波长,对指示器230a的各显示点分配多个中心波长,通过选择指示器230a的3个显示点,在波长选择窗口230中,也能够选择构成彩色光谱图像211的3个光谱图像。另外,选择3个光谱图像时,在波长选择窗口230的下方显示用于设定光谱图像的亮度的亮度设定窗口231,可以任意地设定各波长的光谱图像的亮度。
在仅显示彩色光谱图像的显示方式中,如图25所示,主体处理装置43可以在彩色光谱图像241附近,将来自被检体的光谱反射率242图表化并进行显示,例如,在光谱反射率242上提示构成彩色光谱图像241的3个光谱图像的波长λ1、λ2、λ3,通过触摸面板功能使该波长λ1、λ2、λ3可动,当波长λ1、λ2、λ3可变时,构成彩色光谱图像241的3个光谱图像也连动地变化。
并且,在仅显示彩色光谱图像的显示方式中,例如当操作设置在内窥镜101的操作部104上的指示开关部111的冻结开关(未图示)时,如图26所示,以动画方式显示的彩色光谱图像成为静止的冻结彩色光谱图像241。主体处理装置43在冻结彩色光谱图像241附近,显示可以在冻结彩色光谱图像241的彩色化中使用的、例如在上述设定画面中所设定的6个中心波长的光谱图像的缩略图像221~226。而且,利用与其他缩略图像不同的显示方式(例如不同的亮度或色调),来显示构成冻结彩色光谱图像241的3个光谱图像的缩略图像。在本实施例中,如图27所示,使用触摸面板功能,选择缩略图像221~226并操作选择决定按钮243,由此,能够任意地变更构成冻结彩色光谱图像241的3个光谱图像。进而,在本实施例中,通过使用触摸面板功能来操作确认按钮244,由此,能够在缩略图像221~226中显示基于所选择的3个光谱图像的动画的彩色光谱图像241。并且,在本实施例中,也可以不设置确认按钮244,仅通过选择决定按钮243的操作,自动地在缩略图像221~226中显示基于所选择的3个光谱图像的动画的彩色光谱图像241。
如上所述,在本实施例中,内窥镜装置主体105能够任意地变更构成彩色光谱图像的3个光谱图像,但是,该情况下,同时进行3个光谱图像的白平衡处理的变更。详细地讲,内窥镜装置主体105例如预先在数据存储部44中离散地存储图28所示的以3个波长λi、λj、λk为轴的三维数据表,在该三维数据表的各体素(Voxel)中存储有白平衡处理所使用的权重系数(kx、ky、kz),作为体素数据。然后,内窥镜装置主体105对波长λil、λjm、λkn的3个光谱图像Fl、Fm、Fn,通过例如“彩色光谱图像=kx×Fl+ky×Fm+kz×Fn”的运算,来进行白平衡处理。
另外,为了削减存储各体素数据的数据存储部44的存储容量,内窥镜装置主体105离散地存储三维数据表,所以,体素数据间的权重系数通过一般的线性插值来计算,从而进行白平衡处理。
在仅显示通常光观察图像的显示方式的情况下,如图29所示,主体处理装置43在通常光观察图像210上指定光谱图像显示框281,由此,能够在所指定的光谱图像显示框281的区域上重叠显示该区域的光谱图像。另外,如图30所示,该光谱图像显示框281通过触摸面板功能,能够任意地变更框的尺寸和位置。
并且,在本实施例中,使用波长作为设定参数来设定光谱图像的结构,但是不限于此,也可以使用光的到达深度即深度信息作为设定参数来指定,还可以使用血管强调这样的功能名称作为设定参数来指定。
进而,在本实施例中,也可以根据作为观察对象的脏器,自动地指定最适于观察的光谱图像的结构。这里,作为基于脏器的光谱图像的结构的指定方法,例如有如下方法等:根据来自操作部104内的ID部110的ID,识别使用了内窥镜101的脏器并进行指定的方法;利用触摸面板106a上的菜单开关进行指定的方法;通过读入记录有患者信息的PC卡的数据来进行指定的方法;以及通过场景理解模型对通常光观察图像进行图像处理,来自动识别脏器的方法。
并且,如图31所示,本实施例的内窥镜装置主体105在其背面设有多个板槽300,在该板槽300中能够插入设置可以扩张功能的功能扩张基板。另一方面,控制部44在触摸面板106a上显示图32所示的菜单窗口260,由此来展开可以执行的功能。在将没有插入设置功能扩张基板的控制部44默认时的功能分类为例如4个基本功能时,可以利用菜单窗口260,通过菜单1、2、3、4这样的标签261对其进行切换。除了菜单1、2、3、4的标签261以外,菜单窗口260具有多个功能扩张基板用的菜单标签262,在功能扩张基板没有放置在板槽300中的默认时,如图33所示,菜单标签262为空菜单。但是,当控制部44在板槽300中插入设置功能扩张基板时,如图34所示,能够通过菜单5这样的标签262a,从菜单窗口260展开所插入设置的功能扩张基板的功能的追加功能的菜单窗口。
该追加功能的菜单窗口以软件方式构成,当插入设置功能扩张基板时,控制部44识别功能扩张基板,自动生成与基本功能相同结构的菜单窗口,所以,不需要变更软件版本,或者,能够容易进行软件版本的升级。
并且,在本实施例中,利用触摸面板106a进行各操作,所以,不变更硬件,就能够利用软件版本的升级来容易地变更规格。
另外,在本实施例中,不需要利用触摸面板106a进行全部操作,也可以通过跟踪球或鼠标等指示设备进行操作,例如如图35所示,也可以通过波长选择用的专用键盘270来设定光谱图像的波长。并且,也可以对普通键盘的功能键分配波长设定功能。
如以上说明的那样,在本实施例中,在将光谱图像生成模式设为第1光谱图像生成模式的默认状态下,可以优先考虑通常光观察图像的画质,在显示监视器106上选择性地显示通常光观察图像和光谱图像,并且,通过操作指示开关部111的模式切换开关,将光谱图像生成模式切换为第2光谱图像生成模式,使来自灯15的光束透过光量限制滤波器16,与蓝色波长频带的光相比,使其他波长频带的光的光量减半,由此,可以优先考虑光谱图像的画质,在显示监视器106上选择性地显示通常光观察图像和光谱图像。
即,通过将光谱图像生成模式设定为第2光谱图像生成模式,使来自灯15的光束透过光量限制滤波器16,由此,能够将例如蓝色波长频带的光谱图像改善成与其他波长频带的光谱图像相同程度的S/N的图像信息。
另外,在本实施例中,光量限制滤波器16构成为可以在光路上插入/取出,但是也可以始终设置在光路上。并且,通过使设置在CCD 21上的颜色滤波器具有与光量限制滤波器同样的光谱特性,也可以省略光量限制滤波器16。
并且,在本实施例中,作为变形例,使用RGB原色型彩色滤波器,与此相对,也可以使用补色型彩色滤波器。该补色型滤波器的排列如图36所示,由G、Mg、Ye、Cy的各要素构成。另外,原色型彩色滤波器的各要素和补色型彩色滤波器的各要素之间的关系为,Mg=R+B、Cy=G+B、Ye=R+G。
该变形例的情况下,读出CCD 21的全部像素,对来自各颜色滤波器的图像进行信号处理或图像处理。在使用补色型滤波器的情况下,图2所示的S/H电路当然不是针对R·G·B进行的,而是分别针对G·Mg·Cy·Ye进行的,但是,能够利用3个基本光谱特性来近似生物体光谱反射率的部分为4个或4个以下。所以,由此,用于运算估计矩阵的维数从3变更为4。
(实施例2)
图37~图43涉及本发明的实施例2,图37是示出电子内窥镜装置的结构的框图,图38是示出图37的RGB旋转滤波器的结构的图,图39是示出第1光谱图像生成模式即在光路上没有光量限制滤波器时、透过图38的RGB旋转滤波器的光的光谱特性的图,图40是示出第2光谱图像生成模式即在光路上存在光量限制滤波器时、透过图38的RGB旋转滤波器的光的光谱特性的图,图41是示出图37的电子内窥镜装置的变形例的结构的框图,图42是示出图41的RGB旋转滤波器的结构的图,图43是示出图38的RGB旋转滤波器的变形例的结构的图。
实施例2几乎与实施例1相同,所以,仅说明不同点,对相同结构标注相同标号并省略说明。
本实施例与实施例1的主要不同点在于光源部41和CCD 21。在实施例1中,在CCD 21上设置图4所示的彩色滤波器,通过该彩色滤波器生成彩色信号,是所谓的同时式,与此相对,在本实施例中,按照RGB的顺序照射照明光,来生成彩色信号,是所谓的面次序式。
如图37所示,在本实施例的光源部41中,经由灯15、红外截止滤波器15a以及光量限制滤波器16的光透过RGB滤波器23。另外,与实施例1同样,光量限制滤波器16可以在光路上插入/取出。并且,RGB旋转滤波器23与RGB旋转滤波器控制部26连接,以规定的旋转速度进行旋转。
如图38所示,RGB旋转滤波器23由透过R频带的光的R滤波器部23r、透过G频带的光的G滤波器部23g以及透过B频带的光的B滤波器部23b构成。图39示出第1光谱图像生成模式即在光路上没有光量限制滤波器16时、透过RGB旋转滤波器23的光的光谱特性,图40示出第2光谱图像生成模式即在光路上存在光量限制滤波器16时、透过RGB旋转滤波器23的光的光谱特性。
作为本实施例中的光源部的动作,利用红外截止滤波器15a截止从灯15输出的光束中的不需要的红外成分,透过红外截止滤波器15a的光束选择性地经由光量限制滤波器16,并透过RGB旋转滤波器23,从而按照规定时间,作为R·G·B各自的照明光从光源部输出。并且,各个照明光在被检体内反射而由CCD 21接收。根据所照射的时间,利用设在内窥镜装置主体105中的切换部(未图示)对由CCD 21所获得的信号进行划分,分别输入到S/H电路433a~433c。即,在从光源部41经由R滤波器照射照明光的情况下,向S/H电路433a输入由CCD 21所获得的信号。另外,其他动作与实施例1相同,所以省略说明。
根据本实施例,与实施例1一样,通过将光谱图像生成模式设定为第2光谱图像生成模式,使来自灯15的光束透过光量限制滤波器16,由此,能够将例如蓝色波长频带的光谱图像改善成与其他波长频带的光谱图像相同程度的S/N的图像信息。
另外,在本实施例中,光量限制滤波器16构成为可以在光路上插入/取出,但是不限于此,通过如图42所示那样构成RGB旋转滤波器23,也可以如图41所示那样省略光量限制滤波器16。
即,如图42所示,旋转滤波器23构成为圆盘状,且是将中心作为旋转轴的双重结构,在外侧径部分配置有用于输出图39所示的光谱特性的面顺次光的构成第1滤波器组的R滤波器部23r1、G滤波器部23g1以及B滤波器部23b1,在内侧径部分配置有用于输出图40所示的光谱特性的面顺次光的构成第2滤波器组的R’滤波器部23r2、G’滤波器部23g2以及B’滤波器部23b2。
而且,如图41所示,通过控制部42进行旋转滤波器电动机26的驱动控制,使旋转滤波器23旋转,并且,通过控制部42由滤波器切换电动机17a进行径方向的移动(是与旋转滤波器23的光路垂直的移动,使旋转滤波器23的第1滤波器组或第2滤波器组选择性地在光路上移动)。
另外,在本实施例中,照射R·G·B的3波段的面顺次光,但是不限于此,旋转滤波器23也可以是如下的旋转滤波器:透过4波段以上的多波段、例如图43所示的4个不同频带的面顺次光I1、I2、I3、I4,来照射多波段的面顺次光。
该情况下,根据4个频带的信号,如式(6)~(8)那样估计光谱图像。
[数6]
F 1 F 2 F 3 = K I 1 I 2 I 3 I 4
K = k 1 k 2 k 3 k 4 l 1 l 2 l 3 l 4 m 1 m 2 m 3 m 4 · · · ( 6 )
在式(6)中,可以根据4个频带的信号,生成由3个波长构成的彩色光谱图像。
[数7]
F 1 = N I 1 I 2 I 3 I 4
N=(n1 n2 n3 n4)        …(7)
在式(7)中,可以根据4个频带的信号,生成由1个波长构成的单色光谱图像。
[数8]
F 1 F 2 F 3 F 4 = O I 1 I 2 I 3 I 4
O = o 1 o 2 o 3 o 4 p 1 p 2 p 3 p 4 q 1 q 2 q 3 q 4 r 1 r 2 r 3 r 4 · · · ( 8 )
在式(8)中,根据4个频带的信号生成4个波长的光谱图像,利用显示图像生成部439选择4个光谱图像中的3个,由此,能够生成彩色光谱图像。
在上述的照射多波段的面顺次光的结构中,可以根据4个频带的信号来估计光谱图像,所以,能够更高精度地估计光谱图像。
另外,在上述的照射多波段的面顺次光的结构中,也可以通过多色的LED、LD来实现不同频带的多波段光。
本发明不限于上述实施例,在不改变本发明的主旨的范围内,可以进行各种变更、改变等。
本申请是以2006年3月16日在日本申请的日本特愿2006-073183号为优先权主张的基础来申请的,并将上述公开内容引用在本申请的说明书、权利要求范围中。

Claims (5)

1.一种生物体观测装置,其具有:照明部,其向作为被检体的生物体照射光;和/或信号处理控制部,其对摄像部的动作进行控制并向显示装置输出摄像信号,所述摄像部根据来自该照明部的照明光,对从所述生物体反射的光进行光电转换并生成所述摄像信号,该生物体观测装置的特征在于,其具有:
光谱信号生成部,其根据所述摄像信号,通过信号处理来生成与光学波长窄频带的图像对应的光谱信号;以及
颜色调节部,在向所述显示装置输出所述光谱信号时,该颜色调节部按照形成该光谱信号的多个频带来调节色调,
另外,在从所述照明部到所述摄像部的光路上还设置有光谱特性控制部,该光谱特性控制部控制针对所述光路上的光的光谱特性。
2.根据权利要求1所述的生物体观测装置,其特征在于,
所述光谱特性控制部是对所述照明光的光谱强度特性进行控制的光谱强度控制部和/或对所述摄像部中的摄像元件的光谱灵敏度特性进行控制的摄像元件光谱灵敏度控制部。
3.根据权利要求1或2所述的生物体观测装置,其特征在于,
所述光谱特性控制部使规定波长频带的强度和/或灵敏度相对高于其他波长频带的强度和/或灵敏度。
4.根据权利要求1、2或3中的任一项所述的生物体观测装置,其特征在于,
所述光谱特性控制部使蓝色波长频带的强度和/或灵敏度相对高于其他波长频带的强度和/或灵敏度。
5.根据权利要求1、2、3或4中的任一项所述的生物体观测装置,其特征在于,
所述显示装置具有触摸面板功能,
并且具有信号生成控制部,该信号生成控制部通过所述触摸面板功能来控制所述光谱信号生成部。
CN2007800084664A 2006-03-16 2007-02-20 生物体观测装置 Active CN101400294B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2006073183A JP4951256B2 (ja) 2006-03-16 2006-03-16 生体観測装置
JP073183/2006 2006-03-16
PCT/JP2007/053088 WO2007108270A1 (ja) 2006-03-16 2007-02-20 生体観測装置

Publications (2)

Publication Number Publication Date
CN101400294A true CN101400294A (zh) 2009-04-01
CN101400294B CN101400294B (zh) 2011-03-02

Family

ID=38522306

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2007800084664A Active CN101400294B (zh) 2006-03-16 2007-02-20 生物体观测装置

Country Status (7)

Country Link
US (1) US8581970B2 (zh)
EP (1) EP1994875B1 (zh)
JP (1) JP4951256B2 (zh)
KR (1) KR101022585B1 (zh)
CN (1) CN101400294B (zh)
BR (1) BRPI0709580A2 (zh)
WO (1) WO2007108270A1 (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102440754A (zh) * 2010-10-12 2012-05-09 富士胶片株式会社 内窥镜装置
CN102613953A (zh) * 2011-01-27 2012-08-01 富士胶片株式会社 电子内窥镜系统
CN102695446A (zh) * 2009-12-28 2012-09-26 奥林巴斯株式会社 图像处理装置、电子设备、程序和图像处理方法
CN103908217A (zh) * 2012-12-28 2014-07-09 Hoya株式会社 电子内窥镜
CN105455778A (zh) * 2014-09-26 2016-04-06 精工爱普生株式会社 生物体测定用光源系统及测定装置
CN107427202A (zh) * 2015-03-26 2017-12-01 皇家飞利浦有限公司 用于照射人类或动物身体内部的感兴趣结构的设备、系统和方法

Families Citing this family (39)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4849985B2 (ja) * 2006-07-21 2012-01-11 富士フイルム株式会社 電子内視鏡システム
JP2009125411A (ja) * 2007-11-27 2009-06-11 Fujinon Corp 内視鏡画像処理方法および装置ならびにこれを用いた内視鏡システム
JP5246643B2 (ja) * 2007-12-19 2013-07-24 富士フイルム株式会社 撮像システムおよびプログラム
JP5039621B2 (ja) * 2008-03-25 2012-10-03 富士フイルム株式会社 電子内視鏡装置
JP2009240354A (ja) * 2008-03-28 2009-10-22 Fujinon Corp 電子内視鏡装置
JP5098030B2 (ja) * 2008-04-02 2012-12-12 富士フイルム株式会社 撮像装置、撮像方法、およびプログラム
EP3501384A3 (en) 2008-05-20 2019-10-16 University Health Network Method for fluorescence-based imaging and monitoring
JP5483522B2 (ja) * 2008-08-12 2014-05-07 富士フイルム株式会社 画像取得装置
JP2010051602A (ja) * 2008-08-29 2010-03-11 Fujifilm Corp 電子内視鏡装置および方法並びにプログラム
JP5127639B2 (ja) 2008-09-10 2013-01-23 富士フイルム株式会社 内視鏡システム、およびその作動方法
JP5203861B2 (ja) * 2008-09-10 2013-06-05 富士フイルム株式会社 内視鏡システム、およびその作動方法
EP2345359A4 (en) * 2008-10-17 2012-04-04 Olympus Corp Image generation device, endoscope system and image generation method
WO2010044432A1 (ja) * 2008-10-17 2010-04-22 オリンパスメディカルシステムズ株式会社 内視鏡システムおよび内視鏡画像処理装置
JP2010213746A (ja) * 2009-03-13 2010-09-30 Fujifilm Corp 内視鏡画像処理装置および方法ならびにプログラム
EP2386239A4 (en) 2009-05-12 2012-08-15 Olympus Medical Systems Corp IN VIVO IMAGING SYSTEM OF THE SUBJECT AND IN VIVO INTRODUCTION DEVICE IN THE FIELD
JP2010279579A (ja) * 2009-06-05 2010-12-16 Fujifilm Corp 画像取得方法および内視鏡装置
JP5460506B2 (ja) 2009-09-24 2014-04-02 富士フイルム株式会社 内視鏡装置の作動方法及び内視鏡装置
JP5460507B2 (ja) * 2009-09-24 2014-04-02 富士フイルム株式会社 内視鏡装置の作動方法及び内視鏡装置
DE112011100495T5 (de) * 2010-02-10 2013-01-03 Hoya Corporation Elektronisches Endoskopsystem
US9420153B2 (en) 2010-02-10 2016-08-16 Hoya Corporation Electronic endoscope system
JP5393534B2 (ja) * 2010-02-26 2014-01-22 Hoya株式会社 電子内視鏡装置
JP5385188B2 (ja) * 2010-03-26 2014-01-08 富士フイルム株式会社 電子内視鏡システム
JP5507376B2 (ja) * 2010-07-28 2014-05-28 三洋電機株式会社 撮像装置
JP5639464B2 (ja) * 2010-12-21 2014-12-10 富士フイルム株式会社 光計測システムおよび光計測システムの作動方法
JP5649947B2 (ja) * 2010-12-21 2015-01-07 富士フイルム株式会社 光計測システムおよび光計測システムの作動方法
JP5274591B2 (ja) * 2011-01-27 2013-08-28 富士フイルム株式会社 内視鏡システム、内視鏡システムのプロセッサ装置、及び内視鏡システムの作動方法
JP5554253B2 (ja) * 2011-01-27 2014-07-23 富士フイルム株式会社 電子内視鏡システム
US20130113904A1 (en) * 2011-11-08 2013-05-09 Capso Vision, Inc. System and Method for Multiple Viewing-Window Display of Computed Spectral Images
JP5863435B2 (ja) * 2011-12-15 2016-02-16 Hoya株式会社 画像信号処理装置
JP5872916B2 (ja) * 2012-01-25 2016-03-01 富士フイルム株式会社 内視鏡システム、内視鏡システムのプロセッサ装置、及び内視鏡システムの作動方法
JP5959987B2 (ja) * 2012-08-15 2016-08-02 Hoya株式会社 内視鏡システム
KR101941907B1 (ko) * 2013-01-03 2019-01-24 삼성전자주식회사 깊이 정보를 이용하는 내시경 및 깊이 정보를 이용하는 내시경에 의한 용종 검출 방법
CN103284681A (zh) * 2013-05-24 2013-09-11 中国科学院苏州生物医学工程技术研究所 一种血管内双光谱成像装置
JP5930474B2 (ja) 2013-09-27 2016-06-08 富士フイルム株式会社 内視鏡システム及びその作動方法
WO2015151703A1 (ja) * 2014-03-31 2015-10-08 富士フイルム株式会社 内視鏡システム及びその作動方法
ES2894912T3 (es) 2014-07-24 2022-02-16 Univ Health Network Recopilación y análisis de datos con fines de diagnóstico
CN105306896B (zh) * 2015-10-27 2018-07-10 杭州永控科技有限公司 基于光定位的案件卷宗移交方法及系统
JP6133474B2 (ja) * 2016-06-21 2017-05-24 Hoya株式会社 内視鏡システム
WO2019171703A1 (ja) * 2018-03-05 2019-09-12 オリンパス株式会社 内視鏡システム

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2068537B (en) * 1980-02-04 1984-11-14 Energy Conversion Devices Inc Examining biological materials
US5751672A (en) 1995-07-26 1998-05-12 Sony Corporation Compact disc changer utilizing disc database
US7892169B2 (en) * 2000-07-21 2011-02-22 Olympus Corporation Endoscope apparatus
JP3583731B2 (ja) * 2000-07-21 2004-11-04 オリンパス株式会社 内視鏡装置および光源装置
US6678398B2 (en) * 2000-09-18 2004-01-13 Sti Medical Systems, Inc. Dual mode real-time screening and rapid full-area, selective-spectral, remote imaging and analysis device and process
JP2003093336A (ja) * 2001-09-26 2003-04-02 Toshiba Corp 電子内視鏡装置
US7252633B2 (en) * 2002-10-18 2007-08-07 Olympus Corporation Remote controllable endoscope system
JP4294440B2 (ja) 2003-10-30 2009-07-15 オリンパス株式会社 画像処理装置
JP4598178B2 (ja) * 2003-12-25 2010-12-15 Hoya株式会社 電子内視鏡用プロセッサ、及び電子内視鏡システム
JP2005198750A (ja) * 2004-01-14 2005-07-28 Pentax Corp プロセッサおよび電子内視鏡システム
JP2005296200A (ja) * 2004-04-08 2005-10-27 Olympus Corp 内視鏡用画像処理装置

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102695446A (zh) * 2009-12-28 2012-09-26 奥林巴斯株式会社 图像处理装置、电子设备、程序和图像处理方法
US8913111B2 (en) 2009-12-28 2014-12-16 Olympus Corporation Image processing device, electronic apparatus, information storage device, and image processing method
CN102695446B (zh) * 2009-12-28 2015-07-08 奥林巴斯株式会社 图像处理装置、电子设备和图像处理方法
CN102440754A (zh) * 2010-10-12 2012-05-09 富士胶片株式会社 内窥镜装置
CN102440754B (zh) * 2010-10-12 2015-05-20 富士胶片株式会社 内窥镜装置
CN102613953A (zh) * 2011-01-27 2012-08-01 富士胶片株式会社 电子内窥镜系统
CN102613953B (zh) * 2011-01-27 2015-07-01 富士胶片株式会社 电子内窥镜系统
CN103908217A (zh) * 2012-12-28 2014-07-09 Hoya株式会社 电子内窥镜
US9949625B2 (en) 2012-12-28 2018-04-24 Hoya Corporation Electronic endoscope
US10986988B2 (en) 2012-12-28 2021-04-27 Hoya Corporation Electronic endoscope
CN105455778A (zh) * 2014-09-26 2016-04-06 精工爱普生株式会社 生物体测定用光源系统及测定装置
CN107427202A (zh) * 2015-03-26 2017-12-01 皇家飞利浦有限公司 用于照射人类或动物身体内部的感兴趣结构的设备、系统和方法

Also Published As

Publication number Publication date
KR101022585B1 (ko) 2011-03-16
US8581970B2 (en) 2013-11-12
US20090040298A1 (en) 2009-02-12
EP1994875A4 (en) 2010-04-28
JP2007244681A (ja) 2007-09-27
JP4951256B2 (ja) 2012-06-13
EP1994875A1 (en) 2008-11-26
EP1994875B1 (en) 2013-12-18
WO2007108270A1 (ja) 2007-09-27
KR20080095280A (ko) 2008-10-28
CN101400294B (zh) 2011-03-02
BRPI0709580A2 (pt) 2011-07-19

Similar Documents

Publication Publication Date Title
CN101400294B (zh) 生物体观测装置
CN100450426C (zh) 内窥镜装置
CN101163438B (zh) 生物体观测装置和用于生物体观测装置的信号处理装置
CN102188226B (zh) 电子内窥镜系统、电子内窥镜处理器和获取血管信息的方法
CN100490734C (zh) 内窥镜系统装置
EP2466874A2 (en) Image processing device
JP5977772B2 (ja) 内視鏡システム、内視鏡システムのプロセッサ装置、内視鏡システムの作動方法、プロセッサ装置の作動方法
JP5222934B2 (ja) 内視鏡システム、内視鏡システムのプロセッサ装置、及び内視鏡システムの作動方法
US20110245642A1 (en) Electronic endoscope system
CN102197983A (zh) 电子内窥镜系统
CN103070658A (zh) 内窥镜系统及光源装置
CN105212885B (zh) 医用图像处理装置及其工作方法、以及内窥镜系统
JP2019081044A (ja) 画像処理装置、画像処理装置の作動方法、および画像処理プログラム
JP2000262459A (ja) 内視鏡装置
JP2003215469A (ja) 内視鏡装置
CN103857322B (zh) 内窥镜系统
WO2014084134A1 (ja) 観察装置
EP1864605A1 (en) Signal processing device for electronic endoscope, and electronic endoscope device
CN107105987B (zh) 图像处理装置及其工作方法、记录介质和内窥镜装置
CN102613953A (zh) 电子内窥镜系统
CN103732116A (zh) 内窥镜系统、处理器设备和图像显示方法
CN1947651A (zh) 内视镜装置
CN106163367A (zh) 医用图像处理装置及其工作方法以及内窥镜系统
CN104939791B (zh) 医用图像处理装置及其工作方法
EP2465410B1 (en) Image processing device

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
C41 Transfer of patent application or patent right or utility model
TR01 Transfer of patent right

Effective date of registration: 20151124

Address after: Tokyo, Japan, Japan

Patentee after: Olympus Corporation

Address before: Tokyo, Japan

Patentee before: Olympus Medical Systems Corp.