CN109561812B - 图像处理装置 - Google Patents

图像处理装置 Download PDF

Info

Publication number
CN109561812B
CN109561812B CN201780043850.1A CN201780043850A CN109561812B CN 109561812 B CN109561812 B CN 109561812B CN 201780043850 A CN201780043850 A CN 201780043850A CN 109561812 B CN109561812 B CN 109561812B
Authority
CN
China
Prior art keywords
image
light
image signal
band light
blood
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201780043850.1A
Other languages
English (en)
Other versions
CN109561812A (zh
Inventor
久保圭
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Olympus Corp
Original Assignee
Olympus Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Olympus Corp filed Critical Olympus Corp
Publication of CN109561812A publication Critical patent/CN109561812A/zh
Application granted granted Critical
Publication of CN109561812B publication Critical patent/CN109561812B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/02Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
    • A61B5/02042Determining blood loss or bleeding, e.g. during a surgical procedure
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002Operational features of endoscopes
    • A61B1/00004Operational features of endoscopes characterised by electronic signal processing
    • A61B1/00009Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
    • A61B1/000094Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope extracting biological structures
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00064Constructional details of the endoscope body
    • A61B1/00105Constructional details of the endoscope body characterised by modular construction
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/04Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
    • A61B1/042Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances characterised by a proximal camera, e.g. a CCD camera
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/04Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
    • A61B1/045Control thereof
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/04Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
    • A61B1/05Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances characterised by the image sensor, e.g. camera, being in the distal end portion
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/06Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
    • A61B1/0638Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements providing two or more wavelengths
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/06Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
    • A61B1/0646Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements with illumination filters
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/06Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
    • A61B1/0661Endoscope light sources
    • A61B1/0684Endoscope light sources using light emitting diodes [LED]
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0082Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence adapted for particular medical purposes
    • A61B5/0084Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence adapted for particular medical purposes for introduction into the body, e.g. by catheters
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/145Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue
    • A61B5/1455Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue using optical sensors, e.g. spectral photometrical oximeters
    • A61B5/1459Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue using optical sensors, e.g. spectral photometrical oximeters invasive, e.g. introduced into the body by a catheter
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B23/00Telescopes, e.g. binoculars; Periscopes; Instruments for viewing the inside of hollow bodies; Viewfinders; Optical aiming or sighting devices
    • G02B23/24Instruments or systems for viewing the inside of hollow bodies, e.g. fibrescopes
    • G02B23/2476Non-optical details, e.g. housings, mountings, supports
    • G02B23/2484Arrangements in relation to a camera or imaging device
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0012Biomedical image inspection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/11Region-based segmentation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/56Cameras or camera modules comprising electronic image sensors; Control thereof provided with illuminating means
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/04Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
    • A61B1/055Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances having rod-lens arrangements
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B7/00Mountings, adjusting means, or light-tight connections, for optical elements
    • G02B7/006Filter holders
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10024Color image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10068Endoscopic image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10141Special mode during image acquisition
    • G06T2207/10152Varying illumination
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30004Biomedical image processing
    • G06T2207/30101Blood vessel; Artery; Vein; Vascular
    • G06T2207/30104Vascular flow; Blood flow; Perfusion
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50Constructional details
    • H04N23/555Constructional details for picking-up images in sites, inaccessible due to their dimensions or hazardous conditions, e.g. endoscopes or borescopes

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Surgery (AREA)
  • Physics & Mathematics (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Public Health (AREA)
  • Biophysics (AREA)
  • Animal Behavior & Ethology (AREA)
  • Molecular Biology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Veterinary Medicine (AREA)
  • Biomedical Technology (AREA)
  • Pathology (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Optics & Photonics (AREA)
  • Radiology & Medical Imaging (AREA)
  • Signal Processing (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Physiology (AREA)
  • Quality & Reliability (AREA)
  • Cardiology (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Microelectronics & Electronic Packaging (AREA)
  • Astronomy & Astrophysics (AREA)
  • Endoscopes (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

处理器(13)具有:区域提取部(45),其被输入对包含出血点的被检体的图像进行图像化而得的第1图像信号,在第1图像信号中,提取表示血液的区域中的血液浓度比出血点低的血液积存区域,该被检体被照射在绿色波段内包含血液吸收最小的波长的第1窄带光;以及亮度值增加部(46),其在第1图像信号和第2图像信号中的任意一方中,使血液积存区域的亮度值增大,该第2图像信号是对被照射波长比第1窄带光短且血液吸收高的第2窄带光的被检体的图像进行图像化而得的。

Description

图像处理装置
技术领域
本发明涉及图像处理装置,特别涉及在粘膜表面被血液覆盖时能够清楚地显示发生出血的部位即出血点的图像处理装置。
背景技术
以往,在医疗领域中,使用内窥镜进行低侵袭的各种检查和手术。手术医生在体腔内插入内窥镜,对由设置在内窥镜插入部的前端部的摄像装置进行摄像的被检体进行观察,根据需要,能够使用贯穿插入到处置器械通道内的处置器械对病变部进行处置。使用内窥镜的手术不用进行开腹等,因此,具有患者的身体的负担少这样的优点。
内窥镜装置构成为包含内窥镜、与内窥镜连接的图像处理装置、观察监视器。通过设置在内窥镜插入部的前端部的摄像元件对病变部进行摄像,摄像图像在图像处理装置中进行图像处理,在监视器中显示该图像处理后的图像。手术医生能够一边观察该监视器中显示的图像,一边进行诊断或必要的处置。
此外,在内窥镜装置中,不仅能够进行使用白色光的通常光观察,为了对内部的血管进行观察,还能够进行使用红外光等特殊光的特殊光观察。
在红外内窥镜装置的情况下,例如,将具有在波长805nm附近的近红外光处呈吸收峰值的特性的吲哚菁绿(ICG)作为药剂注入患者的血液中。然后,从光源装置以时分方式对被检体照射波长805nm附近和930nm附近的红外光。由CCD进行摄像而得的被检体像的信号被输入到红外内窥镜装置的处理器。关于这种红外内窥镜装置,提出了如下装置:处理器将波长805nm附近的像分配给绿色信号(G),将波长930nm附近的像分配给蓝色信号(B),将其输出到监视器。将通过ICG吸收多的图像805nm附近的红外光的像分配给绿色,因此,手术医生能够以高对比度观察ICG投放时的红外图像。
例如,在使用内窥镜切开病变部所在的粘膜下层并进行剥离的粘膜下层剥离术(以下称为ESD(Endoscopic Submucosal Dissection))等中,手术医生一边确认这种血管的位置,一边进行切开等处置,以使得不会通过电刀等切开粘膜中的比较粗的血管。可能发生重度出血的血管在粘膜下层~固有肌层分布。在ESD等手术中产生重度出血的情况下,每次必须进行止血作业,因此,手术时间变长。
但是,为了使用上述红外内窥镜装置确认血管的位置,如上所述,需要进行静脉注射ICG等药剂这样的烦杂作业。
此外,在上述红外内窥镜装置的情况下,照明光的波长是近红外光的波长,因此,还存在图像中的血管模糊这样的问题。
因此,如国际公开第2013/145407号所公开的那样,提出了如下的内窥镜装置:生成在585nm~615nm的范围内具有分光特性的峰值波长的波段的图像信号,根据该图像信号进行图像显示,由此,不用进行药剂投放这样的烦杂作业,并且,能够清楚地显示粘膜深部的血管。
在该提出的内窥镜装置中,在粘膜表面被血液覆盖时,能够以能够看到发生出血的部位即出血点的方式在监视器中进行显示。
但是,至此,作为在粘膜表面被血液覆盖时、能够以能够清楚地看到发生出血的部位即出血点的方式在监视器中显示的波段,仅为在585nm~615nm的范围内具有分光特性的峰值波长的波段。
因此,本发明的目的在于,提供如下的图像处理装置:能够使用585nm~615nm的范围以外的波段,使监视器显示为,在粘膜表面被血液覆盖时能够清楚地看到发生出血的部位即出血点。
发明内容
用于解决课题的手段
本发明的一个方式的图像处理装置具有:区域提取部,其被输入对包含出血点的被检体的图像进行图像化而得的第1图像信号,在所述第1图像信号中,提取表示血液的区域中的血液浓度比出血点低的血液积存区域,该被检体被照射在绿色波段内包含所述血液的吸收最小的波长的第1窄带光;以及亮度值增大部,其在所述第1图像信号和第2图像信号中的任意一方中,使所述血液积存区域的亮度值增大,该第2图像信号是对被照射第2窄带光的所述被检体的图像进行图像化而得的,该第2窄带光的波长比所述第1窄带光短且所述血液的吸收高。
附图说明
图1是示出具有本发明的第1实施方式的图像处理装置的内窥镜装置的结构的结构图。
图2是示出本发明的第1实施方式的血液对光的吸收特性和出血点观察模式时的各光源的射出光的波段的例子的图。
图3是示出本发明的第1实施方式的滤镜35对光的透射特性的图。
图4是本发明的第1实施方式的图像处理电路中的出血点观察模式用的图像处理部的框图。
图5是用于说明本发明的第1实施方式的图像处理电路22中进行处理而生成的图像的变化的图。
图6是示出本发明的第1实施方式的出血点观察模式中的监视器15中显示的内窥镜图像的显示例的图。
图7是本发明的第1实施方式的变形例1的图像处理电路22中的出血点观察模式用的图像处理部的框图。
图8是用于说明本发明的第1实施方式的变形例1的图像处理电路22中的图像的处理的图。
图9是本发明的第1实施方式的变形例2的图像处理电路22中的出血点观察模式用的图像处理部的框图。
图10是用于说明本发明的第1实施方式的变形例2的图像处理电路22中的图像的处理的图。
图11是示出具有本发明的第3实施方式的图像处理装置的内窥镜装置的结构的结构图。
图12是示出具有本发明的第4实施方式的图像处理装置的内窥镜装置1C的结构的结构图。
图13是示出本发明的第4实施方式的滤镜53的结构的图。
图14是示出具有本发明的第5实施方式的图像处理装置的内窥镜装置1D的结构的结构图。
图15是示出本发明的第5实施方式的旋转滤镜53A的结构的图。
具体实施方式
下面,参照附图对本发明的实施方式进行说明。
(第1实施方式)
图1是示出具有本实施方式的图像处理装置的内窥镜装置的结构的结构图。
内窥镜装置1构成为包含硬性镜11、摄像头12、处理器13、光源装置14、监视器15和观察模式切换按钮16。摄像头12通过缆线17而与处理器13连接。处理器13通过缆线18而与光源装置14连接。
硬性镜11是如下的硬性镜:具有细长的插入部11a、设置在插入部11a的基端的把持部11b、设置在把持部11b的基端部的目镜部11c。在把持部11b设置有光导连接器11d。在目镜部11c内置有透镜11e。在光导连接器11d能够连接从光源装置14延伸出的光导缆线19的一端。
在插入部11a的前端部设置有观察窗(未图示)和照明窗(未图示)。从观察窗入射的光通过设置在插入部11a内的棒状透镜等光学系统从透镜11e射出。来自光源装置14的照明光通过光导缆线19内的光导入射到光导连接器11d。入射到光导连接器11d的照明光通过设置在插入部11a内的光导等光学系统从照明窗射出。
如箭头所示,硬性镜11的目镜部11c能够装配在摄像头12上。
摄像头12内置有透镜系统(未图示)和摄像部12a。摄像部12a具有接收通过该透镜系统的光的受光面,并具有对接收到的像进行光电转换的摄像元件12b。
这里,摄像元件12b是具有片上滤色器的CMOS图像传感器。滤色器是光的3原色RGB的滤镜。
另外,这里,硬性镜11和具有摄像元件12b的摄像头12分开,但是,硬性镜11也可以与摄像头12一体。因此,通过硬性镜11和摄像头12构成具有摄像元件的内窥镜。
摄像部12a经由缆线17内的信号线将摄像信号输出到处理器13。
处理器13是包含系统控制电路21和图像处理电路22的图像处理装置。
系统控制电路21包含中央处理装置(以下称为CPU)、ROM、RAM,进行摄像头12的摄像部12a、图像处理电路22和光源装置14的控制。在ROM中存储有用于实现内窥镜装置1的各种功能的软件程序。
处理器13具有未图示的操作面板,用户即手术医生或护士等通过对操作面板和观察模式切换按钮16进行操作,能够进行内窥镜装置1的动作模式的设定或变更、各种指示和各种调整。
由此,CPU从ROM读出并执行与用户的指示对应的程序,由此,系统控制电路21进行内窥镜装置1的整体的动作的控制,并且,根据用户的指示进行摄像部12a和光源装置14的控制。
图像处理电路22接收来自摄像部12a的摄像信号,对摄像信号进行各种图像处理。
内窥镜装置1具有3个观察模式、这里为通常光观察模式、窄带光观察模式和出血点观察模式。
通常光观察模式是如下模式:在对被检体照射白色光时,生成通过来自被检体的反射光而得到的被检体像的图像,将该图像信号输出到监视器15。
窄带光观察模式是如下模式:对被检体照射1个或2个以上的规定的窄带光(这里为2个窄带光),生成通过其反射光而得到的被检体像的图像,将该图像信号输出到监视器15。在观察粘膜表层的毛细血管等时,利用窄带光观察模式。
出血点观察模式是如下模式:为了显示被检体的出血点,对被检体照射1个或2个以上的规定的窄带光(这里为3个窄带光),生成通过其反射光而得到的被检体像的图像,将该图像信号输出到监视器15。在粘膜表面被血液覆盖时,在确认发生出血的部位即出血点时利用出血点观察模式。
观察模式切换按钮16与系统控制电路21连接。用户对观察模式切换按钮16进行操作,能够从3个观察模式中选择期望的观察模式。
另外,这里,观察模式切换按钮16是独立的操作部件,但是,也可以设置在处理器13的操作面板(未图示)上。
表示由观察模式切换按钮16选择出的观察模式的观察模式信号被输入到系统控制电路21。系统控制电路21将与观察模式信号对应的控制信号供给到图像处理电路22。
图像处理电路22根据来自系统控制电路21的控制信号对摄像信号进行处理,生成内窥镜图像信号并将其输出到监视器15。即,图像处理电路22执行与观察模式对应的图像处理。
光源装置14具有光源控制电路31、多个(这里为4个)光源32a、32b、32c、32d、多个(这里为4个)反射镜33a、33b、33c、33d、会聚透镜34、滤镜35、滤镜驱动部36。
光源控制电路31包含CPU、ROM、RAM,根据经由缆线18中的信号线的来自处理器13的控制信号,对光源装置14内的各部进行控制。
光源32a是射出中心波长为410nm、半值宽度为10nm的窄带光的发光二极管(以下称为LED)(V-LED)。光源32a是射出紫色的窄带光的发光元件。从光源32a射出的光透射过摄像部12a的摄像元件12b的滤色器的蓝色部分。即,光源32a射出中心波长为410nm的窄带光NBL1。
光源32b是射出中心波长为460nm、半值宽度为10nm的窄带光的LED(B-LED)。光源32b是射出蓝色的窄带光的发光元件。从光源32b射出的光透射过摄像部12a的摄像元件12b的滤色器的蓝色部分。即,光源32b射出中心波长为460nm的窄带光NBL2。
光源32c是射出中心波长为540nm、半值宽度为30nm的窄带光的LED(G-LED)。光源32c是射出绿色的窄带光的发光元件。从光源32c射出的光透射过摄像部12a的摄像元件12b的滤色器的绿色部分。即,光源32c射出中心波长为540nm的窄带光NBL3。
光源32d是射出中心波长为630nm、半值宽度为10nm的窄带光的LED(R-LED)。光源32d是射出红色的窄带光的发光元件。从光源32d射出的光透射过摄像部12a的摄像元件12b的滤色器的红色部分。即,光源32d射出中心波长为630nm的窄带光NBL4。
另外,这里,各光源是LED,但是,也可以使多个光源的全部或一部分成为组合了激光二极管和荧光体而得到的部件。
反射镜33a、33b、33c、33d(下面,在指4个反射镜或任意一个反射镜时称为反射镜33)分别是分色镜。
反射镜33a是在内部的镜面反射中心波长为410nm的窄带光NBL1且透射其他波长的光的光学部件。
反射镜33b是在内部的镜面反射中心波长为460nm的窄带光NBL2且透射其他波长的光的光学部件。
反射镜33c是在内部的镜面反射中心波长为540nm的窄带光NBL3且透射其他波长的光的光学部件。
反射镜33d是在内部的镜面反射中心波长为630nm的窄带光NBL4且透射其他波长的光的光学部件。
由此,从光源32a射出的窄带光NBL1在反射镜33a进行反射而朝向会聚透镜34。从光源32b射出的窄带光NBL2在反射镜33b进行反射,透射过反射镜33a而朝向会聚透镜34。从光源32c射出的窄带光NBL3在反射镜33c进行反射,透射过反射镜33a和33b而朝向会聚透镜34。从光源32d射出的窄带光NBL4在反射镜33d进行反射,透射过反射镜33a、33b和33c而朝向会聚透镜34。
会聚透镜34将来自4个反射镜33a~33d的光集中在光导缆线19中的光导的基端面。来自会聚透镜34的光从光导缆线19中的光导的前端面射出,经由光导连接器11d供给到硬性镜11。入射到光导连接器11d的光作为照明光从插入部11a的照明窗射出。
滤镜35配置在光源32c的射出侧,配置成能够插入光源32c与反射镜33c之间。滤镜35仅透射规定的波段、这里指中心波长为515nm、半值宽度为10nm的波段的窄带光NBL31。
另外,中心波长在505nm~515nm的范围内即可。
滤镜35能够通过滤镜驱动部36向从光源32c射出的光的光路上的位置或从该光路偏离的位置中的任意一方移动。
滤镜驱动部36具有电磁式致动器等驱动机构,根据来自光源控制电路31的控制信号对滤镜35的位置进行变更。
在通常光观察模式和窄带光观察模式时,如图1中实线所示,滤镜35以躲避在从光源32c射出的光的光路偏离的位置的方式进行移动。在出血点观察模式时,如图1中双点划线所示,滤镜35以配置在从光源32c射出的光的光路上的位置的方式进行移动。
在通常光观察模式时,向3个光源32b、32c、32d供给电流,从光源装置14同时射出窄带光NBL2、窄带光NBL3和窄带光NBL4。
在窄带光观察模式时,向2个光源32a、32c供给电流,从光源装置14同时射出窄带光NBL1和窄带光NBL3。
在出血点观察模式时,向3个光源32b、32c、32d供给电流,并且,滤镜35配置在光源32c的射出侧,从光源装置14同时射出窄带光NBL2、光窄带光NBL4和中心波长为515nm的窄带光NBL31。
另外,在通常光观察模式中,也可以还向光源32a供给电流,与上述3个窄带光NBL2、NBL3、NBL4一起,还向被检体照射窄带光NBL1。
图2是示出血液的光的吸收特性和出血点观察模式时的各光源的射出光的波段的例子的图。
图2示出动脉血的吸光特性,图2的纵轴示出动脉血对光的吸收度,横轴示出光的波段。实线是原始的动脉血即动脉血自身的吸光度的曲线图,虚线是用水稀释后的动脉血的吸光度的曲线图。这里,动脉血中的氧化血红蛋白(HbO2)与脱氧血红蛋白(Hb)的比率为HbO2:Hb=97.5:2.5。
单点划线的曲线图G1示出中心波长为460nm的波段NBL2的照明光的强度分布,单点划线的曲线图G2示出中心波长为515nm的波段NBL31的照明光的强度分布,单点划线的曲线图G3示出中心波长为630nm的波段NBL4的照明光的强度分布。
如图2所示,在原始的动脉血和用水稀释后的动脉血中,血液中的血红蛋白的吸光特性不同,特别地,与以往为了显示出血点而使用的中心波长为600nm的波段的光同样,中心波长为515nm的波段NBL31的光的吸收特性降低。
关于中心波长为460nm的波段NBL2的光,在原始的动脉血和用水稀释后的动脉血中,血液中的血红蛋白的吸收特性不同,但是,中心波长为460nm的波段NBL2的光的吸收特性整体高。因此,由中心波长为460nm的波段的光生成的图像整体暗,无法判别原始的动脉血的图像区域和用水稀释后的动脉血的图像区域。
另一方面,关于中心波长为630nm的波段NBL4的光,在原始的动脉血和用水稀释后的动脉血中,血液中的血红蛋白的吸收特性也不同,但是,中心波长为630nm的波段NBL4的光的吸收特性整体低。因此,由中心波长为630nm的波段NBL4的光生成的图像整体亮,无法判别原始的动脉血的图像区域和用水稀释后的动脉血的图像区域。
如上所述,中心波长为515nm的波段光NBL31的血红蛋白的吸收特性与中心波长为600nm的波段光不同,但是,大致同样地低。但是,中心波长为515nm的波段光NBL31的血红蛋白的吸收特性不像中心波长为600nm的波段的光那么低。
因此,如果提高由中心波长为515nm的波段光NBL31生成的图像的亮度,则能够得到能够判别原始的动脉血的图像区域和用水稀释后的动脉血的图像区域的对比度高的图像。
图3是示出滤镜35的光的透射特性的图。
滤镜35是仅透射中心波长为540nm的窄带光NBL3中的中心波长为515nm的窄带光NBL31的滤镜。图3的横轴示出波段,纵轴示出透射率T。
光源32c射出图3中虚线所示的中心波长为540nm的窄带光NBL3,但是,当透射过滤镜35时,从滤镜35射出图3中实线所示的中心波长为515nm、半值宽度为±10nm的窄带光NBL31。
由此,从光源32c射出的光透射过滤镜35时,成为窄带光NBL31。
另外,这里,使用仅透射中心波长为515nm的窄带光NBL31的滤镜35,滤镜35以能够在光路中出入的方式配置在光源32c与反射镜33c之间,但是,如图1中双点划线所示,也可以将透射窄带光NBL2、窄带光NBL31、窄带光NBL4的三峰性滤镜37,以能够在来自反射镜33a的光路中出入的方式配置在反射镜33a与会聚透镜34之间。三峰性滤镜37被滤镜驱动部(未图示)驱动,以在出血点观察模式中配置在反射镜33a与会聚透镜34之间。
如上所述,光源装置14具有射出绿色波段的光的发光元件即光源32c、仅透射绿色波段的光中的包含血液吸收最小的波长的窄带光NBL31并进行射出的滤镜35、射出波长比绿色波段短且血液吸收高的窄带光NBL2的发光元件即光源32b、射出波长比绿色波段长且血液吸收低的窄带光NBL4的发光元件即光源32d。
返回图1,图像处理电路22对来自摄像部12a的摄像信号实施与用户即手术医生的设定和观察模式对应的处理。
在通常光观察模式中,图像处理电路22对来自摄像部12a的摄像信号进行处理,生成BGR这3个图像,将其输出到监视器15的BGR这3个颜色通道,由此,在监视器15中显示对被检体照射白色光时的内窥镜图像。如上所述,在通常光观察模式中,对被检体照射来自3个光源32b、32c、32d的光。
在窄带光观察模式中,图像处理电路22对来自摄像部12a的摄像信号进行处理,生成BG这2个图像,将B图像分配给监视器15的B和G通道,将G图像分配给R通道,将其输出到监视器15的3个颜色通道,由此,在监视器15中显示对被检体照射规定的窄带光时的内窥镜图像。如上所述,在窄带光观察模式中,对被检体照射来自2个光源32a、32c的光。
在出血点观察模式中,图像处理电路22对来自摄像部12a的摄像信号进行处理,生成BGR这3个图像,将B图像分配给监视器15的B通道,将G图像分配给G通道,将R图像分配给监视器15的R通道,将其输出到监视器15的BGR这3个颜色通道,由此,在监视器15中显示对出血点进行了强调的内窥镜图像。如上所述,在出血点观察模式中,对被检体照射来自3个光源32b、32c、32d的光,但是,来自光源32c的光通过滤镜35成为中心波长为515nm的窄带光NBL31,对被检体进行照射。
通常光观察模式和窄带光观察模式的图像处理是公知的,因此,这里对出血点观察模式的图像处理进行说明。
图4是图像处理电路中的出血点观察模式用的图像处理部的框图。图4仅示出出血点观察模式用的处理块,省略其他观察模式用的处理块等。
在图像处理电路22中,根据来自摄像部12a的摄像信号,生成与摄像部12a的滤色器中的蓝色、绿色和红色滤色器对应的3个图像BP、GP、RP。
与蓝色滤色器对应的第1图像BP是根据中心波长为460nm的窄带光NBL2的反射光生成的图像。
与绿色滤色器对应的第2图像GP是根据中心波长为515nm的窄带光NBL31的反射光生成的图像。
与红色滤色器对应的第3图像RP是根据中心波长为630nm的窄带光NBL4的反射光生成的图像。
图像处理电路22包含3个增益调整部41、42、43、减法部44、区域提取部45、亮度值增加部46。
增益调整部41、42、43是根据观察模式分别对第1图像BP、第2图像GP、第3图像RP的亮度进行调整的电路。在增益调整部41、42、43中,对第1图像BP、第2图像GP和第3图像RP中的2个或3个图像的亮度进行调整,以使得平均亮度值彼此大致相同。增益调整部41、42、43分别输出亮度调整后的第1图像BPa、第2图像GPa和第3图像RPa。
减法部44是从第2图像GPa中减去第1图像BPa而输出第2图像GPa与第1图像BPa的差分图像(GPa-BPa)的电路。通过从第2图像GPa中的各像素的像素值中减去第1图像GPa中的对应像素的像素值,生成差分图像(GPa-BPa)。
差分图像(GPa-BPa)示出第1图像BPa与第2图像GPa之间的差异。第1图像BPa与第2图像GPa之间的差异度由第1图像BPa的图像信号中的各像素和与该各像素对应的第2图像GPa的图像信号中的像素的差分表示。
区域提取部45被输入对包含出血点的被检体的图像进行图像化而得的图像信号,在该图像信号中,提取表示血液的区域中的血液浓度比出血点低的血液积存区域,该被检体被照射在绿色波段内包含血液吸收最小的波长的窄带光NBL31。
这里,区域提取部45是从来自减法部44的差分图像中提取各像素的像素值为规定的像素值以上的区域的电路。
即,区域提取部45被输入具有多个像素的图像信号作为第1图像BPa的图像信号,并被输入具有多个像素的图像信号作为第2图像GPa的图像信号,按照每个像素计算表示第2图像GPa的图像信号中的各像素和与各像素对应的第1图像BPa的图像信号中的像素的差异的差异度,提取该差异度高于阈值的像素的区域作为血液积存区域,该阈值用于提取表示血液的区域中的血液积存区域。
亮度值增加部46构成在第2图像GPa中使血液积存区域的亮度值增大的亮度值增大部。
这里,亮度值增加部46是如下的电路:增加区域提取部45中提取出的区域的图像(下面称为提取区域图像)的像素值即亮度值,以使得与第3图像RPa中的与提取区域ER对应的区域的亮度值大致相同。
另外,这里,通过基于减法部44的减法处理提取出提取区域ER,但是,也可以通过除法处理判定对应的像素彼此的像素值的比率为规定的值以上或以下,由此提取出提取区域ER。
增益调整部41中进行增益调整后的第1图像BPa被分配给监视器15的蓝色(B)通道。
对亮度值增加部46中增加了亮度值的提取区域ER的图像和除了提取区域ER以外的第2图像GPa中的图像进行合成而得到的合成图像GPb被分配给监视器15的绿色(G)通道。
如上所述,如图2所示,与中心波长为600nm的窄带光相比,中心波长为515nm的窄带光NBL31的吸光度高,因此,与水混合后的血液的区域的图像变暗。因此,通过亮度值增加部46,第2图像GPa中的提取区域ER的多个像素的像素值增加。
换言之,亮度值增加部46使第2图像GPa中的提取区域ER的多个像素的亮度值增加,由此,生成虚拟的中心波长为600nm的窄带光的提取区域的图像。
增益调整部43中进行增益调整后的第3图像RPa被分配给监视器15的红色(R)通道。
即,增益调整部41、43和亮度值增加部46构成图像生成部,该图像生成部生成将第1图像BPa的图像信号、合成图像GPb的图像信号和第3图像RPa的图像信号分别分配给不同颜色的图像信号。
图5是用于说明图像处理电路22中进行处理而生成的图像的变化的图。
针对由3个增益调整部41、42、43进行增益调整后的第1、第2和第3图像BPa、GPa、RPa中的第2图像GPa和第1图像BPa,通过减法部44进行减法处理,生成差分图像(GPa-BPa)。
差分图像(GPa-BPa)被输入到区域提取部45,区域提取部45判定差分图像(GPa-BPa)中的各像素的像素值是否为规定的阈值以上,由此得到提取区域ER。
亮度值增加部46生成仅使提取区域ER中的多个像素的像素值增加、以使得与第3图像RPa中的与提取区域ER对应的区域中的多个像素的像素值例如平均值大致相同的区域图像AR。进而,亮度值增加部46生成对所生成的区域图像AR和第2图像GPa中的提取区域ER以外的区域的图像进行合成而得到的合成图像GPb并进行输出。即,合成图像GPb中的提取区域ER以外的区域的像素的像素值不被校正,是与第2图像GPa中的像素的像素值相同的值。
第1图像BPa的图像信号被分配给监视器15的蓝色(B)通道,合成图像GP2b的图像信号被分配给监视器15的绿色(G)通道,第3图像RPa的图像信号被分配给监视器15的红色(R)通道,而输出到监视器15。
如上所述,被检体被照射中心波长为515nm的窄带光NBL31、中心波长为460nm的波段光NBL2和中心波长为630nm的波段光NBL4,处理器13根据接收到来自该被检体的反射光的摄像元件12b输出的摄像信号,生成被照射窄带光NBL31的包含表示血液的区域中的出血点的被检体的第2图像GPa的图像信号、被照射波段光NBL2的被检体的第1图像BPa的图像信号和被照射波段光NBL4的被检体的第3图像RPa的图像信号,在第2图像GPa的图像信号中,提取血液浓度比出血点低的血液积存区域,使提取出的血液积存区域的亮度值增大,输出第1图像BPa的图像信号、合成图像GPb的图像信号和第3图像RPa的图像信号。
图6是示出出血点观察模式中的监视器15中显示的内窥镜图像的显示例的图。使内窥镜装置1成为出血点观察模式,在观察一部分被血液覆盖的粘膜表面时,在监视器15中显示图6所示的内窥镜图像EI。
在出血点观察模式中,在亮度值增加部46中,提取区域ER的像素值增加,因此,区域BW不红而成为黄色,因此,关于监视器15中显示的内窥镜图像EI,以红色显示出血点区域BC,以黄色显示混合了血液和水等的区域BW,以白色显示未被血液覆盖的粘膜组织区域TS。
如果提取区域ER的像素值不增加,则混合了血液和水等的区域BW也接近红色,与出血点区域BC之间的对比度消失。
由此,用户在出血点观察模式中,能够清楚地视觉辨认被血液覆盖的粘膜表面中的出血点区域BC。
此外,使用中心波长不是600nm而是515nm的窄带光,能够通过使用具有滤色器的摄像元件12b的同时式照明对被检体像进行摄像,因此,内窥镜图像中不会产生以往的面序摄像方式时那样的颜色不均。
接着对变形例进行说明。
(变形例1)
在上述实施方式中,亮度值增加部对第2图像GPa实施亮度值增加处理,但是,亮度值增加部也可以对第1图像BPa实施亮度值增加处理。
下面,关于本变形例1,仅对与上述实施方式不同的结构进行说明。
图7是本变形例1的图像处理电路中的出血点观察模式用的图像处理部的框图。图8是用于说明本变形例1的图像处理电路22中的图像的处理的图。
亮度值增加部46A生成仅使第1图像BPa中的提取区域ER的像素值增加、以使得与第3图像RPa中的与提取区域ER对应的区域中的多个像素的像素值例如平均值大致相同的区域图像AR1。进而,亮度值增加部46A生成对像素值增加后的第1图像BPa中的区域图像AR1和第2图像GPa中的提取区域ER以外的区域的图像进行合成而得到的合成图像GPb1并进行输出。即,合成图像GPb1中的提取区域ER以外的区域的像素的像素值不被校正,与第2图像GPa中的像素的像素值相同。
即,亮度值增加部46A在被照射波长比窄带光NBL31短且吸收高的第2窄带光NBL2的被检体的图像信号中,使血液积存区域的亮度值增大。
如图2所示,与中心波长为515nm的窄带光NBL31相比,中心波长为460nm的窄带光NBL2的吸光率高,第1图像BPa中的区域图像AR1的亮度值低,因此,与上述实施方式的情况相比,亮度值增加部46A的增益大。
通过本变形例1,也能够得到与上述实施方式相同的效果。
(变形例2)
在上述变形例1中,亮度值增加部46A对第1图像BPa实施了亮度值增加处理,但是,亮度值增加部也可以利用第3图像RPa中的与提取区域ER对应的区域的图像置换第2图像GPa中的提取区域ER的图像。
下面,关于本变形例2,仅对与上述实施方式不同的结构进行说明。
图9是本变形例2的图像处理电路中的出血点观察模式用的图像处理部的框图。图10是用于说明本变形例2的图像处理电路22中的图像的处理的图。
减法部44的输出代替亮度值增加部46A而与亮度值置换部46B连接。亮度值置换部46B的输出被分配给监视器15的绿色(G)通道。
亮度值置换部46B进行如下的处理:利用第3图像RPa中的与提取区域ER对应的区域RR中的多个像素置换第2图像GPa中的提取区域ER。即,利用第3图像RPa中的与提取区域ER对应的区域RR中的多个像素置换第2图像GPa中的提取区域ER。
进而,亮度值置换部46B生成对区域RR的图像和第2图像GPa中的提取区域ER以外的区域的图像进行合成而得到的合成图像GPb2并进行输出。即,合成图像GPb2中的提取区域ER以外的区域的像素的像素值不被校正,与第2图像GPa中的像素的像素值相同。
利用第3图像RPa中的区域RR置换第2图像GPa中的提取区域ER的图像,由此,第2图像GPa中的提取区域ER的亮度值增加。
即,亮度值置换部46B构成如下的亮度值增大部:利用被检体的第3图像RPa的图像信号中的血液积存区域的亮度值,置换第2图像GPa的图像信号中的血液积存区域的亮度值,由此使血液积存区域的亮度值增大,该被检体被照射波长比窄带光NBL31长且血液吸收低的窄带光NBL4。
通过本变形例2,也能够得到与上述实施方式相同的效果。
如上所述,根据上述实施方式和各变形例,能够提供如下的图像处理装置:能够使用585nm~615nm的范围以外的波段,使监视器显示为,在粘膜表面被血液覆盖时能够看到发生出血的部位即出血点。
特别地,在以往那样例如使用射出中心波长为600nm的窄带光的LED这样的发光元件的情况下,必须额外在光源装置中设置这种发光元件,在成本方面存在问题。
进而,例如在使用射出中心波长为600nm的窄带光的LED这样的发光元件的情况下,在具有片上滤色器的图像传感器中,为了区分600nm的窄带光的反射光和630nm的窄带光的反射光,照明方式必须是所谓面序式,存在所显示的所谓图像产生颜色不均这样的问题,而且,还存在无法提高帧率这样的问题。
但是,根据上述实施方式和各变形例,没有在光源装置中追加用于视觉辨认出血区域的发光元件。进而,照明方式成为所谓同时式,因此,不仅在所生成的内窥镜图像中不会产生颜色不均,还能够提高帧率。
(第2实施方式)
在上述第1实施方式中,摄像元件12b是具有片上滤色器的图像传感器,但是,在本实施方式中,摄像部12a的图像传感器是不具有滤色器的单色的图像传感器。
第2实施方式的内窥镜装置1A具有与图1所示的第1实施方式的内窥镜装置1大致相同的结构,因此,使用图1对第2实施方式进行说明。由此,在以下的说明中,针对与第1实施方式的内窥镜装置1相同的结构,标注相同标号并省略说明,在第2实施方式的内窥镜装置1A中,仅对与第1实施方式的内窥镜装置1不同的结构进行说明。
第2实施方式的内窥镜装置1A的摄像部12a的摄像元件12b是不具有片上滤色器的单色的图像传感器。由此,第2实施方式的内窥镜装置1A具有与图1所示的内窥镜装置1相同的结构,但是,与第1实施方式的内窥镜装置1的不同之处在于摄像部12a的摄像元件12b是单色的图像传感器。
系统控制电路21根据观察模式,以规定的顺序对该观察模式中使用的多个光源进行驱动。图像处理电路22得到与观察模式对应的多个帧图像并进行合成,向监视器15输出图像信号。其结果,在监视器15中显示与观察模式对应的内窥镜图像。
在各观察模式中,以面序方式对被检体照射照明光。
在通常光观察模式中,依次驱动光源32b、32c、32d,图像处理电路22以规定的顺序取得中心波长为460nm的窄带光NBL2的图像BP、中心波长为540nm的窄带光NBL3的图像GP和中心波长为630nm的窄带光NBL4的图像RP。
在窄带光观察模式中,交替驱动光源32a和32c,图像处理电路22交替取得中心波长为410nm的窄带光NBL1的图像和中心波长为540nm的窄带光NBL3的图像GP。
在出血点观察模式中,驱动滤镜35,并且依次驱动光源32b、32c、32d,光源装置14以规定的顺序射出中心波长为460nm的窄带光NBL2、中心波长为515nm的窄带光NBL31和中心波长为630nm的窄带光NBL4。
图像处理电路22以规定的顺序取得中心波长为460nm的窄带光NBL2的图像BP、中心波长为515nm的窄带光NBL31的图像GP和中心波长为630nm的窄带光NBL4的图像RP,执行第1实施方式中说明的处理。
在各模式中,根据所得到的多个图像生成内窥镜图像,将内窥镜图像的图像信号输出到监视器15。
在出血点观察模式中,根据所得到的3个图像BP、GP、RP进行图4和图5所示的处理,由此,能够得到与第1实施方式相同的内窥镜图像。
由此,根据本实施方式的内窥镜装置1A,照明方式不是同时式而是与所谓面序相似的方式,但是,能够得到与第1实施方式相同的效果。
进而,在本实施方式中,使用单色的图像传感器,因此,能够增多每1帧的像素数,能够得到更高分辨率的内窥镜图像。
此外,在本实施方式中,也能够应用第1实施方式中说明的各变形例1、2。
(第3实施方式)
在第1实施方式中,使用滤镜35,得到中心波长为515nm的窄带光NBL31,对被检体进行照射,但是,在本实施方式中,在光源装置14中追加射出中心波长为515nm的窄带光的发光元件,在出血点观察模式中,对射出该中心波长为515nm的窄带光的发光元件进行驱动。
第3实施方式的内窥镜装置具有与第1实施方式的内窥镜装置1大致相同的结构。由此,在以下的说明中,针对与第1实施方式的内窥镜装置1相同的结构,标注相同标号并省略说明,在第3实施方式的内窥镜装置中,仅对与第1实施方式的内窥镜装置1不同的结构进行说明。
图11是示出具有第3实施方式的图像处理装置的内窥镜装置的结构的结构图。
第3实施方式的内窥镜装置1B的光源装置14A在光源32a~32d的基础上,具有射出中心波长为515nm的窄带光NBL31的发光元件即LED(Gs-LED)的光源32e,还具有光源32e用的反射镜33e。
反射镜33e是在内部的镜面反射中心波长为515nm的窄带光NBL31且透射其他波长的光的光学部件。
此外,在光源装置14A中未设置图1所示的滤镜35(或36)。
在通常光观察模式时,向3个光源32b、32c、32d供给电流,从光源装置14A同时射出中心波长为460nm的窄带光NBL2、中心波长为540nm的窄带光NBL3和中心波长为630nm的窄带光NBL4。
在窄带光观察模式时,向2个光源32a、32c供给电流,从光源装置14同时射出中心波长为410nm的窄带光NBL1和中心波长为540nm的窄带光NBL3。
在出血点观察模式时,向3个光源32b、32d、32e供给电流,从光源装置14同时射出中心波长为460nm的窄带光NBL2、中心波长为630nm的窄带光NBL4和中心波长为515nm的窄带光NBL31。
图像处理电路22的动作与第1实施方式相同。
另外,摄像元件12b具有片上滤色器。
即,本实施方式的内窥镜装置1B是具有通常光观察模式和出血点观察模式的内窥镜装置,具有内窥镜、处理器13、光源装置14A,该内窥镜由硬性镜11和具有摄像元件12b的摄像头12构成。
光源装置14A具有射出绿色波段的窄带光NBL3的发光元件即光源32c、射出波长比绿色波段短且血液吸收高的窄带光NBL2的发光元件即光源32b、射出波长比绿色波段长且血液吸收低的窄带光NBL4的发光元件即光源32d、射出绿色波段的光中包含血液吸收最小的波长的窄带光NBL31的发光元件即光源32e。
在通常光观察模式中,被检体被照射窄带光NBL2、窄带光NBL3和窄带光NBL4,处理器13根据接收到来自该被检体的反射光的摄像元件12b输出的摄像信号,生成第1、第2和第3这3个图像信号并进行输出,在出血点观察模式中,被检体被照射窄带光NBL2、窄带光NBL31和窄带光NBL4,处理器13根据接收到来自该被检体的反射光的摄像元件12b输出的摄像信号,生成被照射窄带光NBL31的包含表示血液的区域中的出血点的被检体的第4图像信号、第2图像信号和第3图像信号,并且,在第4图像信号中,提取血液浓度比出血点低的血液积存区域,使提取出的血液积存区域的亮度值增大,输出第2图像信号、第3图像信号和第4图像信号。
如上所述,根据上述实施方式,能够提供如下的图像处理装置:能够使用585nm~615nm的范围以外的波段,使监视器显示成在粘膜表面被血液覆盖时能够看到发生出血的部位即出血点。
并且,照明方式是所谓同时式,因此,不会在内窥镜图像中产生颜色不均,并且还能够提高帧率。
此外,在本实施方式中,也能够应用第1实施方式中说明的各变形例1、2。
并且,在本实施方式中,也可以如第2实施方式中说明的那样,使摄像部12a的图像传感器成为单色的图像传感器,并且使照明方式成为所谓面序式,如第2实施方式那样进行图像处理。
(第4实施方式)
上述第1~第3实施方式的光源装置使用发光元件作为光源,但是,本实施方式的光源装置使用射出白色光的灯和三峰性滤镜。
第4实施方式的内窥镜装置具有与第1实施方式的内窥镜装置1大致相同的结构。由此,在以下的说明中,针对与第1实施方式的内窥镜装置1相同的结构,标注相同标号并省略说明,在第4实施方式的内窥镜装置中,仅对与第1实施方式的内窥镜装置1不同的结构进行说明。
图12是示出具有第4实施方式的图像处理装置的内窥镜装置1C的结构的结构图。
第4实施方式的内窥镜装置1C的光源装置14B具有会聚透镜34、光源控制电路51、灯52、滤镜53、驱动滤镜53的马达54、透镜55。
光源控制电路51根据观察模式对滤镜53的动作进行控制。
灯52是作为光源的氙灯,射出白色光。
滤镜53是具有圆板形状、且在圆板的中心固定有马达54的轴54a的旋转滤镜。
图13是示出滤镜53的结构的图。圆板形状的滤镜53沿着周向在圆板上等间隔地形成有3个开口部61、62、63,在其中一个开口部62安装有二峰性滤镜64,在另一个开口部63安装有三峰性滤镜65。在开口部61未安装任何部件。
二峰性滤镜64是仅透射中心波长为410nm的窄带光NBL1和中心波长为540nm的窄带光NBL3这2个窄带光、不透射其他波段的光的滤镜。
三峰性滤镜65是仅透射中心波长为460nm的窄带光NBL2、中心波长为515nm的窄带光NBL31和中心波长为630nm的窄带光NBL4这3个窄带光、不透射其他波段的光的滤镜。
如上所述,光源装置14B具有射出白色光的作为光源的灯52、以及至少具有三峰性的滤镜65,该滤镜65接收白色光而透射绿色波段的光中包含血液吸收最小的波长的窄带光NBL31、波长比绿色波段短且血液吸收高的窄带光NBL2和波长比绿色波段长且血液吸收低的窄带光NBL4。
系统控制电路21将所设定的观察模式的信息传递到光源控制电路51,光源控制电路31驱动马达54而使滤镜53转动,以使得从灯52通过透镜55的光照射到与观察模式对应的开口部。
在通常光观察模式时,光源控制电路51驱动马达54,以使开口部61位于来自灯52的光的光路上的方式使滤镜53转动,以使得来自灯52的光通过开口部61。
在窄带光观察模式时,光源控制电路51驱动马达54,以使开口部62位于来自氙灯52的光的光路上的方式使滤镜53转动,以使得来自灯52的光通过开口部62的二峰性滤镜64。
在出血点观察模式时,光源控制电路51驱动马达54,以使开口部63位于来自灯52的光的光路上的方式使滤镜53转动,以使得来自灯52的光通过开口部63的三峰性滤镜65。
即,光源控制电路51根据观察模式驱动马达54,由此能够从光源装置14B射出期望的照明光。
在各观察模式中,在具有片上滤色器的摄像元件12b中接收来自光源装置14B的照明光。
由此,在通常光观察模式时,摄像部12a接收来自被照射白色光的被检体的反射光。
在窄带光观察模式时,摄像部12a接收来自如下被检体的反射光,该被检体被照射中心波长为410nm的窄带光NBL1和中心波长为540nm的窄带光NBL3这2个窄带光。
在出血点观察模式时,摄像部12a接收来自如下被检体的反射光,该被检体被照射中心波长为460nm的窄带光NBL2、中心波长为515nm的窄带光NBL31和中心波长为630nm的窄带光NBL4这3个窄带光。
因此,照明方式在各观察模式中成为同时式。
被检体被照射窄带光NBL2、窄带光NBL31和窄带光NBL4,处理器13根据接收到来自该被检体的反射光的摄像元件12b输出的摄像信号,生成被照射窄带光NBL31的包含表示血液的区域中的出血点的被检体的图像信号、被照射窄带光NBL2的被检体的图像信号和被照射窄带光NBL4的被检体的图像信号,在图像信号中,提取血液浓度比出血点低的血液积存区域,使提取出的血液积存区域的亮度值增大,输出3个图像信号。
由此,在本实施方式中,也能够得到与第1实施方式相同的效果。
另外,在上述实施方式中,使用设置在旋转滤镜即滤镜53中的三峰性滤镜65,生成中心波长为460nm的窄带光NBL2、中心波长为515nm的窄带光NBL31和中心波长为630nm的窄带光NBL4这3个窄带光,但是,根据出血点观察模式,也可以利用能够使三峰性滤镜在来自光源的光的光路上向与光路垂直的方向移动的机构。
(第5实施方式)
上述第4实施方式使用二峰性滤镜和三峰性滤镜以得到规定的波段的照明光,但是,本实施方式的光源装置使用不是这种二峰性滤镜和三峰性滤镜的、具有多个滤镜的旋转滤镜。
第5实施方式的内窥镜装置1D具有与第4实施方式的内窥镜装置1C大致相同的结构。由此,在以下的说明中,针对与第4实施方式的内窥镜装置1C相同的结构,标注相同标号并省略说明,在第5实施方式的内窥镜装置1D中,仅对与第4实施方式的内窥镜装置1C不同的结构进行说明。
图14是示出具有第5实施方式的图像处理装置的内窥镜装置1D的结构的结构图。
第5实施方式的内窥镜装置1D的光源装置14C具有会聚透镜34、光源控制电路51A、灯52、旋转滤镜53A、使旋转滤镜53A旋转的马达54A、透镜55、使旋转滤镜53A向与来自灯52的光的光轴垂直的方向移动的移动机构71、对移动机构71进行驱动的马达72。
移动机构71是齿条齿轮机构,包含齿条71a和齿轮71b。马达72的轴与齿轮71b的旋转轴机械连接。马达54A固定在齿条71a上,根据马达72的驱动,如虚线的箭头所示,向与来自灯52的光的光轴垂直的方向移动。
光源控制电路51A根据观察模式,对旋转滤镜53A在与来自灯52的光的光轴垂直的方向上的位置进行控制。
旋转滤镜53A具有圆板形状,在圆板的中心固定有马达54A的轴54Aa。
图15是示出旋转滤镜53A的结构的图。
旋转滤镜53A从圆板的中心朝向外周设置有3个滤镜组。
在通常光观察模式时使用最内周侧的第1滤镜组,其由沿着周向配置的3个滤镜81a、81b、81c构成。滤镜81a、81b和81c分别是用于输出具有通常光观察用的分光特性的面序光的蓝色(B)、绿色(G)和红色(R)用的滤镜。
在窄带光观察模式时使用第1滤镜组的外周侧的第2滤镜组,其由沿着周向配置的2个滤镜82a、82b构成。滤镜82a和82b分别是用于输出具有窄带光观察用的分光特性的面序光的中心波长为410nm的窄带光NBL1和中心波长为540nm的窄带光NBL3用的滤镜。
在出血点观察模式时使用第2滤镜组的外周侧的第3滤镜组,其由沿着周向配置的3个滤镜83a、83b、83c构成。滤镜83a、83b和83c分别是用于输出具有出血点观察用的分光特性的面序光的中心波长为460nm的窄带光NBL2、中心波长为515nm的窄带光NBL31和中心波长为630nm的窄带光NBL4用的滤镜。
系统控制电路21将所设定的观察模式的信息传递到光源控制电路51A,光源控制电路51A驱动马达54A和72,进行滤镜53的旋转和位置的控制,以使得从灯52通过透镜55的光照射到与观察模式对应的滤镜组并射出面序光。
在通常光观察模式时,为了使来自灯52的光照射到第1滤镜组,光源控制电路51A驱动马达72,使旋转滤镜53A移动,并且驱动马达54A,使旋转滤镜53A绕轴54Aa旋转,朝向会聚透镜34射出具有通常光观察用的分光特性的面序光。
在窄带光观察模式时,为了使来自灯52的光照射到第2滤镜组,光源控制电路51A驱动马达72,使旋转滤镜53A移动,并且驱动马达54A,使旋转滤镜53A绕轴54Aa旋转,朝向会聚透镜34射出具有窄带光观察用的分光特性的面序光。
在出血点观察模式时,为了使来自灯52的光照射到第3滤镜组,光源控制电路51A驱动马达72,使旋转滤镜53A移动,并且驱动马达54A,使旋转滤镜53A绕轴54Aa旋转,朝向会聚透镜34射出具有出血点观察用的分光特性的面序光。
光源装置14C具有射出白色光的作为光源的灯52以及旋转滤镜53A,该旋转滤镜53A包含透射波长比绿色波段短且血液吸收高的窄带光NBL2的滤镜83a、透射绿色波段的光中包含血液吸收最小的波长的窄带光NBL31的滤镜83b、透射波长比绿色波段长且血液吸收低的窄带光NBL4的滤镜83c,旋转滤镜53A旋转,由此,以规定的顺序射出窄带光NBL2、窄带光NBL31和窄带光NBL4。
即,光源控制电路51根据观察模式驱动马达54A和72,由此,能够从光源装置14C以规定的顺序射出期望的照明光。
在各观察模式中,在单色的摄像元件12b中接收来自光源装置14C的照明光。
由此,在通常光观察模式时,摄像部12a接收来自如下被检体的反射光,该被检体被照射具有通常光观察用的分光特性的面序光。
在窄带光观察模式时,摄像部12a接收来自如下被检体的反射光,该被检体以面序被照射中心波长为410nm的窄带光NBL1和中心波长为540nm的窄带光NBL3这2个窄带光。
在出血点观察模式时,摄像部12a接收来自如下被检体的反射光,该被检体以面序被照射中心波长为460nm的窄带光NBL2、中心波长为515nm的窄带光NBL31和中心波长为630nm的窄带光NBL4这3个窄带光。
被检体被照射窄带光NBL2、窄带光NBL31和窄带光NBL4,处理器13根据接收到来自该被检体的反射光的摄像元件12b输出的摄像信号,生成被照射窄带光NBL31的包含表示血液的区域中的出血点的被检体的图像信号、被照射窄带光NBL2的被检体的图像信号和被照射窄带光NBL4的被检体的图像信号,在与窄带光NBL31有关的图像信号中,提取血液浓度比出血点低的血液积存区域,使提取出的血液积存区域的亮度值增大,输出3个图像信号。
因此,照明方式在各观察模式中成为面序式。
由此,通过本实施方式,也能够得到与第1实施方式相同的效果。
(第6实施方式)
在上述第1~第5实施方式中,对被检体照射中心波长为515nm的窄带光,但是,也可以对被检体照射中心波长为515nm的窄带光以外的光,得到通过分光估计处理而得到的中心波长为515nm的窄带光的图像,使用该得到的分光估计图像进行第1~第5实施方式的处理。
即,也可以通过分光估计得到第1~第3图像的全部或一部分。
在出血点观察模式中,也可以对被照射窄带光NBL2的被检体的图像进行图像化而得到一个图像信号,该窄带光NBL2的波长比绿色波段短且血液吸收高。也可以对被照射窄带光NBL31的包含出血点的被检体的图像进行图像化而得到另一个图像信号,该窄带光NBL31在绿色波段内包含血液吸收最小的波长。也可以对被照射窄带光NBL4的被检体的图像进行图像化而得到再一个图像信号,该窄带光NBL4的波长比绿色波段长且血液吸收低。
窄带光观察模式和通常光观察模式中的各图像信号也同样。
使用分光估计图像,也能够得到与第1实施方式相同的效果。
另外,上述各实施方式的内窥镜装置的内窥镜是硬性镜,但是,与处理器连接的内窥镜也可以是插入部具有挠性的软性镜。
如以上说明的那样,根据上述各实施方式和各变形例,能够提供如下的图像处理装置:能够使用585nm~615nm的范围以外的波段,使监视器显示为,在粘膜表面被血液覆盖时能够清楚地看到发生出血的部位即出血点。
本发明不限于上述实施方式,能够在不脱离本发明主旨的范围内进行各种变更、改变等。
本申请将2016年11月1日在日本申请的日本特愿2016-214564号作为优先权主张的基础进行申请,上述公开内容被引用到本申请说明书、权利要求书中。

Claims (7)

1.一种图像处理装置,其特征在于,所述图像处理装置具有:
区域提取部,其根据第1图像信号和第2图像信号的差异,从被检体的图像中的、包括出血点和血液浓度比所述出血点低的血液积存区域的表示血液的区域中仅提取所述血液积存区域,该第1图像信号是对被照射第1窄带光的被检体的图像进行图像化而得到的,该第1窄带光是在绿色波段内血液的吸收最小的以505nm~515nm的范围内的波长为中心波长的窄带光,该第2图像信号是对被照射第2窄带光的所述被检体的图像进行图像化而得的,该第2窄带光的波长比所述第1窄带光短,且该第2窄带光的所述血液的吸收比所述第1窄带光高;以及
亮度值增大部,其在所述第1图像信号和所述第2图像信号中的任意一方中,使所述血液积存区域的亮度值增大。
2.根据权利要求1所述的图像处理装置,其特征在于,
所述第2窄带光是波长比所述第1窄带光短的蓝色窄带光。
3.根据权利要求2所述的图像处理装置,其特征在于,
所述亮度值增大部利用第3图像信号中的所述血液积存区域的亮度值,置换所述第1图像信号中的所述血液积存区域的亮度值,由此使所述血液积存区域的亮度值增大,所述第3图像信号是对被照射第3窄带光的所述被检体的图像进行图像化而得的,所述第3窄带光是波长比所述第1窄带光长的红色窄带光,且该第3窄带光的所述血液的吸收比所述第1窄带光低。
4.根据权利要求2所述的图像处理装置,其特征在于,
所述图像处理装置还具有图像生成部,该图像生成部生成将所述第1图像信号、所述第2图像信号和第3图像信号分别分配给不同颜色的图像信号,所述第3图像信号是对被照射第3窄带光的所述被检体的图像进行图像化而得的,所述第3窄带光是波长比所述第1窄带光长的红色窄带光,且该第3窄带光的所述血液的吸收比所述第1窄带光低。
5.根据权利要求3所述的图像处理装置,其特征在于,
所述图像处理装置还具有图像生成部,该图像生成部生成将所述第1图像信号、所述第2图像信号和所述第3图像信号分别分配给不同颜色的图像信号。
6.根据权利要求1所述的图像处理装置,其特征在于,
所述区域提取部被输入具有多个像素的图像信号作为所述第1图像信号,并被输入具有多个像素的图像信号作为所述第2图像信号,按照每个像素计算表示所述第1图像信号中的各像素和与所述各像素对应的所述第2图像信号中的像素的差异的差异度,提取所述差异度高于阈值的像素的区域作为所述血液积存区域,该阈值用于从所述被检体的图像中的所述表示血液的区域中仅提取所述血液积存区域。
7.根据权利要求6所述的图像处理装置,其特征在于,
所述差异度由所述第1图像信号中的各像素和与所述各像素对应的所述第2图像信号中的像素的差分表示。
CN201780043850.1A 2016-11-01 2017-09-13 图像处理装置 Active CN109561812B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2016-214564 2016-11-01
JP2016214564 2016-11-01
PCT/JP2017/033046 WO2018083888A1 (ja) 2016-11-01 2017-09-13 画像処理装置

Publications (2)

Publication Number Publication Date
CN109561812A CN109561812A (zh) 2019-04-02
CN109561812B true CN109561812B (zh) 2022-05-03

Family

ID=62075798

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201780043850.1A Active CN109561812B (zh) 2016-11-01 2017-09-13 图像处理装置

Country Status (5)

Country Link
US (1) US10893810B2 (zh)
JP (1) JP6342598B1 (zh)
CN (1) CN109561812B (zh)
DE (1) DE112017005511T5 (zh)
WO (1) WO2018083888A1 (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111989023B (zh) 2018-08-31 2024-02-02 Hoya株式会社 内窥镜系统及使内窥镜系统工作的方法
WO2020183528A1 (ja) * 2019-03-08 2020-09-17 オリンパス株式会社 内視鏡装置、内視鏡画像処理装置、内視鏡装置の作動方法及びプログラム
CN113543689A (zh) * 2019-03-19 2021-10-22 奥林巴斯株式会社 内窥镜装置、内窥镜装置的工作方法以及程序
WO2021181706A1 (ja) * 2020-03-13 2021-09-16 オリンパス株式会社 内視鏡装置、プロセッサ、色彩強調方法
CN117460444A (zh) * 2021-06-14 2024-01-26 奥林巴斯株式会社 图像处理装置、内窥镜系统、图像处理方法、程序以及信息存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101621956A (zh) * 2007-02-22 2010-01-06 奥林巴斯医疗株式会社 被检体内导入系统
CN102525375A (zh) * 2010-09-29 2012-07-04 富士胶片株式会社 内窥镜装置
CN103429136A (zh) * 2011-08-26 2013-12-04 奥林巴斯医疗株式会社 内窥镜装置

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3583731B2 (ja) * 2000-07-21 2004-11-04 オリンパス株式会社 内視鏡装置および光源装置
EP2319390B1 (en) 2000-07-21 2016-04-20 Olympus Corporation Endoscope apparatus
WO2013051431A1 (ja) * 2011-10-06 2013-04-11 オリンパス株式会社 蛍光観察装置
WO2013145407A1 (ja) 2012-03-30 2013-10-03 オリンパスメディカルシステムズ株式会社 内視鏡装置
KR101480016B1 (ko) * 2013-08-23 2015-01-07 주식회사 현주인테크 휴대가 가능한 내시경 시스템
JP6401661B2 (ja) 2015-05-20 2018-10-10 株式会社ウイル・コーポレーション ペーパークラフト

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101621956A (zh) * 2007-02-22 2010-01-06 奥林巴斯医疗株式会社 被检体内导入系统
CN102525375A (zh) * 2010-09-29 2012-07-04 富士胶片株式会社 内窥镜装置
CN103429136A (zh) * 2011-08-26 2013-12-04 奥林巴斯医疗株式会社 内窥镜装置

Also Published As

Publication number Publication date
US20190159687A1 (en) 2019-05-30
DE112017005511T5 (de) 2019-09-12
US10893810B2 (en) 2021-01-19
JPWO2018083888A1 (ja) 2018-11-01
WO2018083888A1 (ja) 2018-05-11
CN109561812A (zh) 2019-04-02
JP6342598B1 (ja) 2018-06-13

Similar Documents

Publication Publication Date Title
CN109561812B (zh) 图像处理装置
JP6184571B2 (ja) 蛍光観察内視鏡システム
JP5427318B1 (ja) 内視鏡装置
JP5404968B1 (ja) 内視鏡装置
JP5355827B1 (ja) 内視鏡装置
JP5362149B1 (ja) 内視鏡装置
JP5496075B2 (ja) 内視鏡診断装置
US9629527B2 (en) Endoscope system, processor device of endoscope system, and image processing method
CN109195502B (zh) 活体观察系统
JP5215506B2 (ja) 内視鏡装置
US20130006109A1 (en) Endoscope apparatus
US11497390B2 (en) Endoscope system, method of generating endoscope image, and processor
EP2803313A1 (en) Processor device, endoscope system, and operation method of endoscope system
US20230000330A1 (en) Medical observation system, medical imaging device and imaging method
JP7059353B2 (ja) 内視鏡システム
JP2015171442A (ja) 内視鏡用光源装置及び内視鏡システム
WO2019171703A1 (ja) 内視鏡システム
JP7324307B2 (ja) 光源装置、内視鏡システム及び制御方法
CN115243598A (zh) 医疗用图像处理装置、医疗用拍摄装置、医疗用观察系统、图像处理方法和程序

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant