CN105212885A - 医用图像处理装置及其工作方法、以及内窥镜系统 - Google Patents
医用图像处理装置及其工作方法、以及内窥镜系统 Download PDFInfo
- Publication number
- CN105212885A CN105212885A CN201510363187.6A CN201510363187A CN105212885A CN 105212885 A CN105212885 A CN 105212885A CN 201510363187 A CN201510363187 A CN 201510363187A CN 105212885 A CN105212885 A CN 105212885A
- Authority
- CN
- China
- Prior art keywords
- range
- observation
- coordinate
- space
- picture signal
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
- A61B5/1032—Determining colour for diagnostic purposes
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
- A61B1/00009—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
- A61B1/000094—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope extracting biological structures
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/00002—Operational features of endoscopes
- A61B1/00043—Operational features of endoscopes provided with output arrangements
- A61B1/00045—Display arrangement
- A61B1/0005—Display arrangement combining images e.g. side-by-side, superimposed or tiled
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/06—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
- A61B1/0661—Endoscope light sources
- A61B1/0684—Endoscope light sources using light emitting diodes [LED]
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
- A61B5/0075—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence by spectroscopy, i.e. measuring spectra, e.g. Raman spectroscopy, infrared absorption spectroscopy
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
- A61B5/0082—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence adapted for particular medical purposes
- A61B5/0084—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence adapted for particular medical purposes for introduction into the body, e.g. by catheters
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0012—Biomedical image inspection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/90—Determination of colour characteristics
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10068—Endoscopic image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
- G06T2207/30092—Stomach; Gastric
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
- G06T2207/30096—Tumor; Lesion
Landscapes
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Surgery (AREA)
- General Health & Medical Sciences (AREA)
- Medical Informatics (AREA)
- Public Health (AREA)
- Biophysics (AREA)
- Pathology (AREA)
- Animal Behavior & Ethology (AREA)
- Veterinary Medicine (AREA)
- Biomedical Technology (AREA)
- Heart & Thoracic Surgery (AREA)
- Molecular Biology (AREA)
- Optics & Photonics (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Radiology & Medical Imaging (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Dentistry (AREA)
- Spectroscopy & Molecular Physics (AREA)
- Microelectronics & Electronic Packaging (AREA)
- Signal Processing (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Quality & Reliability (AREA)
- Endoscopes (AREA)
- Instruments For Viewing The Inside Of Hollow Bodies (AREA)
- Image Processing (AREA)
- Image Analysis (AREA)
Abstract
本发明提供医用图像处理装置及其工作方法、以及内窥镜系统,用于生成强调了胃粘膜萎缩后的萎缩部等异常部与正常部的色差的图像。在该医用图像处理装置中,输入第一RGB图像信号,根据第一RGB图像信号求出色差信号(Cr、Cb)。在由色差信号(Cr、Cb)形成的特征空间中,为了使第二观察范围的坐标进入包含原点在内的基准范围而进行第一处理,所述第一处理按照平行移动第一~第三观察范围的坐标的方式进行处理。为了使第一观察范围的坐标与第三观察范围的坐标相互分离而进行第二处理,所述第二处理按照移动所述第一观察范围或所述第三观察范围的坐标的方式进行处理。
Description
技术领域
本发明涉及一种生成强调了正常部与病变部的颜色差异的图像的医用图像处理装置及其工作方法、以及内窥镜系统。
背景技术
在医疗领域中,使用了具备光源装置、内窥镜以及处理器装置的内窥镜系统的诊断被广泛采用。在该内窥镜系统中,从内窥镜向观察对象照射照明光,基于由内窥镜的摄像元件对利用该照明光照明中的观察对象进行拍摄而获得的图像信号,将观察对象的图像显示在监视器上。医生一边观看在监视器中显示的图像一边检测有无病变部。
这里,针对从粘膜表面大幅突起的病变部等形状、大小与正常部较大程度不同的病变部,能够容易地进行检测。然而,针对形状、大小与正常部几乎相同的病变部,要大费周折地检测与正常部的颜色差异。在该情况下,在病变部并没有太大发展且与正常部几乎不存在颜色差异时,检测变得非常困难。
为此,在日本专利3228627号公报中,针对血液量(血红蛋白指数)偏离基准值的部分,进行使之进一步偏离基准值的处理,从而使正常部和病变部的色差变得明确。
在病变部中,关于胃癌,已知有在胃粘膜中产生萎缩而使胃粘膜以退色调变化的情况。因此,在粘膜中产生了萎缩的萎缩部相对于未产生萎缩的正常部产生颜色差异。通过利用内窥镜观察该与正常部的颜色差异来诊断是否患有胃癌(具有认定NPO法人、日本胃癌预测、诊断、治疗研究机构推荐的ABC诊查)。
这里,在萎缩高度地发展的情况(例如,在ABC诊查中包含于C组、D组的情况)下,正常部与萎缩部的颜色差异明显,因而能够容易地检测萎缩部。然而,在萎缩正在发展的情况(例如,在ABC诊查中包含于B组、C组的情况)下,萎缩部与正常部的色差微小,因而难以仅通过颜色差异来检测萎缩部。因此,要求即便在如萎缩正在发展那样萎缩部与正常部的色差微小的情况下,也强调正常部与萎缩部的色差以使萎缩部的检测变得容易。
需要说明的是,可以考虑通过日本专利3228627号公报的方法来强调萎缩部与正常部的色差。然而,由于萎缩部的颜色不仅受血液量的影响,也受血液量以外的要素的影响,因此在日本专利3228627号公报的方法中,难以强调萎缩部与正常部的色差。
发明内容
本发明的目的在于,提供医用图像处理装置及其工作方法、以及内窥镜系统,用于生成强调了胃粘膜萎缩后的萎缩部等异常部与正常部的色差的图像。
本发明的医用图像处理装置具备图像信号输入处理部、颜色信息获取部以及第一移动处理部。图像信号输入处理部对第一彩色图像信号进行输入处理。颜色信息获取部从第一彩色图像信号中获取多个颜色信息。在由多个颜色信息形成的特征空间中,第一移动处理部使被检体内的观察对象所分布的第一观察范围、第二观察范围以及第三观察范围的坐标移动,以使所述第一观察范围、第二观察范围以及第三观察范围中的任一个特定的范围的坐标进入在特征空间内确定的基准范围,并且该第一移动处理部使第一至第三观察范围中的特定的范围以外的两个范围的坐标移动,以使特定的范围以外的两个范围的坐标相互分离。
优选特征空间是CbCr空间或者ab空间中的任一个空间,其中,该CbCr空间由作为多个颜色信息的色差信号Cr、Cb形成,该ab空间由作为多个颜色信息的CIELab空间的色调的要素a*、b*形成。优选在特征空间中,第一移动处理部使第一至第三观察范围的坐标平行移动,以使特定的范围的坐标进入基准范围,并且该第一移动处理部对第一至第三观察范围中的特定的范围以外的两个范围的坐标的角度进行变更,使两个范围的坐标以相互分离的方式移动。优选基准范围是包含特征空间的原点且不包含特定的范围以外的两个范围的范围。
优选多个颜色信息是色相H和彩度S,特征空间是由色相H和彩度S形成的HS空间。优选在HS空间中,第一移动处理部使第一至第三观察范围的坐标向彩度方向平行移动,以使特定的范围的坐标进入基准范围,并且该第一移动处理部使第一至第三观察范围中的特定的范围以外的两个范围的坐标以在色相方向上相互分离的方式移动。优选基准范围是包含HS空间的原点且不包含特定的范围以外的两个范围的范围。
优选本发明的医用图像处理装置具备第二移动处理部,在特征空间中,该第二移动处理部在维持第一以及第三观察范围的坐标的状态下,使第二观察范围的坐标移动至基准范围,在维持第一观察范围的坐标的状态下,使第三观察范围的坐标移动。
优选特征空间是CbCr空间或者ab空间中的任一个空间,其中,该CbCr空间由作为多个颜色信息的色差信号Cr、Cb形成,该ab空间由作为多个颜色信息的CIELab空间的色调的要素a*、b*形成。优选在特征空间中,第二移动处理部在维持第一以及第三观察范围的坐标的状态下,对第二观察范围的坐标的矢径进行变更而使第二观察范围移动至基准范围,并且在维持第一观察范围的坐标且将第二观察范围维持在基准范围的状态下,对第三观察范围的坐标的角度进行变更而使第三观察范围的坐标移动。优选基准范围是包含特征空间的原点且不包含第一观察范围以及第三观察范围的范围。
优选多个颜色信息是色相H和彩度S,特征空间是由色相H和彩度S形成的HS空间。优选在HS空间中,第二移动处理部在维持第一以及第三观察范围的坐标的状态下,使第二观察范围的坐标向彩度方向移动而使第二观察范围的坐标移动至基准范围,并且在维持第一观察范围的坐标且将第二观察范围维持在基准范围的状态下,使第三观察范围的坐标向色相方向移动。优选基准范围是包含HS空间的原点且不包含第一观察范围以及第三观察范围的范围。
优选本发明的医用图像处理装置具有彩色图像信号转换部和明亮度调整部。彩色图像信号转换部将由第一移动处理部或第二移动处理部处理后的多个颜色信息转换为第二彩色图像信号。明亮度调整部根据从第一彩色图像信号获得的第一明亮度信息以及从第二彩色图像信号获得的第二明亮度信息,来调整第二彩色图像信号的像素值。
优选第一彩色图像信号为三种颜色的图像信号,在特征空间中,第一彩色图像信号中的至少一种颜色的图像信号为窄频带信号时的第一观察范围与第二观察范围之差大于第一彩色图像信号全部为宽频带信号时的第一观察范围与第二观察范围之差,或者第一彩色图像信号中的至少一种颜色的图像信号为窄频带信号时的第一观察范围与第三观察范围之差大于第一彩色图像信号全部为宽频带信号时的第一观察范围与第三观察范围之差。
本发明的内窥镜系统具备上述记载的本发明的医用图像处理装置和显示部,该显示部显示第一特殊图像和第二特殊图像,其中,该第一特殊图像是根据由第一移动处理部处理后的多个颜色信息而获得的,该第二特殊图像是根据由第二移动处理部处理后的多个颜色信息而获得的。
本发明的医用图像处理装置的工作方法具备输入处理步骤、颜色信息获取步骤以及移动处理步骤。在输入处理步骤中,图像信号输入处理部对第一彩色图像信号进行输入处理。在颜色信息获取步骤中,颜色信息获取部从第一彩色图像信号中获取多个颜色信息。在移动处理步骤中,在由多个颜色信息形成的特征空间中,第一移动处理部使被检体内的观察对象所分布的第一观察范围、第二观察范围、以及第三观察范围的坐标移动,以使所述第一观察范围、第二观察范围、以及第三观察范围中的任一个特定的范围的坐标进入在特征空间内确定的基准范围,并且该第一移动处理部使第一至第三观察范围中的特定的范围以外的两个范围的坐标移动,以使特定的范围以外的两个范围的坐标相互分离。
发明效果
根据本发明,能够生成强调了胃粘膜萎缩后的萎缩部等异常部与正常部的色差的图像。
附图说明
图1是第一实施方式的内窥镜系统的外观图。
图2是表示第一实施方式的内窥镜系统的功能的框图。
图3是表示紫色光V、蓝色光B、绿色光G以及红色光R的发光光谱的曲线图。
图4是表示第一特殊图像处理部的功能的框图。
图5是表示信号比空间用的第一处理的说明图。
图6是表示信号比空间用的第一处理后的第一~第三观察范围的分布的曲线图。
图7是表示特征空间为a*、b*的情况下的第一处理后的第一~第三观察范围的分布的曲线图。
图8是表示在特征空间为ab空间的情况下所使用的特殊图像处理部的功能的框图。
图9是表示信号比空间用的第二处理的说明图。
图10是表示角度变更范围R1内的角度θ的移动范围的曲线图。
图11是表示角度θ与信号比空间用的第二处理后的角度Eθ之间的关系的曲线图。
图12是表示信号比空间用的第二处理后的第一~第三观察范围的分布的曲线图。
图13是表示特征空间为a*、b*的情况下的第二处理后的第一~第三观察范围的分布的曲线图。
图14是表示第二特殊图像处理部的功能的框图。
图15是表示信号比空间用的第三处理的说明图。
图16是表示矢径r与矢径Er之间的关系的曲线图。
图17是表示信号比空间用的第三处理后的第一~第三观察范围的分布的曲线图。
图18是表示特征空间为a*、b*的情况下的第三处理后的第一~第三观察范围的分布的曲线图。
图19是表示信号比空间用的第四处理的说明图。
图20是表示角度变更范围R3内的角度θ的移动范围的曲线图。
图21是表示角度θ与信号比空间用的第四处理后的角度Eθ之间的关系的曲线图。
图22是表示信号比空间用的第四处理后的第一~第三观察范围的分布的曲线图。
图23是表示特征空间为a*、b*的情况下的第四处理后的第一~第三观察范围的分布的曲线图。
图24是对第一特殊图像和第二特殊图像进行同时显示的监视器的图像图。
图25是表示本发明的一系列流程的流程图。
图26是表示在特征空间为Cr、Cb的情况下所使用的第一特殊图像处理部的功能的框图。
图27是表示特征空间为Cr、Cb的情况下的第一观察范围、第二观察范围、以及第三观察范围的位置关系的说明图。
图28是表示特征空间为Cr、Cb的情况下的第一处理的说明图。
图29是表示特征空间为Cr、Cb的情况下的第二处理的说明图。
图30是表示在特征空间为Cr、Cb的情况下所使用的第二特殊图像处理部的功能的框图。
图31是表示特征空间为Cr、Cb的情况下的第三处理的说明图。
图32是表示特征空间为Cr、Cb的情况下的第四处理的说明图。
图33是表示在特征空间为H(色相)、S(彩度)的情况下所使用的第一特殊图像处理部的功能的框图。
图34是表示特征空间为H(色相)、S(彩度)的情况下的第一观察范围、第二观察范围、以及第三观察范围的位置关系的说明图。
图35是表示特征空间为H(色相)、S(彩度)的情况下的第一处理的说明图。
图36是表示特征空间为H(色相)、S(彩度)的情况下的第二处理的说明图。
图37是表示在特征空间为H(色相)、S(彩度)的情况下所使用的第二特殊图像处理部的功能的框图。
图38是表示特征空间为H(色相)、S(彩度)的情况下的第三处理的说明图。
图39是表示特征空间为H(色相)、S(彩度)的情况下的第四处理的说明图。
图40是表示第二实施方式的内窥镜系统的功能的框图。
图41是表示白色光的发光光谱的曲线图。
图42是表示特殊光的发光光谱的曲线图。
图43是表示第三实施方式的内窥镜系统的功能的框图。
图44是表示旋转滤光器的俯视图。
图45是表示第四实施方式的胶囊内窥镜系统的功能的图。
图46是表示与图3不同的紫色光V、蓝色光B、绿色光G以及红色光R的发光光谱的曲线图。
图47是表示使用二维LUT的情况下的第一特殊图像处理部的功能的框图。
图48是表示第一B图像信号为窄频带信号的情况下的特征空间上的第二观察范围以及第三观察范围的位置、和第一B图像信号为宽频带信号的情况下的特征空间上的第二观察范围以及第三观察范围的位置的说明图。
具体实施方式
[第一实施方式]
如图1所示,第一实施方式的内窥镜系统10具有内窥镜12、光源装置14、处理器装置16、监视器18(显示部)以及控制台19。内窥镜12与光源装置14光学连接,并且与处理器装置16电连接。内窥镜12具有:向被检体内插入的插入部12a、在插入部12a的基端部分处设置的操作部12b、以及在插入部12a的前端侧设置的弯曲部12c及前端部12d。通过对操作部12b的角度旋钮12e进行操作而使弯曲部12c进行弯曲动作。伴随着该弯曲动作,前端部12d朝向期望的方向。
此外,在操作部12b中,除了角度旋钮12e之外还设置有模式切换SW13a。模式切换SW13a用于通常观察模式、第一特殊观察模式、第二特殊观察模式、以及同时观察模式这四种模式间的切换操作。通常观察模式是将通常图像显示在监视器18上的模式。第一特殊观察模式是用于对由于胃癌等病变而在胃粘膜中产生萎缩的萎缩部与正常部的边界进行观察,且将第一特殊图像显示在监视器18上的模式。第二特殊观察模式是用于对萎缩部与正常部的颜色差异进行观察,且将第二特殊图像显示在监视器18上的模式。同时观察模式是用于同时进行萎缩部与正常部的边界的观察以及萎缩部与正常部的颜色差异的观察,且将第一特殊图像和第二特殊图像同时显示在监视器18上的模式。
处理器装置16与监视器18以及控制台19电连接。监视器18输出显示图像信息等。控制台19作为受理功能设定等输入操作的UI(UserInterface:用户界面)来发挥功能。需要说明的是,在处理器装置16上也可以连接记录图像信息等的外置的记录部(省略图示)。
如图2所示,光源装置14具备:V-LED(VioletLightEmittingDiode;紫色发光二极管)20a、B-LED(BlueLightEmittingDiode;蓝色发光二极管)20b、G-LED(GreenLightEmittingDiode;绿色发光二极管)20c、R-LED(RedLightEmittingDiode;红色发光二极管)20d、对这四种颜色的LED20a~20d的驱动进行控制的光源控制部21、以及将由四种颜色的LED20a~20d发出的四种颜色的光的光路耦合的光路耦合部23。由光路耦合部23耦合后的光经由穿过插入部12a内的导光部(LG)41以及照明透镜45而照射至被检体内。需要说明的是,也可以取代LED而使用LD(LaserDiode;激光二极管)。
如图3所示,V-LED20a产生中心波长为405±10nm、波长范围为380~420nm的紫色光V。B-LED20b产生中心波长为460±10nm、波长范围为420~500nm的蓝色光B。G-LED20c产生波长范围达到480~600nm的绿色光G。R-LED20d产生中心波长达到620~630nm且波长范围达到600~650nm的红色光R。
光源控制部21也可以在通常观察模式、第一特殊观察模式、第二特殊观察模式以及同时观察模式中的任一观察模式下均将V-LED20a、B-LED20b、G-LED20c以及R-LED20d全部点亮。在该情况下,紫色光V、蓝色光B、绿色光G以及红色光R这四种颜色的光混色后的光照射至观察对象。此外,光源控制部21在通常观察模式时,按照紫色光V、蓝色光B、绿色光G、红色光R之间的光量比成为Vc:Bc:Gc:Rc的方式来控制各LED20a~20d。另一方面,光源控制部21在第一特殊观察模式、第二特殊观察模式以及同时观察模式时,按照紫色光V、蓝色光B、绿色光G、红色光R之间的光量比成为Vs:Bs:Gs:Rs的方式来控制各LED20a~20d。
如图2所示,导光部41内置在内窥镜12以及通用线(将内窥镜12与光源装置14以及处理器装置16连接的线)内,用于将由光路耦合部23耦合后的光传播至内窥镜12的前端部12d。需要说明的是,能够使用多模光纤作为导光部41。作为一例,能够使用芯部直径为105μm、包层直径为125μm、包含成为外表层的保护层在内的直径为的细径光缆。
在内窥镜12的前端部12d设置有照明光学系统30a和摄像光学系统30b。照明光学系统30a具有照明透镜45,来自导光部41的光经由该照明透镜45照射至观察对象。摄像光学系统30b具有物镜46、摄像传感器48。来自观察对象的反射光经由物镜46入射至摄像传感器48。由此,观察对象的反射像在摄像传感器48中成像。
摄像传感器48为彩色的摄像传感器,用于拍摄被检体的反射像并输出图像信号。优选该摄像传感器48是CCD(ChargeCoupledDevice;电荷耦合器件)摄像传感器、CMOS(ComplementaryMetal-OxideSemiconductor;互补金属氧化物半导体)摄像传感器等。本发明中使用的摄像传感器48是用于获得R(红色)、G(绿色)以及B(蓝色)这三种颜色的RGB图像信号的彩色的摄像传感器,即该摄像传感器48是具备设置有R滤光器的R像素、设置有G滤光器的G像素、以及设置有B滤光器的B像素的所谓的RGB摄像传感器。
需要说明的是,作为摄像传感器48,也可以取代RGB的彩色的摄像传感器而采用具备C(蓝绿色)、M(品红色)、Y(黄色)以及G(绿色)的补色滤光器的所谓的补色摄像传感器。在使用补色摄像传感器的情况下,由于输出CMYG这四种颜色的图像信号,因此需要通过补色-原色颜色转换而将CMYG这四种颜色的图像信号转换为RGB图像信号。此外,摄像传感器48也可以是未设置滤色器的单色摄像传感器。在该情况下,光源控制部21需要使蓝色光B、绿色光G、红色光R以分时的方式点亮,并且在摄像信号的处理中施加同步化处理。
从摄像传感器48输出的图像信号发送至CDS/AGC电路50。CDS/AGC电路50对作为模拟信号的图像信号进行相关双重采样(CDS(CorrelatedDoubleSampling))、自动增益控制(AGC(AutoGainControl))。经过CDS/AGC电路50后的图像信号由A/D转换器(A/D(Analog/Digital)converter)52转换为数字图像信号。被A/D转换后的数字图像信号输入至处理器装置16。
处理器装置16具备接收部53、DSP56、噪声去除部58、图像处理切换部60、通常图像处理部62、特殊图像处理部64以及影像信号生成部66。接收部53接收来自内窥镜12的数字RGB图像信号。R图像信号对应于从摄像传感器48的R像素输出的信号,G图像信号对应于从摄像传感器48的G像素输出的信号,B图像信号对应于从摄像传感器48的B像素输出的信号。
DSP56针对接收到的图像信号实施缺陷修正处理、偏置处理、增益修正处理、线性矩阵处理、伽马转换处理、去马赛克处理等各种信号处理。在缺陷修正处理中,摄像传感器48的缺陷像素的信号被修正。在偏置处理中,从被实施缺陷修正处理后的RGB图像信号中除掉暗电流成分,设定正确的零电平。在增益修正处理中,通过对偏置处理后的RGB图像信号乘以特定的增益,由此来调整信号电平。对于增益修正处理后的RGB图像信号实施用于提高颜色再现性的线性矩阵处理。然后,通过伽马转换处理来调整明亮度、彩度。对于线性矩阵处理后的RGB图像信号实施去马赛克处理(也称为均衡化处理、同步化处理),并通过插补来生成各像素中不足的颜色的信号。通过该去马赛克处理,使所有像素具有RGB各颜色的信号。
噪声去除部58针对由DSP56实施了伽马修正等的RGB图像信号来实施噪声去除处理(例如移动平均法、中值滤波器法等),由此从RGB图像信号中去除噪声。去除噪声后的RGB图像信号被发送至图像处理切换部60。需要说明的是,本发明的“图像信号输入处理部”对应于包含接收部53、DSP56以及噪声去除部58在内的结构。
图像处理切换部60在通过模式切换SW13a设置为通常观察模式的情况下,将RGB图像信号发送至通常图像处理部62,在设置为第一特殊观察模式、第二特殊观察模式、同时观察模式的情况下,将RGB图像信号发送至特殊图像处理部64。
通常图像处理部62针对RGB图像信号进行颜色转换处理、色彩强调处理、构造强调处理。在颜色转换处理中,针对数字RGB图像信号进行3×3的矩阵处理、灰度转换处理、三维LUT处理等,从而转换为颜色转换处理完毕的RGB图像信号。接着,针对颜色转换处理完毕的RGB图像信号实施各种色彩强调处理。针对该色彩强调处理完毕的RGB图像信号进行空间频率强调等构造强调处理。实施构造强调处理后的RGB图像信号作为通常图像的RGB图像信号而从通常图像处理部62输入至影像信号生成部66。
在设定为第一特殊观察模式、第二特殊观察模式、或者同时观察模式的情况下,特殊图像处理部64工作。该特殊图像处理部64具备生成第一特殊图像的第一特殊图像处理部64a、生成第二特殊图像的第二特殊图像处理部64b、以及生成用于同时显示第一特殊图像和第二特殊图像的同时显示用特殊图像的同时显示用图像处理部64c。但是,第一特殊图像处理部64a不生成第二特殊图像。此外,第二特殊图像处理部64b不生成第一特殊图像。关于这些第一特殊图像处理部64a、第二特殊图像处理部64b、同时显示用图像处理部64c的详细内容将在后面叙述。由特殊图像处理部64生成的第一特殊图像、第二特殊图像、同时显示用特殊图像的RGB图像信号被输入至影像信号生成部66。
影像信号生成部66将从通常图像处理部62或特殊图像处理部64输入的RGB图像信号转换为用于作为可由监视器18显示的图像来显示的影像信号。基于该影像信号,监视器18分别显示通常图像、第一特殊图像或第二特殊图像,或者同时显示第一特殊图像和第二特殊图像。
如图4所示,第一特殊图像处理部64a具备逆伽马转换部70、Log转换部71、信号比计算部72、平行移动部73、极坐标转换部74、角度扩展/压缩部75、正交坐标转换部76、RGB转换部77、构造强调部78、逆Log转换部79以及伽马转换部80。此外,第一特殊图像处理部64a在RGB转换部77与构造强调部78之间具备明亮度调整部82。需要说明的是,本发明的“第一移动处理部”对应于第一特殊图像处理部64a中的包含平行移动部73和角度扩展/压缩部75在内的结构。
逆伽马转换部70针对输入的RGB图像信号实施逆伽马转换。由于该逆伽马转换后的RGB图像信号是相对于来自检体的反射率而线性变化的反射率线性RGB信号,因此RGB图像信号中与检体的各种生物体信息关联的信号所占的比例变多。需要说明的是,将反射率线性R图像信号设为第一R图像信号,将反射率线性G图像信号设为第一G图像信号,将反射率线性B图像信号设为第一B图像信号。
Log转换部71对第一RGB图像信号(对应于本发明的“第一彩色图像信号”)分别进行Log转换。由此,可获得Log转换完毕的R图像信号(logR)、Log转换完毕的G图像信号(logG)、Log转换完毕的B图像信号(logB)。信号比计算部72(对应于本发明的“颜色信息获取部”)基于Log转换完毕的G图像信号和B图像信号进行差分处理(logG-logB=logG/B=-log(B/G)),由此来计算B/G比。这里,“B/G比”表示省略了-log(B/G)中的“-log”后的情形。此外,基于Log转换完毕的R图像信号和G图像信号进行差分处理(logR-logG=logR/G=-log(G/R)),由此来计算G/R比。G/R比与B/G比同样地表示省略了-log(G/R)中的“-log”后的情形。
需要说明的是,B/G比、G/R比根据在B图像信号、G图像信号、R图像信号中位于相同位置的像素的像素值而求出。此外,B/G比、G/R比按照每个像素而求出。此外,由于B/G比与血管深度(从粘膜表面到存在特定血管的位置为止的距离)相关,因此若血管深度不同,则B/G比也随之变动。此外,由于G/R比与血液量(血红蛋白指数)相关,因此若血液量有变动,则G/R比也随之变动。
平行移动部73基于由信号比计算部72求出的B/G比、G/R比,进行使某个范围的坐标平行移动的信号比空间用的第一处理。极坐标转换部74基于由平行移动部73完成平行移动的B/G比、G/R比来转换为矢径r和角度θ。在该极坐标转换部74中,针对所有像素进行向矢径r和角度θ的转换。角度扩展/压缩部75基于由极坐标转换部74极坐标转换后的信号比空间用的第一处理完毕的矢径r和角度θ,进行将角度θ扩展/压缩的信号比空间用的第二处理。关于这些信号比空间用的第一以及第二处理的详细内容将在后面叙述。
在正交坐标转换部76中,将由角度扩展/压缩部75完成信号比空间用的第二处理的角度扩展/压缩完毕的矢径r、角度θ转换为正交坐标。由此,再次转换为B/G比、G/R比。在RGB转换部77(对应于本发明的“彩色图像信号转换部”)中,使用从逆伽马转换部70输出的RGB图像信号中的至少一个图像信号,将经过正交坐标转换部76后的B/G比、G/R比转换为第二RGB图像信号(对应于本发明的“第二彩色图像信号”)。例如,RGB转换部77基于第一RGB图像信号中的G图像信号和B/G比进行运算,由此将B/G比转换为第二B图像信号。此外,RGB转换部77基于第一RGB图像信号中的G图像信号和G/R比进行运算,由此将G/R比转换为第二R图像信号。此外,RGB转换部77不对第一G图像信号实施特别转换,而作为第二G图像信号输出。
明亮度调整部82使用第一RGB图像信号和第二RGB图像信号来调整第二RGB图像信号的像素值。利用明亮度调整部82调整第二RGB图像信号的像素值的原因在于以下的理由。通过由平行移动部73以及角度扩展/压缩部75对颜色区域进行扩展/压缩的处理而获得的第二RGB图像信号的明亮度有可能比第一RGB图像信号有大幅改变。因此,通过利用明亮度调整部82对第二RGB图像信号的像素值进行调整,从而使明亮度调整后的第二RGB图像信号成为与第一RGB图像信号相同的明亮度。
明亮度调整部82具备:基于第一RGB图像信号求出第一明亮度信息Yin的第一明亮度信息计算部82a、和基于第二RGB图像信号求出第二明亮度信息Yout的第二明亮度信息计算部82b。第一明亮度信息计算部82a按照“kr×第一R图像信号的像素值+kg×第一G图像信号的像素值+kb×第一B图像信号的像素值”这一运算式来计算第一明亮度信息Yin。在第二明亮度信息计算部82b中,也与第一明亮度信息计算部82a同样地按照与上述相同的运算式来计算第二明亮度信息Yout。当求出第一明亮度信息Yin和第二明亮度信息Yout时,明亮度调整部82基于以下的式(E1)~(E3)进行运算,由此来调整第二RGB图像信号的像素值。
(E1):R*=第二R图像信号的像素值×Yin/Yout
(E2):G*=第二G图像信号的像素值×Yin/Yout
(E3):B*=第二B图像信号的像素值×Yin/Yout
其中,“R*”表示明亮度调整后的第二R图像信号,“G*”表示明亮度调整后的第二G图像信号,“B*”表示明亮度调整后的第二B图像信号。此外,“kr”、“kg”、“kb”是位于“0”~“1”的范围内的任意的常数。
在构造强调部78中,针对由明亮度调整部82进行明亮度调整后的第二RGB图像信号实施构造强调处理。作为构造强调处理,使用的是频率滤波等。逆Log转换部79针对经过构造强调部78后的RGB图像信号实施逆Log转换。由此,可获得具有反对数的像素值的RGB图像信号。伽马转换部80针对经过逆Log转换部79后的RGB图像信号实施伽马转换。由此,可获得具有适于监视器18等输出设备的灰度的RGB图像信号。经过伽马转换部80后的RGB图像信号作为第一特殊图像的RGB图像信号被送至同时显示用图像处理部64c或影像信号生成部66。
关于由平行移动部73进行的信号比空间用的第一处理的内容,以下使用图5所示那样的由纵轴B/G比、横轴G/R比形成的二维的颜色空间即特征空间(信号比空间)来进行说明。在信号比空间用的第一处理中,首先,计算信号比空间中因萎缩性胃炎而萎缩的萎缩粘膜所分布的第二观察范围内的平均值(Xa、Ya)。接着,使正常粘膜所分布的第一观察范围、和存在于因萎缩性胃炎而萎缩的萎缩粘膜下且伴随着萎缩而隐现的深层血管所分布的第三观察范围的所有坐标与第二观察范围的的坐标一起向纵轴的负方向和横轴的负方向平行移动与平均值(Xa、Ya)的大小相应的量。由此,如图6所示,第二观察范围(特定的范围)的坐标进入信号比空间上的包含原点在内的基准范围,并且第一以及第三观察范围的坐标也在维持与第二观察范围的坐标的位置关系的状态下靠近基准范围方向。基准范围是不包含信号比空间用的第一处理后的第一观察范围以及第三观察范围的低彩度的范围。
需要说明的是,如图8所示,在由a*、b*(表示作为颜色信息的CIELab空间的色调的要素a*、b*。以下相同。)形成的特征空间(ab空间)的情况下,也通过ab空间用的第一处理,使第一~第三观察范围全部平行移动与第二观察范围的平均值相应的量,以使第二观察范围进入基准范围,其中,a*、b*是利用Lab转换部(对应于本发明的“颜色信息获取部”)93对第一RGB图像信号进行Lab转换而获得的。这里,在图7中,“虚线的第一~第三观察范围”示出ab空间用的第一处理前的ab空间上的位置,“实线的第一~第三观察范围”示出ab空间用的第一处理后的ab空间上的位置。
需要说明的是,在使用a*、b*来进行ab空间用的第一处理的情况下,利用图8所示的特殊图像处理部84。特殊图像处理部84不同于第一特殊图像处理部64a,不具备逆伽马转换部70、Log转换部71、信号比计算部72、逆Log转换部79以及伽马转换部80。取而代之,特殊图像处理部84具备Lab转换部(对应于本发明的“颜色信息获取部”)83。关于除此之外的结构,特殊图像处理部84与第一特殊图像处理部64a相同。
Lab转换部83通过众所周知的Lab转换处理将第一RGB图像信号转换为L和a*、b*。L被送至RGB转换部77和明亮度调整部82。a*、b*被送至极坐标转换部74。在RGB转换部77中,将经过正交坐标转换部76后的a*、b*和L转换为第二RGB图像信号。在明亮度调整部82中,通过第一明亮度信息计算部82a使用规定的转换式将来自Lab转换部83的L转换为亮度信号Y。将该转换后的亮度信号Y设为第一明亮度信息Yin。此外,在第二明亮度信息计算部82b中,根据第二RGB图像信号来计算第二明亮度信息Yout。在明亮度调整部82中,使用第一明亮度信息Yin和第二明亮度信息Yout来进行第二RGB图像信号的像素值的调整。需要说明的是,第二明亮度信息Yout的计算方法和第二RGB图像信号的像素值的调整方法与上述第一特殊图像处理部64a的情况相同。
如图9所示,在由角度扩展/压缩部75进行的信号比空间用的第二处理中,在信号比空间中,变更位于角度变更范围R1内的坐标P1的角度θ,而针对角度变更范围R1外的坐标不进行角度θ的变更。角度变更范围R1被设定为包含第一观察范围和第三观察范围。需要说明的是,在信号比空间用的第二处理中,不对角度变更范围R1的坐标的矢径r进行变更。
在角度变更范围R1中,在第一观察范围与第三观察范围之间设定有第一中心线CL1。第一中心线CL1的角度为θc,使角度变更范围R1中的角度θc以下的角度θ向顺时针方向A1旋转,而使角度θc以上的角度θ向逆时针方向A2旋转。需要说明的是,优选针对从第一中心线CL1起一定的范围R1x的角度θ,进行以角度变化率比“1”大的角度变化率Wx来变更的扩展处理,针对超出范围R1x的范围R1y的角度θ,进行以角度变化率比“1”小的角度变化率Wy来变更的压缩处理。此外,优选通过信号比空间用的第二处理而使角度变更范围R1的坐标在从第一中心线CL1起±90度的范围(在信号比空间中将“正”的横轴设为0°且将角度由0°至360°来表现的情况下,从“270°+θc”到“θc+90°”为止的范围P(参照图10))内移动。需要说明的是,在角度变化率为“1”的情况下,即使进行变更角度θ的处理,角度θ的大小也不发生变化。
这里,由“直线L1”的斜率来表示角度变化率,在范围R1x内直线L1的斜率大于“1”,而在范围R1y内直线L1的斜率小于“1”(参照图11),其中,该“直线L1”表示将角度θ和角度Eθ建立关系的线CV1的切线。此外,在角度变更范围R1外,直线L1的斜率变为“1”(参照图11)。
通过进行以上的信号比空间用的第二处理,从而如图11所示,角度变更范围R1内的角度θc以下的角度θ被变更为比角度θ小的角度Eθ,另一方面,角度θc以上的角度θ被变更为比角度θ大的角度Eθ。相对于此,角度变更范围R1外的角度θ被转换(恒等转换)为与角度θr大小相同的角度Eθ。
由此,如图12所示,在第二观察范围的坐标维持在基准范围的状态下,第一观察范围的坐标的大部分移动至信号比空间的第二象限,另一方面,第三观察范围的坐标的大部分移动至信号比空间的第四象限。因此,第一观察范围、第三观察范围的坐标在信号比空间上分别存在于不同的象限。在该信号比空间用的第二处理后获得的第一特殊图像清晰地显示出存在萎缩粘膜、在萎缩粘膜下因萎缩而不断隐现的深层血管等的萎缩部与存在正常粘膜的正常部之间的边界。
需要说明的是,如图13所示,在特征空间为ab空间的情况下,也通过ab空间用的第二处理,在将第二观察范围的坐标维持在基准范围的状态下,使第一观察范围的坐标的大部分移动至ab空间的第二象限,另一方面,使第三观察范围的坐标的大部分移动至ab空间的第四象限。此外,针对在ab空间用的第一处理以及第二处理后获得的第二RGB图像信号,优选通过明亮度调整部82进行像素值的调整。第二RGB图像信号的像素值调整方法与上述相同。
如图14所示,第二特殊图像处理部64b具备与第一特殊图像处理部64a大致相同的结构。但是在第二特殊图像处理部64b中,取代平行移动部73而设置有矢径扩展/压缩部81。此外,由角度扩展/压缩部75进行的处理与由第一特殊图像处理部64a进行的信号比空间用的第二处理不同。需要说明的是,本发明的“第二移动处理部”对应于第二特殊图像处理部64b中的包含矢径扩展/压缩部81和角度扩展/压缩部75在内的结构。
在矢径扩展/压缩部81中,基于由极坐标转换部74完成转换的矢径r和角度θ来进行变更矢径r的信号比空间用的第三处理。关于该信号比空间用的第三处理的内容,以下使用如图15所示那样的信号比空间来进行说明。在信号比空间用的第三处理中,在信号比空间中,变更位于矢径变更范围R2内的坐标P2的矢径r而不变更矢径变更范围R2外的坐标的矢径。矢径变更范围R2是在矢径r从“rA”到“rB”的范围内且角度θ从“θA”到“θB”的范围内(rA<rB、θA<θB)。该矢径变更范围R2是包含因萎缩性胃炎而萎缩的萎缩粘膜所分布的第二观察范围在内的区域,并被设定为不包含正常粘膜所分布的第一观察范围、和存在于因萎缩性胃炎而萎缩的萎缩粘膜下且伴随着萎缩而隐现的深层血管所分布的第三观察范围。
需要说明的是,在信号比空间用的第三处理中,不对矢径变更范围R2的坐标的角度θ进行变更。此外,优选在信号比空间用的第三处理中,在矢径r从“rp”到“rB”的范围内,进行以矢径变化率比“1”大的矢径变化率Vx来变更矢径r的扩展处理,在矢径r从“rA”到“rp”的范围内,进行以矢径变化率比“1”小的矢径变化率Vy来变更矢径r的压缩处理。需要说明的是,在矢径变化率为“1”的情况下,即使进行变更矢径r的处理,矢径r的大小也不发生变化。
这里,由“直线L2”的斜率来表示矢径变化率,在从“rp”到“rB”的范围内直线L2的斜率大于“1”,而在从“rA”到“rp”的范围内直线L2的斜率小于“1”(参照图16),其中,该“直线L2”表示将矢径r和矢径Er建立关系的线CV2的切线。此外,在矢径变更范围R2外,直线L2的斜率变为“1”(参照图16)。
通过进行以上的信号比空间用的第三处理,从而如图16所示,矢径变更范围R2内的矢径r被变更为比矢径r小的矢径Er。相对于此,矢径变更范围R2外的矢径r被转换(恒等转换)为与矢径r大小相同的矢径Er。由此,如图17所示,在第一观察范围和第三观察范围的坐标维持不变的状态下,仅第二观察范围的坐标移动至包含原点在内的基准范围。需要说明的是,通过该第二观察范围的坐标的移动,在特殊图像上彩度降低。
需要说明的是,如图18所示,在特征空间为ab空间的情况下,通过ab空间用的第三处理,在维持第一观察范围和第三观察范围的坐标不变的状态下,仅使第二观察范围的坐标移动至包含原点在内的基准范围。
在第二特殊图像处理部64b的角度扩展/压缩部75中,基于信号比空间用的第三处理后的矢径r和角度θ,通过变更角度θ而进行在维持第一观察范围的坐标的状态下使第三观察范围的坐标移动的信号比空间用的第四处理。在信号比空间用的第四处理中,如图19所示,在信号比空间中,变更位于角度变更范围R3内的坐标P3的角度θ,另一方面,针对角度变更范围R3外的坐标不进行角度θ的变更。角度变更范围R3被设定为包含第三观察范围且不包含第一观察范围。需要说明的是,在信号比空间用的第四处理中,不对角度变更范围R3的坐标的矢径r进行变更。
在角度变更范围R3中,在第一观察范围与第三观察范围之间设定有成为角度θd的第二中心线CL2。第二中心线CL2的角度为θd,使角度变更范围R3中的角度θd以下的角度θ向顺时针方向旋转。需要说明的是,优选针对从第二中心线CL2起一定的范围R3x的角度θ,进行以角度变化率比“1”大的角度变化率Wx来变更的扩展处理,针对超出范围R3x的范围R3y的角度θ,进行以角度变化率比“1”小的角度变化率Wy来变更的压缩处理。此外,优选通过信号比空间用的第四处理来使角度变更范围R3的坐标在从第二中心线CL2起-90度的范围(在信号比空间中将“正”的横轴设为0°且将角度由0°至360°来表现的情况下,从“270°+θd”到“θd”为止的范围Q(参照图20))内移动。需要说明的是,在角度变化率为“1”的情况下,即使进行变更角度θ的处理,角度θ的大小也不发生变化。
这里,由“直线L3”的斜率来表示角度变化率,在范围R3x内直线L3的斜率大于“1”,而在范围R3y内直线L3的斜率小于“1”(参照图21),其中,该“直线L3”表示将角度θ和角度Eθ建立关系的线CV3的切线。此外,在角度变更范围R3外,直线L3的斜率变为“1”(参照图21)。
通过进行以上的信号比空间用的第四处理,从而如图21所示,在角度变更范围R3内,角度θ被变更为比角度θ小的角度Eθ。相对于此,角度变更范围R3外的角度θ被转换(恒等转换)为与角度θ大小相同的角度Eθ。
由此,如图22所示,在将第二观察范围的坐标维持在基准范围且维持第一观察范围的坐标不变的状态下,第三观察范围的坐标的大部分移动至信号比空间的第四象限。通过使该第三观察范围的坐标从第一象限移动至第四象限,从而在信号比空间上色相发生变化。据此,第一观察范围、第二观察范围以及第三观察范围的坐标完全地分离。
需要说明的是,如图23所示,在特征空间为ab空间的情况下,通过ab空间用的第四处理,从而在将第二观察范围的坐标维持在基准范围且维持第一观察范围的坐标不变的状态下,使第三观察范围的坐标的大部分移动至信号比空间的第四象限。此外,针对在ab空间用的第三处理以及第四处理后获得的第二RGB图像信号,优选通过明亮度调整部82进行像素值的调整。第二RGB图像信号的像素值调整方法与上述相同。
在信号比空间用的第四处理后获得的第二特殊图像维持正常部的颜色进行显示,另一方面,产生了萎缩性胃炎的萎缩部中的萎缩粘膜以退色调显示,针对在萎缩粘膜下因萎缩而不断隐现的深层血管也以萎缩时的颜色显示。从而,第二特殊图像以产生了萎缩性胃炎时的原本的颜色显示,因此正常部与萎缩部的颜色差异变得明显。
同时显示用图像处理部64c基于由第一特殊图像处理部64a和第二特殊图像处理部64b生成的第一特殊图像和第二特殊图像来生成同时显示用特殊图像。如图24所示,监视器18基于同时显示用特殊图像,在一侧显示第一特殊图像,在另一侧显示第二特殊图像。由于在第一特殊图像中正常部与萎缩部的边界非常清晰,因此第一特殊图像是容易掌握萎缩部的位置等的图像,然而由于正常部以并非原本的胃粘膜的颜色的伪彩色显示,因此第一特殊图像成为对医生而言有不适感的图像。另一方面,第二特殊图像与第一特殊图像相比,正常部与萎缩部的边界在某种程度上清晰,并且正常部的颜色以原本的胃的颜色显示,因此第二特殊图像成为对医生而言毫无不适感的图像。通过同时显示这两个第一特殊图像和第二特殊图像,能够在掌握正常部的颜色的同时检测正常部与萎缩部的边界。
接着,按照图25的流程图来说明本发明的一系列流程。首先,设置为通常观察模式,将内窥镜12的插入部12a插入检体内。在插入部12a的前端部12d到达胃之后,对模式切换SW13a进行操作,从通常观察模式切换为第一、第二特殊观察模式。需要说明的是,在一边观察第一特殊图像和第二特殊图像的双方一边进行萎缩性胃炎的诊断的情况下,切换为同时观察模式。
基于切换为第一、第二特殊观察模式后获得的RGB图像信号,通过信号比计算部72来计算B/G比、G/R比。接着,在设定为第一特殊观察模式的情况下,在由B/G比、G/R比形成的信号比空间中,针对正常粘膜所分布的第一观察范围的坐标、因萎缩性胃炎而萎缩的萎缩粘膜所分布的第二观察范围的坐标、以及存在于因萎缩性胃炎而萎缩的萎缩粘膜下且伴随着萎缩而隐现的深层血管所分布的第三观察范围的坐标,进行使第一~第三观察范围的坐标平行移动的信号比空间用的第一处理,使得第二观察范围的坐标进入基准范围。
然后,在第一、第二特殊观察模式的任一模式中,均通过极坐标转换而将B/G比、G/R比转换为矢径r、角度θ。在设定为第一特殊观察模式的情况下,基于极坐标转换后的信号比空间用的第一处理后的矢径r、角度θ,进行使第一观察范围的坐标与第三观察范围的坐标以相互分离的方式移动的信号比空间用的第二处理。通过正交坐标转换,将信号比空间用的第二处理后的矢径r、角度θ转换为正交坐标。基于正交坐标转换后的B/G比、G/R比来生成第一特殊图像。该第一特殊图像显示在监视器18上。
另一方面,在设定为第二特殊观察模式的情况下,基于极坐标转换后的矢径r、角度θ,进行在维持第一观察范围的坐标和第三观察范围的坐标的状态下使第二观察范围移动至基准范围的信号比空间用的第三处理。基于信号比空间用的第三处理后的矢径r、角度θ,进行在维持第一观察范围的坐标的状态下使第三观察范围的坐标移动的信号比空间用的第四处理。通过正交坐标转换,将信号比空间用的第四处理后的矢径r、角度θ转换为正交坐标。基于正交坐标转换后的B/G比、G/R比来生成第二特殊图像。该第二特殊图像显示在监视器18上。
需要说明的是,同时观察模式不限于同时显示第一特殊图像和第二特殊图像,例如也可以同时显示第一特殊图像和通常图像。此外还可以同时显示第二特殊图像和通常图像。在该情况下,分别由通常图像处理部62和特殊图像处理部64生成显示图像,经过影像信号生成部66而显示在监视器18中。
此外,在同时观察模式中,也可以同时显示第一特殊图像和第一~第四处理中的任一处理都未进行的第三特殊图像。该第三特殊图像由设置于特殊图像处理部64的第三特殊图像处理部(未图示)生成。第三特殊图像处理部与第一特殊图像处理部64a不同,不具备平行移动部73、极坐标转换部74、角度扩展/压缩部75、正交坐标转换部76以及RGB转换部77。除此之外,与第一特殊图像处理部64a相同。需要说明的是,在生成第三特殊图像时,优选在紫色光V的光强度比蓝色光B、绿色光G、红色光R的光强度大的状态下发出各种颜色的光。以这样的发光条件为基础而获得的第三特殊图像成为在图像整体维持明亮状态的状态下,强调显示表层血管的图像。
需要说明的是,在上述实施方式中,通过信号比计算部72根据第一RGB图像信号求出B/G比、G/R比,在由这些B/G比、G/R比形成的信号比空间中进行第一~第四处理,但也可以求出与B/G比、G/R比不同的多个颜色信息,并在由该多个颜色信息形成的特征空间中进行第一~第四处理。
例如,也可以求出色差信号Cr、Cb作为颜色信息,并在由色差信号Cr、Cb形成的特征空间(CbCr空间)中进行第一~第四处理。在使用色差信号Cr、Cb生成第一特殊图像的情况下,利用图26所示的第一特殊图像处理部94a。第一特殊图像处理部94a与第一特殊图像处理部64a不同,不具备逆伽马转换部70、Log转换部71、信号比计算部72、逆Log转换部79以及伽马转换部80。取而代之,第一特殊图像处理部94a具备亮度/色差信号转换部85。关于除此之外的结构,第一特殊图像处理部94a与第一特殊图像处理部64a相同。
亮度/色差信号转换部85(对应于本发明的“颜色信息获取部”)将第一RGB图像信号转换为亮度信号Y和色差信号Cr、Cb。在向色差信号Cr、Cb的转换中使用众所周知的转换式。色差信号Cr、Cb被送至平行移动部73。亮度信号Y被送至RGB转换部77和明亮度调整部82。在RGB转换部77中,将经过正交坐标转换部76后的色差信号Cr、Cb和亮度信号Y转换为第二RGB图像信号。在明亮度调整部82中,使用亮度信号Y作为第一明亮度信息Yin,并且使用由第二明亮度信息计算部82b求出的第二明亮度信息作为第二明亮度信息Yout,从而进行第二RGB图像信号的像素值的调整。另外,第二明亮度信息Yout的计算方法和第二RGB图像信号的像素值的调整方法与上述第一特殊图像处理部64a的情况相同。
在第一特殊图像处理部94a中,为了生成第一特殊图像而在纵轴由Cr形成且横轴由Cb形成的CbCr空间上进行CbCr空间用的第一处理以及第二处理。如图27所示,在CbCr空间上,第二观察范围分布在最靠近原点的位置,第一观察范围和第三观察范围分布在比第二观察范围距原点远的位置。此外,第一观察范围分布在靠近横轴Cb的位置,第三观察范围分布在靠近纵轴Cr的位置。
如图28所示,在CbCr空间用的第一处理中,平行移动部73按照将第一观察范围、第二观察范围、第三观察范围的坐标全部平行移动的方式进行处理,以使第二观察范围的坐标进入CbCr空间上的包含原点在内的基准范围。平行移动部73中的平行移动的方法与信号比空间的情况相同。基准范围是不包含CbCr空间用的第一处理后的第一观察范围以及第三观察范围的低彩度的范围。
需要说明的是,在图28中,虚线的范围示出CbCr空间用的第一处理前的范围,实线的范围示出CbCr空间用的第一处理后的范围。该“实线的范围”、“虚线的范围”的标记在以下所示的图中也相同。此外,“第一”示出“第一观察范围”,“第二”示出“第二观察范围”,“第三”示出“第三观察范围”。这些“第一”~“第三”的标记在以下所示的图中也相同。
如图29所示,在CbCr空间用的第二处理中,角度扩展/压缩部75按照在将第二观察范围维持在基准范围的状态下移动第一观察范围以及第三观察范围的方式进行处理,以使第一观察范围与第三观察范围的坐标相互分离。这样使第一观察范围以及第三观察范围移动的方法与信号比空间的情况相同,通过对角度进行扩展/压缩来进行。
在使用色差信号Cr、Cb生成第二特殊图像的情况下,利用图30所示的第二特殊图像处理部94b。第二特殊图像处理部94b与第二特殊图像处理部64b不同,不具备逆伽马转换部70、Log转换部71、信号比计算部72、逆Log转换部79以及伽马转换部80。取而代之,第二特殊图像处理部94b具备亮度/色差信号转换部85。关于除此之外的结构,第二特殊图像处理部94b与第二特殊图像处理部64b相同。需要说明的是,第二特殊图像处理部94b中的亮度/色差信号转换部85、RGB转换部77、明亮度调整部82的功能与第一特殊图像处理部94a的情况相同,因此省略说明。
在第二特殊图像处理部94b中,为了生成第二特殊图像而在CbCr空间上进行CbCr空间用的第三处理以及第四处理。如图31所示,在CbCr空间用的第三处理中,矢径扩展/压缩部81按照在维持第一观察范围以及第三观察范围的坐标的状态下移动第二观察范围的坐标的方式进行处理,以使第二观察范围的坐标进入CbCr空间上的包含原点在内的基准范围。这样使第二观察范围移动的方法与信号比空间的情况相同,通过对矢径进行扩展/压缩来进行。
如图32所示,在CbCr空间用的第四处理中,角度扩展/压缩部75按照在将第二观察范围维持在基准范围且维持第一观察范围的坐标的状态下仅移动第三观察范围的方式进行处理,以使第一观察范围与第三观察范围分离。这样使第三观察范围移动的方法与信号比空间的情况相同,通过对角度进行扩展/压缩来进行。
此外,也可以求出色相H(Hue)和彩度S(Saturation)作为颜色信息,并在由色相H和彩度S形成的特征空间(HS空间)中进行第一~第四处理。在使用色相H和彩度S生成第一特殊图像的情况下,利用图33所示的第一特殊图像处理部96a。第一特殊图像处理部96a与第一特殊图像处理部64a不同,不具备逆伽马转换部70、Log转换部71、信号比计算部72、平行移动部73、极坐标转换部74、正交坐标转换部76、角度扩展/压缩部75、以及逆Log转换部79、伽马转换部80。取而代之,第一特殊图像处理部96a具备HSV转换部。此外,第一特殊图像处理部96a在HSV转换部87与RGB转换部77之间具备第一平行移动部90和第二平行移动部91。关于其他方面,第一特殊图像处理部96a与第一特殊图像处理部64a相同。
HSV转换部87(对应于本发明的“颜色信息获取部”)将第一RGB图像信号转换为色相H、彩度S、明度V(Value)。在向色相H、彩度S、明度V的转换中使用众所周知的转换式。色相H、彩度S被送至第一平行移动部90。明度V被送至RGB转换部77。在RGB转换部77中,将经过第二平行移动部91后的色相H、彩度S和来自HSV转换部87的明度V转换为第二RGB图像信号。在明亮度调整部82中,使用由第一明亮度信息计算部82a求出的第一明亮度信息Yin和由第二明亮度信息计算部82b求出的第二明亮度信息Yout进行第二RGB图像信号的像素值的调整。需要说明的是,第一明亮度信息Yin、第二明亮度信息Yout的计算方法、以及第二RGB图像信号的像素值的调整方法与上述第一特殊图像处理部64a的情况相同。
在第一特殊图像处理部96a中,为了生成第一特殊图像而在HS空间上进行HS空间用的第一处理以及第二处理。如图34所示,在HS空间中,第二观察范围在彩度方向(纵轴方向)上位于第一观察范围的下方,第三观察范围在色相方向(横轴方向)上位于第一观察范围以及第二观察范围的右侧。如图35所示,在HS空间用的第一处理中,第一平行移动部90按照将第一观察范围、第二观察范围、以及第三观察范围的坐标全部平行移动的方式进行处理,以使第二观察范围进入基准范围。这里,HS空间上的基准范围是包含HS空间上的原点且不包含HS空间用的第一处理后的第一观察范围以及第三观察范围的低彩度的范围。在第一平行移动部90中,使第一观察范围、第二观察范围、以及第三观察范围的坐标在彩度方向上向下方平行移动。与平行移动后的色相H、彩度S相关的信息被送至第二平行移动部91。
如图36所示,在HS空间用的第二处理中,在由第一平行移动部90平行移动后的第一观察范围、第二观察范围以及第三观察范围中,将第二观察范围的坐标维持在基准范围的状态下使第一观察范围与第三观察范围的坐标平行移动,以使第一观察范围与第三观察范围相互分离。在该第二平行移动部91中,使第一观察范围的坐标在色相方向上向左侧平行移动,并且使第三观察范围的坐标在色相方向上向右侧平行移动。
在使用色相H、彩度S生成第二特殊图像的情况下,利用图37所示的第二特殊图像处理部96b。第二特殊图像处理部96b与第一特殊图像处理部96a大致相同,但在取代第一平行移动部90而设置有第三平行移动部92以及取代第二平行移动部91而设置有第四平行移动部93这一点上与第一特殊图像处理部96a不同。需要说明的是,第二特殊图像处理部96b中的HSV转换部87、RGB转换部77、明亮度调整部82的功能与第一特殊图像处理部96a的情况相同,因此省略说明。
在第二特殊图像处理部96b上,为了生成第二特殊图像而在HS空间上进行HS空间用的第三处理以及第四处理。如图38所示,在HS空间用的第三处理中,第三平行移动部92按照在维持第一观察范围以及第三观察范围的坐标的状态下将第二观察范围的坐标在彩度方向上向下方平行移动的方式进行处理。这里,HS空间上的基准范围是包含HS空间上的原点且不包含HS空间用的第一处理后的第一观察范围以及第三观察范围的低彩度的范围。与平行移动后的色相H、彩度S相关的信息被送至第四平行移动部93。
如图39所示,在HS空间用的第四处理中,在将由第三平行移动部92平行移动后的第一观察范围、第二观察范围、以及第三观察范围中的第二观察范围的坐标维持在基准范围且维持第一观察范围的坐标的状态下,使第三观察范围的坐标在色相方向上向右侧平行移动。
[第二实施方式]
在第二实施方式中,取代第一实施方式所示的四种颜色的LED20a~20d而使用激光光源和荧光体来进行观察对象的照明。除此之外与第一实施方式相同。
如图40所示,在第二实施方式的内窥镜系统100中,在光源装置14中取代四种颜色的LED20a~20d而设置有发出中心波长为445±10nm的蓝色激光的蓝色激光光源(在图40中标记为“445LD”)104、和发出中心波长为405±10nm的蓝紫色激光的蓝紫色激光光源(在图40中标记为“405LD”)106。由光源控制部108分开控制从这些各光源104、106的半导体发光元件发出的光,使蓝色激光光源104的出射光和蓝紫色激光光源106的出射光的光量比可自由变更。
在通常观察模式的情况下,光源控制部108使蓝色激光光源104驱动。相对于此,在第一或第二特殊观察模式、或者同时观察模式的情况下,光源控制部108按照使蓝色激光光源104和蓝紫色激光光源106的双方驱动,并且使蓝色激光的发光强度大于蓝紫色激光的发光强度的方式进行控制。从以上的各光源104、106出射的激光经由聚光透镜、光纤、合波器等光学构件(均未图示)而入射至导光部(LG)41。
需要说明的是,优选蓝色激光或者蓝紫色激光的半值宽度为±10nm左右。此外,蓝色激光光源104以及蓝紫色激光光源106能够使用大面积型InGaN系激光二极管,另外也能够使用InGaNAs系激光二极管、GaNAs系激光二极管。此外,作为上述光源,也可以为使用了发光二极管等发光体的结构。
在照明光学系统30a中除了照明透镜45之外还设置有供来自导光部41的蓝色激光或者蓝紫色激光入射的荧光体110。通过向荧光体110照射蓝色激光而从荧光体110发出荧光。此外,一部分的蓝色激光直接透过荧光体110。蓝紫色激光在不激励荧光体110的状态下透过。从荧光体110出射的光经由照明透镜45而照射至检体内。
这里,在通常观察模式下,主要是蓝色激光入射至荧光体110,因此图41所示那样的对蓝色激光以及由蓝色激光从荧光体110激励发光的荧光进行合波而得到的白色光照射至观察对象。另一方面,在第一或第二特殊观察模式、或者同时观察模式下,由于蓝紫色激光和蓝色激光的双方入射至荧光体110,因此图42所示那样的对蓝紫色激光、蓝色激光以及由蓝色激光从荧光体110激励发光的荧光进行合波而得到的特殊光照射至检体内。
需要说明的是,荧光体110优选使用构成为包含吸收蓝色激光的一部分而激励发光为绿色~黄色的多种荧光体(例如YAG系荧光体或BAM(BaMgAl10O17)等荧光体)的材料。如本构成例那样,如果将半导体发光元件作为荧光体110的激励光源来使用,则能够以高发光效率获得高强度的白色光,能够容易地调整白色光的强度,并且能够将白色光的色温、色度的变化抑制得较小。
[第三实施方式]
在第三实施方式中取代第一实施方式所示的四种颜色的LED20a~20d而使用氙灯等宽频带光源和旋转滤光器来进行观察对象的照明。此外,取代彩色的摄像传感器48而利用单色的摄像传感器来进行观察对象的摄像。除此之外与第一实施方式相同。
如图43所示,在第三实施方式的内窥镜系统200中,在光源装置14中,取代四种颜色的LED20a~20d而设置有宽频带光源202、旋转滤光器204以及滤光器切换部205。此外,在摄像光学系统30b中取代彩色的摄像传感器48而设置有未设置滤色器的单色的摄像传感器206。
宽频带光源202为氙灯、白色LED等,发出波段从蓝色至红色的白色光。旋转滤光器204具备:在内侧设置的通常观察模式用滤光器208、和在外侧设置的特殊观察模式用滤光器209(参照图44)。滤光器切换部205使旋转滤光器204在径向上移动,在通过模式切换SW13a而设置为通常观察模式时,将旋转滤光器204的通常观察模式用滤光器208插入白色光的光路中,在设置为第一或第二特殊观察模式、或者同时观察模式时,将旋转滤光器204的特殊观察模式用滤光器209插入白色光的光路中。
如图44所示,在通常观察模式用滤光器208中,沿着周向设置有使白色光之中的蓝色光透过的B滤光器208a、使白色光之中的绿色光透过的G滤光器208b、以及使白色光之中的红色光透过的R滤光器208c。因此,在通常观察模式时,通过使旋转滤光器204旋转,而将蓝色光、绿色光、红色光交替地照射至观察对象。
在特殊观察模式用滤光器209中,沿着周向设置有使白色光之中的特定波长的蓝色窄频带光透过的Bn滤光器209a、使白色光之中的绿色光透过的G滤光器209b、以及使白色光之中的红色光透过的R滤光器209c。因此,在特殊观察模式时,通过使旋转滤光器204旋转,而将蓝色窄频带光、绿色光、红色光交替地照射至观察对象。
在内窥镜系统200中,在通常观察模式时,每当向观察对象照射蓝色光、绿色光、红色光时,由单色的摄像传感器206对检体内进行拍摄。由此,可获得RGB这三种颜色的图像信号。然后,基于这些RGB的图像信号并按照与上述第一实施方式相同的方法来生成通常图像。
另一方面,在第一或第二特殊观察模式、或者同时观察模式时,每当向观察对象照射蓝色窄频带光、绿色光、红色光时,由单色的摄像传感器206对检体内进行拍摄。由此,可获得Bn图像信号、G图像信号和R图像信号。基于这些Bn图像信号、G图像信号和R图像信号来生成第一或第二特殊图像。在第一或第二特殊图像的生成中,取代B图像信号而使用Bn图像信号。除此之外,按照与第一实施方式相同的方法来生成第一或第二特殊图像。
[第四实施方式]
在第四实施方式中,取代插入型的内窥镜12以及光源装置14而使用吞咽式的胶囊内窥镜来获取生成通常图像、第一或第二特殊图像所需的RGB图像信号。
如图45所示,第四实施方式的胶囊内窥镜系统300具备胶囊内窥镜302、收发天线304、胶囊用接收装置306、处理器装置16以及监视器18。胶囊内窥镜302具备LED302a、摄像传感器302b、图像处理部302c以及发送天线302d。需要说明的是,处理器装置16与第一实施方式相同,但在第四实施方式中新设置有用于切换为通常观察模式、第一特殊观察模式、第二特殊观察模式的模式切换SW308。
LED302a发出白色光,在胶囊内窥镜302内设置有多个。这里,作为LED302a,优选使用具备蓝色光源、和对来自该蓝色光源的光进行波长转换而发出荧光的荧光体在内的白色LED等。也可以取代LED而使用LD(LaserDiode;激光二极管)。从LED302a发出的白色光对观察对象进行照明。
摄像传感器302b是彩色的摄像传感器,该摄像传感器302b对被白色光照明的观察对象进行拍摄,并输出RGB的图像信号。这里,作为摄像传感器302b,优选使用CCD(ChargeCoupledDevice;电荷耦合器件)摄像传感器、CMOS(ComplementaryMetal-OxideSemiconductor;互补金属氧化物半导体)摄像传感器。通过图像处理部302c,对从摄像传感器302b输出的RGB图像信号实施用于使其变成可由发送天线302d发送的信号的处理。经过图像处理部302c后的RGB图像信号,从发送天线302d以无线的方式发送至收发天线304。
收发天线304粘附在被检者的身体上,用于接收来自发送天线302d的RGB图像信号。收发天线304将接收到的RGB图像信号以无线的方式发送至胶囊用接收装置306。胶囊用接收装置306与处理器装置16的接收部53连接,将来自收发天线304的RGB图像信号发送至接收部53。
需要说明的是,在上述实施方式中,虽然使用了具有图3所示那样的发光光谱的四种颜色的光,但发光光谱并不限于此。例如,如图46所示,也可以将绿色光G以及红色光R设为具有与图3相同的光谱的光,另一方面将紫色光Vs设为中心波长为410~420nm且在比图3的紫色光V稍靠长波长侧具有波长范围的光。此外,也可以将蓝色光Bs设为中心波长为445~460nm且在比图3的蓝色光B稍靠短波长侧具有波长范围的光。
需要说明的是,在上述实施方式中,在第一特殊图像处理部64a中,基于B/G比、G/R比进行第一处理,并且通过极坐标转换将第一处理完毕的B/G比、G/R比转换为矢径r、角度θ,基于转换后的矢径r、角度θ来执行第二处理,然后再次返回到B/G比、G/R比,但是如图47所示,也可以使用二维LUT400,不对B/G比、G/R比进行极坐标转换等而直接将该B/G比、G/R比转换为第一以及第二处理完毕的、或者第三以及第四处理完毕的B/G比、G/R比。
需要说明的是,在二维LUT400中,将B/G比、G/R比、与进行基于该B/G比、G/R比的第一以及第二处理(或第三处理以及第四处理)而获得的第一以及第二处理完毕(或第三以及第四处理完毕)的B/G比、G/R比建立对应来存储。需要说明的是,在第二特殊图像处理部64b中,也可以使用二维LUT进行与上述相同的处理。此外,从逆伽马转换部70输出的第一RGB图像信号被输入至二维LUT400。或者,也可以与上述实施方式相同,向RGB转换部77输入第一RGB图像信号。
需要说明的是,在上述实施方式中,通过第二处理来变更角度θ,使第一观察范围与第三观察范围相互分离,但也可以通过其他方法使第一观察范围与第三观察范围相互分离。例如,也可以变更矢径r而使第一观察范围与第三观察范围相互分离,此外,还可以变更矢径r和角度θ的双方而使第一观察范围与第三观察范围相互分离。此外,在第四处理中,也可以按照维持第三观察范围的坐标并使第一观察范围的坐标移动的方式进行处理。
需要说明的是,在上述实施方式中,根据第一RGB图像信号求出B/G比、G/R比,并根据该求出的B/G比、G/R比形成信号比空间,但在第一B图像信号是从波段窄的窄频带光(例如,半值宽度为20nm的范围内的光)获得的窄频带信号的情况下,与从波段为宽频带光(例如,半值宽度为超出20nm的范围的光)获得的宽频带信号的情况相比,信号比空间上的第一观察范围与第二观察范围之差、以及第一观察范围与第三观察范围之差变大。这里,作为窄频带光,包含第一实施方式的“紫色光V”、“蓝色光B”、第二实施方式的“蓝色激光”或“蓝紫色激光”、第三实施方式的“蓝色窄频带光”、以及第四实施方式的“蓝色光源的光”。
在图48中,“Xn”示出第一B图像信号为窄频带信号的情况下的第二观察范围,“Xb”示出第一B图像信号为宽频带信号的情况下的第二观察范围。若比较“Xn”与“Xb”,则“Xn”在信号比空间上位于“Xb”的下方。此外,“Yn”示出第一B图像信号为窄频带信号的情况下的第三观察范围,“Yb”示出第一B图像信号为宽频带信号的情况下的第三观察范围。若比较“Yn”与“Yb”,则“Yn”在信号比空间上位于“Yb”的下方。
如图48所示,“Xn”的平均值AXn与第一观察范围的平均值AR1的差D12n大于“Xb”的平均值AXb与第一观察范围的平均值AR1的差D12b,“Yn”的平均值AYn与第一观察范围的平均值AR1的差D13n大于“Yb”的平均值AXb与第一观察范围AR1的差D13b。如以上那样,若是第一B图像信号为窄频带信号的情况,则第一观察范围与第二以及第三观察范围的差在对它们进行扩展/压缩的处理之前已然较大。通过对这种状态的第一~第三观察范围进行扩展/压缩的处理,从而能够更加明确地显示正常部与萎缩部的差异。
需要说明的是,通过将第一G图像信号设为窄频带信号,与上述同样地能够使第一观察范围与第二观察范围之差以及第一观察范围与第三观察范围之差比第一G图像信号为宽频带信号时大。并且,并不局限于如上述那样将第一B图像信号或第一G图像信号设为窄频带信号,通过将第一RGB图像信号中的至少一种颜色的图像信号设为窄频带信号,能够使第一观察范围与第二观察范围之差以及第一观察范围与第三观察范围之差比第一RGB图像信号全部为宽频带信号时大。此外,关于窄频带信号,除了如上述那样从窄频带光获得的信号之外,也包含通过日本特开2003-93336号公报中记载的分光推定处理而获得的信号。
需要说明的是,本发明除了能够应用于组入第一~第三实施方式那样的内窥镜系统、第四实施方式那样的胶囊内窥镜系统中的处理器装置之外,还能够应用于各种医用图像处理装置。
Claims (18)
1.一种医用图像处理装置,其特征在于,
所述医用图像处理装置具备:
图像信号输入处理部,其对第一彩色图像信号进行输入处理;
颜色信息获取部,其从所述第一彩色图像信号中获取多个颜色信息;以及
第一移动处理部,在由所述多个颜色信息形成的特征空间中,该第一移动处理部使被检体内的观察对象所分布的第一观察范围、第二观察范围以及第三观察范围的坐标移动,以使所述第一观察范围、第二观察范围以及第三观察范围中的任一个特定的范围的坐标进入在所述特征空间内确定的基准范围,并且该第一移动处理部使所述第一观察范围、第二观察范围以及第三观察范围中的所述特定的范围以外的两个范围的坐标移动,以使所述特定的范围以外的两个范围的坐标相互分离。
2.根据权利要求1所述的医用图像处理装置,其特征在于,
所述特征空间是CbCr空间或者ab空间中的任一个空间,其中,该CbCr空间由作为所述多个颜色信息的色差信号Cr、Cb形成,该ab空间由作为所述多个颜色信息的CIELab空间的色调的要素a*、b*形成。
3.根据权利要求2所述的医用图像处理装置,其特征在于,
在所述特征空间中,所述第一移动处理部使所述第一观察范围、第二观察范围以及第三观察范围的坐标平行移动,以使所述特定的范围的坐标进入所述基准范围,并且所述第一移动处理部对所述第一观察范围、第二观察范围以及第三观察范围中的所述特定的范围以外的两个范围的坐标的角度进行变更,使所述两个范围的坐标以相互分离的方式移动。
4.根据权利要求2所述的医用图像处理装置,其特征在于,
所述基准范围是包含所述特征空间的原点且不包含所述特定的范围以外的两个范围的范围。
5.根据权利要求1所述的医用图像处理装置,其特征在于,
所述多个颜色信息是色相H和彩度S,所述特征空间是由所述色相H和所述彩度S形成的HS空间。
6.根据权利要求5所述的医用图像处理装置,其特征在于,
在所述HS空间中,所述第一移动处理部使所述第一观察范围、第二观察范围以及第三观察范围的坐标向彩度方向平行移动,以使所述特定的范围的坐标进入所述基准范围,并且所述第一移动处理部使所述第一观察范围、第二观察范围以及第三观察范围中的所述特定的范围以外的两个范围的坐标以在色相方向上相互分离的方式移动。
7.根据权利要求5所述的医用图像处理装置,其特征在于,
所述基准范围是包含所述HS空间的原点且不包含所述特定的范围以外的两个范围的范围。
8.根据权利要求1所述的医用图像处理装置,其特征在于,
所述医用图像处理装置具备第二移动处理部,在所述特征空间中,该第二移动处理部在维持所述第一观察范围以及第三观察范围的坐标的状态下,使所述第二观察范围的坐标移动至所述基准范围,在维持所述第一观察范围的坐标的状态下,使所述第三观察范围的坐标移动。
9.根据权利要求8所述的医用图像处理装置,其特征在于,
所述特征空间是CbCr空间或者ab空间中的任一个空间,其中,该CbCr空间由作为所述多个颜色信息的色差信号Cr、Cb形成,该ab空间由作为所述多个颜色信息的CIELab空间的色调的要素a*、b*形成。
10.根据权利要求9所述的医用图像处理装置,其特征在于,
在所述特征空间中,所述第二移动处理部在维持所述第一观察范围以及第三观察范围的坐标的状态下,对所述第二观察范围的坐标的矢径进行变更而使所述第二观察范围移动至所述基准范围,并且在维持所述第一观察范围的坐标且将所述第二观察范围维持在所述基准范围的状态下,对所述第三观察范围的坐标的角度进行变更而使所述第三观察范围的坐标移动。
11.根据权利要求9所述的医用图像处理装置,其特征在于,
所述基准范围是包含所述特征空间的原点且不包含所述第一观察范围以及第三观察范围的范围。
12.根据权利要求8所述的医用图像处理装置,其特征在于,
所述多个颜色信息是色相H和彩度S,所述特征空间是由所述色相H和所述彩度S形成的HS空间。
13.根据权利要求12所述的医用图像处理装置,其特征在于,
在所述HS空间中,所述第二移动处理部在维持所述第一观察范围以及第三观察范围的坐标的状态下,使所述第二观察范围的坐标向彩度方向移动而使所述第二观察范围的坐标移动至所述基准范围,并且在维持所述第一观察范围的坐标且将所述第二观察范围维持在所述基准范围的状态下,使所述第三观察范围的坐标向色相方向移动。
14.根据权利要求12所述的医用图像处理装置,其特征在于,
所述基准范围是包含所述HS空间的原点且不包含所述第一观察范围以及第三观察范围的范围。
15.根据权利要求8所述的医用图像处理装置,其特征在于,
所述医用图像处理装置具备:
彩色图像信号转换部,其将由所述第一移动处理部或所述第二移动处理部处理后的多个颜色信息转换为第二彩色图像信号;和
明亮度调整部,其根据从所述第一彩色图像信号获得的第一明亮度信息以及从所述第二彩色图像信号获得的第二明亮度信息,来调整所述第二彩色图像信号的像素值。
16.根据权利要求1所述的医用图像处理装置,其特征在于,
所述第一彩色图像信号为三种颜色的图像信号,在所述特征空间中,所述第一彩色图像信号中的至少一种颜色的图像信号为窄频带信号时的所述第一观察范围与所述第二观察范围之差大于所述第一彩色图像信号全部为宽频带信号时的所述第一观察范围与所述第二观察范围之差,或者所述第一彩色图像信号中的至少一种颜色的图像信号为窄频带信号时的所述第一观察范围与所述第三观察范围之差大于所述第一彩色图像信号全部为宽频带信号时的所述第一观察范围与所述第三观察范围之差。
17.一种内窥镜系统,其特征在于,
所述内窥镜系统具备:
权利要求8所述的医用图像处理装置;和
显示部,其显示第一特殊图像和第二特殊图像,其中,该第一特殊图像是根据由所述第一移动处理部处理后的多个颜色信息而获得的,该第二特殊图像是根据由所述第二移动处理部处理后的多个颜色信息而获得的。
18.一种医用图像处理装置的工作方法,其特征在于,
具备如下步骤:
图像信号输入处理部对第一彩色图像信号进行输入处理的步骤;
颜色信息获取部从所述第一彩色图像信号中获取多个颜色信息的步骤;以及
在由所述多个颜色信息形成的特征空间中,第一移动处理部使被检体内的观察对象所分布的第一观察范围、第二观察范围以及第三观察范围的坐标移动,以使所述第一观察范围、第二观察范围、以及第三观察范围中的任一个特定的范围的坐标进入在所述特征空间内确定的基准范围,并且该第一移动处理部使所述第一观察范围、第二观察范围以及第三观察范围中的所述特定的范围以外的两个范围的坐标移动,以使所述特定的范围以外的两个范围的坐标相互分离的步骤。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014-133391 | 2014-06-27 | ||
JP2014133391A JP6050286B2 (ja) | 2014-06-27 | 2014-06-27 | 医用画像処理装置及びその作動方法並びに内視鏡システム |
Publications (2)
Publication Number | Publication Date |
---|---|
CN105212885A true CN105212885A (zh) | 2016-01-06 |
CN105212885B CN105212885B (zh) | 2018-04-03 |
Family
ID=54929239
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201510363187.6A Active CN105212885B (zh) | 2014-06-27 | 2015-06-26 | 医用图像处理装置及其工作方法、以及内窥镜系统 |
Country Status (3)
Country | Link |
---|---|
US (1) | US9854996B2 (zh) |
JP (1) | JP6050286B2 (zh) |
CN (1) | CN105212885B (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110868908A (zh) * | 2017-06-15 | 2020-03-06 | 富士胶片株式会社 | 医用图像处理装置及内窥镜系统以及医用图像处理装置的工作方法 |
CN111511263A (zh) * | 2017-12-26 | 2020-08-07 | 奥林巴斯株式会社 | 图像处理装置及图像处理方法 |
CN113139930A (zh) * | 2021-03-17 | 2021-07-20 | 杭州迪英加科技有限公司 | 甲状腺切片图像分类方法、装置、计算机设备和存储介质 |
Families Citing this family (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
USD841159S1 (en) * | 2015-06-12 | 2019-02-19 | Fujifilm Corporation | Operating grip for endoscope |
WO2018142658A1 (ja) * | 2017-02-01 | 2018-08-09 | オリンパス株式会社 | 画像処理装置、画像処理装置の作動方法、及び画像処理装置の作動プログラム |
US11263751B2 (en) * | 2018-10-26 | 2022-03-01 | Samsung Electronics Co., Ltd. | Method and apparatus for image segmentation using an event sensor |
JP7096788B2 (ja) * | 2019-06-28 | 2022-07-06 | 富士フイルム株式会社 | 医用画像処理装置及び内視鏡システム並びに医用画像処理装置の作動方法 |
WO2021181706A1 (ja) | 2020-03-13 | 2021-09-16 | オリンパス株式会社 | 内視鏡装置、プロセッサ、色彩強調方法 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US4860091A (en) * | 1986-11-28 | 1989-08-22 | Olympus Optical Co., Ltd. | Video image processing apparatus for emphasizing color of an image by enhancing saturation |
JP3228627B2 (ja) * | 1993-03-19 | 2001-11-12 | オリンパス光学工業株式会社 | 内視鏡用画像処理装置 |
JP2003093336A (ja) * | 2001-09-26 | 2003-04-02 | Toshiba Corp | 電子内視鏡装置 |
US20040225223A1 (en) * | 2003-04-25 | 2004-11-11 | Olympus Corporation | Image display apparatus, image display method, and computer program |
CN103561632A (zh) * | 2011-05-27 | 2014-02-05 | 奥林巴斯株式会社 | 内窥镜装置 |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH01138876A (ja) * | 1987-11-26 | 1989-05-31 | Toshiba Corp | カラー画像処理装置 |
JP3869324B2 (ja) * | 2002-06-26 | 2007-01-17 | オリンパス株式会社 | 蛍光観察用画像処理装置 |
JP4493386B2 (ja) * | 2003-04-25 | 2010-06-30 | オリンパス株式会社 | 画像表示装置、画像表示方法および画像表示プログラム |
JP5380973B2 (ja) * | 2008-09-25 | 2014-01-08 | 株式会社ニコン | 画像処理装置及び画像処理プログラム |
-
2014
- 2014-06-27 JP JP2014133391A patent/JP6050286B2/ja active Active
-
2015
- 2015-06-26 US US14/752,651 patent/US9854996B2/en active Active
- 2015-06-26 CN CN201510363187.6A patent/CN105212885B/zh active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US4860091A (en) * | 1986-11-28 | 1989-08-22 | Olympus Optical Co., Ltd. | Video image processing apparatus for emphasizing color of an image by enhancing saturation |
JP3228627B2 (ja) * | 1993-03-19 | 2001-11-12 | オリンパス光学工業株式会社 | 内視鏡用画像処理装置 |
JP2003093336A (ja) * | 2001-09-26 | 2003-04-02 | Toshiba Corp | 電子内視鏡装置 |
US20040225223A1 (en) * | 2003-04-25 | 2004-11-11 | Olympus Corporation | Image display apparatus, image display method, and computer program |
CN103561632A (zh) * | 2011-05-27 | 2014-02-05 | 奥林巴斯株式会社 | 内窥镜装置 |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110868908A (zh) * | 2017-06-15 | 2020-03-06 | 富士胶片株式会社 | 医用图像处理装置及内窥镜系统以及医用图像处理装置的工作方法 |
CN110868908B (zh) * | 2017-06-15 | 2022-04-08 | 富士胶片株式会社 | 医用图像处理装置及内窥镜系统以及医用图像处理装置的工作方法 |
US11328415B2 (en) | 2017-06-15 | 2022-05-10 | Fujifilm Corporation | Medical image processing device, endoscope system, and method of operating medical image processing device |
CN111511263A (zh) * | 2017-12-26 | 2020-08-07 | 奥林巴斯株式会社 | 图像处理装置及图像处理方法 |
CN113139930A (zh) * | 2021-03-17 | 2021-07-20 | 杭州迪英加科技有限公司 | 甲状腺切片图像分类方法、装置、计算机设备和存储介质 |
CN113139930B (zh) * | 2021-03-17 | 2022-07-15 | 杭州迪英加科技有限公司 | 甲状腺切片图像分类方法、装置、计算机设备和存储介质 |
Also Published As
Publication number | Publication date |
---|---|
US9854996B2 (en) | 2018-01-02 |
JP2016010507A (ja) | 2016-01-21 |
CN105212885B (zh) | 2018-04-03 |
US20150374263A1 (en) | 2015-12-31 |
JP6050286B2 (ja) | 2016-12-21 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN105266750A (zh) | 医用图像处理装置及其工作方法、以及内窥镜系统 | |
JP6461739B2 (ja) | 画像処理装置及び内視鏡システム並びに画像処理装置の作動方法 | |
CN105310633A (zh) | 医用图像处理装置及其工作方法、以及内窥镜系统 | |
CN105212885A (zh) | 医用图像处理装置及其工作方法、以及内窥镜系统 | |
CN104939792B (zh) | 医用图像处理装置及其工作方法 | |
CN106163367A (zh) | 医用图像处理装置及其工作方法以及内窥镜系统 | |
CN105101862A (zh) | 图像处理装置和内窥镜系统的工作方法 | |
US20150094538A1 (en) | Endoscope system, processor device, and method for operating endoscope system | |
CN105101863A (zh) | 图像处理装置和内窥镜系统的工作方法 | |
CN104939791B (zh) | 医用图像处理装置及其工作方法 | |
US10285631B2 (en) | Light source device for endoscope and endoscope system | |
US10278628B2 (en) | Light source device for endoscope and endoscope system | |
US20190208986A1 (en) | Endoscopic system, processor device, and method of operating endoscopic system | |
CN105701792A (zh) | 医用图像处理装置以及其工作方法 | |
CN105455773B (zh) | 医用图像处理装置及其工作方法 | |
JP6247784B2 (ja) | 医用画像処理装置及び内視鏡システム | |
JP6320592B2 (ja) | 内視鏡システム | |
JP6113116B2 (ja) | 医用画像処理装置及びその作動方法並びに内視鏡システム | |
JP2016174921A (ja) | 内視鏡システム | |
JP6659817B2 (ja) | 医用画像処理装置 | |
JP6456459B2 (ja) | 医用画像処理装置 | |
JP6383829B2 (ja) | 医用画像処理装置及びその作動方法並びに内視鏡システム | |
JP2020073098A (ja) | 医用画像処理装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |