CN107427186B - 内窥镜装置 - Google Patents

内窥镜装置 Download PDF

Info

Publication number
CN107427186B
CN107427186B CN201680012463.7A CN201680012463A CN107427186B CN 107427186 B CN107427186 B CN 107427186B CN 201680012463 A CN201680012463 A CN 201680012463A CN 107427186 B CN107427186 B CN 107427186B
Authority
CN
China
Prior art keywords
image data
light
parameter
oxygen saturation
characteristic quantity
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201680012463.7A
Other languages
English (en)
Other versions
CN107427186A (zh
Inventor
千叶亨
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hoya Corp
Original Assignee
Hoya Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hoya Corp filed Critical Hoya Corp
Publication of CN107427186A publication Critical patent/CN107427186A/zh
Application granted granted Critical
Publication of CN107427186B publication Critical patent/CN107427186B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/145Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue
    • A61B5/1455Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue using optical sensors, e.g. spectral photometrical oximeters
    • A61B5/1459Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue using optical sensors, e.g. spectral photometrical oximeters invasive, e.g. introduced into the body by a catheter
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002Operational features of endoscopes
    • A61B1/00004Operational features of endoscopes characterised by electronic signal processing
    • A61B1/00009Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
    • A61B1/000094Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope extracting biological structures
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002Operational features of endoscopes
    • A61B1/0002Operational features of endoscopes provided with data storages
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/04Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
    • A61B1/05Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances characterised by the image sensor, e.g. camera, being in the distal end portion
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/06Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
    • A61B1/0646Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements with illumination filters
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/06Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
    • A61B1/0653Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements with wavelength conversion
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/06Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
    • A61B1/0661Endoscope light sources
    • A61B1/0669Endoscope light sources at proximal end of an endoscope
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/06Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
    • A61B1/07Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements using light-conductive means, e.g. optical fibres
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/145Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue
    • A61B5/14546Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue for measuring analytes not otherwise provided for, e.g. ions, cytochromes
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/145Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue
    • A61B5/1455Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue using optical sensors, e.g. spectral photometrical oximeters
    • A61B5/14551Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue using optical sensors, e.g. spectral photometrical oximeters for measuring blood gases
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/145Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue
    • A61B5/1455Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue using optical sensors, e.g. spectral photometrical oximeters
    • A61B5/14551Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue using optical sensors, e.g. spectral photometrical oximeters for measuring blood gases
    • A61B5/14552Details of sensors specially adapted therefor
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/72Signal processing specially adapted for physiological signals or for diagnostic purposes
    • A61B5/7235Details of waveform analysis
    • A61B5/7246Details of waveform analysis using correlation, e.g. template matching or determination of similarity
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00064Constructional details of the endoscope body
    • A61B1/00071Insertion part of the endoscope body
    • A61B1/0008Insertion part of the endoscope body characterised by distal tip features
    • A61B1/00096Optical elements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10068Endoscopic image

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Surgery (AREA)
  • Engineering & Computer Science (AREA)
  • Veterinary Medicine (AREA)
  • General Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • Pathology (AREA)
  • Animal Behavior & Ethology (AREA)
  • Biophysics (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Molecular Biology (AREA)
  • Optics & Photonics (AREA)
  • Radiology & Medical Imaging (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Signal Processing (AREA)
  • Artificial Intelligence (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Physiology (AREA)
  • Psychiatry (AREA)
  • Endoscopes (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)

Abstract

本发明提供一种内窥镜装置。本发明的一个实施方式所涉及的内窥镜装置具备:光源装置;拍摄部,其具备拍摄元件,拍摄被光源装置发出的光照明的生物体组织并生成彩色图像数据;特征量取得部,其基于彩色图像数据取得生物体组织的特征量,特征量取得部具备第一参数生成部和第一特征量取得部,所述第一参数生成部基于彩色图像数据生成对于生物体组织的第一特征量具有灵敏度并且对于生物体组织导致的光散射实质上不具有灵敏度的第一参数,所述第一特征量取得部基于第一参数取得第一特征量。

Description

内窥镜装置
技术领域
本发明涉及一种内窥镜装置,其基于拍摄生物体组织而得到的的图像,取得生物体组织中的生物体物质的浓度等的生物体信息。
背景技术
已知一种内窥镜装置,其具备如下功能:根据内窥镜图像的色彩信息,定量被拍摄体即生物体组织中的生物体物质(例如血红蛋白)的浓度。这样的内窥镜装置的一例记载于国际公开第2014/192781号文件(以下,记为“专利文献1”。)。
专利文献1所记载的内窥镜装置,基于分别使用血红蛋白的500-600nm附近的吸收带内的两种波长范围的照明光进行拍摄而得到的两个内窥镜图像的色彩信息,计算表示总血红蛋白浓度的指标和表示氧饱和度的指标。
就血红蛋白的500-600nm附近的吸收带而言,吸收系数大,并且,吸收的变化相对于氧饱和度的变化也大。因此,通过利用使用500-600nm带的照明光进行拍摄而得到的图像,能够以高的灵敏度检测出总血红蛋白浓度和氧饱和度的分布。
发明内容
但是,由于血红蛋白在500-600nm带的吸收相比于其他的吸收带较大,因此,在观察总血红蛋白浓度高的生物体组织的情况下,存在受光量对于总血红蛋白和氧饱和度的变化变小、灵敏度降低的问题。
本发明是鉴于上述的问题而完成的,其目的在于提供一种内窥镜装置,能够根据生物体组织的图像信息取得总血红蛋白浓度高的生物体组织的氧饱和度。
本发明的一个实施方式所涉及的内窥镜装置,具备:光源装置;拍摄部,其拍摄被光源装置发出的光照明的生物体组织,生成RGB彩色图像数据;特征量取得部,其基于RGB彩色图像数据,取得生物体组织的特征量。特征量取得部根据RGB彩色图像数据,计算与生物体组织中的氧饱和度具有相关性的第一参数。第一参数为下述[a]以及[b]中的任一个,
[a]R/(R+G+B)
[b]R/W
其中,R为在白色光的照明下进行拍摄而得到的普通观察图像数据的R成分即第一普通观察图像数据R,
G为所述普通观察图像数据的G成分即第二普通观察图像数据G,
B为所述普通观察图像数据的B成分即第三普通观察图像数据B,
W为在第一特殊光的照明下进行拍摄而得到的RBG彩色图像数据的G成分即第一特殊观察图像数据W。
另外,在上述的内窥镜装置中,也可以为如下构成:特征量取得部基于修正第一参数取得氧饱和度,所述修正第一参数通过第一参数乘以第一修正值而得到,所述第一修正值修正总血红蛋白浓度的影响。
根据该构成,能够容易地取得不依存于总血红蛋白量的正确的氧饱和度。
另外,在上述的内窥镜装置中,也可以为如下构成:特征量取得部具备第一存储部,所述第一存储部保存有显示修正第一参数和氧饱和度的关系的数值表或函数。
另外,在上述的内窥镜装置中,也可以为如下构成:特征量取得部基于与总血红蛋白浓度具有相关性的第二参数取得第一修正值。
另外,在上述的内窥镜装置中,也可以为如下构成:特征量取得部具备第二存储部,所述第二存储部保存有显示第二参数和总血红蛋白浓度的关系的数值表或函数。
另外,在上述的内窥镜装置中,也可以为如下构成:第二参数为下述[c]至[e]中的任一个,
[c]R/G
[d]W/R
[e]W/(R+G)
其中,R为第一普通观察图像数据R,
G为第二普通观察图像数据G,
W为第一特殊观察图像数据W。
根据该构成,能够通过图像数据的简单的计算取得总血红蛋白浓度的指标。
另外,在上述的内窥镜装置中,也可以为如下构成:特征量取得部基于第二参数取得总血红蛋白浓度。
另外,在上述的内窥镜装置中,也可以为如下构成:第一特殊光具有血红蛋白的等吸收点E1附近至等吸收点E4附近的波长范围,所述等吸收点E1出现于528±5nm,所述等吸收点E4出现于584±5nm。
根据该构成,能够容易地取得不依存于氧饱和度的正确的总血红蛋白浓度。
另外,在上述的内窥镜装置中,也可以为如下构成:光源装置具备白色光源、和从白色光源发出的白色光取出第一特殊光的第一光学过滤器,所述光源装置切换发出白色光和第一特殊光。
根据该构成,通过具备一个白色光源和一个光学过滤器的简单的构成的光源装置,能够进行氧饱和度的正确的检测。
另外,在上述的内窥镜装置中,也可以为如下构成:当相当于第二参数的值的总血红蛋白浓度为规定值以上时,特征量取得部基于第一参数计算氧饱和度,当相当于第二参数的值的总血红蛋白浓度不到规定值时,特征量取得部基于反映血红蛋白的500-600nm吸收带的吸收的第三参数计算氧饱和度。
根据该构成,能够在总血红蛋白浓度的广泛范围内,根据图像信息取得正确的氧饱和度。
另外,在上述的内窥镜装置中,也可以为如下构成:光源装置还具备从白色光源发出的白色光取出第二特殊光的第二光学过滤器。在这种情况下,第三参数为N/W,
其中,W为第一特殊观察图像数据W,
N为在第二特殊光的照明下进行拍摄而得到的RBG彩色图像数据的G成分即所述第二特殊观察图像数据N,
第二特殊光具有血红蛋白的等吸收点E2附近至等吸收点E3附近的波长范围,所述等吸收点E2出现于547±5nm,所述等吸收点E3出现于569±5nm。
根据该构成,能够通过简单的构成取得散射导致的误差少的正确的氧饱和度。
另外,在上述的内窥镜装置中,也可以为如下构成:特征量取得部具备第三存储部,所述第三存储部保存有显示第三参数和氧饱和度的关系的数值表或函数。
本发明的一个实施方式所涉及的内窥镜装置,具备:光源装置,其能够发出第一光和第二光;拍摄部,其具备RGB彩色过滤器,拍摄被光源装置发出的光照明的生物体组织,并且能够生成彩色图像数据;特征量取得部,其基于彩色图像数据取得生物体组织的特征量。对于第一光通过拍摄部的R彩色过滤器而形成的第一通过光和第二光通过拍摄部的G彩色过滤器而形成的第二通过光的每一个,血红蛋白的吸收与氧饱和度具有相关性。特征量取得部具有选择部,所述选择部选择基于通过第一通过光进行拍摄而得到的第一图像数据和通过第二通过光进行拍摄而得到的第二图像数据中的任一个,取得生物体组织的氧饱和度,特征量取得部基于选择部所选择的图像数据取得生物体组织的氧饱和度。
另外,在上述的内窥镜装置中,也可以为如下构成:特征量取得部能够生成成为生物体组织的氧饱和度的指标的第一参数和成为生物体组织的总血红蛋白浓度的指标的第二参数,当相当于第二参数的值的总血红蛋白浓度为规定值以上时,选择部选择基于第一图像数据的氧饱和度的取得,当相当于第二参数的值的总血红蛋白浓度不到规定值时,选择部选择基于第二图像数据的氧饱和度的取得。
另外,在上述的内窥镜装置中,也可以为如下构成:内窥镜装置具备特征量分布图像生成部,特征量分布图像生成部基于特征量生成表示生物体组织中的该特征量的分布的特征量分布图像。
另外,在上述的内窥镜装置中,也可以为如下构成:拍摄部具备设置于前端部的内窥镜。
根据本发明的一个实施方式的构成,能够根据生物体组织的图像信息,取得总血红蛋白浓度高的生物体组织的氧饱和度。
附图说明
图1是血红蛋白的透过光谱。
图2是血红蛋白的500-600nm带的吸收光谱。
图3是表示氧饱和度和参数R/(R+G+B)的关系的曲线图。
图4是表示氧饱和度和参数αR/(R+G+B)的关系的曲线图。
图5是表示参数R/G和修正值α的关系的曲线图。
图6是本发明的实施方式所涉及的内窥镜装置的框图。
图7是内置于拍摄元件的彩色过滤器的透过光谱。
图8是旋转过滤器的外观图。
图9是表示本发明的实施方式所涉及的光谱分析处理(分光分析処理)的流程图。
图10是由本发明的实施方式所涉及的内窥镜装置生成的图像信息的显示例。(A)是普通观察图像的显示例,(B)以及(C)是氧饱和度分布图像的二维显示例。
具体实施方式
以下,参照附图对本发明的实施方式进行说明。
以下说明的本发明的实施方式所涉及的内窥镜装置为如下装置:基于在波长范围不同的光的照明下进行拍摄而得到的多个图像,对被拍摄体的生物体信息(例如,总血红蛋白浓度和氧饱和度等生物体组织的特征量)进行定量分析,并图像化显示分析结果。在利用该装置进行的总血红蛋白浓度以及氧饱和度的定量分析中,利用血液的光谱特性(即血红蛋白的光谱特性)对应于总血红蛋白浓度或氧饱和度连续变化这一性质。
<生物体组织的光谱特性和生物体信息的计算原理>
在对本发明的实施方式所涉及的内窥镜装置的详细的构成进行说明之前,对血红蛋白的光谱特性和本发明的实施方式所涉及的氧饱和度等生物体组织的特征量(生物体信息)的计算原理进行说明。
[利用500-600nm带的吸收进行的计算]
图1中显示血红蛋白的透过光谱。另外,图2中显示550nm附近的血红蛋白的吸收光谱。血红蛋白在550nm附近具有强吸收带。血红蛋白的吸收光谱根据氧饱和度(全血红蛋白中的氧合血红蛋白HbO所占的比例)而发生变化。在图1以及图2中,实线为氧饱和度为100%的情况下的(即,氧合血红蛋白HbO的)光谱,长虚线为氧饱和度为0%的情况下的(即,还原血红蛋白Hb的)光谱。另外,短虚线为其中间的氧饱和度(10、20、30、…90%)中的血红蛋白(氧合血红蛋白HbO和还原血红蛋白Hb的混合物)的光谱。
如图2所示,在500-600nm带中,氧合血红蛋白HbO和还原血红蛋白Hb具有彼此不同的峰值波长。具体而言,氧合血红蛋白HbO具有波长542nm附近(例如542±5nm)的吸收峰值P1和波长576nm附近(例如576±5nm)的吸收峰值P3。另一方面,还原血红蛋白Hb在556nm附近(例如556±5nm)具有吸收峰值P2。在图2中,由于是各成分(氧合血红蛋白HbO、还原血红蛋白Hb)的浓度之和为一定的两成分的吸收光谱,因此,出现了与各成分的浓度(即氧饱和度)无关的、吸收为一定的等吸收点E1(528nm附近[例如528±5nm])、E2(547nm附近[例如547±5nm])、E3(569nm附近[例如569±5nm])、E4(584nm附近[例如584±5nm])。在以下的说明中,将被等吸收点E1和E2夹着的波长区域称为“波长范围R1”,将被等吸收点E2和E3夹着的波长区域称为“波长范围R2”,将被等吸收点E3和E4夹着的波长区域称为“波长范围R3”。另外,将被等吸收点E1和E4夹着的波长区域(即合并波长范围R1、R2以及R3的区域)称为“波长范围R0”。另外,在以下的说明中,将波长范围R2也称为N带(Narrow-band,窄带),将波长范围R0也称为W带(Wide-band,宽带)。
如图2所示,在邻接的等吸收点之间,血红蛋白的吸收相对于氧饱和度线性地增加或减少。另外,在邻接的等吸收点之间,血红蛋白的吸收相对于氧饱和度大致线性地变化。
具体而言,波长范围R1、R3中的血红蛋白的吸收AR1、AR3相对于氧合血红蛋白的浓度线性地增加。另外,波长范围R2中的血红蛋白的吸收AR2相对于还原血红蛋白的浓度线性地增加。
在此,通过下述公式1定义氧饱和度。
【公式1】
其中,Sat:氧饱和度
[Hb]:还原血红蛋白的浓度
[HbO]:氧合血红蛋白的浓度
[Hb]+[HbO]:总血红蛋白浓度(tHb)。
另外,通过公式1能够得到表示氧合血红蛋白以及还原血红蛋白的浓度的公式2、公式3。
【公式2】
[HbO]=Sat·([Hb]+[HbO])
【公式3】
[Hb]=(1-Sat)·([Hb]+[HbO])
因此,血红蛋白的吸收AR1、AR2以及AR3为依存于氧饱和度Sat和总血红蛋白浓度tHb双方的特性量。
另外,根据本申请发明人的研究判明如下:由波长范围R1、R2以及R3构成的波长范围R0中的血红蛋白的吸收的积分值AR0几乎不依存于氧饱和度Sat,为由总血红蛋白浓度tHb决定的值。因此,能够根据吸收AR0定量总血红蛋白浓度tHb。
另外,根据从吸收AR0定量的总血红蛋白浓度tHb和吸收AR1、AR2或AR3,能够定量氧饱和度Sat。此外,如图2所示,在波长范围R1、R2以及R3中,氧饱和度Sat所导致的吸收的变化量(即由实线的波形和长虚线的波形所包围的区域的面积)在波长范围R2中最大,波长范围R2的吸收AR2成为对于氧饱和度Sat灵敏度最高的特性量。
另外,生物体组织的光谱特性受到生物体组织引起的光散射的影响。也就是说,生物体组织的光散射成为总血红蛋白浓度tHb和氧饱和度Sat的定量中的误差的主要原因。为了根据生物体组织的图像信息进行正确的定量,需要修正散射的影响。
本申请发明人的研究团队对从生物体组织的图像信息能够取得的总血红蛋白浓度tHb以及氧饱和度Sat的指标进行了研究,从而创造出了以下的公式4-6所表示的不依存于光散射的三个参数W/R、W/(R+G)以及N/W。参数W/R、W/(R+G)为基于上述的吸收AR0和总血红蛋白浓度tHb的定量的关系的、成为总血红蛋白浓度tHb的指标的参数。另外,参数N/W为基于上述的吸收AR2和氧饱和度Sat的定量的关系的、成为氧饱和度Sat的指标的参数。
【公式4】
【公式5】
【公式6】
在此,W(x、y)为在W带的光的照明下进行拍摄而得到的图像数据的像素(x、y)的值,N(x、y)为在N带的光的照明下进行拍摄而得到的图像数据的像素(x、y)的值。此外,W带以及N带包含于单板式原色系彩色拍摄元件的G彩色过滤器的通过波长范围。也就是说,W带以及N带的光的像由安装有G彩色过滤器的色彩像素所拍摄,并作为G数字彩色图像数据获得。
另外,R(x,y)以及G(x,y)分别为在白色光的照明下进行拍摄而得到的图像数据的像素(x,y)的值。具体而言,R(x,y)为由安装有R彩色过滤器的色彩像素所拍摄的R数字彩色图像数据的值,G(x,y)为由安装有G彩色过滤器的色彩像素所拍摄的G数字彩色图像数据的值。
参数W/R以及W/(R+G)对于总血红蛋白浓度tHb具有灵敏度,而对于散射的强度和氧饱和度Sat几乎不具有灵敏度。因此,根据参数W/R以及W/(R+G)能够取得几乎不包含起因于散射的强度和氧饱和度Sat的误差的总血红蛋白浓度tHb的值。
另外,参数N/W对于总血红蛋白浓度tHb以及氧饱和度Sat具有灵敏度,而对于散射的强度几乎不具有灵敏度。因此,如果总血红蛋白浓度tHb为已知的话,则根据参数N/W能够取得几乎不包含起因于散射的误差的氧饱和度Sat的值。
[利用了600-700nm带的吸收的计算]
另外,如图1所示,500-600nm的吸收带的范围延伸至800nm附近。在600-700nm带(以下,称为“波长范围R4”。)中,血红蛋白的吸收相对于氧饱和度Sat线性地单调地减少。波长范围R4(特别是600-650nm带)的吸收AR4与500-600nm带相比较小,同时,相对于氧饱和度Sat的变化的变动幅度(即对于氧饱和度Sat的灵敏度)较大,仍然能够成为氧饱和度Sat的指标。
根据生物体组织的图像数据严格地计算吸收AR4是困难的,但是本申请发明人创造出的参数R/(R+G+B)以及R/W分别成为表示与氧饱和度具有相关性的AR4的指标(公式7、公式8)。通过使用参数R/(R+G+B)或R/W,根据生物体组织的图像数据能够容易地计算表示AR4(并且氧饱和度Sat)的指标。
【公式7】
【公式8】
在公式7中,B(x,y)为在白色光的照明下进行拍摄而得到的图像数据的像素(x,y)的值。具体而言,B(x,y)为由安装有B彩色过滤器的色彩像素拍摄的B数字彩色图像数据的值。
吸收AR4依存于总血红蛋白浓度tHb。因此,作为吸收AR4的指标的参数R/(R+G+B)以及R/W也依存于总血红蛋白tHb。为了得到正确的氧饱和度Sat,需要对各参数R/(R+G+B)或R/W修正总血红蛋白浓度tHb的影响。
接着,以参数R/(R+G+B)为例,对修正由来于总血红蛋白浓度tHb的误差的方法进行说明。
图3为标示了氧饱和度Sat和参数R/(R+G+B)的关系的曲线图。即使氧饱和度Sat为相同的值,总血红蛋白浓度tHb越大,参数R/(R+G+B)的值越大,仅根据参数R/(R+G+B)并不能得到正确的氧饱和度Sat。
图4为将参数R/(R+G+B)乘以由总血红蛋白浓度tHb决定的修正值α(tHb)而得到的参数αR/(R+G+B)相对于氧饱和度Sat标示的曲线图。在图4中,所有的总血红蛋白浓度tHb中的值分布在大致同一曲线上,参数αR/(R+G+B)为几乎不依存于总血红蛋白浓度tHb的值。
修正值α(tHb)的值通过规定的基准条件(例如Sat=0,tHb=40)中的参数R/(R+G+B)的值除以与该基准条件相同的氧饱和度Sat(在该例中,Sat=0)下的各总血红蛋白浓度tHb中的参数R/(R+G+B)的值而得到。
根据生物体组织的图像数据严格地计算总血红蛋白浓度tHb的值是困难的,而本申请发明人所创造出的参数R/G为表示总血红蛋白浓度tHb的指标(公式9)。通过使用参数R/G,根据生物体组织的图像数据能够容易地计算表示总血红蛋白浓度tHb的指标。
【公式9】
图5是标示了实验取得的参数R/G和修正值α的关系的曲线图。使用该曲线图,根据参数R/G的值能够得到修正值α的值。
由于500-600nm带(波长范围R1-R3)吸收大,因此,利用了波长范围R1-R3中的吸收的公式4-6的参数(特别是,使用在波长范围窄且光量少的波长范围R2的光的照明下进行拍摄而得到的图像数据N的公式6的参数N/W)适合于总血红蛋白浓度tHb比较少的生物体组织的评价。
另一方面,由于600-700nm带(波长范围R4)吸收小,因此,利用了波长范围R4中的吸收的公式7-9的参数适合于总血红蛋白浓度tHb比较高的生物体组织的评价。
在以下说明的本发明的实施方式中,对于总血红蛋白浓度tHb比较低的生物体组织,基于波长范围R1-R3中的强吸收计算生物体组织中的生物体物质的浓度(具体而言,总血红蛋白浓度tHb以及氧饱和度Sat),对于总血红蛋白浓度tHb比较高的生物体组织,基于波长范围R4中的弱吸收计算生物体组织中的生物体物质的浓度。这样,根据总血红蛋白浓度tHb的大小,通过选择氧饱和度Sat的计算中所使用的波长范围的构成,能够遍及广泛的浓度范围而取得正确的氧饱和度Sat。
<内窥镜装置的构成>
图6是本发明的实施方式所涉及的内窥镜装置1的框图。本实施方式的内窥镜装置1具备电子内窥镜100、处理器200以及监视器300。电子内窥镜100以及监视器300能够装卸地连接于处理器200。另外,光源部400以及图像处理部500内置于处理器200。
电子内窥镜100具有插入被检者的体内的插入管110。在电子内窥镜100的内部,设置有遍及大致全长而延伸的导光件131。导光件131的一端部(前端部131a)配置于插入管110的前端部(插入管前端部111),导光件131的另一端部(基端部131b)连接于处理器200。处理器200内置有光源部400,作为白色光源的一例,所述光源部400具备氙气灯等生成光量大的白色光WL的光源灯430等。由该光源部400生成的照明光IL射入导光件131的基端131b。射入导光件131的基端131b的光经由导光件131被导入其前端部131a,从前端部131a放射出。在电子内窥镜100的插入管前端部111设置有与导光件131的前端部131a对向配置的配光透镜132,从导光件131的前端部131a放射出的照明光IL通过配光透镜132对插入管前端部111的附近的生物体组织T进行照明。
另外,在插入管前端部111设置有物镜光学系统121以及拍摄部的一例即拍摄元件141。由生物体组织T的表面反射或者散射的照明光IL的一部分(返回光)射入物镜光学系统121并被聚光,在拍摄元件141的感光面上成像。本实施方式的拍摄元件141为在其感光面具备彩色过滤器141a的彩色图像拍摄用的CCD(Charge Coupled Device,电荷耦合元件)图像传感器。对于拍摄元件141,也可以使用CMOS(Complementary Metal OxideSemiconductor,互补金属氧化物半导体)图像传感器等其他种类的拍摄元件。
彩色过滤器141a配列有使红色的光通过的R彩色过滤器、使绿色的光通过的G彩色过滤器和使蓝色的光通过的B彩色过滤器,其为直接形成在拍摄元件141的各感光元件上的、所谓的片上过滤器(オンチップフィルタ)。R、G、B的各过滤器具有如图7所示的光谱特性。也就是说,本实施方式的R彩色过滤器为使波长约570nm以上的长波长的光通过的过滤器,G彩色过滤器为使波长约500nm~620nm的光通过的过滤器,B彩色过滤器为使波长约530nm以下的短波长的光通过的过滤器。
拍摄元件141以与后述的信号处理电路550同步地驱动的方式被控制,同步地(例如,以1/30秒间隔)输出对应于在感光面上成像的被拍摄体像的拍摄信号。从拍摄元件141输出的拍摄信号经由电缆142被传送至处理器200的图像处理部500。
图像处理部500具备A/D转换电路510、临时存储存储器520、控制器530、视频存储器540以及信号处理电路550。A/D转换电路510对从电子内窥镜100的拍摄元件141经由电缆142输入的拍摄信号进行A/D转换并输出数字图像数据。从A/D转换电路510输出的数字图像数据被传送至临时存储存储器520并被存储。数字图像数据中包括通过安装有R彩色过滤器的感光元件进行拍摄而得到的R数字图像数据、通过安装有G彩色过滤器的感光元件进行拍摄而得到的G数字图像数据以及通过安装有B彩色过滤器的感光元件进行拍摄而得到的B数字图像数据。此外,在本说明书中,将R数字图像数据、G数字图像数据以及B数字图像数据也称为单色图像数据(R单色图像数据、G单色图像数据以及B单色图像数据)。
控制器530对存储于临时存储存储器520的单数或者多数数字图像数据进行处理,从而生成监视器300中显示的画面数据,并将该画面数据传送至视频存储器540。例如,控制器530生成:从单一的数字图像数据生成的画面数据;排列有多个数字图像数据的图像的画面数据;或者基于多个数字图像数据,在每个像素(x,y)上生成生物体组织T的反射光谱,并基于其生成包含以颜色区别健康部位和病变部位的图像的画面数据;和包含对应于特定的像素(x,y)的生物体组织T的反射光谱的曲线图显示的画面数据等,并将其存储于视频存储器540。信号处理电路550基于视频存储器540中存储的画面数据生成规定的形式(例如,依照NTSC规格或DVI规格的形式)的视频信号并输出。从信号处理电路550输出的视频信号被输入至监视器300。其结果是,通过电子内窥镜100进行拍摄而得到的内窥镜图像等显示于监视器300。
这样,处理器200兼具如下两种功能:作为对从电子内窥镜100的拍摄元件141输出的拍摄信号进行处理的视频处理器的功能;作为将用于照明被拍摄体即生物体组织T的照明光IL供给至电子内窥镜100的导光件131的光源装置的功能。
作为光源装置的一例的光源部400除了上述的光源430之外还具备聚光透镜440、旋转过滤器410、过滤器控制部420以及聚光透镜450。从光源430射出的大致平行光的白色光WL被聚光透镜440聚光,通过旋转过滤器410之后,被聚光透镜450再次聚光,并射入导光件131的基端131b。此外,旋转过滤器410通过线性导线(リニアガイドウェイ)等移动单元(未图示)在白色光WL的光路上的适用位置和光路外的退避位置之间能够移动。
此外,光源部400的构成并不限定于图6所示的构成。例如,对于光源430也可以采用产生収束光的灯。在这种情况下,例如,也可以采用如下构成:使白色光WL在聚光透镜440的前方聚光,并使其作为扩散光射入聚光透镜440。
另外,也可以采用如下构成:不使用聚光透镜440,而使光源430产生的大致平行光直接射入旋转过滤器410。
另外,在使用产生収束光(収束光)的灯的情况下,也可以采用如下构成:使用准直透镜代替聚光透镜440,在大致平行光的状态下,使白色光WL射入旋转过滤器410。例如,在旋转过滤器410上使用电介体多层膜过滤器等干涉型光学过滤器的情况下,通过使大致平行光的白色光WL射入旋转过滤器410,由于使白色光WL向光学过滤器的入射角均匀,因此,能够得到更加良好的过滤器特性。
另外,光源430也可以采用产生发散光的灯。在这种情况下,也能够采用如下构成:使用准直透镜代替聚光透镜440,使大致平行光的白色光WL射入旋转过滤器410。
旋转过滤器410为具备多个光学过滤器的圆盘型的光学组件,以根据其旋转角度来切换通过波长范围的方式构成。通过连接于控制器530的过滤器控制部420来控制旋转过滤器410的旋转角度。控制器530经由过滤器控制部420控制旋转过滤器410的旋转角度,由此,切换通过旋转过滤器410而供给至导光件131的照明光IL的光谱。
图8是旋转过滤器410的外观图(主视图)。旋转过滤器410具备大致圆盘状的框架411、三个扇形的光学过滤器415、416以及418。光学过滤器415、416分别为第一光学过滤器、第二光学过滤器的一例。围绕框架411的中心轴以等间隔形成有三个扇状的窗414a、414b以及414c,光学过滤器415、416以及418分别嵌入各窗414a、414b以及414c。此外,本实施方式的光学过滤器均为电介体多层膜过滤器,也可以使用其他方式的光学过滤器(例如,吸收型的光学过滤器或将电介体多层膜用作反射膜的标准过滤器等)。
另外,在框架411的中心轴上形成凸起孔412。过滤器控制部420具备的伺服电机(未图示)的输出轴插入固定于凸起孔412,旋转过滤器410与伺服电机的输出轴一起旋转。
图8中示出白色光WL射入光学过滤器415的状态,当旋转过滤器410向箭头所示的方向旋转时,射入有白色光WL的光学过滤器按照415、416、418的顺序进行切换,由此来切换通过旋转过滤器410的照明光IL的光谱顺序。
光学过滤器415以及416为选择性地使550nm带的光通过的光带通滤波器。如图2所示,光学过滤器415以如下方式构成:以低损失使从等吸收点E1至E4的波长范围(即波长范围R0(W带))的光通过,并遮断其以外的波长区域的光。另外,光学过滤器416以如下方式构成:以低损失使从等吸收点E2至E3的波长范围(即波长范围R2(N带))的光通过,并遮断其以外的波长区域的光。
如图2所示,波长范围R1中包含由来于氧合血红蛋白的吸收峰值P1的峰值波长,波长范围R2中包含由来于还原血红蛋白的吸收峰值P2的峰值波长,波长范围R3中包含由来于氧合血红蛋白的吸收峰值P3的峰值波长。另外,波长范围R0中包含三个吸收峰值P1、P2、P3的各峰值波长。
另外,光学过滤器415以及416的通过波长范围即W带以及N带(图2)包含于彩色过滤器141a的G彩色过滤器的通过波长范围。因此,由通过了光学过滤器415或416的光形成的被拍摄体像被拍摄元件141的安装有G彩色过滤器的感光元件拍摄并被作为G数字图像数据获得。
另外,光学过滤器418为阻隔紫外线过滤器,通过了光学过滤器418的照明光IL(即白色光)使用于普通观察像的拍摄。此外,也可以为如下构成:不使用光学过滤器418,开放框架411的窗414c。另外,在本说明书中,将通过了光学过滤器415或416的照明光IL也称为特殊光(或者特殊观察光),将通过了光学过滤器418的白色光(或者宽带光)也称为普通光(或者普通观察光)。
另外,在窗414a上,与光学过滤器415重叠地安装有减光过滤器(ND过滤器)419。减光过滤器419在整个可见光范围内不存在波长依存性,不会使照明光IL的光谱变化而仅减少光量。通过减光过滤器419的使用,将通过了光学过滤器415以及减光过滤器419的照明光IL的光量调整为与通过了光学过滤器416的照明光IL的光量大致相同程度。由此,即使在使用通过了光学过滤器415、416任意一个的照明光IL的情况下,也能够以相同的曝光时间进行适当曝光下的拍摄。
在本实施方式中,使用网眼细的金属网作为减光过滤器419。除了金属网以外,也可以使用切口或半透明反射镜等其他方式的减光过滤器。另外,也可以不使用减光过滤器而调整光学过滤器415、416自身的透过率。另外,也可以在窗414b、414c上安装减光过滤器。另外,也可以通过改变窗414a~414c的中心角(即开口面积)来调整通过光量。另外,也可以不使用减光过滤器而对使用的每个光学过滤器调整曝光时间。
在框架411的周缘部形成有贯通孔413。贯通孔413在框架411的旋转方向形成于与窗414a和窗414c的边界部相同的位置(相位)。在框架411的周围,用于检测贯通孔413的光遮断器422以包围框架411的周缘部的一部分的方式配置。光遮断器422连接于过滤器控制部420。
本实施方式的内窥镜装置1具有普通观察模式和光谱分析模式这两种动作模式。普通观察模式为使用通过了光学过滤器418的照明光IL(普通光)拍摄彩色图像的动作模式。光谱分析模式为基于使用通过了光学过滤器415以及416的各个的照明光IL(特殊光)进行拍摄而得到的数字图像数据进行光谱分析并且显示生物体组织中的生物体分子的分布图像(例如氧饱和度分布图像)的模式。内窥镜装置1的动作模式例如通过使用者对处理器200的操作面板(未图示)或电子内窥镜100的操作按钮(未图示)的操作进行切换。
在普通观察模式中,控制器530控制移动单元使旋转过滤器410从适用位置向退避位置移动。此外,在光谱分析模式中,旋转过滤器410配置于适用位置。另外,在旋转过滤器410不具有移动单元的情况下,控制器530控制过滤器控制部420以使旋转过滤器410在白色光WL射入光学过滤器418的位置静止。并且,对通过拍摄元件141进行拍摄而得到的数字图像数据实施去马赛克处理等规定的图像处理之后将其转换为视频信号并使其画面显示于监视器300。
在光谱分析模式中,控制器530控制过滤器控制部420,以使旋转过滤器410以一定的转速旋转驱动,同时依次进行利用通过了光学过滤器415、416以及418的任意一个的照明光IL的生物体组织T的拍摄。并且,基于使用分别通过了各光学过滤器415以及416的照明光IL取得的数字图像数据,生成显示生物体组织中的生物体分子的分布的图像,并将其与使用光学过滤器418取得的普通观察图像排列而生成显示画面,进一步转换成数字信号并使其显示于监视器300。
在光谱分析模式中,过滤器控制部420基于光遮断器422检测出贯通孔413的时刻,检测出旋转过滤器410的旋转的相位,并将其与从控制器530供给的时序信号的相位相比较,调整旋转过滤器410的旋转的相位。来自控制器530的时序信号与拍摄元件141的驱动信号同步。因此,旋转过滤器410与拍摄元件141的驱动同步,以大致一定的转速被旋转驱动。具体而言,旋转过滤器410的旋转以如下方式被控制:每次进行利用拍摄元件141的一个图像量(R、G、B的三帧)的拍摄时,切换白色光WL射入的光学过滤器415、416、418(窗414a~c)。
接着,对在光谱分析模式中执行的光谱分析处理进行说明。图9是表示光谱分析处理的顺序的流程图。
如上所述,在通过使用者操作选择光谱分析模式的情况下,过滤器控制部420使旋转过滤器410以一定的转速旋转驱动。并且,从光源部400依次供给通过了光学过滤器415、416、418的照明光IL,依次进行使用各照明光IL的拍摄(S1)。具体而言,将使用通过了光学过滤器415的照明光IL进行拍摄而得到的G数字图像数据W(x,y)、使用通过了光学过滤器416的照明光IL进行拍摄而得到的G数字图像数据N(x,y)连同使用通过了光学过滤器(阻隔紫外线过滤器)418的照明光IL(白色光)进行拍摄而得到的R数字图像数据R(x,y)、G数字图像数据G(x,y)以及B数字图像数据B(x,y)存储于控制器530的内部存储器531。
接着,图像处理部500使用在处理S1取得的R数字图像数据R(x,y)、G数字图像数据G(x,y)以及B数字图像数据B(x,y),进行挑选成为以下的分析处理(处理S3-S7)的对象的像素的像素挑选处理S2。图像处理部500为取得生物体组织的特征量的特征量取得部的一例。
对于不包含血液的部位、或者生物体组织的颜色由于血红蛋白以外的物质而受到支配性影响的部位,即使根据像素的色彩信息计算氧饱和度或血流量也无法得到具有意义的值,成为单纯的噪声。如果将这样的噪声提供给医生的话,则不仅成为医生判断的障碍,还会产生给予图像处理部500不必要的负荷而降低处理速度这样的弊端。因此,本实施方式的分析处理以如下方式构成:挑选适合分析处理的像素(即记录了血红蛋白的光谱学的特征的像素),仅对所挑选的像素进行分析处理。
在像素挑选处理S2中,仅将满足以下的公式10、公式11以及公式12的全部条件的像素挑选为分析处理的对象像素。
【公式10】
B(x,y)/G(x,y)>a1
【公式11】
R(x,y)/G(x,y)>a2
【公式12】
R(x,y)/B(x,y)>a3
在此,a1、a2、a3为正的常数。
上述的三个条件式基于血液的透过光谱中的、G成分<B成分<R成分的值的大小关系进行设定。此外,也可以仅使用上述的三个条件式中的一个或者两个(例如,着眼于血液特有的红色而仅使用公式11以及公式12)来进行像素挑选处理S2。
接着,图像处理部500进行第一分析处理S4。在控制器530的非易失性存储器532中,保存有表示参数W/R和总血红蛋白浓度tHb的定量关系的数值表T1(或函数)、表示总血红蛋白浓度tHb以及参数N/W和氧饱和度Sat的关系的数值表T2(或函数)、表示参数R/G和修正值α的关系的数值表T3(或函数)以及表示参数αR/(R+G+B)和氧饱和度Sat的关系的数值表T4(或函数)。非易失性存储器532为第一存储部至第三存储部的一例。在第一分析处理S3中,使用该数值表T1,根据在处理S1中取得的G数字图像数据W(x,y)以及R数字图像数据(x,y)取得总血红蛋白浓度tHb的值。
具体而言,首先,通过公式13对各像素(x,y)计算参数W/R(x,y)。
【公式13】
W/R(x,y)=W(x,y)/R(x,y)
接着,参照数值表T1,读取并取得对应于通过公式13计算出的参数W/R(x,y)的值的总血红蛋白浓度tHb(x,y)的值。
预先通过理论计算或实验获得非易失性存储器532中所保存的数值表T1(连同后述的数值表T2、T3以及T4)的定量关系。
接着,图像处理部500进行分析模式选择处理S4。光谱分析模式中包含基于550nm带(波长范围R0)的吸收取得氧饱和度Sat的第一光谱分析模式(以下称为“第一模式”)和基于650nm带(波长范围R4)的吸收取得氧饱和度Sat的第二光谱分析模式(以下称为“第二模式”)。在分析血液的含量比较少的生物体组织的情况下,适合使用具有血红蛋白的强吸收的550nm带的第一光谱分析模式。另外,在分析血液的含量比较多的生物体组织的情况下,适合血红蛋白的吸收不那么强或者对于氧饱和度的灵敏度大的650nm带的第二光谱分析模式。在分析模式选择处理S4中,计算与生物体组织中的血液含量(总血红蛋白浓度)具有相关性的参数,并基于该参数选择采用第一模式和第二模式中的哪一种光谱分析模式。
在本实施方式的分析模式选择处理S4中,对于满足公式14所表示的条件的像素(x,y),判断为血液的含量比较少的生物体组织的像,选择第一模式。另外,对于未满足公式14所表示的条件的像素(x,y),判断为血液的含量比较多的生物体组织的像,选择第二模式。
【公式14】
R(x,y)/G(x,y)>a4
在此,a4为正的常数。
另外,也可以如下构成:代替上述的公式14而使用公式15所表示的条件式,当满足条件式时,选择第一模式;当未满足时,选择第二模式。
【公式15】
R(x,y)/W(x,y)>a5
在此,a5为正的常数。
此外,在分析模式选择处理S4中所使用的条件式并不限定于公式14和公式15。可以使用与生物体组织中的血液的含量具有相关性的其他的参数。
分析模式选择处理S4的边界条件(常数a4或a5)例如以第一模式和第二模式所产生的分析结果的误差为相同程度的方式(即,选择误差少的光谱分析模式的方式)设定。
另外,由于血液的含量越多、血红蛋白的吸收越强,则照明光IL越难以到达生物体组织的深部,因此,生物体组织导致的散射的影响减少。因此,在散射导致的误差变得足够小的情况下也能够为选择第二模式的构成。在这种情况下,即使在第二模式中省略散射的修正,也能够确保足够的分析精度。
当在分析模式选择处理S4中选择第一模式时,接着,图像处理部500进行第二分析处理S5。第二分析处理为使用成为550nm带(具体为N带)的吸收的指标的参数N/W取得氧饱和度的处理。在控制器530的非易失性存储器532中保存有表示总血红蛋白浓度tHb、参数N/W以及氧饱和度Sat的定量关系的数值表T2(或函数)。在数值表T2中,关联性地登记总血红蛋白浓度tHb、参数N/W以及氧饱和度Sat这三个数值(以下称为“数值组”。)。在第二分析处理S4中,使用该数值表T2,根据在处理S1中取得的G数字图像数据W(x,y)、N(x,y)以及在第一分析处理S3中取得的总血红蛋白浓度tHb(x,y)的值,取得各像素的氧饱和度Sat(x,y)的值。
具体而言,首先,通过公式16对各像素(x,y)计算参数N/W(x,y)。
【公式16】
N/W(x,y)=N(x,y)/W(x,y)
接着,对于各像素(x,y),参照数值表T2,抽出与在第一分析处理S3中取得的总血红蛋白浓度tHb(x,y)的值和通过公式16计算出的参数N/W(x,y)的值最接近的数值组,读取被抽出的数值组的氧饱和度Sat的值,作为该像素(x,y)的氧饱和度Sat(x,y)的值取得。
当在分析模式选择处理S4中选择第二模式时,图像处理部500进行第三分析处理S6。第三分析处理为使用成为600-700nm带(波长范围R4)的吸收的指标的参数R/(R+G+B)或R/W取得氧饱和度的处理。
在控制器530的非易失性存储器532中保存有参数R/G和修正值α的图5所示的关系的数值表T3(或函数)。使用该数值表T3,对于各像素(x,y),根据参数R/G(x,y)的值取得修正值α。
另外,在控制器530的非易失性存储器532中保存有参数αR/(R+G+B)和氧饱和度Sat的图4所示的关系的数值表T4(或函数)。控制器530通过公式17对于各像素(x,y)计算参数αR/(R+G+B),并从数值表T4取得与参数αR/(R+G+B)的计算值相对应的氧饱和度Sat的值。
【公式17】
另外,也可以为代替参数αR/(R+G+B)而使用参数βR/W取得氧饱和度Sat的构成。常数β为用于从参数R/W除去总血红蛋白浓度tHb的影响的修正值,对应于修正值α。在这种情况下,数值表T3表示参数R/G和修正值β的关系,数值表T4表示参数βR/W和氧饱和度Sat的关系。
在控制器530的非易失性存储器532中存储有表示氧饱和度Sat(x,y)和显示色(像素值)的关系的数值表(或函数)。并且,在处理S7中,控制器530参照该数值表(或函数)取得表示与在第二分析处理S5或第三分析处理S6中获得的氧饱和度Sat(x,y)对应的显示色的像素值。
另外,控制器530根据使用通过了光学过滤器(阻隔紫外线过滤器)418的照明光IL(白色光)进行拍摄而得到的R数字图像数据R(x,y)、G数字图像数据G(x,y)以及B数字图像数据B(x,y)生成普通观察图像数据。
图10中显示控制器530所生成的图像数据的显示例。控制器530为特征量分布图像生成部的一例。图10(A)为普通观察图像的显示例。图10(B)为根据在上述的第二分析处理S5中取得的氧饱和度Sat(x,y)生成的氧饱和度分布图像数据的显示例。进一步,图10(C)为根据在上述的第三分析处理S6中取得的氧饱和度Sat(x,y)生成的氧饱和度分布图像数据的显示例。此外,图10为观察了人的舌头的背面侧的图。在图10(B)以及图10(C)的氧饱和度分布图像中,未显示(即被涂黑)因光量不足而无法以足够精度获得氧饱和度Sat(x,y)的值的区域。在图10(B)中,由于将利用光量少的N带的照明光IL进行拍摄而得到的G数字图像数据N(x,y)用于氧饱和度Sat(x,y)的计算,因此,对于几乎所有的像素(x,y),不能够以足够的精度计算氧饱和度Sat(x,y),其结果是,未显示大半的区域。另一方面,在图10(C)中,由于将利用光量比较多的照明光IL进行拍摄而得到的图像数据用于氧饱和度Sat(x,y)的计算,因此,对于几乎所有的像素(x,y),能够以足够的精度计算氧饱和度Sat(x,y),并且描绘出具有层次的图像。
进一步,控制器530根据所生成的氧饱和度分布图像数据以及普通观察图像数据,生成在一个画面上排列显示普通观察图像和氧饱和度分布图像的画面数据,并将其存储于视频存储器540。此外,控制器530根据使用者操作能够生成仅显示氧饱和度分布图像的显示画面、仅显示普通观察图像的显示画面、在氧饱和度分布图像和/或普通观察图像中叠加显示有患者的ID信息和观察条件等附带信息的显示画面等各种显示画面。
已知在恶性肿瘤的组织中,因血管新生,总血红蛋白浓度高于正常的组织,并且氧的代谢较为显著,因此,氧饱和度Sat低于正常的组织。因此,控制器530抽出通过第一分析处理S3取得的总血红蛋白浓度大于规定的基准值(第一基准值),并且通过第二分析处理S5或第三分析处理S6取得的氧饱和度Sat小于规定的基准值(第二基准值)的像素,生成例如对于普通观察图像数据的对应的像素进行了增强显示处理的病变部增强图像数据,并能够使病变部增强图像与普通观察图像和/或氧饱和度分布图像一起(或者单独地)显示于监视器300。
作为增强显示处理,例如有使符合的像素的像素值增加的处理、使色相变化的处理(例如使R成分增加以使红色变深的处理或使色相仅旋转规定角度的处理)、使符合的像素闪烁(或者使色相周期性地变化的)处理。
另外,也可以如下构成:代替病变部增强图像数据,控制器530基于例如与氧饱和度Sat(x,y)的平均值的偏差和与总血红蛋白浓度tHb(x,y)的平均值的偏差,计算表示恶性肿瘤的疑似程度的指标Z(x,y),生成将指标Z作为像素值的图像数据(恶性疑似度图像数据)。
以上为本发明的实施方式以及该实施方式的具体的实施例的说明,但本发明并不限定于上述的构成,在本发明的技术思想的范围内可进行各种各样的变形。
另外,在上述的实施方式中,在生物体组织中的血红蛋白的浓度分布的分析中应用了本发明,但在使生物体组织的颜色变化的其他的生物体物质(例如荷尔蒙等分泌物)的浓度分布的分析中也能够应用本发明。
另外,将本实施方式的拍摄元件141作为在其前面具备R、G、B的原色系彩色过滤器的彩色图像拍摄用的拍摄元件进行了说明,但并不限定于该构成,也可以使用例如具备Y、Cy、Mg、G的补色系彩色过滤器的彩色图像拍摄用的拍摄元件。
另外,将本实施方式的拍摄元件141作为具备片上的彩色过滤器141a的彩色图像拍摄用的拍摄元件进行了说明,但并不限定于该构成,也可以为例如使用黑白图像拍摄用的拍摄元件,具备所谓的帧顺序方式的彩色过滤器的构成。另外,彩色过滤器141a并不限定于片上的构成,也能够配置在光源430至拍摄元件141的光路中。
另外,在上述的实施方式中使用了旋转过滤器410,但本发明并不限定于该构成,也能够使用可切换通过波长范围的其他方式的波长可变过滤器。
另外,在上述实施方式中,采用了将旋转过滤器410设置于光源侧并且对于照射光IL进行过滤处理的构成,但本发明并不限定于该构成,也可以为将旋转过滤器410设置于拍摄元件侧(例如物镜光学系统121和拍摄元件131之间)并且对于来自被拍摄体的返回光进行过滤处理的构成。
另外,在上述的实施方式中,当拍摄在第三分析处理S6中使用的R数字图像R(x,y)数据时,使用白色光的照明光IL,但也可以为如下构成:在旋转过滤器410上设置正确地取出波长范围R4的光学过滤器,基于在通过了该光学过滤器的波长范围R4的照明光IL下进行拍摄而得到的R数字图像数据取得氧饱和度Sat。在这种情况下,能够将光学过滤器的波长范围R4设定在等吸收点E4至800nm的波长范围内,但优选设定在吸收比较大且对于氧饱和度的灵敏度高的、600-700nm(特别是650-650nm)的波长范围内。例如也可以为如下构成:基于使用通过了上述实施方式的光学过滤器417的照明光IL进行拍摄而得到的R数字图像数据R417(x,y)取得氧饱和度Sat。
另外,在上述的实施方式中,在光谱分析模式中,采用使旋转过滤器410以一定的转速旋转,同时以规定的时间间隔进行拍摄的构成,但本发明并不限定于该构成,例如也可以为如下构成:使旋转过滤器410的旋转位置以规定的时间间隔阶段性地发生变化,并且在旋转过滤器410静止的状态下进行拍摄。
另外,在上述的实施方式中,使用从拍摄元件输出的图像数据(RAW数据)进行光谱分析处理,但也可以使用插值处理(去马赛克处理)、线性矩阵处理、白平衡处理、向规定的色彩空间(例如sRGB空间)的色彩转换处理等各种图像处理后的图像数据进行光谱分析处理。
另外,在上述的实施方式中,使用氙气灯等白色光源作为产生照明用的宽带光的光源,但也可以使用产生遍及所使用的各光学过滤器的通过波长范围全部而具有足够的光量的非白色的宽带光的光源。
另外,在上述的实施方式中,使用透过型的光学过滤器,但也可以使用反射通过波长范围的反射型的光学过滤器。
另外,上述的实施方式是将本发明应用于作为数码相机的一种形式的电子内窥镜装置的例子,但也可以将本发明适用于使用了其他种类的数码相机(例如数码单反相机或数码摄像机)的系统。例如,将本发明应用于数码静态相机时,能够进行体表组织的观察或开颅手术时的脑组织的观察(例如脑血流量的迅速检查)。

Claims (16)

1.一种内窥镜装置,其特征在于,具备:
光源装置;
拍摄部,其拍摄被所述光源装置发出的光照明的生物体组织,生成RGB彩色图像数据;
特征量取得部,其基于所述RGB彩色图像数据,取得所述生物体组织的特征量,
所述特征量取得部根据所述RGB彩色图像数据,计算与所述生物体组织中的氧饱和度具有相关性的第一参数,
所述第一参数为下述[a]以及[b]中的任一个,
[a]R/(R+G+B)
[b]R/W
其中,R为在白色光的照明下进行拍摄而得到的普通观察图像数据的R成分即第一普通观察图像数据R,
G为所述普通观察图像数据的G成分即第二普通观察图像数据G,
B为所述普通观察图像数据的B成分即第三普通观察图像数据B,
W为在第一特殊光的照明下进行拍摄而得到的RGB彩色图像数据的G成分即第一特殊观察图像数据W。
2.根据权利要求1所述的内窥镜装置,其特征在于,
所述特征量取得部基于修正第一参数取得氧饱和度,所述修正第一参数通过所述第一参数乘以第一修正值而得到,所述第一修正值修正总血红蛋白浓度的影响。
3.根据权利要求2所述的内窥镜装置,其特征在于,
所述特征量取得部具备第一存储部,所述第一存储部保存有显示所述修正第一参数和氧饱和度的关系的数值表或函数。
4.根据权利要求2或3所述的内窥镜装置,其特征在于,
所述特征量取得部基于与总血红蛋白浓度具有相关性的第二参数取得所述第一修正值。
5.根据权利要求4所述的内窥镜装置,其特征在于,
所述特征量取得部具备第二存储部,所述第二存储部保存有显示所述第二参数和总血红蛋白浓度的关系的数值表或函数。
6.根据权利要求5所述的内窥镜装置,其特征在于,
所述第二参数为下述[c]至[e]中的任一个,
[c]R/G
[d]W/R
[e]W/(R+G)
其中,R为所述第一普通观察图像数据R,
G为所述第二普通观察图像数据G,
W为所述第一特殊观察图像数据W。
7.根据权利要求6所述的内窥镜装置,其特征在于,
所述特征量取得部基于所述第二参数取得总血红蛋白浓度。
8.根据权利要求7所述的内窥镜装置,其特征在于,
所述第一特殊光具有血红蛋白的等吸收点E1附近至等吸收点E4附近的波长范围,所述等吸收点E1出现于528±5nm,所述等吸收点E4出现于584±5nm。
9.根据权利要求7所述的内窥镜装置,其特征在于,
当相当于所述第二参数的值的总血红蛋白浓度为规定值以上时,所述特征量取得部基于所述第一参数计算氧饱和度,
当相当于所述第二参数的值的总血红蛋白浓度不到规定值时,所述特征量取得部基于反映血红蛋白的500-600nm吸收带的吸收的第三参数计算氧饱和度。
10.根据权利要求9所述的内窥镜装置,其特征在于,
所述光源装置具备白色光源、和从所述白色光源发出的白色光取出所述第一特殊光的第一光学过滤器,
所述光源装置切换发出所述白色光和所述第一特殊光。
11.根据权利要求10所述的内窥镜装置,其特征在于,
所述光源装置还具备从所述白色光源发出的白色光取出第二特殊光的第二光学过滤器,
所述第三参数为N/W,
其中,W为所述第一特殊观察图像数据W,
N为在所述第二特殊光的照明下进行拍摄而得到的RGB彩色图像数据的G成分即所述第二特殊观察图像数据N,
所述第二特殊光具有血红蛋白的等吸收点E2附近至等吸收点E3附近的波长范围,所述等吸收点E2出现于547±5nm,所述等吸收点E3出现于569±5nm。
12.根据权利要求11所述的内窥镜装置,其特征在于,
所述特征量取得部具备第三存储部,所述第三存储部保存有显示所述第三参数和氧饱和度的关系的数值表或函数。
13.一种内窥镜装置,其特征在于,具备:
光源装置,其能够发出第一光和第二光;
拍摄部,其具备RGB彩色过滤器,拍摄被所述光源装置发出的光照明的生物体组织,并且能够生成彩色图像数据;
特征量取得部,其基于所述彩色图像数据取得所述生物体组织的特征量,
对于所述第一光通过所述拍摄部的R彩色过滤器而形成的第一通过光和所述第二光通过所述拍摄部的G彩色过滤器而形成的第二通过光的每一个,血红蛋白的吸收与氧饱和度具有相关性,
所述特征量取得部具有选择部,所述选择部选择通过所述第一通过光进行拍摄而得到的第一图像数据和通过所述第二通过光进行拍摄而得到的第二图像数据中的任一个,用于取得所述生物体组织的氧饱和度,
所述特征量取得部基于所述选择部所选择的图像数据取得所述生物体组织的氧饱和度。
14.根据权利要求13所述的内窥镜装置,其特征在于,
所述特征量取得部能够生成成为所述生物体组织的氧饱和度的指标的第一参数和成为所述生物体组织的总血红蛋白浓度的指标的第二参数,
当相当于所述第二参数的值的总血红蛋白浓度为规定值以上时,所述选择部选择基于所述第一图像数据的氧饱和度的取得,
当相当于所述第二参数的值的总血红蛋白浓度不到所述规定值时,所述选择部选择基于所述第二图像数据的氧饱和度的取得。
15.根据权利要求14所述的内窥镜装置,其特征在于,
所述内窥镜装置具备特征量分布图像生成部,所述特征量分布图像生成部基于所述特征量生成表示所述生物体组织中的该特征量的分布的特征量分布图像。
16.根据权利要求15所述的内窥镜装置,其特征在于,
所述内窥镜装置具备内窥镜,所述拍摄部设置于所述内窥镜的前端部。
CN201680012463.7A 2016-01-08 2016-12-12 内窥镜装置 Active CN107427186B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2016002275 2016-01-08
JP2016-002275 2016-01-08
PCT/JP2016/086884 WO2017119239A1 (ja) 2016-01-08 2016-12-12 内視鏡装置

Publications (2)

Publication Number Publication Date
CN107427186A CN107427186A (zh) 2017-12-01
CN107427186B true CN107427186B (zh) 2019-07-12

Family

ID=59274342

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201680012463.7A Active CN107427186B (zh) 2016-01-08 2016-12-12 内窥镜装置

Country Status (3)

Country Link
US (1) US10925527B2 (zh)
CN (1) CN107427186B (zh)
WO (1) WO2017119239A1 (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6196900B2 (ja) * 2013-12-18 2017-09-13 オリンパス株式会社 内視鏡装置
EP3085301A4 (en) * 2013-12-20 2017-08-23 Olympus Corporation Endoscopic device
WO2016158276A1 (ja) * 2015-04-02 2016-10-06 富士フイルム株式会社 プロセッサ装置及びその作動方法並びに内視鏡システム及びその作動方法
US10939801B2 (en) 2017-03-31 2021-03-09 Hoya Corporation Electronic endoscope system
WO2019155815A1 (ja) * 2018-02-06 2019-08-15 富士フイルム株式会社 内視鏡システム
CN113616189A (zh) * 2021-07-15 2021-11-09 武汉大学 睑结膜血红蛋白量检测方法、装置、设备及存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101060806A (zh) * 2004-12-10 2007-10-24 奥林巴斯株式会社 医用图像处理方法
CN102197985A (zh) * 2010-03-24 2011-09-28 富士胶片株式会社 电子内窥镜系统
CN102860809A (zh) * 2011-07-04 2013-01-09 富士胶片株式会社 内窥镜系统、光源装置、及内窥镜系统的控制方法

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8472682B2 (en) * 2005-09-12 2013-06-25 Dvp Technologies Ltd. Medical image processing
JP5751869B2 (ja) 2011-03-07 2015-07-22 Hoya株式会社 電子内視鏡装置、電子内視鏡用プロセッサ及び電子内視鏡システム
JPWO2012153568A1 (ja) 2011-05-10 2014-07-31 オリンパスメディカルシステムズ株式会社 医用画像処理装置
JP5815426B2 (ja) 2012-01-25 2015-11-17 富士フイルム株式会社 内視鏡システム、内視鏡システムのプロセッサ装置、及び画像処理方法
WO2014192781A1 (ja) * 2013-05-30 2014-12-04 Hoya株式会社 生体組織中の生体物質の濃度分布を示す画像を生成する方法及び装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101060806A (zh) * 2004-12-10 2007-10-24 奥林巴斯株式会社 医用图像处理方法
CN102197985A (zh) * 2010-03-24 2011-09-28 富士胶片株式会社 电子内窥镜系统
CN102860809A (zh) * 2011-07-04 2013-01-09 富士胶片株式会社 内窥镜系统、光源装置、及内窥镜系统的控制方法

Also Published As

Publication number Publication date
CN107427186A (zh) 2017-12-01
US10925527B2 (en) 2021-02-23
US20180049679A1 (en) 2018-02-22
WO2017119239A1 (ja) 2017-07-13

Similar Documents

Publication Publication Date Title
CN107427186B (zh) 内窥镜装置
CN105615894B (zh) 分析装置以及分析方法
US20190069768A1 (en) Calculation system
JP6356122B2 (ja) 生体組織中の生体物質の濃度分布を示す画像を生成する装置の作動方法及び装置
EP3106079B1 (en) Image capturing system and electronic endoscope system
JP4871741B2 (ja) 試験対象の画像を記録及び表現する装置及び方法
CN107072488B (zh) 分析装置
CN109475283B (zh) 内窥镜系统
CN110087528B (zh) 内窥镜系统以及图像显示装置
CN109310305B (zh) 内窥镜系统及特征量计算方法
CN109475282B (zh) 内窥镜系统
CN107072487B (zh) 内窥镜系统以及分析装置
JP6284451B2 (ja) 内視鏡装置
CN109788893A (zh) 内窥镜系统
CN109561808A (zh) 分析装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant