JP6109695B2 - 内視鏡システム及びプロセッサ装置並びに作動方法並びに距離測定装置 - Google Patents

内視鏡システム及びプロセッサ装置並びに作動方法並びに距離測定装置 Download PDF

Info

Publication number
JP6109695B2
JP6109695B2 JP2013202544A JP2013202544A JP6109695B2 JP 6109695 B2 JP6109695 B2 JP 6109695B2 JP 2013202544 A JP2013202544 A JP 2013202544A JP 2013202544 A JP2013202544 A JP 2013202544A JP 6109695 B2 JP6109695 B2 JP 6109695B2
Authority
JP
Japan
Prior art keywords
specimen
distance
observation
observation distance
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2013202544A
Other languages
English (en)
Other versions
JP2015066127A (ja
Inventor
泰士 白石
泰士 白石
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Corp
Original Assignee
Fujifilm Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujifilm Corp filed Critical Fujifilm Corp
Priority to JP2013202544A priority Critical patent/JP6109695B2/ja
Priority to PCT/JP2014/072186 priority patent/WO2015045703A1/ja
Priority to EP14848180.7A priority patent/EP3050486B1/en
Publication of JP2015066127A publication Critical patent/JP2015066127A/ja
Priority to US15/063,776 priority patent/US10463240B2/en
Application granted granted Critical
Publication of JP6109695B2 publication Critical patent/JP6109695B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/04Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
    • A61B1/043Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances for fluorescence imaging
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002Operational features of endoscopes
    • A61B1/00004Operational features of endoscopes characterised by electronic signal processing
    • A61B1/00009Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
    • A61B1/000094Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope extracting biological structures
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/06Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
    • A61B1/0638Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements providing two or more wavelengths
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/06Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
    • A61B1/0661Endoscope light sources
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/06Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
    • A61B1/0661Endoscope light sources
    • A61B1/0684Endoscope light sources using light emitting diodes [LED]
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/313Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor for introducing through surgical openings, e.g. laparoscopes
    • A61B1/3137Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor for introducing through surgical openings, e.g. laparoscopes for examination of the interior of blood vessels
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/145Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue
    • A61B5/1455Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue using optical sensors, e.g. spectral photometrical oximeters
    • A61B5/1459Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue using optical sensors, e.g. spectral photometrical oximeters invasive, e.g. introduced into the body by a catheter
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/06Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
    • A61B1/0653Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements with wavelength conversion
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/145Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue
    • A61B5/14546Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue for measuring analytes not otherwise provided for, e.g. ions, cytochromes
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/145Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue
    • A61B5/1455Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue using optical sensors, e.g. spectral photometrical oximeters
    • A61B5/14551Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue using optical sensors, e.g. spectral photometrical oximeters for measuring blood gases
    • A61B5/14556Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue using optical sensors, e.g. spectral photometrical oximeters for measuring blood gases by fluorescence

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Surgery (AREA)
  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Optics & Photonics (AREA)
  • Animal Behavior & Ethology (AREA)
  • Medical Informatics (AREA)
  • Pathology (AREA)
  • Veterinary Medicine (AREA)
  • Biophysics (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Public Health (AREA)
  • Molecular Biology (AREA)
  • General Health & Medical Sciences (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Radiology & Medical Imaging (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Signal Processing (AREA)
  • Microelectronics & Electronic Packaging (AREA)
  • Endoscopes (AREA)

Description

本発明は、検体内を観察するための内視鏡システム及びプロセッサ装置並びに作動方法並びに距離測定装置に関する。
医療分野においては、内視鏡システムを用いる診断が一般的になっている。内視鏡システムは、例えば、検体に照射するための光を発生する光源装置と、検体を撮像する内視鏡と、検体を撮像して得た画像信号の処理等をするプロセッサ装置とを備える。
内視鏡システムを用いて検体を観察する場合、様々な理由から、検体と内視鏡の先端部との距離(以下、観察距離という)を知りたいという要望がある。例えば、特許文献1に記載の内視鏡システムは、先端部の接触によって検体を傷つけてしまうことを防ぐために、内視鏡内に干渉計を設け、この干渉計により観察距離を計測している。
特開平09−294708号公報
特許文献1のように、観察距離を測定するための干渉計を設ける場合、コストが増大してしまうという問題がある。また、特許文献1の内視鏡システムでは、内視鏡の挿入部が太径化し難い構成になっているものの、干渉計を形成する部材を配置するスペースが必要になり、内視鏡システムの各部の内部空間を圧迫するので、設計の自由度が下がる。例えば、観察距離を測定するための干渉計を設ける場合、この干渉計がない場合と比較して、小型化や省スペース化が難しい。
本発明は、干渉計等を追加せずに観察距離を測定することができる内視鏡システム及びプロセッサ装置並びに作動方法並びに距離測定装置を提供することを目的とする。
本発明の内視鏡システムは、光源装置と、内視鏡と、観察距離測定部と、を備える。光源装置は、検体に含まれるヘモグロビンに吸収される波長帯域を有する信号光を検体に照射する。内視鏡は、信号光の反射光で検体を撮像して画像信号を出力するイメージセンサを有する。観察距離測定部は、画像信号に基づいて観察距離を測定する。また、観察距離測定部は、検体に含まれるヘモグロビンの他に、検体による信号光の反射量を変化させる非ヘモグロビン物質が存在しない場合に観察距離を測定する第1測定モードと、非ヘモグロビン物質が存在する場合に観察距離を測定する第2測定モードとが切り替え可能であり、第1測定モードと第2測定モードのいずれかで観察距離を算出する。
観察距離測定部は、画像信号から周波数成分情報を抽出する周波数成分情報抽出部と、画像信号の周波数成分情報に基づいて観察距離を算出する観察距離算出部と、を備える。
周波数成分情報とは、例えば、特定の周波数成分の振幅である。周波数成分情報として特定周波数成分の振幅を用いる場合、観察距離算出部は、例えば、対応する波長帯域(R,G,B等の色)が異なる二つの画像信号についてそれぞれ抽出された振幅の差に基づいて観察距離を算出する。なお、特定の周波数成分とは、検体の表層血管に対応する周波数成分に関する情報である。
観察距離算出部は、例えば、非ヘモグロビン物質が存在しない場合の周波数成分情報を観察距離に対応付ける第1距離テーブルと、非ヘモグロビン物質が存在する場合の周波数成分情報に対応付ける第2距離テーブルと、を有する。そして、第1測定モードでは第1距離テーブルを用い、第2測定モードでは第2距離テーブルを用いて観察距離を算出する。
また、観察距離算出部は、周波数成分情報を観察距離に対応付ける関数を用いて観察距離を算出しても良い。この場合、周波数成分情報を観察距離に対応付ける関数として、第1測定モード用の第1距離算出関数と、第2測定モード用の第2距離算出関数とを備える。
非ヘモグロビン物質を投入する非ヘモグロビン物質投入部を備えていても良い。非ヘモグロビン物質投入部は例えば鉗子チャネルである。
非ヘモグロビン物質とは、検体を着色する着色剤、または、検体内を洗浄するための洗浄剤である。着色剤は、例えば、インジゴカルミン、トルイジンブルー、メチレンブルー、複方ヨードグリセリン、クリスタルバイオレット、フルオレスチン、アクリジンオレンジ、インドシアニングリーン、または、酢酸のいずれかを含む。また、非ヘモグロビン物質は、検体内に残存する残渣または検体が分泌する分泌物の場合もある。
観察距離とは、内視鏡の先端部と検体との距離である。また、内視鏡に第1信号光と第2信号光の各反射光によってイメージセンサに結像される像を拡大するためのズームレンズを備える場合、観察距離は、ズームレンズによる像の拡大率に基づいた距離である。
観察距離算出部は、画像信号を複数の領域に分割し、各領域毎に観察距離を算出することが好ましい。
本発明の内視鏡システムは、光源装置が信号光として互いに異なる波長帯域を有する第1信号光と第2信号光を検体に照射し、イメージセンサが第1,第2信号光の反射光で検体を撮像して第1画像信号と第2画像信号を出力し、同一の画素の第1画像信号と第2画像信号の信号比に基づいて検体の酸素飽和度を画素毎に算出する酸素飽和度算出部と、観察距離に基づいて、酸素飽和度を補正する補正部と、補正部によって補正された酸素飽和度に基づいて検体の酸素飽和度を表す酸素飽和度画像を生成する画像生成部と、をさらに備えるものであることが好ましい。
本発明のプロセッサ装置は、検体に含まれるヘモグロビンに吸収される波長帯域を有する信号光を検体に照射する光源装置と、信号光の反射光で検体を撮像して画像信号を出力するイメージセンサを有する内視鏡と、を有する内視鏡システムのプロセッサ装置であり、観察距離測定部を備える。観察距離測定部は、画像信号に基づいて内視鏡による検体の観察距離を測定する。また、観察距離測定部は、検体に含まれるヘモグロビンの他に、検体による信号光の反射量を変化させる非ヘモグロビン物質が存在しない場合に観察距離を測定する第1測定モードと、非ヘモグロビン物質が存在する場合に観察距離を測定する第2測定モードとが切り替え可能であり、第1測定モードと第2測定モードのいずれかで観察距離を算出する。
本発明の作動方法は、検体に含まれるヘモグロビンに吸収される波長帯域を有する信号光を検体に照射する光源装置と、信号光の反射光で検体を撮像して画像信号を出力するイメージセンサを有する内視鏡と、を有する内視鏡システムの作動方法であり、画像信号に基づいて内視鏡による検体の観察距離を測定する観察距離測定ステップを備える。観察距離測定ステップでは、検体に含まれるヘモグロビンの他に、検体による信号光の反射量を変化させる非ヘモグロビン物質が存在しない場合に観察距離を測定する第1測定モードと、非ヘモグロビン物質が存在する場合に観察距離を測定する第2測定モードとが切り替え可能であり、第1測定モードと第2測定モードのいずれかで観察距離を算出する。
本発明の距離測定装置は、光源装置と、イメージセンサと、観察距離測定部と、を備える。光源装置は、検体に含まれるヘモグロビンに吸収される波長帯域を有する信号光を検体に照射する。イメージセンサは、信号光の反射光で検体を撮像して画像信号を出力する。観察距離測定部は、画像信号に基づいて検体の観察距離を測定する。また、観察距離測定部は、検体に含まれるヘモグロビンの他に、検体による信号光の反射量を変化させる非ヘモグロビン物質が存在しない場合に観察距離を測定する第1測定モードと、非ヘモグロビン物質が存在する場合に観察距離を測定する第2測定モードとが切り替え可能であり、第1測定モードと第2測定モードのいずれかで観察距離を算出する。

本発明の内視鏡システム及びプロセッサ装置並びに作動方法並びに距離測定装置は、イメージセンサが出力する画像信号に基づいて観察距離を測定するので、干渉計等を追加せずに観察距離を測定することができる。このため、低コストであり、かつ、設計の自由度も低下しない。
内視鏡システムの外観図である。 内視鏡システムのブロック図である。 通常観察モード時に発光する第2白色光のスペクトルを示すグラフである。 特殊観察モード時に発光する第1及び第2白色光のスペクトルを示すグラフである。 RGBカラーフィルタの分光透過率を示すグラフである。 通常観察モード時の撮像制御を示す説明図である。 特殊観察モード時の撮像制御を示す説明図である。 観察距離測定部のブロック図である。 遠景での画像信号と周波数成分の振幅を示す説明図である。 近景での画像信号と周波数成分の振幅を示す説明図である。 インジゴカルミンの吸光スペクトルを示すグラフである。 通常時用距離テーブルを示す説明図である。 着色時用距離テーブルを示す説明図である。 酸素飽和度画像生成部のブロック図である。 信号比B1/G2,R2/G2と酸素飽和度の相関関係を示すグラフである。 酸化ヘモグロビンと還元ヘモグロビンの吸光係数を示すグラフである。 酸素飽和度を算出する方法を示す説明図である。 通常時用誤差テーブルの説明図である。 着色時用誤差テーブルの説明図である。 距離テーブルや誤差テーブルを作成するためのファントムを示す説明図である。 ファントムの観察によって得られるデータを示す説明図である。 内視鏡システムの作用を示すフローチャートである。 通常時の観察距離に基づいた補正処理の作用を示す説明図である。 着色時の観察距離に基づいた補正処理の作用を示す説明図である。 第2実施形態の内視鏡システムのブロック図である。 LEDの発光帯域とHPFの特性を示すグラフである。 第2実施形態における通常観察モード時の撮像制御を示す説明図である。 第2実施形態における特殊観察モード時の撮像制御を示す説明図である。 第3実施形態の内視鏡システムのブロック図である。 回転フィルタの平面図である。 分割領域を示す説明図である。 分割領域と観察距離の関係を示す説明図である。 分割領域と観察距離の関係を示す説明図である。
[第1実施形態]
図1に示すように、第1実施形態の内視鏡システム10は、内視鏡12と、光源装置14と、プロセッサ装置16、モニタ18と、コンソール20とを有する。内視鏡12は、光源装置14と光学的に接続されるとともに、プロセッサ装置16と電気的に接続される。内視鏡12は、検体内に挿入される挿入部21と、挿入部21の基端部分に設けられた操作部22と、挿入部21の先端側に設けられた湾曲部23及び先端部24を有している。操作部22のアングルノブ22aを操作することにより、湾曲部23は湾曲動作する。この湾曲動作にともなって、先端部24が所望の方向に向けられる。
挿入部21の内部には鉗子等の処置具を挿通するための鉗子チャネル21aが設けられている。鉗子チャネル21aの入口は操作部22に設けられ、出口は先端部24に設けられる。挿入部21を検体内に挿入した状態で、特定の組織を着色するための着色剤等を検体内に投入する場合には、この鉗子チャネル21aに着色剤等を投入するための処置具(図示しない)が挿通され、先端部24から着色剤等が検体内に投入される。この場合の鉗子チャネル21aは、着色剤等を投入するための投入部を構成する。
操作部22には、アングルノブ22aの他、モード切替SW(モード切替スイッチ)22bと、ズーム操作部22cが設けられている。モード切替SW22bは、通常観察モードと、特殊観察モードの2種類のモード間の切り替え操作に用いられる。通常観察モードは、検体内をフルカラー画像化した通常光画像をモニタ18に表示するモードである。特殊観察モードは、検体内の血中ヘモグロビンの酸素飽和度を画像化した酸素飽和度画像をモニタ18に表示するモードである。ズーム操作部22cは、内視鏡12内のズームレンズ47(図2参照)を駆動させ、検体を拡大するズーム操作に用いられる。
プロセッサ装置16は、モニタ18及びコンソール20と電気的に接続される。モニタ18は、通常光画像や酸素飽和度画像等の画像、及びこれらの画像に関する情報(以下、画像情報等という)を表示する。コンソール20は、機能設定等の入力操作を受け付けるUI(ユーザインタフェース)として機能する。なお、プロセッサ装置16には、画像情報等を記録する記録部(図示省略)を接続しても良い。
図2に示すように、光源装置14は、中心波長473nmの第1青色レーザ光を発する第1青色レーザ光源(473LD(レーザダイオード))34と、中心波長445nmの第2青色レーザ光を発する第2青色レーザ光源(445LD)36とを発光源として備えている。これらの半導体発光素子からなる各光源34,36の発光は、光源制御部40により個別に制御される。このため、第1青色レーザ光源34の出射光と、第2青色レーザ光源36の出射光の光量比は変更自在になっている。
光源制御部40は、通常観察モードの場合には、第2青色レーザ光源36を点灯させ、第2青色レーザ光を発光させる。これに対して、特殊観察モードの場合には、1フレーム間隔で、第1青色レーザ光源34と第2青色レーザ光源36を交互に点灯させ、第1青色レーザ光と第2青色レーザ光が交互に発光させる。なお、第1,第2青色レーザ光の半値幅は±10nm程度にすることが好ましい。また、第1青色レーザ光源34と第2青色レーザ光源36は、ブロードエリア型のInGaN系レーザダイオードが利用でき、また、InGaNAs系レーザダイオードやGaNAs系レーザダイオードを用いることもできる。また、上記光源として、発光ダイオード等の発光体を用いた構成としても良い。
各光源34,36から出射される第1,第2青色レーザ光は、集光レンズ、光ファイバ、合波器等の光学部材(いずれも図示せず)を介してライトガイド(LG)41に入射する。ライトガイド41は、光源装置14と内視鏡12を接続するユニバーサルコードに内蔵されている。ライトガイド41は、各光源34,36からの第1,第2青色レーザ光を、内視鏡12の先端部24まで伝搬する。なお、ライトガイド41としては、マルチモードファイバを使用することができる。一例として、コア径105μm、クラッド径125μm、外皮となる保護層を含めた径がφ0.3〜0.5mmの細径なファイバケーブルを使用することができる。
内視鏡12の先端部24は、照明光学系24aと撮像光学系24bを有している。照明光学系24aには、蛍光体44と、照明レンズ45が設けられている。蛍光体44には、ライトガイド41から第1,第2青色レーザ光が入射する。蛍光体44は、第1または第2青色レーザ光が照射されることで蛍光を発する。また、一部の第1または第2青色レーザ光は、そのまま蛍光体44を透過する。蛍光体44を出射した光は、照明レンズ45を介して検体内に照射される。
通常観察モードにおいては、第2青色レーザ光が蛍光体44に入射するため、図3に示すスペクトルの白色光(第2白色光)が検体内に照射される。この第2白色光は、第2青色レーザ光と、この第2青色レーザ光により蛍光体44から励起発光する緑色〜赤色の第2蛍光とから構成される。したがって、第2白色光は、波長範囲が可視光全域に及んでいる。
一方、特殊観察モードにおいては、第1青色レーザ光と第2青色レーザ光が蛍光体44に交互に入射することにより、図4に示すスペクトルの第1白色光と第2白色光が交互に検体内に照射される。第1白色光は、第1青色レーザ光と、この第1青色レーザ光により蛍光体44から励起発光する緑色〜赤色の第1蛍光とから構成される。したがって、第1白色光は、波長範囲が可視光全域に及んでいる。第2白色光は、通常観察モード時に照射される第2白色光と同様である。
第1蛍光と第2蛍光は、波形(スペクトルの形状)がほぼ同じであり、第1蛍光の強度(I1(λ))と第2蛍光の強度(I2(λ))の比(以下、フレーム間強度比という)は、何れの波長λにおいても同じである。例えば、I2(λ1)/I1(λ1)=I2(λ2)/I1(λ2)である。このフレーム間強度比I2(λ)/I1(λ)は、酸素飽和度の算出精度に影響を与えるものであるため、光源制御部40により、予め設定された基準フレーム間強度比を維持するように高精度に制御されている。
なお、蛍光体44は、第1及び第2青色レーザ光の一部を吸収して、緑色〜赤色に励起発光する複数種類の蛍光体(例えばYAG系蛍光体、あるいはBAM(BaMgAl1017)等の蛍光体)を含んで構成されるものを使用することが好ましい。また、本実施形態のように、半導体発光素子を蛍光体44の励起光源として用いれば、高い発光効率で高強度の第1白色光及び第2白色光が得られる。また、各白色光の強度を容易に調整できる上に、色温度、色度の変化を小さく抑えることができる。
内視鏡12の撮像光学系24bは、撮像レンズ46、ズームレンズ47、イメージセンサ48を有している(図2参照)。検体からの反射光は、撮像レンズ46及びズームレンズ47を介してイメージセンサ48に入射する。これにより、イメージセンサ48に検体の反射像が結像される。ズームレンズ47は、ズーム操作部22cを操作することでテレ端とワイド端との間を移動する。ズームレンズ47がワイド端側に移動すると検体の反射像が拡大する。一方、ズームレンズ47がテレ端側に移動することで、検体の反射像が縮小する。なお、拡大観察をしない場合(非拡大観察時)には、ズームレンズ47はワイド端に配置されている。そして、拡大観察を行う場合には、ズーム操作部22cの操作によってズームレンズ47はワイド端からテレ端側に移動される。
イメージセンサ48は、カラーの撮像素子であり、検体の反射像を撮像して画像信号を出力する。イメージセンサ48は、例えばCCD(Charge Coupled Device)イメージセンサやCMOS(Complementary Metal-Oxide Semiconductor)イメージセンサである。また、イメージセンサ48は、撮像面にRGBカラーフィルタが設けられたRGB画素を有しており、RGBの各色の画素で光電変換をすることによってR,G,Bの三色の画像信号を出力する。
図5に示すように、Bカラーフィルタは380〜560nmの分光透過率を有しており、Gカラーフィルタは450〜630nmの分光透過率を有しており、Rカラーフィルタ580〜760nmの分光透過率を有している。したがって、通常観察モード時に第2白色光が検体内に照射された場合には、B画素には第2青色レーザ光と第2蛍光の緑色成分の一部が入射し、G画素には第2蛍光の緑色成分の一部が入射し、R画素には第2蛍光の赤色成分が入射する。但し、第2青色レーザ光は第2蛍光よりも発光強度が極めて大きいのでB画素から出力するB画像信号の大部分は第2青色レーザ光の反射光成分で占められている。
一方、特殊観察モード時に第1白色光が検体内に照射された場合には、B画素には第1青色レーザ光と第1蛍光の緑色成分の一部が入射し、G画素には第1蛍光の緑色成分の一部が入射し、R画素には第1蛍光の赤色成分が入射する。但し、第1青色レーザ光は第1蛍光よりも発光強度が極めて大きいので、B画像信号の大部分は第1青色レーザ光の反射光成分で占められている。なお、特殊観察モード時に第2白色光が検体内に照射されたときのRGB各画素での光入射成分は、通常観察モードの場合と同様である。
なお、イメージセンサ48としては、撮像面にC(シアン),M(マゼンタ),Y(イエロー)及びG(グリーン)の補色フィルタを備えた、いわゆる補色イメージセンサを用いても良い。イメージセンサ48として補色イメージセンサを用いる場合は、CMYGの四色の画像信号からRGBの三色の画像信号に色変換する色変換部を、内視鏡12、光源装置14またはプロセッサ装置16のいずれかに設けておけば良い。こうすれば補色イメージセンサを用いる場合でも、CMYGの4色の画像信号から色変換によってRGB3色の画像信号を得ることができる。
撮像制御部49はイメージセンサ48の撮像制御を行う。図6に示すように、イメージセンサ48の1フレームの期間は、検体からの反射光を光電変換して電荷を蓄積する蓄積期間と、その後に蓄積した電荷を読み出して画像信号を出力する読出期間とからなる。通常観察モード時には、1フレームの期間毎に、第2白色光で照明された検体内をイメージセンサ48で撮像する。これにより、1フレーム毎にイメージセンサ48からRGBの各画像信号が出力される。
撮像制御部49は、特殊観察モード時も、通常観察モード時と同様にしてイメージセンサ48に蓄積期間と読出期間を行わせる。但し、特殊観察モード下ではイメージセンサ48の撮像のフレームに同期して第1白色光と第2白色光が交互に検体内に照射されるので、図7に示すように、イメージセンサ48は、1フレーム目に第1白色光で検体内を撮像し、次の2フレーム目では第2白色光で検体内を撮像する。イメージセンサ48は、1フレーム目,2フレーム目ともRGBの各色の画像信号を出力するが、依拠する白色光のスペクトルが異なるので、以下では区別のために、1フレーム目に第1白色光で撮像して得られるRGB各色の画像信号をそれぞれR1画像信号,G1画像信号,B1画像信号といい、2フレーム目に第2白色光で撮像して得られるRGB各色の画像信号をR2画像信号,G2画像信号,B2画像信号という。
なお、酸素飽和度の算出には、B1画像信号とG2画像信号の信号比B1/G2と、R2画像信号とG2画像信号の信号比R2/G2が用いられる。これらのうち、酸素飽和度の算出に必須な信号比は、B1画像信号とG2画像信号の信号比B1/G2である。このため、本実施形態では、第1白色光中のB1画像信号になる成分(蛍光体44を透過した第1青色レーザ光)が第1信号光であり、第2白色光中のG2画像信号になる成分(第2蛍光の緑色帯域成分)が第2信号光である。
イメージセンサ48から出力される各色の画像信号は、CDS(correlated double sampling)/AGC(automatic gain control)回路50に送信される(図2参照)。CDS/AGC回路50は、イメージセンサ48から出力されるアナログの画像信号に相関二重サンプリング(CDS)や自動利得制御(AGC)を行う。CDS/AGC回路50を経た画像信号は、A/D変換器52によってデジタル画像信号に変換される。こうしてデジタル化された画像信号はプロセッサ装置16に入力される。
プロセッサ装置16は、受信部54と、画像処理切替部60と、通常観察画像処理部62と、観察距離測定部63と、特殊観察用画像処理部64と、画像表示信号生成部66とを備えている。受信部54は、内視鏡12から入力される画像信号を受信する。受信部54はDSP(Digital Signal Processor)56とノイズ除去部58を備えており、DSP56は、受信した画像信号に対して色補正処理等のデジタル信号処理を行う。ノイズ除去部58は、DSP56で色補正処理等が施された画像信号に対して、例えば移動平均法やメディアンフィルタ法等によるノイズ除去処理を施す。ノイズが除去された画像信号は、画像処理切替部60に入力される。
画像処理切替部60は、モード切替SW22bが通常観察モードにセットされている場合には、画像信号を通常観察画像処理部62に入力する。一方、モード切替SW22bが特殊観察モードに設定されている場合、画像処理切替部60は、画像信号を観察距離測定部63と特殊観察用画像処理部64に入力する。
通常観察画像処理部62は、色変換部68と、色彩強調部70と、構造強調部72とを有する。色変換部68は、入力された1フレーム分のRGBの各画像信号を、それぞれR画素、G画素、B画素に割り当てたRGB画像データを生成する。そして、RGB画像データに対して、さらに3×3のマトリックス処理、階調変換処理、3次元LUT処理等の色変換処理を施す。
色彩強調部70は、色変換処理済みのRGB画像データに対して、各種色彩強調処理を施す。構造強調部72は、色彩強調処理済みのRGB画像データに対して、空間周波数強調等の構造強調処理を施す。構造強調部72で構造強調処理が施されたRGB画像データは、通常観察画像として画像表示信号生成部66に入力される。
観察距離測定部63は、画像信号に基づいて検体と先端部24との距離(観察距離)を測定する。観察距離測定部63が算出した観察距離は、特殊観察画像処理部64(酸素飽和度生成部76)に入力される。なお、ズームレンズ47を駆動して拡大観察を行う場合は、先端部24と検体との距離は自体は変わらないが、先端部24を検体に近づけた場合と同様に検体が拡大して観察される。このため、ズームレンズ47を駆動した拡大観察は、先端部24を検体に近づけるのと実質的に同じ作用がある。このため、観察距離測定部63が測定する観察距離には、ズームレンズ47を駆動した拡大観察時のズーム倍率に基づく実質的な観察距離を含む。
特殊観察画像処理部64は、酸素飽和度画像生成部76と、構造強調部78とを有する。酸素飽和度画像生成部76は、酸素飽和度を算出するとともに、算出した酸素飽和度を表す酸素飽和度画像を生成する。また、酸素飽和度画像生成部76は、観察距離に応じて補正した酸素飽和度を算出する。このため、酸素飽和度画像生成部76が算出する酸素飽和度は、観察距離が変化した場合でも正確性が高い値になっている。
構造強調部78は、酸素飽和度画像生成部76から入力される酸素飽和度画像に対して、空間周波数強調処理等の構造強調処理を施す。構造強調部72で構造強調処理が施された酸素飽和度画像は、画像表示信号生成部66に入力される。
表示用画像信号生成部66は、通常観察画像または酸素飽和度画像を表示用形式の信号(表示用画像信号)に変換し、モニタ18に入力する。これにより、モニタ18には通常観察画像または酸素飽和度画像が表示される。
図8に示すように、観察距離測定部63は、周波数情報抽出部81と差分算出部82と観察距離算出部83を備える。
周波数情報抽出部81は、酸素飽和度の算出に用いられるB1画像信号、G2画像信号、R2画層信号を取得して、周波数成分情報を抽出する。具体的には、取得した各画像信号をフーリエ変換し、その振幅P(B1),P(G2),P(R2)を求め、これらの各振幅P(B1),P(G2),P(R2)から特定周波数成分の振幅を抽出する。特定周波数成分とは、例えば、先端部24を検体に接近させることにより、観察距離が短い近景での観察をする場合に主な観察対象になる表層血管や腺管構造等に対応する周波数成分である。
差分算出部82は、周波数成分情報抽出部81が抽出した振幅P(B1),P(G2),P(R2)の特定周波成分の差を算出する。すなわち、B1画像信号とG2画像信号の特定周波数成分の振幅の差ΔBG(=P(B1)−P(G2))、G2画像信号とR2画像信号の特定周波数成分の振幅の差ΔGR(=P(G2)−P(R2))、R2画像信号とB1画像信号の特定周波数成分の振幅の差ΔRB(=P(R2)−P(B1))をそれぞれ特定周波数成分について算出する。
例えば、図9に示すように、観察距離が長い遠景での観察の場合に得られるB1画像信号(遠景),G2画像信号(遠景),R2画像信号(遠景)では、表層血管等の細かな像は見られない。このため、表層血管等に対応する特定周波数ωの振幅の差ΔBG,ΔGR,ΔRBにはほとんど違いはない。なお、図9では、便宜上、任意方向に沿ったフーリエ変換による振幅を表しているが、周波数成分情報抽出部84が行うフーリエ変換は2次元フーリエ変換である。また周波数成分情報抽出部81は、特定周波数ωの振幅値を抽出する。差分算出部85が算出する各振幅の差ΔBG,ΔGR,ΔRBは、この特定周波数ωにおける各振幅P(B1),P(G2),P(R2)のピーク値の差である。
一方、図10に示すように、先端部24を検体に近づけることにより(あるいはズームレンズ47によって拡大観察をすることにより)得られるB1画像信号(近景)には、表層血管等の細かな像が表れる。但し、G2画像信号(近景)に表れる像は、B1画像信号(近景)よりもぼやけている。また、R2画像信号(近景)では、G2画像信号(近景)に表れる像よりもさらにぼやけている。このような各色の画像信号に表れる像のぼけ具合の違いは、波長帯域毎に異なる検体内への光の深達度や検体による吸収(特にヘモグロビンの吸光)及び散乱等によるものである。このため、各振幅P(B1),P(G2),P(R2)は、観察距離が近い場合(近景の場合)の表層血管等に対応する特定周波数Ωにおいて、顕著な差が生じるようになり、各振幅の差ΔBG,ΔGR,ΔRBにも違いが出てくる。このため、各振幅の差ΔBG,ΔGR,ΔRBは、各色間の像のぼけ具合のバランスを表している。
なお、観察距離が短くなると、表層血管等も太く(大きく)見えるようになるので、表層血管等に対応する特定周波数Ωは、遠景時の周波数ωよりも低周波数側にシフトしている。拡大観察時の各振幅P(B1),P(G2),P(R2)は、観察距離が長い遠景のものに比べて全体的に概ね低周波数側にシフトしたものなので、観察距離が短い場合の特定周波数ωと拡大観察時の特定周波数Ωと対応関係は、各振幅P(B1),P(G2),P(R2)の全体的な波形から容易に検出することができる。
観察距離が一定の場合には、波長に応じた像のぼけ具合もほぼ一定なので、上記各振幅の差ΔBG,ΔGR,ΔRBも、ズーム倍率や先端部24と検体との距離に応じた特定値になる。観察距離算出部83は、この事実を利用して、各振幅の差ΔBG,ΔGR,ΔRBに基づいて観察距離を算出する。
但し、特定の組織を観察しやすくするために検体内に着色剤を投入(散布や投与)した場合には、これらの着色剤の存在によって特定周波数Ωの振幅のバランスが崩れ、各振幅の差ΔBG,ΔGR,ΔRBのバランスも崩れる。
内視鏡による検査では着色剤(色素液)として例えばインジゴカルミンが検体内に散布される場合がある。インジゴカルミンは、図11に示す吸収スペクトルを有する紺色(濃青色)の着色剤である。インジゴカルミンを検体内に散布すると腺管構造(ピットパターン)に溜まるので、腺管構造が紺色に着色されて強調される。そして、この強調された腺管構造のパターン(分布や密度)によって病変の凹凸が観察しやすくなる。一方、インジゴカルミンはほぼ腺管構造にだけ溜まるので、これに対応する特定周波数Ωにおいて各色の画像信号の振幅のバランスが崩れる。具体的には、B1画像信号では特定周波数Ωの振幅が大きくなり、G2画像信号及びR2画像信号では特定周波数Ωの振幅が小さくなるので、これに応じて各振幅の差ΔBG,ΔGR,ΔRBも、インジゴカルミンを散布しない場合の特定値から変化する。
なお、インジゴカルミンは上記のいわゆるコントラスト法に用いられるが、インジゴカルミンの他にも、特定の組織を染色して強調する染色法ではトルイジンブルーやメチレンブルーが用いられる。また、特定の組織との反応によって強調観察をする反応法では、複方ヨードグリセリン(ルゴール液)やクリスタルバイオレットが用いられ、蛍光で特定組織を強調観察する蛍光法では、フルオレスチンやアクリジンオレンジが用いられる。また、血管内に投与して組織の強調を行う血管内色素投与法では例えばインドシアニングリーンが用いられる。この他、酢酸の散布により、検体の表層組織を白色化させる強調法もある。こうした各種着色剤等を検体に投入(散布、あるいは投与)した場合、上記インジゴカルミンを散布した場合と同様に、各色の画像信号のバランス(特に特定周波数Ωの振幅のバランス)が、これらを投入しない場合と比較して変動する。もちろん、変動の仕方は投入した着色剤等によって異なる。
こうしたことから、観察距離測定部63は、第1測定モードと第2測定モードの2つの観察距離を測定するための測定モードを切り替え自在に有しており、各測定モードに対応して観察距離算出部83には、通常用距離テーブル83aと着色時用距離テーブル83bを有している。
第1測定モードは、着色剤等が検体に投入されておらず、ほぼヘモグロビンの吸光特性だけで検体を観察する場合、すなわち、通常の観察環境の場合に観察距離を算出するモードである。通常時用距離テーブル83aはこの第1測定モードで使用されるテーブルであり、図12に示すように、通常時の各振幅の差ΔBG,ΔGR,ΔRBとそのバランスに応じた観察距離を対応付けるテーブルである。観察距離算出部83は、通常の観察時には、通常時用距離テーブル83aを参照し、差分算出部82から入力される各振幅の差ΔBG,ΔGR,ΔRBに対応する観察距離を求める。
第2測定モードは、ヘモグロビン以外に、各色の画像信号のバランスを変化させるような支配的な吸光特性を有する着色剤等の物質(非ヘモグロビン物質)が検体内に存在し、各色の画像信号及びその特定周波数振幅のバランスが、投入された着色剤等の吸光特性によって変動している場合(以下、着色時という)に観察距離を算出するモードである。着色時用距離テーブル83bは、この第2測定モードで使用されるテーブルであり、図13に示すように、着色時の各振幅の差ΔBG,ΔGR,ΔRBとそのバランスに応じた観察距離を対応付けるテーブルである。観察距離算出部83は、検体が着色剤等によって着色された場合には、着色時用距離テーブル83aを参照し、差分算出部82から入力される各振幅の差ΔBG,ΔGR,ΔRBに対応する観察距離を求める。
なお、通常時用距離テーブル83aと着色時用距離テーブル83bを比較すると、例えば、観察距離が同じ場合でも、着色剤の有無によって対応する各振幅の差ΔBG,ΔGR,ΔRBは異なる。逆に、各振幅の差ΔBG,ΔGR,ΔRBの値(バランス)が同じ値でも、着色剤の有無によって、対応する観察距離は異なる。
図14に示すように、酸素飽和度画像生成部76は、信号比算出部84と、相関関係記憶部85と、酸素飽和度算出部86と、補正部87、画像生成部88と、を備えている。
信号比算出部84には、酸素飽和度画像生成部76に入力される2フレーム分の画像信号のうち、B1画像信号、G2画像信号、R2画像信号が入力される。信号比算出部84は、B1画像信号とG2画像信号の信号比B1/G2と、G2画像信号とR2画像信号の信号比R2/G2とを、画素毎に算出する。
相関関係記憶部85は、信号比B1/G2及び信号比R2/G2と、酸素飽和度の相関関係を記憶している。この相関関係は、図15に示す二次元空間上に酸素飽和度の等値線を定義した2次元テーブルで記憶されている。信号比B1/G2及び信号比R2/G2に対する等値線の位置及び形状は、光散乱の物理的なシミュレーションによって予め得られ、各等値線の間隔は、血液量(信号比R2/G2)に応じて変化する。なお、信号比B1/G2及び信号比R2/G2と、酸素飽和度との相関関係はlogスケールで記憶されている。
なお、上記相関関係は、図16に示すように、酸化ヘモグロビン(グラフ90)や還元ヘモグロビン(グラフ91)の吸光特性や光散乱特性と密接に関連し合っている。例えば、第1青色レーザ光の中心波長473nmのように、酸化ヘモグロビンと還元ヘモグロビンの吸光係数の差が大きい波長では、酸素飽和度の情報を取り扱いやすい。しかしながら、473nmの光に対応する信号を含むB1画像信号は、酸素飽和度だけでなく、血液量にも依存度が高い。そこで、B1画像信号に加え、主として血液量に依存して変化する光に対応するR2画像信号と、B1画像信号とR2画像信号のリファレンス信号となるG2画像信号から得られる信号比B1/G2及びR2/G2を用いることで血液量に依存することなく、酸素飽和度を正確に求めることができる。
酸素飽和度算出部86は、相関関係記憶部85に記憶された相関関係を参照し、信号比算出部84で算出された信号比B1/G2及び信号比R2/G2に対応する酸素飽和度を画素毎に算出する。例えば、特定画素における信号比B1/G2及び信号比R2/G2がそれぞれB1/G2及びR2/G2である場合、図17に示すように、相関関係を参照すると、信号比B1/G2及び信号比R2/G2に対応する酸素飽和度は「60%」である。したがって、酸素飽和度算出部86は、この画素の酸素飽和度を「60%」と算出する。
なお、信号比B1/G2及び信号比R2/G2が極めて大きくなったり、極めて小さくなったりすることはほとんどない。すなわち、信号比B1/G2や信号比R2/G2の値が、酸素飽和度0%の下限ライン93を上回ったり、反対に酸素飽和度100%の上限ライン94を下回ったりすることはほとんどない。但し、算出する酸素飽和度が下限ライン93を下回ってしまった場合には酸素飽和度算出部83は酸素飽和度を0%とし、上限ライン94を上回ってしまった場合には酸素飽和度を100%とする。また、信号比B1/G2及び信号比R2/G2に対応する点が下限ライン93と上限ライン94の間から外れた場合には、その画素における酸素飽和度の信頼度が低いことが分かるように表示をしたり、酸素飽和度を算出しないようにしても良い。
補正部87は、観察距離測定部63で測定(算出)された観察距離が入力され、入力された観察距離に応じて酸素飽和度算出部86で算出された酸素飽和度の誤差を補正する。補正部87は、観察距離測定部63の第1,第2測定モードに対応して、通常時用誤差テーブル87aと着色時用誤差テーブル87bとを有し、これらの各誤差テーブル87a,87bを用いて酸素飽和度の誤差を補正する。
図18に示すように、通常時用誤差テーブル87aは、着色剤等が検体に投入されていない場合の観察距離と、この観察距離のもとで算出される酸素飽和度の誤差とが対応付けられたデータである。補正部87は、まず、通常時用誤差テーブル87aを参照することにより、差分算出部82から取得する各振幅の差ΔBG,ΔGR,ΔRBに対応する酸素飽和度の誤差を算出する。そして、酸素飽和度算出部86が算出した酸素飽和度のデータに、誤差を除く補正処理を施す。例えば、誤差が+10%になる画素では、対応する酸素飽和度の値から、誤差を減算(−10%)する。なお、通常時用誤差テーブル87aに記憶された各振幅の差ΔBG,ΔGR,ΔRBと酸素飽和度の誤差との対応関係にばらつきがある場合、さらに最尤法等によって最も尤もらしい酸素飽和度の誤差を推定して酸素飽和度の補正処理を行う。
着色剤等が検体に投入されていない通常時には、例えば、第1白色光や第2白色光が検体に均一に照射されているとみなせないほど、ズーム倍率を上げたり、先端部24を検体に極めて近接させることによって酸素飽和度に誤差が生じることがある。酸素飽和度の算出が第1白色光や第2白色光が均一に照射されていることを前提としているので、第1白色光や第2白色光の不均一性が目立つようになると、これに応じてB1画像信号,G2画像信号,R2画像信号のバランスが崩れる。その結果、算出する酸素飽和度には、観察距離が近すぎる場合の第1白色光や第2白色光の不均一性による誤差(以下、アーチファクトという)が生じる。補正部87が通常時用誤差テーブル87aを用いて行う通常時の補正処理は、このアーチファクトを補正するための補正処理である。
図19に示すように、着色時誤差テーブル87bは、着色剤等が検体に投入された場合の観察距離と、この観察距離のもとで算出される酸素飽和度の誤差とが対応付けられたデータである。通常時誤差テーブル87aと着色時誤差テーブル87bには、同じ観察距離に対して酸素飽和度の誤差が記憶されているが、着色剤の有無によって、対応する酸素飽和度の誤差は異なる。
検体を着色した場合には投入した着色剤に応じて特定の組織が通常とは異なる色で観察されるので、着色された組織の部分で、酸素飽和度を算出するための信号比B1/G2及び信号比R2/G2の値が通常時とは異なる値になってしまうので、酸素飽和度が正しく算出されない。すなわち、酸素飽和度には着色剤を投入したことによる誤差が含まれている。補正部87が着色時用誤差テーブル87bを用いて行う補正処理は、このように検体内に着色剤が存在することによる酸素飽和度の誤差を補正するための補正処理である。また、検体内に着色剤が存在しない場合に観察距離に応じて表れるアーチファクトは、同様の観察距離の条件を満たせば検体内に着色剤が存在する場合でも同様に表れる。補正部87が着色時用誤差テーブル87bを用いて行う補正処理によれば、こうしたアーチファクトも同時に補正される。なお、補正部87による補正処理の方法は、着色時誤差テーブル87bを用いる場合も、用いるテーブルが異なるだけで、通常時用誤差テーブル87aを用いる場合と同様である。
画像生成部88は、補正部87で誤差が補正された酸素飽和度(以下、補正酸素飽和度という)と、B2画像信号、G2画像信号、R2画像信号を用いて、酸素飽和度を画像化した酸素飽和度画像を生成する。具体的には、画像生成部88は、入力される元のB2画像信号,G2画像信号,R2画像信号に対して、補正酸素飽和度に応じたゲインを画素毎に施し、ゲインを施したB2画像信号,G2画像信号,R2画像信号を用いてRGB画像データを生成する。例えば、画像生成部88は、補正酸素飽和度が60%以上の画素ではB2画像信号,G2画像信号,R2画像信号のいずれにも同じゲイン「1」を乗じる。これに対して、補正酸素飽和度が60%未満の画素では、B2画像信号に対して「1」未満のゲインを乗じ、G2画像信号及びR2画像信号に対しては「1」以上のゲインを乗じる。このゲイン処理後のB1画像信号,G2画像信号,R2画像信号を用いて生成されたRGB画像データが酸素飽和度画像である。
画像生成部88が生成した酸素飽和度画像では、高酸素の領域(酸素飽和度が60〜100%の領域)では、通常観察画像と同様の色で表される。一方、酸素飽和度が特定値を下回る低酸素の領域(酸素飽和度が0〜60%の領域)は、通常観察画像とは異なる色(疑似カラー)で表される。
なお、本実施形態では、画像生成部84は、低酸素の領域のみ疑似カラー化するゲインを乗じているが、高酸素領域でも酸素飽和度に応じたゲインを施し、酸素飽和度画像の全体を疑似カラー化しても良い。また、低酸素領域と高酸素領域を酸素飽和度60%で分けているがこの境界も任意である。
内視鏡システム10が、観察距離算出部83に予め記憶する通常時用距離テーブル83a及び着色時用距離テーブル83bと、補正部87に予め記憶する通常時用誤差テーブル87a及び着色時用誤差テーブル87bは、例えば図20に示すファントム(検体を模した模擬体)89を、内視鏡システム10によって測定することにより作成される。ファントム89は、例えば、酸素飽和度が特定値に制御された血液が入ったゼラチン(以下、血液入りゼラチンという)89aと、血液が入っていないゼラチン(以下、血液無しゼラチンという)89bとを検体の表層血管とほぼ同じ特定空間周波数で積層して形成される。病変等の異常がない場合、静脈血の酸素飽和度は概ね60〜80%なので、血液入りゼラチン89aの酸素飽和度は、例えば70%に制御される。
通常時用距離テーブル83aと通常時用誤差テーブル87aの作成は以下の手順で行われる。まず、ファントム89をズーム倍率や先端部24との距離を変えながら観察し、酸素飽和度を算出する。また、周波数成分情報抽出部81及び差分算出部82によって、ファントム89を観察して得られるB1画像信号,G2画像信号,R2画像信号をフーリエ変換して、ファントム89の空間周波数の振幅を抽出し、これらの各振幅の差ΔBG,ΔGR,ΔRBを求める。
例えば、ズームせず、先端部24を十分にファントム89から離した所定の観察距離で観察をした場合には、各振幅の差ΔBG,ΔGR,ΔRBはほぼ一定値であり、かつ、酸素飽和度の誤差もほぼ零(酸素飽和度70%)である。一方、ズームしたり、先端部24をファントム89に近づけたりして観察距離を短くすると、ズーム倍率または先端部24とファントム89の距離、あるいはこれらの組み合わせ方によっては、各振幅の差ΔBG,ΔGR,ΔRBが特定値よりも大きく(あるいは小さく)なる場合がある。この場合、算出される酸素飽和度も血液入りゼラチン89aの酸素飽和度70%よりも大きく、あるいは逆に小さい値になって、誤差が生じる。
観察距離を変えながらこうした測定を繰り返し行うことにより、図21に示すように、各振幅の差ΔBG,ΔGR,ΔRBと、観察距離と、酸素飽和度の誤差とを対応付ける測定データ96が得られる。この測定データ96のうち、各振幅の差ΔBG,ΔGR,ΔRBと対応する観察距離の部分を記憶したテーブルが通常時用距離テーブル83aであり、観察距離と対応する酸素飽和度の誤差の部分を記憶したテーブルが通常時用誤差テーブル87aである。
着色時用距離テーブル83bと着色時用誤差テーブル87bの作成方法も、上記通常時用距離テーブル83aと通常時用誤差テーブル87aの作成方法と同様であり、ファントム89を用いて行われる。但し、着色時用距離テーブル83bと着色時用誤差テーブル87bの作成時には、検体内に投入するのと同様に着色剤をファントム89の表面に着色剤を散布し(あるいは注入し)、観察距離を変化させながら、各振幅の差ΔBG,ΔGR,ΔRBと、観察距離と、酸素飽和度の誤差を測定する。着色剤を散布して得られる測定データのうち、各振幅の差ΔBG,ΔGR,ΔRBと対応する観察距離の部分を記憶したテーブルが着色時用距離テーブル83bであり、観察距離と対応する酸素飽和度の誤差の部分を記憶したテーブルが着色時用誤差テーブル87bである。
次に、本実施形態の内視鏡システム10による観察の流れを図22のフローチャートに沿って説明する。まず、通常観察モードにおいて、最も遠景の状態からスクリーニングを行う(S10)。通常観察モードでは、通常観察画像がモニタ18に表示される。このスクリーニング時に、ブラウニッシュエリアや発赤等の病変の可能性がある部位(以下、病変可能性部位という)を発見した場合(S11)には、モード切替SW22bを操作して、特殊観察モードに切り替える(S12)。そして、この特殊観察モードにおいて、病変可能性部位が低酸素状態になっているか否かの診断を行う。
特殊観察モードでは、第1及び第2白色光がイメージセンサ48の撮像フレームに同期して交互に検体内に照射されるので、第1白色光が照射されたフレームではイメージセンサ48はR1画像信号,G1画像信号,B1画像信号を出力し、第2白色光が照射されたフレームではR2画像信号,G2画像信号,B2画像信号を出力する。
そして、これらの2フレーム分の画像信号を用いて、まず観察距離測定部63が観察距離の測定を行われる。具体的には、周波数成分情報抽出部81においてB1画像信号、G2画像信号、R2画像信号はフーリエ変換され、例えば表層血管に対応する特定周波数成分の振幅(周波数成分情報)がそれぞれ抽出される(S13)。次いで、差分算出部82で各画像信号から抽出された特定周波数成分の振幅の差ΔBG,ΔGR,ΔRBが算出される(S14)。
そして、観察距離算出部83において、この振幅の差ΔBG,ΔGR,ΔRBに基づいて観察距離が算出される(S15)。この観察距離の算出は、医師がプロセッサ装置16によって着色剤を投入することを示す設定をした場合には、観察距離測定部63の測定モードは第2測定モードに設定され、観察距離算出部83では着色時用距離テーブル83bが用いられる。それ以外の場合には、観察距離測定部63の測定モードは第1測定モードに設定され、観察距離算出部83では通常時用距離テーブル83aが用いられる。このため、検体内に着色剤が存在するか否かに関わらず、正確な観察距離が算出される。
一方、酸素飽和度画像生成部76では、酸素飽和度が算出され、酸素飽和度画像が生成される(S16〜S19)。具体的には、信号比算出部84によって信号比B1/G2及び信号比R2/G2が画素毎に算出される(S16)。そして、酸素飽和度算出部86において、これらの信号比B1/G2及び信号比R2/G2に基づいて、画素毎に酸素飽和度が算出される(S17)。
その後、補正部87は、観察距離算出部83が算出した観察距離に対応する酸素飽和度の誤差を求め、酸素飽和度算出部83が算出した酸素飽和度に、求めた誤差を除去する補正処理をし、補正酸素飽和度を算出する(S18)。この補正処理の方法は、観察距離測定部63の測定モードに連動しており、観察距離測定部63が着色時用の第2測定モードで動作した場合には、着色時用誤差テーブル87bを用いて行われ、観察距離測定部63が通常時用の第1測定モードで動作した場合には、通常時用誤差テーブル87aが用いられる。このため、検体内に着色剤が存在するか否かに関わらず、正確な補正処理が行われる。
補正部87で補正酸素飽和度が算出されると、画像生成部88でB2画像信号、G2画像信号、R2画像信号に補正酸素飽和度に応じたゲインを施した酸素飽和度画像が生成され(S19)、モニタ18に表示される(S20)。ドクターはモニタ18に表示された酸素飽和度画像に基づいて、病変可能性部位が低酸素状態になっているかどうかを確認する。
例えば、検体内に着色剤を投入せず、かつ、遠景で観察をした場合、図23に示すように、遠景の酸素飽和度画像101で病変可能性部位が低酸素領域102になっていることが確認され、医師は先端部24を低酸素領域102に近づけ(あるいはズームし)、この低酸素領域102を拡大観察したとする。この場合、補正部87による酸素飽和度の補正処理を行わないと、酸素飽和度画像103のように、算出した酸素飽和度にアーチファクト104が表れるので、検体を拡大したことによって誤った(あるいは不正確な)領域が低酸素状態を示す擬似カラーで表示されてしまう。また、本来の低酸素領域102に高酸素飽和度のアーチファクトが重畳されると、遠景での観察時に観察されていた低酸素領域102すら観察し難くなってしまう場合もある。
しかし、内視鏡システム10では、酸素飽和度算出部86が第1白色光や第2白色光が均一であることを前提に算出した酸素飽和度をそのまま酸素飽和度画像の生成に用いるのではなく、酸素飽和度算出部86が算出した酸素飽和度に対して補正部87が観察距離に応じた補正処理を行なってから酸素飽和度画像の生成に用いている。このため、例えば酸素飽和度画像105のように、遠景で観察されていた低酸素領域102が誤差なくそのまま拡大表示される。このため、内視鏡システム10では、正確な酸素飽和度の情報を表示することができる。
また、例えば、着色剤を検体内に投入して酸素飽和度画像101と同じ位置を観察する場合、図24に示すように、通常観察モードでは、特定の組織等111が着色された通常観察画像110がモニタ18に表示される。その後、観察距離を保ったまま、特殊観察モードに切り替えたとする。この時、着色剤が検体内に存在しない場合用の第1測定モードで観察距離を算出し、酸素飽和度を算出及び補正すると、酸素飽和度画像112のように、特定の組織111が着色されたことによって、各色の画像信号のバランスが崩れるので、誤った(あるいは不正確な)部分が低酸素領域113として疑似カラーで表示されてしまう。これは、観察距離を算出せず、観察距離に応じた酸素飽和度の補正を行わない場合も同様である。
しかし、内視鏡システム10では、プロセッサ装置16で着色剤を検体内に投入することを示す設定をすれば、着色時用の第2測定モードで観察距離が算出され、この第2測定モードで求められた正確な観察距離に基づいて酸素飽和度の補正が行われる。このため、例えば、酸素飽和度画像116のように、特定の組織111が着色されていても、酸素飽和度画像101と同じ正しい低酸素領域102が表示される。また、先端部24を検体に近づけて(あるいはズームをして)、観察距離を短くし、低酸素領域102を拡大した場合でも、着色時用の第2測定モードで観察距離が算出され、この第2測定モードで求められた正確な観察距離に基づいて酸素飽和度の補正が行われているので、酸素飽和度画像118のように、特定の組織111が着色されていても、酸素飽和度画像105と同様にアーチファクト104が表れることはなく、低酸素領域102の周辺を正しく拡大観察することができる。
なお、こうした酸素飽和度(酸素飽和度画像)の表示は、通常観察モードに切り替えられるまで継続して行わる(S21)。また、診断を終了する場合には、内視鏡12の挿入部21を検体内から抜き出す(S22)。
以上のように、内視鏡システム10は、イメージセンサ48から得られる画像信号に基づいて観察距離の測定を行う。このため、観察距離を測定するための干渉計等を追加する必要がない。このため、低コストに生産可能であり、かつ、設計の自由度も低下しない。
また、観察距離の測定モードとして、検体内に着色剤が存在しない場合に観察距離を算出する第1測定モードと、検体内に着色剤が存在する場合に観察距離を測定する第2測定モードを有しており、着色剤を検体内に投入する場合には着色剤を投入した場合に適切な第2測定モードで観察距離の測定を行う。このため、内視鏡システム10は、着色剤の投入により特定の組織が着色され、着色剤を投入しない通常時に対して各色の画像信号のバランスが崩れてしまったとしても、正確に観察距離を算出することができる。
さらに、内視鏡システム10は、この正確性の高い観察距離に基づいて酸素飽和度を補正し、この補正された酸素飽和度を用いて酸素飽和度画像を生成及び表示するので、着色剤で着色された組織の存在により、着色剤を投入しない通常時に対して各色の画像信号のバランスが崩れてしまったとしても、正確な酸素飽和度画像を生成及び表示することができる。
なお、観察距離を算出するための通常時用距離テーブル83a及び着色時用距離テーブル83bに、各振幅の差ΔBG,ΔGR,ΔRBと、これらに対応する観察距離を記憶しているが、必ずしも各振幅の差ΔBG,ΔGR,ΔRBを全て用いる必要はなく、これらのうちのいずれか一つ以上を用いることで上記第1実施形態と同様にして正確な観察距離を算出することができる。例えば振幅の差ΔBG(B1画像信号とG2画像信号のぼけ具合のバランス)と、対応する観察距離だけを用いても良い。
なお、B1画像信号,G2画像信号,R2画像信号の特定周波数Ω成分の振幅の差ΔBG,ΔGR,ΔRBと観察距離を対応付けた距離テーブル83a,83bを用いているが、B1画像信号,G2画像信号,R2画像信号の特定周波数Ω成分の振幅の差ΔBG,ΔGR,ΔRBの代わりに、特定周波数Ω成分の振幅の比を用いても良い。また、表層血管の周波数を特定周波数Ωとしているが、どのような組織の周波数を特定周波数とするかは任意である。
なお、遠景で低酸素領域102が確認された後、その低酸素領域102の拡大観察をしているが、遠景の酸素飽和度画像において低酸素領域102を検出しない場合でも、拡大観察をしてもよい。この場合、拡大観察をしてはじめて低酸素領域が観察されることがあるが、内視鏡システム10は正確な観察距離を算出し、算出した正確な観察距離に応じて酸素飽和度の補正を行っているので、拡大観察をしてはじめて低酸素領域が観察される場合でも、正確な酸素飽和度の算出及び表示をすることができる。
なお、通常時用距離テーブル83aまたは着色時用距離テーブル83bを用いて観察距離を算出しているが、こうしたテーブル形式のデータの代わりに、周波数成分情報を観察距離に対応付ける関数を用いても良い。例えば、通常時用距離テーブル83aに対応する第1測定モード用の第1距離算出関数と、着色時用距離テーブル83bに対応する第2測定モード用の第2距離算出関数とを、これらの各距離テーブル83a,63bの代わりに予め用意し、演算により観察距離を算出しても良い。これらの関数は、通常時用距離テーブル83aや着色時用距離テーブル83bからそれぞれ作成することができる。酸素飽和度の補正に用いる通常時用誤差テーブル87aや着色時用誤差テーブル87bについても同様であり、これらのテーブルの代わりに対応する関数を記憶しておいても良い。
なお、周波数成分抽出部81は、周波数成分情報としてB1画像信号,G2画像信号,R2画像信号から特定周波成分の振幅を抽出しているが、例えば、特定周波数の振幅を抽出する代わりに、特定の幅を持った周波数帯域の振幅を抽出し、その合計値を周波数成分情報として用いても良い。また、振幅だけでなく、位相を加味しても良いし、位相の情報だけを用いても良い。すなわち、周波数成分抽出部81がB1画像信号,G2画像信号,R2画像信号から抽出する周波数成分情報は、観察距離と対応付けることができる特定の周波数成分に関する情報であれば任意である。
また、周波数成分抽出部81は、B1画像信号,G2画像信号,R2画像信号をフーリエ変換することにより、周波数成分情報(特定の周波数成分の振幅)を抽出しているが、フーリエ変換をする代わりに、特定の周波数成分を抽出する画像フィルタ(2次元フィルタ)を用いてB1画像信号,G2画像信号,R2画像信号から周波数成分情報を抽出しても良い。もちろん、周波数成分情報を抽出することができれば、フーリエ変換や画像フィルタによる方法以外の任意の方法で周波数成分情報を抽出しても良い。こうした周波数成分抽出部81が抽出する周波数成分情報や、周波数成分情報の抽出方法の任意性は、後述する他の実施形態や変形例についても同様である。
なお、検体内に着色剤を投入するに第2測定モードで観察距離を測定しているが、内視鏡システム10で検体を観察する場合に用いる着色剤は複数種類ある。また、着色剤の種類によって着色される組織やその色が異なる。このため、上記第1実施形態では、着色時用距離テーブル83b及び着色時用誤差テーブル87bを1つ例示しているが、着色剤の種類ごとに(着色剤を複数併用する場合にはその組み合わせごとに)複数の着色時用距離テーブル及び着色時用誤差テーブルを設けておくことが好ましい。こうすれば、どの種類の着色剤を用いても、内視鏡システム10で正確に観察距離を算出し、正確な酸素飽和度の算出及び表示をすることができる。
なお、着色剤を検体内に投入しているが、着色剤を投入する場合以外でも、通常時と比較して各色の画像信号のバランスが崩れ、観察距離や酸素飽和度が正しく求められない場合がある。例えば、検体内を洗浄するための洗浄液は、誤飲等を防止するために、通常は着色されている。このため、洗浄液が検体内に残存していると、着色剤を投入した場合のように、各色の画像信号のバランスが崩れ、観察距離や酸素飽和度が正しく求められない。このため、洗浄液等の残存に対応した距離テーブルや誤差テーブルを設けておくことが好ましい。洗浄液等の残存が確認された場合には、この距離テーブル及び誤差テーブルを用いる測定モードに設定することで、正確な観察距離及び酸素飽和度を算出することができる。
また、検体内に自然には存在しない着色剤の投入によって各色の画像信号のバランスが崩れ、観察距離や酸素飽和度が正しく求められないケースを例にしているが、検体内に自然に存在し得るものによって各色の画像信号のバランスが崩れ、観察距離や酸素飽和度が正しく求められないケースもある。例えば、洗浄液で除去しきれなかった残渣等(便や便汁、その他有色の分泌物等)が検体内にあると、各色の画像信号のバランスが崩れ、観察距離や酸素飽和度が正しく求められない。このため、検体内に自然に存在し得る残渣等に対応した距離テーブルや誤差テーブルを設けておくことが好ましい。残渣等の存在が確認された場合には、この距離テーブル及び誤差テーブルを用いる測定モードに設定することで、正確な観察距離及び酸素飽和度を算出することができる。
なお、通常時の検体は、主として血中に含まれるヘモグロビンの吸光量(あるいは反射量)に応じた各色の画像信号のコントラストで観察される。これに対し、上記着色剤、洗浄液、残渣等はいずれもヘモグロビンの吸光量(反射量)に応じた各色の画像信号のコントラストのバランスを崩す物質である。本明細書では、これらのような各色の画像信号のコントラストのバランスを崩すヘモグロビン以外の物質を非ヘモグロビン物質と総称する。
なお、特殊観察モード時に観察距離を測定し、算出した観察距離に基づいて酸素飽和度の補正をしているが、酸素飽和度の算出を行わない通常観察モード時にも観察距離測定部63によって観察距離を測定しても良い。通常観察モード時に算出した観察距離を、通常画像とともにモニタ18に表示すれば、先端部24で検体を傷つけること等がないように、安全な操作をアシストすることができる。
通常観察モード時の観察距離を測定は、上記実施形態と同様に行うことができるが、通常観察モード時の観察距離の測定は、イメージセンサ48が1フレームに出力するR,G,B各色の画像信号を用いて観察距離を算出することができる。すなわち、わずか1フレームで得られる画像信号だけで正確な観察距離の測定が可能である。
なお、上記実施形態では、特殊観察モード時における観察距離の測定に、酸素飽和度の算出に用いるB1画像信号、G2画像信号、R2画像信号を用いているが、1フレーム目に得られるB1画像信号、G1画像信号、R1画像信号を用いて観察距離の測定を行っても良く、2フレーム目に得られるB2画像信号、G2画像信号、R2画像信号を用いて観察距離の測定を行っても良い。こうすれば、特殊観察モード時でも、通常観察モード時の観察距離の測定と同様に、わずか1フレームで得られる画像信号だけで正確な観察距離の測定をすることができる。
なお、信号比B1/G2及び信号比R2/G2に基づいて酸素飽和度を算出し、算出された酸素飽和度のデータに補正処理を施しているが、酸素飽和度の算出に用いる画像信号を観察距離に応じて補正し、補正した画像信号を用いて酸素飽和度を算出しても良い。
なお、内視鏡システム10では、内視鏡12の先端部24に蛍光体44を設けたが、これに代えて、光源装置14の内部に蛍光体44を設けても良い。この場合には、第1青色レーザ光源(473LD)34及び第2青色レーザ光源(445LD)36と、ライトガイド41との間に蛍光体44を設ける。そして、第1青色レーザ光源34または第2青色レーザ光源36に、第1青色レーザ光または第2青色レーザ光を蛍光体44に向けて照射させる。これにより、第1白色光または第2白色光が発せられる。この第1または第2白色光は、ライトガイド41を介して、検体内に照射される。それ以外については、内視鏡システム10と同様である。
また、第1及び第2青色レーザ光を同一の蛍光体44に入射させているが、第1青色レーザ光と第2青色レーザ光をそれぞれ別々の第1蛍光体、第2蛍光体に入射させても良い。
[第2実施形態]
図25に示すように、内視鏡システム300の光源装置14には、第1及び第2青色レーザ光源34,36と光源制御部40の代わりに、LED(Light Emitting Diode)光源ユニット301と、LED光源制御部304が設けられている。また、内視鏡システム300の照明光学系24aには蛍光体44が設けられていない。それ以外については、第1実施形態の内視鏡システム10と同様である。
LED光源ユニット301は、特定の波長帯域に制限された光を発光する光源として、R−LED301a,G−LED301b,B−LED301cを有する。図26に示すように、R−LED301aは、600〜720nmの赤色領域の赤色帯域光(以下、単に赤色光という)し、G−LED301bは、480〜620nmの緑色領域の緑色帯域光(以下、単に緑色光)を発光する。また、B−LED301cは、400〜500nmの青色領域の青色帯域光(以下、単に青色光という)を発光する。
また、LED光源ユニット301は、B−LED301cが発する青色光の光路上に挿抜されるハイパスフィルタ(HPF)302を有する。ハイパスフィルタ302は、450nm以下の波長帯域の青色光をカットし、450nmより長波長帯域の光を透過する。
ハイパスフィルタ302のカットオフ波長(450nm)は、酸化ヘモグロビンと還元ヘモグロビンの吸光係数がほぼ等しい波長であり(図16参照)、この波長を境に酸化ヘモグロビンと還元ヘモグロビンの吸光係数が逆転する。本実施形態の場合、相関関係記憶部85に記憶された相関関係は、酸化ヘモグロビンの吸光係数が還元ヘモグロビンの吸光係数よりも大きい場合のものなので、カットオフ波長以下の波長帯域に基づくシグナルは、信号比B1/G2が473nmで測定する本来の値よりも低下し、不正確な酸素飽和度が算出される原因になる。このため、ハイパスフィルタ302は、酸素飽和度を算出するためのB1画像信号を取得する時に、カットオフ波長以下の波長帯域の光が検体に照射されないようにする。
したがって、ハイパスフィルタ302は、特殊観察モード時にB−LED301cの前に挿入され、通常観察モード時には退避位置に退避される。ハイパスフィルタ302の挿抜は、LED光源制御部304の制御の下、HPF挿抜部303によって行われる。
LED光源制御部304は、LED光源ユニット301の各LED301a〜301cの点灯/消灯、及びハイパスフィルタ302の挿抜を制御する。具体的には、図27に示すように、通常観察モードの場合、LED光源制御部304は、各LED301a〜301cを全て点灯させ、ハイパスフィルタ302はB−LED301cの光路上から退避させる。
一方、図28に示すように、特殊観察モードの場合、LED光源制御部304は、ハイパスフィルタ302をB−LED301cの光路上に挿入する。そして、1フレーム目は、B−LED301cを点灯させ、R−LED301a及びG−LED301bを消灯させることにより、450nm以下の波長帯域がカットされた青色光を検体内に照射させる。そして、2フレーム目は、R−LED301a、G−LED301b、B−LED301cを全て点灯させ、B−LED301cが発する青色光のうち450nm以下の波長帯域がカットされた青色光と、R−LED301aが発する赤色光と、G−LED301bが発する緑色光からなる白色光を検体内に照射させる。これにより、イメージセンサ48は、1フレーム目には、B1画像信号を出力し、2フレーム目にはR2画像信号,G2画像信号,B2画像信号をそれぞれ出力する。したがって、その後の処理は第1実施形態の内視鏡システム10と同様に行うことができる。
なお、本実施形態では、特殊観察モード時の1フレーム目、2フレーム目ともハイパスフィルタ302を挿入したまま検体を撮像しているが、1フレーム目だけハイパスフィルタ302を挿入し、2フレーム目にはハイパスフィルタ302を退避させても良い。また、特殊観察モード時の1フレーム目では、B−LED301cだけを点灯させ、青色光だけを検体に照射しているが、1フレーム目でもR−LED301a及びG−LED301bを点灯させ、R1画像信号及びG1画像信号をイメージセンサ48に出力させても良い。
[第3実施形態]
図29に示すように、内視鏡システム400の光源装置14には、第1及び第2青色レーザ光34,36と光源制御部40の代わりに、広帯域光源401と、回転フィルタ402と、回転フィルタ制御部403が設けられている。また、内視鏡システム400のイメージセンサ405は、カラーフィルタが設けられていないモノクロの撮像素子である。それ以外については、第1〜第3実施形態の内視鏡システムと同じである。
広帯域光源401は、例えばキセノンランプ、白色LED等からなり、波長帯域が青色から赤色に及ぶ白色光を発する。回転フィルタ402は、通常観察モード用フィルタ410と特殊観察モード用フィルタ411とを備えており(図30参照)、広帯域光源401から発せられる白色光がライトガイド41に入射される光路上に、通常観察モード用フィルタ410を配置する通常観察モード用の第1位置と、特殊観察モード用フィルタ411を配置する特殊観察モード用の第2位置との間で径方向に移動可能である。この第1位置と第2位置への回転フィルタ402の相互移動は、選択された観察モードに応じて回転フィルタ制御部403によって制御される。また、回転フィルタ402は、第1位置または第2位置に配置された状態で、イメージセンサ405の撮像フレームに応じて回転する。回転フィルタ402の回転速度は、選択された観察モードに応じて回転フィルタ制御部403によって制御される。
図30に示すように、通常観察モード用フィルタ410は、回転フィルタ402の内周部に設けられている。通常観察モード用フィルタ410は、赤色光を透過するRフィルタ410aと、緑色光を透過するGフィルタ410bと、青色光を透過するBフィルタ410cと有する。したがって、回転フィルタ402を通常光観察モード用の第1位置に配置すると、広帯域光源401からの白色光は、回転フィルタ402の回転に応じてRフィルタ410a、Gフィルタ410b、Bフィルタ410cのいずれかに入射する。このため、検体には、透過したフィルタに応じて、赤色光、緑色光、青色光が順次照射され、イメージセンサ405は、これらの反射光によりそれぞれ検体を撮像することにより、R画像信号、G画像信号、B画像信号を順次出力する。
また、特殊観察モード用フィルタ411は、回転フィルタ402の外周部に設けられている。特殊観察モード用フィルタ411は、赤色光を透過するRフィルタ411aと、緑色光を透過するGフィルタ411bと、青色光を透過するBフィルタ411cと、473±10nmの狭帯域光を透過する狭帯域フィルタ511dとを有する。したがって、回転フィルタ402を通常光観察モード用の第2位置に配置すると、広帯域光源401からの白色光は、回転フィルタ402の回転に応じてRフィルタ411a、Gフィルタ411b、Bフィルタ411c、狭帯域フィルタ411dのいずれかに入射する。このため、検体には、透過したフィルタに応じて、赤色光、緑色光、青色光,狭帯域光(473nm)が順次照射され、イメージセンサ405は、これらの反射光によりそれぞれ検体を撮像することにより、R画像信号、G画像信号、B画像信号、及び狭帯域画像信号を順次出力する。
特殊観察モードで得られるR画像信号とG画像信号は、第1実施形態のR1(またはR2)画像信号とG1(またはG2)画像信号に対応する。また、特殊観察モードで得られるB画像信号は、第1実施形態のB2画像信号に対応し、狭帯域画像信号はB1画像信号に対応する。したがって、その後の処理は第1〜第3実施形態の内視鏡システムと同様に行うことができる。
なお、第1〜第3実施形態(特に第1,第2実施形態)では、観察距離の測定及び測定した観察距離に応じた酸素飽和度の誤差の補正を画像信号全体に対して行なっているが、観察距離の測定及び測定した観察距離に応じた酸素飽和度の誤差の補正は、B1画像信号、G2画像信号、R2画像信号をそれぞれ複数の領域に分割し、各分割領域で行うことが好ましい。例えば、図31に示すように、B1画像信号501を縦横に3×3の合計9個の分割領域501a〜501iに分割する。次いで、各分割領域501a〜501iで、特定周波数Ω成分を抽出して、それぞれ振幅の差ΔBG,ΔGR,ΔRBの算出を行う。そして、各分割領域501a〜501iで求めた振幅の差ΔBG,ΔGR,ΔRBに基づいて、分割領域501a〜501i毎に酸素飽和度の誤差の補正や画像信号の補正を行うことが好ましい。G2画像信号、R2画像信号についても同様である。
このように、B1画像信号,G2画像信号,R2画像信号を複数の分割領域501a〜501iに分け、各分割領域501a〜501iで、観察距離の測定及び酸素飽和度の誤差の補正を行うと、測定及び補正の精度が向上する。例えば、図32に示すように、先端部24で検体505(例えば管腔壁)を正面に捉えて観察をする場合、画像信号510を9個に分割した各分割エリアのうち、中央の分割領域510iに写し出された検体505と、先端部24の距離(観察距離)をd1とすると、その他の分割領域510a〜510hでは、各分割領域501a〜510hに対応する被写体505の各部分と先端部24との距離はd2(d2>d1)であり中央の分割領域510iよりも観察距離が長い。
このため、画像信号510の全体を一括でフーリエ変換して特定周波数Ω成分の振幅を抽出し、振幅の差ΔBG,ΔGR,ΔRBを求めると、中央の分割領域510iと周辺の分割領域510a〜510hとで振幅の差ΔBG,ΔGR,ΔRBが異なる値になる。また、ズーム倍率が高いほど、あるいは先端部24が検体505に近いほど、この違いは顕著になる。したがって、全ての分割領域510a〜501iで同じように観察距離の測定及び酸素飽和度の誤差の補正を行うと、中央の分割領域510iまたは周辺の分割領域510a〜510h、あるいはこれらの両方の領域で誤差が生じる。一方、分割領域510a〜510i毎に酸素飽和度の誤差の補正や画像信号の補正を行えば、各領域で正確な補正をすることができる。
また、図33に示すように、先端部24が検体505に平行に近い状態で検体505を観察する場合、得られる画像信号520内の各分割領域520a〜520i間での観察距離の差がさらに大きくなる。例えば、画像信号520の下段の3つの分割領域520e〜520gでは、先端部24と検体505の距離はd3で最も短いが、中段の3つの分割領域520d,520i,520hではd3よりも長いd4となり、さらに上段の3つの分割領域520a〜520cでは、最も長いd5となる(d3<d4<d5)。このように画像信号520内での観察距離に差が大きい場合に、画像信号520の全体(全分割領域520a〜520i)に対して一括して振幅の差ΔBG,ΔGR,ΔRBを求めると、酸素飽和度の誤差の補正は不正確になりやすい。しかし、各分割領域520a〜520iで補正を行えば、画像信号520の全体に対して一括した補正を行う場合よりも正確に酸素飽和度の誤差の補正や画像信号の補正を行うことができる。
なお、図31〜図33では、画像信号を3×3の9個の分割領域に分け、各分割領域で酸素飽和度の誤差の補正や画像信号の補正を行なっているが、領域の分割数は任意である。但し、分割が細かいほど補正精度が向上するが、補正処理に時間を要する。このため、補正処理の速度と補正精度を両立させるためには、上記のように3×3の全9個程度の領域に画像信号を分割することが好ましい。
なお、第1〜第3実施形態では、信号比B1/G2と信号比R2/G2に基づいて酸素飽和度を算出しているが、信号比B1/G2のみに基づいて酸素飽和度を算出しても良い。この場合には、相関関係記憶部82には信号比B1/G2と酸素飽和度の相関関係を記憶しておけば良い。
なお、第1〜第3実施形態では、酸素飽和度を画像化した酸素飽和度画像を生成及び表示しているが、これに加えて、血液量を画像化した血液量画像を生成及び表示しても良い。血液量は信号比R2/G2と相関があるので、信号比R2/G2に応じて異なる色を割り当てることで、血液量を画像化した血液量画像を作成することができる。
なお、第1〜第3実施形態では酸素飽和度を算出しているが、これに代えて、あるいはこれに加えて、「血液量(信号比R2/G2)×酸素飽和度(%)」から求まる酸化ヘモグロビンインデックスや、「血液量×(1−酸素飽和度)(%)」から求まる還元ヘモグロビンインデックス等、他の生体機能情報を算出しても良い。
10,300,400 内視鏡システム
63 観察距離測定部
76 酸素飽和度画像生成部
81 周波数情報抽出部
82 差分算出部
83 観察距離算出部
87 補正部

Claims (18)

  1. 検体に含まれるヘモグロビンに吸収される波長帯域を有する信号光を前記検体に照射する光源装置と、
    前記信号光の反射光で前記検体を撮像して画像信号を出力するイメージセンサを有する内視鏡と、
    前記画像信号に基づいて観察距離を測定する手段であり、前記検体に含まれるヘモグロビンの他に、前記検体による前記信号光の反射量を変化させる非ヘモグロビン物質が存在しない場合に前記観察距離を測定する第1測定モードと、前記非ヘモグロビン物質が存在する場合に前記観察距離を測定する第2測定モードとが切り替え可能であり、前記第1測定モードと前記第2測定モードのいずれかで前記観察距離を算出する観察距離測定部と、
    を備える内視鏡システム。
  2. 前記観察距離測定部は、前記画像信号から周波数成分情報を抽出する周波数成分情報抽出部と、前記画像信号の前記周波数成分情報に基づいて前記観察距離を算出する観察距離算出部と、を備える請求項に記載の内視鏡システム。
  3. 前記周波数成分情報は、特定の周波数成分の振幅である請求項に記載の内視鏡システム。
  4. 前記観察距離算出部は、対応する波長帯域が異なる二つの前記画像信号についてそれぞれ抽出された前記振幅の差に基づいて前記観察距離を算出する請求項に記載の内視鏡システム。
  5. 前記特定の周波数成分は、前記検体の表層血管に対応する周波数成分に関する情報である請求項またはに記載の内視鏡システム。
  6. 前記観察距離算出部は、前記非ヘモグロビン物質が存在しない場合の前記周波数成分情報を前記観察距離に対応付ける第1距離テーブルと、前記非ヘモグロビン物質が存在する場合の前記周波数成分情報に対応付ける第2距離テーブルと、を有し、前記第1測定モードでは前記第1距離テーブルを用い、前記第2測定モードでは前記第2距離テーブルを用いて前記観察距離を算出する請求項のいずれか1項に記載の内視鏡システム。
  7. 前記観察距離算出部は、前記周波数成分情報を前記観察距離に対応付ける関数を用いて前記観察距離を算出し、前記関数として、前記第1測定モード用の第1距離算出関数と、前記第2測定モード用の第2距離算出関数とを備える請求項のいずれか1項に記載の内視鏡システム。
  8. 前記非ヘモグロビン物質を投入する非ヘモグロビン物質投入部を備える請求項のいずれか1項に記載の内視鏡システム。
  9. 前記非ヘモグロビン物質は、前記検体を着色する着色剤、または、前記検体内を洗浄するための洗浄剤である請求項のいずれか1項に記載の内視鏡システム。
  10. 前記着色剤は、インジゴカルミン、トルイジンブルー、メチレンブルー、複方ヨードグリセリン、クリスタルバイオレット、フルオレスチン、アクリジンオレンジ、インドシアニングリーン、または、酢酸のいずれかを含む請求項に記載の内視鏡システム。
  11. 前記非ヘモグロビン物質は、前記検体内に残存する残渣または前記検体が分泌する分泌物である請求項のいずれか1項に記載の内視鏡システム。
  12. 前記観察距離は、前記内視鏡の先端部と前記検体との距離である請求項1〜11のいずれか1項に記載の内視鏡システム。
  13. 前記内視鏡は、前記信号光の前記反射光によって前記イメージセンサに結像される像を拡大するためのズームレンズを備え、
    前記観察距離は、前記ズームレンズによる前記像の拡大率に基づいた距離である請求項1〜12のいずれか1項に記載の内視鏡システム。
  14. 前記観察距離算出部は、前記画像信号を複数の領域に分割し、各前記領域毎に前記観察距離を算出する請求項1〜13のいずれか1項に記載の内視鏡システム。
  15. 前記光源装置は、前記信号光として互いに異なる波長帯域を有する第1信号光と第2信号光を前記検体に照射し、
    前記イメージセンサは、前記第1,第2信号光の反射光で前記検体を撮像して第1画像信号と第2画像信号を出力し、
    同一の画素の前記第1画像信号と前記第2画像信号の信号比に基づいて前記検体の酸素飽和度を前記画素毎に算出する酸素飽和度算出部と、
    前記観察距離に基づいて、前記酸素飽和度を補正する補正部と、
    前記補正部によって補正された前記酸素飽和度に基づいて前記検体の酸素飽和度を表す酸素飽和度画像を生成する画像生成部と、
    をさらに備える請求項1〜14のいずれか1項に記載の内視鏡システム。
  16. 検体に含まれるヘモグロビンに吸収される波長帯域を有する信号光を前記検体に照射する光源装置と、前記信号光の反射光で前記検体を撮像して画像信号を出力するイメージセンサを有する内視鏡と、を有する内視鏡システムのプロセッサ装置において、
    前記画像信号に基づいて観察距離を測定する手段であり、前記検体に含まれるヘモグロビンの他に、前記検体による前記信号光の反射量を変化させる非ヘモグロビン物質が存在しない場合に前記観察距離を測定する第1測定モードと、前記非ヘモグロビン物質が存在する場合に前記観察距離を測定する第2測定モードとが切り替え可能であり、前記第1測定モードと前記第2測定モードのいずれかで前記観察距離を算出する観察距離測定部を備えるプロセッサ装置。
  17. 検体に含まれるヘモグロビンに吸収される波長帯域を有する信号光を前記検体に照射する光源装置と、前記信号光の反射光で前記検体を撮像して画像信号を出力するイメージセンサを有する内視鏡と、を有する内視鏡システムの作動方法であり、
    前記画像信号に基づいて観察距離を測定するステップであり、前記検体に含まれるヘモグロビンの他に、前記検体による前記信号光の反射量を変化させる非ヘモグロビン物質が存在しない場合に前記観察距離を測定する第1測定モードと、前記非ヘモグロビン物質が存在する場合に前記観察距離を測定する第2測定モードとが切り替え可能であり、前記第1測定モードと前記第2測定モードのいずれかで前記観察距離を算出する観察距離測定ステップを備える内視鏡システムの作動方法。
  18. 検体に含まれるヘモグロビンに吸収される波長帯域を有する信号光を前記検体に照射する光源装置と、
    前記信号光の反射光で前記検体を撮像して画像信号を出力するイメージセンサと、
    前記画像信号に基づいて観察距離を測定する手段であり、前記検体に含まれるヘモグロビンの他に、前記検体による前記信号光の反射量を変化させる非ヘモグロビン物質が存在しない場合に前記観察距離を測定する第1測定モードと、前記非ヘモグロビン物質が存在する場合に前記観察距離を測定する第2測定モードとが切り替え可能であり、前記第1測定モードと前記第2測定モードのいずれかで前記観察距離を算出する観察距離測定部と、
    を備える距離測定装置。
JP2013202544A 2013-09-27 2013-09-27 内視鏡システム及びプロセッサ装置並びに作動方法並びに距離測定装置 Active JP6109695B2 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
JP2013202544A JP6109695B2 (ja) 2013-09-27 2013-09-27 内視鏡システム及びプロセッサ装置並びに作動方法並びに距離測定装置
PCT/JP2014/072186 WO2015045703A1 (ja) 2013-09-27 2014-08-25 内視鏡システム及びプロセッサ装置並びに作動方法並びに距離測定装置
EP14848180.7A EP3050486B1 (en) 2013-09-27 2014-08-25 Endoscope system, processor device and distance measurement device
US15/063,776 US10463240B2 (en) 2013-09-27 2016-03-08 Endoscope system, processor device, operation method, and distance measurement device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2013202544A JP6109695B2 (ja) 2013-09-27 2013-09-27 内視鏡システム及びプロセッサ装置並びに作動方法並びに距離測定装置

Publications (2)

Publication Number Publication Date
JP2015066127A JP2015066127A (ja) 2015-04-13
JP6109695B2 true JP6109695B2 (ja) 2017-04-05

Family

ID=52742855

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2013202544A Active JP6109695B2 (ja) 2013-09-27 2013-09-27 内視鏡システム及びプロセッサ装置並びに作動方法並びに距離測定装置

Country Status (4)

Country Link
US (1) US10463240B2 (ja)
EP (1) EP3050486B1 (ja)
JP (1) JP6109695B2 (ja)
WO (1) WO2015045703A1 (ja)

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016185733A1 (ja) * 2015-05-21 2016-11-24 オリンパス株式会社 画像処理装置、画像処理方法、及び画像処理プログラム
JP6892087B2 (ja) * 2015-06-12 2021-06-18 ソニー・オリンパスメディカルソリューションズ株式会社 医療用画像取得システムおよび医療用撮像装置
JP6448509B2 (ja) * 2015-10-30 2019-01-09 富士フイルム株式会社 内視鏡システム、プロセッサ装置、及び、内視鏡システムの作動方法
JP6408457B2 (ja) 2015-12-22 2018-10-17 富士フイルム株式会社 内視鏡システム及び内視鏡システムの作動方法
JP6437943B2 (ja) * 2016-03-07 2018-12-12 富士フイルム株式会社 内視鏡システム、プロセッサ装置、及び、内視鏡システムの作動方法
CN109068968B (zh) * 2016-09-16 2021-02-05 奥林巴斯株式会社 内窥镜用光源装置
JP6538634B2 (ja) * 2016-09-30 2019-07-03 富士フイルム株式会社 プロセッサ装置及び内視鏡システム並びにプロセッサ装置の作動方法
JP6731110B2 (ja) * 2017-03-06 2020-07-29 富士フイルム株式会社 内視鏡システム及びその作動方法
CN110913746B (zh) * 2017-07-20 2022-02-18 奥林巴斯株式会社 诊断辅助装置、诊断辅助方法及存储介质
JP6866531B2 (ja) * 2018-03-06 2021-04-28 富士フイルム株式会社 医療画像処理システム及び内視鏡システム
WO2023119795A1 (ja) * 2021-12-22 2023-06-29 富士フイルム株式会社 内視鏡システム及びその作動方法

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0961132A (ja) * 1995-08-28 1997-03-07 Olympus Optical Co Ltd 3次元形状計測装置
JP3662336B2 (ja) 1996-04-30 2005-06-22 富士写真フイルム株式会社 距離測定可能な内視鏡
US7123756B2 (en) 2001-04-27 2006-10-17 Fuji Photo Film Co., Ltd. Method and apparatus for standardized fluorescence image generation
JP4202671B2 (ja) * 2001-04-27 2008-12-24 富士フイルム株式会社 規格化画像生成方法および装置
JP5461753B2 (ja) 2004-07-30 2014-04-02 オリンパス株式会社 内視鏡装置
JP5190944B2 (ja) * 2008-06-26 2013-04-24 富士フイルム株式会社 内視鏡装置および内視鏡装置の作動方法
JP4857393B2 (ja) * 2009-06-10 2012-01-18 オリンパスメディカルシステムズ株式会社 カプセル型内視鏡装置
JP5393554B2 (ja) * 2010-03-23 2014-01-22 富士フイルム株式会社 電子内視鏡システム
JP5657375B2 (ja) * 2010-12-24 2015-01-21 オリンパス株式会社 内視鏡装置及びプログラム
JP5611892B2 (ja) * 2011-05-24 2014-10-22 富士フイルム株式会社 内視鏡システム及び内視鏡システムの作動方法
JP5757891B2 (ja) * 2012-01-23 2015-08-05 富士フイルム株式会社 電子内視鏡システム、画像処理装置、画像処理装置の作動方法及び画像処理プログラム
JP6150555B2 (ja) * 2013-02-26 2017-06-21 オリンパス株式会社 内視鏡装置、内視鏡装置の作動方法及び画像処理プログラム

Also Published As

Publication number Publication date
US20160183774A1 (en) 2016-06-30
EP3050486A4 (en) 2016-09-07
US10463240B2 (en) 2019-11-05
EP3050486A1 (en) 2016-08-03
EP3050486B1 (en) 2018-07-18
WO2015045703A1 (ja) 2015-04-02
JP2015066127A (ja) 2015-04-13

Similar Documents

Publication Publication Date Title
JP6109695B2 (ja) 内視鏡システム及びプロセッサ装置並びに作動方法並びに距離測定装置
JP5992936B2 (ja) 内視鏡システム、内視鏡システム用プロセッサ装置、内視鏡システムの作動方法、内視鏡システム用プロセッサ装置の作動方法
JP6039639B2 (ja) 内視鏡システム、内視鏡システム用プロセッサ装置、内視鏡システムの作動方法、及び内視鏡システム用プロセッサ装置の作動方法
JP6010571B2 (ja) 内視鏡システム、内視鏡システム用プロセッサ装置、内視鏡システムの作動方法、内視鏡システム用プロセッサ装置の作動方法
US10231658B2 (en) Endoscope system, processor device for endoscope system, operation method for endoscope system, and operation method for processor device
JP5887367B2 (ja) プロセッサ装置、内視鏡システム、及び内視鏡システムの作動方法
US9907493B2 (en) Endoscope system processor device, endoscope system, operation method for endoscope system processor device, and operation method for endoscope system
JP6030035B2 (ja) 蛍光観察装置、内視鏡システム及びプロセッサ装置並びに作動方法
JP6866531B2 (ja) 医療画像処理システム及び内視鏡システム
JP6538634B2 (ja) プロセッサ装置及び内視鏡システム並びにプロセッサ装置の作動方法
JP6085648B2 (ja) 内視鏡用光源装置及び内視鏡システム
JP6129686B2 (ja) 内視鏡システム及びプロセッサ装置並びに作動方法並びにテーブル作成方法
JP6099518B2 (ja) 内視鏡システム及び作動方法
JP6389299B2 (ja) 内視鏡システム、内視鏡システムのプロセッサ装置、内視鏡システムの作動方法、プロセッサ装置の作動方法
JP5990141B2 (ja) 内視鏡システム及びプロセッサ装置並びに作動方法

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20151016

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20161026

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20161226

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20170215

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20170308

R150 Certificate of patent or registration of utility model

Ref document number: 6109695

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250