JP2014050453A - 内視鏡システム、内視鏡システムのプロセッサ装置、及び内視鏡画像の画像処理方法 - Google Patents

内視鏡システム、内視鏡システムのプロセッサ装置、及び内視鏡画像の画像処理方法 Download PDF

Info

Publication number
JP2014050453A
JP2014050453A JP2012195097A JP2012195097A JP2014050453A JP 2014050453 A JP2014050453 A JP 2014050453A JP 2012195097 A JP2012195097 A JP 2012195097A JP 2012195097 A JP2012195097 A JP 2012195097A JP 2014050453 A JP2014050453 A JP 2014050453A
Authority
JP
Japan
Prior art keywords
region
oxygen saturation
image
light
image data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2012195097A
Other languages
English (en)
Other versions
JP5729881B2 (ja
Inventor
Masahiro Kubo
雅裕 久保
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Corp
Original Assignee
Fujifilm Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujifilm Corp filed Critical Fujifilm Corp
Priority to JP2012195097A priority Critical patent/JP5729881B2/ja
Priority to EP13181438.6A priority patent/EP2705787B1/en
Priority to US14/013,301 priority patent/US9565399B2/en
Publication of JP2014050453A publication Critical patent/JP2014050453A/ja
Application granted granted Critical
Publication of JP5729881B2 publication Critical patent/JP5729881B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002Operational features of endoscopes
    • A61B1/00004Operational features of endoscopes characterised by electronic signal processing
    • A61B1/00009Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
    • A61B1/000094Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope extracting biological structures
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/06Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
    • A61B1/0638Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements providing two or more wavelengths
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/50Image enhancement or restoration by the use of more than one image, e.g. averaging, subtraction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0082Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence adapted for particular medical purposes
    • A61B5/0084Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence adapted for particular medical purposes for introduction into the body, e.g. by catheters
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/145Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue
    • A61B5/1455Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue using optical sensors, e.g. spectral photometrical oximeters
    • A61B5/14551Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue using optical sensors, e.g. spectral photometrical oximeters for measuring blood gases
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/145Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue
    • A61B5/1455Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue using optical sensors, e.g. spectral photometrical oximeters
    • A61B5/1459Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue using optical sensors, e.g. spectral photometrical oximeters invasive, e.g. introduced into the body by a catheter
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/74Details of notification to user or communication with user or patient ; user input means
    • A61B5/742Details of notification to user or communication with user or patient ; user input means using visual displays
    • A61B5/7425Displaying combinations of multiple images regardless of image source, e.g. displaying a reference anatomical image with a live image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10068Endoscopic image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10141Special mode during image acquisition
    • G06T2207/10152Varying illumination
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20212Image combination
    • G06T2207/20221Image fusion; Image merging
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30004Biomedical image processing

Abstract

【課題】高酸素領域においては生体組織の凹凸などの視認性を向上させるとともに、低酸素領域においては酸素飽和度の大きさを分かりやすく表示する。
【解決手段】酸素飽和度測定光と通常光を交互に検体に照射し、その反射像をカラーの撮像素子で撮像する。通常光の発光時に得られる画像情報から通常画像を生成する。通常光の発光時に得られる画像情報の一部と前記酸素飽和度測定光の発光時に得られる画像情報の一部に基づいて、酸素飽和度を算出する。この算出した酸素飽和度に基づいて、通常画像上に高酸素領域と低酸素領域を設定する。高酸素領域に対しては、生体組織の凹凸や血管の走行パターンの視認性を向上させる処理(WB、色強調処理)が施される。低酸素領域に対しては、酸素飽和度の大きさによって色の違いが明確になる処理(ゲイン処理、色強調処理)が施される。
【選択図】図11

Description

本発明は、血中ヘモグロビンの酸素飽和度を画像化する内視鏡システム、内視鏡システムのプロセッサ装置、及び内視鏡画像の画像処理方法に関する。
現在の医療分野においては、内視鏡を使った診断が広く行われている。この内視鏡の診断においては、内視鏡の挿入部を検体内に挿入し、その先端部から検体に所定波長の照明光で照明してから、先端部の撮像素子で検体を撮像することにより、検体上に表れる様々な生体情報が反映された画像を取得している。
例えば、特許文献1では、酸化ヘモグロビンと還元ヘモグロビンの吸光係数が異なる波長域の光を体腔内に照射して撮像し、その撮像により得られる画像情報に基づいて、血中ヘモグロビンの酸素飽和度に関する情報が反映された酸素飽和度画像を取得している。この特許文献1の酸素飽和度画像では、酸素飽和度が60%を超えるような高酸素領域については、白色光の照射により得られる通常画像と同じ色で表示する一方で、酸素飽和度が60%を下回るような低酸素領域については、酸素飽和度の程度に応じた疑似カラーで表示している。したがって、病変部位である可能性が高い低酸素領域とそれ以外の高酸素領域とが異なる色で表示されるため、病変部位の分布を直感的に把握することができる。
特開2012−139482号公報
特許文献1のような酸素飽和度画像を診断に用いることで、低酸素領域においては疑似カラーの色の違いから酸素状態を把握することができる一方、高酸素領域においては、通常画像の色により多彩な色で表示されるため、表示血管の走行パターンや生体組織の凹凸情報など診断に有用な情報を把握することができる。したがって、酸素飽和度画像を用いた診断の精度を高めるためには、高酸素領域においては生体組織の凹凸や血管の走行パターンの視認性を向上させるとともに、低酸素領域においては酸素飽和度の程度(例えば、酸素飽和度60%の領域と酸素飽和度40%の領域の色の違い)が明確に分かるようにすることが求められている。
本発明は、高酸素領域においては生体組織の凹凸などの視認性を向上させるとともに、低酸素領域においては酸素飽和度の大きさを分かりやすく表示することができる内視鏡システム、内視鏡システムのプロセッサ装置、及び内視鏡画像の画像処理方法を提供することを目的とする。
上記目的を達成するために、本発明の内視鏡システムは、検体に照明光を照射する照明手段と、照明光のうち、広帯域の可視光で照明された検体を撮像して第1画像情報を取得するとともに、酸化ヘモグロビンの吸光係数と還元ヘモグロビンの吸光係数が異なる波長域の光で照明された検体を撮像して第2画像情報を取得する画像情報取得手段と、第1画像情報に基づいて、広帯域の可視光の波長成分を有する通常画像を生成する通常画像生成手段と、第2画像情報に基づいて、血中ヘモグロビンの酸素飽和度を算出する酸素飽和度算出手段と、通常画像において、酸素飽和度算出手段で算出した酸素飽和度が一定値を超える第1領域と、一定値を下回る第2領域を設定する領域設定手段と、第1領域及び第2領域に対して、それぞれ異なる種類の処理を施す領域処理手段とを備えることを特徴とする。
領域処理手段は、第1領域に対してカラーバランスを調整するカラーバランス処理を行い、第2領域に対して、酸素飽和度に応じて第2領域の色を変化させるゲイン処理を行うことが好ましい。領域処理手段は、第2領域に対しては、カラーバランスを行わないことが好ましい。カラーバランス処理は、第1領域の画素値を調整することにより、第1領域におけるホワイトバランスを調整し、ゲイン処理は、酸素飽和度に基づいて、第2領域の画素値を調整することで、第2領域における色を酸素飽和度に応じて変化させることが好ましい。
領域処理手段は、第1領域又は第2領域の少なくとも一方に対して、色強調処理を行うことが好ましい。第1領域に対する色強調処理は、第1領域の色のうち赤色成分を強調する赤色強調処理であることが好ましい。第2領域に対する色強調処理は、酸素飽和度の大きさによって異なる第2領域の色を強調する疑似カラー強調処理であることが好ましい。
第1画像情報は、440〜460nmの青色狭帯域光及びこの青色狭帯域光を波長変換部材で波長変換することで得られる蛍光が照射された検体をカラーの撮像素子のB画素、G画素、R画素で撮像することで得られる3色の青色画像データ、緑色画像データ、赤色画像データであり、第2画像情報は、460〜480nmの青色狭帯域光及びこの460〜480nmの青色狭帯域光を波長変換部材で波長変換することで得られる蛍光が照射された前記検体をカラーの撮像素子のB画素で撮像することで得られる青色狭帯域画像データであることが好ましい。
第1画像情報は、青色光、緑色光、赤色光が順次照射された検体をモノクロの撮像素子で順次撮像することで得られる3色の青色画像データ、緑色画像データ、赤色画像データであり、第2画像情報は、450〜500nmの青色光が照射された検体をモノクロの撮像素子で撮像することで得られる青色狭帯域画像データであることが好ましい。酸素飽和度算出手段は、第2画像情報である青色狭帯域画像データに加え、第1画像情報の緑色画像データ及び赤色画像データに基づいて、酸素飽和度を算出することが好ましい。
本発明は、検体に照明光を照射する照明手段と、照明光のうち、広帯域の可視光で照明された検体を撮像することにより第1画像情報を取得するとともに、酸化ヘモグロビンの吸光係数と還元ヘモグロビンの吸光係数が異なる波長域の光で照明された検体を撮像することにより第2画像情報を取得する画像情報取得手段とを備える内視鏡に接続された内視鏡システムのプロセッサ装置において、第1及び第2画像情報を受信する受信手段と、第1画像情報に基づいて、広帯域の可視光の波長成分を有する通常画像を生成する通常画像生成手段と、第2画像情報に基づいて、血中ヘモグロビンの酸素飽和度を算出する酸素飽和度算出手段と、通常画像において、酸素飽和度算出手段で算出した酸素飽和度が一定値を超える第1領域と、一定値を下回る第2領域を設定する領域設定手段と、第1領域及び第2領域に対して、それぞれ異なる種類の処理を施す領域処理手段とを備えることを特徴とする。
本発明は、検体に照明光を照射する照明手段と、照明光のうち、広帯域の可視光で照明された検体を撮像して第1画像情報を取得するとともに、酸化ヘモグロビンの吸光係数と還元ヘモグロビンの吸光係数が異なる波長域の光で照明された検体を撮像してり第2画像情報を取得する画像情報取得手段とを備える内視鏡に接続された内視鏡用プロセッサ装置内で、第1及び第2画像情報に対して画像処理を施す内視鏡画像の画像処理方法において、第1画像情報に基づいて、広帯域の可視光の波長成分を有する通常画像を通常画像生成手段により生成し、第2画像情報に基づいて、血中ヘモグロビンの酸素飽和度を酸素飽和度算出手段により算出し、通常画像において、酸素飽和度算出手段で算出した酸素飽和度が一定値を超える第1領域と一定値を下回る第2領域とを、領域設定手段により設定し、第1領域及び第2領域に対してそれぞれ異なる種類の処理を、領域処理手段により施すことを特徴とする。
本発明によれば、通常画像のうち、第1領域(高酸素領域)に対してはカラーバランス処理を施しているため、高酸素領域においては生体組織の凹凸などの視認性が向上している。一方、第2領域(低酸素領域)に対しては、カラーバランス処理ではなく、酸素飽和度に応じたゲイン処理を行うことで、低酸素領域における酸素飽和度の大きさを色で表示しているため、酸素飽和度の大きさを直感的に把握することができる。
内視鏡システムの外観を表す図である。 第1実施形態の内視鏡システムの内部構成を表す図である。 通常光の発光スペクトルを表すグラフである。 酸素飽和度測定光及び通常光の発光スペクトルを表すグラフである。 カラーの撮像素子におけるB画素、G画素、R画素を表す図である。 B画素のカラーフィルター、G画素のカラーフィルター、R画素のカラーフィルターの分光透過率を表すグラフである。 第1実施形態の通常モード時における撮像素子の動作を説明するための図である。 第1実施形態の酸素飽和度モード時における撮像素子の動作を説明するための図である。 画像処理部の各構成を表す図である。 強度比B1/G2、R2/G2と酸素飽和度との相関関係を表すグラフである。 350nm〜800nmの波長域における酸化、還元ヘモグロビンの吸光係数を表すグラフである。 強度比B1/G2、R2/G2に対応する酸素飽和度を、図7の相関関係から求める方法を説明するためのグラフである。 青色画像データにおける高酸素領域と低酸素領域を表した図である。 第1〜第3領域処理における処理の内容を示す表であり、「○」は処理を行うことを、「×」は処理を行わないことを表している。 酸素飽和度とゲインとの関係を示すグラフである。 高酸素領域における色強調処理の説明に用いられる図である。 低酸素領域における色強調処理の説明に用いられる図である。 第1領域処理を行った場合の酸素飽和度画像を表す図である。 第2領域処理を行った場合の酸素飽和度画像を表す図である。 第3領域処理を行った場合の酸素飽和度画像を表す図である。 酸素飽和度モードにおける一連の流れを表したフローチャートである。 第2実施形態の内視鏡システムの内部構成を表す図である。 回転フィルタを表す図である。 測定用フィルタ部、Bフィルタ部、Gフィルタ部、Rフィルタ部の分光透過率を表すグラフである。 第2実施形態の通常モード時における撮像素子の動作を説明するための図である。 第2実施形態の酸素飽和度モード時における撮像素子の動作を説明するための図である。
図1に示すように、第1実施形態の内視鏡システム10は、被検体内を照明する光を発生する光源装置11と、光源装置11からの光を被検体の被観察領域に照射し、その反射像を撮像する内視鏡装置12と、内視鏡装置12での撮像により得られた画像信号を画像処理するプロセッサ装置13と、画像処理によって得られた内視鏡画像等を表示する表示装置14と、キーボード等で構成される入力装置15とを備えている。
内視鏡装置12には、操作部16側から順に、軟性部17、湾曲部18、スコープ先端部19が設けられている。軟性部17は可撓性を有しているため、屈曲自在にすることができる。湾曲部18は、操作部16に配置されたアングルノブ16aの回動操作により湾曲自在に構成されている。この湾曲部18は、被検体の部位等に応じて、任意の方向、任意の角度に湾曲させることができるため、スコープ先端部19を所望の観察部位に向けることができる。
内視鏡システム10は、波長範囲が青色から赤色に及ぶ可視光の被検体像からなる通常画像を表示装置14に表示する通常モードと、通常画像上に血中ヘモグロビンの酸素飽和度の情報を反映させた酸素飽和度画像を表示装置14に表示する酸素飽和度モードを備えている。これら2つのモードは、内視鏡装置に設けられた切り替えスイッチ21や入力装置15によって、切り替え可能である。
図2に示すように、光源装置11は、2種のレーザ光源LD1,LD2と、光源制御部20とを備えている。レーザ光源LD1は、中心波長が473nmの第1レーザ光を発する。この第1レーザ光は、内視鏡装置12のスコープ先端部19に配置された蛍光体50(波長変換部材)で、緑色から赤色に波長範囲を有する蛍光に波長変換される。レーザ光源LD2は、中心波長が445nmの第2レーザ光を発する。この第2レーザ光も、蛍光体50によって、蛍光に波長変換される。各レーザ光源LD1、LD2から発せられる第1及び第2レーザ光は、集光レンズ(図示省略)を介してそれぞれ光ファイバ24,25に入射する。
なお、第1レーザ光の波長範囲は460〜480nmにすることが好ましく、第2レーザ光の波長範囲は440〜460nmにすることが好ましい。また、レーザ光源LD1、LD2は、ブロードエリア型のInGaN系レーザダイオードが使用でき、また、InGaNAs系レーザダイオードやGaNAs系レーザダイオード等を用いることもできる。
光源制御部20は、レーザ光源LD1、LD2を制御する。通常モードのときには、図3Aに示すように、レーザ光源LD2をオンにし、レーザ光源LD1をオフにする。これにより、レーザ光源LD2の第2レーザ光と蛍光とを含む通常光が検体内に照射される。一方、酸素飽和度モードのときには、図3Bに示すように、レーザ光源LD1とレーザ光源LD2のオンとオフを交互に繰り返す発光制御が行われる。これにより、レーザ光源LD1の第1レーザ光とこの第1レーザ光により蛍光体50で励起発光する蛍光とを含む酸素飽和度測定光と、通常光とが交互に検体内に照射される。
図2に示すように、カプラ22は、光ファイバ24,25からの第1及び第2レーザ光を2系統の光に分波し、その2系統の光をライトガイド28,29に入射させる。ライトガイド28,29は多数の光ファイバを束ねたバンドルファイバなどから構成される。
内視鏡装置12は電子内視鏡から構成され、ライトガイド28,29で導光された2系統(2灯)の光を被観察領域に向けて照射する照明部33と、被観察領域を撮像する1系統の撮像部34と、内視鏡装置12と光源装置11及びプロセッサ装置13とを着脱自在に接続するコネクタ部36を備えている。
照明部33は、撮像部34の両脇に設けられた2つの照明窓43,44を備えており、各照明窓43,44は、蛍光体50を透過した光を被観察領域に向けて照射する。撮像部34は、スコープ先端部19の略中心位置に、被観察領域からの反射光を受光する1つの観察窓42を備えている。
照明窓43,44の奥には、それぞれ投光ユニット47,54が収納されている。各投光ユニット47,54は、ライトガイド28,29からの第1及び第2レーザ光を蛍光体50に当てて、蛍光を励起発光させる。第1及び第2レーザ光と蛍光は、レンズ51を介して被観察領域に向けて照射される。
蛍光体50は、第1及び第2レーザ光の一部を吸収して緑色〜赤色に励起発光する複数種の蛍光物質(例えばYAG系蛍光物質、或いはBAM(BaMgAl1017)等の蛍光物質)を含んで構成される。第1及び第2レーザ光が蛍光体50に照射されると、蛍光体50から発せられる緑色〜赤色の励起発光光(蛍光)と、蛍光体50により吸収されず透過した第1及び第2レーザ光の励起光とが合わされて、疑似白色光が生成される。
なお、蛍光体50は略直方体形状を有していることが好ましい。この場合、蛍光体50は、蛍光体物質をバインダで略直方体状に固めて形成してもよく、また、無機ガラスなどの樹脂に蛍光体物質を混合したものを略直方体状に形成してもよい。この蛍光体50は、商品名としてマイクロホワイト(登録商標)(Micro White(MW))とも呼ばれている。
観察窓42の奥には、被検体の被観察領域の像光を取り込むための対物レンズユニット(図示省略)等の光学系が設けられており、さらにその対物レンズユニットの奥には、被観察領域の像光を受光して被観察領域を撮像するCCD(Charge Coupled Device)などの撮像素子60が設けられている。なお、撮像素子60として、IT(インターライントランスファー)型のCCDを使用するが、そのほか、グローバルシャッターを有するCMOS(Complementary Metal-Oxide Semiconductor)を使用してもよい。
撮像素子60は、対物レンズユニットからの光を受光面(撮像面)で受光し、受光した光を光電変換して撮像信号(アナログ信号)を出力する。撮像素子60はカラーCCDであり、図4Aに示すように、その受光面には、B色のカラーフィルタが設けられたB画素60b、G色のカラーフィルタが設けられたG画素60g、R色のカラーフィルタが設けられたR画素60rを1組とする画素群が、マトリックス状に配列されている。B色、G色、R色のカラーフィルタは、図4Bの曲線63,64,65に示すように、それぞれ青色帯域、緑色帯域、赤色帯域に分光透過率を有している。
図2に示すように、撮像素子60から出力される撮像信号(アナログ信号)は、スコープケーブル67を通じてA/D変換器68に入力される。A/D変換器68は、撮像信号(アナログ信号)をその電圧レベルに対応する画像データ(デジタル信号)に変換する。変換後の画像データは、コネクタ部36を介して、プロセッサ装置13に入力される。
撮像制御部70は、撮像素子60の撮像制御を行う。この撮像制御は、モード毎に異なっている。通常モード時には、図5Aに示すように、1フレーム期間内で、通常光を撮像素子60で光電変換して電荷を蓄積するステップと、撮像素子60のB画素、G画素、R画素から青色信号Bc、緑色信号Gc、赤色信号Rcを読み出すステップが行われる。これは通常モードに設定されている間、繰り返し行われる。なお、青色信号Bc、緑色信号Gc、赤色信号Rcは、A/D変換器68により、青色画像データBc、緑色画像データGc、赤色画像データRcに変換される。
一方、酸素飽和度モード時には、図5Bに示すように、まず、最初の1フレーム目において、酸素飽和度測定光を撮像素子60で光電変換して電荷を蓄積するステップと、撮像素子60のB画素、G画素、R画素から青色信号B1、緑色信号G1、赤色信号R1を読み出すステップが行われる。そして、次の2フレーム目において、通常光を撮像素子60で光電変換して電荷を蓄積するステップと、撮像素子60のB画素、G画素、R画素から青色信号B2、緑色信号G2、赤色信号R2を読み出すステップが行われる。この合計2フレームの撮像制御は、酸素飽和度モードに設定されている間、繰り返し行われる。
なお、青色信号B1、緑色信号G1、赤色信号R1は、A/D変換器68により、青色画像データB1、緑色画像データG1、赤色画像データR1に変換され、青色信号B2、緑色信号G2、赤色信号R2は、A/D変換器68により、青色画像データB2、緑色画像データG2、赤色画像データR2に変換される。
図2に示すように、プロセッサ装置13は、制御部71と、画像処理部72と、記憶部74とを備えており、制御部72には表示装置14及び入力装置15が接続されている。制御部72はプロセッサ装置13内の各部を制御するとともに、内視鏡装置12の切り替えスイッチ21や入力装置15から入力される入力情報に基づいて、光源装置11の光源制御部20、内視鏡装置12の撮像制御部70、及び表示装置14の動作を制御する。
図6に示すように、画像処理部72は、通常画像処理部80、酸素飽和度画像処理部82を備えている。通常画像生成部80は、通常モード時に得られる青色画像データBc、緑色画像データGc、赤色画像データRcを、それぞれ表示装置14のBチャンネル、Gチャンネル、Rチャンネルに割り当てる処理を行う。これにより、表示装置14上に、通常画像が表示される。
酸素飽和度画像処理部82は、強度比算出部84と、相関関係記憶部85と、酸素飽和度算出部86と、領域設定部87と、領域処理部88と、画像生成部89とを備えている。強度比算出部84は、酸素飽和度モード時に取得した画像データのうち、青色画像データB1と緑色画像データG2の強度比B1/G2と、緑色画像データG2と赤色画像データR2の強度比R2/G2とを求める。強度比算出部84では、画像データ間で同じ位置にある画素間の強度比を算出し、また、強度比は画像データの全ての画素に対して算出される。なお、強度比は画像データのうち血管部分の画素のみ求めてもよい。この場合、血管部分は、血管部分の画素の画素値とそれ以外の部分の画素の画素値との差に基づいて特定される。
相関関係記憶部85は、強度比B1/G2及びR2/G2と酸素飽和度との相関関係を記憶している。この相関関係は、図7に示すように、二次元空間上に酸素飽和度の等高線を定義した2次元テーブルで記憶されている。この等高線の位置、形は光散乱の物理的なシミュレーションで得られ、血液量に応じて変わるように定義されている。例えば、血液量の変化があると、各等高線間の間隔が広くなったり、狭くなったりする。なお、強度比B1/G2,R2/G2はlogスケールで記憶されている。
上記相関関係は、図8に示すような酸化ヘモグロビンや還元ヘモグロビンの吸光特性や光散乱特性と密接に関連性し合っている。ここで、曲線90は酸化ヘモグロビンの吸光係数を、曲線91は還元ヘモグロビンの吸光係数を示している。例えば、473nmのように吸光係数の差が大きい波長では、酸素飽和度の情報を取り易い。しかしながら、473nmの光に対応する信号を含む青色画像データB1は、酸素飽和度だけでなく血液量にも依存度が高い。そこで、青色画像データB1に加え、主として血液量に依存して変化する赤色画像データR2と、青色画像データB2と赤色画像データR2のリファレンス信号(規格化用信号)となる緑色画像データG2から得られる強度比B1/G2及びR2/G2を用いることで、血液量に依存することなく、酸素飽和度を正確に求めることができる。
また、470〜700nmの波長範囲の光は、粘膜組織内での散乱係数が小さく、かつ波長依存性が小さいという性質がある。このため、この波長範囲の光を照明光として用いることによって、血管の深さの影響を低減しつつ、血液量および酸素飽和度の情報を含む血液情報を得ることができる。
なお、相関関係記憶部85には、強度比R2/G2と血液量との相関関係についても記憶させてもよい。この相関関係は、強度比R2/G2が大きくなればなるほど血液量も大きくなるように定義される1次元テーブルとして記憶されている。この強度比R2/G2と血液量の相関関係は血液量の算出時に用いられる。
また、血中ヘモグロビンの吸光係数の波長依存性から、以下のことが言える。
・波長470nm近辺(例えば、中心波長470nm±10nmの青色の波長領域)では酸素飽和度の変化に応じて吸光係数が大きく変化する。
・540〜580nmの緑色の波長範囲で平均すると、酸素飽和度の影響を受けにくい。
・590〜700nmの赤色の波長範囲では、酸素飽和度によって一見吸光係数が大きく変化するように見えるが、吸光係数の値自体が非常に小さいので、結果的に酸素飽和度の影響を受けにくい。
また、図7に示すように、強度比R2/G2が大きくなるのに従って、強度比B1/G2も大きくなるの(酸素飽和度=0%限界の等高線が斜め上方にスライドする)は、以下の理由からである。上記したように、強度比R2/G2は血液量と相関関係があるため、強度比R2/G2が大きくなるほど血液量も大きくなる。画像データB1、G2、R2の中で、血液量の増加によって画素値の低下が一番大きくなるのは、緑色画像データG2であり、その次が青色画像データB1である。これは、緑色画像データG2に含まれる波長成分の540〜580nmの吸光係数が、青色画像データB1に含まれる波長成分の470nm付近の吸光係数よりも高いためである(図8参照)。したがって、強度比B1/G2においては、血液量が大きくなるほど、分子のB1の画素値の低下よりも分母のG2の画素値の低下の方が大きくなる。即ち、強度比B1/G2は、血液量が大きくなるにつれて、大きくなる。
酸素飽和度算出部86は、相関関係記憶部85に記憶された相関関係と強度比算出部84で求めた強度比B1/G2、R2/G2とを用いて、各画素における酸素飽和度を求める。なお、以下の説明においては、酸素飽和度の算出に使用する青色画像データB1、緑色画像データG2、赤色画像データR2の所定画素の輝度値を、それぞれB1、G2、R2する。これに伴い、各画素における強度比は、B1/G2、R2/G2となる。
酸素飽和度算出部86は、図9に示すように、相関関係記憶部85に記憶した相関関係から、強度比B1/G2、R2/G2に対応する対応点Pを特定する。そして、対応点Pが酸素飽和度=0%限界の下限ライン98と酸素飽和度=100%限界の上限ライン99との間にある場合に、その対応点Pが示すパーセント値を酸素飽和度とする。例えば、図9の場合であれば、対応点Pは60%の等高線上に位置するため、酸素飽和度は60%となる。
一方、対応点が下限ライン98と上限ライン99との間から外れている場合、対応点が下限ライン98よりも上方に位置するときには酸素飽和度を0%とし、対応点が上限ライン99よりも下方に位置するときには酸素飽和度を100%とする。なお、対応点が下限ライン98と上限ライン99との間から外れている場合には、その画素における酸素飽和度の信頼度を下げて表示装置14上に表示しないようにしてもよい。
領域設定部87は、酸素飽和度算出部86で算出した酸素飽和度に基づき、酸素飽和度モード時に取得した青色画像データB2、緑色画像データG2、赤色画像データR2に対して、高酸素領域または低酸素領域のいずれかの領域設定を行う。この領域設定部87では、酸素飽和度が一定値(例えば60%)を超える画素領域については高酸素領域として設定され、一定値を下回る画素領域については低酸素領域として設定される。これにより、図10に示すように、青色画像データB2に対して高酸素領域93aと低酸素領域93bが設定される。緑色画像データG2、赤色画像データR2についても、青色画像データB2と同様に、高酸素領域と低酸素領域が設定される。
領域処理部88は、青色画像データB2、緑色画像データG2、赤色画像データR2の高酸素領域及び低酸素領域に対して、それぞれ異なる種類の処理(領域処理)を施す。この領域処理部88では、図11に示すように、第1〜第3領域処理の3つの領域処理が可能である。これら第1〜第3領域処理のいずれで処理を行うかは、入力装置15による操作で適宜選択することができる。
第1領域処理では、低酸素領域に対して、ゲイン処理を行う一方で、ホワイトバランス(WB)と色強調処理は行わない。このゲイン処理では、図12に示すように、酸素飽和度の低下に合わせて、青色画像データB2の画素値を低下させるのに対して、緑色画像データG2及び赤色画像データR2の画素値を増加させる。このように、低酸素領域については、青色画像データB2、緑色画像データG2、赤色画像データR2に対して、それら3色の画像データ間のバランスを整えるWBではなく、バランスを崩すゲイン処理を行うことで、酸素飽和度の大きさ違いによる色の変化を明確にすることができる(例えば、酸素飽和度60%の領域の色と酸素飽和度40%の領域の色の違いが明確になる)。
一方、第1領域処理では、高酸素領域に対して、WB及び色強調処理を行う一方で、ゲイン処理は行わない。WBを行うことにより、青色画像データB2、緑色画像データG2、赤色画像データR2間のバランスが整えられる。これにより、生体組織の凹凸情報や血管の走行パターンなど診断に有効な視認性が向上する。なお、WBは、内視鏡診断前のキャリブレーションにより得られる青色画像データB2の補正値、緑色画像データG2の補正値、赤色画像データR2の補正値に基づいて、行われる。
また、高酸素領域に対しては、WBに加えて、赤色成分を強調する色強調処理が施される。体腔内は全体的に赤みを帯びているため、赤色を強調する色強調処理を行うことで、生体組織の凹凸情報や血管の走行パターンなどの視認性を更に向上させることができる。この高酸素領域に対する色強調処理は、高酸素領域の青色画像データB2、緑色画像データG2、赤色画像データR2をHSI信号に変換した上で、図13に示すようなトーンカーブを用いて、色相変換処理を施す。この色相変換処理を行うことで、「青」や「緑」に近い色が「赤」に近づくようになる。色相変換処理後のHSI信号は、再度、RGB変換される(RGB変換後の青色画像データ、緑色画像データ、赤色画像データも、青色画像データB2、緑色画像データG2、赤色画像データR2と表記する)。なお、図13では、トーンカーブの横軸は「色相変換処理前の色」を表しており、縦軸は「色相変換処理後の色」を表している(図14のトーンカーブの横軸、縦軸についても同様である)。
図11に示すように、第2領域処理では、低酸素領域に対して、ゲイン処理及び色強調処理を行う一方で、ホワイトバランス(WB)は行わない。ゲイン処理については、第1領域処理のゲイン処理と同様である。そして、ゲイン処理後の低酸素領域の青色画像データB2、緑色画像データG2、赤色画像データR2に対して色強調処理を施すことによって、酸素飽和度の違いによる色の違いを更に明確化させる。これにより、酸素飽和度のわずかな変化も、色の変化に反映されるようになる。
低酸素領域に対する色強調処理は、低酸素領域の青色画像データB2、緑色画像データG2、赤色画像データR2をHSI信号に変換した上で、図14(A)〜(C)に示すようなトーンカーブを用いて、色相変換処理を行う。この色相変換処理では、ゲインを「1」よりも大きくした「緑」や「赤」については、図14(A)に示すように、「緑」及び「赤」の間の色相を変化させることなく、そのままの色を維持する。これに対して、ゲインを「1」よりも小さくした「青」については、図14(B)、(C)に示すように、「青」及び「緑」の間の色相と「青」及び「赤」の間の色相を変化させることによって、「赤」や「緑」に近い色が「青」に極力近づかないようにするとともに、「青」に近い色は「青」に近づけるようにする。色相変換処理後のHSI信号は、再度、RGB変換される(RGB変換後の青色画像データ、緑色画像データ、赤色画像データも、青色画像データB2、緑色画像データG2、赤色画像データR2と表記する)。
また、第2領域処理では、高酸素領域に対して、WBを行う一方で、ゲイン処理及び色強調処理は行わない。高酸素領域に対するWBは、第1領域処理と同様である。
図11に示すように、第3領域処理では、低酸素領域に対してゲイン処理及び色強調処理を行う一方で、WBは行わない。これに対して、高酸素領域に対しては、WB及び色強調処理を行う一方で、ゲイン処理は行わない。なお、低酸素領域に対して行うゲイン処理及び色強調処理は、第1及び第2領域処理のゲイン処理及び色強調処理と同様であり、高酸素領域に対して行うWB及び色強調処理も、第1及び第2領域処理のWB及び色強調処理と同様である。
画像生成部89は、領域処理部88で第1〜第3領域処理のいずれか施された青色画像データB2、緑色画像データG2、赤色画像データR2を、表示装置14のBチャンネル、Gチャンネル、Rチャンネルに割り当てる処理を行う。これにより、表示装置14上に、酸素飽和度画像が表示される。ここで、図15Aに示すように、第1領域処理を行った場合の酸素飽和度画像94においては、高酸素領域94aは、通常画像よりも、生体組織の凹凸や血管走行パターンの視認性が向上している。一方、酸素飽和度画像94の低酸素領域94bでは、酸素飽和度に応じた色が疑似カラーとして表示されている。
また、図15Bに示すように、第2領域処理を行った場合の酸素飽和度画像95においては、高酸素領域95aは、通常画像と同等の画質で表示される。一方、酸素飽和度画像95の低酸素領域95bでは、酸素飽和度画像94の低酸素領域94aと比べて、酸素飽和度のわずかな変化も、色の違いとして反映されている。この低酸素領域95bのうち、領域95cは酸素飽和度50〜60%の領域を表しており、領域95dは酸素飽和度40〜50%の領域を表している。
また、図15Cに示すように、第3領域処理を行った場合の酸素飽和度画像96においては、高酸素領域96aは、通常画像よりも、生体組織の凹凸や血管走行パターンの視認性が向上している。また、酸素飽和度画像96の低酸素領域96aでは、酸素飽和度画像94の低酸素領域94bと比べて、酸素飽和度のわずかな変化も、色の違いとして反映されている(領域96cは酸素飽和度50〜60%の領域を表しており、領域96dは酸素飽和度40〜50%の領域を表している)。
次に、酸素飽和度モードにおける一連の流れを、図16のフローチャートに沿って説明する。まず、内視鏡装置の切り替えスイッチ21によって酸素飽和度モードに切り替えるとともに、入力装置15を操作することによって、高酸素領域及び低酸素領域に対して行う第1〜第3領域処理のいずれかの処理を選択する。これにより、酸素飽和度測定光と通常光が交互に検体に照射され、各照射毎に検体がカラーの撮像素子60で撮像される。
次に、検体内の撮像で得られた画像データのうち、青色画像データB1及び緑色画像データG2間の強度比B1/G2、赤色画像データR2及び緑色画像データG2間の強度比R2/G2を、画素毎に算出する。そして、これら2つの強度比と、相関関係記憶部85に記憶した相関関係とから、各画素毎に酸素飽和度を算出する。そして、算出した酸素飽和度に基づき、青色画像データB2、緑色画像データG2、赤色画像データR2に対して、高酸素領域または低酸素領域のいずれかの領域設定を行う。そして、高酸素領域及び低酸素領域のそれぞれに対して、入力装置15で選択した第1〜第3領域処理のいずれかを施す。領域処理が施された青色画像データB2、緑色画像データG2、赤色画像データR2を表示装置14のB、G、Rチャンネルに割り当てる。これにより、酸素飽和度画像が表示装置14に表示される。酸素飽和度測定光等の照射から酸素飽和度画像の表示までの一連の流れは、酸素飽和度モードが継続している限り、繰り返し行われる。
上記第1実施形態では、半導体光源の照明光を用いて被検体内の照明を行ったが、これに代えて、第2実施形態では、キセノンランプなどの白色光源の広帯域光から回転フィルタで波長分離した光を用いて、照明を行う(回転フィルタ方式)。この第2実施形態では、図17に示す内視鏡システム100を使用する。内視鏡システム100は、内視鏡装置101、光源装置102が異なっている以外は、内視鏡システム10と同様の構成を備えている。したがって、以下においては、内視鏡装置101及び光源装置102の構成とそれに関連する部分を説明し、その他については説明を省略する。
内視鏡装置101は、スコープ先端部の照明部33に蛍光体50が設けられていない点が内視鏡装置12と異なる。そのため、光源装置102からの光は、ライトガイド28,29を介して、そのまま被検体内に照射される。また、撮像素子103は、撮像素子60と異なり、撮像面にカラーフィルタが設けられていないモノクロCCDで構成される。それ以外については、内視鏡装置101は、内視鏡装置12と同様の構成を備えている。
光源装置102は、広帯域光BB(400〜700nm)を発する白色光源110と、この白色光源110からの広帯域光BBを所定波長の光に波長分離する回転フィルタ112と、回転フィルタ112の回転軸に接続され、一定の回転速度で回転フィルタ112を回転させるモータ113と、回転フィルタ112をその半径方向にシフトさせるシフト部114を備えている。
白色光源110は、広帯域光BBを放射する光源本体110aと、広帯域光BBの光量を調整する絞り110bとを備えている。光源本体110aはキセノンランプ、ハロゲンランプ、メタルハライドランプなどから構成される。絞り110bの開度は、光量制御部(図示省略)によって調節される。
図18に示すように、回転フィルタ112は、モータ113に接続された回転軸112aを回転中心として回転する。この回転フィルタ112には、回転軸112がある回転中心から順に、半径方向に沿って、第1及び第2フィルタ領域120,122が設けられている。第1フィルタ領域120は通常モード時に広帯域光BBの光路上にセットされ、第2フィルタ領域122は酸素飽和度モード時に広帯域光BBの光路上にセットされる。各フィルタ領域120、122の切替は、シフト部114により回転フィルタ112を半径方向にシフトさせることによって、行われる。
第1フィルタ領域120は、中心角が120°の扇型の領域に、それぞれBフィルタ部120a、Gフィルタ部120b、Rフィルタ部120cが設けられている。図19に示すように、Bフィルタ部120aは広帯域光BBから青色帯域(380〜500nm)のB光を透過させ、Gフィルタ部120bは広帯域光BBから緑色帯域(450〜630nm)のG光を透過させ、Rフィルタ部120cは広帯域光BBから赤色帯域(580〜760nm)のR光を透過させる。したがって、回転フィルタ112の回転によって、B光、G光、R光が順次出射する。これらB光、G光、R光は、集光レンズ116及び光ファイバ117を通して、ライドガイド28,29に入射する。
第2フィルタ領域122は、測定用フィルタ部122a(図18では「測定用」と記載)、Bフィルタ部122b、Gフィルタ部122c、Rフィルタ部122dが設けられている。測定用フィルタ部122aは広帯域光BBのうち、波長範囲450〜500nmの酸素飽和度測定光を透過させる。また、Bフィルタ部122b、Gフィルタ部122c,Rフィルタ部122dは、上記B、G、Rフィルタ部120a、120b、120cと同様、青色帯域(380〜500nm)のB光、緑色帯域(450〜630nm)のG光、赤色帯域(580〜760nm)のR光を透過させる。したがって、回転フィルタ112の回転によって、酸素飽和度測定光、B光、G光、R光が順次出射する。これら4種類の光は、集光レンズ116及び光ファイバ117を通して、ライドガイド28,29に順次入射する。
第2実施形態の内視鏡システム100では、回転フィルタ方式を採用しているため、撮像制御が内視鏡システム10と異なる。通常モードにおいては、図20Aに示すように、B、G、Rの三色の像光を撮像素子103で順次撮像して電荷を蓄積し、この蓄積した電荷に基づいて青色信号Bc、緑色信号Gc、赤色信号Rcを順次出力する。この一連の動作は、通常モードに設定されている間、繰り返される。そして、それら3色の信号Bc、Gc,RcをA/D変換した青色画像データBc、緑色画像データGc、赤色画像データRcを、表示装置14のB、G、Rチャンネルに割り当てる。これにより、通常画像が表示装置14に表示される。
酸素飽和度モードにおいては、図20Bに示すように、酸素飽和度測定光、B光、G光、R光を撮像素子103で順次撮像して電荷を蓄積し、この蓄積した電荷に基づいて青色信号B1、青色信号B2、緑色信号G2、赤色信号R2を順次出力する。こうした動作は酸素飽和度モードに設定されている間、繰り返される。なお、それら4色の信号B1、B2、G2、R2は、A/D変換器58により、青色画像データB1、青色画像データB2、緑色画像データG2、赤色画像データR2に変換される。
酸素飽和度モードで取得した画像データのうち、青色画像データB1、緑色画像データG2、赤色画像データR2に基づいて、第1実施形態と同様の手順で、血中ヘモグロビンの酸素飽和度を算出する。また、算出した酸素飽和度に基づき、青色画像データB2、緑色画像データG2、赤色画像データR2の領域設定(高酸素領域又は低酸素領域)を行う。そして、高酸素領域及び低酸素領域のそれぞれに対して、第1〜第3領域処理のいずれかを施す。そして、領域処理が施された青色画像データB2、緑色画像データG2、赤色画像データR2を、表示装置のB、G、Rチャンネルに割り当てる。これにより、酸素飽和度画像が表示装置14に表示される。
なお、上記第1及び第2実施形態では、色強調処理として、高酸素領域に対しては赤色を強調する赤色強調処理を、低酸素領域に対しては、酸素飽和度の違いによる色の違いを強調する処理を行ったが、これに代えて、色彩強調により色強調処理を行ってもよく、また、通常画像(青色画像データB2、緑色画像データG2、赤色画像データR2から得られる画像)を分光推定することで得られる分光画像を用いて色強調処理を行ってもよい。
なお、上記第1実施形態では、スコープ先端部19に蛍光体50を設けたが、これに代えて、光源装置11内に蛍光体50を設けてもよい。この場合、LD2(445nm)と光ファイバ25の間には蛍光体50を設け、それ以外のLD1(473nm)と光ファイバ24の間とLD3(405nm)と光ファイバ26の間については、蛍光体50を設けなくてもよい。
なお、上記第1及び第2実施形態では、血液量(酸化ヘモグロビンと還元ヘモグロビンの和)のうち酸化ヘモグロビンの占める割合である酸素飽和度を用いて酸素飽和度画像を生成したが、これに代えて又は加えて、「血液量×酸素飽和度(%)」から求まる酸化ヘモグロビンインデックスや、「血液量×(100−酸素飽和度)(%)」から求まる還元ヘモグロビンインデックスを用いてもよい。
10,100 内視鏡システム
13 プロセッサ装置
72 画像処理部
86 酸素飽和度算出部
87 領域設定部
88 領域処理部
94〜96 酸素飽和度画像

Claims (12)

  1. 検体に照明光を照射する照明手段と、
    前記照明光のうち、広帯域の可視光で照明された検体を撮像して第1画像情報を取得するとともに、酸化ヘモグロビンの吸光係数と還元ヘモグロビンの吸光係数が異なる波長域の光で照明された検体を撮像して第2画像情報を取得する画像情報取得手段と、
    前記第1画像情報に基づいて、前記広帯域の可視光の波長成分を有する通常画像を生成する通常画像生成手段と、
    前記第2画像情報に基づいて、血中ヘモグロビンの酸素飽和度を算出する酸素飽和度算出手段と、
    前記通常画像において、前記酸素飽和度算出手段で算出した酸素飽和度が一定値を超える第1領域と、前記一定値を下回る第2領域を設定する領域設定手段と、
    前記第1領域及び前記第2領域に対して、それぞれ異なる種類の処理を施す領域処理手段とを備えることを特徴とする内視鏡システム。
  2. 前記領域処理手段は、前記第1領域に対してカラーバランスを調整するカラーバランス処理を行い、前記第2領域に対して、前記酸素飽和度に応じて前記第2領域の色を変化させるゲイン処理を行うことを特徴とする請求項1記載の内視鏡システム。
  3. 前記領域処理手段は、前記第2領域に対しては、前記カラーバランスを行わないことを特徴とする請求項2記載の内視鏡システム。
  4. 前記カラーバランス処理は、前記第1領域の画素値を調整することにより、前記第1領域におけるホワイトバランスを調整し、
    前記ゲイン処理は、前記酸素飽和度に基づいて、前記第2領域の画素値を調整することで、前記第2領域における色を前記酸素飽和度に応じて変化させることを特徴とする請求項2または3記載の内視鏡システム。
  5. 前記領域処理手段は、前記第1領域又は前記第2領域の少なくとも一方に対して、色強調処理を行うことを特徴とする請求項2ないし4いずれか1項記載の内視鏡システム。
  6. 前記第1領域に対する色強調処理は、前記第1領域の色のうち赤色成分を強調する赤色強調処理であることを特徴とする請求項5記載の内視鏡システム。
  7. 前記第2領域に対する色強調処理は、前記酸素飽和度の大きさによって異なる前記第2領域の色を強調する疑似カラー強調処理であることを特徴とする請求項5または6記載の内視鏡システム。
  8. 前記第1画像情報は、440〜460nmの青色狭帯域光及びこの青色狭帯域光を波長変換部材で波長変換することで得られる蛍光が照射された前記検体をカラーの撮像素子のB画素、G画素、R画素で撮像することで得られる3色の青色画像データ、緑色画像データ、赤色画像データであり、
    前記第2画像情報は、460〜480nmの青色狭帯域光及びこの460〜480nmの青色狭帯域光を波長変換部材で波長変換することで得られる蛍光が照射された前記検体をカラーの撮像素子のB画素で撮像することで得られる青色狭帯域画像データであることを特徴とする請求項1ないし7いずれか1項記載の内視鏡システム。
  9. 前記第1画像情報は、青色光、緑色光、赤色光が順次照射された前記検体をモノクロの撮像素子で順次撮像することで得られる3色の青色画像データ、緑色画像データ、赤色画像データであり、
    前記第2画像情報は、450〜500nmの青色光が照射された前記検体をモノクロの撮像素子で撮像することで得られる青色狭帯域画像データであることを特徴とする請求項1ないし7いずれか1項記載の内視鏡システム。
  10. 前記酸素飽和度算出手段は、前記第2画像情報である前記青色狭帯域画像データに加え、前記第1画像情報の緑色画像データ及び赤色画像データに基づいて、前記酸素飽和度を算出することを特徴とする請求項8または9記載の内視鏡システム。
  11. 検体に照明光を照射する照明手段と、前記照明光のうち、広帯域の可視光で照明された検体を撮像することにより第1画像情報を取得するとともに、酸化ヘモグロビンの吸光係数と還元ヘモグロビンの吸光係数が異なる波長域の光で照明された検体を撮像することにより第2画像情報を取得する画像情報取得手段とを備える内視鏡に接続された内視鏡システムのプロセッサ装置において、
    前記第1及び第2画像情報を受信する受信手段と、
    前記第1画像情報に基づいて、前記広帯域の可視光の波長成分を有する通常画像を生成する通常画像生成手段と、
    前記第2画像情報に基づいて、血中ヘモグロビンの酸素飽和度を算出する酸素飽和度算出手段と、
    前記通常画像において、前記酸素飽和度算出手段で算出した酸素飽和度が一定値を超える第1領域と、前記一定値を下回る第2領域を設定する領域設定手段と、
    前記第1領域及び前記第2領域に対して、それぞれ異なる種類の処理を施す領域処理手段とを備えることを特徴とする内視鏡システムのプロセッサ装置。
  12. 検体に照明光を照射する照明手段と、前記照明光のうち、広帯域の可視光で照明された検体を撮像して第1画像情報を取得するとともに、酸化ヘモグロビンの吸光係数と還元ヘモグロビンの吸光係数が異なる波長域の光で照明された検体を撮像してり第2画像情報を取得する画像情報取得手段とを備える内視鏡に接続された内視鏡用プロセッサ装置内で、前記第1及び第2画像情報に対して画像処理を施す内視鏡画像の画像処理方法において、
    前記第1画像情報に基づいて、前記広帯域の可視光の波長成分を有する通常画像を通常画像生成手段により生成し、
    前記第2画像情報に基づいて、血中ヘモグロビンの酸素飽和度を酸素飽和度算出手段により算出し、
    前記通常画像において、前記酸素飽和度算出手段で算出した酸素飽和度が一定値を超える第1領域と前記一定値を下回る第2領域とを、領域設定手段により設定し、
    前記第1領域及び前記第2領域に対してそれぞれ異なる種類の処理を、領域処理手段により施すことを特徴とする内視鏡画像の画像処理方法。
JP2012195097A 2012-09-05 2012-09-05 内視鏡システム、内視鏡システムのプロセッサ装置、及び内視鏡画像の画像処理方法 Active JP5729881B2 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2012195097A JP5729881B2 (ja) 2012-09-05 2012-09-05 内視鏡システム、内視鏡システムのプロセッサ装置、及び内視鏡画像の画像処理方法
EP13181438.6A EP2705787B1 (en) 2012-09-05 2013-08-23 Endoscope system and processor device thereof
US14/013,301 US9565399B2 (en) 2012-09-05 2013-08-29 Endoscope system, processor device thereof, and image processing method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2012195097A JP5729881B2 (ja) 2012-09-05 2012-09-05 内視鏡システム、内視鏡システムのプロセッサ装置、及び内視鏡画像の画像処理方法

Publications (2)

Publication Number Publication Date
JP2014050453A true JP2014050453A (ja) 2014-03-20
JP5729881B2 JP5729881B2 (ja) 2015-06-03

Family

ID=49084744

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2012195097A Active JP5729881B2 (ja) 2012-09-05 2012-09-05 内視鏡システム、内視鏡システムのプロセッサ装置、及び内視鏡画像の画像処理方法

Country Status (3)

Country Link
US (1) US9565399B2 (ja)
EP (1) EP2705787B1 (ja)
JP (1) JP5729881B2 (ja)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPWO2018181156A1 (ja) * 2017-03-31 2019-11-14 Hoya株式会社 電子内視鏡システム
JP2021035549A (ja) * 2016-10-14 2021-03-04 Hoya株式会社 内視鏡システム
JP2021184924A (ja) * 2020-02-06 2021-12-09 富士フイルム株式会社 医用画像処理装置

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016059977A1 (ja) * 2014-10-15 2016-04-21 オリンパス株式会社 信号処理装置及び内視鏡システム
JP6355527B2 (ja) * 2014-10-31 2018-07-11 富士フイルム株式会社 内視鏡システム及びその作動方法
JP6439083B1 (ja) * 2017-05-02 2018-12-19 オリンパス株式会社 内視鏡システム
CN110769738B (zh) * 2017-06-21 2022-03-08 奥林巴斯株式会社 图像处理装置、内窥镜装置、图像处理装置的工作方法及计算机可读存储介质

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH02224635A (ja) * 1988-11-02 1990-09-06 Olympus Optical Co Ltd 内視鏡装置
JPH02268722A (ja) * 1989-04-12 1990-11-02 Toshiba Corp 電子内視鏡装置
JP2003135392A (ja) * 2001-10-31 2003-05-13 Pentax Corp 電子内視鏡装置
JP2011194182A (ja) * 2010-03-24 2011-10-06 Fujifilm Corp 電子内視鏡システム
JP2011206227A (ja) * 2010-03-29 2011-10-20 Fujifilm Corp 内視鏡装置
JP2011217798A (ja) * 2010-04-05 2011-11-04 Fujifilm Corp 電子内視鏡システム
JP2012139482A (ja) * 2010-12-15 2012-07-26 Fujifilm Corp 内視鏡システム、内視鏡システムのプロセッサ装置及び画像生成方法

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2375679A (en) * 2001-04-09 2002-11-20 Patrick Kerr Retinal function camera using plural light wavelengths to produce a retinal function image showing haemoglobin oxygenation.
JP5431252B2 (ja) * 2009-09-30 2014-03-05 富士フイルム株式会社 電子内視鏡システム、電子内視鏡用のプロセッサ装置、及び電子内視鏡システムの作動方法
JP5309120B2 (ja) * 2010-12-20 2013-10-09 富士フイルム株式会社 内視鏡装置
JP5502812B2 (ja) * 2011-07-14 2014-05-28 富士フイルム株式会社 生体情報取得システムおよび生体情報取得システムの作動方法

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH02224635A (ja) * 1988-11-02 1990-09-06 Olympus Optical Co Ltd 内視鏡装置
JPH02268722A (ja) * 1989-04-12 1990-11-02 Toshiba Corp 電子内視鏡装置
JP2003135392A (ja) * 2001-10-31 2003-05-13 Pentax Corp 電子内視鏡装置
JP2011194182A (ja) * 2010-03-24 2011-10-06 Fujifilm Corp 電子内視鏡システム
JP2011206227A (ja) * 2010-03-29 2011-10-20 Fujifilm Corp 内視鏡装置
JP2011217798A (ja) * 2010-04-05 2011-11-04 Fujifilm Corp 電子内視鏡システム
JP2012139482A (ja) * 2010-12-15 2012-07-26 Fujifilm Corp 内視鏡システム、内視鏡システムのプロセッサ装置及び画像生成方法

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2021035549A (ja) * 2016-10-14 2021-03-04 Hoya株式会社 内視鏡システム
JPWO2018181156A1 (ja) * 2017-03-31 2019-11-14 Hoya株式会社 電子内視鏡システム
JP2021184924A (ja) * 2020-02-06 2021-12-09 富士フイルム株式会社 医用画像処理装置
JP7177897B2 (ja) 2020-02-06 2022-11-24 富士フイルム株式会社 医用画像処理装置

Also Published As

Publication number Publication date
US20140063216A1 (en) 2014-03-06
JP5729881B2 (ja) 2015-06-03
EP2705787A1 (en) 2014-03-12
EP2705787B1 (en) 2019-07-24
US9565399B2 (en) 2017-02-07

Similar Documents

Publication Publication Date Title
JP5702755B2 (ja) 内視鏡システム、内視鏡システムのプロセッサ装置、及び内視鏡システムの作動方法
JP5587932B2 (ja) 内視鏡システム、内視鏡システムのプロセッサ装置、及び内視鏡システムの作動方法
EP2465431B1 (en) Endoscope system and processor of endoscope system
JP5654511B2 (ja) 内視鏡システム、内視鏡システムのプロセッサ装置、及び内視鏡システムの作動方法
JP5729881B2 (ja) 内視鏡システム、内視鏡システムのプロセッサ装置、及び内視鏡画像の画像処理方法
JP5616304B2 (ja) 電子内視鏡システム及び電子内視鏡システムの作動方法
JP5457247B2 (ja) 電子内視鏡システム、電子内視鏡用のプロセッサ装置、及び電子内視鏡システムの作動方法
JP5690790B2 (ja) 内視鏡システム及び内視鏡システムの作動方法
JP5302984B2 (ja) 内視鏡システム、内視鏡システムのプロセッサ装置及び内視鏡システムの作動方法
JP5914496B2 (ja) 内視鏡システム及びプロセッサ装置並びに内視鏡システムの作動方法
US20120157775A1 (en) Endoscope apparatus
JP5222934B2 (ja) 内視鏡システム、内視鏡システムのプロセッサ装置、及び内視鏡システムの作動方法
JP5690788B2 (ja) 内視鏡システム、内視鏡システムのプロセッサ装置、内視鏡システムの作動方法、及びカプセル内視鏡システム
JP5774563B2 (ja) 内視鏡システム及びそのプロセッサ装置並びに内視鏡システムの作動方法
JP2013099464A (ja) 内視鏡システム、内視鏡システムのプロセッサ装置、及び画像表示方法
CN107088042B (zh) 内窥镜系统
JP5558331B2 (ja) 内視鏡システム、内視鏡システムのプロセッサ装置及び内視鏡システムの作動方法

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20140207

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20140717

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20140827

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20141009

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20150218

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20150310

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20150401

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20150406

R150 Certificate of patent or registration of utility model

Ref document number: 5729881

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250