JP2012090889A - 蛍光観察装置 - Google Patents

蛍光観察装置 Download PDF

Info

Publication number
JP2012090889A
JP2012090889A JP2010242608A JP2010242608A JP2012090889A JP 2012090889 A JP2012090889 A JP 2012090889A JP 2010242608 A JP2010242608 A JP 2010242608A JP 2010242608 A JP2010242608 A JP 2010242608A JP 2012090889 A JP2012090889 A JP 2012090889A
Authority
JP
Japan
Prior art keywords
image
unit
gradation value
fluorescence
region
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2010242608A
Other languages
English (en)
Inventor
Yumi Shida
裕美 志田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Olympus Corp
Original Assignee
Olympus Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Olympus Corp filed Critical Olympus Corp
Priority to JP2010242608A priority Critical patent/JP2012090889A/ja
Priority to EP11836106.2A priority patent/EP2620092B1/en
Priority to CN201180051260.6A priority patent/CN103200857B/zh
Priority to PCT/JP2011/074058 priority patent/WO2012056970A1/ja
Publication of JP2012090889A publication Critical patent/JP2012090889A/ja
Priority to US13/869,210 priority patent/US9313388B2/en
Pending legal-status Critical Current

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002Operational features of endoscopes
    • A61B1/00004Operational features of endoscopes characterised by electronic signal processing
    • A61B1/00009Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00163Optical arrangements
    • A61B1/00186Optical arrangements with imaging filters
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/04Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
    • A61B1/043Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances for fluorescence imaging
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/04Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
    • A61B1/05Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances characterised by the image sensor, e.g. camera, being in the distal end portion
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/06Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
    • A61B1/0661Endoscope light sources
    • A61B1/0669Endoscope light sources at proximal end of an endoscope
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/56Cameras or camera modules comprising electronic image sensors; Control thereof provided with illuminating means
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/06Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
    • A61B1/0646Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements with illumination filters

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Surgery (AREA)
  • Engineering & Computer Science (AREA)
  • Radiology & Medical Imaging (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Biophysics (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Optics & Photonics (AREA)
  • Pathology (AREA)
  • Veterinary Medicine (AREA)
  • Public Health (AREA)
  • Biomedical Technology (AREA)
  • Physics & Mathematics (AREA)
  • Medical Informatics (AREA)
  • Molecular Biology (AREA)
  • Animal Behavior & Ethology (AREA)
  • General Health & Medical Sciences (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Endoscopes (AREA)
  • Investigating, Analyzing Materials By Fluorescence Or Luminescence (AREA)

Abstract

【課題】距離や角度により蛍光強度が変化した場合でも、複雑な演算を行うことなく蛍光物質が多く存在する領域を特定する。
【解決手段】被写体Aに対し、励起光および照明光を照射する照明部3と、該照明部3からの励起光の照射により前記被写体Aにおいて発生した蛍光を撮影し蛍光画像S2を取得する蛍光撮像部18と、照明部3からの照明光の照射により被写体Aから戻る戻り光を撮影し戻り光画像S1を取得する戻り光撮像部17と、蛍光撮像部18により取得された蛍光画像S2が、設定された閾値S4以上の階調値を有する高輝度領域を抽出する領域抽出部24と、戻り光撮像部17により取得された戻り光画像S1の階調値が高いほど閾値S4を高く設定する閾値設定部22とを備える蛍光観察装置1を提供する。
【選択図】図1

Description

本発明は、蛍光観察装置に関するものである。
従来、観察対象の反射光画像と蛍光画像とを取得し、反射光画像の信号強度が所定の設定レベルを超えているか否かによって、蛍光画像の蛍光強度が小さい領域についても、病変部として検出する蛍光観察装置が知られている(例えば、特許文献1参照。)。
特開2006−191989号公報
しかしながら、特許文献1の蛍光観察装置は、固定の閾値によって病変部を抽出するので、照明部の角度や距離が変動した場合には病変部を抽出しきれないという不都合がある。
本発明は、このような事情に鑑みてなされたものであって、距離や角度により蛍光強度が変化した場合でも、複雑な演算を行うことなく蛍光物質が多く存在する領域を特定することができる蛍光観察装置を提供することを目的としている。
上記目的を達成するために、本発明は以下の手段を提供する。
本発明は、被写体に対し、励起光および照明光を照射する照明部と、該照明部からの励起光の照射により前記被写体において発生した蛍光を撮影し蛍光画像を取得する蛍光撮像部と、前記照明部からの照明光の照射により前記被写体から戻る戻り光を撮影し戻り光画像を取得する戻り光撮像部と、前記蛍光撮像部により取得された蛍光画像が、設定された閾値以上の階調値を有する高輝度領域を抽出する領域抽出部と、前記戻り光撮像部により取得された戻り光画像の階調値が高いほど前記閾値を高く設定する閾値設定部とを備える蛍光観察装置を提供する。
本発明によれば、照明部から発せられた励起光が被写体に照射されると、被写体内に含まれる蛍光物質が励起されて発生した蛍光が蛍光撮像部によって撮影され、蛍光画像が取得される。また、照明部から発せられた照明光が被写体に照射されると、被写体から戻る戻り光が戻り光撮像部によって撮影され、戻り光画像が取得される。
そして、取得された蛍光画像の内、閾値設定部により設定された閾値以上の階調値を有する高輝度領域が領域抽出部により抽出される。戻り光画像の階調値が高い領域は、照明部と被写体とが近い等の位置関係により蛍光画像の階調値も高くなっている。したがって、戻り光画像の階調値が高いほど高い閾値を用いることにより、照明部と被写体との位置関係に依存して蛍光画像の階調値が高くなっている領域が高輝度領域として抽出されることを防止できる。すなわち、被写体への照射距離や角度により蛍光画像の階調値が高くなっている領域を除いて、真に、蛍光物質が多く存在する領域を抽出することができる。
上記発明においては、前記閾値設定部が、第1の階調値と第2の階調値との間において、前記戻り光画像の階調値が高いほど高くなる関数に従う前記閾値を設定し、前記第1の階調値より小さい階調値範囲および前記第2の階調値より大きい階調値範囲においては、前記関数により算出される値より大きな前記閾値を設定するとしてもよい。
このようにすることで、第1の階調値と第2の階調値との間においては、関数に従う閾値により、高輝度領域を抽出することができる。
戻り光画像の階調値が第1の階調値より小さい階調値範囲は蛍光画像の階調値にノイズが多く含まれ、戻り光画像の階調値が前記第2の階調値より大きい階調値範囲は蛍光画像の階調値で飽和状態となる可能性が大きくなる。したがって、戻り光画像の階調値が第1の階調値より小さい階調値範囲および前記第2の階調値より大きい階調値範囲においては、関数により算出される値より大きな閾値を設定することにより、ノイズや飽和状態などの蛍光信号の信頼性が低い領域が高輝度領域として抽出されることを防止することができる。
上記発明においては、前記閾値設定部が、前記戻り光画像を複数画素毎に分割して形成された分割領域毎に前記閾値を設定し、前記領域抽出部が、各前記分割領域に設定された前記閾値を用いて、各前記分割領域に対応する位置に配置される前記蛍光画像の各小領域について、前記高輝度領域を抽出するとしてもよい。
このようにすることで、1画素毎に閾値を設定することに比べ演算量が少なくて済み、演算に要する時間を節約することができる。
上記発明においては、前記戻り光画像を複数画素毎に分割して前記分割領域を形成するとともに、各該分割領域に対応する位置に配される前記蛍光画像の前記小領域を各前記分割領域に対応づける画像分割部と、前記戻り光画像内の複数の画素の平均階調値を算出する平均階調値算出部とを備え、前記画像分割部は、前記平均階調値算出部により算出された平均階調値が高いほど分割数を増やしてもよい。
このようにすることで、平均階調値算出部により算出される戻り光画像の平均階調値に応じた分割数によって、画像分割部により戻り光画像の分割領域が形成され、各分割領域毎に蛍光画像の各小領域が対応づけられる。
照明部を被写体に近接させたり、対向させたりしているときは、被写体をより詳細に観察しようとしている状態であり、この状態では平均階調値が高い。したがって、平均階調値が高いときに分割数を増やすことで、詳細に蛍光画像を観察することができる。
一方、照明部を被写体から遠くしたり、入射角度を浅くしたりしたときは、被写体を大まかに観察しようとしている状態であり、この状態では平均階調値が低い。したがって、平均階調値が低いときに分割数を減らすことで、演算回数が少なくてすみ、演算に要する時間を節約することができる。
上記発明においては、観察条件を変更するために着脱される着脱部品を備え、該着脱部品に識別情報が記憶され、該着脱部品に記憶された識別情報を読み取る識別情報読取部と、前記識別情報と前記戻り光画像の階調値と前記閾値とを対応づけて記憶する記憶部と、前記記憶部により対応づけて記憶された前記閾値を設定する前記閾値設定部とを備えていてもよい。
このようにすることで、着脱部品を着脱して観察条件を変更すると、着脱部品に記憶されている識別情報が、識別情報読取手段によって読み取られ、記憶部により識別情報と戻り光画像の階調値に対応づけて記憶された閾値は、閾値設定部により設定される。これにより、観察条件に合わせて最適な閾値を選択でき、観察条件が変動した場合においても定量性の高い蛍光観察を行うことができる。
着脱部品としては、例えば、内視鏡装置におけるスコープ等を挙げることができ、その場合に変更される観察条件としては、観察可能な蛍光の波長や強度および観察対象部位(胃、大腸など)等を挙げることができる。
本発明によれば、距離や角度による蛍光強度が変化した場合でも、複雑な演算を行うことなく蛍光物質が多く存在する領域を特定することができるという効果を奏する。
本発明の第1の実施形態に係る蛍光観察装置を示す全体構成図である。 予め設定された分割数で正方配列された複数の分割領域を示す図である。 平均階調値が大きいほど大きくなる単調増加関数である閾値と平均階調値の関係のグラフを示す図である。 図3において平均階調値の値に応じて適用する関数を変えたときの閾値と平均階調値の関係のグラフを示す図である。 本発明の第2の実施形態に係る蛍光観察装置を示す全体構成図である。 本発明の第3の実施形態に係る蛍光観察装置を示す全体構成図である。 図3において観察対象部位に応じて変化するグラフを示す図である。
本発明の第1の実施形態に係る蛍光観察装置について、図面を参照して以下に説明する。
本実施形態に係る蛍光観察装置1は、内視鏡装置であって、図1に示されるように、体内に挿入される細長い挿入部2と、光源(照明部)3と、該光源3からの励起光および照明光を挿入部2の先端から被写体Aに向けて照射する照明ユニット(照明部)4と、挿入部2の先端に設けられ、被写体Aである生体組織の画像情報を取得する撮像ユニット5と、挿入部2の基端側に配置され、撮像ユニット5により取得された画像情報を処理する画像処理部6と、該画像処理部6により処理された画像Gを表示するモニタ7とを備えている。
光源3は、キセノンランプ8と、該キセノンランプ8から発せられた光から、励起光および照明光(波長帯域400〜740nm)を切り出すフィルタ9と、フィルタ9により切り出された励起光および照明光を集光するカップリングレンズ10とを備えている。
照明ユニット4は、挿入部2の長手方向のほぼ全長にわたって配置され、カップリングレンズ10によって集光された励起光および照明光を導光するライトガイドファイバ11と、挿入部2の先端に設けられ、ライトガイドファイバ11によって導光されてきた励起光および照明光を拡散させて、挿入部2の先端面2aに対向する被写体Aに照射する照明光学系12とを備えている。
撮像ユニット5は、被写体Aの所定の観察範囲から戻る光を集光する対物レンズ13と、該対物レンズ13によって集光された光のうち、励起波長以上の光(励起光および蛍光)を反射し、励起波長より短い波長の白色光(戻り光)を透過するダイクロイックミラー14と、該ダイクロイックミラー14により反射された蛍光およびダイクロイックミラー14を透過した白色光をそれぞれ集光する2つの集光レンズ15,16と、集光レンズ15,16によって集光された白色光および蛍光を撮影するCCDのような2個の撮像素子17,18とを備えている。図中、符号19は、ダイクロイックミラー14によって反射された光のうち励起光を遮断する(例えば、波長帯域760〜850nmの光だけを透過する)励起光カットフィルタである。
画像処理部6は、撮像素子17により取得された白色光画像情報S1から白色光画像G1を生成する白色光画像生成部20と、白色光画像G1を複数の分割領域Rに分割して画像分割情報を得る画像分割部21と、画像分割部21により得られた画像分割情報から分割領域Rごとに閾値S4を設定する閾値設定部22と、撮像素子18により取得された蛍光画像情報S2から蛍光画像G2を生成する蛍光画像生成部23と、閾値設定部22により設定された各領域の閾値S4をもとに、蛍光画像G2から高輝度領域を抽出して高輝度領域画像G3を生成する領域抽出部24と、領域抽出部24により生成された高輝度領域画像G3と白色光画像G1とを切り換えてモニタ7に表示させる画像切替部25とを備えている。
画像分割部21は、白色光画像生成部20から生成された白色光画像G1を格子状に分割し、縦横に配列された複数の分割領域Rを生成するようになっている。本実施形態においては、画像分割部21は、例えば、図2に示されるように、予め設定された分割数(M×M)で、正方配列された複数の分割領域Rを生成するようになっている。
また、画像分割部21は、白色光画像G1の各分割領域Rの位置と、各分割領域Rと同一範囲の被写体Aを撮影している蛍光画像G2の小領域(図示略)の位置との対応関係を示す領域対応情報を記憶している。上述したように、白色光画像G1および蛍光画像G2は、同一の被写体Aから戻る光をダイクロイックミラー14により分岐して撮影することにより得られているので、重複した撮影範囲を含み、被写体Aの同一位置を撮影している画素の対応関係は、各撮像素子17,18の大きさや配置により定まっている。したがって、領域対応情報は、例えば、白色光画像G1の分割領域Rを構成する画素のアドレス範囲と、蛍光画像G2の小領域を構成する画素のアドレス範囲S5との対応表である。
そして、画像分割部21は、記憶している領域対応情報を用いて、蛍光画像G2の小領域毎に、該小領域の画素のアドレス範囲S5と、該小領域に対応する分割領域Rを構成する複数画素の階調値S3とを対応づけて出力するようになっている。
閾値設定部22は、画像分割部21から入力された各分割領域Rを構成する複数の画素の階調値S3を、対応する小領域毎に加算平均して平均階調値を算出するようになっている。
また、閾値設定部22は、蛍光画像G2の高輝度領域を抽出するための閾値を平均階調値の関数として記憶している。
この関数は、標準試料等を撮影して得られた白色光画像G1の平均階調値と、蛍光画像G2の高輝度領域を精度よく抽出するための閾値との関係から予め得られたものである。白色光画像G1が明るい領域においては蛍光強度も高くなる傾向があるため、この関数は、図3に示されるように、平均階調値が大きいほど大きくなる単調増加関数となっている。
閾値設定部22は、小領域毎に算出した平均階調値をこの関数に当てはめて閾値S4を求めるとともに、各小領域を構成する画素のアドレス範囲S5と対応づけて出力するようになっている。
領域抽出部24は、蛍光画像生成部23により生成された蛍光画像G2から、閾値設定部22から受け取った小領域毎の閾値S4を用いて、蛍光画像G2の高輝度領域を抽出するようになっている。
具体的には、領域抽出部24は、蛍光画像G2の各画素の階調値と、該画素が属する小領域に対して設定されている閾値S4とを比較するようになっている。領域抽出部24は、比較の結果、階調値が閾値S4より高い画素を、高輝度領域を構成する画素として抽出する。そして、階調値が閾値S4を超えた画素に値「1」、階調値が閾値S4以下の画素に値「0」を与えることにより、値「1」を有する画素の集合を高輝度領域画像G3として生成するようになっている。
このように構成された本実施形態に係る蛍光観察装置1の作用について以下に説明する。
本実施形態に係る蛍光観察装置1を用いて被写体Aである体内の生体組織の観察を行うには、体内に挿入部2を挿入して、挿入部2の先端面2aを被写体Aに対向させる。そして、光源3を作動させて、励起光および照明光を発生させ、カップリングレンズ10によってライトガイドファイバ11に入射させる。ライトガイドファイバ11内を導光されて挿入部2の先端に達した励起光および照明光は、挿入部2先端の照明光学系12によって拡散されて被写体Aに照射される。
被写体Aにおいては、内部に含まれている蛍光物質が励起光によって励起されることにより蛍光が発せられるとともに、被写体Aの表面において白色光が反射させられる。蛍光および照明光の反射光(白色光)は、被写体Aから挿入部2の先端面2aに戻り、その一部の観察範囲内から発せられた蛍光および白色光が対物レンズ13によって集光される。
対物レンズ13によって集光された蛍光および白色光はダイクロイックミラー14によって波長毎に分岐され、例えば400〜700nmの波長帯域の白色光は、集光レンズ15によって集光され、撮像素子17により白色光画像情報S1として取得される。
また、対物レンズ13によって集光された蛍光および白色光の内、ダイクロイックミラー14を反射した光、例えば700〜850nmの波長帯域の励起光および蛍光を含む光からは、励起光カットフィルタ19によって励起光(例えば740nm以下の光)が除去された後に、蛍光のみが集光レンズ16によって集光されて撮像素子18によって蛍光画像情報S2として取得される。
各撮像素子17,18によって取得された画像情報S1,S2は、画像処理部6に送られる。画像処理部6においては、白色光画像情報S1が白色光画像生成部20に入力されて白色光画像G1が生成される。一方、蛍光画像情報S2が蛍光画像生成部23に入力されて蛍光画像G2が生成される。
生成された白色光画像G1は、画像分割部21により正方配列されたM×M個の分割領域Rに分割される。そして、画像分割部21においては、記憶されている領域対応情報を用いて各分割領域Rを構成する複数の画素の階調値S3と、その分割領域Rに対応する蛍光画像G2の小領域の画素のアドレス範囲S5とが対応づけられて、閾値設定部22に出力される。
閾値設定部22においては、画像分割部21から入力されてきた白色光画像G1の階調値S3が小領域毎に加算平均されて、平均階調値が算出される。そして、算出された平均階調値が予め記憶されている関数に当てはめられて閾値S4が算出される。これにより、蛍光画像G2の小領域毎に閾値S4が設定される。そして、設定された閾値S4は、小領域を構成する画素のアドレス範囲S5と対応づけられて領域抽出部24に出力される。
領域抽出部24では、蛍光画像生成部23により生成された蛍光画像G2の各画素の階調値が、閾値設定部22から入力された閾値S4と比較され、閾値S4を超える階調値を有する画素が高輝度領域として抽出され、高輝度領域画像G3が生成される。
そして、生成された高輝度領域画像G3は、画像切替部25によって白色光画像G1と切り替えてモニタ7に表示される。モニタ7に表示された白色光画像G1を観察しながら、操作者が必要に応じて画像切替部25を操作することにより、高輝度領域画像G3をモニタ7に表示させて、蛍光画像G2の高輝度領域を白色光画像G1に対応づけて観察することができる。
この場合において、本実施形態に係る蛍光観察装置1によれば、小領域毎に設定された閾値S4を用いて蛍光画像G2の高輝度領域が抽出される。閾値S4は、蛍光画像G2の小領域に対応する白色光画像G1の分割領域Rの平均階調値が高ければ高いほど大きく設定されているので、被写体Aに蛍光物質が多く含まれている領域のみを高輝度領域として抽出することができる。
すなわち、生成された蛍光画像G2において、階調値の高い領域には、被写体Aに蛍光物質が多く含まれている領域と、励起光が強く照射されている領域とが含まれているが、病変部として抽出したいのは被写体Aに蛍光物質が多く含まれている領域のみである。また、白色光画像G1の階調値が高い領域は、照明ユニット4と被写体Aとの位置関係によって高強度の白色光が照射されている領域であり、照射される励起光の強度も高くなっている。
したがって、白色光画像G1の階調値が高い領域においては閾値S4を大きく設定することにより、高強度の励起光が照射されているために蛍光画像G2の階調値が高くなっている領域を高輝度領域として抽出され難くすることができる。
その結果、励起光の被写体Aへの照射距離や角度に依存することなく、真に蛍光物質が多く存在する領域を抽出することができる。例えば、生体組織内に発生した腫瘍部に特異的に集積する蛍光物質を投与して観察を行う場合、真に蛍光物質が多く存在する領域、すなわち、腫瘍部を精度よく特定することができるという利点がある。
また、本実施形態に係る蛍光観察装置1によれば、高輝度領域を抽出するための閾値S4を分割領域R毎にまとめて設定するので、画素毎に閾値S4を設定する場合に比べて演算量が少なくて済み、演算に要する時間を節約することができる。
また、白色光画像G1の階調値によって配光影響を取り除くので、蛍光画像G2を白色光画像G1によって除算することにより配光影響を取り除くことに比べ演算量を低減することができる。
なお、本実施形態においては、白色光画像G1の平均階調値の全域にわたって同一の関数を用いて閾値S4を設定したが、これに代えて、図4に示されるように、平均階調値に応じて適用する関数を異ならせてもよい。
例えば、白色光画像G1を撮影する撮像素子17の取り得る最小階調値C1より若干大きな第1の階調値C2と、最大階調値C3より若干小さい第2の階調値C4とを用いて、第1の階調値C2と第2の階調値C4の間においては上述した単調増加関数を用いることとしてもよい。そして、第1の階調値C2より小さい範囲および第2の階調値C4以上の階調値範囲においては、蛍光画像G2を撮影する撮像素子18の取り得る最大階調値より大きな値Dが閾値S4として設定されるようにすることが好ましい。
生成された白色光画像G1において、階調値が小さい範囲ではノイズが多く含まれており、最大階調値となっている領域では、飽和している可能性が高い。このため、これらの領域では適正な閾値S4を選択することが困難であり、これらの領域においては閾値S4を大きく設定することにより、信号の信頼性の低い領域が高輝度領域として抽出されてしまうことを防止することができる。
なお、最大階調値より大きな値Dを設定することに代えて、関数により算出される値より大きな任意の閾値S4を採用してもよい。
また、本実施形態においては、関数として図2に示されるような一次関数を例示したが、これに代えて、単調増加関数であれば、他の任意の関数を採用してもよい。また、関数として計算式を記憶しておいてもよいし、平均階調値と閾値S4との対応関係を示すマップを記憶しておいて閾値S4を設定することにしてもよい。
また、本実施形態においては、複数画素からなる分割領域R毎に、その平均階調値から閾値S4を設定することとしたが、画素毎に閾値S4を設定することにしてもよい。このようにすることで、さらに詳細に高輝度領域を抽出することができる。
また、本実施形態においては、白色光画像G1と蛍光画像G2の高輝度領域を白色光画像G1に対応づけてモニタ7に表示させ観察する際、並列してもよいし、重ねてもよい。
また、本実施形態においては、画像処理部6に画像分割部21を設けるとしたが、これがなくてもよい。したがって、分割領域R毎ではなく、画素毎に閾値S4を設定し、高輝度領域を算出してもよい。このようにすることで、精度よく高輝度領域を抽出することができる。
また、本実施形態においては分割領域Rに対応する蛍光画像の小領域の平均階調値を求めて、この平均階調値と分割領域Rの閾値S4とを比較することにより高輝度領域を抽出してもよい。このようにすることで高輝度領域の抽出の演算量を低減し、高速で表示を行うことができる。
次に、本発明の第2の実施形態に係る蛍光観察装置26について以下に説明する。
本実施形態の説明において、上述した第1の実施形態に係る蛍光観察装置1と構成を共通とする箇所には同一符号を付して説明を省略する。
本実施形態に係る蛍光観察装置26は、図5に示されるように、画像処理部6の白色光画像生成部20と画像分割部21の間に平均階調値算出部27を備えている。
平均階調値算出部27は、白色光画像生成部20により生成された白色光画像G1の全画素の階調値を加算平均して平均階調値S6を算出し、画像分割部21に出力するようになっている。
また、本実施形態においては、画像分割部21は、被写体Aの同一位置を撮影している白色光画像G1と蛍光画像G2の画素毎の対応関係を示す対応情報を記憶している。
そして、画像分割部21は、平均階調値算出部27から入力された白色光画像G1の平均階調値S6により、平均階調値S6が高いほど多い分割数で画像を分割するようになっている。
すなわち、画像分割部21は、分割数を設定すると、その分割数で白色光画像G1を分割した場合の各分割領域Rを構成する画素のアドレス範囲を決定するとともに、記憶されている対応情報から、分割領域Rのアドレス範囲に対応する蛍光画像G2の小領域のアドレス範囲S5を決定するようになっている。そして、画像分割部21では、決定された各小領域のアドレス範囲S5に、対応する分割領域Rを構成する各画素の階調値S3が対応づけられて出力されるようになっている。
画像分割部21は平均階調値S6の明るさによって決定された分割数によって、白色光画像G1を分割し、分割領域Rを生成するようになっている。
分割領域Rを構成する複数画素の階調値S3と、記憶している白色光画像G1と蛍光画像G2の対応情報を用いて分割された白色光画像G1の分割領域R毎に対応する蛍光画像G2の各小領域を構成する各画素のアドレス範囲S5とを対応づけて、出力するようになっている。
このように構成された本実施形態に係る蛍光観察装置26によれば、より詳細に被写体Aを観察したい場合は照明ユニット4と被写体Aを近接させたり対向させたりすることにより、詳細に観察することができる。
この場合、被写体Aと照明ユニット4の距離が近くなったり照明光の入射角度が深くなったりするため、白色光画像G1の平均階調値S6が高くなる。したがって、白色光画像G1の分割数を増やすことで分割領域R毎に詳細に高輝度領域を抽出することができる。
一方、大まかに被写体Aを観察したい場合は、照明ユニット4を被写体Aから離したり入射角度を浅くしたりするときであり、白色光画像G1の平均階調値S6が低くなる。したがって、白色光画像G1の分割数を減らすことで、演算回数が少なくてすみ、演算に要する時間を節約することができる。
次に、本発明の第3の実施形態に係る蛍光観察装置28について以下に説明する。
本実施形態の説明において、上述した第1の実施形態に係る蛍光観察装置1と構成を共通とする箇所には同一符号を付して説明を省略する。
本実施形態に係る蛍光観察装置28においては、図6に示されるように、観察対象部位に応じて交換できるように、光源3および画像処理部6に対して着脱可能な挿入部(着脱部品)2を備えている。挿入部2には、該挿入部の識別情報を記憶するICチップ29が設けられている。
また、挿入部2が取り付けられる光源3側にICチップ29内の識別情報を読み取る読取装置30と、識別情報と関数S7とを対応づけて記憶する記憶部31とが備えられている。
読取装置30は、挿入部2が取り付けられると、該挿入部2に設けられているICチップ29内の識別情報を読み取り、読み取った識別情報に対応する関数S7を記憶部31から取得して、閾値設定部22に出力するようになっている。
各挿入部2の撮像ユニット5は、それぞれの観察対象部位に適した観察を行えるように、異なる光学的特性を有しているので、各挿入部2が交換されると、白色光画像G1の階調値から閾値S4を設定するための関数S7も図7に示されるように、観察対象部位に応じて変化する。
したがって、本実施形態によれば、挿入部2のICチップ29に記憶された識別情報を読み取り、識別情報に対応する関数S7を記憶部31から読み出して閾値設定部22に出力することにより、閾値設定部22は、観察対象部位に適した閾値S4を設定することができる。
すなわち、光源3に対して挿入部2が交換されても、該挿入部2に最適の関数S7が設定され、定量性の高い高輝度領域を取得することができるという利点がある。
なお、本実施形態においては、光源3に記憶部31を備えて、関数S7を閾値設定部22に出力することとしたが、これに代えて、識別情報に対応づけた関数を閾値設定部22が記憶していて、読取装置30から送られてくる識別情報に基づいて対応する関数を選択することにしてもよい。
また、上記各実施形態においては、蛍光観察装置1,26,28として内視鏡を例示して説明したが、これに限定されるものではなく、他の任意の蛍光観察装置に適用することにしてもよい。
また、上記各実施形態においては、照明光の反射光として白色光を例示して説明したが、これに限定されるものではなく、励起光の反射光、自家蛍光等の他の任意の光を用いることにしてもよい。またダイクロイックミラー14や励起光カットフィルタ19の透過波長領域も、これに限定されるものではなく、他の任意の波長に適用することにしてもよい。
A 被写体
S1 白色光画像情報(戻り光画像)
S2 蛍光画像情報(蛍光画像)
S4 閾値
1,26,28 蛍光観察装置
2 挿入部(着脱部品)
3 光源(照明部)
4 照明ユニット(照明部)
17 撮像素子(戻り光撮像部)
18 撮像素子(蛍光撮像部)
21 画像分割部
22 閾値設定部
24 領域抽出部
27 平均階調値算出部
30 読取装置(識別情報読取部)
31 記憶部

Claims (5)

  1. 被写体に対し、励起光および照明光を照射する照明部と、
    該照明部からの励起光の照射により前記被写体において発生した蛍光を撮影し蛍光画像を取得する蛍光撮像部と、
    前記照明部からの照明光の照射により前記被写体から戻る戻り光を撮影し戻り光画像を取得する戻り光撮像部と、
    前記蛍光撮像部により取得された蛍光画像が、設定された閾値以上の階調値を有する高輝度領域を抽出する領域抽出部と、
    前記戻り光撮像部により取得された戻り光画像の階調値が高いほど前記閾値を高く設定する閾値設定部とを備える蛍光観察装置。
  2. 前記閾値設定部が、第1の階調値と第2の階調値との間において、前記戻り光画像の階調値が高いほど高くなる関数に従う前記閾値を設定し、前記第1の階調値より小さい階調値範囲および前記第2の階調値より大きい階調値範囲においては、前記関数により算出される値より大きな前記閾値を設定する請求項1に記載の蛍光観察装置。
  3. 前記閾値設定部が、前記戻り光画像を複数画素毎に分割して形成された前記分割領域毎に前記閾値を設定し、
    前記領域抽出部が、各前記分割領域に設定された前記閾値を用いて、各前記分割領域に対応する位置に配置される前記蛍光画像の各小領域について、前記高輝度領域を抽出する請求項1または請求項2に記載の蛍光観察装置。
  4. 前記戻り光画像を複数画素毎に分割して前記分割領域を形成するとともに、各該分割領域に対応する位置に配される前記蛍光画像の前記小領域を各前記分割領域に対応づける画像分割部と、
    前記戻り光画像内の複数の画素の平均階調値を算出する平均階調値算出部とを備え、
    前記画像分割部は、前記平均階調値算出部により算出された平均階調値が高いほど分割数を増やす請求項3に記載の蛍光観察装置。
  5. 観察条件を変更するために着脱される着脱部品を備え、
    該着脱部品に識別情報が記憶され、
    該着脱部品に記憶された識別情報を読み取る識別情報読取部と、
    前記識別情報と前記戻り光画像の階調値と前記閾値とを対応づけて記憶する記憶部と、
    前記記憶部により対応づけて記憶された前記閾値を設定する前記閾値設定部とを備える請求項1から請求項4のいずれかに記載の蛍光観察装置。
JP2010242608A 2010-10-28 2010-10-28 蛍光観察装置 Pending JP2012090889A (ja)

Priority Applications (5)

Application Number Priority Date Filing Date Title
JP2010242608A JP2012090889A (ja) 2010-10-28 2010-10-28 蛍光観察装置
EP11836106.2A EP2620092B1 (en) 2010-10-28 2011-10-19 Fluorescence observation device
CN201180051260.6A CN103200857B (zh) 2010-10-28 2011-10-19 荧光观察装置
PCT/JP2011/074058 WO2012056970A1 (ja) 2010-10-28 2011-10-19 蛍光観察装置
US13/869,210 US9313388B2 (en) 2010-10-28 2013-04-24 Fluorescence observation device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2010242608A JP2012090889A (ja) 2010-10-28 2010-10-28 蛍光観察装置

Publications (1)

Publication Number Publication Date
JP2012090889A true JP2012090889A (ja) 2012-05-17

Family

ID=45993683

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2010242608A Pending JP2012090889A (ja) 2010-10-28 2010-10-28 蛍光観察装置

Country Status (5)

Country Link
US (1) US9313388B2 (ja)
EP (1) EP2620092B1 (ja)
JP (1) JP2012090889A (ja)
CN (1) CN103200857B (ja)
WO (1) WO2012056970A1 (ja)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014023628A (ja) * 2012-07-25 2014-02-06 Olympus Corp 蛍光観察装置
CN103565393A (zh) * 2012-08-01 2014-02-12 奥林巴斯株式会社 荧光观察装置和荧光观察系统
JP2014171535A (ja) * 2013-03-06 2014-09-22 Olympus Medical Systems Corp 画像処理装置
WO2019225691A1 (ja) * 2018-05-23 2019-11-28 オリンパス株式会社 内視鏡画像処理装置及び内視鏡システム

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5592715B2 (ja) * 2010-07-02 2014-09-17 オリンパス株式会社 画像処理装置および画像処理方法
JP6042808B2 (ja) * 2011-06-03 2016-12-14 オリンパス株式会社 蛍光観察装置および蛍光観察装置の作動方法
EP3312607B1 (en) * 2015-06-18 2019-07-24 Konica Minolta, Inc. Objective biological substance analysis device, analysis system, analysis method, and analysis program
WO2017221336A1 (ja) * 2016-06-21 2017-12-28 オリンパス株式会社 内視鏡システム、画像処理装置、画像処理方法およびプログラム
WO2020121373A1 (ja) * 2018-12-10 2020-06-18 オリンパス株式会社 画像記録装置
JP7281308B2 (ja) * 2019-03-07 2023-05-25 ソニー・オリンパスメディカルソリューションズ株式会社 医療用画像処理装置及び医療用観察システム

Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS62247232A (ja) * 1986-04-21 1987-10-28 Agency Of Ind Science & Technol 蛍光測定装置
JP2001204683A (ja) * 2001-02-01 2001-07-31 Olympus Optical Co Ltd 蛍光観察装置
JP2002028125A (ja) * 2000-07-14 2002-01-29 Fuji Photo Film Co Ltd 蛍光内視鏡装置
JP2002119463A (ja) * 2000-10-13 2002-04-23 Fuji Photo Film Co Ltd 蛍光画像保存装置
JP2003024268A (ja) * 2001-05-07 2003-01-28 Fuji Photo Film Co Ltd 蛍光画像表示装置
JP2003290130A (ja) * 2002-04-05 2003-10-14 Pentax Corp 自家蛍光を利用した診断システム
JP2006061435A (ja) * 2004-08-27 2006-03-09 Pentax Corp 電子内視鏡装置
JP2006061683A (ja) * 2004-07-30 2006-03-09 Olympus Corp 内視鏡装置
JP2006314581A (ja) * 2005-05-13 2006-11-24 Pentax Corp 内視鏡システム
JP2008154846A (ja) * 2006-12-25 2008-07-10 Olympus Corp 蛍光内視鏡および蛍光測定方法
JP2010005095A (ja) * 2008-06-26 2010-01-14 Fujinon Corp 内視鏡装置における距離情報取得方法および内視鏡装置
JP2010200883A (ja) * 2009-03-02 2010-09-16 Fujifilm Corp 内視鏡画像処理装置および方法ならびにプログラム
JP2010227256A (ja) * 2009-03-26 2010-10-14 Olympus Corp 画像処理装置、画像処理プログラムおよび画像処理方法
JP2010227255A (ja) * 2009-03-26 2010-10-14 Olympus Corp 画像処理装置、撮像装置、画像処理プログラムおよび画像処理方法

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5749830A (en) * 1993-12-03 1998-05-12 Olympus Optical Co., Ltd. Fluorescent endoscope apparatus
JP4199510B2 (ja) * 2002-09-30 2008-12-17 Hoya株式会社 診断補助用装置
JP4587811B2 (ja) 2005-01-11 2010-11-24 オリンパス株式会社 蛍光観察内視鏡装置
JP4155280B2 (ja) * 2005-05-18 2008-09-24 コニカミノルタオプト株式会社 撮像装置
JP5257891B2 (ja) * 2007-12-05 2013-08-07 富士フイルム株式会社 画像処理システムおよびプログラム

Patent Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS62247232A (ja) * 1986-04-21 1987-10-28 Agency Of Ind Science & Technol 蛍光測定装置
JP2002028125A (ja) * 2000-07-14 2002-01-29 Fuji Photo Film Co Ltd 蛍光内視鏡装置
JP2002119463A (ja) * 2000-10-13 2002-04-23 Fuji Photo Film Co Ltd 蛍光画像保存装置
JP2001204683A (ja) * 2001-02-01 2001-07-31 Olympus Optical Co Ltd 蛍光観察装置
JP2003024268A (ja) * 2001-05-07 2003-01-28 Fuji Photo Film Co Ltd 蛍光画像表示装置
JP2003290130A (ja) * 2002-04-05 2003-10-14 Pentax Corp 自家蛍光を利用した診断システム
JP2006061683A (ja) * 2004-07-30 2006-03-09 Olympus Corp 内視鏡装置
JP2006061435A (ja) * 2004-08-27 2006-03-09 Pentax Corp 電子内視鏡装置
JP2006314581A (ja) * 2005-05-13 2006-11-24 Pentax Corp 内視鏡システム
JP2008154846A (ja) * 2006-12-25 2008-07-10 Olympus Corp 蛍光内視鏡および蛍光測定方法
JP2010005095A (ja) * 2008-06-26 2010-01-14 Fujinon Corp 内視鏡装置における距離情報取得方法および内視鏡装置
JP2010200883A (ja) * 2009-03-02 2010-09-16 Fujifilm Corp 内視鏡画像処理装置および方法ならびにプログラム
JP2010227256A (ja) * 2009-03-26 2010-10-14 Olympus Corp 画像処理装置、画像処理プログラムおよび画像処理方法
JP2010227255A (ja) * 2009-03-26 2010-10-14 Olympus Corp 画像処理装置、撮像装置、画像処理プログラムおよび画像処理方法

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014023628A (ja) * 2012-07-25 2014-02-06 Olympus Corp 蛍光観察装置
CN103565393A (zh) * 2012-08-01 2014-02-12 奥林巴斯株式会社 荧光观察装置和荧光观察系统
JP2014171535A (ja) * 2013-03-06 2014-09-22 Olympus Medical Systems Corp 画像処理装置
WO2019225691A1 (ja) * 2018-05-23 2019-11-28 オリンパス株式会社 内視鏡画像処理装置及び内視鏡システム
US11265483B2 (en) 2018-05-23 2022-03-01 Olympus Corporation Endoscopic image processing apparatus and endoscope system

Also Published As

Publication number Publication date
CN103200857B (zh) 2016-02-10
CN103200857A (zh) 2013-07-10
US20130235258A1 (en) 2013-09-12
US9313388B2 (en) 2016-04-12
EP2620092A4 (en) 2013-11-20
EP2620092A1 (en) 2013-07-31
WO2012056970A1 (ja) 2012-05-03
EP2620092B1 (en) 2015-08-12

Similar Documents

Publication Publication Date Title
WO2012056970A1 (ja) 蛍光観察装置
US9332909B2 (en) Fluoroscopy apparatus
EP2520211B1 (en) Fluorescence endoscope device
JP5816486B2 (ja) 蛍光観察装置および蛍光観察システム並びに蛍光観察装置の蛍光画像処理方法
US9052286B2 (en) Fluorescence endoscope apparatus
US9392942B2 (en) Fluoroscopy apparatus and fluoroscopy system
US9532719B2 (en) Fluorescence endoscope apparatus
EP2520212B1 (en) Fluorescence endoscope device
JP4895750B2 (ja) 内視鏡プロセッサ、自家蛍光画像表示プログラム、及び内視鏡システム
WO2013100030A1 (ja) 蛍光観察装置、蛍光観察方法および蛍光観察装置の作動方法
JP2012239816A (ja) 内視鏡システム及び内視鏡診断支援方法
US20140085686A1 (en) Fluorescence observation device
US9516235B2 (en) Fluorescence observation apparatus and fluorescence observation method
JP5346635B2 (ja) 蛍光観察装置
JP2015231576A (ja) 内視鏡システム、内視鏡システムのプロセッサ装置、及び画像処理方法
JP3946985B2 (ja) 蛍光画像撮像装置
JP2003339622A (ja) 蛍光判定方法および装置

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20131004

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20140603

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140804

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20141007

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20150317