JP6120770B2 - 分光画像取得装置 - Google Patents
分光画像取得装置 Download PDFInfo
- Publication number
- JP6120770B2 JP6120770B2 JP2013522559A JP2013522559A JP6120770B2 JP 6120770 B2 JP6120770 B2 JP 6120770B2 JP 2013522559 A JP2013522559 A JP 2013522559A JP 2013522559 A JP2013522559 A JP 2013522559A JP 6120770 B2 JP6120770 B2 JP 6120770B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- control
- spectral
- light
- variable
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000003595 spectral effect Effects 0.000 title claims description 191
- 230000003287 optical effect Effects 0.000 claims description 92
- 239000000758 substrate Substances 0.000 claims description 61
- 230000005540 biological transmission Effects 0.000 claims description 59
- 238000012545 processing Methods 0.000 claims description 21
- 238000001514 detection method Methods 0.000 claims description 14
- 238000003702 image correction Methods 0.000 claims description 13
- 238000004611 spectroscopical analysis Methods 0.000 claims description 8
- 238000010586 diagram Methods 0.000 description 25
- 230000004048 modification Effects 0.000 description 24
- 238000012986 modification Methods 0.000 description 24
- 238000003384 imaging method Methods 0.000 description 19
- 238000001228 spectrum Methods 0.000 description 19
- 238000002834 transmittance Methods 0.000 description 15
- 238000005286 illumination Methods 0.000 description 10
- 238000000034 method Methods 0.000 description 7
- 230000008859 change Effects 0.000 description 6
- 210000001519 tissue Anatomy 0.000 description 6
- 238000012937 correction Methods 0.000 description 5
- 230000000694 effects Effects 0.000 description 5
- 230000005284 excitation Effects 0.000 description 4
- 230000008569 process Effects 0.000 description 4
- BJQHLKABXJIVAM-UHFFFAOYSA-N bis(2-ethylhexyl) phthalate Chemical compound CCCCC(CC)COC(=O)C1=CC=CC=C1C(=O)OCC(CC)CCCC BJQHLKABXJIVAM-UHFFFAOYSA-N 0.000 description 3
- 238000006243 chemical reaction Methods 0.000 description 3
- 230000035699 permeability Effects 0.000 description 3
- 102000001554 Hemoglobins Human genes 0.000 description 2
- 108010054147 Hemoglobins Proteins 0.000 description 2
- 230000002411 adverse Effects 0.000 description 2
- 210000004204 blood vessel Anatomy 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- MOFVSTNWEDAEEK-UHFFFAOYSA-M indocyanine green Chemical compound [Na+].[O-]S(=O)(=O)CCCCN1C2=CC=C3C=CC=CC3=C2C(C)(C)C1=CC=CC=CC=CC1=[N+](CCCCS([O-])(=O)=O)C2=CC=C(C=CC=C3)C3=C2C1(C)C MOFVSTNWEDAEEK-UHFFFAOYSA-M 0.000 description 2
- 229960004657 indocyanine green Drugs 0.000 description 2
- 230000003902 lesion Effects 0.000 description 2
- 206010028980 Neoplasm Diseases 0.000 description 1
- 239000008280 blood Substances 0.000 description 1
- 210000004369 blood Anatomy 0.000 description 1
- 201000011510 cancer Diseases 0.000 description 1
- 238000003745 diagnosis Methods 0.000 description 1
- 238000002073 fluorescence micrograph Methods 0.000 description 1
- 210000002429 large intestine Anatomy 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 210000004877 mucosa Anatomy 0.000 description 1
- 239000000126 substance Substances 0.000 description 1
- 208000024891 symptom Diseases 0.000 description 1
- 229910052724 xenon Inorganic materials 0.000 description 1
- FHNFHKCVQCLJFQ-UHFFFAOYSA-N xenon atom Chemical compound [Xe] FHNFHKCVQCLJFQ-UHFFFAOYSA-N 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
- G01J3/00—Spectrometry; Spectrophotometry; Monochromators; Measuring colours
- G01J3/28—Investigating the spectrum
- G01J3/2823—Imaging spectrometer
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
- G01J3/00—Spectrometry; Spectrophotometry; Monochromators; Measuring colours
- G01J3/12—Generating the spectrum; Monochromators
- G01J3/26—Generating the spectrum; Monochromators using multiple reflection, e.g. Fabry-Perot interferometer, variable interference filters
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
- G01J3/00—Spectrometry; Spectrophotometry; Monochromators; Measuring colours
- G01J3/28—Investigating the spectrum
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
- G01N21/62—Systems in which the material investigated is excited whereby it emits light or causes a change in wavelength of the incident light
- G01N21/63—Systems in which the material investigated is excited whereby it emits light or causes a change in wavelength of the incident light optically excited
- G01N21/64—Fluorescence; Phosphorescence
- G01N21/645—Specially adapted constructive features of fluorimeters
- G01N21/6456—Spatial resolved fluorescence measurements; Imaging
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
- G01J3/00—Spectrometry; Spectrophotometry; Monochromators; Measuring colours
- G01J3/28—Investigating the spectrum
- G01J2003/283—Investigating the spectrum computer-interfaced
- G01J2003/284—Spectral construction
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
- G01N21/62—Systems in which the material investigated is excited whereby it emits light or causes a change in wavelength of the incident light
- G01N21/63—Systems in which the material investigated is excited whereby it emits light or causes a change in wavelength of the incident light optically excited
- G01N21/64—Fluorescence; Phosphorescence
- G01N2021/6417—Spectrofluorimetric devices
- G01N2021/6423—Spectral mapping, video display
Landscapes
- Physics & Mathematics (AREA)
- Spectroscopy & Molecular Physics (AREA)
- General Physics & Mathematics (AREA)
- Health & Medical Sciences (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Life Sciences & Earth Sciences (AREA)
- Chemical & Material Sciences (AREA)
- Analytical Chemistry (AREA)
- Biochemistry (AREA)
- General Health & Medical Sciences (AREA)
- Immunology (AREA)
- Pathology (AREA)
- Endoscopes (AREA)
- Instruments For Viewing The Inside Of Hollow Bodies (AREA)
- Investigating Or Analysing Materials By Optical Means (AREA)
- Spectrometry And Color Measurement (AREA)
Description
例えば、がんなど微細病変の早期発見や術前の病変範囲の精密診断などのために、通常光観察とは異なる光の波長制御を行うことで、組織の特定の構造を強調して表示させて行う、いわゆる「特殊光観察」が広く行なわれている。
エタロン型の分光素子は、光透過物質からなる一対の基板上に反射膜を備えた分光透過率可変素子であり、反射膜を設けた基板の間隔に応じて特定の波長の光を透過させることができる。
本発明の分光画像取得装置は、被写体からの光の光路上に対向配置された一対の光学基板を有し、前記一対の光学基板同士の面間隔及び角度の少なくともいずれかを変えることにより分光特性が可変となる可変分光素子と、前記被写体からの光を構成する波長帯域内において前記可変分光素子が透過させる光の波長を設定するための透過波長設定部と、前記透過波長設定部を介して設定された波長の近傍に透過ピークが存在するような分光特性に前記可変分光素子を制御する第1の制御と、前記被写体からの光を構成する波長帯域内に透過ピークを存在させず、前記第1の制御をしたときに前記可変分光素子を透過する、設定された所望波長以外の波長の光と略同じ波長帯域にわたる略同量の光が、前記可変分光素子を透過する分光特性に前記可変分光素子を制御する第2の制御とを、前記一対の光学基板同士の面間隔又は角度を変化させることにより切替える可変分光素子制御部と、前記可変分光素子を透過した光による画像を取得する画像取得部と、前記可変分光素子制御部が第1の制御を行なっているときに前記画像取得部が取得した、前記可変分光素子を透過する、設定された所望波長の光による成分と所望波長以外の波長の光による成分とを含んでなる第1の画像と、前記可変分光素子制御部が第2の制御を行なっているときに前記画像取得部が取得した、前記可変分光素子を透過する、前記第1の画像における所望波長以外の波長の光と略同様の成分を略同量含んでなる第2の画像との差分を取得する画像補正処理部と、を備えている。
しかるに、本件出願人は、エタロン型の分光素子を構成する一対の光学基板同士の面間隔及び角度と、漏れ光との関係について、調査、分析を行った。その結果、一対の光学基板同士の面間隔及び角度を、透過ピークを存在させない距離及び角度にしたときと、所定の透過ピークを存在させた距離及び角度にしたときとで、略同じ波長帯域にわたって略同量の漏れ光が生じることが判明した。
そこで、本件出願人は、可変分光素子制御部が、透過波長設定部を介して設定された波長の近傍に透過ピークが存在するような分光特性に前記可変分光素子を制御する第1の制御と、被写体からの光を構成する波長帯域内に透過ピークを存在させず、前記第1の制御をしたときに前記可変分光素子を透過する、設定された所望波長以外の波長の光と略同じ波長帯域にわたる略同量の光が、前記可変分光素子を透過する分光特性に前記可変分光素子を制御する第2の制御とを切替え、画像補正処理部が、可変分光素子制御部が第1の制御を行なっているときに画像取得部が取得した、前記可変分光素子を透過する、設定された所望波長の光による成分と所望波長以外の波長の光による成分とを含んでなる第1の画像と、可変分光素子制御部が第2の制御を行なっているときに画像取得部が取得した、前記可変分光素子を透過する、前記第1の画像における所望波長以外の波長の光と略同様の成分を略同量含んでなる第2の画像との差分を取得するようにすることで、分光画像を補正する本発明を着想するに至った。
本発明の分光画像取得装置及び分光画像取得方法によれば、漏れ光の影響を極力低減し高S/Nで所望の波長の分光画像を取得できる。
図1の分光画像取得装置は、可変分光素子1と、透過波長設定部2と、可変分光素子制御部3と、画像取得部4と、画像補正処理部5を有している。なお、図1中、10は生体組織等の被写体である。
透過波長設定部2は、被写体10からの光を構成する波長帯域内において可変分光素子1が透過させる光の波長を、操作者が例えば画面入力等により設定することができるように構成されている。
詳しくは、第1の制御において、可変分光素子制御部3は、可変分光素子1の分光特性が透過波長設定部2を介して設定された波長の近傍に透過ピークが存在するような分光特性となるように、一対の光学基板同士の角度を平行に保持した状態で面間隔を制御する。
また、第2の制御において、可変分光素子制御部3は、可変分光素子1の分光特性が被写体10からの光を構成する波長帯域内に透過ピークを存在させない分光特性となるように、一対の光学基板同士の面間隔及び角度の少なくともいずれかを制御する。
可変分光素子制御部3は、可変分光素子1の分光特性が透過波長設定部2を介して設定された波長の近傍に透過ピークが存在するような分光特性となるように、一対の光学基板同士の角度を平行に保持した状態で面間隔を制御する第1の制御と、可変分光素子1の分光特性が被写体10からの光を構成する波長帯域内に透過ピークを存在させない分光特性となるように、一対の光学基板同士の面間隔及び角度の少なくともいずれかを制御する第2の制御とを、所定のタイミングで切替えて行う。
ここで、可変分光素子制御部3が第1の制御を行っているときには、可変分光素子1は、透過波長設定部2を介して設定された波長の近傍に透過ピークが存在するような分光特性となるように、一対の光学基板同士の角度を平行に保持した状態で面間隔が所定の距離に保持されている。この状態の可変分光素子1からは、透過波長設定部2を介して設定された波長の光が透過するとともに、それ以外の波長の漏れ光が透過する。
また、可変分光素子制御部3が第2の制御を行っているときには、可変分光素子1は、被写体10からの光を構成する波長帯域内に透過ピークを存在させない分光特性となるように、一対の光学基板同士の面間隔及び角度が保持されている。この状態の可変分光素子1からは、可変分光素子制御部3が第1の制御を行っているときと略同様の漏れ光が略同量透過する。
なお、可変分光素子制御部3が第1の制御を行なっているときに画像取得部4が取得した画像を第1の画像(分光画像)、可変分光素子制御部3が第2の制御を行なっているときに画像取得部4が取得した画像を第2の画像(参照画像)と呼ぶこととする。
第1の画像には、透過波長設定部2を介して設定された所望波長の光による成分と、それ以外の波長の漏れ光による成分が含まれている。また、第2の画像には、第1の画像における漏れ光と略同様の成分が略同量含まれている。
画像補正処理部5は、第1の画像と第2の画像との差分を取得する。取得した差分画像には、漏れ光の成分が略除去される。
あるいは、図1の分光画像取得装置においては、可変分光素子制御部3は、第2の制御において、一対の光学基板同士の面間隔を、被写体10からの光の波長帯域内での可変分光素子1の透過ピークが消失する、所定の距離に広げてもよい。
あるいは、図1の分光画像取得装置においては、可変分光素子制御部3は、第2の制御において、一対の光学基板同士の面間隔及び角度を、被写体10からの光の波長帯域を外れた所定の波長域に可変分光素子1の透過ピークがシフトする、所定の距離及び角度に制御してもよい。
例えば、内視鏡を用いた特殊光観察においては、通常、1秒間に数十枚の画像を撮像する。ここで、被写体10の動きが遅い場合、複数枚の画像については、被写体10の位置に変化がない。観察する被写体のフレームレートを高くするためには、被写体の位置に変化のない複数枚の画像中、第1の画像(分光画像)は極力枚数が多い方が望ましい一方、第2の画像(参照画像)は一枚で足りる。
このようにすれば、高フレームレート、高効率で、高S/Nで所望の波長の分光画像が得られる。
このようにすれば、動きの速い被写体10に対しても、確実に高S/Nで所望の波長の分光画像が得られる。
このようにすれば、多様な観察用途に対応して、効率良く、高S/Nで所望の波長の分光画像が得られる。
図2は本発明の各実施例の分光画像取得装置を用いた内視鏡装置における共通の構成を示すブロック図である。
撮像部14は、レンズ14aと、可変分光素子14bと、撮像素子14cを備えている。
撮像素子14cは、例えば、CCDやCMOSなどで構成され、可変分光素子14bを透過した光による画像を撮像する。
なお、エタロン型の可変分光素子とは、光の干渉を利用する分光素子であり、対向するように配置された一対のミラー面の間隔を変化させることによって、透過又は反射し得る光の波長を変化させることができる分光素子である。
画像生成部15aは、撮像素子14cが撮像した画像信号に対して所定の画像変換処理を行い、画像を生成する。
そして、図2の分光画像取得装置では、撮像素子14c及び画像生成部15aが、図1の分光画像取得装置における画像取得部4に相当する。
画像演算部15dは、図1の分光画像取得装置における画像補正処理部5に相当し、分光画像メモリ15bに記憶されている所定の第1の画像と、参照画像メモリ15cに記憶されている所定の第2の画像との差分を演算する。
図3は本発明の実施例1の分光画像取得装置を備えた内視鏡装置を用いた特殊光観察における光学特性の一例を示す説明図で、(a)は照明光のスペクトルを示すグラフ、(b)は第1の制御での可変分光素子を構成する一対の光学基板同士の面間隔及び角度を示す図、(c)は第1の制御での可変分光素子の分光透過率を示すグラフ、(d)は第2の制御での可変分光素子を構成する一対の光学基板同士の面間隔及び角度を示す図、(e)は第2の制御での可変分光素子の分光透過率を示すグラフ、(f)は画像補正処理部が補正処理後の分光画像のスペクトルを示すグラフである。
なお、上述したように、図2に示した基本構成は、以下の各実施例において共通である。
可変分光素子制御部13は、第1の制御において、図3(b)、図3(c)に示すように、可変分光素子14bが、生体組織10で反射された400nm〜700nmの可視波長帯域内における所定の狭帯域に例えば20nm等所定の半値幅で透過ピークを持つ分光特性となるように、可変分光素子14bにおける一対の光学基板14b1,14b2同士を平行に保持しながら所定の距離に制御する。撮像素子14cは、可変分光素子制御部13により第1の制御が行なわれている可変分光素子14bを透過した光による画像を撮像する。画像生成部15aは、撮像素子14cが撮像した信号に対して所定の画像変換処理を行い、第1の画像を生成する。
画像演算部15dは、可変分光素子制御部13により第1の制御が行われているときに撮像素子14c及び画像生成部15aが取得した第1の画像における各画素の階調値と、可変分光素子制御部13により第1の制御が行われているときに撮像素子14c及び画像生成部15aが取得した第2の画像における各画素の階調値との差分を演算する。
第2の制御のときに得られた第2の画像における漏れ光の階調値は、第1の制御のときに得られた第1の画像における漏れ光の階調値と略同じである。このため、2つの画像の階調値の差分を取ると、第1の画像から漏れ光の階調値が除去される。
図4は実施例1の変形例1にかかる分光画像取得装置を備えた内視鏡装置を用いた特殊光観察における光学特性の一例を示す説明図で、(a)は照明光のスペクトルを示すグラフ、(b)は第1の制御での可変分光素子を構成する一対の光学基板同士の面間隔及び角度を示す図、(c)は第1の制御での可変分光素子の分光透過率を示すグラフ、(d)は第2の制御での可変分光素子を構成する一対の光学基板同士の面間隔及び角度を示す図、(e)は第2の制御での可変分光素子の分光透過率を示すグラフである。
被写体10からの光の波長帯域内において可変分光素子14bの透過ピークを消失させるには、一対の光学基板14b1,14b2同士を平行に保持しながら、一対の光学基板14b1,14b2同士の面間隔を被写体10からの光を構成する波長帯域(ここでは、400nm〜700nmの可視波長帯域)でのコヒーレンス長(可干渉距離)よりも大きく離せばよい。被写体10からの光は、様々な位相の光からなり、位相が揃ってなくコヒーレンス長が短い。そして、一対の光学基板14b1,14b2同士の面間隔を数μmから数10μm程度離すと、400nm〜700nmの可視波長帯域の光が共振できなくなり、透過ピークが存在しなくなる。
このため、可変分光素子制御部13による第2の制御を変形例1のようにしても、可変分光素子14bに入射した光のうち、漏れ光以外の光を遮光することができる。これにより、撮像素子14c及び画像生成部15aが取得する第2の画像は、漏れ光の成分のみの画像となり、画像演算部15dが、第1の画像と第2の画像とにおける各画素の階調値の差分を演算したときに、第1の画像から漏れ光の階調値が除去される。
その他の構成及び作用効果は、実施例1の分光画像取得装置と略同じである。
図5は実施例1の変形例2にかかる分光画像取得装置を備えた内視鏡装置を用いた特殊光観察における光学特性の一例を示す説明図で、(a)は照明光のスペクトルを示すグラフ、(b)は第2の制御での可変分光素子を構成する一対の光学基板同士の面間隔及び角度を示す図、(c)は第2の制御での可変分光素子の分光透過率を示すグラフである。
このため、可変分光素子制御部13による第2の制御を変形例2のようにしても、可変分光素子14bに入射した光のうち、漏れ光以外の光を遮光することができる。これにより、撮像素子14c及び画像生成部15aが取得する第2の画像は、漏れ光の成分のみの画像となり、画像演算部15dが、第1の画像と第2の画像とにおける各画素の階調値の差分を演算したときに、第1の画像から漏れ光の階調値が除去される。
その他の構成及び作用効果は、実施例1の分光画像取得装置と略同じである。
図6は実施例1の変形例3にかかる分光画像取得装置を備えた内視鏡装置を用いた特殊光観察における光学特性の一例を示す説明図で、(a)は照明光のスペクトルを示すグラフ、(b)は第2の制御での可変分光素子を構成する一対の光学基板同士の面間隔及び角度を示す図、(c)は第2の制御での可変分光素子の分光透過率を示すグラフである。
このため、可変分光素子制御部13による第2の制御を変形例3のようにしても、可変分光素子14bに入射した光のうち、漏れ光以外の光を遮光することができる。これにより、撮像素子14c及び画像生成部15aが取得する第2の画像は、漏れ光の成分のみの画像となり、画像演算部15dが、第1の画像と第2の画像とにおける各画素の階調値の差分を演算したときに、第1の画像から漏れ光の階調値が除去される。
その他の構成及び作用効果は、実施例1の分光画像取得装置と略同じである。
図7は実施例1の変形例4にかかる分光画像取得装置を備えた内視鏡装置を用いた特殊光観察における光学特性の一例を示す説明図で、(a)は照明光のスペクトルを示すグラフ、(b)は第2の制御での可変分光素子を構成する一対の光学基板同士の面間隔及び角度を示す図、(c)は第2の制御での可変分光素子の分光透過率を示すグラフである。
このため、可変分光素子制御部13による第2の制御を変形例4のようにしても、可変分光素子14bに入射した光のうち、漏れ光以外の光を遮光することができる。これにより、撮像素子14c及び画像生成部15aが取得する第2の画像は、漏れ光の成分のみの画像となり、画像演算部15dが、第1の画像と第2の画像とにおける各画素の階調値の差分を演算したときに、第1の画像から漏れ光の階調値が除去される。
その他の構成及び作用効果は、実施例1の分光画像取得装置と略同じである。
例えば、夫々異なる波長による複数の狭帯域画像の取得を所望する場合には、撮像素子14c及び画像生成部15aが、夫々の狭帯域画像を第1の画像として取得した後に第2の画像(参照画像)を取得するような、夫々異なる波長による複数の狭帯域画像の一セットと、参照画像とを対にして取得するタイミングで、可変分光素子制御部13が第1の制御と第2の制御とを切替えて行うようにしてもよい。
また、例えば、被写体10に応じて、第1の画像(狭帯域画像)と第2の画像(参照画像)とを取得する頻度を異ならせるようにしてもよい。例えば、大腸観察のように動きが比較的速い被写体を観察する場合には、撮像素子14c及び画像生成部15aが、第1の画像(狭帯域画像)と第2の画像(参照画像)を交互に取得し、口腔内観察のように動きが比較的遅い被写体を観察する場合には、複数枚の第1の画像(狭帯域画像)を取得する毎に1枚の第2の画像(参照画像)を取得するようなタイミングで、可変分光素子制御部13が第1の制御と第2の制御とを切替えて行うようにしてもよい。
また、例示したこれらの第2の画像(参照画像)を取得するタイミングは、装置内に組み込まれたものでもよいし、あるいは操作者が第2の画像(参照画像)を取得するタイミングを設定できるように、撮像素子14c及び画像生成部15aが第1の画像(分光画像)と第2の画像(参照画像)を取得するタイミングを設定するための、図1の例で説明した第2画像取得タイミング設定部7を入力部12に備え、可変分光素子制御部13が、第2画像取得タイミング設定部を介して設定されたタイミングに同期して、第1の制御と第2の制御とを切替えるようにしてもよい。
図8は本発明の実施例2の分光画像取得装置を用いた内視鏡装置の全体構成を示すブロック図である。
画像ずれ量検出部15eは、図1の画像ずれ量検出部6に相当し、第2の画像(参照画像)を取得後に画像取得部(撮像素子14c及び画像生成部15a)が最初に取得した第1の画像を基準画像とし、基準画像中の被写体10に対する、基準画像を取得後に画像取得部が取得した第1の画像中の被写体10の位置ずれ量を検出するように構成されている。具体的には、例えば、画像中における被写体10のエッジを検出し、そのエッジを検出した座標の位置ずれ量を画素数で検出する、あるいは、画像の所定座標上における階調変化量を検出する等、公知の方法で行うように構成されている。
また、可変分光素子制御部13は、画像ずれ量検出部15eが検出した被写体10の位置ずれ量が所定の閾値(例えば、1〜数画素程度のエッジのずれ量)を超えたときに、第1の制御を第2の制御に切替え、画像取得部(撮像素子14c及び画像生成部15a)が第2の画像を取得後に、第2の制御を第1の制御に切替えるように構成されている。
一方、第1の画像を高いフレームレートで取得するためには、第2の画像を取得する回数は極力少なくするのが望ましい。例えば、上述したように、被写体10の動きが遅い場合、複数枚の画像については、被写体10の位置に変化がない。観察する被写体のフレームレートを高くするためには、被写体の位置に変化のない複数枚の画像中、第1の画像(分光画像)は極力枚数が多い方が望ましい一方、第2の画像(参照画像)は一枚で足りる。
また、例えば、観察途中で被写体の動きの速さが変化するような場合には、効率よく第2の画像を取得することができず、第1の画像と、第2の画像とで、画像中の被写体10の位置にズレが生じたり、必要以上に第2の画像を取得することになり易く、分光画像における漏れ光の除去精度が低下したり、フレームレートが低下し易い。
しかるに、実施例2の分光画像取得装置によれば、被写体の位置が画像演算部15dでの第1の画像と第2の画像との差分の演算に悪影響を与える程度移動したときにのみ第2の画像を一枚取得し、それ以外のときは第1の画像を取得するようにすることができるので、被写体の動きの速さ如何にかかわらず、高精度に漏れ光が除去された分光画像を高フレームレートで取得することができる。
一方、第1の画像(分光画像)と第2の画像(参照画像)の撮像条件(例えば、露光時間等)が異なる場合には、画像補正処理部としての画像演算部15dは、第1の画像(分光画像)と第2の画像(参照画像)とが略同じ撮像条件で取得された画像になるように、第2の画像(参照画像)に対し所定の補正演算処理を行なった後に、差分演算を行うとよい。
所定の補正演算処理としては、例えば、第1の画像(分光画像)を撮像するときの露光時間が20msec、第2の画像(参照画像)を撮像するときの露光時間が10msecの場合、画像生成部15aにより生成された第2の画像(参照画像)の各画素の階調値を2倍した補正第2画像(補正参照画像)を生成するようにするとよい。
その後に、第1の画像(分光画像)と補正第2画像との差分を取得する。
なお、その場合の補正演算処理時には、リードアウトノイズ(撮像素子14cから電気信号を読み込む際に生ずるノイズ)のような露光時間の長短に関係のない固定ノイズ分の階調値はそのままにして(即ち、上記の例では2倍しないで)、補正することが望ましい。
また、本発明の分光画像取得装置は、内視鏡以外にも、顕微鏡や、監視カメラ等の分光観察を行う観察装置においても適用可能である。
2 透過波長設定部
3 可変分光素子制御部
4 画像取得部
5 画像補正演算部
6 画像ずれ量検出部
7 第2画像取得タイミング設定部
10 被写体
11 光源部
11a 光源
11b ライトガイド
12 入力部
13 可変分光素子制御部
14 撮像部
14a レンズ
14b 可変分光素子(エタロン型分光素子)
14b1、14b2 光学基板
14c 撮像素子
15 画像処理部
15a 画像生成部
15b 分光画像メモリ
15c 参照画像メモリ
15d 画像演算部
15e 画像ずれ量検出部
16 表示部
Claims (7)
- 被写体からの光の光路上に対向配置された一対の光学基板を有し、前記一対の光学基板同士の面間隔及び角度の少なくともいずれかを変えることにより分光特性が可変となる可変分光素子と、
前記被写体からの光を構成する波長帯域内において前記可変分光素子が透過させる光の波長を設定するための透過波長設定部と、
前記透過波長設定部を介して設定された波長の近傍に透過ピークが存在するような分光特性に前記可変分光素子を制御する第1の制御と、前記被写体からの光を構成する波長帯域内に透過ピークを存在させず、前記第1の制御をしたときに前記可変分光素子を透過する、設定された所望波長以外の波長の光と略同じ波長帯域にわたる略同量の光が、前記可変分光素子を透過する分光特性に前記可変分光素子を制御する第2の制御とを、前記一対の光学基板同士の面間隔又は角度を変化させることにより切替える可変分光素子制御部と、
前記可変分光素子を透過した光による画像を取得する画像取得部と、
前記可変分光素子制御部が第1の制御を行なっているときに前記画像取得部が取得した、前記可変分光素子を透過する、設定された所望波長の光による成分と所望波長以外の波長の光による成分とを含んでなる第1の画像と、前記可変分光素子制御部が第2の制御を行なっているときに前記画像取得部が取得した、前記可変分光素子を透過する、前記第1の画像における所望波長以外の波長の光と略同様の成分を略同量含んでなる第2の画像との差分を取得する画像補正処理部と、
を備えたことを特徴とする分光画像取得装置。 - 前記可変分光素子制御部は、前記第2の制御において、前記一対の光学基板同士の角度を、前記被写体からの光の波長帯域内での前記可変分光素子の透過ピークが消失する、非平行な所定の角度に傾けることを特徴とする請求項1に記載の分光画像取得装置。
- 前記可変分光素子制御部は、前記第2の制御において、前記一対の光学基板同士の面間隔を、前記被写体からの光の波長帯域内での前記可変分光素子の透過ピークが消失する、所定の距離に広げることを特徴とする請求項1に記載の分光画像取得装置。
- 前記可変分光素子制御部は、前記第2の制御において、前記一対の光学基板同士の面間隔及び角度を、前記被写体からの光の波長帯域を外れた所定の波長域に前記可変分光素子の透過ピークがシフトする、所定の距離及び角度に制御することを特徴とする請求項1に記載の分光画像取得装置。
- 前記第2の画像を取得後に前記画像取得部が最初に取得した前記第1の画像を基準画像とし、前記基準画像中の前記被写体に対する、前記基準画像を取得後に前記画像取得部が取得した前記第1の画像中の前記被写体の位置ずれ量を検出する画像ずれ量検出部を有し、
前記可変分光素子制御部は、前記画像ずれ量検出部が検出した前記被写体の位置ずれ量が所定の閾値を超えたときに、前記第1の制御を前記第2の制御に切替え、前記画像取得部が前記第2の画像を取得後に、前記第2の制御を前記第1の制御に切替えることを特徴とする請求項1〜4のいずれかに記載の分光画像取得装置。 - 前記可変分光素子制御部は、前記画像取得部が前記第1の画像と前記第2の画像とを交互に取得することができるタイミングで、前記第1の制御と前記第2の制御とを切替えることを特徴とする請求項1〜4のいずれかに記載の分光画像取得装置。
- 前記画像取得部による前記第1の画像と前記第2の画像の取得タイミングを設定するための第2画像取得タイミング設定部を有し、
前記可変分光素子制御部は、前記第2画像取得タイミング設定部を介して設定されたタイミングに同期して、前記第1の制御と前記第2の制御とを切替えることを特徴とする請求項1〜4のいずれかに記載の分光画像取得装置。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011142816 | 2011-06-28 | ||
JP2011142816 | 2011-06-28 | ||
PCT/JP2012/064460 WO2013001994A1 (ja) | 2011-06-28 | 2012-06-05 | 分光画像取得装置及び分光画像取得方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2013001994A1 JPWO2013001994A1 (ja) | 2015-02-23 |
JP6120770B2 true JP6120770B2 (ja) | 2017-04-26 |
Family
ID=47423894
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2013522559A Active JP6120770B2 (ja) | 2011-06-28 | 2012-06-05 | 分光画像取得装置 |
Country Status (3)
Country | Link |
---|---|
US (1) | US9347830B2 (ja) |
JP (1) | JP6120770B2 (ja) |
WO (1) | WO2013001994A1 (ja) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6123360B2 (ja) * | 2013-03-07 | 2017-05-10 | セイコーエプソン株式会社 | 分光測定装置 |
JP6390117B2 (ja) * | 2014-02-26 | 2018-09-19 | セイコーエプソン株式会社 | 光学モジュール、及び電子機器 |
JP6432770B2 (ja) * | 2014-11-12 | 2018-12-05 | ソニー株式会社 | 画像処理装置、画像処理方法、並びにプログラム |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2771785B2 (ja) * | 1995-04-13 | 1998-07-02 | 雅則 奥山 | スペクトル画像分析装置 |
FI103216B (fi) * | 1995-07-07 | 1999-05-14 | Vaisala Oyj | Menetelmä NDIR-mittalaitteen lyhyen Fabry-Perot interferometrin ohjaam iseksi |
JP4599520B2 (ja) * | 2004-09-17 | 2010-12-15 | オリンパス株式会社 | マルチスペクトル画像処理方法 |
JP2006343686A (ja) * | 2005-06-10 | 2006-12-21 | Seiko Epson Corp | 光学デバイス |
US7633629B2 (en) * | 2007-02-05 | 2009-12-15 | Palo Alto Research Center Incorporated | Tuning optical cavities |
JP2010249808A (ja) * | 2009-03-24 | 2010-11-04 | Olympus Corp | 分光透過率可変素子を備えた分光イメージング装置及び分光イメージング装置における分光透過率可変素子の調整方法 |
-
2012
- 2012-06-05 JP JP2013522559A patent/JP6120770B2/ja active Active
- 2012-06-05 WO PCT/JP2012/064460 patent/WO2013001994A1/ja active Application Filing
-
2013
- 2013-12-05 US US14/097,360 patent/US9347830B2/en not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
WO2013001994A1 (ja) | 2013-01-03 |
US20140092390A1 (en) | 2014-04-03 |
US9347830B2 (en) | 2016-05-24 |
JPWO2013001994A1 (ja) | 2015-02-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6728070B2 (ja) | マルチスペクトルイメージングのための方法及び手段 | |
US11224335B2 (en) | Image capturing system and electronic endoscope system | |
JP6356122B2 (ja) | 生体組織中の生体物質の濃度分布を示す画像を生成する装置の作動方法及び装置 | |
JP6356051B2 (ja) | 分析装置及び分析装置の作動方法 | |
JP2008229024A (ja) | 蛍光観察装置 | |
JP5506472B2 (ja) | 蛍光内視鏡装置 | |
CN110087528B (zh) | 内窥镜系统以及图像显示装置 | |
JP6082321B2 (ja) | 手術用顕微鏡システム | |
JP2012157383A (ja) | 内視鏡装置 | |
WO2017119239A1 (ja) | 内視鏡装置 | |
JP6284451B2 (ja) | 内視鏡装置 | |
JP6615369B2 (ja) | 内視鏡システム | |
JP2021035549A (ja) | 内視鏡システム | |
JP6120770B2 (ja) | 分光画像取得装置 | |
JP2002272744A (ja) | 画像診断装置 | |
JP6570484B2 (ja) | 分析装置 | |
JP4919780B2 (ja) | 蛍光観察装置 | |
JP6099518B2 (ja) | 内視鏡システム及び作動方法 | |
US20180092519A1 (en) | Infrared fluorescence observation device | |
JP5990141B2 (ja) | 内視鏡システム及びプロセッサ装置並びに作動方法 | |
JP6535701B2 (ja) | 撮像装置 | |
JP6584147B2 (ja) | 撮像装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20150414 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20160405 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20160601 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20161018 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20161208 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20170314 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20170328 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6120770 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |