JP6276749B2 - 蛍光受光装置および蛍光受光方法 - Google Patents

蛍光受光装置および蛍光受光方法 Download PDF

Info

Publication number
JP6276749B2
JP6276749B2 JP2015504332A JP2015504332A JP6276749B2 JP 6276749 B2 JP6276749 B2 JP 6276749B2 JP 2015504332 A JP2015504332 A JP 2015504332A JP 2015504332 A JP2015504332 A JP 2015504332A JP 6276749 B2 JP6276749 B2 JP 6276749B2
Authority
JP
Japan
Prior art keywords
fluorescence
light
hologram
sample
phase
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2015504332A
Other languages
English (en)
Other versions
JPWO2014136784A1 (ja
Inventor
直也 松本
直也 松本
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hamamatsu Photonics KK
Original Assignee
Hamamatsu Photonics KK
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hamamatsu Photonics KK filed Critical Hamamatsu Photonics KK
Publication of JPWO2014136784A1 publication Critical patent/JPWO2014136784A1/ja
Application granted granted Critical
Publication of JP6276749B2 publication Critical patent/JP6276749B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03HHOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H1/00Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
    • G03H1/0005Adaptation of holography to specific applications
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/62Systems in which the material investigated is excited whereby it emits light or causes a change in wavelength of the incident light
    • G01N21/63Systems in which the material investigated is excited whereby it emits light or causes a change in wavelength of the incident light optically excited
    • G01N21/64Fluorescence; Phosphorescence
    • G01N21/645Specially adapted constructive features of fluorimeters
    • G01N21/6456Spatial resolved fluorescence measurements; Imaging
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/62Systems in which the material investigated is excited whereby it emits light or causes a change in wavelength of the incident light
    • G01N21/63Systems in which the material investigated is excited whereby it emits light or causes a change in wavelength of the incident light optically excited
    • G01N21/64Fluorescence; Phosphorescence
    • G01N21/645Specially adapted constructive features of fluorimeters
    • G01N21/6456Spatial resolved fluorescence measurements; Imaging
    • G01N21/6458Fluorescence microscopy
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B21/00Microscopes
    • G02B21/0004Microscopes specially adapted for specific applications
    • G02B21/002Scanning microscopes
    • G02B21/0024Confocal scanning microscopes (CSOMs) or confocal "macroscopes"; Accessories which are not restricted to use with CSOMs, e.g. sample holders
    • G02B21/0032Optical details of illumination, e.g. light-sources, pinholes, beam splitters, slits, fibers
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B21/00Microscopes
    • G02B21/0004Microscopes specially adapted for specific applications
    • G02B21/002Scanning microscopes
    • G02B21/0024Confocal scanning microscopes (CSOMs) or confocal "macroscopes"; Accessories which are not restricted to use with CSOMs, e.g. sample holders
    • G02B21/0052Optical details of the image generation
    • G02B21/0076Optical details of the image generation arrangements using fluorescence or luminescence
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B21/00Microscopes
    • G02B21/0004Microscopes specially adapted for specific applications
    • G02B21/002Scanning microscopes
    • G02B21/0024Confocal scanning microscopes (CSOMs) or confocal "macroscopes"; Accessories which are not restricted to use with CSOMs, e.g. sample holders
    • G02B21/008Details of detection or image processing, including general computer control
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B21/00Microscopes
    • G02B21/16Microscopes adapted for ultraviolet illumination ; Fluorescence microscopes
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03HHOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H1/00Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
    • G03H1/04Processes or apparatus for producing holograms
    • G03H1/08Synthesising holograms, i.e. holograms synthesized from objects or objects from holograms
    • G03H1/0808Methods of numerical synthesis, e.g. coherent ray tracing [CRT], diffraction specific
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03HHOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H1/00Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
    • G03H1/22Processes or apparatus for obtaining an optical image from holograms
    • G03H1/2294Addressing the hologram to an active spatial light modulator
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03HHOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H1/00Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
    • G03H1/0005Adaptation of holography to specific applications
    • G03H2001/005Adaptation of holography to specific applications in microscopy, e.g. digital holographic microscope [DHM]
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03HHOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H1/00Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
    • G03H1/04Processes or apparatus for producing holograms
    • G03H1/08Synthesising holograms, i.e. holograms synthesized from objects or objects from holograms
    • G03H1/0808Methods of numerical synthesis, e.g. coherent ray tracing [CRT], diffraction specific
    • G03H2001/0825Numerical processing in hologram space, e.g. combination of the CGH [computer generated hologram] with a numerical optical element

Description

本発明は、蛍光受光装置および蛍光受光方法に関するものである。
従来、空間光変調器(Spatial Light Modulator、以下「SLM」)の一つである音響光学変調素子を用いて、試料上に複数のスポット光を生成する蛍光走査顕微鏡が知られている(例えば特許文献1および非特許文献1を参照)。例えば特許文献1の開示内容によれば、当該蛍光走査顕微鏡は、同時に走査する走査点の数、位置あるいは間隔等を光量ロスなく自由に変更することができ、画像取得時間の短縮だけでなく、用途に応じた観察をフレキシブルに行うことができるという効果を奏するとしている。
特開2009−103958号公報
蛍光走査顕微鏡の光学系にSLMを導入し、SLMにCGH(Computer Generated Hologram)と呼ばれる位相分布や強度分布を示したパターンを呈示すると、対物レンズの集光点上に多点を生成させることができる。そのため、試料から励起された蛍光も複数点となる。これをマルチアノードの光電子増倍管等で受光することにより、多点計測が可能となる。しかし、集光位置における多点の光の強度の制御が大きな問題となる。これは、SLMで生成された多点にバラツキがあること、および観測側のマルチアノードの光電子増倍管等にも感度バラツキがあることに起因する。一方で、上記の特許文献1および非特許文献1の何れの文献においても、集光位置における多点の光の強度を制御することについては言及も示唆もない。
そこで、本発明は上記に鑑みてなされたもので、集光位置における多点の光の強度を制御することが可能な蛍光受光装置および蛍光受光方法を提供することを目的とする。
上記課題を解決するために、本発明の一側面に係る蛍光受光装置(蛍光検出装置)は、空間光変調器によって変調された励起光により発生する蛍光を検出する装置であって、励起光を出力する励起光源と、励起光が入力され、第1ホログラムを表現すること(呈示すること)により、励起光の位相および振幅の少なくともいずれか一方を変調し、変調光を出力する空間光変調器と、空間光変調器の後段に設けられ、変調光を試料に集光する集光光学系と、試料が載置される試料ステージと、変調光が試料に集光されることにより発生する蛍光を集光光学系を介して検出する蛍光検出器と、空間光変調器に第1ホログラムを表現させること(呈示させること)により、2次元配列された複数の画素それぞれにおいて励起光の位相および振幅の少なくとも何れか一方を変調させ、且つ変調光を集光光学系により試料の集光位置に集光させる制御部と、第1ホログラムを補正する補正部と、を備え、補正部は、蛍光検出器固有の受光位置ごとの感度情報および集光位置における蛍光の強度に基づき、第1ホログラムを補正することにより、第2ホログラムを生成し、制御部は、第2ホログラムを表現するように(呈示するように)空間光変調器を制御する。
また、本発明の一側面に係る蛍光受光方法(蛍光検出方法)は、空間光変調器により変調された励起光によって生じる蛍光を受光する(検出する)方法であって、励起光源から出力された励起光を空間光変調器に入力し、空間光変調器に第1ホログラムを表現させること(呈示させること)により、励起光の位相および振幅の少なくとも何れか一方を変調することにより得られた変調光を出力し、空間光変調器の後段に設けられた集光光学系により、変調光を試料に集光し、蛍光検出器により、変調光が試料に集光されることにより発生する蛍光を集光光学系を介して検出し、蛍光検出器固有の受光位置ごとの感度情報と集光位置における蛍光の強度に基づき、第1ホログラムを補正することにより、第2ホログラムを生成し、空間光変調器に第2ホログラムを表現させること(呈示させること)により、励起光の位相および振幅の少なくとも何れか一方を変調することにより得られた変調光を出力する。
このような本発明の一側面に係る蛍光受光装置および蛍光受光方法によれば、制御部により最初に空間光変調器に呈示された第1ホログラムが補正部によって補正され、当該補正により新たに生成された第2ホログラムが制御部により再び空間光変調器に呈示される。つまり、補正部および制御部によりホログラムがフィードバックされることにより、当該ホログラムの補正が行われる。第2ホログラムは、集光位置における蛍光の強度および蛍光受光器固有の受光位置ごとの感度情報に基づき、第1ホログラムが補正されることにより得られ、この第2ホログラムにより、空間光変調器で生成された多点における強度バラツキが、蛍光受光器における感度バラツキが考慮された上で、例えば均一に制御される。ここで、ホログラムがフィードバック補正されることにより、試料に照射される位相変調光と試料から照射される蛍光とがそれぞれ例えば均一に制御される。特に、補正部による補正が、蛍光受光器固有の受光位置ごとの感度情報に基づき行われるため、蛍光受光器固有の受光位置ごとの場所依存の感度バラツキを認めながらも、当該感度バラツキによる影響を低減させることができる。
また、本発明の一側面に係る蛍光受光装置および蛍光受光方法において、補正部による補正は、複数個の集光位置ごとに行われても良い。
この発明の一側面に係る蛍光受光装置および蛍光受光方法によれば、補正部による補正が複数個の集光位置ごとに行われるため、空間光変調器およびホログラムにより生成された多点それぞれに当該補正を適用することができる。
この発明の一側面に係る蛍光受光装置および蛍光受光方法では、励起光源は多光子励起を行うことができる短パルスレーザであってもよい。
この発明の一側面に係る蛍光受光装置および蛍光受光方法は、多光子励起を行うことができる短パルスレーザを用いた場合に顕著に起こる、複数個の集光位置の強度バラツキに対して特に有用である。
また、本発明の一側面に係る蛍光受光装置および蛍光受光方法において、蛍光検出器はマルチアノード型の光電子増倍管であっても良い。
この発明の一側面に係る蛍光受光装置および蛍光受光方法によれば、マルチアノード型の光電子増倍管のような、場所依存の感度バラツキの存在する蛍光受光器に特に有用である。
また、本発明の一側面に係る蛍光受光装置および蛍光受光方法において、試料は、試料に集光された変調光と試料から発生する蛍光の強度の比率において、場所依存のバラツキのない均質な蛍光材料からなっていても良い。
試料への変調光および試料からの蛍光の両方を例えば均一に強度制御する際に、場所依存のバラツキのない均質な蛍光材料を試料として用いることにより、計算量を減らすことができ、当該制御を簡易且つ好適に行うことができる。
また、本発明の一側面に係る蛍光受光装置および蛍光受光方法において、補正部による補正は、集光光学系に含まれた対物レンズの光軸方向に沿った所定の間隔の走査層ごとに行われても良い。
これによれば、ある程度の深さを有する試料に対しても本発明の一側面に係る蛍光受光装置および蛍光受光方法を適用させることができる。
また、本発明の一側面に係る蛍光受光装置および蛍光受光方法において、走査層ごとの走査は、空間光変調器によって、対物レンズの光軸方向における集光位置が制御されることにより行われても良い。
これによれば、走査層ごとの走査を好適に行うことができる。
本発明によれば、集光位置における多点の光の強度を制御することが可能な蛍光受光装置および蛍光受光方法を提供することができる。
蛍光受光装置1の全体的な構成を示す図である。 制御部21および補正部22のハードウェア構成図である。 本実施形態における多点走査を例示する図である。 補正部22の機能構成図である。 蛍光受光器40固有の受光位置ごとの感度バラツキを説明するための図である。 フィードバック補正の手順を示すフローチャートである。 本実施形態において、補正部22が蛍光受光器40固有の受光位置ごとの感度情報に基づきフィードバック補正を行うことにより、蛍光受光器40固有の受光位置ごとの場所依存の感度バラツキを認めながらも、当該感度バラツキによる影響を低減させ、位相変調光L2および蛍光L3の強度を均一にしていることを説明するための図である。 本実施形態による効果を説明するための図である。 本実施形態によるフィードバック補正の実施回数(横軸)と、蛍光強度のバラツキ(縦軸)との間の関係を示す図である。
1…蛍光受光装置、10…励起光源、11…スペイシャルフィルタ、12…コリメートレンズ、13…ミラー、20…空間光変調器、21…制御部、22…補正部、221…第1ホログラム入力部、222…受光器固有感度情報格納部、223…第2ホログラム生成部、30…集光光学系、31…両側テレセントリックレンズ系、32…ダイクロイックミラー、33…対物レンズ、34…レンズ、90…試料、91…集光位置、92…試料ステージ、L1…励起光、L2…位相変調光、L3…蛍光。
以下、添付図面を参照して本発明にかかる蛍光受光装置および蛍光受光方法の一実施形態を詳細に説明する。なお、図面の説明において同一の要素には同一の符号を付し、重複する説明を省略する。
(蛍光受光装置1の構成)
最初に、本実施形態に係る蛍光受光装置(蛍光検出装置)1の全体構成について説明する。図1は、蛍光受光装置1の全体的な構成を示す図である。この図に示される蛍光受光装置1は、励起光L1が変調され、変調光L2が集光されることにより試料90から発生する蛍光L3を受光する装置であって、励起光源10、スペイシャルフィルタ11、コリメートレンズ12、ミラー13、空間光変調器20、制御部21、補正部22、集光光学系30、および蛍光受光器(蛍光検出器)40を備えて構成さ、例えば、蛍光走査顕微鏡装置やSTED顕微鏡装置、PALM、STORMなどである。
励起光源10は、試料90の集光位置91に照射されるべき励起光L1を出力するものである。励起光源10は、励起光L1としてレーザ光を出力しても良く、例えばフェムト秒レーザ光源、Nd:YAGレーザ光源等のパルスレーザ光源であっても良い。これに限らず、励起光源10として、LD(Laser Diode)、SLD(Super Luminescent Diode)、ハロゲンランプ、キセノンランプ等が用いられても良い。励起光源10から出力された励起光L1は、スペイシャルフィルタ11を経た後、コリメートレンズ12によりコリメートされ、ミラー13により反射されて、空間光変調器20に入力される。なお、この構成に限らず、スペイシャルフィルタ11とコリメートレンズ12の組み合わせの代わりに、エキスパンダレンズ(図示せず)を備えても良い。この場合には、励起光源10からの励起光L1がエキスパンダレンズによって広げられ、ミラー13により反射されて、空間光変調器20に入力される。
空間光変調器20は、位相変調型のものであって、励起光L1を入力し、当該励起光L1を位相変調することにより得られた位相変調光L2を出力するものである。すなわち、空間光変調器20は、励起光源10から出力された励起光L1を入力し、2次元配列された複数の画素それぞれにおいて励起光L1の位相を変調するホログラムを用いて励起光L1を位相変調し、その位相変調後の位相変調光L2を出力する。この空間光変調器20において用いられるホログラムは、数値計算により求められたホログラム(Computer Generated Hologram、以下「CGH」)であっても良い。
この空間光変調器20は、反射型のものであっても良く、透過型のものであっても良い。反射型の空間光変調器20としては、LCOS(Liquid Crystal on Silicon)型のもの、MEMS(Micro Electro Mechanical Systems)型のもの、および光アドレス型のものの何れかが用いられても良い。また、透過型の空間光変調器20としては、LCD(Liquid Crystal Display)型のもの等が用いられても良い。更に、これに限らず、Segment Mirror型のもの、Continuous Deformable Mirror型のものが用いられても良い。
また、空間光変調器20は、振幅(強度)変調型のものであって、励起光L1を入力し、当該励起光L1を振幅変調することにより得られた変調光L2を出力するものであってもよい。すなわち、空間光変調器20は、励起光源10から出力された励起光L1を入力し、2次元配列された複数の画素それぞれにおいて励起光L1の振幅を変調するホログラムを用いて励起光L1を振幅変調し、その振幅変調後の振幅変調光L2を出力する。振幅(強度)変調型の空間光変調器20は、反射型でも透過型でもよく、テキサスインスツルメンツ社のDLPを含むMEMS(MicroElectro Mechanical Systems)型およびLCD(Liquid Crystal Display)型などの空間光変調器が挙げられる。この空間光変調器20において用いられるホログラムは、数値計算により求められたホログラム(Computer Generated Hologram、以下「CGH」)であっても良い。なお、図1では、空間光変調器20として反射型で位相変調型の空間光変調器が例示され、以降、位相変調型の空間光変調器を用いた場合で説明する。
制御部21は、空間光変調器20にCGHを表現させることにより、2次元配列された複数の画素それぞれにおいて励起光L1を変調させ、且つ変調光L2を集光光学系30により試料90の複数個の集光位置91に集光させるものである。例えば、空間光変調器20が位相変調型の空間光変調器の場合、制御部21は、空間光変調器20にCGHを呈示させることにより、2次元配列された複数の画素それぞれにおいて励起光L1の位相を変調させ、且つ位相変調光L2を集光光学系30により試料90の複数個の集光位置91に集光させるものである。特に、LCOS型など液晶を用いる空間光変調器では、空間光変調器20にCGHを表示することで、空間光変調器20はCGHを表現する。なお、空間光変調器20がCGHを表現するとは、空間光変調器20がCGHを呈示することや表示することを含む。実際の動作を行うために駆動部(図示せず)を別途備え、制御部21が駆動部を操作することにより、上記位相変調および集光を行っても良い。この場合の駆動部は、制御部21のCGHを用いた制御のもとで、空間光変調器20の2次元配列された複数の画素それぞれにおける位相変調量を設定し、画素ごとの位相変調量を示す信号を空間光変調器20に与える。
CGHの作成は、フーリエ変換型およびフレネルゾーンプレート型の何れの手法により行っても良い。CGHの作成を制御部21が行っても良く、別途のCGH作成部(図示せず)を備えても良い。フーリエ変換型はGS法等のアルゴリズムによりホログラムを作成することができ、フレネルゾーンプレート型はORA(optimal-rotation-angle)法等のアルゴリズムによりホログラムを作成することができる。なお、GS法については下記の参考文献1に記載されており、ORA法については下記の参考文献2に記載されている。
<参考文献1> R. W. Gerchberg and W. O.Saxton, "Apractical algorithm for the determination of phase from imageand diffractionplane pictures", Optik, Vol.35, pp.237-246 (1972).
<参考文献2> Jorgen Bengtsson, "Kinoform designwith anoptimal-rotation-angle method", Applied Optics, Vol.33,No.29,pp.6879-6884 (1994).
図2は制御部21のハードウェア構成図である。図2に示すように、制御部21は、物理的には、CPU201、ROM202及びRAM203等の主記憶装置、キーボード及びマウス等の入力デバイス204、ディスプレイ等の出力デバイス205、空間光変調器20等との間でデータの送受信を行うためのネットワークカード等の通信モジュール206、ハードディスク等の補助記憶装置207等を含む通常のコンピュータシステムとして構成される。制御部21の各機能は、CPU201、ROM202、RAM203等のハードウェア上に所定のコンピュータソフトウェアを読み込ませることにより、CPU201の制御の元で入力デバイス204、出力デバイス205、通信モジュール206を動作させると共に、主記憶装置202,203や補助記憶装置207におけるデータの読み出し及び書き込みを行うことで実現される。
図1に戻り、集光光学系30は、空間光変調器20の後段に設けられ、画素毎に位相変調された位相変調光L2を試料90に集光するものである。図1の例において集光光学系30は、両側テレセントリックレンズ系31、ダイクロイックミラー32、対物レンズ33、レンズ34を備えて構成される。空間光変調器20からの位相変調光L2は、両側テレセントリックレンズ系31およびダイクロイックミラー32によって対物レンズ33まで転送され、試料ステージ92上に載置された試料90を多点で照射する。染色された試料90からは、光照射によって蛍光L3が発生し、その蛍光L3の一部は対物レンズ33、ダイクロイックミラー32、レンズ34を介して蛍光受光器40に入射する。
試料90への光照射は、ガルバノスキャナーや共振ミラー、ポリゴンミラーなどのスキャナーと光軸方向に動くステージあるいは対物レンズを用いて走査しても良く、ステージが光軸に対して垂直な面と光軸方向に動く3軸ステージを用いて走査しても良い。また、図1の対物レンズ33が走査のために動いても良い。更に、試料90へ照射するレンズは対物レンズに限らず、一般的なレンズやFθレンズでも良い。以上のような構成により、図3に例示するような多点走査を行なうことができ、高速に画像を取得することが可能となる。図3は本実施形態における多点走査を例示する図である。図3(a)は多点を1次元で配列したものを例示し、図3(b)は多点を2次元で配列したものを例示する。それぞれの例において多点を用いてスキャンしており、まず、横方向をスキャンし、次に縦方向に1行移動してスキャンする(ラスタスキャン)。なお、ラスタスキャンに限らず、多点を用いた種々のスキャン手法が用いられても良い。
図1に戻り、蛍光受光器40は、位相変調光L2が試料90に集光されることにより発生する蛍光L3を集光光学系30を介して受光するものであり、例えばマルチアノード型の光電子増倍管(PMT)により構成することができる。なお、これに限らず、蛍光受光器40として、フォトマルチプライヤーチューブ、CCDやCMOSイメージセンサ等の2次元撮像装置、アバランシェフォトダイオードアレイ、フォトダイオードアレイ等の2次元検出器を用いてもよい。蛍光受光器40は、受光器固有の場所依存の感度バラツキが存在するものであっても良い。また、蛍光受光部40の前にピンホール(図示せず)を配置し、コンフォーカル効果を持たせても良い。
補正部22は、制御部21により空間光変調器20にすでに呈示されたCGHを補正するものである。補正部22は制御部21と同様のハードウェア構成(図2参照)を有する。制御部21と補正部22とが同じコンピュータシステム内に存在していても良い。図4は、補正部22の機能構成図である。図4に示されるように、補正部22は第1ホログラム入力部221、受光器固有感度情報格納部222、第2ホログラム生成部223を備えて構成される。
第1ホログラム入力部221は、制御部21により空間光変調器20にすでに呈示されたCGHであって、補正前のCGHを入力する。第1ホログラム入力部221が入力するCGHが第1ホログラムである。第1ホログラム入力部221は、入力した第1CGHを第2ホログラム生成部223に出力する。
受光器固有感度情報格納部222は、蛍光受光器固有の受光位置ごとの感度情報(以下、「受光器固有感度情報」)を予め取得し格納するものである。図5は、2光子励起蛍光顕微鏡における受光器固有感度情報を説明するための図である。図5の例において、蛍光受光器40には受光器固有の場所依存の感度バラツキが存在する。つまり、蛍光受光器40が例えばマルチアノード型のPMTであれば、複数のアノード間で感度バラツキが存在する。図5(a)に示すような受光面の場所にかかわらず均一な光を入射したときに、アノードのユニフォミティに感度バラツキがあると、蛍光受光器40において検出された蛍光の強度情報は図5(b)のようになる。つまり、強度100の均一な蛍光L3が入射したとしても、蛍光受光器40の場所によって例えば強度82、95、97、100の異なる強度として当該蛍光L3が検出される。
また、図5(d)に示すように、蛍光受光器40において検出された蛍光L3の強度が均一であっても、実際に入射された蛍光L3は図5(c)に示すように不均一なものである場合がある。つまり、蛍光受光器40において検出された蛍光L3の強度が例えば強度100で均一な場合には、空間光変調器20は実際には例えば強度100、86、84、82の不均一な光を照射していたことになる。言い換えれば、蛍光受光器40において検出された蛍光L3の強度が均一な場合に、これは蛍光受光器40の固有の場所依存の感度バラツキを考慮しない場合には一見入射された蛍光L3が均一なものと思われがちである。しかし、蛍光受光器40の固有の場所依存の感度バラツキを考慮すると、入射された蛍光L3は実は、不均一なものであったことになる。
受光器固有感度情報格納部222は、所定の均一な強度の蛍光を入射した場合の、蛍光受光器40固有の受光位置ごとの感度情報を予め取得し格納する。具体的には、励起光源10から射出した光をエキスパンダレンズ等で広げて、強度が略均一な平行光を2次元イメージセンサである蛍光受光器40に入射させ、蛍光受光器40の感度ムラを予め調査する。この調査によって、均一な光(蛍光)が入射したときに、蛍光受光器40で得られる多点のそれぞれの強度を「受光器固有感度情報」として記録する。なお、感度バラツキを観察するために、光の強度を複数回に渡って変更することにより、受光器固有感度情報の束である「受光器固有感度マップ」を作成しても良い。
第2ホログラム生成部223は、励起状態、集光位置における蛍光L3の強度、および受光器固有感度情報格納部222に格納された受光器固有感度情報に基づき、第1CGHをフィードバック補正することにより、第2CGHを生成するものである。第2ホログラム生成部223は、生成した第2CGHを制御部21に出力する。第2ホログラム生成部223により生成され制御部21に出力されるCGHが第2ホログラムである。制御部21は、第2CGHを入力し、空間光変調器20に呈示する。つまり、制御部21が空間光変調器20に呈示したホログラムが補正部22によりフィードバック補正され、補正後のホログラムが再び制御部21により空間光変調器20に呈示される。これは、試料90に照射される多点の強度バラツキが所定の閾値以下になるまで繰り返される。または、フィードバック補正の実施回数が所定の閾値以上になるまで繰り返される。
(フィードバック補正の手順)
続いて、第1ホログラムがフィードバック補正され、第2ホログラムが生成される際の手順について詳細に説明する。図6は、この手順を示すフローチャートである。
最初に、受光器固有感度情報格納部222が、所定の均一な強度の光を入射した場合の受光器固有感度情報を予め取得し格納しておく(ステップS1)。
次に、制御部21の制御のもとで、第1CGHが設計される(ステップS2)。
次に、制御部21の制御のもとで、第1CGHが空間光変調器20に呈示されることで、空間光変調器20は第1CGHを表現する。これにより、励起光L1は第1CGHに対応した位相分布を持つ位相変調光L2となり、この生成された位相変調光L2が試料90に多点照射される(ステップS3)。
次に、ステップS3の照射によって生じた蛍光L3を蛍光受光器40が撮像し、当該蛍光の強度情報を取得する(ステップS4)。
次に、補正部22(第2ホログラム生成部223)が、ステップS4で取得した蛍光L3の強度情報におけるバラツキを算出する。強度バラツキの算出には、Peak-to-valley (PV)法やRMS (Root Mean Square error)法を用いる。このとき、ステップS1で予め取得して格納した受光器固有感度情報を考慮して、ステップS4で取得した蛍光L3の強度のバラツキを算出する。例えば、ステップS4で取得した蛍光L3の強度情報と、ステップS1で取得した受光器固有感度情報とが同等であれば、強度バラツキはゼロであると言える。なお、ステップS1で取得した受光器固有感度情報を考慮する際には、Peak-to-valley (PV)法やRMS (Root Mean Square error)法の評価がある一定の範囲内にあるかないかを更に判別するようにしても良い。(ステップS5)
次に、ステップS5で算出した強度バラツキが所定の閾値以下である場合には(ステップS6:YES)、処理を終了する。一方、ステップS5で算出した強度バラツキが所定の閾値以下でない場合には(ステップS6:NO)、処理の流れはステップS7に移行し、蛍光強度を制御するために、第2ホログラム生成部223が第1CGHを再設計して第2CGHを生成する。なお、本実施形態では、蛍光強度を制御する一つの態様として、蛍光強度を均一化することとする。そして、処理の流れはステップS3に移行され、ステップS3〜ステップS6が繰り返される。なお、ステップS6の判断においては、ステップS5で算出した強度バラツキが所定の閾値以下であるか否かを判断する変わりに、フィードバック補正の実施回数が所定の閾値以上であるか否かを判断しても良い。
(CGH再設計の手順、その1)
ここで、第1CGHを再設計して第2CGHを生成する方法(ステップS7)について説明する。
最初に、第2ホログラム生成部223が、ステップS4で取得した蛍光L3の強度バラツキに基づき、CGH設計にフィードバックするための補正係数Vkを下記の式(1)より導出する。
ただし、mは多点の位置、kはフィードバック回数、qはステップS4で取得した蛍光L3の強度、nは光子の数である。上記式(1)からわかるように、補正部22による補正は、複数個の集光位置ごとに行われる(ステップS71)。また、上記式(1)では、n光子吸収過程によって補正係数Vkが変化する。
次に、第2ホログラム生成部223が、ステップS71で導出した補正係数Vkを用いて、第1CGHを再設計して第2CGHを生成する。例えば、反復フーリエ変換法の一種であるOver Compensation(OC)法では、ターゲットパターン(多点の位置や強度を示したパターン)をイタレーションごとにウェイトを用いて変更するので、OC法での第2CGHにおけるターゲットパターンは下記の式(2)のようになる。
ただし、lはOC法のイタレーション回数、
はOC法で用いられるウェイト、Tgoal(m)はターゲットパターン、s(m)は受光器固有感度情報を考慮した係数である(ステップS72)。
(CGH再設計の手順、その2)
続いて、第1CGHを再設計して第2CGHを生成する別の方法(ステップS7)について説明する。
上述のCGH再設計の手順その1においては、補正係数Vkに係数s(m)が考慮されておらず、フィードバック時に係数s(m)が適用された。一方で、CGH再設計の手順その2では、係数s(m)が補正係数Vkに最初から考慮されている点で異なる。
すなわち、最初に、第2ホログラム生成部223が、ステップS4で取得した蛍光L3の強度バラツキに基づき、CGH設計にフィードバックするための補正係数Vkを下記の式(3)より導出する。
式(1)の場合と同様に、式(3)を用いた場合でも、補正部22による補正は、複数個の集光位置ごとに行われる(ステップS73)。
次に、第2ホログラム生成部223が、ステップS73で導出した補正係数Vkを用いて、第1CGHを再設計して第2CGHを生成する。例えば、反復フーリエ変換法の一種であるOver Compensation(OC)法では、ターゲットパターン(多点の位置や強度を示したパターン)をイタレーションごとにウェイトを用いて変更するので、OC法での第2CGHにおけるターゲットパターンは下記の式(4)のようになる(ステップS74)。
(係数s(m)の算出方法)
以下、ステップS72およびステップS73における2光子励起蛍光顕微鏡における係数s(m)の算出方法について詳細に説明する。以下の説明においては、ステップS1で取得した受光器固有感度情報が例えば図5(b)だったものとする。
最初に、ステップS1で取得した受光器固有感度情報の4乗根を求める。この演算は、2光子励起蛍光顕微鏡では位相変調光L2の強度は振幅の2乗であり、蛍光L3の強度は位相変調光L2の強度の2乗であることに起因する。求めた4乗根を下記の式(5)に示す(ステップS731)。
次に、式(5)における最小の要素で各要素を割る。その演算結果を下記の式(6)に示す(ステップS732)。
次に、式(6)における各要素の逆数を計算する。その計算結果を下記の式(7)に示す(ステップS733)。
次に、式(7)を規格化することにより、ステップS72およびステップS73における係数s(m)が最終的に算出される。算出された係数s(m)を下記の式(8)に示す(ステップS734)。
以上により算出した係数s(m)をステップS72およびステップS73にて用いることにより、CGH再設計の手順その1およびその2を実行することができる。
なお、n光子励起蛍光顕微鏡の場合には、位相変調光L2の強度は振幅の2乗であり、蛍光L3の強度は位相変調光L2の強度のn乗であることを利用する。例えば、1光子励起蛍光顕微鏡の場合には、位相変調光L2の強度は振幅の2乗であり、蛍光L3の強度は位相変調光L2の強度の1乗、つまり蛍光L3の強度は位相変調光L2の強度と同じである。また、例えば、3光子励起蛍光顕微鏡の場合には、位相変調光L2の強度は振幅の2乗であり、蛍光L3の強度は位相変調光L2の強度の3乗である。
なお、蛍光L3の強度、すなわちqの導出方法については、受光器固有感度情報(例えば図5(b))の代わりに、蛍光受光器40によりステップS4で取得した蛍光L3の強度情報を用いて、上述のステップS731〜ステップS734と同様の演算を行うことによって算出することができる。
以上で説明したステップS1〜ステップS7を実行することにより、試料90に照射される位相変調光L2、および試料90から射出される蛍光L3を両方とも例えば均一に制御することができる。ここで、試料90に照射される位相変調光L2と試料90から照射される蛍光L3とをそれぞれ均一にするために、どの位置に照射されても励起光強度が同じであれば、同じ強度の蛍光が得られるような均質な蛍光材料を試料90として用いても良い。つまり、試料90に集光された位相変調光L2対試料90から発生する蛍光L3の強度の比率において、場所依存のバラツキのない均質な蛍光材料からなるものを、本実施形態における試料90として用いても良い。
なお、蛍光受光器40固有の受光位置ごとの場所依存の感度バラツキを均一にするために、画像処理等によるシェーディング補正を更に施しても良い。これにより、フィードバック補正の実施回数を減らすことができる。
ここまでの設計方法は、OC法に従って説明をしたが、CGH設計方法は、OC法に限らない。OC法が含まれる反復フーリエ変換法や、シミュレーティドアニーリング、Optimal rotation angle method (ORA法)や遺伝的アルゴリズムなどの1画素の変化に着目する方法、複素振幅の形で足し合わせる重ね合わせ方法などもCGH設計方法として採用できる。以上列挙した何れの手法でも、フィードバック時には上記式(1)または式(3)が用いられる。
(z−stack)
以上で説明した補正部22による補正は、集光光学系30に含まれた対物レンズ33の光軸方向に沿った所定の間隔の走査層ごとに行われても良い。以下では、走査層ごとの補正を実現するためのz−stackについて説明する。z−stackとは、試料90の奥行き方向をずらして画像を撮像することで、3次元画像を得ることをいう。z−stackは、(a)空間光変調器20にフレネルレンズパターンを呈示する方法、(b)蛍光受光装置1を含む蛍光走査顕微鏡装置のZステージを移動させる方法、(c)対物レンズ33そのものを移動させる方法、(d)これらの組み合わせ、によって、対物レンズ33の光軸方向に沿った所定の間隔で走査層を移動させることにより実現される。
以下、z−stackを行う際の処理手順について説明する。なお、以下の説明では、空間光変調器20に呈示する多点を生成するためのCGHにフレネルレンズを加えることで、つまり上記方法(a)で、対物レンズ33の光軸方向における深さ方向の制御を行い、且つ3つの深さD1、D2、D3で走査層を移動させてスキャンを行う例について説明する。
最初に、多点を生成するためのCGHを設計する(ステップS101)。
次に、ステップS101で設計したCGHに深さD1を観察するためのフレネルレンズを加える(ステップS102)。
次に、ステップS102で合成されたCGHに、必要に応じて、収差補正パターンを更に加える(ステップS103)。
次に、ステップS103で合成されたCGHを空間光変調器20に呈示することで、空間光変調器20はステップS103で合成されたCGHを表現し、生成した多点を均質な試料90に照射する(ステップS104)。
次に、試料90から発生した蛍光像をマルチアノード型のPMT、カメラ等で撮像する(ステップS105)。
次に、検出した蛍光強度のバラツキを調べる。バラツキの算出には、Peak-to-valley (PV)法やRMS (Root Mean Square error) 法を用いる。このとき、集光点の中心を中心とした観察領域を設け、その中の強度の合計におけるバラツキを調べても良い。また、生体を考慮した収差補正を行うために意図的に大きな収差を加えて観察する場合には、収差によって広がったスポット全体を網羅するように観察領域を設けても良い。ここで、「意図的に大きな収差」とは、媒質の屈折率をn、媒質の入射面からレンズの焦点までの深さをd、媒質によって発生する収差をΔsとした場合に、例えば、「n×d-Δs」以上、且つ「n×d+Δs」以下の範囲における収差をいう。なお、これに限らず、観測対象と浸液等との屈折率のミスマッチングで発生する球面収差、対象物の形状によって発生する非点収差等を予めシミュレーションまたはシャックハルトマンセンサ等を用いて測定して、これらを更に考慮した範囲における収差を上記「意図的に大きな収差」としても良い(ステップS106)。
ステップS106で算出したバラツキが許容の範囲内ならば処理を終了する(ステップS107)。
ステップS106で算出したバラツキが許容の範囲外であるならば、ステップS101で設計したCGHを初期位相としてCGHの再設計を行なう。つまり、ステップS101で設計したCGHを第1CGHとし、上述したCGH再設計の手順その1、その2、および係数s(m)の算出方法を用いて第2CGHを生成する(ステップS108)。
次に、ステップS104〜ステップS108を繰り返し、ステップS106で算出したバラツキが許容の範囲内になるまで繰り返しを継続し、深さD1に対する最適なCGHを設計する。この繰り返しにおいて、ステップS102およびステップS103は除外される。つまり、ステップS102およびステップS103の手順は深さごとに1回のみ行われる(ステップS109)。
次に、深さをD2に変えて、ステップS101〜ステップS109の処理を行う。また、深さをD3に変えて、ステップS101〜ステップS109の処理を行う。
最終的に、深さごとに最適化されたCGHをそれぞれの深さで呈示してz−stackにおける走査を行なう。
以上の説明においては、z−stackを行うための方法として上記の方法(a)の場合を説明した。つまり、空間光変調器20によって、対物レンズ33の光軸方向における集光位置が制御されることで、走査層ごとの走査が行われる場合を説明した。これに限らず、上記の方法(b)および(c)の場合にも以上と同様の手順を適用することができる。なお、方法(a)ではフレネルレンズパターンを変えることにより深さを変更していたが、方法(b)の場合にはZステージを移動させ、且つ方法(c)の場合には対物レンズ33を移動させることにより深さを変更する。
空間光変調器20の特性や集光光学系30の調整ミス等によって蛍光強度が均一にならなかったことから、本実施形態では、フィードバック補正を行なうことで、これらの問題が補正されたCGHを設計し、それを空間光変調器20に再呈示させている。しかし、z−stackを行なうためにZ軸を移動した場合には、集光過程にある媒質の状態が光学的に変化することによって光学系が変化するために、折角フィードバック補正によって制御された蛍光強度の均一性が崩れてしまう恐れがある。更に、フレネルレンズパターンを用いてz−stackを実現した場合には、フレネルレンズパターンが加えられることにより、折角求めた最適なCGHがこれ以上もう最適なCGHでなくなってしまうことがある。また、高NAの対物レンズ等で対象物を観察する場合には、対物レンズから対象物までの間に様々な屈折率の異なる媒質が存在し、それらにより収差が発生する。収差を補正するためには、空間光変調器20に収差補正パターンを呈示することが考えられるが、その結果最適なCGHになるための条件がまた変化してしまう。
以上の課題に対応するために、本実施形態では、最初に設計したCGHにフレネルレンズパターンや収差補正パターンを足し合わせ、更に、フレネルレンズパターンや収差補正パターンはフィードバック補正には用いないこととしている。これにより、収差を収差補正パターンによって補正するとともに、フレネルレンズパターンや収差補正パターンが固定された上で、フィードバック補正が行われる。したがって、フレネルレンズパターンが加えられること等によりZ軸が移動し媒質の光学的な状態および光学系の変化が発生する場合や、高NAの対物レンズ等の光学系または伝搬過程に存在する媒質での屈折率の相違等により収差が発生した場合でも、当該収差を補正するとともに、フィードバック補正によって得られる蛍光強度の均一性を維持することができる。
また、本実施形態の蛍光受光装置1によれば、最初に空間光変調器20によって表現される第1CGHが補正部22によって補正され、当該補正により新たに生成された第2CGHが空間光変調器20によって改めて表現される。つまり、補正部22および制御部21によりホログラムがフィードバックされることにより、当該ホログラムの補正が行われる。第2CGHは、励起状態、集光位置における蛍光L3の強度および受光器固有感度情報に基づき、第1CGHが補正されることにより得られ、この第2CGHにより、空間光変調器20で生成された多点における強度バラツキが、蛍光受光器40における感度バラツキが考慮された上で、例えば均一に制御される。ここで、ホログラムがフィードバック補正されることにより、試料90に照射される位相変調光L2と試料90から照射される蛍光L3とがそれぞれ例えば均一に制御される。特に、補正部22による補正が、受光器固有感度情報に基づき行われるため、蛍光受光器40固有の受光位置ごとの場所依存の感度バラツキを認めながらも、当該感度バラツキによる影響を低減させることができる。
図7は、本実施形態における思想を別の側面で説明するための図である。図7(a)は、図5(a)および(b)を用いて上記説明したように、入射された蛍光L3が均一なものと一見思われがちであるものの、蛍光受光器40の固有の場所依存の感度バラツキを考慮すると、入射された蛍光L3は実は、不均一なものであったことをイメージする。図7(a)においては、試料90の集光位置91および蛍光受光器40の受光位置41における丸の大きさで強度の度合いを示している。すなわち、試料90の集光位置91においては丸の大きさが異なっており、これは集光位置91における光の強度が不均一であることを示す。一方、蛍光受光器40の受光位置41においては丸の大きさが同一であり、これは受光位置41において光の強度が一見均一に見えることを示す。
一方、図7(b)は、図5(c)および(d)を用いて上記説明したように、蛍光受光器40にて検出される蛍光の強度は不均一であるものの、試料90に入射する位相変調光L2および蛍光L3の強度は均一であることをイメージする。これは、本実施形態の補正部22が受光器固有感度情報に基づきフィードバック補正を行うことにより、蛍光受光器40固有の受光位置ごとの場所依存の感度バラツキを認めながらも、当該感度バラツキによる影響を低減させ、位相変調光L2および蛍光L3の強度を均一にしていることを意味する。
以下、本実施形態による効果について実例を示して説明する。すなわち、この実例においては試料90としてrAcGFP1溶液を用い、蛍光受光装置1による多点照射を行った。その結果を図8に示す。図8(a)は、フィードバック補正を行う前の蛍光画像を示す。図8(a)では中心部に比べて右上部の蛍光強度が低くなっており、また目視では確認しにくいものの、場所に依存する強度バラツキが中央付近にも存在する。なお、図8においては、蛍光の強度を明るさで示している。図8(b)は、本実施形態にかかるフィードバック補正を行った蛍光画像を示す。図8(a)とは異なり、場所に依存する強度バラツキが低減されていることがわかる。なお、図8は、受光器固有感度情報を考慮した上で、各受光位置で検出した蛍光の強度を示している。
図9は、本実施形態によるフィードバック補正の実施回数(横軸)と、蛍光強度のバラツキ(縦軸)との間の関係を示す図である。バラツキの評価関数としては、上述したようにPeak-to-valley (PV)法やRMS (Root Mean Square error) 法を用いた。なお、PV法とRMS法における算出バラツキはそれぞれ下記の式(9)、(10)でそれぞれ表すことができる。
ただし、q(m)はm番目の蛍光の観察領域における蛍光の総和であり、qmax、qmax、qdesiredはそれぞれ最大、最小、所望の蛍光強度である。図9に示されるように、補正前(フィードバック補正の実施回数=0)にPV=26%、RMS=10%だったものが、6回のフィードバック補正後にはPV=3%、RMS=1%と大幅に改善していることが確認できる。
また、本実施形態では、試料90を置いて蛍光L3を検出している。ここで、試料90を置いて蛍光を検出するメリットは以下の通りである。すなわち、rACGFP溶液やクマリンエタノール等の蛍光強度が均一に得られる媒質を試料90として用いて、一度補正を行なえば、その後、細胞等を試料として用いた場合でも均一なデータが得られることが一つ目のメリットである。二つ目のメリットとしては、試料を用いることで、実際に計測する光学系を用いることができるので、光学系全体の補正が可能であるということが挙げられる。三つ目のメリットとしては、観察する条件に近い屈折率を持つ均質媒質を用意することで、球面収差補正やレンズパターンを適用した状態で均一化が可能であるということが挙げられる。なお、試料90と観察媒質の屈折率が極端に異なると集光像がボケてしまい、SNが下がるため、均一化の精度が低下する恐れがある。したがって、試料90の屈折率を観察媒質の屈折率にある程度合わせるようにしても良い。更に、OC法は最適化法であり、局所解に陥るのを防ぐために初期位相にランダム位相が用いられることが多い。その結果、第1ホログラムごとに、生成される多点のバラツキの分布が異なる。または、同じ初期位相を用いてもターゲットパターンにおける多点の位置や強度が変化すると、第1ホログラムによって生成される多点のバラツキの分布が異なる。蛍光強度が均一に得られる媒質を試料90として用いることで、ホログラム起因のバラツキを明確に把握できることが四つ目のメリットである。
また、本実施形態によれば、補正部22による補正が複数個の集光位置ごとに行われるため、空間光変調器20およびホログラムにより生成された多点それぞれに当該補正を適用することができる。
この発明は、多光子励起を行うことができる短パルスレーザを励起光源10に用いた場合に起こる、複数個の集光位置の強度バラツキに対して特に有用である。このような励起光源10としては、ナノ秒以下のパルス幅を有し、波長が650nm以上の短パルスレーザを出射できる光源が好ましい。
また、本実施形態は、マルチアノード型の光電子増倍管のような、場所依存の感度バラツキの存在する蛍光受光器40に特に有用である。
また、本実施形態によれば、試料90への位相変調光L2および試料90からの蛍光L3の両方を例えば均一に強度制御する際に、場所依存のバラツキのない均質な蛍光材料を試料90として用いることにより、計算量を減らすことができ、当該制御を簡易且つ好適に行うことができる。
また、本実施形態によれば、補正部22による補正は、集光光学系30に含まれた対物レンズ33の光軸方向に沿った所定の間隔の走査層ごとに行われるため、ある程度の深さを有する試料90に対しても本実施形態を適用させることができる。
また、本実施形態によれば、空間光変調器20が対物レンズ33の光軸方向における集光位置を制御することで走査層ごとの走査を行うため、走査層ごとの走査を好適に行うことができる。
なお、試料として、実際の測定試料の屈折率に近い屈折率を有し、蛍光物質などの溶質の濃度が均一なキャリブレーション試料を用いてもよい。このようなキャリブレーション試料を用いると、蛍光強度の均一性を保つことができる。
本発明は、集光位置における多点の蛍光の強度を制御することができる蛍光受光装置および蛍光受光方法を提供する。

Claims (8)

  1. 位相変調された励起光が集光されることにより試料から発生する蛍光を受光する蛍光受光装置であって、
    前記励起光を出力する励起光源と、
    前記励起光を入力し、前記励起光を位相変調することにより得られた位相変調光を出力する位相変調型の空間光変調器と、
    前記空間光変調器の後段に設けられ、前記位相変調光を前記試料に集光する集光光学系と、
    前記試料が載置される試料ステージと、
    前記位相変調光が前記試料に集光されることにより発生する蛍光を前記集光光学系を介して受光する蛍光受光器と、
    前記空間光変調器に第1ホログラムを表示することにより、2次元配列された複数の画素それぞれにおいて前記励起光の位相を変調させ、且つ前記位相変調光を前記集光光学系により前記試料の複数個の集光位置に集光させる制御部と、
    前記第1ホログラムを補正する補正部と、
    を備え、
    前記補正部は、
    前記第1ホログラムを入力する第1ホログラム入力部と、
    前記蛍光受光器固有の受光位置ごとの感度情報を予め取得し格納する受光器固有感度情報格納部と、
    前記集光位置における前記蛍光の強度および前記受光器固有感度情報格納部に格納された前記感度情報に基づき、前記第1ホログラムを補正することにより、第2ホログラムを生成する第2ホログラム生成部と、
    を備え、
    前記制御部は前記空間光変調器に前記第2ホログラムを表示する、蛍光受光装置。
  2. 前記補正部による前記補正は、前記複数個の集光位置ごとに行われる、請求項1に記載の蛍光受光装置。
  3. 前記励起光源は、多光子励起を行うことができる短パルスレーザである、請求項1または2に記載の蛍光受光装置。
  4. 前記蛍光受光器はマルチアノード型の光電子増倍管である、請求項1〜3の何れか1項に記載の蛍光受光装置。
  5. 前記試料は、前記試料に集光された前記位相変調光対前記試料から発生する前記蛍光の強度の比率において、場所依存のバラツキのない均質な蛍光材料からなる、請求項1〜4の何れか1項に記載の蛍光受光装置。
  6. 前記補正部による前記補正は、前記集光光学系に含まれた対物レンズの光軸方向に沿った所定の間隔の走査層ごとに行われる、請求項1〜5の何れか1項に記載の蛍光受光装置。
  7. 前記走査層ごとの走査は、前記空間光変調器によって、前記対物レンズの前記光軸方向における集光位置が制御されることにより行われる、請求項6に記載の蛍光受光装置。
  8. 位相変調された励起光が集光されることにより、試料ステージに載置された試料から発生する蛍光を受光する蛍光受光装置における蛍光受光方法であって、
    励起光源が、前記励起光を出力するステップと、
    位相変調型の空間光変調器が、前記励起光を入力し、前記励起光を位相変調することにより得られた位相変調光を出力するステップと、
    前記空間光変調器の後段に設けられた集光光学系が、前記位相変調光を前記試料に集光するステップと、
    蛍光受光器が、前記位相変調光が前記試料に集光されることにより発生する蛍光を前記集光光学系を介して受光するステップと、
    制御部が、前記空間光変調器に第1ホログラムを表示することにより、2次元配列された複数の画素それぞれにおいて前記励起光の位相を変調させ、且つ前記位相変調光を前記集光光学系により前記試料の複数個の集光位置に集光させるステップと、
    補正部が、前記第1ホログラムを補正するステップと、
    を備え、
    前記補正部が前記第1ホログラムを補正するステップは、
    第1ホログラム入力部が、前記第1ホログラムを入力するステップと、
    受光器固有感度情報格納部が、前記蛍光受光器固有の受光位置ごとの感度情報を予め取得し格納するステップと、
    第2ホログラム生成部が、前記集光位置における前記蛍光の強度および前記受光器固有感度情報格納部に格納された前記感度情報に基づき、前記第1ホログラムを補正することにより、第2ホログラムを生成するステップと、
    を備え、
    前記制御部が、前記空間光変調器に前記第2ホログラムを表示するステップを更に備える、蛍光受光方法。
JP2015504332A 2013-03-06 2014-03-04 蛍光受光装置および蛍光受光方法 Active JP6276749B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2013044348 2013-03-06
JP2013044348 2013-03-06
PCT/JP2014/055491 WO2014136784A1 (ja) 2013-03-06 2014-03-04 蛍光受光装置および蛍光受光方法

Publications (2)

Publication Number Publication Date
JPWO2014136784A1 JPWO2014136784A1 (ja) 2017-02-16
JP6276749B2 true JP6276749B2 (ja) 2018-02-07

Family

ID=51491299

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2015504332A Active JP6276749B2 (ja) 2013-03-06 2014-03-04 蛍光受光装置および蛍光受光方法

Country Status (5)

Country Link
US (1) US9740166B2 (ja)
JP (1) JP6276749B2 (ja)
CN (1) CN105026916B (ja)
DE (1) DE112014001147T5 (ja)
WO (1) WO2014136784A1 (ja)

Families Citing this family (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10595712B2 (en) * 2013-10-21 2020-03-24 University of Pittsburgh—of the Commonwealth System of Higher Education Adaptive optical laser beam steering through endoscope for laser surgery in kidney
JP6300739B2 (ja) * 2015-01-20 2018-03-28 浜松ホトニクス株式会社 画像取得装置および画像取得方法
JP6539052B2 (ja) * 2015-01-20 2019-07-03 浜松ホトニクス株式会社 画像取得装置および画像取得方法
JP2016176877A (ja) * 2015-03-23 2016-10-06 横河電機株式会社 光学式センサおよび光学式センサを用いた測定方法
JP6516554B2 (ja) * 2015-05-15 2019-05-22 浜松ホトニクス株式会社 変調パターン算出装置、光制御装置、変調パターン算出方法および変調パターン算出プログラム
JP6516555B2 (ja) * 2015-05-15 2019-05-22 浜松ホトニクス株式会社 変調パターン算出装置、光制御装置、変調パターン算出方法および変調パターン算出プログラム
JP6630120B2 (ja) * 2015-11-06 2020-01-15 浜松ホトニクス株式会社 画像取得装置、画像取得方法、及び空間光変調ユニット
FI20165148A (fi) * 2016-02-25 2017-08-26 Arcdia Int Oy Ltd Kaksoisfotoniviritteistä fluoresenssia hyödyntävä bioaffiniteettimääritysmenetelmä
JP6722883B2 (ja) * 2016-04-01 2020-07-15 国立大学法人浜松医科大学 画像取得装置および画像取得方法
CN105929526B (zh) * 2016-06-27 2018-08-21 广东欧谱曼迪科技有限公司 一种体全息还原扫描光束的sted超分辨显微系统及显微方法
JP6882085B2 (ja) * 2016-07-05 2021-06-02 キヤノン株式会社 波面制御装置、波面制御方法、情報取得装置、プログラム、および、記憶媒体
CN107301458B (zh) * 2017-05-31 2020-08-11 重庆理工大学 基于强度传输方程的相位优化方法
CN107941763B (zh) * 2017-10-27 2020-06-30 浙江大学 一种共轴三维受激辐射损耗超分辨显微成像方法和装置
CN108132543B (zh) * 2017-12-23 2020-06-12 深圳大学 超分辨成像系统
EP3928142B1 (en) * 2019-02-22 2023-04-05 President and Fellows of Harvard College Large-scale uniform optical focus array generation with a phase spatial light modulator
DE102019110157B4 (de) 2019-04-17 2021-06-17 Leica Microsystems Cms Gmbh Fluoreszenz-Rastermikroskop und Verfahren zur Abbildung einer Probe
DE102020113998A1 (de) 2020-05-26 2021-12-02 Abberior Instruments Gmbh Verfahren, Computerprogramm und Vorrichtung zum Bestimmen von Positionen von Molekülen in einer Probe
DE102020134797B3 (de) 2020-12-23 2022-06-09 Abberior Instruments Gmbh Verfahren zum Abbilden einer interessierenden Struktur einer Probe und Mikroskop mit Array-Detektor zu dessen Durchführung

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3918044B2 (ja) * 1996-11-01 2007-05-23 浜松ホトニクス株式会社 画像形成装置
JP3691837B2 (ja) 2002-08-16 2005-09-07 株式会社林創研 バイオチップ分析装置
JP4531431B2 (ja) * 2004-04-02 2010-08-25 浜松ホトニクス株式会社 波面補償装置、波面補償方法、プログラム、及び、記録媒体
US8542421B2 (en) * 2006-11-17 2013-09-24 Celloptic, Inc. System, apparatus and method for extracting three-dimensional information of an object from received electromagnetic radiation
CN102866494A (zh) 2007-01-26 2013-01-09 纽约大学 被全息捕获三维结构的全息显微术
DE102007018048A1 (de) 2007-04-13 2008-10-16 Michael Schwertner Verfahren und Anordnung zur optischen Abbildung mit Tiefendiskriminierung
JP5259154B2 (ja) 2007-10-24 2013-08-07 オリンパス株式会社 走査型レーザ顕微鏡
JP2009300589A (ja) * 2008-06-11 2009-12-24 Nikon Corp 顕微鏡装置
JP2011128572A (ja) * 2009-12-21 2011-06-30 Olympus Corp ホログラム像投影方法およびホログラム像投影装置
US20110267663A1 (en) * 2009-12-21 2011-11-03 Olympus Corporation Holographic image projection method and holographic image projection system

Also Published As

Publication number Publication date
US20160018786A1 (en) 2016-01-21
US9740166B2 (en) 2017-08-22
DE112014001147T5 (de) 2015-11-19
CN105026916A (zh) 2015-11-04
WO2014136784A1 (ja) 2014-09-12
JPWO2014136784A1 (ja) 2017-02-16
CN105026916B (zh) 2017-07-14

Similar Documents

Publication Publication Date Title
JP6276749B2 (ja) 蛍光受光装置および蛍光受光方法
JP5802110B2 (ja) 光変調制御方法、制御プログラム、制御装置、及びレーザ光照射装置
JP5802109B2 (ja) 光変調制御方法、制御プログラム、制御装置、及びレーザ光照射装置
CN106133580A (zh) 受激发射损耗显微镜装置
Paudel et al. Axial range of conjugate adaptive optics in two-photon microscopy
JP2017090590A (ja) 画像取得装置、画像取得方法、及び空間光変調ユニット
US10488640B2 (en) Image acquisition device and image acquisition method
JP6635125B2 (ja) 顕微鏡、観察方法、及び画像処理プログラム
CN109073873B (zh) 图像取得装置以及图像取得方法
JP7033123B2 (ja) 収差補正方法及び光学装置
Matsumoto et al. Correction of spherical aberration in multi-focal multiphoton microscopy with spatial light modulator
JP6772442B2 (ja) 顕微鏡装置および観察方法
US10816472B2 (en) Image acquisition device and image acquisition method
US20230069794A1 (en) Dual-mode restoration microscopy
Matsumoto et al. Modulation of the pupil function of microscope objective lens for multifocal multi-photon microscopy using a spatial light modulator

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20161222

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20180109

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20180112

R150 Certificate of patent or registration of utility model

Ref document number: 6276749

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250