JP2007199571A - 顕微鏡装置 - Google Patents

顕微鏡装置 Download PDF

Info

Publication number
JP2007199571A
JP2007199571A JP2006020401A JP2006020401A JP2007199571A JP 2007199571 A JP2007199571 A JP 2007199571A JP 2006020401 A JP2006020401 A JP 2006020401A JP 2006020401 A JP2006020401 A JP 2006020401A JP 2007199571 A JP2007199571 A JP 2007199571A
Authority
JP
Japan
Prior art keywords
light
image
optical system
illumination
diffraction grating
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2006020401A
Other languages
English (en)
Other versions
JP4844137B2 (ja
Inventor
Yumiko Ouchi
由美子 大内
Takashi Kawahito
敬 川人
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nikon Corp
Original Assignee
Nikon Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nikon Corp filed Critical Nikon Corp
Priority to JP2006020401A priority Critical patent/JP4844137B2/ja
Publication of JP2007199571A publication Critical patent/JP2007199571A/ja
Application granted granted Critical
Publication of JP4844137B2 publication Critical patent/JP4844137B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Microscoopes, Condenser (AREA)
  • Diffracting Gratings Or Hologram Optical Elements (AREA)

Abstract

【課題】高速な観察が可能な顕微鏡装置を提供する。
【解決手段】回折格子8a、8b、8cによって、標本11上に形成される格子パターンは、その格子線の方向が60°ずつずれている。照明光は。ガルバノミラーM1により、方向を選択され、レンズ7a、7b、7cのいずれかを介して、回折格子8a、8b、8cのいずれかを照明する。回折格子8a、8b、8cの面は、それぞれ、標本11の共役面22a、22b、22cに一致している。回折格子8a、8b、8cのいずれかを通して、共役面22a、22b、22cのいずれかから射出した光は、第2対物レンズ9a、9b、9cのいずれかへ入射し、平行光に変換された後、ガルバノミラーM2により反射され、対物レンズ10を介して標本11上に回折格子8の像23を形成する。
【選択図】 図7

Description

本発明は顕微鏡装置、さらに詳しくは、超解像度を有する構造化照明顕微鏡装置に関するものである。
光学顕微鏡等の結像光学系による像形成においては、結像光学系固有の伝達関数が存在し、その伝達関数により結像される物体像の特性が制限される。さらに詳しくは、伝達する光学像のフーリエ成分(空間周波数成分)の内、その伝達関数によって定まる特定の空間周波数領域のみが伝達し、残りの空間周波数成分はカットされる。
例えば、一般の光学顕微鏡においては、対物レンズの開口数(NA)で定まるカットオフ周波数と呼ばれる空間周波数fcutoff、
fcutoff=2NA/λ (ただし、λ:光の波長)
が存在し、入力した光学像のフーリエ成分の内、そのカットオフ周波数より高い空間周波数成分を結像させることはできない。
対物レンズの開口数は、対物レンズが観察物体Oより取り込める光の円錐の頂角の1/2のサイン関数に観察物体と対物レンズ前面の間の媒質の屈折率を掛け合わせたものであり、例えば空気中にある物体に対しては、開口数は1以上とならないので、カットオフ周波数は2/λ以上にはならない。したがって、空気中に置かれた光の波長の1/2より小さい周期を持つ微細構造は、一般の光学顕微鏡で解像できない。
ところが、観察物体と結像光学系の間に空間周波数を変調する手段を挿入することにより、結像光学系では伝達できない空間周波数領域の観察物体の空間周波数成分を結像に反映させることができる。ただし、その場合、結像光学系により結像された観察物体の像は変調を受けているので、その変調の回復(復調)手段を合わせて用いることにより、正しい観察物体像が形成できる。これを光学顕微鏡に適用した場合、従来のカットオフ周波数より高い空間周波数を持つ観察物体の微細構造を解像できるようになる。これを超解像と呼ぶ。
このような超解像を利用した顕微鏡装置は、生体試料から作成した固定標本などの被観察物を超解像観察するために使用されている。(特許文献1,2,非特許文献1,2など参照)。前述のように、この手法では、空間変調された照明光で被観察物の構造の空間周波数を変調し、解像限界を超える高い空間周波数の情報を顕微鏡光学系の結像に寄与させる。
但し、前述のように、超解像画像を観察するためには変調された被観察物の像(変調像)を復調する必要がある。復調の方法は大別して2種類あり、光学的な復調(非特許文献1,2参照)と、演算による復調(特許文献1,2参照)とがある。なお、光学的な復調は、回折格子などの空間変調素子を用いて変調像を再変調することによって実現する。
この他、公知技術でないが、本願の発明者等は、照明光学系中に置かれた回折格子の像を、被観察物の表面に結像させて照明を行い、前記照明光により照明された前記被観察物の像を、結像光学系により前記回折格子状に中間像として結像させ、前記回折格子を通過した前記中間像を、リレー光学系により、撮像素子上に結像させる顕微鏡装置であって、少なくとも前記回折格子から前記被観察物に至る前記照明光学系を構成する光学素子と、前記被観察物から前記回折格子に至る前記結像光学系を構成する光学素子が共用されている顕微鏡装置の発明を行い、特願2005−299329号として特許出願している(先願発明という)。
特開平11−242189号公報 米国再発行特許発明第38307号明細書 W.Lukosz,"Optical systems with resolving powers exceeding the clasical limit.II",Journal of the Optical Society of America,Vol.37,PP.932,1967 W.Lukosz and M.Marchand,Opt. Acta. 10,241,1963
以上述べた何れの方法においても、超解像が得られる方向は、回折格子の格子の長さ方向と直角な方向である。よって、2次元的な超解像を得ようとすると、回折格子の向きを変化させて、複数方向(通常は3方向)での撮像を行い、その結果を演算処理する必要がある。
このような方法を実現する手段として、最も一般的に用いられている方法は、回折格子を回転させて、それに対応する像の撮像を行う方法であり、先願発明においても、その実施の形態においてはこの方法を採用している。
しかしながら、回折格子を回転させて正確に停止する方法では、停止位置の位置決めに時間がかかるという問題点がある。特に細胞を生きたまま観察するLive Cell等の観察には、高速での撮像が必要とされ、回折格子を回転させて位置決めする方法では、実用的でないという問題点がある。
本発明はこのような事情に鑑みてなされたもので、高速な観察が可能な顕微鏡装置を提供することを課題とする。
前記課題を解決するための第1の手段は、複数の光路を含み、各光路中に各々置かれた回折格子の像を被観察物の表面に結像させて照明を行う照明光学系と、前記照明光学系により照明された前記被観察物の像を、前記回折格子上に中間像として結像させる結像光学系と、前記中間像の像を形成するリレー光学系とを備えた顕微鏡装置であって、前記複数の回折格子は、互いに格子パターンの向きが異なり、前記照明光学系は、さらに光源からの光を前記複数の光路のうちの任意の光路に切り換えて導き、その光路中に配置された回折格子へ導く第1の照明光路切り換え手段と、前記第1の照明光路切り換え手段に同期して、照明された回折格子からの光を前記被観察物の表面へ導く第2の照明光路切り換え手段とを有し、前記結像光学系は、さらに前記被観察物からの光を前記照明された回折格子へ導く第1の観察光路切り換え手段と、前記第1の観察光路切り換え手段に同期して、前記照明された回折格子からの光を前記リレー光学系へ導く第2の観察光路切り換え手段とを備えたことを特徴とする顕微鏡装置である。
前記課題を解決するための第2の手段は、前記第1の手段であって、少なくとも前記第1の照明光路切り換え手段から前記被観察物に至る前記照明光学系を構成する光学素子と、前記被観察物から第2の観察光線光路切り換え手段に至る前記結像光学系を構成する光学素子が共用されており、前記第1の照明光路切り換え手段と前記第2の観察光線光路切り換え手段が同一であり、かつ、前記第2の照明光路切り換え手段と前記第1の観察光線光路切り換え手段とが同一であることを特徴とするものである。
前記課題を解決するための第3の手段は、複数の光路を含み、各光路中に各々置かれた回折格子の像を被観察物の表面に結像させて照明を行う照明光学系と、前記照明光学系により照明された前記被観察の像を結像させる結像光学系とを備えた顕微鏡装置であって、前記複数の回折格子は、互いに格子パターンの向きが異なり、前記照明光学系は、光源からの光を前記複数の光路のうちの任意の光路に切り換えて導き、その光路中に配置された回折格子へ導く第1の照明光路切り換え手段と、前記第1の照明光路切り換え手段に同期して、照明された回折格子からの光を前記被観察物の表面へ導く第2の照明光路切り換え手段とを備えたことを特徴とする顕微鏡装置である。
前記課題を解決するための第4の手段は、前記第1の手段から第3の手段のいずれかであって、前記回折格子が、透過もしくは反射型の空間光変調素子であることを特徴とするものである。
前記課題を解決するための第5の手段は、前記第1の手段であって、前記顕微鏡装置が、前記リレー光学系によって形成された像を撮像する撮像装置と、前記被観察物の表面に結像する前記回折格子の像の格子パターンの位相を変化させる位相変調手段とを備え、前記撮像装置の撮像時間は、前記格子パターンの位相N周期分(Nは自然数)であることを特徴とするものである。
本発明によれば、高速な観察が可能な顕微鏡装置を提供することができる。
以下、本発明の実施の形態の例を説明するが、これらの実施の形態の主なものは、先願発明の実施の形態の改良であるので、まず、先願発明の実施の形態の例を説明する。図1は、先願発明の実施の形態である顕微鏡装置の概略構成図である。図1に示すとおり、顕微鏡装置には、光源1、コレクタレンズ2、レンズ3、励起フィルタ4、ダイクロイックミラー5、レンズ7、回折格子8、第2対物レンズ9、対物レンズ10、蛍光色素で標識された標本(生体標本など)11、バリアフィルタ6、レンズ12、撮像装置(CCDカメラなど)25、制御・演算装置(回路やコンピュータなど)42、画像表示装置43、アクチュエータ40、回転ステージ41が配置される。
このうち、光源1、コレクタレンズ2、レンズ3、励起フィルタ4、ダイクロイックミラー5、レンズ7、回折格子8、第2対物レンズ9、対物レンズ10が照明光学系LS1を構成しており、対物レンズ10、第2対物レンズ9、回折格子8、レンズ7、ダイクロイックミラー5、バリアフィルタ6、レンズ12が観察光学系LS2を構成している。また、対物レンズ10と第2対物レンズ9とが結像光学系LS21を構成し、レンズ7とレンズ12とがリレー光学系LS22を構成している。照明光学系LS1と観察光学系LS2とは、対物レンズ10からダイクロイックミラー5までの光路を共有している。
照明光学系LS1の光源1からの光は、コレクタレンズ2において平行光に変換され、レンズ3により瞳共役面31に光源像を形成する。その光源像31からの光は、励起フィルタ4によって波長選択されたのちダイクロイックミラー5によって偏向され、照明光学系LS1と観察光学系LS2との共通光路へ入り、レンズ7により標本11の共役面22上に集光する。共役面22から射出した光は、その共役面22に配置された回折格子8を介して第2対物レンズ9へ入射し、平行光に変換された後、対物レンズ10を介して標本11上に回折格子8の像23を形成する(このとき、対物レンズ10の後側焦点面に光源像32が形成される。)。これによって標本11上は、空間変調された照明光で照明(構造化照明)される。
ここで、回折格子8は、例えば、1次元の周期構造をもつ位相型又は振幅型の回折格子である。特に、振幅型の回折格子は波長特性が良いため、光源1に白色光源を使用できるので好ましい。光源1としては、白色光源の代わりに単一波長の光源を用いてもよいし、レーザ光源からの光を光ファイバで導き、その端面に形成される二次光源を光源1として用いてもよい。
また、構造化照明の輝度分布(回折格子8の像23の輝度分布)を正弦波状にするために、回折格子8で生じる次数2以上の余分な回折成分を除去することが望ましい。その際には、回折格子8よりも後段の適当な箇所(例えば対物レンズ10の瞳面)で除去するとよい。或いは、回折格子8の濃度分布を予め正弦波状にしておけば、余分な回折成分の発生を抑え、光量の損失を抑えることができる。
さて、構造化照明された光を励起光として標本11上では蛍光が発生する。このときに対物レンズ10側から見た標本11の構造は、構造化照明により変調されている。変調された構造には、モアレ縞が生じている。このモアレ縞は、標本11が有する微細構造と構造化照明のパターンとが成すモアレ縞であり、標本11の微細構造が、構造化照明の空間周波数の分だけ低い空間周波数帯域に変換されている。よって、解像限界を超える高い空間周波数の構造の光までもが、対物レンズ10によって捉えられることになる。
対物レンズ10によって捉えられた蛍光は、対物レンズ10及び第2対物レンズ9からなる結像光学系LS21により、共役面22上に標本11の変調像を形成する。その変調像は、その共役面22に配置された回折格子8によって再変調される。このようにして生じた再変調像では、空間周波数を変化させた標本11の構造が、元の空間周波数に戻される。この再変調像に、標本11の復調像が含まれている。
但し、この再変調像には、復調像にとって不要な回折成分が含まれている。不要な回折成分とは、標本11から射出された0次回折光に対し回折格子8で生じた±1次回折成分、標本11から射出された−1次回折光に対する0次回折成分、標本11から射出された+1次回折光に対する0次回折成分である。これらの不要な回折成分を再変調像から除去するためには、回折格子8を1周期分若しくはN周期分(Nは自然数)動かして平均化すればよい。
再変調像からの蛍光は、レンズ7を介してダイクロイックミラー5を透過した後、観察光学系LS2の単独光路へ入り、バリアフィルタ6を透過したのち、レンズ12を介して再変調像の拡大像24を形成する。つまり、回折格子8で再変調された再変調像は、レンズ7及びレンズ12からなるリレー光学系LS22によって、拡大像24へとリレーされる。この拡大像24は、撮像装置25によって撮像され、再変調像の画像データが生成される。なお、撮像装置25で撮像する場合、回折格子8を1周期若しくはN周期(Nは自然数)動かしている間、再変調像を蓄積することによって平均化すれば、復調像の画像データを得ることができる。
この画像データは、標本11を構造化照明によって超解像観察するための情報を含む。その画像データは、制御・演算装置42によって取り込まれ、演算が施されてから、画像表示装置43へと送出される。
以上、本顕微鏡装置は、標本11の共役面22から標本11までの光路を照明光学系LS1と観察光学系LS2とで完全に共通光路にすると共に、その共役面22に回折格子8を配置している。本顕微鏡装置ではこの回折格子8により、標本11の微細構造の変調を図る。そして、変調された標本11の微細構造は、この位置に配置された回折格子8により、自動的に再変調される。
なお、回折格子8は、アクチュエータ40によって格子線に直交する方向Dbへ移動可能である。この移動により、構造化照明の位相が変化する。制御・演算装置42がアクチュエータ40及び撮像装置25を制御し、1フレーム分の画像データを蓄積している間にその位相を1周期分若しくはN周期分(Nは自然数)だけ変化させることで、その画像データから、構造化照明のパターンと、再変調時に生じた不要な回折成分とを消去する。
また、回折格子8は、回転ステージ41によってアクチュエータ40と共に光軸の周りを回転可能である。この回転により、構造化照明の方向が変化する。制御・演算装置42が回転ステージ41及び撮像装置25を制御し、構造化照明の方向を複数方向に変化させる度に画像データを取得すれば、複数方向に亘り超解像観察するための情報を得ることができる。これにより、標本11の二次元の超解像観察が可能となる。
また、以上の動作に必要なプログラムは、例えばCD−ROMなどの記録媒体やインターネットを介して制御・演算装置42に予めインストールされている。
次に、本顕微鏡装置のリレー光学系LS22に必要な条件を説明する。
図2は、本顕微鏡装置における観察光学系LS2の標本11からレンズ7までの結像光束の開口数を説明する図である。なお、図2では、光束の広がりの変化をわかりやすくするために、回折格子8の像23と標本11とをずらして描き、標本11の共役面22と回折格子8とをずらして描いている。
図2に示すとおり、標本11の高い空間周波数の構造で発生した蛍光LAは射出角度が大きいため、通常は破線のとおり進行して対物レンズ10の瞳径内に入射することができない。しかし、その蛍光LAは回折格子8の像23(つまり構造化照明)により変調されるので、その射出角度が低周波数側(つまり小角度)に変化したものは、実線のとおり進行して対物レンズ10の瞳径内に入射することが可能になる。
この蛍光LAは、結像光学系LS21によって共役面22上に結像した後、回折格子8において再変調される。再変調された蛍光LA’の射出角度は、高周波側(つまり大角度)に戻されている。
このような蛍光LA’を含む結像光束を導光するためには、リレー光学系LS22の物体側開口数NA’を、予め大きく設定しておく必要がある。
特に、構造化照明の空間周波数(つまり回折格子8の格子周波数)が高いほど、その結像光束の開き角は大きくなるので、リレー光学系LS22の物体側開口数NA’も大きくする必要がある。
但し、一般に、構造化照明による超解像効果は、対物レンズ10の解像限界の2倍程度である。なぜなら、照明光学系LS1によって標本11上に投影される構造化照明の空間周波数は、対物レンズ10の解像限界が上限だからである。したがって、リレー光学系LS22の物体側開口数NA’は、或る程度大きければ十分である。
次に、制御・演算装置42の制御に関する動作を説明する。図3は、本顕微鏡装置における観察光学系LS2の標本11からレンズ7までの結像光束の開口数を説明する図である。図3に示すとおり、制御・演算装置42は、再変調像の画像データを取得するに当たり、撮像装置25の露光開始(ステップS11)から露光終了(ステップS13)までの期間に、構造化照明の位相を1周期分だけ変化させる(ステップS12)。
このようにして取得された画像データは、構造化照明の位相変化中における再変調像の時間積分であり、構造化照明の輝度分布は正弦波状なので、この画像データからは、構造化照明のパターンは消去される。また、この画像データからは、再変調時に生じた不要な回折成分も消去される。よって、この画像データは、復調像を表す。
さらに、制御・演算装置42は、構造化照明の方向を変化させてから(ステップS15)、再びステップS11〜S13の処理を行い、構造化照明のパターンの消去された別の復調像の画像データを取得する。
そして、以上のステップS11〜S13における復調像の画像データの取得処理は、構造化照明の方向が予め決められた全方向に設定されるまで(ステップS14YESとなるまで)繰り返され、構造化照明のパターンの消去された復調像の画像データが、設定された方向の数だけ取得される。
例えば、制御・演算装置42は、ステップS11〜S13の処理を、構造化照明の方向が0°,120°,240°の3方向に設定されるまで繰り返し、構造化照明のパターンの消去された3つの復調像の画像データI1,I2,I3を取得する。これらの復調像の画
像データI1,I2,I3の間では、超解像の方向が120°ずつ異なる。
次に、制御・演算装置42の演算に関する動作を説明する。
図4は、制御・演算装置42の演算に関する動作フローチャートである。ここでは、超解像の方向が120°ずつ異なる3つの復調像の画像データI1,I2,I3を取得した場
合の演算を説明する。
先ず、制御・演算装置42は、3つの復調像の画像データI1,I2,I3の各々をフー
リエ変換し、波数空間で表現された3つの復調像の画像データIk1,Ik2,Ik3を得る(ステップS21)。これら復調像の画像データIk1,Ik2,Ik3を図5(A),(B),(C)に示した。
なお、図5(A),(B),(C)において符号Ik±1は、変調された状態で(±1次回折光として)結像光学系LS21によって伝達された成分(±1次変調成分)を示し、符号Ik0は、変調されない状態で(0次回折光として)結像光学系LS21によって伝達された成分(0次変調成分)を示す。また、符号Dbは、超解像の方向(構造化照明の方
向)を示し、符号Kは、構造化照明の空間周波数を示す。
続いて、制御・演算装置42は、3つの復調像の画像データIk1,Ik2,Ik3を、図6に示すとおり波数空間上で合成し、1つの合成画像データIkを得る(ステップS22)。3つの復調像の画像データIk1,Ik2,Ik3は、互いのデータ範囲を重複させている(共通の空間周波数成分を含んでいる)ので、制御・演算装置42は、合成に当たり、重複したデータについてはそれらの平均値をとり、その平均値を合成画像データIkのデータとする。この平均によって、合成画像データIkの低周波数成分の寄与が大きくなりすぎるのを抑えることで、高周波数成分の相対的な寄与が小さくなるのを防ぐことができる。
続いて、制御・演算装置42は、合成画像データIkを逆フーリエ変換し、実空間で表現された画像データIを得る。この画像データIは、120°ずつ異なる3方向に亘る標本11の超解像画像を表現する(ステップS23)。制御・演算装置42は、この画像データIを画像表示装置43へ送出し、超解像画像を表示する。
以上、本顕微鏡装置では、図1に示したとおり標本11からの光が回折格子8で再変調され、さらに回折格子8を動かして平均化して不要な回折成分を除去することによって復調像を得ている。したがって、復調演算をしない分だけ復調像の画像データは高速に得られる。
しかも、変調と再変調とに同一の回折格子8の同一の領域が用いられるので、仮にその回折格子8に形状誤差や配置誤差があったとしても、変調のパターンと再変調のパターンとを同一にすることができる。したがって、回折格子8の形状誤差や配置誤差は、復調像の画像データに対しノイズを殆ど与えない。このことは、構造化照明の位相を変化させたときや、構造化照明の方向を変化させたときにも同様に当てはまる。したがって、本顕微鏡装置では超解像画像が高精度に得られる。
また、本顕微鏡装置では、標本11の共役面22に回折格子8を配置する都合上、その共役面2に形成された再変調像をリレーしてから撮像装置25で撮像する必要がある。しかし、本顕微鏡装置のリレー光学系LS22は、超解像に必要な情報を確実に取得することができる。
また、本顕微鏡装置では、複数の画像データを合成する際に(図4ステップS22)、それら画像データが共通して有する空間周波数成分を平均化するので、高周波数成分の減衰の少ない良好な超解像画像を得ることができる。
以下、本発明の実施の形態の例を説明するが、これらの実施の形態の基本的な構成は、図1に示した先願発明の実施の形態とほとんど同じであるので、図1と同じ部分には同じ符号を付してその説明を省略することがある。
図7は、本発明の第1の実施の形態である顕微鏡装置の概要を示す図である。顕微鏡装置には、光源1、コレクタレンズ2、レンズ3、励起フィルタ4、ダイクロイックミラー5、ガルバノミラーM1、レンズ7a〜7c、回折格子8a〜8c、ミラー31a、31c、第2対物レンズ9a〜9c、ガルバノミラーM2、対物レンズ10、蛍光色素で標識された標本(生体標本など)11、バリアフィルタ6、レンズ12、撮像装置(CCDカメラなど)25、制御・演算装置(回路やコンピュータなど)42、画像表示装置43が配置される。
このうち、光源1、コレクタレンズ2、レンズ3、励起フィルタ4、ダイクロイックミラー5、ガルバノミラーM1、レンズ7a〜7c、回折格子8a〜8c、ミラー31a、31c、第2対物レンズ9a〜9c、ガルバノミラーM2、対物レンズ10が照明光学系を構成しており、対物レンズ10、ガルバノミラーM2、第2対物レンズ9a〜9c、ミラー31a、31c、回折格子8a〜8c、レンズ7a〜7c、ガルバノミラーM1、ダイクロイックミラー5、バリアフィルタ6、レンズ12が観察光学系を構成している。また、対物レンズ10、ガルバノミラーM2、第2対物レンズ9a〜9c、ミラー31a、31cが結像光学系を構成し、レンズ7a〜7c、ガルバノミラーM1、ダイクロイックミラー5、バリアフィルタ6、レンズ12がリレー光学系を構成している。照明光学系と観察光学系とは、対物レンズ10からダイクロイックミラー5までの光路を共有している。
照明光学系の光源1からの光は、コレクタレンズ2において平行光に変換され、レンズ3により瞳共役面31に光源像を形成する。その途中で励起フィルタ4によって波長選択されたのちダイクロイックミラー5によって偏向される。そして、ガルバノミラーM1により、方向を選択され、レンズ7a、7b、7cのいずれかを介して、回折格子8a、8b、8cのいずれかを照明する。回折格子8a、8b、8cの面は、それぞれ、標本11の共役面22a、22b、22cに一致している。回折格子8a、8b、8cのいずれかを通して、共役面22a、22b、22cのいずれかから射出した光は、第2対物レンズ9a、9b、9cのいずれかへ入射し(その間に、共役面22aから射出した光は、ミラー31aにより、共役面22cから射出した光はミラー31cにより反射される)、平行光に変換された後、ガルバノミラーM2により反射され、対物レンズ10を介して標本11上に回折格子8a、8b、8cのいずれかの像23を形成する(このとき、対物レンズ10の後側焦点面に光源像32が形成される。)。これによって標本11上は、空間変調された照明光で照明(構造化照明)される。なお、ガルバノミラーM1とガルバノミラーM2は同期して駆動され、照明された回折格子8a、8b、8cのいずれかを通った光が標本11に到達するようになっている。
回折格子8a、8b、8cによって、標本11上に形成される格子パターンは、その格子線の方向が60°ずつずれている。よって、ガルバノミラーM1、M2によって光路を切り換え、回折格子8a、8b、8cを切り換えて使用することにより、図1に示す装置において、回転ステージ41により回折格子8を120°ずつ回転させて測定を行ったのと同じ効果が得られる。ガルバノミラーM1、M2の駆動は高速で行えるので、高速な測定が可能となる。
ここで、回折格子8a、8b、8cは、例えば、1次元の周期構造をもつ位相型又は振幅型の回折格子である。特に、振幅型の回折格子は波長特性が良いため、光源1に白色光源を使用できるので好ましい。光源1としては、白色光源の代わりに単一波長の光源を用いてもよいし、レーザ光源からの光を光ファイバで導き、その端面に形成される二次光源を光源1として用いてもよい。
また、構造化照明の輝度分布(回折格子8の像23の輝度分布)を正弦波状にするために、回折格子8a、8b、8cで生じる次数2以上の余分な回折成分を除去することが望ましい。例えば、回折格子8a、8b、8cが振幅型である場合は、余分な回折成分が生じやすいので、回折格子8a、8b、8cよりも後段の適当な箇所(例えば対物レンズ10の瞳面)で除去するとよい。或いは、回折格子8a、8b、8cの濃度分布を予め正弦波状にしておけば、余分な回折成分の発生を抑え、光量の損失を抑えることができる。
また、光源1を照明光学系の光軸に対してシフトして使用するとより好ましい。その場合は、光源1を、回折格子8a、8b、8cの格子パターンとそれぞれ直角な方向へ所定の量だけシフトして、回折格子8a、8b、8cによる回折光のうち、0次と1次回折光が照明光学系LS1の光軸に対して対称になるようにするとよい。そのシフト量sは、光源1から回折格子8a、8b、8cまでの光学系の合成焦点距離をfc、回折格子8a、8b、8cの1次回折角をθgとするとき、
s=fc×sin(θg/2) …(1)
となるように設定するとよい。
その理由を以下に説明する。標本上に形成する構造化照明は、使用する結像光学系の解像限界に近い、高い空間周波数であることが好ましい。すなわち回折格子8a、8b、8cの格子パターンは空間周波数が高いことが望ましい。それは変調する空間周波数が大きいほど、変調の効果が高いため超解像効果が高いからである。また、構造化照明の輝度分布は正弦波状であることが好ましい。それは、構造化照明によって回折する標本の回折次数に不要な成分が発生しないからである。
回折格子8a、8b、8cの格子パターンの空間周波数が高いと回折角が大きいため、光学系に入射する回折光束が少なくなる。しかし最低2つの回折光束を入射させないと標本面上に構造化照明のパターンを形成できない。一方、2光束の干渉でできる干渉パターンは強度分布が正弦波状である。
したがって構造化照明は、2光束干渉で形成すると都合がよい。0次光と1次光の2光束を光軸に対称に発生させて、標本11上で干渉させれば2光束干渉が実現できる。そのためには、照明光は回折格子面に対し斜めに入射する必要がある。その入射角は、回折格子の1次回折角をθgとすると、θg/2である。照明光を傾けるためには、ファイバ端を所定量シフトすればよいが、その方向は回折格子の格子パターンと直交する方向で、その量は、(1)式で表せる。(1)式は、光源1がランプ光源、レーザ光源いずれであっても、また、回折格子8a、8b、8cが位相型、濃度型のいずれであっても同じ式が当てはまる。
さて、構造化照明された光を励起光として標本11上では蛍光が発生する。このときに対物レンズ10側から見た標本11の構造は、構造化照明により変調されている。変調された構造には、モアレ縞が生じている。このモアレ縞は、標本11が有する微細構造と構造化照明のパターンとが成すモアレ縞であり、標本11の微細構造が、構造化照明の空間周波数の分だけ低い空間周波数帯域に変換されている。よって、解像限界を超える高い空間周波数の構造の光までもが、対物レンズ10によって捉えられることになる。
対物レンズ10によって捉えられた蛍光は、対物レンズ10、ガルバノミラーM2及び第2対物レンズ9からなる結像光学系により、共役面22a、22b、22cのいずれかの上に標本11の変調像を形成するが、蛍光の通る経路は照明光が通る経路と同じ(向きは逆)とされている。その変調像は、その共役面22a、22b、22cに配置された回折格子8a、8b、8cによって再変調される。このようにして生じた再変調像では、空間周波数を変化させた標本11の構造が、元の空間周波数に戻される。この再変調像に、標本11の復調像が含まれている。
但し、この再変調像には、復調像にとって不要な回折成分が含まれている。不要な回折成分とは、標本11から射出された0次回折光に対し回折格子8a、8b、8cで生じた±1次回折成分、標本11から射出された−1次回折光に対する0次回折成分、標本11から射出された+1次回折光に対する0次回折成分である。これらの不要な回折成分を再変調像から除去するためには、回折格子8を1周期分若しくはN周期分(Nは自然数)動かして平均化すればよい。
再変調像からの蛍光は、レンズ7a、7b、7cのいずれか(照明光が通っているもの)を介してガルバノミラーM1により反射され、ダイクロイックミラー5を透過した後、観察光学系の単独光路へ入り、バリアフィルタ6を透過したのち、レンズ12を介して再変調像の拡大像24を形成する。つまり、回折格子8a、8b、8cで再変調された再変調像は、レンズ7a、7b、7c及びレンズ12を主要光学要素とするリレー光学系によって、拡大像24へとリレーされる。この拡大像24は、撮像装置25によって撮像され、再変調像の画像データが生成される。なお、撮像装置25で撮像する場合、回折格子8a、8b、8cを1周期若しくはN周期(Nは自然数)動かしている間、再変調像を蓄積することによって平均化すれば、復調像の画像データを得ることができる。
この画像データは、標本11を構造化照明によって超解像観察するための情報を含む。その画像データは、制御・演算装置42によって取り込まれ、演算が施されてから、画像表示装置43へと送出される。
以上、本顕微鏡装置は、標本11の共役面22a、22b、22cから標本11までの光路を照明光学系と観察光学系とで完全に共通光路にすると共に、その共役面22a、22b、22cに回折格子8a、8b、8cを配置している。本顕微鏡装置ではこの回折格子8a、8b、8cにより、標本11の微細構造の変調を図る。そして、変調された標本11の微細構造は、この位置に配置された回折格子8a、8b、8cにより、自動的に再変調される。
なお、回折格子8a、8b、8cは、アクチュエータ(図示せず)によって格子線に直交する方向へ移動可能である。この移動により、構造化照明の位相が変化する。制御・演算装置42がアクチュエータ40及び撮像装置25を制御し、1フレーム分の画像データを蓄積している間にその位相を1周期分若しくはN周期分(Nは自然数)だけ変化させることで、その画像データから、構造化照明のパターンと、再変調時に生じた不要な回折成分とを消去する。
回折格子8a、8b、8cをSLM(空間光変調素子:Spatial Light Modulator)により構成し、その画素のオン・オフ(透過、不透過)により格子パターンを形成するようにしておけば、回折格子a、8b、8cを機械的に移動させなくても、構造化照明の位相を変化させることができるので好ましい。
以上の実施の形態は、回折格子と共役な位置に標本を置き、照明光学系により回折格子の像を標本上に作製すると共に、標本の像を同じ回折格子状に形成することによって像の復調を行う方式の顕微鏡装置に関するものであった。しかしながら、本発明は、特許文献1に記載されるような、回折格子と共役な位置に標本を置き、照明光学系により回折格子の像を標本上に作製すると共に、標本の像を撮像し、計算によって像の復調を行う方式の顕微鏡装置にも適用できる。
その例を図8に示す。図8において、図7に示された構成要素と同じ構成要素には、同じ符号を付してその説明を省略する。図8においては、光源として光ファイバLGの端面から放出される光が使用されている。その他の照明光学系は、図9に示したものとほぼ同じであるが、励起フィルタ4とダイクロイックミラーがガルバノミラーM2の後段に設けられている点が異なっている。しかしながら、この照明光学系の作用が、図7に示したものと同じであることは説明を要しないであろう。
標本11から発生する蛍光は、対物レンズ10を通してダイクロイックミラー5で偏向され、バリアフィルタ6を通して、レンズ12により、標本11の拡大像24を撮像装置25上に形成する。制御・演算装置42は、この拡大像24を取り込み、特許文献1に記載されるような演算を行って、標本11の超解像の画像を得る。
この場合も、回折格子8a、8b、8cによって、標本11上に形成される格子パターンは、その格子線の方向が60°ずつずれている。よって、ガルバノミラーM1、M2によって光路を切り換え、回折格子8a、8b、8cを切り換えて使用することにより、回折格子8を120°ずつ回転させて測定を行ったのと同じ効果が得られる。ガルバノミラーM1、M2の駆動は高速で行えるので、高速な測定が可能となる。
先願発明の実施の形態である顕微鏡装置の概略構成図である。 先願発明の実施の形態である顕微鏡装置における観察光学系LS2の標本11からレンズ7までの結像光束の開口数を説明する図である。 先願発明の実施の形態である顕微鏡装置における観察光学系LS2の標本11からレンズ7までの結像光束の開口数を説明する図である。 先願発明の実施の形態中の、制御・演算装置42の演算に関する動作フローチャートである。 図4中のステップS21を説明する図である。 図4中のステップS22を説明する図である。 本発明の第1の実施の形態である顕微鏡装置の概要を示す図である。 本発明の第2の実施の形態である顕微鏡装置の概要を示す図である。
符号の説明
1…光源、2…コレクタレンズ、3…レンズ、4…励起フィルタ、5…ダイクロイックミラー、6…バリアフィルタ、7、7a〜7c…レンズ、8、8a〜8c…回折格子、9、9a〜9c…第2対物レンズ、10…対物レンズ、11…標本、12…レンズ、22a〜22c…共役面、23…回折格子8の像、24…拡大像、25…撮像装置、31…光源像(瞳共役面)、31a,31b…ミラー、32…光源像(瞳共役面)、33…瞳共役面、42…制御・演算装置、43…画像表示装置、M1,M2…ガルバノミラー、LG…光ファイバ

Claims (5)

  1. 複数の光路を含み、各光路中に各々置かれた回折格子の像を被観察物の表面に結像させて照明を行う照明光学系と、前記照明光学系により照明された前記被観察物の像を、前記回折格子上に中間像として結像させる結像光学系と、前記中間像の像を形成するリレー光学系とを備えた顕微鏡装置であって、前記複数の回折格子は、互いに格子パターンの向きが異なり、前記照明光学系は、さらに光源からの光を前記複数の光路のうちの任意の光路に切り換えて導き、その光路中に配置された回折格子へ導く第1の照明光路切り換え手段と、前記第1の照明光路切り換え手段に同期して、照明された回折格子からの光を前記被観察物の表面へ導く第2の照明光路切り換え手段とを有し、前記結像光学系は、さらに前記被観察物からの光を前記照明された回折格子へ導く第1の観察光路切り換え手段と、前記第1の観察光路切り換え手段に同期して、前記照明された回折格子からの光を前記リレー光学系へ導く第2の観察光路切り換え手段とを備えたことを特徴とする顕微鏡装置。
  2. 少なくとも前記第1の照明光路切り換え手段から前記被観察物に至る前記照明光学系を構成する光学素子と、前記被観察物から第2の観察光線光路切り換え手段に至る前記結像光学系を構成する光学素子が共用されており、前記第1の照明光路切り換え手段と前記第2の観察光線光路切り換え手段が同一であり、かつ、前記第2の照明光路切り換え手段と前記第1の観察光線光路切り換え手段とが同一であることを特徴とする請求項1に記載の顕微鏡装置。
  3. 複数の光路を含み、各光路中に各々置かれた回折格子の像を被観察物の表面に結像させて照明を行う照明光学系と、前記照明光学系により照明された前記被観察の像を結像させる結像光学系とを備えた顕微鏡装置であって、前記複数の回折格子は、互いに格子パターンの向きが異なり、前記照明光学系は、光源からの光を前記複数の光路のうちの任意の光路に切り換えて導き、その光路中に配置された回折格子へ導く第1の照明光路切り換え手段と、前記第1の照明光路切り換え手段に同期して、照明された回折格子からの光を前記被観察物の表面へ導く第2の照明光路切り換え手段とを備えたことを特徴とする顕微鏡装置。
  4. 前記回折格子が、透過もしくは反射型の空間光変調素子であることを特徴とする請求項1から請求項3のうちいずれか1項に記載の顕微鏡装置。
  5. 前記顕微鏡装置は、前記リレー光学系によって形成された像を撮像する撮像装置と、前記被観察物の表面に結像する前記回折格子の像の格子パターンの位相を変化させる位相変調手段とを備え、前記撮像装置の撮像時間は、前記格子パターンの位相N周期分(Nは自然数)であることを特徴とする請求項1に記載の顕微鏡装置。
JP2006020401A 2006-01-30 2006-01-30 顕微鏡装置 Expired - Fee Related JP4844137B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2006020401A JP4844137B2 (ja) 2006-01-30 2006-01-30 顕微鏡装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2006020401A JP4844137B2 (ja) 2006-01-30 2006-01-30 顕微鏡装置

Publications (2)

Publication Number Publication Date
JP2007199571A true JP2007199571A (ja) 2007-08-09
JP4844137B2 JP4844137B2 (ja) 2011-12-28

Family

ID=38454231

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2006020401A Expired - Fee Related JP4844137B2 (ja) 2006-01-30 2006-01-30 顕微鏡装置

Country Status (1)

Country Link
JP (1) JP4844137B2 (ja)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2008072597A1 (ja) * 2006-12-12 2008-06-19 Nikon Corporation 顕微鏡装置及び画像処理方法
JP2009086669A (ja) * 2007-09-28 2009-04-23 Carl Zeiss Microimaging Gmbh 照明された試料の光学的捕捉のための方法および装置
WO2014017067A1 (ja) * 2012-07-27 2014-01-30 株式会社ニコン 構造化照明装置及び構造化照明顕微鏡
CN103748499A (zh) * 2011-08-22 2014-04-23 佳能株式会社 显微镜、物镜光学系统和图像获取设备
JP2015096954A (ja) * 2013-11-15 2015-05-21 株式会社ミツトヨ 投影アーティファクト抑制要素を含む構造化照明顕微鏡法光学装置
US20150253559A1 (en) * 2012-09-11 2015-09-10 Carl Zeiss Microscopy Gmbh Optical arrangement and light microscope
EP2806262A4 (en) * 2012-01-18 2015-09-23 Nikon Corp STRUCTURED LIGHTING DEVICE, LIGHTED MICROSCOPE STRUCTURED DEVICE, AND STRUCTURED LIGHTING METHOD
JP2015529347A (ja) * 2012-09-11 2015-10-05 カール ツァイス マイクロスコピー ゲーエムベーハーCarl Zeiss Microscopy Gmbh 光学系構成および光学顕微鏡
US11675175B2 (en) 2018-01-16 2023-06-13 Illumina, Inc. Multi-arm structured illumination imaging

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS61184408A (ja) * 1985-02-13 1986-08-18 Nec Corp 3次元計測方法および装置
JPH09210629A (ja) * 1996-02-02 1997-08-12 Canon Inc 面位置検出装置及びそれを用いたデバイスの製造方法
JPH11242189A (ja) * 1997-12-25 1999-09-07 Olympus Optical Co Ltd 像形成法、像形成装置
JP2004170977A (ja) * 2002-11-15 2004-06-17 Carl Zeiss Jena Gmbh 分解能の深度で試料を光学的に把握する方法および配置

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS61184408A (ja) * 1985-02-13 1986-08-18 Nec Corp 3次元計測方法および装置
JPH09210629A (ja) * 1996-02-02 1997-08-12 Canon Inc 面位置検出装置及びそれを用いたデバイスの製造方法
JPH11242189A (ja) * 1997-12-25 1999-09-07 Olympus Optical Co Ltd 像形成法、像形成装置
JP2004170977A (ja) * 2002-11-15 2004-06-17 Carl Zeiss Jena Gmbh 分解能の深度で試料を光学的に把握する方法および配置

Cited By (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7969652B2 (en) 2006-12-12 2011-06-28 Nikon Corporation Microscope device and image processing method
WO2008072597A1 (ja) * 2006-12-12 2008-06-19 Nikon Corporation 顕微鏡装置及び画像処理方法
JP2009086669A (ja) * 2007-09-28 2009-04-23 Carl Zeiss Microimaging Gmbh 照明された試料の光学的捕捉のための方法および装置
CN103748499A (zh) * 2011-08-22 2014-04-23 佳能株式会社 显微镜、物镜光学系统和图像获取设备
EP2806262A4 (en) * 2012-01-18 2015-09-23 Nikon Corp STRUCTURED LIGHTING DEVICE, LIGHTED MICROSCOPE STRUCTURED DEVICE, AND STRUCTURED LIGHTING METHOD
US10222599B2 (en) 2012-01-18 2019-03-05 Nikon Corporation Structured illuminating apparatus, structured illuminating microscopy apparatus, and structured illuminating method
US10802259B2 (en) 2012-01-18 2020-10-13 Nikon Corporation Structured illuminating apparatus, structured illuminating microscopy apparatus, and structured illuminating method
WO2014017067A1 (ja) * 2012-07-27 2014-01-30 株式会社ニコン 構造化照明装置及び構造化照明顕微鏡
JP5915748B2 (ja) * 2012-07-27 2016-05-11 株式会社ニコン 構造化照明装置及び構造化照明顕微鏡
US20150253559A1 (en) * 2012-09-11 2015-09-10 Carl Zeiss Microscopy Gmbh Optical arrangement and light microscope
JP2015527618A (ja) * 2012-09-11 2015-09-17 カール ツァイス マイクロスコピー ゲーエムベーハーCarl Zeiss Microscopy Gmbh 光学装置および光学顕微鏡
JP2015529347A (ja) * 2012-09-11 2015-10-05 カール ツァイス マイクロスコピー ゲーエムベーハーCarl Zeiss Microscopy Gmbh 光学系構成および光学顕微鏡
US10133046B2 (en) 2012-09-11 2018-11-20 Carl Zeiss Microscopy Gmbh Optical arrangement and light microscope
DE102012017920B4 (de) 2012-09-11 2023-11-30 Carl Zeiss Microscopy Gmbh Optikanordnung und Lichtmikroskop
DE102012017922B4 (de) 2012-09-11 2024-03-14 Carl Zeiss Microscopy Gmbh Optikanordnung und Lichtmikroskop
JP2015096954A (ja) * 2013-11-15 2015-05-21 株式会社ミツトヨ 投影アーティファクト抑制要素を含む構造化照明顕微鏡法光学装置
US11675175B2 (en) 2018-01-16 2023-06-13 Illumina, Inc. Multi-arm structured illumination imaging

Also Published As

Publication number Publication date
JP4844137B2 (ja) 2011-12-28

Similar Documents

Publication Publication Date Title
JP4831072B2 (ja) 顕微鏡装置
JP2007199572A (ja) 顕微鏡装置
JP4835750B2 (ja) 顕微鏡装置
JP4844137B2 (ja) 顕微鏡装置
JP5136422B2 (ja) 顕微鏡装置及び画像処理方法
JP2007199397A (ja) 顕微鏡装置
EP2781943B1 (en) Sample observation device for generating super resolution image
JP5452713B2 (ja) 構造化照明光学系および構造化照明顕微鏡装置
US20100135547A1 (en) Optical sectioning microscopy
JP5915748B2 (ja) 構造化照明装置及び構造化照明顕微鏡
JPWO2015008415A1 (ja) 構造化照明装置及び構造化照明顕微鏡装置
US20150124073A1 (en) Illumination optical system and microscope
JPWO2016199179A1 (ja) 構造化照明顕微鏡システム、方法及びプログラム
JP2007279287A (ja) 構造化照明光学系、及びそれを備えた構造化照明顕微鏡
JP6137324B2 (ja) 照明装置及び構造化照明顕微鏡装置
JP2015230439A (ja) 照明光学系、顕微鏡装置、及び照明方法
JP6409260B2 (ja) 構造化照明装置及び構造化照明顕微鏡装置
JP6286982B2 (ja) 構造化照明顕微鏡装置
JP2002196253A (ja) 干渉縞投影光学系及びこの光学系を用いた顕微鏡

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20080620

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20110714

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20110913

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20110926

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20141021

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Ref document number: 4844137

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20141021

Year of fee payment: 3

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees