JP2017090591A - 画像取得装置、画像取得方法、及び空間光変調ユニット - Google Patents

画像取得装置、画像取得方法、及び空間光変調ユニット Download PDF

Info

Publication number
JP2017090591A
JP2017090591A JP2015218528A JP2015218528A JP2017090591A JP 2017090591 A JP2017090591 A JP 2017090591A JP 2015218528 A JP2015218528 A JP 2015218528A JP 2015218528 A JP2015218528 A JP 2015218528A JP 2017090591 A JP2017090591 A JP 2017090591A
Authority
JP
Japan
Prior art keywords
phase
region
light
phase pattern
predetermined direction
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2015218528A
Other languages
English (en)
Other versions
JP6630120B2 (ja
Inventor
優 瀧口
Masaru Takiguchi
優 瀧口
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hamamatsu Photonics KK
Original Assignee
Hamamatsu Photonics KK
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hamamatsu Photonics KK filed Critical Hamamatsu Photonics KK
Priority to JP2015218528A priority Critical patent/JP6630120B2/ja
Priority to EP16861845.2A priority patent/EP3373060B1/en
Priority to US15/772,844 priority patent/US20180313759A1/en
Priority to CN201680063250.7A priority patent/CN108351503B/zh
Priority to PCT/JP2016/077687 priority patent/WO2017077776A1/ja
Publication of JP2017090591A publication Critical patent/JP2017090591A/ja
Application granted granted Critical
Publication of JP6630120B2 publication Critical patent/JP6630120B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/62Systems in which the material investigated is excited whereby it emits light or causes a change in wavelength of the incident light
    • G01N21/63Systems in which the material investigated is excited whereby it emits light or causes a change in wavelength of the incident light optically excited
    • G01N21/64Fluorescence; Phosphorescence
    • G01N21/645Specially adapted constructive features of fluorimeters
    • G01N21/6456Spatial resolved fluorescence measurements; Imaging
    • G01N21/6458Fluorescence microscopy
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/01Arrangements or apparatus for facilitating the optical investigation
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/62Systems in which the material investigated is excited whereby it emits light or causes a change in wavelength of the incident light
    • G01N21/63Systems in which the material investigated is excited whereby it emits light or causes a change in wavelength of the incident light optically excited
    • G01N21/64Fluorescence; Phosphorescence
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B21/00Microscopes
    • G02B21/06Means for illuminating specimens
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B21/00Microscopes
    • G02B21/36Microscopes arranged for photographic purposes or projection purposes or digital imaging or video purposes including associated control and data processing arrangements
    • G02B21/361Optical details, e.g. image relay to the camera or image sensor
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B21/00Microscopes
    • G02B21/36Microscopes arranged for photographic purposes or projection purposes or digital imaging or video purposes including associated control and data processing arrangements
    • G02B21/365Control or image processing arrangements for digital or video microscopes
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N2201/00Features of devices classified in G01N21/00
    • G01N2201/06Illumination; Optics
    • G01N2201/063Illuminating optical parts
    • G01N2201/0635Structured illumination, e.g. with grating
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B21/00Microscopes
    • G02B21/16Microscopes adapted for ultraviolet illumination ; Fluorescence microscopes
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B21/00Microscopes
    • G02B21/36Microscopes arranged for photographic purposes or projection purposes or digital imaging or video purposes including associated control and data processing arrangements
    • G02B21/365Control or image processing arrangements for digital or video microscopes
    • G02B21/367Control or image processing arrangements for digital or video microscopes providing an output produced by processing a plurality of individual source images, e.g. image tiling, montage, composite images, depth sectioning, image comparison
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B26/00Optical devices or arrangements for the control of light using movable or deformable optical elements
    • G02B26/06Optical devices or arrangements for the control of light using movable or deformable optical elements for controlling the phase of light

Landscapes

  • Physics & Mathematics (AREA)
  • Analytical Chemistry (AREA)
  • General Physics & Mathematics (AREA)
  • Chemical & Material Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Optics & Photonics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Biochemistry (AREA)
  • General Health & Medical Sciences (AREA)
  • Immunology (AREA)
  • Pathology (AREA)
  • Multimedia (AREA)
  • Engineering & Computer Science (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Microscoopes, Condenser (AREA)

Abstract

【課題】構成を簡易化できる画像取得装置、画像取得方法、及び空間光変調ユニットを提供する。
【解決手段】画像取得装置1は、光L1を出力する光源11と、二次元に配列された複数の画素を有し、光源11から出力された光L1の位相を複数の画素毎に変調する空間光変調器13と、空間光変調器13で変調された光L1を観察対象物Sに照射する対物レンズ16と、観察対象物Sからの光L1を撮像する光検出器18と、複数の画素それぞれに対応する位相値が二次元に分布する位相パターンに従って複数の画素毎の位相変調量を制御する制御部19と、を備える。位相パターンは、所定の基本位相パターンに基づいて生成された位相パターンである。基本位相パターンは、所定の方向に沿って連続的に位相値が増加する第1の領域と、第1の領域と対向し、所定の方向に沿って連続的に位相値が減少する第2の領域と、を有する。
【選択図】図1

Description

本発明は、画像取得装置、画像取得方法、及び空間光変調ユニットに関する。
従来、観察対象物に縞状の光(構造化照明光)を照射し、それに伴って観察対象物から発せられる蛍光又は反射光等を撮像することで画像を取得する構造化照明顕微鏡がある(例えば、下記特許文献1,2又は下記非特許文献1,2参照)。これらの構造化照明顕微鏡は、例えば、回折格子と、回折格子を並進させる並進機構及び/又は回折格子を回動させる回動機構等とを備え、それらの機構により構造化照明光の位相及び縞の方向が変更可能となっている。そして、構造化照明光の位相及び縞の方向を変えて複数の画像を取得し、それらの画像に基づいて所定の演算を行うことで、解像限界を超えた高い解像度を有する超解像画像が構築可能となっている。
特開2015−99177号公報 特開平11−242189号公報
Shwetadwip Chowdhury, Al-HafeezDhalla, and Joseph Izatt, "Structured oblique illumination microscopy forenhanced resolution imaging of non-fluorescent, coherently scattering sample",1 August 2012/ Vol.3, No.8/ BIOMEDICAL OPTICS EXPRESS pp.1841-1854 Thorsten Lang, Silvio O. Rizzoli,"Membrane Protein Clusters at Nanoscale Resolution: More Than PrettyPictures", 1 April 2010/ Vol.25, No. 2/ PHYSIOLOGY, pp.116-124
上記のような構造化照明顕微鏡は、回折格子の並進機構及び/又は回動機構等を備え、それらの機構により構造化照明光の位相及び縞の方向が変更可能となっている。そのため、装置構成が複雑化するおそれがある。
そこで、本発明は、構成を簡易化できる画像取得装置、画像取得方法、及び空間光変調ユニットを提供することを目的とする。
本発明の一側面に係る画像取得装置は、構造化照明光を照射して観察対象物の画像を取得する画像取得装置であって、光を出力する光源と、二次元に配列された複数の画素を有し、光源から出力された光の位相を複数の画素毎に変調する空間光変調器と、空間光変調器で変調された光を観察対象物に照射する対物レンズと、観察対象物からの光を撮像する光検出器と、複数の画素それぞれに対応する位相値が二次元に分布する位相パターンに従って複数の画素毎の位相変調量を制御する制御部と、を備え、位相パターンは、所定の基本位相パターンに基づいて生成された位相パターンであり、基本位相パターンは、所定の方向に沿って連続的に位相値が増加する第1の領域と、所定の方向において第1の領域と対向し、所定の方向に沿って連続的に位相値が減少する第2の領域と、を有する。
この画像取得装置では、所定の方向に沿って連続的に位相値が増加する第1の領域と、所定の方向に沿って連続的に位相値が減少する第2の領域と、を有する基本位相パターンに基づいて位相パターンが算出される。この位相パターンに従って空間光変調器で光を変調することにより、対物レンズから観察対象物に対して縞状の光を照射することが可能となる。この画像取得装置では、空間光変調器に入力する位相パターンを変更することによって、生成される縞状の光の位相及び縞の方向を変更することができる。そのため、従来技術のように縞状の光の位相及び縞の方向を変更するための可動機構を設ける必要がなく、それらを省略することができる。よって、この画像取得装置によれば、構成を簡易化することができる。
本発明の一側面に係る画像取得装置においては、第1の領域では、位相値は所定の方向に沿って直線的に増加し、第2の領域では、位相値は所定の方向に沿って直線的に減少していてもよい。これによれば、基本位相パターンが単純化されるため、縞状の光を生成するのに複雑な光学素子等を用いる必要がなく、構成を一層簡易化することができる。
本発明の一側面に係る画像取得装置では、基本位相パターンは、所定の方向における中心を通り且つ所定の方向と直交する直線に関して線対称となっていてもよい。これによれば、対物レンズの光軸方向(深さ方向)に伸長された縞状の光を得ることができる。
本発明の一側面に係る画像取得装置では、基本位相パターンは、所定の方向における中心を通り且つ所定の方向と直交する直線に関して非線対称となっていてもよい。これによれば、縞状の光における縞の発生位置や深さ、伸長量を調整することができる。
本発明の一側面に係る画像取得装置では、第1の領域と第2の領域とは、互いに隣接し、その境界において位相値が連続していてもよい。これによれば、基本位相パターンが単純化されるため、縞状の光を生成するのに複雑な光学素子等を用いる必要がなく、構成をより一層簡易化することができる。
本発明の一側面に係る画像取得装置では、基本位相パターンは、位相値が一定である第3の領域を更に有していてもよい。これによれば、対物レンズの光軸方向に沿って構造化された三次元の構造化照明光を生成することが可能となる。この構造化照明光を用いることで、三次元の超解像画像を構築することが可能となる。
本発明の一側面に係る画像取得装置では、第3の領域は、所定の方向において第1の領域と第2の領域との間に配置されていてもよい。本発明の一側面に係る画像取得装置では、基本位相パターンは、2つの第1の領域と、2つの第2の領域と、2つの第3の領域と、を有し、2つの第3の領域の一方は、所定の方向において2つの第1の領域の間に配置され、2つの第3の領域の他方は、所定の方向において2つの第2の領域の間に配置されていてもよい。本発明の一側面に係る画像取得装置では、基本位相パターンは、2つの第3の領域を有し、2つの第3の領域の一方は、第1の領域に対して所定の方向において第2の領域と反対側に配置され、2つの第3の領域の他方は、第2の領域に対して所定の方向において第1の領域と反対側に配置されていてもよい。これらによれば、基本位相パターンが単純化されるため、縞状の光を生成するのに複雑な光学素子等を用いる必要がなく、構成をより一層簡易化することができる。
本発明の一側面に係る画像取得装置では、位相パターンは、回折格子状の回折格子パターンと基本位相パターンとが重畳された位相パターンであってもよい。これによれば、回折格子素子を設けることなく、照明光の位相を回折格子状とすることができる。そのため、構成をより一層簡易化することができる。
本発明の一側面に係る画像取得装置では、位相パターンは、レンズ状のレンズパターンと基本位相パターンとが重畳された位相パターンであってもよい。これによれば、レンズ素子を設けることなく、照明光の位相をレンズ状とすることができる。そのため、構成をより一層簡易化することができる。
本発明の一側面に係る画像取得方法は、構造化照明光を照射して観察対象物の画像を取得する画像取得方法であって、二次元に配列された複数の画素を有する空間光変調器により、光源から出力された光の位相を複数の画素毎に変調する第1のステップと、空間光変調器で変調された光を観察対象物に照射し、観察対象物からの光を撮像する第2のステップと、を含み、第1のステップでは、所定の基本位相パターンに基づいて生成され、複数の画素それぞれに対応する位相値が二次元に分布する位相パターンに従って複数の画素毎の位相変調量を制御し、基本位相パターンは、所定の方向に沿って連続的に位相値が増加する第1の領域と、所定の方向において第1の領域と対向し、所定の方向に沿って連続的に位相値が減少する第2の領域と、を有する。
この画像取得方法では、所定の方向に沿って連続的に位相値が増加する第1の領域と、所定の方向に沿って連続的に位相値が減少する第2の領域と、を有する基本位相パターンに基づいて位相パターンを算出する。この位相パターンに従って空間光変調器で照明光を変調することにより、観察対象物に対して縞状の光を照射することが可能となる。この画像取得方法では、空間光変調器に入力する位相パターンを変更することによって、生成される縞状の光の位相及び縞の方向を変更することができる。そのため、従来技術のように縞状の光の位相及び縞の方向を変更するための可動機構を設ける必要がなく、それらを省略することができる。よって、この画像取得方法によれば、構成を簡易化することができる。
本発明の一側面に係る空間光変調ユニットは、構造化照明顕微鏡に用いられる空間光変調ユニットであって、二次元に配列された複数の画素を有し、入力された光の位相を複数の画素毎に変調して変調後の光を出力する空間光変調器と、複数の画素それぞれに対応する位相値が二次元に分布する位相パターンに従って複数の画素毎の位相変調量を制御する制御部と、を備え、位相パターンは、所定の基本位相パターンに基づいて生成された位相パターンであり、基本位相パターンは、所定の方向に沿って連続的に位相値が増加する第1の領域と、所定の方向において第1の領域と対向し、所定の方向に沿って連続的に位相値が減少する第2の領域と、を有する。
この空間光変調ユニットでは、所定の方向に沿って連続的に位相値が増加する第1の領域と、所定の方向に沿って連続的に位相値が減少する第2の領域と、を有する基本位相パターンに基づいて位相パターンを算出する。この位相パターンに従って空間光変調器で照明光を変調することにより、観察対象物に対して縞状の光を照射することが可能となる。この空間光変調ユニットでは、空間光変調器に入力する位相パターンを変更することによって、生成される縞状の光の位相及び縞の方向を変更することができる。そのため、従来技術のように縞状の光の位相及び縞の方向を変更するための可動機構を設ける必要がなく、それらを省略することができる。よって、この空間光変調ユニットを用いた構造化照明顕微鏡によれば、構成を簡易化することができる。
本発明によれば、構成を簡易化できる画像取得装置、画像取得方法、及び空間光変調ユニットを提供できる。
本発明の画像取得装置の一実施形態である構造化照明顕微鏡の構成を示すブロック図である。 図1のライトシート顕微鏡で用いられる基本位相パターンを示す図である。 縞状の照明光が生成される様子を説明する概念図である。 生成された縞状の照明光を示す概念図である。 超解像画像の構築手法を説明する概念図である。 超解像画像の構築手法を説明する概念図である。 基本位相パターンの第1の変形例を示す図である。 第1変形例の基本位相パターンを用いて縞状の光が生成される様子を説明する概念図である。 基本位相パターンの第2〜第4の変形例を示す図である。 回折格子パターンが基本位相パターンに重畳される様子を説明する図である。 レンズパターンが基本位相パターンに重畳される様子を説明する図である。 基本位相パターンの第5〜第7の変形例を示す図である。 第5〜第7変形例の基本位相パターンによって生成される縞状の照明光を示す概念図である。 基本位相パターンの第8〜第10の変形例を示す図である。
以下、本発明の画像取得装置及び画像取得方法に係る実施形態について、図面を参照しつつ詳細に説明する。なお、以下の説明において、同一又は相当要素には同一符号を用い、重複する説明は省略する。
図1に示される構造化照明顕微鏡(画像取得装置)1は、試料(観察対象物)Sの表面に照明光L1を照射し、それに伴って試料Sから発せられる蛍光又は反射光等の検出光L2を撮像することで、試料Sの画像を取得する装置である。試料Sに照射される照明光L1は、所定の周期構造をもった縞状の光(構造化照明光)となっている。構造化照明顕微鏡1では、後述するように、構造化照明光の位相及び縞の方向を変えて複数の画像を取得し、それらの画像に基づいて所定の演算を行うことで、解像限界を超えた高い解像度を有する超解像画像を構築することが可能となる。
観察対象物となる試料Sは、例えば、蛍光色素又は蛍光遺伝子等の蛍光物質を含む細胞又は生体等のサンプルである。また、試料Sは、半導体デバイス又はフィルム等のサンプルであってもよい。試料Sは、所定の波長域の光(励起光又は照明光)が照射された場合に、例えば蛍光等の検出光L2を発する。試料Sは、例えば、少なくとも照明光L1及び検出光L2に対する透過性を有するホルダ内に収容されている。このホルダは、例えばステージ上に保持されている。
図1に示されるように、構造化照明顕微鏡1は、光源11と、コリメータレンズ12と、空間光変調器(SLM:Spatial Light Modulator)13と、第1の光学系14と、ダイクロイックミラー15と、対物レンズ16と、第2の光学系17と、光検出器18と、制御部19と、を備えている。
光源11は、試料Sを励起させる波長を含む照明光L1を出力する。光源11は、例えば、コヒーレント光又はインコヒーレント光を出射する。コヒーレント光源としては、例えば、レーザダイオード(LD)といったレーザ光源等が挙げられる。インコヒーレント光源としては、例えば、発光ダイオード(LED)、スーパールミネッセントダイオード(SLD)又はランプ系光源等が挙げられる。レーザ光源としては、連続波(Continuous Wave)を発振する光源が好ましく、超短パルス光等のパルス光を発振する光源が用いられてもよい。パルス光を発振する光源としては、パルス光を出力する光源と、光シャッタ又はパルス変調用のAOM(Acousto-Optic Modulator)とを組み合わせたユニットが用いられてもよい。光源11は、複数の波長域を含む照明光L1を出力するように構成されてもよい。この場合、音響光学可変フィルタ(Acousto-Optic Tunable Filter)等の光学フィルタにより照明光L1の波長の一部を選択的に透過させてもよい。
コリメータレンズ12は、光源11から出力された照明光L1を平行化し、平行化された照明光L1を出力する。SLM13は、二次元に配列された複数の画素を有し、光源11から出力された照明光L1の位相を当該複数の画素毎に変調する位相変調型の空間光変調器である。SLM13は、コリメータレンズ12から入射された照明光L1を変調し、変調された照明光L1を第1の光学系14に向けて出力する(第1のステップ)。SLM13は、例えば透過型又は反射型に構成されている。図1では、透過型のSLM13が示されている。SLM13は、例えば、屈折率変化材料型SLM(例えば、LCOS(Liquid Crystal on Silicon)型SLM、LCD(LiquidCrystal Display))、可変鏡型SLM(例えば、Segment Mirror型SLM、Continuous Deformable Mirror型SLM)、又は電気アドレス型液晶素子若しくは光アドレス型液晶素子を用いたSLM等である。SLM13は、制御部19のコントローラ21に電気的に接続されており、空間光変調ユニットを構成している。SLM13は、制御部19のコントローラ21によりその駆動が制御される。制御部19によるSLM13の制御の詳細については後述する。
第1の光学系14は、SLM13から出力された照明光L1が対物レンズ16に導光されるように、SLM13と対物レンズ16とを光学的に結合している。ここでの第1の光学系14は、SLM13からの照明光L1を対物レンズ16の瞳で集光させるレンズ14aを有している。
ダイクロイックミラー15は、照明光L1と検出光L2とを分離するための光学素子である。ダイクロイックミラー15は、例えば、励起波長の照明光L1を透過し、蛍光波長の検出光L2を反射するように構成されている。また、ダイクロイックミラー15の代わりに偏光ビームスプリッタを用いてもよい。なお、ダイクロイックミラー15の前後の光学系(例えば、第1の光学系14及び第2の光学系17)、又は適用する顕微鏡の種類によっては、ダイクロイックミラー15は、照明光L1を反射し、蛍光波長の検出光L2を透過するように構成されていてもよい。
対物レンズ16は、SLM13で変調された照明光L1を集光して試料Sに照射すると共に、それに伴って試料Sから発せられる検出光L2を導光する(第2のステップ)。対物レンズ16は、ピエゾアクチュエータ又はステッピングモータ等の駆動素子により、その光軸に沿って移動可能に構成されている。これにより、照明光L1の集光位置、及び検出光L2の検出のための焦点位置が調整可能となっている。
第2の光学系17は、対物レンズ16から導光された検出光L2が光検出器18で結像されるように、対物レンズ16と光検出器18とを光学的に結合している。第2の光学系17は、対物レンズ16からの検出光L2を光検出器18の受光面で結像させるレンズ17aを有している。
光検出器18は、対物レンズ16により導光されて受光面で結像された検出光L2を撮像する(第2のステップ)。光検出器18は、例えば、CCDイメージセンサ又はCMOSイメージセンサ等のエリアイメージセンサである。
制御部19は、プロセッサ及びメモリ等を含むコンピュータ20及びプロセッサ及びメモリ等を含むコントローラ21により構成されている。コンピュータ20は、例えば、パーソナルコンピュータあるいはスマートデバイスであり、プロセッサにより、対物レンズ16、及び光検出器18等の動作を制御し、各種の制御を実行する。
コントローラ21は、コンピュータ20と電気的に接続され、図2に示されるような二次元の位相パターンPに従ってSLM13における複数の画素毎の位相変調量を制御する。位相パターンPは、二次元平面上の位置に関する位相値のパターンであり、位相パターンPにおける各位置は、SLM13の複数の画素に対応している。位相パターンPの位相値は、0〜2πラジアンの間で規定されている。図2では、色の濃さによって位相パターンPの各部における位相値が表されている。なお、位相パターンPの位相値の上限は、2πラジアンよりも大きくてもよい。
コントローラ21は、SLM13の各画素について、位相パターンPにおける当該画素に対応する位置の位相値に従って当該画素の位相変調量を制御する。具体的には、例えば、コントローラ21内には、DVI(Digital Video Interface)等のデジタルデータとして入力される位相パターンPの位相値を各画素に印加される駆動電圧値に変換するD/A変換部(デジタル−アナログ変換器)が設けられている。コンピュータ20からコントローラ21に位相パターンPが入力されると、コントローラ21は、D/A変換部により位相パターンPの位相値を駆動電圧値に変換し、SLM13に駆動電圧値を入力する。SLM13は、入力された駆動電圧値に応じて各画素に電圧を印加する。なお、例えば、SLM13がD/A変換部を有し、コントローラ21が位相パターンPに応じたデジタルデータをSLM13に入力してもよい。この場合、SLM13のD/A変換部で位相パターンPの位相値を駆動電圧値に変換する。また、D/A変換を行わず、SLM13がコントローラ21から出力されたデジタル信号に基づいて各画素に印加される電圧値を制御してもよい。
位相パターンPは、制御部19のコンピュータ20により、所定の基本位相パターン31に基づいて算出される。基本位相パターン31は、例えば、コンピュータ20のメモリに予め記憶されている。基本位相パターン31に基づいて算出された位相パターンPに従ってSLM13で照明光L1を変調することで、対物レンズ16から縞状の照明光L1を照射することが可能となる。後述するように、位相パターンPは、基本位相パターン31に他のパターンを更に重畳することで算出される場合もあるが、以下では、基本位相パターン31がそのまま位相パターンPとして用いられる場合について説明する。
図2に示されるように、基本位相パターン31は、例えば矩形状の範囲内に設定されている。基本位相パターン31は、所定の方向D1に沿って連続的に位相値が増加する矩形状の第1の領域32と、方向D1において第1の領域32と対向し、方向D1に沿って連続的に位相値が減少する矩形状の第2の領域33と、を有している。すなわち、第1の領域32と第2の領域33とでは、位相値が増減する方向が互いに反対になっている。なお、ある領域において「連続的に位相値が増加する」とは、当該領域の全体に亘って位相値が途切れることなく連続していることを意味する。また、位相値が0ラジアンである場合と位相値が2πラジアンである場合とは同じ状態を意味しており、位相値が0ラジアンと2πラジアンとの間を跨いで変化したとしても位相値は連続している。
第1の領域32では、位相値は方向D1に沿って直線的に増加している。第2の領域33では、位相値は方向D1に沿って直線的に減少している。第1の領域32及び第2の領域33のいずれにおいても、位相値は2πラジアンだけ変化している。すなわち、第1の領域32における位相値の傾き(増加の割合)の絶対値と第2の領域33における位相値の傾き(減少の割合)の絶対値とは、等しくなっている。第1の領域32及び第2の領域33のいずれにおいても、方向D1と直交する方向D2に沿っては、位相値が一定となっている。第1の領域32と第2の領域33とは、互いに隣接し、その境界において位相値が連続している。この例では、境界における位相値は0ラジアンとなっている。基本位相パターン31は、方向D1における中心を通り且つ方向D1と直交する直線(中心線)Cに関して線対称となっている。この例では、第1の領域32と第2の領域33の境界は中心線C上に位置している。
図3は、基本位相パターン31に従ってSLM13で照明光L1が変調されることで縞状の照明光L1が生成される様子を説明する概念図である。図3(a)は、方向D2に対応する方向d2から見た場合の照明光L1の光路を示す図であり、図3(b)は、方向D1に対応する方向d1から見た場合の照明光L1の光路を示す図である。図3(a)では、第1の領域32に入射する照明光L1の光路の例として、対物レンズ16の光軸Xからの距離が小さい順に3つの照明光A1,B1,C1が示されている。また、第2の領域33に入射する照明光L1の光路の例として、光軸Xからの距離が小さい順に3つの照明光A2,B2,C2が示されている。
図3(a)に示されるように、照明光A1,A2は、SLM13でその位相が所定量だけ遅らせられる。照明光B1,B2では、SLM13での位相の遅れ量が照明光A1,A2よりも大きくなる。照明光C1,C2では、SLM13での位相の遅れ量が照明光A1,A2よりも小さくなり、位相はSLM13でほぼ変化しない。図3(b)に示されるように、方向d1から見た場合には、照明光L1の位相はSLM13で変化しない。以上により、図3の直線Y1に沿う位置には、図4に示されるような縞状の照明光L1が生成される。この例では、縞状の照明光L1は、光軸Xと直交する平面に沿って生成される。
構造化照明顕微鏡1では、SLM13に入力される位相パターンPを変更することで、生成される縞状の照明光L1の位相及び縞の方向を制御することができる。例えば、第1の領域32及び第2の領域33における位相値のオフセット値(初期位相値)を変更することにより、生成される縞状の照明光L1の位相を変更することができる。また、例えば、第1の領域32及び第2の領域33において位相値が変化する方向D1の角度を変更することにより、生成される照明光L1の縞の方向を変更することができる。
次に、構造化照明顕微鏡1に基づく超解像画像の構築手法を説明する。構造化照明法の基本原理は、例えば下記参考文献1に記載されている。
(参考文献1)及川義明、超解像顕微鏡の技術と応用、顕微鏡Vol.47、No.4、2012
構造化照明法では、ある既知の空間周波数をもった縞状の照明光L1が試料Sに照射される。縞状の照明光L1が従来の顕微鏡で解像できないほどの微小構造に照射されると、空間周波数が低い模様(モアレ)が現れる。このとき、試料Sの微小構造の空間周波数をV1、照明光L1の空間周波数をV2、モアレの空間周波数をV3とすると、次の式(1)の関係が成り立つ。
V1=V2+V3 …(1)
ここで、V2は既知であり、モアレの空間周波数V3は画像から読み取れるので、これらV2,V3から試料Sの空間周波数V1を算出することができる。
さらに、縞状の照明光L1の位相及び縞の方向を変えて取得した画像を用いることで、従来の顕微鏡で解像可能な低周波成分とモアレに含まれる超解像成分(高周波成分)とを互いに分離することができる。例えば、図5に示されるように、互いに角度が120度ずつ異なる3つの方向を第1方向S1、第2方向S2、及び第3方向S3とすると、縞の方向が第1方向S1と一致し且つ互いに位相が異なる3つの縞状の照明光P1,P2,P3、縞の方向が第2方向S2と一致し且つ互いに位相が異なる3つの縞状の照明光Q1,Q2,Q3、及び縞の方向が第3方向S3と一致し且つ互いに位相が異なる3つの縞状の照明光R1,R2,R3の各照明光で照明した9枚の試料Sの画像が取得される。
次いで、図6に示されるように、それらの9つの画像にフーリエ変換が施され、9つの画像が周波数空間上におけるフーリエ像に変換される。次いで、フーリエ像の超解像成分が、周波数空間上において本来の空間周波数の位置に再配置される。これにより、表現される空間周波数の範囲Z1が、従来の空間周波数の範囲Z2の2倍まで拡張される。次いで、再配置により得られた像に逆フーリエ変換が施される。以上により、実空間上の超解像画像を構築することができる。
以上説明したように、構造化照明顕微鏡1では、方向D1に沿って連続的に位相値が増加する第1の領域32と、方向D1に沿って連続的に位相値が減少する第2の領域33と、を有する基本位相パターン31に基づいて位相パターンPが算出される。この位相パターンPに従ってSLM13で照明光L1を変調することにより、対物レンズ16から試料Sに対して縞状の照明光L1を照射することが可能となる。構造化照明顕微鏡1では、SLM13に入力する位相パターンPを変更することによって、生成される縞状の照明光L1の位相及び縞の方向を変更することができる。そのため、従来技術のように縞状の照明光L1の位相及び縞の方向を変更するための可動機構を設ける必要がなく、それらを省略することができる。よって、構造化照明顕微鏡1によれば、構成を簡易化することができる。
構造化照明顕微鏡1においては、第1の領域32では、位相値は方向D1に沿って直線的に増加し、第2の領域33では、位相値は方向D1に沿って直線的に減少している。これにより、基本位相パターン31が単純化されるため、縞状の照明光L1を生成するのに複雑な光学素子等を用いる必要がなく、構成を一層簡易化することができる。すなわち、第1の領域32及び第2の領域33の少なくとも一方において位相値が方向D1に沿って直線的に増加していない場合、縞状の照明光L1を生成するための第1の光学系14又は対物レンズ16等の光学系の構成が複雑化してしまうおそれがある。対して、構造化照明顕微鏡1においては、第1の領域32及び第2の領域33のいずれにおいても位相値が方向D1に沿って直線的に増加しているため、縞状の照明光L1を生成するための光学系の構成が簡易化されている。
構造化照明顕微鏡1では、基本位相パターン31が直線Cに関して線対称となっている。これにより、対物レンズ16の光軸Xに沿う方向(深さ方向)に伸長させた縞状の光を得ることができる。また、構造化照明顕微鏡1では、基本位相パターン31が左右対称となっている(方向D2における中心を通り且つ方向D2と直交する直線に関して線対称となっている)。これにより、セルフヒーリング効果による散乱の影響を緩和することができ、試料Sの表面だけでなく深部にまで到達する照明光L1を生成することが可能となる。
構造化照明顕微鏡1では、第1の領域32と第2の領域33とが互いに隣接し、その境界において位相値が連続している。これにより、基本位相パターン31が単純化されるため、縞状の照明光L1を生成するのに複雑な光学素子等を用いる必要がなく、構成を一層簡易化することができる。
以上、本発明の好適な実施形態について説明したが、本発明は上記実施形態に限られない。例えば、図7に示される第1の変形例の基本位相パターン31Aが用いられてもよい。基本位相パターン31Aの第2の領域33Aでは、位相値が方向D1に沿って直線的に4πラジアンだけ減少している。すなわち、第1の領域32における位相値の傾きの絶対値と第2の領域33Aにおける傾きの絶対値とが異なっている。基本位相パターン31Aは、中心線Cに関して非線対称となっている。この例でも、第1の領域32と第2の領域33Aの境界は中心線C上に位置している。
このような基本位相パターン31Aが用いられた場合でも、図8に示されるように、基本位相パターン31Aに従ってSLM13で照明光L1が変調されることにより、縞状の照明光L1が生成される。この場合、図8(a)に示されるように、第2の領域33Aに入射する照明光A2では、SLM13での位相の遅れ量が第1の領域32に入射する照明光A1よりも大きくなる。同様に、照明光B2では、SLM13での位相の遅れ量が照明光B1よりも大きくなり、照明光C2では、SLM13での位相の遅れ量が照明光C1よりも大きくなる。これにより、上記実施形態の場合とは異なる図8の直線Y2に沿う位置に、縞状の照明光L1が生成される。この場合も、縞状の照明光L1は、光軸Xと直交する平面に沿って生成される。
このように、第1の変形例によっても、上記実施形態の場合と同様に、対物レンズ16から試料Sに対して縞状の照明光L1を照射することが可能となり、構成を簡易化することができる。また、第1の変形例では、基本位相パターン31が直線Cに関して非線対称となっているため、縞状の光における縞の発生位置や深さ、伸長量を調整することができる。
また、図9に示される第2の変形例の基本位相パターン31B、第3の変形例の基本位相パターン31C、又は第4の変形例の基本位相パターン31Dが用いられてもよい。基本位相パターン31Bの第1の領域33Bでは、位相値が方向D1に沿って直線的に4πラジアンだけ増加している。すなわち、第1の領域32Bにおける位相値の傾きの絶対値と第2の領域33Aにおける位相値の傾きの絶対値とが等しくなっている。
基本位相パターン31Cでは、第1の領域32と第2の領域33との方向D1における位置関係が上記実施形態の場合とは逆になっている。すなわち、上述した基本位相パターン31においては、第1の領域32では、境界(中心線C)からの距離が大きくなるほど位相値が増加し、第2の領域33では、境界からの距離が小さくなるほど位相値が減少していたのに対し、基本位相パターン31Cにおいては、第1の領域32では、境界からの距離が小さくなるほど位相値が増加し、第2の領域33では、境界からの距離が大きくなるほど位相値が減少している。
基本位相パターン31Dでは、上記第3の変形例と同様に、第1の領域32Dと第2の領域33Dとの方向D1における位置関係が上記実施形態の場合と逆になっている。さらに、基本位相パターン31Dにおいては、第1の領域32Dでは、位相値が方向D1に沿って直線的に4πラジアンだけ増加し、第2の領域33Dでは、位相値が方向D1に沿って直線的に4πラジアンだけ減少している。基本位相パターン31B〜31Dは、中心線Cに関して線対称となっている。基本位相パターン31B〜31Dでも、第1の領域32と第2の領域33Aの境界は中心線C上に位置している。
これらの基本位相パターン31B〜31Dが用いられた場合でも、上記実施形態の場合と同様に、対物レンズ16から試料Sに対して縞状の照明光L1を照射することが可能となり、構成を簡易化することができる。
また、図10に示されるように、回折格子状の回折格子パターン41を基本位相パターン31に重畳することで位相パターンPが算出されてもよい。回折格子パターン41は、方向D2において回折格子状をなしている。また、図11に示されるように、例えばフレネルレンズ等のレンズ状のレンズパターン42を基本位相パターン31に重畳することで位相パターンPが算出されてもよい。なお、回折格子パターン41又はレンズパターン42を基本位相パターン31A〜31Cに重畳することで位相パターンPが算出されてもよい。
これらの場合でも、上記実施形態の場合と同様に、対物レンズ16から試料Sに対して縞状の照明光L1を照射することが可能となり、構成を簡易化することができる。また、回折格子素子又はレンズ素子を設けることなく、照明光の位相を回折格子状又はレンズ状とすることができる。そのため、構成を一層簡易化することができる。
また、図12に示される第5の変形例の基本位相パターン31E、第6の変形例の基本位相パターン31F、又は第7の変形例の基本位相パターン31Gが用いられてもよい。基本位相パターン31E,31F,31Gは、第1の領域32E,32F,32G及び第2の領域33E,33F,33Gに加えて、位相値が一定である第3の領域34E,34F,34Gを有している。第1の領域32E,32F,32G及び第2の領域33E,33F,33Gは、上記実施形態の第1の領域32及び第2の領域33における対応する部分と同一となっている。すなわち、第1の領域32及び第2の領域33から第3の領域34E,34F,34Gを除いた部分が第1の領域32E,32F,32G及び第2の領域33E,33F,33Gとなっている。
基本位相パターン31Eは、第1の領域32Eと、第2の領域33Eと、第3の領域34Eと、を有している。第3の領域34Eは、矩形状をなし、方向D1において第1の領域32Eと第2の領域33Eとの間に配置されている。第1の領域32Eと第3の領域34Eとの境界、及び第2の領域33Eと第3の領域34Eとの境界のそれぞれにおいては、位相値が連続している。
基本位相パターン31Fは、2つの第1の領域32F,32Fと、2つの第2の領域33F,33Fと、2つの第3の領域34F,34Fと、を有している。第3の領域34F,34Fの一方は、方向D1において第1の領域32F,32Fの間に配置され、第3の領域34F,34Fの他方は、方向D1において第2の領域33F,33Fの間に配置されている。第1の領域32Fと第3の領域34Fとの領域においては、位相値が不連続となっている。第2の領域33Fと第3の領域34Fとの境界においては、位相値が連続している。
基本位相パターン31Gは、2つの第3の領域34G,34Gを有している。基本位相パターン31Gでは、第3の領域34G,34Gの一方は、第1の領域32Gに対して方向D1において第2の領域33Gと反対側に配置され、第3の領域34G,34Gの他方は、第2の領域33Gに対して方向D1において第1の領域32Gと反対側に配置されている。この例では、第3の領域34G,34Gのそれぞれは、基本位相パターン31Gにおいて方向D1の両端に配置されている。第1の領域32Gと第3の領域34Gとの境界、及び第2の領域33Gと第3の領域34Gとの境界のそれぞれにおいては、位相値が連続している。基本位相パターン31E〜31Gは、中心線Cに関して線対称となっている。
このような基本位相パターン31E〜31Gによっても、上記実施形態の場合と同様に、対物レンズ16から試料Sに対して縞状の照明光L1を照射することが可能となり、構成を簡易化することができる。また、基本位相パターン31E〜31Gが単純化されるため、縞状の光を生成するのに複雑な光学素子等を用いる必要がなく、構成をより一層簡易化することができる。
さらに、基本位相パターン31E〜31Gによれば、対物レンズ16の光軸Xに沿う方向(光軸方向)に沿って構造化された三次元の構造化照明光を生成することが可能となる。すなわち、位相値が一定である第3の領域34E,34F,34Gを有する基本位相パターン31E〜31Gを用いた場合、例えば、光軸方向の第1の位置においては、図13(a)に示されるように、縞上に一定間隔で隙間51が形成された縞状の照明光L1が生成される。一方、光軸方向の第1の位置とは異なる第2の位置においては、図13(b)に示されるように、図13(a)の場合とは異なる位置に隙間52が形成された縞状の照明光L1が生成される。このように、基本位相パターン31E〜31Gを用いた場合、対物レンズ16の光軸方向における位置に従って生成される照明光L1の位相が変化することとなり、光軸方向に沿っても構造化された三次元の構造化照明光を生成することが可能となる。
この三次元の構造化照明光を用いることで、三次元の超解像画像を構築することが可能となる。すなわち、例えば、対物レンズ16の焦点位置を光軸方向に移動することで、光軸方向の複数の位置において試料Sの画像が取得される。このとき、各位置において、例えば上記実施形態の場合と同様に、位相及び縞の方向を変えて複数の画像が取得される。これにより取得された複数の画像に基づいて構築される各位置での二次元の超解像画像を互いに組み合わせる(三次元方向に積算する)ことで、光軸方向に沿っても構造化された三次元の超解像画像を構築することができる。
あるいは、三次元の超解像画像を構築する方法としては、下記参考文献2に記載された方法が用いられてもよい。この方法では、光軸方向の各位置で取得された画像から、二次元の超解像画像を構築することなく、直接的に三次元の超解像画像を構築する。
(参考文献2)MatsG. L. Gustafsson, Lin Shao Peter M. Carlton, C. J. Rachel Wang, Inna N. Golubovskaya,W. Zacheus Cande, David A. Agard, and John W. Sedat, "Three-dimensionalresolution doubling in wide-field fluorescence microscopy by structuredillumination", June 2008/ Vol.94, No.12/ Biophysical Journal pp.4957-70
すなわち、二次元の場合には円形状の領域を切り出して周波数空間上で再配置するのに対し(図6)、三次元の場合には例えば中央部が窪んだ円盤状の領域を切り出して三次元の周波数空間上で再配置すればよい。例えば、照明光L1の位相及び縞の方向を変えて得られた18個(3方向のそれぞれについて6個ずつ)のフーリエ像を立体的に再配置し、再配置により得られた像に対して三次元の逆フーリエ変換を行うことで、光軸方向に沿っても構造化された三次元の超解像画像を構築することができる。
また、図14に示される第8の変形例の基本位相パターン31H、第9の変形例の基本位相パターン31I、又は第10の変形例の基本位相パターン31Jが用いられてもよい。基本位相パターン31Hは、第3の領域34Hにおいて位相が0ラジアンとなっており、第1の領域32Eと第3の領域33Hとの境界、及び第2の領域33Eと第3の領域34Hとの境界のそれぞれにおいて位相値が不連続となっている点で上記基本位相パターン31Eと相違する。
基本位相パターン31Iは、第2つの第3の領域34Iにおいて位相が0ラジアンとなっており、第1の領域32Fと第3の領域33Iとの境界、及び第2の領域33Fと第3の領域34Iとの境界のそれぞれにおいて位相値が不連続となっている点で上記基本位相パターン31Fと相違する。基本位相パターン31Jは、第2つの第3の領域34Jにおいて位相が0ラジアンとなっており、第1の領域32Gと第3の領域33Jとの境界、及び第2の領域33Gと第3の領域34Jとの境界のそれぞれにおいて位相値が不連続となっている点で上記基本位相パターン31Gと相違する。
このような基本位相パターン31H〜31Jによっても、上記実施形態の場合と同様に、対物レンズ16から試料Sに対して縞状の照明光L1を照射することが可能となり、構成を簡易化することができる。また、対物レンズ16の光軸方向に沿っても構造化された三次元の構造化照明光を生成することが可能となる。
また、上記実施形態において、蛍光に代えて試料Sからの反射光を撮像してもよく、あるいは、試料Sの透過光を撮像してもよい。これらの場合、試料Sに照射する照明光L1は励起光でなくてもよい。また、上記実施形態において、制御部19は、収差補正のためのパターンを基本位相パターン31に重畳して位相パターンPを算出してもよい。
また、上記実施形態の照明光L1は、光軸X上においてシート状に結像している。そのため、本発明の画像取得装置は、ライトシート顕微鏡に適用することもできる。ライトシート顕微鏡では、シート状の励起光(照明光L1)を試料Sに照射し、照明光L1の照射に伴って試料Sから発せられる検出光L2を撮像する。ライトシート顕微鏡は、例えば、SLM13で変調された照明光L1を試料Sに照射する第1の対物レンズと、第1の対物レンズからの照明光L1の照射に伴って試料Sから発せられる検出光L2を光検出器18へ導光する第2の対物レンズと、を備えて構成される。第1の対物レンズの光軸と第2の対物レンズ光軸とは、例えば直交(交差)する。そして、第1の対物レンズの光軸と直交する方向に沿って照明光L1の集光位置が試料Sに対して走査され、各集光位置において試料Sの画像が取得される。ライトシート顕微鏡では、照明光L1が試料Sに照射される領域が狭いため、例えば光退色又は光毒性等の試料Sの劣化を抑制することができると共に、画像取得を高速化することができる。
1…構造化照明顕微鏡(画像取得装置)、11…光源、13…空間光変調器、16…対物レンズ、18…光検出器、19…制御部、20…コンピュータ、21…コントローラ、31…基本位相パターン、32…第1の領域、33…第2の領域、34E〜34J…第3の領域、41…回折格子パターン、42…レンズパターン、C…直線(中心線)、D1…所定の方向、L1…照明光、L2…検出光、P…位相パターン、S…試料(観察対象物)。

Claims (13)

  1. 構造化照明光を照射して観察対象物の画像を取得する画像取得装置であって、
    光を出力する光源と、
    二次元に配列された複数の画素を有し、前記光源から出力された光の位相を前記複数の画素毎に変調する空間光変調器と、
    前記空間光変調器で変調された光を前記観察対象物に照射する対物レンズと、
    前記観察対象物からの光を撮像する光検出器と、
    前記複数の画素それぞれに対応する位相値が二次元に分布する位相パターンに従って前記複数の画素毎の位相変調量を制御する制御部と、を備え、
    前記位相パターンは、所定の基本位相パターンに基づいて生成された位相パターンであり、
    前記基本位相パターンは、所定の方向に沿って連続的に前記位相値が増加する第1の領域と、前記所定の方向において前記第1の領域と対向し、前記所定の方向に沿って連続的に前記位相値が減少する第2の領域と、を有する、画像取得装置。
  2. 前記第1の領域では、前記位相値は前記所定の方向に沿って直線的に増加し、前記第2の領域では、前記位相値は前記所定の方向に沿って直線的に減少している、請求項1記載の画像取得装置。
  3. 前記基本位相パターンは、前記所定の方向における中心を通り且つ前記所定の方向と直交する直線に関して線対称となっている、請求項1又は2記載の画像取得装置。
  4. 前記基本位相パターンは、前記所定の方向における中心を通り且つ前記所定の方向と直交する直線に関して非線対称となっている、請求項1又は2記載の画像取得装置。
  5. 前記第1の領域と前記第2の領域とは、互いに隣接すると共に、その境界において前記位相値が連続している、請求項1〜4のいずれか一項記載の画像取得装置。
  6. 前記基本位相パターンは、前記位相値が一定である第3の領域を更に有している、請求項1〜4のいずれか一項記載の画像取得装置。
  7. 前記第3の領域は、前記所定の方向において前記第1の領域と前記第2の領域との間に配置されている、請求項6記載の画像取得装置。
  8. 前記基本位相パターンは、2つの前記第1の領域と、2つの前記第2の領域と、2つの前記第3の領域と、を有し、
    前記第3の領域の一方は、前記所定の方向において前記第1の領域の間に配置され、前記第3の領域の他方は、前記所定の方向において前記第2の領域の間に配置されている、請求項6記載の画像取得装置。
  9. 前記基本位相パターンは、2つの前記第3の領域を有し、
    前記第3の領域の一方は、前記第1の領域に対して前記所定の方向において前記第2の領域と反対側に配置され、前記第3の領域の他方は、前記第2の領域に対して前記所定の方向において前記第1の領域と反対側に配置されている、請求項6記載の画像取得装置。
  10. 前記位相パターンは、回折格子状の回折格子パターンと前記基本位相パターンとが重畳された位相パターンである、請求項1〜9のいずれか一項記載の画像取得装置。
  11. 前記位相パターンは、レンズ状のレンズパターンと前記基本位相パターンとが重畳された位相パターンである、請求項1〜10のいずれか一項記載の画像取得装置。
  12. 構造化照明光を照射して観察対象物の画像を取得する画像取得方法であって、
    二次元に配列された複数の画素を有する空間光変調器により、光源から出力された光の位相を前記複数の画素毎に変調する第1のステップと、
    前記空間光変調器で変調された光を前記観察対象物に照射し、前記観察対象物からの光を撮像する第2のステップと、を含み、
    前記第1のステップでは、所定の基本位相パターンに基づいて生成され、前記複数の画素それぞれに対応する位相値が二次元に分布する位相パターンに従って前記複数の画素毎の位相変調量を制御し、
    前記基本位相パターンは、所定の方向に沿って連続的に前記位相値が増加する第1の領域と、前記所定の方向において前記第1の領域と対向し、前記所定の方向に沿って連続的に前記位相値が減少する第2の領域と、を有する、画像取得方法。
  13. 構造化照明顕微鏡に用いられる空間光変調ユニットであって、
    二次元に配列された複数の画素を有し、入力された光の位相を前記複数の画素毎に変調して変調後の光を出力する空間光変調器と、
    前記複数の画素それぞれに対応する位相値が二次元に分布する位相パターンに従って前記複数の画素毎の位相変調量を制御する制御部と、を備え、
    前記位相パターンは、所定の基本位相パターンに基づいて生成された位相パターンであり、
    前記基本位相パターンは、所定の方向に沿って連続的に前記位相値が増加する第1の領域と、前記所定の方向において前記第1の領域と対向し、前記所定の方向に沿って連続的に前記位相値が減少する第2の領域と、を有する、空間光変調ユニット。
JP2015218528A 2015-11-06 2015-11-06 画像取得装置、画像取得方法、及び空間光変調ユニット Active JP6630120B2 (ja)

Priority Applications (5)

Application Number Priority Date Filing Date Title
JP2015218528A JP6630120B2 (ja) 2015-11-06 2015-11-06 画像取得装置、画像取得方法、及び空間光変調ユニット
EP16861845.2A EP3373060B1 (en) 2015-11-06 2016-09-20 Image acquisition device, image acquisition method, and spatial light modulation unit
US15/772,844 US20180313759A1 (en) 2015-11-06 2016-09-20 Image acquisition device, image acquisition method, and spatial light modulation unit
CN201680063250.7A CN108351503B (zh) 2015-11-06 2016-09-20 图像取得装置、图像取得方法以及空间光调制单元
PCT/JP2016/077687 WO2017077776A1 (ja) 2015-11-06 2016-09-20 画像取得装置、画像取得方法、及び空間光変調ユニット

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2015218528A JP6630120B2 (ja) 2015-11-06 2015-11-06 画像取得装置、画像取得方法、及び空間光変調ユニット

Publications (2)

Publication Number Publication Date
JP2017090591A true JP2017090591A (ja) 2017-05-25
JP6630120B2 JP6630120B2 (ja) 2020-01-15

Family

ID=58662896

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2015218528A Active JP6630120B2 (ja) 2015-11-06 2015-11-06 画像取得装置、画像取得方法、及び空間光変調ユニット

Country Status (5)

Country Link
US (1) US20180313759A1 (ja)
EP (1) EP3373060B1 (ja)
JP (1) JP6630120B2 (ja)
CN (1) CN108351503B (ja)
WO (1) WO2017077776A1 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018199117A1 (ja) 2017-04-28 2018-11-01 三井化学株式会社 基板積層体及び基板積層体の製造方法
CN111175259A (zh) * 2018-11-12 2020-05-19 卡尔蔡司显微镜有限责任公司 具有结构化照明的三维显微术的加速的方法和设备

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018033581A1 (de) * 2016-08-15 2018-02-22 Leica Microsystems Cms Gmbh Lichtblattmikroskop
JP6985359B2 (ja) * 2019-12-04 2021-12-22 Necプラットフォームズ株式会社 ガス検出装置、ガス検出システム、およびガス検出方法
CN111707245A (zh) * 2020-06-24 2020-09-25 烟台艾睿光电科技有限公司 一种具有数字地图的野外观测设备及观测导航系统

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE4236803C2 (de) * 1992-10-30 1996-03-21 Leica Mikroskopie & Syst Mikroskop für mikroskopisch zu untersuchende Amplituden- und/ oder Phasenobjekte
JPH11242189A (ja) * 1997-12-25 1999-09-07 Olympus Optical Co Ltd 像形成法、像形成装置
US7109473B2 (en) * 2002-09-16 2006-09-19 University Of Chicago Transverse optical accelerator and generalized optical vortices
TWI335417B (en) * 2003-10-27 2011-01-01 Zygo Corp Method and apparatus for thin film measurement
US8019136B2 (en) * 2008-12-03 2011-09-13 Academia Sinica Optical sectioning microscopy
JP5599563B2 (ja) * 2008-12-25 2014-10-01 浜松ホトニクス株式会社 光制御装置および光制御方法
WO2011136857A2 (en) * 2010-01-06 2011-11-03 Trustees Of Boston University Correlation confocal microscope
US8988759B2 (en) * 2010-07-26 2015-03-24 The Invention Science Fund I Llc Metamaterial surfaces
JP6033798B2 (ja) * 2011-03-01 2016-11-30 ジーイー・ヘルスケア・バイオサイエンス・コーポレイション 蛍光顕微鏡検査法における照明位相制御のためのシステムおよび方法
WO2012153495A1 (ja) * 2011-05-06 2012-11-15 株式会社ニコン 構造化照明顕微鏡及び構造化照明観察方法
EP2637265B1 (en) * 2012-03-05 2018-08-29 Menlo Systems GmbH Laser with non-linear optical loop mirror
CN104246615A (zh) * 2012-03-30 2014-12-24 株式会社Orc制作所 无掩模曝光装置
JP2013221953A (ja) * 2012-04-12 2013-10-28 Olympus Corp 照明装置、及び、それを備えた顕微鏡装置
US9594238B2 (en) * 2012-05-17 2017-03-14 Citizen Watch Co., Ltd. Aberration correction device and laser microscope
EP2951647A4 (en) * 2012-09-25 2016-10-19 Asociación Ct De Investigación Cooperativa En Nanociencias Cic Nanogune SYNTHETIC OPTICAL HOLOGRAPHY
CN103115585B (zh) * 2013-01-29 2015-09-23 哈尔滨工业大学 基于受激辐射的荧光干涉显微测量方法与装置
WO2014136784A1 (ja) * 2013-03-06 2014-09-12 浜松ホトニクス株式会社 蛍光受光装置および蛍光受光方法
JP6364750B2 (ja) * 2013-11-18 2018-08-01 株式会社ニコン 構造化照明装置、および構造化照明顕微鏡装置
JP6400933B2 (ja) * 2014-04-04 2018-10-03 浜松ホトニクス株式会社 誘導放射抑制顕微鏡装置
JP6570427B2 (ja) * 2015-11-06 2019-09-04 浜松ホトニクス株式会社 画像取得装置、画像取得方法、及び空間光変調ユニット

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018199117A1 (ja) 2017-04-28 2018-11-01 三井化学株式会社 基板積層体及び基板積層体の製造方法
CN111175259A (zh) * 2018-11-12 2020-05-19 卡尔蔡司显微镜有限责任公司 具有结构化照明的三维显微术的加速的方法和设备
JP2020079929A (ja) * 2018-11-12 2020-05-28 カール ツァイス マイクロスコピー ゲーエムベーハーCarl Zeiss Microscopy Gmbh 構造化照明を備えた三次元顕微鏡法のための高速化された方法および装置
JP7399669B2 (ja) 2018-11-12 2023-12-18 カール ツァイス マイクロスコピー ゲーエムベーハー 構造化照明を備えた三次元顕微鏡法のための高速化された方法および装置

Also Published As

Publication number Publication date
EP3373060A1 (en) 2018-09-12
EP3373060B1 (en) 2022-09-28
CN108351503A (zh) 2018-07-31
JP6630120B2 (ja) 2020-01-15
US20180313759A1 (en) 2018-11-01
WO2017077776A1 (ja) 2017-05-11
CN108351503B (zh) 2021-09-21
EP3373060A4 (en) 2019-07-10

Similar Documents

Publication Publication Date Title
WO2017077776A1 (ja) 画像取得装置、画像取得方法、及び空間光変調ユニット
US9897790B2 (en) Structured illumination device and structured illumination microscope device
JP6000554B2 (ja) 顕微鏡システム
CN106133580B (zh) 受激发射损耗显微镜装置
US10466458B2 (en) Image acquisition device, image acquisition method, and spatial light modulation unit
US10191263B2 (en) Scanning microscopy system
JP2017026596A (ja) 三次元屈折率測定方法および三次元屈折率測定装置
Luo et al. Area scanning method for 3D surface profilometry based on an adaptive confocal microscope
CN107209360B (zh) 图像取得装置以及图像取得方法
CN110520779B (zh) 像差校正方法和光学装置
Booth et al. Adaptive optics for fluorescence microscopy
CN107209359B (zh) 图像取得装置以及图像取得方法
CN112639448A (zh) 利用光开关和驻波照射技术提高显微镜轴向分辨率的系统和方法
JP6770616B2 (ja) 画像取得装置、画像取得方法、及び空間光変調ユニット
JP2015179208A (ja) 撮像装置および画像処理システム
Lin et al. Simultaneous multiplane imaging with programmable multiplexed gratings
Landry High-Speed Isotropic Resolution and Structured Illumination Using Phased Arrays In Light Sheet Fluorescence Microscopy
KR20100048125A (ko) 조명 장치

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20180717

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20190521

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20190719

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190917

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20191203

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20191206

R150 Certificate of patent or registration of utility model

Ref document number: 6630120

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250