JP2010537166A - サンプルを撮像する方法 - Google Patents

サンプルを撮像する方法 Download PDF

Info

Publication number
JP2010537166A
JP2010537166A JP2010520660A JP2010520660A JP2010537166A JP 2010537166 A JP2010537166 A JP 2010537166A JP 2010520660 A JP2010520660 A JP 2010520660A JP 2010520660 A JP2010520660 A JP 2010520660A JP 2010537166 A JP2010537166 A JP 2010537166A
Authority
JP
Japan
Prior art keywords
sample
spots
spot
array
imaging
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2010520660A
Other languages
English (en)
Inventor
ディルク フォッセン
レフィヌス バッケル
バス フルスケン
シュールト スタリンガ
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Koninklijke Philips NV
Original Assignee
Koninklijke Philips NV
Koninklijke Philips Electronics NV
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Koninklijke Philips NV, Koninklijke Philips Electronics NV filed Critical Koninklijke Philips NV
Publication of JP2010537166A publication Critical patent/JP2010537166A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B21/00Microscopes
    • G02B21/0004Microscopes specially adapted for specific applications
    • G02B21/002Scanning microscopes
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B21/00Microscopes
    • G02B21/0004Microscopes specially adapted for specific applications
    • G02B21/002Scanning microscopes
    • G02B21/0024Confocal scanning microscopes (CSOMs) or confocal "macroscopes"; Accessories which are not restricted to use with CSOMs, e.g. sample holders
    • G02B21/0036Scanning details, e.g. scanning stages
    • G02B21/004Scanning details, e.g. scanning stages fixed arrays, e.g. switchable aperture arrays
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B21/00Microscopes
    • G02B21/0004Microscopes specially adapted for specific applications
    • G02B21/002Scanning microscopes
    • G02B21/0024Confocal scanning microscopes (CSOMs) or confocal "macroscopes"; Accessories which are not restricted to use with CSOMs, e.g. sample holders
    • G02B21/008Details of detection or image processing, including general computer control
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B21/00Microscopes
    • G02B21/06Means for illuminating specimens
    • G02B21/08Condensers
    • G02B21/086Condensers for transillumination only
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B21/00Microscopes
    • G02B21/06Means for illuminating specimens
    • G02B21/08Condensers
    • G02B21/14Condensers affording illumination for phase-contrast observation

Landscapes

  • Physics & Mathematics (AREA)
  • Chemical & Material Sciences (AREA)
  • Analytical Chemistry (AREA)
  • General Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • Engineering & Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Engineering & Computer Science (AREA)
  • Microscoopes, Condenser (AREA)
  • Investigating Or Analysing Materials By Optical Means (AREA)
  • Testing Or Measuring Of Semiconductors Or The Like (AREA)

Abstract

サンプルを撮像する方法が、−スポットの基準アレイ104を提供するステップS1と、−上記スポットの基準アレイ104を用いて上記サンプル106を照射し、上記サンプル106と相互作用する上記スポットの基準アレイから生じるスポットのサンプル関連アレイ107を有する少なくとも1つのサンプル画像IMSiを取得するステップS2と、−複数のサンプル関連スポットのそれぞれに対してスポット特性パラメタを決定するステップS3と、−上記個別のサンプル関連スポット位置で上記複数のサンプル関連スポットのそれぞれに対する上記スポット特性パラメタをプロットすることにより、上記サンプルの画像IMを構成するステップS4とを有する。

Description

本発明の側面は、画像処理方法に関し、より詳細にはサンプルを撮像する方法に関する。本発明の別の側面は、マルチスポット走査型顕微鏡への上記方法の適用に関する。本発明の更なる側面は、サンプルを撮像する方法を実現するためのコンピュータプログラムに関する。
光学顕微鏡法の様々な技術が、従来技術において知られている。
第1に、いくつかの顕微鏡は、収差なしの(aberration-free)、大きな撮像野を持つ、及び重要な開口数を持つ対物レンズを使用する。しかしながら、斯かる顕微鏡は高価である。
第2に、測定されるサンプルに対して対物レンズの焦点を走査することにより画像を形成する走査型顕微鏡がある。逆もまた同じである。斯かる走査型顕微鏡は、小さな撮像野を持つ対物レンズを使用し、従って、前述の顕微鏡より比較的安価である。しかしながら、斯かる顕微鏡は、サンプルを素早く走査するのに、大きな撮像野を持つ顕微鏡より長い時間がかかるか、又はより複雑な方法を必要とする。
第3に、大きな数のスポット、より正確にはアレイ状のスポットでサンプルを走査することにより、画像を形成するマルチスポット顕微鏡がある。斯かるマルチスポット顕微鏡は、比較的安価であるが、走査型顕微鏡より短い時間において大きな撮像野を持つ画像を生成する。
汚れのないサンプル又は生体試料(例えば単細胞の微生物、組織培養等)といったサンプルの撮像は、斯かるサンプルがしばしば低い固有のコントラストを持つという事実により困難にされる。低コントラストは、サンプルにより規定される平面における吸収率及び屈折率の変動が非常に小さいことを意味する。通常、屈折率変動であれば、10−2のオーダーである。結果として、斯かるサンプルにおける特定の特徴は、画像上で見えないままである。
差分干渉コントラスト(DIC)顕微鏡法が、従来技術において知られており、斯かるサンプルのコントラストを増加させることを可能にする。DIC顕微鏡法は、干渉分光法の原理に基づかれる。DIC顕微鏡において、偏光源は、サンプルを通り異なる経路を取り、異なる光学経路長/フェーズを持つ2つのビームであって、更に再結合されて干渉を生じさせる2つのビームに分離される。従って、DIC顕微鏡を用いて得られる画像において、サンプルの光学密度の変動は、強光での強い斜照明及び対応する表面での暗影の下で見られる3Dオブジェクトのような、暗さにおける目に見える変化(物理的起伏(relief)の出現)を生じさせる。しかしながら、DIC顕微鏡は、特に偏光フィルタ及びノマルスキー修正ウォラストンプリズムを含む複雑な光学構造体を持つ。
本発明の目的は、従来技術の欠点のうちの少なくとも1つを解決するサンプル撮像方法を提案することである。特に、本発明は、マルチスポット走査型顕微鏡を用いて撮像される低い固有のコントラスト特徴を有するサンプルの画像コントラストを強調することを目的とする。
第1の側面によれば、本発明はサンプルを撮像する方法に関する。上記方法は、
−スポットの基準アレイを提供するステップと、
−上記スポットの基準アレイを用いて上記サンプルを照射し、上記サンプルと相互作用する上記スポットの基準アレイから生じるスポットのサンプル関連アレイを有する少なくとも1つのサンプル画像を取得するステップと、
−複数のサンプル関連スポットのそれぞれに対してスポット特性パラメタを決定するステップと、
−上記個別のサンプル関連スポット位置で上記複数のサンプル関連スポットのそれぞれに対する上記スポット特性パラメタをプロットすることにより、上記サンプルの画像を構成するステップとを有する。
上記方法は、
−上記サンプル及び上記スポットの基準アレイの相対的な位置を走査するステップと、
−上記サンプル照射ステップ、上記サンプル画像取得ステップ及び上記スポット特性パラメタ決定ステップを繰り返すステップと、
−上記スポットのサンプル関連アレイと上記スポットの基準アレイとの相対位置の関数として、上記複数のサンプル関連スポットのそれぞれに対する上記スポット特性パラメタをプロットすることにより、上記サンプルの画像を構成するステップとを有することができる。
上記スポット特性パラメタ決定ステップが、
−上記スポットの基準アレイにおいて基準スポットを特定し、
−上記スポットの撮像されたサンプル関連アレイにおけるサンプルスポットを特定し、及び
−複数の特定されたサンプルスポットを対応する特定された基準スポットに関連付けることにより、
上記スポットの基準アレイと上記スポットの撮像されたサンプル関連アレイとの間を比較するステップを有することができる。
第1の実施形態によれば、スポット特性パラメタを決定するステップが、
−上記スポットの撮像されたアレイに含まれる上記複数の特定されたスポットに関して上記基準位置を決定するステップと、
−上記スポットの撮像されたサンプル関連アレイに含まれる上記複数の特定されたスポットに関してサンプル位置を決定するステップと、
−上記基準位置と上記複数の関連付けられるスポットのサンプル位置との間の差を計算することにより、複数のスポットに関する変位ベクトルを決定するステップとを有する。
上記スポット特性パラメタを決定するステップが、上記変位ベクトルの直交座標フレームに対する大きさ又はフェーズ又は成分を計算するステップを更に有することができる。
上記スポットの撮像されたアレイに含まれる上記複数の特定されたスポットに関して上記基準位置を決定するステップが、
−少なくとも2つの基準位置を規定するステップと、
−上記少なくとも2つの基準位置に関してスポットの撮像されたサンプル関連アレイ(IM)に含まれる上記特定されたスポットに関する上記変位ベクトルを決定するステップと、
−上記変位ベクトルの大きさの二乗の平均を計算するステップと、
−上記変位ベクトルの大きさの二乗の最小平均を用いて上記基準位置を選択するステップとを有することができる。
第2の実施形態によれば、上記複数のスポットに対する上記スポット特性パラメタを決定するステップが、上記サンプルと相互作用する上記スポットの基準アレイが原因による上記スポット形状の変化を決定するステップを有する。
第3の実施形態によれば、上記複数のスポットに対する上記スポット特性パラメタを決定するステップが、上記サンプルと相互作用する上記スポットの基準アレイが原因による上記偏光の変化を決定するステップを有する。
第4の実施形態によれば、上記方法が、
−ピクセルの行列を有するピクセル化された検出器上の上記スポットを撮像するステップと、
−上記ピクセルを領域にグループ化するステップと、
−各サンプルスポットに領域を関連付けるステップであって、上記領域内のピクセルが、上記特定されたサンプルスポットに対応する上記特定された基準スポットに最も近い、ステップと、
−各領域のピクセル強度を合計することにより、上記スポット特性パラメタを決定するステップとを更に有する。
第5の実施形態によれば、上記方法は、
−ピクセルの行列を有するピクセル化された検出器上の上記スポットを撮像するステップと、
−上記ピクセルを領域にグループ化するステップと、
−各サンプルスポットに少なくとも2つの領域を関連付けるステップであって、上記少なくとも2つの領域内のピクセルが、上記特定されたサンプルスポットに対応する上記特定された基準スポットに最も近い、ステップと、
−各領域のピクセル強度を合計するステップと、
−上記少なくとも2つの領域の上記合計された強度の差を取ることにより、スポット特性パラメタを決定するステップとを更に有することができる。
各スポットに関連付けられる領域は、円又は正方形とすることができる。この領域は、スポットの直径より実質的に小さなサイズを持つことができる。より詳細には、円は実質的にスポット直径より小さな半径を持つことができ、正方形は実質的にスポット直径より小さな辺を持つことができる。
オプションで、上記スポットの撮像されたアレイに含まれる上記複数の特定されたスポットに関する上記基準位置は、実質的に一様なサンプル上での較正作動の間、取得されることができる。
有利なことに、上記発明は、マルチスポット走査型顕微鏡に適用でき、このマルチスポット走査型顕微鏡は、
−ビームを生成する照射源と、
−スポットの基準アレイを生成するスポット生成器と、
−サンプルを支持する顕微鏡スライドと、
−上記スポット生成器又は上記顕微鏡スライドのいずれかを移動させることにより、上記スライドにわたり上記スポットのアレイを走査する走査手段と、
−ピクセル化された検出器上の上記サンプルと相互作用する各スポットを撮像する撮像手段と、
−上記検出器に結合され、本発明のサンプルを撮像する方法を実現することにより、上記サンプルの画像を構成する処理及び格納モジュールとを有する。
更に追加的な側面によれば、本発明は、撮像デバイスによりサンプルを撮像するためのコンピュータプログラムに関し、このプログラムは、上記撮像デバイスの処理及び格納モジュールの内部メモリにロードされるとき、上記処理及び格納モジュールに、
−スポット特性パラメタを複数のサンプル関連スポットのそれぞれに対して決定するステップであって、上記スポットのサンプル関連アレイが、上記サンプルと相互作用する上記スポットの基準アレイから生じる少なくとも1つのサンプル画像に含まれる、ステップと、
−上記個別のサンプル関連スポット位置で上記複数のサンプル関連スポットのそれぞれに対する上記スポット特性パラメタをプロットすることにより、上記サンプルの画像を構成するステップとを実行させる命令セットを有する。
代替的に、上記サンプルの画像を構成するステップが、上記スポットのサンプル関連アレイと上記スポットの基準アレイとの相対位置の関数として、上記複数のサンプル関連スポットのそれぞれに対する上記スポット特性パラメタをプロットするステップを有することができる。
オプションで、上記コンピュータプログラムは、上記処理及び格納モジュールに前述の第1、第2、第3又は第4の実施形態による本発明のサンプル撮像方法のステップを実行させることもできる。
こうして、本発明は、マルチスポット走査型顕微鏡を用いてサンプルの高コントラスト撮像を可能にする。例えば生体試料サンプルといったサンプルは、吸収及び屈折率におけるほとんど一様な特徴を有する。本発明は、非常にコスト効率の良い態様で短時間に高分解能で大きな領域を撮像することを可能にする。本発明は、ライフサイエンス、病理学、及びリアルタイム光学生検(例えば高速な生体外DNA血球計算法に基づく癌検診及び早期癌検出)のための最小侵襲的システムにおいて特定の用途を持つことができる。
マルチスポット走査型顕微鏡を概略的に表す図である。 図1のマルチスポット走査型顕微鏡のサンプルにおけるアレイ状スポットの画像を示す拡大図である。 本発明の撮像方法の原理を図式的な態様で示す図である。 本発明のコントラスト強調方法を適用する前の、マルチスポット走査型顕微鏡を用いて得られるサンプルの画像を示す図である。 本発明のコントラスト強調方法の第1の実施形態を適用した後の、マルチスポット走査型顕微鏡を用いて得られるサンプルの画像を示す図である。 本発明のコントラスト強調方法の第4の実施形態を適用した後の、マルチスポット走査型顕微鏡を用いて得られるサンプルの画像を示す図である。 本発明の異なる実施形態の原理を示すピクセル化された検出器の部分上のスポットを概略的に表す図である。 本発明の異なる実施形態の原理を示すピクセル化された検出器の部分上のスポットを概略的に表す図である。 本発明の異なる実施形態の原理を示すピクセル化された検出器の部分上のスポットを概略的に表す図である。 本発明の異なる実施形態の原理を示すピクセル化された検出器の部分上のスポットを概略的に表す図である。
本発明のこれらの及び他の態様が、以下に説明される実施形態より明らとなり、これらの実施形態を参照して説明されることになる。
本発明は、例示を介して説明され、添付の図面に限定されるものではない。図面において、類似する要素は同様な参照符号で示される。
図1は、マルチスポット走査型顕微鏡を概略的に表す。マルチスポット走査型顕微鏡は通常、照射源101、スポット生成器103、サンプル106を支持するサンプルアセンブリ105、撮像手段108、ピクセル化された検出器109、処理及び格納モジュール110、ディスプレイ111及び走査手段112を有する。
照射源101は、例えばスポット生成器103の方へ向けられる平行なビーム102を生成する。照射源101は通常、レーザ光源、レンズ、ビームスプリッタ及び順方向感知光検出器を有することができる(これらの要素は、図示省略される)。レーザは、レンズにより平行化され、スプリッタに入射するビームを放出する。送信される部分は、レーザドライバを介した光出力を制御するため光出力を測定する順方向感知光検出器によりキャプチャされる。反射される部分は、スポット生成器103に入射する。
スポット生成器103は、サンプルアセンブリ105の方へ向けられるスポットの基準アレイ104を生成する。例えば、スポット生成器103は、ホログラム若しくはバイナリフェーズ構造体といった回析構造体、又はマイクロレンズアレイとすることができる。例えば、斯かるスポット生成器は、何百から何千ものスポットを生成することができる。
サンプルアセンブリ105は、カバースリップ、サンプル層及び顕微鏡スライドを有する。サンプルアセンブリ105は、例えば生体試料といったサンプル106を支持することができる。
走査手段112は、スポット生成器103又はサンプルアセンブリ105のいずれかを動かすことにより、アレイ状スポットがスライド105にわたり走査されることを可能にする。
アレイ状スポットのため、走査は、スポットの間の領域だけで実行される。撮像手段108は、ピクセル化された検出器109上でサンプル106と相互作用する各スポット107を撮像するため、サンプルアセンブリ105の後段に配置される焦束手段とすることができる。図2は、サンプルにおけるアレイ状スポットの画像を示す。
ピクセル化された検出器109は、例えばCMOS又はCCDピクセルの行列とすることができる。有利なことに、ピクセル化された検出器109は、一方では、ピクセル化された検出器のピクセルの数が、アレイ状スポットにおけるスポットの数より実質的に大きいようなものであり、他方では、検出器のアレイ状ピクセルにおけるスポットの直径は、少なくとも2つのピクセルより実質的に大きいようなものである。
処理及び格納モジュール110が、ピクセル化された検出器109に結合される。例えば、処理及び格納モジュール110は、映像処理集積回路及び内部メモリを有する。処理及び格納モジュール110は、サンプル画像の構成及び図3を用いて以下説明されることになる本発明の撮像方法を実現する。処理及び格納モジュール110は、サンプルの画像を表示するディスプレイ111に結合される。サンプルにわたりスポットを走査し、複数の位置で画像を取得することにより、多数の画像が、処理及び格納モジュール110の内部メモリに集められる。処理及び格納モジュール110は、サンプルの単一高解像度画像へと全ての画像を結合する。図4は、本発明の撮像方法を適用することなしにサンプルを走査した後、図2に示される画像のシリーズから構成されたサンプルの画像を示す。
図3は、本発明による撮像方法の原理を図式的な態様で示す。
第1のステップS1において、スポットの基準アレイ(REF)が提供される。
第1のステップS1に関する変形例によれば、スポットの基準アレイを更に供給するため、マルチスポット走査型顕微鏡を用いて、スポットの基準アレイを有する基準画像IMRefが取得されることもできる(この変形例は、図3における破線により示される)。基準画像IMRefは、基準スポットの公称の位置を決定することを可能にする。この代替的なステップの間、顕微鏡スライドは空であり、こうして、一様な透過的サンプルに等しいサンプルの画像が取得される。基準画像は、較正作動の間、取得されることができる。斯かる作動は、顕微鏡の製造の間実行されることができるか、又は定期的な態様で繰り返されることができる。基準画像から、基準スポットの公称位置が計算されることができる。
第2のステップS2において、サンプルがスポットの基準アレイを用いて照射され、スポットのサンプル関連アレイを有する少なくとも1つのサンプル画像IMSiが、マルチスポット走査型顕微鏡(SAM)を用いて取得される。スポットのサンプル関連アレイは、顕微鏡スライドにおけるサンプルと相互作用するスポットの基準アレイから生じる。
代替的に、複数のサンプル画像IMS1、IMS2、IMS3、...IMSnが取得されることができる。これは、サンプル106及びスポットの基準アレイ104の相対的な位置を走査することにより実行されることができる。スポットの撮像されたサンプル関連アレイをより多数取得することにより、より良好な画像分解能が実現されることができる。各画像は、サンプルと相互作用するスポットの基準アレイから生じるサンプルにおける異なる位置でスポットの別のサンプル関連アレイを有する。
第3のステップS3において、スポット特性パラメタ(DET SCP)が、複数のスポットに関して決定される。スポット特性パラメタは、サンプルの屈折率の強度及び方向における変動に依存する。
「複数のスポット」という言葉は、全ての取得されたスポット、スポットの所定の選択又はスポットのランダムな選択さえ表すことができる点に留意されたい。この選択は、少なくともサンプルの部分を撮像するよう選ばれる。
第1に、スポット特性パラメタは、スポットの基準アレイ104と、基準及びサンプル特定ステップ並びに関連付けステップによるスポットの撮像されたサンプル関連アレイIMSiとを比較することにより決定される。まず基準スポットが、スポットの基準アレイ104において特定される。次に、サンプルスポットは、スポットの撮像されたサンプル関連アレイIMSiにおいて特定される。最終的に、複数の特定されたサンプルスポットの各々が、対応する特定された基準スポットに関連付けられる。通常この特定は、4つのステップを有する。第1のステップにおいて、閾値より大きな強度を持つ画像に含まれるピクセルが特定される。第2のステップにおいて、大きな強度を持つ隣接するピクセルがグループ化される。各グループは可能性のあるスポットを表す。第3のステップにおいて、正確な公称ピッチを持つ正方形グリッドが画像上にオーバレイされる。こうして、ユニットセルに画像が分割される。各ユニットセルは、ピッチと同じサイズの正方形である。好ましくは、正方形グリッドは、スポットの公称位置により形成されるグリッドに近い。第4のステップにおいて、各ユニットセルに含まれる最も高い強度を持つスポットが、そのユニットセルの基準スポットに対応するサンプルスポットとして規定される。
第2に、サンプル関連画像から基準スポット位置を決定するため、最小二乗平均法が実現されることができる。この方法によれば、スポットの撮像された基準アレイに含まれる特定されたスポットに関する少なくとも2つの基準位置が規定される。すると、スポットの撮像されたサンプル関連アレイに含まれる複数の特定されたスポットに関する少なくとも2つの変位ベクトルが決定される。少なくとも2つの変位ベクトルの大きさの二乗平均が計算される。変位ベクトルの大きさの二乗の最小平均を用いて基準位置が選択される。この方法を繰り返すことにより、公称スポット位置のグリッドが、スポットの撮像されたサンプル関連アレイIMSiを介して適合されることができる。
代替的に、基準画像IMRefが較正により決定されるとき、スポットの撮像された基準アレイ及びスポットの撮像されたサンプル関連アレイの間の比較ステップは、基準及びサンプル特定ステップ、並びに関連付けステップを有することができる。まず、スポットの撮像された基準アレイIMRefにおける基準スポットと、スポットの撮像されたサンプル関連アレイIMSiにおけるサンプルスポットとが特定される。すると、複数の特定されたサンプルスポットが、対応する特定された基準スポットに関連付けられる。
複数のサンプル画像IMS1、IMS2、IMS3、...IMSnが取得されるとき、各画像の複数のスポットに関する複数のスポット特性パラメタが決定されることができる。
第4のステップS4において、サンプルの画像は、スポット特性パラメタの機能において、個別のスポット位置(CONS IM)に構成される。構成された画像は、強調されたコントラストを持つサンプルの画像IMに対応する。より詳細には、サンプルの画像IMは、画像におけるスポットの位置の関数として、スポット特性パラメタをプロットすることにより構成される。従って、図4にて図示するように、本発明の方法を適用することなしに得られるサンプル画像と、図5及び6にて図示するように、本発明の方法を用いて得られるサンプル画像とを比較するとき、ディスプレイ上の画像の複数のピクセルの強度が、スポット特性パラメタの機能において修正される。これは結果として、高コントラストのサンプル画像を生じさせる。
分解能を改善するため複数のサンプル画像IMS1、IMS2、IMS3、...IMSnが取得されるとき、サンプルの画像は、スポットのサンプル関連アレイとスポットの基準アレイとの相対位置の関数として、複数のサンプル関連スポットに対するスポット特性パラメタをプロットすることにより構成される。
以下、第3のステップのスポット特性パラメタ決定ステップ及び第4のステップの画像構成ステップが、様々な実施形態及び変形例を参照して詳細な態様で説明されることになる。
第1の実施形態によれば、複数のスポットに関するスポット特性パラメタ決定は、基準位置とサンプル位置との間の位置シフトを決定するステップを有する。図7は、公称位置NPとサンプル位置SPとの間のピクセル化された検出器の部分上のスポットの位置シフトを概略的に示す。より詳細には、複数のスポットに関して、スポットの基準アレイからスポットのサンプル関連アレイへの変位ベクトルDVが計算される。スポットの基準アレイに含まれる複数の特定されたスポットに関する基準位置と、スポットの撮像されたサンプル関連アレイに含まれる複数の特定されたスポットに関するサンプル位置とが決定される。すると、複数のスポットに関する変位ベクトルが、複数の関連付けられるスポットの基準位置とサンプル位置との間の差を計算することにより決定される。
第1の変形例によれば、画像構成ステップは、変位ベクトルの大きさDVに依存する。変位ベクトルの大きさは、屈折率変動の値に関連付けられる。例えば、図5は、第1の変形例による本発明の撮像方法を図4の画像に対して適用した後のサンプルの画像を示す。異なる特徴のエッジe1、e2、e3、e4が、図4のものと比較してより明確である点に留意されたい。
第2の変形例によれば、画像構成ステップは、変位ベクトルのフェーズ、即ち変位ベクトルの角度に依存する。変位ベクトルのフェーズは、屈折率変動の方向に関連付けられる。
第3の変形例によれば、画像構成ステップは、直交座標フレームに対する変位ベクトルの成分に依存する。
図5において示される画像に類似する画像が、上記した代替的な実施形態を用いて得られることができる。
第2の実施形態によれば、複数のスポットに関するスポット特性パラメタ決定は、サンプルと相互作用するスポットの基準アレイが原因によるスポット形状の変化を、複数のスポットに対して決定するステップを有する。例えばこの変化は、スポット形状の円形対称性からのずれとすることができる。スポット形状の変化は、スポットの少なくとも1つの方向における高さ及び/又は幅を決定することにより測定されることができる。図8は、ピクセル化された検出器の部分のスポットを概略的に表し、公称位置NPとサンプル位置SPとの間のスポットの変化(例えば長軸方向の伸び)を示す。
第3の実施形態によれば、複数のスポットに関するスポット特性パラメタ決定は、サンプルと相互作用するスポットの基準アレイが原因による偏光の変化を、複数のスポットに対して決定するステップを有する。例えばこの変化は、サンプルにおける複屈折が原因で起こりうる。偏光の変化は、検出光路に偏光フィルタを加えることにより測定されることができる。
第4の実施形態によれば、複数のスポットに関するスポット特性パラメタ決定は、複数のスポットに関連付けられる領域のピクセル強度を合計するステップを有する。より詳細には、ピクセル化された検出器のグループ化されたピクセルの領域が、複数のサンプルスポットに関連付けられる。この領域に含まれるピクセルが、特定されたサンプルスポットに対応する特定された基準スポットに最も近いよう、この領域は規定される。スポット特性パラメタは、各領域のピクセル強度を合計することにより決定される。例えば、最も近い公称スポットNP位置までの距離が決定数Rより小さい領域を形成するピクセルのグループの強度が、画像を構成するため加えられる。有利には決定数Rは、ピクセル化された検出器上のスポットの公称サイズより小さい半径である。図10は、本発明の第3の実施形態を示すピクセル化された検出器の部分上のスポットを概略的に表す。この実施形態は、共焦点像をエミュレートする。この画像は、小さい開口、いわゆるピンホール上へサンプルから戻るビームを焦束することにより得られる走査型顕微鏡画像である。この実施形態の利点は、入射するビームが焦束される深さとは異なる深さからのサンプルから放射される光が、ピンホールでフィルタアウト(filtered out:フィルタ除去)される点にある。従って、この実施形態は、顕微鏡が深さ方向において分解能を持つことを可能にする。
第5の実施形態によれば、複数のスポットに関するスポット特性パラメタ決定は、複数のスポットに関連付けられる領域のピクセル強度を微分するステップを有する。より詳細には、ピクセル化された検出器のグループ化されたピクセルの少なくとも2つの領域が、複数のサンプルスポットに関連付けられる。2つの領域に含まれるピクセルが特定されたサンプルスポットに対応する特定された基準スポットに最も近いよう、これらの領域は規定される。各領域のピクセル強度は合計される。スポット特性パラメタは、2つの領域の合計された強度を微分することにより決定される。例えば、スポット特性パラメタ決定は、画像の水平方向xに対して複数のスポットの強度を微分するステップを有する。4つの象限、即ち左上象限QTL、右上象限QTR、左下象限QBL及び右下象限QBRを形成する隣接するピクセルの4つのグループ上でスポットは撮像されることができる。例えば、図9は、4つの象限QTL、QTR、QBL、QBR上で撮像されるピクセル化された検出器の部分にあるサンプル位置SPにおけるスポットを概略的に表す。上記隣接する象限間で測定される微分強度は、高コントラストのサンプル画像を生成するために使用することができる。図6は、本発明の第4の実施形態による方法を適用し、水平方向に対して強度を微分することにより、図4における画像に基づき構成される画像を示す。図6の画像がより詳細に描写されるものであり、図4の画像と比較してより好適な信号対雑音比を持つ点に留意されたい。
サンプルの画像を構成するため、異なる実施形態/変形例の組合せが実現されることができる。更に、異なる実施形態/変形例が、サンプル画像のコントラストを強調することを可能にする任意の従来技術と組み合わせて実現されることができる。
本書における図面及び説明は、本発明を説明するものであり限定するものではない。
ハードウェア若しくはコンピュータプログラム(ソフトウェア)又はその両方のアイテムを用いて、これまでに述べられた機能又は方法ステップを実現する多数の方法が存在する。この点において、図面は非常に図式的であり、各図面は、本発明の1つの可能な実施形態を表すにすぎない。従って、図面が、異なる機能を異なるブロックとして示すとしても、これは決してハードウェア又はソフトウェアの単一アイテムが複数の機能を実行することを除外するものではない。そして、ハードウェア若しくはソフトウェア又はその両方のアイテムのアセンブリが機能を実行する点を除外するものでもない。
請求項における如何なる参照符号も、この請求項を限定するものとして解釈されるべきではない。「有する」という語は、請求項に記載される以外の他の要素の存在を除外するものではない。ある要素に先行する「a」又は「an」という語は、斯かる要素が複数存在することを除外するものではない。

Claims (15)

  1. サンプルを撮像する方法において、
    a)スポットの基準アレイを提供するステップと、
    b)前記スポットの基準アレイを用いて前記サンプルを照射し、前記サンプルと相互作用する前記スポットの基準アレイから生じるスポットのサンプル関連アレイを有する少なくとも1つのサンプル画像を取得するステップと、
    c)複数のサンプル関連スポットのそれぞれに対してスポット特性パラメタを決定するステップと、
    d)前記個別のサンプル関連スポット位置で前記複数のサンプル関連スポットのそれぞれに対する前記スポット特性パラメタをプロットすることにより、前記サンプルの画像を構成するステップとを有する、方法。
  2. e)前記サンプル及び前記スポットの基準アレイの相対的な位置を走査するステップと、
    f)前記サンプル照射ステップ、前記サンプル画像取得ステップ及び前記スポット特性パラメタ決定ステップを繰り返すステップと、
    g)前記スポットのサンプル関連アレイと前記スポットの基準アレイとの相対位置の関数として、前記複数のサンプル関連スポットのそれぞれに対する前記スポット特性パラメタをプロットすることにより、前記サンプルの画像を構成するステップとを更に有する、請求項1に記載のサンプルを撮像する方法。
  3. 前記スポット特性パラメタ決定ステップが、
    −前記スポットの基準アレイにおいて基準スポットを特定し、
    −前記スポットの撮像されたサンプル関連アレイにおけるサンプルスポットを特定し、及び
    −複数の特定されたサンプルスポットを対応する特定された基準スポットに関連付けることにより、
    前記スポットの基準アレイと前記スポットの撮像されたサンプル関連アレイとの間を比較するステップを有する、請求項1又は2に記載のサンプルを撮像する方法。
  4. スポット特性パラメタを決定するステップが、
    −前記スポットの撮像されたアレイに含まれる前記複数の特定されたスポットに関して前記基準位置を決定するステップと、
    −前記スポットの撮像されたサンプル関連アレイに含まれる前記複数の特定されたスポットに関してサンプル位置を決定するステップと、
    −前記複数の関連付けられるスポットの前記基準位置と前記サンプル位置との間の差を計算することにより、複数のスポットに関する変位ベクトルを決定するステップとを有する、請求項3に記載のサンプルを撮像する方法。
  5. 前記スポット特性パラメタを決定するステップが、前記変位ベクトルの直交座標フレームに対する大きさ又はフェーズ又は成分を計算するステップを更に有する、請求項4に記載のサンプルを撮像する方法。
  6. 前記スポットの撮像されたアレイに含まれる前記複数の特定されたスポットに関して前記基準位置を決定するステップが、
    −少なくとも2つの基準位置を規定するステップと、
    −前記少なくとも2つの基準位置に関してスポットの撮像されたサンプル関連アレイに含まれる前記特定されたスポットに対する前記変位ベクトルを決定するステップと、
    −前記変位ベクトルの大きさの二乗の平均を計算するステップと、
    −前記変位ベクトルの大きさの二乗の最小平均を用いて前記基準位置を選択するステップとを有する、請求項4に記載のサンプルを撮像する方法。
  7. 前記スポット特性パラメタを決定するステップが、前記サンプルと相互作用する前記スポットの基準アレイが原因による前記スポットの形状又は偏光のいずれかの変化を決定するステップを有する、請求項3に記載のサンプルを撮像する方法。
  8. −ピクセルの行列を規定するピクセル化された検出器上の前記スポットを撮像するステップと、
    −前記ピクセルを領域にグループ化するステップと、
    −各サンプルスポットに領域を関連付けるステップであって、前記領域内のピクセルが、前記特定されたサンプルスポットに対応する前記特定された基準スポットに最も近い、ステップと、
    各領域のピクセル強度を合計することにより、前記スポット特性パラメタを決定するステップとを更に有する、請求項3に記載のサンプルを撮像する方法。
  9. −ピクセルの行列を規定するピクセル化された検出器上の前記スポットを撮像するステップと、
    −前記ピクセルを領域にグループ化するステップと、
    −各サンプルスポットに少なくとも2つの領域を関連付けるステップであって、前記少なくとも2つの領域内のピクセルが、前記特定されたサンプルスポットに対応する前記特定された基準スポットに最も近い、ステップと、
    各領域のピクセル強度を合計するステップと、
    前記少なくとも2つの領域の前記合計された強度の差を取ることにより、スポット特性パラメタを決定するステップとを更に有する、請求項3に記載のサンプルを撮像する方法。
  10. 各スポットに関連付けられる前記少なくとも1つの領域が、円又は正方形であり、及び/又は前記サンプルスポットの前記直径より実質的に小さなサイズを持つ、請求項8又は9に記載のサンプルを撮像する方法。
  11. 前記スポットの撮像されたアレイに含まれる前記複数の特定されたスポットに関する前記基準位置が、実質的に一様なサンプル上で較正作動の間に取得される、請求項3乃至10のいずれか一項に記載のサンプルを撮像する方法。
  12. マルチスポット走査型顕微鏡であって、
    −ビームを生成する照射源と、
    −スポットの基準アレイを生成するスポット生成器と、
    −サンプルを支持する顕微鏡スライドと、
    −前記スポット生成器又は前記顕微鏡スライドのいずれかを移動させることにより、前記スライドにわたりスポットの前記アレイを走査する走査手段と、
    −ピクセル化された検出器上の前記サンプルと相互作用する各スポットを撮像する撮像手段と、
    −前記検出器に結合される処理及び格納モジュールとを有し、
    前記処理及び格納モジュールが、請求項1乃至11のいずれか一項に記載のサンプルを撮像する方法を実現することにより、前記サンプルの画像を構成する、マルチスポット走査型顕微鏡。
  13. 撮像デバイスによりサンプルを撮像するためのコンピュータプログラムであって、
    前記撮像デバイスの処理及び格納モジュールの内部メモリにロードされるとき、前記処理及び格納モジュールに、
    −複数のサンプル関連スポットのそれぞれに対してスポット特性パラメタを決定するステップであって、前記スポットのサンプル関連アレイが、前記サンプルと相互作用する前記スポットの基準アレイから生じる少なくとも1つのサンプル画像に含まれる、ステップと、
    −前記個別のサンプル関連スポット位置で前記複数のサンプル関連スポットのそれぞれに対する前記スポット特性パラメタをプロットすることにより、前記サンプルの画像を構成するステップとを実行させる命令セットを有する、コンピュータプログラム。
  14. 前記サンプルの画像を構成するステップが、前記スポットのサンプル関連アレイと前記スポットの基準アレイとの相対位置の関数として、前記複数のサンプル関連スポットのそれぞれに対する前記スポット特性パラメタをプロットするステップを有する、請求項13に記載のコンピュータプログラム。
  15. 撮像デバイスによりサンプルを撮像するコンピュータプログラムであって、
    前記撮像デバイスの処理及び格納モジュールの内部メモリにロードされるとき、前記処理及び格納モジュールに、
    −複数のサンプル関連スポットのそれぞれに対してスポット特性パラメタを決定するステップであって、前記スポットのサンプル関連アレイが、前記サンプルと相互作用する前記スポットの基準アレイから生じる少なくとも1つのサンプル画像に含まれる、ステップと、
    −前記個別のサンプル関連スポット位置で前記複数のサンプル関連スポットのそれぞれに対する前記スポット特性パラメタをプロットすることにより、前記サンプルの画像を構成するステップとを実行させる命令セットを有し、
    前記命令セットが更に、前記処理及び格納モジュールに請求項3乃至11のいずれか一項に記載のサンプルを撮像する方法のステップを実行させる、コンピュータプログラム。
JP2010520660A 2007-08-16 2008-08-12 サンプルを撮像する方法 Pending JP2010537166A (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
EP07301309 2007-08-16
PCT/IB2008/053218 WO2009022289A2 (en) 2007-08-16 2008-08-12 A method of imaging a sample

Publications (1)

Publication Number Publication Date
JP2010537166A true JP2010537166A (ja) 2010-12-02

Family

ID=40039920

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2010520660A Pending JP2010537166A (ja) 2007-08-16 2008-08-12 サンプルを撮像する方法

Country Status (5)

Country Link
US (1) US20110025837A1 (ja)
EP (1) EP2181351A2 (ja)
JP (1) JP2010537166A (ja)
CN (1) CN101779155A (ja)
WO (1) WO2009022289A2 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2021179625A (ja) * 2015-06-17 2021-11-18 カール ツァイス マイクロスコピー ゲーエムベーハーCarl Zeiss Microscopy Gmbh 幾何学的結像誤差の決定および補償のための方法

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9606343B2 (en) * 2011-05-06 2017-03-28 Visitech International Ltd Enhancing spatial resolution utilizing multibeam confocal scanning systems
DE102011114500B4 (de) * 2011-09-29 2022-05-05 Fei Company Mikroskopvorrichtung
US20150192461A1 (en) * 2012-07-05 2015-07-09 National University Of Singapore Light microscope and method of controlling the same
DE102014112242A1 (de) * 2014-08-26 2016-03-03 Carl Zeiss Ag Phasenkontrast-Bildgebung
DE102016102286A1 (de) * 2016-02-10 2017-08-10 Carl Zeiss Microscopy Gmbh Vorrichtung und Verfahren zur Multispot-Scanning-Mikroskopie
US11506877B2 (en) 2016-11-10 2022-11-22 The Trustees Of Columbia University In The City Of New York Imaging instrument having objective axis and light sheet or light beam projector axis intersecting at less than 90 degrees
CN106842535B (zh) 2017-01-13 2019-10-29 清华大学 基于光流的相位显微成像系统及其方法
CN106772974B (zh) * 2017-01-13 2019-08-09 清华大学 快速三维折射率显微成像的系统和方法
CN107219619A (zh) * 2017-06-29 2017-09-29 清华大学 三维折射率层析显微成像系统及其方法
CN108169172A (zh) * 2017-12-28 2018-06-15 清华大学 三维折射率显微成像系统及方法
CN108896094B (zh) * 2018-06-01 2020-07-07 安图实验仪器(郑州)有限公司 医学显微镜玻片样本漏加判别方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10311950A (ja) * 1997-05-14 1998-11-24 Olympus Optical Co Ltd 走査型顕微鏡
US6392752B1 (en) * 1999-06-14 2002-05-21 Kenneth Carlisle Johnson Phase-measuring microlens microscopy
JP2003083886A (ja) * 2001-09-13 2003-03-19 Kubota Corp 表面プラズモン顕微鏡及び表面プラズモン顕微鏡における暗環像情報取得方法
DE10307765A1 (de) * 2003-02-14 2004-08-26 Laser- Und Medizin-Technologie Gmbh, Berlin Verfahren und Vorrichtung zur abbildungsfreien optischen Mikroskopie

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5978497A (en) * 1994-09-20 1999-11-02 Neopath, Inc. Apparatus for the identification of free-lying cells
DE19624421B4 (de) * 1995-06-30 2008-07-10 Carl Zeiss Ag Vorrichtung und Verfahren zur ortsaufgelösten Vermessung von Wellenfrontdeformationen
US6248988B1 (en) * 1998-05-05 2001-06-19 Kla-Tencor Corporation Conventional and confocal multi-spot scanning optical microscope
US6639201B2 (en) * 2001-11-07 2003-10-28 Applied Materials, Inc. Spot grid array imaging system
EP2280376B1 (en) * 2002-02-12 2015-10-28 Panasonic Intellectual Property Corporation of America Image processing apparatus and image processing method
IL148664A0 (en) * 2002-03-13 2002-09-12 Yeda Res & Dev Auto-focusing method and device
US6750974B2 (en) * 2002-04-02 2004-06-15 Gsi Lumonics Corporation Method and system for 3D imaging of target regions
US20110106740A1 (en) * 2002-05-24 2011-05-05 University Of South Florida Tissue classification method for diagnosis and treatment of tumors
US7384742B2 (en) * 2002-08-16 2008-06-10 Decision Biomarkers, Inc. Substrates for isolating reacting and microscopically analyzing materials
US7057806B2 (en) * 2003-05-09 2006-06-06 3M Innovative Properties Company Scanning laser microscope with wavefront sensor
DE10344060A1 (de) * 2003-09-23 2005-05-04 Zeiss Carl Jena Gmbh Konfokales Laser-Scanning-Mikroskop
NL1024404C2 (nl) * 2003-09-30 2005-03-31 Univ Delft Tech Optische microscoop en werkwijze voor het vormen van een optisch beeld.
US20050136413A1 (en) * 2003-12-22 2005-06-23 Briggs Michael W. Reagent systems for biological assays
US8634072B2 (en) * 2004-03-06 2014-01-21 Michael Trainer Methods and apparatus for determining characteristics of particles
US7485875B2 (en) * 2005-07-22 2009-02-03 Carl Zeiss Microimaging Gmbh Resolution-enhanced luminescence microscopy

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10311950A (ja) * 1997-05-14 1998-11-24 Olympus Optical Co Ltd 走査型顕微鏡
US6392752B1 (en) * 1999-06-14 2002-05-21 Kenneth Carlisle Johnson Phase-measuring microlens microscopy
JP2003083886A (ja) * 2001-09-13 2003-03-19 Kubota Corp 表面プラズモン顕微鏡及び表面プラズモン顕微鏡における暗環像情報取得方法
DE10307765A1 (de) * 2003-02-14 2004-08-26 Laser- Und Medizin-Technologie Gmbh, Berlin Verfahren und Vorrichtung zur abbildungsfreien optischen Mikroskopie

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2021179625A (ja) * 2015-06-17 2021-11-18 カール ツァイス マイクロスコピー ゲーエムベーハーCarl Zeiss Microscopy Gmbh 幾何学的結像誤差の決定および補償のための方法

Also Published As

Publication number Publication date
WO2009022289A2 (en) 2009-02-19
EP2181351A2 (en) 2010-05-05
CN101779155A (zh) 2010-07-14
WO2009022289A3 (en) 2009-05-28
US20110025837A1 (en) 2011-02-03

Similar Documents

Publication Publication Date Title
JP2010537166A (ja) サンプルを撮像する方法
US20220254538A1 (en) Fourier ptychographic imaging systems, devices, and methods
JP6059190B2 (ja) 分解能の向上した顕微鏡法および顕微鏡
US10353190B2 (en) Sensor for microscopy
JP6265153B2 (ja) 撮像素子
US10613312B2 (en) Scanning imaging for encoded PSF identification and light field imaging
US8946619B2 (en) Talbot-illuminated imaging devices, systems, and methods for focal plane tuning
JP2013542468A (ja) 走査型投影レンズレス顕微鏡システム
US20190075247A1 (en) System for generating a synthetic 2d image with an enhanced depth of field of a biological sample
US20160330389A1 (en) Image generating system, image generation method, imaging element, and recording medium
WO2011145016A1 (en) Autofocus imaging
Heintzmann Structured illumination methods
WO2017161055A2 (en) Super-resolution imaging of extended objects
Hulsken et al. High NA diffractive array illuminators and application in a multi-spot scanning microscope
WO2013144891A2 (en) Improved confocal microscopy methods and devices
CN110567959B (zh) 一种自适应像差校正图像扫描显微成像方法
Sheppard Structured illumination microscopy and image scanning microscopy: a review and comparison of imaging properties
WO2016117415A1 (ja) 画像取得装置および画像取得方法
WO2009066252A2 (en) Multi-focal spot generator and multi-focal multi-spot scanning microscope
US20230221541A1 (en) Systems and methods for multiview super-resolution microscopy
KR20220110661A (ko) 이미지들로부터 값들을 추정하는 장치 및 방법
CN117369106B (zh) 一种多点共聚焦图像扫描显微镜及成像方法
JP2008032995A (ja) 共焦点顕微鏡
Neu et al. Time-resolved confocal microscopy using a digital micromirror device
Haase OMX-a novel high speed and high resolution microscope and its application to nuclear and chromosomal structure analysis

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20110809

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20121226

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20130620