JP2022540637A - 高フレームレートおよび高ダイナミックレンジ電子顕微鏡検査 - Google Patents

高フレームレートおよび高ダイナミックレンジ電子顕微鏡検査 Download PDF

Info

Publication number
JP2022540637A
JP2022540637A JP2022501332A JP2022501332A JP2022540637A JP 2022540637 A JP2022540637 A JP 2022540637A JP 2022501332 A JP2022501332 A JP 2022501332A JP 2022501332 A JP2022501332 A JP 2022501332A JP 2022540637 A JP2022540637 A JP 2022540637A
Authority
JP
Japan
Prior art keywords
dimensional
deflector
data
detectors
better
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2022501332A
Other languages
English (en)
Other versions
JPWO2021007360A5 (ja
Inventor
ルース ブルーム,
サン テ パク,
ブライアン リード,
ダニエル マシエル,
Original Assignee
インテグレイテッド ダイナミック エレクトロン ソリューションズ, インコーポレイテッド
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by インテグレイテッド ダイナミック エレクトロン ソリューションズ, インコーポレイテッド filed Critical インテグレイテッド ダイナミック エレクトロン ソリューションズ, インコーポレイテッド
Publication of JP2022540637A publication Critical patent/JP2022540637A/ja
Publication of JPWO2021007360A5 publication Critical patent/JPWO2021007360A5/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N23/00Investigating or analysing materials by the use of wave or particle radiation, e.g. X-rays or neutrons, not covered by groups G01N3/00 – G01N17/00, G01N21/00 or G01N22/00
    • G01N23/22Investigating or analysing materials by the use of wave or particle radiation, e.g. X-rays or neutrons, not covered by groups G01N3/00 – G01N17/00, G01N21/00 or G01N22/00 by measuring secondary emission from the material
    • G01N23/225Investigating or analysing materials by the use of wave or particle radiation, e.g. X-rays or neutrons, not covered by groups G01N3/00 – G01N17/00, G01N21/00 or G01N22/00 by measuring secondary emission from the material using electron or ion
    • HELECTRICITY
    • H01ELECTRIC ELEMENTS
    • H01JELECTRIC DISCHARGE TUBES OR DISCHARGE LAMPS
    • H01J37/00Discharge tubes with provision for introducing objects or material to be exposed to the discharge, e.g. for the purpose of examination or processing thereof
    • H01J37/02Details
    • H01J37/244Detectors; Associated components or circuits therefor
    • HELECTRICITY
    • H01ELECTRIC ELEMENTS
    • H01JELECTRIC DISCHARGE TUBES OR DISCHARGE LAMPS
    • H01J37/00Discharge tubes with provision for introducing objects or material to be exposed to the discharge, e.g. for the purpose of examination or processing thereof
    • H01J37/02Details
    • H01J37/04Arrangements of electrodes and associated parts for generating or controlling the discharge, e.g. electron-optical arrangement or ion-optical arrangement
    • H01J37/147Arrangements for directing or deflecting the discharge along a desired path
    • HELECTRICITY
    • H01ELECTRIC ELEMENTS
    • H01JELECTRIC DISCHARGE TUBES OR DISCHARGE LAMPS
    • H01J37/00Discharge tubes with provision for introducing objects or material to be exposed to the discharge, e.g. for the purpose of examination or processing thereof
    • H01J37/02Details
    • H01J37/04Arrangements of electrodes and associated parts for generating or controlling the discharge, e.g. electron-optical arrangement or ion-optical arrangement
    • H01J37/147Arrangements for directing or deflecting the discharge along a desired path
    • H01J37/1472Deflecting along given lines
    • H01J37/1474Scanning means
    • HELECTRICITY
    • H01ELECTRIC ELEMENTS
    • H01JELECTRIC DISCHARGE TUBES OR DISCHARGE LAMPS
    • H01J37/00Discharge tubes with provision for introducing objects or material to be exposed to the discharge, e.g. for the purpose of examination or processing thereof
    • H01J37/02Details
    • H01J37/04Arrangements of electrodes and associated parts for generating or controlling the discharge, e.g. electron-optical arrangement or ion-optical arrangement
    • H01J37/153Electron-optical or ion-optical arrangements for the correction of image defects, e.g. stigmators
    • HELECTRICITY
    • H01ELECTRIC ELEMENTS
    • H01JELECTRIC DISCHARGE TUBES OR DISCHARGE LAMPS
    • H01J37/00Discharge tubes with provision for introducing objects or material to be exposed to the discharge, e.g. for the purpose of examination or processing thereof
    • H01J37/26Electron or ion microscopes; Electron or ion diffraction tubes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/75Circuitry for compensating brightness variation in the scene by influencing optical camera components
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/50Control of the SSIS exposure
    • H04N25/53Control of the integration time
    • H04N25/531Control of the integration time by controlling rolling shutters in CMOS SSIS
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/50Control of the SSIS exposure
    • H04N25/57Control of the dynamic range
    • H04N25/58Control of the dynamic range involving two or more exposures
    • H04N25/581Control of the dynamic range involving two or more exposures acquired simultaneously
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/17Systems in which incident light is modified in accordance with the properties of the material investigated
    • G01N21/59Transmissivity
    • G01N21/5907Densitometers
    • G01N2021/5957Densitometers using an image detector type detector, e.g. CCD
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20172Image enhancement details
    • G06T2207/20208High dynamic range [HDR] image processing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/90Dynamic range modification of images or parts thereof
    • HELECTRICITY
    • H01ELECTRIC ELEMENTS
    • H01JELECTRIC DISCHARGE TUBES OR DISCHARGE LAMPS
    • H01J2237/00Discharge tubes exposing object to beam, e.g. for analysis treatment, etching, imaging
    • H01J2237/22Treatment of data
    • H01J2237/226Image reconstruction
    • HELECTRICITY
    • H01ELECTRIC ELEMENTS
    • H01JELECTRIC DISCHARGE TUBES OR DISCHARGE LAMPS
    • H01J2237/00Discharge tubes exposing object to beam, e.g. for analysis treatment, etching, imaging
    • H01J2237/244Detection characterized by the detecting means
    • H01J2237/24455Transmitted particle detectors
    • HELECTRICITY
    • H01ELECTRIC ELEMENTS
    • H01JELECTRIC DISCHARGE TUBES OR DISCHARGE LAMPS
    • H01J2237/00Discharge tubes exposing object to beam, e.g. for analysis treatment, etching, imaging
    • H01J2237/244Detection characterized by the detecting means
    • H01J2237/2446Position sensitive detectors
    • HELECTRICITY
    • H01ELECTRIC ELEMENTS
    • H01JELECTRIC DISCHARGE TUBES OR DISCHARGE LAMPS
    • H01J2237/00Discharge tubes exposing object to beam, e.g. for analysis treatment, etching, imaging
    • H01J2237/244Detection characterized by the detecting means
    • H01J2237/2449Detector devices with moving charges in electric or magnetic fields
    • HELECTRICITY
    • H01ELECTRIC ELEMENTS
    • H01JELECTRIC DISCHARGE TUBES OR DISCHARGE LAMPS
    • H01J2237/00Discharge tubes exposing object to beam, e.g. for analysis treatment, etching, imaging
    • H01J2237/26Electron or ion microscopes
    • H01J2237/28Scanning microscopes
    • H01J2237/2802Transmission microscopes
    • HELECTRICITY
    • H01ELECTRIC ELEMENTS
    • H01JELECTRIC DISCHARGE TUBES OR DISCHARGE LAMPS
    • H01J2237/00Discharge tubes exposing object to beam, e.g. for analysis treatment, etching, imaging
    • H01J2237/26Electron or ion microscopes
    • H01J2237/28Scanning microscopes
    • H01J2237/2803Scanning microscopes characterised by the imaging method
    • H01J2237/2804Scattered primary beam
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/45Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from two or more image sensors being of different type or operating in different modes, e.g. with a CMOS sensor for moving images in combination with a charge-coupled device [CCD] for still images
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/741Circuitry for compensating brightness variation in the scene by increasing the dynamic range of the image compared to the dynamic range of the electronic image sensors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70SSIS architectures; Circuits associated therewith
    • H04N25/76Addressed sensors, e.g. MOS or CMOS sensors

Landscapes

  • Chemical & Material Sciences (AREA)
  • Analytical Chemistry (AREA)
  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • General Health & Medical Sciences (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Immunology (AREA)
  • Pathology (AREA)
  • Biochemistry (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Analysing Materials By The Use Of Radiation (AREA)
  • Microscoopes, Condenser (AREA)

Abstract

本願は、高フレームレートおよび高ダイナミックレンジ電子顕微鏡検査を提供する。向上したフレームレートにおいて、時間的歪曲を伴わずに、ローリングシャッタ検出器上で透過型電子顕微鏡ビデオデータを入手するための方法およびシステムが、説明される。また、透過型電子顕微鏡を使用して入手される画像および回折データのダイナミックレンジを向上させる方法も説明される。開示される方法およびシステムはまた、光子検出および撮像システムにも適用可能であり得る。

Description

(関連出願の相互参照)
本願は、その出願が参照することによって本明細書に組み込まれる、2019年7月10日に出願された米国仮出願第62/872,645号の利益を主張する。
(連邦政府によって支援された研究に関する声明)
本発明は、米国エネルギー省からの第IIA相SBIR賞番号DE-SC0013104の下で米国政府の支援を受けて行われた。
高フレームレートおよび/または高ダイナミックレンジにおいて透過型電子顕微鏡(TEM)上でビデオデータを入手するシステムならびに方法が、説明される。他の用途における画像検出器の多くと同様に、TEMにおける最先端のビデオ検出器は、ローリングシャッタまたはグローバルシャッタタイミングモードのいずれかで起動することができる。「ローリングシャッタ」読出モードは、100%に近いデューティサイクルおよび最大フレームレートを提供するが、しかしながら、カメラの異なる領域が異なる時間において読み出すため、時間的歪曲が、高速移動する物体のビデオを解釈することを困難にする。「グローバルシャッタ」読出は、全てのピクセルを横断して同期化され、これらの歪曲に悩まされないが、しかしながら、デューティサイクルは、ピクセルが読出の間にブロックされるため、低減され、それによって、サンプルを電子ビームに暴露させ続けながら、使用可能な信号の損失をもたらす。最大達成可能フレームレートはまた、典型的には、グローバルシャッタ読出に関して、より遅い。
出願者は、高デューティサイクル動作を可能にしながら、時間的歪曲を低減または排除する、高フレームレートおよび高ダイナミックレンジ画像データを入手するための新しい方法ならびにシステムの満たされていない必要性が存在することを認識している。向上したフレームレートにおいて、時間的歪曲を伴わずに、ローリングシャッタ検出器上でビデオデータを入手する新しい方法が、本開示に説明される。また、電子顕微鏡検査における測定のダイナミックレンジを向上させる方法も説明される。開示される方法はまた、光子検出および光学撮像システムにも適用可能であり得る。
本明細書に開示されるものは、透過型電子顕微鏡データを入手するための方法であって、a)サンプル面に位置付けられるサンプルによって透過または散乱される電子を偏向させるように構成される、2次元偏向器を備える、透過型電子顕微鏡を提供するステップであって、2次元偏向器は、サンプル面と2次元検出器アレイとの間に位置付けられる、ステップと、b)偏向された電子が、2次元検出器アレイの一連の2つ以上の小領域に順次偏向されるように、偏向器制御信号を変調させ、それによって、2つ以上の小領域のそれぞれに偏向される電子のパターンに対応する、データセットを捕捉するステップと、c)2つ以上の小領域のそれぞれが、一連の反復検出器アレイ読出サイクルのそれぞれ内でデータセットを捕捉するように、偏向器制御信号の変調を検出器アレイ読出信号と同期化するステップとを含む、方法である。
いくつかの実施形態では、透過型電子顕微鏡データを入手するための方法は、a)サンプル面に位置付けられるサンプルによって透過または散乱される電子を偏向させるように構成される、2次元偏向器を備える、透過型電子顕微鏡を提供するステップであって、2次元偏向器は、サンプル面と2次元検出器アレイとの間に位置付けられる、ステップと、b)偏向された電子が、2次元検出器アレイの一連の2つ以上の小領域に順次偏向されるように、偏向器制御信号を変調させ、それによって、2つ以上の小領域のそれぞれに偏向される電子のパターンに対応する、データセットを捕捉するステップとを含んでもよく、2次元検出器アレイの2つ以上の小領域の感度、もしくは電子を2つ以上の小領域のそれぞれに偏向させるための滞留時間は、個別に調節される。
また、開示されるものは、画像データを入手するための方法であって、a)サンプル面または焦点面に位置付けられる物体によって透過、反射、もしくは散乱される光子を偏向させるように構成される、2次元偏向器を備える、光学システムを提供するステップであって、2次元偏向器は、サンプル面または焦点面と2次元検出器アレイとの間に位置付けられる、ステップと、b)偏向された光子が、2次元検出器アレイの一連の2つ以上の小領域に順次偏向されるように、偏向器制御信号を変調させ、それによって、2つ以上の小領域のそれぞれに偏向される光子のパターンに対応する、データセットを捕捉するステップと、c)2つ以上の小領域のそれぞれが、一連の反復検出器アレイ読出サイクルのそれぞれ内でデータセットを捕捉するように、偏向器制御信号の変調を検出器アレイ読出信号と同期化するステップとを含む、方法である。
いくつかの実施形態では、画像データを入手するための方法は、a)サンプル面または焦点面に位置付けられる物体によって透過、反射、もしくは散乱される光子を偏向させるように構成される、2次元偏向器を備える、光学システムを提供するステップであって、2次元偏向器は、サンプル面または焦点面と2次元検出器アレイとの間に位置付けられる、ステップと、b)偏向された光子が、2次元検出器アレイの一連の2つ以上の小領域に順次偏向されるように、偏向器制御信号を変調させ、それによって、2つ以上の小領域のそれぞれに偏向される光子のパターンに対応する、データセットを捕捉するステップとを含んでもよく、2次元検出器アレイの2つ以上の小領域の感度、もしくは光子を2つ以上の小領域のそれぞれに偏向させるための滞留時間は、個別に調節される。
いくつかの実施形態では、2次元偏向器は、2次元静電偏向器である。いくつかの実施形態では、2次元偏向器は、2次元電磁偏向器である。いくつかの実施形態では、2次元偏向器は、可動ミラーまたはプリズムである。いくつかの実施形態では、2つ以上の小領域は、単一の2次元検出器の小領域を備える。いくつかの実施形態では、2つ以上の小領域は、2次元検出器アレイ内の異なる検出器を備える。いくつかの実施形態では、2次元検出器アレイは、電荷結合素子(CCD)画像センサ、相補型金属酸化膜半導体(CMOS)画像センサ、電子直接検出(EDD)カメラ、または飛行時間(ToF)画像センサを備え、偏向器制御信号の変調は、偏向された電子または光子が、アクティブに読み出されていない小領域に指向されるように、CCD、CMOS、EDD、またはToFカメラのためのローリングシャッタ同期化信号と同期化される。いくつかの実施形態では、偏向器制御信号の変調は、偏向された電子または光子が、アクティブに読み出されていない小領域に指向されるように、CCD、CMOS、EDD、またはToFカメラのためのローリングシャッタ同期化信号と連続的に同期化される。いくつかの実施形態では、データ入手のためのデューティサイクルは、データの時間的歪曲を負うことなく、少なくとも90%である。いくつかの実施形態では、データ入手のためのデューティサイクルは、データの時間的歪曲を負うことなく、少なくとも95%である。いくつかの実施形態では、データ入手のためのデューティサイクルは、データの時間的歪曲を負うことなく、少なくとも98%である。いくつかの実施形態では、2つ以上の小領域のそれぞれによって捕捉されるデータセットは、画像または回折データのフレームを備える。いくつかの実施形態では、方法はさらに、2つ以上の小領域のための画像または回折データを処理し、CCD、CMOS、またはToFカメラのための読出レートよりも速いフレームレートを備える、ビデオデータを生成するステップを含んでもよい。いくつかの実施形態では、ビデオデータセットのフレームレートは、CCD、CMOS、またはToFカメラの読出レートよりも少なくとも4倍速い。いくつかの実施形態では、ビデオデータセットのフレームレートは、CCD、CMOS、またはToFカメラの読出レートよりも少なくとも8倍速い。いくつかの実施形態では、ビデオデータセットのフレームレートは、CCD、CMOS、またはToFカメラの読出レートよりも少なくとも16倍速い。いくつかの実施形態では、ビデオデータセットのフレームレートは、CCD、CMOS、またはToFカメラの読出レートよりも少なくとも32倍速い。いくつかの実施形態では、2次元偏向器のための切替時間は、10マイクロ秒未満である。いくつかの実施形態では、2次元偏向器のための切替時間は、1マイクロ秒未満である。いくつかの実施形態では、2次元偏向器のための切替時間は、100ナノ秒未満である。いくつかの実施形態では、2次元偏向器のための切替時間は、10ナノ秒未満である。いくつかの実施形態では、偏向器制御信号は、電子または光子を2つ以上の小領域のそれぞれに偏向させるための滞留時間が、同一であるように、変調される。いくつかの実施形態では、偏向器制御信号は、電子または光子を2つ以上の小領域のそれぞれに偏向させるための滞留時間が、2つ以上の小領域のうちの少なくとも1つに関して異なるように、変調される。いくつかの実施形態では、電子または光子を2つ以上の小領域に偏向させるための滞留時間は、約1マイクロ秒~約100ミリ秒に及ぶ。いくつかの実施形態では、偏向器制御信号は、電子または光子を2つ以上の小領域のうちの少なくとも1つに偏向させるための滞留時間が、ゼロであるように、変調され、少なくとも1つの小領域によって捕捉されるデータセットは、暗電流データセットを備える。いくつかの実施形態では、2つ以上の2次元小領域によって捕捉される各データセットは、画像または回折データを備え、2次元検出器アレイのものよりも高いダイナミックレンジを有する、画像または回折データの単一のフレームを提供するように、さらに処理される。いくつかの実施形態では、2次元検出器アレイの2つ以上の小領域はそれぞれ、個々の検出器を備える。いくつかの実施形態では、2つ以上の個々の検出器のそれぞれの感度、もしくは2つ以上の個々の検出器毎の飽和レベルは、個別に調節される。いくつかの実施形態では、2つ以上の個々の検出器の感度は、電子的に調節される。いくつかの実施形態では、2つ以上の個々の検出器の感度は、空間フィルタリングまたはマスキングによって調節される。いくつかの実施形態では、2つ以上の個々の検出器は、異なる機能性もしくは異なる性能仕様を備える、2つ以上の検出器を備える。いくつかの実施形態では、2つ以上の検出器は、CCDカメラ、CMOSカメラ、暗視野STEM検出器、ファラデーカップ、クワッドフォトダイオード、環状暗視野検出器、明視野検出器、汎用検出器、またはそれらの任意の組み合わせを備える。いくつかの実施形態では、2つ以上の個々の検出器のうちの少なくとも1つは、サンプル面または焦点面から異なる距離に位置付けられる。いくつかの実施形態では、2つ以上の検出器によって捕捉されるデータセットは、画像データ、電子ビーム電流データ、電子ビーム整合データ、セグメント化された暗視野データ、またはそれらの任意の組み合わせを備える、マルチモーダルデータセットを生成するようにコンパイルされる。いくつかの実施形態では、2つ以上の小領域によって捕捉されるデータセットは、偏向ステップによって導入される歪曲を補正するように処理される。
本明細書に開示されるものは、透過型電子顕微鏡検査データを入手するためのシステムであって、a)透過型電子顕微鏡と、b)サンプルによって透過または散乱される電子を偏向させるように構成される、2次元偏向器であって、2次元偏向器は、透過型電子顕微鏡内でサンプル面と2次元検出器アレイとの間に位置付けられる、2次元偏向器と、c)偏向された電子が、2次元検出器アレイの一連の2つ以上の小領域に順次偏向されるように、偏向器制御信号を変調させ、それによって、2つ以上の小領域のそれぞれに偏向される電子のパターンに対応する、データセットを捕捉するように構成される、偏向器制御システムとを備え、偏向器制御信号は、2つ以上の2次元小領域がそれぞれ、一連の反復検出器アレイ読出サイクルのそれぞれ内でデータセットを捕捉するように、検出器アレイ読出信号と同期化される、システムである。
いくつかの実施形態では、透過型電子顕微鏡検査データを入手するための開示されるシステムは、a)透過型電子顕微鏡と、b)サンプルによって透過または散乱される電子を偏向させるように構成される、2次元偏向器であって、2次元偏向器は、透過型電子顕微鏡内でサンプル面と2次元検出器アレイとの間に位置付けられる、2次元偏向器と、c)偏向された電子が、2次元検出器アレイの一連の2つ以上の小領域に順次偏向されるように、偏向器制御信号を変調させ、それによって、2つ以上の小領域のそれぞれに偏向される電子のパターンに対応する、データセットを捕捉するように構成される、偏向器制御システムとを備えてもよく、2次元検出器アレイの2つ以上の小領域の感度、もしくは電子を2つ以上の小領域のそれぞれに偏向させるための滞留時間は、個別に調節可能である。
また、本明細書に開示されるものは、画像データを入手するためのシステムであって、a)サンプル面または焦点面に位置付けられる物体によって透過、反射、もしくは散乱される光子を偏向させるように構成される、2次元偏向器を備える、光学システムであって、2次元偏向器は、サンプル面または焦点面と2次元検出器アレイとの間に位置付けられる、光学システムと、b)偏向された光子が、2次元検出器アレイの一連の2つ以上の小領域に順次偏向されるように、偏向器制御信号を変調させ、それによって、2つ以上の小領域のそれぞれに偏向される光子のパターンに対応する、データセットを捕捉するように構成される、偏向器制御システムとを備え、偏向器制御信号は、2つ以上の小領域のそれぞれが、一連の反復検出器アレイ読出サイクルのそれぞれ内でデータセットを捕捉するように、検出器アレイ読出信号と同期化される、システムである。
いくつかの実施形態では、画像データを入手するための開示されるシステムは、a)サンプル面または焦点面に位置付けられる物体によって透過、反射、もしくは散乱される光子を偏向させるように構成される、2次元偏向器を備える、光学システムであって、2次元偏向器は、サンプル面または焦点面と2次元検出器アレイとの間に位置付けられる、光学システムと、b)偏向された光子が、2次元検出器アレイの一連の2つ以上の小領域に順次偏向されるように、偏向器制御信号を変調させ、それによって、2つ以上の小領域のそれぞれに偏向される光子のパターンに対応する、データセットを捕捉するように構成される、偏向器制御システムとを備えてもよく、2次元検出器アレイの2つ以上の小領域の感度、もしくは光子を2つ以上の小領域のそれぞれに偏向させるための滞留時間は、個別に調節可能である。
いくつかの実施形態では、本システムはさらに、2つ以上の小領域によって捕捉されるデータセットを収集および分析するように構成される、プロセッサを備える。いくつかの実施形態では、2次元偏向器は、2次元静電偏向器である。いくつかの実施形態では、2次元偏向器は、2次元電磁偏向器である。いくつかの実施形態では、2次元偏向器は、可動ミラーまたはプリズムである。いくつかの実施形態では、2つ以上の小領域は、単一の2次元検出器の小領域を備える。いくつかの実施形態では、2つ以上の小領域は、2次元検出器アレイ内の異なる検出器を備える。いくつかの実施形態では、2次元検出器アレイは、電荷結合素子(CCD)画像センサ、相補型金属酸化膜半導体(CMOS)画像センサ、電子直接検出(EDD)画像センサ、または飛行時間(ToF)画像センサを備え、偏向器制御信号の変調は、偏向された電子または光子が、アクティブに読み出されていない小領域に指向されるように、CCD、CMOS、EDD、またはToFカメラのためのローリングシャッタ同期化信号と同期化される。いくつかの実施形態では、偏向器制御信号の変調は、偏向された電子または光子が、アクティブに読み出されていない小領域に指向されるように、CCD、CMOS、EDD、またはToFカメラのためのローリングシャッタ同期化信号と連続的に同期化される。いくつかの実施形態では、データ入手のためのデューティサイクルは、データの時間的歪曲を負うことなく、少なくとも90%である。いくつかの実施形態では、データ入手のためのデューティサイクルは、データの時間的歪曲を負うことなく、少なくとも95%である。いくつかの実施形態では、データ入手のためのデューティサイクルは、データの時間的歪曲を負うことなく、少なくとも98%である。いくつかの実施形態では、2つ以上の小領域によって捕捉される各データセットは、画像または回折データの単一のフレームを備える。いくつかの実施形態では、2つ以上の小領域のための画像または回折データは、CCD、CMOS、またはToFカメラのための読出レートよりも速いフレームレートを備える、ビデオデータセットを生成するように処理される。いくつかの実施形態では、ビデオデータセットのフレームレートは、CCD、CMOS、またはToFカメラのフレームレートよりも少なくとも4倍速い。いくつかの実施形態では、ビデオデータセットのフレームレートは、CCD、CMOS、またはToFカメラのフレームレートよりも少なくとも8倍速い。いくつかの実施形態では、ビデオデータセットのフレームレートは、CCD、CMOS、またはToFカメラのフレームレートよりも少なくとも16倍速い。いくつかの実施形態では、ビデオデータセットのフレームレートは、CCD、CMOS、またはToFカメラのフレームレートよりも少なくとも32倍速い。いくつかの実施形態では、2次元偏向器のための切替時間は、10マイクロ秒未満である。いくつかの実施形態では、2次元偏向器のための切替時間は、1マイクロ秒未満である。いくつかの実施形態では、2次元偏向器のための切替時間は、100ナノ秒未満である。いくつかの実施形態では、2次元偏向器のための切替時間は、10ナノ秒未満である。いくつかの実施形態では、偏向器制御信号は、2つ以上の小領域のそれぞれにおける偏向された電子または光子のための滞留時間が、同一であるように、変調される。いくつかの実施形態では、偏向器制御信号は、2つ以上の小領域のそれぞれにおける偏向された電子または光子のための滞留時間が、2つ以上の小領域のうちの少なくとも1つに関して異なるように、変調される。いくつかの実施形態では、電子または光子を2つ以上の小領域に偏向させるための滞留時間は、約1マイクロ秒~約100ミリ秒に及ぶ。いくつかの実施形態では、偏向器制御信号は、電子または光子を2つ以上の小領域のうちの少なくとも1つに偏向させるための滞留時間が、ゼロであるように、変調され、少なくとも1つの小領域によって捕捉されるデータセットは、暗電流データセットを備える。いくつかの実施形態では、2つ以上の小領域によって捕捉される各データセットは、画像または回折データを備え、2次元検出器アレイのものよりも高いダイナミックレンジを有する、画像または回折データの単一のフレームを提供するように、さらに処理される。いくつかの実施形態では、2次元検出器アレイの2つ以上の小領域はそれぞれ、個々の検出器を備える。いくつかの実施形態では、2つ以上の個々の検出器のそれぞれの感度、もしくは2つ以上の個々の検出器毎の飽和レベルは、個別に調節可能である。いくつかの実施形態では、2つ以上の個々の検出器の感度は、電子的に調節される。いくつかの実施形態では、2つ以上の個々の検出器の感度は、空間フィルタリングまたはマスキングによって調節される。いくつかの実施形態では、2つ以上の個々の検出器は、異なる機能性もしくは異なる性能仕様を備える、2つ以上の検出器を備える。いくつかの実施形態では、2つ以上の異なる検出器は、CCDカメラ、CMOSカメラ、暗視野STEM検出器、ファラデーカップ、クワッドフォトダイオード、環状暗視野検出器、明視野検出器、汎用検出器、またはそれらの任意の組み合わせを備える。いくつかの実施形態では、2つ以上の個々の検出器のうちの少なくとも1つは、サンプル面または焦点面から異なる距離に位置付けられる。いくつかの実施形態では、2つ以上の検出器によって捕捉されるデータセットは、画像データ、電子ビーム電流データ、電子ビーム整合データ、セグメント化された暗視野データ、またはそれらの任意の組み合わせを備える、マルチモーダルデータセットを生成するようにコンパイルされる。いくつかの実施形態では、2つ以上の小領域によって捕捉されるデータセットは、偏向ステップによって導入される歪曲を補正するように処理される。
(参照による組み込み)
本明細書に述べられる全ての出版物、特許、および特許出願は、各個々の出版物、特許、または特許出願が、参照することによってその全体として組み込まれるように具体的かつ個別に示された場合と同一の程度に、参照することによってそれらの全体として本明細書に組み込まれる。本明細書の用語と組み込まれた参考文献内の用語の間の矛盾の場合、本明細書の用語が優先される。
本発明の新規の特徴は、添付の請求項に詳細に記載される。本発明の特徴および利点のさらなる理解は、本発明の原理が利用される、例証的実施形態を記載する以下の詳細な説明、ならびに付随する図面を参照することによって、得られるであろう。
図1は、本開示の一側面による、高フレームレートビデオデータを入手するために構成される透過型電子顕微鏡(TEM)の非限定的実施例を提供する。
図2は、電子(またはいくつかの事例では、光子)を2次元検出器の異なる小領域に偏向させるための露出シーケンスの1つの非限定的実施例の説明図を提供する。
図3は、2次元静電偏向器の概略図を提供する。
図4A-Eは、CMOSカメラ等の2次元検出器の異なる小領域を露出するためのTEMにおける電子の静電偏向を2次元検出器のためのローリングシャッタ読出信号と同期化するためのタイミング図の非限定的実施例を提供する。図4Aは、CMOS画像センサのための読出領域の概略図である。図4Bは、画像センサからの行毎の読出のタイミング図である。図4Cは、2次元偏向器によって画定されるような画像センサの小領域である。図4Dは、図4Cに図示される露出のシーケンスのタイミング図である。図4Eは、図4Cおよび4Dに描写される偏向パターンならびにタイミングを実装するように2次元静電偏向器内の電極対の間に印加される電圧のタイミング図である。
図5は、中心スポットにおける飽和効果を示す、典型的選択面積電子回折(SAED)電子回折パターンの実施例を提供する。
図6は、高ダイナミックレンジ(HDR)透過型電子顕微鏡の概略図を提供する。
図7は、HDRデータ入手のためのフローチャートの非限定的実施例を提供する。
図8は、マルチ検出器データセットを処理するために使用されるデータ分析方法のためのフローチャートの非限定的実施例を提供する。
図9は、サンプルによって透過または散乱される電子を異なる検出器または検出器の小領域に偏向させるように2次元静電偏向器と組み合わせられる、走査型透過電子顕微鏡(STEM)走査コントローラの概略図を提供する。
図10A-Eは、TEMにおける電子の静電偏向を制御し、2次元検出器の異なる小領域または検出器の2次元アレイ内の異なる検出器を露出するためのタイミング図の非限定的実施例を提供する。図10Aは、サンプル上のプローブビーム場所の概略図である。図10Bは、サンプルを横断したプローブビームの走査のタイミング図である。図10Cは、10個の個々の検出器のアレイの概略図である。いくつかの事例では、検出領域1-9は、単一の検出器、例えば、CMOSカメラの小領域であってもよい。図10Dは、異なる検出器/検出器領域のための露出時間(滞留時間)が異なる、図10Cに図示される露出のシーケンスのタイミング図である。図10Eは、図10Cおよび10Dに描写される偏向パターンおよびタイミングを実装するように2次元静電偏向器内の電極対の間に印加される電圧のタイミング図である。
図11は、本明細書に提供される方法およびシステムを実装するようにプログラムまたは別様に構成される、コンピュータシステムの概略図を提供する。
詳細な説明
透過型電子顕微鏡検査における高フレームレート(HFR)ビデオデータおよび/または高ダイナミックレンジ(HDR)画像もしくは回折データの入手のための方法ならびにシステムが、説明される。いくつかの事例では、開示される方法およびシステムは、他の画像データ入手モード、例えば、光学顕微鏡検査または光学撮像に適用されてもよい。開示される方法およびシステムは、各場合において、高速2次元偏向器が、サンプル(または物体)によって透過または散乱される電子もしくは光子を、タイミングおよび空間位置付けの精密な制御を伴って2次元検出器の一連の小領域のそれぞれに順次偏向させるために使用されるという点で、共通特徴を共有する。いくつかの事例では、小領域は、単一の2次元検出器の細分、例えば、単一のCCDまたはCMOS画像センサの四分円を備えてもよい。いくつかの事例では、小領域は、個々の検出器、例えば、検出器の2次元アレイ内の個々のCCDまたはCMOS画像センサを備えてもよい。
高フレームレートビデオデータ入手の場合、検出器、例えば、CMOSカメラセンサの異なる小領域の間の2次元偏向器の高速切替、およびCMOSカメラのローリングシャッタ読出との2次元偏向器の精密なタイミングならびに連続同期化が、CMOSカメラのための読出レートよりも高いフレームレートにおいてビデオデータの継続入手を提供する。開示される方法およびシステムは、カメラの画像センサが、異なる時点において画像または回折パターンを入手する複数のサブフレームに分割されるように、電子をアクティブに読み出されてないカメラの小領域に指向するための、例えば、高速2次元静電または電磁偏向器の使用を含んでもよい。これらのサブフレームは、各小領域が、カメラの画像センサ読出の合間に露出されるように、カメラのローリングシャッタに連続的に同期化され、続いて、カメラ画像センサ読出レートよりも高いフレームレートにおいて連続ビデオデータを提供するように組み立てられてもよい。コンパイルされたビデオデータの結果として生じたフレームレートおよび時間分解能は、完全フレーム画像内に収集されるサブフレームの数によって乗算されるカメラ読出レートと等しい。例えば、高速2次元偏向器を用いてサブフレームの8×8アレイに細分される、画像センサまたは検出器は、フレームレートおよび時間分解能の64倍改良を備える、ビデオデータを生じさせる。
高ダイナミックレンジデータ入手の場合、電子または光子を、例えば、CMOSカメラ内の検出器小領域のそれぞれに偏向させるための高速切替および調節可能な滞留時間は、単一の完全フレームデータ捕捉で可能性として考えられる、はるかに高いダイナミックレンジを有する、1つ以上の画像フレームを生成するように、続いて処理され得る、CMOS画像センサ読出の各サイクル内の一連の画像データセットの入手を提供する。いくつかの事例では、例えば、16個の露出領域に分割される単一の検出器が、検出器読出が単一のHDR画像を生じさせるために処理されるように、16個の異なる露出条件下で画像を入手するために使用され得る。いくつかの事例では、16個の露出領域に分割される単一の検出器が、検出器読出が4つのHDR画像を生じさせるために処理されるように、4つの異なる露出条件のそれぞれの下で4つの画像を入手するために使用され得る。いくつかの事例では、各検出器アレイ読出サイクルの間に入手されるデータは、1、2、4、8、16、32、64、128個、以上のHDR画像を生じさせるように処理されてもよい。
いくつかの事例では、高ダイナミックレンジデータ入手は、個々の検出器のための感度および/または飽和レベルが、各個々の検出器への電子もしくは光子の偏向のための滞留時間を調節する代わりに、またはそれに加えて、検出器毎に調節され得る、個々の検出器のアレイ、例えば、CMOS画像センサのアレイを使用することによって提供されてもよい。いくつかの事例では、開示される方法およびシステムは、散乱および透過された電子を、検出器の異なる小領域に、または一連の検出器のそれぞれに順次指向し得る、高速静電偏向器の使用を含んでもよい。ある事例では、偏向器制御システムが、各検出器を異なる時間の長さにわたって露出させ、プロセッサまたはコンピュータが、小領域または一連の検出器からデータを収集および分析する。いくつかの事例では、偏向器制御システムは、検出器を読み出す、および/またはサンプル上のプローブビームの場所もしくは角度等の電子顕微鏡の動作パラメータを変調させるためのタイミングと統合される。プロセッサまたはコンピュータによって実施される分析方法は、異なる露出時間および/または感度レベルを表す、異なる小領域もしくは検出器読出の間に入手されるデータから複合画像を形成する。結果として生じる複合画像は、したがって、個々の小領域または検出器からの個々の画像読出よりも実質的に広いダイナミックレンジを有してもよい。
いくつかの事例では、開示されるシステムは、画像データまたは回折データを備える、高フレームレートおよび高ダイナミックレンジビデオデータの同時入手のために構成されてもよい。主に電子顕微鏡検査との関連で議論されるが、開示される方法およびシステムはまた、光子のための好適な高速2次元偏向器、例えば、回転ミラーまたはプリズムが、電子を偏向させるために使用される2次元偏向器に代用される場合、光学撮像に適用されてもよい。本明細書に説明される開示される方法およびシステムの種々の側面が、下記に記載される特定の電子または光子顕微鏡検査用途のうちのいずれかに、もしくは他のタイプの画像、回折パターン、またはスペクトルデータ入手用途のために、適用されてもよい。開示される方法およびシステムの異なる側面が、個別に、集合的に、または相互と組み合わせて理解され得ることを理解されたい。
定義:別様に定義されない限り、本明細書で使用される技術用語の全ては、本開示が属する分野内の当業者によって一般的に理解されるものと同一の意味を有する。
本明細書および添付の請求項で使用されるように、単数形「a」、「an」、および「the」は、文脈が明確に別様に決定付けない限り、複数の参照を含む。本明細書の「または」の任意の言及は、別様に記述されない限り、「および/または」を包含することを意図している。
本明細書で使用されるように、用語「約」の数は、その数±その数の10%を指す。範囲との関連で使用されるときの用語「約」は、その最低値のマイナス10%およびその最大値のプラス10%のその範囲を指す。
本明細書で使用されるように、用語「2次元検出器アレイ」は、いくつかの事例では、単一の検出器、例えば、個々のピクセルまたはピクセル群の2次元アレイを備える、CCDもしくはCMOS画像センサを指し得る、またはいくつかの事例では、個々の検出器の2次元アレイ、例えば、CCDもしくはCMOS画像センサの2次元アレイを指し得る。いくつかの事例では、2次元検出器アレイは、下記にさらに詳細に議論されるであろうように、CMOS画像センサ、CCD画像センサ、暗視野STEM検出器、ファラデーカップセンサ、または他のタイプの検出器の組み合わせを含む、個々の検出器の2次元アレイを備えてもよい。
本明細書で使用されるように、用語「ビデオ」は、いくつかの事例では、時間の関数として編成される画像または回折パターンデータを指し得る。いくつかの事例では、用語「ビデオ」は、異なる測定動作パラメータ、例えば、電子プローブビーム位置の関数として、または高次元データ構造上にデータをマッピングするための測定動作パラメータの多次元ベクトルの関数として編成される、画像もしくは回折データを指し得る。これらの事例のうちのいずれかでは、データは、「高フレームレートデータ」と称され得る。
本明細書で使用されるように、語句「連続同期化」は、2つのプロセスのためのタイミング正確度が、下記により詳細に議論されるであろうように、定義された性能仕様(例えば、2つのプロセスの同期化が、50ミリ秒以内まで正確である、またはより良好である)を満たすように、長期的な時間周期(例えば、最大8時間以上のデータ入手周期)にわたる2つのプロセスの精密な同期化(例えば、CMOSカメラからのローリングシャッタ読出を伴う2次元偏向器の偏向)を指す。
高フレームレート電子顕微鏡検査:透過型電子顕微鏡検査(TEM)では、高速ビデオが、生物学的サンプルおよびナノスケール材料の動態を特性評価するためのますます重要なツールである。サンプル傾転またはプローブビーム位置等の実験パラメータの変調に同期化されたとき、高速ビデオは、科学および工業用途で有用である大量の多次元データセットの高スループット入手を可能にする。
TEM撮像プロセスで使用される電子は、測定されているサンプルを容易に損傷し得る。理想的な検出プロセスは、画像捕捉のために100%デューティサイクルを利用し、サンプルの不必要な、または測定されない露出を回避するであろう。これは、電子が読出サイクルの全てまたは一部の間にサンプルに衝突し続け、検出されるのではなく破棄されるため、グローバルシャッタ動作を望ましくないものにする。ローリングシャッタモードでアクティブに読み出されているカメラの領域から離れるように、かつ露出のために利用可能であるそれらの領域に向かって、サンプルによって透過または散乱された電子(例えば、画像もしくは回折データを備える、透過または散乱された電子のパターン)を指向することによって、本明細書に開示される方法およびシステムは、サンプルに衝突する全ての電子が測定に寄与する機会を有することを確実にすることによって、電子を無駄にすることを回避する。
測定中のサンプルを損傷することに加えて、TEMにおける電子ビームは、従来の画像検出器を容易に損傷し得る。したがって、TEMで使用される画像検出器は、耐放射線強化を施され、または特に電子ビームとの併用のために設計され、耐久性、空間分解能、ダイナミックレンジ、および速度における有意なトレードオフにつながるはずである。上記に留意されるように、高フレームレートTEMビデオデータを捕捉する改良された方法の必要性が存在する。本明細書に開示される方法およびシステムは、現在市場に出ている殆どのTEM画像センサ、ならびに現在開発中の検出器の性能を向上させるために使用されることができる。
ビデオフレームあたり削減された数のピクセルが、向上したフレームレートと引き換えにした許容トレードオフである、TEM撮像におけるいくつかの用途が存在する。現在市場に出ている殆どのTEM画像センサは、縮小した視野を読み出す、またはより速い速度と引き換えに空間分解能の損失をもたらす、ピクセルをともにビン化する能力を提供する。開示される方法およびシステムは、ユーザが、より広範囲のパラメータにわたって類似トレードオフを成し、実質的により高いフレームレートを獲得するために、さらなる融通性を提供する。
光子および電子光学系の両方における従来技術の開示は、画像のバーストまたはストリーク画像を記録する目的のために、2次元静電偏向器を利用し、画像センサを細分してきた。例えば、米国特許第3,887,841号および第4,565,923号(CCDフレーミングカメラ技法を説明する)、ならびに米国特許第9,451,177B2号(光が、一連の蛍光体ブロックに偏向され、画像フレームのシーケンスの捕捉のために光に戻るように変換される、電子に変換される、高速カメラを説明する)を参照されたい。電子光学系の場合、2次元静電偏向器が、米国特許第9,165,743B2号に説明されるように、単一のカメラ読出内のストロボで照明された画像の複数のサブフレームを捕捉するために使用されてきた。我々の知る限り、これらの参考文献のうちのいずれも、本開示される方法の主要な利点である、恣意的な長さの連続高フレームレートビデオデータ入手を達成するためのローリングシャッタビデオ画像センサとの高速2次元静電または電磁偏向器の連続同期化を説明していない。
電子顕微鏡において分光測定を実施するための若干関連する技法が、国際公開第WO2019/028129A1号に説明される。本公開では、電子画像を捕捉するように設計されるCMOSセンサが、電子エネルギー損失スペクトル(EELS)を記録するために使用される。スペクトルが、長く細い縞でカメラ上に投影される。1次元静電偏向器が、アクティブに読み出されている画像センサのいずれの面積も露出することを回避するように、時間の関数として、カメラを横断してスペクトル露出縞をスクロールする。これは、より高いスループットにおけるEELSスペクトルデータ入手を可能にすることを意図している。国際公開第WO2019/028129A1号参考文献に説明される方法は、少なくとも3つの方法で本明細書に開示されるものと明確に異なる。すなわち、(i)本明細書に開示される方法が、実空間画像および回折データのための高フレームレートにおけるビデオデータの向上した入手を可能にする一方、国際公開第WO2019/028129A1号の方法は、EELSスペクトルに適用され、(ii)本明細書に開示される方法が、2次元偏向器を使用し、2次元センサ上にグリッド様パターンでビデオフレームを配列する一方、国際公開第WO2019/028129A1号の方法は、1次元でスペクトル露出ストライプを偏移させるのみであり、(iii)本明細書に開示される方法は、「センサ」のより広義の定義に適用される。国際公開第WO2019/028129A1号に開示される方法が、CMOS電子画像検出器の使用を規定する一方、本明細書に開示される方法は、透過または散乱された電子のパターンを単一の画像検出器の異なる領域に、もしくは異なる検出器のアレイ内の要素の間に偏向させることに適用され得、例えば、下記により詳細に議論されるであろうような高ダイナミックレンジデータ入手の場合、異なる検出器は、異なる感度レベルまたは検出能力を有してもよい。
上記に留意されるように、開示される方法およびシステムは、読出の間に信号の損失が存在しないように、異なる検出器または単一の検出器の異なる小領域の露出を連続的に順序付けることによって、電子顕微鏡における(もしくは下記により詳細に議論されるであろうような光学システムにおける)ビデオフレームレートデータ入手を向上させる。これは、切替時間が、検出器の各小領域を露出し、図1に図示されるように、サンプルによって透過または散乱される電子のパターン(例えば、画像データもしくは回折データ)を検出器の異なる小領域に指向するために使用される滞留時間よりもはるかに速い、高速2次元偏向器、例えば、2D静電偏向器または2D電磁偏向器を使用して遂行される。図1は、器具の上部に位置付けられる電子銃または他の源から生じる電子ビームが、サンプルを通して下向きに伝搬する、TEMの非限定的実施例を示す。電子光学系(図示せず)が、サンプルによって透過または散乱されるビームを、器具の底部に位置付けられる検出器上に結像する。サンプルと(標準TEMで構成されるような)検出器との間には、電場を印加し、透過または散乱された電子(例えば、画像もしくは回折パターン)を検出器のプログラムされた小領域に偏移または偏向させる、2D偏向器デバイスがある。電子ハードウェアおよび自動化ソフトウェアが、小領域露出のプログラムされたシーケンスを制御し、(例えば、偏向器制御信号を変調させることによって)偏向シーケンスとカメラの読出レートとの間の精密な連続同期化を維持するために使用される。図1は、「STEM走査制御」および「検出器同期化」モジュールの両方を「サブフレームシーケンス制御」モジュールに直接接続されるものとして描写するが、これらのタイミングシステムの相互接続は、他の実装では異なるように構成されてもよい。「検出器同期化」モジュールは、例えば、「STEM走査制御」モジュールに直接接続され得る。図1に描写される実施例では、カメラは、16個の露出サブフレームに細分される。検出器が、単一の標準TEMカメラである場合、フレームレートの16倍の向上を伴う連続ビデオが、達成される。
図2は、検出器を9つの明確に異なる小領域に分割する、露出シーケンスの非限定的実施例を提供する。正方形の輪郭は、所与の時点における全検出器面積を表す。鎖線は、同一の時点に読み出されているピクセルを表す。ローリングシャッタ読出モードでは、読出線は、カメラを横断して連続的に移動し、最終線が読み出された後に最初の線に即時に戻る。小さい黒色の正方形は、同一の時点における露出領域を示す。偏向器およびカメラのタイミングは、露出領域が、読出領域と決して一致しないように、慎重に同期化される。
図3は、開示される方法およびシステムを実装する際に使用され得る、2対の電極(X電極およびY電極)を備える、2次元静電偏向器の概略図を提供する。図4A-Eは、CMOSカメラ等の2次元検出器の異なる小領域を露出するためのTEMにおける電子の静電偏向を2次元検出器のためのローリングシャッタ読出信号と同期化するためのタイミング図の非限定的実施例を提供する。本説明図では、CMOSカメラセンサの読出は、右上のタイミング図(図4B)内の3つの領域A、B、およびC(図4A)内のピクセルの行に関して描写される。画像センサの読出は、1次元で検出器を横断して行毎に進み、次いで、第1の行に戻る。本実施例では、2次元偏向器は、図4Dのタイミング図に描写される露出のシーケンスに従って、電子を3×3=9サブフレームまたは露出領域のグリッド(図4C)の中に偏向させ、それによって、ビデオフレームレートの9倍の向上をもたらす。図4Cおよび4Dに示される偏向パターンならびにタイミングを実装するために使用される、2対の電極(すなわち、図3に図示される2次元静電偏向器内のXおよびY電極)の間に印加される電圧のシーケンスが、図4Eに描写される。上記に留意されるように、フレームレートの向上は、検出器(または2次元検出器アレイ)のための露出シーケンスに含まれる小領域(または個々の検出器)の総数によって判定される。例えば、小領域または個々の検出器の2×2アレイに対応する、例えば、4回の露出のシーケンスが使用される事例において、結果として生じるデータ入手フレームレートは、個々の検出器(または検出器の2次元アレイ)のための読出レートのものの4倍であり得る。いくつかの事例では、開示される方法およびシステムを使用して達成されるビデオデータフレームレートは、少なくとも4倍、少なくとも8倍、少なくとも12倍、少なくとも16倍、少なくとも20倍、少なくとも24倍、少なくとも28倍、少なくとも32倍、少なくとも64倍、少なくとも128倍、少なくとも256倍、少なくとも512倍、またはより高くあり得る。いくつかの事例では、開示される方法およびシステムを使用して達成されるデータ入手フレームレートは、本範囲内の任意の値、例えば、少なくとも144倍であり得る。
図4Cは、電子を3×3=9サブフレームまたは露出領域のグリッドの中に偏向させるための2次元偏向器の使用を図示するが、いくつかの事例では、露出の他のパターンも、使用されてもよい。いくつかの事例では、2次元偏向器は、電子を、例えば、2×2、3×3、4×4、5×5、6×6、7×7、8×8、9×9、10×10、11×11、12×12、13×13、14×14、15×15、16×16、17×17、18×18、19×19、20×20個の小領域、以上のもののパターンに偏向させるために使用されてもよい。いくつかの事例では、2次元偏向器は、電子を、3×4、6×9、9×12、12×15個等の小領域の非正方形アレイに偏向させるために使用されてもよい。いくつかの事例では、2次元偏向器は、電子を、例えば、2次元検出器アレイ内の2×2、3×3、4×4、5×5、6×6、7×7、8×8、9×9、10×10、11×11、12×12、13×13、14×14、15×15、16×16、17×17、18×18、19×19、20×20個、以上の異なる検出器のパターンに偏向させるために使用されてもよい。いくつかの事例では、2次元偏向器は、電子を、3×4、6×9、9×12、12×15個の検出器等の個々の検出器の非正方形アレイに偏向させるために使用されてもよい。
図4Cでは、サブフレームまたは小領域(すなわち、露出領域)は、隣接する長方形領域として示される。いくつかの事例では、それらは、非長方形および/または非隣接であり得る。いくつかの事例では、偏向されたビームは、円形開口を通して投影され、それによって、カメラ上に円形画像のアレイを投影することをもたらし得る(例えば、図1参照)。いくつかの事例では、シーケンスの間に決して露出されないピクセルから成る、露出領域の間の間隙が存在し得る。いくつかの事例では、あるピクセルが、読み出される前に複数回露出されるように、露出領域の間に重複が存在し得る。
図4Cおよび4Dでは、カメラの異なるサブフレーム/小領域を露出する順序(図4C(空間マップ)および図4D(露出タイミング図))が、読取順に示される(図4A(空間マップ)および図4B(読出タイミング図)参照)が、しかしながら、実際の順序は、アクティブに読み出されているカメラの具体的領域を露出することを回避する、任意のパターンであってもよい。例えば、いくつかの事例では、正弦パターンが、最小切替時間を達成するために使用されてもよい。いくつかの事例では、小領域の各行内の露出の順序は、シャッフルされ得る。いくつかの事例では、サブフレーム露出シーケンスは、カメラ読出サイクル毎に同一である場合とそうではない場合がある。いくつかの事例では、各サブフレームは、所与のカメラ読出サイクルに関して正確に1回露出されてもよい。他の事例において、あるサブフレームが、複数回露出されてもよい。そのような露出シーケンスは、圧縮感知データ入手モードを実装する際に使用される場合とそうではない場合がある。いくつかの事例では、あるサブフレームが、時間に基準マークを生成し、データの解釈を促進するように、スキップされてもよい。
各対の偏向器電極(XおよびY対)に印加される電圧波形は、等しい大きさの段階的変化を備えるものとして図4Eに示される。いくつかの事例では、各対の1つのプレートが、固定電圧で保持されてもよい、または各対に印加される電圧は、大きさが異なる、もしくは同一または反対の符号を有してもよい。いくつかの事例では、電圧波形の大きさは、約0ボルト~約10kVに及んでもよい。いくつかの事例では、電圧波形の大きさは、少なくとも0ボルト、少なくとも10ボルト、少なくとも100ボルト、少なくとも500ボルト、少なくとも1,000ボルト、少なくとも5kV、または少なくとも10kVであってもよい。いくつかの事例では、電圧波形の大きさは、最大で10kV、最大で5kV、最大で1,000ボルト、最大で500ボルト、最大で100ボルト、最大で10ボルト、または約0ボルトであってもよい。本段落に説明される下限および上限値のうちのいずれかは、本開示内に含まれる範囲を形成するように組み合わせられてもよく、例えば、いくつかの事例では、電圧波形の大きさは、約100ボルト~約1,000ボルトに及んでもよい。いくつかの事例では、電圧波形の大きさは、本範囲内の任意の値、例えば、約665ボルトを有してもよい。電圧波形のための大きさおよびタイミングシーケンスは、プログラム可能であり、露出領域の数、小領域が露出される順序、および各小領域における露出の持続時間(すなわち、小領域毎の滞留時間)を判定する、4つの電極電圧のシーケンスを備える。
サブフレーム/露出領域の間の透過または散乱された電子の偏向は、電場を電子のビームに印加する電極対上の電圧のシーケンスを使用して、図3および図4A-4Eに図示されるシステムにおいて遂行されてもよい。他の実装では、電子は、例えば、磁気コイルを通して駆動される電流のシーケンスによって発生される磁場を使用することによって、偏向されてもよい。さらに他の実装では、偏向プロセスによって導入される画像または回折データ歪曲が、低減されるように、電圧または電流が印加される、付加的電極もしくは電磁石が存在し得る。
ある事例では、各小領域または2次元検出器アレイ内の個々の検出器における露出の持続時間(すなわち、小領域または個々の検出器毎の滞留時間)は、約1マイクロ秒~約100ミリ秒に及んでもよい。いくつかの事例では、滞留時間は、少なくとも1マイクロ秒、少なくとも10マイクロ秒、少なくとも100マイクロ秒、少なくとも1ミリ秒、少なくとも10ミリ秒、または少なくとも100ミリ秒であってもよい。いくつかの事例では、滞留時間は、最大で100ミリ秒、最大で10ミリ秒、最大で1ミリ秒、最大で100マイクロ秒、最大で10マイクロ秒、または最大で1マイクロ秒であってもよい。本段落に説明される下限および上限値のうちのいずれかは、本開示内に含まれる範囲を形成するように組み合わせられてもよく、例えば、いくつかの事例では、滞留時間は、約10マイクロ秒~約10ミリ秒に及んでもよい。いくつかの事例では、滞留時間は、本範囲内の任意の値、例えば、約1.3ミリ秒を有してもよい。いくつかの事例では、図4Dのタイミング図に図示されるように、サブフレーム/露出領域/個々の検出器毎の滞留時間は、相互と等しくあり得る。いくつかの事例では、サブフレーム/露出領域/個々の検出器毎の滞留時間は、相互と異なり得、個別に調節可能であり得る。
いくつかの事例では、本明細書に説明される方法およびシステムは、データの時間的歪曲を負うことなく、高デューティサイクル動作を提供するように構成される。いくつかの事例では、デューティサイクルは、データの時間的歪曲を負うことなく、少なくとも85%、少なくとも90%、少なくとも95%、少なくとも98%、または少なくとも99%であってもよい。
一般に、2次元偏向器の切替速度は、時間的歪曲を最小限にするために、すなわち、フレームの間にぼやけが存在しないように、小領域または個々の検出器の露出のために使用される滞留時間と比較して、速くあるべきである。いくつかの事例では、2次元偏向器の切替時間は、約1ナノ秒~約1ミリ秒に及んでもよい。いくつかの事例では、切替時間は、少なくとも1ナノ秒、少なくとも10ナノ秒、少なくとも100ナノ秒、少なくとも1マイクロ秒、少なくとも10マイクロ秒、少なくとも100マイクロ秒、または少なくとも1ミリ秒である。いくつかの事例では、切替時間は、最大で1ミリ秒、最大で100マイクロ秒、最大で10マイクロ秒、最大で1マイクロ秒、最大で100ナノ秒、最大で10ナノ秒、または最大で1ナノ秒である。本段落に説明される下限および上限値のうちのいずれかは、本開示内に含まれる範囲を形成するように組み合わせられてもよく、例えば、いくつかの事例では、切替時間は、約10ナノ秒~約10マイクロ秒に及んでもよい。いくつかの事例では、切替時間は、本範囲内の任意の値、例えば、約1.3ミリ秒を有してもよい。いくつかの事例では、サブフレーム/露出領域/個々の検出器の間で切り替えるための切替時間は、相互と等しくあり得る。いくつかの事例では、切替時間は、異なり得、個別に調節可能であり得る。
一般に、2次元偏向器によって達成される空間的位置付けは、偏向された画像または回折パターンを再配置する際のジッタが単一の画像センサピクセルのほぼ寸法未満であるために、十分に正確であるはずである。いくつかの事例では、2次元偏向器によって達成される空間的位置付けは、約500μmよりも良好に、約450μmよりも良好に、約400μmよりも良好に、約350μmよりも良好に、約300μmよりも良好に、約250μmよりも良好に、約200μmよりも良好に、約150μmよりも良好に、約100μmよりも良好に、約90μmよりも良好に、約80μmよりも良好に、約70μmよりも良好に、約60μmよりも良好に、約50μmよりも良好に、約40μmよりも良好に、約30μmよりも良好に、約20μmよりも良好に、約10μmよりも良好に、約9μmよりも良好に、約8μmよりも良好に、約7μmよりも良好に、約6μmよりも良好に、約5μmよりも良好に、約4μmよりも良好に、約3μmよりも良好に、約2μmよりも良好に、または約1μmよりも良好に正確である。
いくつかの事例では、検出器の読出サイクル(例えば、CMOSカメラのためのローリングシャッタ読出サイクル)との2次元偏向器の同期化は、50ミリ秒よりも良好に、40ミリ秒よりも良好に、30ミリ秒よりも良好に、20ミリ秒よりも良好に、10ミリ秒よりも良好に、9ミリ秒よりも良好に、8ミリ秒よりも良好に、7ミリ秒よりも良好に、6ミリ秒よりも良好に、5ミリ秒よりも良好に、4ミリ秒よりも良好に、3ミリ秒よりも良好に、2ミリ秒よりも良好に、1ミリ秒よりも良好に、900マイクロ秒よりも良好に、800マイクロ秒よりも良好に、700マイクロ秒よりも良好に、600マイクロ秒よりも良好に、500マイクロ秒よりも良好に、400マイクロ秒よりも良好に、300マイクロ秒よりも良好に、200マイクロ秒よりも良好に、100マイクロ秒よりも良好に、90マイクロ秒よりも良好に、80マイクロ秒よりも良好に、70マイクロ秒よりも良好に、60マイクロ秒よりも良好に、50マイクロ秒よりも良好に、40マイクロ秒よりも良好に、30マイクロ秒よりも良好に、20マイクロ秒よりも良好に、10マイクロ秒よりも良好に、9マイクロ秒よりも良好に、8マイクロ秒よりも良好に、7マイクロ秒よりも良好に、6マイクロ秒よりも良好に、5マイクロ秒よりも良好に、4マイクロ秒よりも良好に、3マイクロ秒よりも良好に、2マイクロ秒よりも良好に、1マイクロ秒よりも良好に、900ナノ秒よりも良好に、800ナノ秒よりも良好に、700ナノ秒よりも良好に、600ナノ秒よりも良好に、500ナノ秒よりも良好に、400ナノ秒よりも良好に、300ナノ秒よりも良好に、200ナノ秒よりも良好に、または100ナノ秒よりも良好に正確であり得る。
図4Aおよび4Bは、ピクセルの一番上の行が読み出され、次いで、第2の行、次いで、第3の行等が、一番下の行まで読み出される、典型的ローリングシャッタ読出パターンを図示する。しかしながら、開示される方法は、異なる時間においてカメラの異なる領域(または検出器のアレイ内の異なる検出器)に実施される、任意の連続ビデオ読出に適用される。例えば、読出は、ピクセルの左列から開始し、ピクセルの右列までカメラを横断して掃引し得る。読出は、ピクセルの複数の同時行または列を包含し得る。読出は、カメラの画像センサのブロック領域のシーケンスに適用され得る。重要点は、連続読出速度が、読出の間に領域を露出することと関連付けられる歪曲を伴わずに達成されるように、カメラ/検出器の異なる領域が読み出されていない間に、露出がそれらに同期化様式で指向されることである。
いくつかの事例では、開示される方法(およびそれらを実装するように構成されるシステム)は、入手されたデータを処理し、高フレームレートビデオデータ、ハイパースペクトル画像データ、画像の2次元もしくはN次元アレイ、および/または回折パターンデータ等を発生させるためのプロセッサまたはコンピュータ実装アルゴリズムおよび方法を含んでもよい。例えば、いくつかの事例では、プロセッサまたはコンピュータ実装アルゴリズムおよび方法は、(i)未加工カメラ読出データを、個々の回折パターンまたは画像を含有するサブフレームにセグメント化し、(ii)偏向プロセスによって導入される歪曲を補正し、(iii)次いで、標準動作モードで同一の検出器からのより遅いデータに使用されたであろう、同一の方法に従って直接視認される、または定量的に分析され得る、画像スタック、回折パターンのアレイ、もしくはビデオデータを組み立てるために、サブフレームを整合させてもよい。いくつかの事例では、これらの処理ステップは、画像データまたは回折データが入手されたものと同一のサンプルからの前処理された較正データを利用してもよい。いくつかの事例では、これらの処理ステップは、類似条件下で測定される異なるサンプルに関する前処理された較正データを利用してもよい。いくつかの事例では、プロセッサまたはコンピュータ実装アルゴリズムおよび方法は、(i)サブフレームデータ自体内の一貫した特徴を識別することによって、サブフレームの整合を微調整するステップ、(ii)サブフレーム整合の微調整を使用し、測定の間のサンプルドリフトを補正するステップ、(iii)フィルタ処理し、測定中のサンプルもしくは物理的システム、検出器の特性、および/または光学系自体の予備知識を使用して、雑音を除去するステップ、ならびに/もしくは(iv)単一の読出サイクルの間に複数回露出された検出器アレイの領域からデータを推測するステップ等の付加的処理ステップを実施してもよい。
いくつかの事例では、開示される方法およびシステムを使用してコンパイルされる、連続高フレームレートデータは、画像または回折データの約2~約4,194,304(例えば、2,048×2,048)個のフレームを備えてもよい。いくつかの事例では、開示される方法およびシステムを使用してコンパイルされる、連続高フレームレートビデオデータは、画像または回折データの少なくとも2個、少なくとも4個、少なくとも8個、少なくとも16個、少なくとも32個、少なくとも64個、少なくとも128個、少なくとも256個、少なくとも512個、少なくとも1,024個、少なくとも2,048個、少なくとも4,096個、少なくとも8,192個、少なくとも16,384個、少なくとも32,768個、少なくとも65,536個、少なくとも131,072個、少なくとも262,144個、少なくとも524,288個、少なくとも1,048,576個、少なくとも2,097,152個、もしくは少なくとも4,194,304個のフレームを備えてもよい。いくつかの事例では、開示される方法およびシステムを使用してコンパイルされる、連続高フレームレートビデオデータのフレームの数は、本範囲内の任意の値、例えば、画像または回折データの約6,200個のフレームを有してもよい。いくつかの事例では、データを入手するために要求される合計時間は、サンプルのタイプおよび/または行われている測定に応じて、約1秒~約8時間に及んでもよい。いくつかの事例では、合計データ入手時間は、少なくとも1秒、少なくとも10秒、少なくとも30秒、少なくとも1分、少なくとも10分、少なくとも30分、少なくとも1時間、少なくとも2時間、少なくとも3時間、少なくとも4時間、少なくとも5時間、少なくとも6時間、少なくとも7時間、または少なくとも8時間であってもよい。
高フレームレート光学顕微鏡検査および撮像:主に高フレームレート透過型電子顕微鏡検査のためのデータ捕捉との関連で議論されるが、上記に説明される方法はまた、光学顕微鏡検査および撮像用途に適用されてもよい。例えば、電子ではなく光子の偏向のために好適な高速2次元偏向器が、サンプルまたは物体によって透過、反射、および/または散乱された光子のパターンを2次元検出器(例えば、CCDもしくはCMOS画像センサ)または個々の検出器の2次元アレイの一連の2つ以上の小領域に偏向させるために使用されてもよい。光子を偏向させるための好適な2次元偏向器の実施例は、限定ではないが、回転ミラー、回転プリズム等を含む。電子の検出のために設計および最適化されるものではなく、紫外線、可視、または赤外光との併用のために設計および最適化された、CCDまたはCMOSカメラ、もしくは他の検出器が、選定されるであろう。
上記に説明される高フレームレート透過型電子顕微鏡検査方法に関して、2次元検出器の連続読出モード、例えば、CMOSカメラのためのローリングシャッタモードとの2次元偏向器変調制御信号の精密な連続同期化は、露出の時間においてアクティブに読み出されていない検出器の一連の2つ以上の小領域の露出を可能にする。小領域のそれぞれによって入手される画像フレームの処理が、次いで、2次元検出器のための読出レートよりも有意に高いフレームレートを有する、連続ビデオデータを組み立てるために、使用されてもよい。
再度、達成されるフレームレートの向上は、検出器(または2次元検出器アレイ)のための露出シーケンス/読出サイクル内に含まれる小領域(または個々の検出器)の総数によって判定される。例えば、小領域または個々の検出器の2×2アレイに対応する、例えば、4回の露出のシーケンスが使用される事例において、結果として生じるデータ入手フレームレートは、個々の検出器(または検出器の2次元アレイ)のための読出レートのものの4倍であり得る。いくつかの事例では、開示される方法およびシステムを使用して達成されるビデオデータフレームレートは、少なくとも4倍、少なくとも8倍、少なくとも12倍、少なくとも16倍、少なくとも20倍、少なくとも24倍、少なくとも28倍、少なくとも32倍、少なくとも64倍、少なくとも128倍、少なくとも256倍、少なくとも512倍、またはより高くあり得る。いくつかの事例では、開示される方法およびシステムを使用して達成されるデータ入手フレームレートは、本範囲内の任意の値、例えば、少なくとも144倍であり得る。
いくつかの事例では、2次元偏向器は、光子を、例えば、2×2、3×3、4×4、5×5、6×6、7×7、8×8、9×9、10×10、11×11、12×12、13×13、14×14、15×15、16×16、17×17、18×18、19×19、20×20個の小領域、以上のもののパターンに偏向させるために使用されてもよい。いくつかの事例では、2次元偏向器は、光子を、3×4、6×9、9×12、12×15個等の小領域の非正方形アレイに偏向させるために使用されてもよい。いくつかの事例では、2次元偏向器は、光子を、例えば、2次元検出器アレイ内の2×2、3×3、4×4、5×5、6×6、7×7、8×8、9×9、10×10、11×11、12×12、13×13、14×14、15×15、16×16、17×17、18×18、19×19、20×20個、以上の異なる検出器のパターンに偏向させるために使用されてもよい。いくつかの事例では、2次元偏向器は、光子を、3×4、6×9、9×12、12×15個の検出器等の個々の検出器の非正方形アレイに偏向させるために使用されてもよい。
いくつかの事例では、サブフレームまたは小領域(すなわち、露出領域)は、例えば、隣接する長方形領域であってもよい。いくつかの事例では、それらは、非長方形および/または非隣接であり得る。いくつかの事例では、偏向されたビームは、円形開口を通して投影され、それによって、カメラ上に円形画像のアレイを投影することをもたらし得る。いくつかの事例では、シーケンスの間に決して露出されないピクセルから成る、露出領域の間の間隙が存在し得る。いくつかの事例では、あるピクセルが、読み出される前に複数回露出されるように、露出領域の間に重複が存在し得る。
いくつかの事例では、カメラの異なるサブフレーム/小領域を露出する順序は、アクティブに読み出されているカメラの具体的領域を露出することを回避する、任意のパターンであってもよい。例えば、いくつかの事例では、正弦パターンが、最小切替時間を達成するために使用されてもよい。いくつかの事例では、小領域の各行内の露出の順序は、シャッフルされ得る。いくつかの事例では、サブフレーム露出シーケンスは、カメラ読出サイクル毎に同一である場合とそうではない場合がある。いくつかの事例では、各サブフレームは、所与のカメラ読出サイクルに関して正確に1回露出されてもよい。他の事例において、あるサブフレームが、複数回露出されてもよい。そのような露出シーケンスは、圧縮感知データ入手モードを実装する際に使用される場合とそうではない場合がある。いくつかの事例では、あるサブフレームが、時間に基準マークを生成し、データの解釈を促進するように、スキップされてもよい。
ある事例では、各小領域または2次元検出器アレイ内の個々の検出器における露出の持続時間(すなわち、小領域または個々の検出器毎の滞留時間)は、約1マイクロ秒~約100ミリ秒に及んでもよい。いくつかの事例では、滞留時間は、少なくとも1マイクロ秒、少なくとも10マイクロ秒、少なくとも100マイクロ秒、少なくとも1ミリ秒、少なくとも10ミリ秒、または少なくとも100ミリ秒であってもよい。いくつかの事例では、滞留時間は、最大で100ミリ秒、最大で10ミリ秒、最大で1ミリ秒、最大で100マイクロ秒、最大で10マイクロ秒、または最大で1マイクロ秒であってもよい。本段落に説明される下限および上限値のうちのいずれかは、本開示内に含まれる範囲を形成するように組み合わせられてもよく、例えば、いくつかの事例では、滞留時間は、約10マイクロ秒~約10ミリ秒に及んでもよい。いくつかの事例では、滞留時間は、本範囲内の任意の値、例えば、約1.3ミリ秒を有してもよい。いくつかの事例では、サブフレーム/露出領域/個々の検出器毎の滞留時間は、相互と等しくあり得る。いくつかの事例では、サブフレーム/露出領域/個々の検出器毎の滞留時間は、相互と異なり得、個別に調節可能であり得る。
いくつかの事例では、本明細書に説明される方法およびシステムは、データの時間的歪曲を負うことなく、高デューティサイクル動作を提供するように構成される。いくつかの事例では、デューティサイクルは、データの時間的歪曲を負うことなく、少なくとも85%、少なくとも90%、少なくとも95%、少なくとも98%、または少なくとも99%であってもよい。
一般に、2次元偏向器の切替速度は、時間的歪曲を最小限にするために、すなわち、フレームの間にぼやけが存在しないように、小領域または個々の検出器の露出のために使用される滞留時間と比較して、速くあるべきである。いくつかの事例では、2次元偏向器の切替時間は、約1ナノ秒~約1ミリ秒に及んでもよい。いくつかの事例では、切替時間は、少なくとも1ナノ秒、少なくとも10ナノ秒、少なくとも100ナノ秒、少なくとも1マイクロ秒、少なくとも10マイクロ秒、少なくとも100マイクロ秒、または少なくとも1ミリ秒である。いくつかの事例では、切替時間は、最大で1ミリ秒、最大で100マイクロ秒、最大で10マイクロ秒、最大で1マイクロ秒、最大で100ナノ秒、最大で10ナノ秒、または最大で1ナノ秒である。本段落に説明される下限および上限値のうちのいずれかは、本開示内に含まれる範囲を形成するように組み合わせられてもよく、例えば、いくつかの事例では、切替時間は、約10ナノ秒~約10マイクロ秒に及んでもよい。いくつかの事例では、切替時間は、本範囲内の任意の値、例えば、約1.3ミリ秒を有してもよい。いくつかの事例では、サブフレーム/露出領域/個々の検出器の間で切り替えるための切替時間は、相互と等しくあり得る。いくつかの事例では、切替時間は、異なり得、個別に調節可能であり得る。
電子顕微鏡検査の場合に関して、2次元偏向器によって達成される空間的位置付けは、偏向された画像または回折パターンを再配置する際のジッタが単一の画像センサピクセルのほぼ寸法未満であるために、十分に正確であるべきである。いくつかの事例では、2次元偏向器によって達成される空間的位置付けは、約500μmよりも良好に、約450μmよりも良好に、約400μmよりも良好に、約350μmよりも良好に、約300μmよりも良好に、約250μmよりも良好に、約200μmよりも良好に、約150μmよりも良好に、約100μmよりも良好に、約90μmよりも良好に、約80μmよりも良好に、約70μmよりも良好に、約60μmよりも良好に、約50μmよりも良好に、約40μmよりも良好に、約30μmよりも良好に、約20μmよりも良好に、約10μmよりも良好に、約9μmよりも良好に、約8μmよりも良好に、約7μmよりも良好に、約6μmよりも良好に、約5μmよりも良好に、約4μmよりも良好に、約3μmよりも良好に、約2μmよりも良好に、または約1μmよりも良好に正確である。
再度、検出器の読出サイクル(例えば、CMOSカメラのためのローリングシャッタ読出サイクル)との2次元偏向器の同期化は、50ミリ秒よりも良好に、40ミリ秒よりも良好に、30ミリ秒よりも良好に、20ミリ秒よりも良好に、10ミリ秒よりも良好に、9ミリ秒よりも良好に、8ミリ秒よりも良好に、7ミリ秒よりも良好に、6ミリ秒よりも良好に、5ミリ秒よりも良好に、4ミリ秒よりも良好に、3ミリ秒よりも良好に、2ミリ秒よりも良好に、1ミリ秒よりも良好に、900マイクロ秒よりも良好に、800マイクロ秒よりも良好に、700マイクロ秒よりも良好に、600マイクロ秒よりも良好に、500マイクロ秒よりも良好に、400マイクロ秒よりも良好に、300マイクロ秒よりも良好に、200マイクロ秒よりも良好に、100マイクロ秒よりも良好に、90マイクロ秒よりも良好に、80マイクロ秒よりも良好に、70マイクロ秒よりも良好に、60マイクロ秒よりも良好に、50マイクロ秒よりも良好に、40マイクロ秒よりも良好に、30マイクロ秒よりも良好に、20マイクロ秒よりも良好に、10マイクロ秒よりも良好に、9マイクロ秒よりも良好に、8マイクロ秒よりも良好に、7マイクロ秒よりも良好に、6マイクロ秒よりも良好に、5マイクロ秒よりも良好に、4マイクロ秒よりも良好に、3マイクロ秒よりも良好に、2マイクロ秒よりも良好に、1マイクロ秒よりも良好に、900ナノ秒よりも良好に、800ナノ秒よりも良好に、700ナノ秒よりも良好に、600ナノ秒よりも良好に、500ナノ秒よりも良好に、400ナノ秒よりも良好に、300ナノ秒よりも良好に、200ナノ秒よりも良好に、または100ナノ秒よりも良好に正確であり得る。
上記に議論される電子顕微鏡検査方法およびシステムに関して、開示される光学方法(およびそれらを実装するように構成される光学システム)はさらに、入手されたデータを処理し、高フレームレートデータを発生させるためのプロセッサまたはコンピュータ実装アルゴリズムおよび方法を含んでもよい。例えば、いくつかの事例では、プロセッサまたはコンピュータ実装アルゴリズムおよび方法は、(i)未加工カメラ読出データを、個々の画像を含有するサブフレームにセグメント化し、(ii)偏向プロセスによって導入される歪曲を補正し、(iii)次いで、標準動作モードで同一の検出器からのより遅いデータに使用されたであろう、同一の方法に従って直接視認される、または定量的に分析され得る、画像スタックもしくはビデオデータを組み立てるために、サブフレームを整合させてもよい。いくつかの事例では、これらの処理ステップは、画像データが入手されたものと同一のサンプルからの前処理された較正データを利用してもよい。いくつかの事例では、これらの処理ステップは、類似条件下で測定される異なるサンプルに関する前処理された較正データを利用してもよい。いくつかの事例では、プロセッサまたはコンピュータ実装アルゴリズムおよび方法は、(i)サブフレームデータ自体内の一貫した特徴を識別することによって、サブフレームの整合を微調整するステップ、(ii)サブフレーム整合の微調整を使用し、測定の間のサンプルドリフトを補正するステップ、(iii)フィルタ処理し、測定中のサンプルもしくは物理的システム、検出器の特性、および/または光学系自体の予備知識を使用して、雑音を除去するステップ、ならびに/もしくは(iv)単一の読出サイクルの間に複数回露出された検出器アレイの領域からデータを推測するステップ等の付加的処理ステップを実施してもよい。
いくつかの事例では、開示される方法およびシステムを使用してコンパイルされる、連続高フレームレートデータは、画像または回折データの約2~約4,194,304(例えば、2,048×2,048)個のフレームを備えてもよい。いくつかの事例では、開示される方法およびシステムを使用してコンパイルされる、連続高フレームレートビデオデータは、画像または回折データの少なくとも2個、少なくとも4個、少なくとも8個、少なくとも16個、少なくとも32個、少なくとも64個、少なくとも128個、少なくとも256個、少なくとも512個、少なくとも1,024個、少なくとも2,048個、少なくとも4,096個、少なくとも8,192個、少なくとも16,384個、少なくとも32,768個、少なくとも65,536個、少なくとも131,072個、少なくとも262,144個、少なくとも524,288個、少なくとも1,048,576個、少なくとも2,097,152個、もしくは少なくとも4,194,304個のフレームを備えてもよい。いくつかの事例では、開示される方法およびシステムを使用してコンパイルされる、連続高フレームレートビデオデータのフレームの数は、本範囲内の任意の値、例えば、画像または回折データの約6,200個のフレームを有してもよい。いくつかの事例では、データを入手するために要求される合計時間は、サンプルのタイプおよび/または行われている測定に応じて、約1秒~約8時間に及んでもよい。いくつかの事例では、合計データ入手時間は、少なくとも1秒、少なくとも10秒、少なくとも30秒、少なくとも1分、少なくとも10分、少なくとも30分、少なくとも1時間、少なくとも2時間、少なくとも3時間、少なくとも4時間、少なくとも5時間、少なくとも6時間、少なくとも7時間、または少なくとも8時間であってもよい。
いくつかの事例では、光学画像データの高フレームレート入手のための開示される方法は、細胞または他の顕微鏡的構造を撮像するための光学顕微鏡検査との関連で実装されてもよい。いくつかの事例では、光学画像データの高フレームレート入手のための開示される方法は、移動する物体を撮像するための高速ビデオカメラとの関連で実装されてもよい。
高ダイナミックレンジ電子顕微鏡検査:電子顕微鏡(EM)を使用する回折データの測定は、材料の特性評価および分析のための不可欠なツールである。実施例は、限定ではないが、透過型電子顕微鏡(TEM)で実施される、選択面積電子回折(SAED)、収束ビーム電子回折(CBED)、および透過菊池回折(TKD)測定を含む。回折データを収集するための主要な課題のうちの1つは、データが、典型的には、現在市場に出ている検出器のダイナミックレンジを超えることである。これは、重要な情報を歪曲する、または曖昧にし得る、検出器飽和効果につながる(図5)。本明細書に説明される方法によって付与されるような検出器飽和問題を負うことなく、高スループットで回折パターンデータ(または画像データ)の全ダイナミックレンジをより忠実に捕捉する能力は、最先端技術と比べて有意な進歩を構成する。
他の技法も、画像タイプデータにおける限定されたダイナミックレンジの問題に対処するために過去の試行で使用されてきたが、これらの技法の全てが、回折データまたは電子顕微鏡検査にさえも適用されてきたわけではない。選択的閉塞が、多くのTEM回折データ入手システムのための標準的実践となっている。本アプローチは、非回折電子のための衝撃点に対応する明るい中心スポットの予測可能な場所における検出器の前に針等の物体を単に設置するステップを含む(図5参照)。本プロセスは、回折パターンデータの一部を犠牲にし、中心から遠くでより薄暗い回折スポットの測定を可能にする。残念ながら、概して、非回折電子の全てをブロックし、検出器飽和を完全に排除することは可能ではなく、有用な情報の有意な損失が生じる。本明細書に開示される方法は、画像面積全体にわたって薄暗いおよび明るいスポットの両方からの情報の捕捉を可能にする。
別の従来技術の方法は、ビデオが高フレームレートにおいて捕捉され、恣意的な数のフレームが所望の露出時間を取得するように合計される、高速動画/線量分割である。本明細書に開示される方法が、はるかに広範囲の値(現在まで、我々は1秒から50ナノ秒までの範囲内の露出時間を実証してきた)にわたって露出の制御を可能にする、静電偏向器を使用する一方、カメラフルフレーム露出は、典型的には、最高級カメラでさえも1ミリ秒またはより長い。さらに、開示される方法は、より高速の合計入手時間を提供し、例えば、サイクル時間が検出器読出待ち時間によって限定される状況では、開示されるシステムは、別の検出器が読み出されている間に1つの検出器を露出することができ、複数の露出時間からのデータが、単一の検出器読出周期の均等物において捕捉および転送されることができる。本速度は、サンプル上の多くの場所において画像を入手するために使用され得る、4D STEM等の用途において重要であり、典型的には、センサスループットによって限定される。
二重EEL(国際公開第WO2019/028129A1号参照)は、別の関連技法であるが、本開示される方法と極めて明確に異なる。電子エネルギー損失分光法(EELS)スペクトルが、エネルギー情報をカメラ上の空間偏移に変換する、特殊検出器において測定される。スペクトルの第2の偏移コピーが、同一の検出器上で異なる露出時間において得られ、2つのコピーは、同一の測定からさらなる情報を抽出するように別個に分析されることができる。スペクトルの2つのコピーのための露出時間は、独立して変動されることができる。実装は、高速1次元静電偏向器を使用し、電子をCCDまたはCMOSカメラの異なる領域に指向する。本開示される方法が、画像および回折データ入手のダイナミックレンジを向上させることを対象としている一方、二重EELSは、単一の検出器を備えるシステムにおける電子エネルギー分光法を実施するために使用される方法である。さらに、本開示される方法は、二重EELSアプローチが変調させない、カメラセンサ上(または異なるセンサのアレイ上)の画像または回折データの倍率ならびに位置を変調させることを可能にする。
直接検出EELS(米国特許出願公開第2017/0207059A1号、以降では「第‘059号特許出願」)は、計数モード高速直接電子検出器がEEL分光計に統合され、高速静電ビームブランカが露出時間を制御する、アプローチである。異なる露出時間を伴う複数の検出器読出が、最適なダイナミックレンジを伴う単一のデータセットを発生させるように、順次、処理される。計数モード直接検出は、いくつかの状況ではより低い雑音を呈する、電子を撮像する新しい方法である。第‘059号特許出願に開示されるアプローチは、計数モードの欠点、すなわち、非常に低い最大電子線量率、したがって、ダイナミックレンジを克服することを目的とするが、本明細書に開示される方法と異なる。本開示される方法が、静電または電磁光学系を使用し、画像または回折データを単一の検出器内の異なる検出器または異なるピクセル領域に切り替える一方、第‘059号特許出願は、電子がカメラに到達しないように阻止するための静電光学系を使用する。本開示される方法およびシステムは、潜在的により高いデューティサイクルおよびサンプルへの低減した線量を用いて、データを収集することを可能にする。
携帯電話カメラによる画像捕捉および他の科学的画像用途で頻繁に使用される方法は、異なる露出時間において2つの写真を撮影するステップと、画像を後処理し、単一の高ダイナミックレンジ画像を生成するステップとを含む。測定の間のサンプル整合および他の撮像条件におけるドリフトは、本方法をあまり信頼できないものにし、その使用は、他の技法、例えば、画像センサが、異なる露出レベルにおいて読み出され、後処理において単一の画像にともにスティッチングされる、ピクセルの交互の行を備える、Sony Interline HDRアプローチを支持して、最高級携帯電話カメラから撤退されつつある。本アプローチは、2回の代わりに1回の露出を使用して、HDR画像の入手を可能にするため、以前の携帯電話方法と比べて改良を提供する。より新しいセンサ、例えば、Sony IMX294CJKカラーSMOS画像センサは、異なる同時露出レベルを使用する、より複雑なピクセルパターンを有する。これらのアプローチは、いくつかの事例では、画像および回折データ入手のダイナミックレンジを向上させるための本開示される方法およびシステムが、複数の検出器の使用を含み得るという点で、本開示される方法およびシステムと異なる。さらに、本開示される方法およびシステムは、カメラセンサ上の画像もしくは回折データおよび/またはサンプル上のプローブビームの倍率ならびに位置を変調させることを可能にする。本開示される方法およびシステムにおける高速2次元偏向器の使用はまた、露出時間に対してより優れた制御も提供する。最後に、行間HDRアプローチには、複数の露出レベルにおける画像内の同一の位置のために入手されるデータが存在しないため、行間HDRは、科学的用途では望ましくない場合がある、干渉により大きく依拠する。
本明細書に説明される方法およびシステムと対照的に、従来技術の方法のうちのいずれも、感度および/または飽和レベルに関して個別に調節され得る、複数の明確に異なる検出器(またはある事例では、単一の検出器の異なる小領域)の間でサンプルによって透過もしくは散乱される電子の急速偏向を利用しない。異なる検出器(または単一の検出器の小領域)によって捕捉される個々の画像フレームは、続いて、単一の画像センサまたは単一のフルフレーム画像センサ読出で達成可能なものよりもはるかに高いダイナミックレンジを備える、1つ以上の画像フレームを生成するように、処理されてもよい。開示される方法は、以前の方法よりも高いダイナミックレンジ、検出器タイプの観点からの多用途性の増加、最小限の複雑性、および露出レベルに対するさらなる制御を提供する。
TEM画像検出器には、感度と損傷に対する抵抗との間にトレードオフが存在する。いくつかの状況では、異なる測定および状況のために独立して最適化される、検出器のアレイを交互に繰り返すことが有利であり得る。例えば、電子ビームは、センサに簡潔に在圏し、電流を測定する、または測定シーケンスの間の適切な整合を検証し得る。または比較的に長い露出時間(すなわち、所与の検出器または検出器小領域におけるビームの滞留時間)が、電子放射線の損傷に対して比較的により耐性があるカメラまたは検出器アレイの具体的領域に与えられてもよい。実験パラメータがビデオ測定と協調して変調される用途では、データが一時的に無効になる、または雑音が多くなる、時間が存在し得る。より広いデータセットの汚染を防止するために、画像データは、無効にされる、またはそのような時間の間にゼロ感度を有する、検出器領域に偏向されることができる。多種多様の潜在的用途に起因して、開示される方法およびシステムで使用されるセンサまたは検出器は、いくつかの事例では、単に、修正されていない商業用TEM画像検出器であってもよい、または他の事例では、異なる性能特性もしくは目的のために最適化される検出器のアレイであってもよい。回折パターン測定は、ダイナミックレンジによって最も限定される、EM用途のうちの1つである。しかしながら、開示される方法は、実空間TEM撮像用途にも等しく適用可能である。
留意されるように、本開示される方法およびシステムは、異なる精密に制御された露出時間にわたって複数の検出器(または単一の検出器内の異なる小領域)を偏向された電子に暴露するように、電子ビームを急速に偏向させることによって、電子顕微鏡(またはいくつかの事例では、下記にさらに議論されるであろうような光学システム)における測定のダイナミックレンジを向上させる。いくつかの事例では、2次元検出器の連続読出モード、例えば、CMOSカメラのためのローリングシャッタモードとの2次元偏向器変調制御信号の精密な連続同期化は、露出の時間においてアクティブに読み出されていない検出器の一連の2つ以上の小領域の露出を可能にし、小領域または個々の検出器のそれぞれによって入手される画像フレームのさらなる処理が、次いで、CMOSカメラまたは2次元検出器アレイのための読出レートよりも有意に高いフレームレートを有する、連続高ダイナミックレンジビデオデータを組み立てるために、使用されてもよい。
いくつかの事例では、検出器の2次元アレイ内の検出器は、特定のセンサの同じコピー、または異なる電子露出レベルのために適切なフィルタ、マスク、もしくは感度レベルまたは飽和レベル調節を使用して個別に修正された、特定のセンサのコピーであってもよい。留意されるように、いくつかの事例では、検出器は、CMOSまたはCCDカメラ等の単一の複合検出器の小領域であってもよい。いくつかの事例では、検出器アレイは、例えば、画像、電子ビーム電流、電子ビーム整合、または他の診断数量を感知するように最適化される、異なるデバイスの組み合わせを含有してもよい。好適なデバイスの実施例は、限定ではないが、CCDカメラ、CMOSカメラ、暗視野STEM検出器、ファラデーカップ、クワッドフォトダイオード、環状暗視野検出器、明視野検出器、汎用検出器、またはそれらの任意の組み合わせを含む。いくつかの事例では、所与の検出器の感度は、例えば、非回折電子が、典型的には、ある回折測定においてカメラに衝打する、明るい中心スポットをブロックするように、空間的に変動するパターンで修正されてもよい。
いくつかの事例では、本明細書に開示されるHDRシステムは、カメラ上の偏向された電子パターンおよび/またはサンプル上のプローブビームの倍率ならびに位置を変調させるように構成されてもよい。いくつかの事例では、偏向された電子パターンおよび/またはプローブビームの倍率は、拡大されていない偏向された電子パターンもしくはプローブビームのものの少なくとも2倍、4倍、8倍、16倍、または32倍であってもよい。
実装の1つの非限定的実施例では、露出は、図6に図示されるように、サンプルと検出器アレイとの間に設置される、高速静電偏向器によって制御されてもよい。偏向器は、電場を印加し、規定検出器上に画像データを含有する電子ビームまたは回折パターンの画像を操向する。偏向器は、検出器アレイのレイアウトに応じて、1つまたは2つの空間次元内でビームを操向してもよい。滞留時間は、各検出器の露出レベルを設定する。例えば、4つの検出器のアレイでは、検出器1が、100ナノ秒にわたって露出され得、次いで、検出器2が、1マイクロ秒にわたって露出され得、次いで、検出器3が、10マイクロ秒にわたって露出され得、次いで、検出器4が、100マイクロ秒にわたって露出され得る。露出が完了した後、偏向器は、全ての検出器から離れるようにビームを操向し得る。いくつかの事例では、偏向器はまた、画像の倍率を調節し、変動する検出器の高さおよび位置を補償する、または結果として生じるデータの倍率を変動させ得る。
偏向器は、読出が露出と対立しないように、検出器アレイの読出サイクルに同期化される。(例えば、STEM測定における)サンプル上の入射ビーム位置の走査制御、サンプル上のビームの焦点調節、サンプル露出を制御するためのサンプル前ビームブランカ、またはサンプル自体の操作等の他の実験パラメータのタイミング制御もまた、偏向器システムと統合されてもよい。各検出器は、単一の測定シーケンスの間に、1回またはそれを上回って露出され、読み出されてもよい。完全な測定プロセスのためのフローチャートが、図7に図示される。図7に示されるように、測定プロセスは、(i)電子ビームを、整合をチェックする、および/または他のビーム診断を実施するために使用される1つ以上の検出器に偏向させるステップと、(ii)整合ステップならびに/もしくはビーム診断を実施するステップと、(iii)随意に、測定プロセスに影響を及ぼす1つ以上の実験パラメータを変調させるステップ(例えば、電子ビームに対するサンプルの傾転角を変化させるステップ)と、(iv)電子ビームを、滞留時間(露出)が異なる検出器または小領域に関して変動され得る、1つ以上の検出器もしくは検出器の小領域に偏向させるステップと、(v)1つ以上の検出器もしくは検出器の小領域を読み出すステップとを含んでもよい。図7に図示されるプロセスはまた、下記にさらに議論されるであろうように、開示されるHDR方法およびシステムの光学的実装にも適用可能である。
開示される方法はまた、複数の検出器からのデータ読出から単一の測定(例えば、画像または回折データの単一のフレーム)を再構築するためのプロセッサまたはコンピュータ実装アルゴリズムおよび方法を含んでもよい(図8)。検出器読出は、分析のためにプロセッサまたはコンピュータによって処理されてもよい。分析方法は、偏向器によって導入されるものを含む歪曲の補正と、各検出器の既知の露出時間および特性を組み込む着信データの較正と、異なる検出器読出が空間的に重複され得るようなデータの整合および登録と、複合データセットが、個々のデータセットの最適な組み合わせを含有し、測定されている数量を正確に表すように、所与の検出器上で露出過剰または不足である領域を適切に加重する、個々の測定の組み合わせの実施とを含んでもよい。結果として生じる複合データセットは、実質的に向上したダイナミックレンジを有する。
図9は、サンプルによって透過または散乱される電子を異なる検出器または検出器の小領域に偏向させるように2次元静電偏向器と組み合わせられる、走査型透過電子顕微鏡(STEM)走査コントローラ(サンプル面を横断して電子ビームプローブを走査する)の概略図を提供する。いくつかの事例では、開示される方法はまた、従来の透過型電子顕微鏡検査で、すなわち、サンプル面を横断して電子ビームプローブを走査しない動作モードで実装されてもよい。図10A-Eは、TEMにおける電子の静電偏向を制御し、2次元検出器の異なる小領域または検出器の2次元アレイ内の異なる検出器を露出するためのタイミング図の非限定的実施例を提供する。開示される高ダイナミックレンジデータ入手方法を実装するために使用されるシステムハードウェアは、上記に説明される高フレームレートデータ入手方法を実装するために使用されるもの、例えば、速い切替時間および正確な位置付けを有する、高速2次元静電または電磁偏向器と同一である、もしくは類似する。サブフレーム/露出領域/検出器滞留時間のための関連性がある時系列もまた、同一である。いくつかの事例では、本開示は、カメラの露出領域が、検出器または検出器アレイのための読出パターンに同期化されるように、上記に説明されるようなHDRおよびHFR動作を組み合わせるシステムを含む。
図9に図式的に図示される2次元静電偏向器システムは、電子ビームプローブをサンプル場所のシーケンス(通常、一様な滞留時間を伴う128×128ピクセル~4,096×4,096ピクセルの正方形アレイ)に指向する、STEM走査コントローラに同期化されて示される。しかしながら、他の実装では、プローブパターンは、サンプル上の場所および/または露出時間のある恣意的パターンであり得る。いくつかの事例では、サブフレーム/露出領域/検出器偏向シーケンスは、サンプル上のその位置を越えたプローブビームの他のパラメータ、例えば、焦点深度または収束角の変調に同期化されてもよい。いくつかの事例では、プローブとサブフレーム/露出領域/検出器偏向シーケンスとの間のタイミング同期化は、STEMコントローラから偏向器コントローラに、または反対に信号を送信することによって遂行されてもよい。いくつかの事例では、信号は、STEMプローブ場所毎の信号、STEMプローブ走査における各線、または事前プログラムされたシーケンスの開始を示すある初期信号に対応し得る。
いくつかの事例では、カメラ/検出器読出とサブフレーム/露出領域/検出器偏向シーケンスとの間のタイミング同期化が、偏向器制御システムとカメラ/検出器との間のいずれかの方向に送信される制御信号によって確立されることができる。ある事例では、サンプル上のプローブ場所(またはプローブパラメータの他の組み合わせ)毎に露出されるカメラサブフレーム/露出領域/検出器の数は、変動し得る。いくつかの事例では、サンプル上のプローブ場所(またはプローブパラメータの他の組み合わせ)毎に露出されるカメラサブフレーム/露出領域/検出器の数は、同一であり得る。
留意されるように、図10A-Eは、TEMにおける電子の静電偏向を制御し、2次元検出器の異なる小領域または検出器の2次元アレイ内の異なる検出器を露出するためのタイミング図の非限定的実施例を提供する。図10Aは、サンプル上のプローブビーム場所のシーケンスの概略図を提供する。サンプルを横断したプローブビームの走査のための対応するタイミング図が、図10Bに描写される。図10Cは、10個の検出器または検出領域のアレイを図示する。いくつかの事例では、例えば、検出領域1-9は、単一の検出器、例えば、CMOSカメラの小領域であってもよく、検出領域10は、別個の検出器、例えば、ビーム診断センサを備えてもよい。図10Dは、異なる検出器/検出器領域のための露出時間(滞留時間)が異なる、図10Cに図示される露出のシーケンスを実装するためのタイミング図を図示する。図10Eは、図10Cおよび10Dに描写される偏向パターンおよびタイミングを実装するように2次元静電偏向器内の電極対の間に印加される電圧のタイミング図を図示する。
いくつかの事例では、例えば、サンプル上のプローブ場所(またはプローブパラメータの他の組み合わせ)毎に露出されるカメラサブフレーム/露出領域/検出器の数は、約2~約20に及んでもよい。いくつかの事例では、サンプル上のプローブ場所(またはプローブパラメータの他の組み合わせ)毎に露出されるカメラサブフレーム/露出領域/検出器の数は、少なくとも2、少なくとも3、少なくとも4、少なくとも5、少なくとも6、少なくとも7、少なくとも8、少なくとも9、少なくとも10、少なくとも15、または少なくとも20であってもよい。いくつかの事例では、サンプル上のプローブ場所(またはプローブパラメータの他の組み合わせ)毎に露出されるカメラサブフレーム/露出領域/検出器の数は、最大で20、最大で15、最大で10、最大で9、最大で8、最大で7、最大で6、最大で5、最大で4、最大で3、または最大で2であってもよい。本段落に説明される下限および上限値のうちのいずれかは、本開示内に含まれる範囲を形成するように組み合わせられてもよく、例えば、いくつかの事例では、サンプル上のプローブ場所(またはプローブパラメータの他の組み合わせ)毎に露出されるカメラサブフレーム/露出領域/検出器の数は、約4~約15に及んでもよい。いくつかの事例では、サンプル上のプローブ場所(またはプローブパラメータの他の組み合わせ)毎に露出されるカメラサブフレーム/露出領域/検出器の数は、本範囲内の任意の値、例えば、約12であってもよい。いくつかの事例では、異なる露出領域/検出器(例えば、図9の検出器領域1-10)は、異なる検出器を備えてもよい。いくつかの事例では、異なる露出領域/検出器(例えば、図9の検出器領域1-9)の全てまたは一部は、単一の検出器の小領域を備えてもよい。
いくつかの事例では、開示される方法およびシステムを使用して達成されるダイナミックレンジの向上は、少なくとも2倍、少なくとも4倍、少なくとも8倍、少なくとも12倍、少なくとも16倍、少なくとも20倍、少なくとも40倍、少なくとも60倍、少なくとも80倍、少なくとも100倍、少なくとも250倍、少なくとも500倍、少なくとも750倍、少なくとも1,000倍、少なくとも2,000倍、少なくとも3,000倍、少なくとも4,000倍、少なくとも5,000倍、またはより高くあり得る。いくつかの事例では、達成されるダイナミックレンジの向上は、本範囲内の任意の値、例えば、少なくとも15倍であり得る。
上記に説明される高フレームレートデータ入手方法に関して、露出の異なるパターンが、HDRデータセットを入手する際に使用されてもよい。いくつかの事例では、2次元偏向器は、電子を、例えば、2×2、3×3、4×4、5×5、6×6、7×7、8×8、9×9、10×10、11×11、12×12、13×13、14×14、15×15、16×16、17×17、18×18、19×19、20×20個の異なる小領域または異なる検出器、もしくはそれを上回るパターンに偏向させるために使用されてもよい。いくつかの事例では、2次元偏向器は、電子を、3×4、6×9、9×12、12×15個等の小領域または検出器の非正方形アレイに偏向させるために使用されてもよい。
いくつかの事例では、所与のサブフレーム/小領域/露出領域/検出器における所与のプローブ設定のための滞留時間または露出の持続時間は、全て同一であり得る、もしくはそれらは、異なり得る。いくつかの事例では、各小領域または2次元検出器アレイ内の個々の検出器における露出の持続時間(すなわち、小領域または個々の検出器毎の滞留時間)は、約1マイクロ秒~約100ミリ秒に及んでもよい。いくつかの事例では、滞留時間は、少なくとも1マイクロ秒、少なくとも10マイクロ秒、少なくとも100マイクロ秒、少なくとも1ミリ秒、少なくとも10ミリ秒、または少なくとも100ミリ秒であってもよい。いくつかの事例では、滞留時間は、最大で100ミリ秒、最大で10ミリ秒、最大で1ミリ秒、最大で100マイクロ秒、最大で10マイクロ秒、または最大で1マイクロ秒であってもよい。本段落に説明される下限および上限値のうちのいずれかは、本開示内に含まれる範囲を形成するように組み合わせられてもよく、例えば、いくつかの事例では、滞留時間は、約10マイクロ秒~約10ミリ秒に及んでもよい。いくつかの事例では、滞留時間は、本範囲内の任意の値、例えば、約1.3ミリ秒を有してもよい。
いくつかの事例では、2次元偏向器の切替時間は、約1ナノ秒~約1ミリ秒に及んでもよい。いくつかの事例では、切替時間は、少なくとも1ナノ秒、少なくとも10ナノ秒、少なくとも100ナノ秒、少なくとも1マイクロ秒、少なくとも10マイクロ秒、少なくとも100マイクロ秒、または少なくとも1ミリ秒である。いくつかの事例では、切替時間は、最大で1ミリ秒、最大で100マイクロ秒、最大で10マイクロ秒、最大で1マイクロ秒、最大で100ナノ秒、最大で10ナノ秒、または最大で1ナノ秒である。本段落に説明される下限および上限値のうちのいずれかは、本開示内に含まれる範囲を形成するように組み合わせられてもよく、例えば、いくつかの事例では、切替時間は、約10ナノ秒~約10マイクロ秒に及んでもよい。いくつかの事例では、切替時間は、本範囲内の任意の値、例えば、約1.3ミリ秒を有してもよい。いくつかの事例では、サブフレーム/露出領域/個々の検出器の間で切り替えるための切替時間は、相互と等しくあり得る。いくつかの事例では、切替時間は、異なり得、個別に調節可能であり得る。
図9に描写される各対の偏向器電極(XおよびY対)に印加される電圧波形は、等しい大きさまたは異なる大きさの段階的変化を備えてもよい。いくつかの事例では、各対の1つのプレートが、固定電圧で保持されてもよい、または各対に印加される電圧は、大きさが異なる、もしくは同一または反対の符号を有してもよい。いくつかの事例では、電圧波形の大きさは、約0ボルト~約10kVに及んでもよい。いくつかの事例では、電圧波形の大きさは、少なくとも0ボルト、少なくとも10ボルト、少なくとも100ボルト、少なくとも500ボルト、少なくとも1,000ボルト、少なくとも5kV、または少なくとも10kVであってもよい。いくつかの事例では、電圧波形の大きさは、最大で10kV、最大で5kV、最大で1,000ボルト、最大で500ボルト、最大で100ボルト、最大で10ボルト、または約0ボルトであってもよい。本段落に説明される下限および上限値のうちのいずれかは、本開示内に含まれる範囲を形成するように組み合わせられてもよく、例えば、いくつかの事例では、電圧波形の大きさは、約100ボルト~約1,000ボルトに及んでもよい。いくつかの事例では、電圧波形の大きさは、本範囲内の任意の値、例えば、約1,250ボルトを有してもよい。電圧波形のための大きさおよびタイミングシーケンスは、プログラム可能であり、露出領域の数、小領域が露出される順序、および各小領域における露出の持続時間(すなわち、個々の検出器内の小領域毎の滞留時間)を判定する、4つの電極電圧のシーケンスを備える。
サブフレーム/露出領域の間の透過または散乱された電子の偏向は、電場を電子のビームに印加する電極対上の電圧のシーケンスを使用して、図9および図10A-10Eに図示されるシステムにおいて遂行されてもよい。他の実装では、電子は、例えば、磁気コイルを通して駆動される電流のシーケンスによって発生される磁場を使用することによって、偏向されてもよい。さらに他の実装では、偏向プロセスによって導入される画像または回折データ歪曲が、低減されるように、電圧または電流が印加される、付加的電極もしくは電磁石が存在し得る。
前述で説明された高フレームレートデータ入手方法およびシステムに関して、2次元偏向器によって達成される空間的位置付けは、偏向された画像または回折パターンを再配置する際のジッタが単一の画像センサピクセルのほぼ寸法未満であるために、十分に正確であるべきである。いくつかの事例では、2次元偏向器によって達成される空間的位置付けは、約500μmよりも良好に、約450μmよりも良好に、約400μmよりも良好に、約350μmよりも良好に、約300μmよりも良好に、約250μmよりも良好に、約200μmよりも良好に、約150μmよりも良好に、約100μmよりも良好に、約90μmよりも良好に、約80μmよりも良好に、約70μmよりも良好に、約60μmよりも良好に、約50μmよりも良好に、約40μmよりも良好に、約30μmよりも良好に、約20μmよりも良好に、約10μmよりも良好に、約9μmよりも良好に、約8μmよりも良好に、約7μmよりも良好に、約6μmよりも良好に、約5μmよりも良好に、約4μmよりも良好に、約3μmよりも良好に、約2μmよりも良好に、または約1μmよりも良好に正確である。
いくつかの事例では、検出器の読出サイクル(例えば、CMOSカメラのためのローリングシャッタ読出サイクル)との2次元偏向器の同期化は、50ミリ秒よりも良好に、40ミリ秒よりも良好に、30ミリ秒よりも良好に、20ミリ秒よりも良好に、10ミリ秒よりも良好に、9ミリ秒よりも良好に、8ミリ秒よりも良好に、7ミリ秒よりも良好に、6ミリ秒よりも良好に、5ミリ秒よりも良好に、4ミリ秒よりも良好に、3ミリ秒よりも良好に、2ミリ秒よりも良好に、1ミリ秒よりも良好に、900マイクロ秒よりも良好に、800マイクロ秒よりも良好に、700マイクロ秒よりも良好に、600マイクロ秒よりも良好に、500マイクロ秒よりも良好に、400マイクロ秒よりも良好に、300マイクロ秒よりも良好に、200マイクロ秒よりも良好に、100マイクロ秒よりも良好に、90マイクロ秒よりも良好に、80マイクロ秒よりも良好に、70マイクロ秒よりも良好に、60マイクロ秒よりも良好に、50マイクロ秒よりも良好に、40マイクロ秒よりも良好に、30マイクロ秒よりも良好に、20マイクロ秒よりも良好に、10マイクロ秒よりも良好に、9マイクロ秒よりも良好に、8マイクロ秒よりも良好に、7マイクロ秒よりも良好に、6マイクロ秒よりも良好に、5マイクロ秒よりも良好に、4マイクロ秒よりも良好に、3マイクロ秒よりも良好に、2マイクロ秒よりも良好に、1マイクロ秒よりも良好に、900ナノ秒よりも良好に、800ナノ秒よりも良好に、700ナノ秒よりも良好に、600ナノ秒よりも良好に、500ナノ秒よりも良好に、400ナノ秒よりも良好に、300ナノ秒よりも良好に、200ナノ秒よりも良好に、または100ナノ秒よりも良好に正確であり得る。
いくつかの事例では、プローブパラメータの所与のセット(例えば、サンプル上の位置)のためのカメラ/検出器露出シーケンスは、プローブパラメータの異なるセットのために使用されるものと異なり得る。いくつかの事例では、プローブパラメータのあるセットの間の遷移の間に、回折データは、不鮮明または無効であり得る。そのような事例では、偏向器は、データを、無視されるであろう検出器の領域に、または検出器が位置しない場所に指向するために使用されてもよい。
いくつかの事例では、開示される方法(およびそれらを実装するように構成されるシステム)は、入手されたデータを処理し、高ダイナミックレンジ画像またはビデオデータを発生させるためのプロセッサまたはコンピュータ実装アルゴリズムおよび方法を含んでもよい。例えば、いくつかの事例では、プロセッサまたはコンピュータ実装アルゴリズムおよび方法は、(i)未加工カメラ読出データを、個々の回折パターンまたは画像を含有するサブフレームにセグメント化し、(ii)偏向プロセスによって導入される歪曲を補正し、(iii)関連性がある一連/群のサブフレームをともに組み合わせてもよく、各一連は、それらの露出時間を除いて同じ測定パラメータを有する、2つ以上のサブフレームからのデータを含有し、向上したダイナミックレンジを有する、個々のパターンまたは画像を生成する。いくつかの事例では、これらの処理ステップは、画像データまたは回折データが入手されたものと同一のサンプルからの前処理された較正データを利用してもよい。いくつかの事例では、これらの処理ステップは、類似条件下で測定される異なるサンプルに関する前処理された較正データを利用してもよい。いくつかの事例では、プロセッサまたはコンピュータ実装アルゴリズムおよび方法は、(i)異なる検出チャネル(例えば、異なるタイプの検出器からのデータセット)を組み合わせ、マルチモーダルデータセットを生成するステップ、(ii)サブフレームデータ自体内の一貫した特徴を識別することによって、サブフレームの整合を微調整するステップ、(iii)サブフレーム整合の微調整を使用し、測定の間のサンプルドリフトを補正するステップ、(iv)フィルタ処理し、測定中のサンプルもしくは物理的システム、検出器の特性、および/または光学系自体の予備知識を使用して、雑音を除去するステップ、ならびに/もしくは(v)単一の読出サイクルの間に複数回露出された検出器アレイの領域からデータを推測するステップ等の付加的処理ステップを実施してもよい。
高ダイナミックレンジ光学顕微鏡検査および撮像:主に高ダイナミックレンジ透過型電子顕微鏡検査のためのデータ捕捉との関連で議論されるが、上記に説明される方法はまた、光学顕微鏡検査および撮像用途に適用されてもよい。例えば、電子ではなく光子の偏向のために好適な高速2次元偏向器が、サンプルまたは物体によって透過、反射、および/または散乱された光子のパターンを2次元検出器(例えば、CCDもしくはCMOS画像センサ)または個々の検出器の2次元アレイの一連の2つ以上の小領域に偏向させるために使用されてもよい。光子を偏向させるための好適な2次元偏向器の実施例は、限定ではないが、回転ミラー、回転プリズム等を含む。電子の検出のために設計および最適化されるものではなく、紫外線、可視、または赤外光との併用のために設計および最適化された、CCDまたはCMOSカメラ、もしくは他の検出器が、選定されるであろう。
上記に説明される高ダイナミックレンジ透過型電子顕微鏡検査方法に関して、小領域または個々の検出器のそれぞれのための滞留時間(露出時間)の精密な調節、および/または小領域もしくは個々の検出器のそれぞれのための感度ならびに/もしくは飽和レベルの調節は、単一の検出器を使用して達成可能であるよりも高いダイナミックレンジを有する、単一の画像フレームを生成するように処理され得る、一連の画像の入手を可能にする。いくつかの事例では、2次元検出器の連続読出モード、例えば、CMOSカメラのためのローリングシャッタモードとの2次元偏向器変調制御信号の精密な連続同期化は、露出の時間においてアクティブに読み出されていない検出器の一連の2つ以上の小領域の露出を可能にし、さらに、小領域または個々の検出器のそれぞれによって入手される画像フレームの処理が、次いで、CMOSカメラまたは2次元検出器アレイのための読出レートよりも有意に高いフレームレートを有する、連続高ダイナミックレンジビデオデータを組み立てるために、使用されてもよい。いくつかの事例では、本明細書に開示されるHDRシステムは、カメラ上の偏向された光子パターンの倍率ならびに位置を変調させるように構成されてもよい。いくつかの事例では、偏向された電子パターンの倍率は、拡大されていない偏向された電子パターンのものの少なくとも2倍、4倍、8倍、16倍、または32倍であってもよい。
上記に説明される高フレームレート透過型電子顕微鏡検査方法に関して、単一の検出器または検出器のアレイのための読出サイクル内でサンプルもしくは物体によって透過、反射、または散乱される光子の偏向によって露出される、カメラサブフレーム/露出領域/検出器の数は、約2~約20に及んでもよい。いくつかの事例では、露出されるカメラサブフレーム/露出領域/検出器の数は、少なくとも2、少なくとも3、少なくとも4、少なくとも5、少なくとも6、少なくとも7、少なくとも8、少なくとも9、少なくとも10、少なくとも15、または少なくとも20であってもよい。いくつかの事例では、露出されるカメラサブフレーム/露出領域/検出器の数は、最大で20、最大で15、最大で10、最大で9、最大で8、最大で7、最大で6、最大で5、最大で4、最大で3、または最大で2であってもよい。本段落に説明される下限および上限値のうちのいずれかは、本開示内に含まれる範囲を形成するように組み合わせられてもよく、例えば、いくつかの事例では、露出されるカメラサブフレーム/露出領域/検出器の数は、約4~約15に及んでもよい。いくつかの事例では、露出されるカメラサブフレーム/露出領域/検出器の数は、本範囲内の任意の値、例えば、約14であってもよい。
いくつかの事例では、開示される方法およびシステムを使用して達成されるダイナミックレンジの向上は、少なくとも2倍、少なくとも4倍、少なくとも8倍、少なくとも12倍、少なくとも16倍、少なくとも20倍、少なくとも40倍、少なくとも60倍、少なくとも80倍、少なくとも100倍、少なくとも250倍、少なくとも500倍、少なくとも750倍、少なくとも1,000倍、少なくとも2,000倍、少なくとも3,000倍、少なくとも4,000倍、少なくとも5,000倍、またはより高くあり得る。いくつかの事例では、達成されるダイナミックレンジの向上は、本範囲内の任意の値、例えば、少なくとも17倍であり得る。
いくつかの事例では、本明細書に開示される光学HDRシステムは、カメラまたは検出器アレイ上の偏向された光子または画像の倍率ならびに位置を変調させるように構成されてもよい。いくつかの事例では、偏向された光子(例えば、回折パターンまたは画像)の倍率は、拡大されていない偏向された回折パターンまたは画像のものの少なくとも2倍、4倍、8倍、16倍、または32倍であってもよい。
いくつかの事例では、2次元偏向器は、光子を、例えば、2×2、3×3、4×4、5×5、6×6、7×7、8×8、9×9、10×10、11×11、12×12、13×13、14×14、15×15、16×16、17×17、18×18、19×19、20×20個の小領域、以上のパターンに偏向させるために使用されてもよい。いくつかの事例では、2次元偏向器は、光子を、3×4、6×9、9×12、12×15個等の小領域の非正方形アレイに偏向させるために使用されてもよい。いくつかの事例では、2次元偏向器は、光子を、例えば、2次元検出器アレイ内の2×2、3×3、4×4、5×5、6×6、7×7、8×8、9×9、10×10、11×11、12×12、13×13、14×14、15×15、16×16、17×17、18×18、19×19、20×20個、以上の異なる検出器のパターンに偏向させるために使用されてもよい。いくつかの事例では、2次元偏向器は、光子を、3×4、6×9、9×12、12×15個の検出器等の個々の検出器の非正方形アレイに偏向させるために使用されてもよい。
いくつかの事例では、サブフレームまたは小領域(すなわち、露出領域)は、例えば、隣接する長方形領域であってもよい。いくつかの事例では、それらは、非長方形および/または非隣接であり得る。いくつかの事例では、偏向されたビームは、円形開口を通して投影され、それによって、カメラ上に円形画像のアレイを投影することをもたらし得る。いくつかの事例では、シーケンスの間に決して露出されないピクセルから成る、露出領域の間の間隙が存在し得る。いくつかの事例では、あるピクセルが、読み出される前に複数回露出されるように、露出領域の間に重複が存在し得る。
いくつかの事例では、カメラの異なるサブフレーム/小領域を露出する順序は、アクティブに読み出されているカメラの具体的領域を露出することを回避する、任意のパターンであってもよい。例えば、いくつかの事例では、正弦パターンが、最小切替時間を達成するために使用されてもよい。いくつかの事例では、小領域の各行内の露出の順序は、シャッフルされ得る。いくつかの事例では、サブフレーム露出シーケンスは、カメラ読出サイクル毎に同一である場合とそうではない場合がある。いくつかの事例では、各サブフレームは、所与のカメラ読出サイクルに関して正確に1回露出されてもよい。他の事例において、あるサブフレームが、複数回露出されてもよい。そのような露出シーケンスは、圧縮感知データ入手モードを実装する際に使用される場合とそうではない場合がある。いくつかの事例では、あるサブフレームが、時間に基準マークを生成し、データの解釈を促進するように、スキップされてもよい。
ある事例では、各小領域または2次元検出器アレイ内の個々の検出器における露出の持続時間(すなわち、小領域または個々の検出器毎の滞留時間)は、約1マイクロ秒~約100ミリ秒に及んでもよい。いくつかの事例では、滞留時間は、少なくとも1マイクロ秒、少なくとも10マイクロ秒、少なくとも100マイクロ秒、少なくとも1ミリ秒、少なくとも10ミリ秒、または少なくとも100ミリ秒であってもよい。いくつかの事例では、滞留時間は、最大で100ミリ秒、最大で10ミリ秒、最大で1ミリ秒、最大で100マイクロ秒、最大で10マイクロ秒、または最大で1マイクロ秒であってもよい。本段落に説明される下限および上限値のうちのいずれかは、本開示内に含まれる範囲を形成するように組み合わせられてもよく、例えば、いくつかの事例では、滞留時間は、約10マイクロ秒~約10ミリ秒に及んでもよい。いくつかの事例では、滞留時間は、本範囲内の任意の値、例えば、約1.3ミリ秒を有してもよい。いくつかの事例では、サブフレーム/露出領域/個々の検出器毎の滞留時間は、相互と等しくあり得る。いくつかの事例では、サブフレーム/露出領域/個々の検出器毎の滞留時間は、相互と異なり得、個別に調節可能であり得る。
いくつかの事例では、本明細書に説明される方法およびシステムは、データの時間的歪曲を負うことなく、高デューティサイクル動作を提供するように構成される。いくつかの事例では、デューティサイクルは、データの時間的歪曲を負うことなく、少なくとも85%、少なくとも90%、少なくとも95%、少なくとも98%、または少なくとも99%であってもよい。
一般に、2次元偏向器の切替速度は、時間的歪曲を最小限にするために、すなわち、フレームの間にぼやけが存在しないように、小領域または個々の検出器の露出のために使用される滞留時間と比較して、速くあるべきである。いくつかの事例では、2次元偏向器の切替時間は、約1ナノ秒~約1ミリ秒に及んでもよい。いくつかの事例では、切替時間は、少なくとも1ナノ秒、少なくとも10ナノ秒、少なくとも100ナノ秒、少なくとも1マイクロ秒、少なくとも10マイクロ秒、少なくとも100マイクロ秒、または少なくとも1ミリ秒である。いくつかの事例では、切替時間は、最大で1ミリ秒、最大で100マイクロ秒、最大で10マイクロ秒、最大で1マイクロ秒、最大で100ナノ秒、最大で10ナノ秒、または最大で1ナノ秒である。本段落に説明される下限および上限値のうちのいずれかは、本開示内に含まれる範囲を形成するように組み合わせられてもよく、例えば、いくつかの事例では、切替時間は、約10ナノ秒~約10マイクロ秒に及んでもよい。いくつかの事例では、切替時間は、本範囲内の任意の値、例えば、約1.3ミリ秒を有してもよい。いくつかの事例では、サブフレーム/露出領域/個々の検出器の間で切り替えるための切替時間は、相互と等しくあり得る。いくつかの事例では、切替時間は、異なり得、個別に調節可能であり得る。
いくつかの事例では、2次元光学偏向器によって達成される空間的位置付けは、偏向された画像を再配置する際のジッタが単一の画像センサピクセルのほぼ寸法未満であるために、十分に正確であるべきである。いくつかの事例では、2次元光学偏向器によって達成される空間的位置付けは、約500μmよりも良好に、約450μmよりも良好に、約400μmよりも良好に、約350μmよりも良好に、約300μmよりも良好に、約250μmよりも良好に、約200μmよりも良好に、約150μmよりも良好に、約100μmよりも良好に、約90μmよりも良好に、約80μmよりも良好に、約70μmよりも良好に、約60μmよりも良好に、約50μmよりも良好に、約40μmよりも良好に、約30μmよりも良好に、約20μmよりも良好に、約10μmよりも良好に、約9μmよりも良好に、約8μmよりも良好に、約7μmよりも良好に、約6μmよりも良好に、約5μmよりも良好に、約4μmよりも良好に、約3μmよりも良好に、約2μmよりも良好に、または約1μmよりも良好に正確である。
いくつかの事例では、検出器の読出サイクル(例えば、CMOSカメラのためのローリングシャッタ読出サイクル)との2次元偏向器の同期化は、50ミリ秒よりも良好に、40ミリ秒よりも良好に、30ミリ秒よりも良好に、20ミリ秒よりも良好に、10ミリ秒よりも良好に、9ミリ秒よりも良好に、8ミリ秒よりも良好に、7ミリ秒よりも良好に、6ミリ秒よりも良好に、5ミリ秒よりも良好に、4ミリ秒よりも良好に、3ミリ秒よりも良好に、2ミリ秒よりも良好に、1ミリ秒よりも良好に、900マイクロ秒よりも良好に、800マイクロ秒よりも良好に、700マイクロ秒よりも良好に、600マイクロ秒よりも良好に、500マイクロ秒よりも良好に、400マイクロ秒よりも良好に、300マイクロ秒よりも良好に、200マイクロ秒よりも良好に、100マイクロ秒よりも良好に、90マイクロ秒よりも良好に、80マイクロ秒よりも良好に、70マイクロ秒よりも良好に、60マイクロ秒よりも良好に、50マイクロ秒よりも良好に、40マイクロ秒よりも良好に、30マイクロ秒よりも良好に、20マイクロ秒よりも良好に、10マイクロ秒よりも良好に、9マイクロ秒よりも良好に、8マイクロ秒よりも良好に、7マイクロ秒よりも良好に、6マイクロ秒よりも良好に、5マイクロ秒よりも良好に、4マイクロ秒よりも良好に、3マイクロ秒よりも良好に、2マイクロ秒よりも良好に、1マイクロ秒よりも良好に、900ナノ秒よりも良好に、800ナノ秒よりも良好に、700ナノ秒よりも良好に、600ナノ秒よりも良好に、500ナノ秒よりも良好に、400ナノ秒よりも良好に、300ナノ秒よりも良好に、200ナノ秒よりも良好に、または100ナノ秒よりも良好に正確であり得る。
上記に議論される高ダイナミックレンジ電子顕微鏡検査方法およびシステムに関して、いくつかの事例では、開示される光学HDR方法(およびそれらを実装するように構成されるシステム)は、入手されたデータを処理し、高ダイナミックレンジ回折パターン、画像、またはビデオデータを発生させるためのプロセッサまたはコンピュータ実装アルゴリズムおよび方法を含んでもよい。例えば、いくつかの事例では、プロセッサまたはコンピュータ実装アルゴリズムおよび方法は、(i)未加工カメラ読出データを、個々の回折パターンまたは画像を含有するサブフレームにセグメント化し、(ii)偏向プロセスによって導入される歪曲を補正し、(iii)関連性がある一連/群のサブフレームをともに組み合わせてもよく、各一連は、それらの露出時間を除いて同じ測定パラメータを有する、2つ以上のサブフレームからのデータを含有し、向上したダイナミックレンジを有する、個々のパターンまたは画像を生成する。いくつかの事例では、これらの処理ステップは、画像データが入手されたものと同一のサンプルからの前処理された較正データを利用してもよい。いくつかの事例では、これらの処理ステップは、類似条件下で測定される異なるサンプルに関する前処理された較正データを利用してもよい。いくつかの事例では、プロセッサまたはコンピュータ実装アルゴリズムおよび方法は、(i)異なる検出チャネル(例えば、異なるタイプの検出器からのデータセット)を組み合わせ、マルチモーダルデータセットを生成するステップ、(ii)サブフレームデータ自体内の一貫した特徴を識別することによって、サブフレームの整合を微調整するステップ、(iii)サブフレーム整合の微調整を使用し、測定の間のサンプルドリフトを補正するステップ、(iv)フィルタ処理し、測定中のサンプルもしくは物理的システム、検出器の特性、および/または光学系自体の予備知識を使用して、雑音を除去するステップ、ならびに/もしくは(v)単一の読出サイクルの間に複数回露出された検出器アレイの領域からデータを推測するステップ等の付加的処理ステップを実施してもよい。
いくつかの事例では、高ダイナミックレンジ光学画像データの入手のための開示される方法は、細胞または他の顕微鏡的構造を撮像するための光学顕微鏡検査との関連で実装されてもよい。いくつかの事例では、高ダイナミックレンジ光学画像データの入手のための開示される方法は、移動する物体を撮像するための高速ビデオカメラとの関連で実装されてもよい。
HFRおよびHDRシステムならびにシステムコンポーネント:一般に、本明細書に開示される高フレームレートおよび/または高ダイナミックレンジ電子顕微鏡検査データ(例えば、画像データならびに/もしくは回折データ)の入手のための電子顕微鏡システムは、透過型電子顕微鏡(TEM)または走査型透過電子顕微鏡(STEM)、高速2次元電子偏向器、偏向器制御モジュール、2次元検出器もしくは検出器の2次元アレイ(いくつかの事例では、CMOSカメラまたはローリングシャッタ読出モードを伴って構成される他の検出器を備え得る)、プロセッサもしくはコンピュータ、またはそれらの任意の組み合わせを備えてもよい。いくつかの事例では、開示される電子顕微鏡検査システムはさらに、(i)単一の検出器または検出器アレイ読出サイクルの間に入手される複数の小領域もしくは個々の検出器データセットから高フレームレートビデオデータを組み立てるため、および/または(ii)複数の検出器小領域もしくは個々の検出器のそれぞれから入手されるデータを処理し、高ダイナミックレンジ画像をコンパイルするためのソフトウェアを備えてもよい。一般に、高フレームレートおよび/または高ダイナミックレンジ光学データ(例えば、画像データならびに/もしくは回折データ)の入手のための光学システムは、サンプルまたは物体によって透過、反射、もしくは散乱される光を収集し、それを2次元検出器または検出器アレイ上に結像するように構成される、光学システム、高速2次元光子偏向器、偏向器制御モジュール、2次元検出器もしくは検出器の2次元アレイ(いくつかの事例では、CMOSカメラまたはローリングシャッタ読出モードを伴って構成される他の検出器を備え得る)、プロセッサもしくはコンピュータ、またはそれらの任意の組み合わせを備えてもよい。いくつかの事例では、開示される光学システムはさらに、(i)単一の検出器または検出器アレイ読出サイクルの間に入手される複数の小領域もしくは個々の検出器データセットから高フレームレートビデオデータを組み立てるため、および/または(ii)複数の検出器小領域もしくは個々の検出器のそれぞれから入手されるデータを処理し、高ダイナミックレンジ画像をコンパイルするためのソフトウェアを備えてもよい。
2次元偏向器:開示される方法およびシステムで使用するための好適な2次元電子偏向器の実施例は、限定ではないが、2次元静電偏向器、2次元電磁偏向器、またはそれらの組み合わせを含む。開示されるシステムのいくつかの事例では、2つ以上の2次元静電および/または電磁偏向器は、3次元偏向能力を有する偏向システムを実装するように、組み合わせられてもよい。
開示される方法およびシステムで使用するための好適な2次元光子偏向器の実施例は、限定ではないが、回転ミラーのセット、回転プリズムのセット、線形経路に沿って平行移動するように構成されるミラーもしくはプリズム(例えば、電動ミラーもしくはプリズム)、またはそれらの組み合わせを含む。
偏向器制御モジュール:いくつかの事例では、開示されるシステムは、(i)1つの小領域または検出器から別のものに偏向された電子もしくは光子を切り替えるための切替時間を制御する、(ii)1つ以上の小領域もしくは検出器を偏向された電子または光子に暴露するための滞留時間を制御する、(iii)偏向パターンを2次元検出器または検出器アレイのための読出信号もしくは読出サイクルと同期化する、および/または(iv)前述のパラメータのうちのいずれかを、別の実験パラメータ、例えば、サンプル上のプローブビームの位置付けのための制御信と同期化するように構成される、偏向器制御モジュールを備えてもよい。
検出器:開示される方法およびシステムで使用するための好適な検出器の実施例は、限定ではないが、電荷結合素子(CCD)画像センサおよびカメラ、相補型金属酸化膜半導体(CMOS)画像センサおよびカメラ、電子直接検出(EDD)画像センサおよびカメラ(すなわち、電子によって衝打されると光子を放出する層を含むように、または電子を直接検出するように修正された、CCDもしくはCMOS画像センサ)、飛行時間(ToF)画像センサおよびカメラ、暗視野STEM検出器、ファラデーカップ、クワッドフォトダイオード、環状暗視野検出器、明視野検出器、汎用検出器、またはそれらの任意の組み合わせを含む。
例えば、検出器のアレイが使用される、いくつかの事例では、アレイの異なる検出器は、異なる電子または光子強度のために最適化される異なる読出モードおよび/または感度を有してもよい。いくつかの事例では、異なる検出器は、放射線損傷からの異なるレベルの保護を有してもよい。いくつかの事例では、異なる検出器は、例えば、回折パターンデータに存在する明るい中心スポットを選択的に閉塞するように、サンプルまたは物体と個々の検出器との間の経路内に設置される、異なる物体を有してもよい。いくつかの事例では、検出器のアレイ内の検出器のうちのいくつかは、アレイ内の他の検出器によって入手されるデータと定性的に異なる、診断、較正、または整合データを収集するように最適化されてもよい。
プロセッサおよびコンピュータ:いくつかの事例では、開示されるシステムは、単一の検出器または検出器のアレイの読出との高速2次元偏向器の制御および同期化、ならびに入手された画像データの記憶、処理、分析、および表示のために構成される、1つ以上のプロセッサ、コンピュータ、もしくはコンピュータシステムを備えてもよい。いくつかの事例では、1つ以上のプロセッサ、コンピュータ、およびコンピュータシステムは、他のシステム機能、および/または他のデータ入手、記憶、処理、分析、もしくは表示機能の制御のためにも構成されてもよい。
図11は、本明細書の他の場所に説明される方法(例えば、高フレームレートおよび/または高ダイナミックレンジ電子顕微鏡検査データを入手するための方法)を実装するようにプログラムまたは別様に構成される、コンピュータシステム1101の概略図を提供する。コンピュータシステム1101は、例えば、回折パターンデータ、画像データ、またはそれらの任意の組み合わせの入手および処理等の開示される方法ならびにシステムの種々の側面を調整することができる。コンピュータシステム1101は、ローカルコンピュータシステム、ユーザの電子デバイス(例えば、スマートフォン、ラップトップ、またはデスクトップコンピュータ)、もしくは電子デバイスに対して遠隔に位置するコンピュータシステムと通信するユーザの電子デバイスを備えてもよい。コンピュータシステム1101は、古典後コンピュータシステム(例えば、量子コンピューティングシステム)であってもよい。
コンピュータシステム1101は、シングルコアまたはマルチコアプロセッサ、もしくは並列処理のための複数のプロセッサであり得る、中央処理ユニット(CPU、本明細書では、「プロセッサ」および「コンピュータプロセッサ」とも称される)1105を含む。コンピュータシステム1101はまた、メモリまたはメモリ場所1110(例えば、ランダムアクセスメモリ、読取専用メモリ、フラッシュメモリ)と、電子記憶ユニット1115(例えば、ハードディスク)と、1つ以上の他のシステムと通信するための通信インターフェース1120(例えば、ネットワークアダプタ)と、キャッシュ、他のメモリ、データ記憶装置、および/または電子ディスプレイアダプタ等の周辺デバイス1125とを含む。メモリ1110、記憶ユニット1115、インターフェース1120、および周辺デバイス1125は、マザーボード等の通信バス(実線)を通してCPU1105と通信する。記憶ユニット1115は、データを記憶するためのデータ記憶ユニット(またはデータリポジトリ)であり得る。コンピュータシステム1101は、通信インターフェース1120を用いてコンピュータネットワーク(「ネットワーク」)1130に動作的に結合されることができる。ネットワーク1130は、インターネット、イントラネットおよび/またはエクストラネット、またはインターネットと通信するイントラネットならびに/もしくはエクストラネットであってもよい。ネットワーク1130は、ある場合には、電気通信および/またはデータネットワークである。ネットワーク1130は、クラウドコンピューティング等の分散コンピューティングを可能にし得る、1つ以上のコンピュータサーバを含むことができる。ネットワーク1130は、ある場合には、コンピュータシステム1101を用いて、コンピュータシステム1101に結合されるデバイスが、クライアントまたはサーバとして挙動することを可能にし得る、ピアツーピアネットワークを実装することができる。
CPU1105は、プログラムまたはソフトウェアで具現化され得る、機械可読命令のシーケンスを実行するように構成される。命令は、メモリ1110等のメモリ場所内に記憶されてもよい。命令は、CPU1105にダイレクトされることができ、これは、続いて、本開示の方法を実装するようにCPU1105をプログラムまたは別様に構成することができる。CPU1105によって実施される動作の実施例は、フェッチ、デコード、実行、およびライトバックを含むことができる。
CPU1105は、集積回路等の回路の一部であってもよい。システム1101の1つ以上の他のコンポーネントが、回路内に含まれてもよい。ある場合には、回路は、特定用途向け集積回路(ASIC)である。
記憶ユニット1115は、ドライバ、ライブラリ、および保存されたプログラム等のファイルを記憶するように構成される。記憶ユニット1115は、ユーザデータ、例えば、ユーザ選好およびユーザプログラムを記憶してもよい。コンピュータシステム1101は、ある場合には、イントラネットまたはインターネットを通してコンピュータシステム1101と通信する遠隔サーバ上に位置するデータ記憶ユニット等のコンピュータシステム1101の外部にある1つ以上の付加的データ記憶ユニットを含むことができる。
コンピュータシステム1101は、ネットワーク1130を通して1つ以上の遠隔コンピュータシステムと通信してもよい。例えば、コンピュータシステム1101は、ユーザの遠隔コンピュータシステム(例えば、クラウドサーバ)と通信してもよい。遠隔コンピュータシステムの実施例は、パーソナルコンピュータ(例えば、デスクトップPC)、ポータブルパーソナルコンピュータ(例えば、ラップトップまたはタブレットPC)、スマートフォン(例えば、Apple(登録商標) iPhone(登録商標)、Android対応デバイス等)、もしくは携帯情報端末を含む。ユーザは、ネットワーク1130を介してコンピュータシステム1101にアクセスしてもよい。
ソフトウェアおよびアルゴリズム:上記に議論されるように、いくつかの事例では、開示されるシステムはさらに、(i)単一の検出器または検出器アレイ読出サイクルの間に入手される複数の小領域もしくは個々の検出器データセットから高フレームレートビデオデータを組み立てるため、および/または(ii)複数の検出器小領域もしくは個々の検出器のそれぞれから入手されるデータを処理し、高ダイナミックレンジ画像をコンパイルするためのソフトウェアを備えてもよい。
いくつかの事例では、本明細書に説明される方法は、図11に図示されるもの等のコンピュータシステムの電子記憶場所上(例えば、コンピュータシステム1101のメモリ1110または電子記憶ユニット1115内等)に記憶された機械(例えば、コンピュータプロセッサ)実行可能コードを用いて実装されてもよい。機械実行可能または機械可読コードは、ソフトウェアの形態で提供されることができる。使用の間に、コードは、プロセッサ1105によって実行されることができる。ある場合には、コードは、記憶ユニット1115から読み出され、プロセッサ1105による迅速なアクセスのためにメモリ1110上に記憶されることができる。いくつかの状況では、電子記憶ユニット1115は、除外されることができ、機械実行可能命令は、メモリ1110上に記憶される。
いくつかの事例では、コードは、事前コンパイルされ、コードを実行するように適合されるプロセッサを有する機械との併用のために構成されることができる。いくつかの事例では、コードは、ランタイムの間にコンパイルされてもよい。コードは、コードが事前コンパイルまたはアズコンパイルされた方式で実行されることを可能にするように選択され得る、プログラミング言語で供給されることができる。
コンピュータシステム1101等の本明細書に提供される方法およびシステムの側面は、プログラミングにおいて具現化されることができる。本技術の種々の側面は、典型的には、あるタイプの機械可読媒体上で搬送される、またはそれにおいて具現化される機械(またはプロセッサ)実行可能コードおよび/または関連付けられるデータの形態の「製品」もしくは「製造品」と考えられ得る。機械実行可能コードは、メモリ(例えば、読取専用メモリ、ランダムアクセスメモリ、フラッシュメモリ)内またはハードディスク上等の電子記憶ユニット上に記憶されることができる。「記憶」タイプ媒体は、ソフトウェアプログラミングのために任意の時点で非一過性記憶を提供し得る、コンピュータシステム、コンピュータプロセッサ、または同等物の有形メモリ、もしくは種々の半導体メモリデバイス、テープドライブ、ディスクドライブ、光学ドライブ、および同等物等のその関連付けられるモジュールのうちのいずれかまたは全てを含むことができる。ソフトウェアの全てまたは一部は、随時、インターネットまたは種々の他の電気通信ネットワークを通して通信されてもよい。そのような通信は、例えば、1つのコンピュータまたはプロセッサから別のものへの、例えば、管理サーバまたはホストコンピュータからアプリケーションサーバのコンピュータプラットフォームへのソフトウェアのロードを可能にし得る。したがって、ソフトウェア要素を搭載し得る別のタイプの媒体は、ローカルデバイスの間の物理的インターフェースを横断して、有線および光学固定ネットワークを通して、および種々のエアリンクを経由して使用される等、光学、電気、および電磁波を含む。有線または無線リンク、光学リンク、もしくは同等物等のそのような波を搬送する物理的要素はまた、ソフトウェアを搭載する媒体と見なされ得る。本明細書に使用されるように、非一過性の有形「記憶」媒体に制限されない限り、コンピュータまたは機械「可読媒体」等の用語は、実行のためにプロセッサに命令を提供することに関与する任意の媒体を指す。
故に、コンピュータ実行可能コード等の可読媒体は、限定ではないが、有形記憶媒体、搬送波媒体、または物理的伝送媒体を含む、多くの形態をとってもよい。不揮発性記憶媒体は、例えば、データベースを実装するために使用され得る任意のコンピュータまたは同等物内の記憶デバイスのうちのいずれか等の光学もしくは磁気ディスクを含む。揮発性記憶媒体は、そのようなコンピュータプラットフォームのメインメモリ等のダイナミックメモリを含む。有形伝送媒体は、同軸ケーブル、すなわち、コンピュータシステム内のバスを備えるワイヤを含む、銅ワイヤおよび光ファイバを含む。搬送波伝送媒体は、電気または電磁信号、もしくは無線周波数(RF)および赤外線(IR)データ通信の間に発生されるもの等の音響または光波の形態をとってもよい。コンピュータ可読媒体の一般的な形態は、したがって、例えば、フロッピー(登録商標)ディスク、フレキシブルディスク、ハードディスク、磁気テープ、任意の他の磁気媒体、CD-ROM、DVDまたはDVD-ROM、任意の他の光学媒体、パンチカード紙テープ、孔のパターンを伴う任意の他の物理的記憶媒体、RAM、ROM、PROMおよびEPROM、FLASH-EPROM、任意の他のメモリチップまたはカートリッジ、データもしくは命令を輸送する搬送波、そのような搬送波を輸送するケーブルまたはリンク、もしくはそれからコンピュータがプログラミングコードおよび/またはデータを読み取り得る任意の他の媒体を含む。コンピュータ可読媒体のこれらの形態の多くは、1つ以上の命令の1つ以上のシーケンスを実行のためにプロセッサに搬送することに関与し得る。
コンピュータシステム1101は、例えば、ユーザが命令を入力する、データをコンピュータデータベースにアップロードする、コンピュータデータベースからデータをダウンロードする等のためのインターフェースを提供するためのユーザインターフェース(UI)1140を備える、電子ディスプレイ1135を含む、またはそれと通信してもよい。UIの実施例は、限定ではないが、グラフィカルユーザインターフェース(GUI)およびウェブベースのユーザインターフェースを含む。
いくつかの事例では、本開示の方法およびシステムは、1つ以上のアルゴリズム、例えば、回折パターンデータ、画像データ、および同等物を入手および/または処理するための命令を備えるアルゴリズムの使用を通して、実装されてもよい。アルゴリズムは、中央処理ユニット1105による実行に応じて、ソフトウェアによって実装されることができる。
本発明の好ましい実施形態が、本明細書に示され、説明されているが、そのような実施形態は、一例としてのみ提供されることが当業者に明白であろう。多数の変形例、変更、および代用が、ここで、本発明から逸脱することなく、当業者に想起されるであろう。本明細書に説明される本発明の実施形態の種々の代替物が、本発明を実践する際に任意の組み合わせにおいて採用され得ることを理解されたい。以下の請求項は、本発明の範囲を定義し、これらの請求項の範囲内の方法および構造ならびにそれらの均等物は、それによって網羅されることが意図される。

Claims (75)

  1. 透過型電子顕微鏡データを入手するための方法であって、前記方法は、
    a)サンプル面に位置付けられるサンプルによって透過または散乱される電子を偏向させるように構成される2次元偏向器を備える透過型電子顕微鏡を提供することであって、前記2次元偏向器は、前記サンプル面と2次元検出器アレイとの間に位置付けられる、ことと、
    b)前記偏向された電子が、前記2次元検出器アレイの一連の2つ以上の小領域に順次偏向されるように、偏向器制御信号を変調させ、それによって、前記2つ以上の小領域のそれぞれに偏向される前記電子のパターンに対応するデータセットを捕捉することと、
    c)前記2つ以上の小領域のそれぞれが、一連の反復検出器アレイ読出サイクルのそれぞれ内でデータセットを捕捉するように、前記偏向器制御信号の変調を検出器アレイ読出信号と同期化することと
    を含む、方法。
  2. 透過型電子顕微鏡データを入手するための方法であって、前記方法は、
    a)サンプル面に位置付けられるサンプルによって透過または散乱される電子を偏向させるように構成される2次元偏向器を備える透過型電子顕微鏡を提供することであって、前記2次元偏向器は、前記サンプル面と2次元検出器アレイとの間に位置付けられる、ことと、
    b)前記偏向された電子が、前記2次元検出器アレイの一連の2つ以上の小領域に順次偏向されるように、偏向器制御信号を変調させ、それによって、前記2つ以上の小領域のそれぞれに偏向される前記電子のパターンに対応するデータセットを捕捉することと
    を含み、
    前記2次元検出器アレイの2つ以上の小領域の感度、または電子を前記2つ以上の小領域のそれぞれに偏向させるための滞留時間は、個別に調節される、方法。
  3. 画像データを入手するための方法であって、前記方法は、
    a)サンプル面または焦点面に位置付けられる物体によって透過、反射、または散乱される光子を偏向させるように構成される2次元偏向器を備える光学システムを提供することであって、前記2次元偏向器は、前記サンプル面または焦点面と2次元検出器アレイとの間に位置付けられる、ことと、
    b)前記偏向された光子が、前記2次元検出器アレイの一連の2つ以上の小領域に順次偏向されるように、偏向器制御信号を変調させ、それによって、前記2つ以上の小領域のそれぞれに偏向される前記光子のパターンに対応するデータセットを捕捉することと、
    c)前記2つ以上の小領域のそれぞれが、一連の反復検出器アレイ読出サイクルのそれぞれ内でデータセットを捕捉するように、前記偏向器制御信号の変調を検出器アレイ読出信号と同期化することと
    を含む、方法。
  4. 画像データを入手するための方法であって、前記方法は、
    a)サンプル面または焦点面に位置付けられる物体によって透過、反射、または散乱される光子を偏向させるように構成される2次元偏向器を備える光学システムを提供することであって、前記2次元偏向器は、前記サンプル面または焦点面と2次元検出器アレイとの間に位置付けられる、ことと、
    b)前記偏向された光子が、前記2次元検出器アレイの一連の2つ以上の小領域に順次偏向されるように、偏向器制御信号を変調させ、それによって、前記2つ以上の小領域のそれぞれに偏向される前記光子のパターンに対応するデータセットを捕捉することと
    を含み、
    前記2次元検出器アレイの2つ以上の小領域の感度、または光子を前記2つ以上の小領域のそれぞれに偏向させるための滞留時間は、個別に調節される、方法。
  5. 前記2次元偏向器は、2次元静電偏向器である、請求項1または請求項2に記載の方法。
  6. 前記2次元偏向器は、2次元電磁偏向器である、請求項1または請求項2に記載の方法。
  7. 前記2次元偏向器は、可動ミラーまたはプリズムである、請求項3または請求項4に記載の方法。
  8. 前記2つ以上の小領域は、単一の2次元検出器の小領域を備える、請求項1-7のいずれか1項に記載の方法。
  9. 前記2つ以上の小領域は、2次元検出器アレイ内の異なる検出器を備える、請求項1-7のいずれか1項に記載の方法。
  10. 前記2次元検出器アレイは、電荷結合素子(CCD)画像センサ、相補型金属酸化膜半導体(CMOS)画像センサ、電子直接検出(EDD)カメラ、または飛行時間(ToF)画像センサを備え、前記偏向器制御信号の変調は、偏向された電子または光子が、アクティブに読み出されていない小領域に指向されるように、CCD、CMOS、EDD、またはToFカメラのためのローリングシャッタ同期化信号と同期化される、請求項1、3、5、6、7、または8のいずれか1項に記載の方法。
  11. データ入手のためのデューティサイクルは、前記データの時間的歪曲を負うことなく、少なくとも90%である、請求項10に記載の方法。
  12. データ入手のためのデューティサイクルは、前記データの時間的歪曲を負うことなく、少なくとも95%である、請求項10に記載の方法。
  13. データ入手のためのデューティサイクルは、前記データの時間的歪曲を負うことなく、少なくとも98%である、請求項10に記載の方法。
  14. 前記2つ以上の小領域のそれぞれによって捕捉される前記データセットは、画像または回折データのフレームを備える、請求項10-13のいずれか1項に記載の方法。
  15. 前記2つ以上の小領域のための前記画像または回折データを処理し、前記CCD、CMOS、またはToFカメラのための読出レートよりも速いフレームレートを備えるビデオデータを生成することをさらに含む、請求項14に記載の方法。
  16. 前記ビデオデータセットのフレームレートは、前記CCD、CMOS、またはToFカメラの読出レートよりも少なくとも4倍速い、請求項15に記載の方法。
  17. 前記ビデオデータセットのフレームレートは、前記CCD、CMOS、またはToFカメラの読出レートよりも少なくとも8倍速い、請求項15に記載の方法。
  18. 前記ビデオデータセットのフレームレートは、前記CCD、CMOS、またはToFカメラの読出レートよりも少なくとも16倍速い、請求項15に記載の方法。
  19. 前記ビデオデータセットのフレームレートは、前記CCD、CMOS、またはToFカメラの読出レートよりも少なくとも32倍速い、請求項15に記載の方法。
  20. 前記2次元偏向器のための切替時間は、10マイクロ秒未満である、請求項1-19のいずれか1項に記載の方法。
  21. 前記2次元偏向器のための切替時間は、1マイクロ秒未満である、請求項1-19のいずれか1項に記載の方法。
  22. 前記2次元偏向器のための切替時間は、100ナノ秒未満である、請求項1-19のいずれか1項に記載の方法。
  23. 前記2次元偏向器のための切替時間は、10ナノ秒未満である、請求項1-19のいずれか1項に記載の方法。
  24. 前記偏向器制御信号は、電子または光子を前記2つ以上の小領域のそれぞれに偏向させるための滞留時間が同一であるように変調される、請求項1-23のいずれか1項に記載の方法。
  25. 前記偏向器制御信号は、電子または光子を前記2つ以上の小領域のそれぞれに偏向させるための滞留時間が前記2つ以上の小領域のうちの少なくとも1つに関して異なるように変調される、請求項1-24のいずれか1項に記載の方法。
  26. 電子または光子を前記2つ以上の小領域に偏向させるための滞留時間は、約1マイクロ秒~約100ミリ秒に及ぶ、請求項1-25のいずれか1項に記載の方法。
  27. 前記偏向器制御信号は、電子または光子を前記2つ以上の小領域のうちの少なくとも1つに偏向させるための滞留時間がゼロであるように変調され、前記少なくとも1つの小領域によって捕捉される前記データセットは、暗電流データセットを備える、請求項1-26のいずれか1項に記載の方法。
  28. 前記2つ以上の2次元小領域によって捕捉される各データセットは、画像または回折データを備え、前記2次元検出器アレイのものよりも高いダイナミックレンジを有する画像または回折データの単一のフレームを提供するように、さらに処理される、請求項2、4、25、26、または27のいずれか1項に記載の方法。
  29. 前記2次元検出器アレイの2つ以上の小領域はそれぞれ、個々の検出器を備える、請求項1-28のいずれか1項に記載の方法。
  30. 前記2つ以上の個々の検出器のそれぞれの感度、または前記2つ以上の個々の検出器の各々に対する飽和レベルは、個別に調節される、請求項29に記載の方法。
  31. 前記2つ以上の個々の検出器の感度は、電子的に調節される、請求項30に記載の方法。
  32. 前記2つ以上の個々の検出器の感度は、空間フィルタリングまたはマスキングによって調節される、請求項30に記載の方法。
  33. 前記2つ以上の個々の検出器は、異なる機能性または異なる性能仕様を備える2つ以上の検出器を備える、請求項29-32のいずれか1項に記載の方法。
  34. 前記2つ以上の検出器は、CCDカメラ、CMOSカメラ、暗視野STEM検出器、ファラデーカップ、クワッドフォトダイオード、環状暗視野検出器、明視野検出器、汎用検出器、またはそれらの任意の組み合わせを備える、請求項33に記載の方法。
  35. 前記2つ以上の個々の検出器のうちの少なくとも1つは、前記サンプル面または焦点面から異なる距離に位置付けられる、請求項28-34のいずれか1項に記載の方法。
  36. 前記2つ以上の検出器によって捕捉される前記データセットは、画像データ、電子ビーム電流データ、電子ビーム整合データ、セグメント化された暗視野データ、またはそれらの任意の組み合わせを備えるマルチモーダルデータセットを生成するようにコンパイルされる、請求項33-35のいずれか1項に記載の方法。
  37. 前記2つ以上の小領域によって捕捉される前記データセットは、前記偏向ステップによって導入される歪曲を補正するように処理される、請求項1-36のいずれか1項に記載の方法。
  38. 透過型電子顕微鏡検査データを入手するためのシステムであって、前記システムは、
    a)透過型電子顕微鏡と、
    b)サンプルによって透過または散乱される電子を偏向させるように構成される2次元偏向器であって、前記2次元偏向器は、前記透過型電子顕微鏡内でサンプル面と2次元検出器アレイとの間に位置付けられる、2次元偏向器と、
    c)偏向器制御システムであって、前記偏向器制御システムは、前記偏向された電子が、前記2次元検出器アレイの一連の2つ以上の小領域に順次偏向されるように、偏向器制御信号を変調させ、それによって、前記2つ以上の小領域のそれぞれに偏向される電子のパターンに対応するデータセットを捕捉するように構成される、偏向器制御システムと
    を備え、
    前記偏向器制御信号は、前記2つ以上の2次元小領域がそれぞれ、一連の反復検出器アレイ読出サイクルのそれぞれ内でデータセットを捕捉するように、検出器アレイ読出信号と同期化される、システム。
  39. 透過型電子顕微鏡検査データを入手するためのシステムであって、前記システムは、
    a)透過型電子顕微鏡と、
    b)サンプルによって透過または散乱される電子を偏向させるように構成される2次元偏向器であって、前記2次元偏向器は、前記透過型電子顕微鏡内でサンプル面と2次元検出器アレイとの間に位置付けられる、2次元偏向器と、
    c)偏向器制御システムであって、前記偏向器制御システムは、前記偏向された電子が、前記2次元検出器アレイの一連の2つ以上の小領域に順次偏向されるように、偏向器制御信号を変調させ、それによって、前記2つ以上の小領域のそれぞれに偏向される電子のパターンに対応するデータセットを捕捉するように構成される、偏向器制御システムと
    を備え、
    前記2次元検出器アレイの2つ以上の小領域の感度、または電子を前記2つ以上の小領域のそれぞれに偏向させるための滞留時間は、個別に調節可能である、システム。
  40. 画像データを入手するためのシステムであって、前記システムは、
    a)サンプル面または焦点面に位置付けられる物体によって透過、反射、または散乱される光子を偏向させるように構成される2次元偏向器を備える光学システムであって、前記2次元偏向器は、前記サンプル面または焦点面と2次元検出器アレイとの間に位置付けられる、光学システムと、
    b)偏向器制御システムであって、前記偏向器制御システムは、前記偏向された光子が、前記2次元検出器アレイの一連の2つ以上の小領域に順次偏向されるように、偏向器制御信号を変調させ、それによって、前記2つ以上の小領域のそれぞれに偏向される前記光子のパターンに対応するデータセットを捕捉するように構成される、偏向器制御システムと
    を備え、
    前記偏向器制御信号は、前記2つ以上の小領域のそれぞれが、一連の反復検出器アレイ読出サイクルのそれぞれ内でデータセットを捕捉するように、検出器アレイ読出信号と同期化される、システム。
  41. 画像データを入手するためのシステムであって、前記システムは、
    a)サンプル面または焦点面に位置付けられる物体によって透過、反射、または散乱される光子を偏向させるように構成される2次元偏向器を備える光学システムであって、前記2次元偏向器は、前記サンプル面または焦点面と2次元検出器アレイとの間に位置付けられる、光学システムと、
    b)偏向器制御システムであって、前記偏向器制御システムは、前記偏向された光子が、前記2次元検出器アレイの一連の2つ以上の小領域に順次偏向されるように、偏向器制御信号を変調させ、それによって、前記2つ以上の小領域のそれぞれに偏向される前記光子のパターンに対応するデータセットを捕捉するように構成される、偏向器制御システムと
    を備え、
    前記2次元検出器アレイの2つ以上の小領域の感度、または光子を前記2つ以上の小領域のそれぞれに偏向させるための滞留時間は、個別に調節可能である、システム。
  42. 前記2つ以上の小領域によって捕捉される前記データセットを収集および分析するように構成されるプロセッサをさらに備える、請求項39-41のいずれか1項に記載のシステム。
  43. 前記2次元偏向器は、2次元静電偏向器である、請求項38または請求項39のいずれか1項に記載のシステム。
  44. 前記2次元偏向器は、2次元電磁偏向器である、請求項38または請求項39のいずれか1項に記載のシステム。
  45. 前記2次元偏向器は、可動ミラーまたはプリズムである、請求項40または請求項41のいずれか1項に記載のシステム。
  46. 前記2つ以上の小領域は、単一の2次元検出器の小領域を備える、請求項39-45のいずれか1項に記載のシステム。
  47. 前記2つ以上の小領域は、2次元検出器アレイ内の異なる検出器を備える、請求項39-45のいずれか1項に記載のシステム。
  48. 前記2次元検出器アレイは、電荷結合素子(CCD)画像センサ、相補型金属酸化膜半導体(CMOS)画像センサ、電子直接検出(EDD)画像センサ、または飛行時間(ToF)画像センサを備え、前記偏向器制御信号の変調は、偏向された電子または光子が、アクティブに読み出されていない小領域に指向されるように、CCD、CMOS、EDD、またはToFカメラのためのローリングシャッタ同期化信号と同期化される、請求項38、40、42、43、44、45、または46のいずれか1項に記載のシステム。
  49. データ入手のためのデューティサイクルは、前記データの時間的歪曲を負うことなく、少なくとも90%である、請求項48に記載のシステム。
  50. データ入手のためのデューティサイクルは、前記データの時間的歪曲を負うことなく、少なくとも95%である、請求項48に記載のシステム。
  51. データ入手のためのデューティサイクルは、前記データの時間的歪曲を負うことなく、少なくとも98%である、請求項48に記載のシステム。
  52. 前記2つ以上の小領域によって捕捉される各データセットは、画像または回折データの単一のフレームを備える、請求項48-51のいずれか1項に記載のシステム。
  53. 前記2つ以上の小領域のための前記画像または回折データは、前記CCD、CMOS、またはToFカメラのための読出レートよりも速いフレームレートを備えるビデオデータセットを生成するように処理される、請求項52に記載のシステム。
  54. 前記ビデオデータセットのフレームレートは、前記CCD、CMOS、またはToFカメラのフレームレートよりも少なくとも4倍速い、請求項53に記載のシステム。
  55. 前記ビデオデータセットのフレームレートは、前記CCD、CMOS、またはToFカメラのフレームレートよりも少なくとも8倍速い、請求項53に記載のシステム。
  56. 前記ビデオデータセットのフレームレートは、前記CCD、CMOS、またはToFカメラのフレームレートよりも少なくとも16倍速い、請求項53に記載のシステム。
  57. 前記ビデオデータセットのフレームレートは、前記CCD、CMOS、またはToFカメラのフレームレートよりも少なくとも32倍速い、請求項53に記載のシステム。
  58. 前記2次元偏向器のための切替時間は、10マイクロ秒未満である、請求項38-57のいずれか1項に記載のシステム。
  59. 前記2次元偏向器のための切替時間は、1マイクロ秒未満である、請求項38-57のいずれか1項に記載のシステム。
  60. 前記2次元偏向器のための切替時間は、100ナノ秒未満である、請求項38-57のいずれか1項に記載のシステム。
  61. 前記2次元偏向器のための切替時間は、10ナノ秒未満である、請求項38-57のいずれか1項に記載のシステム。
  62. 前記偏向器制御信号は、前記2つ以上の小領域のそれぞれにおける前記偏向された電子または光子のための滞留時間が同一であるように変調される、請求項38-61のいずれか1項に記載のシステム。
  63. 前記偏向器制御信号は、前記2つ以上の小領域のそれぞれにおける前記偏向された電子または光子のための滞留時間が前記2つ以上の小領域のうちの少なくとも1つに関して異なるように変調される、請求項38-61のいずれか1項に記載のシステム。
  64. 電子または光子を前記2つ以上の小領域に偏向させるための滞留時間は、約1マイクロ秒~約100ミリ秒に及ぶ、請求項38-63のいずれか1項に記載のシステム。
  65. 前記偏向器制御信号は、電子または光子を前記2つ以上の小領域のうちの少なくとも1つに偏向させるための滞留時間がゼロであるように変調され、前記少なくとも1つの小領域によって捕捉される前記データセットは、暗電流データセットを備える、請求項38-64のいずれか1項に記載のシステム。
  66. 前記2つ以上の小領域によって捕捉される各データセットは、画像または回折データを備え、前記2次元検出器アレイのものよりも高いダイナミックレンジを有する画像または回折データの単一のフレームを提供するようにさらに処理される、請求項39、41、63、64、または65のいずれか1項に記載のシステム。
  67. 前記2次元検出器アレイの2つ以上の小領域はそれぞれ、個々の検出器を備える、請求項38-66のいずれか1項に記載のシステム。
  68. 前記2つ以上の個々の検出器のそれぞれの感度、または前記2つ以上の個々の検出器の各々に対する飽和レベルは、個別に調節可能である、請求項67に記載のシステム。
  69. 前記2つ以上の個々の検出器の感度は、電子的に調節される、請求項68に記載のシステム。
  70. 前記2つ以上の個々の検出器の感度は、空間フィルタリングまたはマスキングによって調節される、請求項68に記載のシステム。
  71. 前記2つ以上の個々の検出器は、異なる機能性または異なる性能仕様を備える、2つ以上の検出器を備える、請求項67-70のいずれか1項に記載のシステム。
  72. 前記2つ以上の異なる検出器は、CCDカメラ、CMOSカメラ、暗視野STEM検出器、ファラデーカップ、クワッドフォトダイオード、環状暗視野検出器、明視野検出器、汎用検出器、またはそれらの任意の組み合わせを備える、請求項71に記載のシステム。
  73. 前記2つ以上の個々の検出器のうちの少なくとも1つは、前記サンプル面または焦点面から異なる距離に位置付けられる、請求項67-72のいずれか1項に記載のシステム。
  74. 前記2つ以上の検出器によって捕捉される前記データセットは、画像データ、電子ビーム電流データ、電子ビーム整合データ、セグメント化された暗視野データ、またはそれらの任意の組み合わせを備えるマルチモーダルデータセットを生成するようにコンパイルされる、請求項71-72のいずれか1項に記載のシステム。
  75. 前記2つ以上の小領域によって捕捉される前記データセットは、前記偏向ステップによって導入される歪曲を補正するように処理される、請求項38-73のいずれか1項に記載のシステム。
JP2022501332A 2019-07-10 2020-07-08 高フレームレートおよび高ダイナミックレンジ電子顕微鏡検査 Pending JP2022540637A (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201962872645P 2019-07-10 2019-07-10
US62/872,645 2019-07-10
PCT/US2020/041266 WO2021007360A1 (en) 2019-07-10 2020-07-08 High framerate and high dynamic range electron microscopy

Publications (2)

Publication Number Publication Date
JP2022540637A true JP2022540637A (ja) 2022-09-16
JPWO2021007360A5 JPWO2021007360A5 (ja) 2023-07-13

Family

ID=74115282

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2022501332A Pending JP2022540637A (ja) 2019-07-10 2020-07-08 高フレームレートおよび高ダイナミックレンジ電子顕微鏡検査

Country Status (7)

Country Link
US (2) US11804359B2 (ja)
EP (1) EP3997727A4 (ja)
JP (1) JP2022540637A (ja)
KR (1) KR20220118393A (ja)
AU (1) AU2020309555A1 (ja)
CA (1) CA3146827A1 (ja)
WO (1) WO2021007360A1 (ja)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
AU2020309555A1 (en) * 2019-07-10 2022-02-10 Integrated Dynamic Electron Solutions, Inc. High framerate and high dynamic range electron microscopy
KR20240055696A (ko) * 2021-04-16 2024-04-29 인터그레이티드 다이나믹 일렉트론 솔루션즈, 인크. 전자 현미경 기술을 위한 임의의 전자 선량 파형
WO2022220918A1 (en) * 2021-04-16 2022-10-20 Integrated Dynamic Electron Solutions, Inc. Arbitrary electron dose waveforms for electron microscopy
EP4239742A1 (en) 2021-09-28 2023-09-06 LG Energy Solution, Ltd. Battery cell pressurization device
US11867562B2 (en) * 2022-01-25 2024-01-09 Visera Technologies Company Limited Optical devices
JP7498212B2 (ja) * 2022-03-29 2024-06-11 日本電子株式会社 電子顕微鏡および収差測定方法
US11848173B1 (en) 2023-01-31 2023-12-19 Integrated Dynamic Electron Solutions, Inc. Methods and systems for event modulated electron microscopy

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US3887841A (en) 1970-04-20 1975-06-03 Hadland John Photo Inst High speed camera
GB2109659B (en) 1981-10-15 1985-06-19 Hadland John Image converters and methods of operating them
US4736110A (en) * 1984-09-28 1988-04-05 Nippon Jidoseigyo, Ltd. Image pick-up apparatus
DE10156275B4 (de) * 2001-11-16 2006-08-03 Leo Elektronenmikroskopie Gmbh Detektoranordnung und Detektionsverfahren
FR2874124B1 (fr) * 2004-08-04 2006-10-13 Centre Nat Rech Scient Cnrse Dispositif pour l'acquisition d'images et/ou de spectres de pertes d'energie
US9488823B2 (en) * 2012-06-07 2016-11-08 Complete Genomics, Inc. Techniques for scanned illumination
US9451177B2 (en) 2013-06-18 2016-09-20 Massachusetts Institute Of Technology Methods and apparatus for high speed camera
JP6318157B2 (ja) * 2013-08-30 2018-04-25 株式会社日立製作所 荷電粒子線レンズモジュール及びそれを備えた荷電粒子線装置
US9165743B2 (en) * 2014-02-14 2015-10-20 Lawrence Livermore National Security, Llc High-speed multiframe dynamic transmission electron microscope image acquisition system with arbitrary timing
EP3070732A1 (en) * 2015-03-18 2016-09-21 Fei Company Apparatus and method of performing spectroscopy in a transmission charged-particle microscope
EP3378040A4 (en) 2015-11-20 2020-01-22 Integrated Dynamic Electron Solutions, Inc. TEMPORAL COMPRESSION DETECTION SYSTEMS
JP2017143060A (ja) 2016-01-20 2017-08-17 ガタン インコーポレイテッドGatan,Inc. 直接検出センサを用いる電子エネルギー損失分光器
EP3662499A1 (en) 2017-08-04 2020-06-10 Gatan, Inc. Method for high speed eels spectrum acquisition
JP2020149767A (ja) * 2019-03-11 2020-09-17 株式会社日立ハイテク 荷電粒子線装置
AU2020309555A1 (en) * 2019-07-10 2022-02-10 Integrated Dynamic Electron Solutions, Inc. High framerate and high dynamic range electron microscopy

Also Published As

Publication number Publication date
EP3997727A1 (en) 2022-05-18
US11804359B2 (en) 2023-10-31
US20240105418A1 (en) 2024-03-28
KR20220118393A (ko) 2022-08-25
CA3146827A1 (en) 2021-01-14
AU2020309555A1 (en) 2022-02-10
EP3997727A4 (en) 2023-08-09
WO2021007360A1 (en) 2021-01-14
US20210082661A1 (en) 2021-03-18

Similar Documents

Publication Publication Date Title
US11804359B2 (en) High framerate and high dynamic range electron microscopy
US10571675B2 (en) Temporal compressive sensing systems
JP6684705B2 (ja) 圧縮走査型電子顕微鏡システムおよび動作方法
JP7119010B2 (ja) マルチビーム画像形成システムを用いて基板表面の画像を形成する方法、及び、多数の電子ビームレットを用いて基板表面の画像を形成するためのシステム
US10170274B2 (en) TEM phase contrast imaging with image plane phase grating
CN108027499B (zh) 用于多波束扫描式电子显微系统的聚焦调整的方法及系统
US10109453B2 (en) Electron beam masks for compressive sensors
CN109075001B (zh) 用于在非导电衬底上成像浮动金属结构的充电控制的方法及系统
US11764045B2 (en) Ion beam focus adjustment
CN111095473B (zh) 用于高速光谱采集的方法
JP6163063B2 (ja) 走査透過電子顕微鏡及びその収差測定方法
JP2011103273A (ja) エネルギーフィルタを用いた電子エネルギー損失分光装置
Reed Temporal compressive sensing systems
JP2021522657A (ja) マルチビーム二次イオン質量スぺクトロメトリデバイス

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230705

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20230705

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20240722

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20240729