JP2018128657A

JP2018128657A - レンズアレイ顕微鏡

Info

Publication number: JP2018128657A
Application number: JP2017058018A
Authority: JP
Inventors: ランセル・スティーブン; Lansel Steven
Original assignee: Olympus Corp
Current assignee: Olympus Corp
Priority date: 2015-09-29
Filing date: 2017-03-23
Publication date: 2018-08-16
Also published as: WO2017058179A1; US20170146789A1

Abstract

【課題】低コスト、ロバスト、小さい、かつ／または軽量のコンポーネントから構築され、高解像度の画像を得ることができ、従来の光学透過顕微鏡の光学倍率と視界の間のトレードオフを処理する光学透過顕微鏡を提供する。【解決手段】顕微鏡は、照明ユニットと、結像面上に位置する画像センサと、概してレンズ平面内にある複数のレンズを含むレンズアレイであって、（ｉ）前記照明ユニットと前記レンズアレイとの間に位置し、（ｉｉ）前記結像面に対応する焦点面を有するレンズアレイと、を備え、前記複数のレンズは、前記焦点面の一部を含み断片化していない視野を有する。【選択図】図１Ｂ

Description

本発明は、光学透過顕微鏡に関する。より詳しくは、レンズアレイ顕微鏡を使用した光学透過顕微鏡に関する。
本願は、２０１７年２月６日に出願された米国特許出願第１５／４２５，８８４号に基づき優先権を主張し、その内容をここに援用する。

顕微鏡は、使用しなければ観察するのが難しいような小さな物の高解像度な画像を得るために、科学技術の多くの分野の中で使用される。顕微鏡は、所望の解像度および質を備えた画像を生成し撮像するために、レンズ、絞り、光源、センサなどの様々な構成を用いる。さらに、顕微鏡は、撮像した画像を調節、増強、変形などするために様々なアナログやデジタルの画像処理法を用いる。顕微鏡の技術の１つに光学透過顕微鏡がある。光学透過顕微鏡では、光は、１つの側から反対側へと試料を透過し、試料の画像を形成するために集められる。光学透過顕微鏡は生体試料の画像を得るためにしばしば使用され、医学や自然科学のような分野で様々な応用がある。

米国特許出願公開第２００６／２９１０４８号明細書

「Microscopy with microlens arrays: high throughput, high resolution and light-field imaging」Antony Orth and Kenneth Crozier, Optics Express Vol. 20, Issue 12, pp. 13522-13531 (2012)

しかしながら、従来の光学透過顕微鏡には、透過光線を集めるためにきわめて複雑な対物レンズが含まれる。これらの対物レンズは、こわれやすい、高価、大きいなどの扱いにくい傾向を示しやすい。その結果、従来の光学透過顕微鏡の多くは、特に低コスト、高い信頼度、および小さなサイズおよび重量であることが重視して応用領域においては、理想的なものではない。従って、改善された光学透過顕微鏡システムを提供することが望まれる。

本発明の一実施形態では、顕微鏡は、レンズアレイと、試料を照明するための照明ユニットと、画像撮像ユニットとを備える。レンズアレイは多くのレンズを含む。画像撮像ユニットは、結像面に配置される。その後、試料は、照明ユニットとレンズアレイとの間の対応する焦点面に配置される。レンズアレイは、焦点面の一部を含み断片化していない視界を持つ。

本発明の一実施形態では、顕微鏡は、レンズアレイと、試料を照明するための照明ユニットと、画像撮像ユニットとを備える。レンズアレイは多くのレンズを含む。画像撮像ユニットは、結像面に配置される。その後、試料は、照明ユニットとレンズアレイとの間の対応する焦点面に配置される。画像撮像ユニットと、前記レンズアレイと、前記照明ユニットとの間の距離は以下の数式を満たす。

ここで、ｆは複数のレンズの焦点距離であり、ｂはレンズアレイと画像撮像ユニットとの間の距離であり、Ａはレンズアレイと照明ユニットの間の距離である。

本発明の一実施形態では、顕微鏡は、マイクロレンズアレイと、試料を照明するための照明ユニットと、画像撮像ユニットとを備える。マイクロレンズアレイは多くのマイクロレンズを含む。画像撮像ユニットは、結像面に配置される。その後、試料は、照明ユニットとマイクロレンズアレイとの間の対応する焦点面に配置される。

本発明の一実施形態に係る、レンズアレイ顕微鏡の簡略図である。本発明の一実施形態に係る、レンズアレイ顕微鏡の簡略図である。本発明の一実施形態に係る、レンズアレイ顕微鏡の簡略図である。本発明の一実施形態に係る、Ａ／ｆの関数としてｂ／ｆを単純にプロットした図である。ここで、ｂはレンズアレイとセンサとの間の距離であり、ｆは複数のレンズの焦点距離であり、Ａは照明ユニットとレンズアレイとの間の距離である。本発明の一実施形態に係る、Ａ／ｆの関数としてｏを単純にプロットした図である。ここで、ｏはレンズアレイ顕微鏡の光学倍率であり、ｆは複数のレンズの焦点距離であり、Ａは照明ユニットとレンズアレイとの間の距離である。本発明の一実施形態に係る、テストパターンの簡略図およびテストパターンの画像である。本発明の一実施形態に係る、テストパターンの簡略図およびテストパターンの画像である。本発明の一実施形態に係る、テストパターンの簡略図およびテストパターンの画像である。本発明の一実施形態に係る、レンズアレイ顕微鏡を使用して得られた画像を処理する方法の簡略図である。本発明の一実施形態に係る、レンズアレイ顕微鏡を使用して得られた画像を処理する方法の簡略図である。本発明の一実施形態に係る、レンズアレイ顕微鏡を使用して得られた画像を処理する方法の簡略図である。本発明の一実施形態に係る、レンズアレイ顕微鏡を使用して得られた画像を処理する方法の簡略図である。本発明の一実施形態に係る、図４Ａ、図４Ｂ、図４Ｃ及び図４Ｄの方法によって処理されている典型的な画像を描いた、シミュレーションデータの簡略図である。本発明の一実施形態に係る、図４Ａ、図４Ｂ、図４Ｃ及び図４Ｄの方法によって処理されている典型的な画像を描いた、シミュレーションデータの簡略図である。本発明の一実施形態に係る、図４Ａ、図４Ｂ、図４Ｃ及び図４Ｄの方法によって処理されている典型的な画像を描いた、シミュレーションデータの簡略図である。本発明の一実施形態に係る、図４Ａ、図４Ｂ、図４Ｃ及び図４Ｄの方法によって処理されている典型的な画像を描いた、シミュレーションデータの簡略図である。本発明の一実施形態に係る、図４Ｄの方法によって処理されている典型的な画像を描いた、シミュレーションデータの簡略図である。本発明の一実施形態に係る、図４Ｄの方法によって処理されている典型的な画像を描いた、シミュレーションデータの簡略図である。本発明の一実施形態に係る、図４Ａ、図４Ｂ及び図４Ｃの方法によって処理される前後の典型的な画像を描いた、実験データの簡略図である。本発明の一実施形態に係る、図４Ａ、図４Ｂ及び図４Ｃの方法によって処理される前後の典型的な画像を描いた、実験データの簡略図である。本発明の一実施形態に係る、非点光源を備えたレンズアレイ顕微鏡の簡略図である。

図において、同じ符号の要素は同じか同様の機能を有する。

以下の記載において、具体的な詳細を明らかにして、本開示と一致する本発明の実施形態を説明する。しかしながら、本発明の実施形態はこれら具体的な詳細のうちのいくつかあるいはすべてがなく実行されるだろうことは、当業者にとって明らかであろう。ここに示された具体的な実施形態は、実例となるものであるが限定することを意図していない。具体的にここで記載されなかったが、当業者は本開示の範囲及び精神内にある他の要素を実現してもよい。さらに、不必要な反復を回避するため、具体的に別で記載されない限り、あるいは１つ以上の特徴が実施形態を機能しなくさせない限り、１つの実施形態に関連して説明された１つ以上の特徴が、他の実施形態に組み入れられてもよい。

光学透過顕微鏡が低コスト、高度な信頼性、小さくかつ／あるいは軽量の構成要素から構成されている場合、光学透過顕微鏡の利点は増強されるかもしれない。しかしながら、従来の光学透過顕微鏡は、高価で、維持することが困難でかつ／あるいは大きすぎて扱いにくい傾向がある精巧な対物レンズを含む。この１つの理由は、対物レンズが収差に敏感であるためである。収差を補いかつ高解像度画像を達成するため、対物レンズは、収差を最小化するために、多くの注意深く形作られ配置された要素を使用して構築される傾向がある。しかしながら、そのような努力が収差を少なくすることに成功するかもしれないが、これらの努力もまた、対物レンズのコスト、脆弱性、サイズおよび重量を増加させる傾向がある。

さらに、従来の顕微鏡では、光学倍率と視界の間にトレードオフが存在する。より具体的には、光学倍率と視界の直径の積は一定値である。すなわち、光学倍率が大きいほど視界が小さくなり、また逆も言える。従来の光学透過顕微鏡の光学倍率と視界の間のトレードオフを補う１つのアプローチは、試料の大きなエリアを覆う小さな視界を走査しかつ／または測定し、そして、獲得した画像を組み合わせることである。しかしながら、このアプローチは典型的には高精度可動部品、画像を組み合わせるための精巧なソフトウェアおよび／または同様なものを含む。このアプローチに関するさらなる難点は、試料が移動するか走査中に変わる場合に特に問題であるが、走査を完了するために非常に長い時間がかかることである。従って、走査しかつ／または測定する技術は、多くの応用に適していない。
従来の光学透過顕微鏡の光学倍率と視界の間のトレードオフを補う別のアプローチは、各対物レンズが大きな光学倍率を有する対物レンズの２次元アレイを利用することである。しかしながら、この場合も、対物レンズがそれぞれ大きな光学倍率を有し相応して小さな視界を有しているので、対物レンズのアレイを持つ多くの顕微鏡が、試料の大きなエリアの画像を得るために、走査および／または測定する技術を使用する。
さらに、従来の光学透過顕微鏡の光学倍率と視界の間のトレードオフを補う別のアプローチは、試料によって生じる影がセンサによって直接撮像されるような、レンズがない顕微鏡を使用することである。しかしながら、レンズがない顕微鏡の適用は、利用可能な試料の種類及び取り付け技術を制限する（例えば、多くのレンズがない顕微鏡が標準ガラススライドと互換性がない）非常に小さな作動距離と、試料内の焦点面を選択的に撮像する能力がないことによって制限されている。

従って、低コスト、ロバスト、小さい、かつ／または軽量のコンポーネントから構築され、高解像度の画像を得ることができ、従来の光学透過顕微鏡の光学倍率と視界の間のトレードオフを処理する光学透過顕微鏡を提供することが望ましい。

図１Ａ、図１Ｂ、図１Ｃは、本発明の一実施形態に係るレンズアレイ顕微鏡１００の簡略図である。レンズアレイ顕微鏡１００は、試料１２０上に位置する照明ユニット１１０を備える。照明ユニット１１０からの光は試料１２０を通過して、レンズアレイ１３０によってセンサ１４０上に転送される。光は試料１２０を通過して移動するので、センサ１４０に達する光信号は試料１２０に関連した情報を含む。センサ１４０は光信号を画像処理プロセッサ１５０に送られる電気信号に変換する。

一般に、照明ユニット１１０は試料１２０に光を供給する。本発明の一実施形態によれば、照明ユニット１１０は、広帯域、狭帯域、可視、紫外線、赤外線、可干渉性、非可干渉性、偏光、または非偏光の放射線を含む電磁放射線の１つ以上の源を含むような光源１１１を備えてもよい。本発明の一実施形態において、照明ユニット１１０は、光源１１１が調整可能かつ／または交換可能であるような様々な光源の使用をサポートしてもよい。

本発明の一実施形態によれば、照明ユニット１１０は、１つ以上の絞り、レンズ、ディフューザ、マスクなどを含んでもよい。本発明の一実施形態によれば、絞りは光が透過する１つ以上の開口を備えた不透明なシートを含んでもよい。例えば、開口は、直径と位置によって特徴づけられた不透明なシート中の円形の穴であってもよい。円形の穴の直径と位置のどちらかは、光源の見かけサイズおよび／または位置を制御するように調整可能であってもよい。本発明の一実施形態では、絞りは、照明ユニット１１０を様々な構成および／または互換性をもつ光源のタイプに適応させるために、調整可能かつ／または交換可能な光源と共に調節されてもよい。

本発明の一実施形態によれば、光源レンズは、光源の見かけの位置、サイズおよび／または拡散を変更するために光源からの光を転送するために使用されてもよい。本発明の一実施形態において、レンズは、試料１２０と光源の間の有効距離を増加させることにより、レンズアレイ顕微鏡１００のコンパクトな設計を考慮してもよい。すなわち、仮想光源が物理的な光源より試料１２０からより遠く離れている位置から試料１２０を照明するように、レンズは物理的な光源からの光を転送してもよい。

本発明の一実施形態において、位置や焦点距離などの光源レンズの１つ以上の特性が、設定可能かつ／または調整可能であってもよい。本発明の一実施形態によれば、ディフューザは照明ユニット１１０により出力される光の空間的均一性を増加させるために、光源からの光の拡散、サイズおよび／または角度を変更するために使用されてもよい。本発明の一実施形態によれば、複数の光源レンズ、絞りおよび／または追加の構成が、照明ユニット１１０によって提供される光のサイズ、位置、角度、拡散および／または他の特性を高水準でコントロールできるように配置されてもよい。例えば、前記複数のレンズおよび／または絞りは、試料１２０にケーラー照明を提供するように構成されてもよい。

本発明の一実施形態によれば、試料１２０は、照明ユニット１１０によって提供される光を部分的に送信するように半透明のあらゆるオブジェクトを含んでいてもよい。本発明の一実施形態によれば、試料１２０は、入射光線に対して透明、半透明および／または不透明な様々な領域を含んでいてもよい。様々な領域の透明性は、色や極性などの入射光線の特性によって変化してもよい。本発明の一実施形態によれば、試料１２０は、生体試料、無生物の試料、ガス、液体、固体および／またはそれらのあらゆる組合せを含んでもよい。本発明の一実施形態によれば、試料１２０は動く物を含んでいてもよい。本発明の一実施形態によれば、試料１２０は、標準の透明なスライドガラスのような、あらゆる適切な取り付け技術を使用して取り付けられてもよい。

引き続き、図１Ａ、図１Ｂおよび図１Ｃを参照すると、レンズアレイ１３０は、センサ１４０上に、試料１２０を通過した光を転送する。レンズアレイ１３０は、周期的な正方形パターン中の試料１２０の下に配置された複数のレンズ１３１−１３９を含む。本発明の一実施形態によれば、レンズ１３１−１３９は、周期的な正方形、長方形、六角形のパターンや、非周期的なパターンなどのパターンで配置される。さらに別の実施形態によれば、レンズ自体はそれぞれ開口を有する。他の実施形態によれば、レンズおよび／または対応する開口は、正方形、長方形、円形および／または六角形を含む様々な形を持つ。レンズ１３１−１３９は、試料１２０の下の同じ平面にあるとして描かれているが、本発明の一実施形態では、異なるレンズは試料１２０から異なる距離で配置されてもよい。レンズ１３１−１３９は、同一、名目上同一および／または互いに異なってもよい。本発明の一実施形態によれば、レンズアレイ１３０は、複数の個別のレンズ素子を使用して形成されてもよいし、かつ／または単一の一体化したレンズ素子として形成されてもよい。本発明の一実施形態によれば、レンズアレイ顕微鏡１００がポータブルで使い捨てになるように設計されおよび／または人体のような狭い悪条件の環境に挿入された場合、レンズアレイ１３０は、従来の対物レンズシステムより小さく軽くロバストかつ／または安価であるように設計されてもよい。本発明の一実施形態において、レンズアレイ１３０および／またはレンズ１３１−１３９の位置や焦点距離のような１つ以上の特性が、設定可能かつ／または調整可能であってもよい。

本発明の一実施形態によれば、レンズ１３１−１３９は、各々のマイクロレンズが直径２ｍｍ未満である同一か同様のマイクロレンズであってもよい。例えば、各マイクロレンズは、１００μｍと１０００μｍの間の範囲の直径を有してもよい。マイクロレンズを使用すると従来のレンズに対して長所を有する。例えば、いくつかのタイプのマイクロレンズアレイは、製造するのが簡単であり、多くのメーカーから容易に利用可能である。

本発明の一実施形態では、マイクロレンズアレイは、フォトリソグラフィ、レジスト処理、エッチング、デポジション、パッケージ技術などのような、半導体産業のために開発された設備や技術を使用して製造される。対照的に、従来のレンズは、しばしば、専門の設備、トレード知識および／または生産技術を使用して製造され、従来のレンズより高価および／または手に入りにくい場合がある。

本発明の一実施形態において、マイクロレンズアレイは、従来のレンズアレイより単純な設計であり、例えば、単一要素設計は、要素の１つの側に平面があり、要素の反対側に入射光線を転送するために使用される曲面のアレイがある。本発明の一実施形態において、曲面は従来のレンズを形成し、かつ／または非円形のレンズおよび／またはミクロのフレネルレンズのようなそれほど一般的ではないレンズの形を形成する。同様に、マイクロレンズアレイは、要素の両側で平面を持っている勾配インデックス（ＧＲＩＮ）設計を使用してもよい。そのような実施形態では、曲面ではなく（および／または、加えて）ＧＲＩＮレンズの変化する屈折率が、入射光線を転送するために使用される。

マイクロレンズを使用することの別の利点は、大きさが小さいため収差に対する感度が低いことを含む。例えば、多くのマイクロレンズの分解能は、技術的制限（例えば、収差による制限）ではなく、基本的な制限（例えば、回折による制限）に近づいていると考えられ、それによって、それに対応する高価、複雑さ、脆弱性などなしに、従来レンズの高度に精巧なシステムに匹敵する分解能を提供する。

本発明の一実施形態によれば、レンズ１３１−１３９のうちの１つ以上は、光熱拡張、イオン交換、ＣＯ２放射および反応性イオンエッチングのような作成技術を使用して、ガラス（例えば石英ガラス）で作られている。しかしながら、本発明の一実施形態では、レンズ１３１−１３９のうち１つ以上は、ガラスに使用されるものよりもより容易で安価な技術を使用して、ガラスより軽く、強く、かつ／または、安価な材料から作られる。例えば、本発明の一実施形態では、マイクロレンズアレイは、フォトリソグラフィ、レジスト処理、エッチング、デポジション、パッケージ技術などのような半導体産業のために開発された設備や技術を使用して製造される。対照的に、従来のレンズは、しばしば、専門の設備、トレード知識および／または生産技術を使用して製造され、従来のレンズより高価および／または有効性が低いおそれがある。

例えば、レンズ１３１−１３９のうち１つ以上は、フォトレジストリフロー、レーザー・ビーム成形、陽子を用いたディープリソグラフィー、ＬＩＧＡ（リソグラフィー、電解めっき、形成のドイツ語の頭字語）、光重合、マイクロジェット印刷、レーザアブレーション、ダイレクトレーザーまたはＥビームによるライティングなどの技術を用いて、光学エポキシ、ポリカーボネート、ポリ（メタクリル酸メチル）、ポリウレタン、環状オレフィン共重合体、環状オレフィン・ポリマーなどの高い光透過度を持つプラスチックやポリマーで作られている。そのような材料の使用は、レンズ１３１−１３９がマイクロレンズである場合、収差に対する感度が低いため、特に適切である。本発明の一実施形態では、レンズ１３１−１３９の１つ以上は液体で作られている。

本発明の一実施形態では、レンズ１３１−１３９のうち１つ以上は、マスターマイクロレンズアレイを使用して作られる。マスターマイクロレンズアレイは、複数のマイクロレンズアレイを成型またはエンボス加工するために使用される。本発明の一実施形態では、ウエハーレベル光学技術は、精巧なマイクロレンズアレイを費用対効果に優れた方法で製造するために使用される。

センサ１４０は、一般に、試料１２０に関連した情報を運ぶための光信号を、少なくとも光信号に含まれる情報の一部を保持する電気信号に変換するのに適したあらゆる装置を含む。本発明の一実施形態によれば、センサ１４０は、入射光信号に含まる画像のデジタル表現を生成する。デジタル表現は、空間的にピクセルに分けられるＲＡＷ画像データを含むことができる。例えば、ＲＡＷ画像データはＲＡＷ画像ファイルとしてフォーマットされてもよい。本発明の一実施形態によれば、センサ１４０は、電荷結合素子（ＣＣＤ）センサ、アクティブなピクセルセンサ、相補型金属酸化膜半導体（ＣＭＯＳ）センサ、Ｎ型金属酸化膜半導体（ＮＭＯＳ）センサなどを含んでもよい。好ましくは、センサは、読み出しノイズを減らしダイナミックレンジを増加させるため、５ミクロン未満の小さなピクセルピッチを有する。より好ましくは、センサは、約１ミクロン未満のピクセルピッチを有する。

本発明の一実施形態によれば、センサ１４０は単一体の集積センサであり、かつ／または複数の個別部品を含んでもよい。本発明の一実施形態によれば、センサ１４０の２次元的なピクセル濃度、すなわち単位領域あたりのピクセルは、レンズアレイ１３０の２次元のレンズ密度、すなわち単位領域あたりのレンズよりもはるかに大きく、例えば２５倍以上大きく、これにより、複数のレンズ１３１−１３９にそれぞれ対応し、各々が多くのピクセル数を含む複数のサブ画像が検出される。本発明の一実施形態によれば、センサ１４０は、カラーフィルタ、レンズ、増幅器、アナログデジタル（Ａ／Ｄ）変換器、画像エンコーダ、制御ロジックのような付加的な光学的および／または電子的な部品を含む。

センサ１４０は、ＲＡＷ画像データのような試料１２０に関連した情報を伝える電気信号を、処理、記憶、描画、ユーザ操作などのさらなる機能を電気信号に行う画像処理プロセッサ１５０に送信する。本発明の一実施形態によれば、画像処理プロセッサ１４０は、１つ以上のプロセッサ構成要素、メモリ構成要素、記憶構成要素、表示構成要素、ユーザインターフェース構成要素などを含む。例えば、画像処理プロセッサ１４０は、１つ以上の、マイクロプロセッサー、特定用途向け集積回路（ＡＳＩＣｓ）および／またはＲＡＷ画像データを出力画像データに変換するのに適したフィールド・プログラマブル・ゲート・アレイ（ＦＰＧＡｓ）を含む。出力画像データは、様々な、解凍された、圧縮された、ラスターおよび／またはベクトルのファイル形式などを含む適切な出力ファイル・フォーマットを使用してフォーマットされてもよい。本発明の一実施形態によれば、画像処理プロセッサ１５０は、センサ１４０に、ローカルバスを使用して結合され、かつ／または１つ以上のネットワーク構成要素を通して遠隔に結合される。画像処理プロセッサ１５０は、ローカルの、分配された、かつ／またはクラウドに基づいたシステムなどを使用してインプリメントされてもよい。

本発明の一実施形態によれば、レンズ１３１−１３９は焦点距離ｆによって特徴づけられる。例えば、焦点距離ｆによって特徴づけられた凸レンズは、レンズの１つの側に位置する焦点面の画像を、レンズの反対側の対応する結像面上に形成する。図１Ｂにおいて、第１の焦点面とレンズアレイ１３０との間の距離ａと、レンズアレイ１３０と対応する第１の結像面との間の距離ｂとが示されている。図１Ｂに描かれているように、試料１２０は第１の焦点面に配置され、センサ１４０は第１の結像面に配置される。第１の焦点面に位置する試料１２０の特徴によって、照明ユニット１１０からの光は、吸収され、反射され、回折し、かつ／または散乱するかもしれない。従って、センサ１４０によって検知された画像は、第１の焦点面に位置する試料１２０の特徴を含む。本発明の一実施形態によれば、レンズ１３１−１３９は、薄肉レンズとしてモデル化されてもよく、ここで、ｆ、ａおよびｂの値は次の方程式によって関連づけられる。

図１Ｃには、第２の焦点面とレンズアレイ１３０の間の距離Ａ、およびレンズアレイ１３０と対応する第２の結像面の間の距離Ｂが示されている。図１Ｂで描かれているように、試料１２０を通して送信される照明ユニット１１０から発せられた光が第２の結像面で集中するように、照明ユニット１１０は第２の焦点面に配置される。レンズ１３１−１３９が薄肉レンズとしてモデル化される場合、ｆ、ａおよびｂの値は次の方程式によって関連づけられる。

第２の結像面がセンサ１４０の上に位置するので、第２の結像面に集中する光はセンサ１４０に到達する前に拡散する。従って、レンズ１３１−１３９の各々は、センサ１４０のレンズを通過した光によって照らされた領域に対応するセンサ１４０における画像またはサブ画像を形成する。図１Ｃにおいて、距離ｐはレンズ１３１−１３９間のピッチを示し、距離ｍｐはサブ画像の幅を示し、距離Ｍｐはサブ画像間のピッチを示し、距離dはサブ画像間の暗領域の幅を示す。この表記法では、ｍとＭは、ｐ単位で測定されるサブ画像の幅およびピッチをそれぞれ表す。値ｏ（図１Ｃでは表示されない）はレンズアレイ顕微鏡１００によって得られる光学倍率を表し、ここで全ての距離は正値であるとみなされ、したがって倒立像に対してｏは負値ではない。光学倍率は、センサまたは画像システムの結像面における対象物の画像の大きさと、シーンにおける同じ対象物の大きさとの比である。上記の変数は次の方程式で関連づけられる。

上記の数式を使用してレンズアレイ顕微鏡１００をモデル化する場合、レンズアレイ顕微鏡１００のデザイン上のいくつかの制約が明らかになる。例えば、ｍを正値にするために（すなわち、サブ画像を形成するために）、ｂはｆよりも大きな値に制約される。別の言い方では、ｂがｆ未満である場合、レンズはあらゆる焦点面から光をセンサ上に集中させるほどは強力ではない。本発明の一実施形態において、ｄを正値にするために（すなわち、隣接したサブ画像間でオーバーラップしないようにするために）、Ｍはｍよりも大きな値に制約される。同時に、これらの制約は、ｆ、Ａおよびｂの制約を表す次の不等式を得るために代数的に操作することができる。

図２Ａ中でこれらの制約はプロットされ、ｂ／ｆはＡ／ｆの関数としてプロットされる。上記の不等式に基づくと、レンズアレイ顕微鏡１００の本発明の一実施形態は、６以下のｂ／ｆを有する。他の実施形態は約２．５以下のｂ／ｆを有する。さらに代数的に操作すると、ｆ、Ａおよびｏの制約を表わす次の不等式を得る。

図２Ｂ中でこれらの制約はプロットされ、ｏはＡ／ｆの関数としてプロットされる。図２Ｂによれば、Ａ／ｆの値が約１０以上である場合、ｏは、０とわずかに１より大きい値との間の値（すなわち、無視できる光学倍率の大きさの値）に制約され、Ａ／ｆの値が３を超える場合、ｏは、（カーブの上限から推定すると）０と約５の間の値に制約される。３未満のＡ／ｆの値（および、対応する、より大きな光学倍率）は、様々な実施形態において実現されるが、本発明の一実施形態では実用性を考慮するとＡ／ｆの値は３以上に制約される。例えば、本発明の一実施形態では、試料１２０がスライドガラスおよび／または別の個体物質を含む場合のように、試料１２０は有限の厚さを占めてもよい。試料１２０はレンズアレイ１３０と照明ユニット１１０の間に配置されるので、試料１２０の有限の厚さは、Ａ／ｆの実用性を持つ最小値に帰着するだろう。更に、本発明の一実施形態では、照明ユニット１１０を試料１２０に接近して置くことにより、試料とレンズ平面の直交軸に対して大角度で試料１２０とレンズアレイ１３０を伝搬する光となり、そのことは画質の劣化を引き起こすかもしれない。

これらの考察を考慮すると、本発明の一実施形態では、レンズアレイ顕微鏡１００は、光学倍率、画質または分解能、およびハードウェアの制約の間のトレードオフを考慮して設計される。一般に、レンズアレイ顕微鏡１００の実施形態では、光学倍率がより高くなるように配置することよりも、センサの分解能がより高いことによって、より高い分解能が達成される。対比して、従来の顕微鏡では、光学倍率がより高いことによって、より高い分解能が達成される。しかしながら、光学倍率における小さな変化が、実施形態において重要な要因のままである場合がある。目標は、高い倍率を有することとは必ずしも限らない。例えば、光学倍率の大きさが約０．９であることは、光学倍率の大きさが１に近いあるいは１を超えた場合と比較して、分解能の小さなロスだけのトレードオフで、より容易に製造することを可能にする。例として、２つの実施形態において、（Ａ／Ｆ、ｏ）の値または正確なポイントは、それぞれ、（１０、１．５）と（３、５）である。

本発明の一実施形態によれば、照明ユニット１１０は、無視できない光学倍率あるいは１を著しく超えた光学倍率を使用して、空間分解能をさらに増加させるために、レンズアレイ１３０にできるだけ接近して、すなわち（前述の実用的な制約を与えられて）Ａが小さくなるように配置される。そのような実施形態を進める場合、隣接したサブ画像間および／またはセンサ１４０の領域を超えたサブ画像の領域全体のオーバーラップによる情報ロスを回避する一方で、最大の許容可能な光学倍率および画像の解像度を達成するために、同様に、センサ１４０は、レンズアレイ１３０からできるだけ遠くに、すなわちＡが大きくなるように配置される。代替となる実施形態では、照明ユニット１１０は、レンズアレイ顕微鏡１００の感度を減少させ、様々な構成要素の配列および位置においてエラーが小さくなるように、レンズアレイ１３０から遠くに（例えば、レンズ１３１−１３９の焦点距離より１０倍以上遠くに）配置される。そのような実施形態は、光学倍率が約１以下である場合、レンズアレイ顕微鏡１００のロバストさを増加させるかもしれない。小さいか無視できる光学倍率（すなわち、光学倍率が約１以下）を有するレンズアレイ顕微鏡１００を構成することの１つの利点は、そのような実施形態では、レンズは、より高倍率の構成におけるよりも収差にそれほど敏感でなく、したがって、コストの面でより有効で、かつ／または他の利点を有する方法（例えば、より軽い、より強いなど）で、生産されてもよいことである。小さいか無視できる光学倍率を有する顕微鏡１００を構成することの別の利点は、そのような実施形態では、顕微鏡１００は断片化していない視界を有するということである。断片化していない視界は次の不等式の上限から生じる。

これらの式は、光学倍率が比較的大きい場合に成立する。断片化した視界と断片化していない視界との違いは、図３Ａ、図３Ｂおよび図３Ｃを参照して、以下説明される。

図３Ａはテストパターン３００の図である。図３Ｂおよび図３Ｃは、画像センサ１４０に撮られた、図３Ａ中のテストパターン３００に対応する画像の簡略図である。テストパターン３００の複数の領域を同時に撮像するために１枚を超えるレンズを使用する顕微鏡は、レンズの各々が大きな光学倍率を有する、複数の対物レンズおよび／またはレンズアレイを含んでもよい。図３Ｂでは、光学倍率が大きいため、レンズの各々の視界は、離れている、隣接していない、および／またはオーバーラップしていないテストパターン３００の領域をカバーしてもよい。領域３２０ａ−ｄおよび３３０は視界を表し、試料の見られる地域を意味する。結像面は、単にテストパターン３００の小さな部分集合を表す場合であっても、これらの視界で濃く覆われているか満たされていてもよい。例えば、光源がはるかに遠くにあると仮定すると、倍率がｍである場合、たとえ全てのセンサが使用された場合でも、試料の領域の１／ｍ^２だけは見ることができる。別の言い方をすると、顕微鏡の典型的な断片化した視界は、テストパターン３００の領域３２０ａ−ｄを含む。領域３２０ａ−ｄの各々は、異なるレンズの視界に対応する。領域３２０ａ−ｄは、互いに、撮像していない領域３１０によって分離される。図３Ｂに描かれているような断片化した視界を持つ顕微鏡は、領域３２０を埋めテストパターン３００の完全な画像を撮像するために、撮像の際に、スキャンニング技術やステッピング技術などを必要とするだろう。そのような技術では、テストパターン３００のシームレスな画像を形成するために連続して組み合わせて、空間的にオフセットされた画像のセットを得ることを含む。しかしながら本発明の一実施形態によれば、スキャンニング技術やステッピング技術は時間を消費し、かつ／または演算を要求するため、これらの技術の使用を省くことは有利になる。本発明の一実施形態において、そのような技術の使用を避けるため、顕微鏡は断片化していない視界を持つように構成される。図３Ｃにおいて、典型的な断片化していない視界は、少なくとも１つのレンズの視界の中で撮像されたテストパターン３００の連続的な領域３３０を含む。図１Ｃと一致する本発明の一実施形態によれば、レンズアレイ顕微鏡１００は、図３Ｃと同様に、断片化していない視界を持つように構成される。

上で議論されさらにここで強調されるように、図１Ａ、図１Ｂ、図１Ｃ、図２Ａ、図２Ｂおよび図３Ｃは、単なる例であり、過度にクレームの範囲を制限するべきではない。当業者であれば、多くのバリエーション、代替案および変形を認識するだろう。本発明の一実施形態によれば、照明ユニット１１０は、試料１２０に光を供給するために、光源１１１ではなく／あるいは光源１１１に加えて、周辺光を使用する。周辺光を使用することは、より軽い重量、コンパクトな大きさ、および／またはエネルギー効率の改善などの様々な利点を提供するかもしれない。従って、周辺光を使用することは、特に持ち運びする用途のようなサイズおよび／またはエネルギーを抑える用途に適しているかもしれない。本発明の一実施形態によれば、レンズアレイ顕微鏡１００の様々な構成要素は、スマートフォン、ラップトップコンピューター、時計などのモバイル機器に含まれる、および／または取り付けられていてもよい。例えば、センサ１４０は、前述のモバイル機器に内蔵されるカメラであってもよいし、画像処理プロセッサ１５０は、前述のモバイル機器と通信する、および／またはアプリケーションを動かすハードウェアおよび／またはソフトウェアの構成要素を含んでいてもよい。本発明の一実施形態によれば、図３Ｃの領域３３０には断片化していない視界が、ギャップがないものとして描かれているが、もし、ギャップが十分に小さく、利用できる画像がスキャンニング技術やステッピング技術などを使用せずに１つの撮像で得られる場合、断片化していない視界には小さなギャップがあるかもしれない。さらに、各レンズの視界は図３Ｂおよび図３Ｃにおいて円形として描かれているが、視界は使用されているレンズの種類に依存して様々な形を有していてもよい。本発明の一実施形態によれば、レンズアレイ１３０に関連する開口数は、液浸油のような、試料１２０とレンズアレイ１３０の間の空気より高い屈折率を持つ媒質を使用することにより増加するかもしれない。

本発明の一実施形態によれば、レンズアレイ顕微鏡１００は、試料１２０の単色および／またはカラー画像を得るように構成される。顕微鏡１００がカラー画像を得るように構成される場合、１つ以上の適切な技術がカラー解像度を得るために使用されてもよい。本発明の一実施形態では、センサ１４０は、単一の画像獲得ステップでカラー画像が得られるように、ピクセル上にカラーフィルタアレイを含む。本発明の一実施形態では、照明ユニット１１０が試料１２０に異なる色の光を与えて各々撮像し、一連の画像が得られる。例えば、照明ユニット１１０は、広帯域の光源に１セットのカラーフィルタを適用してもよく、および／またはＬＥＤおよび／またはレーザーのような異なる色の光の光源間を切り替えてもよい。本発明の一実施形態によれば、顕微鏡１００は、マルチスペクトルかつ／またはハイパースペクトルの画像のような多くの色を持つ画像を得るように構成される。

図４Ａは、本発明の一実施形態に係るレンズアレイ顕微鏡を使用して獲得した画像を処理する方法４００の簡略図である。この方法は、例えば、画像処理プロセッサ１５０および／またはコンピューター、マイクロプロセッサー、ＡＳＩＣｓ、ＦＰＧＡｓなどの中で行われてもよい。対応する図５Ａ、図５Ｂ、図５Ｃおよび図５Ｄは、本発明の一実施形態に係る方法４００によって処理されている典型的な画像を描いたシミュレーションデータの簡略図である。図１Ａ、図１Ｂ、図１Ｃ、図２Ａ、図２Ｂ、図３Ａ、図３Ｂおよび図３Ｃと一致する本発明の一実施形態によれば、顕微鏡１００は、動作中に方法４００の１つ以上のステップを行なうために使用される。より具体的には、画像処理プロセッサ１５０のような画像処理プロセッサは、ＲＡＷ画像データを出力画像データに変換するために方法４００を行なってもよい。

図４Ａを参照すると、プロセス４１０で、ＲＡＷ画像データは、例えば画像処理プロセッサ１５０によって、例えば図１Ｃの顕微鏡のセンサ１４０または個別のメモリ（図示しない）から受信される。ＲＡＷ画像データは、顕微鏡のレンズの各々にそれぞれ対応する複数のサブ画像を含んでもよい。本発明の一実施形態において、サブ画像は、サブ画像をサブ画像とは分離した暗領域と区別する特徴抽出アルゴリズムや、ＲＡＷ画像データのどの部分がサブ画像の各々に相当するかを予め判定する校正操作などのような適切な画像処理技術を用いて、ＲＡＷ画像データから抽出される。本発明の一実施形態によれば、ＲＡＷ画像データは、デジタルおよび／またはアナログ形式で受信される。本発明の一実施形態と一致している場合、ＲＡＷ画像データは、１つ以上のＲＡＷ画像ファイルで受信されてもよいし、かつ／または受信する際に、および／または処理中に、異なるファイル形式に変換されてもよい。図５Ａを参照すると、プロセス４１０の間に受信されるシミュレートされたＲＡＷ画像データの典型的なセットが描かれている。

図４Ａに戻ると、プロセス４２０では、ＲＡＷ画像データ中のサブ画像は、試料の像と同じ配置に反転されるか、あるいはサブ画像中のあるポイントに関して逆さまになる(ここで、試料の像と同じ配置とは、試料全体を1つの同軸光学系で結像した像の配置を指している)。本発明の一実施形態において、ＲＡＷ画像データ中のサブ画像は、レンズアレイ顕微鏡の光学部品によって逆さまにされるので、プロセス４２０は、サブ画像の正確な傾きを復元する。本発明の一実施形態によれば、試料の像と同じ配置とは、サブ画像の中心点やサブ画像の端点など、各サブ画像に関して定義された予め定義されたポイントであってもよい。本発明の一実施形態によれば、サブ画像の各々を反射するために、例えばループおよび／またはネストされたループを使用して、サブ画像は反復して反射される。本発明の一実施形態によれば、サブ画像は、同時にかつ／または互いに平行して反射される。本発明の一実施形態によれば、反射は、ソフトウェア技術を使用し、かつ／または、１つ以上のハードウェア加速技術を使用して行なわれる。本発明の一実施形態によれば、ＲＡＷ画像データ中でサブ画像が逆さまではないようにレンズアレイ顕微鏡が構成される場合、プロセス４２０は省略される。図５Ｂを参照すると、図５ＡのＲＡＷ画像データにプロセス４２０を適用することにより生成されたサブ画像の典型的なセットが描かれている。

図４Ａに戻ると、プロセス４３０では、合成画像がサブ画像から生成される。本発明の一実施形態によれば、プロセス４３０は、サブ画像間の暗領域を取り除くことを含んでもよい。すなわち、サブ画像は、与えられた距離および／またはピクセル数によってより接近するように集められてもよい。本発明の一実施形態において、プロセス４３０は、隣接したサブ画像間のオーバーラップを説明する技術を含む、サブ画像からシームレスな合成画像を得るための様々な画像処理技術を用いてもよい。１つの技術は、サブ画像の試料の像と同じ配置に最も近い位置に対応する値を用いることである。このことは、より高い信号対雑音比を持つ傾向がある、より明るい位置を用いるという利点を有する。さらに、これらの位置はレンズ収差によって引き起こされる人工的な効果を受けにくい。本発明の一実施形態によれば、プロセス４３０は、空の合成画像を初期化し、その後、合成画像の指定の部分に各サブ画像をコピーすることを含んでもよい。例えば、合成画像にサブ画像をコピーすることは、反復技術や並列技術などを用いて行なわれてもよい。図５Ｃを参照すると、図５Ｂのサブ画像にプロセス４３０を適用することにより生成された典型的な合成画像が描かれている。

図４Ａに戻ると、プロセス４４０において、バックグラウンドは合成画像から取り除かれる。ここで、「バックグラウンド」は、試料の画像にはない、合成画像における画像の人工的な効果やエラーを示す。バックグラウンドの撤去は、（図１Ａ、図１Ｂおよび図１Ｃに示されるように）画像処理プロセッサ１５０によって減法あるいは分割によって行われてもよい。本発明の一実施形態によれば、バックグラウンドは、レンズアレイ顕微鏡中で試料がない状態であっても存在する合成画像の特徴を含んでいてもよい。従って、バックグラウンドの特徴は、レンズアレイ顕微鏡の照明ユニット、レンズおよび／またはセンサにおける不規則性のような、特定の試料に関係していない人工的な効果を表してもよい。人工的な効果は特定の試料に関連した情報を提供しないので、合成画像からバックグラウンドを減法することが望ましいかもしれない。本発明の一実施形態において、バックグラウンドは、試料の画像が獲得される前および／または獲得された後（例えば、顕微鏡から試料をロードする前かつ／またはロードした後）に獲得されてもよい。本発明の一実施形態によれば、合成画像は、バックグラウンドおよび合成画像が同じ大きさの光度を持つように、バックグラウンドに関連して（あるいはバックグラウンドとは無関係に）標準化される。図５Ｄを参照すると、図５Ｃの合成画像にプロセス４４０を適用することにより生成される典型的な出力画像が描かれている。

上で議論されさらにここで強調されるように、図４Ａ、図５Ａ、図５Ｂ、図５Ｃおよび図５Ｄは、単なる例であり、過度にクレームの範囲を制限するべきではない。当業者であれば、多くのバリエーション、代替案および変形を認識するだろう。本発明の一実施形態によれば、プロセス４２０−４４０のうちの１つ以上は、互いに同時に、および／または図４Ａで描かれたのとは異なった順番で行われてもよい。本発明の一実施形態によれば、方法４００は、様々な画像処理、ファイル・フォーマット変換、ユーザ入力ステップなどを含む、図４Ａで示されない追加のプロセスを含む。本発明の一実施形態によれば、プロセス４２０−４４０のうちの１つ以上は、方法４００から省略される。

図４Ｂおよび図４Ｃを参照すると、本発明の一実施形態では、バックグラウンドは、プロセス４１５で、すなわち、プロセス４１０と４２０の間で、回旋状のフィルタを適用することにより随意に撤去される。回旋フィルタは、試料１２０ではなくレンズアレイ顕微鏡１００の構成要素によって引き起こされるあらゆるバックグラウンドも抑えるように設計されている。例えば、合成画像は、レンズアレイ１３０に対するピクセルの相対位置に対応する、望まれないあるいは高い空間周波数を有してもよい。そのような空間周波数は、試料ではなくレンズアレイ顕微鏡の特性によって引き起こされる傾向があるので、望まれない。回旋フィルタは、そのような望まれない空間周波数を取り除くように設計される。プロセス４１５は、ＲＡＷ画像中にバックグラウンドを含む画像に基づいて、ＲＡＷ画像からバックグラウンドを取り除く。減法および／または分割のようなＲＡＷ画像からバックグラウンドを取り除くために、異なる方法がプロセス４１５で用いられる。

図４Ｂは、本発明の一実施形態に係るレンズアレイ顕微鏡を使用して獲得した画像を処理する方法４０２の簡略図である。プロセス４１０で、試料の画像データを含むＲＡＷ画像データは、例えば画像処理プロセッサ１５０によって、例えば図１Ａの顕微鏡のセンサ１４０あるいは個別のメモリ（図示せず）から受信される。ＲＡＷ画像データは、試料の画像データの中には存在しないサブ画像のＲＡＷ画像データの中で、あらゆる振幅変調、光度の不統一、あるいはシェーディングを含む「バックグラウンド」を有する可能性がある。ある態様では、シェーディングは、他の画像システムにおけるレンズのシェーディングや口径食に類似している。サブ画像に対するシェーディングは、レンズアレイ顕微鏡のハードウェア構成要素の様々な態様によって引き起こされる場合がある。可能性のある要因としては、センサへの不均一な入射照度、レンズアレイ内の関連するレンズの特性、入射光の様々な角度に対する画像センサの感度、レンズアレイ内のレンズの相対位置などがある。この種の「バックグラウンド」は、図６Ａに描かれており、サブ画像の各々は、端で光度が減少し、中間において最も明るく見える。

ＲＡＷ画像データ中のバックグラウンドを決定するために、試料を持たないＲＡＷ画像がプロセス４１１でロードされる。他の実施形態では、試料のデータを含むＲＡＷ画像データが受信される前に、試料を持たないＲＡＷ画像が受信される。試料を持たないそのような画像は、試料１２０が存在しない時、レンズアレイ顕微鏡１００で得られた画像を撮像することにより実験的に生成されてもよい。そのような画像は、バックグラウンド画像を作成するために複雑なやり方で相互に作用する、レンズアレイ顕微鏡１００の様々な構成要素による結果である。他の実施形態では、バックグラウンドは、ＲＡＷ画像の中で理論的に引き出される。しかしながら、図４Ｂで例証される実施形態では、材料の位置と構成の複雑な相互作用および正確な知識を説明するために画像を実験的に生成する方がより現実的である。レンズアレイ顕微鏡１００を含む材料の相対位置または構成における顕微鏡の変化は、結果として得られるバックグラウンド画像に重大な影響を与える場合がある。そのような試料を持たないＲＡＷ画像は、プロセス４１１でロードされる。図４Ｃは、本発明の一実施形態に係るレンズアレイ顕微鏡を使用して獲得した画像を処理する別の方法４０４の簡略図である。この方法は、例えばスライドガラスまたはペトリ皿のようなコンテナ上の試料に適用することができる。そのような例においては、コンテナは光を曲げることができるため、試料またはコンテナを持たないＲＡＷ画像が正確なバックグラウンドまたはシェーディングをとらえることができないかもしれない。ここで、バックグラウンドは、プロセス４１２におけるＲＡＷ画像あるいは多数のそのようなＲＡＷ画像から評価される。ＲＡＷ画像はレンズアレイ顕微鏡１００の構成要素に起因する試料１２０およびバックグラウンドの両方による結果であるので、プロセス４１２はバックグラウンド構成要素だけを分離する必要がある。フィルタリング、正規化、画像モデル、あるいはスパース性の拘束条件を含む、異なる画像処理および学習法を信号の複合成分を分離するために導入されてもよい。ここでそのような方法の例として単純な方法が説明される。ＲＡＷバックグラウンドは、複数のサブ画像から生じる画像の全体にわたって比較的規則的なパターンを含む。サブ画像は、サブ画像の中心の明るい領域とサブ画像の外側付近および近くのサブ画像間のより暗い領域とを備えた、類似の形および光度の輪郭を持つように見える場合がある。画像全体からの複数のサブ画像を平均化などによって組み合わせることにより、基本的なサブ画像パターンは評価される。基本的なサブ画像は、ＲＡＷ画像における位置や試料１２０の存在に基づいてサブ画像を横断するあらゆる変化を無視した後の、ＲＡＷ画像における全てのサブ画像とほぼ同じ形および光度分布を持つ単一画像である。試料１２０の存在が、バックグラウンドのＲＡＷ画像における複数のサブ画像の位置と関連していないような、ＲＡＷ画像の変更を引き起こす場合、評価される基本的なサブ画像パターンは、試料１２０の存在に影響されない。最終的に、バックグラウンドのＲＡＷ画像は、画像内の適切な位置に基本的なサブ画像パターンの複数のバージョンを置くことにより、プロセス４１２の出力として作成される。

他の実施形態において、回旋状のフィルタリングは、ステップ４１２で、試料１２０の影響を取り除くために画像を横断して適用される。バックグラウンド画像は、レンズアレイ１３０中のレンズの規則的な間隔およびその結果としてのサブ画像の合成的な規則的な位置によって引き起こされる空間周波数によって支配されるべきである。例えば、サブ画像の各々の中心付近に最大値を持ち、サブ画像間の暗領域の中に最小値を持つ空間周波数は、バックグラウンド画像中に強く存在するが、試料１２０によって生じるものではない。代わりに、より高い空間周波数は、試料１２０によって生じるかもしれないが、サブ画像の規則的な位置によって生じるものではない。したがって、バックグラウンドは、サブ画像の規則的な位置と一致しない周波数を削除する回旋状のフィルタの適用により、ＲＡＷ画像から評価されてもよい。

図４Ｄは、本発明の一実施形態に係るレンズアレイ顕微鏡を使用して獲得した画像の処理の方法４０６の代替的な実施形態を供給する。図４Ｄの方法は、図４Ａ、図４Ｂおよび図４Ｃにおけるプロセスによっては提示されないであろう、サブ画像の位置および組合せにおけるサブピクセルの精度を上げる。その結果、図４Ｄからの画像出力はより正確であり、ＲＡＷ画像の中で隣接したサブ画像間で端が交差する場合に、合成画像に現われる、ぼけた端あるいは不連続の端のような人工的な効果をあまり含まない。

図４Ｄを引き続き参照すると、プロセス４２１は、所望の合成画像中のピクセルごとにＲＡＷ画像における位置を見つける。レンズアレイ中の隣接したレンズの視界がオーバーラップするため、試料における位置は、１つあるいは複数のサブ画像中に現われるかもしれない。したがって、正確に合成画像が試料を反映するために、合成画像中のピクセルの各々は、１つあるいは複数のＲＡＷ画像における位置から生成される必要があるかもしれない。例えば、ＲＡＷ画像４５０の図５Ｅ、およびこのＲＡＷ画像からの所望の出力合成画像４８０の図５Ｆを考える。サブ画像４６０は、ＲＡＷ画像中の複数のサブ画像のうちの１つである。合成画像中の円４８５は、サブ画像４６０に影響を受けた合成画像の領域を示す。合成画像中でピクセルを表わす位置４９０を考える。この位置は、位置４７０ａおよび４７０ｂにおけるＲＡＷ画像の２つのサブ画像において見える試料中のポイントを表す。ＲＡＷ画像中の位置から合成画像まで（例えば、位置４７０ａまたは４７０ｂから４９０まで）の写像の各々を反転させることにより、合成画像（例えば４９０）中のピクセルごとに、ＲＡＷ画像（例えば４７０ａおよび４７０ｂ）中の適切な位置を見つけることが可能である。ＲＡＷ画像（例えば４７０ａおよび４７０ｂ）中の位置から合成画像（例えば位置４９０）までの写像は、既にプロセス４２０および４３０と関連して説明されている。具体的に、写像は、それらが試料の像と同じ配置に成るようにサブ画像を反転することを含み、与えられた距離および／またはピクセル数によってサブ画像を近くに集めることを含んでもよい。ＲＡＷ画像から合成画像までサブ画像ごとに写像を反転することにより、合成画像中のピクセルごとに写像されるＲＡＷ画像中の位置のすべてを見つけることができる。例えば、逆写像は、ピクセル４９０から位置４７０ａおよび４７０ｂまでである。

一般に、ＲＡＷ画像中の位置（４７０ａおよび４７０ｂ）は、非整数のピクセル位置の値となり、ピクセル値が整数のピクセル位置のみで得られる場合のＲＡＷ画像から推論されるべきである。サブピクセルの精度がサブ画像ごとに試料の像と同じ配置の位置を決定するために使用され、または、精度を増加させかつ合成画像からの人工的な効果を減少するのに必要であるように、あらゆるサブ画像が互いにより近くに移動する場合、そのような非整数のピクセル位置の値が必要である。この理由で、プロセス４２２で行われるように、必要とされる位置ごとに、ＲＡＷ画像の値を評価することがしばしば必要である。非整数の位置が必要な場合、他の実施形態は、そのような評価あるいはサブ画像の補間を行なう、当業者に既知の様々な方法を用いることができる。これらの方法は、線状補間、多項式補間およびスプラインを含む。

図４Ｄに戻ると、プロセス４３１は、合成画像中のピクセルごとに得られるＲＡＷ画像の値を組み合わせる。そのような組み合わせは、プロセス４３０のために上で挙げられたものを含む様々な方法を含んでよく、試料の詳細あるいはレンズアレイ顕微鏡の構成要素に基づいて選択されてもよい。方法のうちの１つは、サブ画像の試料の像と同じ配置に最も近い位置に対応する値を使用することである。さらに、このことは、より高い信号対雑音比を持つ傾向がある、より明るい位置を使用するという長所を持つ。また、これらの位置は、レンズ収差によって引き起こされる人工的な効果を受けにくい。

他の実施形態では、プロセス４３１は、ＲＡＷ画像の値の加重平均を用いることにより、合成画像を生成する。例えば、重みが等しい場合、合成画像の値は、平均して改善された信号対雑音比により合成画像がより少ないノイズを持つような、ＲＡＷ画像の値の平均値である。あるいは、それぞれの画像の試料の像と同じ配置により近いＲＡＷ画像中の位置が、増加した重みを与えられるように、重みが合成画像中の位置に基づいて変わってもよい。これは、合成画像（例えば４８５）の中の様々な領域間のスムーズな移行をもたらす。光を調整し、レンズアレイによって決定された焦点面および画像感知ユニットの結像面から離れている試料１２０の部分がある場合、これは重要である。試料１２０のそのような部分は、合成画像の中でぼかされるように、焦点面から離れて現れる。このことは、以前に説明された実施形態を用いると、合成画像がサブ画像の試料の像と同じ配置に最も近い位置から取られる場合、その位置において急激な変化を持つシャープな物体のような、合成画像中の試料１２０の部分の見かけより好ましいかもしれない。

図６Ａおよび図６Ｂは、本発明の一実施形態に係る方法４００によって処理される前後の典型的な画像を描く実験データを示す画像である。図６Ａには、試験試料に対応するＲＡＷ入力データが描かれている。図５Ａの中で描かれたシミュレーションデータのように、暗領域によって分離された複数のサブ画像が識別されてもよい。さらに、図５Ａのシミュレーションデータの中にない、様々な非理想性が、図６Ａの中で観察されてもよい。例えば、実験データ中のサブ画像は、わずかに丸いように見え、シミュレーションデータに対応してぼけた端を有する。図６Ｂには、図６ＡのＲＡＷ入力データに方法４００を適用することにより得られる出力画像が描かれている。描かれているように、高解像度を有する試験試料を描くために出力画像が観察される。

図７は、本発明の一実施形態に係る非点光源を備えたレンズアレイ顕微鏡７００の簡略図である。図１Ａ、図１Ｂおよび図１Ｃの中で描かれた顕微鏡１００のように、レンズアレイ顕微鏡７００は、照明ユニット７１０、試料７２０、レンズ７３１−７３９を含むレンズアレイ７３０、センサ７４０および画像処理プロセッサ７５０を備える。しかしながら顕微鏡１００と異なり、照明ユニット７１０は、１組の光源７１１および７１２によって表される非点光源を備える。本発明の一実施形態によれば、照明ユニット７１１及び７１２は、距離Δだけ離れた２つの別個の光源とみなすことができる。本発明の一実施形態によれば、照明ユニット７１１および７１２は、幅Δを有する単一の光源とみなすことができる。本発明の一実施形態において、光源７１１および７１２によって発せられた光は、互いに同じかつ／または異なる色、位相、極性、コヒーレンスなどの、互いに同じかつ／または異なる特性を有してもよい。図７には１組の光源７１１および７１２が描かれているが、照明ユニット７１０は本発明の一実施形態に係る３つ以上の照明ユニットを含んでもよいことが理解されるべきである。

本発明の一実施形態によれば、光源７１１および７１２が互いに干渉しないような場合、顕微鏡７００によって撮像されるサブ画像はそれぞれ、光源７１１および７１２の各々に関連したサブ画像の和であってもよい。光源７１１および７１２が空間的に分離されているので、図７に描かれるように、光源７１１および７１２に関連するサブ画像は、センサ７５０において距離ｔで互いにオフセットされる。図１Ａ、図１Ｂおよび図１Ｃに関連して派生するレンズ方程式を適用することによって、ｔの値が次の方程式から与えられることを示すことができる。

本発明の一実施形態によれば、照明ユニット７１０は、異なるレンズ７３１−７３９からのサブ画像がセンサ７４０でオーバーラップしないように設計されてもよい。情報の損失および／または画質の低下によって、オーバーラップする画像が容易に分離できないため、そのようなオーバーラップは望ましくない。ｔがｄ（単一の点光源によって生じるサブ画像間の暗領域の幅）を超過する場合、オーバーラップが生じる。従って、オーバーラップを避けるため、Δの値は、次式に従って制約される。

この制約に基づくと、上記の不等式を満たすΔの最大許容値をΔｔとしたとき、照明ユニット７１０の非点光源は、直径Δｔを有する円から光が発するように設計すれば良い。本発明の一実施形態によれば、この制約は、小さな光源７１１および７１２を使用すること、照明ユニット７１０の１つ以上の絞りおよび／またはレンズを構成すること、光源７１１および７１２をレンズアレイ７３０からはるかに遠くに配置すること、レンズアレイ７３０をセンサ７４０の近くに配置すること、などの様々な方法で満たされてもよい。

上で議論されさらにここで強調されるように、図７は、単なる例であり、過度にクレームの範囲を制限するべきではない。当業者であれば、多くのバリエーション、代替案および変形を認識するだろう。例えば、光源７１１および７１２は試料平面に対して互いに同じ平面にあるように描かれているが、光源７１１および７１２は試料７２０に対して異なる距離に位置してもよい。このような実施形態をさらに進めると、Δｔの適切な値を導出するために上記の式に種々の変更を行ってもよい。

画像処理プロセッサ１５０および７５０のようなコントローラーの本発明の一実施形態は、１台以上のプロセッサによって実行される時、１台以上のプロセッサに方法４００のプロセスを行なわせる実行コードを含む、非一時的で、有形で、機械読み取り可能なメディアを含んでもよい。方法４００のプロセスを含んでいるかもしれない、機械読み取り可能なメディアのいくつかの共通の形式は、例えばフロッピーディスク、フレキシブルディスク、ハードディスク、磁気テープ、他の磁気媒体、ＣＤ−ＲＯＭ、他の光学材料、パンチカード、紙テープ、他の穴のパターンを備えた物理的メディア、ＲＡＭ、ＰＲＯＭ、ＥＰＲＯＭ、ＦＬＡＳＨ−ＥＰＲＯＭ、他のメモリーチップやカートリッジおよび／または他のプロセッサやコンピューターが読むのに適したメディアである。

以上、本発明の好適な実施形態について説明し例証したが、これらはあくまで発明の例示であって限定的に考慮されるべきものではなく、追加、削除、置換及び他の変更は本発明の範囲を逸脱しない範囲で可能である。即ち、本発明は前述した実施形態により限定されるものではなく、請求項の範囲によってのみ限定されるものである。

１００レンズアレイ顕微鏡
１１０照明ユニット
１１１光源
１２０試料
１３０レンズアレイ
１３１−１３９レンズ
１４０センサ
１５０画像処理プロセッサ
３００テストパターン
３１０領域
３２０ａ、３２０ｂ、３２０ｃ、３２０ｄ領域
３３０領域
７００レンズアレイ顕微鏡
７１０照明ユニット
７１１、７１２光源（照明ユニット）
７２０試料
７３０レンズアレイ
７３１−７３９レンズ
７４０センサ
７５０画像処理プロセッサ

Claims

照明ユニットと、
結像面上に位置する画像センサと、
概してレンズ平面内にある複数のレンズを含むレンズアレイであって、（ｉ）前記照明ユニットと前記レンズアレイとの間に位置し、（ｉｉ）前記結像面に対応する焦点面を有するレンズアレイと、
を備え、
前記複数のレンズは、前記焦点面の一部を含み断片化していない視野を有することを特徴とする顕微鏡。
前記照明ユニットは、レンズ、絞り、マスクおよびディフューザのうち１つ以上を含むことを特徴とする請求項１に記載の顕微鏡。
前記複数のレンズに対応する複数のサブ画像が、前記画像センサの画像感知側に形成されることを特徴とする請求項１に記載の顕微鏡。
前記複数のサブ画像はオーバーラップしないことを特徴とする請求項３に記載の顕微鏡。
画像処理部をさらに備え、前記画像処理部は、
前記複数のサブ画像を含む試料の画像データを含む第１の画像データを、前記画像センサから受信し、
前記試料の画像データを持たない第２の画像データを受信し、
前記第１の画像データからバックグラウンドを取り除き、
前記複数のサブ画像の少なくとも１つを試料の像と同じに成るように反転し、
前記複数のサブ画像から前記断片化していない視野に対応する合成画像を生成する
ように構成されていることを特徴とする請求項３に記載の顕微鏡。
画像処理部をさらに備え、前記画像処理部は、
前記複数のサブ画像を含むＲＡＷ画像データを、前記画像センサから受信し、
前記ＲＡＷ画像データからバックグラウンドを推定し、
前記ＲＡＷ画像データからバックグラウンドを取り除き、
前記複数のサブ画像の少なくとも１つを試料の像と同じ配置に成るように反転し、
前記複数のサブ画像から前記断片化していない視野に対応する合成画像を生成する
ように構成されていることを特徴とする請求項３に記載の顕微鏡。
画像処理部をさらに備え、前記画像処理部は、
前記複数のサブ画像を含む画像データを、前記画像センサから受信し、
前記断片化していない視野に対応する合成画像中の各ピクセルに写像する前記画像データの少なくとも１つの位置を見つけ、
前記合成画像の複数の位置における複数のＲＡＷ画像値を推定し、
前記複数のＲＡＷ画像値を結合し、
前記結合された複数のＲＡＷ画像値から、前記合成画像を生成し、
前記合成画像からバックグラウンドを取り除く
ように構成されていることを特徴とする請求項３に記載の顕微鏡。
複数のレンズを含むレンズアレイと、
照明ユニットと前記レンズアレイとの間に位置する試料を照明する照明ユニットと、
画像感知部と、
を備え、
前記画像感知部は前記レンズアレイの結像面にあり、前記試料は前記レンズアレイの対応する焦点面にあり、
ｆを前記複数のレンズの焦点距離、ｂを前記レンズアレイと前記画像感知部との距離、Ａを前記レンズアレイと前記照明ユニットとの距離としたとき、
を満たすことを特徴とする顕微鏡。
前記複数のレンズに対応する複数のサブ画像が、前記画像感知部の画像感知側に形成されることを特徴とする請求項８に記載の顕微鏡。
画像処理部をさらに備え、前記画像処理部は、
前記複数のサブ画像を含む試料の画像データを含む第１の画像データを、前記画像感知部から受信し、
前記試料の画像データを持たない第２の画像データを受信し、
前記第１の画像データからバックグラウンドを取り除き、
前記複数のサブ画像の少なくとも１つを試料の像と同じ配置に成るように反転し、
前記複数のサブ画像から合成画像を生成する
ように構成されていることを特徴とする請求項９に記載の顕微鏡。
画像処理部をさらに備え、前記画像処理部は、
前記複数のサブ画像を含むＲＡＷ画像データを、前記画像感知部から受信し、
前記ＲＡＷ画像データからバックグラウンドを推定し、
前記ＲＡＷ画像データからバックグラウンドを取り除き、
前記複数のサブ画像の少なくとも１つを試料の像と同じ配置に成るように反転し、
前記複数のサブ画像から合成画像を生成する
ように構成されていることを特徴とする請求項９に記載の顕微鏡。
画像処理部をさらに備え、前記画像処理部は、
前記複数のサブ画像を含む画像データを、前記画像感知部から受信し、
合成画像中の各ピクセルに写像する前記画像データの少なくとも１つの位置を見つけ、
前記合成画像の複数の位置における複数のＲＡＷ画像値を推定し、
前記複数のＲＡＷ画像値を結合し、
前記結合された複数のＲＡＷ画像値から、前記合成画像を生成し、
前記合成画像からバックグラウンドを取り除く
ように構成されていることを特徴とする請求項９に記載の顕微鏡。
複数のマイクロレンズを含むマイクロレンズアレイと、
照明ユニットと前記マイクロレンズアレイとの間に位置する試料を照明する照明ユニットと、
画像センサと、
前記複数のサブ画像を含む試料の画像データを含む第１の画像データを、前記画像センサから受信し、前記試料の画像データを持たない第２の画像データを受信し、前記第１の画像データからバックグラウンドを取り除き、前記複数のサブ画像の少なくとも１つを試料の像と同じ配置に成るように反転し、前記複数のサブ画像から合成画像を生成するように構成されている画像処理部と、
を備え、
前記画像センサは前記マイクロレンズアレイの結像面にあり、前記試料は前記マイクロレンズアレイの対応する焦点面にあることを特徴とする顕微鏡。
複数のマイクロレンズを含むマイクロレンズアレイと、
照明ユニットと前記マイクロレンズアレイとの間に位置する試料を照明する照明ユニットと、
画像センサと、
前記複数のサブ画像を含むＲＡＷ画像データを、前記画像センサから受信し、前記ＲＡＷ画像データからバックグラウンドを推定し、前記ＲＡＷ画像データからバックグラウンドを取り除き、前記複数のサブ画像の少なくとも１つを試料の像と同じ配置に成るように反転し、前記複数のサブ画像から合成画像を生成するように構成されている画像処理部と、
を備え、
前記画像センサは前記マイクロレンズアレイの結像面にあり、前記試料は前記マイクロレンズアレイの対応する焦点面にあることを特徴とする顕微鏡。
複数のマイクロレンズを含むマイクロレンズアレイと、
照明ユニットと前記マイクロレンズアレイとの間に位置する試料を照明する照明ユニットと、
画像センサと、
前記複数のサブ画像を含む画像データを、前記画像センサから受信し、合成画像中の各ピクセルに写像する前記画像データの少なくとも１つの位置を見つけ、前記合成画像の複数の位置における複数のＲＡＷ画像値を推定し、前記複数のＲＡＷ画像値を結合し、前記結合された複数のＲＡＷ画像値から、前記合成画像を生成し、前記合成画像からバックグラウンドを取り除くように構成されている画像処理部と、
を備え、
前記画像センサは前記マイクロレンズアレイの結像面にあり、前記試料は前記マイクロレンズアレイの対応する焦点面にあることを特徴とする顕微鏡。