JP2019049751A - 全自動高速顕微鏡スライドスキャナ - Google Patents

全自動高速顕微鏡スライドスキャナ Download PDF

Info

Publication number
JP2019049751A
JP2019049751A JP2018226880A JP2018226880A JP2019049751A JP 2019049751 A JP2019049751 A JP 2019049751A JP 2018226880 A JP2018226880 A JP 2018226880A JP 2018226880 A JP2018226880 A JP 2018226880A JP 2019049751 A JP2019049751 A JP 2019049751A
Authority
JP
Japan
Prior art keywords
image
sample
scanner
microscope
window
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
JP2018226880A
Other languages
English (en)
Inventor
ダーク・ソーンクセン
Soenksen Dirk
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Leica Biosystems Imaging Inc
Original Assignee
Leica Biosystems Imaging Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Family has litigation
First worldwide family litigation filed litigation Critical https://patents.darts-ip.com/?family=24250487&utm_source=google_patent&utm_medium=platform_link&utm_campaign=public_patent_search&patent=JP2019049751(A) "Global patent litigation dataset” by Darts-ip is licensed under a Creative Commons Attribution 4.0 International License.
Application filed by Leica Biosystems Imaging Inc filed Critical Leica Biosystems Imaging Inc
Publication of JP2019049751A publication Critical patent/JP2019049751A/ja
Withdrawn legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B21/00Microscopes
    • G02B21/36Microscopes arranged for photographic purposes or projection purposes or digital imaging or video purposes including associated control and data processing arrangements
    • G02B21/365Control or image processing arrangements for digital or video microscopes
    • G02B21/367Control or image processing arrangements for digital or video microscopes providing an output produced by processing a plurality of individual source images, e.g. image tiling, montage, composite images, depth sectioning, image comparison
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/66Remote control of cameras or camera parts, e.g. by remote control devices
    • H04N23/661Transmitting camera control signals through networks, e.g. control via the Internet
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B21/00Microscopes
    • G02B21/0004Microscopes specially adapted for specific applications
    • G02B21/002Scanning microscopes
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B21/00Microscopes
    • G02B21/0004Microscopes specially adapted for specific applications
    • G02B21/002Scanning microscopes
    • G02B21/0024Confocal scanning microscopes (CSOMs) or confocal "macroscopes"; Accessories which are not restricted to use with CSOMs, e.g. sample holders
    • G02B21/0036Scanning details, e.g. scanning stages
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B21/00Microscopes
    • G02B21/0004Microscopes specially adapted for specific applications
    • G02B21/002Scanning microscopes
    • G02B21/0024Confocal scanning microscopes (CSOMs) or confocal "macroscopes"; Accessories which are not restricted to use with CSOMs, e.g. sample holders
    • G02B21/008Details of detection or image processing, including general computer control
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B21/00Microscopes
    • G02B21/06Means for illuminating specimens
    • G02B21/08Condensers
    • G02B21/14Condensers affording illumination for phase-contrast observation
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B21/00Microscopes
    • G02B21/24Base structure
    • G02B21/241Devices for focusing
    • G02B21/245Devices for focusing using auxiliary sources, detectors
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B21/00Microscopes
    • G02B21/24Base structure
    • G02B21/26Stages; Adjusting means therefor
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B21/00Microscopes
    • G02B21/32Micromanipulators structurally combined with microscopes
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B21/00Microscopes
    • G02B21/34Microscope slides, e.g. mounting specimens on microscope slides
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B21/00Microscopes
    • G02B21/36Microscopes arranged for photographic purposes or projection purposes or digital imaging or video purposes including associated control and data processing arrangements
    • G02B21/365Control or image processing arrangements for digital or video microscopes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/04Scanning arrangements, i.e. arrangements for the displacement of active reading or reproducing elements relative to the original or reproducing medium, or vice versa
    • H04N1/047Detection, control or error compensation of scanning velocity or position
    • H04N1/053Detection, control or error compensation of scanning velocity or position in main scanning direction, e.g. synchronisation of line start or picture elements in a line
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/04Scanning arrangements, i.e. arrangements for the displacement of active reading or reproducing elements relative to the original or reproducing medium, or vice versa
    • H04N1/19Scanning arrangements, i.e. arrangements for the displacement of active reading or reproducing elements relative to the original or reproducing medium, or vice versa using multi-element arrays
    • H04N1/1903Arrangements for enabling electronic abutment of lines or areas independently scanned by different elements of an array or by different arrays
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/04Scanning arrangements, i.e. arrangements for the displacement of active reading or reproducing elements relative to the original or reproducing medium, or vice versa
    • H04N1/19Scanning arrangements, i.e. arrangements for the displacement of active reading or reproducing elements relative to the original or reproducing medium, or vice versa using multi-element arrays
    • H04N1/191Scanning arrangements, i.e. arrangements for the displacement of active reading or reproducing elements relative to the original or reproducing medium, or vice versa using multi-element arrays the array comprising a one-dimensional array, or a combination of one-dimensional arrays, or a substantially one-dimensional array, e.g. an array of staggered elements
    • H04N1/192Simultaneously or substantially simultaneously scanning picture elements on one main scanning line
    • H04N1/193Simultaneously or substantially simultaneously scanning picture elements on one main scanning line using electrically scanned linear arrays, e.g. linear CCD arrays
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/04Scanning arrangements, i.e. arrangements for the displacement of active reading or reproducing elements relative to the original or reproducing medium, or vice versa
    • H04N1/19Scanning arrangements, i.e. arrangements for the displacement of active reading or reproducing elements relative to the original or reproducing medium, or vice versa using multi-element arrays
    • H04N1/195Scanning arrangements, i.e. arrangements for the displacement of active reading or reproducing elements relative to the original or reproducing medium, or vice versa using multi-element arrays the array comprising a two-dimensional array or a combination of two-dimensional arrays
    • H04N1/19505Scanning picture elements spaced apart from one another in at least one direction
    • H04N1/19521Arrangements for moving the elements of the array relative to the scanned image or vice versa
    • H04N1/19573Displacing the scanned image
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/56Cameras or camera modules comprising electronic image sensors; Control thereof provided with illuminating means
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/631Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/633Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
    • H04N23/635Region indicators; Field of view indicators
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/183Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/04Scanning arrangements
    • H04N2201/047Detection, control or error compensation of scanning velocity or position
    • H04N2201/04701Detection of scanning velocity or position
    • H04N2201/04715Detection of scanning velocity or position by detecting marks or the like, e.g. slits
    • H04N2201/04727Detection of scanning velocity or position by detecting marks or the like, e.g. slits on a linear encoder
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/04Scanning arrangements
    • H04N2201/047Detection, control or error compensation of scanning velocity or position
    • H04N2201/04753Control or error compensation of scanning position or velocity
    • H04N2201/04755Control or error compensation of scanning position or velocity by controlling the position or movement of a scanning element or carriage, e.g. of a polygonal mirror, of a drive motor

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Optics & Photonics (AREA)
  • Analytical Chemistry (AREA)
  • Chemical & Material Sciences (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Microscoopes, Condenser (AREA)
  • Investigating Materials By The Use Of Optical Means Adapted For Particular Applications (AREA)
  • Investigating Or Analysing Materials By Optical Means (AREA)
  • Image Input (AREA)
  • Facsimile Scanning Arrangements (AREA)
  • Analysing Materials By The Use Of Radiation (AREA)
  • Image Processing (AREA)

Abstract

【課題】試料の連続的スキャンから得られた画像ストリップを単一の連続したデジタル画像を構成するためにコンピュータ制御された顕微鏡スライドスキャナを用いて、顕微鏡試料全体を全自動で迅速なスキャンおよびデジタル化するための装置及び方法を提供する。【解決手段】顕微鏡スライドスキャナ11は、試料12全体の低倍率のマクロ画像と一緒に、異なる倍率でこの大きなデジタル画像のサブ領域を静的に表示、もしくは連続したデジタル画像の部分を動的に表示する方法であって、スキャナの要素はすべてインターネットまたはローカルイントラネット42に対して主要な接続を行っている。好ましい試料タイプは顕微鏡スライドであり、照明光学系および画像光学系は回折限界のデジタル画像のために最適化された透過モード光学系と一致している。【選択図】図1

Description

本発明は、一般に、光学顕微鏡の分野に関し、特に、全自動迅速顕微鏡用スライドスキャナに関する。
光学顕微鏡の特有の制限は、観察フィールドと、接眼レンズを介して観察される試料の部分と、試料の観察される倍率とがトレードオフであることである。高開口数(NA)を備える高倍率の顕微鏡対物レンズは、拡大され且つ高解像の画像を顕微鏡使用者に提供するが、倍率の二乗に比例して倍率が増加すると、観察フィールドが劇的に減少する。1.25倍のような低倍率においてさえ、典型的な顕微鏡用スライドの小領域だけが、従来の顕微鏡の双眼鏡を通じて観察される。光学顕微鏡の観察フィールド制限の範囲は、サンプル又は試料の全観察を得るために、顕微鏡使用者が低倍率でスライドを手動スキャンすることを要求する。興味のある領域が低倍率の一つに現れたとき、試料の比例した小領域の拡大された高解像観察フィールドを得るために、顕微鏡使用者は高倍率対物レンズを手動で選択する。病理学者によって観察される組織学的試料のような試料に対して、病理学者が、試料について自分との向きを決めるために広い観察フィールドを備える低倍率対物レンズと、より詳細に試料を観察するために一つ以上の高倍率で視野の狭い対物レンズとにしばしば切換えることは普通である。
広い観察フィールドと高倍率とを同時に達成するという光学顕微鏡の制限を克服するためのアプローチは、連続した観察フィールドから個々のデジタル画像を複数で捕えられ、広い観察フィールドを作るということである。スキャンシステムが試料を動かすために使用されているが、二次元スキャン電荷結合素子(CCD)カメラのような方形の光学センサが所望倍率での各観察フィールドの画像を捉える。これらの小さな観察フィールド(これ以降、画像タイルと呼ぶ)を一つの一貫した画像に組立てるプロセスは、画像タイル化と呼ばれている。以前の画像タイル化システムは、米国特許4760385号(ジャンソンなど)に説明されたシステムのように、オペレータによって以前に且つ双方向に選択された試料の領域で捕えられた略36個のビデオフレーム画像タイルから連続した高解像タイル化画像を作ることに基づかれている。同じであるがより高度な画像タイル化システムが最近利用可能になっている。そのようにシステムの一つが、ベイカス・ラボラトリ社スライドスキャナ(これ以降BLISSと呼ぶ)の名前で、ベイカス・ラボラトリ社、ダウナーズ・グローブ、ILによって売り出されている。BLISSシステムの要素は、特許協力条約公報のWO98/39728及びWO98/44446に記載されている。
BLISSシステムは、非常に低い倍率で得られた組織学試料の解剖学上の位置を、低倍率のタイル化画像やマクロ画像から病理学者によって双方向に選択された試料の領域の幾つかの高倍率視野に結合する必要性を有する病理解剖学者のために第一に設計されている。BLISSシステムによって、病理学者は、20倍又は40倍で捕えられた選択領域の選択された高解像ミクロ画像と、1.25倍で捕えられた低解像マクロ画像との間を素早く前後させることができ、従来の顕微鏡の病理学者の手動使用を再現させることができる。その代りに、BLISSシステムのユーザーインターフェースは、分離された分割スクリーンを表示するモニタに設けられている。それにより、病理学者には、マクロ視野が全体的に示され、マーカーは、現在の高倍率視野がどこにあるかを示している。タイル化画像は、結合されたデータ構造を作り出すために高倍率で幾つかの隣接した元の顕微鏡視野とともに、試料のマクロ視野全体を得るために最初の倍率で幾つかの隣接した元の顕微鏡視野を組立てることによって構築される。データ構造は、地図座標を用いて低倍率画像タイルをデジタルでスキャンすること及び蓄えること、及び地図座標を用いて高倍率画像タイルをデジタルでスキャンすること及び蓄えることによって得られる。さらに、病理学者は、高解像度で蓄えられた画像ピクセルの数をかなり減らすために、デジタルでスキャンすること及び蓄えることのために試料の診断上重要な領域だけを双方向に選択することができる。データ構造は、バーチャル顕微鏡スライドに似て、インターネットのようなネットワークを通じて離れたビューワーに移される。離れたユーザーは、一連の隣接したタイル化画像を備える。各画像タイルは、二つの異なった光学倍率で一つの小さな光学観察フィールドに実質的に等しい。
BLISSシステムは、ニューヨークのソーンウッドにあるカールツワイス社によって販売されたアキシオプラン2(Axioplan−2)顕微鏡システムのような、コンピュータ制御された自動顕微鏡に一体化されている。この種のハイエンドの顕微鏡は、照明サブシステム、フォーカスサブシステム、顕微鏡対物レンズサブシステム、フィルターサブシステム、最適なケラー照明を実現するために使用される複数のフィールドやコンデンサ絞り又は光学ストップを含む、幾つかのサブシステムのコンピュータ制御を可能にする。基本的に、顕微鏡の全ての可動要素は、コンピュータ制御され、そして原則として、インターネットを介して離れた場所から制御される。全ての絞りの位置やフォーカス及び照明レベルのような他の設定は、コンピュータに蓄えられ、手動をはさむことなく顕微鏡の対物レンズを変えることを可能にする。BLISSシステムは、優れた位置決め性を提供するために位置用エンコーダ及び閉ループフィードバックコントロールを用いて、0.1μmの位置決め精度を達成するコンピュータ制御された2軸(上下左右の動きに対するx/y)の平行移動ステージを備えている。752×480ピクセルのCCDカメラ及び画像フレーム取込み器がBLISSシステムに一体化されている。
画像タイルに基づいているので、BLISSシステムは、画像タイルアプローチの幾つかの既知の不利な点がある。例えば、BLISSシステムの第一の不利な点は、タイル化されたデータ構造を得るために時間(典型的には20分以上)がかかることである。これらの時間見積は、手動をはさむ間に、例えば、低倍率マクロ画像の選択領域から高倍率タイル化画像を得る前に、受けるさらなる遅延が考慮されていない。タイル化は、単一の視野の幅に等しい個々のステップにおいて、及び、BLISSシステムで使用されるCCDカメラのような静止二次元スキャンカメラについては、電動ステージ上にあるスライドを動かすことを含んでいる。画像タイルは全てのステップで得られる。個々の画像は、興味のある領域の大きな継ぎ目のない画像を作るために共にタイル化される。画像のタイル化は、画像が捕えられている間に試料とカメラとの間での相対的な動きを最小にする必要があるために、時間がかかる。相対的な動きの主たる原因は、一連の停止及び進行という命令を出したあとでの、機械的位置決めステージの設定時間である。容認できない汚れのない画像を得るためには、理想的には一つより少ないピクセル内に、ステージが定着されるまで待つことが必要である。例えば、40倍で、1/2インチ型CCDで捕えられた画像タイルの幅は、試料の160μmに対応する。この倍率で、752ピクセルのワイドCCDでの個々のピクセルは、試料の約0.2μmの範囲を定める。単一のタイル化工程は、機械的なステージの関連した加速・減速で、160μmという相対的に大きな移動を必要とする。画像の汚れを避けるために、画像タイルは、機械的なステージが動きの一つより少ないピクセルすなわち約0.2μmに定着されたあとに捕えられるべきである。米国特許5912699号(ハエンガ等)は、ストロボ光と同期した従来の二次元スキャンカメラを用いて画像タイルを結合する他の方法を提案することによって、従来の画像タイル化システムのこのよく知られた設定時間制限に取り組んでいる。タイル化システムのBLISSシステムを含む遅い捕捉時間は、初期の非常に低倍率のマクロ画像の捕捉と高倍率捕捉に対する小領域のその後の選択との間に広範囲な手動をはさむことで、画像タイル化の有用性を二つのステップのプロセスに制限する。
タイル化システムに関係した遅い捕捉時間は、タイル化されたデータ構造を作るプロセスの間に手動をはさむ必要があるという、BLISSシステムの第二の不利な点である。1.25倍という非常に低い顕微鏡対物レンズ倍率でスライドをプレスキャンしたあと、BLISSシステムの操作者は、高倍率対物レンズを用いて、スキャンされるべき興味のある関連領域に対するマクロ画像を調べる。手動をはさむことの動機は最終データ構造の大きさを制限することであるが、手動をはさむことは合理的な時間で得られる小さな領域を画定するのに絶対的に必須である。例えば、20倍で顕微鏡スライドを完全にスキャンためにBLISSシステムを使用することは、捕捉時間を考慮するために、実用的ではない。20倍では、752×480ピクセルの1/2インチ型二次元スキャンCCDを用いて、顕微鏡スライドの2インチ×1インチの領域をデジタル化するために、約16300の個別画像タイルを捕捉しなければならない。各画像タイルを得るために約1秒かかることを仮定すると、停止及び進行の命令の16300の繰り返しのそれぞれに関連した相対的に長い機械的設定時間も手伝って、トータルの捕捉時間は4時間30分になるであろう。40倍では、捕捉時間が4倍になって18時間になるであろう。10倍でさえも、捕捉時間が1時間を越えるであろう。しかしながら、BLISSシステムの1.25倍という非常な低倍率では、64の画像タイルだけが、顕微鏡の2×1インチ領域のマクロ画像を作るために必要である。マクロ画像に対するトータルの捕捉時間は約1分である。
捕捉時間制限が低倍率のマクロ画像の捕捉を必要とすることを理解すると、高倍率で捕捉されるべき小さな領域のこのマクロ画像から双方向に選択することに続いて、BLISSシステムの第三の不利な点が明らかになる。この第三の不利な点は、低倍率のマクロ画像から興味のある領域を位置決めすることが、解剖学的基準情報が利用可能である試料に制限されていることに存する。BLISSシステムは、Pap汚れのような非組織学的試料に対する制限された有用性を有している。なぜならば、そのような細胞試料がもともと解剖学的位置についての情報を欠いているからである。そのような試料において、細胞は、顕微鏡スライドの広い領域にわたって多かれ少なかれランダムに分布している。画定する能力なく、マクロ画像を用いて、特定の小さな領域が高倍率でタイル化されているほど、代りのものが試料全体をスキャンし且つデジタル化する。しかしながら、前に説明したように、画像タイル化方法で必要とされた長い捕捉時間は、この代りのものを仮想的に非現実的にする。別の言いかたをすれば、高倍率での画像タイル化に対して顕微鏡スライドの特定且つ重要な小領域を画定するために手動をはさむことや細胞学的試料の不可能性がなく、タイル化アプローチは制限された有用性を有する。手動をはさまない、全自動スキャン顕微鏡スライドのシステムを人は好むであろう。そのようなシステムは、スライドが解剖学的基準情報を含むか否かにかかわらず、顕微鏡スライドの全タイプに適しているであろう。
BLISSシステムの第四の不利な点は、複雑であることや高価であることである。BLISSシステムは、規格品の部品から大部分できている。規格品の部品は、複数の対物レンズと高価な閉じたx/yのステージ制御ループを備える、ハイエンドで、全自動の第三者の顕微鏡を含む。BLISSシステムの提示された消費者価格は約10万ドルである。BLISSシステムの複数の自動要素は、高価な自動化にもかかわらず、操作及び維持の難しい複雑なシステムを示している。簡単で信頼性が高くて、BLISSシステムのコストの約1/3で利用可能となる顕微鏡スライドスキャンシステムを、人は好む。
従来の顕微鏡に基づいたあらゆる顕微鏡スライドスキャンシステムの幾つかの制限は、BLISSシステムのコスト的に不利な点に固有である。BLISSシステムの最も高価な部品は、自動化された顕微鏡それ自身である。全自動顕微鏡をBLISSシステムに組み入れる理由の一つは、顕微鏡の対物レンズタレットが自動的に回転して顕微鏡の対物レンズを変える(例えば1.25倍〜40倍)とき、多くの設定を自動的に変更するために必要である。顕微鏡の対物レンズを変えるときに典型的な顕微鏡は、異なった最適なフォーカス面を有し、ケラー照明を達成するために、フィールド及びコンデンサの絞りの新しい設定を必要とする。異なった照明強度は、CCDのダイナミックレンジを最適に満たすために必要である。顕微鏡の対物レンズを変える必要性が除去されたならば、そのような高価な自動化の必要性が除去される。人は、伝統的な光学顕微鏡の視野制限のフィールドに打ち勝つだけでなく、顕微鏡の複数の対物レンズの必要性を除去することができ、BLISSのような画像タイル化システムを越える十分なコストの利点を備える素早いスキャン方法を好む。単一の顕微鏡の対物レンズの必要性は、伝統的な顕微鏡の光学系によって強いられた制約を削除することに極めて関係している。人は、顕微鏡スライドがスキャンし、回折限界の解像度でデジタル化すること、すなわち、顕微鏡の対物レンズの解像度で利用可能な全ての可能な空間詳細がデジタル画像で捕えられることを確実にする光学設計に基づいたシステムを好む。いったん、回折限界のデジタル画像が捕えられたならば、悪化した低い解像度と倍率の画像は、標準的なコンピュータアルゴリズムを用いて、作られる。
多くの顕微鏡の応用において、試料全体又は試料の大部分は、欠陥、特別な対象物又は異常な細胞のような対象の存在又は存在しないことを調べることが必要である。それに続く高解像度調査で興味のある特定の領域を同定するために、試料の大部分又は試料全体が低解像度(典型的には10倍〜20倍)で手動スキャンしなければならないとき、顕微鏡は、労働集約的なものである。単一フィールドの拡張された手動スクリーニング又は連続した観察によって、目の疲れ、疲労、生産性及び正確さに悪影響を及ぼす視覚順化が起こる。それに続く高解像度調査で興味のある関連の領域を素早く見つけ且つ位置決めすることの問題は、顕微鏡を、一次元に配置された補助検出器及び自動位置決めテーブルに結合させた従来のリアルタイムのスキャンシステムを使用することで、取り組まれている。それらの全てがコンピュータ制御されている。米国特許5922282号(レドレイ等)で説明されたシステムのような幾つかのアプローチは、対象物(この場合、特製のガラス顕微鏡スライド上にあるマイコバクテリア)の再配置を可能にする物理的スライドの領域上で見つけられた関連対象物のx/yステージの座標を蓄えることに基づいている。5μmステップで動くステージに同期された一次元スキャンカメラで測定された強度情報に適用されている特化されたリアルタイムパターン認識回路を用いて、マイコバクテリアのx/y座標が得られる。その代りに、ビデオカメラのような二次元スキャンセンサが、類似した回路とともに、選択された対象物のx/y座標を導くための基礎として使用される。後者の場合、ステージは、タイル化方法で要求されたステージ移動に似て、完全な画像フィールドに対応した大きなステップで動かされる。瞬間的な自動フォーカス制御を用いて、フォーカスが維持される。米国特許4700298号(パルシック等)に記載された他のシステムは、組織フラスコで成長する細胞のx/y座標をリアルタイムで記録する目的で広い領域をスキャンするために、オートフォーカス手段を備えた、市販の顕微鏡に取り付けられた一次元配置のCCDを用いる。これらの既知の方法及びシステムは、全て、スキャン過程の間に得られ且つ処理されたデジタル情報のリアルタイム分析に基づいている。多くの場合、特化された回路が、リアルタイムで決定することを可能にする一次元配置の検出器から読み出された強度データを直ちに処理するために使用される。他の新規なアプローチは、手動スライドスキャンの労働集約的な面を自動化するのに十分な光学解像度で顕微鏡スライド全体の大きな隣接画像を素早く組立てるために、一次元配置センサを使用することである。手動スライドスキャンの代替物として使用されるシステムを、デジタル画像処理方法とともに、人は好む。
顕微鏡スライドの手動スキャンに関係した他の共通の問題は、スライドの部分がスライドのx/yの手動スキャンの間に容易にミスすることである。特にスライドが顕微鏡から除去されたあと、前に同定したセルに再配置することは難しい。x/yの手動スキャンの間にスライドのあらゆる領域をミスしないという問題は、x/y位置及び手動で調べられる物理的スライドの領域の滞留時間を記録する品質保証システムを位置エンコードし、このように失敗したか早く観察できるスライドの領域を強調表示することによって取り組まれている。米国特許5793969号(カメンツキ等)は、科学技術者によって再観察されるPap汚れスライドの品質保証方法を説明している。この方法は、スライド再観察の間に科学技術者によって訪問された全てのフィールドのx/yステージ座標を記録すること、及び、相対的スライド滞留時間のx/y地図を作ることに基づいている。
顕微鏡スライド全体を素早くスキャンし且つデジタル化することのできる簡単で信頼性の高いシステムに対する明確な必要性が、存在する。スキャン及びデジタル化は、顕微鏡スライドのスキャン及びデジタル化に相当する光学解像度でなされるべきである。これにより、スライド全体を手動スキャンする代りに又はそれに加えて、デジタルイメージデータセットに画像処理アルゴリズムを適用することを可能にする。理想的には、そのようなシステムは、画像捕捉プロセスの間に手動をはさむことを要求するべきでない。そのようなシステムは、スライドが解剖学的基準情報を含むか否かにかかわらず、あらゆるタイプの顕微鏡試料に適するべきである。理想的には、そのようなシステムは、従来のシステムより低コストである。そのようなシステムは、従来の市販の顕微鏡の制限及び特有のコストによって制約されるべきでない。それは回折限界のデジタル画像の捕捉を可能にする光学設計を可能にする。本発明の第一の目的は、これらの必要性を解決し且つ関係する利点を与えることである。
本発明は、コンピュータ制御された顕微鏡スライドスキャナの部分である位置決めステージと同期した一次元配置検出器を用いて、顕微鏡試料全体、すなわち実質的に大部分の顕微鏡試料の迅速スキャン及びデジタル化を完全自動化するための装置及び方法を提供する。さらに、本発明は、試料の一連のスキャンから得られた画像ストリップを単一の連続したデジタル画像に組み立てる方法を提供する。さらに、本発明は、試料全体の低倍率のマクロ画像とともに、異なった倍率でこの大きなデジタル画像のサブ領域を静的に表示する方法を提供する。さらに、本発明は、連続したデジタル画像の部分を、操作者の相互作用の有無で、動的に表示する方法を提供する。本発明の好ましい実施形態において、スキャナの全ての要素は、インターネットか又はローカルインターネットのようなネットワークへの第一の接続を有する単線で囲った部分である。この実施形態において、好ましい試料の形態は、顕微鏡スライドであり、照明及び結像光学系は、回折限界のデジタル結像を最適化する透過モード光学系と一致している。
本発明を実行するためのベストモード
本発明の目的、利点、及び特徴は、添付図面とともに読むときに、以下の詳細な説明から容易に理解されるであろう。
まず、図1を参照すると、本発明に係る光学顕微鏡システム10の好ましい実施形態のブロック図が示されている。システム10の心臓部は、試料又は試料12をスキャンし且つデジタル化する顕微鏡スライドスキャナ11である。試料12は、光学顕微鏡によって調べられるあらゆるものである。例えば、試料12は顕微鏡スライド又は光学顕微鏡によって調べられる他の試料タイプである。顕微鏡スライドが、組織や細胞、染色体、DNA、蛋白質、血液、骨髄、尿、バクテリア、ビーズ、生検材料、生きているか死んでいるか、汚れているか錆ていないか、標示付きか標示なしかである他のタイプの生物学的な材料又は物質を含む試料に対する観察基板としてしばしば使用される。試料12は、マイクロアレイとして良く知られた全ての試料を含む、DNA又は、cDNAかRNAかあらゆるタイプのスライド又は他の基板の上に堆積蛋白質のようなDNAに関連したあらゆるタイプの配置である。試料12はマイクロタイター板(例えば96ウェル板)であってもよい。試料12の他の具体例は、集積回路基板、電気泳動レコード、ペトリ皿、フィルム、半導体材料、法医学材料または機械加工部品を含んでいる。
スキャナ11は、電動ステージ14、顕微鏡対物レンズ16、一次元スキャンカメラ18およびデータ処理装置20を含んでいる。試料12はスキャン用の電動ステージ14の上に配置される。電動ステージ14は、データ処理装置20に順番に接続されるステージコントローラ22に接続される。データ処理装置20は、ステージコントローラ22によって電動ステージ14上の試料12の位置を決定する。現在の好ましい実施形態では、電動ステージ14は、少なくとも試料12の平面にある2つの軸(x/y)にある試料12を動かす。光学のZ軸に沿った試料12の微小な動きは、スキャナ11の適用に、例えば焦点制御のために必要かもしれない。Z軸動きは、Polytec PIからのPIFOC、またはPiezosystem JenaからのMIPOS 3のようなピエゾのポジショナー24で好ましくは達成される。ピエゾのポジショナー24は、顕微鏡対物レンズ16に直接に取り付けられ、データ処理装置20に接続され、且つ、ピエゾのコントローラ26によってデータ処理装置20によって監督される。粗い焦点調節を提供する手段も必要であってもよく、電動ステージ14または手動のラック・アンド・ピニオンの粗い焦点調節(示されない)の一部としてZ軸ムーブメントによって提供することができる。
現在の好ましい実施形態では、電動ステージ14は、滑らかな運動および優れた直線および平面精度を提供するために、玉軸受一次元法を備えた高精度位置決めテーブルを含んでいる。例えば、電動ステージ14は、互いのトップに積み重ねられた2つのダエダル(Daedal)モデル106004テーブルを含む。他のタイプの電動ステージ14は、スキャナ11に適しており、玉軸受とは第二方法で積み重ねられた単一軸ステージ、中央が開いており試料の下からの透過照明に特に適している単一軸または複数軸の位置決めステージ、又は複数の試料を支持することのできる大きなステージを含んでいる。現在の好ましい実施形態では、電動ステージ14は2つの積み重ねられた単一の軸位置決めテーブルを含んでおり、各々は、2ミリメートルの親ネジおよびネマ(Nema)23ステッピングモータに連結されている。毎秒25回転という最大の親ネジ速度で、電動ステージ14上の試料12の最大速度は、毎秒50ミリメートルである。大きな直径(例えば5ミリメートル)を備えた親ネジの選択は、最大速度を毎秒100ミリメートル以上に増加させることができる。電動ステージ14は、システムにかなり費用を加えるという欠点を有している機械的又は光学的位置エンコーダを具備することができる。従って、現在の好ましい実施形態は位置エンコーダを含んでいない。しかしながら、人がステッピングモータの代わりのサーボモータを用いるのであれば、人は適切なコントロールのために位置フィードバックを用いなければならないだろう。
データ処理装置20からの位置コマンドは、ステージコントローラ22における、モータ電流または電圧コマンドに変換される。現在の好ましい実施形態では、ステージコントローラ22は2軸のサーボ/ステッパーモーターコントローラ(Compumotor 6K2)および2つの4アンプのマイクロステッピング駆動装置(Compumotor OEMZL4)を含んでいる。マイクロステッピングは、1.8度の比較的大きな単一のモータ・ステップよりはるかに小さなインクリメントにおけるステッパーモーターを命令するための手段を備える。例えば、100のマイクロステップでは、試料12は、0.1マイクロメータと同じ小さなステップで移動することを命令することができる。25,000のマイクロステップは、本発明の現在の好ましい実施形態で用いられる。また、より小さなステップサイズは可能である。電動ステージ14およびステージコントローラ22の最適な選択が、試料12の特性、試料をデジタル化するための所望時間、および試料12の得られたデジタル画像の所望の解像度を含む多くの要因に依存することは明らかに違いない。
顕微鏡対物レンズ16は一般に利用可能なあらゆる顕微鏡対物レンズであってもよい。当業者は、どの対物レンズを用いるべきかの選択が特別の状況に依存するだろうということを理解するだろう。本発明の好ましい実施形態では、顕微鏡対物レンズ16は無限修正タイプのものである。
試料12は、光源30及び照明光学系30を含んでいる照明システム28によって照明される。現在の好ましい実施形態における光源30は、フィルタ光出力を最大限にするための凹面反射鏡及び熱を抑えるKG−1を備えた可変強度ハロゲン光源を含んでいる。しかしながら、光源30は、また他のタイプのアークランプ、レーザーまたは他の光源でありえる。現在の好ましい実施形態における照明光学系32は、光軸に直角な2つの結合した平面を備えた標準のケラー照明システムを含んでいる。照明光学系32は、カールツワイス、ニコン、オリンパスまたはライカのような会社によって販売された最も商業上利用可能な複数顕微鏡上で見つけることができる明視野照明光学系の代表である。1セットの結合した面は、(i)光源30によって照明されたフィールド絞り口径、(ii)試料12の焦点面によって画定される対象面、および(iii)一次元スキャンカメラ18の光応答性要素を含む面を含んでいる。別の結合した平面は、(i)光源30の一部であるバルブのフィラメント、(ii)照明光学系32の一部であるコンデンサー光学系の前に配置されるコンデンサー絞りの口径、及び(iii)顕微鏡対物レンズ16の後ろの焦点面を、含んでいる。現在の好ましい実施形態では、試料12は、透過モードで照らされ且つ画像にされ、一次元スキャンカメラ18は、試料12によって放射される光学エネルギーか、反対に、試料12で吸収される光学エネルギーを感知する。
本発明のスキャナ11は、試料12から反射される光学エネルギーを検出するのに適している。その場合、光源30、照明光学系32および顕微鏡対物レンズ16は、反射画像との適合性に基づいて選択されなければならない。したがって、可能な一つの実施形態は、試料12の上に位置決めする光ファイバーバンドルによる照明であってもよい。他の可能性は、モノクロメータによってスペクトルで規定される励起を含んでいる。顕微鏡対物レンズ16が位相差顕微鏡の顕微鏡使用と互換性をもつために選択されているならば、照明光学系32の一部であるコンデンサー光学系の少なくとも一つの位相停止の組み込みによって、スキャナ11が位相コントラスト顕微鏡に使用されることが可能になるだろう。当業者にとっては、微分干渉コントラスト及び共焦点顕微鏡のような他のタイプの顕微鏡に必要な修正は、容易に明白に違いない。全体として、スキャナ11は、適切であるがよく知られた修正で、光学顕微鏡のあらゆる既知のモードにおける微視的な試料の調査に適している。
顕微鏡対物レンズ16と一次元スキャンカメラ18との間に、一次元スキャンカメラ18の光応答性要素の上にある顕微鏡対物レンズ16によって捕えられた光学信号に焦点を合わせる一次元スキャンカメラ合焦光学系34が位置している。現代の無限修正顕微鏡において、顕微鏡対物レンズと接眼レンズ光学との間にある、または顕微鏡対物レンズと外部の画像ポートとの間にある合焦光学系は、顕微鏡の観察チューブの一部であるチューブレンズとして知られている光学要素から成る。しばしば、コマまたは非点収差の導入を防ぐために、チューブレンズは複数の光学要素から成る。従来の有限の筒長光学系から無限修正光学系までの比較的最近の変化の動機の中の一つは、試料12からの光学エネルギーが平行である物理的なスペースを増加させることであり、この光学エネルギーの焦点ポイントが無限にあることを意味する。この場合、ダイクロイックミラーまたはフィルタのような付属要素は、光学パス倍率を変更せず、かつ、好ましくない光学人工品を導入せずに、無限スペースに挿入することができる。
無限修正の顕微鏡対物レンズは、無限マークを典型的に記入される。無限修正の顕微鏡対物レンズの倍率は、対物レンズの焦点距離で除せられたチューブレンズの焦点距離の商から与えられる。例えば、9ミリメートルの焦点距離を備えた対物レンズが用いられるならば、180ミリメートルの焦点距離を備えたチューブレンズは20xの倍率となるだろう。異なる顕微鏡メーカーによって製造された対物レンズが互換性をもたないという理由の一つは、チューブレンズ焦点距離における標準化がないためである。例えば、オリンパス(180ミリメートルのチューブレンズ焦点距離を用いる会社)からの20x対物レンズは、200ミリメートルの異なる筒長焦点距離に基づくニコン顕微鏡上で20x倍率を提供しないだろう。代わりに、20xが刻まれて、9ミリメートルの焦点距離を有しているオリンパス対物レンズの有効な倍率は、対物レンズの9ミリメートルの焦点距離で200ミリメートルのチューブレンズ焦点距離を割ることにより得られた22.2xになるだろう。顕微鏡を取り外さずことなく、従来の顕微鏡上のチューブレンズの変更は、事実上不可能である。チューブレンズは顕微鏡の重要な固定要素の一部である。異なるメーカーによって製造された対物レンズと顕微鏡との間の非互換性へのもう一つの寄与する要因は、接眼レンズ光学系、試料が観察される双眼鏡の設計である。ほとんどの光学系の補正は顕微鏡対物レンズにおいて設計されているが、ほとんどの顕微鏡ユーザは、最良の可視像を達成するために、その同じメーカーの顕微鏡対物レンズと一つのメーカーの双眼鏡光学系とを一致させることにある利益があると確信し続けている。
一次元スキャンカメラ合焦光学系34は、機械的なチューブの内部にマウントされたチューブレンズ光学系を含んでいる。その好ましい実施形態において、スキャナ11が、従来の視覚観察用の双眼鏡または接眼レンズを欠いているので、対物レンズと双眼鏡との間の潜在的な非互換性という従来の顕微鏡によって受けられた問題は、直接除去される。当業者は、いかなる接眼レンズも有していないことによって、顕微鏡の接眼レンズとディスプレイモニタ上のデジタル画像との間の焦点面の同一を達成する問題も除去されることを同様に理解するであろう。スキャナ11が試料12の物理的な境界によってだけ実際に制限された観察フィールドを提供することにより、従来の顕微鏡の観察フィールド制限を克服するので、現在のスキャナ11によって提供されるような全デジタルの画像顕微鏡における倍率の重要性が制限されている。一旦、試料12の一部分がデジタル化されたならば、その倍率を増加させるために、試料12の画像に、電気的なズームとして知られた数倍の電子倍率を適用することは簡単である。画像の倍率を電子的に増加させることは、画像を表示するために用いられるモニタ上にあるその画像サイズを増加させる効果を有する。あまりに大きな電子ズームが適用されるならば、ディスプレイモニタは拡大画像の部分だけを示すことができるだろう。しかしながら、まず第一にデジタル化されたオリジナルの光学信号になかった情報を表示するために電子倍率を用いることは可能ではない。スキャナ11の対物レンズの一つが高品質デジタル画像を提供することであるので、顕微鏡の接眼レンズによる視覚観察の代わりに、スキャナ11によって得られた画像の内容ができるだけ詳細な画像を含むことは重要である。解像度という用語はかかる画像詳細を記載するために典型的に用いられる。また、回折限界という用語は光学信号において利用可能な波長制限のある最大の空間の詳細を記載するために用いられる。スキャナ11は、チューブレンズ焦点距離の選択による回折限界のデジタル画像化を提供する。チューブレンズ焦点距離は、良く知られたナイキスト・サンプリング標準によれば、一次元スキャンカメラ18のような光を感知するカメラにおける個々の画素要素のサイズと、顕微鏡対物レンズ16の開口数とに一致する。倍率ではなく開口数が、顕微鏡対物レンズ16の解像度を制限する属性であることは有名である。
具体例は、一次元スキャンカメラ合焦光学系34の一部であるチューブレンズ焦点距離の最適選択を図示するのを役立つであろう。前に説明した9ミリメートルの焦点距離を備えた20x顕微鏡対物レンズ16を再び考慮して、この対物レンズが0.50の開口数を有していると仮定すること。コンデンサーからの大幅な低下がないことを仮定すると、500ナノメーターの波長でのこの対物レンズの回折限界の解像力は、およそ0.6マイクロメータであり、よく知られたアッベ(Abbe)の関係を利用して得られる。一次元スキャンカメラ18が試料12の部分を検出するために用いられるとさらに仮定する。一次元スキャンカメラ18は、その好ましい実施形態において複数の14マイクロメータの2乗の画素を有する。サンプリング理論に従って、少なくとも2つのセンサ画素が最も小さな分解可能な空間の特徴に内在する必要がある。この場合、28マイクロメータで除されることにより得られて、46.7の倍率を達成するためにチューブレンズが選択されなければならない。それは0.6マイクロメータで除されることにより得られた2つの14マイクロメータの画素に一致する。最も小さな分解可能な特徴寸法である。したがって、最適のチューブレンズ光学の焦点距離は、約420ミリメートルであり、46.7×9とすることにより得られる。420ミリメートルの焦点距離を有するチューブレンズ光学系を備えた一次元スキャン合焦光学系34は、最良の可能な空間分解能を備えた画像を得ることができるであろう。20x対物レンズを用いて、顕微鏡で試料を観察することにより得られるであろうものに似ている。繰り返すために、スキャナ11は、高倍率の光学構成における従来の20x顕微鏡対物レンズ16を利用する。回折限界のデジタル画像を得るためにこの具体例では約47xである。より高い開口数(おおよそ0.75)を備えた従来の20x倍率対物レンズ16が用いられるならば、回折限界の画像のための必要なチューブレンズ光学倍率が約615ミリメートルである。68xの全体の光学倍率に対応する。同様に、20x対物レンズの開口数が0.3だけであるならば、最適のチューブレンズ光学倍率が約28xだけであろう。それは、およそ252ミリメートルのチューブレンズ光学焦点距離に相当する。一次元スキャンカメラ合焦光学系34はスキャナ11のモジュール要素であり、最適のデジタル画像化に必要なときに交換することができる。回折限界のデジタル画像化という利点は、例えば明視野顕微鏡への適用に特に重要な意義を持つ。明視野顕微鏡では、倍率の増加に伴う信号輝度の減少は、適切に設計された照明システム28の強度を増加させることにより、容易に補償される。
ちょうど現在のスキャナ11に対して記載されているように、回折限界の画像化を達成するために、チューブレンズ倍率を有効に増加させる従来の顕微鏡に基づいたデジタル画像システムに、外部の倍率増加光学系を取り付けることは原則としては可能である。しかしながら、結果として生じる視野の減少は、受け入れがたいものであり、このアプローチを非変実的にする。更に、顕微鏡の多くのユーザが、独力でこれらの技術を有効に使用するために典型的には回折限界の画像化の詳細に関して十分に理解しない。実際上、接眼レンズを通して見ることができるものに似ているものに観察フィールドのサイズを増加させることを試みるために、デジタルカメラは、倍率を減少するオプティカルカプラーを備えた顕微鏡ポートに取り付けられる。ゴールが回折限界のデジタル画像を得ることであるならば、非拡大光学系を加える標準的な行為は間違ったステップである。
従来の顕微鏡では、異なる解像度および倍率で試料を観察するために、異なるパワー対物レンズが典型的に用いられている。標準顕微鏡は、5つの対物レンズを保持する対物レンズ取り付け台を有している。現在のスキャナ11のような全くデジタル画像システムでは、最も高い望ましい空間解像度に対応する開口数を備えた単一の顕微鏡対物レンズ16も必要性がある。スキャナ11の現在の好ましい実施形態は、一つだけの顕微鏡対物レンズ16を提供する。一旦、回折限界のデジタル画像がこの解像度で捕えられたならば、いかなる望ましい低い解像度および倍率でも画像情報を示すために、標準のデジタル画像処理技術を用いることは簡単である。
スキャナ11の現在の好ましい実施形態は、一次元配列で整列された1024ピクセル(画素)を備えたダルサ・スパーク(Dalsa SPARK)の一次元スキャンカメラ18に基づく。各ピクセルは14×14マイクロメータの寸法を有している。あらゆる他のタイプの一次元配列は、カメラの一部としてパッケージにされたか、画像化電子モジュールに顧客注文で統合されているとしても、用いることができる。現在の好ましい実施形態における一次元配列は、8ビット量子化を有効に提供する。しかし、より高いかより低いレベルの量子化を提供する他の配列も用いられる。3チャネルの赤・緑・青(RGB)の色情報または時間遅れ積分(TDI)に基づいた代りの配列も用いられる。TDI配列は、試料の前の画像化領域からの強度データを合計して、積分ステージ数の平方根に比例しているSNRを増加させることにより、出力信号において実質的によりよい信号対雑音比(SNR)を提供する。TDI配列は、一次元配列の複数ステージを含むことができる。TDI配列は、24、32、48、64、96、またはそれより多くのステージで利用可能である。スキャナ11は、512ピクセルのもの、1024ピクセルのもの、4096ピクセルのものを含む様々なフォーマットで製造される一次元配列をサポートする。照明システム28および一次元スキャンカメラ合焦光学系34への適切であるがよく知られた修正が、大きな配列を提供するために必要とされるかもしれない。様々なピクセルサイズを備えた一次元配列もスキャナ11で用いることができる。あらゆるタイプの一次元スキャンカメラ18を選択するための顕著な要件は、高品質像を得るために、試料12のデジタル化の間に、試料12が一次元スキャンカメラ18に対して動くことができるということであり、先行技術で既知の従来の画像タイル化アプローチの静止の要件を克服する。
一次元スキャンカメラ18の出力信号はデータ処理装置20に接続される。現在の好ましい実施形態におけるデータ処理装置20は、ビデオカードまたはフレーム取込み器のような少なくとも一つの信号デジタル化電子基板を支持するために、付随的な電子装置(例えばマザーボード)を備えた中央処理装置を含んでいる。現在の好ましい実施形態では、ビデオカードはEPIX PIXCID24 PCIバスのビデオカードである。しかし、EPIX基板の代わりに用いることができる、様々なメーカーからの他の多くのタイプのビデオカードまたはフレーム取込み器がある。他の実施形態は、ビデオカードをすべて無視し、かつハードディスクのようなデータ記憶装置3にデータを直接格納するために、Firewireとして知られているIEEE 1394のようなインタフェースを用いる一次元スキャンカメラであってもよい。
データ処理装置20も、データの短期間格納のためにランダムアクセス記憶装置(RAM)のようなメモリ36に接続され、長期的なデータ記憶のためにハードドライブのようなデータ記憶装置38に接続される。さらに、データ処理装置20は、ローカル・エリア・ネットワーク(LAN)のようなネットワーク42、広域ネットワーク(WAN)、大都市圏ネットワーク(MAN)、イントラネット、エクストラネットまたはグローバルなインターネットに接続される通信ポート40に接続される。メモリ36およびデータ記憶装置38も互いに接続される。また、データ処理装置20は、一次元スキャンカメラ18およびステージコントローラ22のようなスキャナ11の重要な要素を制御するために、すなわち様々な画像処理機能、画像解析機能またはネットワーキングのために、計算機プログラムをソフトウェアの形で実行することができる。データ処理装置20は、Windows(登録商標)、Linux、OS/2、Mac OSおよびUnix(登録商標)のようなOSを含むあらゆるOSに基づくことができる。現在の好ましい実施形態では、データ処理装置20は、Windows NTというOSに基づいて作動する。
データ処理装置20、メモリ36、データ記憶装置38および通信ポート40は、各々従来のコンピュータに見られる要素である。ある具体例は、Pentium(登録商標) III 500MHzのプロセッサおよびRAMの756メガバイト(MB)以内を特色とするデル・ディメンジョンXPS T500のようなパーソナルコンピュータである。現在の好ましい実施形態では、コンピュータ、データ処理装置20を含む要素、メモリ36、データ記憶装置38および通信ポート40は、すべてスキャナ11に内部にある。その結果、システム10の他の要素に対するスキャナ11の接続部だけが、通信ポート40である。スキャナ11の他の実施形態では、コンピュータ要素は、コンピュータ要素とスキャナ11との間で対応する接続を備えたスキャナ11の外部にある。
スキャナ11は、本発明の現在好ましい実施形態では、光学顕微鏡による検査、デジタル画像化、電動試料の位置決め、計算、及び単一のカバーのユニットにネットワークベースの通信を行なうことを統合する。データの入出力の検出部と同じ通信ポート40を備えた単一のカバーのユニットのようなスキャナ11をパッケージすることの主な利点は、複雑さを減らし、信頼性を高めることである。スキャナ11の様々な要素は、従来の顕微鏡ベースの画像システムと対比して、ともに機能するように最適化される。従来の顕微鏡ベースの画像システムでは、顕微鏡、光源、電動ステージ、カメラおよびコンピュータが異なるベンダーによって典型的に提供され、多くの組み込みおよびメンテナンスを必要とする。
通信ポート40は、システム10の他の要素との迅速な通信手段を提供し、ネットワーク42を含む。通信ポート40用の現在の好ましい通信プロトコルは、伝送制御およびインターネットワーキング用のTCP/IPプロトコルと一緒に、イーサーネットのようなキャリヤーセンスの共同利用の競合検出プロトコルである。スキャナ11は、あらゆるタイプのトランスミッション媒体で作動することを意図しており、広帯域、ベースバンド、同軸ケーブル、撚線対、光ファイバー、DSLまたはワイヤレスを含んでいる。
現在の好ましい実施形態では、スキャナ11のコントロール、およびスキャナ11によって捕えられた画像データの再検討は、ネットワーク42に接続されるコンピュータ44上で行なわれる。オペレータに画像情報を提供するために、コンピュータ44は、その現在の好ましい実施形態では、ディスプレイモニタ46に接続される。複数のコンピュータ44は、ネットワーク42に接続される。現在の好ましい実施形態では、コンピュータ44は、AOLからのネットスケープ・コミュニュケータ又はマイクロソフトからのインターネット・エキスプローラーのようなネットワーク・ブラウザーを用いて、スキャナ11と通信する。画像は、最も商用ブラウザーに既に組み込まれる標準的な画像圧縮方法と互換性がある画像フォーマットであるJPEGのような共通の圧縮形式でスキャナ11に格納される。他の標準または非標準か、損失があるか、損失がないか、画像の圧縮フォーマットは作動するだろう。現在の好ましい実施形態では、スキャナ11は、スキャナ11からコンピュータ44へ送られるウエブページに基づくオペレータ・インタフェースを提供するウエブサーバーである。画像データの動的な再調査のために、スキャナ11の現在の好ましい実施形態は、マイクロソフトからのメディア・プレイヤー、アップルコンピュータからのクイックタイム、あるいはリアルネットワークからのリアルプレイヤーのようなソフトウェアパッケージと互換性のある標準的な複数フレームのブラウザを用いて、コンピュータ44に接続されたディスプレイモニタ46についての再調査のために、画像データの複数フレームを再生することに基づいている。現在の好ましい実施形態では、コンピュータ44上のブラウザは、伝送制御のためのTCPと一緒に、ハイパーテキスト・トランスミッション・プロトコル(http)を用いる。
スキャナ11がコンピュータ44または複数のコンピュータと通信することのできる、様々な手段およびプロトコルが現在及び将来に存在するであろう。現在の好ましい実施形態は、標準的な手段およびプロトコルに基づいているが、アプレットとして知られている一つまたは複数のカスタマイズされたソフトウェア・モジュールを開発する方法が、実現可能であり、スキャナ11の選択された将来の適用に好ましい。さらに、コンピュータ44は、パーソナルコンピュータ(PC)のような特定の型式であること、デルのようなあらゆる特定の会社によって製造されたものであるという制約はない。標準化された通信ポート40の利点の一つは、共通ネットワークブラウザ・ソフトウェアを操作するあらゆるタイプのコンピュータ44がスキャナ11と通信することができるということである。
人が望むならば、スペクトルで分解された画像を得ることは、スキャナ11にある修正を行なうことで可能である。スペクトルで分解された画像は、スペクトルの情報がすべての画像ピクセルで測定される画像である。スキャナ11の一次元スキャンカメラ18を、光学スリットおよび画像分光器に置換することにより、スペクトルで分解された画像が得られる。画像分光器は、検出器の行のそれぞれに沿って光学スリットに合焦される光学信号を分散させるためにプリズムまたは回折格子を用いることにより、画像ピクセルのカラム用の波長に特有の強度データを捕らえるために、二次元のCCD検出器を用いる。
さて図2を参照すると、本発明に係る光学顕微鏡による検査システム10の別の実施形態のブロック図が示される。このシステム10では、スキャナ11は、図1で示される現在の好ましい実施形態より、複雑で高価である。示されるスキャナ11の追加の属性は、必ずしも、正確に機能するあらゆる他の実施形態に存在している必要はない。図2は、スキャナ11に組み入れることができた追加の特徴および能力の合理的な具体例を提供することを意図している。
図2の他の実施形態は、図1の現在の好ましい実施形態より大幅に自動化されたものを提供する。照明システム28のより完全なレベルの自動化は、データ処理装置20と光源30および照明システム28の照明光学系32との間での接続によって達成される。光源30への接続は、光源30の強度を制御するために、開いているか閉じたループのように、電圧又は電流を制御する。現在の好ましい実施形態では、光源30がハロゲン・バルブであることを思い出すこと。データ処理装置20と照明光学系32との接続は、最適のケラー照明が維持されることを保証する手段を提供するために、フィールド絞り口径およびコンデンサー絞りの閉ループ制御を設ける。
蛍光画像にスキャナ11を使用することは、光源30、照明光学系32および顕微鏡対物レンズ16に対して容易に認識された修正を必要とする。図2の第二の実施形態は、また励起フィルタ、二色フィルタおよびバリアーフィルタを含む蛍光フィルタ立方体50を提供する。蛍光フィルタ立方体50は、一次元スキャンカメラ合焦光学系34と顕微鏡対物レンズ16との間に存在する無限修正ビーム・パスに位置決めされる。入手可能な様々な蛍光性染料またはナノクリスタルに適切なスペクトルの励起を提供するために、蛍光画像に関する一つの実施形態は、照明光学系32にフィルタ・ホイールまたはチューナブルフィルターの追加を含むことができる。
画像化パスに少なくとも一つのビームスプリッター52を追加することによって、光学信号が少なくとも2つのパスに分割される。前に説明したように、一次元スキャンカメラ18による回折限界画像化を可能にするために、主要なパスは一次元スキャンカメラ合焦光学系34を経由する。第二のパスは、二次元スキャンカメラ56によって画像化するために二次元スキャンカメラ合焦光学系54を経由して提供される。これらの2つの合焦光学系の適切な選択が、異なるピクセルサイズを有している2つのカメラ・センサによる回折限界画像化を保証できることは、明白である。二次元スキャンカメラ56は、現在利用可能な多くのタイプの一つであり、単純なカラー・ビデオカメラ、高機能で冷却されたCCDカメラ、または可変積分時間の速いフレーム・カメラを含む。二次元スキャンカメラ56はスキャナ11に従来の画像システム構成を提供する。二次元スキャンカメラ56はデータ処理装置20に接続される。2つのカメラ、例えば、一次元スキャンカメラ18および二次元スキャンカメラ56が用いられるならば、両方のカメラ・タイプは、単一の二つの機能を兼ねたビデオカード、2つの異なるビデオカードまたはIEEE1394 のFirewireインタフェースのいずれかを用いて、データ処理装置に接続される。その場合には、一つまたは両方のビデオカードは必要ではないかもしれない。また、データ処理装置20に画像化センサを接続するという他の関連した方法が、利用可能である。
スキャナ11はネットワーク42を介してコンピュータ44に接続されが、例えばネットワーク42のない場合がある。ディスプレイモニタ58のようなローカルの出力装置にスキャナ11を直接に接続することができ、またスキャナ11のデータ処理装置20に直接に接続されるキーボードとマウスの60のようなローカルの入力装置を設けることできることは、有益である。この場合では、適切なドライバ・ソフトウェアおよびハードウェアが同様に提供されなければならないだろう。
図2で示される第二の実施形態は、大幅に自動化された画像化性能を備える。スキャナ11の画像化が増強された自動化は、オートフォーカスというよく知られた方法を用いて、ピエゾのポジショナー24、ピエゾのコントローラ26およびデータ処理装置20を含む閉焦点制御ループにより達成される。第二の実施形態は、いくつかの対物レンズを提供するために電動の前金具62に備える。電動の前金具62は、データ処理装置20に接続され、前金具コントローラ64を通じてデータ処理装置20で監督される。
組込まれるスキャナ11の他の特徴および能力がある。例えば、試料12のx/y平面において実質的に静止している顕微鏡対物レンズ16に関して試料12をスキャンする過程は、静止している試料12に関して顕微鏡対物レンズ16のスキャンすることを含むように修正される。試料12をスキャンすること、顕微鏡対物レンズ16をスキャンすること、又は試料12および顕微鏡対物レンズ16の両方を同時にスキャンすることは、前に説明したのと同様に試料12の大きな連続したデジタル画像を提供することができるスキャナ11の予定された実施形態である。
スキャナ11は、多くのタイプの顕微鏡ベースの分析を自動化するための汎用プラットフォームを提供する。レーザー励起で試料12をスキャンすることを可能にするために、従来のハロゲン・ランプまたはアークランプからレーザーベースの照明システムに照明システム28を修正することができる。一次元スキャンカメラ18または二次元スキャンカメラ56に加えて又はその代わりに、光電子増倍管または他の非画像検出器の組み込みを含む修正が、試料12を備えたレーザー・エネルギの相互作用から生じた光学信号を検出する手段を提供するために用いられる。
図3A〜3Cを参照すると、連続した画像ストリップが本発明に係る一次元配列検出器によって得られる方法が示される。図1の一次元スキャンカメラ18は、図3Aに示されるような一次元スキャンカメラ観察フィールド70を観察する。一次元スキャンカメラ観察フィールド70は、図3Bに示されるような一次元配列74に一次元で整列される多くの個々のピクセル要素72によって画像化されている図1の試料12の領域を含む。現在の好ましい実施形態の一次元配列74は、1024の個々のピクセル要素72を備え、ピクセル要素72のそれぞれは、14×14マイクロメータである。現在の好ましい実施形態の一次元配列74の物理的な寸法は、14.34ミリメートル×14マイクロメータである。スキャナ11の操作を説明するために、試料12と一次元スキャンカメラ18との間の倍率が10であると仮定すると、一次元スキャンカメラ観察フィールド70は、1.4マイクロメータ×1.43ミリメートルと等しい寸法の試料12の領域に相当する。各ピクセル要素72は、約1.4マイクロメータ×1.4マイクロメータの領域を画像化する。
試料12をデジタルスキャンする間に、第一の画像ストリップ78から始まって、第二の画像ストリップ80が続いて、画像76をデジタル化するのに必要な最後の画像ストリップ82が得られるまで、画像ストリップ77のような画像ストリップで画像76が得られることを、図3Cは図示する。当業者は、スキャンが、頂部から底部に又は底部から頂部になされるか、試料上のいかなるポイントでスタートしてもよいことを理解するだろう。デジタルスキャンは、水平の画像ストリップよりも垂直の画像ストリップを含む。望ましいが、連続したやり方で画像ストリップを得る必要はない。画像76は試料12の全体または試料12の部分だけを含むことができる。スキャナ11の現在の好ましい実施形態では、図3Aに示されるように、スキャン及びデジタル化は、画像ストリップを交互にする進行方向84へ行なわれる。この種の双方向スキャンは、単一方向のスキャンより迅速なデジタル化プロセスを備え、スキャン及びデジタル化の方法は各画像ストリップの同じ進行方向84を必要とする。
一次元スキャンカメラ18の能力は、スキャナ11の現在の好ましい実施形態と同様に、スキャンが二方向に行われるか、単一方向に行なわれるかを典型的に決める。単一方向のシステムは、しばしば、図3Bに示される3つのチャネル・カラー配列86またはマルチチャネルTDI配列88のような一つ以上の一次元配列74を含む。カラー配列86は、カラー画像を得るために必要なRGB強度を検出する。カラー情報を得るための他の実施形態は、3つのカラー・チャネルに広帯域の光学信号を分割するためのプリズムを用いる。速いデータ速度を維持している間、およびデジタル画像データの信号対雑音比の大きなロスなしで、一次元スキャンカメラ18の有効な積分時間を増加させる手段を提供するために、他の実施形態のスキャナ11において、TDI配列88が用いられる。
図4を参照すると、本発明に係る光学顕微鏡による検査システム10の操作の単純化されたフローチャートが示されている。試料12はステップ200でスキャナ11に装填される。試料装填の最も単純な方法は、オペレータが電動ステージ14に物理的に試料12を置くか位置決めすることである。試料装填の最も高度な方法は、スキャナ11が、前に装填された試料カセットから一つ、または複数の試料12を自動的に装填することである。試料装填の他の実施形態は、従来技術で知られている。本発明の現在の好ましい実施形態では、試料装填は、システム費用および機械的な複雑さを減じるために手動で行なわれる。
スキャナ11は、コンピュータ44から、または同様にスキャナ11の他の実施形態の一部であるボタンから出された命令によって、ステップ201で初期化される。デジタル化プロセスの所望の解像度、画像76を作成するためにデジタル化される試料12の部分、および関係したキャリブレーションファイルの名前を含む初期設定パラメータは、ステップ201でオペレータによって入力される。もし他に指示されないならば、スキャナ11は、試料全体をデジタル化することを失敗する。試料を装填し、スキャナを初期化した後、以下の画像収集プロセスにおいてオペレータの手動の介入が不要であることに注目することは重要である。
試料12を画像76に自動スキャンおよびデジタル化することは、ステップ202〜210を含んでいる。これらのステップは、一度に一次元スキャンカメラ18から1ラインまたは画像ストリップで画像データの読み出しを同期させるデータ処理装置20によって結集されるが、試料12が、ステージコントローラ22で制御されている電動ステージ14で実質的に一定速度で移動されている。スキャナ11は、ステップ202で試料12の自動デジタル化を開始して、試料12の移動と、一次元スキャンカメラ18からの単一のライン画像の収集を行なう。試料12の予め決められた領域、例えば、図3Cで示されるように試料12の左上側のコーナーにおいてスタートする。ステップ202において、電動ステージ14は、前に説明した双方向すなわち前後に、一次元スキャンカメラ18に関して移動される。ステップ204の決定ブロックの制御ロジックは、画像ストリップ77のような画像ストリップの端が到達したかどうかを決定する。位置エンコーダからの位置フィードバックなしでこのロジックを実行する多くの可能な方法がある。例えば、一次元スキャンカメラ18によって読み取られた画像ラインの全数は、画像ストリップの端が到達したときを知る手段として用いられる。合計の経過したスキャン時間や、試料18の部分であるかまたは試料18に隣接して位置決めされたキャリブレーションマークのような他のパラメータが使用される。新しいスキャンのために電動ステージ14の位置を変える時間を示すために、光学リミットスイッチは、スキャナ11の現在の好ましい実施形態の電動ステージ14に設けられる。画像ストリップ77の端がステップ204に達していなければ、デジタル化プロセスは、ステップ202で、次のライン画像の収集を継続する。試料12は、デジタル化プロセスの間、略一定速度で移動し続ける。そして、いかなる必要な焦点調整も、ステップ206で示されるように機械的なステージ14の継続的な運動と並行して行なわれる。焦点が一つの画像ストリップから次のものに劇的に変わらないので、焦点調整は比較的ゆっくり且つ徐々に行われる。スキャナ11の操作の説明のために、10xの倍率でデジタル化される試料12の領域は、50ミリメートル×25ミリメートルであることを再び仮定すると、画像ストリップ77に似て、18個の画像ストリップ(各々が1.43ミリメートル×50ミリメートルの寸法である)が、画像76を生成するために得なければならない。各画像ストリップ77は、約36,000×18,000ピクセルを含み、全ての画像76は、約36,000×1024ピクセルの要素を含むだろう。画像76を作成するために試料12の所望部分をデジタル化するプロセスが終了しないならばおよびそのプロセスが終了するまで、ステップ208の決定ロジックによって決定されるように、新しいスキャンのための試料12の位置調整がステップ210で起こる。ステップ210は、新しいスキャン用の電動ステージ14を位置決めするために、ある画像ストリップから他の画像ストリップまで電動ステージ14を動かすことを含んでいる。
画像76を得るのに必要な合計時間は、一次元スキャンカメラ18が情報をデジタル化することができるライン速度に比例する。スキャナ11の現在の好ましい実施形態では、ライン速度は、用いられるDALSA SPARKモデルSP12−01K30では、毎秒27,600ラインであるか、または毎秒2830万個のピクセルである。毎秒27,600ピクセルのライン速度で、説明のために36,000×1024ピクセルを含む各画像ストリップ77は、約1.3秒(36,000/27,600)でデジタル化することができる。現在の実施形態における電動ステージ14は、X軸に沿って毎秒約38ミリメートルで移動して、これらの1.3秒の間に50ミリメートルの画像ストリップ77の全長をカバーする。画像76が18の画像ストリップ77を含むので、試料12の所望の部分をデジタル化するために、23.4秒が必要である。前に説明したように、本発明の好ましい実施形態で用いられているように、この時間は双方向の一次元スキャンカメラだけに有効である。一次元スキャンカメラは、X軸に沿った右から左まで、また左から右までスキャンすることができる。他の実施形態は、左からだけ右までスキャンすることができる、単一方向タイプの一次元スキャンカメラを利用することができる。この場合、電動ステージ14は、最大のステージ速度で、X軸に沿って同じ左基準位置に戻される。また、画像ストリップ77のような画像ストリップはすべて、左から右まで行く単一方向の方法で得られる。画像ストリップ77のような個々の画像ストリップのデジタル化を完成した後に、電動ステージ14は、減速し、停止して、Y軸に沿って下降し、次の画像ストリップをスキャンするために再び加速する。スキャンおよびデジタル化プロセスの間に電動ステージ14が実質的に一定速度で確実に移動するために、電動ステージ14が、スキャンされる各画像ストリップの始めと終わりで加速し減速することを時間及び距離において許容しなければならない。加速及び減速のために必要な付加的な時間は、電動ステージ14のX軸性能およびステージコントローラ22のX軸属性に依存する。現在の好ましい実施形態では、滑らかな運動および最小のピックとした動きのためにS字カーブプロファイルを用いると、加速および減速時間は、およそ0.7秒である。電動ステージ14の加速及び減速を考慮すると、ステップ210を含む新しいスキャンセット・アップの間に、一次元スキャンカメラ18がデジタル化されることになっている試料12の部分のエッジから移動することが必要である。新しいスキャン準備時間は、電動ステージ14の特別なY軸性能およびステージコントローラ22のY軸属性に依存し、発明の現在好ましい実施形態ではおよそ半分である。このように、18画像ストリップ×1.4秒によって得られた合計時間の25.2秒は、各画像ストリップの始めおよび終わりでX軸に沿って加速及び減速のために加えられる。また、さらに9秒が、次のスキャンのためにY軸に沿ってモーター駆動された位置を変えるために付け加えられる。したがって、現在の具体例で画像76を捕らえるのに必要なプロセスのすべての部分のために必要な合計処理時間は、双方向スキャン実施形態では約1分である。
スキャナ11をさらに最適化すると、画像76の収集時間の合計がさらに最小化される。スキャナ11によって達成することができる画像収集時間は、一次元スキャンカメラ18のライン速度に部分的に依存する。現在の具体例の毎秒27,600ラインのライン速度では、各ライン画像が約0.04ミリ秒で捕えられる。50ワットのバルブを含む光源からの照明は、一次元スキャンカメラ上の十分な信号対雑音比で信号を登録するための十分な光を提供する。速い読み出し速度で、1ライン当たりの露光時間が減じられる。また、スキャナ11の照明システム28への改良および増強が必要かもしれない。同様に、光、例えば、蛍光がほとんど利用されないスキャナ11の適用では、有効なライン積分時間が増加しなければならない。TDIタイプの一次元スキャンカメラは、画像データの信号対雑音比の大きなロスなしで、速いデータ読み出しを維持する間に有効な積分時間を増加させる優れた手段を備える。
速い一次元スキャンカメラは商業上利用可能で、速い電動ステージと同期することができる。代わりに、一次元配列74のような一次元配列(1024を越えるピクセル要素72を備える)の選択が、画像76を捕らえるためにスキャンされなければならない画像ストリップ数が減じられ、少数の加速及び減速のサイクルを必要とする。2048以上のピクセルを含む配列は、しばしば1024のピクセルを備えた配列より小さな比例したライン速度を有している。ライン積分時間を増加させる間に、画像捕捉時間の合計の減らすことなく、大きな配列の減少したライン速度は、電動ステージ14によって必要とされた最高速度を減じる2重の利益を有している。大きなフォーマット一次元配列の欠点は、大きくて高価な光学系および照明システムが、口径食および他の光学収差なしに、高品質の光学信号を備えることを必要とすることである。画像収集時間全体を減らすために複数のセンサを用いることは可能である。
スキャナ11は、その現在の好ましい実施形態において、動的なオートフォーカスのコストおよび複雑さを除去するか最小化するために比較的大きな被写界深度を有する顕微鏡対物レンズを用いて、試料のデジタル化を行なう。0.15の開口数(NA)を備えた対物レンズの理論的な被写界深度は、20マイクロメータ以上である。被写界深度は、0.3に等しいNAで約5マイクロメータに低下し、0.5に等しいNAで約1.8マイクロメータに下がる。適度な開口数を備えた対物レンズを用いるときでさえ、適用に依存して、試料全体または試料12の部分は、焦点面を調節する必要がなく、スキャンされる。相対的に低いNAの対物レンズの選択は、試料12の広範囲な手動スキャンへの補助としてそれが用いられるスキャナ11の一つの適用と一致している。典型的には、かかる従来の手動スキャンは、低い開口数および低い倍率で行なわれる。試料12の画像76は、このように、試料12の選択された領域の高い解像度調査のための基礎としてコスト効率良く用いることができる。ステップ220を含む決定ロジックに基づいて、ステップ222で示された従来の光学顕微鏡またはステップ224で示されたスキャナ11の高解像度の実施形態のいずれかは、試料12の高解像度再調査のために用いられる。後者の場合では、動的なオートフォーカスが必要かもしれない。現在利用可能な計算能力を用いて、顕微鏡スライドのように試料12の全体、または試料12の大部分の高解像度デジタル化は実際的でないかもしれないし、コスト効率が良くないかもしれない。しかしながら、データ処理、メモリおよびデータ記憶装置の将来のコスト低減及び改良が、高解像度の迅速なデジタル化を現実のものにすると予想される。
スキャン中に合焦することの必要性は、ステップ206で示されており、スキャナ11の特別な用途に非常に依存する。スキャナ11はキャリブレーション方法を用い、その方法では、予め決められる形およびサイズの標準化キャリブレーション試料がデジタル化される。また、最良の焦点は、従来技術でよく知られた方法を用いて、電動ステージ14のx/y位置の関数として決定される。スキャンおよびデジタル化プロセスの間に、顕微鏡対物レンズ16の位置は、このx/y焦点地図に従って移動される。オートフォーカスにする様々な方法が、試料12に関して顕微鏡対物レンズ16の相対的な位置を変更するために用いられる従来技術において知られている。本発明の現在の好ましい方法は、その代りに、商業上利用可能なピエゾのポジショナー24を用いて、顕微鏡対物レンズ16を移動させることであるが、電動ステージ14の垂直z軸成分はオートフォーカスのために使用される。顕微鏡対物レンズ16に付けられる、ピエゾのポジショナー24の総範囲が、比較的小さく、典型的に100マイクロメータであり、ピエゾの帯域幅は重い電動ステージのそれより高い。高いピエゾの帯域幅(典型的に150ヘルツ)は堅い機械的なステージより望ましく、小さな焦点変化に関係した振動を最小限にする。
スキャナ11の利点の一つは、試料12を労働集約的に手動スキャンすることと比較すると、効率的に処理してコストを低減することができる画像76を提供するために、試料12の大部分の迅速なデジタル化である。これと一致して、スキャナ11は、その最も基礎的な実施形態において、いくつかの従来の画像システムで見られる動的なオートフォーカスの複雑さを必要としない。x/y位置の関数として最良の焦点の予備スキャンすることおよびマッピングすることは、ほとんどの用途に適切な焦点を提供する。スキャナ11の代替物だが高価な実施形態は、二次元スキャンカメラ56のような付随的な二次元スキャンカメラを用いて、広範囲なオートフォーカス能力を提供する。オートフォーカスにするための空間情報が試料12の一部(例えばキャリブレーションマークを備えたガラス顕微鏡スライド)である高度なキャリブレーション方法も、可能である。
画像76の全体的性能は、試料12が実質的に一定速度で移動されるという能力と関係している。一次元スキャンカメラ18と電動ステージ14との間の同期が十分に維持されないならば、画像ゆがみに導くサンプリング誤差が起こる。適用および画像解像度の必要性によって、スキャナ11は、試料動きと同期してデータを捕らえるために異なる方法を支持する。既知の形のキャリブレーションターゲット(例えば顕微鏡スライド上のRonchi罫線)を予備スキャンすることは、スキャナ11が一定の試料速度を達成する一つの手段である。電動ステージ14へ送られる位置コマンドの両方の時間プロフィールを制御し、かつ一次元スキャンカメラ18のライン・データ読み出し速度を動的に変更するための能力が、データ処理装置20に設けられる。電動ステージ14での大多数の速度関係誤差が再生できるので、位置プロフィールの最適化または一次元スキャンカメラ18の読出し速度の最適化は、キャリブレーションスキャンの間の最適画像を得るために、試料12がスキャンされデジタル化されるときに、優れた画像を提供するのに十分である。高解像度画像をデジタル化するのに適したスキャナ11の他の実施形態は、電動ステージ14からの位置フィードバックを利用する。スキャナ11の現在の好ましい実施形態は、高価な位置エンコーダからのフィードバックを必要としないで、キャリブレーションターゲットに適用されたキャリブレーション方法を用いて、低くて適度な解像度で高品質画像を生成することができる。
具体例として前に説明した36,000×18,000ピクセルの画像がピクセル当たりの8ビット(1バイト)の量子化で捕えられると仮定すると、RAMの6億4800万バイト(メガバイトまたはMB)は、メモリ36におけるそれらの非圧縮の生のフォーマットにおいて全ての画像ストリップ77の全てのデータを蓄えるために必要とされる。複数の画像ストリップ77がステップ212の間に画像76に組み入れられる。試料12のデジタル化の間に収集した、複数の画像ストリップ77からの画像を組み立てる多くの可能な方法がある。本発明の現在の好ましい実施形態の画像組立方法は、わずかに画像ストリップ77をオーバーラップさせる、例えば10〜20画素だけ重ならせるために、かつ連続した画像76に画像ストリップ77のx/yアラインメントを微調整するために重なるピクセルを用いるために、試料12をスキャンすることである。JPEGまたは他の画像の圧縮方法を用いると、多くの場合、特別な適用によって必要とされた情報量のかなりのロスをすることなく、画像76のデータサイズ、すなわち個々の画像ストリップ77のサイズは、それらの元のサイズの5〜10パーセント以下に減らされる。スキャナ11は、意味のある画像データを含んでいない空の領域を画像76から除去することができ、画像76のデータ記憶要件をさらに減じる。
試料12を大きな連続した画像76にデジタル化する動機の一つは、典型的に、従来の光学顕微鏡下で試料12を手動スキャンするために用いられる適度な低い光学解像度で、得られた画像データに特定の計算機プログラムを適用することができることである。ステップ214において、試料12のデジタル化された部分を示す画像76の分析は、画像76の中の特定のタイプの対象物(例えば、正常か異常な細胞)を同定したり場所を見つける形態的アルゴリズムの適用のような様々な方法を含む。分析方法関数の他の具体例は、計数又は測定のアルゴリズム、または画像76での欠陥を同定するために比較または品質保証のアルゴリズム、または既に測定された同様の画像を画像76と区別するために他のタイプのアルゴリズムを含む。一旦、試料12の画像のデジタル化が完成したならば、ステップ214を含む分析法が試料12が物理的に存在するか又は利用可能であることを必要としないことは明らかに違いない。ステップ214の方法は、自動的に適用することができるか、または反復プロセスの一部としてネットワーク42によってスキャナ11に接続されるコンピュータモニタ46上で、ステップ216で示されるような画像76を対話式に精査するオペレータを含むことができる。
試料12の選択された領域の高解像度調査のためにリターン決定は、画像76から得られた情報(例えば、ステップ214および216において画像76の分析から得られた対象座標)を用いて、ステップ218の一部として行なわれる。ステップ218での決定ロジックが試料12に分析を返さないならば、オペレータの仕事が完了している。オペレータがステップ218の一部として試料12に戻すことを望むならば、ステップ220の決定ロジックは、ステップ222で示されるように高解像度調査が従来の光学顕微鏡上で行なわれるか、ステップ224によりスキャナ11を用いるかを決める。低い解像度から画像76の適度な解像度分析まで得られた座標情報が、従来の顕微鏡上の試料12の高解像度調査をガイドするのに十分であることは理解されるべきである。スキャナ11を用いる試料12の高解像度調査は、ステップ224を含み、図2の他の実施形態の前に記載された特徴の多くを用いて、スキャナ11を遠隔制御する能力を含んでいる。例えば、ピエゾのポジショナー24の位置と同様に、電動ステージ14の位置および光源30の照明強度も、ステップ224の間にオペレータの遠隔制御下にあってもよい。例えば二次元スキャンカメラ56からのリアルタイムの画像は、試料12からのデジタル化された情報ではなくこの再調査に基づいている。その代わりに、オペレータは、一次元スキャンカメラ18または二次元スキャンカメラ56のいずれかを用いて、高解像度でデジタル化される試料12の小さな部分を選択してもよい。前の場合では、プロセスは、試料12のデジタル化を含むステップ210からステップ202に戻り、次に、ステップ224に直接戻る。デジタル化される試料12の部分のサイズと、利用される顕微鏡対物レンズ16の被写界深度とに基づいたオートフォーカスが、必要なときに利用されるだろう。
図5A及び5Bを参照すると、本発明に係る画像観察フレーム100の模式図が示されており、それは、ステップ216により画像76の対話式調査のためにディスプレイモニタ46に画像76を表示するために、グラフィカル・ユーザー・インタフェースの一つの実施形態を表わす。約36,000×18,000ピクセル以上のオーダーである画像76のディスプレイは、先の具体例で記述された画像76のような、ディスプレイモニタ46のような従来のモニタまたは表示装置上では不可能である。19インチの日立CM751モニタのような現在利用可能なモニタの最大数のピクセルは、約1600×1200ピクセルであり、典型的には1024×768ピクセルである。したがって、画像76の部分だけは、画像76の全体の十分な解像度でいつでも表示することができる。しかしながら、マクロ画像102(それは、画像76の部分に相当する高解像度ズーム画像104とともに、ディスプレイモニタ46の画像76の低解像度バージョンである)を表示することは可能である。ズーム画像104において表示されるマクロ画像102の領域は、オペレータによってマクロ画像102全体に関して対話式に大きさが合わせられ移動されることができるズーム領域106としてマクロ画像102それ自体の上に示される。その最も単純な実施形態では、ズーム領域106は固定の長方形の領域であるが、手動で描かれた領域を含む他のアイコンまたは形状を実行することができる。ズーム領域106は、マクロ画像102とズーム画像104との間の重要な基準を備える。マクロ画像102の拡大された観察フィールドが、図5Bに示される。マクロ画像102の中の8つの模式対象の存在を図示で強調表示しており、4つの円および4つの長方形としてここに示され、O1 108、O2 110、O3 112、O4 114、O5 116、O6 118、O7 120およびO8 122として指定された。個々の対象は、同じクラスでこの場合同じ形で、ユニークなパターンによる同じクラスの他の対象と区別される。非常に単純な対象の使用は、単に画像観察フレーム100において表示された異なるタイプの情報の関係を図示し明確にすることだけを意図している。この場合、対象O1 108およびO2 112は、ズーム領域106内にあり、オペレータのかなり大きいズーム窓124の一部であるズーム画像104にこのように表示される。ユーザは、画像観察フレーム100の一部であるユーザ命令窓126の一部であるアイコンを用いて、ズーム画像104の電子ズームを増加させるための能力を有している。一つの実施形態では、これらのアイコンが、指示デバイスとしてマウスを用いてクリックされる。しかしながら、アイコンを指すか、アイコンと関係した機能を生じる他の手段は、従来技術で知られており、ここで同様に用いることができる。命令アイコンは、画像観察フレーム100の部分であるいずれの窓でも組み入れられ、ユーザ命令窓126を含む。例えば、電子ズーム・アイコンは、ズーム窓124の一部である。電子ズームが増加するとき、ズーム領域106のサイズは、一定サイズのズーム画像104を維持するためにマクロ画像102上で小さくなる。
あらゆる画像に関する一般情報は、その画像に対応する窓の一部として表示することができる。例えば、マクロ窓128は、ピクセルでマクロ画像102のサイズ、ピクセルでズーム領域106のサイズ、およびズーム領域106の中心ピクセル座標を表示する。ズーム窓124は、物理的な寸法の基準と一緒にズーム画像104に適用された電子ズームの量を表示する。オペレータは、マクロ窓128およびズーム窓124のようなすべての窓のサイズおよび形を、あらゆるウインドウズに基づいたソフトウェアが働く方法に似ていて、異なる試料タイプを異なる縦横比で適合するために、対話式に変更することができる。
ステップ214の結果、画像76に特定の計算機プログラムを適用することは、画像観察フレーム100の対象窓130に表示される。本発明の現在の好ましい実施形態における対象窓130は、対象画像132のような、各々が大きな連続したデジタル画像76の異なる部分に相当する多くの対象画像を含む。それらのサイズに依存して、対象画像132は、画像ギャラリー・タイプ配置で低解像度の刻印画像として表示することができる。対象画像132の一つをクリックするか指すことは、ズーム窓124の一部であるズーム画像104のように、対象画像132のそれを十分な解像度で表示することとなる。対象窓130中の対象画像132を表示する基準は、ステップ214の画像76に適用される特別の計算機プログラムに基づく。現在の具体例において、特別の計算機プログラムは、すべての対象、この場合対象O1108から対象O8122までの存在を求めて画像76を探索するために単純な境界検出およびセグメンテーション・アルゴリズムを用い、対象窓130に対象画像132としてこれらの対象を表示する。異なる特別の計算機プログラム、例えば対象を数えることができ、正方形と円とを識別することができるものは、分類のレベルを提供するために、各対象画像132に適用することができる。その結果、この場合、数の結果が画像観察フレーム100の分析窓134に表示される。現在の具体例における分析窓134は、形、正方形および丸の2つのクラスのいずれかでの対象の総計と同様に、対象の総計、この場合には8を含むことができる。画像76に適用することができる多くのタイプの特別の計算機プログラム、および、かかる特別の計算機プログラムの画像76への適用の結果として対象窓130に表示される多くのタイプの対象画像132がある。また、様々なフォーマットで分析窓134に後で表示するために高いレベルの対象分類を提供するために、多くの対象画像132に適用される特別の計算機プログラムをより洗練した多くのタイプがある。画像観察フレーム100のユーザコマンド窓126は、ステップ214の一部として行なわれる画像解析の属性およびステップ216での画像76の再調査の基準を対話式に選択するための窓を与える。
図6A及び6Bを参照すると、動的画像観察フレーム150の模式図は、ステップ216の通りに画像76を対話式で調査するためにディスプレイモニタ46に画像76を動的に表示するための本発明に係るグラフィック・ユーザー・インターフェースを表わす。画像76を対話式に調査する方法は、顕微鏡の接眼レンズを通して光学信号を観察する間に、従来の顕微鏡で適度な低解像度で試料12を手動スキャンすることの代りにデジタル画像を提示することを意図している。現在の好ましい発明の目的の一つは、ディスプレイモニタ46上で、試料12の部分のデジタル化、及び、好ましくは試料12の回折限界のデジタル化である画像76を動的に観察することにより、試料12の手動スキャンを交換する手段を提供することである。この方法には多くの利点があり、快適に制御された観察環境を含んでいる。その環境では、デジタル画像データに適用された知的なスキャン・電子ズーミング方法が、画像で選択対象(例えば異常細胞)を発見する責任を負ったオペレータの生産性を増すことができる。同定される特定の対象は、従来の顕微鏡で、又はスキャナ11を用いて、再配置され、ステップ218および220の決定ロジックに依存する。スキャナ11の接続によってネットワーク42に与えられたもう一つの利点は、試料12へのアクセスを必要とせずに、画像76の動的な調査を遠隔で行なうことができるということである。さらに、試料12(すなわち画像76)のデジタル化されたバージョンの調査は、観察された画像76の特定の領域をモニタするための様々な技術に向いている。また、オペレータが画像76の特定の領域を観察するのに費やした時間を測定することは簡単である。
動的な画像観察フレーム150は、図5Aの前に説明された画像観察フレーム100のそれと同様に、マクロ窓128内のマクロ画像102を含んでいる。動的な画像観察フレーム150は、ズーム窓124内のズーム画像104と、前に記載した画像観察フレーム100と同様に、マクロ画像102をズーム画像104に関係づけるズーム領域106とを含んでいる。オペレータはすべての窓のサイズを変更することができるが、動的な画像観察フレーム150におけるズーム窓124は、典型的には、映画画像152が、映画窓154内で十分な解像度で表示されることを可能にするために、前に記載された画像観察フレーム100中のものよりも小さくなる。映画画像152は、必要があれば更新される十分な解像度の動的画像であり、オペレータによって決定された速度および方向で画像76をスキャンすることをシミュレートする。画像76(36,000×18,000ピクセル)のような画像の具体例に再び戻ると、大きな画像76を、ユーザの選択可能な解像度でディスプレイモニタ46に表示される複数の映画画像ストリップ156に分割することにより、映画画像152を生成することができる。例えば、所望の映画画像解像度が600×600ピクセルである場合、画像76は、30個の600×36,000ピクセルの映画画像ストリップ156に分割されるか、または代わりに、60個の600×18,000ピクセルの映画画像ストリップ156に分割される。映画画像ストリップ156は、試料12の画像76のスキャンをシミュレートするために、動的な画像観察フレーム150の映画窓154に表示される。X軸あるいはY軸に沿ったスキャンをシミュレートする一つの方法は、映画画像152の対向するエッジに沿って画像ピクセルの新しい少なくとも一つのカラムを加える間に、映画画像152の一つのエッジに沿ってピクセルの前に示した少なくとも一つのカラムを除去することである。記載したように互いに異なった一連の映画画像152は、マイクロソフトからのメディア・プレイヤーのような従来のブラウザー・ソフトウェアを用いて、ディスプレイモニタ46上の映画窓154においてプレイされ且つ表示されるデジタル映画の個々のフレームを含むことができる。この種のシミュレートされたスキャンは、手動で試料12をスキャンする間に従来の顕微鏡の双眼鏡で観察されるものに似ている。
試料12の画像76のこの種のシミュレートされたスキャンの潜在的な欠点の一つは、映画画像152における対象が、典型的に動いているということであり、オペレータが対象を同定することを挑戦させ、かつ、試料12の画像76をスキャンするプロセスの間に複数の停止及び進行コマンドを実行することをオペレータに要求する。動くことの負の効果ない他のスキャン方法もスキャナ11で達成される。この代替のプロセスは、映画画像ストリップ156を、例えば600×600ピクセルの連続した画像フィールドに分割することを含む。そして、一連の映画画像152として、好ましくは画像間で重なった状態で、これらの連続した画像フィールドを一度に表示することを含む。他のサイズの画像を用いることができるので、600×600ピクセルの画像への特定の参照は、その考えの原理を図示することを意味するだけである。従来の顕微鏡上にある試料12を観察している間に長所を提供する画像76を動的に調査する多くの方法があることは、明白である。映画画像152として前に観察された画像76のそれらの領域を示すためにマクロ画像102自身の上に、スキャントラッカー158が示される。オペレータが画像76のシミュレートされたスキャン速度を制御することができるので、オペレータは他の領域よりある領域上で多くの時間を費やしてもよい。スキャントラッカー158は、例えば、相対的な滞在時間を示すためにカラー符号化され、画像76の調査の完全さに関してオペレータに即時フィードバックを提供する。他のより高度なシミュレートされた画像スキャン方法が可能である。例えば、特別のコンピュータ・アルゴリズムは、それらの重要性の観点から画像76の領域を並べて、かかる相対的重要性基準に従って映画画像152を与える。まばらな画像については、空の領域を完全にスキップして、画像76上の本質的に空フィールドの観察を不要とすることにより、オペレータが効率的になる。映画画像152から画像76のある要素を除去するために、特別のコンピュータ・アルゴリズムを使用することができる。例えば、画像76の分析にとって重要でないか、画像76に関係した判断をする際に関係しないクラッタまたは対象または細胞は、映画画像152を表示する前に画像76から削除される。動的な画像観察フレーム150のユーザコマンド窓126において、アイコンまたはボタンをクリックすることおよび指すことの間に性能改良をさらに提供するために、ジョイスティック、トラックボール、ゲームパッドまたは踏子のようなエルゴノミックスのコントローラを利用することができる。動的に画像76を調査するのに有用な機能の具体例は、前に送る、後に送る、速く前に送る、戻す、休止、ループ、そして従来のビデオ再生や編集環境で見られるものに似ている他の機能のような機能を含んでいる。状況によって、個々の画像フレーム、対象の座標、あるいは画像76の将来の参照または後の再調査のための他のデータを格納する必要性があることは理解されるべきである。
本発明が特定の実施形態によって図示され且つ記載されているが、添付された請求項および等価物で画定されるような本発明の精神および範囲から逸脱することなく、多く変形および修正がなされることは理解されるべきである。
本明細書は、好ましい設計、材料、製造方法および使用方法を記載しているが、当業者は添付された請求項を参照して本発明の範囲および精神を十分に理解するであろう。
本発明に係る光学顕微鏡システムの好ましい実施形態のブロック図である。 本発明に係る光学顕微鏡システムの第二の実施形態のブロック図である。 本発明に係る、一次元配置検出器によって得られた連続画像ストリップが試料の一部分をデジタル化する方法を説明する図である。 本発明に係る、一次元配置検出器によって得られた連続画像ストリップが試料の一部分をデジタル化する方法を説明する図である。 本発明に係る、一次元配置検出器によって得られた連続画像ストリップが試料の一部分をデジタル化する方法を説明する図である。 本発明に係る、光学顕微鏡システムの操作の単純化されたフローチャートである。 本発明に係る、画像観察フレームの模式図である。 本発明に係る、画像観察フレームの模式図である。 本発明に係る、動的画像観察フレームの模式図である。 本発明に係る、動的画像観察フレームの模式図である。
本発明は、一般に光学顕微鏡の分野に関し、より詳細には全自動高速顕微鏡スライドスキャナに関する。
光学顕微鏡に固有の制限の1つは、顕微鏡の接眼レンズを介して見ることができる試料の部分である視野と、試料を見ることができる倍率との間のトレードオフである。開口数(NA)が高い高倍率の顕微鏡対物レンズにより顕微鏡使用者は、拡大された、かつ多くの場合に高解像の画像をるが、倍率が増加すると視野は倍率の二乗に比例して劇的に減少する。1.25倍(1.25×)のような非常に倍率でも従来の顕微鏡の双眼鏡によっては典型的な顕微鏡スライドの小領域しか見ることができない。光学顕微鏡の視野制限により顕微鏡使用者は、スライドを低倍率で手動スキャンして試料または標本の全体視像を得る必要がある対象の領域が低倍率の視野の1つに現れたとき、顕微鏡使用者はより高い倍率の対物レンズを手動で選択して、標本の比例してさくなった領域の拡大された高解像度の視像を得る。病理学者が見る組織学的な標本のような試料では、病理学者にとって標本に自分自身を向けるための視野が広い低倍率対物レンズと、より詳細に試料をるため高倍率で視野の狭い1つ以上の対物レンズとの間で交互に頻繁に切換えることは普通のことである。
広い視野と高倍率の両方を同時に達成するという光学顕微鏡の限界を克服するための1つの手法は、連続した視野から個別複数のデジタル画像を取り込みそれによって広い視野の画像を作成するというものである。スキャンシステムが試料を動かすために使用され、スキャン電荷結合素子(CCD)カメラなどの方形の光学センサが所望倍率で各視野の画像を取り込む。これらの小さな視野(これ以降、画像タイルと呼ぶ)を1つの一貫した画像に組み合わせるプロセスは、画像タイル化と呼ばれる。米国特許第4,760,385号(Jannsonら)で論じられているシステムなど、初期の画像タイル化システムは、オペレータによってあらかじめ対話式に選択された試料の領域で取り込まれた、およそ36個の個別のビデオフレーム画像タイルから連続した高解像タイル化画像を作成することに基づいていた類似しているがより高度な画像タイル化システムがもっと最近では利用可能になっている。このようなシステムの1つが、Bacus Laboratories,Inc.、Downers Grove、IL.から、Bacus Laboratories,Inc.、Slide Scanner(これ以降BLISSと呼ぶ)の名販売されている。BLISSシステムの要素は、特許協力条約公報のWO98/39728およびWO98/44446に記載されている。
BLISSシステムは主に、非常に低い倍率で得られ組織学的な標本の解剖学上の向きとマクロ画像とも呼ばれる、低倍率のタイル化画像から病理学者によって対話式に選択された標本の領域のいくつかの高倍率視像とを一緒合成することを必要する病理解剖学者のために設計されている。BLISSシステムによって、病理学者は、20倍または40倍で取り込まれた選択領域の選択された高解像ミクロ画像と、1.25倍で取り込まれた低解像度マクロ画像とを素早く交互に取り替えて、従来の顕微鏡病理学者手動使用することある意味で模倣することができる。あるいは、BLISSシステムのユーザインターフェースは、別々の分割スクリーンを表示モニタに提示し、それにより病理学者には、全体のマクロ視像と、現在の高倍率視がどこに位置するかを示すマーカとが示される1つのタイル化画像は、標本の全体の大視野を得るための1の倍率のいくつかの隣り合う元の顕微鏡視像を、高倍率のいくつかの隣り合う元の顕微鏡視像組み合わせて、結合されたデータ構造を作成することによって構築される。データ構造は、低倍率画像タイルをそのマッピング座標でデジタル的にスキャンし格納すること、および同様に、高倍率画像タイルをそのマッピング座標でデジタル的にスキャンし格納することによって得られる。さらに、病理学者は標本の診断上重要な領域だけをデジタル的にスキャンし格納するために対話式に選択して、高解像度で格納される画像画素の数を大幅に減らすことができる。仮想顕微鏡スライドに似ているデータ構造は次に、インターネットなどのネットワークを通じて遠隔の閲覧者に転送することができるしたがって、遠隔のユーザは、一連の連続したタイル化画像が提供され、各画像タイルは、つの異な光学倍率それぞれで、1つの小さな光学視野に実質的に等しい。
BLISSシステムは、ニューヨークのソーンウッドにあるCarl Zeissから販売されているAxioplan−2顕微鏡システムなどの、コンピュータ制御自動顕微鏡の周辺に一体化されている。このタイプのハイエンドの顕微鏡は、照明サブシステム、合焦サブシステム、顕微鏡対物レンズサブシステム、フィルタリングサブシステム、ならびに最適なケーラー照明を実現するために使用できる複数の視野絞りおよびコンデンサ絞り、または光学止め具を含む、いくつかのサブシステムのコンピュータ制御のための機能を有する本質的に、顕微鏡のすべての可動要素はコンピュータから、また原則としてインターネットを介して遠隔地から制御することができるすべての絞りの位置、ならびにフォーカスおよび照明レベルなどの他の設定はコンピュータに格納さ手作業の介在なしに顕微鏡の対物レンズを変えること可能にる。BLISSシステムはまた、優れた位置調整得るため位置エンコーダおよび閉ループフィードバック制御を用いて0.1μmの位置調整精度を達成するコンピュータ制御2軸(上下左右の動きに対するx/y)平行移動ステージを備える。752×480画素を有するCCDカメラ、および画像フレームグラバもまた、BLISSシステムに一体化される。
画像タイルに基づいているので、BLISSシステムは、画像タイル手法いくつかの知られている不利な点がある。例えば、BLISSシステムの第の不利な点は、タイル化データ構造を取得するのに長時間(通常は20分以上)かかることである。これらの時間見積は、手作業の介在中に、例えば低倍率マクロ画像の選択領域から高倍率タイル化画像をる前に、受ける可能性のあるいかなる追加的な遅延考慮されていない。タイル化、電動ステージ上にあるスライドを単独の視野の幅に等しい離散的な段階で、BLISSシステムで使用されるCCDカメラなどの静止スキャンカメラに対して動かすことを要する。画像タイルは段階ごとに得られる。次に、個々の画像は一緒にタイル化されて対象の領域の継ぎ目のない大きい画像が作成される。画像のタイル化は、画像が取り込まれている間試料とカメラとの間のいかなる顕著な相対的動き最小にする必要があるために、比較的遅い。相対的動きの主たる原因は、一連の停止および進行コマンド発行したの、機械的位置調整ステージの整定時間である。容認できないスミアリングのない画像を取得するには、ステージが整定されるまで、理想的には1つ未満の画素まで、待つことが必要である。例えば、40×で、1/2インチ型CCDカメラ取り込まれ単一の画像タイルの幅は、試料の160μmに相当する。この倍率で、752画素幅のCCDカメラの個々の画素それぞれは、試料の約0.2μmの範囲を定める。したがって、単一のタイル化ステップには、機械ステージの加速および減速に伴って比較的大きな160μm移動必要となる。画像のいかなるスミアリングも避けるために、画像タイルは、機械ステージが1つより少ない画素、すなわち約0.2μmの動きまで整定した後でしか取り込まれてはならない。米国特許5912699号(Hayengaらは、従来の面スキャンカメラを用いる画像タイル化とストロボ光同期とを組み合わせる代替方法を提案することによって、従来の画像タイル化システムのこのよく知られた整定時間制限に対処している。BLISSシステムを含むタイル化システムの取り込み時間が遅いことにより画像タイル化の実際的な実用性は、最初の非常に低い倍率のマクロ画像と、後に続く高い倍率の取り込みのための小領域の選択との間に長い手作業介在がある、2ステッププロセスに限定される。
タイル化システムに付随する遅い取得時間は、タイル化されたデータ構造を作成するプロセスに手作業が介在する必要があるという、BLISSシステムの第の不利な点につながる。1.25×という非常に低い顕微鏡対物レンズ倍率でスライドをプレスキャンした、BLISS操作者は、高倍率対物レンズを用いてスキャンされるべき対象の関連領域マクロ画像を調べる。手作業介在1つの動機付けは最終データ構造の大きさを制限することであり得るが、手作業介在妥当な時間で取得できより小さな領域を画定するのに絶対に必である。例えば、20×で顕微鏡スライドを完全にスキャンするためにBLISSシステムを使用することは、取得時間考慮の故に、実用的ではない。20×倍率では、752×480画素の1/2インチ型スキャンCCDを用いて、顕微鏡スライドの2インチ×1インチの領域をデジタル化するために、約16300の個別画像タイルを取り込まなければならない。各画像タイルを得るために約1秒かかる仮定すると、繰り返される16,300の停止および進行のコマンドのそれぞれに伴う比較的長い機械的整定時間に大部分は起因して合計取得時間は4時間30分になるはずである。40×倍率では、取得時間が4倍18時間になるはずである。10×倍率でさえも、取得時間が1時間を越えるはずである。しかし、BLISSシステムの1.25×という非常倍率では、顕微鏡の2インチ×1インチ面積のマクロ画像を作成す64の画像タイルしか必要がないこのようなマクロ画像合計取得時間は約1分である。
どんな画像タイル化システムの取得時間制限でも非常に倍率のマクロ画像の取り込みを必要とし、高倍率で取り込まれるべき小さな領域のこのマクロ画像から対話式に選択することが後にくことをここで理解すると、BLISSシステムの第の不利な点が明らかになる。この第の不利な点は、非常に倍率のマクロ画像から対象の領域位置を特定することが、解剖学的参照情報が利用可能である試料に実際上限定されるという認識る。したがって、BLISSシステムは、Papスミアリングなどの非組織学的試料では有用性が限定されている。なぜならば、のような細胞試料は本来的に解剖学的な向きについての情報を欠いているからである。のような試料では、細胞は、顕微鏡スライドの広い領域にわたって多かれ少なかれランダムに分布している。高い光学倍率でタイル化されるべき対象の特定の小さな領域を画定する機能を用いずにマクロ画像を用いる、唯一の代替法は試料全体をスキャンしデジタル化することである。しかし、前に説明したように、画像タイル化方法で必要とされた長い取得時間により、この代替法は実際には実用的なものる。別の言いかたをすれば、高倍率での画像タイル化顕微鏡スライドの特定の、かつ著しくさい領域を画定するための手作業介在がなければ、細胞学的試料不可能性、タイル化手法は有用性が限定される手作業介在の必要がない、全自動であるスキャン顕微鏡スライドのシステムが好まれるはずであるのようなシステムはまた、スライドが解剖学的参照情報を含むか否かにかかわらず、すべてのタイプの顕微鏡スライドに適しているはずである
BLISSシステムの第の不利な点は、複雑であることや高価であることである。BLISSシステムは大部分が複数の対物レンズおよび高価なx/yステージ閉制御ループを備えたサードパーティのハイエンド全自動顕微鏡を含む、市販の構成要素に基づいている。BLISSシステムの提示エンドユーザ価格は10万ドルを優に超える。BLISSシステムの数の自動要素は、その高価な自動化にもかかわらず、操作および維持が困難なことがある複雑なシステムである。簡単で信頼性が高く、BLISSシステムのコストの約1/3で得ることができる、顕微鏡スライドスキャンするシステムが好ましいはずである
BLISSシステムの固有のコスト的に不利な点は、従来の顕微鏡に基づあらゆる顕微鏡スライドスキャンシステムのいくつかの制限事項である。BLISSシステムの最も高価な構成要素は、自動化顕微鏡自体である。全自動顕微鏡をBLISSシステムに組み入れる理由の1つは、顕微鏡の対物レンズタレットが自動的に回転して顕微鏡の対物レンズを例えば1.25×から40×へ変えるとき、多くの設定を自動的に変更する必要である。典型的な顕微鏡は、顕微鏡の対物レンズを変えると最適な焦点が異なることになりケーラー照明には視野絞りおよびコンデンサ絞りの新しい設定必要になる。また異な照明強度CCDのダイナミックレンジを最適に満たすために必要になる。顕微鏡の対物レンズを変える必要性をなくすことができれば、のような大規模な自動化の必要性がなくなる従来の光学顕微鏡の視野制限事項を克服することができるだけでなく、顕微鏡の複数の対物レンズの必要性をなくすこともできる、BLISSなどの画像タイル化システムに勝る十分なコストの利点が得られる高速スキャン方法が好ましい。単一の顕微鏡の対物レンズの必要性はまた従来の顕微鏡の光学部品によって課せられ制限事項を削除することにも密接な関係がある。顕微鏡スライドがスキャンされ、回折制限解像度でデジタル化されること、すなわち、顕微鏡の対物レンズの解像度で得られるすべての可能な空間細部がデジタル画像で取り込まれることを確実にする光学設計に基づいたシステムが好ましい。回折制限デジタル画像が取り込まれ悪化した低い解像度と倍率の画像標準的なコンピュータアルゴリズムを用いて作成することができる
多くの顕微鏡の用途において、試料全体または試料の大部分、欠陥がないかあるいは特殊物体、例えば異常な細胞存在するか存在しないを調べられる必要ある。それに続く高解像度調査で対象の特定の領域を識別するために、試料の大部分または試料全体さえも低解像度(通常は10×〜20×)で手動スキャンしなければならないとき、顕微鏡検査非常に労働集約的なものになる。長時間の手動スクリーニング、または単一視野を見続けることにより生産性および正確さに悪影響を及ぼし得る疲れ、疲労および視覚順化が起こる。それに続く高解像度調査に関する、対象の関連領域を素早く見つけ位置を特定することの問題は、顕微鏡を、補助的なリニアアレイ検出器付きの顕微鏡と自動位置調整テーブルとを組み合わせ、すべてコンピュータ制御される従来のリアルタイムのスキャンシステムを使用して対処されている。米国特許922282号(Ledleyら)で論じられているシステムなど、いくつかの手法は、物理的スライドの領域上で見つけた関連対象物のx/yステージの座標を格納して、対象物(この場合、特製のガラス顕微鏡スライド上にあるマイコバクテリア)の再配置を可能にすることに基づいている。マイコバクテリアのx/y座標は、専用のリアルタイムパターン認識回路を用いて得られ、この座標は、比較的大きい5μmステップで動くステージに同期しているラインスキャンカメラで測定された強度情報に適用される。あるいは、ビデオカメラなどの面スキャンセンサ類似した回路とともに、選択された対象物のx/y座標を得るための基礎として使用することができるこの後者の場合、ステージは、タイル化方法で必要なステージ移動と同様に、完全な像フィールドに対応した大きなステップで動フォーカスは即時自動焦点制御を用いて維持される。米国特許700298号(Palcicらで論じられている代替システムは、組織フラスコで成長する細胞のx/y座標をリアルタイムで記録する目的で広い領域をスキャンするために、オートフォーカス手段を備えた、市販の顕微鏡に取り付けられたリニアアレイCCDを用いる。これらの既知の方法およびシステムはすべて、スキャン過程の間に取得され処理されデジタル情報のリアルタイム分析に基づいている。多くの場合、専用回路が、リニアアレイ検出器から読み出された強度データを直ちに処理して決定をリアルタイムで行うことを可能にするために使用される。新規の代替アプローチは、手動スライドスキャンの労働集約的態様を自動化するのに十分な光学解像度で顕微鏡スライド全体の大きな連続した画像を素早く組立てるために、リニアアレイセンサを使用することである。デジタル画像処理方法と一緒に使用できるシステムが、手動スライドスキャンの代替として好ましい
顕微鏡スライドの手動スキャンに付随する別の共通問題は、スライドの部分がスライドの手動のx/yスキャンの間に容易に見逃されることである。特にスライドが顕微鏡から取り外されされた後では前に特定した細胞を再配置することは難しい可能性がある。x/yの手動スキャンの間にスライドのあらゆる領域を見逃さないという題は、手動で調べられ物理的スライドの領域のx/y位置および滞留時間を記録して、見逃された、または場合によって速く見すぎたスライドの領域を強調表示する位置エンコード品質保証システムによって対処されてきた。米国特許793969号(Kamentskyらは、技術者が以前に見直したPapスミアリングスライドの品質保証方法を論じている。この方法は、スライド見直しの間に技術者訪れたすべてのフィールドのx/yステージ座標を記録すること、および関係のあるスライド滞留時間のx/yマップを作成することに基づいている。
顕微鏡スライド全体を高速でスキャンしデジタル化することできる簡単で信頼性の高いシステムが確かに必要とされているこのスキャンおよびデジタル化は、顕微鏡スライドの手動スキャンで用いられるものと同等の光学解像度で実施されるべきであり、それによって、スライド全体を手動スキャンする代りに、またはそれに加えて、デジタル画像データセットに画像処理アルゴリズムを適用すること可能にる。理想的には、のようなシステムは、画像取得プロセスいかなるタイプの手作業介在も必要とされるべきでない。のようなシステムはまた、スライドが解剖学的参照情報を含むか否かにかかわらず、あらゆるタイプの顕微鏡標本に適しているべきである。理想的には、このようなシステムは、従来のシステムより低コストであるべきである。このようなシステムはまた、従来の市販の顕微鏡の制限事項および固有のコストによって制約されるべきでく、それによって回折制限デジタル画像の取得を可能にする光学設計可能にる。本発明の主たる目的は、これらの必要性を解決すること、および関係するさらなる利点をもたらすことである。
本発明は、コンピュータ制御顕微鏡スライドスキャナの部である位置調整ステージと同期したリニアアレイ検出器を用いて、顕微鏡試料全体、または顕微鏡試料のかなり大きい部分を完全自動化高速スキャンおよびデジタル化するための装置および方法を提供する。本発明はまた、試料の一連のスキャンから得られた画像ストリップを単一の連続したデジタル画像に構成する方法を提供する。本発明はさらにこの大きなデジタル画像のサブ領域を異なる倍率で、試料全体の低倍率のマクロ画像とともに、静止状態で表示する方法を提供する。本発明はまた、連続したデジタル画像の部分を、操作者と対話して、または対話せずに、動的に表示する方法提供する。本発明の好ましい1つの実施形態では、スキャナのすべての要素は、インターネットまたはローカルインターネットなどのネットワークとの一次接続を有する単一のエンクロージャの一部である。この実施形態では、好ましい試料のタイプは顕微鏡スライドであり、照明および画像化光学部品は、回折制限デジタル画像化用に最適化された透過モード光学部品と一致している。
本発明の目的、利点、および特徴は、添付の図面と併せ読めば以下の詳細な説明からより容易に理解されよう。
本発明による光学顕微鏡システムの好ましい実施形態のブロック図である。 本発明による光学顕微鏡システムの第の実施形態のブロック図である。 本発明によるリニアアレイ検出器によって得られた連続した画像ストリップにより試料の一部分をデジタル化する方法を示す図である。 本発明によるリニアアレイ検出器によって得られた連続した画像ストリップにより試料の一部分をデジタル化する方法を示す図である。 本発明によるリニアアレイ検出器によって得られた連続した画像ストリップにより試料の一部分をデジタル化する方法を示す図である。 本発明による光学顕微鏡システムの動作簡略化フローチャートである。 本発明による画像表示フレーム概略図である。 本発明による画像表示フレーム概略図である。 本発明による画像表示フレーム概略図である。 本発明による画像表示フレーム概略図である。
まず、図1を参照すると、本発明による光学顕微鏡システム10の好ましい実施形態のブロック図が示されている。システム10の心臓部は、標本または試料12をスキャンしかつデジタル化する機能を果たす顕微鏡スライドスキャナ11である。試料12は、光学顕微鏡によって調べられるあらゆるものであり得る。例えば、試料12は、光学顕微鏡によって調べられる顕微鏡スライドまたは他の試料タイプであり得る。顕微鏡スライドが、生きている、または死んでいる、標示付きまたは標示なしの組織や細胞、染色体、DNA、蛋白質、血液、骨髄、尿、バクテリア、ビーズ、生検材料、または他のタイプの生物学的な材料もしくは物質を含む標本の観察基板としてしばしば使用される。試料12はまた、マイクロアレイとして通常知られている任意の、およびすべての試料を含めてあらゆるタイプのスライドまたは他の基板の上に堆積されている、cDNAもしくはRNAなどのあらゆるタイプのDNAもしくはDNA関連材料または蛋白質のアレイであり得る。試料12はマイクロタイター板(例えば96ウェルプレート)でよい。試料12の他の例は、集積回路基板、電気泳動レコード、ペトリ皿、フィルム、半導体材料、法医学材料または機械加工部品が含まれる
スキャナ11は、電動ステージ14、顕微鏡対物レンズ16、ラインスキャンカメラ18およびデータ処理装置20を含む。試料12はスキャン用の電動ステージ14の上に配置される。電動ステージ14はステージコントローラ22に接続されこのステージコントローラはデータ処理装置20に接続される。データ処理装置20は、ステージコントローラ22によって電動ステージ14上の試料12の位置を決定する。好ましい実施形態では、電動ステージ14は、試料12の平面にある少なくとも2つの軸(x/y)試料12を動かす。光学のz軸に沿った試料12の微小な動きもまた、スキャナ11の特定の用途に、例えば焦点制御のために必要になり得るz軸の動きは、Polytec PIのPIFOC、またはPiezosystem JenaのMIPOS などのピエゾポジショナー24を用いて好ましくは実現される。ピエゾポジショナー24は、顕微鏡対物レンズ16に直接取り付けられ、データ処理装置20に接続され、かつ、ピエゾコントローラ26を介してデータ処理装置20によって指示される。粗い焦点調節を行う手段もまた必要になる場合があり、電動ステージ14または手動のラックアンドピニオンの粗い焦点調節(せず)の一部としてのzの動きによって行うことができる。
好ましい実施形態では、電動ステージ14は、滑らかな運動および優れた直線および平面精度を得るために、ボールベアリングリニアウェイを備えた高精度位置調整テーブルを含む。例えば、電動ステージ14は、互いに上に積み重ねられた2つのDaedalモデル106004テーブルを含む。他のタイプの電動ステージ14は、スキャナ11に適しており、ボールベアリング以外の方法に基づいた、積み重ねられた1軸ステージ、中央が開いており試料の下からの透過照明に特に適しているもしくは複数軸の位置調整ステージ、または複数の試料を支持することのできる大きなステージを含む。好ましい実施形態では、電動ステージ14は2つの積み重ねられた一軸の位置調整テーブルを含んでおり、それぞれが、2ミリメートル親ネジおよびNema23ステッピングモータに連結されている。毎秒25回転という最大親ネジ速度で、電動ステージ14上の試料12の最大速度は、毎秒50ミリメートルになる。直径の大きい(例えば5ミリメートル)親ネジ選択することにより、最大速度を毎秒100ミリメートル以上に増加させることができる。電動ステージ14は、機械的または光学的位置エンコーダを装備することができるが、システムにかなり費用が加わるという欠点がある。それゆえに、好ましい実施形態は位置エンコーダを含ない。しかし、ステッピングモータの所定の場所にサーボモータを使用する場合には、適切な制御のために位置フィードバックを使用しなければならない
データ処理装置20からの位置コマンドは、ステージコントローラ22においてモータ電流コマンドまたは電圧コマンドに変換される。好ましい本実施形態では、ステージコントローラ22は2軸サーボ/ステッパモータコントローラ(Compumotor 6K2)および2つの4アンプマイクロステッピングデバイス(Compumotor OEMZL4)を含む。マイクロステッピングは、1.8度の比較的大きな単一モータステップよりはるかに小さな刻みでステッパモータ命令する手段になる。例えば、100のマイクロステップでは、試料12は、0.1マイクロメートルほどにも小さなステップで移動するように命令することができる。25,000のマイクロステップ、本発明の好ましい本実施形態で用いられる。より小さなステップサイズもまた可能である。電動ステージ14およびステージコントローラ22の最適な選択が、試料12の性質、試料をデジタル化するための所望時間、および試料12の得られデジタル画像の所望の解像度を含む多くの要因に依存することは明らかなはずである
顕微鏡対物レンズ16は一般に利用可能なあらゆる顕微鏡対物レンズとすることができる。当業者は、どの対物レンズを用いるべきかの選択が特定の状況によって決まること理解されよう。本発明の好ましい実施形態では、顕微鏡対物レンズ16は無限補正タイプのものである。
試料12は、光源30および照明光学部品含む照明システム28によって照明される。好ましい本実施形態の光源30は、光出力を最大限にするための凹面反射鏡、および熱を抑えるKG−1フィルタを備えた可変強度ハロゲン光源を含むしかし、光源30はまた他のタイプのアークランプ、レーザーまたは他の光源とすることもできる好ましい本実施形態の照明光学部品32は、光軸に直角である2つの結合した平面を備え標準のケーラー照明システムを含む。照明光学部品32は、カールツイス、ニコン、オリンパスまたはライカなどの会社から販売される市販の最も入手可能な複顕微鏡に見いだすことができる、明視野照明光学部品を代表するものである。結合した面の1つの組は、(i)光源30によって照明される視野絞り開口、(ii)試料12の焦点面によって画定される対面、および(iii)ラインスキャンカメラ18の光感応要素を含む面含む第2の結合した平面は、(i)光源30の一部であるバルブのフィラメント、(ii)照明光学部品32の一部である集光器光学部品前に集光器絞りの開口および(iii)顕微鏡対物レンズ16の後焦点面含む好ましい本実施形態では、試料12は透過モードで照らされ、試料12によって放射される光エネルギー、または逆に試料12で吸収される光エネルギーを感知するラインスキャンカメラ18を用いて撮像される
本発明のスキャナ11は、試料12から反射される光エネルギーを検出するのに同様に適している。の場合、光源30、照明光学部品32および顕微鏡対物レンズ16は、反射撮像との適合性に基づいて選択されなければならない。したがって、可能な1つの実施形態は、試料12の上に配置された光ファイバー束を介する照明であり得る。他の可能性は、モノクロメータによってスペクトル的にコンディショニングされる励起が含まれる。顕微鏡対物レンズ16が位相差顕微鏡と互換性をもつように選択される場合、照明光学部品32の一部である集光器光学部品の少なくとも1つの位相止めを組み込むことによ、スキャナ11位相顕微鏡に使用ることが可能になる。当業者には、微分干渉コントラスト顕微鏡法および共焦点顕微鏡法などの他のタイプの顕微鏡に必要な修正がすぐに明らかになるはずである。全体として、スキャナ11は、適切であるがよく知られている修正によって、光学顕微鏡の任意の既知のモードで顕微鏡を用いる試料の調査に適している。
顕微鏡対物レンズ16とラインスキャンカメラ18との間に、顕微鏡対物レンズ16によって取り込まれる光信号の焦点をラインスキャンカメラ18の光感応要素の上に合わせるラインスキャンカメラ合焦光学部品34がる。現代の無限補正顕微鏡では、顕微鏡対物レンズと接眼レンズ光学部品との間、または顕微鏡対物レンズと外部画像ポートとの間合焦光学部品は、顕微鏡の観察チューブの一部であるチューブレンズとして知られている光学要素からる。多くの場合チューブレンズは、コマまたは非点収差が生じることを防ぐために複数の光学要素からる。比較的最近の、従来の有限チューブ光学部品から無限補正光学部品への変化の動機のうちの1つは、試料12からの光エネルギーが平行である物理的な空間を増加させることであって、この光エネルギーの焦点ポイントが無限にあることを意味する。この場合、ダイクロイックミラーまたはフィルタなどの付属要素は、光学パス倍率を変更せず、または、好ましくない光学アーチファクト生じさせずに無限空間に挿入することができる。
無限補正の顕微鏡対物レンズ通常、無限マーク記される。無限補正顕微鏡対物レンズの倍率は、チューブレンズの焦点距離を対物レンズの焦点距離で割った与えられる。例えば、焦点距離が9ミリメートルの対物レンズが用いられる場合、焦点距離が180ミリメートルのチューブレンズ倍率20×になる。別々の顕微鏡メーカーによって製造された対物レンズが互換性をもたないことの理由の1つは、チューブレンズ焦点距離標準化がされていないためである。例えば、オリンパス(180ミリメートルのチューブレンズ焦点距離を使用する会社)の20×対物レンズは、200ミリメートルの異なるチューブ長焦点距離に基づくニコン顕微鏡では20×倍率が得られない。代わりに、20×記さ焦点距離が9ミリメートルのオリンパス対物レンズの有効倍率は、200ミリメートルのチューブレンズ焦点距離を対物レンズの9ミリメートルの焦点距離で割ることにより得られ22.2×になる。顕微鏡を分解しなければ、従来の顕微鏡のチューブレンズの変更は実際上不可能である。チューブレンズは顕微鏡の重要な固定要素の一部である。別々のメーカーによって製造された対物レンズと顕微鏡との間の非互換性をもたらすもう1つの要因は、接眼レンズ光学部品、試料観察するための双眼鏡の設計である。光学補正のほとんどは顕微鏡対物レンズの中で設計されているが、ほとんどの顕微鏡ユーザは、1つのメーカーの双眼鏡光学部品とその同じメーカーの顕微鏡対物レンズと一致させることには、最良の視像を得るための何らかの利益があると依然として確信している。
ラインスキャンカメラ合焦光学部品34は、機械的なチューブの内部に装着されたチューブレンズ光学部品含む。その好ましい実施形態では、スキャナ11が従来の視覚観察用の双眼鏡または接眼レンズを欠いているので、対物レンズと双眼鏡との間の潜在的な非互換性という従来の顕微鏡による問題は直ちになくなる。当業者は、顕微鏡の接眼レンズとディスプレイモニタ上のデジタル画像との間で同焦点を実現する問題もまた、いかなる接眼レンズもないために解消されること同様に理解されよう。スキャナ11もまた、試料12の物理的な境界によってのみ実際に制限される視野得ることによって従来の顕微鏡の視野制限を克服するので、のスキャナ11によって実現されるような全デジタル撮像顕微鏡における倍率の重要限定される。試料12の一部分がデジタル化された後は、その倍率を増加させるために、ときには電気的ズームとして知られ電子倍率を試料12の画像に適用することは簡単である。画像の倍率を電子的に増させることは、画像を表示するために用いられるモニタ上その画像サイズを増させる効果がある。あまりに大きな電子ズームが適用される場合には、ディスプレイモニタは拡大画像の部分しか示すことができないしかし電子倍率を用いて、最初にデジタル化された光信号になかった情報を表示することは可能である。スキャナ11の目的1つが高品質デジタル画像を得ることであるので、顕微鏡の接眼レンズによる視覚観察の代わりに、スキャナ11によって得られた画像の内容が可能な限り画像の細部を含むこと重要である。解像度という用語はこのような画像の細部記述するために通常用いられる。また、回折制限という用語は光信号で得られる波長制限最大空間細部記述するために用いられる。スキャナ11は、チューブレンズ焦点距離選択することによる回折制限デジタル撮像行うこのチューブレンズ焦点距離は、く知られているナイキストサンプリング基準に従ってラインスキャンカメラ18などの光感知カメラ個々の画素要素のサイズと、顕微鏡対物レンズ16の開口数との両方適合する。倍率ではなく開口数が顕微鏡対物レンズ16の解像度制限属性であることはよく知られている
ラインスキャンカメラ合焦光学部品34の一部であるチューブレンズ焦点距離の最適選択を説明する助けになる。前に論じた9ミリメートルの焦点距離を有する20×顕微鏡対物レンズ16を再び考察し、この対物レンズが0.50の開口数を有していると仮定する。集光器からのかなりの低下がない仮定すると、500ナノメートルの波長でのこの対物レンズの回折制限解像力は、およそ0.6マイクロメートルになり、よく知られているアッベ(Abbe)の関係を利用して得られる。好ましい実施形態で複数の14平方マイクロメートルの画素を有するラインスキャンカメラ18が試料12の部分を検出するために用いられるとさらに仮定する。サンプリング理論に従って、少なくとも2つのセンサ画素が最も小さな分解可能な空間特徴に内在する必要がある。この場合チューブレンズは2つの14マイクロメートル画素に相当する28マイクロメートルを0.6マイクロメートル(最小の分解可能な特徴寸法)割って得られる46.7の倍率を達成するように選択されなければならない。したがって、最適のチューブレンズ光学焦点距離は、46.7×9で得られる約420ミリメートルになるしたがって、420ミリメートルの焦点距離を有するチューブレンズ光学部品を備えたラインスキャン合焦光学部品34は、最良の可能な空間分解能を備えた画像を、同じ20×対物レンズを用いて、顕微鏡で標本を観察することにより得られものと同様に、取得することができる。繰り返す、スキャナ11は、高倍率(この例では約47×)光学構成従来の20×顕微鏡対物レンズ16を、回折制限のデジタル画像を得るために利用する。より高い開口数(例えば0.75)を有する従来の20×倍率対物レンズ16が用いられる場合回折制限撮像のため必要なチューブレンズ光学倍率は、68×の全体の光学倍率に対応する約615ミリメートルになる。同様に、20×対物レンズの開口数が0.3だけである場合、最適のチューブレンズ光学倍率は、およそ252ミリメートルのチューブレンズ光学焦点距離に対応する約28×にしかならないラインスキャンカメラ合焦光学部品34はスキャナ11のモジュール要素であり、最適デジタル画像化に必要なときに交換することができる。回折制限デジタル撮像の利点は、例えば、倍率の増加に伴う信号輝度の減少が、適切に設計された照明システム28の強度を増加させることにより容易に補償される、明視野顕微鏡の用途で特に重要な意義を持つ。
ちょうどのスキャナ11について説明されているように、チューブレンズ倍率を有効に増加させる従来の顕微鏡に基づいたデジタル画像システムに、外部の倍率増加光学部品を取り付けて回折制限撮像を実現すること原則としては可能である。しかし、結果として生じる視野の減少は受け入れがたいことが多く、この手法が実際的なものになるさらに、顕微鏡の多くのユーザが、独力でこれらの技術を有効に使用するために、通常回折制限撮像の詳細に関して十分に理解しない。実際上、接眼レンズを通して見ることができるものにより似ているものに視野のサイズを増加させようとして、デジタルカメラは、倍率を減少する光学カプラを備えた顕微鏡ポートに取り付けられる。目標回折制限のデジタル画像を得ることである場合、非拡大光学部品を加える標準的な行為は誤ったステップである。
従来の顕微鏡では、異なる解像度および倍率で標本を観察するために、異なる能力の対物レンズが典型的に用いられている。標準顕微鏡は、5つの対物レンズを保持する対物レンズ取り付け台を有している。のスキャナ11などの全デジタル撮像システムでは、望ましい最高空間解像度に対応する開口数を備えた単一の顕微鏡対物レンズ16必要とされる。スキャナ11の好ましい本実施形態では、1つだけの顕微鏡対物レンズ16を提供する。一旦回折制限デジタル画像がこの解像度で取り込まれたら、標準のデジタル画像処理技術を用いて、任意の望ましい低い解像度および倍率で画像情報を提示することは簡単である。
スキャナ11の好ましい本実施形態は、リニアアレイで整列された1024個の画素画像素子)を備えた、各画素が14×14マイクロメートルの寸法を有する、Dalsa SPARKラインスキャンカメラ18に基づく。任意の他のタイプのリニアアレイは、カメラの一部としてパッケージされていても撮像電子モジュールにカスタム組み込みされていても、用いることができる。好ましい本実施形態におけるリニアアレイは、8ビット量子化を有効に行うが、より高い、または低いレベルの量子化を行う他のアレイも用いことができる。3チャネルの赤緑青(RGB)の色情報または時間遅延積分(TDI)に基づいたアレイも用いられてよい。TDIアレイは、試料の前の画像化領域からの強度データを合計して、積分段階数の平方根に比例しているSNRを増加させることによって、出力信号実質的によりよい信号対雑音比(SNR)を実現する。TDIアレイは、リニアアレイの複数の段階を含むことができる。TDIアレイは、24、32、48、64、96、またはそれより多くの段階で利用可能である。スキャナ11はまた、512画素のもの、1024画素のもの、4096画素のものを含む様々なフォーマットで製造されるリニアアレイもサポートする。照明システム28およびラインスキャンカメラ合焦光学部品34への適切であるがよく知られている修正が、より大きなアレイ収容するために必要とされ得る。様々な画素サイズを備えたリニアアレイもスキャナ11用いることができる。任意のタイプのラインスキャンカメラ18を選択するための顕著な要件は、高品質像を得るために、試料12のデジタル化の間に、試料12がラインスキャンカメラ18に対して動くことができるということであり、従来技術で知られている従来の画像タイル化手法の静止要件を克服する。
ラインスキャンカメラ18の出力信号はデータ処理装置20に接続される。好ましい本実施形態におけるデータ処理装置20は、撮像基板またはフレームグラバなどの少なくとも1つの信号デジタル化電子回路基板をサポートするため、付随的な電子装置(例えばマザーボード)を備えた中央処理装置を含む好ましい本実施形態では、撮像基板はEPIX PIXCID24 PCIバスの撮像基板である、EPIX基板の代わりに用いることができる、様々なメーカーからの他の多くのタイプの撮像基板またはフレームグラバがある。一代替実施形態は、撮像基板をすべてバイパスし、ハードディスクなどのデータ記憶装置3にデータを直接格納するために、Firewireとして知られているIEEE 1394などのインタフェースを用いるラインスキャンカメラであり得る
データ処理装置20もまた、データの短期記憶のためにランダムアクセスメモリ(RAM)などのメモリ36に接続され、長期データ記憶のためにハードドライブなどのデータ記憶装置38に接続される。さらに、データ処理装置20は、ローカルエリアネットワーク(LAN)などのネットワーク42、広域ネットワーク(WAN)、大都市圏ネットワーク(MAN)、イントラネット、エクストラネットまたはグローバルインターネットに接続される通信ポート40に接続される。メモリ36およびデータ記憶装置38もまた互いに接続される。データ処理装置20はまたラインスキャンカメラ18およびステージコントローラ22などのスキャナ11の重要な要素を制御するために、または様々な画像処理機能、画像解析機能もしくはネットワーキングのために、コンピュータプログラムをソフトウェアの形で実行することができる。データ処理装置20は、Windows(登録商標)、Linux、OS/2、Mac OSおよびUnix(登録商標)などのオペレーティングシステムを含む任意のオペレーティングシステムに基づくことができる。好ましい本実施形態では、データ処理装置20は、Windows NTオペレーティングシステムに基づいて動する。
データ処理装置20、メモリ36、データ記憶装置38および通信ポート40はそれぞれ、従来のコンピュータに見られる要素である。例は、Pentium(登録商標)III 500MHzプロセッサおよび最大756メガバイト(MB)のRAM特徴として備えるDell Dimension XPS T500などのパーソナルコンピュータである。好ましい本実施形態では、コンピュータ、データ処理装置20、メモリ36、データ記憶装置38を含む要素および通信ポート40は、すべてスキャナ11に内部にあり、その結果、システム10の他の要素とのスキャナ11の唯一の接続部通信ポート40になる。スキャナ11の代替実施形態では、コンピュータ要素は、コンピュータ要素とスキャナ11の間対応する接続を備えたスキャナ11の外部にある。
スキャナ11は、本発明の好ましい本実施形態では、光学顕微鏡検査、デジタル撮像、電動試料位置調整、計算、およびネットワークベースの通信手段単一エンクロージャユニットに組み込む。データの入出力の主要手段として通信ポート40を備えた単一エンクロージャユニットのようスキャナ11をパッケージすることの主な利点は、複雑さの低減および信頼性の向上である。顕微鏡、光源、電動ステージ、カメラおよびコンピュータが通常は別々の供給業者から供給され、大幅な統合化およびメンテナンスを必要とする従来の顕微鏡ベースの撮像システムとは非常に対照的にスキャナ11の様々な要素は一緒に機能するように最適化される。
通信ポート40は、ネットワーク42を含めた、システム10の他の要素との高速通信手段を提供する。通信ポート40用の好ましい通信プロトコルは、伝送制御およびインターネットワーキング用のTCP/IPプロトコルとに、イーサーネットなどのキャリヤ検知多重アクセス衝突検出プロトコルである。スキャナ11は、広帯域、ベースバンド、同軸ケーブル、撚線対、光ファイバー、DSLまたは無線を含む、任意のタイプの伝送媒体で動作すること意図されている
好ましい本実施形態では、スキャナ11の制御、およびスキャナ11によって取り込まれた画像データの見直しは、ネットワーク42に接続されているコンピュータ44で行われる。コンピュータ44は、その好ましい実施形態において、オペレータに画像情報を提供するためにディスプレイモニタ46に接続される。複数のコンピュータ44は、ネットワーク42に接続することができる好ましい本実施形態では、コンピュータ44は、MicrosoftのInternet ExplorerまたはAOLのNetscape Communicatorなどのネットワークブラウザを用いて、スキャナ11と通信する。画像は、ほとんどの市販ブラウザに既に組み込まれる標準的な画像圧縮方法と互換性がある画像フォーマットであるJPEGなどの共通圧縮形式でスキャナ11に格納される。他の標準または非標準、不可逆または可逆の画像圧縮フォーマットもまた機能する好ましい本実施形態では、スキャナ11は、スキャナ11からコンピュータ44へ送られるウェブページに基づくオペレータインタフェースを提供するウェブサーバである。画像データの動的な見直しでは、スキャナ11の好ましい本実施形態は、MicrosoftMedia−PlayerApple ComputerQuicktime、あるいはReal NetworkRealPlayerなどのソフトウェアパッケージと互換性のある標準的な複数フレームのブラウザを用いて、コンピュータ44に接続されているディスプレイモニタ46上で見直しのために、画像データの複数フレームを再生することに基づいている。好ましい本実施形態では、コンピュータ44上のブラウザは、伝送制御のためのTCPと一緒に、ハイパーテキストトランスミッションプロトコル(http)を用いる。
スキャナ11がコンピュータ44または複数のコンピュータと通信することのできる、多くの様々な手段およびプロトコルが現在あり、将来にあろう。好ましい本実施形態は、標準的な手段およびプロトコルに基づいているが、アプレットとして知られている1つまたは複数のカスタマイズされたソフトウェアモジュールを開発する方法が同様に実施可能であり、スキャナ11の選択された将来の用途は望ましい可能性がある。さらに、コンピュータ44、パーソナルコンピュータ(PC)などの何らかの特定のタイプであること、またはDellなどの特定の会社によって製造されたものであること、という制約はない。標準化された通信ポート40の利点の1つは、共通ネットワークブラウザソフトウェアを操作する任意のタイプのコンピュータ44がスキャナ11と通信できるということである。
要望があれば、スペクトル的に分解された画像を得ることは、スキャナ11に対するいくつかの修正によって可能である。スペクトル的に分解された画像は、スペクトルの情報が画像画素ごとに測定される画像のことである。スペクトルで分解された画像は、スキャナ11のラインスキャンカメラ18を光学スリットおよび撮像分光器に置ることによって得られる。撮像分光器は、検出器ののそれぞれに沿って光学スリットに合焦される光信号プリズムまたは回折格子を用いて分散させることによって画像画素の波長に特定的な強度データを捕捉するために、二次元のCCD検出器を用いる。
ここで図2を参照すると、本発明による光学顕微鏡検査システム10の第2の実施形態のブロック図が示されている。このシステム10では、スキャナ11は、図1で示された好ましい本実施形態より複雑で高価である。示されているスキャナ11の付加的な属性は、任意の代替実施形態にすべてが存在して適正に機能する必要はない。図2は、スキャナ11に組み入れることができる付加的な特徴および機能適切例を提示するものである
図2の代替実施形態は、図1の好ましい本実施形態よりもはるかにきいレベルの自動化を提示する。照明システム28のより完全なレベルの自動化は、データ処理装置20と、照明システム28の光源30および照明光学部品32両方との間接続することによって達成される。光源30への接続は、光源30の輝度を制御するために、ループが開いているか閉じているかで電圧または電流を制御することができる好ましい本実施形態では、光源30がハロゲンバルブであることを思い起こされたい。データ処理装置20と照明光学部品32との接続部には、視野絞り開口および集光器絞りの閉ループ制御を設けて、最適のケーラー照明が維持されることを保証する手段にすることもできる
蛍光撮像のためにスキャナ11を使用することは、光源30、照明光学部品32および顕微鏡対物レンズ16への容易に識別され修正を必要とする。図2の第2の実施形態はまた励起フィルタ、ダイクロイックフィルタおよびバリアフィルタを含む蛍光フィルタキューブ50を設ける。蛍光フィルタキューブ50は、顕微鏡対物レンズ16とラインスキャンカメラ合焦光学部品34との間に存在する無限補正ビーム経路に配置される。蛍光撮像の1つの実施形態は、市販されている様々な蛍光色素またはナノクリスタルに対して適切なスペクトルの励起を行うために、照明光学部品32へのフィルタホイールまたはチューナブルフィルタの追加を含むことできる。
撮像経路に少なくとも1つのビームスプリッタ52を追加する光信号を少なくとも2つの経路に分割することが可能になる。前に論じたように、ラインスキャンカメラ18による回折制限撮像を可能にするために、主要な経路ラインスキャンカメラ合焦光学部品34を経由する。第2の経路は、面スキャンカメラ56によって撮像するために、面スキャンカメラ合焦光学部品54を経由して設けられる。これらの2つの合焦光学部品を適切選択することにより画素サイズが異なる2つのカメラセンサによる回折制限撮像を保証できることは、すぐに明らかになるはずである。面スキャンカメラ56は、単純なカラービデオカメラ、高性能冷却CCDカメラ、または可変積分時間高速フレームカメラを含む、現在利用可能な多くのタイプのうちの1つとすることができる。面スキャンカメラ56はスキャナ11に従来の撮像システム構成をもたらす面スキャンカメラ56はデータ処理装置20に接続される。2つのカメラ、例えばラインスキャンカメラ18および面スキャンカメラ56が用いられる場合、両カメラタイプは、単一の二目的撮像基板、2つの異なる撮像基板、または一方もしくは両方の撮像基板が不要になり得るIEEE1394 Firewireインタフェースのいずれかを用いて、データ処理装置に接続することができる撮像センサとデータ処理装置20をインターフェースするの関連方法もまた利用可能である。
スキャナ11の、コンピュータ44との主要インターフェースはネットワーク42によるが、例えばネットワーク42が機能停止する場合もあり、この場合、ディスプレイモニタ58などのローカル出力デバイスにスキャナ11を直接に接続できることおよびスキャナ11のデータ処理装置20に直接接続されるキーボードとマウス60などのローカル入力デバイスを設けることできることは、有益である。この場合は、適切なドライバソフトウェアおよびハードウェアが同様に提供されなければならない。
図2示され2の実施形態はまたより高いレベルの自動化撮像性能を実現する。スキャナ11の増強された撮像の自動化は、よく知られているオートフォーカスの方法を用いて、ピエゾポジショナー24、ピエゾコントローラ26およびデータ処理装置20を含む焦点制御ループを閉じることによって達成される。第2の実施形態はまたいくつかの対物レンズに対応するため電動対物レンズ取り付け台62を設ける。電動対物レンズ取り付け台62は、データ処理装置20に接続され、対物レンズ取り付け台コントローラ64を介してデータ処理装置20によって指示される。
むことができるスキャナ11の他の特徴および機能がある。例えば、試料12のx/y平面に実質的に固定されている顕微鏡対物レンズ16にして試料12をスキャンするプロセスは、固定されている試料12にして顕微鏡対物レンズ16スキャンすることを含むように修正することもできる。試料12をスキャンすること、または顕微鏡対物レンズ16をスキャンすること、または試料12顕微鏡対物レンズ16の両方を同時にスキャンすることは、前に論じたのと同試料12の大きな連続したデジタル画像を提供できるスキャナ11のあり得る実施形態である。
スキャナ11はまた、多くのタイプの顕微鏡ベースの分析を自動化するための汎用プラットフォーム提供する。照明システム28は、レーザー励起によって試料12をスキャンすることを可能にするために、従来のハロゲンランプまたはアークランプからレーザーベースの照明システムに修正することができる。光電子増倍管または他の非イメージング検出器を組み込むことを含む修正が、ラインスキャンカメラ18もしく面スキャンカメラ56に加えて、またはその代わりに、試料12とのレーザエネルギの相互作用から生じた光信号を検出する手段を提供するために用いられる。
ここで図3A〜3Cを参照すると、本発明によるリニアアレイ検出器によって連続画像ストリップが得られる方法が示されている。図1のラインスキャンカメラ18は、図3Aに示されるラインスキャンカメラ視野70を観察する。ラインスキャンカメラ視野70は、図3Bに示されるリニアアレイ74になるように直線に配列されている多くの個々の画素要素72によって撮像される図1の試料12の領域を含む。好ましい本実施形態リニアアレイ74は、1024の個々の画素要素72を備え、画素要素72のそれぞれは14平方マイクロメートルである。好ましい本実施形態リニアアレイ74の物理的寸法は、14.34ミリメートル×14マイクロメートルである。スキャナ11の動作について論じる目的のために、試料12とラインスキャンカメラ18の間の倍率が10であると仮定すると、ラインスキャンカメラ視野70は、1.43ミリメートル×1.4マイクロメートルに等しい寸法を有する試料12の領域に相当する。各画素要素72は、約1.4マイクロメートル×1.4マイクロメートルの領域を撮像する。
図3Cは、試料12をデジタルスキャンする間に、画像ストリップ77などの画像ストリップの画像76が、1の画像ストリップ78から始まり、第2の画像ストリップ80が続以下同様に画像76をデジタル化するのに必要な最後の画像ストリップ82が得られるまで、取得される。当業者は、このスキャンが、頂部から底部または底部から頂部のいずれでもよく、あるいは試料上の任意の点から開始してもよいこと理解されよう。デジタルスキャンはまた、水平画像ストリップではなく垂直画像ストリップでもよい。望ましいが、画像ストリップが連続しられる必要ない。画像76は試料12全体を含むことも試料12の部分だけを含むことできる。スキャナ11の好ましい本実施形態では、図3Aに示されるように、スキャンおよびデジタル化は、画像ストリップ間で交代する進行方向84行われる。この種の双方向スキャンは、画像ストリップごとに同じ進行方向84を必要とするスキャンおよびデジタル化の方法である単方向スキャンよりも高速のデジタル化処理実現する。
ラインスキャンカメラ18の機能により通常、スキャナ11の好ましい本実施形態と同様に、スキャンを双方向うことができるか、単方向うことができるが決まる方向システムは、しばしば、図3Bに示される3チャネルカラーアレイ86またはマルチチャネルTDIアレイ88などの2つ以上のリニアアレイ74を含む。カラーアレイ86は、カラー画像を得るために必要なRGB輝度を検出する。カラー情報を得るための代替実施形態では、広帯域の光信号を3つのカラーチャネルに分割するためのプリズムを用いる。TDIアレイ88は、スキャナ11の代替実施形態で使用して、速いデータ速度を維持しながらまたデジタル画像データの信号対雑音比の顕著な低下なしで、ラインスキャンカメラ18の有効積分時間を増加させる手段を得ることもできる。
ここで図4を参照すると、本発明による光学顕微鏡検査システム10の動作の単純化されたフローチャートが示されている。試料12はステップ200でスキャナ11に装填される。試料装填の最も単純な方法は、オペレータが電動ステージ14に試料12を物理的に置くか配置することである。試料装填の最も高度な方法は、スキャナ11が、あらかじめ装填された試料カセットから1つまたは複数の試料12を自動的に装填するものである。試料装填の他の実施形態が当技術分野で知られている。本発明の好ましい本実施形態では、試料装填は、システム費用および機械的な複雑さを減らすために手動で行われる。
スキャナ11は、コンピュータ44から、またはスキャナ11の代替実施形態の一部であり得るボタンから同様に出されたコマンドによって、ステップ201で初期化される。デジタル化プロセスの所望の解像度、画像76を作成するためにデジタル化される試料12の部分、および関連較正ファイルの名前を含む初期設定パラメータは、ステップ201でオペレータによって入力される。に指示ない限りスキャナ11は、デフォルトで試料全体をデジタル化する。試料を装填し、スキャナを初期化後、後に続く画像取得プロセスにおいてオペレータの手作業介在の必要がないはずであることに留意すること重要である。
自動スキャンおよび試料12を画像76にデジタル化することは、ステップ202〜210を含む。これらのステップは、ラインスキャンカメラ18からの画像データの読み出しを1度につのラインまたは1つの画像ストリップ同期させるデータ処理装置20によって調整され、試料12、ステージコントローラ22制御下にある電動ステージ14で実質的に一定速度で移動る。スキャナ11は、ステップ202で試料12の自動デジタル化を、試料12のあらかじめ決められた領域、例えば、図3Cで示される試料12の左上側のコーナでスタートする試料12の移動、およびラインスキャンカメラ18からの単一ライン画像取得と共に開始する。ステップ202、電動ステージ14は、ラインスキャンカメラ18に対して前に論じたように、双方向前後に動く。ステップ204の決定ブロックの制御論理は、画像ストリップ77などの画像ストリップの端到達したかどうかを判定する。この論理実施する多くの可能な方法があり、いくつかは位置エンコーダからの位置フィードバックがない。例えば、ラインスキャンカメラ18によって読み取られた画像ラインの合計数は、画像ストリップの端にいつ到達したを知る手段として用いることができる経過スキャン時間や、試料18の部分であるかまたはそれに隣接して配置された較正マーキングなどの他のパラメータもまた使用することができる光学リミットスイッチがスキャナ11の好ましい本実施形態の電動ステージ14に、新しいスキャンのために電動ステージ14の位置を変える時間がいつかを示すために設けられる。ステップ204で画像ストリップ77の端に達していなければ、デジタル化プロセスはステップ202で、次のライン画像の取得を継続する。試料12は、デジタル化プロセスの間、常にほぼ一定速度で移動し続けいかなる必要な焦点調整も、ステップ206で示されるように機械ステージ14進行中の運動と並行して行われる。焦点は1つの画像ストリップから次のもの劇的に変わらないので、焦点調整は比較的遅く徐々に行われる。スキャナ11の動作について論じる目的のために、10×の倍率でデジタル化されるべき試料12の領域50ミリメートル×25ミリメートルである再び仮定すると、画像ストリップ77と同様の、それぞれの寸法が1.43ミリメートル×50ミリメートルである18個の画像ストリップが、画像76を生成するために取得されなければならない。各画像ストリップ77は約36,000×18,000画素を含全画像76を備えた約36,000×1024画素の要素を含む。画像76を作成するために試料12の所望部分をデジタル化する、ステップ208の判定によって判定されるプロセスが終了しない限り、かつ終了するまで、新しいスキャンのための試料12の位置調整がステップ210で行われる。ステップ210は、新しいスキャンのために電動ステージ14を位置調整するために、1つの画像ストリップからの画像ストリップまで電動ステージ14を動かすことを含む
画像76を得るのに必要な時間は、ラインスキャンカメラ18が情報をデジタル化することができるライン速度に比例する。スキャナ11の好ましい本実施形態では、ライン速度は、使用されるDALSA SPARKモデルSP12−01K30では、毎秒27,600ライン、または毎秒2830万画素である。毎秒27,600画素のライン速度で、論じる目的のための、36,000×1024画素を含む各画像ストリップ77は、約1.3秒(36,000/27,600)でデジタル化することができる。したがって現在の実施形態電動ステージ14は、軸に沿って毎秒約38ミリメートルで移動して、この1.3秒の間に50ミリメートルの画像ストリップ77の全長をカバーする。画像76が18の画像ストリップ77を含むので、試料12の所望の部分をデジタル化するには23.4秒が必要になる。前に論じたように、この時間は、本発明の好ましい実施形態で用いられているものなどx軸に沿って右から左へ、また左から右へもスキャンできる双方向ラインスキャンカメラだけに有効である。一代替実施形態では、左からだけ右へだけスキャンできる単方向タイプのラインスキャンカメラを利用することができる。この場合、電動ステージ14は、軸に沿って同じ左基準位置まで最大のステージ速度で戻され、画像ストリップ77などのすべての画像ストリップ、左から右へだけ行く方向のようにして得られる。画像ストリップ77などの個々の画像ストリップのデジタル化が完了した後に、電動ステージ14は、減速し、停止し、軸に沿って下方に移動し、次の画像ストリップをスキャンするために再び加速する。スキャンおよびデジタル化プロセスの間に電動ステージ14が実質的に一定速度で確実に移動するように、スキャンされる各画像ストリップの始めと終わりで電動ステージ14が加速し減速するための余裕が、時間および距離両方にとられなければならない。加速および減速のために必要な付加的な時間は、電動ステージ14の軸性能およびステージコントローラ22の軸属性に依存する。好ましい本実施形態では、滑らかな運動を得るための、またぎくしゃくした動きを最小にするためS字カーブプロファイルを用いると、加速および減速時間はおよそ0.7秒になる。電動ステージ14の加速および減速を考慮すると、ステップ210を含む新しいスキャンセットアップの間にラインスキャンカメラ18がデジタル化されるべき試料12の部分のエッジを離れて移動することが必要である。新しいスキャンセットアップ時間は、電動ステージ14の特別な軸性能およびステージコントローラ22の軸属性に依存し、発明の好ましい本実施形態ではおよそ1/2秒である。したがって、18画像ストリップ×1.4秒得られた合計の25.2秒x軸に沿った加速および減速に対し、各画像ストリップの始め終わりに加えられまた、さらなる9秒が、次のスキャンでy軸に沿って電動ステージの位置を変えるために付け加えられる。したがって、現在の例で画像76を取り込むのに必要なプロセスのすべての部分に必要な時間は、双方向スキャン実施形態では約1分になる。
スキャナ11は、画像76の総取得時間さらに最小化するように最適化することができる。スキャナ11によって達成することができる画像取得時間は、ラインスキャンカメラ18のライン速度に一部依存する。例の毎秒27,600ラインのライン速度では、各ライン画像が約0.04ミリ秒で取り込まれる。50ワットバルブを含む光源からの照明は、ラインスキャンカメラ十分な信号対雑音比信号を記録するための十分な光をもたらすより速い読み出し速度で、1ライン当たりの露光時間が低減され、スキャナ11の照明システム28の改善および増強が必要になり得る。同様に、例えば蛍光である、利用できるが少ないスキャナ11の適用では、有効ライン積分時間が増加されなければならない。TDIタイプのラインスキャンカメラは、速いデータ読み出しを維持しながら、画像データの信号対雑音比の大きな低下なしで、有効積分時間を増加させる優れた手段を提供する
速いラインスキャンカメラが市販されており、速い電動ステージと同期することができる。あるいはリニアアレイ74などの、しかし1024個を越える画素要素72を備えるリニアアレイを選択することにより、画像76を取り込むためにスキャンされなければならない画像ストリップ数が低減され、必要な加速および減速サイクルがなくなる。2048以上の画素を含むアレイは、1024画素含むアレイよりもライン速度が比例して小さいことが多いこのような大きいアレイのライン速度の低減には、ライン積分時間を増加させながら、画像取り込み総時間減らすことなく、電動ステージ14に必要とされ最高速度が低下するという二重の利益がある。大きなフォーマットのリニアアレイの欠点は、より大きくより高価な光学部品および照明システムが、口径食および他の光学収差なしに、高品質の光信号供給する必要があることである。複数のセンサを使用して全体の画像取得時間をさらに低減することさえ可能である。
スキャナ11は、その好ましい本実施形態において、動的オートフォーカスのコストおよび複雑さを除去または最小化するために比較的大きな被写界深度を有する顕微鏡対物レンズを用いて、試料のデジタル化を行う。開口数(NA)が0.15の対物レンズの理論的な被写界深度は20マイクロメートル以上である。被写界深度は、0.3に等しいNAで約5マイクロメートルに低下し、0.5に等しいNAで約1.8マイクロメートル低下する。用途に応じて、開口数が中程度の対物レンズを用いるときでさえ、試料12の全体または部分、焦点面を調節する必要が全くなしにスキャンすることができる比較的小さいNAの対物レンズ選択することは、それが試料12の広範囲な手動スキャンの補助として用いられるスキャナ11の1つの適用と一致している。このような従来の手動スキャンは通常小さい開口数および低い倍率で行われる。したがって、試料12の画像76は、試料12の選択された領域の後続の高解像度調査のための基礎としてコスト効率よく用いることができる。ステップ220を含む判定論理に基づいて、ステップ222で示された従来の光学顕微鏡またはステップ224で示されたスキャナ11の高解像度の実施形態のいずれか、試料12の高解像度見直しのために用いることができる。後者の場合では、動的なオートフォーカスが必要になり得る。顕微鏡スライドなどの試料12全体、または試料12の大部分の、現在利用可能な計算能力を用いる高解像度デジタル化は実際的でない、またはコスト効率がよくない可能性があるしかし、データ処理、メモリおよびデータ記憶装置の将来のコスト低減および改善が、高解像度高速デジタル化を現実のものにすると予想される。
スキャン中に合焦することの必要性はステップ206示されており、スキャナ11の特定の用途に非常に大きく依存する。スキャナ11は、所定の形およびサイズの標準化キャリブレーション試料がデジタル化され、かつ最良焦点が当技術分野よく知られている方法を用いて電動ステージ14のx/y位置の関数として決定される、キャリブレーション方法を用いる。スキャンおよびデジタル化プロセスの間に、顕微鏡対物レンズ16の位置このx/y焦点地図に従って移動る。顕微鏡対物レンズ16の相対的な位置を試料12に対して変更するために用いることができる、オートフォーカス様々な法が当技術分野で知られている。電動ステージ14の垂直z軸成分はオートフォーカスのために使用することができるが、本発明の好ましい方法は、その代りに市販のピエゾポジショナー24を使用して顕微鏡対物レンズ16を移動させるものである。顕微鏡対物レンズ16に取り付けられているピエゾポジショナー24の範囲比較的小さく、一般に100マイクロメートルであるが、ピエゾ帯域幅は重い電動ステージの帯域幅よりも大きい大きいピエゾ帯域幅(一般に150ヘルツ)は、小さい焦点変更に伴う振動を最小限にするのに、より堅い機械ステージよりもいっそう望まし
スキャナ11の利点の1つは、試料12を労働集約的に手動スキャンすることと比較すると効率的に処理しコスト効率をよくすることができる画像76を得るための、試料12の大部分の高速デジタル化である。これと一致して、スキャナ11は、その最も基本的な実施形態において、いくつかの従来の画像システムで見られる動的なオートフォーカスの複雑さを必要としない。x/y位置の関数として最良の焦点のプリスキャンおよびマッピングにより、ほとんどの用途適切な焦点が得られる。スキャナ11の代替であるより高価な実施形態は、面スキャンカメラ56などの補助的な面スキャンカメラを用いて、広範囲なオートフォーカス能力を実現する。オートフォーカスための空間情報が試料12の一部(例えば較正マーク付きのガラス顕微鏡スライド)になっている、より進歩した較正方法もまた実施可能である。
画像76の全体性能は、試料12実質的に一定速度で移動させる能力と関係している。ラインスキャンカメラ18と電動ステージ14との間の同期が適切に維持されなければ、画像歪みにつながるサンプリング誤差が起こり得る用途および画像解像度の必要性に応じて、スキャナ11は、試料動きと同期してデータを取り込むための様々な手法をサポートする。既知の形の較正ターゲット(例えば顕微鏡スライド上のRonchi罫線)をプリスキャンすることは、スキャナ11が一定の試料速度を達成するための1つの手段である。電動ステージ14へ送られる位置コマンドの時間プロファイルを制御し、かつラインスキャンカメラ18のラインデータ読み出し速度を動的に変るための両方の機能が、データ処理装置20に設けられる。電動ステージ14の速度関連誤差の大部分再現可能であるので、較正スキャンの間に最適画像を得るための位置プロファイルの最適化またはラインスキャンカメラ18の読出し速度の最適化は、試料12が続いてスキャンされデジタル化されるときに優れた画像を得るのに十分である。高解像度画像をデジタル化するのにより適しているスキャナ11の一代替実施形態では、電動ステージ14からの位置フィードバックを利用する。スキャナ11の好ましい本実施形態は、較正ターゲットに適用された較正方法を用いて、高品質画像を低度から中度の解像度で、高価な位置エンコーダからのフィードバックを必要とせずに生成することができる。
例として前に論じた36,000×18,000画素の画像が8ビット(1バイト)の1画素当たり量子化で取り込まれると仮定すると、6億4800万バイト(648メガバイトすなわち648MB)のRAMがすべての画像ストリップ77のすべてのデータをその非圧縮の生のフォーマットでメモリ36に格納するのに必要になる。複数の画像ストリップ77がステップ212の間に組み立てられて画像76にる。試料12のデジタル化の間に取得された複数の画像ストリップ77から画像を組み立てるための多くの可能な方法がある。本発明の好ましい本実施形態の画像組立方法は、画像ストリップ77をわずかにオーバラップするように、例えば10〜20画素だけオーバラップするようスキャンしこれらのオーバラップする画素を、連続した画像76になるように、画像ストリップ77のx/yアラインメントの微調整に使用するものである。JPEGまたは他の画像の圧縮方法を用いると、多くの場合、特定の用途に必要情報コンテンツのはっきり認められる損失なしに、画像76のデータサイズ、または個々の画像ストリップ77のデータサイズその元のサイズの5〜10パーセント以下に減らすことができる。スキャナ11はまた、意味のある画像データを何ら含んでいない空の領域を画像76から除去して、画像76のデータ記憶要求値をさらに低減することができる
試料12を大きな連続した画像76に、通常は従来の光学顕微鏡下で試料12を手動スキャンするために用いられる低度から中度の光学解像度で、デジタル化する動機の1つは、得られた画像データに専用コンピュータプログラムを適用できることである。ステップ214において、試料12のデジタル化された部分を示す画像76の分析は、画像76の中の特定のタイプの対象物(例えば、正常または異常な細胞)を識別し、その位置特定するための形態的アルゴリズム適用することなどの様々な方法を含む。分析方法機能の他の例は、計数または測定アルゴリズム、または画像76での欠陥を識別するため比較もしくは品質保証アルゴリズム、または画像76を以前に測定された同様の画像と区別するため他のタイプのアルゴリズムが含まれる。試料12の画像のデジタル化が完了した後、ステップ214を含む分析法が試料12が物理的に存在すること、または入手可能であることを必要としないは明らかなはずである。ステップ214の方法は、自動的に適用すること、あるい、ステップ216で示されるように画像76を対話式に、ネットワーク42を介してスキャナ11に接続されるコンピュータモニタ46で見直すオペレータを伴う反復プロセスの一部として適用することができる。
試料12の選択された領域の高解像度調査に戻る決定は、画像76から得られた情報(例えば、ステップ214および216において画像76の分析から得られた対象座標)を用いて、ステップ218の一部として行われる。ステップ218の決定論理で分析を試料12に戻さない場合、オペレータのタスクが完了る。オペレータがステップ218の一部として試料12に戻ことを望む場合、ステップ220の決定論理で、高解像度調査がステップ222に示されるように従来の光学顕微鏡上で行われるか、それともステップ224によりスキャナ11を用いるかを決定する。画像76の低度から中度の解像度分析から得られた座標情報が、従来の顕微鏡による試料12の高解像度調査を案内するのに十分であることは理解されるはずである。スキャナ11を用いる試料12の高解像度見直しはステップ224を含み、また図2の代替実施形態前に説明された特徴の多くを用いてスキャナ11を遠隔制御できること含む。例えば、電動ステージ14の位置、ならびにピエゾポジショナー24の位置および光源30の照明強度が、ステップ224の間オペレータの遠隔制御下にあり得る。例えば面スキャンカメラ56からのリアルタイム画像は、試料12からのデジタル化情報の代わりに、この見直しの基礎になり得るあるいは、オペレータは、ラインスキャンカメラ18または面スキャンカメラ56のいずれかを用いて高解像度でデジタル化されるべき試料12の、より小さ部分を選択することもできる。前の場合は、プロセスは、試料12のデジタル化を含むステップ210を経由してステップ202に戻り、次に、ステップ224直接戻る。オートフォーカスが必要に応じて、デジタル化されるべき試料12の部分のサイズと、利用される顕微鏡対物レンズ16の被写界深度とに基づき、利用される。
ここで図5Aおよび5Bを参照すると、本発明による画像表示フレーム100の模式図が示されており、れは、ステップ216によ画像76の対話式調査の目的で、ディスプレイモニタ46に画像76を表示するためグラフィカルユーザインタフェースの1つの実施形態をす。先の例で示された画像76など、約36,000×18,000画素以上のオーダーであり得る画像76の表示は、ディスプレイモニタ46などの従来のモニタまたは表示デバイス上では不可能である。19インチの日立CM751モニタなどの現在利用可能なモニタの画素の最大数は、約1600×1200画素であり、1024×768画素がより一般的である。したがって、どの時点でも画像76の一部分しか、画像76全体の完全な解像度で表示することができないしかし画像76の低解像度バージョンであるマクロ画像102をディスプレイモニタ46上に、画像76の一部分に相当する高解像度ズーム画像104と一緒に表示することは可能である。ズーム画像104として表示されるマクロ画像102の領域は、オペレータによってマクロ画像102全体にわたって対話式にサイズ設定し移動できるズーム領域106としてマクロ画像102自体の上に示される。その最も単純な実施形態では、ズーム領域106は固定された長方形領域であるが、手描きされた領域を含む他のアイコンまたは形状もまた実施することができる。ズーム領域106は、マクロ画像102とズーム画像104との間の重要な関連性を提示する。マクロ画像102の拡大された視像が図5Bに、マクロ画像102の中の8つの模式対象物の存在を説明の目的だけで強調表示して、O1 108、O2 110、O3 112、O4 114、O5 116、O6 118、O7 120およびO8 122と示された4つの円および4つの長方形として、示されている。同様の部類の、この場合は同様の状の対象物のそれぞれは特有なパターンによって同じ部類の他の対象物と区別される。非常に単純な対象物を使用するのは、画像表示フレーム100に表示された異なるタイプの情報の関係を図示し明確にすることだけを意図している。この場合、対象O1 108およびO2 112は、ズーム領域106内にあり、したがって、オペレータがサイズ設定可能なズーム窓124の一部であるズーム画像104に表示される。ユーザは、画像表示フレーム100の一部であるユーザコマンド窓126の一部であるアイコンを用いて、ズーム画像104の電子ズームを増大させることができる1つの実施形態では、これらのアイコンが、指示デバイスとしてマウスを用いてクリックされる1つのアイコンを指し示すまたは1つのアイコンと関係づけられた機能を呼び出す他の手段従来技術で知られており、ここで同様に用いることができる。コマンドアイコンは、画像表示フレーム100の部であるいずれの窓にも、ユーザコマンド窓126も含め、取り入れることができる。例えば、電子ズームアイコンは、ズーム窓124の一部とすることができる。電子ズームが増大するにつれて、ズーム領域106のサイズは、一定サイズのズーム画像104維持されるようにマクロ画像102上で小さくなる。
画像のいずれかに関する一般的な情報は、その画像に対応する窓の一部として表示することができる。例えば、マクロ窓128は、マクロ画像102のサイズを画素単位で、ズーム領域106のサイズを画素単位で表示しまたズーム領域106の中心画素座標を表示することができる。ズーム窓124は、ズーム画像104に適用された電子ズーム量を、物理的な寸法との関連性と一緒に表示することができる。マクロ窓128およびズーム窓124などのすべての窓のサイズおよび形任意のwindowsベースのソフトウェアが機能するのと同様に縦横比が異なる別々の試料タイプに対応するようオペレータが対話式に変更することができる。
ステップ214の結果として、画像76に専用コンピュータプログラムを適用すること画像表示フレーム100の対象窓130に表示される。本発明の好ましい本実施形態の対象窓130は、対象物画像132などの、各々が大きな連続デジタル画像76の異なる部分に相当する多くの対象物画像を含む。そのサイズに応じて、対象物画像132は、低解像度サムプリント画像として画像ギャラリータイプ配置で表示することができる。対象物画像132の1つをクリックする、またはし示すことによりまた対象物画像132が、ズーム窓124の一部であるズーム画像104のように最高解像度で表示されることなる。対象物窓130に対象物画像132を表示するための基準は、ステップ214画像76に適用される専用コンピュータプログラムに基づく。例において、専用コンピュータプログラムは、すべての対象、この場合、対象物O1 108から対象物O8 122まで存在するか画像76を探索するために単純な境界検出およびセグメンテーションアルゴリズムを用い、対象物窓130に対象物画像132としてこれらの対象物を表示する。その場合、別の専用コンピュータプログラム、例えば対象物を数えることができ、正方形と円とを識別することができるものは、各対象物画像132に適用して、さらなるレベルの分類を行うことができる。その結果、この場合では多数の結果を、画像表示フレーム100の分析窓134に表示することができる例における分析窓134は、対象物の総計、この場合には8を、正方形および丸の2つの種類の形のいずれかの対象物の総計と同様に含むことができる。画像76に適用することができる多くのタイプの専用コンピュータプログラムこのような専用コンピュータプログラム画像76適用することの結果として対象物窓130に表示され多くのタイプの対象物画像132がある。また、多くの対象物画像132に適用されて、様々なフォーマットで分析窓134に後で表示するために高いレベルの対象物分類を行うことができる、多くのタイプのより洗練された専用コンピュータプログラムある。画像表示フレーム100のユーザコマンド窓126は、ステップ214の一部として行われる画像解析の属性と、ステップ216での画像76の見直しの基準を対話式に選択するための窓を提供する。
ここで、動的画像表示フレーム150の概略図が、ステップ216に従って画像76を対話式で見直す目的のためにディスプレイモニタ46に画像76を動的に表示する本発明によるグラフィックユーザインターフェースを図6Aおよび6Bを参照する画像76を対話式に見直す方法は、試料12を従来の顕微鏡で低度から中度の解像度で、同時に顕微鏡の接眼レンズを通して光信号を見ながら手動スキャンする代わりに、デジタル画像を提示することが意図されている。好ましい発明の目的の1つは、試料12の手動スキャンを、ディスプレイモニタ46上で、試料12の部分のデジタル化である、かつ好ましくは試料12の回折制限のデジタル化である、画像76を動的に見ることに置き換える手段を提供することである。この方法には、快適かつ制御された観察環境を含めて、多くの利点があり、この観察環境では、デジタル画像データに適用され知的スキャン電子ズーミング方法が、画像中に別対象物(例えば異常細胞)を発見する責任を負ったオペレータの生産性を増すことができる。識別される特定の対象物次にステップ218および220の決定論理に応じて、従来の顕微鏡で、またはスキャナ11を用いて、再配置することができる。スキャナ11をネットワーク42に接続することによって得られる別の利点は、試料12にアクセスする必要なしに、画像76の動的観察を遠隔で実施できることである。さらに、試料12のデジタル化バージョン(すなわち画像76)を見直すこと自体が、観察された画像76の特定の領域を監視するための様々な技術に加わる。また、オペレータが画像76の特定の領域を観察するのに費やした時間を測定すること簡単である。
動画像表示フレーム150は、前に論じられた図5Aの画像表示フレーム100内のもの同一の、マクロ窓128の中のマクロ画像102を含む動画像表示フレーム150はまた、ズーム窓124内のズーム画像104と、前に示し画像表示フレーム100と同様、マクロ画像102をズーム画像104に関係づけるズーム領域106とを含む。すべての窓のサイズはオペレータがることができるが、動画像表示フレーム150内のズーム窓124は通常画像152を動画窓154内で十分な解像度で表示できるようするために、前に示し画像表示フレーム100のものよりも小さくなる。動画像152は、オペレータによって決定された速度および方向で画像76をスキャンすることをシミュレートするための、必要に応じて更新される最高解像度の動的画像であ。36,000×18,000画素である画像76などの画像の例再び参照すると、動画像152は、大きな画像76を、ユーザ選択可能解像度でディスプレイモニタ46に表示できる複数の動画像ストリップ156に分割することによって、生成することができる。例えば、所望の動画像解像度が600×600画素である場合、画像76は、600×36,000画素からなる30個の動画像ストリップ156に分割されるか、または別法として、600×18,000画素からなる60個の動画像ストリップ156に分割される。動画像ストリップ156は次に、試料12の画像76のスキャンをシミュレートするために、動画像表示フレーム150の動画窓154に表示される。また軸に沿ったスキャンをシミュレートする1つの方法は、動画像152の対向するエッジに沿って画像画素の少なくとも1つ新しい列追加しながら前に示した少なくとも1つの画素の列を動画像152の1つのエッジに沿って除去することである。説明した互いに異な一連の動画像152は、MicrosoftMedia Playerなどの従来のブラウザソフトウェアを用いて、ディスプレイモニタ46上の動画窓154で再生され表示されるデジタル動画の個々のフレームを含むことができる。このタイプのシミュレートされスキャンは、手動で試料12をスキャンしながら従来の顕微鏡の双眼鏡で観察されるものと類似している。
試料12の画像76のこのタイプのシミュレートされたスキャンの潜在的な欠点の1つは、動画像152内の対象物通常は動いていることであり、それによって、オペレータが対象物識別することが困難になりあるいは、試料12の画像76をスキャンするプロセスの間にオペレータが複数の停止および進行コマンドを実行することが必要になる。動くことのマイナス効果ない代替スキャン方法もまたスキャナ11によって実現することができる。この代替プロセスは、動画像ストリップ156を、例えばそれぞれ600×600画素の連続した画像フィールドに分割次に、これらの連続した画像を一度に1つずつ、好ましくは画像間でいくらかオーバラップして、一連の動画像152として表示することを含む。600×600画素の画像に特に言及しているのは、この発案の原理を単に説明するためということにすぎない。というのは、他のサイズの画像もまた用いることができるからである。従来の顕微鏡試料12を観察することに勝る利点が得られる、画像76を動的に見直す方法が多くあることは明らかなはずである。動画像152として前に観察された画像76の領域を示すためにマクロ画像102自の上に、スキャントラッカー158すことができる。オペレータが画像76のシミュレートされたスキャン速度を制御することができるので、オペレータは、いくつかの領域では他より多くの時間を費やすことができる。スキャントラッカー158は、相対的滞在時間を示すために例えばカラーコード化して、画像76の見直しの完全さに関するオペレータへの即時フィードバックをすることができる。シミュレートされた画像のより進歩した他のスキャン方法もまた実現可能である。例えば、専用コンピュータアルゴリズムにより画像76の領域をその重要性に関してランク付けしこのような相対的重要性基準に従って動画像152を提示することができる。まばらな画像については、空領域を完全にスキップして、画像76の本質的に空白のフィールドの観察を不要することにより、オペレータがより有能になり得る動画像152から画像76のいくつかの要素を除去するために、専用コンピュータアルゴリズムを使用することができる。例えば、画像76の分析に重要でないであろうまたは画像76に関係した診断をするに関係ないであろうクラッタもしく対象物、または細胞は、動画像152を表示する前に画像76から削除することができるジョイスティック、トラックボール、ゲームパッドまたは足踏みペダルなどの人間工学的コントローラもまた、動画像表示フレーム150のユーザコマンド窓126内のアイコンまたはボタンをクリックすることおよび指し示すことについてのさらなる性能改善実現するために、利用することができる。画像76を動的に見直すのに有用であり得る機能の例は、前方再生、後方再生、早送り巻き戻し、休止、ループなどの機能および従来のビデオ再生または編集環境で見ることができるものに類似している他の機能が含まれる。状況によって、個々の画像フレーム、対象物座標、または画像76の将来の参照または後の見直しのための他のデータを格納する必要があり得ることもまた理解されたい
本発明特定の実施形態によって図示し説明したが、添付の特許請求の範囲およびその等価物により定義される本発明の精神および範囲から逸脱することなく多くの変更および修正が加えられ得ることを理解されたい
本明細書は、好ましい設計、材料、製造方法および使用方法を記載しているが、当業者は添付された請求項を参照して本発明の範囲および精神を十分に理解するであろう。

Claims (73)

  1. 最大領域を有する試料の表面によって画定された主要試料面を有する顕微鏡試料の少なくとも一つの部分を自動的にデジタル化するためのスキャナであって、
    第一方法および第二方法で試料を取り付けとともに移動させるための電動ステージであって、第一方法は、第一位置及び第二位置で画定された主要進行軸に沿って、予め決められた第一位置と予め決められた第二位置との間を実質的に一定速度で試料面にある試料を動かすことであり、第二方法は、進行主軸に直角であり試料面にある第二の軸に沿って試料を動かすことである電動ステージと、
    試料の少なくとも一つの部分が照明される照明システムと、
    照明システムによって照明された試料の部分に関して中心にある光軸に沿って位置決めされ、試料面に直角である少なくとも一つの顕微鏡対物レンズと、
    顕微鏡対物レンズからの光学信号が光軸に直角の画像面上に合焦されている合焦光学系と

    少なくとも一つの一次元配列で配置された複数の光応答性要素を備える少なくとも一つのカメラであって、カメラが照明システムによって照明された電動ステージの上に試料の領域の一次元の観察フィールドを有するように光応答性要素が、電動ステージに関する画像面に位置決めされ、且つ進行主軸に直角であるカメラと、
    予め決められた試料の動きに同期して、複数の光応答性要素からの光強度をデジタル化、処理、および格納するためのデータ処理装置であって、試料動きは、試料の第一の画像ストリップを得るために第一方法で試料を動かすものであり、次に、第二の連続した画像ストリップを得て、試料の完全な画像を生成するために試料の部分をデジタル化するために必要なときに試料を動かすことを繰り返すことのためにカメラを位置決めする第二方法で試料を動かすものであるデータ処理装置と、
    を備えることを特徴とするスキャナ。
  2. 電動ステージとデータ処理装置との間に接続されたステージコントローラをさらに備え、上記データ処理装置が電動ステージの位置を決定することを特徴とする、請求項1記載のスキャナ。
  3. 電動ステージは、光軸に沿って試料を動かす第三の方法で試料を移動させることができることを特徴とする、請求項1記載のスキャナ。
  4. 光軸に沿って対物レンズを移動させるために、少なくとも一つの顕微鏡対物レンズに取り付けられたピエゾのポジショナーをさらに備えることを特徴とする、請求項1記載のスキャナ。
  5. ピエゾのポジショナーとデータ処理装置とに接続されたピエゾのコントローラをさらに備え、データ処理装置がピエゾのポジショナーを監督することを特徴とする、請求項4記載のスキャナ。
  6. 電動ステージが複数のステッパーモーターを備えることを特徴とする、請求項1記載のスキャナ。
  7. 電動ステージが複数のサーボモータと複数の位置決めエンコーダとを備えることを特徴とする、請求項1記載のスキャナ。
  8. 照明システムが、光源及び照明光学系を備えることを特徴とする、請求項1記載のスキャナ。
  9. 光源および照明光学系は、透過モード光学顕微鏡検査に最適化されていることを特徴とする、請求項8記載のスキャナ。
  10. 光源は、強度可変のハロゲンランプ、凹面の反射鏡および熱抑止フィルタを備えることを特徴とする、請求項9記載のスキャナ。
  11. 光源および照明光学系は、試料の少なくとも一つの実質的に円形部分を照明することを特徴とする、請求項8記載のスキャナ。
  12. 光源および照明光学系は、反射モード光学顕微鏡検査に最適化されていることを特徴とする、請求項8記載のスキャナ。
  13. 光源および照明光学系は、蛍光モード光学顕微鏡検査に最適化されていることを特徴とする、請求項8記載のスキャナ。
  14. 光源および照明光学系が各々データ処理装置に接続され、データ処理装置が最適の照明を維持することを特徴とする、請求項8記載のスキャナ。
  15. 少なくとも一つの顕微鏡対物レンズが無限修正タイプであることを特徴とする、請求項1記載のスキャナ。
  16. 合焦光学系が機械的なチューブの内部に取り付けられたチューブレンズ光学を備えることを特徴とする、請求項1記載のスキャナ。
  17. チューブレンズ光学系は回折限界の画像を提供するために選択されていることを特徴とする、請求項16記載のスキャナ。
  18. 少なくとも一つのカメラは一次元スキャンカメラを含むことを特徴とする、請求項1記載のスキャナ。
  19. 一次元スキャンカメラは、双方向スキャンすることができることを特徴とする、請求項18記載のスキャナ。
  20. データ処理装置に接続されたメモリーをさらに備え、データが格納されることを特徴とする、請求項1記載のスキャナ。
  21. データ処理装置に接続された通信ポートをさらに備え、スキャナがネットワークを介して少なくとも一つのコンピュータと通信することを特徴とする、請求項1記載のスキャナ。
  22. 少なくとも一つの顕微鏡対物レンズと合焦光学系との間で光軸に沿って位置決めされた蛍光フィルタ立方体をさらに備えることを特徴とする、請求項1記載のスキャナ。
  23. 少なくとも一つの顕微鏡対物レンズと合焦光学系との間で光軸に沿って位置決めされたビームスプリッターをさらに備え、顕微鏡対物レンズからの光学信号が、少なくとも一つの第二光軸に分割されていることを特徴とする、請求項1記載のスキャナ。
  24. ビームスプリッターからの光学信号が、少なくとも一つの第二光軸と直角である第二画像面の上に合焦される第二合焦光学系と、
    第二画像面に位置決めされた複数の光応答性要素を含む少なくとも一つの第二カメラと、
    をさらに備え、
    第二カメラがデータ処理装置に接続されていることを特徴とする、請求項23記載のスキャナ。
  25. 少なくとも一つの第二カメラは二次元スキャンカメラを備えることを特徴とする、請求項24記載のスキャナ。
  26. 複数の顕微鏡対物レンズを保持することができる電動前金具と、
    少なくとも一つの第二顕微鏡対物レンズと、
    をさらに備え、
    少なくとも一つの顕微鏡対物レンズおよび少なくとも一つの第二顕微鏡対物レンズの両方は、電動前金具によって保持されていることを特徴とする、請求項1記載のスキャナ。
  27. 電動前金具とデータ処理装置との間に接続された前金具コントローラをさらに備え、データ処理装置は、電動前金具によって保持された複数の顕微鏡対物レンズの中から選択することを特徴とする、請求項26記載のスキャナ。
  28. 第一方法及び第二方法で少なくとも一つの顕微鏡対物レンズを保持し且つ動かすことのできる電動前金具をさらに備え、
    第一方法は、第一位置及び第二位置で画定された進行主軸に沿って、予め決められた第一位置と予め決められた第二位置との間で実質的に一定速度で試料面に並行に顕微鏡対物レンズを動かすものであり、
    第二方法は、進行主軸に直角であり試料平行面にある第二軸に沿って顕微鏡対物レンズを動かすものであることを特徴とする、請求項1記載のスキャナ。
  29. 電動前金具とデータ処理装置との間に接続された前金具コントローラをさらに備え、
    データ処理装置は、電動前金具によって保持された顕微鏡対物レンズの位置を決定することを特徴とする、請求項28記載のスキャナ。
  30. ローカルの出力装置および少なくとも一つのローカルの入力装置をさらに備え、それぞれがスキャナのデータ処理装置に接続されていることを特徴とする、請求項1記載のスキャナ。
  31. 最大領域を有する試料の表面によって画定された主要試料面を有する顕微鏡試料の少なくとも一つの部分を自動的にデジタル化するためのスキャナであって、
    試料を取り付けるためのステージと、
    試料の少なくとも一つの部分が照明される照明システムと、
    照明システムによって照明された試料の部分に関して中心にある光軸に沿って位置決めされ、試料面に直角である少なくとも一つの顕微鏡対物レンズと、
    第一方法および第二方法で少なくとも一つの顕微鏡対物レンズを保持し且つ動かすことのできる電動前金具であって、第一方法が、第一位置及び第二位置で画定された進行主軸に沿って、予め決められた第一位置と予め決められた第二位置との間で実質的に一定速度で試料面と並行に顕微鏡対物レンズを動かすものであり、第二方法が、進行主軸に直角であり且つ試料平行面にある第二軸に沿って顕微鏡対物レンズを動かすものである電動前金具と、
    顕微鏡対物レンズからの光学信号が光軸に直角の画像面上に合焦される合焦光学系と、
    少なくとも一つの一次元配列で配置された複数の光応答性要素を備える少なくとも一つのカメラであって、光応答性要素は、カメラが照明システムによって照明されたステージ上にある試料の領域の一次元の観察フィールドを有し、且つ、進行主軸に直角であるようにステージに関して画像面に位置決めされているカメラと、
    予め決められた顕微鏡対物レンズの動きに同期して、複数の光応答性要素からの光強度をデジタル化、処理、及び格納するためのデータ処理装置であって、顕微鏡対物レンズの動きが、試料の第一のストリップ画像を得るために第一方法で顕微鏡対物レンズを動かすものであり、次に、第二の連続したストリップ画像を得て、試料の部分の完全な画像を生成するために試料の部分をデジタル化するために必要なときに顕微鏡対物レンズを動かすことを繰り返すことのためにカメラを位置決めする第二方法で顕微鏡対物レンズを動かすものであるデータ処理装置と、
    を備えることを特徴とするスキャナ。
  32. 電動前金具とデータ処理装置との間に接続された前金具コントローラをさらに備え、データ処理装置が電動前金具によって保持された顕微鏡対物レンズの位置を決定することを特徴とする、請求項31記載のスキャナ。
  33. ステージは、第一方法及び第二方法で試料を取り付け且つ動かすための電動ステージをさらに備え、
    第一方法は、第一位置及び第二位置で画定された進行主軸に沿って、予め決められた第一位置と予め決められた第二位置との間で実質的に一定速度で試料面にある試料を動かすものであり、
    第二方法は、進行主軸に直角であり試料面にある第二軸に沿って試料を動かすものであることを特徴とする、請求項31記載のスキャナ。
  34. 電動ステージとデータ処理装置との間に接続されたステージコントローラをさらに備え、データ処理装置が電動ステージの位置を決定することを特徴とする、請求項33記載のスキャナ。
  35. 最大領域を有する試料の表面によって画定された主要試料面を有する顕微鏡試料の少なくとも一つの部分を自動的にデジタル化し且つ調査するための光学顕微鏡使用システムであって、
    ネットワークと、
    ネットワークに接続された少なくとも一つのコンピュータと、
    ネットワークに接続されたスキャナであって、
    第一方法および第二方法で試料を取り付け且つ動かすための電動ステージであって、第一方法は、第一位置及び第二位置で画定された進行主軸に沿って、予め決められた第一位置と予め決められた第二位置との間で実質的に一定速度で試料面にある試料を動かすものであり、第二方法は、進行主軸に直角であり試料面にある第二軸に沿って試料を動かすものである電動ステージと、
    試料の少なくとも一つの部分が照明される照明システムと、
    照明システムによって照明された試料の部分に関して中心にある光軸に沿って位置決めされ且つ試料面に直角である少なくとも一つの顕微鏡対物レンズと、
    光軸に直角の画像面上に顕微鏡対物レンズからの光学信号が合焦される合焦光学系と、
    少なくとも一つの一次元配列で配置された複数の光応答性要素を備える少なくとも一つのカメラと、カメラが照明システムによって照明された電動ステージ上に試料の領域の一次元の観察フィールドを有し、進行主軸に直角であるように、光応答性要素が電動ステージに関して画像面に位置決めされているカメラと、
    予め決められた試料の動きに同期して、複数の光応答性要素からの光強度をデジタル化、処理、及び格納するためのデータ処理装置であって、試料の動きが、試料の第一のストリップ画像を得るために第一方法で試料を動かすものであり、次に、第二の連続したストリップ画像を得て、試料の部分の完全な画像を生成するために試料の部分をデジタル化するために必要なときに試料を動かすことを繰り返すことのためにカメラを位置決めする第二方法で試料を動かすものであるデータ処理装置と、を備えるスキャナと、
    を備えることを特徴とする光学顕微鏡使用システム。
  36. ローカルの出力装置および少なくとも一つのローカルの入力装置をさらに備え、各々がスキャナに接続されていることを特徴とする、請求項35記載のシステム。
  37. 最大領域を有する試料の表面によって画定された主要試料面を有する顕微鏡試料の少なくとも一つの部分をスキャナで自動的にデジタル化する方法であって、
    上記スキャナが一次元配列カメラデジタル検出器を備え、
    該方法が、
    試料が実質的に一定速度で一次元配列カメラデジタル検出器に関して移動する間、試料の一部分から第一の画像ストリップをデジタルでスキャンし且つ格納するステップと、
    試料の連続した一部分に対して検出器を位置決めするために試料を動かすステップと、
    試料が実質的に一定速度で検出器に関して動いている間、試料の連続した一部分から第二の画像ストリップをデジタルでスキャンし且つ格納するステップと、
    顕微鏡試料の部分が完全にデジタル化されるまで、連続した画像ストリップをデジタルでスキャンし且つ格納するステップを繰り返すステップと、
    を備えることを特徴とする方法。
  38. 第一の画像ストリップをデジタルでスキャンし且つ格納するステップが第一方向で実行され、第一の画像ストリップをデジタルでスキャンし且つ格納するステップが第一方向と反対方向の第二方向で実行されることを特徴とする、請求項37記載の方法。
  39. 複数の連続した画像ストリップから連続した画像を組み立てるステップをさらに備えることを特徴とする、請求項37記載の方法。
  40. 最大領域を有する試料の表面によって画定された主要試料面を有する顕微鏡試料の少なくとも一つの部分を、光学顕微鏡使用システムで自動的にデジタル化し且つ調査する方法であって、
    光学顕微鏡使用システムが、ネットワーク、ネットワークに接続された少なくとも一つのコンピュータ、及びネットワークに接続されたスキャナを備え、
    スキャナが一次元配列カメラデジタル検出器を有し、
    上記方法が、
    スキャナを初期化するステップと、
    スキャナで顕微鏡試料の部分の画像を自動的にデジタル化するステップであって、
    試料が実質的に一定速度で一次元配列カメラデジタル検出器に関して動いている間、試料の一部分から第一の画像ストリップをデジタルでスキャンし且つ格納するステップと、
    試料の連続した部分に検出器を位置決めするために試料を動かすステップと、
    試料が実質的に一定速度で検出器に関して動いている間、試料の連続した部分からの第二の画像ストリップをデジタルでスキャンし且つ格納するステップと、
    顕微鏡試料の部分が完全にデジタル化されるまで、連続した画像ストリップをデジタルでスキャンし且つ格納するステップを繰り返すステップと、
    を通じてスキャナで顕微鏡試料の部分の画像を自動的にデジタル化するステップと、
    コンピュータでデジタル化された画像の調査するステップと、
    を備えることを特徴とする方法。
  41. 第一の画像ストリップをデジタルでスキャンし且つ格納するステップが第一方向で実行され、第二の画像ストリップをデジタルでスキャンし且つ格納するステップが、第一方向と反対方向である第二方向で実行されることを特徴とする、請求項40の方法。
  42. デジタル化画像の調査に基づいて試料にリターン分析すべきかどうか決定するステップと、
    リターン分析を支持する決定に際して、リターン分析が従来の顕微鏡またはスキャナによって行なわれるかどうかを決定するステップと、
    をさらに備えることを特徴とする、請求項40の方法。
  43. 顕微鏡試料の一部分の少なくとも一つの完全な画像に対するコンピュータ画像観察フレームは、
    マクロ画像が表示されるマクロ窓と、
    低解像度での少なくとも一つの対象画像が表示される対象窓と、
    高解像度でのズーム画像または対象画像が表示されるズーム窓と、
    少なくとも一つのコントロールアイコンが表示されるユーザコマンド窓と、
    を備えることを特徴とするコンピュータ画像観察フレーム。
  44. 少なくとも一つの統計量が表示されている分析窓をさらに備えることを特徴とする、請求項43記載のフレーム。
  45. いずれの複数の画像属性も、分析の基礎として対話式に選択されることを特徴とする、請求項44記載のフレーム。
  46. いずれの窓も、全てのフレーム内に対話式に大きさを合わせられ且つ動かされることを特徴とする、請求項43記載のフレーム。
  47. ズーム窓に表示されたズーム画像に相当するマクロ窓に表示されたズーム領域をさらに備えることを特徴とする、請求項43記載のフレーム。
  48. ズーム領域は、マクロ画像全体に関して対話式に大きさを合わせられ且つ動かされることを特徴とする、請求項47記載のフレーム。
  49. 顕微鏡試料の一部分の少なくとも一つの完全な画像に対するコンピュータ画像観察フレームを生成する方法であって、
    上記方法は、
    マクロ窓にマクロ画像を表示するステップと、
    対象窓に少なくとも一つの対象画像を低解像度で表示するステップと、
    ズーム窓にズーム画像または対象画像を高解像度で表示するステップと、
    ユーザコマンド窓に少なくとも一つのコントロールアイコンを表示するステップと、
    を備えることを特徴とする方法。
  50. 分析窓に少なくとも一つの統計量を表示するステップをさらに備えることを特徴とする、請求項49記載の方法。
  51. 分析の基礎としていずれの複数の画像属性をも対話式に選択するステップを備えることを特徴とする、請求項50記載の方法。
  52. 全てのフレーム内にいずれの窓をも対話式に大きさを合わせるとともに動かすステップをさらに備えることを特徴とする、請求項49記載の方法。
  53. ズーム窓に表示されたズーム画像に相当するマクロ窓にズーム領域を表示するステップをさらに備えることを特徴とする、請求項49記載の方法。
  54. マクロ画像全体に関してズーム領域を対話式に大きさを合わせるとともに動かすステップをさらに備えることを特徴とする、請求項53記載の方法。
  55. 顕微鏡試料の一部分の少なくとも一つの完全な画像に対する動的なコンピュータ画像観察フレームであって、
    マクロ画像が表示されるマクロ窓と、
    映画画像が表示される映画窓と、
    ズーム画像が表示されるズーム窓と、
    少なくとも一つのコントロールアイコンが表示されるユーザコマンド窓と、
    を備えることを特徴とする動的なコンピュータ画像観察フレーム。
  56. 少なくとも一つの統計量が表示される分析窓をさらに備えることを特徴とする、請求項55記載のフレーム。
  57. いずれの複数の画像属性も、分析の基礎として対話式に選択されることを特徴とする、請求項56記載のフレーム。
  58. いずれの窓も、全てのフレーム内に対話式に大きさを合わせられるとともに動かされることを特徴とする、請求項55記載のフレーム。
  59. ズーム窓に表示されたズーム画像に相当するマクロ窓に表示されたズーム領域を備えることを特徴とする、請求項55記載のフレーム。
  60. ズーム領域がマクロ画像全体に関して対話式に大きさを合わせられ且つ動かされることを特徴とする、請求項59記載のフレーム。
  61. 映画窓に表示されているマクロ画像の領域に相当するマクロ窓に表示されたスキャントラッカーをさらに備えることを特徴とする、請求項55記載のフレーム。
  62. 顕微鏡試料の一部分の少なくとも一つの完全な画像に対する動的なコンピュータ画像観察フレームを生成する方法であって、
    上記方法は、
    マクロ窓にマクロ画像を表示するステップと、
    映画窓中に映画画像を表示するステップと、
    ズーム窓にズーム画像を表示するステップと、
    ユーザコマンド窓に少なくとも一つのコントロールアイコンを表示するステップと、
    を備えることを特徴とする方法。
  63. 分析窓に少なくとも一つの統計量を表示するステップをさらに備えることを特徴とする、請求項62記載の方法。
  64. 分析の基礎としていずれの複数の画像属性をも対話式に選択するステップを備えることを特徴とする、請求項63記載の方法。
  65. 全てのフレーム内にいずれの窓をも対話式に大きさを合わせるとともに動かすステップをさらに備えることを特徴とする、請求項62記載の方法。
  66. ズーム窓に表示されたズーム画像に相当するマクロ窓にズーム領域を表示するステップをさらに備えることを特徴とする、請求項62記載の方法。
  67. マクロ画像全体に関してズーム領域を対話式に大きさを合わせるとともに動かすステップをさらに備えることを特徴とする、請求項66記載の方法。
  68. 映画窓に表示されているマクロ画像の領域に相当するマクロ窓にスキャントラッカーを表示するステップをさらに備える、請求項62記載の方法。
  69. 顕微鏡試料の一部分の少なくとも一つの完全な画像に対して動的なコンピュータ映画画像を生成する方法であって、
    上記方法は、
    完全な画像を複数の映画画像ストリップに分割するステップと、
    従来の顕微鏡の手動スキャンの動きをシミュレートする方法で映画窓に複数の映画画像ストリップの一つの少なくとも一つの部分を表示するステップと、
    を備えることを特徴とする方法。
  70. それらの画像内容に基づいた映画画像ストリップの部分をランク付けするステップと、ランク順でそれらの部分を表示するステップをさらに備えることを特徴とする、請求項69記載の方法。
  71. 重要でないランクの映画画像ストリップの部分は表示されないことを特徴とする、請求項70記載の方法。
  72. 重要度が低ランクの映画画像ストリップの部分は、第一の速度で表示され、重要度が高ランクの映画画像ストリップの部分は、第二の速度で表示され、第一の速度が第二の速度より速いことを特徴とする、請求項70記載の方法。
  73. それらの画像内容に基づいた映画画像ストリップの要素を評価するステップと、ユーザにとって重要でない要素を除去するステップとをさらに備えることを特徴とする、請求項69記載の方法。
JP2018226880A 2000-05-03 2018-12-03 全自動高速顕微鏡スライドスキャナ Withdrawn JP2019049751A (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US09/563,437 US6711283B1 (en) 2000-05-03 2000-05-03 Fully automatic rapid microscope slide scanner
US09/563,437 2000-05-03

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2017113034A Division JP2017194700A (ja) 2000-05-03 2017-06-07 全自動迅速顕微鏡用スライドスキャナ

Publications (1)

Publication Number Publication Date
JP2019049751A true JP2019049751A (ja) 2019-03-28

Family

ID=24250487

Family Applications (7)

Application Number Title Priority Date Filing Date
JP2001581174A Pending JP2004514920A (ja) 2000-05-03 2001-03-13 全自動迅速顕微鏡用スライドスキャナ
JP2011109646A Pending JP2011232762A (ja) 2000-05-03 2011-05-16 全自動迅速顕微鏡用スライドスキャナ
JP2016076394A Expired - Lifetime JP6437947B2 (ja) 2000-05-03 2016-04-06 全自動迅速顕微鏡用スライドスキャナ
JP2017113034A Withdrawn JP2017194700A (ja) 2000-05-03 2017-06-07 全自動迅速顕微鏡用スライドスキャナ
JP2017113033A Withdrawn JP2017194699A (ja) 2000-05-03 2017-06-07 全自動迅速顕微鏡用スライドスキャナ
JP2018226879A Withdrawn JP2019056917A (ja) 2000-05-03 2018-12-03 全自動高速顕微鏡スライドスキャナ
JP2018226880A Withdrawn JP2019049751A (ja) 2000-05-03 2018-12-03 全自動高速顕微鏡スライドスキャナ

Family Applications Before (6)

Application Number Title Priority Date Filing Date
JP2001581174A Pending JP2004514920A (ja) 2000-05-03 2001-03-13 全自動迅速顕微鏡用スライドスキャナ
JP2011109646A Pending JP2011232762A (ja) 2000-05-03 2011-05-16 全自動迅速顕微鏡用スライドスキャナ
JP2016076394A Expired - Lifetime JP6437947B2 (ja) 2000-05-03 2016-04-06 全自動迅速顕微鏡用スライドスキャナ
JP2017113034A Withdrawn JP2017194700A (ja) 2000-05-03 2017-06-07 全自動迅速顕微鏡用スライドスキャナ
JP2017113033A Withdrawn JP2017194699A (ja) 2000-05-03 2017-06-07 全自動迅速顕微鏡用スライドスキャナ
JP2018226879A Withdrawn JP2019056917A (ja) 2000-05-03 2018-12-03 全自動高速顕微鏡スライドスキャナ

Country Status (7)

Country Link
US (19) US6711283B1 (ja)
EP (3) EP1990667A1 (ja)
JP (7) JP2004514920A (ja)
AT (1) ATE406591T1 (ja)
AU (1) AU2001247403A1 (ja)
DE (1) DE60135562D1 (ja)
WO (1) WO2001084209A2 (ja)

Families Citing this family (609)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6396941B1 (en) * 1996-08-23 2002-05-28 Bacus Research Laboratories, Inc. Method and apparatus for internet, intranet, and local viewing of virtual microscope slides
US6272235B1 (en) * 1997-03-03 2001-08-07 Bacus Research Laboratories, Inc. Method and apparatus for creating a virtual microscope slide
US6404906B2 (en) * 1997-03-03 2002-06-11 Bacus Research Laboratories,Inc. Method and apparatus for acquiring and reconstructing magnified specimen images from a computer-controlled microscope
US20040083085A1 (en) * 1998-06-01 2004-04-29 Zeineh Jack A. Integrated virtual slide and live microscope system
US6606413B1 (en) * 1998-06-01 2003-08-12 Trestle Acquisition Corp. Compression packaged image transmission for telemicroscopy
US6847729B1 (en) * 1999-04-21 2005-01-25 Fairfield Imaging Limited Microscopy
US6734962B2 (en) * 2000-10-13 2004-05-11 Chemimage Corporation Near infrared chemical imaging microscope
US20020007122A1 (en) * 1999-12-15 2002-01-17 Howard Kaufman Methods of diagnosing disease
US6862142B2 (en) * 2000-03-10 2005-03-01 Kla-Tencor Technologies Corporation Multi-detector microscopic inspection system
PT1146480E (pt) * 2000-04-06 2004-01-30 European Molecular Biology Lab Embl Microscopio controlado por computador
US7668362B2 (en) 2000-05-03 2010-02-23 Aperio Technologies, Inc. System and method for assessing virtual slide image quality
US6711283B1 (en) 2000-05-03 2004-03-23 Aperio Technologies, Inc. Fully automatic rapid microscope slide scanner
US7738688B2 (en) * 2000-05-03 2010-06-15 Aperio Technologies, Inc. System and method for viewing virtual slides
US7518652B2 (en) * 2000-05-03 2009-04-14 Aperio Technologies, Inc. Method and apparatus for pre-focus in a linear array based slide scanner
DE10026392A1 (de) * 2000-05-27 2001-11-29 Leica Microsystems Verfahren und Anordnung zur Kodierung von Livebildern in der Mikroskopie
US20020051287A1 (en) * 2000-07-25 2002-05-02 Olympus Optical Co., Ltd. Imaging apparatus for microscope
AU2002230842A1 (en) 2000-10-30 2002-05-15 The General Hospital Corporation Optical methods and systems for tissue analysis
US7418118B2 (en) * 2000-11-10 2008-08-26 Furnas Steven J Method and apparatus for diagnosing pathogenic or allergenic microorganisms or microparticles at a remote location
US7171030B2 (en) * 2000-11-30 2007-01-30 University Of Medicine & Denistry Of New Jersey Systems for analyzing microtissue arrays
US7079673B2 (en) * 2002-02-05 2006-07-18 University Of Medicine & Denistry Of Nj Systems for analyzing microtissue arrays
DE20114544U1 (de) 2000-12-04 2002-02-21 Cascade Microtech, Inc., Beaverton, Oreg. Wafersonde
US6993169B2 (en) * 2001-01-11 2006-01-31 Trestle Corporation System and method for finding regions of interest for microscopic digital montage imaging
US7155049B2 (en) * 2001-01-11 2006-12-26 Trestle Acquisition Corp. System for creating microscopic digital montage images
US7446783B2 (en) * 2001-04-12 2008-11-04 Hewlett-Packard Development Company, L.P. System and method for manipulating an image on a screen
US7134093B2 (en) * 2001-04-18 2006-11-07 International Business Machines Corporation Graphical user interface for direct control of display of data
US7105795B2 (en) * 2001-07-06 2006-09-12 Palantyr Research, Llc Imaging system, methodology, and applications employing reciprocal space optical design
US7439478B2 (en) * 2001-07-06 2008-10-21 Palantyr Research, Llc Imaging system, methodology, and applications employing reciprocal space optical design having at least one pixel being scaled to about a size of a diffraction-limited spot defined by a microscopic optical system
US7863552B2 (en) * 2001-07-06 2011-01-04 Palantyr Research Llc Digital images and related methodologies
US7136539B2 (en) * 2001-07-26 2006-11-14 Weyl John A Drug sample identification peripheral
WO2003014400A1 (en) * 2001-08-08 2003-02-20 Applied Precision, Llc Time-delay integration imaging of biological specimens
DE10143441A1 (de) * 2001-09-05 2003-03-27 Leica Microsystems Verfahren und Mikroskopsystem zur Beobachtung dynamischer Prozesse
CA2463671C (en) * 2001-09-13 2013-07-02 Pixia Corp. A system and method to display and navigate large images
US6912695B2 (en) 2001-09-13 2005-06-28 Pixia Corp. Data storage and retrieval system and method
US7027233B2 (en) * 2001-10-12 2006-04-11 Intralase Corp. Closed-loop focal positioning system and method
GB2383487B (en) * 2001-12-18 2006-09-27 Fairfield Imaging Ltd Method and apparatus for acquiring digital microscope images
GB2385481B (en) * 2002-02-13 2004-01-07 Fairfield Imaging Ltd Microscopy imaging system and method
US7596249B2 (en) * 2002-02-22 2009-09-29 Olympus America Inc. Focusable virtual microscopy apparatus and method
US7283253B2 (en) * 2002-03-13 2007-10-16 Applied Precision, Llc Multi-axis integration system and method
JP4346859B2 (ja) * 2002-03-27 2009-10-21 富士フイルム株式会社 画像撮像装置、画像撮像装置における画像表示方法およびプログラム
US6924929B2 (en) * 2002-03-29 2005-08-02 National Institute Of Radiological Sciences Microscope apparatus
US20050170356A1 (en) * 2002-05-28 2005-08-04 Fareed Kureshy Multi-reagent pack
US7312432B2 (en) * 2002-07-08 2007-12-25 Dmetrix, Inc. Single axis illumination for multi-axis imaging system
DE10250503A1 (de) * 2002-10-29 2004-05-19 Leica Microsystems Heidelberg Gmbh Mikroskopsystem und Verfahren zur Detektion und Kompensation von Veränderungen eines aufgenommenen Bildinhalts
US20040095615A1 (en) * 2002-11-14 2004-05-20 Chung-Hua Tsai Biological scanner with two dimensional scanning operation
US20040101954A1 (en) * 2002-11-27 2004-05-27 Graessle Josef A. Back side plate illumination for biological growth plate scanner
US7319031B2 (en) * 2002-11-27 2008-01-15 3M Innovative Properties Company Mounting platform for biological growth plate scanner
US7298885B2 (en) * 2002-11-27 2007-11-20 3M Innovative Properties Company Biological growth plate scanner with automated image processing profile selection
US7351574B2 (en) * 2002-11-27 2008-04-01 3M Innovative Properties Company Loading and ejection systems for biological growth plate scanner
US20040102903A1 (en) * 2002-11-27 2004-05-27 Graessle Josef A. Biological growth plate scanner
US8964830B2 (en) * 2002-12-10 2015-02-24 Ol2, Inc. System and method for multi-stream video compression using multiple encoding formats
US9108107B2 (en) * 2002-12-10 2015-08-18 Sony Computer Entertainment America Llc Hosting and broadcasting virtual events using streaming interactive video
US9314691B2 (en) 2002-12-10 2016-04-19 Sony Computer Entertainment America Llc System and method for compressing video frames or portions thereof based on feedback information from a client device
US8949922B2 (en) * 2002-12-10 2015-02-03 Ol2, Inc. System for collaborative conferencing using streaming interactive video
US9138644B2 (en) 2002-12-10 2015-09-22 Sony Computer Entertainment America Llc System and method for accelerated machine switching
US20090118019A1 (en) * 2002-12-10 2009-05-07 Onlive, Inc. System for streaming databases serving real-time applications used through streaming interactive video
US9077991B2 (en) 2002-12-10 2015-07-07 Sony Computer Entertainment America Llc System and method for utilizing forward error correction with video compression
GB2398196B (en) 2003-02-05 2005-06-01 Fairfield Imaging Ltd Microscope system and method
GB0304568D0 (en) 2003-02-27 2003-04-02 Isis Innovation Microscopic imaging device
US7116440B2 (en) 2003-02-28 2006-10-03 Aperio Technologies, Inc. Image processing and analysis framework
JP4818100B2 (ja) * 2003-02-28 2011-11-16 アペリオ・テクノロジーズ・インコーポレイテッド 画像処理及び画像解析用フレームワーク
US7257268B2 (en) * 2003-02-28 2007-08-14 Aperio Technologies, Inc. Systems and methods for image pattern recognition
DE112004000348T8 (de) * 2003-03-03 2006-08-10 Nikon Corporation Digitales Mikroskopbild-Erfassungssystem
JP4346938B2 (ja) * 2003-04-09 2009-10-21 キヤノン株式会社 画像処理装置、方法、プログラム及び記憶媒体
US7057404B2 (en) 2003-05-23 2006-06-06 Sharp Laboratories Of America, Inc. Shielded probe for testing a device under test
US7327513B2 (en) * 2003-05-28 2008-02-05 The Regents Of The University Of California Method and apparatus for viewing target
US7756357B2 (en) * 2003-07-01 2010-07-13 Olympus Corporation Microscope system for obtaining high and low magnification images
US7282180B2 (en) * 2003-07-02 2007-10-16 Immunivest Corporation Devices and methods to image objects
US7860727B2 (en) 2003-07-17 2010-12-28 Ventana Medical Systems, Inc. Laboratory instrumentation information management and control network
US20080235055A1 (en) * 2003-07-17 2008-09-25 Scott Mattingly Laboratory instrumentation information management and control network
US8719053B2 (en) 2003-07-17 2014-05-06 Ventana Medical Systems, Inc. Laboratory instrumentation information management and control network
US20050089208A1 (en) * 2003-07-22 2005-04-28 Rui-Tao Dong System and method for generating digital images of a microscope slide
DE10338590A1 (de) * 2003-08-22 2005-03-17 Leica Microsystems Heidelberg Gmbh Anordnung und Verfahren zum Steuern und Bedienen eines Mikroskops
CA2438951A1 (en) * 2003-08-29 2005-02-28 Bob Richards Feeder system and method
US7496225B2 (en) * 2003-09-04 2009-02-24 3M Innovative Properties Company Biological growth plate scanner with automated intake
US7298886B2 (en) * 2003-09-05 2007-11-20 3M Innovative Properties Company Counting biological agents on biological growth plates
US8068988B2 (en) 2003-09-08 2011-11-29 Ventana Medical Systems, Inc. Method for automated processing of digital images of tissue micro-arrays (TMA)
WO2005027015A2 (en) * 2003-09-10 2005-03-24 Bioimagene, Inc. Method and system for quantitatively analyzing biological samples
WO2005036451A1 (en) * 2003-10-08 2005-04-21 Lifespan Biosciences, Inc. Automated microspcope slide tissue sample mapping and image acquisition
US6933954B2 (en) * 2003-10-31 2005-08-23 Microsoft Corporation Aspect ratio conversion of video content
JP2007517231A (ja) 2003-12-24 2007-06-28 カスケード マイクロテック インコーポレイテッド アクティブ・ウェハプローブ
TWI290272B (en) * 2004-03-12 2007-11-21 Murata Machinery Ltd Moving body system
US7925070B2 (en) * 2004-03-30 2011-04-12 Sysmex Corporation Method for displaying virtual slide and terminal device for displaying virtual slide
US7567256B2 (en) * 2004-03-31 2009-07-28 Harris Corporation Method and apparatus for analyzing digital video using multi-format display
US7813589B2 (en) * 2004-04-01 2010-10-12 Hewlett-Packard Development Company, L.P. System and method for blending images into a single image
JP5134365B2 (ja) * 2004-05-27 2013-01-30 アペリオ・テクノロジーズ・インコーポレイテッド 三次元仮想スライドを生成しかつ可視化するためのシステム及び方法
US7653260B2 (en) * 2004-06-17 2010-01-26 Carl Zeis MicroImaging GmbH System and method of registering field of view
GB0414201D0 (en) 2004-06-24 2004-07-28 Fujifilm Electronic Imaging Method and apparatus for forming a multiple focus stack image
AU2005270037B2 (en) 2004-07-02 2012-02-09 The General Hospital Corporation Endoscopic imaging probe comprising dual clad fibre
US20060018013A1 (en) * 2004-07-07 2006-01-26 Yoshimasa Suzuki Microscope imaging apparatus and biological-specimen examination system
DE102004034975A1 (de) * 2004-07-16 2006-02-16 Carl Zeiss Jena Gmbh Verfahren zur Erfassung von Bildern einer Probe mit einem Mikroskop
DE102004034988A1 (de) * 2004-07-16 2006-02-02 Carl Zeiss Jena Gmbh Lichtrastermikroskop und Verwendung
DE102004034985A1 (de) * 2004-07-16 2006-02-02 Carl Zeiss Jena Gmbh Verfahren zur Erfassung von Bildern einer Probe mit einem Lichtrastermikroskop mit linienförmiger Abtastung
JP2006039315A (ja) * 2004-07-28 2006-02-09 Hamamatsu Photonics Kk 自動焦点装置及びそれを用いた顕微鏡装置
JP4542386B2 (ja) * 2004-07-30 2010-09-15 シスメックス株式会社 画像表示システム、画像提供装置、画像表示装置、およびコンピュータプログラム
US20060028717A1 (en) * 2004-08-04 2006-02-09 Dunn Steven M Network memory microscope
US7792338B2 (en) * 2004-08-16 2010-09-07 Olympus America Inc. Method and apparatus of mechanical stage positioning in virtual microscopy image capture
US20060133657A1 (en) * 2004-08-18 2006-06-22 Tripath Imaging, Inc. Microscopy system having automatic and interactive modes for forming a magnified mosaic image and associated method
JP5324095B2 (ja) 2004-08-24 2013-10-23 ザ ジェネラル ホスピタル コーポレイション 血管セグメントを画像化する方法および装置
EP1784763B1 (en) * 2004-09-01 2019-05-22 Leica Biosystems Imaging, Inc. System and method for data management in a linear-array-based microscope slide scanner
DE102004042913A1 (de) * 2004-09-02 2006-03-30 Westfälische-Wilhelms Universität Münster Scanneranordnung und Verfahren zum optischen Abtasten eines Objektes
KR20070058522A (ko) 2004-09-13 2007-06-08 캐스케이드 마이크로테크 인코포레이티드 양측 프루빙 구조
JP4600395B2 (ja) * 2004-09-22 2010-12-15 株式会社ニコン 顕微鏡システムおよび画像処理方法
US8858425B2 (en) * 2004-09-24 2014-10-14 Vivid Medical, Inc. Disposable endoscope and portable display
US8878924B2 (en) * 2004-09-24 2014-11-04 Vivid Medical, Inc. Disposable microscope and portable display
US9033870B2 (en) * 2004-09-24 2015-05-19 Vivid Medical, Inc. Pluggable vision module and portable display for endoscopy
US8827899B2 (en) * 2004-09-24 2014-09-09 Vivid Medical, Inc. Disposable endoscopic access device and portable display
US7417735B2 (en) * 2004-09-27 2008-08-26 Idc, Llc Systems and methods for measuring color and contrast in specular reflective devices
US7343080B2 (en) * 2004-09-27 2008-03-11 Idc, Llc System and method of testing humidity in a sealed MEMS device
US7113625B2 (en) * 2004-10-01 2006-09-26 U.S. Pathology Labs, Inc. System and method for image analysis of slides
US20060092505A1 (en) * 2004-11-02 2006-05-04 Umech Technologies, Co. Optically enhanced digital imaging system
US7787672B2 (en) 2004-11-04 2010-08-31 Dr Systems, Inc. Systems and methods for matching, naming, and displaying medical images
US7970625B2 (en) 2004-11-04 2011-06-28 Dr Systems, Inc. Systems and methods for retrieval of medical data
US7660488B2 (en) * 2004-11-04 2010-02-09 Dr Systems, Inc. Systems and methods for viewing medical images
US7920152B2 (en) * 2004-11-04 2011-04-05 Dr Systems, Inc. Systems and methods for viewing medical 3D imaging volumes
US7885440B2 (en) 2004-11-04 2011-02-08 Dr Systems, Inc. Systems and methods for interleaving series of medical images
US7253575B2 (en) * 2004-11-08 2007-08-07 Sutter Instrument Company Industrial optical shutter
US7281208B2 (en) * 2004-11-18 2007-10-09 Microsoft Corporation Image stitching methods and systems
US8084260B2 (en) * 2004-11-24 2011-12-27 Applied Biosystems, Llc Spectral calibration method and system for multiple instruments
EP1816949A1 (en) 2004-11-29 2007-08-15 The General Hospital Corporation Arrangements, devices, endoscopes, catheters and methods for performing optical imaging by simultaneously illuminating and detecting multiple points on a sample
WO2006076432A2 (en) * 2005-01-11 2006-07-20 University Of Central Florida Interactive multiple gene expression map system
US8774560B2 (en) * 2005-01-11 2014-07-08 University Of Central Florida Research Foundation, Inc. System for manipulation, modification and editing of images via remote device
US20060159325A1 (en) * 2005-01-18 2006-07-20 Trestle Corporation System and method for review in studies including toxicity and risk assessment studies
JP2008535528A (ja) * 2005-01-18 2008-09-04 トレストル コーポレーション スライドの可変品質画像を形成するためのシステムおよび方法
US7787674B2 (en) * 2005-01-27 2010-08-31 Aperio Technologies, Incorporated Systems and methods for viewing three dimensional virtual slides
US7535247B2 (en) 2005-01-31 2009-05-19 Cascade Microtech, Inc. Interface for testing semiconductors
US7656172B2 (en) 2005-01-31 2010-02-02 Cascade Microtech, Inc. System for testing semiconductors
US20060170996A1 (en) * 2005-02-02 2006-08-03 Steven Headley Color control of a web printing press utilizing intra-image color measurements
JP5058444B2 (ja) * 2005-02-10 2012-10-24 オリンパス株式会社 顕微鏡写真装置および顕微鏡写真装置制御方法
JP4786207B2 (ja) * 2005-03-17 2011-10-05 浜松ホトニクス株式会社 顕微鏡システム
EP1875436B1 (en) 2005-04-28 2009-12-09 The General Hospital Corporation Evaluation of image features of an anatomical structure in optical coherence tomography images
US20060291042A1 (en) * 2005-05-17 2006-12-28 Alfano Robert R Optical scanning zoom microscope with high magnification and a large field of view
DE102005024063B3 (de) * 2005-05-25 2006-07-06 Soft Imaging System Gmbh Verfahren und Vorrichtung zur optischen Abtastung einer Probe
WO2006130802A2 (en) 2005-06-01 2006-12-07 The General Hospital Corporation Apparatus, method and system for performing phase-resolved optical frequency domain imaging
EP1897015A1 (en) * 2005-06-13 2008-03-12 Tripath Imaging, Inc. System and method for re-locating an object in a sample on a slide with a microscope imaging device
US7873193B2 (en) * 2005-06-21 2011-01-18 Carl Zeiss Microimaging Gmbh Serial section analysis for computer-controlled microscopic imaging
US8164622B2 (en) 2005-07-01 2012-04-24 Aperio Technologies, Inc. System and method for single optical axis multi-detector microscope slide scanner
WO2007019574A2 (en) 2005-08-09 2007-02-15 The General Hospital Corporation Apparatus, methods and storage medium for performing polarization-based quadrature demodulation in optical coherence tomography
JP4970869B2 (ja) * 2005-09-12 2012-07-11 オリンパス株式会社 観察装置および観察方法
JP2007114742A (ja) * 2005-09-21 2007-05-10 Olympus Corp 観察装置
PL1937137T3 (pl) * 2005-09-29 2022-11-21 General Hospital Corporation Sposób oraz aparatura dla obrazowania optycznego za pośrednictwem kodowania spektralnego
US20070106285A1 (en) 2005-11-09 2007-05-10 Ferenc Raksi Laser scanner
US20070140543A1 (en) * 2005-12-19 2007-06-21 Cytyc Corporation Systems and methods for enhanced cytological specimen review
US7528943B2 (en) * 2005-12-27 2009-05-05 Kla-Tencor Technologies Corporation Method and apparatus for simultaneous high-speed acquisition of multiple images
WO2007084903A2 (en) 2006-01-19 2007-07-26 The General Hospital Corporation Apparatus for obtaining information for a structure using spectrally-encoded endoscopy techniques and method for producing one or more optical arrangements
EP2659852A3 (en) 2006-02-01 2014-01-15 The General Hospital Corporation Apparatus for applying a plurality of electro-magnetic radiations to a sample
JP5524487B2 (ja) 2006-02-01 2014-06-18 ザ ジェネラル ホスピタル コーポレイション コンフォーマルレーザ治療手順を用いてサンプルの少なくとも一部分に電磁放射を放射する方法及びシステム。
US7595874B1 (en) 2006-02-08 2009-09-29 Sciperio, Inc. Method of condensed cell slide preparation and detection of rarely occurring cells on microscope slides
EP1989508A4 (en) * 2006-02-10 2009-05-20 Monogen Inc APPARATUS AND APPARATUS OF DIGITAL IMAGE DATA COLLECTION SOFTWARE OF SPECIMENS BASED ON MICROSCOPE SUPPORT
JP2009527770A (ja) 2006-02-24 2009-07-30 ザ ジェネラル ホスピタル コーポレイション 角度分解型のフーリエドメイン光干渉断層撮影法を遂行する方法及びシステム
WO2007101205A2 (en) * 2006-02-27 2007-09-07 Aperio Technologies, Inc System and method for single optical axis multi-detector microscope slide scanner
JP4917329B2 (ja) * 2006-03-01 2012-04-18 浜松ホトニクス株式会社 画像取得装置、画像取得方法、及び画像取得プログラム
JP4917330B2 (ja) * 2006-03-01 2012-04-18 浜松ホトニクス株式会社 画像取得装置、画像取得方法、及び画像取得プログラム
JP4917331B2 (ja) * 2006-03-01 2012-04-18 浜松ホトニクス株式会社 画像取得装置、画像取得方法、及び画像取得プログラム
HUP0600177A2 (en) * 2006-03-03 2009-03-02 3D Histech Kft Equipment for and method of digitizing slides by automated digital image recording system
US20070219541A1 (en) * 2006-03-14 2007-09-20 Intralase Corp. System and method for ophthalmic laser surgery on a cornea
US8254020B2 (en) * 2006-04-20 2012-08-28 Washington University Objective-coupled selective plane illumination microscopy
EP2015669A2 (en) 2006-05-10 2009-01-21 The General Hospital Corporation Processes, arrangements and systems for providing frequency domain imaging of a sample
US20090311734A1 (en) * 2006-05-12 2009-12-17 Jan Greve Laser Illumination System in Fluorescent Microscopy
JP4890096B2 (ja) * 2006-05-19 2012-03-07 浜松ホトニクス株式会社 画像取得装置、画像取得方法、及び画像取得プログラム
US8249315B2 (en) * 2006-05-22 2012-08-21 Upmc System and method for improved viewing and navigation of digital images
JP4974586B2 (ja) * 2006-05-24 2012-07-11 オリンパス株式会社 顕微鏡用撮像装置
US7773126B1 (en) * 2006-05-26 2010-08-10 Itt Manufacturing Enterprises, Inc. Mosaic image collector including an embedded atomic clock
DE102006025445A1 (de) * 2006-05-31 2007-12-06 Carl Zeiss Microimaging Gmbh Laser-Scanning-Mikroskop mit Hochgeschwindigkeitsdatenverarbeitung
US7403028B2 (en) 2006-06-12 2008-07-22 Cascade Microtech, Inc. Test structure and probe for differential signals
US7764072B2 (en) 2006-06-12 2010-07-27 Cascade Microtech, Inc. Differential signal probing system
US7723999B2 (en) 2006-06-12 2010-05-25 Cascade Microtech, Inc. Calibration structures for differential signal probing
US8649576B2 (en) * 2006-06-16 2014-02-11 George Mason Intellectual Properties, Inc. Arborization reconstruction
WO2008005868A2 (en) 2006-06-30 2008-01-10 Aperio Technologies, Inc. Method for storing and retrieving large images via dicom
US8010555B2 (en) 2006-06-30 2011-08-30 Aperio Technologies, Inc. System and method for managing images over a network
US7570795B2 (en) * 2006-07-18 2009-08-04 Mitutoyo Corporation Multi-region autofocus tool and mode
DE102006034205B4 (de) * 2006-07-25 2012-03-01 Carl Mahr Holding Gmbh Dynamische Bildaufnahme mit bildgebenden Sensoren
US8888592B1 (en) 2009-06-01 2014-11-18 Sony Computer Entertainment America Llc Voice overlay
DE102006042157B4 (de) 2006-09-06 2013-03-21 Leica Microsystems Cms Gmbh Verfahren und Mikroskopiersystem zum Scannen einer Probe
KR100790887B1 (ko) * 2006-09-22 2008-01-02 삼성전자주식회사 영상 처리장치 및 방법
US8838213B2 (en) 2006-10-19 2014-09-16 The General Hospital Corporation Apparatus and method for obtaining and providing imaging information associated with at least one portion of a sample, and effecting such portion(s)
US7865007B2 (en) 2006-10-30 2011-01-04 Olympus Corporation Microscope system, observation method and observation program
US7953614B1 (en) 2006-11-22 2011-05-31 Dr Systems, Inc. Smart placement rules
JP4938428B2 (ja) * 2006-12-01 2012-05-23 シスメックス株式会社 標本画像作成方法及び装置
KR100834745B1 (ko) * 2006-12-20 2008-06-09 삼성전자주식회사 분석 친화적 레이아웃에 기반한 올리고머 프로브 어레이칩, 이의 제조에 사용되는 마스크 및 이의 혼성화 분석방법
GB0625775D0 (en) 2006-12-22 2007-02-07 Isis Innovation Focusing apparatus and method
JP5006062B2 (ja) * 2007-02-05 2012-08-22 オリンパス株式会社 バーチャルスライド作成装置、バーチャルスライド作成方法およびバーチャルスライド作成プログラム
JP5389016B2 (ja) 2007-05-04 2014-01-15 アペリオ・テクノロジーズ・インコーポレイテッド 病理学における品質保証のためのシステムおよび方法
WO2008137746A1 (en) * 2007-05-04 2008-11-13 Aperio Technologies, Inc. Rapid microscope scanner for volume image acquisition
WO2008137912A1 (en) * 2007-05-07 2008-11-13 Ge Healthcare Bio-Sciences Corp. System and method for the automated analysis of cellular assays and tissues
JP4296207B2 (ja) 2007-05-10 2009-07-15 日本分光株式会社 顕微測定装置
DE102007033793A1 (de) * 2007-07-19 2009-01-22 Carl Zeiss Imaging Solutions Gmbh Verfahren und Vorrichtung zum mikroskopischen Untersuchen einer Probe, Computerprogramm und Computerprogrammprodukt
US7936913B2 (en) * 2007-08-07 2011-05-03 Nextslide Imaging Llc Network image review in clinical hematology
US7876114B2 (en) 2007-08-08 2011-01-25 Cascade Microtech, Inc. Differential waveguide probe
US20090046359A1 (en) * 2007-08-14 2009-02-19 Nikon Corporation Microscope
US8878923B2 (en) * 2007-08-23 2014-11-04 General Electric Company System and method for enhanced predictive autofocusing
JP5293604B2 (ja) * 2007-09-03 2013-09-18 株式会社ニコン 顕微鏡装置、およびプログラム
US20090067700A1 (en) * 2007-09-10 2009-03-12 Riverain Medical Group, Llc Presentation of computer-aided detection/diagnosis (CAD) results
US9098736B2 (en) * 2007-09-21 2015-08-04 Leica Biosystems Imaging, Inc. Image quality for diagnostic resolution digital slide images
WO2009041918A1 (en) * 2007-09-26 2009-04-02 Agency For Science, Technology And Research A method and system for generating an entirely well-focused image of a large three-dimensional scene
JP4869199B2 (ja) * 2007-09-28 2012-02-08 富士フイルム株式会社 放射線撮影装置
US9147213B2 (en) 2007-10-26 2015-09-29 Zazzle Inc. Visualizing a custom product in situ
US8280131B2 (en) * 2007-11-26 2012-10-02 Carl Zeiss Micro Imaging Gmbh Method and configuration for optically detecting an illuminated specimen
RU2487407C2 (ru) * 2007-12-05 2013-07-10 Ол2, Инк. Система и способ сжатия видео посредством настройки размера фрагмента на основании обнаруженного внутрикадрового движения или сложности сцены
WO2009073824A1 (en) * 2007-12-05 2009-06-11 Onlive, Inc. System and method for compressing video based on detected data rate of a communication channel
US8968087B1 (en) 2009-06-01 2015-03-03 Sony Computer Entertainment America Llc Video game overlay
US8147339B1 (en) 2007-12-15 2012-04-03 Gaikai Inc. Systems and methods of serving game video
US8613673B2 (en) 2008-12-15 2013-12-24 Sony Computer Entertainment America Llc Intelligent game loading
US20090157503A1 (en) * 2007-12-18 2009-06-18 Microsoft Corporation Pyramidal volumes of advertising space
US8064679B2 (en) * 2007-12-27 2011-11-22 Cytyc Corporation Targeted edge detection method and apparatus for cytological image processing applications
US7706632B2 (en) * 2008-01-17 2010-04-27 Ffei Limited Method and apparatus for forming a multiple focus stack image
US20090185734A1 (en) * 2008-01-18 2009-07-23 Hemocue Ab Apparatus and method for analysis of particles in a liquid sample
WO2009111298A2 (en) * 2008-03-04 2009-09-11 3M Innovative Properties Company Processing of biological growth media based on measured manufacturing characteristics
US8417013B2 (en) * 2008-03-04 2013-04-09 3M Innovative Properties Company Information management in automated processing of biological growth media
EP2098900A1 (en) * 2008-03-05 2009-09-09 Westfälische Wilhelms-Universität Münster Scanner arrangement and method for optically scanning an object
US8325976B1 (en) * 2008-03-14 2012-12-04 Verint Systems Ltd. Systems and methods for adaptive bi-directional people counting
JP5226352B2 (ja) * 2008-03-21 2013-07-03 オリンパス株式会社 生体観察装置及び生体観察方法
US20090244698A1 (en) * 2008-03-28 2009-10-01 Reto Zust Microscope comprising at least two components
US9602777B2 (en) * 2008-04-25 2017-03-21 Roche Diagnostics Hematology, Inc. Systems and methods for analyzing body fluids
WO2012030313A1 (en) * 2008-04-25 2012-03-08 James Winkelman Method of determining a complete blood count and a white blood cell differential count
FR2931966A1 (fr) 2008-05-30 2009-12-04 Novacyt Procede d'analyse cellulaire d'un prelevement au moyen d'une plaque d'analyse virtuelle
JP5450984B2 (ja) * 2008-06-02 2014-03-26 キヤノン株式会社 情報処理装置、撮像装置、制御方法、及びプログラム
US8914744B2 (en) * 2008-06-06 2014-12-16 Liquidpixels, Inc. Enhanced zoom and pan for viewing digital images
US9510044B1 (en) * 2008-06-18 2016-11-29 Gracenote, Inc. TV content segmentation, categorization and identification and time-aligned applications
US7983512B2 (en) * 2008-06-24 2011-07-19 Microsoft Corporation Embedding large images within one another
US7933473B2 (en) * 2008-06-24 2011-04-26 Microsoft Corporation Multiple resolution image storage
US8064733B2 (en) * 2008-06-24 2011-11-22 Microsoft Corporation Variable resolution images
EP2309923B1 (en) 2008-07-14 2020-11-25 The General Hospital Corporation Apparatus and methods for color endoscopy
US8290346B2 (en) * 2008-09-25 2012-10-16 Pixia Corp. Large format video archival, storage, and retrieval system and method
EP2344864B1 (en) * 2008-10-24 2020-05-06 Leica Biosystems Imaging, Inc. Whole slide fluorescence scanner
FR2938064B1 (fr) * 2008-10-31 2011-05-20 Novacyt Procede de preparation d'une plaque d'analyse virtuelle traitee.
US8380533B2 (en) * 2008-11-19 2013-02-19 DR Systems Inc. System and method of providing dynamic and customizable medical examination forms
RU2516580C2 (ru) * 2008-11-24 2014-05-20 Конинклейке Филипс Электроникс Н.В. Способ и устройство для быстрого анализа образцов текучего вещества с использованием фильтра
JP2010128062A (ja) * 2008-11-26 2010-06-10 Olympus Corp バーチャルスライド用標本像取得装置
FR2939224B1 (fr) * 2008-11-28 2011-06-17 Ct Francois Baclesse Procede et systeme de traitement d'une image a haute resolution.
DK200801722A (en) * 2008-12-05 2010-06-06 Unisensor As Optical sectioning of a sample and detection of particles in a sample
JP5153599B2 (ja) * 2008-12-08 2013-02-27 オリンパス株式会社 顕微鏡システム及び該動作方法
JP5154392B2 (ja) * 2008-12-12 2013-02-27 株式会社キーエンス 撮像装置
JP5096302B2 (ja) * 2008-12-12 2012-12-12 株式会社キーエンス 撮像装置
US8926435B2 (en) 2008-12-15 2015-01-06 Sony Computer Entertainment America Llc Dual-mode program execution
BRPI0917740A2 (pt) 2008-12-15 2016-02-16 Koninkl Philips Electronics Nv microscópio de varredura
EP2389093A4 (en) 2009-01-20 2013-07-31 Gen Hospital Corp APPARATUS, SYSTEM AND METHOD FOR ENDOSCOPIC BIOPSY
JP5249799B2 (ja) * 2009-01-26 2013-07-31 浜松ホトニクス株式会社 画像出力システム、画像出力方法及び画像出力プログラム
KR101513602B1 (ko) * 2009-02-11 2015-04-22 삼성전자주식회사 바이오칩 스캐닝 방법
FR2942319B1 (fr) * 2009-02-13 2011-03-18 Novacyt Procede de preparation d'une plaque d'analyse virtuelle traitee
DE102009013147A1 (de) * 2009-03-05 2010-09-16 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Spektroskopie heterogener Proben
US8537181B2 (en) * 2009-03-09 2013-09-17 Ventana Medical Systems, Inc. Modes and interfaces for observation, and manipulation of digital images on computer screen in support of pathologist's workflow
ES2617664T3 (es) 2009-03-11 2017-06-19 Sakura Finetek U.S.A., Inc. Procedimiento de enfoque automático y dispositivo de enfoque automático
ES2371721T3 (es) * 2009-04-24 2012-01-09 F. Hoffmann-La Roche Ag Procedimiento y dispositivo para el escaneado óptico de un objeto.
CA2760257C (en) 2009-04-27 2017-08-01 Constitution Medical, Inc. Systems and methods for analyzing body fluids
US9810895B2 (en) * 2009-05-29 2017-11-07 Olympus Corporation Biological observation apparatus
US8506402B2 (en) 2009-06-01 2013-08-13 Sony Computer Entertainment America Llc Game execution environments
JP5387147B2 (ja) * 2009-06-03 2014-01-15 日本電気株式会社 病理画像診断システム、病理画像処理方法、病理画像診断プログラム
US8561015B2 (en) * 2009-06-15 2013-10-15 Microsoft Corporation Source code semantic zoom and spatial layout
US20100315502A1 (en) * 2009-06-16 2010-12-16 Ikonisys, Inc. System and method for remote control of a microscope
CN102469943A (zh) 2009-07-14 2012-05-23 通用医疗公司 用于测量脉管内流动和压力的设备、系统和方法
US8891851B2 (en) * 2009-07-15 2014-11-18 Glenn F. Spaulding Home healthcare management system and hardware
US8504726B2 (en) 2009-07-27 2013-08-06 Corista LLC User targeted medical imaging and information packaging, compression and distribution system
WO2011017041A2 (en) * 2009-07-27 2011-02-10 Corista LLC System for networked digital pathology exchange
US8570370B2 (en) * 2009-08-31 2013-10-29 Bio-Rad Laboratories, Inc. Compact automated cell counter
JP5278252B2 (ja) * 2009-08-31 2013-09-04 ソニー株式会社 組織切片像取得表示装置、組織切片像取得表示方法及び組織切片像取得表示プログラム
US8463741B2 (en) * 2009-09-04 2013-06-11 Omnyx, LLC Digital pathology system
US8712120B1 (en) 2009-09-28 2014-04-29 Dr Systems, Inc. Rules-based approach to transferring and/or viewing medical images
CN104020554B (zh) 2009-10-19 2017-08-08 文塔纳医疗系统公司 成像系统和技术
JP2011095685A (ja) * 2009-11-02 2011-05-12 Sony Corp 顕微鏡システム及び顕微鏡システムの制御方法
US8558899B2 (en) 2009-11-16 2013-10-15 The Aerospace Corporation System and method for super-resolution digital time delay and integrate (TDI) image processing
JP5589366B2 (ja) * 2009-11-27 2014-09-17 ソニー株式会社 情報処理装置、情報処理方法及びそのプログラム
US8116547B2 (en) * 2009-12-11 2012-02-14 Aperio Technologies, Inc. Signal to noise ratio in digital pathology image analysis
JP5573145B2 (ja) * 2009-12-16 2014-08-20 ソニー株式会社 画像処理システム、画像処理装置、画像処理方法及びプログラム
CN102111515A (zh) * 2009-12-24 2011-06-29 鸿富锦精密工业(深圳)有限公司 图片传送服务器及传送方法和网络终端及图片显示方法
EP2720076B1 (en) 2009-12-30 2019-04-03 Koninklijke Philips N.V. Self autofocus sensor
JP5660273B2 (ja) * 2010-01-04 2015-01-28 日本電気株式会社 画像診断方法、画像診断装置および画像診断プログラム
US8872911B1 (en) * 2010-01-05 2014-10-28 Cognex Corporation Line scan calibration method and apparatus
JP5510956B2 (ja) * 2010-01-07 2014-06-04 パナソニックヘルスケア株式会社 観察ユニット用の制御装置、制御プログラム及び制御方法、並びに観察システム
US20110193950A1 (en) * 2010-02-09 2011-08-11 Stephen Liye Chen Application of microscopic linear array scanner for measuring rate of change of live organisms
US20110228071A1 (en) * 2010-02-10 2011-09-22 Rohde Mitchell M Microscope for Forensic Examination
JP5479950B2 (ja) * 2010-03-03 2014-04-23 オリンパス株式会社 顕微鏡装置及び観察位置再現方法
JP5819864B2 (ja) 2010-03-05 2015-11-24 ザ ジェネラル ホスピタル コーポレイション 特定の分解能にて少なくとも1つの解剖構造の微細画像を提供するシステム、方法およびコンピュータがアクセス可能な媒体
US8411970B2 (en) * 2010-03-16 2013-04-02 Pixia Corp. Method and system for determining statistical data for image pixels having a higher bit depth per band
EP2378341A1 (de) 2010-04-15 2011-10-19 Mmi Ag Verfahren zur kollisionsfreien Positionierung eines Mikromanipulationswerkzeugs
US9069130B2 (en) 2010-05-03 2015-06-30 The General Hospital Corporation Apparatus, method and system for generating optical radiation from biological gain media
WO2011143121A2 (en) * 2010-05-10 2011-11-17 University Of Pittsburgh - Of The Commonwealth System Of Higher Education Spatial-domain low-coherence quantitative phase microscopy
BR112012029152A8 (pt) 2010-05-18 2018-02-06 Koninklijke Philips Electronics Nv Sistema de formação de imagem de autofoco para um microscópio, método para formação de iimagem de autofoco de um microscópio, meio legível por computador e elemento de programa para formação de imagem de autofoco de um microscópio
WO2011145319A1 (ja) * 2010-05-19 2011-11-24 株式会社ニコン 形状測定装置及び形状測定方法
EP2575597B1 (en) 2010-05-25 2022-05-04 The General Hospital Corporation Apparatus for providing optical imaging of structures and compositions
EP2575598A2 (en) 2010-05-25 2013-04-10 The General Hospital Corporation Apparatus, systems, methods and computer-accessible medium for spectral analysis of optical coherence tomography images
US8306274B2 (en) 2010-05-25 2012-11-06 The Aerospace Corporation Methods for estimating peak location on a sampled surface with improved accuracy and applications to image correlation and registration
JP6066901B2 (ja) 2010-06-03 2017-01-25 ザ ジェネラル ホスピタル コーポレイション 1つまたは複数の管腔器官内または管腔器官にある構造を撮像するための装置およびデバイスのための方法
JP2012002923A (ja) 2010-06-15 2012-01-05 Canon Inc 撮像装置
CN103038692B (zh) 2010-06-24 2015-12-16 皇家飞利浦电子股份有限公司 基于差分测量的自动聚焦
JP5663979B2 (ja) * 2010-06-29 2015-02-04 ソニー株式会社 画像管理サーバ、画像表示装置、画像提供方法、画像取得方法、プログラム及び画像管理システム
JP5589619B2 (ja) * 2010-07-01 2014-09-17 ソニー株式会社 情報処理装置、ステージうねり補正方法、プログラム
JP5560966B2 (ja) * 2010-07-01 2014-07-30 ソニー株式会社 顕微鏡制御装置、画像管理サーバ、画像処理方法、プログラム及び画像管理システム
JP5703609B2 (ja) * 2010-07-02 2015-04-22 ソニー株式会社 顕微鏡及び領域判定方法
JP5467011B2 (ja) * 2010-07-27 2014-04-09 オリンパス株式会社 顕微鏡システム
JP5324534B2 (ja) * 2010-07-29 2013-10-23 株式会社日立ハイテクノロジーズ 検査方法及び装置
US8560331B1 (en) 2010-08-02 2013-10-15 Sony Computer Entertainment America Llc Audio acceleration
DE102010033249A1 (de) * 2010-08-03 2012-02-09 Carl Zeiss Microlmaging Gmbh Autofokussystem
US10139613B2 (en) 2010-08-20 2018-11-27 Sakura Finetek U.S.A., Inc. Digital microscope and method of sensing an image of a tissue sample
CN103210338A (zh) * 2010-08-30 2013-07-17 三洋电机株式会社 观察装置、观察程序及观察系统
CN103403694B (zh) 2010-09-13 2019-05-21 索尼电脑娱乐美国公司 附加组件管理
KR102003007B1 (ko) 2010-09-13 2019-07-23 소니 인터랙티브 엔터테인먼트 아메리카 엘엘씨 비디오 서버 및 게임 서버를 포함하는 컴퓨터 게임 시스템에서 컴퓨터 게임을 제공하는 방법 및 시스템
US9407876B1 (en) 2010-09-14 2016-08-02 Pixia Corp. Method and system for encoding and decoding multiple wide-area surveillance area-of-interest video codestreams
US8532383B1 (en) 2010-09-16 2013-09-10 Pixia Corp. Method of processing a viewport within large format imagery
CN103098459B (zh) * 2010-09-22 2016-11-09 富士胶片株式会社 立体摄像装置及阴影校正方法
PL2619576T3 (pl) * 2010-09-24 2021-07-05 Niels Grabe Środki i sposoby do prognozowania odpowiedzi na leczenie u pacjenta chorego na nowotwór złośliwy
WO2012050942A1 (en) * 2010-09-29 2012-04-19 Applied Precision, Inc. Calibration targets for microscope imaging
US8922768B2 (en) * 2010-10-04 2014-12-30 Wasatch Photonics, Inc. Multi-path spectrometer
US8704886B2 (en) 2010-10-15 2014-04-22 General Electric Company Methods and apparatus to form a wavelet representation of a pathology slide having glass and tissue regions
CN103189779B (zh) 2010-10-22 2015-11-25 奎斯坦自动化系统股份有限公司 显微镜自动扫描切片系统
WO2012058381A2 (en) 2010-10-27 2012-05-03 The General Hospital Corporation Apparatus, systems and methods for measuring blood pressure within at least one vessel
KR20130083453A (ko) * 2010-10-29 2013-07-22 캐논 가부시끼가이샤 현미경, 화상 취득 장치 및 화상 취득 시스템
US8368774B2 (en) 2010-11-22 2013-02-05 The Aerospace Corporation Imaging geometries for scanning optical detectors with overlapping fields of regard and methods for providing and utilizing same
US20120127297A1 (en) * 2010-11-24 2012-05-24 Baxi Vipul A Digital microscopy with focus grading in zones distinguished for comparable image structures
US9494783B2 (en) * 2010-11-30 2016-11-15 Etaluma Inc. Compact, high-resolution fluorescence and brightfield microscope and methods of use
US8896918B2 (en) * 2010-12-24 2014-11-25 Huron Technologies International Inc. Pathology slide scanner
JP5685928B2 (ja) * 2010-12-24 2015-03-18 ソニー株式会社 情報処理装置、画像データ最適化方法、プログラム
US9522396B2 (en) 2010-12-29 2016-12-20 S.D. Sight Diagnostics Ltd. Apparatus and method for automatic detection of pathogens
DE202011001569U1 (de) * 2011-01-14 2012-03-01 Berthold Technologies Gmbh & Co. Kg Vorrichtung zur Messung von optischen Eigenschaften in Mikroplatten
US9111343B2 (en) 2011-01-18 2015-08-18 Roche Diagnostics Hematology, Inc. Microscope slide coordinate system registration
JP5626367B2 (ja) * 2011-01-21 2014-11-19 株式会社ニコン 焦点位置維持装置及び顕微鏡
TW201233136A (en) * 2011-01-27 2012-08-01 Hon Hai Prec Ind Co Ltd Image processing system and method
EP2673949A1 (en) * 2011-02-11 2013-12-18 Canadian Space Agency Method and system of increasing spatial resolution of multi-dimensional optical imagery using sensor's intrinsic keystone
WO2012112697A2 (en) * 2011-02-15 2012-08-23 The Johns Hopkins University Method and system to digitize pathology specimens in a stepwise fashion for review
EP3553527A1 (en) 2011-03-17 2019-10-16 Cernostics, Inc. Systems and compositions for diagnosing barrett's esophagus and methods of using the same
JP5829030B2 (ja) * 2011-03-23 2015-12-09 オリンパス株式会社 顕微鏡
JP5742427B2 (ja) * 2011-04-25 2015-07-01 富士ゼロックス株式会社 画像処理装置
CA2837226A1 (en) 2011-05-25 2012-11-29 Huron Technologies International Inc. 3d pathology slide scanner
US8970618B2 (en) * 2011-06-16 2015-03-03 University Of Leeds Virtual microscopy
WO2013013049A1 (en) 2011-07-19 2013-01-24 The General Hospital Corporation Systems, methods, apparatus and computer-accessible-medium for providing polarization-mode dispersion compensation in optical coherence tomography
US9230153B2 (en) 2011-07-20 2016-01-05 Mikroscan Technologies, Inc. Networkbased pathology system with desktop slide scanner
US8897537B2 (en) 2011-08-02 2014-11-25 Nec Laboratories America, Inc. Cloud-based digital pathology
US9092727B1 (en) 2011-08-11 2015-07-28 D.R. Systems, Inc. Exam type mapping
JP6035716B2 (ja) * 2011-08-26 2016-11-30 ソニー株式会社 情報処理システム及び情報処理方法
EP3334143B1 (en) 2011-08-31 2020-03-11 Zazzle Inc. Tiling process for digital image retrieval
CN102333171A (zh) * 2011-09-22 2012-01-25 山东易创电子有限公司 一种基于线阵ccd系统的图像扫描方法及系统
JP5615247B2 (ja) * 2011-09-27 2014-10-29 大日本スクリーン製造株式会社 撮像装置、検出装置および撮像方法
US20130076886A1 (en) * 2011-09-27 2013-03-28 Olympus Integrated Technologies America, Inc. Automatic Focus and Sample Detection
JP5893316B2 (ja) * 2011-09-27 2016-03-23 オリンパス株式会社 顕微鏡システムおよびカメラヘッド
US9049353B2 (en) 2011-09-28 2015-06-02 Semiconductor Components Industries, Llc Time-delay-and-integrate image sensors having variable integration times
US9142045B1 (en) * 2011-10-14 2015-09-22 Ingrain, Inc. Method for displaying two-dimensional geological image data in log format and displayed product
EP2769491A4 (en) 2011-10-18 2015-07-22 Gen Hospital Corp DEVICE AND METHOD FOR PRODUCING AND / OR PROVIDING RECIRCULATING OPTICAL DELAY (DE)
US10001622B2 (en) * 2011-10-25 2018-06-19 Sanford Burnham Medical Research Institute Multifunction autofocus system and method for automated microscopy
GB2496418A (en) * 2011-11-10 2013-05-15 Esaturnus Ultra low latency video communication.
US20130166767A1 (en) * 2011-11-23 2013-06-27 General Electric Company Systems and methods for rapid image delivery and monitoring
US10197501B2 (en) 2011-12-12 2019-02-05 Kla-Tencor Corporation Electron-bombarded charge-coupled device and inspection systems using EBCCD detectors
FR2984531B1 (fr) * 2011-12-20 2013-12-27 Ecole Polytech Microscopie optique non-lineaire quantitative utilisant un faisceau mis en forme
JP5350532B2 (ja) * 2011-12-27 2013-11-27 キヤノン株式会社 画像処理装置、画像表示システム、画像処理方法および画像処理プログラム
JP2013134743A (ja) * 2011-12-27 2013-07-08 Canon Inc スクロール制御方法、スクロール制御装置、およびプログラム
CN103185542A (zh) * 2011-12-28 2013-07-03 鸿富锦精密工业(深圳)有限公司 斜面边界扫描系统及方法
EP2798350B1 (en) 2011-12-29 2021-07-28 Sight Diagnostics Ltd. Methods and systems for detecting a pathogen in a biological sample
WO2013109802A1 (en) * 2012-01-19 2013-07-25 H. Lee Moffitt Cancer Center And Research Institute, Inc. Histology recognition to automatically score and quantify cancer grades and individual user digital whole histological imaging device
US20130215146A1 (en) * 2012-02-17 2013-08-22 Canon Kabushiki Kaisha Image-drawing-data generation apparatus, method for generating image drawing data, and program
US9804376B2 (en) * 2012-03-02 2017-10-31 Huron Technologies International Inc. Scanner with increased dynamic range
CA2868263C (en) * 2012-03-23 2021-04-13 Huron Technologies International Inc. Slide scanner with dynamic focus and specimen tilt and method of operation
EP2833776A4 (en) 2012-03-30 2015-12-09 Gen Hospital Corp IMAGING SYSTEM, METHOD AND DISTAL FIXATION FOR MULTIDIRECTIONAL FIELD ENDOSCOPY
WO2013152171A1 (en) * 2012-04-04 2013-10-10 Memorial Sloan-Kettering Cancer Center System, device, method and computer-accessible medium for imaging large areas with microscopic resolution
US9496425B2 (en) 2012-04-10 2016-11-15 Kla-Tencor Corporation Back-illuminated sensor with boron layer
US11490797B2 (en) 2012-05-21 2022-11-08 The General Hospital Corporation Apparatus, device and method for capsule microscopy
US9488823B2 (en) * 2012-06-07 2016-11-08 Complete Genomics, Inc. Techniques for scanned illumination
US9628676B2 (en) 2012-06-07 2017-04-18 Complete Genomics, Inc. Imaging systems with movable scan mirrors
CN102707425B (zh) * 2012-06-21 2014-04-16 爱威科技股份有限公司 图像处理方法和装置
US9575304B2 (en) * 2012-06-25 2017-02-21 Huron Technologies International Inc. Pathology slide scanners for fluorescence and brightfield imaging and method of operation
EP2877961A4 (en) * 2012-07-25 2016-03-09 Leica Biosystems Imaging Inc SYSTEM AND METHOD FOR CARRIERING A FILM THROUGH A COMPOSED BAR CODE LABEL
US9601299B2 (en) 2012-08-03 2017-03-21 Kla-Tencor Corporation Photocathode including silicon substrate with boron layer
EP2888616A4 (en) 2012-08-22 2016-04-27 Gen Hospital Corp SYSTEM, METHOD AND COMPUTER-ACCESSIBLE MEDIA FOR MANUFACTURING MINIATURE ENDOSCOPES USING SOFT LITHOGRAPHY
WO2014059318A1 (en) * 2012-10-12 2014-04-17 Thorlabs, Inc. Time delay and integration scanning using a ccd imager
CN102922525B (zh) * 2012-10-24 2015-11-25 宁波江丰生物信息技术有限公司 机械手、玻片自动装卸系统和数字病理切片扫描仪
JP5941395B2 (ja) * 2012-10-31 2016-06-29 浜松ホトニクス株式会社 画像取得装置及び画像取得装置のフォーカス方法
TWI571762B (zh) 2012-11-08 2017-02-21 國立台灣科技大學 即時影像雲端系統及其管理方法
US9380222B2 (en) 2012-12-04 2016-06-28 Symbol Technologies, Llc Transmission of images for inventory monitoring
US9426400B2 (en) 2012-12-10 2016-08-23 Kla-Tencor Corporation Method and apparatus for high speed acquisition of moving images using pulsed illumination
US20140168402A1 (en) * 2012-12-13 2014-06-19 Vala Sciences, Inc. Continuous-Scanning Image Acquisition in Automated Microscopy Using Reflective Autofocus
US9495604B1 (en) 2013-01-09 2016-11-15 D.R. Systems, Inc. Intelligent management of computerized advanced processing
EP2948758B1 (en) 2013-01-28 2024-03-13 The General Hospital Corporation Apparatus for providing diffuse spectroscopy co-registered with optical frequency domain imaging
WO2014120791A1 (en) 2013-01-29 2014-08-07 The General Hospital Corporation Apparatus, systems and methods for providing information regarding the aortic valve
US11179028B2 (en) 2013-02-01 2021-11-23 The General Hospital Corporation Objective lens arrangement for confocal endomicroscopy
US9001422B2 (en) 2013-02-28 2015-04-07 Ventana Medical Systems, Inc. Slide handling system and techniques
JP2014178357A (ja) * 2013-03-13 2014-09-25 Sony Corp デジタル顕微鏡装置、その撮像方法およびプログラム
JP2014178474A (ja) * 2013-03-14 2014-09-25 Sony Corp デジタル顕微鏡装置、その合焦位置探索方法およびプログラム
JP6454677B2 (ja) * 2013-03-15 2019-01-16 ニューロビジョン イメージング,インコーポレーテッド ヒトの生体内網膜から集光したアフォーカル光を排除するためのシステム
JP6378311B2 (ja) 2013-03-15 2018-08-22 ザ ジェネラル ホスピタル コーポレイション 物体を特徴付ける方法とシステム
US10088658B2 (en) 2013-03-18 2018-10-02 General Electric Company Referencing in multi-acquisition slide imaging
JP6455829B2 (ja) * 2013-04-01 2019-01-23 キヤノン株式会社 画像処理装置、画像処理方法、およびプログラム
US9478402B2 (en) 2013-04-01 2016-10-25 Kla-Tencor Corporation Photomultiplier tube, image sensor, and an inspection system using a PMT or image sensor
US9429744B2 (en) * 2013-04-04 2016-08-30 Datacolor Holding Ag System and method for color correction of a microscope image with a built-in calibration slide
US20160062101A1 (en) * 2013-04-08 2016-03-03 Wdi Wise Device Inc. Method and apparatus for small and large format histology sample examination
DE102013103971A1 (de) 2013-04-19 2014-11-06 Sensovation Ag Verfahren zum Erzeugen eines aus mehreren Teilbildern zusammengesetzten Gesamtbilds eines Objekts
DE102013006994A1 (de) * 2013-04-19 2014-10-23 Carl Zeiss Microscopy Gmbh Digitalmikroskop und Verfahren zur Optimierung des Arbeitsablaufes in einem Digitalmikroskop
US10133053B2 (en) * 2013-04-30 2018-11-20 Molecular Devices, Llc Apparatus and method for generating in-focus images using parallel imaging in a microscopy system
US9829696B2 (en) * 2013-05-01 2017-11-28 Bio-Rad Laboratories, Inc. Adjustable digital microscope display
EP2997354A4 (en) 2013-05-13 2017-01-18 The General Hospital Corporation Detecting self-interefering fluorescence phase and amplitude
EP2999988A4 (en) 2013-05-23 2017-01-11 S.D. Sight Diagnostics Ltd. Method and system for imaging a cell sample
IL227276A0 (en) 2013-07-01 2014-03-06 Parasight Ltd A method and system for obtaining a monolayer of cells, for use specifically for diagnosis
US9439565B1 (en) 2013-07-08 2016-09-13 Dermatopathology Laboratory of Central States, Inc. Wireless viewing of digital pathology specimens
WO2015010133A1 (en) 2013-07-19 2015-01-22 The General Hospital Corporation Determining eye motion by imaging retina. with feedback
EP3692887B1 (en) 2013-07-19 2024-03-06 The General Hospital Corporation Imaging apparatus which utilizes multidirectional field of view endoscopy
EP3910282B1 (en) 2013-07-26 2024-01-17 The General Hospital Corporation Method of providing a laser radiation with a laser arrangement utilizing optical dispersion for applications in fourier-domain optical coherence tomography
DE102013019347A1 (de) * 2013-08-15 2015-02-19 Carl Zeiss Microscopy Gmbh Hochauflösende Scanning-Mikroskopie
US9805171B2 (en) 2013-08-23 2017-10-31 Elwha Llc Modifying a cosmetic product based on a microbe profile
US10152529B2 (en) 2013-08-23 2018-12-11 Elwha Llc Systems and methods for generating a treatment map
US9390312B2 (en) 2013-08-23 2016-07-12 Elwha Llc Systems, methods, and devices for assessing microbiota of skin
US10010704B2 (en) 2013-08-23 2018-07-03 Elwha Llc Systems, methods, and devices for delivering treatment to a skin surface
US9811641B2 (en) 2013-08-23 2017-11-07 Elwha Llc Modifying a cosmetic product based on a microbe profile
US9456777B2 (en) 2013-08-23 2016-10-04 Elwha Llc Systems, methods, and devices for assessing microbiota of skin
US9557331B2 (en) 2013-08-23 2017-01-31 Elwha Llc Systems, methods, and devices for assessing microbiota of skin
CN105659151B (zh) 2013-08-26 2018-06-29 思迪赛特诊断有限公司 数码显微系统与方法
US20150062152A1 (en) * 2013-08-27 2015-03-05 Thomson Licensing 3-dimensional look-up table-based color masking technique
WO2015045183A1 (ja) * 2013-09-30 2015-04-02 富士通株式会社 コロニー画像検査プログラム、コロニー画像検査方法及びコロニー画像検査装置
WO2015066006A2 (en) 2013-10-29 2015-05-07 Idexx Laboratories, Inc. Method and device for detecting bacteria and determining the concentration thereof in a liquid sample
WO2015073897A2 (en) 2013-11-15 2015-05-21 Mikroscan Technologies, Inc. Geological scanner
WO2015073935A1 (en) * 2013-11-15 2015-05-21 Corista LLC Continuous image analytics
EP3264745B1 (en) 2013-12-16 2019-07-17 Koninklijke Philips N.V. Scanning imaging system with a novel imaging sensor with gaps for electronic circuitry
US9347890B2 (en) 2013-12-19 2016-05-24 Kla-Tencor Corporation Low-noise sensor and an inspection system using a low-noise sensor
US10007102B2 (en) 2013-12-23 2018-06-26 Sakura Finetek U.S.A., Inc. Microscope with slide clamping assembly
WO2015105870A1 (en) 2014-01-08 2015-07-16 The General Hospital Corporation Method and apparatus for microscopic imaging
US10175154B2 (en) 2014-01-17 2019-01-08 William Eugene Campbell Methods and system for slide processing
US10736494B2 (en) 2014-01-31 2020-08-11 The General Hospital Corporation System and method for facilitating manual and/or automatic volumetric imaging with real-time tension or force feedback using a tethered imaging device
JP6573894B2 (ja) * 2014-02-04 2019-09-11 コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. 少なくとも二画像をレジストレーション及び視覚化するための方法
US9410901B2 (en) 2014-03-17 2016-08-09 Kla-Tencor Corporation Image sensor, an inspection system and a method of inspecting an article
US9772787B2 (en) * 2014-03-31 2017-09-26 Amazon Technologies, Inc. File storage using variable stripe sizes
US10228556B2 (en) 2014-04-04 2019-03-12 The General Hospital Corporation Apparatus and method for controlling propagation and/or transmission of electromagnetic radiation in flexible waveguide(s)
JP6284428B2 (ja) * 2014-05-22 2018-02-28 オリンパス株式会社 顕微鏡システム
GB201409203D0 (en) * 2014-05-23 2014-07-09 Ffei Ltd Improvements in digitising slides
GB201409202D0 (en) 2014-05-23 2014-07-09 Ffei Ltd Improvements in imaging microscope samples
CN104111225A (zh) * 2014-05-26 2014-10-22 宁波江丰生物信息技术有限公司 基于数字切片扫描仪平台锁定装置
US9541750B2 (en) 2014-06-23 2017-01-10 Li-Cor, Inc. Telecentric, wide-field fluorescence scanning systems and methods
US10912462B2 (en) 2014-07-25 2021-02-09 The General Hospital Corporation Apparatus, devices and methods for in vivo imaging and diagnosis
CA2995719A1 (en) * 2014-08-18 2016-02-25 Viewsiq Inc. System and method for embedded images in large field-of-view microscopic scans
WO2016030897A1 (en) 2014-08-27 2016-03-03 S.D. Sight Diagnostics Ltd System and method for calculating focus variation for a digital microscope
US9767986B2 (en) 2014-08-29 2017-09-19 Kla-Tencor Corporation Scanning electron microscope and methods of inspecting and reviewing samples
GB2544946B (en) 2014-08-31 2021-03-10 Berestka John Systems and methods for analyzing the eye
US9366630B2 (en) 2014-09-08 2016-06-14 Li-Cor, Inc. Fluorescence imaging autofocus systems and methods
WO2016058052A1 (en) * 2014-10-15 2016-04-21 Pathobin Pty Ltd System and method for generating digital pathology images
WO2016069794A1 (en) 2014-10-28 2016-05-06 Mikroscan Technologies, Inc. Microdissection viewing system
KR20160056466A (ko) * 2014-11-11 2016-05-20 삼성디스플레이 주식회사 표면 검사 장치, 표면 검사 방법 및 표시 장치의 제조 방법
JP6480713B2 (ja) * 2014-11-18 2019-03-13 オリンパス株式会社 顕微鏡システム
EP3108284B1 (en) 2014-12-22 2018-03-14 Koninklijke Philips N.V. Method and device for simultaneous capture of image data at multiple depths of a sample
EP3037861A1 (en) * 2014-12-23 2016-06-29 Commissariat à l'Énergie Atomique et aux Énergies Alternatives Imaging method, and system, for obtaining an super-resolution image of an object
FR3031859B1 (fr) * 2015-01-16 2018-04-20 Areva Np Reconstitution de scene par assemblage d'images
CN113347405B (zh) * 2015-01-28 2023-03-21 纳维曼德资本有限责任公司 缩放相关的方法和装置
AU2016211981A1 (en) * 2015-01-31 2017-07-27 F. Hoffmann-La Roche Ag Quality control of automated whole-slide analysis
WO2016125281A1 (ja) * 2015-02-05 2016-08-11 株式会社ニコン 構造化照明顕微鏡、観察方法、及び制御プログラム
US10317663B2 (en) 2015-02-27 2019-06-11 General Electric Company Determination of deflection of a microscope slide
EP3268793B1 (en) * 2015-03-12 2022-08-17 Koninklijke Philips N.V. Illumination unit for digital pathology scanning
US10244241B2 (en) * 2015-03-22 2019-03-26 Innova Plex, Inc. Pyramidal file structure and method of use thereof
JP5901814B1 (ja) 2015-03-25 2016-04-13 日本分光株式会社 顕微分光装置
US10877255B2 (en) * 2015-04-02 2020-12-29 Huron Technologies International Inc. High resolution pathology scanner with improved signal to noise ratio
US10929508B2 (en) 2015-04-30 2021-02-23 Merge Healthcare Solutions Inc. Database systems and interactive user interfaces for dynamic interaction with, and indications of, digital medical image data
US10989661B2 (en) * 2015-05-01 2021-04-27 The Board Of Regents Of The University Of Texas System Uniform and scalable light-sheets generated by extended focusing
US9860466B2 (en) 2015-05-14 2018-01-02 Kla-Tencor Corporation Sensor with electrically controllable aperture for inspection and metrology systems
US10748730B2 (en) 2015-05-21 2020-08-18 Kla-Tencor Corporation Photocathode including field emitter array on a silicon substrate with boron layer
US9818197B2 (en) * 2015-05-29 2017-11-14 Datalogic Ip Tech S.R.L. System and method for reading machine readable codes in transportation and logistic applications
US10462391B2 (en) 2015-08-14 2019-10-29 Kla-Tencor Corporation Dark-field inspection using a low-noise sensor
TWI579588B (zh) * 2015-09-04 2017-04-21 中原大學 顯微鏡監控裝置及其系統
JP6952683B2 (ja) 2015-09-17 2021-10-20 エス.ディー.サイト ダイアグノスティクス リミテッド 身体試料中の実体を検出する方法および装置
US10563164B1 (en) 2015-10-08 2020-02-18 Charm Sciences, Inc. Plate reader
AU2016338681A1 (en) * 2015-10-16 2018-05-17 Mikroscan Technologies, Inc. Systems, media, methods, and apparatus for enhanced digital microscopy
CN108369332A (zh) * 2015-12-08 2018-08-03 奥林巴斯株式会社 显微镜观察系统、显微镜观察方法和显微镜观察程序
JP6643072B2 (ja) * 2015-12-10 2020-02-12 キヤノン株式会社 顕微鏡システムおよびその制御方法
US11012643B2 (en) * 2015-12-15 2021-05-18 Applied Spectral Imaging Ltd. System and method for spectral imaging
CN106910194B (zh) * 2015-12-22 2020-11-27 上海联影医疗科技股份有限公司 心脏心功能磁共振图像中的心内外膜的分割方法
US10290109B2 (en) * 2015-12-22 2019-05-14 Shanghai United Imaging Healthcare Co., Ltd. Method and system for cardiac image segmentation
US10352689B2 (en) 2016-01-28 2019-07-16 Symbol Technologies, Llc Methods and systems for high precision locationing with depth values
JP7239324B2 (ja) * 2016-02-22 2023-03-14 コーニンクレッカ フィリップス エヌ ヴェ 生物試料の向上された被写界深度の合成2d画像を生成するシステム
EP3420338B1 (en) * 2016-02-26 2023-05-03 Single Technologies AB Method and apparatus for high throughput imaging
EA032988B1 (ru) * 2016-03-10 2019-08-30 Общество С Ограниченной Ответственностью "Цифровая Медицина" Устройство для получения изображения микрообъектов
US10509215B2 (en) * 2016-03-14 2019-12-17 Olympus Corporation Light-field microscope
CN105652429B (zh) * 2016-03-22 2018-07-17 哈尔滨理工大学 一种基于机器学习的显微镜细胞载玻片扫描自动聚焦方法
US11733150B2 (en) 2016-03-30 2023-08-22 S.D. Sight Diagnostics Ltd. Distinguishing between blood sample components
US10187561B2 (en) * 2016-03-31 2019-01-22 Canon Kabushiki Kaisha Accessory apparatus, image-capturing apparatus, control apparatus, lens apparatus, control method, computer program and storage medium storing computer program
US10313622B2 (en) 2016-04-06 2019-06-04 Kla-Tencor Corporation Dual-column-parallel CCD sensor and inspection systems using a sensor
US10778925B2 (en) 2016-04-06 2020-09-15 Kla-Tencor Corporation Multiple column per channel CCD sensor architecture for inspection and metrology
WO2017180680A1 (en) 2016-04-12 2017-10-19 The Board Of Regents Of The University Of Texas System LIGHT-SHEET MICROSCOPE WITH PARALLELIZED 3D lMAGE ACQUISITION
CN114419114A (zh) * 2016-04-20 2022-04-29 徕卡生物系统成像股份有限公司 用于数字病理学色彩校准的系统和方法
US10495563B1 (en) 2016-04-28 2019-12-03 Charm Sciences, Inc. Plate reader observation methods and operation
US11307196B2 (en) 2016-05-11 2022-04-19 S.D. Sight Diagnostics Ltd. Sample carrier for optical measurements
AU2017263807B2 (en) 2016-05-11 2023-02-02 S.D. Sight Diagnostics Ltd Performing optical measurements on a sample
US10200608B1 (en) * 2016-07-25 2019-02-05 360fly, Inc. Panoramic image processing system, camera, and method therefor using multiple image processors
EP3504573A4 (en) * 2016-08-28 2020-07-29 Augmentiqs Medical Ltd. HISTOLOGICAL EXAMINATION SYSTEM OF TISSUE SAMPLES
CN106645045B (zh) * 2016-09-09 2020-01-21 华中科技大学 一种荧光光学显微成像中基于tdi-ccd的双向扫描成像方法
DE102016117547A1 (de) * 2016-09-18 2018-03-22 Leica Camera Ag Objektiv fester Brennweite und konstanter Baulänge für Autofokusanwendungen
WO2018056959A1 (en) * 2016-09-20 2018-03-29 Innova Plex, Inc. A system and method for controlling a specimen scanner remotely
WO2018078447A1 (en) * 2016-10-27 2018-05-03 Scopio Labs Ltd. Digital microscope which operates as a server
JP2020502558A (ja) 2016-11-10 2020-01-23 ザ トラスティーズ オブ コロンビア ユニバーシティ イン ザ シティ オブ ニューヨーク 大型試料のための高速・高解像度イメージング方法
US11042161B2 (en) 2016-11-16 2021-06-22 Symbol Technologies, Llc Navigation control method and apparatus in a mobile automation system
US11280803B2 (en) * 2016-11-22 2022-03-22 Sakura Finetek U.S.A., Inc. Slide management system
US10101572B2 (en) 2016-11-23 2018-10-16 Mitutoyo Corporation Variable focal length lens system with multi-level extended depth of field image processing
JP7076447B2 (ja) * 2016-11-24 2022-05-27 ユニヴァーシティ オブ ワシントン ヘッドマウントディスプレイのための光照射野キャプチャおよびレンダリング
JP2020507106A (ja) * 2016-12-30 2020-03-05 ライカ バイオシステムズ イメージング インコーポレイテッドLeica Biosystems Imaging, Inc. 二重光学経路および単一撮像センサを使用した低解像度スライド撮像、スライドラベル撮像および高解像度スライド撮像
US10663711B2 (en) 2017-01-04 2020-05-26 Corista, LLC Virtual slide stage (VSS) method for viewing whole slide images
JP6758510B2 (ja) 2017-01-13 2020-09-23 ベンタナ メディカル システムズ, インコーポレイテッド スライド撮像装置
US11187882B2 (en) 2017-01-13 2021-11-30 Ventana Medical Systems, Inc. Method of preparing a stage for use in a slide imaging apparatus
EP3355038B1 (en) * 2017-01-25 2021-09-08 Specim, Spectral Imaging Oy Ltd Imaging apparatus and operating method
DE202017100426U1 (de) * 2017-01-26 2017-02-07 Abberior Instruments Gmbh Vorrichtung zum Aufrüsten eines einen Kameraanschluss aufweisenden Lichtmikroskops zu einem STED- Mikroskop
US10671659B2 (en) 2017-02-17 2020-06-02 Agfa Healthcare Nv Systems and methods for collecting large medical image data
US10559378B2 (en) 2017-02-17 2020-02-11 Agfa Healthcare Nv Systems and methods for processing large medical image data
US12027251B2 (en) 2017-02-17 2024-07-02 Agfa Healthcare Nv Systems and methods for managing large medical image data
DE102017108016A1 (de) * 2017-04-13 2018-10-18 Carl Zeiss Microscopy Gmbh Mikroskopsystem und Verfahren zum Betreiben eines Mikroskopsystems
EP3610451B1 (en) 2017-04-14 2021-09-29 Ventana Medical Systems, Inc. Local tile-based registration and global placement for stitching
EP3396430B1 (en) * 2017-04-27 2023-08-16 Euroimmun Medizinische Labordiagnostika AG Optical scanning arrangement and method
AU2018261257B2 (en) 2017-05-01 2020-10-08 Symbol Technologies, Llc Method and apparatus for object status detection
US10663590B2 (en) 2017-05-01 2020-05-26 Symbol Technologies, Llc Device and method for merging lidar data
US11367092B2 (en) 2017-05-01 2022-06-21 Symbol Technologies, Llc Method and apparatus for extracting and processing price text from an image set
US10505057B2 (en) 2017-05-01 2019-12-10 Symbol Technologies, Llc Device and method for operating cameras and light sources wherein parasitic reflections from a paired light source are not reflected into the paired camera
US10591918B2 (en) 2017-05-01 2020-03-17 Symbol Technologies, Llc Fixed segmented lattice planning for a mobile automation apparatus
US10949798B2 (en) 2017-05-01 2021-03-16 Symbol Technologies, Llc Multimodal localization and mapping for a mobile automation apparatus
US10726273B2 (en) 2017-05-01 2020-07-28 Symbol Technologies, Llc Method and apparatus for shelf feature and object placement detection from shelf images
US11093896B2 (en) 2017-05-01 2021-08-17 Symbol Technologies, Llc Product status detection system
US11449059B2 (en) 2017-05-01 2022-09-20 Symbol Technologies, Llc Obstacle detection for a mobile automation apparatus
WO2018201423A1 (en) 2017-05-05 2018-11-08 Symbol Technologies, Llc Method and apparatus for detecting and interpreting price label text
FI20175410A (fi) 2017-05-08 2018-11-09 Grundium Oy Laite ja menetelmä mikroskooppileikkeiden skannaamiseksi
US10712548B2 (en) 2017-06-08 2020-07-14 Microscope International, LLC Systems and methods for rapid scanning of images in digital microscopes
WO2018231204A1 (en) * 2017-06-13 2018-12-20 Google Llc Augmented reality microscope for pathology
JP6842387B2 (ja) 2017-08-31 2021-03-17 浜松ホトニクス株式会社 画像取得装置及び画像取得方法
US10444486B2 (en) 2017-09-04 2019-10-15 Microscopes International, Llc Systems and methods for detection of blank fields in digital microscopes
US10572763B2 (en) 2017-09-07 2020-02-25 Symbol Technologies, Llc Method and apparatus for support surface edge detection
US10521914B2 (en) 2017-09-07 2019-12-31 Symbol Technologies, Llc Multi-sensor object recognition system and method
EP3625605B1 (en) * 2017-09-29 2022-08-17 Leica Biosystems Imaging, Inc. Two-dimensional and three-dimensional fixed z scanning
KR102523559B1 (ko) * 2017-09-29 2023-04-19 라이카 바이오시스템즈 이미징 인크. 디지털 스캐닝 장치
WO2019068039A1 (en) * 2017-09-29 2019-04-04 Leica Biosystems Imaging, Inc. MACRO-IMAGE WITH TWO PASSAGES
KR20190051395A (ko) 2017-11-06 2019-05-15 삼성전자주식회사 피검사 장치의 검사 시스템 및 방법
WO2019097387A1 (en) 2017-11-14 2019-05-23 S.D. Sight Diagnostics Ltd Sample carrier for optical measurements
WO2019109034A1 (en) * 2017-11-30 2019-06-06 Leica Biosystems Imaging, Inc. Impulse rescan system
AU2018374383B2 (en) * 2017-12-01 2021-10-14 Leica Biosystems Imaging, Inc. Fixed reference edge system for slide loading and unloading
GB201721430D0 (en) * 2017-12-20 2018-01-31 Q-Linea Ab Method and device for microscopy-based imaging of samples
JP7082482B2 (ja) * 2017-12-20 2022-06-08 オリンパス株式会社 ディスク走査型顕微鏡システム、プログラム
NL2020620B1 (en) * 2018-01-16 2019-07-25 Illumina Inc Pattern angle spatial selection structured illumination imaging
CN112136071B (zh) * 2018-02-26 2023-08-11 凯利博成像和诊断公司 用于对体外组织进行宏观和微观成像的系统和方法
DE102018104704A1 (de) * 2018-03-01 2019-09-05 Carl Zeiss Microscopy Gmbh Digitales Mikroskop und Verfahren zum Verändern einer Vergrößerung eines digitalen Mikroskops
JP7107518B2 (ja) * 2018-03-15 2022-07-27 株式会社エビデント 情報処理装置、システム、動作方法、及び、プログラム
US11112952B2 (en) 2018-03-26 2021-09-07 Microscopes International, Llc Interface for display of multi-layer images in digital microscopy
US11327504B2 (en) 2018-04-05 2022-05-10 Symbol Technologies, Llc Method, system and apparatus for mobile automation apparatus localization
US10740911B2 (en) 2018-04-05 2020-08-11 Symbol Technologies, Llc Method, system and apparatus for correcting translucency artifacts in data representing a support structure
US10832436B2 (en) 2018-04-05 2020-11-10 Symbol Technologies, Llc Method, system and apparatus for recovering label positions
US10809078B2 (en) 2018-04-05 2020-10-20 Symbol Technologies, Llc Method, system and apparatus for dynamic path generation
US10823572B2 (en) 2018-04-05 2020-11-03 Symbol Technologies, Llc Method, system and apparatus for generating navigational data
CN108398103B (zh) * 2018-04-28 2023-11-10 北京大学 一种高速高通量生物样本形态检测系统
EP3815040A4 (en) 2018-05-21 2022-03-02 Corista LLC MULTIPLE SAMPLE BULK SLIDE IMAGE PROCESSING USING MULTIPLE RESOLUTION REGISTRATION
US11114489B2 (en) 2018-06-18 2021-09-07 Kla-Tencor Corporation Back-illuminated sensor and a method of manufacturing a sensor
CN109224341B (zh) * 2018-08-14 2020-08-07 浙江大丰实业股份有限公司 防火隔离幕隔离效果检验平台
CN109243268B (zh) * 2018-08-28 2020-10-20 北京空间机电研究所 一种宇航用可见光图像探测器测试与演示验证平台及方法
CN112714886B (zh) * 2018-09-28 2023-03-21 仪景通株式会社 显微镜系统、投影单元以及图像投影方法
WO2020066043A1 (ja) 2018-09-28 2020-04-02 オリンパス株式会社 顕微鏡システム、投影ユニット、及び、画像投影方法
JP7150868B2 (ja) 2018-09-28 2022-10-11 株式会社エビデント 顕微鏡システム、投影ユニット、及び、画像投影方法
CN109272575B (zh) * 2018-09-28 2022-06-28 麦克奥迪实业集团有限公司 一种提高数字切片扫描仪建模速度的方法
US11010920B2 (en) 2018-10-05 2021-05-18 Zebra Technologies Corporation Method, system and apparatus for object detection in point clouds
US11506483B2 (en) 2018-10-05 2022-11-22 Zebra Technologies Corporation Method, system and apparatus for support structure depth determination
US10545096B1 (en) * 2018-10-11 2020-01-28 Nanotronics Imaging, Inc. Marco inspection systems, apparatus and methods
US10943760B2 (en) 2018-10-12 2021-03-09 Kla Corporation Electron gun and electron microscope
EP3874313A2 (en) * 2018-11-02 2021-09-08 Hologic, Inc. Digital imaging system and method
US11003188B2 (en) 2018-11-13 2021-05-11 Zebra Technologies Corporation Method, system and apparatus for obstacle handling in navigational path generation
US11090811B2 (en) 2018-11-13 2021-08-17 Zebra Technologies Corporation Method and apparatus for labeling of support structures
US11416000B2 (en) 2018-12-07 2022-08-16 Zebra Technologies Corporation Method and apparatus for navigational ray tracing
US11079240B2 (en) 2018-12-07 2021-08-03 Zebra Technologies Corporation Method, system and apparatus for adaptive particle filter localization
US11100303B2 (en) 2018-12-10 2021-08-24 Zebra Technologies Corporation Method, system and apparatus for auxiliary label detection and association
US11015938B2 (en) 2018-12-12 2021-05-25 Zebra Technologies Corporation Method, system and apparatus for navigational assistance
US11114491B2 (en) 2018-12-12 2021-09-07 Kla Corporation Back-illuminated sensor and a method of manufacturing a sensor
US10731970B2 (en) 2018-12-13 2020-08-04 Zebra Technologies Corporation Method, system and apparatus for support structure detection
CA3028708A1 (en) 2018-12-28 2020-06-28 Zih Corp. Method, system and apparatus for dynamic loop closure in mapping trajectories
US10896316B2 (en) 2019-02-04 2021-01-19 Tokitae, LLC Automated microscopy scanning systems and methods
CN109905618B (zh) * 2019-03-26 2021-03-16 中国科学院长春光学精密机械与物理研究所 夹心成像单元结构及一步正样的设计方法
CN110189814A (zh) * 2019-04-26 2019-08-30 视联动力信息技术股份有限公司 一种图像处理方法及装置
US12038571B2 (en) 2019-05-07 2024-07-16 Memorial Sloan Kettering Cancer Center Scalable and efficient whole slide image reader for deep learning and viewer applications
US11200677B2 (en) 2019-06-03 2021-12-14 Zebra Technologies Corporation Method, system and apparatus for shelf edge detection
US11960286B2 (en) 2019-06-03 2024-04-16 Zebra Technologies Corporation Method, system and apparatus for dynamic task sequencing
US11080566B2 (en) 2019-06-03 2021-08-03 Zebra Technologies Corporation Method, system and apparatus for gap detection in support structures with peg regions
US11523046B2 (en) * 2019-06-03 2022-12-06 Molecular Devices, Llc System and method to correct for variation of in-focus plane across a field of view of a microscope objective
US11662739B2 (en) 2019-06-03 2023-05-30 Zebra Technologies Corporation Method, system and apparatus for adaptive ceiling-based localization
US11341663B2 (en) 2019-06-03 2022-05-24 Zebra Technologies Corporation Method, system and apparatus for detecting support structure obstructions
US11402846B2 (en) 2019-06-03 2022-08-02 Zebra Technologies Corporation Method, system and apparatus for mitigating data capture light leakage
US11151743B2 (en) 2019-06-03 2021-10-19 Zebra Technologies Corporation Method, system and apparatus for end of aisle detection
EP3997434A4 (en) * 2019-07-09 2023-07-26 The Regents of the University of California AUTOMATED RAPID ON-SITE ASSESSMENT AND COLORING MACHINE
US11593919B2 (en) 2019-08-07 2023-02-28 Nanotronics Imaging, Inc. System, method and apparatus for macroscopic inspection of reflective specimens
US10915992B1 (en) 2019-08-07 2021-02-09 Nanotronics Imaging, Inc. System, method and apparatus for macroscopic inspection of reflective specimens
EP4018180A4 (en) * 2019-08-20 2023-05-31 P&P Optica Inc. DEVICES, SYSTEMS AND METHODS FOR SORTING AND LABELING FOOD PRODUCTS
CN110530781A (zh) * 2019-08-30 2019-12-03 武汉呵尔医疗科技发展有限公司 一种单帧三波段数字图像采集剥离系统
CN110596068B (zh) * 2019-10-11 2021-02-02 中国科学院自动化研究所 基于线扫描的条带序列切片光学成像装置及成像方法
CN110850576A (zh) * 2019-10-29 2020-02-28 北京临近空间飞行器系统工程研究所 一种显微镜影像扫描控制方法、装置及计算机存储介质
US11507103B2 (en) 2019-12-04 2022-11-22 Zebra Technologies Corporation Method, system and apparatus for localization-based historical obstacle handling
US11107238B2 (en) 2019-12-13 2021-08-31 Zebra Technologies Corporation Method, system and apparatus for detecting item facings
CN113055612B (zh) * 2019-12-27 2022-11-25 浙江宇视科技有限公司 一种视频播放方法、装置、电子设备、系统和介质
CN110944159A (zh) * 2019-12-31 2020-03-31 联想(北京)有限公司 一种信息处理方法、电子设备以及信息处理系统
US20230060037A1 (en) * 2020-01-28 2023-02-23 The Regents Of The University Of California Systems and methods for the early detection and classification of live microorganisms using time-lapse coherent imaging and deep learning
EP4127730A1 (en) 2020-03-27 2023-02-08 F. Hoffmann-La Roche AG A slide imaging apparatus and a method for imaging a slide
JP7449404B2 (ja) 2020-03-27 2024-03-13 エフ. ホフマン-ラ ロシュ アーゲー スライド撮像装置およびスライド撮像のための方法
US11822333B2 (en) 2020-03-30 2023-11-21 Zebra Technologies Corporation Method, system and apparatus for data capture illumination control
US11848350B2 (en) 2020-04-08 2023-12-19 Kla Corporation Back-illuminated sensor and a method of manufacturing a sensor using a silicon on insulator wafer
US10949986B1 (en) 2020-05-12 2021-03-16 Proprio, Inc. Methods and systems for imaging a scene, such as a medical scene, and tracking objects within the scene
JP7506524B2 (ja) 2020-05-20 2024-06-26 株式会社エビデント 顕微鏡システム、制御方法、プログラム
CN111723753B (zh) * 2020-06-23 2023-07-11 深圳航天宏图信息技术有限公司 卫星遥感图像的去条带方法、装置和电子设备
CA3184293A1 (en) * 2020-06-29 2022-01-06 Hadi Shafiee Adaptive neural networks for analyzing medical images
US11450024B2 (en) 2020-07-17 2022-09-20 Zebra Technologies Corporation Mixed depth object detection
US20230291992A1 (en) * 2020-07-22 2023-09-14 Basf Plant Science Company Gmbh Method and system for event-based imaging
GB2597502A (en) * 2020-07-24 2022-02-02 Ffei Ltd A whole slide imaging method for a microscope
CN111983797B (zh) * 2020-08-26 2023-10-31 宁波兰茜生物科技有限公司 一种超分辨成像数字玻片扫描仪
CN111999880A (zh) * 2020-09-15 2020-11-27 亚龙智能装备集团股份有限公司 一种虚拟显微镜系统
GB202015901D0 (en) * 2020-10-07 2020-11-18 Ash Tech Limited System and method for digital image processing
US11593915B2 (en) 2020-10-21 2023-02-28 Zebra Technologies Corporation Parallax-tolerant panoramic image generation
US11392891B2 (en) 2020-11-03 2022-07-19 Zebra Technologies Corporation Item placement detection and optimization in material handling systems
US11847832B2 (en) 2020-11-11 2023-12-19 Zebra Technologies Corporation Object classification for autonomous navigation systems
CN112565637B (zh) * 2020-11-20 2022-07-29 中国航空工业集团公司洛阳电光设备研究所 一种单色sCMOS摄像机中低照度下条带噪声的去除方法
CN113011507B (zh) * 2021-03-24 2022-05-06 支付宝(杭州)信息技术有限公司 建立同步时间预测模型的方法、数据同步方法及对应装置
US11954882B2 (en) 2021-06-17 2024-04-09 Zebra Technologies Corporation Feature-based georegistration for mobile computing devices
WO2023089611A1 (en) * 2021-11-17 2023-05-25 Scopio Labs Ltd. System for automated whole-slide scanning of gram stained slides and early detection of microbiological infection
NL2030512B1 (en) 2022-01-12 2023-07-17 Aidx Medical B V A movement platform for microscopic slide positioning
WO2023183323A1 (en) * 2022-03-22 2023-09-28 Life Technologies Corporation Systems and methods for tracking viewing position during sample analysis
WO2023213864A1 (en) 2022-05-04 2023-11-09 F. Hoffmann-La Roche Ag Slide imaging apparatus
US12062148B2 (en) 2022-05-11 2024-08-13 Liquidpixels, Inc. On-demand 3D image viewer
WO2023220723A1 (en) * 2022-05-12 2023-11-16 Syncell (Taiwan) Inc. Method of calibrating a microscope system
WO2024063671A1 (ru) * 2022-09-21 2024-03-28 Ооо "Хоспитекс Диагностикс" Система дая цитологического анализа патологии шейки матки
WO2024064413A1 (en) 2022-09-23 2024-03-28 Kelly Sean M Variable compression, de-resolution, and restoration of a medical image based upon diagnostic and therapeutic relevance
EP4368994A1 (en) 2022-11-08 2024-05-15 Roche Diagnostics GmbH A gripping device configured for gripping a slide
LT7019B (lt) 2023-01-24 2023-08-25 Vilniaus Gedimino technikos universitetas Erdvinio mikroobjekto matmenų ir jo paviršiaus reljefo nustatymo sistema ir būdas
US12075155B1 (en) * 2023-12-21 2024-08-27 Pramana, Inc. System and methods for slide imaging

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4760385A (en) * 1985-04-22 1988-07-26 E. I. Du Pont De Nemours And Company Electronic mosaic imaging process
JPH02123310A (ja) * 1988-11-01 1990-05-10 Seiko Epson Corp 顕微鏡のオートフォーカス機構
JPH05323197A (ja) * 1992-03-24 1993-12-07 Nikon Corp 共焦点顕微鏡装置
JPH0937005A (ja) * 1995-07-19 1997-02-07 Fuji Photo Film Co Ltd フイルムスキャナのプリスキャン方法
JPH10506206A (ja) * 1994-09-20 1998-06-16 ネオパス,インク. 医・生物学標本の自動焦点装置
WO1998039728A1 (en) * 1997-03-03 1998-09-11 Bacus Research Laboratories, Inc. Method and apparatus for creating a virtual microscope slide
US5922282A (en) * 1995-06-07 1999-07-13 Ledley; Robert S. Super fast tuberculosis diagnosis and sensitivity testing method
JPH11211988A (ja) * 1998-01-29 1999-08-06 Nippon Telegr & Teleph Corp <Ntt> 顕微鏡画像遠隔制御システム
JPH11238113A (ja) * 1998-02-20 1999-08-31 Toshiba Corp 画像入力装置

Family Cites Families (151)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US605164A (en) * 1898-06-07 Byron benjamin goldsmith
US3643014A (en) 1967-03-07 1972-02-15 Molins Ltd Pip recording apparatus
US3643015A (en) 1970-06-19 1972-02-15 Paul Davidovits Scanning optical microscope
JPS4939436A (ja) 1972-08-15 1974-04-12
US4926489A (en) 1983-03-11 1990-05-15 Kla Instruments Corporation Reticle inspection system
US4573988A (en) * 1983-06-20 1986-03-04 Personal Products Company Superthin absorbent product
US4742558A (en) 1984-02-14 1988-05-03 Nippon Telegraph & Telephone Public Corporation Image information retrieval/display apparatus
EP0169387B1 (en) 1984-06-25 1990-04-25 Olympus Optical Co., Ltd. Microscope
US4700298A (en) * 1984-09-14 1987-10-13 Branko Palcic Dynamic microscope image processing scanner
JPS6194014U (ja) 1984-11-26 1986-06-17
US4672559A (en) 1984-12-26 1987-06-09 E. I. Du Pont De Nemours And Company Method for operating a microscopical mapping system
GB8501196D0 (en) * 1985-01-17 1985-02-20 Webco Ltd Pipelines
US4673988A (en) 1985-04-22 1987-06-16 E.I. Du Pont De Nemours And Company Electronic mosaic imaging process
NZ211983A (en) * 1985-05-03 1989-10-27 Albert Frederick Hansen Quick release hose coupling: spigot and socket type with locking bar
US4777525A (en) 1985-12-23 1988-10-11 Preston Jr Kendall Apparatus and method for a multi-resolution electro-optical imaging, display and storage/retrieval system
US4768054A (en) * 1986-02-14 1988-08-30 Minolta Camera Kabushiki Kaisha Focus condition detecting device
US4700828A (en) * 1986-07-18 1987-10-20 Dana Corporation Multi-clevis cable connector
JPH0321913Y2 (ja) 1986-10-22 1991-05-13
US4700928A (en) * 1986-10-31 1987-10-20 Masco Corporation Of Indiana Valve assembly
US4845552A (en) 1987-08-20 1989-07-04 Bruno Jaggi Quantitative light microscope using a solid state detector in the primary image plane
US4806015A (en) * 1987-12-08 1989-02-21 Cottingham Hugh V Agglutination detection apparatus
US5740270A (en) * 1988-04-08 1998-04-14 Neuromedical Systems, Inc. Automated cytological specimen classification system and method
JP2749069B2 (ja) * 1988-04-26 1998-05-13 オリンパス光学工業株式会社 蛍光顕微鏡装置
US4980999A (en) * 1988-07-27 1991-01-01 Terenzoni Robert S System for raising a roof
JP2551638B2 (ja) * 1988-09-22 1996-11-06 松下電器産業株式会社 自動焦点調整用対物レンズ駆動装置
EP0363931B1 (en) 1988-10-11 1995-10-04 E.I. Du Pont De Nemours And Company Scanning laser microscope system and methods of use
US5235167A (en) 1988-10-21 1993-08-10 Symbol Technologies, Inc. Laser scanning system and scanning method for reading bar codes
US5067152A (en) 1989-01-30 1991-11-19 Information Technologies Research, Inc. Method and apparatus for vector quantization
US4960999A (en) 1989-02-13 1990-10-02 Kms Fusion, Inc. Scanning and storage of electrophoretic records
JP2724502B2 (ja) * 1989-06-19 1998-03-09 東京エレクトロン株式会社 走査型顕微鏡装置
US4987480A (en) * 1989-07-11 1991-01-22 Massachusetts Institute Of Technology Multiscale coding of images
US5097127A (en) 1990-02-23 1992-03-17 Ibm Corporation Multiple detector system for specimen inspection using high energy backscatter electrons
US5045668A (en) * 1990-04-12 1991-09-03 Armco Inc. Apparatus and method for automatically aligning a welding device for butt welding workpieces
US5086477A (en) 1990-08-07 1992-02-04 Northwest Technology Corp. Automated system for extracting design and layout information from an integrated circuit
JPH0756087Y2 (ja) 1990-09-20 1995-12-25 三菱マテリアル株式会社 金型測定用治具
JP2991483B2 (ja) 1990-11-27 1999-12-20 日本分光工業株式会社 顕微鏡イメージマッピング装置及び方法
US5784162A (en) * 1993-08-18 1998-07-21 Applied Spectral Imaging Ltd. Spectral bio-imaging methods for biological research, medical diagnostics and therapy
US5231663A (en) 1991-03-18 1993-07-27 Earl Joseph G Image processing system
US5185638A (en) 1991-04-26 1993-02-09 International Business Machines Corporation Computer controlled, multiple angle illumination system
US5187754A (en) * 1991-04-30 1993-02-16 General Electric Company Forming, with the aid of an overview image, a composite image from a mosaic of images
KR960007481B1 (ko) * 1991-05-27 1996-06-03 가부시끼가이샤 히다찌세이사꾸쇼 패턴검사방법 및 장치
US5790710A (en) 1991-07-12 1998-08-04 Jeffrey H. Price Autofocus system for scanning microscopy
JPH0576005A (ja) 1991-09-13 1993-03-26 Nikon Corp 画像入力装置
US5172228A (en) * 1991-11-19 1992-12-15 Utah State University Foundation Image compression method and apparatus employing distortion adaptive tree search vector quantization
US5495535A (en) 1992-01-31 1996-02-27 Orbotech Ltd Method of inspecting articles
US5912699A (en) 1992-02-18 1999-06-15 Neopath, Inc. Method and apparatus for rapid capture of focused microscopic images
US5448399A (en) 1992-03-13 1995-09-05 Park Scientific Instruments Optical system for scanning microscope
JPH0576005U (ja) 1992-03-16 1993-10-15 株式会社赤司電機器製作所 発電機負荷試験装置
JPH05264221A (ja) * 1992-03-17 1993-10-12 Fujitsu Ltd 半導体露光装置用マーク位置検出装置及びこれを用いた半導体露光装置用位置合わせ装置
EP0567681B1 (en) * 1992-04-30 1997-07-23 Becton, Dickinson and Company Method and apparatus for controlling coordinate displacements of a platform
JPH05316302A (ja) * 1992-05-13 1993-11-26 Minolta Camera Co Ltd 画像入力装置
US5668887A (en) * 1992-05-29 1997-09-16 Eastman Kodak Company Coating density analyzer and method using non-synchronous TDI camera
JP3275368B2 (ja) * 1992-07-09 2002-04-15 株式会社ニコン 露光方法及び装置
US5252835A (en) * 1992-07-17 1993-10-12 President And Trustees Of Harvard College Machining oxide thin-films with an atomic force microscope: pattern and object formation on the nanometer scale
JP2905655B2 (ja) 1992-11-19 1999-06-14 シャープ株式会社 画像処理装置
US5650813A (en) * 1992-11-20 1997-07-22 Picker International, Inc. Panoramic time delay and integration video camera system
US5633948A (en) 1992-11-30 1997-05-27 Kegelmeyer, Jr.; W. Philip Method and apparatus for detecting a desired behavior in digital image data
IL107602A0 (en) * 1992-12-21 1994-02-27 Johnson & Johnson Vision Prod Method of inspecting ophthalmic lenses
JP3377548B2 (ja) * 1993-03-30 2003-02-17 オリンパス光学工業株式会社 顕微鏡画像観察システム
US5479252A (en) 1993-06-17 1995-12-26 Ultrapointe Corporation Laser imaging system for inspection and analysis of sub-micron particles
US5923430A (en) * 1993-06-17 1999-07-13 Ultrapointe Corporation Method for characterizing defects on semiconductor wafers
US5483055A (en) * 1994-01-18 1996-01-09 Thompson; Timothy V. Method and apparatus for performing an automatic focus operation for a microscope
US5793969A (en) 1993-07-09 1998-08-11 Neopath, Inc. Network review and analysis of computer encoded slides
JPH0756087A (ja) * 1993-08-12 1995-03-03 Union Optical Co Ltd 無限遠補正型ズーム顕微鏡用ズームチューブレンズ
SE504294C2 (sv) 1993-10-01 1996-12-23 Lucocer Ab Implantat avsett att fixeras genom kontakt med nybildad benvävnad
US5434629A (en) * 1993-12-20 1995-07-18 Focus Automation Systems Inc. Real-time line scan processor
GB2286309B (en) 1994-02-01 1998-04-15 Rank Cintel Ltd High resolution film scanner
US5578832A (en) 1994-09-02 1996-11-26 Affymetrix, Inc. Method and apparatus for imaging a sample on a device
JPH07243823A (ja) 1994-03-03 1995-09-19 Toshiba Corp パターン検査装置
US5481300A (en) * 1994-04-29 1996-01-02 Motta; Ricardo J. Image capture system
US5932872A (en) * 1994-07-01 1999-08-03 Jeffrey H. Price Autofocus system for scanning microscopy having a volume image formation
US5557097A (en) 1994-09-20 1996-09-17 Neopath, Inc. Cytological system autofocus integrity checking apparatus
US5581631A (en) * 1994-09-20 1996-12-03 Neopath, Inc. Cytological system image collection integrity checking apparatus
JPH0894938A (ja) * 1994-09-21 1996-04-12 Sony Corp 共焦点顕微鏡並びに光記録再生装置
US5649032A (en) 1994-11-14 1997-07-15 David Sarnoff Research Center, Inc. System for automatically aligning images to form a mosaic image
WO1996039619A1 (en) 1995-06-06 1996-12-12 Kla Instruments Corporation Optical inspection of a specimen using multi-channel responses from the specimen
JPH0923005A (ja) * 1995-07-06 1997-01-21 Mitsubishi Electric Corp 半導体装置およびその製造方法
AU713854B2 (en) 1995-07-19 1999-12-09 Veracel Inc. Automated scanning of microscope slides
JPH10511531A (ja) * 1995-10-18 1998-11-04 フィリップス エレクトロニクス ネムローゼ フェンノートシャップ 領域ベーステクスチュアコード化方法及びデコード方法、及び対応するシステム
JP3631304B2 (ja) * 1995-10-24 2005-03-23 オリンパス株式会社 顕微鏡の自動焦点整合装置
DE19539730C1 (de) * 1995-10-25 1996-10-24 Agfa Gevaert Ag Verfahren und Vorrichtung zur Farbabstimmung einer Farb-Videokamera
US5710835A (en) 1995-11-14 1998-01-20 The Regents Of The University Of California, Office Of Technology Transfer Storage and retrieval of large digital images
US6151405A (en) 1996-11-27 2000-11-21 Chromavision Medical Systems, Inc. System and method for cellular specimen grading
US6215892B1 (en) * 1995-11-30 2001-04-10 Chromavision Medical Systems, Inc. Method and apparatus for automated image analysis of biological specimens
US6005694A (en) * 1995-12-28 1999-12-21 Mci Worldcom, Inc. Method and system for detecting optical faults within the optical domain of a fiber communication network
JPH09197290A (ja) * 1996-01-12 1997-07-31 Omron Corp 顕微鏡画像入力装置
US6005964A (en) 1996-01-24 1999-12-21 The Board Of Trustees Of The University Of Illinois Automatic machine vision microscope slide inspection system and method
US5872591A (en) 1996-02-21 1999-02-16 Pakon, Inc. Film scanner
JPH09247545A (ja) 1996-03-11 1997-09-19 Matsushita Electric Ind Co Ltd スキャナ型電子カメラ
US6078681A (en) 1996-03-18 2000-06-20 Marine Biological Laboratory Analytical imaging system and process
US6091846A (en) * 1996-05-31 2000-07-18 Texas Instruments Incorporated Method and system for anomaly detection
WO1998002843A1 (en) * 1996-07-12 1998-01-22 Erim International, Inc. Mosaic construction, processing, and review of very large electronic micrograph composites
AUPO126496A0 (en) 1996-07-25 1996-08-15 Sulzberger, Robert John A trailer
DE19631564B4 (de) 1996-07-26 2008-07-24 Siemens Ag Verfahren zur Anbauüberwachung von Radsensoren für Bahnanlagen und Einrichtung zur Durchführung dieses Verfahrens
US6031930A (en) * 1996-08-23 2000-02-29 Bacus Research Laboratories, Inc. Method and apparatus for testing a progression of neoplasia including cancer chemoprevention testing
US5754291A (en) * 1996-09-19 1998-05-19 Molecular Dynamics, Inc. Micro-imaging system
GB9622055D0 (en) 1996-10-23 1996-12-18 Univ Strathclyde Vector quantisation
CA2271038C (en) 1996-11-08 2006-08-01 National Computer Systems, Inc. Optical scanning with calibrated pixel output
US5968731A (en) 1996-12-10 1999-10-19 The Regents Of The University Of California Apparatus for automated testing of biological specimens
US6587581B1 (en) * 1997-01-10 2003-07-01 Hitachi, Ltd. Visual inspection method and apparatus therefor
US5758832A (en) 1997-02-06 1998-06-02 Grainger Associates Glass recycling system
US20010017941A1 (en) * 1997-03-14 2001-08-30 Navin Chaddha Method and apparatus for table-based compression with embedded coding
DE19714221A1 (de) 1997-04-07 1998-10-08 Zeiss Carl Fa Konfokales Mikroskop mit einem motorischen Scanningtisch
EP1365070B1 (en) 1997-05-09 2016-01-06 Trinity Industries, Inc. Breakaway support post for highway guardrail end treatments
US6169816B1 (en) 1997-05-14 2001-01-02 Applied Imaging, Inc. Identification of objects of interest using multiple illumination schemes and finding overlap of features in corresponding multiple images
US6002789A (en) 1997-06-24 1999-12-14 Pilot Industries, Inc. Bacteria colony counter and classifier
US5895915A (en) 1997-07-24 1999-04-20 General Scanning, Inc. Bi-directional scanning system with a pixel clock system
JPH1169105A (ja) 1997-08-20 1999-03-09 Fuji Xerox Co Ltd 画像読取装置
US6388809B1 (en) 1997-10-29 2002-05-14 Digital Optical Imaging Corporation Methods and apparatus for improved depth resolution use of out-of-focus information in microscopy
US6262838B1 (en) * 1998-03-20 2001-07-17 Genetic Microsystems Inc Focusing in microscope systems
CA2229175A1 (en) 1998-02-06 1999-08-06 Morphometrix Technologies Inc. Automatic focus system
JPH11271624A (ja) * 1998-03-20 1999-10-08 Olympus Optical Co Ltd 顕微鏡用自動焦点検出装置
US6185030B1 (en) * 1998-03-20 2001-02-06 James W. Overbeck Wide field of view and high speed scanning microscopy
JP3747621B2 (ja) * 1998-03-26 2006-02-22 コニカミノルタオプト株式会社 カラー投影表示装置
JPH11325819A (ja) * 1998-05-21 1999-11-26 Nikon Corp 顕微鏡用電子カメラ
DE19824460A1 (de) * 1998-05-30 1999-12-02 Zeiss Carl Jena Gmbh Anordnung und Verfahren zur mikroskopischen Erzeugung von Objektbildern
JP3706740B2 (ja) 1998-06-24 2005-10-19 ドリームテクノロジーズ株式会社 画像表示及びデータ読み込みのための装置及び方法
US5943122A (en) 1998-07-10 1999-08-24 Nanometrics Incorporated Integrated optical measurement instruments
US6324298B1 (en) * 1998-07-15 2001-11-27 August Technology Corp. Automated wafer defect inspection system and a process of performing such inspection
JP3139998B2 (ja) * 1998-12-01 2001-03-05 株式会社東京精密 外観検査装置及び方法
US6330348B1 (en) * 1999-01-21 2001-12-11 Resolution Sciences Corporation Method and apparatus for measurement of microtome performance
US6249341B1 (en) * 1999-01-25 2001-06-19 Amnis Corporation Imaging and analyzing parameters of small moving objects such as cells
JP4323608B2 (ja) 1999-03-12 2009-09-02 キヤノン株式会社 露光装置およびデバイス製造方法
US7106895B1 (en) * 1999-05-05 2006-09-12 Kla-Tencor Method and apparatus for inspecting reticles implementing parallel processing
JP3544892B2 (ja) * 1999-05-12 2004-07-21 株式会社東京精密 外観検査方法及び装置
US7212667B1 (en) * 1999-05-17 2007-05-01 Samsung Electronics Co., Ltd. Color image processing method for indexing an image using a lattice structure
US6548796B1 (en) * 1999-06-23 2003-04-15 Regents Of The University Of Minnesota Confocal macroscope
US6496256B1 (en) * 1999-10-01 2002-12-17 Applied Materials, Inc. Inspection systems using sensor array and double threshold arrangement
US6594401B1 (en) * 1999-10-20 2003-07-15 Xerox Corporation Detection and elimination of scanning artifacts
JP2001210263A (ja) 2000-01-27 2001-08-03 Hitachi Ltd 走査電子顕微鏡、そのダイナミックフォーカス制御方法および半導体デバイスの表面および断面形状の把握方法
US6711283B1 (en) 2000-05-03 2004-03-23 Aperio Technologies, Inc. Fully automatic rapid microscope slide scanner
US6449048B1 (en) 2000-05-11 2002-09-10 Veeco Instruments, Inc. Lateral-scanning interferometer with tilted optical axis
JP2002042706A (ja) 2000-07-25 2002-02-08 Hitachi Ltd 走査電子顕微鏡の自動焦点機能
US6763140B1 (en) * 2000-09-07 2004-07-13 Chipworks Method and apparatus for focusing a micro-imaging system onto a tilted or uneven sample to acquire images of the sample
EP1199542A3 (de) 2000-10-13 2003-01-15 Leica Microsystems Imaging Solutions Ltd. Verfahren und Vorrichtung zur optischen Vermessung eines Oberflächenprofils eines Objektes
US7027628B1 (en) * 2000-11-14 2006-04-11 The United States Of America As Represented By The Department Of Health And Human Services Automated microscopic image acquisition, compositing, and display
US7155049B2 (en) * 2001-01-11 2006-12-26 Trestle Acquisition Corp. System for creating microscopic digital montage images
US6970789B2 (en) 2001-02-02 2005-11-29 Cellomics, Inc. Method of determining a best initial focal position estimate
US7498564B2 (en) 2001-02-06 2009-03-03 University Of Bristol Of Senate House Resonant scanning near-field optical microscope
JP4937457B2 (ja) 2001-03-01 2012-05-23 オリンパス株式会社 顕微鏡制御装置、顕微鏡制御システム、顕微鏡の制御方法、プログラム、及び記録媒体
US7864380B2 (en) 2001-03-19 2011-01-04 Dmetrix, Inc. Slide-borne imaging instructions
JP4199939B2 (ja) 2001-04-27 2008-12-24 株式会社日立製作所 半導体検査システム
US6618140B2 (en) * 2001-06-18 2003-09-09 Amnis Corporation Spectral deconvolution of fluorescent markers
US7338168B2 (en) * 2001-07-06 2008-03-04 Palantyr Research, Llc Particle analyzing system and methodology
IL148664A0 (en) 2002-03-13 2002-09-12 Yeda Res & Dev Auto-focusing method and device
DE10232242A1 (de) * 2002-07-17 2004-02-05 Leica Microsystems Semiconductor Gmbh Verfahren und Vorrichtung zum Rastern einer Probe mit einem optischen ab Bildungssystem
JP2004101871A (ja) 2002-09-10 2004-04-02 Olympus Corp 顕微鏡画像撮影装置
JP3859673B2 (ja) 2002-09-17 2006-12-20 富士通株式会社 生体情報取得装置および生体情報による認証装置
JP4194905B2 (ja) 2003-08-18 2008-12-10 株式会社ノリタケカンパニーリミテド 多孔質筒体の支持構造および支持部材の固着方法
JP4770166B2 (ja) 2004-12-10 2011-09-14 日本ゼオン株式会社 直下型バックライト装置
US8164622B2 (en) * 2005-07-01 2012-04-24 Aperio Technologies, Inc. System and method for single optical axis multi-detector microscope slide scanner

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4760385A (en) * 1985-04-22 1988-07-26 E. I. Du Pont De Nemours And Company Electronic mosaic imaging process
JPH02123310A (ja) * 1988-11-01 1990-05-10 Seiko Epson Corp 顕微鏡のオートフォーカス機構
JPH05323197A (ja) * 1992-03-24 1993-12-07 Nikon Corp 共焦点顕微鏡装置
JPH10506206A (ja) * 1994-09-20 1998-06-16 ネオパス,インク. 医・生物学標本の自動焦点装置
US5922282A (en) * 1995-06-07 1999-07-13 Ledley; Robert S. Super fast tuberculosis diagnosis and sensitivity testing method
JPH0937005A (ja) * 1995-07-19 1997-02-07 Fuji Photo Film Co Ltd フイルムスキャナのプリスキャン方法
WO1998039728A1 (en) * 1997-03-03 1998-09-11 Bacus Research Laboratories, Inc. Method and apparatus for creating a virtual microscope slide
JPH11211988A (ja) * 1998-01-29 1999-08-06 Nippon Telegr & Teleph Corp <Ntt> 顕微鏡画像遠隔制御システム
JPH11238113A (ja) * 1998-02-20 1999-08-31 Toshiba Corp 画像入力装置

Also Published As

Publication number Publication date
US20040252875A1 (en) 2004-12-16
AU2001247403A1 (en) 2001-11-12
EP2282230A3 (en) 2011-05-25
WO2001084209B1 (en) 2003-01-16
US7826649B2 (en) 2010-11-02
US6917696B2 (en) 2005-07-12
JP2019056917A (ja) 2019-04-11
DE60135562D1 (de) 2008-10-09
US20040170312A1 (en) 2004-09-02
EP1317685A2 (en) 2003-06-11
JP6437947B2 (ja) 2018-12-12
JP2017194700A (ja) 2017-10-26
WO2001084209A3 (en) 2002-12-19
US20110044518A1 (en) 2011-02-24
US8055042B2 (en) 2011-11-08
US8094902B2 (en) 2012-01-10
US9521309B2 (en) 2016-12-13
US20180136451A1 (en) 2018-05-17
US20170003492A1 (en) 2017-01-05
US6711283B1 (en) 2004-03-23
US7646495B2 (en) 2010-01-12
US20120075457A1 (en) 2012-03-29
US7949168B2 (en) 2011-05-24
US7035478B2 (en) 2006-04-25
US9386211B2 (en) 2016-07-05
EP1990667A1 (en) 2008-11-12
EP2282230A2 (en) 2011-02-09
US20070036462A1 (en) 2007-02-15
JP2017194699A (ja) 2017-10-26
EP1317685B9 (en) 2016-09-28
US7428324B2 (en) 2008-09-23
JP2004514920A (ja) 2004-05-20
US9851550B2 (en) 2017-12-26
US20050270638A1 (en) 2005-12-08
US20090028414A1 (en) 2009-01-29
US20140313313A1 (en) 2014-10-23
US7457446B2 (en) 2008-11-25
WO2001084209A2 (en) 2001-11-08
US20110037847A1 (en) 2011-02-17
US8731260B2 (en) 2014-05-20
EP1317685B2 (en) 2016-11-30
US7978894B2 (en) 2011-07-12
US20140313314A1 (en) 2014-10-23
US20120113242A1 (en) 2012-05-10
US20130162802A1 (en) 2013-06-27
EP2282230B1 (en) 2019-07-24
ATE406591T1 (de) 2008-09-15
US20110221882A1 (en) 2011-09-15
US8755579B2 (en) 2014-06-17
US8385619B2 (en) 2013-02-26
EP1317685B1 (en) 2008-08-27
US20170094095A1 (en) 2017-03-30
JP2011232762A (ja) 2011-11-17
US20090303321A1 (en) 2009-12-10
JP2016167080A (ja) 2016-09-15
US9729749B2 (en) 2017-08-08
US20090141126A1 (en) 2009-06-04

Similar Documents

Publication Publication Date Title
JP2019049751A (ja) 全自動高速顕微鏡スライドスキャナ
JP2017194700A5 (ja)
JP2017194699A5 (ja)
JP2009528578A (ja) 単一光軸マルチ検出器スライドガラススキャンシステム及び方法

Legal Events

Date Code Title Description
A524 Written submission of copy of amendment under article 19 pct

Free format text: JAPANESE INTERMEDIATE CODE: A524

Effective date: 20181204

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20181204

A871 Explanation of circumstances concerning accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A871

Effective date: 20181204

A975 Report on accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A971005

Effective date: 20190228

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20190304

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20190826

A761 Written withdrawal of application

Free format text: JAPANESE INTERMEDIATE CODE: A761

Effective date: 20200406