JP6343660B2 - 血球の撮像 - Google Patents

血球の撮像 Download PDF

Info

Publication number
JP6343660B2
JP6343660B2 JP2016501227A JP2016501227A JP6343660B2 JP 6343660 B2 JP6343660 B2 JP 6343660B2 JP 2016501227 A JP2016501227 A JP 2016501227A JP 2016501227 A JP2016501227 A JP 2016501227A JP 6343660 B2 JP6343660 B2 JP 6343660B2
Authority
JP
Japan
Prior art keywords
images
wbc
classification process
cell
processor
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2016501227A
Other languages
English (en)
Other versions
JP2016511419A (ja
Inventor
ザーニシャー、デイビッド
ザーニシャー、マイケル
リン ウォン、カム
リン ウォン、カム
ホールフェルド、ロバート
Original Assignee
ロッシュ ダイアグノスティクス ヘマトロジー インコーポレイテッド
ロッシュ ダイアグノスティクス ヘマトロジー インコーポレイテッド
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ロッシュ ダイアグノスティクス ヘマトロジー インコーポレイテッド, ロッシュ ダイアグノスティクス ヘマトロジー インコーポレイテッド filed Critical ロッシュ ダイアグノスティクス ヘマトロジー インコーポレイテッド
Publication of JP2016511419A publication Critical patent/JP2016511419A/ja
Application granted granted Critical
Publication of JP6343660B2 publication Critical patent/JP6343660B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B21/00Microscopes
    • G02B21/36Microscopes arranged for photographic purposes or projection purposes or digital imaging or video purposes including associated control and data processing arrangements
    • G02B21/365Control or image processing arrangements for digital or video microscopes
    • G02B21/367Control or image processing arrangements for digital or video microscopes providing an output produced by processing a plurality of individual source images, e.g. image tiling, montage, composite images, depth sectioning, image comparison
    • G01N15/1433
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/24Classification techniques
    • G06F18/241Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches
    • G06F18/2415Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches based on parametric or probabilistic models, e.g. based on likelihood ratio or false acceptance rate versus a false rejection rate
    • G06F18/24155Bayesian classification
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0012Biomedical image inspection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/11Region-based segmentation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/136Segmentation; Edge detection involving thresholding
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/60Type of objects
    • G06V20/69Microscopic objects, e.g. biological cells or cellular parts
    • G06V20/693Acquisition
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/60Type of objects
    • G06V20/69Microscopic objects, e.g. biological cells or cellular parts
    • G06V20/695Preprocessing, e.g. image segmentation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/60Type of objects
    • G06V20/69Microscopic objects, e.g. biological cells or cellular parts
    • G06V20/698Matching; Classification
    • G01N2015/016
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10016Video; Image sequence
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10024Color image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10056Microscopic image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20016Hierarchical, coarse-to-fine, multiscale or multiresolution image processing; Pyramid transform
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30004Biomedical image processing
    • G06T2207/30024Cell structures in vitro; Tissue sections in vitro
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30242Counting objects in image

Description

[優先権の主張]
本出願は、2013年3月11日に出願された米国仮特許出願第61/776,740号および2013年3月15日に出願された米国仮特許出願第61/794,946号の利益を主張する。これらの出願の内容は、全て参照により本明細書に組み込まれる。
[技術分野]
本発明は、たとえば電子撮像システムを用いた血球の撮像に関する。
多くの撮像および走査応用装置は、自動化された形で画像を取得する。このような画像の解釈では、画像中の1つまたは2つ以上の対象物を識別することが必要とされる場合がある。このような識別は、手動で実施されてもよいが、処理には時間がかかり、またエラーを起こしやすい。
生物学的試料は、複数の個別の波長で撮像され、画像のセットが取得され得る。生物学的試料の特徴は、画像の1つまたは2つ以上を処理することによって決定することができる。たとえば、低倍率画像の処理には、赤血球(RBC)の計数、血液成分(たとえば、白血球(WBC)および有核赤血球(nRBC))の位置決めおよび計数、ならびに血小板の計数が含まれ得る。たとえば、高倍率画像の処理には、RBCの特性の特徴付け、WBC分画の計算、およびWBCの分類が含まれ得る。
一態様において、基板上の生物学的サンプル中の細胞を位置決めする方法は、画像取得装置により、基板上の第1の位置の複数の画像を取得することを含んでいる。複数の画像の各画像は、異なる照明波長で取得される。また方法は、プロセッサにより、複数の画像における細胞質物質の位置を特定すること、およびプロセッサにより、複数の画像における細胞核の位置を特定することを含んでいる。方法はさらに、プロセッサにより、細胞質物質の位置および細胞核の位置に基づいて、複数の画像における細胞の位置を特定することを含んでいる。また方法は、プロセッサにより、複数の画像における細胞の少なくともいくつかに細胞の種類を割り当てること、および複数の画像において少なくとも1つの種類の細胞を計数することを含んでいる。
別の態様において、本開示は、基板上の生物学的サンプルの白血球(WBC)分画を決定する方法を特徴付ける。方法は、画像取得装置により、基板上の第1の位置の複数の画像を取得し、複数の画像の各画像を異なる照明波長で取得すること、およびプロセッサにより、複数の画像におけるWBCの核の位置を特定することを含んでいる。WBCの位置を特定することは、複数の画像中のWBCについての第1の仮定に基づき第1の核マスクを生成すること、複数の画像中のWBCについての第2の仮定に基づき第2の核マスクを生成すること、および第1の核マスクと第2の核マスクとを交差させて核区分を生成することを含んでいる。また方法は、核区分に基づいてWBCの1つまたは2つ以上の特性を測定すること、および測定された特性を用いてWBC分画を決定することを含んでいる。
別の態様において、本開示は、基板上の生物学的サンプル中の白血球(WBC)を分類する方法を特徴付ける。方法は、画像取得装置により、基板上の第1の位置の複数の画像を取得すること、およびプロセッサにより、複数の画像中の対象物をWBC分類グループへと分類することを含んでいる。また方法は、プロセッサにより、少なくともいくつかの分類グループからの対象物を未分類対象物として識別すること、ならびに未分類対象物、および分類された対象物の少なくともいくつかをユーザーインターフェース上に表示することを含んでいる。
他の態様において、本開示は、1つまたは2つ以上のプロセッサに、上に概説した方法を実行させるコンピュータ可読指示が符号化されるコンピュータ可読記憶装置を特徴付ける。さらなる態様において本開示は、基板上の第1の位置の複数の画像を取得するように構成される画像取得装置を含む撮像システムを特徴付ける。複数の画像の各画像は、異なる照明波長で取得され得る。またシステムは、画像取得装置に接続され、上に概説した方法を実施するように構成される1つまたは2つ以上のプロセッサを含んでいる。
上述の態様の実装は、以下の1つまたは2つ以上を含み得る。
複数の画像は、10倍対物レンズを用いて取得され得る。少なくとも1つの細胞の種類は、白血球および有核赤血球の少なくとも1つを含み得る。複数の画像を取得することは、50倍対物レンズを用いて複数の画像を取得することを含み得る。第1の仮定は、WBCが顆粒球であるという仮定を含み得る。第2の仮定は、WBCが無顆粒球であるという仮定を含み得る。特性は、WBCの面積、WBCの形状、WBCの色、WBCの光学密度、およびWBCの組織の1つまたは2つ以上を含み得る。好中球の核の複雑性に関する値およびリンパ球の異型性に関する値の少なくとも1つは、WBC分類グループにおいて決定され得る。この核の複雑性に関する値および異型性に関する値の少なくとも1つは、ユーザーインターフェース上に表示され得る。WBCでない対象物は、対象物の分類前に画像から除去され得る。WBCでない対象物は、血小板、凝集塊、巨大血小板および微小巨核球の1つまたは2つ以上を含み得る。複数の画像中の対象物は、多段分類器を用いて分類され得る。多段分類器の少なくとも1つの段階は、線形判別分析(LDA)に基づく分類器を含み得る。多段分類器の少なくとももう1つの段階は、ベイズ分類器を含み得る。WBC分類グループは、WBCの成熟経路に基づき得る。未分類対象物は、未熟細胞、芽細胞、前単球および前リンパ球の1つまたは2つ以上を含み得る。希少細胞、損傷細胞、または焦点外の細胞は、WBC分類グループへの分類から除外され得る。
定義されない限りは、本明細書で用いられる全ての技術的用語および科学的用語は、本発明が属する技術分野の当業者によって共通して理解される意味と同一の意味を有する。本明細書に記載のものと同様または均等の方法および材料が、本発明の実践または検査において用いることができるが、適切な方法および材料は以下に記載される。本明細書において言及される全ての出版物、特許出願、特許および他の参照文献は、参照によりその全体が組み込まれている。争いがある場合、定義を含む本明細書が支配することになる。また、材料、方法および実施例は例示的なものであって、限定を意図するものではない。
本発明の他の特徴および利点は、以下の詳細な説明および請求項から明らかになるであろう。
撮像システムの一実施形態の概略図である。 撮像システムの様々なモジュールを示すブロック図である。 白血球(WBC)および有核赤血球を位置決めおよび計数するための処理のフローチャートである。 WBC分画を決定するための処理のフローチャートである。 WBCを分類するための処理のフローチャートである。 細胞を分類するための処理のフローチャートである。 例示的な分類スキームを示す図である。 コンピュータ装置の概略図である。
生物学的試料は、複数の個別の波長で撮像され、画像のセットが取得され得る。生物学的試料の特徴は、画像の1つまたは2つ以上を処理することによって決定することができる。たとえば、低倍率画像の処理には、赤血球(RBC)の計数、血液成分(たとえば、白血球(WBC)および有核赤血球(nRBC))の位置決めおよび計数、ならびに血小板の計数が含まれ得る。たとえば、高倍率画像の処理には、RBCの特性の特徴付け、WBC分画の計算、およびWBCの分類が含まれ得る。WBC分画の計算は、たとえば、血液中の異なる種類のWBCの数を計数することを含み得る。いくつかの実装においては、WBC分画の計算は、血液中の異なる種類のWBCの割合を計算することを含み得る。
撮像システム
図1は、本明細書に記載される高速のオートフォーカス方法を用いる撮像システム100の一実施形態を示す。撮像システム100は、コンピュータ190により制御される撮像ハードウェア105を含んでいる。コンピュータ190は概して、中央処理ユニット192、ハードドライブ194およびランダムアクセスメモリ196を含んでいる。
図1に示される撮像システムにおいて、光源110は、生物学的サンプル135を備えるスライド130を照明する。光源110は、色の異なる個別の光源を含んでいる。一例において、光源110は、青色、緑色、黄色および赤色の発光ダイオード(LED)を含んでいてもよい。他の種類の有色光源も用いることができる。光源110は、低倍率の撮像、高倍率の撮像、またはその両方に用いることができる。
スライドは、スライド130の任意の部分を対物レンズ140の下に配置できるように、水平面(撮像されるスライドの表面に平行)において移動可能な第1電動ステージ120上に装着される。第2電動ステージ150は、スライド130上に置かれた試料135への焦点合わせを容易にするために、対物レンズ140を上下に移動させる。スライド130と対物レンズ140との間の距離は、「焦点距離」と呼ばれる。焦点距離の減少は、この例においては、対物レンズ140をスライド130に向けて垂直に移動させることを意味する。代替的に、焦点距離は、スライド130を対物レンズ140に向けて垂直に移動させることによって(たとえば、第1電動ステージ120を移動させることによって)調節されてもよい。いくつかの実装においては、焦点距離の調節を容易にするために、スライド130および対物レンズ140の両方が移動してもよい。第1電動ステージ120の水平面における移動に対する軸は、通常、X軸およびY軸という。第2電動ステージ150が対物レンズ140を移動させるときに沿う垂直軸は、通常、Z軸という。3つの軸は、スライド130に対する任意(x、y、z)の空間点を撮像するためにシステム100が利用する座標系を定める。
光源110からの光は、スライド130を通過し、対物レンズ140によってカメラ160のセンサ上に投影される。センサは、たとえば、電荷結合素子(CCD)アレイであってもよい。図1は、スライド上の対象物が光を吸収することにより、カメラによって生成される画像において暗くなるために、スライド上の対象物を見ることができる「明視野」顕微鏡の一例を示す。撮像ハードウェア105は、1つまたは2つ以上の付加的なレンズを含んでいてもよい。蛍光、暗視野または位相差などの他の顕微鏡モードも、本明細書に記載される高速なオートフォーカス方法が適用可能な画像を生成することができる。
画像が最適でない焦点距離で取得されると、画像はぼやけ、通常多くの画像処理用途に適さない。仮にスライド130の表面が完全に平面であれば、システム100は、単に、3つ(x、y)の位置の焦点画像に対応する適切な高さzを決定し、面をこれら(x、y、z)の点に合わせることによって焦点画像を取得できる。平面方程式はその後、スライド上の任意の他の(x、y)位置に対して焦点高さzを与える。しかしながら、実際には、スライド130および/またはステージ120の表面における凹凸により、所定の位置に対する焦点位置は、上述のような平面適合(plane fit)からは正確に決定できない可能性がある。それゆえ、一般に、焦点距離は、スライド上の異なる(x、y)位置で取得される各画像に対して、微調節される必要があり得る。
画像取得後、カメラ160は、処理のために画像をコンピュータ190に送信する。画像が充分高速に処理される場合、1つの画像位置からの焦点距離データは、次の画像を取り込む位置の焦点距離を調節するために用いられ得る。これによりシステムは、異なる位置に対応する焦点距離における変動を調節でき、結果として、表示のためにより正確な焦点画像を生成できる。たとえば、スライド130の一領域が他の領域よりもわずかに厚く、その領域内で10の位置が撮像される場合、第1の画像が取得された後に厚さの変化が発見され、その領域内の他の位置で取得された追加の画像は、この厚さの変化を補うために、本明細書に記載される方法を用いて微調節された焦点距離で取得することができる。
いくつかの例において、低倍率画像は、10倍対物レンズ、0.5倍光カプラおよび2メガピクセルCCDカメラにより取得することができる。いくつかの例において、高倍率画像は、50倍対物レンズ、1倍光カプラおよび0.3メガピクセル、毎秒200フレームのカメラにより取得することができる。
いくつかの例において、白黒画像のセット(本明細書においては画像の「スタック(stack)」という)は、撮像位置のスライドから取得される。セットの各画像は、単一の光の波長を用いて(たとえば、光源110の青色、緑色、黄色および赤色のLEDのそれぞれを用いて)取得される。要望に応じて、カラーのJPEG画像などのカラー画像を、表示目的で白黒画像のセットから生成することができる。いくつかの例において、対物レンズは、油浸またはカバースリップの存在に対して補正されない。セットの各画像は背景補正され、セットの他の画像のそれぞれと位置合わせされる。特定の色を用いて特定の位置で2つ以上の画像が取得される場合、これらの画像の1つが選択される(たとえば、最も焦点が合っている画像)。スライドの焦点面のオンザフライの推定は、画像取得の間更新することができる。画像のセットは、血球数、白血球(WBC)分画、および生物学的試料の他の特徴を決定するために用いることができる測定値を生み出すために、1つまたは2つ以上の撮像モジュールによって処理される。
異なる色の光で試料を照明すると、取得画像から抽出される情報が異なる場合がある。たとえば、血球を含む試料を撮像する場合、細胞は異なる色の照明において違った現れ方をし得るので、より簡易な識別、分類または差別化を容易にする。たとえば、赤血球は、ヘモグロビンの存在により顕著な量の青色光を吸収し、標準的なロマノフスキー染色により染色された細胞核は、黄色光を吸収する。
図2を参照すると、画像取得および処理は、制御システム200により制御される。図示された例において、制御システム200は、単一のコンピュータ201によって実施される。いくつかの例において、制御システム200は、複数のコンピュータによって実施されてもよい。たとえば、制御システム200のいくつかのモジュールが第1のコンピュータによって実施され、制御システム200の他のモジュールが第2のコンピュータによって実施されてもよい。
ハードウェアモジュール202は、撮像ハードウェア(たとえば、撮像モジュール216により制御される)へと命令を送信し、撮像ハードウェアは次に、画像取得を誘発するためにカメラ160へパルスを送信する。取得された画像は、コンピュータ(たとえば、コンピュータ201)へと移送される。カメラモジュール204は、取得された画像をスタックへとまとめる。
スライドが撮像されている間、フォーカスモジュール206は、画像の各スタックを調べ、たとえばスタックの画像の相対的な焦点スコアに基づき、スタックがどの高さで取得されたかを推定する。フォーカスモジュール206は、これらの高さの推定値を平面適合モジュール208に報告する。各位置が撮像される前に、ハードウェアモジュール202は、平面適合モジュール208に、その位置での焦点面の推定値を尋ねる。画像取得により焦点面の推定値を更新するこの機構は、スライドの表面上の凹凸に適合するために、撮像システム100または撮像モジュール216によって用いられてもよいし、その両方によって用いられてもよい。いくつかの例においては、たとえば焦点面の推定値の伝達により、スライドの凹凸に対する適応応答に遅延がある場合もある。
登録モジュール210および登録フレーム選択モジュール(pick registration frames module)212は、低倍率画像と高倍率画像との間で座標系を合致させるために用いることができる。ゆえに、たとえば、低倍率での撮像中に発見される全ての対象物は、高倍率での撮像中に正確に位置決めおよび撮像することができる。
位置合わせモジュール214は、スタックの画像を位置合わせする機能を提供する。いくつかの例において、スタックの生画像は、たとえば、スライドの移動、わずかに中心を外れたLEDダイ、レンズの光学効果または他の要因により、互いに対して位置合わせしていない。さらに、低倍率では、レンズが完璧にカラー補正されていない場合、異なる照明色の下で取得された画像は、それぞれ、わずかに異なる倍率を有し得る。高倍率では、4色のスケールは同一であり得るが、それでも画像は位置ずれする可能性がある。一例において、低倍率画像を位置合わせするために、標的画像においてコントラストの高いタイポイント(たとえば、細胞)を選択し、同一のタイポイント(たとえば、細胞)を第2画像中に位置付け、第2画像を変換して第2画像を標的画像に位置合わせするアルゴリズムを用いることができる。一例において、高倍率画像を位置合わせするために、アルゴリズムは、限られたピクセル範囲内の全てのオフセットを試し、標的色の画像(たとえば、緑色の画像)とのR2相関を最大にする、各色に対するオフセットを選択することができる。
画像、画像の分析結果、またはその両方は、グラフィカルユーザーインターフェース(GUI)218などのユーザーインターフェース上に表示することができる。画像、画像の分析結果、またはその両方は、ロギングモジュール220によって記録でき、ファイル、データベース222または他の記憶位置に記憶することができる。
いくつかの例において、たとえば、スライドが所定の位置にない状態で撮像システム100が初期化されると、較正が実施され得る。較正は、ブランク画像の取得および初期のシャッター調節を含み得る。いくつかの例においては、各スライドに対して、たとえば、1秒の何分の1しかかからない高速な調節アルゴリズムを用いて、スライドの傾斜を決定するためにフォーカスサーチが実施され得る。
画像処理
撮像システム100を用いて取得される画像のスタックには、様々な種類の画像処理が実施され得る。たとえば、低倍率画像の処理には、赤血球(RBC)の計数、血液成分(たとえば、白血球(WBC)および有核赤血球(nRBC))の位置決めおよび計数、血小板の計数、および他の種類の処理が含まれ得る。たとえば、高倍率画像の処理には、RBCの特性の特徴付け、WBC分画の計算、WBCの分類、および他の種類の処理が含まれ得る。
図2を再び参照すると、いくつかの例において、画像処理は、制御システム200を実装するコンピュータ201によって実現される画像処理モジュール250により実行される。いくつかの例において、画像処理モジュール250は、制御システム200のいずれのモジュールも実装しない別のコンピュータによって実現される。
低倍率画像の処理
一例において、低倍率画像は、RBCを計数するために処理され得る。RBCは、様々な大きさを有し得る(たとえば、RBCは、大きい場合も小さい場合もあり、断片化している場合もある)。またRBCは、様々な外観を有し得る(たとえば、RBCは、大きいまたは小さい蒼白(pallor)である場合もあり、異常な形状を有する場合もある)。これらの変動を説明するために、各RBCを、その大きさや蒼白にかかわらず、より小さなダークスポットへと変換するフィルタ(本明細書においては「スポットフィルタ」という)が適用される。変換されたスポットは、元々の多様なRBCよりも容易に計数することができる。いくつかの例において、スポットフィルタは、画像スタックの青色の画像にのみ適用することができるが、これは青色の画像において白い細胞はほとんど不可視であるからである。フィルタされた画像はRBCを計数するために処理でき、この処理は、粉塵、塵埃および他の異物のマスキング、画像の平滑化、RBCの平均面積の決定、画像中のスポットの計数、アーチファクト(たとえば、染色剤の塵埃)の排斥、ならびに「粉塵領域」に基づく計数の調節を含んでいる。
一例において、低倍率画像は、WBCおよびnRBCを位置決めするために処理され得る。WBCは、低倍率での撮像中に位置決めされ、いくつかの例においては、高倍率での撮像中に再検討され得る。図3を参照すると、低倍率画像は、核または核分裂片であるのにおよそ適切なサイズの青色スポットを位置決めすることによって処理される(300)。細胞質であるのに適切な色の画像の領域が位置決めされる(302)。距離変換は、細胞質の領域内に制限されて、核画像に実施される(304)。接触している細胞質を分割するために、サイズの制限を伴う分水嶺変換(watershed transform)が実施される(306)。細胞の種類はその後、たとえば、5つのWBCの種類、血小板、nRBC、二重のWBC、損傷したWBC、およびアーチファクト(たとえば、染色剤の塵埃)を識別する10要素分類器を用いて割り当てることができる(308)。分類が実施されると、細胞の計数が実施され(310)、高倍率用の対象位置が特定され得る(312)。
一例において、低倍率画像は、血小板を計数するために処理され得る。血小板は、RBCに関して上述したフィルタ計数アプローチを用いて位置決めおよび計数され得るが、黄色画像および青色画像にスポットフィルタを適用し、すでにWBCとして識別された対象物のある領域は省かれる。分類器は、血小板の最終的な数を決定するために、アーチファクトから血小板を区別するために用いることができる。
高倍率画像の処理
高倍率の撮像は、低倍率の撮像よりも綿密に細胞を調べる能力を提供する。いくつかの例において、WBCの高倍率は、WBCを分類するために用いられ得る。いくつかの例において、RBCまたは血小板の高倍率画像は、RBCまたは血小板を特徴付けるために用いることができる。
一例において、高倍率画像は、平均細胞体積(MCV)、ヘモグロビン量(MCH)、網状赤血球の割合などのRBCの特性、または全血球算定(CBC)の他の要素などの他の特性を特徴付けるために用いられ得る。これらの特徴付けのために、多数のRBCが、高倍率の下で撮像され得る(たとえば、少なくとも約10,000のRBC)。RBCの凝集はランダムであるという仮定の下、単一の重なっていないRBCの高倍率画像が、測定のために選択され得る。
MCVおよびMCHは、RBCの面積、4つの撮像色のそれぞれに関するRBCの積分光学密度、および4つの撮像色のそれぞれに関するRBCの体積測定値という、9つの特性の加重和から計算され得る。網状赤血球の割合は、撮像されたRBCのそれぞれにおける青色の含有量のレベルを分析することによって決定され得る。CBCの他の要素は、RBC数(たとえば上述の低倍率画像から決定される)、MCH、およびサンプルのMCVから決定され得る。
RBCの高倍率画像の付加的な特性は、RBC中の潜在的な含有物の存在を決定するため、RBC形状を評価するため、または他のRBCの特徴付けを実施するために用いることができる。潜在的な含有物、異常な形状、またはその両方を有する特定のRBCは、ユーザへの提示のためにタグ付けされ得る。たとえば、潜在的な含有物を有するRBCは、RBCギャラリに表示され得る。たとえば、異常な形状を有するRBCは、その形状に応じた値を割り当てられ、RBCは、ギャラリの中で形状によってソートされ得る。
一例において、高倍率画像は、WBC分画を決定するために処理され得る。正確なWBC分画は、WBC核および細胞質に対する区分に基づき決定され得る。WBC核は一般に、同一色または同様の色に染まるので、比較的容易に認識することができる。細胞質は、多くの異なる色に染まる場合があり、いくつかの場合においてはほとんど透明であり得る。また、WBCはしばしば凝集し、正確なWBC分画を得るために、凝集体中のWBCは、個別に計数され得る。
図4を参照すると、WBC分画を決定する目的で高倍率画像を処理するために、細胞質物質が位置決めされる(400)。凝集したWBCは分離される(402)。WBCの核は区分される(404)。WBC核の染色された色のあらゆる変動を説明するために、黄色、緑色および青色の画像に基づき、各細胞質マスク内で適切な閾値が選択され得る(406)。2つの核マスクが生成され(410)、核の一方のマスクは、顆粒球であると仮定して区分され、核の他方のマスクは、無顆粒球であると仮定して区分される。2つの核マスクは、顆粒球および無顆粒球の核の両方によく適した核区分を生成するために交差される(412)。
特性(たとえば、400を超える特性)は、交差された細胞マスク上で測定される(414)。いくつかの特性は、WBCの細胞質でのみ、または核領域でのみ測定され得る。他の特性は、細胞全体で測定され得る。面積および形状の特性は、核マスクおよび細胞質マスクそのものに基づいて決定され得る。色の特性は、異なる色の画像における核マスクまたは細胞質マスク内の個別のピクセルの階調レベルに基づいて決定され得る。光学密度および組織の特性は、核マスクまたは細胞質マスク内の、4つの異なる色の画像に基づいて決定され得る。測定された特性は、WBC分画を決定するために用いられ得る(416)。
一例において、高倍率画像は、WBCを分類するために処理され得る。多段の「木(tree)」分類器が用いられ得る。分類器は、通常、線形判別(LDA)を有し得る。また分類器は、いくつかの非LDAノードも含んでいてもよく、たとえばこの場合非LDAノードは、正規分布なしに母集団を分離させるのに役立ち得る。いくつかの実装において、非LDAノードの少なくとも1つは、ベイズ分類システムを実装することができる。
図5を参照すると、分類器は、血小板の凝集塊、巨大血小板、微小巨核球または他のWBCでない対象物など、画像中のWBCに類似するWBCでない対象物を全てソートする(500)。残りの対象物は、たとえばWBCの成熟経路の生物学的線に沿って、大まかな5通りの分類へとソートされる(502)。各ソートされたグループの縁の損傷細胞または焦点外の細胞は、分類から除去される(504)。5つのグループのそれぞれは、未熟細胞、芽細胞、前単球、前リンパ球、または他の未分類細胞などの、潜在的な未分類細胞を抽出し、正常な種類の分類における誤りを訂正するために処理される(506)。いくつかの例において、分類スキームは、偽陽性の未分類細胞の数を最小限にするように構成され得る。たとえば、抽出された未分類細胞(たとえば、未熟顆粒球、芽細胞、前単球、前リンパ球)のグループのそれぞれは、偽陽性について確認するために第2の分類器によって処理される(508)。未分類のままの細胞は、単一のグループへとグループ化される(510)。
好中球の「核の複雑性」を示す値が決定され得る。リンパ球の「異型性」を示す値も決定され得る(512)。
分類結果は、コンピュータ装置のユーザーインターフェースなどの表示ステーションに表示され得る(514)。いくつかの例において、未分類細胞のグループは、ユーザーインターフェース上のWBCタブの一番上の行に表示され得る。いくつかの例において、未分類細胞は、正常なWBC分類カテゴリから100個のセルをランダムに選択することによる100個の細胞分画の相当物と併せて、たとえばWBCギャラリのフロントページ上に表示され得る。付加的なWBCは、ユーザからの指示に応答して表示され得る。核の複雑性および異型性の値も、ユーザに表示されるか、ユーザが入手可能であるようにされ得る。たとえばユーザは、好中球を、その核の複雑性の値に基づき「桿状核」または「分葉核」と分類でき、この分類に基づき好中球を桿状核または分葉核とソートすることができる。またユーザは、リンパ球を、その異型性の値に基づき「異型」と分類でき、この分類に基づきリンパ球を正常または異型とソートすることができる。
細胞の分類
多段分類器は、生物学的サンプルの画像から抽出される1つまたは2つ以上の特性にしたがって、白血球(WBC)などの細胞、および他の対象物を分類するために用いられ得る。多段分類器は、複数の分類の段階を実施することができる。いくつかの実装において、異なる種類の分類器は、異なる段階で用いられる。たとえば、分類器の1つの段階は、線形判別分析(LDA)に基づく分類器を用いることができ、別の段階は、ベイズ分類器などの非LDA分類器を用いることができる。
一般に多段分類器は、WBCまたは血球全般の効率的で正確な分類を可能にするために、木分類器(tree classifier)およびはしご分類器(ladder classifier)などの2つまたは3つ以上の他の分類器からのトポロジーを組み合わせることが可能な複雑なトポロジーを有し得る。
分類器は、対象物を、リンパ球、単球、好中球、好塩基球および好酸球などの細胞の種類へと分類してもよい。分類器は、対象物を、様々な特定の種類の未熟細胞など、他の特定の種類の対象物へと分類してもよいし、これらの種類の対象物を、一般的なカテゴリ(たとえば、未分類カテゴリ)へと分類してもよい。
多段分類器の各段階は、対象物を複数の分類へ分類することができる。いくつかの例において、特定の段階での対象物の分類は、これより前の段階からの対象物の分類を確認してもよい(たとえば、リンパ球はリンパ球と分類されたままである)。いくつかの例において、特定の段階での対象物の分類は、これより前の段階の間には分類されなかった別のカテゴリへと対象物を再分類してもよい(たとえば、第1の段階において対象物は好中球ではなくリンパ球と分類され、第2の段階において対象物は好中球と再分類されてもよい)。いくつかの例において、特定の段階での対象物の分類は、これより前の段階では利用できなかったカテゴリへと対象物を分類してもよい(たとえば、リンパ球は、これより前の段階では利用できなかった胚盤胞と分類されてもよい)。
対象物は、細胞の面積、細胞の形状、細胞の色、細胞の光学密度、細胞の組織、および細胞の他の特性などの、対象物の1つまたは2つ以上の特性を示す特徴ベクトルに基づき分類され得る。いくつかの例において、分類に用いられる特徴ベクトルは、分類の各段階に関して実質的に同一であってもよい。いくつかの例においては、分類のいくつかの段階または全ての段階に異なる特徴ベクトルが用いられてもよい。たとえば、後半の分類段階に対する特徴ベクトルは、前半の分類段階に対する特徴ベクトルよりも多くの特性を有していてもよく、これは、より正確な分類、または異なる類のセットへの分類を可能にする。
図6を参照すると、生物学的サンプルにおける対象物の多段分類に対する一般的なアプローチにおいて、生物学的サンプルが置かれる基板の1つまたは2つ以上の画像が取得される(600)。対象物の複数の特性は、その1つまたは2つ以上の画像から、たとえば上述の1つまたは2つ以上の技術を用いて抽出される(602)。
各対象物に対して複数の分類が実施される。たとえば、第1の分類が実施され(604)、第2の分類が実施される(606)。各分類は、それぞれの対象物の抽出された特性の1つまたは2つ以上からなる、対応する特徴ベクトルに基づいている。第2の分類の結果が第1の分類の結果と同一である場合(608)、対象物の分類は維持される(610)。第2の分類の結果が第1の分類の結果と異なる場合(608)、対象物の分類は変更される(612)。たとえば、対象物の以前の分類を変更することは、以前の分類中に利用可能であったカテゴリへ対象物を再分類することを含み得る。以前の分類を変更することは、以前の分類中に利用可能でなかったカテゴリへ対象物を分類することを含み得る。
任意の数の分類が実施され得る。
図7を参照すると、多段分類器700の例示的なトポロジーが示される。この例において示される分類器は、LDA分類(ノード702などの円形ノードで表示)および非LDA(たとえば、ベイズ)分類(ノード748などのひし形ノードで表示)にしたがって、対象物を複数の段階で分類する。
第1の分類ノード702で、f−血小板(「fplate」という)は、分類のために「全て(all)」の対象物のセットから除去される。第2の分類ノード704で、s−血小板(「splate」)も、分類のために「全て(all)」の対象物のセットから除去される。
f−血小板は、血小板(「plt」という)、焦点外(「oof」)物質、損傷(「dam」)物質、またはジャンクへと分類され得る(ノード706)。s−血小板は、「全て(all)」と再分類されるか、または血小板、oof物質、損傷物質、もしくはジャンクへと分類され得る(ノード708)。ノード706、708で血小板と分類された対象物は、ノード710、712でさらに分類される。「全て(all)」と再分類された対象物は、さらなる分類のために、「全て(all)」の対象物のセットへと戻される。
「全て(all)」の対象物のセットは、ノード714でさらに5つの細胞種類:リンパ球(「lymph」)、単球(「mono」)、好中球(「neut」)、好塩基球(「baso」)、または好酸球(「eo」)へと分類され得る。これらの分類のそれぞれにおいて対象物は、分類から、焦点外の対象物または損傷対象物を取り除くために分類される(ノード716、718、720、722、724)。
各細胞種類の対象物はさらに分類される。いくつかの分類は、維持される対象物の分類となる場合もある(たとえば、リンパ球は、リンパ球と分類されたままである場合もある)。いくつかの分類は、対象物が異なる細胞の種類と再分類される場合もある(たとえば、リンパ球は、好中球と再分類される場合もある)。いくつかの分類は、対象物が新たな分類へと分類される場合もある(たとえば、リンパ球は、胚盤胞と分類される場合もある)。図示された例においては、以下の分類が生じ得る。
・リンパ球(ノード726)は、リンパ球と分類されたままであるか、好中球と再分類されるか、または異型リンパ球(「alymph」)、胚盤胞(「blast」)、未熟顆粒球(「ig」)もしくは希少細胞(「rare」)と分類され得る。
・単球(ノード728)は、単球と分類されたままであるか、好中球と再分類されるか、または異型リンパ球、胚盤胞、未熟顆粒球もしくは希少細胞と分類され得る。
後続の分類段階において、特定の分類における全ての対象物は、これらの対象物が分類されたノードにかかわらず、一緒に取り扱われる。
・好中球(ノード730)は、好中球と分類されたままであるか、リンパ球もしくは好酸球と再分類されるか、または異型リンパ球もしくは未熟顆粒球と分類され得る。ノード730は、ノード720、726および728で好中球と分類された対象物を分類する。
・好塩基球(ノード732)は、好塩基球と分類されたままであるか、好中球と再分類されるか、または胚盤胞もしくは未熟顆粒球と分類され得る。
・好酸球(ノード734)は、好酸球と分類されたままであるか、または好中球と再分類され得る。
さらなる分類段階も、以下の例により示されるように、対象物が分類されたノードにかかわらず、特定の分類における全ての対象物を一緒に取り扱う。
・希少細胞(ノード736)は、希少細胞と分類されたままであるか、またはリンパ球、単球、異形リンパ球もしくは胚盤胞と再分類され得る。ノード736は、ノード726および728により希少細胞と分類された対象物を分類する。
・未熟顆粒球(ノード738)は、未熟顆粒球と分類されたままであるか、または好中球、リンパ球もしくは単球と再分類され得る。ノード738は、ノード726、728、730、732により未熟顆粒球と分類された対象物を分類する。
・胚盤胞(ノード740)は、胚盤胞と分類されたままであるか、またはリンパ球、単球もしくは異型リンパ球と再分類され得る。ノード740は、ノード726、728、732により胚盤胞と分類された対象物を分類する。
・異型リンパ球(ノード742)は、異型リンパ球と分類されたままであるか、または異型単球(「amono」)と分類され得る。ノード742は、ノード726、728、730、736により異型リンパ球と分類された対象物を分類する。
・異型リンパ球(ノード744)は、さらなる分類を受け、異型リンパ球と分類されたままであるか、リンパ球と再分類されるか、または未分類(「unclass」)と指定され得る。ノード744は、ノード742によって異型リンパ球と分類された対象物を分類する。
・異型単球(ノード746)は、単球、異型リンパ球または胚盤胞と再分類され得る。ノード746は、ノード742により異型単球と分類された対象物を分類する。
・リンパ球(ノード748)は、ベイズ分類器などの非LDA分類器によって、リンパ球または前リンパ球(「prolymph」)と分類され得る。ノード748は、ノード726、730、736、738、740、744によりリンパ球と分類された対象物を分類する。
・胚盤胞(ノード750)は、非LDA分類器によって胚盤胞またはジャンクと分類され得る。ノード750は、ノード736、740、746により胚盤胞と分類された対象物を分類する。
・単球(ノード752)は、非LDA分類器によって単球または前単球(「promono」)と分類され得る。ノード752は、ノード728、736、738、740、746により単球と分類された対象物を分類する。
・ノード754は、対象物を、未分類またはジャンクのどちらかと分類する。ノード754は、ノード748から前リンパ球と分類された対象物、ノード736から希少細胞と分類された対象物、ノード750から胚盤胞と分類された対象物、ノード752から前単球と分類された対象物、ノード738から未熟顆粒球と分類された対象物、およびノード744から未分類対象物と分類された対象物を分類する。
分類器は、以下の対象物の分類をもたらす。
・リンパ球(ノードから)
・単球(ノードから)
・好中球(ノードから)
・好塩基球(ノードから)
・好酸球(ノードから)
・未分類対象物(ノード754から)
・ジャンク(ノード754から)
この多段分類器は、対象物の効率的かつ正確な分類を可能にするスキームを提供することができる。
コンピュータシステムの概観
図6は、1つの実装にしたがって、本明細書に記載されるコンピュータ実装方法のいずれかに関連して記載される動作を制御するために用いることができるコンピュータシステム600の概略図である。システム600は、プロセッサ610、メモリ620、記憶装置630、および入力/出力装置640を含んでいる。構成要素610、620、630および640のそれぞれは、システムバス650を用いて相互接続される。プロセッサ610は、システム600内での実行のための指示を処理することが可能である。一実装において、プロセッサ610は、シングルスレッドのプロセッサである。別の実装において、プロセッサ610は、マルチスレッドのプロセッサである。プロセッサ610は、入力/出力装置640上にユーザーインターフェース用の図形情報を表示するために、メモリ620または記憶装置630に記憶された指示を処理することが可能である。
メモリ620は、システム600内に情報を記憶する。いくつかの実装において、メモリ620は、コンピュータ可読媒体である。メモリ620は、揮発性メモリおよび/または不揮発性メモリを含み得る。
記憶装置630は、システム600に大容量記憶を提供する。一般に、記憶装置630は、コンピュータ可読指示を記憶するように構成される任意の持続性の有形媒体を含み得る。一実装において、記憶装置630は、コンピュータ可読媒体である。別の様々な実装において、記憶装置630は、フロッピー(登録商標)ディスク装置、ハードディスク装置、光学ディスク装置またはテープ装置であってもよい。
入力/出力装置640は、システム600に入力/出力動作を提供する。いくつかの実装において、入力/出力装置640は、キーボードおよび/またはポインティングデバイスを含んでいる。いくつかの実装において、入力/出力装置640は、グラフィカルユーザーインターフェースを表示するための表示ユニットを含んでいる。
記載される機能は、デジタル電子回路に実装されてもよいし、コンピュータハードウェア、ファームウェアに実装されてもよいし、それらの組み合わせに実装されてもよい。機能は、プログラム可能なプロセッサによる実行のために、たとえば機械可読記憶装置などの情報担体で明白に具現化されるコンピュータプログラム製品に実装することができる。また機能は、入力データで動作し出力を生成することによって、記載された実装の機能を実施するために、指示のプログラムを実行するプログラム可能なプロセッサによって実施され得る。記載された機能は、データ記憶システム、少なくとも1つの入力装置、および少なくとも1つの出力装置からデータおよび指示を受信し、データ記憶システム、少なくとも1つの入力装置、および少なくとも1つの出力装置へデータおよび指示を送信するために連結される少なくとも1つのプログラム可能なプロセッサを含むプログラム可能なシステムにおいて実行できる1つまたは2つ以上のコンピュータプログラムで実施され得る。コンピュータプログラムは、所定の活動を行うか、または所定の結果をもたらすために、コンピュータにおいて直接的または間接的に用いられ得る指示のセットを含んでいる。コンピュータプログラムは、コンパイラ型言語またはインタープリタ型言語を含む任意の形態のプログラミング言語で書き込まれてもよく、独立型プログラムとして、またはモジュール、コンポーネント、サブルーチン、もしくはコンピュータ環境での使用に適切な他のユニットを含む任意の形態で展開され得る。
本願に記載される方法およびシステムを実施するために、様々なソフトウェアアーキテクチャを用いることができる。たとえば、本明細書に記載の方法およびシステムの実施において、出版/購読型のメッセージ送受信パターンを用いることができる。出版/購読型のメッセージ送受信の場合、システムは、メッセージ送受信モジュールのみを介して通信するいくつかのハードウェアおよびソフトウェアモジュールを含んでいる。各モジュールは、特定の機能を実施するように構成され得る。たとえば、システムは、ハードウェアモジュール、カメラモジュールおよびフォーカスモジュールの1つまたは2つ以上を含み得る。ハードウェアモジュールは、高速なオートフォーカスを実装し、順にカメラを誘発して画像を取得する撮像ハードウェアへ命令を送信することができる。
カメラモジュールは、カメラから画像を受信し、シャッター時間またはフォーカスなどのカメラパラメータを決定することができる。画像は、カメラモジュールによって処理される前に、コンピュータのメモリにバッファリングされ得る。スライドの傾斜を最初に探索するとき、カメラモジュールは、適切なシャッター時間またはフォーカスを決定するのに充分な画像を見ている場合には、ハードウェアモジュールを停止するメッセージを送信することもできる。
システムは、ソフトウェア、ハードウェア、またはソフトウェアおよびハードウェアの組み合わせで実装可能なフォーカスモジュールも含み得る。いくつかの実装において、フォーカスモジュールは、スタック内の全てのフレームを調べ、スタックが理想または理想の焦点距離からどれだけ離れているかを推定する。フォーカスモジュールは、焦点スコアを画像のスタック中の各フレームに割り当てることを担うことができる。
指示のプログラムの実行に適切なプロセッサは、例として、汎用マイクロプロセッサおよび特殊用途のマイクロプロセッサの両方、およびあらゆる種類のコンピュータの唯一のプロセッサまたは複数のプロセッサの1つを含んでいる。一般にプロセッサは、読み取り専用メモリもしくはランダムアクセスメモリまたはその両方から、指示およびデータを受信する。コンピュータは、命令を実行するプロセッサと、指示およびデータを記憶する1つまたは2つ以上のメモリを含んでいる。一般にコンピュータも、データファイルを記憶するために1つまたは2つ以上の大容量記憶装置を含むか、またはこれと通信するために動作可能に連結され、このような装置は、内蔵ハードディスクおよびリムーバブルディスクなどの磁気ディスク、光磁気ディスク、ならびに光学ディスクを含んでいる。コンピュータプログラムの指示およびデータを明白に具現化するのに適切な記憶装置は、例として、EPROM、EEPROM、およびフラッシュメモリ装置などの半導体メモリ装置、内蔵ハードディスクおよびリムーバブルディスクなどの磁気ディスク、光磁気ディスク、ならびにCD−ROMおよびDVD−ROMディスクを含む、全ての形態の不揮発性メモリを含んでいる。プロセッサおよびメモリは、ASIC(特定用途向け集積回路)によって補助されてもよいし、またはそこに組み込まれてもよい。
ユーザとの相互作用を提供するために、機能は、ユーザに情報を表示するための、CRT(陰極線管)またはLCD(液晶ディスプレイ)モニタなどの表示装置と、ユーザがコンピュータに入力を提供するための、キーボード、およびマウスまたはトラックボールなどのポインティングデバイスとを有するコンピュータに実装することができる。代替的には、コンピュータは、取り付けられるキーボード、マウスまたはモニタを有していなくてもよく、別のコンピュータにより遠隔制御されてもよい。
機能は、データサーバなどのバックエンドコンポーネントを含むコンピュータシステム、アプリケーションサーバもしくはインターネットサーバなどのミドルウェアコンポーネントを含むコンピュータシステム、または、グラフィカルユーザーインターフェースもしくはインターネットブラウザ、またはこれらの組み合わせを有するクライアントコンピュータなどのフロントエンドコンポーネントを含むコンピュータシステムに実装することができる。システムの構成要素は、任意の形態または通信ネットワークなどのデジタルデータ通信の媒体により接続され得る。通信ネットワークの例としては、たとえば、LAN、WAN、ならびにインターネットを形成するコンピュータおよびネットワークが挙げられる。
コンピュータシステムは、クライアントおよびサーバを含み得る。クライアントおよびサーバは、一般には互いに対して遠く離れており、通常、上述のようなネットワークを通して相互接続する。クライアントおよびサーバの関係は、それぞれのコンピュータ上で実行し、互いに対してクライアント−サーバ関係を有するコンピュータプログラムにより生じる。
プロセッサ610は、コンピュータプログラムに関連付けられる指示を実行する。プロセッサ610は、論理ゲート、加算器、乗算器および計数器などのハードウェアを含み得る。プロセッサ610はさらに、演算動作および論理動作を行う、分離した演算論理装置(ALU)を含み得る。
他の実施形態
本明細書に記載した技術およびシステムは、多くの方法で実施することができる。いくつかの有用な実装は上述される。上記記載は、添付の請求の範囲を例示することを意図されており、その請求の範囲を制限することは意図されていないことが理解されるべきである。本明細書に記載される方法およびシステムは、たとえば、様々な医療用の撮像用途などの他の撮像システムにおいて、血球の計数を達成するために用いることができる。他の態様、利点および変更も、以下の請求の範囲内にある。

Claims (12)

  1. 画像取得装置により、基板上の第1の位置の複数の画像を取得することであって、前記複数の画像の各画像を異なる照明波長で取得することを含む、複数の画像を取得することと、
    プロセッサにより、前記複数の画像における細胞質物質の位置を特定することと、
    プロセッサにより、前記複数の画像における細胞核の位置を特定することと
    前記細胞質物質の位置および前記細胞核の位置に基づいて、プロセッサにより、前記複数の画像における細胞の位置を特定することと、
    プロセッサにより、前記複数の画像における細胞の少なくともいくつかに細胞の種類を割り当てることと、
    前記複数の画像において少なくとも1つの種類の細胞を計数することと
    を含み、
    前記細胞の種類が、第1の分類プロセスおよび第2の分類プロセスを用いることによって決定され、前記第1の分類プロセスおよび前記第2の分類プロセスのそれぞれが、前記複数の画像における細胞の特性を用い、前記第2の分類プロセスが、前記第1の分類プロセスと比べて、より多くの特性に基づいている、
    方法。
  2. 前記複数の画像を取得することは、10倍対物レンズを用いて前記複数の画像を取得することを含む請求項1記載の方法。
  3. 前記少なくとも1つの種類の細胞を計数することは、白血球および有核赤血球の少なくとも1つを計数することを含む請求項1記載の方法。
  4. 基板上の生物学的サンプルの白血球(WBC)分画を決定する方法であって、前記方法は、
    画像取得装置により、前記基板上の第1の位置の複数の画像を取得することであって、前記複数の画像の各画像を異なる照明波長で取得することを含む、複数の画像を取得することと、
    プロセッサにより、前記複数の画像においてWBC核の位置を特定することであって、
    前記複数の画像において、WBCについての第1の仮定に基づき第1の核マスクを生成すること、
    前記複数の画像において、WBCについての第2の仮定に基づき第2の核マスクを生成すること、および
    前記第1の核マスクと前記第2の核マスクとを重ね合わせて核区分を生成すること
    を含む、WBC核の位置を特定することと、
    プロセッサにより、前記核区分に基づいて前記WBCの1つまたは2つ以上の特性を測定することと、
    測定された前記特性を用いて前記WBC分画を決定することと
    を含み、
    前記WBC分画が、第1の分類プロセスおよび第2の分類プロセスを用いることによって決定され、前記第1の分類プロセスおよび前記第2の分類プロセスのそれぞれが、前記複数の画像における細胞の特性を用い、前記第2の分類プロセスが、前記第1の分類プロセスと比べて、より多くの特性に基づいている、
    方法。
  5. 前記複数の画像を取得することは、50倍対物レンズを用いて前記複数の画像を取得することを含む請求項4記載の方法。
  6. 前記第1の仮定は、前記WBCが顆粒球であるという仮定を含む請求項4記載の方法。
  7. 前記第2の仮定は、前記WBCが無顆粒球であるという仮定を含む請求項4記載の方法。
  8. 前記特性は、WBCの面積、WBCの形状、WBCの色、WBCの光学密度、およびWBCの組織の1つまたは2つ以上を含む、請求項4記載の方法。
  9. 符号化されたコンピュータ可読指示を有するコンピュータ可読記憶装置であって、前記コンピュータ可読指示が、プロセッサにより実行されると、前記プロセッサに、
    基板上の第1の位置の複数の画像を取得させ、前記複数の画像の各画像が、異なる照明波長で取得され、
    前記複数の画像における細胞質物質の位置を特定させ、
    前記複数の画像における細胞核の位置を特定させ、
    前記細胞質物質の位置および前記細胞核の位置に基づき、前記複数の画像における細胞の位置を特定させ、
    前記複数の画像中の細胞の少なくともいくつかに、細胞の種類を割り当てさせ、および
    前記複数の画像における少なくとも1つの種類の細胞を計数させ
    前記細胞の種類が、第1の分類プロセスおよび第2の分類プロセスを用いることによって決定され、前記第1の分類プロセスおよび前記第2の分類プロセスのそれぞれが、前記複数の画像における細胞の特性を用い、前記第2の分類プロセスが、前記第1の分類プロセスと比べて、より多くの特性に基づいている、
    コンピュータ可読記憶装置。
  10. 符号化されたコンピュータ可読指示を有するコンピュータ可読記憶装置であって、前記コンピュータ可読指示が、プロセッサにより実行されると、前記プロセッサに、
    基板上の第1の位置の複数の画像を取得させ、前記複数の画像の各画像が、異なる照明波長で取得され、
    前記複数の画像におけるWBC核の位置を特定させ、これは
    前記複数の画像中のWBCについての第1の仮定に基づき第1の核マスクを生成すること、
    前記複数の画像中のWBCについての第2の仮定に基づき第2の核マスクを生成すること、および
    前記第1の核マスクと前記第2の核マスクとを重ね合わせて核区分を生成することを含み、
    プロセッサによって、前記核区分に基づいてWBCの1つまたは2つ以上の特性を測定させ、ならびに
    測定された前記特性を用いてWBC分画を決定させ
    前記WBC分画が、第1の分類プロセスおよび第2の分類プロセスを用いることによって決定され、前記第1の分類プロセスおよび前記第2の分類プロセスのそれぞれが、前記複数の画像における細胞の特性を用い、前記第2の分類プロセスが、前記第1の分類プロセスと比べて、より多くの特性に基づいている、
    コンピュータ可読記憶装置。
  11. 基板上の第1の位置の複数の画像を取得するように構成される画像取得装置であって、前記複数の画像の各画像が、異なる照明波長で取得される、画像取得装置と、
    前記画像取得装置に接続されるプロセッサであって、
    前記複数の画像における細胞質物質の位置を特定し、
    前記複数の画像における細胞核の位置を特定し、
    前記細胞質物質の位置および前記細胞核の位置に基づいて、前記複数の画像における細胞の位置を特定し、
    前記複数の画像における細胞の少なくともいくつかに細胞の種類を割り当て、ならびに
    前記複数の画像において少なくとも1つの種類の細胞を計数する
    ように構成されるプロセッサと
    を含み、
    前記細胞の種類が、第1の分類プロセスおよび第2の分類プロセスを用いることによって決定され、前記第1の分類プロセスおよび前記第2の分類プロセスのそれぞれが、前記複数の画像における細胞の特性を用い、前記第2の分類プロセスが、前記第1の分類プロセスと比べて、より多くの特性に基づいている、
    撮像システム。
  12. 白血球(WBC)分画を決定するための撮像システムであって、前記システムは、
    基板上の第1の位置の複数の画像を取得するように構成された画像取得装置であって、前記複数の画像の各画像が、異なる照明波長で取得される、画像取得装置と、
    前記画像取得装置に接続されるプロセッサであって、
    前記複数の画像におけるWBC核の位置を特定し、これは
    前記複数の画像中のWBCについての第1の仮定に基づき第1の核マスクを生成すること、
    前記複数の画像中のWBCについての第2の仮定に基づき第2の核マスクを生成すること、および
    前記第1の核マスクと前記第2の核マスクとを重ね合わせて核区分を生成することを含み、
    プロセッサによって、前記核区分に基づいてWBCの1つまたは2つ以上の特性を測定し、ならびに
    測定された前記特性を用いて前記WBC分画を決定する
    ように構成されるプロセッサと
    を含み、
    前記WBC分画が、第1の分類プロセスおよび第2の分類プロセスを用いることによって決定され、前記第1の分類プロセスおよび前記第2の分類プロセスのそれぞれが、前記複数の画像における細胞の特性を用い、前記第2の分類プロセスが、前記第1の分類プロセスと比べて、より多くの特性に基づいている、
    撮像システム。
JP2016501227A 2013-03-11 2014-03-11 血球の撮像 Active JP6343660B2 (ja)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201361776740P 2013-03-11 2013-03-11
US61/776,740 2013-03-11
US201361794946P 2013-03-15 2013-03-15
US61/794,946 2013-03-15
PCT/US2014/023401 WO2014164757A1 (en) 2013-03-11 2014-03-11 Imaging blood cells

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2017245118A Division JP6580117B2 (ja) 2013-03-11 2017-12-21 血球の撮像

Publications (2)

Publication Number Publication Date
JP2016511419A JP2016511419A (ja) 2016-04-14
JP6343660B2 true JP6343660B2 (ja) 2018-06-13

Family

ID=50555249

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2016501227A Active JP6343660B2 (ja) 2013-03-11 2014-03-11 血球の撮像
JP2017245118A Active JP6580117B2 (ja) 2013-03-11 2017-12-21 血球の撮像

Family Applications After (1)

Application Number Title Priority Date Filing Date
JP2017245118A Active JP6580117B2 (ja) 2013-03-11 2017-12-21 血球の撮像

Country Status (8)

Country Link
US (2) US9690976B2 (ja)
EP (1) EP2972550A1 (ja)
JP (2) JP6343660B2 (ja)
CN (1) CN105190400A (ja)
AU (1) AU2014249011A1 (ja)
CA (1) CA2904401A1 (ja)
HK (1) HK1218784A1 (ja)
WO (1) WO2014164757A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
RU2765116C1 (ru) * 2018-09-11 2022-01-25 Као Корпорейшн Одноразовый подгузник типа трусов

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2014164757A1 (en) 2013-03-11 2014-10-09 Roche Diagnostics Hematology, Inc. Imaging blood cells
WO2015195642A1 (en) * 2014-06-16 2015-12-23 Siemens Healthcare Diagnostics Inc. Analyzing digital holographic microscopy data for hematology applications
US20170328924A1 (en) 2014-11-26 2017-11-16 Ronald Jones Automated microscopic cell analysis
US11478789B2 (en) 2014-11-26 2022-10-25 Medica Corporation Automated microscopic cell analysis
US10625259B1 (en) 2014-11-26 2020-04-21 Medica Corporation Automated microscopic cell analysis
WO2017223412A1 (en) * 2016-06-24 2017-12-28 Beckman Coulter, Inc. Image atlas systems and methods
US11846579B2 (en) 2017-05-19 2023-12-19 Thrive Bioscience, Inc. Systems and methods for counting cells
US11047845B1 (en) 2017-11-15 2021-06-29 Medica Corporation Control material and methods for cell analyzers
US11443426B2 (en) * 2018-01-18 2022-09-13 Nantomics, Llc Real-time whole slide pathology image cell counting
JP2021040590A (ja) 2019-09-13 2021-03-18 シスメックス株式会社 細胞画像解析方法、細胞画像解析装置、プログラム、及び細胞画像解析システム
JP2021064115A (ja) * 2019-10-11 2021-04-22 株式会社島津製作所 細胞画像解析方法及び細胞解析装置
WO2022059300A1 (ja) * 2020-09-15 2022-03-24 コニカミノルタ株式会社 画像処理方法、画像処理装置、および画像処理プログラム
CN112924452A (zh) * 2021-01-29 2021-06-08 西安博锐轶信息科技有限公司 一种血液检查辅助系统
EP4358034A1 (en) 2022-10-18 2024-04-24 F. Hoffmann-La Roche AG Clinical support system and associated computer-implemented methods

Family Cites Families (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS5819064B2 (ja) * 1976-10-25 1983-04-15 株式会社日立製作所 白血球分類方法
JPS5829872B2 (ja) * 1976-10-25 1983-06-25 株式会社日立製作所 白血球識別方法
JPH0652263B2 (ja) * 1985-12-10 1994-07-06 株式会社日立製作所 細胞分析装置
JPH08145988A (ja) * 1994-11-22 1996-06-07 Chiyouki Hayashi 異型リンパ球識別法
AU747613B2 (en) * 1997-02-28 2002-05-16 Cytec Technology Corp. Low VOC, isocyanate based aqueous curable compositions
US6169816B1 (en) * 1997-05-14 2001-01-02 Applied Imaging, Inc. Identification of objects of interest using multiple illumination schemes and finding overlap of features in corresponding multiple images
US7450229B2 (en) * 1999-01-25 2008-11-11 Amnis Corporation Methods for analyzing inter-cellular phenomena
US8885913B2 (en) * 1999-01-25 2014-11-11 Amnis Corporation Detection of circulating tumor cells using imaging flow cytometry
US6228652B1 (en) * 1999-02-16 2001-05-08 Coulter International Corp. Method and apparatus for analyzing cells in a whole blood sample
US20060063156A1 (en) * 2002-12-06 2006-03-23 Willman Cheryl L Outcome prediction and risk classification in childhood leukemia
US7327880B2 (en) * 2004-03-12 2008-02-05 Siemens Medical Solutions Usa, Inc. Local watershed operators for image segmentation
WO2006083969A2 (en) * 2005-02-01 2006-08-10 Amnis Corporation Blood analysis using a flow imaging cytometer
CN100470587C (zh) * 2007-01-26 2009-03-18 清华大学 一种医学图像中腹部器官分割方法
JP2012515931A (ja) * 2008-04-25 2012-07-12 ウィンケルマン、ジェイムズ 全血球数及び白血球百分率を決定するシステム及び方法
JP4288323B1 (ja) * 2008-09-13 2009-07-01 独立行政法人科学技術振興機構 顕微鏡装置及びそれを用いた蛍光観察方法
JP5438962B2 (ja) * 2008-12-25 2014-03-12 シスメックス株式会社 細胞画像表示装置
EP2239675A1 (en) * 2009-04-07 2010-10-13 BIOCRATES Life Sciences AG Method for in vitro diagnosing a complex disease
CN101567084B (zh) * 2009-06-05 2011-04-06 西安电子科技大学 基于水平集和分水岭相结合的图像轮廓检测方法
CN115060882A (zh) * 2009-10-21 2022-09-16 斯克里普斯研究所 用非稀有细胞检测稀有细胞的方法
CN101719278B (zh) * 2009-12-21 2012-01-04 西安电子科技大学 基于khm算法的视频显微图像细胞自动跟踪方法
EP2601523B1 (en) * 2010-08-05 2018-06-06 Abbott Point Of Care, Inc. Method and apparatus for automated whole blood sample analyses from microscopy images
FR2971337B1 (fr) * 2011-02-04 2013-03-01 Horiba Abx Sas Dispositif et procede de mesures multiparametriques de microparticules dans un fluide
US9064301B2 (en) * 2011-04-14 2015-06-23 Abbott Point Of Care, Inc. Method and apparatus for compressing imaging data of whole blood sample analyses
AU2012242587B2 (en) * 2011-04-15 2015-11-26 Roche Diagnostics Hematology, Inc. Measuring volume and constituents of cells
CN103874913B (zh) * 2011-06-17 2017-04-26 罗氏血液诊断股份有限公司 用于生物样品的组织加工的溶液
WO2014164757A1 (en) 2013-03-11 2014-10-09 Roche Diagnostics Hematology, Inc. Imaging blood cells

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
RU2765116C1 (ru) * 2018-09-11 2022-01-25 Као Корпорейшн Одноразовый подгузник типа трусов

Also Published As

Publication number Publication date
CA2904401A1 (en) 2014-10-09
WO2014164757A8 (en) 2015-09-24
EP2972550A1 (en) 2016-01-20
AU2014249011A1 (en) 2015-09-24
HK1218784A1 (zh) 2017-03-10
US20160026852A1 (en) 2016-01-28
JP6580117B2 (ja) 2019-09-25
JP2018077236A (ja) 2018-05-17
WO2014164757A1 (en) 2014-10-09
US10083342B2 (en) 2018-09-25
US9690976B2 (en) 2017-06-27
US20180012062A1 (en) 2018-01-11
CN105190400A (zh) 2015-12-23
AU2014249011A8 (en) 2015-10-15
JP2016511419A (ja) 2016-04-14

Similar Documents

Publication Publication Date Title
JP6580117B2 (ja) 血球の撮像
JP7361149B2 (ja) デジタルホログラフィ顕微鏡検査および無傷の(untouched)末梢血白血球を用いる高精度の5部鑑別(5-part Differential)
JP6514726B2 (ja) 試料の表示およびレビューのためのシステムおよび方法
US10408735B2 (en) In vitro method for the label-free determination of a cell type of a cell
EP2936116B1 (en) System and method for classification of particles in a fluid sample
JP6194791B2 (ja) 画像処理装置及びプログラム
AU2009251162A1 (en) Method for classifying slides using scatter plot distributions
Méhes et al. Quantitative analysis of disseminated tumor cells in the bone marrow by automated fluorescence image analysis
US20140220622A1 (en) Digital holographic microscopy apparatus and method for clinical diagnostic hematology
JP5314145B2 (ja) 生体データの分類、可視化並びに探索の方法及び装置
US10482314B2 (en) Automatic calculation for ploidy classification
Ravkin et al. Automated microscopy system for detection and genetic characterization of fetal nucleated red blood cells on slides
JP6156137B2 (ja) 画像処理装置及びプログラム
WO2020069738A1 (en) Automatic calculation for ploidy classification
US20220406080A1 (en) Automatic calibration using machine learning
Korzynska Automatic counting of neural stem cells growing in cultures
JPH11118793A (ja) 尿中赤血球分類装置
US20220404258A1 (en) Automatic calibration
Jonas et al. Nucleus detection on propidium iodide stained digital slides
US20240037967A1 (en) Blood analyser with out-of-focus image plane analysis and related methods
WO2023118440A1 (en) Biological fluid analyser with light-setting-based cell classification
JP2024500933A (ja) 画像平面分析を伴う血液分析器および関連する方法
D'Avenio et al. A software for analysing erythrocytes images under flow.
Tarzia et al. A software for analysing erythrocytes images under flow
Bocsi et al. Triggering of leukocytes by phase contrast in imaging cytometry with scanning fluorescence microscope (SFM)

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20160915

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20170627

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20170630

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20170926

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20171124

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20171225

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20180515

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20180521

R150 Certificate of patent or registration of utility model

Ref document number: 6343660

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250