JP5602717B2 - 高密度細胞集団の自動セグメンテーション方法およびシステム - Google Patents

高密度細胞集団の自動セグメンテーション方法およびシステム Download PDF

Info

Publication number
JP5602717B2
JP5602717B2 JP2011500225A JP2011500225A JP5602717B2 JP 5602717 B2 JP5602717 B2 JP 5602717B2 JP 2011500225 A JP2011500225 A JP 2011500225A JP 2011500225 A JP2011500225 A JP 2011500225A JP 5602717 B2 JP5602717 B2 JP 5602717B2
Authority
JP
Japan
Prior art keywords
cell
image
cells
images
segmenting
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2011500225A
Other languages
English (en)
Other versions
JP2011515673A (ja
Inventor
リッシャー,イェンス
ボティカ,ラフル
モサリガンティ,キショア
パドフィールド,ディルク・ライアン
マチラジュ,ラグ
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
General Electric Co
Original Assignee
General Electric Co
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by General Electric Co filed Critical General Electric Co
Publication of JP2011515673A publication Critical patent/JP2011515673A/ja
Application granted granted Critical
Publication of JP5602717B2 publication Critical patent/JP5602717B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/11Region-based segmentation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/60Type of objects
    • G06V20/69Microscopic objects, e.g. biological cells or cellular parts
    • G06V20/695Preprocessing, e.g. image segmentation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/143Segmentation; Edge detection involving probabilistic approaches, e.g. Markov random field [MRF] modelling
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00Indexing scheme for image data processing or generation, in general
    • G06T2200/04Indexing scheme for image data processing or generation, in general involving 3D image data
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10056Microscopic image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30004Biomedical image processing
    • G06T2207/30024Cell structures in vitro; Tissue sections in vitro

Description

[0001]本発明は概して、生体物質の高密度充填細胞集団を画像化および自動分析することに関する。
[0002]生化学過程が起こる実際の生活環境を模倣するために、モデルシステムが定期的に利用されている。例えば、細胞培地は、遺伝子を操作および調整し、生化学的経路を変更し、得られる効果を分離して観察するための単純なインビトロシステムを提供する。このような細胞培地は、基礎研究、薬物発見、および毒性研究において重要な役割を果たす。
[0003]がん細胞、細胞および組織培地、および生体試料を含む高密度細胞集団は分析されて、大型の動物および人間でのテストの前に、テスト薬剤、造影剤、および治療薬などのこれらの生体物質から幅広い情報を抽出し、がんおよび他の疾病の進行を検査する。細胞培地の場合、細胞はしばしば、普通は広視野または共焦点顕微鏡を使用して画像化される、3D分析においてインビトロで成長する。研究の結果は得られた画像スタックを調べることにより伝統的に分析されてきた。
[0004]他では3D環境で細胞をセグメンテーションしているが、これらの試みでは普通、背景から細胞を分離し、細胞群を個別の細胞に分割し、細胞の属性を測定する一式の標準的ステップを使用する。これらの方法は、高解像度データに最も役に立ち、スケーリングを可能にするには修正が必要である。
[0005]このような3D分析ツールは、新しい見識につながる可能性がある、細胞特徴の定量的測定、および細胞の統計的分布を可能にする。これらはまた、迅速かつ繰り返し可能な分析を可能にする。モデルシステムが生理学的に関連すればするほど、その予測値がより大きくなる。3D細胞モデルは、細胞間および細胞基質間相互作用の原因となる、生理学的に関連する内容を与える。腫瘍成長を研究するために、3D細胞クラスタ分析は、栄養素および酸素の細胞勾配などの位置効果、腫瘍成長への代謝性負荷の影響、および治療反応をモデリングする。これに対して、2次元(2D)単層細胞培地は、分析するのがより容易であるが、腫瘍微細環境などの特定の効果はモデリングしない。
[0006]3次元細胞クラスタは普通、共焦点顕微鏡を使用して画像化される。zスタックとして知られる、得られる共焦点画像スタックはその後伝統的に、実験結果を測定および分析するために手作業で調査される。これらの画像スタックの分析を自動化することにより、研究者が高スループット環境においてこのような培地を使用することが可能になる。今まで、多くの研究は、集合の合計量などの単純な測定、または単一の共焦点スライスに基づいた2D測定のいずれかに限られていた。最近の研究では、全体的統計は重要であるが、細胞クラスタ内の異なる空間的内容に豊富な情報があることが示されている。
[0007]個別の細胞を同定する能力は、細胞培地および生細胞分析試料の自動分析にとって重要な要件である。画像セグメンテーション方法は普通、このような問題に対処するために適用される。極めて高密度充填細胞の集団をセグメンテーションすることは、特に困難な課題である。特に染色方法に関する従来の知識、および細胞集団に関する基礎的前提は、モデルベースの枠組みの実施形態の1つまたは複数を使用する、本発明の方法およびシステムを使用して捉えることができる。
[0008]細胞の寸法および充填密度は様々な細胞集団で異なるが、これらの違いは正確なモデルに直ぐにつながるものではない。例えば、図1に示すゼブラフィッシュの眼の3D画像は、いくつかの異なるタイプの細胞を含んでいるが、同じタイプの細胞の中でさえも、寸法、形状、染色取込みおよび画素強度の変化がある。開示された方法およびシステムの実施形態の1つまたは複数は、部分的には、不均質な寸法および充填密度を示す細胞群に基づいて、このような細胞集団をセグメンテーションするためにモデリングを利用する。
[0009]これらのシステムおよび方法は、細胞形態学の測定および分析、チャンネルマーカ、チャンネルマーカの転座、および3D物理空間内の3D容量からの統計の抽出に関連する問題の多くを解決する。これらのシステムおよび方法は、ノイズの多いデータが存在する状態でさえも多数の解像度での細胞のセグメンテーションを可能にする。またこれにより、これに限らないが、細胞膜、基質および細胞核を含む、細胞クラスタ、個別の細胞、および細胞内構造物をセグメンテーションするための多数のチャンネルの使用が可能になる。
[0010]細胞を含む画像をセグメンテーションするシステムおよび方法の一実施形態は普通、複数の画素を含む1つまたは複数の画像を提供するステップと、画像内の1つまたは複数の3次元(3D)細胞集団を同定するステップと、1つまたは複数の自動モデルを使用して1つまたは複数の個別の細胞に3D細胞集団をセグメンテーションするステップとを含んでいる。1つまたは複数の事前モデルおよび/または1つまたは複数の確率モデルを使用して、細胞を個別にセグメンテーションすることができる。事前および確率モデルは、これに限らないが、形状ベースモデルまたは相関ベースモデルなどの様々な細胞特性ベースモデルに基づくものであってもよい。画像はこれに限らないが、データセットにわたる中心体の統計的分布、形態学的測定、および1つの細胞内領域から別の細胞内領域への1つまたは複数のバイオマーカ転座などの、様々な細胞の生体関連測定のための方法およびシステムの自動実施形態の1つまたは複数を使用して分析することができる。
[0011]1つまたは複数の画像を提供するステップは、複数のzスタック画像を提供するステップを含むことができ、zスタック画像は広視野画像を含むことができ、広視野画像は、少なくとも部分的に、細胞集団の1つまたは複数を1つまたは複数の細胞にセグメンテーションするために使用される。zスタック画像はまた、共焦点画像を含むことができ、共焦点画像は少なくとも部分的に、1つまたは複数の細胞内構造物をセグメンテーションするために使用される。
[0012]この方法はまた、分水界セグメンテーションを使用して細胞の1つまたは複数の細胞核をセグメンテーションするステップを含むことができ、細胞核中心は、分水界セグメンテーションのためのマーカとして使用される。
[0013]距離マップ飽和機構は、形状ベースモデルを使用して、個別の細胞に集合をセグメンテーションするために画像に適用することができる。細胞核などの細胞内成分は、少なくとも部分的に分水界セグメンテーションを使用してセグメンテーションすることができる。
[0014]本発明のこれらおよび他の特性、態様および利点は、添付の図面を参照して以下の詳細な説明を読めばより良く理解されるものである。図中、同様の記号は、図面全体を通して同様の部品を示している。
[0015]本発明の方法およびシステムの実施形態の1つまたは複数を使用してセグメンテーションすることができる、3次元画像の例示的画像を示す図である。 [0016]2点確率関数が捉えるために使用することができる情報のタイプを示す4つのグラフである。 [0017]面積比が0.5である点に基づいて、物体の半径をどのように推定することができるかを示す図である。 [0018]図1に示すゼブラフィッシュの眼の画像の表面推定を示す図である。 [0019]レベルセット改良が適用された後の、図1に示すゼブラフィッシュの眼のセグメンテーションされた画像を示す図である。 [0020]本発明の方法の1つまたは複数を組み込むシステムの一実施形態を示す図である。
[0021]システムおよび方法は、これに限らないが、細胞スクリーニングおよび薬剤テストを含む幅広い生物学的応用例を有する。システムおよび方法の実施形態の1つまたは複数は、1つまたは複数の細胞集団の中の細胞集団を自動的に同定し、1つまたは複数の実施形態は自動的に、多チャンネル画像データを使用して、各集合を個別の細胞および細胞内構造物にセグメンテーションする。システムおよび方法はさらに、多次元高密度充填細胞集団の自動分析を可能にする。システムおよび方法を使用して、これらの画像から集められた情報はさらに、細胞集団およびその細胞成分の生体関連測定を行い、分析するために使用することができる。これらの測定は、これに限らないが、データセットにわたる中心体の統計的分布、形態学的測定、および1つまたは複数の細胞内領域から別の細胞内領域へのバイオマーカの取込みおよび転座を含むことができる。これらの測定は、細胞レベルで、および細胞および/または細胞内レベルで行うことができる。システムおよび方法の技術的効果は、高密度充填細胞集団の3D画像化および定量的分析を可能にするためのものである。
[0022]このような分析への普通および従来の難しい第1のステップは、画像内の関連領域を背景から分離するための画像セグメンテーションを含んでいる。画像セグメンテーションは、多くの形態を呈することができるが、このステップの結果は、他の領域で測定またはこれと相関させることができる1セットの隔離物体または細胞クラスタである。例えば、核マーカで染色された細胞核をセグメンテーションすることができ、これらのセグメンテーションマスクはその後、様々な細胞プロセスを調査することを目的とした他の生物学的マーカに相関させることができる。システムおよび方法は特にこの応用例に限らないが、1つの応用例は、ゼブラフィッシュなどの多細胞生物の形態学、または高密度充填がん細胞集団内のバイオマーカの転座を測定するためのものである。
[0023]システムおよび方法の様々な実施形態で使用されるアルゴリズムの1つまたは複数は、例えば、多次元細胞集団内の細胞の生物形態学または分布を同定するために使用することができる。例えば、生物または集団内の細胞群は同定され、その後、各細胞群内の細胞は、多チャンネル画像データを使用して個別の細胞にセグメンテーションされる。システムおよび方法はさらに、これらの細胞集団の自動分析を可能にする。システムおよび方法を使用してこれらの画像から収集される情報はさらに、生物形態学または細胞集団の生体関連測定を行い、これを分析するために使用することができる。これらの測定は、これに限らないが、データセットにわたる中心体の統計的分布、形態学的測定、およびバイオマーカの取込みおよび転座を含むことができる。
[0024]特許請求する発明の主題をさらに明確および簡潔に説明し、これを指摘するために、以下の説明で使用される特定の用語に以下の定義を与える。
[0025]本明細書で使用する場合、「生体物質」という用語は、生体源である、またはこれから得られる物質のことを言う。生体源としては、これに限らないが、例えば体液(例えば、血液、血漿、血清、または尿)から生じる物質、器官、組織、画分、細胞、単細胞または多細胞臓器である、またはこれらから単離された細胞、細胞内および核物質、菌類、植物、およびこれに限らないが昆虫および人間を含む哺乳類などの動物が挙げられる。生体源としては、さらに非限定的な実施例として、単クローン抗体産生、GMP接種増殖、昆虫細胞培養、遺伝子治療、潅流、大腸菌増殖、タンパク質発現、タンパク質増幅、植物細胞培養、病原体増殖、細胞治療、細菌産生およびアデノウィルス産生に使用される物質が挙げられる。
[0026]生体物質としては、これに限らないが、冷凍または染色、あるいは別の方法で処理されているような、その物理的状態は無関係な任意の物質を挙げることができる。いくつかの実施形態では、生体物質としては、組織サンプル、全細胞、細胞成分、サイトスピン、または細胞塗抹標本を挙げることができる。いくつかの実施形態では、生体物質は組織サンプルを含んでよい。他の実施形態では、目標組織の連続画像を、最初に参照染料で、その後、追加の染料で得ることができる場合に、生体物質はインサイチュー組織ターゲットであってもよい。組織サンプルは、同様の機能を有することができる生体対象の組織から得られる一群の同様の細胞を含むことができる。いくつかの実施形態では、組織サンプルは、ヒトの組織から得られる一群の同様の細胞を含むことができる。ヒトの組織の適切な実施例としては、これに限らないが、(1)上皮組織、(2)血管、骨および軟骨を含む結合組織、(3)筋組織、および(4)神経組織が挙げられる。組織サンプル源は、加工していない、冷凍した、および/または保存した器官または組織サンプルまたは生検または吸引物から得られる固体組織、血液または任意の血液成分、脳脊髄液、羊水、腹水、または間質液、または被験者の妊娠または発達における任意の時からの細胞であってもよい。いくつかの実施形態では、組織サンプルとしては、一次または培養細胞または細胞株を挙げることができる。
[0027]いくつかの実施形態では、生体物質としては、健康なまたは病気の組織サンプルからの組織切片(例えば、結腸、乳房細胞、前立腺からの組織切片)が挙げられる。組織切片としては、組織サンプルの単一部分または片、例えば、組織サンプルから切り取った組織または細胞の薄い薄片を挙げることができる。いくつかの実施形態では、組織サンプルの多数の切片を取り、分析を行うことができる。但し、本明細書に開示する方法は、少なくとも2つの(形態的または分子レベルで)異なるターゲットに対する組織サンプルの同じ切片の分析のために使用することができる。いくつかの実施形態では、組織サンプルの同じ切片は、少なくとも4つの(形態的または分子レベルで)異なるターゲットに対して分析することができる。いくつかの実施形態では、組織サンプルの同じ切片は、5つ以上の(形態的または分子レベルで)異なるターゲットに対して分析することができる。いくつかの実施形態では、組織サンプルの同じ切片は、形態的および分子レベルの両方で分析することができる。
[0028]本明細書で使用される場合、バイオマーカまたはチャンネルマーカという用語は、これに限らないが、特定の波長の光への露出によって励起された場合に、異なる波長で発光する化合物である蛍光造影剤および蛍光色素分子を含んでいる。蛍光色素分子は、その発光プロファイル、または「色」に関して説明することができる。緑色の蛍光色素分子(例えば、Cy3、FITC、およびオレゴングリーン)は、普通は510〜540ナノメートルの範囲の波長での発光を特徴とすることができる。赤色の蛍光色素分子(例えば、テキサスレッド、Cy5、およびテトラメチルローダミン)は、普通は590〜690ナノメートルの範囲の波長での発光を特徴とすることができる。オレンジ色の蛍光色素分子の例は、細胞核および細胞質の両方を染色する、1,5−ビス{[2−(ジメチルアミノ)エチル]アミノ}―4,8−ジハイドロキシアントラセン−9,10−ジオン(CyTRAK Orange(商標))の誘導体であり、遠赤外の蛍光色素分子の例は、1,5−ビス{[2−(ジメチルアミノ)エチル]アミノ}−4,8−ジハイドロキシアントラセン−9,10−ジオン(DRAQ5(商標))の蛍光DNA染料、および1,5−ビス({[2−(ジメチルアミノ)エチル]アミノ}−4,8−ジハイトロキシアントラセン−9,10−ジオン)−N−酸化物(APOPTRAK(商標)の細胞プローブである。蛍光色素分子の例としては、これに限らないが、4−アセトアミド−4’−イソチオシアネートスチルベン−2,2’ジスルホン酸、アクリジン、アクリジンおよびアクリジンイソチオシアネートの誘導体、5−(2’−アミノエチル)アミノナフタレン−1−スルホン酸(EDANS)、4−アミノ−N−[3−ビニルスルホニル)フェニル]ナフタルイミド−3,5ジスルホン酸塩(Lucifier Yellow VS)、N−(4−アニリノ−1−ナフチル)マレイミド、アントラニルアミド、Brilliant Yellow、クマリン、クマリン誘導体、7−アミノ−4−メチルクマリン(AMC、クマリン120)、7−アミノ−トリフルオロメチルクラリン(クマラン151)、シアノシン、4’,6−ジアミニディノ−2−フェニルインドール(DAPI)、5’,5”−ジブロモピロガロール−スルホンフタレイン(Bromopyrogallol Red)、7−ジメチルアミノ−3−(4’−イソチオシアナトフェニル)4−メチルクマリン、4,4’ジイソチオシアナトジヒドロ−スチルベン−2,2’−ジスルホン酸、4,4’ジイソチオシアナトスチルベン−2,2’−ジスルホン酸、5−[ジメチルアミノ]ナフタレン−1−塩化スルホニル(DNS、ダンシルクロライド)、エオシン、エオシンイソチオシアネートなどのエオシン誘導体、エリトロシン、エリトロシンBおよびエリトロシンイソチオシアネートなどのエリトロシン誘導体、エチジウム、5−カルボキシフルオレセイン(FAM)、5−(4,6−ジクロロトリアジン−2−イル)アミノフルオレセイン(DTAF)、2’7’−ジメチオキシ−4’5’−ジクロロ−6−カルボキシフルオレセイン(JOE)、フルオレセイン、フルオレセインイソチオシアネート(FITC)、QFITC(XTIRC)などのフルオレセインおよび誘導体、(アミンとの反応の際に蛍光性の)フルオレスカミン誘導体、IR144、IR1446、マラカイトグリーンイソチオシアネート、4−メチルウンベリフェロン、オルトクレゾールフタレイン、ニトロチロシン、パラローザニリン、フェノールレッド、B−フィコエリトリン、(アミンとの反応の際に蛍光性の)o−フタルアルデヒド誘導体、ピレン、ピレンブチレートおよびサクシニミジル 1−ピレンブチレートなどのピレンおよび誘導体、Reactive Red 4(Cibacron RTM.Brilliant Red 3B−A)、6−カルボキシ−X−ローダミン(ROX)、6−カルボキシローダミン(R6G)、リサミンローダミンB塩化スルホニル、ローダミン(Rhod)、ローダミンB、ローダミン123、ローダミンXイソシアネート、スルホローダミンB、スルホローダミン101、およびスルホローダミン101の塩化スルホニル(Texas Red)などのローダミンおよび誘導体、N,N,N’,N’−テトラメチル−6−カルボキシローダミン(TAMRA)、テトラメチルローダミン、テトラメチルローダミンイソチオシアネート(TRITC)、リボフラビン、ロゾール酸およびランタニドキレート誘導体、量子ドット、シアニン、プレリウム染料、およびスクアラインが挙げられる。
[0029]本明細書で使用される場合、プローブを使用する応用例では、「プローブ」という用語は、結合剤、および信号ジェネレータまたは酵素などの標識を有する作用薬のことを言う。いくつかの実施形態では、結合剤および標識(信号ジェネレータまたは酵素)は、単一体で具現化される。結合剤および標識は、単一のステップで生体サンプルに直接的(例えば、結合剤内に組み込まれた蛍光分子を介して)、または間接的(例えば、分裂部位を含むことができるリンカを通して)取り付け、塗布することができる。代替実施形態では、結合剤および標識は、個別体(例えば、ターゲットおよび酵素を結合することが可能な一次抗体、または一次抗体を結合することが可能な信号ジェネレータ標識二次抗体)内で具現化される。結合剤および標識(信号ジェネレータまたは酵素)が個別体である場合、単一のステップまたは多数のステップで生体サンプルに塗布することができる。本明細書で使用される場合、「蛍光プローブ」という用語は、蛍光信号ジェネレータに連結された結合剤を有する作用薬のことを言う。
[0030]本明細書で使用する場合、固体担体上に生体物質を固定する必要がある応用例では、「固体担体」という用語は、生体サンプル内に存在するターゲットを本明細書で開示した方法によって固定化させ、その後検出することができる物体のことを言う。ターゲットは、物理吸着によって、共有結合形成によって、またはその組合せによって固体担体上に固定化させることができる。固体担体としては、重合体、ガラスまたは金属材料を挙げることができる。固体担体の例としては、膜、マイクロタイタープレート、ビード、フィルタ、テスト片、スライド、カバースリップ、および試験管が挙げられる。生体材料が膜に付着されるこれらの実施形態では、膜材料は、これに限らないが、ナイロン、ニトロセルロース、および二フッ化ポリビニリデンから選択することができる。いくつかの実施形態では、固体担体は、ポリスチレン、ポリカーボネート、およびポリプロピレンから選択したプラスチック表面を含むことができる。
[0031]方法およびシステムは、これに限らないが、検体検出、組織化学、免疫組織化学、または免疫蛍光法などの分析、診断、または予後応用例での使用に適用させることができる。いくつかの実施形態では、方法およびシステムは、組織化学、免疫染色、免疫組織化学、免疫検定、または免疫蛍光応用例で特に応用可能である。いくつかの実施形態では、方法およびシステムは、免疫ブロット技術、例えばウエスタンブロット、または酵素免疫測定法(ELISA)などの免疫検定で特に応用可能である。
[0032]方法およびシステムの1つまたは複数の実施形態は、所与の染色プロトコルが中心体を均一に明るくすると仮定する確率モデルを使用する。染料の発光周波数によって、全ての細胞核は均一に明るく見える。サンプル内の細胞が高密度充填されているので、隣接する細胞からの蛍光染色の放射により、直線フィルタリングによって取り除くことができないかなりの量の構造的背景ノイズが生成される。したがって、細胞核は十分分離されず、その境界はあまり特徴付けられていない。加えて、個別の細胞の形状に関する特定の仮定を行うことが可能であるが、細胞はかなり変形可能であるという事実を説明する必要がある。特性グループ化およびモデル予測を1つの一貫性のある枠組みに一体化するために、2004年9月16日出願の「System and method for Segmenting Crowded Environments Into Individual Objects(混雑環境を個別の物体にセグメンテーションするシステムおよび方法)」という名称の米国特許出願第10/942,056号に記載されたセグメンテーション方法を使用することができる。
[0033]任意の種類の画像特性、例えば端点、縁部、画像領域からなる、1セットのN個の観察結果Z={z}であると仮定すると、アルゴリズムは、潜在的物体前提の形状および位置に関してパラメータ化された尤度関数を使用してこれらを区切る。EM公式の変数を使用して、モデルパラメータおよびグループ化両方の最大尤度予測が同時に得られる。得られるアルゴリズムは、広域的最適化を行い、ローカルコンテキストのみを使用して決定を行うことができない場合でさえも、正確な結果を生成する。
[0034]幾何形状モデルは、ZのうちのどのサブセットCを単一の物体に関連させることができるかを特定するために使用される。前処理ステップでは、クリークとも呼ばれる、1セットのK個の可能なグループの特性が特定される。全てのクリークのセットは以下のように定義される。
C:={C,...,C} (1)
が[1,...,K]での長さNの代入ベクトルY={y}が、各特性zを特定のクリークCに関連させるために使用される。クリークへの特定の関連性は、物体の仮定形状および外観に関する問題に直接結合される。こういう理由で、クリークCが細胞の位置、形状および外観を符号化するパラメータθに関連させられている。形状パラメータの集合は、以下のように示される。
Θ=[θ,...,θ] (2)
方法は、代入ベクトルYおよび特性セットZ、すなわちp(Y,Z;Θ)の同時確率をモデリングする。ここで、Θは分布のパラメータを示している。読者は、
Figure 0005602717
によって与えられるランダム変数Yの範囲が、クリークCのセットによって定義されることに留意すべきである。代入ベクトルYは、クリークCへの特性zの割当を直接観察することができないので、隠し関数として処理される。EMは、Θの最大尤度予測、および起こりそうな割当を生成するためにサンプリングすることができるYに対する分布を求めるために使用される。
[0035]同時確率p(Y,Z;Θ)は、1セットの画像特性を前提として、特定の特性割り当Yに対するメリット関数を定義することによってモデリングすることができる。例えば、特定のクリークに対する特定のサブセットの画像特性(z,...,z)の類似性を測定することができる。この例示的実施形態では、単一の特性割当の類似性は、所与のクリークCへのペアワイズ割当と同様に、形状パラメータθでモデリングされる。対応する類似性関数は、以下の通り示される。
g(z,θ)およびg(z,z,θ
特性割当の対数尤度は、以下のような1セットの画像特性zを前提として公式化される。
Figure 0005602717
この実施例では、クリークのセットが変化しないので、Yによって決まる規格化定数を算出する必要がない。p(Z)の値は、公式全体を通して一定であるので以下のようになる。
Figure 0005602717
[0036]不均質な細胞集団をセグメンテーションする、または異なる細胞集団を同定することが望ましい実施形態では、方法は、全ての細胞が同様の形状であるということを前提とすることができない。したがって、特性点、形状モデル、および類似性関数は、このような不均質細胞集団をセグメンテーションするように適合される。所与の試料の不均質性を説明するために、方法の実施形態のいくつかは構造標識を使用する。例えば、標識Λは、同質構造を有する量の特定の領域に割り当てられている。いくつかの領域内では細胞が小さく、高密度に充填されており、細胞はその他の領域ではより大きい可能性がある。構造標識Λは、このような領域を同定するために使用される。本実施例では、形状パラメータの分布は、容量の所与の領域に割り当てられた構造標識によって決まる。尤度関数は、これにしたがって変更される。
Figure 0005602717
[0037]広視野および共焦点zスタックモードは両方とも、分析のために使用される画像を取得するのに使用することができる。広視野画像は、細胞クラスタをセグメンテーションするために使用され、共焦点zスタック画像は個別の細胞または細胞核をセグメンテーションするために使用される。非限定的な実施例として、20X,0.45 NA対物レンズを使用し、GE HealthcareのIN Cell Analyzer 1000を使用して画像を取ることができる。zスタック画像は、得られる画像から焦点ズレの光を取り除くために構造光画像化を利用する、光学Zセクショニング(OZ)モジュールと、広視野モードを使用して得ることができる。zスライス解像度は、個別のターゲット物体の寸法を越えて劣化するにしたがって、所与の検定は2D画像環境まで効果的に下がる可能性がある。というのは、各物体はいくつかの例では、単一のスライス内のみに存在することがあるからである。
[0038]システムおよび方法の本実施例では、画素の代わりに物理座標(例えば、μm)内で処理が行われる。物理座標は、本実施例では、アルゴリズムを一般化することができ、これが寸法および形状モデルを含むことができるように使用される。広視野および共焦点画像両方の利点は、処理のために利用される。というのは、広視野画像は核集合を区別し、共焦点画像は核を改良するからである。画像は最初、背景から前景を離すように前処理される。前処理ステップでは、局所画像統計が、背景画素をなくすために使用される。
[0039]細胞クラスタ内の核の近接により、核染色は普通、核から漏れて、その結果、細胞の周りの明るい背景につながる。さらに、励起光をブロックする核による信号減衰は、細胞集団内側の減光核につながる。このように、本実施例では、局所画像特性は、画像をセグメンテーションして、背景および前景を分離させるために使用される。容量V内の各ボクセルxごとの閾値を特定するように閾値関数Tが算出される。任意の所与のボクセル位置x∈Vでは、T(x)の値は、ボクセルの近傍Ω内の局所画像統計に基づいている。本実施例では、この近傍の寸法は、平均細胞核の寸法にしたがって設定される。各ボクセルxごとのT(x)を算出することは、計算的に集中的であり、それによって3D格子Lを代わりに使用することができる。各x∈Lでは、T(x)の値は以下のように算出される。
Figure 0005602717
ここで、τは、全容量Vに関してOtsu法を使用して算出された広域的閾値を示している。Otsu法は、閾値を求めて、画素のヒストグラムの級間分散を最大限にする。同様に、τΩ(xi)は、局所近傍内で算出されたOtsu閾値である。σΩ(Xi)は、近傍Ω(Xi)内のボクセル強度の分散であり、σは、I(x)<τであるボクセル強度の分散を示している。このような分散により、背景がどれだけ変化することが予測されるかの測定を行う。全ての残りのボクセル位置
Figure 0005602717
では、T(x)の値は、線形補間を使用して算出される。この方法は、近傍ボクセル強度σΩ(Xi)の分散を使用して、近傍が背景および前景ボクセルの組合せを含んでいるかどうかを効果的に判断する。この分散がσに対して比較的小さい場合、広域的値τが使用され、これにより均質領域内のノイズの多い局所算出が防止される。
[0040]格子の寸法は、計算的要件に適合させることができる。近傍の重複に関連するトレードオフがあることに留意されたい。重複が大きすぎる場合、精度は高いが、処理時間は長くなる。重複が小さすぎる場合(例えば、非重複近傍)、処理時間ははるかに短いが、特に近傍の境界で精度に問題がある。
[0041]適用閾値化は、例えば、背景照明が画像にわたって一定である場合、必ずしも必要ではない。
[0042]核内の他の検出は、以下の通り欲張りな方法で核寸法制約を使用することによって除去することができる。核寸法に対応する所与の半径で最大である画像内の領域最大値を求める。その後、最大値の全ては(時間を節約するために背景のものをマスキングした後に)標識付けされ、強度によって分類される。その後、最も明るい最大値から始まり、その最大値からの距離測定内にあるリストからのこれらの最大値が除去される。このステップは、最大値の全てが検討されるまで、次第に暗い最大値まで続く。近似の細胞半径がこれらの算出のために使用されるので、方法の本実施例はモデル駆動される。これらの方法は、最初に画像を平滑化することによって最適化することができる。寸法制約は、それぞれの核が一度のみ検出されることを保証するので、平滑化は常に必要ではない。しかし、異常値を除去することによって中心の局所化を助けるものである。この方法で得られる核中心は、分水界アルゴリズムのシードとして働く。距離マップは、ダニエルソン距離アルゴリズムを使用してこれらのシードから生成される。核境界はその後、2つの制約、つまりモデルベース寸法制約、および背景マスクによって定義された形状を使用して画定される。水域アルゴリズムが得られる距離マップに適用された場合、細胞は効果的にセグメンテーションされる。
[0043]分水界セグメンテーションアルゴリズムは、接する細胞を分離させるようになっている。いくつかの例では、形態学操作により修正することができる形状は円滑でないが、このような操作は時々、過程の終わりに向かって最もよくそのままにされる。このような操作が過程の終わりに向かってより良く行われる例は、データから導き出された形状を基礎的に変更することが予測され、構造化素子の寸法に非常に左右される場合の例である。
[0044]前景が背景から分離された後に、二値オブジェクトの距離マップがその後置かれ、分水界ステップは集団を分離させるために行うことができる。しかし、距離マップ内の多数の最大値から得られるオーバーセグメンテーションにより、距離画像は水域を算出する前に処理することができる。距離マップは典型的には、多くの極大値を含んでいる。トポロジーマップとして見た場合、極大値は各領域に対する1つの最大値に組み合わされ、それによって各核集団をセグメンテーションするために使用することができることが好ましい。二値オブジェクトは典型的には細長く、表面は正確な円というよりはむしろ不規則であるので、多数の極大値が存在する。ターゲットオブジェクトが正確な円であったら、1つの最大値しかないだろう。これらの最大値を1つの最大値に組み合わせるために、距離マップ飽和が行われる。最大値が小さな高さだけ異なる場合、これらは組み合わせられ、それによりその頂点を切り取ることによって距離マップを飽和させる。この過程は、迅速な形態学操作を使用して行うことができる。飽和は強度寸法内で行われるが、空間寸法内の形態学操作は典型的には、同じ結果を与える。というのは、距離マップは普通、定義によって直線的に変化するからである。説明したように、距離マップ処理は、画像全体に一度行うことができ、各個別の集団を考慮する必要がなく、その結果より迅速な過程につながる。
距離マップ飽和ステップの実施例
1.飽和させるための高さ差であるhを設定する。
2.グレースケールが、hだけ入力マップを侵食する。
3.グレースケールが、h+1だけステップ2から侵食されたマップを膨張させる。
4.ステップ3から入力マップ画像および膨張マップの最小値をとる。これにより、飽和最大値の画像が与えられる。
[0045]hの半径を備えたグレースケール侵食は基本的には、所与の距離内の最小オペレータである。これは典型的には、頂点を切り取る。というのは、本実施例と同様に、距離マップが使用されるからである。グレースケール膨張は、距離マップの境界を元の位置に戻すために本実施例では好ましい。本実施例では、膨張半径は侵食より1大きい、そうでないと詳細が失われてしまう可能性がある。原画像および膨張画像の最小値をとることにより、普通は元の侵食動作から回復しない頂点を除いて、画像中の全ての値が元の値に戻る。
[0046]本実施例の距離マップ飽和は、拡張極値を求めることと同様である。しかし、他の実施例では、拡張最大値を見つけるステップは、特に大きなh値ではかなり遅い可能性があるが、画像再構築を使用することができる。膨張および侵食操作は、大きなカーネルでは遅くなる可能性があり、核集団が比較的大きいので大きなカーネルが必要である可能性がある。このステップの速度を上げるために、サブサンプリングステップが行われる。サブサンプリングステップは、距離マップをサブサンプリングするステップと、処理するステップと、その後、結果をスーパーサンプリングするステップとを含むことができる。
[0047]サブサンプリングは、少なくとも、点間で線形補間を普通は定義により使用する、距離マップを使用する場合の選択肢である。これはまた、所望の量だけサブサンプリングし、1の半径の形態学を行うことによって、非一体型間隙に対するサブピクセル精度を備えた侵食および膨張を与えることができる。カーネルがmmで特定され、いくつかの小数値がある場合、膨張は常に四捨五入する。というのは、整数の半径が必要であるからである。これにより、誤差がシステムに持ち込まれる可能性がある。これはまた、特にグレースケール侵食を行う場合に、大きなカーネルに対して算出するための非常に長い時間が必要となる可能性がある。別の方法では、画像を、半径に対してmmで特定された量だけ再サンプリングし、その後、1の半径で侵食/膨張させ、その後、再サンプリングすることができる。
[0048]背景に対応する処理した距離マップ画像の領域が、その後マスキングされる。分水界ステップはその後、集団をセグメンテーションするために得られた画像に行われる。これらのステップは部分的に、平均画像内の核集団の迅速なセグメンテーションを可能にし、また、距離マップの核集団ごとに広域的最大値によって特定されるように各集団の中心(x,y)を配置する。
[0049]各集団の中心のスライス位置も判断されることが好ましい。集団は3Dで球状であるので、定義によって集団の最も幅広い部分に対応するスライスは、中心を含んでいる。このステップでは、普通は各画素がそのx、y位置に対する最大値を含むスライスに対応する、2D画像である最大指数画像が生成される。いくつかのスライスが特定のx、y位置に対して同じ強度を有する場合、これらのスライスの平均がとられる。核集団マスクはその後、この最大指数画像の前景を隔離し、各集団の所与の幅の輪郭を抽出するために、前のステップから使用される。ヒストグラムは、セグメンテーションマスクからの集団の境界周りの最大指数で生成することができる。このヒストグラム内で最も頻繁に起こるスライス指数はしたがって、集団の最も幅の広い部分、したがって集団中心に対応する。ヒストグラムのモードは、この値を与えるために同定される。集団中心のこのz位置を前に求めたxおよびy位置に組み合わせることにより、各集団の3D位置が特定され、その後、集団中心から細胞核の分布を求めるために使用することができる。
核集団処理の実施例
1.二値マスクをサブサンプリングする。
2.高速二値アルゴリズムを使用して、小さな突起を取り除くために二値マスクを開閉する。
3.距離マップを求める。
4.飽和アルゴリズムを使用する。
5.値をリスケーリングした後に、距離マップをスーパーサンプリングする。
6.領域最大値を求める。
7.閾値化した背景によってマスキングされた距離マップの分水界を求める。これによって、集団のx、yセグメンテーションが与えられる。
8.各集団にdoコマンドを行う
9.「最大指数画像」を使用して各集団のスライス中心を求める。
10.end forコマンドを行う
11.集団の中心から距離マップを生成する。
[0050]同じ3D分析の異なるスライス解像度でいくつかの取得を使用して、異なる解像度に対する核集団処理のロバスト性を判断することができる。これらの様々な解像度での細胞計数は近い可能性がある。普通、スライス解像度が低ければ低いほど、効果的に2D画像に対してより近くなる。これは、有用な測定値をさらに得ながら、どれだけ解像度が劣化する可能性があるかを示している。分布グラフを生成することもできる。集団のハイポキシティの測定値を与える分布グラフを生成することもできる。
[0051]アプリオリと呼ばれる、所与の試料の物理的および構造的特性に関する予備的知識を組み込んだ方法およびシステムの実施形態の1つまたは複数がある。限られた測定値のみを使用して、このような構造標識Liを定義するために、ランダム異種物質を使用することができる。
[0052]N点確率関数は、ランダム異種材料を特徴付けるために知られている。例えば、n点相関関数に基づく測定値を細胞集団を同定するために使用することができる。空間の領域
Figure 0005602717
を仮定して、容量
Figure 0005602717
が2つの互いに素であるフェーズ
Figure 0005602717
および
Figure 0005602717
内で区切られる。指標関数は、所与の位置
Figure 0005602717
がどのセットに属するのかを示すために使用されている。
Figure 0005602717
位置x、x;:::;xでのn点の確率は、フェーズi=(i;i;:::;i)で求められる。
Figure 0005602717
セグメンテーションアルゴリズムに対するアプリオリを示すために、以下の2点確率関数を使用することができる。
Figure 0005602717
式中、|x−x|=rである。図2に示すグラフは、これらの2点確率関数を捉えるのに使用することができる情報のタイプを示している。P11およびP01の交点は、物体の半径に関するいくつかの情報を含んでいる。線AはP11に言及し、線BはP01に言及し、線CはP10に言及し、線DはP00に言及している。
[0053]実験データを使用して、物体の寸法を推定することができる。図3に示すように、物体の半径は、面積比が0.5である点に基づいて推定することができる。これにより、半径の側に対する推定量を求めることができる。本実施例では、推定量は以下に基づいている。
11(r)=P10(r) (10)
この例示的実施形態では、長さrの線分
Figure 0005602717
が前景内に完全に含まれている確率は、このような線分が前景領域が始点で、背景が終点で交差する確率に等しい。図3に示すように、試料が主として同様の寸法の丸い物体からなるという前提に基づいて、前景物体の寸法の分布に対する推定量を示すために、条件(8)が使用される。λ∈[0,2r]である長さλrの線分は、図3の線Eに平行であると仮定する。1セットの点は最初、長さλrを有する線分に対する潜在的始点である円C内で算出され、それによって線分の両方の端点が円内にある。すなわち、以下の通りである。
Figure 0005602717
セットの寸法
Figure 0005602717
を直接算出することができる。図3に示す表記は、
Figure 0005602717
を算出するために本実施例で使用される。
[0054]点QおよびSによって画定される半径rおよび中心Pを有する円の扇形Sは、
Figure 0005602717
のように算出することができる。
線分
Figure 0005602717
Figure 0005602717
の長さであると注意されたい。
角度qは、
Figure 0005602717
のように算出することができる。
したがって、扇形Sの面積は
Figure 0005602717
である。
次のステップでは、点P、OおよびSによって画定される、三角形Kの面積が算出される。ピタゴラスの定理を使用する。
Figure 0005602717
三角形の面積Kは次に、
Figure 0005602717
のように算出することができる。
最後に、セットの寸法
Figure 0005602717
Figure 0005602717
のように算出することができる。
別の方法では、セットの寸法は
Figure 0005602717
のように算出することができる。
半径rの寸法の推定量を作り出すために、実施形態の1つまたは複数は
Figure 0005602717
の比を使用した。
τ=0:5である例では、条件(8)を満たすことができる。しかし、この比は、半径rの実際の寸法によるものではない(図3)。
[0055]実施形態の1つまたは複数では、充填密度を予測する必要があり得る。例えば、細胞集団は3D容量全体を満たしていない可能性がある。試料および染色アーチファクトの性質により、状況がより複雑になる可能性がある。例えば、図1に示す染色したゼブラフィッシュの眼の核は、空間内のマニホールドの上にある。したがって、材料統計の間違いを避けるためには、線処理過程を生成する前にこのマニホールドを予測する必要がある。図4は、図1に示すゼブラフィッシュの眼に対する表面予測である。
[0056]アプリオリの前処理および生成後に、実施形態の1つまたは複数は、核または中心体などの細胞構造物を予測するための初期化ステップを含んでいる。初期化ステップは、これに限らないが、1つまたは複数の細胞特徴に基づく方法、および相関ベースの方法などの、細胞構造物を予測するための1つまたは複数の方法を含むことができる。
[0057]様々な細胞特徴を使用して、候補セットの中心体を求めることができるが、方法およびシステム内で有用である細胞特徴の2つの非限定的な例としては、細胞形状および細胞外観が挙げられる。相関ベース方法は、より一般的であり、したがって行うのがより迅速である。
[0058]初期化ステップの1つの例示的実施形態は、形状ベース初期化である。減衰依存セグメンテーションは、細胞を示す1セットの前景領域につながる。細胞群はその後、個別の細胞にさらに分割される。この実施形態は、マーカ制御分水界方法の使用により分水界セグメンテーションを算出する前に、全てのドメイン情報を含んでいる。マーカは、画像の最終パーティション内の連結成分の数を判断するので、マーカは細胞核全てに加えられる。本実施例では、分水界アルゴリズムまで通過された画像は、物体境界に沿って高い強度値を有する。細胞クラスタを個別の細胞にセグメンテーションするために、形状および強度情報が組み合わされて、マーカ画像が生成される。実際のセグメンテーションステップを行う前に、モデル制約が課される。細胞の形状は非常に可変である可能性があるので、普通は強い形状アプリオリを加えないことが最も良い。例えば、距離マップを使用して形状情報を符号化することができる。距離マップD(x)の例は、以下のように定義することができる。
Figure 0005602717
式中のT(・)は、等式(4)内で定義されている。得られる距離マップは、全ての背景ボクセルに対してゼロである。前景の一部である全てのボクセルでは、距離マップは、背景ボクセルに最も近い距離を記録する。したがって、2つの接触している細胞が不均一な明るさであるが、その間にネックがある場合であっても、距離マップDの輪郭を使用して、これらを異なる核にセグメンテーションすることができる。しかし、ネックがない場合、これらを分離するためには他の制約が必要である。また、染色された核は、縁部に向かってより拡散するより明るい中心を有するので、強度モデルを使用することもできる。これらの関数は異なる目盛を有するので、組み合わせる前に最初に正規化される。正規化は、両方の前景領域がゼロ平均および単位分散を有するように、IおよびDをリスケーリングすることによって達成される。得られる組合せ関数は、以下のように算出される。
W(x)=λI(x)+(1−λ)D(x) (22)
式中の、λは、普通、強度および形状情報両方に等しい重要度を置くように0:5に設定される。強度および形状ベース関数は両方とも、多数のマーカを細胞内に配置する。
[0059]得られる組合せマップWは、多くの領域最大値を含んでいる。形状マップ内の多数の領域最大値は、二値物体の伸び、およびその表面の粗度によるものである。物体が真円である場合、1つの最大値しかない。強度マップは、高いレベルのノイズにより、多数の最大値を有する。位相マップとして見た場合、飽和過程を使用して、領域最大値は各領域ごとに1つの最大値に組み合わせられる。
[0060]これらの最大値を1つの最大値に組み合わせるために、実施形態の1つまたは複数は、以下に示すfの寸法nの侵食によるfの再構築として定義された、寸法nでの再構築による開口方法を使用する。
Figure 0005602717
グレースケール侵食は、頂点を切り取る。再構築により、元の侵食操作からけして回復しない頂点を除いて、画像内の全ての値はその元の値に戻される。
[0061]初期化ステップはまた、相関ベース方法を含むことができる。各個別の細胞の外観は、選択した染色プロトコル、もちろん、画像化システムの特徴によるものである。特定の顕微鏡のノイズおよび画像特徴は、この方法に1つまたは複数の要因として加えることができる。
[0062]染色プロトコルに基づいて、単一の細胞核の外観をモデリングするテンプレートが生成される。このテンプレートは、中心体である尤度が高い、ボクセル位置を特定するために本実施例で使用される。ボクセル位置は、テンプレート照合方法を使用して特定することができる。
[0063]機器およびアプリケーションの問題によって、データ収集の解像度は異なる可能性がある。しかし、あらゆる所与のスライス(すなわち、x−y平面)の解像度は普通、一定のままであり、z軸に沿ったサンプリング周波数が普通は変化する。テンプレート照合は、元のデータセットの追加補間を算出することなく、所与の解像度に適合させることができる。
[0064]染色プロトコルが、実施例の1つまたは複数で異なる強度分布につながる例では、通常の分布は、画像強度を直接はモデリングしないと推定することができる。代わりに、特定の画像特性の発生をモデリングする。このようなセットの画像特性は、学習アルゴリズムにより特定するべきである。
[0065]実施形態の1つまたは複数では、細胞核は不均一に染色され、単一の隔離された核の強度分布は、3次元でガウス分布を有することが考えられる。しかし、全ての染色プロトコルが、均一な染色につながるわけではない。このような例では、外観モデルはデータから構成することができる。データは、以下の式が成り立つように適当な特性空間にマッピングすることができる。
Figure 0005602717
これらのマップは、クラスタ化された細胞集団から個別の細胞の位置および形態を判断するために、方法およびシステムで使用することができる。特定の染色プロトコルに基づいて、特定のプロトコルに関連および重要な特性を有する外観モデルを設計することができる。密度の高い集団内の個別の細胞を回復させる過程はその後、以下のように一般化される。
1)特性に外観をマッピングする:染色プロトコルを前提として、個別の細胞をローカライズする1セットまたは1つの組合せの特性を選択する。核染色の場合、これは画素自体が強度値であり、膜染色は境界または縁部を求める必要がある可能性がある。プロトコルから特性およびセットの特性へのマッピングは、経験プロトコルの知識から予め判断する、または例示的データから学習することができる。特性はその後、容量内に細胞位置をローカライズするように、画像内でこれらを観察し測定する能力に基づいて、または容量内で細胞位置をローカライズする特性の能力で各プロトコルに対して自動的に選択される。
2)ノイズおよび不確実性をモデリングする:それぞれ選択された特性は、隣接する細胞との重複から生じる混同での細胞位置、染色および収集における変動性、および最後にノイズを示す。変動性およびノイズを説明するために、尤度モデルは等式24内で説明したように作り出され、ガウス分布の代わりに、計算的に扱うことができる限り、他の分布を使用することもできる。
3)個別の細胞をセグメンテーションする:個別の細胞の外観をモデリングする特性分布(または尤度)が利用可能になると、細胞クラスタの結合外観が全体としてモデリングされ、ここで各特性は隣接する細胞間の相互作用により観察することができる。核染色を使用する実施例では、これは画素強度にわたってガウス分布の混合物としてモデリングされた。この方法はまた、一般化された特性セットに適用可能である。
[0066]この方法を行うための自動システム10(図6)は普通、マーカで染色されたデジタル画像を少なくとも一時的に記憶する手段12と、方法のステップの1つまたは複数を行うプロセッサ14とを備えている。記憶手段は、ROM(読取り専用メモリ)、RAM(ランダムアクセスメモリ)、またはCPU(中央処理装置)のDRAM(ダイナミックランダムアクセスメモリ)などのプロセッサ、またはDVDまたはCDなどの適切なディスクドライブメモリ、またはジップドライブまたはメモリカードに関連する任意の適切なハードドライブメモリデバイスを備えることができる。記憶手段は、プロセッサまたは画像を表示する手段から離れて配置することができ、さらに有線または無線かに関わらず、これに限らないが、ローカルエリアネットワーク、ケーブルネットワーク、衛星ネットワーク、およびインターネットを含む任意の適切な接続デバイスまたは通信ネットワークを通してアクセスすることができる。プロセッサまたはCPUは、マイクロプロセッサ、マイクロコントローラ、およびデジタルシグナルプロセッサ(DSP)を備えることができる。
[0067]記憶手段12およびプロセッサ14は、1つのシステム内で画像化および分析する自動高速システムとしての分析デバイスの構成部品として組み込むことができる。このようなシステムの例としては、これに限らないが、General Electric社のInCell分析システム(ニュージャージー州、PiscatawayのGeneral Electric Healthcare Bio−Sciences Group)が挙げられる。記したように、システム10はさらに、画像の1つまたは複数を表示する手段16、インタラクティブビューア18、バーチャル顕微鏡20、および/または1つまたは複数の遠隔位置26に通信ネットワーク24上で画像の1つまたは複数、または任意の関連データまたは分析情報を伝達する手段22を備えることができる。
[0068]表示手段16は、これに限らないがLCDまたはCRTを組み込んだデバイスなどの、デジタル画像を表示することが可能な任意の適切なデバイスを備えることができる。伝達手段22としては、これに限らないが、有線または無線デジタル通信システムを含む、通信ネットワーク上でデジタル情報を伝達する任意の適切な手段が挙げられる。IN Cell Analyzer3000と同様に、システムはさらに、染色の1つまたは複数を行う自動デバイス28と、これに限らないが、励起源32を含み、TMAのデジタル画像を収集することが可能である蛍光画像化顕微鏡などのデジタル画像化デバイス30とを備えることができる。このような画像化デバイスは、方法全体を通して、オートフォーカスし、必要に応じて焦点特性を維持および追跡することが可能であることが好ましい。
[0069]方法およびシステムの実施形態は、これに限らないが、細胞分化、細胞成長、細胞運動および追跡、および細胞周期分析などの様々な応用例で使用することができる。細胞分化としては、これに限らないが、細胞クラスタ内の細胞のサブ集団の同定が挙げられる。このような情報は、これに限らないが、2つ以上の異なる種類の細胞が共に成長する共培養分析などの多くの異なるタイプの細胞分析で有用である。
[0070]発明の特定の特性のみを本明細書に図示および説明したが、当業者は多くの変更形態および変形形態が思いつくだろう。したがって、添付の特許請求の範囲は、発明の真の趣旨内にあるような変更形態および変形形態全てを含むことを意図していることを理解されたい。

Claims (26)

  1. 複数の画素を含む1つまたは複数の画像を提供するステップと、
    前記画像内の1つまたは複数の3次元(3D)細胞クラスタを同定するステップであって、各3D細胞クラスタが、多次元細胞集団を含むものと、
    1つまたは複数のモデルを使用して、前記3D細胞クラスタの1つまたは複数を1つまたは複数の個別の細胞に自動的にセグメンテーションするステップと、
    1つ又は複数の3D細胞クラスタに対する、集合中心のz成分を求めるステップを含み、
    当該集合中心のz成分を求めるステップが、
    最大指数画像を生成するサブステップであって、各画素はx、y位置での最大値を含む画像スライスに対応しているサブステップと、
    前記集合をセグメンテーションするステップにおいて生成されたマスクから導き出された、前記集合の1つまたは複数の境界周りに1つまたは複数の最大指数のヒストグラムを生成するサブステップと、
    ヒストグラムのモードを探し、当該モードに基づいて前記集合の1つまたは複数の1つまたは複数の中心を同定するサブステップとを含む、
    細胞の画像をセグメンテーションして、多次元細胞分布内の細胞形態学的な測定又は細胞分布の測定を行う方法。
  2. 前記細胞クラスタの1つまたは複数を1つまたは複数の個別の細胞にセグメンテーションするステップは、1つまたは複数の細胞特徴に対応する1つまたは複数のアプリオリを使用する、請求項1に記載の方法。
  3. 前記細胞クラスタを個別の細胞にセグメンテーションするステップは、1つまたは複数の確率モデルを初期化するステップを含んでいる、請求項2に記載の方法。
  4. 前記確率モデルの少なくとも1つは、形状ベースモデルを含んでいる、請求項3に記載の方法。
  5. 前記形状ベースモデルは、距離マップを含んでいる、請求項4に記載の方法。
  6. 距離マップ飽和機構を前記1つ又は複数の画像に適用するステップと、
    分水界セグメンテーションを使用して、前記細胞の1つまたは複数の核をセグメンテーションするステップとをさらに含む、請求項5に記載の方法。
  7. 前記距離マップをサブサンプリングするステップと、
    サブサンプルされた前記距離マップを処理するステップと、
    前記処理した距離マップをスーパーサンプリングするステップとをさらに含む、請求項6に記載の方法。
  8. 前記確率モデルの少なくとも1つは、相関ベースモデルを含んでいる、請求項3に記載の方法。
  9. 前記アプリオリの1つまたは複数は、n点相関確率モデルに基づいている、請求項3に記載の方法。
  10. 前記細胞を2つ以上の細胞サブ集団にセグメンテーションするステップをさらに含む、請求項1に記載の方法。
  11. 前記細胞の1つまたは複数の生体関連測定値を分析するステップをさらに含む、請求項1に記載の方法。
  12. 1つ又は複数の生物学的に関連性を有する細胞の測定値を分析するステップを更に含み、
    前記測定値の1つまたは複数は、1つのサブ細胞領域から別のサブ細胞領域までの1つまたは複数のバイオマーカの転座である、請求項11に記載の方法。
  13. 1つまたは複数の画像を提供する前記ステップは、複数のzスタック画像を提供するステップを含んでいる、請求項1に記載の方法。
  14. 前記zスタック画像の前記少なくとも1つは、広視野画像を含んでいる、請求項13に記載の方法。
  15. 前記zスタック画像の前記少なくとも1つは、共焦点画像を含んでいる、請求項13に記載の方法。
  16. 前記共焦点画像は、少なくとも部分的に、前記細胞の1つまたは複数のサブ細胞成分をセグメンテーションするために使用される、請求項15に記載の方法。
  17. 前記細胞の前記サブ細胞成分の1つまたは複数は細胞核である、請求項16に記載の方法。
  18. 分水界セグメンテーションを使用して、前記細胞の1つまたは複数の核をセグメンテーションするステップであって、中心体は前記分水界セグメンテーションのマーカとして使用されるステップをさらに含む、請求項17に記載の方法。
  19. 細胞クラスタの1つまたは複数を1つまたは複数の個別の細胞にセグメンテーションするステップは、統計学習アルゴリズムを使用して、確率モデルのパラメータを予測することによって、1つまたは複数の細胞特徴を判断するステップを含む、請求項1に記載の方法。
  20. 複数の画素をそれぞれ含む1つまたは複数のzスタック画像を少なくとも一時的に記憶する記憶デバイスと、
    前記画像内の1つまたは複数の3次元(3D)細胞クラスタを同定し、1つまたは複数の自動モデルを使用して前記3D細胞クラスタを個別の細胞にセグメンテーションするように構成されたプロセッサとを備え、各3D細胞クラスタが、多次元細胞集団であ
    前記プロセッサは、
    各画素はx、y位置での最大値を含む画像スライスに対応している状態で、最大指数画像を生成し、
    前記集合をセグメンテーションする前記ステップにおいて生成されたマスクから導き出された、前記集合の1つまたは複数の境界周りに1つまたは複数の最大指数のヒストグラムを生成し、
    前記ヒストグラムのモードを探し、当該モードに基づいて前記集合の1つまたは複数の1つまたは複数の中心を同定することによって、1つ又は複数の3D細胞クラスタに対するクラスタ中心のz成分を発見するように構成される、
    細胞の画像をセグメンテーションして、多次元細胞分布内の細胞形態学的な測定又は細胞分布の測定を行うシステム。
  21. 前記プロセッサは、1つまたは複数の細胞特徴に対応する1つまたは複数のアプリオリを使用して、前記細胞クラスタの1つまたは複数を1つまたは複数の個別の細胞にセグメンテーションするように構成される、請求項20に記載のシステム。
  22. 前記プロセッサは、少なくとも部分的に1つまたは複数の形状ベースモデルを初期化することによって、前記細胞クラスタを個別の細胞にセグメンテーションするように構成される、請求項20に記載のシステム。
  23. 前記プロセッサは、少なくとも部分的に1つまたは複数の相関ベースモデルを初期化することによって、前記細胞クラスタを個別の細胞にセグメンテーションするように構成される、請求項20に記載のシステム。
  24. 各3D細胞クラスタが球状である、請求項1に記載の方法。
  25. 各3D細胞クラスタが球状である、請求項20に記載のシステム。
  26. 請求項1に記載の方法であって、
    1つまたは複数の画像を提供するステップが、
    複数の画素を含む1つまたは複数の広視野画像を提供するサブステップと、
    複数の画素を含む1つまたは複数の共焦点zスタック画像を提供するサブステップと、
    を含み、
    1つまたは複数の3次元(3D)細胞クラスタを同定するステップが、前記広視野画像を用いて実行され、
    3D細胞クラスタの1つ又は複数を1つまたは複数の細胞に自動的にセグメンテーションするステップが、前記共焦点zスタック画像を用いて実行される、
    方法。
JP2011500225A 2008-03-21 2009-03-19 高密度細胞集団の自動セグメンテーション方法およびシステム Active JP5602717B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US12/053,295 2008-03-21
US12/053,295 US8712139B2 (en) 2008-03-21 2008-03-21 Methods and systems for automated segmentation of dense cell populations
PCT/EP2009/053244 WO2009115571A1 (en) 2008-03-21 2009-03-19 Methods and systems for automated segmentation of dense cell populations

Publications (2)

Publication Number Publication Date
JP2011515673A JP2011515673A (ja) 2011-05-19
JP5602717B2 true JP5602717B2 (ja) 2014-10-08

Family

ID=40796244

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2011500225A Active JP5602717B2 (ja) 2008-03-21 2009-03-19 高密度細胞集団の自動セグメンテーション方法およびシステム

Country Status (6)

Country Link
US (1) US8712139B2 (ja)
EP (1) EP2252974B1 (ja)
JP (1) JP5602717B2 (ja)
CN (1) CN101978391A (ja)
CA (1) CA2718934A1 (ja)
WO (1) WO2009115571A1 (ja)

Families Citing this family (34)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8768016B2 (en) 2009-06-19 2014-07-01 Carestream Health, Inc. Method for quantifying caries
US8269827B2 (en) * 2009-09-29 2012-09-18 General Electric Company System and methods for mapping fluorescent images into a bright field color space
US8908936B2 (en) * 2009-10-14 2014-12-09 Carestream Health, Inc. Method for extracting a carious lesion area
US8687859B2 (en) 2009-10-14 2014-04-01 Carestream Health, Inc. Method for identifying a tooth region
US9235901B2 (en) * 2009-10-14 2016-01-12 Carestream Health, Inc. Method for locating an interproximal tooth region
WO2011087778A1 (en) * 2009-12-22 2011-07-21 The Children's Hospital Of Philadelphia Automated quantitative multidimensional volumetric analysis and visualization
GB201002855D0 (en) * 2010-02-19 2010-04-07 Materialise Dental Nv Method and system for achiving subject-specific, three-dimensional information about the geometry of part of the body
GB2481782A (en) * 2010-06-21 2012-01-11 Optimized Systems And Solutions Ltd Asset health monitoring
ES2644243T3 (es) * 2011-02-01 2017-11-28 Nano3D Biosciences, Inc. Ensayo de viabilidad celular en 3D
US9070004B2 (en) * 2012-05-03 2015-06-30 General Electric Company Automatic segmentation and characterization of cellular motion
US9589360B2 (en) * 2012-07-23 2017-03-07 General Electric Company Biological unit segmentation with ranking based on similarity applying a geometric shape and scale model
US9894269B2 (en) 2012-10-31 2018-02-13 Atheer, Inc. Method and apparatus for background subtraction using focus differences
CN104884632B (zh) * 2012-12-27 2018-01-02 索尼公司 细胞分析系统及细胞分析方法
US20140307930A1 (en) * 2013-04-15 2014-10-16 Drvision Technologies Llc Teachable object contour mapping for biology image region partition
US20140307939A1 (en) * 2013-04-15 2014-10-16 Drvision Technologies Llc Teachable object contour mapping for biology image region partition
US8995740B2 (en) * 2013-04-17 2015-03-31 General Electric Company System and method for multiplexed biomarker quantitation using single cell segmentation on sequentially stained tissue
CN103489187A (zh) * 2013-09-23 2014-01-01 华南理工大学 基于质量检测的宫颈lct图像中细胞核的分割方法
CN105683355B (zh) 2013-11-08 2018-07-06 索尼公司 细胞分析系统、细胞分析程序和细胞分析方法
US9778263B2 (en) * 2013-11-13 2017-10-03 General Electric Company Quantitative in situ characterization of biological samples
CN104680170B (zh) * 2013-11-26 2018-02-06 富士通株式会社 对图像中包含的对象进行分类的方法和装置
JP6257294B2 (ja) 2013-12-04 2018-01-10 オリンパス株式会社 顕微鏡装置
WO2015082340A1 (en) * 2013-12-04 2015-06-11 Koninklijke Philips N.V. Fluorescence image processing apparatus and method
US9558394B2 (en) * 2014-03-10 2017-01-31 Case Western Reserve University Histogram of hosoya index (HoH) features for quantitative histomorphometry
US9235903B2 (en) 2014-04-03 2016-01-12 Sony Corporation Image processing system with automatic segmentation and method of operation thereof
US9804392B2 (en) 2014-11-20 2017-10-31 Atheer, Inc. Method and apparatus for delivering and controlling multi-feed data
EP3286337A4 (en) * 2015-04-23 2018-12-12 Cedars-Sinai Medical Center Automated delineation of nuclei for three dimensional (3-d) high content screening
US9881380B2 (en) * 2016-02-16 2018-01-30 Disney Enterprises, Inc. Methods and systems of performing video object segmentation
CN106056611B (zh) * 2016-06-03 2019-01-11 上海交通大学 基于区域信息和边缘信息的水平集图像分割方法及其系统
WO2018089783A1 (en) * 2016-11-11 2018-05-17 University Of South Florida Automated stereology for determining tissue characteristics
US11443426B2 (en) * 2018-01-18 2022-09-13 Nantomics, Llc Real-time whole slide pathology image cell counting
CN108537783B (zh) * 2018-04-02 2021-11-09 福建师范大学福清分校 一种基于em算法与贪心策略的红细胞序列样本分割方法
CN110288582A (zh) * 2019-06-26 2019-09-27 电子科技大学 一种细胞核的准确分割方法
CN111750781B (zh) * 2020-08-04 2022-02-08 润江智能科技(苏州)有限公司 一种基于ccd的自动测试系统及其方法
CN113052859A (zh) * 2021-04-20 2021-06-29 哈尔滨理工大学 基于自适应种子点密度聚类超像素分割方法

Family Cites Families (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5263120A (en) * 1991-04-29 1993-11-16 Bickel Michael A Adaptive fast fuzzy clustering system
US5790692A (en) 1994-09-07 1998-08-04 Jeffrey H. Price Method and means of least squares designed filters for image segmentation in scanning cytometry
US20020186874A1 (en) 1994-09-07 2002-12-12 Jeffrey H. Price Method and means for image segmentation in fluorescence scanning cytometry
US6219440B1 (en) 1997-01-17 2001-04-17 The University Of Connecticut Method and apparatus for modeling cellular structure and function
US6416959B1 (en) 1997-02-27 2002-07-09 Kenneth Giuliano System for cell-based screening
US6157733A (en) * 1997-04-18 2000-12-05 At&T Corp. Integration of monocular cues to improve depth perception
FR2776798A1 (fr) 1998-03-24 1999-10-01 Philips Electronics Nv Procede de traitement d'images incluant des etapes de segmentation d'une image multidimensionnelle et appareil d'imagerie medicale utilisant ce procede
FR2777374B1 (fr) * 1998-04-10 2000-05-12 Commissariat Energie Atomique Procede de recalage de deux images differentes d'un meme objet
US6221596B1 (en) 1999-05-17 2001-04-24 Motobit Ltd. System and method for identifying and isolating rare cells from a mixed population of cells
US7546210B2 (en) 2000-06-08 2009-06-09 The Regents Of The University Of California Visual-servoing optical microscopy
JP4937457B2 (ja) 2001-03-01 2012-05-23 オリンパス株式会社 顕微鏡制御装置、顕微鏡制御システム、顕微鏡の制御方法、プログラム、及び記録媒体
DE10157475A1 (de) * 2001-11-23 2003-06-18 Hans-Hermann Gerdes Verfahren und Mittel zur Beeinflussung von interzellulärer Kommunikation und interzellulären Organellentransport
US7756305B2 (en) 2002-01-23 2010-07-13 The Regents Of The University Of California Fast 3D cytometry for information in tissue engineering
US8116982B2 (en) 2002-03-13 2012-02-14 Vala Sciences, Inc. System and method for automatic color segmentation and minimum significant response for measurement of fractional localized intensity of cellular compartments
GB0211068D0 (en) 2002-05-14 2002-06-26 Amersham Biosciences Uk Ltd Method for assessing biofilms
EP1713899A2 (de) * 2004-02-11 2006-10-25 Technische Universität München Verfahren und vorrichtung zur charakterisierung von zellen, zellverbänden und/oder gewebe
US7711174B2 (en) 2004-05-13 2010-05-04 The Charles Stark Draper Laboratory, Inc. Methods and systems for imaging cells
WO2006047502A2 (en) * 2004-10-25 2006-05-04 Brigham And Women's Hospital Automated segmentation, classification and tracking of cell nuclei in time-lapse microscopy
US7394933B2 (en) 2004-11-08 2008-07-01 Siemens Medical Solutions Usa, Inc. Region competition via local watershed operators
GB0503629D0 (en) * 2005-02-22 2005-03-30 Durand Technology Ltd Method and apparatus for automated analysis of biological specimen
US20090081775A1 (en) * 2005-05-25 2009-03-26 Stiftesen Unversitetsforskning Bergen Microscope system and screening method for drugs, physical therapies and biohazards
US20070135999A1 (en) * 2005-12-13 2007-06-14 Applied Spectral Imaging Ltd. Method, apparatus and system for characterizing pathological specimen
GB2435925A (en) 2006-03-09 2007-09-12 Cytokinetics Inc Cellular predictive models for toxicities
FR2909474B1 (fr) * 2006-12-04 2009-05-15 Canon Kk Procede et dispositif de codage d'images numeriques et procede et dispositif de decodage d'images numeriques codees
US7940978B2 (en) * 2007-06-05 2011-05-10 General Electric Company Automatic characterization of cellular motion
US20110091081A1 (en) * 2009-10-16 2011-04-21 General Electric Company Method and system for analyzing the expression of biomarkers in cells in situ in their tissue of origin

Also Published As

Publication number Publication date
JP2011515673A (ja) 2011-05-19
CA2718934A1 (en) 2009-09-24
CN101978391A (zh) 2011-02-16
US20090238457A1 (en) 2009-09-24
US8712139B2 (en) 2014-04-29
EP2252974B1 (en) 2020-03-18
EP2252974A1 (en) 2010-11-24
WO2009115571A1 (en) 2009-09-24

Similar Documents

Publication Publication Date Title
JP5602717B2 (ja) 高密度細胞集団の自動セグメンテーション方法およびシステム
JP7231631B2 (ja) 腫瘍空間異質性およびインターマーカ異質性の計算方法
US11842483B2 (en) Systems for cell shape estimation
EP3486836B1 (en) Image analysis method, apparatus, program, and learned deep learning algorithm
Di Cataldo et al. Computer-aided techniques for chromogenic immunohistochemistry: status and directions
CN111448569B (zh) 存储和检索数字病理学分析结果的方法
JP2021503666A (ja) 単一チャネル全細胞セグメンテーションのためのシステム及び方法
JP5496906B2 (ja) 画像から自己蛍光を除去する方法及びシステム
US20070135999A1 (en) Method, apparatus and system for characterizing pathological specimen
US7817841B2 (en) Time-lapse cell cycle analysis of unstained nuclei
CN113574534A (zh) 使用基于距离的相似性标签的机器学习
JP2012508018A (ja) ゼブラフィッシュをスクリーニングするための、自動システムおよび方法
Höfener et al. Automated density-based counting of FISH amplification signals for HER2 status assessment
Moeder et al. Quantitative, fluorescence-based in-situ assessment of protein expression
JP2023534252A (ja) 細胞の診断および分析方法
Gao et al. Differential diagnosis of lung carcinoma with three-dimensional quantitative molecular vibrational imaging
Bapure Automated image analysis for nuclear morphometry using h&e and feulgen stains in prostate biopsies
US20210224510A1 (en) Method and computer program for clustering large multiplexed spatially resolved data of a biological sample
Saeed-Vafa et al. Practical applications of digital pathology
Tsakiroglou et al. Quantifying cell-type interactions and their spatial patterns as prognostic biomarkers in follicular lymphoma
Sabata Digital pathology imaging-The next frontier in medical imaging
Qidwai et al. Color-based fuzzy classifier for automated detection of cancerous cells in histopathological analysis
Grimes Image processing and analysis methods in quantitative endothelial cell biology
Santamaria-Pang et al. Epithelial cell segmentation via shape ranking
Di Development of automatic image analysis methods for high-throughput and high-content screening

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20120222

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20121211

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20130607

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20131023

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140115

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20140207

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20140502

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140509

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20140513

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20140722

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20140820

R150 Certificate of patent or registration of utility model

Ref document number: 5602717

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250