JP7071047B2 - 自動非侵襲細胞活性追跡のための装置、方法、およびシステム - Google Patents

自動非侵襲細胞活性追跡のための装置、方法、およびシステム Download PDF

Info

Publication number
JP7071047B2
JP7071047B2 JP2015560372A JP2015560372A JP7071047B2 JP 7071047 B2 JP7071047 B2 JP 7071047B2 JP 2015560372 A JP2015560372 A JP 2015560372A JP 2015560372 A JP2015560372 A JP 2015560372A JP 7071047 B2 JP7071047 B2 JP 7071047B2
Authority
JP
Japan
Prior art keywords
cells
cell
image
images
hypothesis
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2015560372A
Other languages
English (en)
Other versions
JP2016509844A (ja
Inventor
ファーシド ムッサビ,
ユー ワン,
ピーター ローレンツェン,
スティーブン ゴールド,
Original Assignee
アレス トレイディング ソシエテ アノニム
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by アレス トレイディング ソシエテ アノニム filed Critical アレス トレイディング ソシエテ アノニム
Publication of JP2016509844A publication Critical patent/JP2016509844A/ja
Application granted granted Critical
Publication of JP7071047B2 publication Critical patent/JP7071047B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N33/00Investigating or analysing materials by specific methods not covered by groups G01N1/00 - G01N31/00
    • G01N33/48Biological material, e.g. blood, urine; Haemocytometers
    • G01N33/50Chemical analysis of biological material, e.g. blood, urine; Testing involving biospecific ligand binding methods; Immunological testing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/70Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/77Processing image or video features in feature spaces; using data integration or data reduction, e.g. principal component analysis [PCA] or independent component analysis [ICA] or self-organising maps [SOM]; Blind source separation
    • G06V10/774Generating sets of training patterns; Bootstrap methods, e.g. bagging or boosting
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/21Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
    • G06F18/214Generating training patterns; Bootstrap methods, e.g. bagging or boosting
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/24Classification techniques
    • G06F18/241Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches
    • G06F18/2415Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches based on parametric or probabilistic models, e.g. based on likelihood ratio or false acceptance rate versus a false rejection rate
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/285Selection of pattern recognition techniques, e.g. of classifiers in a multi-classifier system
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/60Type of objects
    • G06V20/69Microscopic objects, e.g. biological cells or cellular parts
    • G06V20/695Preprocessing, e.g. image segmentation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/60Type of objects
    • G06V20/69Microscopic objects, e.g. biological cells or cellular parts
    • G06V20/698Matching; Classification

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • General Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Data Mining & Analysis (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Health & Medical Sciences (AREA)
  • Evolutionary Computation (AREA)
  • Biomedical Technology (AREA)
  • Molecular Biology (AREA)
  • Artificial Intelligence (AREA)
  • Multimedia (AREA)
  • Evolutionary Biology (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Medical Informatics (AREA)
  • Databases & Information Systems (AREA)
  • Computing Systems (AREA)
  • Probability & Statistics with Applications (AREA)
  • Chemical & Material Sciences (AREA)
  • Urology & Nephrology (AREA)
  • Hematology (AREA)
  • Immunology (AREA)
  • Microbiology (AREA)
  • Pathology (AREA)
  • Biotechnology (AREA)
  • Food Science & Technology (AREA)
  • Medicinal Chemistry (AREA)
  • Analytical Chemistry (AREA)
  • Biochemistry (AREA)
  • Cell Biology (AREA)
  • Apparatus Associated With Microorganisms And Enzymes (AREA)
  • Measuring Or Testing Involving Enzymes Or Micro-Organisms (AREA)
  • Image Analysis (AREA)
  • Investigating Or Analysing Biological Materials (AREA)
  • Image Processing (AREA)

Description

(関連出願の引用)
本願は、米国仮特許出願第61/785,179号(2013年3月14日出願、名称「APPARATUS,METHOD,AND SYSTEM FOR AUTOMATED,NON-INVASIVE CELL ACTIVITY TRACKING」);米国仮特許出願第61/785,199号(2013年3月14日出願、名称「APPARATUS,METHOD,AND SYSTEM FOR HUMAN EMBRYO VIABILITY SCREENING BASED ON AUTOMATED CONFIDENCE ESTIMATION OF ASSESSMENT OF CELL ACTIVITY」);米国仮特許出願第61/770,998号(2013年2月28日出願、名称「UNIFIED FRAMEWORK FOR AUTOMATED HUMAN EMBRYO TRACKING」);米国仮特許出願第61/785,170号(2013年3月14日出願、名称「APPARATUS,METHOD,AND SYSTEM FOR IMAGE-BASED HUMAN EMBRYO CELL CLASSIFICATION」);米国仮特許出願第61/785,216号(2013年3月14日出願、名称「APPARATUS,METHOD,AND SYSTEM FOR IMAGE-BASED HUMAN EMBRYO OUTCOME DETERMINATION」);および米国仮特許出願第61/771,000号(2013年2月28日出願、名称「AUTOMATED EMBRYO STAGE CLASSIFICATION IN TIME-LAPSE MICROSCOPY VIDEO OF EARLY HUMAN EMBRYO DEVELOPMENT」)に対する優先権を主張する。上記出願の各々の内容は、それらの全体が参照により本明細書に引用される。
(発明の分野)
本発明は、概して、画像ベースの細胞活性評価および/またはヒト胚生存率スクリーニングに関する。より具体的には、本発明は、限定されないが、胚、卵母細胞、および/または同等物等の多能性細胞に関連付けられる特性を決定するための細胞活性追跡に関する。加えて、または代替として、本発明は、順に、ヒト胚生存率スクリーニングに採用することができる、細胞活性の査定の信頼推定に関する。
不妊症は、出産年齢の夫婦の10%~15%に影響を及ぼす、一般的な健康問題である。米国だけでも、2006年に約140,000サイクルの体外受精(IVF)が行われた(cdc.gov/art)。これは、着床および出産予定日までの発育の可変であり、多くの場合、不明瞭な可能性とともに、年間100万個より多くの胚の培養をもたらした。IVFに続く1サイクルあたりの生児出生率が、わずか29%であった一方で、生児出生の平均30%は、多胎妊娠をもたらした(cdc.gov/art)。多胎妊娠は、流産、早産、低出生率等の母親および胎児の両方にとって十分に証明された有害転帰を有する。IVFの失敗の潜在的な原因は多様であるが、1978年のIVFの導入以来、主要な課題のうちの1つは、移入に最も好適であり、満期妊娠をもたらす可能性が最も高い胚を識別することとなっている。従来、IVF診療所では、一様なサイズの単核割球の存在および細胞断片化の程度等の単純な形態学的観察によって、ヒト胚生存率が査定されている(Rijinders P M,Jansen C A M.(1998) Hum Reprod 13:2869-73(非特許文献1);Milki A A、他(2002) Fertil Steril 77:1191-5(非特許文献2))。つい最近では、胚の質を査定するために、(第5日目での胞胚期までの)胚の拡張培養、および着床前遺伝子診断(PGD)を介した染色体状態の分析等の追加の方法も使用されている(Milki A、他(2000) Fertil Steril 73:126-9;Fragouli E,(2009) Fertil Steril June 21 [印刷に先立つ電子出版];El-Toukhy T、他(2009) Hum Reprod 6:20、Vanneste E、他(2009) Nat Med 15:577-83)。しかしながら、これらの方法の潜在的なリスクもまた、それらが培養期間を延長させ、胚の完全性を妨害するという点で存在する(Manipalviratn S、他(2009) Fertil Steril 91:305-15、Mastenbroek S、他(2007) N Engl J.Med.357:9-17)。
近年、経時的撮像が、初期胚発生を観察するため、および初期発生を潜在的な胚生存率に相関させるための有用なツールであり得ることが示されている。いくつかの方法は、卵細胞質内精子注入法(ICSI)に続いて、ヒト胚発生を監視するために、経時的撮像を使用している(Nagy et al.(1994) Human Reproduction.9(9):1743-1748;Payne et al.(1997) Human Reproduction.12:532-541(非特許文献3))。極体押出および前核形成が分析され、それは、第3日目に良好な形態と相関した。しかしながら、いかなるパラメータも、胚盤胞形成または妊娠転帰と相関しなかった。他の方法は、第1の卵割の開始を、ヒト胚の生存率を予測する指標として見なしている(Fenwick、他(2002) Human Reproduction,17:407-412;Lundin、他(2001) Human Reproduction 16:2652-2657)。しかしながら、これらの方法は、細胞質分裂の持続時間または初期分裂間の時間間隔の重要性を認識しない。
他の方法は、初期胚発生中に細胞分裂のタイミングおよび程度を測定するために、経時的撮像を使用している(国際公開WO/2007/144001号(特許文献1))。しかしながら、これらの方法は、発生能、形態学的挙動、分子および後成的プログラム、ならびに移入を取り囲むタイミングおよびパラメータに関して、ヒト胚とは実質的に異なる、ウシ胚の経時的撮像のための基本および一般的方法のみを開示する。例えば、ウシ胚は、ヒト胚と比較して、着床するために大幅により長くかかる(それぞれ、30日および9日)(Taft,(2008) Theriogenology 69(1):10-16)。また、ヒト胚生存率を予測し得る、いかなる特定の撮像パラメータまたは時間間隔も開示されていない。
経時的撮像は、初期ヒト胚発生の自動分析との関連で有望であるが、有意な発生および/または性能の障害物が、これらの既存の方法によって対処されないままである。初期ヒト胚発生の性質、タイミング、および他の基準は、発生挙動を予測するための課題を提供する。そのような課題は、画像処理を介して、細胞分裂の数、細胞分裂のタイミング、ならびに発生中の種々の時点での個々の細胞および/または接合体の健康を予測すること、および/または別様に決定することを含むことができる。具体的には、これらの決定の各々の基礎を形成する、個々の細胞の自動追跡は、明確な視覚特徴の欠如、欠落した、および/または誤った細胞境界、細胞分裂および/または細胞移動による細胞塊の変化する局所構造、細胞形状の変形等により発生し得るような、生体画像の本質的に雑音が多い性質により、困難であり得る。次いで、そのような自動追跡からの任意のさらなる推測は、追跡誤差を受け継ぎ得る。
例えば、自動追跡を介して得られる各画像内の細胞の数が、細胞分裂事象の時間を推定するための基礎であるときに、個々の細胞追跡誤差が、さらに伝搬/拡大され得る。別の実施例として、将来の胚生存率の可能性を決定するために、細胞の推定数および/または分裂タイミング情報が使用されるとき、この自動決定はまた、誤りがあり得、特定の胚を使用してIVFを続行するかどうか等の誤った決定につながり得る。
これを背景にして、本明細書で説明される、自動非侵襲細胞活性追跡のため、および/または細胞活性の査定の信頼推定のための装置、方法、およびシステムを開発する必要性が生じる。
国際公開第2007/144001号
Rijinders P M,Jansen C A M.(1998) Hum Reprod 13:2869-73 Milki A A、他(2002) Fertil Steril 77:1191-5 Nagy、他(1994) Human Reproduction.9(9):1743-1748;Payne、他(1997) Human Reproduction.12:532-541
細胞活性の自動非侵襲評価および/または細胞活性の査定の信頼推定のための装置、方法、およびシステムが提供される。
一実施形態では、装置は、画像に示されている1つ以上の細胞を特徴付ける複数の仮説からある仮説を選択するように構成されている仮説選択モジュールを含む。複数の仮説の各々は、画像に示されている1つ以上の細胞の幾何学的特徴に基づく、細胞のうちの1つ以上の細胞の推測特性を含む。仮説選択モジュールは、メモリまたは処理デバイスのうちの少なくとも1つにおいて実装される。
一実施形態では、細胞活性の自動非侵襲評価のための方法は、画像に示されている1つ以上の細胞を特徴付ける複数の仮説を生成することを含む。複数の仮説を生成することは、画像に示されている1つ以上の細胞の幾何学的特徴に基づいて、1つ以上の細胞の推測特性を決定することを含む。本方法はさらに、画像に関連付けられる複数の仮説からある仮説を選択することを含む。
一実施形態では、細胞活性の自動非侵襲評価のためのシステムは、細胞活性の自動評価のために構成されているコンピュータ装置を含む。コンピュータ装置は、複数の仮説が、画像に示されている1つ以上の細胞の幾何学的特徴に基づく、細胞のうちの1つ以上の細胞の推測特性を含むように、画像に示されている1つ以上の細胞を特徴付ける複数の仮説を生成するように構成される。コンピュータ装置はさらに、画像に関連付けられる複数の仮説からある仮説を選択するように構成される。
一実施形態では、自動信頼推定のための装置は、複数の仮説のうちの1つ以上の仮説の可能性の推定値に基づいて、複数の仮説に関連付けられている信頼尺度を決定するように構成されている信頼モジュールを含む。複数の仮説の各々は、複数の画像のうちの関連する1つ以上の画像に示されている1つ以上の細胞を特徴付ける。本装置はまた、信頼尺度に基づいて、複数の仮説のうちの少なくとも1つの信頼性を決定するように構成されている信頼性決定モジュールも含む。信頼モジュールおよび信頼性決定モジュールのうちの少なくとも1つは、メモリまたは処理デバイスのうちの少なくとも1つにおいて実装される。
一実施形態では、自動信頼推定のための方法は、複数の仮説のうちの1つ以上の仮説の可能性の推定値に基づいて、複数の仮説に関連付けられている信頼尺度を決定することを含む。複数の仮説の各々は、複数の画像のうちの関連する1つ以上の画像に示されている1つ以上の細胞を特徴付ける。本方法はまた、信頼尺度に基づいて、複数の仮説のうちの少なくとも1つの信頼性を決定することも含む。
一実施形態では、細胞活性の自動評価のためのシステムは、細胞活性の自動評価のために構成されているコンピュータ装置を含む。コンピュータ装置は、複数の仮説のうちの1つ以上の仮説の可能性の推定値に基づいて、複数の仮説に関連付けられている信頼尺度を決定するように構成される。複数の仮説の各々は、複数の画像のうちの関連する1つ以上の画像に示されている1つ以上の細胞を特徴付ける。コンピュータ装置はさらに、信頼尺度に基づいて、複数の仮説の信頼性を決定するように構成される。
本発明の他の側面および実施形態も考慮される。前述の概要および以下の詳細な説明は、本発明をいかなる特定の実施形態にも制限するように意図されていないが、本発明のいくつかの実施形態を説明するように意図されているにすぎない。
本発明はさらに、例えば、以下を提供する。
(項目1) 細胞活性の自動非侵襲評価のための装置であって、前記装置は、
画像に示されている1つ以上の細胞を特徴付ける複数の仮説からある仮説を選択するように構成されている仮説選択モジュールを備え、前記複数の仮説の各々は、前記画像に示されている前記1つ以上の細胞の幾何学的特徴に基づく、前記1つ以上の細胞の推測特性を含み、
前記仮説選択モジュールは、メモリまたは処理デバイスのうちの少なくとも1つにおいて実装されている、装置。
(項目2) 前記仮説選択モジュールは、前記画像に示されている前記1つ以上の細胞の前記幾何学的特徴との前記推測特性の適合性に基づいて、前記仮説を選択するように構成されている、項目1に記載の装置。
(項目3) 前記幾何学的特徴は、前記1つ以上の細胞の各々に関連付けられている境界情報を含む、項目1に記載の装置。
(項目4) 前記境界情報は、1つ以上の境界区画を含む、項目3に記載の装置。
(項目5) 前記画像に基づいて、前記1つ以上の境界区画を決定するように構成されている境界検出モジュールをさらに備え、前記境界検出モジュールは、区画生成を行って、前記1つ以上の境界区画を決定するように構成されている、項目4に記載の装置。
(項目6) 前記画像に基づいて、前記1つ以上の境界区画を決定するように構成されている境界検出モジュールをさらに備え、前記境界検出モジュールは、第1の境界区画および第2の境界区画を前記1つ以上の境界区画に含まれる第3の境界区画に合併するように構成されている、項目1に記載の装置。
(項目7) 前記1つ以上の細胞は、多細胞胚に含まれる、項目1に記載の装置。
(項目8) 前記1つ以上の細胞は、ヒト胚、1つ以上の卵母細胞、あるいは1つ以上の多能性細胞に含まれる、項目1に記載の装置。
(項目9) 前記幾何学的特徴は、前記1つ以上の細胞の各々に関連付けられている1つ以上の境界区画を含み、前記装置は、前記1つ以上の細胞の各々の表現を前記複数の仮説の各々によって特徴付けられるような前記関連する1つ以上の境界区画にマップするように構成されている、マッピングモジュールをさらに備えている、項目1に記載の装置。
(項目10) 前記境界区画は、前記1つ以上の境界区画と、第1の境界区画とを含み、
前記マッピングモジュールは、前記第1の境界区画を前記細胞のうちのいずれにも関連付けられていないヌル識別子にマップするように構成されている、項目9に記載の装置。
(項目11) 前記仮説選択モジュールは、前記選択された仮説に関連付けられている前記推測特性に基づいて、前記1つ以上の細胞の特性を決定するように構成されている、項目1に記載の装置。
(項目12) 前記仮説選択モジュールによる前記1つ以上の細胞の前記特性の決定を増補するように構成されている分類モジュールをさらに備えている、項目11に記載の装置。
(項目13) 前記仮説選択モジュールによる前記1つ以上の細胞の前記特性の決定を増補するように構成されている画像類似性決定モジュールをさらに備えている、項目11に記載の装置。
(項目14) 前記1つ以上の細胞の前記特性に基づいて、第1の細胞質分裂の持続時間、第1細胞質分裂と第2細胞質分裂との間の時間間隔、第2細胞質分裂と第3細胞質分裂との間の時間間隔、第1の有糸分裂と第2の有糸分裂との間の時間間隔、第2の有糸分裂と第3の有糸分裂との間の時間間隔、受精から5つの細胞を有する胚までの時間間隔、および配偶子合体から前記第1の細胞質分裂までの時間間隔のうちの1つ以上のものを決定するように構成されている細胞活性パラメータ決定モジュールをさらに備えている、項目11に記載の装置。
(項目15) 前記1つ以上の細胞の前記特性に基づいて、女性のヒト対象への着床のための前記1つ以上の細胞の発生能力の指標を表示するように構成されている表示モジュールをさらに備えている、項目11に記載の装置。
(項目16) 前記1つ以上の細胞の前記推測特性は、前記1つ以上の細胞の推測数、および前記1つ以上の細胞の推測幾何学形状のうちの少なくとも1つを含み、
前記1つ以上の細胞の前記特性は、前記1つ以上の細胞の数、および前記1つ以上の細胞の幾何学形状のうちの少なくとも1つを含む、項目11に記載の装置。
(項目17)
前記1つ以上の細胞の前記推測幾何学形状は、前記1つ以上の細胞の推測形状と、前記1つ以上の細胞の推測配列とを含み、
前記1つ以上の細胞の前記幾何学形は、前記1つ以上の細胞の形状と、前記1つ以上の細胞の配列とを含む、項目16に記載の装置。
(項目18) 前記1つ以上の細胞の前記数は、前記選択された仮説に関連付けられている前記推測数と同一であり、
前記1つ以上の細胞の前記幾何学形状は、前記選択された仮説に関連付けられている前記1つ以上の細胞の前記推測幾何学形状と同一である、項目16に記載の装置。
(項目19) 前記仮説選択モジュールは、前記複数の仮説の各々に関連付けられている前記1つ以上の細胞の前記推測幾何学形状と、前記画像に示されている前記1つ以上の細胞の前記関連幾何学的特徴との間の適合性に基づいて、前記複数の仮説から前記仮説を選択するように構成されている、項目17に記載の装置。
(項目20) 前記画像に示されている前記1つ以上の細胞の前記関連幾何学的特徴に基づいて、前記複数の仮説を生成するように構成されている仮説生成モジュールをさらに備え、前記仮説生成モジュールは、メモリまたは処理デバイスのうちの少なくとも1つにおいて実装されている、項目1に記載の装置。
(項目21) 前記仮説生成モジュールは、前記画像に示されている前記1つ以上の細胞を特徴付ける予備仮説を生成するように構成され、かつ前記画像に示されている前記1つ以上の細胞の前記幾何学的特徴に基づいて、前記予備仮説を精緻化して、前記複数の仮説のうちの1つ以上の仮説を取得するように構成されている、項目20に記載の装置。
(項目22) 前記予備仮説は、複数の第1の形状を含み、前記複数の第1の形状の各々は、第1の形状パラメータ値によって画定され、前記1つ以上の細胞の各々は、前記複数の第1の形状のうちの関連するものによって特徴付けられ、
前記仮説生成モジュールは、前記画像に示されている前記1つ以上の細胞の前記関連幾何学的特徴への複数の第2の形状の各々の適合に基づいて、前記予備仮説を精緻化するように構成されている、項目21に記載の装置。
(項目23) 前記複数の第1の形状の各々、および前記複数の第2の形状の各々は、楕円である、項目22に記載の装置。
(項目24) 前記複数の第1の形状の各々、および前記複数の第2の形状の各々は、bスプラインである、項目22に記載の装置。
(項目25) 前記画像に基づいて、前記1つ以上の細胞の各々に関連付けられている境界情報を決定するように構成されている境界検出モジュールをさらに備え、
前記境界検出モジュールは、前記細胞の一連の時間連続的な画像から前記境界情報を決定するように構成され、
前記画像は、前記一連の時間連続的な画像に含まれる第1の画像であり、
前記仮説生成モジュールは、以前に生成された仮説を修正することによって、前記予備仮説を決定するように構成され、前記以前に生成された仮説は、前記一連の時間連続的な画像に含まれる第2の画像に示されるような前記細胞を特徴付け、前記第2の画像は、前記第1の画像に先立つ、項目21に記載の装置。
(項目26) 前記画像は、第1の画像であり、
前記仮説選択モジュールは、前記第1の画像を含む一連の画像にわたる最も可能性の高い一連の仮説の決定に基づいて、前記第1の画像に示されるような前記細胞を特徴付ける前記複数の仮説から前記仮説を選択するように構成されている、項目1に記載の装置。
(項目27) 前記一連の画像は、一連の時間連続的な画像であり、
前記仮説選択モジュールは、前記一連の時間連続的な画像のうちの2つ以上の画像にわたって、前記1つ以上の細胞の前記推測特性が、どのように変動することができるかを制限する制約を考慮して、前記一連の時間連続的な画像にわたって前記最も可能性の高い一連の仮説を決定するように構成されている、項目26に記載の装置。
(項目28) 前記1つ以上の細胞の前記推測特性は、前記1つ以上の細胞の推測数を含む、項目27に記載の装置。
(項目29) 前記制約は、
前記1つ以上の細胞の前記推測数が、前記一連の時間連続的な画像にわたって経時的に減少していないこと、
前記1つ以上の細胞の前記推測数の変化後、前記1つ以上の細胞の前記推測数が、前記一連の時間連続的な画像の第1のサブセットにわたって、ある期間で安定していること、および
前記1つ以上の細胞の前記推測数が、前記一連の時間連続的な画像の第2のサブセットにわたって、経時的にわずか1だけ減少し、次いで、前記第2のサブセットの終了時に増加すること
から成る群から選択される、項目28に記載の装置。
(項目30) 細胞活性の自動非侵襲評価のための方法であって、前記方法は、
画像に示されている1つ以上の細胞を特徴付ける複数の仮説を生成することであって、前記複数の仮説を生成することは、前記画像に示されている前記1つ以上の細胞の幾何学的特徴に基づいて、前記1つ以上の細胞の推測特性を決定することを含む、ことと、
前記画像に関連付けられている前記複数の仮説からある仮説を選択することと
を含む、方法。
(項目31) 前記仮説を選択することは、前記画像に示されている前記1つ以上の細胞の前記幾何学的特徴との前記推測特性の適合性に基づく、項目30に記載の方法。
(項目32) 前記幾何学的特徴は、前記1つ以上の細胞の各々に関連付けられている境界情報を含む、項目30に記載の方法。
(項目33) 前記境界情報は、1つ以上の境界区画を含む、項目32に記載の方法。
(項目34) 前記1つ以上の細胞の各々に関連付けられている前記1つ以上の境界区画を決定することをさらに含む、項目33に記載の方法。
(項目35) 前記1つ以上の細胞の各々の前記1つ以上の境界区画を決定することは、区画生成を行うことを含む、項目34に記載の方法。
(項目36) 前記1つ以上の細胞の各々の前記1つ以上の境界区画を決定することは、第1の境界区画および第2の境界区画を前記1つ以上の細胞のうちの少なくとも1つの前記1つ以上の境界区画に含まれる第3の境界区画に合併することを含む、項目34に記載の方法。
(項目37) 前記1つ以上の細胞は、多細胞胚に含まれる、項目30に記載の方法。
(項目38) 前記1つ以上の細胞は、ヒト胚、1つ以上の卵母細胞、あるいは1つ以上の多能性細胞に含まれる、項目30に記載の方法。
(項目39) 前記幾何学的特徴は、前記1つ以上の細胞の各々に関連付けられている1つ以上の境界区画を含み、前記方法は、前記1つ以上の細胞の各々の表現を前記1つ以上の境界区画にマップすることをさらに含む、項目30に記載の方法。
(項目40) 第1の境界区画を前記細胞のうちのいずれにも関連付けられていないヌル識別子にマップすることをさらに含み、前記境界区画は、前記1つ以上の細胞の各々にマップされる前記境界区画のうちの前記関連する1つ以上の境界区画と、前記第1の境界区画とを含む、項目39に記載の方法。
(項目41) 前記仮説に関連付けられている前記推測特性に基づいて、前記1つ以上の細胞の特性を決定することをさらに含む、項目30に記載の方法。
(項目42) 前記1つ以上の細胞の前記特性を決定することを増補するために、分類を行うことをさらに含む、項目41に記載の方法。
(項目43) 前記1つ以上の細胞の前記特性を決定することを増補するために、画像類似性決定を行うことをさらに含む、項目41に記載の方法。
(項目44) 前記1つ以上の細胞の前記特性に基づいて、第1の細胞質分裂の持続時間、第1細胞質分裂と第2細胞質分裂との間の時間間隔、第2細胞質分裂と第3細胞質分裂との間の時間間隔、第1の有糸分裂と第2の有糸分裂との間の時間間隔、第2の有糸分裂と第3の有糸分裂との間の時間間隔、受精から5つの細胞を有する胚までの時間間隔、および配偶子合体から前記第1の細胞質分裂までの時間間隔のうちの1つ以上のものを決定することをさらに含む、項目41に記載の方法。
(項目45) 前記1つ以上の細胞の前記特性に基づいて、女性のヒト対象への着床のための前記1つ以上の細胞の発生能力の指標を表示することをさらに含む、項目41に記載の方法。
(項目46) 前記1つ以上の細胞の前記推測特性は、前記1つ以上の細胞の推測数、および前記1つ以上の細胞の推測幾何学形状のうちの少なくとも1つを含み、
前記1つ以上の細胞の前記特性は、前記1つ以上の細胞の数、および前記1つ以上の細胞の幾何学形状のうちの少なくとも1つを含む、項目41に記載の方法。
(項目47) 前記1つ以上の細胞の前記推測幾何学形状は、前記1つ以上の細胞の推測形状と、前記1つ以上の細胞の推測配列とを含み、
前記1つ以上の細胞の前記幾何学形は、前記1つ以上の細胞の形状と、前記1つ以上の細胞の配列とを含む、項目46に記載の方法。
(項目48) 前記1つ以上の細胞の前記数は、前記仮説に関連付けられている前記推測数と同一であり、
前記1つ以上の細胞の前記幾何学形状は、前記仮説に関連付けられている前記1つ以上の細胞の前記推測幾何学形状と同一である、項目46に記載の方法。
(項目49) 前記複数の仮説から前記仮説を選択することは、前記複数の仮説の各々に関連付けられている前記1つ以上の細胞の前記推測幾何学形状と、前記画像に示されている前記1つ以上の細胞の前記関連幾何学的特徴との間の適合性に基づく、項目46に記載の方法。
(項目50) 前記1つ以上の細胞を特徴付ける予備仮説を生成することと、
前記画像に示されている前記1つ以上の細胞の前記関連幾何学的特徴に基づいて、前記複数の仮説のうちの1つ以上の仮説を取得するために、前記予備仮説を精緻化することと
をさらに含む、項目30に記載の方法。
(項目51) 前記予備仮説は、複数の第1の形状を含み、前記複数の第1の形状の各々は、第1の形状パラメータ値によって画定され、前記細胞の各々は、前記複数の第1の形状のうちの関連するものによって特徴付けられ、
前記予備仮説を精緻化することは、複数の第2の形状の各々を前記画像に示されている前記1つ以上の細胞の前記関連幾何学的特徴に適合させることを含む、項目50に記載の方法。
(項目52) 前記複数の第1の形状の各々、および前記複数の第2の形状の各々は、楕円である、項目51に記載の方法。
(項目53) 前記複数の第1の形状の各々、および前記複数の第2の形状の各々は、bスプラインである、項目51に記載の方法。
(項目54) 前記細胞の一連の時間連続的な画像から、前記1つ以上の細胞の各々に関連付けられている境界情報を決定することであって、前記画像は、前記一連の時間連続的な画像に含まれる第1の画像である、ことと、
以前に生成された仮説を修正することによって、前記予備仮説を生成することであって、前記以前に生成された仮説は、前記一連の時間連続的な画像に含まれる第2の画像に示されるような前記細胞を特徴付け、前記第2の画像は、前記第1の画像に先立つ、ことと
をさらに含む、項目50に記載の方法。
(項目55) 前記一連の時間連続的な画像は、一連の経時的画像である、項目54に記載の方法。
(項目56) 前記画像は、第1の画像であり、
前記第1の画像に示されている前記1つ以上の細胞を特徴付ける前記複数の仮説から前記仮説を選択することは、前記第1の画像を含む一連の画像にわたって最も可能性の高い一連の仮説を決定することを含む、項目30に記載の方法。
(項目57) 前記一連の画像は、一連の時間連続的な画像であり、
前記一連の時間連続的な画像にわたって前記最も可能性の高い一連の仮説を決定することは、前記一連の時間連続的な画像のうちの2つ以上の画像にわたって、前記1つ以上の細胞の前記推測特性が、どのように変動することができるかを制限する制約を考慮する、項目56に記載の方法。
(項目58) 前記制約は、
前記1つ以上の細胞の推測数が、前記一連の時間連続的な画像にわたって経時的に減少していないこと、
前記1つ以上の細胞の前記推測数の変化後、前記1つ以上の細胞の前記推測数が、前記一連の時間連続的な画像の第1のサブセットにわたって、ある期間で安定していること、および
前記1つ以上の細胞の前記推測数が、前記一連の時間連続的な画像の第2のサブセットにわたって、経時的にわずか1だけ減少し、次いで、前記第2のサブセットの終了時に増加することから成る群から選択される、項目57に記載の方法。
(項目59) 細胞活性の自動非侵襲評価のためのシステムであって、前記システムは、細胞活性の自動評価のために構成されているコンピュータ装置を備え、
前記コンピュータ装置は、
画像に示されている1つ以上の細胞の幾何学的特徴に基づいて、複数の仮説が前記1つ以上の細胞の推測特性を含むように、前記画像に示されている前記1つ以上の細胞を特徴付ける前記複数の仮説を生成することと、
前記画像に関連付けられている前記複数の仮説からある仮説を選択することと
を行うように構成されている、システム。
(項目60) 前記画像を取得するように構成されている撮像デバイスをさらに備えている、項目59に記載のシステム。
(項目61) 前記コンピュータ装置は、前記画像に示されている前記1つ以上の細胞の前記幾何学的特徴との前記推測特性の適合性に基づいて、前記仮説を選択するようにさらに構成されている、項目59に記載のシステム。
(項目62) 前記幾何学的特徴は、前記1つ以上の細胞の各々に関連付けられている境界情報を含む、項目59に記載のシステム。
(項目63) 前記境界情報は、1つ以上の境界区画を含む、項目62に記載のシステム。
(項目64) 前記コンピュータ装置は、前記1つ以上の細胞の各々に関連付けられている前記1つ以上の境界区画を決定するようにさらに構成されている、項目63に記載のシステム。
(項目65) 前記コンピュータ装置が前記1つ以上の細胞の各々の前記1つ以上の境界区画を決定するように構成されていることは、区画生成を行うように構成されていることを含む、項目64に記載のシステム。
(項目66) 前記コンピュータ装置が前記1つ以上の細胞の各々の前記1つ以上の境界区画を決定するように構成されていることは、第1の境界区画および第2の境界区画を前記1つ以上の細胞のうちの少なくとも1つの前記1つ以上の境界区画に含まれる第3の境界区画に合併するように構成されていることを含む、項目64に記載のシステム。
(項目67) 前記1つ以上の細胞は、多細胞胚に含まれる、項目59に記載のシステム。
(項目68) 前記1つ以上の細胞は、ヒト胚、1つ以上の卵母細胞、あるいは1つ以上の多能性細胞に含まれる、項目59に記載のシステム。
(項目69) 前記幾何学的特徴は、前記1つ以上の細胞の各々に関連付けられている1つ以上の境界区画を含み、
前記コンピュータ装置は、前記1つ以上の細胞の各々の表現を前記1つ以上の境界区画にマップするようにさらに構成されている、項目59に記載のシステム。
(項目70) 前記コンピュータ装置は、第1の境界区画を前記細胞のうちのいずれにも関連付けられていないヌル識別子にマップするようにさらに構成され、前記境界区画は、前記細胞の各々にマップされる前記境界区画のうちの前記関連する1つ以上の境界区画と、前記第1の境界区画とを含む、項目69に記載のシステム。
(項目71) 前記コンピュータ装置は、前記仮説に関連付けられている前記推測特性に基づいて、前記1つ以上の細胞の特性を決定するようにさらに構成されている、項目59に記載のシステム。
(項目72) 前記1つ以上の細胞の前記特性に基づいて、女性のヒト対象への着床のための前記1つ以上の細胞の発生能力の指標を表示するように構成されている表示デバイスをさらに備えている、項目71に記載のシステム。
(項目73) 前記コンピュータ装置は、分類を行って、前記1つ以上の細胞の前記特性の決定を増補するようにさらに構成されている、項目71に記載のシステム。
(項目74) 前記コンピュータ装置は、画像類似性決定を行って、前記1つ以上の細胞の前記特性の決定を増補するようにさらに構成されている、項目71に記載のシステム。
(項目75) 前記コンピュータ装置は、前記1つ以上の細胞の前記特性に基づいて、第1の細胞質分裂の持続時間、第1細胞質分裂と第2細胞質分裂との間の時間間隔、第2細胞質分裂と第3細胞質分裂との間の時間間隔、第1の有糸分裂と第2の有糸分裂との間の時間間隔、第2の有糸分裂と第3の有糸分裂との間の時間間隔、受精から5つの細胞を有する胚までの時間間隔、および配偶子合体から前記第1の細胞質分裂までの時間間隔のうちの1つ以上のものを決定するようにさらに構成されている、項目71に記載のシステム。
(項目76) 前記1つ以上の細胞の前記推測特性は、前記1つ以上の細胞の推測数、および前記1つ以上の細胞の推測幾何学形状のうちの少なくとも1つを含み、
前記1つ以上の細胞の前記特性は、前記1つ以上の細胞の数、および前記1つ以上の細胞の幾何学形状のうちの少なくとも1つを含む、項目71に記載のシステム。
(項目77) 前記1つ以上の細胞の前記推測幾何学形状は、前記1つ以上の細胞の推測形状と、前記1つ以上の細胞の推測配列とを含み、
前記1つ以上の細胞の前記幾何学形は、前記1つ以上の細胞の形状と、前記1つ以上の細胞の配列とを含む、項目72に記載のシステム。
(項目78) 前記コンピュータ装置が前記複数の仮説から前記仮説を選択するように構成されていることは、前記複数の仮説の各々に関連付けられている前記1つ以上の細胞の前記推測幾何学形状と、前記画像に示されている前記1つ以上の細胞の前記関連幾何学的特徴との間の適合性に基づく、項目72に記載のシステム。
(項目79) 前記1つ以上の細胞の前記数は、前記仮説に関連付けられている前記推測数と同一であり、
前記1つ以上の細胞の前記幾何学形状は、前記仮説に関連付けられている前記1つ以上の細胞の前記推測幾何学形状と同一である、項目72に記載のシステム。
(項目80) 前記コンピュータ装置は、
前記画像に示されている前記1つ以上の細胞を特徴付ける予備仮説を生成することと、
前記画像に示されている前記1つ以上の細胞の前記関連幾何学的特徴に基づいて、前記予備仮説を精緻化して、前記複数の仮説のうちの1つ以上の仮説を取得することと
を行うようにさらに構成されている、項目59に記載のシステム。
(項目81) 前記予備仮説は、複数の第1の形状を含み、前記複数の第1の形状の各々は、第1の形状パラメータ値によって画定され、前記細胞の各々は、前記複数の第1の形状のうちの関連するものによって特徴付けられ、
前記コンピュータ装置が前記予備仮説を精緻化するように構成されていることは、複数の第2の形状の各々を前記画像に示されている前記1つ以上の細胞の前記関連幾何学的特徴に適合させるように構成されていることを含む、項目80に記載のシステム。
(項目82) 前記複数の第1の形状の各々、および前記複数の第2の形状の各々は、楕円である、項目81に記載のシステム。
(項目83) 前記複数の第1の形状の各々、および前記複数の第2の形状の各々は、bスプラインである、項目81に記載のシステム。
(項目84) 前記コンピュータ装置は、
前記細胞の一連の時間連続的な画像から、前記1つ以上の細胞の各々に関連付けられている境界情報を決定することであって、前記画像は、前記一連の時間連続的な画像に含まれる第1の画像である、ことと、
以前に生成された仮説を修正することによって、前記予備仮説を生成することであって、前記以前に生成された仮説は、前記一連の時間連続的な画像に含まれる第2の画像に示されるような前記細胞を特徴付け、前記第2の画像は、前記第1の画像に先立つ、ことと
を行うようにさらに構成されている、項目80に記載のシステム。
(項目85) 前記一連の時間連続的な画像は、一連の経時的画像である、項目84に記載のシステム。
(項目86) 前記画像は、第1の画像であり、
前記コンピュータ装置が前記第1の画像に示されるような前記1つ以上の細胞を特徴付ける前記複数の仮説から前記仮説を選択するように構成されていることは、前記第1の画像を含む一連の画像にわたって、最も可能性の高い一連の仮説を決定するように構成されていることを含む、項目59に記載のシステム。
(項目87) 前記一連の画像は、一連の時間連続的な画像であり、
前記コンピュータ装置が前記一連の画像にわたって前記最も可能性の高い一連の仮説を決定するように構成されていることは、前記一連の時間連続的な画像のうちの2つ以上の画像にわたって、前記1つ以上の細胞の前記推測特性が、どのように変動することができるかを制限する制約を考慮するように構成されていることを含む、項目86に記載のシステム。
(項目88) 前記制約は、
前記1つ以上の細胞の推測数が、前記一連の時間連続的な画像にわたって経時的に減少していないこと、
前記1つ以上の細胞の前記推測数の変化後、前記1つ以上の細胞の前記推測数が、前記一連の時間連続的な画像の第1のサブセットにわたって、ある期間で安定していること、および
前記1つ以上の細胞の前記推測数が、前記一連の時間連続的な画像の第2のサブセットにわたって、経時的にわずか1だけ減少し、次いで、前記第2のサブセットの終了時に増加することから成る群から選択される、項目87に記載のシステム。
(項目89) 細胞活性の自動評価のための方法であって、前記方法は、
複数の仮説のうちの1つ以上の仮説の可能性の推定値に基づいて、前記複数の仮説に関連付けられている信頼尺度を決定することであって、前記複数の仮説の各々は、複数の画像のうちの関連する1つ以上の画像に示されている1つ以上の細胞を特徴付ける、ことと、
前記信頼尺度に基づいて、前記複数の仮説のうちの少なくとも1つの信頼性を決定することと
を含む、方法。
(項目90) 前記1つ以上の細胞は、ヒト胚、1つ以上の卵母細胞、あるいは1つ以上の多能性細胞に含まれる、項目89に記載の方法。
(項目91) 前記複数の仮説の各々に関連付けられている、前記1つ以上の細胞の各々の推定幾何学形状と、前記1つ以上の細胞の前記1つ以上の画像から決定される、前記1つ以上の細胞の各々の境界との間の適合性に基づいて、前記複数の仮説を選択することをさらに含む、項目89に記載の方法。
(項目92) 前記境界の各々は、1つ以上の境界区画を含む、項目91に記載の方法。
(項目93) 前記複数の画像は、暗視野照明顕微鏡法によって取得される、項目89に記載の方法。
(項目94) 前記複数の仮説の各々は、前記1つ以上の細胞の数の推定値、前記1つ以上の細胞の各々の形状の推定値、および前記1つ以上の細胞の配列の推定値のうちの1つ以上のものに基づく、項目89に記載の方法。
(項目95) 前記複数の画像の各々の中の前記1つ以上の細胞に関連付けられている境界を検出することをさらに含み、前記複数の仮説の各々は、前記境界のうちの関連する1つ以上の境界に基づく、項目89に記載の方法。
(項目96) 前記境界の各々は、1つ以上の境界区画を含む、項目95に記載の方法。
(項目97) 前記複数の仮説は、前記1つ以上の細胞の発生能に関連付けられている細胞活性の特徴付けに関連付けられている、項目89に記載の方法。
(項目98) 前記細胞活性の特徴付けは、第1の細胞質分裂の持続時間、第1細胞質分裂と第2細胞質分裂との間の時間間隔、第2細胞質分裂と第3細胞質分裂との間の時間間隔、第1の有糸分裂と第2の有糸分裂との間の時間間隔、第2の有糸分裂と第3の有糸分裂との間の時間間隔、受精から5つの細胞を有する胚までの時間間隔、および配偶子合体から第1の細胞質分裂までの時間間隔のうちの1つ以上のものを含む、項目97に記載の方法。
(項目99) 前記複数の仮説のうちの前記少なくとも1つが、信頼性があると決定される場合のみ、前記細胞活性の特徴付けを表示することをさらに含む、項目97に記載の方法。
(項目100) 前記細胞活性の特徴付け、および前記細胞活性の特徴付けに関連付けられている前記複数の仮説のうちの前記少なくとも1つの前記信頼性の指標を表示することをさらに含む、項目97に記載の方法。
(項目101) 前記複数の画像は、一連の経時的画像であり、
前記複数の仮説のうちの前記1つ以上の仮説の前記可能性の前記推定値は、前記一連の経時的画像の各々に示される前記細胞の数が経時的に減少しないという制約を考慮する、項目89に記載の方法。
(項目102) 前記複数の仮説のうちの前記少なくとも1つの前記信頼性を決定することは、前記信頼尺度に基づいて、選択基準を前記1つ以上の細胞に適用することを含む、項目89に記載の方法。
(項目103) 前記選択基準は、女性のヒト対象への着床のための前記1つ以上の細胞の発生能力に関連付けられている、項目102に記載の方法。
(項目104) 前記選択基準は、前記信頼尺度の1つ以上の閾値に基づく、項目102に記載の方法。
(項目105) 前記選択基準を適用することの結果を表示することをさらに含む、項目102に記載の方法。
(項目106) 前記選択基準に基づいて、前記複数の仮説のうちの前記少なくとも1つが、信頼性がないと見なされる場合、女性のヒト対象への着床のための前記1つ以上の細胞を拒絶することをさらに含む、項目102に記載の方法。
(項目107) 前記選択基準に基づいて決定される前記複数の仮説のうちの前記少なくとも1つの前記信頼性に基づいて、女性のヒト対象への着床のための前記1つ以上の細胞の発生能力の指標を表示することをさらに含む、項目102に記載の方法。
(項目108) 細胞活性の自動評価のための装置であって、前記装置は、
複数の仮説のうちの1つ以上の仮説の可能性の推定値に基づいて、前記複数の仮説に関連付けられている信頼尺度を決定するように構成されている信頼モジュールであって、前記複数の仮説の各々は、複数の画像のうちの関連する1つ以上の画像に示されている1つ以上の細胞を特徴付ける、信頼モジュールと、
前記信頼尺度に基づいて、前記複数の仮説のうちの少なくとも1つの信頼性を決定するように構成されている信頼性決定モジュールと
を備え、
前記信頼モジュールおよび前記信頼性決定モジュールのうちの少なくとも1つは、メモリまたは処理デバイスのうちの少なくとも1つにおいて実装されている、装置。
(項目109) 少なくとも1つの暗視野照明顕微鏡を介して、前記複数の画像を取得するように構成されている画像モジュールをさらに備えている、項目108に記載の装置。
(項目110) 前記複数の仮説は、第1の複数の仮説であり、前記装置は、前記第1の複数の仮説を含む第2の複数の仮説を決定するように構成されている仮説生成モジュールをさらに備え、前記第2の複数の仮説の各々は、1つ以上の細胞の数の推定値、前記1つ以上の細胞の各々の形状の推定値、および前記1つ以上の細胞の配列の推定値のうちの1つ以上のものに基づく、項目108に記載の装置。
(項目111) 前記複数の画像の各々の中の前記1つ以上の細胞に関連付けられている境界を検出するように構成されている境界検出モジュールをさらに備え、前記複数の仮説の各々は、前記境界のうちの関連する1つ以上の境界に基づく、項目108に記載の装置。
(項目112) 前記境界の各々は、1つ以上の境界区画を含む、項目111に記載の装置。
(項目113) 仮説選択モジュールをさらに備え、
前記複数の画像は、一連の経時的画像であり、
前記仮説選択モジュールは、前記一連の経時的画像の各々に示される前記細胞の数が経時的に減少しないという制約を考慮して、前記複数の仮説のうちの前記1つ以上の仮説の前記可能性の前記推定値を決定するように構成されている、項目108に記載の装置。
(項目114) 前記複数の仮説は、前記1つ以上の細胞の発生能に関連付けられている細胞活性の特徴付けに関連付けられている、項目108に記載の装置。
(項目115) 前記細胞活性の特徴付けは、第1の細胞質分裂の持続時間、第1細胞質分裂と第2細胞質分裂との間の時間間隔、第2細胞質分裂と第3細胞質分裂との間の時間間隔、第1の有糸分裂と第2の有糸分裂との間の時間間隔、第2の有糸分裂と第3の有糸分裂との間の時間間隔、受精から5つの細胞を有する胚までの時間間隔、および配偶子合体から第1の細胞質分裂までの時間間隔のうちの1つ以上のものを含む、項目114に記載の装置。
(項目116) 前記複数の仮説のうちの前記少なくとも1つが、信頼性があると決定される場合のみ、前記細胞活性の特徴付けを表示するように構成されている表示モジュールをさらに備えている、項目114に記載の装置。
(項目117) 前記細胞活性の特徴付け、および前記細胞活性の特徴付けに関連付けられている前記複数の仮説のうちの前記少なくとも1つの前記信頼性の指標を表示するように構成されている表示モジュールをさらに備えている、項目114に記載の方法。
(項目118) 前記信頼性決定モジュールは、前記信頼尺度に基づいて、選択基準を前記1つ以上の細胞に適用するように構成されている、項目108に記載の装置。
(項目119) 前記選択基準は、女性のヒト対象への着床のための前記1つ以上の細胞の発生能力に関連付けられている、項目118に記載の装置。
(項目120) 前記選択基準は、前記信頼尺度の1つ以上の閾値に基づく、項目118に記載の装置。
(項目121) 前記選択基準を適用することの結果を表示するように構成されている表示モジュールをさらに備えている、項目118に記載の装置。
(項目122) 前記信頼性決定モジュールは、前記選択基準に基づいて、前記複数の仮説のうちの前記少なくとも1つが、信頼性がないと決定される場合、女性のヒト対象への着床のための前記1つ以上の細胞を拒絶するように構成されている、項目118に記載の装置。
(項目123) 前記選択基準に基づいて決定される、前記複数の仮説のうちの前記少なくとも1つの前記信頼性に基づいて、女性のヒト対象への着床のための前記1つ以上の細胞の発生能力の指標を表示するように構成されている表示モジュールをさらに備えている、項目118に記載の装置。
(項目124) 前記1つ以上の細胞の前記複数の画像を受信するように構成されている、画像モジュールをさらに備えている、項目118に記載の装置。
(項目125) 前記複数の仮説の各々に関連付けられている、前記1つ以上の細胞の各々の推測幾何学形状と、前記1つ以上の細胞の前記1つ以上の画像から決定される、前記1つ以上の細胞の各々の境界との間の適合性に基づいて、前記複数の仮説を選択するように構成されている仮説選択モジュールをさらに備えている、項目108に記載の装置。
(項目126) 前記境界の各々は、1つ以上の境界区画を含む、項目125に記載の装置。
(項目127) 細胞活性の自動評価のためのシステムであって、前記システムは、細胞活性の自動評価のために構成されているコンピュータ装置を備え、
前記コンピュータ装置は、
複数の仮説のうちの1つ以上の仮説の可能性の推定値に基づいて、前記複数の仮説に関連付けられている信頼尺度を決定することであって、前記複数の仮説の各々は、複数の画像のうちの関連する1つ以上の画像に示されている1つ以上の細胞を特徴付ける、ことと、
前記信頼尺度に基づいて、前記複数の仮説の信頼性を決定することと
を行うように構成されている、システム。
(項目128)
前記複数の仮説の前記信頼性の指標を提示するように構成されている表示デバイスと、
前記表示デバイスを介した前記提示に応答して、前記1つ以上の細胞の発生能力を示す入力を受信するように構成されている入力インターフェースと
をさらに備えている、項目127に記載のシステム。
(項目129) 前記複数の画像を取得するように構成されている撮像デバイスをさらに備えている、項目127に記載のシステム。
(項目130) 前記撮像デバイスは、暗視野照明顕微鏡である、項目129に記載のシステム。
(項目131) 前記複数の仮説の各々は、前記1つ以上の細胞の数の推定値、前記1つ以上の細胞の各々の形状の推定値、および前記1つ以上の細胞の配列の推定値のうちの1つ以上のものに基づく、項目127に記載のシステム。
(項目132) 前記コンピュータ装置は、前記複数の画像の各々の中の前記1つ以上の細胞に関連付けられている境界を検出するようにさらに構成され、前記複数の仮説の各々は、前記境界のうちの関連する1つ以上の境界に基づく、項目127に記載のシステム。
(項目133) 前記境界の各々は、1つ以上の境界区画を含む、項目132に記載のシステム。
(項目134) 前記複数の仮説は、前記1つ以上の細胞の発生能に関連付けられている細胞活性の特徴付けに関連付けられている、項目127に記載のシステム。
(項目135) 前記細胞活性の特徴付けは、第1の細胞質分裂の持続時間、第1細胞質分裂と第2細胞質分裂との間の時間間隔、第2細胞質分裂と第3細胞質分裂との間の時間間隔、第1の有糸分裂と第2の有糸分裂との間の時間間隔、第2の有糸分裂と第3の有糸分裂との間の時間間隔、受精から5つの細胞を有する胚までの時間間隔、および配偶子合体から第1の細胞質分裂までの時間間隔のうちの1つ以上のものを含む、項目134に記載のシステム。
(項目136) 表示デバイスをさらに備え、前記表示デバイスは、前記複数の仮説のうちの前記少なくとも1つが、信頼性があると決定される場合のみ、前記細胞活性の特徴付けを表示するように構成されている、項目134に記載のシステム。
(項目137) 表示デバイスをさらに備え、前記表示デバイスは、前記細胞活性の特徴付け、および前記細胞活性の前記特徴付けに関連付けられている前記複数の仮説のうちの前記少なくとも1つの前記信頼性の指標を表示するように構成されている、項目134に記載のシステム。
(項目138)
前記複数の画像は、一連の経時的画像であり、
前記複数の仮説のうちの前記1つ以上の仮説の前記可能性の前記推定値は、前記一連の経時的画像の各々に示される前記細胞の数が経時的に減少しないという制約を考慮する、項目127に記載のシステム。
(項目139) 前記コンピュータ装置は、前記複数の仮説のうちの前記少なくとも1つの前記信頼性を決定することの一環として、前記信頼尺度に基づいて、選択基準を前記1つ以上の細胞に適用するように構成されている、項目127に記載のシステム。
(項目140) 前記選択基準は、女性のヒト対象への着床のための前記1つ以上の細胞の発生能力に関連付けられている、項目139に記載のシステム。
(項目141) 前記選択基準は、前記信頼尺度の1つ以上の閾値に基づく、項目139に記載のシステム。
(項目142) 表示デバイスをさらに備え、前記表示デバイスは、前記選択基準を適用することの結果を表示するように構成されている、項目139に記載のシステム。
(項目143) 前記コンピュータ装置は、前記選択基準に基づいて、前記複数の仮説のうちの少なくとも1つが、信頼性がないと決定される場合、女性のヒト対象への着床のための前記1つ以上の細胞を拒絶するように構成されている、項目139に記載のシステム。
(項目144) 表示デバイスをさらに備え、前記表示デバイスは、前記選択基準に基づいて決定される、前記複数の仮説のうちの前記少なくとも1つの前記信頼性に基づいて、女性のヒト対象への着床のための前記1つ以上の細胞の発生能力の指標を表示するように構成されている、項目139に記載のシステム。
(項目145) 前記1つ以上の細胞の前記複数の画像を取得するように構成されている撮像デバイスをさらに備え、前記コンピュータ装置は、前記撮像デバイスから前記1つ以上の細胞の前記複数の画像を受信するように構成されている、項目127に記載のシステム。
(項目146) 前記コンピュータ装置は、前記複数の仮説の各々に関連付けられている、前記1つ以上の細胞の各々の推測幾何学形状と、前記1つ以上の細胞の前記1つ以上の画像から決定される、前記1つ以上の細胞の各々の境界との間の適合性に基づいて、前記複数の仮説を選択するように構成されている、項目127に記載のシステム。
(項目147) 前記境界の各々は、1つ以上の境界区画を含む、項目146に記載のシステム。
(項目148)
前記複数の画像のうちの前記1つ以上の画像を表示することと、
前記複数の仮説の前記信頼性の指標を提示することと
を行うように構成されている表示デバイスをさらに備えている、項目127に記載のシステム。
本発明の性質および目的のより良い理解のために、添付図面と併せて解釈される、以下の詳細な説明を参照するものとする。
図1Aは、本発明の実施形態による、胚発生等の細胞発生の画像に適用された自動細胞追跡アプローチの非限定的実施例を図示する。
図1Bは、本発明の実施形態による、図1Aに示される細胞境界区画の拡大図を図示する。
図2Aは、本発明の実施形態による、細胞追跡枠組みの非限定的実施例を図示する。
図2Bは、本発明の別の実施形態による、細胞追跡枠組みの非限定的実施例を図示する。
図3Aは、本発明の実施形態による、細胞境界特徴情報を取得するための方法を図示する。
図3Bは、本発明の実施形態による、細胞境界特徴情報への細胞の表現のマッピングを生成し、細胞のうちの1つ以上の細胞の推測特性をそれぞれ含む、仮説を精緻化するための方法を図示する。
図3Cは、本発明の実施形態による、図1Aで図示される仮説から仮説を選択するための方法を図示する。
図4Aは、本発明の実施形態による、図1の画像102に対する仮説112の選択のための例示的なアプローチを図示する。
図4Bは、本発明の実施形態による、図1の画像102に対する仮説112の選択のための例示的なアプローチを図示する。
図4Cは、本発明の実施形態による、選択された仮説(図1Aの選択された仮説112等)に対する信頼尺度の決定のため、およびこの信頼情報を適用するための例示的かつ非限定的なアプローチを図示する。
図5は、本発明の実施形態による、自動細胞追跡のため、および信頼推定のためのシステムの概略図を図示する。
図6は、本発明の実施形態による、コンピュータ装置を図示する。
図7は、本発明の実施形態による、細胞活性の自動評価のための方法を図示する。
図8は、本発明の実施形態による、信頼性決定を含む細胞活性の自動評価のための方法を図示する。
図9Aは、本発明の実施形態による、例示的な画像ベースの細胞分類アプローチを図示する。
図9Bは、本発明の実施形態による、例示的な訓練画像を図示する。
図9Cは、本発明の実施形態による、複数の画像の各々の特徴ベクターを図示する。
図10は、本発明の実施形態による、図9Aの画像ベースの細胞分類アプローチによる、例示的な画像ベースの細胞分類結果を図示する。
図11Aは、本発明の実施形態による、図9Aのレベル1画像分類器を使用する画像ベースの細胞分類アプローチを図示する。
図11Bは、本発明の実施形態による、図9Aおよび図11Aのレベル1およびレベル2画像分類器を使用する画像ベースの細胞分類アプローチを図示する。
図11Cは、本発明の実施形態による、図11Bのレベル2画像分類器の出力に適用されるビタビ分類器を使用する画像ベースの細胞分類精緻化アプローチを図示する。
図12は、本発明の実施形態による、例示的な細胞発生結果決定アプローチを図示する。
図13は、本発明の実施形態による、教師なし学習のための例示的なアプローチを図示する。
図14は、本発明の実施形態による、特徴抽出のための例示的なアプローチを図示する。
図15は、本発明の実施形態による、結果決定のための例示的なアプローチを図示する。
図16は、本発明の実施形態による、画像ベースの細胞発生結果決定のための方法を図示する。
図17は、本発明の実施形態による、自動画像ベースの細胞分類のための方法を図示する。
図18は、本発明の実施形態による、画像ベースの細胞分類のための例示的なアプローチを図示する。
図19Aおよび19Bは、(a)学習されるコードブックを用いて、疎に検出された記述子および密にサンプリングされた記述子から生成される、密および疎発生ヒストグラムの実施例、および(b)k平均クラスタリングによって生成されるクラスタ(出現コードワード)の4つの実施例を示す、実施例によるバッグオフフィーチャーズを図示する。
図19Aおよび19Bは、(a)学習されるコードブックを用いて、疎に検出された記述子および密にサンプリングされた記述子から生成される、密および疎発生ヒストグラムの実施例、および(b)k平均クラスタリングによって生成されるクラスタ(出現コードワード)の4つの実施例を示す、実施例によるバッグオフフィーチャーズを図示する。
図20は、時間的画像類似性の実施例を図示する。
図21Aは、本発明の実施形態による、例示的な3レベル分類方法から取得されるオフセット許容差の関数としての精密な細胞分裂検出率の例示的な結果を図示する。 図21Bは、本発明の実施形態による、例示的な3レベル分類方法から取得されるオフセット許容差の関数としての精密な細胞分裂検出率の例示的な結果を図示する;そして
図22は、本発明の実施形態による、(a)分類器および類似性尺度(無追跡)、(b)DD-SMC最大限界(追跡ベース)、および(c)全ての観察可能物(複合)を使用するときに、(i)遷移t、(ii)遷移t、(iii)遷移t、および(iv)3つ全て(図25(iv))においてrmsd<d+mである、胚の比率の例示的な結果を図示する。
本装置、システム、および方法を説明する前に、本発明は、説明される特定の装置、システム、および方法に限定されず、したがって、当然ながら変動し得ることを理解されたい。また、本明細書で使用される用語は、特定の実施形態を説明する目的のためにすぎず、本発明の範囲が添付の請求項のみによって限定されるであろうため、限定的であることを目的としていないことも理解されたい。
値の範囲が提供されるが、その範囲の上限と下限との間で、文脈が別様に明確に決定付けない限り、下限の単位の10分の1までの各介在値もまた、具体的に開示されることを理解されたい。規定範囲内の任意の規定値または介在値と、その規定範囲内の任意の他の規定値または介在値との間の各々のより小さい範囲が、本発明内に包含される。これらのより小さい範囲の上限および下限は、独立して、範囲に包含または除外され得、より小さい範囲にいずれか一方の限界が含まれる、いずれも含まれない、または両方が含まれる、各範囲もまた、規定範囲内の任意の特異的に除外された限界を受けて、本発明内に包含される。規定範囲が限界の一方または両方を含む場合、これらの含まれた限界のいずれか一方または両方を除外する範囲も本発明に含まれる。
別様に定義されない限り、本明細書で使用される全ての技術および科学用語は、本発明が属する当業者によって一般的に理解されるものと同一の意味を有する。本明細書で説明されるものと類似または同等である任意の方法および材料もまた、本発明の実践または試験で使用することができるが、ここでは、いくつかの潜在的な好ましい方法および材料が説明される。本明細書で記述される全ての出版物は、引用される出版物と関連して方法および/または材料を開示および説明するように、参照することにより本明細書に組み込まれる。本開示は、矛盾がある程度に、組み込まれた出版物の任意の開示に優先することが理解される。
本明細書および添付の請求項で使用される場合、「1つの(a、an)」および「該(the)」という単数形は、文脈が別様に明確に決定付けない限り、複数の指示対象を含むことに留意しなければならない。したがって、例えば、「1つのコンピュータ」という言及は、当業者に公知である複数のそのようなコンピュータ等を含む。
本明細書で議論される任意の出版物は、本願の出願日に先立つそれらの開示のためのみに提供される。本発明が、以前の発明により、そのような出版物に先行する権限がないという承認として解釈されるべきではない。さらに、提供される出版物の日付は、実際の公開日とは異なり得、これは、独立して確認される必要があり得る。
(定義)
「発生能」および「発生能力」という用語は、健康な胚または多能性細胞が成長または発育する能力および可能性を指すために、本明細書で使用される。
「胚」という用語は、2つの半数体配偶子細胞、例えば、未受精二次卵母細胞および精子細胞が、融合して、2倍体全能細胞、例えば、受精卵を形成するときに形成される接合体、および直後の細胞分裂、すなわち、桑実胚までの胚分裂に起因する胚、すなわち、16細胞段階および胞胚期(分化した栄養外胚葉および内細胞塊を伴う)の両方を指すために、本明細書で使用される。
「多能性細胞」という用語は、生物内で複数の種類の細胞に分化する能力を有する、任意の細胞を意味するために本明細書で使用される。多能性細胞の実施例は、幹細胞、卵母細胞、1細胞胚(すなわち、接合体)を含む。
「幹細胞」という用語は、(a)自己再生能力を有し、(b)多様な分化した細胞型を生じさせる可能性を有する、細胞または細胞の集団を指すために、本明細書で使用される。頻繁に、幹細胞は、複数の細胞系統を生じさせる可能性を有する。本明細書で使用される場合、幹細胞は、全能幹細胞、例えば、生物の胚および胚外組織の全てを生じさせる、受精卵母細胞、多能性幹細胞、例えば、生物の胚組織の全て、すなわち、内胚葉、中胚葉、および外胚葉系統を生じさせる、胚幹(ES)細胞、胚生殖(EG)細胞、または誘導多能性幹(iPS)細胞、多分化能幹細胞、例えば、生物の胚組織のうちの少なくとも2つ、すなわち、内胚葉、中胚葉、および外胚葉系統のうちの少なくとも2つを生じさせる、間充織幹細胞であり得るか、または、特定の組織の複数の種類の分化した細胞を生じさせる、組織特異的幹細胞であり得る。組織特異的幹細胞は、特定の組織の細胞を生じさせる、組織特異的胚細胞、および成体組織中に存在し、その組織の細胞を生じさせることができる、体性幹細胞、例えば、中枢神経系の細胞の全てを生じさせる神経間細胞、骨格筋を生じさせる衛星細胞、および造血系の細胞の全てを生じさせる造血幹細胞を含む。
「卵母細胞」という用語は、未受精雌生殖細胞または配偶子を指すために、本明細書で使用される。本願の卵母細胞は、一次卵母細胞であり得、その場合、それらは、第1減数分裂を受けるように位置付けられるか、または第1減数分裂を受けており、または二次卵母細胞であり得、その場合、それらは、第2減数分裂を受けるように位置付けられるか、または第2減数分裂を受けている。
「減数分裂」とは、配偶子の産生をもたらす細胞周期事象を意味する。第1の減数分裂細胞周期、または第1減数分裂では、細胞の染色体が複製され、2つの娘細胞に分割される。次いで、これらの娘細胞は、DNA合成を伴わない、第2の減数分裂細胞周期または第2減数分裂で分裂し、半数の染色体を伴う配偶子をもたらす。
「有糸分裂細胞周期」とは、細胞の染色体の複製、ならびにこれらの染色体および細胞の細胞質の2つの娘細胞への分裂をもたらす、細胞内の事象を意味する。有糸分裂細胞周期は、2つの段階、すなわち、中間期および有糸分裂に分割される。中間期では、細胞が成長し、そのDNAを複製する。有糸分裂では、細胞が細胞分裂を開始して完了し、最初にその核物質を分割し、次いで、その細胞質およびその分割した核物質を2つの別個の細胞に分割する(細胞質分裂)。
「第1の有糸分裂細胞周期」または「第1細胞周期」とは、受精から第1の細胞質分裂事象の完了、すなわち、2つの娘細胞への受精卵母細胞の分裂までの時間間隔を意味する。卵母細胞が生体外で受精させられる場合においては、ヒト絨毛性ゴナドトロピン(HCG)の注入(通常は卵母細胞の回収に先立って投与される)と第1の細胞質分裂事象の完了との間の時間間隔が、代理時間間隔として使用され得る。
「第2の有糸分裂細胞周期」または「第2細胞周期」とは、胚で観察される第2の細胞周期、すなわち、有糸分裂による受精卵母細胞からの娘細胞の産生と、有糸分裂によるこれらの娘細胞のうちの1つ(「先導娘細胞」または娘細胞A)からの孫細胞の第1のセットの産生との間の時間間隔を意味する。第2細胞周期の完了時に、胚は、3つの細胞から成る。換言すると、第2細胞周期は、2つの細胞を含有する胚と3つの細胞を含有する胚との間の時間として視覚的に識別することができる。
「第3の有糸分裂細胞周期」または「第3細胞周期」とは、胚で観察される第3の細胞周期事象、典型的には、有糸分裂による受精卵母細胞からの娘細胞の産生と、有糸分裂による第2の娘細胞(「遅行娘細胞」または娘細胞B)からの孫細胞の第2のセットの産生との間の時間間隔を意味する。第3細胞周期の完了時に、胚は、4つの細胞から成る。換言すると、第3細胞周期は、3つの細胞を含む胚と4つの細胞を含む胚との間の時間として視覚的に識別することができる。
「第1の卵割事象」とは、第1の分裂、すなわち、2つの娘細胞への卵母細胞の分裂、すなわち、第1細胞周期を意味する。第1の卵割事象の完了時に、胚は、2つの細胞から成る。
「第2の卵割事象」とは、分裂の第2のセット、すなわち、2つの孫細胞への先導娘細胞の分裂、および2つの孫細胞への遅行娘細胞の分裂を意味する。換言すると、第2の卵割事象は、第2細胞周期および第3細胞周期の両方から成る。第2の卵割事象の完了時に、胚は、4つの細胞から成る。
「第3の卵割事象」とは、分裂の第3のセット、すなわち、孫細胞の全ての分裂を意味する。第3の卵割事象の完了時に、胚は、典型的には、8つの細胞から成る。
「細胞質分裂」または「細胞分裂」とは、細胞が細胞分裂を受ける有糸分裂の段階を意味する。換言すると、これは、2つの娘細胞を産生するように、細胞の分割した核物質およびその細胞質が分裂される、有糸分裂の段階である。細胞質分裂の期間は、細胞膜の収縮(「分裂溝」)が最初に観察されるときと、その収縮事象の解消、すなわち、2つの娘細胞の生成との間の時間の期間のまたは窓として識別可能である。分裂溝の開始は、細胞膜の曲率が凸状(外向きに丸みを帯びた)から凹状(くぼみまたはへこみを伴って内向きに湾曲する)に変化する点として、視覚的に識別され得る。細胞伸長の開始もまた、細胞質分裂の開始を指し示すために使用され得、その場合、細胞質分裂の期間は、細胞伸長の開始と細胞分裂の解消との間の期間として定義される。
「第1の細胞質分裂」または「第1細胞質分裂」とは、受精後の第1の細胞分裂事象、すなわち、2つの娘細胞を産生する受精卵母細胞の分裂を意味する。第1の細胞質分裂は、通常、受精の約1日後に起こる。
「第2の細胞質分裂」または「第2細胞質分裂」とは、胚で観察される第2の細胞分裂事象、すなわち、2つの孫細胞の第1のセットへの受精卵母細胞の娘細胞(「先導娘細胞」または娘A)の分裂を意味する。
「第3の細胞質分裂」または「第3細胞質分裂」とは、胚で観察される第3の細胞分裂事象、すなわち、2つの孫細胞の第2のセットへの受精卵母細胞の他方の娘細胞(「遅行娘細胞」または娘B)の分裂を意味する。
受精後、両方の配偶子は、それぞれ本明細書では「前核」(PN)と称される構造に含まれる、染色体(半数体内容物)の1つのセットを寄与する。通常の受精後、各胚は、2つのPNを示し、1つは、父系遺伝物質を表し、1つは、母系遺伝物質を表す。本明細書で使用されるような「配偶子合体」は、第1の細胞質分裂の前の数時間以内に起こる、染色体の2つのセットが融合するときのPNの分解を指す。
発明の実施形態の説明
本発明の側面は、細胞活性の追跡のために動作可能である。したがって、本発明のいくつかの側面は、自動非侵襲細胞活性追跡のために動作可能である。いくつかの実施形態では、自動非侵襲細胞活性追跡は、染料の注入等の侵襲的方法を用いることなく、1つ以上の細胞の特性を決定するためのものである。細胞活性追跡は、1つ以上の細胞の1つ以上の画像に適用することができる。画像は、経時的な一連の画像等の時間連続的な一連の画像であり得る。複数の画像に示される細胞は、任意の目的とする細胞であり得る。例えば、細胞は、1つ以上の細胞を有し得る、ヒト胚であり得る。そのような目的とする細胞の他の実施例は、卵母細胞および多能性細胞を含むが、それらに限定されない。
いくつかの実施形態では、各画像内の細胞の数が関心となり、本発明の実施形態によって決定することができる。例えば、細胞の数は、1細胞段階、2細胞段階、3細胞段階、4細胞段階等のうちの1つ以上の段階での胚を表すことができる。いくつかの実施形態では、4細胞段階は、4つ以上の細胞を表す。代替として、または加えて、各画像内の細胞の幾何学形状が関心となり、本発明の実施形態によって決定することができる。細胞の幾何学形状は、細胞の形状および/または細胞の配列を含み得る。
いくつかの実施形態では、細胞のこれらの特性のうちの1つ以上の特性は、画像あたり複数の仮説のうちの1つを選択することによって決定され得る。選択される仮説は、時間連続的な一連の画像にわたる最も可能性の高い一連の仮説であり得、細胞の観察可能な幾何学的特性(画像のうちの1つ以上の画像に示される幾何学的特徴)に最良適合する、形状のセットを含み得る。一実施形態では、幾何学的情報は、境界点および/または境界区画等の1つ以上の細胞の各々に関連付けられる境界情報を含み得る。各境界点および/または境界区画は、特定の細胞にマップされ得る(またはいかなる細胞にもマップされないこともある)。このマッピングは、明示的または暗示的であり得る。代替として、または加えて、形状が、各細胞に関連付けられる境界点および/または境界区画に適合され得る。これらの形状は、楕円形、またはbスプラインあるいは他の平滑形状等の他の好適な形状であり得る。本明細書では、境界区画に適合されている形状という言及はまた、1つ以上の細胞の各々に関連付けられる、境界点および/または他の幾何学的特徴に適合されている形状を指すこともできると理解されるであろう。一実施例では、仮説は、データ駆動型近似推測等の多重仮説推測に基づいて選択され得る。
画像あたりの複数の仮説の各々は、細胞の推測数および/または細胞の推測幾何学形状等の細胞の推測特性を含む。画像あたりの複数の仮説は、画像に示される細胞の幾何学的特徴に基づくことができる。各細胞に関連付けられる、1つ以上の境界点および/または境界区画への各細胞の表現のマッピングがあり得る。このマッピングは、明示的または暗示的であり得る。代替として、または加えて、細胞と、各細胞に関連付けられる境界点および/または境界区画との間の明示的なマッピングの生成を伴わずに、形状が、各細胞に関連付けられる境界点および/または境界区画に適合され得る。本明細書では、細胞の境界区画およびこれらの区画を伴う動作(マッピング、生成、合併等)という言及は、特定の実施形態の例であり、境界区画を伴う実施形態に本発明の範囲を限定しない。
一実施形態では、細胞境界区画は、細胞の画像に基づいて決定することができる、観察可能な幾何学的情報の例である。別の例は、細胞境界点である。一実施形態では、画像あたりの複数の仮説の各々は、各細胞に関連付けられる1つ以上の境界区画への各細胞の表現の(各仮説によって推測される)マッピングを表す、細胞境界特徴標識を通して、細胞の推測数および/または推測幾何学形状を表すと見なすことができる。細胞境界特徴標識は、細胞境界区画標識であり得る。有利なことには、画像あたりの複数の仮説にわたる解空間は、細胞を表すことができる特定の種類の全ての可能な形状群を表す、パラメータの連続セットよりはるかに小さい解空間である、細胞境界区画標識の離散セットを覆う。例えば、5つの連続パラメータ(例えば、長軸長、短軸長、楕円中心のx座標、楕円中心のy座標、およびヨー角)によって各々が画定される楕円を伴う最大で4つの細胞を追跡するために、解空間は、20の連続次元を有する。対照的に、K個の境界区画の各々のための標識は、合計でわずか5個の起こり得る解について、5つの離散値のうちの1つ(例えば、細胞のうちのいずれにも割り当てないことについては0、または4つの細胞のうちの特定のものへの割当については1~4)を有し得る。これは、画像からの観察可能な細胞境界区画情報を活用することによって、解空間を有意に縮小し、仮説選択をより扱いやすく、かつ確実にする。
一実施形態では、細胞境界区画が標識されると、細胞境界区画を一緒にグループ化し、多数の連続パラメータによって表される、より複雑な形状等の楕円以外の形状に適合させることができる。例えば、胚内の割球は、楕円からかなり離れたものであり得る。有利なことには、細胞境界標識の離散セットを覆う解空間の次元性は不変である(上記の実施例では、依然として、K個の境界区画がある、5個の起こり得る解)。これは、形状を画定する連続パラメータの数が増加する場合に増加する、細胞を表すことができる特定の種類の全ての可能な形状群を表す、パラメータの連続セットに関する解空間の次元性とは異なる。
一実施形態では、細胞境界区画標識について解くことによって、細胞境界区画を細胞のうちのいずれにも割り当てることができない。有利なことには、これは、細胞境界データの処理に関連付けられる一般的な問題である、異常値および偽陽性境界のよりロバストな処理を可能にすることができる。
いくつかの実施形態では、画像あたりの仮説選択に基づいて決定される細胞の特性に基づいて、胚の健康および/または運命(胚が胚盤胞または停止に達することが予期されるかどうか等の結果)に関係付けられるパラメータを決定することができる。これらのパラメータは、第1の細胞質分裂の持続時間、第1細胞質分裂と第2細胞質分裂との間の時間間隔、第2細胞質分裂と第3細胞質分裂との間の時間間隔、第1の有糸分裂と第2の有糸分裂との間の時間間隔、第2の有糸分裂と第3の有糸分裂との間の時間間隔、受精から5つの細胞を有する胚までの時間間隔、および配偶子合体と第1の細胞質分裂との間の時間間隔のうちの1つ以上のものを含み得るが、それらに限定されない。これらのパラメータのうちの1つ以上のパラメータから、自動化した非侵襲的様式で、女性のヒト対象への着床のための胚の発生能力の指標を決定することができる。
本発明の側面はまた、胚の健康および/または運命/結果に関係付けられる細胞/胚特性の決定を増進する分類および/またはフレーム間類似性決定等の無追跡アプローチと併せて、自動非侵襲細胞活性追跡のためにも動作可能である。
図1は、本発明の実施形態による、胚発生等の細胞発生の画像に適用された自動細胞追跡アプローチの非限定的実施例を図示する。一連の時間連続的な画像102から102400(102、102150、102250、および102400が示される)は、それぞれ、画像102、102150、102250、および102400の各々に示される、1つ以上の細胞1001/1、100150/1から100150/c、・・・100400/1から100400/cの発生を示す(cは、画像102に示される細胞の数であり、cは、各画像102について異なる値であり得る)。本実施例では、1つ以上の細胞100は、ヒト胚に含まれる。下付き文字1から400は、各個々の画像102に関連付けられる識別子であり、識別子は、時間指標、フレーム番号、または画像102およびそれらのコンテンツを区別するための別の好適な識別子であり得る。本実施例では、画像102については、1つの細胞1001/1が示されている。画像102150については、2つの細胞100150/1から100150/2が示されている。画像102250については、3つの細胞100250/1から100250/3が示されている。画像102400については、4つの細胞100400/1から100400/4が示されている。
細胞境界区画の決定後、識別された細胞境界区画1041/1、104150/1から104150/k、・・・104400/1から104400/kが、それぞれ、画像102、102150、102250、および102400の各々について示される(kは、画像102の中にあると決定される細胞境界区画の数であり、kは、各画像102について異なる値であり得る)。明確にするために、細胞境界区画104は、画像102に重ね合わせられておらず、隣接する細胞境界区画104が、異なる線種および厚さを伴って示されている。
1つ以上の仮説1061/1、106150/1から106150/n、・・・106400/1から106400/nが、それぞれ、画像102、102150、102250、および102400の各々について、各画像に対して示される(nは、画像102に対する仮説の数であり、nは、各画像102について異なる値であり得る)。本実施例では、画像102あたりのn個の仮説106i/1から106i/nの各々は、その仮説に対する各細胞100i/cに関連付けられる境界区画104i/1から104i/kのうちの1つ以上の境界区画への各細胞100i/cの表現のマッピングに基づく。他の実施形態では、仮説106の各々は、境界点等の他の種類の観察可能な幾何学的情報に基づき得る。他の実施形態では、境界点および/または境界区画への細胞の明示的なマッピングは必要とされない。本実施例では、各仮説106は、1つ以上の細胞102の推測数、および1つ以上の細胞100の推測幾何学形状を含む、1つ以上の細胞100の推測特性を含む。例えば、仮説106400/1に関連付けられる細胞100の推測数は、4(仮説106400/1に関連付けられる楕円110の数)であり、仮説106400/1に関連付けられる1つ以上の細胞100の推測幾何学形状は、楕円110の形状および配列のうちの1つ以上のものによって示される。別の実施例では、楕円110は、bスプラインまたは別の平滑形状等の別の好適な形状であり得る。画像102によって示されると決定される、1つだけの細胞1001/1および1つの細胞境界区画1041/1があるため、画像102に関連付けられる1つだけの仮説、すなわち、細胞1001/1を細胞境界区画1041/1にマップする仮説1061/1があり得ることに留意されたい。代替として、または加えて、画像102に関連付けられる第2の仮説、すなわち、細胞のうちのいずれも細胞境界区画1041/1にマップしない仮説(図示せず)があり得る。
本実施例では、仮説112i/n(本実施例では仮説1061/1、106150/2、106250/2、および106400/1を含む)が選択される。細胞100の数、ならびに各選択された仮説1061/1、106150/2、106250/2、および106400/1に関連付けられる1つ以上の細胞100の幾何学形状を含む、選択された仮説1061/1、106150/2、106250/2、および106400/1に関連付けられる細胞100の特性108が、それぞれ、画像102、102150、102250、および102400の各々について示される。明確にするために、細胞特性108は、画像102に重ね合わせられていない。
図1Bは、本発明の実施形態による、図1Aに示される細胞境界区画104の拡大図を図示する。識別された細胞境界区画1041/1、104150/1から104150/k、・・・104400/1から104400/kが、それぞれ、画像102、102150、102250、および102400の各々について示される。明確にするために、隣接する細胞境界区画104は、異なるパターンで平行線が付けられている。本実施例では、黒く塗りつぶして示される細胞境界の部分110は、細胞境界区画104に含まれない細胞境界の閉塞部分である。
図2Aは、本発明の実施形態による、細胞追跡枠組み200の非限定的実施例を図示する。細胞追跡枠組み200は、ヒト胚発生に関連付けられ得る。追跡枠組み200は、細胞境界特徴、各細胞に関連付けられる1つ以上の境界区画への各細胞の表現のマッピングを表す細胞境界特徴標識、細胞幾何学形状(細胞の形状等)、細胞分裂事象、および/または経時的な細胞の数等の関連する未知数を捕捉する、確率的グラフィカルモデル(PGM)202に基づき得る。一実施形態では、図1Aを参照すると、PGM202は、画像102が撮影される時間間隔に及び得る連鎖グラフであり、グラフ内の各節点は、変数である。PGM202は、楕円形の細胞の確率的進化を表す、条件付き確率場(CRF)であり得る。PGM202内の2つの変数の間のリンクは、それらの間の直接統計的依存を表す。PGM202は、画像102から102400より観察可能な情報(証拠)を表す節点2021/oから202400/oと、細胞追跡に基づいて推測される、画像102から102400に関連付けられる変数を表す節点2021/iから202400/iとを含む。PGM202の代表的な節点2023/iおよび2023/oは、1つの時間スライスについて、PGM202に含まれ得る例示的な基礎的節点を図示するように拡張される。
一実施形態では、節点2023/iに関連付けられる観察可能な証拠は、画像102から観察され、1つ以上の区画節点204によって表される細胞境界区画特徴を含み得る。区画節点204は、区画
Figure 0007071047000001

を表し、式中、
Figure 0007071047000002

は、
Figure 0007071047000003

を伴う、
である点の集合
Figure 0007071047000004

である。各フレームtでは、それぞれ、
Figure 0007071047000005

個、
Figure 0007071047000006

の点を伴うK個の区画、。節点2023/oに関連付けられる、推測される変数は、1つ以上の標識節点206によって表される区画・細胞標識、1つ以上の楕円記述子節点208によって表される形状記述子(本実施例では楕円記述子)、細胞の数の節点210によって表される細胞の数、および1つ以上の細胞分裂事象節点212によって表される細胞分裂事象を含み得る。標識節点206は、区画を細胞に割り当てる標識
Figure 0007071047000007

を表し、本実施例では、Nmax=4個の細胞である。楕円記述子節点208は、楕円
Figure 0007071047000008

を表す。細胞の数の節点210は、細胞の数
Figure 0007071047000009

を表す。細胞分裂事象節点212は、分裂事象
Figure 0007071047000010

を表す。各楕円
Figure 0007071047000011

は、その親
Figure 0007071047000012

に関連付けられ得る。
PGM202は、少なくとも3種類のコンテキスト、すなわち、(1)任意の所与の細胞の境界ピクセルを互に関係付ける、細胞内形状および幾何学的一貫性、(2)胚内の異なる細胞の形状を互に関係付ける、細胞間幾何学的コンテキスト、および(3)画像フレーム102間で形状および局所構造を関係付ける時間的コンテキスト(図1A参照)を捕捉する。細胞内形状および幾何学的一貫性は、1つの細胞に属する境界点間の関係を指し、例えば、区画生成および制限された区画合併に関する(例えば、図3A参照)。細胞間幾何学的コンテキストとは、(胚の中等の)異なる細胞の形状の互の関係を指す。例えば、非常に大きい細胞および非常に小さい細胞は、同一の胚内に含まれる可能性が低く、非常に大きい細胞および非常に小さい細胞を含む仮説を拒絶することができる(または低く採点することができる)。時間的コンテキストとは、例えば、経時的な細胞形状の変形および細胞分裂を指す。
以下の実施例3は、PGM202で表される変数に関する同時確率分布の数学的形態の実施例を詳細に図示し、その議論はここで繰り返されない。実施例3の方程式(8)は、実施例3の方程式(7)に示される同時確率分布に含まれる、観察モデルの実施例を図示する。実施例3の方程式(8)の例示的な観察モデルは、細胞活性追跡と併せて使用され得る、分類および/またはフレーム間類似性決定等の無追跡アプローチに関連付けられる情報を含むように一般化され得る。無追跡アプローチを用いることなく細胞活性追跡が使用されるとき、観察モデルの実施例が、方程式(1)として以下で示され、分類器に関連付けられる項
Figure 0007071047000013

は、ゼロに設定され、フレーム間類似性に関連付けられる項δ(t)は、(分裂事象が隣接する画像102(図1A参照)の間で同等に起こりることも、怒らないこともあるように)0.5に設定される。それによって、
Figure 0007071047000014

は、定数になり、観察モデルから除外することができる。
Figure 0007071047000015
実施例3の方程式(8)では、楕円、区画、および標識の適合性を符号化する、項
Figure 0007071047000016

は、区画
Figure 0007071047000017

を細胞に関係付ける、細胞内形状および幾何学的一貫性を捕捉する。幾何学的制約を符号化する項
Figure 0007071047000018

は、胚内の異なる細胞の形状を互に関係付ける、細胞間幾何学的コンテキストを捕捉する。実施例3の方程式(8、11)に示される運動(遷移)モデル
Figure 0007071047000019

は、画像フレーム間で形状および局所構造を関係付ける時間的コンテキストを捕捉する。
図2Bは、本発明の別の実施形態による、細胞追跡枠組み220の非限定的実施例を図示する。一実施形態では、細胞追跡枠組み220は、ヒト胚発生に関連付けられ得る。細胞追跡枠組み220の種々の側面は、図2Aを参照して説明される細胞追跡枠組み200の側面に類似し、これらの側面はここで繰り返されない。PGM222は、PGM222がさらに追加の観察可能情報を含むことを除いて、多くの点に関して図2Aを参照して説明されるPGM202に類似する。この追加の観察可能情報は、1つ以上の画像類似性尺度節点224によって表される画像類似性尺度δ(t)∈[0,1]、および/または1つ以上の分類器節点226によって表される細胞の数についての分類器
Figure 0007071047000020

を含み得る。画像類似性尺度は、隣接する画像102(図1A参照)の間の1つ以上の細胞分裂事象の発生の可能性に関し得る。分類器は、AdaBoostまたはサポートベクターマシン(SVM)分類器であり得、単一レベルまたは多重レベルであり得、手作りおよび/または機械学習される判別可能な画像特徴のセットから、細胞の数の事後確率(一実施形態では以下の実施例3の方程式(8)の中の
Figure 0007071047000021

)を推定し得る。そのような分類器は、以下の実施例1および2で開示されるような画像ベースの細胞分類を行うように構成することができる。
一実施形態では、図2Bを参照して上で説明されるように、分類および/またはフレーム間類似性決定等の無追跡アプローチと併せて、細胞活性追跡を使用することができる。以下の実施例3は、PGM222で表される変数に関する同時確率分布の数学的形態の実施例を詳細に例証し、その議論はここで繰り返されない。
図3Aは、本発明の実施形態による、細胞境界特徴情報を取得するための方法300を図示する。この細胞境界特徴情報は、細胞境界区画104(図1参照)を含み得る。一実施形態では、細胞境界区画104は、ヒト胚に含まれる1つ以上の細胞の境界区画であり得る。各画像102(図1参照)に対して、細胞の境界点が決定される(ブロック302)。次いで、細胞境界区画は、細胞境界点に基づいて生成される(ブロック304)。次いで、細胞境界区画の1つ以上のペアが、細胞境界区画104に合併され得る(ブロック306)。区画合併は、1つ以上の細胞の各々に関連付けられる1つ以上の境界区画への1つ以上の細胞の各々の表現のマッピングのための組み合わせの総数を削減するために、(ブロック304からの)生成された細胞境界区画をより長い区画のより小さいセットに組み込むことを目指す。これらの潜在的なマッピングは、1つ以上の標識節点206(図2Aを参照した説明を参照)によって表される、関連区画・細胞標識を有することができ、仮説選択中に考慮される仮説の数を削減することの一環として活用することができる、画像102からの観察可能な証拠である(図3Bを参照した説明を参照)。
細胞境界点の抽出(ブロック302)に関し、一実施形態では、各画像102(図1参照)の各ピクセルに対する境界強度および配向角を提供する、ヘッシアン演算子を使用して、境界点を抽出することができる。ヘッシアン演算子は、二次偏導関数のマトリクスとして表され得る。各画像102の各ピクセルにおける境界強度は、このマトリクスの固有値に基づいて取得され得、各画像102の各ピクセルにおける配向角は、このマトリクスの固有ベクトルに基づいて取得され得る。一実施形態では、各画像102へのヘッシアン演算子の適用に起因するヘッシアン画像が、閾値化され得る。閾値化が後に続く、ヘッシアン演算子を各画像102に適用することの効果は、細胞100(図1参照)の内部であろうと外部であろうと、画像102内の細胞境界点および他のピクセルの間のコントラストを強調することであり得る。他の実施形態では、強度勾配(例えば、Cannyエッジ検出および/またはSobelエッジ検出)、テクスチャ勾配、領域ベースのアプローチ、および/またはコンピュータビジョンの分野の当業者に公知である他の好適なアプローチを含むが、それらに限定されない、境界点抽出のための他のアプローチを使用することができる。
境界区画の生成(ブロック304)に関し、一実施形態では、抽出された細胞境界点のセットに含まれる首尾一貫した境界ピクセルの有向局所検索を通して、境界区画を生成することができる。以前に説明されたように、境界区画生成は、任意の所与の細胞の境界ピクセルを互に関係付ける、細胞内形状および幾何学的一貫性に基づく。例えば、楕円形の細胞境界に沿って本質的に位置し、楕円形の境界を本質的に覆う、境界点は、高度に首尾一貫し、その細胞と適合すると見なすことができる。一方で、無作為に散乱した点は、首尾一貫せず、いかなる特定の細胞とも適合しない。この場合の細胞形状は、楕円であると仮定されるが、他の好適な形状モデル(限定されないがbスプライン等)も仮定することができる。一実施形態では、境界区画の生成および細胞の表現への境界区画のマッピングは、ボトムアップ様式で起こる。境界区画は、滑らかな曲線に沿って、またはその付近に位置する点を検索することによって、決定することができる。これらの点が完全な楕円に沿って継続する場合、境界区画は楕円と同一である。しかし、細胞境界はまた、(他の細胞による閉塞により等)断絶されて不連続的でもあるため、区画を検出した後に、典型的には、細胞の表現への境界区画のマッピングが起こる。
一実施形態では、境界点は、以下の2つの競合基準、すなわち、(1)可能な限り少ない区画を作成する、および(2)各区画を画像102内の多くても1つの細胞に関連付けるという基準を受けて、境界区画にグループ化することができる。換言すると、一実施形態では、境界区画生成は、初期境界点を可能な限り少ない区画にグループ化することを目指すが、それらが同一の細胞を表すかどうかに関して不確かな場合、区画を分解しすぎる。後続の区画合併(ブロック306)は、これらの曖昧性を解消することを目指す。
一実施形態では、境界区画は、隆起検索区画生成を通して生成することができる。隆起検索は、それに沿って連続ピークが発生する経路を求める。隆起検索の例示は、山脈の頂上に沿って歩き、その山脈の方向に沿って次の山頂を探すことである。この検索は、画像102からの境界点抽出(ブロック302)を通して生成されるヘッシアン画像に行うことができる。隆起検索は、隆起への入力点として、ヘッシアン画像内の最も強い値のピクセルを見出すことによって始まる。次いで、これは、画像102からの境界点抽出(ブロック302)を通して生成される各ピクセルのヘッシアン配向角に沿って、元のピクセルから始まる軌道に沿って進行することによって継続する。これは、この軌道に沿って、別の最高値のピクセルを検索し、もう一度開始する。これは、期待領域中に高値ピクセルがなくなるまで、または見出された高値ピクセルが、区画の終点を示すことができる、現在の配向角とは過度に異なる配向角を有する場合のいずれかで、このプロセスを繰り返すことができる。区画の領域検索が終了したとき、新しい領域検索が開始される。このプロセスは、全ての高値ヘッシアン画像ピクセルが網羅されるまで継続される。
他の実施形態では、限定ではないが、境界点上の横型検索、最小全域木で境界点を順序付け、次いで、不連続点で木を分解すること、および/またはコンピュータビジョンの当業者に公知である他の好適なアプローチを含む、境界区画生成のための他のアプローチを使用することができる。
境界区画の合併(ブロック306)に関し、区画合併は、細胞への区画のマッピングのための組み合わせの総数を削減するために、生成された境界区画(ブロック304)をより長い区画のより小さいセットに組み込むことを目指す。一実施形態では、いずれか2つの区画について、区画合併は、4つの基準、すなわち、(1)相対適合誤差、(2)終点の連続性、(3)角度の連続性、および(4)曲率の一貫性のうちの1つ以上の基準に基づき得る。相対適合誤差基準は、1つは2つの入力区画の各々のため、および1つは合併区画のためのものである、3つの曲線を適合させることを伴うことができる。合併区画の適合誤差が個々の入力区画のものより良い場合、合併の可能性が増加する。終点基準の連続性は、合併される2つの区画が継続するものであった場合に互にどれだけ近いかを調べる。より近い距離は、合併をより起こりやすくする。角度の連続性の基準は、合併区画のための接合点における角度、ならびに接合点まで継続するものであった場合に個々の区画の各々の角度に基づくことを除いて、類似概念に基づく。これらの角度が互に近いほど、より合併が起こり得る。曲率の一貫性の基準は、合併される2つの区画の平均曲率が互に近い場合に、より合併が起こり得ることであり得る。
一実施形態では、区画をより大きい区画のより小さいセットに合併することができるかどうかを決定するように、生成された境界区画(ブロック304)の幾何学的性質を分析する合併インターフェースに基づいて、区画を合併することができる(ブロック306)。境界区画の合併は、頂点が区画であり、縁が区画の合併を示す、グラフ上でのグラフ分割として策定することができ、分割の数は、事前に知られていない。
図3Bは、本発明の実施形態による、細胞境界特徴情報への細胞100(図1参照)の表現のマッピングを生成し、各々が細胞100のうちの1つ以上の細胞の推測特性を含む仮説を精緻化するための方法310を図示する。一実施形態では、細胞100は、ヒト胚に含まれ得る。各画像102(図1参照)において、胚発生に関連付けられる仮説が生成され、それらの各々は、細胞100の各々の表現を細胞境界区画104のうちの1つ以上の区画にマップする、細胞境界区画標識に関連付けられる。各画像102において、画像102に関連付けられる予備仮説313を決定するために、前の画像102i-1からの細胞100i-1/nに対する仮説106i-1/nから選択される、いくつかの「親」仮説311を使用することができる(ブロック312)。親仮説311のうちの1つ以上の仮説に関連付けられる楕円をサンプリングし、摂動させることによって、画像102に関連付けられる予備仮説313の各々に関連付けられる楕円に関連付けられる、推測幾何学的パラメータ等のこれらの予備仮説313に含まれる推測特性のうちの1つ以上の特性が生成され得る。一実施形態では、画像102i-1に示されることができる各数の細胞(1つ、2つ、3つ、および4つの細胞等)に関連付けられる、1つの親仮説311があり得る。代替として、画像102i-1に示されることができる各数の細胞に関連付けられる、より多いまたは少ない親仮説311があり得る。一実施形態では、1つ、2つ、3つ、または4つの予備仮説313があり得る。代替として、多数の予備仮説313があり得る。初期画像102では、細胞1001/1に対する境界区画に最良適合する楕円を見出すことによって、初期仮説が生成され得る。
一実施形態では、1つ以上の検出された区画は、細胞100のうちのいずれかの表現に割り当てられることができない。有利なことには、これは、細胞境界データの処理に関連付けられる一般的な問題である、異常値および偽陽性境界のよりロバストな処理を可能にすることができる。
次に、現在の画像(画像102)からの観察可能な幾何学的情報に基づいて、仮説315が予備仮説から生成される(ブロック314)。一実施形態では、仮説315は、少なくとも画像102からの観察可能な幾何学的情報に基づいて、データ駆動型精緻化仮説を取得するように、期待値最大化(EM)最適化を通して生成され得る(ブロック314)。画像102からの観察可能な幾何学的情報は、画像102に示される細胞100i/nの形状および配列のうちの1つ以上のものを含み得る。細胞100i/nの形状は、複数の形状パラメータによって特徴付けられ得る。例えば、楕円である形状については、形状パラメータは、長軸長、短軸長、楕円中心のx座標、楕円中心のy座標、およびヨー角を含み得るが、それらに限定されない。細胞100i/nの配列は、限定されないが、細胞100i/nのうちの1つ以上の細胞の配向、場所、および細胞の間の重複のうちの1つ以上のものに関係付けられる、パラメータによって特徴付けられ得る。有利なことには、現在の画像102、ならびに過去の画像102から102i-1からの観察可能な幾何学的情報を考慮することによって、仮説315は、利用可能で観察可能な幾何学的情報の完全なセットをより密接に追跡するように精緻化され得、それによって、仮説選択をより扱いやすく、かつ確実にする。
一実施形態では、ブロック314内の仮説315の生成は、ブロック316、318、および320のうちの1つ以上のブロックを含み得る。画像102では、次いで、画像102に適用された区画合併(ブロック306)から取得される境界区画104i/kへの予備仮説313の各々に関連付けられる細胞100i/nの各々の表現のマッピングが生成され得る(ブロック316)。一実施形態では、このマッピングは、区画104i/kの各々を、予備仮説313の各々に含まれる最も近い形状(楕円等)に割り当てることによって、取得され得る。例えば、区画104i/k内の全ての点にわたる平均距離が最小である、楕円は、区画104i/kのための対応する楕円であり得る。これらのマッピングは、1つ以上の標識節点206(図2参照)によって表される、区画・細胞標識によって表され得る。
次に、画像102で精緻化仮説315を取得するように、ブロック316からのマッピングに基づいて、次いで、予備仮説313の各々が精緻化され得る(ブロック318)。理想的には、画像102に示される細胞100i/nの各々の境界全体が可視的であろうため、予備仮説313にマップされる境界区画104i/kは、細胞100i/nの各々の境界全体を覆うであろう。しかしながら、より典型的なシナリオでは、画像102に示される細胞100i/nのうちの1つ以上の細胞の境界の区分は、可視的ではない場合があり、したがって、効果的に欠落し得る。推定値(期待値等)が、これらの区分について生成される必要があり得る。一実施形態では、各予備仮説313にマップされる境界区画104i/kに関連付けられる、いかなるデータ点も近くに有さない、各予備仮説313に関連付けられる各楕円の部分が識別される。一実施形態では、いくつかの同等に離間した点(50~100個、または任意の他の好適な数)を、各予備仮説313に関連付けられる各楕円のパラメトリック表現から生成することができる。各予備仮説313にマップされる境界区画104i/kに関連付けられるデータ点を十分に近くで有さない、これらのデータ点の各々は、推定データ点として楕円に含むことができる。
次いで、画像102で精緻化仮説315を取得するための予備仮説313の精緻化(ブロック318)は、(1つ以上の標識節点206(図2参照)によって表される)同一の区画・細胞標識を用いた、境界区画104i/kの各群への形状(限定されないが楕円等)の適合を含み得る。各精緻化仮説315は、これらの新たに適合された楕円のうちの1つ以上の楕円を含み、各楕円は、精緻化仮説315によって特徴付けられる関連細胞100i/nに関連付けられる。
次に、画像102に示される細胞100i/nから決定される境界区画104i/kを含むが、それらに限定されない、画像102からの観察可能な幾何学的情報に基づいて、各精緻化仮説315が採点され得る(ブロック320)。一実施形態では、各精緻化仮説315を取得するために、ブロック316、318、および320は、適合度(適合誤差)が収束するか、または最大数の反復に達するまで、繰り返され得る。複数の精緻化仮説315を各画像102で生成することができる。例えば、所与の画像102で生成される精緻化仮説315の数の代表的な値は、50~200の範囲内であるが、より多いまたは少ない仮説が生成され得る。
一実施形態では、所与のフレームに対する粒子採点基準は、適合度(適合誤差)および被覆率を含むが、それらに限定されない。適合度(0から1に及ぶことができる)および/または適合誤差(0から無限に及ぶことができる)は、細胞境界の欠落部分について生成される任意の推定データ点を含む、精緻化仮説315によって特徴付けられる各細胞100i/nに関連付けられる細胞境界点が、適合形状(限定されないが楕円等)を各細胞100i/nにどれだけ良く適合させるかを示す。被覆率は、細胞境界の欠落部分について生成される任意の推定データ点を含む、精緻化仮説315によって特徴付けられる各細胞100i/nに関連付けられる細胞境界点によって、適合形状の境界がどれだけ良く覆われるかを示す。一実施例では、被覆率に関連付けられる1つ以上のパラメータは、0から1に及ぶことができ、0は、被覆範囲がないことを意味することができ、1は、全被覆率を意味することができ、または逆も同様である。加えて、被覆率に関連付けられる他のパラメータは、適合形状への内座層と見なされる、細胞境界の欠落部分について生成される任意の推定データ点を含む、精緻化仮説315によって特徴付けられる各細胞100i/nに関連付けられる細胞境界点の比である、内座層被覆率を特徴付けることができる。例えば、これらの細胞境界点のうちの1つ以上の境界点は、適合形状からあまりにもかけ離れている場合に除外され得る。それが起こるとき、それに応じて、内座層被覆率を縮小することができる。
次に、親仮説317が、精緻化仮説315から画像102i+1について選択される(ブロック322)。一実施形態では、画像102に示されることができる各数の細胞(1つ、2つ、3つ、および4つの細胞等)に関連付けられる、1つの親仮説317があり得る。代替として、画像102に示されることができる各数の細胞に関連付けられる、より多いまたは少ない親仮説317があり得る。精緻化仮説315およびそれらのスコアの集合は、精緻化仮説315に関する分布を近似するために使用され、これは次いで、細胞の数に関する近似分布を取得するために周辺化される。次いで、この周辺分布は、親仮説317を選択するために使用することができる。例えば、親仮説317は、画像102から102に基づいて決定される、画像102から102の各々における細胞の数の近似最大周辺尺度、画像102から102の各々における細胞の数に関する近似同時分布、および/または画像102から102の各々における細胞の数に関する周辺分布のうちの1つ以上のものに基づいて、選択され得る。これらの分布は、さらに図3C、4A、および4Bを参照して説明される。
図3Cは、本発明の実施形態による、仮説106(図1参照)から仮説112を選択するための方法330を図示する。図4A-4Bは、本発明の実施形態による、図1の画像102に対する仮説112の選択のための例示的なアプローチを図示する。一実施形態では、仮説112の選択は、図2AのPGM202に関する近似推測である。代替として、仮説112の選択は、図2BのPGM222に関する近似推測である。代替として、仮説112の選択は、任意の好適な確率的グラフィカルモデルに関する近似推測であり得る。図3C、4A、および4Bを参照すると、一実施形態では、画像102から102に対する精緻化仮説315(図3B参照)に基づいて、画像102から102の各々における細胞の数の近似最大周辺尺度402を決定することができる(ブロック332)。本実施例では、近似最大周辺尺度402は、1つの細胞(402A)、2つの細胞(402B)、3つの細胞(402C)、および4つの細胞(402D)に対するものである。近似最大周辺尺度の値(Y軸)は、画像フレーム番号(1~400)に対して描画される。次いで、近似最大周辺尺度402に基づいて、画像102から102の各々における細胞の数に関する近似同時分布を決定することができる(ブロック334)。次いで、最も可能性の高い一連の仮説112が、時間連続的な画像102から102にわたって決定される(ブロック336)。一実施形態では、最も可能性の高い一連の仮説112は、画像102から102の各々における細胞の数に関する周辺分布404として表される。細胞の数に関するこれらの周辺分布404は、近似同時分布に基づいて、または任意の他の好適な様式で決定することができる(ブロック338)。選択された仮説112は、それぞれ、画像102、102150、102250、および102400の各々について示されるように、画像102から102(図4Aおよび4Bに示される実施例ではN=400)の各々に示される細胞100i/nの推定数406、および各選択された仮説112に関連付けられる1つ以上の細胞100の幾何学形状を含む、細胞100の特性108に関連付けられる。画像102から102の各々に示される細胞100i/nの推定数406は、1つの細胞(404A)、2つの細胞(404B)、3つの細胞(404C)、および4つの細胞(404D)に対する周辺分布404の間の交差点に基づいて、決定することができる。周辺分布の値(Y軸)は、画像フレーム番号(1~400)に対して描画される。画像102にわたる各周辺分布404の値は、選択された仮説112に基づいて、周辺分布404に関連付けられる細胞の数が画像102に示される確率を表す。細胞100i/nの推定数406の値(y軸)もまた、画像フレーム番号(1~400)に対して描画される。
以下の実施例3は、近似最大周辺尺度402の数学的形態(方程式(13、14)、実施例3参照)、および画像102から102の各々における細胞の数に関する近似同時分布(方程式(15)、実施例3参照)の実施例を詳細に図示し、その議論はここで繰り返されない。実施例3の方程式(15)は、細胞活性追跡と併せて使用され得る、分類および/またはフレーム間類似性決定等の無追跡アプローチに関連付けられる情報を含むように一般化され得る。無追跡アプローチを用いることなく細胞活性追跡が使用されるとき、細胞の数に関する近似同時分布の実施例が、方程式(2)として以下で示され、分類器に関連付けられる項
Figure 0007071047000022

は、ゼロに設定され、フレーム間類似性に関連付けられる項δ(t)は、(分裂事象が隣接する画像102(図1A参照)の間で同等に起こりることも、起こらないこともあるように)0.5に設定される。それによって、
Figure 0007071047000023

は、定数になり、近似同時分布から除外することができる。
Figure 0007071047000024
ブロック336および338を参照すると、確率伝搬法を使用して、画像102から102の各々における細胞の数に関する周辺分布404を決定することができる。確率伝搬法は、事前の知識を統合し、制約(減少しない数の細胞等)を実施し、細胞追跡結果、分類確率、および時間的画像類似性等の情報を融合して、大域的状況内で胚段階推定値(画像102から102の各々に示される細胞100i/nの推定数406等)を生成するために、使用することができる。一実施形態では、画像102から102の各々における細胞の数に関する同時分布、および画像102から102の各々における細胞の数に関する周辺分布404を提供するために、積和確率伝搬法を使用することができる。この分布のセットは、推測細胞分裂時間に対する信頼尺度を決定するために使用することができる(図4Cを参照した説明を参照)。
一実施形態では、仮説選択(ブロック336)によって考慮される制約は、以下のうちの1つであり、すなわち、(1)仮説106に関連付けられる1つ以上の細胞100の推測数が、一連の時間連続的な画像102から102にわたって経時的に減少していないこと、(2)1つ以上の細胞100の推測数の変化後、1つ以上の細胞100の推測数が、一連の時間連続的な画像102から102の第1のサブセットにわたって、ある期間で安定していること、および/または(3)1つ以上の細胞100の推測数が、一連の時間連続的な画像102から102の第2のサブセットにわたって、経時的にわずか1だけ減少し、次いで、第2のサブセットの終了時に増加すること。制約(2)は、期待生物学的時間枠外で起こる細胞分裂事象等のいくつかの仮説106の排除を促進することができる。制約(3)は、細胞100のうちの1つ以上の細胞が分裂し、次いで、再結合し、次いで、後に再度分裂する、ヒト胚発生のシナリオに適用することができる。
一実施形態では、上で説明されるPGM202および/または222(図2Aおよび2B参照)に関する近似推測は、左から右の様式で(画像102から画像102に)起こり得、その後に事象推測(図3Cを参照して説明される)が続く。代替として、または加えて、仮説315をさらに精緻化するように、および追加のまだ探索されていない仮説を検索するように、右から左への(画像102から画像102への)画像102の別の通過が起こることができる。代替として、または加えて、画像102の1つ以上のサブセットの1回以上の通過が起こり得る。
一実施形態では、事象推測(図3Cを参照して説明される)が省略され得る。本実施形態では、画像102から画像102の各々における親仮説317(図3B参照)は、選択された仮説112であり得る。
図4Aの実施形態では、無追跡アプローチを用いることなく、細胞活性追跡が使用される。代替として、図4Bの実施形態では、分類およびフレーム間類似性決定と併せて、細胞活性追跡が使用される。画像類似性尺度405は、隣接する画像102(図1A参照)の間の1つ以上の細胞分裂事象の発生の可能性に関し得る。分類尺度403は、手作りおよび/または機械学習される判別可能な画像特徴のセットから決定され得る、細胞の数の推定事後確率(一実施形態では、以下の実施例3の方程式(2)の中の
Figure 0007071047000025

)を含み得る。
いくつかの実施形態では、複数の画像102に関連付けられる選択された仮説112は、細胞活性パラメータ、タイミングパラメータ、非タイミングパラメータ、および/または同等物等の1つ以上のパラメータに基づいて、生物学的活性の特徴付けを決定し、計上し、および/または別様にそれに関連付けられるために使用することができる。例えば、複数の画像102が発育中の胚の経時的画像であるとき、各選択される仮説112は、限定されないが、1つの細胞、2つの細胞、3つの細胞、および/または4つの細胞等のいくつかの細胞を示す、画像102の可能性に関連付けることができ、細胞分裂タイミング/事象を推測するために使用することができる。そのような実施形態では、選択される仮説112は、図3Cを参照して説明されるもの等の制約を反映することができる。したがって、選択される仮説112は、複数の画像102に対して、第1の細胞質分裂の持続時間、第1細胞質分裂と第2細胞質分裂との間の時間間隔、第2細胞質分裂と第3細胞質分裂との間の時間間隔、第1の有糸分裂と第2の有糸分裂との間の時間間隔、第2の有糸分裂と第3の有糸分裂との間の時間間隔、受精から5つの細胞を有する胚までの時間間隔(以下の表1の中のt5)、配偶子合体から第1の細胞質分裂までの時間間隔(以下の表2の中のS)、および/または以下の表1に示される他のパラメータ等の他の好適なパラメータを決定するために使用することができる。
いくつかの実施形態では、パラメータは、表1で説明および/または参照されるような1つ以上のパラメータ、および/または他のパラメータを含むことができ、国際出願日が2012年5月31日の(PCT公開)WO2012/163363号、「Embryo Quality Assessment Based on Blastomere Cleavage and Morphology」、国際出願日が2014年2月3日の(PCT公開第)PCT/US2014/014449号、「Abnormal Syngamy Phenotypes Observed With Time Lapse Imaging for Early Identification of Embryos With Lower Development Potential」、および国際出願日が2014年2月3日の(PCT公開第)PCT/US2014/014466号、「Measuring Embryo Development and Implantation Potential With Timing and First Cytokinesis Phenotype Parameters」の開示が、それらの全体で参照することにより組み込まれる。
Figure 0007071047000026
Figure 0007071047000027
Figure 0007071047000028
本発明の側面はさらに、各選択された仮説(仮説112(図1A参照)等)に対する信頼尺度の決定のために動作可能である。各選択された仮説に対する信頼尺度は、選択された仮説の可能性の推定値に基づくことができる。例えば、胚発生における種々の期間(1細胞、2細胞、3細胞、および4細胞期間を含むが、それらに限定されない)が、1に近い周辺確率、および随意に、1細胞、2細胞、3細胞、および/または4細胞領域間の周辺分布404の急な遷移によって表される場合には、選択された仮説112に関連付けられる細胞100i/nの推定数406は、強く確信して信頼性があると見なすことができる。信頼尺度は、確率(0~1)、割合(0%~100%)、および/または同等物等の任意の好適な様式で表すことができる。
このようにして、本発明の側面はさらに、信頼尺度に基づいて、選択された仮説に信頼性があるかどうかを決定するように動作可能である。例えば、選択された仮説は、信頼尺度が閾値を満たすか、または超える場合に信頼性があると見なし、そうでなければ信頼性がないと見なすことができる。換言すると、信頼性決定は、2項選択基準であり得、仮説、および/または仮説に関連付けられる画像、および/または複数の画像等を使用するか、または破棄するかどうかを、自動的に、または手動で決定するために使用することができる。いくつかの実施形態では、信頼性決定は、選択された仮説に関連付けられる細胞活性パラメータの決定および/または伝達に影響を及ぼす因子であり得る。例えば、いくつかの実施形態では、細胞活性パラメータは、各異なる細胞特性に対する選択された仮説のうちの少なくとも1つに信頼性がある場合に決定することができる。したがって、例えば、細胞活性パラメータは、1つの細胞、2つの細胞、3つの細胞、および4つの細胞の各々に関連付けられる少なくとも1つの選択された仮説112が、信頼性があると見なされる場合に、特性108について決定されるであろう(図1参照)。いくつかの実施形態では、細胞活性パラメータは、少なくとも最小数の選択された仮説に信頼性がある場合に決定することができる。
いくつかの実施形態では、細胞活性パラメータは、各異なる数の細胞に対する(例えば、1つの細胞、2つの細胞等に対する)選択された仮説のうちの少なくとも1つが、信頼性があると見なされる場合のみ表示される。いくつかの実施形態では、細胞活性パラメータは、それに関連付けられる選択された仮説の信頼性の指標とともに表示される。このようにして、本発明の側面は、ユーザへの低信頼結果の表示を防止するように、および/または低信頼性結果をユーザに警告するように動作可能である。
いくつかの実施形態では、画像の信頼性決定に基づいて、選択基準を複数の画像に示される細胞に適用することができる。換言すると、画像ベースの信頼性決定を、画像に示される細胞の生物学的決定を行うことに変換することができる。例えば、選択基準は、細胞の発生能力、すなわち、細胞が着床した場合に、胚盤胞へ進むであろうかどうか、女性対象で着床をもたらすであろうかどうか、女性対象で着床したときに妊娠をもたらすであろうかどうか、および/または同等のものであろうかどうかに関連付けることができる。いくつかの実施形態では、1つ以上の細胞は、仮説のうちの少なくとも1つが、信頼性がないと決定される場合に、(例えば)不適合と見なすことができる。いくつかの実施形態では、そのような選択基準を適用することの結果をユーザに伝達することができる。このようにして、ユーザは、ここで説明される画像ベースの選択基準決定に基づいて、細胞を破棄するか、または使用するかどうかを決定することができる。
図4Cは、本発明の実施形態による、選択された仮説(図1Aの選択された仮説112等)の信頼尺度の決定のため、およびこの信頼情報を適用するための例示的かつ非限定的なアプローチを図示する。画像102から102の各々に示される細胞100i/nの推定数406は、各画像102において最高の可能性を有する選択された仮説112(本実施例では1つの細胞、2つの細胞、3つの細胞、および4つの細胞に対する)に関連付けられる。次いで、各選択された仮説に対する信頼尺度が決定される(ブロック408)。信頼尺度は、画像102から102にわたる選択された仮説112のうちの1つ以上の仮説の信頼性を表すことができる。例えば、信頼尺度は、(2つの細胞に対する、図4Aおよび4B参照)周辺分布404Bに関連付けられる最高確率、または別の好適な尺度に基づき得る。代替として、または加えて、信頼尺度は、周辺分布404によって表されるような1細胞、2細胞、3細胞、および/または4細胞領域間の遷移の急激性に基づき得る。胚発生におけるこれらの種々の期間(1細胞、2細胞、3細胞、および4細胞期間を含むが、それらに限定されない)が、1に近い周辺確率、および随意に、1細胞、2細胞、3細胞、および/または4細胞領域間の周辺分布404の急な遷移によって表される場合には、選択された仮説112に関連付けられる細胞100i/nの推定数406は、強く確信して信頼性があると見なすことができる。信頼尺度は、0~1の値であり得、0%~100%の信頼率の値を表し得る。
次に、信頼尺度を閾値化することによって、選択された仮説112の信頼性を決定することができる(ブロック410)。例えば、選択された仮説112は、各数の細胞に対する少なくとも1つの選択された仮説112の信頼尺度が、少なくとも閾値である場合に、全体的に信頼性があると見なすことができる。閾値は、限定されないが、0.5、0.6、0.7、0.8、0.9、または1.0等の0~1の任意の好適な値であり得る。いくつかの実施形態では、選択された仮説112が、信頼性がないと見なされる場合、仮説112の非信頼性の指標が表示され得る。
次に、選択された仮説112が、信頼性があると見なされる場合、および/または信頼性のない結果についてそのように特定される場合、細胞分裂事象、細胞分裂および/または成長の持続時間、および/または同等物等のパラメータの特徴付けに基づいて、細胞活性を決定することができる(ブロック412)。次に、着床のために画像102に示される胚を容認するか、または拒絶するかどうかを決定するように、選択基準を適用することができる(ブロック414)。選択基準は、ブロック410で行われる閾値化に基づいて、および随意に、ブロック412で行われるパラメータ特徴付けに基づいて決定することができる。
一実施形態では、選択基準に基づいて、仮説112のうちの少なくとも1つが、信頼性がないと見なされる場合に、女性のヒト対象への着床のための胚の拒絶を表示することができる。代替として、または加えて、女性のヒト対象への着床のための胚の発生能力の指標を表示することができ、指標は、選択基準に基づいて決定される仮説112のうちの少なくとも1つの信頼性に基づく。発生能力の拒絶および/または指標は、信頼尺度に基づく、仮説112のうちの少なくとも1つの信頼性の指標とともに表示され得る。
図5を参照すると、本発明の実施形態による、自動細胞追跡のため、および信頼推定のためのシステム500の概略図が説明される。システム500は、少なくとも、撮像デバイス502と、コンピュータ装置504と、表示デバイス506と、入力インターフェース508とを含む。
いくつかの実施形態では、コンピュータ装置504、表示デバイス506、および入力インターフェース508は、(パーソナルコンピュータ、ラップトップ、および/またはタブレット形状因子の中等の)共通シャーシに組み込まれ得、有線および/または無線ネットワークを経由して撮像デバイス502に接続され得る。代替として、または加えて、撮像デバイス502、コンピュータ装置504、表示デバイス506、および入力インターフェース508は、共通シャーシに組み込まれ得る。
撮像デバイス502は、1つ以上の細胞の画像および/または複数の画像を取得するように構成可能な任意のデバイスであり得る。コンピュータ装置504は、撮像デバイス502から画像を受信するように構成され得る。いくつかの実施形態では、撮像デバイス502は、暗視野照明顕微鏡および明視野照明顕微鏡のうちの1つ以上のものを含むが、これらの画像診断法に限定されない。表示デバイス506は、制御情報および/またはデータをシステム500のユーザに表示するための任意の好適なデバイス(例えば、LCDディスプレイ等)であり得、随意に、(例えば、タッチスクリーンパネルを介して等)ユーザ入力を受信するために適し得る。いくつかの実施形態では、表示デバイス506は、少なくとも、複数の画像のうちの1つ以上の画像を表示するように構成される。いくつかの実施形態では、表示デバイス506はさらに、複数の仮説の信頼性の指標を提示するように構成される。
いくつかの実施形態では、コンピュータ装置504は、細胞活性の自動評価のために構成され得る。いくつかの実施形態では、複数の仮説が、画像に示される1つ以上の細胞の幾何学的特徴に基づく、細胞のうちの1つ以上の細胞の推測特性を含むように、コンピュータ装置504は、画像に示される1つ以上の細胞を特徴付ける、複数の仮説を生成するように構成され得る。コンピュータ装置はさらに、画像に関連付けられる複数の仮説からある仮説を選択するように構成され得る。コンピュータ装置504はさらに、仮説に関連付けられる推測特性に基づいて、細胞のうちの1つ以上の細胞の特性を決定するように構成され得る。1つ以上の細胞は、多細胞胚に含まれ得る。1つ以上の細胞は、ヒト胚、1つ以上の卵母細胞、あるいは1つ以上の多能性細胞に含まれ得る。
いくつかの実施形態では、コンピュータ装置504は、画像に示される1つ以上の細胞の幾何学的特徴との推測特性の適合性に基づいて、仮説を選択するように構成され得る。幾何学的特徴は、1つ以上の細胞の各々に関連付けられる境界情報を含み得る。境界情報は、1つ以上の境界区画を含み得る。コンピュータ装置は、1つ以上の細胞の各々に関連付けられる、1つ以上の境界区画を決定するように構成され得る。
いくつかの実施形態では、コンピュータ装置504は、1つ以上の細胞の各々の表現を1つ以上の境界区画にマップするように構成され得る。いくつかの実施形態では、コンピュータ装置504はさらに、第1の境界区画を、細胞のうちのいずれとも関連付けられないヌル識別子にマップするように構成され得、境界区画は、細胞の各々にマップされる境界区画のうちの関連する1つ以上の境界区画、および第1の境界区画を含む。
いくつかの実施形態では、コンピュータ装置504は、細胞のうちの1つ以上の細胞の特性に基づいて、第1の細胞質分裂の持続時間、第1細胞質分裂と第2細胞質分裂との間の時間間隔、第2細胞質分裂と第3細胞質分裂との間の時間間隔、第1の有糸分裂と第2の有糸分裂との間の時間間隔、第2の有糸分裂と第3の有糸分裂との間の時間間隔、受精から5つの細胞を有する胚までの時間間隔、および配偶子合体から第1の細胞質分裂までの時間間隔のうちの1つ以上のものを決定するように構成され得る。
いくつかの実施形態では、コンピュータ装置504は、画像に示される1つ以上の細胞を特徴付ける、予備仮説を生成するように構成され得る。コンピュータ装置504はさらに、画像に示される1つ以上の細胞の関連幾何学的特徴に基づいて、予備仮説を精緻化して、複数の仮説のうちの1つ以上の仮説を取得するように構成され得る。予備仮説は、1つ以上の細胞の各々に関連付けられる1つ以上の境界区画への1つ以上の細胞の各々の表現のマッピングに基づいて、精緻化され得る。
いくつかの実施形態では、予備仮説は、複数の第1の形状を含み得、複数の第1の形状の各々は、第1の形状パラメータ値によって画定され、細胞の各々は、複数の第1の形状のうちの関連するものによって特徴付けられる。コンピュータ装置が予備仮説を精緻化するように構成されることは、複数の第2の形状の各々を、画像に示される1つ以上の細胞の関連幾何学的特徴に適合させるように構成されることを含む。複数の第1の形状の各々、および複数の第2の形状の各々は、楕円であり得る。代替として、複数の第1の形状の各々、および複数の第2の形状の各々は、bスプラインであり得る。
いくつかの実施形態では、コンピュータ装置504は、細胞の一連の時間連続的な画像から、1つ以上の細胞の各々に関連付けられる境界情報を決定するように構成され得、画像は、一連の時間連続的な画像に含まれる第1の画像である。コンピュータ装置504はさらに、以前に選択された仮説を修正することによって、予備仮説を生成するように構成され得、以前に選択された仮説は、一連の時間連続的な画像に含まれる第2の画像であって、第1の画像に先立つ第2の画像に示されるような細胞を特徴付ける。一連の時間連続的な画像は、一連の経時的画像であり得る。
いくつかの実施形態では、画像は、第1の画像であり得、コンピュータ装置504が、第1の画像に示されるような細胞を特徴付ける複数の仮説からある仮説を選択するように構成されることは、第1の画像を含む一連の画像にわたって、最も可能性の高い一連の仮説を決定するように構成されることを含み得る。
いくつかの実施形態では、一連の画像は、一連の時間連続的な画像であり得る。コンピュータ装置504が、一連の時間連続的な画像にわたって、最も可能性の高い一連の仮説を決定するように構成されることは、一連の時間連続的な画像のうちの2つ以上の画像にわたって、細胞のうちの1つ以上の細胞の推測特性が、どのように変動し得るかを制限する制約を考慮するように構成されることを含み得る。制約は、(1)1つ以上の細胞の推測数が、一連の時間連続的な画像にわたって経時的に減少していないこと、(2)1つ以上の細胞の推測数の変化後、1つ以上の細胞の推測数が、一連の時間連続的な画像の第1のサブセットにわたって、ある期間で安定していること、および(3)1つ以上の細胞の推測数が、一連の時間連続的な画像の第2のサブセットにわたって、経時的にわずか1だけ減少し、次いで、第2のサブセットの終了時に増加することから成る群から選択され得る。
いくつかの実施形態では、1つ以上の細胞の推測特性は、1つ以上の細胞の推測数および1つ以上の細胞の推測幾何学形状のうちの少なくとも1つを含み得る。1つ以上の細胞の特性は、1つ以上の細胞の数および1つ以上の細胞の幾何学形状のうちの少なくとも1つを含み得る。1つ以上の細胞の推測幾何学形状は、1つ以上の細胞の推測形状、および1つ以上の細胞の推測配列を含み得る。1つ以上の細胞の幾何学形状は、1つ以上の細胞の形状、および1つ以上の細胞の配列を含み得る。1つ以上の細胞の数は、仮説に関連付けられる推測数と同一であり得る。1つ以上の細胞の幾何学形状は、仮説に関連付けられる1つ以上の細胞の推測幾何学形状と同一であり得る。
いくつかの実施形態では、コンピュータ装置504は、複数の仮説の各々に関連付けられる細胞のうちの1つ以上の細胞の推測幾何学形状と、画像に示される1つ以上の細胞の関連幾何学的特徴との間の差異に基づいて、複数の仮説からある仮説を選択するように構成され得る。いくつかの実施形態では、コンピュータ装置504は、複数の仮説の各々に関連付けられる細胞のうちの1つ以上の細胞の推測幾何学形状と、画像に示される1つ以上の細胞の関連幾何学的特徴との間の適合性に基づいて、複数の仮説からある仮説を選択するように構成され得る。
いくつかの実施形態では、コンピュータ装置504は、1つ以上の細胞の各々に関連付けられる、1つ以上の境界区画を決定するように構成され得る。いくつかの実施形態では、コンピュータ装置が、1つ以上の細胞の各々の1つ以上の境界区画を決定するように構成されることは、限定されないが、隆起検索区画生成等の区画生成を行うように構成されることを含み得る。いくつかの実施形態では、コンピュータ装置504が、1つ以上の細胞の各々の1つ以上の境界区画を決定するように構成されることは、第1の境界区画および第2の境界区画を、1つ以上の細胞のうちの少なくとも1つの1つ以上の境界区画に含まれる第3の境界区画に合併するように構成されることを含み得る。
いくつかの実施形態では、コンピュータ装置504は、複数の仮説のうちの1つ以上の仮説の可能性の推定値に基づいて、複数の仮説に関連付けられる信頼尺度を決定するように構成され得る。複数の仮説の各々は、複数の画像のうちの関連する1つ以上の画像に示される、1つ以上の細胞を特徴付ける。いくつかの実施形態では、コンピュータ装置504はさらに、複数の仮説の各々に関連付けられる、1つ以上の細胞の各々の推定幾何学形状と、1つ以上の細胞の1つ以上の画像から決定される、1つ以上の細胞の各々の境界との間の差異に基づいて、複数の仮説を選択するように構成される。いくつかの実施形態では、コンピュータ装置504はさらに、複数の仮説の各々に関連付けられる、1つ以上の細胞の各々の推定幾何学形状と、1つ以上の細胞の1つ以上の画像から決定される、1つ以上の細胞の各々の境界との間の適合性に基づいて、複数の仮説を選択するように構成される。
いくつかの実施形態では、複数の画像は、一連の経時的画像であり、複数の仮説のうちの1つ以上の仮説の可能性の推定値は、一連の経時的画像の各々に示される細胞の数が経時的に減少しないという制約を考慮する。
コンピュータ装置504はさらに、信頼尺度に基づいて、複数の仮説の信頼性を決定するように構成され得る。いくつかの実施形態では、複数の仮説の各々は、1つ以上の細胞の数の推定値、1つ以上の細胞の各々の形状の推定値、および1つ以上の細胞の配列の推定値のうちの1つ以上のものに基づく。
いくつかの実施形態では、コンピュータ装置504はさらに、複数の画像の各々の中の1つ以上の細胞に関連付けられる境界を検出するように構成され得る。複数の仮説の各々は、境界のうちの関連する1つ以上の境界に基づき得る。いくつかの実施形態では、境界の各々は、1つ以上の境界区画を含み得る。
いくつかの実施形態では、複数の仮説は、1つ以上の細胞の発生能に関連付けられる細胞活性の特徴付けに関連付けられる。いくつかの実施形態では、細胞活性の特徴付けは、第1の細胞質分裂の持続時間、第1細胞質分裂と第2細胞質分裂との間の時間間隔、第2細胞質分裂と第3細胞質分裂との間の時間間隔、第1の有糸分裂と第2の有糸分裂との間の時間間隔、第2の有糸分裂と第3の有糸分裂との間の時間間隔、受精から5つの細胞を有する胚までの時間間隔、および配偶子合体と第1の細胞質分裂との間の時間間隔のうちの1つ以上のものを含む。
いくつかの実施形態では、表示デバイス506は、細胞のうちの1つ以上の細胞の特性に基づいて、女性のヒト対象への着床のための細胞のうちの1つ以上の細胞の発生能力の指標を表示するように構成され得る。
いくつかの実施形態では、表示デバイス506はさらに、複数の仮説の信頼性の指標を提示するように構成され得、入力インターフェース508はさらに、表示デバイス506を介した提示に応答して、1つ以上の細胞の発生能力を示す入力を受信するように構成され得る。いくつかの実施形態では、表示デバイス506は、複数の仮説のうちの少なくとも1つが、信頼性があると決定される場合のみ、細胞活性の特徴付けを表示するように構成される。いくつかの実施形態では、表示デバイスは、細胞活性の特徴付け、および細胞活性の特徴付けに関連付けられる複数の仮説のうちの少なくとも1つの信頼性の指標を表示するように構成される。
いくつかの実施形態では、コンピュータ装置504はさらに、分類を行って、1つ以上の細胞の特性の決定を増補するように構成され得る。代替として、または加えて、コンピュータ装置504はさらに、画像類似性決定を行って、1つ以上の細胞の特性の決定を増補するように構成され得る。
いくつかの実施形態では、コンピュータ装置504はさらに、複数の仮説のうちの少なくとも1つの信頼性を決定することの一環として、信頼尺度に基づいて、選択基準を1つ以上の細胞に適用するように構成され得る。いくつかの実施形態では、選択基準は、女性のヒト対象への着床のための1つ以上の細胞の発生能力に関連付けられる。いくつかの実施形態では、選択基準は、信頼尺度の1つ以上の閾値に基づく。いくつかの実施形態では、表示デバイス506は、選択基準を適用することの結果を表示するように構成される。
いくつかの実施形態では、コンピュータ装置504はさらに、選択基準に基づいて、複数の仮説のうちの少なくとも1つが、信頼性がないと決定される場合に、女性のヒト対象への着床のための1つ以上の細胞を拒絶するように構成され得る。いくつかの実施形態では、表示デバイス506はさらに、選択基準に基づいて決定される、複数の仮説のうちの少なくとも1つの信頼性に基づいて、女性のヒト対象への着床のための1つ以上の細胞の発生能力の指標を表示するように構成され得る。
図6は、本発明の実施形態による、コンピュータ装置504を図示する。コンピュータ装置504は、少なくとも、プロセッサ512と、メモリ514と、入出力モジュール(I/O)516と、バス(図示せず)によって接続される接続インターフェース518とを含む。いくつかの実施形態では、メモリ514は、コンピュータ装置504を実装するために使用される、実行可能プログラム(図示せず)のセットを記憶する。加えて、または代替として、プロセッサ512は、図6で図示されるように、コンピュータ装置504を実装するために使用することができる。プロセッサ512は、画像モジュール520、境界検出モジュール522、仮説生成モジュール524、仮説選択モジュール526、信頼モジュール528、信頼性決定モジュール530、マッピングモジュール532、細胞活性パラメータ決定モジュール533、および表示モジュール542等の図6に示されるモジュールの種々の組み合わせを含み得る。いくつかの実施形態では、画像モジュール520は、暗視野照明顕微鏡、明視野照明顕微鏡、または他の好適な画像診断法のうちの1つ以上のものを介して、複数の画像を取得するように構成することができる。
いくつかの実施形態では、仮説選択モジュール526は、画像に示される1つ以上の細胞を特徴付ける、複数の仮説からある仮説を選択するように構成され得る。複数の仮説の各々は、画像に示される1つ以上の細胞の幾何学的特徴に基づいて、細胞のうちの1つ以上の細胞の推測特性を含み得る。仮説選択モジュール526はさらに、仮説に関連付けられる推測特性に基づいて、細胞のうちの1つ以上の細胞の特性を決定するように構成され得る。仮説選択モジュール526は、メモリまたは処理デバイスのうちの少なくとも1つにおいて実装され得る。1つ以上の細胞は、多細胞胚に含まれ得る。1つ以上の細胞は、ヒト胚、1つ以上の卵母細胞、あるいは1つ以上の多能性細胞に含まれ得る。
いくつかの実施形態では、仮説選択モジュール526は、画像に示される1つ以上の細胞の幾何学的特徴との推測特性の適合性に基づいて、仮説を選択するように構成され得る。幾何学的特徴は、1つ以上の細胞の各々に関連付けられる境界情報を含み得る。境界情報は、1つ以上の境界区画を含み得る。コンピュータ装置は、1つ以上の細胞の各々に関連付けられる、1つ以上の境界区画を決定するように構成され得る。
いくつかの実施形態では、1つ以上の細胞の推測特性は、1つ以上の細胞の推測数、および1つ以上の細胞の推測幾何学形状のうちの少なくとも1つを含み得る。1つ以上の細胞の特性は、1つ以上の細胞の数、および1つ以上の細胞の幾何学形状のうちの少なくとも1つを含み得る。1つ以上の細胞の数は、仮説に関連付けられる推測数と同一であり得る。1つ以上の細胞の幾何学形状は、仮説に関連付けられる1つ以上の細胞の推測幾何学形状と同一であり得る。
いくつかの実施形態では、仮説選択モジュール526は、複数の仮説の各々に関連付けられる細胞のうちの1つ以上の細胞の推測幾何学形状と、画像に示される1つ以上の細胞の関連幾何学的特徴との間の差異に基づいて、複数の仮説からある仮説を選択するように構成され得る。仮説選択モジュール526は、複数の仮説の各々に関連付けられる細胞のうちの1つ以上の細胞の推測幾何学形状と、画像に示される1つ以上の細胞の関連幾何学的特徴との間の適合性に基づいて、複数の仮説からある仮説を選択するように構成され得る。
いくつかの実施形態では、画像は、第1の画像である。仮説生成モジュール526は、第1の画像を含む一連の画像にわたる最も可能性の高い一連の仮説の決定に基づいて、第1の画像に示されるような細胞を特徴付ける、複数の仮説からある仮説を選択するように構成され得る。
いくつかの実施形態では、一連の画像は、一連の時間連続的な画像である。仮説選択モジュール526は、一連の時間連続的な画像のうちの2つ以上の画像にわたって、1つ以上の細胞の推測特性が、どのように変動し得るかを制限する制約を考慮して、一連の時間連続的な画像にわたって最も可能性の高い一連の仮説を決定するように構成され得る。制約は、(1)1つ以上の細胞の推測数が、一連の時間連続的な画像にわたって経時的に減少していないこと、(2)1つ以上の細胞の推測数の変化後、1つ以上の細胞の推測数が、一連の時間連続的な画像の第1のサブセットにわたって、ある期間で安定していること、および(3)1つ以上の細胞の推測数が、一連の時間連続的な画像の第2のサブセットにわたって、経時的にわずか1だけ減少し、次いで、第2のサブセットの終了時に増加することから成る群から選択され得る。
いくつかの実施形態では、仮説生成モジュール524は、画像に示される1つ以上の細胞の関連幾何学的特徴に基づいて、複数の仮説を生成するように構成され得る。仮説生成モジュール524は、画像に示されるような細胞を特徴付ける、予備仮説を生成するように構成され得、画像に示される1つ以上の細胞の幾何学的特徴に基づいて、予備仮説を精緻化して、複数の仮説のうちの1つ以上の仮説を取得するように構成され得る。仮説生成モジュール524は、予備仮説によって特徴付けられるような1つ以上の境界区画への1つ以上の細胞の表現のマッピングに基づいて、予備仮説を精緻化するように構成され得る。
いくつかの実施形態では、予備仮説は、複数の第1の形状を含み得、複数の第1の形状の各々は、第1の形状パラメータ値によって画定され、細胞のうちの1つ以上の細胞の各々は、複数の第1の形状のうちの関連するものによって特徴付けられる。仮説生成モジュール524は、画像に示される1つ以上の細胞の関連幾何学的特徴への複数の第2の形状の各々の適合に基づいて、予備仮説を精緻化するように構成され得る。複数の第1の形状の各々、および複数の第2の形状の各々は、楕円であり得る。代替として、複数の第1の形状の各々、および複数の第2の形状は、bスプラインであり得る。
いくつかの実施形態では、境界検出モジュール522は、画像に基づいて、1つ以上の細胞の各々に関連付けられる境界情報を決定するように構成され得る。境界検出モジュール522はさらに、細胞の一連の時間連続的な画像から境界情報を決定するように構成され得る。画像は、一連の時間連続的な画像に含まれる第1の画像であり得る。仮説生成モジュール524はさらに、以前に選択された仮説を修正することによって、予備仮説を決定するように構成され得、以前に選択された仮説は、一連の時間連続的な画像に含まれる第2の画像であって、第1の画像に先立つ第2の画像に示されるような細胞を特徴付ける。
いくつかの実施形態では、境界検出モジュール522は、画像に基づいて、細胞のうちの1つ以上の細胞の各々に関連付けられる、1つ以上の境界区画を決定するように構成され得る。境界検出モジュール522はさらに、限定されないが、隆起検索区画生成等の区画生成を行って、1つ以上の境界区画を決定するように構成され得る。
いくつかの実施形態では、境界検出モジュール522は、画像に基づいて、細胞のうちの1つ以上の細胞の各々に関連付けられる、1つ以上の境界区画を決定するように構成され得る。境界検出モジュール522はさらに、区画合併を行って、1つ以上の境界区画のうちの少なくとも1つを決定するように構成され得る。例えば、境界検出モジュール522は、第1の境界区画と第2の境界区画とを、1つ以上の境界区画に含まれる第3の境界区画に合併するように構成され得る。
いくつかの実施形態では、細胞活性パラメータ決定モジュール533は、1つ以上の細胞の特性に基づいて、第1の細胞質分裂の持続時間、第1細胞質分裂と第2細胞質分裂との間の時間間隔、第2細胞質分裂と第3細胞質分裂との間の時間間隔、第1の有糸分裂と第2の有糸分裂との間の時間間隔、第2の有糸分裂と第3の有糸分裂との間の時間間隔、受精から5つの細胞を有する胚までの時間間隔、および配偶子合体から第1の細胞質分裂までの時間間隔のうちの1つ以上のものを決定するように構成され得る。
いくつかの実施形態では、マッピングモジュール532は、細胞のうちの1つ以上の細胞の各々の表現を、複数の仮説の各々によって特徴付けられるような関連する1つ以上の境界区画にマップするように構成され得る。いくつかの実施形態では、境界区画は、1つ以上の境界区画と、第1の境界区画とを含み得る。マッピングモジュールは、第1の境界区画を、細胞のうちのいずれとも関連付けられないヌル識別子にマップするように構成され得る。
いくつかの実施形態では、信頼モジュール528は、複数の仮説のうちの1つ以上の仮説の可能性の推定値に基づいて、複数の仮説に関連付けられる信頼尺度を決定するように構成され得る。複数の仮説の各々は、複数の画像のうちの関連する1つ以上の画像に示される、1つ以上の細胞を特徴付ける。
いくつかの実施形態では、信頼性決定モジュール530は、信頼尺度に基づいて、複数の仮説のうちの少なくとも1つの信頼性を決定するように構成され得る。いくつかの実施形態では、信頼性決定モジュール530はさらに、信頼尺度に基づいて、選択基準を1つ以上の細胞に適用するように構成され得る。いくつかの実施形態では、選択基準は、女性のヒト対象への着床のための1つ以上の細胞の発生能力に関連付けられる。
いくつかの実施形態では、複数の仮説は、第1の複数の仮説であり、仮説生成モジュール524は、第1の複数の仮説を含む、第2の複数の仮説を決定するように構成され得る。第2の複数の仮説の各々は、1つ以上の細胞の数の推定値、1つ以上の細胞の各々の形状の推定値、および1つ以上の細胞の配列の推定値のうちの1つ以上のものに基づく。
いくつかの実施形態では、仮説選択モジュール526は、複数の仮説の各々に関連付けられる、1つ以上の細胞の各々の推測幾何学形状と、1つ以上の細胞の1つ以上の画像から決定される、1つ以上の細胞の各々の境界との間の差異に基づいて、複数の仮説を選択するように構成され得る。いくつかの実施形態では、境界の各々は、1つ以上の境界区画を含む。いくつかの実施形態では、仮説選択モジュール526は、複数の仮説の各々に関連付けられる、1つ以上の細胞の各々の推測幾何学形状と、1つ以上の細胞の1つ以上の画像から決定される、1つ以上の細胞の各々の境界との間の適合性に基づいて、複数の仮説を選択するように構成され得る。いくつかの実施形態では、境界の各々は、1つ以上の境界区画を含む。
いくつかの実施形態では、境界検出モジュール522は、複数の画像の各々の中の1つ以上の細胞に関係付けられる、境界を検出するように構成され得る。複数の仮説の各々は、境界のうちの関連する1つ以上の境界に基づく。いくつかの実施形態では、境界の各々は、1つ以上の境界区画を含む。
いくつかの実施形態では、表示モジュール542は、複数の仮説のうちの少なくとも1つが、信頼性があると決定される場合のみ、細胞活性の特徴付けを表示するように構成され得る。いくつかの実施形態では、表示モジュール542はさらに、細胞活性の特徴付け、および細胞活性の特徴付けに関連付けられる複数の仮説のうちの少なくとも1つの信頼性の指標を表示するように構成され得る。いくつかの実施形態では、表示モジュール542はさらに、選択基準を適用することの結果を表示するように構成され得る。いくつかの実施形態では、表示モジュール542はさらに、1つ以上の細胞の特性に基づいて、および/または選択基準に基づいて決定される複数の仮説のうちの少なくとも1つの信頼性に基づいて、女性のヒト対象への着床のための1つ以上の細胞の発生能力の指標を表示するように構成され得る。
いくつかの実施形態では、プロセッサ512はさらに、以下の実施例1でさらに説明される、学習モジュール540と、訓練モジュール534と、分類モジュール536とを含み得る。分類モジュール536は、仮説選択モジュール526による、1つ以上の細胞の特性の決定を増補するように構成され得る。
いくつかの実施形態では、プロセッサ512はさらに、以下の実施例1でさらに説明される、結果決定モジュール538を含み得る。
いくつかの実施形態では、プロセッサ512はさらに、画像類似性決定モジュール541を含み得る。画像類似性決定モジュール541は、仮説選択モジュール526による、1つ以上の細胞の特性の決定を増補するように構成され得る。
いくつかの実施形態では、プロセッサはさらに、その開示全体が参照することにより本明細書に組み込まれる、2014年2月28日に出願された、米国特許出願第__/___,___号、「APPARATUS,METHOD,AND SYSTEM FOR IMAGE-BASED HUMAN EMBRYO CELL CLASSIFICATION」で開示されるように、自動胚ランク付けおよび/またはカテゴリ化のために、選択モジュール544と、スコア決定モジュール548と、ランク付けモジュール550と、カテゴリ化モジュール552とを含むことができる。
図7は、本発明の実施形態による、細胞活性の自動評価のための方法を図示する。1つ以上の細胞を特徴付ける、複数の仮説が生成される(ブロック710)。1つ以上の細胞の幾何学的特徴に基づいて、1つ以上の細胞の推測特性が決定され得る(ブロック712)。次に、複数の仮説から仮説が選択される(ブロック720)。次に、第1の仮説に関連付けられる推測特性に基づいて、細胞のうちの1つ以上の細胞の特性が決定され得る(ブロック730)。
いくつかの実施形態では、細胞活性の自動非侵襲評価のための方法は、画像に示される1つ以上の細胞を特徴付ける、複数の仮説を生成することを含み、複数の仮説を生成することは、画像に示される1つ以上の細胞の幾何学的特徴に基づいて、1つ以上の細胞の推測特性を決定することを含む。細胞活性の自動非侵襲評価のための方法はさらに、画像に関連付けられる複数の仮説からある仮説を選択することを含む。本方法は、仮説に関連付けられる推測特性に基づいて、細胞のうちの1つ以上の細胞の特性を決定することを含み得る。
いくつかの実施形態では、1つ以上の細胞は、多細胞胚に含まれる。
細胞活性の自動非侵襲評価のための方法のいくつかの実施形態では、仮説を選択することは、画像に示される1つ以上の細胞の幾何学的特徴との推測特性の適合性に基づく。幾何学的特徴は、1つ以上の細胞の各々に関連付けられる境界情報を含み得る。境界情報は、1つ以上の境界区画を含み得る。
いくつかの実施形態では、細胞活性の自動非侵襲評価のための方法はさらに、1つ以上の境界区画への1つ以上の細胞の各々の表現のマッピングを含み得る。いくつかの実施形態では、細胞活性の自動非侵襲評価のための方法はさらに、第1の境界区画を、細胞のうちのいずれとも関連付けられないヌル識別子にマップすることを含み、境界区画は、1つ以上の細胞の各々にマップされる境界区画のうちの関連する1つ以上の境界区画、および第1の境界区画を含む。
いくつかの実施形態では、細胞活性の自動非侵襲評価のための方法はさらに、1つ以上の細胞の特性の決定を増補するために、分類を行うことを含む。
いくつかの実施形態では、細胞活性の自動非侵襲評価のための方法はさらに、1つ以上の細胞の特性の決定を増補するために、画像類似性決定を行うことを含む。
いくつかの実施形態では、細胞活性の自動非侵襲評価のための方法はさらに、1つ以上の細胞の特性に基づいて、第1の細胞質分裂の持続時間、第1細胞質分裂と第2細胞質分裂との間の時間間隔、第2細胞質分裂と第3細胞質分裂との間の時間間隔、第1の有糸分裂と第2の有糸分裂との間の時間間隔、第2の有糸分裂と第3の有糸分裂との間の時間間隔、受精から5つの細胞を有する胚までの時間間隔、および配偶子合体と第1の細胞質分裂との間の時間間隔のうちの1つ以上のものを決定することを含む。
いくつかの実施形態では、1つ以上の細胞の推測特性は、1つ以上の細胞の推測数、および1つ以上の細胞の推測幾何学形状のうちの少なくとも1つを含み、1つ以上の細胞の特性は、1つ以上の細胞の数、および1つ以上の細胞の幾何学形状のうちの少なくとも1つを含む。いくつかの実施形態では、1つ以上の細胞の推定幾何学形状は、1つ以上の細胞の推定形状、および1つ以上の細胞の推定配列を含む。いくつかの実施形態では、1つ以上の細胞の幾何学形状は、1つ以上の細胞の形状、および1つ以上の細胞の配列を含む。いくつかの実施形態では、1つ以上の細胞の数は、仮説に関連付けられる推測数と同一である。いくつかの実施形態では、1つ以上の細胞の幾何学形状は、仮説に関連付けられる1つ以上の細胞の推測幾何学形状と同一である。いくつかの実施形態では、複数の仮説からある仮説を選択することは、複数の仮説の各々に関連付けられる1つ以上の細胞の推測幾何学形状と、画像に示される1つ以上の細胞の幾何学的特徴との間の差異に基づく。いくつかの実施形態では、複数の仮説からある仮説を選択することは、複数の仮説の各々に関連付けられる1つ以上の細胞の推測幾何学形状と、画像に示される1つ以上の細胞の幾何学的特徴との間の適合性に基づく。
いくつかの実施形態では、細胞活性の自動非侵襲評価のための方法はさらに、1つ以上の細胞の特性に基づいて、女性のヒト対象への着床のための1つ以上の細胞の発生能力の指標を表示することを含み得る。
いくつかの実施形態では、細胞活性の自動非侵襲評価のための方法はさらに、1つ以上の細胞の各々に関連付けられる、1つ以上の境界区画を決定することを含む。いくつかの実施形態では、1つ以上の細胞の各々の1つ以上の境界区画を決定することは、限定されないが、隆起検索区画生成等の区画生成を行うことを含む。いくつかの実施形態では、1つ以上の細胞の各々の1つ以上の境界区画を決定することは、第1の境界区画および第2の境界区画を、1つ以上の細胞のうちの少なくとも1つの1つ以上の境界区画に含まれる、第3の境界区画に合併することを含む。
いくつかの実施形態では、細胞活性の自動非侵襲評価のための方法はさらに、1つ以上の細胞を特徴付ける予備仮説を生成することと、画像に示される1つ以上の細胞の関連幾何学的特徴に基づいて、複数の仮説のうちの1つ以上の仮説を取得するように、予備仮説を精緻化することとを含む。いくつかの実施形態では、予備仮説は、複数の第1の形状を含み、複数の第1の形状の各々は、第1の形状パラメータ値によって画定され、細胞の各々は、複数の第1の形状のうちの関連するものによって特徴付けられる。いくつかの実施形態では、予備仮説を精緻化することは、複数の第2の形状の各々を、画像に示される1つ以上の細胞の関連幾何学的特徴に適合させることを含む。いくつかの実施形態では、複数の第1の形状の各々、および複数の第2の形状の各々は、楕円である。いくつかの実施形態では、複数の第1の形状の各々、および複数の第2の形状は、bスプラインである。いくつかの実施形態では、細胞活性の自動非侵襲評価のための方法はさらに、細胞の一連の時間連続的な画像から、1つ以上の細胞の各々に関連付けられる境界情報を決定することであって、画像は、一連の時間連続的な画像に含まれる、第1の画像である、ことと、以前に生成された仮説を修正することによって、予備仮説を生成することとを含み、以前に生成された仮説は、一連の時間連続的な画像に含まれる第2の画像であって、第1の画像に先立つ第2の画像に示されるような細胞を特徴付ける。いくつかの実施形態では、一連の時間連続的な画像は、一連の経時的画像である。
いくつかの実施形態では、画像は、第1の画像であり、第1の画像に示されるような1つ以上の細胞を特徴付ける、複数の仮説からある仮説を選択することは、第1の画像を含む一連の画像にわたって最も可能性の高い一連の仮説を決定することを含む。いくつかの実施形態では、一連の画像は、一連の時間連続的な画像であり、一連の画像にわたって最も可能性の高い一連の仮説を決定することは、一連の時間連続的な画像のうちの2つ以上の画像にわたって、1つ以上の細胞の推測特性が、どのように変動し得るかを制限する制約を考慮する。いくつかの実施形態では、制約は、1つ以上の細胞の推測数が、一連の時間連続的な画像にわたって経時的に減少していないこと、1つ以上の細胞の推測数の変化後、1つ以上の細胞の推測数が、一連の時間連続的な画像の第1のサブセットにわたって、ある期間で安定していること、および1つ以上の細胞の推測数が、一連の時間連続的な画像の第2のサブセットにわたって、経時的にわずか1だけ減少し、次いで、第2のサブセットの終了時に増加することから成る群から選択される。
いくつかの実施形態では、細胞は、ヒト胚、1つ以上の卵母細胞、あるいは1つ以上の多能性細胞に含まれる。
図8は、本発明の実施形態による、信頼性決定を含む、細胞活性の自動評価のための本発明の方法を図示する。信頼尺度が決定され、信頼尺度は、複数の仮説のうちの1つ以上の仮説の可能性の推定値に基づいて、複数の仮説に関連付けられる(ブロック810)。複数の仮説の各々は、複数の画像のうちの関連する1つ以上の画像に示される、1つ以上の細胞を特徴付ける。信頼尺度に基づいて、複数の仮説のうちの少なくとも1つの信頼性が決定される(ブロック820)。
いくつかの実施形態では、細胞活性の自動評価のための方法は、複数の仮説のうちの1つ以上の仮説の可能性の推定値に基づいて、複数の仮説に関連付けられる信頼尺度を決定することを含み、複数の仮説の各々は、複数の画像のうちの関連する1つ以上の画像に示される、1つ以上の細胞を特徴付ける。細胞活性の自動評価のための方法はさらに、信頼尺度に基づいて、複数の仮説のうちの少なくとも1つの信頼性を決定することを含む。
いくつかの実施形態では、1つ以上の細胞は、ヒト胚、1つ以上の卵母細胞、あるいは1つ以上の多能性細胞に含まれる。
いくつかの実施形態では、細胞活性の自動評価のための方法はさらに、複数の仮説の各々に関連付けられる、1つ以上の細胞の各々の推定幾何学形状と、1つ以上の細胞の1つ以上の画像から決定される、1つ以上の細胞の各々の境界との間の差異に基づいて、複数の仮説を選択することを含む。いくつかの実施形態では、境界の各々は、1つ以上の境界区画を含む。
いくつかの実施形態では、複数の画像は、暗視野照明顕微鏡法によって取得される。
いくつかの実施形態では、複数の仮説の各々は、1つ以上の細胞の数の推定値、1つ以上の細胞の各々の形状の推定値、および1つ以上の細胞の配列の推定値のうちの1つ以上のものに基づく。
いくつかの実施形態では、細胞活性の自動評価のための方法はさらに、複数の画像の各々の中の1つ以上の細胞に関連付けられる、境界を検出することを含み、複数の仮説の各々は、境界のうちの関連する1つ以上の境界に基づく。いくつかの実施形態では、境界の各々は、1つ以上の境界区画を含む。
いくつかの実施形態では、複数の仮説は、1つ以上の細胞の発生能に関連付けられる、細胞活性の特徴付けに関連付けられる。いくつかの実施形態では、細胞活性の特徴付けは、第1の細胞質分裂の持続時間、第1細胞質分裂と第2細胞質分裂との間の時間間隔、第2細胞質分裂と第3細胞質分裂との間の時間間隔、第1の有糸分裂と第2の有糸分裂との間の時間間隔、第2の有糸分裂と第3の有糸分裂との間の時間間隔、受精から5つの細胞を有する胚までの時間間隔、および配偶子合体と第1の細胞質分裂との間の時間間隔のうちの1つ以上のものを含む。いくつかの実施形態では、細胞活性の自動評価のための方法はさらに、複数の仮説のうちの少なくとも1つが、信頼性があると決定される場合のみ、細胞活性の特徴付けを表示することを含む。いくつかの実施形態では、細胞活性の自動評価のための方法はさらに、細胞活性の特徴付け、および細胞活性の特徴付けに関連付けられる複数の仮説のうちの少なくとも1つの信頼性の指標を表示することを含む。
いくつかの実施形態では、複数の画像は、一連の経時的画像であり、複数の仮説のうちの1つ以上の仮説の可能性の推定値は、一連の経時的画像の各々に示される細胞の数が経時的に減少しないという制約を考慮する。
いくつかの実施形態では、複数の仮説のうちの少なくとも1つの信頼性を決定することは、信頼尺度に基づいて、選択基準を1つ以上の細胞に適用することを含む。いくつかの実施形態では、選択基準は、女性のヒト対象への着床のための1つ以上の細胞の発生能力に関連付けられる。いくつかの実施形態では、選択基準は、信頼尺度の1つ以上の閾値に基づく。いくつかの実施形態では、細胞活性の自動評価のための方法はさらに、選択基準を適用することの結果を表示することを含む。いくつかの実施形態では、細胞活性の自動評価のための方法はさらに、選択基準に基づいて、複数の仮説のうちの少なくとも1つが、信頼性がないと見なされる場合に、女性のヒト対象への着床のための1つ以上の細胞を拒絶することを含む。いくつかの実施形態では、細胞活性の自動評価のための方法はさらに、選択基準に基づいて決定される複数の仮説のうちの少なくとも1つの信頼性に基づいて、女性のヒト対象への着床のための1つ以上の細胞の発生能力の指標を表示することを含む。
(実施例)
(実施例1)
前述のように、本発明のいくつかの側面はまた、胚の健康および/または運命/結果に関係付けられる細胞/胚特性の決定を増進する分類および/またはフレーム間類似性決定等の無追跡アプローチと併せて、自動非侵襲細胞活性追跡のためにも動作可能である。したがって、本発明のいくつかの側面は、1つ以上の分類器を使用する、画像ベースの細胞分類および/または画像ベースの細胞発生結果決定のために動作可能である。いくつかの実施形態では、少なくとも1つの分類器は、細胞分類のため、および結果決定のための両方に使用可能である。他の実施形態では、細胞分類に使用可能な1つ以上の分類器は、結果決定に使用可能な1つ以上の分類器とは異なる。
いくつかの実施形態では、細胞分類は、画像内の細胞の数を決定することを含むことができる。いくつかの実施形態では、細胞分類は、画像が予測された数の細胞を含む分類確率を決定することを含むことができる。いくつかの実施形態では、細胞分類は、予測された数の細胞を含む、または含まないものとしての画像の2項分類を含むことができる。
いくつかの実施形態では、1つ以上の分類器の各々は、1つ以上の細胞の複数の画像の各々に適用することができる。複数の画像は、経時的な一連の画像等の時間連続的な一連の画像であり得る。複数の画像に示される細胞は、任意の目的とする細胞であり得る。いくつかの実施形態では、各画像内の細胞の数が関心となり、それは、本発明の側面によって決定することができる。例えば、細胞は、ヒト胚であり得、細胞の数は、1細胞段階、2細胞段階、3細胞段階、4細胞段階等のうちの1つ以上の段階での胚を表すことができる。いくつかの実施形態では、4細胞段階は、4つ以上の細胞を表す。そのような目的とする細胞の他の実施例は、卵母細胞および多能性細胞を含むが、それらに限定されない。
任意の好適な分類器が採用され得る。いくつかの実施形態では、分類器は、機械学習アルゴリズムに基づく。分類器は、AdaBoost(適応ブースティング)分類器、またはサポートベクターマシン(SVM)等の別の分類器であり得る。いくつかの実施形態では、分類器は、細胞特徴および/またはパターン認識に基づく。細胞特徴は、限定されないが、細胞形状、テクスチャ、縁、および/または同等物の認識等の1つ以上の細胞(胚、卵母細胞、または多能性細胞等)の1つ以上の画像に基づいて取得される、特徴である。細胞特徴は、単一の細胞のみに関連付けられる特徴に限定されず、複数の細胞に関連付けられる特徴、および/または、1つ以上の細胞および画像背景等の1つ以上の細胞を示す画像の別の部分に関連付けられる特徴を指すことができる。いくつかの実施形態では、分類器は、標識画像を使用することによって等、1つ以上の教師あり学習アプローチを介して訓練される。いくつかの実施形態では、分類器が基づく細胞特徴は、1つ以上の教師なし学習アプローチを通して決定される。これらの教師なし学習アプローチは、非標識画像を使用し得る。
いくつかの実施形態では、各々が異なる数の細胞に関連付けられる、複数の分類器を採用することができる。さらに、いくつかの実施形態では、複数のレベルの画像分類器を採用することができ、各レベル内で、各分類器は、異なる数の細胞に関連付けられる。明確にするために、n個の細胞に関連付けられる個々の分類器は、細胞分類器として識別され、(各々が画像に適用される)細胞分類器のグループは、画像分類器と称されるであろう。いくつかの実施形態では、画像の分類をさらに精緻化するように、精緻化アルゴリズムを最後の画像分類器の出力に適用することができる。いくつかの実施形態では、精緻化アルゴリズムは、画像の時間的画像類似性尺度に基づいて、各画像の分類を精緻化する。いくつかの実施形態では、精緻化アルゴリズムは、経時的な一連の画像に含まれる画像の最も可能性の高い分類を見出すための動的プログラミングアルゴリズムである。いくつかの実施形態では、精緻化アルゴリズムは、ビタビアルゴリズムである。
いくつかの実施形態では、結果決定は、未知の結果を伴う細胞発生の複数の試験画像のいくつかの起こり得る結果のうちの予測結果を決定することを含むことができる。いくつかの実施形態では、結果決定は、試験画像の2項分類、すなわち、試験画像の2つの起こり得る結果のうちの結果を決定することを含むことができる。
いくつかの実施形態では、1つ以上の分類器の各々は、結果決定を行うように、1つ以上の細胞の複数の試験画像に適用することができる。試験画像は、経時的な一連の画像等の時間連続的な一連の画像であり得る。一連の画像は、経時的なビデオ等の1つ以上の細胞のビデオに含むことができる。試験画像に示される細胞は、任意の目的とする細胞であり得る。例えば、細胞は、ヒト胚であり得、試験画像の起こり得る結果は、胚盤胞(すなわち、着床に好適である胚盤胞が形成される)または停止(すなわち、胚発生が停止されているため胚盤胞形成が起こらない)のいずれかであり得る。そのような目的とする細胞の他の実施例は、卵母細胞および多能性細胞を含むが、それらに限定されない。
いくつかの実施形態では、分類器は、限定されないが、細胞形状、テクスチャ、縁、および/または同等物の認識等の細胞特徴および/またはパターン認識に基づいて、結果決定を行うように訓練される。
いくつかの実施形態では、分類器が基づく細胞特徴は、1つ以上の教師なし学習アプローチを通して決定される。これらの教師なし学習アプローチは、非標識画像を使用することができる。したがって、いくつかの実施形態では、細胞特徴は、1つ以上の機械学習される細胞特徴を含むことができる。概して、機械学習される細胞特徴は、結果決定、細胞分類、および/または同等物で後に使用する目的で、学習画像から学習される、任意の細胞特徴であり得る。いくつかの実施形態では、機械学習される細胞特徴は、複数の非標識学習画像からの分類器による教師なし学習に基づくことができ、細胞特徴は、いくつかの実施形態では、「バッグオブフィーチャーズ」と称される。非標識学習画像は、経時的な系列を形成する場合もあり、形成しない場合もあることが理解される。いくつかの実施形態では、バッグオブフィーチャーズは、上記で簡潔に説明され、以降でさらに詳細に説明されるように、分類器による細胞分類に向けて適用することができる。
いくつかの実施形態では、分類器は、教師なし学習後に、標識された、および/または特定の結果と別様に関連付けられた少なくとも1つの一連の訓練画像上で訓練され、すなわち、分類器は、教師あり訓練を受ける。いくつかの実施形態では、分類器は、複数の一連の訓練画像上で訓練され、各特定の結果のための少なくとも1つの一連の訓練画像が提供される。いくつかの実施形態では、分類器は、それぞれの特定の結果に関連付けられる各一連の訓練画像から抽出される、細胞特徴および/またはパターン情報に基づいて訓練される。このようにして、分類器は、各特定の結果に関連付けられる細胞特徴情報を認識するように訓練すされることができ、後に、試験画像から抽出される細胞特徴情報が最も良く対応する特定の結果に基づいて、試験画像を分類するために適用されることができる。
いくつかの実施形態では、分類器は、試験画像によって示される1つ以上の細胞について、特定の結果が試験画像によって示されている推定可能性を示す、各特定の結果に関連付けられた分類確率を決定することができる。分類確率は、試験画像によって示される1つ以上の細胞の発生に対する特定の結果の推定可能性を示すことができる。次いで、分類器は、例えば、試験画像が最高分類確率に関連付けられる特定の結果を示すと決定することによって等、分類確率に基づいて試験画像を分類することができる。
図9は、本発明の実施形態による、2レベル画像ベースの細胞分類アプローチの非限定的実施例を図示し、このアプローチは、各レベルで、4つの細胞分類器(すなわち、1細胞分類器902-1、2細胞分類器902-2、3細胞分類器902-3、および4細胞(または4つ以上の細胞)分類器902-4)を採用し、それらは、それぞれ、4つのAdaBoost細胞分類器、すなわち、1つの細胞、2つの細胞、3つの細胞、および4つの細胞を示すために入力画像を分類する。図9で図示されるように、および以降でさらに詳細に説明されるように、レベル1画像分類器902の出力は、追加の特徴として、レベル2画像分類器904によって対処されることができる。いくつかの実施形態では、例えば、ビタビアルゴリズム等の精緻化アルゴリズムが、レベル2画像分類器904の出力に適用される。
いくつかの実施形態では、画像分類器の各細胞分類器は、各画像について、各細胞分類器に関連付けられる第1の分類確率を決定することができる。各画像の第1の分類確率は、複数の細胞特徴に基づくことができる。いくつかの実施形態では、細胞特徴は、1つ以上の機械学習される細胞特徴を含むことができる。概して、機械学習される細胞特徴は、細胞分類で後に使用する目的で、学習画像から学習される任意の細胞特徴であり得る。いくつかの実施形態では、機械学習される細胞特徴は、未知数の細胞を有する複数の非標識学習画像上の分類器による、教師なし学習に基づくことができる(「バッグオフフィーチャーズ」とも称される)。いくつかの実施形態では、分類器は、結果決定について上で説明されるように、および以降でさらに詳細に説明されるように、このようにして複数の非標識画像からバッグオフフィーチャーズを学習する。
一実施形態では、バッグオフフィーチャーズは、スケール不変特徴変換(SIFT)、加速ロバスト特徴(SURF)、高速網膜キーポイント(FREAK)、およびバイナリロバスト不変拡張可能キーポイント(BRISK)、または当業者に公知である他の好適な記述子等のキーポイント記述子に基づく。
いくつかの実施形態では、細胞特徴はまた、機械学習されるよりもむしろ人間によって設計される、1つ以上の手作りの細胞特徴を含むこともできる。手作りの細胞特徴は、領域性質、GLCM、LBP、ヘッシアン特徴、ガボール特徴、および/または細胞境界特徴を含み得る(表2参照)。
以下の表2は、画像毎の分類に採用することができる、6種類の手作りの特徴およびバッグオブフィーチャーズ(教師なし学習を通して決定される)の例示的な一覧を図示する。GLCM、LBP、ガボール特徴は、分類に使用することができる、既知のテクスチャ特徴である。ヘッシアン特徴は、細胞縁を増進する、ヘッシアンフィルタにかけた画像の第1の固有値から計算される統計である。領域性質(面積、凸包点の数、固体性、偏心度、および外周)は、極性画像空間内の胚境界を抽出するように最短経路アルゴリズムを適用することによって取得される、粗い胚マスクから計算することができる。他の実施形態では、表2に示される特徴は、代替的な特徴セットおよび/または特徴セットあたりの異なる特徴の数と置換することができる。例えば、表2の中の手作りの特徴は、バッグオフフィーチャーズに類似する、他の機械学習される特徴(教師なし学習に基づいて学習される特徴等)と置換することができる。別の実施例では、異なる特徴の数(表2に示される369の代わりに262)を使用することができる。一実施形態では、262個の特徴は、表2に示される境界特徴を含まず、バッグオブフィーチャーズに300個の特徴の代わりに200個の特徴を含む。
Figure 0007071047000029
図9Bは、本発明の実施形態による、図9Aの(例えば)レベル1分類器902の訓練に使用することができる、それぞれ、1つの細胞(参照文字908-1)、2つの細胞(参照文字908-2)、3つの細胞(参照文字908-3)、および4つの細胞(参照文字908-4)を示すものとして標識される、訓練画像908の非限定的実施例を図示する。一実施形態では、訓練画像908-4は、4つ以上の細胞を示し得る。分類器の訓練は、各々が既知の数の細胞を有する複数の標識画像(訓練画像908等)に基づく、教師あり学習であり得る。
図9Cは、本発明の実施形態による、複数の画像上で表2の記載された特徴を採用する、分類器の例示的な出力910を図示する。図9Cでは、各行910-1から910-nは、単一の画像に関連付けられる(画像に対する「特徴ベクター」とも称される)。本実施形態では、各特徴ベクター910-1から910-nは、370の列(図9Cでは全て示されていない)を有し、1つは画像識別子910aに対し、1つは表2に示される369個の特徴の各々に対するものである。図9Cに示される代表的な列入力910a-910hは、画像識別子910aと、表2に記載される7つの特徴セットの各々に含まれる特徴の代表的な値を示す、1つの代表的な入力(910b-910h)とを含む。これらは、6つの手作りの特徴セット(Regionprops、GLCM、LBP、ヘッシアン特徴、ガボール特徴、および境界特徴)に関連付けられる代表的な入力910b-910gと、バッグオフフィーチャーズに関連付けられる代表的な入力910hとを含む。このようにして、各特徴ベクター910-1から910-nは、その関連画像内の特徴情報を表す。
細胞分類器が訓練されると、図10の非限定的実施例で広く図示されるように、およびこれに関してさらに詳細に説明されるように、画像毎の細胞分類のために、それらを非標識画像に適用することができる。図10では、発育中の胚の経時的な一連の画像1002が、本発明の実施形態に従って、図9Aのレベル1およびレベル2分類器1002、1004によって、画像毎の基準で分類される。複数の画像の各々に関連付けられる予測された数の細胞対画像識別子(例えば、フレーム番号または時間指標)として描画される、グラフ1004Aは、画像1002のうちの各画像に対するレベル1分類器902の出力を図示し、画像識別子は、X軸で提供され、画像識別子に関連付けられる分類結果は、Y軸で提供される。グラフ1004Bは、画像1002に関する各画像に対するレベル2分類器904の出力、ならびに入力としてのレベル1分類の結果を図示する。一般に、別様に注記されない限り、分類結果のプロット、または本明細書で開示されるような精緻化アルゴリズムを適用することの結果は、予測された数の細胞対画像識別子のプロットであり、画像識別子は、一連の画像に基づき、各他の画像に対して各画像が撮影された時間を表すことができる。
図11Aは、本発明の実施形態による、画像毎の分類を図示する。一連の試験および/または別様な非標識画像1102は、レベル1画像分類器902への入力としての機能を果たし、レベル1画像分類器902は、1細胞、2細胞、3細胞、および4細胞(または4つ以上の細胞)分類器(例えば、図9の細胞分類器902-1から902-4に類似する「細胞分類器」)を含み、さらに、追加の細胞分類器(図示せず)を含み得る。いくつかの実施形態では、各分類器は、細胞特徴に基づいて、各画像の分類確率を決定し、細胞特徴は、以前に説明されたように、機械学習される特徴および/または手作りの細胞特徴であり得る。いくつかの実施形態では、分類確率を決定することは、各画像に対する特徴ベクター(例えば、図9Cの各行910-1から910-nに類似する)を抽出すること、および/または別様に決定することと、特徴ベクターに基づいて分類確率を決定することとを含む。各分類確率は、各細胞分類器(例えば、1細胞分類器)に関連付けられる異なる数の細胞(例えば、1つの細胞)が各画像に示されている推定可能性を示すことができる。このようにして、画像1102のうちの各画像は、それに関連付けられる複数の分類確率1104を有する。いくつかの実施形態では、図11Aで図示されるように、複数の分類確率1104は、各細胞分類器について図11Aで好適に描画されるように、少なくとも、1細胞確率(参照文字1104-1)、2細胞確率(参照文字1104-2)、3細胞確率(参照文字1104-3)、および4細胞確率(参照文字1104-4)を含む。画像分類器902の出力は、全ての細胞分類器の出力の累積プロット1106(「レベル1出力」)によって表すことができる。一般に、別様に注記されない限り、本明細書で開示されるような画像分類器または細胞分類器の出力のプロットは、分類確率対画像識別子のプロットであり、画像識別子は、一連の画像に基づき、各他の画像に対して各画像が撮影された時間を表すことができる。
本発明の側面は、ある数の細胞を示すものとして各画像を分類するために、さらに構成可能である。いくつかの実施形態では、各画像は、各細胞分類器に関連付けられる異なる数の細胞、およびそれに関連付けられる複数の分類確率に基づいて分類することができる。例えば、図11Aでは、画像1102のうちの各画像は、各画像内の各細胞数の確率情報を提供する、レベル1出力1106に基づいて、1つの細胞、2つの細胞、3つの細胞、または4つの細胞(あるいは4つ以上の細胞)を示すものとして分類することができる。任意の画像の分類は、その画像に関連付けられている分類確率を計上する任意の好適な様式で達成され得る。いくつかの実施形態では、画像は、その画像に関連付けられる最高分類確率に関連付けられる細胞数を示すものとして、分類されると見なされる。例えば、図11Aのレベル1出力1106は、画像1102の(例えば、50番目の画像に対応する時間/タイムスタンプを表す)画像識別子50の最高分類確率が、1細胞分類器902-1に由来し、画像1102の画像識別子450の最高分類確率が、4細胞分類器902-4に由来することを示す。したがって、図11Aの「レベル1細胞数分類結果」プロット1108で最も良く図示されるように、画像識別子50が、1つの細胞を示すものとして分類される一方で、画像識別子450は、4つの細胞を示すものとして分類される。
いくつかの実施形態では、細胞分類結果1108は、複数の画像に示される細胞の細胞活性パラメータ、タイミングパラメータ、非タイミングパラメータ、および/または同等物等の1つ以上のパラメータに基づいて、生物学的活性を推測するために使用することができる。いくつかの実施形態では、細胞分類結果1108は、経時的な一連の画像のうちの連続画像内の細胞の数の変化に基づいて、細胞分裂事象を推測するために使用することができる。例えば、図11Aの分類結果1108は、細胞活性パラメータを決定するために使用することができる。いくつかの実施形態では、パラメータは、細胞活性パラメータを含むことができ、発育中の胚の中等で細胞を分裂させるための以下のパラメータのうちの1つ以上のパラメータ、すなわち、第1の細胞質分裂の持続時間、第1細胞質分裂と第2細胞質分裂との間の時間間隔、第2細胞質分裂と第3細胞質分裂との間の時間間隔、第1の有糸分裂と第2の有糸分裂との間の時間間隔、第2の有糸分裂と第3の有糸分裂との間の時間間隔、受精から5つの細胞を有する胚までの時間間隔(以下の表2の中のt5)、および配偶子合体から第1の細胞質分裂までの時間間隔(以下の表2の中のS)であり得る。
いくつかの実施形態では、パラメータは、表1で説明および/または参照されるような1つ以上のパラメータを含むことができる。
いくつかの実施形態では、限定されないが、胚の質の尺度(すなわち、画像が発育中の胚のものであるとき)等の決定された細胞活性パラメータに基づいて、1つ以上の予測基準を1つ以上の細胞に適用することができる。いくつかの実施形態では、予測基準はさらに、例えば、どの胚が胚盤胞に達するであろうか等の予測結果を決定するために採用することができ、どの胚がヒトの着床のための発生能を有するかをユーザが決定することを可能にすることができる。
いくつかの実施形態では、別の分類プロセス/アプローチのための入力として使用することができる、追加の細胞特徴を定義するために、上で説明される画像毎の確率1104-1から1104-4および/または分類結果1108を使用することができる。図11Bの例示的実施形態は、本発明の実施形態によると、画像1102を分類するために後続のレベル2細胞分類器904によって採用することができる、追加の細胞特徴を計算し、および/または別様に決定するために、図11Aの細胞分類器(「レベル1細胞分類器」、「第1の細胞分類器」、「レベル1画像分類器」、および/または「第1の画像分類器」とも称される)によって決定される分類確率1104-1から1104-4をどのようにして採用することができるかを図示する。図11Bで図示されるように、レベル2分類器904も、レベル1分類器の1細胞、2細胞、3細胞、および4細胞分類器に関連付けられる、1細胞、2細胞、3細胞、および4細胞分類器を含む。いくつかの実施形態では、増進した特徴ベクターを生成するために、追加の細胞特徴を各画像に対する特徴ベクターに追加することができる。実施例として、(単一の画像に関連付けられる)各行910-1から910-nが、各追加の細胞特徴に対する追加の入力を有するように、追加の列を、各追加の細胞特徴について図9Cで図示される表910に追加することができる。いくつかの実施形態では、その画像に関連付けられるレベル1分類確率1104-1から1104-4に基づいて、および少なくとも1つの他の画像に関連付けられるレベル1分類確率に基づいて、1つ以上の追加の細胞特徴が各画像について計算される。例えば、いくつかの実施形態では、レベル1細胞分類器によって決定されるような、その画像に対する1細胞、2細胞、3細胞、および4細胞分類確率1104-1から1104-4に基づいて、4つ以上の追加の細胞特徴を、各画像に対する特徴ベクター910-1から910-nに追加することができる。いくつかの実施形態では、各画像に対する特徴ベクター910-1から910-nに追加される4つ以上の追加の細胞特徴は、それぞれ、その画像および複数の画像のうちの少なくとも1つの他の画像に対する、1細胞、2細胞、3細胞、および4細胞分類確率1104-1から1104-4の平均値(平均)、中央値、最大値、最小値、標準偏差、および/または他の複合表現のうちの1つ以上のものに基づく。いくつかの実施形態では、平均化画像は、図10のグラフ1004Aに示されるもの等のレベル1分類確率の雑音が多い変動の低減を促進するように、互に時間的に隣接する。換言すると、画像1102を参照して、平均化分類確率は、一連の画像1102内で互に隣接する。このようにして、連続画像分類方式で、分類情報を1つの分類器から次の分類器に伝達することができる。2つの画像分類器902および904について図11Bで図示されているが、本明細書で説明されるアプローチは、連続的に、および/または並行して実行する、任意の追加の画像分類器に拡張可能であることが理解される。例えば、いくつかの実施形態では、レベル1分類器の出力を、2つ以上のレベル2分類器に並行して供給することができ、各レベル2分類器は、それぞれ、学習画像の異なるセットから学習させられ、および/または訓練画像の異なるセットに基づいて訓練される。このようにして、本発明の側面は、それを各他のレベル2分類器の出力と比較することによって、各レベル2分類器の出力の独立した補完的検証を受けるように動作可能である。
依然として図11Bを参照すると、いくつかの実施形態では、各レベル2細胞分類器904-1から904-4は、未知数の細胞を有する非標識学習画像上での教師なし学習に基づいて構成される。いくつかの実施形態では、レベル2細胞分類器904-1から904-4の教師なし学習に使用される非標識画像は、レベル1細胞分類器の教師なし学習に使用される、全てではないにしても少なくともいくつかの非標識画像とは異なる。したがって、本発明の側面は、画像の各後続の分類が、同一の画像の独立した前の分類から利益を得ることができるように、独立して訓練された分類器を連続的に採用するために構成可能である。
レベル2画像分類器904による画像ベースの細胞分類(「第2の分類」とも称される)は、レベル1画像分類器902について上で説明されるものと同様に進むことができる。すなわち、レベル2細胞分類器904-1から904-4は、各画像の各レベル2細胞分類器に関連付けられる第2の分類確率を決定するように、画像1102のうちの各画像に適用することができる。いくつかの実施形態では、第2の分類確率を決定することは、上で説明されるような各画像に対する増進した特徴ベクターを抽出すること、および/または別様に決定することと、特徴ベクターに基づいて第2の分類確率を決定することとを含むことができる。各第2の分類確率は、各細胞分類器(例えば、1細胞分類器)に関連付けられる異なる数の細胞(例えば、1つの細胞)が各画像に示されている推定可能性を示すことができる。このようにして、画像1102のうちの各画像は、それに関連付けられる複数の第2の分類確率を有する。いくつかの実施形態では、複数の第2の分類確率は、少なくとも、1細胞確率、2細胞確率、3細胞確率、および4細胞確率を含む。レベル2画像分類器の出力は、レベル2細胞分類器の出力の累積プロット1110(「レベル2出力」プロット)によって表すことができる。
本発明の側面は、ある数の細胞を示すものとして各画像を分類するために、さらに構成可能である。いくつかの実施形態では、各画像は、各レベル2細胞分類器に関連付けられる異なる数の細胞、およびそれに関連付けられる第2の分類確率に基づいて分類することができる。例えば、図11Bでは、画像1102のうちの各画像は、各画像内の各細胞数の確率情報を提供する、レベル2出力に基づいて、1つの細胞、2つの細胞、3つの細胞、または4つの細胞を示すものとして分類することができる。任意の画像の第2の分類は、その画像に関連付けられる第2の分類確率を計上する任意の好適な様式で達成され得る。いくつかの実施形態では、画像は、その画像に関連付けられる最高の第2の分類確率に関連付けられる細胞数を示すものとして、分類されると見なされる。
いくつかの実施形態では、レベル2細胞分類結果1112は、複数の画像に示される細胞の生物学的活性、細胞活性パラメータ、および/または同等物を推測するために使用することができる。いくつかの実施形態では、レベル2細胞分類結果312は、経時的な一連の画像のうちの連続画像内の細胞の数の変化に基づいて、細胞分裂事象を推測するために使用することができる。例えば、図11Bのレベル2分類結果1112は、細胞を分裂させるための以下のパラメータのうちの1つ以上のパラメータを含む、細胞活性パラメータ、すなわち、第1の細胞質分裂の持続時間、第1細胞質分裂と第2細胞質分裂との間の時間間隔、第2細胞質分裂と第3細胞質分裂との間の時間間隔、第1の有糸分裂と第2の有糸分裂との間の時間間隔、第2の有糸分裂と第3の有糸分裂との間の時間間隔、および受精から5つの細胞を有する胚までの時間間隔(表3の中のt5)を決定するために、使用することができる。代替として、または加えて、図11Bのレベル2分類結果1112は、表3に含まれる細胞活性パラメータのうちのいずれかを決定するために使用することができる。
いくつかの例示的実施形態では、図11Cで図示されるように、図11Bのレベル2分類結果1112を精緻化するために、ビタビアルゴリズムが使用される。レベル2分類器904、または代替として、レベル2分類結果1112を受信するモジュールが、ビタビアルゴリズムを実装し得る。ビタビアルゴリズムは、事前の知識を統合し、減少しない数の細胞を実施し、分類確率および時間的画像類似性等の情報を融合して、大域的状況内で最終胚段階分類結果を生成するために、レベル2分類器1104によって使用することができる。
いくつかの実施形態では、所与の画像について、ビタビアルゴリズムは、各先行画像に対処する。ビタビアルゴリズムは、連続画像が減少しない数の細胞を有することを実施し、それによって、レベル3結果1114で図示されるように、レベル2分類結果を「平滑化」し得る。このようにして、本発明の側面は、画像1102の単一の最も可能性が高い分類1114を提供することができる。図11Bでも示されるように、ビタビアルゴリズムはまた、以下の図20を参照して開示されるように評価される、各画像に対する時間的画像類似性スコア1116を入力として受け入れることもできる。
いくつかの実施形態では、限定されないが、胚の質の尺度(すなわち、画像が発育中の胚のものであるとき)等の決定された細胞活性パラメータに基づいて、1つ以上の予測基準を1つ以上の細胞に適用することができる。いくつかの実施形態では、予測基準はさらに、例えば、どの胚が胚盤胞に達するであろうか等の仮説的結果を決定するために採用することができ、どの胚がヒトの着床のための発生能を有するかをユーザが決定することを可能にすることができる。
図12は、本発明のいくつかの実施形態による、胚発生等の細胞発生の画像のための結果決定アプローチの非限定的実施例を図示する。訓練中に、訓練画像1202のN個のセットは、特定の結果を提供され、各特定の結果は、ここでは、「胚盤胞」または「停止」のいずれかに対応する。例えば、図12で図示されるように、一連の訓練画像1202-1は、胚盤胞結果に関連付けられ、一連の訓練画像1202-Nは、停止結果に関連付けられる。いくつかの実施形態では、訓練画像1202のうちの少なくとも1つ以上の画像は、訓練画像908のうちの少なくとも1つ以上の画像と同一であり得る。代替として、訓練画像1202の全ては、訓練画像908とは異なり得る。
図12でも図示されるように、および以下でさらに詳細に説明されるように、本発明の側面は、各一連の訓練画像1202からの特徴抽出1204を実行するように動作可能である。1つ以上の特徴ベクター等の抽出された特徴情報、およびそれらの関連結果は、結果分類器1206を訓練するために採用することができるが、いくつかの実施形態(図示せず)では、複数の分類器が、一連の訓練画像1202のうちのいくつかまたは全ての上で訓練され得る。図12は、AdaBoost分類器として分類器1206を図示するが、任意の好適な分類器が採用され得ることが理解される。
分類器1206は、訓練後に、一連の試験画像1208の結果決定に対して適用することができる。図12で図示されるように、訓練画像1202に対する特徴抽出1204に使用されるものに類似する様式/アプローチで、特徴抽出1210を介して、特徴情報を試験画像1208から抽出することができる。次いで、分類器1206は、抽出された特徴情報に基づいて、結果を決定し、および/または胚盤胞または停止として試験画像1208を分類することができる。いくつかの実施形態では、図12でも図示されるように、胚が着床に好適であるかどうか(「着床、着床なし」)、胚の着床が妊娠に発展する可能性があるかどうか(「妊娠、妊娠なし」)、および胚が正常な数の染色体を有するかどうか(「倍数性、異数性」)を含むが、それらに限定されない、他の関連する追加のまたは代替的な結果/推測が、分類器1206によって決定され得る。また、胚の質に関して、限定されないが、(「高品質胚盤胞、胚盤胞、および停止」)等の3つ以上の結果群があり得る。
上記で議論されるように、いくつかの実施形態では、分類器は、バッグオブフィーチャーズとも呼ばれる、細胞特徴を「学習」するように、非標識学習画像上で教師なし特徴学習を受ける。一実施形態では、バッグオブフィーチャーズは、スケール不変特徴変換(SIFT)、加速ロバスト特徴(SURF)、高速網膜キーポイント(FREAK)、およびバイナリロバスト不変拡張可能キーポイント(BRISK)、または当業者に公知である他の好適な記述子等のキーポイント記述子に基づく。
学習画像を表す特徴情報を生成する、任意の好適な学習アプローチが採用され得る。いくつかの実施形態では、学習画像の領域に関連付けられる複数の局所特徴情報(「局所特徴情報」)を決定するように、各学習画像内の領域が分析される。いくつかの実施形態では、局所特徴情報は、学習画像内の複数の場所で学習画像をサンプリングすることによって決定される。例えば、各サンプル点における色または強度を、数値として、および局所特徴情報として決定することができる。いくつかの実施形態では、生体画像で典型的であるような情報の疎の性質に対処する、スパースサンプリング等の圧縮感知技法が採用される。いくつかの実施形態では、局所特徴の検出および/または記述に向けて、追加のステップが講じられる。例えば、各サンプル点をビンにさらに分割することができ、サンプルあたり複数の局所特徴記述子値を収集するために、異なる方向に対する各ビンに対して、複数の測定を行うことができる。
いくつかの実施形態では、局所特徴情報は、学習画像全体の画像特徴情報(「画像特徴情報」)を取得するために組み合わせられことができる。例えば、画像特徴情報を、2次元マトリクス等の多次元マトリクスとして特定することができる。マトリクスは、少なくとも、局所特徴情報の決定に関連付けられるサンプル点の数に対応する第1の次元と、少なくとも、サンプルあたり収集される局所特徴記述子値の数等の各サンプル点に対する追加の検出/記述情報に対応する第2の次元とを有し得る。例えば、いくつかの実施形態では、学習画像に関連付けられる特徴記述子は、局所特徴情報に関連付けられる特徴ベクターの集合と見なすこともできる、この2次元マトリクスとして表すことができる。特徴ベクターの数は、サンプル点の数であり得、各特徴ベクターの長さは、各サンプル点に対して、上で説明されるように、以下の積:ビンの数×方向の数によって決定することができる。
いくつかの実施形態では、学習画像のセット/グループ全体の特徴情報(「セット特徴情報」)を取得するように、全ての学習画像の画像特徴情報を組み合わせることができる。セット特徴情報は、学習画像の全ての局所特徴情報の全てを含み得る。例えば、セット特徴情報を、3次元マトリクス等の多次元マトリクスとして特定することができる。マトリクスは、少なくとも学習画像の数に対応する、第1の次元と、少なくとも、局所特徴情報の決定に関連付けられるサンプル点の数に対応する、第2の次元と、少なくとも、サンプルあたり収集される局所特徴記述子値の数等の各サンプル点の追加の検出/記述情報に対応する、第3の次元とを有し得る。このようにして、結果分類器が最終的に細胞特徴を学習することができる、セット特徴情報を生成するように、局所、画像、およびセットレベルでの特徴情報を、任意の好適な様式で、連続的に計上し、集計し、連結し、および/または組み合わせることができる。
いくつかの実施形態では、生成されたセット特徴情報を、複数のデータ領域、または関連および/または有用な細胞特徴情報のクラスタ(「特徴クラスタ」)に分割するために、データマイニングアプローチを採用することができる。いくつかの実施形態では、k平均クラスタリング、k中央値クラスタリング、k-medoidクラスタリング、および/または同等物等のkクラスタリングアプローチが採用される。いくつかの実施形態では、セット特徴情報を、各観察が最近傍平均を伴う特徴クラスタに属する複数の特徴クラスタに分割する、k平均クラスタリングが採用される。セット特徴情報は、このようにして、任意の好適な数の特徴クラスタによって表すことができる。いくつかの実施形態では、各特徴クラスタは、学習される細胞特徴を表し、形状の種類、縁の種類、およびテクスチャの種類を含むが、それらに限定されない、特徴の種類から選択することができる。クラスタの重心および/または他のサンプリング点の周囲の複数の可視化等の特徴クラスタの任意の好適な表現を採用することができる。いくつかの実施形態では、特徴クラスタの数がコードブックサイズであり得る、特徴クラスタのコードブックを生成するように、(コードワードとしても知られている)特徴クラスタの各々に関連付けられる重心または他のサンプル点を組み合わせることができる。例えば、コードブックは、クラスタの数、およびサンプルあたりの局所特徴記述子値の数に対応する、マトリクス次元を伴う2次元マトリクス等の多次元マトリクスとして特定することができる。
図13は、非標識学習画像からの教師なし学習のための例示的かつ非限定的なアプローチを図示し、局所特徴情報、画像特徴情報、セット特徴情報、複数のクラスタ、コードワード、および上で説明されるコードドブックの各々を決定するための実施形態を示す。これらの各々は、任意の好適な手段によって決定され得、教師なし学習プロセスの結果としてコードワードを生成するための広範囲の可能性/組み合わせにつながることが理解される。
図13は、学習画像1302のセットから開始する、本発明の実施形態による、教師なし学習を図示する。いくつかの実施形態では、学習画像1302のうちの少なくとも1つ以上の画像は、訓練画像908のうちの少なくとも1つ以上の画像と同一である。代替として、訓練画像1302の全ては、訓練画像908とは異なり得る。
学習画像1302に含まれる各画像1304は、局所特徴情報を生成するように、したがって、画像1304の画像特徴情報を生成するように、サンプリングされる。学習画像1302に含まれる各画像1304の画像特徴情報は、マトリクス1306によって表される。以前に説明されたように、マトリクス1306は、少なくとも、局所特徴情報の決定に関連付けられるサンプル点の数に対応する第1の次元と、少なくとも、サンプルあたり収集される局所特徴記述子値の数等の各サンプル点の追加の検出/記述情報に対応する第2の次元とを有し得る。学習画像1302のセットのセット特徴情報は、学習画像1302あたり1つである、複数のマトリクス1306(1つの代表的なマトリクス1306が図13に示される)として、および/または複数のマトリクス1306を組み込む単一の3次元マトリクスとして表され得る。
1308では、学習される細胞特徴をそれぞれ表す、128次元特徴空間内で(本実施例では)300個の特徴クラスタを生成するように、K平均クラスタリングがマトリクス1306(セット特徴情報)に適用される。1310では、各特徴クラスタは、サンプリング点の周囲で可視化され、ここでは各特徴クラスタに対して画像の10×10マトリクスとして図示される。本実施例では、各特徴クラスタの重心は、コードワードであり、次いで、300個のコードワードに基づいて、コードブック1312を生成することができ、すなわち、コードブックは、300(クラスタの数/コードワード)×128(特徴空間の次元の数)のサイズである。コードブック1312は、訓練および/または試験画像からの特徴抽出のための300個の学習される細胞特徴を表すものとして、結果分類器への入力としての機能を果たすことができる。
図12を参照すると、いくつかの実施形態では、教師なし学習時に、分類器1206は、それに関連付けられる複数の結果について、訓練画像1202-1から1202-N上で訓練することができる。いくつかの実施形態では、分類器を訓練することは、1204で訓練画像の各セットから局所特徴情報を抽出することと、系列特徴情報を生成するために、抽出された局所特徴情報を学習されるコードブックと比較することによって、抽出された特徴情報を訓練画像の各セットに関連付けられる結果に関連付けることとを含む。このようにして、分類器1206は、特定の結果に対して特徴情報がどのように見えるかという事前の知識に基づいて、試験画像408に対して、特定の結果を認識するように、および/またはその特定の結果の確率を決定するように「訓練」されることができる。
いくつかの実施形態では、訓練特徴情報を抽出するための特徴抽出1204は、図14の例示的かつ非限定的なアプローチで図示されるように動作することができる。特定の結果を有する時間連続的な一連の訓練画像1402(例えば、訓練画像1202-1)は、一連の訓練画像のうちの各画像1404の画像特徴情報を生成するように、分類器1206、および/または分類器1206に含まれ得るか、あるいは分類器1206とは別個であり得る、学習モジュール540(図6参照)によって、分析することができる。いくつかの実施形態では、訓練画像1402のうちの少なくとも1つ以上の画像は、訓練画像908のうちの少なくとも1つ以上の画像と同一であり得る。代替として、訓練画像1402の全ては、訓練画像908とは異なり得る。いくつかの実施形態では、各画像1404の局所特徴情報は、教師なし学習に対して上で説明される様式と同様に生成される。
訓練画像1102からの局所特徴情報、および入力としてのコードブックを伴う、図12-14を参照すると、次いで、分類器1206および/または学習モジュール540(図6参照)は、各コードワードが各訓練画像1404の局所特徴情報(画像特徴情報と見なすことができる)において発生する頻度を決定し、さらに、訓練画像1402の各々の中の各コードワードの発生頻度の中央値を平均化および/または決定することによって等、全ての訓練画像1402にわたって各コードワードの発生頻度を決定することができる。このようにして、系列特徴情報とも称される、全ての訓練画像1402にわたるコードワードの頻度分布を、全ての訓練画像1402に関連付けられる特定の結果に関連付けることができる。図14で最も良く図示されるように、ヒストグラム1406(画像特徴情報)は、図13で生成されるコードブック1312に対して訓練画像1404内の局所特徴情報を比較することの結果を視覚的に描写し、画像1404内のコードブック1312の300個のコードワードの各々の発生頻度の頻度分布である。一方で、ヒストグラム1408(系列特徴情報)は、a)訓練画像1402のうちの各画像の頻度分布データを生成すること、ならびにb)コードブック1312内の各コードワードの発生頻度を表す単一の要素を生成するように、訓練画像1402のうちの全ての画像にわたって、各コードブックの発生頻度を平均化、および/またはその中央値を決定することの結果を視覚的に描写する。訓練画像1402が経時的な一連の画像であり得るため、ヒストグラム1408は、それに応じて、経時的情報を表すことができる。さらに、訓練画像1402が特定の結果に関連付けられるため、ヒストグラム1408は、それに応じて、特定の結果を表すことができ、分類器1206は、特定の結果(例えば、訓練画像1202-1に対する胚盤胞結果)を認識するように「訓練される」と見なすことができる。異なる結果(例えば、停止結果)を有する訓練画像の異なるセットを用いて(例えば、1202-Nを用いて)、このプロセスを繰り返すことによって、分類器は、2つの結果を区別するように訓練されると見なすことができる。ここで、分類器は、一連の非標識画像のコードワード頻度分布に基づいて、一連の非標識画像(試験画像908等)を分類することができる。
分類器1206が一連の試験画像1208に対する結果決定の起こり得る結果のセット上で訓練されると、分類器を未知の結果の試験画像1208に適用することができる。結果決定は、試験画像1208からの試験局所、画像、および系列特徴情報の特徴抽出1210を含むことができる。いくつかの実施形態では、画像1208に対する特徴抽出1210は、各訓練画像1404について図14で図示されるように、および以前に説明されたように、特徴抽出1204と同様に実行される。換言すると、試験局所特徴情報が各試験画像について決定され、これは、各試験画像の試験画像特徴情報(すなわち、各試験画像のコードワード頻度分布)を生成するために使用することができ、これは順に、一連の試験画像1208の系列特徴情報(すなわち、系列全体の複合コードワード頻度分布)を生成するために使用することができる。コードブックを試験画像の各々における局所特徴情報に適用することによって、ならびにそのように取得されるコードワード頻度分布の中央値を平均化および/または決定することによって、平均試験ヒストグラムを生成することができる。
一連の試験画像(例えば、試験画像1208)のヒストグラム(「試験ヒストグラム」)、および各一連の訓練画像1202-1から1202-Nの平均ヒストグラム1408(「訓練ヒストグラム」)を用いると、次いで、分類器1206は、その特定の結果の試験ヒストグラムおよび訓練ヒストグラムに基づいて、一連の試験画像の分類を行うことによって、各結果の分類確率を決定することができる。分類は、AdaBoost(適応ブースティング)分類器、またはサポートベクターマシン(SVM)等の別の分類器によって等、任意の好適な様式で行うことができる。次いで、分類器906は、各結果に関連付けられている分類確率に基づく予測結果を示すものとして、試験画像を分類することができる。
図15は、図15の結果1212の結果決定のための例示的かつ非限定的なアプローチを図示する。訓練ヒストグラム1502-1から1502-Nは、それぞれ、対応する一連の訓練画像1202-1から1202-Nのコードワード頻度分布を表し、さらに、それぞれ、対応する一連の訓練画像1202-1から1202-Nに関連付けられる、特定の結果1から特定の結果Nを表す。各訓練ヒストグラム1502は、図12の試験画像1208のコードワード頻度分布を表す、試験ヒストグラム1506に対して比較され、それぞれ、特定の結果1から特定の結果Nに対応する、分類確率1510-1から1510-Nが決定される。次いで、結果1212が、分類確率1510-1から1510-Nに基づいて決定される。
いくつかの実施形態では、訓練/試験画像内の細胞が胚であるとき等、限定されないが、胚が着床に好適であるかどうか、着床した場合、胚が妊娠をもたらすであろうかどうか等の決定された結果1212に基づいて、1つ以上の予測基準を適用することができる。
図5を参照すると、いくつかの実施形態では、撮像デバイス502は、画像1102、レベル1画像分類器に対する訓練画像、レベル2画像分類器に対する訓練画像、および/または同等物を取得するように構成可能であり得る。撮像デバイス502はまた、試験画像1208等の第1の時間連続的な一連の画像を取得するように、および訓練画像1202-1から1202-N等の1つ以上の細胞の複数の経時的な一連の画像を取得するように構成可能でもあり得る。いくつかの実施形態では、表示デバイス506は、少なくとも、撮像デバイス502によって取得されるような細胞の1つ以上の画像を表示するように、および本明細書で説明される画像分類に基づいて細胞の特性を提示するために構成される。いくつかの実施形態では、表示デバイス506は、少なくとも、分類確率、分類、および第1の結果のうちの1つ以上のものに基づいて、第1の経時的な一連の画像内の1つ以上の細胞の1つ以上の特性を提示するように構成される。いくつかの実施形態では、表示デバイス506はさらに、特徴情報に基づいて、複数の経時的な一連の画像内の1つ以上の細胞の1つ以上の特性を提示するように構成される。
いくつかの実施形態では、コンピュータ装置504は、画像ベースの結果決定のために構成することができる。他の実施形態では、コンピュータ装置504は、画像ベースの細胞分類のために構成することができる。いくつかの実施形態では、コンピュータ装置504は、第1の時間連続的な一連の画像に対して、分類確率を決定するように、分類器を1つ以上の細胞の第1の時間連続的な一連の画像に適用する。いくつかの実施形態では、第1の時間連続的な一連の画像は、経時的な一連の画像である。いくつかの実施形態では、分類器は、AdaBoost分類器である。いくつかの実施形態では、1つ以上の細胞は、ヒト胚、1つ以上の卵母細胞、および1つ以上の多能性細胞から成る群から選択される。
いくつかの実施形態では、分類確率は、1つ以上の細胞の発生に対する第1の結果が第1の時間連続的な一連の画像によって示されている推定可能性を示す。第1の結果は、分類器に関連付けられている、細胞発生に対する複数の結果に含まれることができる。コンピュータ装置504はさらに、分類器に関連付けられる複数の結果および分類確率に基づいて、第1の結果を示すものとして第1の経時的な一連の画像を分類するように構成される。いくつかの実施形態では、複数の結果は、以下の結果のペア、すなわち、胚盤胞および停止、着床および着床なし、ならびに妊娠および妊娠なしのうちの1つ以上のものを含む。
いくつかの実施形態では、コンピュータ装置504は、各第1の分類器に関連付けられる異なる第1の数の細胞を示す第1の複数の訓練画像に基づいて、複数の第1の分類器の各々を構成するように構成されることができる。いくつかの実施形態では、コンピュータ装置504はさらに、各画像に対して、各第1の分類器に関連付けられている第1の分類確率を決定するために、複数の第1の分類器を1つ以上の細胞の複数の画像の各々に適用するように構成されることができる。複数の細胞特徴は、1つ以上の手作りの細胞特徴を含むことができる。いくつかの実施形態では、複数の細胞特徴の各々は、形状の種類、テクスチャの種類、および縁の種類のうちの1つ以上の種類であり得る。いくつかの実施形態では、複数の第1の分類器は、2項分類を行うように構成されているAdaBoost分類器である。
いくつかの実施形態では、各第1の分類器は、異なる第1の数の細胞に関連付けられており、コンピュータ装置504は、1つ以上の機械学習される細胞特徴を含む複数の細胞特徴に基づいて、各画像の第1の分類確率を決定するように構成することができる。
いくつかの実施形態では、第1の分類確率は、各第1の分類器に関連付けられる異なる第1の数の細胞が各画像に示されている第1の推定可能性を示す。それによって、複数の画像の各々は、その画像に関連付けられる第1の分類確率を有する。
いくつかの実施形態では、コンピュータ装置504はさらに、各第1の分類器に関連付けられる異なる第1の数の細胞と、その画像に関連付けられている複数の第1の分類確率に基づいて、第2の数の細胞を示すものとして各画像を分類するように構成することができる。
いくつかの実施形態では、コンピュータ装置504はさらに、各画像について、複数の第1の分類確率のうちの少なくとも1つに基づいて、各第2の分類器に関連付けられている第2の分類確率を決定するために、複数の第2の分類器を各画像に適用するように構成することができる。いくつかの実施形態では、複数の第1の分類確率のうちの少なくとも1つは、各画像に時間的に隣接する複数の画像のうちの1つ以上の画像に関連付けられる。いくつかの実施形態では、複数の画像は、経時的な一連の画像である。いくつかの実施形態では、第2の分類確率、および第1の分類確率のうちの少なくとも1つは、同一の異なる第1の数の細胞に関連付けられる。いくつかの実施形態では、複数の画像は、経時的な一連の画像である。
いくつかの実施形態では、コンピュータ装置504は、各第2の分類器に関連付けられる異なる第3の数の細胞を示す第2の複数の訓練画像に基づいて、複数の第2の分類器を構成するように構成されることができる。いくつかの実施形態では、第2の複数の訓練画像の各々は、第1の複数の訓練画像の全てとは異なる。
いくつかの実施形態では、コンピュータ装置504はさらに、各画像に対して、各第2の分類器に関連付けられている第2の分類確率を決定するように、複数の第2の分類器を各画像に適用するように構成することができる。いくつかの実施形態では、各第2の分類器は、異なる第3の数の細胞に関連付けられており、各第2の分類器は、複数の細胞特徴に基づいて、さらに、各画像に時間的に隣接する複数の画像に含まれる1つ以上の画像に関連付けられる、複数の第1の分類確率のうちの1つ以上の分類確率に関連付けられる1つ以上の追加の細胞特徴に基づいて、各画像の第2の分類確率を決定する。いくつかの実施形態では、第2の分類確率は、各第2の分類器に関連付けられる異なる第3の数の細胞が各画像に示されている第2の推定可能性を示す。それによって、複数の画像の各々は、その画像に関連付けられる複数の第2の分類確率を有する。いくつかの実施形態では、各第2の分類器に関連付けられる異なる第3の数の細胞は、1つの細胞、2つの細胞、3つの細胞、および4つ以上の細胞から成る群から選択される。いくつかの実施形態では、各第2の分類器に関連付けられる異なる第3の数の細胞は、複数の第1の分類器のうちの対応するものに関連付けられている、異なる第1の数の細胞と同一である。
いくつかの実施形態では、コンピュータ装置504はさらに、各第2の分類器に関連付けられる異なる第3の数の細胞と、その画像に関連付けられている複数の第2の分類確率に基づいて、第4の数の細胞を示すものとして各画像を分類するように構成することができる。いくつかの実施形態では、コンピュータ装置504はさらに、複数の画像に基づいて、第4の数の細胞を示すものとして分類される複数の画像のうちの1つ以上の画像が、代わりに、第4の数の細胞とは異なる第5の数の細胞を示すことを決定するために、精緻化アルゴリズムを複数の画像に適用するように構成することができる。
いくつかの実施形態では、コンピュータ装置504はさらに、各画像内の第4の数の細胞に基づいて、1つ以上の細胞の細胞活性パラメータを決定するように構成される。いくつかの実施形態では、決定された細胞活性パラメータは、第1の細胞質分裂の持続時間、第1細胞質分裂と第2細胞質分裂との間の時間間隔、第2細胞質分裂と第3細胞質分裂との間の時間間隔、第1の有糸分裂と第2の有糸分裂との間の時間間隔、第2の有糸分裂と第3の有糸分裂との間の時間間隔、受精から5つの細胞を有する胚までの時間間隔、および配偶子合体と第1の細胞質分裂との間の時間間隔のうちの1つ以上のものを含む。
いくつかの実施形態では、コンピュータ装置504はさらに、第1の時間連続的な一連の画像から系列特徴情報を抽出するように、および系列特徴情報に基づいて分類器を第1の時間連続的な一連の画像に適用するように構成される。いくつかの実施形態では、系列特徴情報は、第1の結果を表し、第1の時間連続的な一連の画像の全体に関連付けられる。いくつかの実施形態では、コンピュータ装置504はさらに、第1の時間連続的な一連の画像のうちの1つ以上の画像の一部分に関連付けられている局所特徴情報を抽出すること、ならびに局所特徴情報と複数のコードワードとに基づいて、系列特徴情報を決定することによって、系列特徴情報を抽出するように構成される。
いくつかの実施形態では、コンピュータ装置504はさらに、局所特徴情報を1つ以上のクラスタに関連付けることによって、系列特徴情報を決定するように構成され、1つ以上のクラスタの各々は、複数のコードワードのうちの対応するものに関連付けられる。コンピュータ装置504はさらに、第1の時間連続的な一連の画像にわたって1つ以上のコードワードの発生頻度を決定するように構成され、系列特徴情報は、第1の時間連続的な一連の画像にわたる1つ以上のコードワードの各々の発生頻度を含む。いくつかの実施形態では、複数のコードワードの各々は、縁の種類、テクスチャの種類、および形状の種類のうちの1つ以上のものである細胞特徴に関連付けられる。
いくつかの実施形態では、コンピュータ装置504はさらに、教師なし学習を通して、少なくとも1つの細胞の複数の非標識画像から複数のコードワードの各々を決定するように構成される。
いくつかの実施形態では、コンピュータ装置504はさらに、複数の時間連続的な一連の画像の各々に関連付けられている系列特徴情報に基づいて、分類器を訓練するように構成され、複数の時間連続的な一連の画像の各々は、複数の結果のうちの1つに関連付けられる。いくつかの実施形態では、コンピュータ装置504はさらに、複数の時間連続的な一連の画像の各々から系列特徴情報を抽出することによって、分類器を訓練するように構成される。いくつかの実施形態では、複数の時間連続的な一連の画像のうちの1つに関連付けられている系列特徴情報は、複数の結果のうちの関連するものを表し、複数の時間連続的な一連の画像のうちの1つの全体に関連付けられる。
いくつかの実施形態では、コンピュータ装置504はさらに、複数の時間連続的な一連の画像のうちの1つ以上のものの一部分に関連付けられている局所特徴情報を抽出することによって、系列特徴情報を抽出し、局所特徴情報、および教師なし学習を通して少なくとも1つの細胞の複数の非標識画像から決定される複数のコードワードに基づいて、系列特徴情報を決定するように構成される。いくつかの実施形態では、コンピュータ装置504はさらに、局所特徴情報を1つ以上のクラスタに関連付けることによって、系列特徴情報を決定するように構成され、1つ以上のクラスタの各々は、複数のコードワードのうちの対応するものに関連付けられる。コンピュータ装置504はさらに、複数の時間連続的な一連の画像のうちの1つ以上の画像の各々にわたって1つ以上のコードワードの発生頻度を決定するように構成される。系列特徴情報は、複数の時間連続的な一連の画像のうちの1つ以上の画像の各々にわたる1つ以上のコードワードの各々の発生頻度を含む。いくつかの実施形態では、複数のコードワードの各々は、縁の種類、テクスチャの種類、および形状の種類のうちの1つ以上のものである細胞特徴に関連付けられる。いくつかの実施形態では、コンピュータ装置504はさらに、教師なし学習を通して、少なくとも1つの細胞の複数の非標識画像から複数のコードワードの各々を決定するように構成される。
図6を参照すると、いくつかの実施形態では、メモリ514は、自動細胞分類のためにコンピュータ装置504を実装するように使用される、実行可能プログラム(図示せず)のセットを記憶する。加えて、または代替として、プロセッサ512は、自動細胞分類のためにコンピュータ装置504を実装するように使用することができる。かかる実施形態では、プロセッサ512は、画像モジュール520、訓練モジュール534、分類モジュール536、結果決定モジュール538、学習モジュール540、および表示モジュール542等の図6に示されるモジュールの種々の組み合わせを含み得る。
画像モジュール520は、1つ以上の細胞の複数の画像を受信するように構成することができる。画像モジュール520は、試験画像1208等の第1の時間連続的な一連の画像を取得するように、および訓練画像1202-1から1202-N等の1つ以上の細胞の複数の時間連続的な一連の画像を取得するように構成することができる。いくつかの実施形態では、画像モジュール520はまた、学習画像も取得する。
分類モジュール536は、各画像に対して、各第1の分類器に関連付けられている第1の分類確率を決定するために、複数の第1の分類器を1つ以上の細胞の複数の画像の各々に適用するように構成することができる。各第1の分類器は、異なる第1の数の細胞に関連付けることができる。分類モジュール536はさらに、1つ以上の機械学習される細胞特徴を含む複数の細胞特徴に基づいて、各画像の第1の分類確率を決定するように構成することができる。第1の分類確率は、各第1の分類器に関連付けられる異なる第1の数の細胞が各画像に示されている第1の推定可能性を示すことができる。それによって、複数の画像の各々は、その画像に関連付けられる複数の第1の分類確率を有する。
分類モジュール536はさらに、各第1の分類器に関連付けられる異なる第1の数の細胞と、その画像に関連付けられている複数の第1の分類確率に基づいて、第2の数の細胞を示すものとして各画像を分類するように構成することができる。各第2の分類器は、異なる第3の数の細胞に関連付けることができる。各第2の分類器は、複数の細胞特徴に基づいて、さらに、各画像に時間的に隣接する複数の画像に含まれる1つ以上の画像に関連付けられる、複数の第1の分類確率のうちの1つ以上の分類確率に関連付けられる1つ以上の追加の細胞特徴に基づいて、各画像の第2の分類確率を決定することができる。第2の分類確率は、各第2の分類器に関連付けられる異なる第3の数の細胞が各画像に示されている第2の推定可能性を示すことができる。それによって、複数の画像の各々は、その画像に関連付けられる複数の第2の分類確率を有する。分類モジュール536はさらに、各第2の分類器に関連付けられる異なる第3の数の細胞と、その画像に関連付けられている複数の第2の分類確率に基づいて、第4の数の細胞を示すものとして各画像を分類するように構成することができる。
分類モジュール536はさらに、複数の画像に基づいて、第4の数の細胞を示すものとして分類される複数の画像のうちの1つ以上の画像が、代わりに、第4の数の細胞とは異なる第5の数の細胞を示すことを決定するために、精緻化アルゴリズムを複数の画像に適用するように構成することができる。
分類モジュール536は、第1の時間連続的な一連の画像に対して、分類確率を決定するように、分類器を1つ以上の細胞の第1の時間連続的な一連の画像に適用するように構成することができる。分類確率は、1つ以上の細胞の発生に対する第1の結果が第1の時間連続的な一連の画像によって示される、推定可能性を示す。第1の結果は、分類器に関連付けられている、細胞発生に対する複数の結果に含まれる。分類モジュール536はさらに、分類器に関連付けられる複数の結果および分類確率に基づいて、第1の結果を示すものとして、第1の経時的な一連の画像を分類するように構成することができる。分類モジュール536は、示されるように、プロセッサ512上で実装することができる。加えて、または代替として、分類モジュール536は、メモリ514上で実装することができる。
訓練モジュール534は、各第1の分類器に関連付けられる異なる第1の数の細胞を示す第1の複数の訓練画像に基づいて、複数の第1の分類器の各々を構成するように構成することができる。いくつかの実施形態では、訓練モジュール534はさらに、各第2の分類器に関連付けられる異なる第3の数の細胞を示す第2の複数の訓練画像に基づいて、複数の第2の分類器を構成するように構成することができる。
いくつかの実施形態では、訓練モジュール534は、第1の時間連続的な一連の画像から系列特徴情報を抽出するように構成され、分類モジュール536はさらに、系列特徴情報に基づいて、分類器を第1の時間連続的な一連の画像に適用するように構成される。いくつかの実施形態では、訓練モジュール534はさらに、局所特徴情報を1つ以上のクラスタに関連付けることによって、系列特徴情報を決定するように構成され、1つ以上のクラスタの各々は、複数のコードワードのうちの対応するものに関連付けられ、学習モジュール540は、教師なし学習を通して、少なくとも1つの細胞の複数の非標識画像から複数のコードワードの各々を決定するように構成される。
図16は、本発明の実施形態による、自動画像ベースの細胞分類の方法1600を図示する。いくつかの実施形態では、方法1600の少なくとも一部は、コンピュータ装置504によって、具体的には、分類モジュール532によって行うことができる。ステップ1610では、各画像に対して、各第1の分類器に関連付けられている第1の分類確率を決定するように、複数の第1の分類器が、1つ以上の細胞の複数の画像の各々に適用される。各第1の分類器は、異なる第1の数の細胞に関連付けられており、1つ以上の機械学習される細胞特徴を含む複数の細胞特徴に基づいて、各画像の第1の分類確率を決定する。第1の分類確率は、各第1の分類器に関連付けられる異なる第1の数の細胞が各画像に示されている第1の推定可能性を示すことができる。それによって、複数の画像の各々は、その画像に関連付けられる複数の第1の分類確率を有する。
ステップ1620では、各第1の分類器に関連付けられる異なる第1の数の細胞と、その画像に関連付けられている複数の第1の分類確率に基づいて、各画像が、第2の数の細胞を示すものとして分類される。
ステップ1630では、各画像に対して、各第2の分類器に関連付けられている第2の分類確率を決定するように、複数の第2の分類器が各画像に適用される。各第2の分類器は、異なる第3の数の細胞に関連付けられており、複数の細胞特徴に基づいて、さらに、各画像に時間的に隣接する複数の画像に含まれる1つ以上の画像に関連付けられる、複数の第1の分類確率のうちの1つ以上の分類確率に関連付けられる1つ以上の追加の細胞特徴に基づいて、各画像の第2の分類確率を決定する。第2の分類確率は、各第2の分類器に関連付けられる異なる第3の数の細胞が各画像に示されている第2の推定可能性を示し、それによって、複数の画像の各々は、その画像に関連付けられる複数の第2の分類確率を有する。
ステップ1640では、各第2の分類器に関連付けられる異なる第3の数の細胞と、その画像に関連付けられている複数の第2の分類確率に基づいて、各画像が、第4の数の細胞を示すものとして分類される。
いくつかの実施形態では、自動細胞分類のための方法は、各画像に対して、各第1の分類器に関連付けられている第1の分類確率を決定するために、複数の第1の分類器を1つ以上の細胞の複数の画像の各々に適用することを含む。各第1の分類器は、異なる第1の数の細胞に関連付けられており、1つ以上の機械学習される細胞特徴を含む複数の細胞特徴に基づいて、各画像の第1の分類確率を決定する。第1の分類確率は、各第1の分類器に関連付けられる異なる第1の数の細胞が各画像に示されている第1の推定可能性を示し、それによって、複数の画像の各々は、その画像に関連付けられる複数の第1の分類確率を有する。
いくつかの実施形態では、自動細胞分類のための方法はさらに、各第1の分類器に関連付けられる異なる第1の数の細胞と、その画像に関連付けられている複数の第1の分類確率に基づいて、第2の数の細胞を示すものとして各画像を分類することを含む。
いくつかの実施形態では、各第1の分類器に関連付けられる異なる第1の数の細胞は、1つの細胞、2つの細胞、3つの細胞、および4つ以上の細胞から成る群から選択される。
いくつかの実施形態では、複数の第1の分類器の各々は、各第1の分類器に関連付けられる異なる第1の数の細胞を示す第1の複数の訓練画像に基づいて構成される。
いくつかの実施形態では、複数の細胞特徴は、1つ以上の手作りの細胞特徴を含む。
いくつかの実施形態では、自動細胞分類のための方法はさらに、各画像について、複数の第1の分類確率のうちの少なくとも1つに基づいて、各第2の分類器に関連付けられている第2の分類確率を決定するように、複数の第2の分類器を各画像に適用することを含む。
いくつかの実施形態では、複数の第1の分類確率のうちの少なくとも1つは、各画像に時間的に隣接する複数の画像のうちの1つ以上の画像に関連付けられる。
いくつかの実施形態では、複数の画像は、経時的な一連の画像である。
いくつかの実施形態では、第2の分類確率および第1の分類確率のうちの少なくとも1つは、同一の異なる第1の数の細胞に関連付けられる。
いくつかの実施形態では、自動細胞分類のための方法はさらに、各画像に対して、各第2の分類器に関連付けられている第2の分類確率を決定するように、複数の第2の分類器を各画像に適用することを含む。各第2の分類器は、異なる第3の数の細胞に関連付けられる。各第2の分類器は、複数の細胞特徴に基づいて、さらに、各画像に時間的に隣接する複数の画像に含まれる1つ以上の画像に関連付けられる、複数の第1の分類確率のうちの1つ以上の分類確率に関連付けられる1つ以上の追加の細胞特徴に基づいて、各画像の第2の分類確率を決定する。第2の分類確率は、各第2の分類器に関連付けられる異なる第3の数の細胞が各画像に示されている第2の推定可能性を示し、それによって、複数の画像の各々は、その画像に関連付けられる複数の第2の分類確率を有する。自動細胞分類のための方法はさらに、各第2の分類器に関連付けられる異なる第3の数の細胞と、その画像に関連付けられている複数の第2の分類確率に基づいて、第4の数の細胞を示すものとして各画像を分類することを含む。いくつかの実施形態では、複数の画像は、経時的な一連の画像である。
いくつかの実施形態では、各第2の分類器に関連付けられる異なる第3の数の細胞は、1つの細胞、2つの細胞、3つの細胞、および4つ以上の細胞から成る群から選択される。
いくつかの実施形態では、複数の第2の分類器の各々は、各第2の分類器に関連付けられる異なる第3の数の細胞を示す第2の複数の訓練画像に基づいて構成される。
いくつかの実施形態では、第2の複数の訓練画像の各々は、第1の複数の訓練画像の全てとは異なる。
いくつかの実施形態では、各第2の分類器に関連付けられる、異なる第3の数の細胞は、複数の第1の分類器のうちの対応するものに関連付けられている、異なる第1の数の細胞と同一である。
いくつかの実施形態では、自動細胞分類のための方法はさらに、各画像内の第4の数の細胞に基づいて、1つ以上の細胞の細胞活性パラメータを決定することを含む。いくつかの実施形態では、決定された細胞活性パラメータは、第1の細胞質分裂の持続時間、第1細胞質分裂と第2細胞質分裂との間の時間間隔、第2細胞質分裂と第3細胞質分裂との間の時間間隔、第1の有糸分裂と第2の有糸分裂との間の時間間隔、第2の有糸分裂と第3の有糸分裂との間の時間間隔、受精から5つの細胞を有する胚までの時間間隔、および配偶子合体と第1の細胞質分裂との間の時間間隔のうちの1つ以上のものを含む。
いくつかの実施形態では、自動細胞分類のための方法はさらに、複数の画像に基づいて、第4の数の細胞を示すものとして分類される複数の画像のうちの1つ以上の画像が、代わりに、第4の数の細胞とは異なる第5の数の細胞を示すことを決定するように、精緻化アルゴリズムを複数の画像に適用することを含む。
いくつかの実施形態では、精緻化アルゴリズムは、ビタビアルゴリズムである。
いくつかの実施形態では、自動細胞分類のための方法はさらに、各画像内の第2の数の細胞に基づいて、1つ以上の細胞の細胞活性パラメータを決定することを含む。いくつかの実施形態では、1つ以上の細胞の細胞活性パラメータを決定することは、各画像内の第2の数の細胞に基づく。
いくつかの実施形態では、自動細胞分類のための方法はさらに、複数の特定の結果に含まれる予測結果を決定するように、決定された細胞活性パラメータに基づいて、予測基準を1つ以上の細胞に適用することを含む。いくつかの実施形態では、複数の画像に示される1つ以上の細胞は、ヒト胚、1つ以上の卵母細胞、および1つ以上の多能性細胞から成る群から選択される。
いくつかの実施形態では、複数の第1の分類器は、2項分類を行うように構成されているAdaBoost分類器である。
いくつかの実施形態では、複数の細胞特徴の各々は、形状の種類、テクスチャの種類、および縁の種類のうちの1つ以上のものである。
いくつかの実施形態では、1つ以上の機械学習される細胞特徴のうちの少なくとも1つは、複数の学習画像から教師なし学習を介して学習される。
図17は、本発明の実施形態による、画像ベースの胚結果決定のための方法1700を図示する。
ステップ1710では、第1の時間連続的な一連の画像に対して、分類確率を決定するように、分類器が、1つ以上の細胞の第1の時間連続的な一連の画像に適用される。分類確率は、1つ以上の細胞の発生に対する第1の結果が第1の時間連続的な一連の画像によって示される、推定可能性を示すことができる。第1の結果は、分類器に関連付けられている、細胞発生に対する複数の結果に含まれる。
ステップ1720では、第1の経時的な一連の画像は、分類器に関連付けられる複数の結果および分類確率に基づいて、第1の結果を示すものとして分類することができる。
いくつかの実施形態では、本方法はさらに、第1の時間連続的な一連の画像から特徴ベクターを抽出することを含むことができ、特徴ベクターは、第1の経時的な一連の画像の各々に基づく。特徴ベクターは、機械学習される細胞特徴に関連付けられるコードワードの第1の経時的な一連の画像の各々の中の発生頻度に基づく要素を含むことができる。
いくつかの実施形態では、特徴情報は、複数の経時的な一連の画像のうちの1つ以上の画像から抽出される特徴ベクターに基づく。複数の経時的な一連の画像のうちの1つ以上の画像から抽出される特徴ベクターは、複数の経時的な一連の画像のうちの1つ以上の画像に含まれる各画像に基づくことができる。
いくつかの実施形態では、機械学習される細胞特徴に関連付けられるコードワードは、複数の経時的な一連の画像のうちの1つ以上の画像から抽出される特徴ベクターから抽出され、特徴情報は、コードワードを含む。いくつかの実施形態では、機械学習される細胞特徴は、縁の種類、テクスチャの種類、および形状の種類のうちの1つ以上のものである。いくつかの実施形態では、複数の結果は、以下の結果のペア、すなわち、胚盤胞および停止、着床および着床なし、ならびに妊娠および妊娠なしのうちの1つ以上のものを含む。
いくつかの実施形態では、分類確率は、第1の分類確率であり、分類器はさらに、複数の経時的な一連の画像の各々に関連付けられる特徴情報に基づいて、追加の分類確率を決定するように構成される。いくつかの実施形態では、第1の経時的な一連の画像を分類することはさらに、追加の分類確率に基づく。いくつかの実施形態では、第1の分類確率は、追加の分類確率の各々のより大きい。
いくつかの実施形態では、分類器は、AdaBoost分類器である。いくつかの実施形態では、第1の経時的な一連の画像内の1つ以上の細胞は、複数の経時的な一連の画像の各々の中の1つ以上の細胞と同一の細胞型であり、該細胞型は、ヒト胚、1つ以上の卵母細胞、および1つ以上の多能性細胞から選択される。
いくつかの実施形態では、画像ベースの結果決定のための方法は、第1の時間連続的な一連の画像に対して、分類確率を決定するように、分類器を1つ以上の細胞の第1の時間連続的な一連の画像に適用することを含む。分類確率は、1つ以上の細胞の発生に対する第1の結果が第1の時間連続的な一連の画像によって示される、推定可能性を示す。第1の結果は、分類器に関連付けられている、細胞発生に対する複数の結果に含まれる。
いくつかの実施形態では、画像ベースの結果決定のための方法はさらに、分類器に関連付けられる複数の結果および分類確率に基づいて、第1の結果を示すものとして、第1の経時的な一連の画像を分類することを含む。
いくつかの実施形態では、画像ベースの結果決定のための方法はさらに、第1の時間連続的な一連の画像から系列特徴情報を抽出することを含み、分類器を第1の時間連続的な一連の画像に適用することは、系列特徴情報に基づく。
いくつかの実施形態では、系列特徴情報は、第1の結果を表し、第1の時間連続的な一連の画像の全体に関連付けられる。
いくつかの実施形態では、系列特徴情報を抽出することは、第1の時間連続的な一連の画像のうちの1つ以上の画像の一部分に関連付けられている局所特徴情報を抽出することと、局所特徴情報と複数のコードワードとに基づいて、系列特徴情報を決定することとを含む。
いくつかの実施形態では、系列特徴情報を決定することは、局所特徴情報を1つ以上のクラスタに関連付けることであって、1つ以上のクラスタの各々は、複数のコードワードのうちの対応するものに関連付けられている、ことと、第1の時間連続的な一連の画像にわたって1つ以上のコードワードの発生頻度を決定することとを含む。系列特徴情報は、第1の時間連続的な一連の画像にわたる1つ以上のコードワードの各々の発生頻度を含む。
いくつかの実施形態では、複数のコードワードの各々は、縁の種類、テクスチャの種類、および形状の種類のうちの1つ以上のものである細胞特徴に関連付けられる。
いくつかの実施形態では、複数のコードワードの各々は、教師なし学習を通して、少なくとも1つの細胞の複数の非標識画像から決定される。
いくつかの実施形態では、画像ベースの結果決定のための方法はさらに、複数の時間連続的な一連の画像の各々に関連付けられている系列特徴情報に基づいて、分類器を訓練することを含み、複数の時間連続的な一連の画像の各々は、複数の結果のうちの1つに関連付けられる。いくつかの実施形態では、分類器を訓練することは、複数の時間連続的な一連の画像の各々から系列特徴情報を抽出することを含む。いくつかの実施形態では、複数の時間連続的な一連の画像のうちの1つに関連付けられている系列特徴情報は、複数の結果のうちの関連するものを表し、複数の時間連続的な一連の画像のうちの1つの全体に関連付けられる。いくつかの実施形態では、系列特徴情報を抽出することは、複数の時間連続的な一連の画像のうちの1つ以上のものの一部分に関連付けられている局所特徴情報を抽出することと、局所特徴情報、および教師なし学習を通して少なくとも1つの細胞の複数の非標識画像から決定される複数のコードワードに基づいて、系列特徴情報を決定することとを含む。
いくつかの実施形態では、系列特徴情報を決定することは、局所特徴情報を1つ以上のクラスタに関連付けることであって、1つ以上のクラスタの各々は、複数のコードワードのうちの対応するものに関連付けられている、ことと、複数の時間連続的な一連の画像のうちの1つ以上の画像の各々にわたって1つ以上のコードワードの発生頻度を決定することであって、系列特徴情報は、複数の時間連続的な一連の画像のうちの1つ以上の画像の各々にわたる1つ以上のコードワードの各々の発生頻度を含む、こととを含む。いくつかの実施形態では、複数のコードワードの各々は、縁の種類、テクスチャの種類、および形状の種類のうちの1つ以上のものである細胞特徴に関連付けられる。いくつかの実施形態では、複数のコードワードの各々は、教師なし学習を通して、少なくとも1つの細胞の複数の非標識画像から決定される。
いくつかの実施形態では、第1の時間連続的な一連の画像は、経時的な一連の画像である。いくつかの実施形態では、複数の結果は、以下の結果のペア、すなわち、胚盤胞および停止、着床および着床なし、ならびに妊娠および妊娠なしのうちの1つ以上のものを含む。いくつかの実施形態では、分類器は、AdaBoost分類器である。いくつかの実施形態では、1つ以上の細胞は、ヒト胚、1つ以上の卵母細胞、および1つ以上の多能性細胞から成る群から選択される。
(実施例2)
本実施例は、初期ヒト胚発生の経時的顕微鏡ビデオにおいて複数の時点で細胞数を推定する、多重レベル胚段階分類方法を提示する。2レベル分類モデルが、時空間的状況内で胚段階を分類するために提案される。判別可能な胚特徴の豊富なセットが、採用され、手作りされ、または胚画像から自動的に学習される。ビタビアルゴリズムは、細胞数確率および時間的画像類似性尺度を用いて、胚段階をさらに精緻化する。提案された方法は、合計389個のヒト胚のビデオを使用して定量的に評価され、87.92%の全体的な胚段階分類精度をもたらした。
(緒言)
2細胞段階および3細胞段階の持続時間等のヒト胚の経時的顕微鏡ビデオから測定される、タイミング/形態動力学的パラメータは、ヒト胚の質と相関することが確認されており、したがって、タイミング/形態動力学的パラメータは、IVF患者に移送するために高い発生能力を伴う胚を選択するために使用することができる。これらのタイミングパラメータを正確かつ客観的に測定することは、経時的撮像プロセス中にヒト胚の段階(すなわち、細胞の数)を識別することができる自動アルゴリズムを必要とする。本実施例は、ヒト胚を4つの段階、すなわち、1つの細胞、2つの細胞、3つの細胞、および4つ以上の細胞に分類することに集中している。この問題は、胚の形態の変動、閉塞、および撮像制限により、困難であり得る。
本実施例は、初期ヒト胚発生の経時的顕微鏡ビデオにおいて胚段階を分類する3レベル方法を提示する。本発明者らが知っている限り、この作業は、臨床転帰の予測パラメータの抽出のためにヒト胚段階を分類する機械学習技法を適用することの第1の試行を表す。分類方法および学習される胚特徴(すなわち、バッグオフフィーチャーズ(BoF))は、他の細胞分類および有糸分裂検出問題を含む、種々の画像診断法に容易に適用することができる。
(方法論)
図18は、本発明の実施形態による、画像ベースの細胞分類のための例示的なアプローチを図示する。経時的顕微鏡法を用いて取得されるヒト胚ビデオ1810を考慮すると、62個の標準的な手作りの特徴および200個の自動的に学習されるバッグオブフィーチャーズの豊富なセットが、ビデオの各フレームから抽出される。レベル1Adaboost分類モデル1820は、262個の特徴を使用して、残りのクラスから1つのクラスを分類するために訓練される4つのAdaboost分類器から成る。レベル1分類は、独立して、各フレーム上でこの分類モデルを使用して行われる。レベル2Adaboost分類モデル1830もまた、262個の特徴とレベル1クラス確率から計算される追加の特徴との両方を含む増補特徴セットを用いて訓練される、4つのAdaboost分類器から成る。レベル2Adaboostは、局所時間的状況を活用し、レベル1分類結果を精緻化するように設計されている。レベル3(参照文字1840参照)では、ビタビアルゴリズムが、事前の知識を統合し、減少しない数の細胞を実施し、大域的状況内で最終胚段階分類結果を生成する。
(胚特徴)
胚特徴は、62個の手作りの特徴(22個のグレーレベル同時生起行列(GLCM)、10個のガボール特徴、および5個の領域性質)と、胚画像から自動的に学習される200個のバッグオブフィーチャーズとを含む。GLCM、LBP、およびガボール特徴は、分類問題のための周知のテクスチャ特徴である。ヘッシアン特徴は、細胞縁を増進する、ヘッシアンフィルタにかけた画像の第1の固有値から計算される統計である。領域性質(面積、凸包点の数、固体性、偏心度、および外周)は、極性画像空間内の胚境界を抽出するように最短経路アルゴリズムを適用することによって取得される、粗い胚マスクから計算される。
図19Aおよび19Bは、(a)学習されるコードブックを用いて、疎に検出された記述子および密にサンプリングされた記述子から生成される、密および疎発生ヒストグラムの実施例、および(b)k平均クラスタリングによって生成されるクラスタ(出現コードワード)の4つの実施例を示す、実施例によるバッグオフフィーチャーズを図示する。バッグオブフィーチャーズ(BoF)は、SIFT等のキーポイント記述子に基づく。本実施例は、BoFの有効性を実証するために、基本SIFT記述子を採用する。密にサンプリングされた記述子1910Aおよび疎に検出された記述子1910Bの両方が、本方法で使用される。訓練胚画像から抽出されたSIFT記述子(128次元ベクター)からの200個のコードワードを用いてコードブックを構築するために、K平均クラスタリングが採用された。クラスタ1920A-1920Dの各々は、胚の固有のテクスチャパターンを表し、その重心はコードワードのうちの1つとして保持される。試験画像が与えられると、記述子が最初に抽出され、次いで、各記述子を1つのコードワードにハードに割り当てることによって量子化される。最終的なBoF(1930A、1930B)は、コードワードの頻度を表す発生ヒストグラムである。
追加のレベル2特徴は、レベル1Adaboostによって出力されるクラス条件付き確率から計算される、時間的状況特徴である。各フレームにおいて、その局所近傍(例えば、5つのフレーム)のクラス条件付き確率の平均値、中央値、最大値、最小値、および標準偏差が計算され、元の特徴セットに追加される。
(2レベルAdaboost分類モデル)
2項Adaboost分類器を用いて、この多重クラス分類問題に対処するために、1対全体(one-vs-all)の方式が採用される。代替として、離散的Adaboostへの多重クラス拡張である、AdaBoost.M1またはAdaboost.M2も使用することができる。2レベルAdaboost分類モデルの各レベルに、4つのAdaboost分類器がある。各Adaboost分類器は、基礎スタンプ分類器のセットから成り、他のクラスから1つのクラスを分離するように訓練される。クラスi∈{1,2,3,4}のために訓練されるAdaboost分類器について、画像フレームのその出力は、以下である。
Figure 0007071047000030
式中、xは、フレームtに対する抽出された特徴ベクターであり、aikは、基礎分類器の重みであり、hik∈{0,1}は、基礎分類器の出力であり、P(yt=i|x)は、[0.1]に正規化されたクラス条件付き確率である(図12)。
(時間的画像類似性)
提案された方法で胚画像を表すことの他に、状態遷移確率を定義するためにビタビアルゴリズムによって後に使用される、時間的画像類似性尺度1850(図18)を計算するためにもBoFが使用される。2つの連続胚フレームの正規化BoFヒストグラムが与えられると、フレームtにおける時間的画像類似性は、これら2つのヒストグラムのバタチャリア距離に基づいて定義される。時間的画像類似性の一実施例が、図20に示される。BoFに基づく時間的類似性尺度は、位置合わせなしである。プロット内のこれらの「下落(dip)」は、段階遷移の良好な指標である。
(大域的な胚段階の精緻化)
提案された方法のレベル3では、大域的状況内で胚段階を精緻化するためにビタビアルゴリズムが採用される。問題は、事後確率P(Y|X)を最大化する、胚の最良の状態シーケンスを推測することである。
Figure 0007071047000031
式中、Y={y・・・,yr}は、状態シーケンスであり、X={x1,・・・,}は、胚画像を表す特徴ベクターである。
ビタビアルゴリズムは、時間tにおいて各段階iで終了する、最も可能性の高い状態シーケンスの重みVt,iを再帰的に見出す。
Figure 0007071047000032

Figure 0007071047000033
式中、P(y=i)は、第1のフレームでの各クラスの事前確率を表し、P(xt|=i)は、観察確率であり、P(y=it-1=j)は、遷移確率である。胚が常に1細胞段階から開始するため、P(y=i)は、i=1については1、他の段階については0に設定される。4つの段階が残りのフレームについて同等に確からしいと仮定される場合、観察確率P(xt|=i)は、単純に、レベル2Adaboostによって出力されるクラス条件付き確率である。遷移確率P(y=it-1=j)は、フレーム依存性状態として定義される。
(自動胚段階分類)
遷移行列:
Figure 0007071047000034
式中、d(t)は、前の節で定義された時間的画像類似性である。この遷移行列は、減少しない数の細胞を実施し、時間的画像類似性尺度を統合する。2つの連続フレームがほとんど同一である(すなわち、d(t)が1に近い)とき、遷移行列は、いかなる胚段階変化も支持しない。
(実験研究)
提案された分類方法の性能を評価するために、ヒト胚のビデオが、種々の臨床現場から収集され、分類精度および細胞分裂検出率に基づいて、分類が評価された。
(データセットおよびグランドトルース)
ビデオ取得システムは、暗視野照明のために修正された、1つの倒立デジタル顕微鏡から成る。胚画像が、胚の大部分が4細胞段階に達するまで、最大で2日にわたって5分毎に取得された。各胚のビデオの最初の500フレームが分析のために保持され、各フレームが151×151ピクセルのサイズに切り取られた。訓練データは、327個のヒト胚のビデオ(それぞれ、各クラスについて、41741、38118、7343、および69987個のサンプルを伴う)を含み、我々の試験データは、いくつかの臨床現場で取得された389個のヒト胚のビデオ(それぞれ、各クラスについて47063、48918、9386、および89133個のサンプルを伴う)を含む。3細胞段階は、通常、非常に短いため、他のクラスよりも少ない3細胞訓練サンプルが使用される。
2人の人間の専門家が、第1の細胞分裂、第2の細胞分裂、および第3の細胞分裂が起こるときにフレームに注釈を付けた。グランドトルース分割フレームは、2人の人間の専門家による注釈の平均である。各フレームの胚段階のためのグランドトルースは、細胞分裂グランドトルースから変換される。
(評価結果)
訓練データセットは、それぞれ、レベル1およびレベル2Adaboost分類器を訓練するために、2つの半分に分割される。スタンプが、基礎分類器として使用され、各Adaboost分類器は、100個のスタンプを含む。
第1の評価では、提案された方法によって予測される胚段階が、グランドトルースと比較される。全体的な分類精度および各クラスに対する分類精度が、表3で本方法の各レベルについて示される。最終分類結果に対する混同行列が、表4に示される。各結果から、各レベルが、前のレベルと比べて全体的な分類精度を向上させることが分かる。90%以上の1つの細胞および4つ以上の細胞の胚が、最終結果において正しく分類されている。3細胞訓練サンプルの欠如、ならびに2つの細胞および4つ以上の細胞の胚とのそれらの類似性により、レベル1Adaboostによって、わずか7.79%の精度に達した。精度は、レベル2Adaboostによって10.71%まで増加させられ、さらに、レベル3ビタビアルゴリズムによって20.86%まで向上させられた。
Figure 0007071047000035

Figure 0007071047000036
第2の評価では、分類によって検出された3つの分割フレームが、3つのグランドトルース胚分割フレームと比較された。推定分割フレームは、グランドトルースに対する許容差内である場合は真陽性と見なされ、他の場合は偽陽性と見なされる。グランドトルース分割フレームは、ある許容差内で予測分割フレームがない場合に偽陰性と見なされる。
図21は、本発明の実施形態による、例示的な3レベル分類方法から取得されるオフセット許容差の関数として、細胞分裂検出の(a)精度率および(b)再現率の例示的な結果を図示する。分類性能へのそれらの寄与を別々に評価するように、特徴の3つのサブセットの精密再現率曲線が生成された。図15から、BoFが手作りの特徴(表1を参照して説明される、RegionPropおよびGLCM+LBP+ヘッシアン+ガボール)より優れ、BoFと手作りの特徴との組み合わせが最高性能に達したことが分かる。例えば、10フレーム許容差では、84.58%の精度および75.63%の再現率が、複合特徴セットによって達成された。
本実施例は、初期ヒト胚発生の経時的顕微鏡法において胚段階を効果的に分類するための分類方法を提示する。複数の臨床現場から収集された大量試験データセットに適用されたとき、提案された方法は、合計で87.92%の分類精度を達成した。
(実施例3)
ヒト胚追跡は、高次元検索空間、弱特徴、異常値、閉塞、欠落したデータ、複数の相互作用する変形可能な標的、変化する局所構造、および弱運動モデルを含む、課題に直面し得る。本実施例は、それらの空間的および時間的コンテキストともに、判別可能な画像および幾何学的特徴の豊富なセットを使用することによって、これらに対処する。一実施形態では、問題は、追跡ベースおよび無追跡アプローチを組み合わせる、条件付き確率場(CRF)枠組みにおける増補同時分割および分類として提起される。CRF上のマルチパスデータ駆動型近似推測が行われる。分裂事象は、389個の臨床画像シーケンスの65%において、30分以内までに発生の最初の48時間中に測定され、これは、純粋に追跡ベースまたは無追跡アプローチと比べて19%向上を表す。
(増補同時分割および分類)
増補同時分割および分類は、分裂事象を推定するために、追跡ベースおよび無追跡アプローチを活用する。両方の種類の特徴が抽出され、CRFに追加される。次いで、近似推測が行われる。
(特徴抽出)
一実施形態では、追跡に使用される画像特徴は、図1Aで描写される区画104である。より少ない区画104が、追跡の数を削減する。本実施例では、各ピクセルの強度および配向角を提供する、ヘッシアン演算子を使用して、境界点が抽出される。ヒステリシス閾値化とともにこの情報を使用して、有向局所検索が、一貫した境界ピクセルについて行われる。後続の合併推測は、区画をより大きい区画のより小さいセットに組み込む。このステップは、頂点が区画であり、縁が区画の合併を示す、グラフ上でグラフ分割として策定される。分割の数は、事前に分かっていない。
一実施形態では、枠組みの無追跡部分は、細胞の数について訓練されるフレーム毎の分類器(図9Aを参照して説明される分類器902等)、およびフレーム間類似性尺度を使用する。本実施例では、分類器は、262個の手作りで自動的に学習される判別可能な特徴の豊富なセットを使用する。類似性尺度は、正規化相互相関(NCC)であり得る。
(CRFモデル)
本実施例は、細胞100の特性108として図1Aで描写されるような胚の中の細胞の数および形状を経時的に推定しようとする。図2BのCRFを伴う楕円形の細胞の確率的進化がモデル化される。
Figure 0007071047000037

適合性関数は、(1)1つの時間スライス(観察モデルΦ)内にある変数、または(2)隣接時間スライス(運動モデルΨ)に及ぶ変数のいずれかに関する。CRFは、全ての適合性関数の積に比例するような全ての変数に関する同時確率分布を符号化する。
Figure 0007071047000038
式中、Tは、シーケンス長であり、Zは、正規化定数である。我々は、周辺分布P(N(t))を最大化する、シーケンスN(t)に関心がある。
観察モデルΦは、3つの適合性関数の積である。
Figure 0007071047000039
関数φは、形状への限界を符号化する。第2の関数は、分類器
Figure 0007071047000040

をφと組み合わせ、φは、楕円、区画、および標識の適合性を符号化する。
Figure 0007071047000041
式中、
Figure 0007071047000042

は、楕円被覆率の項であり、
Figure 0007071047000043

は、区画適合誤差であり、cおよびcは、経験的に選択される。
関数φは、分裂を隣接する画像の類似性δ(t)に関連付ける。
Figure 0007071047000044
遷移モデルΨは、細胞形状変形および分裂を統制する。
Figure 0007071047000045
関数Ψは、基礎的な細胞変形および分裂プロセスを符号化する。
Figure 0007071047000046
式中、
Figure 0007071047000047

であり、Λは、変形費用の対角行列であり、hは、母細胞から娘細胞形状への非アフィン変形である。
本実施例では、関数Ψは、減少しないように細胞の数N(t)を制約する。
(近似推測)
本実施例は、CRFから最も可能性の高いシーケンスN(t)を求める。近似推測は、3つの段階、すなわち、細胞数分類、近似最大周辺推測、および事象推測で行われる。
細胞数分類は、無追跡部分の一部である。本実施例では、細胞数分類は、262個の手作りの自動的に学習される判別可能な画像特徴の豊富なセットから、細胞の数の事後確率(方程式(8)の中の
Figure 0007071047000048

)を推定するために、マルチレベルAdaBoost分類器を使用する。
本実施例では、最大周辺推測は、追跡ベースであり、区画から幾何学形状を推測する。これは、
Figure 0007071047000049

およびδ(t)を除外する、分解されたサブグラフ上で時間tを最適化することによって、N(t)の非正規化最大周辺尺度である、
Figure 0007071047000050

を推定する。
Figure 0007071047000051

Figure 0007071047000052
本実施例は、データ駆動型連続モンテカルロ(DD-SMC)を用いて、この再帰を最大化する。時間および測定更新の間のデータ駆動型精緻化段階は、期待値最大化(EM)を用いて、初期粒子を境界点の不完全なセットに精緻化することによって、粒子の必要数を削減する。次いで、
Figure 0007071047000053

は、粒子から得られる。近似最大周辺尺度402(方程式(13)および(14)参照)の例示的な結果が、図4Aおよび4Bに示される。分類尺度403および画像類似性尺度405の例示的な結果は、図4Bに示される。
事象推測は、細胞の数についての近似周辺分布
Figure 0007071047000054

を取得するために、
Figure 0007071047000055

を分類器
Figure 0007071047000056

および画像類似性δ(t)と組み合わせる。これは、N(t)、d(t)、δ(t)、および
Figure 0007071047000057

を含む、別の分解されたサブグラフに関して行われ、最も可能性の高いシーケンス
Figure 0007071047000058

を推定する。本実施例は、節点がN(t)であり、同時分布が単項(方程式(8))および対合項(方程式(10、11))によって因数分解される、連鎖グラフによって、このサブグラフを近似する。
Figure 0007071047000059
本実施例は、周辺分布404(図4Aおよび4B参照)を見出すように、確率伝搬法を行う。細胞の推定数406の値は、画像フレーム番号に対して描画され(図4Aおよび4B参照)、細胞の異なる推定数406の間の遷移時間は、異なる数の細胞(本実施例では1つの細胞、2つの細胞、3つの細胞、および4つの細胞)に対する周辺分布404の中の交差点に基づく。
(実験結果)
本実施例は、アルゴリズムを、複数のIVF診療所から取得され、少なくとも3日にわたって観察されたヒト胚画像シーケンスに適用した。画像は、暗視野デジタル顕微鏡を用いて取得され、5分毎に151×151ピクセルに切り取られた。
(追跡性能)
アルゴリズムは、327個の胚について訓練され、389個の胚の別個のセットで試験された。それぞれ、第1、第2、および第3の有糸分裂の時間t、t、およびtが測定された。2人の専門発生学者が、評価のためにグランドトルースを測定した。アルゴリズムの測定と2人のパネリストの測定との間のrms偏差である、rmsdが測定された。
図22は、本発明の実施形態による、パネリストからの偏差が、各遷移(t、t、t)について、および全ての遷移にわたって、パネリスト間不一致の限界m内である(rmsd<d+m)、胚の比率の例示的な結果を図示する。これは、観察可能物の3つの組み合わせ、すなわち、(a)分類器確率および類似性尺度(無追跡)、(b)DD-SMC最大限界(追跡ベース)、および(c)全ての観察可能物(複合)について示される。時として、1つのアプローチが他のアプローチより良好に機能することが分かる。例えば、t遷移(決定することが最も困難である)では、場面がより複雑であり、単純な形状および異常値仮定を用いて適切にモデル化されない場合もあるため、無追跡が追跡ベースを凌ぎ得る。対照的に、t遷移では、無追跡アプローチにおけるバッグオブフィーチャーズによってよりも、追跡ベースの形状モデルによって、2つの細胞の事例の形状および構造を良好にモデル化することができる。しかし、すべての場合において、2つのアプローチを組み合わせることにより、大幅な向上をもたらす。パネリスト間変動の30分以内のrmsdを伴って遷移が測定された、データセットの割合が、個々の遷移時間の各々について、ならびに全ての遷移時間について、表5に示される。このデータセット上で、複合アプローチを使用して、胚の65.3%が、パネリスト間変動の30分以内のrmsdを伴って、3つの全ての遷移で追跡された。この結果は、それぞれ、54.5%および55.0%であった、無追跡および追跡ベースのアプローチの対応するrmsdと単独で比較された。無追跡および追跡ベースのアプローチと比べた相対的向上は、それぞれ、19.8%および18.7%である。これらの事例の21%以上が、30分以上のパネリスト間不一致を有したことに留意されたい。
これは、臨床データの大部分で自動追跡を達成するために、追跡ベースおよび無追跡アプローチを組み合わせることができることを示唆する。
Figure 0007071047000060
(結語)
本実施例で提示される枠組みは、追跡ベースおよび無追跡アプローチを活用する統一CRF枠組みにおいて、複数の特徴およびそれらのコンテンツを組み合わせる。試験データの65%における手動専門家測定に匹敵する自動追跡が実証され、自動追跡は、それが利用可能になるにつれて、より多くの標識データを活用し、それから学習すること、ならびに解空間の大部分を探索するように推測を拡張することによって、さらに増進することができる。
本発明の実施形態は、種々のコンピュータ実装動作を行うためのコンピュータコードをその上に有する、コンピュータ読み取り可能な媒体を伴うコンピュータ記憶製品に関する。「コンピュータ読み取り可能な媒体」という用語は、本明細書で説明される動作を行うための一連の命令またはコンピュータコードを記憶または符号化することが可能である、任意の媒体を含むために本明細書で使用される。媒体およびコンピュータコードは、本発明の目的で特別に設計および構築されるものであり得るか、またはそれらは、コンピュータソフトウェア技術分野の当業者にとって周知かつ利用可能な種類のものであり得る。コンピュータ読み取り可能な媒体の例は、ハードディスク、フロッピー(登録商標)ディスク、および磁気テープ等の磁気媒体、CD-ROMおよびホログラフィックデバイス等の光学媒体、フロプティカルディスク等の光磁気媒体、および特定用途向け集積回路(「ASIC」)、プログラマブル論理デバイス(「PLD」)、ならびにROMおよびRAMデバイス等のプログラムコードを記憶および実行するように特別に構成されるハードウェアデバイスを含むが、それらに限定されない。コンピュータコードの例は、コンパイラによって生成されるような機械コード、およびインタープリタまたはコンパイラを使用してコンピュータによって実行される、より高レベルのコードを含むファイルを含む。例えば、本発明の実施形態は、Java(登録商標)、C++、またはオブジェクト指向プログラミング言語および開発ツールを使用して実装され得る。コンピュータコードの追加の実施例は、暗号化コードおよび圧縮コードを含む。さらに、本発明の実施形態は、伝送チャネルを介して、遠隔コンピュータ(例えば、サーバコンピュータ)から要求コンピュータ(例えば、クライアントコンピュータまたは異なるサーバコンピュータ)へ転送され得る、コンピュータプログラム製品としてダウンロードされ得る。本発明の別の実施形態は、機械実行可能ソフトウェア命令の代わりに、またはそれと組み合わせて、配線回路で実装され得る。
本発明の実施形態は、フィールドプログラマブルゲートアレイ(FPGA)またはASIC等のハードウェアで実装することができる。FPGA/ASICは、入出力デバイスによって構成され得、かつ出力を入出力デバイスに提供し得る。
先述の内容は、本発明の原理を例証するにすぎない。当業者は、本明細書で明示的に説明または図示されないが、本発明の原理を具現化し、その精神および範囲に含まれる、種々の配列を考案することが可能であり得ることが理解される。説明図は、必ずしも一定の縮尺で描かれない場合があり、製造許容差は、本明細書の技術的表現からの逸脱をもたらし得る。具体的に図示されていない、本発明の他の実施形態があり得る。したがって、本明細書および図面は、制限的よりもむしろ例証的と見なされるものである。加えて、本発明の実施形態を図示する図面は、明確にするために、ある主要な特性特徴に焦点を合わせてもよい。さらに、本明細書に記載される全ての実施例および条件付き用語は、主に、本発明の原理、および当技術分野を拡大するために本発明者らによって寄与される概念を理解することにおいて、読者を補助することを目的としており、そのような特別に記載された実施例および条件への限定を伴わないと解釈されるものである。また、本発明の原理、側面、および実施形態、ならびにそれらの具体的実施例を記載する、本明細書の全ての記述は、それらの構造的および機能的均等物の両方を包含することを目的としている。加えて、そのような均等物は、現在公知の均等物および将来開発される均等物の両方、すなわち、構造にかかわらず同一の機能を果たす、開発された任意の要素を含むことが意図される。したがって、本発明の範囲は、本明細書で図示および説明される例示的実施形態に限定されることを目的としていない。むしろ、本発明の範囲および精神は、添付の請求項によって具現化される。加えて、本明細書で開示される方法は、特定の順序で行われる特定の動作を参照して説明されているが、これらの動作は、本発明の教示から逸脱することなく、同等の方法を形成するように、組み合わせられ、細分され、または並べ替えられ得ることが理解されるであろう。したがって、本明細書で特に指示されない限り、動作の順序およびグループ化は、本発明の制限ではない。本明細書で引用される全ての参考文献は、それらの全体で参照することにより本明細書に組み込まれる。

Claims (4)

  1. 胚細胞または多能性細胞の発生能力を決定するための細胞活性の自動非侵襲評価のための方法であって、前記方法は、
    (a)コンピュータプロセッサを提供する工程aであって、前記コンピュータプロセッサは:
    (i)時間連続的な一連の画像を受信するように構成された画像モジュール;
    (ii)1つ以上の細胞境界区画を決定するように構成された境界検出モジュール;
    (iii)前記1つ以上の細胞境界区画のそれぞれに対し複数の楕円のうち期待値最大化(EM)最適化を通して生成される適合する楕円を決定するように構成された仮説生成モジュール;
    (iv)前記適合する楕円に基づいて、確率的グラフィカルモデルにより、前記時間連続的な一連の画像にわたって最も可能性の高い一連の仮説である最も適合する楕円を決定するように構成された仮説選択モジュール;
    (v)1つ以上の細胞の特徴に基づいて、細胞活性パラメータを決定するように構成された細胞活性パラメータ決定モジュール、
    を備える、工程aと、
    (b)前記画像モジュールを用いて、前記時間連続的な一連の画像を取得する工程bであって、前記時間連続的な一連の画像には、胚細胞または多能性細胞を含む選択された第1の画像が含まれる、工程bと、
    (c)前記境界検出モジュールを用いて、前記1つ以上の細胞境界区画を合併して、前記選択された第1の画像の1つ以上の細胞に識別する工程cと、
    (d)前記時間連続的な一連の画像それぞれについて、前記1つ以上の細胞境界区画の周囲の前記複数の楕円のうち、前記適合する楕円の形状および配列に基づき前記仮説生成モジュールを用いて1つ以上の細胞を特徴付ける工程dであって、前記工程dは、
    (i)前記1つ以上の細胞の数;
    (ii)前記1つ以上の細胞の各々の形状;および
    (iii)前記1つ以上の細胞の配列
    のうち1つ以上の推測を決定する、工程dと、
    (e)前記仮説選択モジュールを用いて、確率的グラフィカルモデルにより、前記時間連続的な一連の画像にわたって最も可能性の高い一連の仮説である前記最も適合する楕円を決定する工程eと、
    (f)前記細胞活性パラメータ決定モジュールを用いて、前記時間連続的な一連の画像にわたって最も可能性の高い仮説である楕円に関して決定された1つ以上の細胞の推測された特徴に基づいて、配偶子合体から前記1つ以上の細胞の第1の細胞分裂までの時間間隔を含む前記細胞活性パラメータを決定する工程fであって、前記工程fは前記1つ以上の胚細胞または多能性細胞に関する発生能力の指標を決定する、工程f、
    を包含する、方法。
  2. 前記細胞活性パラメータは、第1の細胞質分裂の持続時間、第1の細胞質分裂と第2の細胞質分裂との間の時間間隔、第2の細胞質分裂と第3の細胞質分裂との間の時間間隔、第1の有糸分裂と第2の有糸分裂との間の時間間隔、第2の有糸分裂と第3の有糸分裂との間の時間間隔、および受精から5つの細胞を有する胚までの時間間隔からなる群より選択される、請求項1に記載の方法。
  3. 細胞活性の評価のための自動非侵襲システムであって、
    )1つ以上の細胞の時間連続的な一連の画像を取得するように構成された少なくとも1つの撮像デバイスを有する、経時的顕微鏡と、
    )前記撮像デバイスに接続されるように構成されたコンピュータ装置であって、前記コンピュータ装置は、以下:
    (i)前記時間連続的な一連の画像から少なくとも1つの画像を選択するように構成された撮像モジュール;
    (ii)1つ以上の細胞境界区画を合併して1つ以上の細胞を識別するように構成された境界検出モジュール;
    (iii)前記時間連続的な一連の画像それぞれについて、前記1つ以上の細胞境界区画の周囲の複数の楕円のうち期待値最大化(EM)最適化を通して生成される適合する楕円を決定するように構成された仮説生成モジュールであって、それによって、前記1つ以上の細胞は:
    (iii-1)前記1つ以上の細胞の数;
    (iii-2)前記1つ以上の細胞の各々の形状;および
    (iii-3)前記1つ以上の細胞の配列、のうち1つ以上を推測することを含むように特徴付けされる、仮説生成モジュール;
    (iv)前記適合する楕円に基づいて、確率的グラフィカルモデルにより、前記時間連続的な一連の画像にわたって最も可能性の高い一連の仮説である最も適合する楕円を決定するように構成された仮説選択モジュール;
    (v)可能性として表される信頼尺度を細胞の数に関する周辺分布に基づいて決定するように構成された信頼モジュールであって、前記可能性とは、前記最も適合する楕円について特徴付けされた前記1つ以上の細胞のうち、前記推測された特徴によって決定される細胞活性パラメータに基づいて、配偶子合体から第1の細胞分裂までの時間間隔を含む細胞活性パラメータを前記特徴付けされた細胞が含むかを推測した可能性である、信頼モジュール;
    (vi)前記細胞活性パラメータの前記信頼尺度が、前記信頼尺度の閾値以上になるか識別するように構成された信頼性決定モジュールであって、前記細胞活性パラメータは前記1つ以上の細胞の発生能力の指標としての選択基準である、信頼性決定モジュール、
    を備えるコンピュータ装置、
    を備えるシステム。
  4. 前記細胞活性パラメータは、第1の細胞質分裂の持続時間、第1の細胞質分裂と第2の細胞質分裂との間の時間間隔、第2の細胞質分裂と第3の細胞質分裂との間の時間間隔、第1の有糸分裂と第2の有糸分裂との間の時間間隔、第2の有糸分裂と第3の有糸分裂との間の時間間隔、および受精から5つの細胞を有する胚までの時間間隔からなる群より選択される、請求項に記載のシステム。
JP2015560372A 2013-02-28 2014-02-28 自動非侵襲細胞活性追跡のための装置、方法、およびシステム Active JP7071047B2 (ja)

Applications Claiming Priority (13)

Application Number Priority Date Filing Date Title
US201361771000P 2013-02-28 2013-02-28
US201361770998P 2013-02-28 2013-02-28
US61/770,998 2013-02-28
US61/771,000 2013-02-28
US201361785179P 2013-03-14 2013-03-14
US201361785216P 2013-03-14 2013-03-14
US201361785199P 2013-03-14 2013-03-14
US201361785170P 2013-03-14 2013-03-14
US61/785,179 2013-03-14
US61/785,199 2013-03-14
US61/785,170 2013-03-14
US61/785,216 2013-03-14
PCT/US2014/019578 WO2014134527A1 (en) 2013-02-28 2014-02-28 Apparatus, method, and system for automated, non-invasive cell activity tracking

Publications (2)

Publication Number Publication Date
JP2016509844A JP2016509844A (ja) 2016-04-04
JP7071047B2 true JP7071047B2 (ja) 2022-05-18

Family

ID=51420965

Family Applications (5)

Application Number Title Priority Date Filing Date
JP2015560372A Active JP7071047B2 (ja) 2013-02-28 2014-02-28 自動非侵襲細胞活性追跡のための装置、方法、およびシステム
JP2015560375A Withdrawn JP2016509845A (ja) 2013-02-28 2014-02-28 画像ベースのヒト胚細胞分類のための装置、方法、およびシステム
JP2019226650A Pending JP2020036625A (ja) 2013-02-28 2019-12-16 画像ベースのヒト胚細胞分類のための装置、方法、およびシステム
JP2022067218A Pending JP2022087297A (ja) 2013-02-28 2022-04-14 画像ベースのヒト胚細胞分類のための装置、方法、およびシステム
JP2024071873A Pending JP2024096236A (ja) 2013-02-28 2024-04-25 画像ベースのヒト胚細胞分類のための装置、方法、およびシステム

Family Applications After (4)

Application Number Title Priority Date Filing Date
JP2015560375A Withdrawn JP2016509845A (ja) 2013-02-28 2014-02-28 画像ベースのヒト胚細胞分類のための装置、方法、およびシステム
JP2019226650A Pending JP2020036625A (ja) 2013-02-28 2019-12-16 画像ベースのヒト胚細胞分類のための装置、方法、およびシステム
JP2022067218A Pending JP2022087297A (ja) 2013-02-28 2022-04-14 画像ベースのヒト胚細胞分類のための装置、方法、およびシステム
JP2024071873A Pending JP2024096236A (ja) 2013-02-28 2024-04-25 画像ベースのヒト胚細胞分類のための装置、方法、およびシステム

Country Status (8)

Country Link
US (3) US9177192B2 (ja)
EP (2) EP2962101A4 (ja)
JP (5) JP7071047B2 (ja)
CN (2) CN105407819A (ja)
CA (2) CA2901833A1 (ja)
ES (1) ES2981412T3 (ja)
IL (3) IL240855B (ja)
WO (2) WO2014134550A1 (ja)

Families Citing this family (112)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2014134550A1 (en) 2013-02-28 2014-09-04 Auxogyn, Inc. Apparatus, method, and system for image-based human embryo cell classification
WO2015069824A2 (en) * 2013-11-06 2015-05-14 Lehigh University Diagnostic system and method for biological tissue analysis
EP3100205B1 (en) * 2014-01-28 2021-03-10 Ventana Medical Systems, Inc. Adaptive classification for whole slide tissue segmentation
ES2837840T3 (es) * 2014-03-20 2021-07-01 Ares Trading Sa Medida cuantitativa de la cinética de desarrollo de la morfología de mórula y blastocisto humanos
WO2015168026A2 (en) * 2014-04-28 2015-11-05 The Broad Institute, Inc. Method for label-free image cytometry
WO2016103501A1 (ja) * 2014-12-26 2016-06-30 国立大学法人東京大学 解析装置、解析方法、解析プログラム、細胞の製造方法、および細胞
US11868851B2 (en) * 2015-03-11 2024-01-09 Symphonyai Sensa Llc Systems and methods for predicting outcomes using a prediction learning model
WO2016148702A1 (en) * 2015-03-17 2016-09-22 Hewlett-Packard Development Company, L.P. Pixel-based temporal plot of events according to multidimensional scaling values based on event similarities and weighted dimensions
GB201507454D0 (en) * 2015-04-30 2015-06-17 Phase Focus Ltd Method and apparatus for determining temporal behaviour of an object
JP2017023055A (ja) * 2015-07-22 2017-02-02 大日本印刷株式会社 細胞管理システム、プログラム、及び、細胞管理方法
US11494578B1 (en) * 2015-09-21 2022-11-08 Ares Trading S.A. Systems and methods for automated assessment of embryo quality using image based features
JP6475134B2 (ja) * 2015-09-29 2019-02-27 富士フイルム株式会社 細胞評価装置および方法
US10002410B2 (en) * 2015-09-30 2018-06-19 Konica Minolta Laboratory U.S.A, Inc. Method and system for enhancement of cell analysis
US20170213081A1 (en) * 2015-11-19 2017-07-27 Intelli-Vision Methods and systems for automatically and accurately detecting human bodies in videos and/or images
US10902334B2 (en) 2016-01-28 2021-01-26 Gerard Letterie Automated image analysis to assess reproductive potential of human oocytes and pronuclear embryos
JP6777147B2 (ja) * 2016-06-30 2020-10-28 株式会社ニコン 画像選択装置、画像選択プログラム、演算装置、及び表示装置
JP2018022216A (ja) * 2016-08-01 2018-02-08 ソニー株式会社 情報処理装置、情報処理方法、及びプログラム
EP3500964A1 (en) * 2016-08-22 2019-06-26 Iris International, Inc. System and method of classification of biological particles
JP2018061440A (ja) * 2016-10-11 2018-04-19 憲隆 福永 受精判定システム
JP7001060B2 (ja) 2016-11-02 2022-01-19 ソニーグループ株式会社 情報処理装置、情報処理方法及び情報処理システム
JP6837493B2 (ja) 2016-12-06 2021-03-03 富士フイルム株式会社 細胞画像評価装置および細胞画像評価制御プログラム
CN107690659B (zh) * 2016-12-27 2021-08-10 达闼机器人有限公司 一种图像识别系统及图像识别方法
WO2018176000A1 (en) 2017-03-23 2018-09-27 DeepScale, Inc. Data synthesis for autonomous control systems
US9738937B1 (en) * 2017-03-31 2017-08-22 Cellmax, Ltd. Identifying candidate cells using image analysis
JP6977293B2 (ja) * 2017-03-31 2021-12-08 ソニーグループ株式会社 情報処理装置、情報処理方法、プログラム及び観察システム
US11321585B2 (en) * 2017-04-14 2022-05-03 Hitachi High-Tech Corporation Imaging device and morphological feature data display method
US11450121B2 (en) * 2017-06-27 2022-09-20 The Regents Of The University Of California Label-free digital brightfield analysis of nucleic acid amplification
US10671349B2 (en) 2017-07-24 2020-06-02 Tesla, Inc. Accelerated mathematical engine
US11157441B2 (en) 2017-07-24 2021-10-26 Tesla, Inc. Computational array microprocessor system using non-consecutive data formatting
US11409692B2 (en) 2017-07-24 2022-08-09 Tesla, Inc. Vector computational unit
US11893393B2 (en) 2017-07-24 2024-02-06 Tesla, Inc. Computational array microprocessor system with hardware arbiter managing memory requests
JP7164862B2 (ja) * 2017-07-31 2022-11-02 静岡県公立大学法人 心筋細胞型判定システム、心筋細胞型判定方法
EP3688553A4 (en) * 2017-09-29 2021-07-07 The Brigham and Women's Hospital, Inc. AUTOMATED ASSESSMENT OF HUMAN EMBRYOS
JP6414310B1 (ja) * 2017-10-26 2018-10-31 ソニー株式会社 受精卵品質評価方法、プログラム及び情報処理装置
US10423819B2 (en) * 2017-10-31 2019-09-24 Chung Yuan Christian University Method and apparatus for image processing and visualization for analyzing cell kinematics in cell culture
US11977958B2 (en) 2017-11-22 2024-05-07 Amazon Technologies, Inc. Network-accessible machine learning model training and hosting system
US11257002B2 (en) * 2017-11-22 2022-02-22 Amazon Technologies, Inc. Dynamic accuracy-based deployment and monitoring of machine learning models in provider networks
AU2018384082B2 (en) * 2017-12-15 2022-01-06 Vitrolife A/S Systems and methods for estimating embryo viability
CN107977684B (zh) * 2017-12-20 2018-10-23 杭州智微信息科技有限公司 一种快速修正骨髓有核细胞分类的交互方法
US11561791B2 (en) 2018-02-01 2023-01-24 Tesla, Inc. Vector computational unit receiving data elements in parallel from a last row of a computational array
US10915729B2 (en) * 2018-02-20 2021-02-09 The Regents Of The University Of Michigan Three-dimensional cell and tissue image analysis for cellular and sub-cellular morphological modeling and classification
US10552957B2 (en) * 2018-03-24 2020-02-04 Dan Nayot Methods and systems for determining quality of an oocyte
AU2019273148A1 (en) * 2018-05-25 2020-12-10 Sony Corporation Control device, control method, and program
DE102019114459A1 (de) * 2018-05-30 2019-12-05 Carl Zeiss Microscopy Gmbh Verfahren zum Scannen von Teilbereichen einer Probe mittels eines Rastermikroskops, Computerprogrammprodukt, computerlesbares Medium und System zum Scannen von Teilbereichen einer Probe mittels eines Rastermikroskops
US11308152B2 (en) * 2018-06-07 2022-04-19 Canon Kabushiki Kaisha Quantization method for feature vector, search method, apparatus and storage medium
CN108823095A (zh) * 2018-06-08 2018-11-16 上海柏慧康生物科技有限公司 一种用于活细胞培养过程中的环境控制及观察分析系统
US11215999B2 (en) 2018-06-20 2022-01-04 Tesla, Inc. Data pipeline and deep learning system for autonomous driving
GB201810634D0 (en) 2018-06-28 2018-08-15 Vitrolife As Methods and apparatus for assessing embryo development
JPWO2020012616A1 (ja) * 2018-07-12 2021-08-02 ソニーグループ株式会社 情報処理装置、情報処理方法、プログラム、及び情報処理システム
US11361457B2 (en) 2018-07-20 2022-06-14 Tesla, Inc. Annotation cross-labeling for autonomous control systems
US11636333B2 (en) 2018-07-26 2023-04-25 Tesla, Inc. Optimizing neural network structures for embedded systems
WO2020031185A2 (en) * 2018-08-06 2020-02-13 Carmel Diagnostics Ltd. Cellular tissue analysis method and device
WO2020033391A1 (en) * 2018-08-07 2020-02-13 Cornell University System and method for selecting artificially fertilized embryos
US10611995B2 (en) 2018-08-15 2020-04-07 Deepcell, Inc. Systems and methods for particle analysis
US11815507B2 (en) 2018-08-15 2023-11-14 Deepcell, Inc. Systems and methods for particle analysis
US11990226B2 (en) * 2018-08-28 2024-05-21 Koninklijke Philips N.V. Advanced loop selection systems and methods for supporting efficient echo comparison
US11562231B2 (en) 2018-09-03 2023-01-24 Tesla, Inc. Neural networks for embedded devices
CN109190622A (zh) * 2018-09-11 2019-01-11 深圳辉煌耀强科技有限公司 基于强特征和神经网络的上皮细胞分类系统和方法
KR20210078488A (ko) 2018-09-20 2021-06-28 에이아이브이에프 엘티디 이미지 특징 감지
US11205093B2 (en) 2018-10-11 2021-12-21 Tesla, Inc. Systems and methods for training machine models with augmented data
EP3640946A1 (en) * 2018-10-15 2020-04-22 Sartorius Stedim Data Analytics AB Multivariate approach for biological cell selection
US11196678B2 (en) 2018-10-25 2021-12-07 Tesla, Inc. QOS manager for system on a chip communications
CN109544512B (zh) * 2018-10-26 2020-09-18 浙江大学 一种基于多模态的胚胎妊娠结果预测装置
CN112889088A (zh) * 2018-10-31 2021-06-01 合同会社予幸集团中央研究所 程序、学习模型、信息处理装置、信息处理方法、信息显示方法和学习模型的制造方法
WO2020092901A1 (en) * 2018-11-01 2020-05-07 The Brigham And Women's Hospital, Inc. Automatic determination of a biological condition of a subject from ferning patterns
WO2020102565A2 (en) 2018-11-14 2020-05-22 Flagship Pioneering Innovations V, Inc. Systems and methods for nondestructive testing of gametes
JP7067444B2 (ja) * 2018-12-03 2022-05-16 ソニーグループ株式会社 受精卵解析システム、情報処理装置、情報処理方法及びプログラム
US11816585B2 (en) 2018-12-03 2023-11-14 Tesla, Inc. Machine learning models operating at different frequencies for autonomous vehicles
US10824915B2 (en) * 2018-12-04 2020-11-03 Capital One Services, Llc Artificial intelligence system for inspecting image reliability
US11537811B2 (en) 2018-12-04 2022-12-27 Tesla, Inc. Enhanced object detection for autonomous vehicles based on field view
CN109710802B (zh) * 2018-12-20 2021-11-02 百度在线网络技术(北京)有限公司 视频分类方法及其装置
US11610117B2 (en) 2018-12-27 2023-03-21 Tesla, Inc. System and method for adapting a neural network model on a hardware platform
CN113260894B (zh) 2018-12-28 2023-04-04 仪景通株式会社 显微镜系统
CN110363057A (zh) * 2018-12-29 2019-10-22 上海北昂医药科技股份有限公司 一种形态学图像中的精子识别及分类方法
KR102084682B1 (ko) * 2019-01-07 2020-03-04 기초과학연구원 인공신경망을 이용한 특수 현미경 영상 생성 방법 및 영상 처리 장치
KR102084683B1 (ko) * 2019-01-07 2020-03-04 기초과학연구원 인공신경망을 이용한 세포 영상 분석 방법 및 세포 영상 처리 장치
WO2020157761A1 (en) * 2019-01-31 2020-08-06 Amnon Buxboim Automated evaluation of embryo implantation potential
US10997461B2 (en) 2019-02-01 2021-05-04 Tesla, Inc. Generating ground truth for machine learning from time series elements
US11150664B2 (en) 2019-02-01 2021-10-19 Tesla, Inc. Predicting three-dimensional features for autonomous driving
US11567514B2 (en) 2019-02-11 2023-01-31 Tesla, Inc. Autonomous and user controlled vehicle summon to a target
US10956755B2 (en) 2019-02-19 2021-03-23 Tesla, Inc. Estimating object properties using visual image data
US11493427B2 (en) * 2019-03-27 2022-11-08 Becton, Dickinson And Company Systems for cell sorting based on frequency-encoded images and methods of use thereof
AU2020276112A1 (en) * 2019-05-16 2022-01-20 PAIGE.AI, Inc. Systems and methods for processing images to classify the processed images for digital pathology
CN110135503B (zh) * 2019-05-19 2022-07-12 重庆理工大学 一种装配机器人零件深度学习识别方法
CN110222823B (zh) * 2019-05-31 2022-12-30 甘肃省祁连山水源涵养林研究院 一种水文流量波动情势识别方法及其系统
CN110363747B (zh) * 2019-06-14 2024-07-02 平安科技(深圳)有限公司 智能化异常细胞判断方法、装置及计算机可读存储介质
TWI794615B (zh) * 2019-07-26 2023-03-01 德商卡爾蔡司Smt有限公司 微加工裝置的自動運作控制
EP4026089A4 (en) * 2019-09-06 2022-11-09 The Brigham & Women's Hospital, Inc. AUTOMATED EVALUATION OF QUALITY ASSURANCE METRICS FOR SUPPORTED PLAYBACK METHODS
JP2020005661A (ja) * 2019-10-16 2020-01-16 憲隆 福永 受精判定システム
CN110969616B (zh) * 2019-12-13 2020-10-27 北京推想科技有限公司 评价卵母细胞质量的方法及装置
EP4080412A4 (en) 2019-12-20 2023-08-23 Chavez Badiola, Alejandro METHOD BASED ON IMAGE CONDITIONING AND PRE-PROCESSING FOR THE CLASSIFICATION OF HUMAN EMBRYO
CN111339904B (zh) * 2020-02-21 2023-11-03 腾讯科技(深圳)有限公司 动物精子图像识别方法和装置
JPWO2021177142A1 (ja) * 2020-03-05 2021-09-10
US11354547B2 (en) * 2020-03-31 2022-06-07 Toyota Research Institute, Inc. Systems and methods for clustering using a smart grid
CN111652095A (zh) * 2020-05-21 2020-09-11 骏实生物科技(上海)有限公司 一种基于人工智能的ctc图像识别方法和系统
AU2021300304B2 (en) * 2020-06-29 2024-05-30 The Brigham And Women's Hospital, Inc. Adaptive neural networks for analyzing medical images
US20220012873A1 (en) * 2020-07-10 2022-01-13 Embryonics LTD Predicting Embryo Implantation Probability
CN111932510B (zh) * 2020-08-03 2024-03-05 深圳回收宝科技有限公司 一种图像清晰度的确定方法及装置
WO2022031765A1 (en) 2020-08-03 2022-02-10 Emgenisys, Inc. Embryo evaluation based on real-time video
US20230326014A1 (en) * 2020-09-11 2023-10-12 The Brigham And Women's Hospital, Inc Automated aneuploidy screening using arbitrated ensembles
US20220156922A1 (en) * 2020-11-17 2022-05-19 Alejandro Chávez Badiola System for real-time automatic quantitative evaluation, assessment and/or ranking of individual sperm, aimed for intracytoplasmic sperm injection (icsi), and other fertilization procedures, allowing the selection of a single sperm
TR202020705A1 (tr) * 2020-12-16 2022-08-22 Istanbul Medipol Ueniversitesi Tüp bebek işleminde gebelik oluşturma potansiyeli en yüksek olan embriyonun seçimi için bir yöntem
WO2022240851A1 (en) * 2021-05-10 2022-11-17 Kang Zhang System and method for outcome evaluations on human ivf-derived embryos
CN113177961B (zh) * 2021-06-07 2022-07-01 重庆傲雄在线信息技术有限公司 一种用于印章图文比对的多模态深度模型训练方法
CN113469958B (zh) * 2021-06-18 2023-08-04 中山大学附属第一医院 一种胚胎发育潜能预测方法、系统、设备及存储介质
US11670417B2 (en) * 2021-10-05 2023-06-06 Neumora Therapeutics, Inc. Machine learning systems for processing multi-modal patient data
TWI806220B (zh) * 2021-11-04 2023-06-21 財團法人資訊工業策進會 異常評估系統與異常評估方法
US20230410309A1 (en) * 2022-05-17 2023-12-21 Overture Life, Inc. Methods, computer programs, and systems for automated microinjection
JP2024046836A (ja) * 2022-09-26 2024-04-05 株式会社Screenホールディングス 分類方法およびコンピュータプログラム
WO2024161784A1 (ja) * 2023-01-30 2024-08-08 富士フイルム株式会社 判定支援装置、判定支援装置の作動方法、および判定支援装置の作動プログラム
TWI845274B (zh) * 2023-04-24 2024-06-11 國立臺灣海洋大學 細胞品質預測系統、方法及其異常數據自動偵測方法
CN117253228B (zh) * 2023-11-14 2024-02-09 山东大学 一种基于核像距离内编码的细胞团簇空间约束方法及系统

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013502233A (ja) 2009-08-22 2013-01-24 ザ ボード オブ トラスティーズ オブ ザ リーランド スタンフォード ジュニア ユニバーシティ 胚、卵母細胞、および幹細胞の撮像および評価
JP2014504849A (ja) 2010-09-27 2014-02-27 オクソジン, インコーポレイテッド 胚、卵母細胞および幹細胞の自動撮像および評価のための装置、手段およびシステム

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040072143A1 (en) * 1998-06-01 2004-04-15 Weyerhaeuser Company Methods for classification of somatic embryos
US6757423B1 (en) * 1999-02-19 2004-06-29 Barnes-Jewish Hospital Methods of processing tagged MRI data indicative of tissue motion including 4-D LV tissue tracking
US7907769B2 (en) 2004-05-13 2011-03-15 The Charles Stark Draper Laboratory, Inc. Image-based methods for measuring global nuclear patterns as epigenetic markers of cell differentiation
ES2549205T3 (es) 2005-10-14 2015-10-26 Unisense Fertilitech A/S Determinación de un cambio en una población de células
EP2035548B1 (en) * 2006-06-16 2010-08-11 Unisense Fertilitech A/S Embryo quality assessment based on blastomere division and movement
WO2009137866A1 (en) * 2008-05-16 2009-11-19 Swinburne University Of Technology Method and system for automated cell function classification
US20110207112A1 (en) 2008-07-23 2011-08-25 Mariposa Biotechnology, Inc Automated system for cryopreservation of oocytes, embryos, or blastocysts
US20100055039A1 (en) 2008-09-04 2010-03-04 Regis Doyonnas Non-invasive methods of monitoring engrafted stem cells and methods for isolation of skeletal muscle stem cells
US20120244567A1 (en) 2009-09-04 2012-09-27 Buck Institute For Research On Aging Human embryonic stem cells for high throughout drug screening
US8396899B2 (en) 2009-11-23 2013-03-12 Dell Products L.P. Efficient segment detection for deduplication
JP5807288B2 (ja) * 2010-06-30 2015-11-10 大日本印刷株式会社 体外培養による胚の製造方法、並びに胚を選別するための方法、装置、及びシステム
GB2486398B (en) * 2010-11-17 2018-04-25 Room4 Group Ltd Cell classification and artefact rejection for cell nuclei
EP2678675B1 (en) 2011-02-23 2017-10-11 The Board of Trustees of the Leland Stanford Junior University Methods of detecting aneuploidy in human embryos
CN104232566B (zh) 2011-05-31 2016-11-16 尤尼森斯繁殖技术公司 基于卵裂球的卵裂和形态的胚胎质量评估
WO2013178785A1 (en) 2012-05-31 2013-12-05 Unisense Fertilitech A/S Embryo quality assessment based on blastocyst development
US9177098B2 (en) 2012-10-17 2015-11-03 Celmatix Inc. Systems and methods for determining the probability of a pregnancy at a selected point in time
PT2951574T (pt) * 2013-02-01 2019-07-05 Ares Trading Sa Medição do desenvolvimento de embriões e potencial de implantação com a ajuda de parâmetros de tempo e fenótipo de primeira citocinese
ES2755878T3 (es) 2013-02-01 2020-04-24 Ares Trading Sa Fenotipos anormales de singamia observados con obtención de imágenes a intervalos de tiempo preestablecidos para identificación precoz de embriones con potencial de desarrollo inferior
WO2014134550A1 (en) 2013-02-28 2014-09-04 Auxogyn, Inc. Apparatus, method, and system for image-based human embryo cell classification

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013502233A (ja) 2009-08-22 2013-01-24 ザ ボード オブ トラスティーズ オブ ザ リーランド スタンフォード ジュニア ユニバーシティ 胚、卵母細胞、および幹細胞の撮像および評価
JP2014504849A (ja) 2010-09-27 2014-02-27 オクソジン, インコーポレイテッド 胚、卵母細胞および幹細胞の自動撮像および評価のための装置、手段およびシステム

Also Published As

Publication number Publication date
EP2962101A1 (en) 2016-01-06
IL240856A0 (en) 2015-10-29
US20140247972A1 (en) 2014-09-04
JP2024096236A (ja) 2024-07-12
EP2961336A1 (en) 2016-01-06
CA2901833A1 (en) 2014-09-04
CA2901830C (en) 2023-03-21
IL263963A (en) 2019-01-31
US9710696B2 (en) 2017-07-18
US9177192B2 (en) 2015-11-03
US20160078275A1 (en) 2016-03-17
WO2014134527A1 (en) 2014-09-04
EP2961336A4 (en) 2016-11-02
IL263963B (en) 2021-06-30
EP2961336B1 (en) 2024-03-27
US20140247973A1 (en) 2014-09-04
JP2016509845A (ja) 2016-04-04
IL240855B (en) 2019-01-31
JP2016509844A (ja) 2016-04-04
JP2022087297A (ja) 2022-06-09
CA2901830A1 (en) 2014-09-04
JP2020036625A (ja) 2020-03-12
US9542591B2 (en) 2017-01-10
CN105408746A (zh) 2016-03-16
CN105407819A (zh) 2016-03-16
EP2962101A4 (en) 2016-10-19
ES2981412T3 (es) 2024-10-08
IL240856B (en) 2021-02-28
WO2014134550A1 (en) 2014-09-04
IL240855A0 (en) 2015-10-29

Similar Documents

Publication Publication Date Title
JP7071047B2 (ja) 自動非侵襲細胞活性追跡のための装置、方法、およびシステム
AU2018384082B2 (en) Systems and methods for estimating embryo viability
Di Cataldo et al. Subclass discriminant analysis of morphological and textural features for hep-2 staining pattern classification
CN112163599B (zh) 一种基于多尺度多层次融合的图像分类方法
JP2022536388A (ja) 生殖補助技術における適応型画像処理方法およびシステム
Ma et al. A new classifier fusion method based on historical and on-line classification reliability for recognizing common CT imaging signs of lung diseases
Milewska et al. The use of principal component analysis and logistic regression in prediction of infertility treatment outcome
US20230027723A1 (en) Stain-free detection of embryo polarization using deep learning
Yuzkat et al. Detection of sperm cells by single-stage and two-stage deep object detectors
Thiyagarajan et al. Comparative analysis of classifier Performance on MR brain images.
WO2023154851A1 (en) Integrated framework for human embryo ploidy prediction using artificial intelligence
Lewandowska et al. Ensembling noisy segmentation masks of blurred sperm images
Kanakasabapathy et al. Deep learning mediated single time-point image-based prediction of embryo developmental outcome at the cleavage stage
Ferdousi et al. A deep learning approach for white blood cells image generation and classification using SRGAN and VGG19
Delgarmi et al. Automatic Landmark Detection of Human Back Surface from Depth Images via Deep Learning
Yin et al. Classification based on LBP and SVM for human embryo microscope images
Harun Medical Image Segmentation for Embryo Image Analysis
Doudkin et al. Estimation of Informative Features in the Analysis of 2D Images of Bone Objects in Forensic
Li et al. Automatic detection of three cell types in a microscope image based on deep learning
Selfiana et al. Comparison of K-means and DBSCAN for prediction determination of Down syndrome using prenatal test data
Ramachandran et al. Automatic approach to detect turner syndrome (TS) using hand x-rays based on feature extraction and principal component analysis (PCA)
Hekmati Machine Learning to Analyze fMRI Brain Activity Recordings
CN113724863A (zh) 一种自闭症谱系障碍的自动判别系统、存储介质及设备
Abubakar et al. Classification of Alzheimer's Disease Using Cnn-Based Features and Vit-Global Contextual Patterns from MRI Images
Igrejas et al. Department of Industrial Electronics E-mail: igrejas@ ipb. pt

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20151027

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20170224

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20171222

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20171220

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20180320

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180419

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20180920

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20181206

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190320

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20190820

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20191220

C60 Trial request (containing other claim documents, opposition documents)

Free format text: JAPANESE INTERMEDIATE CODE: C60

Effective date: 20191220

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20191227

C21 Notice of transfer of a case for reconsideration by examiners before appeal proceedings

Free format text: JAPANESE INTERMEDIATE CODE: C21

Effective date: 20200106

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A711

Effective date: 20200122

A912 Re-examination (zenchi) completed and case transferred to appeal board

Free format text: JAPANESE INTERMEDIATE CODE: A912

Effective date: 20200228

C211 Notice of termination of reconsideration by examiners before appeal proceedings

Free format text: JAPANESE INTERMEDIATE CODE: C211

Effective date: 20200303

C22 Notice of designation (change) of administrative judge

Free format text: JAPANESE INTERMEDIATE CODE: C22

Effective date: 20200911

C13 Notice of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: C13

Effective date: 20210304

C22 Notice of designation (change) of administrative judge

Free format text: JAPANESE INTERMEDIATE CODE: C22

Effective date: 20210409

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20210602

RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20210602

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20210609

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210702

C22 Notice of designation (change) of administrative judge

Free format text: JAPANESE INTERMEDIATE CODE: C22

Effective date: 20210716

C092 Termination of reconsideration by examiners before appeal proceedings

Free format text: JAPANESE INTERMEDIATE CODE: C092

Effective date: 20210909

C22 Notice of designation (change) of administrative judge

Free format text: JAPANESE INTERMEDIATE CODE: C22

Effective date: 20211012

C13 Notice of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: C13

Effective date: 20211102

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220201

C23 Notice of termination of proceedings

Free format text: JAPANESE INTERMEDIATE CODE: C23

Effective date: 20220308

C03 Trial/appeal decision taken

Free format text: JAPANESE INTERMEDIATE CODE: C03

Effective date: 20220412

C30A Notification sent

Free format text: JAPANESE INTERMEDIATE CODE: C3012

Effective date: 20220412

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20220506

R150 Certificate of patent or registration of utility model

Ref document number: 7071047

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150