JPWO2020012616A1 - 情報処理装置、情報処理方法、プログラム、及び情報処理システム - Google Patents
情報処理装置、情報処理方法、プログラム、及び情報処理システム Download PDFInfo
- Publication number
- JPWO2020012616A1 JPWO2020012616A1 JP2020529927A JP2020529927A JPWO2020012616A1 JP WO2020012616 A1 JPWO2020012616 A1 JP WO2020012616A1 JP 2020529927 A JP2020529927 A JP 2020529927A JP 2020529927 A JP2020529927 A JP 2020529927A JP WO2020012616 A1 JPWO2020012616 A1 JP WO2020012616A1
- Authority
- JP
- Japan
- Prior art keywords
- fertilized egg
- analysis
- information processing
- control unit
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Ceased
Links
- 230000010365 information processing Effects 0.000 title claims abstract description 201
- 238000003672 processing method Methods 0.000 title claims description 6
- 238000004458 analytical method Methods 0.000 claims abstract description 537
- 235000013601 eggs Nutrition 0.000 claims description 754
- 210000004027 cell Anatomy 0.000 claims description 138
- 230000033001 locomotion Effects 0.000 claims description 134
- 230000000877 morphologic effect Effects 0.000 claims description 67
- 238000003384 imaging method Methods 0.000 claims description 43
- 230000008602 contraction Effects 0.000 claims description 30
- 230000008859 change Effects 0.000 claims description 25
- 210000002459 blastocyst Anatomy 0.000 claims description 18
- 238000003776 cleavage reaction Methods 0.000 claims description 17
- 230000007017 scission Effects 0.000 claims description 17
- 210000001109 blastomere Anatomy 0.000 claims description 9
- 238000013467 fragmentation Methods 0.000 claims description 9
- 238000006062 fragmentation reaction Methods 0.000 claims description 9
- 230000005484 gravity Effects 0.000 claims description 9
- 210000004508 polar body Anatomy 0.000 claims description 8
- 230000002159 abnormal effect Effects 0.000 claims description 6
- 238000005056 compaction Methods 0.000 claims description 4
- 230000001186 cumulative effect Effects 0.000 claims description 3
- 230000003834 intracellular effect Effects 0.000 claims description 2
- 238000010586 diagram Methods 0.000 abstract description 6
- 238000010191 image analysis Methods 0.000 description 271
- 238000000034 method Methods 0.000 description 99
- 230000008569 process Effects 0.000 description 70
- 238000012545 processing Methods 0.000 description 63
- 238000004891 communication Methods 0.000 description 46
- 230000006870 function Effects 0.000 description 35
- 238000004364 calculation method Methods 0.000 description 33
- 238000011161 development Methods 0.000 description 14
- 230000018109 developmental process Effects 0.000 description 14
- 210000001161 mammalian embryo Anatomy 0.000 description 13
- 238000004422 calculation algorithm Methods 0.000 description 10
- 238000005259 measurement Methods 0.000 description 9
- 238000010801 machine learning Methods 0.000 description 8
- 230000007423 decrease Effects 0.000 description 7
- 239000013598 vector Substances 0.000 description 7
- 230000000694 effects Effects 0.000 description 6
- 238000013528 artificial neural network Methods 0.000 description 5
- 230000003287 optical effect Effects 0.000 description 4
- 238000012258 culturing Methods 0.000 description 3
- 238000011534 incubation Methods 0.000 description 3
- 239000004065 semiconductor Substances 0.000 description 3
- 102000002322 Egg Proteins Human genes 0.000 description 2
- 108010000912 Egg Proteins Proteins 0.000 description 2
- 230000001149 cognitive effect Effects 0.000 description 2
- 238000004590 computer program Methods 0.000 description 2
- 238000013527 convolutional neural network Methods 0.000 description 2
- 238000013135 deep learning Methods 0.000 description 2
- 238000011156 evaluation Methods 0.000 description 2
- 239000000284 extract Substances 0.000 description 2
- 238000003703 image analysis method Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 210000000472 morula Anatomy 0.000 description 2
- 210000004681 ovum Anatomy 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 206010011732 Cyst Diseases 0.000 description 1
- 235000008708 Morus alba Nutrition 0.000 description 1
- 240000000249 Morus alba Species 0.000 description 1
- 206010028980 Neoplasm Diseases 0.000 description 1
- 201000011510 cancer Diseases 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 208000031513 cyst Diseases 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 230000002542 deteriorative effect Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000012634 fragment Substances 0.000 description 1
- 210000004602 germ cell Anatomy 0.000 description 1
- 239000008187 granular material Substances 0.000 description 1
- 230000012447 hatching Effects 0.000 description 1
- 238000005286 illumination Methods 0.000 description 1
- 230000001678 irradiating effect Effects 0.000 description 1
- 150000002632 lipids Chemical class 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000007726 management method Methods 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 235000016709 nutrition Nutrition 0.000 description 1
- 210000000287 oocyte Anatomy 0.000 description 1
- 230000001151 other effect Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 230000000306 recurrent effect Effects 0.000 description 1
- 230000002787 reinforcement Effects 0.000 description 1
- 210000000130 stem cell Anatomy 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0012—Biomedical image inspection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0012—Biomedical image inspection
- G06T7/0014—Biomedical image inspection using an image reference approach
- G06T7/0016—Biomedical image inspection using an image reference approach involving temporal comparison
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/60—Type of objects
- G06V20/69—Microscopic objects, e.g. biological cells or cellular parts
- G06V20/695—Preprocessing, e.g. image segmentation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/60—Type of objects
- G06V20/69—Microscopic objects, e.g. biological cells or cellular parts
- G06V20/698—Matching; Classification
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H30/00—ICT specially adapted for the handling or processing of medical images
- G16H30/20—ICT specially adapted for the handling or processing of medical images for handling medical images, e.g. DICOM, HL7 or PACS
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H30/00—ICT specially adapted for the handling or processing of medical images
- G16H30/40—ICT specially adapted for the handling or processing of medical images for processing medical images, e.g. editing
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H50/00—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
- G16H50/20—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for computer-aided diagnosis, e.g. based on medical expert systems
-
- C—CHEMISTRY; METALLURGY
- C12—BIOCHEMISTRY; BEER; SPIRITS; WINE; VINEGAR; MICROBIOLOGY; ENZYMOLOGY; MUTATION OR GENETIC ENGINEERING
- C12M—APPARATUS FOR ENZYMOLOGY OR MICROBIOLOGY; APPARATUS FOR CULTURING MICROORGANISMS FOR PRODUCING BIOMASS, FOR GROWING CELLS OR FOR OBTAINING FERMENTATION OR METABOLIC PRODUCTS, i.e. BIOREACTORS OR FERMENTERS
- C12M41/00—Means for regulation, monitoring, measurement or control, e.g. flow regulation
- C12M41/30—Means for regulation, monitoring, measurement or control, e.g. flow regulation of concentration
- C12M41/36—Means for regulation, monitoring, measurement or control, e.g. flow regulation of concentration of biomass, e.g. colony counters or by turbidity measurements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20036—Morphological image processing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
- G06T2207/30024—Cell structures in vitro; Tissue sections in vitro
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Medical Informatics (AREA)
- General Health & Medical Sciences (AREA)
- Public Health (AREA)
- Biomedical Technology (AREA)
- Radiology & Medical Imaging (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Primary Health Care (AREA)
- Epidemiology (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- Pathology (AREA)
- Databases & Information Systems (AREA)
- Quality & Reliability (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Multimedia (AREA)
- Molecular Biology (AREA)
- Life Sciences & Earth Sciences (AREA)
- Apparatus Associated With Microorganisms And Enzymes (AREA)
- Investigating Or Analysing Materials By Optical Means (AREA)
Abstract
Description
1.情報処理システムの概要
2.情報処理装置
2.1.構成例
2.2.処理例
2.3.効果
3.ハードウェア構成例
4.まとめ
図1は、本開示の一実施形態に係る情報処理システム1の構成の概略を示す図である。図1に示すように、情報処理システム1は、撮像装置10、情報処理装置20、及び表示装置30を備える。撮像装置10、情報処理装置20、及び表示装置30は、互いに有線又は無線の各種ネットワークにより接続される。また、情報処理装置20は、インターネット回線に接続され、その情報処理及び解析処理をクラウドで実施することが可能である。また、撮像装置10、情報処理装置20、及び表示装置30は、所定の接続端子を介して、互いに直接接続されていてもよい。
撮像装置10は、被写体を時系列で撮像することで、被写体に関する画像を生成する装置である。撮像装置10は、少なくともCCD(Charge Coupled Device)又はCMOS(Complementary Metal Oxide Semiconductor)センサ等の公知の各種の撮像素子を有する。撮像装置10は、これらの撮像素子に加えて、被写体像を撮像素子に結像させるレンズ、及び被写体に照明光を照射するための光源等といった各種の部材を有してもよい。
情報処理装置20は、撮像装置10が時系列で撮像した受精卵画像を解析し、解析した結果に基づき、次回以降実施される画像解析の実施条件を動的に制御する装置である。また、情報処理装置20は、画像解析の結果得られる受精卵の特徴量である受精卵特徴量に基づき受精卵の状態を判定する機能をさらに有していることが好ましい。さらに、情報処理装置20は、撮像装置10が撮像した受精卵画像の解析結果や受精卵の状態に関する判定結果などを表示装置30に表示して、ユーザーに提示することが可能である。情報処理装置20は、PC(Personal Computer)や、インターネットに接続されたクラウト上での大規模コンピュータ等の画像解析を実施する機能を有する装置で構成される。
表示装置30は、撮像装置10が撮像した受精卵画像や情報処理装置20が画像解析した結果等を表示する装置である。表示装置30は、液晶ディスプレイ等の画像表示装置で構成される。表示装置30は、情報処理装置20による画像解析の実施状況を示す各種の情報を表示してもよい。
以下、本開示の一実施形態に係る情報処理装置20について説明する。
図3は、本開示の一実施形態に係る情報処理装置20の機能構成例を示す機能ブロック図である。図3に示すように、情報処理装置20は、解析部200、判定部210、制御部220、及び記憶部230を備える。解析部200、判定部210、及び制御部220の機能は、例えば、情報処理装置20が備えるCPU(Central Processing Unit)、ROM(Read Only Memory)、RAM(Random Access Memory)等を有する処理回路により実現される。また、記憶部230の機能は、情報処理装置20が備えるRAMやストレージ等の記憶装置により実現される。なお、これら解析部200、判定部210、制御部220、又は記憶部230は、インターネットに接続されたクラウド上の大規模コンピュータ上に配置されていてもよい。以下、各機能部が有する機能について説明する。
解析部200は、撮像装置10が時系列で撮像した受精卵画像を解析して、受精卵の状態を表す受精卵特徴量を算出する機能を有する。なお、解析部200は、後述する解析制御部221が決定した画像解析の実施条件に基づいて、画像解析を実施する。
判定部210は、解析部200が受精卵画像を解析することで算出された受精卵特徴量に基づいて、受精卵の状態を判定する機能を有する。
制御部220は、情報処理装置20が実施する各種の処理を制御する機能を有する。例えば、制御部220は、画像解析の実施条件、外部装置との通信、及び画像解析の実施状況を示す情報の表示を制御する。これらの制御は、それぞれ、制御部220が備える解析制御部221、表示制御部222、及び通信制御部223の各機能部により実施される。制御部220に含まれる各機能部の処理により生成される情報は、解析部200へ伝達される。また、これらの生成された情報は、記憶部に230に記録され、記憶部230を介して解析部200へ伝達されてもよい。また、制御部220に含まれる各機能部の処理により生成される情報は、制御部220に含まれる各機能部の相互で共有されてもよい。制御部220に含まれる各機能部の有する機能については後述する。
記憶部230は、情報処理装置20に送信された情報及び情報処理装置20で生成された情報を記録する機能を有する。より具体的には、記憶部230は撮像装置10が撮像した受精卵画像を取得して記憶し得る。また、記憶部230は、解析部200が算出した受精卵特徴量、判定部210が判定した結果、又は制御部220が制御する内容を表す情報等の各種の画像解析に関する情報を記憶してもよい。記憶部230は、解析部200、判定部210、及び制御部220の各種機能部からの要求に応じて情報を出力する。
ID付与部201は、撮像装置10から情報処理装置20へ送信された受精卵画像に含まれる受精卵の各々に対して、固有の識別番号を付与する機能を有する。識別番号は、付与された受精卵についての受精卵特徴量等の各種情報に対応付けられる。これにより、着目する受精卵特徴量等の各種情報が、識別番号で紐づけられて一纏めに管理可能となり、情報管理の利便性が向上する。
認識解析部202は、受精卵が撮像された複数の受精卵画像の各々を解析して、受精卵画像内における受精卵に関する領域を認識することにより、当該複数の受精卵画像の各々から受精卵の外形、形状、直径、面積、又は位置などに関する情報である認識特徴量を算出する機能を有する。認識解析部202が受精卵画像を解析し、受精卵に関する特定領域を認識して当該受精卵の認識特徴量を算出することを、以下では認識解析という。
動き解析部203は、受精卵が時系列で撮像された複数の受精卵画像を解析して、当該複数の受精卵画像の各々から受精卵の動きに関する情報である動き特徴量を算出する機能を有する。動き解析部203が受精卵画像を解析して動き特徴量を算出することを、以下では動き解析という。
形態解析部204は、受精卵が撮像された複数の受精卵画像の各々を解析して、当該複数の受精卵画像の各々から受精卵の形態に関する特徴を表す情報である形態特徴量を算出する機能を有する。形態解析部204が受精卵画像を解析し、形態特徴量を算出することを、以下では形態解析という。
数値解析部205は、受精卵が撮像された複数の受精卵画像の各々を解析して、当該複数の受精卵画像の各々から受精卵の状態を表す数値である数値特徴量を算出する機能を有する。数値解析部205が受精卵画像を解析し、認識特徴量を算出することを、以下では数値解析という。
解析制御部221は、解析部200により算出された受精卵特徴量に基づいて解析部200による画像解析の実施条件を動的に制御する機能を有する。解析制御部221は、受精卵特徴量の経時的な変化に基づいて画像解析の実施条件を動的に制御してもよい。さらに、解析制御部221は、判定部210が判定した受精卵の発育や品質に基づいて解析部200による画像解析の実施条件を決定してもよい。
表示制御部222は、情報処理装置20が取得した情報の表示装置30への表示を制御する機能を有する。例えば、表示制御部222は、解析部200が算出した受精卵特徴量又は解析制御部221が決定した画像解析の実施条件を示す情報等の各種画像解析に関する情報を表示装置30へ表示するように、後述の通信制御部223を制御する。
通信制御部223は、情報処理装置20から各種の外部装置への通信を制御する機能を有する。通信制御部223が外部装置と無線又は有線により通信する機能を有する通信装置(図2に図示しない)を制御することにより、情報処理装置20から各種の外部装置への通信が実施される。当該通信装置は、情報処理装置20に含まれてもよい。また、通信制御部223は、通信回線、例えばインターネット接続により外部のクラウドなどの大規模コンピュータに接続されていても良い。
以上、本開示の一実施形態に係る情報処理装置20の構成及び機能について説明した。次に、本開示の一実施形態に係る情報処理装置20による処理の一例について、図4〜図8を用いて説明する。
まず、ステップS405において実施される認識解析処理について説明する。図5は認識解析処理の流れについて説明するためのフローチャートである。
まず、ステップS407において実施される動き解析処理について説明する。図6は動き解析処理の流れについて説明するためのフローチャートである。
まず、ステップS409において実施される形態解析処理について説明する。図7は形態解析処理の流れについて説明するためのフローチャートである。
まず、ステップS411において実施される数値解析処理について説明する。図8は数値解析処理の流れについて説明するためのフローチャートである。
図9は、画像解析の実施状況を示す情報が表示された表示装置30の画面の一例である。表示装置30には、画面302が表示されている。画面302には、受精卵の画像解析の実施状況を示す表示部304が含まれている。図9に示すように、表示部304はA行〜H行、1列〜9列に仕切られた区画に分割されている。それぞれの区画は、図2の培地M1におけるウェルW1に対応する。また、それぞれのウェルW1には、1つの受精卵が対応している。従って、それぞれの区画には、それぞれ1つの受精卵が対応している。なお、受精卵の画像解析の実施状況を示す情報の表示方法は図9の例に限られない。
第1の具体例では、ステップS413において、判定部210が、認識特徴量の一つである受精卵の面積に基づいて受精卵の発育や品質を判定する。より具体的には、判定部210は、受精卵の面積の経時的な変化が小さい受精卵について、品質が悪いことを判定する。また、第1の具体例では、ステップS415において、解析制御部221が、受精卵の発育や品質が悪いことを判定された受精卵について、解析部200の各機能部による画像解析を停止することを決定する。以下、図4のフローチャートを用いて第1の具体例の情報処理装置20が実施する処理を説明する。
次に、第2の具体例の情報処理装置20が実施する処理について説明する。第2の具体例では、ステップS413において、判定部210は、動き特徴量の一つである受精卵全体の動き量に基づいて受精卵の品質を判定する。より具体的には、判定部210は、受精卵の受精卵全体の動き量が所定時間の間小さい受精卵について、品質が悪いことを判定する。また、第2の具体例では、ステップS415において、解析制御部221は、品質が悪いことを判定された受精卵について、解析部200の各機能部による画像解析を停止することを決定する。以下、図4のフローチャートを用いて第2の具体例の情報処理装置20が実施する処理を説明する。
次に、第3の具体例の情報処理装置20が実施する処理について説明する。第3の具体例では、ステップS413において、判定部210が、形態特徴量の一つである発育段階に基づいて受精卵の品質を判定する。より具体的には、判定部210は、所定時間の間、発育段階に変化がない受精卵について、その受精卵の品質が悪いことを判定する。また、第3の具体例では、ステップS415において、解析制御部221が、品質が悪いことを判定された受精卵について、解析部200の各機能部による画像解析を停止することを決定する。以下、図4のフローチャートを用いて第3の具体例の情報処理装置20が実施する処理を説明する。
第4の具体例では、解析部200は、各々の受精卵の受精卵特徴量A、受精卵特徴量B、受精卵特徴量C及び受精卵特徴量Dの4つの受精卵特徴量を算出する。これらの受精卵特徴量は、認識特徴量、動き特徴量、形態特徴量、又は数値特徴量のいずれでもよいし、これらの組み合わせであってもよい。また、第4の具体例では、ステップS415において、解析制御部221が、品質が悪いことを判定された受精卵について、これらの受精卵特徴量の算出を段階的に停止することを決定する。以下、図4のフローチャートを用いて第4の具体例の情報処理装置20が実施する処理を説明する。
第5の具体例では、ステップS415において、解析制御部221が、品質が悪いことを判定された受精卵について、受精卵特徴量の算出に用いられる解析手法の数を段階的に減少させることを決定する。以下、図4のフローチャートを用いて第5の具体例の情報処理装置20が実施する処理を説明する。
第6の具体例では、ステップS415において、解析制御部221が、品質が悪いことを判定された受精卵について、解析部200による画像解析を実施しない期間が経過時間に依らず一定となるように断続するように制御する。つまり、解析制御部221が、品質が悪いことを判定された受精卵について、解析部200により画像解析が実施されない期間を所定の培養時間間隔として、画像解析を断続するように制御する。以下、図4のフローチャートを用いて第6の具体例の情報処理装置20が実施する処理を説明する。
第7の具体例では、ステップS415において、解析制御部221が、品質が悪いことを判定された受精卵について、培養時間の経過とともに画像解析しない時間が長くなるように画像解析を断続することを決定する。以下、図4のフローチャートを用いて第7の具体例の情報処理装置20が実施する処理を説明する。
されない期間が長くなるように断続してもよい。
以上、本開示の一実施形態の情報処理装置20が複数の受精卵が撮像された画像から受精卵の特徴量を画像解析する処理例について説明した。次に、本開示の一実施形態の情報処理装置20の効果について説明する。
次に、図18を参照して、本開示の一実施形態に係る情報処理装置のハードウェア構成について説明する。図18は、本開示の一実施形態の情報処理装置のハードウェア構成例を示すブロック図である。図示された情報処理装置20は、例えば、上記の実施形態における情報処理装置20を実現しうる。
以上、添付図面を参照しながら本開示の好適な実施形態について詳細に説明したが、本開示の技術的範囲はかかる例に限定されない。本開示の技術分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本開示の技術的範囲に属するものと了解される。
(1)
分裂能を有する細胞を含む観察対象物が時系列で撮像された複数の画像を解析して、前記細胞の状態を表す特徴量を算出する解析部と、
算出された前記特徴量に基づいて前記解析の実施条件を動的に制御する制御部と、
を備える、情報処理装置。
(2)
前記特徴量に基づいて前記細胞の状態を判定する判定部を更に備える、前記(1)に記載の情報処理装置。
(3)
前記判定部は、所定の機械学習アルゴリズムにより前記細胞の状態を判定する、前記(2)に記載の情報処理装置。
(4)
前記制御部は、前記特徴量から判定される前記細胞の状態に基づいて前記解析の実施条件を動的に制御する、前記(2)又は(3)に記載の情報処理装置。
(5)
前記制御部は、前記特徴量の経時的な変化に基づいて前記解析の実施条件を動的に制御する、前記(1)〜(3)のいずれか1項に記載の情報処理装置。
(6)
前記制御部は、前記解析の実施タイミングを断続させるように制御する、前記(1)〜(5)のいずれか1項に記載の情報処理装置。
(7)
前記制御部は、前記解析を実施しない期間が経過時間に依らず一定となるように制御する、前記(6)に記載の情報処理装置。
(8)
前記制御部は、時間の経過とともに、前記解析を実施しない期間が長くなるように制御する、前記(6)に記載の情報処理装置。
(9)
前記制御部は、前記解析の実施を停止するように制御する、前記(1)〜(5)のいずれか1項に記載の情報処理装置。
(10)
前記制御部は、時間の経過とともに、前記算出される前記特徴量の数を減少させるように制御する、前記(1)〜(5)のいずれか1項に記載の情報処理装置。
(11)
前記制御部は、時間の経過とともに、前記解析に用いられる所定の解析手法の数を減少させるように制御する、前記(1)〜(5)のいずれか1項に記載の情報処理装置。
(12)
前記細胞の状態を表す特徴量は、細胞の形状に関する情報である認識特徴量、細胞の動きを特徴づける情報である動き特徴量、細胞の形態を特徴づける情報である形態特徴量、又は受精卵の状態を表す数値である数値特徴量の少なくともいずれか一つを含む、前記(1)〜(11)のいずれか1項に記載の情報処理装置。
(13)
前記細胞は受精卵であり、
前記認識特徴量は、受精卵の面積、受精卵の直径、受精卵の真円度、受精卵の楕円率、受精卵の重心位置、受精卵の中心位置、受精卵の内部細胞塊の面積、受精卵の内部細胞塊の直径、受精卵の内部細胞塊の真円度、受精卵の内部細胞塊の楕円率、受精卵の内部細胞塊の重心位置、受精卵の内部細胞塊の中心位置、受精卵の透明帯の面積、受精卵の透明帯の直径、受精卵の透明帯の真円度、受精卵の透明帯の楕円率、受精卵の透明帯の重心位置、受精卵の透明帯の中心位置、受精卵の前核の数、受精卵の前核の面積、受精卵の極体の数、受精卵の極体の面積、受精卵のフラグメンテーションの数、又は受精卵のフラグメンテーションの面積のうちの少なくとも一つを含む、前記(12)に記載の情報処理装置。
(14)
前記細胞は受精卵であり、
前記動き特徴量は、受精卵全体の動き量、受精卵全体の動き方向、受精卵内部の割球の動き量、受精卵内部の割球の動き量、受精卵内部の胚盤胞の細胞内細胞塊の動き量、又は受精卵内部の胚盤胞の細胞内細胞塊の動き方向のうちの少なくとも一つを含む、前記(12)に記載の情報処理装置。
(15)
前記細胞は受精卵であり、
前記形態特徴量は、受精卵の発育の状態を表す発育状態又は受精卵の品質を表す品質状態のうちの少なくともいずれかを含む、前記(12)に記載の情報処理装置。
(16)
前記細胞は受精卵であり、
前記数値特徴量は、受精卵の面積の収縮量、受精卵の面積の収縮率、受精卵の面積の収縮速度、受精卵の面積の収縮時間、受精卵の累積移動量、受精卵の全面積の収縮回数、受精卵の内部細胞の面積の収縮量、受精卵の内部細胞の面積の収縮率、受精卵の内部細胞の面積の収縮速度、受精卵の内部細胞の面積の収縮時間、受精卵の内部細胞の面積の収縮回数、卵割時間、異常卵割、コンパクション時間のうちの少なくとも一つを含む、前記(12)に記載の情報処理装置。
(17)
前記制御部は、さらに前記解析の実施状況を示す情報の表示を制御する、前記(1)〜(16)のいずれか1項に記載の情報処理装置。
(18)
計算機が備えるプロセッサが、
分裂能を有する細胞を含む観察対象物が時系列で撮像された複数の画像を解析して、前記細胞の状態を表す特徴量を算出することと、
算出された前記特徴量に基づいて前記解析の実施条件を動的に制御することと、
を含む情報処理方法。
(19)
コンピュータに、
分裂能を有する細胞を含む観察対象物が時系列で撮像された複数の画像を解析して、前記細胞の状態を表す特徴量を算出することと、
算出された前記特徴量に基づいて前記解析の実施条件を動的に制御することと、
を実行させる、プログラム。
(20)
分裂能を有する細胞を含む観察対象物を時系列で撮像することにより、当該観察対象物に関する複数の画像を生成する撮像部を少なくとも備える撮像装置と、
前記撮像された複数の画像を解析して、前記細胞の状態を表す特徴量を算出する解析部と、算出された前記特徴量に基づいて前記解析の実施条件を動的に制御する制御部と、を備える情報処理装置と、
を有する情報処理システム。
10 撮像装置
20 情報処理装置
30 表示装置
200 解析部
202 認識解析部
203 動き解析部
204 形態解析部
205 数値解析部
210 判定部
220 制御部
221 解析制御部
222 表示制御部
230 記憶部
Claims (20)
- 分裂能を有する細胞を含む観察対象物が時系列で撮像された複数の画像を解析して、前記細胞の状態を表す特徴量を算出する解析部と、
算出された前記特徴量に基づいて前記解析の実施条件を動的に制御する制御部と、
を備える、情報処理装置。 - 前記特徴量に基づいて前記細胞の状態を判定する判定部を更に備える、請求項1に記載の情報処理装置。
- 前記判定部は、予め構築された分類器により前記細胞の状態を判定する、請求項2に記載の情報処理装置。
- 前記制御部は、前記特徴量から判定される前記細胞の状態に基づいて前記解析の実施条件を動的に制御する、請求項2に記載の情報処理装置。
- 前記制御部は、前記特徴量の経時的な変化に基づいて前記解析の実施条件を動的に制御する、請求項1に記載の情報処理装置。
- 前記制御部は、前記解析を断続させるように制御する、請求項1に記載の情報処理装置。
- 前記制御部は、前記解析を実施しない期間が経過時間に依らず一定となるように制御する、請求項6に記載の情報処理装置。
- 前記制御部は、時間の経過とともに、前記解析を実施しない期間が長くなるように制御する、請求項6に記載の情報処理装置。
- 前記制御部は、前記解析の実施を停止するように制御する、請求項1に記載の情報処理装置。
- 前記制御部は、時間の経過とともに、前記算出される前記特徴量の数を減少させるように制御する、請求項1に記載の情報処理装置。
- 前記制御部は、時間の経過とともに、前記解析に用いられる所定の解析手法の数を減少させるように制御する、請求項1に記載の情報処理装置。
- 前記細胞の状態を表す特徴量は、細胞の形状に関する情報である認識特徴量、細胞の動きを特徴づける情報である動き特徴量、細胞の形態を特徴づける情報である形態特徴量、又は受精卵の状態を表す数値である数値特徴量の少なくともいずれか一つを含む、請求項1に記載の情報処理装置。
- 前記細胞は受精卵であり、
前記認識特徴量は、受精卵の面積、受精卵の直径、受精卵の真円度、受精卵の楕円率、受精卵の重心位置、受精卵の中心位置、受精卵の内部細胞塊の面積、受精卵の内部細胞塊の直径、受精卵の内部細胞塊の真円度、受精卵の内部細胞塊の楕円率、受精卵の内部細胞塊の重心位置、受精卵の内部細胞塊の中心位置、受精卵の透明帯の面積、受精卵の透明帯の直径、受精卵の透明帯の真円度、受精卵の透明帯の楕円率、受精卵の透明帯の重心位置、受精卵の透明帯の中心位置、受精卵の前核の数、受精卵の前核の面積、受精卵の極体の数、受精卵の極体の面積、受精卵のフラグメンテーションの数、又は受精卵のフラグメンテーションの面積のうちの少なくとも一つを含む、請求項12に記載の情報処理装置。 - 前記細胞は受精卵であり、
前記動き特徴量は、受精卵全体の動き量、受精卵全体の動き方向、受精卵内部の割球の動き量、受精卵内部の割球の動き量、受精卵内部の胚盤胞の細胞内細胞塊の動き量、又は受精卵内部の胚盤胞の細胞内細胞塊の動き方向のうちの少なくとも一つを含む、請求項12に記載の情報処理装置。 - 前記細胞は受精卵であり、
前記形態特徴量は、受精卵の発育の状態を表す発育状態又は受精卵の品質を表す品質状態のうちの少なくともいずれかを含む、請求項12に記載の情報処理装置。 - 前記細胞は受精卵であり、
前記数値特徴量は、受精卵の面積の収縮量、受精卵の面積の収縮率、受精卵の面積の収縮速度、受精卵の面積の収縮時間、受精卵の累積移動量、受精卵の全面積の収縮回数、受精卵の内部細胞の面積の収縮量、受精卵の内部細胞の面積の収縮率、受精卵の内部細胞の面積の収縮速度、受精卵の内部細胞の面積の収縮時間、受精卵の内部細胞の面積の収縮回数、卵割時間、異常卵割、コンパクション時間のうちの少なくとも一つを含む、請求項12に記載の情報処理装置。 - 前記制御部は、さらに前記解析の実施状況を示す情報の表示を制御する、請求項1に記載の情報処理装置。
- 計算機が備えるプロセッサが、
分裂能を有する細胞を含む観察対象物が時系列で撮像された複数の画像を解析して、前記細胞の状態を表す特徴量を算出することと、
算出された前記特徴量に基づいて前記解析の実施条件を動的に制御することと、
を含む情報処理方法。 - コンピュータに、
分裂能を有する細胞を含む観察対象物が時系列で撮像された複数の画像を解析して、前記細胞の状態を表す特徴量を算出することと、
算出された前記特徴量に基づいて前記解析の実施条件を動的に制御することと、
を実行させる、プログラム。 - 分裂能を有する細胞を含む観察対象物を時系列で撮像することにより、当該観察対象物に関する複数の画像を生成する撮像部を少なくとも備える撮像装置と、
前記撮像された複数の画像を解析して、前記細胞の状態を表す特徴量を算出する解析部と、算出された前記特徴量に基づいて前記解析の実施条件を動的に制御する制御部と、を備える情報処理装置と、
を有する情報処理システム。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/JP2018/026390 WO2020012616A1 (ja) | 2018-07-12 | 2018-07-12 | 情報処理装置、情報処理方法、プログラム、及び情報処理システム |
Publications (1)
Publication Number | Publication Date |
---|---|
JPWO2020012616A1 true JPWO2020012616A1 (ja) | 2021-08-02 |
Family
ID=69141342
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020529927A Ceased JPWO2020012616A1 (ja) | 2018-07-12 | 2018-07-12 | 情報処理装置、情報処理方法、プログラム、及び情報処理システム |
Country Status (4)
Country | Link |
---|---|
US (1) | US20210287366A1 (ja) |
EP (1) | EP3812448A4 (ja) |
JP (1) | JPWO2020012616A1 (ja) |
WO (1) | WO2020012616A1 (ja) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
GB201810634D0 (en) * | 2018-06-28 | 2018-08-15 | Vitrolife As | Methods and apparatus for assessing embryo development |
WO2020261555A1 (ja) * | 2019-06-28 | 2020-12-30 | オリンパス株式会社 | 画像生成システムおよび画像生成方法 |
KR20230018460A (ko) | 2020-06-03 | 2023-02-07 | 나노트로닉스 이미징, 인코포레이티드 | 생물학적 제제를 위한 통제된 성장 시스템 |
JP2024046836A (ja) * | 2022-09-26 | 2024-04-05 | 株式会社Screenホールディングス | 分類方法およびコンピュータプログラム |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2012095627A (ja) * | 2010-11-05 | 2012-05-24 | Nikon Corp | 細胞培養装置およびプログラム |
JP2014089193A (ja) * | 2007-04-04 | 2014-05-15 | Olympus Corp | 発光タンパクによる長期モニタリング方法および解析方法 |
JP2017062497A (ja) * | 2016-12-05 | 2017-03-30 | ソニー株式会社 | 測定装置、プログラム及び測定方法 |
JP2017205053A (ja) * | 2016-05-18 | 2017-11-24 | 富士フイルム株式会社 | 撮像装置および方法 |
JP2018014991A (ja) * | 2016-07-13 | 2018-02-01 | ソニー株式会社 | 情報処理装置、情報処理方法及び情報処理システム |
WO2018100917A1 (ja) * | 2016-11-30 | 2018-06-07 | ソニー株式会社 | 情報処理装置、観察システム、情報処理方法及びプログラム |
WO2018105298A1 (ja) * | 2016-12-09 | 2018-06-14 | ソニー株式会社 | 情報処理装置、情報処理方法及び情報処理システム |
Family Cites Families (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2005027015A2 (en) * | 2003-09-10 | 2005-03-24 | Bioimagene, Inc. | Method and system for quantitatively analyzing biological samples |
US20060127881A1 (en) * | 2004-10-25 | 2006-06-15 | Brigham And Women's Hospital | Automated segmentation, classification, and tracking of cell nuclei in time-lapse microscopy |
JP4968595B2 (ja) * | 2008-07-23 | 2012-07-04 | 株式会社ニコン | 細胞の状態判別手法及び細胞観察の画像処理装置 |
JP5376024B1 (ja) * | 2012-08-23 | 2013-12-25 | 富士ゼロックス株式会社 | 画像処理装置、プログラム及び画像処理システム |
EP2962101A4 (en) * | 2013-02-28 | 2016-10-19 | Progyny Inc | APPARATUS, METHOD AND SYSTEM FOR CLASSIFYING HUMAN EMBRYONIC CELLS FROM IMAGES |
WO2018100913A1 (ja) * | 2016-11-29 | 2018-06-07 | ソニー株式会社 | 情報処理装置、情報処理方法、プログラム及び観察システム |
CN111787877A (zh) * | 2017-12-15 | 2020-10-16 | 维特罗莱夫公司 | 用于估计胚胎活力的系统和方法 |
GB201810634D0 (en) * | 2018-06-28 | 2018-08-15 | Vitrolife As | Methods and apparatus for assessing embryo development |
-
2018
- 2018-07-12 JP JP2020529927A patent/JPWO2020012616A1/ja not_active Ceased
- 2018-07-12 US US17/258,099 patent/US20210287366A1/en not_active Abandoned
- 2018-07-12 WO PCT/JP2018/026390 patent/WO2020012616A1/ja unknown
- 2018-07-12 EP EP18926371.8A patent/EP3812448A4/en not_active Withdrawn
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2014089193A (ja) * | 2007-04-04 | 2014-05-15 | Olympus Corp | 発光タンパクによる長期モニタリング方法および解析方法 |
JP2012095627A (ja) * | 2010-11-05 | 2012-05-24 | Nikon Corp | 細胞培養装置およびプログラム |
JP2017205053A (ja) * | 2016-05-18 | 2017-11-24 | 富士フイルム株式会社 | 撮像装置および方法 |
JP2018014991A (ja) * | 2016-07-13 | 2018-02-01 | ソニー株式会社 | 情報処理装置、情報処理方法及び情報処理システム |
WO2018100917A1 (ja) * | 2016-11-30 | 2018-06-07 | ソニー株式会社 | 情報処理装置、観察システム、情報処理方法及びプログラム |
JP2017062497A (ja) * | 2016-12-05 | 2017-03-30 | ソニー株式会社 | 測定装置、プログラム及び測定方法 |
WO2018105298A1 (ja) * | 2016-12-09 | 2018-06-14 | ソニー株式会社 | 情報処理装置、情報処理方法及び情報処理システム |
Also Published As
Publication number | Publication date |
---|---|
EP3812448A1 (en) | 2021-04-28 |
EP3812448A4 (en) | 2021-06-16 |
US20210287366A1 (en) | 2021-09-16 |
WO2020012616A1 (ja) | 2020-01-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
AU2018384082B2 (en) | Systems and methods for estimating embryo viability | |
JPWO2020012616A1 (ja) | 情報処理装置、情報処理方法、プログラム、及び情報処理システム | |
US20200364869A1 (en) | Information processing apparatus, information processing method, and program | |
JP7001060B2 (ja) | 情報処理装置、情報処理方法及び情報処理システム | |
WO2018101004A1 (ja) | 細胞画像評価装置および細胞画像評価制御プログラム | |
US20230028645A1 (en) | Methods and systems for embryo classification using morpho-kinetic signatures | |
US11954926B2 (en) | Image feature detection | |
EP3485458A1 (en) | Information processing device, information processing method, and information processing system | |
US11302437B2 (en) | Information processing device, information processing method and information processing system | |
US20180268557A1 (en) | Information processing device, information processing method, and information processing system | |
CN106104571A (zh) | 用于分析胚胎发育的方法和设备 | |
WO2023154851A1 (en) | Integrated framework for human embryo ploidy prediction using artificial intelligence | |
WO2023024524A1 (zh) | 基于胎儿超声影像特征组学的染色体异常预测模型的构建方法及诊断设备 | |
EP4352691A1 (en) | Methods and systems for embryo classification | |
JP7420069B2 (ja) | 制御装置、制御方法、およびプログラム | |
WO2021177142A1 (ja) | 生殖補助医療を支援するための、システム、情報処理装置、サーバ、端末、プログラム、又は方法 | |
CN113989538A (zh) | 基于深度图像的鸡群均匀度估测方法、装置、系统及介质 | |
RU2800079C2 (ru) | Системы и способы оценки жизнеспособности эмбрионов | |
AU2019101174A4 (en) | Systems and methods for estimating embryo viability | |
US20210200986A1 (en) | Control device, control method, and program | |
WO2018012353A1 (en) | Information processing device, information processing method, and information processing system | |
Einy et al. | Local Binary Convolutional Neural Networks′ Long Short‐Term Memory Model for Human Embryos′ Anomaly Detection | |
JP2024005549A (ja) | タイムラプス画像判別器とタイムラプス画像判別器の学習方法と胚判別装置と胚判別方法 | |
Sharma et al. | Exploring Embryo Development at the Morula Stage-an AI-based Approach to Determine Whether to Use or Discard an Embryo | |
WO2024003716A2 (en) | Methods and systems for classification of eggs and embryos using morphological and morpho-kinetic signatures |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210630 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220524 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220629 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20221011 |
|
A045 | Written measure of dismissal of application [lapsed due to lack of payment] |
Free format text: JAPANESE INTERMEDIATE CODE: A045 Effective date: 20230228 |