JP6468576B1 - Image diagnostic system for fertilized egg, image diagnostic program for fertilized egg, and method for creating classifier for image diagnosis of fertilized egg. - Google Patents
Image diagnostic system for fertilized egg, image diagnostic program for fertilized egg, and method for creating classifier for image diagnosis of fertilized egg. Download PDFInfo
- Publication number
- JP6468576B1 JP6468576B1 JP2018198149A JP2018198149A JP6468576B1 JP 6468576 B1 JP6468576 B1 JP 6468576B1 JP 2018198149 A JP2018198149 A JP 2018198149A JP 2018198149 A JP2018198149 A JP 2018198149A JP 6468576 B1 JP6468576 B1 JP 6468576B1
- Authority
- JP
- Japan
- Prior art keywords
- image data
- data
- classifier
- optimum
- correct diagnosis
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000003745 diagnosis Methods 0.000 title claims abstract description 136
- 238000000034 method Methods 0.000 title claims description 62
- 238000004458 analytical method Methods 0.000 claims abstract description 65
- 230000035935 pregnancy Effects 0.000 claims abstract description 47
- 230000002159 abnormal effect Effects 0.000 claims abstract description 39
- 238000012360 testing method Methods 0.000 claims abstract description 39
- 235000013601 eggs Nutrition 0.000 claims description 50
- 238000004393 prognosis Methods 0.000 claims description 24
- 238000002059 diagnostic imaging Methods 0.000 claims description 16
- 238000010801 machine learning Methods 0.000 claims description 14
- 238000004364 calculation method Methods 0.000 claims description 12
- 238000004519 manufacturing process Methods 0.000 claims 1
- 238000012545 processing Methods 0.000 description 14
- 238000012795 verification Methods 0.000 description 11
- 238000010586 diagram Methods 0.000 description 8
- 238000011282 treatment Methods 0.000 description 8
- 230000010365 information processing Effects 0.000 description 6
- 230000004720 fertilization Effects 0.000 description 5
- 238000009795 derivation Methods 0.000 description 4
- 230000000052 comparative effect Effects 0.000 description 3
- 238000004590 computer program Methods 0.000 description 3
- 230000000694 effects Effects 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 238000000338 in vitro Methods 0.000 description 3
- 238000005259 measurement Methods 0.000 description 3
- 210000002459 blastocyst Anatomy 0.000 description 2
- 238000010835 comparative analysis Methods 0.000 description 2
- 208000000509 infertility Diseases 0.000 description 2
- 230000036512 infertility Effects 0.000 description 2
- 231100000535 infertility Toxicity 0.000 description 2
- 238000003909 pattern recognition Methods 0.000 description 2
- 238000013441 quality evaluation Methods 0.000 description 2
- 238000010257 thawing Methods 0.000 description 2
- WFKWXMTUELFFGS-UHFFFAOYSA-N tungsten Chemical compound [W] WFKWXMTUELFFGS-UHFFFAOYSA-N 0.000 description 2
- 210000004291 uterus Anatomy 0.000 description 2
- 101100279436 Caenorhabditis elegans egg-2 gene Proteins 0.000 description 1
- 206010008805 Chromosomal abnormalities Diseases 0.000 description 1
- 208000031404 Chromosome Aberrations Diseases 0.000 description 1
- 230000005856 abnormality Effects 0.000 description 1
- 238000013473 artificial intelligence Methods 0.000 description 1
- 238000013528 artificial neural network Methods 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000015556 catabolic process Effects 0.000 description 1
- 238000013135 deep learning Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 208000021267 infertility disease Diseases 0.000 description 1
- 238000007477 logistic regression Methods 0.000 description 1
- 210000000056 organ Anatomy 0.000 description 1
- 210000001672 ovary Anatomy 0.000 description 1
- 238000007637 random forest analysis Methods 0.000 description 1
- 230000008685 targeting Effects 0.000 description 1
Images
Landscapes
- Apparatus Associated With Microorganisms And Enzymes (AREA)
- Measuring Or Testing Involving Enzymes Or Micro-Organisms (AREA)
- Image Analysis (AREA)
Abstract
【課題】主観的判断をすることなく、受精卵の画像データだけで正常児獲得の可否を予測可能な診断結果が得られる受精卵の画像診断システムを提供する。
【解決手段】
受精卵の画像データは、生児獲得に至ったことが判明している正常画像データと、生児獲得に至らなかったことが判明している異常画像データとで構成される画像データ、又は妊娠成立に至ったことが判明している正常画像データと、妊娠成立に至らなかったことが判明している異常画像データとで構成される画像データであり、かつ患者の年齢情報を含んでおり、解析手段6は、画像データを年齢別の複数のグループに区分し、複数のグループから一つを選んだ解析対象グループについて、複数の識別器を作成して、テストデータの正診率を演算し、正診率に基づいて複数の識別器から年齢別の最適識別器を決定する。
【選択図】図1Provided is an image diagnostic system for a fertilized egg that can obtain a diagnosis result that can predict whether or not a normal child can be acquired by using only image data of a fertilized egg without subjective judgment.
[Solution]
The image data of a fertilized egg is image data composed of normal image data that has been found to have resulted in the acquisition of newborns and abnormal image data that has been found to have not resulted in the acquisition of newborns, or pregnancy. It is image data composed of normal image data that has been found to have been established, and abnormal image data that has been found to have not been established, and includes patient age information, The analysis means 6 divides the image data into a plurality of groups according to age, creates a plurality of discriminators for the analysis target group selected from the plurality of groups, and calculates the correct diagnosis rate of the test data. The optimum classifier for each age is determined from the plurality of classifiers based on the correct diagnosis rate.
[Selection] Figure 1
Description
本発明は、受精卵の画像診断システム、受精卵の画像診断プログラム及び受精卵の画像診断用識別器の作成方法に関する。 The present invention relates to an image diagnosis system for a fertilized egg, an image diagnosis program for a fertilized egg, and a method for creating a classifier for image diagnosis of a fertilized egg.
我が国は少子化の危機に瀕している一方で、不妊に悩む患者は多い。不妊患者の妊娠成立を図る治療として、体外受精又は顕微授精が挙げられる。体外受精は、卵巣から卵細胞を取り出し(採卵)、体外で精子を与えて受精卵を作る治療であり、顕微授精は、体外で顕微鏡を見ながら精子を直接卵細胞に注入して受精させ受精卵を作る治療である。いずれの治療においても、受精卵を培養して成長させ、一旦凍結して保存し、患者の条件が良い時に解凍して、子宮に戻して妊娠成立を図るというものである。 While Japan is in danger of declining birthrate, many patients suffer from infertility. In vitro fertilization or microinsemination can be used as a treatment for establishing pregnancy in infertile patients. In vitro fertilization is a treatment that removes egg cells from the ovaries (egg collection) and gives sperm outside the body to make a fertilized egg. It is a treatment to make. In any treatment, fertilized eggs are cultured and grown, frozen and stored once, thawed when the patient's condition is good, and returned to the uterus to establish pregnancy.
子宮に戻すべき受精卵の選択は、解凍前と解凍後に顕微鏡で見て医師、検査技師又は培養士が顕微鏡観察により主観的に判断しており、正常と判断した受精卵であっても、現在、妊娠に至るのは高々30%に留まっている。すなわち、主観的な判断は精度が低く、判断手法を工夫したとしても精度を上げるには一定の限界があった。 The selection of the fertilized egg to be returned to the uterus is made by a doctor, laboratory technician, or cultivator subjectively by microscopic observation before thawing and after thawing. Only 30% of people get pregnant. That is, the accuracy of subjective judgment is low, and even if the judgment method is devised, there is a certain limit to raising the precision.
他方、1回当たりの治療費は高額であり、かつ自費負担となる。このため、受精卵選択の判断の精度が低いと、治療回数も増え時間が浪費され、心理的ストレスに加え、経済的ストレスも多大となる。このような背景の下、不妊の治療においては、できるだけ早く、かつ経済的負担が少なく妊娠に至ることが患者にも社会的にも求められている。 On the other hand, the cost of treatment per treatment is high and is a self-paying burden. For this reason, if the accuracy of the determination of fertilized egg selection is low, the number of treatments increases and time is wasted, and in addition to psychological stress, economic stress is also great. Under such circumstances, infertility treatment requires both patients and society to reach pregnancy as soon as possible and with less economic burden.
この点、医療の分野においては、コンピュータを用いて診断画像の分析、評価等を行う各種技術が提案されている。例えば、特許文献1には、診断画像の読影に際して、画像の特徴量を用いた類似症例の検索をコンピュータで実現させ、診断精度を向上させる診断支援技術が提案されている。特許文献2には、撮像された画像のみを用いて、受精卵内の細胞を識別することなく受精卵の品質評価に有益な情報の提示をコンピュータで実現させる受精卵品質評技術が提案されている。
In this regard, in the medical field, various techniques for analyzing and evaluating diagnostic images using a computer have been proposed. For example, Patent Literature 1 proposes a diagnosis support technology that improves the accuracy of diagnosis by causing a computer to search for similar cases using image feature amounts when interpreting a diagnostic image.
しかしながら、特許文献1に記載の技術は、受精卵の画像を対象とするものではなく、対象画像が臓器を対象としたCT画像であり、類似症例の検索を可能にして診断精度を向上させるというものであった。すなわち、特許文献1の記載からは、受精卵の画像に対して妊娠成立の可否を判断する手法を導き出すのは困難であった。他方、特許文献2に記載の技術は、受精卵の画像を対象とするものであるが、受精卵を品質評価する技術に留まり、妊娠成立の可否を直接的に判断する技術ではなかった。
However, the technique described in
本発明は、前記のような従来の問題を解決するものであり、主観的判断をすることなく、受精卵の画像データだけで正常児獲得の可否又は妊娠成立を予測可能な診断結果が得られる受精卵の画像診断システム、受精卵の画像診断プログラム及び受精卵の画像診断用識別器の作成方法を提供することを目的とする。 The present invention solves the conventional problems as described above, and can obtain a diagnosis result that can predict whether or not a normal child can be acquired or pregnancy can be established by using only image data of a fertilized egg without subjective judgment. An object of the present invention is to provide a fertilized egg image diagnostic system, a fertilized egg image diagnostic program, and a method for creating a fertilized egg image diagnostic discriminator.
前記目的を達成するために、本発明の画像診断システムは、機械学習の手法を用いた受精卵の画像診断システムであって、妊娠予後が判明している受精卵の画像データを格納する記憶手段と、受精卵の画像データを記憶手段に取り込むための受信手段と、前記画像データを解析する解析手段と、前記解析手段による解析結果を出力する出力手段とを備えており、前記画像データは、生児獲得に至ったことが判明している正常画像データと、生児獲得に至らなかったことが判明している異常画像データとで構成される画像データ、又は妊娠成立に至ったことが判明している正常画像データと、妊娠成立に至らなかったことが判明している異常画像データとで構成される画像データであり、かつ患者の年齢情報を含んでおり、前記解析手段は、前記画像データを、前記患者の年齢情報に基づいて、年齢別の複数のグループに区分し、前記複数のグループから一つを選んだ解析対象グループについて、テストデータと学習用データとに分類し、前記学習用データから複数の識別器を作成し、前記各識別器で前記テストデータを診断して、前記テストデータの正診率を演算し、前記正診率に基づいて前記複数の前記識別器から最適識別器を決定し、前記分類から前記最適識別器の決定までの処理を、他の前記グループを解析対象グループに選んで実行し、これを繰り返して年齢別の前記最適識別器を決定することを特徴とする。 In order to achieve the above object, an image diagnostic system of the present invention is a fertilized egg image diagnostic system using a machine learning technique, and stores image data of a fertilized egg whose pregnancy prognosis is known. And receiving means for capturing image data of a fertilized egg into a storage means, analysis means for analyzing the image data, and output means for outputting an analysis result by the analysis means, Image data composed of normal image data that has been found to have resulted in the acquisition of births and abnormal image data that has been found to have not resulted in the acquisition of births, or found that pregnancy has been established Image data composed of normal image data and abnormal image data that has been found not to have become pregnant, and includes age information of the patient. The image data is divided into a plurality of groups according to age based on the age information of the patient, the analysis target group selected one from the plurality of groups is classified into test data and learning data, A plurality of discriminators are created from the learning data, the test data is diagnosed by each discriminator, a correct diagnosis rate of the test data is calculated, and the plurality of discriminators are calculated based on the correct diagnosis rate. Determining an optimum classifier, performing the processing from the classification to the determination of the optimum classifier by selecting another group as an analysis target group, and repeating this to determine the optimum classifier by age It is characterized by.
本発明の画像診断プロブラムは、コンピュータに、機械学習の手法を用いて受精卵の画像診断を実行させるための受精卵の画像診断プログラムであって、受精卵の画像データを記憶手段に取り込む取り込みステップと、前記画像データを解析する解析ステップと、前記解析手段による解析結果を出力する出力ステップとを前記コンピュータに実行させ、前記画像データは、生児獲得に至ったことが判明している正常画像データと、生児獲得に至らなかったことが判明している異常画像データとで構成される画像データ、又は妊娠成立に至ったことが判明している正常画像データと、妊娠成立に至らなかったことが判明している異常画像データとで構成される画像データであり、かつ患者の年齢情報を含んでおり、前記解析ステップにおいて、前記画像データを、前記患者の年齢情報に基づいて、年齢別の複数のグループに区分し、前記複数のグループから一つを選んだ解析対象グループについて、テストデータと学習用データとに分類し、前記学習用データから複数の識別器を作成し、前記各識別器で前記テストデータを診断して、前記テストデータの正診率を演算し、前記正診率に基づいて前記複数の前記識別器から最適識別器を決定し、前記分類から前記最適識別器の決定までの処理を、他の前記グループを解析対象グループに選んで実行し、これを繰り返して年齢別の前記最適識別器を決定することを特徴とする。 The diagnostic imaging program of the present invention is a diagnostic image program for a fertilized egg for causing a computer to perform image diagnosis of a fertilized egg using a machine learning technique, and fetching image data of the fertilized egg into a storage means And an analysis step for analyzing the image data and an output step for outputting an analysis result by the analysis means, and the image data is a normal image that has been found to have acquired a baby. Image data composed of data and abnormal image data that has been found not to have acquired a baby, or normal image data that has been found to have achieved pregnancy, and pregnancy has not been achieved It is image data composed of abnormal image data that has been found, and includes age information of the patient, in the analysis step, The image data is divided into a plurality of groups according to age based on the age information of the patient, and the analysis target group selected one from the plurality of groups is classified into test data and learning data, A plurality of discriminators are created from the learning data, the test data is diagnosed by each discriminator, a correct diagnosis rate of the test data is calculated, and the plurality of discriminators are calculated based on the correct diagnosis rate The optimum classifier is determined from the above, and the processing from the classification to the determination of the optimum classifier is performed by selecting another group as the analysis target group, and this is repeated to determine the optimum classifier by age. It is characterized by that.
本発明の画像診断用識別器の作成方法は、機械学習の手法を用いた受精卵の画像診断用識別器の作成方法であって、受精卵の画像データを記憶手段に取り込む取り込みステップと、前記画像データを解析する解析ステップと、前記解析手段による解析結果を出力する出力ステップとを備え、前記画像データは、生児獲得に至ったことが判明している正常画像データと、生児獲得に至らなかったことが判明している異常画像データとで構成される画像データ、又は妊娠成立に至ったことが判明している正常画像データと、妊娠成立に至らなかったことが判明している異常画像データとで構成される画像データであり、かつ患者の年齢情報を含んでおり、前記解析ステップにおいて、前記画像データを、前記患者の年齢情報に基づいて、年齢別の複数のグループに区分し、前記複数のグループから一つを選んだ解析対象グループについて、テストデータと学習用データとに分類し、前記学習用データから複数の識別器を作成し、前記各識別器で前記テストデータを診断して、前記テストデータの正診率を演算し、前記正診率に基づいて前記複数の前記識別器から最適識別器を決定し、前記分類から前記最適識別器の決定までの処理を、他の前記グループを解析対象グループに選んで実行し、これを繰り返して年齢別の前記最適識別器を決定することを特徴とする。 The method for creating a classifier for image diagnosis of the present invention is a method for creating a classifier for image diagnosis of a fertilized egg using a machine learning technique, and includes a step of taking in image data of a fertilized egg into a storage means, An analysis step for analyzing image data; and an output step for outputting an analysis result by the analysis means, wherein the image data includes normal image data that has been found to have acquired a child, and acquisition of a child. Image data composed of abnormal image data that has been found not to have reached, or normal image data that has been found to have been established, and abnormalities that have been found not to have been established Image data composed of image data and includes patient age information, and in the analyzing step, the image data is classified according to age based on the age information of the patient. The analysis target group selected from the plurality of groups is classified into test data and learning data, and a plurality of classifiers are created from the learning data. Diagnosing the test data, calculating a correct diagnosis rate of the test data, determining an optimal classifier from the plurality of the classifiers based on the correct diagnosis rate, and determining the optimal classifier from the classification The above processes are executed by selecting another group as an analysis target group, and the process is repeated to determine the optimum classifier for each age.
本発明によれば、受精卵の画像データに対し、撮影や測定等の機材を用いることなく、コンピュータのプログラムを実行させるだけで、主観的判断をすることなく診断が可能になる。そして、データを診断する識別器は、妊娠予後が判明している妊娠予後判明画像データに基づいて機械学習の手法により統計的に作成することに加え、年齢別に作成するので、診断結果は正常児獲得又は妊娠成立の可否が高い精度で予測可能なものとなる。 According to the present invention, it is possible to diagnose a fertilized egg image without subjective judgment by simply executing a computer program without using equipment such as photographing and measurement. The classifier that diagnoses the data is statistically created by machine learning based on the pregnancy prognosis image data whose pregnancy prognosis is known, and is also created by age, so the diagnosis results are normal. Whether or not acquisition or pregnancy can be established can be predicted with high accuracy.
本発明の画像診断システムにおいては、前記解析手段は、前記最適識別器を決定する前に、前記識別器の作成及び前記正診率の演算を、選択する前記学習用データの個数を変えて繰り返し、個数の異なる前記学習用データについて演算された前記正診率に基づいて、前記学習用データの最適個数を決定し、前記学習用データの数を前記最適個数として、前記識別器の作成及び前記正診率の演算を、選択する前記学習用データを変えて再度繰り返し、前記再度の繰り返しにより得られた複数の前記正診率に基づいて、前記再度の繰り返しにより得られた複数の前記識別器から最適識別器を決定することが好ましい。 In the diagnostic imaging system of the present invention, the analysis means repeatedly creates the discriminator and calculates the correct diagnosis rate by changing the number of learning data to be selected before determining the optimum discriminator. Determining the optimum number of the learning data based on the correct diagnosis rate calculated for the learning data having different numbers, and setting the number of the learning data as the optimum number, The calculation of the correct diagnosis rate is repeated again while changing the learning data to be selected, and the plurality of discriminators obtained by the second repetition based on the plurality of correct diagnosis rates obtained by the second repeat. It is preferable to determine the optimum classifier from
本発明の画像診断プロブラム及び画像診断用識別器の作成方法においては、前記解析ステップにおいて、前記解析手段は、前記最適識別器を決定する前に、前記識別器の作成及び前記正診率の演算を、選択する前記学習用データの個数を変えて繰り返し、個数の異なる前記学習用データについて演算された前記正診率に基づいて、前記学習用データの最適個数を決定し、前記学習用データの数を前記最適個数として、前記識別器の作成及び前記正診率の演算を、選択する前記学習用データを変えて再度繰り返し、前記再度の繰り返しにより得られた複数の前記正診率に基づいて、前記再度の繰り返しにより得られた複数の前記識別器から最適識別器を決定することが好ましい。 In the image diagnostic program and the method for creating an image diagnostic discriminator according to the present invention, in the analyzing step, the analyzing means creates the discriminator and calculates the correct diagnosis rate before determining the optimum discriminator. By changing the number of the learning data to be selected, and determining the optimum number of the learning data based on the correct diagnosis rate calculated for the learning data having different numbers. Using the number as the optimum number, the creation of the discriminator and the calculation of the correct diagnosis rate are repeated again by changing the learning data to be selected, and based on the correct check rates obtained by the repeat again It is preferable that an optimum classifier is determined from a plurality of the classifiers obtained by the second iteration.
前記本発明の好ましい構成によれば、正診率に基づいて、学習用データの最適個数を決定するので、機械学習の過学習による診断精度の低下を防止することができる。 According to the preferred configuration of the present invention, since the optimum number of learning data is determined based on the correct diagnosis rate, it is possible to prevent a decrease in diagnostic accuracy due to overlearning of machine learning.
本発明の効果は前記のとおりであり、本発明によれば、受精卵の画像データに対し、撮影や測定等の機材を用いることなく、コンピュータのプログラムを実行させるだけで、主観的判断をすることなく診断が可能になる。そして、データを診断する識別器は、妊娠予後が判明している妊娠予後判明画像データに基づいて機械学習の手法により統計的に作成することに加え、年齢別に作成するので、診断結果は正常児獲得又は妊娠成立の可否が高い精度で予測可能なものとなる。 The effects of the present invention are as described above, and according to the present invention, subjective judgment is made by simply executing a computer program on image data of a fertilized egg without using equipment such as photographing and measurement. Diagnosis is possible without any problems. The classifier that diagnoses the data is statistically created by machine learning based on the pregnancy prognosis image data whose pregnancy prognosis is known, and is also created by age, so the diagnosis results are normal. Whether or not acquisition or pregnancy can be established can be predicted with high accuracy.
以下、本発明の一実施形態について図面を参照しながら説明する。図1は、本発明の一実施形態に係る受精卵の画像診断システム(以下、単に「画像診断システム」という。)の構成図を示している。画像診断システム1は、受精卵の画像データに基づいて、妊娠成立の可否に関する判断情報を出力するシステムである。画像診断システム1は、インターネット8を介して、複数の医療機関1、2等に対して、受精卵の画像データ等の各種データの受け渡しを行う。解析手段6(CPU:中央演算処理装置)により各種演算処理が行われる。キーボード等の入力手段4により各種データの入力、設定を行う。ディスプレイ、プリンタ等の出力手段5により、出力結果が出力される。受信手段2で受信した医療機関からの画像データは、医療機関毎に記憶手段7に格納される。解析手段6による解析結果は、送信手段3により複数の医療機関1、2等に向けて送信される。
Hereinafter, an embodiment of the present invention will be described with reference to the drawings. FIG. 1 shows a configuration diagram of a fertilized egg image diagnostic system (hereinafter simply referred to as “image diagnostic system”) according to an embodiment of the present invention. The
画像診断システム1が取り扱う画像データは、体外受精又は顕微授精を行ってその妊娠予後が判明している画像データ(以下、「妊娠予後判明画像データ」という。)と、診断対象の画像データ(以下、「診断対象画像データ」である。診断対象画像データは、妊娠成立の可否が不明なデータである。図1において、受信手段2は、診断対象画像データ11を複数の医療機関1、2等からインターネット8を介して個別に受信する。これとは別に、受信手段2は妊娠予後判明画像データ10を受信する。両画像データは、例えばjpegフォーマットであり、いずれも記憶手段7に格納される。
The image data handled by the image
前記の画像データはいずれも解析する前に予め画像処理を行なう。画像処理は、例えば背景のアーチファクトや格納容器の影などの消去、数値化された画像の標準化処理である。よって、解析手段6で解析される画像データは、予め画像処理がされたものである。画像処理は、解析前に実施されていればよく、同一プログラムで実施してもよく、画像処理用の別のプログラムで実施してもよい。通常はいずれの場合も、画像処理後の画像データを解析手段6が解析することになるが、同一プログラムで画像処理を実施する場合は、解析手段6に解析前の画像データに対し画像処理を行う機能を持たせてもよい。
All the image data are subjected to image processing before being analyzed. The image processing is, for example, erasing of background artifacts and shadows of the storage container, and standardization processing of a digitized image. Therefore, the image data analyzed by the analysis means 6 is subjected to image processing in advance. The image processing only needs to be performed before analysis, may be performed by the same program, or may be performed by another program for image processing. Normally, in any case, the
解析手段6は診断対象画像データについて、妊娠成立の可否に関する判断情報を導き出す。このような判断情報を導き出す前提として、画像診断システム1には、妊娠予後判明画像データ10に基づいて、後述する画像診断用の最適識別器が作成されている。すなわち、画像診断システム1による情報処理は、妊娠予後判明画像データ10に基づいて最適識別器を作成する情報処理と、最適識別器を用いて診断対象画像データ診断する情報処理とに大別される。本実施形態では、この2つの情報処理を1つのプログラムで実行する例で説明するが、各情報処理を別のプログラムで実行してもよい。
The analysis means 6 derives judgment information regarding whether or not pregnancy is possible for the diagnostic object image data. As a premise for deriving such judgment information, an optimum classifier for image diagnosis, which will be described later, is created in the
画像診断システム1による情報処理の手順については、最初に図2を参照しながらその概要を説明する。図2は、本発明の一実施形態に係る画像診断システム1のフローチャートを示している。後に説明する図7は学習用データの最適個数の決定のプロセスを示すフローチャーを示しており、図9は最適識別器の決定のためのプロセスを示すフローチャートを示している。画像診断システム1は、コンピュータに画像診断プログラムを実行させて使用される。本実施形態では、本発明を画像診断システム1として説明するが、図2、図7及び図9に示した画像診断システム1の情報処理の流れは、画像診断プログラムがコンピュータに実行させるステップを示したものでもある。したがって、本実施形態で説明する画像診断システム1による情報処理の内容は、画像診断プログラムがコンピュータに実行させる内容でもあり、画像診断用識別器の作成方法のプロセスでもある。
An outline of the information processing procedure by the
図2において、初期設定(ステップ100)の後、画像データを読み込む(ステップ101)。前記のとおり、画像診断システム1が取扱う画像データは、妊娠予後が判明している妊娠予後判明画像データ10(図1参照)と、診断対象の診断対象画像データ11(図1参照)の2種類である。両画像データを連続して読み込んでもよいが、少なくとも妊娠予後判明画像データ10を読み込んでおけば、最適識別器の作成が可能になり(ステップ103)、この後に診断対象画像データ11を読み込んでもよい。
In FIG. 2, after initial setting (step 100), image data is read (step 101). As described above, the image data handled by the
ステップ102及びステップ103は、診断対象画像データ11を診断する前の前段階のステップであり、本実施形態では、診断の精度を高めるために、妊娠予後判明画像データ10(図1参照)を年齢区分し(ステップ102)、年齢区分毎に最適識別器を決定するようにしている(ステップ103)。このため、診断対象画像データ11は患者の年齢情報を含んでいる。図3に年齢区分の一例を示している。図3の例では、図3に示した年齢区分で診断対象画像データ11を5つのグループに分類する。
年齢区分毎に最適識別器が決定されると、診断対象画像データ11(図1参照)の年齢に応じた最適識別器で同画像データを診断し(ステップ104)、解析結果を出力する(ステップ105)。例えば、図3のグループ1(42歳以上)に属する診断対象画像データ11に対しては、グループ1に対応した最適識別器で、同画像データを診断する。
When the optimum classifier is determined for each age category, the image data is diagnosed by the optimum classifier corresponding to the age of the diagnosis target image data 11 (see FIG. 1) (step 104), and the analysis result is output (step) 105). For example, for image data 11 to be diagnosed belonging to group 1 (42 years or older) in FIG. 3, the image data is diagnosed by an optimum classifier corresponding to
最適識別器の決定のための解析処理及び最適識別器による画像データの診断のための解析処理はいずれも、人工知能による教師付機械学習のパターン認識を活用したものである。解析処理のプログラム言語としては例えばWolfram言語が挙げられる。機械学習のパターン認識についてはlogistic regression、naive Bayes、random forest、nearest neighbors、neural network、deep learningという認識方法が挙げられる。Wolfram言語にはこれらの認識方法を扱う関数がすでに用意されており、各認識方法から最適なものを選択すればよい。 Both the analysis process for determining the optimum classifier and the analysis process for diagnosing image data by the optimum classifier utilize pattern recognition of supervised machine learning by artificial intelligence. An example of a program language for analysis processing is the Wolfram Language. As for machine learning pattern recognition, there are recognition methods such as logistic regression, naive Bayes, random forest, nearest neighbors, neural network, and deep learning. The Wolfram Language already has functions for handling these recognition methods, and you can select the best one from each recognition method.
次に画像診断システム1が取り扱う画像について説明する。図1において、妊娠予後判明画像データ10は、正常画像データと異常画像データとに分類される。正常画像データは、生児獲得に至ったことが判明している画像データであり、異常画像データは、生児獲得に至らなかったことが判明している画像データである。生児獲得に至らなかった理由としては、臨床的には染色体異常、子宮因子などが考えられるが、異常画像データの分類に際し、生児獲得に至らなかった理由は問わない。
Next, an image handled by the
正常画像データ及び異常画像データのいずれについても、解析手段6で解析する際には形式を統一する。例えば、画像解像度を例えば72pixel/inchで113×113pixelsの正方形になるように変換する。図4の符合12は正常画像データの一例の模式図を示しており、図5の符合13は異常画像データの一例の模式図を示している。各画像データは正方形に変換されているため、回転及び反転により、同じ正方形の画像データを増幅することができる。
When both the normal image data and the abnormal image data are analyzed by the analysis means 6, the formats are unified. For example, the image resolution is converted to, for example, a square of 113 × 113 pixels at 72 pixels / inch.
図6は図4に示した正常画像データに加え、これを増幅した画像データを示している。1個の画像データは、図6に示したように、90度回転、180度回転、270度回転により3個の画像が追加され、反転、反転90度回転、反転180度回転、反転270度回転により4枚の画像が追加され、元の画像データを含めると8枚の画像データが得られる。このことは、図5に示した異常画像データ13についても同様である。このように、画像データを増幅することにより、1個の画像データを8倍の枚数の画像データに増幅することができるので、画像データの特徴を多面的に表現でき、後に説明する識別器の精度を高めることができる。
FIG. 6 shows image data obtained by amplifying the normal image data shown in FIG. As shown in FIG. 6, three images are added to one image data by 90 ° rotation, 180 ° rotation, and 270 ° rotation, and are inverted, inverted 90 ° rotated, inverted 180 ° rotated, inverted 270 °. Four images are added by rotation, and when the original image data is included, eight image data are obtained. The same applies to the
画像データの形式の統一は、前記のものに限られるのではなく、適宜変更してもよい。例えば、各画像データを円形に変換し、回転及び反転により、画像データを増幅してもよい。円形画像データの場合、画像データを小さな角度で小刻みに回転させることにより、増幅枚数を増やすことができ、画像データの特徴をより多面的に表現でき、識別器の精度向上に有利になる。 The unification of the format of the image data is not limited to the above, but may be changed as appropriate. For example, each image data may be converted into a circle, and the image data may be amplified by rotation and inversion. In the case of circular image data, by rotating the image data in small increments at a small angle, the number of amplified images can be increased, and the characteristics of the image data can be expressed in many ways, which is advantageous for improving the accuracy of the discriminator.
画像診断システム1は、正常画像データ及び異常画像データを含む妊娠予後判明画像データから選んだ複数の学習用データを用いて識別器を作成する。本実施形態では、機械学習の過学習による診断精度の低下を防止するために、予め学習用データの最適個数を決定する。以下、図7を参照しながら、学習用データの最適個数の決定について説明する。
The
図7は、学習用データの最適個数の決定のプロセスを示すフローチャートである。便宜のため数値例を挙げながら説明するが、一例でありこれに限定されるものではない。本実施形態では、画像診断システム1は、図1において妊娠予後判明画像データ10として、媒精後5日目の受精卵(胚盤胞)の画像を5691枚受信した。これらの画像は図3の例のように、5グループに年齢区分した(図2のステップ103)。前記のとおり、画像データの増幅により、画像データは任意の枚数に増幅される。
FIG. 7 is a flowchart showing a process of determining the optimum number of learning data. For the sake of convenience, a numerical example will be described. However, this is an example and the present invention is not limited to this. In the present embodiment, the
以下、5グループのそれぞれについて、学習用データの最適枚数を決定する。図7は、グループ1(42歳以上)についての学習用データの最適枚数の決定のプロセスを示している。最初に、グループ1の年齢区分の画像データ669枚をテストデータ及び学習用データに分け、学習用データの中から一定枚数を検証用データとする(ステップ110)。この分け方は無作為であり、全画像データの20%をテストデータ、残り80%を学習用データとし、学習用データの20%を検証用データとした。この学習用データからn1枚を選択し、このn1枚を増幅して学習用データn枚を作成し(ステップ111)、検証用データを含むn枚の学習用データを用いて識別器を作成する(ステップ112)。このステップでは、検証用データで調整しながら識別器を学習させて、n枚の学習用データから最良の識別器を作成するようにしている。n枚の学習用データの正常画像データと異常画像データの枚数の比率は限定せず様々な値をとる。
Hereinafter, the optimum number of learning data is determined for each of the five groups. FIG. 7 shows a process of determining the optimum number of learning data for group 1 (42 years old or older). First, 669 pieces of image data of the age group of
識別器とは入力されたデータをいくつかのクラスに分類する識別関数プログラムのことであり、ここではクラスは正常と異常の2分類である。本実施形態では識別器は画像診断用識別器であり、識別器の作成に検証用データを含む学習用データを用い、識別器の診断能の評価にテストデータを用いる(ステップ113)。学習用データから画像特徴を抽出し、正常と異常とをできるだけ区別できるようなパラメータを設定することで識別器を求める。識別器に診断対象の画像データを入力すると、正常か異常かのいずれかの結果が出力される。識別器の作成に際しては、様々なパラメータ(L2正則化値、学習画像サイズ、解像度等)を調整する。これらの各識別器を用いて、テストデータを診断し、正診率が高くかつ標準偏差が小さい識別器を暫定的な識別器とする。 The discriminator is a discriminant function program that classifies input data into several classes. Here, classes are classified into two categories: normal and abnormal. In the present embodiment, the classifier is an image diagnostic classifier, learning data including verification data is used to create the classifier, and test data is used to evaluate the diagnostic performance of the classifier (step 113). An image feature is extracted from learning data, and a discriminator is obtained by setting parameters that can distinguish between normal and abnormal as much as possible. When image data to be diagnosed is input to the discriminator, either normal or abnormal results are output. In creating the discriminator, various parameters (L2 regularization value, learning image size, resolution, etc.) are adjusted. Test data is diagnosed using each of these classifiers, and a classifier having a high correct diagnosis rate and a small standard deviation is set as a temporary classifier.
診断は、正常又は異常の2種類であり、診断した画像データの枚数分の診断結果が得られる。検証用データは正常又は異常が判明している画像データであるため、診断結果の正否の判定が可能である。すなわち、診断結果が正常であり、当該テストデータも正常である場合と、診断結果が異常であり、当該テストデータも異常である場合は、正判定となる。他方、診断結果が正常であり、当該テストデータが異常である場合と、診断結果が異常であり、当該テストデータが正常である場合は否判定となる。本実施形態では、正診率を次の式(1)で定義する。
式(1)正診率=正判定の画像データ枚数/画像データ総枚数
There are two types of diagnosis, normal or abnormal, and diagnosis results for the number of image data diagnosed are obtained. Since the verification data is image data that is known to be normal or abnormal, it is possible to determine whether the diagnosis result is correct. That is, when the diagnosis result is normal and the test data is normal, and when the diagnosis result is abnormal and the test data is also abnormal, a positive determination is made. On the other hand, when the diagnosis result is normal and the test data is abnormal, and when the diagnosis result is abnormal and the test data is normal, the determination is negative. In this embodiment, the correct diagnosis rate is defined by the following equation (1).
Formula (1) Correct diagnosis rate = number of correct image data / total number of image data
暫定的な識別器を作成した後は、この識別器でテストデータを診断し(ステップ113)、正診率を演算する(ステップ114)。テストデータについても、正常又は異常が判明している画像データであるため、診断結果の正否の判定が可能である。正診率の演算は、式(1)のとおりである。正診率の演算の後は、学習用データm枚を増加させ(ステップ115)、改めて学習用データn枚を選択し(ステップ111)、ステップ112〜ステップ1114を繰り返す。すなわち、新たな暫定的な識別器を繰り返し作成し、新たな識別器毎にテストデータを診断して正診率を演算する。 After the provisional discriminator is created, the test data is diagnosed by this discriminator (step 113), and the correct diagnosis rate is calculated (step 114). Since the test data is also image data that is known to be normal or abnormal, it is possible to determine whether the diagnosis result is correct. The calculation of the correct diagnosis rate is as shown in Equation (1). After calculating the correct diagnosis rate, m pieces of learning data are increased (step 115), n pieces of learning data are selected again (step 111), and steps 112 to 1114 are repeated. That is, a new provisional classifier is repeatedly created, test data is diagnosed for each new classifier, and a correct diagnosis rate is calculated.
ステップ111〜ステップ115を繰り返すことにより、学習用データの枚数毎に暫定的な識別器が複数作成され、各識別器による正診率の演算結果も得られることになる。すなわち、学習用データの枚数毎に正診率が得られる。解析手段6は、正診率が高くかつ標準偏差が小さくなる観点から最適学習用データ枚数Nを決定する。
By repeating
図8はグループ1(42歳以上)の学習用データの枚数と正診率との関係を示す図である。学習用データが1750枚近傍の部分を例にとると、下端16は平均値から標準偏差値を引いた値、上端17は平均値に標準偏差値を加えた値を示しており、点15は平均値を示している。下端16と上端17との間が離れているほど、ばらつきが大きく標準偏差も大きくなる。図8の結果では、学習用データの枚数が12000枚近傍のときに、正診率は高い値を維持し、かつばらつきも小さくなっており(A部参照)、高い正診率を安定して確保できる。解析手段6は、正診率の平均値及び標準偏差を尺度として、最適学習用データ枚数Nとし12144枚を決定した(ステップ116)。
FIG. 8 is a diagram showing the relationship between the number of learning data for group 1 (42 years and older) and the correct diagnosis rate. Taking the portion near 1750 learning data as an example, the
グループ1〜5の学習用データの最適枚数Nを決定した後は、解析手段6は最適識別器の決定のための演算処理を行う。図9は、最適識別器の決定のためのプロセスを示すフローチャートである。最適識別器の決定はグループ1〜5の各グループについて行う。以下、グループ1の最適識別器の決定について説明する。最初に、グループ1の年齢区分の画像データ669枚をテストデータ及び学習用データに分け、学習用データの中から一定枚数を検証用データとする(ステップ120)。この分け方は無作為であり、全画像データの20%をテストデータ、残り80%を学習用データ(535枚)とし、学習用データの20%を検証用データとした。
After determining the optimum number N of learning data for
次に、535枚の学習用データを増幅してグループ1の最適学習用データ枚数である12144枚の画像データとする(ステップ121)。12144枚の学習用データの正常画像データと異常画像データの比率は限定せず様々な値をとる。この12144枚の学習用データ(検証用データ含む)から識別器を作成する(ステップ122)。このステップでは、図7のステップ112と同様に、検証用データで調整しながら識別器を学習させて、N枚の学習用データから最良の識別器を作成する。
Next, 535 pieces of learning data are amplified to obtain 12144 pieces of image data, which is the optimum number of pieces of learning data for group 1 (step 121). The ratio of normal image data and abnormal image data of 12144 pieces of learning data is not limited and takes various values. A discriminator is created from these 12144 pieces of learning data (including verification data) (step 122). In this step, like the
次に、識別器で診断を行うテストデータN2枚を抽出する(ステップ123)。テストデータは、グループ1の全データのうち学習用データに用いなかった残りの20%に相当する135枚の画像データである。135枚のテストデータの内訳は、グループ1の全画像データの正常画像データと異常画像データの比率に応じた枚数とした。この135枚のテストデータについて、ステップ122で作成した識別器で診断を行う(ステップ124)。
Next, N2 pieces of test data to be diagnosed by the classifier are extracted (step 123). The test data is 135 pieces of image data corresponding to the remaining 20% not used for the learning data among all the data of the
診断要領は、図7のステップ113と同様であり、正常又は異常の2種類であり、135枚のテストデータに対し135個の診断結果が得られ、前記式(1)で定義した正診率の計算式により、135枚のテストデータの診断結果について正診率を演算する(ステップ125)。
The diagnosis procedure is the same as
正診率演算後に、パラメータ(L2正則化値、学習用データ等)を変化させて新たな識別器を作成し、改めて正診率を演算し、正診率の平均値及び標準偏差を尺度として、ステップ121で作成した識別器をより結果の良い識別器に置き換えてもよい。
After calculating the correct diagnosis rate, change the parameters (L2 regularization value, learning data, etc.) to create a new discriminator, calculate the correct diagnosis rate again, and use the average value and standard deviation of the correct diagnosis rate as a scale. The classifier created in
ステップ124の正診率の演算が完了すると、新たにランダムに選んだ535枚の画像データから12144枚の画像データを新たに作成し、ステップ120〜125を繰り返し、改めて135個の正診率が得られる。以後、同じ手順を繰り返すことにより、新たに選択した学習用データについてそれぞれ135個の正診率が得られる。解析手段6は、最も高い正診率をもたらした識別器を最適識別器として採用する(ステップ126)。このステップは、図2のステップ103に相当する。
When the calculation of the correct diagnosis rate in
以上の解析プロセスを経て、グループ1(42歳以上)の年齢区分の最適識別器が作成されたことになる。以下、図7、図9に示した解析プロセスを順次繰り返して、グループ2〜5の年齢区分の最適識別器を作成する。すなわち、各グループの画像データを解析して、各グループ毎に最適学習用データ枚数Nを決定した後(図7のステップ116)、各グループ毎に最適識別器を決定する(図9のステップ126)。
Through the above analysis process, the optimum classifier for the age group of group 1 (42 years old and over) is created. Hereinafter, the analysis processes shown in FIGS. 7 and 9 are sequentially repeated to create the optimum classifiers of the age categories of
各グループについて、図7のステップ111〜ステップ116を繰り返すことにより、各グループ毎に学習用データの枚数と正診率との関係が得られる。図10〜図13に、グループ2〜5の学習用データの枚数と正診率との関係を示している。図10は、グループ2(40歳以上42歳未満)の年齢区分における学習用データの枚数と正診率との関係を示している。この結果を用いて、最適学習用データ枚数Nを決定する。決定要領はグループ1(42歳以上)の場合と同様であり、正診率の平均値及び標準偏差を尺度として、最適学習用データ枚数Nを決定する。図10の結果では、学習用データの枚数が8000枚近傍のときに、正診率は高い値を維持し、かつばらつきも小さくなっており(B部参照)、解析手段6は、最適学習用データ枚数Nとして8085枚を決定した(ステップ116)。
By repeating
最適学習用データ枚数Nの決定は、他のグループ3〜5についても、以下の通り同様である。図11は、グループ3(38歳以上40歳未満)の年齢区分における学習用データの枚数と正診率との関係を示しており、図11の結果では、学習用データの枚数が8000枚近傍のときに、正診率は高い値を維持し、かつばらつきも小さくなっており(C部参照)、解析手段6は、最適学習用データ枚数Nとして7848枚を決定した。
The determination of the optimal learning data number N is the same for the
図12は、グループ4(35歳以上38歳未満)の年齢区分における学習用データの枚数と正診率との関係を示しており、図12の結果では、学習用データの枚数が17000枚近傍のときに、正診率は高い値を維持し、かつばらつきも小さくなっており(D部参照)、解析手段6は、最適学習用データ枚数Nとして17112枚を決定した。 FIG. 12 shows the relationship between the number of learning data and the correct diagnosis rate in the age group of Group 4 (35 to under 38). In the result of FIG. 12, the number of learning data is around 17,000. At this time, the correct diagnosis rate is maintained at a high value and the variation is small (see part D), and the analyzing means 6 determines 17112 as the optimal number N of data for learning.
図13は、グループ5(35歳未満)の年齢区分における学習用データの枚数と正診率との関係を示しており、図13の結果では、学習用データの枚数が16000枚近傍のときに、正診率は高い値を維持し、かつばらつきも小さくなっており(E部参照)、解析手段6は、最適学習用データ枚数Nとして16665枚を決定した。 FIG. 13 shows the relationship between the number of learning data and the correct diagnosis rate in the age division of group 5 (under 35 years old). The result of FIG. 13 shows that when the number of learning data is around 16000. The correct diagnosis rate maintained a high value and the variation was small (see part E), and the analysis means 6 determined 16665 as the optimum learning data number N.
各グループについて、最適学習用データ枚数Nが決定されると、図9のプロセスを経て、最適識別器が決定され、グループ1〜5の5つの年齢区分のそれぞれに対応した5つの最適識別器が決定されることになる。以後は診断対象画像データについて解析が行われる。すなわち、図2において、年齢区分毎に最適識別器を決定した後は(ステップ103)、この最適識別器で診断対象画像データを診断する(ステップ104)。
When the optimum learning data number N is determined for each group, the optimum discriminator is determined through the process of FIG. 9, and the five optimum discriminators corresponding to the five age categories of the
最適識別器による診断は、診断対象画像データの年齢に応じた最適識別器で診断する。図14は、最適識別器と診断対象画像データとの関係を示している。最適識別器1〜5は、グループ1〜5(図3参照)に対応している。最適識別器1は、診断対象画像データのうち42歳以上のデータを診断し、同様に最適識別器2〜5は、図14に示した年齢区分の診断対象画像データを診断する。
Diagnosis using the optimum classifier is performed using an optimum classifier corresponding to the age of the diagnosis target image data. FIG. 14 shows the relationship between the optimum discriminator and diagnostic object image data. The
最適識別器1〜5の効果を検証するために、比較解析を行った。この比較解析のために、前記の解析に用いた妊娠予後判明画像データ(媒精後5日目の受精卵(胚盤胞)の画像5691枚)を用いて、比較用識別器を新たに作成した。比較用識別器の作成手順は、最適識別器1〜5の作成手順と同様であるが、最適識別器1〜5の作成が年齢区分された画像データを用いたのに対して、比較用識別器の作成は年齢区分していない画像データを用いた点が異なっている。
In order to verify the effects of the
図15は、最適識別器1〜5と比較用識別器との正診率の比較結果を示している。図9を参照しながら説明したとおり、最適識別器1〜5はその導出過程において最も高い正診率が得られた識別器であり、同様に比較用識別器についてもその導出過程において最も高い正診率が得られた識別器である。図15に示した最適識別器1〜5の正診率は最適識別器1〜5の導出過程で得られたものであり、比較用識別器の正診率は比較用識別器の導出過程で得られたものである。図15によれば、最適識別器1〜4においては、正診率は比較用識別器の正診率を上回っており、年齢別に最適識別器を作成することの効果が確認できた。最適識別器5の正診率0.639は比較用識別器の正診率0.721を下回っていたが、正診率0.639は6割を超える正診率であり、十分高い正診率であるということができる。このため、本実施形態に係る年齢別の最適識別器による診断結果は正常児獲得の可否を高い精度で予測したものであるということができる。
FIG. 15 shows a comparison result of the correct diagnosis rate between the
前記実施形態では、妊娠予後判明画像データ10は、正常画像データと異常画像データとに分類され、正常画像データは、生児獲得に至ったことが判明している画像データであり、異常画像データは、生児獲得に至らなかったことが判明している画像データであった。これに代えて、正常画像データを妊娠成立に至ったことが判明している画像データとし、異常画像データを妊娠成立に至らなかったことが判明している画像データとしてもよい。この場合、年齢別の最適識別器の作成手順は前記実施形態と同じであり、作成された年齢別の最適識別器による診断結果は妊娠成立の可否を高い精度で予測したものであるということができる。
In the above-described embodiment, the pregnancy prognosis finding
以上のとおり、本発明は機械学習の手法を用いたものであり、受精卵の画像データに対し、撮影や測定等の機材を用いることなく、コンピュータのプログラムを実行させるだけで、主観的判断をすることなく診断が可能になる。そして、データを診断する識別器は、妊娠予後が判明している妊娠予後判明画像データに基づいて機械学習の手法により統計的に作成することに加え、年齢別に作成するので、診断結果は正常児獲得又は妊娠不成立の可否が高い精度で予測可能なものとなる。 As described above, the present invention uses a machine learning method, and it is possible to perform subjective judgment by simply executing a computer program on image data of a fertilized egg without using equipment such as photographing and measurement. Diagnosis is possible without doing so. The classifier that diagnoses the data is statistically created by machine learning based on the pregnancy prognosis image data whose pregnancy prognosis is known, and is also created by age, so the diagnosis results are normal. The possibility of acquisition or pregnancy failure is predictable with high accuracy.
以上、本発明の一実施形態について説明したが、最適識別器の決定のためのプロセスは適宜変更したものであってもよい。例えば前記実施形態では、識別器を作成する際に(図7のステップ112)、検証用データで調整しながら識別器を学習させて作成するという例で説明したがこれを省き、診断はテストデータでの診断(図7のステップ113)だけとしてもよい。また、図3では5グループの年齢区分の例を示したが、これに限るものではない。
As mentioned above, although one Embodiment of this invention was described, the process for determination of an optimal discriminator may be changed suitably. For example, in the above-described embodiment, an example has been described in which the discriminator is created by learning while adjusting the verification data when creating the discriminator (step 112 in FIG. 7). Only the diagnosis (
前記実施形態においては、妊娠予後判明画像データ10をインターネット8を介して受信する例で説明したが(図1参照)、これに限るものではなく、インターネット8を介在さずに、受信手段2で直接受信してもよい。また、妊娠予後判明画像データ10は、画像診断システム1の外部にある記憶手段に一旦保存したものを受信手段2で受信してもよいが、顕微鏡に画像診断システム1を接続することで画像データを保存することなくリアルタイムで受信し、結果についてもリアルタイムで画像診断システム1の出力手段5で表示するようにしてもよい。
In the above embodiment, the example of receiving the pregnancy
また、図7の学習用データn1枚(図7のステップ111)、図9の学習用データN1枚(図9のステップ121)における正常画像データと異常画像データの枚数の比率は限定せず様々な値をとる旨説明したが、両画像データの比率は、識別器の正診率がより高まる最適な比率を決定すればよく、例えば1:1、2:1又は1:2等でもよい。具体的には、最終的な比率を決定する前に、試験的に画像診断システム1を稼働させて、適宜比率を変更して、識別器の正診率を確認しながら、最適な比率を決定してもよい。
Further, the ratio of the number of normal image data and abnormal image data in n1 pieces of learning data in FIG. 7 (step 111 in FIG. 7) and N1 pieces of learning data in FIG. 9 (step 121 in FIG. 9) is not limited. However, the ratio of the two image data may be determined as an optimal ratio that increases the correct diagnosis rate of the discriminator, and may be 1: 1, 2: 1, 1: 2, or the like. Specifically, before determining the final ratio, the
1 受精卵の画像診断システム
2 受信手段
3 送信手段
4 入力手段
5 出力手段
6 解析手段
7 記憶手段
DESCRIPTION OF
Claims (6)
妊娠予後が判明している受精卵の画像データを格納する記憶手段と、
受精卵の画像データを記憶手段に取り込むための受信手段と、
前記画像データを解析する解析手段と、
前記解析手段による解析結果を出力する出力手段とを備えており、
前記画像データは、生児獲得に至ったことが判明している正常画像データと、生児獲得に至らなかったことが判明している異常画像データとで構成される画像データ、又は妊娠成立に至ったことが判明している正常画像データと、妊娠成立に至らなかったことが判明している異常画像データとで構成される画像データであり、かつ患者の年齢情報を含んでおり、
前記解析手段は、
前記画像データを、前記患者の年齢情報に基づいて、年齢別の複数のグループに区分し、
前記複数のグループから一つを選んだ解析対象グループについて、テストデータと学習用データとに分類し、
前記学習用データから複数の識別器を作成し、
前記各識別器で前記テストデータを診断して、前記テストデータの正診率を演算し、
前記正診率に基づいて前記複数の前記識別器から最適識別器を決定し、
前記分類から前記最適識別器の決定までの処理を、他の前記グループを解析対象グループに選んで実行し、これを繰り返して年齢別の前記最適識別器を決定することを特徴とする受精卵の画像診断システム。 An image diagnostic system for a fertilized egg using a machine learning technique,
Storage means for storing image data of a fertilized egg whose pregnancy prognosis is known;
Receiving means for capturing the image data of the fertilized egg into the storage means;
Analyzing means for analyzing the image data;
Output means for outputting an analysis result by the analysis means,
The image data is image data composed of normal image data that has been found to have resulted in the acquisition of newborns, and abnormal image data that has been determined to have not resulted in the acquisition of newborns, or pregnancy establishment. It is image data composed of normal image data that has been found to have reached, and abnormal image data that has been found to have not resulted in the establishment of pregnancy, and includes patient age information,
The analysis means includes
The image data is divided into a plurality of groups according to age based on the age information of the patient,
The analysis target group selected from the plurality of groups is classified into test data and learning data,
Creating a plurality of classifiers from the learning data,
Diagnose the test data with each classifier, calculate the correct diagnosis rate of the test data,
Determining an optimum classifier from the plurality of classifiers based on the correct diagnosis rate;
The process from the classification to the determination of the optimum classifier is performed by selecting the other group as an analysis target group, and the process is repeated to determine the optimum classifier for each age. Diagnostic imaging system.
受精卵の画像データを記憶手段に取り込む取り込みステップと、
前記画像データを解析する解析ステップと、
前記解析手段による解析結果を出力する出力ステップとを前記コンピュータに実行させ、
前記画像データは、生児獲得に至ったことが判明している正常画像データと、生児獲得に至らなかったことが判明している異常画像データとで構成される画像データ、又は妊娠成立に至ったことが判明している正常画像データと、妊娠成立に至らなかったことが判明している異常画像データとで構成される画像データであり、かつ患者の年齢情報を含んでおり、
前記解析ステップにおいて、
前記画像データを、前記患者の年齢情報に基づいて、年齢別の複数のグループに区分し、
前記複数のグループから一つを選んだ解析対象グループについて、テストデータと学習用データとに分類し、
前記学習用データから複数の識別器を作成し、
前記各識別器で前記テストデータを診断して、前記テストデータの正診率を演算し、
前記正診率に基づいて前記複数の前記識別器から最適識別器を決定し、
前記分類から前記最適識別器の決定までの処理を、他の前記グループを解析対象グループに選んで実行し、これを繰り返して年齢別の前記最適識別器を決定することを特徴とする受精卵の画像診断プログラム。 An image diagnostic program for a fertilized egg for causing a computer to perform image diagnosis of a fertilized egg using a machine learning technique,
A step of taking in image data of a fertilized egg into a storage means;
An analysis step of analyzing the image data;
Causing the computer to execute an output step of outputting an analysis result by the analysis means;
The image data is image data composed of normal image data that has been found to have resulted in the acquisition of newborns, and abnormal image data that has been determined to have not resulted in the acquisition of newborns, or pregnancy establishment. It is image data composed of normal image data that has been found to have reached, and abnormal image data that has been found to have not resulted in the establishment of pregnancy, and includes patient age information,
In the analysis step,
The image data is divided into a plurality of groups according to age based on the age information of the patient,
The analysis target group selected from the plurality of groups is classified into test data and learning data,
Creating a plurality of classifiers from the learning data,
Diagnose the test data with each classifier, calculate the correct diagnosis rate of the test data,
Determining an optimum classifier from the plurality of classifiers based on the correct diagnosis rate;
The process from the classification to the determination of the optimum classifier is performed by selecting the other group as an analysis target group, and the process is repeated to determine the optimum classifier for each age. Diagnostic imaging program.
受精卵の画像データを記憶手段に取り込む取り込みステップと、
前記画像データを解析する解析ステップと、
前記解析手段による解析結果を出力する出力ステップとを備え、
前記画像データは、生児獲得に至ったことが判明している正常画像データと、生児獲得に至らなかったことが判明している異常画像データとで構成される画像データ、又は妊娠成立に至ったことが判明している正常画像データと、妊娠成立に至らなかったことが判明している異常画像データとで構成される画像データであり、かつ患者の年齢情報を含んでおり、
前記解析ステップにおいて、
前記画像データを、前記患者の年齢情報に基づいて、年齢別の複数のグループに区分し、
前記複数のグループから一つを選んだ解析対象グループについて、テストデータと学習用データとに分類し、
前記学習用データから複数の識別器を作成し、
前記各識別器で前記テストデータを診断して、前記テストデータの正診率を演算し、
前記正診率に基づいて前記複数の前記識別器から最適識別器を決定し、
前記分類から前記最適識別器の決定までの処理を、他の前記グループを解析対象グループに選んで実行し、これを繰り返して年齢別の前記最適識別器を決定することを特徴とする受精卵の画像診断用識別器の作成方法。 A method for creating a classifier for image diagnosis of a fertilized egg using a machine learning technique,
A step of taking in image data of a fertilized egg into a storage means;
An analysis step of analyzing the image data;
An output step of outputting an analysis result by the analysis means,
The image data is image data composed of normal image data that has been found to have resulted in the acquisition of newborns, and abnormal image data that has been determined to have not resulted in the acquisition of newborns, or pregnancy establishment. It is image data composed of normal image data that has been found to have reached, and abnormal image data that has been found to have not resulted in the establishment of pregnancy, and includes patient age information,
In the analysis step,
The image data is divided into a plurality of groups according to age based on the age information of the patient,
The analysis target group selected from the plurality of groups is classified into test data and learning data,
Creating a plurality of classifiers from the learning data,
Diagnose the test data with each classifier, calculate the correct diagnosis rate of the test data,
Determining an optimum classifier from the plurality of classifiers based on the correct diagnosis rate;
The process from the classification to the determination of the optimum classifier is performed by selecting the other group as an analysis target group, and the process is repeated to determine the optimum classifier for each age. A method for creating a classifier for diagnostic imaging.
In the analysis step, the analysis means repeats the creation of the discriminator and the calculation of the correct diagnosis rate by changing the number of learning data to be selected before determining the optimal discriminator. Based on the correct diagnosis rate calculated for the learning data, the optimum number of the learning data is determined, and the number of the learning data is set as the optimal number, the creation of the classifier and the correct diagnosis rate The calculation is repeated again by changing the learning data to be selected, and the optimum classifier is selected from the plurality of classifiers obtained by the second iteration based on the plurality of correct diagnosis rates obtained by the second iteration. The method for producing a discriminator for image diagnosis of a fertilized egg according to claim 5, wherein:
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018198149A JP6468576B1 (en) | 2018-10-22 | 2018-10-22 | Image diagnostic system for fertilized egg, image diagnostic program for fertilized egg, and method for creating classifier for image diagnosis of fertilized egg. |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018198149A JP6468576B1 (en) | 2018-10-22 | 2018-10-22 | Image diagnostic system for fertilized egg, image diagnostic program for fertilized egg, and method for creating classifier for image diagnosis of fertilized egg. |
Publications (2)
Publication Number | Publication Date |
---|---|
JP6468576B1 true JP6468576B1 (en) | 2019-02-13 |
JP2020067680A JP2020067680A (en) | 2020-04-30 |
Family
ID=65356081
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018198149A Active JP6468576B1 (en) | 2018-10-22 | 2018-10-22 | Image diagnostic system for fertilized egg, image diagnostic program for fertilized egg, and method for creating classifier for image diagnosis of fertilized egg. |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6468576B1 (en) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111785375A (en) * | 2020-06-18 | 2020-10-16 | 武汉互创联合科技有限公司 | Embryo division process analysis and pregnancy rate intelligent prediction method and system |
JP7452068B2 (en) | 2020-02-17 | 2024-03-19 | コニカミノルタ株式会社 | Information processing device, information processing method and program |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR102558551B1 (en) * | 2022-09-15 | 2023-07-24 | 주식회사 카이헬스 | Method for providing information of in vitro fertilization and device using the same |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2018100917A1 (en) * | 2016-11-30 | 2018-06-07 | ソニー株式会社 | Information processing device, observation system, information processing method, and program |
JP2018093749A (en) * | 2016-12-08 | 2018-06-21 | 大日本印刷株式会社 | Cell quality evaluation system, program, and cell quality evaluation method |
-
2018
- 2018-10-22 JP JP2018198149A patent/JP6468576B1/en active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2018100917A1 (en) * | 2016-11-30 | 2018-06-07 | ソニー株式会社 | Information processing device, observation system, information processing method, and program |
JP2018093749A (en) * | 2016-12-08 | 2018-06-21 | 大日本印刷株式会社 | Cell quality evaluation system, program, and cell quality evaluation method |
Non-Patent Citations (3)
Title |
---|
FERTILITY AND STERILITY, vol. Vol. 95, No. 3, JPN6018050761, 2011, pages p. 948-952 * |
日本IVF学会雑誌, vol. Vol. 21, No. 2, JPN6018050756, 6 October 2018 (2018-10-06), pages p. 78 * |
日本生殖医学会雑誌, vol. Vol. 63, No. 3, JPN6018050759, 1 August 2018 (2018-08-01), pages p. 331 * |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7452068B2 (en) | 2020-02-17 | 2024-03-19 | コニカミノルタ株式会社 | Information processing device, information processing method and program |
CN111785375A (en) * | 2020-06-18 | 2020-10-16 | 武汉互创联合科技有限公司 | Embryo division process analysis and pregnancy rate intelligent prediction method and system |
Also Published As
Publication number | Publication date |
---|---|
JP2020067680A (en) | 2020-04-30 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11276497B2 (en) | Diagnosis assistance system and control method thereof | |
US11151721B2 (en) | System and method for automatic detection, localization, and semantic segmentation of anatomical objects | |
KR101623431B1 (en) | Pathological diagnosis classifying apparatus for medical image and pathological diagnosis system using the same | |
KR20230110233A (en) | Cloud server and diagnostic assistant systems based on cloud server | |
JP6468576B1 (en) | Image diagnostic system for fertilized egg, image diagnostic program for fertilized egg, and method for creating classifier for image diagnosis of fertilized egg. | |
US9510756B2 (en) | Method and system for diagnosis of attention deficit hyperactivity disorder from magnetic resonance images | |
JP2021507367A (en) | Systems and methods for estimating embryo viability | |
KR102289277B1 (en) | Medical image diagnosis assistance apparatus and method generating evaluation score about a plurality of medical image diagnosis algorithm | |
EP4036931A1 (en) | Training method for specializing artificial intelligence model in institution for deployment, and apparatus for training artificial intelligence model | |
EP3964136A1 (en) | System and method for guiding a user in ultrasound assessment of a fetal organ | |
KR20200023029A (en) | Diagnosis assistance system and control method thereof | |
CN111862020A (en) | Method, device, server and storage medium for predicting physiological age of anterior segment | |
US20200065967A1 (en) | Computer system, method, and program for diagnosing subject | |
Payette et al. | Intel and mobileodt cervical cancer screening kaggle competition: cervix type classification using deep learning and image classification | |
JP6422142B1 (en) | Image diagnostic system for fertilized egg, image diagnostic program for fertilized egg, and image diagnostic method for fertilized egg. | |
CN117095815A (en) | System for predicting prostate cancer patient with homologous recombination defect based on magnetic resonance image and pathological panoramic scanning slice | |
da Cruz et al. | Enabling autonomous medical image data annotation: A human-in-the-loop reinforcement learning approach | |
US11842492B2 (en) | Cerebral hematoma volume analysis | |
WO2019235335A1 (en) | Diagnosis support system, diagnosis support method, and diagnosis support program | |
KR102391934B1 (en) | System and method for diagnosis cancer risk of thyroid nodule based on artificial intelligence | |
JP2021068336A (en) | Image diagnostic system for embryo, image diagnosis program for embryo, and method of creating diagnostic imaging classifier for embryo | |
WO2023018343A1 (en) | Automatic detection and differentiation of pancreatic cystic lesions in endoscopic ultrasonography | |
KR102360615B1 (en) | Medical image diagnosis assistance apparatus and method using a plurality of medical image diagnosis algorithm for endoscope images | |
KR102400568B1 (en) | Method and apparatus for identifying anomaly area of image using encoder | |
BalaKrishna et al. | Autism spectrum disorder detection using machine learning |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20181029 |
|
A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20181029 |
|
A975 | Report on accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A971005 Effective date: 20181115 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20181225 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20190109 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6468576 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |