JP2023077425A5 - Ophthalmic image processing device and ophthalmic image processing program - Google Patents
Ophthalmic image processing device and ophthalmic image processing program Download PDFInfo
- Publication number
- JP2023077425A5 JP2023077425A5 JP2022196733A JP2022196733A JP2023077425A5 JP 2023077425 A5 JP2023077425 A5 JP 2023077425A5 JP 2022196733 A JP2022196733 A JP 2022196733A JP 2022196733 A JP2022196733 A JP 2022196733A JP 2023077425 A5 JP2023077425 A5 JP 2023077425A5
- Authority
- JP
- Japan
- Prior art keywords
- image
- ophthalmic
- ophthalmologic
- target
- resolution
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000013178 mathematical model Methods 0.000 claims description 7
- 238000003384 imaging method Methods 0.000 claims description 6
- 238000010801 machine learning Methods 0.000 claims description 4
- 238000000034 method Methods 0.000 claims description 4
Description
本開示は、被検眼の眼科画像を処理する眼科画像処理装置、および、眼科画像処理装置において実行される眼科画像処理プログラムに関する。
The present disclosure relates to an ophthalmic image processing apparatus that processes an ophthalmic image of an eye to be examined, and an ophthalmic image processing program executed in the ophthalmic image processing apparatus.
本開示は、上記複数の側面の少なくともいずれかを解決することを目的とする。つまり、本開示の典型的な目的は、低解像度の画像から高解像度の画像を適切に取得するための眼科画像処理装置、および、眼科画像処理プログラムを提供することである。
An object of the present disclosure is to solve at least one of the above aspects. That is, a typical object of the present disclosure is to provide an ophthalmic image processing apparatus and an ophthalmic image processing program for appropriately acquiring a high-resolution image from a low-resolution image.
本開示における典型的な実施形態が提供する眼科画像処理装置は、被検眼の組織の画像である眼科画像を処理する眼科画像処理装置であって、前記眼科画像処理装置の制御部は、眼科画像撮影装置によって撮影された眼科画像である基画像を取得し、機械学習アルゴリズムによって訓練された数学モデルに前記基画像を入力することで、画像解像度が前記基画像の画像解像度よりも高い目的画像を取得し、前記数学モデルは、同一の組織の部位を撮影対象とし、且つ、同一の眼科画像撮影装置によって撮影された複数の眼科画像のセットのうち、少なくとも１つの眼科画像である低解像度訓練画像を入力用訓練データとし、前記低解像度訓練画像よりも画像解像度が高い眼科画像である高解像度訓練画像を出力用訓練データとして訓練されており、前記目的画像および前記基画像のうち、表示装置に表示させる画像を、前記目的画像を表示させることが可能なタイミングに応じて予め設定しておくことが可能であり、前記目的画像を表示させることが可能なタイミングが到来した際に、前記目的画像および前記基画像のうち、前記タイミングに応じて予め設定されている画像を前記表示装置に表示させる。
An ophthalmic image processing apparatus provided by a typical embodiment of the present disclosure is an ophthalmic image processing apparatus that processes an ophthalmic image that is an image of a tissue of an eye to be examined, wherein a control unit of the ophthalmic image processing apparatus includes: Obtaining a base image, which is an ophthalmologic image captured by an imaging device, and inputting the base image to a mathematical model trained by a machine learning algorithm to obtain a target image having a higher image resolution than the base image. a low-resolution training image, wherein the mathematical model is at least one ophthalmologic image from a set of a plurality of ophthalmologic images captured by the same ophthalmologic image capturing device, wherein the same tissue region is captured; is used as input training data, and high-resolution training images, which are ophthalmologic images having a higher image resolution than the low-resolution training images, are used as output training data. The image to be displayed can be set in advance according to the timing at which the target image can be displayed, and when the timing at which the target image can be displayed arrives, the target image is displayed. And, among the basic images, an image preset according to the timing is displayed on the display device .
本開示における典型的な実施形態が提供する眼科画像処理プログラムは、被検眼の組織の画像である眼科画像を処理する眼科画像処理装置によって実行される眼科画像処理プログラムであって、前記眼科画像処理プログラムが前記眼科画像処理装置の制御部によって実行されることで、眼科画像撮影装置によって撮影された眼科画像である基画像を取得する基画像取得ステップと、機械学習アルゴリズムによって訓練された数学モデルに前記基画像を入力することで、画像解像度が前記基画像の画像解像度よりも高い目的画像を取得する目的画像取得ステップと、を前記眼科画像処理装置に実行させ、前記数学モデルは、同一の組織の部位を撮影対象とし、且つ、同一の眼科画像撮影装置によって撮影された複数の眼科画像のセットのうち、少なくとも１つの眼科画像である低解像度訓練画像を入力用訓練データとし、前記低解像度訓練画像よりも画像解像度が高い眼科画像である高解像度訓練画像を出力用訓練データとして訓練されており、前記目的画像および前記基画像のうち、表示装置に表示させる画像を、前記目的画像を表示させることが可能なタイミングに応じて予め設定しておくことが可能であり、前記目的画像を表示させることが可能なタイミングが到来した際に、前記目的画像および前記基画像のうち、前記タイミングに応じて予め設定されている画像を前記表示装置に表示させるステップを前記眼科画像処理装置に実行させる。
An ophthalmic image processing program provided by a typical embodiment of the present disclosure is an ophthalmic image processing program executed by an ophthalmic image processing apparatus that processes an ophthalmic image that is an image of tissue of an eye to be examined, the ophthalmic image processing A program is executed by the control unit of the ophthalmologic image processing apparatus to obtain a base image acquisition step of obtaining a base image, which is an ophthalmologic image captured by the ophthalmologic imaging apparatus, and a mathematical model trained by a machine learning algorithm. a target image obtaining step of obtaining a target image having a higher image resolution than the image resolution of the base image by inputting the base image, and causing the ophthalmologic image processing apparatus to execute a target image obtaining step, wherein and a set of a plurality of ophthalmologic images captured by the same ophthalmologic image capturing device, wherein a low-resolution training image that is at least one ophthalmologic image is used as input training data, and the low-resolution training A high-resolution training image, which is an ophthalmologic image having a higher image resolution than the image, is trained as output training data, and an image to be displayed on a display device out of the target image and the base image is displayed as the target image. can be set in advance according to the timing at which the target image can be displayed, and when the timing at which the target image can be displayed has arrived, the target image and the base image are selected according to the timing causing the ophthalmologic image processing apparatus to execute a step of displaying a preset image on the display device.
本開示に係る眼科画像処理装置および眼科画像処理プログラムによると、低解像度の画像から高解像度の画像が適切に取得される。
According to the ophthalmologic image processing apparatus and the ophthalmologic image processing program according to the present disclosure, high-resolution images are appropriately obtained from low-resolution images.
Claims (4)
前記眼科画像処理装置の制御部は、
眼科画像撮影装置によって撮影された眼科画像である基画像を取得し、
機械学習アルゴリズムによって訓練された数学モデルに前記基画像を入力することで、画像解像度が前記基画像の画像解像度よりも高い目的画像を取得し、
前記数学モデルは、同一の組織の部位を撮影対象とし、且つ、同一の眼科画像撮影装置によって撮影された複数の眼科画像のセットのうち、少なくとも１つの眼科画像である低解像度訓練画像を入力用訓練データとし、前記低解像度訓練画像よりも画像解像度が高い眼科画像である高解像度訓練画像を出力用訓練データとして訓練されており、
前記目的画像および前記基画像のうち、表示装置に表示させる画像を、前記目的画像を表示させることが可能なタイミングに応じて予め設定しておくことが可能であり、
前記目的画像を表示させることが可能なタイミングが到来した際に、前記目的画像および前記基画像のうち、前記タイミングに応じて予め設定されている画像を前記表示装置に表示させることを特徴とする眼科画像処理装置。 An ophthalmic image processing apparatus for processing an ophthalmic image that is an image of tissue of an eye to be examined,
The control unit of the ophthalmologic image processing apparatus includes:
Acquiring a base image, which is an ophthalmologic image captured by an ophthalmic imaging device,
obtaining a target image whose image resolution is higher than that of the base image by inputting the base image into a mathematical model trained by a machine learning algorithm;
The mathematical model uses, as an input, a low-resolution training image that is at least one ophthalmologic image out of a set of a plurality of ophthalmologic images captured by the same ophthalmologic image capturing device, with the same tissue site as an imaging target. training data, high-resolution training images, which are ophthalmologic images having a higher image resolution than the low-resolution training images, are trained as output training data,
An image to be displayed on a display device, out of the target image and the base image, can be set in advance according to a timing at which the target image can be displayed,
characterized in that, when a timing at which the target image can be displayed has arrived, an image preset according to the timing, out of the target image and the basic image, is displayed on the display device. Ophthalmic image processor.
前記基画像、前記低解像度訓練画像、および前記高解像度訓練画像は、ＯＣＴ装置によって撮影された前記被検眼のＯＣＴアンジオ画像であることを特徴とする眼科画像処理装置。 An ophthalmologic image processing apparatus, wherein the base image, the low-resolution training image, and the high-resolution training image are OCT angio images of the subject's eye captured by an OCT apparatus.
前記制御部は、 The control unit
前記目的画像および前記基画像のうち前記表示装置に表示させる画像を、ユーザによって入力される指示に応じて予め設定しておくことを特徴とする眼科画像処理装置。 An ophthalmologic image processing apparatus, wherein an image to be displayed on the display device, out of the target image and the base image, is set in advance according to an instruction input by a user.
前記眼科画像処理プログラムが前記眼科画像処理装置の制御部によって実行されることで、 By executing the ophthalmic image processing program by the control unit of the ophthalmic image processing apparatus,
眼科画像撮影装置によって撮影された眼科画像である基画像を取得する基画像取得ステップと、 a base image obtaining step of obtaining a base image, which is an ophthalmologic image captured by an ophthalmic imaging device;
機械学習アルゴリズムによって訓練された数学モデルに前記基画像を入力することで、画像解像度が前記基画像の画像解像度よりも高い目的画像を取得する目的画像取得ステップと、 a target image obtaining step of obtaining a target image having an image resolution higher than that of the base image by inputting the base image into a mathematical model trained by a machine learning algorithm;
を前記眼科画像処理装置に実行させ、 causes the ophthalmic image processing apparatus to execute
前記数学モデルは、同一の組織の部位を撮影対象とし、且つ、同一の眼科画像撮影装置によって撮影された複数の眼科画像のセットのうち、少なくとも１つの眼科画像である低解像度訓練画像を入力用訓練データとし、前記低解像度訓練画像よりも画像解像度が高い眼科画像である高解像度訓練画像を出力用訓練データとして訓練されており、 The mathematical model uses, as an input, a low-resolution training image that is at least one ophthalmologic image out of a set of a plurality of ophthalmologic images captured by the same ophthalmologic image capturing device, with the same tissue site as an imaging target. Training is performed using a high-resolution training image, which is an ophthalmologic image having a higher image resolution than the low-resolution training image, as training data for output,
前記目的画像および前記基画像のうち、表示装置に表示させる画像を、前記目的画像を表示させることが可能なタイミングに応じて予め設定しておくことが可能であり、 An image to be displayed on a display device, out of the target image and the base image, can be set in advance according to the timing at which the target image can be displayed,
前記目的画像を表示させることが可能なタイミングが到来した際に、前記目的画像および前記基画像のうち、前記タイミングに応じて予め設定されている画像を前記表示装置に表示させるステップを前記眼科画像処理装置に実行させることを特徴とする眼科画像処理プログラム。 The step of displaying, on the display device, an image preset according to the timing, out of the target image and the base image, when the timing at which the target image can be displayed has arrived. An ophthalmic image processing program to be executed by a processing device.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2022196733A JP7388525B2 (en) | 2018-06-29 | 2022-12-09 | Ophthalmology image processing device and ophthalmology image processing program |
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2018124973A JP7183590B2 (en) | 2018-06-29 | 2018-06-29 | Ophthalmic image processing device, OCT device, and ophthalmic image processing program |
| JP2022196733A JP7388525B2 (en) | 2018-06-29 | 2022-12-09 | Ophthalmology image processing device and ophthalmology image processing program |
Related Parent Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2018124973A Division JP7183590B2 (en) | 2018-06-29 | 2018-06-29 | Ophthalmic image processing device, OCT device, and ophthalmic image processing program |
Publications (3)
| Publication Number | Publication Date |
|---|---|
| JP2023077425A JP2023077425A (en) | 2023-06-05 |
| JP2023077425A5 true JP2023077425A5 (en) | 2023-06-13 |
| JP7388525B2 JP7388525B2 (en) | 2023-11-29 |
Family
ID=69097728
Family Applications (2)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2018124973A Active JP7183590B2 (en) | 2018-06-29 | 2018-06-29 | Ophthalmic image processing device, OCT device, and ophthalmic image processing program |
| JP2022196733A Active JP7388525B2 (en) | 2018-06-29 | 2022-12-09 | Ophthalmology image processing device and ophthalmology image processing program |
Family Applications Before (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2018124973A Active JP7183590B2 (en) | 2018-06-29 | 2018-06-29 | Ophthalmic image processing device, OCT device, and ophthalmic image processing program |
Country Status (1)
| Country | Link |
|---|---|
| JP (2) | JP7183590B2 (en) |
Families Citing this family (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP7435067B2 (en) * | 2020-03-12 | 2024-02-21 | 株式会社ニデック | Ophthalmology image processing device and ophthalmology image processing program |
| JP2022068892A (en) * | 2020-10-23 | 2022-05-11 | 株式会社トプコン | Ophthalmological observation device, ophthalmological image processing device, ophthalmological image processing method, program and recording medium |
| CN112957005A (en) * | 2021-02-01 | 2021-06-15 | 山西省眼科医院(山西省红十字防盲流动眼科医院、山西省眼科研究所) | Automatic identification and laser photocoagulation region recommendation algorithm for fundus contrast image non-perfusion region |
| WO2023248968A1 (en) * | 2022-06-21 | 2023-12-28 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ | Image processing method, image processing device, and image processing program |
Family Cites Families (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP5055166B2 (en) | 2008-02-29 | 2012-10-24 | キヤノン株式会社 | Eye open / closed degree determination device, method and program, and imaging device |
| JP5827024B2 (en) | 2011-03-31 | 2015-12-02 | 株式会社吉田製作所 | Control device, control method, and control program for optical coherence tomographic image generation apparatus |
| US9734558B2 (en) * | 2014-03-20 | 2017-08-15 | Mitsubishi Electric Research Laboratories, Inc. | Method for generating high-resolution images using regression patterns |
| JP6491471B2 (en) | 2014-12-24 | 2019-03-27 | キヤノン株式会社 | Image processing apparatus, image processing method, and program |
| JP6551081B2 (en) * | 2015-09-04 | 2019-07-31 | 株式会社ニデック | Ophthalmic imaging apparatus and ophthalmologic imaging program |
| JP6809815B2 (en) * | 2016-05-30 | 2021-01-06 | 株式会社トプコン | Ophthalmologic imaging equipment |
| JP6867117B2 (en) * | 2016-07-08 | 2021-04-28 | 株式会社トプコン | Medical image processing method and medical image processing device |
| JP7114358B2 (en) * | 2018-06-15 | 2022-08-08 | キヤノン株式会社 | MEDICAL IMAGE PROCESSING APPARATUS, MEDICAL IMAGE PROCESSING METHOD AND PROGRAM |
-
2018
- 2018-06-29 JP JP2018124973A patent/JP7183590B2/en active Active
-
2022
- 2022-12-09 JP JP2022196733A patent/JP7388525B2/en active Active
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP2023077425A5 (en) | Ophthalmic image processing device and ophthalmic image processing program | |
| JP2020058800A5 (en) | ||
| JP2014083266A5 (en) | ||
| JP2012187229A5 (en) | IMAGING DEVICE AND IMAGING DEVICE CONTROL METHOD | |
| JP2008193342A5 (en) | ||
| JP2014155694A5 (en) | ||
| RU2013144062A (en) | SYSTEM AND METHOD OF MEDICAL VISUALIZATION FOR PROVIDING THE PRESENTATION OF THE IMAGE SUPPORTING THE PRECISE DIRECTION OF THE SURGICAL INSTRUMENT AT SURGICAL OPERATION ON VESSELS | |
| US20160206291A1 (en) | Live ultrasound image and historical ultrasound image frame overlapping | |
| JP2020000678A5 (en) | ||
| JP2022155690A5 (en) | ||
| JP7183590B2 (en) | Ophthalmic image processing device, OCT device, and ophthalmic image processing program | |
| JP2019209136A5 (en) | ||
| JP5175781B2 (en) | Anterior segment 3D image processing device | |
| JP2005218584A5 (en) | ||
| JP2021037177A5 (en) | ||
| KR101374295B1 (en) | Apparatus for ocular and method for measuring treatment position thereof | |
| JP2016116156A5 (en) | ||
| JP2022185838A5 (en) | ||
| JP2019063146A5 (en) | ||
| JP2017104751A5 (en) | ||
| JP2018051245A5 (en) | ||
| JP2022138552A5 (en) | ||
| CN107961022A (en) | Control the method and device of the motion of Medical Devices | |
| JP2022026849A5 (en) | ||
| JPWO2021140644A5 (en) | Endoscopy support device, endoscopy support method, and program |