JP6703319B1 - 眼科画像処理装置、およびoct装置 - Google Patents
眼科画像処理装置、およびoct装置 Download PDFInfo
- Publication number
- JP6703319B1 JP6703319B1 JP2019553134A JP2019553134A JP6703319B1 JP 6703319 B1 JP6703319 B1 JP 6703319B1 JP 2019553134 A JP2019553134 A JP 2019553134A JP 2019553134 A JP2019553134 A JP 2019553134A JP 6703319 B1 JP6703319 B1 JP 6703319B1
- Authority
- JP
- Japan
- Prior art keywords
- image
- ophthalmic
- images
- training
- tissue
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000012545 processing Methods 0.000 title claims abstract description 96
- 238000012549 training Methods 0.000 claims abstract description 175
- 238000013178 mathematical model Methods 0.000 claims abstract description 112
- 238000004422 calculation algorithm Methods 0.000 claims abstract description 17
- 238000010801 machine learning Methods 0.000 claims abstract description 17
- 238000000034 method Methods 0.000 claims description 84
- 230000008569 process Effects 0.000 claims description 66
- 238000012935 Averaging Methods 0.000 claims description 21
- 238000005259 measurement Methods 0.000 claims description 11
- 239000010410 layer Substances 0.000 description 14
- 238000013528 artificial neural network Methods 0.000 description 13
- 230000011218 segmentation Effects 0.000 description 13
- 238000004891 communication Methods 0.000 description 9
- 238000010276 construction Methods 0.000 description 9
- 230000006870 function Effects 0.000 description 7
- 238000003384 imaging method Methods 0.000 description 5
- 238000012706 support-vector machine Methods 0.000 description 4
- 238000013527 convolutional neural network Methods 0.000 description 3
- 238000003066 decision tree Methods 0.000 description 3
- 238000007637 random forest analysis Methods 0.000 description 3
- 210000004204 blood vessel Anatomy 0.000 description 2
- 238000007796 conventional method Methods 0.000 description 2
- 238000003745 diagnosis Methods 0.000 description 2
- 230000002349 favourable effect Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000000306 recurrent effect Effects 0.000 description 2
- 210000001525 retina Anatomy 0.000 description 2
- 230000006399 behavior Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 210000000399 corneal endothelial cell Anatomy 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 230000036541 health Effects 0.000 description 1
- 230000001678 irradiating effect Effects 0.000 description 1
- 210000002569 neuron Anatomy 0.000 description 1
- 230000008520 organization Effects 0.000 description 1
- 238000000926 separation method Methods 0.000 description 1
- 238000001228 spectrum Methods 0.000 description 1
- 238000012421 spiking Methods 0.000 description 1
- 239000002344 surface layer Substances 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/50—Image enhancement or restoration using two or more images, e.g. averaging or subtraction
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/60—Image enhancement or restoration using machine learning, e.g. neural networks
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10072—Tomographic images
- G06T2207/10101—Optical tomography; Optical coherence tomography [OCT]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20081—Training; Learning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20084—Artificial neural networks [ANN]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20212—Image combination
- G06T2207/20216—Image averaging
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
- G06T2207/30041—Eye; Retina; Ophthalmic
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Eye Examination Apparatus (AREA)
- Image Analysis (AREA)
Abstract
Description
本開示における典型的な実施形態が提供する眼科画像処理装置の第2態様は、被検眼の組織の画像である眼科画像を処理する眼科画像処理装置であって、前記眼科画像は、OCT装置によって同一位置に関して異なる時間に取得された少なくとも2つのOCT信号が演算処理されることで取得されるモーションコントラスト画像であるOCTアンジオ画像であり、前記眼科画像処理装置の制御部は、前記OCT装置によって撮影されたOCTアンジオ画像、または、前記OCT装置によって組織の同一部位を撮影した複数のOCTアンジオ画像を加算平均した加算平均画像を、基画像として取得し、機械学習アルゴリズムによって訓練された数学モデルに前記基画像を入力することで、前記基画像よりも高画質のOCTアンジオ画像である目的画像を取得し、前記数学モデルは、組織の同一部位を撮影した複数の訓練用眼科画像のうち、L枚(L≧1)の前記訓練用眼科画像に基づくデータを入力用訓練データとし、且つ、H枚(H>L)前記訓練用眼科画像を加算平均した加算平均画像のデータを出力用訓練データとして訓練されている。
本開示における典型的な実施形態が提供するOCT装置の第2態様は、参照光と、被検眼の組織に照射された測定光の反射光とによるOCT信号を処理することで、前記組織の眼科画像を撮影するOCT装置であって、前記眼科画像は、同一位置に関して異なる時間に取得された少なくとも2つのOCT信号が演算処理されることで取得されるモーションコントラスト画像であるOCTアンジオ画像であり、前記OCT装置の制御部は、撮影した前記組織のOCTアンジオ画像、または、前記組織の同一部位を撮影した複数のOCTアンジオ画像を加算平均した加算平均画像を、基画像として取得し、機械学習アルゴリズムによって訓練された数学モデルに前記基画像を入力することで、前記基画像よりも高画質のOCTアンジオ画像である目的画像を取得し、前記数学モデルは、組織の同一部位を撮影した複数の訓練用眼科画像のうち、L枚(L≧1)の前記訓練用眼科画像に基づくデータを入力用訓練データとし、且つ、H枚(H>L)前記訓練用眼科画像を加算平均した加算平均画像のデータを出力用訓練データとして訓練されている。
以下、本開示における典型的な実施形態の1つについて、図面を参照して説明する。図1に示すように、本実施形態では、数学モデル構築装置1、眼科画像処理装置21、および眼科画像撮影装置11A,11Bが用いられる。数学モデル構築装置1は、機械学習アルゴリズムによって数学モデルを訓練させることで、数学モデルを構築する。構築された数学モデルは、入力された基画像に基づいて、基画像よりも高画質の(本実施形態では、ノイズの影響が適切に抑制された)目的画像を出力する。眼科画像処理装置21は、数学モデルを用いて、基画像から目的画像を取得する。眼科画像撮影装置11A,11Bは、被検眼の組織の画像である眼科画像を撮影する。
図2〜図6を参照して、数学モデル構築装置1が実行する数学モデル構築処理について説明する。数学モデル構築処理は、記憶装置4に記憶された数学モデル構築プログラムに従って、CPU3によって実行される。
図7〜図9を参照して、眼科画像処理装置21が実行する眼科画像処理について説明する。眼科画像処理は、記憶装置24に記憶された眼科画像処理プログラムに従って、CPU23によって実行される。
3 CPU
4 記憶装置
11 眼科画像撮影装置
21 眼科画像処理装置
23 CPU
24 記憶装置
28 表示装置
30 セット
31 加算平均画像
32 加算平均画像
300 訓練用眼科画像
Claims (4)
- 被検眼の組織の画像である眼科画像を処理する眼科画像処理装置であって、
前記眼科画像処理装置の制御部は、
眼科画像撮影装置によって撮影された眼科画像、または、前記眼科画像撮影装置によって組織の同一部位を撮影した複数の眼科画像を加算平均した加算平均画像を基画像として、前記眼科画像撮影装置によって連続して撮影される複数の前記基画像を取得し、
機械学習アルゴリズムによって訓練された数学モデルに、連続して撮影される前記複数の基画像を順次入力することで、前記基画像よりも高画質の目的画像を連続して複数取得し、
連続して取得した前記複数の目的画像に基づいて、前記組織の動画データを生成し、
前記数学モデルは、組織の同一部位を撮影した複数の訓練用眼科画像のうち、L枚(L≧1)の前記訓練用眼科画像に基づくデータを入力用訓練データとし、且つ、H枚(H>L)前記訓練用眼科画像を加算平均した加算平均画像のデータを出力用訓練データとして訓練されていることを特徴とする眼科画像処理装置。 - 被検眼の組織の画像である眼科画像を処理する眼科画像処理装置であって、
前記眼科画像は、OCT装置によって同一位置に関して異なる時間に取得された少なくとも2つのOCT信号が演算処理されることで取得されるモーションコントラスト画像であるOCTアンジオ画像であり、
前記眼科画像処理装置の制御部は、
前記OCT装置によって撮影されたOCTアンジオ画像、または、前記OCT装置によって組織の同一部位を撮影した複数のOCTアンジオ画像を加算平均した加算平均画像を、基画像として取得し、
機械学習アルゴリズムによって訓練された数学モデルに前記基画像を入力することで、前記基画像よりも高画質のOCTアンジオ画像である目的画像を取得し、
前記数学モデルは、組織の同一部位を撮影した複数の訓練用眼科画像のうち、L枚(L≧1)の前記訓練用眼科画像に基づくデータを入力用訓練データとし、且つ、H枚(H>L)前記訓練用眼科画像を加算平均した加算平均画像のデータを出力用訓練データとして訓練されていることを特徴とする眼科画像処理装置。 - 参照光と、被検眼の組織に照射された測定光の反射光とによるOCT信号を処理することで、前記組織の眼科画像を撮影するOCT装置であって、
前記OCT装置の制御部は、
撮影した前記組織の眼科画像、または、前記組織の同一部位を撮影した複数の眼科画像を加算平均した加算平均画像を基画像として、連続して撮影される複数の前記基画像を取得し、
機械学習アルゴリズムによって訓練された数学モデルに、連続して撮影される前記複数の基画像を順次入力することで、前記基画像よりも高画質の目的画像を連続して複数取得し、
連続して取得した前記複数の目的画像に基づいて、前記組織の動画データを生成し、
前記数学モデルは、組織の同一部位を撮影した複数の訓練用眼科画像のうち、L枚(L≧1)の前記訓練用眼科画像に基づくデータを入力用訓練データとし、且つ、H枚(H>L)前記訓練用眼科画像を加算平均した加算平均画像のデータを出力用訓練データとして訓練されていることを特徴とするOCT装置。 - 参照光と、被検眼の組織に照射された測定光の反射光とによるOCT信号を処理することで、前記組織の眼科画像を撮影するOCT装置であって、
前記眼科画像は、同一位置に関して異なる時間に取得された少なくとも2つのOCT信号が演算処理されることで取得されるモーションコントラスト画像であるOCTアンジオ画像であり、
前記OCT装置の制御部は、
撮影した前記組織のOCTアンジオ画像、または、前記組織の同一部位を撮影した複数のOCTアンジオ画像を加算平均した加算平均画像を、基画像として取得し、
機械学習アルゴリズムによって訓練された数学モデルに前記基画像を入力することで、前記基画像よりも高画質のOCTアンジオ画像である目的画像を取得し、
前記数学モデルは、組織の同一部位を撮影した複数の訓練用眼科画像のうち、L枚(L≧1)の前記訓練用眼科画像に基づくデータを入力用訓練データとし、且つ、H枚(H>L)前記訓練用眼科画像を加算平均した加算平均画像のデータを出力用訓練データとして訓練されていることを特徴とするOCT装置。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/JP2018/024915 WO2020003524A1 (ja) | 2018-06-29 | 2018-06-29 | 眼科画像処理装置、oct装置、眼科画像処理プログラム、および、数学モデル構築方法 |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020080985A Division JP6747617B2 (ja) | 2020-05-01 | 2020-05-01 | 眼科画像処理装置、およびoct装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP6703319B1 true JP6703319B1 (ja) | 2020-06-03 |
JPWO2020003524A1 JPWO2020003524A1 (ja) | 2020-07-02 |
Family
ID=68986330
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019553134A Active JP6703319B1 (ja) | 2018-06-29 | 2018-06-29 | 眼科画像処理装置、およびoct装置 |
Country Status (4)
Country | Link |
---|---|
EP (1) | EP3815599A4 (ja) |
JP (1) | JP6703319B1 (ja) |
CN (1) | CN113365547A (ja) |
WO (1) | WO2020003524A1 (ja) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2022234828A1 (ja) * | 2021-05-06 | 2022-11-10 | 国立大学法人筑波大学 | 情報処理装置およびプログラム |
JPWO2023281965A1 (ja) * | 2021-07-05 | 2023-01-12 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH1131214A (ja) * | 1997-07-10 | 1999-02-02 | Hitachi Medical Corp | 画像処理装置 |
JP2013169391A (ja) * | 2012-02-22 | 2013-09-02 | Toshiba Corp | X線ct装置、画像表示装置、画像表示方法 |
JP2015009108A (ja) * | 2013-07-02 | 2015-01-19 | 株式会社ニデック | 眼科撮影装置及び眼科画像処理プログラム |
JP2018079208A (ja) * | 2016-11-18 | 2018-05-24 | キヤノン株式会社 | 画像処理装置、画像処理方法及びプログラム |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20130051516A1 (en) * | 2011-08-31 | 2013-02-28 | Carestream Health, Inc. | Noise suppression for low x-ray dose cone-beam image reconstruction |
EP3404611A1 (en) * | 2017-05-19 | 2018-11-21 | RetinAI Medical GmbH | Reducing noise in an image |
-
2018
- 2018-06-29 CN CN201880096917.2A patent/CN113365547A/zh active Pending
- 2018-06-29 JP JP2019553134A patent/JP6703319B1/ja active Active
- 2018-06-29 EP EP18924990.7A patent/EP3815599A4/en active Pending
- 2018-06-29 WO PCT/JP2018/024915 patent/WO2020003524A1/ja unknown
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH1131214A (ja) * | 1997-07-10 | 1999-02-02 | Hitachi Medical Corp | 画像処理装置 |
JP2013169391A (ja) * | 2012-02-22 | 2013-09-02 | Toshiba Corp | X線ct装置、画像表示装置、画像表示方法 |
JP2015009108A (ja) * | 2013-07-02 | 2015-01-19 | 株式会社ニデック | 眼科撮影装置及び眼科画像処理プログラム |
JP2018079208A (ja) * | 2016-11-18 | 2018-05-24 | キヤノン株式会社 | 画像処理装置、画像処理方法及びプログラム |
Non-Patent Citations (2)
Title |
---|
ISOGAWA KENZO: "Deep Shrinkage Convolution Neural Network for Adaptive Noise Reconstruction", IEEE SIGNAL PROCESSING LETTERS, vol. 25, no. 2, JPN6018036850, February 2018 (2018-02-01), pages 224 - 228, ISSN: 0004174231 * |
北島美香: "Deep Learning Reconstructionについて", INNERVISION, vol. 第33巻,第5号, JPN6018036849, 25 April 2018 (2018-04-25), pages 6 - 7, ISSN: 0004174230 * |
Also Published As
Publication number | Publication date |
---|---|
JPWO2020003524A1 (ja) | 2020-07-02 |
CN113365547A (zh) | 2021-09-07 |
WO2020003524A1 (ja) | 2020-01-02 |
EP3815599A1 (en) | 2021-05-05 |
EP3815599A4 (en) | 2022-03-09 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11633096B2 (en) | Ophthalmologic image processing device and non-transitory computer-readable storage medium storing computer-readable instructions | |
JP7388525B2 (ja) | 眼科画像処理装置および眼科画像処理プログラム | |
US20240221160A1 (en) | Ophthalmic image processing device, oct device, and non-transitory computer-readable storage medium | |
JP2024040372A (ja) | 眼科画像処理プログラムおよび眼科画像処理装置 | |
JP6703319B1 (ja) | 眼科画像処理装置、およびoct装置 | |
US20220164949A1 (en) | Ophthalmic image processing device and ophthalmic image processing method | |
JP6747617B2 (ja) | 眼科画像処理装置、およびoct装置 | |
JP7147888B2 (ja) | 眼科画像処理装置、oct装置、および眼科画像処理プログラム | |
JP2019208851A (ja) | 眼底画像処理装置および眼底画像処理プログラム | |
JP7439990B2 (ja) | 医療画像処理装置、医療画像処理プログラム、および医療画像処理方法 | |
WO2021020419A1 (ja) | 医療画像処理装置および医療画像処理プログラム | |
JP7435067B2 (ja) | 眼科画像処理装置および眼科画像処理プログラム | |
JP2020121037A (ja) | 眼科画像処理装置、および眼科画像処理プログラム | |
WO2020241794A1 (ja) | 眼科画像処理装置、眼科画像処理プログラム、および眼科画像処理システム | |
WO2021045019A1 (ja) | 眼科画像処理プログラムおよび眼科画像処理装置 | |
JP2021074095A (ja) | 眼科画像処理装置および眼科画像処理プログラム | |
JP2020036837A (ja) | 眼科画像処理装置、および眼科撮影装置 | |
JP7210927B2 (ja) | 眼科画像処理装置、oct装置、および眼科画像処理プログラム | |
US20240169528A1 (en) | Medical image processing device and storage medium storing medical image processing program | |
JP7180187B2 (ja) | 眼科画像処理装置、oct装置、および眼科画像処理プログラム | |
JP2020121038A (ja) | 眼科画像処理装置、および眼科画像処理プログラム | |
JP2023149095A (ja) | 眼底画像処理装置および眼底画像処理プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20191015 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20191015 |
|
A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20191015 |
|
A975 | Report on accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A971005 Effective date: 20191209 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20191218 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200213 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200408 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200421 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6703319 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |