JP7472914B2 - 画像処理方法、画像処理装置、及びプログラム - Google Patents
画像処理方法、画像処理装置、及びプログラム Download PDFInfo
- Publication number
- JP7472914B2 JP7472914B2 JP2021553267A JP2021553267A JP7472914B2 JP 7472914 B2 JP7472914 B2 JP 7472914B2 JP 2021553267 A JP2021553267 A JP 2021553267A JP 2021553267 A JP2021553267 A JP 2021553267A JP 7472914 B2 JP7472914 B2 JP 7472914B2
- Authority
- JP
- Japan
- Prior art keywords
- fundus image
- image
- point
- dimensional fundus
- dimensional
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000012545 processing Methods 0.000 title claims description 67
- 238000003672 processing method Methods 0.000 title claims description 32
- PWPJGUXAGUPAHP-UHFFFAOYSA-N lufenuron Chemical compound C1=C(Cl)C(OC(F)(F)C(C(F)(F)F)F)=CC(Cl)=C1NC(=O)NC(=O)C1=C(F)C=CC=C1F PWPJGUXAGUPAHP-UHFFFAOYSA-N 0.000 title 1
- 210000005252 bulbus oculi Anatomy 0.000 claims description 90
- 238000000034 method Methods 0.000 claims description 56
- 230000008569 process Effects 0.000 claims description 49
- 210000001508 eye Anatomy 0.000 claims description 44
- 230000004323 axial length Effects 0.000 claims description 24
- 238000006243 chemical reaction Methods 0.000 claims description 10
- 230000003287 optical effect Effects 0.000 description 60
- 238000005516 engineering process Methods 0.000 description 25
- 238000010586 diagram Methods 0.000 description 21
- 230000006870 function Effects 0.000 description 19
- 210000003462 vein Anatomy 0.000 description 19
- 238000012014 optical coherence tomography Methods 0.000 description 18
- 210000004204 blood vessel Anatomy 0.000 description 16
- 238000003384 imaging method Methods 0.000 description 15
- 230000003902 lesion Effects 0.000 description 15
- 238000001514 detection method Methods 0.000 description 14
- 230000009466 transformation Effects 0.000 description 14
- 210000000695 crystalline len Anatomy 0.000 description 12
- 206010025421 Macule Diseases 0.000 description 11
- 230000002093 peripheral effect Effects 0.000 description 9
- 239000011159 matrix material Substances 0.000 description 8
- 210000001210 retinal vessel Anatomy 0.000 description 8
- 238000004458 analytical method Methods 0.000 description 6
- 238000004891 communication Methods 0.000 description 6
- 238000001356 surgical procedure Methods 0.000 description 6
- 206010038848 Retinal detachment Diseases 0.000 description 5
- 238000005286 illumination Methods 0.000 description 5
- 230000004264 retinal detachment Effects 0.000 description 5
- 238000012360 testing method Methods 0.000 description 5
- 238000003745 diagnosis Methods 0.000 description 4
- 238000005259 measurement Methods 0.000 description 4
- 230000004048 modification Effects 0.000 description 4
- 238000012986 modification Methods 0.000 description 4
- 210000001747 pupil Anatomy 0.000 description 4
- 210000001525 retina Anatomy 0.000 description 4
- 238000004590 computer program Methods 0.000 description 3
- 239000000284 extract Substances 0.000 description 3
- 230000002792 vascular Effects 0.000 description 3
- 230000004304 visual acuity Effects 0.000 description 3
- 210000002294 anterior eye segment Anatomy 0.000 description 2
- 230000015572 biosynthetic process Effects 0.000 description 2
- 239000002131 composite material Substances 0.000 description 2
- 238000003786 synthesis reaction Methods 0.000 description 2
- 230000002194 synthesizing effect Effects 0.000 description 2
- 238000002604 ultrasonography Methods 0.000 description 2
- 208000010412 Glaucoma Diseases 0.000 description 1
- 230000002159 abnormal effect Effects 0.000 description 1
- 230000009471 action Effects 0.000 description 1
- 238000002583 angiography Methods 0.000 description 1
- 238000005452 bending Methods 0.000 description 1
- 210000003161 choroid Anatomy 0.000 description 1
- 210000004087 cornea Anatomy 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 230000004438 eyesight Effects 0.000 description 1
- 238000007726 management method Methods 0.000 description 1
- 239000012528 membrane Substances 0.000 description 1
- 230000019612 pigmentation Effects 0.000 description 1
- 230000000717 retained effect Effects 0.000 description 1
- 230000002207 retinal effect Effects 0.000 description 1
- 230000008685 targeting Effects 0.000 description 1
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
- A61B3/0016—Operational features thereof
- A61B3/0025—Operational features thereof characterised by electronic signal processing, e.g. eye models
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
- A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
- A61B3/102—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for optical coherence tomography [OCT]
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
- A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
- A61B3/12—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for looking at the eye fundus, e.g. ophthalmoscopes
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
- A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
- A61B3/14—Arrangements specially adapted for eye photography
- A61B3/15—Arrangements specially adapted for eye photography with means for aligning, spacing or blocking spurious reflection ; with means for relaxing
- A61B3/152—Arrangements specially adapted for eye photography with means for aligning, spacing or blocking spurious reflection ; with means for relaxing for aligning
Landscapes
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Engineering & Computer Science (AREA)
- Medical Informatics (AREA)
- Surgery (AREA)
- Biophysics (AREA)
- Biomedical Technology (AREA)
- Heart & Thoracic Surgery (AREA)
- Physics & Mathematics (AREA)
- Molecular Biology (AREA)
- Ophthalmology & Optometry (AREA)
- Animal Behavior & Ethology (AREA)
- General Health & Medical Sciences (AREA)
- Public Health (AREA)
- Veterinary Medicine (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Radiology & Medical Imaging (AREA)
- Signal Processing (AREA)
- Eye Examination Apparatus (AREA)
Description
眼科装置110の広角光学系で撮影されたUWF-SLO眼底画像は、眼球の網膜像を二次元平面にステレオ投影変換した画像である。眼底周辺部はステレオ投影変換によって眼底中心部に比べて距離や面積の歪が大きくなっている。よって、例えば渦静脈の眼底構造物や網膜剥離など、眼底周辺部や眼底赤道部に存在する構造物や病変領域の面積や形状が歪んで見える結果、これらの対象が周囲との関係において眼球上どの位置にあるのか、二次元眼底画像であるUWF-SLO眼底画像では把握しづらいという課題がある。
図7Bを用いて眼底赤道部174の説明をする。眼球(被検眼12)は、直径約24mmの眼球中心170とした球状の構造物である。その前極175と後極176を連ねる直線を眼球軸172と言い、眼球軸172に直交する平面が眼球表面と交わる線を緯線といい、緯線長が最大のものが赤道174である。赤道174の位置に相当する網膜や脈絡膜の部分を赤道部178とする。赤道部178は眼底周辺部の一部である。
Ymg=4Yg/(4+Xg2+Yg2)
Zmg=(-4+Xg2+Yg2)/(4+Xg2+Yg2)
なお、UWF眼底画像G1の全ての点(画素)ではなく、ユーザにより選択されたUWF眼底画像G1の網膜剥離などの病変を含む領域や、渦静脈を含む領域に対して、上記の変換を行ってもよい。
具体的には、まず、UWF眼底画像G1の各画素をデータ点とし、3次元座標のZ=-1となるXY平面に配置し、初期フレームが生成される(図11のf1に相当する処理である。図11は動画データの複数のフレームを説明するための図である。)。
次に、ステップ604で設定された軌跡のデータから、所定時間(Δt)経過後の位置に当該データ点を配置する。UWF眼底画像G1のデータ点すべてに対して当該データ点を配置することにより平面(曲面)を定義する。この平面のデータ点に対して画素データ(色と輝度のデータ)を入力し、所定時間(Δt)経過後の中間フレームが生成される(図11のfd、fh、fmに相当)。
続いて、中間フレームの生成を所定時間Δt1からΔtn(nは最終位置nとなるまでに生成されるフレーム数である)まで、同様に、フレーム作成を繰り返す。図11ではfnが最終フレームであり、各データ点が眼球モデルM上の点まで移動した状態のフレームである。
そして、フレーム1からnが完成したのち、フレーム番号、動画ファイル番号などを付加し、動画データが生成される。
平面の算出方法は線形補間、スプライン補間などを用いてもよい。平面の形状モデルは、サーフェイスモデルや空間格子モデルなどを用いてもよい。平面を算出せず、データ点に大きさをもたせ、散布図として表示してもよい。
3D眼底画像データは、UWF眼底画像G1を所定の眼球モデルに張り合わせるように変換し、変換したUWF眼底画像G1に虹彩や水晶体などの前眼部画像を合成して得られる、眼球のイメージ画像データである。3D眼球画像生成部1422は、UWF眼底画像G1の全ての点の画素が、各画素の点に対応する眼球モデルM上の点まで移動した後の画像(動画の最終フレーム)を3D眼球画像としてもよい。
このような特徴物の位置や領域は、UWF眼底画像G1上の座標データとして病変名や特徴物名と座標データを組み合わせて記憶装置254に保持されている。
ステップ606で、動画データを作成する際に、特徴物や病変の位置をマークしたUWF眼底画像G1から動画データを作成するようにしてもよい。
3D眼球画切替ボタン460が操作されると、図15に示すように、動画データ表示領域454A1は、3D眼底画像表示領域454A2に切り替わる。3D眼底画像表示領域454A2には、3D眼球画像が表示される。上記のように、UWF眼底画像G1を所定の眼球モデルに張り合わせるように変換し、変換したUWF眼底画像G1に虹彩や水晶体などの前眼部画像を合成して得られる、眼球のイメージ画像データである。
3D眼底画像表示領域454A2には、3D動画切替ボタン462が表示される。3D動画切替ボタン462が操作されると、図12の表示画面400Aに切り替わる。
よって、UWF眼底画像から生成された動画データをユーザ(眼科医)が閲覧することにより、眼底周辺部や眼底赤道部の眼球上での位置や病変の大きさ(病変領域の面積)を、ユーザが直感的に把握することができる。また、眼科医が被検者(患者)に対して病変の位置や大きさなどの診断結果をわかりやすく説明できる。
眼科装置110の撮影装置14は、制御装置16により制御され、図示しない上固視灯及び下固視灯(さらに図示せぬ中央固視灯を含む)を点灯させる固視標制御装置を備えている。中央固視灯、上固視灯及び下固視灯の何れかを点灯させることにより被検眼12の向き(視線方向)を変えることができる。
図16には、第2実施の形態のサーバ140のCPU262が画像処理プログラムを実行することで実現される各種機能のブロック図が示されている。第2実施の形態の画像処理プログラムは、第1実施の形態と比較すると、画像処理機能において、モンタージュ画像生成機能が追加されている。よって、CPU262がこの各機能を有する画像処理プログラムを実行することで、CPU262は、モンタージュ画像生成部1425として更に機能する。
UWF下方視眼底画像GDも同様に、B色眼底画像(UWF下方視眼底画像B)、G色眼底画像(UWF下方視眼底画像G)、R色眼底画像(UWF下方視眼底画像R)、IR眼底画像(UWF下方視眼底画像IR)、RGBカラー眼底画像(UWF下方視眼底画像RGB)、RGカラー眼底画像(UWF下方視眼底画像RG)がある。
UWF上方視眼底画像GUとUWF下方視眼底画像GDとが、眼科装置110によりサーバ140に送信され、記憶装置254に記憶される。
特徴点群1は、眼底画像における複数の特徴点であり、図19Aに示すように、視神経乳頭ONHU、黄斑MU、および網膜血管の分岐点である。なお、脈絡膜血管の分岐点も特徴点として抽出するようにしてもよい。
以下の各変形例の構成は、第1実施の形態の構成と同様であるので、その説明を省略する。各変形例の作用は、第1実施の形態の作用と略同様であるので、以下、主として異なる部分を説明する。第1実施の形態では、UWF眼底画像の各点の画素が眼球モデル上の対応する各点まで移動する過程を表す動画データが作成される。本開示の技術はこれに限定されない。
図24を用いて、第1変形例の画像処理を説明する。
ステップ2402で、画像取得部1410が、記憶装置254から、患者名IDに対応する2次元眼底画像(UWF眼底画像G1又はモンタージュ画像)を取得する。
ステップ2404で、3D動画生成部1421は、2次元眼底画像の各第1の点に対応する、眼軸長により補正された眼球モデルM上の各第2の点を取得する。
ステップ2406で、3D動画生成部1421は、各第1の点が、対応する第2の点から当該第1の点まで移動する過程を示すデータ(動画データ)を作成する。
ユーザは、UWF眼底画像の各第1の点が眼球モデル上の対応する各第2の点から第1の点まで、どのように移動するのかを知ることができる。
図25を用いて、第2変形例の画像処理を説明する。
第2変形例では、眼軸長により補正された眼球モデル上に2次元眼底画像(UWF眼底画像G1又はモンタージュ画像)がステレオ逆投影されることにより3次元眼底画像のデータが、予め生成され、患者名IDに対応して記憶装置245に記憶されている。
ステップ2502で、画像取得部1410が、記憶装置254から、患者名IDに対応する3次元眼底画像のデータを取得する。
ステップ2504で、3D動画生成部1421は、3次元眼底画像の各第1の点に対応する2次元眼底画像上の各第2の点を取得する。
ステップ2506で、3D動画生成部1421は、各第1の点が対応する第2の点まで移動する過程を示すデータ(動画データ)を作成する。
ユーザは、3次元眼底画像の各第1の点が、2次元眼底画像上の対応する各第2の点まで、どのように移動するのかを知ることができる。
図26を用いて、第3変形例の画像処理を説明する。
第3変形例では、第2変形例と同様に、3次元眼底画像のデータが、予め生成され、患者名IDに対応して記憶装置245に記憶されている。
ステップ2602で、画像取得部1410が、記憶装置254から、患者名IDに対応する3次元眼底画像のデータを取得する。
ステップ2604で、3D動画生成部1421は、3次元眼底画像の各第1の点に対応する2次元眼底画像上の各第2の点を取得する。
ステップ2606で、3D動画生成部1421は、各第1の点が、対応する第2の点から当該第1の点まで移動する過程を示すデータ(動画データ)を作成する。
ユーザは、3次元眼底画像の各第1の点が、2次元眼底画像上の対応する各第2の点から第1の点まで、どのように移動するのかを知ることができる。
上記各例における3次元眼底画像のデータは、眼球モデル上に2次元眼底画像(UWF眼底画像G1又はモンタージュ画像)がステレオ逆投影されることによりえられる。本開示の技術はこれに限定されない。例えば、OCTボリュームデータ、OCTアンジオグラフィデータ、MRI、超音波で得られた三次元眼底画像データあるいは前眼部などの三次元画像データであってもよい。
ユーザにより選択された少なくとも1つの点の画素の上記移動する動画データが作成されてもよい。
この場合、ユーザは、UWF眼底画像又はモンタージュ画像の領域を指定することにより、当該領域の複数の点を選択するようにしてもよい。
さらに、ユーザは、上記領域として、眼球の上記特徴部を指定することができる。具体的には、ユーザは、特徴部として、例えば、水晶体、眼底構造物、および病変部分等を指定することができる。
UWF-SLO画像またはモンタージュ画像(UWF-SLO眼底画像の合成画像)から得られた網膜血管画像または脈絡膜血管画像の各点の画素が眼球モデル上の対応する各点まで移動する過程を表す動画データが作成されてもよい。
また、UWF-SLO画像ではない、例えば、眼底カメラにより得られた眼底画像の各点の画素が眼球モデル上の対応する各点まで移動する過程を表す動画データが作成されてもよい。
前記2次元眼底画像の少なくとも1つの第1の点に対応する眼球モデル上の第2の点を取得する点取得部と、
前記第1の点の画素が前記第2の点まで移動する過程を示すデータを作成する作成部と、
を含む画像処理装置。
点取得部が、前記2次元眼底画像の少なくとも1つの第1の点に対応する眼球モデル上の第2の点を取得することと、
作成部が、前記第1の点の画素が前記第2の点まで移動する過程を示すデータを作成することと、
を含む画像処理方法。
(第3技術)
前記コンピュータープログラム製品は、それ自体が一時的な信号ではないコンピュータ可読記憶媒体を備え、
前記コンピュータ可読記憶媒体には、プログラムが格納されており、
前記プログラムは、
コンピュータに、
2次元眼底画像を取得し、
前記2次元眼底画像の少なくとも1つの第1の点に対応する眼球モデル上の第2の点を取得し、
前記第1の点の画素が前記第2の点まで移動する過程を示すデータを作成する、
ことを実行させる、
コンピュータープログラム製品。
Claims (35)
- プロセッサが行う画像処理方法であって、
2次元眼底画像を取得し、
前記2次元眼底画像を構成する画素のそれぞれの画素に対応する点の少なくとも1つである第1の点と、前記2次元眼底画像上の前記第1の点に対応する眼球モデル上の第2の点とを取得し、
前記第1の点が前記第2の点まで移動する経路を設定し、
前記経路上の前記画素の所定位置においてフレームを生成する、
画像処理方法。 - 前記所定位置は、前記第1の点が移動する前記経路上において所定時間毎に複数設定され、
前記フレームを生成することは、前記所定時間毎に複数のフレームを生成することを含む、
請求項1に記載の画像処理方法。 - 前記複数のフレームを生成することは、前記複数のフレームから構成される動画データを作成することを含む、
請求項2に記載の画像処理方法。 - 前記動画データは、前記第1の点におけるフレーム、前記第1の点から前記第2の点までの間に複数設定される中間位置におけるフレーム、及び前記第2の点におけるフレームを含む、
請求項3に記載の画像処理方法。 - 前記移動には、複数の移動パターンが予め定められており、
前記経路は、前記複数の移動パターンの中の選択された移動パターンに従った経路を示す、
請求項1から請求項4の何れか1項に記載の画像処理方法。 - 前記移動には、複数の移動パターンが予め定められており、
前記移動パターンは、前記第1の点と前記第2の点とを結ぶ3次元空間における前記経路である、
請求項1から請求項4の何れか一項に記載の画像処理方法。 - 前記経路は、前記第1の点と前記第2の点を結ぶ直線の経路である、
請求項1から請求項5の何れか一項に記載の画像処理方法。 - 前記移動パターンは、前記第1の点が、前記第2の点まで移動する移動速度に関するデータが含まれる、
請求項5又は請求項6に記載の画像処理方法。 - 前記第1の点は、前記2次元眼底画像上の複数の画素に対応する複数の点の中から選択された点である、
請求項1から請求項8の何れか1項に記載の画像処理方法。 - 前記第1の点が、前記2次元眼底画像における指定された領域内の各画素に対応する各点である、
請求項1から請求項9の何れか1項に記載の画像処理方法。 - 前記第1の点が、前記2次元眼底画像全体を構成する全ての画素の各画素に対応する各点である、
請求項1から請求項10の何れか1項に記載の画像処理方法。 - 前記眼球モデルは、デフォルトの眼球モデルを、眼軸長に従って補正されたモデルである、
請求項1から請求項11の何れか1項に記載の画像処理方法。 - 前記2次元眼底画像は、被検眼の視線を第1方向に向けた状態で撮影した第1方向眼底画像と、前記被検眼を前記第1方向と異なる第2方向に向けた状態で撮影した第2方向眼底画像と、を合成したモンタージュ画像である、
請求項1から請求項12の何れか1項に記載の画像処理方法。 - 動画データを作成することは、前記動画データを出力することを含み、
前記出力することは、前記動画データを前記2次元眼底画像に重畳した状態で出力することを含む、
請求項3から請求項13の何れか一項に記載の画像処理方法。 - 前記2次元眼底画像は正面視の画像であり、
前記重畳した状態で出力することは、
前記正面視の2次元眼底画像を斜視の2次元眼底画像に変換させる第1過程と、
前記動画データを前記斜視の2次元眼底画像に重畳した状態で出力することを含む、
請求項14に記載の画像処理方法。 - メモリと、前記メモリに接続するプロセッサとを備え、
前記プロセッサは、
2次元眼底画像を取得し、
前記2次元眼底画像を構成する画素のそれぞれの画素に対応する点の少なくとも1つである第1の点と、前記2次元眼底画像上の前記第1の点の位置に対応する眼球モデル上の第2の点とを取得し、
前記第1の点が前記第2の点まで移動する経路を設定し、
前記経路上の前記画素の所定位置においてフレームを生成する、
画像処理装置。 - コンピュータに、
2次元眼底画像を取得し、
前記2次元眼底画像を構成する画素のそれぞれの画素に対応する点の少なくとも1つである第1の点と、前記2次元眼底画像上の前記第1の点の位置に対応する眼球モデル上の第2の点とを取得し、
前記第1の点が前記第2の点まで移動する経路を設定し、
前記経路上の前記画素の所定位置においてフレームを生成する
ことを実行させるプログラム。 - 前記所定位置は、前記第1の点が移動する前記経路上において所定時間毎に複数設定され、
前記フレームを生成することは、前記所定時間毎に複数のフレームを生成することを含む、
請求項17に記載のプログラム。 - 前記複数のフレームを生成することは、前記複数のフレームから構成される動画データを作成することを含む、
請求項18に記載のプログラム。 - 前記動画データは、前記第1の点におけるフレーム、前記第1の点から前記第2の点までの間に複数設定される中間位置におけるフレーム、及び前記第2の点におけるフレームを含む、
請求項19に記載のプログラム。 - 前記移動には、複数の移動パターンが予め定められており、
前記経路は、前記複数の移動パターンの中の選択された移動パターンに従った経路を示す、
請求項17から請求項20の何れか1項に記載のプログラム。 - プロセッサが行う画像処理方法であって、
2次元眼底画像を取得し、
前記2次元眼底画像を構成する画素のそれぞれの画素に対応する点の少なくとも1つである第1の点と、前記2次元眼底画像上の前記第1の点の位置に対応する眼球モデル上の第2の点とを取得し、
前記第1の点が、前記第2の点から前記第1の点まで移動する経路を設定し、
前記経路上の前記画素の所定位置においてフレームを生成する、
画像処理方法。 - 前記フレームを出力することを更に含む、請求項22に記載の画像処理方法。
- プロセッサが行う画像処理方法であって、
3次元眼底画像を取得し、
前記3次元眼底画像を構成する画素のそれぞれの画素に対応する点の少なくとも1つの点である第1の点と、前記3次元眼底画像における第1の点の位置に対応する2次元眼底画像上の第2の点とを取得し、
前記第1の点が前記第2の点まで移動する経路を設定し、
前記経路上の前記画素の所定位置においてフレームを生成する、
画像処理方法。 - 前記2次元眼底画像は、前記3次元眼底画像をステレオ投影変換した画像である、
請求項24に記載の画像処理方法。 - プロセッサが行う画像処理方法であって、
3次元眼底画像を取得し、
前記3次元眼底画像を構成する画素のそれぞれの画素に対応する点の少なくとも1つの点である第1の点と、前記3次元眼底画像における第1の点の位置に対応する2次元眼底画像上の第2の点とを取得し、
前記第2の点が前記第1の点まで移動する経路を設定し、
前記経路上の前記画素の所定位置においてフレームを生成する、
画像処理方法。 - 前記2次元眼底画像は、前記3次元眼底画像をステレオ投影変換した画像である、請求項26に記載の画像処理方法。
- プロセッサが行う画像処理であって、
被検眼の2次元眼底画像を取得し、
前記2次元眼底画像を3次元眼底画像に変換する際に、前記2次元眼底画像に重畳された状態で、前記2次元眼底画像の全ての点の画素が、各画素の点に対応する3次元眼底画像上の点まで移動する過程を示す動画を生成する、ことを含む、
画像処理方法。 - 前記3次元眼底画像は、前記被検眼に対応した眼球モデルに基づいて生成されることを特徴とする
請求項28に記載の画像処理方法。 - 前記2次元眼底画像は正面視の画像であり、
前記動画は、
前記正面視の2次元眼底画像を斜視の2次元眼底画像に変化させる第1過程と、
前記斜視の2次元眼底画像に重畳された状態で、前記2次元眼底画像を前記3次元眼底画像に変換する第2過程と、を含む、
請求項28又は請求項29に記載の画像処理方法。 - 前記動画は、前記正面視の2次元眼底画像と前記変換が完了した3次元眼底画像とを一体画像として回転させる第3過程をさらに含む、
請求項30に記載の画像処理方法。 - メモリと、前記メモリに接続するプロセッサとを備え、
前記プロセッサは、
被検眼の2次元眼底画像を取得し、
前記2次元眼底画像を3次元眼底画像に変換する際に、前記2次元眼底画像に重畳された状態で、前記2次元眼底画像の全ての点の画素が、各画素の点に対応する3次元眼底画像上の点まで移動する過程を示す動画を生成する、ことを含む、
画像処理装置。 - コンピュータに、
被検眼の2次元眼底画像を取得し、
前記2次元眼底画像を3次元眼底画像に変換する際に、前記2次元眼底画像に重畳された状態で、前記2次元眼底画像の全ての点の画素が、各画素の点に対応する3次元眼底画像上の点まで移動する過程を示す動画を生成する、ことを含む、
ことを実行させるプログラム。 - 前記2次元眼底画像は正面視の画像であり、
前記動画は、
前記正面視の2次元眼底画像を斜視の2次元眼底画像に変化させる第1過程と、
前記斜視の2次元眼底画像に重畳された状態で、前記2次元眼底画像を前記3次元眼底画像に変換する第2過程と、を含む、
請求項33に記載のプログラム。 - 前記動画は、前記正面視の2次元眼底画像と前記変換が完了した3次元眼底画像とを一体画像として回転させる第3過程をさらに含む、
請求項34に記載のプログラム。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/JP2019/041982 WO2021079504A1 (ja) | 2019-10-25 | 2019-10-25 | 画像処理方法、画像処理装置、及びプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2021079504A1 JPWO2021079504A1 (ja) | 2021-04-29 |
JP7472914B2 true JP7472914B2 (ja) | 2024-04-23 |
Family
ID=75619737
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021553267A Active JP7472914B2 (ja) | 2019-10-25 | 2019-10-25 | 画像処理方法、画像処理装置、及びプログラム |
Country Status (3)
Country | Link |
---|---|
US (1) | US20230000337A1 (ja) |
JP (1) | JP7472914B2 (ja) |
WO (1) | WO2021079504A1 (ja) |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000210260A (ja) | 1999-01-22 | 2000-08-02 | Mitsubishi Electric Corp | 眼底画像システム |
JP2002034924A (ja) | 2000-07-19 | 2002-02-05 | Tohoku Techno Arch Co Ltd | ステレオ眼底画像からの眼底形状の3次元復元・表示 |
JP2006061196A (ja) | 2004-08-24 | 2006-03-09 | Institute Of Physical & Chemical Research | 3次元眼底画像の構築・表示装置 |
JP2009022308A (ja) | 2007-07-17 | 2009-02-05 | Kowa Co | 画像処理装置 |
JP2010256988A (ja) | 2009-04-21 | 2010-11-11 | Chiba Univ | 3次元画像生成装置、3次元画像生成方法、及びプログラム |
WO2019074077A1 (ja) | 2017-10-13 | 2019-04-18 | 株式会社ニコン | 眼科システム、画像信号出力方法、画像信号出力装置、プログラム、及び三次元眼底画像生成方法 |
-
2019
- 2019-10-25 WO PCT/JP2019/041982 patent/WO2021079504A1/ja active Application Filing
- 2019-10-25 US US17/770,878 patent/US20230000337A1/en active Pending
- 2019-10-25 JP JP2021553267A patent/JP7472914B2/ja active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000210260A (ja) | 1999-01-22 | 2000-08-02 | Mitsubishi Electric Corp | 眼底画像システム |
JP2002034924A (ja) | 2000-07-19 | 2002-02-05 | Tohoku Techno Arch Co Ltd | ステレオ眼底画像からの眼底形状の3次元復元・表示 |
JP2006061196A (ja) | 2004-08-24 | 2006-03-09 | Institute Of Physical & Chemical Research | 3次元眼底画像の構築・表示装置 |
JP2009022308A (ja) | 2007-07-17 | 2009-02-05 | Kowa Co | 画像処理装置 |
JP2010256988A (ja) | 2009-04-21 | 2010-11-11 | Chiba Univ | 3次元画像生成装置、3次元画像生成方法、及びプログラム |
WO2019074077A1 (ja) | 2017-10-13 | 2019-04-18 | 株式会社ニコン | 眼科システム、画像信号出力方法、画像信号出力装置、プログラム、及び三次元眼底画像生成方法 |
Also Published As
Publication number | Publication date |
---|---|
WO2021079504A1 (ja) | 2021-04-29 |
JPWO2021079504A1 (ja) | 2021-04-29 |
US20230000337A1 (en) | 2023-01-05 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
WO2013164943A1 (ja) | 眼科装置 | |
JP2023009530A (ja) | 画像処理方法、画像処理装置、及びプログラム | |
JP7134324B2 (ja) | 眼科撮影装置、その制御方法、プログラム、及び記録媒体 | |
JP7090438B2 (ja) | 眼科撮影装置、その制御方法、プログラム、及び記録媒体 | |
JP2023120308A (ja) | 画像処理方法、画像処理装置、及び画像処理プログラム | |
EP3984016A1 (en) | Systems and methods for superimposing virtual image on real-time image | |
US20220230371A1 (en) | Image processing method, image processing device and program memory medium | |
WO2021074960A1 (ja) | 画像処理方法、画像処理装置、及び画像処理プログラム | |
WO2023022183A1 (ja) | 眼科装置、制御方法、プログラム | |
JP7472914B2 (ja) | 画像処理方法、画像処理装置、及びプログラム | |
WO2021149430A1 (ja) | 眼科情報処理装置、眼科装置、眼科情報処理方法、及びプログラム | |
JP2019047842A (ja) | 情報処理装置、情報処理方法及びプログラム | |
JP2018023818A (ja) | 眼科観察装置 | |
JP7050488B2 (ja) | 眼科撮影装置、その制御方法、プログラム、及び記録媒体 | |
JP2021168759A (ja) | 画像処理方法、画像処理装置、及び画像処理プログラム | |
WO2021111840A1 (ja) | 画像処理方法、画像処理装置、及びプログラム | |
US11954872B2 (en) | Image processing method, program, and image processing device | |
JP7416083B2 (ja) | 画像処理方法、画像処理装置、およびプログラム | |
JP2020031873A (ja) | 眼科装置、その制御方法、プログラム、及び記録媒体 | |
WO2022177028A1 (ja) | 画像処理方法、画像処理装置、及びプログラム | |
WO2023282339A1 (ja) | 画像処理方法、画像処理プログラム、画像処理装置及び眼科装置 | |
JP2019058493A (ja) | レーザ治療装置、眼科情報処理装置、及び眼科システム | |
WO2021210295A1 (ja) | 画像処理方法、画像処理装置、及びプログラム | |
JP2018023816A (ja) | 眼科観察装置 | |
JP7380013B2 (ja) | 眼科装置、眼科装置の制御方法及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220425 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230606 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230807 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20231031 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20231220 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20240312 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240325 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7472914 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |