JP7103564B2 - 眼科撮像システム - Google Patents

眼科撮像システム Download PDF

Info

Publication number
JP7103564B2
JP7103564B2 JP2020170096A JP2020170096A JP7103564B2 JP 7103564 B2 JP7103564 B2 JP 7103564B2 JP 2020170096 A JP2020170096 A JP 2020170096A JP 2020170096 A JP2020170096 A JP 2020170096A JP 7103564 B2 JP7103564 B2 JP 7103564B2
Authority
JP
Japan
Prior art keywords
eye
image
region
imaging device
viewpoint
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2020170096A
Other languages
English (en)
Other versions
JP2021074529A (ja
JP2021074529A5 (ja
Inventor
ハースト ダニエル
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Optos PLC
Original Assignee
Optos PLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Optos PLC filed Critical Optos PLC
Publication of JP2021074529A publication Critical patent/JP2021074529A/ja
Publication of JP2021074529A5 publication Critical patent/JP2021074529A5/ja
Application granted granted Critical
Publication of JP7103564B2 publication Critical patent/JP7103564B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B3/00Apparatus for testing the eyes; Instruments for examining the eyes
    • A61B3/10Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
    • A61B3/1025Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for confocal scanning
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B3/00Apparatus for testing the eyes; Instruments for examining the eyes
    • A61B3/10Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
    • A61B3/102Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for optical coherence tomography [OCT]
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B3/00Apparatus for testing the eyes; Instruments for examining the eyes
    • A61B3/10Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
    • A61B3/12Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for looking at the eye fundus, e.g. ophthalmoscopes
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B3/00Apparatus for testing the eyes; Instruments for examining the eyes
    • A61B3/0016Operational features thereof
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B3/00Apparatus for testing the eyes; Instruments for examining the eyes
    • A61B3/10Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
    • A61B3/14Arrangements specially adapted for eye photography
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B3/00Apparatus for testing the eyes; Instruments for examining the eyes
    • A61B3/10Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
    • A61B3/14Arrangements specially adapted for eye photography
    • A61B3/15Arrangements specially adapted for eye photography with means for aligning, spacing or blocking spurious reflection ; with means for relaxing
    • A61B3/156Arrangements specially adapted for eye photography with means for aligning, spacing or blocking spurious reflection ; with means for relaxing for blocking
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/002D [Two Dimensional] image generation
    • G06T11/003Reconstruction from projections, e.g. tomography
    • G06T11/008Specific post-processing after tomographic reconstruction, e.g. voxelisation, metal artifact correction
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/50Image enhancement or restoration using two or more images, e.g. averaging or subtraction
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/70Denoising; Smoothing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10072Tomographic images
    • G06T2207/10101Optical tomography; Optical coherence tomography [OCT]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20212Image combination
    • G06T2207/20221Image fusion; Image merging
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30004Biomedical image processing
    • G06T2207/30041Eye; Retina; Ophthalmic

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Animal Behavior & Ethology (AREA)
  • Molecular Biology (AREA)
  • Veterinary Medicine (AREA)
  • Public Health (AREA)
  • Biophysics (AREA)
  • Ophthalmology & Optometry (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • General Health & Medical Sciences (AREA)
  • Surgery (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Radiology & Medical Imaging (AREA)
  • Eye Examination Apparatus (AREA)
  • Image Processing (AREA)

Description

本明細書の例示的な態様は、一般に、被検者の眼の画像を取得するための眼科撮像システムの分野に関し、より詳細には、取得された画像を組み合わせることによって眼の強調画像を生成するための技法に関する。
眼撮像の分野では、例えば、信号対雑音比を増大させることによって画質を改善するために、画素平均化を使用して眼の共通領域(例えば、網膜)の画像を結合することが知られている。このアプローチは、多くの異なる用途で使用されてきた。例えば、いくつかの眼科装置は、走査型レーザ検眼鏡(SLO)機能を光干渉断層撮像(OCT)機能と組み合わせて、網膜表面の2次元SLO画像を取得し、同時に、網膜表面下の網膜の3次元画像を生成するための断層撮像データを取得する。このような複合SLO/OCT撮像システムでは、眼球運動を追跡するために高フレームレートSLO画像が使用されており、取得された眼球追跡情報は、OCT走査位置を安定化するために使用されている。複数のSLO画像を平均化することによって、画像位置合わせ及び視線追跡の品質を改善することができ、対象となる対象領域の高品質のOCT走査を取得することが可能になる。
本明細書の第1の例示的な態様によれば、被検者の眼の領域の画像を生成するための眼科撮像システムが提供される。眼科撮像システムは、領域の眼の画像を取得するように動作可能な眼撮像装置を備える。眼科撮像システムは、さらに、領域に関する第1の視点から、第1の眼の画像の取得中に、眼撮像装置と領域との間の物体による領域の一部の画像からの妨害によって引き起こされる画像アーチファクトを有する領域の第1の眼の画像を取得するように、眼撮像装置を制御するように構成された制御モジュールを備える。制御モジュールは、第1の視点とは異なる所定の第2の視点から第2の眼の画像を取得するように眼撮像装置を制御するようにさらに構成され、第2の眼の画像は、第1の眼の画像の取得中に画像から物体によって妨害された領域の部分の少なくとも一部を示す。眼科撮像システムは、第1の眼の画像の画像データを第2の眼の画像の画像データと組み合わせて、高画質化された眼の画像を生成するように構成された画像データ処理モジュールをさらに備える。高画質化された眼の画像は、第1の眼の画像又は第2の眼の画像の取得中に、眼撮像装置と領域との間の物体による領域の一部の画像からの妨害によって引き起こされる画像アーチファクトを有さない、又は、第1の眼の画像における画像アーチファクト、若しくは、第2の眼の画像の取得中に眼撮像装置と領域との間の物体による領域の一部の画像からの妨害によって引き起こされる、第2の眼の画像における画像アーチファクトのうちの少なくとも1つに基づき、かつ第1の眼の画像における画像アーチファクト又は第2の眼の画像における画像アーチファクトのうちの少なくとも1つに関してより小さい画像アーチファクトを有する
本明細書の第2の例示的な態様によれば、被検者の眼の領域の画像を生成するための眼科撮像システムが提供される。眼科撮像システムは、光検出器素子の2次元アレイを有し、視点から領域の眼の画像を取得するように動作可能な眼撮像装置を備える。光検出器素子の各光検出器素子は、2次元アレイの第2のアレイ方向に沿った第2の長さと異なる2次元アレイの第1のアレイ方向に沿った第1の長さ、又は第1のアレイ方向に隣接する第1の隣接する光検出器素子からの、第2のアレイ方向に隣接する第2の隣接する光検出器素子からの光検出器素子の第2の分離とは異なる、第1の分離のうちの少なくとも1つを有する。眼科撮像システムは、眼及び視点を通過する回転軸の周りで眼撮像装置を回転させるように構成された回転機構と、視点から、第1の眼の画像の取得中に、眼撮像装置と領域との間の物体による領域の一部の画像からの妨害によって引き起こされる画像アーチファクトを有する領域の第1の眼の画像を取得するように、眼撮像装置を制御するように構成された制御モジュールと、眼撮像装置を回転軸の周りで回転させるように制御する回転機構と、を備え、眼撮像装置の回転に続いて、視点から第2の眼の画像を取得するように眼撮像装置を制御し、第2の眼の画像は、第1の眼の画像の取得中に、画像化された物体によって妨害された領域の部分の少なくとも一部を示す。眼科撮像システムは、第1の眼の画像の画像データを第2の眼の画像の画像データと組み合わせて、第1の眼の画像又は第2の眼の画像の取得中に、眼撮像装置と領域との間の物体による領域の一部の画像からの妨害によって引き起こされる画像アーチファクトを有さない、又は、第1の眼の画像における画像アーチファクト、若しくは、第2の眼の画像の取得中に眼撮像装置と領域との間の物体による領域の一部の画像からの妨害によって引き起こされる、第2の眼の画像における画像アーチファクトのうちの少なくとも1つに基づかつ第1の眼の画像における画像アーチファクト又は第2の眼の画像における画像アーチファクトのうちの少なくとも1つに関してより小さい画像アーチファクトを有する高画質化された眼の画像を生成するように構成された画像データ処理モジュールをさらに備える。
本明細書の第3の例示的な態様によれば、コンピュータプログラムがプロセッサによって実行されると、プロセッサに、被検者の眼の領域の画像を取得するように動作可能な眼撮像装置を備える眼科撮像システムを制御させる命令を備えるコンピュータプログラムが提供される。コンピュータプログラムがプロセッサによって実行される場合、命令は、プロセッサに、領域に関する第1の視点から、第1の眼の画像の取得中に、眼撮像装置と領域との間の物体による領域の一部の画像からの妨害によって引き起こされる画像アーチファクトを有する領域の第1の眼の画像を取得するように、眼撮像装置を制御することと、第1の視点とは異なる所定の第2の視点から第2の眼の画像を取得するように眼撮像装置を制御することと、第2の眼の画像が、第1の眼の画像の取得中に、画像化された物体によって妨害された領域の部分の少なくとも一部を示すことと、第1の眼の画像の画像データを第2の眼の画像の画像データと組み合わせて、第1の眼の画像又は第2の眼の画像の取得中に、眼撮像装置と領域との間の物体による領域の一部の画像からの妨害によって引き起こされる画像アーチファクトを有さない、又は、第1の眼の画像における画像アーチファクト、若しくは、第2の眼の画像の取得中に眼撮像装置と領域との間の物体による領域の一部の画像からの妨害によって引き起こされる、第2の眼の画像における画像アーチファクトのうちの少なくとも1つに基づかつ第1の眼の画像における画像アーチファクト又は第2の眼の画像における画像アーチファクトのうちの少なくとも1つに関してより小さい画像アーチファクト有する、高画質化された眼の画像を生成することと、によって眼科撮像システムを制御させる。
さらに、本明細書の第4の例示的な態様によれば、コンピュータプログラムがプロセッサによって実行されるとき、プロセッサに、光検出器素子の2次元アレイを含み、視点から領域の眼の画像を取得するように動作可能な眼撮像装置を備える眼科撮像システムを制御させる命令を含むコンピュータプログラムも提供され、光検出器素子の各光検出器素子は、2次元アレイの第2のアレイ方向に沿った第2の長さと異なる2次元アレイの第1のアレイ方向に沿った第1の長さ、又は第1のアレイ方向に隣接する第1の隣接する光検出器素子からの、第2のアレイ方向に隣接する第2の隣接する光検出器素子からの光検出器素子の第2の分離とは異なる、第1の分離のうちの少なくとも1つを有する。眼科撮像システムは、眼及び視点を通過する回転軸の周りで眼撮像装置を回転させるように構成された回転機構をさらに備える。命令は、コンピュータプログラムがプロセッサによって実行されるとき、プロセッサに、視点から、第1の眼の画像の取得中に、眼撮像装置と領域との間の物体による領域の一部の画像からの妨害によって引き起こされる画像アーチファクトを有する領域の第1の眼の画像を取得するように、眼撮像装置を制御させることと、眼撮像装置を回転軸の周りで回転させるように、回転機構を制御させることと、眼撮像装置の回転に続いて、視点から第2の眼の画像を取得するように眼撮像装置を制御し、第2の眼の画像は、第1の眼の画像の取得中に、画像化された物体によって妨害された領域の部分の少なくとも一部を示すことと、によって眼科撮像システムを制御する。命令は、コンピュータプログラムがプロセッサによって実行されるとき、プロセッサに、第1の眼の画像の画像データを第2の眼の画像の画像データと組み合わせて、第1の眼の画像又は第2の眼の画像の取得中に、眼撮像装置と領域との間の物体による領域の一部の画像からの妨害によって引き起こされる画像アーチファクトを有さない、又は、第1の眼の画像における画像アーチファクト、若しくは、第2の眼の画像の取得中に眼撮像装置と領域との間の物体による領域の一部の画像からの妨害によって引き起こされる、第2の眼の画像における画像アーチファクトのうちの少なくとも1つに基づき、かつ第1の眼の画像における画像アーチファクト又は第2の眼の画像における画像アーチファクトのうちの少なくとも1つに関してより小さい画像アーチファクト有する、高画質化された眼の画像を生成させる。
例示的な実施形態は、以下に記載される添付の図面を参照して、非限定的な例としてのみ、ここで詳細に説明される。図の異なるものに現れる同様の参照番号は、別段の指示がない限り、同一又は機能的に同様の要素を示すことができる。
本明細書の第1の実施形態に係る眼科撮像システムの概略図である。 例示的な実施形態に係る、眼の撮像を実行するための2つの異なる視点と、2つの視点から取り込まれたそれぞれの眼の画像の概略図とを示す。 図1に示した制御モジュール及び画像データ処理モジュールのハードウェア実装の一例を示す。 本明細書の第1の実施形態に係る眼科撮像システムによって実行される処理のフローチャートを示す。 本明細書の第1の実施形態に係る、第1の視点から第1のSLO画像を取得するSLO撮像装置の例(A)、所定の第2の視点から第2のSLO画像を取得する図5(A)のSLO撮像装置(B)を示す。 SLO撮像装置の2つの異なる視点に対するまつげの異なる向きを示す。 走査位置に基づいてSLO撮像装置の視点を移動させるために必要な移動ベクトルを決定するためのマッピングテーブルを示す。 図5(A)に示す第1の視点から取得された第1のSLO画像の一部(A)、図5(B)に示す第2の視点から取得された第2のSLO画像の一部(B)、図6(A)及び6(B)に示される第1及び第2のSLO画像の部分から生成される高画質化されたSLO画像の一部(C)を示す。 2つの取得されたSLO画像の位置合わせ(A)、高画質化されたSLO画像の対応する画素を生成するために使用される、図9(A)のSLO画像のうちの第1のSLO画像内の強調された画素(B)、図9(A)のSLO画像の第2の画像における強調された画素(C)を示し、(C)は、位置合わせされた第1及び第2のSLO画像間の重複領域における図9(B)の強調された画素に対応して配置される。 第1の実施形態において、縮小された画像アーチファクトを有する高画質化された眼の画像を生成する方法を示す。 本明細書の別の実施形態において、縮小された画像アーチファクトを有する高画質化された眼の画像を生成する代替的な方法を示す。 本明細書の別の実施形態において、縮小された画像アーチファクトを有する強調画像を生成するさらなる代替の方法を示す。 本明細書の第2の実施形態に係る、第2の所定の視点から第2の眼の画像を取得する眼撮像装置を示す。 本明細書の第3の実施形態に係る眼科撮像システムの概略図である。 本明細書の第4の実施形態に係る眼科撮像システムの概略図である。 眼に関する第1の視点から第1の眼の画像を取得する第4の実施形態に係る眼撮像装置の概略図(A)、眼に関する所定の第2の視点から第2の眼の画像を取得する第4の実施形態に係る眼撮像装置の概略図(B)である。 第6の実施形態に係る眼科撮像システムの一例を示す。 第6の実施形態に係る、撮像装置を、眼撮像装置及び眼の視点を通る軸の周りに回転させた後に、同じ視点からさらなる眼の画像を取り込む方法を示す。 眼の画像を捕捉するための光検出器素子の2次元アレイの第1の実施例(A)、眼の画像を捕捉するための光検出器素子の2次元アレイの第2の実施例(B)を示す。 第6の実施形態に係る制御モジュール及び画像データ処理モジュールの処理を示すフローチャートである。 第6の実施形態に係る眼撮像装置の光検出器アレイの照明において、光検出器アレイの一部を覆い隠す影を含む照明パターンを示す図(A)、光検出器アレイが図21(A)に示すような照明パターンで照明されたときに、その光検出器アレイによって検出された光に基づいて眼撮像装置によって取得された第1の眼の画像(B)、図21(A)の例と同様の照明パターンで、時計回りに90度回転させた後の、第6の実施形態に係る眼撮像装置の光検出器アレイの照明を示す図(C)、光検出器アレイが回転され、図21(C)に示すような照明パターンで照明されたときに、その光検出器アレイによって検出された光に基づいて、眼撮像装置によって取得された第2の眼の画像(D)を示す。
眼の領域、例えば、眼の網膜又は前方部分の撮像中に、眼と撮像装置との間に位置する介在物体(例えば、眼のまつげ、虹彩若しくは瞼、又は被検者の頭部からの毛)は、撮像処理から得られる有用な情報の量の減少をもたらすことができる。例えば、まつげは、走査型レーザ検眼鏡又は他の種類の眼スキャナからの入射走査ビームが眼の網膜上の目標領域に伝播することを妨げ、「まつげ影」の形態の望ましくない画像アーチファクトが取得された眼の画像に現れることを引き起こす可能性がある。典型的なSLO網膜走査の間、まつげは、画像視野の約3分の1を覆い隠し、取得された画像内の網膜コンテンツの量を著しく低減することができる。同様の問題は、他の種類の眼の画像においても生じる。例えば、前眼部を撮像する場合、まつげの画像を前眼部の取得画像に重ね合わせることができ、その結果、前眼部自体の視認性が低下する。
眼の画像を取得し、本明細書に記載される取得された眼の画像を組み合わせる技術は、有利なことに、上述の種類の画像アーチファクトが低減されるか、又は完全に除去され、眼の画像化された領域のより多くが画像において可視であることを可能にする、高画質化された眼の画像が生成されることを可能にすることができる。以下でより詳細に説明するように、眼の画像は、異なる観測点(すなわち、視点又は見方)から眼撮像装置によって取得され、視差効果によって、まつげ又は他の介在物体の画像アーチファクトが、取得された画像内の異なるそれぞれの位置に現れるようになる。次いで、これらの眼の画像は、それらの非アーチファクト関連画像コンテンツが互いに補完するように、高画質化された眼の画像を生成するために組み合わされ、高画質化された眼の画像における画像アーチファクトは、取得された画像におけるアーチファクトに対して(例えば、空間的な広がり及び/又は平均画素強度において)低減されるか、又は完全に除去される。本明細書の実施形態の眼科撮像システムは、2つ以上の視点から、制御された方法で物体を「見回す」ことが効果的に可能であり、したがって、単一の視点から達成することができるよりも多くの眼の目標部分を撮像することができる。
このようにして生成された高画質化された眼の画像は、様々な用途に使用することができる。例えば、このようにして組み合わされたSLO/OCT撮像システムによって取得されたSLO画像を改善することにより、上述のSLO画像位置合わせ及び視線追跡の信頼性を改善することができ、組み合わされたSLO/OCT撮像システムのOCTスキャナの撮像領域を所望の目標位置により正確に維持することができ、したがって、改善されたOCT画像を生成することができる。
以下、本発明の実施形態について、図面を参照しながら詳細に説明する。
第1の実施形態
図1は、眼撮像装置1と、制御モジュール2と、画像データ処理モジュール3とを備える、本明細書の第1の実施形態に係る眼科撮像システム10の概略図である。眼科撮像システム10は、本実施形態のように、移動制御モジュール4を更に含むことができる。図2を参照すると、眼科撮像システム10の眼撮像装置1は、第1の視点60からの眼80の領域40の第1の眼の画像61と、第2の異なる視点70からの第2の眼の画像71とを捕捉するように動作可能である。
眼撮像装置1は、本実施形態のように、SLOの形態であってもよい。しかしながら、眼撮像装置1は、SLOに限定されず、代わりに、眼80の網膜又は前眼部を撮像するように構成されてもよい、眼カメラのような、任意の他の種類の眼撮像装置の形態であってもよい。本実施例では、眼撮像装置1によって撮像された眼80の領域40は、網膜の一部であるが、他の実施例では、領域40は、代替的に、例えば、角膜又は前眼部の別の構造のような眼80の別の部分であってもよい。SLO及び他の一般的な眼科撮像システムの詳細は、当業者には周知であるので、ここではこれ以上説明しない。
図2を参照すると、制御モジュール2は、領域40に関する第1の視点60から、第1の眼の画像61の取得中に、眼撮像装置1と領域40との間に位置する物体50による領域40の一部の画像からの妨害によって引き起こされる画像アーチファクト62を有する領域40の第1の眼の画像61を取得するように、眼撮像装置1を制御するように構成される。物体50は、眼80と眼撮像装置1との間に位置し、眼撮像装置1が、物体によって視界から覆い隠される眼80の領域40の一部を撮像することを防止する任意の物体であってよい。本例では、物体50は、まつげの形態をとるが、代替的に、例えば、被検者の頭からの毛であってもよい。
所定の第2の視点70から眼撮像装置1によって取得される第2の眼の画像71は、第1の眼の画像61の取得中に画像から物体50によって妨害された領域40の部分の少なくとも一部を示す。図2に示すように、第1の視点60及び所定の第2の視点70は、眼80の領域40が異なる方向から撮像されるように配置されてもよい。しかしながら、第1及び第2の視点60及び70は、代わりに、眼80の領域40が共通の方向から撮像され、視点のうちの1つが他の視点よりも領域40に近いように配置されてもよいことに留意されたい。この後者の場合、物体50によって画像から覆い隠される領域40のサイズは、物体50によって満たされる眼撮像装置の視野の割合が、領域40への視点の距離が減少するにつれて増加するにつれて、領域40からの視点の距離に依存する。
画像データ処理モジュール3は、第1の眼の画像61の画像データを第2の眼の画像71の画像データと組み合わせて、高画質化された眼の画像を生成するように構成される。高画質化された眼の画像は、第1の眼の画像61又は第2の眼の画像71の取得中に、物体50による眼80の領域40の一部の画像からの妨害によって引き起こされる画像アーチファクトを有さないことがある。あるいは、高画質化された眼の画像は、第1の眼の画像61における画像アーチファクト、又は、第2の眼の画像71の取得中に眼撮像装置1と領域40との間の物体50による領域40の一部の画像からの妨害によって引き起こされる、第2の眼の画像71における画像アーチファクトのうちの少なくとも1つに基づく画像アーチファクトを有することができる。そのような場合、高画質化された眼の画像の画像アーチファクトは、第1の眼の画像61における画像アーチファクト又は第2の眼の画像71における画像アーチファクトのうちの少なくとも1つに関して、例えば、その空間的広がり及び/又はその平均画素強度において、より小さくなる。
(任意選択の)移動制御モジュール4は、眼80の領域40に対する眼撮像装置1の視点の動きを制御するように動作可能である。制御モジュール2は、移動制御モジュール4を制御して、第1の眼の画像61の取得に続いて眼80の領域40に対する眼撮像装置1の視点の所定の移動を引き起こすように構成され、その結果、眼撮像装置1は、移動に続いて、所定の第2の視点70から第2の眼の画像71を取得するように構成される。所定の移動に続いて、制御モジュール2は、所定の第2の視点70から第2の眼の画像71を取得するように眼撮像装置1を制御するようにさらに構成される。
移動制御モジュール4は、本実施形態のように、領域40に対する眼撮像装置1の視点を3つの異なる移動軸の少なくとも1つに沿った方向に移動させることによって、領域40に対する眼撮像装置1の視点の所定の移動を行うように動作可能な移動機構5を備えてもよい。移動軸は、本実施形態のように、直交していてもよいが、これに限定されるものではない。
しかしながら、他の実施形態では、移動機構は、代わりに、3つの異なる回転軸のうちの少なくとも1つの周りで眼撮像装置1の視点を回転させることによって、領域40に対して眼撮像装置1の視点を移動させるように動作可能であってもよい。回転軸は、任意の方向に延在してもよく、被検者の眼80を通過してもよいし、通過しなくてもよい。このように、眼撮像装置1の視点は、直線に沿って移動するのではなく、円弧に沿って移動してもよい。移動機構は、より一般的には、第1の視点60から第2の視点70までの任意の経路に沿って眼撮像装置1の視点を移動させることができる。
制御モジュール2は、さらに、移動制御モジュール4に、所定の移動を行わせるように移動機構5を制御させるように構成されている。
眼撮像装置1、制御モジュール2、画像データ処理モジュール3、及び移動制御モジュール4は、バス20などの任意の適切な通信接続によって互いに接続され、これらのモジュール間で様々な情報を交換することができる。
眼科撮像システム10は、複数の異なる所定の視点から眼80を撮像して、それぞれの異なる視点から画像を取得し、異なる視点からの画像を組み合わせて、物体50によって引き起こされる画像アーチファクトの出現が除去又は低減される強調画像を生成することによって、眼撮像装置1の視野内の物体50によって引き起こされる画像アーチファクトの出現を抑制することができる。
図3は、プログラマブル信号処理ハードウェアにおける、図1の制御モジュール2及び画像データ処理モジュール3の例示的な実装を示す。図3に示す信号処理装置は、バス20を介して眼撮像装置1及び移動制御モジュール4に制御信号を送信するとともに、眼撮像装置1から取得した画像データを受信する通信インターフェース(I/F)110を備えている。信号処理装置100は、眼科撮像システム10の全体的な動作を制御するためのプロセッサ(CPU)120と、ワーキングメモリ130(例えば、ランダムアクセスメモリ)と、プロセッサ120によって実行されると、眼科撮像システム10を制御するために以下に説明する処理動作をプロセッサ120に実行させるコンピュータ可読命令を含むコンピュータプログラム190を記憶する命令ストア140とをさらに備える。命令ストア140は、コンピュータ可読命令が予めロードされたROM(例えば、電気的消去可能プログラマブル読み出し専用メモリ(EEPROM)又はフラッシュメモリの形態の)を含むことができる。あるいは、命令ストア140は、RAM又は同様の種類のメモリを備えることができ、コンピュータ可読命令は、CD-ROMなどのコンピュータ可読記憶媒体150、又はコンピュータ可読命令を搬送するコンピュータ可読信号160など、コンピュータプログラム製品から入力することができる。
本実施形態では、プロセッサ120、ワーキングメモリ130、及び命令ストア140を備える、図3に示すハードウェア構成要素の組合せは、制御モジュール2及び画像データ処理モジュール3の機能を実施するように構成され、これについては、図4から図12を参照して以下で詳細に説明する。
図4は、第1の実施形態に係る制御モジュール2及び画像データ処理モジュール3によって実行される処理を説明するための図である。図3の処理S10において、制御モジュール2は、第1の視点60から領域40の第1の眼の画像61を取得するように眼撮像装置1を制御し、第1の眼の画像61は、第1の眼の画像61の取得中に、眼撮像装置1と領域40との間の物体50による領域40の一部の画像からの妨害によって引き起こされる、図2に示される画像アーチファクト62を有する。
図4の処理S20において、制御モジュール2は、第1の視点60とは異なる所定の第2の視点70から第2の眼の画像71を取得するように、眼撮像装置1を制御する。第2の眼の画像71は、第1の眼の画像61の取得中に画像から物体50によって妨害された眼80の領域40の部分の少なくとも一部を示す。
図4の処理S20において、制御モジュール2は、本実施形態のように、眼80の領域40に対する眼撮像装置1の視点の所定の移動を引き起こすように移動制御モジュール4を制御し、眼撮像装置1が、所定の移動に続いて、所定の第2の視点70から第2の眼の画像71を取得するように構成されてもよい。所定の移動に続いて、制御モジュール2は、眼撮像装置1を制御して、所定の第2の視点70から領域40の少なくとも一部の第2の眼の画像71を取得する。
図4の処理S30において、画像データ処理モジュール3は、第1の眼の画像61の画像データを第2の眼の画像71の画像データと組み合わせて、高画質化された眼の画像を生成する。生成された高画質化された眼の画像は、第1の眼の画像61又は第2の眼の画像71の取得中に、物体50による眼80の領域40の一部の画像からの妨害によって引き起こされる画像アーチファクトを有さないことがある。あるいは、高画質化された眼の画像は、第1の眼の画像61における画像アーチファクト、又は、第2の眼の画像71の取得中に眼撮像装置1と領域40との間の物体50による眼80の領域40の一部の画像からの妨害によって引き起こされる、第2の眼の画像71における画像アーチファクトのうちの少なくとも1つに基づく画像アーチファクトを有してもよく、第1の眼の画像61における画像アーチファクト又は第2の眼の画像71における画像アーチファクトのうちの少なくとも1つに関してより小さい(例えば、空間的広がり及び/又はその平均画素強度において)。
図5(A)及び図5(B)は、第1の実施形態に係る眼科撮像システム10によって実行される撮像動作を示す。図5(A)及び図5(B)の例では、眼撮像装置1は、一例として、SLO撮像装置200の形態で提供される。SLO撮像装置200は、例えば、水平及び垂直走査ミラーを用いて網膜85上にレーザビーム95をラスタパターンで向け、共焦点フィルタ及び光検出器を用いて網膜85上の各走査点から反射された光を検出することによって、(眼80の撮像領域の一例としての)網膜85の画像を生成するように構成される。SLO撮像装置200は、例えば、米国5,815,242に記載されているような種類の広視野撮像のための光学的取決めを採用することができる。その内容は、これら全体を参照して本文書に盛り込むことができる。
本実施形態では、移動制御モジュール4は、3つの異なる移動軸のうちの少なくとも1つに沿って眼80に対してSLO撮像装置200の視点を移動させるように構成された移動機構5を備える。説明の便宜上、3つの移動軸は、図5(A)及び5(B)に示すように、「X」、「Y」及び「Z」と呼ばれ、直交している(一般に直交する必要はないが)。移動機構5の形態は限定されず、本実施形態のように、例えばラックアンドピニオン又は他の駆動装置(図示せず)を使用して、SLO撮像装置200をそれぞれの移動軸に沿って移動させるように構成された1つ又は複数のステッパモータ(図示せず)の形態をとることができる。
図5(A)では、網膜85に関する第1の視点は、眼80の瞳孔がSLO撮像装置200の焦点と横方向に位置合わせされ、眼80がSLO撮像装置200から所定の撮像距離に位置付けられるとき、網膜85に関するSLO撮像装置200の視点とみなされる。まつげ90の形態の物体は、網膜85の領域がSLO撮像装置200によって撮像されるのを妨げる。瞳孔とSLO撮像装置200の焦点との位置合わせを確立した後(これは、当業者に周知の多くの種類のうちの1つの瞳孔位置合わせモジュール(PAM)を使用して行うことができる)、SLO撮像装置200は、制御モジュール2によって制御されて、光ビーム95を網膜85上の関心のある目標領域を横切って、例えばラスタパターンで走査することによって、第1の視点から第1のSLO画像を捕捉する。SLO撮像装置200内の光検出器(図示せず)は、走査中に反射光を繰り返し検出し、得られた画像データは、SLO撮像装置200によってコンパイルされて、第1のSLO画像を形成する。
図8(A)は、図5(A)に示す第1の視点からSLO撮像装置200によって取り込まれた網膜85の第1のSLO画像の断面(スライス)25を示す。SLO走査ビーム95が網膜85の一部に到達するのを防止するまつげ90の存在により、影領域の形態の画像アーチファクト30が第1のSLO画像上に形成され、第1のSLO画像の断面内の網膜情報の量を低減する。
第1のSLO画像を取得した後、制御モジュール2は、第2の所定の視点から第2の眼の画像71を取得できるようにSLO撮像装置200を配置するために、3つの異なる移動軸のうちの少なくとも1つに沿って網膜85に関するSLO撮像装置200の視点の所定の移動を行うように、又はSLO撮像装置200の視点を3つの異なる回転軸のうちの少なくとも1つの周りに回転させることによって、移動制御モジュール4を制御する。図5(B)に示すように、制御モジュール2は、移動制御モジュール4を制御して、SLO撮像装置200をX軸に沿って所定距離だけ網膜85に対して所定の第2の視点まで変位させた後、SLO撮像装置200を制御して、所定の第2の視点から第2のSLO画像を取得する。
図5(B)は、X軸に沿って所定距離だけ変位させるSLO撮像装置200を図示し、所定の第2の視点から眼80を撮像するように配置されるようになっている。第2の視点から、SLO撮像装置200は、再びラスタ走査等を行い、第2のSLO画像を取得する。図6(B)は、図5(B)に示される第2の視点から捕捉された対応する第2のSLO画像の断面35を示す。この視差効果により、第2のSLO画像の捕捉中に、第1のSLO画像を捕捉した際にまつげ90により撮像が遮られていた網膜85の一部が、所定の第2の視点から良好に撮像される。したがって、図8(B)に示すように、第2のSLO画像の対応する断面(スライス)35は、第1のSLO画像の断面25における画像アーチファクト30と実質的に同じ寸法であるが右にシフトされた画像アーチファクト40を表示する。一例として、シフトは、図8(B)における1画素幅だけである。第2のSLO画像の領域50は、(図8(A)に示されるように)第1のSLO画像の断面25における画像アーチファクト30によって覆われるので、追加の網膜コンテンツは、第2のSLO画像の断面35の領域50によって提供される。
画像から以前に遮られていた網膜85の少なくとも一部の撮像に成功することを可能にする撮像視点の任意の所定のオフセットを使用することができることに留意されたい。例えば、いくつかの実施形態では、入射SLO走査ビーム95は、例えば、生成されたSLO画像上の画像アーチファクトのサブ画素サイズ変換を達成するために、画素幅の一部分だけオフセットされてもよい。
さらに、本実施形態は、SLO撮像装置200のバルク変位を使用してSLO撮像装置200の所定の第2の視点に到達するが、他の実施形態では、撮像装置全体を変位させる代わりに、制御モジュール2は、代わりに、SLO撮像装置200の1つ又は複数の個々の光学構成要素を、上述の方法で1つ又は複数の軸に沿った方向に並進させるように制御することができる。光学構成要素は、SLO走査ビーム95を眼80上に案内するために使用される(例えば、楕円)ミラー又は1つ若しくは複数のレンズなど、SLO撮像装置200の任意の構成要素を指すことができる。
いくつかの実施形態では、SLO撮像装置200の視点は、複数の軸に沿って複数のさらなる所定の視点に変位されてもよく、さらなるSLO画像は、これらの視点のそれぞれから捕捉されてもよい。例えば、図5(B)は、X軸に沿ったSLO撮像装置200の視点の変位を示すが、SLO撮像装置200の視点は、追加的に又は代替的に、Y軸及び/又はZ軸に沿って変位されてもよい。SLO撮像装置200の視点をZ軸に沿って、眼80に向かう又は離れる方向に置き換えることにより、網膜コンテンツの変化し得る量をSLO撮像装置200によって捕捉することが可能となる。例えば、SLO撮像装置200をZ軸に沿って眼80からさらに離れた位置に変位させることによって、SLO撮像装置200の視野のより小さな部分がまつげ90によって占められ、網膜85のより大きな領域が撮像されることを可能にする。
いくつかの実施形態では、制御モジュール2は、第1の眼の画像61における画像アーチファクトの向きに基づく所定の軸に沿った移動方向に、領域40の他方、眼撮像装置1の視点に対する眼80の領域40、及び眼撮像装置1の視点のうちの1つの所定の移動を引き起こすように、移動制御モジュール4を制御する。より具体的には、眼撮像装置1の所定の移動は、眼撮像装置1と眼80上の目標領域との間に位置するまつげ又は他の細長い物体(例えば、毛髪)の向きに実質的に垂直な移動方向に行われてもよい。第1の眼の画像61における画像アーチファクトの向きは、眼80に関する眼撮像装置1の視点を示す情報を用いて推定することができる。あるいは、第1の眼の画像61における画像アーチファクトの向きは、取得された眼の画像上の画像アーチファクトの向きを検出することによって測定されてもよい。所定の移動の方向を選択するために物体50の向きを使用することによって、本明細書で説明する画像アーチファクトを効果的に抑制するために、より少ない画像を取得する必要がある。
一例として、第1の実施形態では、網膜85に関するSLO撮像装置200の視点の所定の移動は、まつげ90の推定された向きに基づいて行われる。図6は、まつげ90の向きがSLO撮像装置200の視点にどのように依存するかの例を示す。
図6において、SLO撮像装置200は、眼80の瞳孔がSLO撮像装置200の焦点と位置合わせされるように、眼80に対して位置決めされる。この位置から、SLO撮像装置200が網膜85の中心領域230を撮像するように制御されると、SLO撮像装置200の視野内のまつげ90は、図6に示すように、実質的に垂直に見える。このシナリオでは、SLO撮像装置200の視点の小さな水平変位は、まつげ90によって以前に覆われた中心領域230の領域が撮像されることを可能にするのに十分であり得る。
しかしながら、図6に示されるように、SLO走査ビーム95が網膜85の周辺領域210を撮像するように向けられるとき、例えば、まつげ90の向きは、取得された眼の画像において垂直方向から傾斜してもよく、又は実質的に水平に見えてもよい。したがって、眼の周辺領域を撮像するとき、垂直軸(図5(B)に示されるようなY軸)に沿ったSLO撮像装置200の視点の移動は、網膜コンテンツの捕捉を最大化するために必要とされ得る。
したがって、本例では、SLO撮像装置200と網膜85の目標走査領域との間のまつげ90の向きは、網膜上の目標走査領域の位置を示す目標走査位置情報を使用して推定することができる。目標走査位置情報は、例えば、SLO撮像装置200の一部を形成する水平走査ミラー及び垂直走査ミラーのそれぞれの向きの指示の形態で提供することができ、この向きは、ラスタ走査等が行われる網膜上の位置を定義する。網膜85上の異なる走査領域は、水平走査ミラー及び垂直走査ミラーの異なる組の傾斜角度に対応するので、SLO撮像装置200の視野内のまつげ90の向きは、目標走査位置情報と、網膜上の走査領域と対応するまつげ向きとの間のマッピングとを使用して推定されてもよく、このマッピングは、例えば、以前に取得された眼の画像の検査から導出されてもよい。
図7は、網膜85上の任意の所与の目標走査領域に使用されるSLO撮像装置200の視点の移動方向を決定するために使用することができるルックアップテーブルの一例を示す。図7のルックアップテーブルには、走査ミラー傾斜角度(θ,φ)を示す値の組毎に、移動ベクトル(v1~v16)が格納されており、角度θは、水平走査ミラーの傾斜角度であり、角度φは、垂直走査ミラーの傾斜角度である。各移動ベクトルは、それぞれの移動方向を定義し、さらに、それぞれの移動距離を定義してもよい(ただし、移動距離は、代替的に、予め定義され、移動方向とは無関係であってもよい)。図7のルックアップテーブルでは、それぞれの移動ベクトルが、角度θ及びθを示す値のそれぞれの組に割り当てられ、その値の組に対応する網膜の特定の領域についての推定されたまつげ方向に基づいている。網膜上の任意の計画された走査領域に使用される移動ベクトルは、走査ミラー角度θ及びφを示す値の組に対応し、計画された走査領域を指定する値に最も近い、図7のルックアップテーブル内の移動ベクトルとして決定することができる。
いくつかの実施形態では、まつげ方向は、取得された眼の画像にまつげ方向検出アルゴリズムを適用することによって(推定されるのではなく)測定又は検出されてもよい。例えば、いくつかの実施形態では、第1の視点から第1の眼の画像61を取得した後、第1の眼の画像61は、まず、コントラスト制限付き適応的ヒストグラム平坦化(CLAHE)などのアルゴリズムを使用して、そのコントラストを改善するように処理されてもよい。次に、コントラスト高画質化された第1の眼の画像61は、第1の眼の画像61におけるまつげ90の向きを決定するためにガボールフィルタで処理されてもよい。ガボールフィルタのサイズを定義するパラメータは、画像からまつげを抽出するように設定されてもよい。コントラスト強調画像は、異なる向きに設定されたガボールフィルタの異なるバージョンで処理することができる。各フィルタリング済み画像に対して、二値閾値化が最初に実行され、次いで、結果として得られる画像の総画素強度が計算され得る。まつげの方向を示すために、二値閾値化の後に最大の総画素強度を有するフィルタリング済み画像をもたらすガボールフィルタの方向をとることができる。測定されたまつげ方向に基づいて、制御モジュール2は、例えば、決定されたまつげ方向に垂直であるように移動方向を決定することによって、網膜85の第2の視点を得るために、それに沿って眼撮像装置1を変位させる移動方向を決定することができる。したがって、測定されたまつげ方向が実質的に水平である場合、制御モジュール2によって、眼撮像装置1の視点の垂直変位を適用することができる。しかしながら、測定されたまつげ方向が実質的に垂直であることが検出される場合、視点の水平方向の変位が制御モジュール2によって適用されてもよい。
画像データ処理モジュール3は、本実施形態のように、第1及び第2の眼の画像を互いに位置合わせし、位置合わせされた第1及び第2の眼の画像の重複領域内に対応して配置された画素の値を平均化することによって、高画質化された眼の画像を生成することができる。画像位置合わせは、本実施形態のように、相関メトリックを用いて2つの取得されたSLO画像における画素の強度値を比較することによって実行されてもよい。しかしながら、代わりに、画像位置合わせは、眼80の特定の部分、例えば網膜画像で見える血管に対応する形状又は輪郭のような画像特徴に基づいて実行されてもよい。
例えば、図5(B)において、X軸に沿ったSLO撮像装置200の視点の変位は、撮像される網膜85の領域におけるオフセットをもたらし、その結果、第1及び第2のSLO画像の網膜コンテンツは、整列されない。したがって、SLO画像を結合して高画質化されたSLO画像を生成する前に、第1のSLO画像及び第2のSLO画像を互いに位置合わせすることをお勧めする。
図9(A)は、第1及び第2のSLO画像におけるラップの共通領域を決定するために、一方のSLO画像と他方のSLO画像との2次元相互相関が順番に計算される、本実施形態で使用される画像位置合わせ処理を示す。図9(A)では、第1のSLO画像310を第2のSLO画像320と相互相関させて、2つの画像内の共通の眼コンテンツ(例えば、網膜血管系)を位置合わせする。位置合わせの後、2つの画像間の共通の重複領域は、2つの画像において共通に撮像された網膜85の同じ領域を表す。例として、図9(B)及び9(C)を参照すると、第1のSLO画像310内の強調表示された画素340及び第2のSLO画像320内の強調表示された画素350は、図9(A)に示す画像位置合わせに基づいて、網膜の同じ領域に対応する。
第1のSLO画像310及び第2のSLO画像320を互いに位置合わせした後、位置合わせされた第1及び第2の眼の画像における共通の重複領域内に対応して位置付けられた画素の画素値を平均することによって得られる画素値を、高画質化された眼の画像の各画素に割り当てることによって、高画質化された眼の画像が生成される。例えば、図9(A)では、位置合わせされた第1のSLO画像と第2のSLO画像との間の重複領域の高画質化された眼の画像を形成するために、高画質化された眼の画像内の画素位置330は、第1のSLO画像310内の画素340の値と、対応する重なりの共通領域内に位置する第2のSLO画像320内の画素350の値とを平均することによって形成される。
図8(C)は、上述のような画素平均化が使用される場合に、図8(A)及び図8(B)にそれぞれ示される第1のSLO画像の断面25及び第2のSLO画像の断面35から生成される強調画像の断面45を示す。第1及び第2のSLO画像の画像アーチファクト30、40は、影領域の形成で現れるので、強調画像の断面45は、位置合わせされた第1又は第2のSLO画像内の対応する画素位置における画像アーチファクトと比較して、低減された暗さレベルを有する画像影アーチファクトを表示することができる。例えば、図8(C)において、画素平均化の結果として、強調画像の断面45の領域60は、図8(A)に示される第1のSLO画像の断面25における対応する画像領域と比較して、画素強度が低減された画像アーチファクトを表示する。
本例では、高画質化された眼の画像を生成するために2つの眼の画像を使用しているが、眼80に対して異なる視点から捕捉された多数の眼の画像を組み合わせることによって、画像アーチファクトの抑制をさらに改善することが可能である。1つの眼の画像の捕捉の間に画像化からブロックされた眼の領域が、それぞれ異なる視点から捕捉された1つ以上のさらなる眼の画像において可視である限り、これらのさらなる捕捉された画像における眼コンテンツの利用可能性は、高画質化された眼の画像における画像アーチファクトの抑制に寄与する。
いくつかの実施形態では、第1の眼の画像61及び第2の眼の画像71のコンテンツが実質的に整列される場合(すなわち、第1の眼の画像61及び第2の眼の画像71内に対応して位置する画素が眼80上の同じ位置を表す場合)、画像位置合わせは必要とされないことがある。代わりに、画像データ処理モジュール3は、高画質化された眼の画像における各画素のそれぞれの画素値として、第1の眼の画像61におけるそれぞれの画素の画素値と、第2の眼の画像71における対応して位置する画素の画素値との合計に基づく画素値を計算することによって、高画質化された眼の画像を直接生成してもよい。
高画質化された眼の画像を生成する前述の方法は、画素平均化に基づくが、代替的に、他の画像処理方法を使用して、前述の画像アーチファクトを抑制することができる。このような代替画像処理方法の例を以下に示す。なお、以下に説明する高画質化された眼の画像の生成方法は、互いに排他的なものではなく、強調画像における画像アーチファクトを効果的に抑制するために組み合わせてもよい。
図10は、画素平均化を利用しない、高画質化された眼の画像を生成する代替方法を示す。
図10の処理S40において、画像データ処理モジュール3は、位置合わせされた第1の画像と第2の画像とが共通の重複領域を有するように、第1の眼の画像61と第2の眼の画像71とを互いに位置合わせする。
次いで、画像データ処理モジュール3は、図10の処理S50において、高画質化された眼の画像として、高画質化された眼の画像の各画素に、第1の眼の画像61からの対応する重なりの共通領域内に位置する画素の画素値、又は第2の眼の画像71からの対応する重なりの共通領域内に位置する画素の画素値のいずれかであるそれぞれの画素値を割り当てることによって、重複領域の強調画像を生成する。より具体的には、高画質化された眼の画像は、第1の眼の画像61の画像アーチファクトを定義する第1の眼の画像61内の画素のうちの少なくともいくつかの画素の画素値の代わりに、第1の眼の画像61の取得中に画像から物体50によって妨害された眼80の領域40の部分の少なくとも一部を示す、位置合わせされた第2の眼の画像内に対応して配置された画素の画素値を含むことができる。あるいは、高画質化された眼の画像は、第2の眼の画像71の画像アーチファクトを定義する第2の眼の画像内の画素のうちの少なくともいくつかの画素の画素値の代わりに、第2の眼の画像71の取得中に画像から物体50によって妨害された領域40の部分の少なくとも一部を示す、位置合わせされた第1の眼の画像内に対応して配置された画素の画素値を含むことができる。
処理S50を実施するために、画像データ処理モジュール3は、本実施形態のように、第1の眼の画像61及び第2の眼の画像71の各々における各画素を、眼の領域の対応する部分の画像又は画像アーチファクトの画像のいずれかを示すものとして分類することができる。例えば、SLO撮像装置200からのSLO走査ビーム95をブロックするまつげ90によって引き起こされる画像アーチファクトの場合、画像アーチファクトを形成する画素は、網膜コンテンツを表す画素よりも著しく暗くてもよい。従って、画素の分類は、所定の閾値を下回る全ての画素を、画像アーチファクトから対応する画素であるように決定することを含み得る。分類情報は、眼の領域の画像又は画像アーチファクトの画像の一部を含む画素を示すために、各画素についての分類値の形態で記憶されてもよい。
位置合わせされた第1及び第2の眼の画像内のすべての画素について分類を実行した後、位置合わせされた第1及び第2の眼の画像間の共通の重複領域内に対応して位置付けられたすべての画素についての分類値が比較される。次いで、画像データ処理モジュール3は、位置合わせされた第1及び第2の眼の画像からの画素を使用して高画質化された眼の画像を生成することによって、高画質化された眼の画像を生成する。位置合わせされた第1の眼の画像及び位置合わせされた第2の眼の画像のうちの1つの共通の重複領域内の画素が、眼の領域の画像の一部を示すものとして分類され、位置合わせされた第1の眼の画像及び位置合わせされた第2の眼の画像のうちの他方の中の対応する位置合わせされた画素が、画像アーチファクトの一部を示すものとして分類される場合、眼の領域の画像の一部を示すものとして分類された画素は、位置合わせされた第1の眼の画像と第2の眼の画像との間の重複領域の高画質化された眼の画像内の対応する画素位置に割り当てられる画素として選択され得る。位置合わせされた第1及び第2の眼の画像の共通の重複領域内に対応して位置する画素が、両方とも、眼の領域の画像の一部を示すものとして分類される場合、対応する2つの画素の平均強度を計算し、高画質化された眼の画像上の対応する画素に割り当てることができる。
なお、第1の眼の画像61及び第2の眼の画像71の一方を変更することにより、高画質化された眼の画像を生成してもよい。図11は、図10の方法の修正を示しており、ここでは、上述したように、処理S40において画像位置合わせを実行し、処理S60において画素分類を実行した後、画像データ処理モジュール3は、図11の処理S70において、第1の眼の画像の画像アーチファクトを定義する第1の眼の画像61における画素のうちの少なくともいくつかの画素の画素値を、第1の眼の画像61の取得中に画像から物体50によって妨害された眼80の領域40の部分の少なくとも一部を示す、第2の眼の画像71における対応して配置された画素の画素値と置き換えることによって、高画質化された眼の画像を生成する。あるいは、画像データ処理モジュール3は、第2の眼の画像71の画像アーチファクトを定義する第2の眼の画像71の画素のうちの少なくともいくつかの画素の画素値を、第2の眼の画像71の取得中に画像から物体50によって妨害された領域40の部分の少なくとも一部を示す、第1の眼の画像61内に対応して配置された画素の画素値と置き換えてもよい。
図12は、高画質化された眼の画像を生成する別の方法を示す。この代替案では、画像データ処理モジュール3は、まず、図9を参照して上述したように、画像位置合わせS40及び画素分類S60を実行する。図12の処理S80において、画像データ処理モジュール3は、第1の眼の画像61及び第2の眼の画像71のそれぞれを処理して、画像アーチファクトを示す画素をマスクアウトする。画像データ処理モジュール3は、例えば、画像アーチファクトの一部を示すものとして分類される第1及び第2の眼の画像61、71内の全ての画素の値をゼロに設定することによってマスキングを実行することができる。図12の処理S90において、画像データ処理モジュール3は、得られた処理された第1の眼の画像の中の対応する位置にある画素の画素値と、得られた処理された第2の眼の画像とを加算して、強調画像を生成する。画像アーチファクトに対応する画素をマスキングする利点は、出力画像が眼コンテンツのみを含み、その結果、上述の種類の画像アーチファクトを画像から完全に除去することができることである。
いくつかの実施形態では、画素ごとの分類値比較が実行された後、重なり合う共通領域内のかなりの数(すなわち、所定の閾値を超える数)の画素が、第1の眼の画像61及び第2の眼の画像71の両方において画像アーチファクトとして分類される場合、制御モジュール2は、眼80に関する異なるそれぞれの視点から1つ又は複数のさらなる眼の画像を取り込むように、眼撮像装置1を制御することができる。このシナリオでは、さらなる視点への眼撮像装置1の視点の移動は、第1の眼の画像61及び第2の眼の画像71の両方において画像アーチファクトコンテンツとして分類される、重なり合う共通領域内の画素の位置及び/又は分布に基づいて実行されてもよい。
第2の実施形態
第1の実施形態では、制御モジュール2は、眼80を異なる視点から撮像するために、互いに垂直な3つの方向のうちの少なくとも1つにおいて、眼80に関する眼撮像装置1のバルク移動を実行する。この種類の変位は、眼80の走査された領域にオフセットをもたらす。しかしながら、第2の実施形態では、制御モジュール2は、異なる視点から眼80の実質的に同じ領域40の画像を取得するように、眼撮像装置1を制御するように構成されている。その他の点は、第1の実施形態と同様であり、上述した第1の実施形態の変形、及び変更は本実施形態に適用可能である。
図13は、眼80の関心領域が2つの異なる視点から撮像される、第2の実施形態の一例を示す。図13の例では、第1の眼の画像61は、網膜85の撮像領域内の基準点において眼80の網膜85に垂直な第1の方向に沿って位置する、Cとラベル付けされた第1の視点から撮像される。制御モジュール2は、さらに、図13に示すように、基準点において第1の方向に対して角度αである第2の方向に沿って位置するDとラベル付けされた第2の視点から、同じ関心領域を撮像するように眼撮像装置1を変位させる。眼撮像装置1の視点Cから視点Dへの変位は、例えば、移動機構5を用いて眼撮像装置1を眼80の周りの所定の円弧に沿って移動させることにより、眼80上の基準点と眼撮像装置1との距離が一定に保たれるように行われてもよい。
第2の実施形態では、画像データ処理モジュール3は、前述の方法のいずれかを使用して、高画質化された眼の画像を生成することができる。しかしながら、第1及び第2の視点から取得された眼の画像は、異なる角度から撮像された眼の同じ領域の画像であるので、画像データ処理モジュール3によって画像位置合わせを実行する必要はない。
第3の実施形態
次に、図14を参照して、第3の実施形態を説明する。本実施形態では、図14に示す制御モジュール2-1は、眼80に対する眼撮像装置1の視点の所定の移動を行わせる代わりに、眼撮像装置1の視点に対する眼80の領域40の所定の移動を行わせるように移動制御モジュール4-1を制御して、眼撮像装置1が所定の第2の視点から第2の眼の画像を取得するように構成されている。その他の点は、第1の実施形態と同様であり、上述した第1の実施形態の変形、及び変更は本実施形態に適用可能である。
図14に示すように、移動制御モジュール4-1は、眼80の位置を監視するように構成された眼追跡モジュール6と、眼80の監視位置及び眼80の所定の目標位置に基づいて、眼80の監視位置が眼80の目標位置に向かって移動するように、被検者に眼80を移動させるように指示する視覚信号、音声信号及び/又は触覚信号(例えば、振動)を含むフィードバック信号を生成するように構成されたフィードバック信号発生器7とを備える。制御モジュール2-1は、フィードバック信号発生器7によって生成されたフィードバック信号が被検者を誘導して、眼撮像装置1に対する眼80の領域40の所定の移動をするように、眼80の目標位置を設定するように構成されている。
そこで、本実施形態では、上記実施形態と同様に、眼撮像装置1の第1の視点から第1の眼の画像を取得する。第1の眼の画像を取得した後、眼追跡モジュール6は、特徴追跡に基づいて眼80の現在位置を決定し、この位置情報をフィードバック信号発生器7に提供することができる。フィードバック信号発生器7は、眼80が目標位置に向かって移動するように、被検者からの所要の頭部運動を誘発するための適切なフィードバック信号を決定するために、現在位置を使用してもよい。被検者が眼80の誘導運動を行うと、眼追跡モジュール6を使用して、眼80が目標位置に位置していることを確認することができ、第2の眼の画像を取り込むことができる。次いで、取得された第1及び第2の眼の画像を組み合わせて、前述の画像データ処理方法のいずれかを使用して、強調画像を生成することができる。
第4の実施形態
次に、図15、図16(A)及び図16(B)を参照して、第4の実施形態を説明する。本実施形態では、第1の実施形態で説明したように、眼撮像装置1をバルク移動させたり、第3の実施形態のように、ユーザからバルク移動を誘発させたりする代わりに、制御モジュール2-2は、第2の眼の画像を撮像する眼80の領域40に関する第2の所定の視点を取得するために、被検者に注視方向を変更させるように構成されている。その他の点は、第1の実施形態と同様であり、上述した第1の実施形態の変形、及び変更は本実施形態に適用可能である。
本実施形態では、移動制御モジュール4-2は、被検者の眼80の注視方向400を設定するための固視標312(図16(A)及び図16(B))を被検者に表示する固視標表示部8を備えている。制御モジュール2-2は、眼80の注視方向400に所定の変化を生じさせるために、表示された固視標312の位置を設定するように構成される。
図16(A)及び16(B)は、第4の実施形態のさらなる例示を提供する。図16(A)において、固視標312は、例えば、固視標表示部8の中央位置に表示され、被検者が眼撮像装置200に向かって真っ直ぐに見えるようになっている。眼撮像装置1は、被検者の眼を固視標312に固定した状態で、網膜85の第1の眼の画像を取得する。図14(A)の矢印400は、第1の眼の画像が取得されたときの眼80の注視方向を示す。
図16(B)において、眼撮像装置1が第1の眼の画像を取得した後、続いて、固視標312が固視標表示部8の所定の第2の位置に表示され、被検者の注視方向が変更される。したがって、図16(B)では、固視標312は、固視標表示部8の左側に移動したことが示されており、被検者に、矢印400によって示される方向に、新しい固視標位置に向けて注視を誘導するように誘導する。眼80の注視方向が一旦変化すると、制御モジュール2-2は、眼撮像装置1を制御して、網膜85の第2の眼の画像を取得する。固視標312を使用して眼80の注視方向400に所定の変化を誘発することによって、まつげ90による画像から以前にブロックされた眼80の一部を首尾よく撮像することができる。
第5の実施形態
いくつかの実施形態では、眼科撮像システムは、眼80と眼撮像装置1との相対移動を必要とせずに、それぞれの第1及び第2の視点から第1及び第2の眼の画像を取得するように構成されてもよいことに留意されたい。これに代えて、本実施形態のように、眼撮像装置1は、眼80に関する第1の所定の視点に設けられた第1の撮像装置と、眼80に関する第1の視点とは異なる所定の第2の視点に設けられた第2の撮像装置とを備えてもよい。本実施形態の第1の撮像装置及び第2の撮像装置は、眼科撮像システム又は眼80の移動を必要とすることなく、それぞれ第1の眼の画像及び第2の眼の画像を取得するように制御される。次いで、上述の方法のいずれかを使用して、画像データ処理モジュール3によって、高画質化された眼の画像を生成することができる。その他の点は、第1の実施形態と同様であり、上述した第1の実施形態の変形、及び変更は本実施形態に適用可能である。
第6の実施形態
次に、図17~図21を参照して、第6の実施形態を説明する。上述の実施形態では、異なる視点から眼の画像を取得し、したがって、画像化から眼の一部を隠す介在するまつげ又は他の物体の存在のために、単一の画像から取得できなかった眼に関する情報を取得するために、眼撮像装置の眼球又は視点のいずれかの動きを制御するために、移動制御モジュールが使用される。本実施例の眼科撮像システムは、異なる視点からの眼の画像を捕捉せず、代わりに、眼を通過する回転軸と、眼の画像の捕捉、及び眼撮像装置の光検出器アレイ内の光検出器素子の非対称性の間の視点と、を中心とする眼撮像装置の回転を使用して、単一の視点から画像を捕捉し、まつげ又は他の介在物体を効果的に「見回す」点で、前述の実施例と異なる。次いで、取得された眼の画像は、画像データ処理モジュール3によって実行される前述の方法のいずれかを使用して組み合わされて、アーチファクトの存在が低減された強調画像が生成される。
図17は、第6の実施形態に係る、眼の領域の画像を生成するための眼科撮像システム10-3の一例を示す。図17に示すように、眼科撮像システム10-3は、眼撮像装置1-2と、制御モジュール2-3と、画像データ処理モジュール3と、回転機構9とを備えている。図18に示され、以下により詳細に説明されるように、眼撮像装置1-2が視点550から眼80の領域40の第1の眼の画像を捕捉した後、回転機構9は、視点550及び瞳孔又は眼80の他の部分を通過する回転軸500の周りに所定の角度だけ眼撮像装置1-2を回転させるように制御される。回転が行われた後、眼撮像装置1-2は、同じ視点550から第2の眼の画像を取り込むように制御される。所定の角度は、本実施形態のように、(2n+1)π/2ラジアンとすることができ、ここで、nは整数である。
ここで図19(A)及び19(B)を参照すると、眼撮像装置1-2は、領域40の眼の画像を取得するように動作可能な光検出器素子の2次元アレイを備える。図19(A)に例として示されるように、光検出器素子600の各光検出器素子610は、2次元アレイ600の第2のアレイ方向(Y方向として図示される)に沿った第2の長さ602と異なる2次元アレイ600の第1のアレイ方向(X方向として図示される)に沿った第1の長さ601を有してもよい。あるいは、又は加えて、光検出器素子650の各光検出器素子660は、図19(B)に例として示されるように、第1のアレイ方向(図示X方向)に隣接する第1の隣接する光検出器素子からの第1の分離651を有してもよく、第1の分離651は、第2のアレイ方向(図19(B)にY方向として図示される)に隣接する第2の隣接する光検出器素子からの第2の分離652とは異なる。
回転機構9は、眼80及び視点550を通る回転軸500を中心にして、眼撮像装置1-2を回転させるように構成されている。回転機構9の形態は限定されず、本実施例のように、眼撮像装置1-2を回転軸500の周りに回転させるように構成されたステッパモータを含むことができる。
制御モジュール2-3は、視点550から、第1の眼の画像の取得中に、眼撮像装置1-2と領域40との間の物体50による領域40の一部の画像からの妨害によって引き起こされる画像アーチファクトを有する領域40の第1の眼の画像を取得するように、眼撮像装置1-2を制御するように構成される。
制御モジュール2-3は、さらに、回転機構9を制御して、眼撮像装置1-2を回転軸500の周りで回転させるように構成されている。さらに、眼撮像装置1-2の回転に続いて、制御モジュール2-3は、(同じ)視点550から第2の眼の画像を取得するように眼撮像装置1-2を制御するように構成され、第2の眼の画像は、第1の眼の画像の取得中に、画像化された物体50によって妨害された領域40の部分の少なくとも一部を示す。
画像データ処理モジュール3は、第1の実施形態に関連して上述したように構成され、第1の眼の画像と第2の眼の画像とを組み合わせて、前述した画像データ処理方法のいずれかを使用して強調画像を生成することができる。特に、画像データ処理モジュール3は、第1の眼の画像の画像データを第2の眼の画像の画像データと組み合わせて、第1の眼の画像又は第2の眼の画像の取得中に、眼撮像装置1-2と領域40との間の物体50による領域40の一部の画像からの妨害によって引き起こされる画像アーチファクトを有さない、又は、第1の眼の画像における画像アーチファクト、若しくは、第2の眼の画像の取得中に眼撮像装置1-2と領域40との間の物体による領域40の一部の画像からの妨害によって引き起こされる、第2の眼の画像における画像アーチファクトのうちの少なくとも1つに基づかつ第1の眼の画像における画像アーチファクト又は第2の眼の画像における画像アーチファクトのうちの少なくとも1つに関してより小さい画像アーチファクト有する、高画質化された眼の画像を生成するように構成される。
第1の実施形態と同様に、第6の実施形態の制御モジュール2-3及び画像データ処理モジュール3は、例えば、図3を参照して上述したように、プログラマブル信号処理ハードウェアで実施することができる。
図20は、第6の実施形態に係る制御モジュール2-3及び画像データ処理モジュール3によって実行される処理を説明するための図である。図20の処理S110において、制御モジュール2-3は、視点550から、第1の眼の画像の取得中に、眼撮像装置1-2と領域40との間の物体50による領域40の一部の画像からの妨害によって引き起こされる画像アーチファクトを有する領域40の第1の眼の画像を取得するように、眼撮像装置1-2を制御する。
図20の処理S120において、制御モジュール2-3は、回転機構9を制御して、視点550及び眼80を通る回転軸500を中心として、眼撮像装置1-2を回転させる。
図20の処理S130において、制御モジュール2-3は、眼撮像装置1-2の回転に続いて、視点550から、第1の眼の画像の取得中に画像化された物体50によって妨害された領域40の部分の少なくとも一部を示す第2の眼の画像を取得するように眼撮像装置1-2を制御する;
図20の処理S140において、画像データ処理モジュール3は、第1の眼の画像の画像データを第2の眼の画像の画像データと組み合わせて、第1の眼の画像又は第2の眼の画像の取得中に、眼撮像装置1-2と領域40との間の物体50による領域40の一部の画像からの妨害によって引き起こされる画像アーチファクト、又は、第1の眼の画像における画像アーチファクト、若しくは、第2の眼の画像の取得中に眼撮像装置1-2と領域40との間の物体50による領域40の一部の画像からの妨害によって引き起こされる、第2の眼の画像における画像アーチファクトのうちの少なくとも1つに基づく画像アーチファクトを有さず、第1の眼の画像における画像アーチファクト又は第2の眼の画像における画像アーチファクトのうちの少なくとも1つに関してより小さい画像アーチファクトのうちの1つを有する、高画質化された眼の画像を生成する。
図21(A)は、第6の実施形態の眼撮像装置1-2の光検出器アレイ810の例示的な図を提供する。図21(A)に示されるように、光検出器アレイ810は、複数の光検出器素子812を備え、各光検出器素子812の幅は、その高さよりも大きい。
図21(A)では、光検出器アレイ810による第1の眼の画像の捕捉中、眼80から反射された光は、まつげ又は他の物体50が眼撮像装置1-2の視野内にある結果として、光検出器アレイ810の領域814に到達しない。しかしながら、眼80から反射された光は、光検出器アレイ810の他の領域によって受光される。図21(A)に示されるように、遮光領域814は、光検出器アレイ810の中央列に位置する下5つの光検出器素子812を横切って落下する。光検出器アレイ810によって捕捉された眼の画像は、光検出器アレイ810が、図21(A)に示されるような照明パターンで照明されるとき、図21(B)に概略的に示される。図21(B)に示すように、画像アーチファクト821が眼の画像820に形成される。本例では、光検出器アレイ810内の各光検出器要素によって検出された光は、生成された眼の画像の対応するサイズの領域にマッピングされるものと仮定され、したがって、画像アーチファクト821の領域は、遮光領域814がその上に落下する5つの光検出器アレイ要素の総領域に対応するように図示される。換言すれば、遮光領域814は、光検出器アレイ810の中間列内の下部の5つの光検出器アレイ素子のそれぞれの領域の一部のみをカバーするが、5つの光検出器素子のそれぞれに対応する画像画素の全ては、図21(B)に示されるように、領域814内の影の存在によって影響されるように示される。
眼科撮像システム10-3は、図21(A)に示すように、810の光検出器アレイで受光した光に基づいて眼の画像820を生成した後、制御モジュール2-3は、眼80及び視点550を通る回転軸500を中心として、眼撮像装置1-2を時計回りに90度回転させるように、回転機構9を制御する。眼撮像装置1-2は、眼80に対して同じ距離に維持される。さらに、眼80及びまつげ(又は眼80をブロックする他の物体50)は共に、眼撮像装置1-2が回転している間、静止したままであると仮定される。
図21(C)は、図21(A)に示されるように配向された光検出器アレイ810が時計回りに90度回転された後に、光検出器アレイ810に入射する光の照明パターンを示す。図21(C)に示すように、光検出器アレイ810の遮光領域816は、まつげ又は他の物体50が眼撮像装置1-2の視野内にある結果として、眼80から反射された光を全く受け取らない。回転の結果、遮光領域816は、2つの光検出器アレイ要素812のみを横切って延在する。
図21(D)は、光検出器アレイ810が、図21(C)を参照して上述されたように、照明パターンで配向され、照明される場合に、光検出器アレイ810によって捕捉される、第2の眼の画像830を図示する。この段階において、光検出器要素値によって生成された光強度測定値をそれぞれの眼の画像の画素にマッピングするために使用される光検出器要素間の画素マッピングは、眼の画像830が眼の画像820と同じ配向を有するように、光検出器アレイ810の回転を考慮に入れていることに留意されたい。図21(D)では、物体50が光検出器アレイ810の領域816への光をブロックする結果として、画像アーチファクト822が第2の眼の画像830に形成される。眼の画像820と830とを比較すると、第1の眼の画像820のアーチファクト821は、第2の眼の画像830の画像アーチファクト822よりも眼の画像のより大きな部分にわたって広がっていることが観察される。しかしながら、眼の画像830の画像アーチファクト822の強度は、眼の画像820の画像アーチファクト821の強度よりも大きい。これは、図21(A)において、眼80から反射された光を奪われた領域814が、領域814が落下する光検出器素子のそれぞれのほんの一部を覆うにすぎないからである。対照的に、図21(C)では、遮光領域816は、図21(C)の例において、領域816が重ね合わされる2つの光検出器素子の領域のかなり高い割合を形成する。
この点に関して、眼の画像820及び830は、異なる量の網膜情報に寄与し、したがって、前述の方法のいずれかを使用して、画像アーチファクトが低減された強調画像を生成するために、画像データ処理モジュール3によって組み合わせることができることに留意されたい。特に、画像820及び830を取得した後、画像データ処理モジュール3は、2つの画像が同じ向きを有することを確実にするために、2つの画像のうちの1つを回転させることを要求されてもよい。画像データ処理モジュール3は、2つの画像を互いに位置合わせし、上述の画像処理技法のいずれかを適用して、最終的な強調画像における画像アーチファクトの存在を低減することができる。例えば、画像データ処理モジュールは、眼の画像830における画像アーチファクト822の強度を低減するために、眼の画像820及び830を直接平均化することができる。あるいは、画像データ処理モジュール3は、(図21(D)に示すように)眼の画像830の、画像アーチファクトによって汚染されていない領域823を抽出し、抽出された領域を使用して、画像アーチファクト821によって汚染されている眼の画像820の対応する領域を「埋める」ことができる。
本明細書で説明される例示的な態様は、光学走査環境において画像走査を行うための従来の技法に関連する、特にコンピュータ技術に起因する制限を回避する。そのような従来の方法及びシステムでは、まつげなどは、画像視野を不明瞭にする傾向があり、取得された画像内の網膜コンテンツの量を大幅に低減することができる。他方、本明細書に記載された、眼の画像を取得し、取得された眼の画像を組み合わせる技術は、高画質化された眼の画像が生成されることを有利に可能にすることができ、この場合、まつげなどから生じる画像アーチファクトは、低減されるか、又は完全に排除され、眼の画像化された領域のより多くが画像内で見えることを可能にする。それによって、画像アーチファクトが検出され、除去されることができ、それによって、画像評価が、従来のシステム/方法と比較して、より高度に計算的に、かつ資源効率的な方法で実行されることを可能にするので、画像化処理は、それほど複雑でなく、従来のシステム/方法によって必要とされるものよりも比較的少ないコンピュータ処理及びメモリ資源を必要とする方法で実行されることができる。また、本明細書で説明される例示的な態様の、コンピュータ技術に根ざした前述の能力によって、本明細書で説明される例示的な態様は、コンピュータ及びコンピュータ処理/機能を改善し、また、少なくとも画像処理、SLO、OCT、及びデータ処理、並びに機能画像データの処理の分野を改善する。
前述の説明では、いくつかの実施形態を参照して、例示的な態様が説明されている。したがって、本明細書は、限定的ではなく、例示的であるとみなされるべきである。同様に、例示的な実施形態の機能性及び利点を強調する、図面に示される図面は、例示的な目的のみのために提示される。例示的な実施形態のアーキテクチャは、添付の図面に示されるもの以外の方法で利用(及びナビゲート)され得るように、十分に柔軟かつ構成可能である。
本明細書で提示される例のソフトウェア実施形態は、1つの例示的な実施形態では、機械アクセス可能若しくは機械可読媒体、命令ストア、又はコンピュータ可読記憶装置などの製造品に含まれるか、又は格納される、命令又は命令シーケンスを有する1つ又は複数のプログラムなどのコンピュータプログラム、又はソフトウェアとして提供されてもよく、それらの各々は、非一時的であってもよい(かつメモリ又はストアを形成することができる)。一時的でない機械アクセス可能媒体、機械可読媒体、メモリ、命令ストア、コンピュータ可読記憶装置、又は媒体上のプログラム若しくは命令は、コンピュータシステム又は他の電子装置をプログラムするために使用することができる。機械又はコンピュータ可読装置/媒体、メモリ、命令ストア、及び記憶装置は、フロッピー(登録商標)ディスケット、光ディスク、及び光磁気ディスク、又は電子命令を記憶若しくは送信するのに適した他の種類の媒体/機械可読媒体/命令ストア/記憶装置を含むことができるが、これらに限定されない。本明細書で説明する技法は、任意の特定のソフトウェア構成に限定されない。それらは、どのようなコンピューティング又は処理環境においても適用可能であることを見いだす可能性がある。本明細書で使用される「コンピュータ可読媒体」、「機械アクセス可能媒体」、「機械可読媒体」、「メモリ」、「命令ストア」、「コンピュータ可読記憶媒体」、及び「コンピュータ可読記憶装置」という用語は、機械、コンピュータ、又はコンピュータプロセッサによる実行のための命令又は命令シーケンスを記憶、符号化、又は送信することができ、機械/コンピュータ/コンピュータプロセッサに本明細書で説明される方法のうちのいずれか1つを実行させる任意の媒体を含むものとする。さらに、当技術分野では、アクションを取るか、又は結果を引き起こすものとして、ある形態又は別の形態(たとえば、プログラム、プロシージャ、プロセス、アプリケーション、モジュール、ユニット、論理など)のソフトウェアと呼ばれることが一般的である。そのような表現は、単に、処理システムによるソフトウェアの実行が、結果を生成するためのアクションをプロセッサに実行させることを述べる簡潔な方法である。
また、いくつかの実施形態は、特定用途向け集積回路、フィールドプログラマブルゲートアレイの準備によって、又は従来の構成要素回路の適切なネットワークを相互接続することによって、実施されてもよい。
いくつかの実施形態は、コンピュータプログラム製品を含む。コンピュータプログラム製品は、記憶媒体若しくはメディア、メモリ、命令ストア、又は記憶装置であって、記憶された命令を有するか、又はその中に、コンピュータ又はコンピュータプロセッサに、本明細書に記載された実施形態の手順のいずれかを実行させるために使用することができる。記憶媒体/メモリ/命令ストア/記憶装置は、限定ではなく例として、光ディスク、ROM、RAM、EPROM、EEPROM、DRAM、VRAM、フラッシュメモリ、フラッシュカード、磁気カード、光カード、ナノシステム、分子メモリ集積回路、RAID、リモートデータ記憶/アーカイブ/ウェアハウジング、及び/又は命令及び/又はデータを記憶するのに適した任意の他の種類の装置を含むことができる。
コンピュータ可読媒体若しくはメディア、メモリ、命令ストア、又は記憶装置のいずれか1つに記憶される、いくつかの実装は、システムのハードウェアの両方を制御し、本明細書に記載する実施形態の結果を利用して、システム又はマイクロプロセッサが人間のユーザ又は他のメカニズムと対話できるようにするためのソフトウェアを含む。このようなソフトウェアには、デバイスドライバ、オペレーティングシステム、及びユーザアプリケーションが含まれるが、これらに限定されない。最終的に、そのようなコンピュータ可読媒体又は記憶装置は、上述のように、本発明の実施形態を実行するためのソフトウェアをさらに含む。
システムのプログラミング及び/又はソフトウェアに含まれるのは、本明細書に記載する手順を実施するためのソフトウェアモジュールである。本明細書のいくつかの実施形態では、モジュールは、ソフトウェアを含むが、本明細書の他の実施形態では、モジュールは、ハードウェア、又はハードウェア及びソフトウェアの組合せを含む。
本発明の様々な実施形態を上記で説明したが、それらは、限定ではなく例として提示されたことを理解されたい。当業者には、形態及び詳細の様々な変更をそこで行うことができることが明らかであろう。したがって、本発明は、上述の実施形態のいずれによっても限定されるべきではなく、以下の特許請求の範囲及びそれらの均等物に従ってのみ定義されるべきである。
さらに、要約書の目的は、特許庁及び公衆一般、特に特許、法律用語又は表現に精通していない当該技術分野の科学者、技術者及び実務家が、大まかな検査から、出願の技術的開示の性質及び本質を迅速に決定することを可能にすることである。要約は、本明細書に提示された実施形態の範囲に関していかなる形でも限定することを意図していない。また、特許請求の範囲に列挙された任意の手順は、提示された順序で実行される必要がないことも理解されるべきである。
本明細書は、多くの特定の実施形態の詳細を含むが、これらは、任意の発明又は特許請求の範囲に対する限定として解釈されるべきではなく、むしろ、本明細書に記載される特定の実施形態に特有の特徴の説明として解釈されるべきである。別個の実施形態の文脈で本明細書に記載される特定の特徴は、単一の実施形態において組み合わせて実施することもできる。逆に、単一の実施形態の文脈で説明される様々な特徴は、複数の実施形態で別々に、又は任意の適切なサブコンビネーションで実装することもできる。さらに、特徴は、特定の組み合わせで動作するものとして上記で説明されてもよく、そのようなものとして最初に特許請求されてもよいが、特許請求される組み合わせからの1つ又は複数の特徴は、場合によっては、その組み合わせから削除されてもよく、特許請求される組み合わせは、サブコンビネーション又はサブコンビネーションの変形に向けられてもよい。
ここで、いくつかの例示的な実施形態及び実施形態を説明してきたが、前述は、例示的なものであり、限定的なものではなく、例として提示されてきたことは明らかである。
本明細書で説明されるデバイス及び装置は、その特性から逸脱することなく、他の特定の形態で実施されてもよい。前述の実施形態は、説明されたシステム及び方法を限定するものではなく、例示的なものである。したがって、本明細書で説明される光学システム及び装置の範囲は、前述の説明ではなく、添付の特許請求の範囲によって示され、特許請求の範囲と同等の意味及び範囲内に入る変更は、特許請求の範囲に包含される。

Claims (11)

  1. 被検者の眼(80)の領域(40)の画像を生成するための眼科撮像システム(10;10-1;10-2)であって、
    前記眼科撮像システム(10)は、
    前記領域(40)の眼の画像を取得するように動作可能な眼撮像装置(1)と、
    制御モジュール(2;2-1;2-2)であって、
    前記領域(40)に関する第1の視点(60)から、第1の眼の画像(61)の取得中に、前記眼撮像装置(1)と前記領域(40)との間の物体(50)による前記領域(40)の一部の画像からの妨害によって引き起こされる画像アーチファクトを有する前記領域(40)の前記第1の眼の画像(61)を取得するように、前記眼撮像装置(1)を制御し、かつ、
    前記第1の視点(60)とは異なる所定の第2の視点(70)から、前記第1の眼の画像(61)の取得中に画像化された前記物体(50)によって妨害された前記領域(40)の部分の少なくとも一部を示す第2の眼の画像(71)を取得するように前記眼撮像装置(1)を制御するように構成された制御モジュール(2;2-1;2-2)と、
    前記第1の眼の画像(61)の画像データを前記第2の眼の画像(71)の画像データと組み合わせて、高画質化された眼の画像を生成するように構成された画像データ処理モジュール(3)であって、前記高画質化された眼の画像は、
    前記第1の眼の画像(61)若しくは前記第2の眼の画像(71)の取得中に、前記眼撮像装置(1)と前記領域(40)との間の前記物体(50)による前記領域(40)の一部の画像からの妨害によって引き起こされる画像アーチファクトを有さない、又は、
    前記第1の眼の画像(61)における画像アーチファクト、若しくは、前記第2の眼の画像(71)の取得中に前記眼撮像装置(1)と前記領域(40)との間の前記物体(50)による前記領域(40)の一部の画像からの妨害によって引き起こされる、前記第2の眼の画像(71)における画像アーチファクトのうちの少なくとも1つに基づかつ前記第1の眼の画像(61)における画像アーチファクト若しくは前記第2の眼の画像(71)における画像アーチファクトのうちの少なくとも1つに関してより小さい画像アーチファクトを有する、画像データ処理モジュール(3)と、
    前記眼(80)の前記領域(40)及び前記眼撮像装置(1)の視点のうちの一方の、前記領域(40)及び前記眼撮像装置(1)の視点のうちの他方に対する移動を制御するように動作可能な移動制御モジュール(4;4-1;4-2)とを備え、
    前記制御モジュール(2;2-1;2-2)は、
    前記移動制御モジュール(4)を制御して、前記眼撮像装置(1)が前記所定の第2の視点(70)から前記第2の眼の画像(71)を取得するよう配置されるように、前記領域(40)及び前記眼撮像装置(1)の視点のうちの一方の、前記領域(40)及び前記眼撮像装置(1)の視点のうちの他方に対する所定の移動を引き起こし、
    前記所定の移動に続いて、前記所定の第2の視点(70)から前記第2の眼の画像(71)を取得するように前記眼撮像装置(1)を制御し、かつ
    前記移動制御モジュール(4;4-1;4-2)を制御して、前記第1の眼の画像(61)における前記画像アーチファクトの向きに基づく移動方向に、前記眼(80)の前記領域(40))及び前記眼撮像装置(1)の視点のうちの一方の、前記領域(40)及び前記眼撮像装置(1)の視点のうちの他方に対する所定の移動を引き起こすように構成される、眼科撮像システム(10;10-1;10-2)。
  2. 前記制御モジュール(2;2-1;2-2)は、
    前記移動制御モジュール(4;4-1;4-2)を制御して、前記所定の移動として、前記眼(80)の前記領域(40)と前記眼撮像装置(1)の視点との相対移動を、前記眼(80)の注視方向(400)の所定の変化によって引き起こすように構成される請求項に記載の眼科撮像システム(10;10-1;10-2)。
  3. 前記移動制御モジュール(4-2)は、
    前記眼(80)の注視方向(400)を設定するための固視標(312)を被検者に表示するように構成された固視標表示部(8)を備え、
    前記制御モジュール(2-2)は、
    前記眼(80)の前記注視方向(400)に所定の変化を生じさせるために、表示された前記固視標(312)の位置を設定するように構成される、請求項に記載の眼科撮像システム(10-2)。
  4. 前記移動制御モジュール(4)は、
    前記領域(40)に対する前記眼撮像装置(1)の視点を3つの異なる移動方向の少なくとも1つに沿って移動させることによって、又は3つの異なる回転軸のうちの少なくとも1つの周りで前記眼撮像装置(1)の視点を回転させることによって、前記所定の移動を行うように動作可能な移動機構(5)を備え、
    前記制御モジュール(2)は、前記移動制御モジュール(4)に、前記所定の移動を行わせるように前記移動機構(5)を制御させるように構成されている、請求項に記載の眼科撮像システム(10)。
  5. 前記移動制御モジュール(4-1)は、
    前記眼(8)の位置を監視するように構成された眼追跡モジュール(6)と、
    前記眼(80)の監視位置及び前記眼(80)の所定の目標位置に基づいて、前記眼(80)の監視位置が前記眼(80)の目標位置に向かって移動するように、被検者に前記眼(80)を移動させるように指示する視覚信号、音声信号及び触覚信号の少なくとも1つを含むフィードバック信号を生成するように構成されたフィードバック信号発生器(7)と、
    を備え、
    前記制御モジュール(2-1)は、前記フィードバック信号発生器(7)によって生成されたフィードバック信号が被検者を誘導して、前記所定の移動をするように、前記眼(80)の目標位置を設定するように構成される、請求項に記載の眼科撮像システム(10-1)。
  6. 前記画像データ処理モジュール(3)は、第1及び第2の眼の画像を互いに位置合わせし、位置合わせされた前記第1及び第2の眼の画像の重複領域内に対応して配置された画素の値を平均化することによって、前記高画質化された眼の画像を生成するように構成される、請求項1からの何れか1項に記載の眼科撮像システム(10;10-1;10-2;10-3)。
  7. 前記画像データ処理モジュール(3)は、
    位置合わせされた前記第1及び第2の画像が共通の重複領域を有するように、前記第1及び第2の眼の画像を互いに位置合わせし、
    前記高画質化された眼の画像として、前記高画質化された眼の画像の各画素に、前記第1の眼の画像(61)からの対応する重なりの共通領域内に位置する画素の画素値、又は前記第2の眼の画像(71)からの対応する重なりの共通領域内に位置する画素の画素値のいずれかであるそれぞれの画素値を割り当てることによって、前記重複領域の強調画像を生成し、
    前記高画質化された眼の画像は、前記第1の眼の画像の画像アーチファクトを定義する前記第1の眼の画像内の画素のうちの少なくともいくつかの画素の画素値の代わりに、前記第1の眼の画像(61)の取得中に画像から前記物体(50)によって妨害された前記眼(80)の前記領域(40)の部分の少なくとも一部を示す、位置合わせされた前記第2の眼の画像内に対応して配置された画素の画素値、又は、前記第2の眼の画像(71)の画像アーチファクトを定義する前記第2の眼の画像内の画素のうちの少なくともいくつかの画素の画素値の代わりに、前記第2の眼の画像(71)の取得中に画像から前記物体(50)によって妨害された前記領域(40)の部分の少なくとも一部を示す、位置合わせされた前記第1の眼の画像内に対応して配置された画素の画素値を含む、ように構成されている、請求項1からの何れか1項に記載の眼科撮像システム(10;10-1;10-2;10-3)。
  8. 前記画像データ処理モジュール(3)は、
    前記第1の眼の画像(61)及び前記第2の眼の画像(71)の各々における各画素を、前記眼(80)のそれぞれの部分又は画像アーチファクトのそれぞれの部分のいずれかを示すものとして分類すること、
    前記第1の眼の画像(61)及び前記第2の眼の画像(71)のそれぞれを処理して、画像アーチファクトを示す画素をマスクアウトすること、及び、処理された前記第1の眼の画像(61)と前記第2の眼の画像(71)との中の対応する位置にある画素の画素値を加算すること、
    によって前記高画質化された眼の画像を生成するように構成される、請求項1からの何れか1項に記載の眼科撮像システム(10;10-1;10-2;10-3)。
  9. 前記眼撮像装置(1;1-2)は、走査型レーザ検眼鏡又は光干渉断層撮像システムのうちの少なくとも1つを備える、請求項1からの何れか1項に記載の眼科撮像システム(10;10-1;10-2;10-3)。
  10. 前記物体は、毛髪、前記眼(80)のまつげ、前記眼(80)の虹彩、及び前記眼(80)の瞼のうちの1つである、請求項1からの何れか1項に記載の眼科撮像システム(10;10-1;10-2;10-3)。
  11. コンピュータプログラムがプロセッサ(120)によって実行されると、前記プロセッサ(120)に、被検者の眼(80)の領域(40)の画像を取得するように動作可能な眼撮像装置(1)、並びに前記眼(80)の前記領域(40))及び前記眼撮像装置(1)の視点のうちの一方の、前記領域(40)及び前記眼撮像装置(1)の視点のうちの他方に対する移動を制御するように動作可能な移動制御モジュール(4;4-1;4-2)を備える眼科撮像システム(10;10-1;10-2)を制御させる命令を含み、
    前記命令は、前記コンピュータプログラム(190)が前記プロセッサ(120)によって実行される場合、前記プロセッサ(120)に、
    前記領域(40)に関する第1の視点(60)から、第1の眼の画像(61)の取得中に、前記眼撮像装置(1)と前記領域(40)との間の物体(50)による前記領域(40)の一部の画像からの妨害によって引き起こされる画像アーチファクトを有する前記領域(40)の前記第1の眼の画像(61)を取得するように、前記眼撮像装置(1)を制御することと、
    前記眼撮像装置(1)が所定の第2の視点(70)から第2の眼の画像(71)を取得するよう配置されるように、前記領域(40)及び前記眼撮像装置(1)の視点のうちの一方の、前記領域(40)及び前記眼撮像装置(1)の視点のうちの他方に対する所定の移動を引き起こすように前記移動制御モジュール(4)を制御することと、
    前記所定の移動に続いて、前記所定の第2の視点(70)から前記第2の眼の画像(71)を取得するように前記眼撮像装置(1)を制御し、前記第2の眼の画像(71)が、前記第1の眼の画像(61)の取得中に、画像化された前記物体(50)によって妨害された前記領域(40)の部分の少なくとも一部を示すことと、
    前記第1の眼の画像(61)の画像データを前記第2の眼の画像(71)の画像データと組み合わせて、高画質化された眼の画像を生成することであって、
    前記第1の眼の画像(61)若しくは前記第2の眼の画像(71)の取得中に、前記眼撮像装置(1)と前記領域(40)との間の前記物体(50)による前記領域(40)の一部の画像からの妨害によって引き起こされる画像アーチファクトを有さない、又は、
    前記第1の眼の画像(61)における画像アーチファクト、若しくは、前記第2の眼の画像(71)の取得中に前記眼撮像装置(1)と前記領域(40)との間の前記物体(50)による前記領域(40)の一部の画像からの妨害によって引き起こされる、前記第2の眼の画像(71)における画像アーチファクトのうちの少なくとも1つに基づかつ前記第1の眼の画像(61)における画像アーチファクト若しくは前記第2の眼の画像(71)における画像アーチファクトのうちの少なくとも1つに関してより小さい画像アーチファクトを有する高画質化された眼の画像を生成することと、
    によって前記眼科撮像システム(10;10-1;10-2)を制御させるコンピュータプログラム(190)。
JP2020170096A 2019-10-07 2020-10-07 眼科撮像システム Active JP7103564B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
EP19201717 2019-10-07
EP19201717.6A EP3804606B1 (en) 2019-10-07 2019-10-07 Ophthalmic imaging system

Publications (3)

Publication Number Publication Date
JP2021074529A JP2021074529A (ja) 2021-05-20
JP2021074529A5 JP2021074529A5 (ja) 2022-05-12
JP7103564B2 true JP7103564B2 (ja) 2022-07-20

Family

ID=68172114

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2020170096A Active JP7103564B2 (ja) 2019-10-07 2020-10-07 眼科撮像システム

Country Status (6)

Country Link
US (1) US11974810B2 (ja)
EP (1) EP3804606B1 (ja)
JP (1) JP7103564B2 (ja)
CN (1) CN112690753B (ja)
DK (1) DK3804606T3 (ja)
ES (1) ES2917214T3 (ja)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113658083B (zh) * 2021-10-19 2022-01-18 广东唯仁医疗科技有限公司 一种眼球图像噪声消除方法、系统、装置及介质
FI4252628T3 (fi) 2022-03-28 2024-09-11 Optos Plc Optisen koherenssitomografian angiografian tiedonkäsittely projektioartefaktien vähentämiseksi
WO2024014746A1 (en) * 2022-07-11 2024-01-18 Samsung Electronics Co., Ltd. Method and system for generating an image of an ocular portion

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006333902A (ja) 2005-05-31 2006-12-14 Matsushita Electric Ind Co Ltd 異物検出方法及び眼球観察装置
JP2009015518A (ja) 2007-07-03 2009-01-22 Panasonic Corp 眼画像撮影装置及び認証装置
JP2013527775A (ja) 2010-03-23 2013-07-04 ニューロビジョン イメージング,エルエルシー 目を撮像するための装置および方法
WO2019036196A1 (en) 2017-08-14 2019-02-21 Verily Life Sciences Llc DYNAMIC LIGHTING DURING RETINAL BURST IMAGING

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB9323065D0 (en) 1993-11-09 1994-01-05 Besca Ltd A wide field retinal scanning ophthalmoscope
DE602008002276D1 (de) * 2007-04-26 2010-10-07 St Microelectronics Rousset Lokalisierungsverfahren und -vorrichtung einer menschlichen Iris in einem Bild
EP2057938A1 (en) * 2007-11-08 2009-05-13 Nidek Co., Ltd. Fundus camera
JP6057621B2 (ja) * 2012-08-30 2017-01-11 キヤノン株式会社 眼科装置及びその制御方法
US9390327B2 (en) * 2013-09-16 2016-07-12 Eyeverify, Llc Feature extraction and matching for biometric authentication
US9905008B2 (en) * 2013-10-10 2018-02-27 University Of Rochester Automated fundus image field detection and quality assessment
CN108135467A (zh) * 2015-08-21 2018-06-08 奇跃公司 眼睑形状估计
US10820794B2 (en) * 2015-11-06 2020-11-03 Canon Kabushiki Kaisha Pupil monitoring method for adaptive optics imaging system
NZ744400A (en) * 2016-01-19 2019-11-29 Magic Leap Inc Eye image collection, selection, and combination
JP2017158836A (ja) * 2016-03-10 2017-09-14 キヤノン株式会社 眼科装置および撮像方法
JP2018061621A (ja) * 2016-10-11 2018-04-19 オプトス ピーエルシー 眼底画像撮影装置、眼底画像撮影方法、及び眼底画像撮影プログラム
JP6923392B2 (ja) * 2017-08-28 2021-08-18 株式会社トプコン 眼科装置
US10852817B1 (en) * 2018-11-02 2020-12-01 Facebook Technologies, Llc Eye tracking combiner having multiple perspectives

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006333902A (ja) 2005-05-31 2006-12-14 Matsushita Electric Ind Co Ltd 異物検出方法及び眼球観察装置
JP2009015518A (ja) 2007-07-03 2009-01-22 Panasonic Corp 眼画像撮影装置及び認証装置
JP2013527775A (ja) 2010-03-23 2013-07-04 ニューロビジョン イメージング,エルエルシー 目を撮像するための装置および方法
WO2019036196A1 (en) 2017-08-14 2019-02-21 Verily Life Sciences Llc DYNAMIC LIGHTING DURING RETINAL BURST IMAGING

Also Published As

Publication number Publication date
US11974810B2 (en) 2024-05-07
EP3804606B1 (en) 2022-05-11
US20210100448A1 (en) 2021-04-08
EP3804606A1 (en) 2021-04-14
CN112690753B (zh) 2024-06-18
DK3804606T3 (da) 2022-06-13
JP2021074529A (ja) 2021-05-20
CN112690753A (zh) 2021-04-23
ES2917214T3 (es) 2022-07-07

Similar Documents

Publication Publication Date Title
JP7103564B2 (ja) 眼科撮像システム
KR101300417B1 (ko) 화상 처리 장치 및 화상 처리 방법
JP2021074529A5 (ja)
EP2497410B1 (en) Ophthalmologic apparatus and control method of the same
US10165939B2 (en) Ophthalmologic apparatus and ophthalmologic apparatus control method
US11617509B2 (en) Ophthalmic device
JP7306467B2 (ja) 画像処理方法、画像処理装置、及びプログラム
US10846892B2 (en) Image processing apparatus, image processing method, and storage medium
JP7027076B2 (ja) 画像処理装置、位置合わせ方法及びプログラム
JP2019047841A (ja) 画像処理装置、画像処理方法及びプログラム
US20220409046A1 (en) Ophthalmic imaging apparatus and ophthalmic image processing appratus
JP7005382B2 (ja) 情報処理装置、情報処理方法およびプログラム
JP2019063446A (ja) 画像処理装置、画像処理方法及びプログラム
JP2022033290A (ja) 情報処理装置、情報処理方法およびプログラム
JP7204345B2 (ja) 画像処理装置、画像処理方法及びプログラム
JP6305502B2 (ja) 眼科装置及び眼科装置の作動方法
WO2021111840A1 (ja) 画像処理方法、画像処理装置、及びプログラム
WO2019203314A1 (ja) 画像処理方法、プログラム、及び画像処理装置
JP2021058285A (ja) 画像処理装置、画像処理方法、及びプログラム
JP2020162927A (ja) 眼科撮影装置、および、眼科用画像処理プログラム
JP2019126572A (ja) 画像処理装置、画像処理方法及びプログラム
BĚŤÁK et al. MULTIMODAL REGISTRATION OF FUNDUS CAMERA AND OCT RETINAL IMAGES

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210120

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20211026

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20211109

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20220207

A524 Written submission of copy of amendment under article 19 pct

Free format text: JAPANESE INTERMEDIATE CODE: A524

Effective date: 20220427

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20220607

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20220622

R150 Certificate of patent or registration of utility model

Ref document number: 7103564

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150