CN117597061A - 图像处理方法、图像处理程序、图像处理装置及眼科装置 - Google Patents

图像处理方法、图像处理程序、图像处理装置及眼科装置 Download PDF

Info

Publication number
CN117597061A
CN117597061A CN202280047704.7A CN202280047704A CN117597061A CN 117597061 A CN117597061 A CN 117597061A CN 202280047704 A CN202280047704 A CN 202280047704A CN 117597061 A CN117597061 A CN 117597061A
Authority
CN
China
Prior art keywords
image
fundus
fundus image
eye
inspected
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202280047704.7A
Other languages
English (en)
Inventor
田边泰士
藤原朋春
外山干
向井真梨子
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nikon Corp
Original Assignee
Nikon Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nikon Corp filed Critical Nikon Corp
Publication of CN117597061A publication Critical patent/CN117597061A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/0002—Inspection of images, e.g. flaw detection
    • G06T7/0012—Biomedical image inspection
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
    • A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
    • A61B3/12—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for looking at the eye fundus, e.g. ophthalmoscopes
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
    • A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
    • A61B3/1005—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for measuring distances inside the eye, e.g. thickness of the cornea
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
    • A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
    • A61B3/102—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for optical coherence tomography [OCT]
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
    • A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
    • A61B3/113—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for determining or recording eye movement
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
    • A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
    • A61B3/12—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for looking at the eye fundus, e.g. ophthalmoscopes
    • A61B3/1225—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for looking at the eye fundus, e.g. ophthalmoscopes using coherent radiation
    • A61B3/1233—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for looking at the eye fundus, e.g. ophthalmoscopes using coherent radiation for measuring blood flow, e.g. at the retina
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/20—Analysis of motion
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/30—Determination of transform parameters for the alignment of images, i.e. image registration
    • G06T7/33—Determination of transform parameters for the alignment of images, i.e. image registration using feature-based methods
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/70—Determining position or orientation of objects or cameras
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10072—Tomographic images
    • G06T2207/10101—Optical tomography; Optical coherence tomography [OCT]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30004—Biomedical image processing
    • G06T2207/30041—Eye; Retina; Ophthalmic
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30004—Biomedical image processing
    • G06T2207/30101—Blood vessel; Artery; Vein; Vascular

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Ophthalmology & Optometry (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • Biophysics (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Theoretical Computer Science (AREA)
  • Radiology & Medical Imaging (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Quality & Reliability (AREA)
  • Multimedia (AREA)
  • Hematology (AREA)
  • Human Computer Interaction (AREA)
  • Eye Examination Apparatus (AREA)

Abstract

一种处理器进行的图像处理，其中，包括：取得被检眼的第一眼底图像的步骤；取得使用所述第一眼底图像设定的、取得所述被检眼的眼底的断层图像的位置的步骤；取得所述被检眼的第二眼底图像的步骤；判断所述取得的位置是否包含于所述第一眼底图像的规定范围的步骤；以及在所述取得的位置包含于所述规定范围的情况下，使用进行所述第一眼底图像与所述第二眼底图像的位置匹配的第一配准处理算出所述被检眼的第一运动量，在所述取得的位置为所述规定范围以外的情况下，使用进行所述第一眼底图像与所述第二眼底图像的位置匹配的与所述第一配准处理不同的第二配准处理算出所述被检眼的第二运动量的步骤。

Description

图像处理方法、图像处理程序、图像处理装置及眼科装置
技术领域
本公开的技术涉及图像处理方法、程序、图像处理装置及眼科装置。
背景技术
在美国专利申请公开第2019/0059723号说明书中公开了使光学系统与被检眼的运动相匹配地移动的跟踪方法。以往要求拍摄没有抖动的眼底图像。
发明内容
本公开的技术的第一方案的图像处理方法是处理器进行的图像处理，其中，包括：取得被检眼的第一眼底图像的步骤；取得使用所述第一眼底图像设定的、取得所述被检眼的眼底的断层图像的位置的步骤；取得所述被检眼的第二眼底图像的步骤；判断所述取得的位置是否包含于所述第一眼底图像的规定范围的步骤；以及在所述取得的位置包含于所述规定范围的情况下，使用进行所述第一眼底图像与所述第二眼底图像的位置匹配的第一配准处理算出所述被检眼的第一运动量，在所述取得的位置为所述规定范围以外的情况下，使用进行所述第一眼底图像与所述第二眼底图像的位置匹配的与所述第一配准处理不同的第二配准处理算出所述被检眼的第二运动量的步骤。
本公开的技术的第二方案的图像处理装置是具备处理器的图像处理装置，其中，所述处理器执行图像处理，所述图像处理包括：取得被检眼的第一眼底图像的步骤；取得使用所述第一眼底图像设定的、取得所述被检眼的眼底的断层图像的位置的步骤；
取得所述被检眼的第二眼底图像的步骤；判断所述取得的位置是否包含于所述第一眼底图像的规定范围的步骤；以及在所述取得的位置包含于所述规定范围的情况下，使用进行所述第一眼底图像与所述第二眼底图像的位置匹配的第一配准处理算出所述被检眼的第一运动量，在所述取得的位置为所述规定范围以外的情况下，使用进行所述第一眼底图像与所述第二眼底图像的位置匹配的与所述第一配准处理不同的第二配准处理算出所述被检眼的第二运动量的步骤。
本公开的技术的第三方案的图像处理程序使计算机执行图像处理，所述图像处理包括：取得被检眼的第一眼底图像的步骤；取得使用所述第一眼底图像设定的、取得所述被检眼的眼底的断层图像的位置的步骤；取得所述被检眼的第二眼底图像的步骤；判断所述取得的位置是否包含于所述第一眼底图像的规定范围的步骤；以及在所述取得的位置包含于所述规定范围的情况下，使用进行所述第一眼底图像与所述第二眼底图像的位置匹配的第一配准处理算出所述被检眼的第一运动量，在所述取得的位置为所述规定范围以外的情况下，使用进行所述第一眼底图像与所述第二眼底图像的位置匹配的与所述第一配准处理不同的第二配准处理算出所述被检眼的第二运动量的步骤。
附图说明
图1是眼科系统100的框图。
图2是示出眼科装置110的整体结构的概略结构图。
图3是眼科装置110的控制装置16的CPU16A的功能的框图。
图4是示出眼科装置110的CPU16A执行的程序的流程图。
图5是图4的步骤306的眼跟踪处理的子例程的流程图。
图6是示出眼球中的眼底中心区域和眼底周边区域的图。
图7A是示出UWF-SLO眼底图像400G的图。
图7B是示出重叠了取得OCT数据的位置402而成的UWF-SLO眼底图像400G的图。
图7C是示出重叠了取得OCT数据的位置402和取得矩形SLO眼底图像的区域400而成的UWF-SLO眼底图像400G的图。
图8是示出查看器150的显示器的屏幕500的图。
具体实施方式
以下，参照附图详细说明本发明的实施方式。
参照图1说明眼科系统100的结构。如图1所示，眼科系统100具备眼科装置110、眼轴长测定器120、管理服务器装置(以下，称为“服务器”)140及图像显示装置(以下，称为“查看器”)150。眼科装置110取得眼底图像。眼轴长测定器120测定被检者的眼轴长。服务器140将通过利用眼科装置110拍摄被检者的眼底而得到的眼底图像与被检者的ID对应地存储。查看器150显示从服务器140取得的眼底图像等医疗信息。
眼科装置110是本公开的技术的“图像处理装置”的一例。
眼科装置110、眼轴长测定器120、服务器140及查看器150经由网络130相互连接。网络130是LAN、WAN、互联网或广域以太网等任意的网络。例如，在眼科系统100构建于一个医院的情况下，网络130能够采用LAN。
需要说明的是，其他眼科设备(视野测定、眼压测定等的检查设备)、进行使用了人工智能的图像解析的诊断支援装置可以经由网络130与眼科装置110、眼轴长测定器120、服务器140及查看器150连接。
接着，参照图2说明眼科装置110的结构。
为了便于说明，将激光扫描检眼镜(Scanning Laser Ophthalmoscope)称为“SLO”。另外，将光学相干层析成像(Optical Coherence Tomography)称为“OCT”。
需要说明的是，将眼科装置110设置于水平面的情况下的水平方向设为“X方向”，将相对于水平面的垂直方向设为“Y方向”，将连结被检眼12的前眼部的瞳孔的中心与眼球的中心的方向设为“Z方向”。因此，X方向、Y方向及Z方向相互垂直。
眼科装置110包括拍摄装置14及控制装置16。拍摄装置14具备SLO单元18、OCT单元20及拍摄光学系统19，取得被检眼12的眼底的眼底图像。以下，将利用SLO单元18取得的二维眼底图像称为SLO眼底图像。另外，将基于利用OCT单元20取得的OCT数据作成的视网膜的断层图像或正面图像(en-face图像)等称为OCT图像。
控制装置16具备计算机，所述计算机具有CPU(Central Processing Unit(中央处理装置))16A、RAM(Random Access Memory)16B、ROM(Read-Only memory)16C及输入输出(I/O)端口16D。在ROM16C中存储有后述的图像处理程序。需要说明的是，控制装置16可以还具备外部存储装置，并将图像处理程序存储于外部存储装置。
图像处理程序是本公开的技术的“程序”的一例。ROM16C(或外部存储装置)是本公开的技术的“存储器”及“计算机可读存储介质”的一例。CPU16A是本公开的技术的“处理器”的一例。控制装置16是本公开的技术的“计算机程序产品”的一例。
控制装置16具备经由I/O端口16D与CPU16A连接的输入/显示装置16E。输入/显示装置16E具有显示被检眼12的图像或从用户受理各种指示的图形用户接口。作为图形用户接口，可列举触摸面板·显示器。
控制装置16具备与I/O端口16D连接的通信接口(I/F)16F。眼科装置110经由通信接口(I/F)16F及网络130与眼轴长测定器120、服务器140及查看器150连接。
如上所述，在图2中，眼科装置110的控制装置16具备输入/显示装置16E，但本公开的技术不限定于此。例如，也可以是，眼科装置110的控制装置16不具备输入/显示装置16E，而是具备与眼科装置110物理独立的单独的输入/显示装置。在该情况下，该显示装置具备在控制装置16的CPU16A的控制下工作的图像处理处理器单元。也可以是，图像处理处理器单元基于CPU16A输出指示的图像信号，显示SLO眼底图像、OCT图像等。
拍摄装置14在控制装置16的CPU16A的控制下工作。拍摄装置14包括SLO单元18、拍摄光学系统19及OCT单元20。拍摄光学系统19包括第一光学扫描器22、第二光学扫描器24及广角光学系统30。
第一光学扫描器22使从SLO单元18射出的光在X方向及Y方向上二维扫描。第二光学扫描器24使从OCT单元20射出的光在X方向及Y方向上二维扫描。第一光学扫描器22及第二光学扫描器24是能够使光束偏转的光学元件即可，例如能够使用多角镜、检流计镜等。另外，也可以是它们的组合。
广角光学系统30包括：具有公共光学系统28的对物光学系统(在图2中未图示)及将来自SLO单元18的光和来自OCT单元20的光合成的合成部26。
需要说明的是，公共光学系统28的对物光学系统也可以是使用了椭圆镜等凹面镜的反射光学系统、使用了广角透镜等的折射光学系统、或者将凹面镜、透镜组合而成的反射折射光学系统。通过采用使用了椭圆镜、广角透镜等的广角光学系统，不仅能够拍摄存在视神经乳头、黄斑的眼底中心部，也能够拍摄眼球的赤道部、存在涡静脉的眼底周边部的视网膜。
利用广角光学系统30实现眼底上在广视野(FOV：Field of View)12A中的观察。FOV12A示出可利用拍摄装置14拍摄的范围。FOV12A可表现作为视野角。在本实施方式中，视野角可用内部照射角和外部照射角规定。外部照射角是指以瞳孔27为基准规定从眼科装置110向被检眼12照射的光束的照射角而得到的照射角。另外，内部照射角是指以眼球中心O为基准规定向眼底照射的光束的照射角而得到的照射角。外部照射角和内部照射角处于对应关系。例如，在外部照射角为120度的情况下，内部照射角相当于约160度。在本实施方式中，内部照射角设为200度。
在此，将用内部照射角规定时160度以上的拍摄视角拍摄并得到的SLO眼底图像称为UWF-SLO眼底图像。需要说明的是，UWF是UltraWide Field(超广角)的简称。
SLO系统利用图2所示的控制装置16、SLO单元18及拍摄光学系统19实现。由于SLO系统具备广角光学系统30，所以能够进行较广的FOV12A中的眼底拍摄。
SLO单元18具备多个光源例如B光(蓝色光)的光源40、G光(绿色光)的光源42、R光(红色光)的光源44及IR光(红外线(例如近红外光))的光源46、将来自光源40、42、44、46的光反射或透射并引导到一个光路的光学系统48、50、52、54、56。光学系统48、50、56是镜，光学系统52、54是分束器。B光由光学系统48反射，透射经过光学系统50，并由光学系统54反射，G光由光学系统50、54反射，R光透射经过光学系统52、54，IR光由光学系统56、52反射，分别引导到一个光路。
SLO单元18构成为能够切换发出G光、R光及B光的模式、发出红外线的模式等、发出波长不同的激光的光源或者发光的光源的组合。在图2所示的例子中，具备B光(蓝色光)的光源40、G光的光源42、R光的光源44及IR光的光源46这四个光源，但本公开的技术不限定于此。例如，也可以是，SLO单元18进一步还具备白色光的光源，在仅发出白色光的模式等各种模式下发出光。
从SLO单元18入射到拍摄光学系统19的光利用第一光学扫描器22在X方向及Y方向上扫描。扫描光经由广角光学系统30及瞳孔27，照射到被检眼12的后眼部。由眼底反射的反射光经由广角光学系统30及第一光学扫描器22向SLO单元18入射。
SLO单元18具备分束器64和分束器58，所述分束器64将来自被检眼12的后眼部(例如眼底)的光中的B光反射且将B光以外的光透射，所述分束器58将透射经过分束器64的光中的G光反射且透射G光以外的光。SLO单元18具备分束器60，所述分束器60将透射经过分束器58的光中的R光反射且将R光以外的光透射。SLO单元18具备分束器62，所述分束器62将透射经过分束器60的光中的IR光反射。
SLO单元18与多个光源对应地具备多个光检测元件。SLO单元18具备B光检测元件70及G光检测元件72，所述B光检测元件70检测由分束器64反射的B光，所述G光检测元件72检测由分束器58反射的G光。SLO单元18具备R光检测元件74及IR光检测元件76，所述R光检测元件74检测由分束器60反射的R光，所述IR光检测元件76检测由分束器62反射的IR光。
经由广角光学系统30及第一光学扫描器22向SLO单元18入射的光(由眼底反射的反射光)为B光的情况下，由分束器64反射并由B光检测元件70受光，在G光的情况下，透射经过分束器64，由分束器58反射并由G光检测元件72受光。上述入射的光为R光的情况下，透射经过分束器64、58，由分束器60反射并由R光检测元件74受光。上述入射的光为IR光的情况下，透射经过分束器64、58、60，由分束器62反射并由IR光检测元件76受光。CPU16A使用由B光检测元件70、G光检测元件72、R光检测元件74及IR光检测元件76检测出的信号，生成UWF-SLO眼底图像。
在UWF-SLO眼底图像(如后所述，也称为UWF眼底图像、原始眼底图像)中有用G色拍摄眼底而得到的UWF-SLO眼底图像(G色眼底图像)、用R色拍摄眼底而得到的UWF-SLO眼底图像(R色眼底图像)。在UWF-SLO眼底图像中有用B色拍摄眼底而得到的UWF-SLO眼底图像(B色眼底图像)、用IR拍摄眼底而得到的UWF-SLO眼底图像(IR眼底图像)。
另外，控制装置16以同时发光的方式控制光源40、42、44。通过用B光、G光及R光同时拍摄被检眼12的眼底，从而能够得到各位置相互对应的G色眼底图像、R色眼底图像及B色眼底图像。从G色眼底图像、R色眼底图像及B色眼底图像能够得到RGB彩色眼底图像。控制装置16以同时发光的方式控制光源42、44，通过用G光及R光同时拍摄被检眼12的眼底，从而能够得到各位置相互对应的G色眼底图像及R色眼底图像。从G色眼底图像及R色眼底图像能够得到RG彩色眼底图像。
这样，作为UWF-SLO眼底图像，具体而言，有B色眼底图像、G色眼底图像、R色眼底图像、IR眼底图像、RGB彩色眼底图像、RG彩色眼底图像。UWF-SLO眼底图像的各图像数据与经由输入/显示装置16E输入的被检者的信息一起，经由通信接口(I/F)16F从眼科装置110向服务器140发送。UWF-SLO眼底图像的各图像数据和被检者的信息对应地存储于存储装置254。需要说明的是，在被检者的信息中，例如有被检者ID、姓名、年龄、视力、右眼/左眼的差异等。被检者的信息由操作者经由输入/显示装置16E输入。
OCT系统利用图2所示的控制装置16、OCT单元20及拍摄光学系统19实现。由于OCT系统具备广角光学系统30，所以与上述SLO眼底图像的拍摄同样地，能够进行较广的FOV12A中的眼底拍摄。OCT单元20包括光源20A、传感器(检测元件)20B、第一光耦合器20C、参照光学系统20D、准直透镜20E及第二光耦合器20F。
从光源20A射出的光在第一光耦合器20C中分支。分支得到的一方的光作为测定光用准直透镜20E使之成为平行光后，入射到拍摄光学系统19。测定光利用第二光学扫描器24在X方向及Y方向上扫描。扫描光经由广角光学系统30及瞳孔27，照射到眼底。由眼底反射的测定光经由广角光学系统30及第二光学扫描器24向OCT单元20入射，并经由准直透镜20E及第一光耦合器20C入射到第二光耦合器20F。
从光源20A射出并在第一光耦合器20C中分支得到的另一方的光作为参照光向参照光学系统20D入射，并经由参照光学系统20D入射到第二光耦合器20F。
入射到第二光耦合器20F的这些光，即在眼底反射的测定光、参照光在第二光耦合器20F中干涉并生成干涉光。干涉光由传感器20B受光。CPU16A对用传感器20B检测出的检测信号进行傅里叶变换等信号处理，生成OCT数据。CPU16A基于该OCT数据生成断层图像、en-face图像等OCT图像。
在此，OCT系统能够取得用广角光学系统30实现的拍摄区域的OCT数据。
用CPU16A生成的OCT数据、断层图像、en-face图像与被检者的信息一起，经由通信接口(I/F)16F从眼科装置110向服务器140发送。OCT数据、断层图像、en-face图像等各种OCT图像与被检者的信息关联并存储于存储装置254。
需要说明的是，在本实施方式中，例示光源20A为波长扫描型的SS-OCT(Swept-Source OCT)，但也可以是SD-OCT(Spectral-Domain OCT)、TD-OCT(Time-Domain OCT)等各种方式的OCT系统。
接着，说明眼轴长测定器120。眼轴长测定器120测定眼轴长，所述眼轴长是被检眼12的眼轴方向上的长度。
眼轴长测定器120将测定得到的眼轴长发送给服务器140。服务器140将被检者的眼轴长与被检者ID对应地存储。
接着，参照图3，说明通过眼科装置110的CPU16A执行眼科设备的控制程序从而实现的各种功能。眼科设备的控制程序具备拍摄控制功能、显示控制功能、图像处理功能及处理功能。通过CPU16A执行具有该各功能的眼科设备的控制程序，从而如图3所示，CPU16A作为拍摄控制部202、显示控制部204、图像处理部206及处理部208发挥功能。
接着，使用图4详细说明眼科装置110的图像处理。通过眼科装置110的控制装置16的CPU16A执行眼科设备的图像处理程序，从而实现图4的流程图所示的眼科设备的控制。
图4的流程图所示的处理是本公开的技术的“图像处理方法”的一例。
眼科装置110的操作者请被检者将下巴放在眼科装置110的未图示的支承部上，并调整被检者的被检眼12的位置。
眼科装置110的显示控制部204在输入/显示装置16E的画面上显示用于被检者的信息的输入和模式选择的菜单画面。在模式中有取得SLO眼底图像的SLO模式及取得OCT眼底图像的OCT模式等。操作者经由输入/显示装置16E输入被检者的信息，并且当选择OCT模式时，CPU16A开始图4所示的眼科设备的控制程序的执行。
在步骤302中，拍摄控制部202控制SLO单元18及拍摄光学系统19，取得被检眼12的眼底的第一眼底图像，具体而言，使B光源40、G光源42、R光源44发光，以三种波长取得UWF-SLO眼底图像。需要说明的是，如上所述，UWF-SLO眼底图像包括G色眼底图像、R色眼底图像、B色眼底图像及RGB彩色眼底图像。
UWF-SLO眼底图像是本公开的技术的“第一眼底图像”的一例。
在步骤304中，显示控制部204在输入/显示装置16E的显示器上显示UWF-SLO眼底图像400G。在图7A中示出显示于显示器的UWF-SLO眼底图像400G。UWF-SLO眼底图像400G相当于SLO单元18能够扫描的区域的图像，如图7A所示，包括来自被检眼12的眼底本身的反射光被引导并形成的被检眼的眼底区域400gg。
用户(眼科装置110的操作者)使用显示的UWF-SLO眼底图像400G，采用触摸面板或未图示的输入器具设定取得OCT数据的区域(取得断层图像的位置)。在图7B中示出使用UWF-SLO眼底图像400G，用X方向的直线设定取得断层图像的位置402的情况。当用直线设定取得断层图像的位置402时，用箭头表示取得断层图像的位置402。
需要说明的是，取得断层图像的位置402不限定于如图7B所示的X方向的直线，可以是某一个点；线，例如Y方向的直线、与X方向及Y方向各自交叉的直线、连结两个点的曲线等；面，例如圆形区域或矩形区域等。
在取得断层图像的位置为一个点的情况下，通过眼底的一个点的深度(光轴)方向上的扫描(将该扫描称为“A扫描”。)能够得到OCT数据(“A扫描数据”)。
在取得断层图像的位置为线的情况下，通过沿着该线移动A扫描同时进行多次A扫描(称为“B扫描”。)，从而能够得到OCT数据(称为“B扫描数据”)。
在取得断层图像的位置为面的情况下，通过沿着该面移动B扫描同时重复B扫描(称为“C扫描”。)，从而能够得到OCT数据(称为“C扫描数据”)。利用C扫描数据生成三维OCT数据，基于该三维OCT数据生成二维的en-face图像等。
然后，处理部208取得使用UWF-SLO眼底图像400G设定的取得断层图像的位置402的位置数据(坐标数据等)。示出取得断层图像的位置的数据不限于坐标数据，也可以是粗略可知眼底图像的位置的编号等。
在步骤306中，执行眼跟踪处理。使用图5说明眼跟踪处理。
需要说明的是，本公开的技术不限定于这样当在步骤304中取得使用UWF-SLO眼底图像400G设定的取得断层图像的位置402的位置数据时，立刻执行眼跟踪处理。例如，操作者确认使被检者的被检眼12与眼科装置110的对准成为适当的状态。当确认已使对准成为适当的状态时，操作者通过操作位于输入/显示装置16E的显示器上的按键等，从而指示开始OCT拍摄。这样，在指示了开始OCT拍摄的操作的情况下，执行眼跟踪处理。
在图5的步骤350中，图像处理部206使用UWF-SLO眼底图像的R色眼底图像和G色眼底图像，提取视网膜血管及脉络膜血管各自的特征点。具体而言，图像处理部206首先提取视网膜血管及脉络膜血管各自，并提取视网膜血管及脉络膜血管各自的特征点。
首先，说明使用R色眼底图像和G色眼底图像提取视网膜血管及脉络膜血管各自的方法。
眼的构造形成为构造不同的多个层覆盖玻璃体。在多个层中，从玻璃体侧的最内侧到外侧包括视网膜、脉络膜、巩膜。R光通过视网膜到达脉络膜。因此，在R色眼底图像中包括存在于视网膜的血管(视网膜血管)的信息和存在于脉络膜的血管(脉络膜血管)的信息。与此相对，G光只到达视网膜。因此，在G色眼底图像中仅包括存在于视网膜的血管(视网膜血管)的信息。
图像处理部206通过对G色眼底图像实施黑帽滤波处理等图像处理，从而从G色眼底图像提取视网膜血管。由此，能够得到从G色眼底图像仅提取视网膜血管的像素而成的视网膜血管图像。黑帽滤波处理是指如下处理：取得作为原图像的G色眼底图像的图像数据与通过对该原图像进行N次(N为1以上的整数)膨胀处理及N次腐蚀处理的闭运算处理而得到的图像数据的差值。
接着，图像处理部206使用从R色眼底图像、G色眼底图像提取的视网膜血管图像，通过图像修复处理等除去视网膜血管。图像修复处理是指如下处理：以与周围的像素的平均值之差成为特定范围(例如0)的方式设定规定位置的像素值。也就是说，使用从G色眼底图像提取的视网膜血管的位置信息，将R色眼底图像的与视网膜血管相当的像素涂敷为与周围的像素相同的值。由此，从仅提取视网膜血管的像素而得到的R色眼底图像能够得到脉络膜血管图像。而且，图像处理部206可以对于除去视网膜血管而成的R色眼底图像进行如下强调处理：实施自适应直方图均衡化(CLAHE：Contrast Limited Adaptive HistogramEqualization)处理，强调脉络膜血管。
接着，说明使用R色眼底图像和G色眼底图像提取视网膜血管及脉络膜血管各自的特征点的方法。
图像处理部206从视网膜血管图像提取视网膜血管的分支点或合流点作为视网膜血管的第一特征点。然后，从脉络膜血管图像提取脉络膜血管的分支点或合流点作为脉络膜血管的第一特征点。这些视网膜血管的第一特征点和脉络膜血管的第一特征点由处理部208存储于RAM16B。
在步骤352中，拍摄控制部202控制SLO单元18及拍摄光学系统19，取得被检眼12的眼底的矩形SLO眼底图像。
需要说明的是，被检眼12的眼底的矩形SLO眼底图像是本公开的技术的“第二眼底图像”的一例。
具体而言，首先，操作者使用UWF-SLO眼底图像400G，设定取得矩形SLO眼底图像的区域。在图7C中，除了取得断层图像的位置402以外，还示出重叠了取得矩形SLO眼底图像的区域400而成的UWF-SLO眼底图像400G。在图7C所示的例子中，取得矩形SLO眼底图像的区域400包括取得断层图像的位置402的全部区域。
本公开的技术不限定于取得矩形SLO眼底图像的区域400包括取得断层图像的位置402的全部区域的情况。例如，取得矩形SLO眼底图像的区域可以仅包括取得断层图像的位置402的一部分。这样，取得矩形SLO眼底图像的区域可以包括取得断层图像的位置402的至少一部分。
取得矩形SLO眼底图像的区域也可以不包括取得断层图像的位置402。因此，取得矩形SLO眼底图像的区域可以设定为与取得断层图像的位置402无关。
需要说明的是，取得矩形SLO眼底图像的区域400包括取得断层图像的位置402的全部区域时，与区域400完全不包括位置402或仅包括一部分的情况下相比，能够提高用于计算后述的眼的运动量的搜索范围变窄的概率。由此，能够顺畅地进行眼跟踪处理，也就是说，缩短处理时间。
取得矩形SLO眼底图像的区域包括被检眼的眼底区域400gg的至少一部分。
取得矩形SLO眼底图像的区域的大小小于UWF-SLO眼底图像400G的大小。也就是说，矩形SLO眼底图像的视角是比UWF-SLO眼底图像的拍摄视角小的视角，例如设定为10度～50度的视角。
在步骤352中，拍摄控制部202取得使用UWF-SLO眼底图像400G设定的、取得矩形SLO眼底图像的区域400的位置。处理部208将取得矩形SLO眼底图像的区域的位置作为第一位置存储保持于RAM16B。然后，拍摄控制部202通过基于取得的该区域400的位置控制SLO单元18及拍摄光学系统19，取得被检眼12的眼底的图像，从而取得被检眼12的眼底的矩形SLO眼底图像。需要说明的是，在取得矩形SLO眼底图像时，拍摄控制部202通过使IR光源46发光，将IR光照射到眼底，从而拍摄眼底。这是由于，因为IR光不会由被检眼的视网膜的视细胞感知到，所以不会使被检者感到眩光。
接着，在步骤354中，图像处理部206提取第二眼底图像的矩形SLO眼底图像中的视网膜血管及脉络膜血管各自的特征点。
需要说明的是，在用IR光拍摄到的矩形SLO眼底图像中，视网膜血管拍摄为细的黑血管，脉络膜血管拍摄为粗的白血管。因此，图像处理部206对矩形SLO眼底图像实施黑帽处理，确定视网膜血管的像素位置。由此，能够得到视网膜血管的第二特征点。
接着，图像处理部206通过对视网膜血管的像素位置进行图像修复处理，从而从矩形SLO眼底图像除去视网膜血管，并从除去视网膜血管得到的矩形SLO眼底图像提取脉络膜血管的第二特征点。处理部208将脉络膜血管的第二特征点存储于RAM16B。
接着，在步骤356中，图像处理部206判断取得断层图像的位置402是在规定范围内，还是在该规定范围之外，或者是一部分包含于该规定范围。
在此，规定范围例如有眼底的中心区域。在该情况下，图像处理部206基于示出取得断层图像的位置402的数据，判断取得断层图像的位置402是包含于眼底的中心区域，还是包含于不包含中心区域的周边区域，或者是跨越中心区域和周边区域。
在此，如图6所示，眼底的中心区域900是以眼科装置110的光轴通过眼球中心并与眼底交叉的点为中心的规定半径的圆的区域。需要说明的是，眼底的中心区域900的外侧的处理面积的区域是眼底周边区域902。
规定范围不限定于眼底的中心区域900。例如，可以是以黄斑部为中心的规定半径的圆的区域，也可以设成预先确定为视网膜血管的血管密度为规定以上的范围。
图像处理(特别是眼跟踪处理)在取得断层图像的位置402包含于眼底中心区域900的情况下、取得断层图像的位置402跨越眼底中心区域900和眼底周边区域902的情况下，进入步骤358。图像处理(特别是眼跟踪处理)在取得断层图像的位置402位于眼底周边区域902的情况下，进入步骤360。
在步骤358中，图像处理部206执行处理内容被最优化为眼底中心部的第一配准处理，从而使处理时间比较短且更容易图像匹配。在步骤360中，图像处理部206执行处理内容被最优化为周边部区域的第二配准处理，从而即使使处理时间变得比较长也容易图像匹配。
在此，配准处理是指矩形SLO眼底图像与UWF-SLO眼底图像(特别是RGB彩色眼底图像)的位置匹配处理。具体而言，是通过图像匹配确定矩形SLO眼底图像位于RGB彩色眼底图像上的哪个位置的处理。
在步骤358的第一配准处理的图像匹配中，图像处理部206提取三个从矩形SLO眼底图像提取的视网膜血管的第二特征点作为特征点。图像处理部206搜索该三个第二特征点与从RGB彩色眼底图像提取的视网膜血管的第一特征点一致的位置。处理部208将在第一配准处理中匹配的位置作为第二位置存储保持于RAM16B。
需要说明的是，在步骤358的第一配准处理中，不对RGB彩色眼底图像进行去噪处理。
在步骤360的第二配准处理的图像匹配中，图像处理部206首先对RGB彩色眼底图像进行去噪处理。然后，图像处理部206从自矩形SLO眼底图像提取的视网膜血管的第二特征点和脉络膜血管的第二特征点双方提取三个合计6个作为特征点。图像处理部206搜索该6个特征点与从RGB彩色眼底图像提取的视网膜血管的第一特征点或脉络膜血管的第一特征点一致的位置。处理部208将在第二配准处理中匹配的位置作为第二位置存储保持于RAM16B。
如上所述，在第一配准处理中不进行去噪处理。在眼底的中心区域900中，由于与眼底周边区域902相比，像差较少，所以图像鲜明，因此噪声比较少。因此，在配准的搜索区域为眼底的中心区域900的情况下，无需对RGB彩色眼底图像进行噪声除去(去噪)。
另外，如上所述，在进行第一配准处理的情况下，匹配所使用的特征量的数量比第二配准处理中的特征量的数量少。这是由于，因为眼底中心区域900内的血管的密度比眼底周边区域902高，所以即使特征点的数量较少，也能够高精度地得到图像匹配处理结果，因此减少计算量而缩短处理时间。
而且，在进行第二配准处理的情况下，特征点不仅仅使用视网膜血管的特征点，也使用脉络膜血管的特征点。这是由于，因为眼底周边区域902内的视网膜血管的密度比眼底中心区域900低，眼底周边区域902内的脉络膜血管的密度比眼底中心区域900高，所以为了高精度地得到图像匹配处理结果，需要使用脉络膜血管的特征点，为了更高精度地得到图像匹配处理结果，需要使用视网膜血管及脉络膜血管。
如上所述，在第一配准处理的图像匹配中，提取三个视网膜血管的第二特征点，在第二配准处理的图像匹配中，从视网膜血管的第二特征点和脉络膜血管的第二特征点双方提取三个合计6个，但本公开的技术不限定于此。例如，当特征点的数量用“第一配准处理(视网膜血管)，第二配准处理(视网膜血管，脉络膜血管)”表记时，例如可以是(2，4(2，2))、(4，6(3，3))等。这样，第二配准处理的特征点的总数比第一配准处理多。
第二配准处理中的视网膜血管的特征点的数量和脉络膜血管的特征点的数量不限定于同数。可以使任一方的数量比另一方多。例如，使脉络膜血管的特征点的数量比视网膜血管的特征点的数量多。
也可以是，在进行第二配准处理的情况下，使仅脉络膜血管的特征点比进行第一配准处理的情况下的视网膜血管的特征量的数量多。
在步骤362中，图像处理部206根据第一位置和第二位置算出眼的运动量。具体而言，图像处理部206算出第一位置和第二位置的偏移的大小和偏移的方向。然后，图像处理部206根据算出的偏移的大小和偏移的方向算出被检眼12的运动量。该运动量是具有运动的大小和运动的方向的量，即矢量。由于从为了在步骤302中取得UWF-SLO眼底图像而拍摄被检眼12的眼底的时刻到为了在步骤352中取得矩形SLO眼底图像而拍摄被检眼12的眼底的时刻的时间经过，所以不一定拍摄被检眼的相同的位置。另外，在OCT拍摄期间有时由于固视微动等而被检眼运动。因此，图像处理部206算出在OCT的拍摄开始时或OCT的拍摄期间被检眼12向哪个方向偏移多少量，即被检眼12的运动量(矢量)。
需要说明的是，执行步骤358并在步骤362中算出的偏移量和偏移的方向是“第一偏移量和第一偏移的方向”的一例。执行步骤360并在步骤362中算出的偏移量和偏移的方向是“第二偏移量和第二偏移的方向”的一例。
由于被检眼12这样偏移，所以基于以UWF-SLO眼底图像为基准设定的取得断层图像的位置扫描被检眼12时，扫描从本来想取得的位置偏移上述运动量(偏移量及偏移的方向)而成的位置。
因此，在步骤364中，拍摄控制部202基于被检眼12的运动量(矢量)调整第二光学扫描器24的扫描范围，从而能够取得移动后的被检眼12的上述取得的位置的断层图像。
第二光学扫描器24是本公开的技术的“扫描装置”的一例。
这样被检眼12的扫描范围的调整结束时，图4的步骤306的眼跟踪处理结束，图像处理进入步骤308。
在步骤308中，拍摄控制部202通过控制OCT单元20和调整了扫描范围的第二光学扫描器24，并扫描取得被检眼12的断层图像的位置，从而取得断层图像。
在步骤310中，处理部208与被检者的信息对应地向服务器140输出取得的断层图像、RG-UWF-SLO眼底图像、取得断层图像的位置402的数据。通过以上步骤，图4的图像处理结束。
服务器140将断层图像、RGB彩色眼底图像、取得断层图像的位置402的数据与被检者ID关联并存储于未图示的存储装置。
根据来自眼科医生等用户的指示，与被检者ID对应地，断层图像等数据的发送的要求从查看器150向服务器140发送。
当上述要求发送给服务器140时，服务器140将与被检者ID对应地存储的断层图像、UWF-SLO眼底图像、取得断层图像的位置402的数据与被检者的信息等对应并发送给查看器150。由此，查看器150将接收到的各数据显示在未图示的显示器上。
在图8中示出显示在查看器150的显示器上的屏幕500。屏幕500具有被检者信息显示区域502及图像显示区域504。
被检者信息显示区域502具有被检者ID显示字段512、被检者姓名显示字段514、年龄显示字段516、视力显示字段518、右眼/左眼显示字段520及眼轴长显示字段522。显示控制部204将从服务器140接收到的被检者ID、被检者的姓名、被检者的年龄、视力、右眼或左眼的信息及被检者的眼轴长的数据显示在对应的显示字段512～522上。
图像显示区域504具备RGB彩色眼底图像显示字段508、断层图像显示字段506及文本数据显示字段510。
在RGB彩色眼底图像显示字段508中，显示重叠了取得断层图像的位置402而成的UWF-SLO眼底图像400G。
在断层图像显示字段506中显示断层图像。在文本数据显示字段510中显示诊察时的注释等。
如以上说明地，在本实施方式中，在取得矩形SLO眼底图像的区域400的至少一部分包含于UWF-SLO眼底图像的规定范围的情况下，执行第一配准处理。具体而言，使用UWF-SLO眼底图像及矩形SLO眼底图像各自中的视网膜血管比较少的数量的特征点，算出被检眼12的偏移量和偏移的方向。因此，能够在比较短的时间内算出被检眼12的偏移量和偏移的方向。从而，能够在比较短的时间内算出被检眼12的运动量。因此，基于在比较短的时间内算出的被检眼12的运动量，调整第二光学扫描器24的扫描范围，取得断层图像。因此，在上述实施方式中，能够一边追随眼的运动一边取得断层图像。
另一方面，在本实施方式中，在取得矩形SLO眼底图像的区域400的至少一部分不包含于UWF-SLO眼底图像的规定范围的情况下，执行第二配准处理。具体而言，使用UWF-SLO眼底图像及矩形SLO眼底图像各自中的至少脉络膜血管比较多的数量的特征点，算出被检眼12的偏移量和偏移的方向。因此，能够正确地算出被检眼12的偏移量和偏移的方向。从而，能够正确地算出被检眼12的运动量。因此，基于正确地算出的被检眼12的运动量，调整第二光学扫描器24的扫描范围，取得断层图像。因此，在上述实施方式中，能够正确地取得设定的区域的断层图像。
在上述实施方式中，在执行眼跟踪处理后取得断层图像。本公开的技术不限定于此。例如可以一边取得断层图像一边执行眼跟踪处理。在该情况下，也可以是，在取得断层图像期间重复执行图5的步骤352至步骤362。然后，也可以是，每当重复执行规定次步骤352至步骤362时，求出得到的被检眼12的运动量的平均值，在取得断层图像期间，调整第二光学扫描器24的扫描范围，并取得断层图像。由此，取得多张被检眼12的相同位置的断层图像。也可以是，通过进行这些多张断层图像的加法平均，从而取得降低噪声而成的断层图像。
在上述实施方式中，在执行眼跟踪处理后取得断层图像。本公开的技术不限定于此。例如，进行多张断层图像的取得而不使光学扫描器追随。也可以是，在取得多张断层图像期间，重复执行图5的步骤352至步骤362，然后，删除眼的运动为规定值以上时拍摄到的断层图像，使用剩余的多个断层图像进行加法平均。
在本公开中，只要不产生矛盾，各构成要素(装置等)可以仅存在一个，也可以存在两个以上。
在以上说明的各例中，例示了通过利用计算机的软件结构实现图像处理的情况，但本公开的技术不限定于此。例如，也可以是，取代利用计算机的软件结构，仅利用FPGA(Field-Programmable Gate Array)或ASIC(Application Specific IntegratedCircuit)等硬件结构执行图像处理。也可以是，图像处理中的一部分处理利用软件结构执行，剩余的处理利用硬件结构执行。
这样，由于本公开的技术包括通过利用计算机的软件结构实现图像处理的情况和不通过利用计算机的软件结构实现图像处理的情况，所以包括以下的技术。
(第一技术)一种图像处理装置，包括：
第一取得部，取得被检眼的第一眼底图像；
第二取得部，取得使用所述第一眼底图像设定的、取得所述被检眼的眼底的断层图像的位置；
第三取得部，取得所述被检眼的第二眼底图像；
判断部，判断所述取得的位置是否包含于所述第一眼底图像的规定范围；以及
算出部，在所述取得的位置包含于所述规定范围的情况下，使用进行所述第一眼底图像与所述第二眼底图像的位置匹配的第一配准处理算出所述被检眼的第一偏移量和偏移的方向，在所述取得的位置为所述规定范围以外的情况下，使用进行所述第一眼底图像与所述第二眼底图像的位置匹配的与所述第一配准处理不同的第二配准处理算出所述被检眼的第二偏移量和偏移的方向。
(第二技术)一种图像处理方法，包括：
第一取得部取得被检眼的第一眼底图像的步骤；
第二取得部取得使用所述第一眼底图像设定的、取得所述被检眼的眼底的断层图像的位置的步骤；
第三取得部取得所述被检眼的第二眼底图像的步骤；
判断部判断所述取得的位置是否包含于所述第一眼底图像的规定范围的步骤；以及
算出部在所述取得的位置包含于所述规定范围的情况下，使用进行所述第一眼底图像与所述第二眼底图像的位置匹配的第一配准处理算出所述被检眼的第一偏移量和偏移的方向，在所述取得的位置为所述规定范围以外的情况下，使用进行所述第一眼底图像与所述第二眼底图像的位置匹配的与所述第一配准处理不同的第二配准处理算出所述被检眼的第二偏移量和偏移的方向的步骤。
拍摄控制部202是本公开的技术的“第一取得部”及“第三取得部”的一例。处理部208是本公开的技术的“第二取得部”的一例。图像处理部206是本公开的技术的“判断部”及“算出部”的一例。
根据以上的公开内容提议以下的技术。
(第三技术)
一种用于进行图像处理的计算机程序产品，所述计算机程序产品具备其本身不是易失性信号的计算机可读存储介质，在所述计算机可读存储介质中存储有程序，所述程序使计算机执行图像处理，所述图像处理是处理器进行的图像处理，其中，包括：取得被检眼的第一眼底图像的步骤；取得使用所述第一眼底图像设定的、取得所述被检眼的眼底的断层图像的位置的步骤；取得所述被检眼的第二眼底图像的步骤；判断所述取得的位置是否包含于所述第一眼底图像的规定范围的步骤；以及在所述取得的位置包含于所述规定范围的情况下，使用进行所述第一眼底图像与所述第二眼底图像的位置匹配的第一配准处理算出所述被检眼的第一偏移量和偏移的方向，在所述取得的位置为所述规定范围以外的情况下，使用进行所述第一眼底图像与所述第二眼底图像的位置匹配的与所述第一配准处理不同的第二配准处理算出所述被检眼的第二偏移量和偏移的方向的步骤。
以上说明的各图像处理仅为一例。因此，不言而喻的是，在不脱离主旨的范围内，可以删除不需要的步骤、追加新的步骤或更换处理顺序。
各个文献、专利申请及技术规格通过参照取入这种情况与具体且分别地记载的情况同样地，记载在本说明书中的全部文献、专利申请及技术规格通过参照取入到本说明书中。

Claims (13)

1.一种图像处理方法，是处理器进行的图像处理，其中，包括：
取得被检眼的第一眼底图像的步骤；
取得使用所述第一眼底图像设定的、取得所述被检眼的眼底的断层图像的位置的步骤；
取得所述被检眼的第二眼底图像的步骤；
判断所述取得的位置是否包含于所述第一眼底图像的规定范围的步骤；以及
在所述取得的位置包含于所述规定范围的情况下，使用进行所述第一眼底图像与所述第二眼底图像的位置匹配的第一配准处理算出所述被检眼的第一运动量，在所述取得的位置为所述规定范围以外的情况下，使用进行所述第一眼底图像与所述第二眼底图像的位置匹配的与所述第一配准处理不同的第二配准处理算出所述被检眼的第二运动量的步骤。
2.根据权利要求1所述的图像处理方法，其中，还包括：
基于所述第一运动量或所述第二运动量控制用于取得所述断层图像的扫描装置的步骤。
3.根据权利要求1或2所述的图像处理方法，其特征在于，
所述规定范围是眼底中心区域。
4.根据权利要求1至3中任一项所述的图像处理方法，其特征在于，
还包括提取所述第一眼底图像及所述第二眼底图像各自的视网膜血管的特征点的步骤，
所述第一配准处理使用所述视网膜血管的特征点进行所述第一眼底图像与所述第二眼底图像的位置匹配。
5.根据权利要求1至4中任一项所述的图像处理方法，其特征在于，
还包括提取所述第一眼底图像及所述第二眼底图像各自的脉络膜血管的特征点的步骤，
所述第二配准处理使用所述脉络膜血管的特征点进行所述第一眼底图像与所述第二眼底图像的位置匹配。
6.根据权利要求1至5中任一项所述的图像处理方法，其特征在于，
所述第一运动量由第一偏移量和第一偏移的方向的成分构成，
所述第二运动量由第二偏移量和第二偏移的方向的成分构成。
7.根据权利要求1至6中任一项所述的图像处理方法，其特征在于，
所述第一眼底图像包括来自所述被检眼的眼底本身的反射光被引导而形成的被检眼的眼底本身的图像，
在取得所述被检眼的第二眼底图像的步骤中，
取得使用所述第一眼底图像以包含所述被检眼的眼底本身的图像的至少一部分的方式设定的区域的位置，基于所取得的所述区域的位置，取得所述被检眼的眼底的图像，从而取得所述第二眼底图像。
8.根据权利要求7所述的图像处理方法，其特征在于，
所述区域的大小比所述第一眼底图像的大小更小。
9.根据权利要求7或8所述的图像处理方法，其特征在于，
所述区域包含取得所述断层图像的位置的至少一部分。
10.根据权利要求2所述的图像处理方法，其中，
还包括使用被控制的所述扫描装置取得所述被检眼的眼底的断层图像的步骤。
11.根据权利要求2所述的图像处理方法，其中，
还包括一边重复执行取得所述第二眼底图像的步骤、所述判断的步骤、所述算出的步骤及所述控制的步骤一边取得所述被检眼的眼底的断层图像的步骤。
12.一种图像处理装置，是具备处理器的图像处理装置，其中，
所述处理器执行图像处理，所述图像处理包括：
取得被检眼的第一眼底图像的步骤；
取得使用所述第一眼底图像设定的、取得所述被检眼的眼底的断层图像的位置的步骤；
取得所述被检眼的第二眼底图像的步骤；
判断所述取得的位置是否包含于所述第一眼底图像的规定范围的步骤；以及
在所述取得的位置包含于所述规定范围的情况下，使用进行所述第一眼底图像与所述第二眼底图像的位置匹配的第一配准处理算出所述被检眼的第一运动量，在所述取得的位置为所述规定范围以外的情况下，使用进行所述第一眼底图像与所述第二眼底图像的位置匹配的与所述第一配准处理不同的第二配准处理算出所述被检眼的第二运动量的步骤。
13.一种程序，使计算机执行图像处理，所述图像处理包括：
取得被检眼的第一眼底图像的步骤；
取得使用所述第一眼底图像设定的、取得所述被检眼的眼底的断层图像的位置的步骤；
取得所述被检眼的第二眼底图像的步骤；
判断所述取得的位置是否包含于所述第一眼底图像的规定范围的步骤；以及
在所述取得的位置包含于所述规定范围的情况下，使用进行所述第一眼底图像与所述第二眼底图像的位置匹配的第一配准处理算出所述被检眼的第一运动量，在所述取得的位置为所述规定范围以外的情况下，使用进行所述第一眼底图像与所述第二眼底图像的位置匹配的与所述第一配准处理不同的第二配准处理算出所述被检眼的第二运动量的步骤。
CN202280047704.7A 2021-07-07 2022-07-07 图像处理方法、图像处理程序、图像处理装置及眼科装置 Pending CN117597061A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2021-112899 2021-07-07
JP2021112899 2021-07-07
PCT/JP2022/027008 WO2023282339A1 (ja) 2021-07-07 2022-07-07 画像処理方法、画像処理プログラム、画像処理装置及び眼科装置

Publications (1)

Publication Number Publication Date
CN117597061A true CN117597061A (zh) 2024-02-23

Family

ID=84800621

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202280047704.7A Pending CN117597061A (zh) 2021-07-07 2022-07-07 图像处理方法、图像处理程序、图像处理装置及眼科装置

Country Status (5)

Country Link
US (1) US20240153078A1 (zh)
EP (1) EP4360535A1 (zh)
JP (1) JPWO2023282339A1 (zh)
CN (1) CN117597061A (zh)
WO (1) WO2023282339A1 (zh)

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5981213B2 (ja) * 2012-02-28 2016-08-31 株式会社トプコン 眼底観察装置
JP2018064662A (ja) * 2016-10-17 2018-04-26 キヤノン株式会社 眼科撮影装置およびその制御方法
CN111163684B (zh) * 2017-08-14 2022-07-22 奥普托斯股份有限公司 眼科设备
JP2019041841A (ja) 2017-08-30 2019-03-22 株式会社トプコン 眼科装置、及びその制御方法

Also Published As

Publication number Publication date
US20240153078A1 (en) 2024-05-09
EP4360535A1 (en) 2024-05-01
WO2023282339A1 (ja) 2023-01-12
JPWO2023282339A1 (zh) 2023-01-12

Similar Documents

Publication Publication Date Title
JP2023009530A (ja) 画像処理方法、画像処理装置、及びプログラム
CN111885954B (zh) 图像处理方法、存储介质及眼科装置
JP7343331B2 (ja) 眼科装置、その制御方法、プログラム、及び、記録媒体
JP7186587B2 (ja) 眼科装置
EP3461397A1 (en) Ophthalmic apparatus
JP7306467B2 (ja) 画像処理方法、画像処理装置、及びプログラム
WO2021074960A1 (ja) 画像処理方法、画像処理装置、及び画像処理プログラム
JP7419946B2 (ja) 画像処理方法、画像処理装置、及び画像処理プログラム
WO2023282339A1 (ja) 画像処理方法、画像処理プログラム、画像処理装置及び眼科装置
JP7205539B2 (ja) 画像処理方法、プログラム、画像処理装置、及び眼科システム
JP2022089086A (ja) 画像処理方法、画像処理装置、及び画像処理プログラム
WO2021075026A1 (ja) 画像処理方法、画像処理装置、及び画像処理プログラム
US11219363B2 (en) Ophthalmic apparatus and ophthalmic optical coherence tomography method
WO2021210281A1 (ja) 画像処理方法、画像処理装置、及び画像処理プログラム
WO2022177028A1 (ja) 画像処理方法、画像処理装置、及びプログラム
JP7306482B2 (ja) 画像処理方法、画像処理装置、及びプログラム
US11954872B2 (en) Image processing method, program, and image processing device
WO2023199847A1 (ja) 画像処理方法、画像処理装置、及びプログラム
US20230380680A1 (en) Ophthalmic apparatus and method of controlling the same
WO2022113409A1 (ja) 画像処理方法、画像処理装置、及びプログラム
WO2023182011A1 (ja) 画像処理方法、画像処理装置、眼科装置、及びプログラム
WO2022250048A1 (ja) 画像処理方法、画像処理装置、及びプログラム
WO2021210295A1 (ja) 画像処理方法、画像処理装置、及びプログラム
JP2023066198A (ja) 情報出力装置、眼底画像撮影装置、情報出力方法、及び情報出力プログラム
WO2021074961A1 (ja) 画像処理方法、画像処理装置、およびプログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination