CN109936995A - 眼睛图像捕获设备 - Google Patents
眼睛图像捕获设备 Download PDFInfo
- Publication number
- CN109936995A CN109936995A CN201780060794.2A CN201780060794A CN109936995A CN 109936995 A CN109936995 A CN 109936995A CN 201780060794 A CN201780060794 A CN 201780060794A CN 109936995 A CN109936995 A CN 109936995A
- Authority
- CN
- China
- Prior art keywords
- image
- light
- eyes
- eye
- subject
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/18—Eye characteristics, e.g. of the iris
- G06V40/193—Preprocessing; Feature extraction
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
- A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
- A61B3/102—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for optical coherence tomography [OCT]
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
- A61B3/0016—Operational features thereof
- A61B3/0025—Operational features thereof characterised by electronic signal processing, e.g. eye models
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
- A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
- A61B3/1025—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for confocal scanning
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
- A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
- A61B3/14—Arrangements specially adapted for eye photography
- A61B3/145—Arrangements specially adapted for eye photography by video means
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
- A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
- A61B3/14—Arrangements specially adapted for eye photography
- A61B3/15—Arrangements specially adapted for eye photography with means for aligning, spacing or blocking spurious reflection ; with means for relaxing
- A61B3/152—Arrangements specially adapted for eye photography with means for aligning, spacing or blocking spurious reflection ; with means for relaxing for aligning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/013—Eye tracking input arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0012—Biomedical image inspection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
- G06T2207/30041—Eye; Retina; Ophthalmic
Abstract
提供了一种眼睛图像捕获设备,其包括:眼睛图像生成模块,其可操作来基于从受验者的眼睛反射的光来生成眼睛的图像;以及确定模块,其被布置为确定所生成的图像的瞳孔区域(302)的至少一部分是否在所生成的图像内的预定可容许区域(312)内,并生成指示该确定的信号,瞳孔区域(302)是眼睛的瞳孔的至少一部分的图像。
Description
技术领域
本文公开的技术涉及眼睛图像(ocular image)捕获设备、眼睛图像处理方法和眼睛图像处理程序。
背景
为了解释的方便,在下文中光学相干断层扫描被称为“OCT”且扫描激光检眼镜检查被称为“SLO”。
专利文件1描述了一种设置有OCT单元的眼底检查设备,该OCT单元使用OCT来生成图像。在由专利文件1描述的OCT单元中,基于由电荷耦合器件(CCD)检测到的图像信号来生成断层图像,该断层图像是在受验者的眼底的膜的厚度方向上拍摄的图像。
液晶显示器(LCD)被容纳在专利文件1的眼底检查设备中,并且在眼底由OCT单元成像的情况下,LCD显示固定目标以使受验者的眼睛的目光固定在特定的定向上。来自LCD的光通过包括透镜和反射镜的光学系统入射到受验者的眼睛,使得固定目标被投射到受验者的眼睛的眼底上。
此外,在专利文件2中描述了一种组合SLO和OCT的系统。此外,在专利文件2中描述了将可见光从倾斜方向发射到受验者的眼睛的前段上以及基于来自前段的反射光来对准在OCT中的成像。
相关文件
相关专利文件
专利文件1:日本专利号4971872
专利文件2:日本国家阶段公开第2015-534482号
发明概述
然而,在由专利文件2描述的技术中,在捕获眼睛图像的情况下,有时不能以高精度执行对准,因为成像的对准基于来自受验者的眼睛的前段的反射光而被执行。
根据本发明的第一方面的眼睛图像捕获设备包括:眼睛图像生成模块,其可操作来基于从受验者的眼睛反射的光来生成眼睛的图像;以及确定模块,其被布置为确定所生成的图像的瞳孔区域的至少一部分是否在所生成的图像内的预定可容许区域内,并生成指示该确定的输出信号,瞳孔区域是眼睛的瞳孔的至少一部分的图像。
根据本发明的第二方面的眼睛图像捕获设备包括:眼睛图像生成模块,其可操作来基于从受验者的眼睛反射的光来生成眼睛的图像;以及确定模块,其被布置为确定由所生成的图像的瞳孔区域的至少一部分占据的所生成的图像的预定可容许区域的比例是否是预定阈值或更大,并且生成指示该确定的输出信号,瞳孔区域是眼睛的瞳孔的至少一部分的图像。
在根据第一或第二方面的眼睛图像捕获设备的实施例中,眼睛图像生成模块可以包括:眼睛图像捕获模块,其被布置为基于从受验者的眼睛反射的光来捕获眼睛的图像;以及确定使用图像生成模块,其被布置为通过从所捕获的图像中去除除了所捕获的图像瞳孔区域之外的不需要的区域来生成确定使用图像,所捕获的图像瞳孔区域是在所捕获的图像中的瞳孔的至少一部分的图像。在这种情况下,确定模块可以被布置成基于确定使用图像来执行该确定。
在根据第一或第二方面的眼睛图像捕获设备的实施例中,眼睛图像生成模块可以包括:眼睛图像捕获模块,其被布置为基于从受验者的眼睛反射的光来捕获眼睛的图像;二进制图像生成模块,其被布置为通过使所捕获的图像二进制化来生成二进制图像;以及确定使用图像生成模块,其被布置为通过从二进制图像中去除除了二进制图像瞳孔区域之外的不需要的区域来生成确定使用图像,该二进制图像瞳孔区域是在二进制图像中的瞳孔的至少一部分的图像。在这种情况下,确定模块可以被布置成基于确定使用图像来执行该确定。
上面陈述的任何眼睛图像捕获设备还可以包括被布置成照亮受验者的眼睛的眼底的照明模块,其中眼睛图像生成模块包括被布置成基于从受验者的眼睛反射的光来捕获眼睛的图像的眼睛图像捕获模块,并且照明模块的视场与眼睛图像捕获模块的视场具有预定关系。在这种情况下,眼睛图像捕获设备还可以包括被布置成基于由确定模块生成的输出信号来控制照明模块的控制器。此外,确定模块可以被布置成在照明模块照亮眼底时重复地执行确定,眼睛图像捕获设备还包括存储模块,该存储模块被布置成存储由确定模块执行的确定的结果。再进一步地,照明模块可以包括断层图像获取模块,该断层图像获取模块被布置为使用来自朝着受验者的眼睛发射的光的、在从受验者的眼睛的眼底的反射的光和沿着与所反射的光的光路不同的光路通过的参考光之间的干涉来获取受验者的眼睛的眼底的断层图像。
根据上面陈述的第一或第二方面或其实施例中的任一个的眼睛图像捕获设备还可以包括:断层图像获取模块,其被布置为使用来自朝着受验者的眼睛发射的光的、在从受验者的眼睛的眼底反射的光和沿着与所反射的光的光路不同的光路通过的参考光之间的干涉来获取受验者的眼睛的眼底的断层图像;以及控制模块,其被布置为基于由确定模块执行的确定来控制由断层图像获取模块对断层图像的获取。在这种情况下,眼睛图像生成模块可以包括:第一光源,其被布置成发射用于对眼底成像的光;第一扫描光学系统,其被布置成在第一方向上扫描光,并且在与第一方向相交的第二方向上扫描在超宽场中的光;以及第一光接收器,其被布置成在受验者的眼睛已由第一扫描光学系统使用从第一光源发射的光扫描的情况下接收来自受验者的眼睛的眼底的光,其中断层图像获取模块包括:第二光源,其被布置成发射用于生成断层图像的光;第二扫描光学系统,其被布置成在第一方向上扫描光,并且在第二方向上扫描在超宽场中的光;第二光接收器,其被布置成接收来自通过第二扫描光学系统从第二光源发射的光的、从受验者的眼睛的眼底反射的光和沿着与反射光的光路不同的光路通过的参考光;以及生成模块,其被布置为基于由第二光接收器接收的反射光和参考光来生成断层图像。
上面陈述的任何眼睛图像捕获设备还可以包括:固定目标显示模块,其被布置为显示用于固定受验者的眼睛的目光的固定目标;以及固定目标显示控制器,其被布置为基于由确定模块生成的输出信号来控制所显示的固定目标的至少一个特性。
上面陈述的任何眼睛图像捕获设备还可以包括:显示器;以及显示控制器,其被布置为基于由确定模块生成的输出信号来设置显示器的显示内容。
根据本发明的第三方面的眼睛图像处理方法包括:基于从受验者的眼睛反射的光来获取眼睛的图像;确定所获取的图像的瞳孔区域的至少一部分是否在所获取的图像内的预定可容许区域内,该瞳孔区域是眼睛的瞳孔的至少一部分的图像;以及生成指示该确定的输出信号。
根据本发明的第四方面的眼睛图像处理方法包括:基于从受验者的眼睛反射的光来获取眼睛的图像;确定由所获取的图像的瞳孔区域的至少一部分占据的所获取的图像的预定可容许区域的比例是否是预定阈值或更大,瞳孔区域是眼睛的瞳孔的至少一部分的图像;以及生成指示该确定的输出信号。
根据本发明的第五方面的非暂时性存储介质存储计算机程序指令,该计算机程序指令当由处理器执行时使处理器执行上面陈述的方法中的至少一种。
附图简述
图1是示出眼睛图像捕获设备的整体配置的例子的框图。
图2是示出将从眼睛图像捕获设备的成像系统的相应光源发射的光引导到受验者的眼睛的光学系统的配置的例子的示意性透视图。
图3是示出被包括在眼睛图像捕获设备中的主控制器的硬件配置的例子的框图。
图4是示出眼底图像捕获处理的例子的流程图。
图5是示出RG-SLO图像的例子的图。
图6是示出瞳孔位置确定处理的例子的流程图。
图7是示出二进制化图像的例子的图。
图8是示出确定使用图像的例子的图。
图9是示出在确定使用图像中的确定区域的例子的图。
图10是示出在确定使用图像中的确定区域的例子的图。
图11是示出在确定使用图像中的确定区域的例子的图。
图12是示出瞳孔位置确定处理的例子的流程图。
图13是概述由确定模块执行的眼睛图像处理方法的流程图。
图14是概述由确定模块执行的可选的眼睛图像处理方法的流程图。
图15(A)是对应于图1的扫描光学系统的图。
图15(B)是示出图15(A)的扫描光学系统的第一修改例子的图。
图15(C)是示出图15(A)的扫描光学系统的第二修改例子的图。
图16是示出从存储有眼睛图像捕获程序的存储介质将眼睛图像捕获程序安装在眼睛图像捕获设备中的一个方面的例子的概念图。
实施例的描述
在下文中描述了能够以高精度对准眼睛图像的捕获的眼睛图像捕获设备和眼睛图像捕获方法。
更具体地,描述了一种眼睛图像捕获设备,其包括:眼底图像捕获模块,其基于从受验者的眼睛的眼底反射的光来捕获眼底图像;以及确定模块,其基于由眼底图像捕获模块捕获的眼底图像来确定受验者的眼睛的瞳孔的位置是否在预定可容许范围内。
确定模块可以包括:二进制图像生成模块,其通过使眼底图像二进制化来生成二进制图像;以及确定使用图像生成模块,其通过从二进制图像中去除除了瞳孔之外的不需要的区域来生成确定使用图像,其中基于确定使用图像来确定受验者的眼睛的瞳孔的位置是否在预定的可容许范围内。
确定模块可以在由瞳孔占据的区域与确定使用图像的预定确定区域之比是预定阈值或更大的情况下确定受验者的眼睛的瞳孔的位置在可容许范围内。
眼睛图像捕获设备还可以包括断层图像获取模块,其使用来自朝着受验者的眼睛发射的光的、在从受验者的眼睛的眼底反射的光和沿着与反射光的光路不同的光路通过的参考光之间的干涉来获取受验者的眼睛的眼底的断层图像;以及控制模块,基于确定模块的确定结果来控制断层图像获取模块对断层图像的获取。
眼底图像捕获模块可以包括:第一光源,其发射用于对眼底成像的光;第一扫描光学系统,其在第一方向上扫描光,并且在与第一方向相交的第二方向上扫描在超宽场中的光;以及第一光接收器,其在受验者的眼睛已由第一扫描光学系统使用从第一光源发射的光扫描的情况下接收来自受验者的眼睛的眼底的光,其中断层图像获取模块包括:第二光源,其发射用于生成断层图像的光;第二扫描光学系统,其在第一方向上扫描光,并且在第二方向上扫描在超宽场中的光;第二光接收器,其接收来自通过第二扫描光学系统从第二光源发射的光的、从受验者的眼睛的眼底反射的光和沿着与反射光的光路不同的光路通过的参考光;以及生成模块,其基于由第二光接收器接收的反射光和参考光来生成断层图像。
本文描述的眼底检查方法包括:眼底图像捕获步骤,其基于从受验者的眼睛的眼底反射的光来捕获眼底图像;以及确定步骤,其基于由眼底图像捕获步骤捕获的眼底图像来确定受验者的眼睛的瞳孔的位置是否在预定可容许范围内。
本文描述的眼底检查程序使计算机执行处理,该处理包括:眼底图像捕获步骤,其基于从受验者的眼睛的眼底反射的光来捕获眼底图像;以及确定步骤,其基于由眼底图像捕获步骤捕获的眼底图像来确定受验者的眼睛的瞳孔的位置是否在预定可容许范围内。
本发明的一个示例性实施例具有使眼底图像的捕获的对准能够以高精度被执行的有利效果。
参考附图,随后是关于根据本发明的示例性实施例的解释。
注意在示例性实施例中,“垂直”表示包含在可容许范围内的误差的含义的垂直,并且“平行”表示包含在可容许范围内的误差的含义的平行。此外,在示例性实施例中,“面对”表示包含在可容许范围内的误差的含义的面对。此外,在示例性实施例中,“相同”表示包含在可容许范围内的误差的含义的相同。
为了在示例性实施例中的解释的方便,超辐射发光二极管被表示为“SLD”。为了在示例性实施例中的解释的方便,接口被表示为“I/F”。在示例性实施例中,红色被表示为“R”,以及绿色被表示为“G”。
如在图1中作为例子所示的,眼睛图像捕获设备10(其可以用作眼底检查设备)包括设备主体12和控制器13。
设备主体12包括可操作来基于从眼睛38反射的光来生成受验者的眼睛38的图像的眼睛图像生成模块。眼睛图像生成模块包括眼睛图像捕获模块,该眼睛图像捕获模块被布置为基于从眼睛38反射的光来捕获眼睛38的图像,如在本实施例中的,眼睛图像捕获模块可以包括SLO单元32。
如在本实施例中的,设备主体还可以包括照明模块,照明模块被布置成照亮受验者的眼睛38的眼底(例如,用适合于视网膜的治疗的波长的光),其中照明模块的视场与眼睛图像捕获模块的视场具有预定关系。照明模块可以起作用来不仅照亮受验者的眼睛38的眼底,而且还对眼底的被照亮的部分成像。如在本实施例中的,照明模块可以包括断层图像获取模块,该断层图像获取模块包括OCT单元34,OCT单元34被布置成使用来自朝着受验者的眼睛38发射的光的、在从受验者的眼睛38的眼底反射的光和沿着与反射光的光路不同的光路通过的参考光之间的干涉获取受验者的眼睛38的眼底的断层图像。下面提供断层图像获取模块的另外的细节。
如图1所示,设备主体12包括SLO单元32、OCT单元34和共享光学系统36。
因此,眼睛图像捕获设备10包括SLO成像系统功能(其是用于使用SLO进行成像的功能)和OCT成像系统功能(其是使用OCT进行成像的功能)。SLO成像系统(作为前面提到的眼睛图像生成模块的例子)的功能由控制器13、SLO单元32和共享光学系统36实现。OCT成像系统(作为前面提到的照明模块的例子)的功能由控制器13、OCT单元34和共享光学系统36实现。
眼睛图像捕获设备10包括SLO模式和OCT模式,SLO模式是运用SLO成像系统功能的操作模式,以及OCT模式是运用OCT成像系统功能的操作模式。根据用户指令或顺序控制来选择性地设置SLO模式和OCT模式。
SLO单元32包括用来生成受验者的眼睛38的眼底的表面的二维图像的发射段40、分束器42、多角镜44、光电检测器46和电机48。
为了解释的方便,受验者的眼睛38的眼底在下文中被简单地表示为“眼底”。此后,在例如眼睛图像捕获设备10安装在水平面上的情况下,为了解释的方便,实质上垂直于水平面的方向(在图中未示出)被表示为“Y方向”。例如,在眼睛图像捕获设备10安装在水平面上的情况下,实质上平行于水平面的且作为在前段面对眼睛图像捕获设备10的目镜透镜(在图中未示出)的状态中被定位的受验者的眼睛38的深度方向的方向在下文中为了解释的方便被表示为“Z方向”。此后,为了解释的方便,实质上垂直于Y方向和Z方向的方向在下文中被表示为“X方向”。
发射段40包括光源40A和带通滤波器40B。光源40A是使用SLO进行成像的光源,并且发射具有在从约400纳米至约1100纳米的范围内的波长的光。从光源40A发射的光穿过带通滤波器40B,使得只有具有特定波长的光被发射到分束器42上。
在本第一示例性实施例中,从发射段40发射的光被广泛地分成可见光RG光和近红外光,该近红外光是具有在近红外区域中的波长的光。
在本第一示例性实施例中,通过改变由光源40A产生的光的波长并且通过将带通滤波器40B应用于由光源40A产生的光来从发射段40选择性地发射RG光和近红外光。
为了解释的方便,在解释不需要区分开RG光和近红外光的情况下,用作从发射段40发射的光的RG光和近红外光在下文中被简单地称为“SLO光”。
分束器42通过透射SLO光来将SLO光引导至多角镜44,并将第一眼底反射光引导至光电检测器46。在这里,第一眼底反射光表示起源于SLO光的由眼底反射的光。被眼底反射的光表示被眼底反射且然后入射到共享光学系统36的光。
多角镜44将来自分束器42的SLO光发送到共享光学系统36。然后,如在图2中作为例子所示的,多角镜44通过在接收到电机48的驱动力时在箭头A方向上旋转来在Y方向上扫描SLO光。
光电检测器46包括光电检测器46A和滤光器46B。滤光器46B布置在光电检测器46A的光接收面46A1和分束器42的反射面42A之间的位置处,并且覆盖光接收面46A1。由近红外光制成的第一眼底反射光和由RG光制成的第一眼底反射光选择性地入射到光接收面46A1。
光电检测器46A生成SLO图像信号(其是基于经由滤光器46B入射的第一眼底反射光的图像信号),并且输出所生成的SLO图像信号。
OCT单元34用于生成眼底的断层图像,并且包括SLD 50、光耦合器52、参考光光学系统54、分光光度计56、线传感器58、V-检流计反射镜60和电机62。
SLD 50发射低相干光。例如,低相干光表示包含具有比从发射段40发射的近红外光更长的波长并且具有大约几十微米的时间相干长度的在近红外区域中的光的光。
从SLD 50发射的低相干光经由第一光纤(在图中未示出)馈送到光耦合器52中,并被分成参考光和信号光。参考光经由第二光纤(在图中未示出)被引导至参考光光学系统54,并且信号光经由第三光纤(在图中未示出)被引导至V-检流计反射镜60。
参考光光学系统54是与在眼睛38和光耦合器52之间的光路长度相匹配的光延迟线。
参考反射镜通过反射参考光经由同一光路将参考光返回到光耦合器52。参考反射镜是能够在参考光的光轴的方向上移动的可移动反射镜,并且参考光的光路的长度通过移动参考反射镜在光轴上的位置来被调节。
V-检流计反射镜60向共享光学系统36发送信号光。然后,如在图2中作为例子所示的,当接收到电机62的驱动力时,V-检流计反射镜60通过在箭头B方向上旋转地振荡来在Y方向上扫描信号光。
此外,检流计反射镜60经由第四光纤将第二眼底反射光引导至光耦合器52。在这里,第二眼底反射光表示起源于信号光的由眼底反射的光。
由光耦合器52引导的第二眼底反射光与由光耦合器52从参考光光学系统引导到光耦合器52的参考光叠加,并且干涉出现。由于干涉出现而获得的干涉光被分光光度计56在光谱上分散,并且在光谱上分散的干涉光被引导到线传感器58。
线传感器58生成OCT图像信号——其是基于入射干涉光的图像信号,并且输出所生成的OCT图像信号。
共享光学系统36包括分色镜64、具有椭圆形凹面反射面的狭缝镜66、H-检流计反射镜68、椭球镜70和电机72。
分色镜64通过使来自SLO单元32的多角镜44的SLO光透射而将SLO光引导至狭缝镜66,并且通过使来自OCT单元34的V-检流计反射镜60的信号光反射而将信号光引导至狭缝镜66。
为了解释的方便,在不需要解释来区分开信号光和SLO光的情况下,信号光和SLO光在下文中被表示为“发射光”。
狭缝镜66朝着H-检流计反射镜68反射入射的发射光。H-检流计反射镜68将来自狭缝镜66的发射光反射并发送到椭球镜70的镜面70A。然后,如在图2的例子中所示的,当接收到来自电机48的驱动力时,H-检流计反射镜68通过在箭头C方向上旋转地振荡来在X方向上扫描发射光。
椭球镜70通过反射入射到镜面70A的发射光来将发射光引导到眼底。椭球镜70被布置成使得基于由镜面70A反射的发射光的焦点位于受验者的眼睛38处。由椭球镜70引导到眼底的发射光被眼底反射。然后,眼底反射光顺着与发射光相同的光路被引导到共享光学系统36中的分色镜64。分色镜64将第一眼底反射光引导至SLO单元32,并将第二眼底反射光引导至OCT单元34。由两个椭圆面配置的眼底成像光学系统的基本配置类似于在第PCT/GB94/02465号PCT申请(WO 95/13012)和第PCT/GB2007/002208号PCT申请(WO2008/009877)中描述的配置,其中每个申请的公开通过引用以其整体并入本文。此外,本文的实施例可以在结构上和操作上与例如在US 7,959,290、US 2015/0216408、US 2014/0327882、US 2013/0135583和US 2013/0335703中公开的技术相关系统和方法组合,其中每个专利的公开也通过引用被全部并入本文。
注意,在眼睛图像捕获设备10中,光发射到眼底上的区域被广泛地分成第一被发射到区域α和第二被发射到区域β,如在图1中作为例子所示的。第一被发射到区域α表示例如围绕受验者的眼睛38的中心O的在45°的Z方向侧上的角度范围,换句话说,以受验者的眼睛38的中心O作为参考点的在45°的角度下从眼底的中心沿着眼底的圆周方向展开的区域。第二被发射到区域β表示例如围绕受验者的眼睛38的中心O的在Z方向侧上的大于45°但不大于200°的角度范围,换句话说,以受验者的眼睛38的中心O从眼底的中心沿着眼底的圆周方向在大于45°但不大于200°的角度范围上展开的区域。
控制器13通过与设备主体12交换各种信息来控制设备主体12的操作。此外,控制器13基于从光电检测器46A获得的SLO图像信号来生成指示眼底的表面的一个方面的二维图像。作为眼睛图像生成模块的一部分,控制器13还可以对所捕获的眼睛图像执行下面在本文描述的图像处理操作,以生成受验者的眼睛38的图像,用于由下面描述的确定模块处理。控制器13还基于从线传感器58获得的OCT图像信号来生成眼底的断层图像。
注意,在该第一示例性实施例中,使用SLO单元32获得的二维图像被广泛分成基于RG光的色差图像和基于近红外光的色差图像。此外,使用OCT单元34获得的断层图像是色差图像。使用SLO单元32获得的二维图像和使用OCT单元34获得的断层图像可以被显示为静止图像,或者可以被显示为实时视图图像。
控制器13包括主控制器14、OCT图像生成器16、SLO图像生成器18、接收I/F 20、接收设备22、显示控制器24、显示器26、通信I/F28和总线30。
主控制器14、OCT图像生成器16、SLO图像生成器18、接收I/F 20、显示控制器24和通信I/F 28通过总线30彼此连接。因此,主控制器14可以与OCT图像生成器16、SLO图像生成器18、接收I/F 20、显示控制器24和I/F 28交换各种信息项目。
主控制器14通过经由通信I/F 28控制对应于电机48、62、72的相应电机驱动电路(在图中未示出)来控制电机48、62、72的驱动。
此外,主控制器14通过经由通信I/F 28控制对应于光源40A的光源驱动电路(在图中未示出)来在点亮和熄灭光源40A之间切换、调节光的量、改变由光源40A产生的光的波长等等。
此外,主控制器14通过经由通信I/F 28控制对应于SLD 50的SLD驱动电路(在图中未示出)来在点亮和熄灭SLD 50之间切换,调节光的量,改变由SLD 50产生的光的波长等等。
此外,主控制器14经由通信I/F 28来控制带通滤波器40B的操作、滤光器46B的操作以及参考光光学系统54的参考反射镜的操作。
接收设备22包括键盘、鼠标、触控板等等,并且接收来自用户的各种指令。
接收设备22连接到接收I/F 20,并且向接收I/F 20输出指示所接收的指令的内容的指令内容信号。主控制器14根据从接收I/F 20输入的指令内容信号来执行处理。
显示器26例如是LCD或有机电致发光显示器(OELD)。显示器26连接到显示控制器24。在主控制器14的控制下,显示控制器24控制显示器26,以便在显示器26上显示使用SLO单元32获得的二维图像和使用OCT单元34获得的断层图像,作为静止图像或实时视图图像。在主控制器14的控制下,显示控制器24还通过控制显示器26来显示各种屏幕,诸如菜单屏幕。
通信I/F 28连接到设备主体12的电气系统,并且在主控制器14的控制下操作,以管理在主控制器14和设备主体12之间的各种信息的交换。
SLO图像生成器18经由通信I/F 28从SLO单元32的光电检测器46A获取SLO图像信号,并且是执行处理以基于所获取的SLO图像信号来生成二维图像的专用电路。
例如,SLO图像生成器18以一般每秒数十帧的特定帧速率向显示控制器24输出所生成的二维图像的每一帧。显示控制器24根据主控制器14的指令在显示器26上将从SLO图像生成器18输入的二维图像显示为实时图像。此外,根据主控制器14的指令,显示控制器24在显示器26上将从SLO图像生成器18输入的二维图像显示为静止图像。
OCT图像生成器16经由通信I/F 28从OCT单元34的线传感器58获取OCT图像信号,并且是执行处理以基于所获取的OCT图像信号来生成断层图像的专用电路。
例如,OCT图像生成器16以一般每秒数十帧的特定帧速率将所生成的断层图像的每一帧输出到显示控制器24。显示控制器24根据主控制器14的指令在显示器26上将从OCT图像生成器16输入的断层图像显示为实时视图图像。此外,根据主控制器14的指令,显示控制器24在显示器26上将从OCT图像生成器16输入的断层图像显示为静止图像。
注意,在该第一示例性实施例中,给出了一个例子,其中OCT图像生成器16和SLO图像生成器18各自由包括CPU、ROM和RAM的计算机实现。然而,本文公开的技术不限于此。例如,OCT图像生成器16和OCT图像生成器18可以每个由包括CPU、ROM和RAM的计算机实现,或者可以由专用集成电路(ASIC)实现。此外,OCT图像生成器16和SLO图像生成器18可以各自由现场可编程门阵列(FPGA)或硬件配置和软件配置的组合实现。
如在图3中作为例子所示的,主控制器14包括中央处理单元(CPU)74、主存储段76和辅助存储段78。CPU 74、主存储段76和辅助存储段78通过总线30彼此连接。
CPU 74总体上控制眼睛图像捕获设备10。主存储段76是在执行各种程序时用作工作区域等等的易失性存储器。主存储段76可以存储由下面在本文描述的确定模块执行的确定。主存储段76的例子包括随机存取存储器(RAM)。辅助存储段78是存储用于控制眼睛图像捕获设备10的基本操作的程序、各种参数等等的非易失性存储器。辅助存储段78的例子包括电可擦除可编程只读存储器(EEPROM)或闪存。
辅助存储段78存储被执行来实现稍后描述的眼底图像捕获处理(包括眼部图像处理方法)的眼底图像捕获程序80。
CPU 74从辅助存储段78读取眼底图像捕获程序80,将眼底图像捕获程序80扩展到主存储段76,并执行眼底图像捕获程序80,从而根据本文公开的技术作为确定模块来操作。
接下来,参考图4所示的流程图,关于由CPU 74执行的眼底图像捕获处理的解释跟在后面。在操作者操作接收设备22来指示成像处理的开始的情况下,执行图4所示的处理。
此后,RG光从光源40A发射,以在SLO单元32的控制下对受验者的眼睛38的眼底进行成像,并且由SLO图像生成器18生成的二维图像被称为“RG-SLO图像”。此外,近红外光从光源40A发射,以在SLO单元32的控制下对受验者的眼睛38的眼底进行成像,并且由SLO图像生成器18生成的二维图像被表示为“IR-SLO图像”。此外,低相干光从SLD 50发射,以在OCT单元34的控制下对受验者的眼睛38的眼底进行成像,并且由OCT图像生成器16生成的断层图像被表示为“OCT图像”。
在步骤102,RG-SLO图像被捕获为第一眼底图像,用于使操作者指定OCT图像的期望捕获范围。更一般地,操作者可以使用第一眼底图像来指定要由照明模块照亮的期望照明区域。注意,在本示例性实施例中给出了关于RG-SLO图像被捕获的情况的解释;然而,IR-SLO图像可以被成像。
首先,在诸如LCD(在图中未示出)的固定目标显示器上显示固定目标,以便显示用于将受验者的眼睛的视线固定在特定定向处的固定目标。受验者的眼睛38的视线由于患者看固定目标而固定在特定定向处。
然后,从SLO单元32的光源40A发射RG光,通过控制SLO单元32来捕获受验者的眼睛38的眼底图像,并且从SLO图像生成器18获取RG-SLO图像。所获取的RG-SLO图像作为静止图像显示在显示器26上。
在这里,操作者参考显示在显示器26上的RG-SLO图像的静止图像,并且通过视线来确定受验者的眼睛38的位置是否是适合于成像的位置。然后,在受验者眼睛38的位置不是适合于成像的位置的情况下,患者被催促看固定目标,并RG-SLO图像的重新捕获被指示。这被重复,直到受验者的眼睛38的位置是适合于成像的位置为止。此时,患者暂时从设备走开并等待。
在步骤104,指定OCT图像的期望捕获范围。操作者参考在显示器26上显示的RG-SLO图像的静止图像,并且操作接收设备22以指定OCT图像的期望捕获范围。例如,如图5所示,参考在显示器26上显示的RG-SLO图像400,并且指定期望捕获范围402。图5的例子示出了在Y方向上的期望捕获范围的长度由箭头指定的情况。在这种情况下,捕获由期望捕获范围402指示的区域的OCT图像。
然后,在期望捕获范围的指定已经结束的情况下,操作者提示患者再次看固定目标。因此,患者再次看固定目标。
在步骤105,执行图6所示的瞳孔位置确定处理。当在超广角区域上捕获OCT图像时,即,在OCT图像的捕获目标区域是受验者的眼睛38的外围部分的情况下,从用于捕获OCT图像的SLD 50发射的光的光轴易于从受验者的眼睛38的瞳孔偏离,并且OCT图像的质量易于由于渐晕而恶化。
因此,在瞳孔位置确定处理中,由确定模块做出关于受验者的眼睛38的瞳孔的位置是否在预定可容许范围内的确定。
首先在步骤202,开始由眼睛图像捕获模块进行的IR-SLO图像的捕获。即,从光源40A发射近红外光,控制SLO单元32,以便扫描在图4的步骤104指定的期望捕获范围并且捕获窄范围IR-SLO图像。注意,IR-SLO图像的捕获被连续地执行,直到图4的处理结束为止。此外,尽管在本示例性实施例中给出了关于IR-SLO图像被捕获的情况的解释,但是RG-SLO图像(或其他种类的图像)可以被捕获。
在步骤204,获取由SLO图像生成器18生成的窄范围IR-SLO图像。
在步骤206,可选地对由形成眼睛图像生成模块的一部分的二进制图像生成模块获取的所获取的IR-SLO图像执行二进制化处理,并且生成二进制化图像,这是被二进制化的IR-SLO图像。即,例如对于IR-SLO图像的每个像素,如果像素值是预定的二进制化阈值或更大,则给出白色像素,或者如果像素值小于二进制化阈值,则给出黑色像素。图7示出了由二进制图像生成模块生成的二进制化图像的例子。
在图7所示的二进制化图像300中的白色区域是朝着受验者的眼睛38发射的用于IR-SLO成像的光的反射光被检测到的区域,并且其中的白色区域302表示受验者的眼睛的瞳孔区域。此外,白色区域304是除了瞳孔以外的区域,例如睫毛或眼睑区域。注意,白色区域302和白色区域304有时被连接。此外,黑色区域306是朝着受验者的眼睛38发射的用于IR-SLO成像的光的反射光未被检测到的区域。如图7所示,例如黑色区域308(诸如血管)有时出现在代表瞳孔区域的白色区域302中。
因此,有时白色区域不仅代表瞳孔区域,而且也代表睫毛和眼睑区域。然而,睫毛和眼睑白色区域304是在确定瞳孔的位置是否在可容许范围内的情况下不需要的区域。此外,已经出现在代表瞳孔区域的白色区域302中的黑色区域308(诸如血管)也是在确定瞳孔的位置是否在可容许范围内的情况下不需要的区域。
因此在步骤208,也可以形成眼睛图像生成模块的一部分的确定使用图像生成模块通过从在步骤206生成的二进制化图像300(或者在二进制化不被执行的情况下从所捕获的图像)中去除除了瞳孔之外的不想要的区域来可选地生成确定使用图像。换句话说,确定使用图像生成模块通过从二进制化图像300中去除除了二进制图像瞳孔区域之外的不需要的区域来生成确定使用图像,二进制图像瞳孔区域是在二进制化图像300中的瞳至少一部分孔的图像。更具体地,例如通过对二进制化图像300执行已知的形态学操作来从二进制化图像300中去除白色区域304和黑色区域308,它们是不需要的区域。
在这里,形态学操作是通过对处理目标图像重复地执行按比例缩小处理和按比例放大处理来留下图像的特征部分(在本示例性实施例中是瞳孔)并移除其他不想要的区域的处理。如图8所示,通过对二进制化图像300执行这种形态学操作,生成确定使用图像310,不想要的区域已从确定使用图像310去除。
注意,尽管在本示例性实施例中已经给出了关于通过形态学操作来去除不想要的区域的情况的解释,但是去除不想要的区域的处理不限于形态学操作。例如,可以使用已知的特征提取处理、模式匹配处理等等来去除不想要的区域。
在步骤210,确定模块确定该确定使用图像310的瞳孔区域的至少一部分是否在确定使用图像310内的预定可容许区域内(瞳孔区域是受验者的眼睛38的瞳孔的至少一部分的图像)。因此,基于在步骤208生成的确定使用图像310来做出关于瞳孔的位置是否在可容许范围内的确定。
确定模块可以可选地确定由确定使用图像310的瞳孔区域的至少一部分占据的确定使用图像310的预定可容许区域的比例是否是预定阈值或更大。换句话说,可以做出关于由确定使用图像310的预定确定区域中的瞳孔占据的区域的比率是否是预定阈值或更大的确定。如图9所示,在本示例性实施例中的确定区域被设置为例如沿着确定使用图像310的宽度方向(X方向)延伸的线312。然后,做出关于由在线312上的白色像素(代表瞳孔的像素)占据的像素的数量与在线312上的像素的总数之比是否是阈值或更大的确定。在这里,阈值被设置为一个值,使得当白色像素的数量是阈值或更大时,随后成像的OCT图像的质量将在可容许范围内。
然后,本例程在由在线312上的白色像素占据的像素数量与在线312上的像素的总数之比是阈值或更大的情况下结束,或者在该比小于阈值的情况下处理过渡到步骤212。
在步骤212,确定模块生成指示该确定的输出信号。主控制器14可以基于由确定模块生成的输出信号来控制显示控制器24,以设置显示在显示器26上的显示内容,例如陈述OCT图像将不被正常成像的警告消息。然后,操作者指示患者看固定目标。然后,重复上述处理,直到步骤210的确定是肯定的确定为止。
注意,尽管线312是沿着图9中的确定使用图像310的宽度方向的线,但是线312可以相对于确定使用图像310的宽度方向倾斜,如图10所示。此外,确定区域可以是如图11所示的矩形区域314。此外,确定区域可以是自由选择的多边形区域,而不是矩形区域。
返回到图4,在步骤106,执行自动对准处理,以将OCT图像的捕获范围与在步骤104指定的期望捕获范围相匹配。
更具体地,获取由SLO图像生成器18生成的窄范围IR-SLO图像,并且基于在所获取的窄范围IR-SLO图像和在步骤102成像的宽范围RG-SLO图像来计算在窄范围IR-SLO图像和在步骤104指定的期望捕获范围之间的位置偏移。然后,基于所计算的位置偏移来设置在OCT图像的捕获中的扫描范围。
在步骤108,在OCT图像的捕获中执行自动聚焦处理和自动参考处理。
首先,开始OCT图像的捕获。即,从SLD 50发射低相干性光,控制OCT单元34以便在步骤106设置的扫描范围内扫描,并且捕获OCT图像。注意,连续地执行OCT图像的捕获,直到当前例程结束为止。
然后,控制OCT单元34,使得所捕获的OCT图像被聚焦,即,以便校正在Z方向上的位置偏移(自动聚焦处理)。
此外,控制OCT单元34,使得所捕获的OCT图像的深度方向(Z方向)被置于预定范围内(自动参考处理)。
在步骤110,所捕获的OCT图像被存储在辅助存储段78中,并显示在显示器26上。
注意,即使在患者看固定目标的情况下,眼球也可能由于不自觉的眼运动而轻微移动。
因此,眼跟踪处理与步骤110的处理并行地被执行,以便校正由不自觉的眼睛运动引起的位置偏移。
在眼跟踪处理中,例如,在步骤108开始OCT图像的捕获之后紧接着从连续捕获的OCT图像中取得的OCT图像被设置为参考使用IR-SLO图像。然后,随后成像的IR-SLO图像被设置为跟踪使用IR-SLO图像,与参考使用IR-SLO图像相距的位置位移被计算,并且OCT单元34被控制以校正所计算的位置偏移。每当获取跟踪使用IR-SLO图像时,执行该处理。
因此,在步骤110,通过跟随由不自觉的眼睛运动引起的眼球运动来捕获OCT图像。
此外,图12所示的瞳孔位置确定处理与步骤110的处理和眼跟踪处理并行地被执行。
在图12所示的步骤504至510,执行类似于图6所示的步骤204至210的处理,并且省略其解释。
在步骤512,辅助存储段78存储有信息,在与IR-SLO图像在步骤504被获取的定时相匹配的定时,该信息将在步骤110捕获的OCT图像设置为可用作指示步骤208的确定结果的确定信息。
在步骤514,辅助存储段78被存储有信息,在与在IR-SLO图像在步骤504被获取的定时相匹配的定时,该信息将在步骤110成像的OCT图像设置为不被用作指示步骤208的确定结果的确定信息。
在图4的步骤110,存储在辅助存储段78中的确定信息由图12的瞳孔位置确定处理参考,被设置为不被使用的OCT图像从辅助存储段78中被擦除,并且OCT图像被设置为不被使用。
然后,在OCT图像的捕获将结束的定时已经被达到的情况下,IR-SLO图像的捕获和OCT图像的捕获停止,并且当前例程结束。
因此,在本示例性实施例中,不仅使用受验者的眼睛的前段而且使用基于来自后段的反射光的IR-SLO图像来做出关于瞳孔的位置是否在可容许范围内的确定,使瞳孔的对准能够更精确地被执行。此外,因为OCT图像被设置为在瞳孔的位置在可容许范围的外侧的情况下不被使用,具有差的精度的OCT图像被阻止用于生成断层图像。
由确定模块执行的眼睛图像处理方法在图13的流程图中被概述。在过程602中,确定模块基于从眼睛38反射的光来获取受验者的眼睛38的图像。在过程S604中,确定模块确定所获取的图像的瞳孔区域的至少一部分是否在所获取的图像内的预定可容许区域内,瞳孔区域是眼睛38的瞳孔的至少一部分的图像。在过程S606中,确定模块生成指示该确定的输出信号。
在图14的流程图中概述了由确定模块执行的可选的眼睛图像处理方法。在过程702中,确定模块基于从受验者的眼睛反射的光来获取受验者的眼睛38的图像。在过程S704中,确定模块确定由所获取的图像的瞳孔区域的至少一部分占据的所获取的图像的预定可容许区域的比例是否为预定阈值或更大,瞳孔区域是眼睛38的瞳孔的至少一部分的图像。在过程706中,确定模块生成指示该确定的输出信号。
在上述实施例的变形中,主控制器14可以起固定目标显示控制器的作用,以基于来自确定模块的指示所作出的确定的输出信号来控制所显示的固定目标的至少一个特性(例如,固定目标的至少一部分的颜色、固定目标的至少一部分的闪光等),以便向受验者提供关于瞳孔对准的程度的反馈,并因而帮助受验者保持适当的瞳孔对准。
在本示例性实施例中给出了关于当在瞳孔位置确定处理中从IR-SLO图像生成二进制化图像时二进制化阈值被设置为1的情况的解释;然而,可以例如根据亮度级将IR-SLO图像划分为多个区域,并且可以为多个区域的每一个设置适当的二进制化阈值。
可以另外提供诸如CCD或CMOS的成像设备,并且由成像设备成像的图像可以代替RG-SLO图像。此外,可以提供成像设备来代替SLO单元32,并且由成像设备成像的图像可以代替RG-SLO图像和IR-SLO图像。
此外,瞳孔位置确定处理可以应用于在步骤102成像的RG-SLO图像。即,在步骤102捕获RG-SLO图像之后,可以对所成像的RG-SLO图像执行图6所示的瞳孔位置确定处理的步骤204至212的处理。RG-SLO图像(其中瞳孔位置在可容许范围的外侧)可以因此被阻止在步骤104被使用。
尽管在上面的每个示例性实施例中给出了例子(其中一对凹面镜由狭缝镜66和椭球镜70形成),但是本发明不限于此。例如,可以使用倾斜球面反射镜、非球面反射镜、一对抛物面反射镜、一对抛物柱面反射镜、透镜系统或采用这些的适当组合的光学系统来代替狭缝镜66。
在上面解释的示例性实施例中,给出了关于例子(其中在Y方向上扫描的多角镜44和在Y方向上扫描的V-检流计反射镜60布置在分色镜64的光入射侧处)的解释。然而,分色镜64可以布置在光轴方向上与狭缝镜的焦点分离的位置上,并且在Y方向上扫描的多角镜44或V-检流计反射镜60可以布置在狭缝镜的焦点位置处。在这种情况下,多角镜44或V-检流计反射镜60起在SLO图像获取和OCT图像获取期间使用的共享扫描光学系统的作用。
此外,尽管给出了关于例子(其中由分色镜64产生共享光轴,用于SLO的光和用于OCT的光穿过该共享光轴)的解释,但是可以使用分束器(诸如偏振分束器)或者光学构件(诸如半反射镜)来代替分色镜64。
在上面解释的每个示例性实施例中给出了关于例子(其中如图1所示,多角镜44和V-检流计反射镜60布置在分色镜64的光入射侧处,并且由SLO和OCT共享的用于X方向扫描的H-检流计反射镜68布置在分色镜64的光发射侧处)的解释。图15(A)示出了对应于图1所示的SLO单元32、OCT单元34和共享光学系统36的配置。如图15(A)所示的,设备主体包括分色镜1064、SLO引擎1032A和OCT引擎1034A。扫描系统1044布置在分色镜1064和SLO引擎1032A之间。此外,扫描系统1060布置在分色镜1064和OCT引擎1034A之间。扫描系统1068布置在分色镜1064和受验者的眼睛1038之间。
注意,扫描系统1044对应于多角镜44,并且SLO引擎1032A是通过从图1中的SLO单元32移除多角镜44而获得的部分。扫描系统1060对应于V-检流计反射镜60,并且OCT引擎1034A是通过从图1中的OCT单元34移除V-检流计反射镜60而获得的部分。扫描系统1068对应于H-检流计反射镜68。
可以对扫描光学系统进行以下修改。
图15(B)示出了扫描光学系统的第一修改例子。如图15(B)所示,用于SLO的二维扫描光学系统1104布置在分色镜1064的一个光入射侧(SLO引擎1032A侧)上,以及用于OCT的二维扫描光学系统1102布置在分色镜1064的另一个光入射侧(OCT引擎1034A侧)处。
图15(C)示出了扫描光学系统的第二修改例子。如图15(C)所示,由SLO和OCT采用的共享二维扫描光学系统1200布置在分色镜1064的光发射侧处。
此外,不言而喻,在上面解释的所有扫描光学系统中,可以通过将X方向与Y方向交换来执行类似的扫描。
尽管给出了关于例子(其中椭球镜被用作分程传递扫描的光学构件)的说明,但是可以使用另一个凹面镜(诸如抛物面反射镜),或者可以使用光学构件(诸如透镜)来代替凹面镜。包括多个焦点的光学构件可以用作分程传递扫描的光学构件。在这种情况下,在光学构件、扫描光学系统和受验者的眼睛之间的位置关系可以采用下面的方面。
在第一方面中,受验者的眼睛布置在一个焦点位置f1处,以及由SLO和OCT使用的共享二维扫描光学系统布置在另一个焦点位置f2处。
在第二方面中,受验者的眼睛布置在一个焦点位置f1处,由SLO采用的二维扫描光学系统布置在另一个焦点位置f2处,以及由OCT采用的二维扫描光学系统布置在又一个焦点位置f3处。
在第三方面中,受验者的眼睛布置在一个焦点位置f1处,由SLO和OCT都采用的并在第一方向上扫描光的共享一维扫描光学系统布置在另一个焦点位置f2处,由SLO采用的在与第一方向(例如正交方向)相交的第二方向上扫描光的一维扫描光学系统布置在又一个焦点位置f3处,并且在OCT中采用的在第二方向上扫描光的一维扫描光学系统布置在与另一个焦点位置f3光学地等效的位置处。
注意,在上面的每个方面中,受验者的眼睛和扫描光学系统可以布置在与焦点位置光学地等效的位置而不是焦点位置处。
尽管在上面的每个示例性实施例中给出了例子(其中一对凹面镜由狭缝镜66和椭球镜70形成),但是本发明不限于此。例如,可以使用倾斜球面反射镜、非球面反射镜、一对抛物面反射镜、一对抛物柱面反射镜、透镜系统或采用这些的适当组合的光学系统来代替狭缝镜66。
虽然给出了情况(其中从辅助存储段78读取上面的每个示例性实施例的眼底图像捕获程序80)的例子,但是眼底图像捕获程序80不一定从一开始就需要被存储在辅助存储段78上。例如,如图16所示,眼底图像捕获程序80可以首先存储在自由选择的便携式存储介质90(诸如固态驱动器(SSD)、通用串行总线(USB)存储器或光盘只读存储器(CD-ROM))上。在这种情况下,存储介质90的眼部图像捕获程序80安装在眼部图像捕获设备10中,并且所安装的眼底图像捕获程序80由CPU 74执行。
眼睛图像捕获程序80可以存储在通过通信网络(在图中未示出)连接到眼睛图像捕获设备10的另一计算机、服务器设备等等的存储段中,并且眼睛图像捕获程序80可以根据眼睛图像捕获设备10的请求被下载。在这种情况下,所下载的眼底图像捕获程序80由CPU74执行。
此外,在上面的每个示例性实施例中解释的眼底图像捕获处理仅仅是例子。因此不言而喻,在不偏离本发明的精神的范围内,可以省略不必要的步骤,可以添加新的步骤,并且可以重新排列处理序列。此外,在眼底图像捕获处理中包括的每一个处理项目可以单独由硬件配置(诸如FPGA、ASIC等等)实现,或者可以由采用软件配置和硬件配置的计算机的组合实现。
此外,在上面的每个示例性实施例中解释的眼睛图像捕获设备10(见图1)的配置仅仅是例子。不言而喻,在不偏离本发明的精神的范围内,可以去除不必要的部分并且可以添加新的部分。
此外,在上面的每个示例性实施例中解释的眼底图像捕获程序的处理的流程仅仅是例子(参见图4和图6)。不言而喻,在不偏离本发明的精神的范围内,可以省略不必要的步骤,可以添加新的步骤,并且可以重新排列处理序列。
在本说明书中提及的所有出版物、专利申请和技术标准在好像每一个单独的出版物、专利申请或技术标准被具体和单独地指示通过引用被并入的相同程度上通过引用被合并在本说明书中。
附图标记的解释
10 眼睛图像捕获设备
13 控制器
14 主控制器
16 OCT图像生成器
18 SLO图像生成器
32 SLO单元
34 OCT单元
36 共享光学系统
38 受验者的眼睛
Claims (15)
1.一种眼睛图像捕获设备,包括:
眼睛图像生成模块,其能够操作来基于从受验者的眼睛反射的光来生成所述眼睛的图像;以及
确定模块,其被布置为确定所生成的图像的瞳孔区域的至少一部分是否在所生成的图像内的预定可容许区域内,并生成指示所述确定的输出信号,所述瞳孔区域是所述眼睛的瞳孔的至少一部分的图像。
2.一种眼睛图像捕获设备,包括:
眼睛图像生成模块,其能够操作来基于从受验者的眼睛反射的光来生成所述眼睛的图像;以及
确定模块,其被布置为确定由所生成的图像的瞳孔区域的至少一部分占据的所生成的图像的预定可容许区域的比例是否是预定阈值或更大,并且生成指示所述确定的输出信号,所述瞳孔区域是所述眼睛的瞳孔的至少一部分的图像。
3.根据权利要求1或权利要求2所述的眼睛图像捕获设备,其中所述眼睛图像生成模块包括:
眼睛图像捕获模块,其被布置为基于从所述受验者的眼睛反射的光来捕获所述眼睛的图像;以及
确定使用图像生成模块,其被布置为通过从所捕获的图像中去除除了所捕获的图像瞳孔区域之外的不需要的区域来生成确定使用图像,所捕获的图像瞳孔区域是在所述捕获的图像中的所述瞳孔的至少一部分的图像,
其中所述确定模块被布置成基于所述确定使用图像来执行所述确定。
4.根据权利要求1或权利要求2所述的眼睛图像捕获设备,其中所述眼睛图像生成模块包括:
眼睛图像捕获模块,其被布置为基于从所述受验者的眼睛反射的光来捕获所述眼睛的图像;
二进制图像生成模块,其被布置为通过使所捕获的图像二进制化来生成二进制图像;以及
确定使用图像生成模块,其被布置为通过从所述二进制图像中去除除了二进制图像瞳孔区域之外的不需要的区域来生成确定使用图像,所述二进制图像瞳孔区域是在所述二进制图像中的所述瞳孔的至少一部分的图像,
其中所述确定模块被布置成基于所述确定使用图像来执行所述确定。
5.根据权利要求1到4中的任一项所述的眼睛图像捕获设备,还包括被布置成照亮所述受验者的眼睛的眼底的照明模块,其中
所述眼睛图像生成模块包括被布置成基于从所述受验者的眼睛反射的光来捕获所述眼睛的图像的眼睛图像捕获模块,并且
所述照明模块的视场与所述眼睛图像捕获模块的视场具有预定关系。
6.根据权利要求5所述的眼睛图像捕获设备,还包括被布置成基于由所述确定模块生成的所述输出信号来控制所述照明模块的控制器。
7.根据权利要求5或权利要求6所述的眼睛图像捕获设备,其中所述确定模块被布置成在所述照明模块照亮所述眼底时重复地执行所述确定,所述眼睛图像捕获设备还包括存储模块,所述存储模块被布置成存储由所述确定模块执行的所述确定的结果。
8.根据权利要求5、6和7中的任一项所述的眼睛图像捕获设备,其中所述照明模块包括断层图像获取模块,所述断层图像获取模块被布置为使用来自朝着所述受验者的眼睛发射的光的、在从所述受验者的眼睛的眼底反射的光和沿着与所反射的光的光路不同的光路通过的参考光之间的干涉来获取所述受验者的眼睛的眼底的断层图像。
9.根据权利要求1到权利要求4中的任一项所述的眼睛图像捕获设备,还包括:
断层图像获取模块,其被布置为使用来自朝着所述受验者的眼睛发射的光的、在从所述受验者的眼睛的眼底反射的光和沿着与所反射的光的光路不同的光路通过的参考光之间的干涉来获取所述受验者的眼睛的眼底的断层图像;以及
控制模块,其被布置为基于由所述确定模块执行的所述确定来控制由所述断层图像获取模块对所述断层图像的获取。
10.根据权利要求9所述的眼睛图像捕获设备,其中所述眼睛图像生成模块包括:
第一光源,其被布置成发射用于对所述眼底成像的光;
第一扫描光学系统,其被布置成在第一方向上扫描光,并且在与所述第一方向相交的第二方向上扫描在超宽场中的光;以及
第一光接收器,其被布置成在所述受验者的眼睛已由所述第一扫描光学系统使用从所述第一光源发射的光扫描的情况下接收来自所述受验者的眼睛的眼底的光,其中所述断层图像获取模块包括:
第二光源,其被布置成发射用于生成断层图像的光;
第二扫描光学系统,其被布置成在所述第一方向上扫描光,并且在所述第二方向上扫描在超宽场中的光;
第二光接收器,其被布置成接收来自通过所述第二扫描光学系统从所述第二光源发射的光的、来自所述受验者的眼睛的眼底的反射光和沿着与所述反射光的光路不同的光路通过的参考光;以及
生成模块,其被布置为基于由所述第二光接收器接收的所述反射光和所述参考光来生成所述断层图像。
11.根据任一前述权利要求所述的眼睛图像捕获设备,还包括:
固定目标显示模块,其被布置为显示用于固定所述受验者的眼睛的目光的固定目标;以及
固定目标显示控制器,其被布置为基于由所述确定模块生成的所述输出信号来控制所显示的固定目标的至少一个特性。
12.根据任一前述权利要求所述的眼睛图像捕获设备,还包括:
显示器;以及
显示控制器,其被布置为基于由所述确定模块生成的所述输出信号来设置所述显示器的显示内容。
13.一种眼睛图像处理方法,包括:
基于从受验者的眼睛反射的光来获取所述眼睛的图像;
确定所获取的图像的瞳孔区域的至少一部分是否在所获取的图像内的预定可容许区域内,所述瞳孔区域是所述眼睛的瞳孔的至少一部分的图像;以及
生成指示所述确定的输出信号。
14.一种眼睛图像处理方法,包括:
基于从所述受验者的眼睛反射的光来获取所述眼睛的图像;
确定由所获取的图像的瞳孔区域的至少一部分占据的所述获取的图像的预定可容许区域的比例是否是预定阈值或更大,所述瞳孔区域是所述眼睛的瞳孔的至少一部分的图像;以及
生成指示所述确定的输出信号。
15.一种存储计算机程序指令的非暂时性存储介质,所述计算机程序指令当由处理器执行时使所述处理器执行如在权利要求13和14中的至少一个中阐述的方法。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016200481A JP2018061621A (ja) | 2016-10-11 | 2016-10-11 | 眼底画像撮影装置、眼底画像撮影方法、及び眼底画像撮影プログラム |
JP2016-200481 | 2016-10-11 | ||
PCT/EP2017/075851 WO2018069345A1 (en) | 2016-10-11 | 2017-10-10 | Ocular image capturing device |
Publications (1)
Publication Number | Publication Date |
---|---|
CN109936995A true CN109936995A (zh) | 2019-06-25 |
Family
ID=59593108
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201780060794.2A Pending CN109936995A (zh) | 2016-10-11 | 2017-10-10 | 眼睛图像捕获设备 |
Country Status (5)
Country | Link |
---|---|
US (1) | US11170213B2 (zh) |
EP (1) | EP3525656A1 (zh) |
JP (2) | JP2018061621A (zh) |
CN (1) | CN109936995A (zh) |
WO (1) | WO2018069345A1 (zh) |
Families Citing this family (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111163684B (zh) | 2017-08-14 | 2022-07-22 | 奥普托斯股份有限公司 | 眼科设备 |
SG11202005927VA (en) | 2017-12-20 | 2020-07-29 | Medi Whale Inc | Method and apparatus for assisting in diagnosis of cardiovascular disease |
KR20200005407A (ko) * | 2018-07-06 | 2020-01-15 | 주식회사 메디웨일 | 안구 이미지 기반의 진단 보조 이미지 제공 장치 |
JP7183617B2 (ja) * | 2018-08-02 | 2022-12-06 | 株式会社ニデック | 眼底撮影装置 |
KR102652943B1 (ko) * | 2018-12-03 | 2024-03-29 | 삼성전자주식회사 | 3차원 영상 출력 방법 및 그 방법을 수행하는 전자 장치 |
US11652981B2 (en) | 2019-03-04 | 2023-05-16 | Nikon Corporation | Resolution test chart and artificial eye for assessing fundus imaging systems |
DK3804606T3 (da) * | 2019-10-07 | 2022-06-13 | Optos Plc | Oftalmisk billeddannelsessystem |
Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5889576A (en) * | 1997-06-30 | 1999-03-30 | Nidek Co., Ltd. | Ophthalmic apparatus |
WO2001021061A1 (en) * | 1999-09-20 | 2001-03-29 | Magnante Peter C | Fabricate surfaces on contact lenses |
CN100496383C (zh) * | 2003-11-17 | 2009-06-10 | 佳能株式会社 | 眼科设备 |
CN102755150A (zh) * | 2011-04-27 | 2012-10-31 | 佳能株式会社 | 眼科设备和控制眼科设备的方法 |
CN103222853A (zh) * | 2012-01-26 | 2013-07-31 | 佳能株式会社 | 光学相干断层成像设备及其控制方法 |
US20140320809A1 (en) * | 2013-04-03 | 2014-10-30 | Kabushiki Kaisha Topcon | Ophthalmologic apparatus |
US20150085252A1 (en) * | 2012-05-01 | 2015-03-26 | Kabushiki Kaisha Topcon | Ophthalmologic apparatus |
EP3001943A1 (en) * | 2014-09-30 | 2016-04-06 | Nidek Co., Ltd | Ophtalmic apparatus and ophtalmic apparatus control program |
US9355315B2 (en) * | 2014-07-24 | 2016-05-31 | Microsoft Technology Licensing, Llc | Pupil detection |
Family Cites Families (24)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
GB9323065D0 (en) | 1993-11-09 | 1994-01-05 | Besca Ltd | A wide field retinal scanning ophthalmoscope |
JP2005342282A (ja) * | 2004-06-04 | 2005-12-15 | Canon Inc | 眼科撮影装置 |
GB2440163A (en) | 2006-07-15 | 2008-01-23 | Optos Plc | Scanning ophthalmoscope with reduced shear distortion |
JP4971872B2 (ja) | 2007-05-23 | 2012-07-11 | 株式会社トプコン | 眼底観察装置及びそれを制御するプログラム |
GB201011095D0 (en) | 2010-07-01 | 2010-08-18 | Optos Plc | Improvements in or relating to ophthalmology |
GB201100555D0 (en) | 2011-01-13 | 2011-03-02 | Optos Plc | Improvements in or relating to Ophthalmology |
GB201217538D0 (en) | 2012-10-01 | 2012-11-14 | Optos Plc | Improvements in or relating to scanning laser ophthalmoscopes |
EP2926722A4 (en) * | 2012-11-30 | 2016-12-21 | Kk Topcon | PHOTOGRAPHER FOR EYE BACKGROUND |
US20140253686A1 (en) | 2013-03-08 | 2014-09-11 | Victor C. Wong | Color 3-d image capture with monochrome image sensor |
JP2016510628A (ja) * | 2013-03-14 | 2016-04-11 | レイセオン カンパニー | 携帯型網膜画像化装置 |
GB201307936D0 (en) | 2013-05-02 | 2013-06-12 | Optos Plc | Improvements in and relating to ophthalmoscopes |
US20150097925A1 (en) * | 2013-10-04 | 2015-04-09 | Electronics And Telecommunications Research Institute | Apparatus and method for displaying hologram based on pupil tracking using hybrid camera |
KR20150070802A (ko) * | 2013-12-17 | 2015-06-25 | 현대자동차주식회사 | 동공 검출 장치 및 동공 검출 방법 |
JP6456711B2 (ja) * | 2015-02-16 | 2019-01-23 | 株式会社トプコン | 眼科手術用顕微鏡および眼科手術用アタッチメント |
JP6638354B2 (ja) * | 2015-12-01 | 2020-01-29 | 株式会社Jvcケンウッド | 視線検出装置及び視線検出方法 |
JP6906898B2 (ja) * | 2016-03-10 | 2021-07-21 | キヤノン株式会社 | 眼科撮影装置 |
TW201901529A (zh) * | 2017-05-22 | 2019-01-01 | 宏達國際電子股份有限公司 | 眼球追蹤方法、電子裝置及非暫態電腦可讀取記錄媒體 |
JP6930223B2 (ja) * | 2017-05-31 | 2021-09-01 | 富士通株式会社 | 瞳孔検出用コンピュータプログラム、瞳孔検出装置及び瞳孔検出方法 |
JP7008131B2 (ja) * | 2017-09-28 | 2022-01-25 | アップル インコーポレイテッド | イベントカメラデータを使用するアイトラッキングの方法及び装置 |
EP3675709B1 (en) * | 2017-11-07 | 2023-07-26 | Notal Vision Ltd. | Systems for alignment of ophthalmic imaging devices |
WO2019143864A1 (en) * | 2018-01-17 | 2019-07-25 | Magic Leap, Inc. | Display systems and methods for determining registration between a display and a user's eyes |
US10713483B2 (en) * | 2018-03-20 | 2020-07-14 | Welch Allyn, Inc. | Pupil edge detection in digital imaging |
US10890979B2 (en) * | 2018-04-23 | 2021-01-12 | Industrial Technology Research Institute | Controlling system and controlling method for virtual display |
US10867451B2 (en) * | 2018-10-05 | 2020-12-15 | Facebook Technologies, Llc | Apparatus, systems, and methods for display devices including local dimming |
-
2016
- 2016-10-11 JP JP2016200481A patent/JP2018061621A/ja active Pending
-
2017
- 2017-10-10 WO PCT/EP2017/075851 patent/WO2018069345A1/en unknown
- 2017-10-10 US US16/335,169 patent/US11170213B2/en active Active
- 2017-10-10 EP EP17781482.9A patent/EP3525656A1/en active Pending
- 2017-10-10 CN CN201780060794.2A patent/CN109936995A/zh active Pending
- 2017-10-10 JP JP2019515970A patent/JP6978165B2/ja active Active
Patent Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5889576A (en) * | 1997-06-30 | 1999-03-30 | Nidek Co., Ltd. | Ophthalmic apparatus |
WO2001021061A1 (en) * | 1999-09-20 | 2001-03-29 | Magnante Peter C | Fabricate surfaces on contact lenses |
CN100496383C (zh) * | 2003-11-17 | 2009-06-10 | 佳能株式会社 | 眼科设备 |
CN102755150A (zh) * | 2011-04-27 | 2012-10-31 | 佳能株式会社 | 眼科设备和控制眼科设备的方法 |
CN103222853A (zh) * | 2012-01-26 | 2013-07-31 | 佳能株式会社 | 光学相干断层成像设备及其控制方法 |
US20150085252A1 (en) * | 2012-05-01 | 2015-03-26 | Kabushiki Kaisha Topcon | Ophthalmologic apparatus |
US20140320809A1 (en) * | 2013-04-03 | 2014-10-30 | Kabushiki Kaisha Topcon | Ophthalmologic apparatus |
US9355315B2 (en) * | 2014-07-24 | 2016-05-31 | Microsoft Technology Licensing, Llc | Pupil detection |
EP3001943A1 (en) * | 2014-09-30 | 2016-04-06 | Nidek Co., Ltd | Ophtalmic apparatus and ophtalmic apparatus control program |
Also Published As
Publication number | Publication date |
---|---|
JP2019536500A (ja) | 2019-12-19 |
US11170213B2 (en) | 2021-11-09 |
US20190278972A1 (en) | 2019-09-12 |
JP2018061621A (ja) | 2018-04-19 |
WO2018069345A1 (en) | 2018-04-19 |
JP6978165B2 (ja) | 2021-12-08 |
EP3525656A1 (en) | 2019-08-21 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109936995A (zh) | 眼睛图像捕获设备 | |
US9743830B2 (en) | Fundus photography device | |
KR101506526B1 (ko) | 안과장치 및 그 제어방법 | |
JP5955020B2 (ja) | 眼底撮像装置及び方法 | |
EP2460461A1 (en) | Determination of the retinal blood flow velocity | |
CN111885954B (zh) | 图像处理方法、存储介质及眼科装置 | |
JP2012187230A (ja) | 光断層像撮像装置およびその制御方法 | |
CN111163684B (zh) | 眼科设备 | |
IL125483A (en) | System and method for acquiring, analyzing and imaging of three dimensional retinal data | |
WO2017159018A1 (ja) | 眼科装置 | |
JP5830264B2 (ja) | 眼科撮影装置 | |
US10321819B2 (en) | Ophthalmic imaging apparatus | |
JP2019536499A (ja) | 眼科装置 | |
CN110226915B (zh) | Oct数据处理装置及方法、存储介质 | |
ES2905664T3 (es) | Dispositivo oftálmico | |
US11311189B2 (en) | Ophthalmic imaging apparatus, controlling method thereof, ophthalmic imaging method, and recording medium | |
JP6713297B2 (ja) | 眼科装置 | |
JP2017144232A (ja) | 眼科装置、眼科装置の制御方法、及びプログラム | |
CN114828732A (zh) | 图像处理方法、图像处理装置、以及图像处理程序 | |
JP6057621B2 (ja) | 眼科装置及びその制御方法 | |
JP6848207B2 (ja) | 眼科撮影装置 | |
JP2012225826A (ja) | 干渉光計測装置 | |
WO2020179522A1 (ja) | 走査型眼科撮影装置、および眼科撮影プログラム | |
JP6844949B2 (ja) | 眼科装置 | |
JP5718154B2 (ja) | 干渉光計測装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
TA01 | Transfer of patent application right |
Effective date of registration: 20210809 Address after: British Dan forest Applicant after: OPTOS PLC Address before: British Dan forest Applicant before: OPTOS PLC Applicant before: Nikon Corp. |
|
TA01 | Transfer of patent application right |