CN101133943A - 眼球运动测定装置、眼球运动测定方法及眼球运动测定程序 - Google Patents

眼球运动测定装置、眼球运动测定方法及眼球运动测定程序 Download PDF

Info

Publication number
CN101133943A
CN101133943A CNA2007101455184A CN200710145518A CN101133943A CN 101133943 A CN101133943 A CN 101133943A CN A2007101455184 A CNA2007101455184 A CN A2007101455184A CN 200710145518 A CN200710145518 A CN 200710145518A CN 101133943 A CN101133943 A CN 101133943A
Authority
CN
China
Prior art keywords
image
aforementioned
fundus
optical fundus
eye
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CNA2007101455184A
Other languages
English (en)
Other versions
CN101133943B (zh
Inventor
青木弘幸
藤村隆
塚田央
木川勉
福间康文
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Topcon Corp
Original Assignee
Topcon Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Topcon Corp filed Critical Topcon Corp
Publication of CN101133943A publication Critical patent/CN101133943A/zh
Application granted granted Critical
Publication of CN101133943B publication Critical patent/CN101133943B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0062Arrangements for scanning
    • A61B5/0066Optical coherence imaging
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B3/00Apparatus for testing the eyes; Instruments for examining the eyes
    • A61B3/10Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
    • A61B3/102Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for optical coherence tomography [OCT]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/20Analysis of motion
    • G06T7/246Analysis of motion using feature-based methods, e.g. the tracking of corners or segments
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B3/00Apparatus for testing the eyes; Instruments for examining the eyes
    • A61B3/10Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
    • A61B3/113Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for determining or recording eye movement
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10072Tomographic images
    • G06T2207/10101Optical tomography; Optical coherence tomography [OCT]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30004Biomedical image processing
    • G06T2207/30041Eye; Retina; Ophthalmic

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Medical Informatics (AREA)
  • Animal Behavior & Ethology (AREA)
  • Veterinary Medicine (AREA)
  • Radiology & Medical Imaging (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Biophysics (AREA)
  • General Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • Ophthalmology & Optometry (AREA)
  • Multimedia (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Pathology (AREA)
  • Eye Examination Apparatus (AREA)

Abstract

本发明提供一种眼球运动测定装置,其特征为具备:图像形成元件,其以光学方式取得数据,依据已取得的数据来形成受检眼的眼底的图像;以及图像解析元件,其对已形成的眼底的图像进行解析,以求出前述受检眼的眼球运动。

Description

眼球运动测定装置、眼球运动测定方法及眼球运动测定程序
技术领域
本发明涉及一种测定受检眼的眼球运动用的眼球运动测定装置、眼球运动测定方法及眼球运动测定程序,特别是涉及一种依据眼底的图像来测定眼球运动的技术。
背景技术
专利文献1至4中已揭示先前的眼球运动测定技术。专利文献1中所记载的技术是依据眼球的运动已被摄影的动态图像,来求出眼球的中心和半径以及多个特征区域,以此为依据来检出眼球的动作,借此可容易地对解析眼球运动用的指标进行设定。
又,专利文献2所记载的技术为,对受检眼的眼睑照射近红外光,依据此光的反射强度来测定眼球运动,借此使眼睛闭着的状态下的眼球运动测定的感度提高。
又,专利文献3所记载的技术为,对受检眼的角膜进行照射,由含有二维状配置的多个像素的光检出部来检出该角膜反射光像,以生成每个像素的入射光量显示用的摄像数据,且依据角膜反射光像朝向光检出部的入射位置的移动信息,来对光检出部中的解像度或摄像区域进行设定,借此使测定精度向上提高。
又,专利文献4所记载的技术包括:第1摄像装置,用来对被检查者进行广角摄像;以及第2摄像装置,用来对该被检查者的眼球进行摄像。然后,由第1摄像装置所得到的摄影映像来算出第2摄像装置的方向控制用的控制信息,以便由第2摄像装置所得到的摄影映像来追踪眼球的位置且生成第2摄像装置的方向控制用的控制信号,由第2摄像装置所得到的摄影映像来算出视线的位置信息,然后对该视线的位置信息的算出时的眼球的追踪状态进行检查,依据此检查结果,借由上述任一个控制信号来控制第2摄像装置的方向,借此使测定精度提高。
[专利文献1]特开2005-66358号公报
[专利文献2]特开2005-205024号公报
[专利文献3]特开2005-211329号公报
[专利文献4]特开2005-323905号公报
因此,先前已开发多种眼球运动测定技术,特别是注意力已集中到测定精度的向上提高。然而,由于眼球运动时的眼球的移动量非常小,或由于移动时间亦短,则期望测定精度可更向上提高。
发明内容
本发明的目的在于提供一种眼球运动测定装置、眼球运动测定方法及眼球运动测定程序。
本发明的第一特征(aspect)是一种眼球运动测定装置,其特征为具备:图像形成元件,其以光学方式取得数据,依据已取得的数据来形成受检眼的眼底的图像;以及图像解析元件,其对已形成的眼底的图像进行解析,以求出前述受检眼的眼球运动。
本发明的第二特征是一种眼球运动测定方法,其特征为具备:图像形成步骤,其以光学方式取得数据,依据已取得的数据来形成受检眼的眼底的图像;以及图像解析步骤,其对已形成的眼底的图像进行解析,以求出前述受检眼的眼球运动。
本发明的第三特征是一种计算器可读取的记录媒体,其具有在计算器中执行处理用的计算器可读取码,前述计算器具备图像存储元件,其存储着受检眼的眼底的图像,前述处理须对已存储的前述眼底的图像进行解析,以求出前述受检眼的眼运动。
依据上述实施例,其在构成上可对受检眼的眼底的图像进行解析,以求出前述受检眼的眼运动。为了取得受检眼的眼底的图像,通常需要高的精度。因此,就像先前一样,在与基于以电视摄像机所摄取的眼球的运动的图像或角膜反射光像来测定眼球运动的情况相比较下,能以高精度来测定眼球运动。
上述说明仅是本发明技术方案的概述,为了能够更清楚了解本发明的技术手段,并可依照说明书的内容予以实施,以下以本发明的较佳实施例并配合附图详细说明如后。
附图说明
图1是表示本发明的眼球运动测定装置较佳的实施形态的整体结构的一例的概略图。
图2是表示本发明的眼球运动测定装置较佳的实施形态的光学系统的结构的一例的概略图。
图3是表示本发明的眼球运动测定装置较佳的实施形态的结构的一例的概略图。
图4是表示本发明的眼球运动测定装置较佳的实施形态的演算控制装置的硬件结构的一例的概略方块图。
图5是表示本发明的眼球运动测定装置较佳的实施形态的控制系统的结构的一例的概略方块图。
图6是表示本发明的眼球运动测定装置较佳的实施形态的演算控制装置的控制系统的结构的一例的概略方块图。
图7是表示本发明的眼球运动测定装置较佳的实施形态的眼底相机单元的外观结构的一例的概略侧面图。
图8是表示本发明的眼球运动测定装置较佳的实施形态的眼底相机单元的操作面板的外观结构的一例的概略图。
图9是用来说明本发明的眼球运动测定装置较佳的实施形态的信号光的扫描形态的一例的概略说明图。
图10是用来说明本发明的眼球运动测定装置较佳的实施形态的信号光的扫描形态的一例的概略说明图。
图11是用来表示本发明的眼球运动测定装置较佳的实施形态的信号光的扫描形态以及断层图像的形成形态的一例的概略说明图。
图12是通过本发明的眼球运动测定装置较佳的实施形态来扫描信号光时,表示受检眼的眼球运动发生时的断层图像的形成形态的一例的概略说明图。
图13是通过本发明的眼球运动测定装置较佳的实施形态所形成的眼底的断层图像的一例的概略图。
图14是通过本发明的眼球运动测定装置较佳的实施形态所形成的眼底的基准断层图像的一例的概略图。
图15是表示本发明的眼球运动测定装置较佳的实施形态的使用形态的一例的流程图。
图16是表示本发明的眼球运动测定装置较佳的实施形态的使用形态的一例的流程图。
1:眼球运动测定装置             1A:眼底相机单元
10,12:摄像装置
100:照明光学系统               101:观察光源
103:拍摄光源                   120:拍摄光学系统
141:扫描单元
141A,141B:检流计镜            150:OTC单元
160:低相干光源                 180:分光仪
184:电荷耦合器件(CCD)          200:演算控制装置
201:微处理器                   204:硬盘驱动器
204a:控制程序                  208:图像形成板
208a:眼底图像形成板            208b:OTC图像形成板
210:控制部                     211:主控制部
212:图像存储部                  220:图像形成部
230:图像处理部                  231:图像解析部
232:凹凸检出部                  233:图像区域抽出部
234:位置特定部                  240:用户接口
241,242:镜片驱动机构
LO:低相干光                     LR:参照光
LS:信号光                       LC:干涉光
R:扫描区域                      R1~Rm:扫描线
Rij(i=1~m,j=1~n):扫描点    G1~Gm,GC:断层图像
Gij(i=1~m,j=1~n):深度方向的图像
GR:基准断层图像                 E:受检眼
Ef:眼底                         Ef’,Hp:眼底图像
具体实施方式
以下结合附图及较佳实施例,对依据本发明提出的眼球运动测定装置、眼球运动测定方法及眼球运动测定程序的适当的实施形态的一例,参照各图面且详细说明如后。
本发明借由对受检眼的眼底的图像进行解析,以高精度地测定极微小的眼球运动。又,本发明中的”眼球运动”不只是指受检眼的固视微动、随从运动、跳跃运动等之类的眼筋所造成的眼球的动作,而且亦包含拍动所造成的眼球的位置的移动等,以及眼筋以外的任意的原因所造成的眼球的动作。
[眼球运动测定装置]
首先,对本实施形态的眼球运动测定装置的构成的一例,参照图1至图12来说明。
此处,图1表示本实施形态的眼球运动测定装置1的整体结构及眼底相机单元1A的结构。图2表示眼底相机单元1A内的扫描单元141的结构。图3表示OCT单元150的结构。图4表示演算控制装置200的结构。图5和图6表示眼球运动测定装置1的控制系统的结构的概要。图7表示眼底相机单元1A的外观结构。图8表示眼底相机单元1A的操作面板3a的外观结构。又,图9和图10表示取得眼底的断层图像用的信号光的扫描形态。图11及图12表示断层图像的形成处理的形态。
[全体结构]
本实施形态的眼球运动测定装置1如图1所示,其结构包含:对眼底的图像进行摄像用的眼底相机单元1A、存储着光图像计测装置(OCT装置)的光学系统的OCT单元150、执行各种演算处理或控制处理等的演算控制装置200,其中该光图像计测装置取得眼底的断层图像。
连接线152的一端安装在OCT单元150上。该连接线152的另一端上安装有连接部151。该连接部151安装在图7所示的眼底相机单元1A的安装部8c(后述)。而且,在连接线152的内部导通有光纤。OCT单元150与眼底相机单元1A经过连接线152而形成光学性连接。
[眼底相机单元的结构]
眼底相机单元1A是一种基于光学方式取得数据(摄像装置10、12检测出的数据),形成受检眼的眼底的表面二维图像的装置。
首先,参照图7,来说明眼底相机单元1A的外观结构。该眼底相机单元1A具有架台3,其以可在前后左右方向(水平方向)滑动的方式搭载于基座2上。在该台架3上,设置有检查者用以进行各种操作的操作面板3a及控制杆4。
检查者通过操作该控制杆4,而能够使台架3在基座2上进行三维的移动。在控制杆4的顶部,配置有要求执行眼底拍摄时而按下的操作按钮4a。又,该操作面板3a的结构以后将再描述。
在基座2上立设有支柱5,并且在该支柱5上,设置有用于载置被检查者的颚部的颚托6、及作为用以发出使受检眼E视线成固定视的光的外部视线固定视灯7。
在台架3上,搭载有存储着眼底相机单元1A的各种光学系统或控制系统的本体部8。在本体部8的受检眼E侧(图7的纸面的左方向),设有与受检眼E相对向而配置的物镜部8a。
而且,本体部8上设置有:用以拍摄受检眼E眼底的的静止图像或动态图像的电视摄像机等摄像装置10、12。摄像装置10检出近红外区域的波长的光。又,摄像装置12检出可视区域的波长的光。摄像装置10、12可分别安装或脱离于本体部8。又,本实施形态中,眼底相机单元1A上搭载着二台摄像装置,但该搭载台的数目可任意。
又,在本体部8的检查者这一侧设有触摸屏11。该触摸屏11上显示根据从摄像装置10、12输出的图像信号而形成的受检眼E的眼底像。而且,在触摸屏11上,使以其画面中央为原点的二维坐标系重叠显示在眼底像上。当检查者在画面上触摸所要的位置时,则显示与该触摸位置对应的坐标值。
眼底相机单元1A具备:照明光学系统100,对受检眼E的眼底Ef进行照明;以及拍摄光学系统120,将该照明光的眼底反射光引导向摄像装置10。
其次,参照图1、图2就眼底相机单元1A的光学系统的结构来进行说明。眼底相机单元1A的光学系统包括照明光学系统100和拍摄光学系统120。又,眼底相机单元1A的光学系统可在进行眼底Ef的摄像之前对该眼底Ef对准(即,在图1所示的x方向、y方向、z方向中使本体部8移动,将光学系统配置在摄像时适当的位置处)。
照明光学系统100将眼底Ef的图像拍摄用的照明光照射至受检眼E。又,该拍摄光学系统120中接收由照明光学系统100而来的照明光的眼底反射光,以摄取眼底Ef的图像。而且,该拍摄光学系统120将由OCT单元150发出的信号光引导到眼底Ef,并且将经过眼底Ef的信号光引导到OCT单元。
照明光学系统100包含观察光源101、聚光镜102、拍摄光源103、聚光镜104、激发滤光片105及106、环形透光板107、镜片108、液晶显示器109、照明光圈110、中继透镜111、开孔镜片112、物镜113而构成。
观察光源101输出包含波长例如约400nm-700nm的范围的可视区域的照明光(观察照明光),因此,该观察光源101例如由卤素灯所构成。聚光镜102是光学组件,其借由对该观察光源101所发出的观察照明光进行聚光,以使该观察照明光大致均等地在眼底Ef上进行照明。
该拍摄光源103输出包含波长例如约700nm-800nm的范围的近红外区域的照明光(拍摄照明光),因此,该拍摄光源103例如由佳能(cannon)灯所构成。该拍摄光源103输出的近红外光,设定成较在OCT单元150使用的光的波长还短(后面再述)。拍摄光源103在进行眼底Ef的拍摄时发出闪光(flash)。聚光镜104是光学组件,其借由对该拍摄光源103所发出的拍摄照明光进行聚光,以使该拍摄照明光大致均等地在眼底Ef上进行照明。
激发滤光片105、106是在对眼底Ef的眼底像进行荧光拍摄时所使用的滤光片。激发滤光片105、106分别通过螺线管(solenoid)等驱动机构或旋转式的六角头(turret)(未图示)而可插拔地设置在光路上。激发滤光片105在FAG(荧光素荧光造影)拍摄时配置在光路上。另一方面,激发滤光片106在ICG(靛青绿荧光造影)拍摄时配置在光路上。另外,在进行彩色拍摄时,激发滤光片105、106一同从光路上退出。
环形透光板107具备环形透光部107a,该环形透光部107a配置在与受检眼E的瞳孔共轭的位置上,并以照明光学系统100的光轴为中心。镜片108使观察光源101或拍摄光源103所发出的照明光,向拍摄光学系统120的光轴方向反射。液晶显示器109显示用以进行受检眼E的视线固定的视线固定标(未图示)等的各种图像。
照明光圈110是为了防闪等而阻挡一部分照明光的光圈构件。该照明光圈110可以在照明光学系统100的光轴方向上移动,因此,可以调整眼底Ef的照明区域。
开孔镜片112是将照明光学系统100的光轴与拍摄光学系统120的光轴合成的光学组件。在开孔镜片112的中心区域开有孔部112a。照明光学系统100的光轴与拍摄光学系统120的光轴在该孔部112a的大致中心位置交叉。物镜113设在本体部8的物镜部8a内。
具有这样的结构的照明光学系统100,是以下面所述的形态来照亮眼底Ef。首先,在观察眼底时,点亮该观察光源101,输出观察照明光。该观察照明光经过聚光镜102、104而照射环形透光板107,(此时,激发滤光片105、106从光路上退出)。通过环形透光板107的环形透光部107a的光由镜片108所反射,且经过液晶显示器109、照明光圈110及中继透镜111,并由开孔镜片112反射。由开孔镜片112反射的观察照明光沿拍摄光学系统120的光轴方向进行,经物镜113聚焦而射入至受检眼E,以照亮眼底Ef。
此时,由于环形透光板107配置在与受检眼E的瞳孔共轭的位置上,因此在瞳孔上形成射入至受检眼E的观察照明光的环状像。观察照明光的眼底反射光,通过瞳孔上的环形像的中心暗部而从受检眼E射出。如此,可防止射入至受检眼E的观察照明光,对观察照明光的眼底反射光的影响。
另一方面,在拍摄眼底Ef时,拍摄光源103进行闪光,且拍摄照明光通过同样的路径而照射到眼底Ef。又,当进行荧光拍摄时,根据是进行FAG拍摄还是进行ICG拍摄,而使激发滤光片105或106选择性地配置在光路上。
其次,说明拍摄光学系统120,拍摄光学系统120包含物镜113、开孔镜片112(的孔部112a)、拍摄光圈121、阻挡滤光片122及123、倍率可变透镜124、中继透镜125、拍摄透镜126、分色镜(dichroic mirror)134、视场透镜128、半反射镜135、中继透镜131、分色镜136、拍摄透镜133、摄像装置10(摄像组件10a)、反射镜137、拍摄透镜138、摄像装置12(摄像组件12a)、透镜139以及LED 140而构成。
通过瞳孔上的环状像的中心暗部而从受检眼E射出的照明光的眼底反射光,通过开孔镜片112的孔部112a而入射至拍摄光圈121。开孔镜片112反射该照明光的角膜反射光,并且不使角膜反射光混入到射入至拍摄光圈121的眼底反射光中。以此,可抑制观察图像或拍摄图像上产生的闪烁(flare)。
拍摄光圈121是形成有大小不同的多个圆形透光部的板状构件。多个透光部构成光圈值(F值)不同的光圈,通过未图示的驱动机构,选择性地将一个透光部配置在光路上。
阻挡滤光片122、123通过螺线管等的驱动机构或旋转式的六角头(未图示)而可插拔地设置在光路上。在进行FAG拍摄时,使阻挡滤光片122配置在光路上,在进行ICG拍摄时,使阻挡滤光片123插在光路上。而且,在进行彩色拍摄时,阻挡滤光片122、123一同从光路上退出。
倍率可变透镜124可以通过未图示的驱动机构而在拍摄光学系统120的光轴方向上移动。以此,可以变更观察倍率或拍摄倍率,并可以进行眼底图像的聚焦等。拍摄透镜126是使来自受检眼E的眼底反射光在拍摄媒体9a上成像的透镜。
分色镜134为用以反射该照明光的眼底反射光(包含波长约400nm-800nm的范围)。通过分色镜134所反射的照明光的眼底反射光经由视场透镜128而入射至半反射镜135。而且,该眼底反射光(的一部份)透过该半反射镜135,且经由中继透镜131而入射至分色镜136。
并且,分色镜134为可由OCT单元150而来的信号光LS(例如,包含波长例如约800nm-900nm范围,后述)所透过,同时可使该信号光LS的眼底反射光透过。此处,由OCT单元150而来且入射至眼底相机单元1A的信号光LS经由透镜142和扫描单元141而入射至分色镜134。另一方面,透过该分色镜134的信号光LS的眼底反射光经由扫描单元141和透镜142而由眼底相机单元1A输出。
分色镜136可透过由照明光学系统100而来的具有可视区域的波长的照明光(由观察光源101输出的波长约400nm-700nm的可视光),并可反射具有近红外区的波长的照明光(由拍摄光源103输出的波长约700nm-800nm的近红外光)。
观察照明光的眼底反射光透过分色镜136而由反射镜137所反射,且经由拍摄透镜138而由摄像装置12的摄像组件12a所接收。另一方面,拍摄照明光的眼底反射光由分色镜所反射,且经由拍摄透镜133的摄像组件13a而被接收。
摄像装置10的摄像组件10a是CCD(Charge Coupled Device,电荷耦合器件)或CMOS(Complementary Metal Oxide Semicondutor,互补金属氧化半导体)等摄像组件,特别是可检出近红外区域的波长的光(即,摄像装置10是检出近红外光的红外线电视摄像机)。
摄像装置10输出映像信号以作为近红外光检出后的结果。触摸屏11依据此映像信号,以显示眼底Ef的表面的二维图像(眼底图像Ef’)。又,该映像信号发送至演算控制装置200,以将眼底图像显示在显示器(后述)上。
又,摄像装置12的摄像组件12a是CCD或CMOS等摄像组件,特别是可检出可视区域的波长的光(即,摄像装置12是检出可视光的电视摄像机)。
摄像装置12输出映像信号以作为可视光检出后的结果。触摸屏11依据此映像信号,以显示眼底Ef的表面的二维图像(眼底图像Ef’)。又,该映像信号发送至演算控制装置200,以将眼底图像显示在显示器上。
在LCD 140显示有使受检眼E视线固定的固视标(内部视线固定标)等。由该LCD 140发出的光经透镜139聚光之后,由半反射镜135反射,通过视场透镜128而由分色镜136所反射。然后,通过拍摄透镜126、中继透镜125、倍率可变透镜124、开孔镜片112(的孔部112a)、物镜113等,射入受检眼E。由此,该内部视线固定标等投影到受检眼E的眼底Ef。
眼底相机单元1A内设有扫描单元141和透镜142。扫描单元141对来自OCT单元150而入射至眼底相机单元1A的信号光LS的对眼底Ef的照射位置进行扫描,以作为本发明的”扫描单元”的一例。
透镜142使来自OCT单元150的信号光LS通过连接线152,引导成为平行光束,并将其射入至扫描单元141。而且,透镜142的作用为使经过扫描单元141而来的信号光LS的眼底反射光聚焦以入射至连接线152。
图2中表示扫描单元141的具体结构的一例。扫描单元141包含检流计镜(galvanometer mirror)141A、141B以及反射镜片141C、141D而构成。
检流计镜141A、141B是配设成可分别以旋转轴141a、141b为中心而旋转的反射镜。各检流计镜141A、141B通过后述的驱动机构(图5所示的反射镜驱动机构241、242),分别以旋转轴141a、141b为中心而旋转,以分别变更各检流计镜141A、141B的反射面(反射信号光LS的面)的方向,亦即分别变更检流计镜141A、141B的位置。
旋转轴141a、141b以相互正交的方式而配设。在图2中,检流计镜141A的旋转轴141a配设为平行于该图的纸面,且检流计镜141B的旋转轴141b配设为垂直于该图的纸面。即,检流计镜141B以可在图2中的两侧箭头所示的方向上转动的方式而构成,检流计镜141A以可在对该两侧箭头成垂直的方向上转动的方式而构成。
由检流计镜141A、141B所反射的信号光LS,向与由反射镜片141C、141D所反射而入射至检流计镜141A时相同的方向行进。
另外,如上所述,连接线152的内部导通有光纤152a,该光纤152a的端面152b是与透镜142相对而配设。从该端面152b所射出的信号光LS朝向透镜142使束径逐渐放大而行进,但通过该透镜142而成为平行光束。相反地,经由眼底Ef的信号光LS的眼底反射光通过该透镜142而朝向端面152b聚焦且导引至光纤152a。
OCT单元的结构
接着,参照图3说明OCT单元150的结构。如同图所示,OCT单元150中设有光学系统,其基于利用光学扫描所取得的数据(利用后述的CCD检测出的数据),形成前述眼底的断层图像。
OCT单元150具备与旧有的光图像计测装置大致相同的构造,亦即具备:干涉计,将从光源输出的光分割成参照光和信号光,将经过参照物体的参照光和经过被测定物体(眼底Ef)的信号光进行重叠,以产生干涉光;以及将作为检测该干涉光的结果的信号(检测信号)输出到演算控制装置200的元件。演算控制装置200分析此信号,以形成被测定物体(眼底Ef)的图像。
低相干光源160是由输出低相干光LO的超级发光二极管(SLD,superluminescent diode)或发光二极管(LED,light-emitting diode)等的宽带光源所构成。该低相干光LO例如具有近红外区域的波长,并且具有数十微米左右的时间性相干长度的光。
从该低相干光源160输出的低相干光LO,具有比眼底相机单元1A的照明光(波长约400nm-800nm)更长的波长,例如含有约800nm-900nm范围的波长。该低相干光源160相当于本发明的“光源”的一例。
从低相干光源160所输出的低相干光LO,例如通过由单模光缆(single-mode fiber)或极化保持光纤(polarization maintaining fiber)所构成的光纤161,被引导向光耦合器(coupler)162,由该光耦合器162将该低相干光源LO分割为参照光LR与信号光LS。
另外,光耦合器162具有光分割元件(分光器)及光重叠的元件(耦合器)双方的功能,但惯用名叫“光耦合器”。
从光耦合器162发生的参照光LR,被由单模光纤等构成的光纤163引导,从光纤端面射出,所射出的参照光LR通过准直透镜171,成为平行光束后,经过玻璃块172及密度滤光片173,并由参照镜片174(参照物体)而反射。
由参照镜片174所反射的参照光LR再次经过密度滤光片173及玻璃块172,并通过准直透镜171而在光纤163的光纤端面上聚光。已聚光的参照光LR通过光纤163而被引导向光耦合器162。
另外,玻璃块172及密度滤光片173,是作为用以使参照光LR与信号光LS的光路长度(光学距离)一致的延迟元件而发挥作用,而且作为用以使参照光LR与信号光LS的色散特性一致的组件而发挥作用。
另外,密度滤光片173是做为使参照光光量减少的减光滤光片而作用。例如由旋转型的ND(neutral density)滤光片构成。
此密度滤光片173通过包含马达等驱动装置的驱动机构(密度滤光片驱动机构244,参照图5)而被旋转驱动,借此改变参照光LR的光量减少量。通过此方式,可以改变对干涉光LC的产生有贡献的参照光LR的光量。
又,参照镜174为可沿参照光LR的进行方向(图3所示的实线箭头方向)移动的构造。因此,能够对应于受检眼E的眼轴长度等,以确保参照光LR的光路长度。另外,参照镜174的移动可利用含有马达等的驱动装置的驱动机构(参照镜片驱动机构243,参照图5)来进行。
另一方面,从光耦合器162发生的信号光LS,通过由单模光纤等构成的光纤164而入射至连接线152。在连接线152的内部导通有光纤152a。
此处,光纤164与光纤152a可以由单一的光纤而构成,而且,也可以是将不同光纤的端面彼此接合而一体形成的光纤。总之,光纤164、152a只要可以在眼底相机单元1A与OCT单元150之间传送信号光LS即可。
信号光LS在连接线152内部被引导而被导向眼底相机单元1A。而且,信号光LS经过透镜142、扫描单元141、分色镜134、拍摄透镜126、中继透镜125、倍率可变透镜124、拍摄光圈121、开孔镜片112的孔部112a与物镜113,而入射至受检眼E(又,信号光LS入射至受检眼E时,阻挡滤光片122、123事先从光路中退出)。
入射至受检眼E的信号光LS在眼底(视网膜)Ef上成像并反射。此时,信号光LS不仅被眼底Ef的表面反射,也到达眼底Ef的深部区域并在折射率边界上产生散射。以此,经由眼底Ef的信号光LS成为包含反映眼底Ef的表面形态的信息、及反映在眼底深部组织的折射率边界的背后散射(backscattering)的状态的信息的光。
信号光LS的眼底反射光向眼底相机单元1A内的上述路径的相反方向行进,在光纤152a的端面152b上聚光,通过该光纤152而入射至OCT单元150,并通过光纤164而返回到光耦合器162。
光耦合器162使经由眼底Ef而返回的该信号光LS与由参照镜片174所反射的参照光LR重叠而产生干涉光LC。所产生的干涉光LC通过单摸光纤等构成的光纤165,被引导向分光仪180。
此处,本发明的“干涉光产生元件”由至少包含光耦合器162、光纤163、164与参照镜片174的干涉仪所构成。另外,本实施形态中是采用了迈克尔逊型干涉仪(Michelson interferometer),但也可以适当采用例如马赫-曾德(Mach-Zehnder)型等任意类型的干涉仪。
分光仪(spectrometer)180包含准直透镜181、衍射光栅182、成像透镜183与CCD(Charge Coupled Device,电荷耦合器件)184而构成。本实施形态的衍射光栅182是可透光的透过型衍射光栅,但当然也可以使用可使光反射的反射型衍射光栅。而且,当然也可以应用其它光检测元件来代替CCD184。如上述的光检测元件为相当本发明的“检测装置”的一例。
入射至分光仪180的干涉光LC通过准直透镜181而成为平行光束之后,被衍射光栅182分光(光谱分解)。已分光的干涉光LC通过成像透镜183而在CCD184的摄像面上成像。CCD184接收该干涉光LC并将其转换为电气检测信号,且将该检测信号输出到演算控制装置200中。
演算控制装置的构造
其次,说明此演算控制装置200的构造。此演算控制装置200相当于本发明的“计算器(computer)”的一个例子。
演算控制装置200进行以下处理:分析由OCT单元150的分光仪180的CCD184输入的检测信号,以形成该受检眼E的眼底Ef的断层图像(的图像数据)。此时的分析方法与先前的傅立叶区域OCT的分析方法相同。
另外,演算控制装置200进行以下处理:依据由眼底相机单元1A的摄像装置10、12输出的图像信号,形成眼底Ef的表面(网膜)形态显示用的二维图像(的图像数据)。
而且,演算控制装置200执行眼底相机单元1A以及OCT单元150的控制。
作为眼底相机单元1A的控制,例如进行观察光源101或拍摄光源103的照明光的输出控制、激发滤光片105、106或阻挡滤光片122、123在光路上的插入/退出动作的控制、液晶显示器140等的显示装置的动作的控制、照明光圈110的移动控制(光圈值的控制)、拍摄光圈121的光圈值的控制、倍率可变透镜124的移动控制(倍率的控制)等。而且,演算控制装置200对扫描单元141内的检流计镜141A、141B的旋转动作(反射面的方向的变更动作)进行控制。
又,OCT单元150的控制,例如是进行低相干光源160的低相干光LO的输出控制、参照镜174的移动控制、密度滤光片173的旋转动作(参照光LR的光量减少量的变更动作)的控制、CCD184的蓄积时间的控制等。
参照图4,对如上所述发挥作用的演算控制装置200的硬件结构进行说明。
演算控制装置200具备与先前的电脑同样的硬件结构。具体而言,包含微处理器201(CPU,MPU等)、RAM 202、ROM 203、硬盘驱动器(HDD,HardDisk Driver)204、键盘205、鼠标206、显示器207、图像形成板208及通信接口(I/F)209。这些各个部分是通过总线200a而连接。
另外,演算控制装置200也可以具备卡片阅读机等的读取装置,用以读取患者卡片的记录内容,患者卡片记录着包含患者ID等的患者识别信息的患者信息。此卡片阅读机例如是连接到形成该演算控制装置200的计算器的未图示USB(Universal Serial Bus)端口等的连接器而使用的。
微处理器201将存储在硬盘驱动器204中的控制程序204a展开到RAM202上,以此在本实施形态中执行特征性动作。此控制程序204a相当于本发明的“眼球运动测定程序”的一个例子。
而且,微处理器201执行上述装置各部分的控制、或各种运算处理等。而且,执行与来自键盘205或鼠标206的操作信号对应的装置各个部分的控制、显示器207的显示处理的控制、通信接口209的各种数据或控制信号等的发送接收处理的控制等。另外,微处理器201如通常一般,具备提供日期信息或时刻信息等的日时信息的功能。
键盘205、鼠标206及显示器207是作为眼球运动测定装置1的用户接口而使用的。键盘205是作为用以键入字符或数字等的设备而使用。鼠标206是作为用以对显示器207的显示画面进行各种信息输入或操作的指示(pointing)设备。
显示器207例如是LCD(Liquid Crystal Display,液晶显示器)或CRT(Cathode Ray Tube,阴极射线管)显示器等所构成的任意的显示设备,其显示由眼球运动测定装置1所形成的眼底Ef的图像,或显示各种操作画面或设定画面等。
另外,眼球运动测定装置1的用户接口并不限定于上述这样的结构,也可以使用例如轨迹球(track ball)、控制杆、触摸面板式LCD、用于眼科检查的控制面板等具备显示输出各种信息的功能以及输入各种信息以进行操作的功能的任意用户接口机构而构成。
图像形成板208为处理形成受检眼E的眼底Ef的图像(图像数据)的专用电子电路。在该图像形成板208中设有眼底图像形成板208a及OCT图像形成板208b。
眼底图像形成板208a为专用电子电路,其动作为,依据眼底相机单元1A的摄像装置10,或摄像装置12而来的图像信号以形成眼底图像的图像数据。
又,OCT图像形成板208b为专用电子电路,其动作为,依据OCT单元150的分光仪180的CCD184的检测信号来形成眼底Ef的断层图像的图像数据。
因设有上述的图像形成板208,可提高形成眼底图像或断层图像的图像数据的处理的处理速度。
通信接口209进行以下处理:将来自微处理器201的控制信号发送到眼底相机单元1A或OCT单元150。另外,通信接口209进行以下处理:接收由眼底相机单元1A的摄像装置10、12而来的图像信号,或从OCT单元150的CCD 184而来的检测信号,以进行对图像形成板208的输入等。此时,通信接口209的动作为将从摄像装置10、12而来的图像信号输入至眼底图像形成板208a,将从CCD184而来的检测信号输入至OCT图像形成板208b。
而且,当演算控制装置200连接于LAN(Local Area Network,局域网)或互联网等网络时,在通信接口209中可以具备局域网卡等网络适配器(network adapter)或调制解调器(modem)等通信设备,并能够经过该网络而进行数据通信。此时,存储着控制程序204a的服务器(server)是设置在网络上,并且,将演算控制装置200构成为该服务器的客户终端。通过此方式,本发明的动作可以在眼球运动测定装置1上执行。
[眼球运动测定装置的控制系统的结构]
具有以上构成的眼球运动测定装置1的控制系统,将参照图5,图6,图8来说明。
[控制部]
眼球运动测定装置1的控制系统是以演算控制装置200的控制部210为中心而构成的。控制部210包含CPU 201、RAM 202、ROM 203、硬盘驱动器204(控制程序204a)、通信接口209等而构成。
控制部210根据控制程序204a来执行上述的控制处理。尤其是,针对眼底相机单元1A,来进行该观察光源101或拍摄光源103或检流计镜141A、141B(镜片驱动机构241,242)等的控制。另外,针对OCT单元150,执行低相干光源160,CCD 184,密度滤光片173(密度滤光片驱动机构244),参照反射镜174(参照反射镜驱动机构243)等的控制。
又,控制部210储存着由眼球运动测定装置1所取得的图像,即,通过眼底相机单元1A所拍摄的眼底Ef表面的二维图像(眼底图像Ef)、以及由OCT单元150所获得的检测信号而形成的眼底Ef的断层图像。该些图像例如储存在硬盘驱动器204中。控制部210(例如,硬盘驱动器204:后述的图像存储部212;参照图6)在功能上是作为本发明的”图像存储单元”的一例。
又,本发明的图像存储单元不必设在演算控制装置200的筐体内部,筐体外部亦可设置着该演算控制装置200可存取的例如NAS(NetworkAttached Storage)等的存储装置。
又,控制部210使由眼球运动测定装置1所取得的图像显示在用户接口(User Interface)240(显示器270)上。这些图像亦可分别显示在显示器270上,且与显示器上的图像同时显示。又,控制部210的详细构造,将参照图6来描述于后。
[用户接口]
用户接口(User Interface,UI)240具备由显示器207等的显示装置所构成的显示功能、以及由键盘205或鼠标206等的输入设备或操作设备所构成的输入功能。
[操作面板]
操作面板3a如图7所示,是配设在眼底相机单元1A的架台上。
操作面板3a设置有:为了取得眼底Ef的表面二维图像(眼底图像Ef’)而使用的操作部;以及为了取得眼底Ef的断层图像而在操作中使用的操作部。
如图8所示,在本实施例的操作面板3a,设置有菜单切换键301、裂像(split)切换键302、摄影光量切换键303、观察光量切换键304、颚托切换键305、摄影切换键306、焦段(zoom)切换键307、图像替换切换键308、固定视线标替换切换键309、固定视线标位置调整切换键310、固定视线标尺寸替换切换键311以及模式替换旋钮(knob)312。
菜单切换键301是一种切换键,其用来操作以显示用户为了选择指定各种菜单(眼底Ef的表面二维图像或断层图像等摄影时的摄影菜单,为了进行各种设定输入的设定菜单等等)的预定菜单画面。
当操作此菜单切换键301时,其操作信号输入到控制部210。控制部210对应此操作信号的输入,使菜单画面显示在触摸屏11或用户接口240(显示器270)上。另外,在眼底相机单元1A上设置控制部(未图标),也可以使该控制部将菜单画面显示在触摸屏11上。
分割切换键302是用在切换对焦用的裂像亮线(参照如特开平9-66031等,也称为裂像视标或裂像标记等)的点亮与熄灭的切换。另外,使此裂像亮线投影在受检眼E用的结构(裂像亮线投影部),例如是放置在眼底相机单元1A内(在图1中被省略)。
当操作该分割切换键302时,该操作信号输入到控制部210(或眼底相机单元1A内的上述控制部,以下也相同)。控制部210对应该操作信号的输入,以控制裂像亮线投影部,使裂像亮线投影到受检眼E。
摄影光量切换键303是一种切换键,其操作用来对应受检眼E的状态(例如水晶体的混浊度等)等,以调整该拍摄光源103的输出光量(摄影光量)。在此摄影光量切换键303设有:为了增加摄影光量的摄影光量增加切换键“+”、为了减少摄影光量的摄影光量减少切换键6“-”以及为了将摄影光量设定在预定的初期值(内设值)的复位切换键(中央按钮)。
当操作摄影光量切换键303的其中一个,该操作信号输入到控制部210。控制部210对应该输入的操作信号,控制该拍摄光源103,以调整摄影光量。
观察光量切换键304是一种切换键,被操作用来调整该观察光源101的输出光量(观察光量)。在此观察光量切换键304设有例如为了使观察光量增加的观察光量增加切换键“+”和为了减少观察光量的观察光量减少切换键“-”。
当操作观察光量切换键304的其中一个,该操作信号输入到控制部210。控制部210对应所输入的操作信号,控制观察光源101,调整观察光量。
颚托切换键305是让眼底相机单元1A所示的颚托6的位置进行移动的切换键。在颚托切换键305设置有例如使颚托6向上移动的向上移动切换键(向上的三角形)和使颚托6向下移动的向下移动切换键(向下的三角形)。
当操作颚托切换键305的其中一个,该操作信号输入到控制部210。控制部210对应该输入的操作信号,以控制颚托移动机构(未图标),使颚托6往上方或下方移动。又,亦可使被检查者的额所抵接的额抵接部与该颚托6一起移动。
摄影切换键306是一种切换键,作为触发键(trigger switch)而操作,用来取得眼底Ef的表面的二维图像或眼底Ef的断层图像。
当摄影二维图像的菜单被选择时,若摄影切换键306被操作,已接受该操作信号的控制部210会控制该拍摄光源103而使摄影照明光输出,同时基于从检测该眼底反射光的摄像装置10所输出的图像信号,使眼底Ef的表面二维图像显示在用户接口240或触摸屏11上。
另一方面,当取得断层图像的菜单被选择时,若摄影切换键306被操作,则已接受该操作信号的控制部210会控制低相干光源160而使低相干光LO输出,控制检流计镜141A、141B并使信号光LS进行扫描,同时基于检测干涉光LC的CCD 184所输出的检测信号,使图像形成部220(及图像处理部230)所形成的眼底Ef断层图像显示在用户接口240或触摸屏11。
焦段切换键307是一种切换键,被操作用来变更眼底Ef的摄影时的画角(变焦倍率)。在每次操作此焦段切换键307时,例如交替地设定成摄影画角为45度和22.5度。
当操作此焦段切换键307,已接受该操作信号的控制部210控制未图标的倍率可变透镜驱动机构,使倍率可变透镜124在光轴方向上移动,以变更摄影画角。
图像切换键308是一种被操作用来切换显示图像的切换键。当眼底观察图像(基于来自摄像装置12的图像信号的眼底Ef的表面二维图像)显示在用户接口240或触摸屏11时,若操作图像切换键308,则已接受此操作信号的控制部210使眼底Ef的断层图像显示在用户接口240或触摸屏11。
另一方面,当眼底的断层图像显示在用户接口240或触摸屏11时,若操作图像切换键308,则已接受此操作信号的控制部210使眼底观察图像显示在用户接口240或触摸屏11。
固定视线标替换切换键309是被操作用来对利用LCD 140的内部固定视线标的显示位置(即,在眼底Ef的内部固定视线标的投影位置)进行切换的切换键。通过操作此固定视线标替换切换键309,使内部固定视线标的显示位置例如在“为了取得眼底中心的周边区域的图像的固定视线位置(眼底中心摄影用固视位置)”、“为了取得黄斑的周边区域的图像的固定视线位置(黄斑摄影用固视位置)”、“为了取得视神经乳突的周边区域的图像的固定视线位置(视神经乳突摄影用固视位置)”之间做巡回替换。
控制部210对应来自固定视线标替换切换键309的操作信号,使内部固定视线标显示在LCD 140的表面上的相异位置。另外,对应上述三个固定视线位置的内部固定视线标的显示位置是例如基于临床数据而预先设定的,或者是对每个受检眼E(眼底Ef的图像)事先设定。
固定视线标位置调整切换键310是被操作用来调整内部固定视线标的显示位置的切换键。在此固定视线标位置调整切换键310上设置有:使内部固定视线标的显示位置往上方移动的上方移动切换键、使往下方移动的下方移动切换键、使往左方移动的左方移动切换键、使往右方移动的右方移动切换键、使移动到预定的初期位置(内设位置)的复位切换键。
控制部310当接受到来自上述固定视线标位置调整切换键310的任一个切换键的操作信号时,对应该操作信号来控制LCD 140,借此使内部固定视线标的显示位置移动。
固定视线标尺寸替换切换键311是被操作用来变更内部固定视线标的尺寸的切换键。当操作此固定视线标尺寸替换切换键311时,则已接受该操作信号的控制部210变更显示在LCD 140上的内部固定视线标的显示尺寸。内部固定视线标的显示尺寸例如在“一般尺寸”和“加大尺寸”之间交互切换。借此,变更投影在眼底Ef上的固定视线标的投影像的尺寸。控制部210当接受到来自固定视线标尺寸替换切换键311的操作信号,对应该操作信号来控制LCD 140,借此变更内部固定视线标的显示尺寸。
模式替换旋钮312是一种被旋转操作、用以选择各种摄影模式的旋钮。作为可选择的摄影模式,可适当地设置:对眼底Ef的二维图像进行摄影的眼底摄影模式、进行信号光LS的B扫描的B扫描模式、使信号光LS进行三维扫描的三维扫描模式等等。
另外,此模式替换旋钮312也可以选择再生模式,其用以对已取得的眼底Ef的二维图像或断层图像进行再生显示。另外,也可以选择摄影模式,控制成在信号光LS的扫描后立刻进行眼底摄影。眼球运动测定装置1中进行上述各模式对应的动作时用的装置各部的控制是由控制部210执行。
[图像形成部]
图像形成部220为进行依据眼底相机单元1A的摄像装置10、12的图像信号,形成眼底Ef的二维图像(的图像数据)的处理,以及依据OCT单元150的CCD 184的检测信号,形成眼底Ef的断层图像(的图像数据)的处理。图像形成部220的断层图像形成处理将描述于后。图像形成部220为包含图像形成板208的结构。
在此,本发明的“图像形成元件”例如包含:眼底相机1A、OCT单元150以及图像形成部220。另外,本发明的“断层图像形成元件”包含:OCT单元150、图像形成部220的OCT图像形成板208b。另外,本发明的“眼底拍摄元件”例如包含:眼底相机1A、图像形成部220的眼底图像形成板208a。
[图像处理部]
图像处理部230为对图像形成部220形成的图像的图像数据,实施各种图像处理的装置。例如,图像处理部230依据由OCT单元150而来的检测信号,依据眼底Ef的断层图像,以进行形成眼底Ef的三维图像(的图像数据)的处理,或进行图像的亮度修正或色散修正等的各种图像修正处理等。
在此,所谓的三维图像的图像数据是将排列成三维的多个立体像素(voxel)分别赋予像素值而构成的一种图像数据,也称为立体数据(volumndata)或voxel数据等等。在显示基于立体数据的图像时,图像处理部230对此立体数据进行绘制(rendering)(立体绘制或MIP(Maximum IntensityProjection:最大值投影))处理,形成从特定视线方向观看时的仿真三维图像的图像数据。控制部210使基于此图像数据的仿真三维图像则显示在显示器207上。
另外,与先前技术类似,图像处理部230执行对相当于眼底Ef的断层图像中所包含的各种层(例如,网膜色素上皮层等)的图像区域、或相当于层与层的边界的图像区域进行抽出的处理。更基于此抽出结果,执行对层厚度进行演算的处理。
进行上述处理的图像处理部230包括微处理器201、RAM 202、ROM203与硬盘驱动器204(控制程序204a)等。
以下,对形成眼底Ef的断层图像的信号光LS的扫描形态,以及与基于该扫描形态的断层图像有关的图像处理来进行说明。
[关于信号光的扫描形态和图像处理]
一边参照图9,图10,一边说明该信号光LS的扫描形態。信号光LS的扫描是与低相干光源160的动作控制、扫描单元141的检流计镜141A、141B的反射面的朝向的变更控制等相同步而进行。此种同步控制是借由控制部210来对该低相干光源160和镜片驱动机构241,242进行控制而实现。
当变更检流计镜141A的反射面的朝向时,信号光LS對眼底Ef的照射位置会在水平方向上(图1的x方向)发生变位。另一方面,当变更检流计镜141A的反射面的朝向时,信号光LS对眼底Ef的照射位置会在垂直方向(图1的y方向)上发生变位。
而且,同时变更检流计镜141A、141B两者的反射面的朝向,以此只可以将x方向上的变位与y方向上的变位以向量方式合成后的方向和距离,使信号光LS的照射位置发生变位。即,通过控制这两个检流计镜141A、141B,只可以在xy平面上的任意方向上以任意的距离来扫描信号光LS。
图9(A)表示从信号光LS入射至受检眼E的方向观察眼底Ef(也就是从图1的-z方向观察+z方向)时,信号光LS的扫描形态的一例。而且,图9(B)表示眼底Ef上的各扫描线上扫描点(进行图像计测的位置;信号光LS的照射位置)的排列形态的一例。
如图9(A)所示,在预先设定的矩形扫描区域R内扫描信号光LS。在该扫描区域R内,在x方向上设定有多条(m条)扫描线R1-Rm。当沿着各扫描线Ri(i=1-m)来扫描信号光LS时,产生干涉光LC的检测信号。
此处,将各扫描线Ri的方向称为“主扫描方向”,将与该方向正交的方向称为“副扫描方向”。因此,在主扫描方向上扫描信号光LS是通过变更检流计镜141A的反射面的朝向而进行,在副扫描方向上的扫描是通过变更检流计镜141B的反射面的朝向而进行。
在各扫描线Ri上,如图9(B)所示,预先设定有多个(n个)扫描点Ri1-Rin。
为了执行图9所示的扫描,控制部210首先控制检流计镜141A、141B,将对眼底Ef的信号光LS的入射位置设定为第1扫描线R1上的扫描开始位置RS(扫描点R11)。接着,控制部210控制低相干光源160,使低相干光LO闪光,并使信号光LS入射于扫描开始位置RS。CCD 184接收该信号光LS的扫描开始位置RS上因眼底反射光而来的干涉光LC,并将检测信号输出至控制部210。
接着,控制部210控制检流计镜141A,并在主扫描方向上扫描信号光LS,将该入射位置设定为扫描点R12,使低相干光LO闪光而使信号光LS入射到扫描点R12。CCD 184接收该信号光LS的扫描点R12上因眼底反射光而来的干涉光LC,并将检测信号输出至控制部210。
控制部210同样,一边将信号光LS的入射位置依次移动为扫描点R13、R14、...、R1(n-1)、R1n,一边在各扫描点上使低相干光LO闪光,以此获取与各扫描点的干涉光LC相对应地从CCD 184所输出的检测信号。
当第1扫描线R1的最后的扫描点Rln上的计测结束时,控制部210同时控制检流计镜141A、141B,使信号光LS的入射位置沿着换线扫描r而移动到第2扫描线R2最初的扫描点R21为止。而且,对该第2扫描线R2的各扫描点R2j(j=1-n)进行上述计测,以此分别获取对应于各扫描点R2j的检测信号。
同样,分别对第3扫描线R3、...、第m-1扫描线R(m-1)、第m扫描线Rm进行计测,从而获取对应于各扫描点的检测信号。另外,扫描线Rm上的符号RE是对应于扫描点Rmn的扫描结束位置。
以此,控制部210获取对应于扫描区域R内的m×n个扫描点Rij(i=1-m,j=1-n)的m×n个检测信号。以下,将对应于扫描点Rij的检测信号表示为Dij。
由于对信号光LS的入射位置扫描至最后的扫描点Rmn为止,则控制部210可同时控制检流计镜141A、141B,沿着图10所示的返回扫描线RR而对该信号光LS的入射位置进行扫描。该返回扫描线RR对应于由扫描终了位置RE朝向扫描开始位置RS的方向的信号光LS的入射位置(扫描点)的扫描。
与图9(B)的扫描线Ri一样,该返回扫描线RR上预先设定多个(n’)扫描点RRk(k=1~n’)。该返回扫描线RR上的扫描点RRk的个数(n’)可与主扫描方向的各扫描线Ri上的扫描点的个数(n)相同或不同。又,该返回扫描线RR上的扫描点的间隔(=|RR(k+1)-RRk|;k=1~n’-1)和各扫描线Ri上的扫描点的间隔(=|Ri(j+1)-Rij|;j=1~n-1)相等,或可设定成相同程度。对应于扫描点RRk的检测信号表示成DRk。
该返回扫描线RR设定成与各扫描线Ri交差(交差位置Ci;参照图11)。此处,扫描时的受检眼E的动作所造成的扫描线Ri的偏差假设并未存在,则该返回扫描线RR与扫描线R1的交差位置C1将与扫描开始位置RS一致,该返回扫描线RR与扫描线Rm的交差位置Cm将与扫描终了位置RE一致。
图11所示的图像Gmj显示出扫描线Rm上的扫描点Rmj的深度方向(z方向)的图像。图像形成部220若沿着扫描线R1~Rm而由信号光LS来进行扫描,则基于各扫描线Ri上的各扫描点Rij所对应的检测信号Dij,以形成深度方向的图像Gij。
又,图像形成部220若沿着返回扫描线RR而由信号光LS来进行扫描,则基于各扫描线RR上的各扫描点RRk所对应的检测信号DRk,以形成深度方向的图像(以符号GRk来表示;图式省略)。
如上所述的信号光LS的扫描点的移动与低相干光LO的输出的连动控制,例如,可以通过使控制信号相对于镜片驱动机构241、242的发送时序(timing)、与控制信号(输出要求信号)相对于低相干光源160的发送时序互相同步而实现。
当控制部210如上所述使各检流计镜141A、141B动作时,存储有各扫描线Ri的位置或各扫描点Rij的位置(xy坐标系中的坐标),以作为表示其动作内容的信息。该存储内容(扫描点坐标信息)与先前同样用于图像形成处理中。扫描点坐标信息由各检流计镜141A、141B的表示反射面的方向的信息,或扫描区域R内的任意位置(例如,扫描开始位置RS)作为基准的扫描点Rij的相对位置所表示的信息等来形成。
其次,就图9,图10所示的信号光LS的扫描形态实施时图像形成部220及图像处理部230的OCT图像(眼底Ef的断层图像)有关的处理,说明其中之一例。
图像形成部220执行沿着各扫描线Ri(主扫描方向)的眼底Ef的断层图像的形成处理。另外,图像处理部230进行基于图像形成部220所形成的断层图像的眼底Ef的三维图像的形成处理等。
图像形成部220的断层图像的形成处理与先前同样,包含两阶段的运算处理。在第1阶段的运算处理中,如前所述,图像形成部220根据对应于各扫描点Rij的检测信号Dij,以形成在该扫描点Rij的眼底Ef的深度方向的图像Gij。
图11表示由图像处理部220所形成的断层图像(群)的形态。在第2阶段的运算处理中,对于各扫描线Ri,根据其上的n个扫描点Ril-Rin上的深度方向的图像Gil~Gin,以形成沿着该扫描线Ri的眼底Ef的断层图像Gi。此时,图像形成部220参照各扫描点Ril-Rin的位置信息(上述扫描点坐标信息),决定各扫描点Ril-Rin的排列及间隔,以形成沿着该扫描线Ri的断层图像Gi。
经过以上的处理,可获得副扫描方向(y方向)上不同位置上的m个断层图像(断层图像群)G1~Gm。
又,图像形成部220基于沿着返回扫描线RR的信号光LS的扫描所得到的检测信号DR1~DRk,以形成各扫描点RR1~RRn’所对应的深度方向的图像GR1~GRn’。而且,图像形成部220基于深度方向的图像GR1~GRn’,以形成沿着返回扫描线RR的断层图像(后述的基准断层图像GR)。
接着,说明图像处理部230的眼底Ef的三维图像的形成处理。眼底Ef的三维图像是根据扫描线R1~Rm所对应的m个断层图像而形成。图像处理部230进行在邻接的断层图像Gi、G(i+1)之间内插图像的众所周知的内插处理等,从而形成眼底Ef的三维图像。又,邻接的断层图像Gi、G(i+1)之间隔很小的情况下,亦可省略内插处理。
此时,图像处理部230参照各扫描点坐标信息而决定各扫描线Ri的排列及间隔,从而形成该三维图像。该三维图像中,根据各扫描点Rij的位置信息(上述扫描点坐标信息)与深度方向的图像的z坐标,以定义三维坐标系(x、y、z)。
而且,图像处理部230根据该三维图像,可以形成主扫描方向(x方向)以外的任意方向的剖面上的眼底Ef的断层图像。当指定剖面时,图像处理部230确定该指定剖面上的各扫描点(及/或已内插的深度方向的图像)的位置,并从三维图像中抽取各确定位置上的深度方向的图像(及/或已内插的深度方向的图像),且通过将已抽取的多个深度方向的图像进行排列而形成该指定剖面上的眼底Ef的断层图像。
然而,信号光LS的扫描中若发生受检眼E的眼球运动,则扫描线R1~Rm不会成为图9至图11所示的排列形态。如图12所示,会发生位置偏差。于是,实际的扫描区域R’成为与预先设定的矩形的扫描区域R不同。
又,沿着扫描线Ri的扫描中若发生受检眼E的眼球运动时,该扫描线Ri上的扫描线Rij之间亦会发生偏差。本实施形态中,此种扫描点的位置偏差亦包含在”扫描线的偏差中”。又,扫描线Ri上在扫描中若发生眼球运动时,该扫描线Ri不会成为如图9等所示的直线。
本实施形态中,基于上述扫描线的偏差来测定受检眼E的眼球运动。以下,基于上述扫描线的偏差来对受检眼E的眼球运动的测定用的构造进行说明。
[演算控制装置的详细结构]
一面参照图6一面说明关于演算控制装置200的详细结构。在此,说明演算控制装置200的控制部210和图像处理部230的详细结构。
(控制部)
在演算控制装置200的控制部210,设置有主控制部211和图像存储部212。主控制部211执行上述控制部210的各种控制处理。
图像存储部212存储图像形成部220所形成的图像。图像存储部212中例如存储着:沿着各扫描线Ri的断层图像Gi(i=1~m),沿着该返回扫描线RR的基准断层图像GR,眼底Ef的表面的二维图像即眼底图像Hp(p=1~q)等。
此处,眼底图像Hp是各框的图像,其使用由观察光源101而来的观察照明光以构成对该眼底Ef进行动画摄影时所得到的动态画像。又,眼底图像Hp亦可以是连射图像,其是对由观察光源101而来的观察照明光(闪光)进行连射而拍摄的图像。因此,眼底图像Hp是一种以规定的拍摄间隔对该眼底Ef摄影时所得到的图像。又,眼底图像Hp的拍摄间隔可以是等间隔或不等间隔。
(图像处理部)
图像处理部230中设有图像解析部231。此图像解析部231对该图像形成部220所形成的眼底Ef的图像进行解析,以测定该受检眼E的眼球运动,因此在功能上可作为本发明的”图像解析单元”的一例。
图像解析部231中设有:凹凸检测部232,其对眼底Ef的断层图像Gi进行解析;以及图像区域抽出部233和位置特定部234,其对眼底Ef的表面的二维图像进行解析。
(凹凸检测部)
凹凸检测部232對眼底Ef的断层图像Gi进行解析,以进行相当于眼底Ef的层的图像区域的凹凸的检出,因此在功能上可作为本发明的”凹凸检测单元”的一例。此处,成为凹凸检测对象的图像区域可以是眼底Ef的表面或深部的任意层的图像区域。
更具体地对该凹凸检测处理来进行说明。取得断层图像G1~Gm时若发生受检眼E的眼球运动,则各断层图像G1~Gm中会发生像上述那样的扫描线的偏差。
特别是,若由于拍动等原因而发生z方向的眼球运动,则扫描线会向z方向发生偏差。z方向是与眼底Ef的层大致成直交的方向,即,眼底Ef的深度方向的图像Gij形成的方向,因此是断层图像Gi的剖面方向。
又,图像处理部230如前所述基于断层图像Gi所形成的三维图像,以形成沿着与主扫描方向交差的规定方向的断层图像,该规定方向的断层图像成为已反映多条扫描线的偏差的断层图像。例如,若形成一种在返回扫描线RR方向中具有剖面的断层图像,则该断层图像成为一种已对各扫描线R1~Rm以信号光LS来扫描时所发生的眼球运动起反映的断层图像。
图13所示的断层图像GC为一种在返回扫描线RR方向中具有剖面的断层图像的具体例。凹凸检测部232对断层图像GC的图像值进行解析,以抽出相当于眼底Ef的层的图像区域。例如,凹凸检测部232由-z方向来对断层图像GC的图像值进行解析,以抽出相当于眼底Ef的表面的图像区域。因此,z方向中具有凹凸的大致成曲线状的图像区域即被抽出。
又,就图像存储部212中所存储的基准断层图像GR而言,凹凸检测部232与断层图像GC的情况一样可抽出相当于眼底Ef的层(例如,眼底Ef的表面)的图像区域。
而且,凹凸检测部232对由断层图像GC所抽出的图像区域以及由基准断层图像GR所抽出的图像区域进行比较,以求出这些图像区域的z方向的变位。以下将说明该处理的具体例。首先,使双方的图像区域的规定位置(例如,扫描终了位置RE)一致,同时使z方向一致。
其次,就返回扫描线RR方向的各位置而言,求出双方的图像区域的z方向的变位。因此,对基准断层图像GR的该图像区域的断层图像GC的该图像区域的变位即可求得。
以下说明该凹凸检测部232所进行的凹凸检测处理的其它具体例。以下所说明的具体例中,须进行断层图像GC和基准断层图像GR的图像匹配,基于此匹配来检出断层图像GC的图像区域的凹凸。
使用图像匹配技术的第1凹凸检测方法中,使用正规化相关的手段。使用此手段时,就形成该断层图像GC的深度方向的图像而言,凹凸检测部232使该深度方向的图像一方面偏移1个图像单位,一方面逐次算出与该基准断层图像GR的对应位置中的深度方向的图像之间的正规化相关的相关值。
而且,求出该相关值的值成为最大时的该深度方向的图像的变位量(已偏移的图像数)Δzi。采用此变位量Δzi以作为沿着该深度方向的图像的位置(扫描点Rij的位置)所对应的扫描线Ri的断层图像Gi的向z方向的修正量。
在该断层图像GC形成时的各深度方向的图像中进行上述处理。又,进行内插处理以形成断层图像GC时,只对各扫描线Ri和返回扫描线RR的交点位置所对应的深度方向的图像执行该处理时即已足够。
又,若未使该断层图像GC形成时的深度方向的图像偏移,取而代之的是亦可使该基准断层图像GR形成时的深度方向的图像偏移。此时,采用一种与变位量Δzi的符号相反的符号(即,-Δz)以作为断层图像Gi的修正量。又,断层图像GC形成时的深度方向的图像和基准断层图像GR形成时的深度方向的图像的双方亦可形成偏移。
使用上述正规化相关手段的朝向z方向的位置相一致时的深度方向的变位(上述Δz或-Δz)表示该断层图像GC对基准断层图像GR的朝向z方向的凹凸。凹凸检测部232求出该变位量以作为断层图像GC对基准断层图像GR的朝向z方向的凹凸。
使用图像匹配技术的第2凹凸检测方法中,使用使图像的特征部份相一致的技术。使用此手段时,凹凸检测部232分别抽出断层图像GC形成时的深度方向的图像的特征部份和基准断层图像GR的对应位置的深度方向的图像特征部份。
成为抽出对象的特征部份,其通过上述抽出方法而预先设定。此处,与眼底Ef的表面相当的部份被设定以作为抽出对象的特征部份。以下说明此抽出方法的一例。
就图13之断层图像GC的特征部份(眼底表面相当部份)被抽出时来进行说明。又,该断层图像GC是由用户接口240(显示器207)来显示。此种显示形态是使与眼底Ef的表面相当的部份显示在图面上方,与眼底Ef的深层部份相当的部份显示在图面下方(请参阅图13中的z坐标的方向)。
又,显示器207的图面的背景区域的像素值成为0,断层图像GC显示成该背景区域上的亮度的阶调图像(例如,256阶调的亮度(像素值)所形成的图像)。
就该断层图像GC的显示图面的像素的各纵线而言,凹凸检测部232由图面上方向下方参照各像素的像素值。由于背景区域的像素值是0,则暂时由图面上方使”像素值0”继续存在着,更向下方来参照像素值时,可看到像素值由0切换至正值的像素。
该像素值最初以成为正值的像素的坐标值作为该纵线中相当于眼底表面的部份的坐标值,且保存在控制部210(RAM202,硬盘驱动器204等)中。又,所保存的像素的坐标值的坐标系统亦可使用上述的xyz坐标系统,或可使用图面上已设定的二维坐标系统。
又,至纵线的最下部的像素为止全部的像素都是0时,则该纵线中可判断成相当于眼底Ef的图像并不存在。
凹凸检测部232对断层图像GC的显示图面中的像素的各纵线进行同样的处理。于是,可抽出断层图像GC中的与眼底表面相当的部份。
又,凹凸检测部232对该基准断层图像GR施加同样的处理,以抽出基准断层图像GR中的与眼底表面相当的部份。又,此处所说明的与眼底表面相当的部份的抽出处理,是与抽出眼底表面的图像区域以作为上述眼底Ef的层时的情况一样。
而且,就显示图面的像素的各纵线而言,凹凸检测部232一方面使断层图像GC中的与眼底表面相当的部份的图像在z方向中偏移1个图像单位,一方面逐次算出与该基准断层图像GR的眼底表面相当部份的图像之间的相关值(可适当地使用任意的相关值)。
然后,求出该相关值的值成为最大时的像素的变位量(已偏移的像素数)。该凹凸检测部232求出该变位量以作为断层图像GC对该基准断层图像GR的朝向z方向的凹凸。
又,上述方式中虽然断层图像GC在z方向中发生偏移,但亦可使基准断层图像GR发生偏移,也可使断层图像GC和基准断层图像GR此二者偏移。
又,亦可使用眼底表面相当部份以外的特征部份。例如,断层图像GC和基准断层图像GR中存在着病变部等的特征部份时,可使用该特征部份以检出凹凸。
又,凹凸检测部232不只可检出上述之眼底Ef的深度方向(z方向)的凹凸,而且可检出沿着断层图像Gi或断层图像GC的剖面之方向上的变位。例如,就断层图像Gi而言,可检出沿着扫描线Ri的方向中的变位。又,就图13中的断层图像GC而言,可检出沿着返回扫描线RR的方向的变位。
(图像区域抽出部)
图像区域抽出部233由图像存储部212中已存储的各别的眼底图像Hp(p=1~q)中对注目图像区域进行抽出的处理,在功能上这可作为本发明的”图像区域抽出单元”的一例。
此处,所谓注目图像区域是指使用眼底图像Hp以测定眼球运动时受注目的图像区域。例如,可使用眼底Ef的视神经乳突,黄斑部,血管的分歧部等,眼底Ef中相当于特征的任意部位的图像区域,以作为注目图像区域。
图像区域抽出部233利用公知的图像抽出技术以抽出该注目图像区域。例如,相当于视神经乳突或黄斑部的图像区域抽出时,图像区域抽出部233就眼底图像Hp的像素值而言可进行门限(threshold)值处理等以抽出作为目的之图像区域。
又,抽出血管的分歧部时,图像区域抽出部233首先抽出眼底图像Hp中与血管相当的图像区域。其次,由与该血管相当的图像区域中抽出与该血管的特征的分歧部相当的图像区域。
(位置特定部)
就各别的眼底图像Hp而言,位置特定部234对图像区域抽出部233所抽出的注目图像区域的眼底图像Hp中的位置进行特定的处理,因此在功能上此位置特定部234可作为本发明的”位置特定单元”的一例。
就上述的位置特定处理而言,以下将作更具体的说明。在眼底图像Hp中设定一种与图1所示的对应于xyz坐标系统的二维坐标系统(xy坐标系统)。即,眼底图像Hp形成时的各像素是通过该xy坐标系统来限定位置。利用此位置,则位置特定部234可依据该图像区域抽出部233所抽出的注目图像区域构成用的像素的位置(xy坐标值)来限定该眼底图像Hp中的该注目图像区域的位置。
[眼球运动测定装置的使用形态]
以下将说明一种具有以上构造的实施形态之眼球运动测定装置1的使用形态。
图15,图16所示的流程图显示各别的眼球运动测定装置1的使用形态的一例。此处,图15的流程图是眼底Ef的深度方向(z方向)中的眼球运动的测定形态的一例。图16的流程图是眼底Ef的表面方向(xy方向)中的眼球运动的测定形态的一例。
[眼底的深度方向中的眼球运动的测定]
眼底Ef的深度方向(z方向)的受检眼E的眼球运动的测定形态,将参照图15的流程图来说明。
首先,被检查者的颜部载置在颚托6上,同时使眼底相机单元1A的光学系统对受检眼E对准或进行装置设定等,以进行用于取得眼底Ef的断层图像的各种准备(S1)。
若已准备完成,则检查者押下操作按钮4a以指出断层图像的取得(S2)。控制部210在接收由该操作按钮4a而来的信号时,对低相干光源160,镜片驱动机构241,242等进行控制,沿着扫描线Ri(i=1~m)来扫描该信号光LS,以进行图像计测(S3)。
图像形成部220基于由CCD184而来的检测信号,逐次地形成眼底Ef的断层图像Gi(i=1~m)(S4)。主控制部211使已形成的断层图像Gi存储在图像存储部212中。
若对信号光LS扫描直至扫描线Rm为止,则控制部210沿着返回扫描线RR而对信号光LS进行扫描(S5)。图像形成部220基于由CCD184而来的检测信号以形成基准断层图像GR(参照图14)(S6)。主控制部211使已形成的基准断层图像GR存储在图像存储部212中。
主控制部211由图像存储部212读出断层图像Gi(i=1~m)和基准断层图像GR且发送至图像处理部230。图像处理部230基于断层图像Gi以形成眼底Ef的图像,而且,基于此三维图像来形成沿着返回扫描线RR的断层图像GC(参照图13)(S7)。
其次,凹凸检出部232对基准断层图像GR检出相当于断层图像GC的眼底Ef的层的图像区域的凹凸(S8)。
图像解析部231基于凹凸检出部232所检出的图像区域的凹凸以求出受检眼E的眼球运动(S9)。
以下将说明步骤S9的处理。由凹凸检出部232所检出的凹凸是断层图像GC对基准断层图像GR的返回扫描线RR方向上的变位。此种变位以Δζ(=Δz,-Δz;前述)来表示。返回扫描线RR方向上的坐标值若以α(α是与xy坐标系的坐标值成一对一的对应)来表示,则该变位Δζ可表示成Δζ=Δζ(α)。图像解析部231取得已取得的变位Δζ(α),以作为坐标值α所在的眼球运动的z方向的变位。又,如前所述,即使是xy方向的变位亦可由凹凸检出部232的检出结果来取得。如上所述,眼底Ef的深度方向的眼球运动的测定处理的说明至此结束。
(变形例)
就眼底Ef的深度方向的眼球运动的测定处理的的变形例来说明。上述的使用形态虽然可简单地测定眼底Ef的深度方向的眼球运动,但亦可抽出眼球运动的成份以进行测定。
作为一例,凹凸检出部232可基于断层图像GC和基准断层图像GR,来检出具有周期的间隔之凹凸。作为此种检出方法,例如,可求出近似于步骤S8所检出的凹凸的曲线(成为在返回扫描线RR方向上具有定义域的波状的函数)。进行频率解析,以抽出构成该曲线的频率成份。此频率成份相当于具有周期间隔的凹凸。这样所检出的具有周期间隔的凹凸相当于周期性发生的心拍等的要因所对应的凹凸。
[眼底的表面方向上的眼球运动的测定]
眼底Ef的表面方向(xy方向)上的受检眼E的眼球运动的测定形态,以下将参照图16的程序来说明。
首先,将被检查者的颜面载置在颚托6上,同时对受检眼E进行眼底相机单元1A的光学系统的对准或装置设定等,以及用于取得眼底图像的各种准备(S11)。
若已准备完成,则检查者押下该操作按钮4a以指出眼底图像的取得(S12)。控制部210若接收到由操作按钮4a而来的信号,则对观察光源101(或拍摄光源103)等进行控制,以进行眼底图像的摄影(S13)。
图像形成部220基于由摄像装置12(或摄像装置10)而来的映像信号,逐次地形成眼底Ef的眼底图像Hp(p=1~q)(S14)。主控制部211使已形成的眼底图像Hp存储在图像存储部212中。
主控制部211由图像存储部212读出眼底图像Hp(p=1~q)且发送至图像处理部230。图像处理部230的图像区域抽出部233由各眼底图像Hp抽出注目图像区域(S15)。
其次,就各眼底图像Hp而言,位置特定部234对图像区域抽出部233所抽出的注目图像区域的眼底图像Hp的位置予以特定(S16)。
图像解析部231基于位置特定部234对各眼底图像Hp所特定的注目图像区域的位置,以求出与眼底Ef的深度方向直交的方向(xy方向;眼底Ef的表面方向)中的受检眼E的眼球运动(S17)。
以下就该步骤S17的处理来说明。由位置特定部234所特定的注目图像区域的眼底图像Hp的位置以(xp,yp)来表示。此坐标(xp,yp)表示该注目图像区域中的规定位置(例如,重心位置等)的位置。图像解析部231以某一眼底图像(例如,眼底图像H1)作为基准,以对眼底图像Hp(p=2~q)对位置(x1,y1)的注目图像区域的位置(xp,yp)的变位进行演算。即,就眼底图像Hp(p=2~q)而言,图像解析部231分别算出Δxp=xp-x1,Δyp=yp-y1。此演算结果相当于对眼底图像H1拍摄时的眼底图像Hp拍摄时的眼球运动的变位。如上所述,眼底Ef的表面方向上的眼球运动的测定处理的说明至此结束。
[作用.效果]
以下说明本实施形态的眼球运动测定装置1的作用及效果。
首先,此眼球运动测定装置1的作用是以光学方式取得数据,且基于此数据来形成受检眼E的眼底Ef的图像(断层图像,眼底图像),同时对已形成的眼底Ef的图像进行解析,以测定受检眼E的眼球运动。
眼底Ef的图像是以电视摄像机所拍摄的眼球运动的图像,或较角膜反射光像等的先前的眼球运动测定用的图像更精致的图像。因此,依据本实施形式的眼球运动测定装置1,可高精度地进行受检眼E的眼球运动的测定。
又,依据本实施形式的眼球运动测定装置1,由于可基于断层图像Gi来测定受检眼E的眼球运动,则先前测定中有困难的眼底Ef的深度方向中的受检眼E的眼球运动即可高精度地被测定。
又,依据本实施形式的眼球运动测定装置1,由于可基于眼底图像Hp来测定受检眼E的眼球运动,则可高精度地测定眼底Ef的表面方向的受检眼E的眼球运动。
[眼球运动测定方法]
本发明的眼球运动测定方法之特征为包括:图像形成步骤,其中以光学方式取得数据,且基于已取得的数据来形成受检眼的眼底的图像;以及图像解析步骤,其对已形成的眼底的图像进行解析,以测定受检眼的眼球运动。
上述眼球运动测定装置1是一种适合实施该眼球运动测定方法的装置。图15的流程的步骤S3~S7相当于图像形成步骤的一例。步骤S8,S9相当于图像解析步骤的一例。又,图16的流程的步骤S13,S14相当于图像形成步骤的一例,步骤S15~S17相当于图像解析步骤的一例。
[眼球运动测定程序]
本发明的眼球运动测定程序之特征是,以具有图像存储元件的计算器作为受检眼的眼球运动测定用的图像解析元件,以对图像存储元件中所存储的眼底的图像进行解析,该图像存储元件存储着受检眼的眼底的图像。
上述的眼球运动测定装置1的演算控制装置200是一种依据该眼球运动测定程序而动作的计算器的一例。此处,图像存储元件相当于图6所示的图像存储部212,图像解析元件相当于图像解析部231。
[变形例]
以上所说明的构成只不过是一种适合实施本发明的眼球运动测定装置,眼球运动测定方法及眼球运动测定程序的具体例而已。因此,可适当地实施本发明的目的之范围内的任意的变形。
例如,上述实施形态的眼球运动测定装置1在傅立叶领域(FourierDomain)型的OTC装置中可适用本发明的构成,但在时域(Time Domain)型的OTC装置中亦可适用本发明的构成。又,时域型的OTC装置例如在本案申请人的日本特开2005-241464号公报等中已有描述。
又,上述实施形式在构造上可用来实施眼底Ef的深度方向(z方向)的眼球运动的测定以及眼底Ef的表面方向(x,y方向)的眼球运动的测定的双方,但本发明的眼球运动测定装置在构造上亦可只用来实施上述双方的测定中的一方。
上述实施形态中,可算出沿着返回扫描线RR的断层图像GC和基准断层图像GR的z方向的变位,借此可求出受检眼E的眼球运动,但z方向的眼球运动的测定手段不限于此。
例如,可只基于相当于断层图像GC的层的图像区域(相当于眼底表面的图像区域等)的z方向的变位(振幅),以求出眼球运动。又,亦使用基准断层图像GR的手段由于可以基准断层图像GR的相当于该层之图像区域作为基准水平以求出断层图像GC的变位,则可考虑成可更高精度地实施眼球运动的测定。
又,基于沿着返回扫描线RR以外的任意方向的断层图像,亦可测定眼球的运动。
以上所述,仅是本发明的较佳实施例而已,并非对本发明作任何形式上的限制,虽然本发明已以较佳实施例揭露如上,然而并非用以限定本发明,任何熟悉本专业的技术人员,在不脱离本发明技术方案范围内,当可利用上述揭示的结构及技术内容作出些许的更动或修饰为等同变化的等效实施例,但是凡是未脱离本发明技术方案的内容,依据本发明的技术实质对以上实施例所作的任何简单修改、等同变化与修饰,均仍属于本发明技术方案的范围内。

Claims (14)

1.一种眼球运动测定装置,其特征在于包括:
图像形成元件,其以光学方式取得数据,且基于已取得的数据来形成受检眼的眼底的图像;以及
图像解析元件,其对已形成的眼底的图像进行解析,以求出该受检眼的眼球运动。
2.根据权利要求1所述的眼球运动测定装置,其特征在于,
该图像形成元件包括断层图像形成元件,其以光学方式对该眼底进行扫描以取得前述数据,且基于已取得的数据来形成前述眼底的断层图像,
该图像解析元件基于已形成的眼底的断层图像,以求出前述受检眼的眼球运动。
3.根据权利要求1所述的眼球运动测定装置,其特征在于,
该断层图像形成元件更包括:
光源;
干涉光产生元件,将前述光源输出的光分割成向受检眼的眼底的信号光和向参照物体的参照光,同时使经过前述眼底的信号光和经过前述参照物体的参照光进行重迭,以产生干涉光;
扫描元件,对前述眼底的前述信号光的照射位置进行扫描;以及
检测元件,接受前述产生的干涉光,以输出作为前述数据的检测信号;
其中前述断层图像形成元件根据对应于前述扫描元件的信号光的扫描的前述检测信号,以形成沿着前述扫描方向的眼底的断层图像。
4.根据权利要求3所述的眼球运动测定装置,其特征在于,
前述扫描元件分别在对前述眼底的该信号光的照射位置成互相直交的主扫描方向和副扫描方向上进行扫描,
前述断层图像形成元件对沿着前述主扫描方向的多个前述照射位置的每一个,基于经由前述照射位置的信号光和前述参照光所生成的干涉光所造成的前述检测信号,以形成在各个前述照射位置的前述眼底的深度方向的图像,
基于已形成的各照射位置的前述眼底的深度方向的图像,以形成沿着前述主扫描方向的断层图像,
借此,形成沿着前述副扫描方向的不同位置的2个或以上的主扫描方向的断层图像。
5.根据权利要求4所述的眼球运动测定装置,其特征在于,
前述断层图像形成元件基于前述已形成的二个以上的断层图像,以形成沿着与前述主扫描方向交差的规定的方向的断层图像。
6.根据权利要求3所述的眼球运动测定装置,其特征在于,
前述扫描元件以规定的时间间隔来对前述信号光的照射位置进行扫描,
前述图像解析元件基于由前述断层图像形成元件所形成的前述眼底的断层图像和前述规定的时间间隔,以求出前述受检眼的眼球运动。
7.根据权利要求2所述的眼球运动测定装置,其特征在于,
前述图像解析元件具备凹凸检测元件,其对前述断层图像形成元件所形成的断层图像进行解析,以检出相当于前述眼底的层的图像区域中的凹凸,
基于已检出的凹凸,以求出前述受检眼的眼球运动。
8.根据权利要求7所述的眼球运动测定装置,其特征在于,
前述凹凸检测元件检出前述眼底的深度方向的凹凸,
前述图像解析元件基于已检出的凹凸,以求出前述眼底的深度方向的前述受检眼的眼球运动。
9.根据权利要求7所述的眼球运动测定装置,其特征在于,
前述凹凸检测元件检出具有周期的间隔的前述凹凸,
前述图像解析元件基于已检出的凹凸的前述周期的间隔,以求出前述受检眼的眼球运动。
10.根据权利要求1所述的眼球运动测定装置,其特征在于,
前述图像形成元件具备眼底拍摄元件,其对前述眼底的表面的多个二维图像进行摄影,
前述图像解析元件基于已拍摄的多个二维图像,以求出前述受检眼的眼球运动。
11.根据权利要求10所述的眼球运动测定装置,其特征在于,
前述图像解析元件包括:
图像区域抽出元件,其由前述眼底拍摄元件所摄取的前述多个二维图像的每一个中抽出注目图像区域,
位置特定元件,对前述多个二维图像的每一个,将前述已抽出的注目图像区域的该二维图像的位置予以特定,
对前述多个二维图像的每一个,基于前述已特定的注目区域的位置,以求出前述受检眼的眼球运动。
12.根据权利要求10所述的眼球运动测定装置,其特征在于,
前述图像解析元件求出与前述眼底的深度方向直交的方向中的前述受检眼的眼球运动。
13.一种眼球运动测定方法,其特征在于包括:
以光学方式取得数据,且基于已取得的数据来形成受检眼的眼底的图像;以及
对已形成的眼底的图像进行解析,以求出该受检眼的眼球运动。
14.一种计算器可读出的记录媒体,其特征在于:
具有在计算器中执行处理的计算器可读取码,前述计算器具备存储着受检眼的眼底的图像的图像存储元件,前述处理包括:
对前述已存储着的前述眼底的图像进行解析,以求出前述受检眼的眼球运动。
CN2007101455184A 2006-08-29 2007-08-27 眼球运动测定装置 Expired - Fee Related CN101133943B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2006232739 2006-08-29
JP2006-232739 2006-08-29
JP2006232739A JP5089940B2 (ja) 2006-08-29 2006-08-29 眼球運動測定装置、眼球運動測定方法及び眼球運動測定プログラム

Publications (2)

Publication Number Publication Date
CN101133943A true CN101133943A (zh) 2008-03-05
CN101133943B CN101133943B (zh) 2012-09-05

Family

ID=38700030

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2007101455184A Expired - Fee Related CN101133943B (zh) 2006-08-29 2007-08-27 眼球运动测定装置

Country Status (4)

Country Link
US (1) US7789511B2 (zh)
EP (1) EP1894518B1 (zh)
JP (1) JP5089940B2 (zh)
CN (1) CN101133943B (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102525403A (zh) * 2010-12-17 2012-07-04 佳能株式会社 眼科设备及其控制方法
CN102670168A (zh) * 2011-03-10 2012-09-19 佳能株式会社 眼科设备及其控制方法
CN102670165A (zh) * 2011-03-10 2012-09-19 佳能株式会社 摄像设备和摄像方法
CN103096785A (zh) * 2010-03-12 2013-05-08 佳能株式会社 眼科设备及其控制方法
CN103961058A (zh) * 2013-01-31 2014-08-06 佳能株式会社 光学相干断层摄像装置及其控制方法
CN105249922A (zh) * 2008-11-10 2016-01-20 佳能株式会社 断层图像拍摄设备和断层图像拍摄方法
CN110652281A (zh) * 2019-10-25 2020-01-07 北京机械设备研究所 一种基于虚拟现实技术的视野计及视野检测方法

Families Citing this family (47)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7365856B2 (en) 2005-01-21 2008-04-29 Carl Zeiss Meditec, Inc. Method of motion correction in optical coherence tomography imaging
US7805009B2 (en) 2005-04-06 2010-09-28 Carl Zeiss Meditec, Inc. Method and apparatus for measuring motion of a subject using a series of partial images from an imaging system
JP4712631B2 (ja) * 2005-07-28 2011-06-29 京セラ株式会社 撮像装置
JP2007322560A (ja) * 2006-05-30 2007-12-13 Kyocera Corp 撮像装置、並びにその製造装置および製造方法
JP4749959B2 (ja) * 2006-07-05 2011-08-17 京セラ株式会社 撮像装置、並びにその製造装置および製造方法
JP2008048293A (ja) * 2006-08-18 2008-02-28 Kyocera Corp 撮像装置、およびその製造方法
JP4749984B2 (ja) * 2006-09-25 2011-08-17 京セラ株式会社 撮像装置、並びにその製造装置および製造方法
JP5188397B2 (ja) * 2006-12-27 2013-04-24 京セラ株式会社 撮像装置および情報コード読取装置
US8567678B2 (en) * 2007-01-30 2013-10-29 Kyocera Corporation Imaging device, method of production of imaging device, and information code-reading device
JP2009010730A (ja) * 2007-06-28 2009-01-15 Kyocera Corp 画像処理方法と該画像処理方法を用いた撮像装置
JP4844979B2 (ja) * 2007-08-30 2011-12-28 京セラ株式会社 画像処理方法と該画像処理方法を用いた撮像装置
US8363129B2 (en) * 2008-06-27 2013-01-29 Kyocera Corporation Imaging device with aberration control and method therefor
JP4658162B2 (ja) * 2008-06-27 2011-03-23 京セラ株式会社 撮像装置および電子機器
US8502877B2 (en) * 2008-08-28 2013-08-06 Kyocera Corporation Image pickup apparatus electronic device and image aberration control method
JP4743553B2 (ja) * 2008-09-29 2011-08-10 京セラ株式会社 レンズユニット、撮像装置、および電子機器
JP5368765B2 (ja) * 2008-10-21 2013-12-18 キヤノン株式会社 撮影制御装置、撮影装置、撮影制御方法、プログラム、記憶媒体
JP5618533B2 (ja) * 2008-12-26 2014-11-05 キヤノン株式会社 光干渉断層情報取得装置、撮像装置及び撮像方法
JP5649286B2 (ja) 2008-12-26 2015-01-07 キヤノン株式会社 光断層撮像装置、被検査物の画像を撮る撮像装置、光断層撮像装置の制御方法及びそのコンピュータプログラム
JP5623028B2 (ja) 2009-01-23 2014-11-12 キヤノン株式会社 光干渉断層画像を撮る撮像方法及びその装置
JP5737830B2 (ja) * 2009-04-13 2015-06-17 キヤノン株式会社 光断層撮像装置及びその制御方法
JP5432625B2 (ja) 2009-07-29 2014-03-05 株式会社トプコン 眼科観察装置
JP4902719B2 (ja) 2009-10-19 2012-03-21 キヤノン株式会社 断層像撮像装置及び断層像撮像方法、プログラム、記憶媒体
FI20096190A (fi) * 2009-11-17 2011-05-18 Optomed Oy Tutkimuslaite
JP5025715B2 (ja) * 2009-12-08 2012-09-12 キヤノン株式会社 断層画像撮影装置、画像処理装置、画像処理システム、画像処理装置の制御方法及びプログラム
WO2011111851A1 (en) * 2010-03-12 2011-09-15 Canon Kabushiki Kaisha Ophthalmologic apparatus and control method for the same
JP5297415B2 (ja) 2010-04-30 2013-09-25 キヤノン株式会社 眼科装置及び眼科方法
JP5818409B2 (ja) * 2010-06-17 2015-11-18 キヤノン株式会社 眼底撮像装置及びその制御方法
JP5820154B2 (ja) * 2010-07-05 2015-11-24 キヤノン株式会社 眼科装置、眼科システム及び記憶媒体
US8931904B2 (en) 2010-11-05 2015-01-13 Nidek Co., Ltd. Control method of a fundus examination apparatus
JP5687073B2 (ja) * 2011-01-07 2015-03-18 株式会社トプコン 走査型眼科撮影装置
JP5721478B2 (ja) * 2011-03-10 2015-05-20 キヤノン株式会社 撮像装置及び撮像装置の制御方法
US9033510B2 (en) 2011-03-30 2015-05-19 Carl Zeiss Meditec, Inc. Systems and methods for efficiently obtaining measurements of the human eye using tracking
PT2709577T (pt) * 2011-05-16 2017-07-20 Wavelight Gmbh Aparelho para a observação ou para o tratamento de um olho humano
US8857988B2 (en) 2011-07-07 2014-10-14 Carl Zeiss Meditec, Inc. Data acquisition methods for reduced motion artifacts and applications in OCT angiography
JP5597183B2 (ja) * 2011-12-27 2014-10-01 キヤノン株式会社 撮像装置、制御装置、撮像装置の制御方法、制御方法、及びコンピュータプログラム
US9101294B2 (en) 2012-01-19 2015-08-11 Carl Zeiss Meditec, Inc. Systems and methods for enhanced accuracy in OCT imaging of the cornea
WO2013157673A1 (en) * 2012-04-18 2013-10-24 Lg Electronics Inc. Optical coherence tomography and control method for the same
JP5631361B2 (ja) * 2012-06-18 2014-11-26 キヤノン株式会社 画像処理装置、画像処理方法及びプログラム
EP2692284A1 (en) 2012-07-30 2014-02-05 Canon Kabushiki Kaisha Method and apparatus for geometric correction of OCT data representing a scan obtained by means of optical coherence tomography imaging of a sample
JP6188296B2 (ja) * 2012-08-30 2017-08-30 キヤノン株式会社 画像処理装置及び画像処理方法
JP5669885B2 (ja) * 2013-06-06 2015-02-18 キヤノン株式会社 画像処理装置及び画像処理方法
TWI550438B (zh) 2013-10-04 2016-09-21 由田新技股份有限公司 記錄閱讀行爲的方法及裝置
JP5714083B2 (ja) * 2013-12-02 2015-05-07 キヤノン株式会社 眼科装置、眼科用処理装置、眼科システム、断層画像取得方法、眼科用処理方法及びプログラム
KR102198852B1 (ko) * 2014-03-24 2021-01-05 삼성전자 주식회사 홍채 인식 장치 및 이를 포함하는 모바일 장치
RU2569162C1 (ru) * 2014-07-10 2015-11-20 федеральное государственное бюджетное учреждение "Межотраслевой научно-технический комплекс "Микрохирургия глаза" имени академика С.Н. Федорова" Министерства здравоохранения Российской Федерации Устройство для измерения подвижности и способ оценки подвижности парного глаза, опорно-двигательной культи и глазного косметического протеза
US9775514B2 (en) 2015-02-26 2017-10-03 Canon Kabushiki Kaisha Apparatus for measurement of a fundus comprising a focusing system and a wavefront correction device
JP6305502B2 (ja) * 2016-12-15 2018-04-04 キヤノン株式会社 眼科装置及び眼科装置の作動方法

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0531076A (ja) * 1991-07-31 1993-02-09 Yasuhiro Fukui 視機能検査装置
JPH07163524A (ja) * 1993-12-14 1995-06-27 Canon Inc 眼底カメラ
US5537162A (en) * 1993-12-17 1996-07-16 Carl Zeiss, Inc. Method and apparatus for optical coherence tomographic fundus imaging without vignetting
JPH08206079A (ja) * 1995-01-31 1996-08-13 Canon Inc 眼科装置
JP3964035B2 (ja) * 1998-03-12 2007-08-22 興和株式会社 眼科装置
US6325512B1 (en) * 2000-10-31 2001-12-04 Carl Zeiss, Inc. Retinal tracking assisted optical coherence tomography
US6726325B2 (en) * 2002-02-26 2004-04-27 Carl Zeiss Meditec, Inc. Tracking assisted optical coherence tomography
JP2005205024A (ja) * 2004-01-23 2005-08-04 Sumitomo Rubber Ind Ltd 眼球運動測定方法および測定装置
JP4322693B2 (ja) * 2004-01-29 2009-09-02 浜松ホトニクス株式会社 眼球運動測定装置
JP4568024B2 (ja) * 2004-05-17 2010-10-27 日本放送協会 眼球運動測定装置、及び眼球運動測定プログラム
JP3686418B2 (ja) * 2004-10-29 2005-08-24 アレイ株式会社 計測装置およびその方法
CA2586139C (en) * 2004-11-08 2015-07-07 Optovue, Inc. Optical apparatus and method for comprehensive eye diagnosis
US7365856B2 (en) * 2005-01-21 2008-04-29 Carl Zeiss Meditec, Inc. Method of motion correction in optical coherence tomography imaging
CN101951829B (zh) * 2007-11-05 2013-11-20 Opko仪器公司 一种进行视敏度检查的系统

Cited By (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105249922A (zh) * 2008-11-10 2016-01-20 佳能株式会社 断层图像拍摄设备和断层图像拍摄方法
CN103096785A (zh) * 2010-03-12 2013-05-08 佳能株式会社 眼科设备及其控制方法
CN103096785B (zh) * 2010-03-12 2015-09-30 佳能株式会社 眼科设备及其控制方法
US9468374B2 (en) 2010-03-12 2016-10-18 Canon Kabushiki Kaisha Ophthalmologic apparatus and control method for the same
CN102525403A (zh) * 2010-12-17 2012-07-04 佳能株式会社 眼科设备及其控制方法
CN102525403B (zh) * 2010-12-17 2015-04-22 佳能株式会社 眼科设备及其控制方法
CN102670168A (zh) * 2011-03-10 2012-09-19 佳能株式会社 眼科设备及其控制方法
CN102670165A (zh) * 2011-03-10 2012-09-19 佳能株式会社 摄像设备和摄像方法
CN102670165B (zh) * 2011-03-10 2014-12-31 佳能株式会社 摄像设备和摄像方法
US8950863B2 (en) 2011-03-10 2015-02-10 Canon Kabushiki Kaisha Image photographing apparatus and image photographing method
US9161690B2 (en) 2011-03-10 2015-10-20 Canon Kabushiki Kaisha Ophthalmologic apparatus and control method of the same
CN103961058A (zh) * 2013-01-31 2014-08-06 佳能株式会社 光学相干断层摄像装置及其控制方法
CN103961058B (zh) * 2013-01-31 2016-06-22 佳能株式会社 光学相干断层摄像装置及其控制方法
CN105942968A (zh) * 2013-01-31 2016-09-21 佳能株式会社 光学相干断层摄像装置及其控制方法
US9211062B2 (en) 2013-01-31 2015-12-15 Canon Kabushiki Kaisha Optical coherence tomographic imaging apparatus and method for controlling the same
CN105942968B (zh) * 2013-01-31 2018-07-03 佳能株式会社 光学相干断层摄像装置及其控制方法
CN110652281A (zh) * 2019-10-25 2020-01-07 北京机械设备研究所 一种基于虚拟现实技术的视野计及视野检测方法
CN110652281B (zh) * 2019-10-25 2023-02-24 北京机械设备研究所 一种基于虚拟现实技术的视野计及视野检测方法

Also Published As

Publication number Publication date
US7789511B2 (en) 2010-09-07
JP5089940B2 (ja) 2012-12-05
EP1894518A1 (en) 2008-03-05
US20080259275A1 (en) 2008-10-23
JP2008054773A (ja) 2008-03-13
EP1894518B1 (en) 2017-12-06
CN101133943B (zh) 2012-09-05

Similar Documents

Publication Publication Date Title
CN101133943B (zh) 眼球运动测定装置
CN101268928B (zh) 眼底观察装置以及眼科图像显示装置
CN101049230B (zh) 眼底观察装置
CN101040777B (zh) 眼底观察装置
CN101084824B (zh) 眼底观察装置、眼科图像处理装置、以及眼科图像处理方法
CN101209199B (zh) 光图像计测装置
CN101234015B (zh) 光图像计测装置
CN101040776B (zh) 眼底观察装置
CN101023861B (zh) 眼底观察装置
CN100586364C (zh) 眼底观察装置
CN1939208B (zh) 眼底观察装置及眼底图像显示装置
CN101204318B (zh) 眼底观察装置以及眼底图像显示装置
CN101229053B (zh) 光图像计测装置
CN101095610B (zh) 眼底观察装置
CN100998494B (zh) 光图像计测装置
CN101254090B (zh) 眼底观察装置以及眼底图像处理装置
CN100998495B (zh) 眼底观察装置
CN101273882B (zh) 光图像计测装置和光图像计测方法
CN101268927A (zh) 光图像计测装置以及图像处理装置
CN101251365A (zh) 光图像计测装置
CN101677761A (zh) 光图像测量装置
CN101273881A (zh) 光图像计测装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20120905

Termination date: 20150827

EXPY Termination of patent right or utility model