CN102670170B - 光学断层图像摄像设备及其控制方法 - Google Patents
光学断层图像摄像设备及其控制方法 Download PDFInfo
- Publication number
- CN102670170B CN102670170B CN201210064119.6A CN201210064119A CN102670170B CN 102670170 B CN102670170 B CN 102670170B CN 201210064119 A CN201210064119 A CN 201210064119A CN 102670170 B CN102670170 B CN 102670170B
- Authority
- CN
- China
- Prior art keywords
- image
- eye fundus
- fundus image
- eye
- multiple characteristic
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000000034 method Methods 0.000 title claims abstract description 42
- 230000003287 optical effect Effects 0.000 title abstract description 24
- 238000003384 imaging method Methods 0.000 title abstract description 8
- 238000005259 measurement Methods 0.000 claims description 12
- 238000000605 extraction Methods 0.000 claims description 11
- 230000005484 gravity Effects 0.000 claims description 4
- 230000013011 mating Effects 0.000 claims description 2
- 238000002583 angiography Methods 0.000 claims 2
- 238000004364 calculation method Methods 0.000 abstract description 5
- 210000001508 eye Anatomy 0.000 description 96
- 238000012014 optical coherence tomography Methods 0.000 description 42
- 238000001514 detection method Methods 0.000 description 11
- 239000013307 optical fiber Substances 0.000 description 9
- 230000008878 coupling Effects 0.000 description 7
- 238000010168 coupling process Methods 0.000 description 7
- 238000005859 coupling reaction Methods 0.000 description 7
- 238000012545 processing Methods 0.000 description 7
- 210000005252 bulbus oculi Anatomy 0.000 description 5
- 239000000284 extract Substances 0.000 description 5
- 239000000835 fiber Substances 0.000 description 5
- 230000015572 biosynthetic process Effects 0.000 description 3
- 210000004204 blood vessel Anatomy 0.000 description 3
- 238000003786 synthesis reaction Methods 0.000 description 3
- 206010044565 Tremor Diseases 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 238000007689 inspection Methods 0.000 description 2
- 210000002445 nipple Anatomy 0.000 description 2
- 238000012805 post-processing Methods 0.000 description 2
- 210000001747 pupil Anatomy 0.000 description 2
- 210000001525 retina Anatomy 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 206010028980 Neoplasm Diseases 0.000 description 1
- 238000012512 characterization method Methods 0.000 description 1
- 239000006185 dispersion Substances 0.000 description 1
- 238000013399 early diagnosis Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 238000007429 general method Methods 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 230000001678 irradiating effect Effects 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 210000001328 optic nerve Anatomy 0.000 description 1
- 230000011514 reflex Effects 0.000 description 1
- 230000003595 spectral effect Effects 0.000 description 1
- 230000002269 spontaneous effect Effects 0.000 description 1
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
- A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
- A61B3/102—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for optical coherence tomography [OCT]
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
- A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
- A61B3/12—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for looking at the eye fundus, e.g. ophthalmoscopes
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
- A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
- G01B9/00—Measuring instruments characterised by the use of optical techniques
- G01B9/02—Interferometers
- G01B9/02015—Interferometers characterised by the beam path configuration
- G01B9/02029—Combination with non-interferometric systems, i.e. for measuring the object
- G01B9/0203—With imaging systems
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
- G01B9/00—Measuring instruments characterised by the use of optical techniques
- G01B9/02—Interferometers
- G01B9/02055—Reduction or prevention of errors; Testing; Calibration
- G01B9/02075—Reduction or prevention of errors; Testing; Calibration of particular errors
- G01B9/02076—Caused by motion
- G01B9/02077—Caused by motion of the object
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
- G01B9/00—Measuring instruments characterised by the use of optical techniques
- G01B9/02—Interferometers
- G01B9/0209—Low-coherence interferometers
- G01B9/02091—Tomographic interferometers, e.g. based on optical coherence
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
- G06T7/246—Analysis of motion using feature-based methods, e.g. the tracking of corners or segments
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10072—Tomographic images
- G06T2207/10101—Optical tomography; Optical coherence tomography [OCT]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
- G06T2207/30041—Eye; Retina; Ophthalmic
Landscapes
- Health & Medical Sciences (AREA)
- Physics & Mathematics (AREA)
- Life Sciences & Earth Sciences (AREA)
- Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- General Health & Medical Sciences (AREA)
- Radiology & Medical Imaging (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Animal Behavior & Ethology (AREA)
- Biophysics (AREA)
- Biomedical Technology (AREA)
- Heart & Thoracic Surgery (AREA)
- Medical Informatics (AREA)
- Molecular Biology (AREA)
- Surgery (AREA)
- Ophthalmology & Optometry (AREA)
- Veterinary Medicine (AREA)
- Public Health (AREA)
- Theoretical Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Multimedia (AREA)
- Eye Examination Apparatus (AREA)
- Investigating Or Analysing Materials By Optical Means (AREA)
Abstract
本发明涉及光学断层图像摄像设备及其控制方法。具有跟踪功能的光学断层图像摄像设备能够在获取断层图像时适当地控制扫描。根据本发明的光学断层图像摄像设备包括用于拍摄被检眼的眼底图像的眼底图像摄像部和用于拍摄被检眼的断层图像的断层图像摄像部。光学断层图像摄像设备的控制方法包括以下步骤:计算与眼底图像中多个预先获取的特征区域匹配的坐标值;计算多个坐标值之间的空间变化;以及利用用于基于计算结果获取断层图像的断层图像摄像部控制测量光的扫描。
Description
技术领域
本发明涉及光学断层图像摄像设备及其控制方法。
背景技术
近年,能够获取眼底的断层图像的光学相干断层图像摄像(OCT)装置已经受到关注。受到关注的原因之一是OCT装置能够实现对眼底的断层结构的非侵入性及高分辨率的观察。特别地,能够进行高速和高灵敏度测量的SD-OCT(谱域)装置在市场上占据主要地位。这些SD-OCT装置通过设置眼底照相机或扫描激光检眼镜(SLO)而更加复杂。
另一方面,为了通过早期诊断和早期治疗检测微小的肿瘤或其它异常,需要提高断层图像的图像质量。作为用于实现高图像质量的单元,公开了一种用于使OCT光束跟随眼球的移动的装置(日本特表2004-512125)。在日本特表2004-512125所公开的发明中,OCT装置设置有用于检测眼球的移动的装置。说明了装置跟踪眼底的视神经乳头并实时控制跟踪扫描器以便于获取期望部位的断层图像。
然而,存在眼球的各种移动,并且将移动分类如下:作为快速和直线移动的微扫视;作为略微慢的移动的漂移;以及作为漂移期间发生的小振幅的快速振动的震颤。尽管移动的移动速度和频率取决于个体,但是相对于具有100μm/sec的量级的速度的漂移,微扫视具有不能相比的几mm/sec的量级的速度。微扫视的周期是每几秒种一次或两次的量级。漂移在不中断的情况下持续移动。震颤是具有5μm的幅度的小的移动,但具有100Hz量级的周期。
其中,在通过使用眼底图像检测眼球的移动时,微扫视有时在用于拍摄眼底图像的时间内发生。基于发生该现象时的眼底图像来移动扫描器使得扫描器被移动至不期望的位置。因此,需要基于眼底图像来检测突然的眼部移动以防止这种情况。
发明内容
本发明的目标是在获取断层图像时使测量光跟随被检体的移动的设备中适当地执行测量光扫描。
为了实现上述目标,根据本发明,提供了一种摄像设备的控制方法,所述摄像设备在不同时间点获取被检眼的第一眼底图像和第二眼底图像,所述控制方法包括以下步骤:提取步骤,用于从所述第一眼底图像提取多个特征图像;从所述第二眼底图像搜索所提取的多个特征图像;以及判断在所提取的多个特征图像的位置关系和搜索到的多个特征图像的位置关系之间是否存在空间变化。
此外,为了解决上述问题,根据本发明,提供了一种摄像设备,包括:眼底图像摄像部,用于在不同时间点获取被检眼的第一眼底图像和第二眼底图像;提取单元,用于从所述第一眼底图像提取多个特征图像;搜索单元,用于从所述第二眼底图像搜索所提取的多个特征图像;以及判断单元,用于判断在所提取的多个特征图像的位置关系和搜索到的多个特征图像的位置关系之间是否存在空间变化。
根据本发明,在获取断层图像时实现适当的扫描控制。
通过以下参考附图对典型实施例的说明,本发明的其它特征将变得明显。
附图说明
图1是本发明第一实施例中的光学断层图像摄像设备的光学系统结构的示意图。
图2是本发明第一实施例中的信号处理的流程图。
图3A、3B和3C是分别用于说明本发明第一实施例中的模式匹配的图。
图4是本发明第二实施例中的信号处理的流程图。
具体实施方式
现在将根据附图详细说明本发明的优选实施例。
第一实施例
之后将说明本发明的第一实施例。本实施例中的摄像设备具有内部固视灯,使用SLO摄像部来获取眼底图像,从使用SLO摄像部所获取的眼底图像计算眼球的移动量,并在OCT摄像部上反映计算结果以获取断层图像。
OCT摄像部的结构
图1是本实施例中的摄像设备的光学系统结构的示意图。低相干光源101用作光源。作为光源101,可以使用超发光二极管(SLD)光源或放大自发射(ASE)光源。针对低相干光,850nm及其附近和1050nm及其附近的波长用于拍摄眼底。在本实施例中,使用中心波长为840nm且半高宽(full-widthathalf-maximum)为45nm的SLD光源。
从低相干光源101发射的低相干光经由光纤进入光纤耦合器102,并被分割成测量光(OCT光束)和参考光。尽管这里说明了使用光纤的干涉计的结构,但可以采用在空间光光学系统中使用分束器的结构。
经由光纤103从光纤准直器104以平行光的形式发射测量光。所发射的测量光还经由OCT扫描器(Y)105以及中继透镜106和107穿过OCT扫描器(X)108,穿过二色分束器109、扫描透镜110、分色镜111和目镜112,从而照射被检眼121。这里,作为OCT扫描器(X)108和OCT扫描器(Y)105,使用检流计扫描器。在被检眼121中的测量光被视网膜散射和反射,并且经由同一光路返回至光纤耦合器102作为返回光。
将参考光从光纤耦合器102引导至光纤准直器113,并以平行光的形式发射参考光。所发射的参考光穿过色散补偿玻璃114并被光路长度可变台115上的参考镜116反射。由参考镜116反射的参考光经由同一光路返回至光纤耦合器102。
将返回的返回光和参考光在光纤耦合器102中合成为合成光,并将合成光引导至光纤准直器117。利用分光器将合成光转换成各波长的强度信息,然后测量强度信息。光纤准直器117、光栅118、透镜119和线传感器120构成分光器。将线传感器120所测量得到的各波长的强度信息传送至PC125,并将强度信息生成为被检眼的断层图像。
在OCT测量中,固视灯150用于稳定固视。针对固视灯150,使用以矩阵方式配置的发光二极管(LED)。利用PC125的控制根据期望拍摄的部位来改变所点亮的LED的位置。来自LED的光具有500nm的波长。从固视灯发射的光束经由透镜151和二色镜111来照射被检眼121。二色镜111设置在扫描透镜110和目镜112之间以将具有较短波长(500nm量级)的光与OCT光束和SLO光束(700nm以上)相分离。
SLO摄像部的结构
随后说明用于获取眼底图像的SLO摄像部的光学系统结构。作为激光光源130,可以使用半导体激光或SLD光源。要在光源中使用的波长不受限制,只要可以利用二色分束器109将其与OCT用的低相干光源101的波长分离即可。一般地,使用对眼底图像的图像质量优选的700~1000nm的近红外波长范围。在本实施例中,使用具有使光能够被分离的760nm的波长的半导体激光。
从激光光源130发射的激光束(SLO光束)经由光纤131从光纤准直器132以平行光的形式发射,并经由环形镜133和透镜134被引导至SLO扫描器(Y)135。激光束经由透镜136和137穿过SLO扫描器(X)138并由二色分束器109反射,以入射至作为目标的被检眼121。二色分束器109用于透过OCT光束并反射SLO光束。与OCT摄像部相同,使用检流计扫描器作为SLO摄像部的扫描器。入射在被检眼121上的SLO光束照射被检眼121的眼底。该光束由被检眼121的眼底反射或散射,并经由同一光路返回至环形镜133。将环形镜133设置在与被检眼121的瞳孔的位置共轭的位置处。在照射眼底的光束的背散射光中,穿过瞳孔的周围的光被环形镜133反射并通过透镜139在光检测元件140上形成图像。光检测元件140是例如雪崩光电二极管(APD)。基于光检测元件140的强度信息来生成眼底的平面图像。尽管在本实施例中使用用于通过利用具有光斑直径的光束照射眼底并进行扫描来获取眼底图像的SLO,但可以采用使用线光束的线SLO(LSL)结构。
PC125不仅控制OCT扫描器、光路长度可变台115、线传感器120、SLO扫描器、光检测元件140和固视灯150并获取数据,还执行信号处理和数据的获取或存储。
信号处理
以下参考图2的流程图说明信号处理。在本实施例中针对SLO摄像部和OCT摄像部具有相同帧频的情况进行说明。SLO摄像部和OCT摄像部几乎在同一时刻进行摄像。基于来自SLO摄像部的眼底图像来控制使用OCT摄像部拍摄断层图像的摄像位置。
在步骤S1中,开始测量。在该状态下,摄像设备已经启动,并且将被检眼121放置在测量位置处。另外,选择用于使用OCT摄像部进行摄像的模式。该模式包括测量范围、测量位置和重复次数。在本实施例中,通过给出用于对视网膜上的相同部位进行50次摄像的模式的例子来进行说明。
在步骤S2中,针对眼底图像和断层图像来执行摄像前的摄像设备的调整。需要在拍摄断层图像之前执行摄像设备和被检眼的对准。在观察SLO摄像部所获取的眼底图像的同时,对被检眼121和摄像设备(特别是光学系统)之间的距离以及对扫描透镜110的位置执行调整,以使得眼底图像清晰可见。随后,移动固视灯的点亮位置以使得能够测量期望区域。此外,调整光路长度可变台115以包括用于使用OCT摄像部拍摄断层图像所需的范围。在该步骤中,从SLO摄像部所获取的眼底图像提取多个特征区域,然后将特征区域存储为模板。尽管这里针对提取4个区域的情况进行了说明,但不限制区域的数量,只要提取了两个以上的区域即可。如后所述,在与被分割成4个象限的眼底图像执行模式匹配的情况下,优选从对角方向上相互相对的象限提取特征区域。为了在该状态下较佳地检测微扫视,更优选从其它象限提取特征区域以使用三个以上的特征区域。尽管增大所提取的区域数增加了精确检测诸如微扫视等的快速移动的可能性,但导致了计算时间的增加。在本发明中的PC125的用作提取单元的区域中执行提取特征图像的上述步骤。
这里,参考图3A~3C说明特征区域的提取。假定眼底图像具有600像素高和800像素宽的尺寸。利用扫描器进行的扫描从图3A的左上方开始,并且每当扫描器在x轴上往复运动一次时将y轴移动一步,以执行直到右下方的测量。x轴在所谓的“快速扫描”方向上,以及y轴在所谓的“慢速扫描”方向上。作为第一眼底图像的图3A中的眼底图像301包括乳头302和血管303。以中心作为原点的x和y轴将所获取的眼底图像分割成4个象限、即第一至第四象限。另外,从各象限中提取特征区域,诸如从每个象限提取一个特征区域等。尽管以血管的分支为例说明了特征区域,但特征当然可以是诸如乳头等的任意其它特征。特征区域具有例如50×50像素的尺寸。第一至第四象限是分别由304~307表示的区域。将特征区域存储为模板,然后处理进入步骤S3。
在步骤S3中,判断是否接通了摄像开关。如果接通了摄像开关,则处理进入步骤S4以开始拍摄断层图像。否则,处理返回至步骤S2中的摄像前摄像设备的调整以执行摄像前的调整和模板的提取。
在步骤S4中,获取眼底图像和断层图像。首先,利用SLO摄像部获取眼底图像。SLO扫描器(X)138提供快速扫描以及SLO扫描器(Y)135提供慢速扫描,由此获取xy平面上的二维眼底图像。假定眼底图像在x方向上具有800像素,以及在y方向上具有600像素。
另一方面,利用OCT摄像部获取断层图像。OCT扫描器(X)108利用在x轴上往复运动来提供快速扫描,以及OCT扫描器(Y)105在y轴上维持固定值。结果,获取xz平面上的二维断层图像。注意,通过一次摄像获取1000行作为从分光器的输出。在信号处理时,以相对于波长相等的间隔进行分光器的输出,因此进行转换从而以具有相对于波数的相等间隔的方式输出。随后,执行傅立叶变换。切出必要的部分以获取xz平面上的断层图像(在x方向上是1000像素,以及在z方向上是500像素)。
在步骤S5中,针对多个模板执行模式匹配。首先,在作为第二眼底图像所获取的眼底图像和各象限的模板之间执行模式匹配的处理。针对模式匹配,可以采用一般的方法,因此这里不说明其细节。作为各象限的匹配检测区域的坐标,输出区域的中心坐标(xi(t),yi(t)),其中,i是表示4个象限中的各象限的1~4的整数,以及t是从提取出模板起的时间。以这种方式,通过模式匹配判断是否存在与模板匹配的检测区域,并检测这些检测区域的数量。如果不存在匹配区域,则输出错误。在该处理中,如后所述,还可以通过判断4个模板之间的距离或从对角线之间的角度计算得到的空间变化是否满足预定条件(例如,判断是否是预定值以上)来判断匹配。在错误的情况下,例如,眼底图像与任意模板不匹配或者与一个模板不匹配。在本实施例中,将图像与一个以上模板不匹配的状态考虑为错误。在本发明中,通过在PC125中用作用于执行搜索与上述特征图像相对应的检测区域、即搜索区域的步骤的搜索单元的区域来执行上述检测检测区域的步骤。
另外,可以显示错误的发生以使得检查者能够利用警告显示等来警告被检者不移动。此外,优选地从中心坐标相对于预定值的偏移来确定错误的发生,预定值例如是通过将特征区域的垂直方向上的像素数和水平方向上的像素数中的各像素数乘以预定缩放因数所获得的像素数、或者通过将特征区域的垂直方向上的像素数和水平方向上的像素数中的各像素数加上预定像素数所获得的像素数。
在步骤S6中,判断是否存在匹配区域。如果存在匹配区域,则处理进入步骤S7。如果不存在匹配区域,则处理返回至步骤S4。如果存在匹配区域(图3B),则基于第一眼底图像和第二眼底图像来执行跟踪操作。此外,如果不存在匹配区域(图3C),则获取第三眼底图像,并基于第一和第三眼底图像来执行跟踪操作。换句话说,如果不存在匹配区域,则第二眼底图像不用于跟踪操作。在因为眼部移动所以在眼底图像中不存在与模板匹配的部分的情况下、在拍摄被提取为模板的特征区域期间发生微扫视的情况下、以及在闭眼的情况下,不存在匹配区域。在发生错误的图像中,与该图像同时获取的断层图像同样可能是不适当的图像,因此该断层图像不包括在所获取的图像的数量中。换句话说,如果所计算得到的空间变化大于预定值,则丢弃与以下的眼底图像同时获取的断层图像:获取用于检测与特征区域的匹配的检测区域时的眼底图像。具体地,具有大于预定值的空间变化的眼底图像不用于跟踪操作,但通过使用具有等于或小于预定值的空间变化的眼底图像来执行跟踪操作。这里所述的空间变化与由图像在存在包括所获取的眼底图像或断层图像的视网膜的空间内的配置的移动或歪斜而引起的变化相对应,换句话说,与特征图像的各位置关系的空间变化相对应。通过本发明的PC125中的用作丢弃单元的区域来执行以上丢弃。此外,尽管基于所提取的特征图像和搜索到的已经提取的特征图像之间的位置关系来判断是否存在空间变化,但通过PC125中的用作判断单元的区域来执行该步骤。
在步骤S7中,检测匹配坐标值之间的空间变化,并且通过使用以下数学表达式来计算变化的大小。作为被选择为与特征区域匹配的区域的检测区域之间的距离的变化和由通过将检测区域连接成对所获取的线段的交点所形成的角度(线段之间的角度)的变化来检测空间变化。首先,将距离假定为各象限中的匹配检测区域之间的距离。例如,通过以下数学表达式1表示象限i和象限j的匹配坐标值之间的距离:
在使用4个模板的情况下,由模板形成的四边形的对角线的长度比四边形的边长。此外,获取时间在Y方向上变化。因此,这里使用第一象限和第三象限的对角线的r13(t)。当然,可以使用第二象限和第四象限的对角线,可以使用两个对角线,并且可以使用距离上较长的对角线。一般地,在微扫视的情况下,可以使用任意一个对角线进行检测。这里,通过以下数学表达式2来表示距离变化:
Δr13(t)=r13(t)-r13(0)数学表达式2
随后,通过以下数学表达式3来表示连接象限i和象限j中的匹配检测区域的矢量:
通过以下数学表达式4来表示分别连接第一和第三象限、第二和第四象限中的检测区域的对角线之间的角度θ308:
因此,通过以下数学表达式5来表示对角线之间的角度θ的变化:
Δθ(t)=θ(t)-θ(0)数学表达式5
在步骤S8中,将所检测到的变化与阈值进行比较。如以下数学表达式6-1和6-2表示,针对距离和角度中的至少一个来执行与阈值的比较:
Δr13(t)≤R13数学表达式6-1
Δθ(t)≤T数学表达式6-2
如上所述,作为从多个检测区域选择的检测区域之间的距离的变化或者连接所选择的检测区域的两个线段之间的角度的变化来计算空间变化。此外,在该情况下,优选多个特征区域是4个以上的区域、并且作为至少一对检测区域之间的距离的变化来计算空间变化。可选地,优选多个特征区域是4个以上的区域、并且作为连接眼底图像中的对角方向上相互相对的检测区域的两个对角线之间的角度的变化来计算空间变化。
这里参考图3B说明了眼部漂移的情况。按第一至第四象限的顺序由309~312表示匹配检测区域。在漂移的情况下,眼底图像整体平行移动或转动移动。因此,匹配检测区域之间的距离和对角线之间的角度不发生变化。在该情况下,处理进入步骤S9。另一方面,说明了在如图3C所示由虚线表示的区域313中发生微扫视的情况。血管看上去不自然地延伸。在该状态下,匹配坐标值之间的距离和两个对角线之间的角度308与初始值不同,这不满足数学表达式6-1和6-2。所比较的值例如是数学表达式1和4中的t=0时的值的百分之几。
如果不满足该条件,则眼部已经移动至与第一象限304和第二象限305的匹配检测区域的坐标不同的位置。因此,即使通过使用该眼底图像来控制扫描器,也不能拍摄期望部位。处理返回至步骤S4以再次获取眼底图像来检查眼部的位置。然而,只要通过使用第三象限306和第四象限307来计算移动量,就可能能够获取期望区域。具体地,如果特征图像的空间变化满足预定条件,在本实施例中即值等于或小于阈值的条件,则基于第一眼底图像和第二眼底图像来执行跟踪操作,其中针对第一眼底图像和第二眼底图像执行上述匹配操作。否则,获取本实施例中的其它眼底图像、即第三眼底图像,然后使用该眼底图像来执行跟踪操作。
在步骤S9中,控制OCT扫描器的扫描模式(扫描开始位置、扫描范围等)来校正所获取的断层图像。首先通过计算OCT扫描器的移动量来控制OCT扫描器。这里,假定为相对于4个检测区域的重心的变化量。假定匹配模板的4个区域的重心是(xm(t),ym(t)),则通过以下数学表达式7来表示关系:
因此,通过以下数学表达式8来表示检测区域相对于提取区域的移动量:
(Δxm(t),Δym(t))=(xm(t)-xm(0),ym(t)-ym(0))数学表达式8
在计算移动量之后,控制OCT扫描器。通过改变在x和y方向上的偏移量来控制OCT扫描器。换句话说,可以利用检测区域相对于特征区域的移动量作为检测区域的重心的移动来计算空间变化。
在步骤S10中,判断是否满足结束条件。结束条件是完成拍摄所需图像数(50张),或者在开始测量之后经过了预设预定时间(例如,2分钟)、并且在该情况下输出错误并结束处理。除非满足结束条件,否则处理返回至步骤S4以执行摄像。从步骤S4至步骤S10的处理针对一次处理例如花费40msec的量级。换句话说,只要能够持续拍摄50张图像,就花费2秒。
在步骤S11中,处理结束。在测量结束之后,被检眼从检查位置移开,然后,执行后处理。在后处理中,检查所获取的断层图像并执行叠加处理。可选地,根据需要,处理返回至步骤S1以不同模式执行测量。
以这种方式,可以通过基本实时地分析眼底图像来检测是否发生了微扫视。这防止扫描器移动至不期望位置。如上所述使扫描器跟踪眼部移动,并且同时消除冗余的摄像,从而增大仅获取所需数量的期望图像的可能性。
上述PC125中的用作坐标值计算单元、空间变化计算单元和扫描控制单元的区域分别在上述眼底图像中执行以下操作:各自与多个先前获取的特征区域匹配的多个检测区域的坐标值的计算,所计算得到的多个坐标值之间的空间变化的计算,以及为了利用断层图像摄像部拍摄被检眼的断层图像所执行的、基于该计算结果对测量光的扫描控制、即跟踪操作。
第二实施例
该部分仅说明与第一实施例的不同之处。与第一实施例的不同之处是假定相互独立地执行利用SLO摄像部进行的眼底图像的摄像和利用OCT摄像部进行的断层图像的摄像。在以上摄像之间的摄像帧数不同的情况下,可以通过在不同时刻拍摄这些图像来消除冗余。参考图4的流程图说明该情况下的信号处理。尽管在眼底图像和断层图像的流程图中部分使用共同的处理,但不意味着两者之间的定时的一致。
信号处理
在步骤S1中,开始测量。在该状态下,摄像设备已经启动,并且将被检眼放置在测量位置。
在步骤S2中,针对眼底图像和断层图像执行摄像前的摄像设备的调整。在该步骤中,提取4个模板。
在步骤S3中,判断是否接通了摄像开关。如果接通了摄像开关,则处理进入步骤A1以拍摄眼底图像,或者进入步骤B1以拍摄断层图像。
首先,说明了眼底图像的摄像循环。假定眼底图像的摄像每帧花费5毫秒。
在步骤A1中,拍摄眼底图像。利用SLO摄像部来获取眼底图像。SLO扫描器(X)138提供快速扫描,以及SLO扫描器(Y)135提供慢速扫描,由此获取xy平面中的二维眼底图像。结果,所获取的图像在x方向上具有800像素,以及在y方向上具有600像素。
在步骤A2中,在眼底图像和模板之间执行匹配评价。如果不存在与模板匹配的区域,则输出错误。
在步骤A3中,判断是否存在匹配区域。如果作为匹配评价的结果不存在匹配区域,则处理进入步骤A6。此时,不控制OCT扫描器。因此,将当前值直接作为移动量输出。如果存在匹配区域,则处理进入步骤A4。
在步骤A4中,检测空间变化。根据数学表达式2和5从匹配检测区域检测空间变化。
在步骤A5中,将所检测到的空间变化与阈值进行比较。然后评价是否满足数学表达式6-1和6-2。
在步骤A6中,计算移动量。如果空间变化等于或小于阈值,则基于数学表达式8来计算移动量。如果空间变化大于阈值,则在不改变当前值的情况下将当前值作为移动量输出。
随后,说明断层图像的摄像循环。假定利用OCT摄像部的摄像每帧花费25毫秒。
在步骤B1中,控制OCT扫描器。通过参考步骤A6中的移动量的计算结果来控制OCT扫描器。在OCT扫描器的控制中,改变x和y方向上的偏移。在x方向上获取1000行的数据的情况下,每200行更新控制。
在步骤B2中,移动OCT扫描器(准确地说,改变角度)。将OCT扫描器在x方向上移动一步。
在步骤B3中,获取线数据。
在步骤B4中,判断是否成功获取了断层图像。如果完成所有行的数据的获取,则处理进入步骤S10。此时,所获取的断层图像在x方向上具有1000像素,以及在z方向上具有500像素。除非已完成获取,否则处理返回至步骤B1。
在步骤S10中,判断是否完成期望数量的图像的获取。除非已完成期望数量的图像的获取,否则处理返回至用于拍摄眼底图像的步骤A1。另一方面,处理返回至用于拍摄断层图像的步骤B1。如果各图像的摄像完成或者如果测量时间超过指定时间,则执行结束处理。
在步骤S11中,处理结束。
通过如上所述基本实时地分析眼底图像,可以防止扫描器移动至不期望的位置。此外,只要SLO摄像部比OCT摄像部获取到断层图像充分早地获取到眼底图像,就可以实现更精细的扫描器控制。
其它实施例
此外,可以通过执行以下处理来实现本发明。具体地,经由网络或各种存储介质中的任意介质将用于实现上述实施例的功能的软件(程序)供给至系统或设备,然后系统或设备的计算机(或CPU、MPU等)读出并执行程序。
尽管已经参考典型实施例说明了本发明,但是应该理解,本发明不限于所公开的典型实施例。所附权利要求书的范围符合最宽的解释,以包含所有这类修改、等同结构和功能。
Claims (9)
1.一种摄像设备的控制方法,所述摄像设备在不同时刻获取被检眼的第一眼底图像和第二眼底图像,其特征在于,所述控制方法包括以下步骤:
提取步骤,用于从所述第一眼底图像提取多个特征图像;
从所述第二眼底图像搜索与所提取的多个特征图像相对应的多个特征图像;
判断在所提取的多个特征图像的位置关系和搜索到的多个特征图像的位置关系之间是否存在空间变化;
在所述空间变化满足预定条件的情况下,基于所述第一眼底图像和所述第二眼底图像来执行跟踪操作;以及
在所述空间变化不满足所述预定条件的情况下,基于所述第一眼底图像和在不同于所述第一眼底图像和所述第二眼底图像的时刻所获取的所述被检眼的第三眼底图像来执行跟踪操作。
2.根据权利要求1所述的摄像设备的控制方法,其特征在于,所述提取步骤包括在所述第一眼底图像中的三个以上部位提取多个特征图像。
3.根据权利要求1所述的摄像设备的控制方法,其特征在于,还包括以下步骤:作为从搜索到的多个特征图像中选择的特征图像之间的距离的变化或连接搜索到的多个特征图像的两个线段之间的角度的变化来计算所述空间变化。
4.根据权利要求3所述的摄像设备的控制方法,其特征在于:
所述提取步骤包括在所述第一眼底图像的4个以上部位提取多个特征图像;以及
作为搜索到的特征图像中的至少一对特征图像之间的距离的变化来计算所述空间变化。
5.根据权利要求3所述的摄像设备的控制方法,其特征在于,多个特征图像存在于4个以上部位,并且作为连接如下的多个特征图像的两个对角线之间的角度的变化来计算所述空间变化:该多个特征图像是已搜索到的、在眼底图像中在对角方向上相互相对的多个特征图像。
6.根据权利要求1所述的摄像设备的控制方法,其特征在于,以搜索到的特征图像相对于提取出的特征图像的移动量作为搜索到的特征图像的重心的移动来计算所述空间变化。
7.根据权利要求1所述的摄像设备的控制方法,其特征在于,还包括以下步骤:控制在获取所述被检眼的断层图像时所使用的、利用测量光扫描所述被检眼的扫描模式。
8.根据权利要求1所述的摄像设备的控制方法,其特征在于,如果所计算出的空间变化大于预定值,则丢弃与获取以下特征图像时的眼底图像同时地获取到的断层图像:该特征图像是通过搜索与所提取的特征图像的匹配来获取的。
9.一种摄像设备,包括:
眼底摄像单元,用于在不同时刻获取被检眼的第一眼底图像和第二眼底图像,
所述摄像设备的特征在于还包括:
提取单元,用于从所述第一眼底图像提取多个特征图像;
搜索单元,用于从所述第二眼底图像搜索与所提取的多个特征图像相对应的多个特征图像;
判断单元,用于判断在所提取的多个特征图像的位置关系和搜索到的多个特征图像的位置关系之间是否存在空间变化;以及
扫描控制单元,用于在所述空间变化满足预定条件的情况下,基于所述第一眼底图像和所述第二眼底图像来执行跟踪操作,
其中,在所述空间变化不满足所述预定条件的情况下,所述扫描控制单元基于所述第一眼底图像和在不同于所述第一眼底图像和所述第二眼底图像的时刻由所述眼底摄像单元所获取的所述被检眼的第三眼底图像来执行跟踪操作。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011-052292 | 2011-03-10 | ||
JP2011052292A JP5901124B2 (ja) | 2011-03-10 | 2011-03-10 | 撮像装置およびその制御方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN102670170A CN102670170A (zh) | 2012-09-19 |
CN102670170B true CN102670170B (zh) | 2015-12-16 |
Family
ID=45872791
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201210064119.6A Expired - Fee Related CN102670170B (zh) | 2011-03-10 | 2012-03-12 | 光学断层图像摄像设备及其控制方法 |
Country Status (5)
Country | Link |
---|---|
US (1) | US9055891B2 (zh) |
EP (1) | EP2497409A1 (zh) |
JP (1) | JP5901124B2 (zh) |
KR (1) | KR101477591B1 (zh) |
CN (1) | CN102670170B (zh) |
Families Citing this family (28)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8998412B2 (en) | 2010-03-12 | 2015-04-07 | Canon Kabushiki Kaisha | Ophthalmologic apparatus and control method for the same |
JP5818409B2 (ja) | 2010-06-17 | 2015-11-18 | キヤノン株式会社 | 眼底撮像装置及びその制御方法 |
JP5917004B2 (ja) | 2011-03-10 | 2016-05-11 | キヤノン株式会社 | 撮像装置及び撮像装置の制御方法 |
JP5913999B2 (ja) | 2012-01-16 | 2016-05-11 | キヤノン株式会社 | 眼科撮像装置およびその制御方法 |
JP5374598B2 (ja) | 2012-01-26 | 2013-12-25 | キヤノン株式会社 | 光断層撮像装置 |
JP5955020B2 (ja) | 2012-02-21 | 2016-07-20 | キヤノン株式会社 | 眼底撮像装置及び方法 |
JP5997457B2 (ja) | 2012-02-21 | 2016-09-28 | キヤノン株式会社 | 撮像装置及び撮像装置の制御方法 |
JP6025349B2 (ja) | 2012-03-08 | 2016-11-16 | キヤノン株式会社 | 画像処理装置、光干渉断層撮像装置、画像処理方法および光干渉断層撮像方法 |
KR101641260B1 (ko) * | 2012-04-18 | 2016-07-20 | 엘지전자 주식회사 | 광간섭성 단층 촬영 장치 및 이의 제어 방법 |
JP6193576B2 (ja) * | 2013-01-31 | 2017-09-06 | キヤノン株式会社 | 眼科装置および制御方法 |
JP6184114B2 (ja) | 2013-01-31 | 2017-08-23 | キヤノン株式会社 | 光干渉断層撮像装置およびその制御方法 |
JP6224908B2 (ja) | 2013-04-17 | 2017-11-01 | キヤノン株式会社 | 撮像装置 |
US9905008B2 (en) * | 2013-10-10 | 2018-02-27 | University Of Rochester | Automated fundus image field detection and quality assessment |
WO2015154200A1 (en) | 2014-04-07 | 2015-10-15 | Mimo Ag | Method for the analysis of image data representing a three-dimensional volume of biological tissue |
JP6322042B2 (ja) | 2014-04-28 | 2018-05-09 | キヤノン株式会社 | 眼科撮影装置、その制御方法、およびプログラム |
JP6552200B2 (ja) | 2015-01-09 | 2019-07-31 | キヤノン株式会社 | 光断層撮像装置、その制御方法、及びプログラム |
CA3048197A1 (en) | 2016-12-21 | 2018-06-28 | Acucela Inc. | Miniaturized mobile, low cost optical coherence tomography system for home based ophthalmic applications |
CN106844474B (zh) * | 2016-12-23 | 2020-11-03 | 广东小天才科技有限公司 | 拍照搜题的方法及装置 |
JP6472495B2 (ja) * | 2017-08-09 | 2019-02-20 | キヤノン株式会社 | 眼科装置および制御方法 |
CN111148460B (zh) | 2017-08-14 | 2022-05-03 | 奥普托斯股份有限公司 | 视网膜位置跟踪 |
JP2019041841A (ja) * | 2017-08-30 | 2019-03-22 | 株式会社トプコン | 眼科装置、及びその制御方法 |
JP7402866B2 (ja) | 2018-06-20 | 2023-12-21 | アキュセラ インコーポレイテッド | 家庭用眼科用途のための小型化モバイル低コスト光干渉断層撮影システム |
GB2576139A (en) * | 2018-07-20 | 2020-02-12 | Ophthalmic Surgical Services Ltd | Ocular assessment |
WO2021134087A1 (en) | 2019-12-26 | 2021-07-01 | Acucela Inc. | Optical coherence tomography patient alignment system for home based ophthalmic applications |
US10959613B1 (en) | 2020-08-04 | 2021-03-30 | Acucela Inc. | Scan pattern and signal processing for optical coherence tomography |
US11393094B2 (en) | 2020-09-11 | 2022-07-19 | Acucela Inc. | Artificial intelligence for evaluation of optical coherence tomography images |
CA3192083A1 (en) | 2020-09-30 | 2022-04-07 | Acucela Inc. | Myopia prediction, diagnosis, planning, and monitoring device |
US11497396B2 (en) | 2021-03-24 | 2022-11-15 | Acucela Inc. | Axial length measurement monitor |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101234015A (zh) * | 2006-12-26 | 2008-08-06 | 株式会社拓普康 | 光图像计测装置 |
US7452077B2 (en) * | 2006-08-29 | 2008-11-18 | Carl Zeiss Meditec, Inc. | Image adjustment derived from optical imaging measurement data |
EP2184004A1 (en) * | 2008-11-05 | 2010-05-12 | Nidek Co., Ltd | Ophthalmic photographing apparatus |
CN102970919A (zh) * | 2010-06-30 | 2013-03-13 | 佳能株式会社 | 光学相干断层图像摄像设备及其方法 |
CN102232824B (zh) * | 2010-04-30 | 2014-07-02 | 佳能株式会社 | 特征图像提取方法及眼科装置 |
Family Cites Families (19)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001190500A (ja) * | 2000-01-12 | 2001-07-17 | Canon Inc | 眼底検査装置 |
US6325512B1 (en) | 2000-10-31 | 2001-12-04 | Carl Zeiss, Inc. | Retinal tracking assisted optical coherence tomography |
EP1602321A1 (en) * | 2004-06-02 | 2005-12-07 | SensoMotoric Instruments GmbH | Method and apparatus for image-based eye tracking for retinal diagnostic or surgery device |
CA2595324C (en) * | 2005-01-21 | 2015-08-11 | Massachusetts Institute Of Technology | Methods and apparatus for optical coherence tomography scanning |
JP4819478B2 (ja) | 2005-10-31 | 2011-11-24 | 株式会社ニデック | 眼科撮影装置 |
JP2010012109A (ja) * | 2008-07-04 | 2010-01-21 | Nidek Co Ltd | 眼底撮影装置 |
JP5306075B2 (ja) | 2008-07-07 | 2013-10-02 | キヤノン株式会社 | 光干渉断層法を用いる撮像装置及び撮像方法 |
JP5605998B2 (ja) | 2009-03-06 | 2014-10-15 | キヤノン株式会社 | 光干渉断層撮像方法および装置 |
JP5605999B2 (ja) | 2009-03-06 | 2014-10-15 | キヤノン株式会社 | 光干渉断層撮像方法および装置 |
JP5590831B2 (ja) | 2009-07-13 | 2014-09-17 | キヤノン株式会社 | 画像処理装置及び画像処理方法 |
JP5036785B2 (ja) | 2009-10-23 | 2012-09-26 | キヤノン株式会社 | 光断層画像生成方法及び光断層画像生成装置 |
JP4902721B2 (ja) | 2009-10-23 | 2012-03-21 | キヤノン株式会社 | 光断層画像生成装置及び光断層画像生成方法 |
US20110103655A1 (en) * | 2009-11-03 | 2011-05-05 | Young Warren G | Fundus information processing apparatus and fundus information processing method |
JP5213835B2 (ja) | 2009-11-17 | 2013-06-19 | キヤノン株式会社 | 光干渉断層像の撮像方法および光干渉断層像の撮像装置 |
JP2011257160A (ja) | 2010-06-04 | 2011-12-22 | Canon Inc | 光干渉断層撮像装置、光干渉断層撮像方法、およびプログラム |
JP4949504B2 (ja) | 2010-06-18 | 2012-06-13 | 株式会社ニデック | 眼科撮影装置 |
JP5820154B2 (ja) | 2010-07-05 | 2015-11-24 | キヤノン株式会社 | 眼科装置、眼科システム及び記憶媒体 |
JP2012042348A (ja) | 2010-08-19 | 2012-03-01 | Canon Inc | 断層画像表示装置およびその制御方法 |
JP5242716B2 (ja) | 2011-02-08 | 2013-07-24 | 株式会社ニデック | 眼底画像処理装置 |
-
2011
- 2011-03-10 JP JP2011052292A patent/JP5901124B2/ja not_active Expired - Fee Related
-
2012
- 2012-02-27 US US13/405,678 patent/US9055891B2/en not_active Expired - Fee Related
- 2012-03-08 EP EP12158529A patent/EP2497409A1/en not_active Withdrawn
- 2012-03-08 KR KR1020120023769A patent/KR101477591B1/ko active IP Right Grant
- 2012-03-12 CN CN201210064119.6A patent/CN102670170B/zh not_active Expired - Fee Related
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7452077B2 (en) * | 2006-08-29 | 2008-11-18 | Carl Zeiss Meditec, Inc. | Image adjustment derived from optical imaging measurement data |
CN101234015A (zh) * | 2006-12-26 | 2008-08-06 | 株式会社拓普康 | 光图像计测装置 |
EP2184004A1 (en) * | 2008-11-05 | 2010-05-12 | Nidek Co., Ltd | Ophthalmic photographing apparatus |
CN102232824B (zh) * | 2010-04-30 | 2014-07-02 | 佳能株式会社 | 特征图像提取方法及眼科装置 |
CN102970919A (zh) * | 2010-06-30 | 2013-03-13 | 佳能株式会社 | 光学相干断层图像摄像设备及其方法 |
Also Published As
Publication number | Publication date |
---|---|
EP2497409A1 (en) | 2012-09-12 |
CN102670170A (zh) | 2012-09-19 |
US20120229763A1 (en) | 2012-09-13 |
JP2012187230A (ja) | 2012-10-04 |
KR101477591B1 (ko) | 2014-12-30 |
JP5901124B2 (ja) | 2016-04-06 |
KR20120103481A (ko) | 2012-09-19 |
US9055891B2 (en) | 2015-06-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN102670170B (zh) | 光学断层图像摄像设备及其控制方法 | |
CN105942968B (zh) | 光学相干断层摄像装置及其控制方法 | |
CN102970919B (zh) | 光学相干断层图像摄像设备及其方法 | |
CN104799810B (zh) | 光学相干断层成像设备及其控制方法 | |
CN102670169B (zh) | 摄像设备及其控制方法 | |
CN102525403B (zh) | 眼科设备及其控制方法 | |
CN103654712B (zh) | 眼科设备和眼科设备的控制方法 | |
CN103222852B (zh) | 光学相干断层摄像设备 | |
US9330299B2 (en) | Fundus image acquiring apparatus and control method therefor | |
CN102670165B (zh) | 摄像设备和摄像方法 | |
CN103211574B (zh) | 图像处理设备和图像处理方法 | |
US9554700B2 (en) | Optical coherence tomographic imaging apparatus and method of controlling the same | |
CN105431077B (zh) | 图像处理设备和图像处理方法 | |
US20120294500A1 (en) | Ophthalmologic imaging apparatus | |
JP2013075035A (ja) | 光断層像撮像方法、光断層像撮像装置およびプログラム | |
JP6486427B2 (ja) | 光干渉断層撮像装置およびその制御方法 | |
JP2020146105A (ja) | 眼科装置、眼科装置の制御方法、およびプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20151216 |