CN103222848B - 图像处理设备和图像处理方法 - Google Patents
图像处理设备和图像处理方法 Download PDFInfo
- Publication number
- CN103222848B CN103222848B CN201310030181.8A CN201310030181A CN103222848B CN 103222848 B CN103222848 B CN 103222848B CN 201310030181 A CN201310030181 A CN 201310030181A CN 103222848 B CN103222848 B CN 103222848B
- Authority
- CN
- China
- Prior art keywords
- image
- eye
- point
- arbitrfary
- faultage
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 10
- 210000001508 eye Anatomy 0.000 claims description 332
- 239000013598 vector Substances 0.000 claims description 18
- 238000004364 calculation method Methods 0.000 claims description 5
- 238000002372 labelling Methods 0.000 claims description 4
- 208000003098 Ganglion Cysts Diseases 0.000 claims description 2
- 208000005400 Synovial Cyst Diseases 0.000 claims description 2
- 239000000835 fiber Substances 0.000 claims description 2
- 239000002052 molecular layer Substances 0.000 claims description 2
- 210000005036 nerve Anatomy 0.000 claims description 2
- 238000000034 method Methods 0.000 abstract description 35
- 230000008569 process Effects 0.000 abstract description 26
- 206010025421 Macule Diseases 0.000 description 35
- 230000003287 optical effect Effects 0.000 description 34
- 210000003128 head Anatomy 0.000 description 19
- 210000001525 retina Anatomy 0.000 description 19
- 238000004458 analytical method Methods 0.000 description 15
- 238000003745 diagnosis Methods 0.000 description 12
- 230000004256 retinal image Effects 0.000 description 12
- 208000037265 diseases, disorders, signs and symptoms Diseases 0.000 description 11
- 238000013507 mapping Methods 0.000 description 11
- 201000010099 disease Diseases 0.000 description 10
- 238000010586 diagram Methods 0.000 description 9
- 238000012014 optical coherence tomography Methods 0.000 description 9
- 210000005252 bulbus oculi Anatomy 0.000 description 6
- 238000006243 chemical reaction Methods 0.000 description 6
- 230000003902 lesion Effects 0.000 description 5
- 230000000712 assembly Effects 0.000 description 4
- 238000000429 assembly Methods 0.000 description 4
- 230000000694 effects Effects 0.000 description 4
- 230000004044 response Effects 0.000 description 4
- 230000008859 change Effects 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 230000013011 mating Effects 0.000 description 3
- 208000010412 Glaucoma Diseases 0.000 description 2
- 206010064930 age-related macular degeneration Diseases 0.000 description 2
- 238000002591 computed tomography Methods 0.000 description 2
- 238000004195 computer-aided diagnosis Methods 0.000 description 2
- 210000002189 macula lutea Anatomy 0.000 description 2
- 208000002780 macular degeneration Diseases 0.000 description 2
- 230000002207 retinal effect Effects 0.000 description 2
- 101150064138 MAP1 gene Proteins 0.000 description 1
- 206010030043 Ocular hypertension Diseases 0.000 description 1
- 230000007850 degeneration Effects 0.000 description 1
- 238000007689 inspection Methods 0.000 description 1
- 231100000915 pathological change Toxicity 0.000 description 1
- 230000036285 pathological change Effects 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 238000003325 tomography Methods 0.000 description 1
- 210000001835 viscera Anatomy 0.000 description 1
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
- A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
- A61B3/14—Arrangements specially adapted for eye photography
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R21/00—Arrangements or fittings on vehicles for protecting or preventing injuries to occupants or pedestrians in case of accidents or other traffic risks
- B60R21/02—Occupant safety arrangements or fittings, e.g. crash pads
- B60R21/12—Occupant safety arrangements or fittings, e.g. crash pads which protect the occupants against personal attack from the inside or the outside of the vehicle
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
- A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
- A61B3/102—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for optical coherence tomography [OCT]
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60N—SEATS SPECIALLY ADAPTED FOR VEHICLES; VEHICLE PASSENGER ACCOMMODATION NOT OTHERWISE PROVIDED FOR
- B60N2/00—Seats specially adapted for vehicles; Arrangement or mounting of seats in vehicles
- B60N2/24—Seats specially adapted for vehicles; Arrangement or mounting of seats in vehicles for particular purposes or particular vehicles
- B60N2/42—Seats specially adapted for vehicles; Arrangement or mounting of seats in vehicles for particular purposes or particular vehicles the seat constructed to protect the occupant from the effect of abnormal g-forces, e.g. crash or safety seats
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R21/00—Arrangements or fittings on vehicles for protecting or preventing injuries to occupants or pedestrians in case of accidents or other traffic risks
- B60R21/02—Occupant safety arrangements or fittings, e.g. crash pads
- B60R21/026—Rigid partitions inside vehicles, e.g. between passengers and load compartments
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0012—Biomedical image inspection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
- G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R21/00—Arrangements or fittings on vehicles for protecting or preventing injuries to occupants or pedestrians in case of accidents or other traffic risks
- B60R21/02—Occupant safety arrangements or fittings, e.g. crash pads
- B60R2021/0206—Self-supporting restraint systems, e.g. restraining arms, plates or the like
- B60R2021/022—Self-supporting restraint systems, e.g. restraining arms, plates or the like mounted on seats
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10072—Tomographic images
- G06T2207/10101—Optical tomography; Optical coherence tomography [OCT]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
- G06T2207/30041—Eye; Retina; Ophthalmic
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Physics & Mathematics (AREA)
- General Health & Medical Sciences (AREA)
- Medical Informatics (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Radiology & Medical Imaging (AREA)
- Heart & Thoracic Surgery (AREA)
- Public Health (AREA)
- Ophthalmology & Optometry (AREA)
- Molecular Biology (AREA)
- Surgery (AREA)
- Animal Behavior & Ethology (AREA)
- Biophysics (AREA)
- Biomedical Technology (AREA)
- Veterinary Medicine (AREA)
- Mechanical Engineering (AREA)
- Quality & Reliability (AREA)
- Transportation (AREA)
- Aviation & Aerospace Engineering (AREA)
- Eye Examination Apparatus (AREA)
Abstract
本发明涉及一种图像处理设备和图像处理方法。为了确保使被检眼的眼底图像和断层图像上的关注区域以彼此相对应的方式进行显示,对被检眼的图像进行处理的图像处理设备包括:用于获取被检眼的眼底图像的单元;用于在该眼底图像上指定任意点的单元;用于获取被检眼的断层图像的单元;用于计算该断层图像上与该任意点相对应的点;以及用于基于该任意点和相应点的位置、来对用于将断层图像和眼底图像彼此相关联地进行显示的坐标系进行转换的单元。
Description
技术领域
本发明涉及一种用于辅助对眼睛的图像进行图像处理的图像处理技术,尤其涉及用于使用眼睛的断层图像来进行图像处理的图像处理设备、图像处理方法和程序。
背景技术
诸如光学相干断层成像(OCT)装置等的眼科断层图像摄像装置使得能够对视网膜的内部状态进行三维观察。近年来,由于该眼科断层图像摄像装置具有适当地诊断疾病的能力,因而该眼科断层图像摄像装置变得受欢迎。OCT断层信息的量巨大,因此逐条检查该断层信息导致效率非常低。为了减轻医生对基于OCT诊断的负担,因此要求建立计算机辅助诊断(CAD)技术。例如,日本特开2011-110158说明了如下内容:在眼底图像的两点处检测该眼底图像上的特征量,基于这两点来确定投影图像的基准坐标系,并且将该基准坐标系转换成显示坐标系以显示与该显示坐标系相对应的投影图像。日本特开2011-110158提出了如下方案:根据显示坐标系来显示OCT分析结果。
然而,日本特开2011-110158并没有说明在显示眼底图像和断层图像时所进行的处理。通常,断层图像被展开并以二维方式进行显示。因此,在断层图像和眼底图像以相应的一个点作为基准进行显示的情况下,在基准坐标系的原点处断层图像和眼底图像彼此相匹配,但是随着相对于基准坐标系的原点的距离越长,偏移量变得越大。参考图16A~16C的示意图来说明该现象。图16A示出眼底图像。任意点1401位于眼底图像上垂直延伸且穿过该眼底图像的大致中心的线上。任意点1402位于存在于该线上的黄斑内。任意点1403是存在于该线上的乳头部的点。距离1404和距离1405分别是从任意点1402到任意点1401的垂直距离以及从任意点1402到任意点1403的垂直距离。图16B示出与眼底的包含点1401、1402和1403的该线相对应的眼睛的断面图。图16C示出针对同一垂直线的、基于OCT测量所获取的断层图像。该OCT断层图像通常被展开并以任意点1402作为基准点(即原点)来二维地进行显示。距离1406表示断层图像上的实际任意点1401相对于眼底图像上的任意点1401的偏移量。距离1407表示断层图像上的实际任意点1403相对于眼底图像上的任意点1403的偏移量。随着相对于显示基准点的距离1404和1405越长,眼底图像和断层图像之间的偏移越大。
因此,在关注点(例如,疑似病变的点)是基准点以外的点的情况下,检查者通过参考断层图像和眼底图像彼此不匹配的画面来执行诊断。这使得难以支持各种疾病的诊断,并且阻碍了迅速诊断。
发明内容
为了克服上述问题,做出了本发明。
为了解决上述问题,根据本发明的典型实施例,提供了一种图像处理设备,包括:眼底图像获取单元,用于获取被检眼的眼底图像;指定单元,用于在所述眼底图像上指定至少两个任意点;矢量计算单元,用于计算所述至少两个任意点中的第一任意点和第二任意点之间所形成的矢量;坐标计算单元,用于计算将所述矢量设置为一个轴并将所述第一任意点设置为原点的坐标系;断层图像获取单元,用于获取所述被检眼的断层图像;确定单元,用于确定所述断层图像上与所述眼底图像中的所述第一任意点相对应的点;偏移量计算单元,用于计算所述眼底图像上的所述第二任意点的位置和所述断层图像上的相应点的位置之间的偏移量;以及转换单元,用于基于所述偏移量,以使所述眼底图像上的所述第一任意点和所述第二任意点与所述断层图像上的相应点相一致的方式来对所述断层图像进行转换。
为了解决上述问题,根据本发明的典型实施例,提供了一种图像处理方法,包括如下步骤:获取被检眼的眼底图像;在所述眼底图像上指定任意点;获取所述被检眼的断层图像;计算所述断层图像上与所述任意点相对应的点;以及基于所述任意点以及与所述任意点相对应的所述点的位置来对用于将所述断层图像和所述眼底图像彼此相关联地进行显示的坐标系进行转换。
根据本发明的另一典型实施例,提供了一种图像处理方法,包括如下步骤:获取被检眼的眼底图像;在所述眼底图像上指定至少两个任意点;计算所述至少两个任意点中的第一任意点和第二任意点之间所形成的矢量;计算将所述矢量设置为一个轴并将所述第一任意点设置为原点的坐标系;获取所述被检眼的断层图像;确定所述断层图像上与所述眼底图像的所述原点相对应的点;计算所述眼底图像上的所述第二任意点的位置和所述断层图像上的相应点的位置之间的偏移量;以及基于所述偏移量,以使所述眼底图像上的所述第一任意点和所述第二任意点与所述断层图像上的相应点相一致的方式来对所述断层图像进行转换。
根据本发明的另一典型实施例,提供了一种用于存储程序的介质,其中该程序在计算机上运行时,使所述计算机执行上述的图像处理方法的各步骤。
根据本发明的图像处理设备、图像处理方法和程序期望提供以下效果。
通过执行根据本发明的图像处理,可以根据关注区域(例如,疑似病变部位)来改变断层图像和眼底图像彼此相匹配的基点,以使得可以迅速地诊断各种疾病。
通过以下参考附图对典型实施例的说明,本发明的其它特征将变得明显。
附图说明
图1是示出根据本发明第一实施例的图像处理设备的结构的框图。
图2是示出根据本发明第一实施例的图像处理的程序流程的流程图。
图3A、3B和3C是示出根据第一实施例的图像处理中所执行的视网膜图像分析和视网膜坐标计算的操作的图。
图4A、4B和4C是示出根据第一实施例的图像处理中所执行的视网膜坐标计算和显示基准设置的操作的图。
图5A和5B是例示出根据第一实施例的要显示在监视器上的图像的图。
图6A和6B是示出在显示被检眼时将正常眼与该被检眼并排进行显示的示例的图。
图7A和7B是例示出将以图6A和6B的方式所显示的图像进行镜像反转的情况的图。
图8是示出根据本发明第二实施例的图像处理的程序流程的流程图。
图9A、9B和9C是示出根据第二实施例的图像处理中所执行的视网膜图像分析和视网膜坐标计算的操作的图。
图10A、10B和10C是示出根据第二实施例的图像处理中所执行的视网膜坐标计算和显示基准设置的操作的图。
图11A和11B是例示出根据第二实施例的要显示在监视器上的图像的图。
图12是示出根据本发明第三实施例的图像处理的程序流程的流程图。
图13A、13B和13C是示出根据第三实施例的图像处理中所执行的视网膜图像分析和视网膜坐标计算的操作的图。
图14A、14B和14C是示出根据第三实施例的图像处理中所执行的视网膜坐标计算和显示基准设置的操作的图。
图15A和15B是例示出根据第三实施例的要显示在监视器上的图像的图。
图16A、16B和16C是示意性示出根据背景技术所获取的眼底图像和视网膜断层图像之间的关系的图。
图17是示出根据本发明另一实施例的同时显示左眼和右眼时的监视画面的示例的图。
图18是示出在图17所示的显示上移动断层显示的指定位置时的显示示例的图。
具体实施方式
以下说明本发明的典型实施例。
第一实施例
参考图1和2来说明根据本发明第一实施例的图像处理设备和图像处理的结构以及程序。图1是示出用于实际执行图像处理的根据第一实施例的图像处理设备的框图。
根据第一实施例的眼底/断层图像摄像装置101拍摄眼底图像和眼睛的断层图像。利用像电荷耦合器件图像传感器(CCD)(未示出)那样的固态摄像装置或扫描激光检眼镜(SLO)等的结构来拍摄该眼底图像。根据第一实施例,利用例如时域OCT装置或傅立叶域OCT装置来获取眼睛的断层图像。根据该结构,利用半透半反镜等来对被检眼(未示出)的光路进行分割,以使得能够对眼底图像和眼睛的断层图像进行同时观察和分析,并且将眼底图像、断层图像和分析结果形成为数据。
数据服务器102保持与被检眼的眼底图像和断层图像以及被检眼的图像的特性有关的数据。也就是说,数据服务器102存储如下内容:从眼底/断层图像摄像装置101输出的被检眼的眼底图像或断层图像;从图像处理部103输出的分析结果;以及眼底和视网膜基准坐标系。数据服务器102响应于来自图像处理部103的请求,将与被检眼有关的过去的数据和与正常眼有关的数据发送至图像处理部103。
图像处理部103包括数据输入/输出部105、眼底图像获取部107、视网膜图像获取部108、视网膜坐标计算部109、存储部106、视网膜图像分析部110、显示控制部111以及命令获取部112。图像处理部103经由局域网(LAN)104连接至数据服务器102和眼底/断层图像摄像装置101。图像处理部103也可以经由USB和IEEE1394等连接至数据服务器102和眼底/断层图像摄像装置101。
视网膜图像分析部110确定图3B的三维断层图像中的眼球的半径r和中心点O的坐标。原点302与眼球的中心O对准。接着,从图3A的眼底图像中与根据本发明的特征点相对应的指定点301的x和y坐标值(眼底上的指定点)来计算指定点301的三维断层图像上的坐标(x,y,z)。数据输入/输出部105用作图像处理部103与数据服务器102或眼底/断层图像摄像装置101之间的数据输入/输出用的接口部。眼底图像获取部107获取经由LAN104从眼底/断层图像摄像装置101发送至数据输入/输出部105的眼底图像数据。然后,眼底图像获取部107对眼底的特征点进行分析,并将坐标转换成显示坐标系,并且将所获得的结果数据发送至存储部106。根据本发明,用于获取眼底图像的眼底/断层图像摄像装置101和眼底图像获取部107等对应于用于获取被检眼的眼底图像的部件或单元。此外,根据本发明,用于获取断层图像的眼底/断层图像摄像装置101和视网膜图像获取部108等对应于用于获取被检眼的断层图像的部件或单元。
操作部113是能够用于指出可能为(稍后说明的)监视器114上所显示的眼底图像的病变部的任意点的指示装置。也就是说,操作部113用作根据本发明的用于指定眼底图像上的任意点或两个任意点的单元。操作部113的示例是安装在监视器114上的触摸面板或鼠标,但本发明并不局限于此。操作部113可以是能够指定监视器114上的眼底图像的任意位置或任意点的任何装置。当操作部113输入了眼底上的任意点时,命令获取部112将监视器114上所输入的任意点转换成眼底图像的坐标,并且将坐标数据发送至存储部106。
将眼底/断层图像摄像装置101所获取的眼底图像和断层图像以及图像处理部103分析得到的图像信息转换成显示坐标系,以在监视器114上进行显示。视网膜图像获取部108获取经由LAN104从眼底/断层图像摄像装置101发送至数据输入/输出部105的被检眼的断层图像数据。视网膜坐标计算部109进行如下处理:根据视网膜图像获取部108所获取的断层图像数据来计算要诊断的特征点或任意点的三维数据以及眼睛的半径信息等,并且将所计算出的信息转换成显示坐标系。将转换成显示坐标系的断层图像数据传送至存储部106。
存储部106还用作用以将眼底图像的坐标与断层图像的坐标相关联的处理部。存储部106使所指定的眼底图像的任意点和断层图像上与该任意点相对应的位置彼此相关联地显示在监视器114上。
图2示出图像处理部103和上述的一些其它组件所执行的程序的流程。步骤S201是图像处理程序的流程的开始。在步骤S202中,眼底/断层图像摄像装置101获取被检眼的眼底图像。然后,以图3A~3C的黄斑部302作为原点来计算二维XY坐标系,并且在以该原点作为基准坐标的原点的情况下将二维XY坐标系发送至存储部106。利用眼底图像获取部107执行这些处理。
此外,在步骤S203中,眼底/断层图像摄像装置101获取被检眼的断层图像。在步骤S204中,将眼底图像上需要进行诊断的部位的坐标指定为任意点。将该操作作为上述操作部113对任意点的指定等来执行。
在步骤S205中,判断是否输入了眼底图像上的该任意点的坐标。在不存在坐标的输入的情况下,流程返回至步骤S204以等待坐标的输入。在输入了坐标的情况下,流程进入下一步骤S206。在步骤S206中,在眼底图像的分析期间,计算之前所确定的原点在稍后说明的断层图像内的视网膜上的三维坐标。参考图3A~3C来说明该处理。确定图3B所示的断面图中的眼球的半径r和眼球内的中心点O,并且进行针对断层图像所设置的三维坐标系中的上述原点和中心点之间的对应。此外,计算与针对眼底图像所设置的XY坐标相一致的基准坐标(x,y,z)。根据本发明的用于计算断层图像上与眼底图像上的任意点相对应的点的上述处理是通过构成了用于计算该相应点的部件或单元的视网膜图像分析部110和其它组件所执行的。可以根据断层图像的曲率来确定中心点O。
在步骤S207中,根据所计算出的眼底上的基准坐标来计算图3B所示的断层图像上的任意点301的三维坐标。接着,确定三维基准坐标(x,y,z)中从断层图像的原点302到任意点301的视网膜上的展开距离(rθ)。然后,计算所确定的展开距离和针对任意点301的眼底图像所设置的XY坐标系中的Y轴方向的从原点302到任意点301的距离之间的差。所确定的差表示眼底图像上的任意点与断层图像上的对应于前述任意点的任意点相关联地进行显示时的偏移量303。
在步骤S208中,考虑到该偏移量303,将三维坐标系的坐标以所指定的眼底图像上的任意点301的坐标与断层图像上的相应点的坐标相匹配的方式转换成显示坐标系。这用来代替与断层图像上的原点相匹配的眼底图像上的原点的坐标。结果,如图4A~4C所示,将上述三维坐标系中的坐标以眼底图像上的任意点301与断层图像上的任意点301相匹配的方式转换成显示坐标系。在该姿势中,在眼底图像的原点O和断层图像上的黄斑部302的中心之间存在图4C中的303所标记的偏移。这些坐标转换是利用根据本发明的用作如下单元的显示控制部111和一些其它组件所执行的,其中该单元用于基于任意点以及与该任意点相对应的点的位置来对用于将断层图像和眼底图像彼此相关联地进行显示的坐标系进行转换。
在步骤S209中,对使用步骤S208中所计算出的显示坐标系获取为断层图像的数据进行显示。在步骤S209中,例如如图5A和5B所示,在显示部(未示出)上显示眼底图像和断层图像。当在上述流程中两个眼睛是检查对象时,如图5A和5B所示,进行显示以使得两个眼睛彼此相关联并且眼底图像上的指定任意点或特征点与断层图像上的相应点相关联。
图3A~3C和图4A~4C示出年龄相关黄斑变性的眼底图像和断层图像的示例。根据本发明,可以根据关注区域(例如,疑似病变部位)来改变用于将断层图像与眼底图像相匹配的基点,以使得可以支持各种疾病的诊断并且可以实现迅速的诊断。由于根据本发明可以精确地测量黄斑周围的视网膜的厚度,因而通过准备高清晰的厚度映射来减少相对于眼底图像的偏移。图5A和5B示出将具有图3A~3C所示的年龄相关黄斑变性疾病的眼睛的被检者的双眼的眼底图像和断层图像例如显示在监视器114上的示例。在本实施例中,对于图2所示的程序流程所获取的双眼的图像,如图5A和5B所示,将左眼和右眼的黄斑部302和402以及任意点301和401排列在一条直线上并且配置为对称显示。通过显示控制部111来执行伴随有该显示的诸如双眼的图像配置等的操作。根据本实施例,即使在显示双眼的情况下,也可以在分析视网膜的厚度时使指定点和断层图像彼此相关联并使右眼和左眼的特征点彼此相关联的情况下显示图像,由此实现眼睛的容易的比较以及快速的诊断。
存在如下情况:在显示眼底图像和断层图像时,例如并排显示被检眼的多个图像以及比较用的正常眼的多个图像。在这种情况下,考虑到检查的容易性,优选将被检眼的图像和正常眼的图像其中任一进行反转显示。参考图6A和6B以及图7A和7B来说明表示图像的这种镜像反转显示的情况。图7A示出将图6A的眼底图像和断层图像显示为镜像反转图像的示例。图6A示出正常右眼的眼底图像和断层图像。该显示数据表示图1的数据服务器102中所存储的正常眼数据以用于青光眼的诊断。图6B和7B示出与图6A的人不同的疑似具有青光眼的同一人物的左眼。图6A和6B的将左眼和右眼相互比较的显示在进行眼睛的同等部分的比较时并非是理想的。为了解决该问题,在经由用户接口(未示出)输出用以对正常眼的显示进行镜像反转的命令的情况下,如图7A所示对图6A的显示进行镜像反转。在呈现图7A和7B的显示的情况下,就像显示同侧的眼底图像和断层图像那样可以进行图像的比较,由此便于相互比较示出了疑似青光眼的眼底图像和断层图像。这使得诊断效率良好。另外,与仅一个正常眼有关的数据足以作为正常眼数据(即,无需存储正常左眼和正常右眼这两者,这是因为在可进行镜像反转时,一个眼睛可以与两个眼睛相比较),以使得可以节省图1的数据服务器102的容量。响应于从操作部113输出至显示控制部111的用以对显示进行镜像反转的命令来执行实际操作,并且显示控制部111响应于该命令而电子地反转正常眼的显示。尽管根据本实施例反转了正常眼,但也可以反转被检眼。此外,优选地,显示多个一侧的眼睛(被检眼)并且以并排方式同时显示分别与一侧的眼睛相对应的正常眼的图像。显示控制部111用作根据本发明的用于在进行比较时以镜像反转方式显示多个一侧的眼睛的部件或单元。
第二实施例
在本发明第二实施例的以下说明中,指定两个任意点来示出断层图像和眼底图像之间的对应关系。由于示出设备的结构的框图与第一实施例的框图相同,因而这里省略对该框图的说明。第二实施例与第一实施例的不同之处在于如图8所示的图像处理程序的流程。以下说明该程序流程。
步骤S601是该图像处理程序的流程的开始。在步骤S602中,眼底/断层图像摄像装置101获取被检眼的断层图像。然后,在将图9A和9B的黄斑部703取为原点O的情况下来计算二维XY坐标系,并且在以该原点作为基准坐标的原点的情况下将二维XY坐标系发送至存储部106。利用眼底图像获取部107执行这些处理。
在步骤S603中,眼底/断层图像摄像装置101获取被检眼的断层图像。由于步骤S602和S603中所执行的操作与根据上述第一实施例的步骤S202和S203中所执行的操作相同,因而省略了针对这些操作的详细说明。
在接下来的步骤S605中,将0给出为计数器变量N的值。在步骤S606中,将眼底图像上要诊断的部位的特征点的坐标指定为任意点。在步骤S607中,判断是否输入了该任意点的坐标。由于步骤S606和S607中要执行的处理与根据上述第一实施例的步骤S204和S205中所执行的处理相同,因而这里省略针对这些处理的说明。
在步骤S607中判断为输入了该任意点的坐标的情况下,流程进入步骤S608,以使计数器变量N增加“1”。重复步骤S606~S609的处理序列,直到步骤S609中计数器变量N变为“2”为止。在计数器变量N变为“2”的情况下,流程进入步骤S610。
参考图9A~9C来说明步骤S610中所执行的处理。图9A示出被检眼的眼底图像,图9B示出被检眼的眼球的断面,并且图9C示出被检眼的断层图像。第一任意点701具有被指定为表示针对眼底图像所设置的XY坐标系中要诊断的部位的特征点的坐标(x1,y1,z1)。第二任意点702具有与第一任意点701不同的被指定为特征点的坐标(x2,y2,z2)。将黄斑部703指定为XY坐标系中的原点或基准坐标。图9B利用相同附图标记示出作为投影在视网膜上的点的第一任意点701和第二任意点702在眼底上的坐标。图9C是示出将眼底图像上的黄斑部703和眼球上的黄斑部703彼此相关联的展开断层图像的图。
在步骤S610中,确定图9B所示的断面图中眼球的半径r和眼球内的中心点O,然后进行针对该断层图像所设置的三维坐标中上述原点和中心点之间的对应。此外,计算与针对眼底图像所设置的XY坐标相匹配的基准坐标(x,y,z)。另外,计算基准坐标中的第一任意点701的坐标(x1,y1,z1)和第二任意点702的坐标(x2,y2,z2)。
在步骤S611中,当在眼底图像上的原点和断层图像上的基准坐标的原点之间找到对应关系时,计算断层图像上的第一任意点701和眼底图像上的第一任意点701之间的第一偏移量704以及断层图像上的第二任意点702和眼底图像上的第二任意点702之间的第二偏移量705。通过如下操作来确定第一偏移量704:首先考虑图9C中的断层图像并且计算作为从三维坐标的原点线到第一指定点(x1,y1,z1)701的距离的“视网膜展开距离”(rθ1),然后考虑图9A中的眼底图像并且从该视网膜展开距离rθ1减去XY坐标系的Y方向的坐标值y1。同样,将第二偏移量705确定为如下距离,其中该距离是通过计算到第二指定点(x2,y2,z2)的视网膜展开距离(rθ2)、并且从该视网膜展开距离rθ2减去Y方向的坐标值y2所获得的距离。
在步骤S612中,基于步骤S611中计算出的第一偏移量704和第二偏移量705,将断层图像的坐标转换成显示坐标系,以使得在断层图像上的第一指定点701和第二指定点702与眼底图像上的第一任意点701和第二任意点702之间进行对应。参考图10A~10C来说明该步骤S612中的操作。图10A和10B分别对应于图9A和9B,并且图10C示出显示坐标系上的断层图像。将图10C中的第一点802显示为与图9C的第一任意点701(x1,y1,z1)相对应的位置。将第二点803显示为与第二任意点702(x2,y2,z2)相对应的位置。在将显示图9C的断层图像所使用的显示坐标系改变为显示图10C的断层图像所使用的显示坐标系的情况下,只要将图9B的断层图像的θ坐标系与以下系数相乘以进行转换就足够了。
区间0≤y≤y1的系数:y1/rθ1
区间y2≤y≤0的系数:y2/rθ2
尽管步骤S602~S612的操作已经说明了获取左眼的图像的情况,但同时对右眼的图像也进行同样的处理。在步骤S613中,将步骤S612中转换得到的数据显示在监视器114上。实际上,如图11A和11B所例示那样来显示双眼的断层图像和眼底图像。更具体地,对于图8所示的程序流程所获取的双眼的图像,将左眼的黄斑部703、第一任意点701和第二任意点702以及右眼的黄斑部903、第一任意点901和第二任意点902配置为排列在一条直线上并进行对称显示。通过显示控制部111来执行伴随有显示的与双眼的图像配置等有关的操作。根据第二实施例,如附图所示,断层图像可以以没有实现如第一实施例所例示那样的精确位置匹配的方式进行显示,但确保了从基准点(上述原点)的黄斑部到坐标值y1或y2的区间与眼底图像的各部位相对应。图11A在左眼的眼底图像下方示出断层图像,其中断层图像的黄斑部703与眼底图像的黄斑部703相对准,位置802与眼底图像的任意点701相对应,并且位置801与眼底图像的任意点702相对应。图11B在眼底图像下方示出断层图像,其中黄斑部905与眼底图像的黄斑部903相对应,并且位置906和904分别与眼底位置902和901相对应。
根据第二实施例,如上所述,可以将特定任意区间的眼底的状态和视网膜的厚度彼此相关联,以使得能够对黄斑部和乳头部周围的视网膜的厚度进行不对称分析,这在诊断青光眼和黄斑变性等时是有效的。根据第二实施例,可以根据关注区域(例如,疑似病变部位)来改变用于将断层图像与眼底图像相匹配的基点,以使得可以支持各种疾病的诊断并且可以实现迅速诊断。
尽管第二实施例已经说明了指定两个任意点的情况,但本发明并不局限于此,并且可以将第二实施例应用于指定三个以上任意点的情况。
第三实施例
在本发明的第三实施例中,提取任意点的坐标作为眼底上的特征点,并且使用这些任意点进行断层图像和眼底图像之间的对应。由于示出设备的结构的框图与第一实施例的图1的框图相同,因而这里省略对该框图的说明。第三实施例与第一实施例的不同之处在于图12所示的程序流程。以下说明该程序流程。
步骤S1001是图像处理部103和其它所涉及的组件所执行的程序流程的开始。在步骤S1002中,眼底/断层图像摄像装置101获取被检眼的眼底图像。在步骤S1003中,从步骤S1002中所获取的眼底图像中提取任意点,经由以下要说明的操作来计算矢量,并且在被检眼的眼底图像上建立XY坐标系。
参考图13A~13C来说明上述操作的具体过程。根据本实施例,第一任意点1101表示黄斑部,并且第二任意点1102表示乳头部。首先,定义从第二任意点(乳头部)1102沿着第一任意点(黄斑部)1101的方向延伸的矢量(以下称为“Y方向矢量”)。接着,将从第一特征点1101与Y方向矢量垂直延伸的方向矢量定义为“X方向矢量”。然后,建立以第一任意点1101作为原点的XY基准坐标系。利用眼底图像获取部107将与所建立的基准坐标系有关的信息发送至存储部106。也就是说,根据第三实施例,操作部103用作用于在眼底图像上指定2个任意点的部件或单元,并且眼底图像获取部107用作用于计算这两个任意点之间所形成的矢量的部件或单元。此外,眼底图像获取部107用作用于计算以该矢量被设置为一个轴并且两个任意点其中之一被设置为原点的坐标系的部件或单元。
在图13A的眼底图像上,将第一任意点1101的坐标设置为(x1,y1),并且将第二任意点1102的坐标设置为(x2,y2)。在接下来的步骤S1003中,眼底/断层图像摄像装置101获取被检眼的断层图像。在步骤S1004中,根据步骤S1003中所获取的断层图像来计算眼球的半径r,并且还根据步骤S1002中所计算出的第一任意点1101和第二任意点1102的坐标来计算图13B所示的Z方向坐标。通过上述过程,计算与黄斑部相对应的第一任意点1101和与乳头部相对应的第二任意点1102在三维坐标系中的坐标。
在步骤S1005中,在眼底的第二任意点1102的坐标与被检眼断面的三维坐标系统中的第二任意点1102在被展开为断层图像时的位置的坐标之间,计算偏移量1103。为了确定偏移量1103,计算从第一任意点1101在三维坐标系中的坐标到第二任意点1102在三维坐标系中的坐标之间的视网膜展开距离(rθ1)。将该偏移量1103确定为如下距离,其中该距离是通过从视网膜展开距离(rθ1)减去作为眼底图像上的XY坐标系中的第二任意点1102的Y方向坐标值的y2所获得的距离。上述操作是通过视网膜图像分析部110和一些组件所执行的,其中视网膜图像分析部110和一些组件用作根据第三实施例的用于将坐标系的原点与断层图像上的相应任意点相匹配的部件或单元以及用于计算未进行匹配的任意点在眼底图像上的位置与该相应任意点在断层图像上的位置之间的偏移量的部件或单元。
在步骤S1006中,基于步骤S1005所计算出的偏移量1103来将断层图像的坐标转换成显示坐标系,以使得在以黄斑部或第一任意点作为坐标的基点的情况下,在图13A的眼底图像上的第二任意点1102和所展开断层图像上的第二任意点1102之间进行对应。参考14A~14C来说明该操作。第二任意点1102的坐标表示与(x2,y2,z2)相对应的位置,并且第一任意点1101的坐标表示与(x1,y1,z1)相对应的位置。为了改变显示坐标系以进行XY坐标系中的相应任意点之间的对应,只要将图14B所示的断层图像的θ坐标系与以下系数相乘以进行转换就足够了。
区间y2≤y≤y1的系数:y1/rθ1
上述操作是利用用作如下部件或单元的显示控制部111和一些其它组件所执行的,其中该部件或单元用于基于偏移量来转换断层图像以使得眼底图像上的两个任意点与相应断层图像上的两个相应点相匹配。
尽管步骤S1002~步骤S1006的操作已说明了用于获取左眼的图像的情况,但同时对右眼的图像也进行同样的处理。在步骤S1007中,将步骤S1006中转换得到的数据显示在显示器114上。实际上,如图15A和15B所例示那样,可以显示双眼的断层图像和眼底图像。更具体地,对于图12所示的程序流程所获取的双眼的图像,将左眼的与第一任意点相对应的黄斑部1101和与第二任意点相对应的乳头部1102以及右眼的与第一任意点相对应的黄斑部1301和与第二任意点相对应的乳头部1302配置为排列在一条直线上并进行对称显示。以这样方式对被检眼的眼底图像和断层图像的显示提供了黄斑部1101和乳头部1102的眼底与视网膜厚度之间的对应关系。黄斑部1101和乳头部1102的视网膜厚度在诊断初期的青光眼时是有效的。根据第三实施例,可以根据关注区域(例如,疑似病变部位)来改变用于将断层图像与眼底图像相匹配的基点,以使得可以支持各种疾病的诊断并且可以实现迅速诊断。
其它实施例
本发明并不局限于上述实施例,并且可以在不背离本发明的范围的情况下以各种其它形式进行修改和改变。例如,上述实施例已说明了被检物是眼睛的情况,但本发明还可以应用于眼睛以外的诸如皮肤或其它脏器等的其它被检物。
此外,如上述实施例那样,在将左眼或右眼的眼底图像和断层图像如图5A和5B所示那样显示在显示部(未示出)上的情况下,当检查者例如利用诸如鼠标等的操作单元移动了指定点301时,显示控制部111根据该指定点301的移动来改变要显示在显示部上的断层图像。具体地,在通过拖动或转动鼠标滚轮移动了指定点301的情况下,基于移动后的指定点301来进行图2的步骤S206~S209的操作。换句话说,指定点301的移动使得显示控制部111将移动后的指定点301的位置处的断层图像顺次显示在显示部上。对于指定点401移动的情况也同样如此。
这样,除了上述实施例所提供的效果以外,还可以顺次显示断层图像,由此确保了更快速的诊断。
可以将顺次显示断层图像的示例应用于显示左眼和右眼的眼底图像和断层图像的情况。也就是说,在如图5A和5B所示那样在显示部上显示左眼和右眼的眼底图像和断层图像的情况下,指定点401可以与指定点301的移动同时移动,并且显示控制部111可以将与指定点301和401的位置相对应的断层图像顺次显示在显示部上。这样,指定点301和401表示眼底图像上的同一位置,并且显示该同一位置的左眼和右眼的断层图像。注意,术语“同一”是包括精确匹配的情况和大致匹配的情况的概念性术语。此外,指定点401与指定点301的移动同时移动,因而图像处理部103需要例如预先掌握左眼的眼底图像和右眼的眼底图像之间的对应关系。为了进行同一眼的时变观察,可以显示同一眼的不同日期和时间的断层图像而并非显示左眼和右眼这两者的断层图像。
除了上述实施例所提供的效果以外,该变形例还可以确保同一位置的左眼和右眼的断层图像的比较,由此确保了更快速的诊断。
以下说明了如下模式的示例,其中在该模式中,在用于同时显示左眼和右眼的模式期间,在一个眼睛的断层图像的指定位置移动的情况下,响应于该眼睛的断层图像位置的移动也移动了另一眼睛的断层图像的指定位置。尽管本实施例的以下说明给出了代替上述指定点301和401而移动眼底图像中的指定线的情况,但与指定点或指定线有关的模式并不局限于该示例。
图17示出将左眼和右眼的眼底图像及其厚度映射等同时显示在监视器114上的情况。更具体地,以下说明了将左眼和右眼这两者的断面进行比较的实施例。该断面比较涉及了神经纤维层(NFL)、神经节细胞层(GCL)和内丛状层(IPL)的总厚度的映射。
图17示出监视器114的画面显示,并且示出右眼的眼底图像12、右眼的乳头部34、右眼的黄斑部35、左眼的眼底图像14、左眼的乳头部36、以及左眼的黄斑部37。
映射1表示右眼的NFL、GCL和IPL的总厚度映射。以下将NFL、GCL和IPL的总厚度映射称为“NFL+GCL+IPL厚度映射”。图表11表示由穿过两个同心圆的中心的两条线在这两个圆内进行四等分的右眼的NFL+GCL+IPL厚度映射图表。这些线彼此呈直角相交叉。NFL+GCL+IPL厚度映射图表11的圆中心被配置在黄斑部的中心处。将对两个同心圆进行四等分的两条线其中之一配置为与穿过黄斑部35和乳头部34的中心的线相重叠。因此,NFL+GCL+IPL厚度映射图表11被分割成为8个区域2、5、10、7、8、9、3和6。基准灰度浓淡条38以灰度浓淡来表示NFL+GCL+IPL厚度。0μm~250μm的厚度以灰度浓淡进行表示。NFL+GCL+IPL厚度映射图表11中的NFL+GCL+IPL厚度以基准灰度浓淡条的灰度浓淡进行显示。部分20示出NFL+GCL+IPL厚度映射图表的8个分割区域各自的NFL+GCL+IPL厚度的平均值。区域26与区域2相对应。区域27与区域5相对应。区域21与区域10相对应。区域24与区域7相对应。区域25与区域6相对应。区域28与区域3相对应。区域22与区域9相对应。区域23与区域8相对应。
部分29在其上半部分示出区域25、26、27和28的NFL+GCL+IPL厚度的平均值,并且在其下半部分示出区域21、22、23和24的NFL+GCL+IPL厚度的平均值。部分30示出所有区域25、26、27、28、21、22、23和24的NFL+GCL+IPL厚度的平均值。
人眼相对于穿过黄斑部的中心和乳头部的中心的线具有对称性。表示NFL+GCL+IPL厚度平均值的部分20的T-N水平线与穿过黄斑部的中心和乳头部的中心的线相对应。可以通过检查该映射上的眼睛的对称性来诊断右眼是否具有疾病。
箭头13表示右眼的断层图像31在眼底上的位置,并且与上述指定线相对应。箭头13与NFL+GCL+IPL厚度图表中的箭头4相同。箭头13和箭头4各自的位置可以通过指示装置(未示出)来进行移位。在利用指示装置移动了箭头13和4其中之一的情况下,将另一断面箭头移动至相同位置。
映射16表示左眼的NFL+GCL+IPL厚度映射。图表39表示由穿过两个同心圆的中心的两条线在这两个圆内进行四等分的左眼的NFL+GCL+IPL厚度映射图表。这些线彼此呈直角相交叉。NFL+GCL+IPL厚度映射图表39的圆中心被配置在黄斑部的中心处。将对两个同心圆进行四等分的两条线其中之一配置为与穿过黄斑部37和乳头部36的中心的线相重叠。因此,NFL+GCL+IPL厚度映射图表39被分割成为8个区域40、41、42、43、44、45、46和47。基准灰度浓淡条48以灰度浓淡来表示NFL+GCL+IPL厚度。0μm~250μm的厚度以灰度浓淡进行表示。NFL+GCL+IPL厚度映射图表39中的NFL+GCL+IPL厚度以基准灰度浓淡条48的灰度浓淡进行显示。部分17示出NFL+GCL+IPL厚度映射图表39的8个分割区域各自的NFL+GCL+IPL厚度的平均值。区域49、50、51、52、53、54、55和56分别与区域40、41、42、43、44、45、46和47相对应。
部分19在其上半部分示出区域49、50、51和52的NFL+GCL+IPL厚度的平均值,并且在其下半部分示出区域53、54、55和56的NFL+GCL+IPL厚度的平均值。
部分18示出所有区域49、50、51、52、53、54、55和56的NFL+GCL+IPL厚度的平均值。
人眼相对于穿过黄斑部的中心和乳头部的中心的线具有对称性。表示NFL+GCL+IPL厚度平均值的部分17的T-N线与穿过黄斑部的中心和乳头部的中心的线相对应。可以通过检查该映射上的对称性来诊断左眼是否具有疾病。
箭头15表示左眼的断层图像32在眼底上的位置。箭头15和箭头33位于眼底上的相同位置处。箭头15和箭头33各自的位置可以通过指示装置(未示出)来进行移位。在利用指示装置移动了箭头15和33其中之一的情况下,将另一断面箭头移动至相同位置。以上给出了左眼和右眼各自的说明。
已知人的双眼在解剖学上彼此呈镜像对称。可以通过比较左眼和右眼来诊断通过检查一个眼睛未能发现的疾病,因此利用左眼和右眼的镜像对称将左眼和右眼这两者相互进行比较来发现疾病是有效的。
在左眼和右眼各自的说明中,说明了表示断层图像在眼底上的断面位置的箭头13、4、15和33。在利用指示装置(未示出)移动了各箭头的情况下,将另一眼睛的断面箭头移动至上述镜像对称位置。图18示出在利用指示装置移动了用作指定线的箭头之后的监视器114上的显示。例如,如图18所示,在利用指示装置使表示右眼的断面位置的箭头4相对于黄斑部向左侧进行移动的情况下,左眼的箭头15和33也移动至相对于右眼镜像对称的位置。结果,左眼和右眼的镜像对称位置处的眼底断面可以相互进行比较。
接着,说明左眼的NFL+GCL+IPL厚度映射图表与右眼的NFL+GCL+IPL厚度映射图表的比较。由于左眼和右眼的镜像对称,因而右眼的NFL+GCL+IPL厚度映射图表11与左眼的NFL+GCL+IPL厚度映射图表39按照如下彼此相对应。
区域27、26、28和25分别与区域52、49、51和50相对应。区域24、21、23和22分别与区域53、56、54和55相对应。部分29的上部和下部分别与部分19的上部和下部相对应。部分30与部分18相对应。
如上所述,可以通过将双眼的同一位置处的断层图像相互进行比较或者将双眼的NFL+GCL+IPL厚度映射图表相互进行比较来诊断眼睛是否具有疾病。
除了同时显示左眼和右眼的例示情况以外,在将左眼和右眼的眼底图像上的同一位置处的断层图像进行比较并且一致性等于或小于预定阈值的情况下,不管指定点301或401是否移动,都可以通过显示控制部111在左侧显示一致性等于或小于预定阈值的断层图像。关于断层图像的比较,可以将全体断层图像相互进行比较,或者可以仅将与指定点301和401相对应的位置附近的断层图像相互进行比较。显示控制部111可以在显示部上进行诸如对一致性等于或小于预定阈值的断层图像的部位进行标记等的突出显示,以使得检查者可以识别左眼和右眼的断层图像的不同部位。此外,例如针对同一眼睛的时变观察,不仅可以进行左眼和右眼之间的比较,还可以进行同一眼睛的断层图像之间的比较。
除了上述实施例所提供的效果以外,该变形例使得检查者能够容易地掌握左眼和右眼的同一位置处的断层图像之间的差别,从而确保更快速的诊断。此外,仅对与指定点301和401相对应的位置附近的断层图像进行比较,这可以抑制图像处理部103的处理负荷,以使得图像处理部103可以更快速地对比较结果进行确定。由于指定点附近的位置处的断层图像是比较对象,因此检查者期望进行比较的断层图像中的部位包括在该比较对象中,由此防止了诊断质量的降低。
尽管利用诸如鼠标等的操作单元使指定点301进行移动,但本发明并不局限于此,并且指定点301可以沿着预定轨迹自动进行移动。在这种情况下,例如在按下移动开始按钮时,开始指定点301的移动。对于指定点401移动的情况也同样如此。
在眼底上指定多个点的情况下,可以将第二实施例和第三实施例应用于顺次显示断层图像的示例。
此外,本发明可以通过执行如下处理来实现,其中在该处理中,系统或设备通过网络或经由各种存储介质供给有用于实现典型实施例的上述功能的软件(程序),并且该系统或设备的计算机(或者CPU或MPU等)读取并运行该程序。
尽管已经参考典型实施例说明了本发明,但是应该理解,本发明不限于所公开的典型实施例。所附权利要求书的范围符合最宽的解释,以包含所有这类修改、等同结构和功能。
Claims (7)
1.一种图像处理设备,包括:
眼底图像获取单元,用于获取被检眼的眼底图像;
指定单元,用于在所述眼底图像上指定至少两个任意点;
矢量计算单元,用于计算所述至少两个任意点中的第一任意点和第二任意点之间所形成的矢量;
坐标计算单元,用于计算将所述矢量设置为一个轴并将所述第一任意点设置为原点的坐标系;
断层图像获取单元,用于获取所述被检眼的断层图像;
确定单元,用于确定所述断层图像上与所述眼底图像中的所述第一任意点相对应的点;
偏移量计算单元,用于计算所述眼底图像上的所述第二任意点的位置和所述断层图像上的相应点的位置之间的偏移量;以及
转换单元,用于基于所述偏移量,以使所述眼底图像上的所述第一任意点和所述第二任意点与所述断层图像上的相应点相一致的方式来对所述断层图像进行转换。
2.根据权利要求1所述的图像处理设备,其中,还包括显示单元,所述显示单元用于在显示器上与左眼和右眼各自的相对姿势相对应的位置处显示左眼的断层图像和眼底图像以及右眼的断层图像和眼底图像。
3.根据权利要求1所述的图像处理设备,其中,还包括显示单元,所述显示单元用于显示所述被检眼的镜像反转图像。
4.根据权利要求1所述的图像处理设备,其中,还包括显示单元,所述显示单元用于在右眼或左眼的图像的旁边分别显示左眼或右眼的镜像反转图像。
5.根据权利要求1所述的图像处理设备,其中,还包括显示单元,所述显示单元用于至少显示左眼和右眼的神经纤维层NFL、神经节细胞层GCL、内丛状层IPL的厚度图表NFL+GCL+IPL、即NFL+GCL+IPL厚度图表以及叠加在所述NFL+GCL+IPL厚度图表上的用于指示各个断层图像的位置的标记,
其中,在所述左眼和所述右眼中的第一眼睛的所述标记在所述NFL+GCL+IPL厚度图表中移动的情况下,所述显示单元使所述左眼和所述右眼中的第二眼睛的所述标记自动移动至所述第二眼睛中的相应位置。
6.一种图像处理方法,包括如下步骤:
获取被检眼的眼底图像;
在所述眼底图像上指定任意点;
获取所述被检眼的断层图像;
计算所述断层图像上与所述任意点相对应的点并且计算所述任意点和所述点之间的偏移量;以及
基于所述偏移量,以使所述任意点与所述点相对应的方式来对用于显示所述断层图像和所述眼底图像的坐标系进行转换。
7.一种图像处理方法,包括如下步骤:
获取被检眼的眼底图像;
在所述眼底图像上指定至少两个任意点;
计算所述至少两个任意点中的第一任意点和第二任意点之间所形成的矢量;
计算将所述矢量设置为一个轴并将所述第一任意点设置为原点的坐标系;
获取所述被检眼的断层图像;
确定所述断层图像上与所述眼底图像的所述原点相对应的点;
计算所述眼底图像上的所述第二任意点的位置和所述断层图像上的相应点的位置之间的偏移量;以及
基于所述偏移量,以使所述眼底图像上的所述第一任意点和所述第二任意点与所述断层图像上的相应点相一致的方式来对所述断层图像进行转换。
Applications Claiming Priority (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012013251 | 2012-01-25 | ||
JP2012-013251 | 2012-01-25 | ||
JP2012-190603 | 2012-08-30 | ||
JP2012190603A JP6188297B2 (ja) | 2012-01-25 | 2012-08-30 | 画像処理装置、画像処理方法およびプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
CN103222848A CN103222848A (zh) | 2013-07-31 |
CN103222848B true CN103222848B (zh) | 2016-04-06 |
Family
ID=47561429
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201310030181.8A Active CN103222848B (zh) | 2012-01-25 | 2013-01-25 | 图像处理设备和图像处理方法 |
Country Status (5)
Country | Link |
---|---|
US (1) | US9566002B2 (zh) |
EP (1) | EP2620910A3 (zh) |
JP (1) | JP6188297B2 (zh) |
KR (1) | KR101609025B1 (zh) |
CN (1) | CN103222848B (zh) |
Families Citing this family (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101644466B1 (ko) | 2012-08-30 | 2016-08-01 | 캐논 가부시끼가이샤 | 정보 처리장치 및 방법 |
JP6481250B2 (ja) * | 2013-10-29 | 2019-03-13 | 株式会社ニデック | 眼底解析装置及び眼底解析プログラム |
US9552517B2 (en) * | 2013-12-06 | 2017-01-24 | International Business Machines Corporation | Tracking eye recovery |
JP6598466B2 (ja) * | 2015-01-30 | 2019-10-30 | キヤノン株式会社 | 断層撮像装置、断層撮像方法、およびプログラム |
CN105982638B (zh) * | 2015-02-03 | 2019-05-31 | 广东福地新视野光电技术有限公司 | 多功能oct系统图像扫描范围定位方法 |
CN105989587B (zh) * | 2015-02-03 | 2020-05-19 | 重庆贝奥新视野医疗设备有限公司 | 一种多功能oct系统的自动定标方法 |
US10002446B2 (en) * | 2015-04-15 | 2018-06-19 | Canon Kabushiki Kaisha | Image processing apparatus and method of operation of the same |
JP6758825B2 (ja) * | 2015-04-15 | 2020-09-23 | キヤノン株式会社 | 画像処理装置およびその作動方法 |
JP6594033B2 (ja) | 2015-05-14 | 2019-10-23 | キヤノン株式会社 | 画像処理装置、画像処理方法及びプログラム |
JP6627342B2 (ja) * | 2015-09-04 | 2020-01-08 | 株式会社ニデック | Octモーションコントラストデータ解析装置、octモーションコントラストデータ解析プログラム。 |
JP2018057828A (ja) * | 2016-10-05 | 2018-04-12 | キヤノン株式会社 | 画像処理装置及び画像処理方法 |
EP3668368A4 (en) * | 2017-08-18 | 2021-08-18 | The General Hospital Corporation | BRILLOUIN SPECTROSCOPY AND TISSUE IMAGING SYSTEMS AND METHODS |
WO2020075345A1 (ja) | 2018-10-10 | 2020-04-16 | キヤノン株式会社 | 医用画像処理装置、医用画像処理方法及びプログラム |
KR102191631B1 (ko) * | 2018-12-18 | 2020-12-16 | 주식회사 루트로닉 | 안과용 치료장치 및 이의 제어방법 |
JP7388244B2 (ja) * | 2020-03-04 | 2023-11-29 | 株式会社ニデック | 眼科観察装置、および眼科観察プログラム |
JP7468163B2 (ja) | 2020-06-03 | 2024-04-16 | 株式会社ニデック | 眼科画像処理プログラムおよび眼科画像処理装置 |
CN113476014B (zh) * | 2021-06-02 | 2023-11-14 | 北京鹰瞳科技发展股份有限公司 | 双坐标系对应关系建立系统及方法 |
CN116309391B (zh) * | 2023-02-20 | 2023-09-05 | 依未科技(北京)有限公司 | 图像处理方法及装置、电子设备及存储介质 |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1939208A (zh) * | 2005-09-29 | 2007-04-04 | 株式会社拓普康 | 眼底观察装置、眼底图像显示装置及存储眼底观察程序的存储媒体 |
CN101040777A (zh) * | 2006-03-24 | 2007-09-26 | 株式会社拓普康 | 眼底观察装置 |
CN101040776A (zh) * | 2006-03-24 | 2007-09-26 | 株式会社拓普康 | 眼底观察装置 |
CN101204318A (zh) * | 2006-12-22 | 2008-06-25 | 株式会社拓普康 | 眼底观察装置以及眼底图像显示装置 |
JP2008154939A (ja) * | 2006-12-26 | 2008-07-10 | Topcon Corp | 光画像計測装置及び光画像計測装置を制御するプログラム |
WO2009073970A1 (en) * | 2007-12-10 | 2009-06-18 | Oti Ophthalmic Technologies Inc. | A method for performing micro-perimetry exams based on a retinal volume image and a well registered fundus image |
JP2011024842A (ja) * | 2009-07-28 | 2011-02-10 | Canon Inc | 光断層画像撮像装置 |
JP2011110158A (ja) * | 2009-11-25 | 2011-06-09 | Canon Inc | 画像処理装置、画像処理装置の制御方法及びプログラム |
Family Cites Families (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003339666A (ja) * | 2002-05-30 | 2003-12-02 | Hitachi Medical Corp | 医用画像撮像装置 |
WO2005077259A1 (en) * | 2004-02-04 | 2005-08-25 | The Johns Hopkins University | Method and apparatus for three-dimensional video-oculography |
JP4864515B2 (ja) | 2006-04-07 | 2012-02-01 | 株式会社トプコン | 眼底観察装置 |
US8194936B2 (en) * | 2008-04-25 | 2012-06-05 | University Of Iowa Research Foundation | Optimal registration of multiple deformed images using a physical model of the imaging distortion |
JP2010142428A (ja) * | 2008-12-18 | 2010-07-01 | Canon Inc | 撮影装置及び撮影方法、プログラム、記録媒体 |
JP5144579B2 (ja) * | 2009-04-02 | 2013-02-13 | 株式会社トプコン | 眼科観察装置 |
JP5478103B2 (ja) * | 2009-04-15 | 2014-04-23 | 興和株式会社 | 画像処理方法 |
JP5698465B2 (ja) * | 2010-04-22 | 2015-04-08 | キヤノン株式会社 | 眼科装置、表示制御方法及びプログラム |
JP5601613B2 (ja) * | 2010-07-05 | 2014-10-08 | 株式会社ニデック | 眼底撮影装置 |
US8801187B1 (en) * | 2010-12-23 | 2014-08-12 | Carl Zeiss Meditec, Inc. | Methods to reduce variance in OCT analysis of the macula |
JP5690193B2 (ja) * | 2011-04-18 | 2015-03-25 | 株式会社ニデック | 光断層像撮影装置 |
-
2012
- 2012-08-30 JP JP2012190603A patent/JP6188297B2/ja not_active Expired - Fee Related
-
2013
- 2013-01-17 EP EP13151717.9A patent/EP2620910A3/en not_active Withdrawn
- 2013-01-22 US US13/746,658 patent/US9566002B2/en active Active
- 2013-01-24 KR KR1020130008032A patent/KR101609025B1/ko active IP Right Grant
- 2013-01-25 CN CN201310030181.8A patent/CN103222848B/zh active Active
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1939208A (zh) * | 2005-09-29 | 2007-04-04 | 株式会社拓普康 | 眼底观察装置、眼底图像显示装置及存储眼底观察程序的存储媒体 |
CN101040777A (zh) * | 2006-03-24 | 2007-09-26 | 株式会社拓普康 | 眼底观察装置 |
CN101040776A (zh) * | 2006-03-24 | 2007-09-26 | 株式会社拓普康 | 眼底观察装置 |
CN101204318A (zh) * | 2006-12-22 | 2008-06-25 | 株式会社拓普康 | 眼底观察装置以及眼底图像显示装置 |
JP2008154939A (ja) * | 2006-12-26 | 2008-07-10 | Topcon Corp | 光画像計測装置及び光画像計測装置を制御するプログラム |
WO2009073970A1 (en) * | 2007-12-10 | 2009-06-18 | Oti Ophthalmic Technologies Inc. | A method for performing micro-perimetry exams based on a retinal volume image and a well registered fundus image |
JP2011024842A (ja) * | 2009-07-28 | 2011-02-10 | Canon Inc | 光断層画像撮像装置 |
JP2011110158A (ja) * | 2009-11-25 | 2011-06-09 | Canon Inc | 画像処理装置、画像処理装置の制御方法及びプログラム |
Also Published As
Publication number | Publication date |
---|---|
US20130188141A1 (en) | 2013-07-25 |
EP2620910A2 (en) | 2013-07-31 |
CN103222848A (zh) | 2013-07-31 |
EP2620910A3 (en) | 2017-04-12 |
KR101609025B1 (ko) | 2016-04-20 |
JP2013172941A (ja) | 2013-09-05 |
KR20130086567A (ko) | 2013-08-02 |
JP6188297B2 (ja) | 2017-08-30 |
US9566002B2 (en) | 2017-02-14 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN103222848B (zh) | 图像处理设备和图像处理方法 | |
KR101373935B1 (ko) | 안과 장치, 안과 장치의 제어 방법 및 컴퓨터 판독가능 저장 매체 | |
JP6146952B2 (ja) | 画像処理装置、画像処理方法及びプログラム。 | |
JP5733962B2 (ja) | 眼科装置、眼科装置の制御方法、及びプログラム | |
CN105011900B (zh) | 用于生成宽视场光学相干体层析图的方法和装置 | |
JP2011224264A (ja) | 断層像観察装置、表示制御方法及びプログラム | |
JP2018046959A (ja) | 眼科撮影装置 | |
JP6892234B2 (ja) | 眼科撮影装置 | |
JP6626485B2 (ja) | 情報処理装置、情報処理方法およびプログラム | |
JP6033478B2 (ja) | 眼科装置、層厚比較方法およびプログラム | |
US20210030269A1 (en) | Post-processing method to improve lso-based tracking in oct | |
JP5871890B2 (ja) | 眼科装置、層厚比較方法およびプログラム | |
JP5017491B2 (ja) | 眼科装置 | |
Zawadzki et al. | Improved representation of retinal data acquired with volumetric Fd-OCT: co-registration, visualization, and reconstruction of a large field of view | |
Xu et al. | Three dimensional optic disc visualisation from stereo images via dual registration and ocular media optical correction | |
JP6223527B2 (ja) | 眼科装置、層厚比較方法およびプログラム | |
JP2020028786A (ja) | 情報処理装置、情報処理方法およびプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant |