JP5319009B2 - Fundus image display apparatus and ophthalmologic photographing apparatus including the same. - Google Patents

Fundus image display apparatus and ophthalmologic photographing apparatus including the same. Download PDF

Info

Publication number
JP5319009B2
JP5319009B2 JP2012286544A JP2012286544A JP5319009B2 JP 5319009 B2 JP5319009 B2 JP 5319009B2 JP 2012286544 A JP2012286544 A JP 2012286544A JP 2012286544 A JP2012286544 A JP 2012286544A JP 5319009 B2 JP5319009 B2 JP 5319009B2
Authority
JP
Japan
Prior art keywords
fundus
image
light
optical system
measurement
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2012286544A
Other languages
Japanese (ja)
Other versions
JP2013056273A (en
Inventor
登輝夫 上野
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nidek Co Ltd
Original Assignee
Nidek Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nidek Co Ltd filed Critical Nidek Co Ltd
Priority to JP2012286544A priority Critical patent/JP5319009B2/en
Publication of JP2013056273A publication Critical patent/JP2013056273A/en
Application granted granted Critical
Publication of JP5319009B2 publication Critical patent/JP5319009B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Eye Examination Apparatus (AREA)

Description

本発明は、眼底画像を表示する眼底画像表示装置、及びこれを備える眼科撮影装置に関する。 The present invention relates to a fundus image display apparatus that displays a fundus image and an ophthalmologic photographing apparatus including the same.

被検眼眼底の断層画像を非侵襲で得ることができる眼科撮影装置として、低コヒーレント光を用いた光断層干渉計(Optical Coherence Tomography:OCT)が知られている。このような眼科撮影装置は、測定光を眼底に対して1次元走査させながら、光路長を変化させることにより、網膜断層画像を得ることができる。   An optical tomography (OCT) using low coherent light is known as an ophthalmologic imaging apparatus that can obtain a tomographic image of the fundus of the eye to be examined non-invasively. Such an ophthalmologic photographing apparatus can obtain a retinal tomographic image by changing the optical path length while one-dimensionally scanning the fundus with measurement light.

また、特許文献1では、上記のような被検眼眼底の断層画像を取得するOCTの光学系と、被検眼の眼底をカラー撮影するための眼底カメラの光学系と、を組み合わせた複合型の眼科撮影装置が提案されている。
特開平10−33484号公報
Further, in Patent Document 1, a combined ophthalmology in which an OCT optical system that acquires a tomographic image of the fundus of the subject's eye as described above and an optical system of a fundus camera that performs color imaging of the fundus of the subject's eye is combined. An imaging device has been proposed.
JP-A-10-33484

このようなOCT光学系と眼底カメラ光学系とを組み合せた複合型の撮影装置では、被検眼の正面眼底画像は眼底カメラ光学系を用いてカラーの画像を取得し、眼底の断面画像(断層画像)はOCT光学系を用いて取得することができる。しかしながら、これらの光学系により得られた画像は各々独立して取得されており、断面画像がカラー眼底画像上のどの部位を撮影したものであるかが判り難い。   In such a composite imaging apparatus in which an OCT optical system and a fundus camera optical system are combined, a frontal fundus image of the eye to be examined is acquired using a fundus camera optical system, and a cross-sectional image (tomographic image) of the fundus is obtained. ) Can be obtained using an OCT optical system. However, the images obtained by these optical systems are acquired independently, and it is difficult to determine which part of the color fundus image is taken by the cross-sectional image.

本発明は、上記問題点を鑑み、取得された断層画像の測定位置の確認を、所定の波長に特定した可視照明光を用いて取得された眼底正面画像上で行うことができる眼底画像表示装置、及びこれを備える眼科撮影装置を提供することを技術課題とする。 In view of the above problems, the present invention provides a fundus image display device capable of confirming a measurement position of an acquired tomographic image on a fundus front image acquired using visible illumination light specified at a predetermined wavelength. , and the object to provide an ophthalmic photographing apparatus including the same.

上記課題を解決するために、本発明は以下のような構成を備えることを特徴とする。   In order to solve the above problems, the present invention is characterized by having the following configuration.

(1)
眼底照明光学系及び眼底撮影光学系を有し所定の波長に特定した可視照明光を用いて眼底正面画像を得るための眼底画像取得手段によって予め取得された静止画像である眼底正面画像と、干渉光学系を有し光干渉の技術を用いて被検眼の眼底断層画像を得るための断層画像取得手段によって予め取得された眼底断層画像と、をディスプレイに表示させると共に、前記眼底正面画像における前記眼底断層画像の取得位置を前記眼底正面画像上に合成表示する表示制御手段を備えることを特徴とする。
(2)
(1)の眼底画像表示装置において、
前記可視照明光は、青色の照明光、赤色の照明光のいずれかである。
(3)
(1)の眼底画像表示装置において、
前記ディスプレイに表示された前記眼底正面画像上で測定位置を設定するための測定位置設定手段を有し、
前記表示制御手段は、前記測定位置設定手段によって設定された測定位置に対応する眼底断層画像を、前記断層画像取得手段によって予め取得された3次元OCT画像情報から取得し、前記ディスプレイに表示する。
(4)
(1)の眼底画像表示装置において、
記眼底画像取得手段は、眼底カメラである。
(5)
(1)の眼底画像表示装置と、
さらに、前記眼底画像取得手段と、前記断層画像取得手段と、をそれぞれ備える光学系を有する。
(1)
Interfering with a fundus front image, which is a still image acquired in advance by a fundus image acquisition means for obtaining a fundus front image using visible illumination light having a predetermined wavelength and having a fundus illumination optical system and a fundus photographing optical system, and interference A fundus tomographic image acquired in advance by a tomographic image acquisition means for obtaining a fundus tomographic image of the eye to be examined using an optical interference technique and displaying the fundus tomographic image on the fundus front image It is characterized by comprising display control means for combining and displaying the acquisition position of the tomographic image on the fundus front image.
(2)
In the fundus image display apparatus of (1),
The visible illumination light is either blue illumination light or red illumination light.
(3)
In the fundus image display apparatus of (1),
Measuring position setting means for setting a measuring position on the fundus front image displayed on the display;
The display control means acquires a fundus tomographic image corresponding to the measurement position set by the measurement position setting means from the three-dimensional OCT image information acquired in advance by the tomographic image acquisition means, and displays it on the display.
(4)
In the fundus image display apparatus of (1),
Before Symbol fundus image acquisition means is a fundus camera.
(5)
(1) a fundus image display device;
Furthermore, the optical system includes the fundus image acquisition unit and the tomographic image acquisition unit.

本発明によれば、取得された断層画像の測定位置の確認を、所定の波長に特定した可視照明光を用いて取得された眼底正面画像上で行うことができる。 According to the present invention, the measurement position of the acquired tomographic image can be confirmed on the fundus front image acquired using the visible illumination light specified to the predetermined wavelength.

本発明の実施形態を図面に基づいて説明する。図1は、本実施形態の眼科撮影装置の光学系及び制御系を示す図である。なお、本実施形態においては、被検眼の奥行き方向をZ方向(光軸L1方向)、奥行き方向に垂直(被検者の顔面と同一平面)な平面上の水平方向成分をX方向、鉛直方向成分をY方向として説明する。   Embodiments of the present invention will be described with reference to the drawings. FIG. 1 is a diagram illustrating an optical system and a control system of the ophthalmologic photographing apparatus according to the present embodiment. In this embodiment, the depth direction of the eye to be examined is the Z direction (optical axis L1 direction), the horizontal component on the plane perpendicular to the depth direction (the same plane as the face of the subject) is the X direction, and the vertical direction. The component is described as the Y direction.

図1において、その光学系は、被検眼眼底の断層画像を光干渉の技術を用いて非侵襲で得るための干渉光学系(以下、OCT光学系とする)200と、赤外光を用いて被検眼の眼底を照明し観察するための眼底SLO画像を取得するスキャニングレーザオフサルモスコープ(SLO)光学系300と、被検眼の眼底をカラー撮影(例えば、無散瞳状態)するために照明光学系及び撮影光学系を用いてカラー眼底画像を得る眼底カメラ光学系100に大別される。本実施形態において、OCT光学系200は、測定光を眼底上にて二次元的に走査する走査ユニットと、被検眼の深さ方向に対する干渉信号を得るために走査ユニットによる測定光の走査に同期させて前記参照光の光路長を変化させる光路長変化ユニットを有する。また、眼底カメラ光学系100は、照明光学系100a、撮影光学系100bを含む。   In FIG. 1, the optical system uses an interference optical system (hereinafter referred to as an OCT optical system) 200 for non-invasively obtaining a tomographic image of the fundus of the eye to be examined using an optical interference technique, and infrared light. A scanning laser ophthalmoscope (SLO) optical system 300 that acquires a fundus SLO image for illuminating and observing the fundus of the subject's eye, and illumination optics for performing color imaging (for example, a non-mydriatic state) of the fundus of the subject's eye And a fundus camera optical system 100 that obtains a color fundus image using a system and a photographing optical system. In the present embodiment, the OCT optical system 200 is synchronized with the scanning unit that scans the measurement light two-dimensionally on the fundus and the scanning of the measurement light by the scanning unit to obtain an interference signal in the depth direction of the eye to be examined. And an optical path length changing unit that changes the optical path length of the reference light. The fundus camera optical system 100 includes an illumination optical system 100a and a photographing optical system 100b.

照明光学系100aは、フラッシュランプ等の撮影光源1、コンデンサレンズ2、リング状の開口を有するリングスリット3、ミラー4、リレーレンズ5、中心部に黒点を有する黒点板6、リレーレンズ8、孔あきミラー9、対物レンズ10を有する。リングスリット3は、被検眼Eの瞳孔と共役な位置に配置されており、瞳孔周辺部から眼底照明光を入射することにより被検眼眼底を照明する。また、黒点板6は対物レンズ10からの反射光を除去する。   The illumination optical system 100a includes a photographing light source 1 such as a flash lamp, a condenser lens 2, a ring slit 3 having a ring-shaped opening, a mirror 4, a relay lens 5, a black spot plate 6 having a black spot at the center, a relay lens 8, and a hole. A perforated mirror 9 and an objective lens 10 are provided. The ring slit 3 is disposed at a position conjugate with the pupil of the eye E to be examined, and illuminates the fundus of the eye to be examined by entering fundus illumination light from the periphery of the pupil. The black spot plate 6 removes the reflected light from the objective lens 10.

撮影光学系100bは、対物レンズ10、孔あきミラー9の開口近傍に位置する撮影絞り12、光軸方向に移動可能なフォーカシングレンズ13、結像レンズ14、可視域に感度を有する撮影用の2次元撮像素子16が配置されている。撮影絞り12は対物レンズ10に関して被検眼Eの瞳孔と略共役な位置に配置されている。   The photographing optical system 100b includes an objective lens 10, a photographing aperture 12 located in the vicinity of the aperture of the perforated mirror 9, a focusing lens 13 movable in the optical axis direction, an imaging lens 14, and two for photographing having sensitivity in the visible range. A two-dimensional image sensor 16 is arranged. The imaging aperture 12 is disposed at a position substantially conjugate with the pupil of the eye E with respect to the objective lens 10.

撮影用照明光源1を発した光束は、コンデンサレンズ2を介して、リングスリット3を照明する。リングスリット3を透過した光は、ミラー4、レンズ5、黒点板6、レンズ8を経て孔あきミラー9に達する。そして、孔あきミラー9で反射された光は、対物レンズ10により被検眼Eの瞳孔付近で一旦収束した後、拡散して被検眼眼底を照明する。   The luminous flux emitted from the photographing illumination light source 1 illuminates the ring slit 3 via the condenser lens 2. The light transmitted through the ring slit 3 reaches the perforated mirror 9 through the mirror 4, the lens 5, the black spot plate 6, and the lens 8. The light reflected by the perforated mirror 9 is once converged in the vicinity of the pupil of the eye E by the objective lens 10, and then diffused to illuminate the fundus of the eye to be examined.

撮影用照明光で照明された眼底からの反射光は、対物レンズ10、孔あきミラー9の開口部、撮影絞り12、フォーカシングレンズ13、結像レンズ14を経て、撮像素子16に結像する。   The reflected light from the fundus illuminated with the imaging illumination light forms an image on the image sensor 16 through the objective lens 10, the aperture of the perforated mirror 9, the imaging aperture 12, the focusing lens 13, and the imaging lens 14.

2次元撮像素子16から出力される撮像信号は、制御部70へと入力される。そして、制御部70は、撮像素子16によって撮像された眼底画像をメモリ72に記憶する。また、制御部70は、表示モニタ75に接続され、その表示画像を制御する。また、制御部70には、測定開始スイッチ74a、測定位置設定スイッチ74b、撮影開始スイッチ74c、オートコヒーレンススイッチ74d等が接続されている。   An imaging signal output from the two-dimensional imaging device 16 is input to the control unit 70. Then, the control unit 70 stores the fundus image captured by the image sensor 16 in the memory 72. The control unit 70 is connected to the display monitor 75 and controls the display image. The control unit 70 is connected to a measurement start switch 74a, a measurement position setting switch 74b, a photographing start switch 74c, an autocoherence switch 74d, and the like.

また、対物レンズ10と孔あきミラー9の間には、眼底カメラ光学系100の光軸L1とOCT光学系200の光軸L2とを同軸にするダイクロイックミラー40が跳ね上げ可能に配置されている。このダイクロイックミラー40は、OCT光学系200に用いる断層取得用の測定光(本実施形態では、波長815nm〜865nm)を反射し、それ以外の光を透過する特性を有する。   Further, between the objective lens 10 and the perforated mirror 9, a dichroic mirror 40 is disposed so that the optical axis L1 of the fundus camera optical system 100 and the optical axis L2 of the OCT optical system 200 are coaxial. . The dichroic mirror 40 has a characteristic of reflecting measurement light for tomographic acquisition used in the OCT optical system 200 (in this embodiment, a wavelength of 815 nm to 865 nm) and transmitting other light.

以下に、ダイクロイックミラー40の反射側に設けられたOCT光学系200の構成について説明する。27はOCT光学系200の測定光及び参照光として用いられる低コヒーレントな光を発するOCT光源であり、例えばSLD光源等が用いられる。OCT光源27には、例えば、中心波長840nmで50nmの帯域を持つ光源が用いられる。26は光分割部材と光結合部材としての役割を兼用するファイバーカップラーである。OCT光源27から発せられた光は、導光路としての光ファイバ38aを介して、ファイバーカップラー26によって参照光と測定光とに分割される。したがって、測定光は光ファイバ38bを介して被検眼Eへと向かい、参照光は光ファイバ38cを介して参照ミラーユニット31へと向かう。   The configuration of the OCT optical system 200 provided on the reflection side of the dichroic mirror 40 will be described below. Reference numeral 27 denotes an OCT light source that emits low-coherent light used as measurement light and reference light of the OCT optical system 200. For example, an SLD light source is used. For the OCT light source 27, for example, a light source having a center wavelength of 840 nm and a bandwidth of 50 nm is used. Reference numeral 26 denotes a fiber coupler that doubles as a light splitting member and a light coupling member. The light emitted from the OCT light source 27 is split into reference light and measurement light by the fiber coupler 26 via an optical fiber 38a as a light guide. Therefore, the measurement light is directed to the eye E through the optical fiber 38b, and the reference light is directed to the reference mirror unit 31 through the optical fiber 38c.

測定光を被検眼Eへ向けて出射する光路には、測定光を出射する光ファイバ38bの端部39b、被検眼の屈折誤差に合わせて光軸方向に移動可能なリレーレンズ24、ガルバノ駆動機構51の駆動により眼底上でXY方向に測定光を高速で走査させることが可能な一対のガルバノミラーからなる走査部23と、リレーレンズ22が配置されている。また、ダイクロイックミラー40及び対物レンズ10は、OCT光学系200からのOCT測定光を被検眼眼底へと導光する導光光学系としての役割を有する。なお、光ファイバ38bの端部39bは、被検眼眼底と共役となるように配置される。また、走査部23のガルバノミラーの反射面は、被検眼瞳孔と共役な位置に配置される(本実施形態では、一対のガルバノミラーの中間位置と被検眼瞳孔とが共役関係になるように配置されている)。   In the optical path for emitting the measurement light toward the eye E, the end 39b of the optical fiber 38b for emitting the measurement light, the relay lens 24 movable in the optical axis direction according to the refractive error of the eye to be examined, and the galvano drive mechanism A relay unit 22 and a scanning unit 23 including a pair of galvanometer mirrors that can scan the measurement light in the XY directions on the fundus at high speed by driving 51 are disposed. Further, the dichroic mirror 40 and the objective lens 10 have a role as a light guide optical system that guides OCT measurement light from the OCT optical system 200 to the fundus of the eye to be examined. Note that the end 39b of the optical fiber 38b is disposed so as to be conjugate with the fundus of the eye to be examined. Further, the reflection surface of the galvanometer mirror of the scanning unit 23 is arranged at a position conjugate with the eye pupil to be examined (in this embodiment, the middle position of the pair of galvanometer mirrors and the eye pupil to be examined are arranged in a conjugate relationship). Have been).

光ファイバ38bの端部39bから出射した測定光は、リレーレンズ24を介して、走査部23のガルバノミラーに達し、一対のガルバノミラーの駆動により反射方向が変えられる。そして、ガルバノミラーで反射された測定光は、リレーレンズ22を介して、ダイクロイックミラー40で反射された後、対物レンズ10を介して、被検眼眼底に集光される。   The measurement light emitted from the end 39b of the optical fiber 38b reaches the galvanometer mirror of the scanning unit 23 via the relay lens 24, and the reflection direction is changed by driving the pair of galvanometer mirrors. Then, the measurement light reflected by the galvanometer mirror is reflected by the dichroic mirror 40 via the relay lens 22 and then condensed on the fundus of the eye to be examined via the objective lens 10.

そして、眼底で反射した測定光は、対物レンズ10を介して、ダイクロイックミラー40で反射し、OCT光学系200に向かい、リレーレンズ22、走査部23のガルバノミラー、リレーレンズ24を介して、光ファイバ38bの端部39bに入射する。端部39bに入射した測定光は、光ファイバ38b、ファイバーカップラー26、光ファイバ38dを介して、ファイバーカップラー34に達する。   Then, the measurement light reflected from the fundus is reflected by the dichroic mirror 40 through the objective lens 10, travels toward the OCT optical system 200, passes through the relay lens 22, the galvano mirror of the scanning unit 23, and the relay lens 24. The light enters the end portion 39b of the fiber 38b. The measurement light incident on the end 39b reaches the fiber coupler 34 via the optical fiber 38b, the fiber coupler 26, and the optical fiber 38d.

一方、参照光を参照ミラーユニット31に向けて出射する光路には、参照光を出射する光ファイバ38cの端部39c、コリメータレンズ29、参照ミラーユニット31、集光レンズ32、参照光が入射する光ファイバ38eの端部39eが配置されている。参照ミラーユニット31は、参照光の光路長を変化させるべく、参照ミラー駆動機構50により光軸方向に移動可能な構成となっている。なお、参照ミラーユニット31は、ミラー31aとミラー31bにより構成される。   On the other hand, the end 39c of the optical fiber 38c that emits the reference light, the collimator lens 29, the reference mirror unit 31, the condensing lens 32, and the reference light enter the optical path that emits the reference light toward the reference mirror unit 31. An end 39e of the optical fiber 38e is disposed. The reference mirror unit 31 is configured to be movable in the optical axis direction by the reference mirror driving mechanism 50 in order to change the optical path length of the reference light. The reference mirror unit 31 includes a mirror 31a and a mirror 31b.

光ファイバー38cの端部39cから出射した参照光は、コリメータレンズ29で平行光束とされ、参照ミラーユニット31を構成するミラー31aとミラー31bで反射された後、集光レンズ32により集光されて光ファイバ38eの端部39eに入射する。端部39eに入射した参照光は、光ファイバ38eを介して、ファイバーカップラー34に達する。   The reference light emitted from the end portion 39c of the optical fiber 38c is converted into a parallel light flux by the collimator lens 29, reflected by the mirror 31a and the mirror 31b constituting the reference mirror unit 31, and then condensed by the condenser lens 32. The light enters the end 39e of the fiber 38e. The reference light incident on the end 39e reaches the fiber coupler 34 via the optical fiber 38e.

ここで、測定光は眼底の各層で反射し、それぞれ時間的な遅れと、異なる強度を持つ反射測定光となって、ファイバカップラー34にて参照光と合流する。この2つの光の光路長が等しくなったときに生じる干渉現象を利用して反射測定光の強度を受光素子35により検出し、さらに参照ミラーユニット31を光軸方向に移動(走査)させることにより、光軸方向(被検眼の深さ方向)の反射強度分布を得ることができる(なお、本実施形態においては、ある眼底上の一点で参照ミラーユニットの光路長を変化させて光軸方向の反射強度分布を得る方式をAスキャンとする)。さらに、走査部23により測定光を眼底上でX方向もしくはY方向に走査することにより、被検眼眼底のXZ面もしくはYZ面における断層画像を取得できる(なお、本実施形態においては、このように測定光を眼底に対して1次元走査し、参照ミラーユニットの光軸方向の移動による光路長を変化によって、網膜断層画像を得る方式をBスキャンとする)。さらに、参照ミラーユニット31を固定したまま、測定光をXY方向に2次元的に走査することにより、2次元的に眼底画像(XY面)を得ることも可能である(なお、本実施形態においては、測定光を眼底に対して2次元的に走査させ、参照ミラーの光路とコヒーレンス長内で一致した場合に得られる干渉信号により2次元的にOCT画像を得る方式をCスキャンとする)。さらに、これらを利用して、走査ユニットによる測定光の走査に同期して得られる干渉信号に基づいて3次元OCT画像情報を取得できる。この場合、参照ミラーユニット31を光軸方向に移動させつつ、走査部23により測定光を眼底に対して2次元に走査することにより、眼底の3次元OCT画像情報を取得できる。   Here, the measurement light is reflected by each layer of the fundus oculi, becomes reflected measurement light having a time delay and a different intensity, and is merged with the reference light by the fiber coupler 34. By utilizing the interference phenomenon that occurs when the optical path lengths of the two lights become equal, the light-receiving element 35 detects the intensity of the reflected measurement light, and the reference mirror unit 31 is moved (scanned) in the optical axis direction. The reflection intensity distribution in the optical axis direction (depth direction of the eye to be examined) can be obtained (in this embodiment, the optical path length of the reference mirror unit is changed at one point on the fundus in the optical axis direction. A method for obtaining the reflection intensity distribution is called A-scan). Furthermore, a tomographic image on the XZ plane or YZ plane of the fundus of the eye to be examined can be acquired by scanning the measurement light on the fundus in the X direction or the Y direction by the scanning unit 23 (in this embodiment, in this way, (The B-scan is a method in which the measurement light is scanned one-dimensionally with respect to the fundus and the optical path length due to movement of the reference mirror unit in the optical axis direction is changed to obtain a retinal tomographic image). Furthermore, it is also possible to obtain a fundus image (XY plane) two-dimensionally by scanning the measurement light two-dimensionally in the XY direction with the reference mirror unit 31 fixed (in the present embodiment, (The C-scan is a method in which the measurement light is scanned two-dimensionally with respect to the fundus and an OCT image is obtained two-dimensionally by the interference signal obtained when the optical path of the reference mirror coincides with the coherence length). Furthermore, using these, it is possible to acquire three-dimensional OCT image information based on an interference signal obtained in synchronization with scanning of the measurement light by the scanning unit. In this case, three-dimensional OCT image information of the fundus can be acquired by moving the reference mirror unit 31 in the optical axis direction and scanning the measurement light two-dimensionally with respect to the fundus by the scanning unit 23.

なお、Aスキャン信号を光軸方向手前から測定し、全く信号のない位置から、最初に強い信号を得ることができる位置が眼底表層(網膜表面)の情報となる。したがって、測定光を2軸で走査した際の眼底上の各測定位置(撮影位置)でのAスキャン信号についてそれぞれ最初に強い信号の反射強度をつなぎ合わせていくことにより、眼底表層を2次元的に表現する眼底表層OCT画像(en-face画像)を取得することができる。また、Bスキャンによって取得された断層画像は、Aスキャン信号の1軸スキャンによって構築されるものであるため、眼底表層OCT画像の一部の画像信号と、取得された断層画像の眼底表層部分の画像信号とが照合する位置を求めることにより、眼底表層OCT画像上のどの位置の断層画像であるかを正確に検出することができる。   Note that the A-scan signal is measured from the front in the optical axis direction, and a position where a strong signal can be obtained first from a position where there is no signal is information on the fundus surface layer (retina surface). Therefore, the surface of the fundus is two-dimensionally connected by first connecting the reflection intensities of strong signals for the A scan signals at each measurement position (imaging position) on the fundus when the measurement light is scanned in two axes. The fundus surface OCT image (en-face image) expressed in In addition, since the tomographic image acquired by the B scan is constructed by uniaxial scanning of the A scan signal, a partial image signal of the fundus surface OCT image and the fundus surface layer part of the acquired tomographic image By obtaining the position to be compared with the image signal, it is possible to accurately detect the position of the tomographic image on the fundus surface OCT image.

以下に、SLO光学系300について説明する。本実施形態では、SLO光学系の光源としてOCT光源27を兼用するとともに、リレーレンズ24と光ファイバ38bの端部39bの間にハーフミラー60を設け、ハーフミラー60の反射方向に共焦点光学系を構成するための集光レンズ61と、眼底に共役な共焦点開口62と、SLO用受光素子63とが設けられている。SLO光学系300において、ハーフミラー60〜被検眼Eまでの光路は、OCT光学系200と共用する。ガルバノミラーは、SLO光学系に用いる光を眼底上でXY方向に走査するために、OCT光学系200と兼用される。この場合、走査部23により測定光をXY方向に2次元的に走査することにより、眼底SLO画像を取得することができる。   Hereinafter, the SLO optical system 300 will be described. In the present embodiment, the OCT light source 27 is also used as the light source of the SLO optical system, and a half mirror 60 is provided between the relay lens 24 and the end portion 39b of the optical fiber 38b, and the confocal optical system extends in the reflection direction of the half mirror 60. , A confocal aperture 62 conjugated to the fundus, and a light receiving element 63 for SLO are provided. In the SLO optical system 300, the optical path from the half mirror 60 to the eye E is shared with the OCT optical system 200. The galvanometer mirror is also used as the OCT optical system 200 in order to scan light used for the SLO optical system in the XY directions on the fundus. In this case, the fundus SLO image can be acquired by two-dimensionally scanning the measurement light in the XY directions by the scanning unit 23.

以上のような構成を備える装置において、その動作を説明する。まず、検者は、図示なき前眼部観察用カメラで撮影された画面で瞳孔中心に測定光軸がくるようにアライメントし、被検者に図示なき可動固視灯を注視させ、検者の所望する測定部位に誘導する。図2は、SLO光学系300によって取得された眼底観察画像が表示モニタ75の画面上に表示されたものである。検者は、表示モニタ75上のSLO画像に基づいて眼底にフォーカスを合わせ、次にオートコヒーレンススイッチ74dを押されると、OCT信号が検出されるまで自動で参照ミラーユニット31が移動される。   The operation of the apparatus having the above configuration will be described. First, the examiner aligns the measurement optical axis at the center of the pupil on the screen imaged by the anterior eye observation camera (not shown), causes the subject to gaze at the movable fixation lamp (not shown), and Guide to the desired measurement site. FIG. 2 shows a fundus observation image acquired by the SLO optical system 300 displayed on the screen of the display monitor 75. When the examiner focuses on the fundus based on the SLO image on the display monitor 75 and then presses the autocoherence switch 74d, the reference mirror unit 31 is automatically moved until the OCT signal is detected.

次に、断層画像の取得のためのステップに移行する。本実施形態においては、BスキャンによりXZ面の断層画像を取得する場合について説明する。   Next, the process proceeds to a step for acquiring a tomographic image. In the present embodiment, a case where a tomographic image of the XZ plane is acquired by B scan will be described.

まず、検者はリアルタイムで観察される表示モニタ75上のSLO画像から検者の撮影したい断層画像の位置を設定する。検者は、測定位置設定スイッチ74bを操作して、画面上のSLO画像上に電気的に表示されるX方向の測定位置(取得位置)を表すラインL1をSLO眼底画像に対して移動させていき、X方向における測定位置を設定する。なお、ラインL1がX方向となるように設定すれば、XZ面の断層画像の撮影が行われ、ラインL1がY方向となるように設定すれば、YZ面の断層画像の撮影が行われるようになっている。また、ラインL1を任意の形状(例えば、斜め方向や丸等)に設定できるようにしてもよい。   First, the examiner sets the position of the tomographic image that the examiner wants to photograph from the SLO image on the display monitor 75 observed in real time. The examiner operates the measurement position setting switch 74b to move the line L1 representing the measurement position (acquisition position) in the X direction electrically displayed on the SLO image on the screen with respect to the SLO fundus image. Then, the measurement position in the X direction is set. If the line L1 is set to be in the X direction, a tomographic image on the XZ plane is taken. If the line L1 is set to be in the Y direction, a tomographic image on the YZ plane is taken. It has become. Further, the line L1 may be set to an arbitrary shape (for example, an oblique direction or a circle).

また、検者は、眼底上のXY方向における測定位置の設定とともに、Z方向における測定位置の設定を行う。Z方向においては、Z方向の測定光の走査幅(例えば、3mm)と、その走査ステップ数(Z方向の測定枚数)を設定する。例えば、走査幅が3mmであって、走査ステップ数が10μmのように設定されると、深さ3mmで10μmステップの断層画像が得られる。なお、走査幅が大きく、走査ステップ数が細かいほど断層画像の撮影に時間を要する。   In addition, the examiner sets the measurement position in the Z direction as well as the measurement position in the XY direction on the fundus. In the Z direction, the scanning width (for example, 3 mm) of the measuring light in the Z direction and the number of scanning steps (the number of measured sheets in the Z direction) are set. For example, if the scanning width is 3 mm and the number of scanning steps is set to 10 μm, a tomographic image having a depth of 3 mm and a 10 μm step is obtained. Note that the longer the scanning width and the smaller the number of scanning steps, the longer the time required for taking a tomographic image.

その後、検者により測定開始スイッチ74aの入力があると、制御部70は、設定された測定位置に基づいてBスキャンによるXZ面の断層画像の撮影動作を開始する。すなわち、制御部70は、画面上のSLO画像上に設定されたラインL1の表示位置に基づいてこのラインL1の位置における眼底の断層画像が得られるように、走査部23を駆動させて測定光を走査させる。なお、ラインL1の表示位置(モニタ上における座標位置)と走査部23による測定光の走査位置との関係は、予め定まっているので、制御部70は設定したラインL1の表示位置に対応する走査範囲に対して測定光が走査されるように、走査部23の一対のガルバノミラーを適宜駆動制御する。また、制御部70は、断層取得開始の際のSLO画像を画像メモリ72に記憶しておく。   Thereafter, when the examiner inputs the measurement start switch 74a, the control unit 70 starts an XZ-plane tomographic image capturing operation by B-scan based on the set measurement position. That is, the control unit 70 drives the scanning unit 23 to measure the measurement light so that a tomographic image of the fundus at the position of the line L1 is obtained based on the display position of the line L1 set on the SLO image on the screen. To scan. Since the relationship between the display position of the line L1 (coordinate position on the monitor) and the scanning position of the measurement light by the scanning unit 23 is determined in advance, the control unit 70 performs scanning corresponding to the set display position of the line L1. The pair of galvanometer mirrors of the scanning unit 23 is appropriately driven and controlled so that the measurement light is scanned with respect to the range. Further, the control unit 70 stores the SLO image at the start of tomographic acquisition in the image memory 72.

制御部70は、ガルバノ駆動機構51を駆動させて走査部23のガルバノミラーの反射面を制御して測定光の照射位置をX方向に走査させるとともに、参照ミラー駆動機構50を駆動させ、所定の走査ステップ数での画像が得られるよう参照ミラーユニット31を光軸方向に移動させていく。   The control unit 70 drives the galvano drive mechanism 51 to control the reflection surface of the galvanometer mirror of the scanning unit 23 to scan the irradiation position of the measurement light in the X direction, and also drives the reference mirror drive mechanism 50 to obtain a predetermined value. The reference mirror unit 31 is moved in the optical axis direction so as to obtain an image with the number of scanning steps.

このようにして、受光素子35では、参照光と眼底からの反射測定光との合成による干渉光が逐次検出され、制御部70は、その光路長における測定光のX方向における反射強度分布を取得する。さらに、参照ミラーユニット31が光軸方向に移動することにより、制御部70は、XZ方向の反射強度分布を取得する。このようにして、参照光の光路長が予め設定したZ方向の測定光の走査幅に達したら測定を終了する。そして、制御部70は、得られたXZ方向の反射強度分布に基づいて周知の画像処理によりXZ方向の断層画像を構築したのち、XZ面の断層画像をモニタ75に表示する。図3は、モニタ75に表示された断層画像の例である。   In this way, the light receiving element 35 sequentially detects the interference light by combining the reference light and the reflected measurement light from the fundus, and the control unit 70 acquires the reflection intensity distribution in the X direction of the measurement light in the optical path length. To do. Furthermore, when the reference mirror unit 31 moves in the optical axis direction, the control unit 70 acquires a reflection intensity distribution in the XZ direction. In this way, the measurement ends when the optical path length of the reference light reaches the preset scanning width of the measuring light in the Z direction. Then, the control unit 70 constructs a tomographic image in the XZ direction by well-known image processing based on the obtained reflection intensity distribution in the XZ direction, and then displays the tomographic image on the XZ plane on the monitor 75. FIG. 3 is an example of a tomographic image displayed on the monitor 75.

所望する測定位置の断層画像がモニタ75に表示されたら、眼底カメラ光学系100によってカラー眼底画像を取得するステップに移行する。検者は、モニタ75に表示されるSLO画像を見ながら、所望する状態で撮影できるように、アライメントとフォーカスの微調整を行う。そして、検者による撮影開始スイッチ73cの入力があると、撮影が実行される。制御部70は、撮影開始スイッチ73cによる撮影開始のトリガ信号に基づいて、挿脱機構45を駆動することにより、ダイクロイックミラー40を光路から離脱させると共に、撮影光源1を発光する。   When a tomographic image of a desired measurement position is displayed on the monitor 75, the process proceeds to a step of acquiring a color fundus image by the fundus camera optical system 100. The examiner performs fine adjustment of alignment and focus so that the user can take a picture in a desired state while viewing the SLO image displayed on the monitor 75. When the examiner inputs the photographing start switch 73c, photographing is performed. The control unit 70 drives the insertion / removal mechanism 45 based on the trigger signal for starting shooting by the shooting start switch 73c, thereby detaching the dichroic mirror 40 from the optical path and causing the shooting light source 1 to emit light.

撮影光源1の発光により、眼底は可視光により照明され、眼底からの反射光は対物レンズ10、孔あきミラー9の開口部、撮影絞り12、フォーカシングレンズ13、結像レンズ14、ダイクロイックミラー15を経て2次元撮像素子16に結像する。そして、制御部70は、2次元撮像素子16で撮影された眼底画像(図4参照)を画像メモリ72に記憶する。   The fundus is illuminated with visible light by the light emitted from the imaging light source 1, and the reflected light from the fundus occupies the objective lens 10, the aperture of the perforated mirror 9, the imaging aperture 12, the focusing lens 13, the imaging lens 14, and the dichroic mirror 15. Then, an image is formed on the two-dimensional image sensor 16. Then, the control unit 70 stores the fundus image (see FIG. 4) captured by the two-dimensional image sensor 16 in the image memory 72.

カラー眼底画像の取得が完了したら、制御部70は、断層取得開始の際に画像メモリ72に記憶された眼底SLO画像と、その後に取得されたカラー眼底画像とを画像処理により両者の特徴点を一致させるマッチング処理を行うことで、眼底SLO画像とカラー眼底画像との位置関係を対応させる(図5参照)。そして、制御部70は、マッチング処理の結果を利用して、眼底SLO画像上の所定部位の位置座標に対して、カラー眼底画像上において同じ所定部位の位置座標とを対応付けておく。すなわち、SLO画像上の所定の位置座標がカラー眼底画像上のどの位置に対応するものであるかを求めたものであって、これにより、例えば、SLO画像上の所定の部位Aがカラー眼底画像上でどの位置に対応するかが分かる。   When the acquisition of the color fundus image is completed, the control unit 70 obtains the feature points of the fundus SLO image stored in the image memory 72 at the start of tomographic acquisition and the color fundus image acquired thereafter by image processing. By performing matching processing for matching, the positional relationship between the fundus SLO image and the color fundus image is made to correspond (see FIG. 5). Then, using the result of the matching process, the control unit 70 associates the position coordinates of the predetermined part on the fundus SLO image with the position coordinates of the same predetermined part on the color fundus image. That is, it is obtained to which position on the color fundus image the predetermined position coordinate on the SLO image corresponds, and, for example, the predetermined part A on the SLO image is displayed on the color fundus image. You can see which position corresponds to above.

このようにして眼底SLO画像とカラー眼底画像との対応関係に関する情報が得られたら、制御部70は、測定位置を設定した際の前述のラインL1の表示位置に基づいて、SLO画像上における測定位置(断層画像を撮影した部位)を特定する。そして、制御部70は、上記のように求められた対応関係に関する情報に基づいて、カラー眼底画像上における測定位置(断層画像を撮影した部位)を特定する。そして、制御部70は、表示モニタ75にカラー眼底画像を表示し、特定された測定位置情報に基づいてカラー眼底画像上に断層画像を取得した測定(取得)位置を示すラインL2を電気的に表示する(図6参照)。   When information regarding the correspondence between the fundus SLO image and the color fundus image is obtained in this way, the control unit 70 performs measurement on the SLO image based on the display position of the line L1 when the measurement position is set. The position (the part where the tomographic image is taken) is specified. Then, the control unit 70 specifies the measurement position on the color fundus image (the part where the tomographic image is captured) based on the information regarding the correspondence obtained as described above. Then, the control unit 70 displays a color fundus image on the display monitor 75 and electrically displays a line L2 indicating a measurement (acquisition) position at which the tomographic image is acquired on the color fundus image based on the specified measurement position information. Display (see FIG. 6).

このようにすれば、検者は、Bスキャンによって取得された所望の眼底断層画像に対応する眼底上の測定位置をカラー眼底画像上で確認することができる。よって、検者は、解像度及びコントラストに優れ眼底全体からの病変部の発見に適しているカラー眼底画像と断層画像との対応関係を正確に把握できるため、被検者に対して有用な診断を行うことが可能となる。   In this way, the examiner can confirm the measurement position on the fundus corresponding to the desired fundus tomographic image acquired by the B scan on the color fundus image. Therefore, the examiner can accurately grasp the correspondence between the color fundus image and the tomographic image, which is excellent in resolution and contrast and is suitable for finding the lesion from the entire fundus. Can be done.

なお、画像処理によりマッチング処理を行う手法としては、上記のように画像全体の特徴点を抽出するようにしてもよいし、眼底画像における血管形状や視神経乳頭等の特徴点を抽出し、これらの特徴点を抽出してから両画像のマッチング処理を行うようにしてもよい。   As a technique for performing matching processing by image processing, feature points of the entire image may be extracted as described above, or feature points such as blood vessel shape and optic disc in the fundus image are extracted, and these The matching processing of both images may be performed after extracting the feature points.

以上の実施形態では、断層画像取得のためのライン設定を眼底SLO画像から行うものとしているが、これに限るものではなく、赤外光を用いて被検眼の眼底を照明し観察するための観察光学系を用いて得られた観察画像を基に行うものであればよい。例えば、被検眼の眼底全体を赤外光により照明し、眼底からの反射光を二次元撮像素子により撮影することによって得られた赤外眼底画像や、OCT光学系200と観察光学系を兼用させることによって得られた眼底OCT画像を眼底観察画像として用いるようにしてもよい。   In the above embodiment, line setting for tomographic image acquisition is performed from the fundus SLO image. However, the present invention is not limited to this, and observation for illuminating and observing the fundus of the eye to be examined using infrared light. What is necessary is just to perform based on the observation image obtained using the optical system. For example, an infrared fundus image obtained by illuminating the entire fundus of the subject's eye with infrared light and photographing reflected light from the fundus with a two-dimensional imaging device, or using the OCT optical system 200 and the observation optical system together. The fundus OCT image obtained as described above may be used as a fundus observation image.

以下に、前述のように求めることができる対応関係を利用して、カラー眼底画像上から検者の取得したい測定位置を設定する場合について説明する。この場合、断層像を取得する前段階で、カラー眼底画像を取得しておく。そして、制御部70は、所望する眼底位置における断層画像を表示モニタ75に表示させるために、表示モニタ75にカラー眼底画像を表示すると共に、カラー眼底画像上に断層画像を取得する測定(取得)位置を設定するためのラインL3を電気的に表示する(図7参照)。   Hereinafter, a case where the measurement position that the examiner wants to acquire is set from the color fundus image using the correspondence relationship that can be obtained as described above will be described. In this case, a color fundus image is acquired in the previous stage of acquiring a tomographic image. Then, in order to display the tomographic image at the desired fundus position on the display monitor 75, the control unit 70 displays the color fundus image on the display monitor 75 and obtains the tomographic image on the color fundus image (acquisition). The line L3 for setting the position is electrically displayed (see FIG. 7).

次に、検者は、取得されたカラー眼底画像から検者の取得したい断層像の位置を設定する。例えば、検者は、測定位置設定スイッチ74bを操作して、画面上のカラー眼底画像上に表示されるX方向の測定(取得)位置を表すラインL3をカラー眼底画像に対して移動させていき、X方向における測定位置を設定する(図7参照)。このとき、制御部70は、リアルタイムで眼底SLO画像を取得するとともに、表示モニタ75にSLO画像を動画で表示する。   Next, the examiner sets the position of the tomographic image that the examiner wants to acquire from the acquired color fundus image. For example, the examiner operates the measurement position setting switch 74b to move the line L3 representing the measurement (acquisition) position in the X direction displayed on the color fundus image on the screen with respect to the color fundus image. The measurement position in the X direction is set (see FIG. 7). At this time, the control unit 70 acquires the fundus SLO image in real time and displays the SLO image as a moving image on the display monitor 75.

ここで、検者により測定開始スイッチ74aの入力があると、制御部70は、SLO光学系300により取得される眼底SLO画像とカラー眼底画像との間の対応関係を求める。そして、制御部70は、測定位置が設定された際のラインL3の表示位置と、求められた対応関係に関する情報に基づいて眼底SLO画像上における測定位置を特定する。そして、制御部70は、特定された測定位置に測定光が照射されるように走査部23のガルバノミラーの駆動を開始する。これにより、カラー眼底画像上で設定された測定位置に基づいてBスキャンによるXZ面の断層像の取得動作が行われる。断層画像の取得の際の動作については、前述の記載を参考にされたい。   Here, when the examiner inputs the measurement start switch 74a, the control unit 70 obtains a correspondence relationship between the fundus SLO image acquired by the SLO optical system 300 and the color fundus image. Then, the control unit 70 specifies the measurement position on the fundus SLO image based on the display position of the line L3 when the measurement position is set and the information regarding the obtained correspondence relationship. And the control part 70 starts the drive of the galvanometer mirror of the scanning part 23 so that measurement light may be irradiated to the specified measurement position. Thus, the XZ plane tomographic image acquisition operation by the B scan is performed based on the measurement position set on the color fundus image. Please refer to the above description for the operation when acquiring tomographic images.

上記のようにして測定が完了したら、モニタ75に断層画像を表示する。このようにすれば、解像度及びコントラストに優れ眼底全体からの病変部の発見に適しているカラー眼底画像に基づいて、断層画像の取得位置を設定することができるため、被検者に対して有用な診断を行うことが可能となる。   When the measurement is completed as described above, a tomographic image is displayed on the monitor 75. In this way, the tomographic image acquisition position can be set based on a color fundus image that has excellent resolution and contrast and is suitable for finding a lesion from the entire fundus, which is useful for the subject. It is possible to make a simple diagnosis.

以下に、第2の実施形態として、眼底カメラ光学系100に赤外眼底観察用の光学系を設け、観察用の照明光を用いて撮影した赤外眼底画像上に直接ライン設定を行う例について説明する。図8は、第2の実施形態の眼科撮影装置の光学系及び制御系を示す図である。なお、特段の説明がない限り、図1と同じ番号の付されたものについては、同様の構成であるものとする。図8において、眼底カメラ光学系100には、眼底をカラー撮影するための照明光学系及び撮影光学系に加えて、眼底観察用の照明光学系と撮影光学系が配置されている。観察用照明光学系は、ハロゲンランプ等の光源11、波長815nm〜865nmまでの光をカットし、波長700〜815nmの光及び865nmより長い波長のみを透過させる特性を有する赤外フィルタ12、コンデンサレンズ13、コンデンサレンズ2〜対物レンズ10までの光学系を有する。観察用撮影光学系は、対物レンズ10〜結像レンズ14までをカラー撮影用撮影光学系と共用すると共に、赤外光及び可視光の一部を反射し、可視光の大部分を透過する特性を有するダイクロイックミラー15を持ち、ダイクロイックミラー15の反射方向の光路に、赤外域に感度を有する観察用の2次元撮像素子17を有する。また、ダイクロイックミラー40の撮像素子16側には、挿脱機構45の駆動により光路補正ガラス41が跳ね上げ可能に配置されており、光路挿入時には、ダイクロイックミラー40によってシフトされた光軸L1の位置を補正する役割を持つ。   Hereinafter, as a second embodiment, an example in which an optical system for infrared fundus observation is provided in the fundus camera optical system 100 and line setting is directly performed on an infrared fundus image captured using observation illumination light will be described. explain. FIG. 8 is a diagram illustrating an optical system and a control system of the ophthalmologic photographing apparatus according to the second embodiment. Unless otherwise specified, the components with the same numbers as those in FIG. 1 are assumed to have the same configuration. In FIG. 8, the fundus camera optical system 100 includes an illumination optical system for photographing fundus and a photographing optical system in addition to an illumination optical system and photographing optical system for photographing the fundus in color. The observation illumination optical system includes a light source 11 such as a halogen lamp, an infrared filter 12 having a characteristic of cutting light having a wavelength of 815 nm to 865 nm and transmitting only light having a wavelength of 700 to 815 nm and a wavelength longer than 865 nm, and a condenser lens. 13. An optical system from condenser lens 2 to objective lens 10 is provided. The observation imaging optical system shares the objective lens 10 to the imaging lens 14 with the color imaging imaging optical system, reflects a part of infrared light and visible light, and transmits most of the visible light. And an observation two-dimensional imaging element 17 having sensitivity in the infrared region in the optical path in the reflection direction of the dichroic mirror 15. Further, the optical path correction glass 41 is disposed on the image pickup device 16 side of the dichroic mirror 40 so that the optical path correction glass 41 can be flipped up by driving the insertion / removal mechanism 45. When the optical path is inserted, the position of the optical axis L1 shifted by the dichroic mirror 40 It has a role to correct.

光源11を発した光束は、赤外フィルタ12により赤外光束とされ、レンズ13とコンデンサレンズ2を介して、リングスリット3を照明する。その後、撮影用照明光束と同様の光路を経て被検眼眼底を照明する。観察用照明光で照明された眼底からの反射光は、対物レンズ10、ダイクロイックミラー40、補正ガラス41、孔あきミラー9の開口部、撮影絞り12、フォーカシングレンズ13、結像レンズ14、ダイクロイックミラー15を介して観察用の2次元撮像素子17に結像する。撮像素子17によって撮像された赤外
は、制御部70を介して、前述のSLO画像同様に表示モニタ75に表示される。なお、撮影用照明光源1によって照明された眼底からの反射光は、対物レンズ10〜結像レンズ14までは観察用照明光束と同様の光路を経て、ダイクロイックミラー15を透過したのち、撮像素子16に結像する。
The light beam emitted from the light source 11 is converted into an infrared light beam by the infrared filter 12 and illuminates the ring slit 3 through the lens 13 and the condenser lens 2. Thereafter, the fundus of the eye to be examined is illuminated through the same optical path as that of the imaging illumination light beam. Reflected light from the fundus illuminated by the illumination light for observation is the objective lens 10, the dichroic mirror 40, the correction glass 41, the aperture of the perforated mirror 9, the photographing aperture 12, the focusing lens 13, the imaging lens 14, and the dichroic mirror. The image is formed on the observation two-dimensional image sensor 17 via 15. The infrared image picked up by the image pickup device 17 is displayed on the display monitor 75 through the control unit 70 in the same manner as the aforementioned SLO image. The reflected light from the fundus illuminated by the imaging illumination light source 1 passes through the dichroic mirror 15 through the optical path from the objective lens 10 to the imaging lens 14 in the same manner as the observation illumination light beam, and then the image sensor 16. To form an image.

また、第2実施形態において、ダイクロイックミラー40は、OCT測定光の大部分を反射し一部を透過する特性を持ち、観察用撮像素子17にOCT測定光の一部が入射されるようになっている。これにより、検者は、表示モニタ75に表示される赤外眼底画像から眼底上で走査される測定光のラインを目視で確認することができる。ここで、制御部70は、例えば、測定光をX方向に走査させるためのガルバノミラーの反射面を動作させ、もう一方のガルバノミラーの反射面の角度を固定させておくことで、検者は、眼底上をX方向に走査する測定光を目視することができる。   In the second embodiment, the dichroic mirror 40 has a characteristic of reflecting most of the OCT measurement light and transmitting a part of the OCT measurement light, and a part of the OCT measurement light is incident on the observation imaging device 17. ing. Accordingly, the examiner can visually confirm the measurement light line scanned on the fundus from the infrared fundus image displayed on the display monitor 75. Here, for example, the control unit 70 operates the reflection surface of the galvanometer mirror for scanning the measurement light in the X direction, and fixes the angle of the reflection surface of the other galvanometer mirror so that the examiner can The measurement light that scans the fundus in the X direction can be visually observed.

ここで、検者は、表示モニタ75上の赤外眼底画像に基づいて眼底にフォーカスを合わせ、次にオートコヒーレンススイッチ74dを押されると、OCT信号が検出されるまで自動で参照ミラーユニット31が移動される。   Here, when the examiner focuses on the fundus based on the infrared fundus image on the display monitor 75 and then presses the autocoherence switch 74d, the reference mirror unit 31 is automatically moved until the OCT signal is detected. Moved.

次に、検者は、表示モニタ75を見ながら、測定位置設定スイッチ74bの操作によりX方向に走査される測定光を赤外眼底画像に対して上下に移動させていき測定位置を設定する。このとき、制御部70は、測定(取得)位置設定スイッチ74bからの操作信号に基づいて、測定光をY方向に走査させるためのガルバノミラーの反射面を動作させ、被検眼眼底上の測定光の走査位置を上下に移動させる。すなわち、測定位置の設定の際に眼底上を走査する測定光を目視させることで、上記第1実施形態におけるラインL1と同様の役割を持たせている。   Next, the examiner sets the measurement position by moving the measurement light scanned in the X direction up and down with respect to the infrared fundus image by operating the measurement position setting switch 74b while viewing the display monitor 75. At this time, the control unit 70 operates the reflecting surface of the galvanometer mirror for scanning the measurement light in the Y direction based on the operation signal from the measurement (acquisition) position setting switch 74b to measure the measurement light on the eye fundus. The scanning position is moved up and down. That is, when the measurement position is set, the measurement light that scans the fundus is visually observed to have the same role as the line L1 in the first embodiment.

そのあと、検者により測定開始スイッチ74aの入力があると、制御部70は、開始スイッチ74aの入力時点での測定光の走査位置に基づいてBスキャンによるXZ面の断層画像の取得動作を開始する。この場合、OCT用測定光は、X方向に関しては既に走査を開始しているので、参照ミラーユニット31を光軸方向に移動させることで光路長を変化させればよい。このとき、制御部70は、断層取得開始の際の赤外眼底画像を画像メモリ72に記憶しておく。このようにして、断層画像の取得が完了したら、前述のようにカラー眼底画像を取得する。   Thereafter, when the examiner inputs the measurement start switch 74a, the control unit 70 starts an operation of acquiring a tomographic image of the XZ plane by the B scan based on the scanning position of the measurement light at the input time of the start switch 74a. To do. In this case, since the OCT measurement light has already started scanning in the X direction, the optical path length may be changed by moving the reference mirror unit 31 in the optical axis direction. At this time, the control unit 70 stores the infrared fundus image at the start of tomographic acquisition in the image memory 72. In this way, when acquisition of the tomographic image is completed, a color fundus image is acquired as described above.

このようにして、断層画像の取得とカラー眼底画像の取得が完了したら、制御部70は、断層取得開始の際に画像メモリ72に記憶された赤外眼底画像と、その後に取得されたカラー眼底画像とを画像処理により両者の特徴点を一致させるマッチング処理を行うことで、赤外眼底画像とカラー眼底画像との位置関係を対応させる。そして、制御部70は、マッチング処理の結果を利用して、眼底赤外画像上の所定部位の位置座標に対して、カラー眼底画像上において同じ所定部位の位置座標とを対応付けておく。   When the acquisition of the tomographic image and the acquisition of the color fundus image is completed in this way, the control unit 70 displays the infrared fundus image stored in the image memory 72 at the start of the tomographic acquisition and the color fundus acquired thereafter. By performing a matching process for matching the feature points of the image with the image, the positional relationship between the infrared fundus image and the color fundus image is made to correspond. Then, using the result of the matching process, the control unit 70 associates the position coordinates of the predetermined portion on the fundus infrared image with the position coordinates of the same predetermined portion on the color fundus image.

次に、制御部70は、赤外眼底画像上を走査する測定光部分の画像信号を画像処理により抽出し(例えば、輝度レベルが一定の範囲内にある直線状の画像信号を眼底画像全体から抽出すればよい)、カラー眼底画像上の同位置に相当する座標位置にこれを合成する。そして、制御部70は、表示モニタ75に取得された断層画像とカラー眼底画像を表示し、カラー眼底画像上には上記のように赤外眼底画像から抽出されたOCT測定光部分の画像を合成表示する(図9参照)。このようにすれば、検者は、カラー眼底画像上に合成表示された測定光の位置に基づいて、取得した眼底断層画像に対応する測定位置を確認することができる。この場合、赤外眼底画像上を走査する測定光部分の画像信号の座標位置を特定し、特定された座標位置に基づいて断層画像を取得した測定(取得)位置を示すラインを電気的に表示させるようにしてもよい。   Next, the control unit 70 extracts an image signal of the measurement light portion that scans the infrared fundus image by image processing (for example, a linear image signal having a luminance level within a certain range is extracted from the entire fundus image. This may be extracted) and synthesized at a coordinate position corresponding to the same position on the color fundus image. Then, the control unit 70 displays the tomographic image and the color fundus image acquired on the display monitor 75, and synthesizes the image of the OCT measurement light portion extracted from the infrared fundus image as described above on the color fundus image. Display (see FIG. 9). In this way, the examiner can confirm the measurement position corresponding to the acquired fundus tomographic image based on the position of the measurement light synthesized and displayed on the color fundus image. In this case, the coordinate position of the image signal of the measurement light portion that scans the infrared fundus image is specified, and a line indicating the measurement (acquisition) position at which the tomographic image is acquired based on the specified coordinate position is electrically displayed. You may make it make it.

なお、以上の説明においては、参照ミラーユニット31を光軸上に移動させて光路長を変化させることにより光干渉断層画像を取得する構成を持つTD−OCT(time domain OCT)を用いたが、これに限るものではなく、他の測定原理によって断層画像を取得するものであってもよい。例えば、フーリエ変換を利用したSD−OCT(spectral domain OCT)であってもよい。SD−OCTの構成について図10を用いて簡単に説明する。以下に説明する部分の以外構成は、図1に示すOCT光学系200の構成と同じものを用いることができるため、説明を省略する。この場合、制御部70は、OCT信号を検出するための位置合わせの際には参照ミラーユニット31を光軸方向に移動させるが、断層画像取得時においては参照ミラーユニット31を固定させた状態とする。そして、制御部70は、ファイバーカップラー34で得られた干渉信号をコリメータレンズ80で平行光にし、回折格子81により波長ごとの光束に分離し、集光レンズ82で1次元受光素子83に集光させる。これにより、1次元受光素子83上でスペクトル干渉縞(パワースペクトル)が記録される。このパワースペクトルと相関関数との間にはフーリエ変換の関係が存在する。従って、1次元受光素子83で計測されるスペクトル干渉縞をフーリエ変換することで、測定光と参照光の相互相関関数が得られ、これがOCT信号となる。これにより、被計測物体の深さ方向の形状が計測可能となる。   In the above description, TD-OCT (time domain OCT) having a configuration for acquiring an optical coherence tomographic image by moving the reference mirror unit 31 on the optical axis and changing the optical path length is used. The present invention is not limited to this, and a tomographic image may be acquired by other measurement principles. For example, SD-OCT (spectral domain OCT) using Fourier transform may be used. The configuration of SD-OCT will be briefly described with reference to FIG. Since the configuration other than the portion described below can be the same as the configuration of the OCT optical system 200 shown in FIG. In this case, the control unit 70 moves the reference mirror unit 31 in the optical axis direction at the time of alignment for detecting the OCT signal, but the reference mirror unit 31 is fixed at the time of tomographic image acquisition. To do. Then, the control unit 70 converts the interference signal obtained by the fiber coupler 34 into parallel light by the collimator lens 80, separates it into light beams for each wavelength by the diffraction grating 81, and condenses the light on the one-dimensional light receiving element 83 by the condenser lens 82. Let Thereby, a spectrum interference fringe (power spectrum) is recorded on the one-dimensional light receiving element 83. A Fourier transform relationship exists between the power spectrum and the correlation function. Therefore, the spectral interference fringe measured by the one-dimensional light receiving element 83 is Fourier-transformed to obtain a cross-correlation function between the measurement light and the reference light, which becomes an OCT signal. As a result, the shape of the measured object in the depth direction can be measured.

なお、以上の説明においては、眼底画像から所望する断層画像の位置を設定し、設定された位置に基づいてOCT光学系200を動作させ断層像を撮影するような構成としたがこれに限りものではない。すなわち、予めOCT光学系200により取得された3次元OCT画像情報とカラー眼底画像とを対応づけるようにしてもよい。この場合、制御部70は、設定された測定位置に対応する断層画像を3次元OCT画像情報から取得する処理を行う。すなわち、本実施形態において、断層画像の取得とは、取得位置設定後の断層画像の撮影と、予め取得された3次元OCT画像情報から所定の断層画像を取得することを意味するものとする。   In the above description, the position of a desired tomographic image is set from the fundus image, and the OCT optical system 200 is operated based on the set position to capture a tomographic image. is not. That is, the three-dimensional OCT image information acquired in advance by the OCT optical system 200 may be associated with the color fundus image. In this case, the control unit 70 performs processing for acquiring a tomographic image corresponding to the set measurement position from the three-dimensional OCT image information. That is, in the present embodiment, tomographic image acquisition means tomographic image acquisition after acquisition position setting and to acquire a predetermined tomographic image from previously acquired three-dimensional OCT image information.

ここで、眼底観察画像上で測定位置を設定することによって取得された断層画像の取得位置をカラー眼底画像上で確認するためには、例えば、制御部70は、予め取得された3次元OCT画像情報からOCT観察画像として用いる画像信号を取得し、取得された画像信号を検者が測定位置を設定するための測定位置設定ラインと共にOCT観察画像上に表示させる。これにより、検者は、OCT観察画像から測定位置を設定することができる。そして、測定位置が設定されたら、制御部70は、設定された測定位置に対応する断層画像を3次元OCT画像から取得し、これを表示モニタ75に表示する。また、制御部70は、前述のOCT観察画像とカラー眼底画像との間で対応関係を求め、測定位置が設定された際のOCT観察画像上のラインの表示位置と、求められた対応関係に関する情報に基づいてカラー眼底画像上に断層画像の取得位置を示すラインを表示する。   Here, in order to confirm the acquisition position of the tomographic image acquired by setting the measurement position on the fundus observation image on the color fundus image, for example, the control unit 70 acquires a three-dimensional OCT image acquired in advance. An image signal used as an OCT observation image is acquired from the information, and the acquired image signal is displayed on the OCT observation image together with a measurement position setting line for the examiner to set a measurement position. Thereby, the examiner can set the measurement position from the OCT observation image. When the measurement position is set, the control unit 70 acquires a tomographic image corresponding to the set measurement position from the three-dimensional OCT image and displays it on the display monitor 75. In addition, the control unit 70 obtains a correspondence between the above-described OCT observation image and the color fundus image, and relates to the display position of the line on the OCT observation image when the measurement position is set and the obtained correspondence. A line indicating the acquisition position of the tomographic image is displayed on the color fundus image based on the information.

また、カラー眼底画像上から検者の取得したい測定位置を設定するためには、例えば、制御部70は、カラー眼底画像と3次元OCT画像情報との間で対応関係を求め、測定位置が設定された際のカラー眼底画像上のラインL3の表示位置と、求められた対応関係に関する情報に基づいてOCT画像上における測定位置を特定する。そして、制御部70は、3次元OCT画像情報から前述のようにして特定された測定(取得)位置に相当する断層画像を取得し、これを表示モニタ75に表示する。   In order to set the measurement position that the examiner wants to obtain from the color fundus image, for example, the control unit 70 obtains a correspondence between the color fundus image and the three-dimensional OCT image information, and sets the measurement position. The measurement position on the OCT image is specified based on the display position of the line L3 on the color fundus image and the information regarding the obtained correspondence. Then, the control unit 70 acquires a tomographic image corresponding to the measurement (acquisition) position specified as described above from the three-dimensional OCT image information, and displays this on the display monitor 75.

なお、上記のようにカラー眼底画像との間の対応関係を求めるために3次元OCT画像から取得されるOCT画像としては、例えば、網膜表層OCT画像や、一定の深さ位置にてCスキャンによって取得される2次元OCT画像等が考えられる。また、XY方向の各測定位置において、深さの異なる干渉信号を合算させたものであってもよい。   In addition, as described above, as an OCT image acquired from a three-dimensional OCT image in order to obtain a correspondence relationship with a color fundus image, for example, a retinal surface OCT image or a C scan at a certain depth position. An acquired two-dimensional OCT image or the like can be considered. Further, interference signals having different depths may be added at each measurement position in the XY directions.

また、所定の波長に特定した眼底照明光を用いてカラー眼底画像を撮影するような場合には、所定波長の使用によって撮影される眼底組織に相当する部分におけるOCT画像信号を3次元OCT画像情報から取得するようにしてもよい。例えば、青色の照明光を用いて眼底撮影を行う場合、主に眼底の神経繊維層付近が撮影されるので、3次元OCT画像情報から神経繊維層に相当する部分のOCT画像信号を取得し、これに基づいてカラー眼底画像との対応関係を求める。なお、赤色の照明光の場合には、主に眼底深部の組織が撮影されるので、3次元OCT画像情報から眼底深部の組織に相当する部分のOCT画像信号を取得するようにすればよい。   Further, when a color fundus image is photographed using fundus illumination light specified to a predetermined wavelength, the OCT image signal in a portion corresponding to the fundus tissue photographed by using the predetermined wavelength is obtained as three-dimensional OCT image information. You may make it acquire from. For example, when performing fundus imaging using blue illumination light, mainly the vicinity of the nerve fiber layer of the fundus is imaged, so the OCT image signal of the portion corresponding to the nerve fiber layer is acquired from the three-dimensional OCT image information, Based on this, the correspondence with the color fundus image is obtained. In the case of red illumination light, the tissue in the deep fundus is mainly imaged. Therefore, the OCT image signal corresponding to the deep tissue in the fundus may be acquired from the three-dimensional OCT image information.

本実施形態の眼科撮影装置の光学系及び制御系を示す図である。It is a figure which shows the optical system and control system of the ophthalmologic imaging device of this embodiment. SLO光学系によって取得された眼底画像が表示モニタの画面上に表示されたものである。The fundus image acquired by the SLO optical system is displayed on the screen of the display monitor. モニタに表示された断層画像の例である。It is an example of the tomographic image displayed on the monitor. カラー撮影用の2次元撮像素子で撮影された眼底画像の例である。It is an example of a fundus image photographed with a two-dimensional image sensor for color photography. 眼底SLO画像と、その後に取得されたカラー眼底画像とを画像処理により、異なる2つの画像の位置関係を対応させるようにマッチング処理を行う場合について説明する図である。It is a figure explaining the case where a matching process is performed so that the positional relationship of two different images may be matched by image processing between the fundus SLO image and the color fundus image acquired thereafter. 表示モニタに表示されたカラー眼底画像上に測定位置を示すラインL2を電気的に表示した場合の図である。It is a figure at the time of displaying electrically the line L2 which shows a measurement position on the color fundus image displayed on the display monitor. 表示モニタに表示されたカラー眼底画像上に電気的に表示されるX方向の測定位置を表すラインL3を表示した場合の図である。It is a figure at the time of displaying the line L3 showing the measurement position of the X direction electrically displayed on the color fundus image displayed on the display monitor. 第2の実施形態の眼科撮影装置の光学系及び制御系を示す図である。It is a figure which shows the optical system and control system of the ophthalmologic imaging device of 2nd Embodiment. 表示モニタに表示されるカラー眼底画像上に赤外眼底画像から抽出されたOCT測定光部分の画像を合成表示したものである。The image of the OCT measurement light portion extracted from the infrared fundus image is synthesized and displayed on the color fundus image displayed on the display monitor. SD−OCTの構成について説明する図である。It is a figure explaining the structure of SD-OCT.

11 観察光源
17 二次元撮像素子
23 走査部
31 参照ミラーユニット
50 参照ミラー駆動機構
70 制御部
74b 測定位置設定スイッチ
75 表示モニタ
100 眼底カメラ光学系
100a 照明光学系
100b 撮影光学系
200 干渉光学系(OCT光学系)
300 SLO光学系
DESCRIPTION OF SYMBOLS 11 Observation light source 17 Two-dimensional image sensor 23 Scan part 31 Reference mirror unit 50 Reference mirror drive mechanism 70 Control part 74b Measurement position setting switch 75 Display monitor 100 Fundus camera optical system 100a Illumination optical system 100b Imaging optical system 200 Interference optical system (OCT) Optical system)
300 SLO optical system

Claims (5)

眼底照明光学系及び眼底撮影光学系を有し所定の波長に特定した可視照明光を用いて眼底正面画像を得るための眼底画像取得手段によって予め取得された静止画像である眼底正面画像と、干渉光学系を有し光干渉の技術を用いて被検眼の眼底断層画像を得るための断層画像取得手段によって予め取得された眼底断層画像と、をディスプレイに表示させると共に、前記眼底正面画像における前記眼底断層画像の取得位置を前記眼底正面画像上に合成表示する表示制御手段を備えることを特徴とする眼底画像表示装置。 Interfering with a fundus front image, which is a still image acquired in advance by a fundus image acquisition means for obtaining a fundus front image using visible illumination light having a predetermined wavelength and having a fundus illumination optical system and a fundus photographing optical system, and interference A fundus tomographic image acquired in advance by a tomographic image acquisition means for obtaining a fundus tomographic image of the eye to be examined using an optical interference technique and displaying the fundus tomographic image on the fundus front image A fundus image display device comprising display control means for combining and displaying a tomographic image acquisition position on the fundus front image. 請求項1の眼底画像表示装置において、
前記可視照明光は、青色の照明光、赤色の照明光のいずれかである眼底画像表示装置。
The fundus image display apparatus according to claim 1,
The fundus image display apparatus, wherein the visible illumination light is one of blue illumination light and red illumination light.
請求項1の眼底画像表示装置において、
前記ディスプレイに表示された前記眼底正面画像上で測定位置を設定するための測定位置設定手段を有し、
前記表示制御手段は、前記測定位置設定手段によって設定された測定位置に対応する眼底断層画像を、前記断層画像取得手段によって予め取得された3次元OCT画像情報から取得し、前記ディスプレイに表示する眼底画像表示装置。
The fundus image display apparatus according to claim 1,
Measuring position setting means for setting a measuring position on the fundus front image displayed on the display;
The display control unit acquires a fundus tomographic image corresponding to the measurement position set by the measurement position setting unit from the three-dimensional OCT image information acquired in advance by the tomographic image acquisition unit, and displays the fundus on the display. Image display device.
請求項1の眼底画像表示装置において、
記眼底画像取得手段は、眼底カメラである眼底画像表示装置。
The fundus image display apparatus according to claim 1,
Before SL fundus image acquisition means, the fundus image display device is a fundus camera.
請求項1の眼底画像表示装置と、
さらに、前記眼底画像取得手段と、前記断層画像取得手段と、をそれぞれ備える光学系を有する眼科撮影装置。
A fundus image display apparatus according to claim 1;
Furthermore, an ophthalmologic photographing apparatus having an optical system each including the fundus image acquisition unit and the tomographic image acquisition unit.
JP2012286544A 2012-12-28 2012-12-28 Fundus image display apparatus and ophthalmologic photographing apparatus including the same. Active JP5319009B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2012286544A JP5319009B2 (en) 2012-12-28 2012-12-28 Fundus image display apparatus and ophthalmologic photographing apparatus including the same.

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2012286544A JP5319009B2 (en) 2012-12-28 2012-12-28 Fundus image display apparatus and ophthalmologic photographing apparatus including the same.

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2012017357A Division JP5255711B2 (en) 2012-01-30 2012-01-30 Ophthalmic imaging equipment

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2013055606A Division JP5306554B2 (en) 2013-03-18 2013-03-18 Ophthalmic imaging equipment

Publications (2)

Publication Number Publication Date
JP2013056273A JP2013056273A (en) 2013-03-28
JP5319009B2 true JP5319009B2 (en) 2013-10-16

Family

ID=48132655

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2012286544A Active JP5319009B2 (en) 2012-12-28 2012-12-28 Fundus image display apparatus and ophthalmologic photographing apparatus including the same.

Country Status (1)

Country Link
JP (1) JP5319009B2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10842673B2 (en) 2016-07-06 2020-11-24 Amo Development, Llc Retinal imaging for reference during laser eye surgery

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO1992019930A1 (en) * 1991-04-29 1992-11-12 Massachusetts Institute Of Technology Method and apparatus for optical imaging and measurement
JP3653582B2 (en) * 1996-07-21 2005-05-25 株式会社トプコン Ophthalmic equipment
JP3964035B2 (en) * 1998-03-12 2007-08-22 興和株式会社 Ophthalmic equipment
JP2002306415A (en) * 2001-04-13 2002-10-22 Japan Science & Technology Corp Ophthalmic diagnosis support system
DE10128219A1 (en) * 2001-06-11 2002-12-12 Zeiss Carl Jena Gmbh Topographic measurement of the eye structure, such as the cornea and eye lens by use of coherence-topography with depth measurements insensitive to longitudinal and transverse movements of the reference arm of the instrument
US7593763B2 (en) * 2003-02-05 2009-09-22 Childrens Hospital Los Angeles Non-invasive in vivo measurement of macular carotenoids
JP4501007B2 (en) * 2004-08-26 2010-07-14 国立大学法人名古屋大学 Optical coherence tomography device

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10842673B2 (en) 2016-07-06 2020-11-24 Amo Development, Llc Retinal imaging for reference during laser eye surgery

Also Published As

Publication number Publication date
JP2013056273A (en) 2013-03-28

Similar Documents

Publication Publication Date Title
JP4819478B2 (en) Ophthalmic imaging equipment
JP4949504B2 (en) Ophthalmic imaging equipment
JP4822969B2 (en) Ophthalmic imaging equipment
JP5255524B2 (en) Optical tomographic imaging device, optical tomographic image processing device.
JP5079240B2 (en) Retinal function measuring device
JP5850349B2 (en) Ophthalmic imaging equipment
CN108968908B (en) Fundus photographing device
JP2016209577A (en) Ophthalmologic imaging device
JP6899632B2 (en) Ophthalmologic imaging equipment
JP2010012109A (en) Ocular fundus photographic apparatus
JP2011135933A (en) Retinal function measuring apparatus
JP5570195B2 (en) OCT equipment
JP6776076B2 (en) OCT device
JP6349878B2 (en) Ophthalmic photographing apparatus, ophthalmic photographing method, and ophthalmic photographing program
JP2012161382A (en) Ophthalmological instrument
JP6923392B2 (en) Ophthalmic equipment
JP2018186930A (en) Ophthalmologic imaging apparatus
JP6923393B2 (en) Ophthalmic device and its control method
JP5319010B2 (en) Ophthalmic imaging equipment
JP5255711B2 (en) Ophthalmic imaging equipment
JP7096392B2 (en) Ophthalmic equipment
JP5807371B2 (en) Ophthalmic imaging equipment
JP2016049368A (en) Ophthalmological photographing apparatus
JP5587014B2 (en) Ophthalmic equipment
JP6645003B2 (en) Ophthalmic examination information processing apparatus and ophthalmic examination information processing program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20130125

A871 Explanation of circumstances concerning accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A871

Effective date: 20130227

A975 Report on accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A971005

Effective date: 20130314

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20130321

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130520

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20130618

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20130710

R150 Certificate of patent or registration of utility model

Ref document number: 5319009

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250