JP2011083555A - Apparatus and method for processing eye-fundus image - Google Patents

Apparatus and method for processing eye-fundus image Download PDF

Info

Publication number
JP2011083555A
JP2011083555A JP2009240879A JP2009240879A JP2011083555A JP 2011083555 A JP2011083555 A JP 2011083555A JP 2009240879 A JP2009240879 A JP 2009240879A JP 2009240879 A JP2009240879 A JP 2009240879A JP 2011083555 A JP2011083555 A JP 2011083555A
Authority
JP
Japan
Prior art keywords
ratio
fundus
line
fundus image
determined
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2009240879A
Other languages
Japanese (ja)
Other versions
JP2011083555A5 (en
JP5701494B2 (en
Inventor
Masahiko Kobayashi
正彦 小林
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nidek Co Ltd
Original Assignee
Nidek Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nidek Co Ltd filed Critical Nidek Co Ltd
Priority to JP2009240879A priority Critical patent/JP5701494B2/en
Publication of JP2011083555A publication Critical patent/JP2011083555A/en
Publication of JP2011083555A5 publication Critical patent/JP2011083555A5/ja
Application granted granted Critical
Publication of JP5701494B2 publication Critical patent/JP5701494B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Image Analysis (AREA)
  • Eye Examination Apparatus (AREA)
  • Image Processing (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To provide an apparatus and a method for processing an eye-fundus image where the information on the C/D ratio or the like and the related eye-fundus image are accurately and quickly be confirmed. <P>SOLUTION: The eye-fundus image processing apparatus includes first C/D ratio acquirement means to define the disk and cup lines of the optic nerve disk and cup lines of a first eye-fundus image containing the optic nerve disk, and from these disk and cup lines, seek the first C/D ratio around 360° in the diameter direction, second C/D ratio acquirement means to define the disk and cup lines of the optic nerve disk and cup lines of a second eye-fundus image containing the optic nerve disk, and from these disk and cup lines, seek the second C/D ratio around 360° in the diameter direction, and display control means to display at least one of these first and second eye-fundus images on a monitor, together with the C/D ratio corresponding to the eye-fundus image shown graphically, on the same screen. <P>COPYRIGHT: (C)2011,JPO&INPIT

Description

本発明は、眼底画像から視神経乳頭部の検出解析を行う眼底画像の解析方法、及び眼底画像処理装置に関する。   The present invention relates to a fundus image analysis method for performing detection analysis of an optic nerve head from a fundus image, and a fundus image processing apparatus.

視機能障害の一つに緑内障がある。緑内障の検査としては、眼底像による視神経乳頭部(以下、単に乳頭という)の観察が重要であるといわれている。近年、画像解析技術の進歩により、乳頭を定量的に計測することが可能になっている。このような乳頭の計測においては、例えば、眼底カメラによる眼底の撮影画像から、カップと呼ばれる乳頭の陥凹の外縁の直径と、ディスクと呼ばれる乳頭の外縁の直径(または半径)との比であるC/D比やカップとディスクとの面積比を求め、求めたC/D比(或いは面積比)の値によって被検眼の状態を知る技術が知られている。(例えば、特許文献1参照)
また、緑内障の進行に伴いカップが拡大することが知られているため、C/D比の経時変化を確認することによって緑内障の進行の程度を客観的に評価することが提案されている(例えば、特許文献2参照)
Glaucoma is one of the visual impairments. As a test for glaucoma, it is said that observation of the optic nerve head (hereinafter simply referred to as the “nipple”) by fundus images is important. In recent years, with the advance of image analysis technology, it has become possible to measure the nipple quantitatively. In the measurement of the nipple, for example, it is a ratio of the diameter of the outer edge of the nipple recess called a cup and the diameter (or radius) of the outer edge of the nipple called a disk from a photographed image of the fundus by the fundus camera. A technique is known in which the C / D ratio and the area ratio between the cup and the disk are obtained, and the condition of the eye to be examined is known based on the obtained C / D ratio (or area ratio). (For example, see Patent Document 1)
Further, since it is known that the cup expands with the progress of glaucoma, it has been proposed to objectively evaluate the degree of progression of glaucoma by confirming the change with time of the C / D ratio (for example, , See Patent Document 2)

特開2006−280411号公報JP 2006-280411 A 特開平6−125876号公報JP-A-6-1225876

このようなC/D比を用いて被検眼の状態を検者が診断するためには、より効率よく正確に被検眼の状態を把握することが求められる。また、被検眼に対して経時変化を確認する場合には、基準となる眼底画像と比較対照となる眼底画像、並びに対応するC/D比の変化とを見比べる必要があり、乳頭のディスクとカップとの比率の変化がより的確に確認できることが求められる。   In order for the examiner to diagnose the state of the eye to be examined using such a C / D ratio, it is required to grasp the state of the eye to be examined more efficiently and accurately. In addition, when confirming a change with time in the eye to be examined, it is necessary to compare the fundus image serving as a reference with the fundus image serving as a comparison and the corresponding change in the C / D ratio. It is required that the change in the ratio can be confirmed more accurately.

そこで、本発明は上記従来技術の問題点に鑑み、C/D比等の情報を対応する眼底撮影画像と共に的確に素早く確認することのできる眼底画像処理装置、及び眼底画像処理方法を提供することを技術課題とする。   In view of the above-described problems of the prior art, the present invention provides a fundus image processing apparatus and a fundus image processing method capable of accurately and quickly confirming information such as a C / D ratio together with a corresponding fundus photographed image. Is a technical issue.

上記課題を解決するために、本発明は以下のような構成を備えることを特徴とする。   In order to solve the above problems, the present invention is characterized by having the following configuration.

(1) 被検眼の視神経乳頭部を含んだ第1の眼底撮影画像から前記視神経乳頭部のディスクラインとカップラインを決定し,該決定された前記ディスクライン及びカップラインにより第1のC/D比を経線方向に対して360°分求めるための第1C/D比取得手段と、前記被検眼の視神経乳頭部を含んだ第2の眼底撮影画像から前記視神経乳頭部のディスクラインとカップラインを決定し,該決定された前記ディスクライン及びカップラインにより第2のC/D比を経線方向に対して360°分求めるための第2C/D比取得手段と、前記第1の眼底撮影画像及び前記第2の眼底撮影画像の少なくとも一方をモニタの画面上に表示させる表示制御手段であって,該表示される眼底撮影画像に対応する前記C/D比をグラフとして前記表示される眼底撮影画像と同一画面上に表示させる表示制御手段と、を備えることを特徴とする。
(2) (1)の眼底画像処理装置において、前記表示制御手段は前記第1C/D比取得手段及び第2C/D比取得手段にて求めた第1C/D比及び第2C/D比を重畳してグラフ表示させることを特徴とする。
(3) (2)の眼底画像処理装置は、さらに前記第1C/D比取得手段にて決定される前記ディスクラインを記憶する記憶手段を有し、前記第2C/D比取得手段は前記記憶手段に記憶された前記ディスクラインを呼び出し前記第2眼底撮影画像上における視神経乳頭部のディスクラインとして決定することを特徴とする。
(4) 被検眼の視神経乳頭部を含んだ第1の眼底撮影画像から前記視神経乳頭部のディスクラインとカップラインを決定し,該決定された前記ディスクライン及びカップラインにより第1のC/D比を経線方向に対して360°分求める第1ステップと、前記被検眼の視神経乳頭部を含んだ第2の眼底撮影画像から前記視神経乳頭部のディスクラインとカップラインを決定し,該決定された前記ディスクライン及びカップラインにより第2のC/D比を経線方向に対して360°分求める第2ステップと、横軸が0°〜360°,縦軸がC/D比値とされるグラフに前記第1ステップ及び第2ステップにて求めた第1C/D比及び第2C/D比を重畳して曲線表示させる第3ステップと、を有することを特徴とする。
(5) (4)の眼底画像処理方法において、前記第3ステップにて表示される第1C/D比及び第2C/D比を示す曲線は各々異なる線色,または線種にて表示されることを特徴とする。
(6) (5)の眼底画像処理方法において、前記第2ステップにて決定される前記ディスクラインは前記第1ステップにて決定されたディスクラインを同一形状にてコピーすることにより決定されることを特徴とする。
(7) (6)の眼底画像処理方法において、前記第1ステップにて決定される前記ディスクラインは前記第1眼底撮影画像における視神経乳頭部のディスク縁をポインティングデバイスを用いて指定し,指定されたポイントをスプライン曲線により結ぶことにより決定され、前記第2ステップにて決定されるディスクラインは前記第1眼底撮影画像及び第2眼底撮影画像における視神経乳頭部のディスク縁上の少なくとも4つの同じ特徴点を指定することにより前記第1ステップにて決定されるディスクラインを前記コピーにより前記第2眼底撮影画像上のディスク縁に対応付けることを特徴とする。
(8) (7)の眼底画像処理方法において、前記第2ステップは指定される前記第1眼底撮影画像及び第2眼底撮影画像における視神経乳頭部のディスク縁上の少なくとも4つの同じ指定点情報に基づいて、前記第2眼底撮影画像全体の倍率、及び回転補正を行うことを特徴とする。
(1) A disk line and a cup line of the optic nerve head are determined from a first fundus image including the optic nerve head of the eye to be examined, and a first C / D is determined by the determined disk line and cup line. First C / D ratio acquisition means for obtaining a ratio of 360 ° with respect to the meridian direction, and a discline and a cup line of the optic nerve head from a second fundus image including the optic nerve head of the eye to be examined Second C / D ratio acquisition means for determining and determining a second C / D ratio by 360 ° with respect to the meridian direction using the determined disc line and cup line, and the first fundus image and Display control means for displaying at least one of the second fundus photographed image on a monitor screen, wherein the C / D ratio corresponding to the displayed fundus photographed image is displayed as a graph; And display control means for displaying on the same screen and the fundus photographing image that, characterized in that it comprises a.
(2) In the fundus image processing apparatus according to (1), the display control means calculates the first C / D ratio and the second C / D ratio obtained by the first C / D ratio acquisition means and the second C / D ratio acquisition means. It is characterized by being superimposed and displayed in a graph.
(3) The fundus image processing apparatus according to (2) further includes storage means for storing the disk line determined by the first C / D ratio acquisition means, and the second C / D ratio acquisition means is the storage The disk line stored in the means is called and determined as the disk line of the optic nerve head on the second fundus photographed image.
(4) A disk line and a cup line of the optic nerve head are determined from a first fundus image including the optic nerve head of the eye to be examined, and a first C / D is determined by the determined disk line and cup line. Determining a discline and a cupline of the optic papilla from a first fundus image including the optic papilla of the eye to be examined; The second step of obtaining the second C / D ratio by 360 ° with respect to the meridian direction by the disk line and the cup line, the horizontal axis is 0 ° to 360 °, and the vertical axis is the C / D ratio value And a third step of displaying a curve by superimposing the first C / D ratio and the second C / D ratio obtained in the first step and the second step on the graph.
(5) In the fundus image processing method of (4), the curves indicating the first C / D ratio and the second C / D ratio displayed in the third step are displayed in different line colors or line types. It is characterized by that.
(6) In the fundus image processing method of (5), the disc line determined in the second step is determined by copying the disc line determined in the first step in the same shape. It is characterized by.
(7) In the fundus image processing method according to (6), the disc line determined in the first step designates the disc edge of the optic nerve head in the first fundus image using a pointing device. The disc lines determined in the second step are at least four identical features on the disc edge of the optic papilla in the first fundus image and the second fundus image. The disc line determined in the first step by designating a point is associated with the disc edge on the second fundus photographed image by the copy.
(8) In the fundus image processing method of (7), the second step includes at least four pieces of the same designated point information on the disc edge of the optic nerve head in the designated first fundus photographed image and second fundus photographed image. Based on this, the magnification and rotation correction of the entire second fundus photographed image is performed.

本発明によれば、C/D比等の情報を対応する眼底撮影画像と共に的確に素早く確認することができる。   According to the present invention, it is possible to accurately and quickly confirm information such as the C / D ratio together with the corresponding fundus photographed image.

本実施形態で用いる眼底画像処理装置を以下に説明する。図1は、眼底画像処理装置等の構成をブロック図で示したものである。眼底画像処理装置20は、被検者眼の眼底を撮影するための眼科撮影装置10と通信ケーブル30を介して接続されており、眼科撮影装置10にて撮影された眼底撮影画像(以下、眼底画像と記す)を受け取り、受け取った眼底画像のファイリング、や眼底画像における視神経乳頭部(以下、単に乳頭と記す)のC/D比、R/D比を算出する役目を果たす。   The fundus image processing apparatus used in this embodiment will be described below. FIG. 1 is a block diagram showing the configuration of a fundus image processing apparatus and the like. The fundus image processing apparatus 20 is connected to the ophthalmologic photographing apparatus 10 for photographing the fundus of the subject's eye via the communication cable 30, and a fundus photographed image (hereinafter referred to as fundus oculi) photographed by the ophthalmic photographing apparatus 10. It serves to filing the received fundus image and calculating the C / D ratio and R / D ratio of the optic nerve head (hereinafter simply referred to as the “nipple”) in the fundus image.

なお、本実施形態でいうC/D比とは、乳頭の内側に形成される乳頭陥凹(カップ)の外縁を構成するカップラインの半径を乳頭(ディスク)の外縁を構成するディスクラインの半径で除算した値(比)として求められる。なお、本実施形態では、後述する演算により乳頭の縁(ディスクライン)に外接する四角形(長方形)の中心Oを乳頭中心として算出し、中心Oからディスクラインまでの線分をディスクラインの半径とし,中心Oからカップラインまでの線分をカップラインの半径として定義する。また、R/D比とは、乳頭の外縁と乳頭陥凹の外縁との間の領域として定義されるリム領域の幅と,乳頭中心を通過する乳頭径の比として求められる。ここでのR/D比は中心Oから乳頭の外縁までの線分と、中心Oから乳頭陥凹の外縁までの線分を基準として算出されるものとする。   The C / D ratio in the present embodiment refers to the radius of the cup line constituting the outer edge of the nipple recess (cup) formed inside the nipple, and the radius of the disk line constituting the outer edge of the nipple (disk). It is obtained as a value (ratio) divided by. In the present embodiment, the center O of a rectangle (rectangle) circumscribing the nipple edge (disc line) is calculated as a nipple center by the calculation described later, and the line segment from the center O to the disc line is defined as the radius of the disc line. , The line segment from the center O to the cup line is defined as the radius of the cup line. The R / D ratio is determined as the ratio of the width of the rim region defined as the region between the outer edge of the nipple and the outer edge of the nipple recess and the nipple diameter passing through the nipple center. The R / D ratio here is calculated based on the line segment from the center O to the outer edge of the nipple and the line segment from the center O to the outer edge of the nipple recess.

被検者眼の眼底を撮影する眼科撮影装置10は、被検者眼の眼底撮影を行うための撮影部11、撮影部11を用いて撮影を行うためのトリガ信号を入力させる撮影スイッチ12、装置全体の制御や他の装置との通信を行うための制御部14を有する。撮影部11は眼底を撮影するための撮像素子を含む撮影光学系を持つ。眼科撮影装置10からの撮影画像は、USBケーブル等の通信ケーブル30を介して眼底画像処理装置20へと入力される。本実施形態では、眼底画像をUSBケーブルを用いて眼底画像処理装置20側に送るものとしているが、これに限るものではなく、LAN(ローカルエリアネットワーク)やインターネット等の通信手段を介したデータの受け渡しや、USBメモリ等の記憶媒体を用いたデータの受け渡しであってもよい。   An ophthalmologic imaging apparatus 10 that images the fundus of the subject's eye includes an imaging unit 11 for imaging the fundus of the subject's eye, an imaging switch 12 that inputs a trigger signal for imaging using the imaging unit 11, A control unit 14 is provided for controlling the entire apparatus and communicating with other apparatuses. The imaging unit 11 has an imaging optical system that includes an imaging device for imaging the fundus. A photographed image from the ophthalmologic photographing apparatus 10 is input to the fundus image processing apparatus 20 via a communication cable 30 such as a USB cable. In this embodiment, the fundus image is sent to the fundus image processing apparatus 20 using a USB cable. However, the present invention is not limited to this, and data transmission via a communication means such as a LAN (local area network) or the Internet is not limited thereto. It may be delivery or delivery of data using a storage medium such as a USB memory.

また、本実施形態に用いる眼科撮影装置10としては、眼底カメラ等の既存の眼科撮影装置を使用することができる他、撮影部内蔵型のスリットランプ(細隙灯顕微鏡)など、被検者眼の眼底像を撮影し撮影画像をデジタルデータとして眼底画像処理装置20に渡すことができるものであればよい。なお、眼科撮影装置10自体に本実施形態で説明する眼底画像処理装置20の機能を持たせることも可能である。   Further, as the ophthalmologic photographing apparatus 10 used in the present embodiment, an existing ophthalmic photographing apparatus such as a fundus camera can be used, and a subject's eye such as a slit lamp (slit lamp microscope) with a built-in photographing section. Any fundus image may be used as long as the fundus image can be captured and the captured image can be transferred to the fundus image processing apparatus 20 as digital data. The ophthalmologic photographing apparatus 10 itself can have the function of the fundus image processing apparatus 20 described in the present embodiment.

眼底画像処理装置20は、パーソナルコンピュータ等の既存の画像を処理することのできる装置が用いられる。眼底画像処理装置20は、被検者眼のC/D比、R/D比を算出するための眼底画像処理プログラム、及び眼科撮影装置10で撮影された多数の画像データが記憶されるハードディスクである記憶部21と、眼底画像処理プログラムの入出力画面である眼底画像処理画面及び眼底画像が表示される表示部であり、液晶ディスプレイ等からなるモニタ22と、モニタ22に表示された眼底画像処理画面上での各種操作を行うための入力手段(ポインティングデバイス)であるマウス23と、眼底画像処理装置20の全体の駆動を制御するためのCPUや通信回路等からなる制御部24と、から構成される。制御部24は、モニタ22の表示制御やプログラムの実行、マウス23等の入力手段からの入力信号に基づく装置の制御、画像処理等を行う。なお、図示はしないが各種設定や入力を行うための入力手段となるキーボードも備えている。また、記憶部21に記憶されている眼底画像等の多数の画像データには撮影日時等の各種撮影条件や被検者情報等が付されており、これらの情報を用いて多数の画像データを管理することができるようになっている。なお、本実施形態の眼底画像処理プログラムはこれらの画像データを一元で管理することのできるファイリングプログラムとしての機能を含む。   As the fundus image processing apparatus 20, an apparatus capable of processing an existing image such as a personal computer is used. The fundus image processing apparatus 20 is a hard disk in which a fundus image processing program for calculating the C / D ratio and R / D ratio of the subject's eye and a large number of image data photographed by the ophthalmologic photographing apparatus 10 are stored. A storage unit 21, a fundus image processing screen that is an input / output screen of a fundus image processing program, and a display unit for displaying a fundus image, a monitor 22 including a liquid crystal display, and fundus image processing displayed on the monitor 22 A mouse 23 which is an input means (pointing device) for performing various operations on the screen, and a control unit 24 including a CPU and a communication circuit for controlling the entire driving of the fundus image processing apparatus 20 Is done. Control unit 24, display control and execution of the program of the monitor 22, the control of the device based on the input signal from the input means such as a mouse 23, an image processing or the like performed. Although not shown, a keyboard is also provided as input means for performing various settings and inputs. In addition, a large number of image data such as fundus images stored in the storage unit 21 is attached with various photographing conditions such as photographing date and time, subject information, and the like. It can be managed. Note that the fundus image processing program of this embodiment includes a function as a filing program capable of managing these image data in a unified manner.

マウス23はクリック用の左右ボタンと、マウスホイールとを持つ。なお、モニタ22にタッチパネルが設置されている場合には、ポインティングデバイスとしてタッチペン等を使用することができる。なお、眼底画像処理画面の詳細な説明については後述する。   The mouse 23 has left and right buttons for clicking and a mouse wheel. When a touch panel is installed on the monitor 22, a touch pen or the like can be used as a pointing device. A detailed description of the fundus image processing screen will be described later.

次に、以上のような構成を備える眼底画像処理装置を用いた眼底画像の処理方法を図2乃至図4のフローチャートに基づき説明する。なお、図2は被検眼のC/D比、R/D比の経時変化を算出する手順を示したフローチャート、図3は経時変化を求める際に基準となる眼底画像(基準画像)の設定についてのフローチャート、図4は経時変化の演算についてのフローチャートを示す。   Next, a fundus image processing method using the fundus image processing apparatus having the above-described configuration will be described with reference to the flowcharts of FIGS. 2 is a flowchart showing a procedure for calculating the temporal change of the C / D ratio and R / D ratio of the eye to be examined, and FIG. 3 is a setting of a fundus image (reference image) serving as a reference when obtaining the temporal change. FIG. 4 shows a flowchart of the change with time.

まず、ステップ100で検者は眼科撮影装置10と眼底画像処理装置20とを起動させる。眼底画像処理装置20のモニタ22の初期画面には、眼底画像処理プログラムを立ち上げるための図示を略すアイコンと、マウス23による入力操作を行うための図示を略すカーソルが表示されている。検者によるカーソルの操作によりアイコンがダブルクリックされると、制御部24は眼底画像処理プログラムを起動させて、モニタ22上に眼底画像処理画面を表示させる。なお、眼底画像処理画面の初期画面としては、図示を略す患者一覧画面が表示されるので、検者は該当する患者IDを選択する。この状態で、眼科撮影装置10で取得された撮影画像を取り込むための図示を略す撮影アイコンが選択されると、モニタ22上に画像取込画面200が表示される。   First, in step 100, the examiner activates the ophthalmologic photographing apparatus 10 and the fundus image processing apparatus 20. On the initial screen of the monitor 22 of the fundus image processing apparatus 20, an unillustrated icon for starting up the fundus image processing program and an unillustrated cursor for performing an input operation with the mouse 23 are displayed. When the icon is double-clicked by the cursor operation by the examiner, the control unit 24 activates the fundus image processing program and causes the fundus image processing screen to be displayed on the monitor 22. As the initial screen of the fundus oculi image processing screen, the patient list screen a not-shown is displayed, the examiner selects the patient ID appropriate. In this state, when an imaging icon (not shown) for capturing a captured image acquired by the ophthalmic imaging apparatus 10 is selected, an image capture screen 200 is displayed on the monitor 22.

図5は画像取込画面200の例である。画像取込画面200の上部にはコントロールバー210と、中央部には眼科撮影装置10で撮影された眼底画像が表示される表示エリア220が用意されている。コントロールバー210には、眼底画像を保存するための保存アイコン202、眼底画像を削除するための削除アイコン203、後述するC/D比、R/D比を算出するためのフォローアップ画面に切り替える画面切換アイコン204等、各種条件設定を行うための複数のアイコンが用意されている。   FIG. 5 shows an example of the image capture screen 200. A control bar 210 is provided at the top of the image capture screen 200, and a display area 220 for displaying a fundus image photographed by the ophthalmologic photographing apparatus 10 is provided at the center. The control bar 210 has a save icon 202 for saving the fundus image, a delete icon 203 for deleting the fundus image, and a screen for switching to a follow-up screen for calculating a C / D ratio and an R / D ratio described later. A plurality of icons for setting various conditions such as a switching icon 204 are prepared.

ステップ110で検者は被検者の眼底撮影を行う。検者は眼科撮影装置10の撮影部11と被検者眼との位置合わせを行い、撮影スイッチ12を押して眼底を撮影する。制御部14はスイッチ12からの入力信号に基づき、撮影部11を駆動させて被検者眼の眼底の画像データを得る。   In step 110, the examiner performs fundus photography of the subject. The examiner aligns the imaging unit 11 of the ophthalmologic imaging apparatus 10 with the subject's eye, and presses the imaging switch 12 to image the fundus. Based on the input signal from the switch 12, the control unit 14 drives the imaging unit 11 to obtain image data of the fundus of the subject's eye.

次に、ステップ120で制御部24は眼底像の画像データを画像処理装置20の記憶部21に記憶させる。眼科撮影装置10により取得された画像データは、通信ケーブル30を介して画像処理装置20側に自動的に送信される。画像処理装置20で画像データが受信されると、制御部24は表示エリア220に眼底画像Fを表示する。検者は眼底画像Fを確認して保存する場合には保存アイコン202を選択する。削除する場合には削除する場合には削除アイコン203を選択する。制御部24は保存アイコン202からの信号に基づき、画像データを記憶部21に記憶させる。また、眼科撮影装置10がメモリを有する場合には、外部記憶媒体を介して画像処理装置20側の記憶部21に画像データが入力されるようにしても良い。   Next, in step 120, the control unit 24 stores the image data of the fundus image in the storage unit 21 of the image processing apparatus 20. The image data acquired by the ophthalmologic photographing apparatus 10 is automatically transmitted to the image processing apparatus 20 side via the communication cable 30. When image data is received by the image processing device 20, the control unit 24 displays the fundus image F in the display area 220. The examiner selects the save icon 202 when the fundus image F is confirmed and saved. When deleting, the delete icon 203 is selected when deleting. The control unit 24 stores the image data in the storage unit 21 based on the signal from the save icon 202. When the ophthalmologic photographing apparatus 10 has a memory, image data may be input to the storage unit 21 on the image processing apparatus 20 side via an external storage medium.

このように、ステップ110とステップ120とを適宜繰り返し行うことによって、同一被検者(被検者眼)における撮影日時の異なる複数の眼底画像を取得することができる。撮影日時としては最初に撮影した眼底画像に対して、例えば1ヵ月後、3ヵ月後、6ヵ月後、1年後等、被検眼眼底の経時的な変化を知る上で必要とされる間隔であればよい。また、撮影された眼底画像は撮影日時や被検眼情報(例えば被検者識別用のID情報や左右眼情報等)とともに記憶部21に記憶される。   As described above, by performing step 110 and step 120 as appropriate, a plurality of fundus images having different photographing dates and times for the same subject (subject's eyes) can be acquired. As the imaging date and time, for example, one month later, three months later, six months later, one year later, etc., with respect to the first photographed fundus image, it is an interval necessary for knowing the temporal changes in the fundus of the eye to be examined. I just need it. Further, the photographed fundus image is stored in the storage unit 21 together with the photographing date and time and the eye information (for example, ID information for identifying the subject, left and right eye information, etc.).

次に、ステップ130で検者は経時変化を求める際に基準となる眼底画像(以下、基準画像と記す)の設定を行う。図3の基準画像設定のフローチャートにおいて、まず、検者は画面切換アイコン204を選択する。制御部24はアイコン204の選択による入力信号に基づき、モニタ22の表示を画像取込画面200からフォローアップ画面300に切り変える。   Next, in step 130, the examiner performs setting of a fundus image (hereinafter referred to as a reference image) that serves as a reference when obtaining a change with time. In the reference image setting flowchart of FIG. 3, first, the examiner selects the screen switching icon 204. The control unit 24 switches the display on the monitor 22 from the image capture screen 200 to the follow-up screen 300 based on the input signal by the selection of the icon 204.

図6はフォローアップ画面300の例である。ここで、画面300の構成を説明する。フォローアップ画面300の上部に用意されたコントロールバー310には、ディスク領域の境界線(ディスクライン)Dの設定を行うためのディスクアイコン311、カップ領域の境界線(カップライン)Cの設定を行うためのカップアイコン312、基準画像のディスクラインDを基準ライン(ベースライン)としてコピーするためのコピーアイコン313、後述する経過観察のグラフ表示の種類を切り替えるグラフ切換アイコン314、C/D比等を算出するための解析アイコン315等、各種条件設定を行うための複数のアイコンが用意されている。   FIG. 6 is an example of the follow-up screen 300. Here, the configuration of the screen 300 will be described. In the control bar 310 prepared in the upper part of the follow-up screen 300, a disk icon 311 for setting a boundary line (disk line) D of the disk area and a boundary line (cup line) C of the cup area are set. A cup icon 312 for copying, a copy icon 313 for copying the disc line D of the reference image as a reference line (baseline), a graph switching icon 314 for switching the type of follow-up graph display to be described later, a C / D ratio, etc. A plurality of icons for setting various conditions such as an analysis icon 315 for calculation are prepared.

画面300の左側に用意されたサムネイルリスト320には、記憶部21に記憶された眼底画像のうち、患者のID情報によって抽出されたサムネイルの一覧が時系列で表示される。なお、切換タブ320aが選択されることでサムネイルリスト320の表示状態を両眼、左眼、右眼とで切り替えることができる。ここでは、切換タブ320aにより両眼が選択された場合が示されている。   In the thumbnail list 320 prepared on the left side of the screen 300, a list of thumbnails extracted based on patient ID information among the fundus images stored in the storage unit 21 is displayed in time series. Incidentally, it is possible to switch the display state of the thumbnail list 320 by switching tabs 320a is selected in both eyes, left eye, the right eye. Here, a case where both eyes are selected by the switching tab 320a is shown.

画面300の中央部の表示領域330にはサムネイルリスト320で選択された眼底画像が表示される。また、表示領域330は左側の表示欄331と右側の表示欄332とから構成され、登録された基準画像は必ず左側の表示欄331に表示される。右側の表示欄332には、基準画像との比較により経時観察を行うための眼底画像(以下、経過画像と記す)が表示される。なお、表示欄を3つ以上設けることにより、経過画像が一度に複数枚表示されるようにしても良い。   The fundus image selected in the thumbnail list 320 is displayed in the display area 330 at the center of the screen 300. The display area 330 includes a left display column 331 and a right display column 332, and the registered reference image is always displayed in the left display column 331. To the right of the display field 332, a fundus image for performing over time observed by comparison with the reference image (hereinafter, referred to as the elapsed image) is displayed. Note that a plurality of progress images may be displayed at a time by providing three or more display columns.

表示欄331、332がマウス23でダブルクリックされると、サムネイルリスト320の下側には、眼底画像の全体が表示されるパンウィンドー321が現れる。パンウィンドー321の下方に用意された倍率調節バー321aが調節されることによって、表示領域330に表示された眼底画像が拡大・縮小される。なお、表示欄331又は332の眼底画像の表示範囲はパンウィンドー321の表示範囲Rで確認することが出来る。   When the display fields 331 and 332 are double-clicked with the mouse 23, a pan window 321 in which the entire fundus image is displayed appears below the thumbnail list 320. By adjusting the magnification adjustment bar 321a prepared under the pan window 321, the fundus image displayed in the display area 330 is enlarged or reduced. The display range of the fundus image display field 331 or 332 can be confirmed in the display range R of bread window 321.

画面300の下側には、グラフ表示領域340が用意されている。グラフ表示領域340には、表示領域330の設定に基づき算出されたC/D比、R/D比、中心OからディスクラインDまでの距離、中心OからカップラインCまでの距離の演算結果が曲線としてグラフ表示される。表示領域340の下側にはサムネイルリスト320とグラフの演算結果との対応関係を示すためのコメント欄341が用意されている。ここでは、表示領域340にグラフ表示される曲線は、演算結果ごとに異なる色で表示されるようになっている。そこで、コメント欄341にグラフの色と画像データとの対応関係を示すことで、グラフと眼底画像との対応関係を視覚的に分かり易くしている。
なお、グラフ切換アイコン314が選択されると、グラフ表示領域340の表示形式が切り替えられるようになっている。
A graph display area 340 is prepared on the lower side of the screen 300. In the graph display area 340, calculation results of the C / D ratio, R / D ratio, distance from the center O to the disk line D, and distance from the center O to the cup line C calculated based on the setting of the display area 330 are displayed. The graph is displayed as a curve. Below the display area 340, a comment field 341 for indicating the correspondence between the thumbnail list 320 and the graph calculation result is prepared. Here, the curve displayed in a graph in the display area 340 is displayed in a different color for each calculation result. Therefore, the correspondence between the color of the graph and the image data is shown in the comment column 341, so that the correspondence between the graph and the fundus image can be easily understood visually.
When the graph switching icon 314 is selected, the display format of the graph display area 340 is switched.

このように、表示領域330の眼底画像とグラフ表示領域340のC/D比等の演算結果とが同時に表示されるので、検者は基準画像と経過画像、及びC/D比を見比べることで、乳頭のディスクとカップとの比率の変化をより的確に確認することができるようになる。   In this way, the fundus image in the display area 330 and the calculation result such as the C / D ratio in the graph display area 340 are displayed at the same time, so the examiner can compare the reference image with the elapsed image and the C / D ratio. Thus, the change in the ratio between the disc and the cup of the nipple can be confirmed more accurately.

このような画面300を用いてステップ130で示す基準画像の設定を行う。ステップ130はさらに図3に示すステップ131〜135により構成される。初めにステップ131で、検者は経過観察の基準とする画像(基準画像)を選択する。サムネイルリスト320からサムネイルが選択されると、制御部24は記憶部21から該当する画像データを呼び出して、表示欄331に眼底画像を表示させる(図8参照)。   The reference image shown in step 130 is set using such a screen 300. Step 130 is further configured by steps 131 to 135 shown in FIG. First, in step 131, the examiner selects an image (reference image) as a reference for follow-up observation. When a thumbnail is selected from the thumbnail list 320, the control unit 24 calls the corresponding image data from the storage unit 21, and displays the fundus image in the display field 331 (see FIG. 8).

次に検者はパンウィンドー321を利用して、表示欄331に眼底画像の乳頭付近が拡大表示されるように、倍率と表示位置を調節する。なお、表示欄331に表示されている画像をマウス23でドラッグさせることでも表示位置の調節ができる。   Next, the examiner uses the pan window 321 to adjust the magnification and the display position so that the vicinity of the nipple of the fundus image is enlarged and displayed in the display field 331. The display position can also be adjusted by dragging the image displayed in the display field 331 with the mouse 23.

次に、ステップ132にて、検者によるカーソルの操作でディスクラインDを設定する。図7はディスクラインDとカップラインCの設定の説明図である。ディスクアイコン311が選択されると、ディスク領域の境界線を指定するポイントpの設定が可能になる。なお、眼底の赤色に比べて、ディスク領域(乳頭)はピンク色から黄橙色の明るい色合いをしている。その為、検者は眼底画像から色合いの境界を読み取ることによってポイントpの位置を決定していく。   Next, in step 132, the disc line D is set by operating the cursor by the examiner. FIG. 7 is an explanatory diagram for setting the disc line D and the cup line C. When the disk icon 311 is selected, it is possible to set a point p that designates a boundary line of the disk area. Incidentally, in comparison with the red fundus, disk space (papilla) has a light color of yellow-orange pink. Therefore, the examiner determines the position of the point p by reading the boundary of the hue from the fundus image.

図7(a)に示すように、検者は目視によりディスクの縁を判断しながら、この縁上にポイントpを複数形成させる。ポイントpはディスク縁にカーソルを位置させマウスの左クリックにより形成させる。マウスからのクリック信号により、制御部24はカーソルが位置するディスク縁上にポイントp(ここでは、「×印」マーク)を表示させると共に、ポイントpの位置(座標)を記憶部21に記憶させる。同様にマウス23の操作でディスク縁をなぞるように複数のポイントpを指定して、記憶部21に各ポイントpの座標を記憶させる。なお、ここでは最初に指定されたポイントpが緑色であるのに対し、2番目以降に指定された他のポイントpは白色で表示される。始点と他の点とを異なる色で表示させることより、ポイントpの始点を視覚的に分かり易くしている。   As shown in FIG. 7A, the examiner forms a plurality of points p on this edge while visually judging the edge of the disk. Point p is formed by left-clicking the mouse with the cursor positioned on the edge of the disk. In response to a click signal from the mouse, the control unit 24 displays a point p (here, “x mark” mark) on the edge of the disk where the cursor is located, and stores the position (coordinates) of the point p in the storage unit 21. . Similarly specify multiple points p so as to trace the disc edge by operating the mouse 23, and stores the coordinates of each point p in the storage unit 21. Here, for the first to the specified point p is green, the other points p specified in the second and subsequent is displayed in white. By displaying the start point and other points in different colors, the start point of the point p can be easily understood visually.

ディスク縁に沿ってポイントpを複数形成させていき、最後に再び緑色のポイントp(始点)が選択されると、制御部24は指定された各ポイントpがスプライン曲線による滑らかな曲線で接続されるように、ディスクラインDの演算を行う。また、制御部24は各ポイントpの表示に変えて、算出されたディスクラインDをモニタ22上の眼底画像に重ねて表示させる(図7(b)参照)。各ポイントpをスプライン曲線で接続することで、歪な形状のディスク領域であっても、ディスクラインDをより実際の境界線に近似させた形状にすることができる。   When a plurality of points p are formed along the disk edge, and finally a green point p (start point) is selected again, the control unit 24 connects each designated point p with a smooth curve by a spline curve. Thus, the operation of the disk line D is performed. Further, the control unit 24 displays the calculated disc line D so as to overlap the fundus image on the monitor 22 instead of displaying each point p (see FIG. 7B). By connecting each point p with a spline curve, the disk line D can be made a shape that more closely approximates the actual boundary line even in a distorted disk area.

なお、ここでは各ポイントpをスプライン曲線で接続することとしたが、これ以外にも、周知の平滑化処理演算によりディスクラインDを決定するようにしても良い。なお、上記の演算によってディスクラインが正しく演算されるためには、ディスクの境界線上に少なくとも4点以上のポイントが選択されるようにする。   Here, each point p is connected by a spline curve. However, the disk line D may be determined by a known smoothing calculation. In order to disk line is calculated correctly by the above-described operation, so that at least four points or more points are selected on the disc border.

更には、タッチパネルを有するモニタ22が使用される場合には、ポインティングデバイスとして使用されるタッチペンの操作によってディスクラインDが直接描かれるようにしても良い(後述のカップラインCについても同様に直接描かれるようにしても良い。)
次に、ステップ133で、以上のように算出されたディスクラインDをベースラインとして記憶部21に登録させる。基準画像のサムネイルをサムネイルリスト320で選択した状態で、マウス32の右クリックをすると、図示を略すポップアップメニューが表示される。ポップアップメニューにはベースライン登録のためのコマンド用意されている。カーソルにより該当するコマンドが選択されると、制御部24はディスクラインD(形状)をベースラインとして記憶部21に記憶させる。なお、ここでは、ディスクラインDを設定してから基準画像として登録するようにしているが、基準画像を登録してからディスクラインDを設定するようにしても良い。
Further, when the monitor 22 having a touch panel is used, the disk line D may be directly drawn by operating a touch pen used as a pointing device (the same is true for the cup line C described later). You may be allowed to.)
Next, in step 133, the disk line D calculated as described above is registered in the storage unit 21 as a baseline. When the thumbnail of the reference image is selected in the thumbnail list 320, when the right mouse button 32 is clicked, a pop-up menu (not shown) is displayed. The pop-up menu provides commands for baseline registration. When the corresponding command is selected by the cursor, the control unit 24 stores the disk line D (shape) in the storage unit 21 as a baseline. Here, the disk line D is set and then registered as the reference image. However, the disk line D may be set after the reference image is registered.

次に、ステップ134でカップ縁であるカップラインCを設定する。カップアイコン312が選択されると、カーソルの操作によってカップ縁の位置を示すポイントpの設定が可能になる。なお、カップ領域は乳頭(ディスク)の中でも、更に明るい色合いの薄いピンクがかった白色部分(蒼白部分)として捉えられる。つまり、カップラインCの設定には蒼白部分の境界線上にポイントpが指定されるようにすれば良い。   Next, in step 134, a cup line C which is a cup edge is set. When the cup icon 312 is selected, the point p indicating the position of the cup edge can be set by operating the cursor. In addition, the cup area is captured as a light pinkish white part (light white part) in the nipple (disc). That is, for setting the cup line C, the point p may be designated on the borderline of the white part.

図7(c)に示すように、検者はディスクラインDの設定と同様の方法で、カップ領域(蒼白部分)の境界線上に複数のポイントpを指定する。そして、再び始点のポイントpが選択されると、図7(d)に示すように、制御部24は指定された各ポイントpをスプライン曲線で接続してカップラインCを決定する。   As shown in FIG. 7C, the examiner designates a plurality of points p on the boundary line of the cup area (white area) by the same method as the setting of the disc line D. Then, when the starting point p is selected again, as shown in FIG. 7D, the control unit 24 determines the cup line C by connecting the designated points p with a spline curve.

次に、ステップ135で、制御部24は基準画像でのC/D比を求める。解析アイコン315がカーソルにより選択されると、制御部24はディスクラインDの上下左右方向に外接する四角形(長方形)の図形を想定してその中心Oを求める。さらに制御部24は中心Oの座標とディスクラインDの座標により求められる線分aと、中心Oの座標とカップラインCの座標により求められる線分bとを所定の角度毎に求め、線分bを線分aで除算することで角度毎にC/D比を求めて記憶部21に記憶させる。例えば、C/D比の演算は1〜5度ステップで、中心Oを中心として360度方向で行われる。360度方向でのC/D比が求めら得ることで、乳頭全体のC/D比の経時変化だけでなく、乳頭(ディスク)の特定の箇所でのC/D比の変化を確認出来るようになる。また、制御部24は、中心Oを通る水平方向のライン(軸)AX1と、垂直方向のライン(軸)AX2とを表示欄331上に表示させる。この水平方向と垂直方向の軸AX1、AX2によりディスク領域は4分割され、ここでは、軸AX1の右端を原点(0°)として、反時計回りに軸AX1の右端がT=0°、軸AX2の上端がS=90°、軸AX1の左端がN=180°、軸AX2の下端がI=270°と定義される(図7(d)参照)。   Next, in step 135, the control unit 24 obtains the C / D ratio in the reference image. When the analysis icon 315 is selected by the cursor, the control unit 24 obtains the center O assuming a square (rectangular) figure circumscribing the disk line D in the vertical and horizontal directions. Further, the control unit 24 obtains a line segment a obtained from the coordinates of the center O and the coordinates of the disc line D and a line segment b obtained from the coordinates of the center O and the coordinates of the cup line C for each predetermined angle. By dividing b by the line segment a, the C / D ratio is obtained for each angle and stored in the storage unit 21. For example, the calculation of the C / D ratio is performed in 1 to 5 degree steps and in the 360 degree direction with the center O as the center. By obtaining the C / D ratio in the 360 degree direction, it is possible to confirm not only the time-dependent change in the C / D ratio of the entire nipple but also the change in the C / D ratio at a specific location on the nipple (disc). become. In addition, the control unit 24 displays a horizontal line (axis) AX1 passing through the center O and a vertical line (axis) AX2 on the display column 331. The disk area is divided into four by the horizontal and vertical axes AX1 and AX2. Here, the right end of the axis AX1 is set to the origin (0 °), and the right end of the axis AX1 is T = 0 ° and the axis AX2 is counterclockwise. Is defined as S = 90 °, the left end of the axis AX1 is defined as N = 180 °, and the lower end of the axis AX2 is defined as I = 270 ° (see FIG. 7D).

以上のように、360度の経線方向でのC/D比が算出されると、制御部24はグラフ表示領域340に縦軸がC/D比(ここでは0〜1の値),横軸が経線方向の角度(0〜360度)のC/D比のグラフ上に360°方向のC/D比を表した曲線Aを表示させる。なお、グラフ表示領域340は表示欄331と対応付けて4つの領域に分割されており、各軸(T、S,N、I)は表示欄331の各軸(T、S,N、I)に対応している。これにより、検者は表示欄331とグラフ表示領域340の(記号)を確認するだけで、グラフ表示領域340と表示欄331との対応関係を簡単に把握できるようになる。   As described above, when the C / D ratio in the meridian direction of 360 degrees is calculated, the control unit 24 displays the graph display area 340 with the C / D ratio (0 to 1 here) in the vertical axis and the horizontal axis. There displays the curve a representing the 360 ° direction C / D ratio on a graph of C / D ratio of meridional angle (0 to 360 degrees). The graph display area 340 is divided into four areas in association with the display field 331, and each axis (T, S, N, I) is each axis (T, S, N, I) in the display field 331. It corresponds to. Thus, the examiner can easily grasp the correspondence between the graph display area 340 and the display field 331 only by confirming the (symbol) of the display field 331 and the graph display area 340.

同様に、R/D比についてもベースライン(ディスク)DとカップラインCの経線方向の座標に基づき、所定の角度毎に演算が行なわれることで、グラフ表示領域340には360度方向での演算結果が曲線Bとして表示される。このときの縦軸はR/D比(0〜1)である。また、同様にグラフ上には中心OからカップラインC又はディスクラインDまでの距離の変化を示す変化量Cも表示され、他端の縦軸には中心Oからの距離が示される。   Similarly, the R / D ratio is calculated for each predetermined angle based on the coordinates of the meridian direction of the base line (disk) D and the cup line C, so that the graph display area 340 has a 360 degree direction. The calculation result is displayed as curve B. The vertical axis at this time is the R / D ratio (0 to 1). Similarly, a change amount C indicating a change in the distance from the center O to the cup line C or the disk line D is also displayed on the graph, and the vertical axis at the other end indicates the distance from the center O.

以上のように基準画像の設定・演算が行なわれた後に、基準画像と後日に撮影された眼底画像との比較から、C/D比及びR/D比の経時変化を求める。図2のステップ140で、検者は前述と同様の手順でモニタ22にフォローアップ画面300を表示させる。このとき、制御部24は記憶部21から基準画像として登録された画像データを自動的に呼び出して、水平・垂直のラインと共に表示欄331に表示させる。   After the setting and calculation of the reference image as described above, the change with time of the C / D ratio and the R / D ratio is obtained from the comparison between the reference image and the fundus image taken at a later date. In step 140 of FIG. 2, the examiner displays the follow-up screen 300 on the monitor 22 in the same procedure as described above. At this time, the control unit 24 automatically calls the image data registered as the reference image from the storage unit 21 and causes the display field 331 to display the image data together with the horizontal and vertical lines.

前述したステップ100からステップ120の繰り返しにより、新たな眼底の画像データが記憶部21に記憶されていると、サムネイルリストには新しく追加された眼底画像のサムネイルも表示される。   When new fundus image data is stored in the storage unit 21 by repeating Step 100 to Step 120 described above, thumbnails of newly added fundus images are also displayed in the thumbnail list.

図4のステップ141で、サムネイルリスト320から経過観察をしたい眼底画像(基準画像と同じ側の眼)のサムネイルが選択されると、制御部24は、記憶部21から画像データを呼び出して、サムネイルリスト320上に選択された経過画像を表示させる。次に、検者は前述と同様に、画面330上に表示されたパンウィンドー321の操作によって、表示欄332上に表示された経過画像が所望の表示状態になるようにする。   When the thumbnail of the fundus image (the eye on the same side as the reference image) to be monitored is selected from the thumbnail list 320 in step 141 in FIG. 4, the control unit 24 calls the image data from the storage unit 21 to display the thumbnail. The selected progress image is displayed on the list 320. Next, as described above, the examiner operates the pan window 321 displayed on the screen 330 so that the progress image displayed on the display field 332 becomes a desired display state.

次に、表示欄331の眼底画像(基準画像)と表示欄332の眼底画像(経過画像)との整合性を取るために、表示欄332の眼底画像の補正を行う。図8はディスクコピーによる画像補正についての説明図である。   Next, in order to ensure consistency between the fundus image (reference image) in the display column 331 and the fundus image (progression image) in the display column 332, the fundus image in the display column 332 is corrected. FIG. 8 is an explanatory diagram of image correction by disk copy.

ステップ142で、ディスクコピーアイコン313が選択されると、表示欄331の基準画像のディスクラインD上に複数箇所の特徴点chを指定できる状態となる。ここでは特徴点chは4箇所指定されるように記憶部21に予め設定されているとする。図8(a)に示すように、検者によるカーソルの操作で4箇所の特徴点chが指定されると、制御部24は各特徴点chの座標を記憶部21に記憶させる。なお、特徴点chとしてはディスクラインD上に位置する血管等、経時変化に関わらず位置・形状が固定されているものが選択されれば良い。なお、各特徴点chには指定した順番を示す番号が付けられている。なお、特徴点chは少なくとも3箇所以上入力されれば良い。少なくとも3箇所の特徴点chが入力されることで、眼底画像の拡大縮小、回転だけでなく、歪の補正ができるようになる。   When the disc copy icon 313 is selected in step 142, it becomes possible to designate a plurality of feature points ch on the disc line D of the reference image in the display field 331. Here, it is assumed that four feature points ch are preset in the storage unit 21 so that four points are designated. As shown in FIG. 8A, when four feature points ch are designated by the cursor operation by the examiner, the control unit 24 causes the storage unit 21 to store the coordinates of each feature point ch. As the feature point ch, it is only necessary to select a feature point having a fixed position and shape regardless of changes over time, such as a blood vessel located on the disc line D. Each feature point ch is assigned a number indicating the designated order. It should be noted that at least three or more feature points ch may be input. By feature point ch at least three are input, scaling fundus image, as well as rotating, so that it is correct distortion.

次に、ステップ143で、表示欄332の経過画像に、ベースライン上に指定した4箇所の特徴点chと同じ位置となるように特徴点chを指定する。この時、基準画像の特徴点chの番号を参照しながら、同じ順番で特徴点chが指定されるようにする。図8(a)に示すように、4箇所の特徴点chが指定されると、制御部24はフォローアップ画面300上にディスクコピーの有無を確認するための図示を略すコメントを表示させる。   Next, in step 143, the feature point ch is designated so that it becomes the same position as the four feature points ch designated on the baseline in the progress image in the display field 332. At this time, the feature points ch are designated in the same order while referring to the feature point ch numbers of the reference image. As shown in FIG. 8A, when four feature points ch are designated, the control unit 24 displays a comment (not shown) for confirming the presence or absence of disk copy on the follow-up screen 300.

同一被検者の乳頭の大きさ(ディスクラインD)は経時的に変わらないことが経験的に知られている。制御部24は、先ず基準画像側にて設定した4つの特徴点chに基づく相互の位置関係情報と、経過画像側にて設定した4つの特徴点に基づく相互の位置関係情報と相関するように基準画像に対する経過画像全体の回転、歪み等を補正するとともに、基準画像で設定されたディスクラインDの形状を経過画像におけるディスクラインDとして適用する。   It is empirically known that the nipple size (discline D) of the same subject does not change over time. The control unit 24 first correlates the mutual positional relationship information based on the four feature points ch set on the reference image side and the mutual positional relationship information based on the four feature points set on the progress image side. rotation of the entire course image with respect to the reference image, thereby correcting distortion and the like, to apply the shape of the disk line D set in the reference image as the disk line D in the course image.

ステップ144で、ディスクコピーが実行されると、制御部24はベースラインの画像データを記憶部21から呼び出し、ベースラインの特徴点chの各座標と、経過画像上に指定された特徴点chの各座標とを一致させるように、表示欄332の経過画像上にコピーをする。   In step 144, when the disk copy is executed, the control unit 24 calls the baseline image data from the storage unit 21, and coordinates of the feature point ch of the baseline and the feature point ch designated on the progress image. Copying is performed on the progress image in the display field 332 so as to match each coordinate.

そして、ステップ145で、制御部24は、表示欄332の経過画像の表示状態を表示欄331の基準画像に合わせるために、経過画像の回転、歪み、大きさ等を補正する演算を自動的に行う。これにより、表示欄331の基準画像の表示状態と表示欄332の経過画像の表示状態とが自動的に一致される共に、表示欄332には自動的にディスクラインDが設定される。   In step 145, the control unit 24 automatically performs calculations for correcting the rotation, distortion, size, and the like of the progress image so that the display state of the progress image in the display field 332 matches the reference image in the display field 331. Do. Thus, the display state of the reference image in the display field 331 and the display state of the elapsed image in the display field 332 are automatically matched, and the disc line D is automatically set in the display field 332.

次に、ステップ146で、前述と同様の手順で経過画像のカップ領域の境界線上に複数のポイントpを指定することによりカップラインCが設定されると、図8(b)に示すように、表示欄332にも表示欄331と同様に、中心Oを通る水平方向と垂直方向の軸が表示される。そして、ステップ147で、ステップ144で設定されたディスクラインDとステップ146で設定されたカップラインCとに基づき、前述のステップ135と同様の方法でC/D比が求められる。   Next, when the cup line C is set in step 146 by designating a plurality of points p on the boundary line of the cup area of the elapsed image in the same procedure as described above, as shown in FIG. Similarly to the display column 331, the display column 332 also displays horizontal and vertical axes passing through the center O. In step 147, the C / D ratio is obtained in the same manner as in step 135 described above based on the disk line D set in step 144 and the cup line C set in step 146.

以上のように基準画像と経過画像でのC/D比が演算されたら、ステップ150で、所定の角度ステップ毎に算出された基準画像と経過画像のそれぞれのC/D比及びR/D比等が同じグラフ表示領域340上に曲線にてグラフ表示される(図8(b)参照)。   When the C / D ratio between the reference image and the progress image is calculated as described above, in step 150, the C / D ratio and the R / D ratio of each of the reference image and the progress image calculated for each predetermined angle step. Etc. are displayed in a graph on the same graph display area 340 (see FIG. 8B).

このとき、フォローアップ画面330上の分割領域とグラフ表示領域340の分割領域とが対応しているので、検者は眼底画像とグラフ領域との対応関係を簡単に確認することができる。また、中心Oを中心とした360度方向でのC/D比の演算結果が表示されるので、所定の経線方向に対するC/D比等の経時変化を詳細に把握できるようになる。   At this time, since the divided area on the follow-up screen 330 and the divided area of the graph display area 340 correspond to each other, the examiner can easily confirm the correspondence between the fundus image and the graph area. Further, since the calculation result of the C / D ratio in the 360 degree direction with the center O as the center is displayed, it becomes possible to grasp in detail the change over time such as the C / D ratio with respect to a predetermined meridian direction.

なお、前述したように、グラフ表示領域340には演算結果ごとに色分けされた曲線がグラフ表示されるので、より経時変化を簡単で正確に把握しやすいようになっている。例えば、ここでは、基準画像のC/D比が赤色、経過画像のC/D比が緑色で表示される。また、このとき、サムネイル表示欄320において該当するサムネイルの枠色を各グラフと対応付けて同じ色で表示することで、より眼底画像とグラフとの対応関係を更に視覚的に分かり易くできる。   Note that, as described above, the graph display area 340 displays curves colored according to calculation results in a graph, so that changes with time can be easily and accurately grasped. For example, here, the C / D ratio of the reference image is displayed in red, and the C / D ratio of the progress image is displayed in green. At this time, the corresponding thumbnail frame color is displayed in the same color in association with each graph in the thumbnail display field 320, so that the correspondence between the fundus image and the graph can be further visually understood.

このようにグラフの色分け表示をすることで、グラフ表示領域340に3つ以上の複数のグラフ(曲線)が表示されても、検者は眼底画像とグラフとの対応関係を簡単に理解できるようになり、正しく経時変化を認識することができるようになる。   By displaying the graphs in different colors in this way, even if three or more graphs (curves) are displayed in the graph display area 340, the examiner can easily understand the correspondence between the fundus image and the graph. Thus, it becomes possible to correctly recognize changes with time.

また、グラフ表示領域340の眼底画像毎に表示されるグラフは、線種(ライン)を変えることで区別されるようにしても良い。これ以外にも検者が視覚的に区別できるような表示方法で撮影画像毎にグラフの表示状態が切り替えられれば良い。   Further, a graph is displayed for each fundus image in the graph display area 340 may be distinguished by changing the line type (line). In addition to this, the display state of the graph may be switched for each captured image by a display method that allows the examiner to visually distinguish the graph.

また、グラフ表示領域340にグラフが表示された状態で、グラフ切換アイコン314が選択されると、図9に示すような数値表示画面340bに切り替えられる。画面340bの上側には画面340bに表示させる内容をC/D比、R/D比等で切り替えるための選択欄341が、中央部には各軸(T、S、N、I)方向での演算結果の一覧表342が表示されている。一覧表342の数値表示によって、検者は各軸方向でのC/D比の経時変化をより詳細に確認できるようになる。   When the graph switching icon 314 is selected while the graph is displayed in the graph display area 340, the screen is switched to a numerical value display screen 340b as shown in FIG. On the upper side of the screen 340b, there is a selection column 341 for switching the contents to be displayed on the screen 340b by the C / D ratio, R / D ratio, etc., and the center part is in the direction of each axis (T, S, N, I). A list 342 of calculation results is displayed. By the numerical display of the list 342, the examiner can check the change with time of the C / D ratio in each axis direction in more detail.

更に、記憶部21にC/D比の判定基準(例えば、C/D比=0.7)が予め記憶されていると便利である。なお、C/D比の判定基準は緑内障の診断結果などに基づき経験的に設定しても良く、図示を略すC/D比の判定基準の入力欄を設けることによって、検者の経験に基づき設定されるようにしてもよい。   Furthermore, it is convenient if a criterion for determining the C / D ratio (for example, C / D ratio = 0.7) is stored in the storage unit 21 in advance. Note that the C / D ratio determination criteria may be set empirically based on the glaucoma diagnosis result, etc., and by providing a C / D ratio determination criterion input field (not shown) based on the examiner's experience. It may be set.

この場合、制御部24は判定基準よりもC/D比の数値が大きい場合には、該当する数値欄sの色を変えて表示させる(例えば、赤色で表示させる)。このようにすると、検者は画面340bを見るだけでディスクラインDのどの方向の演算結果が基準値よりも上回っているかを簡単に確認することができる。これにより、緑内障が進行している危険箇所を簡単に把握することができるようになる。   In this case, when the numerical value of the C / D ratio is larger than the determination criterion, the control unit 24 displays the corresponding numerical value column s by changing the color (for example, displaying it in red). In this way, the examiner can easily confirm in which direction the calculation result of the disc line D exceeds the reference value only by looking at the screen 340b. As a result, it is possible to easily grasp the dangerous place where glaucoma is progressing.

眼底画像処理装置の構成を示すブロック図である。It is a block diagram which shows the structure of a fundus image processing apparatus. 経時変化の算出手順を示したフローチャートである。It is the flowchart which showed the calculation procedure of a time-dependent change. 基準画像の設定についてのフローチャートである。It is a flowchart about the setting of a reference image. 経時変化の演算についてのフローチャートである。It is a flowchart about the calculation of a time-dependent change. 画像取込画面の例である。It is an example of an image capture screen. フォローアップ画面の例である。It is an example of a follow-up screen. ディスクラインとカップラインの設定の説明図である。It is explanatory drawing of the setting of a disk line and a cup line. ディスクコピーによる画像補正についての説明図である。It is explanatory drawing about the image correction by a disk copy. 数値表示画面の例である。It is an example of a numerical display screen.

10 眼科撮影装置
14、24 制御部
20 眼底画像処理装置
21 記憶部
22 モニタ
23 マウス
DESCRIPTION OF SYMBOLS 10 Ophthalmology imaging device 14, 24 Control part 20 Fundus image processing apparatus 21 Storage part 22 Monitor 23 Mouse

Claims (8)

被検眼の視神経乳頭部を含んだ第1の眼底撮影画像から前記視神経乳頭部のディスクラインとカップラインを決定し,該決定された前記ディスクライン及びカップラインにより第1のC/D比を経線方向に対して360°分求めるための第1C/D比取得手段と、
前記被検眼の視神経乳頭部を含んだ第2の眼底撮影画像から前記視神経乳頭部のディスクラインとカップラインを決定し,該決定された前記ディスクライン及びカップラインにより第2のC/D比を経線方向に対して360°分求めるための第2C/D比取得手段と、
前記第1の眼底撮影画像及び前記第2の眼底撮影画像の少なくとも一方をモニタの画面上に表示させる表示制御手段であって,該表示される眼底撮影画像に対応する前記C/D比をグラフとして前記表示される眼底撮影画像と同一画面上に表示させる表示制御手段と、を備えることを特徴とする眼底画像処理装置。
A disk line and a cup line of the optic nerve head are determined from a first fundus image including the optic nerve head of the eye to be examined, and a first C / D ratio is meridian based on the determined disk line and cup line. First C / D ratio acquisition means for obtaining 360 ° with respect to the direction;
A discline and a cupline of the optic disc are determined from a second fundus image including the optic disc of the subject's eye, and a second C / D ratio is determined by the discline and cupline determined. A second C / D ratio acquisition means for obtaining 360 ° with respect to the meridian direction;
Display control means for displaying at least one of the first fundus photographed image and the second fundus photographed image on a monitor screen, wherein the C / D ratio corresponding to the displayed fundus photographed image is graphed Display control means for displaying on the same screen as the displayed fundus photographic image.
請求項1の眼底画像処理装置において、
前記表示制御手段は前記第1C/D比取得手段及び第2C/D比取得手段にて求めた第1C/D比及び第2C/D比を重畳してグラフ表示させることを特徴とする眼底画像処理装置。
The fundus image processing apparatus according to claim 1,
The display control means displays a graph by superimposing the first C / D ratio and the second C / D ratio obtained by the first C / D ratio acquisition means and the second C / D ratio acquisition means and displays them in a graph. Processing equipment.
請求項2の眼底画像処理装置は、さらに前記第1C/D比取得手段にて決定される前記ディスクラインを記憶する記憶手段を有し、前記第2C/D比取得手段は前記記憶手段に記憶された前記ディスクラインを呼び出し前記第2眼底撮影画像上における視神経乳頭部のディスクラインとして決定することを特徴とする眼底画像処理装置。 The fundus image processing apparatus according to claim 2 further includes storage means for storing the disk line determined by the first C / D ratio acquisition means, and the second C / D ratio acquisition means is stored in the storage means. fundus image processing apparatus characterized by determining as a disk-line of the optic papilla in by said disk line calls the second on the fundus photographing image. 被検眼の視神経乳頭部を含んだ第1の眼底撮影画像から前記視神経乳頭部のディスクラインとカップラインを決定し,該決定された前記ディスクライン及びカップラインにより第1のC/D比を経線方向に対して360°分求める第1ステップと、前記被検眼の視神経乳頭部を含んだ第2の眼底撮影画像から前記視神経乳頭部のディスクラインとカップラインを決定し,該決定された前記ディスクライン及びカップラインにより第2のC/D比を経線方向に対して360°分求める第2ステップと、横軸が0°〜360°,縦軸がC/D比値とされるグラフに前記第1ステップ及び第2ステップにて求めた第1C/D比及び第2C/D比を重畳して曲線表示させる第3ステップと、を有することを特徴とする眼底画像処理方法。 A disk line and a cup line of the optic nerve head are determined from a first fundus image including the optic nerve head of the eye to be examined, and a first C / D ratio is meridian based on the determined disk line and cup line. A first step of obtaining 360 ° with respect to the direction, and determining a disk line and a cup line of the optic papilla from a second fundus image including the optic papilla of the eye to be examined; The second step of obtaining the second C / D ratio by 360 ° with respect to the meridian direction by the line and the cup line, and the graph in which the horizontal axis is 0 ° to 360 ° and the vertical axis is the C / D ratio value A fundus image processing method comprising: a third step of displaying a curve by superimposing the first C / D ratio and the second C / D ratio obtained in the first step and the second step. 請求項4の眼底画像処理方法において、前記第3ステップにて表示される第1C/D比及び第2C/D比を示す曲線は各々異なる線色,または線種にて表示されることを特徴とする眼底画像処理方法。 5. The fundus image processing method according to claim 4, wherein the curves indicating the first C / D ratio and the second C / D ratio displayed in the third step are displayed in different line colors or line types. A fundus image processing method. 請求項5の眼底画像処理方法において、前記第2ステップにて決定される前記ディスクラインは前記第1ステップにて決定されたディスクラインを同一形状にてコピーすることにより決定されることを特徴とする眼底画像処理方法。 6. The fundus image processing method according to claim 5, wherein the disc line determined in the second step is determined by copying the disc line determined in the first step in the same shape. Fundus image processing method. 請求項6の眼底画像処理方法において、前記第1ステップにて決定される前記ディスクラインは前記第1眼底撮影画像における視神経乳頭部のディスク縁をポインティングデバイスを用いて指定し,指定されたポイントをスプライン曲線により結ぶことにより決定され、前記第2ステップにて決定されるディスクラインは前記第1眼底撮影画像及び第2眼底撮影画像における視神経乳頭部のディスク縁上の少なくとも4つの同じ特徴点を指定することにより前記第1ステップにて決定されるディスクラインを前記コピーにより前記第2眼底撮影画像上のディスク縁に対応付けることを特徴とする眼底画像処理方法。 7. The fundus image processing method according to claim 6, wherein the disc line determined in the first step designates a disc edge of the optic nerve head in the first fundus image using a pointing device, and designates the designated point. The disc line determined by connecting with a spline curve and determined in the second step specifies at least four identical feature points on the disc edge of the optic disc in the first fundus image and the second fundus image Thus, the fundus image processing method is characterized in that the disc line determined in the first step is associated with the disc edge on the second fundus photographed image by the copy. 請求項7の眼底画像処理方法において、前記第2ステップは指定される前記第1眼底撮影画像及び第2眼底撮影画像における視神経乳頭部のディスク縁上の少なくとも4つの同じ指定点情報に基づいて、前記第2眼底撮影画像全体の倍率、及び回転補正を行うことを特徴とする眼底画像処理方法。 The fundus image processing method according to claim 7, wherein the second step is based on at least four identical designated point information on a disc edge of the optic nerve head in the designated first fundus photographed image and second fundus photographed image. A fundus image processing method comprising performing magnification and rotation correction of the entire second fundus photographed image.
JP2009240879A 2009-10-19 2009-10-19 Fundus image processing apparatus and fundus image processing method Active JP5701494B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2009240879A JP5701494B2 (en) 2009-10-19 2009-10-19 Fundus image processing apparatus and fundus image processing method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2009240879A JP5701494B2 (en) 2009-10-19 2009-10-19 Fundus image processing apparatus and fundus image processing method

Publications (3)

Publication Number Publication Date
JP2011083555A true JP2011083555A (en) 2011-04-28
JP2011083555A5 JP2011083555A5 (en) 2012-11-29
JP5701494B2 JP5701494B2 (en) 2015-04-15

Family

ID=44076966

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2009240879A Active JP5701494B2 (en) 2009-10-19 2009-10-19 Fundus image processing apparatus and fundus image processing method

Country Status (1)

Country Link
JP (1) JP5701494B2 (en)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012254164A (en) * 2011-06-08 2012-12-27 Canon Inc Ophthalmologic information processing system and method, and program
JP2014061280A (en) * 2012-08-30 2014-04-10 Canon Inc Diagnosis support device and method
JP2014083268A (en) * 2012-10-24 2014-05-12 Nidek Co Ltd Ophthalmological analysis apparatus and ophthalmological analysis program
JP2016010728A (en) * 2015-10-08 2016-01-21 キヤノン株式会社 Ophthalmology information processing system, ophthalmology information processing method and program
JP2017119226A (en) * 2017-04-11 2017-07-06 キヤノン株式会社 Image processing apparatus, image processing method, and image processing program
JP2017170193A (en) * 2017-06-12 2017-09-28 株式会社ニデック Ophthalmological analysis device and ophthalmological analysis program
JP2018202237A (en) * 2018-10-04 2018-12-27 キヤノン株式会社 Image processing device and method for controlling the same
US10765316B2 (en) 2017-06-27 2020-09-08 Topcon Corporation Ophthalmic information processing system, ophthalmic information processing method, and recording medium

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06125876A (en) * 1992-10-16 1994-05-10 Nikon Corp Diagnostic device for ophthalmic nerve papilla
JP2006280411A (en) * 2005-03-31 2006-10-19 Nidek Co Ltd Eye fundus image analysis method and eye fundus image analyzer
JP2008154951A (en) * 2006-12-26 2008-07-10 Topcon Corp Fundus image processing device, ophthalmography device and program
JP2009022506A (en) * 2007-07-19 2009-02-05 Gifu Univ System for analyzing fundus examination image and program for analyzing fundus examination image
JP2009523563A (en) * 2006-01-19 2009-06-25 オプトビュー,インコーポレーテッド Examining the eye by optical coherence tomography

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06125876A (en) * 1992-10-16 1994-05-10 Nikon Corp Diagnostic device for ophthalmic nerve papilla
JP2006280411A (en) * 2005-03-31 2006-10-19 Nidek Co Ltd Eye fundus image analysis method and eye fundus image analyzer
JP2009523563A (en) * 2006-01-19 2009-06-25 オプトビュー,インコーポレーテッド Examining the eye by optical coherence tomography
JP2008154951A (en) * 2006-12-26 2008-07-10 Topcon Corp Fundus image processing device, ophthalmography device and program
JP2009022506A (en) * 2007-07-19 2009-02-05 Gifu Univ System for analyzing fundus examination image and program for analyzing fundus examination image

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012254164A (en) * 2011-06-08 2012-12-27 Canon Inc Ophthalmologic information processing system and method, and program
JP2014061280A (en) * 2012-08-30 2014-04-10 Canon Inc Diagnosis support device and method
JP2018108431A (en) * 2012-08-30 2018-07-12 キヤノン株式会社 Information processing device, information processing method and program
US10588505B2 (en) 2012-08-30 2020-03-17 Canon Kabushiki Kaisha Diagnosis support apparatus and method
JP2020044418A (en) * 2012-08-30 2020-03-26 キヤノン株式会社 Information processing device, information processing method and program
JP7057342B2 (en) 2012-08-30 2022-04-19 キヤノン株式会社 Information processing equipment, information processing methods and programs
JP2014083268A (en) * 2012-10-24 2014-05-12 Nidek Co Ltd Ophthalmological analysis apparatus and ophthalmological analysis program
JP2016010728A (en) * 2015-10-08 2016-01-21 キヤノン株式会社 Ophthalmology information processing system, ophthalmology information processing method and program
JP2017119226A (en) * 2017-04-11 2017-07-06 キヤノン株式会社 Image processing apparatus, image processing method, and image processing program
JP2017170193A (en) * 2017-06-12 2017-09-28 株式会社ニデック Ophthalmological analysis device and ophthalmological analysis program
US10765316B2 (en) 2017-06-27 2020-09-08 Topcon Corporation Ophthalmic information processing system, ophthalmic information processing method, and recording medium
JP2018202237A (en) * 2018-10-04 2018-12-27 キヤノン株式会社 Image processing device and method for controlling the same

Also Published As

Publication number Publication date
JP5701494B2 (en) 2015-04-15

Similar Documents

Publication Publication Date Title
JP5701494B2 (en) Fundus image processing apparatus and fundus image processing method
JP7252144B2 (en) Systems and methods for improved ophthalmic imaging
US20210372939A1 (en) Information processing apparatus, information processing method and program
US10588505B2 (en) Diagnosis support apparatus and method
US8801181B2 (en) Ophthalmic apparatus
JP2008295804A (en) Fundus examination device and program
JP2015016067A (en) Image display method, apparatus, and program
JP5822545B2 (en) Image processing apparatus, image processing apparatus control method, and program
JP5959367B2 (en) Medical support system
JP2008154950A (en) Fundus image processing device, ophthalmography device and program
JP2011072446A (en) Program and method of calculating congestion level, and apparatus of calculating congestion level
JP2012196245A (en) Ophthalmologic information-processing apparatus and control method of the same
JP2018051244A (en) Fundus image observation program
JP2012090976A (en) Ophthalmological apparatus
JP2009080545A (en) Medical information processor
US11927540B2 (en) Information processing apparatus, information processing method, and recording medium
JP3587468B1 (en) Inspection system and program
JP2012254164A (en) Ophthalmologic information processing system and method, and program
JP2018051243A (en) Fundus image observation program
JP2018051245A (en) Fundus image observation program
JP4949007B2 (en) Fundus image processing apparatus, fundus photographing apparatus, and program
KR20190022071A (en) System of displaying medical image
US11389055B2 (en) Ophthalmological image observation method and ophthalmological image observation apparatus
JP6001150B2 (en) Ophthalmic information processing system, ophthalmic information processing method, and program
JP2017067984A (en) Terminal device and terminal control program

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20121012

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20121012

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20130828

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20130903

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20140603

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140801

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20150120

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20150218

R150 Certificate of patent or registration of utility model

Ref document number: 5701494

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250