JP5474011B2 - Ophthalmic system, ophthalmic apparatus, tomographic image acquisition method, and program - Google Patents

Ophthalmic system, ophthalmic apparatus, tomographic image acquisition method, and program Download PDF

Info

Publication number
JP5474011B2
JP5474011B2 JP2011193272A JP2011193272A JP5474011B2 JP 5474011 B2 JP5474011 B2 JP 5474011B2 JP 2011193272 A JP2011193272 A JP 2011193272A JP 2011193272 A JP2011193272 A JP 2011193272A JP 5474011 B2 JP5474011 B2 JP 5474011B2
Authority
JP
Japan
Prior art keywords
tomographic image
fundus
image
display unit
acquisition
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2011193272A
Other languages
Japanese (ja)
Other versions
JP2011245346A (en
Inventor
裕之 今村
昭宏 片山
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Priority to JP2011193272A priority Critical patent/JP5474011B2/en
Publication of JP2011245346A publication Critical patent/JP2011245346A/en
Application granted granted Critical
Publication of JP5474011B2 publication Critical patent/JP5474011B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Eye Examination Apparatus (AREA)

Description

本発明は、眼科システム、眼科装置、断層像取得方法、およびプログラムに関し、特に、眼部の画像診断を効率的に行うための技術に関する。   The present invention relates to an ophthalmologic system, an ophthalmologic apparatus, a tomographic image acquisition method, and a program, and more particularly to a technique for efficiently performing image diagnosis of an eye part.

生活習慣病や失明原因の上位を占める各種疾病の早期診断を目的として、眼部の検査が広く行われている。検診等においては眼部全体における疾病を見つけることが求められるため、眼部の広い範囲にわたる像(以下、広域像と呼ぶ)を用いた検査が必須となる。広域像は、例えば、眼底カメラや走査型レーザー検眼鏡(SLO:Scanning Laser Ophthalmoscope)を用いて撮像される。   Examination of the eye is widely performed for the purpose of early diagnosis of lifestyle-related diseases and various diseases that occupy the top causes of blindness. In medical examinations and the like, since it is required to find a disease in the entire eye part, an examination using an image over a wide range of the eye part (hereinafter referred to as a wide area image) is essential. The wide area image is captured using, for example, a fundus camera or a scanning laser ophthalmoscope (SLO).

一方、光干渉断層計(OCT:Optical Coherence Tomography)などの眼部の断層像取得装置は疾病の状態を客観的尺度で定量化することが可能であり、疾病の診断をより的確に行うのに有用であると期待されている。一般的なOCTでは、撮像者が断層像の撮像パラメータ(例えば、対象部位、撮像範囲、詳細度、走査方法など)を決定し、その撮像パラメータに基づいて眼部の局所領域のみが撮像・解析される。   On the other hand, an eye tomogram acquisition device such as an optical coherence tomography (OCT) can quantify the state of the disease on an objective scale, and can be used to more accurately diagnose the disease. Expected to be useful. In general OCT, an imager determines tomographic imaging parameters (for example, target region, imaging range, level of detail, scanning method, etc.), and only the local region of the eye is imaged and analyzed based on the imaging parameters. Is done.

撮像者による断層像の撮像を支援する技術として、例えば特許文献1には、眼底カメラによる広域像上においてOCTによる断層像の撮像範囲を指示するユーザインタフェースに関する技術が開示されている。また特許文献2には、SLOによる広域像上においてOCTによる断層像の撮像範囲を指定するユーザインタフェースに関する技術が開示されている。特許文献1や特許文献2によれば、眼底の広域像の様子を参照しながら断層像の撮像範囲を決定することができる。   As a technique for assisting an imager to capture a tomographic image, for example, Patent Document 1 discloses a technique related to a user interface that designates an imaging range of a tomographic image by OCT on a wide-area image by a fundus camera. Patent Document 2 discloses a technique related to a user interface for designating an imaging range of a tomographic image by OCT on a wide area image by SLO. According to Patent Literature 1 and Patent Literature 2, it is possible to determine a tomographic imaging range while referring to a state of a wide area image of the fundus.

特開2007−117714号公報JP 2007-117714 A 特開2008−029467号公報JP 2008-029467 A

手動で撮像パラメータを指定して断層像の撮像を行う場合、特に、撮像者が眼科専門医でない場合には撮像部位を含む撮像パラメータを適切に設定できるとは限らず、診断に必要な断層像が得られない場合があるという課題があった。また、特許文献1及び特許文献2の構成を用いた場合でも、広域像上で把握できる病変の位置と、断層像を撮影すべき部位は必ずしも一致していないので、撮像パラメータの設定は必ずしも容易ではないという課題があった。   When tomographic imaging is performed by manually specifying imaging parameters, especially when the photographer is not an ophthalmologist, the imaging parameters including the imaging region cannot always be set appropriately, and the tomographic images necessary for diagnosis are There was a problem that it could not be obtained. Further, even when the configurations of Patent Document 1 and Patent Document 2 are used, the position of a lesion that can be grasped on a wide-area image does not necessarily coincide with the site where a tomographic image is to be imaged, so that setting of imaging parameters is not always easy. There was a problem that was not.

また、何らかの方法で広範囲にわたる断層像が撮影されている場合であっても診断者が眼科専門医ではない場合には、そのうちのどの部分を解析・計測すればよいかという判断が容易ではないという課題があった。   In addition, even if a wide range of tomographic images are taken by some method, if the diagnostician is not an ophthalmologist, it is not easy to determine which part of that should be analyzed and measured was there.

本発明は、上記の課題に鑑みてなされたものであり、眼部の断層像の取得を効率的に行うための技術を提供することを目的とする。   The present invention has been made in view of the above problems, and an object thereof is to provide a technique for efficiently acquiring a tomographic image of an eye part.

上記の目的を達成する本発明に係る眼科装置は、
眼部の眼底像を取得する眼底像取得手段と、
前記眼底像から前記眼部の眼底の視神経乳頭の位置を自動的に検出する検出手段と、
前記位置に基づいて自動的に前記視神経乳頭付近の領域を円形に走査する方法を用いて前記視神経乳頭付近の領域の前記眼底の断層像を取得する断層像取得手段と、
前記眼底像と前記断層像とを表示部に表示させ、更に前記断層像の取得に用いた走査方法と前記走査方法に対して設定された前記走査の詳細度とを前記表示部に表示させるとともに、前記表示部に表示された前記眼底像上に前記断層像の取得位置に対応する位置を示す表示を前記表示部に表示させる表示制御手段と、
を有することを特徴とする。
また、上記の目的を達成する本発明に係る眼科装置は、
眼部の眼底像から前記眼部の眼底の視神経乳頭に関する情報を自動的に検出する検出手段と、
前記情報に基づいて自動的に前記視神経乳頭付近の領域の前記眼底の断層像を視神経乳頭に対応する走査方法を用いて取得する断層像取得手段と、
前記眼底像と前記断層像とを表示部に表示させ、更に前記断層像の取得に用いた走査方法と前記走査方法に対して設定された前記走査の詳細度とを前記表示部に表示させるとともに、前記表示部に表示された前記眼底像上に前記断層像の取得位置に対応する位置を示す表示を前記表示部に表示させる表示制御手段と、
を有することを特徴とする。
さらに、上記の目的を達成する本発明に係る眼科システムは、
眼部の眼底像を取得する眼底カメラと、
前記眼底像から前記眼部の眼底の視神経乳頭の位置を自動的に検出する検出手段と、
前記位置に基づいて自動的に前記視神経乳頭付近の領域を円形に走査する方法を用いて前記視神経乳頭付近の領域の前記眼底の断層像を取得するOCT装置と、
前記眼底像と前記断層像とを表示部に表示させ、更に前記断層像の取得に用いた走査方法と前記走査方法に対して設定された前記走査の詳細度とを前記表示部に表示させるとともに、前記表示部に表示された前記眼底像上に前記断層像の取得位置に対応する位置を示す表示を前記表示部に表示させる表示制御手段と、
を有することを特徴とする。
また、上記の目的を達成する本発明に係る眼科システムは、
眼部の眼底像から前記眼部の眼底の視神経乳頭に関する情報を自動的に検出する検出手段と、
前記情報に基づいて自動的に前記視神経乳頭付近の領域の前記眼底の断層像を視神経乳頭に対応する走査方法を用いて取得する断層像取得手段と、
前記眼底像と前記断層像とを表示部に表示させ、更に前記断層像の取得に用いた走査方法と前記走査方法に対して設定された前記走査の詳細度とを前記表示部に表示させるとともに、前記表示部に表示された前記眼底像上に前記断層像の取得位置に対応する位置を示す表示を前記表示部に表示させる表示制御手段と、
を有することを特徴とする。
さらに、上記の目的を達成する本発明に係る断層像取得方法は、
断層像取得装置における断層像取得方法であって、
眼底像取得手段が、眼部の眼底像を取得する眼底像取得工程と、
検出手段が、前記眼底像から前記眼部の眼底の視神経乳頭の位置を自動的に検出する検出工程と、
断層像取得手段が、前記位置に基づいて自動的に前記視神経乳頭付近の領域を円形に走査する方法を用いて前記視神経乳頭付近の領域の前記眼底の断層像を取得する断層像取得工程と、
表示制御手段が、前記眼底像と前記断層像とを表示部に表示させ、更に前記断層像の取得に用いた走査方法と前記走査方法に対して設定された前記走査の詳細度とを前記表示部に表示させるとともに、前記表示部に表示された前記眼底像上に前記断層像の取得位置に対応する位置を示す表示を前記表示部に表示させる表示制御工程と、
を有することを特徴とする。
さらに、上記の目的を達成する本発明に係るプログラムは、
眼部の眼底像を取得する眼底像取得工程と、
前記眼底像から前記眼部の眼底の視神経乳頭の位置を自動的に検出する検出工程と、
前記位置に基づいて自動的に前記視神経乳頭付近の領域を円形に走査する方法を用いて前記視神経乳頭付近の領域の前記眼底の断層像を取得する断層像取得工程と、
前記眼底像と前記断層像とを表示部に表示させ、更に前記断層像の取得に用いた走査方法と前記走査方法に対して設定された前記走査の詳細度とを前記表示部に表示させるとともに、前記表示部に表示された前記眼底像上に前記断層像の取得位置に対応する位置を示す表示を前記表示部に表示させる表示制御工程と、
をコンピュータに実行させることを特徴とする。
さらに、上記の目的を達成する本発明に係る眼科用処理装置は、
眼部の眼底像から前記眼部の眼底の視神経乳頭の位置を自動的に検出する検出手段と、
前記位置に基づいて自動的に前記視神経乳頭付近の領域を円形に走査する方法を用いて前記視神経乳頭付近の領域の前記眼底の断層像を取得するようにOCT装置を制御する制御手段と、
前記眼底像と前記断層像とを表示部に表示させ、更に前記断層像の取得に用いた走査方法と前記走査方法に対して設定された前記走査の詳細度とを前記表示部に表示させるとともに、前記表示部に表示された前記眼底像上に前記断層像の取得位置に対応する位置を示す表示を前記表示部に表示させる表示制御手段と、
を有することを特徴とする。
さらに、上記の目的を達成する本発明に係るプログラムは、
眼部の眼底像から前記眼部の眼底の視神経乳頭の位置を自動的に検出する検出工程と、
前記位置に基づいて自動的に前記視神経乳頭付近の領域を円形に走査する方法を用いて前記視神経乳頭付近の領域の前記眼底の断層像を取得するようにOCT装置を制御する制御工程と、
前記眼底像と前記断層像とを表示部に表示させ、更に前記断層像の取得に用いた走査方法と前記走査方法に対して設定された前記走査の詳細度とを前記表示部に表示させるとともに、前記表示部に表示された前記眼底像上に前記断層像の取得位置に対応する位置を示す表示を前記表示部に表示させる表示制御工程と、
をコンピュータに実行させることを特徴とする。
An ophthalmologic apparatus according to the present invention that achieves the above object is as follows.
Fundus image acquisition means for acquiring a fundus image of the eye part;
Detection means for automatically detecting the position of the optic disc on the fundus of the eye from the fundus image;
A tomographic image acquisition means for acquiring a tomographic image of the fundus of the region near the optic disc using a method of automatically scanning the region near the optic disc based on the position in a circle;
Wherein the fundus image is displayed on the display unit and a tomographic image, thereby further displaying the details of the set the scanning to the scanning method and the scanning method used in the acquisition of the tomographic image before Symbol display unit And display control means for displaying on the display unit a display indicating a position corresponding to the acquisition position of the tomographic image on the fundus image displayed on the display unit,
It is characterized by having.
An ophthalmic apparatus according to the present invention that achieves the above object is
Detection means for automatically detecting information relating to the optic nerve head of the fundus of the eye from the fundus image of the eye;
A tomographic image acquisition means for automatically acquiring a tomographic image of the fundus in an area near the optic disc based on the information using a scanning method corresponding to the optic disc;
Wherein the fundus image is displayed on the display unit and a tomographic image, thereby further displaying the details of the set the scanning to the scanning method and the scanning method used in the acquisition of the tomographic image before Symbol display unit And display control means for displaying on the display unit a display indicating a position corresponding to the acquisition position of the tomographic image on the fundus image displayed on the display unit,
It is characterized by having.
Furthermore, an ophthalmic system according to the present invention that achieves the above-described object is as follows.
A fundus camera that acquires a fundus image of the eye,
Detection means for automatically detecting the position of the optic disc on the fundus of the eye from the fundus image;
An OCT apparatus that obtains a tomographic image of the fundus of the region near the optic disc using a method of automatically scanning the region near the optic disc based on the position in a circle;
It said fundus image is displayed on the display unit and a tomographic image, thereby further displaying the details of the set the scanning to the scanning method and the scanning method used in the acquisition of the tomographic image before Symbol display unit And display control means for displaying on the display unit a display indicating a position corresponding to the acquisition position of the tomographic image on the fundus image displayed on the display unit,
It is characterized by having.
In addition, an ophthalmic system according to the present invention that achieves the above-described object,
Detection means for automatically detecting information relating to the optic nerve head of the fundus of the eye from the fundus image of the eye;
A tomographic image acquisition means for automatically acquiring a tomographic image of the fundus in an area near the optic disc based on the information using a scanning method corresponding to the optic disc;
Wherein the fundus image is displayed on the display unit and a tomographic image, thereby further displaying the details of the set the scanning to the scanning method and the scanning method used in the acquisition of the tomographic image before Symbol display unit And display control means for displaying on the display unit a display indicating a position corresponding to the acquisition position of the tomographic image on the fundus image displayed on the display unit,
It is characterized by having.
Furthermore, a tomographic image acquisition method according to the present invention that achieves the above-described object is as follows:
A tomographic image acquisition method in a tomographic image acquisition apparatus,
A fundus image acquisition step in which the fundus image acquisition means acquires a fundus image of the eye;
A detecting step of automatically detecting the position of the optic disc on the fundus of the eye part from the fundus image;
A tomographic image acquisition means for acquiring a tomographic image of the fundus of the region near the optic nerve head using a method in which the tomographic image acquisition means automatically scans the region near the optic nerve head in a circle based on the position;
Display control means, said a fundus image is displayed on the display unit and a tomographic image, further the level of detail set the scanning to the scanning method and the scanning method used for acquiring a tomographic image and the previous SL A display control step of causing the display unit to display a display indicating a position corresponding to the acquisition position of the tomographic image on the fundus image displayed on the display unit,
It is characterized by having.
Furthermore, a program according to the present invention that achieves the above object is as follows:
A fundus image acquisition step of acquiring a fundus image of the eye part;
A detection step of automatically detecting the position of the optic disc on the fundus of the eye from the fundus image;
A tomographic image acquisition step of acquiring a tomographic image of the fundus of the region near the optic disc using a method of automatically scanning the region near the optic disc based on the position in a circle;
Wherein the fundus image is displayed on the display unit and a tomographic image, thereby further displaying the details of the set the scanning to the scanning method and the scanning method used in the acquisition of the tomographic image before Symbol display unit And a display control step for causing the display unit to display a display indicating a position corresponding to the acquisition position of the tomographic image on the fundus image displayed on the display unit,
Is executed by a computer.
Furthermore, an ophthalmic processing apparatus according to the present invention that achieves the above-described object,
Detecting means for automatically detecting the position of the optic disc on the fundus of the eye from the fundus image of the eye;
And control means for controlling the OCT apparatus to acquire the fundus tomographic image of a region near the optic disc using a method of scanning automatically region of the near the optic disc in a circular on the basis of the position,
Wherein the fundus image is displayed on the display unit and a tomographic image, thereby further displaying the details of the set the scanning to the scanning method and the scanning method used in the acquisition of the tomographic image before Symbol display unit And display control means for displaying on the display unit a display indicating a position corresponding to the acquisition position of the tomographic image on the fundus image displayed on the display unit,
It is characterized by having.
Furthermore, a program according to the present invention that achieves the above object is as follows:
A detection step of automatically detecting the position of the optic disc on the fundus of the eye from the fundus image of the eye;
And a control step of controlling the OCT apparatus to acquire a tomographic image of the fundus of the region in the vicinity of the optic papilla using a method for automatically scanning an area of the vicinity of the optic papilla in a circle on the basis of the position,
Wherein the fundus image is displayed on the display unit and a tomographic image, thereby further displaying the details of the set the scanning to the scanning method and the scanning method used in the acquisition of the tomographic image before Symbol display unit And a display control step for causing the display unit to display a display indicating a position corresponding to the acquisition position of the tomographic image on the fundus image displayed on the display unit,
Is executed by a computer.

本発明によれば、眼部の断層像の取得を効率的に行うための技術を提供することができる。   According to the present invention, it is possible to provide a technique for efficiently acquiring a tomographic image of an eye part.

診断支援装置の機器構成例を示す図である。It is a figure which shows the apparatus structural example of a diagnosis assistance apparatus. 診断支援装置の機能構成例を示す機能ブロック図である。It is a functional block diagram which shows the function structural example of a diagnosis assistance apparatus. 診断支援装置が実行する診断支援処理の処理手順を示すフローチャートである。It is a flowchart which shows the process sequence of the diagnostic assistance process which a diagnostic assistance apparatus performs. 広域像撮像装置の構成例を示す図である。It is a figure which shows the structural example of a wide area image imaging device. 眼部の広域像上における病変候補の例を示す図である。It is a figure which shows the example of the lesion candidate on the wide area image of an eye part. 断層像撮像装置の構成例を示す図であるIt is a figure which shows the structural example of a tomographic image imaging device. 診断支援装置の表示例を示す図である。It is a figure which shows the example of a display of a diagnosis assistance apparatus. 病変候補検出部によって検出された病変候補の例を示す模式図である。It is a schematic diagram which shows the example of the lesion candidate detected by the lesion candidate detection part.

以下、添付図面を参照して本発明に係る実施の形態を詳細に説明する。ただし、この実施の形態に記載されている構成要素はあくまでも例示であり、本発明の範囲をそれらのみに限定する趣旨のものではない。また、本実施の形態で説明されている特徴の組み合わせの全てが発明の解決手段に必須のものとは限らない。   Embodiments according to the present invention will be described below in detail with reference to the accompanying drawings. However, the constituent elements described in this embodiment are merely examples, and are not intended to limit the scope of the present invention only to them. In addition, not all the combinations of features described in the present embodiment are essential for the solving means of the invention.

<<第1実施形態:撮像機器から広域像/断層像を取得する構成>>
(診断支援装置の機器構成)
まず、本実施形態に係る診断支援装置1(眼科装置、眼科システム)の機器構成を説明する。図1は、本実施形態に係る診断支援装置1を示す機器構成図である。図1の診断支援装置1は、中央処理装置(CPU)100、主メモリ101、磁気ディスク102、制御プログラム103、表示メモリ104、モニタ105、マウス106、キーボード107、共通バス108を含んでいる。
<< First Embodiment: Configuration for Acquiring Wide Area Image / Tomographic Image from Imaging Device >>
(Device configuration of diagnosis support device)
First, the device configuration of the diagnosis support apparatus 1 (ophthalmic apparatus, ophthalmic system) according to the present embodiment will be described. FIG. 1 is a device configuration diagram showing a diagnosis support apparatus 1 according to the present embodiment. The diagnosis support apparatus 1 of FIG. 1 includes a central processing unit (CPU) 100, a main memory 101, a magnetic disk 102, a control program 103, a display memory 104, a monitor 105, a mouse 106, a keyboard 107, and a common bus 108.

中央処理装置(CPU)100は、主として診断支援装置1の各構成要素の動作を制御する。主メモリ101はRAM(Random Access Memory)により実現でき、装置制御プログラムを格納したり、プログラム実行時の作業領域となったりする。磁気ディスク102は、オペレーティングシステム(OS)、周辺機器のデバイスドライブ、後述する各種の処理を行うためのプログラム103等を格納する。   The central processing unit (CPU) 100 mainly controls the operation of each component of the diagnosis support apparatus 1. The main memory 101 can be realized by a RAM (Random Access Memory), and stores a device control program or serves as a work area when the program is executed. The magnetic disk 102 stores an operating system (OS), a device drive of a peripheral device, a program 103 for performing various processes described later, and the like.

表示メモリ104は、表示用データを一時記憶する。モニタ105は、たとえばCRTモニタや液晶モニタであり、表示メモリ104からのデータに基づいて画像を表示する。マウス106及びキーボード107はユーザによるポインティング入力及び文字等の入力を各々行う。上記各構成要素は共通バス108により互いに接続されている。   The display memory 104 temporarily stores display data. The monitor 105 is, for example, a CRT monitor or a liquid crystal monitor, and displays an image based on data from the display memory 104. A mouse 106 and a keyboard 107 are used for a pointing input and a character input by a user. The above components are connected to each other by a common bus 108.

図1に示すように、診断支援装置1は、広域像撮像装置2及び断層像撮像装置(断層像取得装置)3と、イーサネット(登録商標)等によるローカル・エリア・ネットワーク(LAN)4を介して接続される。なお、これらの機器の接続は、USBやIEEE1394等の外部インタフェースを介して行ってもよい。   As shown in FIG. 1, the diagnosis support apparatus 1 includes a wide-area image capturing apparatus 2, a tomographic image capturing apparatus (tomographic image acquiring apparatus) 3, and a local area network (LAN) 4 such as Ethernet (registered trademark). Connected. Note that these devices may be connected via an external interface such as USB or IEEE1394.

広域像撮像装置2は、眼部の広域像を撮像する装置であり、例えば眼底像を取得する眼底カメラやSLOにより実現可能である。図4は、SLO(走査型レーザー検眼鏡)で実現した広域像撮像装置2の構成を示す図である。   The wide-area image capturing apparatus 2 is an apparatus that captures a wide-area image of the eye part, and can be realized by, for example, a fundus camera or SLO that acquires a fundus image. FIG. 4 is a diagram showing a configuration of the wide-area image capturing apparatus 2 realized by SLO (scanning laser ophthalmoscope).

広域像撮像装置2は、診断支援装置1からの要求に応じて眼部の広域像を撮像し、得られた広域像を診断支援装置1へと出力する。図4に示すように、広域像撮像装置2は眼部の広域像を撮像するために、走査駆動機構401を介してポリゴンミラー402及びガルバノミラー403の制御を行う。そして、撮影光源400から照射した微弱なレーザー光の反射光を受光素子404で受光することにより、眼部の広域像を撮像する。なお、SLOの機器構成や駆動機構制御の詳細は特許文献2に詳しく述べられている。   The wide area image capturing apparatus 2 captures a wide area image of the eye in response to a request from the diagnosis support apparatus 1 and outputs the obtained wide area image to the diagnosis support apparatus 1. As shown in FIG. 4, the wide-area image capturing apparatus 2 controls the polygon mirror 402 and the galvanometer mirror 403 via the scanning drive mechanism 401 in order to capture a wide-area image of the eye. Then, the reflected light of the weak laser light emitted from the imaging light source 400 is received by the light receiving element 404 to capture a wide-area image of the eye. Details of the SLO device configuration and drive mechanism control are described in detail in Patent Document 2.

断層像撮像装置3は、眼部の断層像を撮像する装置であり、例えばタイムドメイン方式のOCT(TD−OCT)やフーリエドメイン方式のOCT(FD−OCT)からなる。図6は、断層像撮像装置3がタイムドメインOCTである場合の、断層像撮像装置3の構成例を示す図である。断層像撮像装置3は、撮像の内容を指示するパラメータを診断支援装置1から入力し、当該パラメータを用いて断層像の撮像を行う。そして、得られた断層像を診断支援装置1へと出力する。   The tomographic image capturing apparatus 3 is an apparatus that captures a tomographic image of the eye, and includes, for example, time domain OCT (TD-OCT) or Fourier domain OCT (FD-OCT). FIG. 6 is a diagram illustrating a configuration example of the tomographic imaging apparatus 3 when the tomographic imaging apparatus 3 is a time domain OCT. The tomographic imaging apparatus 3 inputs a parameter for instructing the contents of imaging from the diagnosis support apparatus 1 and performs tomographic imaging using the parameter. The obtained tomographic image is output to the diagnosis support apparatus 1.

ここで、撮像の内容を指示するパラメータとは、断層像の取得部位、断層像の空間的範囲、スキャンライン間隔などの詳細度、走査順や走査方向といった走査法を指示するパラメータである。断層像撮像装置3は、これらのパラメータに従って参照ミラー駆動機構601及びガルバノミラー駆動機構603を制御し、参照ミラー602及びガルバノミラー604を駆動する。そして、低コヒーレンス光源600から照射した光の反射光を受光素子605で受光することにより、眼部の断層像を撮像する。なお、断層像撮像装置3がフーリエドメインOCTの場合は、ガルバノミラー604のみが制御される。なお、これらのOCTの機器構成や駆動機構の制御に関する詳細は、特許文献1や特許文献2に詳しく述べられている。   Here, the parameter for instructing the contents of imaging is a parameter for instructing a scanning method such as a tomographic image acquisition site, a spatial range of the tomographic image, a detail level such as a scan line interval, a scanning order, and a scanning direction. The tomographic imaging apparatus 3 controls the reference mirror driving mechanism 601 and the galvano mirror driving mechanism 603 according to these parameters, and drives the reference mirror 602 and the galvano mirror 604. The reflected light of the light emitted from the low-coherence light source 600 is received by the light receiving element 605, thereby capturing a tomographic image of the eye. When the tomographic imaging apparatus 3 is a Fourier domain OCT, only the galvanometer mirror 604 is controlled. Details regarding the device configuration of OCT and control of the drive mechanism are described in detail in Patent Document 1 and Patent Document 2.

(診断支援装置の機能構成)
次に、図2を用いて、診断支援装置1の機能構成を説明する。図2は本実施形態における診断支援装置1の機能構成を示す機能ブロック図である。図2に示す通り、診断支援装置1は、広域像取得部200、病変候補検出部201、断層像取得パラメータ決定部202、断層像取得部203、表示部204、データ保存部208を備える。
(Functional configuration of diagnosis support device)
Next, the functional configuration of the diagnosis support apparatus 1 will be described with reference to FIG. FIG. 2 is a functional block diagram showing a functional configuration of the diagnosis support apparatus 1 in the present embodiment. As illustrated in FIG. 2, the diagnosis support apparatus 1 includes a wide-area image acquisition unit 200, a lesion candidate detection unit 201, a tomographic image acquisition parameter determination unit 202, a tomographic image acquisition unit 203, a display unit 204, and a data storage unit 208.

●広域像取得部200
広域像取得部200は、広域像撮像装置2に眼部の広域像の撮像と送信を要求し、広域像撮像装置2から送信される眼部の広域像を取得する。広域像取得部200が取得した広域像は、病変候補検出部201、表示部204、及びデータ保存部208へと送信される。
● Wide-area image acquisition unit 200
The wide-area image acquisition unit 200 requests the wide-area image capturing apparatus 2 to capture and transmit a wide-area image of the eye, and acquires the wide-area image of the eye transmitted from the wide-area image capturing apparatus 2. The wide area image acquired by the wide area image acquisition unit 200 is transmitted to the lesion candidate detection unit 201, the display unit 204, and the data storage unit 208.

●病変候補検出部201
病変候補検出部201は、正常眼データベース、診療ガイドラインなどの情報に基づいて、広域像取得部200が取得した眼部の広域像から病変候補に関する情報を検出する。病変候補検出部201が検出した病変候補に関する情報(病変候補の検出結果)は、断層像取得パラメータ決定部202、表示部204、及びデータ保存部208へと送信される。なお、広域像から病変候補を検出する具体的処理の内容に関しては、後に詳しく説明する。
-Lesion candidate detection unit 201
The lesion candidate detection unit 201 detects information related to a lesion candidate from the wide area image of the eye acquired by the wide area image acquisition unit 200 based on information such as a normal eye database and medical guidelines. Information regarding the lesion candidate detected by the lesion candidate detection unit 201 (lesion candidate detection result) is transmitted to the tomographic image acquisition parameter determination unit 202, the display unit 204, and the data storage unit 208. Details of specific processing for detecting a lesion candidate from a wide-area image will be described in detail later.

●断層像取得パラメータ決定部202
断層像取得パラメータ決定部202は、判定部205と部位決定部206を備えている。断層像取得パラメータ決定部202は、病変候補検出部201が検出した病変候補に関する情報(病変候補の検出結果)に基づき、断層像の取得に関するパラメータ(断層像の撮像パラメータ)を決定する。断層像の撮像パラメータは、断層像取得の要否を指示するパラメータと、撮像の内容を指示するパラメータからなり、判定部205が前者を決定し、部位決定部206が後者を決定する。断層像取得パラメータ決定部202によって決定された撮像パラメータは、断層像取得部203、断層像解析部207、表示部204、及びデータ保存部208へと送信される。なお、病変候補の検出結果に基づいて断層像の撮像パラメータを決定する具体的処理の内容に関しては、後に詳しく説明する。
A tomographic image acquisition parameter determination unit 202
The tomographic image acquisition parameter determination unit 202 includes a determination unit 205 and a site determination unit 206. The tomographic image acquisition parameter determination unit 202 determines parameters (tomographic image imaging parameters) related to tomographic image acquisition based on information on lesion candidates detected by the lesion candidate detection unit 201 (lesion candidate detection results). The tomographic imaging parameters include a parameter for instructing whether to acquire a tomographic image and a parameter for instructing the content of imaging. The determination unit 205 determines the former, and the region determination unit 206 determines the latter. The imaging parameters determined by the tomogram acquisition parameter determination unit 202 are transmitted to the tomogram acquisition unit 203, the tomogram analysis unit 207, the display unit 204, and the data storage unit 208. The details of the specific processing for determining the imaging parameters of the tomographic image based on the detection result of the lesion candidate will be described in detail later.

●断層像取得部203
断層像取得部203は、断層像取得パラメータ決定部202が定めた断層像取得の要否を指示するパラメータが要の場合に、撮像の内容を指示するパラメータと共に断層像の撮像要求を断層像撮像装置3に送信する。そして、断層像撮像装置3から送信される断層像を取得する。断層像取得部203が取得した断層像は、断層像解析部207、表示部204、及びデータ保存部208へと送信される。
A tomographic image acquisition unit 203
The tomographic image acquisition unit 203 receives a tomographic image capturing request together with a parameter for instructing the imaging content when the parameter indicating whether or not tomographic image acquisition determined by the tomographic image acquisition parameter determining unit 202 is necessary. Transmit to device 3. Then, a tomographic image transmitted from the tomographic imaging apparatus 3 is acquired. The tomographic image acquired by the tomographic image acquisition unit 203 is transmitted to the tomographic image analysis unit 207, the display unit 204, and the data storage unit 208.

●断層像解析部207
断層像解析部207は、断層像取得部203が取得した断層像を解析し、当該断層像に関する画像計測もしくは当該断層像からの病変候補検出を行う。そして、表示部204及びデータ保存部208へと解析結果を送信する。なお、断層像を解析する具体的処理の内容に関しては、後に詳しく説明する。
-Tomographic image analysis unit 207
The tomographic image analysis unit 207 analyzes the tomographic image acquired by the tomographic image acquisition unit 203 and performs image measurement related to the tomographic image or lesion candidate detection from the tomographic image. Then, the analysis result is transmitted to the display unit 204 and the data storage unit 208. The details of the specific processing for analyzing the tomographic image will be described in detail later.

●表示部204
表示部204は、断層像取得部203により得られた断層像や、断層像解析部207により得られた画像計測もしくは病変候補検出結果を表示する。また、断層像取得パラメータ決定部202が決定した断層像の撮像パラメータを表示する。また、断層像の取得ができなかった場合には、その旨を表す情報を表示する。さらに、撮像部位の確認等の理由で、広域像取得部200で取得された広域像や、病変候補検出部201が検出した病変候補に関する情報を一緒に提示してもよい。
Display unit 204
The display unit 204 displays the tomographic image obtained by the tomographic image acquisition unit 203 and the image measurement or lesion candidate detection result obtained by the tomographic image analysis unit 207. In addition, the imaging parameters of the tomographic image determined by the tomographic image acquisition parameter determining unit 202 are displayed. If a tomographic image cannot be acquired, information indicating that is displayed. Furthermore, for reasons such as confirmation of the imaging region, information regarding the wide area image acquired by the wide area image acquisition unit 200 and the lesion candidate detected by the lesion candidate detection unit 201 may be presented together.

●データ保存部208
データ保存部208は、入力した各種の情報を関連付けて、ある患者のデータとして磁気ディスク102へと保存する。具体的には、
・広域像取得部200から入力した広域像。
Data storage unit 208
The data storage unit 208 associates various types of input information and stores the information as certain patient data in the magnetic disk 102. In particular,
A wide area image input from the wide area image acquisition unit 200.

・病変候補検出部201から入力した病変候補に関する情報。   Information regarding a lesion candidate input from the lesion candidate detection unit 201.

・断層像取得パラメータ決定部202から入力した断層像の撮像パラメータ。   Imaging parameters for tomographic images input from the tomographic image acquisition parameter determination unit 202.

・断層像取得部203から入力した断層像。   A tomogram input from the tomogram acquisition unit 203.

・断層像解析部207から入力した画像計測もしくは病変候補検出結果。   Image measurement or lesion candidate detection result input from the tomogram analysis unit 207.

を保存する。また、データの保存は不図示の外部サーバに行ってもよく、この場合、データ保存部208はこれらのデータを外部サーバへと送信する。   Save. Data may be stored in an external server (not shown). In this case, the data storage unit 208 transmits these data to the external server.

(診断支援処理)
次に、図3を参照して、本実施形態の診断支援装置1により実行される診断支援処理の、具体的な処理手順を説明する。図3は、本実施形態に係る診断支援装置1が実行する診断支援処理の処理手順を示すフローチャートである。
(Diagnosis support processing)
Next, a specific processing procedure of the diagnosis support process executed by the diagnosis support apparatus 1 of the present embodiment will be described with reference to FIG. FIG. 3 is a flowchart showing the procedure of the diagnosis support process executed by the diagnosis support apparatus 1 according to this embodiment.

●ステップS301
ステップS301において、広域像取得部200は、広域像撮像装置2に眼部の広域像の撮像と送信を要求し、広域像撮像装置2から送信される眼部の広域像を取得する。そして、取得した広域像を、病変候補検出部201、表示部204、及びデータ保存部208へと送信する。
● Step S301
In step S <b> 301, the wide area image acquisition unit 200 requests the wide area image capturing apparatus 2 to capture and transmit a wide area image of the eye, and acquires the wide area image of the eye transmitted from the wide area image capturing apparatus 2. Then, the acquired wide area image is transmitted to the lesion candidate detection unit 201, the display unit 204, and the data storage unit 208.

●ステップS302
次に、ステップS302において、病変候補検出部201は、ステップS301で取得した広域像に画像処理(解析)を施し、病変候補に関する情報を検出する。本実施形態における病変候補検出部201は、病変候補として、図5の模式図501に示す視神経乳頭501aの形状異常、神経線維層欠損(不図示)、動静脈交叉などの血管形状異常(不図示)、軟性ドル―ゼン501bなどのその他の病変の候補を検出する。そして、検出した病変候補に関する情報(病変候補の検出結果)を、断層像取得パラメータ決定部202、表示部204、及びデータ保存部208へと送信する。なお、図5は、病変候補検出部201が検出する眼部の広域像上における病変候補の例を示す図である。
● Step S302
Next, in step S302, the lesion candidate detection unit 201 performs image processing (analysis) on the wide area image acquired in step S301, and detects information regarding the lesion candidate. The lesion candidate detection unit 201 according to the present embodiment has, as lesion candidates, abnormal blood vessel shapes (not shown) such as an abnormal shape of the optic nerve head 501a shown in the schematic diagram 501 of FIG. 5, a nerve fiber layer defect (not shown), and an arteriovenous crossover. ), Detecting other lesion candidates such as soft drusen 501b. Then, information on the detected lesion candidate (lesion candidate detection result) is transmitted to the tomographic image acquisition parameter determination unit 202, the display unit 204, and the data storage unit 208. FIG. 5 is a diagram illustrating an example of a lesion candidate on a wide-area image of the eye detected by the lesion candidate detection unit 201.

なお病変候補に関する情報には、病変候補の有無や病変候補の種類、病変候補の範囲、病変候補の程度等に関する情報が含まれる。例えば、視神経乳頭形状異常の場合には形状異常の有無や悪性度(Cup/Disc比の値)を表し、神経線維層欠損の場合は欠損の有無や存在範囲(座標・面積)を表す。血管形状異常の場合は異常候補の有無と座標、悪性度(静脈径比の値)を表す。さらに、軟性ドル―ゼン501b等のその他の病変の場合は病変候補の存在の有無、各々病変の座標や面積、数を表すものである。   The information on the lesion candidate includes information on the presence / absence of the lesion candidate, the type of the lesion candidate, the range of the lesion candidate, the degree of the lesion candidate, and the like. For example, in the case of an abnormal optic nerve head shape, it indicates the presence / absence of a shape abnormality and the degree of malignancy (Cup / Disc ratio value), and in the case of a nerve fiber layer defect, it indicates the presence / absence and presence range (coordinate / area) of the defect. In the case of a blood vessel shape abnormality, it represents the presence / absence and coordinates of an abnormality candidate, and malignancy (value of vein diameter ratio). Further, in the case of other lesions such as soft drusen 501b, the presence / absence of lesion candidates, the coordinates, area, and number of lesions are indicated.

ここで、視神経乳頭の形状異常や神経線維層欠損は、例えば特許文献3に記載の手法で検出することができる。また、動静脈交叉現象などの血管形状異常は、例えば非特許文献1に挙げる手法で検出することができる。また、軟性ドル―ゼンなどのその他の病変の候補は、非特許文献2に挙げる手法で検出することができる。なお、夫々の病変候補の検出方法はこれらに限定されるものではなく、眼部の広域像から夫々の病変候補を検出可能な方法であれば、いずれの方法を用いてもよい。   Here, the abnormal shape of the optic nerve head and the nerve fiber layer defect can be detected by the method described in Patent Document 3, for example. Further, an abnormal blood vessel shape such as an arteriovenous crossing phenomenon can be detected by the method described in Non-Patent Document 1, for example. Further, other lesion candidates such as soft drusen can be detected by the method described in Non-Patent Document 2. In addition, the detection method of each lesion candidate is not limited to these, Any method may be used as long as it can detect each lesion candidate from the wide area image of the eye part.

[特許文献3] 特開平9−313447号公報
[非特許文献1] 高橋亮他:”眼底画像における高血圧症診断支援のための血管交叉部の自動解析”、Medical Imaging Technology、Vol.24、No.4、pp.270−276、2006
[非特許文献2] 岩崎拓郎他:”眼底写真からのドル―ゼン自動抽出の検討”、信学技報、MI2003−100、pp.17−22、2004
●ステップS303
ステップS303において、判定部205は、ステップS302で検出した病変候補に関する情報(病変候補の検出結果)に基づき、断層像取得の要否を判定する。そして、その結果を断層像取得の要否を指示するパラメータに設定し、断層像取得部203、表示部204、及びデータ保存部208へと送信する。また、断層像の取得が必要と判定した場合(ステップS303でYES)には処理をステップS304へと進め、断層像の取得が不要と判定した場合(ステップS303でNO)には処理をステップS307へと進める。
[Patent Document 3] JP-A-9-313447 [Non-Patent Document 1] Ryo Takahashi et al .: “Automatic analysis of blood vessel intersection for supporting hypertension diagnosis in fundus image”, Medical Imaging Technology, Vol. 24, No. .4, pp. 270-276, 2006
[Non-Patent Document 2] Takuro Iwasaki et al .: "Examination of automatic extraction of drusen from fundus photos", IEICE Technical Report, MI 2003-100, pp. 17-22, 2004.
● Step S303
In step S303, the determination unit 205 determines whether or not tomographic image acquisition is necessary based on the information regarding the lesion candidate detected in step S302 (lesion candidate detection result). Then, the result is set as a parameter indicating whether or not tomographic image acquisition is necessary, and is transmitted to the tomographic image acquisition unit 203, the display unit 204, and the data storage unit 208. If it is determined that acquisition of a tomographic image is necessary (YES in step S303), the process proceeds to step S304. If it is determined that acquisition of a tomographic image is not necessary (NO in step S303), the process is performed in step S307. Proceed to.

断層像取得の要否は、診療ガイドライン等の情報に基づき、あらかじめ設定しておいた病変候補の重篤度や発生部位の少なくともいずれか等によって判定する。具体的には、視神経乳頭の形状異常の場合にはCup/Disc比が一定値(例えば0.7)以上の場合に断層像の取得が必要と判定する。神経線維層欠損の場合は、一定値以上の面積を持つ欠損候補部位が存在する場合に断層像の取得が必要と判定する。動静脈交叉現象の場合は(交叉部での静脈径)/(交叉部以外での静脈径)が一定値(1.0未満)の場合に断層像の取得が必要と判定する。軟性ドル―ゼンなどのその他の病変の場合は、ある一定値以上の面積を持つ病変候補が1つ以上存在する場合に断層像の取得が必要と判定する。   Whether or not a tomographic image needs to be acquired is determined based on information such as medical guideline or the like based on the severity of a lesion candidate set in advance or at least one of occurrence sites. Specifically, in the case of an abnormal shape of the optic nerve head, it is determined that acquisition of a tomographic image is necessary when the Cup / Disc ratio is a certain value (eg, 0.7) or more. In the case of a nerve fiber layer defect, it is determined that a tomographic image needs to be acquired when there is a defect candidate site having an area of a certain value or more. In the case of an arteriovenous crossing phenomenon, it is determined that a tomographic image needs to be acquired when (venous diameter at the crossing portion) / (venous diameter outside the crossing portion) is a constant value (less than 1.0). In the case of other lesions such as soft drusen, it is determined that a tomographic image needs to be acquired when there are one or more lesion candidates having an area larger than a certain value.

なお、断層像取得の要否の判定方法はこれに限るものではなく、その他の基準で判定してもよい。例えば、病変候補検出部201が何らかの病変候補を検出した場合には要、検出しない場合には否と判定してもよい。   Note that the method of determining whether tomographic image acquisition is necessary is not limited to this, and the determination may be made based on other criteria. For example, it may be determined to be necessary when the lesion candidate detection unit 201 detects any lesion candidate, and may be determined as not to be detected when not detected.

●ステップS304
ステップS304において、部位決定部206は、ステップS302で検出した病変候補に関する情報(病変候補の検出結果)に基づき、断層像の撮像の内容を指示するパラメータを決定する。そして、決定したパラメータを、断層像取得部203、断層像解析部207、表示部204、及びデータ保存部208へと送信する。
● Step S304
In step S304, the site determination unit 206 determines a parameter for instructing the content of tomographic imaging based on the information regarding the lesion candidate detected in step S302 (lesion candidate detection result). Then, the determined parameters are transmitted to the tomographic image acquisition unit 203, the tomographic image analysis unit 207, the display unit 204, and the data storage unit 208.

部位決定部206は、検出された病変候補の種類や状況(位置や範囲)に応じて、断層像の撮像の内容を指示するパラメータを決定する。具体的には、病変の種類や取得する部位に適した断層像の空間的範囲、スキャンライン間隔などの詳細度、走査順や走査方向といった走査法を決める。以下に、設定されうるパラメータの具体例を示す。   The site determination unit 206 determines a parameter for instructing the content of tomographic image capture according to the type and situation (position or range) of the detected lesion candidate. Specifically, a scanning method is determined such as a lesion type, a spatial range of a tomographic image suitable for a site to be acquired, a degree of detail such as a scan line interval, a scanning order, and a scanning direction. The following are specific examples of parameters that can be set.

・視神経乳頭の形状異常を検出した場合:
視神経乳頭付近の6mm×6mmの領域を、1024×512×16のサイズで円形スキャンで取得する。
・ When abnormal optic disc shape is detected:
A 6 mm × 6 mm region near the optic nerve head is acquired in a circular scan with a size of 1024 × 512 × 16.

・神経線維層欠損を検出した場合:
神経線維層厚の定量化が必要であるため、欠損部位を含む矩形領域を、Bスキャン画像上で層厚が精密に計測できるよう512×512×128のサイズでラスタスキャンで取得する。
・ When a nerve fiber layer defect is detected:
Since it is necessary to quantify the nerve fiber layer thickness, a rectangular region including a defect site is acquired by raster scanning at a size of 512 × 512 × 128 so that the layer thickness can be accurately measured on a B-scan image.

・網膜血管病変を検出した場合:
黄斑浮腫の可能性があるため、直径約2mmの黄斑部を十分含むように、黄斑501c付近の6mm×6mmの領域を、256×256×256のサイズでラスタスキャンで取得する。
・ When a retinal vascular lesion is detected:
Since there is a possibility of macular edema, a 6 mm × 6 mm region in the vicinity of the macula 501c is acquired by raster scanning at a size of 256 × 256 × 256 so as to sufficiently include a macular portion having a diameter of about 2 mm.

・軟性ドル―ゼンなどのその他の病変を検出した場合:
加齢黄斑変性が疑われるので、黄斑501c付近の6mm×6mmの領域を、Bスキャン画像上での網膜色素上皮の微細な凹凸が検出できるように512×512×128のサイズでラスタスキャンで取得する。
・ When other lesions such as soft drusen are detected:
Since age-related macular degeneration is suspected, a 6 mm x 6 mm area near macular 501c is acquired by raster scan at a size of 512 x 512 x 128 so that minute irregularities of the retinal pigment epithelium on a B-scan image can be detected To do.

なお、ステップS302で検出された病変候補が複数ある場合には、夫々の病変候補に関して撮像部位を決定し、夫々に対して撮像パラメータを決定する。例えば、視神経乳頭異常と黄斑部付近での神経線維層欠損が検出されている場合には、視神経乳頭部と黄斑部の夫々の撮影を指示するパラメータが設定される。   When there are a plurality of lesion candidates detected in step S302, an imaging region is determined for each lesion candidate, and an imaging parameter is determined for each. For example, when an optic disc abnormality and a nerve fiber layer defect in the vicinity of the macula are detected, parameters for instructing imaging of the optic disc and the macula are set.

●ステップS305
ステップS305において、断層像取得部203は、ステップS303及びステップS304で決定した断層像の撮像パラメータに基づき、断層像撮像装置3から断層像を取得する。すなわち、断層像取得の要否を指示するパラメータが要の場合に、撮像の内容を指示するパラメータと共に断層像の撮像要求を断層像撮像装置3に送信する。そして、断層像撮像装置3から送信される断層像を取得する。断層像取得部203が取得した断層像は、断層像解析部207、表示部204、及びデータ保存部208へと送信される。なお、ステップS304で複数の部位に関する撮像が指示された場合には、夫々の撮像パラメータを用いた撮像要求を断層像撮像装置3に送信し、複数回の撮像を実行する。
● Step S305
In step S305, the tomographic image acquisition unit 203 acquires a tomographic image from the tomographic imaging apparatus 3 based on the tomographic imaging parameters determined in steps S303 and S304. That is, when a parameter indicating whether or not tomographic image acquisition is necessary is necessary, a tomographic image capturing request is transmitted to the tomographic image capturing apparatus 3 together with a parameter indicating the imaging content. Then, a tomographic image transmitted from the tomographic imaging apparatus 3 is acquired. The tomographic image acquired by the tomographic image acquisition unit 203 is transmitted to the tomographic image analysis unit 207, the display unit 204, and the data storage unit 208. In addition, when the imaging | photography regarding several site | parts was instruct | indicated in step S304, the imaging request using each imaging parameter is transmitted to the tomographic imaging device 3, and imaging is performed in multiple times.

●ステップS306
ステップS306において、断層像解析部207は、ステップS305で取得した断層像を解析し、当該断層像に関する画像計測もしくは当該断層像からの病変候補検出を行う。そして、表示部204及びデータ保存部208へと解析結果を送信する。
● Step S306
In step S306, the tomogram analysis unit 207 analyzes the tomogram acquired in step S305, and performs image measurement related to the tomogram or detection of a lesion candidate from the tomogram. Then, the analysis result is transmitted to the display unit 204 and the data storage unit 208.

例えば黄斑部の断層像を撮像した場合には、公知の閾値処理などを用いて網膜層の境界を検出して網膜層厚を計測する。また、視神経乳頭部の断層像を撮像した場合には、公知の閾値処理を行い、内境界膜を検出してCup/Disc比を求める。また計測部位は網膜層境界に限るものではなく、例えば血管などであってもよい。   For example, when a tomographic image of the macular portion is captured, the boundary of the retinal layer is detected using a known threshold process and the retinal layer thickness is measured. In addition, when a tomographic image of the optic nerve head is captured, a known threshold process is performed to detect the inner boundary film and obtain the Cup / Disc ratio. Further, the measurement site is not limited to the retinal layer boundary, and may be, for example, a blood vessel.

また、網膜層厚などの眼部に関する解析結果を事前に蓄積された眼部形状の正常値と比較し、正常値の範囲外である場合に眼部の形状異常として検出するなどの病変候補の検出も行う。ただし断層像からの病変候補取得方法はこれに限定されるものではなく、例えば断層像における濃度情報や形態情報を利用して直接病変候補を検出してもよい。   In addition, the results of analysis on the eye such as the thickness of the retina are compared with the normal values of the eye shape accumulated in advance, and candidate lesions such as detecting abnormal eye shapes when they are outside the normal value range. Detection is also performed. However, the method for acquiring a lesion candidate from a tomographic image is not limited to this, and for example, a lesion candidate may be directly detected using density information or shape information in a tomographic image.

さらに、例えば網膜層厚の分布状況など、画像計測結果や病変候補検出結果の理解を助けるグラフやマップを作成してもよい。   Furthermore, for example, a graph or a map that assists in understanding the image measurement result and the lesion candidate detection result such as the distribution state of the retinal layer thickness may be created.

なお、ステップS305で複数の部位に関する断層像が取得されている場合には、夫々の部位に対する処理を実行する。また、ステップS305において断層像が取得されていない場合には、断層像解析部207は、ステップS306の処理を実行しない。   If tomographic images relating to a plurality of parts are acquired in step S305, processing for each part is executed. If a tomographic image has not been acquired in step S305, the tomographic image analysis unit 207 does not execute the process of step S306.

●ステップS307
ステップS307において、表示部204は、断層像が取得されている場合に以下の処理を行う。すなわち、ステップS305で得られた断層像と、ステップS306で得られた断層像の解析結果(画像計測もしくは病変候補検出結果)を、モニタ105上に表示する。ここで撮像部位の確認等の理由で、広域像と、広域像上で検出した病変候補、あるいは広域像上における断層像の取得範囲を一緒に提示してもよい。また、断層像の撮像パラメータを合わせて表示してもよい。また断層像が取得されていない場合には、広域像や断層像取得が不要であった理由等を表示してもよい。
● Step S307
In step S307, the display unit 204 performs the following processing when a tomographic image is acquired. That is, the tomographic image obtained in step S305 and the analysis result (image measurement or lesion candidate detection result) of the tomographic image obtained in step S306 are displayed on the monitor 105. Here, for reasons such as confirmation of the imaging region, the wide area image, the lesion candidate detected on the wide area image, or the acquisition range of the tomographic image on the wide area image may be presented together. Further, the imaging parameters of the tomographic image may be displayed together. If a tomographic image has not been acquired, the reason why it is not necessary to acquire a wide-area image or a tomographic image may be displayed.

図7に、病変候補検出部201による病変候補検出結果と、断層像解析部207により得られた画像計測結果の表示例を示す。この例では、左側に広域像701と病変候補701a、断層像の取得範囲701b、右上に取得された断層像702、右下に断層像の解析結果として網膜層厚のマップ703が表示されている。   FIG. 7 shows a display example of a lesion candidate detection result by the lesion candidate detection unit 201 and an image measurement result obtained by the tomographic image analysis unit 207. In this example, a wide area image 701, a lesion candidate 701a, a tomographic image acquisition range 701b, a tomographic image 702 acquired in the upper right, and a map 703 of retinal layer thickness as a tomographic image analysis result are displayed in the lower right. .

この例においては、広域像701において軟性ドルーゼン701aを検出したために、黄斑部701bが撮像部位として指定され、撮像した断層像702から網膜層境界(702の太線部分)を検出して、求めた網膜層厚のマップ703が表示されている。   In this example, since soft drusen 701a is detected in the wide-area image 701, the macular portion 701b is designated as the imaging region, and the retinal layer boundary (the bold line portion of 702) is detected from the captured tomographic image 702, and the obtained retina is obtained. A layer thickness map 703 is displayed.

●ステップS308
ステップS308において、データ保存部208は、以上のステップで入力した各種の情報を関連付けて、ある患者のデータとして磁気ディスク102へと保存する。具体的には、ステップS301で得た広域像、ステップS302で得た病変候補の情報、ステップS303及びS304で得た断層像の撮像パラメータ、ステップS305で得た断層像、ステップS306で得た画像計測または病変候補検出結果を保存する。もちろん、保存するデータはこれらの全てでなくてもよい。
● Step S308
In step S308, the data storage unit 208 associates the various information input in the above steps and stores the information as certain patient data in the magnetic disk 102. Specifically, the wide-area image obtained in step S301, the lesion candidate information obtained in step S302, the tomographic imaging parameters obtained in steps S303 and S304, the tomographic image obtained in step S305, and the image obtained in step S306 Save measurement or lesion candidate detection results. Of course, the data to be stored need not be all of these.

なお、断層像の撮像パラメータの保存は、ステップS305において何らかの理由で断層像取得部203が断層像を取得できなかった場合にのみ行うような構成としてもよい。例えば、診断支援装置1に断層像撮像装置3が接続されていない場合などに、広域像と断層像の撮像パラメータを関連付けて保存しておくことで、必要な患者の断層像を後から(手動で)撮像することが可能となる。この場合、断層像の撮像パラメータを広域像ファイルのヘッダ領域に保存してもよい。   Note that the tomographic imaging parameter storage may be configured to be performed only when the tomographic image acquisition unit 203 cannot acquire the tomographic image for some reason in step S305. For example, when the tomographic imaging apparatus 3 is not connected to the diagnosis support apparatus 1, by storing the imaging parameters of the wide area image and the tomographic image in association with each other, the necessary tomographic image of the patient is later (manually) It becomes possible to image. In this case, the tomographic imaging parameters may be stored in the header area of the wide area image file.

なお、データの保存は不図示の外部サーバに行ってもよく、この場合、データ保存部208はこれらのデータを外部サーバへと送信する。   The data may be stored in an external server (not shown). In this case, the data storage unit 208 transmits these data to the external server.

上記のように、本実施形態では、眼部の広域像の解析結果から断層像の取得の要否や取得範囲を自動的に設定する。このため、眼部の断層像の取得を効率的に行うことができる。   As described above, in the present embodiment, the necessity of acquiring a tomographic image and the acquisition range are automatically set from the analysis result of the wide-area image of the eye. For this reason, it is possible to efficiently acquire a tomographic image of the eye.

また、本実施形態では、眼部の広域像を取得する広域像取得処理を行い、取得した広域像を解析して、眼部における病変候補を検出し、病変候補の検出結果に基づいて眼部の断層像取得に関するパラメータを決定する。そして、決定したパラメータに基づいて眼部の断層像を取得する断層像取得処理を行う。このように、本実施形態においては、断層像の取得が必要な箇所を自動的に検出して断層像を取得するため、許容された撮影時間や解析処理時間で必要な部分の断層像を取得する。したがって、眼部の断層像の取得を効率的に行うことができる。   Further, in the present embodiment, a wide-area image acquisition process for acquiring a wide-area image of the eye is performed, the acquired wide-area image is analyzed, a lesion candidate in the eye is detected, and the eye is based on the detection result of the lesion candidate Determine parameters for tomographic image acquisition. Then, tomographic image acquisition processing is performed for acquiring a tomographic image of the eye based on the determined parameters. As described above, in the present embodiment, the tomographic image is acquired by automatically detecting the portion where the tomographic image needs to be acquired, and thus the tomographic image of the necessary part is acquired with the allowable imaging time and analysis processing time. To do. Therefore, it is possible to efficiently acquire a tomographic image of the eye.

なお、上述のように、眼部の広域像を解析して、病変候補の有無と、病変候補の種類と、病変候補の範囲と、病変候補の程度と、の少なくともいずれかを検出し、その検出結果に基づいて断層像取得に関するパラメータを決定してもよい。この場合、断層像を取得すべき部位を適切に決定することができる。   As described above, a wide area image of the eye is analyzed to detect at least one of the presence / absence of a lesion candidate, the type of lesion candidate, the range of lesion candidate, and the degree of lesion candidate, Parameters relating to tomographic image acquisition may be determined based on the detection result. In this case, a site where a tomographic image should be acquired can be determined appropriately.

また、検出された病変候補の種類と範囲との少なくともいずれかに基づいて断層像取得に関するパラメータを決定してもよい。この場合も、断層像を取得すべき部位を適切に決定することができる。   Further, a parameter relating to tomographic image acquisition may be determined based on at least one of the type and range of the detected lesion candidate. Also in this case, it is possible to appropriately determine a site where a tomographic image is to be acquired.

また、決定するパラメータには、断層像取得の要否を示す情報が含まれてもよい。さらに、断層像取得の要否は、予め定められた病変候補の重篤度と発生部位との少なくともいずれかに基づいて決定してもよい。この場合、このパラメータに基づいて断層像を取得するか否かを適切に決定することができる。   The parameter to be determined may include information indicating whether tomographic image acquisition is necessary. Furthermore, whether or not tomographic images need to be acquired may be determined based on at least one of a predetermined severity of a lesion candidate and an occurrence site. In this case, it is possible to appropriately determine whether to acquire a tomographic image based on this parameter.

また、断層像取得が不要であることを示す情報がパラメータに含まれる場合には断層像の取得を行わないようにしてもよい。この場合、不要な断層像を取得せずに効率的に動作することが可能である。   Further, when information indicating that the tomographic image acquisition is unnecessary is included in the parameter, the tomographic image acquisition may not be performed. In this case, it is possible to operate efficiently without acquiring an unnecessary tomographic image.

また、決定するパラメータには、取得すべき断層像の部位を示す情報が含まれてもよい。あるいは、決定するパラメータには、取得すべき断層像の空間的範囲と、詳細度と、走査法との少なくともいずれかを示す情報が含まれてもよい。この場合、これらのパラメータに基づいて、断層像が必要な部位を確定することができる。   Further, the parameter to be determined may include information indicating the portion of the tomographic image to be acquired. Alternatively, the parameters to be determined may include information indicating at least one of the spatial range of the tomographic image to be acquired, the degree of detail, and the scanning method. In this case, a site where a tomographic image is required can be determined based on these parameters.

また、取得した広域像と、取得した断層像と、の少なくともいずれかをモニタに表示させる表示制御処理を行ってもよい。この場合、医師は、広域像や断層像を閲覧して適切な診断を行うことができる。   In addition, display control processing may be performed in which at least one of the acquired wide-area image and the acquired tomographic image is displayed on the monitor. In this case, the doctor can browse the wide area image and the tomographic image and perform an appropriate diagnosis.

また、決定したパラメータを広域像と関連付けて磁気ディスク102等の記憶手段に保存してもよい。この場合、広域像とパラメータに基づいて、後に断層像を取得するなど適切な処置を行うことができる。   The determined parameters may be stored in a storage unit such as the magnetic disk 102 in association with the wide area image. In this case, an appropriate treatment such as obtaining a tomographic image later can be performed based on the wide area image and the parameters.

(変形例1)
本実施形態における病変候補検出部201は、ステップS302の処理において、視神経乳頭の形状異状、神経線維層欠損、動静脈交叉などの血管形状異常、及び軟性ドル―ゼンなどその他の病変の候補を検出していた。しかし、病変候補検出部201が検出する病変の候補は、これらに限定されるものではない。例えば、非特許文献3に示すように、平滑化差分処理に基づく公知の画像特徴検出手法を用いて白斑や出血を検出してもよい。広域像撮像装置2から得られる眼部の広域像から検出可能な病変候補であれば、いずれの病変候補を検出してもよい。
(Modification 1)
In the process of step S302, the lesion candidate detection unit 201 according to the present embodiment detects candidates for other lesions such as an abnormal shape of the optic papilla, an abnormal vascular shape such as a nerve fiber layer defect, an arteriovenous cross, and a soft drusen. Was. However, lesion candidates detected by the lesion candidate detection unit 201 are not limited to these. For example, as shown in Non-Patent Document 3, vitiligo and bleeding may be detected using a known image feature detection method based on smoothing difference processing. Any lesion candidate may be detected as long as it is a lesion candidate that can be detected from the wide-area image of the eye obtained from the wide-area image capturing apparatus 2.

また、広域像から検出するのは必ずしも病変候補でなくてもよく、広域像から得られる眼部に関する情報であれば、いずれの情報であってもよい。例えば、広域像を処理して網膜形状を計測し、標準形状からの乖離度を数値化したものを計測してもよい。   Further, detection from a wide-area image does not necessarily have to be a lesion candidate, and any information may be used as long as it is information on an eye part obtained from a wide-area image. For example, a wide area image may be processed to measure a retina shape, and a value obtained by quantifying a deviation from a standard shape may be measured.

なお、病変候補検出部201が上記実施形態とは異なる病変候補を検出する場合には、断層像取得パラメータ決定部202は、その病変に対する撮像パラメータの決定を行う必要がある。例えば、白斑を病変候補として検出する場合には、白斑が検出されたら必ず断層像の取得が必要と判定し、部位は黄斑部と決定する。また、網膜形状の標準形状からの乖離度を計測する場合には、その値が予め定めた閾値以上の場合には断層像の取得が必要と判定し、黄斑部の撮影を行うようにしてもよい。   When the lesion candidate detection unit 201 detects a lesion candidate different from that in the above embodiment, the tomographic image acquisition parameter determination unit 202 needs to determine an imaging parameter for the lesion. For example, when detecting vitiligo as a lesion candidate, it is determined that a tomographic image must be acquired whenever a vitiligo is detected, and the site is determined to be a macular portion. When measuring the degree of deviation of the retinal shape from the standard shape, if the value is equal to or greater than a predetermined threshold, it is determined that a tomographic image needs to be acquired and the macular portion is photographed. Good.

[非特許文献3] 畑中裕司他:”眼底画像における出血と白斑の自動検出法”、信学技報、MI2006−131、pp.181−184、2007
上記のように、病変候補はここに例示したものに限られず、任意の病変候補について本構成を適用することができる。
[Non-patent document 3] Yuji Hatanaka et al .: “Automatic detection method of bleeding and vitiligo in fundus image”, IEICE Technical Report, MI 2006-131, pp.181-184, 2007
As described above, the lesion candidates are not limited to those exemplified here, and this configuration can be applied to arbitrary lesion candidates.

(変形例2)
また、決定される撮像パラメータは上記の例に限定されるものではなく、検出された病変候補の種類や位置に応じて撮像パラメータを決定するルールが記述可能であれば、いずれのパラメータであってもよい。
(Modification 2)
Further, the imaging parameters to be determined are not limited to the above example, and any parameters can be used as long as a rule for determining imaging parameters according to the type and position of the detected lesion candidate can be described. Also good.

例えば、撮像の内容を指示するパラメータは、検出した病変に応じた撮像部位だけであってもよい。この場合、部位決定部206はステップS304の処理において病変の検出結果に応じて撮像すべき部位を指定する。例えば、視神経乳頭異常を検出した場合は視神経乳頭、網膜血管病変を検出した場合は黄斑部、軟性ドル―ゼンなどを検出した場合も黄斑部、神経線維層欠損を検出した場合はその欠損を含む部位(視神経乳頭/黄斑部)を指定することができる。あるいは、予め定められた幾つかのパラメータの組を表す撮像モードを撮像の内容を指示するパラメータとして決定してもよい。例えば、網膜血管病変を検出した場合はある設定で黄斑部を撮影する撮像モードB、軟性ドル―ゼンなどを検出した場合は別の設定で黄斑部を撮影する撮像モードCのように指定してもよい。このとき、断層像取得装置3は、指定された部位や撮像モードに応じて具体的な撮像範囲や対応する走査方法等を解釈し、それに基づいて断層像の撮像を行えばよい。   For example, the parameter for instructing the content of imaging may be only the imaging site corresponding to the detected lesion. In this case, the site determination unit 206 designates a site to be imaged according to the lesion detection result in the process of step S304. For example, if an optic disc abnormality is detected, the optic disc is included; if a retinal vascular lesion is detected, the macular region; if soft drusen is detected, the macular region; if detecting a nerve fiber layer defect, the defect is included A site (optic nerve head / macular region) can be specified. Or you may determine the imaging mode showing the group of some predetermined parameters as a parameter which instruct | indicates the content of imaging. For example, when a retinal vascular lesion is detected, the imaging mode B is used for imaging the macula with a certain setting, and when soft drusen is detected, the imaging mode C is used for imaging the macular with another setting. Also good. At this time, the tomographic image acquisition device 3 may interpret a specific imaging range, a corresponding scanning method, and the like according to the designated part and imaging mode, and perform tomographic imaging based on the interpretation.

また、撮像の内容を指示するパラメータは、断層像取得装置3の駆動機構を制御する制御パラメータ(例えばガルバノミラーの角度等の制御パラメータ)であってもよい。この場合は、断層像取得装置3を(眼部)診断支援装置1が直接制御することになる。   Further, the parameter for instructing the content of imaging may be a control parameter (for example, a control parameter such as a galvano mirror angle) for controlling the drive mechanism of the tomographic image acquisition apparatus 3. In this case, the (eye part) diagnosis support apparatus 1 directly controls the tomographic image acquisition apparatus 3.

(変形例3)
また、本実施形態では、広域像取得部200に入力される広域像として眼底カメラ像やSLO像などを用いていたが、広範囲を撮影したOCT断層像を投影して生成した2次元像を広域像として用いてもよい。また、広域像は2次元像に限定されるものではなく、広い範囲を低解像度で撮像したOCT断層像を用いてもよい。撮像範囲の広いOCT像は、例えば、撮影画角を最大に設定した断層像撮像装置3から直接取得してもよい。また、断層像撮像装置3を用いてあらかじめ同一眼の複数部位を撮像し、画像処理でつなぎ合わせて広域像を取得してもよい。
(Modification 3)
In this embodiment, a fundus camera image, an SLO image, or the like is used as a wide-area image input to the wide-area image acquisition unit 200. However, a two-dimensional image generated by projecting an OCT tomographic image that captures a wide area is generated. It may be used as an image. Further, the wide area image is not limited to a two-dimensional image, and an OCT tomographic image obtained by imaging a wide range with a low resolution may be used. An OCT image with a wide imaging range may be acquired directly from, for example, the tomographic imaging apparatus 3 with the imaging angle of view set to the maximum. In addition, a plurality of parts of the same eye may be captured in advance using the tomographic image capturing apparatus 3 and connected by image processing to acquire a wide area image.

本変形例では、広域像取得部200は広い範囲を低解像度で撮像したOCT像を入力する。病変候補検出部201は、例えば神経線維層境界の検出や神経層厚の計測、神経線維層厚正常値との比較などの処理を行って、神経線維層厚異常のような病変候補の検出を行う。図8は病変候補検出部201によって検出された病変候補の例を示す模式図である。この例では、広域像801における神経線維層厚が正常値よりも低い領域801aを異常部として検出している。   In this modification, the wide area image acquisition unit 200 inputs an OCT image obtained by imaging a wide range with a low resolution. The lesion candidate detection unit 201 performs processing such as detection of the nerve fiber layer boundary, measurement of the nerve layer thickness, comparison with a normal value of the nerve fiber layer thickness, and the like to detect a lesion candidate such as an abnormal nerve fiber layer thickness. Do. FIG. 8 is a schematic diagram illustrating an example of a lesion candidate detected by the lesion candidate detection unit 201. In this example, a region 801a in which the nerve fiber layer thickness in the wide area image 801 is lower than a normal value is detected as an abnormal part.

断層像取得パラメータ決定部202は、病変候補検出部201が検出した病変候補に関する情報に基づいて断層像の撮像パラメータを決定し、断層像取得部203は、この撮像パラメータを用いて局所的な断層像を高解像度で撮像する。これにより、必要な部位のみを高い解像度で撮像・解析することが可能となり、眼部の断層像の取得を効率的に行うことができる。   The tomographic image acquisition parameter determination unit 202 determines the tomographic imaging parameters based on the information regarding the lesion candidates detected by the lesion candidate detection unit 201, and the tomographic image acquisition unit 203 uses the imaging parameters to perform local tomographic imaging. Take an image with high resolution. Thereby, it becomes possible to image and analyze only a necessary part with high resolution, and tomographic images of the eye can be efficiently acquired.

<<第2実施形態:撮影済みの広域像/断層像を記憶装置から取得する構成>>
第1の実施形態では、診断支援装置1からの撮像要求に応じて、広域像撮像装置2や断層像撮像装置3が広域像や断層像の撮像を行う構成について説明した。しかし、診断支援装置の実施形態はこれに限定されるものではない。ここでは第2の実施形態として、既に撮像された状態で保存されている広域像や断層像を外部のデータベースや記憶装置から取得して、これに基づき診断を支援するための情報を提示する診断支援装置について説明する。
<< Second Embodiment: Configuration for Acquiring Wide Area Image / Tomographic Image from Storage Device >>
In the first embodiment, the configuration in which the wide-area image capturing apparatus 2 and the tomographic image capturing apparatus 3 capture a wide-area image and a tomographic image in response to an imaging request from the diagnosis support apparatus 1 has been described. However, the embodiment of the diagnosis support apparatus is not limited to this. Here, as a second embodiment, a diagnosis that obtains information for supporting diagnosis based on a wide-area image or tomographic image that has been captured and acquired from an external database or storage device The support device will be described.

第2実施形態における診断支援装置1は、広域像撮像装置2や断層像撮像装置3により撮像された医用検査データ(広域像、断層像)を格納する不図示のデータベース5に、LAN4を介して接続されている。なお、診断支援装置1に接続された不図示の記憶装置、例えばHDやCD−RWドライブ、DVDドライブを含めた各種記憶媒体から、これらのデータを読み取り可能な構成にしてもよい。   The diagnosis support apparatus 1 in the second embodiment includes a database 5 (not shown) that stores medical examination data (wide area image and tomographic image) captured by the wide area image capturing apparatus 2 and the tomographic image capturing apparatus 3 via the LAN 4. It is connected. The data may be read from various storage media including a storage device (not shown) connected to the diagnosis support apparatus 1, for example, an HD, a CD-RW drive, and a DVD drive.

本実施形態における診断支援装置1の処理手順を示すフローチャートは基本的に第1の実施形態と共通であるので、図3を用いて具体的な処理内容を説明する。なお、診断支援装置1が以下の処理を行うのに先立ち、データベース5には、診断対象となる患者の眼部の広域像(眼底カメラ像やSLO像)と、当該眼部の広範囲な断層像(OCT像)が予め撮像・蓄積されているものとする。   Since the flowchart showing the processing procedure of the diagnosis support apparatus 1 in this embodiment is basically the same as that in the first embodiment, specific processing contents will be described with reference to FIG. Prior to the diagnosis support apparatus 1 performing the following processing, the database 5 includes a wide-area image (fundus camera image or SLO image) of the eye of the patient to be diagnosed and a wide-range tomographic image of the eye. It is assumed that an (OCT image) is captured and accumulated in advance.

まず、ステップS301において、広域像取得部200は、データベース5に蓄積された診断対象患者の眼部の広域像を読み出す。なお、このとき取得する画像は診断対象となる画像だけでなく、過去症例や正常例、典型症例、類似症例などの画像である場合も含まれる。   First, in step S <b> 301, the wide area image acquisition unit 200 reads out a wide area image of the eye part of the diagnosis target patient accumulated in the database 5. Note that the images acquired at this time include not only images to be diagnosed but also images of past cases, normal cases, typical cases, similar cases, and the like.

ステップS302とステップS303の処理は、第1の実施形態と同様である。   The processing in step S302 and step S303 is the same as that in the first embodiment.

ステップS304において、部位決定部206は、ステップS302で検出した病変候補に関する情報(病変候補の検出結果)に基づき、切り出すべき局所断層像の取得パラメータを決定する。具体的なパラメータとしてはデータ中心位置やマトリクスサイズ、解像度、データ配列方法などを決定する。   In step S304, the region determination unit 206 determines the acquisition parameter of the local tomographic image to be cut out based on the information regarding the lesion candidate detected in step S302 (lesion candidate detection result). As specific parameters, the data center position, matrix size, resolution, data arrangement method and the like are determined.

ステップS305において、断層像取得部203は、ステップS304にて決定された断層像取得パラメータを用いて、データベース5に蓄積された当該患者の眼部の断層像から、必要な部位を切り出した局所断層像を取得する。なお、このとき取得する画像は診断対象となる画像だけでなく、過去症例や正常例、典型症例、類似症例などの画像であってもよい。   In step S305, the tomographic image acquisition unit 203 uses a tomographic image acquisition parameter determined in step S304, and extracts a necessary region from the tomographic image of the eye part of the patient accumulated in the database 5. Get a statue. The image acquired at this time is not limited to an image to be diagnosed, but may be an image of a past case, a normal case, a typical case, a similar case, or the like.

ステップS306及びステップS307の処理は、第1の実施形態と同様である。   The processes in step S306 and step S307 are the same as in the first embodiment.

以上のように、本実施形態の構成においては、眼部の広域像の解析結果から断層像の読み出しの要否を決めたり、断層像の読み出し領域を自動的に設定したりする。このため、断層像を用いた診断を支援できる。また、断層像の読み出しや解析処理を必要以上に行わないので、効率的に診断を行うことができる。   As described above, in the configuration of the present embodiment, the necessity of tomographic image readout is determined from the analysis result of the wide area image of the eye, and the tomographic image readout region is automatically set. For this reason, diagnosis using a tomographic image can be supported. In addition, since the tomographic image reading and analysis processes are not performed more than necessary, diagnosis can be performed efficiently.

<<その他の実施形態>>
本発明の目的は、前述した実施形態の機能を実現するソフトウエアのプログラムコードをシステムあるいは装置で実行することによっても達成されることは言うまでもない。この場合、プログラムコード自体が前述した実施形態の機能を実現することとなり、そのプログラムコードは本発明の技術的範囲に含まれる。
<< Other Embodiments >>
It goes without saying that the object of the present invention can also be achieved by executing a program code of software that realizes the functions of the above-described embodiments in a system or apparatus. In this case, the program code itself realizes the functions of the above-described embodiments, and the program code is included in the technical scope of the present invention.

プログラムコードは、例えば、コンピュータ読み取り可能な記録媒体に記録してシステムあるいは装置に供給することができる。そのシステムあるいは装置のコンピュータ(またはCPUまたはMPU)は、記録媒体に格納されたプログラムコードを読み出し実行することによっても、本発明の目的を達成することができる。従って、そのプログラムコードを記憶した記録媒体も本発明の技術的範囲に含まれる。   For example, the program code can be recorded on a computer-readable recording medium and supplied to the system or apparatus. The computer (or CPU or MPU) of the system or apparatus can also achieve the object of the present invention by reading and executing the program code stored in the recording medium. Therefore, the recording medium storing the program code is also included in the technical scope of the present invention.

プログラムコードを供給するための記録媒体としては、例えば、フレキシブルディスク、ハードディスク、光ディスク、光磁気ディスク、CD−ROM、CD−R、磁気テープ、不揮発性のメモリカード、ROM、DVDなどを用いることができる。   As a recording medium for supplying the program code, for example, a flexible disk, a hard disk, an optical disk, a magneto-optical disk, a CD-ROM, a CD-R, a magnetic tape, a nonvolatile memory card, a ROM, a DVD, or the like is used. it can.

なお、プログラムコードは、コンピュータが当該プログラムコードを読み出し実行することにより前述した実施形態の機能を実現するための、全ての要素を備えたものに限られない。即ち、プログラムコードには、コンピュータに組み込まれたソフトウェア及びハードウェアの少なくともいずれかと協働することにより目的を達成するプログラムコードも含まれる。   Note that the program code is not limited to the one having all the elements for realizing the functions of the above-described embodiments by the computer reading and executing the program code. That is, the program code includes a program code that achieves an object by cooperating with at least one of software and hardware incorporated in the computer.

例えば、プログラムコードの指示に基づき、コンピュータ上で稼動しているOSなどが実際の処理の一部または全部を行い、その処理によって前述した実施形態の機能が実現される場合も、そのプログラムコードは本発明の技術的範囲に含まれる。ただし、OSはオペレーティングシステム(Operating System)の略称である。   For example, even when the OS running on the computer performs part or all of the actual processing based on the instruction of the program code and the functions of the above-described embodiments are realized by the processing, the program code is It is included in the technical scope of the present invention. However, OS is an abbreviation for operating system.

あるいは、例えば、プログラムコードの指示に基づき、コンピュータに挿入又は接続された機能拡張ボードや機能拡張ユニットに備わるCPUなどが実際の処理の一部または全部を行い、その処理によって前述した実施形態の機能が実現される場合がある。このような場合も、そのプログラムコードは本発明の技術的範囲に含まれる。なお、機能拡張ボードや機能拡張ユニットは、それらが備えるメモリにプログラムコードを読み込み、実行することでこのような処理を行うことができる。   Alternatively, for example, based on an instruction of a program code, a function expansion board inserted or connected to a computer or a CPU provided in a function expansion unit performs part or all of the actual processing, and the function of the above-described embodiment is performed by the processing. May be realized. Even in such a case, the program code is included in the technical scope of the present invention. Note that the function expansion board and the function expansion unit can perform such processing by reading and executing the program code in the memory provided therein.

なお、上述した本実施の形態における記述は、本発明に係る好適な診断支援装置の一例であり、本発明はこれに限定されるものではない。   In addition, the description in this Embodiment mentioned above is an example of the suitable diagnosis assistance apparatus which concerns on this invention, and this invention is not limited to this.

Claims (14)

眼部の眼底像を取得する眼底像取得手段と、
前記眼底像から前記眼部の眼底の視神経乳頭の位置を自動的に検出する検出手段と、
前記位置に基づいて自動的に前記視神経乳頭付近の領域を円形に走査する方法を用いて前記視神経乳頭付近の領域の前記眼底の断層像を取得する断層像取得手段と、
前記眼底像と前記断層像とを表示部に表示させ、更に前記断層像の取得に用いた走査方法と前記走査方法に対して設定された前記走査の詳細度とを前記表示部に表示させるとともに、前記表示部に表示された前記眼底像上に前記断層像の取得位置に対応する位置を示す表示を前記表示部に表示させる表示制御手段と、
を有することを特徴とする眼科装置。
Fundus image acquisition means for acquiring a fundus image of the eye part;
Detection means for automatically detecting the position of the optic disc on the fundus of the eye from the fundus image;
A tomographic image acquisition means for acquiring a tomographic image of the fundus of the region near the optic disc using a method of automatically scanning the region near the optic disc based on the position in a circle;
Wherein the fundus image is displayed on the display unit and a tomographic image, thereby further displaying the details of the set the scanning to the scanning method and the scanning method used in the acquisition of the tomographic image before Symbol display unit And display control means for displaying on the display unit a display indicating a position corresponding to the acquisition position of the tomographic image on the fundus image displayed on the display unit,
An ophthalmologic apparatus comprising:
眼部の眼底像から前記眼部の眼底の視神経乳頭に関する情報を自動的に検出する検出手段と、
前記情報に基づいて自動的に前記視神経乳頭付近の領域の前記眼底の断層像を視神経乳頭に対応する走査方法を用いて取得する断層像取得手段と、
前記眼底像と前記断層像とを表示部に表示させ、更に前記断層像の取得に用いた走査方法と前記走査方法に対して設定された前記走査の詳細度とを前記表示部に表示させるとともに、前記表示部に表示された前記眼底像上に前記断層像の取得位置に対応する位置を示す表示を前記表示部に表示させる表示制御手段と、
を有することを特徴とする眼科装置。
Detection means for automatically detecting information relating to the optic nerve head of the fundus of the eye from the fundus image of the eye;
A tomographic image acquisition means for automatically acquiring a tomographic image of the fundus in an area near the optic disc based on the information using a scanning method corresponding to the optic disc;
Wherein the fundus image is displayed on the display unit and a tomographic image, thereby further displaying the details of the set the scanning to the scanning method and the scanning method used in the acquisition of the tomographic image before Symbol display unit And display control means for displaying on the display unit a display indicating a position corresponding to the acquisition position of the tomographic image on the fundus image displayed on the display unit,
An ophthalmologic apparatus comprising:
前記走査方法は前記視神経乳頭付近の領域を円形に走査する方法であることを特徴とする請求項2に記載の眼科装置。   The ophthalmologic apparatus according to claim 2, wherein the scanning method is a method of scanning a region in the vicinity of the optic disc in a circle. 前記検出手段は前記眼底像から前記視神経乳頭の位置を検出し、
前記断層像取得手段は前記位置に基づいて前記視神経乳頭付近の領域の前記眼底の断層像を取得することを特徴とする請求項2または請求項3に記載の眼科装置。
The detection means detects the position of the optic disc from the fundus image,
4. The ophthalmologic apparatus according to claim 2, wherein the tomographic image acquisition unit acquires a tomographic image of the fundus in a region near the optic disc based on the position.
眼部の眼底像を取得する眼底カメラと、
前記眼底像から前記眼部の眼底の視神経乳頭の位置を自動的に検出する検出手段と、
前記位置に基づいて自動的に前記視神経乳頭付近の領域を円形に走査する方法を用いて前記視神経乳頭付近の領域の前記眼底の断層像を取得するOCT装置と、
前記眼底像と前記断層像とを表示部に表示させ、更に前記断層像の取得に用いた走査方法と前記走査方法に対して設定された前記走査の詳細度とを前記表示部に表示させるとともに、前記表示部に表示された前記眼底像上に前記断層像の取得位置に対応する位置を示す表示を前記表示部に表示させる表示制御手段と、
を有することを特徴とする眼科システム。
A fundus camera that acquires a fundus image of the eye,
Detection means for automatically detecting the position of the optic disc on the fundus of the eye from the fundus image;
An OCT apparatus that obtains a tomographic image of the fundus of the region near the optic disc using a method of automatically scanning the region near the optic disc based on the position in a circle;
Wherein the fundus image is displayed on the display unit and a tomographic image, thereby further displaying the details of the set the scanning to the scanning method and the scanning method used in the acquisition of the tomographic image before Symbol display unit And display control means for displaying on the display unit a display indicating a position corresponding to the acquisition position of the tomographic image on the fundus image displayed on the display unit,
An ophthalmic system characterized by comprising:
眼部の眼底像から前記眼部の眼底の視神経乳頭に関する情報を自動的に検出する検出手段と、
前記情報に基づいて自動的に前記視神経乳頭付近の領域の前記眼底の断層像を視神経乳頭に対応する走査方法を用いて取得する断層像取得手段と、
前記眼底像と前記断層像とを表示部に表示させ、更に前記断層像の取得に用いた走査方法と前記走査方法に対して設定された前記走査の詳細度とを前記表示部に表示させるとともに、前記表示部に表示された前記眼底像上に前記断層像の取得位置に対応する位置を示す表示を前記表示部に表示させる表示制御手段と、
を有することを特徴とする眼科システム。
Detection means for automatically detecting information relating to the optic nerve head of the fundus of the eye from the fundus image of the eye;
A tomographic image acquisition means for automatically acquiring a tomographic image of the fundus in an area near the optic disc based on the information using a scanning method corresponding to the optic disc;
Wherein the fundus image is displayed on the display unit and a tomographic image, thereby further displaying the details of the set the scanning to the scanning method and the scanning method used in the acquisition of the tomographic image before Symbol display unit And display control means for displaying on the display unit a display indicating a position corresponding to the acquisition position of the tomographic image on the fundus image displayed on the display unit,
An ophthalmic system characterized by comprising:
前記走査方法は前記視神経乳頭付近の領域を円形に走査する方法であることを特徴とする請求項6に記載の眼科システム。   The ophthalmologic system according to claim 6, wherein the scanning method is a method of scanning a region in the vicinity of the optic disc circularly. 前記検出手段は前記眼底像から前記視神経乳頭の位置を検出し、
前記断層像取得手段は前記位置に基づいて前記視神経乳頭付近の領域の前記眼底の断層像を取得することを特徴とする請求項6または請求項7に記載の眼科システム。
The detection means detects the position of the optic disc from the fundus image,
The ophthalmologic system according to claim 6 or 7, wherein the tomographic image acquisition unit acquires a tomographic image of the fundus in a region near the optic disc based on the position.
前記眼底像を取得する眼底カメラを有し、
前記断層像取得手段はOCT装置であることを特徴とする請求項6乃至8のいずれか1項に記載の眼科システム。
A fundus camera for acquiring the fundus image;
The ophthalmic system according to claim 6, wherein the tomographic image acquisition unit is an OCT apparatus.
前記眼底像を取得するSLO装置を有し、
前記断層像取得手段はOCT装置であることを特徴とする請求項6乃至8のいずれか1項に記載の眼科システム。
An SLO device for acquiring the fundus image,
The ophthalmic system according to claim 6, wherein the tomographic image acquisition unit is an OCT apparatus.
断層像取得装置における断層像取得方法であって、
眼底像取得手段が、眼部の眼底像を取得する眼底像取得工程と、
検出手段が、前記眼底像から前記眼部の眼底の視神経乳頭の位置を自動的に検出する検出工程と、
断層像取得手段が、前記位置に基づいて自動的に前記視神経乳頭付近の領域を円形に走査する方法を用いて前記視神経乳頭付近の領域の前記眼底の断層像を取得する断層像取得工程と、
表示制御手段が、前記眼底像と前記断層像とを表示部に表示させ、更に前記断層像の取得に用いた走査方法と前記走査方法に対して設定された前記走査の詳細度とを前記表示部に表示させるとともに、前記表示部に表示された前記眼底像上に前記断層像の取得位置に対応する位置を示す表示を前記表示部に表示させる表示制御工程と、
を有することを特徴とする断層像取得方法。
A tomographic image acquisition method in a tomographic image acquisition apparatus,
A fundus image acquisition step in which the fundus image acquisition means acquires a fundus image of the eye;
A detecting step of automatically detecting the position of the optic disc on the fundus of the eye part from the fundus image;
A tomographic image acquisition means for acquiring a tomographic image of the fundus of the region near the optic nerve head using a method in which the tomographic image acquisition means automatically scans the region near the optic nerve head in a circle based on the position;
Display control means, said a fundus image is displayed on the display unit and a tomographic image, further the level of detail set the scanning to the scanning method and the scanning method used for acquiring a tomographic image and the previous SL A display control step of causing the display unit to display a display indicating a position corresponding to the acquisition position of the tomographic image on the fundus image displayed on the display unit,
A tomographic image acquisition method characterized by comprising:
眼部の眼底像を取得する眼底像取得工程と、
前記眼底像から前記眼部の眼底の視神経乳頭の位置を自動的に検出する検出工程と、
前記位置に基づいて自動的に前記視神経乳頭付近の領域を円形に走査する方法を用いて前記視神経乳頭付近の領域の前記眼底の断層像を取得する断層像取得工程と、
前記眼底像と前記断層像とを表示部に表示させ、更に前記断層像の取得に用いた走査方法と前記走査方法に対して設定された前記走査の詳細度とを前記表示部に表示させるとともに、前記表示部に表示された前記眼底像上に前記断層像の取得位置に対応する位置を示す表示を前記表示部に表示させる表示制御工程と、
をコンピュータに実行させることを特徴とするプログラム。
A fundus image acquisition step of acquiring a fundus image of the eye part;
A detection step of automatically detecting the position of the optic disc on the fundus of the eye from the fundus image;
A tomographic image acquisition step of acquiring a tomographic image of the fundus of the region near the optic disc using a method of automatically scanning the region near the optic disc based on the position in a circle;
Wherein the fundus image is displayed on the display unit and a tomographic image, thereby further displaying the details of the set the scanning to the scanning method and the scanning method used in the acquisition of the tomographic image before Symbol display unit And a display control step for causing the display unit to display a display indicating a position corresponding to the acquisition position of the tomographic image on the fundus image displayed on the display unit,
A program that causes a computer to execute.
眼部の眼底像から前記眼部の眼底の視神経乳頭の位置を自動的に検出する検出手段と、
前記位置に基づいて自動的に前記視神経乳頭付近の領域を円形に走査する方法を用いて前記視神経乳頭付近の領域の前記眼底の断層像を取得するようにOCT装置を制御する制御手段と、
前記眼底像と前記断層像とを表示部に表示させ、更に前記断層像の取得に用いた走査方法と前記走査方法に対して設定された前記走査の詳細度とを前記表示部に表示させるとともに、前記表示部に表示された前記眼底像上に前記断層像の取得位置に対応する位置を示す表示を前記表示部に表示させる表示制御手段と、
を有することを特徴とする眼科用処理装置。
Detecting means for automatically detecting the position of the optic disc on the fundus of the eye from the fundus image of the eye;
And control means for controlling the OCT apparatus to acquire the fundus tomographic image of a region near the optic disc using a method of scanning automatically region of the near the optic disc in a circular on the basis of the position,
Wherein the fundus image is displayed on the display unit and a tomographic image, thereby further displaying the details of the set the scanning to the scanning method and the scanning method used in the acquisition of the tomographic image before Symbol display unit And display control means for displaying on the display unit a display indicating a position corresponding to the acquisition position of the tomographic image on the fundus image displayed on the display unit,
An ophthalmic processing apparatus comprising:
眼部の眼底像から前記眼部の眼底の視神経乳頭の位置を自動的に検出する検出工程と、
前記位置に基づいて自動的に前記視神経乳頭付近の領域を円形に走査する方法を用いて前記視神経乳頭付近の領域の前記眼底の断層像を取得するようにOCT装置を制御する制御工程と、
前記眼底像と前記断層像とを表示部に表示させ、更に前記断層像の取得に用いた走査方法と前記走査方法に対して設定された前記走査の詳細度とを前記表示部に表示させるとともに、前記表示部に表示された前記眼底像上に前記断層像の取得位置に対応する位置を示す表示を前記表示部に表示させる表示制御工程と、
をコンピュータに実行させることを特徴とするプログラム。
A detection step of automatically detecting the position of the optic disc on the fundus of the eye from the fundus image of the eye;
And a control step of controlling the OCT apparatus to acquire a tomographic image of the fundus of the region in the vicinity of the optic papilla using a method for automatically scanning an area of the vicinity of the optic papilla in a circle on the basis of the position,
Wherein the fundus image is displayed on the display unit and a tomographic image, thereby further displaying the details of the set the scanning to the scanning method and the scanning method used in the acquisition of the tomographic image before Symbol display unit And a display control step for causing the display unit to display a display indicating a position corresponding to the acquisition position of the tomographic image on the fundus image displayed on the display unit,
A program that causes a computer to execute.
JP2011193272A 2011-09-05 2011-09-05 Ophthalmic system, ophthalmic apparatus, tomographic image acquisition method, and program Expired - Fee Related JP5474011B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2011193272A JP5474011B2 (en) 2011-09-05 2011-09-05 Ophthalmic system, ophthalmic apparatus, tomographic image acquisition method, and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2011193272A JP5474011B2 (en) 2011-09-05 2011-09-05 Ophthalmic system, ophthalmic apparatus, tomographic image acquisition method, and program

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2008198623A Division JP4819851B2 (en) 2008-07-31 2008-07-31 Diagnosis support apparatus and method, program, and recording medium

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2013249619A Division JP5714083B2 (en) 2013-12-02 2013-12-02 Ophthalmic apparatus, ophthalmic processing apparatus, ophthalmic system, tomographic image acquisition method, ophthalmic processing method, and program

Publications (2)

Publication Number Publication Date
JP2011245346A JP2011245346A (en) 2011-12-08
JP5474011B2 true JP5474011B2 (en) 2014-04-16

Family

ID=45411271

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2011193272A Expired - Fee Related JP5474011B2 (en) 2011-09-05 2011-09-05 Ophthalmic system, ophthalmic apparatus, tomographic image acquisition method, and program

Country Status (1)

Country Link
JP (1) JP5474011B2 (en)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6084315B2 (en) * 2012-02-28 2017-02-22 株式会社トプコン Fundus observation device
JP6158535B2 (en) * 2013-02-28 2017-07-05 国立大学法人大阪大学 Fundus analyzer
JP2016101298A (en) * 2014-11-28 2016-06-02 株式会社トプコン Ophthalmological photographing apparatus
JP2016179004A (en) * 2015-03-24 2016-10-13 株式会社トプコン Slit lamp microscope and control method thereof

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4501007B2 (en) * 2004-08-26 2010-07-14 国立大学法人名古屋大学 Optical coherence tomography device
JP4819478B2 (en) * 2005-10-31 2011-11-24 株式会社ニデック Ophthalmic imaging equipment
EP1976424B1 (en) * 2006-01-19 2011-09-21 Optovue, Inc. A method of eye examination by optical coherence tomography
JP4864515B2 (en) * 2006-04-07 2012-02-01 株式会社トプコン Fundus observation device
JP4822969B2 (en) * 2006-07-27 2011-11-24 株式会社ニデック Ophthalmic imaging equipment
JP5007114B2 (en) * 2006-12-22 2012-08-22 株式会社トプコン Fundus observation apparatus, fundus image display apparatus, and program
JP4971872B2 (en) * 2007-05-23 2012-07-11 株式会社トプコン Fundus observation apparatus and program for controlling the same
JP5340636B2 (en) * 2008-05-19 2013-11-13 株式会社トプコン Fundus observation device
JP5324839B2 (en) * 2008-06-19 2013-10-23 株式会社トプコン Optical image measuring device

Also Published As

Publication number Publication date
JP2011245346A (en) 2011-12-08

Similar Documents

Publication Publication Date Title
JP4819851B2 (en) Diagnosis support apparatus and method, program, and recording medium
JP4466968B2 (en) Image processing apparatus, image processing method, program, and program storage medium
US10098542B2 (en) Fundus observation apparatus
US10674909B2 (en) Ophthalmic analysis apparatus and ophthalmic analysis method
JP5208145B2 (en) Tomographic imaging apparatus, tomographic imaging method, program, and program storage medium
JP2012196439A (en) Image photographing apparatus and image photographing method
JP2012030054A (en) Ophthalmologic apparatus, ophthalmologic system, and storage medium
EP2727517B1 (en) Ophthalmologic photographing apparatus and ophthalmologic photographing method
JP6281177B2 (en) Ophthalmic imaging equipment
JP2013255533A (en) Ophthalmologic photographing apparatus and ophthalmologic image processor
JP5474011B2 (en) Ophthalmic system, ophthalmic apparatus, tomographic image acquisition method, and program
US20170228521A1 (en) Report driven workflow for ophthalmic image data acquisition
JP5714083B2 (en) Ophthalmic apparatus, ophthalmic processing apparatus, ophthalmic system, tomographic image acquisition method, ophthalmic processing method, and program
JP6307141B2 (en) Ophthalmic apparatus, ophthalmic system, ophthalmic apparatus control method and program
JP6735886B2 (en) Ophthalmic device, ophthalmic system, ophthalmic device control method, and program
JP6041920B2 (en) Ophthalmic system, control device, display control method, and program
JP6568614B2 (en) Ophthalmic apparatus, ophthalmic system, ophthalmic apparatus control method and program
JP6753052B2 (en) OCT data processing device and OCT data processing program
JP2017086183A (en) Oct data processing device, and oct data processing program
JP2019103763A (en) Oct data analysis device, and oct data analysis program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20110928

A871 Explanation of circumstances concerning accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A871

Effective date: 20110928

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20111024

A975 Report on accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A971005

Effective date: 20111027

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20111107

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120105

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20120316

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120515

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20120730

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20121029

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20121105

A912 Re-examination (zenchi) completed and case transferred to appeal board

Free format text: JAPANESE INTERMEDIATE CODE: A912

Effective date: 20121130

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20131202

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20140204

R151 Written notification of patent or utility model registration

Ref document number: 5474011

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

LAPS Cancellation because of no payment of annual fees