JP5924955B2 - 画像処理装置、画像処理装置の制御方法、眼科装置およびプログラム - Google Patents

画像処理装置、画像処理装置の制御方法、眼科装置およびプログラム Download PDF

Info

Publication number
JP5924955B2
JP5924955B2 JP2012015930A JP2012015930A JP5924955B2 JP 5924955 B2 JP5924955 B2 JP 5924955B2 JP 2012015930 A JP2012015930 A JP 2012015930A JP 2012015930 A JP2012015930 A JP 2012015930A JP 5924955 B2 JP5924955 B2 JP 5924955B2
Authority
JP
Japan
Prior art keywords
coordinate system
image processing
processing apparatus
image
eye
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2012015930A
Other languages
English (en)
Other versions
JP2013153879A (ja
Inventor
好彦 岩瀬
好彦 岩瀬
新畠 弘之
弘之 新畠
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Priority to JP2012015930A priority Critical patent/JP5924955B2/ja
Priority to US13/743,375 priority patent/US8870377B2/en
Publication of JP2013153879A publication Critical patent/JP2013153879A/ja
Application granted granted Critical
Publication of JP5924955B2 publication Critical patent/JP5924955B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B3/00Apparatus for testing the eyes; Instruments for examining the eyes
    • A61B3/10Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
    • A61B3/102Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for optical coherence tomography [OCT]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/70Determining position or orientation of objects or cameras
    • G06T7/73Determining position or orientation of objects or cameras using feature-based methods
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10072Tomographic images
    • G06T2207/10101Optical tomography; Optical coherence tomography [OCT]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30004Biomedical image processing
    • G06T2207/30041Eye; Retina; Ophthalmic

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Ophthalmology & Optometry (AREA)
  • Molecular Biology (AREA)
  • Biophysics (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Radiology & Medical Imaging (AREA)
  • Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • General Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • Eye Examination Apparatus (AREA)

Description

本発明は、画像処理装置、画像処理装置の制御方法、眼科装置、眼科装置の制御方法、眼科システムおよびプログラムに関する。
光干渉断層計(OCT;Optical Coherence Tomography)などの被検眼の眼部の断層画像撮影装置は、網膜層内部の状態を三次元的に観察することが可能である。この断層画像撮影装置は、疾病の診断をより的確に行うのに有用であることから近年注目を集めている。OCTの一つの形態として、例えば、広帯域な光源とマイケルソン干渉計とを組み合わせたTD−OCT(Time domain OCT)が知られている。これは、参照アームの遅延を走査することで、信号アームの後方散乱光との干渉光を計測し、深さ分解の情報を得るように構成されている。しかし、このようなTD−OCTでは高速な画像取得は難しい。そのため、より高速に画像を取得するため、広帯域光源を用い、分光器でインターフェログラムを取得するOCTとして、SD−OCT(Spectral domain OCT)が知られている。また、光源として、高速波長掃引光源を用いることで、単一チャネル光検出器でスペクトル干渉を計測する手法によるSS−OCT(Swept Source OCT)が知られている。
これらのOCTにより撮影された断層画像において、網膜の形態変化を計測できれば、緑内障などの疾病の進行度や治療後の回復具合を定量的に診断することが可能となる。従来、OCTにより撮影を行う場合、装置固有の座標系で撮影されるものであった。しかし、眼部においては、神経線維の走行を考慮した画像を得られることが望ましい。ここで図9は神経線維の走行を示した模式図である。図9において、細い曲線Nは神経線維、中心付近のMは黄斑部、楕円のDは視神経乳頭部、太い曲線Vは血管を示している。
特許文献1では、神経線維の走行に沿った断層画像を作成する技術が開示されている。特許文献1では、装置固有の座標系で撮影した3次元のOCTデータから操作者が指定した神経線維の走行に合わせた断面を断層画像として作成したり、撮影時に神経線維層の走行に沿って撮影を行ったりしている。
特開2010−125291号公報
病気の診断を行うためには、診断の対象となる神経線維の上下側や耳鼻側が一つの断面に写っていることが望ましい。しかしながら、特許文献1は、神経線維走行に対して垂直、水平となるような断層画像の撮影を保障するものではない。例えば、篩状板では、上下方向で孔が大きくなっているため、上下方向に形状の変化が現れやすい。そのため、個人毎の眼部の座標系に合わせて撮影を行わないと、診断や解析を行う際に有効な画像を取得し難いという課題がある。
上記の課題に鑑み、本発明は、眼部の形状を解析するのに適した撮影位置での断層画像の撮影を可能にすることを目的とする。
上記の目的を達成する本発明に係る画像処理装置は、
被検眼の眼底画像における前記被検眼の視神経乳頭部及び黄斑部の位置を検出する検出手段と、
前記検出された置に基づいて、前記検出された位置を通る線に交差し且つ前記視神経乳頭部を通る少なくとも一つの位置を、記視神経乳頭の断層画像の撮影位置として決定する撮影位置決定手段と、
を備えることを特徴とする。
本発明によれば、眼部の形状を解析するのに適した撮影位置での断層画像の撮影が可能になる。
第1実施形態に係る眼科システムの構成を示す図。 第1実施形態に係る画像処理装置における処理の流れを示すフローチャート。 第1実施形態に係る撮影表示画面の一例を示す図。 第1実施形態に係る観察表示画面の一例を示す図。 第1実施形態に係る網膜の視神経乳頭部の断層画像の模式図。 第2実施形態に係る眼科システムの構成を示す図。 第2実施形態に係る画像処理装置における処理の流れを示すフローチャート。 第2実施形態に係る撮影表示画面の一例を示す図。 神経線維の走行を示す眼底画像の模式図。
(第1実施形態)
第1実施形態に係る画像処理装置を備える眼科システムは、視神経乳頭部と黄斑部とを検出し、これらの部位の位置に基づいて撮影座標系決定を行って断層画像を得ることを特徴としている。
以下、本実施形態に係る画像処理装置を備える眼科システムについて、詳細を説明する。図1は、本実施形態に係る画像処理装置110を備える眼科システム100の構成を示す。図1に示すように、眼科システム100は、画像処理装置110と、断層画像撮影装置200と、表示部300と、眼底画像撮影装置400と、データベース500とを備えており、画像処理装置110は、インタフェースを介して断層画像撮影装置200、表示部300、眼底画像撮影装置400およびデータベース500と接続されている。なお、断層画像撮影装置200と、眼底画像撮影装置400とは1つの眼科装置として構成されてもよく、単独で眼科装置として構成されてもよい。また、断層画像撮影装置200と、画像処理装置110とが、1つの眼科装置として構成されてもよい。
断層画像撮影装置200は、眼部の断層画像を撮影する。断層画像撮影装置200は、例えばSD−OCTやSS−OCTである。断層画像撮影装置200は、ガルバノミラー201と、駆動制御部202と、パラメータ設定部203とを備える。なお、断層画像撮影装置200は既知の装置であるため、詳細な説明は省略し、ここでは、画像処理装置110からの指示により設定される、走査線のパラメータの設定機能について主に説明を行う。
ガルバノミラー201は、測定光の眼底における走査を行い、OCTによる眼底の撮影範囲を規定する。駆動制御部202は、ガルバノミラー201の駆動範囲および速度を制御し、眼底における平面方向の撮影範囲及び走査線数(平面方向の走査速度)を規定する。ここでは、簡単のためガルバノミラーは一つのミラーとして示したが、実際にはXスキャン用のミラーとYスキャン用の2枚のミラーとにより構成され、眼底上の所望の範囲を測定光で走査できる。
パラメータ設定部203は、駆動制御部202によるガルバノミラー201の動作制御に用いられる各種パラメータを設定する。パラメータ設定部203により設定されるパラメータにより、断層画像撮影装置200による断層画像の撮影における撮影条件が決定される。具体的には、画像処理装置110からの指示により設定される走査線の走査位置、走査線数、撮影枚数などが決定される。
表示部300は、撮影された断層画像や、眼底画像を表示する。眼底画像撮影装置400は、眼部の眼底画像を撮影する装置であり、当該装置としては、例えば、眼底カメラやSLO等が挙げられる。
画像処理装置110は、画像取得部111と、記憶部112と、第一の画像処理部113と、決定部114と、表示制御部115と、第二の画像処理部116とを備える。
画像取得部111は、断層画像撮影装置200により撮影された断層画像を取得する断層画像取得部として機能し、また眼底画像撮影装置400により撮影された眼底画像を取得する眼底画像取得部として機能する。そして取得した画像を記憶部112に格納する。第一の画像処理部113は、記憶部112で記憶している眼底画像から視神経乳頭部と黄斑部とを検出する。また決定部114は、第一の画像処理部113で検出した結果に基づいて基準座標系を決定し(座標系決定)、当該基準座標系に基づいて断層画像の取得位置決定を行い、撮影パラメータとして断層画像撮影装置200のパラメータ設定部203へ出力する。表示制御部115は、表示部300を制御し、各種画像を表示させる。第二の画像処理部116は、記憶部112で記憶している断層画像から網膜層の各領域の形状の抽出を行い、網膜層の厚みや、篩状板形状の解析を行う。
次に、図2、図3を参照して、本実施形態の画像処理装置110の処理手順を示す。図2は、第1実施形態における処理の流れを示すフローチャートである。図3は、第1実施形態における表示部300が表示する撮影時の表示画面の一例を示している。図3において、断層画像撮影画面310は、断層画像301、眼底画像302、撮影座標系設定のコンボボックス303、撮影指示ボタン304を有する。撮影領域305は、眼底画像302上に重畳表示した領域である。座標軸306は、個人差に関係なく一律に設定する座標軸である。そして、Mは黄斑部、Dは視神経乳頭部、Vは血管である。
なお、撮影モードが複数存在し、目的に合った撮影を行うためのモードを選択することにより所望の撮影が開始される。例えば本実施形態では、ユーザ操作等により、被検眼の篩状板領域を含む断層画像を取得する撮影モードの選択を受け付ける。被検眼の篩状板領域を含む断層画像を取得する撮影モードを受け付けた場合に、本実施形態の処理が開始する。
<ステップS201>
ステップS201において、不図示の被検眼情報取得部は、被験眼を同定する情報として被験者識別番号を外部から取得する。そして、被験者識別番号に基づいて、データベース500が保持している当該被検眼に関する情報(患者の氏名、年齢、性別など)を取得して記憶部112に記憶する。
<ステップS202>
ステップS202において、画像取得部111は、図3の断層画像撮影画面310に表示するためのプレビュー用の画像、ならびにステップS205での部位検出に用いる画像取得用の処理を行う。具体的には、画像取得部111は、眼底画像撮影装置400から眼底画像を取得し、断層画像撮影装置200から断層画像を取得する。眼底画像には黄斑部Mと視神経乳頭部Dとが含まれる。
<ステップS203>
ステップS203において、表示制御部115は、撮影座標系設定用のコンボボックス303に対するユーザ操作を受け付けることにより、撮影座標系の選択受付を行う。撮影座標系設定用のコンボボックス303により、網膜基準座標系または装置座標系を撮影座標系として選択して設定することができる。ここで、網膜基準座標系とは黄斑Mと視神経乳頭部Dとを結ぶ線を基準として構成する座標系とする。そして、装置座標系が設定された場合(S203;YES)、ステップS204へ進む。一方、網膜基準座標系が設定された場合(S203;NO)、ステップS205へ進む。
<ステップS204>
ステップS204において、決定部114は、予め定められた装置座標系を設定する。具体的には、決定部114は、装置座標系が選択されたことを示す情報と、装置座標系を基準として決定された取得位置を示す情報とを、断層画像撮影装置200のパラメータ設定部203に設定する。取得位置を示す情報は、撮影範囲および撮影方向を含む。装置座標系は被検眼に対して撮影を行う場合、水平方向を軸X、垂直方向を軸Yとしたものであり、図3の座標軸306に示されるように、個人差に関係なく一律に設定する座標軸である。それに対して、網膜基準座標系は、眼部の解剖学的特徴に基づいて設定する座標系であり、個人差や撮影時の状況に応じて設定する座標軸である。次に、ステップS205とステップS206とを参照して、網膜基準座標系を設定する場合について説明を行う。
<ステップS205>
ステップS205において、第一の画像処理部113は、眼底画像から黄斑部Mの位置と視神経乳頭部Dの位置とを検出する。まず、視神経乳頭部Dを検出する例を示す。眼底画像中では、視神経乳頭部Dの画素値は高い(明るい)ことが知られている。色分布を調べ、画像中の明るい領域(視神経乳頭部)の中心を視神経乳頭部の中心とする。あるいは、視神経乳頭部には血管が集中しているので、眼底画像中から血管を検出し、その情報を用いて視神経乳頭部を検出してもよい。血管の検出方法として、例えば、血管は細い線状構造を有しているため、線状構造を強調するフィルタを用いて血管を抽出する。線状構造を強調するフィルタとしては、線分を構造要素としたときに構造要素内での画像濃度値の平均値と構造要素を囲む局所領域内での平均値との差を計算するフィルタを利用する。ただし、これに限らずSobelフィルタのような差分フィルタを用いてもよい。また、濃度値画像の画素ごとにヘッセ行列の固有値を計算し、結果として得られる2つの固有値の組み合わせから線分状の領域を抽出してもよい。さらには、単純に線分を構造要素とするトップハット演算でもよい。これらの方法で検出した血管位置と、視神経乳頭部の明るい領域とを組み合わせて、視神経乳頭部の中心を検出する。
次に、黄斑部M中心の中心窩を検出する例を示す。眼底画像中では、黄斑部Mの画素値は低い(暗い)ことが知られている。そのため、眼底画像の色分布を調べ、画像中の暗い領域(黄斑部)の中心は黄斑部M中心の中心窩とする。ただし、血管も黄斑部と同じ色分布になる場合があるが、上述したように、血管は細い線状構造を有しているため、線状構造と円形構造とは区別できる。また、視神経乳頭部Dの位置と、血管の枝状構造の解剖学的特徴とを用いることで、黄斑部のおおよその領域を推定することができる。従って、これらの情報を用いることで、黄斑部検出の誤検出を減らすことができる。
<ステップS206>
ステップS206において、決定部114は、第一の画像処理部113が検出した黄斑部M中心の中心窩と視神経乳頭部Dとを結んだ直線に基づいて、眼底画像中の網膜基準座標系を決定する。図3に示されるように、網膜基準座標系の原点を視神経乳頭部Dの中心として、第1の軸は、視神経乳頭部Dの中心と黄斑部Mの中心とを結んだ破線(AxisX’)として求められる。網膜基準座標系の第2の軸は、原点でAxisX’と交差または直交する破線(AxisY’)とする。すなわち、網膜基準座標系は、多くの場合において装置座標系に対して角度θ回転した座標系となる。断層画像の取得位置を示す撮影領域305は、この座標軸に基づいた軸を基準に決定部114により決定される。例えば、所定の幅で軸上を一定距離だけ走査した領域を撮影領域305としてもよい。なお、網膜基準座標系の座標軸を基準として、ユーザ操作により撮影領域305の位置が決定されてもよい。そして、決定部114は、網膜基準座標系の回転角度θを示す情報と、取得位置を示す情報とを、撮影パラメータとして、断層画像撮影装置200のパラメータ設定部203へ出力して設定する。なお、本実施形態においては視神経乳頭部Dの中心を原点とした座標系の説明を行ったが、原点はこれに限るものではない。例えば、黄斑部Mの中心を原点とした座標系としてもよい。この場合においても、原点の位置が異なるだけであり、座標系の回転角度θは同一であるため、本発明を適用可能である。
<ステップS207>
ステップS207において、断層画像撮影装置200は、パラメータ設定部203に設定されている撮影パラメータに基づき、駆動制御部202を制御することで、ガルバノミラー201の撮影領域を設定し、断層画像の撮影を行う。ガルバノミラー201は、水平方向用のXスキャナと垂直方向用のYスキャナとにより構成される。そのため、これらのスキャナの向きをそれぞれ変更すると、装置座標系における水平方向(X)、垂直方向(Y)それぞれの方向に走査することができる。そして、これらのスキャナの向きを同時に変更させることで、水平方向と垂直方向とを合成した方向に走査することができるため、眼底平面上の任意の方向に走査することが可能となる。したがって、網膜基準座標系が選択されており、装置座標系に対して回転角度θが設定されている場合、駆動制御部202は、その角度θに合わせてXスキャナとYスキャナを制御する。
<ステップS208>
ステップS208において、第二の画像処理部116は、記憶部112に記憶している断層画像から網膜層の抽出と解析を行う。まず、図5(a)を参照して、視神経乳頭部の場合の網膜層の各領域の境界の抽出について説明する。図5(a)は、網膜基準座標系で撮影した場合の垂直方向の断層画像501を示している。図5(a)は、視神経乳頭部の断層画像を示している。L1は内境界膜(ILM)、L2は神経線維層(NFL)、L3は神経節細胞層(GCL)、L4はブルッフ膜オープニング(BMO)、L5は網膜色素上皮層(RPE)、L6は篩状板(LC)、L7は脈絡膜(Choroid)を表す。第二の画像処理部116は、L1〜L7の各領域の境界を抽出する。
まず、第二の画像処理部116は、断層画像501に対して、メディアンフィルタとSobelフィルタをそれぞれ適用して画像を生成する(生成された画像をそれぞれ、メディアン画像、Sobel画像と称する)。次に、生成したメディアン画像とSobel画像とから、A−scan毎にプロファイルを生成する。メディアン画像では輝度値のプロファイル、Sobel画像では勾配のプロファイルが生成される。そして、Sobel画像から生成したプロファイル内のピークを抽出する。抽出したピークの前後やピーク間に対応するメディアン画像のプロファイルを参照することにより、網膜層の各領域の境界を抽出する。そして、抽出した層境界から厚みの解析を行う。例えば、ILM・L1と、NFL・L2/GCL・L3との境界を抽出したとする。この場合、NFL・L2の厚みを計算することとなる。層の厚みは、AxisY’Z平面上の各AxisY’座標において、内境界膜L1のZ座標と、NFL・L2/GCL・L3境界のZ座標との差を求めることで計算できる。さらに、厚みだけではなく、層の面積や体積を求めても良い。NFL・L2の面積は、1枚の断層画像においてX軸の各座標点での層厚を加算することによって計算できる。また、NFL・L2の体積は、求めた面積をY軸方向に加算することで計算できる。ここでは、NFL・L2の計算を例に説明したが、他の層や網膜層全体の厚み、面積、体積も同様にして求めることができる。
次に、図5(b)を参照して、篩状板形状の抽出と解析について説明を行う。第二の画像処理部116は、篩状板領域を抽出するために、図5(b)の断層画像501からBMO・L4の抽出を行う。BMO・L4の抽出は、例えば、ステップS208で抽出されたILM・L1とRPE・L5とを用いて、視神経乳頭の陥凹部を特定することにより行う。本実施形態では、まず、視神経乳頭陥凹部の中心付近を特定する。ここで、視神経乳頭陥凹部の特徴として、RPE・L5が存在しないこと、ILM・L1の形状が深部方向(図5のZ方向)に大きな勾配をもつことが挙げられる。そこで、各A−scanとその周辺A−scanを含めた局所領域を設定し、その局所領域内のRPE・L5の存在状況と、ILM・L1の深部方向への勾配を算出し、視神経乳頭陥凹部の中心付近の点を特定する。次に、各断層画像において視神経乳頭陥凹部中心付近に近いRPE・L5の点を、全ての断層画像において繋ぐことで、C−scan方向で見た場合に楕円形状となるRPE領域を設定する。それを初期位置としてSnakesやLevelSetのような動的輪郭モデルを適用することで、各断層画像においてBMO・L4を特定する。次に、先ほど特定したBMO端からエッジ成分を視神経乳頭陥凹部の中心に向かってトレースすることで、BMO端の正確な位置を特定する。本実施形態では、まず各BMO端について、座標値とエッジ成分を調べる。次に、各BMO端の位置を開始点として、視神経乳頭陥凹部の中心に向かってエッジをトレースしていく。トレースは各BMO端の位置におけるエッジ成分を参照して、内側の近傍に存在するエッジ成分が一番近い位置に探索点を更新し、参照するエッジ成分も更新する。これを繰り返すことで、正確なBMO端を特定する。次に、1枚の断層画像(B−scan)において、2点のBMO・L4を抽出した個所において、BMO・L4を固定端とした篩状板境界を初期値として、SnakesやLevelSetのような動的輪郭モデルを実行することで、篩状板領域(図5のL6)を抽出する。動的輪郭モデルでは、さらに確率アトラスを用い、篩状板の空間的な存在確率を利用する事によって領域検出を行ってもよい。なお、ここでは自動で篩状板領域を抽出する場合の例を説明したが、不図示の操作部を用いて、操作者が自動抽出結果を修正しても良いし、マニュアルで篩状板領域を設定するようにしても良い。
そして、篩状板の形状解析として、BowingAngleで解析する場合について説明を行う。ここで、BowingAngleの解析方法について説明をする。まず2点のBMO・L4を直線で結び、その直線を4分割する。そして、その分割点から篩状板に対して垂線BA1、BA2、BA3を引く。BowingAngleとは、それら垂線の長さを用いて式(1)を計算することで求めることができるものである。式(1)において、BA1、BA2、BA3は、各垂線の長さ(距離)の数値が入る。そして、式(1)において、数値が大きい(プラス)ほど下に凸形状となり、数値が小さい(マイナス)ほどW形状となる。すなわち、BowingAngleとは、符号と数値から篩状板の形状を把握できる指標である。
Figure 0005924955
また、BowingAngleを数値ではなく、比で計算しても良い。その場合の計算式を式(2)に示す。式(2)において、BowingAngle比が1以上の場合下に凸形状となり、1より小さい場合W形状となる。
Figure 0005924955
<ステップS209>
ステップS209において、表示制御部115は、表示部300に断層画像を表示する。ここで図4は、表示部300に表示する表示画面の一例を示している。断層画像観察画面410は、断層画像401と、眼底画像402と、解析マップ404と、解析グラフ405とを備える。このように、解析結果を示す表示形態を、断層画像と共に表示させる。
断層画像401は、撮影した断層画像上に網膜層の各層を抽出したセグメンテーション結果(L1〜L6)を重畳表示した画像である。領域403は、断層画像の取得位置とその座標系を示す。解析マップ404は、第二の画像処理部116で断層画像を解析して得られたマップである。解析グラフ405は、第二の画像処理部116で断層画像を解析して得られたグラフである。そして、コンボボックス420は、眼底画像の種類を選択するためのボックスであり、コンボボックス430は、解析結果のマップの種類を選択するためのボックスである。
チェックボックス421〜423はそれぞれ、第一の画像処理部113で検出した視神経乳頭(Fovea)、黄斑部(Macula)、血管(Vessel)を表示する場合に用いるチェックボックスを示している。例えば、チェックボックス421〜423にチェックを入れると、視神経乳頭(Fovea)、黄斑部(Macula)、血管(Vessel)の位置を、眼底画像402に重畳表示することができる。なお、図4ではそれぞれの部位にチェックボックスが1つある場合を示しているが、チェックボックスは全体として1つとし、1つのチェックボックスを選択することで、チェックボックス421〜423に対する情報の表示、非表示を切り替えられるようにしてもよい。
<ステップS210>
ステップS210において、不図示の指示取得部は、眼科システム100による断層画像の撮影を終了するか否かの指示を外部から取得する。この指示は、不図示の操作部を用いて、操作者によって入力される。処理を終了する指示を取得した場合には(S210;YES)、眼科システム100はその処理を終了する。一方、処理を終了せずに、撮影を続ける場合には(S210:NO)、ステップS202に処理を戻して撮影を続行する。以上のようにして眼科システム100の処理が実行される。
以上説明したように、視神経乳頭部(第1の位置)と黄斑部(第2の位置)とに基づいた撮影座標系を決定して撮影することにより、眼部の形状を解析するのに適した座標系で撮影を行う画像処理装置を提供することができ、個人差に対応させた状態で神経線維走行に対して垂直や水平方向の撮影を行うことができる。また、眼部の特徴から、神経線維走行基準で撮影を行うことで、解析、あるいは診断を行う際に好適な位置で撮影した断層画像を得ることができる。
なお、本実施形態では視神経乳頭部、黄斑部を用いたが、必ずしもこれらに限定されず、位置が特定できるような特徴的な部位であれば他の部位を用いてもよい。また、上述のユーザ操作は、不図示のマウス等を操作してカーソルを移動して選択を行うことにより所望の処理を受け付けてもよいし、タッチパネルを介して処理を受け付けてもよい。
(第2実施形態)
第1実施形態では、装置座標系または網膜基準座標系を操作者が選択する場合を例として説明をした。これに対して第2実施形態では、経過観察時に以前の解析状況の結果に基づいて、画像処理装置が撮影座標系を決定する例について説明する。
図6は、第2実施形態に係る画像処理装置610を備える眼科システム600の構成を示す。図6に示すように、画像処理装置610は、画像取得部111と、記憶部612と、第一の画像処理部113と、決定部114と、表示制御部615と、第二の画像処理部116と、選択部617とを備える。選択部617は、前回の解析結果に基づいて撮影座標系の選択を行う。なお、第1実施形態と同様の機能を有する処理部に関しては、ここでは説明を省略する。
以下、図7、図8を参照して、第2実施形態の画像処理装置610の処理手順を示す。なお、ステップS701、ステップS703以外の各ステップは、第1実施形態と同様なので説明は省略する。
<ステップS701>
ステップS701において、不図示の被検眼情報取得部は、被験眼を同定する情報として被験者識別番号を外部から取得する。そして、被験者識別番号に基づいて、データベース500が保持している当該被検眼に関する情報(患者の氏名、年齢、性別など)を取得するとともに、過去に撮影記録がある場合は、被検眼の過去の断層撮影に関する情報(過去の解析結果等)を取得し、記憶部612に記憶する。
<ステップS703>
ステップS703において、選択部617は、過去の撮影記録と解析結果とに基づいて、撮影座標系を選択する。例えば、過去の解析結果から神経線維層の上下の対称性が失われている場合、表示制御部615は、図8の撮影座標系設定用のコンボボックス803に、網膜基準座標系を初期状態として設定する。あるいは、メッセージ表示ボックス807に、網膜基準座標系での撮影を促すメッセージを表示する。ここで、神経線維層の上下対称性の判定は、図8の眼底画像のY軸方向において、以前の撮影領域の中心を基準として、上下の神経線維層の厚みの比較を行い、その厚みの差異が閾値以上の場合、上下の対称性に異常があると判定することにより行う。
他の例として、選択部617は、篩状板形状解析結果として、水平方向と垂直方向においてのBowingAngleの計測結果を比較してその差異によって上下対称性の判定を行う。もしくは、垂直方向のBowingAngleの計測値と、複数の正常眼から作成したBowingAngleの正常データベースとを比較して、計測結果が閾値以上に正常データベースから外れている場合、図8の撮影座標系設定用のコンボボックス803に、網膜基準座標系を初期状態として設定する。あるいは、メッセージ表示ボックス807に、網膜基準座標系での撮影を促すメッセージを表示する。
さらに他の例として、被検眼情報取得部で取得した被検眼情報から、被検眼の診断結果として緑内障、あるいは緑内障疑いがある場合には、選択部617は、図8の撮影座標系設定のコンボボックス803に、網膜基準座標系を初期状態として設定する。あるいは、メッセージ表示ボックス807に、網膜基準座標系での撮影を促すメッセージを表示する。 以上説明したように、視神経乳頭部と黄斑部とに基づいた撮影座標系で撮影することを経過観察時に操作者に促すことにより、網膜基準の座標を設定して撮影する。それにより、神経線維走行に対して垂直や水平方向の撮影を行うことができるため、解析、あるいは診断を行う際に好適な位置で撮影した断層画像を得ることができる。
(その他の実施形態)
また、本発明は、以下の処理を実行することによっても実現される。即ち、上述した実施形態の機能を実現するソフトウェア(プログラム)を、ネットワーク又は各種記憶媒体を介してシステム或いは装置に供給し、そのシステム或いは装置のコンピュータ(またはCPUやMPU等)がプログラムを読み出して実行する処理である。

Claims (16)

  1. 被検眼の眼底画像における前記被検眼の視神経乳頭部及び黄斑部の位置を検出する検出手段と、
    前記検出された置に基づいて、前記検出された位置を通る線に交差し且つ前記視神経乳頭部を通る少なくとも一つの位置を、記視神経乳頭の断層画像の撮影位置として決定する撮影位置決定手段と、
    を備えることを特徴とする画像処理装置。
  2. 前記決定された撮影位置で撮影して得た断層画像において篩状板領域を抽出する抽出手段と、
    前記抽出された篩状板領域の形状を解析する解析手段と、
    前記解析手段による解析結果を示す表示形態を、前記撮影して得た断層画像と共に表示手段に表示させる表示制御手段と、
    をさらに備えることを特徴とする請求項1に記載の画像処理装置。
  3. 前記解析手段は、前記抽出された篩状板領域の形状を解析することにより、前記抽出された篩状板領域のブルッフ膜オープニングを用いて得た値を求め、
    前記表示制御手段は、前記求められた値を示す2次元マップ及びグラフの少なくとも一つを前記表示形態として、前記撮影して得た断層画像と共に前記表示手段に表示させることを特徴とする請求項2に記載の画像処理装置。
  4. 前記視神経乳頭部を原点とし、前記視神経乳頭部と前記黄斑部とを通る軸を第1の軸とし、前記第1の軸に直交する軸を第2の軸とする基準座標系を決定する座標系決定手段と、
    前記基準座標系を示す表示形態を前記眼底画像に重ねて表示手段に表示させる表示制御手段と、
    をさらに備えることを特徴とする請求項1乃至のいずれか1項に記載の画像処理装置。
  5. 前記検出された位置を通る第1の軸と、前記検出された前記視神経乳頭部の位置を原点とする前記第1の軸に直交する第2の軸とから成る基準座標系を決定する座標系決定手段をさらに備え、
    前記撮影位置決定手段は、前記検出された基準座標系に基づいて、前記撮影位置を決定することを特徴とする請求項1乃至3のいずれか1項に記載の画像処理装置。
  6. 被検眼の眼底画像における前記被検眼の視神経乳頭部及び黄斑部の位置を検出する検出手段と、
    前記検出された位置を通る第1の軸と、前記検出された前記視神経乳頭部の位置を原点とする前記第1の軸に直交する第2の軸とから成る基準座標系を決定する座標系決定手段と、
    前記検出された基準座標系に基づいて、前記被検眼の視神経乳頭部の断層画像の撮影位置を決定する撮影位置決定手段と、
    を備えることを特徴とする画像処理装置。
  7. 予め設定された装置座標系と、前記基準座標系との何れか一方の選択を受け付ける選択受付手段をさらに備え、
    前記撮影位置決定手段は、前記選択受付手段により前記装置座標系が選択された場合、当該装置座標系に基づいて前記撮影位置を決定することを特徴とする請求項4乃至6のいずれか1項に記載の画像処理装置。
  8. 前記被検眼の過去の断層撮影に関する情報を取得する被検眼情報取得手段と、
    前記情報に基づいて、予め設定された装置座標系と、前記基準座標系との何れか一方を選択する選択手段と、をさらに備え、
    前記撮影位置決定手段は、前記選択手段により前記装置座標系が選択された場合、当該装置座標系に基づいて前記撮影位置を決定することを特徴とする請求項4乃至6のいずれか1項に記載の画像処理装置。
  9. 被検眼の眼底画像における第1の位置及び第2の位置を検出する検出手段と、
    前記検出された位置に基づいて、前記検出された位置を通る線に交差する少なくとも一つの位置を、前記被検眼の断層画像の撮影位置として決定する撮影位置決定手段と、
    備えることを特徴とする画像処理装置。
  10. 眼底画像撮影装置と通信可能に接続され、前記眼底画像撮影装置により撮影して得た前記眼底画像を読み出す眼底画像取得部をさらに備えることを特徴とする請求項1乃至9のいずれか1項に記載の画像処理装置。
  11. 撮影モードの選択を受け付ける受付手段をさらに備え、
    前記眼底画像撮影装置は、前記受付手段が前記被検眼の篩状板領域を含む断層画像を撮影する撮影モードを受け付けた場合に、前記視神経乳頭部及び黄斑部を含む眼底画像を撮影することを特徴とする請求項10に記載の画像処理装置。
  12. 請求項1乃至11のいずれか1項に記載の画像処理装置と、
    前記被検眼の眼底において測定光を走査する走査手段と、
    前記決定された撮影位置で断層画像を撮影するように、前記走査手段を駆動制御する駆動制御部と、を備えることを特徴とする眼科装置。
  13. 検出手段と、撮影位置決定手段とを備える画像処理装置の制御方法であって、
    前記検出手段が、被検眼の眼底画像における前記被検眼の視神経乳頭部及び斑の位置を検出する検出工程と、
    前記撮影位置決定手段が、前記検出された置に基づいて、前記検出された位置を通る線に交差し且つ前記視神経乳頭部を通る少なくとも一つの位置を、記視神経乳頭の断層画像の撮影位置として決定する撮影位置決定工程と、
    を有することを特徴とする画像処理装置の制御方法。
  14. 検出手段と、座標系決定手段と、撮影位置決定手段とを備える画像処理装置の制御方法であって、
    前記検出手段が、被検眼の眼底画像における前記被検眼の視神経乳頭部及び黄斑部の位置を検出する検出工程と、
    前記座標系決定手段が、前記検出された位置を通る第1の軸と、前記検出された前記視神経乳頭部の位置を原点とする前記第1の軸に直交する第2の軸とから成る基準座標系を決定する座標系決定工程と、
    前記撮影位置決定手段が、前記検出された基準座標系に基づいて、前記被検眼の視神経乳頭部の断層画像の撮影位置を決定する撮影位置決定工程と、
    を有することを特徴とする画像処理装置の制御方法。
  15. 検出手段と、撮影位置決定手段とを備える画像処理装置の制御方法であって、
    前記検出手段が、被検眼の眼底画像における第1の位置及び第2の位置を検出する検出工程と、
    前記撮影位置決定手段が、前記検出された位置に基づいて、前記検出された位置を通る線に交差する少なくとも一つの位置を、前記被検眼の断層画像の撮影位置として決定する撮影位置決定工程と、
    を有することを特徴とする画像処理装置の制御方法。
  16. 請求項13乃至15のいずれか1項に記載の画像処理装置の制御方法の各工程をコンピュータに実行させるためのプログラム。
JP2012015930A 2012-01-27 2012-01-27 画像処理装置、画像処理装置の制御方法、眼科装置およびプログラム Expired - Fee Related JP5924955B2 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2012015930A JP5924955B2 (ja) 2012-01-27 2012-01-27 画像処理装置、画像処理装置の制御方法、眼科装置およびプログラム
US13/743,375 US8870377B2 (en) 2012-01-27 2013-01-17 Image processing apparatus, image processing apparatus control method, ophthalmologic apparatus, ophthalmologic apparatus control method, ophthalmologic system, and storage medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2012015930A JP5924955B2 (ja) 2012-01-27 2012-01-27 画像処理装置、画像処理装置の制御方法、眼科装置およびプログラム

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2016083123A Division JP6243957B2 (ja) 2016-04-18 2016-04-18 画像処理装置、眼科システム、画像処理装置の制御方法および画像処理プログラム

Publications (2)

Publication Number Publication Date
JP2013153879A JP2013153879A (ja) 2013-08-15
JP5924955B2 true JP5924955B2 (ja) 2016-05-25

Family

ID=48869933

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2012015930A Expired - Fee Related JP5924955B2 (ja) 2012-01-27 2012-01-27 画像処理装置、画像処理装置の制御方法、眼科装置およびプログラム

Country Status (2)

Country Link
US (1) US8870377B2 (ja)
JP (1) JP5924955B2 (ja)

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6226510B2 (ja) 2012-01-27 2017-11-08 キヤノン株式会社 画像処理システム、処理方法及びプログラム
JP2016002380A (ja) * 2014-06-18 2016-01-12 キヤノン株式会社 画像処理装置、その作動方法及びプログラム
JP6906898B2 (ja) * 2016-03-10 2021-07-21 キヤノン株式会社 眼科撮影装置
US9978140B2 (en) * 2016-04-26 2018-05-22 Optos Plc Retinal image processing
DE112019002021T5 (de) * 2018-04-18 2021-01-07 Nikon Corporation Bildverarbeitungsverfahren, Programm, Bildverarbeitungsvorrichtung und ophthalmologisches System
DE112019002024T5 (de) * 2018-04-18 2021-01-07 Nikon Corporation Bildverarbeitungsverfahren, Programm und Bildverarbeitungsvorrichtung
DE112019003022T5 (de) 2018-06-15 2021-03-18 Canon Kabushiki Kaisha Medizinische Bildverarbeitungsvorrichtung, medizinisches Bildverarbeitungsverfahren und Programm
JP7229881B2 (ja) 2018-08-14 2023-02-28 キヤノン株式会社 医用画像処理装置、学習済モデル、医用画像処理方法及びプログラム
JP7305401B2 (ja) 2018-09-06 2023-07-10 キヤノン株式会社 画像処理装置、画像処理装置の作動方法、及びプログラム
WO2020075345A1 (ja) 2018-10-10 2020-04-16 キヤノン株式会社 医用画像処理装置、医用画像処理方法及びプログラム
CN109612447B (zh) * 2018-12-29 2020-12-15 湖南璇玑信息科技有限公司 遥感影像地图数据的增强定位变换模型的构建方法、增强定位方法及增强定位服务器
JP2019111396A (ja) * 2019-03-22 2019-07-11 キヤノン株式会社 画像処理装置及び画像処理方法
JP7476693B2 (ja) * 2020-07-03 2024-05-01 株式会社ニデック 眼底撮影装置
CN117814742B (zh) * 2024-03-04 2024-06-07 广东唯仁医疗科技有限公司 基于多源图像的眼部成像智能实现方法及装置

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6244710B1 (en) * 1998-12-30 2001-06-12 Canon Kabushiki Kaisha Ophthalmogical photographing apparatus
JP2010125291A (ja) 2008-12-01 2010-06-10 Nidek Co Ltd 眼科撮影装置
US8137271B2 (en) * 2009-03-04 2012-03-20 Heidelberg Engineering Gmbh System and method for assessing risk of glaucoma onset
JP5627260B2 (ja) * 2009-05-22 2014-11-19 キヤノン株式会社 撮像装置および撮像方法
JP5432625B2 (ja) * 2009-07-29 2014-03-05 株式会社トプコン 眼科観察装置
JP5723093B2 (ja) * 2009-11-25 2015-05-27 キヤノン株式会社 画像処理装置、画像処理装置の制御方法及びプログラム
JP5783681B2 (ja) 2010-03-31 2015-09-24 キヤノン株式会社 撮像装置及び撮像方法
JP5297415B2 (ja) * 2010-04-30 2013-09-25 キヤノン株式会社 眼科装置及び眼科方法
JP5628636B2 (ja) 2010-11-09 2014-11-19 株式会社トプコン 眼底画像処理装置及び眼底観察装置

Also Published As

Publication number Publication date
US8870377B2 (en) 2014-10-28
US20130194543A1 (en) 2013-08-01
JP2013153879A (ja) 2013-08-15

Similar Documents

Publication Publication Date Title
JP5924955B2 (ja) 画像処理装置、画像処理装置の制御方法、眼科装置およびプログラム
US10872237B2 (en) Image processing system, processing method, and storage medium
US10660515B2 (en) Image display method of providing diagnosis information using three-dimensional tomographic data
JP6146952B2 (ja) 画像処理装置、画像処理方法及びプログラム。
US8699774B2 (en) Image processing apparatus, control method thereof, and program
JP5955163B2 (ja) 画像処理装置および画像処理方法
KR101373935B1 (ko) 안과 장치, 안과 장치의 제어 방법 및 컴퓨터 판독가능 저장 매체
JP4940069B2 (ja) 眼底観察装置、眼底画像処理装置及びプログラム
JP6105852B2 (ja) 画像処理装置及びその方法、プログラム
JP5932369B2 (ja) 画像処理システム、処理方法及びプログラム
EP2957219A1 (en) Image processing apparatus, image processing method, and program
JP6526145B2 (ja) 画像処理システム、処理方法及びプログラム
US9089280B2 (en) Image processing apparatus, image processing method, and program storage medium
US9307902B2 (en) Image processing device, image processing system, image processing method, and program
JP6748434B2 (ja) 画像処理装置、推定方法、システム及びプログラム
EP2779095B1 (en) Optic disc image segmentation method
JP6243957B2 (ja) 画像処理装置、眼科システム、画像処理装置の制御方法および画像処理プログラム
US10916012B2 (en) Image processing apparatus and image processing method
JP6526154B2 (ja) 画像処理装置、眼科システム、画像処理装置の制御方法及び画像処理プログラム
JP6033478B2 (ja) 眼科装置、層厚比較方法およびプログラム
JP5871890B2 (ja) 眼科装置、層厚比較方法およびプログラム
JP2019115827A (ja) 画像処理システム、処理方法及びプログラム
JP2013153880A (ja) 画像処理システム、処理方法及びプログラム
JP2020028786A (ja) 情報処理装置、情報処理方法およびプログラム
JP2017144047A (ja) 撮影装置及びその駆動方法、並びに、プログラム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20141114

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20150715

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20150831

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20151023

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20160322

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20160419

R151 Written notification of patent or utility model registration

Ref document number: 5924955

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

LAPS Cancellation because of no payment of annual fees