JP6202924B2 - 撮影装置及び撮影方法 - Google Patents

撮影装置及び撮影方法 Download PDF

Info

Publication number
JP6202924B2
JP6202924B2 JP2013159178A JP2013159178A JP6202924B2 JP 6202924 B2 JP6202924 B2 JP 6202924B2 JP 2013159178 A JP2013159178 A JP 2013159178A JP 2013159178 A JP2013159178 A JP 2013159178A JP 6202924 B2 JP6202924 B2 JP 6202924B2
Authority
JP
Japan
Prior art keywords
polarization
image
alignment
fundus
subject
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2013159178A
Other languages
English (en)
Other versions
JP2015029559A (ja
Inventor
好彦 岩瀬
好彦 岩瀬
佐藤 眞
眞 佐藤
牧平 朋之
朋之 牧平
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Priority to JP2013159178A priority Critical patent/JP6202924B2/ja
Priority to PCT/JP2014/070147 priority patent/WO2015016291A1/en
Priority to US14/909,054 priority patent/US9913581B2/en
Publication of JP2015029559A publication Critical patent/JP2015029559A/ja
Application granted granted Critical
Publication of JP6202924B2 publication Critical patent/JP6202924B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B3/00Apparatus for testing the eyes; Instruments for examining the eyes
    • A61B3/10Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
    • A61B3/12Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for looking at the eye fundus, e.g. ophthalmoscopes
    • A61B3/1225Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for looking at the eye fundus, e.g. ophthalmoscopes using coherent radiation
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01BMEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B9/00Measuring instruments characterised by the use of optical techniques
    • G01B9/02Interferometers
    • G01B9/02015Interferometers characterised by the beam path configuration
    • G01B9/02029Combination with non-interferometric systems, i.e. for measuring the object
    • G01B9/0203With imaging systems
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B3/00Apparatus for testing the eyes; Instruments for examining the eyes
    • A61B3/0016Operational features thereof
    • A61B3/0025Operational features thereof characterised by electronic signal processing, e.g. eye models
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B3/00Apparatus for testing the eyes; Instruments for examining the eyes
    • A61B3/0016Operational features thereof
    • A61B3/0041Operational features thereof characterised by display arrangements
    • A61B3/0058Operational features thereof characterised by display arrangements for multiple images
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B3/00Apparatus for testing the eyes; Instruments for examining the eyes
    • A61B3/10Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
    • A61B3/102Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for optical coherence tomography [OCT]
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B3/00Apparatus for testing the eyes; Instruments for examining the eyes
    • A61B3/10Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
    • A61B3/14Arrangements specially adapted for eye photography
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01BMEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B9/00Measuring instruments characterised by the use of optical techniques
    • G01B9/02Interferometers
    • G01B9/0209Low-coherence interferometers
    • G01B9/02091Tomographic interferometers, e.g. based on optical coherence
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0012Biomedical image inspection
    • G06T7/0014Biomedical image inspection using an image reference approach
    • G06T7/0016Biomedical image inspection using an image reference approach involving temporal comparison
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/48Other medical applications
    • A61B5/4842Monitoring progression or stage of a disease
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01BMEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B2290/00Aspects of interferometers not specifically covered by any group under G01B9/02
    • G01B2290/70Using polarization in the interferometer
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10072Tomographic images
    • G06T2207/10101Optical tomography; Optical coherence tomography [OCT]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30004Biomedical image processing
    • G06T2207/30041Eye; Retina; Ophthalmic

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Surgery (AREA)
  • Ophthalmology & Optometry (AREA)
  • Animal Behavior & Ethology (AREA)
  • Public Health (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Veterinary Medicine (AREA)
  • Molecular Biology (AREA)
  • Biophysics (AREA)
  • Radiology & Medical Imaging (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • General Physics & Mathematics (AREA)
  • Quality & Reliability (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Theoretical Computer Science (AREA)
  • Signal Processing (AREA)
  • Eye Examination Apparatus (AREA)
  • Investigating Or Analysing Materials By Optical Means (AREA)

Description

本発明は、被検体を撮影する撮影装置及び撮影方法に関する。
多波長光波干渉を利用した光コヒーレンストモグラフィ(Optical Coherence Tomography:以下、OCT)は、試料(特に眼底)の断層画像を高分解能に得ることができる。
近年、眼科用OCT装置において、眼底組織の形状をイメージングする通常のOCT画像に加えて、眼底組織の光学特性の一つである偏光パラメータ(リターデーションとオリエンテーション)を用いてイメージングする偏光OCT画像が取得されている。
偏光OCTは、偏光パラメータを利用して、偏光OCT画像を構成し、眼底組織の区別やセグメンテーションを行うことができる。偏光OCTは、試料を観察する測定光に円偏光に変調した光を用い、干渉光を2つの直交する直線偏光として分割して検出し、偏光OCT画像を生成することが、特許文献1に開示されている。
ここで、眼科用OCT装置において、検査時間の長時間化を回避して、作業の手間を軽減するために、過去に断層画像が形成されたときの信号光の走査位置を示す走査位置情報を記憶することが、特許文献2に開示されている。このとき、特許文献2には、被検眼の識別情報が入力されると、入力された識別情報に関連付けられた操作位置情報を検索して、検索された走査位置情報に基づいて信号光を走査することが開示されている。
WO2010/122118A1 特開2007−185244号公報
本発明の目的の一つは、偏光OCT画像を用いた経過観察において、過去の撮影位置と今回の撮影位置とを精度良く合わせることである。
本発明に係る撮影装置は、
経過観察撮影モードを含む複数の撮影モードのいずれかを選択する選択手段と、
異なる時刻に被検体を撮影されて得た複数の偏光断層画像を取得する断層画像取得手段と、
前記経過観察撮影モードが選択された場合に、前記複数の偏光断層画像に対応する前記被検体の複数の偏光平面画像に基づいて、前記複数の偏光断層画像の位置合わせを行う位置合わせ手段と、有する。
また、本発明に係る撮影方法は、
経過観察撮影モードを含む複数の撮影モードのいずれかを選択する工程と、
異なる時刻に被検体を撮影されて得た複数の偏光断層画像を取得する工程と、
前記経過観察撮影モードが選択された場合に、前記複数の偏光断層画像に対応する前記被検体の複数の偏光平面画像に基づいて、前記複数の偏光断層画像の位置合わせを行う工程と、有する。
本発明によれば、偏光OCT画像を用いた経過観察において、過去の撮影位置と今回の撮影位置とを精度良く合わせることができる。
第1の実施形態における画像処理装置の全体構成の概略図。 第1の実施形態における信号処理部190で生成される画像の例。 第1の実施形態における処理フロー。 第1の実施形態における画像処理装置の表示部の表示画面における表示例。 第1の実施形態における偏光成分の画像を説明するための図。 第1の実施形態における画像処理装置の表示部の表示画面における表示例。 第4の実施形態における画像処理装置の表示部の表示画面における表示例。
本発明に係る撮影装置は、被検眼、皮膚、内臓等の被検体に適用することができる。また、本発明に係る撮影装置としては、例えば、眼科装置や内視鏡等である。以下、本発明の一例として、本実施形態に係る眼科装置について、図面を用いて詳細に説明する。
[装置の全体構成]
図1は、本実施形態における画像処理装置の全体構成の概略図である。なお、後述する信号処理部190の少なくとも一部を「画像処理装置」とみなすことができ、また、この場合、「眼科装置」全体を「眼科システム」、あるいは「撮影装置」全体を「撮影システム」とみなすこともできる。
本装置は、偏光OCT(Polarization Sensitive OCT;以下、PS−OCT)100、偏光を利用した走査型検眼鏡(Polarization Sensitive Scanning Laser Ophothalmoscope:以下、PS−SLO)140、前眼部撮像部160、内部固視灯170、制御部200から構成される。
内部固視灯170を点灯して被検眼に注視させた状態で、前眼部観察部160により観察される被検体の前眼部の画像を用いて、装置のアライメントが行われる。アライメント完了後に、PS−OCT100とPS−SLO140による眼底の撮像が行われる。
<PS−OCT100の構成>
PS−OCT100の構成について説明する。まず、光源101は、低コヒーレント光源であるSLD光源(Super Luminescent Diode)であり、例えば、中心波長850nm、バンド幅50nmの光を出射する。光源101としてSLDを用いたが、ASE光源(Amplified Spontaneous Emission)等、低コヒーレント光が出射できる光源であれば何れでも良い。また、光源101から出射された光は、PM(Polarization Maintaining)ファイバ102、偏光コントローラ103を介して、偏光保持機能を有したファイバカップラ104に導かれ、測定光(OCT測定光とも言う)と参照光(OCT測定光に対応する参照光とも言う)に分岐される。また、偏光コントローラ103は、光源101から出射された光の偏光の状態を調整するものであり、直線偏光に調整される。ファイバカップラ104の分岐比は、90(参照光):10(測定光)である。分岐された測定光は、PMファイバ105を介してコリメータ106から平行光として出射される。出射された測定光は、眼底Erにおいて測定光を水平方向にスキャンするガルバノミラーから構成されるXスキャナ107、レンズ108、109、眼底Erにおいて測定光を垂直方向にスキャンするガルバノミラーから構成されるYスキャナ110を介し、ダイクロイックミラー111に到達する。Xスキャナ107、Yスキャナ110は、駆動制御部180により制御され、眼底Erの所望の範囲(断層画像の取得範囲、断層画像の取得位置、測定光の照射位置とも言う)で測定光を走査することができる。ダイクロイックミラー111は、800nm〜900nmの光を反射し、それ以外の光を透過する特性を有する。
また、ダイクロイックミラー111により反射された測定光は、レンズ112を介し、45°傾けて設置されたλ/4偏光板113(偏光調整部材の一例)を通過する事で位相が90°ずれ、円偏光の光に偏光制御される。なお、λ/4偏光板113の傾きは、例えば、偏光ビームスプリッタを内蔵したファイバカップラ123の偏光分割面の光軸からの傾きと対応した角度(配置状態の一例)が好ましい。
なお、λ/4偏光板113を光路に対して挿脱可能に構成されることが好ましい。例えば、光軸とは平行な軸を回転軸にしてλ/4偏光板113を回転する機械的な構成が考えられる。これにより、SLO光学系とPS−SLO光学系とを簡単に切り換え可能な小型な装置を実現することができる。また、OCT光学系とPS−OCT光学系とを簡単に切り換え可能な小型な装置を実現することができる。
ここで、被検眼に入射される光は、λ/4偏光板を45°傾けて設置することで円偏光の光に偏光制御されるが、被検眼の特性により眼底Erにおいて円偏光とならない場合がある。そのため、駆動制御部180の制御により、λ/4偏光板の傾きを微調整できるように構成されている。
円偏光に偏光制御された測定光は、ステージ116上に乗ったフォーカスレンズ114により、被検体である眼の前眼部Eaを介し、眼底Erの網膜層にフォーカスされる。眼底Erを照射した測定光は各網膜層で反射・散乱し、上述の光学経路をファイバカップラ104に戻る。
一方、ファイバカプラ104で分岐された参照光は、PMファイバ117を介してコリメータ118から平行光として出射される。出射された参照光は測定光と同様P偏光から22.5°S偏光へ傾けて設置されたλ/4偏光板119で偏光制御される。参照光は分散補償ガラス120介し、コヒーレンスゲートステージ121上のミラー122で反射され、ファイバカップラ104に戻る。参照光は、λ/4偏光板119を二度通過する事で直線偏光の光がファイバカップラ104に戻ることになる。また、コヒーレンスゲートステージ121は、被検者の眼軸長の相違等に対応する為、駆動制御部180で制御される。
ファイバカップラ104に戻った測定光と参照光は合波されて干渉光となり、偏光ビームスプリッタを内蔵したファイバカップラ123に入射され、異なる偏光方向の光(本実施形態では、P偏光の光とS偏光の光)に分岐比50:50で分割される。
P偏光の光は、PMファイバ124、コリメータ130を介し、グレーティング131により分光されレンズ132、ラインカメラ133で受光される。同様に、S偏光の光は、PMファイバ125、コリメータ126を介し、グレーティング127により分光されレンズ128、ラインカメラ129で受光される。なお、グレーティング127、131、ラインカメラ129、133は、各偏光の方向に合わせて配置されているのは言うまでもない。また、ラインカメラ129、133でそれぞれ受光した光は、光の強度に応じた電気信号として出力され、信号処理部190(断層画像生成部の一例)で受ける。
λ/4偏光板113は偏光ビームスプリッタを基準に傾きを調整しているが、眼底の視神経乳頭中心と黄斑中心を結んだ直線に対し傾きを調整しても良い。また、偏光基準として鉛直方向を基準にして偏光ビームスプリッタ、λ/4偏光板113、119を調整しても同様の効果が得られる。
<PS−SLO140の構成>
PS−SLO140の構成について説明する。まず、光源141は、半導体レーザであり、本実施形態では、例えば、中心波長780nmの光を出射する。光源141から出射された測定光(SLO測定光とも言う)は、PMファイバ142を介し、偏光コントローラ145で直線偏光になるよう偏光制御され、コリメータ143から平行光として出射される。出射された測定光は穴あきミラー144の穴あき部を通過し、レンズ155を介し、眼底Erにおいて測定光を水平方向にスキャンするガルバノミラーから構成されるXスキャナ146、レンズ147、148、眼底Erにおいて測定光を垂直方向にスキャンするガルバノミラーから構成されるYスキャナ149を介し、ダイクロイックミラー154に到達する。Xスキャナ146、Yスキャナ149は駆動制御部180により制御され、眼底上で所望の範囲を測定光で走査できる。ダイクロイックミラー154は、760nm〜800nmを反射し、それ以外の光を透過する特性を有する。また、ダイクロイックミラー154にて反射された直線偏光の測定光は、PS−OCT100と同様の光路を経由し、眼底Erに到達する。
眼底Erを照射した測定光は、眼底Erで反射・散乱され、上述の光学経路をたどり穴あきミラー144に達する。穴あきミラー144で反射された光が、レンズ150を介し、偏光ビームスプリッタ151にて異なる偏光方向の光(本実施形態では、P偏光の光とS偏光の光)に分割され、アバランシェフォトダイオード(以下、APD)152、153で受光され、電気信号に変換されて、信号処理部190(眼底画像生成部の一例)で受ける。
ここで、穴あきミラー144の位置は、被検眼の瞳孔位置と共役となっており、眼底Erに照射された測定光が反射・散乱された光のうち、瞳孔周辺部を通った光が、穴あきミラー144によって反射される。
本実施形態では、PS−OCT、PS−SLOともにPMファイバを用いたが、シングルモードファイバー(SMF)でも偏光コントローラを用い偏光を制御する事で同様の構成と効果が得られる。
<前眼部撮像部160>
前眼部撮像部160について説明する。
前眼部撮像部160は、波長1000nmの照明光を発するLED115−a、115−bから成る照明光源115により前眼部Eaを照射する。前眼部Eaで反射され光は、レンズ114、偏光板113、レンズ112、ダイクロイックミラー111、154を介し、ダイクロイックミラー161に達する。ダイクロイックミラー161は、980nm〜1100nmの光を反射し、それ以外の光を透過する特性を有する。ダイクロイックミラー161で反射された光は、レンズ162、163、164を介し、前眼部カメラ165で受光される。前眼部カメラ165で受光された光は、電気信号に変換され、信号処理部190で受ける。
<内部固視灯170>
内部固視灯170について説明する。
内部固視灯170は、内部固視灯用表示部171、レンズ172で構成される。内部固視灯用表示部171として複数の発光ダイオード(LD)がマトリックス状に配置されたものを用いる。発光ダイオードの点灯位置は、駆動制御部180の制御により撮像したい部位に合わせて変更される。内部固視灯用表示部171からの光は、レンズ172を介し、被検眼に導かれる。内部固視灯用表示部171から出射される光は520nmで、制御部180により所望のパターンが表示される。
<制御部200>
本装置全体を制御するための制御部200について説明する。制御部200は、駆動制御部180、信号処理部190、表示制御部191、表示部192、位置合わせ部195から構成される。駆動制御部180は、上述の通り各部を制御する。信号処理部190は、画像生成部193、画像解析部194から構成される。信号処理部190は、ラインカメラ129及び133、APD152及び153、前眼部カメラ165からそれぞれ出力される信号に基づき、画像の生成、生成された画像の解析、解析結果の可視化情報の生成を行う。なお、画像の生成、解析などの詳細については後述する。
表示制御部191は、眼底画像取得部(不図示)と断層画像取得部(不図示)により、断層画像生成部と眼底画像生成部とでそれぞれ生成された画像を取得した画像等を表示部192の表示画面に表示させる。ここで、表示部192は、例えば、液晶等のディスプレイである。なお、信号処理部190で生成された画像データは、表示制御部191に有線で送信されても良いし、無線で送信されても良い。この場合、表示制御部191を画像処理装置とみなすことができる。なお、撮影システムとして、眼底画像取得部がSLO光学系を含み、断層画像取得部がOCT光学系を含むように構成しても良い。なお、本明細書において、被検眼以外の被検体を含む場合、「眼底画像(眼底輝度画像)」を「平面画像(平面輝度画像)」と換言することができ、また、「眼底画像取得部」を「平面画像取得部」と換言することができる。
表示部192は、表示制御部191の制御の下、後述するように種々の情報を示す表示形態を表示する。なお、表示制御部191からの画像データは、表示部192に有線で送信されても良いし、無線で送信されても良い。また、表示部192等は、制御部200に含まれているが、本発明はこれに限らず、制御部200とは別に設けられても良い。また、表示制御部191と表示部192とを一体的に構成した、ユーザが持ち運び可能な装置(タブレット)でも良い。この場合、表示部にタッチパネル機能を搭載させ、タッチパネル上で画像の表示位置の移動、拡大縮小、表示される画像の変更等の操作可能に構成することが好ましい。
[画像処理]
次に、画像生成部193における画像生成について説明する。
<断層画像生成、及び、眼底画像生成>
画像生成部193は、ラインカメラ129、133から出力されたそれぞれの干渉信号に対して、一般的なSD−OCT(Spectral Domain OCT)に用いられる再構成処理を行うことで、各偏光成分に基づいた2つの断層画像(第一の偏光に対応する断層画像、第二の偏光に対応する断層画像とも言う)を生成する。
まず、画像生成部193は、干渉信号から固定パターンノイズ除去を行う。固定パターンノイズ除去は検出した複数のAスキャン信号を平均することで固定パターンノイズを抽出し、これを入力した干渉信号から減算することで行われる。
次に、画像生成部193は、干渉信号を波長から波数に変換し、フーリエ変換を行うことによって断層信号(偏光断層信号とも言う)を生成する。
以上の処理を2つの偏光成分の干渉信号に対して行うことにより、2つの断層画像が生成される。
また、画像生成部193は、APD152、153から出力された信号を、Xスキャナ146、Yスキャナ149の駆動に同期して整列させることにより、各偏光成分に基づいた2つの眼底画像(第一の偏光に対応する眼底画像、第二の偏光に対応する眼底画像とも言う)を生成する。
<輝度画像生成>
画像生成部193は、前述した2つの断層信号から輝度画像を生成する。
輝度画像は従来のOCTにおける断層画像と基本的に同じもので、その画素値rは各ラインセンサ129、133から得られた断層信号AおよびAから式1によって計算される。
また、同様に、2つの眼底画像から眼底輝度画像を生成する。
図2(a)に視神経乳頭部の輝度画像の例を示す。
<リターデーション画像生成>
画像生成部193は、互いに直行する偏光成分の断層画像からリターデーション画像を生成する。
リターデーション画像の各画素の値δは、断層画像を構成する各画素の位置において、垂直偏光成分と水平偏光成分の間の位相差を数値化したものであり、各断層信号AおよびAから式2によって計算される。
図2(b)は、このように生成された視神経乳頭部のリターデーション画像(偏光の位相差を示す断層画像とも言う)の例を示したものであり、各Bスキャン画像に対して式2を計算することによって得ることができる。図2(b)は、断層画像において位相差が生じる箇所をカラーで表示しており、濃淡の濃い場所は位相差が小さく、濃淡の淡い場所は位相差が大きいことを表している。そのため、リターデーション画像を生成することにより、複屈折性のある層を把握することが可能となる。
<リターデーションマップ生成>
画像生成部193は、複数のBスキャン像に対して得たリターデーション(Retardation)画像からリターデーションマップを生成する。
まず、画像生成部193は、各Bスキャン画像において、網膜色素上皮層(RPE層)を検出する。RPE層は偏光を解消する性質を持っているため、各Aスキャンを深度方向に沿って内境界膜(ILM)からRPEを含まない範囲でリターデーションの分布を調べ、その最大値を当該Aスキャンにおけるリターデーションの代表値とする。
画像生成部193は、以上の処理を全てのリターデーション画像に対して行うことにより、リターデーションマップを生成する。
図2(c)に視神経乳頭部のリターデーションマップの例を示す。図において、濃淡の濃い場所は位相差が小さく、濃淡の淡い場所は位相差が大きいことを表している。視神経乳頭部において、複屈折性を持つ層としては網膜神経線維層(RNFL層)であり、リターデーションマップは、RNFLの複屈折性とRNFLの厚みよって引き起こされる位相差を表している。そのため、RNFLが厚い個所では位相差が大きくなり、RNFLが薄い個所では位相差が小さくなる。したがって、リターデーションマップにより、眼底全体のRNFLの厚みを把握することが出来、緑内障の診断に用いることが出来る。
<複屈折マップ生成>
画像生成部193は、先に生成されたリターデーション画像の各Aスキャン画像において、ILMから網膜神経線維層(RNFL)の範囲でリターデーションδの値を線形近似し、その傾きを当該Aスキャン画像の網膜上の位置における複屈折として決定する。この処理を取得した全てのリターデーション画像に対して行うことで、複屈折を表すマップを生成する。
図2(d)に視神経乳頭部の複屈折マップの例を示す。複屈折マップは、複屈折の値を直接マップ化するため、RNFLの厚さが変化しない場合であっても、その繊維構造が変化した場合に、複屈折の変化として描出することができる。
<DOPU画像生成>
画像生成部193は、取得した断層信号AH、とそれらの間の位相差ΔΦから、画素毎にストークスベクトルSを式3により計算する。
ただし、ΔΦは2つの断層画像を計算する際に得られる各信号の位相ΦとΦからΔΦ=Φ−Φとして計算する。
次に画像生成部193は、各Bスキャン画像を概ね計測光の主走査方向に70μm、深度方向に18μm程度の大きさのウィンドウを設定し、各ウィンドウ内において数Cで画素毎に計算されたストークスベクトルの各要素を平均し、式4により当該ウィンドウ内の偏光の均一性DOPU(Degree Of Polarization Uniformity)を式4により計算する。
ただし、Q、U、Vは各ウィンドウ内のストークスベクトルの要素Q,U,Vを平均した値である。この処理をBスキャン画像内の全てのウィンドウに対して行うことで、図2(e)に示す視神経乳頭部のDOPU画像(偏光の均一度を示す断層画像とも言う)が生成される。
DOPUは偏光の均一性を表す数値であり、偏光が保たれている個所においては1に近い数値となり、偏光が解消された保たれない箇所においては1よりも小さい数値となるものである。網膜内の構造においては、RPEが偏光状態を解消する性質があるため、DOPU画像においてRPEに対応する部分は、他の領域に対してその値が小さくなる。図において、濃淡が淡い場所210がRPEを示しており、濃淡が濃い場所220が変更が保たれている網膜層領域を示している。DOPU画像は、RPE等の偏光を解消する層を画像化しているので、病気等によりRPEが変形している場合においても、輝度の変化よりも確実にRPEを画像化出来る。
なお、本明細書において、上述した第一及び第二の偏光に対応する断層画像、リターデーション画像、DOPU画像等を、偏光状態を示す断層画像や偏光断層画像とも言うことにする。また、本明細書において、上述したリターデーションマップや複屈折マップ等を、偏光状態を示す眼底画像や偏光眼底画像とも言うことにする。なお、被検眼以外の被検体を含む場合には、偏光眼底画像は、偏光平面画像とも言うことにする。
[処理動作]
次に、本実施形態に係る画像処理装置による処理動作について、図3と図4を用いて説明する。この処理は、経過観察において、異なる時刻に撮影した眼の断層画像、眼底画像を比較評価するための動作である。ここで、図3は、本実施形態に係る画像処理装置の処理動作を示すフローチャートである。また、図4は、本実施形態における表示部192に表示する撮影時の表示画面(ウィンドウ)400の一例を示している。図4において、400は断層画像撮影画面であり、表示領域410、420、430、440を有する。421は断層画像、411は眼底画像、413は撮影モードを選択するためのコンボボックス、414は撮影指示ボタン、415は位置合わせを手動で行うのか自動で行うのかを選択する位置合わせ選択ボタン、412は撮影領域を示すマークであり眼底画像411上に重畳表示されている。
<ステップS301:被検眼情報の取得>
ステップS301では、不図示の被検眼情報取得部は、被検眼を同定する情報として、被検眼の識別情報の一例である被検者識別番号を外部から取得する。そして、被検者識別番号に基づいて、不図示の記憶部が保持している当該被検眼に関する情報を取得する。ここで、被検眼に関する情報とは、氏名、性別、年齢、病歴などの個人情報と、眼底画像や断層画像などの画像データ、画像解析などの解析データを意味する。
<ステップS302:撮影モードの選択>
ステップS302において、撮影モードの選択を行う。撮影モードの選択は撮影モードを選択するためのコンボボックス413で行うものとして説明をする。なお、コンボボックス413は、テキストボックスに直接文字を入力する他に、テキストボックスの右端のボタンを押すと選択可能な項目の一覧が表示され、その中から一つを選べる機能を有している。コンボボックス413では、通常撮影モードあるいは経過観察撮影モード(Follow up)を選択することができる。なお、コンボボックス413は、これらの撮影モードの他の撮影モードを含む複数の撮影モードから一つを選択するように構成されても良い。本実施形態では、撮影モードとして経過観察撮影モード(Follow up)で撮影を行う場合について説明をする。
<ステップS303:位置合わせの基準画像の取得>
ステップS302において、経過観察撮影モードが選択されると、領域430に過去に撮影した同一被検者の画像データのサムネイル(431、432)を表示する。このとき、過去の画像データは、入力された被検者識別番号に基づいて、記憶部から検索されたデータである。操作者は、表示されたサムネイルのうちのいずれかを基準画像として選択すると、選択に応じて眼底画像441と断層画像443とが領域440に表示される。本実施形態においては、例えば、サムネイル431を選択した場合の例を示す。サムネイル431は、黄斑部を3D撮影したデータである。経過観察撮影モードで以前の撮影データを選択すると、領域440に眼底画像441と断層画像443を表示する。また、眼底画像441には、過去に撮影した撮影領域を示すマーク442が重畳表示されている。
<ステップS304:調整>
ステップS304において、被検眼を本装置に配置した状態で、本装置と被検眼のアライメントを行う。アライメントの説明に関して、本実施形態に特有な処理について説明し、ワーキングディスタンス等のXYZ方向のアライメント、フォーカス、コヒーレンスゲートの調整等は一般的であるのでその説明は省略する。ここでは、λ/4偏光板113の調整について説明する。
図4は、調整時に表示部192に表示されるウィンドウ400を示している。図4において、指示部422、423は、λ/4偏光板113の角度を調整するための表示であり、操作者が指示装置を用いて指示することにより、駆動制御部180の制御の下、λ/4偏光板113の角度が調整される。指示部422は反時計回りの調整を、指示部423は時計回りの調整を指示するための表示である。指示部422、423の横に表示されている数値は、現在のλ/4偏光板113の角度を表している。表示領域420には、P偏光とS偏光から生成された断層画像421が表示されている。
ここで、調整の順番は、前眼部画像(あるいは角膜輝点)を用いたアライメント調整、偏光眼底画像を用いたフォーカス調整、偏光断層画像を用いたコヒーレンスゲート調整、λ/4偏光板の調整の順番が好ましい。なお、偏光断層画像の取得位置の決定は、偏光断層画像を用いたコヒーレンスゲート調整前が好ましいが、偏光眼底画像の中心領域を取得するように初期設定画面において行うようにしても良い。これにより、偏光眼底画像よりも精細で狭い範囲を対象にする偏光断層画像を精度良く取得可能に簡単に調整することができる。このとき、コヒーレンスゲート調整の完了に応じてλ/4偏光板を自動的に調整しても良いし、偏光画像を取得するための信号の入力に応じてλ/4偏光板を自動的に調整しても良い。もちろん、眼科装置の起動時に初期設定画面等でλ/4偏光板を予め調整しておき、撮影毎に調整しないように構成しても良い。さらには、基準断層画像として選択した断層画像を撮影した時に調整したパラメータを用いるようにしてもよい。
これらの調整は、上記順番で全て自動的に調整しても良いし、表示部に表示された各調整に対応したスライダにカーソルを合わせてドラッグ操作等を行うようにしても良い。
<ステップS305:位置合わせ>
ステップS305では、経過観察において、ステップS303で選択した基準画像と同じ位置を撮影するために位置合わせを行う。本実施形態においては、位置合わせ選択ボタン415において、自動(Auto)が選択されている場合について説明を行う。位置合わせ部195は、ステップS303で選択した基準画像を撮影した際に作成した偏光成分マップ(例えば、リターデーションマップ)と、アライメント中の被検眼で作成した偏光成分マップとを用いて位置合わせを行う。ここで、図5を用いて位置合わせに偏光成分マップを用いる説明をする。
例えば、加齢に伴い眼の網膜にある黄斑部が変性を起こす疾患である加齢黄斑変性(Age−related Macular Degeneration:以下、AMD)や、網膜の静脈が詰まり血液が流れなくなる症状である網膜静脈分枝閉塞症(Branch Retinal Vein Occlusion:以下、BRVO)等の網膜の形状変化や出血などが生じるとRPE周辺に変形が生じ、SLO画像や断層画像から作成した積算画像の画像特徴に変化が生じる。これを図5に示す。図5(a)は、病変が存在しない場合の断層画像から作成した積算画像501で、図5(b)は、AMD503が存在する場合の断層画像から作成した積算画像502である。ここで、積算画像とは、断層画像において各Aスキャンを深度方向に積算して作成した輝度画像の事である。図5(a)、(b)に示すように病気が存在する場合としない場合で画像特徴に変化が生じる。一方、図5(c)は、病変が存在しない場合の断層画像から作成したリターデーションマップ511で、図5(d)は、AMD503が存在する場合の断層画像から作成したリターデーションマップ512である。図5(c)、(d)に示すように偏光成分マップには画像特徴に大きな変化は生じない。これは、積算画像やSLOのような輝度画像は、RPE周辺に生じた病気の変化を画像化するが、偏光成分を用いたリターデーションマップは、複屈折性をもつ層を画像化したものである。本実施形態においては、RNFLを画像化しているため、RPE周辺に生じる病気の影響が少ない。そのため、以前の眼底画像とアライメント中の被検眼との自動位置合わせに偏光成分を画像化したマップを用いて位置合わせを行う。
なお、断層輝度画像の積算画像を用いた位置合わせでは、出血や加齢黄斑変性(AMD)等の病気により積算画像に変化が生じると、画像特徴量が大きく変わってしまう。このため、前回撮影時の積算画像との位置合わせ精度が低下する可能性があるため、偏光断層画像の積算画像を用いた位置合わせが好ましい。
ここで、経過観察の位置合わせ方法としては、例えば、2つの画像(過去に取得した偏光眼底画像と新たに取得した偏光眼底画像)の類似度を表す評価関数を事前に定義しておき、この評価関数の値が最も良くなるように画像を変形(例えば、平行移動、回転、拡大、縮小)する。評価関数としては、輝度値で評価する方法が挙げられる(例えば、相関係数を用いて評価を行う方法が挙げられる)。また、画像の変形処理としては、アフィン変換を用いて並進や回転を行う処理が挙げられる。あるいは、画像の輝度値を用いるのではなく、位相特性の相関をとる位相限定相関法を用いて位置合わせを行ってもよい。
なお、緑内障のようにRNFLに変化をもたらす病気の場合、偏光成分マップはリターデーションマップではなく、DOPU画像から生成したDOPUマップを用いるようにしてもよい。
位置合わせ部195の位置合わせ結果に基づいて、駆動制御部180の制御の下、撮像範囲の決定が行われる。即ち、位置合わせ部195で算出した位置を撮影するように、駆動制御部180がスキャナの駆動角度を制御することにより撮像範囲を決定する。
<ステップS306:撮影>
図4において、表示領域410(第一の表示領域とも言う)には、PS−SLO140で撮像され、信号処理部190で生成された眼底画像(輝度眼底画像、2次元眼底画像とも言う)411が表示される。そして、眼底画像411上に、PS−OCT100の撮像範囲(取得範囲、取得位置とも言う)を示す実線の枠412と、位置合わせ済みの基準画像での撮像範囲を示す破線の枠442が重畳表示されている。そして、基準画像と撮影中の画像との位置合わせの一致度を示す指標416(例えば、カラーバーや数値)を表示する。なお、撮影前に自動位置合わせを行い続けるため、基準画像での撮影範囲442、位置合わせの一致度を示す指標416のいずれかが表示されていればよい。
操作者がマウス等の指示装置(不図示)を用いて、ウィンドウ400に表示されるカーソルで撮影指示ボタン414を指定し、クリック操作等により指示をすることにより、断層画像の撮影が行われる。例えば、操作者は指標416での一致率を参考にして、撮影指示ボタン414を指定する。本実施形態においては、自動位置合わせによる撮影指示について説明を行ったが、自動位置合わせがうまくいかない場合、自動位置合わせを途中で中止して、手動位置合わせによる撮影指示に変更をする事は可能である。
なお、本実施形態のマウスには、例えば、操作者の手によってマウス本体が2次元的に移動させたときの移動信号を検出するセンサと、操作者の手によって押圧されたことを検知するための左右2つのマウスボタンと、左右2つのマウスボタンの間に前後左右に回転可能なホイール機構と、が設けられている。また、指示装置は、表示部にタッチパネル機能を搭載させ、タッチパネル上で取得位置を指定しても良い。
撮影は、光源101、光源141からそれぞれ測定光を出射して、網膜Erからの戻り光を、ラインカメラ129、133、APD152、153で受光して、画像生成部193で、前述の通り各画像を生成する。
<ステップS307:画像解析>
網膜の各層の境界検出方法として、例えば、式4のDOPU計算で求めた位置から得た輝度値を層検出における閾値として利用する。例えば、健常眼において各層の境界を求める際に用いる閾値を予め入力あるいは選択する。そして、RPEと網膜層領域全体の平均輝度値も予め入力あるいは選択する。式4の計算で求めた位置から得たRPEの輝度値、網膜層領域全体の輝度値と、予め入力あるいは選択された平均輝度値とを比較し、輝度値の差が何%あるかに応じて、予め入力あるいは選択された閾値を調整する。例えば、図2(e)におけるRPE210と網膜層領域220に対応する輝度画像の輝度値が、予め入力あるいは選択された平均輝度値よりも10%低ければ、閾値を10%低くする。そして、画像解析部194は、処理の対象とする断層画像に対して、メディアンフィルタとSobelフィルタをそれぞれ適用して画像を作成する(以下、メディアン画像、Sobel画像とする)。次に、作成したメディアン画像とSobel画像から、Aスキャン毎にプロファイルを作成する。メディアン画像では輝度値のプロファイル、Sobel画像では勾配のプロファイルとなる。そして、Sobel画像から作成したプロファイル内のピークを検出する。検出したピークの前後やピーク間に対応するメディアン画像のプロファイルを参照し、先ほど求めた閾値と比較することで、網膜層の各領域の境界(例えば、内境界膜/ILM、神経節細胞層/GCL、内網状層/IPL、外境界膜/ELM、神経節内節外節接合部/ISOS等)を抽出する。
<ステップS308:表示>
次に、生成した各画像及び解析した結果の出力処理について説明する。信号処理部190内の画像生成部193と画像解析部194において、各画像の生成及び解析が終了すると、その結果に基づき、表示制御部191は、出力情報を生成し、表示部192に出力して表示を行う。画像解析部194は、位置合わせ部195による位置合わせ結果に基づいて、差分情報を生成する。
図6は、本実施形態における表示部192における表示例であり、経過観察撮影を行った場合の表示例である。図6において、400は表示部192に表示されるウィンドウであり、表示領域430、610を有する。表示領域430には、以前に撮影した同一被検者の撮影データのサムネイル(431、432)を表示し、基準として選択したサムネイルに選択状態435を表示する。表示領域610には、基準画像(Base)として選択した、眼底画像441、断層画像443、撮影領域442の範囲に写る眼底画像上にDOPU画像から作成したRPEの厚みを重畳表示した厚みマップ644を表示する。厚みマップ644において、領域645は、厚みが異常な領域(厚い、薄い、存在しない等の病変領域)を模式的に示している。網膜層の厚みが異常な領域とは、網膜層厚の正常データベースとの比較を行い、網膜層厚が正常の範囲外になる領域を意味する。基準画像の他に、比較画像(Comparison)として撮影を行った眼底画像611、断層画像613、マップ614を表示する。そして、これらの差分結果(Difference)をETDRS(Early Treatment Diabetic Retinopathy Study)差分グリッド615、差分マップ616として表示する。なお、ETDRS差分グリッド615は、差分マップ616における複数の領域のそれぞれの領域で、差分の値を平均した結果を表示したものである。ここで、グリッドとしては、例えば、所定の位置を中心に1mm、3mm、6mmの直径を有する同心円で、4つの方向に分割したものがある。
<ステップS309:終了するか否かの判断>
ステップS309では、経過観察撮影の終了の実行を選択する。経過観察撮影の終了、あるいは撮影モードの選択に処理を移行する際に、これまでの処理で求めた位置合わせ部195による位置合わせ結果、画像解析部194による解析結果を記憶部に保存する。なお、画像解析部194は、網膜層検出の結果だけではなく、網膜層の異常な領域(網膜層が厚い、薄い、存在しない等の病変領域)に関する情報、またその差分結果を記憶部に記憶する。
以上説明のように本実施形態によれば、偏光OCT画像での経過観察において、偏光眼底画像における偏光特有の成分を用いて、撮影時に位置合わせを行う。病気の影響を受けにくい箇所の偏光特有の成分を用いて位置合わせを行う事により、病気の影響を受けずに前回撮影した位置と同じ位置を比較する事が可能となる。本実施形態によれば、撮影指示を行う直前まで位置合わせを行うため、ほぼ前回と同じ位置を撮影する事が出来る。
なお、これらの画像を表示させる表示領域の位置は、本実施形態に限定されず、例えば、眼底画像を表示画面の左側の表示領域に表示させても良い。また、解析結果としてRPEの厚みマップを示したが、これに限らず、網膜層の全体厚マップでもよいし、RNFL厚マップでもよい。また、緑内障の場合は、リターデーションマップのように偏光成分を解析したマップを表示するようにしてもよい。
(第2の実施形態:撮影後に位置合わせ)
上記第1の実施形態は、経過観察において、撮影時に選択した基準画像の偏光断層画像と、アライメント中の画像で作成した偏光断層画像とを用いて位置合わせをした後に、撮影を行う。これに対して、第2の実施形態では、経過観察において、位置合わせと撮影とを行う順番を逆にする。すなわち、基準画像の偏光断層画像と撮影後の偏光断層画像との位置合わせを行う。
具体的には、図3におけるステップS305をステップS315に、S306をステップS316に置き換える。なお、他のステップについては、第1の実施形態と同じであるため、説明を省略する。
<ステップS315:撮影>
ステップS315では、経過観察用の基準画像を選択した後に、装置の各種撮影パラメータを調整した後に、手動で位置合わせをして撮影する。このとき、図4において、表示領域410(第一の表示領域とも言う)には、PS−SLO140で撮像され、信号処理部190で生成された眼底画像(輝度眼底画像、2次元眼底画像とも言う)411が表示される。そして、眼底画像411上に、PS−OCT100の撮像範囲(取得範囲、取得位置とも言う)を示す実線の枠412が重畳表示されている。本実施形態においては、位置合わせ選択ボタン415において、自動の代わりに、手動(Manual)が選択されている場合について説明を行う。
操作者は、ウィンドウ400に表示されている画像411、421、441、443等を見ながら不図示の操作装置(ジョイスティックやマウス)を用いて、撮影位置を決定する。そして、撮影指示ボタン414を指定し、クリック操作等により指示をすることにより、断層画像の撮影が行われる。
撮影は、光源101、光源141からそれぞれ測定光を出射して、網膜Erからの戻り光を、ラインカメラ129、133、APD152、153で受光して、画像生成部193で、前述の通り各画像を生成する。
<ステップS316:位置合わせ>
ステップS316では、経過観察において、ステップS303で選択した基準画像と同じ位置で網膜層の変化状態を比較するために位置合わせを行う。位置合わせ部195は、ステップS303で選択した基準画像で作成した偏光眼底画像(例えば、リターデーションマップ)と、ステップS315で撮影した画像で作成した偏光眼底画像とを用いて位置合わせを行う。なお、位置合わせ部195による位置合わせの方法に関しては、ステップS305で説明した方法と同じであるため、説明を省略する。
以上説明のように本実施形態によれば、偏光OCT画像での経過観察において、偏光眼底画像における偏光特有の成分を用いて、撮影後に位置合わせを行う。病気の影響を受けにくい箇所の偏光特有の成分を用いて位置合わせを行う事により、病気の影響を受けずに前回撮影した位置と同じ位置を比較する事が可能となる。本実施形態によれば、撮影後の画像を用いて位置合わせを行うため、撮影時には位置合わせを意識せずに撮影を行ったとしても、前回と同じ位置とほぼ同じ位置での経過変化を比較する事が出来る。
なお、過去の偏光断層画像を取得した際のガルバノミラーの走査位置を記憶部に記憶させて、撮影前に該走査位置を記憶部から検索して、検索された走査位置に基づいて今回の偏光断層画像を取得するようにしても良い。この場合、撮影時に被検眼の固視微動によって過去の撮影位置と今回の撮影位置とで位置ずれが生じても、ステップS306において精度良く位置合わせを行うことができる。
ここで、走査位置は、例えば、眼底の黄斑(固視標に対応する固視位置)を座標中心とする座標(x、y)を、過去の画像データと対応付けて記憶部に記憶させておく。また、走査位置は、例えば、ガルバノミラーの走査角度を、過去の画像データと対応付けて記憶部に記憶させておいても良い。
また、位置合わせした後に、位置合わせ結果を過去及び現在の偏光断層画像に反映させても良い。具体的には、過去の偏光断層画像に現在の偏光断層画像の取得位置を示す表示形態を表示させる。また、現在の偏光断層画像に過去の偏光断層画像の取得位置を示す表示形態を表示させる。なお、取得位置を示す表示形態は、例えば、取得位置の外枠である。
また、位置合わせされた過去及び現在の偏光断層画像の差分を示す画像を生成して表示手段に表示させても良い。
また、過去及び現在の偏光断層画像の位置合わせ結果を、過去及び現在の偏光断層画像に対応する過去及び現在の断層輝度画像に反映させても良い。このとき、例えば、過去及び現在の偏光断層画像の位置合わせ結果を反映された過去及び現在の偏光断層画像を並べて表示手段に表示させても良い。
(第3の実施形態:撮影前及び撮影後に位置合わせ)
上記第2の実施形態では、経過観察において、基準画像の偏光平面画像と、撮影後の偏光平面画像を用いて位置合わせをする。これに対して、第3の実施形態では、経過観察において、基準画像の偏光平面画像と、撮影前と撮影後との両方で偏光平面画像を用いて位置合わせをする。
具体的には、図3におけるステップS305をステップS325−1に、S306をステップS326に置き換え、また、ステップS326の後に、S325−2を追加する。なお、他のステップについては、第1の実施形態と同じであるため、説明を省略する。
<ステップS325−1:撮影前に位置合わせ>
ステップS325−1では、経過観察において、ステップS303で選択した基準画像と同じ位置を撮影するために位置合わせを行う。本実施形態においては、図4における位置合わせ選択ボタン415において、自動(Auto)が選択されている場合について説明を行う。位置合わせ部195は、ステップS303で選択した基準画像を撮影した際に作成した偏光眼底画像(例えば、リターデーションマップ)と、アライメント中の被検眼で作成した偏光眼底画像とを用いて位置合わせを行う。なお、位置合わせ部195による位置合わせの方法に関しては、ステップS305で説明した方法と同じであるため、説明を省略する。
<ステップS326:撮影>
ステップS326では、操作者が経過観察用の基準画像を選択し、位置合わせ部195による自動位置合わせの結果を見て撮影を行う。操作者がマウス等の指示装置(不図示)を用いて、ウィンドウ400に表示されるカーソルで撮影指示ボタン414を指定し、クリック操作等により指示をすることにより、断層画像の撮影が行われる。例えば、操作者は基準画像と撮影中の画像との位置合わせの一致度を示す指標416での一致率を参考にして、撮影指示ボタン414を指定する。
<ステップS325−2:撮影後にも位置合わせ>
ステップS325−2では、経過観察において、ステップS303で選択した基準画像と同じ位置で網膜層の変化状態を比較するために位置合わせを行う。なお、ステップS325−1において位置合わせを行って撮影をしているので、ここの処理は、実際に撮影指示を行ったタイミングでの位置合わせずれの補正を行う。位置合わせ部195は、ステップS903で選択した基準画像で作成した偏光眼底画像(例えば、リターデーションマップ)と、ステップS326で撮影した画像で作成した偏光眼底画像とを用いて位置合わせを行う。位置合わせ部195による位置合わせの方法に関しては、ステップS305で説明した方法と同じであるため、説明を省略する。
以上説明のように本実施形態によれば、偏光OCT画像での経過観察において、偏光眼底画像における偏光特有の成分を用いて、撮影前後に位置合わせを行う。病気の影響を受けにくい箇所の偏光特有の成分を用いて位置合わせを行う事により、病気の影響を受けずに前回撮影した位置と同じ位置を比較する事が可能となる。本実施形態によれば、撮影指示を行う直前まで位置合わせを行い、撮影指示時の位置ずれ補正のために、撮影後にも位置合わせを行う。そのため、前回と同じ位置とほぼ同じ位置での経過変化を比較する事が出来る。
(第4の実施形態:位置合わせ後の画像に病変に関する情報を重畳表示)
上記第1から3の実施形態は、経過観察において、基準画像の偏光平面画像と、撮影前の偏光平面画像と撮影後の偏光平面画像とのうち少なくとも一方との位置合わせを行う。これに対して、第4の実施形態は、位置合わせ後の画像に病変に関する情報を重畳表示する。これにより、病気の変化の経過観察をし易くすることができる。本実施形態について、図7を用いて説明する。ここで、図7は、第4の実施形態における画像処理装置の表示部の表示画面における表示例である。
破線1001と点線1002はそれぞれ、病変領域の輪郭を表している。破線1001は、基準画像のPS−OCT断層画像443から検出した病変領域645の輪郭で、記憶部から読み出して表示をする。点線1002は、撮影画像のPS−OCT断層画像613から検出した病変領域646の輪郭で、画像解析部194の解析結果から領域を検出する。これらの病変領域は、DOPU画像から作成したRPEの厚みにおいて、厚みが異常な領域(厚い、薄い、存在しない等の病変領域)を表している。なお、本実施形態においては、破線と点線で示したが、表示形態はこれに限らず、色や透過度、線の種類を変更するなど識別可能な形態であればよい。また、基準画像と撮影画像とのそれぞれの病変領域を重畳表示した例を示したが、これに限らず、例えば、差分領域を表示するようにしてもよい。差分領域を表示する場合には、病変領域が拡張したのか縮小したのかが分かるように表示する事が望ましい。例えば、拡張した場合は赤色で表示し、縮小した場合には青色で表示するなど、色によって変えてもよい。あるいは、拡張や縮小を表現するマークを表示するなどしてもよい。
以上説明のように本実施形態によれば、偏光OCT画像での経過観察において、過去の病変部と現在の病変部との差異を分かりやすく表示する事で、経過観察を行い易くする事ができる。
(その他の実施形態)
また、本発明は、以下の処理を実行することによっても実現される。即ち、上述した実施形態の機能を実現するソフトウェア(プログラム)を、ネットワーク又は各種記憶媒体を介してシステム或いは装置に供給し、そのシステム或いは装置のコンピュータ(またはCPUやMPU等)がプログラムを読み出して実行する処理である。

Claims (17)

  1. 経過観察撮影モードを含む複数の撮影モードのいずれかを選択する選択手段と、
    異なる時刻に被検体を撮影されて得た複数の偏光断層画像を取得する断層画像取得手段と、
    前記経過観察撮影モードが選択された場合に、前記複数の偏光断層画像に対応する前記被検体の複数の偏光平面画像に基づいて、前記複数の偏光断層画像の位置合わせを行う位置合わせ手段と、
    有することを特徴とする撮影装置。
  2. 前記被検体は、被検眼であり、
    前記複数の偏光平面画像は、前記被検眼の眼底の複数のリターデーションマップであり、
    前記位置合わせ手段が、前記複数の偏光断層画像における前記眼底のRPE層において経過に応じた変形がある場合、前記眼底のNFL層の前記複数のリターデーションマップを用いて位置合わせを行うことを特徴とする請求項1に記載の撮影装置。
  3. 前記被検体は、被検眼であり、
    前記複数の偏光平面画像は、前記被検眼の眼底の複数の複屈折マップであり、
    前記位置合わせ手段が、前記複数の偏光断層画像における前記眼底のRNFL層において経過に応じた変形がある場合、前記眼底のRPE層の前記複数の複屈折マップを用いて位置合わせを行うことを特徴とする請求項1に記載の撮影装置。
  4. 前記断層画像取得手段が、前記位置合わせ手段により前記位置合わせが行われた後に、前記位置合わせ手段の位置合わせ結果に基づいて、前記被検体の新たな偏光断層画像を取得することを特徴とする請求項1乃至3のいずれか1項に記載の撮影装置。
  5. 前記位置合わせされた複数の偏光断層画像に対応する複数の偏光平面画像を表示手段に表示させ、前記被検体における病変領域を示す表示形態を前記複数の偏光平面画像に重ねて表示させる表示制御手段を更に有することを特徴とする請求項1乃至4のいずれか1項に記載の撮影装置。
  6. 前記複数の偏光断層画像の差分を示す画像を生成する画像生成手段を更に有することを特徴とする請求項1乃至5のいずれか1項に記載の撮影装置。
  7. 前記複数の偏光断層画像から前記複数の偏光平面画像を生成する画像生成手段を更に有することを特徴とする請求項1乃至5のいずれか1項に記載の撮影装置。
  8. 前記断層画像取得手段が、測定光を照射した前記被検体からの戻り光と、該測定光に対応する参照光とを合波した光を分割して得た互いに異なる偏光の光に基づいて、前記複数の偏光断層画像を取得することを特徴とする請求項1乃至7のいずれか1項に記載の撮影装置。
  9. 経過観察撮影モードを含む複数の撮影モードのいずれかを選択する工程と、
    異なる時刻に被検体を撮影されて得た複数の偏光断層画像を取得する工程と、
    前記経過観察撮影モードが選択された場合に、前記複数の偏光断層画像に対応する前記被検体の複数の偏光平面画像に基づいて、前記複数の偏光断層画像の位置合わせを行う工程と、
    有することを特徴とする撮影方法。
  10. 前記被検体は、被検眼であり、
    前記複数の偏光平面画像は、前記被検眼の眼底の複数のリターデーションマップであり、
    前記位置合わせを行う工程において、前記複数の偏光断層画像における前記眼底のRPE層において経過に応じた変形がある場合、前記眼底のNFL層の前記複数のリターデーションマップを用いて位置合わせを行うことを特徴とする請求項9に記載の撮影方法。
  11. 前記被検体は、被検眼であり、
    前記複数の偏光平面画像は、前記被検眼の眼底の複数の複屈折マップであり、
    前記位置合わせを行う工程において、前記複数の偏光断層画像における前記眼底のRNFL層において経過に応じた変形がある場合、前記眼底のRPE層の前記複数の複屈折マップを用いて位置合わせを行うことを特徴とする請求項9に記載の撮影方法。
  12. 前記複数の偏光断層画像を取得する工程において、前記位置合わせが行われた後に、前記位置合わせを行う工程における位置合わせ結果に基づいて、前記被検体の新たな偏光断層画像を取得することを特徴とする請求項9乃至11のいずれか1項に記載の撮影方法。
  13. 前記位置合わせされた複数の偏光断層画像に対応する複数の偏光平面画像を表示手段に表示させ、前記被検体における病変領域を示す表示形態を前記複数の偏光平面画像に重ねて表示させる工程を更に有することを特徴とする請求項9乃至12のいずれか1項に記載の撮影方法。
  14. 請求項9乃至13のいずれか1項に記載の撮影方法の各工程をコンピュータに実行させることを特徴とするプログラム。
  15. 異なる時刻に撮影された被検体の複数の偏光断層画像を取得する断層画像取得手段と、
    前記複数の偏光断層画像に対応する前記被検体の複数の偏光平面画像に基づいて、前記複数の偏光断層画像の位置合わせを行う位置合わせ手段と、
    有することを特徴とする画像処理装置。
  16. 異なる時刻に撮影された被検体の複数の偏光断層画像を取得する工程と、
    前記複数の偏光断層画像に対応する前記被検体の複数の偏光平面画像に基づいて、前記複数の偏光断層画像の位置合わせを行う工程と、
    有することを特徴とする画像処理方法。
  17. 請求項16に記載の画像処理方法の各工程をコンピュータに実行させることを特徴とするプログラム。
JP2013159178A 2013-07-31 2013-07-31 撮影装置及び撮影方法 Expired - Fee Related JP6202924B2 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2013159178A JP6202924B2 (ja) 2013-07-31 2013-07-31 撮影装置及び撮影方法
PCT/JP2014/070147 WO2015016291A1 (en) 2013-07-31 2014-07-24 Photography apparatus and photography method
US14/909,054 US9913581B2 (en) 2013-07-31 2014-07-24 Photography apparatus and photography method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2013159178A JP6202924B2 (ja) 2013-07-31 2013-07-31 撮影装置及び撮影方法

Publications (2)

Publication Number Publication Date
JP2015029559A JP2015029559A (ja) 2015-02-16
JP6202924B2 true JP6202924B2 (ja) 2017-09-27

Family

ID=51453792

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2013159178A Expired - Fee Related JP6202924B2 (ja) 2013-07-31 2013-07-31 撮影装置及び撮影方法

Country Status (3)

Country Link
US (1) US9913581B2 (ja)
JP (1) JP6202924B2 (ja)
WO (1) WO2015016291A1 (ja)

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6694248B2 (ja) * 2015-07-30 2020-05-13 株式会社キーエンス 三次元画像検査装置、三次元画像検査方法及び三次元画像検査プログラム並びにコンピュータで読み取り可能な記録媒体
JP2017032360A (ja) * 2015-07-30 2017-02-09 株式会社キーエンス 画像検査装置、画像検査方法および画像検査プログラム
JP6632285B2 (ja) * 2015-09-17 2020-01-22 キヤノン株式会社 眼科撮影装置及びその制御方法、並びに、プログラム
JP6741025B2 (ja) * 2016-01-07 2020-08-19 株式会社ニデック Oct信号処理装置、およびoct信号処理プログラム
JP2018102757A (ja) * 2016-12-27 2018-07-05 株式会社ニデック 眼科解析装置、眼科oct、および、眼科解析プログラム
JP6827818B2 (ja) * 2017-01-13 2021-02-10 キヤノン株式会社 計測装置、情報処理装置、情報処理方法、およびプログラム
EP3606405A4 (en) * 2017-04-03 2021-01-06 Joshua Noel Hogan OPTICAL COHERENCE TOMOGRAPHY SYSTEM WITH HOME MONITORING
DE102017121085B3 (de) * 2017-09-12 2019-01-31 Carl Zeiss Meditec Ag Augenchirurgie-Visualisierungssystem
JP7126818B2 (ja) 2017-11-24 2022-08-29 株式会社トプコン 眼科情報処理装置、眼科システム、眼科情報処理装置の作動方法、及びプログラム
TWI749531B (zh) * 2020-04-22 2021-12-11 晉弘科技股份有限公司 掃描裝置以及光學同調斷層掃描系統
CN112185126B (zh) * 2020-09-27 2022-01-25 杭州海康威视数字技术股份有限公司 一种偏振角度的确定方法、装置及设备
US20240016380A1 (en) * 2020-12-11 2024-01-18 Eye Co Pty Ltd Method of detecting one or more change in an eye and disease indication or diagnosis

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4823693B2 (ja) 2006-01-11 2011-11-24 株式会社トプコン 光画像計測装置
JP4969925B2 (ja) * 2006-06-28 2012-07-04 株式会社トプコン 眼底観察装置
JP5149535B2 (ja) * 2007-04-27 2013-02-20 国立大学法人 筑波大学 偏光感受型光コヒーレンストモグラフィー装置、該装置の信号処理方法、及び該装置における表示方法
EP2243420A1 (en) 2009-04-24 2010-10-27 Schmidt-Erfurth, Ursula Method for determining exudates in the retina
JP5582772B2 (ja) * 2009-12-08 2014-09-03 キヤノン株式会社 画像処理装置及び画像処理方法
JP5610884B2 (ja) * 2010-07-09 2014-10-22 キヤノン株式会社 光断層撮像装置及び光断層撮像方法
JP5627321B2 (ja) * 2010-07-09 2014-11-19 キヤノン株式会社 光断層画像撮像装置及びその撮像方法
JP5639523B2 (ja) * 2011-03-31 2014-12-10 キヤノン株式会社 光干渉断層撮影装置、光干渉断層撮影装置の制御方法、プログラムおよび眼科システム
JP5787255B2 (ja) * 2011-07-12 2015-09-30 国立大学法人 筑波大学 Ps−octの計測データを補正するプログラム及び該プログラムを搭載したps−octシステム
JP5367047B2 (ja) * 2011-10-24 2013-12-11 株式会社トプコン 眼底観察装置

Also Published As

Publication number Publication date
US9913581B2 (en) 2018-03-13
WO2015016291A1 (en) 2015-02-05
JP2015029559A (ja) 2015-02-16
US20160183785A1 (en) 2016-06-30

Similar Documents

Publication Publication Date Title
JP6202924B2 (ja) 撮影装置及び撮影方法
JP5988772B2 (ja) 画像処理装置及び画像処理方法
JP6071331B2 (ja) 画像処理装置及び画像処理方法
JP6184232B2 (ja) 画像処理装置及び画像処理方法
JP6061554B2 (ja) 画像処理装置及び画像処理方法
JP6184231B2 (ja) 画像処理装置および画像処理方法
JP2016093240A (ja) 画像処理装置及び画像処理方法
JP6061555B2 (ja) 画像処理装置及び画像処理方法
JP2014110883A (ja) 画像処理装置及び画像処理方法
JP2014155694A (ja) 眼科装置及び眼科方法
JP2014110884A (ja) 画像処理装置及び画像処理方法
JP2017131550A (ja) 画像処理装置及び画像処理方法
JP2013146447A (ja) 撮影装置、画像処理方法、及びプログラム
JP2014083285A (ja) 画像処理装置及び画像処理方法
JP6146951B2 (ja) 画像処理装置、画像処理方法、撮影装置及び撮影方法
JP5988883B2 (ja) 画像処理装置及び画像処理方法
JP6381622B2 (ja) 画像処理装置及び画像処理方法
JP6437055B2 (ja) 画像処理装置及び画像処理方法
JP6505072B2 (ja) 画像処理装置及び画像処理方法
JP5936368B2 (ja) 光干渉断層撮影装置及びその作動方法
JP6039185B2 (ja) 撮影装置
JP2013148509A (ja) 画像処理装置及び画像処理方法
JP2019111396A (ja) 画像処理装置及び画像処理方法

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20160721

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20170801

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20170829

R151 Written notification of patent or utility model registration

Ref document number: 6202924

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

LAPS Cancellation because of no payment of annual fees