本発明の実施形態を図面に基づいて説明する。図1は、本実施形態の眼科撮影装置の光学系及び制御系を示す図である。なお、本実施形態においては、被検眼の奥行き方向をZ方向(光軸L1方向)、水平方向をX方向、鉛直方向をY方向として説明する。
図1において、その光学系は、被検眼眼底の断層画像を光干渉の技術を用いて非侵襲で得るための干渉光学系(以下、OCT光学系とする)200と、赤外光を用いて被検眼の眼底を照明し観察するためのSLO眼底像を取得するスキャニングレーザオフサルモスコープ(SLO)光学系300と、に大別される。なお、OCT光学系200には、フーリエ・ドメイン型のOCT光学系が使用されている。
なお、40は光分割部材としてのダイクロイックミラーであり、OCT光学系200に用いられる測定光源27から発せられる測定光(例えば、λ=840nm付近)を反射し、SLO光学系300に用いられる光出射部61から発せられるレーザ光(光源27とは異なる波長の光 例えば、λ=780nm付近)を透過する特性を有する。この場合、ダイクロイックミラー40は、OCT光学系200の測定光軸L2とSLO光学系300の測定光軸L1とを同軸にする。
まず、ダイクロイックミラー40の反射側に設けられたOCT光学系200の構成について説明する。27はOCT光学系200の測定光及び参照光として用いられる低コヒーレントな光を発するOCT光源であり、例えばSLD光源等が用いられる。OCT光源27には、例えば、中心波長840nmで50nmの帯域を持つ光源が用いられる。26は光分割部材と光結合部材としての役割を兼用するファイバーカップラーである。OCT光源27から発せられた光は、導光路としての光ファイバ38aを介して、ファイバーカップラー26によって参照光と測定光とに分割される。測定光は光ファイバ38bを介して被検眼Eへと向かい、参照光は光ファイバ38cを介して参照ミラー31へと向かう。
測定光を被検眼Eへ向けて出射する光路には、測定光を出射する光ファイバ38bの端部39b、被検眼の屈折誤差に合わせて光軸方向に移動可能なフォーカシングレンズ24、走査駆動機構51の駆動により眼底上でXY方向に測定光を走査させることが可能な2つのガルバノミラーの組み合せからなる走査部23と、リレーレンズ22が配置されている。ダイクロイックミラー40及び対物レンズ10は、OCT光学系200からのOCT測定光を被検眼眼底へと導光する導光光学系としての役割を有する。なお、本実施形態の走査部23では、2つのガルバノミラーによって測定光の反射角度を任意に調整することにより、眼底上に走査させる測定光の走査方向を任意に設定できるような構成となっている。よって、被検眼眼底の任意の領域の断層画像を得ることが可能となる。なお、光ファイバ38bの端部39bは、被検眼眼底と共役となるように配置される。また、走査部23の2つのガルバノミラーは、被検眼瞳孔と略共役な位置に配置される。
光ファイバ38bの端部39bから出射した測定光は、フォーカシングレンズ24を介して、走査部23に達し、2つのガルバノミラーの駆動により反射方向が変えられる。そして、走査部23で反射された測定光は、リレーレンズ22を介して、ダイクロイックミラー40で反射された後、対物レンズ10を介して、被検眼眼底に集光される。
そして、眼底で反射した測定光は、対物レンズ10を介して、ダイクロイックミラー40で反射し、OCT光学系200に向かい、リレーレンズ22、走査部23の2つのガルバノミラー、フォーカシングレンズ24を介して、光ファイバ38bの端部39bに入射する。端部39bに入射した測定光は、光ファイバ38b、ファイバーカップラー26、光ファイバ38dを介して、光ファイバ38dの端部84aに達する。
一方、参照光を参照ミラー31に向けて出射する光路には、参照光を出射する光ファイバ38cの端部39c、コリメータレンズ29、参照ミラー31が配置されている。参照ミラー31は、参照光の光路長を変化させるべく、参照ミラー駆動機構50により光軸方向に移動可能な構成となっている。
光ファイバー38cの端部39cから出射した参照光は、コリメータレンズ29で平行光束とされ、参照ミラー31で反射された後、コリメータレンズ29により集光されて光ファイバ38cの端部39cに入射する。端部39cに入射した参照光は、光ファイバ38cを介して、ファイバーカップラー26に達する。
そして、光源27から発せられた光によって前述のように生成される参照光と被検眼眼底に照射された測定光による眼底反射光は、ファイバーカップラー26にて合成され干渉光とされた後、光ファイバ38dを通じて端部84aから出射される。800は周波数毎の干渉信号を得るために干渉光を周波数成分に分光する分光光学系800(スペクトロメータ部)であり、コリメータレンズ80、グレーティングミラー(回折格子)81、集光レンズ82、受光素子83にて構成されている。受光素子83は、赤外域に感度を有する一次元素子(ラインセンサ)を用いている。
ここで、端部84aから出射された干渉光は、コリメータレンズ80にて平行光とされた後、グレーティングミラー81にて周波数成分に分光される。そして、周波数成分に分光された干渉光は、集光レンズ82を介して、受光素子83の受光面に集光する。これにより、受光素子83上で干渉縞のスペクトル情報が記録される。そして、そのスペクトル情報が制御部70へと入力され、フーリエ変換を用いて解析することで、被験者眼の深さ方向における情報(Aスキャン信号)が計測可能となる。ここで、制御部70は、走査部23により測定光を眼底上で所定の横断方向に走査することにより断層画像を取得できる。例えば、X方向もしくはY方向に走査することにより、被検眼眼底のXZ面もしくはYZ面における断層画像を取得できる(なお、本実施形態においては、このように測定光を眼底に対して1次元走査し、断層画像を得る方式をBスキャンとする)。なお、取得された断層画像は、制御部70に接続されたメモリ72に記憶される。さらに、測定光をXY方向に2次元的に走査することにより、被検眼眼底の3次元画像を取得することも可能である。なお、本実施形態におけるOCT画像の取得は、走査部23に設けられた2つのガルバノミラーによって行われる。
次に、ダイクロイックミラー40の透過方向に配置されたSLO光学系(共焦点光学系)300について説明する。SLO光学系300は、被検眼眼底を照明する照明光学系と、該照明光学系によって照明された眼底反射光を受光素子により受光する受光光学系とに大別され、受光素子から出力される受光信号に基づいて被検眼眼底の正面画像を得る。
光出射部61は、赤外域の波長の光(例えば、λ=780nm)を発する第1の光源(SLO光源)61aと可視域の波長の光(例えば、λ=630nm)を発する第2の光源(固視光源)61b、ミラー100、ダイクロイックミラー101とを有する。なお、第1の光源61aと第2の光源61bには、輝度が高く、指向性の高い光を発する光源(レーザダイオード光源、SLD光源、等)が用いられる。第1の光源61aを出射した赤外光は、ダイクロイックミラー101を透過し、光出射部61を出てビームスプリッタ62に進む。第2の光源61bを出射した可視光は、ミラー100にて折り曲げられた後、ダイクロイックミラー101にて反射して第1の光源61aから出射した光と同軸とされる。第1の光源61aは観察用の正面眼底画像を得るために用いられ、第2の光源61bは被検眼の視線方向を誘導させるために用いられる。
光出射部61から発せられるレーザ光を被検眼Eに向けて出射する光路には、被検眼の屈折誤差に合わせて光軸方向に移動可能なフォーカシングレンズ63、走査駆動機構52の駆動により眼底上でXY方向に測定光を高速で走査させることが可能なガルバノミラーとポリゴンミラーとの組み合せからなる走査部64、リレーレンズ65、対物レンズ10が配置されている。また、走査部64のガルバノミラー及びポリゴンミラーの反射面は、被検眼瞳孔と略共役な位置に配置される。
また、光出射部61とフォーカシングレンズ63との間には、ビームスプリッタ62が配置されている。そして、ビームスプリッタ62の反射方向には、共焦点光学系を構成するための集光レンズ66と、眼底に共役な位置に置かれる共焦点開口67と、SLO用受光素子68とが設けられている。
ここで、光出射部61から発せられたレーザ光(測定光、又は固視光束)は、ビームスプリッタ62を透過した後、フォーカシングレンズ63を介して、走査部64に達し、ガルバノミラー及びポリゴンミラーの駆動により反射方向が変えられる。そして、走査部64で反射されたレーザ光は、リレーレンズ65を介して、ダイクロイックミラー40を透過した後、対物レンズ10を介して、被検眼眼底に集光される。
そして、眼底で反射したレーザ光(測定光)は、対物レンズ10、リレーレンズ65、走査部64のガルバノミラー及びポリゴンミラー、フォーカシングレンズ63を経て、ビームスプリッタ62にて反射される。その後、集光レンズ66にて集光された後、共焦点開口67を介して、受光素子68によって検出される。そして、受光素子68にて検出された受光信号は制御部70へと入力される。制御部70は受光素子68にて得られた受光信号に基づいて被検眼眼底の正面画像を取得する。取得された正面画像はメモリ72に記憶される。なお、SLO画像の取得は、走査部64に設けられたガルバノミラーによるレーザ光の縦方向の走査(副走査)とポリゴンミラーによるレーザ光の横方向の走査(主走査)によって行われる。
なお、制御部70は、表示モニタ75に接続され、その表示画像を制御する。また、制御部70には、メモリ(記憶部)72、各種操作を行うための操作部74、走査駆動機構51、走査駆動機構52、参照ミラー駆動機構50、フォーカシングレンズ63を光軸方向に移動させるための第1駆動機構63a、フォーカシングレンズ24を光軸方向に移動させるための第2駆動機構24a、等が接続されている。
ここで、制御部70は、受光素子83から出力される受光信号に基づいて画像処理により眼底断層像を形成させると共に、受光素子68から出力される受光信号に基づいて画像処理により眼底正面像を形成させる。
なお、メモリ72には、過去に取得された画像、及び画像取得時における撮影条件等が記憶されている。より具体的には、過去に取得された眼底の断層画像の画像データと、該断層画像と対応付けられて取得した眼底の正面画像の画像データと、が患者の識別情報(例えば、ID番号、名前)に対応付けて記憶されている。また、過去の断層画像を取得したときの取得位置を示す情報として、固視標(固視灯)の呈示位置情報と、測定光の走査位置情報と、が前述の画像データと共に記憶されている。
なお、測定光の走査位置を示す情報としては、より具体的には、眼底上を二次元的に走査される測定光の中心位置を示す走査中心座標と、走査中心座標を基準位置とする走査領域情報と、が記憶されている。なお、走査領域情報には、測定光の走査パターン(例、ライン、十字、サークル、等)の形状及び走査パターンによる走査範囲が含まれる。なお、測定光の走査位置を示す情報としては、上記に限るものではなく、モニタ75に表示されたスキャンライン(後述する)の表示位置情報、走査部23の駆動情報、等が考えられる。
また、固視標の呈示位置情報として、例えば、過去の固視標の呈示位置を示す座標位置、光源61bを点灯させるときの走査部52の駆動位置、等が記憶される。
また、メモリ72には、他の撮影条件として、フォーカシングレンズ24,63の位置、参照ミラー31の位置、受光素子68,83のゲイン、画像のコントラスト、等が患者の識別情報に対応付けて記憶される。
また、検者によって操作される操作部74には、各種操作に用いられる操作部材としてのマウス74a、撮影スイッチ74b、キーボード等が設けられている。なお、マウス74aは、モニタ75上の表示と連動され、測定光の走査位置の設定、固視標位置の設定、等に用いられる。なお、上記制御部70、記憶部72、操作部74、モニタ75においては、装置として専用の部材を用いるようにしてもよいし、パーソナル・コンピュータ(PC)を用いるようにしてもよい。
次に、BスキャンによりXZ面の断層画像(Bスキャン画像)を取得する手法について説明する。図2は、OCT画像とSLO画像を逐次取得する際の動作について説明する図である。ここで、制御部70は、OCT光源27とSLO光源61aを交互に点灯させることによって、被検眼の眼底像を得るために被検眼の眼底に照射される照射光を,OCT光学系200を介して照射される測定光とSLO光学系を介して照射されるレーザ光とで切り換える。よって、制御部70には、OCT光学系200に配置された受光素子83によって検出される干渉信号とSLO光学系300に配置された受光素子68によって検出される受光信号が逐次入力される。
ここで、制御部70は、SLO画像の1フレーム分の走査エリアのうち、画像取得に影響を及ぼし難い、上下端部のエリア(図2のハッチング部分)を、OCT画像取得に必要な時間分に相当する領域として、その領域に位置する間、SLO光源61aをOFFとする。そして、SLO光源61aがOFFの間に、OCT光源27をONにしてBスキャンにてOCT画像を取得する。一方、SLO画像を得るために設定された走査エリア(図2の非ハッチング部分)において、制御部70は、SLO光源61aをONにし、OCT光源27をOFFにして、SLO画像を取得する。制御部70は、このような制御を連続して行い、交互に得られたSLO画像及びOCT画像を、表示モニタ75に同時に動画として表示させる(図3参照)。
なお、上記のように断層画像を取得する際、制御部70は、走査部64の駆動による2次元走査に同期させて固視光源61bの点灯/消灯を制御し、被検眼の視線誘導を行う。この場合、制御部70は、走査部64による走査領域が所定の固視位置に対応する領域に達したときに固視光源61bを点灯させ、それ以外の走査領域では固視光源61bを消灯させる。これにより、所定の固視位置にて固視灯が形成される。
以上のような構成を備える装置において、その動作について説明する。ここで、制御部70は、OCT光学系200及びSLO光学系300を駆動制御してOCT画像及びSLO画像の各画像を1フレーム毎に取得していき、モニタ75を表示制御してモニタ75に表示されるOCT画像及びSLO画像を随時更新する。
まず、検者は、図示なき固視灯を注視するように被験者に指示した後、図示なき前眼部観察用カメラによって撮像される前眼部観察像をモニタ75上で見ながら、被検眼の瞳孔中心に測定光軸L1が置かれるように、図示無きジョイスティックを用いてアライメント操作を行う。このようにして被検眼に対するアライメントが完了されると、SLO光学系300による被検眼眼底の正面画像(SLO眼底像)が取得されるようになり、モニタ75上にSLO眼底像が現れる。
ここで、モニタ75上の正面画像表示領域Hには、SLO光学系300によって取得されるSLO画像Gf(現在の正面画像)がリアルタイムで表示される(図4参照)。ここで、経過観察のように再診の患者に対して検査が行われる場合、検者によって所定のスイッチが操作されると、制御部70は、メモリ72に記憶された過去の正面画像のデータ及び過去の断層画像の取得位置を示す情報を呼び出す。
ここで、制御部70は、呼び出された過去の正面画像のデータに対応付けられてメモリ72に記憶された固視標の呈示位置情報に基づいて、固視標の呈示位置を設定する。これにより、過去の検査時と同じ位置に固視標が呈示されるため、モニタ75上の正面画像Gfは、過去の検査時のほぼ同じ画像が表示される。ただし、その正面画像は、被検者の固視状態、アライメント状態、等により過去の正面画像に対して若干のずれが生じる可能性がある。また、外部固視灯使用時は固視灯位置そのもの再現が難しい。なお、制御部70は、さらに、上記他の撮影条件(例えば、フォーカシングレンズの位置)を再現するようにしてもよい。
また、制御部70は、画像処理によって、メモリ72に記憶された過去の正面画像(以下、過去画像と省略する)のデータから中心領域の画像Kを切り出す。この場合、画像Kは、現在のSLO画像Gfとの判別、他の表示項目(例えば、インジケータ)との重複の回避、画像中心部を用いた位置ずれ確認、等ができる程度の大きさに切り出される。
そして、制御部70は、切り出した過去画像KをSLO画像Gfと区別することができるように着色処理し、かつ、透過性を持った半透明画像に加工処理する。この場合、さらに、過去画像Kに対して反転処理をかけておくと、SLO画像Gfとの違いがより分かりやすくなる。そして、制御部70は、加工処理された過去画像K(図4中のハッチング部分参照)を現在の正面画像Gfに重畳して表示する。
なお、正面画像表示領域H上に表示される過去画像Kは、表示領域Hにおける画像中心と、過去画像Kにおける画像中心と、が一致されるように表示される。これにより、過去に断層画像と略同時に取得された正面画像と、現在の正面画像とのずれ方向及びずれ量が検者によって視認される。
また、制御部70は、現在の走査位置及び走査パターンを示すスキャンラインSLを正面画像Gf上に重畳して表示する。なお、本実施形態において、制御部70は、スキャンラインSLの中心位置に、走査中心座標に対応する走査中心表示SCを表示させる。
また、制御部70は、メモリ72に記憶された過去の走査位置情報に対応する測定光の走査位置を初期位置として設定する。この場合、メモリ72から出力される信号に基づいて走査位置が設定される。そして、制御部70は、その初期位置に対応する位置にスキャンラインSLを表示する。この場合、走査中心表示SCの表示位置は、表示領域H上における過去の検査の走査中心座標に対応する。また、スキャンラインSLの表示位置は、過去の走査中心座標を基準として、表示領域H上における過去の検査の走査領域に対応する。
上記初期設定後、検者によって所定の走査位置調整部(例えば、マウス)が操作されると、制御部70は、調整部から出力される操作信号に基づいて測定光の走査位置を変更すると共に、変更された走査位置に対応する表示位置にスキャンラインSLを表示する。これにより、走査位置の変更に応じてスキャンラインSLの表示位置が変化される。この場合、例えば、マウスのドラッグ操作によってスキャンラインSLが画面上を移動される。
なお、走査部による測定光の走査位置と、表示領域H上におけるスキャンラインSLの表示位置との対応関係は、予め設定されている。そして、制御部70は、設定された走査ラインの表示位置に対応する走査領域に対して測定光が走査されるように、走査部23の一対のガルバノミラーを適宜駆動制御する。
また、制御部70は、まず、メモリ72に記憶された過去の正面画像と,現在の正面画像Gfとを比較して、過去の正面画像に対する現在の正面画像の位置ずれ方向及び位置ずれ量Δd1を画像処理により検出(演算)する。この場合、制御部70は、モニタ75に表示された過去画像Kの基となった正面画像データを基準画像とし、その基準画像とリアルタイムで取得される正面画像(現在画像)との位置ずれ方向及び位置ずれ量を算出する。これにより、過去画像に対する位置ずれ情報が得られる。
上記のように、2つの画像間の位置ずれを検出する手法としては、種々の画像処理手法(各種相関関数を用いる方法、フーリエ変換を利用する方法、特徴点のマッチングに基づく方法)を用いることが可能である。
例えば、所定の基準画像(例えば、過去の眼底画像)又は対象画像(現在の眼底画像)を1画素ずつ位置ずれさせ、基準画像と対象画像を比較し、両データが最も一致したとき(相関が最も高くなるとき)の両データ間の位置ずれ方向及び位置ずれ量を検出する手法が考えられる。また、所定の基準画像及び対象画像から共通する特徴点を抽出し、抽出された特徴点の位置ずれ方向及び位置ずれ量を検出する手法が考えられる。
また、2つの画像間の位置ずれを求めるための関数として、位相限定相関関数を用いるようにしてもよい。この場合、まず、各画像をフーリエ変換し、各周波数成分の位相と振幅を得る。なお、得られた振幅成分は、各周波数成分に関して大きさ1に正規化しておく。次に、2つの画像間で周波数毎の位相差を算出した後、これらに逆フーリエ変換をかける。
ここで、2つの画像間の位置ずれがなければ、余弦波のみの加算となり、原点位置(0,0)にピークが出現する。また、位置ずれがある場合、ずれ量及びずれ方向に対応する位置にピークが出る。そこで、ピークの検出位置を求めることにより2つの画像間の位置ずれ量及び位置ずれ方向が得られる。この手法によれば、眼底像の位置ずれを高精度かつ短時間で検出できる。
上記のように位置ずれが検出されると、制御部70は、メモリ72から過去の測定光の走査位置情報を取得し、前述のように検出された位置ずれ方向及び位置ずれ量Δd1に基づいて走査位置情報を補正し、補正された走査位置情報に対応する位置(走査目標位置)にターゲット指標Tgを表示する。この場合、ターゲット指標Tgは、過去の検査における断層画像とほぼ同じ部位に走査位置を調整するための目標として用いられ、正面画像Gf上に重畳して表示される。
より具体的には、このとき、ターゲット指標Tg(以下、ターゲットTgに省略する)は、過去の走査中心位置に対して位置ずれ量Δd1がオフセット(補正)されて表示される。これにより、ターゲットTgは、過去の断層画像とほぼ同じ眼底部位が測定される場合の走査中心位置に対応する位置に表示される。この場合、位置ずれ量Δd1は制御部70によって随時検出され、ターゲットTgの表示位置は、検出される位置ずれ量Δd1に応じて変化される。なお、走査中心表示SCの初期位置は、補正前の過去の走査中心座標に対応するため、検出される位置ずれ量Δd1がほぼ0のとき、走査中心表示SCとターゲットTgが合致して表示される。また、検出される位置ずれ量Δd1>0のとき、そのずれ量に応じて走査中心表示SCとターゲットTgの相対距離が変化される。なお、本実施形態では、ターゲットTgを中心として上下左右に延びる十字線Jが表示されており、ターゲットTgの表示位置が検者に視認されやすい表示形態となっている。
また、制御部70は、走査目標位置(ターゲットTgに対応)に対する現在の走査中心位置(走査中心表示SCに対応する)のずれ方向及びずれ量Δd2を検出し、検出結果に基づいて走査目標位置に対する現在の走査位置のずれ情報を表示する。
目標位置に対する走査位置のずれ情報を表すための表示として、例えば、走査中心位置を調整するときの移動方向を示すガイド指標Y(本実施形態では、矢印指標)が表示される。ガイド指標Yは、走査目標位置に対する現在の走査中心位置のずれ方向に基づいて、誘導する方向(矢印が示す方向)が変化される。これにより、ターゲット指標Tgに対する走査中心表示SCのずれ方向が示される。なお、図5(a)の場合、ガイド指標Yの矢印によって右斜め上方向が特定され、現在の測定光の走査中心に対して調整目標が右斜め上にあることが示されている。
ガイド指標Yは、前述のように検出されるずれ量Δd2に基づいて、表示形態(表示の動作、色)が変化される。また、過去画像Kは、前述のように検出されるずれ量Δd2に基づいて描画色が変化され、異なる描画色となる。
位置ずれ量Δd2が所定の第1許容範囲(D1)より大きいとき(Δd2>D1)、制御部70は、ターゲット指標Tgに対する走査中心表示SCのずれ方向を示すように、ガイド指標Yの表示方向を制御する(図5(a)参照)と共に、ガイド指標Yを第1の色(例えば、赤)とする。また、制御部70は、過去の眼底画像Kの色を第1の色(例えば、赤色の半透明)とする。これにより、位置ずれが大きい旨(走査位置の調整が不十分)が検者に報知される。この場合、ガイド指標Yの色と眼底画像Kの色は、同じ色に合わせられている。
また、位置ずれ量Δd2が所定の第1許容範囲(D1)以下となったとき(Δd2≦D1)、制御部70は、前述のガイド指標Yの表示方向の制御に加えて、ターゲット指標Tgを中心に4つの矢印状のマーカY4を表示する。また、制御部70は、ガイド指標Yを第2の色(例えば、黄色)とする。また、制御部70は、過去の眼底画像の色を第2の色(例えば、黄色の半透明)とする(図5(b)参照)。これにより、位置ずれが小さい旨(走査位置の調整が不十分だが、走査目標に近い)が検者に報知される。なお、マーカY4のうち、ターゲット指標Tgと走査中心表示SCとの間に表示されるマーカY4は、ガイド指標Yを兼ねる。
さらに、位置ずれ量Δd2が所定の第2許容範囲(D2)以下となったとき(Δd2≦D2)、制御部70は、マーカY4の描画色を塗りつぶす(図5(c)参照)。このとき、制御部70は、マーカY4(ガイド指標Y)を第3の色(例えば、緑色)とする。また、制御部70は、過去の眼底画像の色を第3の色(例えば、緑色の半透明)とする。なお、D2<D1である。これにより、位置ずれが解消された旨(走査位置の調整が適正である旨)が検者に報知される。すなわち、制御部70は、逐次検出される位置ずれ量Δd2が所定の第2許容範囲(D2)を満たすか否かを判別し、その判別結果をモニタ75上に表示する。そして、この判別処理によって走査位置の調整が適正か否かが判別される。
なお、上記表示制御において、検出されるずれ量Δd2に応じて過去画像(半透明画像)の透過率が変化されるようにしてもよい。例えば、制御部70は、位置ずれ量が大きいほど過去画像の透過率を高く(色が薄くなる)し、位置ずれ量が小さいほど過去画像の透過率を低くする(色が濃くなる)。
また、制御部70は、上記のように検出される位置ずれ量Δd1の上下方向における位置ずれ量と左右方向における位置ずれ量に分けて検出し、インジケータGを表示制御する。ここで、二次元画像観察画面上の下端には、横方向における位置ずれ量を示すインジケータG1が表示されている。そして、インジケータG1は、過去画像と、左右方向における位置ずれ量に基づいて増減される。また、二次元画像観察画面上に右端には、上下方向における位置ずれ量を示すインジケータG2が表示される。そして、インジケータG2は、上下方向における位置ずれ量に基づいて増減される。また、インジケータG1、G2の色は、前述のように検出される位置ずれ量d2に基づいて変化される。本実施形態では、ガイド指標Y(過去画像K)の色の変化に同期してインジケータG1、G2の色が変化される。
次に、検者がモニタ75上で測定位置を設定する場合について説明する。ここで、過去の同一位置での撮影を行いたい場合、検者は、所定の走査目標位置と現在の走査位置中心が合致されるように、操作を行う。
検者によって固視標位置調整部(例えば、マウス)が操作されると、被検眼の固視方向の変更によって正面画像の取得位置が変更され、現在の正面画像が画面上を移動される。このとき、過去画像と現在の正面画像との位置ずれ量が変化されるため、走査中心表示SCに対してターゲットTgが移動される。ここで、検者は、走査中心表示SCとターゲットTgとが合致されるように固視位置を調整する。
検者によって所定の走査位置調整部(例えば、マウス)が操作されると、制御部70は、ターゲットTgに対してスキャンラインSLを移動させる。ここで、検者は、走査中心表示SCとターゲットTgとが合致されるようにスキャンラインSLを移動させる。
上記走査位置又は固視位置の調整によって、走査中心SCとターゲットTgとの位置関係が調整され、モニタ75上に走査位置の調整が適正である旨が表示された状態(図5(c)参照)となったら、検者は、撮影開始スイッチ74bを押す。この場合、現在の走査中心位置が走査中心目標に達した状態となる。ここで、走査中心目標は、過去の断層画像とほぼ同じ眼底部位が測定される場合の走査中心位置に対応する位置であるから、走査中心位置が走査中心目標にあるとき、測定光の走査位置が過去の断層画像とほぼ同じ眼底部位に設定された状態となる。
ここで、撮影開始スイッチ74bから撮影開始(撮影許可)のトリガ信号が出力されると、制御部70は、設定された走査位置情報に基づいて走査部23を動作させて断層画像を取得し、取得された断層画像を静止画としてメモリ72に記憶させる。そして、取得された断層画像は、過去の断層画像と並べて表示され、経過観察が行われる。
以上のような構成とすれば、過去の画像の取得位置と同一位置での画像取得を容易に行うことができるため、検査の効率化が可能となる。
なお、以上の説明においては、モニタ75上に走査位置の調整が適正である旨が表示されたとき(走査中心位置が走査中心目標に達したとき)、検者による撮影開始スイッチからの操作信号を撮影開始のトリガとしたが、これに限るものではない。この場合、例えば、制御部70は、逐次検出される位置ずれ量Δd2が所定の第2許容範囲(D2)を満たすと判別されたとき、撮影開始(画像取込)のトリガ信号を自動的に発するようにしてもよい。そして、トリガ信号が発せられると、制御部70は、上記同様、設定された走査位置情報に基づいて走査部23を動作させ断層画像を取得し、取得された断層画像をメモリ72に記憶させる。なお、本実施形態では、断層画像が動画像として逐次取得される構成であるため、トリガ信号が発せられたタイミングで取得された断層画像を静止画としてメモリ72に記憶させるようにしてもよい。また、上記手法に限るものではなく、逐次取得される断層画像毎にそれぞれ上記判別処理を行い、逐次取得される断層画像とその判別結果をメモリ72に一旦記憶させておき、その判別結果を用いて走査位置の調整が適正な状態で得られた断層画像が抽出できるようにしてもよい。
なお、以上の説明においては、検者の手動操作により測定光の走査位置が過去の画像の取得位置と同一位置に設定されるものとしたが、これに限るものではない。すなわち、前述のように検出される位置ずれ量Δd2が所定の許容範囲内(D2)を満たすように制御部70によって走査部23が駆動制御されるような構成においても、本発明の適用は可能である。ただし、上記のような駆動制御を行う場合、現状の制御部70のスペック及び走査部23の反応速度を考慮すると、位置ずれ量Δd2が検出されてから走査部23の駆動が完了される(所定の走査位置への移動完了)までの処理に時間がかかる。このため、走査部23の駆動完了後に所定の走査位置にて測定が行われたとき、上記処理中に被検眼が再度動いていた場合、異なる位置を測定してしまう可能性がある。
これに対して、上記の手動方式によれば、現状の構成においても、各制御をスムーズに行うことができる。すなわち、位置ずれ量Δd2が所定の許容範囲D2を満たすか否かの判別処理が逐次行われ、判別結果がモニタ75上でリアルタイムで表示される。したがって、検者は、その判別結果を見ながら撮影開始のトリガを押すことで、正確な測定が可能となる。
また、走査位置が自動的に変更される場合においても、制御部70は、位置ずれ量Δd2に基づく走査部23の駆動が完了された後、再度位置ずれ量Δd2を検出し、位置ずれ量Δd2が所定の許容範囲D2を満たすか否かを判別するようにすればよい。この場合、制御部70は、位置ずれ量Δd2が所定の許容範囲D2を満たすと判別されたとき、撮影開始(画像取込)のトリガ信号を自動的に発する。また、制御部70は、位置ずれ量Δd2が所定の許容範囲内D2を超えたと判別されたとき、走査部23を駆動制御して再度走査位置の変更を行う。このようにすれば、異なる位置を測定してしまう可能性が軽減される。
また、以上の説明では、正面眼底画像を得るための配置された眼底観察光学系として、光走査部を有する構成としたが、これに限るものではなく、眼底全体を同時に照明する光学系と、二次元撮像素子によって眼底像を撮像する撮像光学系と、を有する構成(いわゆる眼底カメラ式)を用いてもよい。
また、以上の説明では、眼底の断層像を取得する場合を例にとって説明したが、これに限るものではなく、OCTの原理を応用した光干渉光学系を用いて被検眼の所定部位の断層像(例えば、前眼部断層像)を撮影する眼科撮影装置であれば、本発明の適用は可能である。
次に、Bスキャンによって取得される断層画像を複数取得し、加算画像を作成するときの流れ(フロー)について説明する(図6のフローチャート参照)。本実施形態では、ノイズ成分を抑制した1枚の断層画像(Bスキャン画像)を得るために、所定の走査領域にて測定光を複数回走査させ、複数枚の断層画像を得て、取得された複数の断層画像を制御部70により加算処理して平均化させる。この場合、制御部70は、各断層画像を測定光の走査方向に関して同じ複数の領域に分割し、各断層画像間の位置ずれを分割された領域毎に検出し位置ずれ情報を得る。そして、制御部70は、得られた位置ずれ情報に基づいて,各撮影画像間の位置ずれを分割された領域毎に補正する。そして、制御部70は、補正された各撮影画像を加算し、平均化する。
より具体的には、まず、制御部70は、走査部23を用いて測定光を所定の走査領域にて複数回走査し、同一の走査領域における断層画像を複数枚(n枚(n>2))取得し、メモリ72に記憶させる。
次に、制御部70は、図7に示すように、メモリ72に記憶された各断層画像を所定の幅で区分し、複数の領域(図中の点線T参照)に分割する。この場合、各断層画像は、走査部23による測定光の走査方向(例えば、X方向)に関して複数の領域に分けられる。また、本実施形態では、断層画像を4つの領域に分割したが、分割数は画像の解像度、画像の取得時間、予想される位置ずれ量、等に応じて任意の数に設定できる。
次に、制御部70は、各分割領域の中心位置におけるAスキャン信号(図中の一点鎖線S参照)から最も輝度の高い点等、の予め設定されている輝度条件に該当する点を探索し、特定された所定の点をテンプレート位置(基準位置)として設定する。そして、制御部70は、テンプレート位置を中心とする任意の領域(例えば、矩形領域)内の画像をテンプレート画像として設定する(図中の矩形枠W参照)。このようにして、各分割領域において、位置ずれ検出に用いられるテンプレート画像を設定する。
なお、上記のような手法を用いるのは、被検眼の網膜領域に対応する断層画像を位置ずれ検出用のテンプレート画像として抽出するためである。なお、テンプレート位置を設定する場合、網膜色素上皮近傍の輝度値(比較的輝度の高い輝度値が得られる)に相当するような所定の閾値を超える点を探索し、特定された所定の点をテンプレート位置としてもよい。
制御部70は、取得されたn枚の断層画像のうち、いずれかの画像(例えば、n/2枚目に得られた画像)をベース画像(基準画像)として選択し、ベース画像に対して設定された各分割領域におけるテンプレート画像を取り出す。
次に、制御部70は、複数の画像を加算させるにあたって、取得された断層画像から所定の画像を一枚選択し、1枚毎にベース画像に対して画像を順次加算させていくことにより、結果的に少なくとも3枚以上の画像を加算させる。
この場合、制御部70は、まず、取得されたn枚の断層画像のうち、所定の断層画像を選択し、選択された断層画像(選択画像)に対して設定された各分割領域におけるテンプレート画像を取り出す。そして、制御部70は、分割された領域毎に、ベース画像のテンプレート画像と、選択画像におけるテンプレート画像と、を比較し、ベース画像に対する選択画像の位置ずれ方向及びずれ量を分割された領域毎に検出する。この場合、ベース画像のテンプレート画像に対して選択画像におけるテンプレート画像を1画素単位でずらしながら、相関値を逐次算出する。そして、制御部70は、相関値の値が最大になるときの画素の変位量(ずらした画素数)を位置ずれ量として算出する。
そして、制御部70は、ベース画像に対する選択画像の各分割領域における位置ずれが補正されるように、分割領域毎に検出された位置ずれ分、各分割領域における選択画像のテンプレート画像をベース画像に対してそれぞれ変位させる。そして、位置ずれ補正後、制御部70は、ベース画像と選択画像のテンプレート画像の画素値を分割領域毎にそれぞれ加算させる。
以上のようにして、制御部70は、取得された断層画像全てにおいて位置ずれ検出及び位置ずれ補正の処理を繰り返し、画素値の合計を算出する。その後、加算処理に使用した画像枚数で画素値の合計値が除算されることで、加算平均画像が作成される。この場合、検出される位置ずれ量が許容範囲を超えた断層画像を加算処理の対象から除外するようにしてもよい。なお、上記説明では、画像加算において、断層画像一枚単位で順次分割領域毎に画像加算を行うものとしたが、各断層画像の分割領域単位で順次画像加算を行うようにしてもよい。
以上のような構成とすれば、複数の断層画像を加算させる場合、測定光の走査中に被検眼が微動しても、光走査方向に関して分割された領域毎に位置ずれ補正がなされるため、画像間のずれが適正に補正され、鮮明な断層画像が作成される。
なお、上記説明においては、所定の基準画像に対する各断層画像の位置ずれが分割領域毎に検出され、基準画像に対する位置ずれが補正されるものとしたが、各断層画像間の位置ずれが分割領域毎に検出され、各断層画像間の位置ずれが補正されるものであれば、他の手法であってもよい。例えば、時間的に隣接する断層画像間の位置ずれを順次補正していく手法であってもよい。
また、以上の説明では、眼底断層像を複数取得したときの画像加算手法について示したが、これに限るものではなく、OCTの原理を応用した光干渉光学系を用いて被検眼の所定部位の断層像(例えば、前眼部断層像)を撮影する眼科撮影装置であれば、本発明の適用は可能である。
また、以上の説明では、干渉光学系を用いて被検眼断層像を撮影するときの画像加算手法について示したが、輝度が高く指向性の高い光を発する光源と、測定光を被検眼の所定部位上で走査させる光走査部と、被検眼の所定部位と略共役な位置に配置された共焦点開口を介して測定光による反射光を受光する受光素子と、を有し、被検眼の所定部位における正面画像を得るための共焦点光学系(例えば、SLO光学系300)を用いて被検眼正面画像を複数取得したきの画像加算手法として用いてもよい。例えば、SLO光学系300によってSLO眼底像が複数取得された場合、各SLO眼底像を測定光の副走査方向(縦方向)に関して複数の領域に分割する。そして、各SLO画像間の位置ずれを分割された領域毎に検出し、検出された位置ずれ分、各SLO画像間の位置ずれを分割領域毎に補正し、画像加算を施す。
また、上記構成に限らず、測定光源から発せられた光を被検眼の所定部位上で走査させる光走査部と、測定光による反射光を受光する受光素子と、を持ち、被検眼の断層像又は正面像を得るための撮影光学系であれば、本発明の適用は可能である。
次に、OCT光学系200を用いて眼底の3次元画像を撮影する場合について説明する(図8のフローチャート参照)。この場合、検者は、所定の走査位置調整部及び所定の固視位置調整部を用いて、3次元画像を得る眼底上の領域を図示なき設定スイッチを用いて設定し、撮影開始スイッチを押す。これにより、OCT光学系200による3次元画像の取得が開始される。なお、3次元画像は、走査部23の駆動によって測定光が眼底上で二次元的(XY方向)に走査されたときに受光素子83から出力される受光信号に基づいて取得される。また、本実施形態では、3次元画像取得時においては、OCT光源27を点灯させ、SLO光源61aを消去させておく。
3次元画像を得るための測定光の走査が完了されると、制御部70は、フーリエ解析がなされる前段階において、受光素子83から出力される受光信号の生データ(RAWデータ)から干渉信号を抽出し(定常的な参照光成分を除去する)、それをAスキャン毎に加算して並べる。これにより、3次元画像取得時のOCT光学系200による眼底正面画像(以下、OCT眼底像とする)を得る(図9参照)。この場合、OCT眼底像の所定点における輝度レベルは、所定の走査位置で取得された受光素子83の受光信号から抽出される干渉信号の各画素毎の信号レベル(輝度値)の累計値に対応する。
なお、前述のOCT眼底像は、フーリエ解析が行われる前の受光信号に基づいて形成される画像のため、画像作成時間(演算処理時間)が短くてすむ。なお、3次元画像取得時のOCT眼底像を得る場合、上記手法に限るものではなく、受光素子83から出力される撮影時に受光された干渉信号に基づいてOCT眼底像が取得されるものであればよい。例えば、フーリエ解析を経て得られた3次元画像を深さ方向に積算したときの積算画像がOCT眼底像として取得されるようにしてもよい(ただし、フーリエ解析に係る時間を要する)。また、3次元画像における眼底の表層(表面)付近の画像をOCT眼底像として取得するようにしてもよい。
また、制御部70は、3次元画像の撮影の前後いずれかにおいて,SLO光学系300を用いてOCT眼底像と同じ固視状態で得られる眼底正面画像(以下、SLO眼底像とする)を基準画像として取得し、メモリ72に記憶する。そして、制御部70は、3次元撮影時に設定された測定光の走査位置情報に基づいて、取得されたSLO画像から3次元画像の取得領域に対応する部分の画像を抽出する。抽出されたSLO眼底像は、前述のOCT眼底像との位置ずれを求めるための基準画像として設定される。なお、基準画像の基となるSLO眼底像を取得するタイミングとしては、3次元画像の撮影と略同時であればよく、3次元画像の撮影時にSLO画像が取得されるようにしてもよい。
OCT眼底像とSLO眼底像の取得が完了されると、制御部70は、OCT眼底像と基準画像(SLO眼底像)とを比較して基準画像に対するOCT眼底像の位置ずれを画像処理により検出し、その検出結果とOCT眼底像とをモニタ75の画面上に表示する。より具体的には、制御部70は、OCT眼底像と基準画像とを比較して基準画像に対するOCT眼底像の全体的な位置ずれ量を検出すると共に、OCT眼底像全体を複数の領域に分割し,分割された各領域におけるOCT眼底像と基準画像とを比較して基準画像に対する眼底像の局所的な位置ずれ量を検出する。
図9は、3次元画像の撮影時に取得されたOCT眼底像の撮影例について示す図である。図9(a)は、撮影中に固視ずれ及び瞬きがなく、良好に撮影された場合のOCT眼底像を示す図である。一方、3次元撮影中に瞬きがあった場合、瞼によって測定光がけられるため、図9(b)に示すように、OCT眼底像に欠落部分(図中のK参照)が生じる。また、3次元撮影中に固視位置のずれがあった場合、測定光が走査される眼底部位が変化されるため、図9(c)に示すように、OCT眼底像の一部に画像のずれ(図中の点線Dを境にずれ有り)が生じる。
なお、SLO眼底像の撮影時間がOCTの3次元画像の撮影時間よりも短いことを考慮すると、SLO眼底像の撮影時に固視ずれ及び瞬きが生じる可能性は比較的少ない。ただし、念のため、SLO眼底像を複数枚取得しておき、その中から良好なSLO眼底像を基準画像として用いるようにしてもよい。
SLO眼底像とOCT眼底像との全体的な位置ずれ量を検出する場合、制御部70は、例えば、SLO眼底像全体に対してOCT眼底像全体を1画素単位でずらしながら、相関値を逐次算出する。そして、制御部70は、相関値の値が最大になるときの画素の変位量(ずらした画素数)を位置ずれ量として算出(検出)する。これにより、3次元画像の撮影前に設定された撮影位置に対する実際の撮影位置のずれ量が求められる。
また、SLO眼底像とOCT眼底像との局所的な(部分的)位置ずれ量を検出する場合、制御部70は、例えば、図10(a)に示すようにOCT眼底像を複数の領域に分割し、分割された各領域におけるOCT眼底像と,SLO画像と,の位置ずれ量を算出する。この場合、制御部70は、分割された領域毎に、SLO眼底像に対するOCT眼底像の相関値を逐次算出する。そして、制御部70は、相関値の値が最大になるときの画素の変位量(ずらした画素数)を各領域における位置ずれ量として算出する。これにより、3次元画像取得中の眼の動きによる局所的な撮影位置のずれ量と瞬きの有無が求められる。なお、瞬きがあった場合、位置ずれ量が異常値を示す。また、局所的な位置ずれ量を求める場合、OCT眼底像と同様に、SLO画像を複数の領域に分割し、分割された領域毎にSLO眼底像に対するOCT眼底像の位置ずれを求めるようにしてもよい。
なお、本実施形態では、制御部70は、図10(a)に示すように、分割された各領域における縦方向の画素数と横方向の画素数とが一致されるように、OCT眼底像を複数の領域に分割する。例えば、OCT眼底像全体の画素数が縦256×横256の場合、1つの領域が縦64×横64の画素を持つ縦4×横4の全16の領域に分割する(図10(a)の画像中の細線参照)。これにより、被検眼の局所的な回旋動作等にも対応できる。なお、上記手法に限るものではなく、縦方向(測定光の副走査方向)に関してのみOCT眼底像を複数の領域に分割するようにしてもよい。また、上記のようにOCT眼底像が複数の領域に分割される際の各領域の大きさは、基準画像との比較により位置ずれが検出できる程度の領域が確保される必要がある。
上記のようにして、基準画像(SLO画像)に対するOCT眼底像の位置ずれが検出されると、制御部70は、検出結果をモニタ75上に出力する。ここで、制御部70は、前述のように検出された全体的な位置ずれ量を示す表示と、各領域で検出された部分的な位置ずれ量を示す表示と、モニタ75上に行う。
なお、出力形式としては、位置ずれ量を所定の単位(例えば、ピクセル単位)で表示するようなことが考えられる(図10(b)参照)。また、他の出力形式としては、検出された位置ずれ量が所定の許容範囲を満たすか否かを制御部70により判定処理し、その判定結果を出力する(例えば、位置ずれOK、位置ずれエラー、判定結果に応じた描画色の変更、等)ようなことが考えられる。また、位置ずれを段階的に表現する数字によるものでもよいし、アルファベット等によるランク付けされているものでもよいし、3次元画像の信頼度を示す信頼係数として表示されるような形式等、が考えられる。なお、部分的な位置ずれに関する表示を行う場合、各分割領域と各位置ずれ量が対応付けされた形式で出力されることが好ましい。
検者は、モニタ75上に表示される検出結果とOCT眼底像(SLO眼底像の表示も可)を見ながら、OCTの3次元画像撮影の適否を判断する。ここで、全体的な位置ずれ量又は部分的な位置ずれ量が許容値を下回った場合、検者は、撮影が適正だったと判断する。ここで、適正と判断され、所定のスイッチ操作がなされると、制御部70は、フーリエ解析、3次元画像の構築、画像解析(例えば、各膜の境界位置検出、各膜の膜厚計測、等)、を順次実行する。そして、制御部70は、3次元画像のグラフィック、画像解析の結果をモニタ75上に表示する。
また、全体的な位置ずれ量又は部分的な位置ずれ量が許容値を超えているような場合、検者は、3次元画像の再撮影を行う。ここで、再撮影が必要と判断され、所定のスイッチ操作がなされると、制御部70は、再度OCT3次元画像の撮影を実行する。
以上示したように、3次元画像の撮影時における撮影位置のずれを検出し、その検出結果がモニタ75上に表示されることにより、設定された撮影位置に対する実際の撮影位置のずれ、3次元画像撮影中における固視位置及びアライメント位置のずれ、瞬きの有無、等が検者によって容易に把握される。また、上記手法によれば、フーリエ解析、グラフィック像の構築、画像解析等が実行される前に、3次元画像の成否が判定できるため、撮影失敗時の再撮影までの待ち時間を短縮できる。
なお、以上の説明においては、3次元画像撮影の成否を検者が判断するものとしたが、これに限るものではなく、画像の成否が制御部70によって判断され、その結果に応じて自動的に再撮影が実行されるようなものであってもよい。この場合、制御部70は、検出される全体的な位置ずれ量及び部分的な位置ずれ量の少なくともいずれかがが所定の許容範囲を満たすか否かを判定し、許容範囲外と判定された場合、自動的に3次元画像の再撮影を実行する。
なお、以上の説明では、3次元画像の撮影と略同時に取得された観察用正面画像を基準画像として設定するものとしたが、過去に同じ眼底部位で3次元画像が撮影されたときに略同時に取得された観察用正面画像を基準画像として用いるようにしてもよい。このようにすれば、過去と同じ眼底部位での3次元画像が適正に行われた否かを判断可能となる。
また、以上の説明では、観察用正面眼底画像を得るために配置された眼底観察光学系として、光走査部を有する構成としたが、これに限るものではなく、眼底全体を同時に照明する光学系と、二次元撮像素子によって眼底像を撮像する撮像光学系と、を有する構成(いわゆる眼底カメラ式)を用いてもよい。
また、以上の説明では、眼底の3次元画像を取得したときの成否の判断するための手法について示したが、これに限るものではなく、OCTの原理を応用した光干渉光学系を用いて被検眼の所定部位の断層像(例えば、前眼部断層像)を撮影する眼科撮影装置であれば、本発明の適用は可能である。