JP6419238B2 - 眼科装置および位置合わせ方法 - Google Patents
眼科装置および位置合わせ方法 Download PDFInfo
- Publication number
- JP6419238B2 JP6419238B2 JP2017045341A JP2017045341A JP6419238B2 JP 6419238 B2 JP6419238 B2 JP 6419238B2 JP 2017045341 A JP2017045341 A JP 2017045341A JP 2017045341 A JP2017045341 A JP 2017045341A JP 6419238 B2 JP6419238 B2 JP 6419238B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- magnification
- acquisition
- magnification image
- low
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000000034 method Methods 0.000 title claims description 121
- 230000008569 process Effects 0.000 claims description 32
- 210000001525 retina Anatomy 0.000 claims description 23
- 238000009826 distribution Methods 0.000 claims description 22
- 230000035945 sensitivity Effects 0.000 claims description 7
- 238000012545 processing Methods 0.000 description 37
- 230000003044 adaptive effect Effects 0.000 description 27
- 210000004204 blood vessel Anatomy 0.000 description 27
- 230000003287 optical effect Effects 0.000 description 25
- 238000000605 extraction Methods 0.000 description 20
- 238000005259 measurement Methods 0.000 description 20
- 238000012937 correction Methods 0.000 description 15
- 210000000608 photoreceptor cell Anatomy 0.000 description 15
- 238000003384 imaging method Methods 0.000 description 14
- 230000006870 function Effects 0.000 description 11
- 210000003733 optic disk Anatomy 0.000 description 11
- 238000003860 storage Methods 0.000 description 11
- 230000004075 alteration Effects 0.000 description 9
- 210000004027 cell Anatomy 0.000 description 8
- 210000001210 retinal vessel Anatomy 0.000 description 8
- 230000008859 change Effects 0.000 description 7
- 238000010586 diagram Methods 0.000 description 7
- 238000011156 evaluation Methods 0.000 description 7
- 239000000835 fiber Substances 0.000 description 7
- 108091008695 photoreceptors Proteins 0.000 description 7
- 230000002207 retinal effect Effects 0.000 description 7
- 210000000601 blood cell Anatomy 0.000 description 6
- 238000001514 detection method Methods 0.000 description 6
- 239000013307 optical fiber Substances 0.000 description 6
- 210000003161 choroid Anatomy 0.000 description 5
- 238000012014 optical coherence tomography Methods 0.000 description 5
- 210000003462 vein Anatomy 0.000 description 5
- 238000006243 chemical reaction Methods 0.000 description 4
- 239000012528 membrane Substances 0.000 description 4
- 230000004044 response Effects 0.000 description 4
- 230000001225 therapeutic effect Effects 0.000 description 4
- 238000012546 transfer Methods 0.000 description 4
- PXFBZOLANLWPMH-UHFFFAOYSA-N 16-Epiaffinine Natural products C1C(C2=CC=CC=C2N2)=C2C(=O)CC2C(=CC)CN(C)C1C2CO PXFBZOLANLWPMH-UHFFFAOYSA-N 0.000 description 3
- 201000010099 disease Diseases 0.000 description 3
- 208000037265 diseases, disorders, signs and symptoms Diseases 0.000 description 3
- 230000003902 lesion Effects 0.000 description 3
- 210000003583 retinal pigment epithelium Anatomy 0.000 description 3
- 230000009466 transformation Effects 0.000 description 3
- 208000003098 Ganglion Cysts Diseases 0.000 description 2
- 208000005400 Synovial Cyst Diseases 0.000 description 2
- 230000017531 blood circulation Effects 0.000 description 2
- 230000000737 periodic effect Effects 0.000 description 2
- 239000007787 solid Substances 0.000 description 2
- 230000003595 spectral effect Effects 0.000 description 2
- 238000012360 testing method Methods 0.000 description 2
- 210000001519 tissue Anatomy 0.000 description 2
- 238000011426 transformation method Methods 0.000 description 2
- 230000004382 visual function Effects 0.000 description 2
- WBMKMLWMIQUJDP-STHHAXOLSA-N (4R,4aS,7aR,12bS)-4a,9-dihydroxy-3-prop-2-ynyl-2,4,5,6,7a,13-hexahydro-1H-4,12-methanobenzofuro[3,2-e]isoquinolin-7-one hydrochloride Chemical compound Cl.Oc1ccc2C[C@H]3N(CC#C)CC[C@@]45[C@@H](Oc1c24)C(=O)CC[C@@]35O WBMKMLWMIQUJDP-STHHAXOLSA-N 0.000 description 1
- 201000004569 Blindness Diseases 0.000 description 1
- 208000001344 Macular Edema Diseases 0.000 description 1
- 206010025415 Macular oedema Diseases 0.000 description 1
- 241000270295 Serpentes Species 0.000 description 1
- RTAQQCXQSZGOHL-UHFFFAOYSA-N Titanium Chemical compound [Ti] RTAQQCXQSZGOHL-UHFFFAOYSA-N 0.000 description 1
- 210000001367 artery Anatomy 0.000 description 1
- 210000003050 axon Anatomy 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 239000002131 composite material Substances 0.000 description 1
- 238000005520 cutting process Methods 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 239000006185 dispersion Substances 0.000 description 1
- 238000009499 grossing Methods 0.000 description 1
- 210000000265 leukocyte Anatomy 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 201000010230 macular retinal edema Diseases 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 210000004126 nerve fiber Anatomy 0.000 description 1
- 210000001328 optic nerve Anatomy 0.000 description 1
- 210000001747 pupil Anatomy 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 238000011946 reduction process Methods 0.000 description 1
- 230000002441 reversible effect Effects 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 229910052719 titanium Inorganic materials 0.000 description 1
- 239000010936 titanium Substances 0.000 description 1
- 238000013519 translation Methods 0.000 description 1
- 231100000216 vascular lesion Toxicity 0.000 description 1
Images
Landscapes
- Eye Examination Apparatus (AREA)
Description
i) 層形状値の分布(図6(e))
ii) 網膜感度値の分布(図6(f))
iii) 治療用レーザの照射位置(図6(g))
が重畳される場合がある。低倍率画像Dl上に高倍率画像Dhが正確に位置合せされていれば、前記高倍率画像Dh上の画像特徴とこれらの情報との関連性を観察・分析できるようになる。例えば、
i)を用いると、網膜外層厚の分布と、視細胞密度分布
ii)を用いると、視機能測定値の分布と、視細胞密度分布
iii)を用いると、治療部位と、毛細血管の分布や血流速度
との関連性を観察・分析できるようになる。
前記取得された第1の倍率の画像と第2の倍率の画像を位置合わせする位置合わせ手段とを有する眼科装置であって、
前記位置合わせ手段により前記第1の倍率の画像と前記第2の倍率の画像の位置合わせを行う際に、前記第1の倍率と前記第2の倍率の中間の倍率の画像が必要か否か判定する判定手段を更に有し、
前記判定手段により前記中間の倍率の画像が必要と判定した場合、前記画像取得手段により前記中間の倍率の画像を取得する。
第1の倍率の画像と、前記第1の倍率とは異なる倍率である第2の倍率の画像を取得する画像取得工程と、
前記取得された第1の倍率の画像と第2の倍率の画像を位置合わせする位置合わせ工程とを有する位置合わせ方法であって、
前記位置合わせ工程において位置合わせを行う際に、前記第1の倍率と前記第2の倍率の中間の倍率の画像が必要か否か判定する判定工程と、
前記判定工程により前記中間の倍率の画像が必要と判定した場合、前記中間の倍率の画像を取得する第2の画像取得工程を有する。
[第1の実施形態]
本実施形態に係る眼科装置は、高倍率画像Dhとして補償光学SLO画像、低倍率画像として眼部断層像の走査位置が重畳された眼部のSLO画像を取得する。高倍率画像Dhと低倍率画像Dlの取得倍率の違いや高倍率画像Dhの固視位置に基づき中間倍率画像Dmの取得要否、取得倍率や取得位置を判定し、中間倍率画像Dmを取得する。次に、取得倍率の低い画像から順に倍率の近い画像同士を両画像に共通する画像特徴に基づき位置合わせすることで低倍率画像Dl上の高倍率画像Dhの相対位置を決定する。
(全体構成)
図2(a)は本実施形態に係る眼科装置10を含むシステムの構成図である。図2(a)に示すように眼科装置10は、SLO像撮像装置20やデータサーバ40と、光ファイバ、USBやIEEE1394等で構成されるローカル・エリア・ネットワーク(LAN)30を介して接続されている。なおこれらの機器との接続は、インターネット等の外部ネットワークを介して接続される構成であってもよいし、あるいは眼科装置10がSLO像撮像装置20に直接接続されている構成であってもよい。
画像取得部110はSLO像撮像装置20に対して、低倍率画像Dlおよび高倍率画像Dh、固視標位置Fl及びFhの取得を要求する。本実施形態では、黄斑部の中心窩に固視標位置Flを設定して低倍率画像Dlを取得し、傍中心窩Fhに固視標位置を設定して高倍率画像Dhを取得する。すなわち、画像取得部110は異なる倍率の画像を取得する画像取得手段の一例に相当する。なお、画像取得位置の設定方法はこれに限定されず、任意の位置に設定してよい。
決定部131において、低倍率画像Dlと高倍率画像Dhとの中間の解像度を持つ中間倍率画像Dmの取得に関する要否と、該中間倍率画像Dmの取得が必要と判定した場合に中間倍率画像Dmの倍率、取得位置、取得順序を決定する。また、決定部131は画像取得部110に対して中間倍率画像Dmの取得要求を行い、画像取得部110が中間倍率画像Dmを取得する。ここで、決定部131は、画像取得手段によって取得された画像または当該画像の取得条件の少なくとも一方に基づいて画像取得手段によって取得された画像間の中間の倍率を持つ画像の取得法を決定する決定手段の一例に相当する。
なお、中間倍率画像Dmを取得する方法として
1)画像取得部110がSLO像撮像装置20に対して中間倍率画像Dmの取得を要求し、SLO像撮像装置20が取得した中間倍率画像Dmを記憶部120に転送する
2)画像取得部110がデータサーバ40に対して保管されている中間倍率画像Dmの転送を要求し、データサーバから中間倍率画像Dmを転送する
の2つがあり、本実施形態では1)の場合として説明する。
本ステップの処理については、図7に示すフローチャートを用いて後に詳しく説明する。
位置合わせ部132は、低倍率画像Dlと高倍率画像Dhとの位置合わせを行う。S530において中間倍率画像Dmが取得されている場合には、該中間倍率画像Dmも用いて低倍率画像Dl上の高倍率画像Dhの位置が決定される。ここで、位置合わせ部132は取得された画像を位置合わせする位置合わせ手段の一例に相当する。
表示手段の一例に相当する表示部133は、S530において得られた位置合わせパラメータの値に基づき、低倍率画像Dl上に高倍率画像Dhを重畳表示する。
指示取得部140は、低倍率画像Dl、中間倍率画像Dm、高倍率画像Dh、固視標位置Fl、Fm、Fh、S530において取得された位置合わせパラメータ値をデータサーバ40へ保存するか否かの指示を外部から取得する。この指示は例えばキーボード306やマウス307を介して操作者により入力される。保存が指示された場合はS560へ、保存が指示されなかった場合はS570へと処理を進める。
画像処理部130は、検査日時、披検眼を同定する情報、低倍率画像Dl、中間倍率画像Dm、高倍率画像Dhと眼部特徴、固視標位置Fl、Fm、Fh、位置合わせパラメータ値を関連付けてデータサーバ40へ送信する。
指示取得部140は眼科装置10による低倍率画像Dlと高倍率画像Dhに関する処理を終了するか否かの指示を外部から取得する。この指示はキーボード306やマウス307を介して操作者により入力される。処理終了の指示を取得した場合は低倍率画像Dlと高倍率画像Dhに関する処理を終了する。一方、処理継続の指示を取得した場合にはS510に処理を戻し、次の披検眼に対する処理(または同一披検眼に対する再処理を)行う。
a)取得倍率を固定もしくは選択式とし、取得位置を任意設定可能にする
b)取得倍率を任意設定可能とし、取得位置は高倍率画像Dhと同じにする
の2種類が考えられる。
a)は取得される中間倍率画像Dmの取りうる各属性の値を限定できる利点があるものの、中間倍率画像Dmの取得位置が他の倍率の画像の取得位置と異なる場合には収差補正をやり直す必要が生じる。一方、b)は取得位置が変わらないため中間倍率画像Dm取得のために収差補正をやり直す必要がないものの、取得される中間倍率画像Dmの持つ属性値が多様に変化し得るため撮像装置制御ソフトウェアや画像管理ソフトウェアの対応が必要となる。
i)眼部で一般的に観察されやすい画像特徴を取得倍率(画素サイズと画角)別に記載したリスト
ii)位置合わせに利用可能な大きな画像特徴が存在する確率を示すマップ
iii)低倍率画像Dl及び高倍率画像Dhに対する特徴抽出結果
iv)低倍率画像Dl及び高倍率画像Dhに関する画質指標値(S/N比や平均輝度値)
が考えられる。
i)は取得要否判定及び取得倍率の設定に用いられる。
ii)は視神経乳頭やアーケード血管((図6(c)の高倍率画像DhをU字型に囲む網膜血管))のような眼部のランドマークが存在する位置を多数の健常者に対して取得し存在確率として表示したマップであり、取得要否判定、取得倍率、取得位置の設定に利用できる。図8(e)に該存在確率マップの右眼、(f)に左眼の場合の例を示す。
iii)は取得要否判定、取得倍率、取得位置の設定に用いることができる。
iv)は、i)もしくはii)に加えて補助的に用いることができる。例えば、画質指標値の値が閾値Tq未満の場合に強制的に中間倍率画像Dmの取得が必要と判定したり、選択しうる全ての中間倍率を選択したり、取得位置の間隔を狭く設定する。本実施形態では中間倍率画像Dmの取得条件のうち取得要否判定及び倍率設定をi)、取得位置をii)を用いて決定する。なお、iii)を用いる場合については実施形態2及び3で説明する。
決定部131は、低倍率画像Dl及び高倍率画像Dhに関する属性情報を記憶部120より取得する。具体的には画角[μm]及び画素サイズ[μm/pixel]、固視位置及び合焦位置、フレームレート[frame/sec]及びフレーム数[frame]、取得日時、の情報を取得する。
要否判定部1311は、中間倍率画像取得の要否判定を行う。本実施形態では、眼部で一般的に観察されやすい画像特徴を取得倍率(実際には画角と画素サイズ)別に記載した下記のリストを用いて判定する。
なお、画角や画素サイズの単位はスキャナの振り角に基づいて[deg]及び[deg/pixel]で表記してもよいし、健常者の眼軸長(24mm)を前提として[μm]及び[μm/pixel]で表記してもよい。
倍率決定部1312は、S720において中間倍率画像Dmの取得が必要と判定された場合に、中間倍率画像Dmの取得倍率(画角及び画素サイズ)を決定する。中間倍率画像Dmの取得倍率の設定は以下の方針で行う。
i)低倍率画像Dlと共通する画像特徴を持つ中間倍率画像Dmのうち最も高い倍率を持つ画像の倍率を第1の中間倍率、高倍率画像Dhと共通する画像特徴を持つ中間倍率画像Dmのうち最も低い倍率を持つ画像の倍率を第2の中間倍率とする。両中間倍率が同じであれば該共通する中間倍率を設定して本ステップを終了する。
ii)両中間倍率が異なる場合に、両中間倍率画像に共通する画像特徴が前記画像特徴リストにあれば各々を中間倍率として決定し、本ステップを終了する。
iii)もしii)において共通する画像特徴が前記画像特徴リストになければ、低倍率画像Dlを第1の中間倍率画像、高倍率画像Dhを第2の中間倍率画像、第1の中間倍率画像を第3の中間倍率画像、第2の中間倍率画像を第4の中間倍率画像と置き換えて再び上記i)及びii)を実行する。
位置決定部1313は、S730で設定された取得倍率(画角及び画素サイズ)を持つ中間倍率画像Dmjの取得位置と合焦位置を設定する。
順序決定部1314は、S720からS740で決定された中間倍率画像Dmjの取得順序を決定する。
画像取得部110が取得した各動画像(低倍率画像Dl、中間倍率画像Dm、高倍率画像Dh)から、代表画像を生成する。すなわち、異なる倍率の画像の少なくとも一方は、眼部の断層像もしくは眼部の動画像に基づいて生成された画像である。
画角番号を初期化する。該初期値Ainitは位置合わせを行う順序の設定により値が変わり得るが、本実施形態では低倍率画像Dlから倍率が低い順に位置合わせを行う。すなわち、低倍率画像Dlのもつ画角番号(1)をAinitに代入してS930へ処理を進める。
位置合わせ部132は、同一倍率の画像が複数あって互いに重なる領域がある場合(図8(d)の高倍率画像(実線矩形領域))に、該重なり領域に関して画像間類似度を算出し、最も画像間類似度が最大となる位置に同一倍率画像同士の位置を合わせる。
位置合わせ部132は、画角番号が隣接した画像同士の位置合わせを行う。
画角番号を1だけ増やし、S960へ処理を進める。
画角番号が最大値Amaxを超えたか否かを判定し、最大値Amaxより大きい場合にはS540に処理を進める。画角番号が最大値以下の場合にはS930に処理を戻す。
表示部133は、高倍率画像Dhの表示フレームを選択する。
表示部133は、複数の高倍率画像Dhkが取得されている場合に高倍率画像Dhk間の濃度差を補正する。任意の公知の輝度補正法を適用でき、本実施形態では各高倍率画像DhkにおいてヒストグラムHkを生成し、ヒストグラムHkの平均と分散が高倍率画像Dhk間で共通した値になるように各高倍率画像Dhkの輝度値を線形変換することにより濃度差を補正する。
表示部133は、高倍率画像Dhを動画像として低倍率画像Dl上に表示させる場合に、高倍率画像Dhの再生速度を設定する。再生速度は、画像表示エリア内に再生速度調整スライダや、コマ送りボタンを配置しておき、指示取得手段140を通じて操作者が指定することにより調整する。
表示部133は、各高倍率画像Dhの表示・非表示や表示倍率を設定する。
表示部133は、低倍率画像Dlに関連付けられた眼部断層像の走査位置情報(走査線や走査範囲)を高倍率画像Dh上に重畳表示する。本実施形態では、図6(h)に示すように、低倍率画像Dl上に十字型走査(クロススキャン)したBスキャン像の走査位置と、矩形領域内を走査した3次元断層像の走査範囲が重畳されており、Bスキャン像の走査位置が高倍率画像上に重畳表示される。
本実施形態では、高倍率画像Dhとして補償光学SLO画像、低倍率画像Dlとして広画角断層像を取得する。高倍率画像Dhと低倍率画像Dlにおける特徴抽出結果に基づいて中間倍率画像の取得要否・取得倍率・取得位置を判定し、中間倍率画像Dmを取得する。次に、倍率の低い画像から順に倍率の近い画像同士を共通する画像特徴に基づき位置合わせすることで低倍率画像Dl上の高倍率画像Dhの相対位置を決定する場合について説明する。
画像特徴取得部134は、低倍率画像Dlから視神経乳頭とアーケード血管Aを、高倍率画像Dhから視細胞Pと毛細血管を検出する。すなわち、画像特徴取得部134は異なる倍率の画像から画像特徴を取得する。
i)健常者の視神経乳頭部をSLOで取得した視神経乳頭テンプレート画像を予め用意しておき、該テンプレート画像とのテンプレートマッチングにより視神経乳頭の概略位置を検出する。
ii)i)で得られた位置に可変形状モデルを配置し、変形が完了した該可変形状モデルの位置を視神経乳頭領域の境界とする。
2)では1)で生成されたノイズ低減後の高倍率画像Dhに対して閾値Tbで二値化し、視細胞Pを検出する。
(a) フレーム間位置合わせ済みの高倍率画像Dhの隣接フレーム間で差分処理を行う(差分動画像を生成する)。
(b) (a)で生成した差分動画像の各x−y位置においてフレーム方向に関する輝度統計量(分散)を算出する
(c) 前記差分動画像の各x−y位置において輝度分散が閾値Tv以上の領域を血球が移動した領域、すなわち毛細血管領域として特定する
なお毛細血管の検出処理はこの方法に限定されるものではなく、任意の公知の方法を用いて良い。例えば、高倍率画像Dhの特定のフレームに対し線状構造を強調するフィルタを適用して血管を検出してもよい。
決定部131において、低倍率画像Dlと高倍率画像Dhとの中間の解像度を持つ中間倍率画像Dmの取得に関する要否と、該中間倍率画像Dmの取得が必要と判定した場合に中間倍率画像Dmの取得倍率、取得位置、取得順序を決定する。また、決定部131は画像取得部110に対して中間倍率画像Dmの取得要求を行い、画像取得部110が中間倍率画像Dmを取得する。
位置合わせ部132は、低倍率画像Dlと高倍率画像Dhとの位置合わせを行う。S1230において中間倍率画像Dmが取得されている場合には、該中間倍率画像Dmも用いて低倍率画像Dl上の高倍率画像Dhの位置が決定される。ここで、位置合わせ手段の一例に相当する位置合わせ部132は、画像、画像の取得条件または画像特徴の少なくとも一つに基づいて前記画像の位置合わせを行う順序を決定する。
表示部133は、S1240において得られた位置合わせパラメータ値に基づき、図6(h)に示すように低倍率画像Dl上に高倍率画像Dhを重畳表示する。本実施形態において低倍率画像Dlは3次元断層像であるため、実際には低倍率画像Dlのz軸方向の投影画像(平均値投影画像)を生成し、該投影画像上に高倍率画像Dhを重畳表示する。なお本実施形態では低倍率画像Dl上の特定の走査位置を該投影画像上に十字型の矢印で表示し、各矢印の位置で切り出した断層像を、(高倍率画像Dhと該投影画像との)重畳画像と並べて表示させる。
決定部131は、画像特徴取得部134がS1220で取得した眼部の画像特徴と、属性情報を記憶部120より取得する。
要否判定部1311は、中間倍率画像取得の要否判定を行う。本実施形態では、S1310で取得された低倍率画像Dlの画像特徴と高倍率画像Dhの画像特徴との間で共通する画像特徴がなければ中間倍率画像Dmの取得が必要と判定し、共通する画像特徴があれば中間倍率画像Dmの取得は不要と判定する。
倍率決定部1312は、S1320において中間倍率画像Dmの取得が必要と判定された場合に、中間倍率画像Dmの倍率(画角及び画素サイズ)の設定を行う。
位置決定部1313は、S1330で設定された倍率(画角及び画素サイズ)を持つ中間倍率画像Dmjの取得位置と合焦位置を設定する。
順序決定部1314は、S1320からS1340で決定された中間倍率画像Dmjの取得順序を決定する。
a)取得倍率を固定もしくは選択式とし、取得位置を任意設定可能にする
(図8(a))という方針で決定したが、それに限定されるものではない。
例えば、第1実施形態のb)で説明した
b)取得倍率を任意設定可能とし、取得位置は高倍率画像Dhと同じにする
(図8(b))という方針で決定してもよい。b)の方法を用いる場合は操作者によって選択された高倍率画像Dhの取得倍率(画角と画素サイズ)及び取得位置、合焦位置の設定に基づいて中間倍率画像Dmの取得要否、取得倍率、合焦位置を自動選択する。
本実施形態では、高倍率画像Dhとして補償光学断層像、低倍率画像Dlとして広画角断層像を取得する。高倍率画像Dhと低倍率画像Dlにおける特徴抽出結果に基づいて中間倍率画像Dmの取得要否・取得倍率・取得位置を判定し、中間倍率画像Dmを取得する。次に、倍率の低い画像から順に倍率の近い画像同士を共通する画像特徴に基づき位置合わせすることで低倍率画像Dl上の高倍率画像Dhの相対位置を決定する場合について説明する。
画像特徴取得部134は、記憶部120に格納された低倍率画像Dl、すなわち3次元の眼部断層像から、画像特徴として、内境界膜、視神経線維層境界、神経節細胞層境界、内網状層境界、外網状層境界、視細胞内節外節境界、網膜色素上皮境界、視神経乳頭部、中心窩、網膜血管を抽出する。ただし、網膜血管領域はx−y平面に投影された領域として特定する。そして、抽出した画像特徴のうち図6(a)に示すように、内境界膜B1、内網状層境界B4、視細胞内節外節境界B5、網膜色素上皮境界B6及び中心窩F1を取得する。また、取得した各々の画像特徴を記憶部120に格納する。
決定部131において、低倍率画像Dlと高倍率画像Dhとの中間の解像度を持つ中間倍率画像Dmjの取得に関する要否と、該中間倍率画像Dmjの取得が必要と判定した場合に中間倍率画像Dmjの取得倍率、取得位置、取得順序を決定する。また、決定部131は画像取得部110に対して中間倍率画像Dmの取得要求を行い、画像取得部110が中間倍率画像Dmを取得する。
1)画像取得部110が断層像撮像装置50に対して中間倍率画像Dmの取得を要求し、断層像撮像装置50が取得した中間倍率画像Dmを記憶部120に転送する
2)画像取得部110がデータサーバ40に対して保管されている中間倍率画像Dmの転送を要求し、データサーバから中間倍率画像Dmを転送する
の2つがあり、本実施形態では1)の場合として説明する。
位置合わせ部132は、低倍率画像Dlと高倍率画像Dhとの位置合わせを行う。S1230において中間倍率画像Dmjが取得されている場合には、該中間倍率画像Dmjも用いて低倍率画像Dl上の高倍率画像Dhの位置が決定される。
表示部133は、S1240において得られた位置合わせパラメータの値に基づき、図6(h)に示すように低倍率画像Dl上に高倍率画像Dhを重畳表示する。本実施形態において低倍率画像Dl及び高倍率画像Dhはともに3次元断層像であるため、実際にはz軸方向に関し低倍率画像Dlと高倍率画像Dhの投影画像(平均値投影画像)を生成し、低倍率画像Dlの投影画像上に高倍率画像Dhの投影画像を重畳表示する。
決定部131は、画像特徴取得部134がS1220で取得した眼部の画像特徴と、属性情報を記憶部120より取得する。
要否判定部1311は、中間倍率画像取得の要否判定を行う。本実施形態では、S1310で取得された低倍率画像Dlの画像特徴と高倍率画像Dhの画像特徴との間で共通する画像特徴がなければ中間倍率画像Dmの取得が必要と判定し、共通する画像特徴があれば中間倍率画像Dmの取得は不要と判定する。
倍率決定部1312は、S1320において中間倍率画像Dmの取得が必要と判定された場合に、中間倍率画像Dmの倍率(画角及び画素サイズ)の設定を行う。
位置決定部1313は、S1330で設定された倍率(画角及び画素サイズ)を持つ中間倍率画像Dmjの取得位置とコヒーレンスゲート位置を設定する。ただし、本実施形態では断層像撮像装置50はSD−OCTとして構成されているため、各倍率の画像ともz軸方向に関しては網膜が撮像されており深度方向の取得位置は各倍率とも同じ位置(網膜全体)を取得するものとする。
a)取得倍率を固定もしくは選択式とし、取得位置を任意設定可能にする
(図8(a))という方針で決定したが、それに限定されるものではない。
b)取得倍率を任意設定可能とし、取得位置は高倍率画像Dhと同じにする
(図8(b))という方針で決定してもよい。b)の方法を用いる場合は操作者によって選択された高倍率画像Dhの取得倍率(画角と画素サイズ)及び取得位置、合焦位置の設定に基づいて中間倍率画像Dmの取得要否、取得倍率、合焦位置を自動選択する。
これにより、画角や画素サイズが大きく異なる眼部画像同士を正確に位置合わせできる。
上述の実施形態では位置合わせ対象画像をSLO画像や眼部断層像として実現したが、本発明の実施形態はこれに限定されない。例えば、低倍率画像Dlを眼底カメラ画像、高倍率画像Dhを補償光学眼底カメラ画像として実現してもよい。また、低倍率画像Dlを広画角SLO画像、高倍率画像Dhを補償光学断層像の投影像のようにモダリティの異なる画像として実現してもよい。また、補償光学SLO像撮像装置20と断層像撮像装置50との複合機と、眼科装置10が直接接続された構成として実現してもよい。
131 決定部
132 位置合わせ部
Claims (10)
- 第1の倍率の画像と、前記第1の倍率とは異なる倍率である第2の倍率の画像を取得する画像取得手段と、
前記取得された第1の倍率の画像と第2の倍率の画像を位置合わせする位置合わせ手段とを有する眼科装置であって、
前記位置合わせ手段により前記第1の倍率の画像と前記第2の倍率の画像の位置合わせを行う際に、前記第1の倍率と前記第2の倍率の中間の倍率の画像が必要か否か判定する判定手段を更に有し、
前記判定手段により前記中間の倍率の画像が必要と判定した場合、前記画像取得手段により前記中間の倍率の画像を取得することを特徴とする眼科装置。 - 前記第1の倍率の画像と前記第2の倍率の画像または前記第1の倍率の画像と前記第2の倍率の画像の取得条件の少なくとも一方に基づいて前記中間の倍率の画像の取得法を決定する決定手段を更に有し、
前記決定手段は、前記第1の倍率の画像と前記第2の倍率の画像または前記第1の倍率の画像と前記第2の倍率の画像の取得条件の少なくとも一方に基づいて、前記中間の倍率の画像の取得倍率、画角、画素サイズ、取得位置、合焦位置、取得順序の少なくとも一つを決定することを特徴とする請求項1に記載の眼科装置。 - 前記第1の倍率の画像と前記第2の倍率の画像から画像特徴を取得する画像特徴取得手段を更に有し、
前記決定手段は前記画像特徴に基づき前記中間の倍率の画像の取得法を決定することを特徴とする請求項2に記載の眼科装置。 - 前記位置合わせ手段は、前記取得法または前記画像特徴の少なくとも一つに基づいて前記画像の位置合わせを行う順序を決定することを特徴とする請求項2又は請求項3に記載の眼科装置。
- 表示手段を更に有し、
各画像が類似した輝度特性を持つように輝度調整して前記第1の倍率の画像上に前記第2の倍率の画像を表示することを特徴とする請求項1乃至請求項4のいずれか1項に記載の眼科装置。 - 前記表示手段は、前記第1の倍率の画像上に、断層像の走査位置、レーザの照射位置、眼底形状分布、網膜感度分布の少なくとも一つを重畳表示することを特徴とする請求項5に記載の眼科装置。
- 前記第1の倍率の画像上に表示される複数の第2の倍率の画像同士が互いに重なり合う関係にある場合に、画像の重なり順序、表示の可否、もしくは透明度の少なくとも一つを制御する手段を更に有することを特徴とする請求項5又は請求項6に記載の眼科装置。
- 前記第1の倍率の画像と前記第2の倍率の画像の少なくとも一方が、眼部の断層像もしくは眼部の動画像に基づいて生成された画像であることを特徴とする請求項1乃至請求項7のいずれか1項に記載の眼科装置。
- 第1の倍率の画像と、前記第1の倍率とは異なる倍率である第2の倍率の画像を取得する画像取得工程と、
前記取得された第1の倍率の画像と第2の倍率の画像を位置合わせする位置合わせ工程とを有する位置合わせ方法であって、
前記位置合わせ工程において位置合わせを行う際に、前記第1の倍率と前記第2の倍率の中間の倍率の画像が必要か否か判定する判定工程と、
前記判定工程により前記中間の倍率の画像が必要と判定した場合、前記中間の倍率の画像を取得する第2の画像取得工程を有することを特徴とする位置合わせ方法。 - 請求項9に記載の各工程をコンピュータで実行させるためのプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017045341A JP6419238B2 (ja) | 2017-03-09 | 2017-03-09 | 眼科装置および位置合わせ方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017045341A JP6419238B2 (ja) | 2017-03-09 | 2017-03-09 | 眼科装置および位置合わせ方法 |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2012287253A Division JP6108827B2 (ja) | 2012-12-28 | 2012-12-28 | 眼科装置および位置合わせ方法 |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018189459A Division JP6882242B2 (ja) | 2018-10-04 | 2018-10-04 | 眼科装置およびその制御方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2017100033A JP2017100033A (ja) | 2017-06-08 |
JP6419238B2 true JP6419238B2 (ja) | 2018-11-07 |
Family
ID=59017016
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017045341A Expired - Fee Related JP6419238B2 (ja) | 2017-03-09 | 2017-03-09 | 眼科装置および位置合わせ方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6419238B2 (ja) |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5912720A (en) * | 1997-02-13 | 1999-06-15 | The Trustees Of The University Of Pennsylvania | Technique for creating an ophthalmic augmented reality environment |
JP3377446B2 (ja) * | 1998-07-13 | 2003-02-17 | 日本電信電話株式会社 | 眼底画像合成方法および眼底画像合成装置ならびに記録媒体 |
US20030157464A1 (en) * | 2002-02-20 | 2003-08-21 | Cesare Tanassi | Instrument for eye examination and method |
JP5845608B2 (ja) * | 2011-03-31 | 2016-01-20 | 株式会社ニデック | 眼科撮影装置 |
-
2017
- 2017-03-09 JP JP2017045341A patent/JP6419238B2/ja not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2017100033A (ja) | 2017-06-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6108827B2 (ja) | 眼科装置および位置合わせ方法 | |
JP6174908B2 (ja) | 情報処理装置、情報処理方法、及び、コンピュータプログラム | |
EP2786699B1 (en) | Ophthalmologic apparatus | |
JP6438216B2 (ja) | 画像生成装置および画像生成方法 | |
JP6463047B2 (ja) | 眼科装置及び眼科装置の作動方法 | |
JP6463048B2 (ja) | 画像処理装置及び画像処理装置の作動方法 | |
US10561311B2 (en) | Ophthalmic imaging apparatus and ophthalmic information processing apparatus | |
JP7348374B2 (ja) | 眼科情報処理装置、眼科撮影装置、眼科情報処理方法、及びプログラム | |
JP6882242B2 (ja) | 眼科装置およびその制御方法 | |
JP6419238B2 (ja) | 眼科装置および位置合わせ方法 | |
JP6732093B2 (ja) | 情報処理装置、情報処理装置の制御方法、及び、コンピュータプログラム | |
JP6594499B2 (ja) | 画像処理装置及び画像処理装置の作動方法 | |
JP6636188B2 (ja) | 情報処理装置、情報処理装置の制御方法、及び、コンピュータプログラム | |
JP6465930B2 (ja) | 情報処理装置、情報処理装置の制御方法、及び、コンピュータプログラム | |
WO2020209012A1 (ja) | 画像解析方法及び画像解析装置 | |
JP2020171664A (ja) | 画像解析方法及び画像解析装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170407 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20170407 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20180410 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180517 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20180911 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20181009 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6419238 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
LAPS | Cancellation because of no payment of annual fees |