JP2000023921A

JP2000023921A - 眼底画像合成方法および眼底画像合成装置ならびに記録媒体

Info

Publication number: JP2000023921A
Application number: JP10197878A
Authority: JP
Inventors: Katsuyoshi Tanabe; 勝義田邊; Hidetoshi Yagi; 秀俊八木; Satoshi Sakuma; 聡佐久間
Original assignee: Nippon Telegraph and Telephone Corp
Current assignee: Nippon Telegraph and Telephone Corp
Priority date: 1998-07-13
Filing date: 1998-07-13
Publication date: 2000-01-25
Anticipated expiration: 2018-07-13
Also published as: JP3377446B2

Abstract

(57)【要約】【課題】コンピュータによる高精度の合成眼底画像の
作成。【解決手段】入力手段，特徴抽出手段，相関処理手
段，画像合成手段，画像蓄積手段，データ蓄積手段，表
示手段および前記各手段を制御する制御手段を備えた眼
底画像合成装置を用いて同一被験者の視線の異なる２枚
の眼底画像を繋ぎあわせて一枚の合成眼底画像を作成す
る眼底画像合成方法であって、同一被験者の視線の異な
る複数の眼底画像の情報を前記入力手段から入力する入
力段階と、前記入力段階で入力された複数の入力眼底画
像において各眼底画像の特徴点を抽出する特徴抽出段階
と、前記特徴抽出段階で抽出された特徴点の周辺領域の
相関をとる相関処理段階と、前記相関処理段階で得られ
た相関の高い領域を各画像間で合致させて行う画像の合
成によって合成眼底画像を組み立てる画像合成段階とを
有する。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、眼底カメラを用い
て撮影した同一被験者の視線の異なる複数の眼底画像を
コンピュータによって繋ぎ合わせて合成して一枚の眼底
画像（合成眼底画像）を組み立てる眼底画像合成方法お
よび眼底画像合成装置ならびにプログラムを記録した記
録媒体に関するものである。

【０００２】

【従来の技術】従来、この種の眼底画像の合成に関して
は、医療機関において、医師またはフォトグラファーが
撮影した同一被験者の視線の異なる複数枚の眼底写真を
ポラロイドなどの紙に出力し、ハサミ，糊や接着テープ
などを用いて人手で写真を繋ぎ合わせることにより、一
枚の眼底画像を張り合わせる方法が一般的であった。

【０００３】

【発明が解決しようとする課題】しかしながら、このよ
うな合成眼底画像の作成作業は、手作業によるため、例
えば、一人当たり３０分から１時間程度掛かり、作業性
が低いという問題がある。この結果、患者に対する眼底
画像の合成作業は少人数分しかできない。また、この作
業は手作業であることから神経を使い、やり直しも多く
発生し、作業者にとって身体的ばかりでなく精神的な負
担増になるという問題もある。

【０００４】本発明は上記の手作業による欠点を解消す
るものであり、その目的とするところは、コンピュータ
処理により同一被験者の視線の異なる複数枚の眼底画像
を電子的にモンタージュ合成することにより、短時間で
精神的負担なく一枚の合成眼底画像を作成する技術を提
供することにある。

【０００５】本発明の前記ならびにその他の目的と新規
な特徴は、本明細書の記述及び添付図面によって明らか
にする。

【０００６】

【課題を解決するための手段】本願において開示される
発明のうち代表的なものの概要を簡単に説明すれば、下
記のとおりである。

【０００７】（１）入力手段，特徴抽出手段，相関処理
手段，画像合成手段，画像蓄積手段，データ蓄積手段，
表示手段および前記各手段を制御する制御手段を備えた
眼底画像合成装置を用いて同一被験者の視線の異なる２
枚の眼底画像を繋ぎあわせて一枚の合成眼底画像を作成
する眼底画像合成方法であって、同一被験者の視線の異
なる複数の眼底画像の情報を前記入力手段から入力する
入力段階と、前記入力段階で入力された複数の入力眼底
画像において各眼底画像の特徴点を抽出する特徴抽出段
階と、前記特徴抽出段階で抽出された特徴点の周辺領域
の相関をとる相関処理段階と、前記相関処理段階で得ら
れた相関の高い領域を各画像間で合致させて行う画像の
合成によって合成眼底画像を組み立てる画像合成段階と
を有する。前記入力段階で入力された複数の前記眼底画
像を画像処理によって２値化して血管画像を抽出する段
階と、抽出された前記血管画像を細線化して血管の交点
を求める段階と、合成対象となる前記２枚の眼底画像の
うちの第１の眼底画像上のある血管の１交点を中心とし
た一定サイズの周辺領域に対する第２の眼底画像上の全
ての血管の交点およびその近傍点を中心とした周辺領域
との相関を求め、その相関の最大値を第１の眼底画像の
前記血管の１交点と対応する第２の眼底画像の位置とし
て交点ペアを見つける交点相関計算処理段階と、前記第
１の眼底画像上の他の各交点に対する第２の眼底画像上
の交点ペアを見つける前記交点相関計算処理を行い、見
つけた各交点ペアの中で最大でかつある閾値以上の相関
値を持つ交点ペアを前記２枚の眼底画像の合成位置とす
る合成位置決定処理段階と、前記合成位置決定処理で決
定された交点ペアの位置を合致させることにより前記２
枚の眼底画像を合成する段階と、合成された合成画像を
表示する段階と、合成画像を蓄積する段階とを有する。

【０００８】このような眼底画像合成方法において下記
の手段を採用することができる。

【０００９】（ａ）前記２枚の眼底画像を合成する段階
または合成された合成眼底画像を表示する段階におい
て、前記２枚の眼底画像のデータをそのまま保持してお
き、前記２枚の眼底画像の表示の優先度を定め、前記２
枚の眼底画像が重なっている部分については優先度の高
い方の眼底画像を前面に表示し、他方の眼底画像を背面
に隠して表示するように合成または表示する。

【００１０】（ｂ）前記２枚の眼底画像を合成する段階
または合成された合成眼底画像を表示する段階におい
て、前記２枚の眼底画像間で最も相関の高い血管の交点
または前記交点の近傍の近傍点を通る直線で、前記２枚
の眼底画像が重なっている部分を分けて前記２枚の眼底
画像を合成または表示する。

【００１１】（ｃ）前記２枚の眼底画像を合成する段階
または合成された合成眼底画像を表示する段階におい
て、重なっている前記２枚の眼底画像の外側の枠が交わ
る２点を結ぶ直線で、前記２枚の眼底画像が重なってい
る部分を分けて前記２枚の眼底画像を合成または表示す
る。

【００１２】（ｄ）前記２枚の眼底画像を合成する段階
または合成された合成眼底画像を表示する段階におい
て、前記２枚の眼底画像の重なっている部分の各点毎の
平均値または各点の周辺領域の平均値を前記点の値とす
ることを含む演算処理を行って前記２枚の眼底画像を合
成または表示する。

【００１３】（ｅ）前記２枚の眼底画像を合成する段階
において、前記２枚の眼底画像の重なっている部分にお
ける相関の高い対応する３点を合致させるように、また
は３点以上の点を最小２乗近似法を用いて可能な限り合
致させるように眼底画像を変形させて合成または表示す
る。

【００１４】（ｆ）前記２枚の眼底画像を合成する段階
において、最も高い相関値がある閾値以下の場合に、前
記２枚の眼底画像中で一定サイズの矩形領域部分の相関
値を計算し、前記相関値が最も高いある閾値以上の領域
同士を合致させて合成または表示させる。

【００１５】このような眼底画像合成方法においては、
下記の眼底画像合成装置が使用される。眼底画像合成装
置は同一被験者の視線の異なる２枚の眼底画像を繋ぎあ
わせて一枚の合成眼底画像を作成する眼底画像合成装置
であって、複数の視線の異なる眼底画像が入力される入
力手段と、前記入力手段から入力された複数の入力眼底
画像の特徴点を抽出する特徴抽出手段と、前記特徴抽出
手段によって抽出された特徴点の周辺領域の相関をとる
相関処理手段と、前記相関処理手段によって得られた相
関の高い領域を各画像間で合致させることによって合成
画像を作成する画像合成手段と、前記入力手段から入力
された各画像情報を蓄積する画像蓄積手段と、前記各手
段で作成したデータを蓄積するデータ蓄積手段と、前記
各情報やデータを表示する表示手段とを有する。

【００１６】このような眼底画像合成方法では下記の記
録媒体が使用される。記録媒体はコンピュータによって
同一被験者の視線の異なる２枚の眼底画像を繋ぎあわせ
て一枚の合成眼底画像を作成するためのプログラムを記
録した記録媒体であって、前記プログラムはコンピュー
タに同一被験者の視線の異なる複数の眼底画像の同一傾
向の特徴点を抽出させ、前記抽出された特徴点の周辺領
域の相関を求めさせ、前記相関の高い領域を各画像間で
合致させるとともに合成画像を作成させて合成眼底画像
を組み立てる。前記プログラムはコンピュータに前記複
数の前記眼底画像を画像処理によって２値化して血管画
像を抽出させ、抽出された前記血管画像を細線化して血
管の交点を求めさせ、合成対象となる前記２枚の眼底画
像のうちの第１の眼底画像上のある血管の１交点を中心
とした一定サイズの周辺領域に対する第２の眼底画像上
の全ての血管の交点およびその近傍点を中心とした周辺
領域との相関を求めさせ、その相関の最大値を第１の眼
底画像の前記血管の１交点と対応する第２の眼底画像の
位置として交点ペアを見つける交点相関計算処理をさ
せ、前記第１の眼底画像上の他の各交点に対する第２の
眼底画像上の交点ペアを見つける前記交点相関計算処理
を行わせ、見つけた各交点ペアの中で最大でかつある閾
値以上の相関値を持つ交点ペアを前記２枚の眼底画像の
合成位置とする合成位置決定処理を行わせ、前記合成位
置決定処理で決定された交点ペアの位置を合致させるこ
とにより前記２枚の眼底画像を合成させ、合成された合
成画像を表示させ、合成画像を蓄積させる。

【００１７】このような記録媒体は下記のプログラムを
採用することができる。

【００１８】（ａ）前記プログラムはコンピュータに前
記２枚の眼底画像を合成させまたは合成された合成眼底
画像を表示させる際、前記２枚の眼底画像のデータをそ
のまま保持させておき、前記２枚の眼底画像の表示の優
先度を定め、前記２枚の眼底画像が重なっている部分に
ついては優先度の高い方の眼底画像を前面に表示させ、
他方の眼底画像を背面に隠して表示させるように合成ま
たは表示させる。

【００１９】（ｂ）前記プログラムはコンピュータに前
記２枚の眼底画像を合成させまたは合成された合成眼底
画像を表示させる際、前記２枚の眼底画像間で最も相関
の高い血管の交点または前記交点の近傍の近傍点を通る
直線で、前記２枚の眼底画像が重なっている部分を分け
て前記２枚の眼底画像を合成または表示させる。

【００２０】（ｃ）前記プログラムはコンピュータに前
記２枚の眼底画像を合成させまたは合成された合成眼底
画像を表示させる際、重なっている前記２枚の眼底画像
の外側の枠が交わる２点を結ぶ直線で、前記２枚の眼底
画像が重なっている部分を分けて前記２枚の眼底画像を
合成または表示させる。

【００２１】（ｄ）前記プログラムはコンピュータに前
記２枚の眼底画像を合成させまたは合成された合成眼底
画像を表示させる際、前記２枚の眼底画像の重なってい
る部分の各点毎の平均値または各点の周囲領域の平均値
を前記点の値とすることを含む演算処理を行って前記２
枚の眼底画像を合成または表示させる。

【００２２】（ｅ）前記プログラムはコンピュータに前
記２枚の眼底画像を合成させる際、前記２枚の眼底画像
の重なっている部分における相関の高い対応する３点を
合致させるように、または３点以上の点を最小２乗近似
法を用いて可能な限り合致させるように眼底画像を変形
させて合成させるように合成または表示させる。

【００２３】（ｆ）前記プログラムはコンピュータに前
記２枚の眼底画像を合成させる際、最も高い相関値があ
る閾値以下の場合に、前記２枚の眼底画像中で一定サイ
ズの矩形領域部分の相関値を計算させ、前記相関値が最
も高いある閾値以上の領域同士を合致させるように合成
または表示させる。

【００２４】画像間の相関を求める際に、画像中の全て
の点を中心とした相関を求めることは、処理時間がかか
るため、本発明では調べる対象を血管の交点（分岐点お
よび交叉点）と前記交点の近傍の近傍点に限定すること
によって効率的な合成処理を行うことができる。限定し
た血管の分岐点近傍および交叉点近傍は血管が３ないし
４方向に通っているため、位置が一意に特定できる。こ
のため、この領域が２枚の眼底画像に同じ配置で存在す
れば、同一領域であることが分かり、この領域を重ねる
ことにより合成が可能となる。

【００２５】本発明での一定サイズの周辺領域はａ×ａ
の正方形やａ×ｂの矩形領域が計算処理時間の点からは
高速になるが、特徴点を中心とした円など他の形状の領
域であっても構わない。

【００２６】また、入力される眼底画像は、少なくとも
１以上の眼底画像と重なり合っている領域があることを
前提としている。したがって、重なりが１つもない眼底
画像が入力された場合は、本発明で処理することは可能
であるが、重なる場所が見つからず合成されないことに
なる。

【００２７】

【発明の実施の形態】以下、図面を参照して本発明の実
施形態を詳細に説明する。なお、実施形態を説明するた
めの全図において、同一機能を有するものは同一符号を
付け、その繰り返しの説明は省略する。

【００２８】（実施形態１）図１乃至図１０は、本発明
の一実施形態（実施形態１）である眼底画像合成技術に
係わる図である。

【００２９】本実施形態１の眼底画像合成方法では、コ
ンピュータによって同一被験者の視線の異なる複数の眼
底画像を繋ぎあわせて合成して一枚の眼底画像を組み立
てる。この際、図４に示す眼底画像合成装置が使用され
る。

【００３０】眼底画像合成装置は、制御部２０３と、こ
の制御部２０３によってそれぞれ制御される入力部２０
２，特徴抽出部２０４，相関処理部２０５，画像合成部
２０６，画像蓄積部２０７，データ蓄積部２０８および
表示部２０９とを有するコンピュータ構成になってい
て、同一被験者の視線の異なる２枚の眼底画像を繋ぎあ
わせて一枚の合成眼底画像を作成するためのプログラム
を記録した記録媒体を制御部２０３に装填した後、前記
プログラムによって順次処理を行って合成眼底画像を組
み立てる構成になっている。

【００３１】また、コンピュータには記録媒体が装着さ
れ、眼底画像合成はこの記録媒体に記録されたプログラ
ムによって行われる。前記記録媒体は以下の構成になっ
ている。

【００３２】記録媒体はコンピュータによって同一被験
者の視線の異なる２枚の眼底画像を繋ぎあわせて一枚の
合成眼底画像を作成するためのプログラムを記録した記
録媒体であって、前記プログラムはコンピュータに同一
被験者の視線の異なる複数の眼底画像の同一傾向の特徴
点を抽出させ、前記抽出された特徴点の周辺領域の相関
を求めさせ、前記相関の高い領域を各画像間で合致させ
るとともに合成画像を作成させて合成眼底画像を組み立
てる。前記プログラムはコンピュータに前記複数の前記
眼底画像を画像処理によって２値化して血管画像を抽出
させ、抽出された前記血管画像を細線化して血管の交点
を求めさせ、合成対象となる前記２枚の眼底画像のうち
の第１の眼底画像上のある血管の１交点を中心とした一
定サイズの周辺領域に対する第２の眼底画像上の全ての
血管の交点およびその近傍点を中心とした周辺領域との
相関を求めさせ、その相関の最大値を第１の眼底画像の
前記血管の１交点と対応する第２の眼底画像の位置とし
て交点ペアを見つける交点相関計算処理をさせ、前記第
１の眼底画像上の他の各交点に対する第２の眼底画像上
の交点ペアを見つける前記交点相関計算処理を行わせ、
見つけた各交点ペアの中で最大でかつある閾値以上の相
関値を持つ交点ペアを前記２枚の眼底画像の合成位置と
する合成位置決定処理を行わせ、前記合成位置決定処理
で決定された交点ペアの位置を合致させることにより前
記２枚の眼底画像を合成させ、合成された合成画像を表
示させ、合成画像を蓄積させる。

【００３３】このような記録媒体は下記のプログラムを
採用することができる。

【００３４】（ａ）前記プログラムはコンピュータに前
記２枚の眼底画像を合成させまたは合成された合成眼底
画像を表示させる際、前記２枚の眼底画像のデータをそ
のまま保持させておき、前記２枚の眼底画像の表示の優
先度を定め、前記２枚の眼底画像が重なっている部分に
ついては優先度の高い方の眼底画像を前面に表示させ、
他方の眼底画像を背面に隠して表示させるように合成ま
たは表示させる。

【００３５】（ｂ）前記プログラムはコンピュータに前
記２枚の眼底画像を合成させまたは合成された合成眼底
画像を表示させる際、前記２枚の眼底画像間で最も相関
の高い血管の交点または前記交点の近傍の近傍点を通る
直線で、前記２枚の眼底画像が重なっている部分を分け
て前記２枚の眼底画像を合成または表示させる。

【００３６】（ｃ）前記プログラムはコンピュータに前
記２枚の眼底画像を合成させまたは合成された合成眼底
画像を表示させる際、重なっている前記２枚の眼底画像
の外側の枠が交わる２点を結ぶ直線で、前記２枚の眼底
画像が重なっている部分を分けて前記２枚の眼底画像を
合成または表示させる。

【００３７】（ｄ）前記プログラムはコンピュータに前
記２枚の眼底画像を合成させまたは合成された合成眼底
画像を表示させる際、前記２枚の眼底画像の重なってい
る部分の各点毎の平均値または各点の周囲領域の平均値
を前記点の値とすることを含む演算処理を行って前記２
枚の眼底画像を合成または表示させる。

【００３８】（ｅ）前記プログラムはコンピュータに前
記２枚の眼底画像を合成させる際、前記２枚の眼底画像
の重なっている部分における相関の高い対応する３点を
合致させるように、または３点以上の点を最小２乗近似
法を用いて可能な限り合致させるように眼底画像を変形
させて合成させるように合成または表示させる。

【００３９】（ｆ）前記プログラムはコンピュータに前
記２枚の眼底画像を合成させる際、最も高い相関値があ
る閾値以下の場合に、前記２枚の眼底画像の周辺領域で
一定サイズの矩形領域部分の相関値を計算させ、前記相
関値が最も高いある閾値以上の領域同士を合致させるよ
うに合成または表示させる。

【００４０】本実施形態１の眼底画像合成方法は、図１
のフローチャートで示すようにスタートＳ１（ステップ
１）から始まり、画像入力処理（画像入力段階）Ｓ２，
特徴抽出処理（特徴抽出段階）Ｓ３，相関処理（相関処
理段階）Ｓ４，画像合成処理（画像合成段階）Ｓ５を経
て合成眼底画像を組み立てて終了（エンド）する（Ｓ
６）。

【００４１】以下、図２および図３のフローチャート等
を参照しながら本実施形態１について詳細に説明する。
なお、以下において処理は段階をも意味する場合もあ
る。

【００４２】図２のフローチャートにおいて、Ｓ１０１
はスタート、Ｓ１０２は眼底画像を複数枚入力する処
理、Ｓ１０３は眼底画像を２値化し、血管画像を抽出す
る処理、Ｓ１０４は血管画像を細線化し、血管の交点
（分岐点３０５および交叉点３０６：図５および図６参
照）を求める処理である。Ｓ１０２が画像入力処理（画
像入力段階）を構成し、Ｓ１０３およびＳ１０４が特徴
抽出処理（特徴抽出段階）を構成する。

【００４３】また、Ｓ１０５は図３のフローチャートで
示すように、眼底画像Ａ（第１の眼底画像：図５におい
て眼底画像左）上の血管の１交点と、重ね合わせる対象
である眼底画像Ｂ（第２の眼底画像：図５において眼底
画像右）上の全ての交点もしくはその近傍の点（近傍
点）を、中心とした一定サイズの周辺領域に対する相関
を求め、最大相関値をもつ交点を交点ペアとする処理、
すなわち交点ペアを見つける処理である。

【００４４】Ｓ１０６は眼底画像Ａ（第１の眼底画像）
上の血管の全ての交点に対し眼底画像Ｂ（第２の眼底画
像）上の最大相関値を持つ交点ペアを見つける処理をし
たか否かの判定処理であり、ＮＯの場合はＳ１０５に戻
り、ＹＥＳの場合はＳ１０７に進む。

【００４５】Ｓ１０７は各交点ペアの中で相関値が最大
かつある閾値以上の交点ペアを２枚の眼底画像（Ａ，
Ｂ）の合成位置と決定する処理、Ｓ１０８は決定された
交点ペアの位置を合致させることにより２枚の眼底画像
（Ａ，Ｂ）を合成する処理である。

【００４６】Ｓ１０９は全ての画像を処理したか否かの
判定処理であり、ＮＯの場合はＳ１０５に戻り、ＹＥＳ
の場合はＳ１１０に進む。

【００４７】Ｓ１１０は前手順で得られた結果（相関
値、２つの眼底画像の合成眼底画像）による３つ以上の
眼底画像との合成が可能の時の複数眼底画像間の相関処
理により合成画像および合成データを求める処理であ
る。

【００４８】Ｓ１１１は画像合成群及びそれに対応する
合成データ群（合成画像における各眼底画像の合成点の
位置座標、各眼底画像の優先順位情報、合成方法等）を
蓄積する処理である。前記Ｓ１０５から前記Ｓ１１１の
各処理によって相関処理（相関処理段階）が構成され
る。

【００４９】Ｓ１１２は指定された合成方法に応じて重
なり部分を処理した合成画像を表示する処理、Ｓ１１３
は重なり部分を処理した合成画像を蓄積する処理であ
り、これによって合成眼底画像が組み立てられて作業が
終了（エンド：Ｓ１１４）する。前記Ｓ１１２と前記Ｓ
１１３が画像合成処理（画像合成段階）を構成する。

【００５０】また、図５に本発明の眼底画像合成方法の
一合成例を、図６に第１の眼底画像（眼底画像Ａ：画像
左）の分岐点および交叉点を示す拡大図を、図７に血管
の交点（分岐点）における相関処理領域の一例を示す。
ここで、３０１は眼底画像左、３０２は眼底画像右、３
０３は交点画像左、３０４は交点画像右、３０５は分岐
点、３０６は交叉点、３０７は合成画像、３０８は周辺
領域Ｒ_Ki、３０９は交点Ｋ_i、３１０は周辺領域Ｒ_Pjn、
３１１は交点Ｐ_j、Ｍは周辺領域Ｒ_Ki３０８または周辺
領域Ｒ_Pjn３１０の大きさ、Ｎは中心点Ｐ_j（Ｐ_jn=c）４
０５の近傍領域Ｑ_j４０７の大きさ、４０１は大きさＭ
×Ｍの周辺領域Ｒ_Pjn=1、４０２は大きさＭ×Ｍの周辺
領域Ｒ_Pjn=c、４０３は大きさＭ×Ｍの周辺領域Ｒ_Pjn=N
²、４０４は中心点Ｐ_jn=1、４０５は中心点Ｐ_jn=c、４
０６は中心点Ｐ_jn=N ²、４０７は大きさＮ×Ｎで中心点
Ｐ_jn=cの近傍領域Ｑ_j、４０８は血管をそれぞれ表す。

【００５１】つぎに、合成眼底画像の組み立てについて
説明する。

【００５２】まず、同一被験者の視線の異なる眼底画像
を複数枚入力する処理Ｓ１０２として、デジタル眼底カ
メラを用いて撮影された入力画像２０１が入力部２０２
を通じて入力され、制御部２０３を通じて画像蓄積部２
０７へ蓄積する。また、制御部２０３では各眼底画像の
位置関係（上下左右など）を把握し、データ蓄積部２０
８へ蓄積する。この際、各眼底画像は合成眼底画像を組
み立てるため、各眼底画像において少なくとも１つの眼
底画像と重なりを持つように撮影する。

【００５３】つぎに、コンピュータ、すなわち制御部２
０３は、特徴抽出部２０４に対して各眼底画像を２値化
し、血管画像を抽出する処理Ｓ１０３および前記血管画
像を細線化し、血管の交点（分岐点および交叉点）を求
める処理Ｓ１０４を実行させる。

【００５４】ここでは例として、図５に示すような２枚
のペアとなる第１の眼底画像（眼底画像左３０１：像
Ａ）と、第２の眼底画像（眼底画像右３０２：像Ｂ）を
合成する処理例を説明する（図６参照）。血管の分岐点
および交叉点を求める処理Ｓ１０４まで実行された結果
得られた分岐点３０５と交叉点３０６を眼底画像中にプ
ロットすると、交点画像左３０３と交点画像右３０４に
ように表される。そして、眼底画像の位置関係に基づ
き、以下に説明する一連の処理（Ｓ１０５からＳ１０
８）を隣り合う２枚の眼底画像の組み（図５の例では眼
底画像左３０１と眼底画像右３０２）を対象に繰り返し
処理する。この際、位置関係に応じて、ある位置の眼底
画像は、重なる位置を調べる対象となるペアの眼底画像
の位置を限定する（たとえば、眼底画像左３０１は眼底
画像右３０２との重なる位置は調べるが、上下の眼底画
像との重なる位置は調べないなど）ことができる。この
ような位置の限定は画像を変形しない場合や表示の優先
度を考慮して行われる。

【００５５】また、位置の限定を行うと計算時間が短縮
される効果がある。

【００５６】制御部２０３は相関処理部２０５に対し
て、眼底画像Ａ上の血管の１交点と、重ね合わせる対象
である眼底画像Ｂ上の全ての交点もしくは前記交点の近
傍の近傍点を中心とした一定サイズの周辺領域に対する
相関を求め、最大相関値を持つ交点ペアを見つける処理
Ｓ１０５から決定された交点ペアの位置を合致させるこ
とにより２枚の眼底画像（像Ａ，像Ｂ）を合成する処理
Ｓ１０９までの一連の処理を実行するように指示する。

【００５７】処理概略は以下の通りである。基本的な考
えは、眼底画像左３０１にある全ての血管の交点（分岐
点または交叉点）を基準として、それぞれの交点に対応
する血管の交点もしくはその近傍にあると予想される眼
底画像右３０２上の対応点を探索するということであ
る。

【００５８】眼底画像左３０１にある全ての血管の交点
（分岐点または交叉点）中の一交点と、眼底画像右３０
２にある全ての血管の交点（分岐点または交叉点）もし
くは交点の近傍点との類似度合いを判定するために、眼
底画像左３０１の血管の一交点を中心とする周辺領域と
眼底画像右３０２にある全ての血管の交点もしくは交点
の近傍点を中心とする周辺領域との相関係数ｒを計算す
る。

【００５９】眼底画像左３０１の血管の一交点を中心と
する周辺領域と最も相関の高い眼底画像右３０２上の交
点もしくは交点の近傍点を中心とする周辺領域を見つ
け、そのときの眼底画像左３０１の血管の一交点と眼底
画像右３０２上の交点（もしくは交点の近傍点）を合致
させるように２枚の眼底画像左３０１と眼底画像右３０
２を合成する。

【００６０】ここで、相関の計算式について説明する。

【００６１】ｎ対の２枚の眼底画像（像Ａ，像Ｂ）の値
｛（ａ_i,b_i）：ｉ=1,...,n｝が与えられたとする。この
ときのａの平均，変動をそれぞれａ_AV，Ｓ_a、ｂの平
均，変動をそれぞれｂ_AV，Ｓ_bで表す。また、ａとｂの
共変動と相関係数をそれぞれＳ_ab，ｒ_abで表すと、ａと
ｂの相関係数ｒ_abは次のように表せる。

【００６２】

【数１】

【００６３】

【数２】

【００６４】

【数３】

【００６５】

【数４】ｒ_ab＝Ｓ_ab／（Ｓ_aＳ_b）^1/2 つぎに、処理例を説明する。眼底画像左３０１の血管の
一交点Ｋ_i（ｉ=1,...,I)３０９と図７に示す中心点Ｐ_j
（Ｐ_jn=c）４０５（例は血管の分岐点)(j=1,...,J;n=
1,...,c...,N²)を眼底画像右３０２上の交点Ｐ_j３１１
として、相関を計算する方法を処理例として説明する。
相関の計算は、原画上（撮影時の眼底画像）で行う。

【００６６】先ず、眼底画像左３０１上の交点Ｋ_iを中
心とした大きさＭ×Ｍの周辺領域Ｒ_Kiと、眼底画像右３
０２上の大きさＮ×Ｎで中心点Ｐ_jn=c４０５の近傍領域
Ｑ_j（ｎ=1,...,c...,N²)４０７を定める。この近傍領域
Ｑ_j内のＮ²個の点（中心点Ｐ_jn=1４０４から中心点Ｐ
_jn=N ²４０６まで）をそれぞれ中心とする大きさＭ×Ｍ
の周辺領域Ｒ_Pjn=c（ｎ=1,...,c...,N²)４０２と周辺領
域Ｒ_Kiとの類似度合いを相関係数ｒ_KiPjnで評価する。

【００６７】最も相関係数ｒ_KiPjnの高い周辺領域Ｒ_Ki
と周辺領域Ｒ_Kiと周辺領域Ｒ_Pjnの組みを対応候補とす
る。交点Ｋ_iと対応する眼底画像右３０２上の他の全て
の交点Ｐ_jに対しても、同様の処理を行う。このとき、
交点Ｋ_iと眼底画像右３０２上の全ての交点Ｐ_jとの相関
係数ｒ_KiPjnが求められる。この中で最も高い相関係数
ｒ_KiPjnを持つ交点Ｐ_jと交点Ｋ_iが対応すると仮定す
る。

【００６８】ここで、眼底画像左３０１上の血管の交点
Ｋ_i３０９と眼底画像右３０２上の血管の交点Ｐ_j３１１
を調べるのではなく、眼底画像右３０２上の血管の交点
Ｐ_j３１１およびその交点の近傍の近傍点Ｐ_jnを調べる
理由は以下の通りである。

【００６９】眼底画像左３０１と眼底画像右３０２は撮
影時の条件が厳密に同じではないため、画像として別の
画像となる。この結果、血管値抽出を行い細線化し、交
点を抽出した段階で、対応する交点同士が厳密に同じ画
素とならない可能性が高い。したがって、片方の画像の
交点を基準として、もう一方の画像の交点およびその近
傍の近傍点を対応点として探すことにより、精度の高い
対応点を見つけることができるのである。

【００７０】つぎに、眼底画像左３０１上の他の交点Ｋ
_iに対しても、同様に眼底画像右３０２上の血管の交点
Ｐ_j３１１およびその交点の近傍点を調べる処理を実行
し、それぞれの交点Ｋ_iに対応する眼底画像右３０２上
の対応する交点の候補を見つける。

【００７１】さらに、対応する交点候補の組みの中で最
大の相関係数ｒ_KiPjnを持つ交点の組を眼底画像左３０
１と眼底画像右３０２を合致させる点とし、２枚の眼底
画像を合成する処理を行う。このとき、最大の相関係数
ｒ_KiPjnを持つ交点の１組だけでなく、上位３位まで
（もしくはそれ以上）の交点の組が対応するように補完
もしくは変形させて、合成することも可能である。

【００７２】以上が２枚の眼底画像を合成する処理であ
る。ただし、最大の相関係数ｒ_KiPjnを持つとされた交
点の相関係数ｒ_KiPjnがある定めた閾値以下（たとえば
０．９）であった場合には、前記２枚の眼底画像間に対
応する交点がないと判断する。

【００７３】この場合には、２枚の眼底画像の周辺領域
で一定サイズの矩形領域部分の相関値を計算し、前記相
関値が最も高くある閾値以上（たとえば０．９）の領域
同士を合致させる。

【００７４】そして、他の隣り合う２枚の眼底画像に対
しても同様に処理Ｓ１０５から処理Ｓ１０８までを行
い、同様に合致させる交点の組を見つける。全ての画像
を処理したか（Ｓ１０９）で判断し、処理が完了（ＹＥ
Ｓ）していれば、Ｓ１１０，Ｓ１１１に順次進む。

【００７５】Ｓ１１０は、前手順で得られた結果（相関
値，２つの眼底画像の合成眼底画像）による３つ以上の
眼底画像との合成が可能の時の複数眼底画像間の相関処
理により合成画像および合成データを求める処理であ
る。

【００７６】Ｓ１１１は、合成画像群及びそれに対応す
る合成データ群（合成画像における各眼底画像の合成点
の位置座標，各眼底画像の優先順位情報，合成方法等）
を蓄積する処理である。Ｓ１０５〜Ｓ１１１で相関処理
が行われる。

【００７７】したがって、Ｓ１１１の終了後は、制御部
２０３は制御部２０３に装填された記録媒体のプログラ
ムによって合成眼底画像を表示部２０９に表示するとと
もに、データ蓄積部２０８に画像の各種情報を蓄積す
る。すなわち、相関処理部２０５は制御部２０３を通じ
て、画像蓄積部２０７に合成画像（合成眼底画像）を、
データ蓄積部２０８に各画像の合成点の位置座標，画像
の優先順位情報，合成方法等の合成データを、それぞれ
蓄積する。

【００７８】この際、位置関係により複数の画像との合
成が可能な場合には、（１）位置の優先順位を定める、
（２）相関が最も高い画像同士の合成を優先する、
（３）複数の画像が合致するように画像を変形する、な
どの方法を用いて合成を行う。

【００７９】合成画像が完全に合致しないことが起きる
理由は、球面である３次元構造を持つ眼底を２次元の平
面に写像することにより、眼底写真の中央附近と周辺附
近では歪みの程度が異なるためである。一般に医療の世
界では、取得した画像に手を加えて変形させることを嫌
うため、変形によって血管を合わせるよりも、血管の繋
ぎが多少不自然でも変形を加えずに合成した方がよい
（医師が頭の中で繋がりを補完可能）という意見があ
る。変形を行うかどうかは、世の中の動向に合わせて決
定されると考えられる。

【００８０】相関処理後、Ｓ１１２の表示処理およびＳ
１１３の情報蓄積処理が行われ、その後作業が終了（エ
ンド）する（Ｓ１１４）。前記Ｓ１１２は、指定された
合成方法に応じて重なり部分を処理した合成画像を表示
する処理であり、Ｓ１１３は、重なり部分を処理した合
成画像を蓄積する処理である。前記Ｓ１１２およびＳ１
１３は画像合成処理となる。

【００８１】すなわち、画像蓄積部２０７に蓄積された
合成画像を、画像合成部２０６にて指定された合成方法
に応じて重なり部分を処理し、組み立てられた合成画像
を、ディスプレイやプリンタ等の出力媒体に表示する処
理Ｓ１１２を行う。この場合、各眼底画像情報を別々に
持ち、合成するための重ね合わせの位置情報に応じて、
表示を行うことで表示のバリエーションが増える。画像
合成方法の手法としては、たとえば下記のような手法が
採用される。

【００８２】図９には、重なり部分の合成処理前の合成
画像〔図９（ａ）〕と、各合成方法による合成画像〔図
９（ｂ）〜（ｅ）〕が示されている。各合成方法は、
（ａ）２枚の眼底画像の表示の優先度を定め、２枚の眼
底画像が重なっている部分については優先度の高い方の
眼底画像を前面に表示し、他方を背面に隠して表示する
〔図９（ｂ）〕。

【００８３】（ｂ）２枚の眼底画像が重なっている部分
を、２枚の眼底画像を合致させる位置、すなわち２枚の
眼底画像間で対応する交点を通る直線で分けて、２枚の
眼底画像を表示する。この場合、交点を通る線で分ける
場合と、交点の近傍の近傍点を通る線で分ける場合があ
る。また、交点を通る線も優先度等を勘案して決定でき
る。

【００８４】（ｃ）２枚の眼底画像が重なっている部分
を、重なっている２枚の眼底画像の外側の枠が交わる２
点を結ぶ直線で分けて、２枚の眼底画像を表示する〔図
９（ｃ）〕。

【００８５】（ｄ）２枚の眼底画像の重なっている部分
の各点毎の平均値もしくは各点の周囲領域の平均値を前
記点の値とするなどの演算処理を行い、重なっている部
分を表示する〔図９（ｄ）〕。

【００８６】ここでは、合成方法を４手法示したが、他
の手法の採用も可能である。

【００８７】眼底画像の合成作業は、図８のフローチャ
ートで示すように、スタートＳ１１２０で開始し、２枚
の眼底画像の重なり部分の合成処理方法として、Ｓ１１
２１〜Ｓ１１２４のいずれかを指定することになる。

【００８８】Ｓ１１２１は合成方法（ａ）となり、優先
度の高い方の眼底画像を前面に表示し、他方を背面に隠
して表示する合成画像を作成する。Ｓ１１２２は合成方
法（ｂ）となり、最も相関の高い交点もしくは交点の近
傍の近傍点を通る直線で分けて合成画像を作成する。Ｓ
１１２３は合成方法（ｃ）となり、２枚の眼底画像の外
側の枠が交わる２点を結ぶ直線で分けて合成画像を作成
する。Ｓ１１２４は合成方法（ｄ）となり、重なり部分
の各点毎の平均値もしくは各点の周囲領域の平均値を該
点の値として合成画像を作成する。

【００８９】いずれかの合成方法によって合成処理され
た画像は、Ｓ１１２５で重なり部分を合成処理した合成
画像を表示する。これにより、合成，表示作業が終了
〔エンド〕する（Ｓ１１２６）。

【００９０】本実施形態１では、図１０のフローチャー
トで示す画像合成（合致）手法も採用できる。すなわ
ち、この手法においては、作業を開始（スタート）させ
（Ｓ１０７０）、交点候補の組の中で相関係数の上位何
組を合致させるかの処理を行う（Ｓ１０７１）。Ｓ１０
７１で最上位の組を合致させる場合はＳ１０７３に進ま
せ、上位からｎ組（ｎ＝３〜Ｎ）までを合致させる場合
はＳ１０７２に進ませる。

【００９１】Ｓ１０７２は、相関係数上位からｎ組まで
の交点候補を合致させる点として、ｎ組の交点を対応さ
せるように２枚の眼底画像を補完もしくは変形する。こ
の補完もしくは変形処理によって作業は終了〔エンド〕
する（Ｓ１０７９）。

【００９２】Ｓ１０７３では或る閾値（ａ）か否かを判
定し、ＹＥＳの場合はＳ１０７５に進む。また、ＮＯの
場合はＳ１０７４に進む。Ｓ１０７４は、最大相関係数
を持つ候補の組を合致させる点とする処理を行う。この
処理が終了するとエンド（Ｓ１０７９）となる。

【００９３】Ｓ１０７５では、２枚の眼底画像の周辺領
域で一定サイズの矩形領域部分の相関値を計算する。前
記相関値はＳ１０７６において、該相関値の中で最も高
い相関値は或る閾値（ｂ）以上か否かの判定処理がなさ
れ、ＹＥＳの場合はＳ１０７７に進み、ＮＯの場合はＳ
１０７８に進む。ＹＥＳの場合ではＳ１０７７におい
て、一定サイズの矩形領域同士を合致させる処理が行わ
れ、この処理が終了するとエンド（Ｓ１０７９）とな
る。ＮＯの場合ではＳ１０７８において、合致させる交
点及び合致させる矩形領域がないと判定され作業はエン
ド（Ｓ１０７９）となる。

【００９４】なお、前記２枚の眼底画像を合成する段階
において、前記２枚の眼底画像の重なっている部分にお
ける相関の高い対応する３点を合致させるように、また
は３点以上の点を最小２乗近似法を用いて可能な限り合
致させるように眼底画像を変形させて合成または表示す
るようにしても高精度な眼底画像の合成または表示が可
能になる。

【００９５】本実施形態１によれば以下の効果が得られ
る。すなわち、本実施形態１の眼底画像合成装置に本実
施形態１の記録媒体を装填して行う本実施形態１の眼底
画像合成方法によれば以下の効果が得られる。

【００９６】（１）眼底画像上の血管等の画像特徴に着
目し、血管を細線化し、血管の交点（分岐点，交叉点）
を抽出し、抽出した交点近傍から構成される領域の相関
を用いて画像を合成することができ、高精度の合成眼底
画像が得られる。

【００９７】（２）コンピュータ上で同一被験者の視線
の異なる複数枚の眼底画像を電子的に合成して繋ぎ合わ
せて一枚の眼底画像を張り合わせることが可能となる効
果がある。

【００９８】（３）コンピュータ上で複数枚の眼底画像
を合成し、合成した一枚のモンタージュ画像として眼底
画像を高品質なプリンタ等へ出力できれば、手作業で紙
を張り合わせる必要はなくなり、作業能率の向上が図れ
る。

【００９９】（４）コンピュータを用いることにより、
手作業で掛かっていた作業時間の短縮、作業者への負担
の軽減および空いた時間の他業務への転用ができる効果
がある。

【０１００】（５）コンピュータ上の電子データを用い
ているため、各眼底画像を別々に保存しておけば、何度
も眼底画像合成のやり直しをすることが可能となる。

【０１０１】（６）手作業ではおおまかにしか眼底画像
を重ね合わせることしかできないが、本実施形態によれ
ば自動的に合成した画像に対し各眼底画像の位置を一画
素づつ上下左右にずらすなど、微調整を行うことも可能
となる利点がある。

【０１０２】（７）真の血管の交点以外でも抽出された
点の相関も調べることができるため、出血など画像的に
特徴のある点が抽出されている場合には、その場所が重
ね合わせの対象となり、精度の高い画像合成が行える。

【０１０３】以上本発明者によってなされた発明を実施
形態に基づき具体的に説明したが、本発明は上記実施形
態に限定されるものではなく、その要旨を逸脱しない範
囲で種々変更可能であることはいうまでもない。

【０１０４】本発明は眼底画像の合成技術に適用した例
について説明したが、同種の画像合成および表示技術に
は適用できる。

【０１０５】

【発明の効果】本願において開示される発明のうち代表
的なものによって得られる効果を簡単に説明すれば、下
記のとおりである。

【０１０６】（１）眼底画像上の血管等の画像特徴に着
目し、血管を細線化し、血管の交点（分岐点，交叉点）
を抽出し、抽出した交点近傍から構成される領域の相関
を用いて画像を合成（モンタージュ合成）することがで
き、手作業による合成眼底画像に比較して高精度でかつ
短時間に合成眼底画像が得ることができる。

【０１０７】（２）真の血管の交点以外でも抽出された
点の相関も調べることができるため、出血など画像的に
特徴のある点が抽出されている場合には、その場所が重
ね合わせの対象となり、精度の高い画像合成が行える。

【０１０８】（３）コンピュータ上で同一被験者の視線
の異なる複数枚の眼底画像を電子的に合成して繋ぎ合わ
せて一枚の眼底画像を張り合わせ、かつ合成眼底画像の
ディスプレイ上での表示化あるいはプリント出力化が可
能であることから、従来の手作業による紙の張り合わせ
による合成眼底画像の作成に比較し、作業能率の向上が
図れ、かつ作業者の精神的負担の軽減が達成できる。

【０１０９】（４）電子データとして各眼底画像を別々
に保存しておくことによって、必要に応じてコンピュー
タ上で眼底画像の合成および表示が繰り返して行える実
益もある。

【図面の簡単な説明】

【図１】本発明の一実施形態（実施形態１）である眼底
画像合成方法を示すフローチャートである。

【図２】本実施形態１の眼底画像合成方法を示すフロー
チャートである。

【図３】本実施形態１の眼底画像合成方法を示すフロー
チャートである。

【図４】本実施形態１の眼底画像合成装置の構成を示す
ブロック図である。

【図５】本実施形態１の眼底画像合成方法における画像
合成例を示す模式図である。

【図６】前記画像合成例における一部の拡大模式図であ
る。

【図７】前記画像合成において血管の交点（分岐点）に
おける相関処理領域の一例を示す模式図である。

【図８】本実施形態１の眼底画像合成方法における画像
合成方法を示すフローチャートである。

【図９】本実施形態１の眼底画像合成方法における各画
像合成方法を示す模式図である。

【図１０】本実施形態１の眼底画像合成方法における画
像合成（合致）手法を示すフローチャートである。

【符号の説明】

２０１…入力画像、２０２…入力部、２０３…制御部、
２０４…特徴抽出部、２０５…相関処理部、２０６…画
像合成部、２０７…画像蓄積部、２０８…データ蓄積
部、２０９…表示部、３０１…眼底画像左、３０２…眼
底画像右、３０３…交点画像左、３０４…交点画像右、
３０５…分岐点、３０６…交叉点、３０７…合成画像、
３０８…周辺領域Ｒ_Ki、３０９…交点Ｋ_i、３１０…周
辺領域Ｒ_Pjn３１１…交点Ｐ_j、４０１…周辺領域Ｒ
_Pjn=1、４０２…周辺領域Ｒ_Pjn=c、４０３…周辺領域Ｒ
_Pjn=N ²、４０４…中心点Ｐ_jn=1、４０５…中心点
Ｐ_jn=c、４０６…中心点Ｐ_jn=N ²、４０７…近傍領域
Ｑ_j、４０８…血管。

フロントページの続き (72)発明者佐久間聡東京都新宿区西新宿三丁目19番２号日本電信電話株式会社内Ｆターム(参考） 5B057 AA07 CC03 CE08 CF01 CH11 DA07 DC05 DC34 DC36

Claims

【特許請求の範囲】

【請求項１】入力手段，特徴抽出手段，相関処理手
段，画像合成手段，画像蓄積手段，データ蓄積手段，表
示手段および前記各手段を制御する制御手段を備えた眼
底画像合成装置を用いて同一被験者の視線の異なる２枚
の眼底画像を繋ぎあわせて一枚の合成眼底画像を作成す
る眼底画像合成方法であって、同一被験者の視線の異な
る複数の眼底画像の情報を前記入力手段から入力する入
力段階と、前記入力段階で入力された複数の入力眼底画
像において各眼底画像の特徴点を抽出する特徴抽出段階
と、前記特徴抽出段階で抽出された特徴点の周辺領域の
相関をとる相関処理段階と、前記相関処理段階で得られ
た相関の高い領域を各画像間で合致させて行う画像の合
成によって合成眼底画像を組み立てる画像合成段階とを
有することを特徴とする眼底画像合成方法。
【請求項２】前記入力段階で入力された複数の前記眼
底画像を画像処理によって２値化して血管画像を抽出す
る段階と、抽出された前記血管画像を細線化して血管の
交点を求める段階と、合成対象となる前記２枚の眼底画
像のうちの第１の眼底画像上のある血管の１交点を中心
とした一定サイズの周辺領域に対する第２の眼底画像上
の全ての血管の交点およびその近傍点を中心とした周辺
領域との相関を求め、その相関の最大値を第１の眼底画
像の前記血管の１交点と対応する第２の眼底画像の位置
として交点ペアを見つける交点相関計算処理段階と、前
記第１の眼底画像上の他の各交点に対する第２の眼底画
像上の交点ペアを見つける前記交点相関計算処理を行
い、見つけた各交点ペアの中で最大でかつある閾値以上
の相関値を持つ交点ペアを前記２枚の眼底画像の合成位
置とする合成位置決定処理段階と、前記合成位置決定処
理で決定された交点ペアの位置を合致させることにより
前記２枚の眼底画像を合成する段階と、合成された合成
画像を表示する段階と、合成画像を蓄積する段階とを有
することを特徴とする請求項１に記載の眼底画像合成方
法。
【請求項３】前記２枚の眼底画像を合成する段階また
は合成された合成眼底画像を表示する段階において、前
記２枚の眼底画像のデータをそのまま保持しておき、前
記２枚の眼底画像の表示の優先度を定め、前記２枚の眼
底画像が重なっている部分については優先度の高い方の
眼底画像を前面に表示し、他方の眼底画像を背面に隠し
て表示するように合成または表示することを特徴とする
請求項２に記載の眼底画像合成方法。
【請求項４】前記２枚の眼底画像を合成する段階また
は合成された合成眼底画像を表示する段階において、前
記２枚の眼底画像間で最も相関の高い血管の交点または
前記交点の近傍の近傍点を通る直線で、前記２枚の眼底
画像が重なっている部分を分けて前記２枚の眼底画像を
合成または表示することを特徴とする請求項２に記載の
眼底画像合成方法。
【請求項５】前記２枚の眼底画像を合成する段階また
は合成された合成眼底画像を表示する段階において、重
なっている前記２枚の眼底画像の外側の枠が交わる２点
を結ぶ直線で、前記２枚の眼底画像が重なっている部分
を分けて前記２枚の眼底画像を合成または表示すること
を特徴とする請求項２に記載の眼底画像合成方法。
【請求項６】前記２枚の眼底画像を合成する段階また
は合成された合成眼底画像を表示する段階において、前
記２枚の眼底画像の重なっている部分の各点毎の平均値
または各点の周辺領域の平均値を前記点の値とすること
を含む演算処理を行って前記２枚の眼底画像を合成また
は表示することを特徴とする請求項２に記載の眼底画像
合成方法。
【請求項７】前記２枚の眼底画像を合成する段階にお
いて、前記２枚の眼底画像の重なっている部分における
相関の高い対応する３点を合致させるように、または３
点以上の点を最小２乗近似法を用いて可能な限り合致さ
せるように眼底画像を変形させて合成または表示するこ
とを特徴とする請求項２に記載の眼底画像合成方法。
【請求項８】前記２枚の眼底画像を合成する段階にお
いて、最も高い相関値がある閾値以下の場合に、前記２
枚の眼底画像中で一定サイズの矩形領域部分の相関値を
計算し、前記相関値が最も高いある閾値以上の領域同士
を合致させて合成または表示させることを特徴とする請
求項２に記載の眼底画像合成方法。
【請求項９】同一被験者の視線の異なる２枚の眼底画
像を繋ぎあわせて一枚の合成眼底画像を作成する眼底画
像合成装置であって、複数の視線の異なる眼底画像が入
力される入力手段と、前記入力手段から入力された複数
の入力眼底画像の特徴点を抽出する特徴抽出手段と、前
記特徴抽出手段によって抽出された特徴点の周辺領域の
相関をとる相関処理手段と、前記相関処理手段によって
得られた相関の高い領域を各画像間で合致させることに
よって合成画像を作成する画像合成手段と、前記入力手
段から入力された各画像情報を蓄積する画像蓄積手段
と、前記各手段で作成したデータを蓄積するデータ蓄積
手段と、前記各情報やデータを表示する表示手段とを有
することを特徴とする眼底画像合成装置。
【請求項１０】コンピュータによって同一被験者の視
線の異なる２枚の眼底画像を繋ぎあわせて一枚の合成眼
底画像を作成するためのプログラムを記録した記録媒体
であって、前記プログラムはコンピュータに同一被験者
の視線の異なる複数の眼底画像の特徴点を抽出させ、前
記抽出された特徴点の周辺領域の相関を求めさせ、前記
相関の高い領域を各画像間で合致させるとともに合成画
像を作成させて合成眼底画像を組み立てることを特徴と
する記録媒体。
【請求項１１】前記プログラムはコンピュータに前記
複数の前記眼底画像を画像処理によって２値化して血管
画像を抽出させ、抽出された前記血管画像を細線化して
血管の交点を求めさせ、合成対象となる前記２枚の眼底
画像のうちの第１の眼底画像上のある血管の１交点を中
心とした一定サイズの周辺領域に対する第２の眼底画像
上の全ての血管の交点およびその近傍点を中心とした周
辺領域との相関を求めさせ、その相関の最大値を第１の
眼底画像の前記血管の１交点と対応する第２の眼底画像
の位置として交点ペアを見つける交点相関計算処理をさ
せ、前記第１の眼底画像上の他の各交点に対する第２の
眼底画像上の交点ペアを見つける前記交点相関計算処理
を行わせ、見つけた各交点ペアの中で最大でかつある閾
値以上の相関値を持つ交点ペアを前記２枚の眼底画像の
合成位置とする合成位置決定処理を行わせ、前記合成位
置決定処理で決定された交点ペアの位置を合致させるこ
とにより前記２枚の眼底画像を合成させ、合成された合
成画像を表示させ、合成画像を蓄積させることを特徴と
する請求項１０に記載の記録媒体。
【請求項１２】前記プログラムはコンピュータに前記
２枚の眼底画像を合成させまたは合成された合成眼底画
像を表示させる際、前記２枚の眼底画像のデータをその
まま保持させておき、前記２枚の眼底画像の表示の優先
度を定め、前記２枚の眼底画像が重なっている部分につ
いては優先度の高い方の眼底画像を前面に表示させ、他
方の眼底画像を背面に隠して表示させるように合成また
は表示させることを特徴とする請求項１１に記載の記録
媒体。
【請求項１３】前記プログラムはコンピュータに前記
２枚の眼底画像を合成させまたは合成された合成眼底画
像を表示させる際、前記２枚の眼底画像間で最も相関の
高い血管の交点または前記交点の近傍の近傍点を通る直
線で、前記２枚の眼底画像が重なっている部分を分けて
前記２枚の眼底画像を合成または表示させることを特徴
とする請求項１１に記載の記録媒体。
【請求項１４】前記プログラムはコンピュータに前記
２枚の眼底画像を合成させまたは合成された合成眼底画
像を表示させる際、重なっている前記２枚の眼底画像の
外側の枠が交わる２点を結ぶ直線で、前記２枚の眼底画
像が重なっている部分を分けて前記２枚の眼底画像を合
成または表示させることを特徴とする請求項１１に記載
の記録媒体。
【請求項１５】前記プログラムはコンピュータに前記
２枚の眼底画像を合成させまたは合成された合成眼底画
像を表示させる際、前記２枚の眼底画像の重なっている
部分の各点毎の平均値または各点の周囲領域の平均値を
前記点の値とすることを含む演算処理を行って前記２枚
の眼底画像を合成または表示させることを特徴とする請
求項１１に記載の記録媒体。
【請求項１６】前記プログラムはコンピュータに前記
２枚の眼底画像を合成させる際、前記２枚の眼底画像の
重なっている部分における相関の高い対応する３点を合
致させるように、または３点以上の点を最小２乗近似法
を用いて可能な限り合致させるように眼底画像を変形さ
せて合成させるように合成または表示させることを特徴
とする請求項１１に記載の記録媒体。
【請求項１７】前記プログラムはコンピュータに前記
２枚の眼底画像を合成させる際、最も高い相関値がある
閾値以下の場合に、前記２枚の眼底画像中で一定サイズ
の矩形領域部分の相関値を計算させ、前記相関値が最も
高いある閾値以上の領域同士を合致させるように合成ま
たは表示させることを特徴とする請求項１１に記載の記
録媒体。