JPH0357081A - 画像処理装置 - Google Patents

Abstract

(57)【要約】本公報は電子出願前の出願データであるた
め要約のデータは記録されません。

Description

【発明の詳細な説明】 ［産業上の利用分野］ 本発明は画像処理装置，特にディジタル眼底画像の貼り
合わせ、減算（サブトラクション〉等の画像処理を行な
う前の、複数画像の位置合わせを容易に行なうことがて
きる装ｎに関する。

［従来の技術］ 従来，［［（底写真による読影の際，　＃ｌＪＩ，！上
における血管や出血，または白ＢＥ！″ｇの相瓦の位置
関係や、広画角（例えば１２０゜等）の眼底を見たい等
の要求を場たすため、複数枚の眼底写真を上下左右斜め
力向の位７１関係が合致するように切り貼りして広画角
の眼底写真を作或していた。

また近年、画像処理技術の発達に伴い、汎用の画像処理
装置を用いて眼底画像を入力し、アフイン変換等の画像
処理技術を駆使してディジタル画像での合戊も行なわれ
ている。

［発明か解決しようとしている課８］ しかしながらアナログ画像を利用した従来例では、眼底
写真の現像、焼＋ｌ等できあがるまでに鱈間かかかった
。また，ディジタル画像を利用した従来例でも合成する
とき第１２図に示す如く眼底画像１９．２０の境界の周
四の情報（刺線部）をたよりにしなければならないため
、正確に合成するのが困難であった．更に各々の画像に
ー）いて．　＋ｍ＋底カメラによるデイストーションの
影でかあり、第１３図の２１に示す如くずれか生し、正
確に合わせるのは国難てあるという欠点かあった． 本発明の［１的は上記従来例の欠点を解決した装若を提
供することにある． ［課題を解決するための手段］ Ｌ記目的を達成するため本発明では、少なくとも一部に
共通の一像部分を備えるように各々記憶された第１のデ
ィジタル画像Ａと第２のデイシタル画像Ｂとに対し、両
画像を位置合わせ後に画像処理をする画像処理装置にお
いて、画像Ａに対し２次元的に離駿した枚数個の画東の
みを抽出するためのデイシタルマスクパターン画像２を
記憶する手段と、画像Ａに画＊Ｚを合成した合成画像Ａ
′と画像Ｂを表示面に重ねて表示させる画像処理部を備
え、画像Ａと画像Ｂの両画像を同時にｆｕｌｌ察可能と
したことを料徴とする。

［作川］ 画像Ａと画＠Ｂを位置合わせ後に画像ＡとＢの貼り合わ
せ、或いは画像ＡとＢの減算（サブトラクション〉等の
画像処理を行なうに際し，｛ケ置合わせ時に画像Ａにマ
スクパターン画像２を合成した合成画像Ａ′と、画像Ｂ
を画像処裡部を介して表示面に重ねて表示する．表示面
では例えば画像Ａと両像Ｂの各画素が互い違いに同峙表
示されるため画ＩＡと画像Ｂの回転を含む位置合わせ状
態が簡便に認識でき位置合わせ不良の場合にも補正が容
易となる．［実施例］ 第ｌ図は本発リＩの第１の実施例を示し、同図に於で、
１はＩ［！底画像入力部、２は画像処理部、３は画像記
＋１１媒体、４は眼底カメラのデイストーション（歪曲
収差）補正係数記憶部、５は画像記憶媒体３の画像格納
アトレス情報を記惚するハツファ、６は透かし合成の際
に用いる透かしパターンを記憶しているパターン記憶部
，７は眼底画像の種々のアバーチャーデータを保存して
いるアパーチャーデータ記憶部、８はＰ麺像メモリ、９
は画像処理部２に対し種々のコマンドを送るコマント入
力部、ＩＯは画像を表示するモニタである。

また第２図は本発明の第１の実施例の貼り合わせ合成の
処理手順を示したフローチャートである。

次に第１図、：５２図の双方を参照して具体的な実施方
法を説明する。まず画像合戒の？Ｐ！備操作として、眼
底画像入力部ｌより眼底網膜のディジタル画像を入力す
る。

具体的には眼底カメラに取り付けられたＣＣＤカメラに
より被検１ｌ＋の眼底＃１膜を撮像しＡ／Ｄコンバータ
を介して入力する方法、また既にスライド等に収められ
ている眼底画像についてはスライドスキャナを用いて入
力する方法，ｙ！にスチールビデオやビデオレコーダー
に記録されている画像についてはＡ／Ｄコンハーターを
介して入力する方法等か考えられる。

入力された両像は画像記憶奴体３へ格納される。画像記
位媒体３は具体的には光ディスク，光磁気ディスク、ハ
ートディスク等が考えられる。

次に画像記位奴体３に格納されている眼底画像について
眼底カメラのディストーションの影費を補正する場合に
は、種々の眼底カメラのデイストーションの袖正係数を
記憶している補正係数記憶部４より補正する｛Ｕ底画像
をｔｌａ影した眼底カメラの補正係数をロートして画像
処理部２により補正を行なう。

以−Ｌの準備を終えた上で、画像記位媒体３に格納され
ている＋１４底画像の中で合成に使用する画像をコマン
ト入力部９からのコマント入力により指定し、指定した
画像の画像格納アトレス情報を八ツファ５へ格納する（
第２（司−１１）次にハツファ５にアドレスか格納され
ている画像の中から最初に合成する２枚の画像をコマン
ト入力部９からのコマンド操作により指定し、指定した
画像の画像格納アドレス情報をバッファ５へ格納する（
例えば画像Ａ、画像Ｂ）（第２図−１２）．そして次に
第３図に示されるようなマスクパターン、すなわちある
画像（例えば画像Ａ）と合戊し，ｆａ散した複数個の画
素のみを抽出した画像Ａ′を表示するためのデイシタル
画像を種々記位しているマスクパターン記憶部６より合
或に用いるマスクパターンを選択し、画像メモリ８ヘデ
イシタルマスクパターンｔｌ４像をロードする。

また、先程指定した画像Ａ、画像Ｂ？Ｍ像記憶奴体３か
ら画像格納アトレス情報をもとに画像メモリ８ヘロー卜
し、一方の画像Ｂを基準画像（第４１塁）としてセット
し、また他方の画像Ａをマスクパターン画像の格納され
ているメモリヘロートし，マスクパターン画像と合成さ
れた画像Ａ’　　（第５図）としてセットする．こむら
画像Ａ’，Ｂは画像処理部２内の画像を屯ね合せる公知
の機能により後述するように重ね合されて表示されるか
、この重ね合された領域では第３図の２２に画像Ｂの画
素が、又２３に画像Ａの画素がとりこまれ透かし表示さ
れることになる． ところで第６図に示すような眼底画像のアバーチャーが
有る場合これを除去するために、画ｍＡ及び画像Ｂに対
応して、第７図に示されるようなアバーチャー消去用デ
ィジタル画像をアバーチャーデータ記憶部７よりロード
し、画像処理部２により画像減算することによって第８
図に示されるようなアバーチャーのとれた画像を得るこ
とかできる． そしてこれらのアバーチャーのとれた両像Ａ′とＢとを
用いて前述した重ね合わせ表示を実行することになる．
そして：５５図に示されるような画像Ａ′を画像Ｂに対
し上下、左右、斜め力向ヘコマント入力部９のコマント
操作により画像モニタ８を見ながら移動し、おおよその
位置を（Ｘ，Ｙ方向）を合わせる． 尚、この移動の際、動作スピードはコマンド入力部９か
らの操作により変更か可能である．次に０方向に合わせ
るべ＜Ａ′，Ｂ両画像において共通している部位すなわ
ち重なっている部位（例えば血管の交叉部，分岐部ｋＪ
）を中心に画像Ａ′を回転させ、基準画像Ｂと合致させ
る．この九体的な方法の一例を次に示す．すなわちＡ’
　，Ｂ両画像について共通している部位（例えば血管の
交叉部、分岐部等）と思われる２組を画像モニタ１０を
見ながらコマンド入力部９からの操作により指定し、各
々の画像について２組の部位を接続する直線を引く．そ
してこの両画像の直線が平行となるように画像Ａ′を回
転させ、Ａ′とＢの両画像を合致させる． そして画像八゛と画像Ｂの位置合わせ状態か最良となる
ときの，画像Ａと画像Ｂが爪ね含わされた画像を記憶す
る． なお上記画像Ａ′の移動、回転は画像Ａ′並びに基や画
像Ｂの特徴点を指示する等の方法により、手動の他自動
，又は半自動で行なうこともｏｆ能てある． さて次にＡ，Ｂ両画像か合致された状態で表后画而内て
−Ｌ下，左右、斜め方向にコマント入力部９からのコマ
ント入力によりＡ，Ｂｌ．１４画像を移動させ、次の基
準画像（例えば画像Ｂ）を決める。そしてハツファ５に
アドレスか格納されている画像の中から次に合成する画
像Ｃとマスクパターン像を合成したＣ′を選択し、その
画像Ｃ′を画像記位媒体３から画像メモリ８上の前回選
択されているパターン（画像Ａ，Ｂが重ね合わされた画
像）に合或するようにセットする。

この際、マスクパターンを変更したい場合にはコマンド
入力部９からのコマンドによりパターン記憶部６内（収
められているパターンの中から選択し、画像メモリ８上
のマスク画像にセットする。

そして再び第２図における１５〜ｌ８を必要１１１１　
！￥繰り返し、画像の合成を実行する．以上の合成方法
では画像記憶媒体３に格納されている画像か大量である
ことを想定し合成する画像をそのつど画像記憶媒体から
検索していると時間がかかるので、バツファを利用し検
索時間を短縮するようにしたか、格納されている画像の
枚数か少ない場合には直線画像記位奴体からハッファを
使わずに検索することも可能てある。

また透かし合成に用いられるマスクパターンに関しては
、眼底のコントラストか悪いという条件を加味し、第３
図に示されるような市松模様のパターンの符わりにｉｌ
＋出部２２、透過部２３を各々水平方向においてｌ画素
、垂直方向において複数個の画素から構或し全体的に千
ｆ２，状の配列を持ったパターンとしても良い．貼り合
わせ合成された画像は画像メモソ８Ｌて第９図に示す如
く複数（第９図の例ではメモリ１〜メモリ４の計４枚）
の画像があたかも大きな１枚の画像のように画像処理部
２では認識され、図中に点線て示す部分のようにウイン
トウを設定して画像モニタｌＯ上にてコマント人力部９
からのコマンドにより上下、左右、斜め方向口山になが
め回すこと（ローミング）ができる。

以Ｌの画像の貼り合わせ合或処理並びに画像のローミン
グ等は全て画像処理部２にて行なう． なお上述した画像Ａ′，Ｂを各々白黒画像で表示しても
良く又例えば画像Ａ′をグリーン、画像Ｂをレットとい
った補色関係のカラー表示で行なっても良い。このよう
なカラー表示で行なえば画像Ａ′とＢの位置合わせが容
易となる。

さて第１０図，第ｉｉ図は本発明の第２の実施例を示し
、２枚の画像の減算（サブトラクション）を行なうもの
である。第１０図に於で２４は眼底画像入力部、２５は
画像処理部、２６は眼底カメラのデイストーション（歪
曲収差〉補正係数記憶部，２７は透かし合成の際に用い
る透かしパターンを記憶しているパターン記ｔｌ！部，
２８は画像メモリ、２９は画像処理部２５に対し、種々
のコマンドを送るコマンド入力部，３０は画像を出力す
るモニタである。

また第１１図は本発ＩＪＬの第２の実施例の処理−ｒ−
順を示したフローチャートである．ここで．７ｓｉｏ図
，第１１図の双方を参照して几体的な実施方法を説明す
る．まず、画像減算（サブトラクション）する２枚の画
像の位置合わせなするための透かしパターンをパターン
記憶部２７から選択し，画像メモリ２８へパターン画像
をロードする（第１１図−３１）．次に眼底画像入力部
２４よりサブトラクションを実行する２枚のディジタル
眼底画像を人力し、画像メモリ２Ｂに於て一方をそのま
ま格納して基憎画像とし、他方をパターン画像と合成し
てマスク画像として格納する（第１３図−３２）。この
眼底画像入力部２４の具体例としては、第１の実施例で
あげたものの他に、光ディスクや光磁気ディスク、ある
いはハードディスク等の画像記位媒体が考えられる．ま
た、位置合わせな正確に行なうためには、眼底カメラの
デイストーション補＋Ｅ係数記憶部２６の情報を用いて
第１の実施例に示す方法により、デイストーションを補
正してから合戊することも町能である。

次に第１の実施例に示したものと同様の方法によりマス
ク画像と基壁画像の位置合わせを行なう（第１３図−３
３）． そして位置か合った状懲で、画像減算（サブトラクショ
ン）を実行する．この際、どっちの画像か減算されるか
はあらかじめ決められていれば限定しない（第１３図−
３４〉． なお以上の実施例では眼科用特に眼底画像につき代表的
に述べたか、本発明はこれに限定されるものではない。

［発明の効果］ 以し、本発明によれば２次元的なマスクパターンを利用
した透かし表示により画ａ′Ａと画像Ｂの両画像を回時
に観察して両画像の位置合わせを迅速かつ正確に行なう
ことができ，その後の貼り合わせ，減算（サブトラクシ
ョン）等を良好に行なうことができる．

【図面の簡単な説明】

第１図、第２図は各々本発明の実施例の全体構成図、処
理フローチャート図、 第３１；４は透かし表示に用いるマスクパターンの図、 第４　［−４は基櫓画像としてセットされた眼庭画像Ｂ
の因、 第５図はマスクパターン画像２と合威された眼底画像Ａ
′の目、 第６図は眼底画像のアパーチャマスクを示した口、 第７図は眼底画像からアパーチャマスクを取り除くため
のアバーチャ消太用ディジタルｌＩｌｉ　ｍの図、 第８図はアパーチャマスクを取り除いた眼底画像の１，
４、 第９図はローミングを説１’ｌする図、第ｌＯ図，第１
１図は本発明の第２の実施例の全体ａ成図、外理フロー
チャート図、第ｌ２ｖＡ、第１３図は従来例の図、 図中１．２４は眼底画像入力部．２．２５は画像処理部
、３は画像記憶媒体、４．２６は係数記＋ｎ？＠．５は
ハツファ、６，２７はパターン記憶部、７はアパーチャ
データ記憶部、８．２８は画像メモリ、９．２９はコマ
ンド入力部、１０．３０はモニタである． 第３図 乙 第４図 第５図

Claims (1)

1. 【特許請求の範囲】 １、少なくとも一部に共通の画像部分を備えるように各
   々記憶された第１のディジタル画像Ａと第２のディジタ
   ル画像Ｂとに対し、両画像を位置合わせ後に画像処理を
   する画像処理装置において、 画像Ａに対し２次元的に離散した複数個の 画素のみを抽出するためのディジタルマスクパターン画
   像Ｚを記憶する手段と、 画像Ａに画像Ｚを合成した合成画像Ａ′と 画像Ｂを表示面に重ねて表示させる画像処理部を備え、 画像Ａと画像Ｂの両画像を同時に観察可能 としたことを特徴とする画像処理装置。 ２、画像処理として画像Ａと画像Ｂを貼合わせ処理する
   請求項１記載の画像処理装置。 ３、画像処理として画像Ａと画像Ｂを減算処理する請求
   項１記載の画像処理装置。 ４、前記マスクパターン画像Ｚは全体的に市松模様とな
   る複数個の画素のみを抽出するマスクパターン画像であ
   る請求項１記載の画像処理装置。 ５、前記画像Ａと画像Ｂは眼底画像であり且つ眼底画像
   特有のアパーチャマスクを除去する手段によりアパーチ
   ャマスクを除去した眼底画像である請求項１記載の画像
   処理装置。 ６、前記画像Ａと画像Ｂは眼底画像であり且つ眼底カメ
   ラの歪曲収差を補正する手段により歪曲収差を補正され
   た眼底画像である請求項１記載の画像処理装置。