JP2014190700A - 目視照合支援装置およびその制御方法 - Google Patents

Abstract

【課題】２つの画像の目視による照合を容易にすることができる目視照合支援装置を提供する。
【解決手段】検査錠剤画像１０と真性錠剤画像２０のそれぞれに局所フィルタをスキャンして、上記局所フィルタの位置ごとに部分画像と局所フィルタの相関値を算出し、算出された相関値を輝度値として用いた輝度画像１１、２１を生成する。輝度画像１１、１２において輝度値が所定の閾値以上である複数の特徴点を決定し、複数の特徴点に基づいて、第１および第２の画像の相対的なズレを解消する位置合わせパラメータを算出する。算出される位置合わせパラメータを用いて第１の輝度画像１１と第２の輝度画像２１が位置合わせされる。位置合わせされた第１の輝度画像１１と第２の輝度画像２１の両方が表示装置の表示画面上に表示される。
【選択図】図３

Description

この発明は，目視照合支援装置および目視照合支援装置を制御する方法に関する。

製薬会社等で製造される粉末薬剤を固形化した錠剤の表面の凹凸パターンは全ての錠剤について固有である。製薬会社等で製造される多数の錠剤のそれぞれを撮像した画像（真性錠剤画像）を保存しておき，保存されている多数の真性錠剤画像の中から検査対象錠剤の画像と同じ真性錠剤画像を検索することで，検査対象の錠剤が真性なものであるかどうかを判定することができる。

特許文献１，２は重ね合わせ画像を生成することで２つの画像の一致していない部分や対応関係を把握するものを記載する。特許文献３には印鑑の印影を反転して表示することで照合印鑑の刻印内容との照合を容易にするものが記載されている。引用文献４には指紋画像を位置合わせするものが記載されている。

特開２０１０−１０２６３９号公報 特開平６−２５８４４８号公報 特開２００４−１０２５６５号公報 特開平１０−１０５７１１号公報

しかしながら，錠剤の表面の凹凸パターンは微細であり，単純に真性錠剤画像と検査錠剤画像を並べて表示したり，重ね合わせ表示しても，それらが同じであるかどうかを視覚的に認識することは容易ではない。

この発明は，２つの画像の目視による照合を容易にすることを目的とする。たとえば，同一物を異なる場所ないし異なる時間に撮影することで取得された２つの画像を，比較的正確に同一画像であると判断できるようにすることを目的とする。

この発明による目視照合支援装置は，画像に所定の輝度分布を持つ局所フィルタをスキャンし，上記局所フィルタの位置ごとに，上記画像のうちの部分画像と上記局所フィルタの相関値を算出する相関値算出手段，上記相関値算出手段によって算出される複数の相関値を，スキャンされる上記局所フィルタの位置に応じて配列した相関値二次元配列データを作成する手段，上記相関値二次元配列データにおける相関値を輝度値として用いた輝度画像データが表す輝度画像において輝度値が所定の閾値以上である複数の特徴点を決定する特徴点決定手段を備える。目視照合支援装置はさらに，与えられる２つの画像データが表す第１の画像および第２の画像のそれぞれについて上記特徴点決定手段によって決定される複数の特徴点に基づいて，第１および第２の画像の相対的なズレを解消する位置合わせパラメータを算出する位置合わせパラメータ算出手段，算出される位置合わせパラメータを用いて，上記第１の画像から生成される第１の輝度画像データが表す第１の輝度画像と上記２の画像から生成される第２の輝度画像データが表す第２の輝度画像を位置合わせする位置合わせ手段，ならびに位置合わせされた第１の輝度画像と第２の輝度画像の両方を，表示装置の表示画面上に表示する表示制御手段を備える。

この発明は上述した目視照合支援装置の制御に適する方法も提供する。この発明による目視照合支援装置の動作制御方法は，与えられる２つの画像データが表す第１の画像および第２の画像のそれぞれについて，所定の輝度分布を持つ局所フィルタをスキャンし，上記局所フィルタの位置ごとに，上記画像のうちの部分画像と上記局所フィルタの相関値を，相関値算出手段によって算出し，算出した複数の相関値を，スキャンされる上記局所フィルタの位置に応じて配列した相関値二次元配列データを二次元配列データ作成手段によって作成し，上記相関値二次元配列データにおける相関値を輝度値として用いた輝度画像データが表す輝度画像において輝度値が所定の閾値以上である複数の特徴点を，特徴点決定手段によって決定し，与えられる２つの画像データが表す第１の画像および第２の画像のそれぞれについて決定される複数の特徴点に基づいて，位置合わせパラメータ算出手段によって，第１および第２の画像の相対的なズレを解消する位置合わせパラメータを算出し，算出した位置合わせパラメータを用いて，位置合わせ手段によって，上記第１の画像から生成される第１の輝度画像データが表す第１の輝度画像と上記第２の画像から生成される第２の輝度画像データが表す第２の輝度画像を位置合わせし，位置合わせされた第１の輝度画像と第２の輝度画像の両方を，表示制御手段によって，表示装置の一の表示画面上に表示する。

上記局所フィルタには，たとえば，中心の輝度が最も高く，中心から離れるにしたがって同心円状に輝度が次第に低下している画像を用いることができる。中心の輝度が最も低く，中心から離れるにしたがって同心円状に輝度が次第に上昇している画像を局所フィルタとして用いてもよい。

この発明によると，第１，第２の２つの画像自体ではなく，第１，第２の画像と局所フィルタとの間で算出される相関値を輝度値として用いた第１，第２の輝度画像が一の表示画面上に表示される。第１，第２の画像に内在する画像特徴を強調して表す第１，第２の輝度画像を見比べることができるので，第１，第２の２つの画像が同じであるかどうかを認識しやすい。

さらに，この発明によると，第１，第２の輝度画像において輝度値が所定の閾値以上である複数の特徴点に基づいて算出される，第１および第２の画像の相対的なズレ（平行移動ずれ，拡大／縮小ずれ，回転ずれ）を解消する位置合わせパラメータを用いて位置合わせが行われた上で，第１，第２の輝度画像は表示される。このため，表示画面上に表示される第１，第２の輝度画像は，これらの第１，第２の輝度画像の生成に用いられた第１，第２の画像が同一物から得られたものであれば，たとえば撮像時に第１の画像と第２の画像とに回転ずれがあった（同一物を第１の画像の撮像時と第２の画像の撮像時とでたとえば上下逆さまに撮像した）としても，第１，第２の輝度画像の同じ画素位置の明るさはほぼ同じものになる（第１，第２の輝度画像から視認される明るい画素のパターンがほぼ同じになる）。表示画面に表示される第１，第２の輝度画像を見比べることで，第１，第２の輝度画像が同じであることまたは同じでないことを，比較的簡単に確認することができる。

第１の輝度画像と第２の輝度画像の表示の態様には，様々な態様がある。

その一は，第１の輝度画像と第２の輝度画像を重ね合わせることなく並べて表示画面上に表示する態様である。第１の輝度画像と第２の輝度画像を，たとえば交互に見て比較することができる。

その二は，第１の輝度画像と第２の輝度画像を重ね合わせて表示画面上に表示する態様である。重なり合っている画素が多ければ，第１の輝度画像と第２の輝度画像は同じであると判断することができる。

その三は，第１の輝度画像と第２の輝度画像の位置をずらした状態で重ね合わせて表示画面上に表示する態様である。たとえば一対の明るい画素のペアが多数存在すれば，第１の輝度画像と第２の輝度画像は同じであると判断することができる。

第１の輝度画像の色と第２の輝度画像の色を異ならせて表示してもよい。第１の輝度画像の色と第２の輝度画像の色を異ならせて，かつその第１の輝度画像と第２の輝度画像を重ね合わせて表示すると，第１の輝度画像と第２の輝度画像が同じであれば，第１の輝度画像の色（たとえば赤）と第２の輝度画像の色（たとえば緑）の混合色（赤と緑の混合色は黄）が表示画面上に多く現れる。表示画面上に現れる混合色の多さによって，第１の輝度画像と第２の輝度画像は同じであるか否かを判断することができる。

第１の輝度画像と第２の輝度画像を重ね合わせて表示する場合，上記第１の輝度画像および第２の輝度画像の一方について，輝度画像そのものの表示に代えて，上記複数の特徴点のそれぞれについて上記特徴点を中心とする図形画像（円画像，矩形画像など）を表示画面上に表示してもよい。たとえば円で囲まれている明るい画素が多い場合に，第１の輝度画像と第２の輝度画像は同じであると判断することができる。

上述した２種類の局所フィルタの両方を用いてもよい。第１，第２の画像についてそれぞれ決定される特徴点の数を増やすことができる。

目視照合支援システムの全体的構成を示すブロック図である。 目視照合支援装置の処理を示すフローチャートである。 目視照合支援装置の処理を，具体的な画像例を用いて示す。 局所フィルタ処理の様子を示す。 局所フィルタを示す。 局所フィルタの他の例を示す。 輝度画像を拡大して示す。 ２つの輝度画像の表示態様を示す。 ２つの輝度画像の表示態様の他の例を示す。 ２つの輝度画像の表示態様の他の例を示す。

図１は目視照合支援システムの全体的構成を示すブロック図である。

目視照合支援システムは，多数の真性錠剤のそれぞれを撮像装置によって撮像することによって作成される多数の真性錠剤画像20の中に，検査錠剤を撮像装置によって撮像することによって作成される検査錠剤画像10と同一のものがあるかどうかを判断する照合作業を支援するシステムである。検査錠剤画像10と同一の真性錠剤画像が多数の真性錠剤画像20の中に存在すれば，その検査錠剤画像10の撮像に用いられた検査錠剤は真性錠剤であることが判定される。逆に検査錠剤画像10と同一の真性錠剤画像が多数の真性錠剤画像20の中に存在しなければ，その検査錠剤画像10の撮像に用いられた検査錠剤は真性錠剤ではない（偽造錠剤である）ことが判定される。

多数の真性錠剤のそれぞれおよび検査錠剤は，それらの表面に固有の微細な凹凸パターンを持つ。しかしながら凹凸パターンが微細であるために，真性錠剤画像20そのものと検査錠剤画像10そのものを並べて表示しても，真性錠剤画像20と検査錠剤画像10がたとえ同じ錠剤を撮像することによってそれぞれ作成されたものであったとしても，真性錠剤画像20と検査錠剤画像10が同じであることを判断するのは困難である。

そこで目視照合支援システムでは，検査錠剤画像10そのものと真性錠剤画像20そのものを表示するのではなく，以下に説明する画像処理によって得られる輝度画像（コントラスト強調画像）を検査錠剤画像10と真性錠剤画像20のそれぞれから作成して，作成した２つの輝度画像を表示装置２の表示画面に表示する。２つの輝度画像を比べる（目視によって照合）することで，２つの輝度画像が同じであるか否かを格段に容易に判断することができる。２つの輝度画像が同じであれば，その２つの輝度画像の生成に用いられた検査錠剤画像10と真性錠剤画像20は同じであり，その検査錠剤画像10の撮像に用いられた検査錠剤は真性錠剤であると取り扱われる。

目視照合支援システムは，目視照合支援装置１と，目視照合支援装置１に接続される表示装置２とを備えている。目視照合支援装置１は，ＣＰＵ，メモリ，ハードディスク等を備えるコンピュータ・システムであり，検査錠剤画像10を表す画像データの入力および真性錠剤画像20を表す画像データの入力を受け付けるデータ入力部（入力ポート）１ａおよび生成した輝度画像を表すデータを出力するデータ出力部（出力ポート）１ｂを含む。以下に説明する処理をコンピュータ・システムに実行させるプログラムをハードディスクにインストールし，これを実行することによってコンピュータ・システムが目視照合支援装置１として機能する。目視照合支援装置１のデータ出力部１ｂから出力される，上記検査錠剤画像10と真性錠剤画像20のそれぞれから作成される輝度画像を表すデータが表示装置２に与えられる。表示装置２の表示画面に，検査錠剤画像10から作成される輝度画像11と真性錠剤画像20から作成される輝度画像21とが，たとえば表示画面上において横方向に並べてられて表示される。

図２は目視照合支援装置１の処理を示すフローチャートである。図３は目視照合支援装置１の処理を具体的な画像を用いて示すものである。

上述のように，検査対象の検査錠剤画像10と真性錠剤画像20の２つの画像が目視照合支援装置１に入力する（ステップ31）。

検査錠剤画像10と真性錠剤画像20のそれぞれについて，以下の処理が行われる。

はじめに局所フィルタ処理（相関値算出処理）が行われる（ステップ32）。図４は検査錠剤画像10に対する局所フィルタ処理の様子を示している。図５は局所フィルタ処理に用いられる局所フィルタ（テンプレート画像）Ｆ１の一例を示している。

局所フィルタ処理では，処理対象画像（ここでは検査錠剤画像10）の一部であるスキャン・ウインドウＳ内の部分画像と局所フィルタＦ１の相関値ｒが算出される。図４を参照して，検査錠剤画像10およびスキャン・ウインドウＳはいずれも矩形であり，たとえば検査錠剤画像10は128画素×128画素の大きさを，スキャン・ウインドウＳは９画素×９画素の大きさをそれぞれ持つ。図５に拡大して示す局所フィルタＦ１はスキャン・ウインドウＳと同じ９画素×９画素の大きさを持つ。

検査錠剤画像10から抽出される上記スキャン・ウインドウＳ内の部分画像と局所フィルタＦ１とを用いて相関演算を行うことで，部分画像と局所フィルタＦ１の相関値ｒが算出される。相関値ｒを算出する相関演算処理には既知の様々なアルゴリズム，たとえばＳＳＤ（Sum of SquaredDifference），ＳＡＤ（Sum of Absolute Difference），ＮＣＣ（Normalized Cross-Correlation），ＺＮＣＣ（Zero-mean Normalized Cross-Correlation）などを用いることができる。

スキャン・ウインドウＳは，検査錠剤画像10内を水平方向および垂直方向に所定距離（たとえば１画素）ずつ移動させられ，移動のたびにスキャン・ウインドウＳ内の部分画像と局所フィルタＦ１の相関値ｒが算出される。

図５に示す局所フィルタＦ１は二次元正規分布に基づくもので，中心の輝度が最も高く，中心から離れるにしたがって同心円状に輝度が次第に低下しているものである。このような局所フィルタＦ１を用いて相関演算を行うことで，回転に対してロバストな相関値ｒを得ることができる。局所フィルタＦ１を用いると，輝度が高い部分画像について大きな値の相関値ｒが算出され，輝度が低い部分画像について小さな値の相関値ｒが算出される。

図６は他の局所フィルタＦ２を示している。

図６に示す局所フィルタＦ２も二次元正規分布に基づくものであるが，図５に示す局所フィルタＦ１とは逆に，中心の輝度が最も低く，中心から離れるにしたがって同心円状に輝度が次第に上昇している。局所フィルタＦ２を用いて相関演算を行うことで，輝度が低い部分画像について大きな値の相関値ｒが算出され，輝度が高い部分画像について小さな値の相関値ｒが算出される。

図２に戻って，スキャン・ウインドウＳがエンドポイント（検査錠剤画像10の右下隅）に達し，相関値ｒの算出が終了すると，算出された多数の相関値ｒを格納した二次元配列テーブルが作成される（ステップ33）。二次元配列テーブルにおける多数の相関値ｒの配列（行方向および列方向）は，上述したスキャン・ウインドウＳの検査錠剤画像10における位置に対応する。

上述した二次元配列テーブルに格納された多数の相関値ｒを輝度値（濃度値）として用いた輝度画像11（相関値ｒ（＝輝度値）に応じた明るさを持つ多数の画素から構成される画像）を表すデータが作成される（ステップ34）。たとえば，二次元配列テーブルに格納されている多数の相関値ｒのうちの最も小さい値の相関値ｒを輝度値０に対応させ，最も大きな値の相関値ｒを輝度値255に対応させることで，256段階の明るさによって多数の相関値ｒを表現する輝度画像11（図３参照）が作成される。もっとも，上述した二次元配列テーブルに格納する相関値ｒをあらかじめ８ビット（０〜255）のデータによって表現しておけば，二次元配列テーブルをそのまま輝度画像データとして用いることもできる。

作成された輝度画像11を構成する多数の画素のうち所定閾値以上の輝度値を持つ画素の場所（座標）が，検査錠剤画像10の特徴点に決定される（ステップ35）。設定される閾値に応じて特徴点の数は変化する。複数の特徴点が決定されるように上記閾値は設定される。図３には，分かりやすくするために，検査錠剤画像10について決定される複数の特徴点（座標）を×印によって示す画像（特徴点画像）12を示しているが，特徴点画像12を作成する必要は必ずしもない。

所定閾値以上の輝度値を持つ複数の画素が集合（隣接）している場合には，その集合画素に一つの特徴点（座標）を対応付けてもよい。この場合には，隣接している所定閾値以上の輝度値を持つ複数の画素がグルーピングされる。図７は輝度画像11の一部拡大画像11ａを示すもので，３つのグルーピングされた集合画素が示されている。たとえば，集合画素Ｇ１の重心ｇ１の座標が特徴点として扱われる。重心に代えて，集合画素Ｇ１の外接矩形または内接矩形の中心の座標を特徴点としてもよい。

上述のようにして，検査錠剤画像10から輝度画像11が生成され（ステップ32〜34），かつ検査錠剤画像10の複数の特徴点が決定される（ステップ35）。真性錠剤画像20からも輝度画像21が生成され（ステップ32〜34），検査錠剤画像20の複数の特徴点が決定される（ステップ35）。次に位置合わせパラメータの算出に進む（ステップ36）。

図３を参照して，位置合わせパラメータの算出に，検査錠剤画像10の複数の特徴点と，真性錠剤画像20の複数の特徴点とが用いられる。位置合わせパラメータの算出には，たとえばジオメトリックハッシング法を用いることができる。ジオメトリックハッシング法では，検査錠剤画像10について決定された複数の特徴点の幾何学的特性（特徴点同士の間隔，複数の特徴点を直線で結ぶことによって規定される図形形状など）と，真性錠剤画像20について決定された複数の特徴点の幾何学的特性とが対応づけられ，これにより検査錠剤画像10と真性錠剤画像20の位置を合わせる（合致度を高める）ためのパラメータ（移動パラメータ，拡大／縮小パラメータ，回転パラメータ）が算出される。ジオメトリックハッシング法を用いることで，検査対象画像10から生成される複数の特徴点の幾何学的特性（図３の特徴点画像12を参照）と，真性錠剤画像20から生成される複数の特徴点の幾何学的特性（図３の特徴点画像22を参照）とが最も類似することになる位置合わせパラメータが算出される。

算出された位置合わせパラメータにしたがって，検査錠剤画像10から生成された輝度画像11が平行移動，拡大／縮小，回転される（「位置合わせ補正」という）（ステップ37）。検査錠剤画像10から生成された輝度画像11に代えて，真性錠剤画像20から生成された輝度画像21を位置合わせ補正してもよい。位置合わせ補正された輝度画像11と，輝度画像21とが上述したように表示装置２に与えられ，表示装置２の表示画面上に並べられて表示される（図１参照）。

輝度画像11，21は，上述したように，局所フィルタＦ１を用いて検査錠剤画像10，真性錠剤画像20のそれぞれから生成されるものであり，検査錠剤画像10に内在する画像特徴および真性錠剤画像20に内在する画像特徴を強調してそれぞれ表す。また，上述したように，検査錠剤画像10から生成された輝度画像11は，真性錠剤画像20から生成された輝度画像21に類似するように位置合わせ補正された上で表示画面上に表示される。このため，表示画面上に表示される輝度画像11，21は，これらの輝度画像11，12の生成に用いられた検査錠剤画像10，真性錠剤画像20が同一錠剤から得られたものであれば，たとえば撮像時に検査錠剤画像10と真性錠剤画像20に回転ずれがあった（たとえば同一錠剤を検査錠剤画像10の撮像時と真性錠剤画像20の撮像時とで上下逆さまに撮像した）としても，輝度画像11，21の同じ画素位置の明るさはほぼ同じものになる（２つの輝度画像11，21から視認される明るい画素のパターンがほぼ同じになる）。表示画面に表示される輝度画像11，12を見比べることで，輝度画像11，21が同じであることまたは同じでないことを，比較的簡単に確認することができる。輝度画像11，21が同じである場合，それは検査錠剤画像10と真性錠剤画像20が同一錠剤を撮像することによってそれぞれ得られた画像であることを意味するから，検査錠剤画像10の撮像に用いられた検査錠剤は真性錠剤であると判断することができる。逆に輝度画像11，21が同じでない場合には，検査錠剤は真性錠剤でないことを判断することができる。

上述した局所フィルタＦ１（図５）と局所フィルタＦ２（図６）の両方をそれぞれを用いて，検査錠剤画像10および真性錠剤画像20についての複数の特徴点を決定してもよい。決定される特徴点を増加することができる。

検査錠剤画像10から生成された輝度画像11と真性錠剤画像20から生成された輝度画像21とが同一であるか否かを判断するために表示装置２の表示画面に輝度画像11，21を表示するときの態様は，上述したように輝度画像11，21を並べて表示してもよいし（図１参照），以下に説明するように，他の態様で表示してもよい。

図８は，検査錠剤画像10から生成された輝度画像11を赤色（Ｒ）によって，真性錠剤画像20から生成された輝度画像21を緑色（Ｇ）によってそれぞれ表し，表示装置２の表示画面には輝度画像（赤）11Ｒと輝度画像（緑）21Ｇを重ね合わせて表示するものである。赤画素と緑画素が重ね合わされると，その画素は表示画面において黄色（Ｙ）によって表現される。黄色（Ｙ）画素の多さによって，輝度画像11，21が同一であるか否かを判断することができる。

図９は，検査錠剤画像10から生成された輝度画像11を赤色（Ｒ）によって，真性錠剤画像20から生成された輝度画像21を緑色（Ｇ）によってそれぞれ表し，表示装置２の表示画面には輝度画像（赤）11Ｒと輝度画像（緑）21Ｇの位置を少しずらして重ね合わせて表示するものである。隣接する赤（Ｒ）画素と緑（Ｇ）画素の対の多さによって，輝度画像11，21が同一であるか否かを判断することができる。

図１０は，検査錠剤画像10から生成された輝度画像11と，真性錠剤画像20から決定される複数の特徴点（特徴点画像22）（図３参照）とを用いて，輝度画像11と，真性錠剤画像20から決定される複数の特徴点のそれぞれを中心とする所定直径の円画像22ａとを重ね合わせて表示装置２の表示画面に表示するものである。複数の円画像22ａの円内に輝度画像11の明るい画素がそれぞれ入っていれば，輝度画像11，21が同一であることを推定することができる。円画像22ａに代えて，矩形，三角形，その他の形状の図形画像を用いてもよい。

１ 目視照合支援装置（相関値算出手段，相関値二次元配列データ作成手段，輝度画像データ生成手段，特徴点決定手段，パラメータ算出手段，位置合わせ手段，表示制御手段）
２ 表示装置
10 検査錠剤画像
11，21 輝度画像
20 真性錠剤画像
Ｆ１，Ｆ２ 局所フィルタ

Claims (10)

1. 画像に所定の輝度分布を持つ局所フィルタをスキャンし，上記局所フィルタの位置ごとに，上記画像のうちの部分画像と上記局所フィルタの相関値を算出する相関値算出手段，
   上記相関値算出手段によって算出される複数の相関値を，スキャンされる上記局所フィルタの位置に応じて配列した相関値二次元配列データを作成する手段，
   上記相関値二次元配列データにおける相関値を輝度値として用いた輝度画像データが表す輝度画像において輝度値が所定の閾値以上である複数の特徴点を決定する特徴点決定手段を備え，
   与えられる２つの画像データが表す第１の画像および第２の画像のそれぞれについて上記特徴点決定手段によって決定される複数の特徴点に基づいて，第１および第２の画像の相対的なズレを解消する位置合わせパラメータを算出する位置合わせパラメータ算出手段，
   算出される位置合わせパラメータを用いて，上記第１の画像から生成される第１の輝度画像データが表す第１の輝度画像と上記２の画像から生成される第２の輝度画像データが表す第２の輝度画像を位置合わせする位置合わせ手段，ならびに
   位置合わせされた第１の輝度画像と第２の輝度画像の両方を，表示装置の表示画面上に表示する表示制御手段，
   を備える目視照合支援装置。
2. 上記表示制御手段は，第１の輝度画像と第２の輝度画像を表示画面上に重ね合わせることなく並べて表示するものである，
   請求項１に記載の目視照合支援装置。
3. 上記表示制御手段は，第１の輝度画像と第２の輝度画像を表示画面上に重ね合わせて表示するものである，
   請求項１に記載の目視照合支援装置。
4. 上記表示制御手段は，第１の輝度画像と第２の輝度画像の位置をずらした状態で重ね合わせて表示画面上に表示するものである，
   請求項１に記載の目視照合支援装置。
5. 上記表示制御手段は，第１の輝度画像の色と第２の輝度画像の色を異ならせて表示画面上に表示するものである，
   請求項１から４のいずれか一項に記載の目視照合支援装置。
6. 上記表示制御手段は，上記第１の輝度画像および第２の輝度画像の一方について，輝度画像そのものの表示に代えて，上記複数の特徴点のそれぞれについて上記特徴点を中心とする図形画像を表示画面上に表示するものである，
   請求項３に記載の目視照合支援装置。
7. 上記局所フィルタが，中心の輝度が最も高く，中心から離れるにしたがって同心円状に輝度が次第に低下している画像である，
   請求項１から６のいずれか一項に記載の目視照合支援装置。
8. 上記局所フィルタが，中心の輝度が最も低く，中心から離れるにしたがって同心円状に輝度が次第に上昇している画像である，
   請求項１から６のいずれか一項に記載の目視照合支援装置。
9. 請求項７および請求項８に記載の２種類の局所フィルタの両方を用いる，
   請求項１に記載の目視照合支援装置。
10. 与えられる２つの画像データが表す第１の画像および第２の画像のそれぞれについて，所定の輝度分布を持つ局所フィルタをスキャンし，上記局所フィルタの位置ごとに，上記画像のうちの部分画像と上記局所フィルタの相関値を，相関値算出手段によって算出し，
    算出した複数の相関値を，スキャンされる上記局所フィルタの位置に応じて配列した相関値二次元配列データを二次元配列データ作成手段によって作成し，
    上記相関値二次元配列データにおける相関値を輝度値として用いた輝度画像データが表す輝度画像において輝度値が所定の閾値以上である複数の特徴点を，特徴点決定手段によって決定し，
    与えられる２つの画像データが表す第１の画像および第２の画像のそれぞれについて決定される複数の特徴点に基づいて，位置合わせパラメータ算出手段によって，第１および第２の画像の相対的なズレを解消する位置合わせパラメータを算出し，
    算出した位置合わせパラメータを用いて，位置合わせ手段によって，上記第１の画像から生成される第１の輝度画像データが表す第１の輝度画像と上記第２の画像から生成される第２の輝度画像データが表す第２の輝度画像を位置合わせし，
    位置合わせされた第１の輝度画像と第２の輝度画像の両方を，表示制御手段によって，表示装置の表示画面上に表示する，
    目視照合支援装置の動作制御方法。