JPS60159972A - 画像の精密位置合わせ装置 - Google Patents
画像の精密位置合わせ装置Info
- Publication number
- JPS60159972A JPS60159972A JP59013371A JP1337184A JPS60159972A JP S60159972 A JPS60159972 A JP S60159972A JP 59013371 A JP59013371 A JP 59013371A JP 1337184 A JP1337184 A JP 1337184A JP S60159972 A JPS60159972 A JP S60159972A
- Authority
- JP
- Japan
- Prior art keywords
- correlation coefficient
- position correction
- images
- pictures
- value
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000012937 correction Methods 0.000 claims abstract description 31
- 238000011156 evaluation Methods 0.000 claims description 13
- 238000000034 method Methods 0.000 claims description 3
- 230000008859 change Effects 0.000 description 9
- 230000006870 function Effects 0.000 description 9
- 238000010586 diagram Methods 0.000 description 3
- 230000000694 effects Effects 0.000 description 3
- 238000000605 extraction Methods 0.000 description 3
- 238000012545 processing Methods 0.000 description 3
- 238000001514 detection method Methods 0.000 description 2
- 238000003384 imaging method Methods 0.000 description 2
- 230000009466 transformation Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 230000035945 sensitivity Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/80—Geometric correction
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Image Processing (AREA)
- Image Analysis (AREA)
Abstract
(57)【要約】本公報は電子出願前の出願データであるた
め要約のデータは記録されません。
め要約のデータは記録されません。
Description
【発明の詳細な説明】
[発明の技術分野]
本発明は、相関係数と2枚の画像の画素毎の濃度差とい
う2つの指標を組み合わせた評価関数を用いて、2枚の
画像間の位置ズレな高#1度に補正できる、実用性の高
い画像の精密位置合わせ装置に関する。
う2つの指標を組み合わせた評価関数を用いて、2枚の
画像間の位置ズレな高#1度に補正できる、実用性の高
い画像の精密位置合わせ装置に関する。
[発明の技術的背景コ
衛星画像処理、或いは医用画像処理などの分野において
1時間差をもって撮像入力された複数枚の画像よりlF
rだに1枚の画像を合成しようとする場合、各画像間の
位置合わせが必要となる。この位置ズレの特性が既知で
あり、画像全体について一様とみなせ、かつ平行移動・
回転・拡大・縮小等の1次の座標変換式で表わされる場
合には、比較的簡単な信号処理で補正可能である。
1時間差をもって撮像入力された複数枚の画像よりlF
rだに1枚の画像を合成しようとする場合、各画像間の
位置合わせが必要となる。この位置ズレの特性が既知で
あり、画像全体について一様とみなせ、かつ平行移動・
回転・拡大・縮小等の1次の座標変換式で表わされる場
合には、比較的簡単な信号処理で補正可能である。
[背景技術の問題点コ
だが、前記衛星画像、或いは医用画像の場合には位置ズ
レの原因は幾つかの要素が複合したものである場合が多
く、位置ズレの量が局所的(二変化するため、単一の1
次座標変換で1Iiii像全体の位置合わせを行なうの
は困難である。
レの原因は幾つかの要素が複合したものである場合が多
く、位置ズレの量が局所的(二変化するため、単一の1
次座標変換で1Iiii像全体の位置合わせを行なうの
は困難である。
このため、従来は位置を合わせるべき画像を幾つかの小
領域に分割し、この各修昏対象領域部分を移動させつつ
、合わせられるべき画像との相関係数を計算し、この値
が最大になった部分を位置の合ったところとしていた。
領域に分割し、この各修昏対象領域部分を移動させつつ
、合わせられるべき画像との相関係数を計算し、この値
が最大になった部分を位置の合ったところとしていた。
しかしこの方法では、位置ズレが微小、或いは画像のコ
ントラスト差が小さい場合には相関係数値の変化量が非
常に小さくなり感度が悪く、画像にノイズが重畳した場
合などこの変化量が隠れてしまい誤った位置に収束する
場合がある、などの問題点があったため高精度の位置合
わせは困難であり、実用性に乏しかった。
ントラスト差が小さい場合には相関係数値の変化量が非
常に小さくなり感度が悪く、画像にノイズが重畳した場
合などこの変化量が隠れてしまい誤った位置に収束する
場合がある、などの問題点があったため高精度の位置合
わせは困難であり、実用性に乏しかった。
[発明の目的]
本発明はこのような問題点を克服するよう考慮してなさ
れたもので、その目的とするところは、相関係数と2枚
の画像の画素毎の濃度差という2つの指標を組み合わせ
た評価関数を用いて2枚の画像間の位置ズレな高精度に
補正する画像の精密位置合わせ装置を提供することにあ
る。
れたもので、その目的とするところは、相関係数と2枚
の画像の画素毎の濃度差という2つの指標を組み合わせ
た評価関数を用いて2枚の画像間の位置ズレな高精度に
補正する画像の精密位置合わせ装置を提供することにあ
る。
[発明の概要]
第1図に本発明のIHL理図を示す。
本発明は、2枚の画像をそれぞれ位置ズレ量が均一と考
えられる複数個の局所領域にpH+”lR+P、 11
・・・+ Q11+ Q1B+ QSl、・・・分割し
た後、これらの各局所領域毎にまず近傍領域内における
相関係数を各々求め、この値が最大となる位置に画像面
内で移動を繰り返す粗位置補正を行なった後、前記近傍
領域内における相関係数の変化の最大値が既め与えられ
た閾値以下になった時点で今度は前記近傍領域における
2枚の画像の画素毎の濃度差と相関係数を組み合わせた
評価関数が最大(最小)となる方向に移動を反復して、
精密位置補正を実行するものである。上記移動方向を最
大値方向とするか最小値方向とするかは上記評価関数の
作り方に依り決定される。
えられる複数個の局所領域にpH+”lR+P、 11
・・・+ Q11+ Q1B+ QSl、・・・分割し
た後、これらの各局所領域毎にまず近傍領域内における
相関係数を各々求め、この値が最大となる位置に画像面
内で移動を繰り返す粗位置補正を行なった後、前記近傍
領域内における相関係数の変化の最大値が既め与えられ
た閾値以下になった時点で今度は前記近傍領域における
2枚の画像の画素毎の濃度差と相関係数を組み合わせた
評価関数が最大(最小)となる方向に移動を反復して、
精密位置補正を実行するものである。上記移動方向を最
大値方向とするか最小値方向とするかは上記評価関数の
作り方に依り決定される。
最初は位置ズレが大きくてコントラスト差が無視できな
いため、正規化された指標である相関係数値を用いて上
記粗位置補正を行ない1位置がほとんど合った後はコン
トラストがほとんど同一と考えられるため、2枚の画像
の画素毎の濃度差をも考慮した上記評価関数を指標とし
た上記精密位置補正を実行することにより、相関係数値
のみを用いた場合に比べて前記位置ズレが微小、コント
ラスト差が小、或いは多少異なる画像の位置合わせの場
合にも誤った位置への収束防止が期待でき、その実用的
効果は多大である。
いため、正規化された指標である相関係数値を用いて上
記粗位置補正を行ない1位置がほとんど合った後はコン
トラストがほとんど同一と考えられるため、2枚の画像
の画素毎の濃度差をも考慮した上記評価関数を指標とし
た上記精密位置補正を実行することにより、相関係数値
のみを用いた場合に比べて前記位置ズレが微小、コント
ラスト差が小、或いは多少異なる画像の位置合わせの場
合にも誤った位置への収束防止が期待でき、その実用的
効果は多大である。
[発明の実施例]
以下、本発明の一実施例につき図面を参照して説明する
。
。
第2図に全体の構成図を示す。
撮像系1より画像メモリ2.3に入力された2枚の画像
の位置合わせを行なう場合、まず局所領域分割回路4に
より各々複数個の局所領域に分割した後位置補正対象領
域指定回路5によって位置合わせな行なう局所領域対を
選択し5局所領域メモリ6.7に格納する。
の位置合わせを行なう場合、まず局所領域分割回路4に
より各々複数個の局所領域に分割した後位置補正対象領
域指定回路5によって位置合わせな行なう局所領域対を
選択し5局所領域メモリ6.7に格納する。
まず粗位置補正部100では、上記局所領域メモリ6及
び近傍領域切り出し回路8により切り出された上記局所
領域メモリ7内の両画像に対して相関係数計算回路9に
より相関係数値をめ相関係数値メモリlOに格納する。
び近傍領域切り出し回路8により切り出された上記局所
領域メモリ7内の両画像に対して相関係数計算回路9に
より相関係数値をめ相関係数値メモリlOに格納する。
この操作を前記近傍領域切り出し回路8により指定され
る全近傍領域について行なった後、これらの相関係数値
群のうち最大のものを最大値検出N路11仁よりめ、移
動位置決定回路12によりこの相関係数の最大となる方
向に画像内で位置移動を行なう。同時に最大変化量計算
回路13により、前記近傍領域内の相関係数値の最大変
化量と予め与えられた変化量閾値14とを比較器15に
より比較し、上記最大変化量が上記聞値以下になる(つ
まり相関係数の変化がほとんど無くなる)迄前記粗位置
補正をくり返す。
る全近傍領域について行なった後、これらの相関係数値
群のうち最大のものを最大値検出N路11仁よりめ、移
動位置決定回路12によりこの相関係数の最大となる方
向に画像内で位置移動を行なう。同時に最大変化量計算
回路13により、前記近傍領域内の相関係数値の最大変
化量と予め与えられた変化量閾値14とを比較器15に
より比較し、上記最大変化量が上記聞値以下になる(つ
まり相関係数の変化がほとんど無くなる)迄前記粗位置
補正をくり返す。
閾値以下になった場合は、粗/精缶切り換え回路16に
より精密位置補正部200にうつる。
より精密位置補正部200にうつる。
本実施例では評価関数として絶対値誤差を用いることと
するこの場合移動方向ilt最小値の方向となる。
するこの場合移動方向ilt最小値の方向となる。
上記精密位置補正部200では、前記局所領域メモリ6
.7内の画像間の絶対値誤差を絶対値誤差計算回路17
によりめ絶対値駒差メモリ18に格納する。
.7内の画像間の絶対値誤差を絶対値誤差計算回路17
によりめ絶対値駒差メモリ18に格納する。
この操作を前記近傍領域切り出し回路8により指定され
る全近傍領域について行なった後、これらの絶対値誤差
のうち最小のものを最小値検出回路19によりめ移動位
置決定回路20によりこの絶対値誤差の最小となる方向
に画像内での位置移動を行なう。
る全近傍領域について行なった後、これらの絶対値誤差
のうち最小のものを最小値検出回路19によりめ移動位
置決定回路20によりこの絶対値誤差の最小となる方向
に画像内での位置移動を行なう。
同時に上記近傍領域内における絶対値誤差の最小値と予
め与えられた絶対値誤差閾値21を比較器22により比
較し精密位置補正終了判定回路23により上記最小値が
上記閾値以下になった場合は位置が合ったと判断して精
密位置補正を終了し、前記位置補正対象領域指定回路5
により新しい位置補正の対象となる局所領域対を指定し
、再び上記の操作を繰り返す。
め与えられた絶対値誤差閾値21を比較器22により比
較し精密位置補正終了判定回路23により上記最小値が
上記閾値以下になった場合は位置が合ったと判断して精
密位置補正を終了し、前記位置補正対象領域指定回路5
により新しい位置補正の対象となる局所領域対を指定し
、再び上記の操作を繰り返す。
[発明の効果コ
以上述べたように、まず粗位置補正部により相関係数値
を指標とする位置補正を行ない、この相関係数値の変化
がほとんど無くなった時点で2枚の画像の画素毎の濃度
差と相関係数を組み合わせた評価関数を指標とする精密
位置補正を行なうことによって2枚の画像間の簡易かつ
為精度な位置合わせが実現でき、その集用的効果は多大
である。
を指標とする位置補正を行ない、この相関係数値の変化
がほとんど無くなった時点で2枚の画像の画素毎の濃度
差と相関係数を組み合わせた評価関数を指標とする精密
位置補正を行なうことによって2枚の画像間の簡易かつ
為精度な位置合わせが実現でき、その集用的効果は多大
である。
尚、本発明は上述した実施例に限定されるものではない
。例えば、前記実施例では精密位置補正評価関数として
絶対値誤差を用いたが、より一般的に2枚の画像の画素
毎の濃度差と相関係数とを組み合わせた評価関数を採る
ことにより、より高精度な位置補正が実現できる。
。例えば、前記実施例では精密位置補正評価関数として
絶対値誤差を用いたが、より一般的に2枚の画像の画素
毎の濃度差と相関係数とを組み合わせた評価関数を採る
ことにより、より高精度な位置補正が実現できる。
又、粗位置補正部において、相関係数を指標とする代り
に、画1W中の特徴点をそれぞれ抽出し、これらの位置
を合わせるfeature watchingの手法を
用いることにより、更に高速な位置合わせが期待できる
。
に、画1W中の特徴点をそれぞれ抽出し、これらの位置
を合わせるfeature watchingの手法を
用いることにより、更に高速な位置合わせが期待できる
。
要するに、本発明はその主旨を逸脱しない範囲で種々変
形して実施することができる。
形して実施することができる。
第1図は本発明の原理図、第2図は本発明の一実施例の
構成図である。 1・・・撮像系 2.3・・・画像メモリ6.7・・・
局所領域メモリ 100・・・粗位置補正部 200・・・梢密位置袖正
部代理人 弁理士 則 近 憲 佑(ほか1名)第1図
構成図である。 1・・・撮像系 2.3・・・画像メモリ6.7・・・
局所領域メモリ 100・・・粗位置補正部 200・・・梢密位置袖正
部代理人 弁理士 則 近 憲 佑(ほか1名)第1図
Claims (1)
- 位置合わせすべき2枚の画像をそれぞれ複数個の局所領
域に分割する手段と、上記2枚の画像の局所領域群の中
から位置合わせの対象とするものをそれぞれ指定する手
段と、上記指定された領域の各近傍領域において、前記
位置合わせすべき2枚の画像の相関係数値を各近傍につ
いて計算し、格納する手段と、前記近傍領域内で計算さ
れた相関係数値群の中から最大値をめ、この最大となる
方向に画像面内で位置を移動することを繰り返す手段と
、前記各近傍領域内における相関係数値の変化が全て予
め与えられた閾値以下になったことを検出し、粗位置補
正を終了させる手段と、前記相関係数と前記2枚の画像
の画素毎の濃度差とを組み合わせた精密位置補正評価関
数を与える手段と、前記各近傍領域における、上記位置
合わせすぺ′@2枚の画像間の精密位置補正評価関数を
各々計算し格納する手段と、上記近傍領域内で計算され
た精密位置補正評価関数値群の中から最大値又は最小値
をめ、この最大又は最小となる方向に画像面内で位置を
移動することを繰り返す手段と、前記各近傍領域内にお
ける#M位置補正評価関数の値が全て予め与えられた閾
値に達した時位置が合ったと判定し精密位置補正を終了
させる手段を具備したことを特徴とする画像の精密位置
合わせ装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP59013371A JPS60159972A (ja) | 1984-01-30 | 1984-01-30 | 画像の精密位置合わせ装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP59013371A JPS60159972A (ja) | 1984-01-30 | 1984-01-30 | 画像の精密位置合わせ装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JPS60159972A true JPS60159972A (ja) | 1985-08-21 |
JPH0527152B2 JPH0527152B2 (ja) | 1993-04-20 |
Family
ID=11831225
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP59013371A Granted JPS60159972A (ja) | 1984-01-30 | 1984-01-30 | 画像の精密位置合わせ装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JPS60159972A (ja) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS62107386A (ja) * | 1985-11-05 | 1987-05-18 | Toshiba Corp | 画像マツチング方法 |
US9514384B2 (en) | 2014-04-28 | 2016-12-06 | Fujitsu Limited | Image display apparatus, image display method and storage medium storing image display program |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS5134369A (en) * | 1974-09-18 | 1976-03-24 | Honda Motor Co Ltd | Bureekideisuku no seiho |
JPS54149433A (en) * | 1978-05-16 | 1979-11-22 | Mitsubishi Electric Corp | Pattern collating unit |
JPS57137978A (en) * | 1981-02-20 | 1982-08-25 | Toshiba Corp | Pattern detecting device |
JPS5886659A (ja) * | 1981-11-18 | 1983-05-24 | Toshiba Corp | 画像の位置合せ装置 |
JPS58161082A (ja) * | 1982-03-19 | 1983-09-24 | Fujitsu Ltd | 印鑑照合方式 |
-
1984
- 1984-01-30 JP JP59013371A patent/JPS60159972A/ja active Granted
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS5134369A (en) * | 1974-09-18 | 1976-03-24 | Honda Motor Co Ltd | Bureekideisuku no seiho |
JPS54149433A (en) * | 1978-05-16 | 1979-11-22 | Mitsubishi Electric Corp | Pattern collating unit |
JPS57137978A (en) * | 1981-02-20 | 1982-08-25 | Toshiba Corp | Pattern detecting device |
JPS5886659A (ja) * | 1981-11-18 | 1983-05-24 | Toshiba Corp | 画像の位置合せ装置 |
JPS58161082A (ja) * | 1982-03-19 | 1983-09-24 | Fujitsu Ltd | 印鑑照合方式 |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS62107386A (ja) * | 1985-11-05 | 1987-05-18 | Toshiba Corp | 画像マツチング方法 |
US9514384B2 (en) | 2014-04-28 | 2016-12-06 | Fujitsu Limited | Image display apparatus, image display method and storage medium storing image display program |
Also Published As
Publication number | Publication date |
---|---|
JPH0527152B2 (ja) | 1993-04-20 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US6847392B1 (en) | Three-dimensional structure estimation apparatus | |
US6236748B1 (en) | Compound eye image pickup device utilizing plural image sensors and plural lenses | |
Gruen et al. | Geometrically constrained multiphoto matching | |
US5602584A (en) | Apparatus for producing a panoramic image using a plurality of optical systems | |
CN100442141C (zh) | 图像投影方法和设备 | |
Iocchi et al. | Visually realistic mapping of a planar environment with stereo | |
US7659921B2 (en) | Distance measurement apparatus, distance measurement method, and distance measurement program | |
EP0466277A1 (en) | Passive ranging and rapid autofocusing | |
US20100020178A1 (en) | Calibrating a camera system | |
US20070167154A1 (en) | Position data interpolation method, position detecting sensor and position measuring device | |
US20060222238A1 (en) | Image processing apparatus and image processing method | |
JPH082090B2 (ja) | 画像動き補正装置 | |
EP1455303B1 (en) | Apparatus for determining correspondences in a pair of images | |
CN110415269A (zh) | 一种动静态背景下的目标跟踪算法 | |
Park et al. | Estimation of camera parameters from image sequence for model-based video coding | |
KR100373615B1 (ko) | 촬영 화상을 사용한 지도 작성 방법, 장치 및 촬영 화상의일그러짐 보정 방법 | |
CN114396944B (zh) | 一种基于数字孪生的自主定位误差矫正方法 | |
US20090080767A1 (en) | Method for determining a depth map from images, device for determining a depth map | |
JPS60159972A (ja) | 画像の精密位置合わせ装置 | |
CN110322514B (zh) | 一种基于多中心投影模型的光场相机参数估计方法 | |
US10360662B2 (en) | Alignment of multiple camera images by matching projected one dimensional image profiles | |
JPH02255990A (ja) | 画像マッチング方式 | |
KR20160100687A (ko) | 시간적 일관성을 유지하는 다시점 이미지의 기하 왜곡 보정 방법 및 장치 | |
JPH02130404A (ja) | 画像処理方法 | |
Tamersoy et al. | Exploiting Geometric Restrictions in a PTZ Camera for Finding Point-orrespondences Between Configurations |