JPH04145777A - 動きベクトル検出装置 - Google Patents
動きベクトル検出装置Info
- Publication number
- JPH04145777A JPH04145777A JP2269255A JP26925590A JPH04145777A JP H04145777 A JPH04145777 A JP H04145777A JP 2269255 A JP2269255 A JP 2269255A JP 26925590 A JP26925590 A JP 26925590A JP H04145777 A JPH04145777 A JP H04145777A
- Authority
- JP
- Japan
- Prior art keywords
- motion vector
- value
- memory
- image
- accumulation
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 239000013598 vector Substances 0.000 title claims abstract description 73
- 238000009825 accumulation Methods 0.000 claims abstract description 10
- 238000001514 detection method Methods 0.000 claims abstract description 10
- 230000001186 cumulative effect Effects 0.000 claims description 20
- 230000015654 memory Effects 0.000 abstract description 32
- 238000012545 processing Methods 0.000 description 17
- 238000010586 diagram Methods 0.000 description 12
- 238000000034 method Methods 0.000 description 11
- 238000012937 correction Methods 0.000 description 8
- 230000035508 accumulation Effects 0.000 description 4
- 230000006641 stabilisation Effects 0.000 description 4
- 238000011105 stabilization Methods 0.000 description 4
- 238000006073 displacement reaction Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 229940028444 muse Drugs 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- GMVPRGQOIOIIMI-DWKJAMRDSA-N prostaglandin E1 Chemical compound CCCCC[C@H](O)\C=C\[C@H]1[C@H](O)CC(=O)[C@@H]1CCCCCCC(O)=O GMVPRGQOIOIIMI-DWKJAMRDSA-N 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
- G06T7/223—Analysis of motion using block-matching
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
- G06T7/254—Analysis of motion involving subtraction of images
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
- H04N23/681—Motion detection
- H04N23/6811—Motion detection based on the image signal
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
- H04N23/682—Vibration or motion blur correction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
- H04N23/682—Vibration or motion blur correction
- H04N23/685—Vibration or motion blur correction performed by mechanical compensation
- H04N23/687—Vibration or motion blur correction performed by mechanical compensation by shifting the lens or sensor position
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10016—Video; Image sequence
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Image Analysis (AREA)
- Resistance Heating (AREA)
Abstract
(57)【要約】本公報は電子出願前の出願データであるた
め要約のデータは記録されません。
め要約のデータは記録されません。
Description
【発明の詳細な説明】
〔産業上の利用分野］
本発明は画像信号の動きベクトル検出技術に関し、カメ
ラ一体型ＶＴＲの手振れ防止への利用に関するものであ
る。
ラ一体型ＶＴＲの手振れ防止への利用に関するものであ
る。
〔従来の技術］
従来、供給された画像を定められた大きさのブロックに
分割し、各ブロックについて、前フレーム画像と現フレ
ーム画像との相関によりどの方向にどの程度動いたかを
表す“動きベクトル°゛を抽出する方法が種々考案され
ている。これらの方法として、動きベクトルを、輝度値
の空間的勾配と時間的勾配から求める勾配法、フーリエ
変換係数の位相項の比率から求める位相相関法、片方の
画像の代表点ともう一方の画像とのフレーム間差分の絶
対値の累積値から求める代表点マツチング手法がある。
分割し、各ブロックについて、前フレーム画像と現フレ
ーム画像との相関によりどの方向にどの程度動いたかを
表す“動きベクトル°゛を抽出する方法が種々考案され
ている。これらの方法として、動きベクトルを、輝度値
の空間的勾配と時間的勾配から求める勾配法、フーリエ
変換係数の位相項の比率から求める位相相関法、片方の
画像の代表点ともう一方の画像とのフレーム間差分の絶
対値の累積値から求める代表点マツチング手法がある。
これらのうち、ハードウェアの規模が比較的小さく実現
されているのが、ＭＵＳＥエンコーダーに使用されてい
る代表点マツチング手法である。
されているのが、ＭＵＳＥエンコーダーに使用されてい
る代表点マツチング手法である。
この代表点マツチング手法を、第２図のように供給され
たフレーム画像を４分割し、そのうちの１ブロツクにつ
いて動きベクトルを求める場合について説明する。まず
１ブロツクについてｂＸｃ−２個の代表点を選び、探索
範囲ｍ画素×ｎ画素の領域においてフレーム間差分の絶
対値ｐ ａ、 ｅ（＋＋ｊ）−１ａ ”ａ、 ＩＩ（Ｉ
ＩＪ ） ａ ”−’ａ、 ａ（０＋Ｏ）を多値で求
める。各々の代表点に関しρａ、ｅ（ｉ＋ｊ）の累積和 ρ（ｉ、ｊ）−ΣΣρａ＝ｅ（ＩＩＪ）をとり、最小値
をとる変位量（ｉ、Ｄ を動きベクトルとする方法が代
表点マツチング手法である。
たフレーム画像を４分割し、そのうちの１ブロツクにつ
いて動きベクトルを求める場合について説明する。まず
１ブロツクについてｂＸｃ−２個の代表点を選び、探索
範囲ｍ画素×ｎ画素の領域においてフレーム間差分の絶
対値ｐ ａ、 ｅ（＋＋ｊ）−１ａ ”ａ、 ＩＩ（Ｉ
ＩＪ ） ａ ”−’ａ、 ａ（０＋Ｏ）を多値で求
める。各々の代表点に関しρａ、ｅ（ｉ＋ｊ）の累積和 ρ（ｉ、ｊ）−ΣΣρａ＝ｅ（ＩＩＪ）をとり、最小値
をとる変位量（ｉ、Ｄ を動きベクトルとする方法が代
表点マツチング手法である。
第３図はその概念を示すものである。この図から理解さ
れるように、フレーム間差分（符号■）の絶対値を求め
ると、値が０となる曲線Ｋを含む差分絶対値データ（符
号Ｊ）が得られ、この差分絶対値データを各代表点につ
いて累積すると、曲線にの交点における累積値が最小値
となり、この位置が動きヘクトル位置である。すなわち
、累積関数ρ（ｉ、Ｄ は動きヘクトル位置（ｉ、ｊ）
を中心としたすり林状の形状となる。
れるように、フレーム間差分（符号■）の絶対値を求め
ると、値が０となる曲線Ｋを含む差分絶対値データ（符
号Ｊ）が得られ、この差分絶対値データを各代表点につ
いて累積すると、曲線にの交点における累積値が最小値
となり、この位置が動きヘクトル位置である。すなわち
、累積関数ρ（ｉ、Ｄ は動きヘクトル位置（ｉ、ｊ）
を中心としたすり林状の形状となる。
〔発明が解決しようとする課題］
しかしながら、入力画像の動きベクトルを検出する際に
、フレーム間差分値の絶対値和を計算するための累積メ
モリは、多値の和を記憶するために多ビットの容量を必
要とするため、大容量化してしまう。例えば一つの動き
ベクトルを検出するのに、１つの代表点に対応する差分
値の絶対値をａビット、探索範囲をｍ画素×ｎ画素、累
積回数すなわち代表点数を２個とすると、累積メモリは
（ａ＋ｒ丁）ＸｍＸｎビット必要となる。
、フレーム間差分値の絶対値和を計算するための累積メ
モリは、多値の和を記憶するために多ビットの容量を必
要とするため、大容量化してしまう。例えば一つの動き
ベクトルを検出するのに、１つの代表点に対応する差分
値の絶対値をａビット、探索範囲をｍ画素×ｎ画素、累
積回数すなわち代表点数を２個とすると、累積メモリは
（ａ＋ｒ丁）ＸｍＸｎビット必要となる。
本発明の目的は累積メモリの容量を減らし、ハードウェ
ア規模を小さくし、かつ動きベクトル検出精度を維持す
ることにある。
ア規模を小さくし、かつ動きベクトル検出精度を維持す
ることにある。
本発明に係る動きベクトル検出装置は、多値相関演算後
２値化し、２値化した曲線の累積値の最小あるいは最大
値を持つ変位量を動きベクトルとして抽出することを特
徴としている。
２値化し、２値化した曲線の累積値の最小あるいは最大
値を持つ変位量を動きベクトルとして抽出することを特
徴としている。
［作用］
供給された画像の所定領域について、現在と所定時間前
のフレーム間差分値の絶対値または２乗値を求め、２値
化手段により第１図のように動きベクトル候補としての
曲線に変換し、注目画素２個について累積をとり、最大
値あるいは最小値をとる位置を求める。この位置は動き
ベクトル候補曲線の交点位置であり、この位置に基づい
て動きベクトルを抽出する。
のフレーム間差分値の絶対値または２乗値を求め、２値
化手段により第１図のように動きベクトル候補としての
曲線に変換し、注目画素２個について累積をとり、最大
値あるいは最小値をとる位置を求める。この位置は動き
ベクトル候補曲線の交点位置であり、この位置に基づい
て動きベクトルを抽出する。
２値化することにより、累積メモリの必要容量は（１＋
ＦＴ）ＸｍＸｎとなり、従来の方法に比べ（１＋５丁）
／ （ａ ＋ＦＴ）の規模に縮小テキる。
ＦＴ）ＸｍＸｎとなり、従来の方法に比べ（１＋５丁）
／ （ａ ＋ＦＴ）の規模に縮小テキる。
以下図示実施例により本発明を説明する。
第１図は本発明の原理を示す説明図、第２図は代表点の
位置を示す説明図、第４図は第１の実施例を示すブロッ
ク図である。
位置を示す説明図、第４図は第１の実施例を示すブロッ
ク図である。
第２図に示すように、画面の１つのブロックを取り上げ
、横にｂ列、縦にＣ行の代表点を選択し、探索範囲を横
にｍ画素、縦にｎ画素分設定する。
、横にｂ列、縦にＣ行の代表点を選択し、探索範囲を横
にｍ画素、縦にｎ画素分設定する。
全４列ｅ行目の代表点の輝度値を前フレーム画像より抽
出し、その値をａ ’−’ｄ、 ！（０，０） として
メモリに記憶しておく。現フレーム画像より代表点の周
囲の探索範囲分の画素の輝度値をａ ’ｄ＝ ｅ（ｔ、
ｊ）とすると、その差分値の絶対値ρ４．。（ｉ、ｊ）
は、ｐ ａ、 ＩＩ（ＩＩＪ）＝ ｌ ａ ”ａ、 ａ
（ｉ＋ｊ） ａ ’−’ｄ、 ＠（０１０）・・・（
１） で表される。この式を概念図で説明すると第１図のよう
にρａ、ｅ （ｉ、ｊ） −〇となる（ｉ、ｊ）が動き
ベクトルの候補で一般に曲線となる。
出し、その値をａ ’−’ｄ、 ！（０，０） として
メモリに記憶しておく。現フレーム画像より代表点の周
囲の探索範囲分の画素の輝度値をａ ’ｄ＝ ｅ（ｔ、
ｊ）とすると、その差分値の絶対値ρ４．。（ｉ、ｊ）
は、ｐ ａ、 ＩＩ（ＩＩＪ）＝ ｌ ａ ”ａ、 ａ
（ｉ＋ｊ） ａ ’−’ｄ、 ＠（０１０）・・・（
１） で表される。この式を概念図で説明すると第１図のよう
にρａ、ｅ （ｉ、ｊ） −〇となる（ｉ、ｊ）が動き
ベクトルの候補で一般に曲線となる。
この差分値の絶対値差を闇値Ａにより２値化する。すな
わち、 ａ ’ｄ、ｅ（１，Ｊ ） ａ ”−’ａ、 ＊（０
，０） ｌ ＜ Ａの時ρａ、 ｅ（ｂｊ）＝ Ｏ ａ ａ＝ １１（１，Ｊ ） ａ ”−’ａ、 ＠
（０，０） ｌ≧Ａの時ρ４、ｅ （ｉ、ｊ） ＝ １ ・ ・ ・（２） ２値化してもこの動きベクトル候補曲線の情報はそのま
ま残るので、精度を落とすことなく多値情報を１ビツト
に圧縮することができる。１つの代表点に関して１つの
動きベクトル基礎データが得られ、この動きベクトル基
礎データには１本の動きベクトル候補曲線を有する。次
いで、ｂ列×Ｃ個分の代表点について動きベクトル基礎
データを、累積メモリを用いて重ね合わせ、（２）式の
２値化の場合最小値となるアドレスを検出すると、各動
きベクトル候補曲線の交点としての（ｉ、ｊ）が動きベ
クトルとして得られる。
わち、 ａ ’ｄ、ｅ（１，Ｊ ） ａ ”−’ａ、 ＊（０
，０） ｌ ＜ Ａの時ρａ、 ｅ（ｂｊ）＝ Ｏ ａ ａ＝ １１（１，Ｊ ） ａ ”−’ａ、 ＠
（０，０） ｌ≧Ａの時ρ４、ｅ （ｉ、ｊ） ＝ １ ・ ・ ・（２） ２値化してもこの動きベクトル候補曲線の情報はそのま
ま残るので、精度を落とすことなく多値情報を１ビツト
に圧縮することができる。１つの代表点に関して１つの
動きベクトル基礎データが得られ、この動きベクトル基
礎データには１本の動きベクトル候補曲線を有する。次
いで、ｂ列×Ｃ個分の代表点について動きベクトル基礎
データを、累積メモリを用いて重ね合わせ、（２）式の
２値化の場合最小値となるアドレスを検出すると、各動
きベクトル候補曲線の交点としての（ｉ、ｊ）が動きベ
クトルとして得られる。
動きベクトル＝（ｉ、ｊ）：ρ（ｉ＋ ｊ） ＝ｍｉｎ
・・（４）第４図において、画像信号が供給される
入力端子１０は、Ａ／Ｄ変換器１１、ノイスの影響を軽
減するための低域フィルタ１２、及び画面全体の輝度変
化の影響を軽減するための高域フィルタ１３を介して減
算器２１の十入力端子に接続されている。
・・（４）第４図において、画像信号が供給される
入力端子１０は、Ａ／Ｄ変換器１１、ノイスの影響を軽
減するための低域フィルタ１２、及び画面全体の輝度変
化の影響を軽減するための高域フィルタ１３を介して減
算器２１の十入力端子に接続されている。
高域フィルタ１３の出力は、代表点メモリ１８．１９を
経て減算器２１の一入力端子に接続されており、代表点
のデータはメモリ１８にいったん格納された後に、メモ
リ１９に転送される。減算器２１および絶対値器２２は
２枚のフレーム間の相関を計算するものであり、絶対値
器２２は、２値化するための比較器２６に接続される。
経て減算器２１の一入力端子に接続されており、代表点
のデータはメモリ１８にいったん格納された後に、メモ
リ１９に転送される。減算器２１および絶対値器２２は
２枚のフレーム間の相関を計算するものであり、絶対値
器２２は、２値化するための比較器２６に接続される。
２値化したデータを累積加算する加算器２３は比較器２
６に接続され、この加算器２３には累積メモリ２４が接
続される。検出器２５は累積メモリ２４に接続され、動
きベクトルを検出する。タイミング発生器２０は、外部
より入力したクロックＣＫおよび水平同期信号ＨＤ、垂
直同期信号ＶＤをカウントしてＡ／Ｄ変換器１１、代表
点メモリ１８．１９、累積メモリ２４、検出器２５等の
コントロール信号を生成する。
６に接続され、この加算器２３には累積メモリ２４が接
続される。検出器２５は累積メモリ２４に接続され、動
きベクトルを検出する。タイミング発生器２０は、外部
より入力したクロックＣＫおよび水平同期信号ＨＤ、垂
直同期信号ＶＤをカウントしてＡ／Ｄ変換器１１、代表
点メモリ１８．１９、累積メモリ２４、検出器２５等の
コントロール信号を生成する。
以上の構成において、その動作について説明する。
まず、画像入力端子１０より入力されたアナログ画像信
号はＡ、／Ｄ変換器１１において８ヒツト量子化され、
低域フィルタ１２および高域フィルタ１３によって不要
ノイズを除去され、輝度値ａイ１．、（＋ｔ））として
出力される。ノイズ除去された画像信号はタイミング発
生器２０によって生成されたタイミングで、現フレーム
画像の代表点ａｌｌ、、、（０，０） として代表点メ
モリ１８に一時的に記憶される。この代表点の輝度値は
次の垂直同期期間に代表点メモリ１９４こ転送され、前
フレーム画像の代表点ａ ”ａ、 、（０，０）として
減算器２１へ出力される。このとき代表点メモリ１日と
代表点メモリ１９のアドレス指定や読みだし書き込み指
定はタイミング発生器２０によって行われる。このよう
にして減算器２１には輝度信号ａ’ｄ＝ｅ（１＋Ｊ）と
ａ ”−、、（０，０）が人力されて差分が計算され、
次段の絶対値器２ｉこより絶対差分値 ｐ ａ、 ９（＋ｇ）＝ ｌ ａ ’ａ、 ＋！（ＬＪ
） ａ −’ａ、 。（Ｑ、Ｑ）が計算される。絶
対値器２２の出力信号は比較器２６に加えられ、閾値Ａ
を用い上記（２）弐によって２値化され、加算器２３に
よって累積メモリ２４に累積加算される。
号はＡ、／Ｄ変換器１１において８ヒツト量子化され、
低域フィルタ１２および高域フィルタ１３によって不要
ノイズを除去され、輝度値ａイ１．、（＋ｔ））として
出力される。ノイズ除去された画像信号はタイミング発
生器２０によって生成されたタイミングで、現フレーム
画像の代表点ａｌｌ、、、（０，０） として代表点メ
モリ１８に一時的に記憶される。この代表点の輝度値は
次の垂直同期期間に代表点メモリ１９４こ転送され、前
フレーム画像の代表点ａ ”ａ、 、（０，０）として
減算器２１へ出力される。このとき代表点メモリ１日と
代表点メモリ１９のアドレス指定や読みだし書き込み指
定はタイミング発生器２０によって行われる。このよう
にして減算器２１には輝度信号ａ’ｄ＝ｅ（１＋Ｊ）と
ａ ”−、、（０，０）が人力されて差分が計算され、
次段の絶対値器２ｉこより絶対差分値 ｐ ａ、 ９（＋ｇ）＝ ｌ ａ ’ａ、 ＋！（ＬＪ
） ａ −’ａ、 。（Ｑ、Ｑ）が計算される。絶
対値器２２の出力信号は比較器２６に加えられ、閾値Ａ
を用い上記（２）弐によって２値化され、加算器２３に
よって累積メモリ２４に累積加算される。
■フレーム分の画像に関し、これら一連の計算処理が完
了すると、累積メモリ２４にはアドレスに対応したρ″
（ｉ、ｊ）が得られ、検出器２５により垂直同期期間の
間にρ″（ｉ、ｊ）が最大あるいは最小値となる（ｉ、
ｊ）に対応するアドレスが検出され、動きベクトルとし
て出力される。このとき加算器２３、累積加算メモリ２
４および検出器２５の書き込みや読みだし制御信号など
のタイミングはタイミング発生器２０によって制御され
る。
了すると、累積メモリ２４にはアドレスに対応したρ″
（ｉ、ｊ）が得られ、検出器２５により垂直同期期間の
間にρ″（ｉ、ｊ）が最大あるいは最小値となる（ｉ、
ｊ）に対応するアドレスが検出され、動きベクトルとし
て出力される。このとき加算器２３、累積加算メモリ２
４および検出器２５の書き込みや読みだし制御信号など
のタイミングはタイミング発生器２０によって制御され
る。
またこの動きベクトル検出器２５は同時に、累積値の最
大値、最小値および平均値を検出して出力し、後段に接
続されるマイコン等で検出した動きベクトルの信軌性を
判定するパラメータとして利用される。
大値、最小値および平均値を検出して出力し、後段に接
続されるマイコン等で検出した動きベクトルの信軌性を
判定するパラメータとして利用される。
なお、ここでは連続する２枚のフレーム画像間より動き
ベクトルを抽出したが、２枚のフレーム画像とは、前奇
数フィールド画像と現奇数フィールド画像、あるいは前
偶数フィールド画像と現偶数フィールド画像の組み合わ
せを言う。
ベクトルを抽出したが、２枚のフレーム画像とは、前奇
数フィールド画像と現奇数フィールド画像、あるいは前
偶数フィールド画像と現偶数フィールド画像の組み合わ
せを言う。
また連続する２枚のフレーム画像のかわりに、連続する
フィールド画像を用いてもよい、この場合は奇数フィー
ルド画像と偶数フィールド画像、あるいは偶数フィール
ド画像と奇数フィールド画像の組み合わせで動きベクト
ルを抽出する。ただし奇数フィールドと偶数フィールド
との位置関係は上下に１ライン分すなわち０．５画素分
だけずれがあるため、第５図のように片側のフィールド
画像は２ライン分の直線補間処理にて１ラインを生成す
る必要がある。
フィールド画像を用いてもよい、この場合は奇数フィー
ルド画像と偶数フィールド画像、あるいは偶数フィール
ド画像と奇数フィールド画像の組み合わせで動きベクト
ルを抽出する。ただし奇数フィールドと偶数フィールド
との位置関係は上下に１ライン分すなわち０．５画素分
だけずれがあるため、第５図のように片側のフィールド
画像は２ライン分の直線補間処理にて１ラインを生成す
る必要がある。
第６図は本発明の第２の実施例を示し、これは、上記第
１の実施例において説明した動きベクトル検出器を使用
したカメラ一体型ＶＴＲの手振れ補正装置である。
１の実施例において説明した動きベクトル検出器を使用
したカメラ一体型ＶＴＲの手振れ補正装置である。
この図において、１０１はＣＣＤＴＶ信号処理部、１０
２は動きベクトル検出器、１０３は１フイールド前の画
像を記憶するフィールドメモリあるいは１フレーム前の
画像を記憶するフレームメモリ、１０４は補正周波数を
決定する帯域フィルタと動きベクトル検出の信頼性を判
定処理する動きベクトル信号処理部、１０５はフィール
ドまたはフレームメモリに記憶された画像の一部を拡大
し補間する補間拡大処理部である。
２は動きベクトル検出器、１０３は１フイールド前の画
像を記憶するフィールドメモリあるいは１フレーム前の
画像を記憶するフレームメモリ、１０４は補正周波数を
決定する帯域フィルタと動きベクトル検出の信頼性を判
定処理する動きベクトル信号処理部、１０５はフィール
ドまたはフレームメモリに記憶された画像の一部を拡大
し補間する補間拡大処理部である。
ＣＣＤＴＶ信号処理部１０１より出力された輝度信号は
動きベクトル検出器１０２に入力され、２枚の連続する
フィールドあるいはフレーム画像信号より動きベクトル
が検出される。一方ＣＣＤＴＶ信号処理部１０１より出
力された輝度信号および色差信号Ｒ−ＹおよびＢ−Ｙは
フィールドあるいはフレームメモリ１０３に記憶され、
ｌフィールドまたは１フレーム後の遅延後、補間拡大処
理部１０５で部分拡大される。このとき動きベクトル検
出器１０２で検出された動きベクトルは、動きベクトル
信号処理部１０４を通して補間拡大処理部１０５のコン
トロール端子に人力され、検出された手振れ成分である
動きベクトルの量だけ補間拡大処理部１０５によって上
下左右に補正され５、手振れの抑制されたＴＶ画像信号
が得られる。
動きベクトル検出器１０２に入力され、２枚の連続する
フィールドあるいはフレーム画像信号より動きベクトル
が検出される。一方ＣＣＤＴＶ信号処理部１０１より出
力された輝度信号および色差信号Ｒ−ＹおよびＢ−Ｙは
フィールドあるいはフレームメモリ１０３に記憶され、
ｌフィールドまたは１フレーム後の遅延後、補間拡大処
理部１０５で部分拡大される。このとき動きベクトル検
出器１０２で検出された動きベクトルは、動きベクトル
信号処理部１０４を通して補間拡大処理部１０５のコン
トロール端子に人力され、検出された手振れ成分である
動きベクトルの量だけ補間拡大処理部１０５によって上
下左右に補正され５、手振れの抑制されたＴＶ画像信号
が得られる。
第７図は本発明の第３の実施例を示し、これは、上記第
１の実施例において説明した動きベクトル検出器を使用
したカメラ一体型ＶＴＲの手振れ補正装置である。
１の実施例において説明した動きベクトル検出器を使用
したカメラ一体型ＶＴＲの手振れ補正装置である。
ＣＣＤＴＶ信号処理部２０１はＣＣＤの垂直電荷転送高
速吐き出しクロック数を制御できる構成となっており、
また可変遅延線２０２は、それぞれ上下・左右方向の画
像の平行移動を制御できる。
速吐き出しクロック数を制御できる構成となっており、
また可変遅延線２０２は、それぞれ上下・左右方向の画
像の平行移動を制御できる。
ＣＣＤＴＶ信号処理部２０１から出力された画像の輝度
信号は、可変遅延線２０２を通して動きベクトル検出器
２０３に入力され、第２の実施例と同様乙こ画像信号よ
り動きベクトルが検出される。
信号は、可変遅延線２０２を通して動きベクトル検出器
２０３に入力され、第２の実施例と同様乙こ画像信号よ
り動きベクトルが検出される。
検出された動きベクトルは、補正周波数を決定する帯域
フィルタと動きベクトル検出の信頼性を判定処理する動
きベクトル処理部２０４に入力処理され、上下方向補正
ベクトルはＣＣＤＴＶ信号処理部２０１へ、また左右方
向補正ベクトルは可変遅延線２０２ヘフイードハソク補
正され、閉ループサーボとして手振れが補正される。
フィルタと動きベクトル検出の信頼性を判定処理する動
きベクトル処理部２０４に入力処理され、上下方向補正
ベクトルはＣＣＤＴＶ信号処理部２０１へ、また左右方
向補正ベクトルは可変遅延線２０２ヘフイードハソク補
正され、閉ループサーボとして手振れが補正される。
第８図↓よ本発明の第３の実施例を示し、これは、上記
第１の実施例において説明した動きベクトル検出器を使
用したカメラ一体型ＶＴＲの手振れ補正装置である。
第１の実施例において説明した動きベクトル検出器を使
用したカメラ一体型ＶＴＲの手振れ補正装置である。
３０１はＣＣＤＴＶ信号処理部、３０２は動きベクトル
検出器であり、第２の実施例と同様にして動きベクトル
が検出される。検出された動きベクトルは、補正周波数
を決定する帯域フィルタと動きベクトル検出の信頼性を
判定処理する動きベクトル信号処理部３０３に入力処理
される。レンズ３０５はアクチュエータ３０６．３０７
によって支持されておりレンズの光軸に垂直な方向に２
次元的に移動可能である。すなわちレンズ３０５は、ア
クチュエータおよび左右方向アクチュエータに電圧を印
加することにより２次元的に移動する。動きベクトル信
号処理部３０３から出力された補正ベクトルは上下左右
方向それぞれドライバ３０４で増幅されアクチュエータ
３０６．３０７に補正電圧が印加されることにより、レ
ンズ３０５の位置が補正され全体としてフィードバック
ループを構成する。
検出器であり、第２の実施例と同様にして動きベクトル
が検出される。検出された動きベクトルは、補正周波数
を決定する帯域フィルタと動きベクトル検出の信頼性を
判定処理する動きベクトル信号処理部３０３に入力処理
される。レンズ３０５はアクチュエータ３０６．３０７
によって支持されておりレンズの光軸に垂直な方向に２
次元的に移動可能である。すなわちレンズ３０５は、ア
クチュエータおよび左右方向アクチュエータに電圧を印
加することにより２次元的に移動する。動きベクトル信
号処理部３０３から出力された補正ベクトルは上下左右
方向それぞれドライバ３０４で増幅されアクチュエータ
３０６．３０７に補正電圧が印加されることにより、レ
ンズ３０５の位置が補正され全体としてフィードバック
ループを構成する。
なお、レンズとＣＣＤ受光面との相対位置調整が必要な
場合には、ＣＣＤ受光面をレンズとともに駆動すべきで
ある。
場合には、ＣＣＤ受光面をレンズとともに駆動すべきで
ある。
また上記各実施例においては、フレーム間差分値の絶対
値を求めていたが、これに代え、差分値の２乗値をとっ
ても同様な効果が得られる。
値を求めていたが、これに代え、差分値の２乗値をとっ
ても同様な効果が得られる。
〔発明の効果］
以上のように本発明によれば、入力された２つのフレー
ム画像から動きベクトルを求める際に、まず多値の相関
演算を行い、２値化し累積演算するため、多値によるも
のに比較して、はるかに簡単な演算でメモリ容量も少な
く構成でき、ハードウェア規模の小さい回路で動きベク
トルを決定することができる。
ム画像から動きベクトルを求める際に、まず多値の相関
演算を行い、２値化し累積演算するため、多値によるも
のに比較して、はるかに簡単な演算でメモリ容量も少な
く構成でき、ハードウェア規模の小さい回路で動きベク
トルを決定することができる。
またこの動きベクトル検出器を用いて、カメラ一体型Ｖ
ＴＲの手振れ補正の動き検出装置が得られる。
ＴＲの手振れ補正の動き検出装置が得られる。
第１図は本発明の原理説明図、
第２図は代表点の位置を示す説明図、
第３図は代表点マツチング手法を示す概念図、第４図は
本発明の第１の実施例を示すブロック図、 第５図はフィールド画像における直線補間処理を示す図
、 第６図は本発明の第２の実施例２を示すブロック図、 第７図は本発明の第３の実施例を示すブロック図、 第８図は本発明の第４の実施例を示すブロック図である
。 １８・・・現フレーム代表点メモリ １９・・・前フレーム代表点メモリ ２０・・・タイミング発生器 ２１・・・減算器 ２２・・・絶対値器 ２３・・・加算器 ２４・・・累積加算メモリ ２５・・・動きベクトル検出器 ２６・・・比較器
本発明の第１の実施例を示すブロック図、 第５図はフィールド画像における直線補間処理を示す図
、 第６図は本発明の第２の実施例２を示すブロック図、 第７図は本発明の第３の実施例を示すブロック図、 第８図は本発明の第４の実施例を示すブロック図である
。 １８・・・現フレーム代表点メモリ １９・・・前フレーム代表点メモリ ２０・・・タイミング発生器 ２１・・・減算器 ２２・・・絶対値器 ２３・・・加算器 ２４・・・累積加算メモリ ２５・・・動きベクトル検出器 ２６・・・比較器
Claims (2)
- （１）供給される画像の所定領域について、代表点に関
し現在と所定時間前のフレーム間差分値を得る手段と、
該差分値について絶対値を求めるとともに２値化し、動
きベクトル基礎データを得る手段と、上記各代表点につ
いて動きベクトル基礎データの累積を求め、この累積値
の極値をとる位置から動きベクトルを抽出する手段とを
備えることを特徴とする動きベクトル検出装置。 - （２）供給される画像の所定領域について、代表点に関
し現在と所定時間前のフレーム間差分値を得る手段と、
該差分値について２乗値を求めるとともに２値化し、動
きベクトル基礎データを得る手段と、上記各代表点につ
いて動きベクトル基礎データの累積を求め、この累積値
の極値をとる位置から動きベクトルを抽出する手段とを
備えることを特徴とする動きベクトル検出装置。
Priority Applications (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2269255A JPH04145777A (ja) | 1990-10-05 | 1990-10-05 | 動きベクトル検出装置 |
| KR1019910017422A KR940006308B1 (ko) | 1990-10-05 | 1991-10-04 | 발열용 헬륨관 |
| EP19910116998 EP0479323A2 (en) | 1990-10-05 | 1991-10-04 | Moving vector extractor |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2269255A JPH04145777A (ja) | 1990-10-05 | 1990-10-05 | 動きベクトル検出装置 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JPH04145777A true JPH04145777A (ja) | 1992-05-19 |
Family
ID=17469809
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2269255A Pending JPH04145777A (ja) | 1990-10-05 | 1990-10-05 | 動きベクトル検出装置 |
Country Status (3)
| Country | Link |
|---|---|
| EP (1) | EP0479323A2 (ja) |
| JP (1) | JPH04145777A (ja) |
| KR (1) | KR940006308B1 (ja) |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH04196983A (ja) * | 1990-11-28 | 1992-07-16 | Mitsubishi Electric Corp | 動き検出装置 |
| US5767898A (en) * | 1994-06-23 | 1998-06-16 | Sanyo Electric Co., Ltd. | Three-dimensional image coding by merger of left and right images |
| US5963673A (en) * | 1995-12-20 | 1999-10-05 | Sanyo Electric Co., Ltd. | Method and apparatus for adaptively selecting a coding mode for video encoding |
| US6380967B1 (en) * | 1996-12-07 | 2002-04-30 | Frank Sacca | System to capture, store, and retrieve composite video for transmission over telephone lines |
Family Cites Families (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR910009880B1 (ko) * | 1983-07-25 | 1991-12-03 | 가부시기가이샤 히다찌세이사꾸쇼 | 인터레이스된 텔레비젼 신호중의 화상의 움직임 검출회로 |
| JPS60264188A (ja) * | 1984-06-13 | 1985-12-27 | Victor Co Of Japan Ltd | 画像の動き検出装置 |
| JPH01106582A (ja) * | 1987-10-19 | 1989-04-24 | Nec Home Electron Ltd | 撮像装置 |
-
1990
- 1990-10-05 JP JP2269255A patent/JPH04145777A/ja active Pending
-
1991
- 1991-10-04 EP EP19910116998 patent/EP0479323A2/en not_active Withdrawn
- 1991-10-04 KR KR1019910017422A patent/KR940006308B1/ko not_active Application Discontinuation
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH04196983A (ja) * | 1990-11-28 | 1992-07-16 | Mitsubishi Electric Corp | 動き検出装置 |
| US5767898A (en) * | 1994-06-23 | 1998-06-16 | Sanyo Electric Co., Ltd. | Three-dimensional image coding by merger of left and right images |
| US6075556A (en) * | 1994-06-23 | 2000-06-13 | Sanyo Electric Co., Ltd. | Three-dimensional image coding by merger of left and right images |
| US5963673A (en) * | 1995-12-20 | 1999-10-05 | Sanyo Electric Co., Ltd. | Method and apparatus for adaptively selecting a coding mode for video encoding |
| US6380967B1 (en) * | 1996-12-07 | 2002-04-30 | Frank Sacca | System to capture, store, and retrieve composite video for transmission over telephone lines |
Also Published As
| Publication number | Publication date |
|---|---|
| EP0479323A3 (ja) | 1994-02-16 |
| EP0479323A2 (en) | 1992-04-08 |
| KR940006308B1 (ko) | 1994-07-14 |
| KR920009190A (ko) | 1992-05-28 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP5057974B2 (ja) | 取得された画像フレーム間の意図的でないカメラ運動を補正するためのビデオデータの処理 | |
| US8072506B2 (en) | Method for flicker detection in image signal | |
| US8072511B2 (en) | Noise reduction processing apparatus, noise reduction processing method, and image sensing apparatus | |
| WO2011129249A1 (ja) | 画像処理装置、撮像装置、プログラム及び画像処理方法 | |
| JP2860702B2 (ja) | 動きベクトル検出装置 | |
| JPS63166370A (ja) | 画像動き補正装置 | |
| US6122319A (en) | Motion compensating apparatus using gradient pattern matching and method thereof | |
| JP4861636B2 (ja) | 画像処理装置及び画像処理プログラム | |
| GB2305803A (en) | Correcting picture steadiness errors in telecine scanning | |
| JP6086619B2 (ja) | 符号化装置および符号化方法 | |
| JPH04145777A (ja) | 動きベクトル検出装置 | |
| JP2003078808A (ja) | 動きベクトル検出装置および方法、手振れ補正装置および方法、並びに撮像装置 | |
| JPH04309078A (ja) | ビデオデータの動き検出装置および方法 | |
| JP3200089B2 (ja) | 動きベクトル検出装置及び振れ補正装置 | |
| JP2004229084A (ja) | 手振れ補正装置、手振れ補正方法及び撮像装置 | |
| JP2825377B2 (ja) | 動きベクトル検出装置及びカメラ一体型手振れ補正装置 | |
| KR100228682B1 (ko) | 손떨림 보정시 전체적인 움직임 검출장치 및방법 | |
| JP2008103928A (ja) | 撮像装置 | |
| JP6572074B2 (ja) | 撮像装置 | |
| Mohanna et al. | Digital image stabilization for video images | |
| JP2810814B2 (ja) | 動きベクトル検出装置及びカメラ一体型手振れ補正装置 | |
| JPH0670217A (ja) | 画像補正装置及びその方法 | |
| JP4274430B2 (ja) | 動きベクトル検出装置 | |
| JP2005086731A (ja) | 撮像装置 | |
| JPS61126407A (ja) | デイザ法を用いた移動体の追跡装置 |