JPH03198488A - Motion vector detector and picture oscillation corrector - Google Patents

Motion vector detector and picture oscillation corrector

Info

Publication number
JPH03198488A
JPH03198488A JP1339003A JP33900389A JPH03198488A JP H03198488 A JPH03198488 A JP H03198488A JP 1339003 A JP1339003 A JP 1339003A JP 33900389 A JP33900389 A JP 33900389A JP H03198488 A JPH03198488 A JP H03198488A
Authority
JP
Japan
Prior art keywords
motion vector
output
image
divergence
motion
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP1339003A
Other languages
Japanese (ja)
Other versions
JP2506469B2 (en
Inventor
Kenya Uomori
謙也 魚森
Atsushi Morimura
淳 森村
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Holdings Corp
Original Assignee
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Industrial Co Ltd filed Critical Matsushita Electric Industrial Co Ltd
Priority to JP33900389A priority Critical patent/JP2506469B2/en
Publication of JPH03198488A publication Critical patent/JPH03198488A/en
Application granted granted Critical
Publication of JP2506469B2 publication Critical patent/JP2506469B2/en
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Abstract

PURPOSE:To suppress the detection error of a motion vector in a picture as a whole even when one part of an object is not still by controlling the size of the detected motion vector by using divergency showing the degree of dispersion for the motion vector in each detection area. CONSTITUTION:An input picture signal is divided into plural areas by a motion vector detecting means 11 and the motion vector of the picture in each area is calculated. Then, the effectiveness of the motion vector in each area is decided by a motion vector deciding means 12 and the motion vector of the entire picture is determined. A divergency calculating means 13 calculates the divergency showing the degree of dispersion for the motion vector in each detection use area by using the output of the motion vector detecting means 11, and the output of the divergency calculating means 13 is converted according to the size by a converting means 15. Then, a control means 16 controls the size of the motion vector in the entire picture according to the output of the converting means 15. Thus, even when one part of the object is not still, the detection error of the motion vector in the entire picture can be suppressed.

Description

【発明の詳細な説明】 産業上の利用分野 本発明は画像の動き量を検出する動きベクトル検出装置
及び画像ゆれ補正装置に関するものである。
DETAILED DESCRIPTION OF THE INVENTION Field of the Invention The present invention relates to a motion vector detection device for detecting the amount of motion of an image and an image blur correction device.

従来の技術 従来の画像の動きベクトル検出装置の例として、例えば
特開昭61−269475号公報に示される様なものが
ある。
2. Description of the Related Art An example of a conventional image motion vector detection device is disclosed in Japanese Patent Application Laid-Open No. 61-269475.

第1O図は、これの概略図を示したものであり、後に詳
しく述べるように、lはラッチへ、2は代表点メモリ、
3はラッチB、4は相関器、5はアドレスコントローラ
、〔iはアドレス切り替え回路、7は累積加算器、8は
相関性検索回路、9は相関性有効無効判定回路、lOは
判定回路である。
FIG. 1O shows a schematic diagram of this, and as will be described in detail later, l is to the latch, 2 is to the representative point memory,
3 is a latch B, 4 is a correlator, 5 is an address controller, [i is an address switching circuit, 7 is a cumulative adder, 8 is a correlation search circuit, 9 is a correlation validity/invalidity determination circuit, and IO is a determination circuit. .

以上のように構成された従来の相関演算装置を用いた画
像の動きベクトル検出装置について説明する。
An image motion vector detection device using the conventional correlation calculation device configured as described above will be described.

まず、画像の動きベクトルについて説明する。First, the motion vector of an image will be explained.

第9図(a)は、ある時刻における三角形の対象物の画
像を示している。そして(b)は1フイールドもしくは
lフレーム後の画像を示している。
FIG. 9(a) shows an image of a triangular object at a certain time. And (b) shows an image after one field or l frame.

このように、撮像装置など自身の動きによって画像が平
行移動するとき、 (C)の矢印で示したように画像が
平行移動した量をベクトルで示したものを動きベクトル
と呼ぶ。
In this way, when an image is translated in parallel due to the movement of the imaging device itself, the vector representing the amount by which the image is translated in parallel, as shown by the arrow in (C), is called a motion vector.

第11図はこのような画像の動きベクトルを検出する方
法の最も一般的な方法である代表点マツチング法におけ
る代表点とそのまわりの画素の様子を示したものである
。動きベクトル検出は、あるフィールドにおける代表点
の位置の画像データが次のフィールドでまわりの画素の
うちどこに移動したかを検出することによって行われる
FIG. 11 shows representative points and pixels around them in the representative point matching method, which is the most common method for detecting motion vectors of such images. Motion vector detection is performed by detecting where the image data at the position of a representative point in a certain field has moved among surrounding pixels in the next field.

次に、従来の相関演算装置を用いた画像の動きベクトル
検出装置についで第10図、第11図を用いて説明する
Next, an image motion vector detection device using a conventional correlation calculation device will be described with reference to FIGS. 10 and 11.

画面上の各代表点における画像データはタイミングパル
スLPIによりラッチAIに取り込まれ、タイミングを
とって代表点保存メモリ2のそれぞれの代表点に対応す
るアドレスに書き込まれる。
Image data at each representative point on the screen is taken into latch AI by timing pulse LPI, and written to the address corresponding to each representative point in representative point storage memory 2 at the appropriate timing.

そして、次のフィールドもしくは次のフレームζこおい
て、各代表点の位置のまわりの動きベクトル検出領域に
おける画像データと代表点メモリ2ζこ保存された前フ
ィールドの代表点の相関をとり、累積加算器7に入力す
る。累積加算器7は代表点を基準としたときの座標の位
置が同じ場所におし)て相関をとったデータを、それぞ
れ累積加算する。
Then, in the next field or next frame ζ, the correlation between the image data in the motion vector detection area around the position of each representative point and the representative point of the previous field stored in the representative point memory 2ζ is calculated, and cumulative summation is performed. input into device 7. The cumulative adder 7 cumulatively adds the correlated data at the same coordinate position with respect to the representative point.

そしてすべての代表点まわりの累積加算が終了したとき
、相関検索回路8により累積加算器7ζこ保持された累
積加算値のなかで最も相関の高い値を有する場所を判定
する。つまり、代表点の位置を基準としたときの、この
最も相関の高い値を有する位置(アドレス)が動きベク
トルとなる。さらに、代表点の回りの相関値の分布(平
均値、最小値、最大値、勾配など)をもとにして、相関
性有効無効判定回路9はその相関演算により得らiした
動きベクトルが有効か無効か判定する。以上の動作は、
画面を複数個に分割したときの各領域(こついて行なわ
れる。
When the cumulative additions around all the representative points are completed, the correlation search circuit 8 determines the location having the highest correlation among the cumulative addition values held by the cumulative adder 7ζ. In other words, the position (address) having the highest correlation value with respect to the position of the representative point becomes the motion vector. Furthermore, based on the distribution of correlation values around the representative point (average value, minimum value, maximum value, gradient, etc.), the correlation validity/invalidity determination circuit 9 determines whether the motion vector i obtained by the correlation calculation is valid. or invalid. The above operation is
Each area when the screen is divided into multiple parts (this is done with difficulty).

そして、画面の各領域から得られた動きベクトルとその
有効性判定情報により画面全体の動きベクトルを判定回
路lOにより判定する。
Then, the motion vector of the entire screen is determined by the determination circuit 10 based on the motion vector obtained from each area of the screen and its validity determination information.

ここまでの動作は毎フィールド(フレーム)行うため、
相関演算を行いながら次のフィールド(フレーム)の相
関演算のための代表点における画像データを保存するた
めにラッチAIがある。
The operations up to this point are performed every field (frame), so
A latch AI is provided to store image data at representative points for the correlation calculation of the next field (frame) while performing the correlation calculation.

また、ラッチB3は、ある代表点の画像デー・夕と、そ
の周辺の画像データとの相関をとるときζこ代表点の画
像データを保持するために設けられでいる。
Further, the latch B3 is provided to hold the image data of this representative point when correlating the image data of a certain representative point with the image data around it.

また、第1O図中破線部分、すなわち相関演算により動
きベクトルを検出する部分を動きベクトル検出部11、
動きベクトル検出部11により得られた画面の各領域の
動きベクトルとその相関情報から画面全体の動きベクト
ルを求める部分を動きベクトル判定部12とした。
In addition, the broken line part in FIG.
A motion vector determining section 12 is a section that calculates the motion vector of the entire screen from the motion vectors of each area of the screen obtained by the motion vector detecting section 11 and their correlation information.

発明が解決しようとした課題 しかしながら上記のような構成において、被写体が静止
しており撮像装置のみが動き、各領域における動きベク
トルがすべて同じであればよいが(第12図(a))、
画面中の被写体の一部が静止しておらず、画面全体の動
きと異なる動きをしている場合(第12図(b))は、
各領域における動きベクトルはすべて同じにならず、各
領域の動きベクトルの平均環をとって画面全体の動きベ
クトルを決定すると、画面全体の動きと異なる動きをし
ている領域の動きベクトルが原因となり検出誤りを起こ
すという課題を有していた。
Problems to be Solved by the Invention However, in the above configuration, it is sufficient that the subject remains stationary and only the imaging device moves, and that the motion vectors in each area are all the same (FIG. 12(a)).
If a part of the subject on the screen is not stationary and is moving differently from the movement of the entire screen (Fig. 12(b)),
The motion vectors in each area are not all the same, and if the motion vector of the entire screen is determined by taking the average ring of the motion vectors of each area, the motion vector of the area whose movement is different from the movement of the entire screen will be the cause. This had the problem of causing detection errors.

本発明はかかる点に鑑み、被写体の一部が静止していな
い場合においても画面全体の動きベクトルの検出誤りを
抑圧することが出来る動きベクトル検出装置及び画像ゆ
れ補正装置を提供することを目的とした。
In view of this, an object of the present invention is to provide a motion vector detection device and an image blur correction device that can suppress errors in detecting motion vectors of the entire screen even when a part of the subject is not stationary. did.

課題を解決するための手段 請求項1の本発明は、入力画像信号を複数の領域に分割
し、それぞれの領域における画像の動きベクトルを演算
する動きベクトル検出手段と、それら各領域における動
きベクトルの有効性を判断し、画面全体の動きベクトル
を決定する動きベクトル判定手段と、前記動きベクトル
検出手段の出力を用いて各検出領域の動きベクトルの分
散の度合を示す発散度を得る発散度計算手段と、その発
散度計算手段の出力をその出力の大きさに関連した値に
変換する変換手段と、その変換手段の出力により画面全
体の動きベクトルの大きさを制御する制御手段とを有す
ることを特徴とした動きベクトル検出装置である。
Means for Solving the Problems The present invention as claimed in claim 1 provides a motion vector detection means for dividing an input image signal into a plurality of regions and calculating a motion vector of an image in each region, and a motion vector detection means for dividing an input image signal into a plurality of regions and calculating a motion vector of an image in each region. a motion vector determining means for determining validity and determining a motion vector for the entire screen; and a divergence calculation means for obtaining a divergence indicating the degree of dispersion of motion vectors in each detection area using the output of the motion vector detecting means. , a conversion means for converting the output of the divergence calculation means into a value related to the magnitude of the output, and a control means for controlling the magnitude of the motion vector of the entire screen by the output of the conversion means. This is a featured motion vector detection device.

請求項4の本発明は、入力画像を拡大する画像拡大装置
と、画像の動きベクトルを演算する動きベクトル検出手
段と、各領域における動きベクトルの有効性を判断し、
画面全体の動きベクトルを決定する動きベクトル判定手
段と、画面全体の動きベクトルを時間積分する積分手段
と、前記動きベクトル検出手段の出力を用いて各検出領
域の動きベクトルの分散の度合を示す発散度を得る発散
度計算手段と、その発散度計算手段の出力をその出力の
大きさに関連した値に変換する変換手段と、その変換手
段の出力により前記積分手段または動きベクトル判定手
段の出力を制御する制御手段と、その制御手段または積
分手段の出力を用いて前記画像拡大装置の画像読みだし
位置を演算する読みだし位置制御手段を有し、拡大され
た画像の読みだし位置を制御することにより画像を平行
移動し入力画像のゆれ成分を抑圧する事を特徴とした画
像ゆれ補正装置である。
The present invention as set forth in claim 4 provides an image enlarging device for enlarging an input image, a motion vector detecting means for computing a motion vector of the image, and determining the effectiveness of the motion vector in each region,
a motion vector determining means for determining the motion vector of the entire screen; an integrating means for time-integrating the motion vector of the entire screen; and a divergence indicating the degree of dispersion of the motion vectors of each detection area using the output of the motion vector detecting means. a divergence calculation means for calculating the degree of divergence, a conversion means for converting the output of the divergence calculation means into a value related to the magnitude of the output, and an output of the integration means or motion vector determination means based on the output of the conversion means. control means for controlling, and read-out position control means for calculating an image read-out position of the image enlarging device using the output of the control means or the integrating means, and controlling the read-out position of the enlarged image. This image blur correction device is characterized by moving the image in parallel and suppressing the blur component of the input image.

作用 請求項1の本発明では、動きベクトル検出手段により入
力画像信号を複数の領域に分割し、それぞれの領域にお
ける画像の動きベクトルを演算し、動きベクトル判定手
段により、それら各領域における動きベクトルの有効性
を判断し、画面全体の動きベクトルを決定し、発散度計
算手段により前記動きベクトル検出手段の出力を用いて
各検出領域の動きベクトルの分散の度合を示す発散度を
得、変換手段によりその発散度計算手段の出力をその出
力の大きさにより変換し、制御手段によって変換手段の
出力により画面全体の動きベクトルの大きさを制御する
In the present invention as defined in claim 1, the motion vector detection means divides the input image signal into a plurality of regions, the motion vector of the image in each region is calculated, and the motion vector determination means calculates the motion vector of the image in each region. The effectiveness is determined, a motion vector for the entire screen is determined, a divergence calculation means uses the output of the motion vector detection means to obtain a divergence indicating the degree of dispersion of the motion vectors of each detection area, and a conversion means The output of the divergence calculation means is converted according to the magnitude of the output, and the control means controls the magnitude of the motion vector of the entire screen based on the output of the conversion means.

このようにして、各検出領域の動きベクトルの分散の度
合を示す発散度を用いて検出した動きベクトルの大きさ
を特徴する 請求項4の本発明は、画像拡大装置により入力画像を拡
大し、動きベクトル検出手段により画像の動きベクトル
を演算し、動きベクトル判定手段によって、各領域にお
ける動きベクトルの有効性を判断し、画面全体の動きベ
クトルを決定し、積分手段により両面全体の動きベクト
ルを時開積分し、発散度計算手段により前記動きベクト
ル検出手段の出力を用いて各検出領域の動きベクトルの
分散の度合を示す発散度を得、変換手段によりその発散
度計算手段の出力をその出力の大きさにより変換し、制
御手段によって、その変換手段の出力により前記積分手
段または動きベクトル判定手段の出力を制御し、読みだ
し位置制御手段によりその制御手段または積分手段の出
力を用いて前記画像拡大装置の画像読みだし位置を演算
し、拡大された画像の読みだし位置を制御することによ
り画像を平行移動し入力画像のゆれ成分を抑圧する。
In this way, the magnitude of the detected motion vector is characterized by using the degree of divergence indicating the degree of dispersion of the motion vector in each detection area. The motion vector detection means calculates the motion vector of the image, the motion vector determination means determines the validity of the motion vector in each area, determines the motion vector of the entire screen, and the integration means calculates the motion vector of the entire both sides. The output of the motion vector detection means is used by the divergence calculation means to obtain the divergence indicating the degree of dispersion of the motion vectors in each detection area, and the output of the divergence calculation means is converted into the output by the conversion means. The control means controls the output of the integrating means or the motion vector determining means using the output of the converting means, and the reading position control means uses the output of the controlling means or the integrating means to enlarge the image. By calculating the image readout position of the device and controlling the readout position of the enlarged image, the image is translated in parallel and the shaking component of the input image is suppressed.

実施例 以下に本発明の実施例を図面を参照して説明する。Example Embodiments of the present invention will be described below with reference to the drawings.

第1図は、本発明の一実施例における動きベクトル検出
装置の構成図であり、11は動きベクトル検出手段の一
例としての動きベクトル検出部、12は動きベクトル判
定手段の一例としての動きベクトル判定部であり、従来
の構成と同様である。
FIG. 1 is a block diagram of a motion vector detection device according to an embodiment of the present invention, in which reference numeral 11 denotes a motion vector detection unit as an example of motion vector detection means, and 12 denotes a motion vector determination unit as an example of motion vector determination means. The structure is similar to the conventional structure.

また、後に詳しく説明するように、13は、動きベクト
ル検出部11の出力を用いて各検出領域の動きベクトル
の分散の度合を示す発散度を得る発散度計算手段の一例
としての発散度計算部、14はその発散度計算部13の
出力に付いて低域周波数を通過させる低域ろ波器(LP
F)、15は発散度計算手段の13の出力をその出力の
大きさにより変換する変換手段の一例としての変換器A
、16は変換器A15の出力により画面全体の動きベク
トルの大きさを制御する制御部である。
Further, as will be explained in detail later, 13 is a divergence calculation unit as an example of a divergence calculation unit that uses the output of the motion vector detection unit 11 to obtain a divergence indicating the degree of dispersion of motion vectors in each detection area. , 14 is a low-pass filter (LP) that passes the low frequency of the output of the divergence calculation unit 13.
F), 15 is a converter A as an example of a converting means that converts the output of 13 of the divergence calculation means according to the magnitude of the output.
, 16 is a control unit that controls the magnitude of the motion vector of the entire screen based on the output of the converter A15.

以上のように構成された動きベクトル検出装置の動作に
ついて説明する。
The operation of the motion vector detection device configured as above will be explained.

第1図において、まず従来例の場合と同様にして、動き
ベクトル検出部11において入力画像信号のフィールド
またはフレーム間の動きベクトルを画面の領域別に検出
し、動きベクトル判定部12により各領域における検出
動きベクトルの有効性を判定し、有効と判定された領域
で検出された動きベクトルの中から画面全体の動きベク
トルを決定する。
In FIG. 1, first, in the same manner as in the conventional example, a motion vector detecting section 11 detects motion vectors between fields or frames of an input image signal for each region of the screen, and a motion vector determining section 12 detects motion vectors in each region. The validity of the motion vectors is determined, and the motion vector for the entire screen is determined from among the motion vectors detected in the regions determined to be valid.

次に、発散度計算部13は動きベクトル検出部11の出
力即ち各検出領域の動きベクトルのうち、動きベクトル
判定部12により有効と判定された領域の動きベクトル
をもとにして動きベクトルの発散度を計算する。計算の
方法を次式に挙げる。
Next, the divergence calculation unit 13 calculates the divergence of the motion vector based on the output of the motion vector detection unit 11, that is, the motion vector of the area determined to be valid by the motion vector determination unit 12 among the motion vectors of each detection area. Calculate degrees. The calculation method is shown in the following formula.

(1) 発散度(DIV)= MAX(1(各領域の動きベクトルの平均値)−(各領
域の動きベクトル)1) 但し、この演算は動きベクトル判定情報がOKである領
域の動きベクトルのみについて行う。MAXは各領域の
計算結果の最大値をとる関数であり、11は絶対値をと
ることを示す。また、MAX演算の代わりにメデイアン
演算を用いてもよい。また、ベクトルは2次元なので、
発散度は各成分について求めた値の平均値もしくは自乗
平均値もしくは加算f+fiを実際の発散度として用い
る。
(1) Divergence (DIV) = MAX (1 (average value of motion vectors in each region) - (motion vector in each region) 1) However, this calculation only applies to motion vectors in regions where the motion vector determination information is OK. Do about. MAX is a function that takes the maximum value of the calculation results in each region, and 11 indicates that it takes the absolute value. Furthermore, a median calculation may be used instead of the MAX calculation. Also, since vectors are two-dimensional,
For the degree of divergence, the average value or the root mean square value of the values obtained for each component, or the sum f+fi is used as the actual degree of divergence.

(2) 発散度(DIV)= CMAX(+ある領域の動きベクトル その他の領域の動きベクトル1) 但し、この演算は動きベクトル判定情報がOKである領
域の動きベクトルのみについて行う。CMAXは0内の
演算を全ての領域の紺合せについて行い、その最大値を
とる関数であり、11は絶対値をとることを示す。また
、CMAX演算で最大値をとる代わりにメデイアンをと
ってもよい。また、ベクトルは2次元なので、発散度は
各成分について求めた値の平均値もしくは自乗平均値も
しくは加算値を実際の発散度として用いる。
(2) Divergence (DIV)=CMAX (+Motion vector in a certain area and motion vector in other areas 1) However, this calculation is performed only for the motion vectors in the area where the motion vector determination information is OK. CMAX is a function that performs calculations within 0 for the matching of all areas and takes the maximum value, and 11 indicates that it takes the absolute value. Furthermore, instead of taking the maximum value in the CMAX calculation, the median may be taken. Further, since the vector is two-dimensional, the average value, the root mean square value, or the sum of the values obtained for each component is used as the actual divergence.

(3) 発散度(DIV)= (Σ1(各領域の動きベクトルの平均ff1)−(各領
域の動きベクトル)l)/(動きベクトル判定情報がO
Kである領域数) 但し、Σは動きベクトル判定情報が有効である領域につ
いての総和を計算することを示す。また、ベクトルは2
次元なので、発散度は各成分について求めた値の平均値
もしくは自乗平均値もしくは加算値を実際の発散度とし
て用いる。
(3) Divergence (DIV) = (Σ1 (average of motion vectors in each region ff1) - (motion vector in each region) l)/(motion vector determination information is O
(number of regions where K is the number of regions) However, Σ indicates that the sum of regions for which motion vector determination information is valid is calculated. Also, the vector is 2
Since it is dimensional, the average value, the root mean square value, or the sum of the values obtained for each component is used as the actual divergence.

この計算により得られる発散度DIVは、その値が大き
いほど、各領域から検出された各々の動きベクトルが異
なる方向を向いている度合が大きい、即ち被写体の一部
分が動いているFi■能性が大きいことを示す。また発
散度Oであれば各々の動きベクトルは全て完全に同方向
を向いており、被写体は静止物と判断できる。
The larger the value of the divergence DIV obtained by this calculation, the greater the degree to which each motion vector detected from each region points in a different direction. Indicates that it is large. Furthermore, if the degree of divergence is O, the motion vectors all point in the same direction, and the subject can be determined to be stationary.

つぎに、発散度計算部13の出力を低域ろ波器14に通
し、時間的に速く変化する高周波成分を抑圧する。そし
て、低域ろ波器14の出力は変換器A15により所定の
値に変換される。この変換器A15の入力は(LPFを
施した)発散度であり、出力は動きベクトルに乗する動
きベクトル係数となる。変喚器A15の人出力特性を第
2図に示す。即ち、発散度がある程度の大きさ(図中A
)以下ならば動きベクトル係数は1倍であり、これを越
えると徐々に値が下がってゆき、B点で0となり、それ
以上の発散度では動きベクトル係数は0となる。A点・
B点の位置と、それぞれの点における動きベクトル係数
の値を変化させることによって特性を調整できる。
Next, the output of the divergence calculation unit 13 is passed through a low-pass filter 14 to suppress high frequency components that change quickly over time. The output of the low-pass filter 14 is then converted into a predetermined value by a converter A15. The input of this converter A15 is the divergence (which has been subjected to LPF), and the output is a motion vector coefficient by which the motion vector is multiplied. Figure 2 shows the human output characteristics of the converter A15. In other words, the degree of divergence is a certain level (A in the figure).
) or less, the motion vector coefficient is 1, and if it exceeds this, the value gradually decreases and becomes 0 at point B, and if the degree of divergence is greater than that, the motion vector coefficient becomes 0. Point A・
The characteristics can be adjusted by changing the position of point B and the value of the motion vector coefficient at each point.

この変換特性は第3図に示すように、ROM等を用いて
テーブルとして実現しても良いしく(a)参照)、加減
算とクリップを用いて実現しても良い((b)参照)。
As shown in FIG. 3, this conversion characteristic may be realized as a table using a ROM or the like (see (a)), or may be realized using addition/subtraction and clipping (see (b)).

そして、制御部16は乗算器または利得可変増幅器で構
成されており、動きベクトル判定部12から出力される
動きベクトルに、変換器A15からの動きベクトル係数
を乗することにより動きベクトルの大きさを制御する。
The control unit 16 is composed of a multiplier or a variable gain amplifier, and calculates the magnitude of the motion vector by multiplying the motion vector output from the motion vector determination unit 12 by the motion vector coefficient from the converter A15. Control.

このようにすることによって、画面の各領域における動
きベクトルが互いに違ったベクトルを出力したとき、即
ち画面中の被写体の一部分が動いているとき、発散度が
大きい程、画面全体としての動きベクトルの大きさを小
さくし、誤検出を抑圧する。ここで意味する誤検出の抑
圧とは、各領域で検出された動きベクトルの方向がバラ
バラになるに従って出力する動きベクトルを0に近づけ
ることである。ここで発散度が大きいとき出力される動
きベクトルは、実際の撮像装置の動きによる動きベクト
ルとは違う動きベクトルであるが、被写体の一部分が動
いたことにより動きベクトルが大きく違う値を取るより
は、動きベクトルの検出を停止ヒする方向に装置を制御
することに相当する。
By doing this, when the motion vectors in each region of the screen are different from each other, that is, when a part of the subject on the screen is moving, the larger the divergence, the more the motion vector of the entire screen is output. Reduce the size and suppress false detections. Suppression of false detections here means that the motion vectors to be output are brought closer to 0 as the directions of the motion vectors detected in each region become more disparate. Here, the motion vector output when the degree of divergence is large is a motion vector that is different from the motion vector due to the actual movement of the imaging device, but it is better to , corresponds to controlling the device in the direction of stopping motion vector detection.

以上のように本実施例によれば、画面の一部分の被写体
に動きがあり、動きベクトル検出に誤りが発生する可能
性がある場合、出力される動きベクトルの大きさを■制
御することにより、誤検出を抑圧することが出来る。
As described above, according to this embodiment, when there is movement in a subject in a part of the screen and there is a possibility that an error may occur in motion vector detection, by controlling the size of the output motion vector, Erroneous detection can be suppressed.

第4図は本発明における第2の実施例の動きベクトル検
出装置の構成図であり、】1は動きベクトル検出部、1
2は動きベクトル判定部、13は発散度計算部、14は
低域ろ波器(L P I; )、15は変換器A、16
は制御部であり、ここまでは前述した実施例と同様であ
る。また、17は動きベクトル積分手段の一例としての
動きベクトル積分部であり、動きベクトルを時間積分し
て積分動きベクトルを出力する手段である。積分動きベ
クトルはある基準時刻からの画面の平行移動した量を示
す。
FIG. 4 is a block diagram of a motion vector detection device according to a second embodiment of the present invention, in which 1 is a motion vector detection section;
2 is a motion vector determination unit, 13 is a divergence calculation unit, 14 is a low-pass filter (L P I; ), 15 is a converter A, 16
is a control section, and up to this point it is the same as in the embodiment described above. A motion vector integration section 17 is an example of motion vector integration means, and is a means for time-integrating a motion vector and outputting an integrated motion vector. The integral motion vector indicates the amount of translation of the screen from a certain reference time.

以上のように構成された動きベクトル検出装置の動作に
ついて説明する。
The operation of the motion vector detection device configured as above will be explained.

第2図において、第1の実施例と同様にして動きベクト
ル検出部11において入力画像信号のフィールドまたは
フレー1、間の動きベクトルを画面の領域別に検出し、
動きベクトル判定部12により各領域における検出動き
ベクトルの有効性を判定し、有効と判定された領域で検
出された動きベクトルの中から画面全体の動きベクトル
を決定する。
In FIG. 2, similarly to the first embodiment, the motion vector detection unit 11 detects motion vectors between fields or frames 1 of the input image signal for each screen area,
The motion vector determining unit 12 determines the validity of the detected motion vector in each region, and determines the motion vector for the entire screen from among the motion vectors detected in the regions determined to be valid.

そして、動きベクトル積分部17により動きベクトルな
時間積分し、積分動きベクトルを得る。このとき、積分
計算は下式で与えられる。
Then, the motion vector integration unit 17 integrates the motion vector over time to obtain an integral motion vector. At this time, the integral calculation is given by the following formula.

5−vec t (n)==s  vec L <nn
−1)X  +  vecL(n) 但し、s  vect(n)   : 現フィールド(
フレーム)の積分動きベクトル vec t (n−1) : 前フィールド(フレーム
)の積分動きベクトル vecL(n)      : 現フィールド(フレー
ム)のく差分)動きベクトル m         : ttn分減衰係数(≦1)で
ある。
5-vec t (n)==s vec L <nn
-1)X + vecL(n) However, svect(n): Current field (
(frame) integral motion vector vec t (n-1): Previous field (frame) integral motion vector vecL(n): Current field (frame) differential) motion vector m: ttn attenuation coefficient (≦1) be.

ここでmの値がlであれば完全積分であり、小さくなる
につれて積分減衰量が増大する。
Here, if the value of m is 1, it is a perfect integration, and as the value of m becomes smaller, the amount of integral attenuation increases.

次に、発散度計算部13は動きベクトル検出部11の出
力即ち各検出領域の動きベクトルのうち、動きベクトル
判定部12により有効と判定された領域の動きベクトル
をもとにして動きベクトルの発散度を計算する。計算の
方法を次式に挙げる。
Next, the divergence calculation unit 13 calculates the divergence of the motion vector based on the output of the motion vector detection unit 11, that is, the motion vector of the area determined to be valid by the motion vector determination unit 12 among the motion vectors of each detection area. Calculate degrees. The calculation method is shown in the following formula.

(1) 発散度(DIV)= MAX(1(各領域の動きベクトルの平均値)−(各領
域の動きベクトル)1) 但し、この演算は動きベクトル判定情報がOKである領
域の動きベクトルのみについて行う。MAXは各領域の
計算結果の最大値をとる関数であり、I Iは絶対値を
とることを示す。また、MAX演算の代わりにメデイア
ン演算を用いてもよい。また、ベクトルは2次元なので
、発散度は各成分について求めた値の平均値もしくは自
乗平均値もしくは加算値を実際の発散度として用いる。
(1) Divergence (DIV) = MAX (1 (average value of motion vectors in each region) - (motion vector in each region) 1) However, this calculation only applies to motion vectors in regions where the motion vector determination information is OK. Do about. MAX is a function that takes the maximum value of the calculation results in each area, and II shows that it takes the absolute value. Furthermore, a median calculation may be used instead of the MAX calculation. Further, since the vector is two-dimensional, the average value, the root mean square value, or the sum of the values obtained for each component is used as the actual divergence.

(2) 発散度(D[V): CMAX(+ある領域の動きベクトル その他の領域の動きベクトル1) 但腰 この演算は動きベクトル判定情報がOKである領
域の動きベクトルのみについて行う。CMAXは0内の
演算を全ての領域の組合せについて行い、その最大値を
とる間数であり、は絶対値をとることを示す。また、C
MAX演算で最大1直をとる代わりにメデイアンをとっ
てもよい。また、ベクトルは2次元なので、発散度は各
成分について求めた値の平均値もしくは自乗平均値もし
くは加算値を実際の発散度として用いる。
(2) Divergence (D[V): CMAX (+1 motion vector in a certain region and other motion vectors in other regions) However, this calculation is performed only for motion vectors in regions where the motion vector determination information is OK. CMAX is a number that takes the maximum value when calculations within 0 are performed on all combinations of areas, and indicates that CMAX takes the absolute value. Also, C
Instead of taking the maximum of 1 shift in the MAX operation, the median may be taken. Further, since the vector is two-dimensional, the average value, the root mean square value, or the sum of the values obtained for each component is used as the actual divergence.

(3) 発散度(DIV)= (Σ1(各領域の動きベクトルの平均値)−(各領域の
動きベクトル)N/(動きベクトル判定情報がOKであ
る領域数) 但し、Σは動きベクトル判定情報が有効である領域につ
いての総和を計算することを示す。また、ベクトルは2
次元なので、発散度は各成分について求めた値の平均値
もしくは自乗平均値もしくは加算値を実際の発散度とし
て用いる。
(3) Divergence (DIV) = (Σ1 (average value of motion vectors in each region) - (motion vector in each region) N/(number of regions for which motion vector determination information is OK) However, Σ is motion vector determination Indicates that the summation is calculated for the area where the information is valid. Also, the vector is 2
Since it is dimensional, the average value, the root mean square value, or the sum of the values obtained for each component is used as the actual divergence.

つぎに、発散度計算部13の出力を低域ろ波器14に通
し、時間的に速く変化する成分を抑圧する。そして、低
域ろ波器14の出力は変換器A15により所定の値に変
換される。この変換器A15の入力は(LPFを施した
)発散度であり、出力は動きベクトルに乗する動きベク
トル係数となる。変換器A150人出力特性も前記実施
例と同様であり、第2図に示す。
Next, the output of the divergence calculation unit 13 is passed through a low-pass filter 14 to suppress components that change quickly over time. The output of the low-pass filter 14 is then converted into a predetermined value by a converter A15. The input of this converter A15 is the divergence (which has been subjected to LPF), and the output is a motion vector coefficient by which the motion vector is multiplied. The output characteristics of converter A150 are also similar to those of the previous embodiment, and are shown in FIG.

そして、制御部16は動きベクトル積分部17から出力
される積分動きベクトルに、動きベクトル係数を乗する
ことにより積分動きベクトルの大きさをル制御する。
Then, the control unit 16 controls the magnitude of the integral motion vector by multiplying the integral motion vector output from the motion vector integrating unit 17 by a motion vector coefficient.

以」二のように本実施例によれば、動きベクトルに時間
(n分を施した積分動きベクトル、即ち実際の撮像装置
の動き量を直接制御することにより、低域ろ波器14の
特性のみにより時間的な制御特性を調整でき、かつ積分
前の動きベクトルに対する演算の丸め誤差が(n算され
るのを抑え、被写体に動きがある場合における積分動き
ベクトルの検出誤差を抑圧することが出来る。
As described below, according to this embodiment, the characteristics of the low-pass filter 14 can be adjusted by directly controlling the integral motion vector obtained by multiplying the motion vector by time (n minutes), that is, the amount of motion of the actual imaging device. It is possible to adjust the temporal control characteristics by only using the method, and it is also possible to suppress the rounding error of the calculation for the motion vector before integration from being multiplied by (n), and to suppress the detection error of the integral motion vector when there is movement in the subject. .

第5図は本発明における第3の実施例の動きベクトル検
出装置の構成図であり、11は動きベクトル検出部、1
2は動きベクトル判定部、13は発散度計算部、14は
低域ろ波器(LPF)、18は変換器B、17は動きベ
クトル積分部であり、第2の実施例と異なる点は、変換
器81Bの出力によって動きベクトル積分部17の積分
演算における積分減衰係数mの値を制御している点であ
る。
FIG. 5 is a block diagram of a motion vector detection device according to a third embodiment of the present invention, in which 11 is a motion vector detection section;
2 is a motion vector determination section, 13 is a divergence calculation section, 14 is a low-pass filter (LPF), 18 is a converter B, and 17 is a motion vector integration section.The points that differ from the second embodiment are as follows. The point is that the value of the integral attenuation coefficient m in the integral calculation of the motion vector integrating section 17 is controlled by the output of the converter 81B.

以上のように構成された動きベクトル検出装置の動作に
ついて説明する。
The operation of the motion vector detection device configured as above will be explained.

第5図において、第2の実施例と同様にして動きベクト
ル検出部11において入力画像信号のフィールドまたは
フレーム間の動きベクトルを画面の領域別に検出し、動
きベクトル判定部12により各領域における検出動きベ
クトルの有効性を判定し、有効と判定された領域で検出
された動きベクトルの中から画面全体の動きベクトルを
決定する。
In FIG. 5, similarly to the second embodiment, a motion vector detecting section 11 detects motion vectors between fields or frames of an input image signal for each region of the screen, and a motion vector determining section 12 detects motion vectors in each region. The validity of the vector is determined, and the motion vector for the entire screen is determined from among the motion vectors detected in the area determined to be valid.

次に、発散度計算部13は動きベクトル検出部11の出
力即ち各検出領域の動きベクトルのうち、動きベクトル
判定部12により有効と判定された領域の動きベクトル
をもとにして動きベクトルの発散度を計算する。計算の
方法を次式に挙げる。
Next, the divergence calculation unit 13 calculates the divergence of the motion vector based on the output of the motion vector detection unit 11, that is, the motion vector of the area determined to be valid by the motion vector determination unit 12 among the motion vectors of each detection area. Calculate degrees. The calculation method is shown in the following formula.

(1) 発散度(DIV)= MAX(+(各領域の動きベクトルの平均値)−(各領
域の動きベクトル)1) 但し、この演算は動きベクトル判定情報がOKである領
域の動きベクトルのみについて行う。MAXは各領域の
計算結果の最大値をとる関数であり、 11は絶対値を
とることを示す。また、MAX演算の代わりにメデイア
ン演算を用いてもよい。また、ベクトルは2次元なので
、発散度は各成分について求めた値の平均値もしくは自
乗平均値もしくは加算値を実際の発散度として用いる。
(1) Divergence (DIV) = MAX (+ (average value of motion vectors in each region) - (motion vector in each region) 1) However, this calculation only applies to motion vectors in regions where the motion vector determination information is OK. Do about. MAX is a function that takes the maximum value of the calculation results in each region, and 11 indicates that it takes the absolute value. Furthermore, a median calculation may be used instead of the MAX calculation. Further, since the vector is two-dimensional, the average value, the root mean square value, or the sum of the values obtained for each component is used as the actual divergence.

(2) 発散度(DIV)= CMAX(+ある領域の動きベクトル その他の領域の動きベクトル1) 但し、この演算は動きベクトル判定情報がOKである領
域の動きベクトルのみについて行う。CMAXは0内の
演算を全ての領域の組合せについて行い、その最大値を
とる関数であり、は絶対値をとることを示す。また、C
MAX演算で最大値をとる代わりにメデイアンをとって
もよい。また、ベクトルは2次元なので、発散度は各成
分について求めた値の平均値もしくは自乗平均値もしく
は加算値を実際の発散度として用いる。
(2) Divergence (DIV)=CMAX (+Motion vector in a certain area and motion vector in other areas 1) However, this calculation is performed only for the motion vectors in the area where the motion vector determination information is OK. CMAX is a function that performs calculations within 0 for all combinations of areas and takes the maximum value, and indicates that CMAX takes the absolute value. Also, C
Instead of taking the maximum value in the MAX operation, the median may be taken. Further, since the vector is two-dimensional, the average value, the root mean square value, or the sum of the values obtained for each component is used as the actual divergence.

(3) 発散度(DIV)= (Σ1(各領域の動きベクトルの平均値)−(各領域の
動きベクトル)l)/(動きベクトル判定情報がOKで
ある領域数) 但し、Σは動きベクトル判定情報が有効である領域につ
いての総和を計算することを示す。また、ベクトルは2
次元なので、発散度は各成分について求めた値の平均値
もしくは自乗平均値もしくは加W−1aを実際の発散度
として用いる。
(3) Divergence (DIV) = (Σ1 (average value of motion vectors in each region) - (motion vector in each region) l)/(number of regions for which motion vector determination information is OK) However, Σ is the motion vector Indicates that the sum total for the area in which the judgment information is valid is calculated. Also, the vector is 2
Since it is a dimension, the average value, the root mean square value, or the sum W-1a of the values obtained for each component is used as the actual divergence.

つぎに、発散度計算部13の出力を低域ろ波器14に通
し、時間的に速く変化する成分を抑圧する。そして、低
域ろ波器14の出力は変換器B18により所定の値に変
換される。この変換器B18の入力は(LPFを施した
)発散度であり、出力は動きベクトルの積分における積
分減衰係数となる。変換器BlBの人出力特性を第6図
に示す。
Next, the output of the divergence calculation unit 13 is passed through a low-pass filter 14 to suppress components that change quickly over time. The output of the low-pass filter 14 is then converted into a predetermined value by a converter B18. The input of this converter B18 is the divergence (with LPF applied), and the output is the integral attenuation coefficient in the integration of the motion vector. Figure 6 shows the human output characteristics of converter B1B.

変換器BIBの特性は、変換器A15の特性と同様に、
発散度が大きくなるにしたがっである所定の発散度(A
点)から、積分減衰係数mの値を1に近い値から減衰す
る特性にする。
The characteristics of converter BIB are similar to those of converter A15,
As the divergence increases, the predetermined divergence (A
point), the value of the integral attenuation coefficient m is set to a characteristic that attenuates from a value close to 1.

A点・B点の位置と、それぞれの点における積分減衰係
数の値mA、mBを変化させることによって減衰特性を
調整できる。
The attenuation characteristics can be adjusted by changing the positions of point A and point B and the values mA and mB of the integral attenuation coefficient at each point.

そして、この積分減衰係数mを用いて、動きベクトル積
分部17jこより動きベクトルを時間積分し、積分動き
ベクトルを得る。このとき、積分計算は第1〜第2の実
施例と同様に下式で与えられる。
Then, using this integral attenuation coefficient m, the motion vector is time-integrated by the motion vector integrator 17j to obtain an integral motion vector. At this time, the integral calculation is given by the following formula as in the first and second embodiments.

5−vec  t  (n):=s   vc Ct 
 (n−1)Xm   +   vect(n) 但し、s −vec t (n)   :現フィールド
(フレーム)の積分動きベクトル 5−vec t (n−1):前フィールド(フレーム
)の積分動きベクトル vecL(n)      :現フィールド(フレーム
)の(差分)動きベクトル ■n:積分減衰係数(≦1) である。
5-vec t (n):=s vc Ct
(n-1) (n): (difference) motion vector of the current field (frame) ■n: integral attenuation coefficient (≦1).

このように、発散度により積分演算における減衰係数を
制御することによって積分動きベクトルの大きさを制御
し、結果を出力する。
In this way, by controlling the attenuation coefficient in the integral calculation using the degree of divergence, the magnitude of the integral motion vector is controlled and the result is output.

以−Lのように、本実施例によれば、動きベクトルの発
散度により動きベクトルの積分演算における減衰係数を
制御することによっても、画面の一部分が動くような被
写体において、積分動きベクトル検出の誤検出を抑圧す
ることが出来る。
As shown in L above, according to this embodiment, integral motion vector detection can be performed in a subject where a part of the screen moves by controlling the attenuation coefficient in motion vector integral calculation based on the divergence of the motion vector. Erroneous detection can be suppressed.

この構成によれば、制御部16が不要になり、処理の規
模を削減できる。
According to this configuration, the control unit 16 is not required, and the scale of processing can be reduced.

また、第7図は本発明の画像ゆれ補正装置における一実
施例の構成図であり、図中破線部は本発明の第2〜第3
の実施例の動きベクトル検出装置19である。また、2
0は読みだし位置制御部、21は画像拡大装置である。
Further, FIG. 7 is a block diagram of an embodiment of the image blur correction device of the present invention, and the broken line portion in the figure is the second to third embodiment of the image blur correction device of the present invention.
This is a motion vector detection device 19 according to an embodiment of the present invention. Also, 2
0 is a reading position control unit, and 21 is an image enlarging device.

本実施例は検出された動きベクトルをもとにして、画像
の読みだし位置を制御する事により、画像のゆれ成分を
除去する画像ゆれ補正装置である。
This embodiment is an image blur correction device that removes image blur components by controlling the image readout position based on the detected motion vector.

画像信号は画像拡大装置21に入力され、第8図に示す
ように画像の拡大を施される。原画像の一部分を拡大し
て出力するが、このとき拡大画像の各画素の値は原画像
の各画素の値により内挿する。画像の読みだし位置は、
標準状態では第8図中A=B、  C=r)となる位置
に設定する。そして動きベクトル検出装置19の出力で
ある動きベクトルを用いて、画像が平行移動した分を相
殺するように画像の読みだし位置を制御する。破線部分
は、動きベクトルより読みだし位置を制御された場合の
読みだし部分を示す。このようにすることによって、ゆ
れて動いている画像を静止して出力することが出来る。
The image signal is input to an image enlarging device 21, and the image is enlarged as shown in FIG. A portion of the original image is enlarged and output, and at this time the value of each pixel of the enlarged image is interpolated by the value of each pixel of the original image. The image reading position is
In the standard state, the positions are set such that A=B and C=r in FIG. Then, using the motion vector output from the motion vector detection device 19, the image reading position is controlled so as to offset the translation of the image. The broken line portion indicates the readout portion when the readout position is controlled based on the motion vector. By doing this, it is possible to output a shaking image in a still state.

以」―のように、本実施例によれば、被写体の一部分が
静止していない場合においてもスムーズに制御が抑圧さ
れ、誤動作の目だたない状態で画像のゆれ成分を抑圧し
た安定な画像を得ることが出来る。
As shown in the figure below, according to this embodiment, the control is smoothly suppressed even when a part of the subject is not stationary, and a stable image with suppressed image shaking components is produced without noticeable malfunctions. can be obtained.

なお、第1〜第3の実施例で、発散度計算部13での演
算において、各領域の動きベクトルの平均(直を用いた
が、メデイアンを用いてもよいし、画面全体の動きベク
トルを用いてもよい。
In addition, in the first to third embodiments, in the calculation in the divergence calculation unit 13, the average (direct) of the motion vectors of each area was used, but the median may also be used, or the motion vector of the entire screen may be calculated. May be used.

また、第1〜第3の実施例において、低域ろ波器14を
省略しても良い。
Further, in the first to third embodiments, the low-pass filter 14 may be omitted.

また、第1〜第2の実施例において、変換器A15の特
性(第2図)で点へから点Bまでの特性を直線特性とし
たが、曲線にしてもよいし、数本の直線による折れ線特
性でもよい。また、動きベクトル係数の最小値をOとし
たが、0以上の値でもよい。
In addition, in the first and second embodiments, the characteristic of the converter A15 (Fig. 2) is a linear characteristic from point to point B, but it may be a curved line or several straight lines. It may also be a polygonal characteristic. Further, although the minimum value of the motion vector coefficient is set to O, it may be a value of 0 or more.

また、第3の実施例においても、変換器I31 Elの
特性(第6図)で点へから点Bまでの特性を直線特性と
したが、曲線にしてもよいし、数本の直線による折れ線
特性でもよい。また、B点以降の特性を線分(A、mA
)−(B、mB)の延長(破線)としてもよい。
Also, in the third embodiment, the characteristics of the converter I31 El (Fig. 6) are linear characteristics from point to point B, but they may also be curved lines or polygonal lines made up of several straight lines. It can also be a characteristic. In addition, the characteristics after point B are expressed by a line segment (A, mA
) - (B, mB) (dashed line).

また、第1〜第3の実施例において、信号処理がデジタ
ル化されており、動きベクトル判定部の出力(動きベク
トル、動きベクトル判定情報)をマイクロコンピュータ
に入力すれば発散度計算部13、低域ろ波器14、変換
器A15、変換器B18、動きベクトル積分部17、制
御部16の動作はマイクロコンピュータによるソフトウ
ェア演算でも簡単に実現することができる。
In addition, in the first to third embodiments, signal processing is digitalized, and when the output of the motion vector determination section (motion vector, motion vector determination information) is input to the microcomputer, the divergence calculation section 13 The operations of the bandpass filter 14, converter A15, converter B18, motion vector integrator 17, and controller 16 can be easily realized by software calculations by a microcomputer.

また、第2の実施例(第4図)において、制御部16を
動きベクトル積分部17の出力側に置いたが、動きベク
トル積分部17の入力端に置いてもよい。
Further, in the second embodiment (FIG. 4), the control section 16 is placed on the output side of the motion vector integration section 17, but it may be placed on the input end of the motion vector integration section 17.

また、第2の実施例において低域ろ波器14の出力側に
変換器A15と変換器B1Bを並列に接続し、それぞれ
が制御部16、動きベクトル積分部17を制御しても良
い。
Furthermore, in the second embodiment, the converter A15 and the converter B1B may be connected in parallel to the output side of the low-pass filter 14, and each may control the control section 16 and the motion vector integration section 17.

発明の詳細 な説明したように本発明によれば、被写体の一部が静止
していない場合においても画面全体の動きベクトルの検
出誤りを抑圧した動きベクトル検出装置を提供すること
が出来る。
DETAILED DESCRIPTION OF THE INVENTION According to the present invention, as described in detail, it is possible to provide a motion vector detection device that suppresses motion vector detection errors for the entire screen even when a part of the subject is not stationary.

また、画像のゆれを有効に防止できる。Furthermore, image shaking can be effectively prevented.

【図面の簡単な説明】[Brief explanation of drawings]

第1図は本発明における第1の実施例の動きベクトル検
出装置の構成図、第2図は同実施例の動きベクトル係数
と発散度の関係図、第3図は同実施例の変換器Aの構成
図、第4図は本発明における第2の実施例の動きベクト
ル検出装置の構成図、第5図は本発明における第3の実
施例の動きベクトル検出装置の構成図、第6図は同実施
例の積分減衰係数と発散度の関係図、第7図は本発明に
おける第4の実施例の構成図、第8図は画像の拡大処理
の説明図、第9図は画像の動きベクトルの説明図、第1
O図は従来の動きベクトル検出装置の構成図、第11図
は代表点マツチング法における代表点とその周囲の画素
の状態の説明図、第12図は被写体が静止しているとき
と動い−Cいるときの、画面中の各領域で検出された動
きベクトルの様子を示した図である。 l・・・ラッチA、2・・・代表点保存メモリ、3・・
・ラッチB、  4・・・相関器、5・・・アドレスコ
ントローラ、6・・・アドレス切替回路、7・・・累積
加算器、8・・・相関性探索回路、9・・・相関性有効
無効判定回路、lO・・・判定回路、11・・・動きベ
クトル検出部、12・・・動きベクトル判定部、13・
・・低域ろ波器、14・・・低域ろ波器、15・・・変
換器A、l 6・・・制御部、 7・・・動きベク トル積分部、 8・・・変換器B0
FIG. 1 is a block diagram of a motion vector detection device according to a first embodiment of the present invention, FIG. 2 is a diagram showing the relationship between motion vector coefficients and divergence of the same embodiment, and FIG. 3 is a converter A of the same embodiment. 4 is a block diagram of a motion vector detection device according to a second embodiment of the present invention, FIG. 5 is a block diagram of a motion vector detection device according to a third embodiment of the present invention, and FIG. 6 is a block diagram of a motion vector detection device according to a third embodiment of the present invention. A diagram of the relationship between the integral attenuation coefficient and the divergence of the same embodiment, FIG. 7 is a configuration diagram of the fourth embodiment of the present invention, FIG. 8 is an explanatory diagram of image enlargement processing, and FIG. 9 is a motion vector of the image. Explanatory diagram, 1st
Figure O is a configuration diagram of a conventional motion vector detection device, Figure 11 is an explanatory diagram of the state of a representative point and surrounding pixels in the representative point matching method, and Figure 12 is a diagram showing the state of a representative point when the subject is stationary and when it is moving. FIG. 4 is a diagram showing motion vectors detected in each area on the screen when l...Latch A, 2...Representative point storage memory, 3...
・Latch B, 4...Correlator, 5...Address controller, 6...Address switching circuit, 7...Accumulative adder, 8...Correlation search circuit, 9...Correlation valid Invalidity determination circuit, lO...determination circuit, 11...motion vector detection unit, 12...motion vector determination unit, 13.
...Low pass filter, 14...Low pass filter, 15...Converter A, l 6...Control section, 7...Motion vector integrator, 8...Converter B0

Claims (4)

【特許請求の範囲】[Claims] (1)入力画像信号を複数の領域に分割し、それぞれの
領域における画像の動きベクトルを演算する動きベクト
ル検出手段と、それら各領域における動きベクトルの有
効性を判断し、画面全体の動きベクトルを決定する動き
ベクトル判定手段と、前記動きベクトル検出手段の出力
を用いて各検出領域の動きベクトルの分散の度合を示す
発散度を得る発散度計算手段と、その発散度計算手段の
出力をその出力の大きさに関連した値に変換する変換手
段と、その変換手段の出力により画面全体の動きベクト
ルの大きさを制御する制御手段とを有することを特徴と
した動きベクトル検出装置。
(1) A motion vector detection means that divides an input image signal into multiple regions and calculates the motion vector of the image in each region, and determines the effectiveness of the motion vector in each region and calculates the motion vector of the entire screen. a motion vector determination means for determining a motion vector; a divergence calculation means for obtaining a degree of divergence indicating the degree of dispersion of motion vectors in each detection area using the output of the motion vector detection means; 1. A motion vector detection device comprising: a conversion means for converting into a value related to the size of the motion vector; and a control means for controlling the size of the motion vector of the entire screen based on the output of the conversion means.
(2)制御手段は、前記画面全体の動きベクトルを時間
積分する積分手段の出力の大きさを制御することを特徴
とした請求項1記載の動きベクトル検出装置。
(2) The motion vector detection device according to claim 1, wherein the control means controls the magnitude of the output of the integration means for time-integrating the motion vector of the entire screen.
(3)変換手段の出力により、前記積分手段の積分過程
における動きベクトルの減衰特性を制御することを特徴
とした請求項2記載の動きベクトル検出装置。
(3) The motion vector detecting device according to claim 2, wherein the attenuation characteristic of the motion vector in the integration process of the integrating means is controlled by the output of the converting means.
(4)入力画像を拡大する画像拡大装置と、画像の動き
ベクトルを演算する動きベクトル検出手段と、各領域に
おける動きベクトルの有効性を判断し、画面全体の動き
ベクトルを決定する動きベクトル判定手段と、画面全体
の動きベクトルを時間積分する積分手段と、前記動きベ
クトル検出手段の出力を用いて各検出領域の動きベクト
ルの分散の度合を示す発散度を得る発散度計算手段と、
その発散度計算手段の出力をその出力の大きさに関連し
た値に変換する変換手段と、その変換手段の出力により
前記積分手段または動きベクトル判定手段の出力を制御
する制御手段と、その制御手段または積分手段の出力を
用いて前記画像拡大装置の画像読みだし位置を演算する
読みだし位置制御手段を有し、拡大された画像の読みだ
し位置を制御することにより画像を平行移動し入力画像
のゆれ成分を抑圧する事を特徴とした画像ゆれ補正装置
(4) An image enlargement device that enlarges an input image, a motion vector detection means that calculates a motion vector of the image, and a motion vector determination means that judges the validity of the motion vector in each area and determines the motion vector of the entire screen. an integrating means for time-integrating the motion vector of the entire screen; and a divergence calculating means for obtaining a divergence indicating the degree of dispersion of the motion vectors of each detection area using the output of the motion vector detecting means.
A conversion means for converting the output of the divergence calculation means into a value related to the magnitude of the output, a control means for controlling the output of the integration means or the motion vector determination means by the output of the conversion means, and the control means Alternatively, it has a readout position control means for calculating the image readout position of the image enlargement device using the output of the integration means, and by controlling the readout position of the enlarged image, the image is translated in parallel and the input image is An image shake correction device characterized by suppressing shake components.
JP33900389A 1989-12-26 1989-12-26 Motion vector detection device and image shake correction device Expired - Lifetime JP2506469B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP33900389A JP2506469B2 (en) 1989-12-26 1989-12-26 Motion vector detection device and image shake correction device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP33900389A JP2506469B2 (en) 1989-12-26 1989-12-26 Motion vector detection device and image shake correction device

Publications (2)

Publication Number Publication Date
JPH03198488A true JPH03198488A (en) 1991-08-29
JP2506469B2 JP2506469B2 (en) 1996-06-12

Family

ID=18323352

Family Applications (1)

Application Number Title Priority Date Filing Date
JP33900389A Expired - Lifetime JP2506469B2 (en) 1989-12-26 1989-12-26 Motion vector detection device and image shake correction device

Country Status (1)

Country Link
JP (1) JP2506469B2 (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007516679A (en) * 2003-12-23 2007-06-21 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ Method and system for stabilizing video data
JP2009147658A (en) * 2007-12-13 2009-07-02 Canon Inc Imaging apparatus, control method therefor, and program
US7961222B2 (en) 2007-03-20 2011-06-14 Panasonic Corporation Image capturing apparatus and image capturing method

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2009019848A1 (en) 2007-08-03 2009-02-12 Panasonic Corporation Imaging device, imaging method, and program

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007516679A (en) * 2003-12-23 2007-06-21 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ Method and system for stabilizing video data
US7961222B2 (en) 2007-03-20 2011-06-14 Panasonic Corporation Image capturing apparatus and image capturing method
JP2009147658A (en) * 2007-12-13 2009-07-02 Canon Inc Imaging apparatus, control method therefor, and program
US8319842B2 (en) 2007-12-13 2012-11-27 Canon Kabushiki Kaisha Image capturing apparatus to prevent image blurring and control method therefor

Also Published As

Publication number Publication date
JP2506469B2 (en) 1996-06-12

Similar Documents

Publication Publication Date Title
KR930010028B1 (en) Dynamic vector detecting device
KR930002613B1 (en) Image motion vector detector
JP2563567B2 (en) Shake correction device
US20110158550A1 (en) Information processing apparatus, processing method, and computer-readable storage medium
JP2507138B2 (en) Motion vector detection device and image shake correction device
JPH04250779A (en) Moving vector detection circuit
JP4249272B2 (en) High resolution electronic video enlargement apparatus and method
JP4639555B2 (en) Motion vector detection apparatus and method, camera shake correction apparatus and method, and imaging apparatus
JP3526020B2 (en) Noise reduction device
KR100232113B1 (en) Motion vector detecting apparatus
JP2004088234A (en) Noise reduction device
JPH0771296B2 (en) Motion vector detector
JPH03198488A (en) Motion vector detector and picture oscillation corrector
EP1881694A2 (en) Image processing apparatus, image processing method, and computer program
JP2826018B2 (en) Video signal noise reduction system
EP0641123B1 (en) Image movement compensation apparatus
JP3200859B2 (en) Camera shake correction circuit and method
JP2600520B2 (en) Image motion compensation device
JPH0429477A (en) Motion vector detector and picture fluctuation correcting device
JP3265590B2 (en) Image motion vector detection device and image shake correction device
JP2753024B2 (en) Image motion vector prediction device and detection device
JP3639640B2 (en) Motion vector detection device
JP3123341B2 (en) Image motion compensation device
JP3487047B2 (en) Image motion compensation device
JPH05176218A (en) Picture motion correcting device

Legal Events

Date Code Title Description
FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20080402

Year of fee payment: 12

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090402

Year of fee payment: 13

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100402

Year of fee payment: 14

EXPY Cancellation because of completion of term
FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100402

Year of fee payment: 14