JP2600520B2 - Image motion compensation device - Google Patents

Image motion compensation device

Info

Publication number
JP2600520B2
JP2600520B2 JP3137417A JP13741791A JP2600520B2 JP 2600520 B2 JP2600520 B2 JP 2600520B2 JP 3137417 A JP3137417 A JP 3137417A JP 13741791 A JP13741791 A JP 13741791A JP 2600520 B2 JP2600520 B2 JP 2600520B2
Authority
JP
Japan
Prior art keywords
circuit
motion
image
vector
prediction
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP3137417A
Other languages
Japanese (ja)
Other versions
JPH04361484A (en
Inventor
博也 日下
隆 坂口
正明 中山
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Corp
Panasonic Holdings Corp
Original Assignee
Panasonic Corp
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Panasonic Corp, Matsushita Electric Industrial Co Ltd filed Critical Panasonic Corp
Priority to JP3137417A priority Critical patent/JP2600520B2/en
Priority to US07/894,741 priority patent/US5321515A/en
Publication of JPH04361484A publication Critical patent/JPH04361484A/en
Application granted granted Critical
Publication of JP2600520B2 publication Critical patent/JP2600520B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Description

【発明の詳細な説明】DETAILED DESCRIPTION OF THE INVENTION

【0001】[0001]

【産業上の利用分野】本発明は撮像装置の手揺れ補正等
に用いる画像動き補正装置に関するものである。
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to an image motion compensating apparatus used for compensating hand shake of an image pickup apparatus.

【0002】[0002]

【従来の技術】撮像装置を用いて被写体を撮影するに際
し、手で撮像装置を直接保持したり、車両等の移動体に
搭載すると撮像時の揺れが画面に発生する。このため画
面の揺れを検出し、この揺れ情報に基づいて画像の位置
補正を行う画像動き補正装置が実用化されている。
2. Description of the Related Art In photographing a subject using an image pickup apparatus, if the image pickup apparatus is directly held by hand or mounted on a moving body such as a vehicle, shaking during image pickup occurs on a screen. For this reason, an image motion compensating device that detects a shake of a screen and corrects the position of an image based on the shake information has been put to practical use .

【0003】従来の画像動き補正装置についてその動作
原理を説明する。図9は従来の画像動き補正装置の構成
を示すブロック図である。同図において、光電変換素子
1は撮像素子で、光学系を介した映像を電気信号(以
下、これを映像信号と称す)に変換する。アナログ信号
処理回路2は光電変換素子1からの映像信号に対する信
号処理を行い、アナログ−ディジタル変換回路3はアナ
ログ信号処理回路2で処理された映像信号をディジタル
信号に変換する。そして、この変換された信号は画像動
き検出回路4とフィールドメモリ回路11に送られる。
動き検出回路4はアナログ−ディジタル変換回路4から
の映像信号から画像の動きを検出する。フィールドメモ
リ回路11はアナログ−ディジタル変換回路4からの映
像信号を記録する。フィールドメモリ制御回路10は画
像動き検出回路4で得られた動き情報、すなわち、入力
画像の動きに応じてフィールドメモリ回路11の読み出
しアドレスを制御する。フィールドメモリ回路11から
読み出された映像信号はディジタル信号処理回路8でデ
ィジタル信号処理を施される。
The principle of operation of a conventional image motion compensator will be described. FIG. 9 is a block diagram showing a configuration of a conventional image motion correction device. In FIG. 1, a photoelectric conversion element 1 is an image pickup element, and converts an image via an optical system into an electric signal (hereinafter, referred to as an image signal). The analog signal processing circuit 2 performs signal processing on the video signal from the photoelectric conversion element 1, and the analog-digital conversion circuit 3 converts the video signal processed by the analog signal processing circuit 2 into a digital signal. Then, the converted signal is sent to the image motion detection circuit 4 and the field memory circuit 11.
The motion detection circuit 4 detects the motion of an image from the video signal from the analog-digital conversion circuit 4. The field memory circuit 11 records the video signal from the analog-digital conversion circuit 4. The field memory control circuit 10 controls the read address of the field memory circuit 11 according to the motion information obtained by the image motion detection circuit 4, that is, the motion of the input image. The video signal read from the field memory circuit 11 is subjected to digital signal processing by the digital signal processing circuit 8.

【0004】図10は図9に示した画像動き検出回路4
の具体的な構成を示すブロック図である。同図におい
て、代表点記憶回路1aは光電変換素子1から入力され
てくる現フィールドの映像信号を複数の領域に分割し、
各領域の特定の代表点に対応する映像信号を代表点信号
として記憶するものである。また、この回路は現フィー
ルドより1フィールド前に走査された前フィールドの代
表点信号を相関演算回路2aに与える。相関演算回路2
aは前代表点信号と現フィールドの映像信号間の相関演
算を行い、前代表点信号と現フィールドの映像信号の差
を比較するものであり、その出力は動きベクトル検出回
路3aに与えられる。動きベクトル検出回路3aは相関
演算回路2aでの演算結果から、前フィールドと現フィ
ールドの間の画像動きベクトルを検出する。
FIG. 10 shows an image motion detecting circuit 4 shown in FIG.
FIG. 3 is a block diagram showing a specific configuration of FIG. In the figure, a representative point storage circuit 1a divides a video signal of a current field input from a photoelectric conversion element 1 into a plurality of areas,
A video signal corresponding to a specific representative point in each area is stored as a representative point signal. Also, this circuit supplies a representative point signal of the previous field scanned one field before the current field to the correlation operation circuit 2a. Correlation operation circuit 2
“a” performs a correlation operation between the previous representative point signal and the video signal of the current field, and compares the difference between the previous representative point signal and the video signal of the current field. The output is supplied to the motion vector detection circuit 3a. The motion vector detection circuit 3a detects an image motion vector between the previous field and the current field from the calculation result of the correlation calculation circuit 2a.

【0005】以上のように構成された従来の画像動き
装置では、光電変換素子1から得た現フィールドの映
像信号は画像動き検出回路4とフィールドメモリ回路1
1へ送られる。画像動き検出回路4はこの映像信号から
画像の動きを検出し、この検出された動きに応じてフィ
ールドメモリ回路11のデータ読み出しアドレスを移動
させることにより、現フィールドの画像から手揺れ等に
よる画像の揺れ除去を行ってきた。
The conventional image motion compensator constructed as described above is used.
In the primary device, the video signal of the current field obtained from the photoelectric conversion element 1 is transferred to the image motion detection circuit 4 and the field memory
Sent to 1. The image motion detection circuit 4 detects the motion of the image from the video signal, and moves the data read address of the field memory circuit 11 in accordance with the detected motion, thereby changing the image of the current field from the image due to hand shake or the like. Shaking removal has been done.

【0006】[0006]

【発明が解決しようとする課題】しかしながら上記の構
成では、手揺れ補正のためにどうしてもフィールドメモ
リ回路が必要になり、このことで画像動き補正装置の低
コスト化が困難であるという問題があった。本発明は従
来の問題点を解決するものであって、従来に比べ安価な
構成で実現可能な画像動き補正装置の提案を行うことを
技術的課題とする。
In the [0005] However the above arrangement, inevitably field memory circuit for the hand shake correction Ri is necessary to name low image movement correcting device This
There was a problem that cost reduction was difficult . The present invention solves the conventional problems, and is less expensive than the conventional ones.
It is a technical object to propose an image motion compensating device which can be realized by the configuration .

【0007】また、この従来に比べ安価な構成で実現可
能な画像動き補正装置による画像動き補正の精度を向上
させることを技術的課題とする。
Further, it can be realized with a configuration that is less expensive than the conventional one.
Improves the accuracy of image motion compensation with a powerful image motion compensator
Making it a technical issue.

【0008】[0008]

【課題を解決するための手段】本発明は、フィールドメ
モリ回路の信号読み出しアドレスを移動させて画像の揺
れを補正する代わりに、新たに画像動き予測回路と光電
変換素子制御回路を設けることにより、フィールドメモ
リ回路とフィールドメモリ制御回路を用いることなく、
光電変換素子上の信号読み出しアドレスを移動させるこ
とにより画像の揺れを補正する。
According to the present invention, an image motion prediction circuit and a photoelectric conversion element control circuit are newly provided instead of moving a signal read address of a field memory circuit to correct image fluctuation. Without using a field memory circuit and a field memory control circuit,
By moving the signal read address on the photoelectric conversion element, image fluctuation is corrected.

【0009】また本発明は、フィールドメモリ回路の信
号読み出しアドレスを移動させて画像の揺れを補正する
代わりに、新たに画像動き予測回路と光電変換素子制御
回路を設けることにより、フィールドメモリ回路とフィ
ールドメモリ制御回路を用いることなく、光電変換素子
上の信号読み出しアドレスを移動させることにより画像
の揺れを補正するとともに、各フィールドで得られる画
像動き予測ベクトルを積分し、実際の読み出しアドレス
を決定する動きベクトル積分回路に新たに積分ベクトル
補正回路を設けることにより補正の精度を向上させる。
According to the present invention, an image motion prediction circuit and a photoelectric conversion element control circuit are newly provided instead of moving the signal read address of the field memory circuit to correct the image fluctuation. A motion that corrects image fluctuation by moving a signal read address on the photoelectric conversion element without using a memory control circuit, and integrates an image motion prediction vector obtained in each field to determine an actual read address. The accuracy of correction is improved by newly providing an integral vector correction circuit in the vector integration circuit.

【0010】また本発明は、フィールドメモリ回路の信
号読み出しアドレスを移動させて画像の揺れを補正する
代わりに、新たに画像動き予測回路と光電変換素子制御
回路を設けることにより、フィールドメモリ回路とフィ
ールドメモリ制御回路を用いることなく、光電変換素子
上の信号読み出しアドレスを移動させることにより画像
の揺れを補正するとともに、光電変換素子からの信号の
読み出しがライン単位でしか行えないことにより生じる
前記動きベクトルの誤差を補正する小数部誤差補正回路
を設けることにより補正の精度を向上させる。
Also, the present invention provides an image motion prediction circuit and a photoelectric conversion element control circuit instead of moving the signal read address of the field memory circuit to correct the image fluctuation. The motion vector generated by moving a signal read address on the photoelectric conversion element without using a memory control circuit to correct image shaking and reading a signal from the photoelectric conversion element only in line units. The accuracy of the correction is improved by providing a decimal part error correction circuit for correcting the error of (1).

【0011】[0011]

【作用】上記の構成により、本発明の画像動き補正装置
は、フィールドメモリ回路とフィールドメモリ制御回路
を用いずに、光電変換素子上の信号読み出しアドレスを
移動させることにより画像の揺れを補正することができ
る。
With the above arrangement, the image motion compensating apparatus of the present invention corrects image fluctuation by moving a signal read address on a photoelectric conversion element without using a field memory circuit and a field memory control circuit. Can be.

【0012】また本発明は、フィールドメモリ回路とフ
ィールドメモリ制御回路を用いずに、光電変換素子上の
信号読み出しアドレスを移動させることにより画像の揺
れを補正するとともに、その補正精度を向上させること
ができる。
Further, according to the present invention, it is possible to correct image fluctuation by moving a signal read address on a photoelectric conversion element without using a field memory circuit and a field memory control circuit, and to improve the correction accuracy. it can.

【0013】[0013]

【実施例】以下、本発明の実施例について、図面を参照
しながら説明する。
Embodiments of the present invention will be described below with reference to the drawings.

【0014】図1は本発明の第1の実施例における画像
動き補正装置のブロック図を示すものである。同図にお
いて、光電変換素子1は撮像素子で光学系を介した映像
を電気信号に変換する。アナログ信号処理回路2は光電
変換素子1からの映像信号に対する信号処理を行い、ア
ナログ−ディジタル変換回路はアナログ信号処理回路2
で処理された信号をディジタル信号に変換する。画像動
き検出回路4はアナログ−ディジタル変換回路3からの
映像信号から画像の動きを検出し、その画像の動き情報
を画像動き予測回路5に出力する。画像動き予測回路5
は、画像動き検出回路4で得られた画像の動き情報から
1フィールド先の画像の動きベクトルを予測し(以下、
この動きベクトルを動き予測ベクトルと称す)、この動
き予測ベクトルを光電変換素子制御回路6に出力する。
光電変換素子制御回路6は画像動き予測回路5で得られ
た画像の動き予測ベクトルに基づき光電変換素子1上の
信号読み出しアドレスを制御する。光電変換素子駆動回
路7は光電変換素子1を駆動するための回路である。デ
ィジタル信号処理回路8はアナログ−ディジタル変換回
路3からの映像信号にディジタル信号処理を施すための
回路である。
FIG. 1 is a block diagram showing an image motion compensating apparatus according to a first embodiment of the present invention. In FIG. 1, a photoelectric conversion element 1 converts an image via an optical system into an electric signal by an imaging element. The analog signal processing circuit 2 performs signal processing on the video signal from the photoelectric conversion element 1, and the analog-digital conversion circuit performs processing on the analog signal processing circuit 2.
Is converted into a digital signal. The image motion detection circuit 4 detects the motion of the image from the video signal from the analog-digital conversion circuit 3 and outputs the motion information of the image to the image motion prediction circuit 5. Image motion prediction circuit 5
Predicts the motion vector of the image one field ahead from the motion information of the image obtained by the image motion detection circuit 4 (hereinafter, referred to as
This motion vector is referred to as a motion prediction vector), and the motion prediction vector is output to the photoelectric conversion element control circuit 6.
The photoelectric conversion element control circuit 6 controls a signal read address on the photoelectric conversion element 1 based on the motion prediction vector of the image obtained by the image motion prediction circuit 5. The photoelectric conversion element driving circuit 7 is a circuit for driving the photoelectric conversion element 1. The digital signal processing circuit 8 is a circuit for performing digital signal processing on the video signal from the analog-digital conversion circuit 3.

【0015】なお、画像動き検出回路4は従来例を示す
図10と同様の構成と作用を成すものであるので詳細な
説明は省略する。以下本実施例の説明に於いては、画像
動き検出回路4を構成する各回路は図10の各回路と同
一のものとして同一の符号を付して説明に用いる。
Since the image motion detecting circuit 4 has the same configuration and operation as in FIG. 10 showing a conventional example, detailed description will be omitted. Hereinafter, in the description of the present embodiment, each circuit constituting the image motion detection circuit 4 is the same as each circuit in FIG.

【0016】図2は図1に示した画像動き予測回路5の
具体的な構成を示すブロック図である。同図において、
予測演算回路2bは現フィールドまでに得られた動きベ
クトルから1フィールド先の動きベクトルを予測演算す
る回路であり、ここで用いる動きベクトルは、各フィー
ルドでそのフィールドの1フィールド前に画像動き予測
回路5で求められた動き予測ベクトルに、各フィールド
で動き検出回路4で得られた画像動き情報を加算(もし
くは減算)して得られるもので、これはつまり各フィー
ルドでの実際の動きベクトルである。この各フィールド
での実際の動きベクトルを計算するのが動きベクトル算
出回路1bである。ちなみにベクトル算出回路1bは、
各フィールドで予測演算回路2bが出力する動き予測ベ
クトルを記憶しておき、この動き予測ベクトルと画像動
き検出回路4で得られた画像動き情報を用いてフィール
ド間の実際の動きベクトルを求める。予測演算回路2b
は動きベクトル算出回路1bで得られた画像の動きベク
トル値を用いて1フィールド先の画像の動きベクトルを
予測する。動きベクトル積分回路3bは予測演算回路2
bからの動き予測ベクトルを各フィールド毎に積分する
(以下、これを動き予測積分ベクトルと称す)。
FIG. 2 is a block diagram showing a specific configuration of the image motion prediction circuit 5 shown in FIG. In the figure,
The prediction operation circuit 2b is a circuit that predicts and calculates a motion vector one field ahead from a motion vector obtained up to the current field. The motion vector used here is an image motion prediction circuit that is one field before the field in each field. 5 is obtained by adding (or subtracting) the image motion information obtained by the motion detection circuit 4 in each field to the motion prediction vector obtained in step 5, which is an actual motion vector in each field. . The motion vector calculation circuit 1b calculates the actual motion vector in each field. By the way, the vector calculation circuit 1b
A motion prediction vector output from the prediction operation circuit 2b is stored in each field, and an actual motion vector between fields is obtained using the motion prediction vector and the image motion information obtained by the image motion detection circuit 4. Prediction operation circuit 2b
Predicts the motion vector of the image one field ahead using the motion vector value of the image obtained by the motion vector calculation circuit 1b. The motion vector integration circuit 3b is a prediction operation circuit 2
The motion prediction vector from b is integrated for each field (hereinafter, this is referred to as a motion prediction integration vector).

【0017】図3は図2に示した予測演算回路2bの具
体的な構成を示すブロック図である。同図において、遅
延回路1cは信号を遅延させる遅延器であり、遅延時間
は、映像信号の1フィールド分、つまり60分の1秒で
ある。乗算回路2cは乗算器であり、本実施例では入力
に2を乗ずるものとする。乗算回路3cは乗算器であ
り、本実施例では入力に−1を乗ずるものとする。加算
器4cは乗算回路2cと乗算回路3cからの入力を加算
し出力する。
FIG. 3 is a block diagram showing a specific configuration of the prediction operation circuit 2b shown in FIG. In the figure, a delay circuit 1c is a delay unit for delaying a signal, and the delay time is one field of a video signal, that is, 1/60 second. The multiplying circuit 2c is a multiplier. In this embodiment, the input is multiplied by 2. The multiplication circuit 3c is a multiplier. In this embodiment, the input is multiplied by -1. The adder 4c adds the inputs from the multiplication circuits 2c and 3c and outputs the result.

【0018】図4は図2に示した予測演算回路2bの他
の具体的な構成を示すブロック図である。同図におい
て、遅延回路1d及び遅延回路2dは共に信号を遅延さ
せる遅延器であり、遅延時間は、映像信号の1フィール
ド分、つまり60分の1秒である。乗算回路3dは乗算
器であり、本実施例では入力に3を乗ずるものとする。
乗算回路4dは乗算器であり、本実施例では入力に3を
乗ずるものとする。乗算回路5dは乗算器であり、本実
施例では入力に−1を乗ずるものとする。加算器6dは
乗算回路3dと乗算回路4dからの入力を加算し出力す
る。加算器7dは乗算回路5dと加算器6dからの入力
を加算し出力する。
FIG. 4 is a block diagram showing another specific configuration of the prediction operation circuit 2b shown in FIG. In the figure, a delay circuit 1d and a delay circuit 2d are both delay devices for delaying a signal, and the delay time is one field of a video signal, that is, 1/60 second. The multiplication circuit 3d is a multiplier. In this embodiment, the input is multiplied by 3.
The multiplication circuit 4d is a multiplier, and in this embodiment, the input is multiplied by 3. The multiplication circuit 5d is a multiplier. In this embodiment, the input is multiplied by -1. The adder 6d adds the inputs from the multiplication circuits 3d and 4d and outputs the result. The adder 7d adds the inputs from the multiplication circuit 5d and the adder 6d and outputs the result.

【0019】以上のように構成された本実施例の画像動
補正装置について、以下その動作について説明する。
The operation of the image motion compensating apparatus according to the present embodiment configured as described above will be described below.

【0020】画像動き検出回路4では、光電変換素子1
で得られた現フィールドの映像信号と、前フィールドの
映像信号のうち代表点記憶回路1aで記憶してあった代
表点信号との相関演算を相関演算回路2aで行い、この
演算結果より画像の動きを検出する。ただし、この得ら
れた画像の動き情報は前フィールドにおいて画像動き予
測回路5で予測した画像の動きと、現フィールドの画像
の実際の動きとの差である。つまり、画像動き予測回路
5で予測した動きと実際の動きが同じであれば、この画
像動き検出回路5で得られる画像の動きは0となる。画
像動き検出回路4で検出された画像動き情報は、動きベ
クトル算出回路1bにおいて前フィールドでの動き予測
ベクトルと加算(もしくは減算)され、前フィールドに
対する現フィールドの実際の動きベクトルとして予測演
算回路2bに送られる。予測演算回路2bは動きベクト
ル算出回路1bからの入力から次フィールドで予測され
る動きベクトルを求め、これを動き予測ベクトルとして
動きベクトル積分回路3bに送る。
In the image motion detection circuit 4, the photoelectric conversion element 1
The correlation operation between the video signal of the current field obtained in step (1) and the representative point signal stored in the representative point storage circuit 1a among the video signals of the previous field is performed by the correlation operation circuit 2a. Detect movement. However, the obtained motion information of the image is a difference between the motion of the image predicted by the image motion prediction circuit 5 in the previous field and the actual motion of the image in the current field. That is, if the motion predicted by the image motion prediction circuit 5 is the same as the actual motion, the motion of the image obtained by the image motion detection circuit 5 is 0. The image motion information detected by the image motion detection circuit 4 is added (or subtracted) to the motion prediction vector in the previous field in the motion vector calculation circuit 1b, and is calculated as the actual motion vector of the current field with respect to the previous field. Sent to The prediction operation circuit 2b obtains a motion vector predicted in the next field from the input from the motion vector calculation circuit 1b, and sends this to the motion vector integration circuit 3b as a motion prediction vector.

【0021】この時、予測演算回路2bは第1の構成と
して、動きベクトル演算回路1bで求められた前フィー
ルドに対する現フィールドの実際の動きベクトルをその
まま動き予測ベクトルとする構成も考えられ、この構成
で画像の揺れの低周波成分の除去は可能である。また、
第2の構成として、予測演算回路2bが図3の構成をと
る場合は、乗算回路2cで2を乗じた入力信号と遅延回
路1cを経て乗算回路3cで−1を乗じた入力信号とを
加算器4cで加算し動き予測ベクトルとし、また、第3
の構成として、図4の構成をとる場合は、乗算回路3d
で3を乗じた入力信号と遅延回路1dを経て乗算回路4
dで−3を乗じた入力信号とを加算器6dで加算したも
のと、遅延回路1dと遅延回路2dとを経て乗算回路5
dでを乗じた入力信号を加算器7dで加算し動きベク
トルとするが、これらの場合は前フィールドに対する現
フィールドの実際の動きベクトルをそのまま動き予測ベ
クトルとする構成よりもより画像の揺れの高周波成分の
除去が可能である。
At this time, as the first configuration, the prediction operation circuit 2b may be configured such that the actual motion vector of the current field with respect to the previous field obtained by the motion vector operation circuit 1b is used as it is as the motion prediction vector. Thus, it is possible to remove the low frequency component of the image fluctuation . Also,
As a second configuration, when the prediction operation circuit 2b has the configuration shown in FIG. 3, the input signal multiplied by 2 by the multiplication circuit 2c and the input signal multiplied by -1 by the multiplication circuit 3c via the delay circuit 1c are added. Adder 4c to obtain a motion prediction vector.
When the configuration shown in FIG. 4 is adopted as the configuration of the multiplication circuit 3d
Multiplication circuit 4 through the input signal multiplied by 3 and the delay circuit 1d
The input signal multiplied by -3 with d is added by an adder 6d, and the multiplication circuit 5 passes through a delay circuit 1d and a delay circuit 2d.
The input signal multiplied by 1 is added by the adder 7d to obtain a motion vector. In these cases, however, the actual motion vector of the current field with respect to the previous field is used as the motion prediction vector as it is, so that the motion of the image is reduced . High frequency components can be removed.

【0022】以上述べた動き予測ベクトルを用いて、動
きベクトル積分回路3bは各フィールドで得られた動き
予測ベクトルの積分値を計算する。そして、この動き予
測積分ベクトルは光電変換素子制御回路6に送られ、こ
の動き予測積分ベクトルに基づき光電変換素子制御回路
5が光電変換素子1上の映像信号読み出しアドレスを制
御し、映像信号の動き成分を光電変換素子1上で補正す
る。
Using the motion prediction vector described above, the motion vector integration circuit 3b calculates the integrated value of the motion prediction vector obtained in each field. Then, the motion prediction integration vector is sent to the photoelectric conversion element control circuit 6, and the photoelectric conversion element control circuit 5 controls the video signal read address on the photoelectric conversion element 1 based on the motion prediction integration vector, The components are corrected on the photoelectric conversion element 1.

【0023】以上のように本実施例によれば、動きベク
トル予測回路5で予測された1フィールド先の画像動き
予測データにより光電変換素子1上の信号読み出しアド
レスを移動させることにより、フィールドメモリ回路を
用いることなく画像の動き補正を行うことができる。
As described above, according to the present embodiment, the signal read address on the photoelectric conversion element 1 is moved by the image motion prediction data one field ahead predicted by the motion vector prediction circuit 5, whereby the field memory circuit Can be used to correct the motion of an image.

【0024】また、本実施例において、上記それぞれの
回路の機能のソフトウエア上での実現が可能であること
は明かである。
In this embodiment, it is apparent that the functions of the above circuits can be realized on software.

【0025】また、本実施例において光電変換素子とし
てNTSC用の画素数のものを用い、最終的な映像信号
の出力をNTSC方式の信号とする場合には、ディジタ
ル信号処理回路は電子的処理によるズーム機能を有する
構成であり、また、光電変換素子としてPAL用の画素
数のものを用い、最終的な映像信号の出力をPAL方式
の信号とする場合にもディジタル信号処理回路は電子的
処理によるズーム機能を有する構成となるが、PAL用
などの画素数がNTSC用よりも多いものを用い、最終
的な映像信号の出力をNTSC方式の信号とする場合に
はディジタル信号処理回路は電子的処理によるズーム機
能を含まない構成となる。
In this embodiment, when a photoelectric conversion element having a number of pixels for NTSC is used and the final video signal output is a signal of the NTSC system, the digital signal processing circuit uses electronic processing. The digital signal processing circuit has a configuration having a zoom function, and the digital signal processing circuit uses electronic processing even when a photoelectric conversion element having a number of pixels for PAL is used and a final video signal output is a PAL signal. The digital signal processing circuit is electronically processed when a pixel with a larger number of pixels, such as for PAL, than for NTSC is used and the final video signal output is an NTSC signal. And does not include a zoom function.

【0026】また、本実施例において、画像動き検出回
路4で検出される画像の動き情報及び画像動き予測回路
5で予測される動き予測ベクトル及び動きベクトル積分
回路3bで得られる動き予測積分ベクトルの精度に関し
ては特に言及しなかったが、これらに関しては1画素以
下の精度をもたせることは可能である。そして、その場
合はディジタル信号処理回路は、映像信号の補間処理機
能を有する構成であり、上記動き予測積分ベクトルを基
にして、この補間処理により1画素以下の精度で動き補
正された補正信号を生成することが可能である。
In the present embodiment, the motion information of the image detected by the image motion detecting circuit 4, the motion predicted vector predicted by the image motion predicting circuit 5, and the motion prediction integrated vector obtained by the motion vector integrating circuit 3b are calculated. Although no particular reference has been made to the accuracy, it is possible to provide them with an accuracy of one pixel or less. In this case, the digital signal processing circuit has a function of interpolating the video signal. Based on the motion prediction integration vector, the digital signal processing circuit generates a correction signal that has been motion-corrected with an accuracy of one pixel or less by the interpolation process. Can be generated.

【0027】また、本実施例において、画像動き検出回
路4に関しては従来の例のものと同じとしたがこれに限
るものではない。
In this embodiment, the image motion detection circuit 4 is the same as that of the conventional example, but is not limited to this.

【0028】また、本実施例において予測演算回路2b
に関しては3つの構成を独立に用いるように表現したが
これに限るものではなく、上記3つの構成による演算結
果を適応的に切り替える方式も考えられる。また、予測
演算回路2bの第3の構成として図4に示したものでは
加算器を2つ使用しているが、これは1つでも同じ構成
が可能なことは明かである。
Further, in the present embodiment, the prediction operation circuit 2b
Is described so as to use three configurations independently, but the present invention is not limited to this, and a method of adaptively switching the calculation results by the above three configurations is also conceivable. Further, in the configuration shown in FIG. 4 as the third configuration of the prediction operation circuit 2b, two adders are used, but it is clear that the same configuration is possible even with one.

【0029】また、本実施例において、画像の動きの検
出及び画像の動きの予測はすべてフィールド毎に行った
が、これに限るものではなく、例えばフィールド毎では
なくフレーム毎に行うことも考えられる。
Further, in the present embodiment, the detection of the motion of the image and the prediction of the motion of the image are all performed for each field. However, the present invention is not limited to this. .

【0030】次に、本発明の第2の実施例について説明
する。本発明の第2の実施例の構成は、図1に示した第
1の実施例の構成と同一であるが、画像動き予測回路5
の内部構成に差異がある。
Next, a second embodiment of the present invention will be described. The configuration of the second embodiment of the present invention is the same as the configuration of the first embodiment shown in FIG.
There is a difference in the internal configuration.

【0031】図5は画像動き予測回路5の具体的な構成
を示すブロック図である。同図において、予測演算回路
2bは現フィールドまでに得られた動きベクトルから1
フィールド先の動きベクトルを予測演算する回路であ
り、ここで用いる動きベクトルは、各フィールドでその
フィールドの1フィールド前に画像動き予測回路5で求
められた動き予測ベクトルに、各フィールドで動き検出
回路4で得られた画像動き情報を加算(もしくは減算)
して得られたもので、これはつまり各フィールドでの実
際の動きベクトルである。この各フィールドでの実際の
動きベクトルを計算するのがベクトル算出回路1bであ
る。ちなみにベクトル算出回路1bは、各フィールドで
予測演算回路2bが出力する動き予測ベクトルを記憶し
ておき、この動き予測ベクトルと画像動き検出回路4で
得られた画像動き情報を用いてフィールド間の実際の動
きベクトルを求める。予測演算回路2bは動きベクトル
算出回路1bで得られた画像動きベクトルから1フィー
ルド先の画像の動きベクトルを予測する。動きベクトル
積分回路3bは予測演算回路2bからの動き予測ベクト
ルを各フィールド毎に積分し、実際に光電変換素子1上
での映像信号読み出しアドレスを決定する。積分ベクト
ル補正回路4bは動きベクトル算出回路1bの結果か
ら、動きベクトル積分回路3bで積分された値に含まれ
る予測に伴う誤差を補正する。
FIG. 5 is a block diagram showing a specific configuration of the image motion prediction circuit 5. In the figure, the prediction operation circuit 2b calculates 1 from the motion vector obtained up to the current field.
This is a circuit for predicting and calculating a motion vector at a field destination. The motion vector used here is a motion prediction vector obtained by the image motion prediction circuit 5 one field before the field in each field, and a motion detection circuit in each field. Add (or subtract) the image motion information obtained in step 4
This is the actual motion vector in each field. The vector calculation circuit 1b calculates the actual motion vector in each field. By the way, the vector calculation circuit 1b stores a motion prediction vector output from the prediction calculation circuit 2b in each field, and uses the motion prediction vector and the image motion information obtained by the image motion detection circuit 4 to calculate an actual field between fields. Find the motion vector of The prediction operation circuit 2b predicts a motion vector of an image one field ahead from the image motion vector obtained by the motion vector calculation circuit 1b. The motion vector integration circuit 3b integrates the motion prediction vector from the prediction operation circuit 2b for each field, and actually determines a video signal read address on the photoelectric conversion element 1. The integration vector correction circuit 4b corrects an error associated with prediction included in the value integrated by the motion vector integration circuit 3b from the result of the motion vector calculation circuit 1b.

【0032】以上のように構成された本実施例の画像動
補正装置について、以下その動作について説明する。
The operation of the image motion compensating apparatus of the present embodiment configured as described above will be described below.

【0033】画像動き検出回路4では、光電変換素子1
で得られた現フィールドの映像信号と、前フィールドの
映像信号のうち代表点記憶回路1aで記憶してあった代
表点信号との相関演算を相関演算回路2aで行い、この
演算結果より画像の動きを検出する。ただし、この得ら
れた画像の動き情報は前フィールドにおいて動き予測回
路で予測した画像の動きと、現フィールドの画像の実際
の動きとの差である。つまり、画像動き予測回路5で予
測した動きと実際の動きが同じであれば、この画像動き
検出回路4で得られる画像の動きは0となる。画像動き
検出回路4で検出された画像動き情報は動きベクトル算
出回路1bにおいて前フィールドでの動き予測ベクトル
と加算(もしくは減算)され、前フィールドに対する現
フィールドの正確な動きベクトル値として予測演算回路
2bに送られる。予測演算回路2bは動きベクトル算出
回路1bからの入力から次フィールドで予測される動き
ベクトルを求め、これを動きベクトル積分回路3bに送
る。動きベクトル積分回路3bは動きベクトルの積分値
を計算する。しかし、ここで積分される動きベクトルは
予測演算回路2bで予測された値であるため、当然予測
の際に生じる誤差が含まれることが考えられる。そこ
で、動きベクトル算出回路1bで得られた現フィールド
の実際の動きベクトルを用いてフィールド毎に動き予測
積分ベクトルの補正を行うことにより、より正確な動き
補正が行える。これを図6(同図において、現在のフィ
ールドをn、現フィールドまでの動きベクトルの積分値
をベクトルSn、現フィールドで得た次フィールドの動
き予測ベクトルをベクトルyn+1、前フィールドに対す
る現フィールドの実際の動きベクトルをベクトルvn
とする。また簡単のため、ベクトルは1次元で表示す
る)を用いて具体的に説明すると、前フィールドで積分
演算された動き予測ベクトル(つまり、前フィールドに
対する現フィールドの動きベクトルの予測値:図6のベ
クトルyn)の代わりに、現フィールドにおいて動きベ
クトル算出回路1bで得られた現フィールドの前フィー
ルドに対する実際の動きベクトル(図6のベクトル
n)を積分に用いるようにする。そして、この現フィ
ールド迄の画像の動きの積分値(図6のベクトルSn
ベクトルSn=ベクトルSn-1+ベクトルvn)に現フィ
ールドで予測演算回路2bで得られた動き予測ベクトル
(図6のベクトルyn+1)を加算し、光電変換素子1上
での信号読み出しアドレスを決定する。この決定に基づ
き光電変換素子制御回路6が光電変換素子1上の映像信
号読み出しアドレスを制御し、映像信号の動き成分を光
電変換素子1上で補正する。
In the image motion detecting circuit 4, the photoelectric conversion element 1
The correlation operation between the video signal of the current field obtained in step (1) and the representative point signal stored in the representative point storage circuit 1a among the video signals of the previous field is performed by the correlation operation circuit 2a. Detect movement. However, the obtained motion information of the image is a difference between the motion of the image predicted by the motion prediction circuit in the previous field and the actual motion of the image in the current field. That is, if the motion predicted by the image motion prediction circuit 5 is the same as the actual motion, the motion of the image obtained by the image motion detection circuit 4 is zero. The image motion information detected by the image motion detection circuit 4 is added (or subtracted) to the motion prediction vector in the previous field in the motion vector calculation circuit 1b, and is calculated as an accurate motion vector value of the current field with respect to the previous field. Sent to The prediction operation circuit 2b obtains a motion vector predicted in the next field from the input from the motion vector calculation circuit 1b, and sends it to the motion vector integration circuit 3b. The motion vector integration circuit 3b calculates an integrated value of the motion vector. However, since the motion vector integrated here is a value predicted by the prediction operation circuit 2b, it is conceivable that an error generated during prediction is naturally included. Therefore, by correcting the motion prediction integration vector for each field using the actual motion vector of the current field obtained by the motion vector calculation circuit 1b, more accurate motion correction can be performed. 6 (in FIG. 6, the current field is n, the integrated value of the motion vector up to the current field is a vector Sn , the motion prediction vector of the next field obtained in the current field is a vector y n + 1 , Let the actual motion vector of the current field be the vector v n ,
And For simplicity, the description will be made specifically using a one-dimensional vector. A motion prediction vector obtained by performing an integration operation in the previous field (that is, a predicted value of the current field motion vector with respect to the previous field: FIG. 6) instead of the vector y n), so that use in integrating the actual motion vectors for the previous field of the current field obtained by the motion vector calculation circuit 1b in the current field (vector v n in FIG. 6). Then, the integrated value of the motion of the image up to the current field (the vector S n ,
The motion prediction vector (vector y n + 1 in FIG. 6) obtained by the prediction operation circuit 2b in the current field is added to the vector S n = vector S n-1 + vector v n ). Determine the signal read address. Based on this determination, the photoelectric conversion element control circuit 6 controls the video signal read address on the photoelectric conversion element 1 and corrects the motion component of the video signal on the photoelectric conversion element 1.

【0034】以上のように本実施例によれば、画像動き
予測回路5に積分ベクトル補正回路4bを追加すること
により、画像動き予測回路5で求められる光電変換素子
1上の信号読み出しをより精度の高いものとする事が可
能となり、これにより画像の動き補正をより高精度で行
うことができる。
As described above, according to this embodiment, by adding the integral vector correction circuit 4b to the image motion prediction circuit 5, the signal readout on the photoelectric conversion element 1 obtained by the image motion prediction circuit 5 can be performed with higher accuracy. Is high, whereby the motion of the image can be corrected with higher accuracy.

【0035】図7は本発明の第3の実施例における画像
動き補正装置のブロック図を示すものである。同図にお
いて、小数部誤差補正回路9を新たに設けた点が図1に
示した第1,第2の実施例の構成と異なる。すなわち、
小数部誤差補正回路9は画像動き検出回路4と画像動き
予測回路5の出力を入力とし、出力を画像動き予測回路
5に入力する構成としている。
FIG. 7 is a block diagram showing an image motion compensating apparatus according to a third embodiment of the present invention. In this figure, the point that a decimal part error correction circuit 9 is newly provided is different from the configuration of the first and second embodiments shown in FIG. That is,
The decimal part error correction circuit 9 has a configuration in which the outputs of the image motion detection circuit 4 and the image motion prediction circuit 5 are input and the output is input to the image motion prediction circuit 5.

【0036】小数部誤差補正回路9は、光電変換素子1
からの映像信号読み出しがライン単位でしか行えないこ
とによる小数部の誤差を補正するための回路である。小
数部誤差補正回路9で小数部の誤差の補正を行った画像
の動き情報は、画像動き予測回路5に出力される。画像
動き予測回路5は、画像動き検出回路4で得られ、且つ
小数部誤差補正回路9で小数部の誤差の補正が成された
画像の動き情報から1フィールド先の画像の動きベクト
ルを予測し、この予測された動きベクトルから(動き予
測ベクトル)光電変換素子1上の信号読み出しアドレス
を求め、これを光電変換素子制御回路6に出力する。ま
た、画像動き予測回路5は第1の実施例と同様の構成と
作用を成すものであるので詳細な説明は省略する。
The decimal part error correction circuit 9 includes the photoelectric conversion element 1
This is a circuit for correcting an error in a decimal part due to the fact that a video signal can be read only from a line unit. The motion information of the image whose decimal part error has been corrected by the decimal part error correction circuit 9 is output to the image motion prediction circuit 5. The image motion prediction circuit 5 predicts the motion vector of the image one field ahead from the motion information of the image obtained by the image motion detection circuit 4 and corrected for the decimal part error by the decimal part error correction circuit 9. Then, a signal read address on the photoelectric conversion element 1 (movement prediction vector) is obtained from the predicted motion vector, and is output to the photoelectric conversion element control circuit 6. Further, since the image motion prediction circuit 5 has the same configuration and operation as the first embodiment, detailed description will be omitted.

【0037】以上のように構成された本実施例の画像動
補正装置について、以下その動作について説明する。
The operation of the image motion compensating apparatus of the present embodiment configured as described above will be described below.

【0038】画像動き検出回路4では、光電変換素子1
で得られた現フィールドの映像信号と、前フィールドの
映像信号のうち代表点記憶回路1aで記憶してあった代
表点信号との相関演算を相関演算回路2aで行い、この
演算結果より画像の動きを検出する。ただし、この得ら
れた画像の動き情報は前フィールドにおいて動き予測回
路で予測した画像の動きと、現フィールドの画像の実際
の動きとの差である。つまり、画像動き予測回路5で予
測した動きと実際の動きが同じであれば、この画像動き
検出回路5で得られる画像の動きは0となる。しかし、
画像動き検出回路4で検出される画像の動き情報及び画
像動き予測回路5で予測される動き予測ベクトル及び動
きベクトル積分回路3bで得られる動き予測積分ベクト
ルの精度に関しては1画素以下の精度をもたせることは
可能であるが、実際には光電変換素子1から映像信号を
読みだす場合には光電変換素子1上でライン単位で読み
出すことになるため、画像動き検出回路4では画像動き
予測回路5で求めた動き予測積分ベクトル値が整数値を
とるならば問題はないが、小数を含む値をとる場合、つ
まり、1画素以下の補正も考慮にいれた場合には小数部
を切り捨てた値で読み出しを行うこととなり、読み出し
た映像信号どうしに対し相関演算等を行う場合、前記小
数部の切捨てによる誤差が当然含まれることになる。こ
の誤差について図8を用いて具体的に説明すると、図8
において、実線の格子の交わる箇所上の丸印は光電変換
素子1上の受光部を模式的に表したもので、各受光部は
垂直方向に上からv1,v2,v3,・・・、水平方向
に左からh1,h2,h3,・・・という座標を与え位
置を表現する。点線で示した枠A,Bは動きベクトル予
測回路5により決定された小数部を含む切り出し枠であ
り、初めにA、次フィールドはBという順番である。ま
ず初めに、枠Aが画像動き予測回路5により指定された
とき、実際は光電変換素子1上で受光部と受光部の間か
ら信号を読み出してくることは不可能であるため、この
場合映像信号の読み出しは(h4,v4)の受光部から
開始される。このとき、光電変換素子上の読みでし枠と
動き積分ベクトルにより示される補正枠との間には、図
8中でベクトルuで示されるだけの差が生じる。引続き
次フィールドで、今度は枠Bで示される補正枠を切り出
すためには光電変換素子上の映像信号の読み出しは(h
2,v1)の受光部から開始される。このとき、光電変
換素子上の読みだし枠と動き積分ベクトルにより示され
る補正枠との間には、図8中でベクトルvで示されるだ
けの差が生じる。このとき動き検出回路4では2つのフ
ィールド間の動きの検出を光電変換素子1からの映像信
号を用いて行っているため、前記補正枠と読み出し枠の
間の差、ベクトルuとベクトルvについては考慮にいれ
ていないために、この2つのベクトルの差に相当する分
を2フィールド間の動きとして誤検出する。この誤検出
分の補正を小数部誤差補正回路9によって行うことによ
り、画像動き予測回路5での次フィールドの動きベクト
ルの予測がより正確に行える。画像動き検出回路4で検
出され、小数部誤差補正回路9で補正された画像動き情
報は、動きベクトル算出回路1bにおいて前フィールド
での予測動きベクトル値と加算(もしくは減算)され前
フィールドに対する現フィールドの実際の動きベクトル
値として予測演算回路2bに送られる。予測演算回路2
bは動きベクトル算出回路1bからの入力から次フィー
ルドで予測される動きベクトルを計算し、これを動きベ
クトル積分回路3bに送る。動きベクトル積分回路3b
は動きベクトルの積分値を計算する(動き予測積分ベク
トル)。そして、この画像の動き予測積分ベクトルは光
電変換素子制御回路6に送られ、この画像動き予測積分
ベクトルに基づき光電変換素子制御回路5が光電変換素
子上の映像信号読み出しアドレスを制御し、映像信号の
動き成分を光電変換素子1上で補正する。
In the image motion detecting circuit 4, the photoelectric conversion element 1
The correlation operation between the video signal of the current field obtained in step (1) and the representative point signal stored in the representative point storage circuit 1a among the video signals of the previous field is performed by the correlation operation circuit 2a. Detect movement. However, the obtained motion information of the image is a difference between the motion of the image predicted by the motion prediction circuit in the previous field and the actual motion of the image in the current field. That is, if the motion predicted by the image motion prediction circuit 5 is the same as the actual motion, the motion of the image obtained by the image motion detection circuit 5 is 0. But,
The motion information of the image detected by the image motion detection circuit 4, the motion prediction vector predicted by the image motion prediction circuit 5, and the accuracy of the motion prediction integration vector obtained by the motion vector integration circuit 3b have an accuracy of one pixel or less. Although it is possible to read the video signal from the photoelectric conversion element 1 in practice, the video signal is read out on a line-by-line basis on the photoelectric conversion element 1. There is no problem if the obtained motion prediction integral vector value takes an integer value, but if it takes a value including a decimal number, that is, if correction of one pixel or less is also taken into account, the value is read with the fractional part truncated. When a correlation operation or the like is performed on the read video signals, an error due to the truncation of the decimal part is naturally included. This error will be specifically described with reference to FIG.
, The circles on the intersections of the solid-line lattices schematically represent the light-receiving portions on the photoelectric conversion element 1, and each light-receiving portion is v1, v2, v3,. The coordinates h1, h2, h3,... Are given from the left to represent the position. Frames A and B indicated by dotted lines are cutout frames including a decimal part determined by the motion vector prediction circuit 5, and the order is A first, then the next field B. First, when the frame A is designated by the image motion prediction circuit 5, it is actually impossible to read out a signal from between the light receiving units on the photoelectric conversion element 1, and in this case, the video signal Is started from the light receiving unit at (h4, v4). At this time, a difference represented by the vector u in FIG. 8 occurs between the reading frame on the photoelectric conversion element and the correction frame indicated by the motion integration vector. Subsequently, in the next field, in order to cut out the correction frame indicated by the frame B, reading of the video signal on the photoelectric conversion element is performed by (h
2, v1). At this time, there is a difference between the reading frame on the photoelectric conversion element and the correction frame indicated by the motion integration vector, which is represented by the vector v in FIG. At this time, since the motion detection circuit 4 detects the motion between the two fields by using the video signal from the photoelectric conversion element 1, the difference between the correction frame and the readout frame, and the vector u and the vector v are calculated as follows. Since it is not taken into account, the part corresponding to the difference between these two vectors is erroneously detected as a movement between two fields. By performing the correction for the erroneous detection by the decimal part error correction circuit 9, the motion vector of the next field in the image motion prediction circuit 5 can be more accurately predicted. The image motion information detected by the image motion detection circuit 4 and corrected by the decimal part error correction circuit 9 is added (or subtracted) to the predicted motion vector value in the previous field in the motion vector calculation circuit 1b, and is added to the current field with respect to the previous field. Is sent to the prediction operation circuit 2b as the actual motion vector value of Prediction calculation circuit 2
b calculates a motion vector predicted in the next field from the input from the motion vector calculation circuit 1b and sends it to the motion vector integration circuit 3b. Motion vector integration circuit 3b
Calculates the integral value of the motion vector (motion prediction integral vector). Then, the motion prediction integration vector of the image is sent to the photoelectric conversion element control circuit 6, and the photoelectric conversion element control circuit 5 controls the video signal read address on the photoelectric conversion element based on the image motion prediction integration vector, and Is corrected on the photoelectric conversion element 1.

【0039】尚、画像動き予測回路に第2の実施例で示
した積分ベクトル補正回路4bを追加すれば、第2の実
施例と同様の効果が実現できることは言うまでもない。
It is needless to say that the same effect as in the second embodiment can be realized by adding the integral vector correction circuit 4b shown in the second embodiment to the image motion prediction circuit.

【0040】以上のように本実施例によれば、画像動き
ベクトル検出回路4で検出された2フィールド間の画像
動き情報に含まれる光電変換素子1上での小数部切捨て
による誤差の補正を小数部誤差補正回路9により行うこ
とで、画像動き予測回路5での1フィールド先の画像の
動きの予測の精度をより向上させることが出来る。
As described above, according to this embodiment, the correction of the error due to the fractional part truncation on the photoelectric conversion element 1 included in the image motion information between the two fields detected by the image motion vector detection circuit 4 is a decimal. By using the partial error correction circuit 9, the accuracy of the prediction of the motion of the image one field ahead in the image motion prediction circuit 5 can be further improved.

【0041】[0041]

【発明の効果】以上詳細に説明したように、本発明によ
れば、映像信号に対し、画像の動き補正を行う場合に、
現フィールドより先の画像の動きを予測するための画像
動き予測回路を設けることにより、従来必要であった映
像信号を記憶しておくためのフィールドメモリ回路を削
減することができ、このため従来に比べ、安価な構成の
画像動き補正装置を提供することができる。
As described above in detail, according to the present invention, when image motion compensation is performed on a video signal,
By providing the image motion prediction circuit for predicting the motion of the image ahead of the current field, it is possible to reduce the field memory circuit for storing the video signal which has been required conventionally, and Compared to the cheaper configuration
An image motion compensation device can be provided.

【0042】また、映像信号に対し、画像の動き補正を
行う場合に、現フィールドより先の画像の動きを予測し
補正を行う場合の補正精度の向上を図ることができる。
Further, when the motion of an image is corrected for a video signal, it is possible to improve the correction accuracy when the motion of the image ahead of the current field is predicted and corrected.

【図面の簡単な説明】[Brief description of the drawings]

【図1】本発明の第1,第2の実施例における画像動き
補正装置の構成を示すブロック図
FIG. 1 is a block diagram illustrating a configuration of an image motion correction device according to first and second embodiments of the present invention.

【図2】図1の画像動き予測回路5の具体的な構成を示
すブロック図
FIG. 2 is a block diagram showing a specific configuration of an image motion prediction circuit 5 in FIG.

【図3】図2の予測演算回路2bの具体的な構成を示す
ブロック図
FIG. 3 is a block diagram showing a specific configuration of a prediction operation circuit 2b in FIG. 2;

【図4】図2の予測演算回路2bの具体的な構成を示す
ブロック図
FIG. 4 is a block diagram showing a specific configuration of a prediction operation circuit 2b in FIG. 2;

【図5】第2の実施例における画像動き予測回路5の具
体的な構成を示すブロック図
FIG. 5 is a block diagram showing a specific configuration of an image motion prediction circuit 5 according to a second embodiment.

【図6】同第2の実施例における積分ベクトル補正回路
4bの動作を説明するための説明図
FIG. 6 is an explanatory diagram for explaining the operation of the integral vector correction circuit 4b in the second embodiment.

【図7】本発明の第3の実施例における画像動き補正装
置の構成を示すブロック図
FIG. 7 is a block diagram illustrating a configuration of an image motion correction device according to a third embodiment of the present invention.

【図8】同第3の実施例における小数部誤差補正回路9
の動作を説明するための説明図
FIG. 8 is a decimal part error correction circuit 9 in the third embodiment.
Explanatory diagram for explaining the operation of

【図9】従来の画像動き補正装置の構成を示すブロック
FIG. 9 is a block diagram illustrating a configuration of a conventional image motion correction device.

【図10】図9の画像動き検出回路4の具体的な構成を
示すブロック図
10 is a block diagram showing a specific configuration of the image motion detection circuit 4 in FIG.

【符号の説明】[Explanation of symbols]

1 光電変換素子 2 アナログ信号処理回路 3 アナログ−ディジタル変換回路 4 画像動き検出回路 5 画像動き予測回路 6 光電変換素子制御回路 7 光電変換素子駆動回路 8 ディジタル信号処理回路 9 小数部誤差補正回路 1b 動きベクトル算出回路 2b 予測演算回路 3b 動きベクトル積分回路 4b 積分ベクトル補正回路 1c,1d,2d 遅延回路 2c,3c,3d,4d,5d 乗算回路 4c,6d,7d 加算器 REFERENCE SIGNS LIST 1 photoelectric conversion element 2 analog signal processing circuit 3 analog-digital conversion circuit 4 image motion detection circuit 5 image motion prediction circuit 6 photoelectric conversion element control circuit 7 photoelectric conversion element drive circuit 8 digital signal processing circuit 9 decimal part error correction circuit 1b motion Vector calculation circuit 2b Prediction calculation circuit 3b Motion vector integration circuit 4b Integration vector correction circuit 1c, 1d, 2d Delay circuit 2c, 3c, 3d, 4d, 5d Multiplication circuit 4c, 6d, 7d Adder

───────────────────────────────────────────────────── フロントページの続き (56)参考文献 特開 平2−205183(JP,A) 特開 平3−117278(JP,A) 特開 昭61−105178(JP,A) 特開 平4−216534(JP,A) ──────────────────────────────────────────────────続 き Continuation of front page (56) References JP-A-2-205183 (JP, A) JP-A-3-117278 (JP, A) JP-A-61-105178 (JP, A) JP-A-4- 216534 (JP, A)

Claims (5)

(57)【特許請求の範囲】(57) [Claims] 【請求項1】 光電変換素子から得られる入力画像の連
続するフィールド間、もしくはフレーム間の動きを検出
し、これを画像動き情報として出力する画像動き検出回
路と、 前記画像動き検出回路から得られた画像動き情報から現
フィールドもしくは現フレームより先の画像の動きを予
測する画像動き予測回路と、 前記画像動き予測回路の予測結果に基づき、前記光電変
換素子の信号読み出しアドレスの制御を行う光電変換素
子制御回路とを有し、 前記画像動き予測回路は、前記画像動き検出回路から得
られた画像動き情報と、前フィールドもしくは前フレー
ムでの画像動き予測ベクトルとから、現フィールドと前
フィールドの間、もしくは現フレームと前フレームの間
の動きベクトルを計算する動きベクトル算出回路と、前
記動きベクトル算出回路から得られた動きベクトルより
現フィールドと次フィールドの間、もしくは現フレーム
と次フレームの間の画像動き予測ベクトルを算出する予
測演算回路と、前記予測演算回路から得られた前記画像
動き予測ベクトルを積分し、この積分値を前記予測結果
として出力する動きベクトル積分回路とからなる画像動
き補正装置。
1. A sequence of input images obtained from a photoelectric conversion element.
An image motion detection circuit that detects motion between successive fields or between frames , and outputs the motion as image motion information; and an image earlier than the current field or current frame from the image motion information obtained from the image motion detection circuit. An image motion prediction circuit that predicts the motion of the image, and a photoelectric conversion element control circuit that controls a signal read address of the photoelectric conversion element based on a prediction result of the image motion prediction circuit. The image motion information obtained from the image motion detection circuit and the previous field or the previous frame.
From the image motion estimation vector in the arm, before and the current field
A motion vector calculation circuit for calculating a motion vector between fields or between a current frame and a previous frame; and a motion vector obtained from the motion vector calculation circuit.
Between current field and next field or current frame
And a prediction operation circuit that calculates an image motion prediction vector between the next frame and the next frame, and integrates the image motion prediction vector obtained from the prediction operation circuit, and calculates the integrated value as the prediction result.
An image motion compensating device comprising a motion vector integrating circuit for outputting as a motion vector.
【請求項2】 予測演算回路は、入力信号を一定期間遅
延する遅延回路と、前記入力信号に係数を乗じる第1の
乗算回路と、前記遅延回路の出力に係数を乗じる第2の
乗算回路と、前記第1,第2の乗算回路の出力を加算す
る加算器とからなる請求項1記載の画像動き補正装置。
2. A prediction operation circuit comprising: a delay circuit for delaying an input signal for a predetermined period; a first multiplication circuit for multiplying the input signal by a coefficient; and a second multiplication circuit for multiplying an output of the delay circuit by a coefficient. 2. The apparatus according to claim 1, further comprising an adder for adding outputs of said first and second multiplication circuits.
【請求項3】 予測演算回路は、入力信号を一定期間遅
延する第1の遅延回路と、前記入力信号に係数を乗じる
第1の乗算回路と、前記第1の遅延回路の出力に係数を
乗じる第2の乗算回路と、前記第1,第2の乗算回路の
出力を加算する第1の加算器と、前記第1の遅延回路の
出力を一定期間遅延する第2の遅延回路と、前記第2の
遅延回路の出力に係数を乗じる第3の乗算回路と、前記
第1の加算器の出力と前記第3の乗算回路の出力とを加
算する第2の加算器とからなる請求項1記載の画像動き
補正装置。
3. A prediction operation circuit comprising: a first delay circuit for delaying an input signal for a predetermined period; a first multiplication circuit for multiplying the input signal by a coefficient; and a multiplication of an output of the first delay circuit by a coefficient. A second multiplying circuit, a first adder that adds the outputs of the first and second multiplying circuits, a second delay circuit that delays the output of the first delay circuit for a certain period, 2. A third multiplication circuit for multiplying an output of the second delay circuit by a coefficient, and a second adder for adding an output of the first adder and an output of the third multiplication circuit. 3. Image motion compensation device.
【請求項4】 前記画像動き予測回路は、前記画像動き
検出回路から得られた画像動き情報と前フィールドもし
くは前フレームでの画像動き予測ベクトルから現フィー
ルドと前フィールドの間、もしくは現フレームと前フレ
ームの間の動きベクトルを計算する動きベクトル算出回
路と、前記動きベクトル算出回路から得られた動きベク
トルより現フィールドと次フィールドの間、もしくは現
フレームと次フレームの間の画像動き予測ベクトルを算
出する予測演算回路と、前記予測演算回路から得られた
画像動き予測ベクトルを積分し、この積分値を出力する
動きベクトル積分回路と、前記動きベクトル積分回路
出力の積分値を前記動きベクトル算出回路から得られた
動きベクトルにより補正する積分ベクトル補正回路とか
らなる請求項1記載の画像動き補正装置。
4. The image motion prediction circuit according to claim 1, wherein the image motion information obtained from the image motion detection circuit and a previous field.
Ku is between image motion predictive vector of the previous frame of the current and previous fields or the motion vector calculation circuit for calculating a motion vector between a current frame and the previous frame, the motion vector obtained from the motion vector calculation circuit,
From the current field to the next field, or
A prediction operation circuit that calculates an image motion prediction vector between a frame and a next frame; a motion vector integration circuit that integrates the image motion prediction vector obtained from the prediction operation circuit, and outputs the integrated value; of the integration circuit
2. The image motion compensating device according to claim 1, further comprising an integral vector compensating circuit for compensating an output integral value using a motion vector obtained from said motion vector computing circuit.
【請求項5】 光電変換素子から得られる入力画像の連
続するフィールド間、もしくはフレーム間の動きを検出
し、これを画像動き情報として出力する画像動き検出回
路と、前記光電変換素子からの信号の読み出しにより生じる動
き検出時の誤差を前記画像動き情報から 補正する小数部
誤差補正回路と、 前記小数部誤差補正回路により誤差補正された画像動き
情報から現フィールドもしくは現フレームより先の画像
動きを予測する画像動き予測回路と、 前記画像動き予測回路の予測結果に基づき、前記光電変
換素子の信号読み出しアドレスの制御を行う光電変換素
子制御回路とを有し、 前記小数部誤差補正回路は、前記画像動き予測回路の予
測結果から、前記光電変換素子からの信号の読み出し
より生じる動き検出時の誤差を求め、これを画像動き情
報から補正することを特徴とする画像動き補正装置。
5. A sequence of input images obtained from a photoelectric conversion element.
An image motion detection circuit for detecting motion between successive fields or between frames and outputting the motion as image motion information; and a motion generated by reading a signal from the photoelectric conversion element.
A partial error correction circuit for correcting an error at the time of detection from the image motion information; and an image for predicting a motion of an image ahead of a current field or a current frame from the image motion information corrected by the decimal error correction circuit. A motion prediction circuit; and a photoelectric conversion element control circuit that controls a signal read address of the photoelectric conversion element based on a prediction result of the image motion prediction circuit. pre-of circuit
From measurement results, the read signals from the photoelectric conversion element
The motion detection error caused by the motion
An image motion compensating device for compensating from a report .
JP3137417A 1991-06-10 1991-06-10 Image motion compensation device Expired - Fee Related JP2600520B2 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP3137417A JP2600520B2 (en) 1991-06-10 1991-06-10 Image motion compensation device
US07/894,741 US5321515A (en) 1991-06-10 1992-06-05 Image fluctuation correcting apparatus

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP3137417A JP2600520B2 (en) 1991-06-10 1991-06-10 Image motion compensation device

Publications (2)

Publication Number Publication Date
JPH04361484A JPH04361484A (en) 1992-12-15
JP2600520B2 true JP2600520B2 (en) 1997-04-16

Family

ID=15198146

Family Applications (1)

Application Number Title Priority Date Filing Date
JP3137417A Expired - Fee Related JP2600520B2 (en) 1991-06-10 1991-06-10 Image motion compensation device

Country Status (1)

Country Link
JP (1) JP2600520B2 (en)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100436593B1 (en) * 2001-09-18 2004-06-18 주식회사 아이캔텍 Global motion compensation apparatus and method for detecting a motion of an object
WO2006046387A2 (en) * 2004-10-04 2006-05-04 Matsushita Electric Ind Co Ltd Imaging device and hand-movement correction device
JP2008172606A (en) * 2007-01-12 2008-07-24 Sony Corp Solid-state imaging apparatus and camera system

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07118784B2 (en) * 1984-10-27 1995-12-18 ソニー株式会社 Method for detecting motion of television signals
JPH0748856B2 (en) * 1989-02-03 1995-05-24 松下電器産業株式会社 Still video equipment
JPH03117278A (en) * 1989-09-29 1991-05-20 Matsushita Electric Ind Co Ltd Image pickup device

Also Published As

Publication number Publication date
JPH04361484A (en) 1992-12-15

Similar Documents

Publication Publication Date Title
EP1578116B1 (en) Image processor
KR930002613B1 (en) Image motion vector detector
US7750942B2 (en) Image processing apparatus and method, recording medium, and program for correcting camera shake
US5838371A (en) Image pickup apparatus with interpolation and edge enhancement of pickup signal varying with zoom magnification
JP3103897B2 (en) Camera shake correction device and camera shake correction method
JP2507138B2 (en) Motion vector detection device and image shake correction device
KR100232113B1 (en) Motion vector detecting apparatus
US5313296A (en) Image information processor in which residual information is stored in a blank area of a field memory
US5321515A (en) Image fluctuation correcting apparatus
JP2600520B2 (en) Image motion compensation device
JP2885010B2 (en) Image motion compensation device
JP2003078808A (en) Device and method for detecting motion vector, device and method for correcting camera shake and imaging apparatus
JPH05176218A (en) Picture motion correcting device
JP3949740B2 (en) Electronic zoom processing apparatus and electronic zoom processing method
JPH0522647A (en) Image processor
JP3833076B2 (en) Video signal processing apparatus, video signal processing method, and video signal processing method program
JP3200859B2 (en) Camera shake correction circuit and method
JP2614574B2 (en) Motion vector detection circuit
JPH0846856A (en) Hand shake correcting device
JP3123341B2 (en) Image motion compensation device
KR950009663B1 (en) Apparatus for correcting a hand motion in a camcorder
JP3001897B2 (en) Image motion vector detection method and image motion vector detection device
JP5506374B2 (en) Imaging apparatus and control method thereof
JPH0946574A (en) Image motion correction device
JP3487047B2 (en) Image motion compensation device

Legal Events

Date Code Title Description
FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20080129

Year of fee payment: 11

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090129

Year of fee payment: 12

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090129

Year of fee payment: 12

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100129

Year of fee payment: 13

LAPS Cancellation because of no payment of annual fees