JP3302472B2 - Image blur correction apparatus and method - Google Patents

Image blur correction apparatus and method

Info

Publication number
JP3302472B2
JP3302472B2 JP28767593A JP28767593A JP3302472B2 JP 3302472 B2 JP3302472 B2 JP 3302472B2 JP 28767593 A JP28767593 A JP 28767593A JP 28767593 A JP28767593 A JP 28767593A JP 3302472 B2 JP3302472 B2 JP 3302472B2
Authority
JP
Japan
Prior art keywords
image
circuit
character
imposed
video signal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP28767593A
Other languages
Japanese (ja)
Other versions
JPH07123364A (en
Inventor
正慶 関根
俊明 近藤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Priority to JP28767593A priority Critical patent/JP3302472B2/en
Priority to US08/321,883 priority patent/US5614945A/en
Priority to EP94116430A priority patent/EP0649256B1/en
Priority to DE69435031T priority patent/DE69435031T2/en
Publication of JPH07123364A publication Critical patent/JPH07123364A/en
Priority to US08/796,681 priority patent/US6049354A/en
Application granted granted Critical
Publication of JP3302472B2 publication Critical patent/JP3302472B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Description

【発明の詳細な説明】DETAILED DESCRIPTION OF THE INVENTION

【0001】[0001]

【産業上の利用分野】本発明は画像振れ補正装置および
方法に関し、特に、撮影時におけるカメラの揺れなどに
よって生じる画像の振れを補正する機能を有するビデオ
再生機や画像受信機などに用いて好適なものである。
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to an image blur correcting device and
The method is particularly suitable for use in a video player, an image receiver, or the like having a function of correcting image shake caused by camera shake during shooting.

【0002】[0002]

【従来の技術】撮影時におけるカメラの揺れなどによっ
て生じる画像の振れを補正する機能(防振機能)を有す
るビデオ再生機の一例として、特開昭63−16637
0号公報に記載されたものがある。このビデオ再生機を
適用した画像振れ補正装置は、図9に示すように構成さ
れている。
2. Description of the Related Art Japanese Patent Application Laid-Open No. Sho 63-16637 discloses an example of a video player having a function (vibration-proof function) for correcting image shake caused by camera shake during shooting.
No. 0 publication. An image blur correction device to which this video player is applied is configured as shown in FIG.

【0003】図9において、1はビデオ再生機、2は画
像メモリ、3は動きベクトル検出回路、5は画像拡大回
路、30はマイクロコンピュータ(マイコン)である。
また、s1はビデオ再生機1により再生された映像信
号、s2は動きベクトル検出回路3により検出された動
きベクトル、s30は画像メモリ2に記憶されている映
像信号の読み出し位置を表すアドレス信号、s4は画像
拡大率を表すディジタルデータ、s5はこの画像振れ補
正装置から出力される映像信号である。
In FIG. 9, 1 is a video player, 2 is an image memory, 3 is a motion vector detection circuit, 5 is an image enlargement circuit, and 30 is a microcomputer.
Further, s1 is a video signal reproduced by the video reproducer 1, s2 is a motion vector detected by the motion vector detection circuit 3, s30 is an address signal indicating a reading position of the video signal stored in the image memory 2, and s4. Is digital data representing an image enlargement ratio, and s5 is a video signal output from the image blur correction device.

【0004】このように構成された画像振れ補正装置に
おいて、ビデオ再生機1により再生された映像信号s1
は、画像メモリ2に一時記憶される。一方、ビデオ再生
機1により再生された映像信号s1は、動きベクトル検
出回路3にも入力され、この動きベクトル検出回路3に
より、画像の動き速度の情報である動きベクトルs2が
映像信号s1から検出される。
[0004] In the image blur correction apparatus thus configured, the video signal s1 reproduced by the video reproducer 1 is used.
Are temporarily stored in the image memory 2. On the other hand, the video signal s1 reproduced by the video reproducer 1 is also input to the motion vector detection circuit 3, and the motion vector detection circuit 3 detects a motion vector s2, which is information on the motion speed of the image, from the video signal s1. Is done.

【0005】このようにして検出された動きベクトルs
2は、マイコン30に与えられる。そして、このマイコ
ン30により、画像メモリ2に記憶されている映像信号
の読み出し位置を表すアドレス信号s3が、上記動きベ
クトルs2に基づいて決定される。
The motion vector s thus detected
2 is given to the microcomputer 30. Then, the microcomputer 30 determines an address signal s3 indicating the read position of the video signal stored in the image memory 2 based on the motion vector s2.

【0006】画像メモリ2に記憶されている映像信号
は、このアドレス信号s3に応じて読み出される。これ
により、撮影時におけるカメラの揺れなどによって生じ
る画像の振れがなくなるように、画像が上下左右にシフ
トされるようにして画像メモリ2から映像信号が読み出
される。
[0006] The video signal stored in the image memory 2 is read out according to the address signal s3. As a result, the video signal is read from the image memory 2 so that the image is shifted up, down, left, and right so that the shake of the image caused by camera shake or the like at the time of shooting is eliminated.

【0007】次に、こうして読み出された映像信号は、
画像拡大回路5に入力される。この画像拡大回路5で
は、画像拡大率のデータs4に従って、画像メモリ2か
ら読み出された画像が通常の画面サイズになるように修
正される。そして、このように画面サイズの修正が施さ
れた映像信号s5が、次段に設けられている信号処理回
路に出力される。
Next, the video signal thus read out is:
It is input to the image enlargement circuit 5. In the image enlargement circuit 5, the image read from the image memory 2 is corrected according to the image enlargement ratio data s4 so as to have a normal screen size. Then, the video signal s5 having the screen size corrected as described above is output to the signal processing circuit provided in the next stage.

【0008】このように、ビデオ再生機1により再生さ
れた映像信号s1に対して一連の処理が施されることに
より、この再生された映像信号s1に画像の振れがあっ
ても、振れがない安定した映像信号s5がこの画像振れ
補正装置から出力されることになる。
As described above, a series of processing is performed on the video signal s1 reproduced by the video reproducing device 1, so that even if the reproduced video signal s1 has an image shake, there is no shake. A stable video signal s5 is output from the image blur correction device.

【0009】ところで、画面内の被写体を変形したり、
処理不能な被写体を除去したりする目的で、画面を複数
の演算領域(動きベクトル検出領域)に分割し、これら
複数の演算領域ごとに動きベクトルを検出することが一
般的に行われている。
By the way, the subject in the screen is deformed,
It is common practice to divide a screen into a plurality of calculation regions (motion vector detection regions) and detect a motion vector for each of the plurality of calculation regions in order to remove an unprocessable subject.

【0010】この場合には、動きベクトル検出回路3で
は、各演算領域ごとに動きベクトルが検出される。そし
て、マイコン30により、このように検出された動きベ
クトル量の平均値が求められ、またはメディアン処理な
どの手法により各動きベクトルが合成されて、画面全体
の振れ量が算出される。この画面全体の振れ量は、画像
位置のフレーム間またはフィールド間の差分値を表して
いる。
In this case, the motion vector detection circuit 3 detects a motion vector for each calculation area. Then, the microcomputer 30 calculates the average value of the motion vector amounts detected in this way, or combines the motion vectors by a method such as a median process to calculate the shake amount of the entire screen. The shake amount of the entire screen represents a difference value between frames or fields of the image position.

【0011】次に、この画面全体の振れ量に対して、積
分処理またはローパスフィルタによる低域通過処理が施
され、最終的な画像の振れ補正量、すなわち、画像メモ
リ2に記憶されている映像信号の読み出し位置を表すア
ドレス信号s30が決定される。なお、画像拡大率のデ
ータs4は、通常一定の値が使用される。
Next, the shake amount of the entire screen is subjected to integration processing or low-pass processing by a low-pass filter, and the final image shake correction amount, that is, the image stored in the image memory 2. An address signal s30 indicating a signal reading position is determined. Note that a constant value is generally used as the data s4 of the image enlargement ratio.

【0012】[0012]

【発明が解決しようとする課題】しかしながら、上述の
ような従来の画像振れ補正装置では、実際に放送されて
いるテレビ画像や、家庭用ビデオカメラで録画された画
像の振れを補正する際において、以下に述べるような問
題があった。
However, in the conventional image blur correction apparatus as described above, when correcting the blur of a television image actually broadcast or an image recorded by a home video camera, There were the following problems.

【0013】すなわち、実際に放送されているテレビ画
像には、放送時刻、放送タイトルや注釈、または日本語
訳などの文字情報がスーパーインポーズされていること
がある。また、家庭用ビデオカメラで録画された画像に
は、撮影時の日付や時刻、または撮影内容を表す文字情
報がスーパーインポーズされていることがある。
That is, a TV image that is actually being broadcast may be superimposed with character information such as a broadcast time, a broadcast title or a comment, or a Japanese translation. In addition, images recorded by a home video camera may have a superimposed character information indicating the date and time at the time of shooting or the details of shooting.

【0014】そして、このようにスーパーインポーズさ
れた文字情報を含んだ映像信号s1が動きベクトル検出
回路3に入力され、この映像信号s1が動きベクトルの
検出にそのまま用いられると、このスーパーインポーズ
された文字の動きもそのまま検出されてしまうというこ
とがあった。
Then, the video signal s1 including the superimposed character information is input to the motion vector detection circuit 3, and when the video signal s1 is used as it is for detecting the motion vector, the superimposed In some cases, the movement of a given character is also detected as it is.

【0015】例えば、日付や時刻などのように、その表
示位置が画面内において変化しない文字が存在する場合
には、その表示位置の周囲の動きベクトル検出領域や、
その表示位置を含む動きベクトル検出領域において、画
像の振れが実際の振れよりも小さいものとして検出され
てしまうことがあった。
For example, when there is a character whose display position does not change in the screen, such as a date and time, a motion vector detection area around the display position,
In the motion vector detection area including the display position, the image shake may be detected as being smaller than the actual shake.

【0016】また、撮影状況などを表すタイトルやテロ
ップのうち、画面中を流れるように移動する文字が存在
する場合には、その表示位置の周囲の動きベクトル検出
領域や、その表示位置を含む動きベクトル検出領域にお
いて、このような文字の移動速度が検出されてしまうこ
とがあった。
If there are characters moving in the screen among the titles and telops indicating the shooting conditions and the like, a motion vector detection area around the display position and a motion including the display position are displayed. In the vector detection area, such a moving speed of a character may be detected.

【0017】したがって、上述のような従来の画像振れ
補正装置を用いて、画像の振れ量を算出し、この算出し
た画像の振れ量に基づいて画像の振れ補正を行うと、実
際の撮影時に生じた画像の振れを補正する処理とは無関
係の処理を行うことになってしまい、却って見苦しい画
像になってしまうという問題があった。
Therefore, if the image shake amount is calculated using the above-described conventional image shake correction apparatus, and the image shake correction is performed based on the calculated image shake amount, the image shake may occur during actual photographing. Therefore, there is a problem in that a process irrelevant to the process of correcting the shake of the image is performed, and the image becomes rather unsightly.

【0018】本発明は、このような問題を解決するため
に成されたものであり、画像中にスーパーインポーズさ
れている文字の存在によって、画像の振れ補正の動作に
誤差が生じるのを防止し、良好な画像を常に得ることが
できるようにすることを目的としている。
The present invention has been made to solve such a problem, and prevents an error from occurring in an image blur correction operation due to the presence of a superimposed character in an image. It is another object of the present invention to always obtain a good image.

【0019】[0019]

【課題を解決するための手段】本発明の画像振れ補正装
置の一つは、画像の振れを補正する画像振れ補正装置で
あって、前記画像の中から文字がスーパーインポーズさ
れている領域を検出する検出手段を有し、前記検出手段
により検出された領域の数に応じて、前記画像の振れを
補正するための処理を行わないようにすることを特徴と
する。
According to the present invention, there is provided an image blur correcting apparatus according to the present invention.
One of the devices is an image shake correction device that corrects image shake.
And the characters in the image are superimposed
Detecting means for detecting an area in which
According to the number of areas detected by
It is characterized in that processing for correction is not performed.
I do.

【0020】また、本発明の画像振れ補正方法の一つ
は、画像の振れを補正する画像振れ補正方法であって、
前記画像の中から文字がスーパーインポーズされている
領域を検出する検出工程と、前記検出工程により検出さ
れた領域の数に応じて、前記画像の振れを補正するため
の処理を行わないようにする工程とを有することを特徴
とする。
Also, one of the image blur correction methods of the present invention is
Is an image shake correction method for correcting image shake,
Characters are superimposed in the image
A detection step of detecting a region; and
To correct the shake of the image according to the number of
And a step of not performing the processing.
And

【0021】また、本発明の画像振れ補正装置の一つ
は、画像の振れを補正する画像振れ補正装置であって、
前記画像の中から文字がスーパーインポーズされている
領域を検出する検出手段を有し、前記検出手段により検
出された領域の動きベクトルを用いることなく、前記画
像の振れを補正するための処理を行うことを特徴とす
る。
Further , one of the image blur correction apparatuses of the present invention
Is an image shake correction device for correcting image shake,
Characters are superimposed in the image
Detecting means for detecting the area;
Without using the motion vector of the region
A process for correcting image shake is performed.
You.

【0022】また、本発明の画像振れ補正方法の一つ
は、画像の振れを補正する画像振れ補正方法であって、
前記画像の中から文字がスーパーインポーズされている
領域を検出する検出工程と、前記検出工程により検出さ
れた領域の動きベクトルを用いることなく、前記画像の
振れを補正するための処理を行う工程とを有することを
特徴とする。
Also, one of the image blur correction methods of the present invention is
Is an image shake correction method for correcting image shake,
Characters are superimposed in the image
A detection step of detecting a region; and
Of the image without using the motion vector of the
Performing a process for correcting shake.
Features.

【0023】[0023]

【0024】[0024]

【0025】[0025]

【0026】[0026]

【実施例】以下、本発明の実施例を図面に基づいて説明
する。図1は、本発明の画像振れ補正装置の第1の実施
例の構成を示すブロック図である。なお、図1におい
て、図9に示した符号と同一の符号を付したものは、同
一の機能を有するものであるので、これについての詳細
な説明は省略する。
Embodiments of the present invention will be described below with reference to the drawings. FIG. 1 is a block diagram showing a configuration of a first embodiment of an image blur correction device according to the present invention. Note that, in FIG. 1, components denoted by the same reference numerals as those shown in FIG. 9 have the same functions, and thus detailed description thereof will be omitted.

【0027】本実施例の画像振れ補正装置は、図9に示
した従来の画像振れ補正装置の構成に対して、インポー
ズ文字検出回路6を付加したものである。そして、マイ
コン4が、このインポーズ文字検出回路6から出力され
るインポーズ文字の検出信号s6に基づいて、画像の読
み出し位置を表すアドレス信号s3を決定する。
The image blur correcting apparatus of the present embodiment is obtained by adding an imposed character detecting circuit 6 to the configuration of the conventional image blur correcting apparatus shown in FIG. Then, the microcomputer 4 determines an address signal s3 indicating the image reading position based on the detection signal s6 of the imposed character output from the imposed character detection circuit 6.

【0028】ここで、このインポーズ文字検出回路6の
原理について説明する。一般的に、ビデオカメラで撮影
される画像は、ビデオ信号の周波数帯域に比べてかなり
低い周波数領域に分布している。これに対して、上述の
インポーズ文字の画像は、一般的に、白色でエッジが切
り立った画像であり、画面中のある程度の狭い範囲に集
中しているため、突出した周波数スペクトルを有してい
る。
Here, the principle of the imposed character detection circuit 6 will be described. Generally, an image captured by a video camera is distributed in a frequency region that is considerably lower than a frequency band of a video signal. On the other hand, the above-described image of the imposed character is generally an image with white and sharp edges, and has a prominent frequency spectrum because it is concentrated in a certain narrow range in the screen. I have.

【0029】また、インポーズ文字が表示される位置に
明るい被写体があっても、このインポーズ文字が読みや
すくなるように、インポーズ文字の輝度を自動的に増す
ようにした機能や、インポーズ文字の周りの背景に黒色
の縁やぼかしをつけるようにした機能を持つスーパーイ
ンポーズ回路が実用化されている。
Further, even if there is a bright subject at the position where the imposed character is displayed, a function of automatically increasing the brightness of the imposed character so that the imposed character is easy to read, A superimpose circuit having a function of adding a black border or blur to the background around a character has been put into practical use.

【0030】したがって、ビデオカメラで撮影された映
像信号に対して、このようなスーパーインポーズ回路に
よる処理が施された場合には、上記ビデオカメラで撮影
された画像と、インポーズ文字の画像とでは、その周波
数成分の違いがより顕著になる。
Therefore, when the video signal photographed by the video camera is subjected to such processing by the superimposing circuit, the image photographed by the video camera and the image of the imposed character are compared with each other. Then, the difference of the frequency components becomes more remarkable.

【0031】このインポーズ文字検出回路6は、このよ
うな両画像の周波数成分の違いに着目して、ビデオ再生
機1により再生された映像信号s1からインポーズ文字
の成分のみを抽出するようにしたものである。
The imposed character detection circuit 6 pays attention to such a difference between the frequency components of the two images, and extracts only the component of the imposed character from the video signal s1 reproduced by the video reproducer 1. It was done.

【0032】次に、このインポーズ文字検出回路6の構
成の一例を、図2に示す。図2において、7は微分回
路、8はローパスフィルタ、9は2値化回路、10は孤
立点除去回路である。また、s1は上述のビデオ再生機
1により再生された映像信号、s7は微分回路7から出
力されるエッジが強調された映像信号、s8はローパス
フィルタ8から出力される輝度情報信号、s9は2値化
回路9から出力される2値の映像信号、s6は上述した
インポーズ文字の検出信号である。
Next, FIG. 2 shows an example of the configuration of the imposed character detection circuit 6. 2, reference numeral 7 denotes a differentiating circuit, 8 denotes a low-pass filter, 9 denotes a binarizing circuit, and 10 denotes an isolated point removing circuit. In addition, s1 is a video signal reproduced by the above-described video reproducer 1, s7 is a video signal output from the differentiating circuit 7 with emphasized edges, s8 is a luminance information signal output from the low-pass filter 8, and s9 is 2 A binary video signal s6 output from the digitizing circuit 9 is a detection signal of the above-described imposed character.

【0033】このような構成のインポーズ文字検出回路
6において、入力された映像信号s1は、微分回路7と
ローパスフィルタ8とに与えられる。そして、この映像
信号s1に基づいて、微分回路7によりエッジが強調さ
れた映像信号s7が生成される。また、ローパスフィル
タ8により、走査画素周辺の平均的な輝度情報を持つ輝
度情報信号s8が生成される。
In the imposed character detection circuit 6 having such a configuration, the input video signal s1 is given to the differentiating circuit 7 and the low-pass filter 8. Then, based on the video signal s1, a video signal s7 whose edge is enhanced by the differentiating circuit 7 is generated. Further, the low-pass filter 8 generates a luminance information signal s8 having average luminance information around the scanning pixel.

【0034】これらの映像信号s7と輝度情報信号s8
とは、2値化回路9にそれぞれ入力される。2値化回路
9では、ローパスフィルタ8から与えられる輝度情報信
号s8のレベルに応じて、スレショルドレベルが適当に
変化させられる。そして、微分回路7から与えられるエ
ッジの強調された映像信号s7が、このスレショルドレ
ベルによって2値化される。
The video signal s7 and the luminance information signal s8
Are input to the binarization circuit 9 respectively. In the binarization circuit 9, the threshold level is appropriately changed according to the level of the luminance information signal s8 given from the low-pass filter 8. Then, the video signal s7 whose edge is provided from the differentiating circuit 7 is binarized by the threshold level.

【0035】この2値化回路9により2値化処理が施さ
れた映像信号s9は、孤立点除去回路10に入力され、
突発的に発生するノイズが除去される。そして、画面中
のある程度の狭い範囲に上記映像信号s9が集中してい
る部分が検出され、このようにして検出された信号が、
インポーズ文字の検出信号s6として次段に設けられて
いるマイコン4に出力される。
The video signal s9 subjected to the binarization processing by the binarization circuit 9 is input to an isolated point removal circuit 10,
Noise generated suddenly is removed. Then, a portion where the video signal s9 is concentrated in a certain narrow range on the screen is detected, and the signal thus detected is
It is output to the microcomputer 4 provided at the next stage as the detection signal s6 of the imposed character.

【0036】以上のように本実施例のインポーズ文字検
出回路6によれば、ビデオ再生機1により再生された映
像信号s1に多重されているインポーズ文字の画面中で
の位置をほぼ正確に検出することができる。
As described above, according to the imposed character detection circuit 6 of the present embodiment, the position of the imposed character multiplexed on the video signal s1 reproduced by the video reproducing device 1 in the screen can be almost accurately determined. Can be detected.

【0037】次に、インポーズ文字検出回路6の他の実
施例の構成を、図3に示す。図3において、11は画像
メモリ、12は比較回路、13はローパスフィルタ、1
4はしきい値回路、15は論理積回路である。また、s
10は比較回路12から出力される比較信号、s11は
しきい値回路14から出力される2値信号である。
Next, the configuration of another embodiment of the imposed character detection circuit 6 is shown in FIG. In FIG. 3, 11 is an image memory, 12 is a comparison circuit, 13 is a low-pass filter, 1
4 is a threshold circuit, and 15 is an AND circuit. Also, s
Reference numeral 10 denotes a comparison signal output from the comparison circuit 12, and reference numeral s11 denotes a binary signal output from the threshold circuit 14.

【0038】このような構成のインポーズ文字検出回路
6において、入力された映像信号s1は、画像メモリ1
1と比較回路12の一方の入力端子とに与えられる。こ
の画像メモリ11は、1フレーム分の記憶容量を持つF
IFO(First In First Out)メモリであり、この画像
メモリ11からは、1フレーム前の映像信号が常に出力
される。
In the imposed character detection circuit 6 having such a configuration, the input video signal s1 is stored in the image memory 1
1 and one input terminal of the comparison circuit 12. This image memory 11 has a storage capacity of one frame.
This is an IFO (First In First Out) memory, and the image memory 11 always outputs a video signal of one frame before.

【0039】そして、このように画像メモリ11から出
力された映像信号は、比較回路12の他方の入力端子に
与えられる。これにより、比較回路12には、現フレー
ムの映像信号と前フレームの映像信号との2つの映像信
号が入力される。
The video signal output from the image memory 11 is supplied to the other input terminal of the comparison circuit 12. As a result, two video signals of the current frame and the previous frame are input to the comparison circuit 12.

【0040】比較回路12では、このようにして入力さ
れた2つの映像信号、すなわち、現フレームの映像信号
と前フレームの映像信号との比較が各画素ごとに行われ
る。そして、比較対象となった2つの画素信号が等しい
場合には、上記比較信号s10として「1」が論理積回
路15の一方の入力端子に与えられる。一方、2つの画
素信号が等しくない場合には、上記比較信号s10とし
て「0」が論理積回路15の一方の入力端子に与えられ
る。
The comparison circuit 12 compares the two video signals thus input, that is, the video signal of the current frame and the video signal of the previous frame, for each pixel. When the two pixel signals to be compared are equal, “1” is given to one input terminal of the AND circuit 15 as the comparison signal s10. On the other hand, when the two pixel signals are not equal, “0” is given to one input terminal of the AND circuit 15 as the comparison signal s10.

【0041】つまり、この比較回路12では、現フレー
ムと前フレームとの映像信号のフレーム間差が算出され
る。そして、このフレーム間差が全くない部分、すなわ
ち、画像の動きが全くない部分の画素では、上記比較信
号s10として「1」が出力される。一方、画像の動き
がある部分の画素では、上記比較信号s10として
「0」が出力される。
That is, the comparison circuit 12 calculates the difference between the frames of the video signal between the current frame and the previous frame. Then, "1" is output as the comparison signal s10 in a portion where there is no difference between the frames, that is, in a portion where there is no motion of the image. On the other hand, in a pixel in a portion where the image moves, “0” is output as the comparison signal s10.

【0042】一方、ビデオ再生機1により再生された映
像信号s1は、ローパスフィルタ13としきい値回路1
4の一方の入力端子とにも入力される。なお、このロー
パスフィルタ13と、しきい値回路14とにより、いわ
ゆる適応型2値化回路が構成されている。
On the other hand, the video signal s1 reproduced by the video reproducer 1 is supplied to the low-pass filter 13 and the threshold circuit 1
4 is also input to one of the input terminals. The low-pass filter 13 and the threshold circuit 14 form a so-called adaptive binarization circuit.

【0043】すなわち、上記ローパスフィルタ13によ
り、入力された映像信号s1から走査画素周辺の平均的
な輝度情報が算出される。このローパスフィルタ13に
より算出された輝度情報は、しきい値回路14の他方の
入力端子に与えられ、この輝度情報に応じて、しきい値
回路14におけるしきい値が適当に変化させられる。そ
して、しきい値回路14の一方の入力端子に入力された
映像信号s1が、このしきい値によって2値化される。
That is, the average luminance information around the scanning pixel is calculated from the input video signal s1 by the low-pass filter 13. The luminance information calculated by the low-pass filter 13 is given to the other input terminal of the threshold circuit 14, and the threshold in the threshold circuit 14 is appropriately changed according to the luminance information. Then, the video signal s1 input to one input terminal of the threshold circuit 14 is binarized by the threshold.

【0044】これにより、画像中の高輝度部分の画素で
は、論理積回路15の他方の入力端子に2値信号s11
として「1」が与えられ、それ以外の画素では「0」が
与えられる。そして、この論理積回路15によって、上
記比較信号s10と2値信号s11との論理積(AN
D)が計算され、その計算結果が、検出信号s6として
次段に設けられているマイコン4に出力される。
As a result, in the pixel of the high luminance portion in the image, the binary signal s11 is input to the other input terminal of the AND circuit 15.
Is given as “1”, and “0” is given to other pixels. The AND circuit 15 performs a logical product (AN) of the comparison signal s10 and the binary signal s11.
D) is calculated, and the calculation result is output to the microcomputer 4 provided in the next stage as the detection signal s6.

【0045】この「1」で表される検出信号s6は、画
像の動きがなく、かつ、高い輝度を持つ画素の位置を表
している。したがって、本実施例のインポーズ文字検出
回路6によれば、例えば、日付や時刻などのように、そ
の表示位置が画面内において変化しないインポーズ文字
をほぼ正確に検出することができる。
The detection signal s6 represented by "1" indicates the position of a pixel having no motion in the image and having high luminance. Therefore, according to the imposed character detection circuit 6 of the present embodiment, an imposed character whose display position does not change in the screen, such as a date and a time, can be detected almost accurately.

【0046】なお、画像の動き量を検出するのには、ま
ず、映像信号のフレーム間差を求め、その値を画像の複
雑さを表すパラメータ(例えば、画像勾配など)で除算
することによって行うのが一般的である。しかし、本実
施例のインポーズ文字検出回路6の場合、画像の厳密な
動きを検出することは特に重要なことではない。
The amount of motion of an image is detected by first obtaining a difference between frames of a video signal and dividing the value by a parameter (for example, image gradient or the like) representing the complexity of the image. It is common. However, in the case of the imposed character detection circuit 6 of the present embodiment, it is not particularly important to detect a precise movement of an image.

【0047】そこで、本実施例では、上述のフレーム間
差の計算のみを行い、画像勾配の演算や、この画像勾配
による除算は行わないようにしている。これにより、勾
配演算回路や除算回路を省略することができ、回路規模
を小さくすることができる。なお、本実施例の場合も、
上述のような一般的な手法によって画像の動き量を検出
するようにしてもよいことは言うまでもない。
Therefore, in this embodiment, only the above-described calculation of the difference between frames is performed, and the calculation of the image gradient and the division by the image gradient are not performed. Thus, the gradient calculation circuit and the division circuit can be omitted, and the circuit scale can be reduced. In the case of this embodiment,
It goes without saying that the motion amount of the image may be detected by the above-described general method.

【0048】また、例えば、再生された映像信号s1が
8ビットのディジタルデータである場合、比較回路12
による比較演算は、この8ビットのデータの全てを用い
て行う必要は必ずしもない。例えば、上位3ビットない
しは4ビット程度のデータのみを用いて比較演算を行え
ば十分なことが多い。
For example, when the reproduced video signal s1 is 8-bit digital data, the comparison circuit 12
Does not necessarily need to be performed using all of the 8-bit data. For example, it is often sufficient to perform a comparison operation using only upper 3 or 4 bits of data.

【0049】さらに、上述の説明では、画像の動きを全
てフレーム単位で検出する場合を例にとって説明した
が、フィールド単位で検出するようにしても差し支えな
い。この場合には、画像メモリ11の記憶容量は、フレ
ーム単位で画像の動きを検出する場合の半分で済むこと
になる。
Further, in the above description, a case has been described as an example where all the motions of an image are detected in units of frames. However, detection may be performed in units of fields. In this case, the storage capacity of the image memory 11 is half that of the case where the motion of the image is detected on a frame basis.

【0050】次に、インポーズ文字検出回路6の更に他
の実施例の構成を、図4に示す。図4において、16は
加算回路、17は乗算回路、18は画像メモリ、19は
微分回路、20は2値化回路である。また、s12は前
フレームの映像信号に所定の係数が乗じられた映像信
号、s13は加算回路16から出力される映像信号であ
る。
Next, the configuration of still another embodiment of the imposed character detection circuit 6 is shown in FIG. In FIG. 4, reference numeral 16 denotes an addition circuit, 17 denotes a multiplication circuit, 18 denotes an image memory, 19 denotes a differentiation circuit, and 20 denotes a binarization circuit. Further, s12 is a video signal obtained by multiplying the video signal of the previous frame by a predetermined coefficient, and s13 is a video signal output from the addition circuit 16.

【0051】ここで、上述の加算回路16、乗算回路1
7および画像メモリ18により構成される回路部分は、
画像の動き量を検出する回路部分である。また、上述の
微分回路19および2値化回路20により構成される回
路部分は、画像のエッジ情報を検出する回路部分であ
る。
Here, the above-described addition circuit 16 and multiplication circuit 1
7 and the image memory 18
This is a circuit part for detecting the amount of motion of the image. Further, a circuit portion configured by the above-described differentiating circuit 19 and the binarizing circuit 20 is a circuit portion that detects edge information of an image.

【0052】このような構成のインポーズ文字検出回路
6において、入力された映像信号s1は、加算回路16
の一方の入力端子に与えられる。また、この加算回路1
6から出力される映像信号s13は、乗算回路17と画
像メモリ18とによる所定の処理が施された後、加算回
路16の他方の入力端子に与えられる。
In the imposed character detection circuit 6 having such a configuration, the input video signal s1 is added to the addition circuit 16
To one of the input terminals. Also, this addition circuit 1
The video signal s13 output from 6 is subjected to predetermined processing by the multiplication circuit 17 and the image memory 18, and then applied to the other input terminal of the addition circuit 16.

【0053】上述の乗算回路17は、0以上1以下の係
数を有している。そして、この乗算回路17により、加
算回路16から出力される映像信号s13に対して上記
係数が乗ぜられる。次いで、乗算回路17により上記係
数が乗ぜられた映像信号は、画像メモリ18に与えられ
て一時記憶される。この画像メモリ18は、上述した画
像メモリ11と同様に、1フレーム分の記憶容量を持つ
FIFOメモリであり、この画像メモリ11からは、1
フレーム前の映像信号が常に出力される。
The above-described multiplication circuit 17 has a coefficient of 0 or more and 1 or less. Then, the multiplication circuit 17 multiplies the video signal s13 output from the addition circuit 16 by the above coefficient. Next, the video signal multiplied by the coefficient by the multiplication circuit 17 is given to the image memory 18 and temporarily stored. The image memory 18 is a FIFO memory having a storage capacity for one frame, like the image memory 11 described above.
The video signal before the frame is always output.

【0054】したがって、加算回路16では、一方の入
力端子に与えられる現フレームの再生映像信号s1と、
他方の入力端子に与えられる前フレームの映像信号に上
記係数が乗じられた映像信号s12とが加算される。そ
して、この加算の結果得られれる映像信号s13が、微
分回路19に与えられる。
Therefore, in the adder circuit 16, the reproduced video signal s1 of the current frame supplied to one input terminal and
A video signal s12 obtained by multiplying the video signal of the previous frame supplied to the other input terminal by the above coefficient is added. Then, the video signal s13 obtained as a result of the addition is provided to the differentiating circuit 19.

【0055】以上のように、これらの加算回路16、乗
算回路17および画像メモリ18は、映像信号の時間的
ローパスフィルタを形成している。そして、このような
時間的ローパスフィルタは、入力される映像信号s1の
うち、輝度が高く、かつ、画像の動きが小さい部分の画
素信号ほど大きな値を出力するような特性を有してい
る。また、わずかにでも動きがある画像に対しては、そ
の出力レベルが下がり、画像のエッジが極端に鈍るとい
う特性をも有している。
As described above, the adding circuit 16, the multiplying circuit 17, and the image memory 18 form a temporal low-pass filter of the video signal. Such a temporal low-pass filter has such a characteristic that, of the input video signal s1, a pixel signal of a portion having a higher luminance and a smaller image movement outputs a larger value. In addition, the output level of an image having a slight movement is reduced, and the edge of the image is extremely dull.

【0056】したがって、この時間的ローパスフィルタ
から出力される映像信号s13の中に急峻なエッジ特性
を有する部分があれば、その部分は、本来エッジが急峻
で、画像の動きがなく、かつ、高い輝度を持つ画素であ
ると推測することができる。そこで、次段の微分回路1
9と2値化回路20とにより構成される回路部分を、上
述のような急峻なエッジ特性を有する信号成分を検出
し、この検出の結果に応じて上記映像信号s13を符号
化することができるような構成にしている。
Therefore, if there is a portion having a steep edge characteristic in the video signal s13 output from the temporal low-pass filter, the portion is originally steep, has no image movement, and is high. It can be inferred that the pixel has brightness. Therefore, the next-stage differentiation circuit 1
The circuit portion constituted by the binarization circuit 9 and the binarization circuit 20 detects a signal component having the above-described steep edge characteristic, and can encode the video signal s13 according to the result of the detection. It has such a configuration.

【0057】すなわち、上述の加算回路16から出力さ
れた映像信号s13は、微分回路19に与えられ、この
微分回路19によって、映像信号s13のエッジ勾配が
抽出される。次いで、2値化回路20により、上記エッ
ジ勾配の信号強度レベルに応じて、映像信号s13が2
値化される。そして、このようにして得られた2値信号
が、インポーズ文字の検出信号s6として次段に設けら
れているマイコン4に出力される。
That is, the video signal s13 output from the above-mentioned addition circuit 16 is supplied to a differentiating circuit 19, which extracts an edge gradient of the video signal s13. Next, the binarizing circuit 20 converts the video signal s13 to 2 in accordance with the signal strength level of the edge gradient.
Valued. Then, the binary signal thus obtained is output to the microcomputer 4 provided at the next stage as a detection signal s6 of the imposed character.

【0058】このように、本実施例のインポーズ文字検
出回路6によれば、入力される映像信号s1の中から、
画像の動きがなく、高輝度で、かつ、エッジが急峻な成
分を抽出することができる。これにより、例えば、日付
や時刻などのように、その表示位置が画面内において変
化しないインポーズ文字をほぼ正確に検出することがで
きる。
As described above, according to the imposed character detection circuit 6 of this embodiment, from the input video signal s1,
It is possible to extract a component having no image movement, high luminance, and a sharp edge. As a result, for example, an imposed character whose display position does not change in the screen, such as a date and a time, can be detected almost accurately.

【0059】なお、本実施例においても、映像信号s1
の全ビット幅を用いて画像の動きを検出する必要は必ず
しもない。また、画像の動きをフレーム単位で検出する
必要は必ずしもなく、フィールド単位で検出するように
してもよい。このようにすることにより、回路規模を格
段に小さくすることができる。
Note that also in this embodiment, the video signal s1
It is not always necessary to detect the motion of an image using the entire bit width of. Further, it is not always necessary to detect the motion of an image in units of a frame, but may be detected in units of a field. By doing so, the circuit scale can be significantly reduced.

【0060】以上説明したように、図2、図3または図
4に示したインポーズ文字検出回路6によれば、簡単な
回路構成で映像信号からインポーズ文字の信号成分のみ
をほぼ正確に抽出することができる。
As described above, according to the imposed character detection circuit 6 shown in FIG. 2, FIG. 3, or FIG. 4, only the signal component of the imposed character is almost accurately extracted from the video signal with a simple circuit configuration. can do.

【0061】次に、図1に示した第1の実施例による画
像振れ補正装置全体の動作内容を、図5のフローチャー
トを用いて説明する。なお、ここでは、画像拡大回路5
に与えられる画像の拡大率のデータs4は一定であると
する。
Next, the operation of the entire image blur correction apparatus according to the first embodiment shown in FIG. 1 will be described with reference to the flowchart of FIG. Here, the image enlargement circuit 5
Is assumed to be constant.

【0062】まず、図5のステップP1で、動きベクト
ル検出回路3により、画像中のどの動きベクトル領域か
ら動きベクトルを検出するかが指定される。そして、ス
テップP2で、このようにして指定された領域の動きベ
クトルs2が検出される。
First, in step P1 of FIG. 5, the motion vector detection circuit 3 specifies from which motion vector region in the image a motion vector is to be detected. Then, in step P2, the motion vector s2 of the area designated in this way is detected.

【0063】また、ステップP3では、ステップP1に
て指定された領域内において、ビデオ再生機1により再
生された映像信号s1にインポーズ文字が多重されてい
るか否かが検出される。このインポーズ文字の検出は、
上述したように、図2、図3または図4に示したような
インポーズ文字検出回路6によって行われる。
In step P3, it is detected whether or not an imposed character is multiplexed on the video signal s1 reproduced by the video reproducing device 1 in the area specified in step P1. The detection of this imposed character is
As described above, this is performed by the imposed character detection circuit 6 as shown in FIG. 2, FIG. 3, or FIG.

【0064】次いで、ステップP4で、このインポーズ
文字検出回路6により検出されたインポーズ文字の検出
信号s6が、ステップP2にて動きベクトル検出回路3
により検出された動きベクトルs2とともに、マイコン
4に取り込まれる。
Next, in step P4, the detection signal s6 of the imposed character detected by the imposed character detection circuit 6 is applied to the motion vector detection circuit 3 in step P2.
Are taken into the microcomputer 4 together with the motion vector s2 detected by

【0065】さらに、画像中に複数の動きベクトル検出
領域がある場合には、ステップP5の分岐からステップ
P1に戻り、ステップP1〜P5の処理が繰り返され
る。これにより、動きベクトルs2とインポーズ文字の
検出信号s6とが、必要な領域分だけマイコン4に取り
込まれる。
Further, when there are a plurality of motion vector detection areas in the image, the process returns from the branch of step P5 to step P1, and the processes of steps P1 to P5 are repeated. As a result, the microcomputer 4 receives the motion vector s2 and the detection signal s6 of the imposed character for a required area.

【0066】そして、このように、必要な領域分だけ動
きベクトルs2とインポーズ文字の検出信号s6とがマ
イコン4に取り込まれると、このマイコン4によって、
次のステップP6〜P10において画像の振れ補正の処
理が行われる。
When the motion vector s2 and the detection signal s6 of the imposed character for the required area are taken into the microcomputer 4, the microcomputer 4
In the next steps P6 to P10, image blur correction processing is performed.

【0067】すなわち、ステップP6では、インポーズ
文字が検出された領域の動きベクトルが、ステップP7
以降の処理に用いられないように指示される。この指示
は、例えば、各領域ごとの動きベクトルに対してインバ
リッドフラグを立てることによって行われる。
That is, in step P6, the motion vector of the area where the imposed character is detected is calculated in step P7.
It is instructed not to be used for the subsequent processing. This instruction is performed, for example, by setting an invalid flag for a motion vector for each region.

【0068】次に、ステップP7で、マイコン4に取り
込まれた動きベクトルの変動値や画像中での揃い具合に
基づいて、画像の振れ補正をするべき領域が判別され
る。この判別の際には、インバリッドフラグが立てられ
ていない領域、すなわち、インポーズ文字が検出されて
いない領域の動きベクトルのみが用いられる。
Next, in step P7, an area to be subjected to image shake correction is determined based on the fluctuation value of the motion vector taken into the microcomputer 4 and the degree of uniformity in the image. At the time of this determination, only the motion vector of the area where the invalid flag is not set, that is, the area where the imposed character is not detected is used.

【0069】次いで、ステップP8では、インバリッド
フラグが立てられていない領域の動きベクトルの平均
値、すなわち、画面全体における画像の振れ量が求めら
れる。次のステップP9では、ステップP8にて求めら
れた動きベクトルの平均値に対して、積分演算が施さ
れ、最終的な画像の振れ補正量が算出される。
Next, in step P8, the average value of the motion vectors in the region where the invalid flag is not set, that is, the image shake amount in the entire screen is obtained. In the next step P9, an integration operation is performed on the average value of the motion vectors obtained in step P8, and a final image blur correction amount is calculated.

【0070】さらに、ステップP10で、ステップP9
にて算出された画像の振れ補正量に基づいて、画像メモ
リ2に記憶されている映像信号の読み出し位置を表すア
ドレス信号s3が決定され、このアドレス信号s3が画
像メモリ2に出力される。画像メモリ2からは、このア
ドレス信号s3により指定された位置の映像信号が、次
段の画像拡大回路5に出力される。そして、以上のよう
なステップP1〜P10の処理が、各フィールドごとに
繰り返される。
Further, in Step P10, Step P9
The address signal s3 indicating the read position of the video signal stored in the image memory 2 is determined based on the image shake correction amount calculated in the step (1), and the address signal s3 is output to the image memory 2. From the image memory 2, the video signal at the position specified by the address signal s3 is output to the image enlargement circuit 5 at the next stage. Then, the processing of steps P1 to P10 as described above is repeated for each field.

【0071】ここで、上述のステップP6における処理
は、動きベクトル検出回路3により検出された動きベク
トルの中から、インポーズ文字を含む領域の動きベクト
ルを除去する処理と等価である。したがって、ステップ
P7以降の処理では、この除去された動きベクトル以外
の動きベクトルのみが用いられることとなり、ステップ
P10で決定されるアドレス信号s3は、日付や時刻な
どのような文字の動き量の影響を受けていない値とな
る。
Here, the processing in step P6 described above is equivalent to the processing for removing the motion vector of the area including the imposed character from the motion vectors detected by the motion vector detection circuit 3. Therefore, in the processing after step P7, only the motion vector other than the removed motion vector is used, and the address signal s3 determined in step P10 is affected by the amount of character motion such as date and time. The value has not been received.

【0072】以上のように、この第1の実施例による画
像振れ補正装置は、画面中におけるインポーズ文字の位
置を検出するインポーズ文字検出回路6を設け、このイ
ンポーズ文字検出回路6により検出されたインポーズ文
字を含む領域の動きベクトルを除外して、画像の振れ量
を算出するようにしたところに特徴がある。
As described above, the image blur correcting apparatus according to the first embodiment is provided with the imposed character detecting circuit 6 for detecting the position of the imposed character on the screen. The feature is that the motion amount of the image is calculated by excluding the motion vector of the area including the imposed character.

【0073】そして、画像振れ補正装置をこのように構
成することにより、日付や時刻などの文字が映像信号中
に多重されていても、撮影時における画像の振れ量のみ
を正しく検出することができ、誤動作がない画像の振れ
補正を行うことができる。
By configuring the image blur correction device in this way, even if characters such as date and time are multiplexed in the video signal, only the amount of image blur at the time of shooting can be correctly detected. In addition, it is possible to perform image shake correction without malfunction.

【0074】次に、本発明による画像振れ補正装置の第
2の実施例について説明する。この第2の実施例による
画像振れ補正装置は、以下に述べるような事情を考慮し
て成されたものである。
Next, a description will be given of a second embodiment of the image blur correction apparatus according to the present invention. The image blur correction apparatus according to the second embodiment has been made in consideration of the following circumstances.

【0075】すなわち、実際に放送されているテレビ画
像や、家庭用ビデオカメラで撮影された画像中に多重さ
れているインポーズ文字のうち、最も一般的で、使用頻
度が高いものは、日付や時刻の文字である。そして、こ
れらの文字は、通常、画面の右下もしくは左下などのよ
うに、主に画面の周辺部に多重されている。
That is, of the imposed characters multiplexed in a television image actually broadcast or an image captured by a home video camera, the most common and frequently used characters are date and time. The time character. These characters are usually multiplexed mainly on the periphery of the screen, such as the lower right or lower left of the screen.

【0076】一方、上述の第1の実施例のところで述べ
たようなインポーズ文字検出回路6は、ある程度の検出
誤差を常に含んでいる。したがって、撮影画像の種類に
よっては、画像の振れ補正の動作が不安定になってしま
う。そこで、この第2の実施例では、図5に示したフロ
ーチャート中のステップP8の処理で以下のような演算
を行うことにより、上述のような不都合を防止するよう
にしている。
On the other hand, the imposed character detection circuit 6 as described in the first embodiment always contains a certain detection error. Therefore, the operation of image shake correction becomes unstable depending on the type of a captured image. Therefore, in the second embodiment, the above-described inconvenience is prevented by performing the following calculation in the process of step P8 in the flowchart shown in FIG.

【0077】ここで、本実施例の原理を説明するための
テレビ画面の例を、図6に示す。この図6のテレビ画面
には、縦6行、横10列の合計60個の動きベクトル検
出領域が示されている。以下、これらの動きベクトル検
出領域の位置を、行番号をi(i=1〜6)、列番号を
j(j=1〜10)で表して、(i,j)で示すことに
する。
FIG. 6 shows an example of a television screen for explaining the principle of the present embodiment. The TV screen of FIG. 6 shows a total of 60 motion vector detection areas of 6 rows and 10 columns. Hereinafter, the positions of these motion vector detection areas will be indicated by (i, j), where the row number is i (i = 1 to 6) and the column number is j (j = 1 to 10).

【0078】また、図6において、21はテレビ画像の
有効画素領域、22は画面中における60個の検出領域
のうち、最も外側にある第1の検出領域、23は第1の
検出領域22のすぐ内側にある第2の検出領域、24は
最も内側にある第3の検出領域である。次いで、25は
画像中に多重されている日付文字、26は時刻文字、2
7は本来はインポーズ文字の領域ではないが、インポー
ズ文字の領域として誤って検出された誤検出領域である
とする。
In FIG. 6, reference numeral 21 denotes an effective pixel area of a television image, 22 denotes an outermost first detection area among the 60 detection areas in the screen, and 23 denotes a first detection area 22. A second detection area 24 immediately inside is a third detection area innermost. Next, 25 is a date character multiplexed in the image, 26 is a time character, 2
7 is not a region of an imposed character, but is an erroneously detected region erroneously detected as a region of an imposed character.

【0079】ところで、上述の第1の検出領域22、第
2の検出領域23、および第3の検出領域24には、各
領域内にインポーズ文字が多重されている確率に応じ
て、例えば、1.0 ,0.9 ,0.1 のように画面の外側にい
くに従って大きくなるような重み係数を設定している。
By the way, the first detection area 22, the second detection area 23, and the third detection area 24 are, for example, in accordance with the probability that an imposed character is multiplexed in each area. Weighting factors such as 1.0, 0.9, and 0.1 are set so as to increase as they go outside the screen.

【0080】そこで、本実施例では、図5に示したフロ
ーチャートのステップP8において、このように設定し
た重み係数を利用して、次の(1式)で示すような式に
よって各検出領域での動きベクトルの平均化演算を行う
ようにしている。
Therefore, in the present embodiment, in step P8 of the flowchart shown in FIG. 5, the weighting factor set in this manner is used to calculate each detection area by the following equation (1). The motion vector averaging operation is performed.

【0081】[0081]

【数1】 (Equation 1)

【0082】ここで、MVaは平均化の演算結果、MV
は各検出領域の動きベクトル値、Tは各検出領域でイン
ポーズ文字が検出されたか否かを表すインバリッドフラ
グ(0または1)、Wは第1の検出領域22〜第3の検
出領域24に設定されている重み係数をそれぞれ示して
いる。
Here, MVa is the calculation result of averaging, and MVa
Is a motion vector value of each detection area, T is an invalid flag (0 or 1) indicating whether an imposed character is detected in each detection area, and W is a first detection area 22 to a third detection area 24. Are shown, respectively.

【0083】このような(1式)に示した平均化演算に
よれば、日付文字25が多重されている(5,10)の
検出領域では、インバリッドフラグT(=1)に 1.0の
重み係数Wが乗じられ、その結果、この検出領域の動き
ベクトルは平均化演算に使用されないことになる。時刻
文字26が多重されている(6,10)の検出領域につ
いても同様に、インバリッドフラグT(=1)に 1.0の
重み係数Wが乗じられ、この検出領域の動きベクトルは
平均化演算に使用されないことになる。
According to the averaging operation shown in the above (Equation 1), in the (5, 10) detection area where the date character 25 is multiplexed, the invalid flag T (= 1) is assigned a weight of 1.0. The coefficient W is multiplied, so that the motion vector of this detection area is not used for the averaging operation. Similarly, the invalid flag T (= 1) is multiplied by a weighting factor W of 1.0 for the detection area of (6, 10) in which the time character 26 is multiplexed, and the motion vector of this detection area is subjected to the averaging operation. Will not be used.

【0084】一方、誤検出領域27を含む(4,5)の
検出領域では、インバリッドフラグT(=1)に 0.1の
重み係数Wが乗じられ、その結果、動きベクトルは 0.9
の重みで評価されることになる。つまり、この(4,
5)の検出領域では、インポーズ文字が誤って検出され
たにもかかわらず、その動きベクトルがほぼ通常通りに
平均化演算に使用されることになる。
On the other hand, in the (4, 5) detection area including the erroneous detection area 27, the invalid flag T (= 1) is multiplied by the weight coefficient W of 0.1, and as a result, the motion vector becomes 0.9.
Will be evaluated. In other words, this (4,
In the detection area 5), even though an imposed character is erroneously detected, its motion vector is used for the averaging operation almost as usual.

【0085】以上のように第2の実施例によれば、各検
出領域に設定されている重み係数によって、インポーズ
文字検出回路6により検出された動きベクトルが誤検出
によるものかどうかを判別することができる。したがっ
て、インポーズ文字検出回路6にある程度の検出誤差が
あっても、画像の振れ補正の動作が不安定にならないよ
うにすることができる。
As described above, according to the second embodiment, it is determined whether or not the motion vector detected by the imposed character detection circuit 6 is due to erroneous detection based on the weighting factor set for each detection area. be able to. Therefore, even if the imposed character detection circuit 6 has a certain detection error, it is possible to prevent the image blur correction operation from becoming unstable.

【0086】なお、このような第2の実施例の手法を応
用して、画面中の最も外側の第1の検出領域22におい
て、図2に示した2値化回路9のスレショルドレベルが
低くなるように設定する。あるいは、上記第1の検出領
域22において、孤立点除去回路10による孤立点の除
去能力が低くなるように設定する。このようにすること
によって、インポーズ文字検出回路6において、小さい
インポーズ文字や輝度レベルが低いインポーズ文字を検
出しやすいようにすることも有用である。
By applying the technique of the second embodiment, the threshold level of the binarization circuit 9 shown in FIG. 2 is lowered in the outermost first detection area 22 in the screen. Set as follows. Alternatively, the first detection area 22 is set so that the isolated point removal capability of the isolated point removal circuit 10 is reduced. By doing so, it is also useful that the imposed character detection circuit 6 can easily detect a small imposed character or an imposed character having a low luminance level.

【0087】次に、本発明による画像振れ補正装置の第
3の実施例について説明する。上述したように、インポ
ーズ文字検出回路6は、通常の被写体であってもインポ
ーズ文字であると誤って検出し、インポーズ文字の検出
信号s6を発生することが稀にある。そして、このよう
に誤検出された検出信号s6を画像の振れ補正の処理に
そのまま用いると、画像の振れを補正する動作(防振動
作)が不安定になってしまう。
Next, a description will be given of a third embodiment of the image blur correction apparatus according to the present invention. As described above, the imposed character detection circuit 6 erroneously detects that even a normal subject is an imposed character, and rarely generates the imposed character detection signal s6. If the detection signal s6 erroneously detected as described above is used as it is in the image blur correction process, the operation of correcting the image blur (vibration-proof operation) becomes unstable.

【0088】そこで、本実施例の画像振れ補正装置は、
このような不都合を防止することができるように構成さ
れている。具体的には、本実施例の画像振れ補正装置
は、図7に示すように構成されている。
Therefore, the image blur correction device of this embodiment is
The configuration is such that such inconvenience can be prevented. Specifically, the image blur correction apparatus of the present embodiment is configured as shown in FIG.

【0089】図7において、マイコン28は、インポー
ズ文字検出回路6により検出されたインポーズ文字の検
出信号s6が正しいものであるか否かを判定し、この判
定の結果に基づいて、防振動作を続行すべきか否かを決
定する。
In FIG. 7, the microcomputer 28 determines whether or not the imposed character detection signal s6 detected by the imposed character detection circuit 6 is correct. Decide whether to continue the crop.

【0090】以下に、本実施例による画像振れ補正装置
の動作内容を、図8のフローチャートを参照しながら説
明する。図8において、ステップP1〜P5の処理は、
図5に示したフローチャートのステップP1〜P5の処
理と同じである。そして、このステップP1〜P5の処
理が終了すると、マイコン28は、以下に述べるような
ステップP6〜P10の処理を行う。
The operation of the image blur correction apparatus according to the present embodiment will be described below with reference to the flowchart of FIG. In FIG. 8, the processing of steps P1 to P5 is as follows.
This is the same as the processing of steps P1 to P5 in the flowchart shown in FIG. When the processing in steps P1 to P5 is completed, the microcomputer 28 performs the processing in steps P6 to P10 described below.

【0091】すなわち、マイコン28は、まず、ステッ
プP6で、動きベクトル検出回路3からインポーズ文字
の検出信号s6が発生されたか否か、すなわち、インポ
ーズ文字検出回路6によりインポーズ文字が検出された
か否かを判断する。この時点で、インポーズ文字が全く
検出されていないと判断した場合は、ステップP9に進
み、防振動作を続行する。
That is, the microcomputer 28 first determines whether or not the motion vector detection circuit 3 has generated the imposed character detection signal s6 in step P6, that is, the imposed character detection circuit 6 detects the imposed character. Is determined. At this point, if it is determined that no imposed characters have been detected, the process proceeds to step P9, and the anti-shake operation is continued.

【0092】一方、インポーズ文字が検出されたと判断
した場合は、ステップP7に進み、インポーズ文字が検
出された領域がn個以上あるか否かを判断する。なお、
例えば、画像中に60個の動きベクトル検出領域がある
場合には、nは10程度の数を用いる。
On the other hand, if it is determined that an imposed character has been detected, the process proceeds to step P7, and it is determined whether or not there are n or more areas in which the imposed character has been detected. In addition,
For example, when there are 60 motion vector detection areas in an image, n is about 10 numbers.

【0093】そして、このステップP7で、インポーズ
文字が検出された領域がn個以上あると判断したとき
は、そのインポーズ文字は、画面中に大きく表示された
タイトル文字であると考えられるので、ステップP10
に進んで防振動作を停止する。一方、インポーズ文字の
検出された領域がn個より少ないときは、ステップP8
に進む。
If it is determined in this step P7 that there are n or more areas in which the imposed character is detected, the imposed character is considered to be a title character displayed large on the screen. , Step P10
Proceed to to stop the anti-vibration operation. On the other hand, when the number of the areas where the imposed characters are detected is less than n, step P8
Proceed to.

【0094】ステップP8では、インポーズ文字が検出
された領域の動きベクトル値MVtと、それ以外の領域
の動きベクトル値MVnとの比較を行う。ここで、 MVt≒MVn …(2式) が成り立つときは、「背景の被写体とインポーズ文字と
が同速度で移動している」ということになる。
In step P8, the motion vector value MVt of the area where the imposed character is detected is compared with the motion vector value MVn of the other area. Here, when MVt ≒ MVn (Expression 2) holds, it means that “the background subject and the imposed character are moving at the same speed”.

【0095】すなわち、この場合には、インポーズ文字
検出回路6により、通常の被写体がインポーズ文字とし
て誤って検出されてしまったものと推測することができ
る。また、インポーズ文字検出回路6によりインポーズ
文字が正しく検出されているとしても、上述のように、
そのインポーズ文字と通常の被写体とは、同速度で画面
中を移動していると考えることができる。
That is, in this case, it can be estimated that the normal subject is erroneously detected as the imposed character by the imposed character detection circuit 6. Further, even if the imposed character is correctly detected by the imposed character detection circuit 6, as described above,
The imposed character and the normal subject can be considered to be moving on the screen at the same speed.

【0096】したがって、このような場合に、そのまま
防振動作を続行してもインポーズ文字だけが画面中を動
きまわるといった見苦しい画像になることはない。そこ
で、上述の(2式)が成り立つときは、ステップP9に
進んで防振動作を続行するようにする。
Therefore, in such a case, even if the image stabilizing operation is continued, an unsightly image in which only the imposed characters move around the screen does not occur. Therefore, when the above-mentioned (Equation 2) is satisfied, the process proceeds to step P9 to continue the image stabilizing operation.

【0097】一方、上述の(2式)が成り立たないとき
は、以下のような2つの状況が考えられる。すなわち、 MVt<<MVn …(3式) が成り立つときは、「画像に振れがあり、かつ、固定し
た位置にインポーズ文字が多重されている」と考えられ
る。このような場合に防振動作を続行すると、画像の振
れ補正を正確に行うことができないという問題が生じ
る。
On the other hand, when the above (Equation 2) does not hold, the following two situations are conceivable. That is, when MVt << MVn (Equation 3) holds, it is considered that “the image has a shake and the imposed characters are multiplexed at a fixed position”. In such a case, if the image stabilization operation is continued, there is a problem that image shake correction cannot be performed accurately.

【0098】また、これとは逆に、 MVt>>MVn …(4式) が成り立つときは、「振れの少ない画像の上に、流れる
ように移動しながら表示されるインポーズ文字が多重さ
れている」と考えられ、上述したのと同様に正確な振れ
補正を行うことができない。
On the other hand, when MVt >> MVn (Equation 4) holds, "imposed characters displayed while moving in a flowing manner on an image with little vibration are multiplexed. And it is not possible to perform accurate shake correction in the same manner as described above.

【0099】したがって、これらのような場合、すなわ
ち、上述の(2式)が成り立たない場合は、ステップP
10に進んで防振動作を停止する。そして、以上のよう
なステップP1〜P10の処理を、各フィールドごとに
繰り返す。
Therefore, in these cases, that is, when the above-mentioned (Equation 2) does not hold, step P
Proceeding to 10, the anti-vibration operation is stopped. Then, the processing of steps P1 to P10 as described above is repeated for each field.

【0100】なお、上述した第3の実施例による画像振
れ補正装置は、インポーズ文字検出回路6にある程度の
検出誤差があることを想定した上で成されたものであ
る。しかし、インポーズ文字検出回路6におけるインポ
ーズ文字の検出精度が完全に信用できる場合は、インポ
ーズ文字が検出され次第、防振動作を停止するようにし
てもよい。
The image blur correction apparatus according to the third embodiment is based on the assumption that the imposed character detection circuit 6 has a certain detection error. However, if the detection accuracy of the imposed character in the imposed character detection circuit 6 is completely reliable, the anti-shake operation may be stopped as soon as the imposed character is detected.

【0101】この場合、図8のステップP6において、
インポーズ文字が検出されたと判断したときは、ステッ
プP7、P8の処理は行わずに、直ちにステップP10
に進んで防振動作を停止するようにする。
In this case, in step P6 of FIG.
If it is determined that an imposed character has been detected, the process of steps P7 and P8 is not performed, and the process immediately proceeds to step P10.
To stop the anti-vibration operation.

【0102】以上のように第3の実施例によれば、例え
ば、録画時にスーパーインポーズされた文字が映像信号
に多重されていても、そのインポーズ文字の部分だけが
画面中を動きまわるといった不快な画像となることを防
止することができる。
As described above, according to the third embodiment, for example, even if superimposed characters are multiplexed in a video signal during recording, only the imposed characters move around the screen. Unpleasant images can be prevented.

【0103】[0103]

【発明の効果】本発明によれば、スーパーインポーズさ
れている文字の動きの影響を受けることのない正確な振
れ補正処理を行うことができ、その結果、良好な画像を
得ることができる。
According to the present invention, the superimposed
Accurate shaking that is not affected by the movement of the characters
Correction process, which results in a good image.
Obtainable.

【0104】[0104]

【0105】[0105]

【図面の簡単な説明】[Brief description of the drawings]

【図1】本発明の画像振れ補正装置の第1の実施例の構
成を示すブロック図である。
FIG. 1 is a block diagram illustrating a configuration of a first embodiment of an image shake correction apparatus according to the present invention.

【図2】図1に示した画像振れ補正装置におけるインポ
ーズ文字検出回路の構成の一例を示すブロック図であ
る。
FIG. 2 is a block diagram illustrating an example of a configuration of an imposed character detection circuit in the image blur correction device illustrated in FIG. 1;

【図3】図1に示した画像振れ補正装置におけるインポ
ーズ文字検出回路の構成の他の例を示すブロック図であ
る。
FIG. 3 is a block diagram showing another example of the configuration of the imposed character detection circuit in the image blur correction device shown in FIG.

【図4】図1に示した画像振れ補正装置におけるインポ
ーズ文字検出回路の構成の更に他の例を示すブロック図
である。
FIG. 4 is a block diagram showing still another example of the configuration of the imposed character detection circuit in the image blur correction device shown in FIG.

【図5】第1の実施例による画像振れ補正装置の動作を
示すフローチャートである。
FIG. 5 is a flowchart illustrating an operation of the image blur correction device according to the first embodiment.

【図6】本発明による画像振れ補正装置の第2の実施例
の原理を説明するためのテレビ画面の例を示す図であ
る。
FIG. 6 is a diagram showing an example of a television screen for explaining the principle of a second embodiment of the image blur correction device according to the present invention.

【図7】本発明の画像振れ補正装置の第3の実施例の構
成を示すブロック図である。
FIG. 7 is a block diagram showing a configuration of a third embodiment of the image blur correction device of the present invention.

【図8】第3の実施例による画像振れ補正装置の動作を
示すフローチャートである。
FIG. 8 is a flowchart illustrating an operation of the image blur correction device according to the third embodiment.

【図9】従来の画像振れ補正装置の構成を示すブロック
図である。
FIG. 9 is a block diagram illustrating a configuration of a conventional image blur correction device.

【符号の説明】[Explanation of symbols]

3 動きベクトル検出回路 4 マイコン 6 インポーズ文字検出回路 7 微分回路 8 ローパスフィルタ 9 2値化回路 10 孤立点除去回路 11 画像メモリ 12 比較回路 13 ローパスフィルタ 14 しきい値回路 15 論理積回路 16 加算回路 17 乗算回路 18 画像メモリ 19 微分回路 20 2値化回路 28 マイコン s1 再生された映像信号 s2 動きベクトル s3 読み出しアドレス信号 s6 インポーズ文字の検出信号 Reference Signs List 3 motion vector detecting circuit 4 microcomputer 6 imposed character detecting circuit 7 differentiating circuit 8 low-pass filter 9 binarizing circuit 10 isolated point removing circuit 11 image memory 12 comparing circuit 13 low-pass filter 14 threshold circuit 15 logical product circuit 16 adder circuit 17 Multiplication circuit 18 Image memory 19 Differentiation circuit 20 Binarization circuit 28 Microcomputer s1 Reproduced video signal s2 Motion vector s3 Read address signal s6 Imposed character detection signal

───────────────────────────────────────────────────── フロントページの続き (58)調査した分野(Int.Cl.7,DB名) H04N 5/91 - 5/956 H04N 5/21,5/278 ──────────────────────────────────────────────────続 き Continued on the front page (58) Field surveyed (Int.Cl. 7 , DB name) H04N 5/91-5/956 H04N 5 / 21,5 / 278

Claims (4)

(57)【特許請求の範囲】(57) [Claims] 【請求項1】 画像の振れを補正する画像振れ補正装置
であって、 前記画像の中から文字がスーパーインポーズされている
領域を検出する検出手段を有し、 前記検出手段により検出された領域の数に応じて、前記
画像の振れを補正するための処理を行わないようにする
ことを特徴とする画像振れ補正装置。
1. An image shake correction apparatus for correcting image shake, comprising: detection means for detecting an area in which characters are superimposed in the image, wherein the area detected by the detection means is provided. An image shake correcting apparatus that does not perform processing for correcting the image shake according to the number of images.
【請求項2】 画像の振れを補正する画像振れ補正方法
であって、 前記画像の中から文字がスーパーインポーズされている
領域を検出する検出工程と、 前記検出工程により検出された領域の数に応じて、前記
画像の振れを補正するための処理を行わないようにする
工程とを有することを特徴とする画像振れ補正方法。
2. An image shake correction method for correcting image shake, comprising: a detection step of detecting an area where a character is superimposed from the image; and a number of areas detected by the detection step. A step of not performing a process for correcting the shake of the image according to the method.
【請求項3】 画像の振れを補正する画像振れ補正装置
であって、 前記画像の中から文字がスーパーインポーズされている
領域を検出する検出手段を有し、 前記検出手段により検出された領域の動きベクトルを用
いることなく、前記画像の振れを補正するための処理を
行うことを特徴とする画像振れ補正装置。
3. An image shake correction apparatus for correcting image shake, comprising: detection means for detecting an area in which a character is superimposed from the image, and an area detected by the detection means. An image shake correcting apparatus for performing a process for correcting the image shake without using the motion vector.
【請求項4】 画像の振れを補正する画像振れ補正方法
であって、 前記画像の中から文字がスーパーインポーズされている
領域を検出する検出工程と、 前記検出工程により検出された領域の動きベクトルを用
いることなく、前記画像の振れを補正するための処理を
行う工程とを有することを特徴とする画像振れ補正方
法。
4. An image shake correction method for correcting image shake, comprising: a detection step of detecting an area in which characters are superimposed from the image; and a motion of the area detected by the detection step. Performing a process for correcting the shake of the image without using a vector.
JP28767593A 1993-10-19 1993-10-22 Image blur correction apparatus and method Expired - Fee Related JP3302472B2 (en)

Priority Applications (5)

Application Number Priority Date Filing Date Title
JP28767593A JP3302472B2 (en) 1993-10-22 1993-10-22 Image blur correction apparatus and method
US08/321,883 US5614945A (en) 1993-10-19 1994-10-14 Image processing system modifying image shake correction based on superimposed images
EP94116430A EP0649256B1 (en) 1993-10-19 1994-10-18 Motion compensation of a reproduced image signal
DE69435031T DE69435031T2 (en) 1993-10-19 1994-10-18 Motion compensation for a reproduced image signal
US08/796,681 US6049354A (en) 1993-10-19 1997-02-06 Image shake-correcting system with selective image-shake correction

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP28767593A JP3302472B2 (en) 1993-10-22 1993-10-22 Image blur correction apparatus and method

Publications (2)

Publication Number Publication Date
JPH07123364A JPH07123364A (en) 1995-05-12
JP3302472B2 true JP3302472B2 (en) 2002-07-15

Family

ID=17720267

Family Applications (1)

Application Number Title Priority Date Filing Date
JP28767593A Expired - Fee Related JP3302472B2 (en) 1993-10-19 1993-10-22 Image blur correction apparatus and method

Country Status (1)

Country Link
JP (1) JP3302472B2 (en)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3479273B2 (en) * 2000-09-21 2003-12-15 Tdk株式会社 Phosphor thin film manufacturing method and EL panel
DE602005025088D1 (en) 2004-03-03 2011-01-13 Nec Corp IMAGE SIMILAR CALCULATION SYSTEM, IMAGE SCREENING SYSTEM, IMAGE LIFE CALCULATION PROCESS, AND IMAGE LIFE CALCULATION PROGRAM
JP4673810B2 (en) * 2006-08-11 2011-04-20 シャープ株式会社 Portable video display device
JP5040378B2 (en) * 2007-03-09 2012-10-03 ソニー株式会社 Image processing apparatus, image processing method, and program

Also Published As

Publication number Publication date
JPH07123364A (en) 1995-05-12

Similar Documents

Publication Publication Date Title
JP2940762B2 (en) Video camera with image stabilization device
US5614945A (en) Image processing system modifying image shake correction based on superimposed images
EP2063390B1 (en) Image processing device and its program
KR101023946B1 (en) Apparatus for digital image stabilizing using object tracking and Method thereof
US7339627B2 (en) Method and system for automatic detection and display of aspect ratio
US5838371A (en) Image pickup apparatus with interpolation and edge enhancement of pickup signal varying with zoom magnification
US5418574A (en) Video signal correction apparatus which detects leading and trailing edges to define boundaries between colors and corrects for bleeding
US8509481B2 (en) Image processing apparatus, image processing method, imaging apparatus
JP3164121B2 (en) Motion vector detection device
US5473441A (en) Video signal reproduction processing method and apparatus for reproduction of a recorded video signal as either a sharp still image or a clear moving image
JPH11177880A (en) Video stabilization device using bit plane matching and method therefor
JP2003078807A (en) Device and method for detecting motion vector, device and method for correcting camera shake and imaging apparatus
KR20080098861A (en) Method and apparatus for image processing using saved image
JP3302472B2 (en) Image blur correction apparatus and method
US20030174223A1 (en) Noise reducing apparatus
JP2921973B2 (en) Image extraction method and image extraction device for specific object
KR960014831B1 (en) Auto-image stabilization device of camcoder
JP5300413B2 (en) Motion vector detection device, motion vector detection method, imaging device, and program
US10425614B2 (en) Moving image reproduction apparatus having function of correcting camera shake during moving image reproduction, method of controlling the same, and storage medium
JP2000331152A (en) Image processor
JPH07115584A (en) Device for correcting image shake
JP3639640B2 (en) Motion vector detection device
JP3209785B2 (en) Motion vector detection device
JP3332514B2 (en) Image shake correction device
JP4015071B2 (en) Image processing apparatus, method, and program

Legal Events

Date Code Title Description
FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090426

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090426

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100426

Year of fee payment: 8

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110426

Year of fee payment: 9

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130426

Year of fee payment: 11

LAPS Cancellation because of no payment of annual fees