JPH05328202A - 画像の手振れ補正装置 - Google Patents

Abstract

(57)【要約】 （修正有） 【目的】 手振れによる画像の欠落部分の画像データを
動きベクトルに基づいて周辺メモリから読み出される周
辺画像データで補間する画像の手振れ補正装置にいて、
出力画像にミスマッチが発生して、画像に破綻をきたす
ことなく、自然な画像出力を得られるようにする。 【構成】 補正制御部４０により、補正部３０の周辺メ
モリ３４からの周辺画像データで補間した補正画像デー
タの境界部分の相関を検出し、相関が小さい場合に補正
信号発生部２０が出力の補正信号の補正量を零にさせ、
上記補正部３０による手振れ補正を停止させる制御を行
う。

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は、入力ビデオ信号で構成
される画像の動きベクトルを検出し、手振れによる画像
の欠落部分の画像データを上記動きベクトルに基づいて
周辺メモリから読み出される周辺画像データで補間する
画像の手振れ補正装置に関し、例えばハンディタイプの
ビデオカメラの撮像出力などのビデオデータに含まれる
所謂手振れによる画像の移動量を検出して補正する画像
の手振れ補正装置などに適用される。

【０００２】

【従来の技術】一般に、ハンディタイプのビデオカメラ
では、撮影時の手振れすなわちカメラの振動が画像の振
動となって現れる。そこで、このような手振れによる画
像の振動を補正する画像の手振れ補正装置として、例え
ば特開昭６３−１６６３７０号公報に開示されているよ
うに、画像の動きベクトルを検出し、この動きベクトル
に基づいて、画像メモリに貯えられているビデオデータ
を補正するものが提案されている。

【０００３】画像の動きベクトルの検出には、例えばブ
ロックマッチング法が採用される。このブロックマッチ
ング法による画像の動きベクトルの検出では、画面を多
数の領域（ブロックと称する）に分割し、各ブロックの
中心に位置する前フィールドの代表点画素と現フィール
ドのブロック内の各画素の画像データとのフィールド差
の絶対値を演算し、各ブロックのフィールド差分絶対値
を対応する画素毎に積算して相関積分値を求めて、１ブ
ロック分の画素配列に対応する座標を有する相関積算値
表を形成する。そして、この相関積算値表における相関
積分値の最小値の座標値を画像の動きベクトルの座標値
として画面全体の動きベクトルを決定している。

【０００４】そして、画像の手振れ補正装置では、例え
ば図１１に示すように、動きベクトルに応じて出力画像
を移動し、拡大して出力することにより手振れ補正を行
う。あるいは、図１２に示すように、手振れによる画像
の欠落部分の画像データを上記動きベクトルに基づいて
周辺メモリから読み出される周辺画像データで補間して
出力するにより、手振れ補正を行っている。

【０００５】なお、ブロックマッチング法による動きベ
クトルの検出では、カメラの手振れによる画像の動きベ
クトルと被写体の動きによる動きベクトルとが同時に発
生するので、これらの判別が難しい。従来、手振れによ
る画像の動きベクトルの検出精度を高める手法として
は、例えば、１画面の複数の領域（マクロブロック）に
分割し、上記マクロブロック毎の動きベクトルから画面
全体の動きベクトルを検出する手法が知られておいる。
本件出願人は、互いに隣接しないマクロブロックが生じ
るような形態で、１画面を構成する複数のマクロブロッ
クに分割して、上記マクロブロック毎の動きベクトルか
ら画面全体の動きベクトルを検出し、手振れによる画像
の欠落部分の画像データを上記動きベクトルに基づいて
周辺メモリから読み出される周辺画像データで補間する
ようにした手振れ補正装置を先に特願平３−１００３８
４号などにおいて提案している。

【０００６】

【発明が解決しようとする課題】ところで、上述のよう
に動きベクトルに応じて出力画像を移動し、拡大して出
力することにより手振れ補正を行う画像の手振れ補正装
置では、常に画像を拡大して出力すえため、全く手振れ
の無いときでも解像度劣化が避けられないという欠点が
ある。これに対して、周辺メモリを用いて手振れ補正を
行う画像の手振れ補正装置では、手振れにより欠落した
部分の画像データのみを周辺メモリに蓄えられた過去の
データで置き換えるものであるから、拡大を行わないの
で、解像度劣化を伴わないという利点がある。

【０００７】しかし、上述のように入力ビデオ信号で構
成される画像の動きベクトルを検出し、手振れによる画
像の欠落部分の画像データを上記動きベクトルに基づい
て周辺メモリから読み出される周辺画像データで補間す
る画像の手振れ補正装置では、例えば図１３に示すよう
に、周辺画像データで補間された周辺画像と入力ビデオ
信号による主画像との境界部分に動き物体Ｘが存在する
場合に、出力画像にミスマッチが発生して、補正画像に
破綻をきたす虞れがある。また、動きベクトルの検出に
おいて誤検出が発生した場合にも、例えば図１４に示す
ように、出力画像にミスマッチが発生して、補正画像に
破綻をきたす虞れがある。

【０００８】そこで、本発明は、このような実情に鑑み
てなされたものであり、ハンディタイプのビデオカメラ
などにおける高性能の手振れ補正を可能にすることを目
的とし、手振れによる画像の欠落部分の画像データを動
きベクトルに基づいて周辺メモリから読み出される周辺
画像データで補間する画像の手振れ補正装置において、
出力画像にミスマッチが発生して、補正画像に破綻をき
たす虞れがある場合に、手振れ補正を停止する機能を備
えた画像の手振れ補正装置を提供するものである。

【０００９】

【課題を解決するための手段】本発明は、上述の課題を
解決するために、入力ビデオ信号で構成される画像の動
きベクトルを検出し、手振れによる画像の欠落部分の画
像データを上記動きベクトルに基づいて周辺メモリから
読み出される周辺画像データで補間する画像の手振れ補
正装置において、上記周辺メモリからの周辺画像データ
で補間した補正画の境界部分の相関を検出し、相関が小
さい場合に手振れ補正を停止する制御手段を設けたこと
を特徴とするものである。

【００１０】また、本発明は、互いに隣接しないマクロ
ブロックが生じるような形態で、１画面を構成する複数
のマクロブロックに分割して、上記マクロブロック毎の
動きベクトルから画面全体の動きベクトルを検出し、手
振れによる画像の欠落部分の画像データを上記動きベク
トルに基づいて周辺メモリから読み出される周辺画像デ
ータで補間する画像の手振れ補正装置において、上記マ
クロブロック毎の動きベクトルに基づいて、上記周辺メ
モリからの周辺画像データで補間した補正画の境界部分
の相関を検出し、相関が小さい場合に手振れ補正を停止
する制御手段を設けたことを特徴とするものである。

【００１１】

【作用】本発明に係る画像の手振れ補正装置では、上述
の課題を解決するために、制御手段により、周辺メモリ
からの周辺画像データで補間した補正画の境界部分の相
関を検出し、相関が小さい場合に手振れ補正を停止させ
る制御を行う。

【００１２】また、本発明に係る画像の手振れ補正装置
では、上述の課題を解決するために、制御手段により、
マクロブロック毎の動きベクトルに基づいて、周辺メモ
リからの周辺画像データで補間した補正画の境界部分の
相関を検出し、相関が小さい場合に手振れ補正を停止さ
せる制御を行う。

【００１３】

【実施例】以下、本発明に係る画像の手振れ補正装置の
一実施例について図面に従い詳細に説明する。本発明に
係る画像の手振れ補正装置は、例えば図１のように構成
される。

【００１４】この図１に示す第１の実施例は、ハンディ
タイプのビデオカメラにおける手振れによる画像の動き
を補正する手振れ補正装置に本発明を適用したもので、
動きベクトル検出部１０，補正信号発生部２０，補正部
３０及び補正制御部４０を備えてなる。この図１におい
て、信号入力端子１には、上記ビデオカメラの図示しな
い撮像部による撮像出力として得られるビデオ信号をデ
ィジタル化した入力ビデオデータが供給される。

【００１５】この手振れ補正装置において、上記動きベ
クトル検出部１０は、上記入力ビデオデータが上記信号
入力端子１を介して供給される代表点メモリ１１及び減
算回路１２と、この減算回路１２による減算出力データ
が供給される相関積算値表形成回路１３と、この相関積
算値表形成回路１３により形成された相関積算値表の相
関積算値データが供給される動きベクトル決定回路１４
とを備えてなる。

【００１６】この動きベクトル検出部１０における上記
代表点メモリ１１は、入力ビデオデータで構成される１
フィールドの画像を複数に分割した各ブロック毎の代表
点画素の画像データＩ_k （０，０）を記憶する。具体的
には、例えば図２に示すように、１フィールドの画面を
ｍ画素×ｎラインのブロックに分割し、図３に示すよう
に各ブロックの中心の画素Ｓ（０，０）を代表点とし、
各代表点画素の画像データＩ_k （０，０）を上記代表点
メモリ１１に１フィールド期間記憶する。なお、上記代
表点は、画面上で均一のばらまかれている。そして、こ
の代表点メモリ１１から読み出される１フィールド前の
各代表点画素の画像データＩ_k-1 （０，０）が上記減算
回路１２に供給される。

【００１７】また、上記減算回路１２は、上記信号入力
端子１を介して供給される入力ビデオデータすなわち現
フィールドの画像データについて、ブロック毎のｍ×ｎ
個の各画素の画像データＩ_k （ｘ，ｙ）と上記代表点メ
モリ１１から読み出される前フィールドの対応するブロ
ックの代表点画素の画像データＩ_k-1 （０，０）との差
分すなわちフィールド間差の絶対値｜Ｉ_k-1 （０，０）
−Ｉ_k （ｘ，ｙ）｜を検出する。そして、この減算回路
１２により得られるフィールド差分絶対値｜Ｉ
_k-1 （０，０）−Ｉ_k （ｘ，ｙ）｜が上記相関積算値表
形成回路１３に供給され

【００１８】上記相関積算値表形成回路１３は、上記減
算回路１２により得られた各ブロックのフィールド差分
絶対値｜Ｉ_k-1 （０，０）−Ｉ_k （ｘ，ｙ）｜を対応す
る画素毎に１フィールド期間に亘って積算し、１ブロッ
ク分の画素配列に対応するｍ×ｎの整数座標を有する相
関積算値表を形成する。この相関積算値表形成回路１３
により形成される相関積算値表は、ｍ×ｎ個のフィール
ド差分絶対値｜Ｉ_k-1（０，０）−Ｉ_k （ｘ，ｙ）｜の
積算値すなわち相関積算値の分布を示す。そして、この
相関積算値表形成部１３により形成される相関積算値表
のｍ×ｎ個の相関積算値が上記動きベクトル決定部１４
に供給される。

【００１９】上記動きベクトル決定回路１４は、上記相
関積算値表形成回路１３により形成された相関積算値表
の相関積算値の最小値の座標を検出して、動きベクトル
を決定する。上記相関積算値表形成回路１３により形成
された相関積算値表の相関積算値は、各ブロックの代表
点画素の画像データＩ_k-1 （０，０）と他の画素の画像
データＩ_k （ｘ，ｙ）とのフィールド間相関を示すもの
で、相関の強い画素に対応する座標ほど小さな値とな
り、動きベクトルに対応する座標の相関積算値が最小値
となるので、最小値の座標を検出することにより動きベ
クトルを決定することができる。そして、この動きベク
トル検出部１０は、検出した画像の動きベクトルを上記
補正信号発生部２０に供給する。

【００２０】上記補正信号発生部２０は、上記動きベク
トルを手振れベクトルＶ_t ’として、 Ｘ_t ＝Ｘ_t-1 −Ｖ_t ’ なる補正量Ｘ_t の手振れ補正信号を形成し、この手振れ
補正信号を上記補正部３０に供給する。

【００２１】また、上記補正部３０は、上記補正信号発
生部２０から手振れ補正信号が供給されるアドレス制御
回路３１及びセレクト信号発生回路３２と、上記アドレ
ス制御回路３１から供給されるアドレス信号に従ってビ
デオデータの書き込み／読み出しが行われるフィールド
メモリ３３及び周辺メモリ３４と、上記フィールドメモ
リ３３及び周辺メモリ３４から読み出されるビデオデー
タを上記セレクト信号発生回路３２から供給されるセレ
クト信号に応じて選択的に出力するセレクタ３５とを備
えてなる。

【００２２】上記フィールドメモリ３３には、上記信号
入力端子１を介して供給される入力ビデオデータが順次
書き込まれる。そして、このフィールドメモリ３３の読
み出しアドレスが上記手振れ補正信号により上記手振れ
ベクトルに応じて制御される。これにより、上記フィー
ルドメモリ３３からは、１フィールドの入力ビデオデー
タが上記手振れベクトルに応じて移動されたビデオデー
タが得られる。そして、このフィールドメモリ３３から
読み出されるビデオデータと上記周辺メモリ３４から読
み出される周辺ビデオデータとが上記セレクタ３５によ
る選択によって合成され、手振れ補正処理済のビデオデ
ータとして信号出力端子２から出力される。

【００２３】なお、上記周辺メモリ３４には、上記セレ
クタ３５を介して出力される手振れ補正処理済のビデオ
データによる画像の補正範囲に相当する周辺部分のビデ
オデータが周辺ビデオデータとして逐次書き込まれる。

【００２４】さらに、上記補正制御部４０は、上記補正
部３０のフィールドメモリ３３から読み出される画像デ
ータと上記周辺メモリ３４から読み出される周辺画像デ
ータとが供給されるようになっている。この補正制御部
４０は、上記フィールドメモリ３３からの画像データと
上記周辺メモリ３４からの周辺画像データとを比較し、
その差が大きいときには上記動きベクトル検出部１０に
より検出された動きベクトルが画像の手振れに起因する
ものでないと判定して、補正停止制御信号を上記補正信
号発生部２０に供給する。

【００２５】上記補正制御部４０における画像データの
比較の方法としては、例えば図４に斜線を施して示す境
界部分の領域Ａについて、各データの相関をとり、相関
値がしきい値よりも小さいときに補正停止制御信号を出
力するようにすれば良い。また、図５に右上がりの斜線
を施して示す領域Ｂと左上がりの斜線を施して示す領域
Ｃとで各データ間の差分を検出するようにしてもよい。

【００２６】そして、上記補正信号発生部２０は、上記
動きベクトルが画像の手振れに起因するものでないこと
を示す補正停止制御信号が上記補正制御部４０から供給
されると、手振れベクトルＶ_t ’を零ベクトルＶ〔０，
０〕として手振れ補正信号を形成し、この手振れ補正信
号を上記補正部３０に供給する。

【００２７】すなわち、上記補正制御部４０は、上記周
辺メモリ３４からの周辺画像データで補間した補正画の
境界部分の相関を検出し、相関が小さい場合に手振れ補
正を停止する制御を行う。

【００２８】このような構成の手振れ補正装置では、上
記補正制御部４０により、上記周辺メモリ３４からの周
辺画像データで補間した補正画の境界部分の相関を検出
し、相関が小さい場合に手振れ補正を停止する制御を行
うので、上記境界部分に動き物体が存在したり動きベク
トルの検出において誤検出が発生した場合にも、出力画
像にミスマッチが発生して、補正画像に破綻をきたすこ
とがなく、上記補正部３０により入力ビデオ信号に手振
れ補正処理を確実に施すことができ、自然な画像出力が
得られる。

【００２９】次に、図６に示す第２の実施例は、マクロ
ブロックを採用して手振れによる画像の動きベクトルの
検出精度を高めるようにした手振れ補正装置に本発明を
適用したもので、動きベクトル検出部６０，補正制御部
７０，補正信号発生部８０及び補正部９０を備えてな
る。この図６において、信号入力端子５１には、上記ビ
デオカメラの図示しない撮像部による撮像出力として得
られるビデオ信号をディジタル化した入力ビデオデータ
が供給される。

【００３０】この手振れ補正装置において、上記動きベ
クトル検出部６０は、入力ビデオ信号で構成される１フ
ィールドの画像を複数に分割した各ブロック毎の代表点
画素の画像データをメモリに１フィールド期間記憶し、
現フィールドのブロックの各画素の画像データと上記メ
モリから読み出される前フィールドのブロックの代表点
画素の画像データとの差分の絶対値に基づいて画像の動
きベクトルを検出するものであって、上記入力ビデオデ
ータが上記信号入力端子５１を介して供給されるフィー
ルド差分検出部６１と、このフィールド差分検出部６１
によるフィールド差分出力が供給される相関積算値表形
成部６４と、この相関積算値表形成部６４により形成さ
れた相関積算値表の相関積算値が供給される動きベクト
ル推定部６８とを備えてなる。

【００３１】上記フィールド差分検出部６１は、上記入
力ビデオデータが上記信号入力端子５１を介して供給さ
れる代表点メモリ６２と減算回路６３からなる。

【００３２】上記代表点メモリ６２は、上述の第１の実
施例における代表点メモリ１１と同様に、入力ビデオデ
ータで構成される１フィールドの画像をｍ画素×ｎライ
ンのブロックに分割し、各ブロックの中心の画素Ｓ
（０，０）を代表点とし、各代表点画素の画像データＩ
_k （０，０）を上記代表点メモリ６２に１フィールド期
間記憶する。そして、この代表点メモリ６２から読み出
される１フィールド前の各代表点画素の画像データＩ
_k-1 （０，０）が上記減算回路６３に供給される。ま
た、上記減算回路６３は、上記信号入力端子５１を介し
て供給される入力ビデオデータすなわち現フィールドの
画像データについて、ブロック毎のｍ×ｎ個の各画素の
画像データＩ_k （ｘ，ｙ）と上記代表点メモリ６２から
読み出される前フィールドの対応するブロックの代表点
画素の画像データＩ_k-1 （０，０）との差分すなわちフ
ィールド間差の絶対値｜Ｉ_k-1 （０，０）−Ｉ_k （ｘ，
ｙ）｜を検出する。

【００３３】そして、上記フィールド差分検出部６１
は、上記減算回路６３により得られるフィールド差分絶
対値｜Ｉ_k-1 （０，０）−Ｉ_k （ｘ，ｙ）｜を上記相関
積算値表形成部６４に供給する。

【００３４】上記相関積算値表形成部６４は、上記フィ
ールド差分検出部６１により得られたフィールド差分絶
対値｜Ｉ_k-1 （０，０）−Ｉ_k （ｘ，ｙ）｜が供給され
るマクロブロック化回路６５と、このマクロブロック化
回路６５によりマクロブロック化されたフィールド差分
絶対値｜Ｉ_k-1 （０，０）−Ｉ_k （ｘ，ｙ）｜が供給さ
れる第１乃至第１３の絶対値積分回路６６Ａ〜６６Ｍか
らなる。

【００３５】上記マクロブロック化回路６５は、上記フ
ィールド差分検出部６１により得られたフィールド差分
絶対値｜Ｉ_k-1 （０，０）−Ｉ_k （ｘ，ｙ）｜につい
て、互いに隣接しないマクロブロックが生じる形態で、
１画面を複数のマクロブロックに分割するもので、例え
ば図７に示すように、１画面を４×３の１２個のマクロ
ブロックＢ１〜Ｂ１２に分割する。

【００３６】そして、このマクロブロック化回路６５に
よりマクロブロック化されたフィールド差分絶対値｜Ｉ
_k-1 （０，０）−Ｉ_k （ｘ，ｙ）｜は、各マクロブロッ
クＢ１〜Ｂ９に対応する上記第１乃至第１２の絶対値積
分回路６６Ａ〜６６Ｌにマクロブロック毎に供給される
とともに、上記第１３の絶対値積分回路６６Ｍに全マク
ロブロックが供給される。

【００３７】上記第１の絶対値積分回路６６Ａは、第１
のマクロブロックＢ１のフィールド差分絶対値｜Ｉ_k-1
（０，０）−Ｉ_k （ｘ，ｙ）｜について、上記ｍ×ｎ個
の画素で構成されるブロックの各フィールド差分絶対値
を対応する画素毎に積算し、上記第１のマクロブロック
Ｂ１の相関積算値表を形成する。以下同様に、上記第２
乃至第１２の絶対値積分回路６６Ｂ〜６６Ｌは、それぞ
れ対応する第２乃至第１２のマクロブロックＢ２〜Ｂ１
２の相関積算値表を形成する。また、上記第１３の絶対
値積分回路６６Ｊは、上記第１乃至第９のマクロブロッ
クＢ１〜Ｂ１２からなる１画面全体の相関積算値表を形
成する。

【００３８】そして、上記相関積算値表形成部６４は、
上記第１乃至第１２の絶対値積分回路６６Ａ〜６６Ｌに
より形成された各マクロブロックＢ１〜Ｂ１２の相関積
算値表の相関積算値と上記第１３の絶対値積分回路６６
Ｍにより形成された１画面全体の相関積算値表の相関積
算値を上記動きベクトル推定部６８に供給するととも
に、上記補正制御部７０に供給する。

【００３９】上記動きベクトル推定部６８は、上記相関
積算値表形成部６４により形成された各相関積算値表の
相関積算値の最小値の座標を検出して、動きベクトルを
推定する。上記相関積算値表形成回路６４により形成さ
れた各相関積算値表の相関積算値は、各ブロックの代表
点画素の画像データＩ_k-1 （０，０）と他の画素の画像
データＩ_k （ｘ，ｙ）とのフィールド間相関を示すもの
で、相関の強い画素に対応する座標ほど小さな値とな
り、動きベクトルに対応する座標の相関積算値が最小値
となるので、最小値の座標を検出することにより動きベ
クトルを推定することができる。

【００４０】そして、この動きベクトル検出部６０は、
上記動きベクトル推定部６８により推定した画像の動き
ベクトルを上記補正信号発生部８０に供給する。

【００４１】また、上記補正制御部７０は、上記相関積
算値表形成部６４の上記第１乃至第１３の絶対値積分回
路６６Ａ〜６６Ｍにより形成された各相関積算値表の相
関積算値に基づいて、各マクロブロック毎の動きベクト
ルを比較し、動きベクトルの異なるマクロブロックが周
辺部分に検出されたときに、その動きベクトルが画像の
手振れに起因するものでないと判定して、補正停止制御
信号を上記補正信号発生部８０に供給する。すなわち、
例えば図８に示すように、画像の周辺部分に動き物体Ｘ
が入ってきた場合には、各マクロブロックの動きベクト
ルを図９に示してあるように、上記動き物体Ｘの存在す
るマクロブロックの動きベクトルが他のマクロブロック
とは異なるので、手振れ補正に破綻をきたす状態である
と判定することができる。このように、上記補正制御部
７０は、上記マクロブロック毎の動きベクトルに基づい
て、後述する補正部９０の周辺メモリ９４からの周辺画
像データで補間した補正画の境界部分の相関を検出し、
相関が小さい場合に手振れ補正を停止する制御を行う。

【００４２】上記補正信号発生部８０は、上記動きベク
トル検出部６０により検出された動きベクトルを手振れ
ベクトルＶ_t ’として、 Ｘ_t ＝Ｘ_t-1 −Ｖ_t ’ なる補正量Ｘ_t の手振れ補正信号を形成し、この手振れ
補正信号を上記補正部９０に供給する。また、この補正
信号発生部８０は、上記動きベクトル検出部１０により
検出された動きベクトルが画像の手振れに起因するもの
でないことを示す補正停止制御信号が上記補正制御部７
０から供給されると、手振れベクトルＶ_t’を零ベクト
ルＶ〔０，０〕として手振れ補正信号を形成し、この手
振れ補正信号を上記補正部８０に供給する。

【００４３】また、上記補正部９０は、例えば図１０に
示すように、上記補正信号発生部８０から手振れ補正信
号が供給されるアドレス制御回路９１及びセレクト信号
発生回路９２と、上記アドレス制御回路９１から供給さ
れるアドレス信号に従ってビデオデータの書き込み／読
み出しが行われるフィールドメモリ９３及び周辺メモリ
９４と、上記フィールドメモリ９３及び周辺メモリ９４
から読み出されるビデオデータを上記セレクト信号発生
回路９２から供給されるセレクト信号に応じて選択的に
出力するセレクタ９５とを備えてなる。

【００４４】上記フィールドメモリ９３には、上記信号
入力端子５１を介して供給される入力ビデオデータが順
次書き込まれる。そして、このフィールドメモリ９３の
読み出しアドレスが上記手振れ補正信号により上記手振
れベクトルに応じて制御される。これにより、上記フィ
ールドメモリ９３からは、１フィールドの入力ビデオデ
ータが上記手振れベクトルに応じて移動されたビデオデ
ータが得られる。そして、このフィールドメモリ９３か
ら読み出されるビデオデータと上記周辺メモリ９４から
読み出される周辺ビデオデータとが上記セレクタ９５に
よる選択によって合成され、手振れ補正処理済のビデオ
データとして信号出力端子５２から出力される。

【００４５】なお、上記周辺メモリ９４には、上記セレ
クタ９５を介して出力される手振れ補正処理済のビデオ
データによる画像の補正範囲に相当する周辺部分のビデ
オデータが周辺ビデオデータとして逐次書き込まれる。

【００４６】このような構成の手振れ補正装置では、上
記補正制御部７０は、上記マクロブロック毎の動きベク
トルに基づいて、上記周辺メモリ９４からの周辺画像デ
ータで補間した補正画の境界部分の相関を検出し、相関
が小さい場合に手振れ補正を停止する制御を行うので、
上記境界部分に動き物体が存在したり動きベクトルの検
出において誤検出が発生した場合にも、出力画像にミス
マッチが発生して、補正画像に破綻をきたすことがな
く、上記補正部９０により入力ビデオ信号に手振れ補正
処理を確実に施すことができ、自然な画像出力が得られ
る。

【００４７】

【発明の効果】以上の説明からも明らかなように、本発
明によれば、入力ビデオ信号で構成される画像の動きベ
クトルを検出し、手振れによる画像の欠落部分の画像デ
ータを上記動きベクトルに基づいて周辺メモリから読み
出される周辺画像データで補間する画像の手振れ補正装
置において、制御手段により、周辺メモリからの周辺画
像データで補間した補正画の境界部分の相関を検出し、
相関が小さい場合に手振れ補正を停止させる制御を行う
ので、上記境界部分に動き物体が存在したり動きベクト
ルの検出において誤検出が発生した場合にも、出力画像
にミスマッチが発生して、補正画像に破綻をきたすこと
がなく、上記補正部により入力ビデオ信号に手振れ補正
処理を確実に施すことができ、自然な画像出力が得られ
る。

【００４８】また、本発明によれば、互いに隣接しない
マクロブロックが生じるような形態で、１画面を構成す
る複数のマクロブロックに分割して、上記マクロブロッ
ク毎の動きベクトルから画面全体の動きベクトルを検出
し、手振れによる画像の欠落部分の画像データを上記動
きベクトルに基づいて周辺メモリから読み出される周辺
画像データで補間する画像の手振れ補正装置において、
制御手段により、マクロブロック毎の動きベクトルに基
づいて、周辺メモリからの周辺画像データで補間した補
正画の境界部分の相関を検出し、相関が小さい場合に手
振れ補正を停止させる制御を行うので、上記境界部分に
動き物体が存在したり動きベクトルの検出において誤検
出が発生した場合にも、出力画像にミスマッチが発生し
て、補正画像に破綻をきたすことがなく、上記補正部に
より入力ビデオ信号に手振れ補正処理を確実に施すこと
ができ、自然な画像出力が得られる。

【図面の簡単な説明】

【図１】本発明に係る画像の手振れ補正装置の第１の実
施例の構成を示すブロック図である。

【図２】上記手振れ補正装置の動きベクトル検出部にお
ける画面のブロック分割の状態を示す図である。

【図３】ブロック分割された画面の１ブロックの構造を
示す図である。

【図４】上記手振れ補正装置の補正制御部における画像
データの比較動作例の説明に供する図である。

【図５】上記手振れ補正装置の補正制御部における画像
データの他の比較動作例の説明に供する図である。

【図６】本発明に係る画像の手振れ補正装置の第２の実
施例の構成を示すブロック図である。

【図７】１画面を１２分割したマクロブロックの状態を
示す図である。

【図８】移動物体が進入してきた場合の画像の状態を示
す図である。

【図９】図８に示した画像の状態におけるマクロブロッ
クの動きベクトルの状態を示す図である。

【図１０】上記第２の実施例における補正部の構成を示
すブロック図である。

【図１１】画像拡大方式の手振れ補正動作の説明に供す
る図である。

【図１２】周辺メモリ方式の手振れ補正動作の説明に供
する図である。

【図１３】移動物体が存在する場合の周辺メモリ方式の
手振れ補正動作の説明に供する図である。

【図１４】動きベクトルにの検出に誤差が発生した場合
の周辺メモリ方式の手振れ補正動作の説明に供する図で
ある。

【符号の説明】

１０，６０・・・・・動きベクトル検出部 ２０，８０・・・・・補正信号発生部 ３０，９０・・・・・補正部 ３３，９３・・・・・フィールドメモリ ３４，９４・・・・・周辺メモリ ４０，７０・・・・・補正制御部

───────────────────────────────────────────────────── フロントページの続き (72)発明者 橋野 司 東京都品川区北品川６丁目７番35号 ソニ ー株式会社内

Claims (2)

【特許請求の範囲】
1. 【請求項１】 入力ビデオ信号で構成される画像の動き
   ベクトルを検出し、手振れによる画像の欠落部分の画像
   データを上記動きベクトルに基づいて周辺メモリから読
   み出される周辺画像データで補間する画像の手振れ補正
   装置において、 上記周辺メモリからの周辺画像データで補間した補正画
   の境界部分の相関を検出し、相関が小さい場合に手振れ
   補正を停止する制御手段を設けたことを特徴とする画像
   の手振れ補正装置。
2. 【請求項２】 互いに隣接しないマクロブロックが生じ
   るような形態で、１画面を構成する複数のマクロブロッ
   クに分割して、上記マクロブロック毎の動きベクトルか
   ら画面全体の動きベクトルを検出し、手振れによる画像
   の欠落部分の画像データを上記動きベクトルに基づいて
   周辺メモリから読み出される周辺画像データで補間する
   画像の手振れ補正装置において、 上記マクロブロック毎の動きベクトルに基づいて、上記
   周辺メモリからの周辺画像データで補間した補正画の境
   界部分の相関を検出し、相関が小さい場合に手振れ補正
   を停止する制御手段を設けたことを特徴とする画像の手
   振れ補正装置。