JP3196258B2 - 画像の動きベクトル検出装置 - Google Patents
画像の動きベクトル検出装置Info
- Publication number
- JP3196258B2 JP3196258B2 JP29048291A JP29048291A JP3196258B2 JP 3196258 B2 JP3196258 B2 JP 3196258B2 JP 29048291 A JP29048291 A JP 29048291A JP 29048291 A JP29048291 A JP 29048291A JP 3196258 B2 JP3196258 B2 JP 3196258B2
- Authority
- JP
- Japan
- Prior art keywords
- motion vector
- image
- representative point
- motion
- field
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Lifetime
Links
Description
【０００１】
【産業上の利用分野】本発明は、画像の動きベクトル検
出装置に関し、ハンディタイプのビデオカメラの撮像出
力等をビデオデータに含まれる所謂手振れによる画像の
移動量を検出して補正する画像動き補正装置などに適用
される。
出装置に関し、ハンディタイプのビデオカメラの撮像出
力等をビデオデータに含まれる所謂手振れによる画像の
移動量を検出して補正する画像動き補正装置などに適用
される。
【０００２】
【従来の技術】一般に、ハンディタイプのビデオカメラ
では、撮影時の手振れすなわちカメラの振動が画像の振
動となって現れる。そこで、このような手振れによる画
像の振動を補正する画像動き補正装置として、例えば特
開昭６３−１６６３７０号公報に開示されているよう
に、画像の動きベクトルを検出し、この動きベクトルに
基づいて、画像メモリに貯えられているビデオデータを
補正するものが提案されている。
では、撮影時の手振れすなわちカメラの振動が画像の振
動となって現れる。そこで、このような手振れによる画
像の振動を補正する画像動き補正装置として、例えば特
開昭６３−１６６３７０号公報に開示されているよう
に、画像の動きベクトルを検出し、この動きベクトルに
基づいて、画像メモリに貯えられているビデオデータを
補正するものが提案されている。
【０００３】画像の動きベクトルの検出には、例えばブ
ロックマッチング法が採用される。このブロックマッチ
ング法による画像の動きベクトルの検出では、画面を多
数の領域（ブロックと称する）に分割し、各ブロックの
中心に位置する前フィールドの代表点画素と現フィール
ドのブロック内の各画素の画像データとのフィールド差
の絶対値を演算し、各ブロックのフィールド差分絶対値
を対応する画素毎に積算して相関積分値を求めて、１ブ
ロック分の画素配列に対応する座標を有する相関積算値
表を形成する。そして、この相関積算値表における相関
積分値の最小値の座標値を画像の動きベクトルの座標値
として画面全体の動きベクトルを決定している。
ロックマッチング法が採用される。このブロックマッチ
ング法による画像の動きベクトルの検出では、画面を多
数の領域（ブロックと称する）に分割し、各ブロックの
中心に位置する前フィールドの代表点画素と現フィール
ドのブロック内の各画素の画像データとのフィールド差
の絶対値を演算し、各ブロックのフィールド差分絶対値
を対応する画素毎に積算して相関積分値を求めて、１ブ
ロック分の画素配列に対応する座標を有する相関積算値
表を形成する。そして、この相関積算値表における相関
積分値の最小値の座標値を画像の動きベクトルの座標値
として画面全体の動きベクトルを決定している。
【０００４】そして、画像動き補正装置では、検出され
た動きベクトルを補正信号に変換し、この補正信号によ
り現画像を移動する補正を行っている。このような画像
動き補正装置における補正精度は、画像の動きベクトル
の検出精度に依存する。
た動きベクトルを補正信号に変換し、この補正信号によ
り現画像を移動する補正を行っている。このような画像
動き補正装置における補正精度は、画像の動きベクトル
の検出精度に依存する。
【０００５】
【発明が解決しようとする課題】ところで、上述のよう
に相関積算値表における相関積分値の最小値の座標値を
画像の動きベクトルの座標値として画面全体のフィール
ド間の動きベクトルを決定するようにした従来のブロッ
クマッチング法による画像の動きベクトル検出装置で
は、検出時間間隔が１フィールド期間で短いために高い
検出精度が得られず、しかも、上記相関積分値が各画素
に対応して離散的に算出されており、上記相関積算値表
における整数座標値でしか画像の動きベクトルが求まら
ないので、さらに検出精度が下がってしまう。また、イ
ンターレス走査を採用しているＮＴＳＣ方式などの標準
テレビジョン方式に準拠するビデオ信号を出力するビデ
オカメラでは、空間上に対応画素が存在しないので、高
い検出精度が得られない。
に相関積算値表における相関積分値の最小値の座標値を
画像の動きベクトルの座標値として画面全体のフィール
ド間の動きベクトルを決定するようにした従来のブロッ
クマッチング法による画像の動きベクトル検出装置で
は、検出時間間隔が１フィールド期間で短いために高い
検出精度が得られず、しかも、上記相関積分値が各画素
に対応して離散的に算出されており、上記相関積算値表
における整数座標値でしか画像の動きベクトルが求まら
ないので、さらに検出精度が下がってしまう。また、イ
ンターレス走査を採用しているＮＴＳＣ方式などの標準
テレビジョン方式に準拠するビデオ信号を出力するビデ
オカメラでは、空間上に対応画素が存在しないので、高
い検出精度が得られない。
【０００６】従って、従来の画像の動きベクトル検出装
置により検出した画像の動きベクトルにより例えば手振
れ補正信号を形成して、手振れ補正を行った場合に、十
分な補正精度が得られず、不自然が画像となってしま
う。
置により検出した画像の動きベクトルにより例えば手振
れ補正信号を形成して、手振れ補正を行った場合に、十
分な補正精度が得られず、不自然が画像となってしま
う。
【０００７】本発明は、このような実情に鑑みてなされ
たものであり、ハンディタイプのビデオカメラなどにお
ける高性能の手振れ補正を可能にすることを目的とし、
高精度で画像の動きベクトルを検出することのできる画
像の動きベクトル検出装置を提供するものである。
たものであり、ハンディタイプのビデオカメラなどにお
ける高性能の手振れ補正を可能にすることを目的とし、
高精度で画像の動きベクトルを検出することのできる画
像の動きベクトル検出装置を提供するものである。
【０００８】
【課題を解決するための手段】発明に係る画像の動きベ
クトル検出装置は、上述の課題を解決するために、入力
ビデオ信号で構成される１フィールドの画像を複数に分
割した各ブロック毎の代表点画素の画像データをそれぞ
れ１フィールド分記憶する縦続接続されたｎ個の代表点
メモリと、現フレームのブロックの各画素の画像データ
と上記各代表点メモリから読み出される１乃至ｎフィー
ルド前のブロックの代表点画素の画像データとの差分を
検出するｎ個の差分検出手段と、上記各差分検出手段に
よりに検出された１乃至ｎフィールド間の各差分値に基
づいて動きベクトルを検出するｎ個の動きベクトル検出
手段と、上記動きベクトル検出手段により得られる各動
きベクトルに基づいて、画像の動きの加速度を判定する
加速度判定手段と、上記動きベクトル検出手段により得
られる各動きベクトルを上記加速度判定手段による判定
出力に応じて選択的に出力する動きベクトル選択手段と
を備え、動きベクトルの１フィールド分の変動が大きい
程、短いフィールド間の差分値に基づく動きベクトルを
上記動きベクトル選択手段により選択して出力すること
を特徴とするものである。
クトル検出装置は、上述の課題を解決するために、入力
ビデオ信号で構成される１フィールドの画像を複数に分
割した各ブロック毎の代表点画素の画像データをそれぞ
れ１フィールド分記憶する縦続接続されたｎ個の代表点
メモリと、現フレームのブロックの各画素の画像データ
と上記各代表点メモリから読み出される１乃至ｎフィー
ルド前のブロックの代表点画素の画像データとの差分を
検出するｎ個の差分検出手段と、上記各差分検出手段に
よりに検出された１乃至ｎフィールド間の各差分値に基
づいて動きベクトルを検出するｎ個の動きベクトル検出
手段と、上記動きベクトル検出手段により得られる各動
きベクトルに基づいて、画像の動きの加速度を判定する
加速度判定手段と、上記動きベクトル検出手段により得
られる各動きベクトルを上記加速度判定手段による判定
出力に応じて選択的に出力する動きベクトル選択手段と
を備え、動きベクトルの１フィールド分の変動が大きい
程、短いフィールド間の差分値に基づく動きベクトルを
上記動きベクトル選択手段により選択して出力すること
を特徴とするものである。
【０００９】
【作用】発明に係る画像の動きベクトル検出装置では、
入力ビデオ信号で構成される１フィールドの画像を複数
に分割した各ブロック毎の代表点画素の画像データを縦
続接続されたｎ個の代表点メモリにそれぞれ１フィール
ド分記憶し、差分検出手段により検出される現フレーム
のブロックの各画素の画像データと１乃至ｎフィールド
前のブロックの代表点画素の画像データとの各差分値に
基づいて、ベクトル検出手段によりｎ種類の動きベクト
ルを検出する。そして、上記動きベクトル検出手段によ
り得られる各動きベクトルに基づいて画像の動きの加速
度を加速度判定手段により判定し、動きベクトルの１フ
ィールド分の変動が大きい程、短いフィールド間の差分
値に基づく動きベクトルを動きベクトル選択手段により
選択して出力する。
入力ビデオ信号で構成される１フィールドの画像を複数
に分割した各ブロック毎の代表点画素の画像データを縦
続接続されたｎ個の代表点メモリにそれぞれ１フィール
ド分記憶し、差分検出手段により検出される現フレーム
のブロックの各画素の画像データと１乃至ｎフィールド
前のブロックの代表点画素の画像データとの各差分値に
基づいて、ベクトル検出手段によりｎ種類の動きベクト
ルを検出する。そして、上記動きベクトル検出手段によ
り得られる各動きベクトルに基づいて画像の動きの加速
度を加速度判定手段により判定し、動きベクトルの１フ
ィールド分の変動が大きい程、短いフィールド間の差分
値に基づく動きベクトルを動きベクトル選択手段により
選択して出力する。
【００１０】
【実施例】以下、本発明に係る画像の動きベクトル検出
装置の一実施例について図面に従い詳細に説明する。本
発明に係る画像の動きベクトル検出装置は、例えば図１
に示すように構成される。
装置の一実施例について図面に従い詳細に説明する。本
発明に係る画像の動きベクトル検出装置は、例えば図１
に示すように構成される。
【００１１】この図１に示した画像の動きベクトル検出
装置１０は、ハンディタイプのビデオカメラにおける手
振れによる画像の動きを補正する手振れ補正装置に本発
明を適用したもので、補正量発生部２０及び補正部３０
とともに手振れ補正装置を構成している。図１におい
て、信号入力端子１には、上記ビデオカメラの図示しな
い撮像部による撮像出力として得られるビデオ信号をデ
ィジタル化した入力ビデオデータが供給される。
装置１０は、ハンディタイプのビデオカメラにおける手
振れによる画像の動きを補正する手振れ補正装置に本発
明を適用したもので、補正量発生部２０及び補正部３０
とともに手振れ補正装置を構成している。図１におい
て、信号入力端子１には、上記ビデオカメラの図示しな
い撮像部による撮像出力として得られるビデオ信号をデ
ィジタル化した入力ビデオデータが供給される。
【００１２】上記動きベクトル検出装置１０は、縦続接
続されたｎ個の代表点メモリＦＭ1 〜ＦＭn と、これら
の代表点メモリＦＭ1〜ＦＭn から読み出される各フィ
ールドの代表点画素の画像データが供給されるｎ個の減
算回路ＳＵＢ1 〜ＳＵＢn と、これらの減算回路ＳＵＢ
1 〜ＳＵＢn による各減算出力データが供給されるｎ個
の動きベクトル検出回路ＤＥＴ1 〜ＤＥＴnと、これら
の動きベクトル検出回路ＤＥＴ1 〜ＤＥＴn により検出
された各動きベクトルが供給される加速度判定回路ＡＣ
Ｊ及びセレクタＳＥＬを備え、入力ビデオデータが上記
信号入力端子１を介して第１の代表点メモリＦＭ1 と第
１乃至第ｎの減算回路ＳＵＢ1 〜ＳＵＢn に供給される
ようになっている。
続されたｎ個の代表点メモリＦＭ1 〜ＦＭn と、これら
の代表点メモリＦＭ1〜ＦＭn から読み出される各フィ
ールドの代表点画素の画像データが供給されるｎ個の減
算回路ＳＵＢ1 〜ＳＵＢn と、これらの減算回路ＳＵＢ
1 〜ＳＵＢn による各減算出力データが供給されるｎ個
の動きベクトル検出回路ＤＥＴ1 〜ＤＥＴnと、これら
の動きベクトル検出回路ＤＥＴ1 〜ＤＥＴn により検出
された各動きベクトルが供給される加速度判定回路ＡＣ
Ｊ及びセレクタＳＥＬを備え、入力ビデオデータが上記
信号入力端子１を介して第１の代表点メモリＦＭ1 と第
１乃至第ｎの減算回路ＳＵＢ1 〜ＳＵＢn に供給される
ようになっている。
【００１３】上記第１の代表点メモリＦＭ1 は、上記入
力ビデオデータで構成される１フィールドの画像を複数
に分割した各ブロック毎の代表点画素の画像データを記
憶する。具体的には、例えば図２に示すように、１フィ
ールドの画面をｍ画素×ｎラインのブロックに分割し、
図３に示すように各ブロックの中心の画素を代表点と
し、各代表点画素の画像データを上記代表点メモリＦＭ
1 に１フィールド期間記憶する。なお、上記代表点は、
画面上で均一のばらまかれている。そして、この第１の
代表点メモリＦＭ1 から１フィールド前の各代表点画素
の画像データが読み出されて、上記減算回路ＳＵＢ1 に
供給されるとともに第２の代表点メモリＦＭ2 に供給さ
れる。
力ビデオデータで構成される１フィールドの画像を複数
に分割した各ブロック毎の代表点画素の画像データを記
憶する。具体的には、例えば図２に示すように、１フィ
ールドの画面をｍ画素×ｎラインのブロックに分割し、
図３に示すように各ブロックの中心の画素を代表点と
し、各代表点画素の画像データを上記代表点メモリＦＭ
1 に１フィールド期間記憶する。なお、上記代表点は、
画面上で均一のばらまかれている。そして、この第１の
代表点メモリＦＭ1 から１フィールド前の各代表点画素
の画像データが読み出されて、上記減算回路ＳＵＢ1 に
供給されるとともに第２の代表点メモリＦＭ2 に供給さ
れる。
【００１４】また、上記２の代表点メモリＦＭ2 は、上
記第１の代表点メモリＦＭ1 から読み出される１フィー
ルド前の各代表点画素の画像データを１フィールド期間
記憶する。そして、この２の代表点メモリＦＭ2 から２
フィールド前の各代表点画素の画像データが読み出され
て、上記第２の減算回路ＳＵＢ2 に供給されるとともに
第３の代表点メモリＦＭ3 に供給される。
記第１の代表点メモリＦＭ1 から読み出される１フィー
ルド前の各代表点画素の画像データを１フィールド期間
記憶する。そして、この２の代表点メモリＦＭ2 から２
フィールド前の各代表点画素の画像データが読み出され
て、上記第２の減算回路ＳＵＢ2 に供給されるとともに
第３の代表点メモリＦＭ3 に供給される。
【００１５】以下同様に、第３乃至第ｎの代表点メモリ
ＦＭ3 〜ＦＭn は、前段の代表点メモリＦＭ2 〜ＦＭ
n-1 から供給される２乃至ｎ−１フィールド前の各代表
点画素の画像データを１フィールド期間記憶する。そし
て、これら第３乃至第ｎの代表点メモリＦＭ3 〜ＦＭn
から３乃至乃至ｎフィールド前の各代表点画素の画像デ
ータが読み出されて、第３乃至第ｎの減算回路ＳＵＢ3
〜ＳＵＢn に供給される。
ＦＭ3 〜ＦＭn は、前段の代表点メモリＦＭ2 〜ＦＭ
n-1 から供給される２乃至ｎ−１フィールド前の各代表
点画素の画像データを１フィールド期間記憶する。そし
て、これら第３乃至第ｎの代表点メモリＦＭ3 〜ＦＭn
から３乃至乃至ｎフィールド前の各代表点画素の画像デ
ータが読み出されて、第３乃至第ｎの減算回路ＳＵＢ3
〜ＳＵＢn に供給される。
【００１６】上記第１の減算回路ＳＵＢ1 は、上記信号
入力端子１を介して供給される入力ビデオデータすなわ
ち現フィールドの画像データについて、ブロック毎のｍ
×ｎ個の各画素の画像データと上記第１の代表点メモリ
ＦＭ1 から読み出される１フィールド前の対応するブロ
ックの代表点画素の画像データとの差分すなわち１フィ
ールド間の各差分を検出する。
入力端子１を介して供給される入力ビデオデータすなわ
ち現フィールドの画像データについて、ブロック毎のｍ
×ｎ個の各画素の画像データと上記第１の代表点メモリ
ＦＭ1 から読み出される１フィールド前の対応するブロ
ックの代表点画素の画像データとの差分すなわち１フィ
ールド間の各差分を検出する。
【００１７】また、上記第２の減算回路ＳＵＢ2 は、上
記信号入力端子１を介して供給される入力ビデオデータ
すなわち現フィールドの画像データについて、ブロック
毎のｍ×ｎ個の各画素の画像データと上記第２の代表点
メモリＦＭ2 から読み出される２フィールド前の対応す
るブロックの代表点画素の画像データとの差分すなわち
２フィールド間の各差分を検出する。
記信号入力端子１を介して供給される入力ビデオデータ
すなわち現フィールドの画像データについて、ブロック
毎のｍ×ｎ個の各画素の画像データと上記第２の代表点
メモリＦＭ2 から読み出される２フィールド前の対応す
るブロックの代表点画素の画像データとの差分すなわち
２フィールド間の各差分を検出する。
【００１８】以下同様に、上記第３乃至第ｎの減算回路
ＳＵＢ3 〜ＳＵＢn は、上記信号入力端子１を介して供
給される入力ビデオデータすなわち現フィールドの画像
データについて、ブロック毎のｍ×ｎ個の各画素の画像
データと上記第３乃至第ｎの代表点メモリＦＭ3 〜ＦＭ
n から読み出される３乃至ｎフィールド前の対応するブ
ロックの代表点画素の画像データとの差分すなわち１乃
至ｎフィールド間の各差分を検出する。
ＳＵＢ3 〜ＳＵＢn は、上記信号入力端子１を介して供
給される入力ビデオデータすなわち現フィールドの画像
データについて、ブロック毎のｍ×ｎ個の各画素の画像
データと上記第３乃至第ｎの代表点メモリＦＭ3 〜ＦＭ
n から読み出される３乃至ｎフィールド前の対応するブ
ロックの代表点画素の画像データとの差分すなわち１乃
至ｎフィールド間の各差分を検出する。
【００１９】そして、上記第１乃至第ｎの減算回路ＳＵ
Ｂ1 〜ＳＵＢn による減算出力データとして得られる１
乃至ｎフィールド間の各差分値データが上記第１乃至第
ｎの動きベクトル検出回路ＤＥＴ1 〜ＤＥＴn に供給さ
れる。
Ｂ1 〜ＳＵＢn による減算出力データとして得られる１
乃至ｎフィールド間の各差分値データが上記第１乃至第
ｎの動きベクトル検出回路ＤＥＴ1 〜ＤＥＴn に供給さ
れる。
【００２０】上記第１の動きベクトル検出回路ＤＥＴ1
は、上記第１の減算回路ＳＵＢ1 により得られた各ブロ
ックの１フィールド間の差分値を対応する画素毎に１フ
ィールド期間に亘って積算して、１ブロック分の画素配
列に対応するｍ×ｎの整数座標を有する相関積算値表を
形成し、その相関積算値の最小値の座標Ｐ（ｘ，ｙ）を
動きベクトル座標として検出する。ここで、上記相関積
算値表は、１フィールド間の差分値の積算値の分布を示
し、上記代表点画素に対して１フィールド相関の最も強
い画素に対応する座標の相関積算値が最小値となる。従
って、上記代表点画素に対応する座標Ｐ（０，０）に対
する上記最小相関積算値の座標Ｐ（ｘ，ｙ）が動きベク
トルを表すことになる。そして、この第１の動きベクト
ル検出回路ＤＥＴ1 は、上記最小相関積算値の座標Ｐ
（ｘ，ｙ）から動きベクトルを算出して出力する。
は、上記第１の減算回路ＳＵＢ1 により得られた各ブロ
ックの１フィールド間の差分値を対応する画素毎に１フ
ィールド期間に亘って積算して、１ブロック分の画素配
列に対応するｍ×ｎの整数座標を有する相関積算値表を
形成し、その相関積算値の最小値の座標Ｐ（ｘ，ｙ）を
動きベクトル座標として検出する。ここで、上記相関積
算値表は、１フィールド間の差分値の積算値の分布を示
し、上記代表点画素に対して１フィールド相関の最も強
い画素に対応する座標の相関積算値が最小値となる。従
って、上記代表点画素に対応する座標Ｐ（０，０）に対
する上記最小相関積算値の座標Ｐ（ｘ，ｙ）が動きベク
トルを表すことになる。そして、この第１の動きベクト
ル検出回路ＤＥＴ1 は、上記最小相関積算値の座標Ｐ
（ｘ，ｙ）から動きベクトルを算出して出力する。
【００２１】また、上記第２の動きベクトル検出回路Ｄ
ＥＴ2 は、上記第２の減算回路ＳＵＢ2 により得られた
各ブロックの２フィールド間の差分値を対応する画素毎
に１フィールド期間に亘って積算して相関積算値表を形
成し、その相関積算値の最小値の座標Ｐ（ｘ，ｙ）を動
きベクトル座標として検出する。そして、この第２の動
きベクトル検出回路ＤＥＴ2 は、上記最小相関積算値の
座標Ｐ（ｘ，ｙ）から１フィールド間の動きベクトルに
変換した動きベクトルを算出して出力する。すなわち、
上記最小相関積算値の座標Ｐ（ｘ，ｙ）を１フィールド
間の動きベクトル座標Ｐ（ｘ／２，ｙ／２）に換算し
て、動きベクトルを算出する。
ＥＴ2 は、上記第２の減算回路ＳＵＢ2 により得られた
各ブロックの２フィールド間の差分値を対応する画素毎
に１フィールド期間に亘って積算して相関積算値表を形
成し、その相関積算値の最小値の座標Ｐ（ｘ，ｙ）を動
きベクトル座標として検出する。そして、この第２の動
きベクトル検出回路ＤＥＴ2 は、上記最小相関積算値の
座標Ｐ（ｘ，ｙ）から１フィールド間の動きベクトルに
変換した動きベクトルを算出して出力する。すなわち、
上記最小相関積算値の座標Ｐ（ｘ，ｙ）を１フィールド
間の動きベクトル座標Ｐ（ｘ／２，ｙ／２）に換算し
て、動きベクトルを算出する。
【００２２】以下同様に、また、上記第３乃至第ｎの動
きベクトル検出回路ＤＥＴ3 〜ＤＥＴn は、上記第３乃
至第ｎの減算回路ＳＵＢ3 〜ＳＵＢn により得られた各
ブロックの３乃至ｎフィールド間の差分値を対応する画
素毎に１フィールド期間に亘って積算してそれぞれ相関
積算値表を形成し、その相関積算値の最小値の座標Ｐ
（ｘ，ｙ）を動きベクトル座標として検出する。そし
て、上記第３乃至第ｎの動きベクトル検出回路ＤＥＴ3
〜ＤＥＴn は、各相関積算値の最小値の座標Ｐ（ｘ，
ｙ）から１フィールド間の動きベクトルに変換した各動
きベクトルを算出して出力する。
きベクトル検出回路ＤＥＴ3 〜ＤＥＴn は、上記第３乃
至第ｎの減算回路ＳＵＢ3 〜ＳＵＢn により得られた各
ブロックの３乃至ｎフィールド間の差分値を対応する画
素毎に１フィールド期間に亘って積算してそれぞれ相関
積算値表を形成し、その相関積算値の最小値の座標Ｐ
（ｘ，ｙ）を動きベクトル座標として検出する。そし
て、上記第３乃至第ｎの動きベクトル検出回路ＤＥＴ3
〜ＤＥＴn は、各相関積算値の最小値の座標Ｐ（ｘ，
ｙ）から１フィールド間の動きベクトルに変換した各動
きベクトルを算出して出力する。
【００２３】上記第１乃至第ｎの動きベクトル検出回路
ＤＥＴ1 〜ＤＥＴn は、画像の動きが線形であれば、検
出期間が長いもの程動きベクトルの検出精度が高くな
り、ＤＥＴ1 ＜ＤＥＴ2 ＜・・・＜ＤＥＴn-1 ＜ＤＥＴ
n なる検出精度の各動きベクトルが得られる。
ＤＥＴ1 〜ＤＥＴn は、画像の動きが線形であれば、検
出期間が長いもの程動きベクトルの検出精度が高くな
り、ＤＥＴ1 ＜ＤＥＴ2 ＜・・・＜ＤＥＴn-1 ＜ＤＥＴ
n なる検出精度の各動きベクトルが得られる。
【００２４】そして、上記第１乃至第ｎの動きベクトル
検出回路ＤＥＴ1 〜ＤＥＴn により得られる１乃至ｎフ
ィールド間の相関積算値に基づく各動きベクトルが、上
記加速度判定回路ＡＣＪ及びセレクタＳＥＬに供給され
る。
検出回路ＤＥＴ1 〜ＤＥＴn により得られる１乃至ｎフ
ィールド間の相関積算値に基づく各動きベクトルが、上
記加速度判定回路ＡＣＪ及びセレクタＳＥＬに供給され
る。
【００２５】上記加速度判定回路ＡＣＪは、上記第１乃
至第ｎの動きベクトル検出回路ＤＥＴ1 〜ＤＥＴn によ
り得られる各動きベクトルに基づいて、画像の動きの加
速度を判定する。そして、この加速度判定回路ＡＣＪ
は、動きベクトルの１フィールド分の変動が大きい程、
短いフィールド間の差分値に基づく動きベクトルを選択
し、動きベクトルの１フィールド分の変動が小さい程、
長いフィールド間の差分値に基づく動きベクトルを選択
して出力するように上記セレクタＳＥＬを制御する。す
なわち、画像の動きが線形であった場合には、上記第１
乃至第ｎの動きベクトル検出回路ＤＥＴ1 〜ＤＥＴn に
より得られる各動きベクトルの時間的変化が少なくなる
ので、各動きベクトルの時間的変化が少なくなる程、長
いフィールド間の差分値に基づく高い精度の動きベクト
ルを選択して出力するように上記セレクタＳＥＬを制御
する。
至第ｎの動きベクトル検出回路ＤＥＴ1 〜ＤＥＴn によ
り得られる各動きベクトルに基づいて、画像の動きの加
速度を判定する。そして、この加速度判定回路ＡＣＪ
は、動きベクトルの１フィールド分の変動が大きい程、
短いフィールド間の差分値に基づく動きベクトルを選択
し、動きベクトルの１フィールド分の変動が小さい程、
長いフィールド間の差分値に基づく動きベクトルを選択
して出力するように上記セレクタＳＥＬを制御する。す
なわち、画像の動きが線形であった場合には、上記第１
乃至第ｎの動きベクトル検出回路ＤＥＴ1 〜ＤＥＴn に
より得られる各動きベクトルの時間的変化が少なくなる
ので、各動きベクトルの時間的変化が少なくなる程、長
いフィールド間の差分値に基づく高い精度の動きベクト
ルを選択して出力するように上記セレクタＳＥＬを制御
する。
【００２６】例えば、図４に示すように、画像の動きが
非線形で１フィールド毎に動きベクトルが変動する場合
には、上記第２乃至第ｎの動きベクトル検出回路ＤＥＴ
2 〜ＤＥＴn により検出された動きベクトルには多量の
誤差が含まれているので、上記第１の動きベクトル検出
回路ＤＥＴ1 により検出される１フィールド間の動きベ
クトルを選択し、画像の動きが線形である場合には、上
記第２乃至第ｎの動きベクトル検出回路ＤＥＴ2 〜ＤＥ
Ｔn により検出された動きベクトルのうちで時間的変動
の少ないものを選択して出力するように上記セレクタＳ
ＥＬを制御する。すなわち、例えば図５に示すように、
インターレース走査における第ｍフィールドの画像の画
素ＳA に対応する点が第ｍ＋４フィールドの画像の画素
ＳB に対応する位置まで移動するような画像の動きの場
合には、上記第３のベクトル検出回路ＤＥＴ3 により検
出される３フィールド間の動きベクトルが高い精度で上
記画像の動きを示すので、この３フィールド間の動きベ
クトルを換算した１フィールド間の動きベクトルを選択
して出力するように、上記セレクタＳＥＬを制御する。
非線形で１フィールド毎に動きベクトルが変動する場合
には、上記第２乃至第ｎの動きベクトル検出回路ＤＥＴ
2 〜ＤＥＴn により検出された動きベクトルには多量の
誤差が含まれているので、上記第１の動きベクトル検出
回路ＤＥＴ1 により検出される１フィールド間の動きベ
クトルを選択し、画像の動きが線形である場合には、上
記第２乃至第ｎの動きベクトル検出回路ＤＥＴ2 〜ＤＥ
Ｔn により検出された動きベクトルのうちで時間的変動
の少ないものを選択して出力するように上記セレクタＳ
ＥＬを制御する。すなわち、例えば図５に示すように、
インターレース走査における第ｍフィールドの画像の画
素ＳA に対応する点が第ｍ＋４フィールドの画像の画素
ＳB に対応する位置まで移動するような画像の動きの場
合には、上記第３のベクトル検出回路ＤＥＴ3 により検
出される３フィールド間の動きベクトルが高い精度で上
記画像の動きを示すので、この３フィールド間の動きベ
クトルを換算した１フィールド間の動きベクトルを選択
して出力するように、上記セレクタＳＥＬを制御する。
【００２７】そして、この動きベクトル検出装置１０に
より検出された動きベクトルが上記補正量発生部２０に
供給される。
より検出された動きベクトルが上記補正量発生部２０に
供給される。
【００２８】上記補正量発生部２０は、上記動きベクト
ル検出装置１０が検出した動きベクトルを手振れベクト
ルとして手振れ補正信号を形成し、この手振れ補正信号
を上記補正部３０に供給する。
ル検出装置１０が検出した動きベクトルを手振れベクト
ルとして手振れ補正信号を形成し、この手振れ補正信号
を上記補正部３０に供給する。
【００２９】また、上記補正部３０は、例えば図６に示
すように、上記補正量発生部２０から手振れ補正信号が
供給されるアドレス制御回路３１及びセレクト信号発生
回路３２と、上記アドレス制御回路３１から供給される
アドレス信号に従ってビデオデータの書き込み／読み出
しが行われるフレームメモリ３３及び周辺メモリ３４
と、上記フレームメモリ３３及び周辺メモリ３４から読
み出されるビデオデータを上記セレクト信号発生回路３
２から供給されるセレクト信号に応じて選択的に出力す
るセレクタ３５とを備えてなる。
すように、上記補正量発生部２０から手振れ補正信号が
供給されるアドレス制御回路３１及びセレクト信号発生
回路３２と、上記アドレス制御回路３１から供給される
アドレス信号に従ってビデオデータの書き込み／読み出
しが行われるフレームメモリ３３及び周辺メモリ３４
と、上記フレームメモリ３３及び周辺メモリ３４から読
み出されるビデオデータを上記セレクト信号発生回路３
２から供給されるセレクト信号に応じて選択的に出力す
るセレクタ３５とを備えてなる。
【００３０】上記フレームメモリ３２には、上記信号入
力端子１を介して供給される入力ビデオデータが順次書
き込まれる。そして、このフレームメモリ３２の読み出
しアドレスが上記手振れ補正信号により上記手振れベク
トルに応じて制御される。これにより、上記フレームメ
モリ３２からは、１フレームの入力ビデオデータが上記
手振れベクトルに応じて移動されたビデオデータが得ら
れる。そして、このフレームメモリ３２から読み出され
るビデオデータと上記周辺メモリ３３から読み出される
周辺ビデオデータとが上記セレクタ３５による選択によ
って合成され、手振れ補正処理済のビデオデータとして
信号出力端子２から出力される。
力端子１を介して供給される入力ビデオデータが順次書
き込まれる。そして、このフレームメモリ３２の読み出
しアドレスが上記手振れ補正信号により上記手振れベク
トルに応じて制御される。これにより、上記フレームメ
モリ３２からは、１フレームの入力ビデオデータが上記
手振れベクトルに応じて移動されたビデオデータが得ら
れる。そして、このフレームメモリ３２から読み出され
るビデオデータと上記周辺メモリ３３から読み出される
周辺ビデオデータとが上記セレクタ３５による選択によ
って合成され、手振れ補正処理済のビデオデータとして
信号出力端子２から出力される。
【００３１】なお、上記周辺メモリ３３には、上記セレ
クタ３５を介して出力される手振れ補正処理済のビデオ
データによる画像の補正範囲に相当する周辺部分のビデ
オデータが周辺ビデオデータとして逐次書き込まれる。
クタ３５を介して出力される手振れ補正処理済のビデオ
データによる画像の補正範囲に相当する周辺部分のビデ
オデータが周辺ビデオデータとして逐次書き込まれる。
【００３２】上述のように上記動きベクトル検出装置１
０により画像の動きベクトルを高い精度で検出すること
ができるので、この動きベクトルに基づいて手振れ補正
を行う手振れ補正装置では、高い手振れ補正精度を確保
することができ、自然な画像出力が得られる。
０により画像の動きベクトルを高い精度で検出すること
ができるので、この動きベクトルに基づいて手振れ補正
を行う手振れ補正装置では、高い手振れ補正精度を確保
することができ、自然な画像出力が得られる。
【００３３】
【発明の効果】以上の説明からも明らかなように、発明
に係る画像の動きベクトル検出装置では、入力ビデオ信
号で構成される１フィールドの画像を複数に分割した各
ブロック毎の代表点画素の画像データを縦続接続された
ｎ個の代表点メモリにそれぞれ１フィールド分記憶し、
差分検出手段により検出される現フレームのブロックの
各画素の画像データと１乃至ｎフィールド前のブロック
の代表点画素の画像データとの各差分値に基づいて、ベ
クトル検出手段により検出されるｎ種類の動きベクトル
を検出しておき、上記動きベクトル検出手段により得ら
れる各動きベクトルに基づいて画像の動きの加速度を加
速度判定手段により判定し、動きベクトルの１フィール
ド分の変動が大きい程、短いフィールド間の差分値に基
づく動きベクトルを動きベクトル選択手段により選択し
て出力するので、画像の線形な動きに対して高い精度の
動きベクトルを出力することができる。
に係る画像の動きベクトル検出装置では、入力ビデオ信
号で構成される１フィールドの画像を複数に分割した各
ブロック毎の代表点画素の画像データを縦続接続された
ｎ個の代表点メモリにそれぞれ１フィールド分記憶し、
差分検出手段により検出される現フレームのブロックの
各画素の画像データと１乃至ｎフィールド前のブロック
の代表点画素の画像データとの各差分値に基づいて、ベ
クトル検出手段により検出されるｎ種類の動きベクトル
を検出しておき、上記動きベクトル検出手段により得ら
れる各動きベクトルに基づいて画像の動きの加速度を加
速度判定手段により判定し、動きベクトルの１フィール
ド分の変動が大きい程、短いフィールド間の差分値に基
づく動きベクトルを動きベクトル選択手段により選択し
て出力するので、画像の線形な動きに対して高い精度の
動きベクトルを出力することができる。
【００３４】従って、本発明によれば、高精度で画像の
動きベクトルを検出することのできる画像の動きベクト
ル検出装置を提供することができ、ハンディタイプのビ
デオカメラなどにおける高性能の手振れ補正を可能にす
ることができる。
動きベクトルを検出することのできる画像の動きベクト
ル検出装置を提供することができ、ハンディタイプのビ
デオカメラなどにおける高性能の手振れ補正を可能にす
ることができる。
【図１】本発明に係る画像の動きベクトル検出装置を設
けた手振れ補正装置の構成を示すブロック図である。
けた手振れ補正装置の構成を示すブロック図である。
【図２】上記動きベクトル検出装置における画面のブロ
ック分割の状態を示す図である。
ック分割の状態を示す図である。
【図３】上記ブロック分割された画面の１ブロックの構
造を示す図である。
造を示す図である。
【図４】上記動きベクトル検出装置により検出した動き
ベクトルを示す図である。
ベクトルを示す図である。
【図５】上記動きベクトル検出装置により検出される動
きベクトルの１例を説明するための図である。
きベクトルの１例を説明するための図である。
【図６】上記動きベクトル検出装置を設けた手振れ補正
装置の補正部の構成を示すブロック図である。
装置の補正部の構成を示すブロック図である。
１０・・・・・・・・・・動きベクトル検出装置 ＦＭ1 〜ＦＭn ・・・・・代表点メモリ ＳＵＢ1 〜ＳＵＢn ・・・減算回路 ＤＥＴ1 〜ＤＥＴn ・・・動きベクトル検出回路 ＡＣＪ・・・・・・・・・加速度判定回路 ＳＥＬ・・・・・・・・・セレクタ
───────────────────────────────────────────────────── フロントページの続き (72)発明者 堀士 賢 東京都品川区北品川６丁目７番35号 ソ ニー株式会社内 (72)発明者 橋野 司 東京都品川区北品川６丁目７番35号 ソ ニー株式会社内 (56)参考文献 特開 昭61−237581（ＪＰ，Ａ) (58)調査した分野(Int.Cl.7，ＤＢ名) H04N 5/222 - 5/257
Claims (1)
- 【請求項１】 入力ビデオ信号で構成される１フィール
ドの画像を複数に分割した各ブロック毎の代表点画素の
画像データをそれぞれ１フィールド分記憶する縦続接続
されたｎ個の代表点メモリと、 現フレームのブロックの各画素の画像データと上記各代
表点メモリから読み出される１乃至ｎフィールド前のブ
ロックの代表点画素の画像データとの差分を検出するｎ
個の差分検出手段と、 上記各差分検出手段によりに検出された１乃至ｎフィー
ルド間の各差分値に基づいて動きベクトルを検出するｎ
個の動きベクトル検出手段と、 上記動きベクトル検出手段により得られる各動きベクト
ルに基づいて、画像の動きの加速度を判定する加速度判
定手段と、 上記動きベクトル検出手段により得られる各動きベクト
ルを上記加速度判定手段による判定出力に応じて選択的
に出力する動きベクトル選択手段とを備え、 動きベクトルの１フィールド分の変動が大きい程、短い
フィールド間の差分値に基づく動きベクトルを上記動き
ベクトル選択手段により選択して出力することを特徴と
する画像の動きベクトル検出装置。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP29048291A JP3196258B2 (ja) | 1991-10-11 | 1991-10-11 | 画像の動きベクトル検出装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP29048291A JP3196258B2 (ja) | 1991-10-11 | 1991-10-11 | 画像の動きベクトル検出装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPH05110933A JPH05110933A (ja) | 1993-04-30 |
| JP3196258B2 true JP3196258B2 (ja) | 2001-08-06 |
Family
ID=17756593
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP29048291A Expired - Lifetime JP3196258B2 (ja) | 1991-10-11 | 1991-10-11 | 画像の動きベクトル検出装置 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP3196258B2 (ja) |
Families Citing this family (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP4529360B2 (ja) * | 2003-02-28 | 2010-08-25 | 沖電気工業株式会社 | 体感装置、モーション信号の生成方法およびプログラム |
| JP5257248B2 (ja) | 2009-06-03 | 2013-08-07 | ソニー株式会社 | 画像処理装置および方法、ならびに画像表示装置 |
| GB2500909A (en) * | 2012-04-04 | 2013-10-09 | Snell Ltd | Selecting motion vectors on the basis of acceleration |
-
1991
- 1991-10-11 JP JP29048291A patent/JP3196258B2/ja not_active Expired - Lifetime
Also Published As
| Publication number | Publication date |
|---|---|
| JPH05110933A (ja) | 1993-04-30 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR100233553B1 (ko) | 비디오신호 처리장치 | |
| US5060074A (en) | Video imaging apparatus | |
| KR0175406B1 (ko) | 고해상도의 전자식 영상확대장치 및 그 방법 | |
| JP3200889B2 (ja) | 画像の振動補正装置 | |
| KR100236682B1 (ko) | 화상 흔들림 보정 장치 | |
| JP3196258B2 (ja) | 画像の動きベクトル検出装置 | |
| JP3465264B2 (ja) | ビデオデータの動き検出装置および方法 | |
| JP3271271B2 (ja) | 画像の動きベクトル検出装置、画像の動きベクトル検出方法、画像の振動補正装置及び画像の振動補正方法 | |
| US5502483A (en) | Video camera apparatus | |
| JP3257035B2 (ja) | 画像の振動補正装置及び方法 | |
| JP3303312B2 (ja) | 画像の振動補正装置及び画像の振動補正方法 | |
| JPH01174076A (ja) | 撮影装置 | |
| US7053946B2 (en) | Video camera imager and imager IC capable of plural kinds of double-image processings | |
| JP3225598B2 (ja) | 画像の手振れ検出装置 | |
| JP3200888B2 (ja) | 画像の振動補正装置 | |
| JP3303311B2 (ja) | 画像の振動補正装置及び画像の振動補正方法 | |
| JP3395186B2 (ja) | ビデオカメラおよびビデオカメラの画像の振動表示方法 | |
| JP3303310B2 (ja) | 画像の振動補正装置及び画像の振動補正方法 | |
| JP3200900B2 (ja) | 画像の手振れ判定装置 | |
| JP3271273B2 (ja) | 画像の振動判定装置、画像の振動補正装置、画像の振動判定方法及び画像の振動補正方法 | |
| JP3221052B2 (ja) | 画像の手振れ検出装置 | |
| JPH08279949A (ja) | 電子ズーム処理装置および電子ズーム処理方法 | |
| JPH04296176A (ja) | 手振れ補正回路及びその方法 | |
| JP3252417B2 (ja) | 画像の手振れ補正装置 | |
| JP3252416B2 (ja) | 画像の手振れ補正装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20010508 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20080608 Year of fee payment: 7 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090608 Year of fee payment: 8 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100608 Year of fee payment: 9 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100608 Year of fee payment: 9 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110608 Year of fee payment: 10 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110608 Year of fee payment: 10 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120608 Year of fee payment: 11 |
|
| EXPY | Cancellation because of completion of term | ||
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120608 Year of fee payment: 11 |