JPH0686149A - 動きベクトル検出装置及びビデオカメラ - Google Patents
動きベクトル検出装置及びビデオカメラInfo
- Publication number
- JPH0686149A JPH0686149A JP25594192A JP25594192A JPH0686149A JP H0686149 A JPH0686149 A JP H0686149A JP 25594192 A JP25594192 A JP 25594192A JP 25594192 A JP25594192 A JP 25594192A JP H0686149 A JPH0686149 A JP H0686149A
- Authority
- JP
- Japan
- Prior art keywords
- motion vector
- representative point
- change
- area
- predetermined value
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Adjustment Of Camera Lenses (AREA)
Abstract
(57)【要約】
【目的】手振れによる動きベクトルを正しく検出でき、
動きベクトルを使って、小型、軽量化が図れ、然も、正
確に手振れ補正を行なえるビデオカメラを実現する。 【構成】ラプラシアンを算出して、代表点の周辺の画像
の絵柄の変化が所定値より大きいかどうかを判断する。
ラプラシアンが所定値より大きい代表点を代表点メモリ
２３に取り込む。代表点メモリに取り込まれた代表点を
使って、動きベクトルを求める。これにより、動きベク
トルの信頼性が向上する。
動きベクトルを使って、小型、軽量化が図れ、然も、正
確に手振れ補正を行なえるビデオカメラを実現する。 【構成】ラプラシアンを算出して、代表点の周辺の画像
の絵柄の変化が所定値より大きいかどうかを判断する。
ラプラシアンが所定値より大きい代表点を代表点メモリ
２３に取り込む。代表点メモリに取り込まれた代表点を
使って、動きベクトルを求める。これにより、動きベク
トルの信頼性が向上する。
Description
【０００１】
【産業上の利用分野】この発明は、動きベクトルの検出
装置及び手振れ補正を行うビデオカメラに関する。
装置及び手振れ補正を行うビデオカメラに関する。
【０００２】
【従来の技術】ビデオカメラの小型軽量化が進み、ビデ
オカメラが大変扱い易くなってきている。しかしなが
ら、ビデオカメラの小型、軽量化に伴い、手振れの問題
が生じ易くなってきている。そこで、手振れ補正機能を
備えたビデオカメラが登場してきている。
オカメラが大変扱い易くなってきている。しかしなが
ら、ビデオカメラの小型、軽量化に伴い、手振れの問題
が生じ易くなってきている。そこで、手振れ補正機能を
備えたビデオカメラが登場してきている。
【０００３】このようなビデオカメラの手振れ補正方式
のひとつに、撮像信号をフィールドメモリに蓄え、１画
面の撮像信号を拡大補間すると共に、撮像信号から動き
ベクトルを検出し、この動きベクトルに応じて、拡大補
間された画面の読み出し位置をシフトして、手振れ補正
を行うようにしたものがある。このような方式は、カメ
ラの動き（手振れ量）を検出するための角速度センサが
不要なので、小型、軽量化を行う上で有利である。
のひとつに、撮像信号をフィールドメモリに蓄え、１画
面の撮像信号を拡大補間すると共に、撮像信号から動き
ベクトルを検出し、この動きベクトルに応じて、拡大補
間された画面の読み出し位置をシフトして、手振れ補正
を行うようにしたものがある。このような方式は、カメ
ラの動き（手振れ量）を検出するための角速度センサが
不要なので、小型、軽量化を行う上で有利である。
【０００４】動きベクトルの検出方法としては、従来、
代表点マッチングによる動きベクトル検出方法が採用さ
れている。代表点マッチング検出方法は、代表点と、次
フレームの同ブロック内の代表点から離れた画素との相
関値を求め、これらを累積加算していき、動きベクトル
を求めるものである。ビデオカメラの手振れ補正では、
１画面が複数（例えば４つ）の領域に分割され、各領域
毎に動きベクトルが求められる。これら各領域の動きベ
クトルから、実際の手振れによる動きが判断される。
代表点マッチングによる動きベクトル検出方法が採用さ
れている。代表点マッチング検出方法は、代表点と、次
フレームの同ブロック内の代表点から離れた画素との相
関値を求め、これらを累積加算していき、動きベクトル
を求めるものである。ビデオカメラの手振れ補正では、
１画面が複数（例えば４つ）の領域に分割され、各領域
毎に動きベクトルが求められる。これら各領域の動きベ
クトルから、実際の手振れによる動きが判断される。
【０００５】
【発明が解決しようとする課題】このような従来の代表
点マッチングによる動きベクトル検出は、代表点が固定
点であるため、代表点周辺の画像信号のアクティビティ
に検出精度が左右される。すなわち、絵柄のコントラス
トが小さい場合や、被写体が動いている場合には、動き
ベクトルを誤検出することがある。
点マッチングによる動きベクトル検出は、代表点が固定
点であるため、代表点周辺の画像信号のアクティビティ
に検出精度が左右される。すなわち、絵柄のコントラス
トが小さい場合や、被写体が動いている場合には、動き
ベクトルを誤検出することがある。
【０００６】図８は、代表点マッチングにより得られる
相関値の偏位状態を示すものである。図８Ａはコントラ
ストがはっきりしている場合である。この場合には、図
８Ａに示すように、相関値の最小値がはっきり分かり、
動きベクトルの検出精度は高い。図８Ｂはコントラスト
がはっきりしていない場合である。この場合には、図８
Ｂに示すように、相関値の最小値がはっきり分からず、
動きベクトルの検出精度は良くない。図８Ｃは被写体が
動いたような場合である。この場合には、図８Ｃに示す
ように、相関値の谷が複数生じ、手振れによる動きベク
トルがどれなのかが判断しにくい。
相関値の偏位状態を示すものである。図８Ａはコントラ
ストがはっきりしている場合である。この場合には、図
８Ａに示すように、相関値の最小値がはっきり分かり、
動きベクトルの検出精度は高い。図８Ｂはコントラスト
がはっきりしていない場合である。この場合には、図８
Ｂに示すように、相関値の最小値がはっきり分からず、
動きベクトルの検出精度は良くない。図８Ｃは被写体が
動いたような場合である。この場合には、図８Ｃに示す
ように、相関値の谷が複数生じ、手振れによる動きベク
トルがどれなのかが判断しにくい。
【０００７】したがって、この発明の目的は、手振れに
よる動きベクトルを正しく検出できる動きベクトル検出
装置を提供することにある。
よる動きベクトルを正しく検出できる動きベクトル検出
装置を提供することにある。
【０００８】この発明の他の目的は、小型、軽量化が図
れ、然も、正確に手振れ補正を行なえるビデオカメラを
提供することにある。
れ、然も、正確に手振れ補正を行なえるビデオカメラを
提供することにある。
【０００９】
【発明が解決しようとする課題】請求項１に係わる発明
は、代表点の周辺の画像の絵柄の変化を検出し、代表点
の周辺の画像の絵柄の変化が所定値より大きいかどうか
を判断し、周辺の画像の絵柄の変化が所定値より大きい
代表点を用いて動きベクトルを求めるようにした動きベ
クトル検出装置である。
は、代表点の周辺の画像の絵柄の変化を検出し、代表点
の周辺の画像の絵柄の変化が所定値より大きいかどうか
を判断し、周辺の画像の絵柄の変化が所定値より大きい
代表点を用いて動きベクトルを求めるようにした動きベ
クトル検出装置である。
【００１０】請求項２に係わる発明では、代表点の位置
は予め定められている。
は予め定められている。
【００１１】請求項３に係わる発明は、画面を複数の領
域に分割し、各領域での代表点の周辺の画像の絵柄の変
化を検出し、各領域での代表点の周辺の画像の絵柄の変
化が所定値より大きいかどうかを判断し、周辺の画像の
絵柄の変化が所定値より大きい代表点を用いて各領域毎
に動きベクトルを求めるようにした動きベクトル検出装
置を設け、動きベクトル検出装置により求められる画面
の動きに応じて手振れ補正を行うようにしたビデオカメ
ラである。
域に分割し、各領域での代表点の周辺の画像の絵柄の変
化を検出し、各領域での代表点の周辺の画像の絵柄の変
化が所定値より大きいかどうかを判断し、周辺の画像の
絵柄の変化が所定値より大きい代表点を用いて各領域毎
に動きベクトルを求めるようにした動きベクトル検出装
置を設け、動きベクトル検出装置により求められる画面
の動きに応じて手振れ補正を行うようにしたビデオカメ
ラである。
【００１２】請求項４に係わる発明は、画面を複数の領
域に分割し、各領域での代表点の周辺の画像の絵柄の変
化を検出し、各領域での代表点の周辺の画像の絵柄の変
化が所定値より大きいかどうかを判断し、周辺の画像の
絵柄の変化が所定値より大きい代表点を用いて上記各領
域毎に動きベクトルを求めるようにした動きベクトル検
出装置と、水平方向又は垂直方向のカメラの動きを検出
する角速度センサとを設け、動きベクトル検出装置によ
り求められる動きベクトル及び角速度センサの出力に応
じて手振れ補正を行うようにしたビデオカメラである。
域に分割し、各領域での代表点の周辺の画像の絵柄の変
化を検出し、各領域での代表点の周辺の画像の絵柄の変
化が所定値より大きいかどうかを判断し、周辺の画像の
絵柄の変化が所定値より大きい代表点を用いて上記各領
域毎に動きベクトルを求めるようにした動きベクトル検
出装置と、水平方向又は垂直方向のカメラの動きを検出
する角速度センサとを設け、動きベクトル検出装置によ
り求められる動きベクトル及び角速度センサの出力に応
じて手振れ補正を行うようにしたビデオカメラである。
【００１３】
【作用】代表点についてのラプラシアンを求め、周辺画
素のアクティビティが高い代表点だけを用いて動きベク
トルを求めるようにしているので、動きベクトルを正確
に検出できる。
素のアクティビティが高い代表点だけを用いて動きベク
トルを求めるようにしているので、動きベクトルを正確
に検出できる。
【００１４】動きベクトル検出回路に加えて、水平方向
又は垂直方向の角速度センサが設けられているので、複
数の領域からの動きベクトルが異なる場合にも、手振れ
による動きベクトルを正確に検出することができる。
又は垂直方向の角速度センサが設けられているので、複
数の領域からの動きベクトルが異なる場合にも、手振れ
による動きベクトルを正確に検出することができる。
【００１５】
【実施例】以下、この発明の一実施例について、図面を
参照して説明する。図１は、この発明が適用されたビデ
オカメラの一例である。図１において、レンズ１、アイ
リス２を介された被写体像光は、ＣＣＤ撮像素子３の受
光面に結像される。ＣＣＤ撮像素子３の出力がサンプル
ホールド回路４を介して、Ａ／Ｄコンバータ５に供給さ
れる。Ａ／Ｄコンバータ５で、ＣＣＤ撮像素子３からの
撮像信号がディジタル化される。Ａ／Ｄコンバータ５の
出力がカメラ信号処理６に供給される。
参照して説明する。図１は、この発明が適用されたビデ
オカメラの一例である。図１において、レンズ１、アイ
リス２を介された被写体像光は、ＣＣＤ撮像素子３の受
光面に結像される。ＣＣＤ撮像素子３の出力がサンプル
ホールド回路４を介して、Ａ／Ｄコンバータ５に供給さ
れる。Ａ／Ｄコンバータ５で、ＣＣＤ撮像素子３からの
撮像信号がディジタル化される。Ａ／Ｄコンバータ５の
出力がカメラ信号処理６に供給される。
【００１６】カメラ信号処理回路６は、撮像信号を輝度
信号とクロマ信号とに分離し、必要な信号処理を行う。
カメラ信号処理回路６の出力が電子ズーム回路９に供給
されると共に、動きベクトル検出回路７に供給される。
信号とクロマ信号とに分離し、必要な信号処理を行う。
カメラ信号処理回路６の出力が電子ズーム回路９に供給
されると共に、動きベクトル検出回路７に供給される。
【００１７】動きベクトル検出回路７は、代表点マッチ
ング法により動きベクトルを検出する。そして、この発
明の一実施例では、後に詳述するように、代表点周囲の
絵柄の変化が大きいかどうかを判断し、周囲の絵柄の変
化が所定値より大きい場合のみ代表点として用いるよう
にしている。これにより、動きベクトルの検出誤差が少
なくなる。
ング法により動きベクトルを検出する。そして、この発
明の一実施例では、後に詳述するように、代表点周囲の
絵柄の変化が大きいかどうかを判断し、周囲の絵柄の変
化が所定値より大きい場合のみ代表点として用いるよう
にしている。これにより、動きベクトルの検出誤差が少
なくなる。
【００１８】電子ズーム回路９は、１フィールド分の撮
像信号をフィールドメモリ１０に蓄える。そして、この
フィールドメモリ１０に蓄えられた信号を拡大補間す
る。この拡大補間された信号の読み出し位置は、コント
ローラ８により制御される。
像信号をフィールドメモリ１０に蓄える。そして、この
フィールドメモリ１０に蓄えられた信号を拡大補間す
る。この拡大補間された信号の読み出し位置は、コント
ローラ８により制御される。
【００１９】動きベクトル検出回路７の出力がコントロ
ーラ８に供給される。コントローラ８は、動きベクトル
検出回路７で検出された動きベクトルに基づいて、手振
れの補正量を求める。このようにして求められた補正量
に基づいて、電子ズーム９で拡大補間画面の水平方向及
び垂直方向の読み出し位置が制御される。このように、
拡大補間画面の読み出し位置を、動きベクトルに応じて
シフトすることで、手振れ補正がなされる。そして、手
振れ補正された撮像信号は、出力端子１１から出力され
る。
ーラ８に供給される。コントローラ８は、動きベクトル
検出回路７で検出された動きベクトルに基づいて、手振
れの補正量を求める。このようにして求められた補正量
に基づいて、電子ズーム９で拡大補間画面の水平方向及
び垂直方向の読み出し位置が制御される。このように、
拡大補間画面の読み出し位置を、動きベクトルに応じて
シフトすることで、手振れ補正がなされる。そして、手
振れ補正された撮像信号は、出力端子１１から出力され
る。
【００２０】この発明の一実施例では、代表点マッチン
グ法により動きベクトルが求められる。この代表点マッ
チング法は、以下に示すようにして動きベクトルを求め
るものである。
グ法により動きベクトルが求められる。この代表点マッ
チング法は、以下に示すようにして動きベクトルを求め
るものである。
【００２１】すなわち、図２に示すように、１画面が例
えば４個の領域Ａ１〜Ａ４に分割される。１領域内は、
（Ｋ×Ｌ）ブロックから構成される。各ブロック内に、
代表点Ｐ、Ｐ、…が存在する。このブロックは、代表点
が１フィールド内に手振れにより動く可能性のある範囲
である。
えば４個の領域Ａ１〜Ａ４に分割される。１領域内は、
（Ｋ×Ｌ）ブロックから構成される。各ブロック内に、
代表点Ｐ、Ｐ、…が存在する。このブロックは、代表点
が１フィールド内に手振れにより動く可能性のある範囲
である。
【００２２】図２に示すように、第（ｋ，ｌ）ブロック
内に含まれるｎフィールドの代表点と、同ブロック内の
（ｉ，ｊ）だけ離れた（ｎ＋１）フィールドのブロック
内の画素との相関値ｐ( k,l)（ｉ，ｊ）を求めると、以
下のようになる。
内に含まれるｎフィールドの代表点と、同ブロック内の
（ｉ，ｊ）だけ離れた（ｎ＋１）フィールドのブロック
内の画素との相関値ｐ( k,l)（ｉ，ｊ）を求めると、以
下のようになる。
【数１】
【００２３】領域内全体の相関値Ｐ（ｉ，ｊ）は、領域
内の全てのブロック渡って、各偏位毎に累積加算する。
すなわち、
内の全てのブロック渡って、各偏位毎に累積加算する。
すなわち、
【数２】 として求められる。
【００２４】このように、代表点を用いて動きベクトル
を検出する場合、代表点の周辺の画像のアクティビティ
が乏しいと、動きベクトルを正確に検出できない。そこ
で、この発明の一実施例では、予め決められた代表点に
ついてのラプラシアンが求められ、このラプラシアンが
所定値以上となる場合のみ代表点として採用し、ラプラ
シアンが所定値以下なら、その代表点は採用されないよ
うにしている。ラプラシアンが所定値以上となる場合の
み代表点として採用し、ラプラシアンが所定値以下なら
その代表点は採用されないようにすれば、より正確に動
きベクトルを検出できる。
を検出する場合、代表点の周辺の画像のアクティビティ
が乏しいと、動きベクトルを正確に検出できない。そこ
で、この発明の一実施例では、予め決められた代表点に
ついてのラプラシアンが求められ、このラプラシアンが
所定値以上となる場合のみ代表点として採用し、ラプラ
シアンが所定値以下なら、その代表点は採用されないよ
うにしている。ラプラシアンが所定値以上となる場合の
み代表点として採用し、ラプラシアンが所定値以下なら
その代表点は採用されないようにすれば、より正確に動
きベクトルを検出できる。
【００２５】ラプラシアンＶ2 は以下のように算出され
る。
る。
【数３】 そして、このラプラシアンが所定値以上かどうかが判断
される。
される。
【００２６】この動きベクトルの検出処理について、図
３のフローチャートを参照しながら説明する。
３のフローチャートを参照しながら説明する。
【００２７】ステップ５１〜５５は、代表点についての
ラプラシアンを求め、このラプラシアンが所定値以上と
なる代表点を、メモリに格納する処理をするものであ
る。
ラプラシアンを求め、このラプラシアンが所定値以上と
なる代表点を、メモリに格納する処理をするものであ
る。
【００２８】（１〜Ｍ）の全ての領域（Ａ１〜Ａ４）に
ついて代表点を格納したかが判断され（ステップ５
１）、全ての領域についてまだ代表点を格納していなけ
れば、その領域の（１〜Ｋ×Ｌ）の全ての代表点につい
てラプラシアンを求め終えたかが判断され（ステップ５
２）、その領域の全ての代表点についてまだラプラシア
ンを求め終えていなければ、その領域の代表点について
のラプラシアンＶ2 が求められる（ステップ５３）。ラ
プラシアンが所定値α以上かどうかが判断される（ステ
ップ５４）。ラプラシアンが所定値α以上なら代表点が
メモリに格納され（ステップ５５）、ステップ５２に戻
される。ラプラシアンが所定値αに達していなければ、
代表点がメモリに格納されずに、ステップ５２に戻され
る。
ついて代表点を格納したかが判断され（ステップ５
１）、全ての領域についてまだ代表点を格納していなけ
れば、その領域の（１〜Ｋ×Ｌ）の全ての代表点につい
てラプラシアンを求め終えたかが判断され（ステップ５
２）、その領域の全ての代表点についてまだラプラシア
ンを求め終えていなければ、その領域の代表点について
のラプラシアンＶ2 が求められる（ステップ５３）。ラ
プラシアンが所定値α以上かどうかが判断される（ステ
ップ５４）。ラプラシアンが所定値α以上なら代表点が
メモリに格納され（ステップ５５）、ステップ５２に戻
される。ラプラシアンが所定値αに達していなければ、
代表点がメモリに格納されずに、ステップ５２に戻され
る。
【００２９】ステップ５２〜５５を繰り返すことによ
り、その領域の全ての代表点についてのラプラシアンが
求められる。ステップ５２で、その領域の全ての代表点
についてラプラシアンを求め終えたと判断されたら、ス
テップ５１に行く。そして、ステップ５２〜５５を繰り
返すことにより、次の領域の全ての代表点についてのラ
プラシアンが求められる。ステップ５１で、全ての領域
で代表点が格納されたと判断されたら、ステップ５６に
進む。
り、その領域の全ての代表点についてのラプラシアンが
求められる。ステップ５２で、その領域の全ての代表点
についてラプラシアンを求め終えたと判断されたら、ス
テップ５１に行く。そして、ステップ５２〜５５を繰り
返すことにより、次の領域の全ての代表点についてのラ
プラシアンが求められる。ステップ５１で、全ての領域
で代表点が格納されたと判断されたら、ステップ５６に
進む。
【００３０】ステップ５６〜５９は、メモリに格納され
た代表点を用いて、動きベクトルを算出する処理をする
ものである。メモリに格納された代表点は、ラプラシア
ンが所定値以上となる。
た代表点を用いて、動きベクトルを算出する処理をする
ものである。メモリに格納された代表点は、ラプラシア
ンが所定値以上となる。
【００３１】相関の最小の相関値をとる偏位を全ての領
域について求め終えたかが判断され（ステップ５６）、
相関の最小の相関値をとる偏位を全ての領域について求
め終えていなければ、差分値の累積加算を（１〜Ｋ×
Ｌ）の全てのブロックについて行ったかどうかが判断さ
れ（ステップ５７）、差分値の累積加算をまだ全てのブ
ロックについて行っていなければ、代表点と次フィール
ドのブロック内の画素（ｉ，ｊ）との差分が求められ、
この差分が累積加算される（ステップ５８）。ステップ
５７〜５８を繰り返すことにより、その領域の全てのブ
ロックについて差分値の累積が求められる。その領域の
全てのブロックについて差分値の累積が求められたら、
相関の最小の相関値が求められ、その領域についての動
きベクトルが得られる（ステップ５９）。そして、ステ
ップ５６から５９を繰り返すことにより、全ての領域に
ついて動きベクトルが求められる。
域について求め終えたかが判断され（ステップ５６）、
相関の最小の相関値をとる偏位を全ての領域について求
め終えていなければ、差分値の累積加算を（１〜Ｋ×
Ｌ）の全てのブロックについて行ったかどうかが判断さ
れ（ステップ５７）、差分値の累積加算をまだ全てのブ
ロックについて行っていなければ、代表点と次フィール
ドのブロック内の画素（ｉ，ｊ）との差分が求められ、
この差分が累積加算される（ステップ５８）。ステップ
５７〜５８を繰り返すことにより、その領域の全てのブ
ロックについて差分値の累積が求められる。その領域の
全てのブロックについて差分値の累積が求められたら、
相関の最小の相関値が求められ、その領域についての動
きベクトルが得られる（ステップ５９）。そして、ステ
ップ５６から５９を繰り返すことにより、全ての領域に
ついて動きベクトルが求められる。
【００３２】図４は、このようにして動きベクトルを検
出する動きベクトル検出回路の具体例である。図４にお
いて、入力端子２１にビデオ信号が供給される。このビ
デオ信号が代表点抽出回路２２に供給される。代表点抽
出回路２２は、予め決められた代表点についてのラプラ
シアンを求め、このラプラシアンが所定値以上となる場
合に、代表点として抽出するものである。 ラプラシア
ンが所定値以上の場合にはその代表点が代表点メモリ２
３に送られ、代表点メモリ２３にはラプラシアンが所定
値以上となる代表点のみが蓄えられる。
出する動きベクトル検出回路の具体例である。図４にお
いて、入力端子２１にビデオ信号が供給される。このビ
デオ信号が代表点抽出回路２２に供給される。代表点抽
出回路２２は、予め決められた代表点についてのラプラ
シアンを求め、このラプラシアンが所定値以上となる場
合に、代表点として抽出するものである。 ラプラシア
ンが所定値以上の場合にはその代表点が代表点メモリ２
３に送られ、代表点メモリ２３にはラプラシアンが所定
値以上となる代表点のみが蓄えられる。
【００３３】代表点メモリ２３の出力が差分演算回路２
４に供給される。差分演算回路２４で、代表点とその周
囲の画素との差分が求められる。この差分演算回路２４
の出力が相関メモリ２５に供給され、代表点と次フィー
ルドのその周囲の画素との差分が累積される。相関メモ
リ２５の出力が動き量検出回路２６に供給される。動き
量検出回路２６で、代表点と次フィールドのその周囲の
画素との差分値の累積から、動きベクトルが求められ
る。この求められた動きベクトルが出力端子２７から出
力される。
４に供給される。差分演算回路２４で、代表点とその周
囲の画素との差分が求められる。この差分演算回路２４
の出力が相関メモリ２５に供給され、代表点と次フィー
ルドのその周囲の画素との差分が累積される。相関メモ
リ２５の出力が動き量検出回路２６に供給される。動き
量検出回路２６で、代表点と次フィールドのその周囲の
画素との差分値の累積から、動きベクトルが求められ
る。この求められた動きベクトルが出力端子２７から出
力される。
【００３４】このように、各領域毎に動きベクトルを検
出すると、各領域から得られる動きベクトルが異なるよ
うな場合がある。これらの動きベクトルの中から、どの
動きベクトルが手振れによるものかを正しく判断するこ
とは困難である。
出すると、各領域から得られる動きベクトルが異なるよ
うな場合がある。これらの動きベクトルの中から、どの
動きベクトルが手振れによるものかを正しく判断するこ
とは困難である。
【００３５】図５は、この発明の他の実施例を示し、こ
の実施例では、各領域から得られる動きベクトルの中か
らどの動きベクトルが手振れによるものかを正しく判断
するために、一方向（例えばＶ方向）の角速度センサ９
が設けられる。この角速度センサ９の出力が遅延回路１
２を介して、コントローラ８に供給される。この角速度
センサ９の精度は、一画素程度の分解能があれば十分で
ある。コントローラ８は、動きベクトル検出回路７で検
出された動きベクトルと、角速度センサ９の出力を基
に、手振れによる動きベクトルを判断する。他の構成に
ついては、前述の一実施例と同様である。
の実施例では、各領域から得られる動きベクトルの中か
らどの動きベクトルが手振れによるものかを正しく判断
するために、一方向（例えばＶ方向）の角速度センサ９
が設けられる。この角速度センサ９の出力が遅延回路１
２を介して、コントローラ８に供給される。この角速度
センサ９の精度は、一画素程度の分解能があれば十分で
ある。コントローラ８は、動きベクトル検出回路７で検
出された動きベクトルと、角速度センサ９の出力を基
に、手振れによる動きベクトルを判断する。他の構成に
ついては、前述の一実施例と同様である。
【００３６】いま、４つの領域Ａ１〜Ａ４から、図６に
示すように動きベクトルが得られたとする。図６におい
て、領域Ａ１、Ａ３、Ａ４の動きベクトルが全て
（Ｖ1 ，Ｈ1 ）であり、領域Ａ２の動きベクトルが（Ｖ
2 ，Ｈ2 ）でこれらとは異なっているとする。そして、
角速度センサ９から得れる垂直方向の動きがＶ2 と略等
しいとする。
示すように動きベクトルが得られたとする。図６におい
て、領域Ａ１、Ａ３、Ａ４の動きベクトルが全て
（Ｖ1 ，Ｈ1 ）であり、領域Ａ２の動きベクトルが（Ｖ
2 ，Ｈ2 ）でこれらとは異なっているとする。そして、
角速度センサ９から得れる垂直方向の動きがＶ2 と略等
しいとする。
【００３７】この場合、例えば多数決処理により手振れ
の動きベクトルを決定すると、手振れによる動きベクト
ルは（Ｖ1 ，Ｈ1 ）と判断される。これに対して、この
実施例では、角速度センサ９により垂直方向の動きがＶ
2 であることが分かっているので、領域Ａ１、Ａ３、Ａ
４の動きベクトルは信頼性が無く、領域Ａ２の動きベク
トルが（Ｖ2 ，Ｈ2 ）信頼性が高いと判断できる。した
がって、手振れによる動きベクトルは（Ｖ2 ，Ｈ2 ）と
判断される。
の動きベクトルを決定すると、手振れによる動きベクト
ルは（Ｖ1 ，Ｈ1 ）と判断される。これに対して、この
実施例では、角速度センサ９により垂直方向の動きがＶ
2 であることが分かっているので、領域Ａ１、Ａ３、Ａ
４の動きベクトルは信頼性が無く、領域Ａ２の動きベク
トルが（Ｖ2 ，Ｈ2 ）信頼性が高いと判断できる。した
がって、手振れによる動きベクトルは（Ｖ2 ，Ｈ2 ）と
判断される。
【００３８】上述のように、少なくとも一方向の角速度
センサを設ければ、各領域から得られる動きベクトルの
中からどの動きベクトルが手振れによるものかを確実に
判断できる。また、角速度センサを追加する他に、図７
に示すように、代表点マッチングにより得られる相関値
の偏位状態から、動きベクトルの確からしさを判別する
ことができる。
センサを設ければ、各領域から得られる動きベクトルの
中からどの動きベクトルが手振れによるものかを確実に
判断できる。また、角速度センサを追加する他に、図７
に示すように、代表点マッチングにより得られる相関値
の偏位状態から、動きベクトルの確からしさを判別する
ことができる。
【００３９】すなわち、図７に示す相関値の偏位状態を
示すグラフにおいて、平均値、Ａｖ、最小値Ｍｉｎ、傾
きθをパラメータとすると、
示すグラフにおいて、平均値、Ａｖ、最小値Ｍｉｎ、傾
きθをパラメータとすると、
【００４０】ルール１：（最初値／平均値）が小さけれ
ば、この領域で求まる動きベクトルは確からしい
ば、この領域で求まる動きベクトルは確からしい
【００４１】ルール２：（傾き）が大きければ、この領
域で求まる動きベクトルは確からしい
域で求まる動きベクトルは確からしい
【００４２】と判断できる。そこで、これらのルールに
基づいてメンバーシップ関数を作成して、動きベクトル
の確からしさを判断できる。
基づいてメンバーシップ関数を作成して、動きベクトル
の確からしさを判断できる。
【００４３】
【発明の効果】この発明によれば、代表点についてのラ
プラシアンを求め、周辺画素のアクティビティが高い代
表点だけを用いて動きベクトルを求めるようにしている
ので、動きベクトルを正確に検出できる。
プラシアンを求め、周辺画素のアクティビティが高い代
表点だけを用いて動きベクトルを求めるようにしている
ので、動きベクトルを正確に検出できる。
【００４４】この発明によれば、動きベクトル検出回路
に加えて、水平方向又は垂直方向の角速度センサが設け
られているので、複数の領域からの動きベクトルが異な
る場合にも、手振れによる動きベクトルを正確に検出す
ることができる。
に加えて、水平方向又は垂直方向の角速度センサが設け
られているので、複数の領域からの動きベクトルが異な
る場合にも、手振れによる動きベクトルを正確に検出す
ることができる。
【図１】この発明の一実施例のブロック図である。
【図２】この発明の一実施例の説明に用いる略線図であ
る。
る。
【図３】この発明の一実施例の説明に用いるフローチャ
ートである。
ートである。
【図４】この発明の一実施例の説明に用いるブロック図
である。
である。
【図５】この発明の他の実施例のブロック図である。
【図６】この発明の他の実施例の説明に用いる略線図で
ある。
ある。
【図７】この発明の更に他の実施例の説明に用いるグラ
フである。
フである。
【図８】従来の動きベクトル検出回路の説明に用いるグ
ラフである。
ラフである。
７ 動きベクトル検出回路 ２２ 代表点抽出回路 ２３ 代表点メモリ
Claims (4)
- 【請求項１】 代表点の周辺の画像の絵柄の変化を検出
し、 上記代表点の周辺の画像の絵柄の変化が所定値より大き
いかどうかを判断し、 上記周辺の画像の絵柄の変化が所定値より大きい代表点
を用いて動きベクトルを求めるようにした動きベクトル
検出装置。 - 【請求項２】 上記代表点の位置は予め定められている
請求項１記載の動きベクトル検出装置。 - 【請求項３】 画面を複数の領域に分割し、上記各領域
での代表点の周辺の画像の絵柄の変化を検出し、上記各
領域での上記代表点の周辺の画像の絵柄の変化が所定値
より大きいかどうかを判断し、上記周辺の画像の絵柄の
変化が所定値より大きい代表点を用いて上記各領域毎に
動きベクトルを求めるようにした動きベクトル検出装置
を設け、 上記動きベクトル検出装置により求められる画面の動き
に応じて手振れ補正を行うようにしたビデオカメラ。 - 【請求項４】 画面を複数の領域に分割し、上記各領域
での代表点の周辺の画像の絵柄の変化を検出し、上記各
領域での上記代表点の周辺の画像の絵柄の変化が所定値
より大きいかどうかを判断し、上記周辺の画像の絵柄の
変化が所定値より大きい代表点を用いて上記各領域毎に
動きベクトルを求めるようにした動きベクトル検出装置
と、 水平方向又は垂直方向のカメラの動きを検出する角速度
センサとを設け、 上記動きベクトル検出装置により求められる動きベクト
ル及び上記角速度センサの出力に応じて手振れ補正を行
うようにしたビデオカメラ。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP25594192A JPH0686149A (ja) | 1992-08-31 | 1992-08-31 | 動きベクトル検出装置及びビデオカメラ |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP25594192A JPH0686149A (ja) | 1992-08-31 | 1992-08-31 | 動きベクトル検出装置及びビデオカメラ |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JPH0686149A true JPH0686149A (ja) | 1994-03-25 |
Family
ID=17285705
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP25594192A Pending JPH0686149A (ja) | 1992-08-31 | 1992-08-31 | 動きベクトル検出装置及びビデオカメラ |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JPH0686149A (ja) |
Cited By (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO1998012869A1 (fr) * | 1996-09-20 | 1998-03-26 | Sharp Kabushiki Kaisha | Appareil de mesure de mouvement |
| US6434276B2 (en) | 1997-09-30 | 2002-08-13 | Sharp Kabushiki Kaisha | Image synthesis and communication apparatus |
| JP2003512749A (ja) * | 1999-08-02 | 2003-04-02 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | 動き推定方法及びその装置 |
| JP2004220419A (ja) * | 2003-01-16 | 2004-08-05 | Sony Corp | 動きベクトル検出装置、動きベクトル検出方法、プログラム、記録媒体 |
| EP2063646A2 (en) | 2007-09-14 | 2009-05-27 | Sony Corporation | Method and apparatus for predictive coding |
| US7692688B2 (en) | 2006-02-13 | 2010-04-06 | Sony Corporation | Method for correcting distortion of captured image, device for correcting distortion of captured image, and imaging device |
| US7821540B2 (en) | 2006-02-20 | 2010-10-26 | Sony Corporation | Imager-created image signal-distortion compensation method, imager-created image signal-distortion compensation apparatus, image taking method and image taking apparatus |
| US8009872B2 (en) | 2006-02-01 | 2011-08-30 | Sony Corporation | Taken-image signal-distortion compensation method, taken-image signal-distortion compensation apparatus, image taking method and image-taking apparatus |
| US8085848B2 (en) | 2005-12-01 | 2011-12-27 | Sony Corporation | Image processing apparatus and image processing method |
-
1992
- 1992-08-31 JP JP25594192A patent/JPH0686149A/ja active Pending
Cited By (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO1998012869A1 (fr) * | 1996-09-20 | 1998-03-26 | Sharp Kabushiki Kaisha | Appareil de mesure de mouvement |
| US6650362B1 (en) | 1996-09-20 | 2003-11-18 | Sharp Kabushiki Kaisha | Movement detecting apparatus with feature point extractor based on luminance gradient in current frame |
| US6434276B2 (en) | 1997-09-30 | 2002-08-13 | Sharp Kabushiki Kaisha | Image synthesis and communication apparatus |
| JP2003512749A (ja) * | 1999-08-02 | 2003-04-02 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | 動き推定方法及びその装置 |
| JP2004220419A (ja) * | 2003-01-16 | 2004-08-05 | Sony Corp | 動きベクトル検出装置、動きベクトル検出方法、プログラム、記録媒体 |
| US8085848B2 (en) | 2005-12-01 | 2011-12-27 | Sony Corporation | Image processing apparatus and image processing method |
| US8009872B2 (en) | 2006-02-01 | 2011-08-30 | Sony Corporation | Taken-image signal-distortion compensation method, taken-image signal-distortion compensation apparatus, image taking method and image-taking apparatus |
| USRE45231E1 (en) | 2006-02-01 | 2014-11-04 | Sony Corporation | Taken-image signal-distortion compensation method, taken-image signal-distortion compensation apparatus, image taking method and image-taking apparatus |
| US7692688B2 (en) | 2006-02-13 | 2010-04-06 | Sony Corporation | Method for correcting distortion of captured image, device for correcting distortion of captured image, and imaging device |
| US7821540B2 (en) | 2006-02-20 | 2010-10-26 | Sony Corporation | Imager-created image signal-distortion compensation method, imager-created image signal-distortion compensation apparatus, image taking method and image taking apparatus |
| EP2063646A2 (en) | 2007-09-14 | 2009-05-27 | Sony Corporation | Method and apparatus for predictive coding |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP2940762B2 (ja) | 手振れ補正装置を有するビデオカメラ | |
| EP0632649B1 (en) | Video camera with electronic picture stabilizer and generation of addition data | |
| KR100680096B1 (ko) | 손 떨림 보정 장치 | |
| US7623153B2 (en) | Unintentional hand movement canceling device and imaging apparatus | |
| KR100341265B1 (ko) | 움직임벡터검출장치및고체촬상장치 | |
| JPH08172566A (ja) | 手振れ補正装置およびそれを用いたビデオカメラ | |
| JPH05122586A (ja) | 画像の手振れ補正装置 | |
| JPH0686149A (ja) | 動きベクトル検出装置及びビデオカメラ | |
| JPH08251474A (ja) | 動きベクトル検出装置，動きベクトル検出方法，画像ぶれ補正装置，画像追尾装置及び撮像装置 | |
| JP2679778B2 (ja) | 画像の動き検出装置 | |
| JP2957851B2 (ja) | 手振れ補正方法 | |
| JP3473064B2 (ja) | 画像動きベクトル検出装置及びビデオカメラ | |
| JP2944369B2 (ja) | ビデオカメラの手振れ補正装置およびビデオカメラ | |
| JPH0522645A (ja) | 動き検出回路 | |
| JPH04309078A (ja) | ビデオデータの動き検出装置および方法 | |
| JP3257035B2 (ja) | 画像の振動補正装置及び方法 | |
| JP3639640B2 (ja) | 動きベクトル検出装置 | |
| JP3213492B2 (ja) | 手振れ補正装置およびそれを用いたビデオカメラ | |
| JPH07115583A (ja) | 手振れ補正装置を有するビデオカメラ | |
| JPH07107367A (ja) | 画像処理装置 | |
| JPH05145828A (ja) | 画像の手振れ判定装置 | |
| JP3239051B2 (ja) | 手振れ補正装置を有するビデオカメラ | |
| JP2925890B2 (ja) | 手振れ補正装置を有するビデオカメラ | |
| JP2735264B2 (ja) | 動き補正撮像装置 | |
| JP3271273B2 (ja) | 画像の振動判定装置、画像の振動補正装置、画像の振動判定方法及び画像の振動補正方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20040330 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20040426 |
|
| A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20040528 |
|
| A912 | Re-examination (zenchi) completed and case transferred to appeal board |
Free format text: JAPANESE INTERMEDIATE CODE: A912 Effective date: 20041008 |