JPH07115584A - 画像揺れ補正装置 - Google Patents
画像揺れ補正装置Info
- Publication number
- JPH07115584A JPH07115584A JP5284541A JP28454193A JPH07115584A JP H07115584 A JPH07115584 A JP H07115584A JP 5284541 A JP5284541 A JP 5284541A JP 28454193 A JP28454193 A JP 28454193A JP H07115584 A JPH07115584 A JP H07115584A
- Authority
- JP
- Japan
- Prior art keywords
- scene change
- image
- screen
- motion vector
- detection circuit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Television Signal Processing For Recording (AREA)
Abstract
(57)【要約】
【目的】 シーンチェンジの際にも正常に画像の防振を
行うことができるようにする。 【構成】 ビデオ再生機で再生された映像信号Ｐ１と、
動きベクトル検出回路３から出力された相関係数Ｐ３と
をシーンチェンジ検出回路６に入力し、上記シーンチェ
ンジ検出回路６でシーンチェンジ検出を行い、その検出
結果を示す信号Ｐ７をマイコン４に出力する。マイコン
４は、シーンチェンジ検出回路６からのシーンチェンジ
検出信号Ｐ７に基づいて、現フィールドがシーンチェン
ジ直後かどうかを判断し、現フィールドがシーンチェン
ジ直後の場合は、それまで保存されている動きベクトル
Ｐ２の重み付き積算値をリセットし、画像メモリ２の読
み出しアドレスＰ４を画面の中央から切り出すように設
定しなおすようにして、シーンチェンジに起因する防振
制御特性への悪影響をなくすようにする。
行うことができるようにする。 【構成】 ビデオ再生機で再生された映像信号Ｐ１と、
動きベクトル検出回路３から出力された相関係数Ｐ３と
をシーンチェンジ検出回路６に入力し、上記シーンチェ
ンジ検出回路６でシーンチェンジ検出を行い、その検出
結果を示す信号Ｐ７をマイコン４に出力する。マイコン
４は、シーンチェンジ検出回路６からのシーンチェンジ
検出信号Ｐ７に基づいて、現フィールドがシーンチェン
ジ直後かどうかを判断し、現フィールドがシーンチェン
ジ直後の場合は、それまで保存されている動きベクトル
Ｐ２の重み付き積算値をリセットし、画像メモリ２の読
み出しアドレスＰ４を画面の中央から切り出すように設
定しなおすようにして、シーンチェンジに起因する防振
制御特性への悪影響をなくすようにする。
Description
【０００１】
【産業上の利用分野】本発明は、撮影時のカメラ揺れに
よる画像ぶれを、ビデオ再生機の再生時や通信受信機の
受信時などに補正するための画像揺れ補正装置に関す
る。
よる画像ぶれを、ビデオ再生機の再生時や通信受信機の
受信時などに補正するための画像揺れ補正装置に関す
る。
【０００２】
【従来の技術】撮影時のカメラ揺れによる画像ぶれを補
正する機能を有するビデオ再生機の例として、図５に示
すような画像揺れ補正装置が特開昭６３−１６６３７０
号公報に記載されている。
正する機能を有するビデオ再生機の例として、図５に示
すような画像揺れ補正装置が特開昭６３−１６６３７０
号公報に記載されている。
【０００３】図５において、ビデオ再生機１は、映像信
号の再生を行い、その再生された映像信号Ｐ１を出力す
るためのものである。画像メモリ２は、入力された映像
信号Ｐ１を一時的に記憶するためのものである。動きベ
クトル検出回路３は、入力された映像信号Ｐ１から動き
ベクトルの検出を行い、動きベクトルＰ２および前画像
と現画像との相関係数の最大値Ｐ３を出力するためのも
のである。マイコン４は、画像メモリ２および画像拡大
回路５の制御を行うものであり、読み出しアドレスＰ４
および画像拡大率のディジタルデータＰ５を出力する。
画像拡大回路５は、読み出した画像を通常の画面サイズ
に拡大し、出力映像信号Ｐ６を出力するためのものであ
る。
号の再生を行い、その再生された映像信号Ｐ１を出力す
るためのものである。画像メモリ２は、入力された映像
信号Ｐ１を一時的に記憶するためのものである。動きベ
クトル検出回路３は、入力された映像信号Ｐ１から動き
ベクトルの検出を行い、動きベクトルＰ２および前画像
と現画像との相関係数の最大値Ｐ３を出力するためのも
のである。マイコン４は、画像メモリ２および画像拡大
回路５の制御を行うものであり、読み出しアドレスＰ４
および画像拡大率のディジタルデータＰ５を出力する。
画像拡大回路５は、読み出した画像を通常の画面サイズ
に拡大し、出力映像信号Ｐ６を出力するためのものであ
る。
【０００４】このように構成された画像揺れ補正装置に
おいて、ビデオ再生機１で再生された映像信号Ｐ１は、
画像メモリ２に一旦蓄積されるとともに、動きベクトル
検出回路３に供給される。この動きベクトル検出回路３
は、入力された映像信号Ｐ１から画像の動き速度の情報
である動きベクトルＰ２を検出してマイコン４に供給す
る。マイコン４は、この動きベクトルＰ２の情報を基
に、画像メモリ２の読み出しアドレスＰ４を決定し、原
画像より小さい画像情報を、原画像から上下左右にシフ
トさせながら画像メモリ２から読み出す。
おいて、ビデオ再生機１で再生された映像信号Ｐ１は、
画像メモリ２に一旦蓄積されるとともに、動きベクトル
検出回路３に供給される。この動きベクトル検出回路３
は、入力された映像信号Ｐ１から画像の動き速度の情報
である動きベクトルＰ２を検出してマイコン４に供給す
る。マイコン４は、この動きベクトルＰ２の情報を基
に、画像メモリ２の読み出しアドレスＰ４を決定し、原
画像より小さい画像情報を、原画像から上下左右にシフ
トさせながら画像メモリ２から読み出す。
【０００５】画像メモリ２から読み出された画像情報
は、画像拡大回路５に供給され、この読み出された画像
が通常の画面サイズになるように、マイコン４から供給
される画像拡大率Ｐ５に従って修正される。この一連の
動作で、再生映像信号Ｐ１に画像ぶれがあってもそれが
補償され、揺れのない安定した映像信号Ｐ６が出力され
る。
は、画像拡大回路５に供給され、この読み出された画像
が通常の画面サイズになるように、マイコン４から供給
される画像拡大率Ｐ５に従って修正される。この一連の
動作で、再生映像信号Ｐ１に画像ぶれがあってもそれが
補償され、揺れのない安定した映像信号Ｐ６が出力され
る。
【０００６】動きベクトルＰ２を求める方法としては、
マッチング法が最も一般的である。マッチング法は、１
フィールド前の認識パターンと現フィールドの認識パタ
ーンをずらしながら相関係数を求め、その相関係数が最
大となるずらし量を動きベクトルとするものである。動
きベクトル検出回路３は、このようにして動きベクトル
Ｐ２の計算を行うものであり、動きベクトル信号Ｐ２と
相関係数の最大値Ｐ３とをマイコン４に出力する。相関
係数の最大値Ｐ３は、動きベクトル信号Ｐ２の信頼度を
評価するのに使用される。
マッチング法が最も一般的である。マッチング法は、１
フィールド前の認識パターンと現フィールドの認識パタ
ーンをずらしながら相関係数を求め、その相関係数が最
大となるずらし量を動きベクトルとするものである。動
きベクトル検出回路３は、このようにして動きベクトル
Ｐ２の計算を行うものであり、動きベクトル信号Ｐ２と
相関係数の最大値Ｐ３とをマイコン４に出力する。相関
係数の最大値Ｐ３は、動きベクトル信号Ｐ２の信頼度を
評価するのに使用される。
【０００７】また、画面内の被写体を変形したり、処理
不能な被写体を除去したり、防振するべき被写体を自動
的に判断したりする目的で、画面を複数のブロック状の
演算領域に分割し、領域ブロックごとに動きベクトル検
出をすることが行われている。この場合、マイコン４で
平均またはメディアン処理などの手法で、領域ブロック
ごとに求めた動きベクトルを合成し、画面全体の揺れ量
を算出する。この算出された値は、画像位置に対してフ
レームまたはフィールド間の差分値なので、積分処理ま
たはローパスフィルタ処理を行うことで最終的な画像補
正ベクトル、すなわち画像メモリ２の読み出しアドレス
Ｐ４を決定している。なお、画像拡大率Ｐ５は、通常撮
影状況ごとに一定な値を使用する。
不能な被写体を除去したり、防振するべき被写体を自動
的に判断したりする目的で、画面を複数のブロック状の
演算領域に分割し、領域ブロックごとに動きベクトル検
出をすることが行われている。この場合、マイコン４で
平均またはメディアン処理などの手法で、領域ブロック
ごとに求めた動きベクトルを合成し、画面全体の揺れ量
を算出する。この算出された値は、画像位置に対してフ
レームまたはフィールド間の差分値なので、積分処理ま
たはローパスフィルタ処理を行うことで最終的な画像補
正ベクトル、すなわち画像メモリ２の読み出しアドレス
Ｐ４を決定している。なお、画像拡大率Ｐ５は、通常撮
影状況ごとに一定な値を使用する。
【０００８】
【発明が解決しようとする課題】しかしながら、上述し
た従来例によれば、実際に放送されているテレビ画像お
よび家庭用ビデオカメラで録画された画像の防振を行う
際に、以下に述べるような問題点があった。すなわち、
放送されている画像や録画された画像では頻繁にシーン
チェンジがあり、特に、家庭で録画された映像ではシー
ンチェンジのたびにノイズや同期ずれが生じることがあ
る。このような映像信号Ｐ１をそのまま上記動きベクト
ル検出回路３に入力すると、画像間の相関がとれないた
め、シーンチェンジのたびに動きベクトル検出エラーが
生じる。そのため、このままぶれ補正を行った場合、瞬
間的に画面が大きく揺れ、かえって不愉快な画像になっ
てしまうことがあった。
た従来例によれば、実際に放送されているテレビ画像お
よび家庭用ビデオカメラで録画された画像の防振を行う
際に、以下に述べるような問題点があった。すなわち、
放送されている画像や録画された画像では頻繁にシーン
チェンジがあり、特に、家庭で録画された映像ではシー
ンチェンジのたびにノイズや同期ずれが生じることがあ
る。このような映像信号Ｐ１をそのまま上記動きベクト
ル検出回路３に入力すると、画像間の相関がとれないた
め、シーンチェンジのたびに動きベクトル検出エラーが
生じる。そのため、このままぶれ補正を行った場合、瞬
間的に画面が大きく揺れ、かえって不愉快な画像になっ
てしまうことがあった。
【０００９】また、シーンチェンジ直前の読み出しアド
レスＰ４が、アドレス制御範囲の限界に近くなって、原
画像の端の部分から画像の切り出しが行われている場合
は、シーンチェンジ時のエラーによりその制御限界値に
突き当たり、それ以上防振できないという状態になる。
このため、この場合はシーンチェンジ後しばらくは防振
不能になることがあった。
レスＰ４が、アドレス制御範囲の限界に近くなって、原
画像の端の部分から画像の切り出しが行われている場合
は、シーンチェンジ時のエラーによりその制御限界値に
突き当たり、それ以上防振できないという状態になる。
このため、この場合はシーンチェンジ後しばらくは防振
不能になることがあった。
【００１０】本発明は、このような問題点にかんがみて
なされたもので、シーンチェンジの際にも正常に画像の
防振を行うことができるようにすることを目的とする。
なされたもので、シーンチェンジの際にも正常に画像の
防振を行うことができるようにすることを目的とする。
【００１１】
【課題を解決するための手段】本発明の画像揺れ補正装
置は、映像信号を処理して画面をシフトする画像シフト
手段と、入力画像のシーンチェンジの有無を検出するシ
ーンチェンジ検出手段と、前記シーンチェンジ検出手段
によって検出されたシーンチェンジの有無に応じて、前
記画像シフト手段での画像シフト量の制御を行う制御手
段とを有することを特徴としている。
置は、映像信号を処理して画面をシフトする画像シフト
手段と、入力画像のシーンチェンジの有無を検出するシ
ーンチェンジ検出手段と、前記シーンチェンジ検出手段
によって検出されたシーンチェンジの有無に応じて、前
記画像シフト手段での画像シフト量の制御を行う制御手
段とを有することを特徴としている。
【００１２】本発明の画像揺れ補正装置の特徴とすると
ころは、前記制御手段は、前記シーンチェンジ検出手段
がシーンチェンジを検出したときに、過去の画像の動き
量を積算した積算値をリセットすることを特徴としてい
る。
ころは、前記制御手段は、前記シーンチェンジ検出手段
がシーンチェンジを検出したときに、過去の画像の動き
量を積算した積算値をリセットすることを特徴としてい
る。
【００１３】本発明の画像揺れ補正装置のその他の特徴
とするところは、前記制御手段は、前記シーンチェンジ
検出手段がシーンチェンジを検出したときに、画面切り
出し位置を中央に戻すことを特徴としている。
とするところは、前記制御手段は、前記シーンチェンジ
検出手段がシーンチェンジを検出したときに、画面切り
出し位置を中央に戻すことを特徴としている。
【００１４】本発明の画像揺れ補正装置のその他の特徴
とするところは、前記シーンチェンジ検出手段は、前画
面と現画面との最大相関値の大きさおよび前記最大相関
値の時間変化の大きさをしきい値と比較した結果に基づ
いて、シーンチェンジの有無を検出することを特徴とし
ている。
とするところは、前記シーンチェンジ検出手段は、前画
面と現画面との最大相関値の大きさおよび前記最大相関
値の時間変化の大きさをしきい値と比較した結果に基づ
いて、シーンチェンジの有無を検出することを特徴とし
ている。
【００１５】
【作用】本発明の画像揺れ補正装置は上記技術手段より
なるので、シーンチェンジの有無に応じて画像のシフト
量が制御されるようになり、シーンが変わることによっ
て画面間の相関が無くなることで動きベクトル検出エラ
ーが生じても、画像が急激に大きく揺れることがなくな
る。
なるので、シーンチェンジの有無に応じて画像のシフト
量が制御されるようになり、シーンが変わることによっ
て画面間の相関が無くなることで動きベクトル検出エラ
ーが生じても、画像が急激に大きく揺れることがなくな
る。
【００１６】
【実施例】以下、本発明の一実施例の画像揺れ補正装置
を図面を参照しながら説明する。図１は、本発明の一実
施例における画像揺れ補正装置の概略構成を示すブロッ
ク図である。図１の画像揺れ補正装置において、ビデオ
再生機１、画像メモリ２、動きベクトル検出回路３、マ
イコン４、画像拡大回路５を有しており、これらのブロ
ックは図５に示した画像揺れ補正装置と同一である。
を図面を参照しながら説明する。図１は、本発明の一実
施例における画像揺れ補正装置の概略構成を示すブロッ
ク図である。図１の画像揺れ補正装置において、ビデオ
再生機１、画像メモリ２、動きベクトル検出回路３、マ
イコン４、画像拡大回路５を有しており、これらのブロ
ックは図５に示した画像揺れ補正装置と同一である。
【００１７】本実施例は、図５に示した画像揺れ補正装
置にシーンチェンジ検出回路６を新たに付加したもので
あり、ビデオ再生機１で再生された映像信号Ｐ１と動き
ベクトル検出回路３から出力された相関係数Ｐ３がシー
ンチェンジ検出回路６に入力され、シーンチェンジ検出
回路６からの出力信号Ｐ７がマイコン４に出力される。
この画像揺れ補正装置は、画面を横にｍ分割、縦にｎ分
割して行列状に配置された検出ブロックから、そのすべ
ての検出ブロックについて１フィールド期間毎に動きベ
クトルの検出を行う。
置にシーンチェンジ検出回路６を新たに付加したもので
あり、ビデオ再生機１で再生された映像信号Ｐ１と動き
ベクトル検出回路３から出力された相関係数Ｐ３がシー
ンチェンジ検出回路６に入力され、シーンチェンジ検出
回路６からの出力信号Ｐ７がマイコン４に出力される。
この画像揺れ補正装置は、画面を横にｍ分割、縦にｎ分
割して行列状に配置された検出ブロックから、そのすべ
ての検出ブロックについて１フィールド期間毎に動きベ
クトルの検出を行う。
【００１８】次に、本実施例の画像揺れ補正装置の動作
について図面を参照しながら説明する。図２は、本実施
例の画像揺れ補正装置の動作を示すフローチャートであ
る。この図２は、テレビ信号のフィールド毎に行われる
マイコン４での処理を示すもので、ｉをフィールドの現
在のカウント数とすると、第ｉフィールドにおける処理
を示している。
について図面を参照しながら説明する。図２は、本実施
例の画像揺れ補正装置の動作を示すフローチャートであ
る。この図２は、テレビ信号のフィールド毎に行われる
マイコン４での処理を示すもので、ｉをフィールドの現
在のカウント数とすると、第ｉフィールドにおける処理
を示している。
【００１９】まず、ステップＳ１において、その画面中
で求められたｍ×ｎ個すべてのブロックの動きベクトル
Ｐ３を動きベクトル検出回路３からマイコン４に取り込
む。次に、ステップＳ２において、その画面がシーンチ
ェンジ直後であったかどうかの信号Ｐ７をシーンチェン
ジ検出回路６からマイコン４に取り込む。次に、ステッ
プＳ３において、「現フィールドがシーンチェンジ直後
であるか否か」を判断し、Ｎｏの場合はそのままステッ
プＳ４に進み、Ｙｅｓの場合はステップＳ６に進む。
で求められたｍ×ｎ個すべてのブロックの動きベクトル
Ｐ３を動きベクトル検出回路３からマイコン４に取り込
む。次に、ステップＳ２において、その画面がシーンチ
ェンジ直後であったかどうかの信号Ｐ７をシーンチェン
ジ検出回路６からマイコン４に取り込む。次に、ステッ
プＳ３において、「現フィールドがシーンチェンジ直後
であるか否か」を判断し、Ｎｏの場合はそのままステッ
プＳ４に進み、Ｙｅｓの場合はステップＳ６に進む。
【００２０】次に、ステップＳ３でシーンチェンジ直後
ではないと判断した場合はステップＳ４に進み、動きベ
クトルＰ２の画面中でのそろい具合や時間変化によって
どの領域を防振するべきかを判断し、防振するべき検出
ブロックに対しては大きな値の重み係数を発生し、それ
以外の検出ブロックに対しては小さな値の重み係数を発
生する。
ではないと判断した場合はステップＳ４に進み、動きベ
クトルＰ２の画面中でのそろい具合や時間変化によって
どの領域を防振するべきかを判断し、防振するべき検出
ブロックに対しては大きな値の重み係数を発生し、それ
以外の検出ブロックに対しては小さな値の重み係数を発
生する。
【００２１】次に、ステップＳ５において、ステップ４
で発生した重み係数に応じて動きベクトルＰ２の平均化
処理を行い、防振するべき被写体領域の動きベクトルに
変換する。ここでの出力値をＭＶi とする。次に、ステ
ップＳ７において、以下の式を実行する。 ＣＶi ＝ＭＶi ＋Ｋｃ×ＣＶi-1 ０＜Ｋｃ≦
１ ここで、ＣＶi は画像補正ベクトルを意味しており、前
フィールドの画像補正ベクトルＣＶi-1 に制御係数Ｋｃ
を乗算し、これに現在求められた動きベクトルＭＶi を
加算して求めたものである。
で発生した重み係数に応じて動きベクトルＰ２の平均化
処理を行い、防振するべき被写体領域の動きベクトルに
変換する。ここでの出力値をＭＶi とする。次に、ステ
ップＳ７において、以下の式を実行する。 ＣＶi ＝ＭＶi ＋Ｋｃ×ＣＶi-1 ０＜Ｋｃ≦
１ ここで、ＣＶi は画像補正ベクトルを意味しており、前
フィールドの画像補正ベクトルＣＶi-1 に制御係数Ｋｃ
を乗算し、これに現在求められた動きベクトルＭＶi を
加算して求めたものである。
【００２２】この演算は、Ｋｃ＜１のときに、過去のフ
ィールドまでの動きベクトル情報は徐々に消えていく１
次型ローパスフィルター特性になり、Ｋｃ＝１のとき
は、現在求められた動きベクトルＭＶi の値を積算する
完全積分の特性になる。
ィールドまでの動きベクトル情報は徐々に消えていく１
次型ローパスフィルター特性になり、Ｋｃ＝１のとき
は、現在求められた動きベクトルＭＶi の値を積算する
完全積分の特性になる。
【００２３】次に、ステップＳ８において、画像補正ベ
クトルＣＶi を画像メモリ２の読み出しアドレスＰ４に
変換して出力する。この実施例においては、ＣＶi ＝０
のときに、画面中央から画像を読み出すものとする。次
に、ステップＳ９において、直前のフィールドの画像補
正ベクトルＣＶi-1に現フィールドの画像補正ベクトル
ＣＶi をコピーする。
クトルＣＶi を画像メモリ２の読み出しアドレスＰ４に
変換して出力する。この実施例においては、ＣＶi ＝０
のときに、画面中央から画像を読み出すものとする。次
に、ステップＳ９において、直前のフィールドの画像補
正ベクトルＣＶi-1に現フィールドの画像補正ベクトル
ＣＶi をコピーする。
【００２４】一方、ステップＳ３の判断がシーンチェン
ジ直後であった場合は、ステップ６に進み、現フィール
ドの画像補正ベクトルＣＶi と直前のフィールドの画像
補正ベクトルＣＶi-1 とに０を代入する。その後、ステ
ップＳ４、ステップＳ５、ステップＳ７の行程をスキッ
プし、ステップＳ８、ステップＳ９を実行する。すなわ
ち、シーンチェンジ直後のフィールドでは、画像補正ベ
クトルＣＶi をゼロとし、今までの累積値をリセットす
ることになる。また、これは、それまで原画像の端の部
分から画面切り出しを行っていたとしても、これを中央
から切り出すように設定しなおしたことになる。
ジ直後であった場合は、ステップ６に進み、現フィール
ドの画像補正ベクトルＣＶi と直前のフィールドの画像
補正ベクトルＣＶi-1 とに０を代入する。その後、ステ
ップＳ４、ステップＳ５、ステップＳ７の行程をスキッ
プし、ステップＳ８、ステップＳ９を実行する。すなわ
ち、シーンチェンジ直後のフィールドでは、画像補正ベ
クトルＣＶi をゼロとし、今までの累積値をリセットす
ることになる。また、これは、それまで原画像の端の部
分から画面切り出しを行っていたとしても、これを中央
から切り出すように設定しなおしたことになる。
【００２５】次に、シーンチェンジ検出回路６について
図面を参照しながら説明する。図３は、本発明の一実施
例におけるシーンチェンジ検出回路６の概略構成を示す
ブロック図である。図３において、動きベクトル検出回
路３は、入力された映像信号Ｐ１から動きベクトルの検
出を行い、相関係数Ｐ３を出力する。
図面を参照しながら説明する。図３は、本発明の一実施
例におけるシーンチェンジ検出回路６の概略構成を示す
ブロック図である。図３において、動きベクトル検出回
路３は、入力された映像信号Ｐ１から動きベクトルの検
出を行い、相関係数Ｐ３を出力する。
【００２６】しきい値判定回路１２は、動きベクトル検
出回路３から出力される相関係数Ｐ３のしきい値判断を
行うためのものであり、相関係数Ｐ３が設定された値よ
り大きい場合にパルスを出力する。カウンタ１３は、し
きい値判定回路１２から出力されたパルスのカウントを
行うためのものである。
出回路３から出力される相関係数Ｐ３のしきい値判断を
行うためのものであり、相関係数Ｐ３が設定された値よ
り大きい場合にパルスを出力する。カウンタ１３は、し
きい値判定回路１２から出力されたパルスのカウントを
行うためのものである。
【００２７】微分回路１４は、カウント数の時間微分を
計算を行うためのものである。しきい値判定回路１５
は、微分回路１４から出力されるカウント数の時間微分
のしきい値判断を行うためのものである。
計算を行うためのものである。しきい値判定回路１５
は、微分回路１４から出力されるカウント数の時間微分
のしきい値判断を行うためのものである。
【００２８】以上の構成において、一般に、通常の動画
においては、画面中のほとんどのブロックでパルスが発
生され、カウント回路１３でカウントされるカウント数
は大きくなる。ここで、シーンチェンジが行われると画
面間の相関がなくなるので、動きベクトル検出回路１１
から出力される相関係数Ｐ３の値が小さくなり、しきい
値判定回路１２で発生されるパルス数が減少し、カウン
タ１３でカウントされるカウント数も減少する。
においては、画面中のほとんどのブロックでパルスが発
生され、カウント回路１３でカウントされるカウント数
は大きくなる。ここで、シーンチェンジが行われると画
面間の相関がなくなるので、動きベクトル検出回路１１
から出力される相関係数Ｐ３の値が小さくなり、しきい
値判定回路１２で発生されるパルス数が減少し、カウン
タ１３でカウントされるカウント数も減少する。
【００２９】ここで、このカウント数のみを用いてシー
ンチェンジを検出することもできるが、カメラのパンニ
ングや速い動きの被写体などで誤動作する可能性があ
る。そこで、本実施例においては、微分回路１４および
しきい値判定回路１５を設け、カウンター１３でカウン
トされたカウント数の時間的な変化量を判断すること
で、シーンチェンジを検出するようにしている。
ンチェンジを検出することもできるが、カメラのパンニ
ングや速い動きの被写体などで誤動作する可能性があ
る。そこで、本実施例においては、微分回路１４および
しきい値判定回路１５を設け、カウンター１３でカウン
トされたカウント数の時間的な変化量を判断すること
で、シーンチェンジを検出するようにしている。
【００３０】他にシーンチェンジを検出する装置として
は、例えば、「『認識技術を応用した対話型映像編集方
式の提案』電子情報通信学会論文誌 D-11 Vol.J75-D-I
I No.2 pp.216-225 1992年2 月」に記載がある。この論
文では、ブロックごとにカラーヒストグラムの類似度を
求め、この値があるしきい値を越えるブロックの数をフ
レーム間相関値としている。
は、例えば、「『認識技術を応用した対話型映像編集方
式の提案』電子情報通信学会論文誌 D-11 Vol.J75-D-I
I No.2 pp.216-225 1992年2 月」に記載がある。この論
文では、ブロックごとにカラーヒストグラムの類似度を
求め、この値があるしきい値を越えるブロックの数をフ
レーム間相関値としている。
【００３１】本実施例では、映像信号中のチーンチェン
ジが画像からでしか判断できない場合について示した
が、記録方式によっては、録画開始からのフレームカウ
ント数が映像信号に多重して記録されていることがあ
る。このような場合では、再生時にこのフレームカウン
ト数を取り出し、この数値がゼロになった時刻をシーン
チェンジとし、続いて、上記に説明したのと同様な方法
で、防振制御特性を変化させればよい。
ジが画像からでしか判断できない場合について示した
が、記録方式によっては、録画開始からのフレームカウ
ント数が映像信号に多重して記録されていることがあ
る。このような場合では、再生時にこのフレームカウン
ト数を取り出し、この数値がゼロになった時刻をシーン
チェンジとし、続いて、上記に説明したのと同様な方法
で、防振制御特性を変化させればよい。
【００３２】次に、画像揺れ補正装置の動作の第２実施
例について、図面を参照しながら説明する。図４は、第
２実施例を示すフローチャートである。この図４も図２
と同様に、テレビ信号のフィールド毎に行われるマイコ
ン４での処理を示すもので、ｉをフィールドの現在のカ
ウント数とすると、第ｉフィールドにおける処理を示し
ている。
例について、図面を参照しながら説明する。図４は、第
２実施例を示すフローチャートである。この図４も図２
と同様に、テレビ信号のフィールド毎に行われるマイコ
ン４での処理を示すもので、ｉをフィールドの現在のカ
ウント数とすると、第ｉフィールドにおける処理を示し
ている。
【００３３】第１実施例では、防振制御特性を変化させ
る方法として、現フィールドの画像補正ベクトルＣＶi
と前フィールドの画像補正ベクトルＣＶi-1 をゼロとし
て、瞬間的に画面のセンタリングを行った。
る方法として、現フィールドの画像補正ベクトルＣＶi
と前フィールドの画像補正ベクトルＣＶi-1 をゼロとし
て、瞬間的に画面のセンタリングを行った。
【００３４】しかしながら、図３に示したシーンチェン
ジ検出回路６は、ストロボの発光などによる急激な照明
量変化、蛍光灯の写り込み、オートフォーカス、オート
アイリスなどによって誤動作し、シーンチェンジの誤検
出が生じる可能性がある。このようにシーンチェンジ検
出回路６が誤動作した場合、急激に画面が揺れるので不
快な画像になってしまう。また、フレームカウウント値
でシーンチェンジを検出している場合において、シーン
チェンジの直前直後で情景がよく似ている場合は、やは
り画像が一瞬大きく揺れることになる。そこで、この第
２実施例では、画面をゆるやかにセンタリングするよう
にしたものである。
ジ検出回路６は、ストロボの発光などによる急激な照明
量変化、蛍光灯の写り込み、オートフォーカス、オート
アイリスなどによって誤動作し、シーンチェンジの誤検
出が生じる可能性がある。このようにシーンチェンジ検
出回路６が誤動作した場合、急激に画面が揺れるので不
快な画像になってしまう。また、フレームカウウント値
でシーンチェンジを検出している場合において、シーン
チェンジの直前直後で情景がよく似ている場合は、やは
り画像が一瞬大きく揺れることになる。そこで、この第
２実施例では、画面をゆるやかにセンタリングするよう
にしたものである。
【００３５】すなわち、ステップＳ１１において、その
画面中で求められたｍ×ｎ個すべてのブロックの動きベ
クトルＰ３を動きベクトル検出回路３からマイコン４に
取り込む。次に、ステップＳ１２において、その画面が
シーンチェンジ直後であったかどうかの信号Ｐ７をシー
ンチェンジ検出回路６からマイコン４に取り込む。
画面中で求められたｍ×ｎ個すべてのブロックの動きベ
クトルＰ３を動きベクトル検出回路３からマイコン４に
取り込む。次に、ステップＳ１２において、その画面が
シーンチェンジ直後であったかどうかの信号Ｐ７をシー
ンチェンジ検出回路６からマイコン４に取り込む。
【００３６】次に、ステップ１３において、動きベクト
ルＰ２の画面中でのそろい具合や時間変化によってどの
領域を防振するべきかを判断し、防振するべき検出ブロ
ックに対しては大きな値の重み係数を発生し、それ以外
の検出ブロックに対しては小さな値の重み係数を発生す
る。
ルＰ２の画面中でのそろい具合や時間変化によってどの
領域を防振するべきかを判断し、防振するべき検出ブロ
ックに対しては大きな値の重み係数を発生し、それ以外
の検出ブロックに対しては小さな値の重み係数を発生す
る。
【００３７】次に、ステップＳ１４において、ステップ
１３で発生した重み係数に応じて動きベクトルＰ２の平
均化処理を行い、防振すべき被写体領域の動きベクトル
に変換する。ここでの出力値をＭＶi とする。次に、ス
テップＳ１５において、「シーンチェンジ後ｊフィール
ド以内であるか否か」を判断し、Ｎｏの場合はそのまま
ステップＳ１６に進み、Ｙｅｓの場合はステップＳ１７
に進む。ここで、ｊの値は３０〜９０程度の値であり、
１秒前後の時間内に含まれるフィールド数を示す。
１３で発生した重み係数に応じて動きベクトルＰ２の平
均化処理を行い、防振すべき被写体領域の動きベクトル
に変換する。ここでの出力値をＭＶi とする。次に、ス
テップＳ１５において、「シーンチェンジ後ｊフィール
ド以内であるか否か」を判断し、Ｎｏの場合はそのまま
ステップＳ１６に進み、Ｙｅｓの場合はステップＳ１７
に進む。ここで、ｊの値は３０〜９０程度の値であり、
１秒前後の時間内に含まれるフィールド数を示す。
【００３８】ステップＳ１６では、制御係数Ｋｃに入力
値Ｋｃ１を代入する。ここで入力値Ｋｃ１は、０．９９
程度の値となっている。
値Ｋｃ１を代入する。ここで入力値Ｋｃ１は、０．９９
程度の値となっている。
【００３９】また、ステップＳ１５での判断結果がＹｅ
ｓとなり、ステップＳ１７に進んだ場合は、制御係数Ｋ
ｃに入力値Ｋｃ２を代入する。ここで、入力値Ｋｃ２
は、０．５〜０．７などの値であり、入力値Ｋｃ１より
も相対的に小さな値となっている。この入力値Ｋｃ２が
小さいということは、前フィールドまでの補正ベクトル
の影響が早くなくなるということを意味しており、徐々
に画面のセンタリングが行われる。シーンチェンジから
十分な時間が経った後、制御係数Ｋｃに入力値Ｋｃ１を
書き込み、通常の防振動作を続行する。
ｓとなり、ステップＳ１７に進んだ場合は、制御係数Ｋ
ｃに入力値Ｋｃ２を代入する。ここで、入力値Ｋｃ２
は、０．５〜０．７などの値であり、入力値Ｋｃ１より
も相対的に小さな値となっている。この入力値Ｋｃ２が
小さいということは、前フィールドまでの補正ベクトル
の影響が早くなくなるということを意味しており、徐々
に画面のセンタリングが行われる。シーンチェンジから
十分な時間が経った後、制御係数Ｋｃに入力値Ｋｃ１を
書き込み、通常の防振動作を続行する。
【００４０】次に、ステップＳ１８において、以下の式
を実行する。 ＣＶi ＝ＭＶi ＋Ｋｃ×ＣＶi-1 ０＜Ｋｃ≦
１ ここで、ＣＶi は画像補正ベクトルを意味しており、前
フィールドの画像補正ベクトルＣＶi-1 に制御係数Ｋｃ
を乗算し、これに現在求められた動きベクトルＭＶi を
加算して求めたものである。
を実行する。 ＣＶi ＝ＭＶi ＋Ｋｃ×ＣＶi-1 ０＜Ｋｃ≦
１ ここで、ＣＶi は画像補正ベクトルを意味しており、前
フィールドの画像補正ベクトルＣＶi-1 に制御係数Ｋｃ
を乗算し、これに現在求められた動きベクトルＭＶi を
加算して求めたものである。
【００４１】次に、ステップＳ１９において、画像補正
ベクトルＣＶi を画像メモリ２の読み出しアドレスＰ４
に変換して出力する。この実施例においては、ＣＶi ＝
０のときに、画面中央から画像を読み出すものとする。
次に、ステップＳ２０において、直前のフィールドの画
像補正ベクトルＣＶi-1 に現フィールドの画像補正ベク
トルＣＶi をコピーする。
ベクトルＣＶi を画像メモリ２の読み出しアドレスＰ４
に変換して出力する。この実施例においては、ＣＶi ＝
０のときに、画面中央から画像を読み出すものとする。
次に、ステップＳ２０において、直前のフィールドの画
像補正ベクトルＣＶi-1 に現フィールドの画像補正ベク
トルＣＶi をコピーする。
【００４２】以上説明したように、本実施例において
は、シーンチェンジの後の１秒位の間はゆっくり画面が
センタリングされ、シーンチェンジ検出回路や他のカメ
ラ機能が誤動作を起こしても、画面が急激に大きく揺れ
ることはなく、不快な画像になることがない。
は、シーンチェンジの後の１秒位の間はゆっくり画面が
センタリングされ、シーンチェンジ検出回路や他のカメ
ラ機能が誤動作を起こしても、画面が急激に大きく揺れ
ることはなく、不快な画像になることがない。
【００４３】
【発明の効果】本発明は上述したように、シーンチェン
ジの有無に応じて画像のシフト量を制御するようにした
ので、シーンが変わることによって画面間の相関が無く
なった場合でも、画面が急激に大きく揺れたりする不都
合を防止することができる。これにより、シーンチェン
ジの際にも正常に画像の防振を行うことができ、シーン
チェンジの際に不必要に画面が揺れたり、防振が一時的
に止まったりするという不快な現象が生じないようにす
ることができる。
ジの有無に応じて画像のシフト量を制御するようにした
ので、シーンが変わることによって画面間の相関が無く
なった場合でも、画面が急激に大きく揺れたりする不都
合を防止することができる。これにより、シーンチェン
ジの際にも正常に画像の防振を行うことができ、シーン
チェンジの際に不必要に画面が揺れたり、防振が一時的
に止まったりするという不快な現象が生じないようにす
ることができる。
【図１】本発明の一実施例における画像揺れ補正装置の
概略構成を示すブロック図である。
概略構成を示すブロック図である。
【図２】画像揺れ補正装置の動作を示すフローチャート
である。
である。
【図３】図１に示したシーンチェンジ検出回路の概略構
成を示すブロック図である。
成を示すブロック図である。
【図４】画像揺れ補正装置の動作の他の例を示すフロー
チャートである。
チャートである。
【図５】従来の画像揺れ補正装置の概略構成を示すブロ
ック図である。
ック図である。
１ ビデオ再生機 ２ 画像メモリ ３、１１ 動きベクトル検出回路 ４ マイコン ５ 画像拡大回路 ６ シーンチェンジ検出回路 Ｐ１ 再生された映像信号 Ｐ２ 動きベクトルのディジタルデータ Ｐ３ 相関係数のディジタルデータ Ｐ４ 読み出しアドレスのディジタルデータ Ｐ５ 画像拡大率のディジタルデータ Ｐ６ 出力映像信号 １２、１５ しきい値判定回路 １３ カウンタ １４ 微分回路
Claims (4)
- 【請求項１】 映像信号を処理して画面をシフトする画
像シフト手段と、 入力画像のシーンチェンジの有無を検出するシーンチェ
ンジ検出手段と、 前記シーンチェンジ検出手段によって検出されたシーン
チェンジの有無に応じて、前記画像シフト手段での画像
シフト量の制御を行う制御手段とを有することを特徴と
する画像揺れ補正装置。 - 【請求項２】 前記制御手段は、前記シーンチェンジ検
出手段がシーンチェンジを検出したときに、過去の画像
の動き量を積算した積算値をリセットすることを特徴と
する請求項１記載の画像揺れ補正装置。 - 【請求項３】 前記制御手段は、前記シーンチェンジ検
出手段がシーンチェンジを検出したときに、画面切り出
し位置を中央に戻すことを特徴とする請求項１記載の画
像揺れ補正装置。 - 【請求項４】 前記シーンチェンジ検出手段は、前画面
と現画面との最大相関値の大きさ、および前記最大相関
値の時間変化の大きさをしきい値と比較した結果に基づ
いて、シーンチェンジの有無を検出することを特徴とす
る請求項１〜３のいずれか１項に記載の画像揺れ補正装
置。
Priority Applications (5)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP5284541A JPH07115584A (ja) | 1993-10-19 | 1993-10-19 | 画像揺れ補正装置 |
| US08/321,883 US5614945A (en) | 1993-10-19 | 1994-10-14 | Image processing system modifying image shake correction based on superimposed images |
| EP94116430A EP0649256B1 (en) | 1993-10-19 | 1994-10-18 | Motion compensation of a reproduced image signal |
| DE69435031T DE69435031T2 (de) | 1993-10-19 | 1994-10-18 | Bewegungskompensation für ein reproduziertes Bildsignal |
| US08/796,681 US6049354A (en) | 1993-10-19 | 1997-02-06 | Image shake-correcting system with selective image-shake correction |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP5284541A JPH07115584A (ja) | 1993-10-19 | 1993-10-19 | 画像揺れ補正装置 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JPH07115584A true JPH07115584A (ja) | 1995-05-02 |
Family
ID=17679798
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP5284541A Pending JPH07115584A (ja) | 1993-10-19 | 1993-10-19 | 画像揺れ補正装置 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JPH07115584A (ja) |
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20010010053A (ko) * | 1999-07-15 | 2001-02-05 | 김영환 | 화면 소거시 화면 흔들림 방지 회로 |
| JP2007516679A (ja) * | 2003-12-23 | 2007-06-21 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | ビデオデータを安定させるための方法及びシステム |
| US7474766B2 (en) | 2000-09-01 | 2009-01-06 | Minolta Co., Ltd. | Motion image processor, motion image processing method and recording medium |
| JP2009533008A (ja) * | 2006-04-05 | 2009-09-10 | クゥアルコム・インコーポレイテッド | 映像符号化のための時間的品質メトリック |
| JP2013502101A (ja) * | 2009-08-12 | 2013-01-17 | インテル・コーポレーション | 共通処理要素に基づく動画安定化及び動画ショット境界検出を実行する技術 |
-
1993
- 1993-10-19 JP JP5284541A patent/JPH07115584A/ja active Pending
Cited By (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20010010053A (ko) * | 1999-07-15 | 2001-02-05 | 김영환 | 화면 소거시 화면 흔들림 방지 회로 |
| US7474766B2 (en) | 2000-09-01 | 2009-01-06 | Minolta Co., Ltd. | Motion image processor, motion image processing method and recording medium |
| JP2007516679A (ja) * | 2003-12-23 | 2007-06-21 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | ビデオデータを安定させるための方法及びシステム |
| JP2009533008A (ja) * | 2006-04-05 | 2009-09-10 | クゥアルコム・インコーポレイテッド | 映像符号化のための時間的品質メトリック |
| US9025673B2 (en) | 2006-04-05 | 2015-05-05 | Qualcomm Incorporated | Temporal quality metric for video coding |
| JP2013502101A (ja) * | 2009-08-12 | 2013-01-17 | インテル・コーポレーション | 共通処理要素に基づく動画安定化及び動画ショット境界検出を実行する技術 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US6049354A (en) | Image shake-correcting system with selective image-shake correction | |
| US6122004A (en) | Image stabilizing circuit for a camcorder | |
| US8031229B2 (en) | Imaging apparatus and imaging control method | |
| JP2600504B2 (ja) | 動きベクトル検出回路 | |
| US20100188511A1 (en) | Imaging apparatus, subject tracking method and storage medium | |
| KR19990081317A (ko) | 동영상의 적응적 디스플레이 속도 자동조절 장치와 방법 | |
| US10218908B2 (en) | Image processing apparatus capable of performing image shake correction, image pickup apparatus, and control method | |
| JPH0622298A (ja) | シーンチェンジ検出装置 | |
| JP5166860B2 (ja) | 画像処理装置及び方法、及び撮像装置 | |
| JP5158409B2 (ja) | 撮像装置及びそのプログラム | |
| US20050157188A1 (en) | Image capturing apparatus and method of performing noise process on moving picture | |
| US7382401B2 (en) | Data processing apparatus | |
| JPH07115584A (ja) | 画像揺れ補正装置 | |
| JP3421859B2 (ja) | パノラマ画像作成装置の動きベクトル検出方法及び装置 | |
| JPH06350895A (ja) | ビデオカメラの手振れ補正方法 | |
| US8405768B2 (en) | Moving image processing apparatus and method thereof | |
| JPH07143380A (ja) | ビデオ信号記録再生装置 | |
| JP3302472B2 (ja) | 画像振れ補正装置および方法 | |
| JPH05183801A (ja) | 自動露光制御回路 | |
| JP5371310B2 (ja) | 画像処理装置 | |
| JP7175941B2 (ja) | 画像処理装置、画像処理装置の制御方法、プログラム | |
| JPH07107367A (ja) | 画像処理装置 | |
| JP2003256846A (ja) | 画像処理装置と画像処理方法および画像処理プログラム | |
| JP3336085B2 (ja) | 撮像記録再生装置 | |
| JP6742862B2 (ja) | 撮像装置、画像処理装置、撮像装置の制御方法、プログラム |