JP2827424B2 - 画振れ補正装置 - Google Patents

画振れ補正装置

Info

Publication number
JP2827424B2
JP2827424B2 JP2085693A JP8569390A JP2827424B2 JP 2827424 B2 JP2827424 B2 JP 2827424B2 JP 2085693 A JP2085693 A JP 2085693A JP 8569390 A JP8569390 A JP 8569390A JP 2827424 B2 JP2827424 B2 JP 2827424B2
Authority
JP
Japan
Prior art keywords
image
circuit
image blur
image information
field
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2085693A
Other languages
English (en)
Other versions
JPH03285468A (ja
Inventor
茂樹 石塚
高行 佐々木
孝夫 高橋
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Priority to JP2085693A priority Critical patent/JP2827424B2/ja
Priority to EP91302826A priority patent/EP0450889B1/en
Priority to KR1019910004883A priority patent/KR100236682B1/ko
Priority to DE69123622T priority patent/DE69123622T2/de
Publication of JPH03285468A publication Critical patent/JPH03285468A/ja
Priority to US08/469,497 priority patent/US5585843A/en
Application granted granted Critical
Publication of JP2827424B2 publication Critical patent/JP2827424B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/523—Motion estimation or motion compensation with sub-pixel accuracy
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H04N23/681—Motion detection
    • H04N23/6811—Motion detection based on the image signal
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H04N23/682—Vibration or motion blur correction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H04N23/682—Vibration or motion blur correction
    • H04N23/683—Vibration or motion blur correction performed by a processor, e.g. controlling the readout of an image memory

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Television Systems (AREA)
  • Color Television Image Signal Generators (AREA)
  • Television Signal Processing For Recording (AREA)
  • Studio Devices (AREA)
  • Adjustment Of Camera Lenses (AREA)

Description

【発明の詳細な説明】 以下の順序で本発明を説明する。
Ａ産業上の利用分野 Ｂ発明の概要 Ｃ従来の技術（第７図〜第11図） Ｄ発明が解決しようとする課題（第７図〜第11図） Ｅ課題を解決するための手段（第１図） Ｆ作用（第１図） Ｇ実施例（第１図〜第６図） （G1）第１の実施例（第１図〜第５図） （G2）第２の実施例（第６図） （G3）他の実施例 Ｈ発明の効果 Ａ産業上の利用分野 本発明は画振れ補正装置に関し、例えばカメラ一体型
ビデオテープレコーダに適用し得る。
Ｂ発明の概要 本発明は、画振れ補正装置において、１フイールド周
期で同時に得られる奇数フイールド分の第１の画像情報
及び偶数フイールド分の第２の画像情報から１フレーム
分の第３の画像情報を得て、当該連続する第３の画像情
報に基づいて画振れを補正することにより、画質の劣化
を有効に回避して画振れを補正することができる。
Ｃ従来の技術 従来、テレビジヨンカメラにおいては、画振れした分
だけ画像を移動させることにより、画振れを補正する方
法が提案されている。
すなわち第７図に示すように、テレビジヨンカメラ１
においては、例えばCCD（charge coupled device）固体
撮像素子２で被写体を撮像する。
固体撮像素子２は、受光素子を画素単位で水平及び垂
直走査配置してなる撮像部６を有し、基準信号発生回路
（TG）４から出力される基準信号に基づいて、各受光素
子に蓄積された電荷を順次レジスタ回路８を介してカメ
ラプロセス回路10に出力する。
これにより第８図に示すように、撮像部６において、
垂直走査方向に配列してなる受光素子IN、IN+1、……か
ら、偶数フイールドにおいては、加算回路EN+1、EN+2、
……を順次介して電荷を出力するのに対し、奇数フイー
ルドにおいては、加算回路ON、ON+1、……を介して電荷
を出力し、順次受光素子の出力信号がインタレースの順
序で連続してなる撮像信号Snを出力する。
カメラプロセス回路10は、当該撮像信号Snを輝度信号
SY、色差信号SR-Y、SB-Yに変換して画振れ補正回路12に
出力する。
ここで画振れ補正回路12は、輝度信号SYを動き検出回
路14に受け、フレーム相関を利用して動きベクトルを検
出することにより、画振れの方向及び大きさを検出す
る。
制御回路16は、検出された動きベクトルに基づいて、
ビデオメモリ回路18に一旦格納された輝度信号SY、色差
信号SR-Y、SB-Yを読み出し、これにより画振れした分だ
け撮像画像を平行移動させる。
例えば第９図に示すように、yn、yn+256、yn+1、y
n+257、……ラインの輝度信号SY、色差信号SR-Y、SB-Y
を、それぞれyn+1、yn+257、yn+2、yn+258、……ライン
のタイミングで読み出すことにより、この場合輝度信号
SY、色差信号SR-Y、SB-Yの画像を垂直方向に２ライン分
平行移動させる。
これにより制御回路16は、水平方向については画素単
位で、垂直方向については２ライン単位で画振れを補正
する。
さらに制御回路16は、垂直補間回路20及び水平補間回
路22で、さらに細かい精度で画振れを補正する。
すなわち垂直補間回路20においては、ビデオメモリ回
路18の出力信号を増幅回路24で増幅した後、加算回路26
に与える。
さらに垂直補間回路20は、遅延時間が１水平走査期間
に設定された遅延回路28を介して、増幅回路30にビデオ
メモリ回路18の出力信号を与え、当該増幅回路30の出力
信号を加算回路26に出力する。
これにより制御回路16でそれぞれ増幅回路24及び30の
利得を制御して、ビデオメモリ回路18から出力されるビ
デオ信号を補間処理し、垂直方向に２ライン以下の画振
れを補正する。
すなわち第10図に示すように、１ライン分の画振れを
補正する場合は、それぞれ増幅回路24及び30の利得を1/
2に設定し、各フイールド毎に隣接するラインyn及びy
n+1、yn+1及びyn+2、……の加算信号（yn＋yn+1）/2、
（yn+1＋yn+2）/2、……を出力する。
同様に水平補間回路22においては、遅延回路28に代え
て遅延時間が１クロック周期の遅延回路を用いることに
より、画素間隔以下の画振れを補正する。
これにより画振れ補正回路12を介して、画振れした分
撮像画像を平行移動させ、画振れを補正することができ
る。
ところで第11図に示すように、画像Ｇにおいて、画振
れにより画像中心に撮像されていた被写体Ｎが画像Ｇの
右上隅に移動した場合（第11図（Ａ））、矢印のように
画像全体を平行移動させれば画振れを補正することがで
きる（第11図（Ｂ））。
ところがこの場合斜線で示すように画角の中に画枠が
配置されるようになり、表示画面が見苦しくなる欠点が
ある。
このため制御回路12においては、ビデオメモリ回路18
の読み出しのタイミン及び増幅回路24及び30の利得を制
御し、各画像Ｇ中の位置に応じて平行移動量を切り換え
ることにより、画像Ｇを拡大し、画枠が表示されないよ
うに補正する（第11図（Ｃ））。
すなわち画像Ｇの中心部分においては、動きベクトル
の分だけ平行移動させるのに対し、画像Ｇの周辺部分に
おいては、周辺に近づくに従つて画面が拡大するように
動きベクトルから得られる平行移動量を補正して画振れ
を補正する。
これにより画振れ補正回路12を介して、画振れを補正
し得、補正した輝度信号、色差信号をビデオ信号合成回
路32に出力して画振れを補正したビデオ信号を得ること
ができる。
Ｄ発明が解決しようとする課題 ところがこのように垂直方向に補間演算の手法を用い
て画振れを補正する場合、垂直方向について解像度の劣
化を避けえない問題がある。
さらに垂直補間回路22で各フイールド毎に隣接するラ
インyn及びyn+1、yn+1及びyn+2、……の加算信号（yn＋
yn+1）/2、（yn+1＋yn+2）/2、……を出力することによ
り偶数フイールド及び奇数フイールド間でラインの上下
関係が反転し、例えば斜め線がギザギザに表示され、表
示画像が見苦しくなる問題がある。
この問題を解決する１つの方法として、フレーム単位
で画振れを補正する方法も考えられるが、この方法の場
合、動画が２重写しに表示される恐れがある。
本発明は以上の点を考慮してなされたもので、画質の
劣化を有効に回避することができる画振れ補正装置を提
案しようとするものである。
Ｅ課題を解決するための手段 かかる課題を解決するため本発明において、１フイー
ルド周期で奇数フイールド分の第１の画像情報及び偶数
フイールド分の第２の画像情報を同時に得て１フレーム
分の第３の画像情報SYO、SYE、SR-YO、SR-YE、SB-YO、S
B-YEとして出力する撮像手段52、54、60と、１フイール
ド周期で順次続く第３の画像情報SYO、SYEを比較して画
振れ量を検出する画振れ量検出手段64、66、68、70、72
と、画振れ量検出手段64、66、68、70、72の検出結果に
基づいて第３の画像情報SYO、SYE、SR-YO、SR-YE、S
B-YO、SB-YEの画像を平行移動及び拡大し、第３の画像
情報SYO、SYE、SR-YO、SR-YE、SB-YO、SB-YEの画振れを
補正して出力する補正回路74、76、78、80と、補正回路
74、76、78、80から出力される補正後の第３の画像情報
を１フイールド周期で奇数及び偶数フイールドが連続す
るビデオ信号に変換するビデオ信号合成回路84とを設け
るようにした。
Ｆ作用 １フイールド周期で同時に得られる奇数フイールド分
の第１の画像情報及び偶数フイールド分の第２の画像情
報から１フレーム分の第３の画像情報SYO、SYE、
SR-YO、SR-YE、SB-YO、SB-YEを得て、当該連続する第３
の画像情報SYO、SYE、SR-YO、SR-YE、SB-YO、SB-YEに基
づいて画振れ量を検出すれば、高い精度で画振れ量を検
出することができる。
さらに、１フイールド周期で同時に得られる奇数フイ
ールド分の第１の画像情報及び偶数フイールド分の第２
の画像情報から１フレーム分の第３の画像情報SYO、
SYE、SR-YO、SR-YE、SB-YO、SB-YEの画振れを、当該検
出結果に基づいて補正した後、１フイールド周期で奇数
及び偶数フイールドが連続するビデオ信号に変換すれ
ば、画質の劣化を有効に回避して画振れ補正することが
できる。
Ｇ実施例 以下図面について、本発明の一実施例を詳述する。
（G1）第１の実施例 第１図において、50は全体としてカメラ一体型ビデオ
テープレコーダを示し、CCD固体撮像素子52で被写体を
撮像する。
撮像素子52は、基準信号発生回路54から出力される基
準信号に基づいて、撮像部６の各受光素子に蓄積された
電荷をそれぞれレジスタ回路56及び58を介してカメラプ
ロセス回路60に出力する。
このときレジスタ回路56においては、垂直方向に連続
する受光素子のうち、奇数番目の受光素子に蓄積された
電荷を取り込んで出力するのに対し、レジスタ回路58に
おいては、偶数番目の受光素子に蓄積された電荷を取り
込んで出力する。
これにより第２図に示すように、レジスタ回路56及び
58を介して、それぞれ偶数及び奇数フイールドの撮像信
号（すなわち実線及び破線で示す）を得ることができ
る。
このとき撮像素子52においては、基準信号発生回路54
から出力される基準信号に基づいて動作することによ
り、それぞれレジスタ回路56及び58を介して、1/60〔se
c〕周期で（すなわちインタレースのビデオ信号の１フ
イールド周期でなる）繰り返される撮像信号SSを出力す
る。
従つて、カメラプロセス回路60において、例えば1/60
〔sec〕周期でレジスタ回路56及び58の出力信号を交互
に取り込んで処理すれば、インタレースの順序で連続す
る撮像信号を処理することができる。
かくしてこの実施例において撮像素子52は、１フレー
ム分の画像情報を１フイールド周期で繰り返し出力する
撮像素子を構成する。
ここでカメラプロセス回路60は、レジスタ回路56及び
58の出力信号を同時並列的に処理し、これによりそれぞ
れ偶数フイールド及び奇数フイールドの輝度信号SYO及
びSYE、色差信号SR-YO及びSR-YE、SB-YO及びSB-YEをそ
れぞれ1/60〔sec〕周期で繰り返し出力する。
画振れ補正回路62は、偶数フイールド及び奇数フイー
ルドの輝度信号SYO及びSYEを取り込んで動きベクトルを
検出する。
すなわち画振れ補正回路62は、輝度信号SYO及びSYEを
補正量検出回路63の特徴点抽出回路64に与える。
ここで特徴点抽出回路64は、輝度信号SYO及びSYEを微
分処理することにより、撮像画像のエツジを検出し、当
該エツジ上に所定間隔で特徴点を設定する。
さらに特徴点抽出回路64は、特徴点の画像データを代
表点メモリ回路66に格納し、この実施例においては、当
該特徴点を基準にして動きベクトルを検出する。
さらに特徴点抽出回路64は、特徴点の設定が完了する
と、輝度信号SYO及びSYEをフイールド相関回路68に出力
する。
代表点メモリ回路66は、特徴点の画像データを1/60
〔sec〕周期だけ遅延させ、その座標データと共にフイ
ールド相関回路68に出力する。
フイールド相関回路68は、代表点メモリ回路66から出
力される座標データに基づいて動きベクトル検出範囲を
設定し、これにより１周期前に設定された特徴点（すな
わち1/60〔sec〕周期前に入力された輝度信号SYO及びS
YEについて設定された特徴点でなる）の周囲に動きベク
トル検出範囲を設定する。
さらにフイールド相関回路68は、当該動きベクトル検
出範囲において、１周期前の特徴点の画像データに対し
て動きベクトル検出範囲の画像データを順次減算し、減
算結果をフイールド内累積加算回路70に出力する。
これによりフイールド相関回路68を介して、１周期前
の輝度信号SYO及びSYEで形成される画像を、動きベクト
ル検出範囲の中で、順次画素単位で水平走査方向及び垂
直走査方向に移動させ、続く周期の輝度信号SYO及びSYE
で形成される画像との間で、特徴点について差データを
順得ることができる。
フイールド内累積加算回路70は、入力された差データ
の絶対値を得、特徴点に対する移動位置毎に、当該絶対
値を累積加算する。
動きベクトル有効性判定回路72は、フイールド内累積
加算回路70で検出された絶対値の累積加算値から最小値
を検出する。
さらに動きベクトル有効性判定回路72は、当該最小値
の周囲の累積加算値を求め、これらの累積加算値を２次
曲線に近似させて最小値を検出することにより、画素単
位以下の精度で動きベクトルを検出する。
すなわち画振れの画像においては、画振れの分だけ画
像を変位させれば、１周期前の画像と一致させることが
できる。
従つて、順次画像を移動させて差データの絶対値和を
得るようにすれば、特徴点の差データにおいては、画振
れの分だけ画像を変位させた位置で最小値が得られる。
すなわち累積値の最小値を検出するようにすれば、画
振れの量を検出することができ、このとき累積値の最小
値を検出することにより、例えば画角内で背景が微妙に
変化している場合でも、画振れの量を検出することがで
きる。
さらに動きベクトル有効性判定回路72は、検出された
最小値の周辺の累積加算値を検出し、検出された動きベ
クトルの有効性を判断する。
すなわち累積加算値が急激に減少している場合は、エ
ツジに特徴点を設定したことにより、検出された動きベ
クトルと画振れの量とが一致すると判断することができ
る。
これに対して、累積加算値の減少が小さく、他に累積
加算値の最小値と同じ様な値の極小値等が存在する場合
は、検出された動きベクトルと画振れの量とが一致しな
い場合がある。
従つて動きベクトル有効性判定回路72は、検出された
最小値の周辺の累積加算値の値を検出することにより、
検出された動きベクトルが画振れの量と一致するか否か
判断し、一致しないと判断した場合は、その直前に検出
した画振れ量を出力する。
これに対して検出された動きベクトルが画振れの量と
一致すると判断した場合は、検出した動きベクトルを画
振れ量として出力する。
かくして１フレーム分の画像情報を１フイールド周期
で繰り返し取り込み、当該画像情報に基づいて動きベク
トルを検出したことにより、従来のフレーム相関を利用
して動きベクトルを検出する場合に比して高い精度で画
振れの量を検出することができる。
すなわち第３図に示すように、従来のインタレースの
輝度信号に基づいて動きベクトルを検出する場合、1/30
〔sec〕周期でしか比較対象の画像が得られない。
従つてこの実施例と同じように、１フレーム分の画像
情報で動きベクトルを検出する場合、1/30〔sec〕周期
でしか動きベクトルを検出し得ず、その分動きベクトル
に基づいて画振れを補正する場合、補正の精度が劣化す
る。
これに対して、偶数フイールド同士、奇数フイールド
同士で、この実施例と同じように1/60〔sec〕周期で動
きベクトルを検出する場合、１フイールド分の画像情報
で動きベクトルV1、V2を検出することになり、その分検
出精度が劣化する。
ところが第４図に示すように、１フレーム分の画像情
報を１フイールド周期で繰り返し取り込んで動きベクト
ルを検出するれば、１フレーム分の画像情報に基づいて
1/60〔sec〕周期で動きベクトルV1、V2、……を検出す
ることができ、その分従来に比して高い精度で動きベク
トルV1、V2、……を検出して精度の高い画振れ量を検出
することができる。
移動量演算回路74は、当該移動量演算回路74の出力デ
ータを１フイールド周期だけ遅延させて動きベクトル有
効性判定回路72の出力データから減算して出力するよう
になされ、これにより画振れ補正量を検出する。
すなわち動きベクトルから得られた１フイールド前の
画像を基準にした画振れ量を、所定の基準フイールドを
基準にした移動量に変換し、これにより当該移動量で撮
像画像を補正して画振れを補正する。
アドレス発生回路76は、移動量演算回路74の出力デー
タに基づいてビデオメモリ回路78のアドレスデータ及び
補間回路80の制御データを作成し、これにより移動量演
算回路74の出力データに基づいて撮像画像の画振れを補
正する。
このときアドレス発生回路76は、操作パネル上の画振
れ補正操作子76Aがオン操作されると、画振れ補正動作
を開始する。
このとき操作パネル上の第２の操作子76Bがオフ操作
されていると、平行移動だけして画振れを補正するのに
対し、操作子76Bがオン操作されていると、平行移動に
加えて画像の拡大処理を実行して画振れを補正する。
すなわちビデオメモリ回路78においては、遅延回路82
を介して入力される輝度信号SYO及びSYE、色差信号S
R-YO及びSR-YE、SB-YO及びSB-YEを順次格納し、アドレ
ス発生回路76から出力されるアドレスデータに基づいて
順次出力する。
このときビデオメモリ回路78においては、１フイール
ド周期で連続する１フレーム分の画像情報をアドレスデ
ータに基づいて順次出力することにより、１ライン単位
で画振れを補正する。
すなわち第５図に示すように、yn、yn+256、yn+1、y
n+257、……ラインの輝度信号SYO及びSYE、色差信号S
R-YO及びSR-YE、SB-YO及びSB-YEをyn+256、yn+1、y
n+257、……ラインのタイミングで順次出力することに
より、１ライン単位で画振れを補正する。
さらにここでビデオメモリ回路78は、それぞれ偶数フ
イールドの画像情報を1/60〔sec〕で繰り返してなる輝
度信号SYE、色差信号SR-YE及びSB-YEと、奇数フイール
ドの画像情報を1/60〔sec〕で繰り返してなる輝度信号S
YO、色差信号SR-YO及びSB-YOを、インインタレースの順
序で1/60〔sec〕周期で繰り返してなる輝度信号、色差
信号に変換して出力する。
これに対して補間回路80は、従来の垂直補間回路20及
び水平補間回路22と同一構成で２倍の周波数で動作する
補間回路を有し、ビデオメモリ回路78から出力される輝
度信号、色差信号を補間処理することにより、１ライン
以下の単位で画振れを補正する。
かくして従来のインタレースの信号を画振れ補正する
場合、２ライン単位以下の補正においては、補間演算に
よらなければ補正し得ないのに対し、この実施例におい
ては１フレーム分の画像情報を１フイールド周期で繰り
返すことにより、１ライン単位以下の補正について補間
演算により補正し得、その分垂直解像度の低下を有効に
回避することができる。
さらにこのとき、１フイールド周期で繰り返す１フレ
ーム分の画像情報に基づいて、画振れ補正量を検出した
ことにより、精度の高い補正量を検出し得、当該補正量
に基づいて画振れ補正することにより、高い精度で画振
れ補正することができる。
また１フイールド周期で繰り返す１フレーム分の画像
情報を画振れ補正したことにより、ラインの上下関係の
反転を有効に回避し得、その分画質の劣化を有効に回避
することができる。
インタレース変換回路84は、ノンインタレースの順番
で1/60〔sec〕周期で繰り返してなる輝度信号、色差信
号を、メモリ回路に一旦格納した後出力することによ
り、インタレース処理された輝度御信号及び色差信号に
変換する。
クロマエンコーダ回路86は、色差信号を変調処理し、
クロマ信号に変換する。
記録信号生成回路88は、クロマ信号を低域変換すると
共に、輝度信号を周波数変調し、これにより輝度信号及
びクロマ信号を記録信号に変換した後、記録信号増幅回
路90を介して磁気ヘツド92に出力し、かくして画振れ補
正したビデオ信号を磁気テープ94に記録することができ
る。
かくしてこの実施例において、特徴点抽出回路64、代
表点メモリ回路66、フイールド相関回路68、フイールド
内累積加算回路70、動きベクトル有効性判定回路72は、
１フイールド周期で連続する１フレーム分の画像情報に
基づいて、当該画像情報のフイールド相関を利用して画
振れ量を検出する画振れ量検出手段を構成するのに対
し、移動量演算回路74、アドレス発生回路76、ビデオメ
モリ回路78、補間回路80は、画振れ量検出手段の検出結
果に基づいて、当該画像情報の画像を平行移動及び拡大
し、画像情報の画振れを補正して出力する補正回路を構
成する。
これに対してインタレース変換回路84は、上記補正回
路から出力される画像情報を、上記画像情報のフイール
ド周期で奇数及び偶数フイールドが連続するビデオ信号
に変換するビデオ信号合成回路を構成する。
以上の構成において、撮像素子52を介して、１フイー
ルド周期で１フレーム分の画像情報が連続する撮像信号
SSが得られ、当該撮像信号SSがカメラプロセス回路69で
輝度信号SYO、SYE及び色差信号SR-YO、SR-YE、SB-YO、S
B-YEに変換される。
この内輝度信号SYO、SYEは、特徴点抽出回路64でエツ
ジ検出され、検出されたエツジ上に代表点が設定され
る。
さらに当該輝度信号SYO、SYEは、フイールド相関回路
68で代表点を中心にして順次差データが得られ、これに
よりフイールド内累積加算回路70、動きベクトル有効性
判定回路72を介して動きベクトルが検出され、画振れ量
が検出される。
かくして、１フイールド周期で１フレーム分の画像情
報が連続する輝度信号SYO、SYEに基づいて、画振れ量を
検出したことにより、高い精度で画振れ量を検出するこ
とができる。
従つて、当該検出結果に基づいて画振れ補正すること
により、従来に比して高い精度で画振れ補正することが
でき、その分画質の劣化を有効に回避することができ
る。
検出された画振れ補正量は、アドレス発生回路76に出
力され、ここで当該補正量に応じてアドレスデータ及び
補間回路80の制御データが作成される。
これによりビデオメモリ回路78に一旦格納された輝度
信号SYO、SYE及び色差信号SR-YO、SR-YE、SB-YO、SB-YE
は、垂直走査方向についてはライン単位で、水平走査方
向については画素単位で画振れ補正され、１フイールド
周期で連続する１フレーム分の画像情報に変換されて出
力される。
さらにビデオメモリ回路78から出力された画像情報
は、補間回路80で、水平及び垂直走査方向に画素及びラ
イン単位以下の精度で画振れ補正された後、インタレー
ス変換回路84でインタレースの映像信号に変換される。
かくして１フイールド周期で１フレーム分の画像情報
が連続する輝度信号SYO、SYE及び色差信号SR-YO、
SR-YE、SB-YO、SB-YEを画振れ補正した後、インタレー
ス変換回路84でインタレースの映像信号に変換したこと
により、画質の劣化を有効に回避して画振れ補正するこ
とができる。
以上の構成によれば、１フイールド周期で１フレーム
分の画像情報が連続する輝度信号SYO、SYEに基づいて、
画振れ補正量を検出すると共に、当該検出結果に基づい
て１フイールド周期で１フレーム分の画像情報が連続す
る輝度信号SYO、SYE及び色差信号SR-YO、SR-YE、
SB-YO、SB-YEを画振れ補正した後、インタレース変換回
路84でインタレースの映像信号に変換したことにより、
画質の劣化を有効に回避して高い精度で画振れ補正する
ことができる。
（G2）第２の実施例 第１図との対応部分に同一符号を付して示す第６図に
おいて、95は全体としてカメラ一体型ビデオテープレコ
ーダを示し、ビデオメモリ回路78に代えて撮像素子52の
タイミングを制御して大まかに画振れ補正する。
すなわちカメラ一体型ビデオテープレコーダ95におい
て、補正量検出回路96は、第１の実施例と同様の手法を
用いて画振れ量を検出した後、当該検出結果を積分する
ことにより画振れ補正量を検出する。
さらに補正量検出回路96は、当該検出結果に基づい
て、制御回路97に制御信号を出力し、これにより撮像素
子52のタイミングを制御して水平走査方向については画
素単位で、垂直走査方向については１ライン単位で画振
れを補正する。
これに対して補間回路98は、補間回路80と同様に、順
次入力される輝度信号SYO、SYE及び色差信号SR-YO、S
R-YE、SB-YO、SB-YEを、水平及び垂直走査方向について
それぞれ画素及びライン単位以下で画振れ補正する。
第６図に示す構成によれば、ビデオメモリ回路に代え
て撮像素子52のタイミングを制御して画振れ補正するこ
とにより、簡易な構成で画質の劣化を有効に回避して画
振れ補正することができる。
（G3）他の実施例 なお上述の実施例においては、CCD固体撮像素子を用
いて被写体を撮像する場合について述べたが、本発明は
これに限らず、種々の撮像手段を広く適用することがで
きる。
さらに上述の実施例においては、本発明をカメラ一体
型ビデオテープレコーダに適用した場合について述べた
が、本発明はこれに限らず、例えばテレビジヨンカメラ
に適用するようにしてもよい。
Ｈ発明の効果 上述のように本発明によれば、１フイールド周期で同
時に得られる奇数フイールド分の第１の画像情報及び偶
数フイールド分の第２の画像情報から１フレーム分の第
３の画像情報を得て、当該連続する第３の画像情報に基
づいて画振れ量を検出して画振れ補正した後、１フイー
ルド周期で奇数及び偶数フイールドが連続するビデオ信
号に変換することにより、画質の劣化を有効に回避して
画振れ補正することができる画振れ補正装置を実現でき
る。
【図面の簡単な説明】
第１図は本発明の一実施例によるカメラ一体型ビデオテ
ープレコーダを示すブロツク図、第２図はその撮像信号
の説明に供する略線図、第３図及び第４図は動きベクト
ルの検出の説明に供する略線図、第５図は画振れ補正の
説明の供する略線図、第６図は第２の実施例を示すブロ
ツク図、第７図は従来のテレビジヨンカメラを示すブロ
ツク図、第８図はその撮像素子を示す略線図、第９図及
び第10図は平行移動による画振れ補正の説明の供する略
線図、第11図は画面の拡大による画振れ補正の説明の供
する略線図である。 ２、52……撮像素子、10、60……カメラプロセス回路、
12、62……画振れ補正回路、18、78……ビデオメモリ回
路、63、96……補正量検出回路、64……特徴点抽出回
路、66……代表点メモリ回路、68……フイールド相関回
路、70……フイールド内累積加算回路、72……動きベク
トル有効性判定回路、74……移動量演算回路、80、98…
…補間回路、84……インタレース変換回路。
───────────────────────────────────────────────────── フロントページの続き (56)参考文献 特開 平２−79586（ＪＰ，Ａ) 特開 平２−79585（ＪＰ，Ａ) 特開 平１−125064（ＪＰ，Ａ) (58)調査した分野(Int.Cl.6，ＤＢ名) H04N 5/232

Claims (1)

    (57)【特許請求の範囲】
  1. 【請求項１】１フイールド周期で奇数フイールド分の第
    １の画像情報及び偶数フイールド分の第２の画像情報を
    同時に得て、１フレーム分の第３の画像情報として出力
    する撮像手段と、 １フイールド周期で順次続く上記第３の画像情報を比較
    して、画振れ量を検出する画振れ量検出手段と、 上記画振れ量検出手段の検出結果に基づいて、上記第３
    の画像情報の画像を平行移動及び拡大し、上記第３の画
    像情報の画振れを補正して出力する補正回路と、 上記補正回路から出力される上記補正後の上記第３の画
    像情報を、１フイールド周期で奇数及び偶数フイールド
    が連続するビデオ信号に変換するビデオ信号合成回路と を具えることを特徴とする画振れ補正装置。
JP2085693A 1990-03-31 1990-03-31 画振れ補正装置 Expired - Fee Related JP2827424B2 (ja)

Priority Applications (5)

Application Number Priority Date Filing Date Title
JP2085693A JP2827424B2 (ja) 1990-03-31 1990-03-31 画振れ補正装置
EP91302826A EP0450889B1 (en) 1990-03-31 1991-03-28 Image shift correction for video cameras
KR1019910004883A KR100236682B1 (ko) 1990-03-31 1991-03-28 화상 흔들림 보정 장치
DE69123622T DE69123622T2 (de) 1990-03-31 1991-03-28 Bildverschiebungskorrektur für eine Videokamera
US08/469,497 US5585843A (en) 1990-03-31 1995-06-06 Video camera with image shift correction

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2085693A JP2827424B2 (ja) 1990-03-31 1990-03-31 画振れ補正装置

Publications (2)

Publication Number Publication Date
JPH03285468A JPH03285468A (ja) 1991-12-16
JP2827424B2 true JP2827424B2 (ja) 1998-11-25

Family

ID=13865917

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2085693A Expired - Fee Related JP2827424B2 (ja) 1990-03-31 1990-03-31 画振れ補正装置

Country Status (5)

Country Link
US (1) US5585843A (ja)
EP (1) EP0450889B1 (ja)
JP (1) JP2827424B2 (ja)
KR (1) KR100236682B1 (ja)
DE (1) DE69123622T2 (ja)

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3227173B2 (ja) * 1991-06-24 2001-11-12 キヤノン株式会社 撮像装置及びその方法
JP3308617B2 (ja) * 1992-12-28 2002-07-29 キヤノン株式会社 動きベクトル検出装置及びその方法
JP3688377B2 (ja) * 1996-01-31 2005-08-24 富士通株式会社 画像特徴追跡装置及び画像特徴追跡方法
US7365779B2 (en) * 2000-09-14 2008-04-29 Fujitsu Ten Limited Image processing apparatus for selectively storing specific regions of an image
JP2002101393A (ja) * 2000-09-22 2002-04-05 Sony Corp 映像表示装置
US20030223648A1 (en) * 2002-05-29 2003-12-04 Albrecht Richard E. Method of correcting image shift
JP4796755B2 (ja) * 2004-07-01 2011-10-19 Ｈｏｙａ株式会社 像ブレ補正装置
JP4615958B2 (ja) * 2004-10-15 2011-01-19 クラリオン株式会社 デジタル放送の送出装置、受信装置およびデジタル放送システム
US7715645B2 (en) * 2004-11-17 2010-05-11 Samsung Electronics Co., Ltd. Methods to estimate noise variance from a video sequence
KR100639164B1 (ko) 2005-03-12 2006-10-26 전재춘 영상 장치의 흔들림에 의한 영상 블러링 제거 방법
JP2017049318A (ja) * 2015-08-31 2017-03-09 キヤノン株式会社 焦点調節装置及びそれを用いた撮像装置及び焦点調節方法

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
NL8004312A (nl) * 1980-07-28 1982-03-01 Philips Nv Bewegingsdetectieschakeling.
JPS58119278A (ja) * 1982-01-08 1983-07-15 Nippon Kogaku Kk <Nikon> 固体撮像装置
DE3408016A1 (de) * 1984-03-05 1985-09-12 ANT Nachrichtentechnik GmbH, 7150 Backnang Verfahren zur bestimmung des displacements von bildsequenzen und anordnung sowie anwendungen hierzu
JPH0746861B2 (ja) * 1985-07-26 1995-05-17 ソニー株式会社 テレビジヨン画像の動き補正装置
JPH0683436B2 (ja) * 1985-07-26 1994-10-19 ソニー株式会社 動きベクトル検出方法
JP2615693B2 (ja) * 1987-11-09 1997-06-04 松下電器産業株式会社 ゆれ補正撮像装置
JP2634632B2 (ja) * 1988-06-15 1997-07-30 株式会社日立製作所 動き検出回路
US5111511A (en) * 1988-06-24 1992-05-05 Matsushita Electric Industrial Co., Ltd. Image motion vector detecting apparatus
GB2220319B (en) * 1988-07-01 1992-11-04 Plessey Co Plc Improvements in or relating to image stabilisation
US4959725A (en) * 1988-07-13 1990-09-25 Sony Corporation Method and apparatus for processing camera an image produced by a video camera to correct for undesired motion of the video camera
JPH0231570A (ja) * 1988-07-20 1990-02-01 Victor Co Of Japan Ltd 手振れ補正装置
JP2563567B2 (ja) * 1989-03-20 1996-12-11 松下電器産業株式会社 揺れ補正装置
JPH07105949B2 (ja) * 1989-03-20 1995-11-13 松下電器産業株式会社 画像の動きベクトル検出装置および揺れ補正装置
JPH0810936B2 (ja) * 1989-03-31 1996-01-31 松下電器産業株式会社 動きベクトル検出装置
JP2792906B2 (ja) * 1989-04-20 1998-09-03 三洋電機株式会社 パンニング検出回路
DE69215733T2 (de) * 1991-04-12 1997-04-10 Victor Company Of Japan Vorrichtung zur Detektion der relativen Bewegung zwischen Inhalten von aufeinanderfolgenden Halbbildern eines Videosignals

Also Published As

Publication number Publication date
KR910017849A (ko) 1991-11-05
EP0450889A3 (en) 1992-05-27
JPH03285468A (ja) 1991-12-16
DE69123622D1 (de) 1997-01-30
US5585843A (en) 1996-12-17
EP0450889B1 (en) 1996-12-18
EP0450889A2 (en) 1991-10-09
KR100236682B1 (ko) 2000-01-15
DE69123622T2 (de) 1997-04-17

Similar Documents

Publication Publication Date Title
US8081225B2 (en) Image processing apparatus and method, recording medium, and program
US8072511B2 (en) Noise reduction processing apparatus, noise reduction processing method, and image sensing apparatus
JP2827424B2 (ja) 画振れ補正装置
JP4985124B2 (ja) 画像処理装置、画像処理方法、及び画像処理プログラム
JP2860702B2 (ja) 動きベクトル検出装置
JP2004336608A (ja) 画像データの変換方法および変換回路と、電子カメラ
JP4246244B2 (ja) 撮像装置
JP2006279144A (ja) 歪補正装置
JPH0865567A (ja) 撮像装置
JP2007214772A (ja) 画像信号処理装置
TWI689204B (zh) 影像擷取裝置以及用於影像放大的影像擷取方法
JP2004015236A (ja) 撮像装置
KR100562334B1 (ko) 씨모스 영상 센서 왜곡 보정 방법 및 장치
JP2001045359A (ja) 固体撮像装置の手ぶれ補正方法および固体撮像装置
KR20050094445A (ko) 프레임 변환 방법, 프레임 변환 회로 및 전자 카메라
JP3053681B2 (ja) 手振れ補正装置
JP4292963B2 (ja) 撮像装置
JP2010011124A (ja) 撮像装置
JP2810814B2 (ja) 動きベクトル検出装置及びカメラ一体型手振れ補正装置
JPS6159036B2 (ja)
JP2007214770A (ja) 画像信号処理装置
JPH07170461A (ja) 撮像装置
JP2845613B2 (ja) カラー固体撮像装置
JPH07327159A (ja) 画像合成装置
JPH0537856A (ja) ビデオカメラ

Legal Events

Date Code Title Description
FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20080918

Year of fee payment: 10

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090918

Year of fee payment: 11

LAPS Cancellation because of no payment of annual fees