JPH0595533A - 画像ライン補間回路及び撮像装置 - Google Patents

画像ライン補間回路及び撮像装置

Info

Publication number
JPH0595533A
JPH0595533A JP3280405A JP28040591A JPH0595533A JP H0595533 A JPH0595533 A JP H0595533A JP 3280405 A JP3280405 A JP 3280405A JP 28040591 A JP28040591 A JP 28040591A JP H0595533 A JPH0595533 A JP H0595533A
Authority
JP
Japan
Prior art keywords
image
interpolation
circuit
line
output
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP3280405A
Other languages
English (en)
Other versions
JP2989701B2 (ja
Inventor
Junji Yamaguchi
淳史 山口
Masaaki Nakayama
正明 中山
Yoshinori Kitamura
好徳 北村
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Holdings Corp
Original Assignee
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Industrial Co Ltd filed Critical Matsushita Electric Industrial Co Ltd
Priority to JP3280405A priority Critical patent/JP2989701B2/ja
Publication of JPH0595533A publication Critical patent/JPH0595533A/ja
Application granted granted Critical
Publication of JP2989701B2 publication Critical patent/JP2989701B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Landscapes

  • Transforming Light Signals Into Electric Signals (AREA)
  • Television Systems (AREA)

Abstract

(57)【要約】 【目的】 2つの入力ラインの中央付近で補間される出
力ラインの周波数レスポンス特性を改善する画像ライン
補間回路、及び画質劣化の少ない安定した画質の手振れ
補正を行なう撮像装置を実現する。 【構成】 画像ライン補間回路をメモリ回路1、メモリ
制御回路2、乗算器3a,3b,4a,4b、加算器5
a,5b,43、制御部7、HPF41、LPF42等
により構成する。そしてインターレース走査された画像
信号のフィールド内ライン補間処理出力の高周波数成分
と、フィールド間ライン補間処理出力の低周波数成分と
を加算して、ライン補間出力を得る。

Description

【発明の詳細な説明】
【0001】
【産業上の利用分野】本発明は、インターレース走査さ
れた画像信号に演算処理を施して電子的な画像ラインの
補間処理を行う画像ライン補間回路、及び水平ライン補
間機能を備えた撮像装置に関するものである。
【0002】
【従来の技術】インターレース走査されたフレームの画
像信号において、フィールド内の画像ラインを補間する
従来の画像ライン補間回路の一例について説明する。図
19は従来の画像ライン補間回路の構成を示すブロック
図である。本図において、メモリ回路1は例えば撮像素
子により撮像領域の画像をインターレース走査してその
画像信号を一時蓄えるものである。メモリ制御回路2は
メモリ回路1の書き込み,読み出し,アドレス等の制御
信号を発生する回路である。乗算器3,4はメモリ回路
1から読み出された2つの走査ラインの信号に、夫々の
補間重み係数(以下補間係数という)w、(1ーw)を
乗算する回路である。加算器5は乗算器3,4の出力信
号を加算して、走査ラインの補間信号を出力するもので
ある。補間係数発生回路6は2つの走査ラインの信号に
与える補間係数w,(1ーw)を制御部7からの指令に
基づいて発生するものである。制御部7は補間ラインの
位置に基づいて、メモリ制御回路2、補間係数発生回路
6に制御信号を発生する回路である。
【0003】このように構成された従来の画像ライン補
間回路の動作について説明する。図20は、画像が表示
されるフレームにおいて、フィールド内のライン補間を
説明する模式図である。ここでは実線で示す現フィール
ドライン(奇数フィールド)と、破線で示す前フィール
ドライン(偶数フィールド)が表示されている。あるフ
ィールドにおけるk,k+1ライン間に、kラインとk
+1ラインからの距離の比が、w1:w2である位置に
画像ラインを補間する場合について考える。この位置の
補間ラインKを得るには、現フィールドのk,k+1ラ
インの画像信号をメモリ回路1から読み出し、これらの
信号に距離に応じた補間係数(この場合は、w1/(w
1+w2)とw2/(w1+w2))を乗算器3,4で
乗算し、更にその乗算値を加算器5で加算して補間ライ
ンの信号を得る。
【0004】次に、以上の方式とは異なる画像ライン補
間方式がある。前述した方式をフィールド内ライン補間
というなら、次に述べる他の方式はフィールド間ライン
補間という。このフィールド間ライン補間を行う画像ラ
イン補間回路の構成及びその動作はフィールド内ライン
補間の場合と同様である。図21は画像が表示されるフ
レームにおけるフィールド内のライン補間を説明するた
めの模式図である。本図において、現フィールドのkラ
インと前フィールドのk’ラインとの間に距離の比が、
w1:w2である位置に画像ラインを補間する場合を考
える。この位置の補間ラインKを得るには、現フィール
ドのkラインと前フィールドのk’ラインの画像信号を
メモリ回路1から読み出し、これらの信号に距離に応じ
た補間係数(この場合は、w2/(w1+w2)、w1
/(w1+w2))を乗算して加算する処理を行う。
【0005】次に前述した補間方式の内、インターレー
ス走査された画像信号にフィールド内ライン補間処理を
施して、電子的な画像ラインの補間機能を付加した従来
の撮像装置について説明する。図22はインターレース
走査された画像信号に演算処理を施して電子的に水平ラ
インの補間処理を行い、画像を拡大する電子ズーム処理
機能を備えた従来の撮像装置の構成を示すブロック図で
ある。本図において撮像素子11は、例えばCCDイメ
ージセンサのように被写体からの入射光を光電変換して
画像信号を出力するもので、2次元に配列された固体撮
像素子である。駆動回路12は撮像素子11を構成する
各光電変換素子を所定の走査モードで駆動する回路であ
る。増幅器13は撮像素子11からの画像信号を増幅す
るもので、プロセス回路14は増幅器13の出力信号か
ら輝度信号や色信号等を生成する回路である。
【0006】さて、点線で示す電子ズーム回路15はプ
ロセス回路14から出力されるフレームの画像信号にお
いて、その水平走査ライン数を補間処理により増加させ
ることで画像を拡大処理をするものである。一般的に電
子ズーム回路15は、前述したメモリ回路1、メモリ回
路1の書き込み,読み出し,アドレス等の制御信号を発
生するメモリ制御回路2、メモリ回路1から読み出され
た各ラインの画像信号に夫々の補間係数w、(1ーw)
を乗算する乗算器3,4、乗算器3,4の出力信号を加
算して補間信号を出力する加算器5、2つのラインの信
号の補間係数を制御部7からの指令に基づいて発生する
補間係数発生回路6を含むものである。
【0007】制御部7は操作スイッチ16から指令され
た電子ズームのズーム倍率やズームする画面位置(ズー
ム位置)に基づいて、メモリ制御回路2、補間係数発生
回路6に制御信号を発生するものである。セレクタ17
は電子ズームされた電子ズーム回路15の出力と電子ズ
ームされないプロセス回路14の出力とを操作スイッチ
16の指令に従って切り換える回路であり、処理された
画像信号は出力端子18より得られる。操作スイッチ1
6は電子ズームのオン、オフ及び電子ズームオン時のズ
ーム倍率やズーム位置を指令するスイッチである。
【0008】このような電子ズーム回路での画像拡大に
ついての動作原理を図22〜図25を用いて説明する。
図23は電子ズーム画像の拡大処理の概念を示す模式図
である。図23において、撮像素子11は1フィールド
に240ライン、従って1フレームには480ラインの
画像を出力するものとする。このうち、1フィールド当
り200ラインに相当する有効走査領域部分を拡大し
て、正規の1フィールドの画像(即ち240ラインの信
号)を得る場合について説明する。この場合の倍率は2
40÷200=1.2倍となる。走査線の本数を200
本から240本に増加させるために、図22の電子ズー
ム回路15は図24に示すような補間処理を行う。図2
4はフィールド内ライン補間による電子ズーム動作を説
明するための模式図である。
【0009】図24の左側列に示す実線の奇数フィール
ドは、中央列に示す画像信号のフィールド入力ラインか
ら奇数フィールドの出力ラインを得る。右側列に示す破
線の偶数フィールドは、中央列の画像信号のフィールド
入力ラインから偶数フィールドの出力ラインを得る。例
えば、奇数フィールドのN+1ラインを得るためにはメ
モリ回路1から奇数フィールドの入力ラインnとn+1
を読み出し、距離に応じた補間係数(この場合は2/1
2と10/12)を乗算して加算する。他の出力ライン
についても同様に、上下の2ラインから距離に応じた補
間係数を乗算して加算することにより、補間された画像
信号を得ることができる。
【0010】次にインターレース走査された画像信号に
フィールド間ライン補間処理を施して電子的に水平ライ
ンの補間処理を行い、画像を拡大する電子ズーム処理機
能を備えた撮像装置について説明する。図25はフィー
ルド間ライン補間による電子ズーム動作を示す模式図で
ある。このフィールド間ライン補間を用いた電子ズーム
処理機能を有する撮像装置の構成は、前述したフィール
ド内ライン補間を用いたものと同様である。撮像素子1
1はフィールド内ライン補間と同様に1フィールドに2
40ライン、従って1フレームでは480ラインの画像
を出力する。図23に示すように1フィールド当り20
0ラインに相当する有効走査領域部分を拡大して、正規
の1フィールドの画像即ち、240ラインの信号を得る
ためには、図25に示すような補間処理を行う。
【0011】図25の中央列に示す画像信号の奇数フィ
ールド及び偶数フィールド両方の入力ライン(フレーム
入力ライン)から、左側列に示す奇数フィールド及び右
側列に示す偶数フィールドの出力ラインを得る。例え
ば、奇数フィールドのN+1ラインを得るためにはメモ
リ回路1から最も近接している偶数フィールドの入力ラ
インn’と奇数フィールドの入力ラインn+1を読み出
し、距離に応じた補間係数(この場合は1/3と2/
3)を乗算して加算する。他の出力ラインについても同
様に、奇数フィールド及び偶数フィールド両方の入力ラ
インで最も近接する2ラインから、距離に応じた補間係
数を乗算して加算することにより得られる。
【0012】以上のように、図24に示すフィールド内
ライン補間では、片方のフィールドの入力ラインでしか
補間ラインの信号が補間できないのに対して、図25に
示すフィールド間ライン補間では、所望のラインに最も
近接する2ラインを用いて補間できるので、空間的な距
離が1/2となり、補間の精度は大きく改善される。
【0013】図26は手振れ補正機能を搭載した撮像装
置の第1の従来例を示すブロック図である。尚、図19
及び図22に示すものと同一部分は同一の符号を付けて
詳細な説明は省略する。図26に示す撮像装置の動作を
説明すると、撮像素子11の画像信号は動きベクトル検
出回路21とメモリ回路23に与えられる。動きベクト
ル検出回路21はこの画像信号から、手振れによる撮像
装置の動きベクトルを検出する。この動きベクトルを補
正するようにメモリ制御回路22がメモリ回路23から
の画像の読み出し位置を変え、画像信号の一部分を切り
出して読み出し、プロセス回路14に与える。プロセス
回路14はメモリ回路23の出力から輝度信号及び色信
号処理を行い、その出力を電子ズーム回路15に与え
る。電子ズーム回路15はこの画像信号を表示領域まで
拡大して出力する。このような動作を各フレーム毎に繰
り返すことによって手振れ補正を行う。
【0014】次に第1の従来例とは異なり、電子ズーム
を行わない手振れ補正機能付き撮像装置について説明す
る。図27は手振れ補正機能を搭載した撮像装置の第2
の従来例を示すブロック図である。本図において、撮像
素子31は手振れ補正された画面となる有効走査領域P
1と、この有効走査領域を移動させる周辺のカット画面
となる補正領域P2とからなる撮像領域P0を有してい
る。本撮像装置は、プロセス回路14、動きベクトル検
出回路21、走査領域制御回路32、駆動回路33によ
り構成される。
【0015】このように構成された従来の手振れ補正機
能を搭載した撮像装置の動作について説明する。まず撮
像素子31の画像信号はプロセス回路14で輝度信号及
び色信号等の処理が行われる。又、撮像素子31の画像
信号は動きベクトル検出回路21にも供給され、ここで
動きベクトルが検出される。この動きベクトルを補正す
るように走査領域制御回路32は撮像素子31の撮像領
域P0中における有効走査領域P1の位置を駆動回路3
3に指示する。この指示によって駆動回路33が有効走
査領域を移動させて撮像素子31を駆動する。この動作
を各フレーム毎に繰り返して手振れ補正を行う。
【0016】図28は手振れ補正機能を搭載した撮像装
置の第3の従来例を示すブロックである。本図におい
て、撮像素子31は図27に示すものと同じく有効走査
領域P1と補正領域P2とからなる撮像領域P0を有す
るものである。又この撮像装置は図27に示すものと同
一の回路部を有しており、駆動回路33、メモリ回路2
3、プロセス回路14、動きベクトル検出回路21、メ
モリ制御回路22により構成されている。
【0017】このように構成された手振れ補正機能を搭
載した撮像装置の動作について説明する。まず、撮像素
子31の画像信号をメモリ回路23と動きベクトル検出
回路21に供給する。プロセス回路14はメモリ回路2
3の出力の輝度信号及び色信号処理を行う。又、動きベ
クトル検出回路22は手振れによる動きベクトルを検出
する。メモリ制御回路22はこの検出した動きベクトル
によって手振れを補正するように、メモリ回路23から
撮像領域の有効走査領域を移動させて画像信号を読み出
す。この動作を各フレーム毎に繰り返して、手振れ補正
を行う。
【0018】
【発明が解決しようとする課題】しかしながらこのよう
な従来のフィールド内の補間処理を行う補間回路には、
次のような問題点がある。即ち、画像信号出力ラインの
垂直方向の周波数レスポンス特性は補間係数により変化
するために、出力ライン毎に異なる結果となる。例え
ば、補間係数が1/2と1/2で補間される走査ライン
の画像信号は、隣接する入力2ラインの加算平均となる
ので、垂直方向の画像位置の補正動作が緩慢となり、周
波数レスポンス特性は最も低くなる。又補間係数が1と
0で補間される場合には、補間係数1のラインがそのま
ま出力されることになる。このときは垂直方向の周波数
レスポンス特性は最も高くなる。つまり、2つの入力ラ
インの中央付近で補間された画像信号の周波数レスポン
ス特性は、他の位置で補間された場合と比較し、低くな
ってしまうという問題点を有していた。
【0019】このように、従来のフィールド内ライン補
間回路を用いて電子ズームを行う撮像装置では、垂直方
向の尖鋭度が劣化し、更に垂直方向の周波数レスポンス
の高い部分と低い部分ができ、これが横筋状の妨害とな
り非常に見苦しい違和感のあるズーム画像となるという
問題点を有していた。又従来のフィールド間ライン補間
を行う補間回路では、フィールド毎に異なる時間で画像
の補正演算を行うので、動画におけるズーム画像で動き
ぼけ(2重像)が生じるという問題点を有していた。
【0020】次に、従来のフィールド間ライン補間回路
を用いて電子ズームを行う撮像装置では、動きぼけ(2
重像)が生じ、非常に見苦しいズーム画像となるという
問題点を有していた。更に、第1の従来例で示す手振れ
補正機能を搭載した撮像装置では、電子ズーム回路15
によって画像信号を表示領域まで拡大しているので、画
像が荒くなり手振れ補正画像の画質劣化が大きくなると
いう問題点を有していた。
【0021】更に、第2、3の従来例で示す手振れ補正
機能を搭載した撮像装置では、メモリ制御回路22が有
効走査領域P1を移動させてメモリ回路23の読み出し
を行うとき、メモリ回路23の垂直方向の読み出し精度
が1ライン単位の精度なので、特に垂直方向の正確な手
振れ補正ができないという欠点があった。
【0022】本発明はこのような従来の問題点に鑑みて
なされたものであって、2つの入力ライン間に補間され
る画像信号の周波数レスポンス特性を改善する画像ライ
ン補間回路を実現することを目的とする。又、得られた
走査ラインの垂直方向の周波数レスポンスに高低差が生
じない、ズーム画像の画質を改善する撮像装置を実現す
ることと、画質劣化の少ない安定した画質の手振れ補正
を行なう撮像装置を提供することを目的とする。
【0023】
【課題を解決するための手段】本願の請求項1の発明
は、インターレース走査されたフレーム内の特定位置の
画像信号を用いて補間処理を行い、画像変換したフレー
ムの補間画像を得る画像ライン補間回路であって、特定
の2ラインの画像信号から補間画像を生成するラインの
補間係数を発生する補間係数発生回路と、インターレー
ス走査された画像信号から、フィールド内ライン補間処
理出力の高周波数成分を生成すると共に、フィールド間
ライン補間処理出力の低周波数成分を生成した信号を夫
々加算して画像ライン補間信号を出力するライン補間処
理部と、を具備することを特徴とするものである。
【0024】本願の請求項2の発明では、ライン補間処
理部は、インターレース走査された画像信号を一時蓄え
るメモリ回路と、同一フィールド内の2つのラインの画
像信号に基づいてライン補間処理を行う第1の補間回路
と、隣接するフィールド間の最も近いラインの画像信号
に基づいてライン補間処理を行う第2の補間回路と、第
1の補間回路の出力から画像信号の高域周波数成分を取
り出す高域通過フィルタと、第2の補間回路の出力から
画像信号の低域周波数成分を取り出す低域通過フィルタ
と、高域通過フィルタの出力と低域通過フィルタの出力
とを加算する加算器と、を含むことを特徴とするもので
ある。
【0025】本願の請求項3の発明では、ライン補間処
理部は、インターレース走査された画像信号の低域周波
数成分を取り出す低域通過フィルタと、インターレース
走査された画像信号の高域周波数成分を取り出す高域通
過フィルタと、高域通過フィルタの出力より同一のフィ
ールド内の2つのラインの画像信号に基づいてライン補
間処理を行う第1の補間回路と、低域通過フィルタの出
力より連続するフィールド間の最も近いラインの画像信
号に基づいてライン補間処理を行う第2の補間回路と、
第1の補間回路の出力と第2の補間回路の出力とを加算
する加算器と、を具備することを特徴とするものであ
る。
【0026】本願の請求項5の発明は、被写体の画像を
インターレース走査により画像信号に変換する第1の撮
像素子と、特定の2ラインの画像信号から補間画像を生
成するラインの補間係数を発生する補間係数発生回路
と、第1の撮像素子より得られる画像信号から、フィー
ルド内ライン補間処理出力の高周波数成分を生成すると
共に、フィールド間ライン補間処理出力の低周波数成分
を生成した信号を夫々加算して画像ライン補間信号を出
力するライン補間処理部と、を具備することを特徴とす
るものである。
【0027】本願の請求項6の発明では、ライン補間処
理部は、第1の撮像素子の画像信号を一時蓄えるメモリ
回路と、同一フィールド内の2つのラインの画像信号に
基づいてライン補間処理を行う第1の補間回路と、隣接
するフィールド間の最も近いラインの画像信号に基づい
てライン補間処理を行う第2の補間回路と、第1の補間
回路の出力から画像信号の高域周波数成分を取り出す高
域通過フィルタと、第2の補間回路の出力から画像信号
の低域周波数成分を取り出す低域通過フィルタと、高域
通過フィルタの出力と低域通過フィルタの出力とを加算
する加算器と、を含むことを特徴とするものである。
【0028】本願の請求項7の発明では、ライン補間処
理部は、第1の撮像素子から出力される画像信号の低域
周波数成分を取り出す低域通過フィルタと、第1の撮像
素子から出力される画像信号のの高域周波数成分を取り
出す高域通過フィルタと、高域通過フィルタの出力より
同一のフィールド内の2つのラインの画像信号に基づい
てライン補間処理を行う第1の補間回路と、低域通過フ
ィルタの出力より隣接するフィールド間の最も近いライ
ンの画像信号に基づいてライン補間処理を行う第2の補
間回路と、第1の補間回路の出力と第2の補間回路の出
力とを加算する加算器と、を具備することを特徴とする
ものである。
【0029】本願の請求項9の発明は、被写体の画像を
インターレース走査により画像信号に変換すると共に、
画像の撮像領域内において移動自在の有効走査領域から
画像信号を出力する第2の撮像素子と、第2の撮像素子
を含む筐体の振動による画像の動きベクトルを検出する
動きベクトル検出回路と、第2の撮像素子の有効走査領
域を動きベクトル検出回路が検出した動きベクトルの走
査ライン単位の整数部だけ撮像領域内で移動させて第2
の撮像素子を駆動する走査領域制御回路と、動きベクト
ル検出回路が検出した画像の垂直方向の動きベクトルの
走査ライン単位の小数部の値に応じた補間係数を発生す
る補間係数発生器と、補間係数に応じて同一フィールド
内の2つのラインの画像信号に基づいてライン補間処理
を行う第1の補間回路と、補間係数に応じて隣接するフ
ィールド間の最も近いラインの画像信号に基づいてライ
ン補間処理を行う第2の補間回路と、第1の補間回路の
出力から画像信号の高域周波数成分を取り出す高域通過
フィルタと、第2の補間回路の出力から画像信号の低域
周波数成分を取り出す低域通過フィルタと、高域通過フ
ィルタ及び低域通過フィルタの出力を加算する加算器
と、を具備することを特徴とするものである。
【0030】本願の請求項10の発明は、被写体の画像
をインターレース走査により画像信号に変換すると共
に、画像の撮像領域内において移動自在の有効走査領域
から画像信号を出力する第2の撮像素子と、第2の撮像
素子を含む筐体の振動による画像の動きベクトルを検出
する動きベクトル検出回路と、第2の撮像素子の有効走
査領域を動きベクトル検出回路が検出した動きベクトル
の走査ライン単位の整数部だけ撮像領域内で移動させて
第2の撮像素子を駆動する走査領域制御回路と、動きベ
クトル検出回路が検出した画像の垂直方向の動きベクト
ルの走査ライン単位の小数部の値に応じた補間係数を発
生する補間係数発生器と、インターレース走査された画
像信号の高域周波数成分を取り出す高域通過フィルタ
と、インターレース走査された画像信号の低域周波数成
分を取り出す低域通過フィルタと、補間係数に応じて高
域通過フィルタより得られる同一フィールド内の2つの
ラインの画像信号に基づいてライン補間処理を行う第1
の補間回路と、補間係数に応じて低域通過フィルタより
得られる隣接するフィールド間の最も近いラインの画像
信号に基づいてライン補間処理を行う第2の補間回路
と、第1の補間回路の出力の高周波数成分と第2の補間
回路の出力の低周波数成分とを加算する加算器と、を具
備することを特徴とするものである。
【0031】本願の請求項12の発明は、被写体の画像
をインターレース走査により画像信号に変換すると共
に、画像の撮像領域内において移動自在の有効走査領域
から画像信号を出力する第2の撮像素子と、第2の撮像
素子より得られる画像信号を一次保持するメモリ回路
と、第2の撮像素子を含む筐体の振動による画像の動き
ベクトルを検出する動きベクトル検出回路と、動きベク
トル検出回路が検出した動きベクトルの走査ライン単位
の整数部だけ有効走査領域を移動させてメモリ回路から
読み出すメモリ制御回路と、動きベクトル検出回路が検
出した画像の垂直方向の動きベクトルの走査ライン単位
の小数部の値に応じた補間係数を発生する補間係数発生
器と、補間係数に応じて同一フィールド内の2つのライ
ンの画像信号に基づいてライン補間処理を行う第1の補
間回路と、補間係数に応じて隣接するフィールド間の最
も近いラインの画像信号に基づいてライン補間処理を行
う第2の補間回路と、第1の補間回路の出力から画像信
号の水平方向の高域周波数成分を取り出す高域通過フィ
ルタと第2の補間回路の出力から画像信号の水平方向の
低域周波数成分を取り出す低域通過フィルタと、高域通
過フィルタ及び低域通過フィルタの出力を加算する加算
器と、を具備することを特徴とするものである。
【0032】本願の請求項13の発明は、被写体の画像
をインターレース走査により画像信号に変換すると共
に、画像の撮像領域内において移動自在の有効走査領域
から画像信号を出力する第2の撮像素子と、第2の撮像
素子を含む筐体の振動による画像の動きベクトルを検出
する動きベクトル検出回路と、インターレース走査され
た画像信号の高域周波数成分を取り出す高域通過フィル
タと、インターレース走査された画像信号の低域周波数
成分を取り出す低域通過フィルタと、高域通過フィルタ
及び低域通過フィルタより出力される画像信号を夫々保
持する第1,第2のメモリ回路と、動きベクトル検出回
路が検出した動きベクトルの走査ライン単位の整数部だ
け有効走査領域を移動させて第1,第2のメモリ回路か
ら読み出すメモリ制御回路と、動きベクトル検出回路が
検出した画像の垂直方向動きベクトルの走査ライン単位
の小数部の値に応じた補間係数を発生する補間係数発生
器と、第1のメモリ回路より読出された同一フィールド
内の2つのラインの画像信号に基づいてライン補間処理
を行う第1の補間回路と、第2のメモリ回路より読出さ
れた隣接するフィールド間の最も近いラインの画像信号
に基づいてライン補間処理を行う第2の補間回路と、第
1の補間回路の出力と第2の補間回路の出力とを加算す
る加算器と、を具備することを特徴とするものである。
【0033】
【作用】このような特徴を有する本願の請求項1〜4の
発明によれば、メモリ回路にインターレース走査された
画像信号を一時蓄え、補間係数発生回路により同一又は
隣接フィールド内の特定の2ライン信号から補間画像を
生成する補間係数を発生する。そしてライン補間処理部
はメモリ回路の画像信号からフィールド内ライン補間処
理出力の高周波数成分を生成すると共に、フィールド間
ライン補間処理出力の低周波数成分を生成した信号を夫
々加算して、画像ライン補間信号を出力する。
【0034】又、本願の請求項5〜8の発明によれば、
第1の撮像素子によって被写体の画像をインターレース
走査により画像信号に変換する。そして画像ライン補間
回路によりこの画像信号をフレーム内の特定位置に補間
処理を行い、画像変換したフレームの補間画像を得る。
【0035】又、本願の請求項9〜11の発明によれ
ば、第2の撮像素子によって被写体の画像をインターレ
ース走査により画像信号に変換すると共に、撮像領域内
において有効走査領域を移動自在に画像信号を変換して
出力する。動きベクトル検出回路が撮像装置の振動を検
出すると、走査領域制御回路は有効走査領域を動きベク
トルの整数部だけ撮像領域内で移動させ、動きが出力に
現れないように第2の撮像素子を駆動する。そして補間
係数発生器は画像の垂直方向の動きベクトルの小数部の
値に応じた補間係数を発生する。第1の補間回路は補間
係数に応じてフィールド内ライン補間処理を行い、第2
の補間回路は補間係数に応じてフィールド間ライン補間
処理を行う。次に加算器は高域通過フィルタ及び低域通
過フィルタの出力を加算して、周波数レスポンスの高い
補間された画像信号を出力する。
【0036】又、本願の請求項12〜14の発明によれ
ば、第2の撮像素子によって被写体の画像をインターレ
ース走査により画像信号に変換すると共に、撮像領域内
において有効走査領域を移動自在に画像信号を変換して
出力する。そしてメモリ制御回路は動きベクトル検出回
路が検出した動きベクトルの整数部だけ有効走査領域を
移動させてメモリ回路から動きが出力に現れないように
画像信号を読み出す。次に補間係数発生器は画像の垂直
方向動きベクトルの小数部の値に応じた補間係数を発生
する。又、第1の補間回路は補間係数に応じてフィール
ド内ライン補間処理を行い、第2の補間回路は補間係数
に応じてフィールド間ライン補間処理を行う。そして加
算器は高域通過フィルタ及び低域通過フィルタの出力を
加算して、周波数レスポンスの高い補間された画像信号
を出力する。
【0037】
【実施例】以下本発明の実施例について、図面を参照し
ながら説明する。図1は本発明の第1の実施例における
画像ライン補間回路の構成を示すブロック図である。
尚、従来例を示す図22と同一部分は同一の符号を付け
て詳細な説明は省略する。図1において、メモリ回路1
はインターレース走査された画像信号を一時蓄える回路
であり、メモリ制御回路2aによってメモリの書き込
み、読み出し、アドレス等の制御信号が与えられる。乗
算器3a,4aは、メモリ回路1から読み出されたフィ
ールド内ライン補間の2つのラインペアの信号に夫々補
間係数w1、(1ーw1)を乗算する回路である。乗算
器3b,4bは、メモリ回路1から読み出されたフィー
ルド間ライン補間の2つのラインペアの信号に夫々の補
間係数w2、(1ーw2)を乗算する回路である。第1
の加算器5aは乗算器3a,4aの出力信号を加算して
フィールド内ライン補間信号を出力するものであり、第
2の加算器5bは乗算器3b,4bの出力信号を加算し
てフィールド間ライン補間信号を出力するものである。
ここで乗算器3a,4a、加算器5aは、インターレー
ス走査された画像信号にフィールド内ライン補間処理を
行う第1の補間回路を構成し、乗算器3b,4b、加算
器5bは、フィールド間ライン補間処理を行う第2の補
間回路を構成している。
【0038】補間係数発生回路6aは4つのラインの信
号の補間係数w1,(1−w1)、w2,(1ーw2)
を制御部7からの指令に基づいて乗算器3a,4a,3
b,4bに夫々与える回路である。高域通過フィルタ
(HPF)41は第1の加算器5aが出力するフィール
ド内ライン補間信号の高域周波数成分を取り出すもので
ある。低域通過フィルタ(LPF)42は第2の加算器
5bが出力するフィールド間ライン補間信号の低域周波
数成分を取り出すものである。ここでHPF41及びL
PF42の夫々の通過周波数領域は、特定の遮断周波数
より上下に異なる通過帯域を有するものである。第3の
加算器43はHPF41及びLPF42の出力を加算し
て、補間された画像信号を出力する回路である。制御部
7は画像の補間ラインの位置に基づいて、メモリ制御回
路2a、補間係数発生回路6aに制御信号を与える回路
である。ここで乗算器3a,3b,4a,4b、加算器
5a,5b、HPF41、LPF42は、画像信号から
フィールド内ライン補間処理出力の高周波数成分を生成
すると共に、フィールド間ライン補間処理出力の低周波
数成分を生成した信号を夫々加算して、画像ライン補間
信号を出力するライン補間処理部を構成している。
【0039】以上のように構成された第1実施例の画像
ライン補間回路の動作について説明する。まず図示しな
い撮像素子によってインターレース走査された画像信号
をメモリ回路1に一時蓄える。そして、制御部7からメ
モリ制御回路2aへ補間ラインの位置に基づいた制御信
号が送られる。メモリ制御回路2aは、メモリ回路1に
蓄えられている現フィールド及び前フィールドの内、フ
ィールド内ライン補間に用いる2つのラインの画像信号
をメモリ回路1より読み出す共に、又フィールド間ライ
ン補間に用いる2つのラインの画像信号をメモリ回路1
から読み出す。同時に制御部7から補間係数発生回路6
aに補間ラインの位置に基づいた制御信号が送られ、補
間係数発生回路6aは夫々の補間処理を行う4つの補間
係数を乗算器3a,4a,3b,4bに出力する。加算
器5a,5bは乗算した結果を夫々加算し、フィールド
内ライン補間及びフィールド間ライン補間処理された信
号を出力する。加算器5aからのフィールド内ライン補
間出力は、HPF41により高域周波数成分が取り出さ
れ、加算器5bからのフィールド間ライン補間出力は、
LPF42により低域周波数成分が取り出される。これ
らの信号を加算器43で加算することにより、補間ライ
ンの画像信号を得る。
【0040】以上の画像ライン補間回路の処理について
詳しく説明する。図2は本実施例の画像ライン補間回路
の信号処理の流れを示す説明図である。この信号処理は
インターレース走査された画像信号にフィールド内ライ
ン補間とフィールド間ライン補間を行い、得られた各信
号を夫々HPF41、LPF42を通した後、加算器4
2で加算して補間ラインを得るものである。この処理に
より得られる補間ラインの周波数特性について図3を用
いて説明する。図3は本実施例で行う補間ラインの周波
数帯域処理を示す模式図である。この補間回路で得られ
る補間データの内、フィールド間ライン補間の低周波成
分は、異なる時間のフィールドに現れる画像の加重平均
をとり、その信号に対して瞬時に変化する画像の動き成
分を除去したものである。一方、フィールド内ライン補
間の高周波成分は、同一時間のフィールドに現れる画像
の加重平均をとり、その信号に対して瞬時に変化する画
像の動き成分のみを抽出したものである。
【0041】即ち、相反する高域周波数成分と低域周波
数成分の画像信号を、フィールド内ライン補間出力から
は高域周波数成分を、フィールド間ライン補間出力から
は低域周波数成分を取り出し、これらを加算することに
よりフレーム内の動画に含まれる全域の周波数成分の補
間ラインを得ている。
【0042】次に従来の画像ライン補間回路を用いて画
像信号を処理すると動画に対して2重像が発生するが、
この2重像の影響を抑制する方法について説明する。図
4は本実施例の補間処理の動作原理とその効果を説明す
るための模式図である。図4(a)に示すように撮像領
域内で黒い物体Aが右方向に動いている場合を考える。
物体Aの右側エッジ部の前フィールド及び現フィールド
の画像信号は図4(b)に示すよう位置Pから位置Qに
移動している。ここで図4(b)のn’ラインとn+1
ラインの画像信号を処理してフィールド間ライン補間を
行った信号は、図4(c)に示す補間ライン信号42s
となる。又、図4(b)のnラインとn+1ラインの画
像信号を処理してフィールド内ライン補間を行った信号
は、図4(c)に示す補間ライン信号41sとなる。こ
のため2つの補間ライン信号41s,42sから得られ
た画像Aのエッジ部は2箇所発生していることになり、
LPF42よりこのエッジ部を一旦ぼかし、全体の輪郭
を滑らかにしてしまう。又、正確な画像Aのエッジ部の
データは、フィールド内ライン補間よりHPF41で取
り出すようにしている。更に、図4(d)に示すように
これらの信号を加算することによりエッジ部の復元され
た補間ラインを得る。即ち、フィールド間ライン補間に
より得られた画像を滑らかにぼかすことにより2重像を
抑制し、更にフィールド内ライン補間により正確なエッ
ジ部のデータのみを取り出し、2つの補間ライン信号4
2t,41tを加算器43で加算している。
【0043】以上のように、フィールド内ライン補間回
路出力及びフィールド間ライン補間回路出力の所要周波
数領域の成分を取り出して加算し、全周波数領域の補間
ラインを得ることにより、2つの入力ライン間に補間さ
れる画像信号の周波数レスポンス特性を改善することが
できる。
【0044】次に本発明の第2実施例について、図面を
参照しながら説明する。図5は本発明の第2の実施例に
おける画像ライン補間回路の構成を示すブロック図であ
る。尚、第1実施例と同一部分は同一の符号を付けて詳
細な説明は省略する。図5において、HPF41及びL
PF42は夫々インターレース走査された画像信号の高
域周波数成分及び低域周波数成分を取り出すフィルタで
ある。フィールド内補間回路51は第1の補間回路を含
み、HPF41の出力にフィールド内ライン補間を行う
回路である。この回路内にはメモリ回路1aと第1の補
間回路51aが含まれる。第1の補間回路51aは第1
実施例と同様に乗算器3a,4aと加算器5aによって
構成される。又LPF42の出力はフィールド間ライン
補間回路52に与えられる。フィールド間ライン補間回
路52は第2の補間回路を含み、LPF42の出力にフ
ィールド間ライン補間を行う回路である。加算器43は
フィールド内ライン補間回路51及びフィールド間ライ
ン補間回路52の出力を加算する回路である。
【0045】フィールド間ライン補間回路52はLPF
42の出力を一時蓄えるメモリ回路1b、メモリの書き
込み,読み出し,アドレス等の制御信号を発生するメモ
リ制御回路2a、メモリ回路1bから読み出された同一
フィールドの2つのラインの信号の補間処理を行う第2
の補間回路52a、補間係数を制御部7からの指令に基
づいて発生する補間係数発生回路6a、補間ラインの位
置に基づいてメモリ制御回路2a,補間係数発生回路6
aに制御信号を発生する制御部7より構成されている。
又第2の補間回路52aは、補間係数w2,(1ーw
2)を乗算する乗算器3b,4b、乗算器3b,4bの
出力信号を加算してフィールド間ライン補間出力を出力
する加算器5bを含むものである。
【0046】第1実施例との重要な相違点は、補間回路
51a,52aとLPF42及びHPF41の接続され
る位置が逆転していることである。図6は本実施例にお
ける補間ライン信号の周波数帯域成分を示す模式図であ
る。いま、インターレース走査された画像信号の周波数
帯域をf0 とすると、図6(a)に示すように画像信号
のサンプル周波数Sfは少なくとも2f0 が必要とな
る。又、図5のLPF42のカットオフ周波数fcをf
0 /4とすると、図6(b)に示すようにLPF42の
出力信号の周波数帯域はf0 /4以内となる。従って、
LPF42の信号ではf0 /2のサンプル周波数でサン
プリングを行えば十分である。即ち、LPF42に入力
される信号では、サンプル周波数が2f0 必要であるの
に対し、LPF42の出力信号であればその帯域はf0
/2で十分である。このことより、サンプリング周波数
2f0 でサンプルしたとき、水平方向に例えば768画
素のデータサンプル点があったとすると、LPF42の
出力信号では、水平方向のデータサンプル点は192画
素(768/4)となる。従ってメモリ回路1bのメモ
リ容量を大幅に削減することができる。尚、各回路部の
動作については、第1実施例の補間回路とその順序が異
なるだけで動作は同一であるので、説明は省略する。
【0047】次に本発明の第3実施例について、図面を
参照しながら説明する。図7は第3実施例における電子
ズーム処理機能を備えた撮像装置の構成を示すブロック
図である。尚、第1実施例を示す図1、及び従来の撮像
装置を示す図22と同一部分は同一の符号を付けて詳細
な説明は省略する。図7において、撮像素子11,駆動
回路12,増幅器13,プロセス回路14,操作スイッ
チ16,セレクタ17は、図22で示す従来の電子ズー
ム機能を有する撮像装置と同一に接続されている。図2
2と異なる点はプロセス回路14の出力端に接続される
電子ズーム回路15に代わって、図7では第1実施例の
画像ライン補間回路と同一構成の電子ズーム回路15b
(点線で示す)が接続されていることである。電子ズー
ム回路15bは、プロセス回路14からの出力信号にフ
ィールド内ライン補間及びフィールド間ライン補間の夫
々の周波数成分を取り出して加算合成することにより、
全周波数領域の補間ラインを得て画像の拡大処理をする
電子ズーム回路である。
【0048】電子ズーム回路15bは、メモリ回路1、
メモリ制御回路2a、乗算器3a,4,3b,4b、第
1の加算器5a、第2の加算器5b、補間係数発生回路
6a、制御部7、HPF41、LPF42、第3の加算
器43で構成されている。ここでHPF41及びLPF
42の夫々の通過周波数領域は図3で示したように互い
に相反するものとする。制御部7は操作スイッチ16か
ら指令された電子ズームのズーム倍率やズーム位置に基
づいて、メモリ制御回路2a及び補間係数発生回路6a
に制御信号を発生するものである。セレクタ17は電子
ズームされないプロセス回路14の出力と、フィールド
内ライン補間回路及びフィールド間ライン補間回路を複
合して得た補間ライン出力とを、操作スイッチ16から
の指令に従って切り換える回路であり、その信号は出力
端子18に出力される。
【0049】このように構成された本実施例の撮像装置
の動作について説明する。操作スイッチ16からの指令
が電子ズーム動作オフのときには、この制御信号に基づ
いてセレクタ17はプロセス回路14からの信号を選択
して、出力端子18に電子ズームされない画像信号を出
力する。この場合、電子ズームオフ制御信号を電子ズー
ム回路15bにも導いて、この回路の動作を停止するよ
う構成すると省電力化が計れる。次に操作スイッチ16
からの指令が電子ズーム動作オンのときには、この制御
信号に基づいてセレクタ17は加算器43からの信号を
選択して、出力端子18にフィールド内ライン補間とフ
ィールド間ライン補間を複合して得られる電子ズームさ
れた画像信号を出力する。
【0050】以上のような構成の電子ズーム機能付き撮
像装置の画像拡大処理について説明する。従来例と同様
に、撮像素子11は1フィールドに240ライン、1フ
レームには480ラインの画像信号を出力するものと
し、この内、図23に示すように1フィールド当り20
0ラインに相当する画像部分を拡大して、正規の1フィ
ールドの画像、即ち240ラインの画像信号を得る場合
について考える。走査ラインの本数を200本から24
0本に増加させるために、図7の電子ズーム回路15b
は、第1実施例で説明した補間回路により、図24に示
す位置にライン補間を行って水平ラインを増加させるこ
とで拡大処理をする。
【0051】従来の電子ズーム機能付き撮像装置では、
垂直方向の周波数レスポンスの高低差が生じてこれが横
筋状の妨害となり、非常に見苦しい違和感のあったズー
ム画像となっていたが、このように周波数レスポンス特
性を改善した補間ラインを得ることにより画質を大幅に
改善することができる。
【0052】尚、電子ズーム回路15bはプロセス回路
14の後にある必要はなく、電子ズーム回路15bをプ
ロセス回路14の前に設けても同様の効果が得られる。
図8は、この場合の電子ズーム機能付き撮像装置の他の
構成を示すブロック図である。各回路の動作はその順序
が異なるだけで前述したものと同様であるので、説明は
省略する。
【0053】又、電子ズーム回路15bのライン補間部
の回路構成についても、フィールド内ライン補間処理出
力の高周波数成分とフィールド間ライン補間処理出力の
低周波数成分とを加算してライン補間出力を得る画像ラ
イン補間回路であれば、前述した構成でなくてもよい。
図9、図10は本発明の第2実施例における他の構成例
を有する電子ズーム機能付き撮像装置のブロック図であ
る。図9、図10の電子ビーム回路15cの構成は第2
実施例の図5と同一であるので、構成と動作の説明は省
略する。このような構成にすると前述したように、フィ
ールド間ライン補間回路におけるメモリ回路の容量を大
幅に削減できる効果が得られる。
【0054】図11は本発明の第4実施例の手振れ補正
機能を搭載した撮像装置の構成を示すブロック図であ
る。尚、第1〜第3実施例を示す図1〜図10、及び第
2,第3の従来例を示す図27,図28と同一部分は同
一の符号を付けて詳細な説明は省略する。図11におい
て、撮像素子31は、手振れ補正された画面となる有効
走査領域P1と、この有効走査領域P1を移動させる周
辺のカット画面となる補正領域P2とからなる撮像領域
P0を有している。走査領域制御回路32は、画像の動
きベクトルを補正するように撮像領域P0中における有
効走査領域P1の位置を制御して、撮像素子31を駆動
するものである。増幅器13は撮像素子31からの画像
信号を増幅するもので、その出力はプロセス(信号処
理)回路14に与えられる。プロセス回路14は増幅器
13の出力から輝度信号や色信号等を生成する回路であ
り、その出力は動きベクトル検出回路21及び画像ライ
ン補間回路15dに与えられる。動きベクトル検出回路
21はプロセス回路14の出力する画像信号から手振れ
による撮像装置の動きベクトルを検出し、動きベクトル
量を各フィールドの走査ピッチと比較して、垂直方向は
画像ライン単位、水平方向は画素単位で整数部分と小数
部分とに分け、それらの値を出力する回路である。画像
ライン補間回路15dはプロセス回路14からの出力信
号を動きベクトル検出回路21が検出した垂直方向の動
きベクトルの小数部の値によって、水平画素列の補間処
理を行う補間回路であり、第1実施例の図1と同一であ
るので構成の説明は省略する。
【0055】このように構成された本実施例の手振れ補
正機能を搭載した撮像装置の動作について説明する。ま
ず、撮像素子31の画像信号を増幅器13で増幅した
後、プロセス回路14はインターレース走査された画像
信号を出力する。又、動きベクトル検出回路21は画像
信号から動きベクトルを検出し、この動きベクトルの整
数部が走査領域制御回路32に出力される。走査領域制
御回路32は検出された動きベクトルの整数部によっ
て、1ライン単位の精度で手振れを補正するように撮像
素子31から有効走査領域P1を移動させて画像信号を
読み出す。又、垂直方向の動きベクトルの小数部は制御
部7に出力される。制御部7はこの小数部の値によっ
て、補間ライン位置に基づいた制御信号をメモリ制御回
路2a、補間係数発生回路6aに送り、1ライン未満の
手振れ補正を行うように補間処理を行う。
【0056】この補間処理は、前述した第1、2実施例
における補間処理と同様に、フィールド内ライン補間回
路出力及びフィールド間ライン補間回路出力の夫々相反
する周波数領域の成分を取り出して加算し、全周波数領
域の補間ラインを得る補間処理を行うものである。この
動作を各フレーム毎に繰り返して手振れ補正を行う。
【0057】図12は本発明の撮像装置に用いる撮像素
子31の撮像領域を示した模式図である。撮像素子31
の撮像領域P0は、有効走査領域P1と補正領域P2を
有している。図12(a)は手振れによる動きベクトル
Vを表し、図12(b)は有効走査領域P1の移動によ
る手振れ補正位置を表している。手振れによって撮像領
域P0内の被写体が動いたとき、動きベクトル検出回路
21はこの動きベクトルを検出する。図12(b)に示
すように検出した動きベクトルによって、走査領域制御
回路32は有効走査領域P1を移動させ手振れ補正を行
う。
【0058】図13は本発明の実施例における信号読み
出しによる手振れ補正例を示した模式図である。図13
(a)は手振れ補正前の走査ライン位置を示し、図13
(b)は撮像素子31の読み出しによる手振れ補正位置
における走査ライン位置を示し、図13(c)は画像ラ
イン補間回路15dによる画像ライン補間の処理結果を
示している。この補正例では、まず手振れによる動きベ
クトルの検出を行う(図13(a)参照)。次に検出し
た動きベクトルの整数部によって、有効走査領域P1を
移動させ読み出しを行い、1ライン精度の手振れ補正を
行う(図13(b)参照)。更に1ライン未満の精度の
手振れ補正を検出した動きベクトルの小数部により、画
像ライン補間回路15dによりライン補間をして手振れ
補正の微調整を行う(図13(c)参照)。
【0059】以上のように第4実施例によれば、動きベ
クトル検出回路21が検出した動きベクトルの整数部だ
け、走査領域制御回路32が有効走査領域P1を移動さ
せ、撮像素子31を駆動する。そして動きベクトル検出
回路21が検出した垂直方向動きベクトルの小数部の値
によって水平画素列の補間処理を行うことにより、画質
劣化の少ない画質が安定した手振れ補正を行うことがで
きる。
【0060】尚、ライン補間部の回路構成はフィールド
内ライン補間処理出力の高周波数成分とフィールド間ラ
イン補間処理出力の低周波数成分とを加算してライン補
間出力を得るものであれば、必ずしも前述した構成でな
くてもよい。図14、図15は本発明の第4実施例にお
ける他の構成例を示す手振れ補正機能付き撮像装置のブ
ロック図である。この例では図5と同様にHPF41,
LPF42をライン補間回路51,52の前段に設けた
ものである。図14の構成にすると、フィールド間ライ
ン補間回路におけるメモリ回路1bの容量を大幅に削減
できるという効果が得られる。各回路部の動作はその順
序が異なるだけで同様であるので説明は省略する。又、
画像ライン補間回路15dはプロセス回路14の後に設
ける必要はない。又、ライン補間部の回路構成について
も、フィールド内ライン補間処理出力の高周波数成分と
フィールド間ライン補間処理出力の低周波数成分とを加
算してライン補間出力を得る画像ライン補間回路であれ
ば、どの様な構成であってもよい。
【0061】図15は画像ライン補間回路15dをプロ
セス回路14の前段に設けた場合の手振れ補正機能を有
する撮像装置構成例である。図15の画像ライン補間回
路15dは、第1又は第2実施例における画像ライン補
間回路と同様である。本発明の第2実施例である画像ラ
イン補間回路を用いた構成にすると、フィールド間ライ
ン補間回路におけるメモリ回路の容量を大幅に削減でき
るという効果が得られる。各回路の動作はその順序が異
なるだけで同一であるので、説明は省略する。
【0062】図16は本発明の第5実施例の手振れ補正
機能を搭載した撮像装置の構成を示すブロック図であ
る。尚、第1〜第4実施例を示す図1〜図15と同一部
分は同一の符号を付けて詳細な説明は省略する。図16
において本撮像装置は、撮像素子31,駆動回路12,
増幅器13,プロセス回路14,動きベクトル検出回路
21,画像ライン補間回路15dを有して構成されてい
る。画像ライン補間回路15dは、動きベクトル検出回
路21が検出した動きベクトルによって有効走査領域P
1を移動させ、手振れ補正を行う回路であり、第1実施
例の画像ライン補間回路と同様のものである。
【0063】画像ライン補間回路15dは、メモリ回路
1、メモリ制御回路2a、乗算器3a,4a,3b,4
b、第1の加算器5a、第2の加算器5b、補間係数発
生回路6a,制御部7、HPF41、LPF42、第3
の加算器43で構成されている。HPF41及びLPF
42の通過周波数領域は互いに相反するものとする。制
御部7は検出された動きベクトルにより、メモリ制御回
路2a、補間係数発生回路6aに制御信号を発生するも
のである。
【0064】このように構成された本実施例の手振れ補
正機能を搭載した撮像装置の動作について説明する。ま
ず、撮像素子31の画像信号を増幅器13で増幅した
後、プロセス回路14でインターレース走査された画像
信号として出力し、メモリ回路1に一時蓄える。又、動
きベクトル検出回路21はプロセス回路14の画像信号
から動きベクトルを検出し、この動きベクトルは制御部
7に出力される。制御部7は検出された動きベクトルの
整数部によって、1ライン単位の精度で手振れを補正す
るようにメモリ制御回路2に制御信号を送る。又制御部
7は同時に検出された動きベクトルの小数部により1ラ
イン未満の手振れ補正を行うように補間処理をするた
め、補間係数発生回路6に制御信号を送る。メモリ制御
回路2は制御部7からの信号を受けて、メモリ回路1か
ら有効走査領域P1を1ライン単位の精度で移動させて
読み出す。更に、読み出された有効走査領域P1に手振
れの微調整を行うようラインデータを補間して出力す
る。この補間処理は、第1〜第3実施例における補間処
理と同様、フィールド内ライン補間処理出力及びフィー
ルド間ライン補間回路出力のそれぞれ相反する周波数領
域の成分を取り出して加算し、全周波数領域の補間ライ
ンを得る補間処理を行うものである。この動作を各フレ
ーム毎に繰り返して手振れ補正を行う。
【0065】このように本実施例の撮像装置によれば、
メモリ制御回路2は動きベクトル検出回路21が検出し
た動きベクトルの整数部だけ有効走査領域P1を移動さ
せてメモリ回路1から読み出し、画像ライン15bは動
きベクトル検出回路21が検出した垂直方向の動きベク
トルの小数部の値に応じた補間係数で水平ラインの補間
処理を行う。このため、画質劣化のない画質が安定した
手振れ補正を行うことができる。
【0066】尚、画像ライン補間回路15dの回路構成
は、フィールド内ライン補間処理出力の高周波数成分と
フィールド間ライン補間処理出力の低周波数成分とを加
算してライン補間出力を得るものであれば、どの様な構
成であってもよい。図17及び図18は本発明の第5実
施例における他の構成例を有する手振れ補正機能付き撮
像装置のブロック図である。図17の構成にすると、前
述したようにフィールド間ライン補間回路におけるメモ
リ回路の容量を大幅に削減できるという効果が得られ
る。各回路部の動作はその順序が異なるだけで同様であ
るので、説明は省略する。
【0067】又、画像ライン補間回路15dは、プロセ
ス回路14の後にある必要はない。更に、ライン補間部
の回路構成についても、フィールド内ライン補間処理出
力の高周波数成分とフィールド間ライン補間処理出力の
低周波数成分とを加算してライン補間出力を得るもので
あればどの様な構成であってもよい。図18は画像ライ
ン補間回路15bがプロセス回路14の前段にある手振
れ補正機能を搭載した撮像装置のブロック図である。図
18の画像ライン補間回路15bは、第1又は第2実施
例におけるものと同一である。各回路部の動作はその順
序が異なるだけであるので説明は省略する。
【0068】尚、以上の実施例の説明では、水平ライン
の補間方法を1次補間(隣接する2つのラインSn、S
n+1からその中間位置のラインを補間により得るの
に、w*Sn+(1−w)*(Sn+1)の演算で得る
方法)として説明した。しかしこの補間方法に限ること
はなく、他の何れの方法でもそのフィールド内ライン補
間及びフィールド間ライン補間を複合することでも本発
明は達成できることは明らかである。
【0069】又、第1、3、4、5の実施例における画
像ライン補間回路は、必ずしも図1に示す構成である必
要はなく、インターレース走査された画像信号にフィー
ルド内ライン補間とフィールド間ライン補間を行い、得
られたフィールド内ライン補間出力とフィールド間ライ
ン補間出力をそれぞれ高域通過フィルタ、低域通過フィ
ルタを通した後、加算して補間ラインを得るものであれ
ばどのような構成であってもよい。
【0070】
【発明の効果】以上詳細に説明したように本発明の請求
項1〜2の発明によれば、フィールド内ライン補間処理
出力及びフィールド間ライン補間処理出力の夫々相反す
る周波数領域の成分を取り出して加算することにより、
全周波数領域の補間ライン信号を得ている。このためフ
ィールド内ライン補間及びフィールド間ライン補間にお
ける補間位置精度や動画の2重像の問題点を解決し、2
つの入力ライン間に補間される画像出力ラインの周波数
レスポンス特性を大幅に改善することができる。
【0071】又、請求項3〜4の発明によれば、請求項
1〜2の発明の効果に加えて、フィールド間ライン補間
処理回路において必要なメモリ回路の容量を大幅に削減
することができる効果が得られる。
【0072】又、請求項5〜8の発明によれば、第1の
撮像素子に簡単な構成の電子ズーム回路を付加すること
により水平ラインの補間を得ると共に、ライン毎の垂直
周波数レスポンスが異なることによる画質劣化を抑圧し
て電子ズーム機能付きの撮像装置を実現することができ
る。又撮像装置の画質を大幅に向上する効果が得られ
る。
【0073】又、請求項9〜11の発明によれば、第2
の撮像素子に走査領域制御回路と動きベクトル検出回路
を接続することにより、動きベクトル検出回路が検出し
た動きベクトルの整数部により、手振れを1ライン単位
の精度で補正するように、有効走査領域を移動させて撮
像素子から読み出す。更に、動きベクトル検出回路が検
出した垂直方向動きベクトルの小数部によって、手振れ
の残りの1ライン未満の誤差を補正するように画像ライ
ンを補間処理する。このため画質劣化の少ない、安定し
た画質の手振れ補正を行なう撮像装置が実現できる。
【0074】更に、請求項12〜14の発明によれば、
第2の撮像素子にメモリ御回路と動きベクトル検出回路
を接続することにより、動きベクトル検出回路が検出し
た動きベクトルの整数部により、手振れを1ライン単位
の精度で補正するように、有効走査領域を移動させてメ
モリ回路から読み出す。さらに、動きベクトル検出回路
が検出した垂直方向動きベクトルの小数部によって、手
振れの残りの1ライン未満の誤差を補正するように画像
ラインを補間処理し、画質劣化の少ない安定した画質の
手振れ補正を行なう撮像装置が実現できる。
【図面の簡単な説明】
【図1】本発明の第1実施例における画像ライン補間回
路の構成を示すブロック図である。
【図2】第1実施例における画像ラインの補間処理の流
れを示すブロック図である。
【図3】第1実施例で行う補間ラインの周波数帯域処理
を示す模式図である。
【図4】第1実施例の補間処理の動作原理とその効果を
説明するための模式図である。
【図5】本発明の第2実施例における画像ライン補間回
路の構成を示すブロック図である。
【図6】第2実施例における補間ライン信号の周波数帯
域成分を示す模式図である。
【図7】本発明の第3実施例における電子ズーム機能付
き撮像装置の構成を示すブロック図である。
【図8】第3実施例における電子ズーム機能付き撮像装
置の他の構成を示すブロック図である。
【図9】第3実施例における電子ズーム機能付き撮像装
置の更に他の構成を示すブロック図である。
【図10】第3実施例における電子ズーム機能付き撮像
装置の更に他の構成を示すブロック図である。
【図11】本発明の第4実施例における手振れ補正機能
付き撮像装置の構成を示すブロック図である。
【図12】第4実施例における撮像素子の撮像領域を示
した模式図である。
【図13】第4実施例における手振れ補正例を示した模
式図である。
【図14】第4実施例における手振れ補正機能付き撮像
装置の他の構成を示すブロック図である。
【図15】第4実施例における手振れ補正機能付き撮像
装置の更に他の構成を示すブロック図である。
【図16】本発明の第5実施例における手振れ補正機能
付き撮像装置の構成を示すブロック図である。
【図17】第5実施例における手振れ補正機能付き撮像
装置の他の構成を示すブロック図である。
【図18】第5実施例における手振れ補正機能付き撮像
装置の更に他の構成を示すブロック図である。
【図19】従来のフィールド内ライン補間回路の構成を
示すブロック図である。
【図20】フィールド内ライン補間を説明するための模
式図である。
【図21】フィールド間ライン補間を説明するための模
式図である。
【図22】従来の電子ズーム機能付き撮像装置の構成の
一例を示すブロック図である。
【図23】電子ズームにおける画像拡大処理の概念を示
す模式図である。
【図24】従来のフィールド内ライン補間による電子ズ
ーム動作を説明するための模式図である。
【図25】従来のフィールド間ライン補間による電子ズ
ーム動作を説明するための模式図である。
【図26】従来の手振れ補正機能を搭載した第1の撮像
装置の構成を示すブロック図である。
【図27】従来の手振れ補正機能を搭載した第2の撮像
装置の構成を示すブロック図である。
【図28】従来の手振れ補正機能を搭載した第3の撮像
装置の構成を示すブロック図である。
【符号の説明】
1,1a,1b メモリ回路 2,2a メモリ制御回路 3a,3b,4a,4b 乗算器 5a,5b,43 加算器 6,6a 補間係数発生回路 7 制御部 11,31 撮像素子 12 駆動回路 13 増幅器 14 プロセス回路 15,15d 画像ライン補間回路 15b,15c 電子ズーム回路 16 操作スイッチ 17 セレクタ 18 出力端子 21 動きベクトル検出回路 32 走査領域制御回路 41 HPF 42 LPF 51 フィールド内ライン補間回路 52 フィールド間ライン補間回路 51a 第1の補間回路 51b 第2の補間回路 P0 撮像領域 P1 有効走査領域 P2 補正領域

Claims (14)

    【特許請求の範囲】
  1. 【請求項1】 インターレース走査されたフレーム内の
    特定位置の画像信号を用いて補間処理を行い、画像変換
    したフレームの補間画像を得る画像ライン補間回路であ
    って、 特定の2ラインの画像信号から補間画像を生成するライ
    ンの補間係数を発生する補間係数発生回路と、 インターレース走査された画像信号から、フィールド内
    ライン補間処理出力の高周波数成分を生成すると共に、
    フィールド間ライン補間処理出力の低周波数成分を生成
    した信号を夫々加算して画像ライン補間信号を出力する
    ライン補間処理部と、を具備することを特徴とする画像
    ライン補間回路。
  2. 【請求項2】 前記ライン補間処理部は、 インターレース走査された画像信号を一時蓄えるメモリ
    回路と、 同一フィールド内の2つのラインの画像信号に基づいて
    ライン補間処理を行う第1の補間回路と、 隣接するフィールド間の最も近いラインの画像信号に基
    づいてライン補間処理を行う第2の補間回路と、 前記第1の補間回路の出力から画像信号の高域周波数成
    分を取り出す高域通過フィルタと、 前記第2の補間回路の出力から画像信号の低域周波数成
    分を取り出す低域通過フィルタと、 前記高域通過フィルタの出力と前記低域通過フィルタの
    出力とを加算する加算器と、を含むものであることを特
    徴とする請求項1記載の画像ライン補間回路。
  3. 【請求項3】 前記ライン補間処理部は、 インターレース走査された画像信号の低域周波数成分を
    取り出す低域通過フィルタと、 インターレース走査された画像信号の高域周波数成分を
    取り出す高域通過フィルタと、 前記高域通過フィルタの出力より同一のフィールド内の
    2つのラインの画像信号に基づいてライン補間処理を行
    う第1の補間回路と、 前記低域通過フィルタの出力より連続するフィールド間
    の最も近いラインの画像信号に基づいてライン補間処理
    を行う第2の補間回路と、 前記第1の補間回路の出力と前記第2の補間回路の出力
    とを加算する加算器と、を具備することを特徴とする請
    求項1記載の画像ライン補間回路。
  4. 【請求項4】 前記高域通過フィルタと前記低域通過フ
    ィルタは、 前記第1の補間回路の出力及び前記第2の補間回路の出
    力の夫々相反する周波数成分を取り出すものであること
    を特徴とする請求項2記載の画像ライン補間回路。
  5. 【請求項5】 被写体の画像をインターレース走査によ
    り画像信号に変換する第1の撮像素子と、 特定の2ラインの画像信号から補間画像を生成するライ
    ンの補間係数を発生する補間係数発生回路と、 前記第1の撮像素子より得られる画像信号から、フィー
    ルド内ライン補間処理出力の高周波数成分を生成すると
    共に、フィールド間ライン補間処理出力の低周波数成分
    を生成した信号を夫々加算して画像ライン補間信号を出
    力するライン補間処理部と、を具備することを特徴とす
    る画像ライン補間機能付の撮像装置。
  6. 【請求項6】 前記ライン補間処理部は、 前記第1の撮像素子の画像信号を一時蓄えるメモリ回路
    と、 同一フィールド内の2つのラインの画像信号に基づいて
    ライン補間処理を行う第1の補間回路と、 隣接するフィールド間の最も近いラインの画像信号に基
    づいてライン補間処理を行う第2の補間回路と、 前記第1の補間回路の出力から画像信号の高域周波数成
    分を取り出す高域通過フィルタと、 前記第2の補間回路の出力から画像信号の低域周波数成
    分を取り出す低域通過フィルタと、 前記高域通過フィルタの出力と前記低域通過フィルタの
    出力とを加算する加算器と、を含むものであることを特
    徴とする請求項5記載の画像ライン補間機能付の撮像装
    置。
  7. 【請求項7】 前記ライン補間処理部は、 前記第1の撮像素子から出力される画像信号の低域周波
    数成分を取り出す低域通過フィルタと、 前記第1の撮像素子から出力される画像信号のの高域周
    波数成分を取り出す高域通過フィルタと、 前記高域通過フィルタの出力より同一のフィールド内の
    2つのラインの画像信号に基づいてライン補間処理を行
    う第1の補間回路と、 前記低域通過フィルタの出力より隣接するフィールド間
    の最も近いラインの画像信号に基づいてライン補間処理
    を行う第2の補間回路と、 前記第1の補間回路の出力と前記第2の補間回路の出力
    とを加算する加算器と、を具備することを特徴とする請
    求項5記載の画像ライン補間機能付の撮像装置。
  8. 【請求項8】 前記高域通過フィルタと前記低域通過フ
    ィルタは、 前記第1の補間回路の出力及び前記第2の補間回路の出
    力の夫々相反する周波数成分を取り出すものであること
    を特徴とする請求項6記載の画像ライン補間機能付の撮
    像装置。
  9. 【請求項9】 被写体の画像をインターレース走査によ
    り画像信号に変換すると共に、前記画像の撮像領域内に
    おいて移動自在の有効走査領域から画像信号を出力する
    第2の撮像素子と、 前記第2の撮像素子を含む筐体の振動による画像の動き
    ベクトルを検出する動きベクトル検出回路と、 前記第2の撮像素子の有効走査領域を前記動きベクトル
    検出回路が検出した動きベクトルの走査ライン単位の整
    数部だけ前記撮像領域内で移動させて前記第2の撮像素
    子を駆動する走査領域制御回路と、 前記動きベクトル検出回路が検出した画像の垂直方向の
    動きベクトルの走査ライン単位の小数部の値に応じた補
    間係数を発生する補間係数発生器と、 前記補間係数に応じて同一フィールド内の2つのライン
    の画像信号に基づいてライン補間処理を行う第1の補間
    回路と、 前記補間係数に応じて隣接するフィールド間の最も近い
    ラインの画像信号に基づいてライン補間処理を行う第2
    の補間回路と、 前記第1の補間回路の出力から画像信号の高域周波数成
    分を取り出す高域通過フィルタと、 前記第2の補間回路の出力から画像信号の低域周波数成
    分を取り出す低域通過フィルタと、 前記高域通過フィルタ及び低域通過フィルタの出力を加
    算する加算器と、を具備することを特徴とする撮像装
    置。
  10. 【請求項10】 被写体の画像をインターレース走査に
    より画像信号に変換すると共に、前記画像の撮像領域内
    において移動自在の有効走査領域から画像信号を出力す
    る第2の撮像素子と、 前記第2の撮像素子を含む筐体の振動による画像の動き
    ベクトルを検出する動きベクトル検出回路と、 前記第2の撮像素子の有効走査領域を前記動きベクトル
    検出回路が検出した動きベクトルの走査ライン単位の整
    数部だけ前記撮像領域内で移動させて前記第2の撮像素
    子を駆動する走査領域制御回路と、 前記動きベクトル検出回路が検出した画像の垂直方向の
    動きベクトルの走査ライン単位の小数部の値に応じた補
    間係数を発生する補間係数発生器と、 インターレース走査された画像信号の高域周波数成分を
    取り出す高域通過フィルタと、 インターレース走査された画像信号の低域周波数成分を
    取り出す低域通過フィルタと、 前記補間係数に応じて前記高域通過フィルタより得られ
    る同一フィールド内の2つのラインの画像信号に基づい
    てライン補間処理を行う第1の補間回路と、 前記補間係数に応じて前記低域通過フィルタより得られ
    る隣接するフィールド間の最も近いラインの画像信号に
    基づいてライン補間処理を行う第2の補間回路と、 前記第1の補間回路の出力の高周波数成分と前記第2の
    補間回路の出力の低周波数成分とを加算する加算器と、
    を具備することを特徴とする撮像装置。
  11. 【請求項11】 前記高域通過フィルタと前記低域通過
    フィルタは、 前記第1の補間回路の出力及び前記第2の補間回路の出
    力の夫々相反する周波数成分を取り出すものであること
    を特徴とする請求項9記載の撮像装置。
  12. 【請求項12】 被写体の画像をインターレース走査に
    より画像信号に変換すると共に、前記画像の撮像領域内
    において移動自在の有効走査領域から画像信号を出力す
    る第2の撮像素子と、 前記第2の撮像素子より得られる画像信号を一次保持す
    るメモリ回路と、 前記第2の撮像素子を含む筐体の振動による画像の動き
    ベクトルを検出する動きベクトル検出回路と、 前記動きベクトル検出回路が検出した動きベクトルの走
    査ライン単位の整数部だけ前記有効走査領域を移動させ
    て前記メモリ回路から読み出すメモリ制御回路と、 前記動きベクトル検出回路が検出した画像の垂直方向の
    動きベクトルの走査ライン単位の小数部の値に応じた補
    間係数を発生する補間係数発生器と、 前記補間係数に応じて同一フィールド内の2つのライン
    の画像信号に基づいてライン補間処理を行う第1の補間
    回路と、 前記補間係数に応じて隣接するフィールド間の最も近い
    ラインの画像信号に基づいてライン補間処理を行う第2
    の補間回路と、 前記第1の補間回路の出力から画像信号の水平方向の高
    域周波数成分を取り出す高域通過フィルタと前記第2の
    補間回路の出力から画像信号の水平方向の低域周波数成
    分を取り出す低域通過フィルタと、 前記高域通過フィルタ及び低域通過フィルタの出力を加
    算する加算器と、を具備することを特徴とする撮像装
    置。
  13. 【請求項13】 被写体の画像をインターレース走査に
    より画像信号に変換すると共に、前記画像の撮像領域内
    において移動自在の有効走査領域から画像信号を出力す
    る第2の撮像素子と、 前記第2の撮像素子を含む筐体の振動による画像の動き
    ベクトルを検出する動きベクトル検出回路と、 インターレース走査された画像信号の高域周波数成分を
    取り出す高域通過フィルタと、 インターレース走査された画像信号の低域周波数成分を
    取り出す低域通過フィルタと、 前記高域通過フィルタ及び前記低域通過フィルタより出
    力される画像信号を夫々保持する第1,第2のメモリ回
    路と、 前記動きベクトル検出回路が検出した動きベクトルの走
    査ライン単位の整数部だけ前記有効走査領域を移動させ
    て前記第1,第2のメモリ回路から読み出すメモリ制御
    回路と、 前記動きベクトル検出回路が検出した画像の垂直方向動
    きベクトルの走査ライン単位の小数部の値に応じた補間
    係数を発生する補間係数発生器と、 前記第1のメモリ回路より読出された同一フィールド内
    の2つのラインの画像信号に基づいてライン補間処理を
    行う第1の補間回路と、 前記第2のメモリ回路より読出された隣接するフィール
    ド間の最も近いラインの画像信号に基づいてライン補間
    処理を行う第2の補間回路と、 前記第1の補間回路の出力と前記第2の補間回路の出力
    とを加算する加算器と、を具備することを特徴とする撮
    像装置。
  14. 【請求項14】 前記高域通過フィルタと前記低域通過
    フィルタは、 前記第1の補間回路の出力及び前記第2の補間回路の出
    力の夫々相反する周波数成分を取り出すものであること
    を特徴とする請求項13記載の撮像装置。
JP3280405A 1991-09-30 1991-09-30 画像ライン補間回路及び撮像装置 Expired - Fee Related JP2989701B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP3280405A JP2989701B2 (ja) 1991-09-30 1991-09-30 画像ライン補間回路及び撮像装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP3280405A JP2989701B2 (ja) 1991-09-30 1991-09-30 画像ライン補間回路及び撮像装置

Publications (2)

Publication Number Publication Date
JPH0595533A true JPH0595533A (ja) 1993-04-16
JP2989701B2 JP2989701B2 (ja) 1999-12-13

Family

ID=17624579

Family Applications (1)

Application Number Title Priority Date Filing Date
JP3280405A Expired - Fee Related JP2989701B2 (ja) 1991-09-30 1991-09-30 画像ライン補間回路及び撮像装置

Country Status (1)

Country Link
JP (1) JP2989701B2 (ja)

Also Published As

Publication number Publication date
JP2989701B2 (ja) 1999-12-13

Similar Documents

Publication Publication Date Title
JP2946583B2 (ja) スローモーション映像信号発生装置及びスローモーション映像信号発生方法
US5521636A (en) Horizontal line interpolation circuit and image pickup apparatus including it
JP5039192B2 (ja) 時空間適応性ビデオデインターレーシング
JP2000056743A (ja) 適応走査ラスタ変換方法及び装置
JP4249272B2 (ja) 高解像度の電子式映像拡大装置及びその方法
JP2000032401A (ja) 強調された鮮鋭度を有するビデオ走査線の増殖のための方法および装置
JPH07303241A (ja) インターレースされた映像信号のための適応フィールド/フレームフィルタ
KR20040058006A (ko) 화상 신호 처리 장치
JP2989701B2 (ja) 画像ライン補間回路及び撮像装置
JP3410008B2 (ja) 輪郭補償システム
JP2955984B2 (ja) 補間装置
JP2858372B2 (ja) 水平ライン補間回路および撮像装置
JP3158802B2 (ja) 補間機能付き映像装置
EP0921677B1 (en) Image pickup apparatus and method, and image output apparatus and method applicable thereto
JP2890774B2 (ja) 画像拡大装置と電子ズーム機能付き撮像装置
JP3134513B2 (ja) 水平ライン補間機能付き撮像装置
JP3684588B2 (ja) 映像信号処理装置
JPH0595532A (ja) 画像ライン補間回路および撮像装置
JP3374431B2 (ja) 補間機能付き撮像装置
JP2007019708A (ja) 画像処理装置
JP2002199265A (ja) 電子ズーム装置及びビデオカメラ
KR100224860B1 (ko) 영상신호의 수직보간방법 및 장치와 그를 이용한 정지 영상형성방법 및 장치
JP3314961B2 (ja) インタレース妨害除去装置
JP3053681B2 (ja) 手振れ補正装置
JP3191586B2 (ja) 画像動き補正装置

Legal Events

Date Code Title Description
LAPS Cancellation because of no payment of annual fees