JPH11220751A - 撮像装置 - Google Patents

Abstract

(57)【要約】 【課題】 ＪＰＥＧ画像圧縮の圧縮率のモードに応じた
画像を得ることができる撮像装置を得る。 【解決手段】 ＪＰＥＧ画像圧縮の圧縮率調整のための
モード信号が示す圧縮率に応じて、低い圧縮率であるモ
ード信号の場合は高画質な色復元画像を出力する色復元
手段からの信号を選択し、高い圧縮率であるモード信号
の場合は標準的な補間処理による色復元手段からの信号
を選択して、所定の圧縮率でＪＰＥＧ圧縮を行い、圧縮
率を低くした場合は圧縮による劣化がなく、偽色、偽輪
郭が軽減された高画質な画像を得て、圧縮率を高くした
場合はより削減された圧縮データを得て、処理速度も早
くでき、画像圧縮の圧縮率のモードに応じた画像を得
る。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】この発明は、電子スチルカメ
ラのような撮像装置における高画質化、小型化に関す
る。

【０００２】

【従来の技術】従来、電子スチルカメラのような撮像装
置においては、小型化のために１枚の撮像素子（以下、
単板撮像素子と呼ぶ）を用いている。図１３は従来にお
ける撮像素子の代表的な色フィルタ配列の一例を示す図
である。図において、ＲはＲの光を通過させる分光特性
を持った色フィルタを有した撮像素子であり、同様に
Ｂ、Ｇについてもそれぞれの色フィルタを有した撮像素
子である。図１３に示されるように、ｎラインにはＧ、
Ｒが２画素毎に配列され、ｎ＋１ラインではＢ、Ｇが２
画素毎に配列されている。したがって、Ｒ、Ｂ信号は上
下４画素毎（図中の斜線部）に、Ｇ信号は２画素毎に得
られることとなり、撮像素子の画素数の各信号を得るに
は、得られている画素信号より補間等の演算処理を行い
撮像素子数のＲ、Ｇ、Ｂ信号を生成することとなる。

【０００３】図１４は上記図１３に示された原色の色フ
ィルタを用いた単板撮像素子において、撮像素子からの
信号よりＲ、Ｇ、Ｂ信号を生成し、画像を記憶するため
の従来の撮像装置の構成の一例を示すブロック図であ
る。図１４において、１０１は撮像素子、１０２はＡ／
Ｄコンバータ、１０３はフレームメモリ、１０４はフレ
ームメモリ１０３における信号をＲ、Ｇ、Ｂそれぞれの
信号に分離して、各信号の補間生成を行い撮像素子の画
素数の信号を復元する色復元手段、１０５はＲ、Ｇ、Ｂ
信号からＹ、Ｃｂ、Ｃｒ信号へ変換するＹＣｂＣｒ変換
手段、１０６はＪＰＥＧ（Joint Photographic Expert
Group）方式により入力された画像（ Ｙ、Ｃｂ、Ｃｒ信
号）を圧縮するＪＰＥＧ圧縮手段、１０７は上記ＪＰＥ
Ｇ圧縮手段１０６において圧縮率を調整するために所望
の圧縮率を示すモード信号を発生し出力する圧縮率調整
モード信号発生手段、１０８は出力端子であり、上記撮
像素子１０１は、図１３に示すような、画素Ｒ、Ｇ、Ｂ
の色フィルタから構成される。

【０００４】次に、動作を説明する。撮像素子１０１か
ら各画素信号Ｒ、Ｇ、Ｂを読み出し、その出力はＡ／Ｄ
コンバータ１０２によりＡ／Ｄ変換され、フレームメモ
リ１０３に各画素信号を取り込む。色復元手段１０４
は、前記フレームメモリ１０３に取り込まれた信号か
ら、各信号を分離し、各Ｒ、Ｇ、Ｂ信号において得られ
ていない画素の信号を隣接画素の信号より補間生成し、
撮像素子すべての画素数のＲＧＢ信号を算出し出力す
る。

【０００５】ここで、図１５は上記色復元手段１０４の
構成の一例を示したブロック図であり、その動作を説明
する。図１５において、１１１はフレームメモリ１０３
における信号よりＲ、Ｇ、Ｂ信号をそれぞれ分離する分
離手段、１１２は分離された各信号における得られてい
ない画素信号を隣接画素の信号より補間生成し、撮像素
子すべての画素数のＲＧＢ信号を算出し出力する補間手
段である。フレームメモリ１０３における信号は分離手
段１１１において各Ｒ、Ｇ、Ｂ信号に分離され、それぞ
れを補間手段１１２へと出力する。分離手段１１１によ
り分離されたＧ、Ｒ、Ｂ信号は図１６（ａ）（ｂ）
（ｃ）に示されるようになり、図中Ｇ、Ｒ、Ｂで示され
た画素が撮像素子１０１より得られた各信号であり、一
方、空白の画素が得られていない画素である。

【０００６】補間手段１１２においての補間方法は、Ｇ
信号（図１６（ａ））については、垂直ｎライン、水平
ｍ番目の画素位置の信号ｇ（以下、画素位置（ｎ，ｍ）
と記す。）を補間するために、上下方向の隣接画素の差
分（｜Ｇ（ｎ−１，ｍ）−Ｇ（ｎ＋１，ｍ）｜）と左右
方向の隣接画素の差分（｜Ｇ（ｎ，ｍ−１）−Ｇ（ｎ，
ｍ＋１）｜）を求め、この差分が少ない方向の画素信号
により補間する。例えば、左右方向の隣接画素の差分が
少ない場合は、ｇ（ｎ，ｍ）＝（Ｇ（ｎ，ｍ−１）＋Ｇ
（ｎ，ｍ＋１））／２として算出し、上下方向の隣接画
素の差分が少ない場合は、ｇ（ｎ，ｍ）＝（Ｇ（ｎ−
１，ｍ）＋Ｇ（ｎ＋１，ｍ））／２として算出する。

【０００７】ＲおよびＢ信号（図１６（ｂ）および
（ｃ））については、まず水平方向の画素の補間を行
い、次に垂直方向で補間を行う。例えば図１６（ｂ）の
Ｒについては、垂直ｎ−１ライン、ｎ＋１ラインでの補
間を行い、画素位置（ｎ−１，ｍ）（ｎ＋１，ｍ）の信
号を、 ｒ（ｎ−１，ｍ）＝（Ｒ（ｎ−１，ｍ−１）＋Ｒ（ｎ−
１，ｍ＋１））／２ ｒ（ｎ＋１，ｍ）＝（Ｒ（ｎ＋１，ｍ−１）＋Ｒ（ｎ＋
１，ｍ＋１））／２ のように算出し、つぎにｎラインの画素を上下（ｎ−１
およびｎ＋１ライン）の画素の補間により各水平画素位
置ｍ−１、ｍ、ｍ＋１の信号を求める。Ｂについても同
様な方法で得られる。

【０００８】以上の補間方法により、補間手段１１２の
出力において、撮像素子すべての画素数のＲ、Ｇ、Ｂ信
号を算出することができる。

【０００９】次に、上記補間手段１１２からの出力であ
るＲ、Ｇ、Ｂ信号はＹＣｂＣｒ変換手段１０５へと入力
される。ＹＣｂＣｒ変換手段１０５では、入力された
Ｒ、Ｇ、Ｂ信号をＹ、Ｃｂ、Ｃｒ信号へ演算により変換
し、変換されたＹ、Ｃｂ、Ｃｒ信号をＪＰＥＧ圧縮手段
１０６へと出力する。ＪＰＥＧ圧縮手段１０６において
は入力されたＹ、Ｃｂ、Ｃｒ信号による画像をＪＰＥＧ
方式により圧縮するのであるが、このＪＰＥＧ圧縮手段
１０６には圧縮率調整モード発生手段１０７から所望の
圧縮率を示すモード信号が送られており、このモード信
号に応じた圧縮率となるように入力画像を圧縮する。上
記圧縮率調整モード発生手段１０７では、記録メディア
の容量、圧縮データ転送等の用途に応じてＪＰＥＧ圧縮
手段１０６での圧縮率を調整できるように、所望の圧縮
率を示すモード信号を発生し出力する。例えば、圧縮に
よる劣化が少ない画像を得られるような低い圧縮率を示
す第１のモード（高画質モード）と、圧縮により画像デ
ータをより削減できるような高い圧縮率を示す第２のモ
ード（標準モード）とを設け、このモードを示す信号を
ＪＰＥＧ圧縮手段１０６へと送り、ＪＰＥＧ圧縮手段１
０６において、第１のモードでは例えば１／１０の圧縮
率で入力画像を圧縮し、第２のモードでは例えば１／２
０の圧縮率で画像を圧縮する。

【００１０】そして、上記ＪＰＥＧ圧縮手段１０６にお
いて圧縮された画像圧縮データは出力端子１０８へと出
力され、記憶メディアに記憶される、またはデータ転送
されるなどする。

【００１１】また、図１７は特開平６−１７８３０７号
公報に示された上下２画素を混合して読み出す画素混合
方式の単板撮像素子による従来の撮像装置における色復
元手段１０４の構成の一例を示しており、上記の従来例
と同様、撮像素子からの信号を水平走査３ラインから補
間生成するよう構成する場合のブロック図を示したもの
である。同図において、１１３は撮像素子、１１４はフ
レームメモリ、１１５は信号選択回路、１１６は色補間
回路、１１７はＲＧＢマトリクスであり、信号選択回路
１１５からＲＧＢマトリクス１１７により色復元手段を
構成することとなる。撮像素子１１３は、図１７に示す
ように、４つの画素Ａ，Ｂ，Ｃ，Ｄ（以下、各画素信号
に付けられた番号は画素位置を示す）から構成され、画
素混合読み出しにより色信号が生成できるようにＡ、Ｂ
の画素が１ライン毎に交互に配列される。

【００１２】次に、図１７における動作を説明する。撮
像素子１１３から画素混合読み出しせずそのまま各画素
信号を読み出しＡ／Ｄ変換した後（図示せず）、フレー
ムメモリ１１４に各画素信号を取り込む。前記フレーム
メモリ１１４に取り込まれた信号から、信号選択回路１
１５により隣接した垂直３ラインの信号を選択し、色補
間回路１１６へと送る。色補間回路１１６では、上記垂
直３ラインの信号から各色信号Ａ、Ｂ、Ｃ、Ｄを補間生
成した後、ＲＧＢマトリクス回路１１７によりＲＧＢ信
号として出力される。

【００１３】ここで、上記色補間回路１１６では各色信
号を補間生成するのであるが、この補間方法について説
明する。例えば、ｎ２ラインの色信号補間生成では、信
号選択回路１１５により垂直３ラインｎ１，ｎ２，ｎ３
の信号が選択されて色補間回路１１７へと送られてお
り、ｎ２ラインにおいて得られている色信号はＣ、Ｄ画
素であり、Ａ，Ｂの画素はない。したがって、Ａ，Ｂの
画素については垂直方向でのｎ１、ｎ３ラインの信号よ
り補間するのであるが、ｎ１、ｎ３ラインではＡ，Ｂの
画素位置が異なるので、水平方向の補間係数を変えるこ
ととなる。いま、補間後の色信号のｎ２ラインの３番目
の画素（ｎ２，３）に対し、補間前の水平５画素より各
色信号Ａ′、Ｂ′、Ｃ′、Ｄ′を補間生成するとする
と、例えば、Ｃ′、Ｄ′については、水平方向のみ中心
に重みをつけて補間生成し、 Ｃ₂₃′＝（Ｃ₂₁／２＋ Ｃ₂₃＋ Ｃ₂₅／２）／２ Ｄ₂₃′＝（Ｄ₂₂＋ Ｄ₂₄）／２ とする。一方、 Ａ′、Ｂ′に対しては、 Ａ₂₃′＝（Ａ₁₁／４＋Ａ₁₃／２＋Ａ₁₅／４）／２＋（Ａ
₃₁／４＋Ａ₃₃／２＋Ａ₃₅／４）／２ Ｂ₂₃′＝（Ｂ₁₂／２＋ Ｂ₁₄／２）／２＋（Ｂ₃₂／２＋
Ｂ₃₄／２）／２ なる式から水平画素に重みをつけ補間することができ
る。

【００１４】次に、ｎ３ラインの色信号の補間生成で
は、Ａ、Ｂの画素はｎ３ラインから補間生成し、Ｃ、Ｄ
画素についてはｎ２、ｎ４ラインから補間生成する。つ
まり、画素位置（３、３）において、例えば、 Ａ₃₃′＝（Ａ₃₂＋Ａ₃₄）／２ Ｂ₃₃′＝（Ｂ₃₁／２＋Ｂ₃₃＋Ｂ₃₅／２）／２ Ｃ₃₃′＝（Ｃ₂₁／４＋Ｃ₂₃／２＋Ｃ₂₅／４）／２＋（Ｃ
₄₁／４＋ Ｃ₄₃／２＋Ｃ_{4 5}／４）／２ Ｄ₃₃′＝（Ｄ₂₂／２＋Ｄ₂₄／２）／２＋（Ｄ₄₂／２＋Ｄ
₄₄／２）／２ となる。

【００１５】以下、Ａ，Ｂの画素配置がライン毎で入れ
替わることを考慮し、ｎ４ラインでは、画素位置（４、
３）に対し、 Ａ₄₃′＝（Ａ₃₁／４＋Ａ₃₃／２＋Ａ₃₅／４）／２＋（Ａ
₅₁／４＋Ａ₅₃／２＋Ａ₅₅／４）／２ Ｂ₄₃′＝（Ｂ₃₂／２＋Ｂ₃₄／２）／２＋（Ｂ₅₂／２＋Ｂ
₅₄／２）／２ Ｃ₄₃′＝（Ｃ₄₁／２＋Ｃ₄₃＋Ｃ₄₅／２）／２ Ｄ₄₃′＝（Ｄ₄₂＋Ｄ₄₄）／２ ｎ５ラインでは、画素位置（５、３）に対し、 Ａ₅₃′＝（Ａ₅₂＋Ａ₅₄）／２ Ｂ₅₃′＝（Ｂ₅₂＋Ｂ₅₄）／２ Ｃ₅₃′＝（Ｃ₄₁／４＋Ｃ₄₃／２＋Ｃ₄₅／４）／２＋（Ｃ
₆₁／４＋Ｃ₆₃／２＋Ｃ₆₅／４）／２ Ｄ₅₃′＝（Ｄ₄₂／２＋Ｄ₄₄／２）／２＋（Ｄ₆₂／２＋Ｄ
₆₄／２）／２ となる。以後、上記ｎ２、ｎ３，ｎ４、ｎ５ラインでの
補間方法を順次繰り返すことにより、色信号Ａ′、
Ｂ′、Ｃ′、Ｄ′を生成することとなる。

【００１６】そして、上記補間生成されたＡ、Ｂ、Ｃ、
Ｄ信号はＲＧＢマトリクス回路１１７によりＲＧＢ信号
として出力され、上記図１４のＹＣｂＣｒ変換手段１０
５に送られてＹ、Ｃｂ、Ｃｒ信号による画像へと変換さ
れ、ＪＰＥＧ圧縮手段１０６において画像圧縮されるこ
ととなる。なお、上記では、４つの色信号をＡ，Ｂ，
Ｃ，Ｄとして説明しているが、これは、例えば、Ｍｇ
（マゼンダ）、Ｇ（グリーン）、Ｃｙ（シアン）、Ｙｅ
（イエロー）の４色が考えられ、また、色補間回路１１
７での補間係数については色信号を補間生成できる係数
であればよい。

【００１７】

【発明が解決しようとする課題】従来の撮像装置は、色
復元手段において水平方向の隣接画素と上下のラインに
おける画素信号による補間によって色信号を生成し、こ
の信号からの画像をＪＰＥＧ方式により圧縮するよう構
成されており、色復元手段において得られる画像の圧縮
率による影響を考慮していないため、圧縮率を示すモー
ド信号が圧縮による劣化が少ない画像を得られるような
低い圧縮率を示す高画質モードの場合、圧縮データを伸
張した画像は、偽色、偽輪郭が生じることとなり高画質
な画像を得られず、画像圧縮の圧縮率のモードに応じた
画像を得ることができないという問題点があった。

【００１８】この発明は上記のような問題点を解消する
ためになされたもので、複数の色信号に対する分光感度
特性を持つ色フィルタが配列された撮像素子を備えた撮
像装置において、撮像素子により読み出された各色信号
に対して撮像素子の画素数分の解像度の色信号を復元生
成する第１の色復元手段および第２の色信号復元手段
と、画像圧縮を行う際の画像圧縮率を示すモード信号を
発生し出力するモード信号発生手段とを備えるととも
に、前記モード信号発生手段から出力であるモード信号
に応じて、上記第１の色信号復元手段からの信号または
第２の色信号復元手段からの信号を切り換えて選択し出
力する切り換え手段とを備え、前記切り換え手段からの
出力による画像を上記モード信号発生手段からのモード
信号が示す圧縮率となるよう画像信号の圧縮を行い、圧
縮率を低くした場合は圧縮による劣化がなく、偽色、偽
輪郭が軽減された高画質な画像を得て、圧縮率を高くし
た場合はより削減された圧縮データを得て、処理速度も
早くでき、画像圧縮の圧縮率のモードに応じた画像が得
られる撮像装置を得ることを目的とする。

【００１９】

【課題を解決するための手段】この発明に係る撮像装置
は、複数の色信号に対する分光感度特性を持つ色フィル
タが配列された撮像素子を備えた撮像装置において、撮
像素子により読み出された各色信号に対して撮像素子の
画素数分の解像度の色信号を復元生成する第１の色復元
手段及び第２の色信号復元手段と、画像圧縮を行う際の
画像圧縮率を示すモード信号を発生し出力するモード信
号発生手段とを備えるとともに、前記モード信号発生手
段から出力であるモード信号に応じて、上記第１の色信
号復元手段からの信号または第２の色信号復元手段から
の信号を切り換えて選択し出力する切り換え手段とを備
え、前記切り換え手段からの出力による画像を上記モー
ド信号発生手段からのモード信号が示す圧縮率となるよ
う画像信号の圧縮を行うものである。

【００２０】また、この発明に係る撮像装置は、上記切
り換え手段において、モード信号発生手段から出力され
るモード信号により示された圧縮率が１／ｎ以下の低い
圧縮率を示す場合は上記第１の色復元手段による色信号
を選択し、前記モード信号が１／ｎの圧縮率よりも高い
圧縮率を示す場合は上記第２の色信号復元手段による色
信号を選択するものである。

【００２１】また、この発明に係る撮像装置は、上記撮
像素子が、垂直２行水平２列の上下４画素において、第
１の色信号に対する分光感度特性を持つ第１の色フィル
タと第２の色信号に対する分光感度特性を持つ第２の色
フィルタとが垂直１行目に配列され、垂直２行目には上
記垂直１行目の第１の色フィルタが配列された画素位置
と同一の列に第３の色信号に対する分光感度特性を持つ
第３の色フィルタが配列され、第２の色フィルタと同一
の列に第１の色信号に対する分光感度特性を持つ第１の
色フィルタが配列されており、上記上下４画素の色フィ
ルタが順次垂直および水平方向に繰り返し配列された撮
像素子であり、上記第１の色復元手段が、上記第１の色
フィルタによる第１の色信号の所定画素位置での周辺画
素信号に基づき、所定画素位置におけるエッジ成分を判
定するエッジ判定手段と、前記エッジ判定手段の出力に
基づき、上記第１、第２、第３の色フィルタにより読み
出された第１、第２および第３の色信号により第１の色
信号における上記所定位置での信号を算出する第１の算
出手段と、上記エッジ判定手段の出力に基づき、上記第
１の算出手段の出力と色フィルタからの第２および第３
の色信号により第２および第３の色信号を算出する第２
の算出手段とを備え、上記撮像素子における画素数の第
１、第２、第３の色信号を得るとともに、上記第２の色
復元手段が、第１、第２、第３の色信号それぞれにおい
て、処理画素位置の上下または左右方向の画素からの補
間により信号を算出する手段を備えるものである。

【００２２】また、この発明に係る撮像装置は、上記第
１の色復元手段におけるエッジ判定手段が、第１の色信
号の所定画素位置における左右の隣接画素の差の絶対値
を算出して水平方向のエッジ成分を検出する水平方向エ
ッジ検出手段と、第１の色信号の所定画素位置における
上下の画素の差の絶対値を算出して垂直方向のエッジ成
分を検出する垂直方向エッジ検出手段と、前記水平方向
エッジ検出手段と垂直方向エッジ検出手段からの出力に
基づき、前記所定画素における水平または垂直方向のエ
ッジ成分を判定する判定手段を備えるとともに、前記判
定手段が、上記水平方向エッジ検出手段からの出力また
は上記垂直方向エッジ検出手段からの出力が予め定めた
値より大きい場合は、上記所定画素の周辺画素にエッジ
成分を検出したとし、さらに、水平方向エッジ検出手段
からの出力が上記垂直方向エッジ検出手段の出力より大
きい場合は垂直方向により相関があり、水平方向エッジ
検出手段からの出力が上記垂直方向エッジ検出手段の出
力より小さい場合は水平方向により相関があると判定す
るとともに、上記水平方向エッジ検出手段および垂直方
向エッジ検出手段からの出力がともに予め定めた値より
小さい場合にはエッジ成分を検出しないと判定するもの
である。

【００２３】また、この発明に係る撮像装置は、上記第
１の色復元手段における第１の色信号での所定位置に対
する信号を算出する第１の算出手段が、第２の色信号Ｂ
のある所定画素ｌ行ｍ列Ｂ（ｌ、ｍ）の位置において、
第１の色信号Ａ、第２の色信号Ｂのそれぞれに対し水平
方向のローパスフィルタを介した値Ａｈｌｐｆ（ｌ、
ｍ）、Ｂｈｌｐｆ（ｌ、ｍ）を算出し、前記水平方向ロ
ーパスフィルタからの出力信号であるＡｈｌｐｆ（ｌ、
ｍ）とＢｈｌｐｆ（ｌ、ｍ）との比と上記画素位置の画
素値Ｂ（ｌ、ｍ）により、ｌ行ｍ列の第１の色信号Ａに
おける画素値Ａ（ｌ、ｍ）を、Ａ（ｌ、ｍ）＝Ｂ（ｌ、
ｍ）×｛Ａｈｌｐｆ（ｌ、ｍ）／Ｂｈｌｐｆ（ｌ、
ｍ）｝により算出し、第３の色信号Ｃのある他の画素位
置においても同様に第１の色信号Ａにおける画素値を算
出する水平方向信号算出手段と、上記所定画素ｌ行ｍ列
Ｂ（ｌ、ｍ）の位置において、第１の色信号Ａ、第２の
色信号Ｂのそれぞれに対し垂直方向のローパスフィルタ
を介した値Ａｖｌｐｆ（ｌ、ｍ）、Ｂｖｌｐｆ（ｌ、
ｍ）を算出し、前記垂直方向ローパスフィルタからの出
力信号であるＡｖｌｐｆ（ｌ、ｍ）とＢｖｌｐｆ（ｌ、
ｍ）との比と上記画素位置の画素値Ｂ（ｌ、ｍ）によ
り、ｌ行ｍ列の第１の色信号Ａにおける画素値Ａ（ｌ、
ｍ）を、Ａ（ｌ、ｍ）＝Ｂ（ｌ、ｍ）×｛Ａｖｌｐｆ
（ｌ、ｍ）／Ｂｖｌｐｆ（ｌ、ｍ）｝により算出し、第
３の色信号Ｃのある他の画素位置においても同様に第１
の色信号Ａにおける画素値を算出する垂直方向信号算出
手段と、第１の色信号Ａにおける上記所定画素ｌ行ｍ列
の位置での上下左右の隣接画素の平均値よりｌ行ｍ列の
第１の色信号Ａにおける画素値Ａ（ｌ、ｍ）を算出する
平均値算出手段とを備え、上記エッジ判定手段の出力に
基づき、上記水平方向信号算出手段の出力または垂直方
向信号算出手段出力、または、平均値算出手段からの出
力より選択し、上記所定画素ｌ行ｍ列における第１の色
信号Ａの画素値Ａ（ｌ、ｍ）を得て、撮像素子における
画素数の第１の色信号を得るものである。

【００２４】また、この発明に係る撮像装置は、前記第
１の色復元手段における第１の算出手段が、上記エッジ
判定手段の出力が所定画素ｌ行ｍ列の位置においてエッ
ジ成分を検出しないと判定した場合は上記平均値算出手
段の出力を選択し、垂直方向に相関があると判定した場
合は上記垂直方向信号算出手段の出力を選択し、水平方
向に相関があると判定した場合は上記水平方向信号算出
手段の出力を選択し、撮像素子における画素数の第１の
色信号を得るものである。

【００２５】また、この発明に係る撮像装置は、上記第
１の色復元手段における第２の算出手段が、所定画素ｌ
行ｍ列の位置において、上記第１の算出手段からの出力
Ａに対し水平方向のローパスフィルタを介した値Ａ１ｈ
ｌｐｆ（ｌ、ｍ）と垂直方向ローパスフィルタを介した
値Ａ１ｖｌｐｆ（ｌ、ｍ）を算出し、第２の色信号Ｂに
対し水平方向のローパスフィルタを介した値Ｂ１ｈｌｐ
ｆ（ｌ、ｍ）と第３の色信号Ｃに対し垂直方向のローパ
スフィルタを介した値Ｃ１ｖｌｐｆ（ｌ、ｍ）（また
は、第２の色信号Ｂに対し垂直方向のローパスフィルタ
を介した値Ｂ１ｖｌｐｆ（ｌ、ｍ）と第３の色信号Ｃに
対し水平方向のローパスフィルタを介した値Ｃ１ｈｌｐ
ｆ（ｌ、ｍ））とを算出し、Ａ１ｈｌｐｆ（ｌ、ｍ）と
Ｂ１ｈｌｐｆ（ｌ、ｍ）との比（またはＣ１ｈｌｐｆ
（ｌ、ｍ）との比）と、Ａ１ｖｌｐｆ（ｌ、ｍ）とＣ１
ｖｌｐｆ（ｌ、ｍ）との比（または、Ｂ１ｖｌｐｆ
（ｌ、ｍ）との比）と、上記第１の算出手段からの出力
Ａにおける所定画素ｌ行ｍ列での画素値Ａ（ｌ、ｍ）か
ら、ｌ行ｍ列の第２の色信号Ｂと第３の色信号Ｃにおけ
る画素値Ｂ（ｌ、ｍ）とＣ（ｌ、ｍ）を、Ｂ（ｌ、ｍ）
＝Ａ（ｌ、ｍ）×｛Ｂ１ｈｌｐｆ（ｌ、ｍ）／Ａ１ｈｌ
ｐｆ（ｌ、ｍ）｝、Ｃ（ｌ、ｍ）＝Ａ（ｌ、ｍ）×｛Ｃ
１ｖｌｐｆ（ｌ、ｍ）／Ａ１ｖｌｐｆ（ｌ、ｍ）｝（ま
たは、Ｂ（ｌ、ｍ）＝Ａ（ｌ、ｍ）×｛Ｂ１ｖｌｐｆ
（ｌ、ｍ）／Ａ１ｖｌｐｆ（ｌ、ｍ）｝、Ｃ（ｌ、ｍ）
＝Ａ（ｌ、ｍ）×｛Ｃ１ｈｌｐｆ（ｌ、ｍ）／Ａ１ｈｌ
ｐｆ（ｌ、ｍ）｝）により算出する信号算出手段を備え
るとともに、上記ｌ行ｍ列の位置とは異なる所定画素ｘ
行ｙ列の位置において、上記第１の算出手段からの出力
Ａに対し水平方向のローパスフィルタを介した値Ａ２ｈ
ｌｐｆ（ｘ、ｙ）、前記信号算出手段からの出力での第
２の色信号Ｂに対し水平方向のローパスフィルタを介し
た値Ｂ２ｈｌｐｆ（ｘ、ｙ）を算出し、Ａ２ｈｌｐｆ
（ｘ、ｙ）とＢ２ｈｌｐｆ（ｘ、ｙ）の比と上記第１の
算出手段からの出力Ａでの画素ｘ行ｙ列での画素値Ａ
（ｘ、ｙ）により、ｘ行ｙ列の位置における第２の色信
号Ｂ（ｘ、ｙ）を、Ｂ（ｘ、ｙ）＝Ａ（ｘ、ｙ）×｛Ｂ
２ｈｌｐｆ（ｘ、ｙ）／Ａ２ｈｌｐｆ（ｘ、ｙ）｝によ
り算出し、第３の色信号Ｃにおいても同様にＣ信号を算
出する水平方向信号算出手段と、上記第１の算出手段か
らの出力Ａに対し垂直方向のローパスフィルタを介した
値Ａ２ｖｌｐｆ（ｘ、ｙ）、前記信号算出手段からの出
力での第２の色信号Ｂに対し垂直方向のローパスフィル
タを介した値Ｂ２ｖｌｐｆ（ｘ、ｙ）を算出し、Ａ２ｖ
ｌｐｆ（ｘ、ｙ）とＢ２ｖｌｐｆ（ｘ、ｙ）の比と上記
第１の算出手段からの出力Ａでの画素ｘ行ｙ列での画素
値Ａ（ｘ、ｙ）により、ｘ行ｙ列の位置における第２の
色信号Ｂ（ｘ、ｙ）を、Ｂ（ｘ、ｙ）＝Ａ（ｘ、ｙ）×
｛Ｂ２ｖｌｐｆ（ｘ、ｙ）／Ａ２ｖｌｐｆ（ｘ、ｙ）｝
により算出し、第３の色信号Ｃにおいても同様にＣ信号
を算出する垂直方向信号算出手段と、上記信号算出手段
からの出力における第２、第３の色信号での所定画素ｘ
行ｙ列の位置において、斜めに隣接する画素の平均値を
算出する平均値算出手段とを備え、上記エッジ判定手段
の出力に基づき、前記水平方向信号算出手段、垂直方向
信号算出手段、平均値算出手段からのそれぞれの出力か
ら選択して、上記所定画素ｘ行ｙ列での第２、第３の色
信号を得て、撮像素子における画素数の第２、第３の色
信号を得るものである。

【００２６】また、この発明に係る撮像装置は、前記第
１の色復元手段における第２の算出手段が、上記エッジ
判定手段の出力が所定画素ｘ行ｙ列の位置においてエッ
ジ成分を検出しないと判定した場合は上記平均値算出手
段の出力を選択し、垂直方向に相関があると判定した場
合は上記垂直方向信号算出手段の出力を選択し、水平方
向に相関があると判定した場合は上記水平方向信号算出
手段の出力を選択し、撮像素子における画素数の第２、
第３の色信号を得るものである。

【００２７】さらに、この発明に係る撮像装置は、上記
モード信号発生手段が、圧縮率１／１０を示す第１のモ
ード信号と、圧縮率１／２０を示す第２のモード信号を
出力するとともに、上記切り換え手段において第１のモ
ード信号が入力された場合は上記第１の色復元手段によ
る色信号を選択し、第２のモード信号が入力された場合
は上記第２の色信号復元手段による色信号を選択するも
のである。

【００２８】

【発明の実施の形態】以下、この発明をその実施の形態
を示す図面に基づいて具体的に説明する。 実施の形態１．図１はこの発明の実施の形態１による撮
像装置の構成の一例を示すブロック図である。図におい
て、１は撮像素子、２はＡ／Ｄコンバータ、３はフレー
ムメモリ、４は高画質な画像となる撮像素子の総画素数
のＲ、Ｇ、Ｂ信号を得るよう色信号の復元を行う高画質
色復元手段、５は補間処理により標準的な画像となる撮
像素子の総画素数のＲ、Ｇ、Ｂ信号を得るよう色信号の
復元を行う標準色復元手段、６は上記高画質色復元手段
４からの出力と上記標準色復元手段５からの出力を切り
換える切り換え手段、７は圧縮率調整モード発生手段、
８はＲ、Ｇ、Ｂ信号をＹ、Ｃｂ、Ｃｒ信号による画像へ
変換するＹＣｂＣｒ変換手段、９は入力画像をＪＰＥＧ
方式により圧縮するＪＰＥＧ圧縮手段、１０は出力端子
である。

【００２９】図２はこの発明の実施の形態１による撮像
装置における撮像素子１の色フィルタ配列の一例を示す
図であり、原色の色フィルタを用い、各光電変換素子を
独立に呼び出す方式の撮像素子を示している。図におい
て、Ｇは垂直方向２ｉ（ｉ＝０、１、２、…）、水平方
向２ｊ（ｊ＝０、１、２、…）の画素位置（以下、画素
位置（２ｉ，２ｊ）のように記す。）と、画素位置（２
ｉ＋１、２ｊ＋１）にあり、Ｇ信号を通過させる分光特
性を持った第１の色フィルタ、Ｒは画素位置（２ｉ、２
ｊ＋１）にあり、Ｒ信号を通過させる分光特性を持った
第２の色フィルタ、Ｂは画素位置（２ｉ＋１、２ｊ）に
あり、Ｂ信号を通過させる分光特性を持った第３の色フ
ィルタである。図２に示されるように、Ｒ、Ｂ信号は上
下４画素毎（図中の斜線部）に、Ｇ信号は２画素毎に得
られることとなり、この上下４画素が垂直水平方向に繰
り返し配列されている。

【００３０】次に動作について説明する。撮像素子１に
おいて、図２のように配列された色フィルタより各画素
信号Ｒ、Ｇ、Ｂを読み出し、その出力はそれぞれＡ／Ｄ
コンバータ２によりＡ／Ｄ変換され、フレームメモリ３
に入力される。高画質色復元手段４では、フレームメモ
リ３からの信号より各Ｒ、Ｇ、Ｂ信号を分離して、得ら
れていない画素信号を高画質な信号を復元する処理によ
り復元し、撮像素子の画素数の各Ｒ、Ｇ、Ｂ信号を出力
する。標準色復元手段５では、フレームメモリ３の信号
から各Ｒ、Ｇ、Ｂ信号を分離して得られていない画素信
号を補間処理により復元し、撮像素子の画素数の各Ｒ、
Ｇ、Ｂ信号を出力する。

【００３１】ここで、上記高画質色復元手段４の動作を
図３により詳しく説明する。図３は上記高画質色復元手
段４の構成の一例を示すブロック図であり、図におい
て、２０はフレームメモリ３における信号をＲ、Ｇ、Ｂ
信号に分離する分離手段、２１はＧ信号での所定画素位
置でのエッジ成分を判定する第１のエッジ判定手段、２
２は分離手段２０からの各Ｒ、Ｇ、Ｂ信号と上記第１の
エッジ判定手段２１からの出力に基づきＧ信号の復元を
行うＧ成分復元手段、２３はＲ、Ｂ信号の復元を行う第
１のＲＢ成分復元手段、２４は前記Ｇ成分復元手段２２
からのＧ信号での所定画素位置でのエッジ成分を判定す
る第２のエッジ判定手段、２５は第２のエッジ判定手段
２４の出力に応じてＲおよびＢ信号の復元を行う第２の
ＲＢ成分復元手段である。

【００３２】フレームメモリ３における図２に示された
配列の撮像素子による信号は、分離手段２０においてそ
れぞれＲ、Ｇ、Ｂ信号に分離され、Ｇ信号は第１のエッ
ジ判定手段２１とＧ成分復元手段２２へと送られ、Ｒ、
Ｂ信号はＧ成分復元手段２２および第１のＲＢ復元手段
２３へと送られる。第１のエッジ判定手段２１ではＧ信
号における所定画素位置でのエッジ成分を判定して判定
結果をＧ成分復元手段２２へと送り、Ｇ成分復元手段２
２では上記第１のエッジ判定手段２１からの判定結果の
基づき、撮像素子での総画素数のＧ信号を得るようＧ成
分の画素信号の復元を行う。図４は前記第１のエッジ判
定手段２１とＧ成分復元手段２２における動作を示すフ
ローチャートであり、第１のエッジ判定手段２１とＧ成
分復元手段２２での処理動作を図４に従って説明する。

【００３３】いま、撮像素子１におけるＧ信号は図２に
示すように画素位置（２ｉ、２ｊ）と（２ｉ＋１、２ｊ
＋１）で得られており、撮像素子の画素数のＧ信号を得
るために、画素位置（２ｉ、２ｊ＋１）と（２ｉ＋１、
２ｊ）の画素での信号を求めることとなる。よって、図
４より、Ｇ成分復元手段２２において画素位置（２ｉ、
２ｊ）と（２ｉ＋１、２ｊ＋１）での画素はＧ信号をそ
のまま出力し、画素位置（２ｉ、２ｊ＋１）と（２ｉ＋
１、２ｊ）では、まず第１のエッジ判定手段２１におい
て、左右および上下の画素の差分つまりエッジ成分を検
出する。つまり、上記画素位置での左右の画素の差の絶
対値ΔＨ、上下の画素の差の絶対値ΔＶ算出する。例え
ば、画素位置（２ｉ、２ｊ＋１）においては、水平方向
差分ΔＨは、 ΔＨ＝｜Ｇ（２ｉ、２ｊ）−Ｇ（２ｉ、２ｊ＋２）｜ （１） 垂直方向差分ΔＶは、 ΔＶ＝｜Ｇ（２ｉ−１、２ｊ＋１）−Ｇ（２ｉ＋１、２ｊ＋１）｜ （２） となる。以下、この画素の差の絶対値をエッジ成分と呼
ぶ。

【００３４】そして、上記水平方向でのエッジ成分ΔＨ
および垂直方向エッジ成分ΔＶにより、水平垂直方向で
の周辺画素での信号レベルの変化を判定し、その判定結
果を示す信号ｅｄ１を第１のエッジ判定手段２１より出
力する。第１のエッジ判定手段２１での判定は、ΔＨと
ΔＶの両方が予め定めた値ｔｈ以下の場合は、周辺画素
での信号レベルの変化がないと判定し、Ｇ成分復元手段
２２において、周波数の変化を考慮する必要がなく、上
下左右の４画素の平均値を算出しＧ信号とする。例え
ば、この場合での画素位置（２ｉ、２ｊ＋１）において
のＧ信号は、 ｇ（２ｉ、２ｊ＋１）＝｛ Ｇ（２ｉ−１、２ｊ＋１）
＋ Ｇ（２ｉ＋１、２ｊ＋１）＋ Ｇ（２ｉ、２ｊ）＋
Ｇ（２ｉ、２ｊ＋２）｝／４ となる。

【００３５】一方、ΔＨまたはΔＶが予め定めた値ｔｈ
より大きい場合は、その画素においてエッジ成分がある
と判定し、さらに、ΔＨ＞ΔＶの場合は垂直方向に相関
が高いと判定し、ΔＨ≦ΔＶで垂直方向に相関が高いと
判定される場合は水平方向に相関が高いと判定する。そ
して、ΔＨ＞ΔＶで垂直方向に相関が高いと判定される
場合は、Ｇ成分復元手段２２において、Ｒ、Ｇ、Ｂ信号
での垂直方向の画素信号より演算し、垂直方向に相関を
持つＧ信号を出力する。つまり、Ｒ信号が得られている
画素である処理画素位置 （２ｉ、２ｊ＋１）において
は、Ｇ信号の垂直方向のローパスフィルタを介した値Ｇ
ｖｌｐｆ、Ｒ信号の垂直方向のローパスフィルタを介し
た値Ｒｖｌｐｆを例えば、 Ｇｖｌｐｆ＝｛Ｇ（２ｉ−３、２ｊ＋１）＋ Ｇ（２ｉ−１、２ｊ＋１） ＋ Ｇ（２ｉ＋１、２ｊ＋１）＋ Ｇ（２ｉ＋３、２ｊ＋１）｝／４ （３） Ｒｖｌｐｆ＝｛Ｒ（２ｉ−４、２ｊ＋１）＋２×Ｒ（２ｉ−２、２ｊ＋１） ＋ ２×Ｒ（２ｉ、２ｊ＋１）＋ ２×Ｒ（２ｉ＋２、２ｊ＋１） ＋Ｒ（２ｉ＋４、２ｊ＋１）｝／８ （４） として算出し、このＧｖｌｐｆとＲｖｌｐｆの比と画素
位置（２ｉ、２ｊ＋１）でのＲ信号より、垂直方向に相
関をもつＧ信号ｇ（２ｉ、２ｊ＋１）を次式 ｇ（２ｉ、２ｊ＋１）＝Ｒ（２ｉ、２ｊ＋１）×（Ｇｖｌｐｆ／Ｒｖｌｐｆ） （５） により算出する。

【００３６】また、Ｂ信号が得られる画素位置である処
理画素位置（２ｉ＋１、２ｊ）でも同様に、Ｇ信号の垂
直方向のローパスフィルタを介した値Ｇｖｌｐｆ、Ｂ信
号の垂直方向のローパスフィルタを介した値Ｂｖｌｐｆ
を例えば、 Ｇｖｌｐｆ＝｛Ｇ（２ｉ−２、２ｊ）＋ Ｇ（２ｉ、２ｊ） ＋ Ｇ（２ｉ＋２、２ｊ）＋ Ｇ（２ｉ＋４、２ｊ）｝／４ （６） Ｂｖｌｐｆ＝｛Ｂ（２ｉ−３、２ｊ）＋ ２×Ｂ（２ｉ−１、２ｊ） ＋ ２×Ｂ（２ｉ＋１、２ｊ）＋ ２×Ｂ（２ｉ＋３、２ｊ） ＋Ｒ（２ｉ＋５、２ｊ）｝／８ （７） として算出し、このＧｖｌｐｆとＢｖｌｐｆの比と画素
位置（２ｉ＋１、２ｊ）でのＢ信号より、垂直方向に相
関をもつＧ信号ｇ（２ｉ＋１、２ｊ）を次式 ｇ（２ｉ＋１、２ｊ）＝Ｂ（２ｉ＋１、２ｊ）×（Ｇｖｌｐｆ／Ｂｖｌｐｆ） （８） により算出する。

【００３７】また、Ｈ≦ΔＶで水平方向に相関が高いと
判定される場合には、Ｇ成分復元手段２２において、水
平方向の画素信号より演算し、水平方向に相関を持つＧ
信号を出力する。処理画素位置（２ｉ、２ｊ＋１）にお
いては、Ｇ信号の水平方向のローパスフィルタを介した
値Ｇｈｌｐｆ、Ｒ信号の水平方向のローパスフィルタを
介した値Ｒｈｌｐｆを例えば、 Ｇｈｌｐｆ＝｛Ｇ（２ｉ、２ｊ）＋ Ｇ（２ｉ、２ｊ−２） ＋ Ｇ（２ｉ、２ｊ＋２）＋ Ｇ（２ｉ、２ｊ＋４）｝／４ （９） Ｒｈｌｐｆ＝｛Ｒ（２ｉ、２ｊ−３）＋ ２×Ｒ（２ｉ、２ｊ−１） ＋ ２×Ｒ（２ｉ、２ｊ＋１）＋ ２×Ｒ（２ｉ、２ｊ＋３） ＋Ｒ（２ｉ、２ｊ＋５）｝／８ （１０） として算出し、このＧｈｌｐｆとＲｈｌｐｆの比と画素
位置（２ｉ、２ｊ＋１）でのＲ信号より、垂直方向に相
関をもつＧ信号ｇ（２ｉ、２ｊ＋１）を次式 ｇ（２ｉ、２ｊ＋１）＝Ｒ（２ｉ、２ｊ＋１）×（Ｇｈｌｐｆ／Ｒｈｌｐｆ） （１１） により算出する。

【００３８】また、Ｂ信号が得られる画素位置である処
理画素位置（２ｉ＋１、２ｊ）でも同様に、処理画素位
置（２ｉ＋１、２ｊ）でのＧ信号の水平方向のローパス
フィルタを介した値Ｇｈｌｐｆ、Ｂ信号の水平方向のロ
ーパスフィルタを介した値Ｂｈｌｐｆを例えば、 Ｇｈｌｐｆ＝｛Ｇ（２ｉ＋１、２ｊ−１）＋ Ｇ（２ｉ、２ｊ−３） ＋ Ｇ（２ｉ、２ｊ＋１）＋ Ｇ（２ｉ、２ｊ＋３）｝／４ （１２） Ｂｈｌｐｆ＝｛Ｂ（２ｉ＋１、２ｊ−４）＋ ２×Ｂ（２ｉ＋１、２ｊ−２） ＋ ２×Ｂ（２ｉ＋１、２ｊ）＋ ２×Ｂ（２ｉ＋１、２ｊ＋２） ＋Ｂ（２ｉ＋１、２ｊ＋４）｝／８ （１３） として算出し、このＧｈｌｐｆとＢｈｌｐｆの比と画素
位置（２ｉ＋１、２ｊ）でのＢ信号より、垂直方向に相
関をもつＧ信号ｇ（２ｉ＋１、２ｊ）を次式 ｇ（２ｉ＋１、２ｊ）＝Ｂ（２ｉ＋１、２ｊ）×（Ｇｈｌｐｆ／Ｂｈｌｐｆ） （１４） により算出する。

【００３９】なお、上記式（５）、（８）、（１１）、
（１４）による算出方式は、局所的領域での色の変化が
少ないことを前提としており、つまり、局所的な領域で
の各色信号の比はほぼ等しいことにより、水平方向また
は垂直方向における局所的な領域での各色信号の比は
Ｒ、Ｇ、Ｂの水平方向または垂直方向のローパスフィル
タを介した値の比で与えられる。また、上記式（５）〜
（１４）は各水平方向ローパスフィルタおよび垂直方向
ローパスフィルタ出力の算出例であり、フィルタのタッ
プ数および係数は上記に限るものではなく、他のタップ
数および係数でもよい。

【００４０】したがって、Ｇ成分復元手段２２からは画
素位置（２ｉ、２ｊ）、（２ｉ、２ｊ＋１）、（２ｉ＋
１、２ｊ）、（２ｉ＋１、２ｊ＋１）それぞれの画素で
のＧ信号が出力され、つまり、撮像素子の画素数分の解
像度のＧ信号を得られる。このＧ成分復元手段２２から
の出力は次に、第１のＲＢ成分復元手段２３と第２のエ
ッジ判定手段２４へと送られる。

【００４１】次に、第１のＲＢ成分復元手段２３では
Ｒ、Ｂ信号の画素位置（２ｉ、２ｊ）、（２ｉ＋１、２
ｊ＋１）でのＲ、Ｂ信号の生成を行い、その出力を第２
のＲＢ復元手段２５へと送り、第２のエッジ判定手段２
４においては、Ｇ信号により画素位置（２ｉ、２ｊ＋
１）および（２ｉ＋１、２ｊ）の画素での左右および上
下の画素の差分つまりエッジ成分を検出する。第２のＲ
Ｂ成分復元手段２５では、第２のエッジ判定手段２４の
出力に基づき、Ｒ信号での画素位置（２ｉ＋１、２
ｊ）、Ｂ信号での画素位置（２ｉ、２ｊ＋１）でのそれ
ぞれの画素を復元生成する。図５は前記第１のＲＢ成分
復元手段２３、第２のエッジ判定手段２４および第２の
ＲＢ成分復元手段２５における動作を示すフローチャー
トであり、第１および第２のＲＢ成分復元手段２３、２
５と第２のエッジ判定手段２６での処理動作を図５に従
って説明する。

【００４２】いま、図２に示すように、撮像素子におけ
るＲ信号は画素位置（２ｉ、２ｊ＋１）で得られ、Ｂ信
号は（２ｉ＋１、２ｊ）で得られており、撮像素子の画
素数のＲ、Ｂ信号を得るために、Ｒについては画素位置
（２ｉ、２ｊ）、（２ｉ＋ｌ、２ｊ）と（２ｉ＋１、２
ｊ＋１）の画素での信号を求めることとなり、Ｂについ
ては画素位置（２ｉ、２ｊ）、（２ｉ、２ｊ＋１）と
（２ｉ＋１、２ｊ＋１）の画素での信号を求めることと
なる。図６（ａ）、（ｂ）はＲ、Ｂ信号の算出を説明す
るための各画素のＲ、Ｂを示す図であり、図中Ｒおよび
Ｂが撮像素子により得られている画素信号を示してい
る。図５により、第１および第２のＲＢ成分復元手段２
３、２５においては、Ｒ信号での画素位置（２ｉ、２ｊ
＋１）、Ｂ信号での画素信号（２ｉ＋１、２ｊ）におけ
る画素はそのままの信号を出力する。そして、画素位置
（２ｉ、２ｊ）と（２ｉ＋１、２ｊ＋１）の場合、Ｒ、
Ｂ信号ともに左右または上下のどちらかの方向の画素が
得られており、また、Ｇ信号はＧ成分復元手段２２によ
り全画素復元されている。よって、第１のＲＢ成分復元
手段２３には分離手段２０からのＲ、Ｂ信号とＧ成分復
元手段２２からの全画素の信号が復元されたＧ信号が入
力され、上下または左右の方向の画素より演算して上記
画素（２ｉ、２ｊ）と（２ｉ＋１、２ｊ＋１）のＲ、Ｂ
信号を得る。つまり、図６でのｒ１およびｂ１（画素位
置（２ｉ、２ｊ））、ｒ２およびｂ２（画素位置（２ｉ
＋１、２ｊ＋１））での画素を、Ｇ、ＲおよびＢ信号に
おける処理画素の上下または左右方向の画素により算出
する。

【００４３】Ｒ信号でのｒ１で示す画素位置（２ｉ、２
ｊ）の場合は、画素位置（２ｉ、２ｊ）においてＧ、Ｒ
信号に対して水平方向のローパスフィルタを介した値Ｇ
１ｈｌｐｆ、Ｒ１ｈｌｐｆを例えば、 Ｇ１ｈｌｐｆ＝（ｇ（２ｉ、２ｊ−１）＋ｇ（２ｉ、２ｊ＋１））／２ （１５） Ｒ１ｈｌｐｆ＝（Ｒ（２ｉ、２ｊ−１）＋Ｒ（２ｉ、２ｊ＋１））／２ （１６） により算出し、このＧ１ｈｌｐｆとＲ１ｈｌｐｆの比と
画素Ｇ（２ｉ、２ｊ）により、画素位置（２ｉ、２ｊ）
でのＲ信号ｒ（２ｉ、２ｊ）を次式により算出する。 ｒ（２ｉ、２ｊ）＝ Ｇ（２ｉ、２ｊ）×（Ｒ１ｈｌｐｆ／Ｇ１ｈｌｐｆ） ＝Ｇ（２ｉ、２ｊ）×（Ｒ（２ｉ、２ｊ−１）＋Ｒ（２ｉ、２ｊ＋１）） ／（ｇ（２ｉ、２ｊ−１）＋ｇ（２ｉ、２ｊ＋１）） （１７）

【００４４】同様に、Ｂ信号におけるｂ１の位置につい
ては、画素位置（２ｉ、２ｊ）において、Ｇ、Ｂ信号に
対して垂直方向のローパスフィルタを介した値Ｇ１ｖｌ
ｐｆ、Ｂ１ｖｌｐｆを例えば、 Ｇ１ｖｌｐｆ＝（ｇ（２ｉ−１、２ｊ）＋ｇ（２ｉ＋１、２ｊ））／２ （１８） Ｂ１ｖｌｐｆ＝（Ｂ（２ｉ−１、２ｊ）＋Ｂ（２ｉ＋１、２ｊ））／２ （１９） により算出し、このＧ１ｖｌｐｆとＢ１ｖｌｐｆの比と
画素Ｇ（２ｉ、２ｊ）により、画素位置（２ｉ、２ｊ）
でのＢ信号ｂ（２ｉ、２ｊ）を次式により算出する。 ｂ（２ｉ、２ｊ）＝ Ｇ（２ｉ、２ｊ）×（Ｂ１ｖｌｐｆ／Ｇ１ｖｌｐｆ） ＝Ｇ（２ｉ、２ｊ）×（Ｂ（２ｉ−１、２ｊ）＋Ｂ（２ｉ＋１、２ｊ）） ／（ｇ（２ｉ−１、２ｊ）＋ｇ（２ｉ＋１、２ｊ）） （２０）

【００４５】また、ｒ２で示す画素位置（２ｉ＋１、２
ｊ＋１）の場合についても同様に、画素位置（２ｉ＋
１、２ｊ＋１）において、Ｇ、Ｒ信号に対して垂直方向
のローパスフィルタを介した値Ｇ１ｖｌｐｆ、Ｒ１ｖｌ
ｐｆを例えば、 Ｇ１ｖｌｐｆ＝（ｇ（２ｉ、２ｊ＋１）＋ｇ（２ｉ＋２、２ｊ＋１））／２ （２１） Ｒ１ｖｌｐｆ＝（Ｒ（２ｉ、２ｊ＋１）＋Ｒ（２ｉ＋２、２ｊ＋１））／２ （２２） により算出し、このＧ１ｖｌｐｆとＲ１ｖｌｐｆの比と
画素Ｇ（２ｉ＋１、２ｊ＋１）により、画素位置（２ｉ
＋１、２ｊ＋１）でのＲ信号ｒ（２ｉ＋１、２ｊ＋１）
を次式により算出する。 ｒ（２ｉ＋１、２ｊ＋１）＝Ｇ（２ｉ＋１、２ｊ＋１）×（Ｒ１ｖｌｐｆ／Ｇ１ ｖｌｐｆ） ＝Ｇ（２ｉ＋１、２ｊ＋１）×（Ｒ（２ｉ、２ｊ＋１）＋Ｒ（２ｉ＋２、 ２ｊ＋１）） ／（ｇ（２ｉ、２ｊ＋１）＋ｇ（２ｉ＋２、２ｊ＋１）） （２３）

【００４６】同様に、Ｂ信号でのｂ２で示す画素位置
（２ｉ＋１、２ｊ＋１）において、Ｇ、Ｂ信号に対して
水平方向のローパスフィルタを介した値Ｇ１ｈｌｐｆ、
Ｂ１ｈｌｐｆを例えば、 Ｇ１ｈｌｐｆ＝（ｇ（２ｉ＋１、２ｊ）＋ｇ（２ｉ＋１、２ｊ＋２））／２ （２４） Ｂ１ｈｌｐｆ＝（Ｂ（２ｉ＋１、２ｊ）＋Ｂ（２ｉ＋１、２ｊ＋２））／２ （２５） により算出し、このＧ１ｈｌｐｆとＢ１ｈｌｐｆの比と
画素Ｇ（２ｉ＋１、２ｊ＋１）により、画素位置（２ｉ
＋１、２ｊ＋１）でのＢ信号ｂ（２ｉ＋１、２ｊ＋１）
を次式により算出する。 ｂ（２ｉ＋１、２ｊ＋１）＝Ｇ（２ｉ＋１、２ｊ＋１）×（Ｂ１ｈｌｐｆ／Ｇ１ ｈｌｐｆ） ＝Ｇ（２ｉ＋１、２ｊ＋１）×（Ｂ（２ｉ＋１、２ｊ）＋Ｂ（２ｉ＋１、 ２ｊ＋２）） ／（ｇ（２ｉ＋１、２ｊ）＋ｇ（２ｉ＋１、２ｊ＋２）） （２６）

【００４７】なお、上記式（１７）、（２０）、（２
３）、（２６）は上記Ｇでの復元方法と同様局所的領域
での色信号の変化が少ないことを前提としており、つま
り、各信号の比は局所的な領域ではほぼ等しいというこ
とによる。また、式（１５）〜（２６）におけるＧ１ｈ
ｌｐｆ、Ｇ１ｖｌｐｆ、Ｒ１ｈｌｐｆ、Ｒ１ｖｌｐｆ、
Ｂ１ｈｌｐｆ、Ｂ１ｖｌｐｆの算出式は、水平および垂
直方向のローパスフィルタ出力の算出例であり、フィル
タのタップ数および係数は上記に限るものではなく、他
のタップ数および係数であってもよい。

【００４８】次に、残りのＲ信号における画素位置（２
ｉ＋１、２ｊ）とＢにおける画素位置（２ｉ、２ｊ＋
１）での信号（図６でのｒ３およびｂ３）については、
まず、第２のエッジ判定手段２４において、Ｇ信号にお
ける前記画素での左右および上下の画素の差分つまりエ
ッジ成分を検出する。つまり、Ｇ成分復元手段２２から
のＧ信号に対し、上記画素位置での左右の画素の差の絶
対値ΔＨ、上下の画素の差の絶対値ΔＶを算出する。例
えば、画素位置（２ｉ＋１、２ｊ）においては、水平方
向差分ΔＨは、 ΔＨ＝｜Ｇ（２ｉ＋１、２ｊ−１）−Ｇ（２ｉ＋１、２
ｊ＋１）｜ 垂直方向差分ΔＶは、 ΔＶ＝｜ Ｇ（２ｉ、２ｊ）−Ｇ（２ｉ＋２、２ｊ）｜ となる。

【００４９】そして、上記水平方向でのエッジ成分ΔＨ
および垂直方向エッジ成分ΔＶにより、水平垂直方向で
の周辺画素での信号レベルの変化を判定し、その判定結
果を示す信号を第２のＲＢ成分復元手段２５へと出力す
るのであるが、ここで、Ｒ信号における画素位置（２ｉ
＋１、２ｊ）に対しては画素位置（２ｉ＋１、２ｊ）で
のエッジ成分を判定した結果ｅｄｒを送り、Ｂ信号にお
ける画素位置（２ｉ、２ｊ＋１）に対しては画素位置
（２ｉ、２ｊ＋１）でのエッジ成分を判定した結果ｅｄ
ｂを送ることになる。判定結果ｅｄｒおよびｅｄｂにお
いて、ΔＨとΔＶの両方が予め定めた値ｔｈ以下の場合
は周辺画素での信号レベルの変化がないと判定し、第２
のＲＢ成分復元手段２５において、周波数の変化を考慮
する必要がなく、斜め方向に隣接する４画素の平均値を
算出しＲまたはＢ信号とする。つまり、Ｒ信号での画素
位置（２ｉ＋１、２ｊ）（図６（ａ）でのｒ３）につい
ては ｒ（２ｉ＋１、２ｊ）＝｛ Ｒ（２ｉ、２ｊ−１）＋Ｒ
（２ｉ、２ｊ＋１）＋Ｒ（２ｉ＋２、２ｊ−１）＋Ｒ
（２ｉ＋２、２ｊ＋１）｝／４ Ｂ信号での画素位置（２ｉ、２ｊ＋１）（図６（ｂ）で
のｂ３）については、 ｂ（２ｉ、２ｊ＋１）＝｛Ｂ（２ｉ−１、２ｊ）＋Ｂ
（２ｉ−１、２ｊ＋２）＋Ｂ（２ｉ＋１、２ｊ）＋Ｂ
（２ｉ＋１、２ｊ＋２）｝／４ として算出する。

【００５０】一方、ΔＨまたはΔＶが予め定めた値ｔｈ
より大きい場合は、その画素においてエッジ成分がある
として、さらに、ΔＨ＞ΔＶの場合は垂直方向に相関が
高いと判定し、ΔＨ≦ΔＶの場合は水平方向に相関が高
いと判定する。そして、ΔＨ＞ΔＶで垂直方向に相関が
高いと判定される場合は、第２のＲＢ成分復元手段２５
において、Ｒ、Ｇ、Ｂ信号での上下方向の画素より演算
し、垂直方向に相関を持つ信号を出力する。Ｒ信号での
ｒ３で示す画素位置（２ｉ＋１，２ｊ）においては、垂
直方向のローパスフィルタを介した値Ｒ２ｖｌｐｆ、Ｇ
２ｖｌｐｆを例えば、 Ｒ２ｖｌｐｆ＝（ｒ（２ｉ、２ｊ）＋ｒ（２ｉ＋２、２ｊ））／２ （２７） Ｇ２ｖｌｐｆ＝（Ｇ（２ｉ、２ｊ）＋Ｇ（２ｉ＋２、２ｊ））／２ （２８） により算出し、このＲ２ｖｌｐｆとＧ２ｖｌｐｆの比と
画素ｇ（２ｉ＋１、２ｊ）により、次式の演算で垂直方
向に相関を持つＲの画素値ｒ（２ｉ＋１，２ｊ）を算出
する。 ｒ（２ｉ＋１、２ｊ）＝ｇ（２ｉ＋１、２ｊ）×（Ｒ２ｖｌｐｆ／Ｇ２ｖｌｐｆ ） ＝ｇ（２ｉ＋１、２ｊ）×（ｒ（２ｉ、２ｊ）＋ｒ（２ｉ＋２、２ｊ）） ／（Ｇ（２ｉ、２ｊ）＋Ｇ（２ｉ＋２、２ｊ）） （２９）

【００５１】また、Ｂ信号でのｂ３で示す画素位置にお
いても同様に、画素位置（２ｉ，２ｊ＋１）において、
垂直方向のローパスフィルタを介した値Ｂ２ｖｌｐｆ、
Ｇ３ｖｌｐｆを例えば、 Ｂ２ｖｌｐｆ＝（ｂ（２ｉ−１、２ｊ＋１）＋ｂ（２ｉ＋１、２ｊ＋１））／２ （３０） Ｇ３ｖｌｐｆ＝（Ｇ（２ｉ−１、２ｊ＋１）＋Ｇ（２ｉ＋１、２ｊ＋１））／２ （３１） により算出し、このＢ２ｖｌｐｆとＧ３ｖｌｐｆの比と
画素ｇ（２ｉ、２ｊ＋１）により、次式の演算で垂直方
向に相関を持つ画素値ｂ（２ｉ，２ｊ＋１）を算出す
る。 ｂ（２ｉ、２ｊ＋１）＝ｇ（２ｉ、２ｊ＋１）×（Ｂ２ｖｌｐｆ／Ｇ３ｖｌｐｆ ） ＝ｇ（２ｉ、２ｊ＋１） ×（ｂ（２ｉ−１、２ｊ＋１）＋ｂ（２ｉ＋１、２ｊ＋１）） ／（Ｇ（２ｉ−１、２ｊ＋１）＋Ｇ（２ｉ＋１、２ｊ＋１））（３２）

【００５２】次に、Ｈ≦ΔＶで水平方向に相関が高いと
判定される場合には、第２のＲＢ成分復元手段２５にお
いて、Ｒ、Ｇ、Ｂ信号での左右の画素信号より演算し、
水平方向に相関を持つ信号を出力する。Ｒ信号でのｒ３
で示す画素位置（２ｉ＋１，２ｊ）においては、水平方
向のローパスフィルタを介した値Ｒ２ｈｌｐｆ、Ｇ２ｈ
ｌｐｆを例えば、 Ｒ２ｈｌｐｆ＝（ｒ（２ｉ＋１、２ｊ−１）＋ｒ（２ｉ＋１、２ｊ＋１））／２ （３３） Ｇ２ｈｌｐｆ＝（Ｇ（２ｉ＋１、２ｊ−１）＋Ｇ（２ｉ＋１、２ｊ＋１））／２ （３４） により算出し、このＲ２ｈｌｐｆとＧ２ｈｌｐｆの比と
画素ｇ（２ｉ＋１、２ｊ）により、次式の演算で水平方
向に相関を持つＲの画素値ｒ（２ｉ＋１，２ｊ）を算出
する。 ｒ（２ｉ＋１、２ｊ）＝ｇ（２ｉ＋１、２ｊ）×（Ｒ２ｈｌｐｆ／Ｇ２ｈｌｐｆ ） ＝ｇ（２ｉ＋１、２ｊ） ×（ ｒ（２ｉ＋１、２ｊ−１）＋ｒ（２ｉ＋１、２ｊ＋１）） ／（Ｇ（２ｉ＋１、２ｊ−１）＋Ｇ（２ｉ＋１、２ｊ＋１））（３５）

【００５３】Ｂ信号でのｂ３で示す画素位置においても
同様に、画素位置（２ｉ，２ｊ＋１）において、水平方
向のローパスフィルタを介した値Ｂ２ｈｌｐｆ、Ｇ３ｈ
ｌｐｆを例えば、 Ｂ２ｈｌｐｆ＝（ｂ（２ｉ、２ｊ）＋ｂ（２ｉ、２ｊ＋２））／２ （３６） Ｇ３ｈｌｐｆ＝（Ｇ（２ｉ、２ｊ）＋Ｇ（２ｉ、２ｊ＋２））／２ （３７） により算出し、このＢ２ｈｌｐｆとＧ３ｈｌｐｆの比と
画素ｇ（２ｉ、２ｊ＋１）により、次式の演算で水平方
向に相関を持つ画素値ｂ（２ｉ，２ｊ＋１）を算出す
る。 ｂ（２ｉ、２ｊ＋１）＝ｇ（２ｉ、２ｊ＋１）×（Ｂ２ｈｌｐｆ／Ｇ３ｈｌｐｆ ） ＝ｇ（２ｉ、２ｊ＋１） ×（ ｂ（２ｉ、２ｊ）＋ｂ（２ｉ、２ｊ＋２）） ／（Ｇ（２ｉ、２ｊ）＋Ｇ（２ｉ、２ｊ＋２）） （３８）

【００５４】なお、上記式（２９）、（３２）、（３
５）、（３８）は上記Ｇでの復元方法と同様局所的領域
での色信号の変化が少ないことを前提としており、つま
り、各信号の比は局所的な領域ではほぼ等しいというこ
とによる。また、式（２７）〜（３８）におけるＧ２ｈ
ｌｐｆ、Ｇ２ｖｌｐｆ、Ｇ３ｈｌｐｆ、Ｇ３ｖｌｐｆ、
Ｒ２ｈｌｐｆ、Ｒ２ｖｌｐｆ、Ｂ２ｈｌｐｆ、Ｂ２ｖｌ
ｐｆの算出式は、水平および垂直方向のローパスフィル
タ出力の算出例であり、フィルタのタップ数および係数
は上記に限るものではなく、他のタップ数および係数で
あってもよい。

【００５５】以上より、第２のＲＢ成分復元手段２５か
らは画素位置（２ｉ、２ｊ）、（２ｉ、２ｊ＋１）、
（２ｉ＋１、２ｊ）、（２ｉ＋１、２ｊ＋１）それぞれ
の画素でのＲおよびＢ信号が出力され、つまり、撮像素
子の画素数分の解像度のＲ、Ｂ信号を得られるととな
る。Ｇ信号は、上記Ｇ成分復元手段２２において、すで
に撮像素子の画素数分の解像度の信号を得ており、した
がって、Ｇ成分を用い水平垂直方向のエッジ成分を判定
して局所的な領域での空間周波数の変化を判定し、その
判定結果に基づき各色信号の生成を切り換えるともに、
エッジ成分が所定値を越える場合の信号の算出におい
て、局所的な領域での色信号の比により算出を行い、エ
ッジ成分が所定値以下では周辺画素の平均値で求めるこ
とで、高画質色復元手段４の出力において、偽色、偽輪
郭が軽減された高画質な画像となる撮像素子の画数分の
解像度のＲ、Ｇ、Ｂ信号が得られる。

【００５６】次に、標準色復元手段５の動作を図７によ
り説明する。図７は標準復元手段５の一構成例を示すブ
ロック図であり、図において、３０はフレームメモリ３
における信号よりＲ、Ｇ、Ｂ信号をそれぞれ分離する分
離手段、３１は分離された各信号における得られていな
い画素信号を隣接画素の信号より補間生成し、撮像素子
すべての画素数のＲＧＢ信号を算出し出力する補間手段
である。フレームメモリ３における信号は分離手段３０
において各Ｒ、Ｇ、Ｂ信号に分離され、それぞれを補間
手段３１へと出力する。

【００５７】補間手段３１においての補間方法は、Ｇ信
号については、処理画素位置における上下方向の隣接画
素の差の絶対値（エッジ成分）と左右方向の隣接画素の
差の絶対値を求め、このエッジ成分が少ない方向の画素
信号により補間する。例えば、処理画素位置が（２ｉ、
２ｊ＋１）において、左右方向の隣接画素のエッジ成分
が少ない場合は、 ｇ（２ｉ、２ｊ＋１）＝（ Ｇ（２ｉ、２ｊ）＋Ｇ（２
ｉ、２ｊ＋２））／２ として算出し、上下方向の隣接画素のエッジ成分が少な
い場合は、 ｇ（２ｉ、２ｊ＋１）＝（Ｇ（２ｉ−１、２ｊ）＋Ｇ
（２ｉ＋１、２ｊ））／２ として算出する。

【００５８】ＲおよびＢ信号については、まず水平方向
の画素の補間を行い、次に垂直方向で補間を行う。例え
ば、Ｒ信号については、垂直２ｉラインでの補間を水平
方向で行い、画素位置（２ｉ、２ｊ）の信号を、 ｒ（２ｉ、２ｊ）＝（Ｒ（２ｉ、２ｊ−１）＋ Ｒ（２
ｉ、２ｊ＋１））／２ のように算出し、つぎに上下の画素の補間により画素位
置（２ｉ＋１、２ｊ）、（２ｉ＋１、２ｊ＋１）の信号
を、 ｒ（２ｉ＋１、２ｊ）＝（ｒ（２ｉ、２ｊ）＋ ｒ（２
ｉ＋２、２ｊ））／２ ｒ（２ｉ＋１、２ｊ＋１）＝（Ｒ（２ｉ、２ｊ＋１）＋
Ｒ（２ｉ＋２、２ｊ＋１））／２ のように算出する。Ｂについても同様な方法で得られ
る。

【００５９】以上の補間方法により、補間手段３１の出
力において、撮像素子すべての画素数のＲ、Ｇ、Ｂ信号
を算出するされ、この処理は上記高画質色復元方法４で
の処理に比べ画質は劣るが、補間による演算のみの処理
であるので処理速度は早くなる。

【００６０】上述の方法により高画質色復元手段４にお
いて復元された撮像素子の画素数分の信号Ｒ、Ｇ、Ｂは
切り換え手段６へと送られ、標準色復元手段５において
復元された撮像素子の画素数分の信号Ｒ、Ｇ、Ｂも切り
換え手段６へと送られる。切り換え手段６においては、
高画質色復元手段４からの信号と標準色復元手段５から
の信号を圧縮率調整モード発生手段７からのモード信号
に応じて切り換え、切り換えにより選択されたＲ、Ｇ、
Ｂ信号がＹＣｂＣｒ変換手段８へと送られる。ＹＣｂＣ
ｒ変換手段８において、入力されたＲ、Ｇ、Ｂ信号を演
算によりＹ、Ｃｂ、Ｃｒ信号に変換した後、ＪＰＥＧ圧
縮手段９へと送る。そして、ＪＰＥＧ圧縮手段９におい
ては、上記圧縮率調整モード発生手段からのモード信号
に応じた圧縮率となるように入力画像をＪＰＥＧ方式に
より圧縮し、圧縮されたデータを出力端子１０へと出力
する。

【００６１】ここで、上記圧縮率調整モード発生手段７
では、記録メディアの容量、圧縮データ転送等の用途に
応じてＪＰＥＧ圧縮手段９での圧縮率を調整できるよう
に、所望の圧縮率を示すモード信号を発生し出力してお
り、このモード信号は上記切り換え手段６へも送られ
て、後段のＪＰＥＧ圧縮手段９での画像圧縮における圧
縮率を考慮した画像を選択するように切り換え手段６で
の切り換えを行っている。圧縮率調整モード発生手段７
において、例えば、圧縮による劣化が少ない画像を得ら
れるような低い圧縮率を示す第１のモード（高画質モー
ド）と、圧縮により画像データをより削減できるような
高い圧縮率を示す第２のモード（標準モード）とを設
け、このモードを示す信号を出力するとする。ＪＰＥＧ
圧縮手段９での画像圧縮においては、圧縮率が低い場合
は圧縮による劣化が少なく、圧縮データを伸張して得ら
れる画像において劣化を識別することはできないが、圧
縮率が高い場合は圧縮されたデータ量は削減できるが、
圧縮伸張した画像においてブロック歪み等の画質劣化が
表れる。つまり、圧縮率調整モード発生手段７での出力
が高画質モードである第１のモードの場合、低い圧縮率
を示すため圧縮による画質劣化がなく、よって圧縮を行
う画像が高画質な画像であれば、圧縮伸張した画像も高
画質な画像を得られる。一方、圧縮率調整モード発生手
段７での出力が標準モードである第２のモードの場合
は、高い圧縮率を示すため圧縮による劣化があり、圧縮
を行う画像が通常の補間による画像でも高画質な画像で
あっても圧縮による劣化の影響を受けることとなる。

【００６２】したがって、上記切り換え手段６におい
て、ＪＰＥＧ圧縮手段７からの出力であるモード信号が
第１のモードである場合は、高画質色復元手段４からの
出力である高画質な画像となるＲ、Ｇ、Ｂ信号を選択し
て、ＹＣｂＣｒ変換手段８でＹ、Ｃｂ、Ｃｒ信号へ変換
後、ＪＰＥＧ圧縮手段９において第１のモードを示すモ
ード信号に応じた低い圧縮率により画像圧縮を行う。そ
して、ＪＰＥＧ圧縮手段７からの出力であるモード信号
が第２のモードである場合は、標準色復元手段５からの
出力である標準的な補間処理による画像となるＲ、Ｇ、
Ｂ信号を選択して、ＹＣｂＣｒ変換手段８でＹ、Ｃｂ、
Ｃｒ信号へ変換後、ＪＰＥＧ圧縮手段９において第２の
モードを示すモード信号に応じた高い圧縮率により画像
圧縮を行い、圧縮データがより削減されたデータを得る
のであるが、また、標準色復元手段５での処理速度は上
記高画質色復元手段４の処理より早くなるので、圧縮デ
ータを得るまでの処理時間を早くできる。

【００６３】なお、本発明者等のシミュレーションによ
る検証によれば、ＪＰＥＧ圧縮手段９において、第１の
モードでは例えば１／１０の圧縮率で入力画像を圧縮
し、第２のモードでは例えば１／２０の圧縮率で画像を
圧縮するとした場合、１／１０圧縮では、高画質色復元
手段４の出力による色復元画像を圧縮伸張した画像は、
標準色復元手段５の出力による色復元画像を圧縮伸張し
た画像と比較して、偽色、偽輪郭が軽減された高画質な
画像となっている。一方、１／２０圧縮では、高画質色
復元手段４、標準色復元手段５の出力によるどちらの色
復元画像に対しても、圧縮伸張した画像は圧縮による劣
化であるブロック歪みが目立ち、画質の差が少なくなっ
ている。図８、９は画像シミュレーションにおいて、ゾ
ーンプレートを上記高画質色復元手段４により処理した
色復元画像をＪＰＥＧ方式で圧縮伸張した場合の垂直方
向および水平方向における輝度信号のレベル（縦軸）と
解像度 （横軸）との関係を示す図であり、図８は垂直
方向での関係、図９は水平方向での関係を示す。各図に
おいて、圧縮なし（圧縮前）の画像、圧縮率１／１０で
の圧縮伸張画像、圧縮率１／２０での圧縮伸張画像につ
いて示している。図８、９より、垂直および水平方向と
もに、圧縮率１／１０の場合は圧縮なしの場合と比較し
て解像度の劣化はほとんどないが、１／２０の圧縮率で
は解像度の劣化が見られる。

【００６４】したがって、１／１０の圧縮率を示す第１
のモードでは、切り換え手段６で高画質色復元手段４の
出力を選択するように切り換え、１／２０の圧縮率を示
す第２のモードでは、標準色復元手段５の出力を選択す
るよう切り換えれば、ＪＰＥＧ圧縮手段９からの出力に
おいて、圧縮率を考慮した画像となる圧縮データを得る
こととなる。つまり、圧縮率１／１０の場合は、図８、
９からも分かるように、高画質色復元手段４からの信号
を選択してＪＰＥＧ圧縮手段９で圧縮することで、圧縮
データを伸張した画像は圧縮による劣化がなく、偽色、
偽輪郭が軽減された高画質な画像が得られる。また、圧
縮率１／２０の場合は、標準色復元手段５からの信号を
選択してＪＰＥＧ圧縮手段９で圧縮することで、より削
減された圧縮データを得て、さらに、圧縮データを得る
までの処理時間を早くできる。そして、上記の各モード
における画像圧縮データは出力端子１０へと出力され、
記憶メディアに記憶される、またはデータ転送されるな
どする。

【００６５】以上より、圧縮率調整モード発生手段７の
出力であるモード信号が示す圧縮率に応じて、低い圧縮
率であるモード信号の場合は高画質色復元手段４からの
信号を選択し、高い圧縮率であるモード信号の場合は標
準色復元手段５からの信号を選択して、所定の圧縮率で
ＪＰＥＧ圧縮を行うので、圧縮率を低くした場合は圧縮
による劣化がなく、偽色、偽輪郭が軽減された高画質な
画像を得られ、圧縮率を高くした場合はより削減された
圧縮データを得て、処理速度も早くでき、画像圧縮の圧
縮率のモードに応じた画像を得ることができる。

【００６６】なお、上記実施の形態１では、撮像素子１
の色フィルタの配列を図２に示す原色の色フィルタであ
り、各光電変換素子を独立に呼び出す方式の撮像素子と
し、画素位置（２ｉ，２ｊ）と画素位置（２ｉ＋１、２
ｊ＋１）（ｉ＝０、１、２、…、ｊ＝０、１、２、…）
にＧ信号を通過させる分光特性を持った第１の色フィル
タを、画素位置（２ｉ、２ｊ＋１）にＲ信号を通過させ
る分光特性を持った第２の色フィルタを、画素位置（２
ｉ＋１、２ｊ）にＢ信号を通過させる分光特性を持った
第３の色フィルタを配列した場合として説明したが、撮
像素子は画素混合方式の撮像素子であってもよく、第
１、第２および第３の色フィルタの分光特性はＲ、Ｇ、
Ｂに限るものではなく、図１０に示すように、画素位置
（２ｉ，２ｊ）と画素位置（２ｉ＋１、２ｊ＋１）（ｉ
＝０、１、２、…、ｊ＝０、１、２、…）に第１の色信
号Ａを通過させる分光特性を持った第１の色フィルタ
を、画素位置（２ｉ、２ｊ＋１）に第２の色信号Ｂを通
過させる分光特性を持った第２の色フィルタを、画素位
置（２ｉ＋１、２ｊ）に第３の色信号Ｃを通過させる分
光特性を持った第３の色フィルタを配列し、上記高画質
色復元手段４により撮像素子の画素数分の各Ａ、Ｂ、Ｃ
の信号を復元した後ＲＧＢの色信号を再生できればよ
く、上記と同様の効果を奏する。

【００６７】また、上記実施の形態１では、図２および
図１０の撮像素子の色フィルタの配列を画素位置（２
ｉ，２ｊ）と画素位置（２ｉ＋１、２ｊ＋１）（ｉ＝
０、１、２、…、ｊ＝０、１、２、…）に第１の色フィ
ルタを、画素位置（２ｉ、２ｊ＋１）に第２の色フィル
タを、画素位置（２ｉ＋１、２ｊ）に第３の色フィルタ
を配列した場合（図２、１０中の斜線部分）として説明
したが、図１１に示されるように、画素位置（２ｉ，２
ｊ＋１）と画素位置（２ｉ＋１、２ｊ）（ｉ＝０、１、
２、…、ｊ＝０、１、２、…）に第１の色フィルタを、
画素位置（２ｉ、２ｊ）に第２の色フィルタを、画素位
置（２ｉ＋１、２ｊ＋１）に第３の色フィルタを配列し
た場合（図１１中の斜線部分）でも同様の効果を奏し、
上下４画素毎にｎラインには第１の色フィルタ、第２の
色フィルタが配列され、ｎ＋１ラインでは第３の色フィ
ルタと第１の色フィルタが配列されて、上下のラインで
第１のフィルタが斜め方向の画素に配列されていればよ
い。

【００６８】また、上記実施の形態１において、高画質
色復元手段４の構成を図３に示す構成とし、標準色復元
手段５の構成を図７に示す構成の場合について説明した
が、高画質色復元手段４の構成は他の方法の構成であっ
ても標準色復元手段５より高画質な画像を生成できれば
よく、また、その際の色フィルタの配列も他の配列であ
ってもよく、標準色復元手段５の構成も他の周辺画素か
らの補間による復元方法であってもよく、圧縮率調整モ
ード発生手段７により圧縮率に応じて色復元手段を切り
換えれば、上記実施の形態１と同様の効果を奏する。

【００６９】また、上記実施の形態１において、圧縮率
調整モード発生手段７での出力を圧縮による低い圧縮率
を示す第１のモードと高い圧縮率を示す第２のモードの
２つのモードである場合について説明しているが、それ
以上の圧縮率を示すモード信号を発生し出力してもよ
く、圧縮率に応じて、高画質色復元手段４または標準色
復元手段５の出力を選択するのであれば、上記実施の形
態１と同様の効果を奏する。

【００７０】なお、上記実施の形態１では、ハードウェ
アにより図１、図３、図７の構成の処理を行う場合につ
いて説明しているが、撮像装置におけるソフトウェアに
より同様の処理を行うことができることは言うまでもな
く、上記実施の形態１と同様の効果を奏する。

【００７１】実施の形態２．実施の形態１の図３におけ
る高画質色復元手段４において、第１のエッジ判定手段
２１においてＧ信号における画素位置（２ｉ、２ｊ＋
１）および（２ｉ＋１、２ｊ）での上下左右でのエッジ
成分を判定し、第２のエッジ判定手段２４においては、
Ｒ信号の復元に対してＧ信号における画素位置（２ｉ＋
１、２ｊ）でのエッジ成分を、Ｂ信号の復元に対してＧ
信号における画素位置（２ｉ、２ｊ＋１）でのエッジ成
分を判定するよう構成したが、どちらも画素位置（２
ｉ、２ｊ＋１）、（２ｉ＋１、２ｊ）での左右および上
下の画素のエッジ成分を検出しており、これらの画素位
置での上下左右の画素信号は撮像素子より得られた信号
であるため、同一のエッジ成分を求めることとなる。よ
って、図１２に示すように、高画質色復元手段４の構成
を、１つのＧ成分エッジ判定手段によりＧ信号における
画素位置（２ｉ、２ｊ＋１）および（２ｉ＋１、２ｊ）
でのエッジ成分を判定するような構成とすることもでき
る。

【００７２】図１２において、２０、２２〜２３および
２５は上記実施の形態１での撮像装置における高画質色
復元手段４におけるものと同一のものであり、４１はＧ
成分エッジ判定手段である。

【００７３】次に動作を説明する。フレームメモリ３か
らの信号を分離手段２０により各Ｒ、Ｇ、Ｂ信号に分離
し、Ｇ成分復元手段２２、第１のＲＢ復元手段２３およ
び第２のＲＢ復元手段２５で撮像素子の画素数の各信号
を生成し復元する動作は上記実施の形態１と同一である
ので、その詳細な説明は省略する。

【００７４】Ｇ成分エッジ判定手段４１には分離手段２
０におけるＧ信号が入力され、画素位置（２ｉ、２ｊ＋
１）、（２ｉ＋１、２ｊ）（図２中のＲおよびＢで示す
画素位置）での左右および上下の画素の差分つまりエッ
ジ成分を検出する。つまり、上記画素位置での左右の画
素の差の絶対値ΔＨｇ、上下の画素の差の絶対値ΔＶｇ
を算出する。例えば、画素位置（２ｉ、２ｊ＋１）にお
いては、 ΔＨｇ＝｜Ｇ（２ｉ、２ｊ）−Ｇ（２ｉ、２ｊ＋２）｜ ΔＶｇ＝｜ Ｇ（２ｉ−１、２ｊ＋１）−Ｇ（２ｉ＋
１、２ｊ＋１）｜ として算出する。

【００７５】そして、上記水平方向でのエッジ成分ΔＨ
ｇおよび垂直方向エッジ成分ΔＶｇにより、水平垂直方
向での周辺画素での信号レベルの変化を判定し、入力さ
れるＧ信号の各画素位置に応じて、その判定結果を示す
信号ｅｄ１をＧ成分復元手段２２へ、ｅｄｒ、ｅｄｂを
第２のＲＢ成分復元手段２５へと出力する。各判定信号
は、ΔＨｇとΔＶｇの両方が予め定めた値以下の場合
は、周辺画素での信号レベルの変化がないと判定する。
一方、ΔＨｇまたはΔＶｇが予め定めた値より大きい場
合は、その画素においてエッジ成分があると判定し、さ
らに、ΔＨｇ＞ΔＶｇの場合は垂直方向に相関が高いと
判定し、ΔＨｇ≦ΔＶｇの場合は水平方向に相関が高い
と判定する。ここで、Ｇ成分復元手段２２においては、
画素位置（２ｉ、２ｊ＋１）と（２ｉ＋１、２ｊ）での
画素を復元するため、両画素位置において上記エッジ判
定結果ｅｄ１を出力することになる。

【００７６】一方、第２のＲＢ成分復元手段２５におい
ては、Ｒ信号の画素位置（２ｉ＋１，２ｊ）の復元を行
い、Ｂ信号の画素位置（２ｉ、２ｊ＋１）の復元を行
う。よって、画素位置（２ｉ＋１、２ｊ）において上記
エッジ成分を判定した結果をｅｄｒとして、第２のＲＢ
成分復元手段２５におけるＲ信号での処理画素位置にタ
イミングを合わせて出力する。また、画素位置（２ｉ、
２ｊ＋１）において上記エッジ成分を判定した結果をｅ
ｄｂとして、第２のＲＢ成分復元手段２５におけるＢ信
号での処理画素位置にタイミングを合わせて出力する。

【００７７】よって、Ｇ成分エッジ判定手段４１におい
て、上記Ｇ成分復元手段２２および第２のＲＢ成分復元
手段２５におけるＧ、Ｒ、Ｂ信号を復元する画素位置に
対応するＧ信号でのエッジ成分の判定結果を出力される
こととなる。

【００７８】なお、上記実施の形態２では、画素位置
（２ｉ、２ｊ）、（２ｉ＋１、２ｊ＋１）にＧ信号が、
画素位置（２ｉ、２ｊ＋１）にＲ信号が、画素位置（２
ｉ＋１、２ｊ＋１）にＢ信号が撮像素子より得られる場
合について説明したが、上記実施の形態１同様、画素位
置（２ｉ、２ｊ＋１）、（２ｉ＋１、２ｊ）にＧ信号
が、画素位置（２ｉ、２ｊ）にＲ信号が、画素位置（２
ｉ＋１、２ｊ＋１）にＢ信号が配列されていてもよく、
また、色信号はＲＧＢに限ることはない。

【００７９】また、上記実施の形態１と同様、実施の形
態２においても、図１２の構成の処理を撮像装置におけ
るソフトウェアにより同様の処理を行うことができるこ
とは言うまでもなく、上記実施の形態２と同様の効果を
奏する。

【００８０】

【発明の効果】この発明は、以上説明したように構成さ
れているので、以下に示すような効果を奏する。

【００８１】この発明に係る撮像装置よれば、撮像素子
により読み出された各色信号において撮像素子の画素数
分の解像度の色信号を復元生成する第１の色信号復元手
段および第２の色信号復元手段と、画像圧縮を行う際の
画像圧縮率を示すモード信号を発生し出力するモード信
号発生手段とを備えるとともに、前記モード信号発生手
段から出力であるモード信号に応じて、上記第１の色信
号復元手段からの信号または第２の色信号復元手段から
の信号を切り換えて選択し出力する切り換え手段とを備
え、前記切り換え手段からの出力による画像を上記モー
ド信号発生手段からのモード信号が示す圧縮率となるよ
う画像信号の圧縮を行うことにより、圧縮率を低くした
場合は圧縮による劣化がなく、偽色、偽輪郭が軽減され
た高画質な画像を得て、圧縮率を高くした場合はより削
減された圧縮データを得て、処理速度も早くでき、画像
圧縮の圧縮率のモードに応じた画像が得られる。

【００８２】また、この発明に係る撮像装置よれば、上
記切り換え手段において、モード信号発生手段から出力
されるモード信号により示された圧縮率が１／ｎ以下の
低い圧縮率を示す場合は上記第１の色復元手段による色
信号を選択し、前記モード信号が１／ｎの圧縮率よりも
高い圧縮率を示す場合は上記第２の色信号復元手段によ
る色信号を選択することにより、圧縮率を低くした場合
は圧縮による劣化がなく、偽色、偽輪郭が軽減された高
画質な画像を得て、圧縮率を高くした場合はより削減さ
れた圧縮データを得て、処理速度も早くでき、画像圧縮
の圧縮率のモードに応じた画像が得られる。

【００８３】また、この発明に係る撮像装置によれば、
上記撮像素子が、画素位置（２ｉ、２ｊ）（ｉ＝０、
１、２、…およびｊ＝０、１、２、…）と（２ｉ＋１、
２ｊ＋１）に第１の色信号を通過させる分光特性を持っ
た第１の色フィルタを、画素位置（２ｉ、２ｊ＋１）に
第２の色信号を通過させる分光特性を持った第２の色フ
ィルタ、画素位置（２ｉ＋１、２ｊ）に第３の色信号を
通過させる分光特性を持った第３の色フィルタを配列し
た上下４画素が垂直水平方向に繰り返し配列された撮像
素子であり、上記第１の色復元手段が、上記第１の色フ
ィルタによる第１の色信号の所定画素位置での周辺画素
信号に基づき、所定画素位置におけるエッジ成分を判定
するエッジ判定手段と、前記エッジ判定手段の出力に基
づき、上記第１、第２、第３の色フィルタにより読み出
された第１、第２および第３の色信号により第１の色信
号における上記所定位置での信号を算出する第１の算出
手段と、上記エッジ判定手段の出力に基づき、上記第１
の算出手段の出力と色フィルタからの第２および第３の
色信号により第２および第３の色信号を算出する第２の
算出手段とを備え、上記撮像素子における画素数の第
１、第２、第３の色信号を得るとともに、上記第２の色
復元手段が、第１、第２、第３の色信号それぞれにおい
て、処理画素位置の上下または左右方向の画素からの補
間により信号を算出する手段を備えることにより、圧縮
率を低くした場合は圧縮による劣化がなく、偽色、偽輪
郭が軽減された高画質な画像を得て、圧縮率を高くした
場合はより削減された圧縮データを得て、処理速度も早
くでき、画像圧縮の圧縮率のモードに応じた画像が得ら
れる。

【００８４】また、この発明に係る撮像装置によれば、
上記第１の色復元手段におけるエッジ判定手段が、第１
の色信号の所定画素位置における左右の隣接画素の差の
絶対値を算出して水平方向のエッジ成分を検出する水平
方向エッジ検出手段と、第１の色信号の所定画素位置に
おける上下の画素の差の絶対値を算出して垂直方向のエ
ッジ成分を検出する垂直方向エッジ検出手段と、前記水
平方向エッジ検出手段と垂直方向エッジ検出手段からの
出力に基づき、前記所定画素における水平または垂直方
向のエッジ成分を判定する判定手段を備えるとともに、
前記判定手段が、上記水平方向エッジ検出手段からの出
力または上記垂直方向エッジ検出手段からの出力が予め
定めた値より大きい場合は、上記所定画素の周辺画素に
エッジ成分を検出したとし、さらに、水平方向エッジ検
出手段からの出力が上記垂直方向エッジ検出手段の出力
より大きい場合は垂直方向により相関があり、水平方向
エッジ検出手段からの出力が上記垂直方向エッジ手段の
出力より小さい場合は水平方向に相関があると判定する
とともに、上記水平方向エッジ検出手段および垂直方向
エッジ検出手段からの出力がともに予め定めた値より小
さい場合にはエッジ成分を検出しないと判定することに
より、圧縮率を低くした場合は圧縮による劣化がなく、
偽色、偽輪郭が軽減された高画質な画像を経て画像圧縮
モードに応じた画像が得られる。

【００８５】また、この発明に係る撮像装置によれば、
上記第１の色復元手段における第１の色信号での所定位
置に対する信号を算出する第１の算出手段が、第２の色
信号Ｂのある所定画素ｌ行ｍ列Ｂ（ｌ、ｍ）の位置にお
いて、第１の色信号Ａ、第２の色信号Ｂのそれぞれに対
し水平方向のローパスフィルタを介した値Ａｈｌｐｆ
（ｌ、ｍ）、Ｂｈｌｐｆ（ｌ、ｍ）を算出し、前記水平
方向ローパスフィルタからの出力信号であるＡｈｌｐｆ
（ｌ、ｍ）とＢｈｌｐｆ（ｌ、ｍ）との比と上記画素位
置の画素値Ｂ（ｌ、ｍ）により、ｌ行ｍ列の第１の色信
号Ａにおける画素値Ａ（ｌ、ｍ）を、Ａ（ｌ、ｍ）＝Ｂ
（ｌ、ｍ）×｛Ａｈｌｐｆ（ｌ、ｍ）／Ｂｈｌｐｆ
（ｌ、ｍ）｝により算出し、第３の色信号Ｃのある他の
画素位置においても同様に第１の色信号Ａにおける画素
値を算出する水平方向信号算出手段と、上記所定画素ｌ
行ｍ列Ｂ（ｌ、ｍ）の位置において、第１の色信号Ａ、
第２の色信号Ｂのそれぞれに対して垂直方向のローパス
フィルタを介した値Ａｖｌｐｆ（ｌ、ｍ）、Ｂｖｌｐｆ
（ｌ、ｍ）を算出し、前記垂直方向ローパスフィルタか
らの出力信号であるＡｖｌｐｆ（ｌ、ｍ）とＢｖｌｐｆ
（ｌ、ｍ）との比と上記画素位置の画素値Ｂ（ｌ、ｍ）
により、ｌ行ｍ列の第１の色信号Ａにおける画素値Ａ
（ｌ、ｍ）を、Ａ（ｌ、ｍ）＝Ｂ（ｌ、ｍ）×｛Ａｖｌ
ｐｆ（ｌ、ｍ）／Ｂｖｌｐｆ（ｌ、ｍ）｝により算出
し、第３の色信号Ｃのある他の画素位置においても同様
に第１の色信号Ａにおける画素値を算出する垂直方向信
号算出手段と、第１の色信号Ａにおける上記所定画素ｌ
行ｍ列の位置での上下左右の隣接画素の平均値よりｌ行
ｍ列の第１の色信号Ａにおける画素値Ａ（ｌ、ｍ）を算
出する平均値算出手段とを備え、上記エッジ判定手段の
出力に基づき、上記水平方向信号算出手段の出力または
垂直方向信号算出手段出力、または、平均値算出手段か
らの出力より選択し、上記所定画素ｌ行ｍ列における第
１の色信号Ａの画素値Ａ（ｌ、ｍ）を得て、撮像素子に
おける画素数の第１の色信号を得ることにより、圧縮率
を低くした場合は圧縮による劣化がなく、偽色、偽輪郭
が軽減された高画質な画像を得て、画像圧縮の圧縮率の
モードに応じた画像が得られる。

【００８６】また、この発明に係る撮像装置によれば、
前記第１の色復元手段における第１の算出手段が、上記
エッジ判定手段の出力が所定画素ｌ行ｍ列の位置におい
てエッジ成分を検出しないと判定した場合は上記平均値
算出手段の出力を選択し、垂直方向に相関があると判定
した場合は上記垂直方向信号算出手段の出力を選択し、
水平方向に相関があると判定した場合は上記水平方向信
号算出手段の出力を選択し、撮像素子における画素数の
第１の色信号を得ることにより、圧縮率を低くした場合
は圧縮による劣化がなく、偽色、偽輪郭が軽減された高
画質な画像を得て、画像圧縮の圧縮率のモードに応じた
画像が得られる。

【００８７】また、この発明に係る撮像装置よれば、上
記第１の色復元手段における第２の算出手段が、所定画
素ｌ行ｍ列の位置において、上記第１の算出手段からの
出力Ａに対し水平方向のローパスフィルタを介した値Ａ
１ｈｌｐｆ（ｌ、ｍ）と垂直方向ローパスフィルタを介
した値Ａ１ｖｌｐｆ（ｌ、ｍ）を算出し、第２の色信号
Ｂに対し水平方向のローパスフィルタを介した値Ｂ１ｈ
ｌｐｆ（ｌ、ｍ）と第３の色信号Ｃに対し垂直方向のロ
ーパスフィルタを介した値Ｃ１ｖｌｐｆ（ｌ、ｍ）（ま
たは、第２の色信号Ｂに対し垂直方向のローパスフィル
タを介した値Ｂ１ｖｌｐｆ（ｌ、ｍ）と第３の色信号Ｃ
に対して水平方向のローパスフィルタを介した値Ｃ１ｈ
ｌｐｆ（ｌ、ｍ））とを算出し、Ａ１ｈｌｐｆ（ｌ、
ｍ）とＢ１ｈｌｐｆ（ｌ、ｍ）との比（またはＣ１ｈｌ
ｐｆ（ｌ、ｍ）との比）と、Ａ１ｖｌｐｆ（ｌ、ｍ）と
Ｃ１ｖｌｐｆ（ｌ、ｍ）との比（または、Ｂ１ｖｌｐｆ
（ｌ、ｍ）との比）と、上記第１の算出手段の出力Ａに
おける所定画素ｌ行ｍ列での画素値Ａ（ｌ、ｍ）から、
ｌ行ｍ列の第２の色信号Ｂと第３の色信号Ｃにおける画
素値Ｂ（ｌ、ｍ）とＣ（ｌ、ｍ）を、Ｂ（ｌ、ｍ）＝Ａ
（ｌ、ｍ）×｛Ｂ１ｈｌｐｆ（ｌ、ｍ）／Ａ１ｈｌｐｆ
（ｌ、ｍ）｝、Ｃ（ｌ、ｍ）＝Ａ（ｌ、ｍ）×｛Ｃ１ｖ
ｌｐｆ（ｌ、ｍ）／Ａ１ｖｌｐｆ（ｌ、ｍ）｝（また
は、Ｂ（ｌ、ｍ）＝Ａ（ｌ、ｍ）×｛Ｂ１ｖｌｐｆ
（ｌ、ｍ）／Ａ１ｖｌｐｆ（ｌ、ｍ）｝、Ｃ（ｌ、ｍ）
＝Ａ（ｌ、ｍ）×｛Ｃ１ｈｌｐｆ（ｌ、ｍ）／Ａ１ｈｌ
ｐｆ（ｌ、ｍ）｝）により算出する信号算出手段を備え
るとともに、上記ｌ行ｍ列の位置とは異なる所定画素ｘ
行ｙ列の位置において、上記第１の算出手段からの出力
Ａに対し水平方向のローパスフィルタを介した値Ａ２ｈ
ｌｐｆ（ｘ、ｙ）、前記信号算出手段からの出力での第
２の色信号Ｂに対し水平方向のローパスフィルタを介し
た値Ｂ２ｈｌｐｆ（ｘ、ｙ）を算出し、Ａ２ｈｌｐｆ
（ｘ、ｙ）とＢ２ｈｌｐｆ（ｘ、ｙ）の比と上記第１の
算出手段からの出力Ａでの画素ｘ行ｙ列での画素値Ａ
（ｘ、ｙ）により、ｘ行ｙ列の位置における第２の色信
号Ｂ（ｘ、ｙ）を、Ｂ（ｘ、ｙ）＝Ａ（ｘ、ｙ）×｛Ｂ
２ｈｌｐｆ（ｘ、ｙ）／Ａ２ｈｌｐｆ（ｘ、ｙ）｝によ
り算出し、第３の色信号Ｃにおいても同様にＣ信号を算
出する水平方向信号算出手段と、上記第１の算出手段か
らの出力Ａに対し垂直方向のローパスフィルタを介した
値Ａ２ｖｌｐｆ（ｘ、ｙ）、前記信号算出手段からの出
力での第２の色信号Ｂに対し垂直方向のローパスフィル
タを介した値Ｂ２ｖｌｐｆ（ｘ、ｙ）を算出し、Ａ２ｖ
ｌｐｆ（ｘ、ｙ）とＢ２ｖｌｐｆ（ｘ、ｙ）の比と上記
第１の算出手段からの出力Ａでの画素ｘ行ｙ列での画素
値Ａ（ｘ、ｙ）により、ｘ行ｙ列の位置における第２の
色信号Ｂ（ｘ、ｙ）を、Ｂ（ｘ、ｙ）＝Ａ（ｘ、ｙ）×
｛Ｂ２ｖｌｐｆ（ｘ、ｙ）／Ａ２ｖｌｐｆ（ｘ、
ｙ）｝により算出し、第３の色信号Ｃにおいても同様に
Ｃ信号を算出する垂直方向信号算出手段と、上記信号算
出手段からの出力における第２、第３の色信号での所定
画素ｘ行ｙ列の位置において、斜めに隣接する画素の平
均値を算出する平均値算出手段とを備え、上記エッジ判
定手段の出力に基づき、前記水平方向信号算出手段、垂
直方向信号算出手段、平均値算出手段からのそれぞれの
出力から選択して、上記所定画素ｘ行ｙ列での第２、第
３の色信号を得て、撮像素子における画素数の第２、第
３の色信号を得ることにより、圧縮率を低くした場合は
圧縮による劣化がなく、偽色、偽輪郭が軽減された高画
質な画像を得て、画像圧縮の圧縮率のモードに応じた画
像が得られる。

【００８８】また、この発明による撮像装置は、前記第
１の色復元手段における第２の算出手段が、上記エッジ
判定手段の出力が所定画素ｘ行ｙ列の位置においてエッ
ジ成分を検出しないと判定した場合は上記平均値算出手
段の出力を選択し、垂直方向に相関があると判定した場
合は上記垂直方向信号算出手段の出力を選択し、水平方
向に相関があると判定した場合は上記水平方向信号算出
手段の出力を選択し、撮像素子における画素数の第２、
第３の色信号を得ることにより、圧縮率を低くした場合
は圧縮による劣化がなく、偽色、偽輪郭が軽減された高
画質な画像を得て、画像圧縮の圧縮率のモードに応じた
画像が得られる。

【００８９】さらに、この発明による撮像装置は、上記
モード信号発生手段が、圧縮率１／１０を示す第１のモ
ード信号と、圧縮率１／２０を示す第２のモード信号を
出力するとともに、上記切り換え手段において第１のモ
ード信号が入力された場合は上記第１の色復元手段によ
る色信号を選択し、第２のモード信号が入力された場合
は上記第２の色信号復元手段による色信号を選択するこ
とにより、圧縮率を低くした場合は圧縮による劣化がな
く、偽色、偽輪郭が軽減された高画質な画像を得て、圧
縮率を高くした場合はより削減された圧縮データを得
て、処理速度も早くでき、画像圧縮の圧縮率のモードに
応じた画像が得られる。

【図面の簡単な説明】

【図１】 この発明の実施の形態１による撮像装置の構
成の一例を示すブロック図である。

【図２】 この発明の実施の形態１による撮像素子の色
フィルタの配列の一例を示す図である。

【図３】 この発明の実施の形態１による撮像装置にお
ける高画質色復元手段４の構成の一例を示すブロック図
である。

【図４】 この発明の実施の形態１による撮像装置にお
ける高画質色復元手段４におけるＧ成分復元の動作を説
明するためのフローチャートを示す図である。

【図５】 この発明の実施の形態１による撮像装置にお
ける高画質色復元手段４におけるＲ、Ｂ成分復元の動作
を説明するためのフローチャートを示す図である。

【図６】 この発明の実施の形態１による撮像装置にお
けるＲ、Ｂ信号の復元の動作を説明するためのＲ信号お
よびＢ信号の画素を示す図である。

【図７】 この発明の実施の形態１による撮像装置にお
ける標準色復元手段５の構成の一例を示すブロック図で
ある。

【図８】 この発明の実施の形態１による撮像装置にお
ける高画質色復元手段４により処理した画像をＪＰＥＧ
方式の圧縮伸張したシミュレーション画像において、垂
直方向の解像度と輝度信号レベルの関係を示す図であ
る。

【図９】 この発明の実施の形態１による撮像装置にお
ける高画質色復元手段４により処理した画像をＪＰＥＧ
方式の圧縮伸張したシミュレーション画像において、水
平方向の解像度と輝度信号レベルの関係を示す図であ
る。

【図１０】 この発明の実施の形態１による撮像素子の
他の色フィルタ配列の例を示す図である。

【図１１】 この発明の実施の形態１による撮像素子の
他の色フィルタ配列の例を示す図である。

【図１２】 この発明の実施の形態２による撮像装置に
おける高画質色復元手段の構成の一例を示すブロック図
である。

【図１３】 従来の撮像装置における撮像素子の色フィ
ルタ配列の一例を示す図である。

【図１４】 従来の撮像装置の構成の一例を示すブロッ
ク図である。

【図１５】 従来の撮像装置における色復元手段の構成
の一例を示すブロック図である。

【図１６】 従来の撮像装置の補間手段の動作を説明す
るための各信号の画素を示す図である。

【図１７】 従来の撮像装置における色復元手段の他の
構成の例を示すブロック図である。

【符号の説明】

１ 撮像素子、２ Ａ／Ｄコンバータ、３ フレームメ
モリ、４ 高画質色復元手段、５ 標準色復元手段、６
切り換え手段、７ 圧縮率調整モード発生手段、８
ＹＣｂＣｒ変換手段、９ ＪＰＥＧ圧縮手段、１０ 出
力端子、２０分離手段、２１ 第１のエッジ判定手段、
２２ Ｇ成分復元手段、２３ 第１のＲＢ成分復元手
段、２４ 第２のエッジ判定手段、２５ 第２のＲＢ成
分復元手段、３０ 分離手段、３１ 補間手段、４１
Ｇ成分エッジ判定手段。

─────────────────────────────────────────────────────

【手続補正書】

【提出日】平成１０年４月６日

【手続補正１】

【補正対象書類名】明細書

【補正対象項目名】請求項１

【補正方法】変更

【補正内容】

【手続補正２】

【補正対象書類名】明細書

【補正対象項目名】００１８

【補正方法】変更

【補正内容】

【００１８】この発明は上記のような問題点を解消する
ためになされたもので、複数の色信号に対する分光感度
特性を持つ色フィルタが配列された撮像素子を備えた撮
像装置において、撮像素子により読み出された各色信号
に対して撮像素子の画素数分の解像度の色信号を復元生
成する第１の色復元手段および第２の色信号復元手段
と、画像圧縮を行う際の画像圧縮率を示すモード信号を
発生し出力するモード信号発生手段とを備えるととも
に、前記モード信号発生手段からの出力であるモード信
号に応じて、上記第１の色信号復元手段からの信号また
は第２の色信号復元手段からの信号を切り換えて選択し
出力する切り換え手段とを備え、前記切り換え手段から
の出力による画像を上記モード信号発生手段からのモー
ド信号が示す圧縮率となるよう画像信号の圧縮を行い、
圧縮率を低くした場合は圧縮による劣化がなく、偽色、
偽輪郭が軽減された高画質な画像を得て、圧縮率を高く
した場合はより削減された圧縮データを得て、処理速度
も早くでき、画像圧縮の圧縮率のモードに応じた画像が
得られる撮像装置を得ることを目的とする。

【手続補正３】

【補正対象書類名】明細書

【補正対象項目名】００１９

【補正方法】変更

【補正内容】

【００１９】

【課題を解決するための手段】この発明に係る撮像装置
は、複数の色信号に対する分光感度特性を持つ色フィル
タが配列された撮像素子を備えた撮像装置において、撮
像素子により読み出された各色信号に対して撮像素子の
画素数分の解像度の色信号を復元生成する第１の色復元
手段及び第２の色信号復元手段と、画像圧縮を行う際の
画像圧縮率を示すモード信号を発生し出力するモード信
号発生手段とを備えるとともに、前記モード信号発生手
段からの出力であるモード信号に応じて、上記第１の色
信号復元手段からの信号または第２の色信号復元手段か
らの信号を切り換えて選択し出力する切り換え手段とを
備え、前記切り換え手段からの出力による画像を上記モ
ード信号発生手段からのモード信号が示す圧縮率となる
よう画像信号の圧縮を行うものである。

【手続補正４】

【補正対象書類名】明細書

【補正対象項目名】００３５

【補正方法】変更

【補正内容】

【００３５】一方、ΔＨまたはΔＶが予め定めた値ｔｈ
より大きい場合は、その画素においてエッジ成分がある
と判定し、さらに、ΔＨ＞ΔＶの場合は垂直方向に相関
が高いと判定し、ΔＨ≦ΔＶの場合は水平方向に相関が
高いと判定する。そして、ΔＨ＞ΔＶの場合は、Ｇ成分
復元手段２２において、Ｒ、Ｇ、Ｂ信号での垂直方向の
画素信号より演算し、垂直方向に相関を持つＧ信号を出
力する。つまり、Ｒ信号が得られている画素である処理
画素位置 （２ｉ、２ｊ＋１）においては、Ｇ信号の垂
直方向のローパスフィルタを介した値Ｇｖｌｐｆ、Ｒ信
号の垂直方向のローパスフィルタを介した値Ｒｖｌｐｆ
を例えば、 Ｇｖｌｐｆ＝｛Ｇ（２ｉ−３、２ｊ＋１）＋ Ｇ（２ｉ−１、２ｊ＋１） ＋ Ｇ（２ｉ＋１、２ｊ＋１）＋ Ｇ（２ｉ＋３、２ｊ＋１）｝／４ （３） Ｒｖｌｐｆ＝｛Ｒ（２ｉ−４、２ｊ＋１）＋２×Ｒ（２ｉ−２、２ｊ＋１） ＋ ２×Ｒ（２ｉ、２ｊ＋１）＋ ２×Ｒ（２ｉ＋２、２ｊ＋１） ＋Ｒ（２ｉ＋４、２ｊ＋１）｝／８ （４） として算出し、このＧｖｌｐｆとＲｖｌｐｆの比と画素
位置（２ｉ、２ｊ＋１）でのＲ信号より、垂直方向に相
関をもつＧ信号ｇ（２ｉ、２ｊ＋１）を次式 ｇ（２ｉ、２ｊ＋１）＝Ｒ（２ｉ、２ｊ＋１）×（Ｇｖｌｐｆ／Ｒｖｌｐｆ） （５） により算出する。

【手続補正５】

【補正対象書類名】明細書

【補正対象項目名】００３７

【補正方法】変更

【補正内容】

【００３７】また、ΔＨ≦ΔＶで水平方向に相関が高い
と判定される場合には、Ｇ成分復元手段２２において、
水平方向の画素信号より演算し、水平方向に相関を持つ
Ｇ信号を出力する。処理画素位置（２ｉ、２ｊ＋１）に
おいては、Ｇ信号の水平方向のローパスフィルタを介し
た値Ｇｈｌｐｆ、Ｒ信号の水平方向のローパスフィルタ
を介した値Ｒｈｌｐｆを例えば、 Ｇｈｌｐｆ＝｛Ｇ（２ｉ、２ｊ）＋ Ｇ（２ｉ、２ｊ−２） ＋ Ｇ（２ｉ、２ｊ＋２）＋ Ｇ（２ｉ、２ｊ＋４）｝／４ （９） Ｒｈｌｐｆ＝｛Ｒ（２ｉ、２ｊ−３）＋ ２×Ｒ（２ｉ、２ｊ−１） ＋ ２×Ｒ（２ｉ、２ｊ＋１）＋ ２×Ｒ（２ｉ、２ｊ＋３） ＋Ｒ（２ｉ、２ｊ＋５）｝／８ （１０） として算出し、このＧｈｌｐｆとＲｈｌｐｆの比と画素
位置（２ｉ、２ｊ＋１）でのＲ信号より、垂直方向に相
関をもつＧ信号ｇ（２ｉ、２ｊ＋１）を次式 ｇ（２ｉ、２ｊ＋１）＝Ｒ（２ｉ、２ｊ＋１）×（Ｇｈｌｐｆ／Ｒｈｌｐｆ） （１１） により算出する。

【手続補正６】

【補正対象書類名】明細書

【補正対象項目名】００４１

【補正方法】変更

【補正内容】

【００４１】次に、第１のＲＢ成分復元手段２３では
Ｒ、Ｂ信号の画素位置（２ｉ、２ｊ）、（２ｉ＋１、２
ｊ＋１）でのＲ、Ｂ信号の生成を行い、その出力を第２
のＲＢ復元手段２５へと送り、第２のエッジ判定手段２
４においては、Ｇ信号により画素位置（２ｉ、２ｊ＋
１）および（２ｉ＋１、２ｊ）の画素での左右および上
下の画素の差分つまりエッジ成分を検出する。第２のＲ
Ｂ成分復元手段２５では、第２のエッジ判定手段２４の
出力に基づき、Ｒ信号での画素位置（２ｉ＋１、２
ｊ）、Ｂ信号での画素位置（２ｉ、２ｊ＋１）でのそれ
ぞれの画素を復元生成する。図５は前記第１のＲＢ成分
復元手段２３、第２のエッジ判定手段２４および第２の
ＲＢ成分復元手段２５における動作を示すフローチャー
トであり、第１および第２のＲＢ成分復元手段２３、２
５と第２のエッジ判定手段２４での処理動作を図５に従
って説明する。

【手続補正７】

【補正対象書類名】明細書

【補正対象項目名】００５２

【補正方法】変更

【補正内容】

【００５２】次に、ΔＨ≦ΔＶで水平方向に相関が高い
と判定される場合には、第２のＲＢ成分復元手段２５に
おいて、Ｒ、Ｇ、Ｂ信号での左右の画素信号より演算
し、水平方向に相関を持つ信号を出力する。Ｒ信号での
ｒ３で示す画素位置（２ｉ＋１，２ｊ）においては、水
平方向のローパスフィルタを介した値Ｒ２ｈｌｐｆ、Ｇ
２ｈｌｐｆを例えば、 Ｒ２ｈｌｐｆ＝（ｒ（２ｉ＋１、２ｊ−１）＋ｒ（２ｉ＋１、２ｊ＋１））／２ （３３） Ｇ２ｈｌｐｆ＝（Ｇ（２ｉ＋１、２ｊ−１）＋Ｇ（２ｉ＋１、２ｊ＋１））／２ （３４） により算出し、このＲ２ｈｌｐｆとＧ２ｈｌｐｆの比と
画素ｇ（２ｉ＋１、２ｊ）により、次式の演算で水平方
向に相関を持つＲの画素値ｒ（２ｉ＋１，２ｊ）を算出
する。 ｒ（２ｉ＋１、２ｊ）＝ｇ（２ｉ＋１、２ｊ）×（Ｒ２ｈｌｐｆ／Ｇ２ｈｌｐｆ ） ＝ｇ（２ｉ＋１、２ｊ） ×（ ｒ（２ｉ＋１、２ｊ−１）＋ｒ（２ｉ＋１、２ｊ＋１）） ／（Ｇ（２ｉ＋１、２ｊ−１）＋Ｇ（２ｉ＋１、２ｊ＋１））（３５）

【手続補正８】

【補正対象書類名】明細書

【補正対象項目名】００８１

【補正方法】変更

【補正内容】

【００８１】この発明に係る撮像装置よれば、撮像素子
により読み出された各色信号において撮像素子の画素数
分の解像度の色信号を復元生成する第１の色信号復元手
段および第２の色信号復元手段と、画像圧縮を行う際の
画像圧縮率を示すモード信号を発生し出力するモード信
号発生手段とを備えるとともに、前記モード信号発生手
段からの出力であるモード信号に応じて、上記第１の色
信号復元手段からの信号または第２の色信号復元手段か
らの信号を切り換えて選択し出力する切り換え手段とを
備え、前記切り換え手段からの出力による画像を上記モ
ード信号発生手段からのモード信号が示す圧縮率となる
よう画像信号の圧縮を行うことにより、圧縮率を低くし
た場合は圧縮による劣化がなく、偽色、偽輪郭が軽減さ
れた高画質な画像を得て、圧縮率を高くした場合はより
削減された圧縮データを得て、処理速度も早くでき、画
像圧縮の圧縮率のモードに応じた画像が得られる。

フロントページの続き (72)発明者 久野 徹也 東京都千代田区丸の内二丁目２番３号 三 菱電機株式会社内

Claims (9)

【特許請求の範囲】
1. 【請求項１】 複数の色信号に対する分光感度特性を持
   つ色フィルタが配列された撮像素子を備えた撮像装置に
   おいて、撮像素子より読み出された各色信号に対し撮像
   素子の画素数分の解像度の色信号を復元生成する第１の
   色復元手段および第２の色信号復元手段と、画像圧縮を
   行う際の画像圧縮率を示すモード信号を発生し出力する
   モード信号発生手段とを備えるとともに、前記モード信
   号発生手段から出力であるモード信号に応じて、上記第
   １の色信号復元手段からの信号または第２の色信号復元
   手段からの信号を切り換えて選択し出力する切り換え手
   段とを備え、前記切り換え手段からの出力による画像を
   上記モード信号発生手段からのモード信号が示す圧縮率
   となるよう画像信号の圧縮を行うことを特徴とする撮像
   装置。
2. 【請求項２】 前記切り換え手段において、モード信号
   発生手段から出力されるモード信号により示された圧縮
   率が１／ｎ以下の低い圧縮率を示す場合は上記第１の色
   復元手段による色信号を選択し、前記モード信号が１／
   ｎの圧縮率よりも高い圧縮率を示す場合は上記第２の色
   信号復元手段による色信号を選択することを特徴とする
   請求項１記載の撮像装置。
3. 【請求項３】 上記撮像素子が、垂直２行水平２列の上
   下４画素において、第１の色信号に対する分光感度特性
   を持つ第１の色フィルタと第２の色信号に対する分光感
   度特性を持つ第２の色フィルタとが垂直１行目に配列さ
   れ、垂直２行目には上記垂直１行目の第１の色フィルタ
   が配列された画素位置と同一の列に第３の色信号に対す
   る分光感度特性を持つ第３の色フィルタが配列され、第
   ２の色フィルタと同一の列に第１の色信号に対する分光
   感度特性を持つ第１の色フィルタが配列されており、上
   記上下４画素の色フィルタが順次垂直および水平方向に
   繰り返し配列された撮像素子であり、上記第１の色復元
   手段が、上記第１の色フィルタによる第１の色信号の所
   定画素位置での周辺画素信号に基づき、所定画素位置に
   おけるエッジ成分を判定するエッジ判定手段と、前記エ
   ッジ判定手段の出力に基づき、上記第１、第２、第３の
   色フィルタにより読み出された第１、第２および第３の
   色信号により第１の色信号における上記所定位置での信
   号を算出する第１の算出手段と、上記エッジ判定手段の
   出力に基づき、上記第１の算出手段の出力と色フィルタ
   からの第２および第３の色信号により第２および第３の
   色信号を算出する第２の算出手段とを備え、上記撮像素
   子における画素数の第１、第２、第３の色信号を得ると
   ともに、上記第２の色復元手段が、第１、第２、第３の
   色信号それぞれにおいて、処理画素位置の上下または左
   右方向の画素からの補間により信号を算出する手段を備
   えることを特徴とする請求項１または請求項２記載の撮
   像装置。
4. 【請求項４】 上記第１の色復元手段におけるエッジ判
   定手段が、第１の色信号の所定画素位置における左右の
   隣接画素の差の絶対値を算出して水平方向のエッジ成分
   を検出する水平方向エッジ検出手段と、第１の色信号の
   所定画素位置における上下の画素の差の絶対値を算出し
   て垂直方向のエッジ成分を検出する垂直方向エッジ検出
   手段と、前記水平方向エッジ検出手段と垂直方向エッジ
   検出手段からの出力に基づき、前記所定画素における水
   平または垂直方向のエッジ成分を判定する判定手段を備
   えるとともに、前記判定手段が、上記水平方向エッジ検
   出手段からの出力または上記垂直方向エッジ検出手段か
   らの出力が予め定めた値より大きい場合は、上記所定画
   素の周辺画素にエッジ成分を検出したとし、さらに、水
   平方向エッジ検出手段からの出力が上記垂直方向エッジ
   検出手段の出力より大きい場合は垂直方向により相関が
   あり、水平方向エッジ検出手段からの出力が上記垂直方
   向エッジ検出手段の出力より小さい場合は水平方向によ
   り相関があると判定するとともに、上記水平方向エッジ
   検出手段および垂直方向エッジ検出手段からの出力がと
   もに予め定めた値より小さい場合にはエッジ成分を検出
   しないと判定することを特徴とする請求項１〜請求項３
   のいずれかに記載の撮像装置。
5. 【請求項５】 上記第１の色復元手段における第１の色
   信号での所定位置に対する信号を算出する第１の算出手
   段が、第２の色信号Ｂのある所定画素ｌ行ｍ列Ｂ（ｌ、
   ｍ）の位置において、第１の色信号Ａ、第２の色信号Ｂ
   のそれぞれに対し水平方向のローパスフィルタを介した
   値Ａｈｌｐｆ（ｌ、ｍ）、Ｂｈｌｐｆ（ｌ、ｍ）を算出
   し、前記水平方向ローパスフィルタからの出力信号であ
   るＡｈｌｐｆ（ｌ、ｍ）とＢｈｌｐｆ（ｌ、ｍ）との比
   と上記画素位置の画素値Ｂ（ｌ、ｍ）により、ｌ行ｍ列
   の第１の色信号Ａにおける画素値Ａ（ｌ、ｍ）を、Ａ
   （ｌ、ｍ）＝Ｂ（ｌ、ｍ）×｛Ａｈｌｐｆ（ｌ、ｍ）／
   Ｂｈｌｐｆ（ｌ、ｍ）｝により算出し、第３の色信号Ｃ
   のある他の画素位置においても同様に第１の色信号Ａに
   おける画素値を算出する水平方向信号算出手段と、上記
   所定画素ｌ行ｍ列Ｂ（ｌ、ｍ）の位置において、第１の
   色信号Ａ、第２の色信号Ｂのそれぞれに対し垂直方向の
   ローパスフィルタを介した値Ａｖｌｐｆ（ｌ、ｍ）、Ｂ
   ｖｌｐｆ（ｌ、ｍ）を算出し、前記垂直方向ローパスフ
   ィルタからの出力信号であるＡｖｌｐｆ（ｌ、ｍ）とＢ
   ｖｌｐｆ（ｌ、ｍ）との比と上記画素位置の画素値Ｂ
   （ｌ、ｍ）により、ｌ行ｍ列の第１の色信号Ａにおける
   画素値Ａ（ｌ、ｍ）を、Ａ（ｌ、ｍ）＝Ｂ（ｌ、ｍ）×
   ｛Ａｖｌｐｆ（ｌ、ｍ）／Ｂｖｌｐｆ（ｌ、ｍ）｝によ
   り算出し、第３の色信号Ｃのある他の画素位置において
   も同様に第１の色信号Ａにおける画素値を算出する垂直
   方向信号算出手段と、第１の色信号Ａにおける上記所定
   画素ｌ行ｍ列の位置での上下左右の隣接画素の平均値よ
   りｌ行ｍ列の第１の色信号Ａにおける画素値Ａ（ｌ、
   ｍ）を算出する平均値算出手段とを備え、上記エッジ判
   定手段の出力に基づき、上記水平方向信号算出手段の出
   力または垂直方向信号算出手段出力、または、平均値算
   出手段からの出力より選択し、上記所定画素ｌ行ｍ列に
   おける第１の色信号Ａの画素値Ａ（ｌ、ｍ）を得て、撮
   像素子における画素数の第１の色信号を得ることを特徴
   とする請求項１〜請求項４のいずれかに記載の撮像装
   置。
6. 【請求項６】 前記第１の色復元手段における第１の算
   出手段が、上記エッジ判定手段の出力が所定画素ｌ行ｍ
   列の位置においてエッジ成分を検出しないと判定した場
   合は上記平均値算出手段の出力を選択し、垂直方向に相
   関があると判定した場合は上記垂直方向信号算出手段の
   出力を選択し、水平方向に相関があると判定した場合は
   上記水平方向信号算出手段の出力を選択し、撮像素子に
   おける画素数の第１の色信号を得ることを特徴とする請
   求項１〜請求項５のいずれかに記載の撮像装置。
7. 【請求項７】 上記第１の色復元手段における第２の算
   出手段が、所定画素ｌ行ｍ列の位置において、上記第１
   の算出手段からの出力Ａに対し水平方向のローパスフィ
   ルタを介した値Ａ１ｈｌｐｆ（ｌ、ｍ）と垂直方向ロー
   パスフィルタを介した値Ａ１ｖｌｐｆ（ｌ、ｍ）を算出
   し、第２の色信号Ｂに対し水平方向のローパスフィルタ
   を介した値Ｂ１ｈｌｐｆ（ｌ、ｍ）と第３の色信号Ｃに
   対し垂直方向のローパスフィルタを介した値Ｃ１ｖｌｐ
   ｆ（ｌ、ｍ）（または、第２の色信号Ｂに対し垂直方向
   のローパスフィルタを介した値Ｂ１ｖｌｐｆ（ｌ、ｍ）
   と第３の色信号Ｃに対し水平方向のローパスフィルタを
   介した値Ｃ１ｈｌｐｆ（ｌ、ｍ））とを算出し、Ａ１ｈ
   ｌｐｆ（ｌ、ｍ）とＢ１ｈｌｐｆ（ｌ、ｍ）との比（ま
   たはＣ１ｈｌｐｆ（ｌ、ｍ）との比）と、Ａ１ｖｌｐｆ
   （ｌ、ｍ）とＣ１ｖｌｐｆ（ｌ、ｍ）との比（または、
   Ｂ１ｖｌｐｆ（ｌ、ｍ）との比）と、上記第１の算出手
   段の出力Ａにおける所定画素ｌ行ｍ列での画素値Ａ
   （ｌ、ｍ）から、ｌ行ｍ列の第２の色信号Ｂと第３の色
   信号Ｃにおける画素値Ｂ（ｌ、ｍ）とＣ（ｌ、ｍ）を、
   Ｂ（ｌ、ｍ）＝Ａ（ｌ、ｍ）×｛Ｂ１ｈｌｐｆ（ｌ、
   ｍ）／Ａ１ｈｌｐｆ（ｌ、ｍ）｝、Ｃ（ｌ、ｍ）＝Ａ
   （ｌ、ｍ）×｛Ｃ１ｖｌｐｆ（ｌ、ｍ）／Ａ１ｖｌｐｆ
   （ｌ、ｍ）｝（または、Ｂ（ｌ、ｍ）＝Ａ（ｌ、ｍ）×
   ｛Ｂ１ｖｌｐｆ（ｌ、ｍ）／Ａ１ｖｌｐｆ（ｌ、、
   ｍ）｝、Ｃ（ｌ、ｍ）＝Ａ（ｌ、ｍ）×｛Ｃ１ｈｌｐｆ
   （ｌ、ｍ）／Ａ１ｈｌｐｆ（ｌ、ｍ）｝）により算出す
   る信号算出手段を備えるとともに、上記ｌ行ｍ列の位置
   とは異なる所定画素ｘ行ｙ列の位置において、上記第１
   の算出手段からの出力Ａに対し水平方向のローパスフィ
   ルタを介した値Ａ２ｈｌｐｆ（ｘ、ｙ）、前記信号算出
   手段からの出力での第２の色信号Ｂに対し水平方向のロ
   ーパスフィルタを介した値Ｂ２ｈｌｐｆ（ｘ、ｙ）を算
   出し、Ａ２ｈｌｐｆ（ｘ、ｙ）とＢ２ｈｌｐｆ（ｘ、
   ｙ）の比と上記第１の算出手段からの出力Ａでの画素ｘ
   行ｙ列での画素値Ａ（ｘ、ｙ）により、ｘ行ｙ列の位置
   における第２の色信号Ｂ（ｘ、ｙ）を、Ｂ（ｘ、ｙ）＝
   Ａ（ｘ、ｙ）×｛Ｂ２ｈｌｐｆ（ｘ、ｙ）／Ａ２ｈｌｐ
   ｆ（ｘ、ｙ）｝により算出し、第３の色信号Ｃにおいて
   も同様にＣ信号を算出する水平方向信号算出手段と、上
   記第１の算出手段からの出力Ａに対し垂直方向のローパ
   スフィルタを介した値Ａ２ｖｌｐｆ（ｘ、ｙ）、前記信
   号算出手段からの出力での第２の色信号Ｂに対し垂直方
   向のローパスフィルタを介した値Ｂ２ｖｌｐｆ（ｘ、
   ｙ）を算出し、Ａ２ｖｌｐｆ（ｘ、ｙ）とＢ２ｖｌｐｆ
   （ｘ、ｙ）の比と上記第１の算出手段からの出力画素値
   Ａでの画素ｘ行ｙ列での画素値Ａ（ｘ、ｙ）により、ｘ
   行ｙ列の位置における第２の色信号Ｂ（ｘ、ｙ）を、Ｂ
   （ｘ、ｙ）＝Ａ（ｘ、ｙ）×｛Ｂ２ｖｌｐｆ（ｘ、ｙ）
   ／Ａ２ｖｌｐｆ（ｘ、ｙ）｝により算出し、第３の色信
   号Ｃにおいても同様にＣ信号を算出する垂直方向信号算
   出手段と、上記信号算出手段からの出力における第２、
   第３の色信号での所定画素ｘ行ｙ列の位置において、斜
   めに隣接する画素の平均値を算出する平均値算出手段と
   を備え、上記エッジ判定手段の出力に基づき、前記水平
   方向信号算出手段、垂直方向信号算出手段、平均値算出
   手段からのそれぞれの出力から選択して、上記所定画素
   ｘ行ｙ列での第２、第３の色信号を得て、撮像素子にお
   ける画素数の第２、第３の色信号を得ることを特徴とす
   る請求項１〜請求項６のいずれかに記載の撮像装置。
8. 【請求項８】 前記第１の色復元手段における第２の算
   出手段が、上記エッジ判定手段の出力が所定画素ｘ行ｙ
   列の位置においてエッジ成分を検出しないと判定した場
   合は上記平均値算出手段の出力を選択し、垂直方向に相
   関があると判定した場合は上記垂直方向信号算出手段の
   出力を選択し、水平方向に相関があると判定した場合は
   上記水平方向信号算出手段の出力を選択し、撮像素子に
   おける画素数の第２、第３の色信号を得ることを特徴と
   する請求項１〜請求項７のいずれかに記載の撮像装置。
9. 【請求項９】 上記モード信号発生手段が、圧縮率１／
   １０を示す第１のモード信号と、圧縮率１／２０を示す
   第２のモード信号を出力するとともに、上記切り換え手
   段において第１のモード信号が入力された場合は上記第
   １の色復元手段による色信号を選択し、第２のモード信
   号が入力された場合は上記第２の色信号復元手段による
   色信号を選択することを特徴とする請求項１〜請求項８
   のいずれかに記載の撮像装置。