JP2002010278A

JP2002010278A - 画像生成装置および撮像装置

Info

Publication number: JP2002010278A
Application number: JP2000185094A
Authority: JP
Inventors: Hideaki Yoshida; 英明吉田
Original assignee: Olympus Optical Co Ltd
Current assignee: Olympus Corp
Priority date: 2000-06-20
Filing date: 2000-06-20
Publication date: 2002-01-11
Anticipated expiration: 2020-06-20
Also published as: JP4334740B2

Abstract

(57)【要約】【課題】加算撮像において、信号処理の無駄が無く、か
つ疑似信号の増加を招くことなく記録画像のＳＮの向上
を図る。【解決手段】オーバーラップしない２×２のベイヤ単位
画素配列毎に１つの割合で画素点ＨＹを生成する。高域
輝度信号（ＨＹ）はベイヤ単位画素配列を単位としてそ
れら４画素を加算して作り、これより大きい色信号処理
領域から求めた低域原色信号と上述の高域輝度信号から
求めた輝度エッジ信号とから所定のコンポーネント信号
を各画素点毎に算出する。これにより、無駄な画素点生
成が不要で、かつ輝度エッジ信号にＲＢ情報を含むこと
でＳＮの向上を図ることができる。しかも、このように
４画素加算によってＲＢ情報を含む輝度エッジ信号を生
成しても、各原画素は生成画素１つにしか寄与しないか
ら、色エッジによるギザの発生はない。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は画像生成装置および
撮像装置に関し、特にベイヤ配列を用いて生成される原
画像情報であるベイヤ読み出し情報を用いて記録用の画
像信号を生成する画像生成装置および撮像装置に関す
る。

【０００２】

【従来の技術】従来より、色配列としてベイヤ配列を用
いた単板カラー撮像装置が広く用いられている。ここで
扱うベイヤ配列とは、２×２の４画素を単位配列とする
周期配列で、その単位配列の４画素中２画素が同色であ
り、この同色の２画素が対角配置されたものである。代
表的なＲＧＢベイヤ配列の一例を図４に示す。

【０００３】図４に示すようなＲＧＢベイヤ配列を用い
てコンポーネント色信号（Ｒ、Ｇ、ＢあるいはＹ、Ｒ−
Ｙ、Ｂ−Ｙ）を生成する信号処理方式には各種あるが、
典型的な例を以下に示す。

【０００４】なお、以下では、原画素点および着目点
（生成画素点）の座標を（ｉ,ｊ）とし、また簡単のた
めにＲ，Ｇ，Ｂ毎にインデックス関数ｅＧ，ｅＲ，ｅＢ
を導入することにする。図４の左端と上端に示すように
原画素点と生成画素点では格子位相が半ピッチずれてい
るから、同じ数値の座標の場合にも空間位置がその分だ
け異なっている。また、インデックス関数ｅＧはある信
号処理領域の中からＧ成分のみを抽出するための関数で
あり、Ｇの画素領域に対しては“１”、他の色の画素領
域に対しては“０”となる。例えば図４のＲ００，Ｇ０
１，Ｇ１０，Ｂ１１の４画素に対してインデックス関数
ｅＧを適用すると、“０”，“１”，“１”，“０”が
得られることになる。ｅＲ，ｅＢについても同様であ
る。

【０００５】高域輝度信号ＨＹ（ｉ，ｊ）は、共有画素
を含むように１画素ずつずらして組み合わせを変えた４
画素単位｛(R00,G01,G10,B11),(G01,R02,B11,G12),(R0
2,G03,G12,B13),(G03,R04,B13,G14),(R04,G05,G14,B1
5),…｝でそこに含まれるＧのみを用いて生成される。 HY(i,j)=Σ[2×2(i,j)]eG×P(i’,j’) …（１）ここで、記号Σ[2×2(i,j)]は着目点（ｉ,ｊ）の隣接す
る２×２の（原画素の）４画素領域に関する（画素座標
を変数とする）総和を意味し、またＰ(ｉ’,ｊ’)は座
標(ｉ’,ｊ’)の原画素の信号出力値を示している。よ
って、図４の（ｉ，ｊ）＝（０，０）に対応する高域輝
度信号ＨＹ（ｉ，ｊ）｛＝ＨＹ（０，０）｝は、近接す
る４画素Ｒ００，Ｇ０１，Ｇ１０，Ｂ１１の中の、Ｇ０
１とＧ１０の画像信号の和から生成されることになる。
同様にして、Ｇ０１とＧ１２の画像信号の和からＨＹ
（０，１）が、Ｇ１２とＧ０３の画像信号の和からＨＹ
（０，２）が生成される。

【０００６】このようにして求めた各高域輝度信号ＨＹ
（ｉ，ｊ）に関して、それぞれ隣接する（生成画素点
の）座標の高域輝度信号ＨＹ（ｉ−１，ｊ），ＨＹ
（ｉ，ｊ−１），ＨＹ（ｉ，ｊ＋１），ＨＹ（ｉ＋１，
ｊ）との差分信号を求め、これを輝度エッジ信号ＡＰ
（アパーチャー信号）とする。 AP(i,j)=4HY(i,j)-{HY(i-1,j)+HY(i,j-1)+HY(i,j+1)+HY(i+1,j)} …（２）また、低域原色信号ＬＲ，ＬＧ，ＬＢについては、高域
輝度信号ＨＹよりも大きな領域、例えば着目点（ｉ,
ｊ）の周囲の４×４＝１６画素の平均値、すなわちＧに
ついては１６画素中に含まれる８画素の画素信号の平均
値、Ｒ，Ｂについては１６画素中に含まれる対応する４
画素の画素信号の平均値を用いて算出される。上記と同
様の表記を用いれば、 LR(i,j)={Σ[4×4(i,j)]eR×P(i’,j’)}/4 …（３）Ｒ LG(i,j)={Σ[4×4(i,j)]eG×P(i’,j’)}/8 …（３）Ｇ LB(i,j)={Σ[4×4(i,j)]eB×P(i’,j’)}/4 …（３）Ｂ低域輝度信号ＬＹは、0.3Ｒ＋0.59Ｇ＋0.11Ｂのマトリ
クス演算を低域原色信号ＬＲ，ＬＧ，ＬＢに対して施す
ことにより、 LY(i,j)=0.3LR(i,j)+0.59LG(i,j)+0.11LB(i,j) …（４）によって求められる。

【０００７】広帯域の輝度信号Ｙ、および色差信号Ｒ−
Ｙ，Ｂ−Ｙは、 Y(i,j)=LY(i,j)+k×AP(i,j) R-Y(i,j)=LR(i,j)-LY(i,j) B-Y(i,j)=LB(i,j)-LY(i,j) …（５）によって算出される。ｋは所定の計数である。式（５）
をＲ，Ｇ，Ｂ信号で表すと、 R(i,j)=LR(i,j)+k×AP(i,j) G(i,j)=LG(i,j)+k×AP(i,j) B(i,j)=LB(i,j)+k×AP(i,j) …（６）となる。この式（６）は式（５）と全く等価なものであ
る。

【０００８】このように、式（１）（２）によって求め
た輝度エッジ信号（高域輝度信号）ＡＰを、式（４）で
得られる低域輝度信号ＬＹに加えることで広帯域の輝度
信号Ｙを得ることができるが、色差信号Ｒ−Ｙ，Ｂ−Ｙ
については、低域のみで処理することで、式（６）から
も分かるように、ＲＧＢそれぞれの低域原色信号ＬＲ，
ＬＧ，ＬＢの上にＲＧＢでどれも同じ（従って無彩色
の）高域信号（ｋ×ＡＰ）が重畳される形となるのでエ
ッジ部の偽色が生じにくい信号処理となっている。（例
えばこのような帯域別処理を行なわずベイヤの単位４画
素のみの情報からそのまま（広帯域の）輝度信号を算出
し、単純にマトリクス演算を行なうと、エッジ部に偽色
が顕著に生じてしまう不都合がある。）また、式（１）
により高域輝度信号ＨＹはＧのみから求めているから、
色エッジ部による輝度信号のギザも抑えられている。

【０００９】すなわち式（１）を書き下せば HY(i,j)=G(i,j+1)+G(i+1,j) …ｉ＋ｊが偶数の場合 G(i,j)+G(i+1,j+1) …ｉ＋ｊが奇数の場合となり、原画素Ｇの情報は、隣接する４生成点に広がっ
てはいるものの（例えばＧ１２の場合は、(i,j)＝(0,
1)，(0,2)，(1,1)．(1,2)の４生成点）、１生成点に対
する寄与は常に１／２であって、隣接する同色Ｇの原画
素点の情報と平均されるから、スムージング効果によっ
てギザは目立たない。つまり、原画素Ｇについては必ず
同色Ｇの原画素点が隣接するので（例えばＧ１２につい
ては、Ｇ０１，Ｇ０３，Ｇ２１，Ｇ２３）、４生成点の
どの生成点についても、隣接する２つの原画素Ｇから信
号が作られることになる。

【００１０】この点補足すれば、高域輝度信号ＨＹをＧ
のみから求めるということはＲＢの情報を捨てているこ
とになるから、その分ＳＮの低下を招いているものであ
るが、もしＲＢも加算すると色エッジ部による輝度信号
のギザが強く生じるため好ましくないものである。すな
わち、ベイヤ単位配列の４画素全てを加算して高域輝度
信号ＨＹを生成する場合、つまり、式（１）の代わり
に、 HY(i,j)=Σ[2×2(i,j)]×P(i’,j’) …（１）’ とした場合、これを書き下せば HY(i,j) =R(i,j)+G(i,j+1)+G(i+1,j)+B(i+1,j+1) …ｉ，ｊがともに偶数の場合 =G(i,j)+R(i,j+1)+B(i+1,j)+G(i+1,j+1) …ｉが偶数、ｊが奇数の場合 =G(i,j)+B(i,j+1)+R(i+1,j)+G(i+1,j+1) …ｉが奇数、ｊが偶数の場合 =B(i,j)+G(i,j+1)+G(i+1,j)+R(i+1,j+1) …ｉ，ｊがともに奇数の場合となり、ＲまたはＢの原画素情報は隣接する４生成点
に、寄与１で広がることになる。すなわち、ＲまたはＢ
に関しては４生成点のどの生成点についても隣接する同
色の原画素を持たないので、各々の隣接４生成点に関し
て言えば全く同じ情報となっているものである（１画素
のみの情報がそのまま隣接４生成点の情報となる）。従
って、例えばＧ，Ｂ情報を含まない赤のエッジ部あるい
はＲ，Ｇ情報を含まない青のエッジ部や赤と青のエッジ
部では、実質的に画素密度が１／４に下がったのと同じ
状態となり、見かけ上は４点ある画素が実際には１画素
でしかないので、上記ギザが生じるものである。特にこ
れは局所的に生じるため、画像全体の一様な解像度低下
よりもより一層顕著に目立つものであった。

【００１１】このような事情から、ＳＮの低下を含んで
もなお、上記Ｇのみを用いた処理が用いられているもの
であった。そして、上記のような処理により、撮像素子
の画素数（被写体に対する画素密度）と同じ画素数（画
素密度）の高解像度な画像生成が可能となっている。

【００１２】

【発明が解決しようとする課題】一方、近年では撮像素
子の高画素化が進み、画像の記録に際して撮像素子の画
素数と同数の記録は必ずしも適当では無くなりつつあ
る。すなわち、最近では、４００万画素の撮像素子を用
いたものも民生用として供給されつつあり、今後６００
万画素、さらには１０００万画素を持つものも実現され
ることが予想されている。このような多画素化（高画素
密度化）に伴い、撮像素子の画素数と同数の記録画素数
で記録画像を生成したのでは、記録画像のファイルサイ
ズの肥大によりパーソナルコンピュータなどの実使用環
境では過負荷となることはもちろん、フレームレートの
低下、さらには撮像素子の１画素当たりの蓄積光電荷量
の不足という撮像素子そのものによる原理的な要因によ
って画質（Ｓ／Ｎ、ダイナミックレンジ）が劣化する、
という問題を招くことになる。

【００１３】そこで、本出願人は、先に、標準的な記録
画素数が撮像素子の画素数の１／４（縦横ともに１／
２）であるような撮像装置を提案している（特願２００
０−１７３９４７号明細書）。この撮像装置では、撮像
素子から出力される例えば４００万画素の画像信号に対
して、隣接する画素信号同士を加算して画素数を減らす
という加算減数処理を施すことにより１００万画素の画
像信号が生成され、これがメモリカードに所定の記録フ
ォーマットで記録される。これにより、十分な感度およ
びダイナミックレンジを確保できるようになり、記録画
質の向上を図ることができる。

【００１４】しかし、このように例えば縦横ともに１／
２の１／４画素数（画素密度が１／４）の記録を行なう
際に、上記従来の信号処理を用いた場合は、（１）上記信号処理により撮像素子画素数と同画素数の
コンポーネント画像信号（Ｒ、Ｇ、ＢあるいはＹ、Ｒ−
Ｙ、Ｂ−Ｙ）を生成（２）画素を１／４間引き（または４画素加算）するこ
とにより画素密度が１／４の画像を生成（３）圧縮等を含めた記録画像に対する信号処理を行な
って画像を記録するという手順が必要となる。

【００１５】これは、２段階の、しかも１／４という記
録画素密度に対してその４倍の画素信号（しかも加算で
なく間引きの場合は不要な信号の方が多い）を一旦生成
する処理を含むからメモリや演算時間を浪費する上、上
記Ｇ信号しか用いてないことによるＳＮ劣化を伴うもの
であった。

【００１６】本発明は上述の事情を考慮してなされたも
のであり、原画像情報からそれよりも低画素密度の画像
を生成する場合に最適な信号処理の実現を図ることによ
り、信号処理の無駄を無くし、かつ疑似信号の増加を招
くことなく記録画像のＳＮの向上を実現することが可能
な画像生成装置および撮像装置を提供することを目的と
する。

【００１７】

【課題を解決するための手段】上述の課題を解決するた
め、本発明は、２×２の４画素配列を単位配列とする２
次元の周期配列を有し前記単位配列の４画素中２画素が
同色で且つ対角配置されてなる色配列により生成される
原画像情報から、その原画像情報に対して画素密度１／
（２Ｎ）^２（ただし、Ｎは１以上の整数）の画像を生成
する画像生成装置であって、共有画素を持たない隣接す
る（２Ｎ）^２個の画素配列を単位として、前記（２Ｎ）
^２個の画素配列毎にその（２Ｎ）^２個の画素を加算する
ことによって前記画素密度１／（２Ｎ）^２の画像に対応
する各画素点の高域輝度信号を求め、前記（２Ｎ）^２個
の画素配列を同心的に含みこれよりも大きい所定の色処
理領域内の同色加算により前記（２Ｎ）^２個の画素配列
を単位とする前記各画素点の低域原色信号およびこれに
基づいた低域輝度信号を求め、前記高域輝度信号より求
めた輝度エッジ信号を前記低域輝度信号に加算すること
により前記各画素点の輝度信号を算出すると共に、前記
低域原色信号および前記低域輝度信号に基づいて前記各
画素点の色差信号を算出するように構成されていること
を特徴とする。

【００１８】また、本発明は、２×２の４画素配列を単
位配列とする２次元の周期配列を有し前記単位配列の４
画素中２画素が同色で且つ対角配置されてなる色配列に
より生成される原画像情報から、その原画像情報に対し
て画素密度１／（２Ｎ）^２（ただし、Ｎは１以上の整
数）の画像を生成する画像生成装置であって、共有画素
を持たない隣接する（２Ｎ）^２個の画素配列を単位とし
て、前記（２Ｎ）^２個の画素配列毎にその（２Ｎ）^２個
の画素を加算することによって前記画素密度１／（２
Ｎ）^２の画像に対応する各画素点の高域輝度信号を求
め、前記（２Ｎ）^２個の画素配列を同心的に含みこれよ
りも大きい所定の色処理領域内の同色加算により前記
（２Ｎ）^２個の画素配列を単位とする前記各画素点の低
域原色信号を求め、前記高域輝度信号より求めた輝度エ
ッジ信号を前記低域原色信号に加算することにより前記
各画素点の原色信号を算出するように構成されているこ
とを特徴とする。

【００１９】これら本発明の画像生成装置においては、
画素密度１／（２Ｎ）^２（ただし、Ｎは１以上の整数）
の画像に対応する各画素点の高域輝度信号を共有画素を
持たない（２Ｎ）^２個の画素配列を単位としてそれら
（２Ｎ）^２個の画素を加算して作り、これより大きい色
信号処理領域から求めた低域原色信号と上述の高域輝度
信号から求めた輝度エッジ信号とから所定のコンポーネ
ント信号を各画素点毎に算出している。これにより、無
駄な画素点生成が不要で、かつ輝度エッジ信号にＲＢ情
報を含むことでＳＮの向上を図ることができる。しか
も、このように（２Ｎ）^２個の画素配列を単位とする全
画素加算によってＲＢ情報を含む輝度エッジ信号を生成
しても、各原画素は生成画素１つにしか寄与しないか
ら、色エッジによるギザの発生はない。よって、原画像
情報からそれよりも低画素密度の画像を生成する場合に
最適な信号処理の実現を図ることができる、信号処理の
無駄を無くし、かつ疑似信号の増加を招くことなく記録
画像のＳＮの向上を実現することが可能となる。

【００２０】前記原画像情報としては、２×２の４画素
配列を単位配列とする２次元の周期配列を有し前記単位
配列の４画素中２画素が同色で且つ対角配置されてなる
色配列の撮像素子の全画素を個別に読み出した情報を利
用することができる。これにより、４００万画素、６０
０万画素あるいはそれ以上の多画素化された撮像素子か
らの全画素読み出しによって得られた情報から、容易に
高画質の画像を生成することが可能となる。

【００２１】また、前記Ｎの値は１とし、画素密度１／
４の画像を２×２のベイヤ単位配列を単位とする画素点
毎に生成することが好ましい。これにより、画質と解像
度の双方をバランス良く保つことが可能となる。

【００２２】また、本発明の画像生成装置をデジタルカ
メラなどの撮像装置に適用することにより、多画素化さ
れた撮像素子を利用する場合でも、記録画像のファイル
サイズの増大等の問題を招くことなく、高画質の記録画
像を得ることが可能となる。

【００２３】

【発明の実施の形態】以下、図面を参照して本発明の実
施形態を説明する。図１には、本発明の一実施形態に係
わる撮像装置の構成が示されている。ここでは、デジタ
ルカメラとして実現した場合を例示して説明することに
する。

【００２４】図中１０１は各種レンズからなる撮像レン
ズ系、１０２はレンズ系１０１を駆動するためのレンズ
駆動機構、１０３はレンズ系１０１の絞りを制御するた
めの露出制御機構、１０４はローパスおよび赤外カット
用の光学フィルタ、１０５はベイヤ配列のカラーフィル
タを備えたＣＣＤカラー撮像素子、１０６は撮像素子１
０５を駆動するためのＣＣＤドライバ、１０７はゲイン
コントロールアンプ，Ａ／Ｄ変換器等を含むプリプロセ
ス回路、１０８はコンポーネント信号生成処理，その他
各種のデジタル処理を行うためのデジタルプロセス回
路、１０９はカードインターフェース、１１０はメモリ
カード、１１１はＬＣＤ画像表示系を示している。

【００２５】撮像素子１０５としては、例えば４００万
画素ベイヤ配列の順次走査型のものなどが利用される。

【００２６】また、図中の１１２は各部を統括的に制御
するためのシステムコントローラ（ＣＰＵ）、１１３は
各種スイッチからなる操作スイッチ系、１１４は操作状
態及びモード状態等を表示するための操作表示系、１１
５はレンズ駆動機構１０２を制御するためのレンズドラ
イバ、１１６は発光手段としてのストロボ、１１７はス
トロボ１１６を制御するための露出制御ドライバ、１１
８は各種設定情報等を記憶するための不揮発性メモリ
（ＥＥＰＲＯＭ）を示している。

【００２７】本実施形態のデジタルカメラにおいては、
システムコントローラ１１２が全ての制御を統括的に行
っており、特にＣＣＤドライバ１０６によるＣＣＤ撮像
素子１０５の駆動を制御して露光（電荷蓄積）及び信号
の読み出しを行い、それをプリプロセス回路１０７を介
してデジタルプロセス回路１０８に取込んで記録用の画
像信号を生成した後にカードインターフェース１０９を
介してメモリカード１１０に記録するようになってい
る。

【００２８】本実施形態のデジタルカメラに於いては、
記録画素数が撮像素子１０５の画素数の１／（２Ｎ）^２
（縦横とも１／２Ｎ）となるような画素加算撮像をデフ
ォルトの撮影モードとして使用して被写体の撮像・記録
を行うように構成されている。ここで、Ｎは１以上の整
数である。以下、Ｎ＝１の場合、つまり撮像素子１０５
の画素数の１／４（縦横とも１／２）の記録画像を得る
場合を例示して、その画像生成のための信号処理につい
て説明する。

【００２９】（画素生成点）図２には、ＣＣＤ撮像素子
１０５から得られる原画像情報である４００万画素のベ
イヤ読み出し情報とこのベイヤ読み出し情報から１００
画素の記録画像を得るための画素点（画素生成点）との
関係が示されている。この図２においては、撮像素子１
０５として、図４よりも２×２の４倍細密（高密度）な
ものを利用する場合を想定している。

【００３０】本実施形態では、図２の太線で示すよう
に、オーバーラップしない２×２のベイヤ単位画素配列
毎に１つの割合で画素点ＨＹ（黒丸で図示）が生成され
る。つまり、画素点（ＨＹ）は共有画素を持たない（重
複無しの）隣接する２×２の４画素単位で生成される。
すなわち、着目する生成画素点の座標を（ｉ,ｊ）とす
ると、ｉ＝２ｍ（偶数）、かつｊ＝２ｎ（偶数）の点で
のみ以下の信号生成を行なう。

【００３１】（コンポーネント信号の生成）高域輝度信
号ＨＹ（ｉ，ｊ）は、共有画素を持たない４画素単位
｛(R00,G01,G10,B11),(R02,G03,G12,B13),(RO4,G05,G1
4,B15),…｝でそこに含まれる４画素全てを用いて生成
される。

【００３２】 HY(i,j)=Σ[2×2(i,j)]P(i’,j’) =R(i,j)+G(i,j+1)+G(i+1,j)+B(i+1,j+1) …（７）ここで、総和記号Σ[2×2(i,j)]およびＰ(ｉ’,ｊ’)の
意味は上記従来例と同じである。

【００３３】このようにして求めた各高域輝度信号ＨＹ
（ｉ，ｊ）に関して、それぞれ隣接する生成画素点の高
域輝度信号ＨＹ（ｉ−２，ｊ），ＨＹ（ｉ，ｊ−２），
ＨＹ（ｉ，ｊ＋２），ＨＹ（ｉ＋２，ｊ）との差分信号
を求め、これを輝度エッジ信号ＡＰ（アパーチャー信
号）とする。 AP(i,j)=4HY(i,j)-{HY(i-2,j)+HY(i,j-2)+HY(i,j+2)+HY(i+2,j)} …（８）また、各生成画素点の低域原色信号ＬＲ，ＬＧ，ＬＢに
ついては、高域輝度信号ＨＹよりも大きな領域、例えば
着目点（ｉ,ｊ）の周囲の４×４＝１６画素の平均値、
すなわちＧについては１６画素中に含まれる８画素の画
素信号の平均値、Ｒ，Ｂについては１６画素中に含まれ
る対応する４画素の画素信号の平均値を用いて算出され
る。 LR(i,j)={Σ[4×4(i,j)]eR×P(i,j)}/4 …（９）Ｒ LG(i,j)={Σ[4×4(i,j)]eG×P(i,j)}/8 …（９）Ｇ LB(i,j)={Σ[4×4(i,j)]eB×P(i,j)}/4 …（９）Ｂここで、ｅＧ，ｅＲ，ｅＢは前述のインデックス関数で
ある。なお、本実施形態では、重複無しの４画素単位で
１／４画像を得るための画素点を生成しているので、従
来の式（３）に従えば８×８＝６４画素を色信号処理領
域とすることになるが、式（９）で４×４＝１６画素を
色信号処理領域としているのは、色解像度（分解能）を
従来よりも高めるためである。

【００３４】各生成画素点の低域輝度信号ＬＹは、0.3
Ｒ＋0.59Ｇ＋0.11Ｂのマトリクス演算を低域原色信号Ｌ
Ｒ，ＬＧ，ＬＢに対して施すことにより、 LY(i,j)=0.3LR(i,j)+0.59LG(i,j)+0.11LB(i,j) …（１０）によって求められる。

【００３５】そして、各生成画素点の広帯域の輝度信号
Ｙ、および色差信号Ｒ−Ｙ，Ｂ−Ｙは、 Y(i,j)=LY(i,j)+k×AP(i,j) R-Y(i,j)=LR(i,j)-LY(i,j) B-Y(i,j)=LB(i,j)-LY(i,j) …（１１）によって算出される。ｋは所定の計数である。

【００３６】なお、画像のコンポーネント信号を原色信
号Ｒ，Ｇ，Ｂで表現する場合には、式（１０）の低域輝
度信号の算出は不要となり、低域原色信号ＬＲ，ＬＧ，
ＬＢに輝度エッジ信号ＡＰを加算することによって、 R(i,j)=LR(i,j)+k×AP(i,j) G(i,j)=LG(i,j)+k×AP(i,j) B(i,j)=LB(i,j)+k×AP(i,j)） …（１２）として求められる。

【００３７】このようにして算出されたコンポーネント
画像信号には必要に応じて圧縮を含む記録処理が施さ
れ、所定フォーマットの画像データとしてメモリカード
１１０に記録される。

【００３８】以上のように、本実施形態においては、図
４で説明した従来のものよりも２×２＝４倍細密な（高
密度な）撮像素子を用いて従来と同等の記録画素数（例
えば１００万画素）の画像を生成しているので、・輝度解像度（高域レスポンス）は生成画素の実質開口
が小さい分高くなる・各原画素は生成画素１つにしか寄与せず画素の広がり
が無いから、色エッジによるギザも無くなる。

【００３９】・８×８＝６４画素ではなく、４×４＝１
６画素を色信号処理領域としているので、色解像度（分
解能）も高い。

【００４０】また、この同じ高密度な撮像素子を用い
て、従来の信号処理処理を行なった場合には図３のよう
に４００万画素の生成画素点毎にＧのみを用いた高域輝
度信号の生成が行われることになり、また４００万画素
の生成画素点毎に生成したコンポーネント信号を最後に
間引くなどの処理が必要となるため、これと比較する
と、・信号処理に無駄が無く、従って高速、かつバッファメ
モリも小さくて済む。

【００４１】・ＲＢ情報を含むためＳＮが向上する。

【００４２】・局所的なギザの発生が無い。

【００４３】（・色解像度は同等。）という効果が得ら
れる。

【００４４】なお、この他にも様々な実施形態が考えら
れる。

【００４５】例えば、上記説明では撮像素子１０５によ
り得られた原画像情報に対して信号処理を施したが、撮
像素子１０５により得られた原画像情報を記録媒体等に
記録しておき、後にその記録媒体から必要な原画像情報
を読み出して上述の信号処理を施すようにしても良い。
この場合、画像生成のための信号処理はデジタルカメラ
などの撮像装置に限らず、専用の装置やパーソナルコン
ピュータなどで行うこともできる。

【００４６】また、インデックス関数は“１”または
“０”としたが、式（７）のように全画素を加算する場
合をも含めて、着目点からの距離に応じた任意の重み付
けを各画素の信号Ｐ（ｉ，ｊ）に対して施しても良い。
（上記で“１”としたのは単に説明上の簡単化のためで
ある。）。また、式（７）のように全画素を加算する場
合には、輝度マトリクス係数などを用いて、色による重
み付けを採用しても良い。さらに、式（９）について
は、従来と同等の色解像度でよければ、８×８の色信号
領域を使用するようにしても良い。

【００４７】また、本実施形態の信号処理は４画素加算
に限らず、任意の（２Ｎ）^２加算に拡張する事ができ、
画素密度１／（２Ｎ）^２（縦横とも１／２Ｎ）となるよ
うな信号処理に適用することができる。すなわち、本実
施形態では画素密度１／４の画像を生成する場合の信号
処理を例示したが、画素密度１／１６、画素密度１／３
６、…の画像生成のための信号処理にも適用することが
できる。いずれの場合も、生成画像点の単位は（２Ｎ）
^２個の画素毎となり、高域輝度信号はそれら（２Ｎ）^２
個の画素全ての加算により生成される。

【００４８】

【発明の効果】以上説明したように、本発明によれば、
撮像素子などから得られた原画像情報からそれよりも低
画素密度の画像を生成する場合に最適な信号処理を実現
できるようになり、信号処理の無駄が無く、かつ疑似信
号の増加を招くことなく記録画像のＳＮの向上を図るこ
とが可能となる。

【図面の簡単な説明】

【図１】本発明の一実施形態に係る撮像装置の構成を示
すブロック図。

【図２】同実施形態の撮像装置で使用される撮像素子に
より得られる原画像情報とこの原画像情報から低画素密
度の画像を生成するための画素生成点との関係を示す
図。

【図３】図２の撮像素子により得られる原画像情報に対
して従来の信号処理を施す場合の画素生成点を説明する
ための図。

【図４】撮像素子により得られる従来の原画像情報と画
素生成点との関係を示す図。

【符号の説明】

１０１…レンズ系１０２…レンズ駆動機構１０３…露出制御機構１０４…フィルタ１０５…ＣＣＤカラー撮像素子１０６…ＣＣＤドライバ１０７…プリプロセス回路１０８…デジタルプロセス回路１０９…カードインターフェース１１０…メモリカード１１１…ＬＣＤ画像表示系１１２…システムコントローラ（ＣＰＵ）

フロントページの続き (51)Int.Cl.⁷ 識別記号ＦＩテーマコート゛(参考）Ｈ０４Ｎ 1/46 Ｈ０４Ｎ 1/46 ＺＦターム(参考） 5B047 AB04 BB04 BC01 DB10 5B057 BA12 CA01 CA08 CA16 CB01 CB08 CB16 CD06 CD10 5C065 AA01 BB13 BB22 CC01 DD02 EE03 GG27 GG30 HH04 5C076 AA22 BA06 BB07 BB40 CB01 5C079 HB01 JA23 LA26 NA10

Claims

【特許請求の範囲】

【請求項１】２×２の４画素配列を単位配列とする２
次元の周期配列を有し前記単位配列の４画素中２画素が
同色で且つ対角配置されてなる色配列により生成される
原画像情報から、その原画像情報に対して画素密度１／
（２Ｎ）^２（ただし、Ｎは１以上の整数）の画像を生成
する画像生成装置であって、共有画素を持たない隣接する（２Ｎ）^２個の画素配列を
単位として、前記（２Ｎ）^２個の画素配列毎にその（２
Ｎ）^２個の画素を加算することによって前記画素密度１
／（２Ｎ）^２の画像に対応する各画素点の高域輝度信号
を求め、前記（２Ｎ）^２個の画素配列を同心的に含みこ
れよりも大きい所定の色処理領域内の同色加算により前
記（２Ｎ）^２個の画素配列を単位とする前記各画素点の
低域原色信号およびこれに基づいた低域輝度信号を求
め、前記高域輝度信号より求めた輝度エッジ信号を前記
低域輝度信号に加算することにより前記各画素点の輝度
信号を算出すると共に、前記低域原色信号および前記低
域輝度信号に基づいて前記各画素点の色差信号を算出す
るように構成されていることを特徴とする画像生成装
置。
【請求項２】２×２の４画素配列を単位配列とする２
次元の周期配列を有し前記単位配列の４画素中２画素が
同色で且つ対角配置されてなる色配列により生成される
原画像情報から、その原画像情報に対して画素密度１／
（２Ｎ）^２（ただし、Ｎは１以上の整数）の画像を生成
する画像生成装置であって、共有画素を持たない隣接する（２Ｎ）^２個の画素配列を
単位として、前記（２Ｎ）^２個の画素配列毎にその（２
Ｎ）^２個の画素を加算することによって前記画素密度１
／（２Ｎ）^２の画像に対応する各画素点の高域輝度信号
を求め、前記（２Ｎ）^２個の画素配列を同心的に含みこ
れよりも大きい所定の色処理領域内の同色加算により前
記（２Ｎ）^２個の画素配列を単位とする前記各画素点の
低域原色信号を求め、前記高域輝度信号より求めた輝度
エッジ信号を前記低域原色信号に加算することにより前
記各画素点の原色信号を算出するように構成されている
ことを特徴とする画像生成装置。
【請求項３】前記原画像情報は、２×２の４画素配列
を単位配列とする２次元の周期配列を有し前記単位配列
の４画素中２画素が同色で且つ対角配置されてなる色配
列の撮像素子の全画素を個別に読み出した情報であるこ
とを特徴とする請求項１または２記載の画像生成装置。
【請求項４】前記Ｎの値は１であり、画素密度１／４
の画像に対応する各画素点の高域輝度信号を２×２の単
位配列毎にそれら４画素を加算することによって求める
ことを特徴とする請求項１乃至３のいずれか１項記載の
画像生成装置。
【請求項５】２×２の４画素配列を単位配列とする２
次元の周期配列を有し前記単位配列の４画素中２画素が
同色で且つ対角配置されてなる色配列の撮像素子と、前
記撮像素子を駆動して前記撮像素子の全画素の情報を個
別に読み出す駆動手段と、前記撮像素子から読み出され
た全画素分の情報から、その全画素の情報に対して画素
密度１／（２Ｎ）^２（ただし、Ｎは１以上の整数）の画
像を生成する画像生成手段とを具備し、前記画像生成手
段によって生成された画像を所定の記録フォーマットに
従い記録媒体に記録可能な撮像装置であって、前記画像生成手段は、共有画素を持たない隣接する（２Ｎ）^２個の画素配列を
単位として、前記（２Ｎ）^２個の画素配列毎にその（２
Ｎ）^２個の画素を加算することによって前記画素密度１
／（２Ｎ）^２の画像に対応する各画素点の高域輝度信号
を求め、前記（２Ｎ）^２個の画素配列を同心的に含みこ
れよりも大きい所定の色処理領域内の同色加算により前
記（２Ｎ）^２個の画素配列を単位とする前記各画素点の
低域原色信号およびこれに基づいた低域輝度信号を求
め、前記高域輝度信号より求めた輝度エッジ信号を前記
低域輝度信号に加算することにより前記各画素点の輝度
信号を算出すると共に、前記低域原色信号および前記低
域輝度信号に基づいて前記各画素点の色差信号を算出す
るように構成されていることを特徴とする撮像装置。
【請求項６】２×２の４画素配列を単位配列とする２
次元の周期配列を有し前記単位配列の４画素中２画素が
同色で且つ対角配置されてなる色配列の撮像素子と、前
記撮像素子を駆動して前記撮像素子の全画素の情報を個
別に読み出す駆動手段と、前記撮像素子から読み出され
た全画素分の情報から、その全画素の情報に対して画素
密度１／（２Ｎ）^２（ただし、Ｎは１以上の整数）の画
像を生成する画像生成手段とを具備し、前記画像生成手
段によって生成された画像を所定の記録フォーマットに
従い記録媒体に記録可能な撮像装置であって、前記画像生成手段は、共有画素を持たない隣接する（２Ｎ）^２個の画素配列を
単位として、前記（２Ｎ）^２個の画素配列毎にその（２
Ｎ）^２個の画素を加算することによって前記画素密度１
／（２Ｎ）^２の画像に対応する各画素点の高域輝度信号
を求め、前記（２Ｎ）^２個の画素配列を同心的に含みこ
れよりも大きい所定の色処理領域内の同色加算により前
記（２Ｎ）^２個の画素配列を単位とする前記各画素点の
低域原色信号を求め、前記高域輝度信号より求めた輝度
エッジ信号を前記低域原色信号に加算することにより前
記各画素点の原色信号を算出するように構成されている
ことを特徴とする撮像装置。