JPH11177997A

JPH11177997A - 相関値算出回路およびその算出方法

Info

Publication number: JPH11177997A
Application number: JP9342426A
Authority: JP
Inventors: Atsushi Kobayashi; 篤小林
Original assignee: Sony Corp
Current assignee: Sony Corp
Priority date: 1997-12-12
Filing date: 1997-12-12
Publication date: 1999-07-02
Anticipated expiration: 2017-12-12
Also published as: JP3968480B2

Abstract

(57)【要約】【課題】相関検出において、Ｇ画素の信号のみを使用
した場合では、Ｇの信号レベルがほとんど変化せずに、
Ｒの信号レベルのみが変化するようなエッジに対しては
良好な判定ができない。【解決手段】色配列が例えば原色ＲＧＢベイヤ配列の
カラーフィルタを受光面上に有するＣＣＤエリアセンサ
から出力される画像信号を処理する画像処理装置におい
て、入力された画像信号を色分離回路３２で異なる分光
特性の画素（Ｒ画素／Ｇ画素／Ｂ画素）に対応する信号
に分離し、この分離したＲ，Ｇ，Ｂの各信号ごとに変化
量算出回路３３〜３６で変化量を算出した後絶対値化回
路４５〜４８で絶対値化し、さらに係数付加回路４９〜
５２で各変化量ごとに任意の係数を掛け合わせた後加算
器５３で加算して相関値とする。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、相関値算出回路お
よびその算出方法に関し、特に受光面上にカラーフィル
タを有するカラー固体撮像素子から出力される画像信号
を処理する画像処理装置において、補間すべき画素に関
して少なくとも２方向の相関の程度を示す相関値を算出
する算出回路およびその算出方法に関する。

【０００２】

【従来の技術】カラー固体撮像素子を使用するシステム
では、カラーフィルタ上において各色が飛び飛びに存在
することから、解像感を損なわないようにするために補
間処理が行われる。この補間処理に先立って、補間すべ
き画素とその周辺画素との相関の程度（度合い）の検出
が行われるが、従来は、この相関検出の際に、カラーフ
ィルタの色配列が原色Ｒ（赤）Ｇ（緑）Ｂ（青）ベイヤ
配列の場合には、Ｇ画素の信号のみやＲ画素の信号のみ
のように、単一画素の信号の変化量だけを用いて相関の
程度を示す相関値の算出を行っていた。

【０００３】

【発明が解決しようとする課題】しかしながら、原色ベ
イヤ配列のカラーフィルタを用いたカラー固体撮像素子
から出力される画像信号の処理において、相関値算出に
Ｒのみ（またはＢのみ。ただし、以下の説明ではＲを例
に採る）を使用した場合に、色配列上、Ｒ画素が１画素
おきにしか存在しないため、同じ水平ラインまたは垂直
ライン上にＲ画素が存在するか存在しないかで判定結果
が変わってくる。

【０００４】しかも、存在しない場合には、そのライン
に対してエッジが右（または上）にあるのか左（または
下）にあるのかを判定できない。このために、Ｒ用の相
関検出においても、全ての水平ライン／垂直ライン上に
存在するＧ画素の信号を使用した方がより効果的な判定
ができる。しかし、Ｇ画素の信号のみを使用した場合で
は、Ｇの信号レベルがほとんど変化せずに、Ｒの信号レ
ベルのみが変化するようなエッジに対しては良好な判定
ができない。

【０００５】このため、Ｒ信号／Ｇ信号／Ｂ信号の全て
の画素情報を使用して相関検出を行う必要がある。しか
し、ＲＧＢを分離せずにそのまま変化量を算出したり、
分離した後に変化量を算出したまま加算してしまうと、
Ｇ信号の変化量に対してＲ／Ｂの変化量がたまたま等し
いが逆向きであった場合に、それぞれの成分が相殺され
て最終的な変化量としてはほとんど０になってしまう場
合がある。

【０００６】そこで、本発明は、ある特定の色が変化す
るようなエッジにおいても良好な相関検出を可能にする
とともに、色によって相補的に変化するエッジにおいて
も良好なエッジ検出を可能にする相関値算出回路および
その算出方法を提供することを目的とする。

【０００７】

【課題を解決するための手段】本発明による相関値算出
回路は、所定の色配列のカラーフィルタを受光面上に有
する固体撮像素子から出力される画像信号を処理する画
像処理装置において、入力された画像信号を異なる分光
特性の画素に対応する２つ以上の信号に分離する分離手
段と、この分離手段により分離された信号ごとに変化量
を算出する複数の変化量算出手段と、これら複数の変化
量算出手段により算出された各変化量を絶対値化する複
数の絶対値化手段と、これら複数の絶対値化手段の各出
力を加算する加算手段とを備えている。そして、この加
算手段の加算出力が、補間すべき画素（以下、補間画素
と称す）に関して少なくとも２方向の相関の程度を示す
相関値となる。

【０００８】また、本発明による相関値算出方法は、所
定の色配列のカラーフィルタを受光面上に有する固体撮
像素子から出力される画像信号を処理する画像処理装置
において、入力された画像信号を異なる分光特性の画素
に対応する２つ以上の信号に分離し、この分離した信号
ごとに変化量を算出した後絶対値化し、次いでこの絶対
値化した各信号を加算することにより、補間画素に関し
て少なくとも２方向の相関値とする。

【０００９】上記構成の相関値算出回路およびその算出
方法において、入力された画像信号を異なる分光特性の
画素に対応する２つ以上の信号について、その変化量を
算出することにより、相関値算出のために複数の色の画
素情報を使用する。これにより、ある特定の色が変化す
るようなエッジにおいても、良好な相関検出が可能とな
る。しかも、各画素で別々に変化量を算出し、この算出
した変化量を絶対値化した後加算することにより、色に
よって相補的に変化するエッジにおいても良好なエッジ
検出が可能となる。

【００１０】ここで、相補的に変化するエッジとは、例
えば原色ＲＧＢベイヤ配列では、Ｒは増加するがＢは逆
に減少するエッジや、Ｇは増加するが、Ｒ／Ｂは減少す
るエッジのように、色に対応する画素ごとに変化する向
きが逆なエッジのことをいうものとする。

【００１１】

【発明の実施の形態】以下、本発明の実施の形態につい
て図面を参照して詳細に説明する。図１は、本発明が適
用される画像処理装置の基本構成を示すブロック図であ
る。ここで、本画像処理装置の処理対象となるカラー固
体撮像素子は、色配列として例えば図２に示す原色ＲＧ
Ｂベイヤ配列のカラーフィルタ１１を受光面上に有する
単板式固体撮像素子１２である。

【００１２】なお、色配列は原色ベイヤ配列に限定され
るものではなく、さらにカラーフィルタもＲＧＢの原色
の色配列に限られるものではなく、他の原色の色配列の
場合でも、補色を使用した色配列（例えば、Ｙｅ／Ｃｙ
／Ｍｇ／Ｇ）の場合でも同様に適応可能である。また、
固体撮像素子１２としては、全画素の信号電荷を独立に
読み出すいわゆる全画素読み出し方式のＣＣＤ(Charge
Coupled Device) 固体撮像素子（以下、ＣＣＤエリアセ
ンサと称する）を用いるものとするが、飛び越し走査に
対応した２画素加算読み出し方式のＣＣＤ固体撮像素子
などにも適応可能である。

【００１３】ＣＣＤエリアセンサ１２から出力されるＲ
ＧＢ点順次データは、信号処理部１３において黒レベル
クランプやホワイトバランスなどの信号処理が行われた
後、検出部１４および補間部１５に供給される。検出部
１４は、入力されるＲＧＢ点順次データから最適な補間
方法を検出し、その補間情報を補間部１５へ送る。補間
部１５は、検出部１４から入力される補間情報を基にＲ
ＧＢ点順次データに対して補間処理を行って出力する。

【００１４】検出部１４は、図３に示すように、補間画
素に関して上下および左右の互いに９０°の整数倍の角
度をなす４方向、即ち垂直（Ｖ）方向の相反する２方向
および水平（Ｈ）方向の相反する２方向の計４方向の相
関の程度を検出するＶＨ相関検出部１６と、補間画素に
関して右上、左上、左下、右下の斜め方向、即ち上記４
方向に対してそれぞれ４５°の角度をなす４方向の相関
の程度を検出する斜め相関検出部１７とを有する構成と
なっている。

【００１５】なお、本例では、上下左右４方向に加え、
斜め４方向の計８方向の相関の程度を検出する構成を例
に採っているが、上下左右の４方向だけの相関の程度を
検出する構成であっても良い。ただし、以下の説明で
は、８方向の場合を例に採って説明するものとする。

【００１６】一方、補間部１５は、図４に示すように、
検出部１４から与えられる補間情報に基づいて、Ｇの画
素情報に対して補間処理を行うＧ補間部１８と、Ｒの画
素情報に対して補間処理を行うＲ補間部１９と、Ｂの画
素情報に対して補間処理を行うＢ補間部２０とを有する
構成となっている。

【００１７】図５は、ＶＨ相関検出部１６および斜め相
関検出部１７の具体的な構成の一例を示すブロック図で
ある。

【００１８】ＶＨ相関検出部１６は、補間画素の右側の
画素の画素情報に基づいて相関の程度を示す相関値を算
出する右側相関値算出回路２１と、補間画素の左側の画
素の画素情報に基づいて相関値を算出する左側相関値算
出回路２２と、補間画素の上側の画素の画素情報に基づ
いて相関値を算出する上側相関値算出回路２３と、補間
画素の下側の画素の画素情報に基づいて相関値を算出す
る下側相関値算出回路２４と、これら相関値算出回路２
１〜２４で算出した各相関値を補間ゲインに変換して出
力する相関値→補間ゲイン変換回路２５とから構成され
ている。

【００１９】上記構成のＶＨ相関検出部１６において、
相関値→補間ゲイン変換回路２５からは、水平垂直補間
用ゲインＲＧａｉｎ，ＬＧａｉｎ，ＴＧａｉｎ，ＢＧａ
ｉｎおよび水平垂直ＲＢ補間用ゲインＲＧａｉｎＤ，Ｌ
ＧａｉｎＤ，ＴＧａｉｎＤ，ＢＧａｉｎＤが補間係数と
して出力される。

【００２０】斜め相関検出部１７は、補間画素の右上側
の画素の画素情報に基づいて相関値を算出する右上側相
関値算出回路２６と、補間画素の左上側の画素の画素情
報に基づいて相関値を算出する左上側相関値算出回路２
７と、補間画素の左下側の画素の画素情報に基づいて相
関値を算出する左下側相関値算出回路２８と、補間画素
の右下側の画素の画素情報に基づいて相関値を算出する
右下側相関値算出回路２９と、これら相関値算出回路２
６〜２９で算出した各相関値を補間ゲインに変換し、補
間係数として斜め補間用ゲインＤ１Ｇａｉｎ〜Ｄ４Ｇａ
ｉｎを出力する相関値→補間ゲイン変換回路３０とから
構成されている。

【００２１】さらに、水平垂直４方向と斜め４方向は互
いに直交していないため、ＶＨ‐斜め比較回路３１にお
いて、水平垂直の相関値と斜めの相関値を比較すること
により、斜め補間補正用ゲインＶＨＧａｉｎ，ＤＧａｉ
ｎを補間係数として算出するようにしている。

【００２２】図６は、ＶＨ相関検出部１６における例え
ば左側相関値算出回路２２の具体的な構成の一例を示す
ブロック図である。なお、右側相関値算出回路２１、上
側相関値算出回路２３および下側相関値算出回路２４に
ついても、全く同じ回路構成を採る。これら相関値算出
回路２１〜２４およびその算出方法が、本発明の特徴と
する部分である。

【００２３】左側相関値算出回路２２において、入力さ
れたＲＧＢ点順次信号は、色分離回路３２において、Ｒ
画素／Ｇ画素／Ｂ画素の各色にそれぞれ対応するＲ信号
／Ｇ信号／Ｂ信号に分離されて出力される。Ｇ信号は、
変化量１，２算出回路３３，３４にそれぞれ供給され
る。Ｒ信号は、変化量算出回路３５に供給される。Ｂ信
号は、変化量算出回路３６に供給される。

【００２４】ここで、Ｇ信号についてのみ、２つの異な
る変化量１，２算出回路３３，３４に入力するのは、図
２の原色ＲＧＢベイヤ配列を見ても分かるように、Ｇは
Ｒ／Ｂに比べて水平方向および垂直方向のサンプリング
数が倍であり、Ｇでは隣り合った垂直ラインでの変化量
１と、１ラインおいた垂直ライン同士での変化量２を算
出するためである。なお、ここでは、隣り合った垂直ラ
イン間または１ラインおいた垂直ライン間での例を採っ
たが、２ライン以上おいた垂直ライン間であっても良
い。

【００２５】変化量１，２算出回路３３，３４および変
化量算出回路３５，３６は、図７の概念図に示すよう
に、変化量を算出する方向に対して直交する向きにした
ＬＰＦ（１，２，２，２，１）３７，３８，３９を通し
た後に、算出用ＢＰＦ４０，４１，４２，４３を通すこ
とにより変化量を算出する構成となっている。ここで、
算出用ＢＰＦ４０，４１，４２，４３は、Ｇについては
１／２相関（１，−１）と、１／４相関（１，０，−
１）を使用することで算出法を変えており、またＲ／Ｂ
については１／４相関（１，１，−１，−１）を使用す
る。

【００２６】これら変化量算出回路３３，３４，３５，
３６で算出された各変化量は、絶対値化回路４５，４
６，４７，４８で絶対値化された後係数付加回路４９，
５０，５１，５２に供給される。係数付加回路４９，５
０，５１，５２は、絶対値化回路４５，４６，４７，４
８で絶対値化された各変化量に対して別途設定された係
数をそれぞれ掛け合わせて出力する。そして、係数付加
回路４９，５０，５１，５２の各出力は、加算回路５３
で加え合わされた後、上下左右の相関値Ｓｔ，Ｓｂ，Ｓ
ｌ，Ｓｒとして出力される。

【００２７】ここで、係数付加回路４９，５０，５１，
５２において係数を掛ける理由は、Ｒ／Ｇ／Ｂの各色は
輝度を形成する際にも、ＮＴＳＣテレビジョン方式の場
合には０．３０Ｒ＋０．５９Ｇ＋０．１１Ｂとして計算
するように、人間の視覚特性に合わせるためである。た
だし、計算量やゲート規模を削減するためには、Ｒ：
Ｇ：Ｂが３：６：１の比率、１：２：１の比率または
２：４：１の比率になるように簡易的な係数を設定する
方が良い。

【００２８】続いて、上記構成の左側相関値算出回路２
２における変化量算出回路３３〜３６による左方向の変
化量の算出法につき、図８の原色ベイヤ配列図を用いて
説明する。ここでは、左方向の変化量の算出法について
述べるが、他の方向（右／上／下の各方向）について
も、添え字が変わるだけで全く同じである。

【００２９】先ず、Ｇについては、隣り合った垂直ライ
ンでの変化量が（１）式により、１ラインおいた垂直ラ
イン同士での変化量が（２）式によりそれぞれ算出され
る。なお、（１）式／（２）式では、画素Ｇ２２に対す
る相関を検出する際の式を示している。一方、Ｒ信号／
Ｂ信号では、１ラインおきにしか同じ色の信号が存在し
ないため、１ラインおいた垂直ライン間の変化量が、
（３）式／（４）式によりそれぞれ算出される。また、
画素Ｇ３３に対しては、水平／垂直を表わす添え字がそ
れぞれ１ずつ増加する他に、Ｒ信号とＢ信号で算出方法
が入れ替わる。

【００３０】

【数１】

【００３１】このように、例えば原色ＲＧＢベイヤ配列
カラーフィルタを受光面上に有するＣＣＤエリアセンサ
から出力される画像信号を処理する画像処理装置におい
て、入力された画像信号を異なる分光特性の画素（Ｒ画
素／Ｇ画素／Ｂ画素）に対応する信号に分離し、この分
離したＲ，Ｇ，Ｂの各信号ごとに変化量を算出した後絶
対値化し、この絶対値化した各変化量を加算して相関値
とすることにより、相関値算出のために全ての色の画素
情報を使用することになるため、ある特定の色に対応し
た画素の信号のみから算出した相関値に比べ、ある特定
の色が変化するようなエッジにおいても、良好な相関検
出が可能となる。

【００３２】しかも、各画素で別々に変化量を算出し、
この算出した変化量をそれぞれ絶対値化した後加算する
ことによって相関値を算出すようにしているので、色に
よって相補的に変化するエッジにおいても良好なエッジ
検出が可能となる。また、絶対値化した変化量に対して
各変化量ごとに、人間の視覚特性に合わせて設定された
係数を掛け合わせた後加算するようにしているので、良
好な画像を再現できることになる。

【００３３】なお、本実施形態では、水平方向および垂
直方向の各２方向の計４方向の相関検出に適用した場合
について説明したが、これに限定されるものではなく、
水平方向または垂直方向の２方向の相関検出にも適用可
能である。この場合は、水平方向の相関値を算出する際
に、例えば、変化量１算出用に（１）式を用い、変化量
２算出用に（６）式を用い、さらに（４）式の代わりに
（５）式を用いるようにすれば良い。

【００３４】

【数２】

【００３５】以上、水平垂直４方向の相関検出について
述べたが、斜め４方向の相関検出に関しては、色分離後
のＲＧＢの各信号に対し、それぞれ斜め方向の変調成分
の絶対値を算出し、Ｒ：Ｇ：Ｂ＝１：４：１の割合で加
算し、相関値とする。なお、右上、左上、左下、右下を
それぞれ、Ｄ１方向、Ｄ２方向、Ｄ３方向、Ｄ４方向と
する。そして、図５の相関値→補間ゲイン変換回路３０
において、水平垂直４方向の場合と同様にして、斜め４
方向の補間用ゲインＤ１Ｇａｉｎ，Ｄ２Ｇａｉｎ，Ｄ３
Ｇａｉｎ，Ｄ４Ｇａｉｎを補間係数として算出する。

【００３６】次に、図４の補間部１５におけるＧ，Ｒ，
Ｂの各補間部１８，１９，２０の具体的な構成の一例を
図９および図１０に示す。なお、図９はＧ補間部１８の
構成を、図１０はＲ，Ｂ補間部１９，２０の構成をそれ
ぞれ示している。

【００３７】先ず、図９において、色分離後のＧのデー
タは水平垂直４方向、即ち右側、左側、上側、下側の各
相関用処理回路７１，７２，７３，７４にそれぞれ供給
され、これら相関用処理回路７１，７２，７３，７４に
おいて４方向の補間データＧｒ，Ｇｌ，Ｇｔ，Ｇｂが生
成される。これら補間データＧｒ，Ｇｌ，Ｇｔ，Ｇｂ
は、補間する方向にＬＰＦを通すことで生成される。実
際には、高輝度用と低輝度用の２つのＬＰＦを設け、そ
れぞれの出力に所定のゲインを掛けた後に加算すること
で、補間データＧｒ，Ｇｌ，Ｇｔ，Ｇｂの生成が行われ
る。

【００３８】補間データＧｒ，Ｇｌ，Ｇｔ，Ｇｂは各
々、乗算器７５，７６，７７，７８において、図５に示
すＶＨ相関検出部１６で決定された補間係数、即ち水平
垂直補間用ゲインＲＧａｉｎ，ＬＧａｉｎ，ＴＧａｉ
ｎ，ＢＧａｉｎがそれぞれ掛けられる。そして、加算器
７９〜８１によって加算されることにより、Ｇの補間処
理が行われる。補間処理後のＧの画像データは、（７）
式で表される。Ｇ＝Ｇｒ×ＲＧａｉｎ＋Ｇｌ×ＬＧａｉｎ＋Ｇｔ×ＴＧａｉｎ＋Ｇｂ×ＢＧａｉｎ ……（７）

【００３９】斜め４方向についても同様に、右上側、左
上側、左下側、右下側の各相関用処理回路８２，８３，
８４，８５において、Ｄ１／Ｄ２／Ｄ３／Ｄ４の各方向
の補間データが生成され、乗算器８６，８７，８８，８
９において、図５に示す斜め相関検出部１７で決定され
た斜め補間用ゲインＤ１Ｇａｉｎ，Ｄ２Ｇａｉｎ，Ｄ３
Ｇａｉｎ，Ｄ４Ｇａｉｎがそれぞれ掛けられた後、加算
器９０〜９２で足し合わされることによって補間処理が
行われる。

【００４０】また、水平垂直４方向相関検出／補間によ
るＧの画像データＧｖｈと、斜め４方向相関検出／補間
によるＧの画像データＧｄを、状況に合わせて（８）式
に示すように混合比を変化させて加算する。混合比の調
整は、図５に示すＶＨ‐斜め比較回路３１で算出される
斜め補間補正用ゲインＶＨＧａｉｎ，ＤＧａｉｎによっ
て行われる。Ｇ＝Ｇｖｈ×ＶＨＧａｉｎ＋Ｇｄ×ＤＧａｉｎ ……（８）

【００４１】以上、Ｇ補間部１８の構成および動作につ
いて説明したが、図１０に示すＲ，Ｂ補間部１９，２０
の構成についても、図９に示すＧ補間部１８の構成と基
本的には同じである。したがって、図１０中、図９と同
等部分には同一符号を付して示してある。ただし、右
側、左側、上側、下側の各相関用処理回路７１′，７
２′，７３′，７４′における補間データの生成法につ
いては、Ｇの場合に比べて複雑である。その理由として
２つあり、ＲＧ補間用相関検出を行うことと、Ｇ／２成
分をＲＢに加えるためである。

【００４２】そのため、ＲＧ補間用相関検出は、水平
（右、左）の補間データ用と垂直方向（上、下）の補間
データ用では別々に行う。具体的には、Ｒ画素およびＢ
画素の信号からＲ信号／Ｂ信号を補間する際に、水平垂
直ＲＢ補間用ゲインＲＧａｉｎＤ，ＬＧａｉｎＤ，ＴＧ
ａｉｎＤ，ＢＧａｉｎＤを、Ｒ／Ｂ専用の補間係数とし
て算出して用いるようにしている。

【００４３】上述したように、例えば原色ＲＧＢベイヤ
配列カラーフィルタを受光面上に有するＣＣＤエリアセ
ンサから出力される画像信号を処理する画像処理装置に
おいて、全ての色の画素情報を使用して相関値を算出す
るとともに、この相関値を基に補間係数を設定し、この
設定した補間係数に基づいて補間処理を行うことによ
り、カラーフィルタ上において各色が飛び飛びで存在し
ていても、解像度／解像感を損なうことなく、良好な画
像を再現できることになる。

【００４４】

【発明の効果】以上説明したように、本発明によれば、
カラーフィルタを持つ固体撮像素子から出力される画像
信号を処理する画像処理装置において、入力された画像
信号を異なる分光特性の画素に対応する信号に分離し、
この分離した各信号ごとに変化量を算出した後絶対値化
し、この絶対値化した各信号を加算して相関値とするこ
とにより、相関値算出のために複数の色の画素情報を使
用できるため、ある特定の色が変化するようなエッジに
おいても良好な相関検出が可能となるとともに、絶対値
化に伴って色によって相補的に変化するエッジにおいて
も良好なエッジ検出が可能となる。

【図面の簡単な説明】

【図１】本発明による画像処理装置の基本構成を示すブ
ロック図である。

【図２】カラーフィルタの原色ベイヤ配列図である。

【図３】検出部の構成の一例を示すブロック図である。

【図４】補間部の構成の一例を示すブロック図である。

【図５】ＶＨ相関検出部および斜め相関検出部の具体的
な構成の一例を示すブロック図である。

【図６】相関値算出回路の具体的な構成の一例を示すブ
ロック図である。

【図７】変化量の算出の概念図である。

【図８】変化量の算出法を説明するための原色ベイヤ配
列図である。

【図９】Ｇ補間部の具体的な構成の一例を示すブロック
図である。

【図１０】Ｒ，Ｂ補間部の具体的な構成の一例を示すブ
ロック図である。

【符号の説明】

１１…カラーフィルタ、１２…ＣＣＤエリアセンサ、１
４…検出部、１５…補間部、１６…ＶＨ相関検出部、１
７…斜め相関検出部、１８…Ｇ補間部、１９…Ｒ補間
部、２０…Ｂ補間部、２１〜２４，２６〜２９…相関値
算出回路、２５，３０…相関値→相関ゲイン変換回路、
３１…ＶＨ‐斜め比較回路、３３〜３６…変化量算出回
路、３７〜３９…ＬＰＦ（ローパスフィルタ）、４５〜
４８…絶対値化回路、４９〜５２…係数付加回路

Claims

【特許請求の範囲】

【請求項１】所定の色配列のカラーフィルタを受光面
上に有する固体撮像素子から出力される画像信号を処理
する画像処理装置において、補間すべき画素に関して少
なくとも２方向の相関の程度を示す相関値を算出する相
関値算出回路であって、入力された画像信号を異なる分光特性の画素に対応する
２つ以上の信号に分離する分離手段と、前記分離手段により分離された信号ごとに変化量を算出
する複数の変化量算出手段と、前記複数の変化量算出手段により算出された各変化量を
絶対値化する複数の絶対値化手段と、前記複数の絶対値化手段の各出力を加算して前記相関値
として出力する加算手段とを備えることを特徴とする相
関値算出回路。
【請求項２】請求項１記載の相関値算出回路におい
て、前記複数の絶対値化手段の各出力に対してそれぞれ所定
の係数を掛け合わせて前記加算手段に供給する複数の係
数付加手段を有することを特徴とする相関値算出回路。
【請求項３】前記所定の係数は、人間の視覚特性に合
わせて設定されることを特徴とする請求項２記載の相関
値算出回路。
【請求項４】前記分離手段により分離された１つの信
号に対して前記変化量算出手段および前記絶対値化手段
が複数系統設けられ、この複数系統の変化量算出手段は、前記１つの信号に対
して互いに異なる算出法で変化量を算出することを特徴
とする請求項１記載の相関値算出回路。
【請求項５】原色Ｒ（赤）Ｇ（緑）Ｂ（青）ベイヤ配
列のカラーフィルタにおいて、前記１つの信号はＧ画素
の信号であることを特徴とする請求項４記載の相関値算
出回路。
【請求項６】前記複数の変化量算出手段は、前記分離
手段により分離されて入力される各信号を、変化量を算
出する方向に対して直交する向きのローパスフィルタを
通すことを特徴とする請求項１記載の相関値算出回路。
【請求項７】所定の色配列のカラーフィルタを受光面
上に有する固体撮像素子から出力される画像信号を処理
する画像処理装置において、補間すべき画素に関して少
なくとも２方向の相関の程度を示す相関値を算出する算
出方法であって、入力された画像信号を異なる分光特性の画素に対応する
２つ以上の信号に分離し、この分離した信号ごとに変化量を算出した後絶対値化
し、次いでこの絶対値化した複数の信号を加算して前記相関
値とすることを特徴とする相関値算出方法。
【請求項８】前記絶対値化した複数の信号に対して各
信号ごとに所定の係数を掛け合わせた後に加算すること
を特徴とする請求項７記載の相関値算出方法。
【請求項９】前記所定の係数を人間の視覚特性に合わ
せて設定することを特徴とする請求項８記載の相関値算
出方法。