JP2001292454A - 画像処理方法および装置並びに記録媒体 - Google Patents
画像処理方法および装置並びに記録媒体Info
- Publication number
- JP2001292454A JP2001292454A JP2000104977A JP2000104977A JP2001292454A JP 2001292454 A JP2001292454 A JP 2001292454A JP 2000104977 A JP2000104977 A JP 2000104977A JP 2000104977 A JP2000104977 A JP 2000104977A JP 2001292454 A JP2001292454 A JP 2001292454A
- Authority
- JP
- Japan
- Prior art keywords
- value
- signal
- predetermined direction
- orthogonal direction
- weighting
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Color Television Image Signal Generators (AREA)
- Editing Of Facsimile Originals (AREA)
Abstract
(57)【要約】
【課題】 単板ＣＣＤのような撮像デバイスにおいて得
られる画像データについて、色エッジ、グレーエッジに
拘わらず偽色を生じさせることなく、全画素位置におけ
る信号値を推定する。 【解決手段】 判定手段１０において、信号値を算出す
る画素位置がグレーエッジにあるか色エッジにあるか否
かを判定する。第１補間手段１１では所定方向について
の信号値Ｑ１が算出され、第２補間手段１２ではこれに
直交する方向について信号値Ｑ２が算出される。変動値
算出手段１３では、判定結果を表す判定情報Ｈに基づ
き、グレーエッジ、色エッジに応じて、その画素位置で
の所定方向および直交方向の信号値の変動量を変動値Ｓ
Ａ，ＳＢとして算出する。重み付け係数算出手段１４は
変動値ＳＡ，ＳＢから重み付け係数Ｓｊを算出し、重み
付け加算手段１５において、重み付け係数Ｓｊにより信
号Ｑ１，Ｑ２を重み付け加算してＲ信号ＱＲ、Ｂ信号Ｑ
Ｂを求める。
られる画像データについて、色エッジ、グレーエッジに
拘わらず偽色を生じさせることなく、全画素位置におけ
る信号値を推定する。 【解決手段】 判定手段１０において、信号値を算出す
る画素位置がグレーエッジにあるか色エッジにあるか否
かを判定する。第１補間手段１１では所定方向について
の信号値Ｑ１が算出され、第２補間手段１２ではこれに
直交する方向について信号値Ｑ２が算出される。変動値
算出手段１３では、判定結果を表す判定情報Ｈに基づ
き、グレーエッジ、色エッジに応じて、その画素位置で
の所定方向および直交方向の信号値の変動量を変動値Ｓ
Ａ，ＳＢとして算出する。重み付け係数算出手段１４は
変動値ＳＡ，ＳＢから重み付け係数Ｓｊを算出し、重み
付け加算手段１５において、重み付け係数Ｓｊにより信
号Ｑ１，Ｑ２を重み付け加算してＲ信号ＱＲ、Ｂ信号Ｑ
Ｂを求める。
Description
【０００１】
【発明の属する技術分野】本発明は、単板ＣＣＤのよう
な撮像デバイスにおいて得られた信号値を用いて、撮像
デバイスの全画素位置における信号値を推定する画像処
理方法および装置並びに画像処理方法をコンピュータに
実行させるためのプログラムを記録したコンピュータ読
取り可能な記録媒体に関するものである。
な撮像デバイスにおいて得られた信号値を用いて、撮像
デバイスの全画素位置における信号値を推定する画像処
理方法および装置並びに画像処理方法をコンピュータに
実行させるためのプログラムを記録したコンピュータ読
取り可能な記録媒体に関するものである。
【０００２】
【従来の技術】デジタルカメラに用いられるＣＣＤ等の
撮像デバイスとしては、分光感度が異なる複数種類の光
電変換素子を同一平面上に交互に配置して構成されてい
るものが知られている（以下単板ＣＣＤと称する）。こ
こで、Ｒ，Ｇ，Ｂのそれぞれに分光感度を有する光電変
換素子、すなわちＲ，Ｇ，Ｂの各チャンネルの光電変換
素子を交互に配置した単板ＣＣＤの場合、連続したＲ，
Ｇ，Ｂチャンネルの３個の光電変換素子の組が１つの画
素を構成することとなる。しかしながら、このような単
板ＣＣＤにおいては各画素のＲ，Ｇ，Ｂ信号値を同一画
素位置において得ることができないため、色ずれや偽色
が生じることがある。また、各チャンネルの光電変換素
子数は単板ＣＣＤを構成する全素子数よりも少ないた
め、高解像度の画像を得ることができない。例えばＲ，
Ｇ，Ｂ各チャンネルの光電変換素子を交互に配置した単
板ＣＣＤにおいては、各チャンネルの光電変換素子数は
全素子数の１／３しかないため、同一素子数のモノクロ
撮像装置に比べて解像度が１／３となってしまう。この
ため、Ｒ，Ｇ，Ｂ各チャンネルの光電変換素子が存在し
ない部分における信号値を補間処理により求める方法が
提案されているが、単に補間処理を行うのみでは、信号
値が大きく変化する部分において偽色が発生することが
ある。この場合、撮像系に光学ローパスフィルタを使用
したり、撮像信号に対してローパスフィルタによる平滑
化処理を行うことにより偽色の発生を防止することがで
きるが、この場合解像度が悪化するという問題がある。
撮像デバイスとしては、分光感度が異なる複数種類の光
電変換素子を同一平面上に交互に配置して構成されてい
るものが知られている（以下単板ＣＣＤと称する）。こ
こで、Ｒ，Ｇ，Ｂのそれぞれに分光感度を有する光電変
換素子、すなわちＲ，Ｇ，Ｂの各チャンネルの光電変換
素子を交互に配置した単板ＣＣＤの場合、連続したＲ，
Ｇ，Ｂチャンネルの３個の光電変換素子の組が１つの画
素を構成することとなる。しかしながら、このような単
板ＣＣＤにおいては各画素のＲ，Ｇ，Ｂ信号値を同一画
素位置において得ることができないため、色ずれや偽色
が生じることがある。また、各チャンネルの光電変換素
子数は単板ＣＣＤを構成する全素子数よりも少ないた
め、高解像度の画像を得ることができない。例えばＲ，
Ｇ，Ｂ各チャンネルの光電変換素子を交互に配置した単
板ＣＣＤにおいては、各チャンネルの光電変換素子数は
全素子数の１／３しかないため、同一素子数のモノクロ
撮像装置に比べて解像度が１／３となってしまう。この
ため、Ｒ，Ｇ，Ｂ各チャンネルの光電変換素子が存在し
ない部分における信号値を補間処理により求める方法が
提案されているが、単に補間処理を行うのみでは、信号
値が大きく変化する部分において偽色が発生することが
ある。この場合、撮像系に光学ローパスフィルタを使用
したり、撮像信号に対してローパスフィルタによる平滑
化処理を行うことにより偽色の発生を防止することがで
きるが、この場合解像度が悪化するという問題がある。
【０００３】ここで、人間の視覚特性は色よりも輝度に
対して感度が高いものである。このため、単板ＣＣＤに
おいて得られたカラー撮像信号から、各画素の輝度を表
す高周波の輝度信号と、上述した補間処理およびローパ
スフィルタによる平滑化処理によって得られた低周波の
色信号とを生成し、輝度信号および色信号を用いてカラ
ー画像信号を再構成するようにした方法が提案されてい
る（特開平１０−２００９０６号等）。この方法によれ
ば、人間の視覚特性において感度が高い輝度成分に対し
てより多くの情報が与えられることとなるため、見かけ
上解像度が高い画像を再現可能なカラー画像信号を得る
ことができる。
対して感度が高いものである。このため、単板ＣＣＤに
おいて得られたカラー撮像信号から、各画素の輝度を表
す高周波の輝度信号と、上述した補間処理およびローパ
スフィルタによる平滑化処理によって得られた低周波の
色信号とを生成し、輝度信号および色信号を用いてカラ
ー画像信号を再構成するようにした方法が提案されてい
る（特開平１０−２００９０６号等）。この方法によれ
ば、人間の視覚特性において感度が高い輝度成分に対し
てより多くの情報が与えられることとなるため、見かけ
上解像度が高い画像を再現可能なカラー画像信号を得る
ことができる。
【０００４】ところで、単板ＣＣＤとして、例えば図３
３に示すように市松状に画素が配置されたハニカム配列
のアレイ構造を有するＣＣＤが知られている（例えば特
開平１０−１３６３９１号）。なお、これを市松状の画
素配列と称することもある。また、図３４に示すように
正方状に画素が配置されたベイヤー配列のアレイ構造を
有するＣＣＤも知られている。なお、これを正方状の画
素配列と称することもある。このようなアレイ構造すな
わち画素配列を有する単板ＣＣＤにおいても上記と同様
に偽色の問題が生じる。このため、上述したベイヤー配
列のＣＣＤにおいて得られた光量ベースの信号について
偽色を除去するために、画像中の局所的な領域において
はｒ，ｇ，ｂの信号の比は略一定であるという仮定に基
づいて、ベイヤー配列のＣＣＤにおける垂直方向または
水平方向のラインにおいて、隣接するラインにおけるｒ
信号とｇ信号との比をｇ信号に乗算することにより、そ
のラインにおけるｒ信号を算出するようにした方法が知
られている（特開平９−２１４９８９号）。この方法
は、具体的には、図３５に示す画素配列において、ｇ１
２画素位置におけるｒ信号ｒ１２を求めるには、まずｒ
１１画素位置におけるｇ１１信号を（ｇ６＋ｇ１６）／
２の演算により算出し、ｒ１１：ｇ１１＝ｒ１２：ｇ１
２という仮定に基づいて、ｒ１２＝ｇ１２×ｒ１１／ｇ
１１の演算によりｒ１２信号を算出するものである。
３に示すように市松状に画素が配置されたハニカム配列
のアレイ構造を有するＣＣＤが知られている（例えば特
開平１０−１３６３９１号）。なお、これを市松状の画
素配列と称することもある。また、図３４に示すように
正方状に画素が配置されたベイヤー配列のアレイ構造を
有するＣＣＤも知られている。なお、これを正方状の画
素配列と称することもある。このようなアレイ構造すな
わち画素配列を有する単板ＣＣＤにおいても上記と同様
に偽色の問題が生じる。このため、上述したベイヤー配
列のＣＣＤにおいて得られた光量ベースの信号について
偽色を除去するために、画像中の局所的な領域において
はｒ，ｇ，ｂの信号の比は略一定であるという仮定に基
づいて、ベイヤー配列のＣＣＤにおける垂直方向または
水平方向のラインにおいて、隣接するラインにおけるｒ
信号とｇ信号との比をｇ信号に乗算することにより、そ
のラインにおけるｒ信号を算出するようにした方法が知
られている（特開平９−２１４９８９号）。この方法
は、具体的には、図３５に示す画素配列において、ｇ１
２画素位置におけるｒ信号ｒ１２を求めるには、まずｒ
１１画素位置におけるｇ１１信号を（ｇ６＋ｇ１６）／
２の演算により算出し、ｒ１１：ｇ１１＝ｒ１２：ｇ１
２という仮定に基づいて、ｒ１２＝ｇ１２×ｒ１１／ｇ
１１の演算によりｒ１２信号を算出するものである。
【０００５】しかしながら、上記特開平１０−２００９
０６号等に記載された方法においては、単板ＣＣＤにお
いて得られた撮像信号に対してどのようなローパスフィ
ルタにより平滑化処理を施しても、実際の画像における
高周波成分が画像中にすでに折り返されてしまっている
ため、折り返しひずみによるモアレを取り除くことがで
きず、その結果偽色を十分に除去することができない。
０６号等に記載された方法においては、単板ＣＣＤにお
いて得られた撮像信号に対してどのようなローパスフィ
ルタにより平滑化処理を施しても、実際の画像における
高周波成分が画像中にすでに折り返されてしまっている
ため、折り返しひずみによるモアレを取り除くことがで
きず、その結果偽色を十分に除去することができない。
【０００６】一方、上記特開平９−２１４９８９号に記
載された方法によれば、効果的に偽色を除去することが
できる。とくにこの方法は、画像の局所的な領域におい
ては、ｒ：ｇ：ｂの光量の比が一定であるという仮定に
基づいており、得られたＲＧＢ信号の比が光量に比例し
ているアナログ信号である場合には、ベイヤー配列のＣ
ＣＤにおいて得られる画像信号における偽色を効率よく
除去することができる。しかしながら、デジタルカメラ
により得られる画像信号は、Ａ／Ｄ変換を行って光量ｒ
ｇｂをデジタルのＲＧＢ信号に変換する場合に、量子化
誤差を低減するため、およびコンピュータ系のビデオ回
路へ信号を入力するために、例えばＲ＝ｒ０．４５、Ｒ
＝ｌｏｇ（ｒ）のように、光量に対する指数値、対数値
となるように信号値が表されていることから、ｒ：ｇ：
ｂ＝Ｒ：Ｇ：Ｂとはならないものである。このため、上
記特開平９−２１４９８９号に記載された方法は、信号
値が光量に比例するアナログ信号に対しては偽色を除去
することができるが、信号値が光量の指数値や対数値に
より表されている場合には偽色を除去することはできな
い。また、偽色はベイヤー配列の単板ＣＣＤのみならず
ハニカム配列の単板ＣＣＤにおいても発生する。
載された方法によれば、効果的に偽色を除去することが
できる。とくにこの方法は、画像の局所的な領域におい
ては、ｒ：ｇ：ｂの光量の比が一定であるという仮定に
基づいており、得られたＲＧＢ信号の比が光量に比例し
ているアナログ信号である場合には、ベイヤー配列のＣ
ＣＤにおいて得られる画像信号における偽色を効率よく
除去することができる。しかしながら、デジタルカメラ
により得られる画像信号は、Ａ／Ｄ変換を行って光量ｒ
ｇｂをデジタルのＲＧＢ信号に変換する場合に、量子化
誤差を低減するため、およびコンピュータ系のビデオ回
路へ信号を入力するために、例えばＲ＝ｒ０．４５、Ｒ
＝ｌｏｇ（ｒ）のように、光量に対する指数値、対数値
となるように信号値が表されていることから、ｒ：ｇ：
ｂ＝Ｒ：Ｇ：Ｂとはならないものである。このため、上
記特開平９−２１４９８９号に記載された方法は、信号
値が光量に比例するアナログ信号に対しては偽色を除去
することができるが、信号値が光量の指数値や対数値に
より表されている場合には偽色を除去することはできな
い。また、偽色はベイヤー配列の単板ＣＣＤのみならず
ハニカム配列の単板ＣＣＤにおいても発生する。
【０００７】このため、撮像デバイスにおいて得られた
信号値が、光量に対する指数値や対数値により表されて
いる場合、画像の局所的な領域においてはＲＧＢ各信号
値の差は一定であるという前提に基づき、信号値を算出
する画素位置における信号値が変化する方向を考慮し
て、各画素位置における信号値を算出する方法が提案さ
れている（特願平１１−２１２２０２号）。以下、この
方法について具体的に説明する。
信号値が、光量に対する指数値や対数値により表されて
いる場合、画像の局所的な領域においてはＲＧＢ各信号
値の差は一定であるという前提に基づき、信号値を算出
する画素位置における信号値が変化する方向を考慮し
て、各画素位置における信号値を算出する方法が提案さ
れている（特願平１１−２１２２０２号）。以下、この
方法について具体的に説明する。
【０００８】まず、撮像デバイスであるＣＣＤの画素配
列を図３３に示すハニカム配列とし、図３６に示すよう
に各画素位置に参照番号を付与する。なお、この画素配
列を正方配列と見なした場合に、信号値を有さない画素
位置を図３６において＊を用いて示す。また、各チャン
ネルにおいて得られる信号値は８ビットであるものと
し、紙面左上から右下に延在する方向を矢印Ａ方向、紙
面右上から左下に延在する方向を矢印Ｂ方向とし、以下
本明細書中においては矢印Ａ方向および矢印Ｂ方向は不
変とする。なお、ここではＢ２４画素位置におけるＲ信
号（以下Ｒ（Ｂ２４）信号と表記する）の算出について
説明する。まず、矢印Ａ方向について、下記の式（１）
によりＢ２４画素位置のＲ（Ｂ２４）Ａ信号を求める。
列を図３３に示すハニカム配列とし、図３６に示すよう
に各画素位置に参照番号を付与する。なお、この画素配
列を正方配列と見なした場合に、信号値を有さない画素
位置を図３６において＊を用いて示す。また、各チャン
ネルにおいて得られる信号値は８ビットであるものと
し、紙面左上から右下に延在する方向を矢印Ａ方向、紙
面右上から左下に延在する方向を矢印Ｂ方向とし、以下
本明細書中においては矢印Ａ方向および矢印Ｂ方向は不
変とする。なお、ここではＢ２４画素位置におけるＲ信
号（以下Ｒ（Ｂ２４）信号と表記する）の算出について
説明する。まず、矢印Ａ方向について、下記の式（１）
によりＢ２４画素位置のＲ（Ｂ２４）Ａ信号を求める。
【０００９】 R(B24)A=G(B24)A+((R(G33)A-G33)+(R(G15)A-G15))/2 （１） 但し、Ｇ（Ｂ２４）Ａ信号は、画素がＢ０２，Ｇ１３，
Ｂ２４，Ｇ３５…と並ぶライン上のＧ画素位置における
Ｇ信号に対して、矢印Ａ方向に１次元Cubicスプライン
補間演算等の１次元補間演算を施して求めたＢ２４画素
位置のＧ信号である。また、Ｒ（Ｇ３３）Ａ信号は、画
素が…Ｒ２２，Ｇ３３，Ｒ４４，Ｇ５５…と並ぶライン
上のＲ画素位置におけるＲ信号に対して、矢印Ａ方向に
１次元補間演算を施して求めたＧ３３画素位置のＲ信号
である。さらに、Ｒ（Ｇ１５）Ａ信号は、画素がＲ０
４，Ｇ１５，Ｒ２６，Ｇ３７…と並ぶライン上のＲ画素
位置におけるＲ信号に対して、矢印Ａ方向に１次元補間
演算を施して求めたＧ１５画素位置のＲ信号である。
Ｂ２４，Ｇ３５…と並ぶライン上のＧ画素位置における
Ｇ信号に対して、矢印Ａ方向に１次元Cubicスプライン
補間演算等の１次元補間演算を施して求めたＢ２４画素
位置のＧ信号である。また、Ｒ（Ｇ３３）Ａ信号は、画
素が…Ｒ２２，Ｇ３３，Ｒ４４，Ｇ５５…と並ぶライン
上のＲ画素位置におけるＲ信号に対して、矢印Ａ方向に
１次元補間演算を施して求めたＧ３３画素位置のＲ信号
である。さらに、Ｒ（Ｇ１５）Ａ信号は、画素がＲ０
４，Ｇ１５，Ｒ２６，Ｇ３７…と並ぶライン上のＲ画素
位置におけるＲ信号に対して、矢印Ａ方向に１次元補間
演算を施して求めたＧ１５画素位置のＲ信号である。
【００１０】次に、矢印Ｂ方向について、下記の式
（２）によりＢ２４画素位置のＲ（Ｂ２４）Ｂ信号を求
める。
（２）によりＢ２４画素位置のＲ（Ｂ２４）Ｂ信号を求
める。
【００１１】 R(B24)B=G(B24)B+((R(G13)B-G13)+(R(G35)B-G35))/2 （２） 但し、Ｇ（Ｂ２４）Ｂ信号は、画素がＢ０６，Ｇ１５，
Ｂ２４，Ｇ３３…と並ぶライン上のＧ画素位置における
Ｇ信号に対して、矢印Ｂ方向に１次元補間演算を施して
求めたＢ２４画素位置のＧ信号である。また、Ｒ（Ｇ１
３）Ｂ信号は、画素がＲ０４，Ｇ１３，Ｒ２２，Ｇ３１
…と並ぶライン上のＲ画素位置におけるＲ信号に対し
て、矢印Ｂ方向に１次元補間演算を施して求めたＧ１３
画素位置のＲ信号である。さらに、Ｒ（Ｇ３５）Ｂ信号
は、画素が…Ｒ２６，Ｇ３５，Ｒ４４，Ｇ５３…と並ぶ
ライン上のＲ画素位置におけるＲ信号に対して、矢印Ｂ
方向に１次元補間演算を施して求めたＧ３５画素位置の
Ｒ信号である。
Ｂ２４，Ｇ３３…と並ぶライン上のＧ画素位置における
Ｇ信号に対して、矢印Ｂ方向に１次元補間演算を施して
求めたＢ２４画素位置のＧ信号である。また、Ｒ（Ｇ１
３）Ｂ信号は、画素がＲ０４，Ｇ１３，Ｒ２２，Ｇ３１
…と並ぶライン上のＲ画素位置におけるＲ信号に対し
て、矢印Ｂ方向に１次元補間演算を施して求めたＧ１３
画素位置のＲ信号である。さらに、Ｒ（Ｇ３５）Ｂ信号
は、画素が…Ｒ２６，Ｇ３５，Ｒ４４，Ｇ５３…と並ぶ
ライン上のＲ画素位置におけるＲ信号に対して、矢印Ｂ
方向に１次元補間演算を施して求めたＧ３５画素位置の
Ｒ信号である。
【００１２】そして、下記の式（３ａ）、（３ｂ）によ
り、Ｂ２４画素位置における矢印Ａ方向および矢印Ｂ方
向についての信号値の変動量を表す変動値ＳＡ，ＳＢを
算出し、さらに、変動値ＳＡ，ＳＢを用いて式（３ｃ）
によりＲ（Ｂ２４）Ａ信号とＲ（Ｂ２４）Ｂ信号とを重
み付け加算するための重み付け係数Ｓｊを算出する。
り、Ｂ２４画素位置における矢印Ａ方向および矢印Ｂ方
向についての信号値の変動量を表す変動値ＳＡ，ＳＢを
算出し、さらに、変動値ＳＡ，ＳＢを用いて式（３ｃ）
によりＲ（Ｂ２４）Ａ信号とＲ（Ｂ２４）Ｂ信号とを重
み付け加算するための重み付け係数Ｓｊを算出する。
【００１３】 SA=|B24-G(B24)A|/(B24+G(B24)A) （３ａ） SB=|B24-G(B24)B|/(B24+G(B24)B) （３ｂ） Sj=SA/(SA+SB)(SA+SB=0ならSj=0.5) （３ｃ） このように重み付け係数Sjが求められると、下記の式
（４）により、Ｒ（Ｂ２４）信号を算出する。
（４）により、Ｒ（Ｂ２４）信号を算出する。
【００１４】 R(B24)=(1-Sj)*R(B24)A+Sj*R(B24)B （４） この方法によれば、撮像デバイスにおいて得られた信号
値が指数値や対数値により表されている場合であって
も、偽色を発生させることなく全画素位置における信号
値を求めることができる。また、この方法において、信
号値が変化する方向に応じて、撮像デバイス上の所定方
向およびこれに直交する直交方向について算出された信
号値を上記式（４）に示すように重み付け加算して、各
画素位置における信号値を算出することにより、信号値
の変化方向に拘わらず偽色の発生を防止できるととも
に、アーチファクトの発生をも防止することができる。
値が指数値や対数値により表されている場合であって
も、偽色を発生させることなく全画素位置における信号
値を求めることができる。また、この方法において、信
号値が変化する方向に応じて、撮像デバイス上の所定方
向およびこれに直交する直交方向について算出された信
号値を上記式（４）に示すように重み付け加算して、各
画素位置における信号値を算出することにより、信号値
の変化方向に拘わらず偽色の発生を防止できるととも
に、アーチファクトの発生をも防止することができる。
【００１５】
【発明が解決しようとする課題】しかしながら、特願平
１１−２１２２０２号の方法では、信号値を推定する画
素位置が画像の色エッジ上にある場合には、偽色を発生
させることなく信号値を算出することができるが、信号
値を推定する画素がグレーエッジ上にある場合には、偽
色を十分に低減することができない。以下、この問題点
について説明する。まず、上記図３６に示す画素配列に
おいて、図１６に示すように信号値が得られて白（信号
値が２５５）および黒（信号値が０または０に近い値）
のグレーエッジが表されているものとする。なお、ここ
ではＲ４４画素位置におけるＢ（Ｒ４４）信号の算出に
ついて説明する。まず、矢印Ａ方向について、下記の式
（５）によりＲ４４画素位置のＢ（Ｒ４４）Ａ信号を求
める。
１１−２１２２０２号の方法では、信号値を推定する画
素位置が画像の色エッジ上にある場合には、偽色を発生
させることなく信号値を算出することができるが、信号
値を推定する画素がグレーエッジ上にある場合には、偽
色を十分に低減することができない。以下、この問題点
について説明する。まず、上記図３６に示す画素配列に
おいて、図１６に示すように信号値が得られて白（信号
値が２５５）および黒（信号値が０または０に近い値）
のグレーエッジが表されているものとする。なお、ここ
ではＲ４４画素位置におけるＢ（Ｒ４４）信号の算出に
ついて説明する。まず、矢印Ａ方向について、下記の式
（５）によりＲ４４画素位置のＢ（Ｒ４４）Ａ信号を求
める。
【００１６】 B(R44)A=G(R44)A+((B(G35)A-G35)+(B(G53)A-G53))/2 =0+((2-0)+(255-255))/2=1 （５） 但し、G(R44)A=0，B(G35)A=2，B(G53)A=255 また、矢印Ｂ方向について、下記の式（６）によりＲ４
４画素位置のＢ（Ｒ４４）Ｂ信号を求める。
４画素位置のＢ（Ｒ４４）Ｂ信号を求める。
【００１７】 B(R44)B=G(R44)B+((B(G33)B-G33)+(B(G55)B-G55))/2 =103+((105-0)+(105-0))/2=208 （６） 但し、G(R44)B≒103，B(G33)B≒105，B(G55)B≒105 そして、下記の式（７）によりＢ（Ｒ４４）Ａ信号とＢ
（Ｒ４４）Ｂ信号とを重み付け加算するための重み付け
係数を算出する。
（Ｒ４４）Ｂ信号とを重み付け加算するための重み付け
係数を算出する。
【００１８】 SA=|R44-G(R44)A|/(R44+G(R44)A)=|1-0|/(1+0)=1 SB=|R44-G(R44)B|/(R44+G(R44)B)=|1-103|/(1+103)≒0.98 （７） Sj=SA/(SA+SB)=1/(1+0.98)≒0.5 このように重み付け係数Ｓｊが求められると、下記の式
（８）により、Ｂ（Ｒ４４）信号を算出する。
（８）により、Ｂ（Ｒ４４）信号を算出する。
【００１９】 B(R44)=(1-Sj)*B(R44)A+Sj*B(R44)B=0.5*1+0.5*208≒105 （８） ここで、Ｒ４４画素位置は黒いエッジ上にあるため、Ｂ
（Ｒ４４）信号の値は０に近い値であることが好まし
い。しかしながら、上記式（７）に示すように重み付け
係数Ｓｊを算出して式（８）によりＢ（Ｒ４４）信号の
値を求めると、その値は１０５となるため、ここに偽色
が発生することとなる。
（Ｒ４４）信号の値は０に近い値であることが好まし
い。しかしながら、上記式（７）に示すように重み付け
係数Ｓｊを算出して式（８）によりＢ（Ｒ４４）信号の
値を求めると、その値は１０５となるため、ここに偽色
が発生することとなる。
【００２０】本発明は上記事情に鑑みなされたものであ
り、グレーエッジであっても偽色を生じさせることなく
信号値を推定できる画像処理方法および装置並びに画像
処理方法をコンピュータに実行させるためのプログラム
を記録したコンピュータ読取り可能な記録媒体を提供す
ることを目的とするものである。
り、グレーエッジであっても偽色を生じさせることなく
信号値を推定できる画像処理方法および装置並びに画像
処理方法をコンピュータに実行させるためのプログラム
を記録したコンピュータ読取り可能な記録媒体を提供す
ることを目的とするものである。
【００２１】
【課題を解決するための手段】本発明による画像処理方
法は、異なる分光感度を有する第１から第３の光電変換
素子を単一面上に配置して撮像面が形成された撮像デバ
イスであって、前記第１および前記第２の光電変換素子
を所定方向に交互に配置して第１ラインを形成し、前記
第１および前記第３の光電変換素子を前記所定方向に交
互に配置して第２ラインを形成し、前記所定方向と直交
する直交方向において前記第１および前記第２の光電変
換素子が交互に、かつ前記第１および前記第３の光電変
換素子が交互に配置されるよう、前記第１および前記第
２ラインを前記直交方向に交互に配置することにより、
第１から第３画素からなる前記撮像面が形成された撮像
デバイスにおいて得られた第１から第３信号値に基づい
て、全画素位置における前記第１から第３信号値のうち
少なくとも１つの信号値を推定する画像処理方法におい
て、信号値を推定する画素位置が、グレーエッジにある
か色エッジにあるかを判定し、前記所定方向についての
信号値の推定値である所定方向推定値および前記直交方
向についての信号値の推定値である直交方向推定値を算
出し、前記判定の結果に応じた異なる演算方法により、
前記所定方向についての信号値の変動量を表す所定方向
変動値および前記直交方向についての信号値の変動量を
表す直交方向変動値を算出し、前記所定方向変動値およ
び前記直交方向変動値に基づいて、前記所定方向推定値
および前記直交方向推定値を重み付け加算する際の重み
付け係数を設定し、該重み付け係数に基づいて、前記所
定方向推定値および前記直交方向推定値を重み付け加算
して、前記第１から第３信号値のうち少なくとも１つの
信号値を推定することを特徴とするものである。
法は、異なる分光感度を有する第１から第３の光電変換
素子を単一面上に配置して撮像面が形成された撮像デバ
イスであって、前記第１および前記第２の光電変換素子
を所定方向に交互に配置して第１ラインを形成し、前記
第１および前記第３の光電変換素子を前記所定方向に交
互に配置して第２ラインを形成し、前記所定方向と直交
する直交方向において前記第１および前記第２の光電変
換素子が交互に、かつ前記第１および前記第３の光電変
換素子が交互に配置されるよう、前記第１および前記第
２ラインを前記直交方向に交互に配置することにより、
第１から第３画素からなる前記撮像面が形成された撮像
デバイスにおいて得られた第１から第３信号値に基づい
て、全画素位置における前記第１から第３信号値のうち
少なくとも１つの信号値を推定する画像処理方法におい
て、信号値を推定する画素位置が、グレーエッジにある
か色エッジにあるかを判定し、前記所定方向についての
信号値の推定値である所定方向推定値および前記直交方
向についての信号値の推定値である直交方向推定値を算
出し、前記判定の結果に応じた異なる演算方法により、
前記所定方向についての信号値の変動量を表す所定方向
変動値および前記直交方向についての信号値の変動量を
表す直交方向変動値を算出し、前記所定方向変動値およ
び前記直交方向変動値に基づいて、前記所定方向推定値
および前記直交方向推定値を重み付け加算する際の重み
付け係数を設定し、該重み付け係数に基づいて、前記所
定方向推定値および前記直交方向推定値を重み付け加算
して、前記第１から第３信号値のうち少なくとも１つの
信号値を推定することを特徴とするものである。
【００２２】ここで、図３３に示すようなハニカム配列
の単板ＣＣＤにおいて、第１から第３画素、第１信号値
から第３信号値をそれぞれＧ，Ｒ，Ｂに対応させるとす
ると、第１ラインは図３３上左上から右下方向（これを
所定方向とする）にＧＲ画素を交互に配置したＧＲライ
ンとなり、第２ラインは第１ラインと同様の方向にＧＢ
画素を交互に配置したＧＢラインとなる。また、所定方
向と直交する方向にもＧＲラインおよびＧＢラインが交
互に配置されている。本発明による画像処理方法は、単
板ＣＣＤのような撮像デバイスにおいて得られる信号値
が光量に対する指数値や対数値により表されている場合
には、画像上の局所的な領域において、各信号値の差分
値が等しくなるという前提に基づいて、このような撮像
デバイスにおいて得られた第１から第３信号値から、各
画素位置における全ての信号値を推定するようにしたも
のである。なお、本発明においては撮像デバイスの画素
配列はこれに限定されるものではない。
の単板ＣＣＤにおいて、第１から第３画素、第１信号値
から第３信号値をそれぞれＧ，Ｒ，Ｂに対応させるとす
ると、第１ラインは図３３上左上から右下方向（これを
所定方向とする）にＧＲ画素を交互に配置したＧＲライ
ンとなり、第２ラインは第１ラインと同様の方向にＧＢ
画素を交互に配置したＧＢラインとなる。また、所定方
向と直交する方向にもＧＲラインおよびＧＢラインが交
互に配置されている。本発明による画像処理方法は、単
板ＣＣＤのような撮像デバイスにおいて得られる信号値
が光量に対する指数値や対数値により表されている場合
には、画像上の局所的な領域において、各信号値の差分
値が等しくなるという前提に基づいて、このような撮像
デバイスにおいて得られた第１から第３信号値から、各
画素位置における全ての信号値を推定するようにしたも
のである。なお、本発明においては撮像デバイスの画素
配列はこれに限定されるものではない。
【００２３】「所定方向推定値」および「直交方向推定
値」とは、所定方向および直交方向についてそれぞれ推
定した第１から第３信号値のうち少なくとも１つの信号
値のことである。
値」とは、所定方向および直交方向についてそれぞれ推
定した第１から第３信号値のうち少なくとも１つの信号
値のことである。
【００２４】「判定の結果に応じた異なる演算方法によ
り、所定方向変動値および直交方向変動値を算出する」
とは、色エッジであると判定された場合には、例えば上
記式（３ａ）、（３ｂ）に示す演算方法により変動値Ｓ
Ａおよび変動値ＳＢを所定方向変動値および直交方向変
動値として求め、グレーエッジであると判定された場合
には、例えば下記の式（９ａ）、（９ｂ）に示す演算方
法により変動値ＳＡおよび変動値ＳＢを所定方向変動値
および直交方向変動値として求めることをいう。
り、所定方向変動値および直交方向変動値を算出する」
とは、色エッジであると判定された場合には、例えば上
記式（３ａ）、（３ｂ）に示す演算方法により変動値Ｓ
Ａおよび変動値ＳＢを所定方向変動値および直交方向変
動値として求め、グレーエッジであると判定された場合
には、例えば下記の式（９ａ）、（９ｂ）に示す演算方
法により変動値ＳＡおよび変動値ＳＢを所定方向変動値
および直交方向変動値として求めることをいう。
【００２５】 SA=|B24-G(B24)A| （９ａ） SB=|B24-G(B24)B| （９ｂ） 「重み付け係数を設定する」とは、グレーエッジと判定
された場合には、偽色が発生しないように所定方向推定
値および直交方向推定値を重み付ける重み付け係数を設
定し、色エッジと判定された場合には、偽色を低減させ
つつも細かな色味を残すことができるような重み付け係
数を設定することをいう。
された場合には、偽色が発生しないように所定方向推定
値および直交方向推定値を重み付ける重み付け係数を設
定し、色エッジと判定された場合には、偽色を低減させ
つつも細かな色味を残すことができるような重み付け係
数を設定することをいう。
【００２６】また、本発明による画像処理方法において
は、前記所定方向変動値と前記直交方向変動値との加算
値を算出し、該加算値に対する前記所定方向変動値また
は前記直交方向変動値の比率を算出し、該比率を前記所
定方向推定値および前記直交方向推定値を重み付け加算
する際の重み付け係数として設定することが好ましい。
は、前記所定方向変動値と前記直交方向変動値との加算
値を算出し、該加算値に対する前記所定方向変動値また
は前記直交方向変動値の比率を算出し、該比率を前記所
定方向推定値および前記直交方向推定値を重み付け加算
する際の重み付け係数として設定することが好ましい。
【００２７】さらに、本発明による画像処理方法におい
ては、前記所定方向変動値および前記直交方向変動値の
加算値に対する前記所定方向変動値または前記直交方向
変動値の比率を、前記所定方向推定値および前記直交方
向推定値を重み付け加算する際の重み付け係数として設
定するに際し、前記重み付け係数が一定であるとした場
合の前記所定方向変動値と前記直交方向変動値との関係
に基づいて、複数の重み付け係数に対する所定方向変動
値および直交方向変動値の対応関係を予め算出して記憶
した記憶手段を参照して、前記所定方向変動値および前
記直交方向変動値に基づいて、前記複数の重み付け係数
から一の重み付け係数を選択し、該選択された一の重み
付け係数を、前記所定方向推定値および前記直交方向推
定値を重み付け加算する際の重み付け係数として設定す
ることが好ましい。
ては、前記所定方向変動値および前記直交方向変動値の
加算値に対する前記所定方向変動値または前記直交方向
変動値の比率を、前記所定方向推定値および前記直交方
向推定値を重み付け加算する際の重み付け係数として設
定するに際し、前記重み付け係数が一定であるとした場
合の前記所定方向変動値と前記直交方向変動値との関係
に基づいて、複数の重み付け係数に対する所定方向変動
値および直交方向変動値の対応関係を予め算出して記憶
した記憶手段を参照して、前記所定方向変動値および前
記直交方向変動値に基づいて、前記複数の重み付け係数
から一の重み付け係数を選択し、該選択された一の重み
付け係数を、前記所定方向推定値および前記直交方向推
定値を重み付け加算する際の重み付け係数として設定す
ることが好ましい。
【００２８】また、この場合、前記記憶手段に記憶され
た前記対応関係における前記複数の重み付け係数を、前
記加算値に対する前記所定方向変動値または前記直交方
向変動値の比率が１／２ｎ（ｎは自然数）となるように
設定し、前記重み付け加算を、前記重み付け係数に基づ
くビットシフトにより行うことが好ましい。
た前記対応関係における前記複数の重み付け係数を、前
記加算値に対する前記所定方向変動値または前記直交方
向変動値の比率が１／２ｎ（ｎは自然数）となるように
設定し、前記重み付け加算を、前記重み付け係数に基づ
くビットシフトにより行うことが好ましい。
【００２９】ここで、加算値に対する所定方向変動値ま
たは直交方向変動値の比率が１／２ ｎ（ｎは自然数）と
なるように重み付け係数が設定されていると、所定方向
推定値および直交方向推定値を２進数で表した場合、こ
れらに１／２ｎを乗算することは、これらの推定値を右
側にｎビットシフトさせることと等価な演算を行ってい
ることとなる。したがって、「重み付け係数に基づくビ
ットシフト」とは、選択された一の重み付け係数の値１
／２ｎに基づいて、所定方向推定値および直交方向推定
値を右側にｎビットシフトさせることにより、重み付け
加算を行うことをいう。
たは直交方向変動値の比率が１／２ ｎ（ｎは自然数）と
なるように重み付け係数が設定されていると、所定方向
推定値および直交方向推定値を２進数で表した場合、こ
れらに１／２ｎを乗算することは、これらの推定値を右
側にｎビットシフトさせることと等価な演算を行ってい
ることとなる。したがって、「重み付け係数に基づくビ
ットシフト」とは、選択された一の重み付け係数の値１
／２ｎに基づいて、所定方向推定値および直交方向推定
値を右側にｎビットシフトさせることにより、重み付け
加算を行うことをいう。
【００３０】また、本発明による画像処理方法において
は、前記信号値を推定する画素位置が、前記第１から第
３信号値のいずれか１つの信号値のみからなる単色平坦
部にあるか否かを判定し、前記単色平坦部にあると判定
された場合には、該単色平坦部内における前記第１から
第３信号値に基づく線形補間演算により、前記第１から
第３信号値のうち少なくとも１つの信号値を推定し、前
記単色平坦部にないと判定された場合に、前記グレーエ
ッジにあるか色エッジにあるか否かの判定、前記所定方
向推定値および前記直交方向推定値の算出、前記所定方
向変動値および前記直交方向変動値の算出、前記重み付
け係数の設定、および該重み付け係数に基づく信号値の
推定を行うことが好ましい。
は、前記信号値を推定する画素位置が、前記第１から第
３信号値のいずれか１つの信号値のみからなる単色平坦
部にあるか否かを判定し、前記単色平坦部にあると判定
された場合には、該単色平坦部内における前記第１から
第３信号値に基づく線形補間演算により、前記第１から
第３信号値のうち少なくとも１つの信号値を推定し、前
記単色平坦部にないと判定された場合に、前記グレーエ
ッジにあるか色エッジにあるか否かの判定、前記所定方
向推定値および前記直交方向推定値の算出、前記所定方
向変動値および前記直交方向変動値の算出、前記重み付
け係数の設定、および該重み付け係数に基づく信号値の
推定を行うことが好ましい。
【００３１】また、本発明による画像処理方法において
は、前記第１から前記第３の光電変換素子が、それぞれ
Ｇ（グリーン）、Ｂ（ブルー）、Ｒ（レッド）のいずれ
かの色、あるいはＹ（イエロー）、Ｇ（グリーン）、Ｃ
（シアン）のいずれかの色に分光感度を有するものであ
ることが好ましい。
は、前記第１から前記第３の光電変換素子が、それぞれ
Ｇ（グリーン）、Ｂ（ブルー）、Ｒ（レッド）のいずれ
かの色、あるいはＹ（イエロー）、Ｇ（グリーン）、Ｃ
（シアン）のいずれかの色に分光感度を有するものであ
ることが好ましい。
【００３２】本発明による画像処理装置は、異なる分光
感度を有する第１から第３の光電変換素子を単一面上に
配置して撮像面が形成された撮像デバイスであって、前
記第１および前記第２の光電変換素子を所定方向に交互
に配置して第１ラインを形成し、前記第１および前記第
３の光電変換素子を前記所定方向に交互に配置して第２
ラインを形成し、前記所定方向と直交する直交方向にお
いて前記第１および前記第２の光電変換素子が交互に、
かつ前記第１および前記第３の光電変換素子が交互に配
置されるよう、前記第１および前記第２ラインを前記直
交方向に交互に配置することにより、第１から第３画素
からなる前記撮像面が形成された撮像デバイスにおいて
得られた第１から第３信号値に基づいて、全画素位置に
おける前記第１から第３信号値のうち少なくとも１つの
信号値を推定する画像処理装置において、信号値を推定
する画素位置が、グレーエッジにあるか色エッジにある
かを判定する判定手段と、前記所定方向についての信号
値の推定値である所定方向推定値および前記直交方向に
ついての信号値の推定値である直交方向推定値を算出す
る推定値算出手段と、前記判定の結果に応じた異なる演
算方法により、前記所定方向についての信号値の変動量
を表す所定方向変動値および前記直交方向についての信
号値の変動量を表す直交方向変動値を算出する変動値算
出手段と、前記所定方向変動値および前記直交方向変動
値に基づいて、前記所定方向推定値および前記直交方向
推定値を重み付け加算する際の重み付け係数を設定する
重み付け係数設定手段と、該重み付け係数に基づいて、
前記所定方向推定値および前記直交方向推定値を重み付
け加算して、前記第１から第３信号値のうち少なくとも
１つの信号値を推定する重み付け加算手段とを備えたこ
とを特徴とするものである。
感度を有する第１から第３の光電変換素子を単一面上に
配置して撮像面が形成された撮像デバイスであって、前
記第１および前記第２の光電変換素子を所定方向に交互
に配置して第１ラインを形成し、前記第１および前記第
３の光電変換素子を前記所定方向に交互に配置して第２
ラインを形成し、前記所定方向と直交する直交方向にお
いて前記第１および前記第２の光電変換素子が交互に、
かつ前記第１および前記第３の光電変換素子が交互に配
置されるよう、前記第１および前記第２ラインを前記直
交方向に交互に配置することにより、第１から第３画素
からなる前記撮像面が形成された撮像デバイスにおいて
得られた第１から第３信号値に基づいて、全画素位置に
おける前記第１から第３信号値のうち少なくとも１つの
信号値を推定する画像処理装置において、信号値を推定
する画素位置が、グレーエッジにあるか色エッジにある
かを判定する判定手段と、前記所定方向についての信号
値の推定値である所定方向推定値および前記直交方向に
ついての信号値の推定値である直交方向推定値を算出す
る推定値算出手段と、前記判定の結果に応じた異なる演
算方法により、前記所定方向についての信号値の変動量
を表す所定方向変動値および前記直交方向についての信
号値の変動量を表す直交方向変動値を算出する変動値算
出手段と、前記所定方向変動値および前記直交方向変動
値に基づいて、前記所定方向推定値および前記直交方向
推定値を重み付け加算する際の重み付け係数を設定する
重み付け係数設定手段と、該重み付け係数に基づいて、
前記所定方向推定値および前記直交方向推定値を重み付
け加算して、前記第１から第３信号値のうち少なくとも
１つの信号値を推定する重み付け加算手段とを備えたこ
とを特徴とするものである。
【００３３】なお、本発明による画像処理装置において
は、前記重み付け係数設定手段は、前記所定方向変動値
と前記直交方向変動値との加算値を算出し、該加算値に
対する前記所定方向変動値または前記直交方向変動値の
比率を算出する比率算出手段を備え、該比率を、前記所
定方向推定値および前記直交方向推定値を重み付け加算
する際の重み付け係数として設定する手段であることが
好ましい。
は、前記重み付け係数設定手段は、前記所定方向変動値
と前記直交方向変動値との加算値を算出し、該加算値に
対する前記所定方向変動値または前記直交方向変動値の
比率を算出する比率算出手段を備え、該比率を、前記所
定方向推定値および前記直交方向推定値を重み付け加算
する際の重み付け係数として設定する手段であることが
好ましい。
【００３４】また、本発明による画像処理装置において
は、前記重み付け係数設定手段は、前記所定方向変動値
と前記直交方向変動値との加算値に対する前記所定方向
変動値または前記直交方向変動値の比率を、前記所定方
向推定値および前記直交方向推定値を重み付け加算する
際の重み付け係数として設定するに際し、前記重み付け
係数が一定であるとした場合の前記所定方向変動値と前
記直交方向変動値との関係に基づいて、複数の重み付け
係数に対する所定方向変動値および直交方向変動値の対
応関係を予め算出して、該対応関係を記憶した記憶手段
と、前記所定方向変動値および前記直交方向変動値に基
づいて、前記記憶手段を参照して前記複数の重み付け係
数から一の重み付け係数を選択する重み付け係数選択手
段とを備え、該選択された一の重み付け係数を、前記所
定方向推定値および前記直交方向推定値を重み付け加算
する際の重み付け係数として設定する手段であることが
好ましい。
は、前記重み付け係数設定手段は、前記所定方向変動値
と前記直交方向変動値との加算値に対する前記所定方向
変動値または前記直交方向変動値の比率を、前記所定方
向推定値および前記直交方向推定値を重み付け加算する
際の重み付け係数として設定するに際し、前記重み付け
係数が一定であるとした場合の前記所定方向変動値と前
記直交方向変動値との関係に基づいて、複数の重み付け
係数に対する所定方向変動値および直交方向変動値の対
応関係を予め算出して、該対応関係を記憶した記憶手段
と、前記所定方向変動値および前記直交方向変動値に基
づいて、前記記憶手段を参照して前記複数の重み付け係
数から一の重み付け係数を選択する重み付け係数選択手
段とを備え、該選択された一の重み付け係数を、前記所
定方向推定値および前記直交方向推定値を重み付け加算
する際の重み付け係数として設定する手段であることが
好ましい。
【００３５】また、この場合、前記記憶手段に記憶され
た前記対応関係における前記複数の重み付け係数を、前
記加算値に対する前記所定方向変動値または前記直交方
向変動値の比率が１／２ｎ（ｎは自然数）となるように
設定し、前記重み付け加算手段は、前記重み付け加算
を、前記重み付け係数に基づくビットシフトにより行う
手段であることが好ましい。
た前記対応関係における前記複数の重み付け係数を、前
記加算値に対する前記所定方向変動値または前記直交方
向変動値の比率が１／２ｎ（ｎは自然数）となるように
設定し、前記重み付け加算手段は、前記重み付け加算
を、前記重み付け係数に基づくビットシフトにより行う
手段であることが好ましい。
【００３６】また、本発明による画像処理装置において
は、前記信号値を推定する画素位置が、前記第１から第
３信号値のいずれか１つの信号値のみからなる単色平坦
部にあるか否かを判定する平坦部判定手段と、前記単色
平坦部にあると判定された場合に、該単色平坦部内にお
ける前記第１から第３信号値に基づく線形補間演算によ
り、前記第１から第３信号値のうち少なくとも１つの信
号値を推定する線形補間手段とをさらに備え、前記単色
平坦部にないと判定された場合に、前記判定手段による
グレーエッジにあるか色エッジにあるかの判定、前記推
定値算出手段による前記所定方向推定値および前記直交
方向推定値の算出、前記変動値算出手段による前記所定
方向変動値および前記直交方向変動値の算出、前記重み
付け係数設定手段による前記重み付け係数の設定、およ
び前記重み付け加算手段による前記重み付け係数に基づ
く信号値の推定を行うことが好ましい。
は、前記信号値を推定する画素位置が、前記第１から第
３信号値のいずれか１つの信号値のみからなる単色平坦
部にあるか否かを判定する平坦部判定手段と、前記単色
平坦部にあると判定された場合に、該単色平坦部内にお
ける前記第１から第３信号値に基づく線形補間演算によ
り、前記第１から第３信号値のうち少なくとも１つの信
号値を推定する線形補間手段とをさらに備え、前記単色
平坦部にないと判定された場合に、前記判定手段による
グレーエッジにあるか色エッジにあるかの判定、前記推
定値算出手段による前記所定方向推定値および前記直交
方向推定値の算出、前記変動値算出手段による前記所定
方向変動値および前記直交方向変動値の算出、前記重み
付け係数設定手段による前記重み付け係数の設定、およ
び前記重み付け加算手段による前記重み付け係数に基づ
く信号値の推定を行うことが好ましい。
【００３７】さらに、本発明による画像処理装置におい
ては、前記第１から前記第３の光電変換素子が、それぞ
れＧ、Ｂ、Ｒのいずれかの色に、あるいはＹ、Ｇ、Ｃの
いずれかの色に分光感度を有するものであることが好ま
しい。
ては、前記第１から前記第３の光電変換素子が、それぞ
れＧ、Ｂ、Ｒのいずれかの色に、あるいはＹ、Ｇ、Ｃの
いずれかの色に分光感度を有するものであることが好ま
しい。
【００３８】なお、本発明による画像処理方法をコンピ
ュータに実行させるためのプログラムとして、コンピュ
ータ読取り可能な記録媒体に記録して提供してもよい。
ュータに実行させるためのプログラムとして、コンピュ
ータ読取り可能な記録媒体に記録して提供してもよい。
【００３９】また、本発明による画像処理装置をデジタ
ルカメラ等の撮像装置、あるいはスキャナ等の画像読取
装置に搭載して提供してもよい。
ルカメラ等の撮像装置、あるいはスキャナ等の画像読取
装置に搭載して提供してもよい。
【００４０】
【発明の効果】本発明によれば、信号値を推定する画素
位置がグレーエッジにあるか色エッジにあるかを判定
し、その判定の結果に応じた異なる演算方法により、所
定方向についての信号値の変動量を表す所定方向変動値
および直交方向についての信号値の変動量を表す直交方
向変動値を算出し、この所定方向変動値および直交方向
変動値に基づいて所定方向推定値および直交方向推定値
を重み付け加算する際の重み付け係数を設定するように
したものである。ここで、仮に所定方向にエッジが延在
するとした場合、エッジ上のある画素位置の所定方向推
定値は、エッジ上の他の画素位置の信号値と略一致する
値となるが、直交方向推定値は、エッジに直交する方向
に存在する画素位置における信号値の影響を受けて、エ
ッジ上の他の画素位置の信号値とは異なる値となる。エ
ッジがグレーエッジである場合には、直交方向推定値の
影響がなくなるように重み付け係数を設定することが好
ましい。一方、エッジが色エッジである場合、直交方向
推定値の影響をなくすことが好ましいが、直交方向推定
値の影響を完全になくして信号値を推定すると、エッジ
付近における細かい色味がなくなってしまうため、却っ
て不自然な画像となってしまう。
位置がグレーエッジにあるか色エッジにあるかを判定
し、その判定の結果に応じた異なる演算方法により、所
定方向についての信号値の変動量を表す所定方向変動値
および直交方向についての信号値の変動量を表す直交方
向変動値を算出し、この所定方向変動値および直交方向
変動値に基づいて所定方向推定値および直交方向推定値
を重み付け加算する際の重み付け係数を設定するように
したものである。ここで、仮に所定方向にエッジが延在
するとした場合、エッジ上のある画素位置の所定方向推
定値は、エッジ上の他の画素位置の信号値と略一致する
値となるが、直交方向推定値は、エッジに直交する方向
に存在する画素位置における信号値の影響を受けて、エ
ッジ上の他の画素位置の信号値とは異なる値となる。エ
ッジがグレーエッジである場合には、直交方向推定値の
影響がなくなるように重み付け係数を設定することが好
ましい。一方、エッジが色エッジである場合、直交方向
推定値の影響をなくすことが好ましいが、直交方向推定
値の影響を完全になくして信号値を推定すると、エッジ
付近における細かい色味がなくなってしまうため、却っ
て不自然な画像となってしまう。
【００４１】ここで、所定方向にエッジが延在するとし
た場合、上記式（３ａ）、（３ｂ）および式（９ａ）、
（９ｂ）により算出したＳＡ，ＳＢをそれぞれ所定方向
変動値、直交方向変動値として、これらを比較すると、
式（９ａ）、（９ｂ）の場合除算を行っていないため、
所定方向変動値に対する直交方向変動値の比率は、式
（９ａ）、（９ｂ）により算出した場合の方が大きくな
る。したがって、式（９ａ）、（９ｂ）により算出した
所定方向変動値および直交方向変動値により求められた
重み付け係数は、直交方向推定値に対する重み付けが所
定方向推定値に対する重み付けと比較して、非常に小さ
くなる。一方、式（３ａ）、（３ｂ）により算出した所
定方向変動値および直交方向変動値により求められた重
み付け係数は、直交方向推定値に対する重み付けが所定
方向推定値に対する重み付けと比較して小さくなるもの
の、式（９ａ）、（９ｂ）の場合ほど小さくはならな
い。
た場合、上記式（３ａ）、（３ｂ）および式（９ａ）、
（９ｂ）により算出したＳＡ，ＳＢをそれぞれ所定方向
変動値、直交方向変動値として、これらを比較すると、
式（９ａ）、（９ｂ）の場合除算を行っていないため、
所定方向変動値に対する直交方向変動値の比率は、式
（９ａ）、（９ｂ）により算出した場合の方が大きくな
る。したがって、式（９ａ）、（９ｂ）により算出した
所定方向変動値および直交方向変動値により求められた
重み付け係数は、直交方向推定値に対する重み付けが所
定方向推定値に対する重み付けと比較して、非常に小さ
くなる。一方、式（３ａ）、（３ｂ）により算出した所
定方向変動値および直交方向変動値により求められた重
み付け係数は、直交方向推定値に対する重み付けが所定
方向推定値に対する重み付けと比較して小さくなるもの
の、式（９ａ）、（９ｂ）の場合ほど小さくはならな
い。
【００４２】したがって、所定方向変動値および直交方
向変動値の演算方法を判定結果に応じて異なるものとし
て重み付け係数を設定することにより、グレーエッジの
場合には偽色をほとんど発生させることなく信号値を推
定でき、色エッジの場合には偽色を低減させつつも細か
な色味を残すことができるように、信号値を推定するこ
とができる。
向変動値の演算方法を判定結果に応じて異なるものとし
て重み付け係数を設定することにより、グレーエッジの
場合には偽色をほとんど発生させることなく信号値を推
定でき、色エッジの場合には偽色を低減させつつも細か
な色味を残すことができるように、信号値を推定するこ
とができる。
【００４３】なお、上記式（３ｃ）に示すように重み付
け係数を算出してもよいが、この式（３ｃ）において
は、ＳＡを（ＳＡ＋ＳＢ）にて除算しているため、この
演算を実施するための装置の構成が大型化し、また演算
量も多くなる。このため、請求項３，８，１３の発明の
ように、所定方向変動値と直交方向変動値との加算値に
対する所定方向変動値または直交方向変動値の比率を重
み付け係数として設定するに際し、重み付け係数が一定
であるとした場合の所定方向変動値と直交方向変動値と
の関係に基づいて、複数の重み付け係数に対する所定方
向変動値および直交方向変動値の対応関係を予め算出し
て、これを記憶手段に記憶しておき、算出された所定方
向変動値および直交方向変動値に基づいて、上記記憶手
段を参照して一の重み付け係数を選択し、この一の重み
付け係数に基づいて、所定方向推定値と直交方向推定値
との重み付け加算を行うことが好ましい。
け係数を算出してもよいが、この式（３ｃ）において
は、ＳＡを（ＳＡ＋ＳＢ）にて除算しているため、この
演算を実施するための装置の構成が大型化し、また演算
量も多くなる。このため、請求項３，８，１３の発明の
ように、所定方向変動値と直交方向変動値との加算値に
対する所定方向変動値または直交方向変動値の比率を重
み付け係数として設定するに際し、重み付け係数が一定
であるとした場合の所定方向変動値と直交方向変動値と
の関係に基づいて、複数の重み付け係数に対する所定方
向変動値および直交方向変動値の対応関係を予め算出し
て、これを記憶手段に記憶しておき、算出された所定方
向変動値および直交方向変動値に基づいて、上記記憶手
段を参照して一の重み付け係数を選択し、この一の重み
付け係数に基づいて、所定方向推定値と直交方向推定値
との重み付け加算を行うことが好ましい。
【００４４】ここで、重み付け係数を上記式（３ｃ）に
より算出する場合、これを変動量ＳＢについて解くと、 SB=((1-Sj)/Sj)*SA （３ｃ′） となる。これは重み付け係数Ｓｊが一定であると、変動
値ＳＡと変動値ＳＢとの関係は比例関係にあることを示
している。したがって、変動値ＳＡを所定方向変動値、
変動値ＳＢを直交方向変動値と対応させ、ｘ軸を所定方
向変動値、ｙ軸を直交方向変動値とする２次元平面を設
定すると、この２次元平面上においては、複数の重み付
け係数はその重み付け係数に応じた傾きを有する原点を
通る（厳密には原点を含まないが）直線として表される
ものとなる。
より算出する場合、これを変動量ＳＢについて解くと、 SB=((1-Sj)/Sj)*SA （３ｃ′） となる。これは重み付け係数Ｓｊが一定であると、変動
値ＳＡと変動値ＳＢとの関係は比例関係にあることを示
している。したがって、変動値ＳＡを所定方向変動値、
変動値ＳＢを直交方向変動値と対応させ、ｘ軸を所定方
向変動値、ｙ軸を直交方向変動値とする２次元平面を設
定すると、この２次元平面上においては、複数の重み付
け係数はその重み付け係数に応じた傾きを有する原点を
通る（厳密には原点を含まないが）直線として表される
ものとなる。
【００４５】よって、例えば、重み付け係数に応じた傾
きを有する複数の直線により、２次元平面を複数の領域
に分割して、これを複数の重み付け係数に対する所定方
向変動値および直交方向変動値の対応関係として求めて
これを記憶手段に記憶しておき、算出された所定方向変
動値および直交方向変動値が上記２次元平面上のいずれ
の領域に含まれるかを判断し、これらが位置すると判断
された領域に対応する重み付け係数を一の重み付け係数
として選択することができる。
きを有する複数の直線により、２次元平面を複数の領域
に分割して、これを複数の重み付け係数に対する所定方
向変動値および直交方向変動値の対応関係として求めて
これを記憶手段に記憶しておき、算出された所定方向変
動値および直交方向変動値が上記２次元平面上のいずれ
の領域に含まれるかを判断し、これらが位置すると判断
された領域に対応する重み付け係数を一の重み付け係数
として選択することができる。
【００４６】したがって、請求項３，８，１３の発明に
よれば、重み付け係数を求めるために、式（３ｃ）に示
すように、所定方向変動値または直交方向変動値を所定
方向変動値および直交方向変動値の加算値により除算す
る必要がなくなり、これにより、演算量を低減でき、演
算を行うための回路の構成も簡易なものとすることがで
きる。したがって、本発明を実施するための装置をデジ
タルカメラ等の小型の撮像装置や、スキャナ等の画像読
取装置に搭載することが容易となる。
よれば、重み付け係数を求めるために、式（３ｃ）に示
すように、所定方向変動値または直交方向変動値を所定
方向変動値および直交方向変動値の加算値により除算す
る必要がなくなり、これにより、演算量を低減でき、演
算を行うための回路の構成も簡易なものとすることがで
きる。したがって、本発明を実施するための装置をデジ
タルカメラ等の小型の撮像装置や、スキャナ等の画像読
取装置に搭載することが容易となる。
【００４７】また、重み付け係数が加算値に対する所定
方向変動値または直交方向変動値の値が１／２ｎ（ｎは
自然数）となるように設定されている場合、所定方向推
定値および直交方向推定値を２進数で表すと、これらに
１／２ｎを乗算することは、値を右側にｎビットシフト
させることと等価な演算を行っていることとなる。した
がって、ビットシフトにより所定方向推定値および直交
方向推定値の重み付け加算を行うことにより、演算を簡
易に行って処理時間を短縮することができる。
方向変動値または直交方向変動値の値が１／２ｎ（ｎは
自然数）となるように設定されている場合、所定方向推
定値および直交方向推定値を２進数で表すと、これらに
１／２ｎを乗算することは、値を右側にｎビットシフト
させることと等価な演算を行っていることとなる。した
がって、ビットシフトにより所定方向推定値および直交
方向推定値の重み付け加算を行うことにより、演算を簡
易に行って処理時間を短縮することができる。
【００４８】また、信号値を推定する画素位置が、単色
の信号値のみからなる単色平坦部にある場合には、単純
な線形補間演算を行っても偽色を発生させることなく信
号値を推定できる。したがって、信号値を推定する画素
位置が単色平坦部にあるか否かを判定し、単色平坦部に
ある場合には、線形補間演算により信号値を推定するこ
とにより、信号値推定のための演算時間を短縮すること
ができる。
の信号値のみからなる単色平坦部にある場合には、単純
な線形補間演算を行っても偽色を発生させることなく信
号値を推定できる。したがって、信号値を推定する画素
位置が単色平坦部にあるか否かを判定し、単色平坦部に
ある場合には、線形補間演算により信号値を推定するこ
とにより、信号値推定のための演算時間を短縮すること
ができる。
【００４９】
【発明の実施の形態】以下図面を参照して本発明の実施
形態について説明する。図１は本発明の第１の実施形態
による画像処理装置の構成を示す概略ブロック図であ
る。図１に示すように本発明の第１の実施形態による画
像処理装置は、単板ＣＣＤ１を構成する各光電変換素子
において得られた信号値に対して補間処理を施して、全
画素位置における信号値を求めるものであり、各信号値
により構成される画像データＳ０に対して補間処理を施
して、補間済み画像データＳ１を得る補間手段２を備え
る。補間手段２は、後述するようにして補間演算により
Ｇ信号ＱＧを算出するＧ補間手段３と、Ｒ信号ＱＲおよ
びＢ信号ＱＢを算出するＲＢ補間手段４と、Ｇ信号Ｑ
Ｇ、Ｒ信号ＱＲおよびＢ信号ＱＢから後述する図３に示
す空孔画素位置＊の信号値を算出する市松正方補間手段
５とを備える。なお、図１に示す単板ＣＣＤ１において
は、これを構成する光電変換素子からはアナログ信号が
得られるものであるが、本実施形態における画像データ
Ｓ０は、アナログ信号をＡ／Ｄ変換したデジタル信号で
あり、なおかつこのデジタル信号は単板ＣＣＤ１に入力
する光量の０．４５乗あるいは対数値となるように変換
されているものとする。
形態について説明する。図１は本発明の第１の実施形態
による画像処理装置の構成を示す概略ブロック図であ
る。図１に示すように本発明の第１の実施形態による画
像処理装置は、単板ＣＣＤ１を構成する各光電変換素子
において得られた信号値に対して補間処理を施して、全
画素位置における信号値を求めるものであり、各信号値
により構成される画像データＳ０に対して補間処理を施
して、補間済み画像データＳ１を得る補間手段２を備え
る。補間手段２は、後述するようにして補間演算により
Ｇ信号ＱＧを算出するＧ補間手段３と、Ｒ信号ＱＲおよ
びＢ信号ＱＢを算出するＲＢ補間手段４と、Ｇ信号Ｑ
Ｇ、Ｒ信号ＱＲおよびＢ信号ＱＢから後述する図３に示
す空孔画素位置＊の信号値を算出する市松正方補間手段
５とを備える。なお、図１に示す単板ＣＣＤ１において
は、これを構成する光電変換素子からはアナログ信号が
得られるものであるが、本実施形態における画像データ
Ｓ０は、アナログ信号をＡ／Ｄ変換したデジタル信号で
あり、なおかつこのデジタル信号は単板ＣＣＤ１に入力
する光量の０．４５乗あるいは対数値となるように変換
されているものとする。
【００５０】なお、本実施形態による画像処理装置は、
デジタルカメラのような撮像装置やフイルムから画像を
読み取るスキャナ等の読取装置に設けられるものであっ
てもよく、これらの装置において得られた画像信号を再
生するモニタやプリンタ等の再生装置に設けられるもの
であってもよい。また、画像処理装置単体として用いて
もよい。
デジタルカメラのような撮像装置やフイルムから画像を
読み取るスキャナ等の読取装置に設けられるものであっ
てもよく、これらの装置において得られた画像信号を再
生するモニタやプリンタ等の再生装置に設けられるもの
であってもよい。また、画像処理装置単体として用いて
もよい。
【００５１】図２は本実施形態において用いられる単板
ＣＣＤ１の画素配列を示す図である。図２（ａ）に示す
画素配列は、ｙ方向にＲ，Ｇチャンネルに対応する画素
を交互に配列した第１のラインと、ｙ方向にＧ，Ｂチャ
ンネルに対応する画素を交互に配列した第２のラインと
を、ｘ方向に交互に配列したものであり、ｘ方向におけ
る各ラインにおいてもＲ，ＧチャンネルおよびＧ，Ｂチ
ャンネルが交互に配列された正方状の画素配列となって
いる。このような正方状の画素配列としては、図３４に
示すベイヤー配列が知られており、本実施形態において
は図２（ａ）に示す画素配列をベイヤー配列と称するも
のとする。
ＣＣＤ１の画素配列を示す図である。図２（ａ）に示す
画素配列は、ｙ方向にＲ，Ｇチャンネルに対応する画素
を交互に配列した第１のラインと、ｙ方向にＧ，Ｂチャ
ンネルに対応する画素を交互に配列した第２のラインと
を、ｘ方向に交互に配列したものであり、ｘ方向におけ
る各ラインにおいてもＲ，ＧチャンネルおよびＧ，Ｂチ
ャンネルが交互に配列された正方状の画素配列となって
いる。このような正方状の画素配列としては、図３４に
示すベイヤー配列が知られており、本実施形態において
は図２（ａ）に示す画素配列をベイヤー配列と称するも
のとする。
【００５２】また、図２（ｂ）に示す画素配列は、ｙ方
向にＲ，Ｂチャンネルに対応する画素を交互に配設した
ラインと、ｙ方向にＧチャンネルに対応する画素を配列
したラインとを、各ラインの画素の配列間隔が他のライ
ンの画素配列に対してｙ方向に略１／２相対的にずれる
ように配列したものであり、市松状の画素配列となって
いる。このような市松状の画素配列としては、上記特開
平１０−１３６３９１号に記載されたハニカム配列（図
３３）が知られており、本実施形態においては図２
（ｂ）に示す画素配列をハニカム配列と称するものとす
る。このハニカム配列は、ｘ方向に対して４５度傾斜し
た方向についてみれば、Ｒ，Ｇチャンネルの画素を交互
に配列したラインと、同様に４５度傾斜した方向にＧ，
Ｂチャンネルの画素を交互に配列したラインとを、この
方向に直交する方向に交互に配列したものとなってい
る。なお、ハニカム配列は図２（ａ）に示すようなベイ
ヤー配列と画素の配列を４５度回転させた関係となって
いる。また、ハニカム配列は上述したように市松状に画
素が配列されてなるものであり、信号値を有さない空孔
画素位置＊を用いて図３に示すように正方状に表現する
ことも可能である。本実施形態においては、図２（ｂ）
すなわち図３に示すハニカム配列の単板ＣＣＤ１におい
て得られた画像データＳ０に対して処理を行うものとし
て説明する。
向にＲ，Ｂチャンネルに対応する画素を交互に配設した
ラインと、ｙ方向にＧチャンネルに対応する画素を配列
したラインとを、各ラインの画素の配列間隔が他のライ
ンの画素配列に対してｙ方向に略１／２相対的にずれる
ように配列したものであり、市松状の画素配列となって
いる。このような市松状の画素配列としては、上記特開
平１０−１３６３９１号に記載されたハニカム配列（図
３３）が知られており、本実施形態においては図２
（ｂ）に示す画素配列をハニカム配列と称するものとす
る。このハニカム配列は、ｘ方向に対して４５度傾斜し
た方向についてみれば、Ｒ，Ｇチャンネルの画素を交互
に配列したラインと、同様に４５度傾斜した方向にＧ，
Ｂチャンネルの画素を交互に配列したラインとを、この
方向に直交する方向に交互に配列したものとなってい
る。なお、ハニカム配列は図２（ａ）に示すようなベイ
ヤー配列と画素の配列を４５度回転させた関係となって
いる。また、ハニカム配列は上述したように市松状に画
素が配列されてなるものであり、信号値を有さない空孔
画素位置＊を用いて図３に示すように正方状に表現する
ことも可能である。本実施形態においては、図２（ｂ）
すなわち図３に示すハニカム配列の単板ＣＣＤ１におい
て得られた画像データＳ０に対して処理を行うものとし
て説明する。
【００５３】図４は、ハニカム配列の単板ＣＣＤ１の画
素位置を示す図であり、各画素位置に参照番号を付して
示すものである。ここでは、図４の左上から右下に向か
う方向、すなわち図４において画素がＲ００，Ｇ１１，
Ｒ２２，Ｇ３３，Ｒ４４…と並ぶ方向（矢印Ａ方向）を
所定方向とし、この所定方向すなわち矢印Ａ方向に直交
する方向を矢印Ｂ方向とする。なお、本実施形態では画
素位置に付与された参照番号を信号値の参照番号として
も使用する。
素位置を示す図であり、各画素位置に参照番号を付して
示すものである。ここでは、図４の左上から右下に向か
う方向、すなわち図４において画素がＲ００，Ｇ１１，
Ｒ２２，Ｇ３３，Ｒ４４…と並ぶ方向（矢印Ａ方向）を
所定方向とし、この所定方向すなわち矢印Ａ方向に直交
する方向を矢印Ｂ方向とする。なお、本実施形態では画
素位置に付与された参照番号を信号値の参照番号として
も使用する。
【００５４】図５は、ＲＢ補間手段４の構成を示す概略
ブロック図である。図５に示すように、ＲＢ補間手段４
は、信号値を推定する画素位置がグレーエッジにあるか
色エッジにあるか否かを判定する判定手段１０と、図４
における矢印Ａ方向について全画素位置でのＲ信号およ
びＢ信号（総称して信号Ｑ１とする）を算出する第１補
間手段１１と、矢印Ｂ方向について全画素位置でのＲ信
号およびＢ信号（総称して信号Ｑ２とする）を算出する
第２補間手段１２と、判定手段１０における判定結果を
表す判定情報Ｈに基づいて、矢印Ａ方向および矢印Ｂ方
向における信号値の変動量を表す値を変動値ＳＡ，ＳＢ
として算出する変動値算出手段１３と、変動値算出手段
１３において算出された変動値ＳＡ，ＳＢに基づいて、
第１補間手段１１および第２補間手段１２において得ら
れた信号Ｑ１，Ｑ２を重み付け補間する際の重み付け係
数Ｓｊを算出する重み付け係数算出手段１４と、重み付
け係数算出手段１４において算出された重み付け係数Ｓ
ｊにより、第１補間手段１１および第２補間手段におい
て得られた信号Ｑ１，Ｑ２を重み付け加算してＲ信号Ｑ
ＲおよびＢ信号ＱＢを得る重み付け加算手段１５とを備
える。なお、図５における重み付け係数算出手段１４が
本発明における重み付け係数設定手段と観念される。
ブロック図である。図５に示すように、ＲＢ補間手段４
は、信号値を推定する画素位置がグレーエッジにあるか
色エッジにあるか否かを判定する判定手段１０と、図４
における矢印Ａ方向について全画素位置でのＲ信号およ
びＢ信号（総称して信号Ｑ１とする）を算出する第１補
間手段１１と、矢印Ｂ方向について全画素位置でのＲ信
号およびＢ信号（総称して信号Ｑ２とする）を算出する
第２補間手段１２と、判定手段１０における判定結果を
表す判定情報Ｈに基づいて、矢印Ａ方向および矢印Ｂ方
向における信号値の変動量を表す値を変動値ＳＡ，ＳＢ
として算出する変動値算出手段１３と、変動値算出手段
１３において算出された変動値ＳＡ，ＳＢに基づいて、
第１補間手段１１および第２補間手段１２において得ら
れた信号Ｑ１，Ｑ２を重み付け補間する際の重み付け係
数Ｓｊを算出する重み付け係数算出手段１４と、重み付
け係数算出手段１４において算出された重み付け係数Ｓ
ｊにより、第１補間手段１１および第２補間手段におい
て得られた信号Ｑ１，Ｑ２を重み付け加算してＲ信号Ｑ
ＲおよびＢ信号ＱＢを得る重み付け加算手段１５とを備
える。なお、図５における重み付け係数算出手段１４が
本発明における重み付け係数設定手段と観念される。
【００５５】次いで、本実施形態のＧ補間手段３におけ
るＧ信号ＱＧおよびＲＢ補間手段４におけるＲ信号Ｑ
Ｒ、Ｂ信号ＱＢの算出について説明する。
るＧ信号ＱＧおよびＲＢ補間手段４におけるＲ信号Ｑ
Ｒ、Ｂ信号ＱＢの算出について説明する。
【００５６】（１）まず、ＲおよびＢ画素位置における
Ｇ信号の算出処理について説明する。このＧ信号の算出
はＧ補間手段３において行われる。ＲおよびＢ画素位置
におけるＧ信号は、その画素位置周辺のＧ画素位置にお
いて得られるＧ信号に対してスプライン補間演算を施す
ことにより算出することができる。図６はスプライン補
間演算を行う２次元Cubicスプライン補間フィルタの例
を示す図である。図６に示す２次元Cubicスプライン補
間フィルタは、Ｇ信号を算出する画素位置の近傍１６画
素のＧ画素位置におけるＧ信号に対して補間演算を施す
ものである。したがって、図７において実線で囲んだＲ
４４画素位置でのＧ（Ｒ４４）信号は、破線で囲んだそ
の周囲の１６のＧ画素位置（Ｇ１１，Ｇ１３，Ｇ１５，
Ｇ１７，Ｇ３１，Ｇ３３，Ｇ３５，Ｇ３７，Ｇ５１，Ｇ
５３，Ｇ５５，Ｇ５７，Ｇ７１，Ｇ７３，Ｇ７５，Ｇ７
７）のＧ信号に対して、図６に示す２次元Cubicスプラ
イン補間フィルタによりフィルタリング処理を施すこと
により算出される。一方、Ｂ４６画素位置でのＧ（Ｂ４
６）信号は、破線で囲んだその周囲のＧ画素位置（Ｇ１
３，Ｇ１５，Ｇ１７，Ｇ１９，Ｇ３３，Ｇ３５，Ｇ３
７，Ｇ３９，Ｇ５３，Ｇ５５，Ｇ５７，Ｇ５９，Ｇ７
３，Ｇ７５，Ｇ７７，Ｇ７９）のＧ信号に対して、同様
にフィルタリング処理を施すことにより算出される。こ
れにより、補間前にＧ信号が有する周波数成分を損なう
ことなく補間を行うことができ、この結果、全ての画素
位置において元の周波数情報を保持したＧ信号を得るこ
とができる。
Ｇ信号の算出処理について説明する。このＧ信号の算出
はＧ補間手段３において行われる。ＲおよびＢ画素位置
におけるＧ信号は、その画素位置周辺のＧ画素位置にお
いて得られるＧ信号に対してスプライン補間演算を施す
ことにより算出することができる。図６はスプライン補
間演算を行う２次元Cubicスプライン補間フィルタの例
を示す図である。図６に示す２次元Cubicスプライン補
間フィルタは、Ｇ信号を算出する画素位置の近傍１６画
素のＧ画素位置におけるＧ信号に対して補間演算を施す
ものである。したがって、図７において実線で囲んだＲ
４４画素位置でのＧ（Ｒ４４）信号は、破線で囲んだそ
の周囲の１６のＧ画素位置（Ｇ１１，Ｇ１３，Ｇ１５，
Ｇ１７，Ｇ３１，Ｇ３３，Ｇ３５，Ｇ３７，Ｇ５１，Ｇ
５３，Ｇ５５，Ｇ５７，Ｇ７１，Ｇ７３，Ｇ７５，Ｇ７
７）のＧ信号に対して、図６に示す２次元Cubicスプラ
イン補間フィルタによりフィルタリング処理を施すこと
により算出される。一方、Ｂ４６画素位置でのＧ（Ｂ４
６）信号は、破線で囲んだその周囲のＧ画素位置（Ｇ１
３，Ｇ１５，Ｇ１７，Ｇ１９，Ｇ３３，Ｇ３５，Ｇ３
７，Ｇ３９，Ｇ５３，Ｇ５５，Ｇ５７，Ｇ５９，Ｇ７
３，Ｇ７５，Ｇ７７，Ｇ７９）のＧ信号に対して、同様
にフィルタリング処理を施すことにより算出される。こ
れにより、補間前にＧ信号が有する周波数成分を損なう
ことなく補間を行うことができ、この結果、全ての画素
位置において元の周波数情報を保持したＧ信号を得るこ
とができる。
【００５７】ここで、補間演算の手法としては図４にお
ける縦横２次元方向における補間演算であれば、いかな
る手法をも適用することができる。なお、Ｇ信号を算出
する画素位置周辺のＧ画素位置において得られるＧ信号
に対して単純な線形補間演算を施すことによりＲ、Ｇ画
素位置におけるＧ信号を算出してもよい。例えば図７に
おいて実線で囲んだＲ４４画素位置でのＧ（Ｒ４４）信
号およびＢ４６画素位置でのＧ（Ｂ４６）信号は、その
周囲の４つのＧ画素位置におけるＧ信号を用いて下記の
式（１０）、（１１）により算出してもよい。
ける縦横２次元方向における補間演算であれば、いかな
る手法をも適用することができる。なお、Ｇ信号を算出
する画素位置周辺のＧ画素位置において得られるＧ信号
に対して単純な線形補間演算を施すことによりＲ、Ｇ画
素位置におけるＧ信号を算出してもよい。例えば図７に
おいて実線で囲んだＲ４４画素位置でのＧ（Ｒ４４）信
号およびＢ４６画素位置でのＧ（Ｂ４６）信号は、その
周囲の４つのＧ画素位置におけるＧ信号を用いて下記の
式（１０）、（１１）により算出してもよい。
【００５８】 Ｇ（Ｒ４４）＝（Ｇ３３＋Ｇ３５＋Ｇ５３＋Ｇ５５）／４ （１０） Ｇ（Ｂ４６）＝（Ｇ３５＋Ｇ３７＋Ｇ５５＋Ｇ５７）／４ （１１） （２）次に、ＲＢ補間手段４におけるＲ信号ＱＲおよび
Ｂ信号ＱＢの算出について説明する。まず、第１および
第２補間手段１１，１２における信号Ｑ１，Ｑ２の算出
について説明する。
Ｂ信号ＱＢの算出について説明する。まず、第１および
第２補間手段１１，１２における信号Ｑ１，Ｑ２の算出
について説明する。
【００５９】１まず、矢印Ａ方向においてＲ，Ｇ画素が
並ぶライン（以下第１のラインとする）におけるＧ画素
位置での、矢印Ａ方向についてのＲ信号の算出処理につ
いて説明する。この矢印Ａ方向についての信号の算出は
第１補間手段１１において行われる。なお、以降の説明
において、矢印Ａ方向について算出された信号には参照
符号に（Ａ）を付し、矢印Ｂ方向について算出された信
号には参照符号に（Ｂ）を付するものとする。また、矢
印Ａ方向にＲ，Ｇ画素が並ぶラインを第１のライン、矢
印Ａ方向にＢ，Ｇ画素が並ぶラインを第２のライン、矢
印Ｂ方向にＲ，Ｇ画素が並ぶラインを第３のライン、矢
印Ｂ方向にＢ，Ｇ画素が並ぶラインを第４のラインとす
る。
並ぶライン（以下第１のラインとする）におけるＧ画素
位置での、矢印Ａ方向についてのＲ信号の算出処理につ
いて説明する。この矢印Ａ方向についての信号の算出は
第１補間手段１１において行われる。なお、以降の説明
において、矢印Ａ方向について算出された信号には参照
符号に（Ａ）を付し、矢印Ｂ方向について算出された信
号には参照符号に（Ｂ）を付するものとする。また、矢
印Ａ方向にＲ，Ｇ画素が並ぶラインを第１のライン、矢
印Ａ方向にＢ，Ｇ画素が並ぶラインを第２のライン、矢
印Ｂ方向にＲ，Ｇ画素が並ぶラインを第３のライン、矢
印Ｂ方向にＢ，Ｇ画素が並ぶラインを第４のラインとす
る。
【００６０】第１のラインにおける矢印Ａ方向について
のＧ画素位置におけるＲ信号の算出処理は、そのＧ画素
位置が含まれる第１のライン上におけるＲ信号に対して
１次元補間演算を施すことにより行われる。例えば、図
８における実線で囲んだＧ３３画素位置でのＲ（Ｇ３
３）Ａ信号は、Ｇ３３画素位置が存在する第１のライン
上のＧ３３画素位置周辺の４点のＲ画素（Ｒ００，Ｒ２
２，Ｒ４４，Ｒ６６）において得られるＲ信号に対し
て、下記の式（１２）に示す１次元Cubicスプライン補
間演算等の１次元補間演算を施すことにより算出され
る。
のＧ画素位置におけるＲ信号の算出処理は、そのＧ画素
位置が含まれる第１のライン上におけるＲ信号に対して
１次元補間演算を施すことにより行われる。例えば、図
８における実線で囲んだＧ３３画素位置でのＲ（Ｇ３
３）Ａ信号は、Ｇ３３画素位置が存在する第１のライン
上のＧ３３画素位置周辺の４点のＲ画素（Ｒ００，Ｒ２
２，Ｒ４４，Ｒ６６）において得られるＲ信号に対し
て、下記の式（１２）に示す１次元Cubicスプライン補
間演算等の１次元補間演算を施すことにより算出され
る。
【００６１】 R(G33)A=(-3*ROO+19*R22+19*R44-3*R66)/32 （１２） なお、第１のラインにおいて矢印Ａ方向に隣接する２つ
のＲ画素位置におけるＲ２２，Ｒ４４信号を用いて下記
の式（１３）により算出してもよい。
のＲ画素位置におけるＲ２２，Ｒ４４信号を用いて下記
の式（１３）により算出してもよい。
【００６２】 R(G33)A=(R22+R44)/2 （１３） また、補間演算の手法としてはこの第１のライン上の矢
印Ａ方向における１次元補間演算であれば、いかなる手
法をも適用することができる。そしてこれにより第１の
ライン上のＧ画素位置におけるＲ信号を算出することが
できる。
印Ａ方向における１次元補間演算であれば、いかなる手
法をも適用することができる。そしてこれにより第１の
ライン上のＧ画素位置におけるＲ信号を算出することが
できる。
【００６３】２次に、矢印Ａ方向においてＲ，Ｇ画素が
並ぶ第１のラインにおけるＧ画素位置での、矢印Ｂ方向
についてのＲ信号の算出処理について説明する。この矢
印Ｂ方向についての信号の算出は第２補間手段１２にお
いて以下のようにして行われる。まず、Ｒ信号を算出す
るＧ画素位置に矢印Ａ方向において隣接する画素位置を
求める。例えば、ここでは図９に示す実線で囲んだＧ３
３画素位置でのＲ（Ｇ３３）Ｂ信号を算出するものとす
ると、Ｇ３３画素位置に隣接する画素位置は破線で囲ん
だＲ２２画素位置およびＲ４４画素位置となる。そして
このＲ２２画素位置におけるＲ２２信号とＧ（Ｒ２２）
信号との差およびＲ４４画素位置におけるＲ４４信号と
Ｇ（Ｒ４４）信号との差の平均値を、Ｇ３３画素位置に
おけるＧ３３信号に加算し、その加算結果をＧ３３画素
位置におけるＲ（Ｇ３３）Ｂ信号とする。
並ぶ第１のラインにおけるＧ画素位置での、矢印Ｂ方向
についてのＲ信号の算出処理について説明する。この矢
印Ｂ方向についての信号の算出は第２補間手段１２にお
いて以下のようにして行われる。まず、Ｒ信号を算出す
るＧ画素位置に矢印Ａ方向において隣接する画素位置を
求める。例えば、ここでは図９に示す実線で囲んだＧ３
３画素位置でのＲ（Ｇ３３）Ｂ信号を算出するものとす
ると、Ｇ３３画素位置に隣接する画素位置は破線で囲ん
だＲ２２画素位置およびＲ４４画素位置となる。そして
このＲ２２画素位置におけるＲ２２信号とＧ（Ｒ２２）
信号との差およびＲ４４画素位置におけるＲ４４信号と
Ｇ（Ｒ４４）信号との差の平均値を、Ｇ３３画素位置に
おけるＧ３３信号に加算し、その加算結果をＧ３３画素
位置におけるＲ（Ｇ３３）Ｂ信号とする。
【００６４】ここで、Ｒ２２信号のみを用いた場合、Ｇ
３３画素位置でのＲ（Ｇ３３）Ｂ信号は下記の式（１
４）により算出される。
３３画素位置でのＲ（Ｇ３３）Ｂ信号は下記の式（１
４）により算出される。
【００６５】 R(G33)B=G33+(R22-G(R22)) （１４） なお、式（１４）は画像の局所的な領域におけるＲ信号
とＧ信号との差は等しいという前提により定められるも
のである。例えば、Ｒ２２画素位置およびＧ３３画素位
置でのＲ信号とＧ信号との差が等しいとは、 R(G33)B-G33=R22-G(R22) （１５） の関係を満たすということであり、式（１５）をＲ（Ｇ
３３）Ｂ信号について解いたものが式（１４）となる。
なお、式（１４）においてＧ（Ｒ２２）信号は、上記
（１）の処理により算出されたものではなく、Ｒ２２画
素位置が存在する第３のライン上のＧ信号に対して、矢
印Ｂ方向に下記の式（１６）に示す線形補間演算や式
（１２）に示す１次元Cubicスプライン補間演算等の１
次元補間演算を施すことにより算出したものである。し
たがって、Ｇ（Ｒ２２）信号には参照符号Ｂが付される
こととなる。
とＧ信号との差は等しいという前提により定められるも
のである。例えば、Ｒ２２画素位置およびＧ３３画素位
置でのＲ信号とＧ信号との差が等しいとは、 R(G33)B-G33=R22-G(R22) （１５） の関係を満たすということであり、式（１５）をＲ（Ｇ
３３）Ｂ信号について解いたものが式（１４）となる。
なお、式（１４）においてＧ（Ｒ２２）信号は、上記
（１）の処理により算出されたものではなく、Ｒ２２画
素位置が存在する第３のライン上のＧ信号に対して、矢
印Ｂ方向に下記の式（１６）に示す線形補間演算や式
（１２）に示す１次元Cubicスプライン補間演算等の１
次元補間演算を施すことにより算出したものである。し
たがって、Ｇ（Ｒ２２）信号には参照符号Ｂが付される
こととなる。
【００６６】G(R22)B=(G31+G13)/2 （１６） すなわち、式（１４）では、画像の局所的な領域におけ
るＲ信号とＧ信号との差は等しいという前提により信号
値を算出しており、信号値の算出に使用するのは矢印Ｂ
方向においてＧ３３画素位置が存在する第４のライン
と、Ｒ２２画素位置が存在する第３のラインである。こ
れは、第３および第４のライン上にある画素値の相関関
係に基づいて信号値を算出しているということであり、
不明な信号値について矢印Ｂ方向における信号値の変化
を反映させて信号値を算出する必要がある。２の処理に
おいて、Ｒ２２信号のみを用いた場合、Ｇ３３画素位置
でのＲ（Ｇ３３）Ｂ信号は上記式（１５）に示す関係に
基づいて算出されるが、Ｇ（Ｒ２２）信号が不明である
ため、これを推定する必要がある。ここで、式（１５）
は第３および第４のライン間における相関関係を表して
いるため、Ｇ（Ｒ２２）信号を推定するには、第３のラ
イン上において矢印Ｂ方向の信号値の変化を反映させる
必要がある。この場合、上記（１）の方法により算出し
たＧ信号を使用することが考えられるが、このＧ信号は
式（１０）、（１１）に示すように、別のラインの信号
値を用いて算出しているものであるため、第３のライン
上における矢印Ｂ方向の信号値の変化を反映したもので
はない。このため、矢印Ｂ方向の信号値の変化を反映さ
せるために、式（１６）のように第３のライン上におい
て、矢印Ｂ方向についての１次元補間演算を行ってＧ
（Ｒ２２）Ｂ信号を算出しているものである。
るＲ信号とＧ信号との差は等しいという前提により信号
値を算出しており、信号値の算出に使用するのは矢印Ｂ
方向においてＧ３３画素位置が存在する第４のライン
と、Ｒ２２画素位置が存在する第３のラインである。こ
れは、第３および第４のライン上にある画素値の相関関
係に基づいて信号値を算出しているということであり、
不明な信号値について矢印Ｂ方向における信号値の変化
を反映させて信号値を算出する必要がある。２の処理に
おいて、Ｒ２２信号のみを用いた場合、Ｇ３３画素位置
でのＲ（Ｇ３３）Ｂ信号は上記式（１５）に示す関係に
基づいて算出されるが、Ｇ（Ｒ２２）信号が不明である
ため、これを推定する必要がある。ここで、式（１５）
は第３および第４のライン間における相関関係を表して
いるため、Ｇ（Ｒ２２）信号を推定するには、第３のラ
イン上において矢印Ｂ方向の信号値の変化を反映させる
必要がある。この場合、上記（１）の方法により算出し
たＧ信号を使用することが考えられるが、このＧ信号は
式（１０）、（１１）に示すように、別のラインの信号
値を用いて算出しているものであるため、第３のライン
上における矢印Ｂ方向の信号値の変化を反映したもので
はない。このため、矢印Ｂ方向の信号値の変化を反映さ
せるために、式（１６）のように第３のライン上におい
て、矢印Ｂ方向についての１次元補間演算を行ってＧ
（Ｒ２２）Ｂ信号を算出しているものである。
【００６７】一方、Ｒ４４信号のみを用いると、上記式
（１５）の関係に基づいて、Ｇ３３画素位置でのＲ（Ｇ
４４）Ｂ信号は下記の式（１７）により算出される。
（１５）の関係に基づいて、Ｇ３３画素位置でのＲ（Ｇ
４４）Ｂ信号は下記の式（１７）により算出される。
【００６８】 R(G33)B=G33+(R44-G(R44)B) （１７） なお、Ｇ（Ｒ４４）Ｂ信号は式（１６）と同様に算出さ
れる。ここで、本実施形態においては、式（１４）ある
いは（１７）のいずれかによりＲ（Ｇ３３）Ｂ信号を求
めてもよいが、Ｇ画素位置の片側にのみ隣接する画素位
置の信号値を用いたのでは、画像の位相がその方向に近
寄ってしまう。これを防止するために、下記の式（１
８）に示すように、Ｒ信号を算出するＧ画素位置（例え
ばＧ３３画素位置）の両隣の画素位置（Ｒ２２，Ｒ４４
画素位置）におけるＲ信号とＧ信号との差の平均値を、
Ｒ信号を算出するＧ画素位置におけるＧ信号に加算した
ものを、そのＧ画素位置におけるＲ信号としたものであ
る。
れる。ここで、本実施形態においては、式（１４）ある
いは（１７）のいずれかによりＲ（Ｇ３３）Ｂ信号を求
めてもよいが、Ｇ画素位置の片側にのみ隣接する画素位
置の信号値を用いたのでは、画像の位相がその方向に近
寄ってしまう。これを防止するために、下記の式（１
８）に示すように、Ｒ信号を算出するＧ画素位置（例え
ばＧ３３画素位置）の両隣の画素位置（Ｒ２２，Ｒ４４
画素位置）におけるＲ信号とＧ信号との差の平均値を、
Ｒ信号を算出するＧ画素位置におけるＧ信号に加算した
ものを、そのＧ画素位置におけるＲ信号としたものであ
る。
【００６９】 R(G33)B=G33+((R22-G(R22)B)+(R44-G(R44)B))/2 （１８） そしてこれにより、矢印Ｂ方向についてのＧ画素位置で
のＲ（Ｇ３３）Ｂ信号を算出することができる。
のＲ（Ｇ３３）Ｂ信号を算出することができる。
【００７０】３次に、矢印Ａ方向においてＢ，Ｇ画素が
並ぶ第２のラインにおけるＧ画素位置での、矢印Ａ方向
についてのＲ信号の算出処理について説明する。この矢
印Ａ方向についての信号の算出は第１補間手段１１にお
いて行われる。まず、Ｒ信号を算出するＧ画素位置に矢
印Ｂ方向において隣接する画素位置を求める。例えば、
ここでは図１０に示す実線で囲んだＧ３５画素位置での
Ｒ（Ｇ３５）Ａ信号を算出するものとすると、Ｇ３５画
素位置に隣接する画素位置は破線で囲んだＲ２６画素位
置およびＲ４４画素位置となる。そして上記２の処理と
同様に、下記の式（１９）に示すように、Ｒ２６画素位
置におけるＲ２６信号とＧ（Ｒ２６）Ａ信号との差およ
びＲ４４画素位置におけるＲ４４信号とＧ（Ｒ４４）Ａ
信号との差の平均値を、Ｇ３５画素位置におけるＧ３５
信号に加算し、その加算結果をＧ３５画素位置における
Ｒ（Ｇ３５）Ａ信号とする。
並ぶ第２のラインにおけるＧ画素位置での、矢印Ａ方向
についてのＲ信号の算出処理について説明する。この矢
印Ａ方向についての信号の算出は第１補間手段１１にお
いて行われる。まず、Ｒ信号を算出するＧ画素位置に矢
印Ｂ方向において隣接する画素位置を求める。例えば、
ここでは図１０に示す実線で囲んだＧ３５画素位置での
Ｒ（Ｇ３５）Ａ信号を算出するものとすると、Ｇ３５画
素位置に隣接する画素位置は破線で囲んだＲ２６画素位
置およびＲ４４画素位置となる。そして上記２の処理と
同様に、下記の式（１９）に示すように、Ｒ２６画素位
置におけるＲ２６信号とＧ（Ｒ２６）Ａ信号との差およ
びＲ４４画素位置におけるＲ４４信号とＧ（Ｒ４４）Ａ
信号との差の平均値を、Ｇ３５画素位置におけるＧ３５
信号に加算し、その加算結果をＧ３５画素位置における
Ｒ（Ｇ３５）Ａ信号とする。
【００７１】 R(G35)A=G35+((R26-G(R26)A)+(R44-G(R44)A))/2 （１９） なお、Ｇ（Ｒ２６）Ａ信号およびＧ（Ｒ４４）Ａ信号
は、Ｒ２６およびＲ４４画素位置が存在する第１のライ
ン上におけるＧ信号に対して、矢印Ａ方向に１次元補間
演算を施すことにより算出したものである。そしてこれ
により、矢印Ａ方向についてのＧ画素位置でのＲ（Ｇ３
５）Ａ信号を算出することができる。
は、Ｒ２６およびＲ４４画素位置が存在する第１のライ
ン上におけるＧ信号に対して、矢印Ａ方向に１次元補間
演算を施すことにより算出したものである。そしてこれ
により、矢印Ａ方向についてのＧ画素位置でのＲ（Ｇ３
５）Ａ信号を算出することができる。
【００７２】４次に、矢印Ａ方向においてＢ，Ｇ画素が
並ぶ第２のラインにおけるＧ画素位置での、矢印Ｂ方向
についてのＲ信号の算出処理について説明する。この矢
印Ｂ方向についての信号の算出は、第２補間手段１２に
おいて、そのＧ画素位置が含まれる第３のライン上にお
けるＲ信号に対して、１次元補間演算を施すことにより
行われる。例えば、図１１における実線で囲んだＧ３５
画素位置でのＲ（Ｇ３５）Ｂ信号は、Ｇ３５画素位置が
存在する第３のライン上におけるＧ３５画素位置周辺の
４点のＲ画素（Ｒ０８，Ｒ２６，Ｒ４４，Ｒ６２）にお
いて得られるＲ信号に対して、１の処理と同様に１次元
補間演算を施すことにより算出される。１次元Cubicス
プライン補間演算による算出の例を下記の式（２０）に
示す。
並ぶ第２のラインにおけるＧ画素位置での、矢印Ｂ方向
についてのＲ信号の算出処理について説明する。この矢
印Ｂ方向についての信号の算出は、第２補間手段１２に
おいて、そのＧ画素位置が含まれる第３のライン上にお
けるＲ信号に対して、１次元補間演算を施すことにより
行われる。例えば、図１１における実線で囲んだＧ３５
画素位置でのＲ（Ｇ３５）Ｂ信号は、Ｇ３５画素位置が
存在する第３のライン上におけるＧ３５画素位置周辺の
４点のＲ画素（Ｒ０８，Ｒ２６，Ｒ４４，Ｒ６２）にお
いて得られるＲ信号に対して、１の処理と同様に１次元
補間演算を施すことにより算出される。１次元Cubicス
プライン補間演算による算出の例を下記の式（２０）に
示す。
【００７３】 R(G35)B=(-3*RO8+19*R26+19*R44-3*R62)/32 （２０） ５次に、矢印Ａ方向においてＢ，Ｇ画素が並ぶ第２のラ
インにおけるＢ画素位置での矢印Ａ方向についてのＲ信
号の算出処理について説明する。この矢印Ａ方向につい
ての信号の算出は第１補間手段１１において行われる。
まず、Ｒ信号を算出するＢ画素位置に矢印Ｂ方向におい
て隣接する画素位置を求める。例えば、ここでは図１２
に示す実線で囲んだＢ２４画素位置でのＲ（Ｂ２４）Ａ
信号を算出するものとすると、Ｂ２４画素位置に隣接す
る画素位置は破線で囲んだＧ１５画素位置およびＧ３３
画素位置となる。そして上記２の処理と同様に、下記の
式（２１）に示すように、Ｇ１５画素位置におけるＲ
（Ｇ１５）Ａ信号とＧ１５信号との差およびＧ３３画素
位置におけるＲ（Ｇ３３）Ａ信号とＧ３３信号との差の
平均値を、Ｂ２４画素位置におけるＧ（Ｂ２４）Ａ信号
に加算し、その加算結果をＢ２４画素位置におけるＲ
（Ｂ２４）Ａ信号とする。
インにおけるＢ画素位置での矢印Ａ方向についてのＲ信
号の算出処理について説明する。この矢印Ａ方向につい
ての信号の算出は第１補間手段１１において行われる。
まず、Ｒ信号を算出するＢ画素位置に矢印Ｂ方向におい
て隣接する画素位置を求める。例えば、ここでは図１２
に示す実線で囲んだＢ２４画素位置でのＲ（Ｂ２４）Ａ
信号を算出するものとすると、Ｂ２４画素位置に隣接す
る画素位置は破線で囲んだＧ１５画素位置およびＧ３３
画素位置となる。そして上記２の処理と同様に、下記の
式（２１）に示すように、Ｇ１５画素位置におけるＲ
（Ｇ１５）Ａ信号とＧ１５信号との差およびＧ３３画素
位置におけるＲ（Ｇ３３）Ａ信号とＧ３３信号との差の
平均値を、Ｂ２４画素位置におけるＧ（Ｂ２４）Ａ信号
に加算し、その加算結果をＢ２４画素位置におけるＲ
（Ｂ２４）Ａ信号とする。
【００７４】 R(B24)A=G(B24)A+((R(G33)A-G33)+(R(G15)A-G15))/2 （２１） なお、Ｒ（Ｇ１５）Ａ信号およびＲ（Ｇ３３）Ａ信号
は、Ｇ１５およびＧ３３画素位置が存在する第１のライ
ン上におけるＲ信号に対して、矢印Ａ方向に１次元補間
演算を施すことにより算出したものであり、１の処理に
おいて算出したＲ信号そのものである。また、Ｇ（Ｂ２
４）Ａ信号は、Ｂ２４画素位置が存在する第２のライン
上におけるＧ信号に対して矢印Ａ方向に１次元補間演算
を施すことにより算出したものである。そしてこれによ
り、矢印Ａ方向についてのＢ画素位置でのＲ（Ｂ２４）
Ａ信号を算出することができる。
は、Ｇ１５およびＧ３３画素位置が存在する第１のライ
ン上におけるＲ信号に対して、矢印Ａ方向に１次元補間
演算を施すことにより算出したものであり、１の処理に
おいて算出したＲ信号そのものである。また、Ｇ（Ｂ２
４）Ａ信号は、Ｂ２４画素位置が存在する第２のライン
上におけるＧ信号に対して矢印Ａ方向に１次元補間演算
を施すことにより算出したものである。そしてこれによ
り、矢印Ａ方向についてのＢ画素位置でのＲ（Ｂ２４）
Ａ信号を算出することができる。
【００７５】６次に、矢印Ａ方向においてＢ，Ｇ画素が
並ぶ第２のラインにおけるＢ画素位置での矢印Ｂ方向に
ついてのＲ信号の算出処理について説明する。この矢印
Ｂ方向についての信号の算出は第２補間手段１２におい
て行われる。まず、Ｒ信号を算出するＢ画素位置に矢印
Ａ方向において隣接する画素位置を求める。例えば、こ
こでは図１３に示す実線で囲んだＢ２４画素位置でのＲ
（Ｂ２４）Ｂ信号を算出するものとすると、Ｂ２４画素
位置に隣接する画素位置は破線で囲んだＧ１３画素位置
およびＧ３５画素位置となる。そして上記２の処理と同
様に、下記の式（２２）に示すように、Ｇ１３画素位置
におけるＲ（Ｇ１３）Ｂ信号とＧ１３信号との差および
Ｇ３５画素位置におけるＲ（Ｇ３５）Ｂ信号とＧ３５信
号との差の平均値を、Ｂ２４画素位置におけるＧ（Ｂ２
４）Ｂ信号に加算し、その加算結果をＢ２４画素位置に
おけるＲ（Ｂ２４）Ｂ信号とする。
並ぶ第２のラインにおけるＢ画素位置での矢印Ｂ方向に
ついてのＲ信号の算出処理について説明する。この矢印
Ｂ方向についての信号の算出は第２補間手段１２におい
て行われる。まず、Ｒ信号を算出するＢ画素位置に矢印
Ａ方向において隣接する画素位置を求める。例えば、こ
こでは図１３に示す実線で囲んだＢ２４画素位置でのＲ
（Ｂ２４）Ｂ信号を算出するものとすると、Ｂ２４画素
位置に隣接する画素位置は破線で囲んだＧ１３画素位置
およびＧ３５画素位置となる。そして上記２の処理と同
様に、下記の式（２２）に示すように、Ｇ１３画素位置
におけるＲ（Ｇ１３）Ｂ信号とＧ１３信号との差および
Ｇ３５画素位置におけるＲ（Ｇ３５）Ｂ信号とＧ３５信
号との差の平均値を、Ｂ２４画素位置におけるＧ（Ｂ２
４）Ｂ信号に加算し、その加算結果をＢ２４画素位置に
おけるＲ（Ｂ２４）Ｂ信号とする。
【００７６】 R(B24)B=G(B24)B+((R(G35)B-G35)+(R(G13)B-G13))/2 （２２） なお、Ｒ（Ｇ１３）Ｂ信号およびＲ（Ｇ３５）Ｂ信号
は、Ｇ１３およびＧ３５画素位置が存在する第３のライ
ン上におけるＲ信号に対して、矢印Ｂ方向に１次元補間
演算を施すことにより算出したものであり、４の処理に
おいて算出したＲ信号そのものである。また、Ｇ（Ｂ２
４）Ｂ信号は、Ｂ２４画素位置が存在する第４のライン
上におけるＧ信号に対して、矢印Ｂ方向に１次元補間演
算を施すことにより算出したものである。そしてこれに
より、矢印Ｂ方向についてのＢ画素位置でのＲ（Ｂ２
４）Ｂ信号を算出することができる。
は、Ｇ１３およびＧ３５画素位置が存在する第３のライ
ン上におけるＲ信号に対して、矢印Ｂ方向に１次元補間
演算を施すことにより算出したものであり、４の処理に
おいて算出したＲ信号そのものである。また、Ｇ（Ｂ２
４）Ｂ信号は、Ｂ２４画素位置が存在する第４のライン
上におけるＧ信号に対して、矢印Ｂ方向に１次元補間演
算を施すことにより算出したものである。そしてこれに
より、矢印Ｂ方向についてのＢ画素位置でのＲ（Ｂ２
４）Ｂ信号を算出することができる。
【００７７】以上、１の処理により、矢印Ａ方向におい
てＲ，Ｇ画素が並ぶ第１のラインにおけるＧ画素位置で
の矢印Ａ方向についてのＲ信号が算出され、２の処理に
より、矢印Ａ方向においてＲ，Ｇ画素が並ぶ第１のライ
ンにおけるＧ画素位置での矢印Ｂ方向についてのＲ信号
が算出される。
てＲ，Ｇ画素が並ぶ第１のラインにおけるＧ画素位置で
の矢印Ａ方向についてのＲ信号が算出され、２の処理に
より、矢印Ａ方向においてＲ，Ｇ画素が並ぶ第１のライ
ンにおけるＧ画素位置での矢印Ｂ方向についてのＲ信号
が算出される。
【００７８】また、３の処理により、矢印Ａ方向におい
てＢ，Ｇ画素が並ぶ第２のラインにおけるＧ画素位置で
の矢印Ａ方向についてのＲ信号が算出され、４の処理に
より、矢印Ａ方向においてＢ，Ｇ画素が並ぶ第２のライ
ンにおけるＧ画素位置での矢印Ｂ方向についてのＲ信号
が算出される。
てＢ，Ｇ画素が並ぶ第２のラインにおけるＧ画素位置で
の矢印Ａ方向についてのＲ信号が算出され、４の処理に
より、矢印Ａ方向においてＢ，Ｇ画素が並ぶ第２のライ
ンにおけるＧ画素位置での矢印Ｂ方向についてのＲ信号
が算出される。
【００７９】さらに、５の処理により、矢印Ａ方向にお
いてＢ，Ｇ画素が並ぶ第２のラインにおけるＢ画素位置
での矢印Ａ方向についてのＲ信号が算出され、６の処理
により、矢印Ａ方向においてＢ，Ｇ画素が並ぶ第２のラ
インにおけるＢ画素位置での矢印Ｂ方向についてのＲ信
号が算出される。
いてＢ，Ｇ画素が並ぶ第２のラインにおけるＢ画素位置
での矢印Ａ方向についてのＲ信号が算出され、６の処理
により、矢印Ａ方向においてＢ，Ｇ画素が並ぶ第２のラ
インにおけるＢ画素位置での矢印Ｂ方向についてのＲ信
号が算出される。
【００８０】以上、各画素位置における矢印Ａ，Ｂ両方
向でのＲ信号の算出について説明したが、Ｂ信号につい
ても上記１から６の処理において説明したようにＲ信号
と同様にして算出することができる。
向でのＲ信号の算出について説明したが、Ｂ信号につい
ても上記１から６の処理において説明したようにＲ信号
と同様にして算出することができる。
【００８１】判定手段１０は、以下のようにして信号値
を推定する画素位置がグレーエッジにあるか色エッジに
あるかを判定する。図１４は赤（Ｒ）および緑（Ｇ）か
らなる色エッジの例を示す図、図１５は白および黒から
なるグレーエッジの例を示す図である。なお、図１４，
１５においては、信号値が０の画素位置を白抜きで示
し、それ以外の画素は信号値が２５５であるものとして
説明する。また、ここではＲ４４画素位置での判定につ
いて説明する。まず、判定手段１０は、下記の式（２
３）から（２６）により、エッジの判断値Ｄａｔ１〜Ｄ
ａｔ４を求める。
を推定する画素位置がグレーエッジにあるか色エッジに
あるかを判定する。図１４は赤（Ｒ）および緑（Ｇ）か
らなる色エッジの例を示す図、図１５は白および黒から
なるグレーエッジの例を示す図である。なお、図１４，
１５においては、信号値が０の画素位置を白抜きで示
し、それ以外の画素は信号値が２５５であるものとして
説明する。また、ここではＲ４４画素位置での判定につ
いて説明する。まず、判定手段１０は、下記の式（２
３）から（２６）により、エッジの判断値Ｄａｔ１〜Ｄ
ａｔ４を求める。
【００８２】 Dat1=|R44-G33|+|R44-G55|+|G35-B24|+|G35-B46| （２３） Dat2=|R44-G33|+|R44-G55|+|G53-B42|+|G53-B64| （２４） Dat3=|R44-G35|+|R44-G53|+|G33-B24|+|G33-B42| （２５） Dat4=|R44-G35|+|R44-G53|+|G55-B46|+|G55-B64| （２６） ここで、式（２３）は矢印Ａ方向において、Ｒ４４画素
位置の右上部分のエッジの色を判断するための判断値Ｄ
ａｔ１を算出するものであり、式（２４）は矢印Ａ方向
において、Ｒ４４画素位置の左下部分のエッジの色を判
断するための判断値Ｄａｔ２を算出するものである。ま
た、式（２５）は矢印Ｂ方向において、Ｒ４４画素位置
の左上部分のエッジの色を判断するための判断値Ｄａｔ
３を算出するものであり、式（２６）は矢印Ｂ方向にお
いて、Ｒ４４画素位置の右下部分のエッジの色を判断す
るための判断値Ｄａｔ４を算出するものである。
位置の右上部分のエッジの色を判断するための判断値Ｄ
ａｔ１を算出するものであり、式（２４）は矢印Ａ方向
において、Ｒ４４画素位置の左下部分のエッジの色を判
断するための判断値Ｄａｔ２を算出するものである。ま
た、式（２５）は矢印Ｂ方向において、Ｒ４４画素位置
の左上部分のエッジの色を判断するための判断値Ｄａｔ
３を算出するものであり、式（２６）は矢印Ｂ方向にお
いて、Ｒ４４画素位置の右下部分のエッジの色を判断す
るための判断値Ｄａｔ４を算出するものである。
【００８３】信号値を推定する画素位置がグレーエッジ
にある場合は、上記判断値Ｄａｔ１〜Ｄａｔ４のうちい
ずれか１つは必ず値が小さくなる。例えば、図１５に示
すグレーエッジの場合、上記式（２３）〜（２６）にお
いて算出される判断値Ｄａｔ１〜Ｄａｔ４において、判
断値Ｄａｔ１およびＤａｔ２が０となる。一方、信号値
を推定する画素位置が図１４に示すような色エッジにあ
る場合は、上記判断値Ｄａｔ１〜Ｄａｔ４のいずれの値
も大きくなる。したがって、判断値Ｄａｔ１〜Ｄａｔ４
の最小値Ｄｍｉｎを予め定められた閾値Ｔと比較し、最
小値Ｄｍｉｎが閾値Ｔ以下である場合、すなわち、 Dmin=min(Dat1,Dat2,Dat3,Dat4)≦Ｔ （２７） である場合には、その画素位置をグレーエッジであると
判定し、それ以外の場合、すなわち、 Dmin=min(Dat1,Dat2,Dat3,Dat4)＞Ｔ （２８） である場合には色エッジであると判定する。ここで、閾
値Ｔの値としては、信号値が８ビットで表される場合１
２８程度の値とする。そして、判定手段１０はこの判定
結果を判定情報Ｈとして変動値算出手段１３に入力す
る。
にある場合は、上記判断値Ｄａｔ１〜Ｄａｔ４のうちい
ずれか１つは必ず値が小さくなる。例えば、図１５に示
すグレーエッジの場合、上記式（２３）〜（２６）にお
いて算出される判断値Ｄａｔ１〜Ｄａｔ４において、判
断値Ｄａｔ１およびＤａｔ２が０となる。一方、信号値
を推定する画素位置が図１４に示すような色エッジにあ
る場合は、上記判断値Ｄａｔ１〜Ｄａｔ４のいずれの値
も大きくなる。したがって、判断値Ｄａｔ１〜Ｄａｔ４
の最小値Ｄｍｉｎを予め定められた閾値Ｔと比較し、最
小値Ｄｍｉｎが閾値Ｔ以下である場合、すなわち、 Dmin=min(Dat1,Dat2,Dat3,Dat4)≦Ｔ （２７） である場合には、その画素位置をグレーエッジであると
判定し、それ以外の場合、すなわち、 Dmin=min(Dat1,Dat2,Dat3,Dat4)＞Ｔ （２８） である場合には色エッジであると判定する。ここで、閾
値Ｔの値としては、信号値が８ビットで表される場合１
２８程度の値とする。そして、判定手段１０はこの判定
結果を判定情報Ｈとして変動値算出手段１３に入力す
る。
【００８４】変動値算出手段１３は、後述する重み付け
係数算出手段１４において、１と２、３と４および５と
６の処理により算出された矢印Ａ，Ｂ方向の信号値を重
み付け加算するための重み付け係数の算出に必要な変動
値ＳＡ，ＳＢを算出するものである。ここで、変動値Ｓ
Ａ，ＳＢとは信号値を推定する画素位置において、信号
値の変動量を表す値のことをいう。まず、１および２の
処理により算出された矢印Ａ，Ｂ方向のＲ信号の重み付
け係数を算出するための変動値ＳＡ，ＳＢの算出につい
て説明する。
係数算出手段１４において、１と２、３と４および５と
６の処理により算出された矢印Ａ，Ｂ方向の信号値を重
み付け加算するための重み付け係数の算出に必要な変動
値ＳＡ，ＳＢを算出するものである。ここで、変動値Ｓ
Ａ，ＳＢとは信号値を推定する画素位置において、信号
値の変動量を表す値のことをいう。まず、１および２の
処理により算出された矢印Ａ，Ｂ方向のＲ信号の重み付
け係数を算出するための変動値ＳＡ，ＳＢの算出につい
て説明する。
【００８５】まず、判定情報Ｈにより信号値を算出する
画素位置が色エッジにあると判定された場合、矢印Ａ方
向についての変動値ＳＡおよび矢印Ｂ方向についての変
動値ＳＢを下記の式（２９）、（３０）により算出す
る。なお、ここでは１および２の処理と同様に、図８に
示すＧ３３画素位置での信号値の変動値ＳＡ，ＳＢを算
出するものとする。
画素位置が色エッジにあると判定された場合、矢印Ａ方
向についての変動値ＳＡおよび矢印Ｂ方向についての変
動値ＳＢを下記の式（２９）、（３０）により算出す
る。なお、ここでは１および２の処理と同様に、図８に
示すＧ３３画素位置での信号値の変動値ＳＡ，ＳＢを算
出するものとする。
【００８６】 SA=|R(G33)A-G33|/(R(G33)A+G33) （２９） SB=|B(G33)B-G33|/(B(G33)B+G33) （３０） ここで、式（２９）におけるＲ（Ｇ３３）Ａは１の処理
において式（１２）により算出された信号値、式（３
０）におけるＢ（Ｇ３３）Ｂは第４のライン上のＧ３３
画素位置周辺の４点のＢ画素位置（Ｂ０６，Ｂ２４，Ｂ
４２，Ｂ６０）において得られるＢ信号に対して、１次
元補間演算を施すことにより算出された信号値である。
このように算出された変動値ＳＡは、Ｇ３３画素位置の
矢印Ａ方向における信号値の変化を表し、変動値ＳＢは
Ｇ３３画素位置の矢印Ｂ方向における信号値の変化を表
す。
において式（１２）により算出された信号値、式（３
０）におけるＢ（Ｇ３３）Ｂは第４のライン上のＧ３３
画素位置周辺の４点のＢ画素位置（Ｂ０６，Ｂ２４，Ｂ
４２，Ｂ６０）において得られるＢ信号に対して、１次
元補間演算を施すことにより算出された信号値である。
このように算出された変動値ＳＡは、Ｇ３３画素位置の
矢印Ａ方向における信号値の変化を表し、変動値ＳＢは
Ｇ３３画素位置の矢印Ｂ方向における信号値の変化を表
す。
【００８７】一方、判定情報Ｈにより信号値を算出する
画素位置がグレーエッジにあると判定された場合、変動
値ＳＡおよび変動値ＳＢを式（２９）、（３０）の分母
を省略した下記の式（３１）、（３２）により算出す
る。
画素位置がグレーエッジにあると判定された場合、変動
値ＳＡおよび変動値ＳＢを式（２９）、（３０）の分母
を省略した下記の式（３１）、（３２）により算出す
る。
【００８８】 SA=|R(G33)A-G33| （３１） SB=|B(G33)B-G33| （３２） 次に、３および４の処理により算出された矢印Ａ，Ｂ方
向のＲ信号の重み付け係数を算出するための変動値の算
出について説明する。
向のＲ信号の重み付け係数を算出するための変動値の算
出について説明する。
【００８９】まず、判定情報Ｈにより信号値を算出する
画素位置が色エッジにあると判定された場合、矢印Ａ方
向についての変動値ＳＡおよび矢印Ｂ方向についての変
動値ＳＢを下記の式（３３）、（３４）により算出す
る。なお、ここでは３および４の処理と同様に、図１０
に示すＧ３５画素位置での信号値の変動値を算出するも
のとする。
画素位置が色エッジにあると判定された場合、矢印Ａ方
向についての変動値ＳＡおよび矢印Ｂ方向についての変
動値ＳＢを下記の式（３３）、（３４）により算出す
る。なお、ここでは３および４の処理と同様に、図１０
に示すＧ３５画素位置での信号値の変動値を算出するも
のとする。
【００９０】 SA=|B(G35)A-G35|/(B(G35)A+G35) （３３） SB=|R(G35)B-G35|/(R(G35)B+G35) （３４） ここで、式（３３）におけるＢ（Ｇ３５）Ａは第２のラ
イン上のＧ３５画素位置周辺の４点のＢ画素位置（Ｂ０
２，Ｂ２４，Ｂ４６，Ｂ６８）において得られるＢ信号
に対して、１次元補間演算を施すことにより算出された
信号値、式（３４）におけるＲ（Ｇ３５）Ｂは上記４の
処理において式（２０）により算出された信号値であ
る。このように算出された変動値ＳＡは、Ｇ３５画素位
置の矢印Ａ方向における信号値の変化を表し、変動値Ｓ
ＢはＧ３５画素位置の矢印Ｂ方向における信号値の変化
を表す。
イン上のＧ３５画素位置周辺の４点のＢ画素位置（Ｂ０
２，Ｂ２４，Ｂ４６，Ｂ６８）において得られるＢ信号
に対して、１次元補間演算を施すことにより算出された
信号値、式（３４）におけるＲ（Ｇ３５）Ｂは上記４の
処理において式（２０）により算出された信号値であ
る。このように算出された変動値ＳＡは、Ｇ３５画素位
置の矢印Ａ方向における信号値の変化を表し、変動値Ｓ
ＢはＧ３５画素位置の矢印Ｂ方向における信号値の変化
を表す。
【００９１】一方、判定情報Ｈにより信号値を算出する
画素位置がグレーエッジにあると判定された場合、変動
値ＳＡおよび変動値ＳＢを式（３３）、（３４）の分母
を省略した下記の式（３５）、（３６）により算出す
る。
画素位置がグレーエッジにあると判定された場合、変動
値ＳＡおよび変動値ＳＢを式（３３）、（３４）の分母
を省略した下記の式（３５）、（３６）により算出す
る。
【００９２】 SA=|B(G35)A-G35| （３５） SB=|R(G35)B-G35| （３６） 次に、５および６の処理により算出された矢印Ａ，Ｂ方
向のＲ信号の重み付け係数を算出するための変動値の算
出について説明する。
向のＲ信号の重み付け係数を算出するための変動値の算
出について説明する。
【００９３】まず、判定情報Ｈにより信号値を算出する
画素位置が色エッジにあると判定された場合、矢印Ａ方
向についての変動値ＳＡおよび矢印Ｂ方向についての変
動値ＳＢを下記の式（３７）、（３８）により算出す
る。なお、ここでは５および６の処理と同様に、図１
２、図１３に示すＢ２４画素位置での信号値の変動値を
算出するものとする。
画素位置が色エッジにあると判定された場合、矢印Ａ方
向についての変動値ＳＡおよび矢印Ｂ方向についての変
動値ＳＢを下記の式（３７）、（３８）により算出す
る。なお、ここでは５および６の処理と同様に、図１
２、図１３に示すＢ２４画素位置での信号値の変動値を
算出するものとする。
【００９４】 SA=|B24-G(B24)A|/(B24+G(B24)A) （３７） SB=|B24-G(B24)B|/(B24+G(B24)B) （３８） ここで、式（３７）におけるＧ（Ｂ２４）Ａは、上記５
の処理においてＢ２４画素位置が存在する第２のライン
上のＧ信号に対して、矢印Ａ方向に１次元補間演算を施
すことにより算出した信号値、式（３８）におけるＧ
（Ｂ２４）Ｂは、上記６の処理においてＢ２４画素位置
が存在する第４のライン上のＧ信号に対して、矢印Ｂ方
向に１次元補間演算を施すことにより算出した信号値で
ある。このように算出された変動値ＳＡは、Ｂ２４画素
位置の矢印Ａ方向における信号値の変化を表し、変動値
ＳＢはＢ２４画素位置の矢印Ｂ方向における信号値の変
化を表す。
の処理においてＢ２４画素位置が存在する第２のライン
上のＧ信号に対して、矢印Ａ方向に１次元補間演算を施
すことにより算出した信号値、式（３８）におけるＧ
（Ｂ２４）Ｂは、上記６の処理においてＢ２４画素位置
が存在する第４のライン上のＧ信号に対して、矢印Ｂ方
向に１次元補間演算を施すことにより算出した信号値で
ある。このように算出された変動値ＳＡは、Ｂ２４画素
位置の矢印Ａ方向における信号値の変化を表し、変動値
ＳＢはＢ２４画素位置の矢印Ｂ方向における信号値の変
化を表す。
【００９５】一方、判定情報Ｈにより信号値を算出する
画素位置がグレーエッジにあると判定された場合、変動
値ＳＡおよび変動値ＳＢを式（３７）、（３８）の分母
を省略した下記の式（３９）、（４０）により算出す
る。
画素位置がグレーエッジにあると判定された場合、変動
値ＳＡおよび変動値ＳＢを式（３７）、（３８）の分母
を省略した下記の式（３９）、（４０）により算出す
る。
【００９６】 SA=|B24-G(B24)A| （３９） SB=|B24-G(B24)B| （４０） 以上のように算出された変動値ＳＡ，ＳＢは重み付け係
数算出手段１４に入力され、下記の式（４１）により、
重み付け係数Ｓｊが算出される。重み付け係数Ｓｊは、
重み付け加算手段１５に入力される。
数算出手段１４に入力され、下記の式（４１）により、
重み付け係数Ｓｊが算出される。重み付け係数Ｓｊは、
重み付け加算手段１５に入力される。
【００９７】 Sj=SA/(SA+SB) (if SA+SB=0 then Sj=0.5) （４１） なお、式（４１）においてＳＡ＋ＳＢ＝０となるのは、
ＳＡ，ＳＢ≧０であることから、ＳＡ＝ＳＢ＝０の場合
である。
ＳＡ，ＳＢ≧０であることから、ＳＡ＝ＳＢ＝０の場合
である。
【００９８】重み付け加算手段１５においては、１と
２、３と４および５と６のそれぞれの場合について、下
記の式（４２）〜（４４）により信号値が算出される。
なお、式（４２）〜（４４）は、それぞれ矢印Ａ方向に
おいてＲ，Ｇ画素が並ぶ第１のラインにおけるＧ３３画
素位置でのＲ（Ｇ３３）信号、矢印Ａ方向においてＢ，
Ｇ画素が並ぶ第２のラインにおけるＧ３５画素位置での
Ｒ（Ｇ３５）信号、矢印Ａ方向においてＢ，Ｇ画素が並
ぶ第２のラインにおけるＢ２４画素位置でのＲ（Ｂ２
４）信号を算出するものである。
２、３と４および５と６のそれぞれの場合について、下
記の式（４２）〜（４４）により信号値が算出される。
なお、式（４２）〜（４４）は、それぞれ矢印Ａ方向に
おいてＲ，Ｇ画素が並ぶ第１のラインにおけるＧ３３画
素位置でのＲ（Ｇ３３）信号、矢印Ａ方向においてＢ，
Ｇ画素が並ぶ第２のラインにおけるＧ３５画素位置での
Ｒ（Ｇ３５）信号、矢印Ａ方向においてＢ，Ｇ画素が並
ぶ第２のラインにおけるＢ２４画素位置でのＲ（Ｂ２
４）信号を算出するものである。
【００９９】 R(G33)=(1-Sj)*R(G33)A+Sj*R(G33)B （４２） R(G35)=(1-Sj)*R(G35)A+Sj*R(G35)B （４３） R(B24)=(1-Sj)*R(B24)A+Sj*R(B24)B （４４） なお、信号Ｑ１、Ｑ２を用いた一般式を式（４５）に示
す。
す。
【０１００】 QR,QB=(1-Sj)*Q1+Sj*Q2 （４５） これにより、信号値の変化が少ない方向ほど大きな重み
付けがなされて、Ｒ、Ｂ信号ＱＲ，ＱＢが算出されるこ
ととなる。
付けがなされて、Ｒ、Ｂ信号ＱＲ，ＱＢが算出されるこ
ととなる。
【０１０１】ここで、色エッジおよびグレーエッジの場
合における変動値ＳＡ，ＳＢの算出方法の差異について
説明する。図１６は変動値ＳＡ，ＳＢの算出方法の差異
を説明するための図である。図１６に示す画素配列にお
いては白（信号値が２５５）および黒（信号値が０また
は０に近い値）のグレーエッジが表されているものとす
る。なお、ここではＲ４４画素におけるＢ（Ｒ４４）信
号の算出について説明する。まず、矢印Ａ方向につい
て、下記の式（４６）によりＲ４４画素位置のＢ（Ｒ４
４）Ａ信号を求める。
合における変動値ＳＡ，ＳＢの算出方法の差異について
説明する。図１６は変動値ＳＡ，ＳＢの算出方法の差異
を説明するための図である。図１６に示す画素配列にお
いては白（信号値が２５５）および黒（信号値が０また
は０に近い値）のグレーエッジが表されているものとす
る。なお、ここではＲ４４画素におけるＢ（Ｒ４４）信
号の算出について説明する。まず、矢印Ａ方向につい
て、下記の式（４６）によりＲ４４画素位置のＢ（Ｒ４
４）Ａ信号を求める。
【０１０２】 B(R44)A=G(R44)A+((B(G35)A-G35)+(B(G53)A-G53))/2 =0+((2-0)+(255-255))/2=1 （４６） 但し、G(R44)A=0，B(G35)A=2，B(G53)A=255であり、こ
れらの値の算出には、式（１２）、（２０）に示すよう
な１次元Cubicスプライン補間演算を用いた。
れらの値の算出には、式（１２）、（２０）に示すよう
な１次元Cubicスプライン補間演算を用いた。
【０１０３】また、矢印Ｂ方向について、下記の式（４
７）によりＲ４４画素位置のＢ（Ｒ４４）Ｂ信号を求め
る。
７）によりＲ４４画素位置のＢ（Ｒ４４）Ｂ信号を求め
る。
【０１０４】 B(R44B)=G(R44)B+((B(G33)B-G33)+(B(G55)B-G55))/2 =103+((105-0)+(105-0))/2=208 （４７） 但し、G(R44)B≒103，B(G33)B≒105，B(G55)B≒105であ
り、これらの値の算出には、式（１２）、（２０）に示
すような１次元Cubicスプライン補間演算を用いた。
り、これらの値の算出には、式（１２）、（２０）に示
すような１次元Cubicスプライン補間演算を用いた。
【０１０５】そして、下記の式（４８）により変動値Ｓ
Ａ，ＳＢを求め、式（４９）によりＢ（Ｒ４４）Ａ信号
とＢ（Ｒ４４）Ｂ信号とを重み付け加算するための重み
付け係数Ｓｊを算出する。
Ａ，ＳＢを求め、式（４９）によりＢ（Ｒ４４）Ａ信号
とＢ（Ｒ４４）Ｂ信号とを重み付け加算するための重み
付け係数Ｓｊを算出する。
【０１０６】 SA=|R44-G(R44)A|/(R44+G(R44)A)=|1-0|/(1+0)=1 SB=|R44-G(R44)B|/(R44+G(R44)B)=|1-103|/(1+103)≒0.98 （４８） Sj=SA/(SA+SB)=1/(1+0.98)≒0.5 （４９） このように重み付け係数Ｓｊが求められると、下記の式
（５０）によりＢ（Ｒ４４）信号を算出する。
（５０）によりＢ（Ｒ４４）信号を算出する。
【０１０７】 B(R44)=(1-Sj)*B(R44)A+Sj*B(R44)B=0.5*1+0.5*208≒105 （５０） ここで、Ｒ４４画素位置は黒いエッジ上にあるため、Ｂ
（Ｒ４４）信号の値は０に近い値であることが好まし
い。しかしながら、上記式（４８）、（４９）に示すよ
うに重み付け係数Ｓｊを算出して式（５０）によりＢ
（Ｒ４４）信号の値を求めるとその値は１０５となるた
め、ここに偽色が発生することとなる。これは、矢印Ａ
方向において信号値の変動が少ないほど重み付け係数Ｓ
ｊの値は０に近くなるが、信号値を算出する画素位置周
辺の画素位置における信号値によっては、式（５０）に
示すように、重み付け係数Ｓｊが０に近い値とならない
場合があるからである。
（Ｒ４４）信号の値は０に近い値であることが好まし
い。しかしながら、上記式（４８）、（４９）に示すよ
うに重み付け係数Ｓｊを算出して式（５０）によりＢ
（Ｒ４４）信号の値を求めるとその値は１０５となるた
め、ここに偽色が発生することとなる。これは、矢印Ａ
方向において信号値の変動が少ないほど重み付け係数Ｓ
ｊの値は０に近くなるが、信号値を算出する画素位置周
辺の画素位置における信号値によっては、式（５０）に
示すように、重み付け係数Ｓｊが０に近い値とならない
場合があるからである。
【０１０８】一方、本実施形態においては、信号値を算
出する画素位置がグレーエッジにある場合には、式（４
８）において分母を省略して変動値ＳＡ，ＳＢを算出す
るものであり、Ｒ４４画素位置においてそのように変動
値ＳＡ，ＳＢを算出すると、 SA=|R44-G(R44)A|=|1-0|=1 SB=|R44-G(R44)B|=|1-103|=102 （５１） となり、重み付け係数Ｓｊは、 Sj=SA/(SA+SB)=1/(1+102)≒0.01 （５２） となる。このように算出された重み付け係数Ｓｊにより
Ｂ（Ｒ４４）信号を算出すると、 B(R44)=(1-Sj)*B(R44)A+Sj*B(R44)B=0.99*1+0.01*208≒2.99 （５３） となる。これにより、Ｂ（Ｒ４４）信号は０に近い値と
なり、その結果偽色を低減することができる。
出する画素位置がグレーエッジにある場合には、式（４
８）において分母を省略して変動値ＳＡ，ＳＢを算出す
るものであり、Ｒ４４画素位置においてそのように変動
値ＳＡ，ＳＢを算出すると、 SA=|R44-G(R44)A|=|1-0|=1 SB=|R44-G(R44)B|=|1-103|=102 （５１） となり、重み付け係数Ｓｊは、 Sj=SA/(SA+SB)=1/(1+102)≒0.01 （５２） となる。このように算出された重み付け係数Ｓｊにより
Ｂ（Ｒ４４）信号を算出すると、 B(R44)=(1-Sj)*B(R44)A+Sj*B(R44)B=0.99*1+0.01*208≒2.99 （５３） となる。これにより、Ｂ（Ｒ４４）信号は０に近い値と
なり、その結果偽色を低減することができる。
【０１０９】一方、色エッジであると判定された場合
に、式（５１）により変動値ＳＡ，ＳＢを算出しても偽
色を低減できるが、エッジ付近における細かな色味がな
くなってしまうため、画像が不自然なものとなる。した
がって、本実施形態においては、信号値を算出する画素
位置がグレーエッジであるか色エッジであるかに応じ
て、変動値ＳＡ，ＳＢの算出方法を変更するようにした
ものである。
に、式（５１）により変動値ＳＡ，ＳＢを算出しても偽
色を低減できるが、エッジ付近における細かな色味がな
くなってしまうため、画像が不自然なものとなる。した
がって、本実施形態においては、信号値を算出する画素
位置がグレーエッジであるか色エッジであるかに応じ
て、変動値ＳＡ，ＳＢの算出方法を変更するようにした
ものである。
【０１１０】なお、図２（ａ）に示すベイヤー配列の単
板ＣＣＤ１においては画素配列を４５度回転させると、
その画素配列は図２（ｂ）に示すハニカム配列と空孔画
素位置＊を除けば同様のものとなる。したがって、上記
の説明において、矢印Ａ方向を図２における紙面上下方
向、矢印Ｂ方向を図２における紙面左右方向とすること
により、ベイヤー配列の場合もハニカム配列の場合と同
様に、全画素位置におけるＲＧＢ信号を算出することが
できる。
板ＣＣＤ１においては画素配列を４５度回転させると、
その画素配列は図２（ｂ）に示すハニカム配列と空孔画
素位置＊を除けば同様のものとなる。したがって、上記
の説明において、矢印Ａ方向を図２における紙面上下方
向、矢印Ｂ方向を図２における紙面左右方向とすること
により、ベイヤー配列の場合もハニカム配列の場合と同
様に、全画素位置におけるＲＧＢ信号を算出することが
できる。
【０１１１】このようにして、全ての画素位置において
ＲＧＢ全ての信号値ＱＲ，ＱＧ，ＱＢが得られると、市
松正方補間手段５において、図３における空孔画素位置
＊でのＲＧＢ信号値を補間演算により算出して、画素が
正方状に配列されてなる補間済み画像データＳ１を得
る。この補間演算は、図１７に示すような空孔画素位置
＊周辺の４画素位置の信号値を用いた補間フィルタや、
図１８に示すように４×４画素についての２次元Cubic
スプライン補間演算を行う補間フィルタの補間係数の配
置を４５度傾斜させた補間係数の配置を有する補間フィ
ルタを用いて補間演算を行うことにより求めることがで
きる。なお、この空孔画素位置＊における信号値を算出
するための補間演算を市松正方補間演算とする。また、
補間演算についてはこれらに限定されるものではなく、
上述したように求められた各画素位置におけるＲＧＢ信
号をＹＣＣ輝度色差空間に変換し、ＹＣＣ毎に異なる補
間フィルタによる補間演算を施す等、空孔画素位置＊に
おける信号値を算出するための補間演算であればいかな
る方法をも採用可能である。
ＲＧＢ全ての信号値ＱＲ，ＱＧ，ＱＢが得られると、市
松正方補間手段５において、図３における空孔画素位置
＊でのＲＧＢ信号値を補間演算により算出して、画素が
正方状に配列されてなる補間済み画像データＳ１を得
る。この補間演算は、図１７に示すような空孔画素位置
＊周辺の４画素位置の信号値を用いた補間フィルタや、
図１８に示すように４×４画素についての２次元Cubic
スプライン補間演算を行う補間フィルタの補間係数の配
置を４５度傾斜させた補間係数の配置を有する補間フィ
ルタを用いて補間演算を行うことにより求めることがで
きる。なお、この空孔画素位置＊における信号値を算出
するための補間演算を市松正方補間演算とする。また、
補間演算についてはこれらに限定されるものではなく、
上述したように求められた各画素位置におけるＲＧＢ信
号をＹＣＣ輝度色差空間に変換し、ＹＣＣ毎に異なる補
間フィルタによる補間演算を施す等、空孔画素位置＊に
おける信号値を算出するための補間演算であればいかな
る方法をも採用可能である。
【０１１２】次いで、第１の実施形態の動作について説
明する。図１９は第１の実施形態の動作を示すフローチ
ャートである。まず、被写体を撮影して単板ＣＣＤ１に
おいて画像データＳ０を得る（ステップＳ１）。次い
で、補間手段２のＧ補間手段３において、上記（１）の
処理により所定方向におけるＲまたはＢ画素位置におけ
るＧ信号ＱＧが算出される（ステップＳ２）。そして、
補間手段２において、算出する信号をＲ信号にセットし
（ステップＳ３）、ＲＢ補間手段４においてＲ信号ＱＲ
が算出される（ステップＳ４）。
明する。図１９は第１の実施形態の動作を示すフローチ
ャートである。まず、被写体を撮影して単板ＣＣＤ１に
おいて画像データＳ０を得る（ステップＳ１）。次い
で、補間手段２のＧ補間手段３において、上記（１）の
処理により所定方向におけるＲまたはＢ画素位置におけ
るＧ信号ＱＧが算出される（ステップＳ２）。そして、
補間手段２において、算出する信号をＲ信号にセットし
（ステップＳ３）、ＲＢ補間手段４においてＲ信号ＱＲ
が算出される（ステップＳ４）。
【０１１３】図２０はステップＳ４の処理を示すフロー
チャートである。まず、上記処理１および２により信号
値を算出し（ステップＳ１１）、ステップＳ３および４
により信号値を算出し（ステップＳ１２）、処理５およ
び６により信号値を算出する（ステップＳ１３）。一
方、判定手段１０においては、信号値を算出する画素位
置がグレーエッジにあるか否かが判定され（ステップＳ
１４）、その判定結果を表す判定情報Ｈが変動値算出手
段１３に入力される。変動値算出手段１３においては、
信号値を算出する画素位置がグレーエッジにある場合に
は、上記式（３１）、（３２）等に示すようにグレーエ
ッジ用の変動値ＳＡ，ＳＢを算出する（ステップＳ１
５）。逆に色エッジである場合には、上記式（２９）、
（３０）等に示すように色エッジ用の変動値ＳＡ，ＳＢ
を算出する（ステップＳ１６）。そして、変動値ＳＡ，
ＳＢは重み付け係数算出手段１４に入力されて、ここで
重み付け係数Ｓｊが算出され（ステップＳ１７）、ステ
ップＳ１１，Ｓ１２，Ｓ１３の処理により算出された信
号値が重み付け加算されて、Ｒ信号ＱＲが算出される
（ステップＳ１８）。
チャートである。まず、上記処理１および２により信号
値を算出し（ステップＳ１１）、ステップＳ３および４
により信号値を算出し（ステップＳ１２）、処理５およ
び６により信号値を算出する（ステップＳ１３）。一
方、判定手段１０においては、信号値を算出する画素位
置がグレーエッジにあるか否かが判定され（ステップＳ
１４）、その判定結果を表す判定情報Ｈが変動値算出手
段１３に入力される。変動値算出手段１３においては、
信号値を算出する画素位置がグレーエッジにある場合に
は、上記式（３１）、（３２）等に示すようにグレーエ
ッジ用の変動値ＳＡ，ＳＢを算出する（ステップＳ１
５）。逆に色エッジである場合には、上記式（２９）、
（３０）等に示すように色エッジ用の変動値ＳＡ，ＳＢ
を算出する（ステップＳ１６）。そして、変動値ＳＡ，
ＳＢは重み付け係数算出手段１４に入力されて、ここで
重み付け係数Ｓｊが算出され（ステップＳ１７）、ステ
ップＳ１１，Ｓ１２，Ｓ１３の処理により算出された信
号値が重み付け加算されて、Ｒ信号ＱＲが算出される
（ステップＳ１８）。
【０１１４】図１９に戻り、Ｒ，Ｂ全ての信号を算出し
たか否かが判断され（ステップＳ５）、ステップＳ５が
否定された場合には、ステップＳ６において算出する信
号をＢ信号にセットし、ステップＳ４に戻ってステップ
Ｓ４，Ｓ５の処理を繰り返してＢ信号ＱＢが算出され
る。
たか否かが判断され（ステップＳ５）、ステップＳ５が
否定された場合には、ステップＳ６において算出する信
号をＢ信号にセットし、ステップＳ４に戻ってステップ
Ｓ４，Ｓ５の処理を繰り返してＢ信号ＱＢが算出され
る。
【０１１５】ステップＳ５が肯定されると、空孔画素位
置以外の全ての画素位置においてＲＧＢ信号ＱＲ，Ｑ
Ｇ，ＱＢが算出されたとして、市松正方補間手段５にお
いて、各画素の信号値に対して図１７あるいは図１８に
示す補間フィルタによる市松正方補間演算を行って、空
孔画素位置における信号値を算出し（ステップＳ７）、
処理を終了する。
置以外の全ての画素位置においてＲＧＢ信号ＱＲ，Ｑ
Ｇ，ＱＢが算出されたとして、市松正方補間手段５にお
いて、各画素の信号値に対して図１７あるいは図１８に
示す補間フィルタによる市松正方補間演算を行って、空
孔画素位置における信号値を算出し（ステップＳ７）、
処理を終了する。
【０１１６】そしてこれにより、図２（ｂ）に示すハニ
カム配列による単板ＣＣＤ１の空孔画素位置を含む全画
素位置におけるＲＧＢ信号を得ることができ、全画素位
置においてＲＧＢ信号を有する補間済み画像データＳ１
を得ることができる。
カム配列による単板ＣＣＤ１の空孔画素位置を含む全画
素位置におけるＲＧＢ信号を得ることができ、全画素位
置においてＲＧＢ信号を有する補間済み画像データＳ１
を得ることができる。
【０１１７】なお、図１９に示すフローチャートのステ
ップＳ３においては、算出する信号をＲ信号にセットし
ているが、先にＢ信号にセットしてもよい。この場合、
ステップＳ５が否定されるとステップＳ６において、算
出する信号がＢ信号からＲ信号に切り替えられることと
なる。
ップＳ３においては、算出する信号をＲ信号にセットし
ているが、先にＢ信号にセットしてもよい。この場合、
ステップＳ５が否定されるとステップＳ６において、算
出する信号がＢ信号からＲ信号に切り替えられることと
なる。
【０１１８】このように、第１の実施形態によれば、信
号値を算出する画素位置がグレーエッジにあるか色エッ
ジにあるかを判定し、判定結果に応じて重み付け係数Ｓ
ｊを算出するための変動値ＳＡ，ＳＢの算出方法を変更
するようにしたため、信号値を算出する画素位置がグレ
ーエッジにある場合であっても、偽色を低減できる。ま
た、信号値を算出する画素位置が色エッジにある場合に
は、エッジ付近における細かい色味を残して自然な感じ
となる画像を得ることができる。
号値を算出する画素位置がグレーエッジにあるか色エッ
ジにあるかを判定し、判定結果に応じて重み付け係数Ｓ
ｊを算出するための変動値ＳＡ，ＳＢの算出方法を変更
するようにしたため、信号値を算出する画素位置がグレ
ーエッジにある場合であっても、偽色を低減できる。ま
た、信号値を算出する画素位置が色エッジにある場合に
は、エッジ付近における細かい色味を残して自然な感じ
となる画像を得ることができる。
【０１１９】次いで、本発明の第２の実施形態について
説明する。
説明する。
【０１２０】図２１は本発明の第２の実施形態による画
像処理装置のＲＢ補間手段の構成を示す概略ブロック図
である。なお、図２１において図５と同一の構成につい
ては同一の参照番号を付し、詳細な説明は省略する。第
２の実施形態においては、判定手段１０に代えて、信号
値を推定する画素位置がグレーエッジにあるか色エッジ
にあるかの判定に加えて、単色の信号値からなる単色平
坦部にあるか否かを判定する判定手段２１を備え、さら
に、画素位置が単色平坦部にあると判定された場合に、
線形補間演算によりその画素位置におけるＲ信号ＱＲお
よびＢ信号ＱＢを算出する線形補間手段２２を備えた点
が第１の実施形態と異なるものである。
像処理装置のＲＢ補間手段の構成を示す概略ブロック図
である。なお、図２１において図５と同一の構成につい
ては同一の参照番号を付し、詳細な説明は省略する。第
２の実施形態においては、判定手段１０に代えて、信号
値を推定する画素位置がグレーエッジにあるか色エッジ
にあるかの判定に加えて、単色の信号値からなる単色平
坦部にあるか否かを判定する判定手段２１を備え、さら
に、画素位置が単色平坦部にあると判定された場合に、
線形補間演算によりその画素位置におけるＲ信号ＱＲお
よびＢ信号ＱＢを算出する線形補間手段２２を備えた点
が第１の実施形態と異なるものである。
【０１２１】判定手段２１におけるグレーエッジにある
か色エッジにあるかの判定処理は、第１の実施形態にお
ける判定手段１０における判定処理と同一であり、グレ
ーエッジまたは色エッジにあると判定された場合は、そ
の判定結果を表す判定情報Ｈが変動値算出手段１３に入
力され、第１の実施形態と同様に変動値ＳＡ，ＳＢが算
出され、さらに重み付け係数算出手段１４において重み
付け係数Ｓｊが算出される。この場合、第１の実施形態
と同様に第１補間手段１１および第２補間手段１２にお
いて、各画素位置における矢印Ａ方向および矢印Ｂ方向
の信号Ｑ１，Ｑ２が算出され、その信号値が重み付け加
算手段１５に入力されて、重み付け係数Ｓｊにより重み
付け加算されてＲ信号ＱＲおよびＢ信号ＱＢが算出され
る。
か色エッジにあるかの判定処理は、第１の実施形態にお
ける判定手段１０における判定処理と同一であり、グレ
ーエッジまたは色エッジにあると判定された場合は、そ
の判定結果を表す判定情報Ｈが変動値算出手段１３に入
力され、第１の実施形態と同様に変動値ＳＡ，ＳＢが算
出され、さらに重み付け係数算出手段１４において重み
付け係数Ｓｊが算出される。この場合、第１の実施形態
と同様に第１補間手段１１および第２補間手段１２にお
いて、各画素位置における矢印Ａ方向および矢印Ｂ方向
の信号Ｑ１，Ｑ２が算出され、その信号値が重み付け加
算手段１５に入力されて、重み付け係数Ｓｊにより重み
付け加算されてＲ信号ＱＲおよびＢ信号ＱＢが算出され
る。
【０１２２】以下、判定手段２１における単色平坦部に
あるか否かの判定について説明する。図２２は緑（Ｇ）
の単色平坦部の信号値を示す図、図２３は青（Ｂ）の単
色平坦部の信号値を示す図、図２４は赤（Ｒ）の単色平
坦部の信号値を示す図である。図２２においてはＧ画素
位置のみが２５５の信号値を有し、図２３においてはＢ
画素位置のみが２５５の信号値を有し、図２４において
はＲ画素位置のみが２５５の信号値を有するものとなっ
ている。判定手段２１は、信号値を算出する画素位置お
よびその画素位置周辺のＲ信号の平均値をＤａｔ１１、
Ｇ信号の平均値をＤａｔ１２、Ｂ信号の平均値をＤａｔ
１３として求める。例えば、図２２から図２４に示す画
素配列において、Ｒ４４画素位置についてみると、 Dat11=(R22+R26+R44+R62+R66)/5 Dat12=(G33+G35+G53+G55)/4 （５４） Dat13=(B24+B42+B46+B64)/4 により、平均値Ｄａｔ１１〜Ｄａｔ１３を算出する。
あるか否かの判定について説明する。図２２は緑（Ｇ）
の単色平坦部の信号値を示す図、図２３は青（Ｂ）の単
色平坦部の信号値を示す図、図２４は赤（Ｒ）の単色平
坦部の信号値を示す図である。図２２においてはＧ画素
位置のみが２５５の信号値を有し、図２３においてはＢ
画素位置のみが２５５の信号値を有し、図２４において
はＲ画素位置のみが２５５の信号値を有するものとなっ
ている。判定手段２１は、信号値を算出する画素位置お
よびその画素位置周辺のＲ信号の平均値をＤａｔ１１、
Ｇ信号の平均値をＤａｔ１２、Ｂ信号の平均値をＤａｔ
１３として求める。例えば、図２２から図２４に示す画
素配列において、Ｒ４４画素位置についてみると、 Dat11=(R22+R26+R44+R62+R66)/5 Dat12=(G33+G35+G53+G55)/4 （５４） Dat13=(B24+B42+B46+B64)/4 により、平均値Ｄａｔ１１〜Ｄａｔ１３を算出する。
【０１２３】また、Ｂ４２画素位置については、 Dat11=(R22+R40+R44+R62)/4 Dat12=(G31+G33+G51+G53)/4 （５５） Dat13=(B20+B24+B42+B60+B64)/5 により、平均値Ｄａｔ１１〜Ｄａｔ１３を算出する。
【０１２４】さらに、Ｇ３３画素位置については、 Dat11=(R04+R22+R44+R62)/4 Dat12=(G11+G13+G15+G31+G33+G35+G51+G53+G55)/9 （５６） Dat13=(B02+B24+B42+B64)/4 により、平均値Ｄａｔ１１〜Ｄａｔ１３を算出する。
【０１２５】そして、各平均値Ｄａｔ１１〜Ｄａｔ１３
の差分値の絶対値|Dat11-Dat12|、|Dat12-Dat13|、|Dat
13-Dat11|を算出し、これらの和が予め定められた閾値
Ｔ１より大きいか否かを判断し、大きい場合、すなわち
下記の式（５７）の条件を満たす場合にはその画素位置
は単色平坦部にあると見なすものである。
の差分値の絶対値|Dat11-Dat12|、|Dat12-Dat13|、|Dat
13-Dat11|を算出し、これらの和が予め定められた閾値
Ｔ１より大きいか否かを判断し、大きい場合、すなわち
下記の式（５７）の条件を満たす場合にはその画素位置
は単色平坦部にあると見なすものである。
【０１２６】 |Dat11-Dat12|+|Dat12-Dat13|+|Dat13-Dat11|>T1 （５７） すなわち、図２２に示すＧの単色平坦部の場合、Ｇ画素
位置のみが信号値を有するため、式（５４）〜（５６）
においては、平均値Ｄａｔ１２のみが値を有し、Ｄａｔ
１１，Ｄａｔ１３は値を有さない。したがって、|Dat11
-Dat12|、|Dat12-Dat13|の値は非常に大きい値となる。
また、図２３に示すＢの単色平坦部の場合、Ｂ画素位置
のみが信号値を有するため、式（５４）〜（５６）にお
いては、平均値Ｄａｔ１３のみが値を有し、Ｄａｔ１
１，Ｄａｔ１２は値を有さない。したがって、|Dat12-D
at13|、|Dat13-Dat11|の値は非常に大きい値となる。さ
らに、図２４に示すＲの単色平坦部の場合、Ｒ画素位置
のみが信号値を有するため、式（５４）〜（５６）にお
いては、平均値Ｄａｔ１１のみが値を有し、Ｄａｔ１
２，Ｄａｔ１３は値を有さない。したがって、|Dat11-D
at12|、|Dat13-Dat11|の値は非常に大きい値となる。
位置のみが信号値を有するため、式（５４）〜（５６）
においては、平均値Ｄａｔ１２のみが値を有し、Ｄａｔ
１１，Ｄａｔ１３は値を有さない。したがって、|Dat11
-Dat12|、|Dat12-Dat13|の値は非常に大きい値となる。
また、図２３に示すＢの単色平坦部の場合、Ｂ画素位置
のみが信号値を有するため、式（５４）〜（５６）にお
いては、平均値Ｄａｔ１３のみが値を有し、Ｄａｔ１
１，Ｄａｔ１２は値を有さない。したがって、|Dat12-D
at13|、|Dat13-Dat11|の値は非常に大きい値となる。さ
らに、図２４に示すＲの単色平坦部の場合、Ｒ画素位置
のみが信号値を有するため、式（５４）〜（５６）にお
いては、平均値Ｄａｔ１１のみが値を有し、Ｄａｔ１
２，Ｄａｔ１３は値を有さない。したがって、|Dat11-D
at12|、|Dat13-Dat11|の値は非常に大きい値となる。
【０１２７】このように、信号値を算出する画素位置が
単色平坦部にあると、|Dat11-Dat12|、|Dat12-Dat13|、
|Dat13-Dat11|のうち２つは大きな値となるため、これ
らの値の和も大きな値となる。したがって、閾値Ｔ１を
適切に設定しておき、上記式（５７）に示す関係を満た
すか否かを判断することにより、画素位置が単色平坦部
にあるか否かを判定することができる。
単色平坦部にあると、|Dat11-Dat12|、|Dat12-Dat13|、
|Dat13-Dat11|のうち２つは大きな値となるため、これ
らの値の和も大きな値となる。したがって、閾値Ｔ１を
適切に設定しておき、上記式（５７）に示す関係を満た
すか否かを判断することにより、画素位置が単色平坦部
にあるか否かを判定することができる。
【０１２８】ここで、信号値を算出する画素位置が単色
平坦部にある場合には、上記第１補間演算１１および第
２補間演算１２における信号値の算出を行わなくとも、
単純に線形補間演算を行っても偽色は発生しないもので
ある。したがって、判定手段２１は、信号値を算出する
画素位置が単色平坦部にあると判定された場合には、画
像データＳ０を線形補間手段２２に入力する。そして、
線形補間手段２２においては、信号値を算出する画素位
置とその周囲の画素位置との信号値を用いて線形補間演
算を行って、信号値を算出する。
平坦部にある場合には、上記第１補間演算１１および第
２補間演算１２における信号値の算出を行わなくとも、
単純に線形補間演算を行っても偽色は発生しないもので
ある。したがって、判定手段２１は、信号値を算出する
画素位置が単色平坦部にあると判定された場合には、画
像データＳ０を線形補間手段２２に入力する。そして、
線形補間手段２２においては、信号値を算出する画素位
置とその周囲の画素位置との信号値を用いて線形補間演
算を行って、信号値を算出する。
【０１２９】例えば、Ｇ画素位置におけるＲ信号を算出
する場合、信号値を算出する画素位置をＧ３３画素位置
とすると、 R(G33)=(R22+R24)/2 （５８） によりＲ（Ｇ３３）信号を算出する。また、Ｇ３３画素
位置におけるＢ（Ｇ３３）信号を算出する場合、 B(G33)=(B24+B42)/2 （５９） によりＢ（Ｇ３３）信号を算出する。
する場合、信号値を算出する画素位置をＧ３３画素位置
とすると、 R(G33)=(R22+R24)/2 （５８） によりＲ（Ｇ３３）信号を算出する。また、Ｇ３３画素
位置におけるＢ（Ｇ３３）信号を算出する場合、 B(G33)=(B24+B42)/2 （５９） によりＢ（Ｇ３３）信号を算出する。
【０１３０】また、Ｒ画素位置におけるＢ信号を算出す
る場合、信号値を算出する画素位置をＲ４４とすると、 B(R44)=(B24+B42+B46+B64)/4 （６０） によりＢ（Ｒ４４）信号を算出する。
る場合、信号値を算出する画素位置をＲ４４とすると、 B(R44)=(B24+B42+B46+B64)/4 （６０） によりＢ（Ｒ４４）信号を算出する。
【０１３１】さらに、Ｂ画素位置におけるＲ信号を算出
する場合、信号値を算出する画素位置をＢ２４とする
と、 R(B24)=(R04+R22+R26+R44)/4 （６１） によりＲ（Ｂ２４）信号を算出する。
する場合、信号値を算出する画素位置をＢ２４とする
と、 R(B24)=(R04+R22+R26+R44)/4 （６１） によりＲ（Ｂ２４）信号を算出する。
【０１３２】次いで、第２の実施形態の動作について説
明する。なお、第２の実施形態の動作は基本的には図１
９に示す第１の実施形態の動作と同一であり、図１９に
おけるステップＳ４における処理のみが異なるものであ
るため、ここではステップＳ４における信号算出処理に
ついてのみ説明する。図２５は第２の実施形態における
信号算出処理の動作を示すフローチャートである。ま
ず、判定手段２１において、上記式（５７）により、信
号値を算出する画素位置が単色平坦部にあるか否かが判
断される（ステップＳ２１）。単色平坦部にある場合に
はステップＳ２１が肯定され、線形補間手段２２におい
て上記式（５８）および（６１）に示す線形補間演算に
よりＲ信号ＱＲが算出され（ステップＳ３０）、処理を
終了する。なお、Ｂ信号ＱＢについては、上記式（５
９）および（６０）に示す線形補間演算により算出され
る。
明する。なお、第２の実施形態の動作は基本的には図１
９に示す第１の実施形態の動作と同一であり、図１９に
おけるステップＳ４における処理のみが異なるものであ
るため、ここではステップＳ４における信号算出処理に
ついてのみ説明する。図２５は第２の実施形態における
信号算出処理の動作を示すフローチャートである。ま
ず、判定手段２１において、上記式（５７）により、信
号値を算出する画素位置が単色平坦部にあるか否かが判
断される（ステップＳ２１）。単色平坦部にある場合に
はステップＳ２１が肯定され、線形補間手段２２におい
て上記式（５８）および（６１）に示す線形補間演算に
よりＲ信号ＱＲが算出され（ステップＳ３０）、処理を
終了する。なお、Ｂ信号ＱＢについては、上記式（５
９）および（６０）に示す線形補間演算により算出され
る。
【０１３３】ステップＳ２１が否定された場合は、ステ
ップＳ２２に進み、第１の実施形態と同様に、処理１お
よび２による信号値の算出（ステップＳ２２）、処理３
および４による信号値の算出（ステップＳ２３）、処理
５および６による信号値の算出（ステップＳ２４）、グ
レーエッジか否かの判断（ステップＳ２５）、グレーエ
ッジ用変動値算出（ステップＳ２６）、色エッジ用変動
値算出（ステップＳ２７）、重み付け係数算出（ステッ
プＳ２８）および重み付け加算（ステップＳ２９）が行
われて、Ｒ信号ＱＲ、Ｂ信号ＱＢが算出される。
ップＳ２２に進み、第１の実施形態と同様に、処理１お
よび２による信号値の算出（ステップＳ２２）、処理３
および４による信号値の算出（ステップＳ２３）、処理
５および６による信号値の算出（ステップＳ２４）、グ
レーエッジか否かの判断（ステップＳ２５）、グレーエ
ッジ用変動値算出（ステップＳ２６）、色エッジ用変動
値算出（ステップＳ２７）、重み付け係数算出（ステッ
プＳ２８）および重み付け加算（ステップＳ２９）が行
われて、Ｒ信号ＱＲ、Ｂ信号ＱＢが算出される。
【０１３４】このように、第２の実施形態においては、
Ｒ、Ｂ信号ＱＲ、ＱＢを算出する際に、まず信号値を算
出する画素位置が単色平坦部にあるか否かを判断し、単
色平坦部にある場合には、線形補間演算により信号値を
算出するようにしたため、全ての画素について第１の実
施形態の方法により信号値を算出する場合と比較して、
単色平坦部の画素位置については演算量を低減すること
ができ、これにより高速に処理を行うことができること
となる。
Ｒ、Ｂ信号ＱＲ、ＱＢを算出する際に、まず信号値を算
出する画素位置が単色平坦部にあるか否かを判断し、単
色平坦部にある場合には、線形補間演算により信号値を
算出するようにしたため、全ての画素について第１の実
施形態の方法により信号値を算出する場合と比較して、
単色平坦部の画素位置については演算量を低減すること
ができ、これにより高速に処理を行うことができること
となる。
【０１３５】ここで、単板ＣＣＤ１を使用した撮像装置
においては、偽色を低減するために、画像データを得る
ための撮像系において、光学ローパスフィルタを用いる
必要がある。図２６はハニカム配列の単板ＣＣＤを用い
たデジタルカメラの撮像系を示す図、図２７はハニカム
配列の単板ＣＣＤにおいて得られた信号値の周波数特性
を示す図である。なお、図２７ではｆｓ／２がナイキス
ト周波数であり、図２７（ａ）における実線は従来の処
理により再現可能な周波数帯域、図２７（ｂ）における
実線は本実施形態の処理により再現可能な周波数帯域を
それぞれ示している。図２６に示すように、デジタルカ
メラの撮像系は被写体から順に撮影レンズ３１、光学ロ
ーパスフィルタ３２およびハニカム配列の単板ＣＣＤ３
３が配列されてなる。なお、光軸をＸで示す。上記特開
平１０−２０９０６号、同１０−１３６３９１号等に記
載された方法においては、偽色の低減効果が不十分であ
るため、図２７（ａ）に示す実線より外側の周波数帯域
をカットするための帯域の狭い光学ローパスフィルタ３
２を使用する必要がある。しかしながら、このような帯
域の狭い光学ローパスフィルタを使用すると、得られる
画像の解像度が低下する。また、このような周波数帯域
の狭い光学ローパスフィルタ３２を作成するには、中心
波長６３０〜７８５ｎｍ程度の１／４波長板を図２８
（ａ）に示すように３枚張り合わせる必要があるため、
撮像系の構成が大型化する。
においては、偽色を低減するために、画像データを得る
ための撮像系において、光学ローパスフィルタを用いる
必要がある。図２６はハニカム配列の単板ＣＣＤを用い
たデジタルカメラの撮像系を示す図、図２７はハニカム
配列の単板ＣＣＤにおいて得られた信号値の周波数特性
を示す図である。なお、図２７ではｆｓ／２がナイキス
ト周波数であり、図２７（ａ）における実線は従来の処
理により再現可能な周波数帯域、図２７（ｂ）における
実線は本実施形態の処理により再現可能な周波数帯域を
それぞれ示している。図２６に示すように、デジタルカ
メラの撮像系は被写体から順に撮影レンズ３１、光学ロ
ーパスフィルタ３２およびハニカム配列の単板ＣＣＤ３
３が配列されてなる。なお、光軸をＸで示す。上記特開
平１０−２０９０６号、同１０−１３６３９１号等に記
載された方法においては、偽色の低減効果が不十分であ
るため、図２７（ａ）に示す実線より外側の周波数帯域
をカットするための帯域の狭い光学ローパスフィルタ３
２を使用する必要がある。しかしながら、このような帯
域の狭い光学ローパスフィルタを使用すると、得られる
画像の解像度が低下する。また、このような周波数帯域
の狭い光学ローパスフィルタ３２を作成するには、中心
波長６３０〜７８５ｎｍ程度の１／４波長板を図２８
（ａ）に示すように３枚張り合わせる必要があるため、
撮像系の構成が大型化する。
【０１３６】本発明によれば、従来の方法と比較して偽
色を低減することができるため、光学ローパスフィルタ
３２の周波数帯域を図２７（ｂ）に示すように広げるこ
とができ、これにより、単板ＣＣＤ３３において得られ
る画像データＳ０により表される画像の解像度を向上さ
せることができる。また、図２８（ｂ）に示すように２
枚の１／４波長板を張り合わせることにより、図２７
（ｂ）に示す特性を得ることができるため、撮像系を小
型化することができる。
色を低減することができるため、光学ローパスフィルタ
３２の周波数帯域を図２７（ｂ）に示すように広げるこ
とができ、これにより、単板ＣＣＤ３３において得られ
る画像データＳ０により表される画像の解像度を向上さ
せることができる。また、図２８（ｂ）に示すように２
枚の１／４波長板を張り合わせることにより、図２７
（ｂ）に示す特性を得ることができるため、撮像系を小
型化することができる。
【０１３７】なお、上記第１および第２の実施形態にお
いては、重み付け係数算出手段１４において、式（４
１）に示すように、変動値ＳＡに対して（ＳＡ＋ＳＢ）
による除算を行うことにより、重み付け係数Ｓｊを算出
している。
いては、重み付け係数算出手段１４において、式（４
１）に示すように、変動値ＳＡに対して（ＳＡ＋ＳＢ）
による除算を行うことにより、重み付け係数Ｓｊを算出
している。
【０１３８】 Sj=SA/(SA+SB) (if SA+SB=0 then Sj=0.5) （４１） ここで、種々の演算を行う演算回路においては、演算が
加算、減算および乗算のみである場合には、比較的少な
い演算素子により回路を構成することができる。しかし
ながら、上記式（４１）のように除算が含まれると、演
算が複雑となるため多数の演算素子が必要となり回路の
構成が複雑化するとともに、演算に長時間を要するもの
となる。
加算、減算および乗算のみである場合には、比較的少な
い演算素子により回路を構成することができる。しかし
ながら、上記式（４１）のように除算が含まれると、演
算が複雑となるため多数の演算素子が必要となり回路の
構成が複雑化するとともに、演算に長時間を要するもの
となる。
【０１３９】ここで、重み付け係数Ｓｊを式（４１）に
より算出する場合、これを変動量ＳＢについて解くと、 SB=((1-Sj)/Sj)*SA （４１′） となる。これは重み付け係数Ｓｊが一定であると、変動
値ＳＡと変動値ＳＢとの関係は、比例関係にあることを
示している。したがって、ｘ軸を変動値ＳＡ、ｙ軸を変
動値ＳＢとする２次元平面を設定すると、この２次元平
面上においては、図２９に示すように、重み付け係数Ｓ
ｊはその重み付け係数に応じた傾きを有する原点を通る
（厳密には原点を含まないが）直線として表されるもの
となる。以下、この関係を用いて式（４１）における除
算処理を省略する実施形態を第３の実施形態として説明
する。
より算出する場合、これを変動量ＳＢについて解くと、 SB=((1-Sj)/Sj)*SA （４１′） となる。これは重み付け係数Ｓｊが一定であると、変動
値ＳＡと変動値ＳＢとの関係は、比例関係にあることを
示している。したがって、ｘ軸を変動値ＳＡ、ｙ軸を変
動値ＳＢとする２次元平面を設定すると、この２次元平
面上においては、図２９に示すように、重み付け係数Ｓ
ｊはその重み付け係数に応じた傾きを有する原点を通る
（厳密には原点を含まないが）直線として表されるもの
となる。以下、この関係を用いて式（４１）における除
算処理を省略する実施形態を第３の実施形態として説明
する。
【０１４０】図３０は第３の実施形態の処理を説明する
ための図、図３１は第３の実施形態による画像処理装置
のＲＢ補間手段の構成を示す概略ブロック図である。な
お、図３１において図５と同一の構成については同一の
参照番号を付し、詳細な説明は省略する。第３の実施形
態においては、重み付け係数算出手段１４に代えて、第
１補間手段１１および第２補間手段１２において得られ
た信号Ｑ１，Ｑ２を重み付け補間する際の重み付け係数
Ｓｊに対する変動値ＳＡ，ＳＢの対応関係を、複数の重
み付け係数について記憶したメモリ１４Ａと、変動値算
出手段１３において算出された変動値ＳＡ，ＳＢに基づ
いて、メモリ１４Ａに記憶された対応関係を参照して複
数の重み付け係数から一の重み付け係数Ｓｊを選択する
重み付け係数選択手段２４とを備え、重み付け加算手段
１５においては、重み付け係数選択手段２４において選
択された重み付け係数Ｓｊにより、重み付け加算を行う
ようにしたものである。なお、第３の実施形態において
は、重み付け係数選択手段２４およびメモリ１４Ａが本
発明における重み付け係数設定手段と観念される。
ための図、図３１は第３の実施形態による画像処理装置
のＲＢ補間手段の構成を示す概略ブロック図である。な
お、図３１において図５と同一の構成については同一の
参照番号を付し、詳細な説明は省略する。第３の実施形
態においては、重み付け係数算出手段１４に代えて、第
１補間手段１１および第２補間手段１２において得られ
た信号Ｑ１，Ｑ２を重み付け補間する際の重み付け係数
Ｓｊに対する変動値ＳＡ，ＳＢの対応関係を、複数の重
み付け係数について記憶したメモリ１４Ａと、変動値算
出手段１３において算出された変動値ＳＡ，ＳＢに基づ
いて、メモリ１４Ａに記憶された対応関係を参照して複
数の重み付け係数から一の重み付け係数Ｓｊを選択する
重み付け係数選択手段２４とを備え、重み付け加算手段
１５においては、重み付け係数選択手段２４において選
択された重み付け係数Ｓｊにより、重み付け加算を行う
ようにしたものである。なお、第３の実施形態において
は、重み付け係数選択手段２４およびメモリ１４Ａが本
発明における重み付け係数設定手段と観念される。
【０１４１】まず、重み付け係数Ｓｊに対する変動値Ｓ
Ａ，ＳＢの対応関係の求め方について説明する。第３の
実施形態においては、重み付け係数Ｓｊが一定であると
変動値ＳＡと変動値ＳＢとは比例関係にあり、ＳＡ−Ｓ
Ｂ平面においては重み付け係数Ｓｊはその値に応じた傾
きを有する直線となる、ということを利用して、まず重
み付け係数Ｓｊを図２９に示すようにＳｊ＝０，０．２
５，０．５，０．７５，１．０の５段階に量子化する。
そして、図３０に示すようにＳＡ−ＳＢ平面上において
Ｓｊ＝０，０．１２５，０．３７５，０．６２５，０．
８７５，１を境界として５つの領域Ａ１〜Ａ５を設定
し、各領域Ａ１〜Ａ５をそれぞれＳｊ＝０，０．２５，
０．５，０．７５，１．０に対応付ける。ここで、Ｓｊ
＝０．１２５の場合ＳＢ＝７ＳＡ、Ｓｊ＝０．３７５の
場合ＳＢ＝５／３ＳＡ、Ｓｊ＝０．６２５の場合ＳＢ＝
３／５ＳＡ、Ｓｊ＝０．８７５の場合ＳＢ＝１／７ＳＡ
となる。
Ａ，ＳＢの対応関係の求め方について説明する。第３の
実施形態においては、重み付け係数Ｓｊが一定であると
変動値ＳＡと変動値ＳＢとは比例関係にあり、ＳＡ−Ｓ
Ｂ平面においては重み付け係数Ｓｊはその値に応じた傾
きを有する直線となる、ということを利用して、まず重
み付け係数Ｓｊを図２９に示すようにＳｊ＝０，０．２
５，０．５，０．７５，１．０の５段階に量子化する。
そして、図３０に示すようにＳＡ−ＳＢ平面上において
Ｓｊ＝０，０．１２５，０．３７５，０．６２５，０．
８７５，１を境界として５つの領域Ａ１〜Ａ５を設定
し、各領域Ａ１〜Ａ５をそれぞれＳｊ＝０，０．２５，
０．５，０．７５，１．０に対応付ける。ここで、Ｓｊ
＝０．１２５の場合ＳＢ＝７ＳＡ、Ｓｊ＝０．３７５の
場合ＳＢ＝５／３ＳＡ、Ｓｊ＝０．６２５の場合ＳＢ＝
３／５ＳＡ、Ｓｊ＝０．８７５の場合ＳＢ＝１／７ＳＡ
となる。
【０１４２】したがって、図３１に示すように、メモリ
１４Ａを設け、このメモリ１４Ａに図３０に示す関係を
テーブルとして記憶させておき、重み付け係数選択手段
２４において変動値ＳＡ，ＳＢに基づいてこのテーブル
を参照することにより、式（４１）に示すように除算を
行うことなく重み付け係数Ｓｊを求めることができる。
例えば、算出された変動値ＳＡ，ＳＢの値が３／５ＳＡ
＜ＳＢ≦５／３ＳＡの関係、すなわち３ＳＡ＜５ＳＢか
つ５ＳＡ≧３ＳＢの関係にある場合には、変動値ＳＡ，
ＳＢは図３０に示すグラフの領域Ａ３にプロットされる
ことから、重み付け係数をＳｊ＝０．５として求めるこ
とができる。また、７ＳＡ＜ＳＢの関係にある場合には
プロットは領域Ａ１にあるためＳｊ＝０、５／３ＳＡ＜
ＳＢ≦７ＳＡの関係、すなわち５ＳＡ＜３ＳＢかつ７Ｓ
Ａ≧ＳＢの関係にある場合にはプロットは領域Ａ２にあ
るためＳｊ＝０．２５、１／７ＳＡ＜ＳＢ≦３／５ＳＡ
の関係、すなわちＳＡ＜７ＳＢかつ３ＳＡ≧５ＳＢの関
係にある場合にはプロットは領域Ａ４にあるためＳｊ＝
０．７５、ＳＢ≦１／７ＳＡの関係、すなわちＳＡ≧７
ＳＢの関係にある場合にはプロットは領域Ａ５にあるた
めＳｊ＝１として求めることができる。
１４Ａを設け、このメモリ１４Ａに図３０に示す関係を
テーブルとして記憶させておき、重み付け係数選択手段
２４において変動値ＳＡ，ＳＢに基づいてこのテーブル
を参照することにより、式（４１）に示すように除算を
行うことなく重み付け係数Ｓｊを求めることができる。
例えば、算出された変動値ＳＡ，ＳＢの値が３／５ＳＡ
＜ＳＢ≦５／３ＳＡの関係、すなわち３ＳＡ＜５ＳＢか
つ５ＳＡ≧３ＳＢの関係にある場合には、変動値ＳＡ，
ＳＢは図３０に示すグラフの領域Ａ３にプロットされる
ことから、重み付け係数をＳｊ＝０．５として求めるこ
とができる。また、７ＳＡ＜ＳＢの関係にある場合には
プロットは領域Ａ１にあるためＳｊ＝０、５／３ＳＡ＜
ＳＢ≦７ＳＡの関係、すなわち５ＳＡ＜３ＳＢかつ７Ｓ
Ａ≧ＳＢの関係にある場合にはプロットは領域Ａ２にあ
るためＳｊ＝０．２５、１／７ＳＡ＜ＳＢ≦３／５ＳＡ
の関係、すなわちＳＡ＜７ＳＢかつ３ＳＡ≧５ＳＢの関
係にある場合にはプロットは領域Ａ４にあるためＳｊ＝
０．７５、ＳＢ≦１／７ＳＡの関係、すなわちＳＡ≧７
ＳＢの関係にある場合にはプロットは領域Ａ５にあるた
めＳｊ＝１として求めることができる。
【０１４３】なお、重み付け係数Ｓｊはより細かく量子
化した方が好ましいが、変動値ＳＡ，ＳＢが存在する領
域の判断のための演算時間を考慮すると、５段階程度で
あることが好ましい。本出願人の実験によれば、５段階
に量子化したものであっても、十分に偽色低減効果が得
られるものである。
化した方が好ましいが、変動値ＳＡ，ＳＢが存在する領
域の判断のための演算時間を考慮すると、５段階程度で
あることが好ましい。本出願人の実験によれば、５段階
に量子化したものであっても、十分に偽色低減効果が得
られるものである。
【０１４４】そして、重み付け加算手段１５において
は、この重み付け係数Ｓｊを用いて上記式（４２）〜
（４４）に示す重み付け加算が行われて信号値が算出さ
れる。例えばＲ４４画素におけるＢ（Ｒ４４）信号の算
出は、重み付け係数Ｓｊ＝０．５とした場合、 B(R44)=(1-Sj)*B(R44)A+Sj*B(R44)B=0.5*B(R44)A+0.5*B(R44)B （６２） として算出されるが、第３の実施形態においては、Ｓｊ
または（１−Ｓｊ）＝１／２ｎ（ｎは自然数）となるよ
うに重み付け係数が設定されているため、下記の式（６
３）のように、ビットシフトを用いて整数化して演算を
行うことも可能である。
は、この重み付け係数Ｓｊを用いて上記式（４２）〜
（４４）に示す重み付け加算が行われて信号値が算出さ
れる。例えばＲ４４画素におけるＢ（Ｒ４４）信号の算
出は、重み付け係数Ｓｊ＝０．５とした場合、 B(R44)=(1-Sj)*B(R44)A+Sj*B(R44)B=0.5*B(R44)A+0.5*B(R44)B （６２） として算出されるが、第３の実施形態においては、Ｓｊ
または（１−Ｓｊ）＝１／２ｎ（ｎは自然数）となるよ
うに重み付け係数が設定されているため、下記の式（６
３）のように、ビットシフトを用いて整数化して演算を
行うことも可能である。
【０１４５】 B(R44)=(B(R44)A+B(R44)B+1)>>1 （６３） ここで、＞＞１は信号値を２進数で表した際に、右側に
１ビットシフトさせることを表す。このように、右側に
１ビットシフトさせることにより、信号値は１／２倍さ
れるため、式（６２）と同様の演算を行っていることと
なる。なお、式（６３）において１を加算しているの
は、演算結果を四捨五入するためである。
１ビットシフトさせることを表す。このように、右側に
１ビットシフトさせることにより、信号値は１／２倍さ
れるため、式（６２）と同様の演算を行っていることと
なる。なお、式（６３）において１を加算しているの
は、演算結果を四捨五入するためである。
【０１４６】さらに、上記第１および第２の実施形態に
おいて、変動値算出手段１３において、色エッジである
場合の変動値ＳＡ，ＳＢの算出は、上記式（２９）、
（３０）等により行っているが、これらの式においては
除算が含まれるため、演算量を低減させるためには、除
算を行わないことが好ましい。この場合、変動値ＳＡ，
ＳＢの比率が変わらなければ重み付け係数Ｓｊの算出に
支障はない。したがって、上記式（２９）、（３０）の
場合、右辺に(R(G33)A+G33)*(B(G33)B+G33)を乗算し、
下記の式（２９′）、（３０′）により、変動値ＳＡ，
ＳＢを算出することが好ましい。
おいて、変動値算出手段１３において、色エッジである
場合の変動値ＳＡ，ＳＢの算出は、上記式（２９）、
（３０）等により行っているが、これらの式においては
除算が含まれるため、演算量を低減させるためには、除
算を行わないことが好ましい。この場合、変動値ＳＡ，
ＳＢの比率が変わらなければ重み付け係数Ｓｊの算出に
支障はない。したがって、上記式（２９）、（３０）の
場合、右辺に(R(G33)A+G33)*(B(G33)B+G33)を乗算し、
下記の式（２９′）、（３０′）により、変動値ＳＡ，
ＳＢを算出することが好ましい。
【０１４７】 SA=|R(G33)A-G33|*(B(G33)B+G33) （２９′） SB=|B(G33)B-G33|*(R(G33)A+G33) （３０′） なお、上記式（３３）、（３４）については、(B(G35)A
+G35)*(R(G35)B+G35)を乗算して、下記の式（３
３′）、（３４′）により変動値ＳＡ，ＳＢを算出すれ
ばよい。
+G35)*(R(G35)B+G35)を乗算して、下記の式（３
３′）、（３４′）により変動値ＳＡ，ＳＢを算出すれ
ばよい。
【０１４８】 SA=|B(G35)A-G35|*(R(G35)B+G35) （３３′） SB=|R(G35)B-G35|*(B(G35)A+G35) （３４′） また、上記式（３７）、（３８）については、(B24+G(B
24)A)*(B24+G(B24)B)を乗算して、下記の式（３
７′）、（３８′）により変動値ＳＡ，ＳＢを算出すれ
ばよい。
24)A)*(B24+G(B24)B)を乗算して、下記の式（３
７′）、（３８′）により変動値ＳＡ，ＳＢを算出すれ
ばよい。
【０１４９】 SA=|B24-G(B24)A|*(B24+G(B24)B) （３７′） SB=|B24-G(B24)B|*(B24+G(B24)A) （３８′） 以下、第３の実施形態においてビットシフトを用いて信
号値を求める動作について説明する。図３２は第３の実
施形態の動作を示すフローチャートである。なお、図３
２においては、上記第１および第２の実施形態と変動値
ＳＡ，ＳＢの算出までの処理は同一であるため詳細な説
明は省略し、変動値ＳＡ，ＳＢが算出されたものとし
て、重み付け係数Ｓｊの算出および重み付け加算の処理
についてのみ説明する。また、図３２においては、Ｒ４
４画素位置におけるＢ（Ｒ４４）信号の算出を表すもの
である。まず、変動値ＳＡ，ＳＢの和が０であるか否か
が判断される（ステップＳ４１）。ステップＳ４１が肯
定されると、ＳＡ＝ＳＢ＝０．５としてビットシフトを
用いて、式（６３）によりＢ（Ｒ４４）信号が算出され
る（ステップＳ４２）。
号値を求める動作について説明する。図３２は第３の実
施形態の動作を示すフローチャートである。なお、図３
２においては、上記第１および第２の実施形態と変動値
ＳＡ，ＳＢの算出までの処理は同一であるため詳細な説
明は省略し、変動値ＳＡ，ＳＢが算出されたものとし
て、重み付け係数Ｓｊの算出および重み付け加算の処理
についてのみ説明する。また、図３２においては、Ｒ４
４画素位置におけるＢ（Ｒ４４）信号の算出を表すもの
である。まず、変動値ＳＡ，ＳＢの和が０であるか否か
が判断される（ステップＳ４１）。ステップＳ４１が肯
定されると、ＳＡ＝ＳＢ＝０．５としてビットシフトを
用いて、式（６３）によりＢ（Ｒ４４）信号が算出され
る（ステップＳ４２）。
【０１５０】 B(R44)=(B(R44)A+B(R44)B+1)>>1 （６３） ステップＳ４１が否定されると、ＳＡ≧７ＳＢであるか
否かが判断される（ステップＳ４３）。ステップＳ４３
が肯定されると、変動値ＳＡ，ＳＢの関係は図３０の領
域Ａ５にあることからＳｊ＝１とされ、下記の式（６
４）によりＢ（Ｒ４４）信号が算出される（ステップＳ
４４）。
否かが判断される（ステップＳ４３）。ステップＳ４３
が肯定されると、変動値ＳＡ，ＳＢの関係は図３０の領
域Ａ５にあることからＳｊ＝１とされ、下記の式（６
４）によりＢ（Ｒ４４）信号が算出される（ステップＳ
４４）。
【０１５１】 B(R44)=B(R44)B （６４） ステップＳ４３が否定されると、３ＳＡ≧５ＳＢである
か否かが判断される（ステップＳ４５）。ステップＳ４
５が肯定されると、変動値ＳＡ，ＳＢの関係は図３０の
領域Ａ４にあることからＳｊ＝０．７５とされ、下記の
式（６５）によりＢ（Ｒ４４）信号が算出される（ステ
ップＳ４６）。
か否かが判断される（ステップＳ４５）。ステップＳ４
５が肯定されると、変動値ＳＡ，ＳＢの関係は図３０の
領域Ａ４にあることからＳｊ＝０．７５とされ、下記の
式（６５）によりＢ（Ｒ４４）信号が算出される（ステ
ップＳ４６）。
【０１５２】 B(R44)=(B(R44)A+3B(R44)B+2)>>2 （６５） ステップＳ４５が否定されると、５ＳＡ≧３ＳＢである
か否かが判断される（ステップＳ４７）。ステップＳ４
７が肯定されると、変動値ＳＡ，ＳＢの関係は図３０の
領域Ａ３にあることからＳｊ＝０．５とされ、式（６
３）によりＢ（Ｒ４４）信号が算出される（ステップＳ
４８）。
か否かが判断される（ステップＳ４７）。ステップＳ４
７が肯定されると、変動値ＳＡ，ＳＢの関係は図３０の
領域Ａ３にあることからＳｊ＝０．５とされ、式（６
３）によりＢ（Ｒ４４）信号が算出される（ステップＳ
４８）。
【０１５３】ステップＳ４７が否定されると、７ＳＡ≧
ＳＢであるか否かが判断される（ステップＳ４９）。ス
テップＳ４９が肯定されると、変動値ＳＡ，ＳＢの関係
は図３０の領域Ａ２にあることからＳｊ＝０．２５とさ
れ、下記の式（６６）によりＢ（Ｒ４４）信号が算出さ
れる（ステップＳ５０）。
ＳＢであるか否かが判断される（ステップＳ４９）。ス
テップＳ４９が肯定されると、変動値ＳＡ，ＳＢの関係
は図３０の領域Ａ２にあることからＳｊ＝０．２５とさ
れ、下記の式（６６）によりＢ（Ｒ４４）信号が算出さ
れる（ステップＳ５０）。
【０１５４】 B(R44)=(3*B(R44)A+B(R44)B+2)>>2 （６６） そして、ステップＳ４９が否定されると、変動値ＳＡ，
ＳＢの関係は図３０の領域Ａ１にあることからＳｊ＝０
とされ、下記の式（６７）によりＢ（Ｒ４４）信号が算
出される（ステップＳ５１）。
ＳＢの関係は図３０の領域Ａ１にあることからＳｊ＝０
とされ、下記の式（６７）によりＢ（Ｒ４４）信号が算
出される（ステップＳ５１）。
【０１５５】B(R44)=B(R44)A （６７） このように、第３の実施形態によれば、重み付け係数Ｓ
ｊを算出する際に除算を行わないため、重み付け係数Ｓ
ｊの算出を行う回路の構成を簡易なものとすることがで
き、その結果、本実施形態を実施するための装置の構成
を簡易なものとすることができるとともに、また演算時
間も短縮することができる。また、ビットシフトを行う
ことにより、整数値にて演算を行うことができるため、
演算を簡易に行って処理時間を短縮することができる。
したがって、本発明を実施するための装置をデジタルカ
メラ等の撮像装置やスキャナ等の画像読取装置、あるい
はプリンタ等に搭載することが容易となり、これにより
高機能の装置を作成することができる。
ｊを算出する際に除算を行わないため、重み付け係数Ｓ
ｊの算出を行う回路の構成を簡易なものとすることがで
き、その結果、本実施形態を実施するための装置の構成
を簡易なものとすることができるとともに、また演算時
間も短縮することができる。また、ビットシフトを行う
ことにより、整数値にて演算を行うことができるため、
演算を簡易に行って処理時間を短縮することができる。
したがって、本発明を実施するための装置をデジタルカ
メラ等の撮像装置やスキャナ等の画像読取装置、あるい
はプリンタ等に搭載することが容易となり、これにより
高機能の装置を作成することができる。
【０１５６】なお、上記各実施形態においては単板ＣＣ
Ｄ１として、Ｇ画素がＲ，Ｂ画素に対して倍の密度を有
するものについて説明したが、Ｒ画素がＧ，Ｂ画素に対
して、あるいはＢ画素がＲ，Ｇ画素に対して倍の密度を
有するものであってもよい。また、Ｒ，Ｇ，Ｂに対して
分光感度を有するものについて説明したが、単板ＣＣＤ
１としてはこれに限定されるものではなく、Ｙ（イエロ
ー）、Ｇ（グリーン）、Ｃ（シアン）に対して分光感度
を有するもの、あるいはＹ、Ｗ（ホワイト）、Ｃに対し
て分光感度を有するものであってもよい。
Ｄ１として、Ｇ画素がＲ，Ｂ画素に対して倍の密度を有
するものについて説明したが、Ｒ画素がＧ，Ｂ画素に対
して、あるいはＢ画素がＲ，Ｇ画素に対して倍の密度を
有するものであってもよい。また、Ｒ，Ｇ，Ｂに対して
分光感度を有するものについて説明したが、単板ＣＣＤ
１としてはこれに限定されるものではなく、Ｙ（イエロ
ー）、Ｇ（グリーン）、Ｃ（シアン）に対して分光感度
を有するもの、あるいはＹ、Ｗ（ホワイト）、Ｃに対し
て分光感度を有するものであってもよい。
【０１５７】また、上記各実施形態においては、３色全
ての信号値を算出しているが、１色または２色のみの信
号値を算出するようにしてもよい。
ての信号値を算出しているが、１色または２色のみの信
号値を算出するようにしてもよい。
【０１５８】さらに、上記第１および第２の実施形態に
おいては、式（４１）により重み付け係数Ｓｊを算出し
ているが、下記の式（６８）により重み付け係数Ｓｊを
算出してもよい。
おいては、式（４１）により重み付け係数Ｓｊを算出し
ているが、下記の式（６８）により重み付け係数Ｓｊを
算出してもよい。
【０１５９】 Sj=SB/(SA+SB) (if SA+SB=0 then Sj=0.5) （６８） この場合、Ｒ、Ｂ信号ＱＲ、ＱＢはは、下記の式（６
９）により算出される。
９）により算出される。
【０１６０】 QR,QB=Sj*Q1+(1-Sj)*Q2 （６９）
【図１】本発明の第１の実施形態による画像処理装置の
構成を示す概略ブロック図
構成を示す概略ブロック図
【図２】単板ＣＣＤにおける画素配列を示す図
【図３】ハニカム配列の単板ＣＣＤの画素配列を示す図
【図４】ハニカム配列の単板ＣＣＤの各画素位置を参照
番号を付して示す図
番号を付して示す図
【図５】ＲＢ補間手段の構成を示す概略ブロック図
【図６】Cubicスプライン補間フィルタの例を示す図
【図７】信号値の算出を説明するための図（その１）
【図８】信号値の算出を説明するための図（その２）
【図９】信号値の算出を説明するための図（その３）
【図１０】信号値の算出を説明するための図（その４）
【図１１】信号値の算出を説明するための図（その５）
【図１２】信号値の算出を説明するための図（その６）
【図１３】信号値の算出を説明するための図（その７）
【図１４】赤（Ｒ）および緑（Ｇ）からなる色エッジの
例を示す図
例を示す図
【図１５】グレーエッジの例を示す図
【図１６】変動値ＳＡ，ＳＢの算出方法の差異を説明す
るための図
るための図
【図１７】市松正方フィルタの例を示す図（その１）
【図１８】市松正方フィルタの例を示す図（その２）
【図１９】第１の実施形態の動作を示すフローチャート
【図２０】信号算出処理の動作を示すフローチャート
【図２１】本発明の第２の実施形態による画像処理装置
におけるＲＢ補間手段の構成を示す概略ブロック図
におけるＲＢ補間手段の構成を示す概略ブロック図
【図２２】緑（Ｇ）の単色平坦部の信号値を示す図
【図２３】青（Ｂ）の単色平坦部の信号値を示す図
【図２４】赤（Ｒ）の単色平坦部の信号値を示す図
【図２５】第２の実施形態における信号算出処理の動作
を示すフローチャート
を示すフローチャート
【図２６】ハニカム配列の単板ＣＣＤを用いたデジタル
カメラの撮像系を示す図
カメラの撮像系を示す図
【図２７】ハニカム配列の単板ＣＣＤにおいて得られた
信号値の周波数特性を示す図
信号値の周波数特性を示す図
【図２８】光学ローパスフィルタの配置を示す図
【図２９】変動値ＳＡ，ＳＢと重み付け係数Ｓｊとの関
係を示す図
係を示す図
【図３０】第３の実施形態の処理を説明するための図
【図３１】本発明の第３の実施形態による画像処理装置
におけるＲＢ補間手段の構成を示す概略ブロック図
におけるＲＢ補間手段の構成を示す概略ブロック図
【図３２】第３の実施形態の動作を示すフローチャート
【図３３】ハニカム配列を示す図
【図３４】ベイヤー配列を示す図
【図３５】ベイヤー配列の画素位置を参照番号を付して
示す図
示す図
【図３６】ハニカム配列の画素位置を参照番号を付して
示す図
示す図
１，３３ 単板ＣＣＤ ２ 補間手段 ３ Ｇ補間手段 ４ ＲＢ補間手段 ５ 市松正方補間手段 １０，２１ 判定手段 １１ 第１補間手段 １２ 第２補間手段 １３ 変動値算出手段 １４ 重み付け係数算出手段 １４Ａ メモリ １５ 重み付け加算手段 ２２ 線形補間手段 ２４ 重み付け係数選択手段 ３１ 撮影レンズ ３２ 光学ローパスフィルタ
Claims (17)
- 【請求項１】 異なる分光感度を有する第１から第３
の光電変換素子を単一面上に配置して撮像面が形成され
た撮像デバイスであって、前記第１および前記第２の光
電変換素子を所定方向に交互に配置して第１ラインを形
成し、前記第１および前記第３の光電変換素子を前記所
定方向に交互に配置して第２ラインを形成し、前記所定
方向と直交する直交方向において前記第１および前記第
２の光電変換素子が交互に、かつ前記第１および前記第
３の光電変換素子が交互に配置されるよう、前記第１お
よび前記第２ラインを前記直交方向に交互に配置するこ
とにより、第１から第３画素からなる前記撮像面が形成
された撮像デバイスにおいて得られた第１から第３信号
値に基づいて、全画素位置における前記第１から第３信
号値のうち少なくとも１つの信号値を推定する画像処理
方法において、 信号値を推定する画素位置が、グレーエッジにあるか色
エッジにあるかを判定し、 前記所定方向についての信号値の推定値である所定方向
推定値および前記直交方向についての信号値の推定値で
ある直交方向推定値を算出し、 前記判定の結果に応じた異なる演算方法により、前記所
定方向についての信号値の変動量を表す所定方向変動値
および前記直交方向についての信号値の変動量を表す直
交方向変動値を算出し、 前記所定方向変動値および前記直交方向変動値に基づい
て、前記所定方向推定値および前記直交方向推定値を重
み付け加算する際の重み付け係数を設定し、 該重み付け係数に基づいて、前記所定方向推定値および
前記直交方向推定値を重み付け加算して、前記第１から
第３信号値のうち少なくとも１つの信号値を推定するこ
とを特徴とする画像処理方法。 - 【請求項２】 前記所定方向変動値と前記直交方向変
動値との加算値を算出し、該加算値に対する前記所定方
向変動値または前記直交方向変動値の比率を算出し、該
比率を前記所定方向推定値および前記直交方向推定値を
重み付け加算する際の重み付け係数として設定すること
を特徴とする請求項１記載の画像処理方法。 - 【請求項３】 前記所定方向変動値および前記直交方
向変動値の加算値に対する前記所定方向変動値または前
記直交方向変動値の比率を、前記所定方向推定値および
前記直交方向推定値を重み付け加算する際の重み付け係
数として設定するに際し、 前記重み付け係数が一定であるとした場合の前記所定方
向変動値と前記直交方向変動値との関係に基づいて、複
数の重み付け係数に対する所定方向変動値および直交方
向変動値の対応関係を予め算出して記憶した記憶手段を
参照して、前記所定方向変動値および前記直交方向変動
値に基づいて、前記複数の重み付け係数から一の重み付
け係数を選択し、該選択された一の重み付け係数を、前
記所定方向推定値および前記直交方向推定値を重み付け
加算する際の重み付け係数として設定することを特徴と
する請求項１記載の画像処理方法。 - 【請求項４】 前記記憶手段に記憶された前記対応関
係における前記複数の重み付け係数が、前記加算値に対
する前記所定方向変動値または前記直交方向変動値の比
率が１／２ｎ（ｎは自然数）となるように設定されてな
り、 前記重み付け加算を、前記重み付け係数に基づくビット
シフトにより行うことを特徴とする請求項３記載の画像
処理方法。 - 【請求項５】 前記信号値を推定する画素位置が、前
記第１から第３信号値のいずれか１つの信号値のみから
なる単色平坦部にあるか否かを判定し、 前記単色平坦部にあると判定された場合には、該単色平
坦部内における前記第１から第３信号値に基づく線形補
間演算により、前記第１から第３信号値のうち少なくと
も１つの信号値を推定し、 前記単色平坦部にないと判定された場合に、前記グレー
エッジにあるか色エッジにあるか否かの判定、前記所定
方向推定値および前記直交方向推定値の算出、前記所定
方向変動値および前記直交方向変動値の算出、前記重み
付け係数の設定、および該重み付け係数に基づく信号値
の推定を行うことを特徴とする請求項１から４のいずれ
か１項記載の画像処理方法。 - 【請求項６】 異なる分光感度を有する第１から第３
の光電変換素子を単一面上に配置して撮像面が形成され
た撮像デバイスであって、前記第１および前記第２の光
電変換素子を所定方向に交互に配置して第１ラインを形
成し、前記第１および前記第３の光電変換素子を前記所
定方向に交互に配置して第２ラインを形成し、前記所定
方向と直交する直交方向において前記第１および前記第
２の光電変換素子が交互に、かつ前記第１および前記第
３の光電変換素子が交互に配置されるよう、前記第１お
よび前記第２ラインを前記直交方向に交互に配置するこ
とにより、第１から第３画素からなる前記撮像面が形成
された撮像デバイスにおいて得られた第１から第３信号
値に基づいて、全画素位置における前記第１から第３信
号値のうち少なくとも１つの信号値を推定する画像処理
装置において、 信号値を推定する画素位置が、グレーエッジにあるか色
エッジにあるかを判定する判定手段と、 前記所定方向についての信号値の推定値である所定方向
推定値および前記直交方向についての信号値の推定値で
ある直交方向推定値を算出する推定値算出手段と、 前記判定の結果に応じた異なる演算方法により、前記所
定方向についての信号値の変動量を表す所定方向変動値
および前記直交方向についての信号値の変動量を表す直
交方向変動値を算出する変動値算出手段と、 前記所定方向変動値および前記直交方向変動値に基づい
て、前記所定方向推定値および前記直交方向推定値を重
み付け加算する際の重み付け係数を設定する重み付け係
数設定手段と、 該重み付け係数に基づいて、前記所定方向推定値および
前記直交方向推定値を重み付け加算して、前記第１から
第３信号値のうち少なくとも１つの信号値を推定する重
み付け加算手段とを備えたことを特徴とする画像処理装
置。 - 【請求項７】 前記重み付け係数設定手段は、前記所
定方向変動値と前記直交方向変動値との加算値を算出
し、該加算値に対する前記所定方向変動値または前記直
交方向変動値の比率を算出する比率算出手段を備え、 該比率を、前記所定方向推定値および前記直交方向推定
値を重み付け加算する際の重み付け係数として設定する
手段であることを特徴とする請求項６記載の画像処理装
置。 - 【請求項８】 前記重み付け係数設定手段は、前記所
定方向変動値と前記直交方向変動値との加算値に対する
前記所定方向変動値または前記直交方向変動値の比率
を、前記所定方向推定値および前記直交方向推定値を重
み付け加算する際の重み付け係数として設定するに際
し、前記重み付け係数が一定であるとした場合の前記所
定方向変動値と前記直交方向変動値との関係に基づい
て、複数の重み付け係数に対する所定方向変動値および
直交方向変動値の対応関係を予め算出して、該対応関係
を記憶した記憶手段と、 前記所定方向変動値および前記直交方向変動値に基づい
て、前記記憶手段を参照して前記複数の重み付け係数か
ら一の重み付け係数を選択する重み付け係数選択手段と
を備え、 該選択された一の重み付け係数を、前記所定方向推定値
および前記直交方向推定値を重み付け加算する際の重み
付け係数として設定する手段であることを特徴とする請
求項６記載の画像処理装置。 - 【請求項９】 前記記憶手段に記憶された前記対応関
係における前記複数の重み付け係数が、前記加算値に対
する前記所定方向変動値または前記直交方向変動値の比
率が１／２ｎ（ｎは自然数）となるように設定されてな
り、 前記重み付け加算手段は、前記重み付け加算を、前記重
み付け係数に基づくビットシフトにより行う手段である
ことを特徴とする請求項８記載の画像処理装置。 - 【請求項１０】 前記信号値を推定する画素位置が、
前記第１から第３信号値のいずれか１つの信号値のみか
らなる単色平坦部にあるか否かを判定する平坦部判定手
段と、 前記単色平坦部にあると判定された場合に、該単色平坦
部内における前記第１から第３信号値に基づく線形補間
演算により、前記第１から第３信号値のうち少なくとも
１つの信号値を推定する線形補間手段とをさらに備え、 前記単色平坦部にないと判定された場合に、前記判定手
段によるグレーエッジにあるか色エッジにあるかの判
定、前記推定値算出手段による前記所定方向推定値およ
び前記直交方向推定値の算出、前記変動値算出手段によ
る前記所定方向変動値および前記直交方向変動値の算
出、前記重み付け係数設定手段による前記重み付け係数
の設定、および前記重み付け加算手段による前記重み付
け係数に基づく信号値の推定を行うことを特徴とする請
求項６から９のいずれか１項記載の画像処理装置。 - 【請求項１１】 異なる分光感度を有する第１から第
３の光電変換素子を単一面上に配置して撮像面が形成さ
れた撮像デバイスであって、前記第１および前記第２の
光電変換素子を所定方向に交互に配置して第１ラインを
形成し、前記第１および前記第３の光電変換素子を前記
所定方向に交互に配置して第２ラインを形成し、前記所
定方向と直交する直交方向において前記第１および前記
第２の光電変換素子が交互に、かつ前記第１および前記
第３の光電変換素子が交互に配置されるよう、前記第１
および前記第２ラインを前記直交方向に交互に配置する
ことにより、第１から第３画素からなる前記撮像面が形
成された撮像デバイスにおいて得られた第１から第３信
号値に基づいて、全画素位置における前記第１から第３
信号値のうち少なくとも１つの信号値を推定する画像処
理方法をコンピュータに実行させるためのプログラムを
記録したコンピュータ読取り可能な記録媒体において、 前記プログラムは、信号値を推定する画素位置が、グレ
ーエッジにあるか色エッジにあるかを判定する手順と、 前記所定方向についての信号値の推定値である所定方向
推定値および前記直交方向についての信号値の推定値で
ある直交方向推定値を算出する手順と、 前記判定の結果に応じた異なる演算方法により、前記所
定方向についての信号値の変動量を表す所定方向変動値
および前記直交方向についての信号値の変動量を表す直
交方向変動値を算出する手順と、 前記所定方向変動値および前記直交方向変動値に基づい
て、前記所定方向推定値および前記直交方向推定値を重
み付け加算する際の重み付け係数を設定する手順と、 該重み付け係数に基づいて、前記所定方向推定値および
前記直交方向推定値を重み付け加算して、前記第１から
第３信号値のうち少なくとも１つの信号値を推定する手
順とを有することを特徴とするコンピュータ読取り可能
な記録媒体。 - 【請求項１２】 前記重み付け係数を設定する手順
は、前記所定方向変動値と前記直交方向変動値との加算
値を算出し、該加算値に対する前記所定方向変動値また
は前記直交方向変動値の比率を算出する手順を有し、 該比率を、前記所定方向推定値および前記直交方向推定
値を重み付け加算する際の重み付け係数として設定する
手順であることを特徴とする請求項１１記載のコンピュ
ータ読取り可能な記録媒体。 - 【請求項１３】 前記重み付け係数を設定する手順
は、前記所定方向変動値および前記直交方向変動値の加
算値に対する前記所定方向変動値または前記直交方向変
動値の比率を、前記所定方向推定値および前記直交方向
推定値を重み付け加算する際の重み付け係数として設定
するに際し、 前記重み付け係数が一定であるとした場合の前記所定方
向変動値と前記直交方向変動値との関係に基づいて、複
数の重み付け係数に対する所定方向変動値および直交方
向変動値の対応関係を予め算出して記憶した記憶手段を
参照して、前記所定方向変動値および前記直交方向変動
値に基づいて、前記複数の重み付け係数から一の重み付
け係数を選択する手順を有し、 該選択された一の重み付け係数を、前記所定方向推定値
および前記直交方向推定値を重み付け加算する際の重み
付け係数として設定する手順であることを特徴とする請
求項１１記載のコンピュータ読取り可能な記録媒体。 - 【請求項１４】 前記記憶手段に記憶された前記対応
関係における前記複数の重み付け係数が、前記加算値に
対する前記所定方向変動値または前記直交方向変動値の
比率が１／２ｎ（ｎは自然数）となるように設定されて
なり、 前記重み付け加算を行う手順は、前記重み付け加算を、
前記重み付け係数に基づくビットシフトにより行う手順
であることを特徴とする請求項１３記載のコンピュータ
読取り可能な記録媒体。 - 【請求項１５】 前記信号値を推定する画素位置が、
前記第１から第３信号値のいずれか１つの信号値のみか
らなる単色平坦部にあるか否かを判定する手順と、 前記単色平坦部にあると判定された場合には、該単色平
坦部内における前記第１から第３信号値に基づく線形補
間演算により、前記第１から第３信号値のうち少なくと
も１つの信号値を推定する手順と、 前記単色平坦部にないと判定された場合に、前記グレー
エッジにあるか色エッジにあるか否かの判定、前記所定
方向推定値および前記直交方向推定値の算出、前記所定
方向変動値および前記直交方向変動値の算出、前記重み
付け係数の設定、および該重み付け係数に基づく信号値
の推定を行う手順とをさらに有することを特徴とする請
求項１１から１４のいずれか１項記載のコンピュータ読
取り可能な記録媒体。 - 【請求項１６】 請求項６から１０のいずれか１項記
載の画像処理装置を備えたことを特徴とする撮像装置。 - 【請求項１７】 請求項６から１０のいずれか１項記
載の画像処理装置を備えたことを特徴とする画像読取装
置。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2000104977A JP4302854B2 (ja) | 2000-04-06 | 2000-04-06 | 画像処理方法および装置並びに記録媒体 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2000104977A JP4302854B2 (ja) | 2000-04-06 | 2000-04-06 | 画像処理方法および装置並びに記録媒体 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2001292454A true JP2001292454A (ja) | 2001-10-19 |
| JP4302854B2 JP4302854B2 (ja) | 2009-07-29 |
Family
ID=18618431
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2000104977A Expired - Fee Related JP4302854B2 (ja) | 2000-04-06 | 2000-04-06 | 画像処理方法および装置並びに記録媒体 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP4302854B2 (ja) |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2006135919A (ja) * | 2004-11-09 | 2006-05-25 | Eastman Kodak Co | カラー撮像画像データの補間方法およびプログラム |
| KR100782812B1 (ko) | 2005-06-15 | 2007-12-06 | 삼성전자주식회사 | 에지 적응적 컬러 보간 방법 및 장치 |
| US7894110B2 (en) | 2004-12-01 | 2011-02-22 | Megachips Corporation | Pixel interpolation method and image distinction method |
| CN111383552A (zh) * | 2020-05-09 | 2020-07-07 | 广州视源电子科技股份有限公司 | 一种led灯珠及led显示屏 |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103164702B (zh) * | 2011-12-13 | 2016-09-28 | 北京慧眼智行科技有限公司 | 标记中心点提取方法、装置及图像处理系统 |
-
2000
- 2000-04-06 JP JP2000104977A patent/JP4302854B2/ja not_active Expired - Fee Related
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2006135919A (ja) * | 2004-11-09 | 2006-05-25 | Eastman Kodak Co | カラー撮像画像データの補間方法およびプログラム |
| US7894110B2 (en) | 2004-12-01 | 2011-02-22 | Megachips Corporation | Pixel interpolation method and image distinction method |
| KR100782812B1 (ko) | 2005-06-15 | 2007-12-06 | 삼성전자주식회사 | 에지 적응적 컬러 보간 방법 및 장치 |
| CN111383552A (zh) * | 2020-05-09 | 2020-07-07 | 广州视源电子科技股份有限公司 | 一种led灯珠及led显示屏 |
Also Published As
| Publication number | Publication date |
|---|---|
| JP4302854B2 (ja) | 2009-07-29 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP4162111B2 (ja) | 画像処理方法および装置並びに記録媒体 | |
| KR101342806B1 (ko) | 최종 디지털 컬러 이미지를 형성하는 방법 | |
| US7502505B2 (en) | High-quality gradient-corrected linear interpolation for demosaicing of color images | |
| JP4127638B2 (ja) | イメージセンサ出力データ処理装置及び処理方法 | |
| US8314863B2 (en) | Image processing device, image processing method, and program pertaining to image correction | |
| US20080123997A1 (en) | Providing a desired resolution color image | |
| JP3771054B2 (ja) | 画像処理装置及び画像処理方法 | |
| JP2000078597A (ja) | デジタルカラ―イメ―ジ値の処理装置 | |
| US8320714B2 (en) | Image processing apparatus, computer-readable recording medium for recording image processing program, and image processing method | |
| US20080018750A1 (en) | Method and apparatus for color interpolation in digital photographing device | |
| KR20090050460A (ko) | 이미지 처리 장치 및 방법 | |
| US7489822B2 (en) | Image processing apparatus and method for detecting a direction of an edge in the vicinity of a pixel of interest and generating all color signals for each pixel by interpolation using color signals of a pixel of interest and its neighbor pixels, and a recording medium having a program recorded thereon for causing the apparatus to perform the method | |
| JP4302855B2 (ja) | 画像処理方法および装置並びに記録媒体 | |
| JP4302854B2 (ja) | 画像処理方法および装置並びに記録媒体 | |
| US7986361B2 (en) | Color processing apparatus and method thereof for generating an interpolated image | |
| JP4333544B2 (ja) | 画像処理方法、及び画像処理装置、半導体装置、電子機器、画像処理プログラム、並びにコンピュータ読み取り可能な記録媒体 | |
| KR101327790B1 (ko) | 영상 보간 방법 및 장치 | |
| JP5484015B2 (ja) | 撮像装置、撮像方法、及びプログラム | |
| JP4239483B2 (ja) | 画像処理方法、画像処理プログラム、画像処理装置 | |
| JP4122082B2 (ja) | 信号処理装置およびその処理方法 | |
| JP3946913B2 (ja) | 信号生成方法および装置並びに記録媒体 | |
| JP4239480B2 (ja) | 画像処理方法、画像処理プログラム、画像処理装置 | |
| US20050031222A1 (en) | Filter kernel generation by treating algorithms as block-shift invariant | |
| JP2003087808A (ja) | 画像処理方法および装置並びにプログラム | |
| JP2007325199A (ja) | 撮像装置および信号処理装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20050912 |
|
| A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A712 Effective date: 20061201 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20080201 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20080318 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20080516 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20090421 |
|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20090423 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120501 Year of fee payment: 3 |
|
| R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130501 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140501 Year of fee payment: 5 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| LAPS | Cancellation because of no payment of annual fees |