JP2001101398A - 画像処理方法および装置並びに記録媒体 - Google Patents
画像処理方法および装置並びに記録媒体Info
- Publication number
- JP2001101398A JP2001101398A JP2000155621A JP2000155621A JP2001101398A JP 2001101398 A JP2001101398 A JP 2001101398A JP 2000155621 A JP2000155621 A JP 2000155621A JP 2000155621 A JP2000155621 A JP 2000155621A JP 2001101398 A JP2001101398 A JP 2001101398A
- Authority
- JP
- Japan
- Prior art keywords
- signal
- line
- pixel
- value
- signal value
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000012545 processing Methods 0.000 title claims description 89
- 238000000034 method Methods 0.000 title claims description 81
- 238000003672 processing method Methods 0.000 claims description 59
- 238000006243 chemical reaction Methods 0.000 claims description 38
- 238000003384 imaging method Methods 0.000 claims description 26
- 230000003595 spectral effect Effects 0.000 claims description 24
- 238000001914 filtration Methods 0.000 claims description 16
- 230000035945 sensitivity Effects 0.000 claims description 14
- 238000009826 distribution Methods 0.000 claims description 10
- 230000007274 generation of a signal involved in cell-cell signaling Effects 0.000 claims description 2
- 238000004364 calculation method Methods 0.000 abstract description 25
- 239000003086 colorant Substances 0.000 description 17
- 238000010586 diagram Methods 0.000 description 17
- 230000014509 gene expression Effects 0.000 description 5
- 238000009499 grossing Methods 0.000 description 3
- 230000000007 visual effect Effects 0.000 description 2
- 238000013459 approach Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000013139 quantization Methods 0.000 description 1
- 238000000926 separation method Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
- G06T3/4015—Image demosaicing, e.g. colour filter arrays [CFA] or Bayer patterns
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
- H04N23/84—Camera processing pipelines; Components thereof for processing colour signals
- H04N23/843—Demosaicing, e.g. interpolating colour pixel values
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/10—Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
- H04N25/11—Arrangement of colour filter arrays [CFA]; Filter mosaics
- H04N25/13—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
- H04N25/134—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements based on three different wavelength filter elements
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N2209/00—Details of colour television systems
- H04N2209/04—Picture signal generators
- H04N2209/041—Picture signal generators using solid-state devices
- H04N2209/042—Picture signal generators using solid-state devices having a single pick-up sensor
- H04N2209/045—Picture signal generators using solid-state devices having a single pick-up sensor using mosaic colour filter
- H04N2209/046—Colour interpolation to calculate the missing colour values
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- Spectroscopy & Molecular Physics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Color Television Image Signal Generators (AREA)
- Editing Of Facsimile Originals (AREA)
- Facsimile Image Signal Circuits (AREA)
- Color Image Communication Systems (AREA)
- Image Processing (AREA)
Abstract
(57)【要約】
【課題】 単板ＣＣＤのような撮像デバイスにおいて得
られる画像データが、光量の対数値や指数値により表さ
れている場合であっても、偽色を生じさせることなく、
全画素位置における信号値を推定する。 【解決手段】 Ｂ，Ｇ画素が並ぶラインにおけるＧ信号
のみを有するＧ０６画素位置におけるＲ０６信号の算出
を、画像の局所的な領域におけるＲ信号とＧ信号との差
は等しいという前提すなわち、Ｒ０６−Ｇ０６＝Ｒ０９
−Ｇ０９の関係が成立するという前提に基づいて、Ｒ０
６＝Ｇ０６＋（Ｒ０９−Ｇ０９）の演算により行う。こ
の場合、Ｒ０９画素位置のＧ０９信号は、Ｇ０９＝（Ｇ
０５＋Ｇ１３）／２等のように、Ｒ０９画素位置が存在
するＲＧライン上におけるＧ信号に対して１次元補間演
算を施すことにより算出する。
られる画像データが、光量の対数値や指数値により表さ
れている場合であっても、偽色を生じさせることなく、
全画素位置における信号値を推定する。 【解決手段】 Ｂ，Ｇ画素が並ぶラインにおけるＧ信号
のみを有するＧ０６画素位置におけるＲ０６信号の算出
を、画像の局所的な領域におけるＲ信号とＧ信号との差
は等しいという前提すなわち、Ｒ０６−Ｇ０６＝Ｒ０９
−Ｇ０９の関係が成立するという前提に基づいて、Ｒ０
６＝Ｇ０６＋（Ｒ０９−Ｇ０９）の演算により行う。こ
の場合、Ｒ０９画素位置のＧ０９信号は、Ｇ０９＝（Ｇ
０５＋Ｇ１３）／２等のように、Ｒ０９画素位置が存在
するＲＧライン上におけるＧ信号に対して１次元補間演
算を施すことにより算出する。
Description
【０００１】
【発明の属する技術分野】本発明は、単板ＣＣＤのよう
な撮像デバイスにおいて得られたカラー画像を表す画像
データのように、全画素位置において全色を表す信号値
を有さない画像データを用いて、全画素位置における信
号値を推定する画像処理方法および装置並びに画像処理
方法をコンピュータに実行させるためのプログラムを記
録したコンピュータ読取り可能な記録媒体に関するもの
である。
な撮像デバイスにおいて得られたカラー画像を表す画像
データのように、全画素位置において全色を表す信号値
を有さない画像データを用いて、全画素位置における信
号値を推定する画像処理方法および装置並びに画像処理
方法をコンピュータに実行させるためのプログラムを記
録したコンピュータ読取り可能な記録媒体に関するもの
である。
【０００２】
【従来の技術】デジタルカメラに用いられるＣＣＤ等の
撮像デバイスとしては、分光感度が異なる複数種類の光
電変換素子を同一平面上に交互に配置して構成されてい
るものが知られている（以下単板ＣＣＤと称する）。こ
こで、Ｒ，Ｇ，Ｂのそれぞれに分光感度を有する光電変
換素子、すなわちＲ，Ｇ，Ｂの各チャンネルの光電変換
素子を交互に配置した単板ＣＣＤの場合、連続したＲ，
Ｇ，Ｂチャンネルの３個の光電変換素子の組が１つの画
素を構成することとなる。しかしながら、このような単
板ＣＣＤにおいては各画素のＲ，Ｇ，Ｂ信号値を同一画
素位置において得ることができないため、色ずれや偽色
が生じることがある。また、各チャンネルの光電変換素
子数は単板ＣＣＤを構成する全素子数よりも少ないた
め、高解像度の画像を得ることができない。例えばＲ，
Ｇ，Ｂ各チャンネルの光電変換素子を交互に配置した単
板ＣＣＤにおいては、各チャンネルの光電変換素子数は
全素子数の１／３しかないため、同一素子数のモノクロ
撮像装置に比べて解像度が１／３となってしまう。この
ため、Ｒ，Ｇ，Ｂ各チャンネルの光電変換素子が存在し
ない部分における信号値を補間処理により求める方法が
提案されているが、単に補間処理を行うのみでは、信号
値が大きく変化する部分において偽色が発生することが
ある。この場合、撮像系に光学ローパスフィルタを使用
したり、撮像信号に対してローパスフィルタによる平滑
化処理を行うことにより偽色の発生を防止することがで
きるが、この場合解像度が悪化するという問題がある。
撮像デバイスとしては、分光感度が異なる複数種類の光
電変換素子を同一平面上に交互に配置して構成されてい
るものが知られている（以下単板ＣＣＤと称する）。こ
こで、Ｒ，Ｇ，Ｂのそれぞれに分光感度を有する光電変
換素子、すなわちＲ，Ｇ，Ｂの各チャンネルの光電変換
素子を交互に配置した単板ＣＣＤの場合、連続したＲ，
Ｇ，Ｂチャンネルの３個の光電変換素子の組が１つの画
素を構成することとなる。しかしながら、このような単
板ＣＣＤにおいては各画素のＲ，Ｇ，Ｂ信号値を同一画
素位置において得ることができないため、色ずれや偽色
が生じることがある。また、各チャンネルの光電変換素
子数は単板ＣＣＤを構成する全素子数よりも少ないた
め、高解像度の画像を得ることができない。例えばＲ，
Ｇ，Ｂ各チャンネルの光電変換素子を交互に配置した単
板ＣＣＤにおいては、各チャンネルの光電変換素子数は
全素子数の１／３しかないため、同一素子数のモノクロ
撮像装置に比べて解像度が１／３となってしまう。この
ため、Ｒ，Ｇ，Ｂ各チャンネルの光電変換素子が存在し
ない部分における信号値を補間処理により求める方法が
提案されているが、単に補間処理を行うのみでは、信号
値が大きく変化する部分において偽色が発生することが
ある。この場合、撮像系に光学ローパスフィルタを使用
したり、撮像信号に対してローパスフィルタによる平滑
化処理を行うことにより偽色の発生を防止することがで
きるが、この場合解像度が悪化するという問題がある。
【０００３】ここで、人間の視覚特性は色よりも輝度に
対して感度が高いものである。このため、単板ＣＣＤに
おいて得られたカラー撮像信号から、各画素の輝度を表
す高周波の輝度信号と、上述した補間処理およびローパ
スフィルタによる平滑化処理によって得られた低周波の
色信号とを生成し、輝度信号および色信号を用いてカラ
ー画像信号を再構成するようにした方法が提案されてい
る（特開平１０−２００９０６号等）。この方法によれ
ば、人間の視覚特性において感度が高い輝度成分に対し
てより多くの情報が与えられることとなるため、見かけ
上解像度が高い画像を再現可能なカラー画像信号を得る
ことができる。
対して感度が高いものである。このため、単板ＣＣＤに
おいて得られたカラー撮像信号から、各画素の輝度を表
す高周波の輝度信号と、上述した補間処理およびローパ
スフィルタによる平滑化処理によって得られた低周波の
色信号とを生成し、輝度信号および色信号を用いてカラ
ー画像信号を再構成するようにした方法が提案されてい
る（特開平１０−２００９０６号等）。この方法によれ
ば、人間の視覚特性において感度が高い輝度成分に対し
てより多くの情報が与えられることとなるため、見かけ
上解像度が高い画像を再現可能なカラー画像信号を得る
ことができる。
【０００４】ところで、単板ＣＣＤとして、例えば図１
６に示すように市松状に画素が配置されたハニカム配列
のアレイ構造を有するＣＣＤが知られている（例えば特
開平１０−１３６３９１号）。なお、これを市松状の画
素配列と称することもある。また、図１７に示すように
正方状に画素が配置されたベイヤー配列のアレイ構造を
有するＣＣＤも知られている。なお、これを正方状の画
素配列と称することもある。このようなアレイ構造すな
わち画素配列を有する単板ＣＣＤにおいても上記と同様
に偽色の問題が生じる。このため、上述したベイヤー配
列のＣＣＤにおいて得られた光量ベースの信号について
偽色を除去するために、画像中の局所的な領域において
はｒ，ｇ，ｂの信号の比は略一定であるという仮定に基
づいて、ベイヤー配列のＣＣＤにおける垂直方向または
水平方向のラインにおいて、隣接するラインにおけるｒ
信号とｇ信号との比をｇ信号に乗算することにより、そ
のラインにおけるｒ信号を算出するようにした方法が知
られている（特開平９−２１４９８９号）。この方法
は、具体的には、図１８に示す画素配列において、ｇ１
２画素位置におけるｒ信号ｒ１２を求めるには、まずｒ
１１画素位置におけるｇ１１信号を（ｇ６＋ｇ１６）／
２の演算により算出し、ｒ１１：ｇ１１＝ｒ１２：ｇ１
２という仮定に基づいて、ｒ１２＝ｇ１２×ｒ１１／ｇ
１１の演算によりｒ１２信号を算出するものである。
６に示すように市松状に画素が配置されたハニカム配列
のアレイ構造を有するＣＣＤが知られている（例えば特
開平１０−１３６３９１号）。なお、これを市松状の画
素配列と称することもある。また、図１７に示すように
正方状に画素が配置されたベイヤー配列のアレイ構造を
有するＣＣＤも知られている。なお、これを正方状の画
素配列と称することもある。このようなアレイ構造すな
わち画素配列を有する単板ＣＣＤにおいても上記と同様
に偽色の問題が生じる。このため、上述したベイヤー配
列のＣＣＤにおいて得られた光量ベースの信号について
偽色を除去するために、画像中の局所的な領域において
はｒ，ｇ，ｂの信号の比は略一定であるという仮定に基
づいて、ベイヤー配列のＣＣＤにおける垂直方向または
水平方向のラインにおいて、隣接するラインにおけるｒ
信号とｇ信号との比をｇ信号に乗算することにより、そ
のラインにおけるｒ信号を算出するようにした方法が知
られている（特開平９−２１４９８９号）。この方法
は、具体的には、図１８に示す画素配列において、ｇ１
２画素位置におけるｒ信号ｒ１２を求めるには、まずｒ
１１画素位置におけるｇ１１信号を（ｇ６＋ｇ１６）／
２の演算により算出し、ｒ１１：ｇ１１＝ｒ１２：ｇ１
２という仮定に基づいて、ｒ１２＝ｇ１２×ｒ１１／ｇ
１１の演算によりｒ１２信号を算出するものである。
【０００５】
【発明が解決しようとする課題】しかしながら、上記特
開平１０−２００９０６号等に記載された方法において
は、単板ＣＣＤにおいて得られた撮像信号に対してどの
ようなローパスフィルタにより平滑化処理を施しても、
実際の画像における高周波成分が画像中にすでに折り返
されてしまっているため、折り返しひずみによるモアレ
を取り除くことができず、その結果偽色を十分に除去す
ることができない。
開平１０−２００９０６号等に記載された方法において
は、単板ＣＣＤにおいて得られた撮像信号に対してどの
ようなローパスフィルタにより平滑化処理を施しても、
実際の画像における高周波成分が画像中にすでに折り返
されてしまっているため、折り返しひずみによるモアレ
を取り除くことができず、その結果偽色を十分に除去す
ることができない。
【０００６】一方、上記特開平９−２１４９８９号に記
載された方法によれば、効果的に偽色を除去することが
できる。とくにこの方法は、画像の局所的な領域におい
ては、ｒ：ｇ：ｂの光量の比が一定であるという仮定に
基づいており、得られたＲＧＢ信号の比が光量に比例し
ているアナログ信号である場合には、ベイヤー配列のＣ
ＣＤにおいて得られる画像信号における偽色を効率よく
除去することができる。しかしながら、デジタルカメラ
により得られる画像信号は、Ａ／Ｄ変換を行って光量ｒ
ｇｂをデジタルのＲＧＢ信号に変換する場合に、量子化
誤差を低減するため、およびコンピュータ系のビデオ回
路へ信号を入力するために、例えばＲ＝ｒ０．４５、Ｒ
＝ｌｏｇ（ｒ）のように、光量に対する指数値、対数値
となるように信号値が表されていることから、ｒ：ｇ：
ｂ＝Ｒ：Ｇ：Ｂとはならないものである。このため、上
記特開平９−２１４９８９号に記載された方法は、信号
値が光量に比例するアナログ信号に対しては偽色を除去
することができるが、信号値が光量の指数値や対数値に
より表されている場合には偽色を除去することはできな
い。また、偽色はベイヤー配列の単板ＣＣＤのみならず
ハニカム配列の単板ＣＣＤにおいても発生する。
載された方法によれば、効果的に偽色を除去することが
できる。とくにこの方法は、画像の局所的な領域におい
ては、ｒ：ｇ：ｂの光量の比が一定であるという仮定に
基づいており、得られたＲＧＢ信号の比が光量に比例し
ているアナログ信号である場合には、ベイヤー配列のＣ
ＣＤにおいて得られる画像信号における偽色を効率よく
除去することができる。しかしながら、デジタルカメラ
により得られる画像信号は、Ａ／Ｄ変換を行って光量ｒ
ｇｂをデジタルのＲＧＢ信号に変換する場合に、量子化
誤差を低減するため、およびコンピュータ系のビデオ回
路へ信号を入力するために、例えばＲ＝ｒ０．４５、Ｒ
＝ｌｏｇ（ｒ）のように、光量に対する指数値、対数値
となるように信号値が表されていることから、ｒ：ｇ：
ｂ＝Ｒ：Ｇ：Ｂとはならないものである。このため、上
記特開平９−２１４９８９号に記載された方法は、信号
値が光量に比例するアナログ信号に対しては偽色を除去
することができるが、信号値が光量の指数値や対数値に
より表されている場合には偽色を除去することはできな
い。また、偽色はベイヤー配列の単板ＣＣＤのみならず
ハニカム配列の単板ＣＣＤにおいても発生する。
【０００７】本発明は上記事情に鑑みなされたものであ
り、どのような信号であっても偽色を低減することがで
きる画像処理方法および装置並びに画像処理方法をコン
ピュータに実行させるためのプログラムを記録したコン
ピュータ読取り可能な記録媒体を提供することを目的と
するものである。
り、どのような信号であっても偽色を低減することがで
きる画像処理方法および装置並びに画像処理方法をコン
ピュータに実行させるためのプログラムを記録したコン
ピュータ読取り可能な記録媒体を提供することを目的と
するものである。
【０００８】
【課題を解決するための手段】本発明による画像処理方
法は、例えば単板ＣＣＤのような撮像デバイスにおいて
得られた画像データを構成する信号値が光量に対する指
数値や対数値により表されている場合には、画像上の局
所的な領域において、各信号値の差分値が等しくなると
いう前提に基づいてなされたものである。すなわち、本
発明による画像処理方法は、異なる分光分布を有する第
１から第３の信号値を有する第１から第３の画素からな
る画像を表す画像データであって、前記第１および前記
第２の画素が所定方向に交互に配置されて第１ラインが
形成され、前記第１および前記第３の画素が前記所定方
向に交互に配置されて第２ラインが形成され、さらに前
記第１および前記第２ラインが前記所定方向と略直交す
る方向に交互に配置されてなる画像を表す画像データ
の、前記第１から第３信号値に基づいて、全画素位置に
おける前記第１から第３信号値のうち少なくとも１つの
信号値を推定する画像処理方法において、前記第２ライ
ンにおける前記第２信号値を、該第２ラインに隣接する
前記第１ラインにおける前記第１および前記第２信号値
の差分値に基づいて推定することを特徴とするものであ
る。
法は、例えば単板ＣＣＤのような撮像デバイスにおいて
得られた画像データを構成する信号値が光量に対する指
数値や対数値により表されている場合には、画像上の局
所的な領域において、各信号値の差分値が等しくなると
いう前提に基づいてなされたものである。すなわち、本
発明による画像処理方法は、異なる分光分布を有する第
１から第３の信号値を有する第１から第３の画素からな
る画像を表す画像データであって、前記第１および前記
第２の画素が所定方向に交互に配置されて第１ラインが
形成され、前記第１および前記第３の画素が前記所定方
向に交互に配置されて第２ラインが形成され、さらに前
記第１および前記第２ラインが前記所定方向と略直交す
る方向に交互に配置されてなる画像を表す画像データ
の、前記第１から第３信号値に基づいて、全画素位置に
おける前記第１から第３信号値のうち少なくとも１つの
信号値を推定する画像処理方法において、前記第２ライ
ンにおける前記第２信号値を、該第２ラインに隣接する
前記第１ラインにおける前記第１および前記第２信号値
の差分値に基づいて推定することを特徴とするものであ
る。
【０００９】すなわち、例えば図１６に示すようなハニ
カム配列の単板ＣＣＤがＲ，Ｇ，Ｂのそれぞれに分光感
度を有するものとした場合、この単板ＣＣＤにおいては
Ｒ，Ｇ，Ｂの色信号からなる画像データが得られる。そ
してこの画像データにより表される画像の画素の配列を
図１６を参照して説明すると、第１から第３画素、第１
信号値から第３信号値をそれぞれＧ，Ｒ，Ｂに対応さ
せ、第１ラインを図１６上左上から右下方向にＧＲ画素
を交互に配置したＧＲラインとし、第２ラインを第１ラ
インと同様の方向にＧＢ画素を交互に配置したＧＢライ
ンとした場合、本発明による画像処理方法は、ＧＢライ
ンにおけるＲ信号値を、ＧＲラインにおけるＧ信号値お
よびＲ信号値の差分値に基づいて推定することを特徴と
するものである。
カム配列の単板ＣＣＤがＲ，Ｇ，Ｂのそれぞれに分光感
度を有するものとした場合、この単板ＣＣＤにおいては
Ｒ，Ｇ，Ｂの色信号からなる画像データが得られる。そ
してこの画像データにより表される画像の画素の配列を
図１６を参照して説明すると、第１から第３画素、第１
信号値から第３信号値をそれぞれＧ，Ｒ，Ｂに対応さ
せ、第１ラインを図１６上左上から右下方向にＧＲ画素
を交互に配置したＧＲラインとし、第２ラインを第１ラ
インと同様の方向にＧＢ画素を交互に配置したＧＢライ
ンとした場合、本発明による画像処理方法は、ＧＢライ
ンにおけるＲ信号値を、ＧＲラインにおけるＧ信号値お
よびＲ信号値の差分値に基づいて推定することを特徴と
するものである。
【００１０】なお、本発明の内容を分かりやすく説明す
るために、第１から第３画素、第１信号値から第３信号
値をそれぞれＧ，Ｒ，Ｂに対応させ、第１ラインはＧＲ
ライン、第２ラインはＧＢラインとし、以下に述べる本
発明の構成において（）内に本発明の実施形態における
図４を参照して、Ｇ，Ｂ，Ｒに参照番号を付して記載す
るが、画像データにより表される画像の画素配列として
はこれに限定されるものではない。
るために、第１から第３画素、第１信号値から第３信号
値をそれぞれＧ，Ｒ，Ｂに対応させ、第１ラインはＧＲ
ライン、第２ラインはＧＢラインとし、以下に述べる本
発明の構成において（）内に本発明の実施形態における
図４を参照して、Ｇ，Ｂ，Ｒに参照番号を付して記載す
るが、画像データにより表される画像の画素配列として
はこれに限定されるものではない。
【００１１】上記本発明による画像処理方法において
は、前記第２（ＧＢ）ラインの前記第１（Ｇ０６）画素
における第２（Ｒ０６）信号値を、前記第１（ＧＲ）ラ
インの該第１（Ｇ０６）画素近傍の前記第２（Ｒ０９）
画素における第２（Ｒ０９）信号値と、前記第１（Ｇ
Ｒ）ライン上における前記第１（Ｇ０５，Ｇ１３）信号
値に対して１次元補間演算を施すことにより算出した前
記第２（Ｒ０９）画素における前記第１（Ｇ０９）信号
値との差分値（Ｒ０９−Ｇ０９）に基づいて推定するこ
とが好ましい。
は、前記第２（ＧＢ）ラインの前記第１（Ｇ０６）画素
における第２（Ｒ０６）信号値を、前記第１（ＧＲ）ラ
インの該第１（Ｇ０６）画素近傍の前記第２（Ｒ０９）
画素における第２（Ｒ０９）信号値と、前記第１（Ｇ
Ｒ）ライン上における前記第１（Ｇ０５，Ｇ１３）信号
値に対して１次元補間演算を施すことにより算出した前
記第２（Ｒ０９）画素における前記第１（Ｇ０９）信号
値との差分値（Ｒ０９−Ｇ０９）に基づいて推定するこ
とが好ましい。
【００１２】また、この場合、前記第２（ＧＢ）ライン
の前記第１（Ｇ０６）画素における第１（Ｇ０６）信号
値に前記差分値（Ｒ０９−Ｇ０９）を加算することによ
り前記第２（ＧＢ）ラインの前記第１（Ｇ０６）画素位
置における第２（Ｒ０６）信号値を推定することが好ま
しい。
の前記第１（Ｇ０６）画素における第１（Ｇ０６）信号
値に前記差分値（Ｒ０９−Ｇ０９）を加算することによ
り前記第２（ＧＢ）ラインの前記第１（Ｇ０６）画素位
置における第２（Ｒ０６）信号値を推定することが好ま
しい。
【００１３】さらに、本発明による画像処理方法におい
ては、前記第２（ＧＢ）ラインの前記第３（Ｂ１０）画
素における第２（Ｒ１０）信号値を、前記第１（ＧＲ）
ラインの該第３（Ｂ１０）画素近傍の前記第１（Ｇ１
３）画素における第１（Ｇ１３）信号値と、前記第１
（ＧＲ）ライン上における前記第２（Ｒ０９，Ｒ１７）
信号値に対して１次元補間演算を施すことにより算出し
た前記第１（Ｇ１３）画素における前記第２（Ｒ１３）
信号値との差分値（Ｒ１３−Ｇ１３）に基づいて推定す
ることが好ましい。
ては、前記第２（ＧＢ）ラインの前記第３（Ｂ１０）画
素における第２（Ｒ１０）信号値を、前記第１（ＧＲ）
ラインの該第３（Ｂ１０）画素近傍の前記第１（Ｇ１
３）画素における第１（Ｇ１３）信号値と、前記第１
（ＧＲ）ライン上における前記第２（Ｒ０９，Ｒ１７）
信号値に対して１次元補間演算を施すことにより算出し
た前記第１（Ｇ１３）画素における前記第２（Ｒ１３）
信号値との差分値（Ｒ１３−Ｇ１３）に基づいて推定す
ることが好ましい。
【００１４】この場合、前記第２（ＧＢ）ラインの前記
第３（Ｂ１０）画素位置における第１（Ｇ１０）信号値
を、該第２（ＧＢ）ライン上における前記第１（Ｇ０
６，Ｇ１４）信号値に対して１次元補間演算を施すこと
により算出し、該算出された第１（Ｇ１０）信号値に前
記差分値（Ｒ１３−Ｇ１３）を加算することにより前記
第２（ＧＢ）ラインの前記第３（Ｂ１０）画素位置にお
ける第２（Ｒ１０）信号値を推定することが好ましい。
第３（Ｂ１０）画素位置における第１（Ｇ１０）信号値
を、該第２（ＧＢ）ライン上における前記第１（Ｇ０
６，Ｇ１４）信号値に対して１次元補間演算を施すこと
により算出し、該算出された第１（Ｇ１０）信号値に前
記差分値（Ｒ１３−Ｇ１３）を加算することにより前記
第２（ＧＢ）ラインの前記第３（Ｂ１０）画素位置にお
ける第２（Ｒ１０）信号値を推定することが好ましい。
【００１５】さらに、本発明による画像処理方法におい
ては、前記差分値は、前記第２（ＧＢ）ラインに隣接す
る２つの前記第１（ＧＲ）ラインにおける前記差分値
（例えばＲ０９−Ｇ０９，Ｒ０３−Ｇ０３）の平均値で
あることが好ましい。
ては、前記差分値は、前記第２（ＧＢ）ラインに隣接す
る２つの前記第１（ＧＲ）ラインにおける前記差分値
（例えばＲ０９−Ｇ０９，Ｒ０３−Ｇ０３）の平均値で
あることが好ましい。
【００１６】さらにまた、本発明による画像処理方法に
おいては、前記第１（ＧＲ）ラインにおける前記第３
（Ｂ）信号値を、該第１（ＧＲ）ラインに隣接する前記
第２（ＧＢ）ラインにおける前記第１（Ｇ）および前記
第３（Ｂ）信号値の差分値に基づいて推定することが好
ましい。
おいては、前記第１（ＧＲ）ラインにおける前記第３
（Ｂ）信号値を、該第１（ＧＲ）ラインに隣接する前記
第２（ＧＢ）ラインにおける前記第１（Ｇ）および前記
第３（Ｂ）信号値の差分値に基づいて推定することが好
ましい。
【００１７】また、この場合、前記第１（ＧＲ）ライン
の前記第１（Ｇ１３）画素における第３（Ｂ１３）信号
値を、前記第２（ＧＢ）ラインの該第１（Ｇ１３）画素
近傍の前記第３（Ｂ１０）画素における第３（Ｂ１０）
信号値と、前記第２（ＧＢ）ライン上における前記第１
（Ｇ０６，Ｇ１４）信号値に対して１次元補間演算を施
すことにより算出した前記第３（Ｂ１０）画素における
前記第１（Ｇ１０）信号値との差分値（Ｂ１０−Ｇ１
０）に基づいて推定することが好ましい。
の前記第１（Ｇ１３）画素における第３（Ｂ１３）信号
値を、前記第２（ＧＢ）ラインの該第１（Ｇ１３）画素
近傍の前記第３（Ｂ１０）画素における第３（Ｂ１０）
信号値と、前記第２（ＧＢ）ライン上における前記第１
（Ｇ０６，Ｇ１４）信号値に対して１次元補間演算を施
すことにより算出した前記第３（Ｂ１０）画素における
前記第１（Ｇ１０）信号値との差分値（Ｂ１０−Ｇ１
０）に基づいて推定することが好ましい。
【００１８】さらにこの場合、前記第１（ＧＲ）ライン
の前記第１（Ｇ１３）画素における第１（Ｇ１３）信号
値に前記差分値（Ｂ１０−Ｇ１０）を加算することによ
り前記第１（ＧＲ）ラインの前記第１（Ｇ１３）画素位
置における第３（Ｂ１３）信号値を推定することが好ま
しい。
の前記第１（Ｇ１３）画素における第１（Ｇ１３）信号
値に前記差分値（Ｂ１０−Ｇ１０）を加算することによ
り前記第１（ＧＲ）ラインの前記第１（Ｇ１３）画素位
置における第３（Ｂ１３）信号値を推定することが好ま
しい。
【００１９】また、本発明による画像処理方法において
は、前記第１（ＧＲ）ラインの前記第２（Ｒ０９）画素
における第３（Ｂ０９）信号値を、前記第２（ＧＢ）ラ
インの該第２（Ｒ０９）画素近傍の前記第１（Ｇ０６）
画素における第１（Ｇ０６）信号値と、前記第２（Ｇ
Ｂ）ライン上における前記第３（Ｂ０２，Ｂ１０）信号
値に対して１次元補間演算を施すことにより算出した前
記第１（Ｇ０６）画素における前記第３（Ｂ０６）信号
値との差分値（Ｂ０６−Ｇ０６）に基づいて推定するこ
とが好ましい。
は、前記第１（ＧＲ）ラインの前記第２（Ｒ０９）画素
における第３（Ｂ０９）信号値を、前記第２（ＧＢ）ラ
インの該第２（Ｒ０９）画素近傍の前記第１（Ｇ０６）
画素における第１（Ｇ０６）信号値と、前記第２（Ｇ
Ｂ）ライン上における前記第３（Ｂ０２，Ｂ１０）信号
値に対して１次元補間演算を施すことにより算出した前
記第１（Ｇ０６）画素における前記第３（Ｂ０６）信号
値との差分値（Ｂ０６−Ｇ０６）に基づいて推定するこ
とが好ましい。
【００２０】この場合、前記第１（ＧＲ）ラインの前記
第２（Ｒ０９）画素における第１（Ｇ０９）信号値を、
該第１（ＧＲ）ライン上における前記第１（Ｇ０５，Ｇ
１３）信号値に対して１次元補間演算を施すことにより
算出し、該算出された第１（Ｇ０９）信号値に前記差分
値（Ｂ０６−Ｇ０６）を加算することにより前記第１
（ＧＲ）ラインの前記第２（Ｒ０９）画素における第３
（Ｂ０９）信号値を推定することが好ましい。
第２（Ｒ０９）画素における第１（Ｇ０９）信号値を、
該第１（ＧＲ）ライン上における前記第１（Ｇ０５，Ｇ
１３）信号値に対して１次元補間演算を施すことにより
算出し、該算出された第１（Ｇ０９）信号値に前記差分
値（Ｂ０６−Ｇ０６）を加算することにより前記第１
（ＧＲ）ラインの前記第２（Ｒ０９）画素における第３
（Ｂ０９）信号値を推定することが好ましい。
【００２１】さらに、前記差分値は、前記第１（ＧＲ）
ラインに隣接する２つの前記第２（ＧＢ）ラインにおけ
る前記差分値（例えばＢ１０−Ｇ１０，Ｂ１６−Ｇ１
６）の平均値であることが好ましい。
ラインに隣接する２つの前記第２（ＧＢ）ラインにおけ
る前記差分値（例えばＢ１０−Ｇ１０，Ｂ１６−Ｇ１
６）の平均値であることが好ましい。
【００２２】また、本発明による画像処理方法において
は、前記画像データにより表される画像の前記所定方向
（矢印Ａ方向）と直交する直交方向（矢印Ｂ方向）にお
いて、前記第１（Ｇ）および前記第２（Ｒ）画素が交互
に、かつ前記第１（Ｇ）および前記第３（Ｂ）画素が交
互に配置されて、前記直交方向における前記第１（Ｇ
Ｒ）ラインおよび前記第２（ＧＢ）ラインを形成してな
る場合、信号値を推定する画素位置に応じて、前記所定
方向における前記第１および前記第２ラインと、前記直
交方向における前記第１および前記第２ラインとを切り
替えて、前記第１から第３信号値のうち少なくとも１つ
の信号値を推定することが好ましい。
は、前記画像データにより表される画像の前記所定方向
（矢印Ａ方向）と直交する直交方向（矢印Ｂ方向）にお
いて、前記第１（Ｇ）および前記第２（Ｒ）画素が交互
に、かつ前記第１（Ｇ）および前記第３（Ｂ）画素が交
互に配置されて、前記直交方向における前記第１（Ｇ
Ｒ）ラインおよび前記第２（ＧＢ）ラインを形成してな
る場合、信号値を推定する画素位置に応じて、前記所定
方向における前記第１および前記第２ラインと、前記直
交方向における前記第１および前記第２ラインとを切り
替えて、前記第１から第３信号値のうち少なくとも１つ
の信号値を推定することが好ましい。
【００２３】この場合、前記切り替えを、前記信号値を
推定する画素位置における信号値の変化方向を表す尺度
値に基づいて行うことが好ましい。
推定する画素位置における信号値の変化方向を表す尺度
値に基づいて行うことが好ましい。
【００２４】ここで、「尺度値」とは、信号値を推定す
る画素位置での信号値の変化方向を表すものであり、例
えば前記所定方向および前記直交方向において信号値を
推定する画素位置に隣接する画素位置における信号値の
変化量により尺度値を表すことができる。
る画素位置での信号値の変化方向を表すものであり、例
えば前記所定方向および前記直交方向において信号値を
推定する画素位置に隣接する画素位置における信号値の
変化量により尺度値を表すことができる。
【００２５】さらに、本発明による画像処理方法におい
ては、前記画像データにより表される画像の前記所定方
向（矢印Ａ方向）と直交する直交方向（矢印Ｂ方向）に
おいて、前記第１（Ｇ）および前記第２（Ｒ）画素が交
互に、かつ前記第１（Ｇ）および前記第３（Ｂ）画素が
交互に配置されて、前記直交方向における前記第１（Ｇ
Ｒ）ラインおよび前記第２（ＧＢ）ラインを形成してな
る場合、前記所定方向における前記第１および前記第２
ラインに基づく所定方向推定値、および前記直交方向に
おける前記第１および前記第２ラインに基づく直交方向
推定値を算出し、信号値を推定する画素位置に応じて、
前記所定方向推定値および前記直交方向推定値を所定の
重み付け係数により重み付け加算して、前記第１から第
３信号値のうち少なくとも１つの信号値を推定すること
が好ましい。
ては、前記画像データにより表される画像の前記所定方
向（矢印Ａ方向）と直交する直交方向（矢印Ｂ方向）に
おいて、前記第１（Ｇ）および前記第２（Ｒ）画素が交
互に、かつ前記第１（Ｇ）および前記第３（Ｂ）画素が
交互に配置されて、前記直交方向における前記第１（Ｇ
Ｒ）ラインおよび前記第２（ＧＢ）ラインを形成してな
る場合、前記所定方向における前記第１および前記第２
ラインに基づく所定方向推定値、および前記直交方向に
おける前記第１および前記第２ラインに基づく直交方向
推定値を算出し、信号値を推定する画素位置に応じて、
前記所定方向推定値および前記直交方向推定値を所定の
重み付け係数により重み付け加算して、前記第１から第
３信号値のうち少なくとも１つの信号値を推定すること
が好ましい。
【００２６】この場合、前記所定の重み付け係数が、前
記信号値を推定する画素位置における信号値の変化方向
を表す尺度値に基づいて算出されたものであることが好
ましい。
記信号値を推定する画素位置における信号値の変化方向
を表す尺度値に基づいて算出されたものであることが好
ましい。
【００２７】ここで、「所定方向推定値」および「直交
方向推定値」とは、所定方向および直交方向についてそ
れぞれ推定した第１から第３信号値のうち少なくとも１
つの信号値のことである。
方向推定値」とは、所定方向および直交方向についてそ
れぞれ推定した第１から第３信号値のうち少なくとも１
つの信号値のことである。
【００２８】また、本発明による画像処理方法において
は、前記第１（ＧＲ）ラインの画素配列が、前記第２
（ＧＢ）ラインの画素配列に対して前記所定方向に略１
／２画素相対的にずれることにより、前記画像データに
より表される画像の前記第１から第３画素が市松状に配
列されてなることが好ましい。
は、前記第１（ＧＲ）ラインの画素配列が、前記第２
（ＧＢ）ラインの画素配列に対して前記所定方向に略１
／２画素相対的にずれることにより、前記画像データに
より表される画像の前記第１から第３画素が市松状に配
列されてなることが好ましい。
【００２９】このような画素位置の配列の場合、全ての
画素位置における信号値を推定するとともに、該推定さ
れた信号値に基づいて、空孔画素位置における信号値を
推定することが好ましい。
画素位置における信号値を推定するとともに、該推定さ
れた信号値に基づいて、空孔画素位置における信号値を
推定することが好ましい。
【００３０】ここで、「空孔画素位置」とは、図１６に
示すようなハニカム配列の単板ＣＣＤにおいて、これを
正方配列と見なした場合に、例えば図１６の横方向にお
けるＲとＢとの間、ＧとＧとの間の画素位置のように、
信号値を有さない画素位置とみなせる位置のことをい
う。
示すようなハニカム配列の単板ＣＣＤにおいて、これを
正方配列と見なした場合に、例えば図１６の横方向にお
けるＲとＢとの間、ＧとＧとの間の画素位置のように、
信号値を有さない画素位置とみなせる位置のことをい
う。
【００３１】また、本発明による画像処理方法において
は、前記第１から前記第３の信号値が、それぞれＧ（グ
リーン）、Ｂ（ブルー）、Ｒ（レッド）のいずれかの
色、あるいはＹ（イエロー）、Ｇ（グリーン）、Ｃ（シ
アン）のいずれかの色信号であることが好ましい。
は、前記第１から前記第３の信号値が、それぞれＧ（グ
リーン）、Ｂ（ブルー）、Ｒ（レッド）のいずれかの
色、あるいはＹ（イエロー）、Ｇ（グリーン）、Ｃ（シ
アン）のいずれかの色信号であることが好ましい。
【００３２】さらに、本発明による画像処理方法におい
ては、前記画像データが、異なる分光感度を有する第１
から第３の光電変換素子を単一面上に配置して撮像面が
形成された撮像デバイスであって、前記第１および前記
第２の光電変換素子を所定方向に交互に配置して第１ラ
インを形成し、前記第１および前記第３の光電変換素子
を前記所定方向に交互に配置して第２ラインを形成し、
さらに前記第１および前記第２ラインを前記所定方向と
略直交する方向に交互に配置することにより、前記撮像
面が形成された撮像デバイスにおいて得られたものであ
ってもよい。
ては、前記画像データが、異なる分光感度を有する第１
から第３の光電変換素子を単一面上に配置して撮像面が
形成された撮像デバイスであって、前記第１および前記
第２の光電変換素子を所定方向に交互に配置して第１ラ
インを形成し、前記第１および前記第３の光電変換素子
を前記所定方向に交互に配置して第２ラインを形成し、
さらに前記第１および前記第２ラインを前記所定方向と
略直交する方向に交互に配置することにより、前記撮像
面が形成された撮像デバイスにおいて得られたものであ
ってもよい。
【００３３】また、本発明による他の画像処理方法は、
異なる分光分布を有する第１から第３の信号値を有する
第１から第３の画素からなる画像を表す画像データであ
って、前記第１および前記第２の画素が所定方向に交互
に配置されて第１ラインが形成され、前記第１および前
記第３の画素が前記所定方向に交互に配置されて第２ラ
インが形成され、さらに前記第１および前記第２ライン
が前記所定方向と略直交する方向に交互に配置されてな
る画像を表す画像データに対して画像処理を施す画像処
理方法において、本発明による画像処理方法により、前
記画像データにより表される画像の全画素位置における
前記第１から第３信号値のうち少なくとも１つの信号値
を推定して推定画像データを得、前記画像データから高
周波の輝度情報を表す高周波輝度信号を作成し、前記推
定画像データを、該推定画像データの輝度情報および色
差情報を表す推定輝度信号および推定色差信号に変換
し、前記推定輝度信号と前記高周波輝度信号とを加算し
て加算輝度信号を得、該加算輝度信号および前記推定色
差信号を前記画像データの輝度色差信号とすることを特
徴とするものである。
異なる分光分布を有する第１から第３の信号値を有する
第１から第３の画素からなる画像を表す画像データであ
って、前記第１および前記第２の画素が所定方向に交互
に配置されて第１ラインが形成され、前記第１および前
記第３の画素が前記所定方向に交互に配置されて第２ラ
インが形成され、さらに前記第１および前記第２ライン
が前記所定方向と略直交する方向に交互に配置されてな
る画像を表す画像データに対して画像処理を施す画像処
理方法において、本発明による画像処理方法により、前
記画像データにより表される画像の全画素位置における
前記第１から第３信号値のうち少なくとも１つの信号値
を推定して推定画像データを得、前記画像データから高
周波の輝度情報を表す高周波輝度信号を作成し、前記推
定画像データを、該推定画像データの輝度情報および色
差情報を表す推定輝度信号および推定色差信号に変換
し、前記推定輝度信号と前記高周波輝度信号とを加算し
て加算輝度信号を得、該加算輝度信号および前記推定色
差信号を前記画像データの輝度色差信号とすることを特
徴とするものである。
【００３４】ここで、画像データから高周波輝度信号を
作成する方法としては、画像データを構成する第１から
第３の信号値をそのまま輝度信号とし、この輝度信号に
対してハイパスフィルタによるフィルタリング処理を施
す方法や、例えば特開平５−２２８１０８号、同６−３
０４４４号、同６−２２５３４３号、同８−９１９９号
などに記載された方法を採用することができる。
作成する方法としては、画像データを構成する第１から
第３の信号値をそのまま輝度信号とし、この輝度信号に
対してハイパスフィルタによるフィルタリング処理を施
す方法や、例えば特開平５−２２８１０８号、同６−３
０４４４号、同６−２２５３４３号、同８−９１９９号
などに記載された方法を採用することができる。
【００３５】なお、本発明による他の画像処理方法にお
いては、前記画像データに対して、前記推定輝度信号の
周波数帯域の周波数成分をカットするハイパスフィルタ
によるフィルタリング処理を施すことにより、前記高周
波輝度信号を作成することが好ましい。
いては、前記画像データに対して、前記推定輝度信号の
周波数帯域の周波数成分をカットするハイパスフィルタ
によるフィルタリング処理を施すことにより、前記高周
波輝度信号を作成することが好ましい。
【００３６】また、本発明による他の画像処理方法にお
いては、前記画像データに対して、所定の通過帯域特性
を有するバンドパスフィルタによるフィルタリング処理
を施すことにより、前記高周波輝度信号を作成すること
が好ましい。
いては、前記画像データに対して、所定の通過帯域特性
を有するバンドパスフィルタによるフィルタリング処理
を施すことにより、前記高周波輝度信号を作成すること
が好ましい。
【００３７】ここで、「所定の通過帯域特性」として
は、例えば画像データのノイズ成分に対応する周波数帯
域の周波数成分をカットする特性のことをいう。
は、例えば画像データのノイズ成分に対応する周波数帯
域の周波数成分をカットする特性のことをいう。
【００３８】本発明による画像処理装置は、異なる分光
分布を有する第１から第３の信号値を有する第１から第
３の画素からなる画像を表す画像データであって、前記
第１および前記第２の画素が所定方向に交互に配置され
て第１ラインが形成され、前記第１および前記第３の画
素が前記所定方向に交互に配置されて第２ラインが形成
され、さらに前記第１および前記第２ラインが前記所定
方向と略直交する方向に交互に配置されてなる画像を表
す画像データの、前記第１から第３信号値に基づいて、
全画素位置における前記第１から第３信号値のうち少な
くとも１つの信号値を推定する推定手段を備えた画像処
理装置において、前記推定手段は、前記第２ラインにお
ける前記第２信号値を、該第２ラインに隣接する前記第
１ラインにおける前記第１および前記第２信号値の差分
値に基づいて推定する手段であることを特徴とするもの
である。
分布を有する第１から第３の信号値を有する第１から第
３の画素からなる画像を表す画像データであって、前記
第１および前記第２の画素が所定方向に交互に配置され
て第１ラインが形成され、前記第１および前記第３の画
素が前記所定方向に交互に配置されて第２ラインが形成
され、さらに前記第１および前記第２ラインが前記所定
方向と略直交する方向に交互に配置されてなる画像を表
す画像データの、前記第１から第３信号値に基づいて、
全画素位置における前記第１から第３信号値のうち少な
くとも１つの信号値を推定する推定手段を備えた画像処
理装置において、前記推定手段は、前記第２ラインにお
ける前記第２信号値を、該第２ラインに隣接する前記第
１ラインにおける前記第１および前記第２信号値の差分
値に基づいて推定する手段であることを特徴とするもの
である。
【００３９】なお、本発明による画像処理装置において
は、前記推定手段は、前記第２ラインの前記第１画素に
おける第２信号値を、前記第１ラインの該第１画素近傍
の前記第２画素における第２信号値と、前記第１ライン
上における前記第１信号値に対して１次元補間演算を施
すことにより算出した前記第２画素における前記第１信
号値との差分値に基づいて推定する手段であることが好
ましい。
は、前記推定手段は、前記第２ラインの前記第１画素に
おける第２信号値を、前記第１ラインの該第１画素近傍
の前記第２画素における第２信号値と、前記第１ライン
上における前記第１信号値に対して１次元補間演算を施
すことにより算出した前記第２画素における前記第１信
号値との差分値に基づいて推定する手段であることが好
ましい。
【００４０】また、この場合、前記推定手段は、前記第
２ラインの前記第１画素における第１信号値に前記差分
値を加算することにより、前記第２ラインの前記第１画
素における第２信号値を推定する手段であることが好ま
しい。
２ラインの前記第１画素における第１信号値に前記差分
値を加算することにより、前記第２ラインの前記第１画
素における第２信号値を推定する手段であることが好ま
しい。
【００４１】さらに、本発明による画像処理装置におい
ては、前記推定手段は、前記第２ラインの前記第３画素
における第２信号値を、前記第１ラインの該第３画素近
傍の前記第１画素における第１信号値と、前記第１ライ
ン上における前記第２信号値に対して１次元補間演算を
施すことにより算出した前記第１画素における前記第２
信号値との差分値に基づいて推定する手段であることが
好ましい。
ては、前記推定手段は、前記第２ラインの前記第３画素
における第２信号値を、前記第１ラインの該第３画素近
傍の前記第１画素における第１信号値と、前記第１ライ
ン上における前記第２信号値に対して１次元補間演算を
施すことにより算出した前記第１画素における前記第２
信号値との差分値に基づいて推定する手段であることが
好ましい。
【００４２】この場合、前記推定手段は、前記第２ライ
ンの前記第３画素位置における第１信号値を、該第２ラ
イン上における前記第１信号値に対して１次元補間演算
を施すことにより算出し、該算出された第１信号値に前
記差分値を加算することにより前記第２ラインの前記第
３画素位置における第２信号値を推定する手段であるこ
とが好ましい。
ンの前記第３画素位置における第１信号値を、該第２ラ
イン上における前記第１信号値に対して１次元補間演算
を施すことにより算出し、該算出された第１信号値に前
記差分値を加算することにより前記第２ラインの前記第
３画素位置における第２信号値を推定する手段であるこ
とが好ましい。
【００４３】また、前記差分値は、前記第２ラインに隣
接する２つの前記第１ラインにおける前記差分値の平均
値であることが好ましい。
接する２つの前記第１ラインにおける前記差分値の平均
値であることが好ましい。
【００４４】さらに、本発明による画像処理装置におい
ては、前記推定手段は、前記第１ラインにおける前記第
３信号値を、該第１ラインに隣接する前記第２ラインに
おける前記第１および前記第３信号値の差分値に基づい
て推定する手段であることが好ましい。
ては、前記推定手段は、前記第１ラインにおける前記第
３信号値を、該第１ラインに隣接する前記第２ラインに
おける前記第１および前記第３信号値の差分値に基づい
て推定する手段であることが好ましい。
【００４５】この場合、前記推定手段は、前記第１ライ
ンの前記第１画素における第３信号値を、前記第２ライ
ンの該第１画素近傍の前記第３画素における第３信号値
と、前記第２ライン上における前記第１信号値に対して
１次元補間演算を施すことにより算出した前記第３画素
における前記第１信号値との差分値に基づいて推定する
手段であることが好ましい。
ンの前記第１画素における第３信号値を、前記第２ライ
ンの該第１画素近傍の前記第３画素における第３信号値
と、前記第２ライン上における前記第１信号値に対して
１次元補間演算を施すことにより算出した前記第３画素
における前記第１信号値との差分値に基づいて推定する
手段であることが好ましい。
【００４６】さらにこの場合、前記推定手段は、前記第
１ラインの前記第１画素における第１信号値に前記差分
値を加算することにより前記第１ラインの前記第１画素
位置における第３信号値を推定する手段であることが好
ましい。
１ラインの前記第１画素における第１信号値に前記差分
値を加算することにより前記第１ラインの前記第１画素
位置における第３信号値を推定する手段であることが好
ましい。
【００４７】また、本発明による画像処理装置において
は、前記推定手段は、前記第１ラインの前記第２画素に
おける第３信号値を、前記第２ラインの該第２画素近傍
の前記第１画素における第１信号値と、前記第２ライン
上における前記第３信号値に対して１次元補間演算を施
すことにより算出した前記第１画素における前記第３信
号値との差分値に基づいて推定する手段であることが好
ましい。
は、前記推定手段は、前記第１ラインの前記第２画素に
おける第３信号値を、前記第２ラインの該第２画素近傍
の前記第１画素における第１信号値と、前記第２ライン
上における前記第３信号値に対して１次元補間演算を施
すことにより算出した前記第１画素における前記第３信
号値との差分値に基づいて推定する手段であることが好
ましい。
【００４８】この場合、前記推定手段は、前記第１ライ
ンの前記第２画素における第１信号値を、該第１ライン
上における前記第１信号値に対して１次元補間演算を施
すことにより算出し、該算出された第１信号値に前記差
分値を加算することにより前記第１ラインの前記第２画
素における第３信号値を推定する手段であることが好ま
しい。
ンの前記第２画素における第１信号値を、該第１ライン
上における前記第１信号値に対して１次元補間演算を施
すことにより算出し、該算出された第１信号値に前記差
分値を加算することにより前記第１ラインの前記第２画
素における第３信号値を推定する手段であることが好ま
しい。
【００４９】なお、前記推定手段は、前記差分値を、前
記第１ラインに隣接する２つの前記第２ラインにおける
前記差分値の平均値として算出する手段であることが好
ましい。
記第１ラインに隣接する２つの前記第２ラインにおける
前記差分値の平均値として算出する手段であることが好
ましい。
【００５０】また、本発明による画像処理装置において
は、前記画像データにより表される画像の前記所定方向
と直交する直交方向において、前記第１および前記第２
画素が交互に、かつ前記第１および前記第３画素が交互
に配置されて、前記直交方向における前記第１ラインお
よび前記第２ラインを形成してなる場合、前記推定手段
は、信号値を推定する画素位置に応じて、前記所定方向
における前記第１および前記第２ラインと、前記直交方
向における前記第１および前記第２ラインとを切り替え
て、前記第１から第３信号値のうち少なくとも１つの信
号値を推定する手段であることが好ましい。
は、前記画像データにより表される画像の前記所定方向
と直交する直交方向において、前記第１および前記第２
画素が交互に、かつ前記第１および前記第３画素が交互
に配置されて、前記直交方向における前記第１ラインお
よび前記第２ラインを形成してなる場合、前記推定手段
は、信号値を推定する画素位置に応じて、前記所定方向
における前記第１および前記第２ラインと、前記直交方
向における前記第１および前記第２ラインとを切り替え
て、前記第１から第３信号値のうち少なくとも１つの信
号値を推定する手段であることが好ましい。
【００５１】この場合、前記切り替えを、前記信号値を
推定する画素位置における信号値の変化方向を表す尺度
値に基づいて行うことが好ましい。
推定する画素位置における信号値の変化方向を表す尺度
値に基づいて行うことが好ましい。
【００５２】さらに、本発明による画像処理装置におい
ては、前記画像データにより表される画像の前記所定方
向と直交する直交方向において、前記第１および前記第
２画素が交互に、かつ前記第１および前記第３画素が交
互に配置されて、前記直交方向における前記第１ライン
および前記第２ラインを形成してなる場合、前記推定手
段は、前記所定方向における前記第１および前記第２ラ
インに基づく所定方向推定値、および前記直交方向にお
ける前記第１および前記第２ラインに基づく直交方向推
定値を算出する手段と、信号値を推定する画素位置に応
じて、前記所定方向推定値および前記直交方向推定値を
所定の重み付け係数により重み付け加算して、前記第１
から第３信号値のうち少なくとも１つの信号値を推定す
る手段とを有することが好ましい。
ては、前記画像データにより表される画像の前記所定方
向と直交する直交方向において、前記第１および前記第
２画素が交互に、かつ前記第１および前記第３画素が交
互に配置されて、前記直交方向における前記第１ライン
および前記第２ラインを形成してなる場合、前記推定手
段は、前記所定方向における前記第１および前記第２ラ
インに基づく所定方向推定値、および前記直交方向にお
ける前記第１および前記第２ラインに基づく直交方向推
定値を算出する手段と、信号値を推定する画素位置に応
じて、前記所定方向推定値および前記直交方向推定値を
所定の重み付け係数により重み付け加算して、前記第１
から第３信号値のうち少なくとも１つの信号値を推定す
る手段とを有することが好ましい。
【００５３】この場合、前記所定の重み付け係数が、前
記信号値を推定する画素位置における信号値の変化方向
を表す尺度値に基づいて算出されたものであることが好
ましい。
記信号値を推定する画素位置における信号値の変化方向
を表す尺度値に基づいて算出されたものであることが好
ましい。
【００５４】また、本発明による画像処理装置において
は、前記第１ラインの画素配列が、前記第２ラインの画
素配列に対して前記所定方向に略１／２画素相対的にず
れることにより、前記画像データにより表される画像の
前記第１から第３の画素が市松状に配列されてなること
が好ましい。
は、前記第１ラインの画素配列が、前記第２ラインの画
素配列に対して前記所定方向に略１／２画素相対的にず
れることにより、前記画像データにより表される画像の
前記第１から第３の画素が市松状に配列されてなること
が好ましい。
【００５５】この場合、前記推定手段は、全ての画素位
置における信号値を推定するとともに、該推定された信
号値に基づいて、空孔画素位置における信号値を推定す
る手段であることが好ましい。
置における信号値を推定するとともに、該推定された信
号値に基づいて、空孔画素位置における信号値を推定す
る手段であることが好ましい。
【００５６】なお、本発明による画像処理装置において
は、前記第１から前記第３の信号値が、それぞれＧ、
Ｂ、Ｒのいずれかの色に、あるいはＹ、Ｇ、Ｃのいずれ
かの色信号であることが好ましい。
は、前記第１から前記第３の信号値が、それぞれＧ、
Ｂ、Ｒのいずれかの色に、あるいはＹ、Ｇ、Ｃのいずれ
かの色信号であることが好ましい。
【００５７】また、本発明による画像処理装置において
は、前記画像データが、異なる分光感度を有する第１か
ら第３の光電変換素子を単一面上に配置して撮像面が形
成された撮像デバイスであって、前記第１および前記第
２の光電変換素子を所定方向に交互に配置して第１ライ
ンを形成し、前記第１および前記第３の光電変換素子を
前記所定方向に交互に配置して第２ラインを形成し、さ
らに前記第１および前記第２ラインを前記所定方向と略
直交する方向に交互に配置することにより、前記撮像面
が形成された撮像デバイスにおいて得られたものであっ
てもよい。
は、前記画像データが、異なる分光感度を有する第１か
ら第３の光電変換素子を単一面上に配置して撮像面が形
成された撮像デバイスであって、前記第１および前記第
２の光電変換素子を所定方向に交互に配置して第１ライ
ンを形成し、前記第１および前記第３の光電変換素子を
前記所定方向に交互に配置して第２ラインを形成し、さ
らに前記第１および前記第２ラインを前記所定方向と略
直交する方向に交互に配置することにより、前記撮像面
が形成された撮像デバイスにおいて得られたものであっ
てもよい。
【００５８】本発明による他の画像処理装置は、異なる
分光分布を有する第１から第３の信号値を有する第１か
ら第３の画素からなる画像を表す画像データであって、
前記第１および前記第２の画素が所定方向に交互に配置
されて第１ラインが形成され、前記第１および前記第３
の画素が前記所定方向に交互に配置されて第２ラインが
形成され、さらに前記第１および前記第２ラインが前記
所定方向と略直交する方向に交互に配置されてなる画像
を表す画像データに対して画像処理を施す画像処理装置
において、上記本発明による画像処理装置により、前記
画像データにより表される画像の全画素位置における前
記第１から第３信号値のうち少なくとも１つの信号値を
推定して推定画像データを得る補間手段と、前記画像デ
ータの高周波の輝度情報を表す高周波輝度信号を作成す
る高周波輝度信号作成手段と、前記推定画像データを該
推定画像データの輝度情報および色差情報を表す推定輝
度信号および推定色差信号に変換する輝度色差変換手段
と、前記推定輝度信号と前記高周波輝度信号とを加算し
て加算輝度信号を得る加算手段とを備え、該加算輝度信
号および前記推定色差信号を前記画像データの輝度色差
信号とすることを特徴とするものである。
分光分布を有する第１から第３の信号値を有する第１か
ら第３の画素からなる画像を表す画像データであって、
前記第１および前記第２の画素が所定方向に交互に配置
されて第１ラインが形成され、前記第１および前記第３
の画素が前記所定方向に交互に配置されて第２ラインが
形成され、さらに前記第１および前記第２ラインが前記
所定方向と略直交する方向に交互に配置されてなる画像
を表す画像データに対して画像処理を施す画像処理装置
において、上記本発明による画像処理装置により、前記
画像データにより表される画像の全画素位置における前
記第１から第３信号値のうち少なくとも１つの信号値を
推定して推定画像データを得る補間手段と、前記画像デ
ータの高周波の輝度情報を表す高周波輝度信号を作成す
る高周波輝度信号作成手段と、前記推定画像データを該
推定画像データの輝度情報および色差情報を表す推定輝
度信号および推定色差信号に変換する輝度色差変換手段
と、前記推定輝度信号と前記高周波輝度信号とを加算し
て加算輝度信号を得る加算手段とを備え、該加算輝度信
号および前記推定色差信号を前記画像データの輝度色差
信号とすることを特徴とするものである。
【００５９】なお、本発明による他の画像処理装置にお
いては、前記高周波輝度信号作成手段は、前記画像デー
タに対して、前記推定輝度信号の周波数帯域の周波数成
分をカットするハイパスフィルタによるフィルタリング
処理を施すことにより、前記高周波輝度信号を作成する
手段であることが好ましい。
いては、前記高周波輝度信号作成手段は、前記画像デー
タに対して、前記推定輝度信号の周波数帯域の周波数成
分をカットするハイパスフィルタによるフィルタリング
処理を施すことにより、前記高周波輝度信号を作成する
手段であることが好ましい。
【００６０】また、本発明による他の画像処理装置にお
いては、前記高周波輝度信号作成手段は、前記画像デー
タに対して、所定の通過帯域特性を有するバンドパスフ
ィルタによるフィルタリング処理を施すことにより、前
記高周波輝度信号を作成する手段であることが好まし
い。
いては、前記高周波輝度信号作成手段は、前記画像デー
タに対して、所定の通過帯域特性を有するバンドパスフ
ィルタによるフィルタリング処理を施すことにより、前
記高周波輝度信号を作成する手段であることが好まし
い。
【００６１】なお、本発明による画像処理方法および本
発明による他の画像処理方法をコンピュータに実行させ
るためのプログラムとして、コンピュータ読取り可能な
記録媒体に記録して提供してもよい。
発明による他の画像処理方法をコンピュータに実行させ
るためのプログラムとして、コンピュータ読取り可能な
記録媒体に記録して提供してもよい。
【００６２】また、本発明による画像処理装置をデジタ
ルカメラ等の撮像装置に設けてもよく、プリンタ等の出
力装置に設けてもよい。
ルカメラ等の撮像装置に設けてもよく、プリンタ等の出
力装置に設けてもよい。
【００６３】
【発明の効果】本発明による画像処理方法および装置に
よれば、画像データを構成する信号値が、光量に対する
指数値や対数値により表されている場合、画像データに
より表される画像の局所的な領域においてはＲＧＢ各信
号値の差は一定であるという前提に基づいて、各画素位
置における信号値を算出するようにしたため、画像デー
タを構成する信号値が指数値や対数値により表されてい
る場合であっても、偽色を発生させることなく、全画素
位置における信号値を求めることができる。したがっ
て、本発明により、偽色のない高解像度の画像を得るこ
とができる。
よれば、画像データを構成する信号値が、光量に対する
指数値や対数値により表されている場合、画像データに
より表される画像の局所的な領域においてはＲＧＢ各信
号値の差は一定であるという前提に基づいて、各画素位
置における信号値を算出するようにしたため、画像デー
タを構成する信号値が指数値や対数値により表されてい
る場合であっても、偽色を発生させることなく、全画素
位置における信号値を求めることができる。したがっ
て、本発明により、偽色のない高解像度の画像を得るこ
とができる。
【００６４】また、信号値が変化する方向に応じて、所
定方向および直交方向について算出された信号値を重み
付け加算して、各画素位置における信号値を算出するこ
とにより、信号値の変化方向に拘わらず偽色の発生を防
止できるとともに、アーチファクトの発生をも防止する
ことができる。
定方向および直交方向について算出された信号値を重み
付け加算して、各画素位置における信号値を算出するこ
とにより、信号値の変化方向に拘わらず偽色の発生を防
止できるとともに、アーチファクトの発生をも防止する
ことができる。
【００６５】さらに、市松状に画素が配列されている場
合に、空孔画素位置の信号値を求めることにより、正方
状に画素が配列された状態における信号値を得ることが
できる。
合に、空孔画素位置の信号値を求めることにより、正方
状に画素が配列された状態における信号値を得ることが
できる。
【００６６】また、本発明の他の画像処理方法および装
置によれば、本発明による画像処理方法および装置によ
り画像データにより表される画像の全画素位置における
第１から第３の信号値のうち少なくとも１つの信号値が
推定されて推定画像データが得られる。また、画像デー
タの高周波の輝度情報を表す高周波輝度信号が作成さ
れ、推定画像データは推定画像データの輝度情報および
色差情報を表す推定輝度信号および推定色差信号に変換
される。そして、推定輝度信号と高周波輝度信号とが加
算されて加算輝度信号が得られる。ここで、推定画像デ
ータは偽色が低減されているため、偽色を生じさせるこ
となく画像データを取得したシーンの画像を再現するこ
とができる。一方、画像データについては、その高周波
成分は画像データを取得したシーンの高周波成分を忠実
に表すものであるが、低周波成分には偽色が含まれる。
したがって、画像データの高周波の輝度情報を表す高周
波輝度信号はシーンの高周波成分を忠実に表す信号とな
る。このため、高周波輝度信号と推定輝度信号とを加算
することにより得られる加算輝度信号はシーンの高周波
成分を忠実に表すとともに、低周波成分についても偽色
が低減されたものとなる。その結果、加算輝度信号と推
定色差信号とに基づいて画像を再現することにより、よ
り高解像度の画像を得ることができる。
置によれば、本発明による画像処理方法および装置によ
り画像データにより表される画像の全画素位置における
第１から第３の信号値のうち少なくとも１つの信号値が
推定されて推定画像データが得られる。また、画像デー
タの高周波の輝度情報を表す高周波輝度信号が作成さ
れ、推定画像データは推定画像データの輝度情報および
色差情報を表す推定輝度信号および推定色差信号に変換
される。そして、推定輝度信号と高周波輝度信号とが加
算されて加算輝度信号が得られる。ここで、推定画像デ
ータは偽色が低減されているため、偽色を生じさせるこ
となく画像データを取得したシーンの画像を再現するこ
とができる。一方、画像データについては、その高周波
成分は画像データを取得したシーンの高周波成分を忠実
に表すものであるが、低周波成分には偽色が含まれる。
したがって、画像データの高周波の輝度情報を表す高周
波輝度信号はシーンの高周波成分を忠実に表す信号とな
る。このため、高周波輝度信号と推定輝度信号とを加算
することにより得られる加算輝度信号はシーンの高周波
成分を忠実に表すとともに、低周波成分についても偽色
が低減されたものとなる。その結果、加算輝度信号と推
定色差信号とに基づいて画像を再現することにより、よ
り高解像度の画像を得ることができる。
【００６７】なお、第１から第３の信号値の比率が画像
上の位置により急激に変化しないと仮定すると、本発明
の他の画像処理方法および装置により、一層高解像度の
画像を得ることができる。しかしながら、第１から第３
の信号値の比率の変化が大きい場合には、高周波輝度信
号に偽信号が含まれるため、この高周波輝度信号から加
算輝度信号を作成して推定色差信号とともに画像を再現
すると、画像中にグレイのノイズが現れてしまう。した
がって、このような場合には、このグレイのノイズ成分
に対応する周波数帯域の周波数成分をカットするバンド
パスフィルタを用いて高周波輝度信号を作成することに
より、グレイのノイズを低減できるとともに、画像の解
像度をも向上させることができる。
上の位置により急激に変化しないと仮定すると、本発明
の他の画像処理方法および装置により、一層高解像度の
画像を得ることができる。しかしながら、第１から第３
の信号値の比率の変化が大きい場合には、高周波輝度信
号に偽信号が含まれるため、この高周波輝度信号から加
算輝度信号を作成して推定色差信号とともに画像を再現
すると、画像中にグレイのノイズが現れてしまう。した
がって、このような場合には、このグレイのノイズ成分
に対応する周波数帯域の周波数成分をカットするバンド
パスフィルタを用いて高周波輝度信号を作成することに
より、グレイのノイズを低減できるとともに、画像の解
像度をも向上させることができる。
【００６８】
【発明の実施の形態】以下図面を参照して本発明の実施
形態について説明する。図１は本発明の第１の実施形態
による画像処理装置の構成を示す概略ブロック図であ
る。図１に示すように本発明の第１の実施形態による画
像処理装置は、単板ＣＣＤ１を構成する各光電変換素子
において得られた信号値に対して補間処理を施して、全
画素位置における信号値を求めるものであり、各信号値
により構成される画像データＳ０に対して補間処理を施
して、補間済み画像データＳ１を得る補間手段２を備え
る。補間手段２は、後述するようにして補間演算により
Ｇ信号ＱＧを算出するＧ補間手段３と、Ｒ信号ＱＲおよ
びＢ信号ＱＢを算出するＲＢ補間手段４と、Ｇ信号Ｑ
Ｇ、Ｒ信号ＱＲおよびＢ信号ＱＢから後述する図３に示
す空孔画素位置＊の信号値を算出する市松正方補間手段
５とを備える。なお、図１に示す単板ＣＣＤ１において
は、これを構成する光電変換素子からはアナログ信号が
得られるものであるが、本実施形態における画像データ
Ｓ０は、アナログ信号をＡ／Ｄ変換したデジタル信号で
あり、なおかつこのデジタル信号は単板ＣＣＤ１に入力
する光量の０．４５乗あるいは対数値となるように変換
されているものとする。
形態について説明する。図１は本発明の第１の実施形態
による画像処理装置の構成を示す概略ブロック図であ
る。図１に示すように本発明の第１の実施形態による画
像処理装置は、単板ＣＣＤ１を構成する各光電変換素子
において得られた信号値に対して補間処理を施して、全
画素位置における信号値を求めるものであり、各信号値
により構成される画像データＳ０に対して補間処理を施
して、補間済み画像データＳ１を得る補間手段２を備え
る。補間手段２は、後述するようにして補間演算により
Ｇ信号ＱＧを算出するＧ補間手段３と、Ｒ信号ＱＲおよ
びＢ信号ＱＢを算出するＲＢ補間手段４と、Ｇ信号Ｑ
Ｇ、Ｒ信号ＱＲおよびＢ信号ＱＢから後述する図３に示
す空孔画素位置＊の信号値を算出する市松正方補間手段
５とを備える。なお、図１に示す単板ＣＣＤ１において
は、これを構成する光電変換素子からはアナログ信号が
得られるものであるが、本実施形態における画像データ
Ｓ０は、アナログ信号をＡ／Ｄ変換したデジタル信号で
あり、なおかつこのデジタル信号は単板ＣＣＤ１に入力
する光量の０．４５乗あるいは対数値となるように変換
されているものとする。
【００６９】なお、本実施形態による画像処理装置は、
デジタルカメラのような撮像装置やフイルムから画像を
読み取るスキャナ等の読取装置に設けられるものであっ
てもよく、これらの装置において得られた画像信号を再
生するモニタやプリンタ等の再生装置に設けられるもの
であってもよい。また、画像処理装置単体として用いて
もよい。
デジタルカメラのような撮像装置やフイルムから画像を
読み取るスキャナ等の読取装置に設けられるものであっ
てもよく、これらの装置において得られた画像信号を再
生するモニタやプリンタ等の再生装置に設けられるもの
であってもよい。また、画像処理装置単体として用いて
もよい。
【００７０】図２は本実施形態において用いられる単板
ＣＣＤ１の画素配列を示す図である。図２（ａ）に示す
画素配列は、ｙ方向にＲ，Ｇチャンネルに対応する画素
を交互に配列した第１のラインと、ｙ方向にＧ，Ｂチャ
ンネルに対応する画素を交互に配列した第２のラインと
を、ｘ方向に交互に配列したものであり、ｘ方向におけ
る各ラインにおいてもＲ，ＧチャンネルおよびＧ，Ｂチ
ャンネルが交互に配列された正方状の画素配列となって
いる。このような正方状の画素配列としては、図１７に
示すベイヤー配列が知られており、本実施形態において
は図２（ａ）に示す画素配列をベイヤー配列と称するも
のとする。
ＣＣＤ１の画素配列を示す図である。図２（ａ）に示す
画素配列は、ｙ方向にＲ，Ｇチャンネルに対応する画素
を交互に配列した第１のラインと、ｙ方向にＧ，Ｂチャ
ンネルに対応する画素を交互に配列した第２のラインと
を、ｘ方向に交互に配列したものであり、ｘ方向におけ
る各ラインにおいてもＲ，ＧチャンネルおよびＧ，Ｂチ
ャンネルが交互に配列された正方状の画素配列となって
いる。このような正方状の画素配列としては、図１７に
示すベイヤー配列が知られており、本実施形態において
は図２（ａ）に示す画素配列をベイヤー配列と称するも
のとする。
【００７１】また、図２（ｂ）に示す画素配列は、ｙ方
向にＲ，Ｂチャンネルに対応する画素を交互に配設した
ラインと、ｙ方向にＧチャンネルに対応する画素を配列
したラインとを、各ラインの画素の配列間隔が他のライ
ンの画素配列に対してｙ方向に略１／２相対的にずれる
ように配列したものであり、市松状の画素配列となって
いる。このような市松状の画素配列としては、上記特開
平１０−１３６３９１号に記載されたハニカム配列（図
１６）が知られており、本実施形態においては図２
（ｂ）に示す画素配列をハニカム配列と称するものとす
る。このハニカム配列は、ｘ方向に対して４５度傾斜し
た方向についてみれば、Ｒ，Ｇチャンネルの画素を交互
に配列したラインと、同様に４５度傾斜した方向にＧ，
Ｂチャンネルの画素を交互に配列したラインとを、この
方向に直交する方向に交互に配列したものとなってい
る。なお、ハニカム配列は図２（ａ）に示すようなベイ
ヤー配列と画素の配列を４５度回転させた関係となって
いる。また、ハニカム配列は上述したように市松状に画
素が配列されてなるものであり、信号値を有さない空孔
画素位置＊を用いて図３に示すように正方状に表現する
ことも可能である。本実施形態においては、図２（ｂ）
すなわち図３に示すハニカム配列の単板ＣＣＤ１におい
て得られた画像データＳ０に対して処理を行うものとし
て説明する。
向にＲ，Ｂチャンネルに対応する画素を交互に配設した
ラインと、ｙ方向にＧチャンネルに対応する画素を配列
したラインとを、各ラインの画素の配列間隔が他のライ
ンの画素配列に対してｙ方向に略１／２相対的にずれる
ように配列したものであり、市松状の画素配列となって
いる。このような市松状の画素配列としては、上記特開
平１０−１３６３９１号に記載されたハニカム配列（図
１６）が知られており、本実施形態においては図２
（ｂ）に示す画素配列をハニカム配列と称するものとす
る。このハニカム配列は、ｘ方向に対して４５度傾斜し
た方向についてみれば、Ｒ，Ｇチャンネルの画素を交互
に配列したラインと、同様に４５度傾斜した方向にＧ，
Ｂチャンネルの画素を交互に配列したラインとを、この
方向に直交する方向に交互に配列したものとなってい
る。なお、ハニカム配列は図２（ａ）に示すようなベイ
ヤー配列と画素の配列を４５度回転させた関係となって
いる。また、ハニカム配列は上述したように市松状に画
素が配列されてなるものであり、信号値を有さない空孔
画素位置＊を用いて図３に示すように正方状に表現する
ことも可能である。本実施形態においては、図２（ｂ）
すなわち図３に示すハニカム配列の単板ＣＣＤ１におい
て得られた画像データＳ０に対して処理を行うものとし
て説明する。
【００７２】図４は、ハニカム配列の単板ＣＣＤ１の画
素位置を示す図であり、各画素位置に参照番号を付して
示すものである。ここでは、図３の左上から右下に向か
う方向、すなわち図４において破線で示すＲ０１，Ｇ０
５，Ｒ０９，Ｇ１３，Ｒ１７の方向（矢印Ａ方向）を所
定方向とし、この所定方向すなわち矢印Ａ方向に直交す
る直交方向を矢印Ｂ方向とする。なお、ここでは画素位
置に付与された参照番号を信号値の参照番号としても使
用する。
素位置を示す図であり、各画素位置に参照番号を付して
示すものである。ここでは、図３の左上から右下に向か
う方向、すなわち図４において破線で示すＲ０１，Ｇ０
５，Ｒ０９，Ｇ１３，Ｒ１７の方向（矢印Ａ方向）を所
定方向とし、この所定方向すなわち矢印Ａ方向に直交す
る直交方向を矢印Ｂ方向とする。なお、ここでは画素位
置に付与された参照番号を信号値の参照番号としても使
用する。
【００７３】（１）まず、ＲおよびＢ画素位置における
Ｇ信号の算出処理について説明する。このＧ信号の算出
はＧ補間手段３において行われる。ＲおよびＢ画素位置
におけるＧ信号は、その画素位置周辺のＧ画素位置にお
いて得られるＧ信号に対して単純な補間演算を施すこと
により算出することができる。例えば図５において実線
で囲んだＲ０９位置でのＧ０９信号およびＢ１０位置で
のＧ１０信号は、破線で囲んだその周囲のＧ画素位置に
おけるＧ信号を用いて下記の式（１）、（２）により算
出される。
Ｇ信号の算出処理について説明する。このＧ信号の算出
はＧ補間手段３において行われる。ＲおよびＢ画素位置
におけるＧ信号は、その画素位置周辺のＧ画素位置にお
いて得られるＧ信号に対して単純な補間演算を施すこと
により算出することができる。例えば図５において実線
で囲んだＲ０９位置でのＧ０９信号およびＢ１０位置で
のＧ１０信号は、破線で囲んだその周囲のＧ画素位置に
おけるＧ信号を用いて下記の式（１）、（２）により算
出される。
【００７４】 Ｇ０９＝（Ｇ０５＋Ｇ０６＋Ｇ１２＋Ｇ１３）／４ （１） Ｇ１０＝（Ｇ０６＋Ｇ０７＋Ｇ１３＋Ｇ１４）／４ （２） なお、Ｇ信号を算出する画素位置周辺の４×４のＧ画素
において得られるＧ信号に対して２次元のCubic スプラ
イン補間演算を施して、Ｇ信号を算出してもよい。これ
により、補間前にＧ信号が有する周波数成分を損なうこ
となく補間を行うことができ、この結果、全ての画素位
置において元の周波数情報を保持したＧ信号を得ること
ができる。また、補間演算の手法としては図４における
縦横２次元方向における補間演算であれば、いかなる手
法をも適用することができる。
において得られるＧ信号に対して２次元のCubic スプラ
イン補間演算を施して、Ｇ信号を算出してもよい。これ
により、補間前にＧ信号が有する周波数成分を損なうこ
となく補間を行うことができ、この結果、全ての画素位
置において元の周波数情報を保持したＧ信号を得ること
ができる。また、補間演算の手法としては図４における
縦横２次元方向における補間演算であれば、いかなる手
法をも適用することができる。
【００７５】（２）次に、所定方向（矢印Ａ方向）にお
いてＲ，Ｇ画素が並ぶライン（以下第１のラインとす
る）におけるＧ画素位置でのＲ信号の算出処理について
説明する。なお、これ以降の信号の算出処理はＲＢ補間
手段４において行われる。このＧ画素位置におけるＲ信
号の算出処理は、そのＧ画素位置が含まれる第１のライ
ン上におけるＲ信号に対して１次元線形補間演算を施す
ことにより行われる。例えば、図６における実線で囲ん
だＧ０５画素位置でのＲ０５信号は、破線で囲んだ第１
のライン方向に隣接する２つのＲ画素位置におけるＲ０
１，Ｒ０９信号を用いて下記の式（３）により算出され
る。
いてＲ，Ｇ画素が並ぶライン（以下第１のラインとす
る）におけるＧ画素位置でのＲ信号の算出処理について
説明する。なお、これ以降の信号の算出処理はＲＢ補間
手段４において行われる。このＧ画素位置におけるＲ信
号の算出処理は、そのＧ画素位置が含まれる第１のライ
ン上におけるＲ信号に対して１次元線形補間演算を施す
ことにより行われる。例えば、図６における実線で囲ん
だＧ０５画素位置でのＲ０５信号は、破線で囲んだ第１
のライン方向に隣接する２つのＲ画素位置におけるＲ０
１，Ｒ０９信号を用いて下記の式（３）により算出され
る。
【００７６】 Ｒ０５＝（Ｒ０１＋Ｒ０９）／２ （３） なお、このＧ画素位置が存在する第１のライン上におけ
るＧ画素位置周辺の４点のＲ画素位置において得られる
Ｒ信号について１次元のCubic スプライン補間演算を施
して、Ｒ信号を算出してもよい。なおこの場合、Ｒ信号
値を算出するＧ画素位置をＧ１３とすると４点のＲ画素
位置はＲ０１，Ｒ０９，Ｒ１７，Ｒ２５となる。また、
補間演算の手法としてはこの第１のライン方向における
１次元の補間演算であれば、いかなる手法をも適用する
ことができる。そしてこれにより第１のライン上のＧ画
素位置におけるＲ信号を算出することができる。
るＧ画素位置周辺の４点のＲ画素位置において得られる
Ｒ信号について１次元のCubic スプライン補間演算を施
して、Ｒ信号を算出してもよい。なおこの場合、Ｒ信号
値を算出するＧ画素位置をＧ１３とすると４点のＲ画素
位置はＲ０１，Ｒ０９，Ｒ１７，Ｒ２５となる。また、
補間演算の手法としてはこの第１のライン方向における
１次元の補間演算であれば、いかなる手法をも適用する
ことができる。そしてこれにより第１のライン上のＧ画
素位置におけるＲ信号を算出することができる。
【００７７】（３）次に、Ｂ，Ｇ画素が並ぶライン（以
下第２のラインとする）におけるＧ画素位置でのＲ信号
の算出処理について説明する。このＧ画素位置における
Ｒ信号の算出処理は、以下のようにして行う。まず、Ｒ
信号を算出するＧ画素位置が含まれる第２のラインに隣
接する第１のライン上において、Ｇ画素位置に隣接する
画素位置を求める。例えば、ここでは図７に示す実線で
囲んだＧ０６画素位置でのＲ０６信号を算出するものと
すると、Ｇ０６画素位置に隣接する画素位置は破線で囲
んだＲ０９画素位置およびＲ０３画素位置となるが、こ
こではＲ０９画素位置における信号値を用いるものとす
る。そしてこのＲ０９画素位置におけるＲ信号とＧ信号
との差を、第２のライン上のＧ画素位置におけるＧ信号
に加算し、その加算結果をＧ画素位置におけるＲ信号と
する。例えば、Ｇ０６画素位置でのＲ０６信号は下記の
式（４）により算出される。
下第２のラインとする）におけるＧ画素位置でのＲ信号
の算出処理について説明する。このＧ画素位置における
Ｒ信号の算出処理は、以下のようにして行う。まず、Ｒ
信号を算出するＧ画素位置が含まれる第２のラインに隣
接する第１のライン上において、Ｇ画素位置に隣接する
画素位置を求める。例えば、ここでは図７に示す実線で
囲んだＧ０６画素位置でのＲ０６信号を算出するものと
すると、Ｇ０６画素位置に隣接する画素位置は破線で囲
んだＲ０９画素位置およびＲ０３画素位置となるが、こ
こではＲ０９画素位置における信号値を用いるものとす
る。そしてこのＲ０９画素位置におけるＲ信号とＧ信号
との差を、第２のライン上のＧ画素位置におけるＧ信号
に加算し、その加算結果をＧ画素位置におけるＲ信号と
する。例えば、Ｇ０６画素位置でのＲ０６信号は下記の
式（４）により算出される。
【００７８】 Ｒ０６＝Ｇ０６＋（Ｒ０９−Ｇ０９） （４） すなわち、式（４）は画像の局所的な領域におけるＲ信
号とＧ信号との差は等しいという前提により定められる
ものである。例えば、Ｒ０９画素位置およびＧ０６画素
位置でのＲ信号とＧ信号との差が等しいとは、 Ｒ０６−Ｇ０６＝Ｒ０９−Ｇ０９ （５） の関係を満たすということであり、式（５）をＲ０６信
号について解いたものが式（４）となる。なお、式
（４）においてＧ０９信号は、上記式（１）により算出
されたものではなく、下記の式（６）に示す線形補間演
算や１次元Cubic スプライン補間演算のように、Ｒ０９
画素位置が存在する第１のライン上におけるＧ信号に対
して１次元補間演算を施すことにより算出したものであ
る。
号とＧ信号との差は等しいという前提により定められる
ものである。例えば、Ｒ０９画素位置およびＧ０６画素
位置でのＲ信号とＧ信号との差が等しいとは、 Ｒ０６−Ｇ０６＝Ｒ０９−Ｇ０９ （５） の関係を満たすということであり、式（５）をＲ０６信
号について解いたものが式（４）となる。なお、式
（４）においてＧ０９信号は、上記式（１）により算出
されたものではなく、下記の式（６）に示す線形補間演
算や１次元Cubic スプライン補間演算のように、Ｒ０９
画素位置が存在する第１のライン上におけるＧ信号に対
して１次元補間演算を施すことにより算出したものであ
る。
【００７９】 Ｇ０９＝（Ｇ０５＋Ｇ１３）／２ （６） すなわち、ここでは、画像の局所的な領域におけるＲ信
号とＧ信号との差は等しいという前提により信号値を算
出しており、信号値の算出に使用するのはＧ０６画素位
置が存在する第２のラインと、Ｒ０９画素位置が存在す
る第１のラインである。これは、第１および第２のライ
ン上にある画素値の相関関係に基づいて信号値を算出し
ているということであり、不明な信号値について第１お
よび第２のライン方向における信号値の変化を反映させ
て信号値を算出する必要がある。（２）の処理におい
て、第２のラインにおけるＧ０６画素位置でのＲ０６信
号は上記式（５）に示す関係に基づいて算出されるが、
Ｇ０９信号が不明であるため、これを推定する必要があ
る。ここで、式（５）は第１および第２のライン間にお
ける相関関係を表しているため、Ｇ０９信号を推定する
には、第１のライン上での所定方向（矢印Ａ方向）の信
号値の変化を反映させる必要がある。一方、上記（１）
の方法により算出したＧ信号を使用することが考えられ
るが、このＧ信号は式（１）、（２）に示すように、別
のラインの信号値を用いて算出しているものであるた
め、第１のライン上における信号値の変化を反映したも
のではない。このため、第１のラインにおける信号値の
変化を反映させるために、式（６）のように第１のライ
ン上において１次元補間演算を行ってＧ０９信号を算出
しているものである。
号とＧ信号との差は等しいという前提により信号値を算
出しており、信号値の算出に使用するのはＧ０６画素位
置が存在する第２のラインと、Ｒ０９画素位置が存在す
る第１のラインである。これは、第１および第２のライ
ン上にある画素値の相関関係に基づいて信号値を算出し
ているということであり、不明な信号値について第１お
よび第２のライン方向における信号値の変化を反映させ
て信号値を算出する必要がある。（２）の処理におい
て、第２のラインにおけるＧ０６画素位置でのＲ０６信
号は上記式（５）に示す関係に基づいて算出されるが、
Ｇ０９信号が不明であるため、これを推定する必要があ
る。ここで、式（５）は第１および第２のライン間にお
ける相関関係を表しているため、Ｇ０９信号を推定する
には、第１のライン上での所定方向（矢印Ａ方向）の信
号値の変化を反映させる必要がある。一方、上記（１）
の方法により算出したＧ信号を使用することが考えられ
るが、このＧ信号は式（１）、（２）に示すように、別
のラインの信号値を用いて算出しているものであるた
め、第１のライン上における信号値の変化を反映したも
のではない。このため、第１のラインにおける信号値の
変化を反映させるために、式（６）のように第１のライ
ン上において１次元補間演算を行ってＧ０９信号を算出
しているものである。
【００８０】また、この場合、Ｇ画素位置の片側に隣接
する画素位置におけるＲ信号とＧ信号との差に基づいて
Ｇ画素位置のＲ信号を算出しているが、片側にのみ隣接
する画素位置の信号値を用いたのでは、画像の位相がそ
の方向に近寄ってしまう。これを防止するために、下記
の式（７）に示すように、Ｒ信号を算出するＧ画素位置
（例えばＧ０６画素位置）の両隣の画素位置（Ｒ０９，
Ｒ０３画素位置）におけるＲ信号とＧ信号との差の平均
値を、Ｒ信号を算出するＧ画素位置におけるＧ信号に加
算したものを、そのＧ画素位置におけるＲ信号としても
よい。
する画素位置におけるＲ信号とＧ信号との差に基づいて
Ｇ画素位置のＲ信号を算出しているが、片側にのみ隣接
する画素位置の信号値を用いたのでは、画像の位相がそ
の方向に近寄ってしまう。これを防止するために、下記
の式（７）に示すように、Ｒ信号を算出するＧ画素位置
（例えばＧ０６画素位置）の両隣の画素位置（Ｒ０９，
Ｒ０３画素位置）におけるＲ信号とＧ信号との差の平均
値を、Ｒ信号を算出するＧ画素位置におけるＧ信号に加
算したものを、そのＧ画素位置におけるＲ信号としても
よい。
【００８１】 Ｒ０６＝Ｇ０６＋（（Ｒ０９−Ｇ０９）＋（Ｒ０３−Ｇ０３））／２ （７） そしてこれにより、第２のライン上のＧ画素位置におけ
るＲ信号を算出することができる。
るＲ信号を算出することができる。
【００８２】（４）次に、Ｂ，Ｇ画素が並ぶ第２のライ
ンにおけるＢ画素位置でのＲ信号の算出処理について説
明する。このＢ画素位置におけるＲ信号の算出処理は、
以下のようにして行う。まず、Ｒ信号を算出するＢ画素
位置が含まれる第２のラインに隣接する第１のライン上
において、Ｂ画素位置に隣接する画素位置を求める。例
えば、ここでは図８に示す実線で囲んだＢ１０画素位置
でのＲ１０信号を算出するものとすると、Ｂ１０画素位
置に隣接する画素位置は破線で囲んだＧ１３画素位置お
よびＧ０７画素位置となるが、ここではＧ１３画素位置
における信号値を用いるものとする。そしてこのＧ１３
画素位置におけるＲ信号とＧ信号との差を、第２のライ
ン上のＢ画素位置におけるＧ信号に加算し、その加算結
果をＢ画素位置におけるＲ信号とする。例えば、Ｂ１０
画素位置でのＲ１０信号は下記の式（８）により算出さ
れる。
ンにおけるＢ画素位置でのＲ信号の算出処理について説
明する。このＢ画素位置におけるＲ信号の算出処理は、
以下のようにして行う。まず、Ｒ信号を算出するＢ画素
位置が含まれる第２のラインに隣接する第１のライン上
において、Ｂ画素位置に隣接する画素位置を求める。例
えば、ここでは図８に示す実線で囲んだＢ１０画素位置
でのＲ１０信号を算出するものとすると、Ｂ１０画素位
置に隣接する画素位置は破線で囲んだＧ１３画素位置お
よびＧ０７画素位置となるが、ここではＧ１３画素位置
における信号値を用いるものとする。そしてこのＧ１３
画素位置におけるＲ信号とＧ信号との差を、第２のライ
ン上のＢ画素位置におけるＧ信号に加算し、その加算結
果をＢ画素位置におけるＲ信号とする。例えば、Ｂ１０
画素位置でのＲ１０信号は下記の式（８）により算出さ
れる。
【００８３】 Ｒ１０＝Ｇ１０＋（Ｒ１３−Ｇ１３） （８） すなわち、式（８）は上記式（４）と同様に、画像の局
所的な領域におけるＲ信号とＧ信号との差は等しいとい
う前提により定められるものである。例えば、Ｂ１０画
素位置およびＧ１３画素位置でのＲ信号とＧ信号との差
が等しいとは、 Ｒ１０−Ｇ１０＝Ｒ１３−Ｇ１３ （９） の関係を満たすということであり、式（９）をＲ１０信
号について解いたものが式（８）となる。なお、式
（９）においてＧ１０信号は、上記式（１）により算出
されたものではなく、Ｒ信号を算出するために下記の式
（１０）に示す線形補間演算や１次元Cubic スプライン
補間演算のように、Ｂ１０画素位置が存在する第２のラ
イン上におけるＧ信号に対して１次元補間演算を施すこ
とにより算出したものである。
所的な領域におけるＲ信号とＧ信号との差は等しいとい
う前提により定められるものである。例えば、Ｂ１０画
素位置およびＧ１３画素位置でのＲ信号とＧ信号との差
が等しいとは、 Ｒ１０−Ｇ１０＝Ｒ１３−Ｇ１３ （９） の関係を満たすということであり、式（９）をＲ１０信
号について解いたものが式（８）となる。なお、式
（９）においてＧ１０信号は、上記式（１）により算出
されたものではなく、Ｒ信号を算出するために下記の式
（１０）に示す線形補間演算や１次元Cubic スプライン
補間演算のように、Ｂ１０画素位置が存在する第２のラ
イン上におけるＧ信号に対して１次元補間演算を施すこ
とにより算出したものである。
【００８４】 Ｇ１０＝（Ｇ０６＋Ｇ１４）／２ （１０） また、式（９）においてＲ１３信号は、上記式（１０）
と同様に、Ｇ１３画素位置が存在する第１のライン上に
おけるＲ信号に対して１次元補間演算を施すことにより
算出したものである。
と同様に、Ｇ１３画素位置が存在する第１のライン上に
おけるＲ信号に対して１次元補間演算を施すことにより
算出したものである。
【００８５】 Ｒ１３＝（Ｒ０９＋Ｒ１７）／２ （１１） なお、この場合、上記式（７）と同様に、下記の式（１
２）に示すように、Ｒ信号を算出するＢ画素位置（例え
ばＢ１０画素位置）の両隣の画素位置（Ｇ１３，Ｇ０７
画素位置）におけるＲ信号とＧ信号との差の平均値を、
Ｒ信号を算出するＢ画素位置におけるＧ信号に加算した
ものを、そのＢ画素位置におけるＲ信号としてもよい。
２）に示すように、Ｒ信号を算出するＢ画素位置（例え
ばＢ１０画素位置）の両隣の画素位置（Ｇ１３，Ｇ０７
画素位置）におけるＲ信号とＧ信号との差の平均値を、
Ｒ信号を算出するＢ画素位置におけるＧ信号に加算した
ものを、そのＢ画素位置におけるＲ信号としてもよい。
【００８６】 Ｒ１０＝Ｇ１０＋（（Ｒ１３−Ｇ１３）＋（Ｒ０７−Ｇ０７））／２ （１２） そしてこれにより、第２のライン上のＢ画素位置におけ
るＲ信号を算出することができる。
るＲ信号を算出することができる。
【００８７】そして、上記（１）から（４）の処理を行
うことにより、Ｒ信号が存在しない全ての画素位置にお
けるＲ信号を算出することができる。
うことにより、Ｒ信号が存在しない全ての画素位置にお
けるＲ信号を算出することができる。
【００８８】以上、各画素位置におけるＲ信号の算出に
ついて説明したが、Ｂ，Ｇ画素が並ぶ第２のラインにお
けるＧ画素位置でのＢ信号、Ｒ，Ｇ画素が並ぶ第１のラ
インにおけるＧ画素位置でのＢ信号、Ｒ，Ｇ画素が並ぶ
第１のラインにおけるＲ画素位置でのＢ信号について
も、上記（２）から（４）の処理において説明したよう
にＲ信号と同様にして算出することができ、これにより
Ｂ信号が存在しない全ての画素位置におけるＢ信号を算
出することができる。
ついて説明したが、Ｂ，Ｇ画素が並ぶ第２のラインにお
けるＧ画素位置でのＢ信号、Ｒ，Ｇ画素が並ぶ第１のラ
インにおけるＧ画素位置でのＢ信号、Ｒ，Ｇ画素が並ぶ
第１のラインにおけるＲ画素位置でのＢ信号について
も、上記（２）から（４）の処理において説明したよう
にＲ信号と同様にして算出することができ、これにより
Ｂ信号が存在しない全ての画素位置におけるＢ信号を算
出することができる。
【００８９】なお、図２（ａ）に示すベイヤー配列の単
板ＣＣＤ１においては画素配列を４５度回転させると、
その画素配列は図２（ｂ）に示すハニカム配列と空孔画
素位置＊を除けば同様のものとなる。したがって、上記
の説明において、所定方向を図２における紙面上下方
向、所定方向に直交する方向を図２における紙面左右方
向とすることにより、ベイヤー配列の場合もハニカム配
列の場合と同様に、全画素位置におけるＲＧＢ信号を算
出することができる。
板ＣＣＤ１においては画素配列を４５度回転させると、
その画素配列は図２（ｂ）に示すハニカム配列と空孔画
素位置＊を除けば同様のものとなる。したがって、上記
の説明において、所定方向を図２における紙面上下方
向、所定方向に直交する方向を図２における紙面左右方
向とすることにより、ベイヤー配列の場合もハニカム配
列の場合と同様に、全画素位置におけるＲＧＢ信号を算
出することができる。
【００９０】このようにして、全ての画素位置において
ＲＧＢ全ての信号値ＱＲ，ＱＧ，ＱＢが得られると、市
松正方補間手段５において、図３における空孔画素位置
＊でのＲＧＢ信号値を補間演算により算出して、画素が
正方状に配列されてなる補間済み画像データＳ１を得
る。この補間演算は、図９に示すような空孔画素位置＊
周辺の４画素位置の信号値を用いた補間フィルタや、図
１０に示すように４×４画素についての２次元Cubicス
プライン補間演算を行う補間フィルタの補間係数の配置
を４５度傾斜させた補間係数の配置を有する補間フィル
タを用いて補間演算を行うことにより求めることができ
る。なお、この空孔画素位置＊における信号値を算出す
るための補間演算を市松正方補間演算とする。また、補
間演算についてはこれらに限定されるものではなく、上
述したように求められた各画素位置におけるＲＧＢ信号
をＹＣＣ輝度色差空間に変換し、ＹＣＣ毎に異なる補間
フィルタによる補間演算を施す等、空孔画素位置＊にお
ける信号値を算出するための補間演算であればいかなる
方法をも採用可能である。
ＲＧＢ全ての信号値ＱＲ，ＱＧ，ＱＢが得られると、市
松正方補間手段５において、図３における空孔画素位置
＊でのＲＧＢ信号値を補間演算により算出して、画素が
正方状に配列されてなる補間済み画像データＳ１を得
る。この補間演算は、図９に示すような空孔画素位置＊
周辺の４画素位置の信号値を用いた補間フィルタや、図
１０に示すように４×４画素についての２次元Cubicス
プライン補間演算を行う補間フィルタの補間係数の配置
を４５度傾斜させた補間係数の配置を有する補間フィル
タを用いて補間演算を行うことにより求めることができ
る。なお、この空孔画素位置＊における信号値を算出す
るための補間演算を市松正方補間演算とする。また、補
間演算についてはこれらに限定されるものではなく、上
述したように求められた各画素位置におけるＲＧＢ信号
をＹＣＣ輝度色差空間に変換し、ＹＣＣ毎に異なる補間
フィルタによる補間演算を施す等、空孔画素位置＊にお
ける信号値を算出するための補間演算であればいかなる
方法をも採用可能である。
【００９１】次いで、第１の実施形態の動作について説
明する。図１１は第１の実施形態の動作を示すフローチ
ャートである。まず、被写体を撮影して単板ＣＣＤ１に
おいて画像データＳ０を得る（ステップＳ１）。次い
で、Ｇ補間手段３において上記（１）の処理により、所
定方向におけるＲまたはＢ画素位置におけるＧ信号ＱＧ
が算出される（ステップＳ２）。そして、算出する信号
をＲ信号にセットし（ステップＳ３）、ＲＢ補間手段４
において、上記（２）の処理により第１のラインにおけ
るＧ画素位置でのＲ信号ＱＲが算出される（ステップＳ
４）。そして、上記（３）の処理による第２のラインに
おけるＧ画素位置でのＲ信号ＱＲの算出（ステップＳ
５）および上記（４）の処理による第２のラインにおけ
るＢ画素位置でのＲ信号ＱＲの算出（ステップＳ６）が
行われ、Ｒ，Ｂ全ての信号を算出したか否かが判断され
る（ステップＳ７）。ステップＳ７が否定された場合に
は、ステップＳ８において算出する信号をＢ信号にセッ
トし、ステップＳ４に戻ってステップＳ４からステップ
Ｓ７の処理を繰り返してＢ信号ＱＢを算出する。
明する。図１１は第１の実施形態の動作を示すフローチ
ャートである。まず、被写体を撮影して単板ＣＣＤ１に
おいて画像データＳ０を得る（ステップＳ１）。次い
で、Ｇ補間手段３において上記（１）の処理により、所
定方向におけるＲまたはＢ画素位置におけるＧ信号ＱＧ
が算出される（ステップＳ２）。そして、算出する信号
をＲ信号にセットし（ステップＳ３）、ＲＢ補間手段４
において、上記（２）の処理により第１のラインにおけ
るＧ画素位置でのＲ信号ＱＲが算出される（ステップＳ
４）。そして、上記（３）の処理による第２のラインに
おけるＧ画素位置でのＲ信号ＱＲの算出（ステップＳ
５）および上記（４）の処理による第２のラインにおけ
るＢ画素位置でのＲ信号ＱＲの算出（ステップＳ６）が
行われ、Ｒ，Ｂ全ての信号を算出したか否かが判断され
る（ステップＳ７）。ステップＳ７が否定された場合に
は、ステップＳ８において算出する信号をＢ信号にセッ
トし、ステップＳ４に戻ってステップＳ４からステップ
Ｓ７の処理を繰り返してＢ信号ＱＢを算出する。
【００９２】ステップＳ７が肯定されると、全ての画素
位置においてＲＧＢ信号ＱＲ，ＱＧ，ＱＢが算出された
として、各画素の信号値に対して図９あるいは図１０に
示す補間フィルタによる市松正方補間演算を行って、図
３に示す空孔画素位置＊における信号値を市松正方補間
演算により算出し（ステップＳ９）、処理を終了する。
位置においてＲＧＢ信号ＱＲ，ＱＧ，ＱＢが算出された
として、各画素の信号値に対して図９あるいは図１０に
示す補間フィルタによる市松正方補間演算を行って、図
３に示す空孔画素位置＊における信号値を市松正方補間
演算により算出し（ステップＳ９）、処理を終了する。
【００９３】そして、これにより、図２（ｂ）に示すハ
ニカム配列による単板ＣＣＤ１の全画素位置におけるＲ
ＧＢ信号を得ることができ、各画素位置においてＲＧＢ
信号を有する補間済み画像データＳ１を得ることができ
る。
ニカム配列による単板ＣＣＤ１の全画素位置におけるＲ
ＧＢ信号を得ることができ、各画素位置においてＲＧＢ
信号を有する補間済み画像データＳ１を得ることができ
る。
【００９４】なお、図１１に示すフローチャートのステ
ップＳ３においては、算出する信号をＲ信号にセットし
ているが、先にＢ信号にセットしてもよい。この場合、
ステップＳ７が否定されるとステップＳ８において、算
出する信号がＢ信号からＲ信号に切り替えられることと
なる。
ップＳ３においては、算出する信号をＲ信号にセットし
ているが、先にＢ信号にセットしてもよい。この場合、
ステップＳ７が否定されるとステップＳ８において、算
出する信号がＢ信号からＲ信号に切り替えられることと
なる。
【００９５】このように、第１の実施形態によれば、画
像の局所的な領域においては、ＲＧＢ各信号値の差は一
定であるという前提に基づいて、各画素位置における信
号値を算出するようにしたため、単板ＣＣＤ１において
得られた信号値が指数値や対数値により表されている場
合であっても、偽色を発生させることなく、全画素位置
における信号値を求めることができる。したがって、本
実施形態により、偽色のない高解像度の画像を再現可能
な補間済み画像データＳ１を得ることができる。
像の局所的な領域においては、ＲＧＢ各信号値の差は一
定であるという前提に基づいて、各画素位置における信
号値を算出するようにしたため、単板ＣＣＤ１において
得られた信号値が指数値や対数値により表されている場
合であっても、偽色を発生させることなく、全画素位置
における信号値を求めることができる。したがって、本
実施形態により、偽色のない高解像度の画像を再現可能
な補間済み画像データＳ１を得ることができる。
【００９６】なお、上記（１）から（４）の処理におい
ては、所定方向（矢印Ａ方向）について、式（６）、
（１０）に示すように１次元補間演算を行って各画素位
置における信号値を求め、さらにこの信号値を用いて、
上記式（５）および式（９）に示すように矢印Ａ方向に
直交する矢印Ｂ方向に隣接する画素位置でのＧ信号とＲ
信号との差、およびＧ信号とＢ信号との差が一定である
ということを前提として、さらに信号値を推定してい
る。したがって、上記方法によれば矢印Ａ方向にＲＧＢ
各色の変化がそれほど大きくない画像領域における偽色
の発生を防止することができる。一方、矢印Ｂ方向を所
定方向とすれば、上記（１）から（４）の処理と同様の
処理により、右上から左下方向にＲＧＢ各色の変化がそ
れほど大きくない画像領域における偽色の発生を防止す
ることができる。しかしながら、上記矢印Ａ，Ｂ方向の
うちいずれか一方の方向のみを信号値を算出するための
所定方向として処理を行ったのでは、この所定方向に各
色の変化が大きい場合には偽色を低減することができな
い。
ては、所定方向（矢印Ａ方向）について、式（６）、
（１０）に示すように１次元補間演算を行って各画素位
置における信号値を求め、さらにこの信号値を用いて、
上記式（５）および式（９）に示すように矢印Ａ方向に
直交する矢印Ｂ方向に隣接する画素位置でのＧ信号とＲ
信号との差、およびＧ信号とＢ信号との差が一定である
ということを前提として、さらに信号値を推定してい
る。したがって、上記方法によれば矢印Ａ方向にＲＧＢ
各色の変化がそれほど大きくない画像領域における偽色
の発生を防止することができる。一方、矢印Ｂ方向を所
定方向とすれば、上記（１）から（４）の処理と同様の
処理により、右上から左下方向にＲＧＢ各色の変化がそ
れほど大きくない画像領域における偽色の発生を防止す
ることができる。しかしながら、上記矢印Ａ，Ｂ方向の
うちいずれか一方の方向のみを信号値を算出するための
所定方向として処理を行ったのでは、この所定方向に各
色の変化が大きい場合には偽色を低減することができな
い。
【００９７】したがって、画像データＳ０により表され
る画像における画素値の変化量を各画素毎に検出し、画
素値の変化の方向に応じて信号値を算出するための所定
方向を矢印Ａ方向および矢印Ｂ方向と切り替えて、全画
素位置におけるＲＧＢ各色の信号値を算出することによ
り、信号値の変化に拘わらず偽色の発生を防止すること
ができる。しかしながら、この方法では画素値が変化す
る境界部分において処理の方向が異なるものとなるた
め、アーチファクトが発生するおそれがある。以下、こ
れに対処するための方法を第２の実施形態として説明す
る。
る画像における画素値の変化量を各画素毎に検出し、画
素値の変化の方向に応じて信号値を算出するための所定
方向を矢印Ａ方向および矢印Ｂ方向と切り替えて、全画
素位置におけるＲＧＢ各色の信号値を算出することによ
り、信号値の変化に拘わらず偽色の発生を防止すること
ができる。しかしながら、この方法では画素値が変化す
る境界部分において処理の方向が異なるものとなるた
め、アーチファクトが発生するおそれがある。以下、こ
れに対処するための方法を第２の実施形態として説明す
る。
【００９８】図１２は本発明の第２の実施形態による画
像処理装置の構成を示す概略ブロック図である。図１２
に示すように、第２の実施形態による画像処理装置は、
単板ＣＣＤ１において得られた画像データＳ０に基づい
て、上記式（１）または式（２）によりＲ画素位置およ
びＢ画素位置でのＧ信号を算出するＧ補間手段１１と、
図４に示す矢印Ａ方向を所定方向として上記（２）から
（４）の処理により全画素位置でのＲ信号およびＢ信号
を算出する第１ＲＢ補間手段１２と、矢印Ｂ方向を所定
方向として上記（２）から（４）の処理により全画素位
置でのＲ信号およびＢ信号を算出する第２ＲＢ補間手段
１３と、第１および第２のＲＢ補間手段１２，１３にお
いて得られたＲ信号およびＢ信号を重み付け加算する重
み付け加算手段１４と、画像上における信号値の変動方
向の尺度を算出する変動方向尺度算出手段１５と、全画
素位置におけるＲＧＢ信号から、空孔画素位置＊での信
号値を算出する市松正方補間手段１６とを備える。
像処理装置の構成を示す概略ブロック図である。図１２
に示すように、第２の実施形態による画像処理装置は、
単板ＣＣＤ１において得られた画像データＳ０に基づい
て、上記式（１）または式（２）によりＲ画素位置およ
びＢ画素位置でのＧ信号を算出するＧ補間手段１１と、
図４に示す矢印Ａ方向を所定方向として上記（２）から
（４）の処理により全画素位置でのＲ信号およびＢ信号
を算出する第１ＲＢ補間手段１２と、矢印Ｂ方向を所定
方向として上記（２）から（４）の処理により全画素位
置でのＲ信号およびＢ信号を算出する第２ＲＢ補間手段
１３と、第１および第２のＲＢ補間手段１２，１３にお
いて得られたＲ信号およびＢ信号を重み付け加算する重
み付け加算手段１４と、画像上における信号値の変動方
向の尺度を算出する変動方向尺度算出手段１５と、全画
素位置におけるＲＧＢ信号から、空孔画素位置＊での信
号値を算出する市松正方補間手段１６とを備える。
【００９９】なお、Ｇ信号については上記式（１）およ
び（２）に示すように、処理方向に拘わらず全ての画素
位置における信号値を算出することができるため、Ｇ補
間手段１１においては図１に示すＧ補間手段３と同様
に、とくに処理の方向を考慮することなくＧ信号が算出
される。
び（２）に示すように、処理方向に拘わらず全ての画素
位置における信号値を算出することができるため、Ｇ補
間手段１１においては図１に示すＧ補間手段３と同様
に、とくに処理の方向を考慮することなくＧ信号が算出
される。
【０１００】また、第２の実施形態における第１および
第２のＲＢ補間手段１２，１３において行われる処理
は、図１に示すＲＢ補間手段４における処理と処理の方
向が異なるのみであり、第２の実施形態における市松正
方補間手段１６において行われる処理は市松正方補間手
段５において行われる処理と同一であるため、ここでは
詳細な説明は省略する。
第２のＲＢ補間手段１２，１３において行われる処理
は、図１に示すＲＢ補間手段４における処理と処理の方
向が異なるのみであり、第２の実施形態における市松正
方補間手段１６において行われる処理は市松正方補間手
段５において行われる処理と同一であるため、ここでは
詳細な説明は省略する。
【０１０１】まず、変動方向尺度算出手段１５において
行われる処理について説明する。なお、第２の実施形態
においても上記第１の実施形態における図３に示すよう
にハニカム配列の単板ＣＣＤ１を使用するものとし、各
画素位置に図１３に示すように参照符号を付して説明す
る。なお、図１３において、矢印Ａ方向に延在するＲ
ａ，Ｇｅ，Ｒｉ，Ｇｍのラインを第１のライン、同様に
矢印Ａ方向に延在するＢｂ，Ｇｆ，Ｂｊ，Ｇｎのライン
を第２のライン、矢印Ｂ方向に延在するＲｃ，Ｇｆ，Ｒ
ｉ，Ｇｌのラインを第３のライン、同様に矢印Ｂ方向に
延在するＢｄ，Ｇｇ，Ｂｊ，Ｇｍのラインを第４のライ
ンとして説明する。また、以降の説明において、矢印Ａ
方向について算出された信号には参照符号に(A)を付
し、矢印Ｂ方向について算出された信号には参照符号に
(B)を付するものとする。
行われる処理について説明する。なお、第２の実施形態
においても上記第１の実施形態における図３に示すよう
にハニカム配列の単板ＣＣＤ１を使用するものとし、各
画素位置に図１３に示すように参照符号を付して説明す
る。なお、図１３において、矢印Ａ方向に延在するＲ
ａ，Ｇｅ，Ｒｉ，Ｇｍのラインを第１のライン、同様に
矢印Ａ方向に延在するＢｂ，Ｇｆ，Ｂｊ，Ｇｎのライン
を第２のライン、矢印Ｂ方向に延在するＲｃ，Ｇｆ，Ｒ
ｉ，Ｇｌのラインを第３のライン、同様に矢印Ｂ方向に
延在するＢｄ，Ｇｇ，Ｂｊ，Ｇｍのラインを第４のライ
ンとして説明する。また、以降の説明において、矢印Ａ
方向について算出された信号には参照符号に(A)を付
し、矢印Ｂ方向について算出された信号には参照符号に
(B)を付するものとする。
【０１０２】まず、Ｂｊ画素位置におけるＲ信号は、上
記式（１２）と同様に、下記の式（１３）または（１
４）により求められた値となる。
記式（１２）と同様に、下記の式（１３）または（１
４）により求められた値となる。
【０１０３】 Rj(A)=Gj(A)+((Rm(A)-Gm)+(Rg(A)-Gg))/2 （１３） Rj(B)=Gj(B)+((Rf(B)-Gf)+(Rn(B)-Gn))/2 （１４） なお、信号値Ｇｊ(A)はＢｊ画素位置が属する矢印Ａ方
向のライン（第２のライン）上におけるＧ信号に対して
１次元補間演算を行うことにより算出されたＢｊ画素位
置でのＧ信号、信号値Ｇｊ(B)はＢｊ画素位置が属する
矢印Ｂ方向のライン（第４のライン）上におけるＧ信号
に対して１次元補間演算を行うことにより算出されたＢ
ｊ画素位置でのＧ信号である。また、信号値Ｒｍ(A)は
Ｇｍ画素位置が属する矢印Ａ方向のライン（第１のライ
ン）上におけるＲ信号に対して１次元補間演算を行うこ
とにより算出されたＧｍ画素位置でのＲ信号、信号値Ｒ
ｇ(A)はＧｇ画素位置が属する矢印Ａ方向のライン上に
おけるＲ信号に対して１次元補間演算を行うことにより
算出されたＧｇ画素位置でのＲ信号である。さらに、信
号値Ｒｆ(B)はＧｆ画素位置が属する矢印Ｂ方向のライ
ン（第３のライン）上におけるＲ信号に対して１次元補
間演算を行うことにより算出されたＧｆ画素位置でのＲ
信号、信号値Ｒｎ(B)はＧｎ画素位置が属する矢印Ｂ方
向のライン上におけるＲ信号に対して１次元補間演算を
行うことにより算出されたＧｎ画素位置でのＲ信号であ
る。
向のライン（第２のライン）上におけるＧ信号に対して
１次元補間演算を行うことにより算出されたＢｊ画素位
置でのＧ信号、信号値Ｇｊ(B)はＢｊ画素位置が属する
矢印Ｂ方向のライン（第４のライン）上におけるＧ信号
に対して１次元補間演算を行うことにより算出されたＢ
ｊ画素位置でのＧ信号である。また、信号値Ｒｍ(A)は
Ｇｍ画素位置が属する矢印Ａ方向のライン（第１のライ
ン）上におけるＲ信号に対して１次元補間演算を行うこ
とにより算出されたＧｍ画素位置でのＲ信号、信号値Ｒ
ｇ(A)はＧｇ画素位置が属する矢印Ａ方向のライン上に
おけるＲ信号に対して１次元補間演算を行うことにより
算出されたＧｇ画素位置でのＲ信号である。さらに、信
号値Ｒｆ(B)はＧｆ画素位置が属する矢印Ｂ方向のライ
ン（第３のライン）上におけるＲ信号に対して１次元補
間演算を行うことにより算出されたＧｆ画素位置でのＲ
信号、信号値Ｒｎ(B)はＧｎ画素位置が属する矢印Ｂ方
向のライン上におけるＲ信号に対して１次元補間演算を
行うことにより算出されたＧｎ画素位置でのＲ信号であ
る。
【０１０４】第２の実施形態においては第１および第２
のＲＢ補間手段１２，１３においてそれぞれ式（１
３）、（１４）により算出された信号値Ｒｊ(A)，Ｒｊ
(B)を重み付け加算することによりＲ信号を算出する。
変動方向尺度算出手段１５はこの重み付け係数を変動方
向尺度Ｓｊとして算出するものである。
のＲＢ補間手段１２，１３においてそれぞれ式（１
３）、（１４）により算出された信号値Ｒｊ(A)，Ｒｊ
(B)を重み付け加算することによりＲ信号を算出する。
変動方向尺度算出手段１５はこの重み付け係数を変動方
向尺度Ｓｊとして算出するものである。
【０１０５】変動方向尺度Ｓｊは下記の式（１５）、
（１６）、（１７）により算出することができる。
（１６）、（１７）により算出することができる。
【０１０６】 Sjv=|Bj-Gj(A)|/(Bj+Gj(A)) （１５） Sjh=|Bj-Gj(B)|/(Bj+Gj(B)) （１６） Sj=Sjv/(Sjv+Sjh)(if Sjv+Sjh=0 then Sj=0.5) （１７） ここで、ＳｊｖはＢｊ画素位置の矢印Ａ方向における信
号値の変化を表し、ＳｊｈはＢｊ画素位置の矢印Ｂ方向
における信号値の変化を表す。また、Ｓｊの範囲は０≦
Ｓｊ≦１であり、矢印Ａ方向において信号値の変動が少
ないほど０に近い値となる。
号値の変化を表し、ＳｊｈはＢｊ画素位置の矢印Ｂ方向
における信号値の変化を表す。また、Ｓｊの範囲は０≦
Ｓｊ≦１であり、矢印Ａ方向において信号値の変動が少
ないほど０に近い値となる。
【０１０７】そして、重み付け加算手段１４において
は、変動方向尺度Ｓｊを使用して下記の式（１８）によ
りＲ信号を重み付け加算して算出する。
は、変動方向尺度Ｓｊを使用して下記の式（１８）によ
りＲ信号を重み付け加算して算出する。
【０１０８】 Rj=(1-Sj)*Rj(A)+Sj*Rj(B) （１８） これにより、画素値の変化が少ない方向ほど大きな重み
付けがなされて、Ｂｊ画素位置のＲ信号が算出されるこ
ととなる。
付けがなされて、Ｂｊ画素位置のＲ信号が算出されるこ
ととなる。
【０１０９】なお、Ｇｆ画素位置でのＲ信号は上記式
（７）と同様に、下記の式（１９）または（２０）によ
り求められた値となる。
（７）と同様に、下記の式（１９）または（２０）によ
り求められた値となる。
【０１１０】 Rf(A)=Gf+((Ri-Gi(A))+(Rc-Gc(A)))/2 （１９） Rf(B)=Rf′ （２０） 但し、信号値Ｇｉ(A)はＲｉ画素位置が属する矢印Ａ方
向のライン（第１のライン）上におけるＧ信号に対して
１次元補間演算を行うことにより算出されたＲｉ画素位
置でのＧ信号、信号値Ｇｃ(A)はＲｃ画素位置が属する
矢印Ａ方向のライン上におけるＧ信号に対して１次元補
間演算を行うことにより算出されたＲｃ画素位置でのＧ
信号である。Ｒｆ′はＧｆ画素位置が属する矢印Ｂ方向
のライン上におけるＲ信号に対して１次元補間演算によ
り算出されたＧｆ画素位置でのＲ信号である。
向のライン（第１のライン）上におけるＧ信号に対して
１次元補間演算を行うことにより算出されたＲｉ画素位
置でのＧ信号、信号値Ｇｃ(A)はＲｃ画素位置が属する
矢印Ａ方向のライン上におけるＧ信号に対して１次元補
間演算を行うことにより算出されたＲｃ画素位置でのＧ
信号である。Ｒｆ′はＧｆ画素位置が属する矢印Ｂ方向
のライン上におけるＲ信号に対して１次元補間演算によ
り算出されたＧｆ画素位置でのＲ信号である。
【０１１１】この場合、変動方向尺度Ｓｆは下記の式
（２１）、（２２）、（２３）により算出することがで
きる。
（２１）、（２２）、（２３）により算出することがで
きる。
【０１１２】 Sfv=|Bf(A)-Gf|/(Bf(A)+Gf) （２１） 但し、信号Ｂｆ(A)は、Ｇｆ画素位置が属する矢印Ａ方
向のライン（第２のライン）上におけるＢ信号に対して
１次元補間演算を行うことにより得られたＧｆ画素位置
でのＢ信号である。
向のライン（第２のライン）上におけるＢ信号に対して
１次元補間演算を行うことにより得られたＧｆ画素位置
でのＢ信号である。
【０１１３】 Sfh=|Rf(B)-Gf|/(Rf(B)+Gf) （２２） 但し、信号Ｒｆ(B)は、Ｇｆ画素位置が属する矢印Ｂ方
向のライン上におけるＲ信号に対して１次元補間演算を
行うことにより得られたＧｆ画素位置でのＲ信号であ
る。
向のライン上におけるＲ信号に対して１次元補間演算を
行うことにより得られたＧｆ画素位置でのＲ信号であ
る。
【０１１４】 Sf=Sfv/(Sfv+Sfh)(if Sfv+Sfh=0 then Sf=0.5)（２３） ここで、Ｓｆの範囲は０≦Ｓｆ≦１であり、矢印Ａ方向
において信号値の変動が少ないほど０に近い値となる。
において信号値の変動が少ないほど０に近い値となる。
【０１１５】そして、重み付け加算手段１４において
は、変動方向尺度Ｓｆを使用して下記の式（２４）によ
りＲ信号を重み付け加算して算出する。
は、変動方向尺度Ｓｆを使用して下記の式（２４）によ
りＲ信号を重み付け加算して算出する。
【０１１６】 Rf=(1-Sf)*Rf(A)+Sf*Rf(B) （２４） これにより、画素値の変化が少ない方向ほど大きな重み
付けがなされて、Ｇｆ画素位置のＲ信号が算出されるこ
ととなる。
付けがなされて、Ｇｆ画素位置のＲ信号が算出されるこ
ととなる。
【０１１７】一方、Ｂ信号も、Ｒ信号と同様に変動方向
尺度が求められ、これにより矢印Ａ，Ｂ方向について算
出したＢ信号を重み付け加算することにより算出され
る。
尺度が求められ、これにより矢印Ａ，Ｂ方向について算
出したＢ信号を重み付け加算することにより算出され
る。
【０１１８】このようにして重み付け加算により得られ
たＲ信号およびＢ信号は、Ｇ信号とともに市松正方補間
手段１６において補間演算が施され、空孔画素位置＊に
おける信号値が算出されて補間済み画像データＳ１とし
て出力される。
たＲ信号およびＢ信号は、Ｇ信号とともに市松正方補間
手段１６において補間演算が施され、空孔画素位置＊に
おける信号値が算出されて補間済み画像データＳ１とし
て出力される。
【０１１９】このように、第２の実施形態によれば、信
号値が変化する方向に応じて、矢印Ａ方向および矢印Ｂ
方向について算出された信号値を重み付け加算して、各
画素位置におけるＲ信号およびＢ信号を算出するように
したため、信号値の変化に拘わらず偽色の発生を防止で
きるとともに、アーチファクトの発生をも防止すること
ができる。
号値が変化する方向に応じて、矢印Ａ方向および矢印Ｂ
方向について算出された信号値を重み付け加算して、各
画素位置におけるＲ信号およびＢ信号を算出するように
したため、信号値の変化に拘わらず偽色の発生を防止で
きるとともに、アーチファクトの発生をも防止すること
ができる。
【０１２０】なお、上記各実施形態においては単板ＣＣ
Ｄ１として、Ｇ画素がＲ，Ｂ画素に対して倍の密度を有
するものについて説明したが、Ｒ画素がＧ，Ｂ画素に対
して、あるいはＢ画素がＲ，Ｇ画素に対して倍の密度を
有するものであってもよい。また、Ｒ，Ｇ，Ｂに対して
分光感度を有するものについて説明したが、単板ＣＣＤ
１としてはこれに限定されるものではなく、Ｙ（イエロ
ー）、Ｇ（グリーン）、Ｃ（シアン）に対して分光感度
を有するもの、あるいはＹ、Ｗ（ホワイト）、Ｃに対し
て分光感度を有するものであってもよい。
Ｄ１として、Ｇ画素がＲ，Ｂ画素に対して倍の密度を有
するものについて説明したが、Ｒ画素がＧ，Ｂ画素に対
して、あるいはＢ画素がＲ，Ｇ画素に対して倍の密度を
有するものであってもよい。また、Ｒ，Ｇ，Ｂに対して
分光感度を有するものについて説明したが、単板ＣＣＤ
１としてはこれに限定されるものではなく、Ｙ（イエロ
ー）、Ｇ（グリーン）、Ｃ（シアン）に対して分光感度
を有するもの、あるいはＹ、Ｗ（ホワイト）、Ｃに対し
て分光感度を有するものであってもよい。
【０１２１】また、上記各実施形態においては、３色全
ての信号値を算出しているが、１色または２色のみの信
号値を算出するようにしてもよい。
ての信号値を算出しているが、１色または２色のみの信
号値を算出するようにしてもよい。
【０１２２】次いで、本発明の第３の実施形態について
説明する。図１４は本発明の第３の実施形態による画像
処理装置の構成を示す概略ブロック図である。図１４に
示すように、第３の実施形態による画像処理装置は、単
板ＣＣＤ１において得られた画像データＳ０に対して処
理を施すものであり、画像データＳ０に対して補間処理
を施してＲ１，Ｇ１，Ｂ１の色信号からなる補間済み画
像データＳ１を得る第１の実施形態と同様の補間手段２
と、補間済み画像データＳ１をＹＣＣ変換して、補間済
み画像データＳ１の輝度情報および色差情報を表す推定
輝度信号Ｙ０および推定色差信号Ｃｂ，Ｃｒを得るＹＣ
Ｃ変換手段２１と、画像データＳ０の高周波の輝度情報
を表す高周波輝度信号ＹＨを作成する高周波輝度信号作
成手段２２と、高周波輝度信号ＹＨと推定輝度信号Ｙ０
とを加算して加算輝度信号Ｙ１を得る加算手段２３と、
加算輝度信号Ｙ１および色差信号Ｃｂ，ＣｒをＲＧＢ変
換してＲ２，Ｇ２，Ｂ２の色信号からなる処理済み画像
データＳ２を得るＲＧＢ変換手段２４とを備える。
説明する。図１４は本発明の第３の実施形態による画像
処理装置の構成を示す概略ブロック図である。図１４に
示すように、第３の実施形態による画像処理装置は、単
板ＣＣＤ１において得られた画像データＳ０に対して処
理を施すものであり、画像データＳ０に対して補間処理
を施してＲ１，Ｇ１，Ｂ１の色信号からなる補間済み画
像データＳ１を得る第１の実施形態と同様の補間手段２
と、補間済み画像データＳ１をＹＣＣ変換して、補間済
み画像データＳ１の輝度情報および色差情報を表す推定
輝度信号Ｙ０および推定色差信号Ｃｂ，Ｃｒを得るＹＣ
Ｃ変換手段２１と、画像データＳ０の高周波の輝度情報
を表す高周波輝度信号ＹＨを作成する高周波輝度信号作
成手段２２と、高周波輝度信号ＹＨと推定輝度信号Ｙ０
とを加算して加算輝度信号Ｙ１を得る加算手段２３と、
加算輝度信号Ｙ１および色差信号Ｃｂ，ＣｒをＲＧＢ変
換してＲ２，Ｇ２，Ｂ２の色信号からなる処理済み画像
データＳ２を得るＲＧＢ変換手段２４とを備える。
【０１２３】ＹＣＣ変換手段２１は、下記の式（２５）
〜（２７）に示すように、補間済み画像データＳ１を推
定輝度信号Ｙ０および推定色差信号Ｃｂ，Ｃｒに変換す
る。
〜（２７）に示すように、補間済み画像データＳ１を推
定輝度信号Ｙ０および推定色差信号Ｃｂ，Ｃｒに変換す
る。
【０１２４】 Ｙ０＝０．２９９Ｒ１＋０．５８７Ｇ１＋０．１１４Ｂ１ （２５） Ｃｂ＝（Ｂ１−Ｙ０）／１．７７２ （２６） Ｃｒ＝（Ｒ１−Ｙ０）／１．４０２ （２７） 但し、Ｒ１，Ｇ１，Ｂ１は補間済み画像データＳ１を構
成する色信号高周波輝度信号作成手段２２は、画像デー
タＳ０を構成する各画素位置のＲ，Ｇ，Ｂ各信号値をそ
のまま輝度信号とし、この輝度信号に対して推定輝度信
号Ｙ０に相当する周波数成分をカットするハイパスフィ
ルタによるフィルタリング処理を施す方法により、画像
データＳ０の高周波の輝度情報を表す高周波輝度信号Ｙ
Ｈを得る。なお、高周波輝度信号ＹＨを得るための方法
としては、Ｒ，Ｇ，Ｂ各信号値に対してハイパスフィル
タによるフィルタリング処理を施した後、上記式（２
５）により輝度信号を得る方法（特開平５−２２８１０
８号）、Ｒ，Ｇ，Ｂ各信号値に対して上記式（２５）に
より輝度信号を得、この輝度信号に対してハイパスフィ
ルタによるフィルタリング処理を施す方法（同６−３０
４４４号）、画像データからフィールド間ＹＣ分離処理
の技術により高周波輝度信号を抽出する方法（同６−２
２５３４３号）、Ｒ，Ｇ，Ｂ各信号値に対して上記式
（２５）により輝度信号を得、この輝度信号に対してガ
ンマ補正処理を施した後ハイパスフィルタによるフィル
タリング処理を施す方法（同８−９１９９号）等を採用
することができる。
成する色信号高周波輝度信号作成手段２２は、画像デー
タＳ０を構成する各画素位置のＲ，Ｇ，Ｂ各信号値をそ
のまま輝度信号とし、この輝度信号に対して推定輝度信
号Ｙ０に相当する周波数成分をカットするハイパスフィ
ルタによるフィルタリング処理を施す方法により、画像
データＳ０の高周波の輝度情報を表す高周波輝度信号Ｙ
Ｈを得る。なお、高周波輝度信号ＹＨを得るための方法
としては、Ｒ，Ｇ，Ｂ各信号値に対してハイパスフィル
タによるフィルタリング処理を施した後、上記式（２
５）により輝度信号を得る方法（特開平５−２２８１０
８号）、Ｒ，Ｇ，Ｂ各信号値に対して上記式（２５）に
より輝度信号を得、この輝度信号に対してハイパスフィ
ルタによるフィルタリング処理を施す方法（同６−３０
４４４号）、画像データからフィールド間ＹＣ分離処理
の技術により高周波輝度信号を抽出する方法（同６−２
２５３４３号）、Ｒ，Ｇ，Ｂ各信号値に対して上記式
（２５）により輝度信号を得、この輝度信号に対してガ
ンマ補正処理を施した後ハイパスフィルタによるフィル
タリング処理を施す方法（同８−９１９９号）等を採用
することができる。
【０１２５】ＲＧＢ変換手段２４は、加算輝度信号Ｙ１
および色差信号Ｃｂ，Ｃｒについて、上記式（２５）か
ら（２７）を逆に解くことにより、処理済み画像データ
Ｓ２を構成する色信号Ｒ２，Ｇ２，Ｂ２を得る。
および色差信号Ｃｂ，Ｃｒについて、上記式（２５）か
ら（２７）を逆に解くことにより、処理済み画像データ
Ｓ２を構成する色信号Ｒ２，Ｇ２，Ｂ２を得る。
【０１２６】なお、画像データＳ０を構成する色信号
Ｒ，Ｇ，Ｂの比率が、画像データＳ０により表される画
像上の位置により急激に変化しないと仮定すると、画像
データＳ０を構成する各画素位置のＲ，Ｇ，Ｂ各信号値
をそのまま輝度信号とし、この輝度信号に対して推定輝
度信号Ｙ０に相当する周波数成分をカットするハイパス
フィルタによるフィルタリング処理を施すことにより得
られた高周波輝度信号ＹＨは、画像データＳ０により表
される画像の高周波成分を忠実に表すものとなる。した
がって、画像データＳ０により表される画像が無彩色で
ある場合、またはＲ，Ｇ，Ｂ信号値の比率の変化が小さ
い場合には、加算輝度信号Ｙ１を用いて処理済み画像デ
ータＳ２を得ることにより、処理済み画像データＳ２に
より表される処理済み画像の解像度を向上させることが
できる。
Ｒ，Ｇ，Ｂの比率が、画像データＳ０により表される画
像上の位置により急激に変化しないと仮定すると、画像
データＳ０を構成する各画素位置のＲ，Ｇ，Ｂ各信号値
をそのまま輝度信号とし、この輝度信号に対して推定輝
度信号Ｙ０に相当する周波数成分をカットするハイパス
フィルタによるフィルタリング処理を施すことにより得
られた高周波輝度信号ＹＨは、画像データＳ０により表
される画像の高周波成分を忠実に表すものとなる。した
がって、画像データＳ０により表される画像が無彩色で
ある場合、またはＲ，Ｇ，Ｂ信号値の比率の変化が小さ
い場合には、加算輝度信号Ｙ１を用いて処理済み画像デ
ータＳ２を得ることにより、処理済み画像データＳ２に
より表される処理済み画像の解像度を向上させることが
できる。
【０１２７】しかしながら、画像データＳ０により表さ
れる画像が有彩色であり、かつＲ，Ｇ，Ｂ信号値の比率
の変化が大きい場合には、高周波輝度信号ＹＨに偽信号
が発生し、処理済み画像にグレイのノイズが現れてしま
う。したがって、このような場合には、このグレイのノ
イズ成分に対応する周波数帯域の周波数成分をカットす
るバンドパスフィルタを用いて、処理済み画像の解像度
と偽信号とのバランスに応じて高周波輝度信号を作成す
ることにより、グレイのノイズを低減できるとともに、
画像の解像度をも向上させることができる。
れる画像が有彩色であり、かつＲ，Ｇ，Ｂ信号値の比率
の変化が大きい場合には、高周波輝度信号ＹＨに偽信号
が発生し、処理済み画像にグレイのノイズが現れてしま
う。したがって、このような場合には、このグレイのノ
イズ成分に対応する周波数帯域の周波数成分をカットす
るバンドパスフィルタを用いて、処理済み画像の解像度
と偽信号とのバランスに応じて高周波輝度信号を作成す
ることにより、グレイのノイズを低減できるとともに、
画像の解像度をも向上させることができる。
【０１２８】次いで、第３の実施形態の動作について説
明する。図１５は、第３の実施形態の動作を示すフロー
チャートである。まず、被写体を撮影して単板ＣＣＤ１
において画像データＳ０を得る（ステップＳ１１）。次
いで、補間手段２において上記第１または第２の実施形
態と同様に補間演算が行われて補間済み画像データＳ１
が得られる（ステップＳ１２）。補間済み画像データＳ
１はＹＣＣ変換手段２１においてＹＣＣ変換されて、推
定輝度信号Ｙ０および推定色差信号Ｃｂ，Ｃｒが得られ
る（ステップＳ１３）。一方、高周波輝度信号作成手段
２２において画像データＳ０の高周波輝度信号ＹＨが作
成される（ステップＳ１４）。なお、ステップＳ１４の
処理をステップＳ１２，Ｓ１３の処理より先に行っても
よく、これらの処理を並列に行ってもよい。
明する。図１５は、第３の実施形態の動作を示すフロー
チャートである。まず、被写体を撮影して単板ＣＣＤ１
において画像データＳ０を得る（ステップＳ１１）。次
いで、補間手段２において上記第１または第２の実施形
態と同様に補間演算が行われて補間済み画像データＳ１
が得られる（ステップＳ１２）。補間済み画像データＳ
１はＹＣＣ変換手段２１においてＹＣＣ変換されて、推
定輝度信号Ｙ０および推定色差信号Ｃｂ，Ｃｒが得られ
る（ステップＳ１３）。一方、高周波輝度信号作成手段
２２において画像データＳ０の高周波輝度信号ＹＨが作
成される（ステップＳ１４）。なお、ステップＳ１４の
処理をステップＳ１２，Ｓ１３の処理より先に行っても
よく、これらの処理を並列に行ってもよい。
【０１２９】そして、加算手段２３において、高周波輝
度信号ＹＨと推定輝度信号Ｙ０とが加算されて加算輝度
信号Ｙ１が得られる（ステップＳ１５）。加算輝度信号
Ｙ１は推定色差信号Ｃｂ，ＣｒとともにＲＧＢ色信号に
変換されて処理済み画像データＳ２が得られ（ステップ
Ｓ１６）、処理を終了する。
度信号ＹＨと推定輝度信号Ｙ０とが加算されて加算輝度
信号Ｙ１が得られる（ステップＳ１５）。加算輝度信号
Ｙ１は推定色差信号Ｃｂ，ＣｒとともにＲＧＢ色信号に
変換されて処理済み画像データＳ２が得られ（ステップ
Ｓ１６）、処理を終了する。
【０１３０】ここで、画像データＳ０により表される画
像の高周波成分を忠実に表す高周波輝度信号ＹＨと、偽
色が低減された補間済み画像データＳ１から得られた推
定輝度信号Ｙ０とを加算することにより得られた加算輝
度信号Ｙ１は、シーンの高周波成分を忠実に表すととも
に、低周波成分についても偽色が低減されたものとな
る。したがって、第３の実施形態のように、加算輝度信
号Ｙ１と推定色差信号Ｃｂ，Ｃｒとに基づいて処理済み
画像データＳ２を得ることにより、偽色がなくかつより
高解像度の処理済み画像を得ることができる。
像の高周波成分を忠実に表す高周波輝度信号ＹＨと、偽
色が低減された補間済み画像データＳ１から得られた推
定輝度信号Ｙ０とを加算することにより得られた加算輝
度信号Ｙ１は、シーンの高周波成分を忠実に表すととも
に、低周波成分についても偽色が低減されたものとな
る。したがって、第３の実施形態のように、加算輝度信
号Ｙ１と推定色差信号Ｃｂ，Ｃｒとに基づいて処理済み
画像データＳ２を得ることにより、偽色がなくかつより
高解像度の処理済み画像を得ることができる。
【０１３１】なお、上記各実施形態においては、単板Ｃ
ＣＤ１において得られた画像データＳ０に対して処理を
施しているが、図２（ａ）あるいは図２（ｂ）に示すよ
うな画素配列を有する画像を表す画像データであれば、
いかなる態様にて取得した画像データに対しても同様に
処理を施すことができる。
ＣＤ１において得られた画像データＳ０に対して処理を
施しているが、図２（ａ）あるいは図２（ｂ）に示すよ
うな画素配列を有する画像を表す画像データであれば、
いかなる態様にて取得した画像データに対しても同様に
処理を施すことができる。
【図１】本発明の第１の実施形態による画像処理装置の
構成を示す概略ブロック図
構成を示す概略ブロック図
【図２】単板ＣＣＤにおける画素配列を示す図
【図３】ハニカム配列の単板ＣＣＤの画素配列を示す図
【図４】ハニカム配列の単板ＣＣＤの各画素位置を参照
番号を付して示す図
番号を付して示す図
【図５】信号値の算出を説明するための図（その１）
【図６】信号値の算出を説明するための図（その２）
【図７】信号値の算出を説明するための図（その３）
【図８】信号値の算出を説明するための図（その４）
【図９】市松正方フィルタの例を示す図（その１）
【図１０】市松正方フィルタの例を示す図（その２）
【図１１】第１の実施形態の動作を示すフローチャート
【図１２】本発明の第２の実施形態による画像処理装置
の構成を示す概略ブロック図
の構成を示す概略ブロック図
【図１３】ハニカム配列の単板ＣＣＤの各画素位置を参
照符号を付して示す図
照符号を付して示す図
【図１４】本発明の第３の実施形態による画像処理装置
の構成を示す概略ブロック図
の構成を示す概略ブロック図
【図１５】第３の実施形態の動作を示すフローチャート
【図１６】ハニカム配列を示す図
【図１７】ベイヤー配列を示す図
【図１８】ベイヤー配列の各画素位置を参照符号を付し
て示す図
て示す図
１ 単板ＣＣＤ ２ 補間手段 ３，１１ Ｇ補間手段 ４，１２，１３ ＲＢ補間手段 ５，１６ 市松正方補間手段 ２１ ＹＣＣ変換手段 ２２ 高周波輝度信号作成手段 ２３ 加算手段 ２４ ＲＧＢ変換手段
フロントページの続き (51)Int.Cl.7 識別記号 ＦＩ テーマコート゛(参考） Ｈ０４Ｎ 9/07 Ｈ０４Ｎ 1/40 Ｄ // Ｈ０４Ｎ 101:00 1/46 Ｚ Ｆターム(参考） 5B057 BA02 BA12 CA01 CB01 CD06 CE06 CE16 5C065 BB12 BB13 BB22 CC01 DD02 DD17 EE05 GG02 GG13 GG21 GG23 5C076 AA21 AA26 BA06 BA08 BB04 5C077 LL19 MM03 MP08 PP03 PP04 PP32 PP34 PP35 PP47 PQ12 PQ18 RR19 TT09 5C079 HB01 HB04 HB11 JA23 LA15 LA17 LA24 LA37 MA11 NA02 NA03 NA04
Claims (54)
- 【請求項１】 異なる分光分布を有する第１から第３
の信号値を有する第１から第３の画素からなる画像を表
す画像データであって、前記第１および前記第２の画素
が所定方向に交互に配置されて第１ラインが形成され、
前記第１および前記第３の画素が前記所定方向に交互に
配置されて第２ラインが形成され、さらに前記第１およ
び前記第２ラインが前記所定方向と略直交する方向に交
互に配置されてなる画像を表す画像データの、前記第１
から第３信号値に基づいて、全画素位置における前記第
１から第３信号値のうち少なくとも１つの信号値を推定
する画像処理方法において、 前記第２ラインにおける前記第２信号値を、該第２ライ
ンに隣接する前記第１ラインにおける前記第１および前
記第２信号値の差分値に基づいて推定することを特徴と
する画像処理方法。 - 【請求項２】 前記第２ラインの前記第１画素におけ
る第２信号値を、前記第１ラインの該第１画素近傍の前
記第２画素における第２信号値と、前記第１ライン上に
おける前記第１信号値に対して１次元補間演算を施すこ
とにより算出した前記第２画素における前記第１信号値
との差分値に基づいて推定することを特徴とする請求項
１記載の画像処理方法。 - 【請求項３】 前記第２ラインの前記第１画素におけ
る第１信号値に前記差分値を加算することにより、前記
第２ラインの前記第１画素における第２信号値を推定す
ることを特徴とする請求項２記載の画像処理方法。 - 【請求項４】 前記第２ラインの前記第３画素におけ
る第２信号値を、前記第１ラインの該第３画素近傍の前
記第１画素における第１信号値と、前記第１ライン上に
おける前記第２信号値に対して１次元補間演算を施すこ
とにより算出した前記第１画素における前記第２信号値
との差分値に基づいて推定することを特徴とする請求項
１から３のいずれか１項記載の画像処理方法。 - 【請求項５】 前記第２ラインの前記第３画素位置に
おける第１信号値を、該第２ライン上における前記第１
信号値に対して１次元補間演算を施すことにより算出
し、 該算出された第１信号値に前記差分値を加算することに
より前記第２ラインの前記第３画素位置における第２信
号値を推定することを特徴とする請求項４記載の画像処
理方法。 - 【請求項６】 前記差分値は、前記第２ラインに隣接
する２つの前記第１ラインにおける前記差分値の平均値
であることを特徴とする請求項２から５のいずれか１項
記載の画像処理方法。 - 【請求項７】 前記第１ラインにおける前記第３信号
値を、該第１ラインに隣接する前記第２ラインにおける
前記第１および前記第３信号値の差分値に基づいて推定
することを特徴とする請求項１から６のいずれか１項記
載の画像処理方法。 - 【請求項８】 前記第１ラインの前記第１画素におけ
る第３信号値を、前記第２ラインの該第１画素近傍の前
記第３画素における第３信号値と、前記第２ライン上に
おける前記第１信号値に対して１次元補間演算を施すこ
とにより算出した前記第３画素における前記第１信号値
との差分値に基づいて推定することを特徴とする請求項
７記載の画像処理方法。 - 【請求項９】 前記第１ラインの前記第１画素におけ
る第１信号値に前記差分値を加算することにより前記第
１ラインの前記第１画素位置における第３信号値を推定
することを特徴とする請求項８記載の画像処理方法。 - 【請求項１０】 前記第１ラインの前記第２画素にお
ける第３信号値を、前記第２ラインの該第２画素近傍の
前記第１画素における第１信号値と、前記第２ライン上
における前記第３信号値に対して１次元補間演算を施す
ことにより算出した前記第１画素における前記第３信号
値との差分値に基づいて推定することを特徴とする請求
項７から９のいずれか１項記載の画像処理方法。 - 【請求項１１】 前記第１ラインの前記第２画素にお
ける第１信号値を、該第１ライン上における前記第１信
号値に対して１次元補間演算を施すことにより算出し、 該算出された第１信号値に前記差分値を加算することに
より前記第１ラインの前記第２画素における第３信号値
を推定することを特徴とする請求項１０記載の画像処理
方法。 - 【請求項１２】 前記差分値は、前記第１ラインに隣
接する２つの前記第２ラインにおける前記差分値の平均
値であることを特徴とする請求項８から１１のいずれか
１項記載の画像処理方法。 - 【請求項１３】 前記画像データにより表される画像
の前記所定方向と直交する直交方向において、前記第１
および前記第２画素が交互に、かつ前記第１および前記
第３画素が交互に配置されて、前記直交方向における前
記第１ラインおよび前記第２ラインを形成してなる場
合、 信号値を推定する画素位置に応じて、前記所定方向にお
ける前記第１および前記第２ラインと、前記直交方向に
おける前記第１および前記第２ラインとを切り替えて、
前記第１から第３信号値のうち少なくとも１つの信号値
を推定することを特徴とする請求項１から１２のいずれ
か１項記載の画像処理方法。 - 【請求項１４】 前記切り替えを、前記信号値を推定
する画素位置における信号値の変化方向を表す尺度値に
基づいて行うことを特徴とする請求項１３記載の画像処
理方法。 - 【請求項１５】 前記画像データにより表される画像
の前記所定方向と直交する直交方向において、前記第１
および前記第２画素が交互に、かつ前記第１および前記
第３画素が交互に配置されて、前記直交方向における前
記第１ラインおよび前記第２ラインを形成してなる場
合、 前記所定方向における前記第１および前記第２ラインに
基づく所定方向推定値、および前記直交方向における前
記第１および前記第２ラインに基づく直交方向推定値を
算出し、 信号値を推定する画素位置に応じて、前記所定方向推定
値および前記直交方向推定値を所定の重み付け係数によ
り重み付け加算して、前記第１から第３信号値のうち少
なくとも１つの信号値を推定することを特徴とする請求
項１から１２のいずれか１項記載の画像処理方法。 - 【請求項１６】 前記所定の重み付け係数が、前記信
号値を推定する画素位置における信号値の変化方向を表
す尺度値に基づいて算出されたものであることを特徴と
する請求項１５記載の画像処理方法。 - 【請求項１７】 前記第１ラインの画素配列が、前記
第２ラインの画素配列に対して前記所定方向に略１／２
画素相対的にずれることにより、前記画像データにより
表される画像の前記第１から第３画素が市松状に配列さ
れてなることを特徴とする請求項１から１６のいずれか
１項記載の画像処理方法。 - 【請求項１８】 全ての画素位置における信号値を推
定するとともに、該推定された信号値に基づいて、空孔
画素位置における信号値を推定することを特徴とする請
求項１７記載の画像処理方法。 - 【請求項１９】 前記第１から前記第３の信号値が、
それぞれＧ、Ｂ、Ｒのいずれかの色信号であることを特
徴とする請求項１から１８のいずれか１項記載の画像処
理方法。 - 【請求項２０】 前記第１から前記第３の信号値が、
それぞれＹ、Ｇ、Ｃのいずれかの色信号であることを特
徴とする請求項１から１８のいずれか１項記載の画像処
理方法。 - 【請求項２１】 前記画像データが、異なる分光感度
を有する第１から第３の光電変換素子を単一面上に配置
して撮像面が形成された撮像デバイスであって、前記第
１および前記第２の光電変換素子を所定方向に交互に配
置して第１ラインを形成し、前記第１および前記第３の
光電変換素子を前記所定方向に交互に配置して第２ライ
ンを形成し、さらに前記第１および前記第２ラインを前
記所定方向と略直交する方向に交互に配置することによ
り、前記撮像面が形成された撮像デバイスにおいて得ら
れたものであることを特徴とする請求項１から２１のい
ずれか１項記載の画像処理方法。 - 【請求項２２】 異なる分光分布を有する第１から第
３の信号値を有する第１から第３の画素からなる画像を
表す画像データであって、前記第１および前記第２の画
素が所定方向に交互に配置されて第１ラインが形成さ
れ、前記第１および前記第３の画素が前記所定方向に交
互に配置されて第２ラインが形成され、さらに前記第１
および前記第２ラインが前記所定方向と略直交する方向
に交互に配置されてなる画像を表す画像データに対して
画像処理を施す画像処理方法において、 請求項１から２１のいずれか１項記載の画像処理方法に
より、前記画像データにより表される画像の全画素位置
における前記第１から第３信号値のうち少なくとも１つ
の信号値を推定して推定画像データを得、 前記画像データの高周波の輝度情報を表す高周波輝度信
号を作成し、 前記推定画像データを該推定画像データの輝度情報およ
び色差情報を表す推定輝度信号および推定色差信号に変
換し、 前記推定輝度信号と前記高周波輝度信号とを加算して加
算輝度信号を得、 該加算輝度信号および前記推定色差信号を前記画像デー
タの輝度色差信号とすることを特徴とする画像処理方
法。 - 【請求項２３】 前記画像データに対して、前記推定
輝度信号の周波数帯域の周波数成分をカットするハイパ
スフィルタによるフィルタリング処理を施すことによ
り、前記高周波輝度信号を作成することを特徴とする請
求項２２記載の画像処理方法。 - 【請求項２４】 前記画像データに対して、所定の通
過帯域特性を有するバンドパスフィルタによるフィルタ
リング処理を施すことにより、前記高周波輝度信号を作
成することを特徴とする請求項２２記載の画像処理方
法。 - 【請求項２５】 異なる分光分布を有する第１から第
３の信号値を有する第１から第３の画素からなる画像を
表す画像データであって、前記第１および前記第２の画
素が所定方向に交互に配置されて第１ラインが形成さ
れ、前記第１および前記第３の画素が前記所定方向に交
互に配置されて第２ラインが形成され、さらに前記第１
および前記第２ラインが前記所定方向と略直交する方向
に交互に配置されてなる画像を表す画像データの、前記
第１から第３信号値に基づいて、全画素位置における前
記第１から第３信号値のうち少なくとも１つの信号値を
推定する推定手段を備えた画像処理装置において、 前記推定手段は、前記第２ラインにおける前記第２信号
値を、該第２ラインに隣接する前記第１ラインにおける
前記第１および前記第２信号値の差分値に基づいて推定
する手段であることを特徴とする画像処理装置。 - 【請求項２６】 前記推定手段は、前記第２ラインの
前記第１画素における第２信号値を、前記第１ラインの
該第１画素近傍の前記第２画素における第２信号値と、
前記第１ライン上における前記第１信号値に対して１次
元補間演算を施すことにより算出した前記第２画素にお
ける前記第１信号値との差分値に基づいて推定する手段
であることを特徴とする請求項２５記載の画像処理装
置。 - 【請求項２７】 前記推定手段は、前記第２ラインの
前記第３画素における第２信号値を、前記第１ラインの
該第３画素近傍の前記第１画素における第１信号値と、
前記第１ライン上における前記第２信号値に対して１次
元補間演算を施すことにより算出した前記第１画素にお
ける前記第２信号値との差分値に基づいて推定する手段
であることを特徴とする請求項２５または２６記載の画
像処理装置。 - 【請求項２８】 前記推定手段は、前記第１ラインに
おける前記第３信号値を、該第１ラインに隣接する前記
第２ラインにおける前記第１および前記第３信号値の差
分値に基づいて推定する手段であることを特徴とする請
求項２５から２７のいずれか１項記載の画像処理装置。 - 【請求項２９】 前記推定手段は、前記第１ラインの
前記第１画素における第３信号値を、前記第２ラインの
該第１画素近傍の前記第３画素における第３信号値と、
前記第２ライン上における前記第１信号値に対して１次
元補間演算を施すことにより算出した前記第３画素にお
ける前記第１信号値との差分値に基づいて推定する手段
であることを特徴とする請求項２８記載の画像処理装
置。 - 【請求項３０】 前記推定手段は、前記第１ラインの
前記第２画素における第３信号値を、前記第２ラインの
該第２画素近傍の前記第１画素における第１信号値と、
前記第２ライン上における前記第３信号値に対して１次
元補間演算を施すことにより算出した前記第１画素にお
ける前記第３信号値との差分値に基づいて推定する手段
であることを特徴とする請求項２８または２９記載の画
像処理装置。 - 【請求項３１】 前記画像データにより表される画像
の前記所定方向と直交する直交方向において、前記第１
および前記第２画素が交互に、かつ前記第１および前記
第３画素が交互に配置されて、前記直交方向における前
記第１ラインおよび前記第２ラインを形成してなる場
合、 前記推定手段は、信号値を推定する画素位置に応じて、
前記所定方向における前記第１および前記第２ライン
と、前記直交方向における前記第１および前記第２ライ
ンとを切り替えて、前記第１から第３信号値のうち少な
くとも１つの信号値を推定する手段を備えたことを特徴
とする請求項２５から３０のいずれか１項記載の画像処
理装置。 - 【請求項３２】 前記画像データにより表される画像
の前記所定方向と直交する直交方向において、前記第１
および前記第２画素が交互に、かつ前記第１および前記
第３画素が交互に配置されて、前記直交方向における前
記第１ラインおよび前記第２ラインを形成してなる場
合、 前記推定手段は、前記所定方向における前記第１および
前記第２ラインに基づく所定方向推定値、および前記直
交方向における前記第１および前記第２ラインに基づく
直交方向推定値を算出する手段と、 信号値を推定する画素位置に応じて、前記所定方向推定
値および前記直交方向推定値を所定の重み付け係数によ
り重み付け加算して、前記第１から第３信号値のうち少
なくとも１つの信号値を推定する手段とを備えたことを
特徴とする請求項２５から３０のいずれか１項記載の画
像処理装置。 - 【請求項３３】 前記第１ラインの画素配列が、前記
第２ラインの画素配列に対して前記所定方向に略１／２
画素相対的にずれることにより、前記画像データにより
表される画像の前記第１から第３画素が市松状に配列さ
れてなることを特徴とする請求項２５から３２のいずれ
か１項記載の画像処理装置。 - 【請求項３４】 前記推定手段は、全ての画素位置に
おける信号値を推定するとともに、該推定された信号値
に基づいて、空孔画素位置における信号値を推定する手
段であることを特徴とする請求項３３記載の画像処理装
置。 - 【請求項３５】 前記画像データが、異なる分光感度
を有する第１から第３の光電変換素子を単一面上に配置
して撮像面が形成された撮像デバイスであって、前記第
１および前記第２の光電変換素子を所定方向に交互に配
置して第１ラインを形成し、前記第１および前記第３の
光電変換素子を前記所定方向に交互に配置して第２ライ
ンを形成し、さらに前記第１および前記第２ラインを前
記所定方向と略直交する方向に交互に配置することによ
り、前記撮像面が形成された撮像デバイスにおいて得ら
れたものであることを特徴とする請求項２５から３４の
いずれか１項記載の画像処理装置。 - 【請求項３６】 異なる分光分布を有する第１から第
３の信号値を有する第１から第３の画素からなる画像を
表す画像データであって、前記第１および前記第２の画
素が所定方向に交互に配置されて第１ラインが形成さ
れ、前記第１および前記第３の画素が前記所定方向に交
互に配置されて第２ラインが形成され、さらに前記第１
および前記第２ラインが前記所定方向と略直交する方向
に交互に配置されてなる画像を表す画像データに対して
画像処理を施す画像処理装置において、 請求項２５から３５のいずれか１項記載の画像処理装置
により、前記画像データにより表される画像の全画素位
置における前記第１から第３信号値のうち少なくとも１
つの信号値を推定して推定画像データを得る補間手段
と、 前記画像データの高周波の輝度情報を表す高周波輝度信
号を作成する高周波輝度信号作成手段と、 前記推定画像データを該推定画像データの輝度情報およ
び色差情報を表す推定輝度信号および推定色差信号に変
換する輝度色差変換手段と、 前記推定輝度信号と前記高周波輝度信号とを加算して加
算輝度信号を得る加算手段とを備え、 該加算輝度信号および前記推定色差信号を前記画像デー
タの輝度色差信号とすることを特徴とする画像処理装
置。 - 【請求項３７】 前記高周波輝度信号作成手段は、前
記画像データに対して、前記推定輝度信号の周波数帯域
の周波数成分をカットするハイパスフィルタによるフィ
ルタリング処理を施すことにより、前記高周波輝度信号
を作成する手段であることを特徴とする請求項３６記載
の画像処理装置。 - 【請求項３８】 前記高周波輝度信号作成手段は、前
記画像データに対して、所定の通過帯域特性を有するバ
ンドパスフィルタによるフィルタリング処理を施すこと
により、前記高周波輝度信号を作成する手段であること
を特徴とする請求項３６記載の画像処理装置。 - 【請求項３９】 異なる分光分布を有する第１から第
３の信号値を有する第１から第３の画素からなる画像を
表す画像データであって、前記第１および前記第２の画
素が所定方向に交互に配置されて第１ラインが形成さ
れ、前記第１および前記第３の画素が前記所定方向に交
互に配置されて第２ラインが形成され、さらに前記第１
および前記第２ラインが前記所定方向と略直交する方向
に交互に配置されてなる画像を表す画像データの、前記
第１から第３信号値に基づいて、全画素位置における前
記第１から第３信号値のうち少なくとも１つの信号値を
推定する画像処理方法をコンピュータに実行させるため
のプログラムを記録したコンピュータ読取り可能な記録
媒体において、 前記プログラムは、前記第２ラインにおける前記第２信
号値を、該第２ラインに隣接する前記第１ラインにおけ
る前記第１および前記第２信号値の差分値に基づいて推
定する手順を有することを特徴とするコンピュータ読取
り可能な記録媒体。 - 【請求項４０】 前記推定する手順は、前記第２ライ
ンの前記第１画素における第２信号値を、前記第１ライ
ンの該第１画素近傍の前記第２画素における第２信号値
と、前記第１ライン上における前記第１信号値に対して
１次元補間演算を施すことにより算出した前記第２画素
における前記第１信号値との差分値に基づいて推定する
手順であることを特徴とする請求項３９記載のコンピュ
ータ読取り可能な記録媒体。 - 【請求項４１】 前記推定する手順は、前記第２ライ
ンの前記第３画素における第２信号値を、前記第１ライ
ンの該第３画素近傍の前記第１画素における第１信号値
と、前記第１ライン上における前記第２信号値に対して
１次元補間演算を施すことにより算出した前記第１画素
における前記第２信号値との差分値に基づいて推定する
手順であることを特徴とする請求項３９または４０記載
のコンピュータ読取り可能な記録媒体。 - 【請求項４２】 前記推定する手順は、前記第１ライ
ンにおける前記第３信号値を、該第１ラインに隣接する
前記第２ラインにおける前記第１および前記第３信号値
の差分値に基づいて推定する手順であることを特徴とす
る請求項３９から４１のいずれか１項記載のコンピュー
タ読取り可能な記録媒体。 - 【請求項４３】 前記推定する手順は、前記第１ライ
ンの前記第１画素における第３信号値を、前記第２ライ
ンの該第１画素近傍の前記第３画素における第３信号値
と、前記第２ライン上における前記第１信号値に対して
１次元補間演算を施すことにより算出した前記第３画素
における前記第１信号値との差分値に基づいて推定する
手順であることを特徴とする請求項４２記載のコンピュ
ータ読取り可能な記録媒体。 - 【請求項４４】 前記推定する手順は、前記第１ライ
ンの前記第２画素における第３信号値を、前記第２ライ
ンの該第２画素近傍の前記第１画素における第１信号値
と、前記第２ライン上における前記第３信号値に対して
１次元補間演算を施すことにより算出した前記第１画素
における前記第３信号値との差分値に基づいて推定する
手順であることを特徴とする請求項４２または４３記載
のコンピュータ読取り可能な記録媒体。 - 【請求項４５】 前記画像データにより表される画像
の前記所定方向と直交する直交方向において、前記第１
および前記第２画素が交互に、かつ前記第１および前記
第３画素が交互に配置されて、前記直交方向における前
記第１ラインおよび前記第２ラインを形成してなる場
合、 前記推定する手順は、信号値を推定する画素位置に応じ
て、前記所定方向における前記第１および前記第２ライ
ンと、前記直交方向における前記第１および前記第２ラ
インとを切り替えて、前記第１から第３信号値のうち少
なくとも１つの信号値を推定する手順を有することを特
徴とする請求項３９から４４のいずれか１項記載のコン
ピュータ読取り可能な記録媒体。 - 【請求項４６】 前記画像データにより表される画像
の前記所定方向と直交する直交方向において、前記第１
および前記第２画素が交互に、かつ前記第１および前記
第３画素が交互に配置されて、前記直交方向における前
記第１ラインおよび前記第２ラインを形成してなる場
合、 前記推定する手順は、前記所定方向における前記第１お
よび前記第２ラインに基づく所定方向推定値、および前
記直交方向における前記第１および前記第２ラインに基
づく直交方向推定値を算出する手順と、 信号値を推定する画素位置に応じて、前記所定方向推定
値および前記直交方向推定値を所定の重み付け係数によ
り重み付け加算して、前記第１から第３信号値のうち少
なくとも１つの信号値を推定する手順とを有することを
特徴とする請求項３９から４４のいずれか１項記載のコ
ンピュータ読取り可能な記録媒体。 - 【請求項４７】 前記第１ラインの画素配列が、前記
第２ラインの画素配列に対して前記所定方向に略１／２
画素相対的にずれることにより、前記画像データにより
表される画像の前記第１から第３画素が市松状に配列さ
れてなることを特徴とする請求項３９から４６のいずれ
か１項記載のコンピュータ読取り可能な記録媒体。 - 【請求項４８】 前記推定する手順は、全ての画素位
置における信号値を推定するとともに、該推定された信
号値に基づいて、空孔画素位置における信号値を推定す
る手順を有することを特徴とする請求項４７記載のコン
ピュータ読取り可能な記録媒体。 - 【請求項４９】 前記画像データが、異なる分光感度
を有する第１から第３の光電変換素子を単一面上に配置
して撮像面が形成された撮像デバイスであって、前記第
１および前記第２の光電変換素子を所定方向に交互に配
置して第１ラインを形成し、前記第１および前記第３の
光電変換素子を前記所定方向に交互に配置して第２ライ
ンを形成し、さらに前記第１および前記第２ラインを前
記所定方向と略直交する方向に交互に配置することによ
り、前記撮像面が形成された撮像デバイスにおいて得ら
れたものであることを特徴とする請求項３９から４８の
いずれか１項記載のコンピュータ読取り可能な記録媒
体。 - 【請求項５０】 異なる分光分布を有する第１から第
３の信号値を有する第１から第３の画素からなる画像を
表す画像データであって、前記第１および前記第２の画
素が所定方向に交互に配置されて第１ラインが形成さ
れ、前記第１および前記第３の画素が前記所定方向に交
互に配置されて第２ラインが形成され、さらに前記第１
および前記第２ラインが前記所定方向と略直交する方向
に交互に配置されてなる画像を表す画像データに対して
画像処理を施す画像処理方法をコンピュータに実行させ
るためのプログラムを記録したコンピュータ読取り可能
な記録媒体において、 前記プログラムは、請求項１から２１のいずれか１項記
載の画像処理方法により、前記画像データにより表され
る画像の全画素位置における前記第１から第３信号値の
うち少なくとも１つの信号値を推定して推定画像データ
を得る手順と、前記画像データの高周波の輝度情報を表
す高周波輝度信号を作成する手順と、前記推定画像デー
タを該推定画像データの輝度情報および色差情報を表す
推定輝度信号および推定色差信号に変換するする手順
と、 前記推定輝度信号と前記高周波輝度信号とを加算して加
算輝度信号を得る手順とを有し、 該加算輝度信号および前記推定色差信号を前記画像デー
タの輝度色差信号とすることを特徴とするコンピュータ
読取り可能な記録媒体。 - 【請求項５１】 前記高周波輝度信号を作成する手順
は、前記画像データに対して、前記推定輝度信号の周波
数帯域の周波数成分をカットするハイパスフィルタによ
るフィルタリング処理を施すことにより、前記高周波輝
度信号を作成する手順であることを特徴とする請求項５
０記載のコンピュータ読取り可能な記録媒体。 - 【請求項５２】 前記高周波輝度信号を作成する手順
は、前記画像データに対して、所定の通過帯域特性を有
するバンドパスフィルタによるフィルタリング処理を施
すことにより、前記高周波輝度信号を作成することを特
徴とする請求項５０記載のコンピュータ読取り可能な記
録媒体。 - 【請求項５３】 請求項２５から３８のいずれか１項
記載の画像処理装置を備えたことを特徴とする撮像装
置。 - 【請求項５４】 請求項２５から３８のいずれか１項
記載の画像処理装置を備えたことを特徴とする出力装
置。
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2000155621A JP4162111B2 (ja) | 1999-07-27 | 2000-05-26 | 画像処理方法および装置並びに記録媒体 |
| US09/627,244 US6724932B1 (en) | 1999-07-27 | 2000-07-27 | Image processing method, image processor, and storage medium |
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP21220299 | 1999-07-27 | ||
| JP11-212202 | 1999-07-27 | ||
| JP2000155621A JP4162111B2 (ja) | 1999-07-27 | 2000-05-26 | 画像処理方法および装置並びに記録媒体 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2001101398A true JP2001101398A (ja) | 2001-04-13 |
| JP4162111B2 JP4162111B2 (ja) | 2008-10-08 |
Family
ID=26519071
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2000155621A Expired - Fee Related JP4162111B2 (ja) | 1999-07-27 | 2000-05-26 | 画像処理方法および装置並びに記録媒体 |
Country Status (2)
| Country | Link |
|---|---|
| US (1) | US6724932B1 (ja) |
| JP (1) | JP4162111B2 (ja) |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2006074360A (ja) * | 2004-09-01 | 2006-03-16 | Fuji Photo Film Co Ltd | 撮像装置及び信号処理方法 |
| EP2034469A1 (en) | 2001-09-13 | 2009-03-11 | Seiko Epson Corporation | Organic electroluminescent display device |
| US8199230B2 (en) | 2007-06-28 | 2012-06-12 | Fujifilm Corporation | Signal processing apparatus, image pickup apparatus and computer readable medium |
Families Citing this family (42)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US6836289B2 (en) * | 1999-12-20 | 2004-12-28 | Texas Instruments Incorporated | Digital still camera architecture with red and blue interpolation using green as weighting factors |
| JP2001203969A (ja) * | 2000-01-21 | 2001-07-27 | Fuji Photo Film Co Ltd | 撮像装置およびその動作制御方法 |
| JP4423452B2 (ja) * | 2000-12-27 | 2010-03-03 | 富士フイルム株式会社 | 固体撮像装置 |
| US20030063095A1 (en) * | 2000-12-29 | 2003-04-03 | Sun Microsystems, Inc. | Statistic logic for collecting a histogram of pixel exponent values |
| JP4703029B2 (ja) * | 2001-05-14 | 2011-06-15 | 三菱電機株式会社 | 画像表示システム及び画像表示方法 |
| JP4657564B2 (ja) * | 2002-04-30 | 2011-03-23 | イーストマン コダック カンパニー | 電子スチルカメラ及び画像処理方法 |
| US8471852B1 (en) | 2003-05-30 | 2013-06-25 | Nvidia Corporation | Method and system for tessellation of subdivision surfaces |
| EP1594321A3 (en) * | 2004-05-07 | 2006-01-25 | Dialog Semiconductor GmbH | Extended dynamic range in color imagers |
| DE102004025645A1 (de) * | 2004-05-24 | 2005-12-29 | Jenoptik Laser, Optik, Systeme Gmbh | Verfahren zur Reduzierung von Farbmoire in digitalen Bildern |
| US8571346B2 (en) | 2005-10-26 | 2013-10-29 | Nvidia Corporation | Methods and devices for defective pixel detection |
| US7885458B1 (en) | 2005-10-27 | 2011-02-08 | Nvidia Corporation | Illuminant estimation using gamut mapping and scene classification |
| US7750956B2 (en) * | 2005-11-09 | 2010-07-06 | Nvidia Corporation | Using a graphics processing unit to correct video and audio data |
| US8588542B1 (en) | 2005-12-13 | 2013-11-19 | Nvidia Corporation | Configurable and compact pixel processing apparatus |
| US8737832B1 (en) * | 2006-02-10 | 2014-05-27 | Nvidia Corporation | Flicker band automated detection system and method |
| JP4548390B2 (ja) * | 2006-06-16 | 2010-09-22 | ソニー株式会社 | 撮像装置及び信号処理方法 |
| US8594441B1 (en) | 2006-09-12 | 2013-11-26 | Nvidia Corporation | Compressing image-based data using luminance |
| EP1887515B1 (en) * | 2007-02-27 | 2011-12-28 | Phase One A/S | Colour binning of a digital image |
| US7929807B2 (en) * | 2007-02-27 | 2011-04-19 | Phase One A/S | Colour binning of a digital image to reduce the image resolution |
| US8723969B2 (en) * | 2007-03-20 | 2014-05-13 | Nvidia Corporation | Compensating for undesirable camera shakes during video capture |
| US8564687B2 (en) * | 2007-05-07 | 2013-10-22 | Nvidia Corporation | Efficient determination of an illuminant of a scene |
| US8698917B2 (en) * | 2007-06-04 | 2014-04-15 | Nvidia Corporation | Reducing computational complexity in determining an illuminant of a scene |
| JP4914303B2 (ja) * | 2007-07-13 | 2012-04-11 | シリコン ヒフェ ベー．フェー． | 画像処理装置及び撮像装置、画像処理方法及び撮像方法、画像処理プログラム |
| US8724895B2 (en) * | 2007-07-23 | 2014-05-13 | Nvidia Corporation | Techniques for reducing color artifacts in digital images |
| US20090051984A1 (en) * | 2007-08-23 | 2009-02-26 | O'brien Michele | Image sensor having checkerboard pattern |
| US8570634B2 (en) * | 2007-10-11 | 2013-10-29 | Nvidia Corporation | Image processing of an incoming light field using a spatial light modulator |
| US8780128B2 (en) | 2007-12-17 | 2014-07-15 | Nvidia Corporation | Contiguously packed data |
| US9177368B2 (en) | 2007-12-17 | 2015-11-03 | Nvidia Corporation | Image distortion correction |
| US8698908B2 (en) | 2008-02-11 | 2014-04-15 | Nvidia Corporation | Efficient method for reducing noise and blur in a composite still image from a rolling shutter camera |
| US9379156B2 (en) * | 2008-04-10 | 2016-06-28 | Nvidia Corporation | Per-channel image intensity correction |
| US8373718B2 (en) | 2008-12-10 | 2013-02-12 | Nvidia Corporation | Method and system for color enhancement with color volume adjustment and variable shift along luminance axis |
| US8749662B2 (en) * | 2009-04-16 | 2014-06-10 | Nvidia Corporation | System and method for lens shading image correction |
| US8698918B2 (en) * | 2009-10-27 | 2014-04-15 | Nvidia Corporation | Automatic white balancing for photography |
| US8830359B2 (en) * | 2010-03-30 | 2014-09-09 | Nikon Corporation | Image processing apparatus, imaging apparatus, and computer readable medium |
| JP5150796B2 (ja) * | 2011-03-30 | 2013-02-27 | 富士フイルム株式会社 | 固体撮像素子の駆動方法並びに固体撮像素子及び撮像装置 |
| US9798698B2 (en) | 2012-08-13 | 2017-10-24 | Nvidia Corporation | System and method for multi-color dilu preconditioner |
| US9508318B2 (en) | 2012-09-13 | 2016-11-29 | Nvidia Corporation | Dynamic color profile management for electronic devices |
| US9307213B2 (en) | 2012-11-05 | 2016-04-05 | Nvidia Corporation | Robust selection and weighting for gray patch automatic white balancing |
| US9870598B2 (en) | 2013-04-26 | 2018-01-16 | Nvidia Corporation | Low complexity adaptive filtering for mobile captures |
| US9826208B2 (en) | 2013-06-26 | 2017-11-21 | Nvidia Corporation | Method and system for generating weights for use in white balancing an image |
| US9756222B2 (en) | 2013-06-26 | 2017-09-05 | Nvidia Corporation | Method and system for performing white balancing operations on captured images |
| US9524538B2 (en) * | 2014-09-19 | 2016-12-20 | Fujitsu Ten Limited | Image processing apparatus |
| WO2016110984A1 (ja) * | 2015-01-08 | 2016-07-14 | オリンパス株式会社 | 画像処理装置、画像処理装置の作動方法、画像処理装置の作動プログラムおよび内視鏡装置 |
Family Cites Families (22)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US5253046A (en) * | 1991-03-07 | 1993-10-12 | Canon Kabushiki Kaisha | Color image pickup apparatus for object image conversion |
| JP3179166B2 (ja) | 1992-02-25 | 2001-06-25 | オリンパス光学工業株式会社 | 電子内視鏡装置 |
| JPH0630444A (ja) | 1992-07-08 | 1994-02-04 | Toshiba Corp | 画像符号化装置 |
| JPH06225343A (ja) | 1992-10-02 | 1994-08-12 | Hitachi Ltd | テレビジョン信号の構成装置 |
| US5373322A (en) * | 1993-06-30 | 1994-12-13 | Eastman Kodak Company | Apparatus and method for adaptively interpolating a full color image utilizing chrominance gradients |
| JPH089199A (ja) | 1994-06-20 | 1996-01-12 | Canon Inc | 撮像信号処理装置および撮像信号処理方法 |
| JPH09214989A (ja) | 1996-02-02 | 1997-08-15 | Naoki Ozawa | 画像信号の信号補間方法 |
| JP3707187B2 (ja) * | 1996-09-18 | 2005-10-19 | コニカミノルタホールディングス株式会社 | 電子カメラ |
| JP3065543B2 (ja) | 1996-11-08 | 2000-07-17 | ハウス食品株式会社 | 調味ソース |
| JP3806211B2 (ja) | 1997-01-08 | 2006-08-09 | 株式会社リコー | 撮像信号処理方法及び撮像信号処理装置 |
| JP3704238B2 (ja) * | 1997-03-31 | 2005-10-12 | 株式会社リコー | 撮像装置 |
| US6181376B1 (en) * | 1997-10-14 | 2001-01-30 | Intel Corporation | Method of determining missing color values for pixels in a color filter array |
| US6130960A (en) * | 1997-11-03 | 2000-10-10 | Intel Corporation | Block-matching algorithm for color interpolation |
| JP2991180B2 (ja) * | 1998-01-28 | 1999-12-20 | 日本電気株式会社 | 画素補間方法及び画素補間回路並びに画素補間プログラムを記録した記録媒体 |
| US5990950A (en) * | 1998-02-11 | 1999-11-23 | Iterated Systems, Inc. | Method and system for color filter array multifactor interpolation |
| DE19980650T1 (de) * | 1998-03-17 | 2000-07-20 | Matsushita Electric Ind Co Ltd | Bildleseeinrichtung |
| JP4045645B2 (ja) * | 1998-05-19 | 2008-02-13 | 株式会社ニコン | 補間処理装置および補間処理プログラムを記録した記録媒体 |
| US6549233B1 (en) * | 1998-08-07 | 2003-04-15 | Intel Corporation | Color interpolation system |
| US6496608B1 (en) * | 1999-01-15 | 2002-12-17 | Picsurf, Inc. | Image data interpolation system and method |
| US6404918B1 (en) * | 1999-04-30 | 2002-06-11 | Hewlett-Packard Company | Image demosaicing method utilizing directional smoothing |
| US6933970B2 (en) * | 1999-12-20 | 2005-08-23 | Texas Instruments Incorporated | Digital still camera system and method |
| US6476865B1 (en) * | 2001-03-07 | 2002-11-05 | Eastman Kodak Company | Sparsely sampled image sensing device with color and luminance photosites |
-
2000
- 2000-05-26 JP JP2000155621A patent/JP4162111B2/ja not_active Expired - Fee Related
- 2000-07-27 US US09/627,244 patent/US6724932B1/en not_active Expired - Lifetime
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| EP2034469A1 (en) | 2001-09-13 | 2009-03-11 | Seiko Epson Corporation | Organic electroluminescent display device |
| JP2006074360A (ja) * | 2004-09-01 | 2006-03-16 | Fuji Photo Film Co Ltd | 撮像装置及び信号処理方法 |
| JP4633413B2 (ja) * | 2004-09-01 | 2011-02-16 | 富士フイルム株式会社 | 撮像装置及び信号処理方法 |
| US8199230B2 (en) | 2007-06-28 | 2012-06-12 | Fujifilm Corporation | Signal processing apparatus, image pickup apparatus and computer readable medium |
Also Published As
| Publication number | Publication date |
|---|---|
| JP4162111B2 (ja) | 2008-10-08 |
| US6724932B1 (en) | 2004-04-20 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP4162111B2 (ja) | 画像処理方法および装置並びに記録媒体 | |
| JP4284628B2 (ja) | 撮像装置、画像処理装置、画像処理方法、画像処理方法のプログラム及び画像処理方法のプログラムを記録した記録媒体 | |
| JP4861667B2 (ja) | 画像処理装置及び画像処理方法 | |
| US8270774B2 (en) | Image processing device for performing interpolation | |
| JP3771054B2 (ja) | 画像処理装置及び画像処理方法 | |
| US8233733B2 (en) | Image processing device | |
| JP4321064B2 (ja) | 画像処理装置および画像処理プログラム | |
| WO2015093253A1 (ja) | 画素補間処理装置、撮像装置、プログラムおよび集積回路 | |
| JP3633561B2 (ja) | 画像処理装置、画像処理方法およびプログラム | |
| JP2004519156A (ja) | 画像検知器の出力信号用の輪郭フィルタ | |
| JP4302855B2 (ja) | 画像処理方法および装置並びに記録媒体 | |
| JP3965460B2 (ja) | 単板カラーカメラの市松配列緑色信号等インタリーブの関係にある画素信号の補間方法 | |
| JP3576600B2 (ja) | カラー撮像装置 | |
| JP4302854B2 (ja) | 画像処理方法および装置並びに記録媒体 | |
| KR101327790B1 (ko) | 영상 보간 방법 및 장치 | |
| JP4239483B2 (ja) | 画像処理方法、画像処理プログラム、画像処理装置 | |
| KR100960176B1 (ko) | 화상 신호 처리 장치, 화상 신호 처리 회로, 화상 신호 처리 방법 및 기록매체 | |
| JP4196055B2 (ja) | 画像処理方法、画像処理プログラム、画像処理装置 | |
| JP4239480B2 (ja) | 画像処理方法、画像処理プログラム、画像処理装置 | |
| JP4139587B2 (ja) | 単板式カラーディジタルカメラにおける撮像画像の補間装置および方法 | |
| JP2003087808A (ja) | 画像処理方法および装置並びにプログラム | |
| JP4239484B2 (ja) | 画像処理方法、画像処理プログラム、画像処理装置 | |
| JP2000232655A (ja) | 画像処理方法および装置並びに記録媒体 | |
| JPH1023448A (ja) | カラー画像処理装置 | |
| JP2000341703A (ja) | 信号生成方法および装置並びに記録媒体 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20050912 |
|
| A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A712 Effective date: 20061201 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20080715 |
|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20080717 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110801 Year of fee payment: 3 |
|
| R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110801 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120801 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120801 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130801 Year of fee payment: 5 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| LAPS | Cancellation because of no payment of annual fees |