JP2002218484A - 画像補間装置 - Google Patents
画像補間装置Info
- Publication number
- JP2002218484A JP2002218484A JP2001010084A JP2001010084A JP2002218484A JP 2002218484 A JP2002218484 A JP 2002218484A JP 2001010084 A JP2001010084 A JP 2001010084A JP 2001010084 A JP2001010084 A JP 2001010084A JP 2002218484 A JP2002218484 A JP 2002218484A
- Authority
- JP
- Japan
- Prior art keywords
- signal
- pixel
- interpolation
- image
- pattern
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Facsimile Heads (AREA)
- Color Television Image Signal Generators (AREA)
- Processing Of Color Television Signals (AREA)
Abstract
(57)【要約】
【課題】 補間処理によって再生画像に生じる色にじみ
を減少させる。 【解決手段】 補間処理により画素信号を得ようとして
いる対象画素の左右および上下に隣接する画素のＧ信号
と対象画素のＧ信号との差を比較する（ステップ３１
０，３１３，３１５）。左側の画素のＧ信号が対象画素
のＧ信号に最も近いとき、左側の画素に関し、Ｒ，Ｇ，
Ｂ信号を用いて、輝度値Ｙと補正値ＹＧを求める（ステ
ップ３１１）。Ｒ，Ｇ，Ｂ信号に補正値ＹＧを加えるこ
とによって、対象画素のＢ信号を求めるとともにＲ信号
とＧ信号を修正する（ステップ３１２）。右側、上側、
下側の画素のＧ信号が対象画素のＧ信号に最も近いとき
は、それぞれ右側、上側、下側の画素信号を用いる。
を減少させる。 【解決手段】 補間処理により画素信号を得ようとして
いる対象画素の左右および上下に隣接する画素のＧ信号
と対象画素のＧ信号との差を比較する（ステップ３１
０，３１３，３１５）。左側の画素のＧ信号が対象画素
のＧ信号に最も近いとき、左側の画素に関し、Ｒ，Ｇ，
Ｂ信号を用いて、輝度値Ｙと補正値ＹＧを求める（ステ
ップ３１１）。Ｒ，Ｇ，Ｂ信号に補正値ＹＧを加えるこ
とによって、対象画素のＢ信号を求めるとともにＲ信号
とＧ信号を修正する（ステップ３１２）。右側、上側、
下側の画素のＧ信号が対象画素のＧ信号に最も近いとき
は、それぞれ右側、上側、下側の画素信号を用いる。
Description
【０００１】
【発明の属する技術分野】本発明は、例えばデジタルカ
メラにおいて、カラー画像の画質を向上させるために設
けられる画像補間装置に関する。
メラにおいて、カラー画像の画質を向上させるために設
けられる画像補間装置に関する。
【０００２】
【従来の技術】従来デジタルカメラにおいて、カラー画
像を検出するために、ＣＣＤ等の撮像素子の前面にベイ
ヤー配列のカラーフィルタを設けたものが知られてい
る。このカラーフィルタは、レッド（Ｒ）、グリーン
（Ｇ）およびブルー（Ｂ）の各カラーフィルタ要素を市
松模様に配列して構成され、これらのカラーフィルタ要
素は撮像素子のフォトダイオードにそれぞれ対応してい
る。したがってフォトダイオードにより、各カラーフィ
ルタ要素に対応した色の画素信号が生成され、例えばＲ
のカラーフィルタ要素に対応したフォトダイオードによ
りＲの画素信号が生成される。
像を検出するために、ＣＣＤ等の撮像素子の前面にベイ
ヤー配列のカラーフィルタを設けたものが知られてい
る。このカラーフィルタは、レッド（Ｒ）、グリーン
（Ｇ）およびブルー（Ｂ）の各カラーフィルタ要素を市
松模様に配列して構成され、これらのカラーフィルタ要
素は撮像素子のフォトダイオードにそれぞれ対応してい
る。したがってフォトダイオードにより、各カラーフィ
ルタ要素に対応した色の画素信号が生成され、例えばＲ
のカラーフィルタ要素に対応したフォトダイオードによ
りＲの画素信号が生成される。
【０００３】撮像素子から出力された画素信号をそのま
ま用いるよりも高画質のカラー画像を表示するため、画
素信号に対して補間処理を施すことがある。通常の補間
処理では、フォトダイオードによってＲ信号が得られた
画素に対しては、その周囲に位置する画素のＧ信号の相
加平均をとることによってＧ信号が生成され、また、そ
の周囲に位置する画素のＢ信号の相加平均をとることに
よってＢ信号が生成される。ところが、例えば空間周波
数の高い画像において、補間処理によって求めようとし
ている画素の実際の色とその周囲の画素の実際の色とが
大きく異なることがあり、このような場合、補間処理に
より得られた画素の色信号の値によって、再生画像に色
にじみが生じる。
ま用いるよりも高画質のカラー画像を表示するため、画
素信号に対して補間処理を施すことがある。通常の補間
処理では、フォトダイオードによってＲ信号が得られた
画素に対しては、その周囲に位置する画素のＧ信号の相
加平均をとることによってＧ信号が生成され、また、そ
の周囲に位置する画素のＢ信号の相加平均をとることに
よってＢ信号が生成される。ところが、例えば空間周波
数の高い画像において、補間処理によって求めようとし
ている画素の実際の色とその周囲の画素の実際の色とが
大きく異なることがあり、このような場合、補間処理に
より得られた画素の色信号の値によって、再生画像に色
にじみが生じる。
【０００４】
【発明が解決しようとする課題】したがって本発明は、
補間処理によって再生画像に色にじみが生じることを減
少させることを目的としている。
補間処理によって再生画像に色にじみが生じることを減
少させることを目的としている。
【０００５】
【課題を解決するための手段】本発明に係る画像補間装
置は、カラーフィルタと撮像素子とパターン設定手段と
Ｇ補間処理手段とＲ／Ｂ補間処理手段と第１の補間／修
正処理手段と第２の補間／修正処理手段とを備える。カ
ラーフィルタは、水平方向にレッド（Ｒ）とグリーン
（Ｇ）のカラーフィルタ要素が交互に並ぶ第１の列と、
この第１の列の上下側に隣接し、水平方向にＧとブルー
（Ｂ）のカラーフィルタ要素が交互に並ぶ第２の列とか
ら構成される。撮像素子は、各カラーフィルタ要素に対
応した画素信号であるＲ，Ｇ，Ｂ信号を生成する。パタ
ーン設定手段は、撮像素子によって生成されたＲ，Ｇ，
Ｂ信号から、２×２の画素マトリクスにおいて左上にＲ
信号が位置する第１パターンと、右上にＧ信号が位置す
る第２パターンと、左下にＧ信号が位置する第３パター
ンと、右下にＢ信号が位置する第４パターンとにそれぞ
れ属する画像を抽出する。Ｇ補間処理手段は、第１およ
び第４パターンに属する画像の各画素に関し、隣接する
画素のＧ信号を利用してＧ信号を求める。Ｒ／Ｂ補間処
理手段は、第２および第３パターンに属する画像の各画
素に関し、隣接する画素のＲおよびＢ信号を利用してＲ
およびＢ信号を求める。第１の補間／修正処理手段は、
第１パターンに属する画像の各画素に関し、隣接する画
素の中から輝度値が最も近い類似画素を抽出し、類似画
素との間における輝度値の変化率に対応した第１の補正
値と類似画素のＢ，Ｇ，Ｒ信号とに基づいて、Ｂ信号を
求めるとともに、Ｇ補間処理手段により求められたＧ信
号と撮像素子により生成されたＲ信号とを修正する。第
２の補間／修正処理手段は、第４パターンに属する画像
の各画素に関し、隣接する画素の中から輝度値が最も近
い類似画素を抽出し、類似画素との間における輝度値の
変化率に対応した第２の補正値と類似画素のＲ，Ｇ，Ｂ
信号とに基づいて、Ｒ信号を求めるとともに、Ｇ補間処
理手段により求められたＧ信号と撮像素子により生成さ
れたＢ信号とを修正する。
置は、カラーフィルタと撮像素子とパターン設定手段と
Ｇ補間処理手段とＲ／Ｂ補間処理手段と第１の補間／修
正処理手段と第２の補間／修正処理手段とを備える。カ
ラーフィルタは、水平方向にレッド（Ｒ）とグリーン
（Ｇ）のカラーフィルタ要素が交互に並ぶ第１の列と、
この第１の列の上下側に隣接し、水平方向にＧとブルー
（Ｂ）のカラーフィルタ要素が交互に並ぶ第２の列とか
ら構成される。撮像素子は、各カラーフィルタ要素に対
応した画素信号であるＲ，Ｇ，Ｂ信号を生成する。パタ
ーン設定手段は、撮像素子によって生成されたＲ，Ｇ，
Ｂ信号から、２×２の画素マトリクスにおいて左上にＲ
信号が位置する第１パターンと、右上にＧ信号が位置す
る第２パターンと、左下にＧ信号が位置する第３パター
ンと、右下にＢ信号が位置する第４パターンとにそれぞ
れ属する画像を抽出する。Ｇ補間処理手段は、第１およ
び第４パターンに属する画像の各画素に関し、隣接する
画素のＧ信号を利用してＧ信号を求める。Ｒ／Ｂ補間処
理手段は、第２および第３パターンに属する画像の各画
素に関し、隣接する画素のＲおよびＢ信号を利用してＲ
およびＢ信号を求める。第１の補間／修正処理手段は、
第１パターンに属する画像の各画素に関し、隣接する画
素の中から輝度値が最も近い類似画素を抽出し、類似画
素との間における輝度値の変化率に対応した第１の補正
値と類似画素のＢ，Ｇ，Ｒ信号とに基づいて、Ｂ信号を
求めるとともに、Ｇ補間処理手段により求められたＧ信
号と撮像素子により生成されたＲ信号とを修正する。第
２の補間／修正処理手段は、第４パターンに属する画像
の各画素に関し、隣接する画素の中から輝度値が最も近
い類似画素を抽出し、類似画素との間における輝度値の
変化率に対応した第２の補正値と類似画素のＲ，Ｇ，Ｂ
信号とに基づいて、Ｒ信号を求めるとともに、Ｇ補間処
理手段により求められたＧ信号と撮像素子により生成さ
れたＢ信号とを修正する。
【０００６】Ｇ補間処理手段において、隣接する画素は
第２および第３パターンに属する画像に含まれる。Ｒ／
Ｂ補間処理手段において、隣接する画素は第１および第
４パターンに属する画像に含まれる。第１の補間／修正
処理手段および第２の補間／修正処理手段において、隣
接する画素は第２および第３パターンに属する画像に含
まれる。
第２および第３パターンに属する画像に含まれる。Ｒ／
Ｂ補間処理手段において、隣接する画素は第１および第
４パターンに属する画像に含まれる。第１の補間／修正
処理手段および第２の補間／修正処理手段において、隣
接する画素は第２および第３パターンに属する画像に含
まれる。
【０００７】第１の補間／修正処理手段および第２の補
間／修正処理手段は、好ましくは、隣接する画素におけ
るＧ信号の値を用いて、輝度値が最も近い類似画素を抽
出する。類似画素の色合いが補間処理によって求めよう
としている画素の色合いに近いと推定することにより、
色にじみが減少する。
間／修正処理手段は、好ましくは、隣接する画素におけ
るＧ信号の値を用いて、輝度値が最も近い類似画素を抽
出する。類似画素の色合いが補間処理によって求めよう
としている画素の色合いに近いと推定することにより、
色にじみが減少する。
【０００８】第１の補間／修正処理手段は、第１パター
ンに属する画像の各画素に関し、類似画素のＢ，Ｇ，Ｒ
信号にそれぞれ第１の補正値を加えることにより、Ｂ信
号を求めるとともにＧ信号とＲ信号を修正する。
ンに属する画像の各画素に関し、類似画素のＢ，Ｇ，Ｒ
信号にそれぞれ第１の補正値を加えることにより、Ｂ信
号を求めるとともにＧ信号とＲ信号を修正する。
【０００９】第１の補正値は例えば、第１パターンに属
する画像の各画素に関し、類似画素との間におけるＧ信
号の変化率に類似画素の輝度値を乗じて求められる。
する画像の各画素に関し、類似画素との間におけるＧ信
号の変化率に類似画素の輝度値を乗じて求められる。
【００１０】第１の補間／修正処理手段は、例えば下記
式に従ってＢ信号を求めるとともにＧ信号とＲ信号を修
正する。 Ｙ＝0.299×R(x',y')+0.587×G(x',y')+0.114×B(x',y') ＹＧ＝Ｙ×(G(x,y)-G(x',Y'))/G(x',y') ｒ’＝ＹＧ+R(x',y') ｇ’＝ＹＧ+G(x',y') ｂ＝ＹＧ+B(x',y') ただし、Ｙは類似画素の輝度値、ＹＧは第１の補正値、
R(x',y')， G(x',y')，B(x',y')は類似画素のＲ，Ｇ，
Ｂ信号、G(x,y)は第１パターンに属する画像の画素のＧ
信号、ｂは第１の補間／修正処理手段により求められた
第１パターンに属する画素のＢ信号、ｒ’は修正された
Ｒ信号、ｇ’は修正されたＧ信号である。
式に従ってＢ信号を求めるとともにＧ信号とＲ信号を修
正する。 Ｙ＝0.299×R(x',y')+0.587×G(x',y')+0.114×B(x',y') ＹＧ＝Ｙ×(G(x,y)-G(x',Y'))/G(x',y') ｒ’＝ＹＧ+R(x',y') ｇ’＝ＹＧ+G(x',y') ｂ＝ＹＧ+B(x',y') ただし、Ｙは類似画素の輝度値、ＹＧは第１の補正値、
R(x',y')， G(x',y')，B(x',y')は類似画素のＲ，Ｇ，
Ｂ信号、G(x,y)は第１パターンに属する画像の画素のＧ
信号、ｂは第１の補間／修正処理手段により求められた
第１パターンに属する画素のＢ信号、ｒ’は修正された
Ｒ信号、ｇ’は修正されたＧ信号である。
【００１１】第２の補間／修正処理手段は、第４パター
ンに属する画像の各画素に関し、類似画素のＲ，Ｇ，Ｂ
信号にそれぞれ第２の補正値を加えることにより、Ｒ信
号を求めるとともにＧ信号とＢ信号を修正する。
ンに属する画像の各画素に関し、類似画素のＲ，Ｇ，Ｂ
信号にそれぞれ第２の補正値を加えることにより、Ｒ信
号を求めるとともにＧ信号とＢ信号を修正する。
【００１２】第２の補正値は例えば、第４パターンに属
する画像の各画素に関し、類似画素との間におけるＧ信
号の変化率に類似画素の輝度値を乗じて求められる。
する画像の各画素に関し、類似画素との間におけるＧ信
号の変化率に類似画素の輝度値を乗じて求められる。
【００１３】第２の補間／修正処理手段は、例えば下記
式に従ってＲ信号を求めるとともにＧ信号とＢ信号を修
正する。 Ｙ＝0.299×R(x',y')+0.587×G(x',y')+0.114×B(x',y') ＹＧ＝Ｙ×(G(x,y)-G(x',y'))/G(x',y') ｒ＝ＹＧ+R(x',y') ｇ’＝ＹＧ+G(x',y') ｂ’＝ＹＧ+B(x',y') ただし、Ｙは類似画素の輝度値、ＹＧは第２の補正値、
R(x',y')， G(x',y')，B(x',y')は類似画素のＲ，Ｇ，
Ｂ信号、G(x,y)は第４パターンに属する画像の画素のＧ
信号、ｒは第２の補間／修正処理手段により求められた
第４パターンに属する画像の画素のＲ信号、ｇ’は修正
されたＧ信号、ｂ’は修正されたＢ信号である。
式に従ってＲ信号を求めるとともにＧ信号とＢ信号を修
正する。 Ｙ＝0.299×R(x',y')+0.587×G(x',y')+0.114×B(x',y') ＹＧ＝Ｙ×(G(x,y)-G(x',y'))/G(x',y') ｒ＝ＹＧ+R(x',y') ｇ’＝ＹＧ+G(x',y') ｂ’＝ＹＧ+B(x',y') ただし、Ｙは類似画素の輝度値、ＹＧは第２の補正値、
R(x',y')， G(x',y')，B(x',y')は類似画素のＲ，Ｇ，
Ｂ信号、G(x,y)は第４パターンに属する画像の画素のＧ
信号、ｒは第２の補間／修正処理手段により求められた
第４パターンに属する画像の画素のＲ信号、ｇ’は修正
されたＧ信号、ｂ’は修正されたＢ信号である。
【００１４】第１の補間／修正処理手段は、隣接する画
素におけるＧ信号およびＲ信号の値を用いて、類似画素
を抽出する。また、第２の補間／修正処理手段は、隣接
する画素におけるＧ信号および信号の値を用いて、類似
画素を抽出する。
素におけるＧ信号およびＲ信号の値を用いて、類似画素
を抽出する。また、第２の補間／修正処理手段は、隣接
する画素におけるＧ信号および信号の値を用いて、類似
画素を抽出する。
【００１５】第１の補正値は、第１パターンに属する画
像の各画素に関し、その画素と類似画素におけるＧ信号
およびＲ信号に基づいて得られる第１の参照値と類似画
素のＧ信号およびＲ信号に基づいて得られる第２の参照
値との比率を輝度値に乗じて求められる。
像の各画素に関し、その画素と類似画素におけるＧ信号
およびＲ信号に基づいて得られる第１の参照値と類似画
素のＧ信号およびＲ信号に基づいて得られる第２の参照
値との比率を輝度値に乗じて求められる。
【００１６】第１の補間／修正処理手段は、下記式に従
ってＢ信号を求めるとともにＧ信号とＲ信号を修正して
もよい。 Ｙ＝0.299×R(x',y')+0.587×G(x',y')+0.114×B(x',y') ＹＧ＝Ｙ×(0.587×(G(x,y)-G(x',y')+0.299×(R(x,y)-R(x',y')) /(0.587×G(x',y')+0.299×R(x',y')) ｒ’＝ＹＧ+R(x',y) ｇ’＝ＹＧ+G(x',y') ｂ＝ＹＧ+B(x',y') ただし、Ｙは類似画素の輝度値、ＹＧは第１の補正値、
R(x',y')， G(x',y')，B(x',y')は類似画素のＲ，Ｇ，
Ｂ信号、G(x,y)は第１パターンに属する画像の画素のＧ
信号、ｂは第１の補間／修正処理手段により求められた
第１パターンに属する画像の画素のＢ信号、ｒ’は修正
されたＲ信号、ｇ’は修正されたＧ信号である。
ってＢ信号を求めるとともにＧ信号とＲ信号を修正して
もよい。 Ｙ＝0.299×R(x',y')+0.587×G(x',y')+0.114×B(x',y') ＹＧ＝Ｙ×(0.587×(G(x,y)-G(x',y')+0.299×(R(x,y)-R(x',y')) /(0.587×G(x',y')+0.299×R(x',y')) ｒ’＝ＹＧ+R(x',y) ｇ’＝ＹＧ+G(x',y') ｂ＝ＹＧ+B(x',y') ただし、Ｙは類似画素の輝度値、ＹＧは第１の補正値、
R(x',y')， G(x',y')，B(x',y')は類似画素のＲ，Ｇ，
Ｂ信号、G(x,y)は第１パターンに属する画像の画素のＧ
信号、ｂは第１の補間／修正処理手段により求められた
第１パターンに属する画像の画素のＢ信号、ｒ’は修正
されたＲ信号、ｇ’は修正されたＧ信号である。
【００１７】第２の補間／修正処理手段は、第４パター
ンに属する画像の各画素に関し、その画素と類似画素に
おけるＧ信号およびＢ信号に基づいて得られる第１の参
照値と類似画素のＧ信号およびＢ信号に基づいて得られ
る第２の参照値との比率を輝度値に乗じて求められる。
ンに属する画像の各画素に関し、その画素と類似画素に
おけるＧ信号およびＢ信号に基づいて得られる第１の参
照値と類似画素のＧ信号およびＢ信号に基づいて得られ
る第２の参照値との比率を輝度値に乗じて求められる。
【００１８】第２の補間／修正処理手段は、下記式に従
ってＲ信号を求めるとともにＧ信号とＢ信号を修正して
もよい。 Ｙ＝0.299×R(x',y')+0.587×G(x',y')+0.114×B(x',y') ＹＧ＝Ｙ×(0.587×(G(x,y)-G(x',y'))+0.114×(B(x,y)-B(x',y')) /(0.587×G(x',y')+0.114×B(x',y')) ｒ＝ＹＧ+R(x',y') ｇ’＝ＹＧ+G(x',y') ｂ’＝ＹＧ+B(x',y') ただし、Ｙは類似画素の輝度値、ＹＧは第２の補正値、
R(x',y')， G(x',y')，B(x',y')は類似画素のＲ，Ｇ，
Ｂ信号、G(x,y)は第４パターンに属する画像の画素のＧ
信号、ｒは第２の補間／修正処理手段により求められた
第４パターンに属する画像の画素のＲ信号、ｇ’は修正
されたＧ信号、ｂ’は修正されたＢ信号である。
ってＲ信号を求めるとともにＧ信号とＢ信号を修正して
もよい。 Ｙ＝0.299×R(x',y')+0.587×G(x',y')+0.114×B(x',y') ＹＧ＝Ｙ×(0.587×(G(x,y)-G(x',y'))+0.114×(B(x,y)-B(x',y')) /(0.587×G(x',y')+0.114×B(x',y')) ｒ＝ＹＧ+R(x',y') ｇ’＝ＹＧ+G(x',y') ｂ’＝ＹＧ+B(x',y') ただし、Ｙは類似画素の輝度値、ＹＧは第２の補正値、
R(x',y')， G(x',y')，B(x',y')は類似画素のＲ，Ｇ，
Ｂ信号、G(x,y)は第４パターンに属する画像の画素のＧ
信号、ｒは第２の補間／修正処理手段により求められた
第４パターンに属する画像の画素のＲ信号、ｇ’は修正
されたＧ信号、ｂ’は修正されたＢ信号である。
【００１９】
【発明の実施の形態】以下、本発明の実施形態を図面を
参照して説明する。図１は、本発明の第１実施形態であ
る画像補間装置を備えたデジタルカメラ１０の概略的な
構成を示している。
参照して説明する。図１は、本発明の第１実施形態であ
る画像補間装置を備えたデジタルカメラ１０の概略的な
構成を示している。
【００２０】撮影レンズ１１の後方には撮像素子である
ＣＣＤ１２が配設され、ＣＣＤ１２の受光面にはカラー
フィルタ１３が設けられている。すなわち撮影レンズ１
１によって得られた被写体Ｓの光学像がＣＣＤ１２の受
光面に結像され、ＣＣＤ１２のフォトダイオードには、
被写体像を構成するカラーの画素信号が発生する。画素
信号はＣＣＤ１２から読み出され、Ａ／Ｄ変換器１４に
おいてデジタル信号に変換される。そして画素信号はホ
ワイトバランス調整回路１５においてホワイトバランス
調整を施され、画像メモリ１６に格納される。
ＣＣＤ１２が配設され、ＣＣＤ１２の受光面にはカラー
フィルタ１３が設けられている。すなわち撮影レンズ１
１によって得られた被写体Ｓの光学像がＣＣＤ１２の受
光面に結像され、ＣＣＤ１２のフォトダイオードには、
被写体像を構成するカラーの画素信号が発生する。画素
信号はＣＣＤ１２から読み出され、Ａ／Ｄ変換器１４に
おいてデジタル信号に変換される。そして画素信号はホ
ワイトバランス調整回路１５においてホワイトバランス
調整を施され、画像メモリ１６に格納される。
【００２１】画素信号は画像メモリ１６から読み出さ
れ、パターン設定部１７に入力される。パターン設定部
１７では、後述するように、所定の配列パターンを構成
する画素信号が全画素信号の中から抽出され、第１、第
２、第３および第４パターンに分類される。補間処理部
１８では、パターン設定部１７において抽出された画素
信号がそのパターンに応じた補間処理を施される。補間
処理部１８から出力された、補間後の画素信号はメモリ
カード等の記録媒体Ｄに記録される。なおホワイトバラ
ンス調整回路１５は、Ａ／Ｄ変換器１４の後段ではな
く、補間処理部１８の後段に設けられてもよい。
れ、パターン設定部１７に入力される。パターン設定部
１７では、後述するように、所定の配列パターンを構成
する画素信号が全画素信号の中から抽出され、第１、第
２、第３および第４パターンに分類される。補間処理部
１８では、パターン設定部１７において抽出された画素
信号がそのパターンに応じた補間処理を施される。補間
処理部１８から出力された、補間後の画素信号はメモリ
カード等の記録媒体Ｄに記録される。なおホワイトバラ
ンス調整回路１５は、Ａ／Ｄ変換器１４の後段ではな
く、補間処理部１８の後段に設けられてもよい。
【００２２】図２はカラーフィルタ１３におけるカラー
フィルタ要素の配列と、パターン設定部１７において抽
出される、各パターンに属する画像の画素信号とを示し
ている。カラーフィルタ１３は、ベイヤー配列に従って
配置されたレッド（Ｒ）、グリーン（Ｇ）およびブルー
（Ｂ）のカラーフィルタ要素から構成される。すなわち
カラーフィルタ１３は、水平方向にＲとＧのカラーフィ
ルタ要素が交互に並ぶ第１の列１３ａと、この第１の列
１３ａの上下側に隣接し、水平方向にＧとＢのカラーフ
ィルタ要素が交互に並ぶ第２の列１３ｂとから構成さ
れ、ＣＣＤ１２では、各カラーフィルタ要素に対応した
画素信号であるＲ，Ｇ，Ｂ信号が生成される。
フィルタ要素の配列と、パターン設定部１７において抽
出される、各パターンに属する画像の画素信号とを示し
ている。カラーフィルタ１３は、ベイヤー配列に従って
配置されたレッド（Ｒ）、グリーン（Ｇ）およびブルー
（Ｂ）のカラーフィルタ要素から構成される。すなわち
カラーフィルタ１３は、水平方向にＲとＧのカラーフィ
ルタ要素が交互に並ぶ第１の列１３ａと、この第１の列
１３ａの上下側に隣接し、水平方向にＧとＢのカラーフ
ィルタ要素が交互に並ぶ第２の列１３ｂとから構成さ
れ、ＣＣＤ１２では、各カラーフィルタ要素に対応した
画素信号であるＲ，Ｇ，Ｂ信号が生成される。
【００２３】カラーフィルタ１３は、左上にＲ、右上と
左下にＧ、右下にＢのカラーフィルタ要素が配置された
２×２の画素マトリクスＭ１に区画される。パターン設
定部１７では、ＣＣＤ１２によって生成されるＲ，Ｇ，
Ｂ信号から、画素マトリクスＭ１において左上にＲ信号
が位置する第１パターンと、右上にＧ信号が位置する第
２パターンと、左下にＧ信号が位置する第３パターン
と、右下にＢ信号が位置する第４パターンとにそれぞれ
属する画像が抽出される。
左下にＧ、右下にＢのカラーフィルタ要素が配置された
２×２の画素マトリクスＭ１に区画される。パターン設
定部１７では、ＣＣＤ１２によって生成されるＲ，Ｇ，
Ｂ信号から、画素マトリクスＭ１において左上にＲ信号
が位置する第１パターンと、右上にＧ信号が位置する第
２パターンと、左下にＧ信号が位置する第３パターン
と、右下にＢ信号が位置する第４パターンとにそれぞれ
属する画像が抽出される。
【００２４】パターン設定部１７において、第１パター
ンは、Ｃ言語で表わされた論理式（１）に従って、１つ
の画像を構成する全ての画素信号から抽出される。 ！（ｘ％２） ＆＆ ！（ｙ％２） （１） なお論理式（１）において、「ｘ」と「ｙ」は画像の左
隅を原点とする横座標と縦座標をそれぞれ示す。すなわ
ち、左隅のＲ信号の座標は(0,0)その右隣のＧ信号の座
標は(1,0)である。また論理式（１）において、「！」
は論理否定、「％」は剰余、「＆＆」は論理積を示す。
したがって論理式（１）によれば、ｘ座標とｙ座標がと
もに偶数である画素信号（すなわちＲ信号）から成る画
像が抽出される。
ンは、Ｃ言語で表わされた論理式（１）に従って、１つ
の画像を構成する全ての画素信号から抽出される。 ！（ｘ％２） ＆＆ ！（ｙ％２） （１） なお論理式（１）において、「ｘ」と「ｙ」は画像の左
隅を原点とする横座標と縦座標をそれぞれ示す。すなわ
ち、左隅のＲ信号の座標は(0,0)その右隣のＧ信号の座
標は(1,0)である。また論理式（１）において、「！」
は論理否定、「％」は剰余、「＆＆」は論理積を示す。
したがって論理式（１）によれば、ｘ座標とｙ座標がと
もに偶数である画素信号（すなわちＲ信号）から成る画
像が抽出される。
【００２５】同様に、第２パターン、第３パターンおよ
び第４パターンは、論理式（２）、（３）および（４）
に従って抽出される。 （ｘ％２） ＆＆ ！（ｙ％２） （２） ！（ｘ％２） ＆＆ （ｙ％２） （３） （ｘ％２） ＆＆ （ｙ％２） （４）
び第４パターンは、論理式（２）、（３）および（４）
に従って抽出される。 （ｘ％２） ＆＆ ！（ｙ％２） （２） ！（ｘ％２） ＆＆ （ｙ％２） （３） （ｘ％２） ＆＆ （ｙ％２） （４）
【００２６】図３〜図９を参照して補間処理部１８にお
ける処理を説明する。図３は、画像メモリ１６に格納さ
れた、１つの画像を構成する画素の座標と色を示してい
る。補間処理部１８では、後述するように、Ｇ補間処理
ルーチン（図４）と、Ｒ／Ｂ補間処理ルーチン（図５）
と、第１の補間／修正処理ルーチンと（図７、８）、第
２の補間／修正処理ルーチン（図９）とが実行される。
これらの処理ルーチンにおいて、補間等によって画素デ
ータを求めようとしている対象画素の座標は(x,y)であ
る。
ける処理を説明する。図３は、画像メモリ１６に格納さ
れた、１つの画像を構成する画素の座標と色を示してい
る。補間処理部１８では、後述するように、Ｇ補間処理
ルーチン（図４）と、Ｒ／Ｂ補間処理ルーチン（図５）
と、第１の補間／修正処理ルーチンと（図７、８）、第
２の補間／修正処理ルーチン（図９）とが実行される。
これらの処理ルーチンにおいて、補間等によって画素デ
ータを求めようとしている対象画素の座標は(x,y)であ
る。
【００２７】図４はＧ補間処理ルーチンのフローチャー
トである。Ｇ補間処理ルーチンでは、第１および第４パ
ターンに属する画像に関する補間処理が行われる。
トである。Ｇ補間処理ルーチンでは、第１および第４パ
ターンに属する画像に関する補間処理が行われる。
【００２８】ステップ１０１では、対象画素の左側に隣
接する画素のＧ信号であるG(x-1,y)と右側に隣接する画
素のＧ信号であるG(x+1,y)との差の絶対値が、対象画素
の上側に隣接する画素のＧ信号であるG(x,y-1)と下側に
隣接する画素のＧ信号であるG(x,y+1)との差の絶対値よ
りも小さいか否かが判定される。対象画素の座標が(2,
2)である場合（すなわち第１パターンの画像）を例にと
って説明すると、対象画素はR(2,2)であり、ステップ１
０１では|G(1,2)-G(3,2)|が|G(2,1)-G(2,3)|よりも小さ
いか否かが判定される。
接する画素のＧ信号であるG(x-1,y)と右側に隣接する画
素のＧ信号であるG(x+1,y)との差の絶対値が、対象画素
の上側に隣接する画素のＧ信号であるG(x,y-1)と下側に
隣接する画素のＧ信号であるG(x,y+1)との差の絶対値よ
りも小さいか否かが判定される。対象画素の座標が(2,
2)である場合（すなわち第１パターンの画像）を例にと
って説明すると、対象画素はR(2,2)であり、ステップ１
０１では|G(1,2)-G(3,2)|が|G(2,1)-G(2,3)|よりも小さ
いか否かが判定される。
【００２９】なお対象画素が第１パターンに属する画像
に含まれるとき、すなわちＲ信号であるとき、その左右
に隣接する画素は第２パターンに属する画像に含まれ、
またその上下に隣接する画素は第３パターンに含まれ
る。一方、対象画素が第４パターンに属する画像に含ま
れるとき、すなわちＢ信号であるとき、その左右に隣接
する画素は第３パターンに属する画像に含まれ、またそ
の上下に隣接する画素は第２パターンに含まれる。
に含まれるとき、すなわちＲ信号であるとき、その左右
に隣接する画素は第２パターンに属する画像に含まれ、
またその上下に隣接する画素は第３パターンに含まれ
る。一方、対象画素が第４パターンに属する画像に含ま
れるとき、すなわちＢ信号であるとき、その左右に隣接
する画素は第３パターンに属する画像に含まれ、またそ
の上下に隣接する画素は第２パターンに含まれる。
【００３０】ステップ１０１において、対象画素の左右
に隣接する画素信号の差の絶対値の方が上下に隣接する
画素信号の差の絶対値よりも小さいと判定されたとき、
ステップ１０２が実行され、左右に隣接する画素信号で
あるG(x-1,y)とG(x+1,y)の相加平均が、対象画素のＧ信
号ｇとして求められる。これに対して、対象画素の左右
に隣接する画素信号の差の絶対値が上下に隣接する画素
信号の差の絶対値よりも小さくないと判定されたとき、
ステップ１０３において、上下に隣接する画素信号であ
るG(x,y-1)とG(x,y+1)の相加平均が、対象画素のＧ信号
ｇとして求められる。ステップ１０２または１０３の実
行により、Ｇ補間処理ルーチンは終了する。
に隣接する画素信号の差の絶対値の方が上下に隣接する
画素信号の差の絶対値よりも小さいと判定されたとき、
ステップ１０２が実行され、左右に隣接する画素信号で
あるG(x-1,y)とG(x+1,y)の相加平均が、対象画素のＧ信
号ｇとして求められる。これに対して、対象画素の左右
に隣接する画素信号の差の絶対値が上下に隣接する画素
信号の差の絶対値よりも小さくないと判定されたとき、
ステップ１０３において、上下に隣接する画素信号であ
るG(x,y-1)とG(x,y+1)の相加平均が、対象画素のＧ信号
ｇとして求められる。ステップ１０２または１０３の実
行により、Ｇ補間処理ルーチンは終了する。
【００３１】このようにＧ補間処理ルーチンでは、第１
および第４パターンに属する画像の各画素に関し、左右
および上下に隣接する４つのＧ信号において、差の小さ
い方の組の２つのＧ信号の平均値が対象画素のＧ信号と
して求められる。第１および第４パターンに属する画像
の全ての画素に対してＧ補間処理ルーチンが実行される
と、１つの画像を構成する全画素におけるＧ信号が求め
られたことになる。
および第４パターンに属する画像の各画素に関し、左右
および上下に隣接する４つのＧ信号において、差の小さ
い方の組の２つのＧ信号の平均値が対象画素のＧ信号と
して求められる。第１および第４パターンに属する画像
の全ての画素に対してＧ補間処理ルーチンが実行される
と、１つの画像を構成する全画素におけるＧ信号が求め
られたことになる。
【００３２】図５はＲ／Ｂ補間処理ルーチンのフローチ
ャートである。Ｒ／Ｂ補間処理ルーチンでは、第２およ
び第３パターンに属する画像に関する補間処理が行われ
る。
ャートである。Ｒ／Ｂ補間処理ルーチンでは、第２およ
び第３パターンに属する画像に関する補間処理が行われ
る。
【００３３】ステップ２０１では対象画素が第２パター
ンに属する画像に含まれるか否かが判定される。対象画
素が第２パターンに属する画像に含まれるとき、すなわ
ち対象画素が画素マトリクスＭ１（図２）の右上のＧ信
号であるとき、ステップ２０２が実行される。これに対
して対象画素が第２パターンに含まれないとき、すなわ
ち第３パターンに含まれ、画素マトリクスＭ１（図２）
の左下のＧ信号であるとき、ステップ２０３が実行され
る。
ンに属する画像に含まれるか否かが判定される。対象画
素が第２パターンに属する画像に含まれるとき、すなわ
ち対象画素が画素マトリクスＭ１（図２）の右上のＧ信
号であるとき、ステップ２０２が実行される。これに対
して対象画素が第２パターンに含まれないとき、すなわ
ち第３パターンに含まれ、画素マトリクスＭ１（図２）
の左下のＧ信号であるとき、ステップ２０３が実行され
る。
【００３４】ステップ２０２では、対象画素の左右に隣
接する画素信号（第１パターンの画像）であるR(x-1,y)
とR(x+1,y)の相加平均が対象画素のＲ信号ｒとして求め
られる。また対象画素の上下に隣接する画素信号（第４
パターンの画像）であるB(x,y-1)とB(x,y+1)の相加平均
が対象画素のＢ信号ｂとして求められる。
接する画素信号（第１パターンの画像）であるR(x-1,y)
とR(x+1,y)の相加平均が対象画素のＲ信号ｒとして求め
られる。また対象画素の上下に隣接する画素信号（第４
パターンの画像）であるB(x,y-1)とB(x,y+1)の相加平均
が対象画素のＢ信号ｂとして求められる。
【００３５】ステップ２０３では、対象画素の上下に隣
接する画素信号（第１パターンの画像）であるR(x,y-1)
とR(x,y+1)の相加平均が対象画素のＲ信号ｒとして求め
られる。また対象画素の左右に隣接する画素信号（第４
パターンの画像）であるB(x-1,y)とB(x+1,y)の相加平均
が対象画素のＢ信号ｂとして求められる。
接する画素信号（第１パターンの画像）であるR(x,y-1)
とR(x,y+1)の相加平均が対象画素のＲ信号ｒとして求め
られる。また対象画素の左右に隣接する画素信号（第４
パターンの画像）であるB(x-1,y)とB(x+1,y)の相加平均
が対象画素のＢ信号ｂとして求められる。
【００３６】ステップ２０２または２０３の実行により
Ｒ／Ｂ補間処理ルーチンは終了する。このようにＲ／Ｂ
補間処理ルーチンでは、第２および第３パターンに属す
る画像の各画素に関し、左右および上下に隣接する画素
信号を補間することにより、対象画素のＲおよびＢ信号
が求められる。Ｇ補間処理ルーチン（図４）が完了し、
かつ第２および第３パターンに属する画像の全ての画素
に対してＲ／Ｂ補間処理ルーチンが実行されると、図６
から理解されるように、１つの画像を構成する全画素に
おけるＧ信号が求められ、また第２および第３パターン
に属する画像の各画素に関してＲ信号ｒとＢ信号ｂが求
められたことになる。すなわち第１パターンに属する画
像に関しては、Ｂ信号がまだ求められておらず、また第
４パターンに属する画像に関しては、Ｒ信号がまだ求め
られていない。
Ｒ／Ｂ補間処理ルーチンは終了する。このようにＲ／Ｂ
補間処理ルーチンでは、第２および第３パターンに属す
る画像の各画素に関し、左右および上下に隣接する画素
信号を補間することにより、対象画素のＲおよびＢ信号
が求められる。Ｇ補間処理ルーチン（図４）が完了し、
かつ第２および第３パターンに属する画像の全ての画素
に対してＲ／Ｂ補間処理ルーチンが実行されると、図６
から理解されるように、１つの画像を構成する全画素に
おけるＧ信号が求められ、また第２および第３パターン
に属する画像の各画素に関してＲ信号ｒとＢ信号ｂが求
められたことになる。すなわち第１パターンに属する画
像に関しては、Ｂ信号がまだ求められておらず、また第
４パターンに属する画像に関しては、Ｒ信号がまだ求め
られていない。
【００３７】図７および図８は、第１パターンに属する
画像の各画素に関してＢ信号を求めるとともに、Ｇ補間
処理ルーチン（図４）により求められたＧ信号とＣＣＤ
１２により生成されたＲ信号とを修正する第１の補間／
修正処理ルーチンのフローチャートである。
画像の各画素に関してＢ信号を求めるとともに、Ｇ補間
処理ルーチン（図４）により求められたＧ信号とＣＣＤ
１２により生成されたＲ信号とを修正する第１の補間／
修正処理ルーチンのフローチャートである。
【００３８】ステップ３０１では、対象画素の左側に隣
接する画素のＧ信号であるG(x-1,y)と対象画素のＧ信号
であるG(x,y)との差の絶対値が、対象画素の右側に隣接
する画素のＧ信号であるG(x+1,y)と対象画素のＧ信号で
あるG(x,y)との差の絶対値よりも小さいか否かが判定さ
れる。換言すれば、対象画素の左右に隣接するいずれの
画素のＧ信号が対象画素のＧ信号に近い値を有するか否
かが判定される。左側の画素のＧ信号が対象画素のＧ信
号により近いとき、ステップ３０２において、パラメー
タｐが−１に定められる。これに対し、右側の画素のＧ
信号が対象画素のＧ信号により近い、あるいは等しいと
き、ステップ３０３において、パラメータｐが１に定め
られる。
接する画素のＧ信号であるG(x-1,y)と対象画素のＧ信号
であるG(x,y)との差の絶対値が、対象画素の右側に隣接
する画素のＧ信号であるG(x+1,y)と対象画素のＧ信号で
あるG(x,y)との差の絶対値よりも小さいか否かが判定さ
れる。換言すれば、対象画素の左右に隣接するいずれの
画素のＧ信号が対象画素のＧ信号に近い値を有するか否
かが判定される。左側の画素のＧ信号が対象画素のＧ信
号により近いとき、ステップ３０２において、パラメー
タｐが−１に定められる。これに対し、右側の画素のＧ
信号が対象画素のＧ信号により近い、あるいは等しいと
き、ステップ３０３において、パラメータｐが１に定め
られる。
【００３９】ステップ３０４では、対象画素の上側に隣
接する画素のＧ信号であるG(x,y-1)と対象画素のＧ信号
であるG(x,y)との差の絶対値が、対象画素の下側に隣接
する画素のＧ信号であるG(x,y+1)と対象画素のＧ信号で
あるG(x,y)との差の絶対値よりも小さいか否かが判定さ
れる。すなわち対象画素の上下に隣接するいずれの画素
のＧ信号が対象画素のＧ信号に近い値を有するか否かが
判定される。上側のＧ信号が対象画素のＧ信号により近
いとき、ステップ３０５において、パラメータｑが−１
に定められる。これに対し、下側のＧ信号が対象画素の
Ｇ信号により近い、あるいは等しいとき、ステップ３０
６において、パラメータｑが１に定められる。
接する画素のＧ信号であるG(x,y-1)と対象画素のＧ信号
であるG(x,y)との差の絶対値が、対象画素の下側に隣接
する画素のＧ信号であるG(x,y+1)と対象画素のＧ信号で
あるG(x,y)との差の絶対値よりも小さいか否かが判定さ
れる。すなわち対象画素の上下に隣接するいずれの画素
のＧ信号が対象画素のＧ信号に近い値を有するか否かが
判定される。上側のＧ信号が対象画素のＧ信号により近
いとき、ステップ３０５において、パラメータｑが−１
に定められる。これに対し、下側のＧ信号が対象画素の
Ｇ信号により近い、あるいは等しいとき、ステップ３０
６において、パラメータｑが１に定められる。
【００４０】ステップ３０７では、対象画素の左右のい
ずれかに隣接する画素と、上下のいずれかに隣接する画
素と、対象画素とに関し、Ｇ信号の大きさが比較され
る。対象画素の左側の画素のＧ信号が右側の画素のＧ信
号よりも対象画素のＧ信号に近く、かつ対象画素の上側
の画素のＧ信号が下側の画素のＧ信号よりも対象画素の
Ｇ信号に近いとき、パラメータｐ，ｑはともに−１であ
り、G(x-1,y)とG(x,y)との差の絶対値が、G(x,y-1)とG
(x,y)との差の絶対値よりも小さいか否かが判定され
る。左側のＧ信号が対象画素のＧ信号により近いとき、
ステップ３０８において、パラメータｓがｐすなわち−
１に定められる。これに対し、上側のＧ信号が対象画素
のＧ信号により近い、あるいは等しいとき、ステップ３
０９においてパラメータｓが２×ｑすなわち−２に定め
られる。
ずれかに隣接する画素と、上下のいずれかに隣接する画
素と、対象画素とに関し、Ｇ信号の大きさが比較され
る。対象画素の左側の画素のＧ信号が右側の画素のＧ信
号よりも対象画素のＧ信号に近く、かつ対象画素の上側
の画素のＧ信号が下側の画素のＧ信号よりも対象画素の
Ｇ信号に近いとき、パラメータｐ，ｑはともに−１であ
り、G(x-1,y)とG(x,y)との差の絶対値が、G(x,y-1)とG
(x,y)との差の絶対値よりも小さいか否かが判定され
る。左側のＧ信号が対象画素のＧ信号により近いとき、
ステップ３０８において、パラメータｓがｐすなわち−
１に定められる。これに対し、上側のＧ信号が対象画素
のＧ信号により近い、あるいは等しいとき、ステップ３
０９においてパラメータｓが２×ｑすなわち−２に定め
られる。
【００４１】パラメータｐ，ｑがともに１であるとき、
パラメータｐ，ｑがそれぞれ−１，１であるとき、パラ
メータｐ，ｑがそれぞれ１，−１であるときも同様にし
てステップ３０７、３０８または３０９が実行される。
このようにして第１の補間／修正処理ルーチンでは、対
象画素のＧ信号に関し、第２および第３パターンに属す
る画像に含まれる、隣接する画素のＧ信号の値が検討さ
れ、左側に隣接する画素のＧ信号が最も近ければパラメ
ータｓは−１に、右側に隣接する画素のＧ信号が最も近
ければパラメータｓは１に、上側に隣接する画素のＧ信
号が最も近ければパラメータｓは−２に、下側に隣接す
る画素のＧ信号が最も近ければパラメータｓは２に、そ
れぞれ定められる。
パラメータｐ，ｑがそれぞれ−１，１であるとき、パラ
メータｐ，ｑがそれぞれ１，−１であるときも同様にし
てステップ３０７、３０８または３０９が実行される。
このようにして第１の補間／修正処理ルーチンでは、対
象画素のＧ信号に関し、第２および第３パターンに属す
る画像に含まれる、隣接する画素のＧ信号の値が検討さ
れ、左側に隣接する画素のＧ信号が最も近ければパラメ
ータｓは−１に、右側に隣接する画素のＧ信号が最も近
ければパラメータｓは１に、上側に隣接する画素のＧ信
号が最も近ければパラメータｓは−２に、下側に隣接す
る画素のＧ信号が最も近ければパラメータｓは２に、そ
れぞれ定められる。
【００４２】この明細書では、４つの隣接する画素にお
いて、対象画素のＧ信号に最も近いＧ信号を有する画素
を類似画素と呼ぶ。類似画素は、輝度値が対象画素の輝
度値に最も近いものが好ましいが、対象画素の輝度値が
未知であるため、Ｇ信号を用いて輝度値を判定し、類似
画素を抽出している。
いて、対象画素のＧ信号に最も近いＧ信号を有する画素
を類似画素と呼ぶ。類似画素は、輝度値が対象画素の輝
度値に最も近いものが好ましいが、対象画素の輝度値が
未知であるため、Ｇ信号を用いて輝度値を判定し、類似
画素を抽出している。
【００４３】ステップ３１０ではパラメータｓが−１で
あるか否か、すなわち類似画素が対象画素の左側に隣接
する画素であるか否かが判定される。パラメータｓが−
１であるとき、ステップ３１１が実行され、類似画素の
Ｒ，Ｇ，Ｂ信号であるR(x-1,y),G(x-1,y),B(x-1,y)を用
いて輝度値Ｙが求められ、また類似画素のＧ信号である
G(x-1,y)と対象画素のＧ信号であるG(x,y)と輝度値Ｙと
を用いて補正値ＹＧが求められる。
あるか否か、すなわち類似画素が対象画素の左側に隣接
する画素であるか否かが判定される。パラメータｓが−
１であるとき、ステップ３１１が実行され、類似画素の
Ｒ，Ｇ，Ｂ信号であるR(x-1,y),G(x-1,y),B(x-1,y)を用
いて輝度値Ｙが求められ、また類似画素のＧ信号である
G(x-1,y)と対象画素のＧ信号であるG(x,y)と輝度値Ｙと
を用いて補正値ＹＧが求められる。
【００４４】輝度値Ｙおよび補正値ＹＧはそれぞれ
（５）式および（６）式に従って演算される。 Ｙ＝0.299×R(x-1,y)+0.587×G(x-1,y)+0.114×B(x-1,y) （５） ＹＧ＝Ｙ×(G(x,y)-G(x-1,y))/G(x-1,y) （６）
（５）式および（６）式に従って演算される。 Ｙ＝0.299×R(x-1,y)+0.587×G(x-1,y)+0.114×B(x-1,y) （５） ＹＧ＝Ｙ×(G(x,y)-G(x-1,y))/G(x-1,y) （６）
【００４５】（５）式は従来公知である。補正値ＹＧ
は、（６）式から理解されるように、対象画素と類似画
素との間におけるＧ信号の変化率に類似画素の輝度値Ｙ
を乗じて求められる。
は、（６）式から理解されるように、対象画素と類似画
素との間におけるＧ信号の変化率に類似画素の輝度値Ｙ
を乗じて求められる。
【００４６】ステップ３１２では、対象画素のＧ信号と
Ｒ信号が（７）式と（８）式に従って演算され、修正さ
れたＧ信号ｇ’と修正されたＲ信号ｒ’が求められる。
また対象画素のＢ信号が（９）式に従って演算され、補
間されたＢ信号ｂが求められる。これにより、第１の補
間／修正処理ルーチンは終了する。 ｒ’＝ＹＧ+R(x',y') （７） ｇ’＝ＹＧ+G(x',y') （８） ｂ＝ＹＧ+B(x',y') （９）
Ｒ信号が（７）式と（８）式に従って演算され、修正さ
れたＧ信号ｇ’と修正されたＲ信号ｒ’が求められる。
また対象画素のＢ信号が（９）式に従って演算され、補
間されたＢ信号ｂが求められる。これにより、第１の補
間／修正処理ルーチンは終了する。 ｒ’＝ＹＧ+R(x',y') （７） ｇ’＝ＹＧ+G(x',y') （８） ｂ＝ＹＧ+B(x',y') （９）
【００４７】なおR(x',y'),G(x',y'),B(x',y')は、ステ
ップ３１１の後ステップ３１２が実行されるときはR(x-
1,y),G(x-1,y),B(x-1,y)であり、ステップ３１４の後ス
テップ３１２が実行されるときはR(x+1,y),G(x+1,y),B
(x+1,y)であり、ステップ３１６の後ステップ３１２が
実行されるときはR(x,y-1),G(x,y-1),B(x,y-1)であり、
ステップ３１７の後ステップ３１２が実行されるときは
R(x,y+1),G(x,y+1),B(x,y+1) である。
ップ３１１の後ステップ３１２が実行されるときはR(x-
1,y),G(x-1,y),B(x-1,y)であり、ステップ３１４の後ス
テップ３１２が実行されるときはR(x+1,y),G(x+1,y),B
(x+1,y)であり、ステップ３１６の後ステップ３１２が
実行されるときはR(x,y-1),G(x,y-1),B(x,y-1)であり、
ステップ３１７の後ステップ３１２が実行されるときは
R(x,y+1),G(x,y+1),B(x,y+1) である。
【００４８】ステップ３１０においてパラメータｓが−
１ではないと判定されたとき、ステップ３１３へ進み、
パラメータｓが１であるか否かが判定され、類似画素が
対象画素の右側に隣接する画素であるか否かが判定され
る。パラメータｓが１であるとき、ステップ３１４が実
行され、類似画素のＲ，Ｇ，Ｂ信号を用いて輝度値Ｙ、
色差信号Ｃｂ、Ｃｒおよび補正値ＹＧが求められる。
１ではないと判定されたとき、ステップ３１３へ進み、
パラメータｓが１であるか否かが判定され、類似画素が
対象画素の右側に隣接する画素であるか否かが判定され
る。パラメータｓが１であるとき、ステップ３１４が実
行され、類似画素のＲ，Ｇ，Ｂ信号を用いて輝度値Ｙ、
色差信号Ｃｂ、Ｃｒおよび補正値ＹＧが求められる。
【００４９】輝度値Ｙおよび補正値ＹＧはそれぞれ（５
ａ）式および（６ａ）式に従って演算される。 Ｙ＝0.299×R(x+1,y)+0.587×G(x+1,y)+0.114×B(x+1,y) （５ａ） ＹＧ＝Ｙ×(G(x,y)-G(x+1,y))/G(x+1,y) （６ａ）
ａ）式および（６ａ）式に従って演算される。 Ｙ＝0.299×R(x+1,y)+0.587×G(x+1,y)+0.114×B(x+1,y) （５ａ） ＹＧ＝Ｙ×(G(x,y)-G(x+1,y))/G(x+1,y) （６ａ）
【００５０】次いでステップ３１２が実行される。すな
わち、対象画素のＧ信号とＲ信号が（７）式と（８）式
に従って演算され、修正されたＧ信号ｇ’と修正された
Ｒ信号ｒ’が求められる。また対象画素のＢ信号が
（９）式に従って演算され、補間されたＢ信号ｂが求め
られる。これにより第１の補間／修正処理ルーチンは終
了する。
わち、対象画素のＧ信号とＲ信号が（７）式と（８）式
に従って演算され、修正されたＧ信号ｇ’と修正された
Ｒ信号ｒ’が求められる。また対象画素のＢ信号が
（９）式に従って演算され、補間されたＢ信号ｂが求め
られる。これにより第１の補間／修正処理ルーチンは終
了する。
【００５１】ステップ３１３においてパラメータｓが１
ではないと判定されたとき、ステップ３１５へ進み、パ
ラメータｓが−２であるか否かが判定され、類似画素が
対象画素の上側に隣接する画素であるか否かが判定され
る。パラメータｓが−２であるとき、ステップ３１６が
実行され、類似画素のＲ，Ｇ，Ｂ信号を用いて輝度値Ｙ
および補正値ＹＧが求められる。
ではないと判定されたとき、ステップ３１５へ進み、パ
ラメータｓが−２であるか否かが判定され、類似画素が
対象画素の上側に隣接する画素であるか否かが判定され
る。パラメータｓが−２であるとき、ステップ３１６が
実行され、類似画素のＲ，Ｇ，Ｂ信号を用いて輝度値Ｙ
および補正値ＹＧが求められる。
【００５２】輝度値Ｙおよび補正値ＹＧはそれぞれ（５
ｂ）式および（６ｂ）式に従って演算される。 Ｙ＝0.299×R(x,y-1)+0.587×G(x,y-1)+0.114×B(x,y-1) （５ｂ） ＹＧ＝Ｙ×(G(x,y)-G(x,y-1))/G(x,y-1) （６ｂ）
ｂ）式および（６ｂ）式に従って演算される。 Ｙ＝0.299×R(x,y-1)+0.587×G(x,y-1)+0.114×B(x,y-1) （５ｂ） ＹＧ＝Ｙ×(G(x,y)-G(x,y-1))/G(x,y-1) （６ｂ）
【００５３】次いで、ステップ３１１、３１４の場合と
同様に、ステップ３１２が実行され、対象画素のＧ信号
とＲ信号が（７）式と（８）式に従って修正され、また
対象画素のＢ信号が（９）式に従って演算され、第１の
補間／修正処理ルーチンは終了する。
同様に、ステップ３１２が実行され、対象画素のＧ信号
とＲ信号が（７）式と（８）式に従って修正され、また
対象画素のＢ信号が（９）式に従って演算され、第１の
補間／修正処理ルーチンは終了する。
【００５４】ステップ３１５においてパラメータｓが−
２ではないと判定されたとき、パラメータｓは２であ
る、すなわち類似画素が対象画素の下側に隣接する画素
であると見做され、ステップ３１７において、類似画素
のＲ，Ｇ，Ｂ信号を用いて輝度値Ｙおよび補正値ＹＧが
求められる。
２ではないと判定されたとき、パラメータｓは２であ
る、すなわち類似画素が対象画素の下側に隣接する画素
であると見做され、ステップ３１７において、類似画素
のＲ，Ｇ，Ｂ信号を用いて輝度値Ｙおよび補正値ＹＧが
求められる。
【００５５】輝度値Ｙおよび補正値ＹＧはそれぞれ（５
ｃ）式および（６ｃ）式に従って演算される。 Ｙ＝0.299×R(x,y+1)+0.587×G(x,y+1)+0.114×B(x,y+1) （５ｃ） ＹＧ＝Ｙ×(G(x,y)-G(x,y+1))/G(x,y+1) （６ｃ）
ｃ）式および（６ｃ）式に従って演算される。 Ｙ＝0.299×R(x,y+1)+0.587×G(x,y+1)+0.114×B(x,y+1) （５ｃ） ＹＧ＝Ｙ×(G(x,y)-G(x,y+1))/G(x,y+1) （６ｃ）
【００５６】次いで、ステップ３１１、３１４、３１６
の場合と同様に、ステップ３１２が実行され、対象画素
のＧ信号とＲ信号が（７）式と（８）式に従って修正さ
れ、また対象画素のＢ信号が（９）式に従って演算さ
れ、第１の補間／修正処理ルーチンは終了する。
の場合と同様に、ステップ３１２が実行され、対象画素
のＧ信号とＲ信号が（７）式と（８）式に従って修正さ
れ、また対象画素のＢ信号が（９）式に従って演算さ
れ、第１の補間／修正処理ルーチンは終了する。
【００５７】このように第１の補間／修正処理ルーチン
では、類似画素のＲ，Ｇ，Ｂ信号に補正値ＹＧを加える
ことによって、対象画素のＢ信号を求めるとともに、そ
れまでに求められているＧ信号とＲ信号を修正してい
る。
では、類似画素のＲ，Ｇ，Ｂ信号に補正値ＹＧを加える
ことによって、対象画素のＢ信号を求めるとともに、そ
れまでに求められているＧ信号とＲ信号を修正してい
る。
【００５８】第１の補間／修正処理ルーチンは、第１パ
ターンに属する画像の全ての画素に関して実行される。
Ｇ補間処理ルーチン（図４）、Ｒ／Ｂ補間処理ルーチン
（図５）および第１の補間／修正処理ルーチン（図７及
び図８）が完了した時点において、第１、第２および第
３パターンに属する画像に関して、Ｒ，Ｇ，Ｂ信号が求
められており、第４パターンに属する画像におけるＲ信
号はまだ決定されていない。
ターンに属する画像の全ての画素に関して実行される。
Ｇ補間処理ルーチン（図４）、Ｒ／Ｂ補間処理ルーチン
（図５）および第１の補間／修正処理ルーチン（図７及
び図８）が完了した時点において、第１、第２および第
３パターンに属する画像に関して、Ｒ，Ｇ，Ｂ信号が求
められており、第４パターンに属する画像におけるＲ信
号はまだ決定されていない。
【００５９】第４パターンの画像のＲ信号は、第２の補
間／修正処理ルーチンにより求められる。また第２の補
間／修正処理ルーチンでは、Ｇ補間処理ルーチン（図
４）により求められたＧ信号とＣＣＤ１２により生成さ
れたＢ信号とが修正される。図９は第２の補間／修正処
理ルーチンのフローチャートの後半部分を示している。
なお第２の補間／修正処理ルーチンの前半部分は図７に
示す第１の補間／修正処理ルーチンと同じであるので、
図示を省略する。
間／修正処理ルーチンにより求められる。また第２の補
間／修正処理ルーチンでは、Ｇ補間処理ルーチン（図
４）により求められたＧ信号とＣＣＤ１２により生成さ
れたＢ信号とが修正される。図９は第２の補間／修正処
理ルーチンのフローチャートの後半部分を示している。
なお第２の補間／修正処理ルーチンの前半部分は図７に
示す第１の補間／修正処理ルーチンと同じであるので、
図示を省略する。
【００６０】ステップ４１０、４１３、４１５の処理内
容はステップ３１０、３１３、３１５（図８）と同じで
ある。ステップ４１１、４１４、４１６、４１７の処理
内容はステップ３１１、３１４、３１６、３１７と同じ
である。
容はステップ３１０、３１３、３１５（図８）と同じで
ある。ステップ４１１、４１４、４１６、４１７の処理
内容はステップ３１１、３１４、３１６、３１７と同じ
である。
【００６１】ステップ４１２では、対象画素のＲ信号が
（１０）式に従って演算され、補間されたＲ信号ｒが求
められる。対象画素のＧ信号とＢ信号が（１１）式と
（１２）式に従って演算され、修正されたＧ信号ｇ’と
修正されたＢ信号ｂ’が求められる。 ｒ＝ＹＧ+R(x',y') （１０） ｇ’＝ＹＧ+G(x',y') （１１） ｂ’＝ＹＧ+B(x',y') （１２）
（１０）式に従って演算され、補間されたＲ信号ｒが求
められる。対象画素のＧ信号とＢ信号が（１１）式と
（１２）式に従って演算され、修正されたＧ信号ｇ’と
修正されたＢ信号ｂ’が求められる。 ｒ＝ＹＧ+R(x',y') （１０） ｇ’＝ＹＧ+G(x',y') （１１） ｂ’＝ＹＧ+B(x',y') （１２）
【００６２】第２の補間／修正処理ルーチンは、第４パ
ターンに属する画像の全ての画素に関して実行される。
ターンに属する画像の全ての画素に関して実行される。
【００６３】このように第２の補間／修正処理ルーチン
では、第１の補間／修正処理ルーチンと同様に、類似画
素のＲ，Ｇ，Ｂ信号に補正値ＹＧを加えることによっ
て、対象画素のＲ信号を求めるとともに、それまでに求
められているＧ信号とＢ信号を修正している。
では、第１の補間／修正処理ルーチンと同様に、類似画
素のＲ，Ｇ，Ｂ信号に補正値ＹＧを加えることによっ
て、対象画素のＲ信号を求めるとともに、それまでに求
められているＧ信号とＢ信号を修正している。
【００６４】以上のように本実施形態では、特に第１の
補間／修正処理ルーチン（図７および図８）と第２の補
間／修正処理ルーチン（図９）において、対象画素に関
して、その左右および上下に位置する画素から輝度値が
最も近いものを類似画素として抽出し、補間処理を行っ
ている。この補間処理において、２つの画素における輝
度値が近いほど色の相関が強いため、対象画素の色差信
号を類似画素の色差信号とすることにより、実際の色に
より近い画素信号を得ることができる。したがって本実
施形態によれば、再生画像における色にじみを減少させ
ることができる。
補間／修正処理ルーチン（図７および図８）と第２の補
間／修正処理ルーチン（図９）において、対象画素に関
して、その左右および上下に位置する画素から輝度値が
最も近いものを類似画素として抽出し、補間処理を行っ
ている。この補間処理において、２つの画素における輝
度値が近いほど色の相関が強いため、対象画素の色差信
号を類似画素の色差信号とすることにより、実際の色に
より近い画素信号を得ることができる。したがって本実
施形態によれば、再生画像における色にじみを減少させ
ることができる。
【００６５】さらに本実施形態では、Ｇ補間処理ルーチ
ンにより求められたＧ信号と、ＣＣＤ１２により生成さ
れたＲ信号とＢ信号が（７）、（８）、（１１）および
（１２）式に従って修正されるので、対象画素の色合い
が周囲に位置する画素の色合いに近くなり、画像全体と
して色にじみがより減少する。
ンにより求められたＧ信号と、ＣＣＤ１２により生成さ
れたＲ信号とＢ信号が（７）、（８）、（１１）および
（１２）式に従って修正されるので、対象画素の色合い
が周囲に位置する画素の色合いに近くなり、画像全体と
して色にじみがより減少する。
【００６６】図１０および図１１を参照して第２実施形
態を説明する。図１０は、第１の補間／修正処理ルーチ
ンの前半部分を示し、図１１は、第２の補間／修正処理
ルーチンの前半部分を示している。その他の構成は第１
実施形態と同じであるので省略する。
態を説明する。図１０は、第１の補間／修正処理ルーチ
ンの前半部分を示し、図１１は、第２の補間／修正処理
ルーチンの前半部分を示している。その他の構成は第１
実施形態と同じであるので省略する。
【００６７】ステップ５０１では、対象画素の左側およ
び右側に隣接する画素と対象画素における輝度値の比較
として、不等式（１３）が成立するか否かが判定され
る。 ｜0.587×(G(x-1,y)-G(x,y))+0.299×(R(x-1,y)-R(x,y))|< ｜0.587×(G(x+1,y)-G(x,y))+0.299×(R(x+1,y)-R(x,y))| （１３） 不等式（１３）が真であるとき、すなわち左側の画素の
輝度値が対象画素の輝度値の値により近いとき、ステッ
プ５０２において、パラメータｐが−１に定められる。
これに対し、不等式（１３）が偽であるとき、すなわち
右側の画素の輝度値が対象画素の輝度値により近い、あ
るいは等しいとき、ステップ５０３において、パラメー
タｐが１に定められる。
び右側に隣接する画素と対象画素における輝度値の比較
として、不等式（１３）が成立するか否かが判定され
る。 ｜0.587×(G(x-1,y)-G(x,y))+0.299×(R(x-1,y)-R(x,y))|< ｜0.587×(G(x+1,y)-G(x,y))+0.299×(R(x+1,y)-R(x,y))| （１３） 不等式（１３）が真であるとき、すなわち左側の画素の
輝度値が対象画素の輝度値の値により近いとき、ステッ
プ５０２において、パラメータｐが−１に定められる。
これに対し、不等式（１３）が偽であるとき、すなわち
右側の画素の輝度値が対象画素の輝度値により近い、あ
るいは等しいとき、ステップ５０３において、パラメー
タｐが１に定められる。
【００６８】ステップ５０４では、対象画素の上側およ
び下側に隣接する画素と対象画素における輝度値の比較
として、不等式（１４）が成立するか否かが判定され
る。 ｜0.587×(G(x,y-1)-G(x,y))+0.299×(R(x,y-1)-R(x,y))|< ｜0.587×(G(x,y+1)-G(x,y))+0.299×(R(x,y+1)-R(x,y))| （１４） 不等式（１４）が真であるとき、すなわち上側の画素の
輝度値が対象画素の輝度値の値により近いとき、ステッ
プ５０５において、パラメータｑが−１に定められる。
これに対し、不等式（１４）が偽であるとき、すなわち
下側の画素の輝度値が対象画素の輝度値により近い、あ
るいは等しいとき、ステップ５０６において、パラメー
タｑが１に定められる。
び下側に隣接する画素と対象画素における輝度値の比較
として、不等式（１４）が成立するか否かが判定され
る。 ｜0.587×(G(x,y-1)-G(x,y))+0.299×(R(x,y-1)-R(x,y))|< ｜0.587×(G(x,y+1)-G(x,y))+0.299×(R(x,y+1)-R(x,y))| （１４） 不等式（１４）が真であるとき、すなわち上側の画素の
輝度値が対象画素の輝度値の値により近いとき、ステッ
プ５０５において、パラメータｑが−１に定められる。
これに対し、不等式（１４）が偽であるとき、すなわち
下側の画素の輝度値が対象画素の輝度値により近い、あ
るいは等しいとき、ステップ５０６において、パラメー
タｑが１に定められる。
【００６９】ステップ５０７では、対象画素の左右のい
ずれかに隣接する画素と、上下のいずれかに隣接する画
素と、対象画素とに関し、不等式（１５）に従って輝度
値が比較される。 ｜0.587×(G(x+p,y)-G(x,y))+0.299×(R(x+p,y)-R(x,y))|< ｜0.587×(G(x,y+q)-G(x,y))+0.299×(R(x,y+q)-R(x,y))| （１５） パラメータｐ，ｑがともに−１であり、かつ不等式（１
５）が真であるとき、左側の画素の輝度値が対象画素の
輝度値に最も近く、この場合ステップ５０８においてパ
ラメータｓがｐすなわち−１に定められる。これに対
し、不等式（１５）が偽であるとき、すなわち上側の画
素の輝度値が対象画素の輝度値により近い、あるいは等
しいとき、ステップ５０９においてパラメータｓが２×
ｑすなわち−２に定められる。
ずれかに隣接する画素と、上下のいずれかに隣接する画
素と、対象画素とに関し、不等式（１５）に従って輝度
値が比較される。 ｜0.587×(G(x+p,y)-G(x,y))+0.299×(R(x+p,y)-R(x,y))|< ｜0.587×(G(x,y+q)-G(x,y))+0.299×(R(x,y+q)-R(x,y))| （１５） パラメータｐ，ｑがともに−１であり、かつ不等式（１
５）が真であるとき、左側の画素の輝度値が対象画素の
輝度値に最も近く、この場合ステップ５０８においてパ
ラメータｓがｐすなわち−１に定められる。これに対
し、不等式（１５）が偽であるとき、すなわち上側の画
素の輝度値が対象画素の輝度値により近い、あるいは等
しいとき、ステップ５０９においてパラメータｓが２×
ｑすなわち−２に定められる。
【００７０】パラメータｐ，ｑがともに１であるとき、
パラメータｐ，ｑがそれぞれ−１，１であるとき、パラ
メータｐ，ｑがそれぞれ１，−１であるときも同様にし
てステップ５０７、５０８または５０９が実行される。
このようにして第１の補間／修正処理ルーチンでは、対
象画素のＧ信号およびＲ信号と、第２および第３パター
ンに属する画像に含まれる、隣接する画素のＧ信号およ
びＲ信号とを用いて輝度値が検討され、左側に隣接する
画素の輝度値が最も近ければパラメータｓは−１に、右
側に隣接する画素の輝度値が最も近ければパラメータｓ
は１に、上側に隣接する画素の輝度値が最も近ければパ
ラメータｓは−２に、下側に隣接する画素の輝度値が最
も近ければパラメータｓは２に、それぞれ定められる。
パラメータｐ，ｑがそれぞれ−１，１であるとき、パラ
メータｐ，ｑがそれぞれ１，−１であるときも同様にし
てステップ５０７、５０８または５０９が実行される。
このようにして第１の補間／修正処理ルーチンでは、対
象画素のＧ信号およびＲ信号と、第２および第３パター
ンに属する画像に含まれる、隣接する画素のＧ信号およ
びＲ信号とを用いて輝度値が検討され、左側に隣接する
画素の輝度値が最も近ければパラメータｓは−１に、右
側に隣接する画素の輝度値が最も近ければパラメータｓ
は１に、上側に隣接する画素の輝度値が最も近ければパ
ラメータｓは−２に、下側に隣接する画素の輝度値が最
も近ければパラメータｓは２に、それぞれ定められる。
【００７１】このようにして、対象画素の輝度値に最も
近い輝度値を有する類似画素が抽出された後、図８に示
されるフローチャートと同様な処理によって、類似画素
のＲ，Ｇ，Ｂ信号を用いて輝度値Ｙおよび補正値ＹＧが
求められ、対象画素のＢ信号が補間により求められると
ともに、Ｇ信号とＲ信号が修正される。なお補正値ＹＧ
は、対象画素と類似画素のＧ信号とＲ信号を用いて、
（１６）式に従って求められる。その他の式について
は、第１実施形態と同じである。 ＹＧ＝Ｙ×(0.587×(G(x,y)-G(x',y'))+0.299×(R(x,y)-R(x',y'))) /(0.587×G(x',y')+0.299×R(x',y')) （１６） ただし、G(x',y')は類似画素のＧ信号、R(x',y')は類似
画素のＲ信号を示す。
近い輝度値を有する類似画素が抽出された後、図８に示
されるフローチャートと同様な処理によって、類似画素
のＲ，Ｇ，Ｂ信号を用いて輝度値Ｙおよび補正値ＹＧが
求められ、対象画素のＢ信号が補間により求められると
ともに、Ｇ信号とＲ信号が修正される。なお補正値ＹＧ
は、対象画素と類似画素のＧ信号とＲ信号を用いて、
（１６）式に従って求められる。その他の式について
は、第１実施形態と同じである。 ＹＧ＝Ｙ×(0.587×(G(x,y)-G(x',y'))+0.299×(R(x,y)-R(x',y'))) /(0.587×G(x',y')+0.299×R(x',y')) （１６） ただし、G(x',y')は類似画素のＧ信号、R(x',y')は類似
画素のＲ信号を示す。
【００７２】第２の補間／修正処理ルーチン（図１１）
では、第４パターンの画像のＲ信号が補間により求めら
れるとともに、Ｇ信号とＢ信号が修正される。ステップ
６０１では、対象画素の左側および右側に隣接する画素
と対象画素における輝度値の比較として、不等式（１
７）が成立するか否かが判定される。 ｜0.587×(G(x-1,y)-G(x,y))+0.144×(B(x-1,y)-B(x,y))|< ｜0.587×(G(x+1,y)-G(x,y))+0.144×(B(x+1,y)-B(x,y))| （１７） 不等式（１７）が真であるときは、ステップ６０２にお
いてパラメータｐが−１に定められ、不等式（１７）が
偽であるときは、ステップ６０３においてパラメータｐ
が１に定められる。
では、第４パターンの画像のＲ信号が補間により求めら
れるとともに、Ｇ信号とＢ信号が修正される。ステップ
６０１では、対象画素の左側および右側に隣接する画素
と対象画素における輝度値の比較として、不等式（１
７）が成立するか否かが判定される。 ｜0.587×(G(x-1,y)-G(x,y))+0.144×(B(x-1,y)-B(x,y))|< ｜0.587×(G(x+1,y)-G(x,y))+0.144×(B(x+1,y)-B(x,y))| （１７） 不等式（１７）が真であるときは、ステップ６０２にお
いてパラメータｐが−１に定められ、不等式（１７）が
偽であるときは、ステップ６０３においてパラメータｐ
が１に定められる。
【００７３】ステップ６０４では、対象画素の上側およ
び下側に隣接する画素と対象画素における輝度値の比較
として、不等式（１８）が成立するか否かが判定され
る。 ｜0.587×(G(x,y-1)-G(x,y))+0.144×(B(x,y-1)-B(x,y))|< ｜0.587×(G(x,y+1)-G(x,y))+0.144×(B(x,y+1)-B(x,y))| （１８） 不等式（１８）が真であるときは、ステップ６０５にお
いてパラメータｑが−１に定められ、不等式（１８）が
偽であるときは、ステップ６０６においてパラメータｑ
が１に定められる。
び下側に隣接する画素と対象画素における輝度値の比較
として、不等式（１８）が成立するか否かが判定され
る。 ｜0.587×(G(x,y-1)-G(x,y))+0.144×(B(x,y-1)-B(x,y))|< ｜0.587×(G(x,y+1)-G(x,y))+0.144×(B(x,y+1)-B(x,y))| （１８） 不等式（１８）が真であるときは、ステップ６０５にお
いてパラメータｑが−１に定められ、不等式（１８）が
偽であるときは、ステップ６０６においてパラメータｑ
が１に定められる。
【００７４】ステップ６０７では、対象画素の左右のい
ずれかに隣接する画素と、上下のいずれかに隣接する画
素と、対象画素とに関し、不等式（１９）に従って輝度
値が比較される。 ｜0.587×(G(x+p,y)-G(x,y))+0.144×(B(x+p,y)-B(x,y))|< ｜0.587×(G(x,y+q)-G(x,y))+0.144×(B(x,y+q)-B(x,y))| （１９） パラメータｐ，ｑがともに−１であり、かつ不等式（１
９）が真であるとき、左側の画素の輝度値が対象画素の
輝度値に最も近く、この場合ステップ６０８においてパ
ラメータｓがｐすなわち−１に定められる。これに対
し、不等式（１９）が偽であるとき、すなわち上側の画
素の輝度値が対象画素の輝度値により近い、あるいは等
しいとき、ステップ６０９においてパラメータｓが２×
ｑすなわち−２に定められる。
ずれかに隣接する画素と、上下のいずれかに隣接する画
素と、対象画素とに関し、不等式（１９）に従って輝度
値が比較される。 ｜0.587×(G(x+p,y)-G(x,y))+0.144×(B(x+p,y)-B(x,y))|< ｜0.587×(G(x,y+q)-G(x,y))+0.144×(B(x,y+q)-B(x,y))| （１９） パラメータｐ，ｑがともに−１であり、かつ不等式（１
９）が真であるとき、左側の画素の輝度値が対象画素の
輝度値に最も近く、この場合ステップ６０８においてパ
ラメータｓがｐすなわち−１に定められる。これに対
し、不等式（１９）が偽であるとき、すなわち上側の画
素の輝度値が対象画素の輝度値により近い、あるいは等
しいとき、ステップ６０９においてパラメータｓが２×
ｑすなわち−２に定められる。
【００７５】パラメータｐ，ｑがともに１であるとき、
パラメータｐ，ｑがそれぞれ−１，１であるとき、パラ
メータｐ，ｑがそれぞれ１，−１であるときも同様にし
てステップ６０７、６０８または６０９が実行される。
このようにして第２の補間／修正処理ルーチンでは、対
象画素のＧ信号およびＢ信号と、第２および第３パター
ンに属する画像に含まれる、隣接する画素のＧ信号およ
びＢ信号とを用いて輝度値が検討され、左側に隣接する
画素の輝度値が最も近ければパラメータｓは−１に、右
側に隣接する画素の輝度値が最も近ければパラメータｓ
は１に、上側に隣接する画素の輝度値が最も近ければパ
ラメータｓは−２に、下側に隣接する画素の輝度値が最
も近ければパラメータｓは２に、それぞれ定められる。
パラメータｐ，ｑがそれぞれ−１，１であるとき、パラ
メータｐ，ｑがそれぞれ１，−１であるときも同様にし
てステップ６０７、６０８または６０９が実行される。
このようにして第２の補間／修正処理ルーチンでは、対
象画素のＧ信号およびＢ信号と、第２および第３パター
ンに属する画像に含まれる、隣接する画素のＧ信号およ
びＢ信号とを用いて輝度値が検討され、左側に隣接する
画素の輝度値が最も近ければパラメータｓは−１に、右
側に隣接する画素の輝度値が最も近ければパラメータｓ
は１に、上側に隣接する画素の輝度値が最も近ければパ
ラメータｓは−２に、下側に隣接する画素の輝度値が最
も近ければパラメータｓは２に、それぞれ定められる。
【００７６】このようにして、対象画素の輝度値に最も
近い輝度値を有する類似画素が抽出された後、図９に示
されるフローチャートと同じ処理によって、類似画素の
Ｒ，Ｇ，Ｂ信号を用いて輝度値Ｙおよび補正値ＹＧが求
められ、対象画素のＲ信号が補間により求められるとと
もに、Ｇ信号とＢ信号が修正される。なお補正値ＹＧ
は、対象画素と類似画素のＧ信号とＢ信号を用いて、
（２０）式に従って求められる。 ＹＧ＝Ｙ×(0.587×(G(x,y)-G(x',y'))+0.114×(B(x,y)-B(x',y'))) /(0.587×G(x',y')+0.114×B(x',y')) （２０） ただし、G(x',y')は類似画素のＧ信号、B(x',y')は類似
画素のＢ信号を示す。
近い輝度値を有する類似画素が抽出された後、図９に示
されるフローチャートと同じ処理によって、類似画素の
Ｒ，Ｇ，Ｂ信号を用いて輝度値Ｙおよび補正値ＹＧが求
められ、対象画素のＲ信号が補間により求められるとと
もに、Ｇ信号とＢ信号が修正される。なお補正値ＹＧ
は、対象画素と類似画素のＧ信号とＢ信号を用いて、
（２０）式に従って求められる。 ＹＧ＝Ｙ×(0.587×(G(x,y)-G(x',y'))+0.114×(B(x,y)-B(x',y'))) /(0.587×G(x',y')+0.114×B(x',y')) （２０） ただし、G(x',y')は類似画素のＧ信号、B(x',y')は類似
画素のＢ信号を示す。
【００７７】以上のように本実施形態では、第１の補間
／修正処理ルーチン（図１０）と第２の補間／修正処理
ルーチン（図１１）において、輝度値としてＧ信号およ
びＲ信号あるいはＢ信号を用いているので、輝度信号を
より正確に検討することができる。したがって、再生画
像における色にじみを、第１実施形態よりも減少させる
ことができる。
／修正処理ルーチン（図１０）と第２の補間／修正処理
ルーチン（図１１）において、輝度値としてＧ信号およ
びＲ信号あるいはＢ信号を用いているので、輝度信号を
より正確に検討することができる。したがって、再生画
像における色にじみを、第１実施形態よりも減少させる
ことができる。
【００７８】
【発明の効果】以上のように本発明によれば、補間処理
によって再生画像に生じる色にじみを減少させることが
できる。
によって再生画像に生じる色にじみを減少させることが
できる。
【図１】本発明の第１実施形態である画像補間装置を備
えたデジタルカメラの概略的な構成を示すブロック図で
ある。
えたデジタルカメラの概略的な構成を示すブロック図で
ある。
【図２】カラーフィルタにおけるカラーフィルタ要素の
配列と、パターン設定部において抽出される各パターン
に属する画像の画素信号とを示す図である。
配列と、パターン設定部において抽出される各パターン
に属する画像の画素信号とを示す図である。
【図３】１つの画像を構成する画素の座標と色を示す図
である。
である。
【図４】Ｇ補間処理ルーチンのフローチャートである。
【図５】Ｒ／Ｂ補間処理ルーチンのフローチャートであ
る。
る。
【図６】Ｇ補間処理ルーチンとＲ／Ｂ補間処理ルーチン
が実行されたことによって求められた画素信号を示す図
である。
が実行されたことによって求められた画素信号を示す図
である。
【図７】第１の補間／修正処理ルーチンのフローチャー
トの前半部分である。
トの前半部分である。
【図８】第１の補間／修正処理ルーチンのフローチャー
トの後半部分である。
トの後半部分である。
【図９】第２の補間／修正処理ルーチンのフローチャー
トの後半部分である。
トの後半部分である。
【図１０】第２実施形態における第１の補間／修正処理
ルーチンのフローチャートの前半部分である。
ルーチンのフローチャートの前半部分である。
【図１１】第２実施形態における第２の補間／修正処理
ルーチンのフローチャートの前半部分である。
ルーチンのフローチャートの前半部分である。
１２ 撮像素子 １３ カラーフィルタ
─────────────────────────────────────────────────────
【手続補正書】
【提出日】平成１４年１月１５日（２００２．１．１
５）
５）
【手続補正１】
【補正対象書類名】明細書
【補正対象項目名】００１４
【補正方法】変更
【補正内容】
【００１４】第１の補間／修正処理手段は、隣接する画
素におけるＧ信号およびＲ信号の値を用いて、類似画素
を抽出する。また、第２の補間／修正処理手段は、隣接
する画素におけるＧ信号およびＢ信号の値を用いて、類
似画素を抽出する。
素におけるＧ信号およびＲ信号の値を用いて、類似画素
を抽出する。また、第２の補間／修正処理手段は、隣接
する画素におけるＧ信号およびＢ信号の値を用いて、類
似画素を抽出する。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】００４８
【補正方法】変更
【補正内容】
【００４８】ステップ３１０においてパラメータｓが−
１ではないと判定されたとき、ステップ３１３へ進み、
パラメータｓが１であるか否かが判定され、類似画素が
対象画素の右側に隣接する画素であるか否かが判定され
る。パラメータｓが１であるとき、ステップ３１４が実
行され、類似画素のＲ，Ｇ，Ｂ信号を用いて輝度値Ｙお
よび補正値ＹＧが求められる。
１ではないと判定されたとき、ステップ３１３へ進み、
パラメータｓが１であるか否かが判定され、類似画素が
対象画素の右側に隣接する画素であるか否かが判定され
る。パラメータｓが１であるとき、ステップ３１４が実
行され、類似画素のＲ，Ｇ，Ｂ信号を用いて輝度値Ｙお
よび補正値ＹＧが求められる。
───────────────────────────────────────────────────── フロントページの続き Ｆターム(参考） 5C051 AA01 BA03 DA06 DB01 DB07 DB09 DB23 DC02 DE19 EA01 5C065 AA03 BB02 BB48 CC01 DD02 EE03 GG13 5C066 AA01 CA09 GA01 HA03 KP05
Claims (17)
- 【請求項１】 水平方向にレッド（Ｒ）とグリーン
（Ｇ）のカラーフィルタ要素が交互に並ぶ第１の列と、
この第１の列の上下側に隣接し、水平方向にＧとブルー
（Ｂ）のカラーフィルタ要素が交互に並ぶ第２の列とか
ら構成されるカラーフィルタと、 前記各カラーフィルタ要素に対応した画素信号である
Ｒ，Ｇ，Ｂ信号を生成する撮像素子と、 前記撮像素子によって生成されたＲ，Ｇ，Ｂ信号から、
２×２の画素マトリクスにおいて左上にＲ信号が位置す
る第１パターンと、右上にＧ信号が位置する第２パター
ンと、左下にＧ信号が位置する第３パターンと、右下に
Ｂ信号が位置する第４パターンとにそれぞれ属する画像
を抽出するパターン設定手段と、 前記第１および第４パターンに属する画像の各画素に関
し、隣接する画素のＧ信号を利用してＧ信号を求めるＧ
補間処理手段と、 前記第２および第３パターンに属する画像の各画素に関
し、隣接する画素のＲおよびＢ信号を利用してＲおよび
Ｂ信号を求めるＲ／Ｂ補間処理手段と、 前記第１パターンに属する画像の各画素に関し、隣接す
る画素の中から輝度値が最も近い類似画素を抽出し、前
記類似画素との間における輝度値の変化率に対応した第
１の補正値と前記類似画素のＢ，Ｇ，Ｒ信号とに基づい
て、Ｂ信号を求めるとともに、前記Ｇ補間処理手段によ
り求められたＧ信号と前記撮像素子により生成されたＲ
信号とを修正する第１の補間／修正処理手段と、 前記第４パターンに属する画像の各画素に関し、隣接す
る画素の中から輝度値が最も近い類似画素を抽出し、前
記類似画素との間における輝度値の変化率に対応した第
２の補正値と前記類似画素のＲ，Ｇ，Ｂ信号とに基づい
て、Ｒ信号を求めるとともに、前記Ｇ補間処理手段によ
り求められたＧ信号と前記撮像素子により生成されたＢ
信号とを修正する第２の補間／修正処理手段とを備える
ことを特徴とする画像補間装置。 - 【請求項２】 前記Ｇ補間処理手段において、前記隣接
する画素が前記第２および第３パターンに属する画像に
含まれることを特徴とする請求項１に記載の画像補間装
置。 - 【請求項３】 前記Ｒ／Ｂ補間処理手段において、前記
隣接する画素が前記第１および第４パターンに属する画
像に含まれることを特徴とする請求項１に記載の画像補
間装置。 - 【請求項４】 前記第１の補間／修正処理手段および前
記第２の補間／修正処理手段において、前記隣接する画
素が前記第２および第３パターンに属する画像に含まれ
ることを特徴とする請求項１に記載の画像補間装置。 - 【請求項５】 前記第１の補間／修正処理手段および第
２の補間／修正処理手段が、前記隣接する画素における
Ｇ信号の値を用いて、前記類似画素を抽出することを特
徴とする請求項１に記載の画像補間装置。 - 【請求項６】 前記第１の補間／修正処理手段が、前記
第１パターンに属する画像の各画素に関し、前記類似画
素のＢ，Ｇ，Ｒ信号にそれぞれ前記第１の補正値を加え
ることにより、前記Ｂ信号を求めるとともに前記Ｇ信号
とＲ信号を修正することを特徴とする請求項１に記載の
画像補間装置。 - 【請求項７】 前記第１の補正値が、前記第１パターン
に属する画像の各画素に関し、前記類似画素との間にお
けるＧ信号の変化率に前記類似画素の輝度値を乗じて求
められることを特徴とする請求項１に記載の画像補間装
置。 - 【請求項８】 前記第１の補間／修正処理手段が、下記
式に従って前記Ｂ信号を求めるとともに前記Ｇ信号とＲ
信号を修正することを特徴とする請求項７に記載の画像
補間装置。 Ｙ＝0.299×R(x',y')+0.587×G(x',y')+0.114×B(x',y') ＹＧ＝Ｙ×(G(x,y)-G(x',Y'))/G(x',y') ｒ’＝ＹＧ+R(x',y') ｇ’＝ＹＧ+G(x',y') ｂ＝ＹＧ+B(x',y') ただし、Ｙは前記類似画素の輝度値、ＹＧは前記第１の
補正値、R(x',y')， G(x',y')，B(x',y')は前記類似画
素のＲ，Ｇ，Ｂ信号、G(x,y)は第１パターンに属する画
像の画素のＧ信号、ｂは前記第１の補間／修正処理手段
により求められた前記第１パターンに属する画素のＢ信
号、ｒ’は修正されたＲ信号、ｇ’は修正されたＧ信号
である。 - 【請求項９】 前記第２の補間／修正処理手段が、前記
第４パターンに属する画像の各画素に関し、前記類似画
素のＲ，Ｇ，Ｂ信号にそれぞれ前記第２の補正値を加え
ることにより、前記Ｒ信号を求めるとともに前記Ｇ信号
とＢ信号を修正することを特徴とする請求項１に記載の
画像補間装置。 - 【請求項１０】 前記第２の補正値が、前記第４パター
ンに属する画像の各画素に関し、前記類似画素との間に
おけるＧ信号の変化率に前記類似画素の輝度値を乗じて
求められることを特徴とする請求項１に記載の画像補間
装置。 - 【請求項１１】 前記第２の補間／修正処理手段が、下
記式に従って前記Ｒ信号を求めるとともに前記Ｇ信号と
Ｂ信号を修正することを特徴とする請求項１０に記載の
画像補間装置。 Ｙ＝0.299×R(x',y')+0.587×G(x',y')+0.114×B(x',y') ＹＧ＝Ｙ×(G(x,y)-G(x',y'))/G(x',y') ｒ＝ＹＧ+R(x',y') ｇ’＝ＹＧ+G(x',y') ｂ’＝ＹＧ+B(x',y') ただし、Ｙは前記類似画素の輝度値、ＹＧは前記第２の
補正値、R(x',y')， G(x',y')，B(x',y')は前記類似画
素のＲ，Ｇ，Ｂ信号、G(x,y)は第４パターンに属する画
像の画素のＧ信号、ｒは前記第２の補間／修正処理手段
により求められた前記第４パターンに属する画像の画素
のＲ信号、ｇ’は修正されたＧ信号、ｂ’は修正された
Ｂ信号である。 - 【請求項１２】 前記第１の補間／修正処理手段が、前
記隣接する画素におけるＧ信号およびＲ信号の値を用い
て、前記類似画素を抽出することを特徴とする請求項１
に記載の画像補間装置。 - 【請求項１３】 前記第２の補間／修正処理手段が、前
記隣接する画素におけるＧ信号およびＢ信号の値を用い
て、前記類似画素を抽出することを特徴とする請求項１
に記載の画像補間装置。 - 【請求項１４】 前記第１の補正値が、前記第１パター
ンに属する画像の各画素に関し、その画素と前記類似画
素におけるＧ信号およびＲ信号に基づいて得られる第１
の参照値と前記類似画素のＧ信号およびＲ信号に基づい
て得られる第２の参照値との比率を前記輝度値に乗じて
求められることを特徴とする請求項１に記載の画像補間
装置。 - 【請求項１５】 前記第１の補間／修正処理手段が、下
記式に従って前記Ｂ信号を求めるとともに前記Ｇ信号と
Ｒ信号を修正することを特徴とする請求項１４に記載の
画像補間装置。 Ｙ＝0.299×R(x',y')+0.587×G(x',y')+0.114×B(x',y') ＹＧ＝Ｙ×(0.587×(G(x,y)-G(x',y')+0.299×(R(x,y)-R(x',y')) /(0.587×G(x',y')+0.299×R(x',y')) ｒ’＝ＹＧ+R(x',y) ｇ’＝ＹＧ+G(x',y') ｂ＝ＹＧ+B(x',y') ただし、Ｙは前記類似画素の輝度値、ＹＧは前記第１の
補正値、R(x',y')， G(x',y')，B(x',y')は前記類似画
素のＲ，Ｇ，Ｂ信号、G(x,y)は第１パターンに属する画
像の画素のＧ信号、ｂは前記第１の補間／修正処理手段
により求められた前記第１パターンに属する画像の画素
のＢ信号、ｒ’は修正されたＲ信号、ｇ’は修正された
Ｇ信号である。 - 【請求項１６】 前記第２の補間／修正処理手段が、前
記第４パターンに属する画像の各画素に関し、その画素
と前記類似画素におけるＧ信号およびＢ信号に基づいて
得られる第１の参照値と前記類似画素のＧ信号およびＢ
信号に基づいて得られる第２の参照値との比率を前記輝
度値に乗じて求められることを特徴とする請求項１に記
載の画像補間装置。 - 【請求項１７】 前記第２の補間／修正処理手段が、下
記式に従って前記Ｒ信号を求めるとともに前記Ｇ信号と
Ｂ信号を修正することを特徴とする請求項１６に記載の
画像補間装置。 Ｙ＝0.299×R(x',y')+0.587×G(x',y')+0.114×B(x',y') ＹＧ＝Ｙ×(0.587×(G(x,y)-G(x',y'))+0.114×(B(x,y)-B(x',y')) /(0.587×G(x',y')+0.114×B(x',y')) ｒ＝ＹＧ+R(x',y') ｇ’＝ＹＧ+G(x',y') ｂ’＝ＹＧ+B(x',y') ただし、Ｙは前記類似画素の輝度値、ＹＧは前記第２の
補正値、R(x',y')， G(x',y')，B(x',y')は前記類似画
素のＲ，Ｇ，Ｂ信号、G(x,y)は第４パターンに属する画
像の画素のＧ信号、ｒは前記第２の補間／修正処理手段
により求められた前記第４パターンに属する画像の画素
のＲ信号、ｇ’は修正されたＧ信号、ｂ’は修正された
Ｂ信号である。
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2001010084A JP4334151B2 (ja) | 2001-01-18 | 2001-01-18 | 画像補間装置 |
| US10/043,318 US7106341B2 (en) | 2001-01-15 | 2002-01-14 | Image interpolating device |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2001010084A JP4334151B2 (ja) | 2001-01-18 | 2001-01-18 | 画像補間装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2002218484A true JP2002218484A (ja) | 2002-08-02 |
| JP4334151B2 JP4334151B2 (ja) | 2009-09-30 |
Family
ID=18877464
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2001010084A Expired - Fee Related JP4334151B2 (ja) | 2001-01-15 | 2001-01-18 | 画像補間装置 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP4334151B2 (ja) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2002218483A (ja) * | 2001-01-15 | 2002-08-02 | Asahi Optical Co Ltd | 画像補間装置 |
-
2001
- 2001-01-18 JP JP2001010084A patent/JP4334151B2/ja not_active Expired - Fee Related
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2002218483A (ja) * | 2001-01-15 | 2002-08-02 | Asahi Optical Co Ltd | 画像補間装置 |
| JP4495355B2 (ja) * | 2001-01-15 | 2010-07-07 | Ｈｏｙａ株式会社 | 画像補間装置 |
Also Published As
| Publication number | Publication date |
|---|---|
| JP4334151B2 (ja) | 2009-09-30 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US8358835B2 (en) | Method for detecting and correcting chromatic aberration, and apparatus and method for processing image using the same | |
| JP5672776B2 (ja) | 画像処理装置、および画像処理方法、並びにプログラム | |
| TWI737979B (zh) | 圖像去馬賽克裝置及方法 | |
| CN104869380A (zh) | 图像处理设备和图像处理方法 | |
| JP6282123B2 (ja) | 画像処理装置、画像処理方法及びプログラム | |
| JP4945942B2 (ja) | 画像処理装置 | |
| JP3905708B2 (ja) | 画像補間装置 | |
| US7046277B2 (en) | Image interpolating device, including interpolation and modification processors | |
| JP2007028042A (ja) | 画像処理装置 | |
| JP2009194721A (ja) | 画像信号処理装置、画像信号処理方法、及び撮像装置 | |
| US7106341B2 (en) | Image interpolating device | |
| JP4797478B2 (ja) | 画像処理装置 | |
| JP4334150B2 (ja) | 画像補間装置 | |
| JP5673186B2 (ja) | 撮像装置及び撮像装置の補間処理方法 | |
| US8804025B2 (en) | Signal processing device and imaging device | |
| US6900833B2 (en) | Image interpolating device | |
| JP4334151B2 (ja) | 画像補間装置 | |
| JP4334152B2 (ja) | 画像補間装置 | |
| EP1475032A1 (en) | Color misregistration reducer | |
| JP4666786B2 (ja) | 画像補間装置 | |
| JP4495355B2 (ja) | 画像補間装置 | |
| JP2003134523A (ja) | 撮像装置及び撮像方法 | |
| CN105359517A (zh) | 图像处理装置和图像处理方法 | |
| JP2002232903A (ja) | 画像補間装置 | |
| JP4334484B2 (ja) | 画素信号処理装置及び方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20061124 |
|
| A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A712 Effective date: 20080425 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20090213 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20090324 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20090521 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20090617 |
|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20090623 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120703 Year of fee payment: 3 |
|
| R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313111 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120703 Year of fee payment: 3 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120703 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130703 Year of fee payment: 4 |
|
| S533 | Written request for registration of change of name |
Free format text: JAPANESE INTERMEDIATE CODE: R313533 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
| LAPS | Cancellation because of no payment of annual fees |