JP2000224602A - 補間処理装置および補間処理プログラムを記録した記録媒体 - Google Patents
補間処理装置および補間処理プログラムを記録した記録媒体Info
- Publication number
- JP2000224602A JP2000224602A JP11024678A JP2467899A JP2000224602A JP 2000224602 A JP2000224602 A JP 2000224602A JP 11024678 A JP11024678 A JP 11024678A JP 2467899 A JP2467899 A JP 2467899A JP 2000224602 A JP2000224602 A JP 2000224602A
- Authority
- JP
- Japan
- Prior art keywords
- similarity
- interpolation
- color
- interpolation processing
- strong
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Image Input (AREA)
- Color Television Image Signal Generators (AREA)
- Processing Of Color Television Signals (AREA)
- Editing Of Facsimile Originals (AREA)
- Color Image Communication Systems (AREA)
Abstract
(57)【要約】
【課題】 本発明は、最も高い密度で分布する色を出力
する格子点と該色が欠落する空格子点とから成るカラー
画像に対して補間処理を行う補間処理装置と、該補間処
理をコンピュータに実行させる補間処理プログラムを記
録した記録媒体とに関し、偽色の発生を抑制することを
目的とする。 【解決手段】 類似性判定手段は空格子点における第１
方向の類似度および第２方向の類似度を算出して類似性
が強い方向を判定し、類似性修正判定手段は類似性判定
手段による類似性の強い方向の判定の結果に基づき、互
いに近接する複数の空格子点の間で類似性の強い方向に
予め決められた関連が存在しない空格子点を検出し、該
類似性判定手段とは異なる方法で第１方向の類似度およ
び第２方向の類似度を算出して類似性が強い方向を判定
し直し、補間量算出手段は類似性修正判定手段による類
似性の強い方向の判定の結果に応じて補間量を算出す
る。
する格子点と該色が欠落する空格子点とから成るカラー
画像に対して補間処理を行う補間処理装置と、該補間処
理をコンピュータに実行させる補間処理プログラムを記
録した記録媒体とに関し、偽色の発生を抑制することを
目的とする。 【解決手段】 類似性判定手段は空格子点における第１
方向の類似度および第２方向の類似度を算出して類似性
が強い方向を判定し、類似性修正判定手段は類似性判定
手段による類似性の強い方向の判定の結果に基づき、互
いに近接する複数の空格子点の間で類似性の強い方向に
予め決められた関連が存在しない空格子点を検出し、該
類似性判定手段とは異なる方法で第１方向の類似度およ
び第２方向の類似度を算出して類似性が強い方向を判定
し直し、補間量算出手段は類似性修正判定手段による類
似性の強い方向の判定の結果に応じて補間量を算出す
る。
Description
【０００１】
【発明の属する技術分野】本発明は、最も高い密度で分
布する色を出力する格子点と該色が欠落する空格子点と
から成るカラー画像に対し、空格子点での該色の色情報
に相当する補間量を算出する補間処理を行う補間処理装
置と、該補間処理をコンピュータに実行させる補間処理
プログラムを記録した記録媒体とに関する。
布する色を出力する格子点と該色が欠落する空格子点と
から成るカラー画像に対し、空格子点での該色の色情報
に相当する補間量を算出する補間処理を行う補間処理装
置と、該補間処理をコンピュータに実行させる補間処理
プログラムを記録した記録媒体とに関する。
【０００２】
【従来の技術】電子カメラには、カラー画像の画像デー
タを生成する際、単一の撮像素子を用いるものがある。
このような撮像素子は、例えば図５（１）に示すよう
に、ＲＧＢ（赤色・緑色・青色）の３色のカラーフィル
タがベイア配列されて構成される。ここで、Ｇ（緑色）
に着目すると、撮像素子は、図５（２）に示すようにＧ
（緑色）を出力する画素である格子点と、Ｇ（緑色）が
欠落する画素である空格子点とで構成されていると言え
る。
タを生成する際、単一の撮像素子を用いるものがある。
このような撮像素子は、例えば図５（１）に示すよう
に、ＲＧＢ（赤色・緑色・青色）の３色のカラーフィル
タがベイア配列されて構成される。ここで、Ｇ（緑色）
に着目すると、撮像素子は、図５（２）に示すようにＧ
（緑色）を出力する画素である格子点と、Ｇ（緑色）が
欠落する画素である空格子点とで構成されていると言え
る。
【０００３】このような空格子点に欠落する色の色情報
（補間量）を得る方法（緑色の補間処理の方法）として
は、空格子点の空間的な類似性を判定し、類似性の強い
方向に隣接する格子点の色情報に基づいて補間量を算出
する方法が従来から考えられている。例えば、米国特許
第５,３７３,３２２号明細書、米国特許第５,３８２,９
７６号明細書、米国特許第５,６２９,７３４号明細書に
は、空格子点の空間的な類似性を色傾斜（chrominance
gradients）によって判定する技術が開示されている。
（補間量）を得る方法（緑色の補間処理の方法）として
は、空格子点の空間的な類似性を判定し、類似性の強い
方向に隣接する格子点の色情報に基づいて補間量を算出
する方法が従来から考えられている。例えば、米国特許
第５,３７３,３２２号明細書、米国特許第５,３８２,９
７６号明細書、米国特許第５,６２９,７３４号明細書に
は、空格子点の空間的な類似性を色傾斜（chrominance
gradients）によって判定する技術が開示されている。
【０００４】図６は、これらの米国特許明細書に開示さ
れた従来の補間処理を説明する図である。図において、
Ｇ１１，Ｇ１３，・・・，Ｇ６６などは緑色（Ｇ）の色
情報を示し、Ｒ１２，Ｒ１４，・・・，Ｒ５６などは赤
色（Ｒ）の色情報を示し、Ｂ２１，Ｂ２３，・・・，Ｂ
６７などは青色（Ｂ）の色情報を示す。米国特許第５,
３７３,３２２号明細書に開示された技術では、Ｒ３４
を出力する空格子点の補間量を求める際、横方向の色傾
斜に関する情報ＨＤiff および縦方向の色傾斜に関する
情報ＨＤiffを ＨＤiff ＝｜（（Ｒ３２＋Ｒ３６）／２）−Ｒ３４｜ ＶＤiff ＝｜（（Ｒ１４＋Ｒ５４）／２）−Ｒ３４｜ によって求め、ＨＤiff＜ＶＤiffである場合に横方向の
類似性が強いと判定し、ＶＤiff＜ＨＤiffである場合に
縦方向の類似性が強いと判定する。
れた従来の補間処理を説明する図である。図において、
Ｇ１１，Ｇ１３，・・・，Ｇ６６などは緑色（Ｇ）の色
情報を示し、Ｒ１２，Ｒ１４，・・・，Ｒ５６などは赤
色（Ｒ）の色情報を示し、Ｂ２１，Ｂ２３，・・・，Ｂ
６７などは青色（Ｂ）の色情報を示す。米国特許第５,
３７３,３２２号明細書に開示された技術では、Ｒ３４
を出力する空格子点の補間量を求める際、横方向の色傾
斜に関する情報ＨＤiff および縦方向の色傾斜に関する
情報ＨＤiffを ＨＤiff ＝｜（（Ｒ３２＋Ｒ３６）／２）−Ｒ３４｜ ＶＤiff ＝｜（（Ｒ１４＋Ｒ５４）／２）−Ｒ３４｜ によって求め、ＨＤiff＜ＶＤiffである場合に横方向の
類似性が強いと判定し、ＶＤiff＜ＨＤiffである場合に
縦方向の類似性が強いと判定する。
【０００５】以下、説明を簡単にするため、縦方向の類
似性が強いことを縦類似と称し、横方向の類似性が強い
ことを横類似と称し、双方向の類似性が酷似しているこ
とを中間類似と称する。米国特許第５,３８２,９７６号
明細書に開示された技術では、Ｒ３４を出力する空格子
点の補間量を求める際、横方向の色傾斜に関する情報Ｇ
diff-horをおよび縦方向の色傾斜に関する情報Ｇdiff-v
erを Ｇdiff-hor＝｜Ｇ３３−Ｇ３５｜ Ｇdiff-ver＝｜Ｇ２４−Ｇ４４｜ によって求め、閾値Ｔhresholdについて、 Ｇdiff-hor＜Ｔhreshold and Ｇdiff-ver＞Ｔhreshold が成り立つ場合に横類似と判定し、 Ｇdiff-hor＞Ｔhreshold and Ｇdiff-ver＜Ｔhreshold が成り立つ場合に縦類似と判定する。
似性が強いことを縦類似と称し、横方向の類似性が強い
ことを横類似と称し、双方向の類似性が酷似しているこ
とを中間類似と称する。米国特許第５,３８２,９７６号
明細書に開示された技術では、Ｒ３４を出力する空格子
点の補間量を求める際、横方向の色傾斜に関する情報Ｇ
diff-horをおよび縦方向の色傾斜に関する情報Ｇdiff-v
erを Ｇdiff-hor＝｜Ｇ３３−Ｇ３５｜ Ｇdiff-ver＝｜Ｇ２４−Ｇ４４｜ によって求め、閾値Ｔhresholdについて、 Ｇdiff-hor＜Ｔhreshold and Ｇdiff-ver＞Ｔhreshold が成り立つ場合に横類似と判定し、 Ｇdiff-hor＞Ｔhreshold and Ｇdiff-ver＜Ｔhreshold が成り立つ場合に縦類似と判定する。
【０００６】米国特許第５，６２９，７３４号明細書に
開示された技術では、Ｒ３４を出力する空格子点の補間
量を求める際、横方向の色傾斜に関する情報ＤＨおよび
縦方向の類似度に関する情報ＤＶを ＤＨ＝｜−Ｒ３２＋２×Ｒ３４−Ｒ３６｜＋｜Ｇ３３−
Ｇ３５｜ ＤＶ＝｜−Ｒ１４＋２×Ｒ３４−Ｒ５４｜＋｜Ｇ２４−
Ｇ４４｜ によって求め、ＤＨ＜ＤＶである場合に横類似と判定
し、ＤＶ＜ＤＨである場合に縦類似と判定する。
開示された技術では、Ｒ３４を出力する空格子点の補間
量を求める際、横方向の色傾斜に関する情報ＤＨおよび
縦方向の類似度に関する情報ＤＶを ＤＨ＝｜−Ｒ３２＋２×Ｒ３４−Ｒ３６｜＋｜Ｇ３３−
Ｇ３５｜ ＤＶ＝｜−Ｒ１４＋２×Ｒ３４−Ｒ５４｜＋｜Ｇ２４−
Ｇ４４｜ によって求め、ＤＨ＜ＤＶである場合に横類似と判定
し、ＤＶ＜ＤＨである場合に縦類似と判定する。
【０００７】
【発明が解決しようとする課題】ところで、一般的なカ
ラー画像において、ある程度の範囲に位置する複数の空
格子点では、類似性の強い方向が同一となる傾向にあ
る。すなわち、カラー画像は、縦類似を示す領域と横類
似を示す領域とに分けられ、これらの領域の隙間を埋め
るように中間類似を示す領域が配されることになる。
ラー画像において、ある程度の範囲に位置する複数の空
格子点では、類似性の強い方向が同一となる傾向にあ
る。すなわち、カラー画像は、縦類似を示す領域と横類
似を示す領域とに分けられ、これらの領域の隙間を埋め
るように中間類似を示す領域が配されることになる。
【０００８】また、縦類似を示す領域内では、縦類似の
空格子点が縦方向に連続する傾向にあり、横類似を示す
領域内では、横類似の空格子点が横方向に連続する傾向
にある。しかし、上述した米国特許明細書に記載された
技術では、各々の空格子点において、独立して類似性が
判定されるため、例えば、縦類似の空格子点の周囲に縦
類似の空格子点が全く存在しない場合（図７（Ａ））
や、縦類似の空格子点の上下に横類似の空格子点が存在
する場合（図７（Ｂ））のように、類似性が孤立する状
態が発生し得る。
空格子点が縦方向に連続する傾向にあり、横類似を示す
領域内では、横類似の空格子点が横方向に連続する傾向
にある。しかし、上述した米国特許明細書に記載された
技術では、各々の空格子点において、独立して類似性が
判定されるため、例えば、縦類似の空格子点の周囲に縦
類似の空格子点が全く存在しない場合（図７（Ａ））
や、縦類似の空格子点の上下に横類似の空格子点が存在
する場合（図７（Ｂ））のように、類似性が孤立する状
態が発生し得る。
【０００９】なお、図７は、縦類似の空格子点が孤立し
ている状態の例を示す図であり、図５（２）の空格子点
上に類似性の強い方向（「縦」や「横」）を記載したこ
とに相当するが、何も記載されていない空格子点につい
ては、縦類似以外であることを示す。このように類似性
が孤立する空格子点（互いに近接する複数の空格子点の
間で類似性の強い方向に予め決められた関連が存在しな
い空格子点）では、類似性の強い方向が誤って判定され
る可能性が高く、適正な補間量が算出できずに偽色が発
生するおそれがある。
ている状態の例を示す図であり、図５（２）の空格子点
上に類似性の強い方向（「縦」や「横」）を記載したこ
とに相当するが、何も記載されていない空格子点につい
ては、縦類似以外であることを示す。このように類似性
が孤立する空格子点（互いに近接する複数の空格子点の
間で類似性の強い方向に予め決められた関連が存在しな
い空格子点）では、類似性の強い方向が誤って判定され
る可能性が高く、適正な補間量が算出できずに偽色が発
生するおそれがある。
【００１０】また、上述した米国特許明細書に記載され
た技術では、類似性の強い方向が判定できない空格子点
は、中間類似（双方向の類似性が酷似している）とみな
され、その空格子点の補間量は、隣接する４つの空格子
点の色情報の平均値とされる。しかし、中間類似とみな
させた空格子点には、本来、縦類似（または横類似）と
判定されるべき空格子点が誤って含まれてしまう可能性
がある。例えば、縦類似（または横類似）を示す領域内
に中間類似の空格子点が存在する場合、その空格子点
は、縦類似（または横類似）の可能性が高いが、その空
格子点の補間量は、隣接する４つの空格子点の色情報の
平均値とされるため、偽色が発生するおそれがある。
た技術では、類似性の強い方向が判定できない空格子点
は、中間類似（双方向の類似性が酷似している）とみな
され、その空格子点の補間量は、隣接する４つの空格子
点の色情報の平均値とされる。しかし、中間類似とみな
させた空格子点には、本来、縦類似（または横類似）と
判定されるべき空格子点が誤って含まれてしまう可能性
がある。例えば、縦類似（または横類似）を示す領域内
に中間類似の空格子点が存在する場合、その空格子点
は、縦類似（または横類似）の可能性が高いが、その空
格子点の補間量は、隣接する４つの空格子点の色情報の
平均値とされるため、偽色が発生するおそれがある。
【００１１】そこで、請求項１ないし請求項６に記載の
発明は、類似性の強い方向を判定する精度を高めて、偽
色の発生を抑制することができる補間処理装置を提供す
ることを目的とする。また、請求項７および請求項８に
記載の発明は、類似性の強い方向を判定する精度を高め
て、偽色の発生を抑制することができる補間処理をコン
ピュータに実行させることができる補間処理プログラム
を記録した記録媒体を提供することを目的とする。
発明は、類似性の強い方向を判定する精度を高めて、偽
色の発生を抑制することができる補間処理装置を提供す
ることを目的とする。また、請求項７および請求項８に
記載の発明は、類似性の強い方向を判定する精度を高め
て、偽色の発生を抑制することができる補間処理をコン
ピュータに実行させることができる補間処理プログラム
を記録した記録媒体を提供することを目的とする。
【００１２】
【課題を解決するための手段】以下、実施形態の図面に
対応付けて、課題を解決するための手段を説明する。請
求項１に記載の補間処理装置は、空格子点における第１
方向の類似度および第２方向の類似度を算出し、該第１
方向の類似度と該第２方向の類似度とを比較することに
よって類似性が強い方向を判定する類似性判定手段（図
２Ｓ１〜Ｓ３の処理を行っている状態の図１の補間処理
部２０に対応する）と、類似性判定手段による類似性の
強い方向の判定の結果に基づき、互いに近接する複数の
空格子点の間で類似性の強い方向に予め決められた関連
が存在しない空格子点を検出し、該空格子点について、
該類似性判定手段とは異なる方法で第１方向の類似度お
よび第２方向の類似度を算出し、該第１方向の類似度と
該第２方向の類似度とを比較することによって類似性が
強い方向を判定し直す類似性修正判定手段（図２Ｓ４の
処理と、Ｓ４によって類似判定値ＴＹを一旦０にした空
格子点に対するＳ５の処理と、Ｓ６の処理とを行ってい
る状態の図１の補間処理部２０に対応する）と、類似性
修正判定手段による類似性の強い方向の判定の結果に応
じて、補間量を算出する際に参照すべき格子点を決定
し、該格子点の色情報を用いて補間量を算出する補間量
算出手段（図２Ｓ７の処理を行っている状態の図１の補
間処理部２０に対応する）とを備えたことを特徴とす
る。
対応付けて、課題を解決するための手段を説明する。請
求項１に記載の補間処理装置は、空格子点における第１
方向の類似度および第２方向の類似度を算出し、該第１
方向の類似度と該第２方向の類似度とを比較することに
よって類似性が強い方向を判定する類似性判定手段（図
２Ｓ１〜Ｓ３の処理を行っている状態の図１の補間処理
部２０に対応する）と、類似性判定手段による類似性の
強い方向の判定の結果に基づき、互いに近接する複数の
空格子点の間で類似性の強い方向に予め決められた関連
が存在しない空格子点を検出し、該空格子点について、
該類似性判定手段とは異なる方法で第１方向の類似度お
よび第２方向の類似度を算出し、該第１方向の類似度と
該第２方向の類似度とを比較することによって類似性が
強い方向を判定し直す類似性修正判定手段（図２Ｓ４の
処理と、Ｓ４によって類似判定値ＴＹを一旦０にした空
格子点に対するＳ５の処理と、Ｓ６の処理とを行ってい
る状態の図１の補間処理部２０に対応する）と、類似性
修正判定手段による類似性の強い方向の判定の結果に応
じて、補間量を算出する際に参照すべき格子点を決定
し、該格子点の色情報を用いて補間量を算出する補間量
算出手段（図２Ｓ７の処理を行っている状態の図１の補
間処理部２０に対応する）とを備えたことを特徴とす
る。
【００１３】請求項２に記載の補間処理装置は、空格子
点における第１方向の類似度および第２方向の類似度を
算出し、該第１方向の類似度と該第２方向の類似度とを
比較することによって類似性が強い方向を判定する類似
性判定手段（図２Ｓ１〜Ｓ３の処理を行っている状態の
図１の補間処理部２０に対応する）と、類似性判定手段
では類似性の強い方向が判定できない空格子点につい
て、該類似性判定手段とは異なる方法で第１方向の類似
度および第２方向の類似度を算出し、該第１方向の類似
度と該第２方向の類似度とを比較することによって類似
性が強い方向を判定し直す類似性再度判定手段（図２Ｓ
３によって類似判定値ＴＹに０が設定された空格子点に
対してＳ５の処理を行っている状態の図１の補間処理部
２０に対応する）と、類似性再度判定手段による類似性
の強い方向の判定の結果に応じて、補間量を算出する際
に参照すべき格子点を決定し、該格子点の色情報を用い
て補間量を算出する補間量算出手段（図２Ｓ７の処理を
行っている状態の図１の補間処理部２０に対応する）と
を備えたことを特徴とする。
点における第１方向の類似度および第２方向の類似度を
算出し、該第１方向の類似度と該第２方向の類似度とを
比較することによって類似性が強い方向を判定する類似
性判定手段（図２Ｓ１〜Ｓ３の処理を行っている状態の
図１の補間処理部２０に対応する）と、類似性判定手段
では類似性の強い方向が判定できない空格子点につい
て、該類似性判定手段とは異なる方法で第１方向の類似
度および第２方向の類似度を算出し、該第１方向の類似
度と該第２方向の類似度とを比較することによって類似
性が強い方向を判定し直す類似性再度判定手段（図２Ｓ
３によって類似判定値ＴＹに０が設定された空格子点に
対してＳ５の処理を行っている状態の図１の補間処理部
２０に対応する）と、類似性再度判定手段による類似性
の強い方向の判定の結果に応じて、補間量を算出する際
に参照すべき格子点を決定し、該格子点の色情報を用い
て補間量を算出する補間量算出手段（図２Ｓ７の処理を
行っている状態の図１の補間処理部２０に対応する）と
を備えたことを特徴とする。
【００１４】請求項３に記載の補間処理装置は、請求項
１に記載の補間処理装置において、類似性修正判定手段
は、類似性判定手段による判定の結果として類似性の強
い方向が同一となる空格子点が所定個数以上連続しない
場合、該空格子点について、類似性の強い方向を判定し
直すことを特徴とする。すなわち、請求項３に記載の類
似性修正判定手段の特徴は、第１の実施形態において、
図２Ｓ４として平坦化処理２や平坦化処理３を行った後
に、Ｓ５の処理を行うことに対応する。
１に記載の補間処理装置において、類似性修正判定手段
は、類似性判定手段による判定の結果として類似性の強
い方向が同一となる空格子点が所定個数以上連続しない
場合、該空格子点について、類似性の強い方向を判定し
直すことを特徴とする。すなわち、請求項３に記載の類
似性修正判定手段の特徴は、第１の実施形態において、
図２Ｓ４として平坦化処理２や平坦化処理３を行った後
に、Ｓ５の処理を行うことに対応する。
【００１５】請求項４に記載の補間処理装置は、請求項
１に記載の補間処理装置において、類似性修正判定手段
は、類似性判定手段による判定の結果として類似性の強
い方向が同一となる空格子点が所定の方向に連続しない
場合、該空格子点について、類似性の強い方向を判定し
直すことを特徴とする。すなわち、請求項４に記載の類
似性修正判定手段の特徴は、第１の実施形態において、
図２Ｓ４として平坦化処理１を行った後に、Ｓ５の処理
を行うことに対応する。
１に記載の補間処理装置において、類似性修正判定手段
は、類似性判定手段による判定の結果として類似性の強
い方向が同一となる空格子点が所定の方向に連続しない
場合、該空格子点について、類似性の強い方向を判定し
直すことを特徴とする。すなわち、請求項４に記載の類
似性修正判定手段の特徴は、第１の実施形態において、
図２Ｓ４として平坦化処理１を行った後に、Ｓ５の処理
を行うことに対応する。
【００１６】請求項５に記載の補間処理装置は、請求項
１、請求項３、請求項４の何れか一項に記載の補間処理
装置において、第１方向の類似度および第２方向の類似
度は、異なる色の色情報を比較することによって得られ
る異色系成分と、同じ色の色情報を比較することによっ
て得られる同色系成分との少なくとも一方で構成され、
類似性判定手段は、異色系成分の比率を高くして第１方
向の類似度および第２方向の類似度を算出し、類似性修
正判定手段は、同色系成分の比率を高くして第１方向の
類似度および第２方向の類似度を算出することを特徴と
する。
１、請求項３、請求項４の何れか一項に記載の補間処理
装置において、第１方向の類似度および第２方向の類似
度は、異なる色の色情報を比較することによって得られ
る異色系成分と、同じ色の色情報を比較することによっ
て得られる同色系成分との少なくとも一方で構成され、
類似性判定手段は、異色系成分の比率を高くして第１方
向の類似度および第２方向の類似度を算出し、類似性修
正判定手段は、同色系成分の比率を高くして第１方向の
類似度および第２方向の類似度を算出することを特徴と
する。
【００１７】請求項６に記載の補間処理装置は、請求項
２に記載の補間処理装置において、第１方向の類似度お
よび第２方向の類似度は、異なる色の色情報を比較する
ことによって得られる異色系成分と、同じ色の色情報を
比較することによって得られる同色系成分との少なくと
も一方で構成され、類似性判定手段は、異色系成分の比
率を高くして第１方向の類似度および第２方向の類似度
を算出し、類似性再度判定手段は、同色系成分の比率を
高くして第１方向の類似度および第２方向の類似度を算
出することを特徴とする。
２に記載の補間処理装置において、第１方向の類似度お
よび第２方向の類似度は、異なる色の色情報を比較する
ことによって得られる異色系成分と、同じ色の色情報を
比較することによって得られる同色系成分との少なくと
も一方で構成され、類似性判定手段は、異色系成分の比
率を高くして第１方向の類似度および第２方向の類似度
を算出し、類似性再度判定手段は、同色系成分の比率を
高くして第１方向の類似度および第２方向の類似度を算
出することを特徴とする。
【００１８】すなわち、請求項５および請求項６に記載
の類似性判定手段の特徴は、第１の実施形態において、
図２Ｓ２として異色系成分と同色系成分とから成る縦方
向類似度ＴＣｔおよび横方向類似度ＴＣｙを算出するこ
とに対応する。また、請求項５および請求項６に記載の
類似性修正判定手段の特徴は、第１の実施形態におい
て、図２Ｓ５として同色系成分を各方向の類似度として
用いることに対応する。
の類似性判定手段の特徴は、第１の実施形態において、
図２Ｓ２として異色系成分と同色系成分とから成る縦方
向類似度ＴＣｔおよび横方向類似度ＴＣｙを算出するこ
とに対応する。また、請求項５および請求項６に記載の
類似性修正判定手段の特徴は、第１の実施形態におい
て、図２Ｓ５として同色系成分を各方向の類似度として
用いることに対応する。
【００１９】請求項７に記載の記録媒体は、コンピュー
タを請求項１、請求項３ないし請求項５の何れか１項に
記載の類似性判定手段、類似性修正判定手段、補間量算
出手段として機能させるための補間処理プログラムを記
録したことを特徴とする。請求項８に記載の記録媒体
は、コンピュータを請求項２または請求項６に記載の類
似性判定手段、類似性再度判定手段、補間量算出手段と
して機能させるための補間処理プログラムを記録したこ
とを特徴とする。
タを請求項１、請求項３ないし請求項５の何れか１項に
記載の類似性判定手段、類似性修正判定手段、補間量算
出手段として機能させるための補間処理プログラムを記
録したことを特徴とする。請求項８に記載の記録媒体
は、コンピュータを請求項２または請求項６に記載の類
似性判定手段、類似性再度判定手段、補間量算出手段と
して機能させるための補間処理プログラムを記録したこ
とを特徴とする。
【００２０】
【発明の実施の形態】以下、図面に基づいて、本発明の
実施形態について詳細を説明する。図１は、第１の実施
形態に対応する電子カメラの機能ブロック図である。な
お、第１の実施形態に対応する電子カメラは、請求項１
ないし請求項６に記載の補間処理装置が行う補間処理の
機能を備えた電子カメラに相当する。
実施形態について詳細を説明する。図１は、第１の実施
形態に対応する電子カメラの機能ブロック図である。な
お、第１の実施形態に対応する電子カメラは、請求項１
ないし請求項６に記載の補間処理装置が行う補間処理の
機能を備えた電子カメラに相当する。
【００２１】図１において、電子カメラ１０は、制御部
１１、撮影光学系１２、ＯＬＰＦ (光学ローパスフィル
タ：Optical Low Pass Filter)１３、撮像素子１４、Ａ
／Ｄ変換部１５、画像バッファメモリ１６、階調変換部
１７、画像処理部１８および記録部１９を有する。ま
た、画像処理部１８は、補間処理部（補間処理専用の１
チップ・マイクロプロセッサ）２０を有する。
１１、撮影光学系１２、ＯＬＰＦ (光学ローパスフィル
タ：Optical Low Pass Filter)１３、撮像素子１４、Ａ
／Ｄ変換部１５、画像バッファメモリ１６、階調変換部
１７、画像処理部１８および記録部１９を有する。ま
た、画像処理部１８は、補間処理部（補間処理専用の１
チップ・マイクロプロセッサ）２０を有する。
【００２２】なお、図１では、説明を簡略化するため、
画像処理部１８内に補間処理部２０のみを記載している
が、画像処理部１８内には、他の画像処理を行う機能ブ
ロックが設けられても良い。図１において、制御部１１
は、撮像素子１４、Ａ／Ｄ変換部１５、画像バッファメ
モリ１６、階調変換部１７、画像処理部１８および記録
部１９に接続される。
画像処理部１８内に補間処理部２０のみを記載している
が、画像処理部１８内には、他の画像処理を行う機能ブ
ロックが設けられても良い。図１において、制御部１１
は、撮像素子１４、Ａ／Ｄ変換部１５、画像バッファメ
モリ１６、階調変換部１７、画像処理部１８および記録
部１９に接続される。
【００２３】撮影光学系１２で取得された光学像は、Ｏ
ＬＰＦ１３を介して撮像素子１４に与えられる。撮像素
子１４の出力は、Ａ／Ｄ変換部１５によって量子化され
て、カラー画像の画像データとして画像バッファメモリ
１６に格納される。画像バッファメモリ１６に格納され
た画像データは、画像処理部１８に供給されて補間処理
部２０によって補間処理が施され、記録部１９を介して
記録される。
ＬＰＦ１３を介して撮像素子１４に与えられる。撮像素
子１４の出力は、Ａ／Ｄ変換部１５によって量子化され
て、カラー画像の画像データとして画像バッファメモリ
１６に格納される。画像バッファメモリ１６に格納され
た画像データは、画像処理部１８に供給されて補間処理
部２０によって補間処理が施され、記録部１９を介して
記録される。
【００２４】なお、本実施形態では、ＯＬＰＦ１３を設
けず、撮影光学系１２で取得された光学像が撮像素子１
４に直接与えられても良い。また、本実施形態では、補
間処理の対象となる画像データは、画像処理部１８に供
給される前に、階調変換部１７によって階調変換（ｌｏ
ｇ化やγ変換等）が行われても良い。図２は、第１の実
施形態における補間処理部２０の動作フローチャートで
ある。
けず、撮影光学系１２で取得された光学像が撮像素子１
４に直接与えられても良い。また、本実施形態では、補
間処理の対象となる画像データは、画像処理部１８に供
給される前に、階調変換部１７によって階調変換（ｌｏ
ｇ化やγ変換等）が行われても良い。図２は、第１の実
施形態における補間処理部２０の動作フローチャートで
ある。
【００２５】図３は、補間処理の対象となる画像データ
の色情報の配列を示す図である。図３では、色情報が配
置される位置を「右方向を正とする横軸Ｘ」と「下方向
を正とする縦軸Ｙ」とで構成される座標系で表し、緑色
の色情報をG[X,Y]で表し、赤色または青色の色情報をRB
[X,Y]で表す。すなわち、赤色の色情報をR[X,Y]とし、
青色の色情報をB[X,Y]とすると、任意の座標[i,j]に位
置する画素が赤色の色情報を有する場合、RB[i,j]は、R
[i,j]に相当し、任意の座標[i,j]に位置する画素が青色
の色情報を有する場合、RB[i,j]は、B[i,j]に相当す
る。
の色情報の配列を示す図である。図３では、色情報が配
置される位置を「右方向を正とする横軸Ｘ」と「下方向
を正とする縦軸Ｙ」とで構成される座標系で表し、緑色
の色情報をG[X,Y]で表し、赤色または青色の色情報をRB
[X,Y]で表す。すなわち、赤色の色情報をR[X,Y]とし、
青色の色情報をB[X,Y]とすると、任意の座標[i,j]に位
置する画素が赤色の色情報を有する場合、RB[i,j]は、R
[i,j]に相当し、任意の座標[i,j]に位置する画素が青色
の色情報を有する場合、RB[i,j]は、B[i,j]に相当す
る。
【００２６】また、図３において、任意の座標[i,j]に
ついて「i+j=偶数」が成り立つ場合、その座標に緑色を
出力する画素が位置し、「i+j=奇数」が成り立つ場合、
その座標に赤色または青色を出力する画素が位置するこ
とになる。また、「i+j=奇数かつi=偶数」が成り立つ座
標に赤色を出力する画素が位置すると仮定すると、「i+
j=奇数かつi=奇数」が成り立つ座標には、青色を出力す
る画素が位置することになる。
ついて「i+j=偶数」が成り立つ場合、その座標に緑色を
出力する画素が位置し、「i+j=奇数」が成り立つ場合、
その座標に赤色または青色を出力する画素が位置するこ
とになる。また、「i+j=奇数かつi=偶数」が成り立つ座
標に赤色を出力する画素が位置すると仮定すると、「i+
j=奇数かつi=奇数」が成り立つ座標には、青色を出力す
る画素が位置することになる。
【００２７】以下、第１の実施形態の動作を説明する
が、第１の実施形態では、図２を参照して補間処理部２
０の動作（特に、緑色の補間処理）を中心に説明する。
なお、図２において、Ｓ１〜Ｓ７の処理が緑色の補間処
理に相当する。まず、補間処理部２０は、全ての空格子
点について、緑色の補間量の縦方向予測値Ｇtおよび横
方向予測値Ｇyを算出する（Ｓ１）。
が、第１の実施形態では、図２を参照して補間処理部２
０の動作（特に、緑色の補間処理）を中心に説明する。
なお、図２において、Ｓ１〜Ｓ７の処理が緑色の補間処
理に相当する。まず、補間処理部２０は、全ての空格子
点について、緑色の補間量の縦方向予測値Ｇtおよび横
方向予測値Ｇyを算出する（Ｓ１）。
【００２８】例えば、補間処理部２０は、図３におい
て、「i+j=奇数」が成り立つ任意の空格子点の縦方向予
測値Ｇt[i,j]および横方向予測値Ｇy[i,j]を、以下に示
す予測値算出方法１、予測値算出方法２、予測値算出方
法３の何れかによって算出する。 <<予測値算出方法１>>補間処理部２０は、縦方向予測値
Ｇt[i,j]および横方向予測値Ｇy[i,j]を下記の式１およ
び式２によって算出する。
て、「i+j=奇数」が成り立つ任意の空格子点の縦方向予
測値Ｇt[i,j]および横方向予測値Ｇy[i,j]を、以下に示
す予測値算出方法１、予測値算出方法２、予測値算出方
法３の何れかによって算出する。 <<予測値算出方法１>>補間処理部２０は、縦方向予測値
Ｇt[i,j]および横方向予測値Ｇy[i,j]を下記の式１およ
び式２によって算出する。
【００２９】 Ｇt[i,j]=(Ｇ[i,j-1]+Ｇ[i,j+1])/2 +(2・ＲＢ[i,j]-ＲＢ[i,j-2]-ＲＢ[i,j+2])/4 ・・・式１ Ｇy[i,j]=(Ｇ[i-1,j]+Ｇ[i+1,j])/2 +(2・ＲＢ[i,j]-ＲＢ[i-2,j]-ＲＢ[i+2,j])/4 ・・・式２ <<予測値算出方法２>>補間処理部２０は、縦方向予測値
Ｇt[i,j]および横方向予測値Ｇy[i,j]を下記の式３およ
び式４によって算出する。
Ｇt[i,j]および横方向予測値Ｇy[i,j]を下記の式３およ
び式４によって算出する。
【００３０】 Ｇt[i,j]=(Ｇ[i,j-1]・t1+Ｇ[i,j+1]・t2)/(t1+t2) ・・・式３ Ｇy[i,j]=(Ｇ[i-1,j]・y1+Ｇ[i+1,j]・y2)/(y1+y2) ・・・式４ ただし、式３および式４において、t1、t2、y1、y2は、 t1=|ＲＢ[i,j]-ＲＢ[i,j+2]|+1 t2=|ＲＢ[i,j]-ＲＢ[i,j-2]|+1 y1=|ＲＢ[i,j]-ＲＢ[i+2,j]|+1 y2=|ＲＢ[i,j]-ＲＢ[i-2,j]|+1 を満足する値である。ところで、t1、t2、y1、y2におけ
る「+1」の項は、式３や式４における除数(「t1+t2」や
「y1+y2」)が０になることを防止するために付加した項
である。なお、ここでは、色情報が０以上２５５以下の
範囲で変化することを想定しているため、「+1」を付加
しているが、このような項の値は、「+1」に限定される
ものではない。
る「+1」の項は、式３や式４における除数(「t1+t2」や
「y1+y2」)が０になることを防止するために付加した項
である。なお、ここでは、色情報が０以上２５５以下の
範囲で変化することを想定しているため、「+1」を付加
しているが、このような項の値は、「+1」に限定される
ものではない。
【００３１】<<予測値算出方法３>>補間処理部２０は、
縦方向予測値Ｇt[i,j]については、以下に示す条件１が
成り立つ場合、上述した式１によって算出し、条件１が
成り立たない場合、上述した式３によって算出する。ま
た、補間処理部２０は、横方向予測値Ｇy[i,j]について
は、以下に示す条件２が成り立つ場合、上述した式２に
よって算出し、条件２が成り立たない場合、上述した式
４によって算出する。
縦方向予測値Ｇt[i,j]については、以下に示す条件１が
成り立つ場合、上述した式１によって算出し、条件１が
成り立たない場合、上述した式３によって算出する。ま
た、補間処理部２０は、横方向予測値Ｇy[i,j]について
は、以下に示す条件２が成り立つ場合、上述した式２に
よって算出し、条件２が成り立たない場合、上述した式
４によって算出する。
【００３２】条件１： [((ＲＢ[i,j]-ＲＢ[i,j-2])>th2)∩((ＲＢ[i,j]-ＲＢ
[i,j+2])>th2)]∪[(ＲＢ[i,j]-ＲＢ[i,j-2])<-th2)∩
(ＲＢ[i,j]-ＲＢ[i,j+2]<-th2)] 条件２： [((ＲＢ[i,j]-ＲＢ[i-2,j])>th2)∩((ＲＢ[i,j]-ＲＢ[i
+2,j])>th2)]∪[(ＲＢ[i,j]-ＲＢ[i-2,j])<-th2)∩((Ｒ
Ｂ[i,j]-ＲＢ[i+2,j])<-th2)]] ただし、条件１および条件２において、th2は閾値であ
り、∩はandを示し、∪はorを示す。
[i,j+2])>th2)]∪[(ＲＢ[i,j]-ＲＢ[i,j-2])<-th2)∩
(ＲＢ[i,j]-ＲＢ[i,j+2]<-th2)] 条件２： [((ＲＢ[i,j]-ＲＢ[i-2,j])>th2)∩((ＲＢ[i,j]-ＲＢ[i
+2,j])>th2)]∪[(ＲＢ[i,j]-ＲＢ[i-2,j])<-th2)∩((Ｒ
Ｂ[i,j]-ＲＢ[i+2,j])<-th2)]] ただし、条件１および条件２において、th2は閾値であ
り、∩はandを示し、∪はorを示す。
【００３３】次に、補間処理部２０は、全ての空格子点
について、異色系成分と同色系成分とから成る縦方向類
似度ＴＣtおよび横方向類似度ＴＣyを算出する（Ｓ
２）。ところで、本実施形態では、縦方向類似度ＴＣt
および横方向類似度ＴＣyは、値が小さい程、類似性が
強いことを意味する。なお、本実施形態では、異色系成
分として、近接する複数の空格子点の異色系類似度（後
述する縦方向の異色系類似度Ｃt1および横方向の異色系
類似度Ｃy1に相当する）を平均化した値（後述する縦方
向類似度の異色系成分ＴＣt1および横方向類似度の異色
系成分ＴＣy1に相当する）を用いる。また、同色系成分
として、近接する複数の空格子点の同色系類似度（後述
する縦方向の同色系類似度Ｃt2および横方向の異色系類
似度Ｃy2に相当する）を平均化した値（後述する縦方向
類似度の異色系成分ＴＣt1および横方向類似度の異色系
成分ＴＣy1に相当する）を用いることにする。
について、異色系成分と同色系成分とから成る縦方向類
似度ＴＣtおよび横方向類似度ＴＣyを算出する（Ｓ
２）。ところで、本実施形態では、縦方向類似度ＴＣt
および横方向類似度ＴＣyは、値が小さい程、類似性が
強いことを意味する。なお、本実施形態では、異色系成
分として、近接する複数の空格子点の異色系類似度（後
述する縦方向の異色系類似度Ｃt1および横方向の異色系
類似度Ｃy1に相当する）を平均化した値（後述する縦方
向類似度の異色系成分ＴＣt1および横方向類似度の異色
系成分ＴＣy1に相当する）を用いる。また、同色系成分
として、近接する複数の空格子点の同色系類似度（後述
する縦方向の同色系類似度Ｃt2および横方向の異色系類
似度Ｃy2に相当する）を平均化した値（後述する縦方向
類似度の異色系成分ＴＣt1および横方向類似度の異色系
成分ＴＣy1に相当する）を用いることにする。
【００３４】例えば、補間処理部２０は、任意の空格子
点[i,j]の縦方向の異色系類似度Ｃt1[i,j]、横方向の異
色系類似度Ｃy1[i,j]、縦方向の同色系類似度Ｃt2[i,
j]、横方向の同色系類似度Ｃy2[i,j]を、以下に示す式
１０〜式１３によって算出する。 Ｃt1[i,j]=a1・|ＲＢ[i,j]-Ｇt[i,j]|+a2・(|ＲＢ[i,j]-Ｇ[i,j-1]| +|ＲＢ[i,j]-Ｇ[i,j+1]|)/2 ・・・式１０ Ｃy1[i,j]=a1・|ＲＢ[i,j]-Ｇy[i,j]|+a2・(|ＲＢ[i,j]-Ｇ[i-1,j]| +|ＲＢ[i,j]-Ｇ[i+1,j]|)/2 ・・・式１１ ただし、a1は正の定数であり、a2は０または正の定数で
ある。
点[i,j]の縦方向の異色系類似度Ｃt1[i,j]、横方向の異
色系類似度Ｃy1[i,j]、縦方向の同色系類似度Ｃt2[i,
j]、横方向の同色系類似度Ｃy2[i,j]を、以下に示す式
１０〜式１３によって算出する。 Ｃt1[i,j]=a1・|ＲＢ[i,j]-Ｇt[i,j]|+a2・(|ＲＢ[i,j]-Ｇ[i,j-1]| +|ＲＢ[i,j]-Ｇ[i,j+1]|)/2 ・・・式１０ Ｃy1[i,j]=a1・|ＲＢ[i,j]-Ｇy[i,j]|+a2・(|ＲＢ[i,j]-Ｇ[i-1,j]| +|ＲＢ[i,j]-Ｇ[i+1,j]|)/2 ・・・式１１ ただし、a1は正の定数であり、a2は０または正の定数で
ある。
【００３５】 Ｃt2[i,j]=|Ｇ[i,j-1]-Ｇ[i,j+1]| ・・・式１２ Ｃy2[i,j]=|Ｇ[i-1,j]-Ｇ[i+1,j]| ・・・式１３ なお、式１２や式１３には、同色系類似度を表す他の項
を追加しても良い。例えば、式１２に追加する項とし
て、 +a3・(|ＲＢ[i-1,j-1]-ＲＢ[i-1,j+1]|+|ＲＢ[i+1,j-1]-
ＲＢ[i+1,j+1]|)/2 または +a3・(|ＲＢ[i,j-2]-ＲＢ[i,j]|+|ＲＢ[i,j+2]-ＲＢ[i,
j]|)/2 または両者の和などが考えられ、式１３に追加する項と
して、 +a3・(|ＲＢ[i-1,j-1]-ＲＢ[i+1,j-1]|+|ＲＢ[i-1,j+1]-
ＲＢ[i+1,j+1]|)/2 または +a3・(|ＲＢ[i-2,j]-ＲＢ[i,j]|+|ＲＢ[i+2,j]-ＲＢ[i,
j]|)/2 または両者の和などが考えられる。ただし、a3は、０ま
たは正の定数である。
を追加しても良い。例えば、式１２に追加する項とし
て、 +a3・(|ＲＢ[i-1,j-1]-ＲＢ[i-1,j+1]|+|ＲＢ[i+1,j-1]-
ＲＢ[i+1,j+1]|)/2 または +a3・(|ＲＢ[i,j-2]-ＲＢ[i,j]|+|ＲＢ[i,j+2]-ＲＢ[i,
j]|)/2 または両者の和などが考えられ、式１３に追加する項と
して、 +a3・(|ＲＢ[i-1,j-1]-ＲＢ[i+1,j-1]|+|ＲＢ[i-1,j+1]-
ＲＢ[i+1,j+1]|)/2 または +a3・(|ＲＢ[i-2,j]-ＲＢ[i,j]|+|ＲＢ[i+2,j]-ＲＢ[i,
j]|)/2 または両者の和などが考えられる。ただし、a3は、０ま
たは正の定数である。
【００３６】また、補間処理部２０は、任意の空格子点
[i,j]の縦方向類似度の異色系成分ＴＣt1[i,j]、横方向
類似度の異色系成分ＴＣy1[i,j]、縦方向類似度の同色
系成分ＴＣt2[i,j]、横方向類似度の同色系成分ＴＣy2
[i,j]を、以下に示す式１４〜式１７によって算出し、
任意の空格子点[i,j]の縦方向類似度ＴＣt[i,j]および
横方向類似度ＴＣy[i,j]を、以下に示す式１８および式
１９によって算出する。
[i,j]の縦方向類似度の異色系成分ＴＣt1[i,j]、横方向
類似度の異色系成分ＴＣy1[i,j]、縦方向類似度の同色
系成分ＴＣt2[i,j]、横方向類似度の同色系成分ＴＣy2
[i,j]を、以下に示す式１４〜式１７によって算出し、
任意の空格子点[i,j]の縦方向類似度ＴＣt[i,j]および
横方向類似度ＴＣy[i,j]を、以下に示す式１８および式
１９によって算出する。
【００３７】 ＴＣt1[i,j]=Ｃt1[i,j]+(Ｃt1[i-1,j-1]+Ｃt1[i-1,j+1] +Ｃt1[i+1,j-1]+Ｃt1[i+1,j+1])/4 ・・・式１４ ＴＣy1[i,j]=Ｃy1[i,j]+(Ｃy1[i-1,j-1]+Ｃy1[i-1,j+1] +Ｃy1[i+1,j-1]+Ｃy1[i+1,j+1])/4 ・・・式１５ ＴＣt2[i,j]=Ｃt2[i,j]+(Ｃt2[i-1,j-1]+Ｃt2[i-1,j+1] +Ｃt2[i+1,j-1]+Ｃt2[i+1,j+1])/4 ・・・式１６ ＴＣy2[i,j]=Ｃy2[i,j]+(Ｃy2[i-1,j-1]+Ｃy2[i-1,j+1] +Ｃy2[i+1,j-1]+Ｃy2[i+1,j+1])/4 ・・・式１７ ＴＣt[i,j]=ＴＣt1[i,j]+ＴＣt2[i,j] ・・・式１８ ＴＣy[i,j]=ＴＣy1[i,j]+ＴＣy2[i,j] ・・・式１９ なお、式１６や式１７では、任意の空格子点[i,j]を含
めて５つの空格子点の同色系類似度を用いて類似度の同
色系成分が算出されているが、類似度の同色系分は、例
えば、任意の空格子点[i,j]の他に近接する８つの空格
子点を加え、９つの空格子点の各々の方向の同色系類似
度を平均して算出されても良い。
めて５つの空格子点の同色系類似度を用いて類似度の同
色系成分が算出されているが、類似度の同色系分は、例
えば、任意の空格子点[i,j]の他に近接する８つの空格
子点を加え、９つの空格子点の各々の方向の同色系類似
度を平均して算出されても良い。
【００３８】次に、補間処理部２０は、縦方向類似度Ｔ
Ｃtおよび横方向類似度ＴＣyを用い、全ての空格子点に
ついて、類似性が強い方向の判定を行い、その判定の結
果を示す類似判定値ＴＹを設定する（Ｓ３）。
Ｃtおよび横方向類似度ＴＣyを用い、全ての空格子点に
ついて、類似性が強い方向の判定を行い、その判定の結
果を示す類似判定値ＴＹを設定する（Ｓ３）。
【００３９】なお、本実施形態では、処理対象となる空
格子点が、横類似の場合（横方向の類似性が強い場
合）、類似判定値ＴＹに−１を設定し、縦類似の場合
（縦方向の類似性が強い場合）、類似判定値ＴＹに１を
設定し、中間類似の場合（双方向の類似性が酷似してい
る場合）、類似判定値ＴＹに０を設定する。例えば、任
意の空格子点[i,j]の類似判定値ＴＹ[i,j]を設定する
際、補間処理部２０は、以下に示す条件１０が成り立つ
場合、類似判定値ＴＹ[i,j]に−１（横類似）を設定
し、以下に示す条件１１が成り立つ場合、類似判定値Ｔ
Ｙ[i,j]に１（縦類似）を設定する。また、補間処理部
２０は、条件１０と条件１１とが共に成り立たない場
合、類似判定値ＴＹ[i,j]に０（中間類似）を設定す
る。
格子点が、横類似の場合（横方向の類似性が強い場
合）、類似判定値ＴＹに−１を設定し、縦類似の場合
（縦方向の類似性が強い場合）、類似判定値ＴＹに１を
設定し、中間類似の場合（双方向の類似性が酷似してい
る場合）、類似判定値ＴＹに０を設定する。例えば、任
意の空格子点[i,j]の類似判定値ＴＹ[i,j]を設定する
際、補間処理部２０は、以下に示す条件１０が成り立つ
場合、類似判定値ＴＹ[i,j]に−１（横類似）を設定
し、以下に示す条件１１が成り立つ場合、類似判定値Ｔ
Ｙ[i,j]に１（縦類似）を設定する。また、補間処理部
２０は、条件１０と条件１１とが共に成り立たない場
合、類似判定値ＴＹ[i,j]に０（中間類似）を設定す
る。
【００４０】条件１０：(ＴＣt[i,j]-ＴＣy[i,j])>th0 条件１１：(ＴＣy[i,j]-ＴＣt[i,j])>th0 ただし、th0は、閾値である。次に、補間処理部２０
は、類似判定値ＴＹに１または−１が設定されている空
格子点のうち、類似判定値ＴＹを修正する必要がある空
格子点を検出し、その空格子点の類似判定値ＴＹを一旦
０に変更する（Ｓ４）。
は、類似判定値ＴＹに１または−１が設定されている空
格子点のうち、類似判定値ＴＹを修正する必要がある空
格子点を検出し、その空格子点の類似判定値ＴＹを一旦
０に変更する（Ｓ４）。
【００４１】なお、本実施形態では、所定の条件を満た
す空格子点を検出し、その空格子点の類似判定値ＴＹを
０に変更する処理を平坦化処理と称する。また、本実施
形態では、平坦化処理として、以下に示す平坦化処理
１、平坦化処理２、平坦化処理３を用いるが、これらの
３つの平坦化処理処理のうち、何れか１つを行っても良
いし、２つ以上の平坦化処理を連続して行っても良い。
す空格子点を検出し、その空格子点の類似判定値ＴＹを
０に変更する処理を平坦化処理と称する。また、本実施
形態では、平坦化処理として、以下に示す平坦化処理
１、平坦化処理２、平坦化処理３を用いるが、これらの
３つの平坦化処理処理のうち、何れか１つを行っても良
いし、２つ以上の平坦化処理を連続して行っても良い。
【００４２】<<平坦化処理１>>補間処理部２０は、類似
判定値ＴＹに１または−１が設定されている空格子点
[i,j]について、以下に示す条件２０や条件２１が成り
立つ場合、その空格子点[i,j]の類似判定値ＴＹ[i,j]を
０に変更する。
判定値ＴＹに１または−１が設定されている空格子点
[i,j]について、以下に示す条件２０や条件２１が成り
立つ場合、その空格子点[i,j]の類似判定値ＴＹ[i,j]を
０に変更する。
【００４３】条件２０： (ＴＹ[i,j-2]≠1)∩(ＴＹ[i,j]=1)∩((ＴＹ[i,j+2]≠1)
∪(ＴＹ[i,j+4]≠1)) 条件２１： (ＴＹ[i-2,j]≠-1)∩(ＴＹ[i,j]=-1) ∩((ＴＹ[i+2,j]≠-1)∪(ＴＹ[i+4,j]≠-1)) すなわち、iやjの値を小さい方から順次変更しつつ平坦
化処理１を繰り返し、直前の処理結果として得られる類
似判定値ＴＹの値を使って次の処理を行うと、縦類似の
空格子点が縦方向に３つ以上連続しない場合（縦類似の
空格子点が縦方向に対して孤立している場合）には、こ
れらの空格子点を中間類似とすることができ、横類似の
空格子点が横方向に３つ以上連続しない場合（横類似の
空格子点が横方向に対して孤立している場合）には、こ
れらの空格子点を中間類似とすることができる。
∪(ＴＹ[i,j+4]≠1)) 条件２１： (ＴＹ[i-2,j]≠-1)∩(ＴＹ[i,j]=-1) ∩((ＴＹ[i+2,j]≠-1)∪(ＴＹ[i+4,j]≠-1)) すなわち、iやjの値を小さい方から順次変更しつつ平坦
化処理１を繰り返し、直前の処理結果として得られる類
似判定値ＴＹの値を使って次の処理を行うと、縦類似の
空格子点が縦方向に３つ以上連続しない場合（縦類似の
空格子点が縦方向に対して孤立している場合）には、こ
れらの空格子点を中間類似とすることができ、横類似の
空格子点が横方向に３つ以上連続しない場合（横類似の
空格子点が横方向に対して孤立している場合）には、こ
れらの空格子点を中間類似とすることができる。
【００４４】<<平坦化処理２>>補間処理部２０は、類似
判定値ＴＹに１または−１が設定されている空格子点
[i,j]について、以下に示す条件２２や条件２３が成り
立つ場合、その空格子点[i,j]の類似判定値ＴＹ[i,j]を
０に変更する。 条件２２： (ＴＹ[i,j]=1)∩(ＴＹ[i-2,j]≠1)∩(ＴＹ[i+2,j]≠1) 条件２３： (ＴＹ[i,j]=-1)∩(ＴＹ[i,j-2]≠-1)∩(ＴＹ[i,j+2]≠-
1) すなわち、iやjの値を小さい方から順次変更しつつ平坦
化処理２を繰り返し、直前の処理結果として得られる類
似判定値ＴＹの値を使って次の処理を行うと、縦類似の
空格子点が横方向に２つ以上連続しない場合（例えば、
縦類似の縦方向の並びが複数存在しない場合）には、こ
れらの空格子点を中間類似とすることができ、横類似の
空格子点が縦方向に２つ以上連続しない場合（例えば、
横類似の横方向の並びが複数存在しない場合）には、こ
れらの空格子点を中間類似とすることができる。
判定値ＴＹに１または−１が設定されている空格子点
[i,j]について、以下に示す条件２２や条件２３が成り
立つ場合、その空格子点[i,j]の類似判定値ＴＹ[i,j]を
０に変更する。 条件２２： (ＴＹ[i,j]=1)∩(ＴＹ[i-2,j]≠1)∩(ＴＹ[i+2,j]≠1) 条件２３： (ＴＹ[i,j]=-1)∩(ＴＹ[i,j-2]≠-1)∩(ＴＹ[i,j+2]≠-
1) すなわち、iやjの値を小さい方から順次変更しつつ平坦
化処理２を繰り返し、直前の処理結果として得られる類
似判定値ＴＹの値を使って次の処理を行うと、縦類似の
空格子点が横方向に２つ以上連続しない場合（例えば、
縦類似の縦方向の並びが複数存在しない場合）には、こ
れらの空格子点を中間類似とすることができ、横類似の
空格子点が縦方向に２つ以上連続しない場合（例えば、
横類似の横方向の並びが複数存在しない場合）には、こ
れらの空格子点を中間類似とすることができる。
【００４５】<<平坦化処理３>>補間処理部２０は、類似
判定値ＴＹに１または−１が設定されている空格子点
[i,j]について、以下に示す条件２４や条件２５が成り
立つ場合、その空格子点[i,j]の類似判定値ＴＹ[i,j]に
０を設定する。 条件２４： (ＴＹ[i,j]=1)∩((ＴＹ[i-1,j-1]≠1)∩(ＴＹ[i-1,j+1]
≠1)∩(ＴＹ[i+1,j-1]≠1)∩(ＴＹ[i+1,j+1]≠1)) 条件２５： (ＴＹ[i,j]=-1)∩((ＴＹ[i-1,j-1]≠-1)∩(ＴＹ[i-1,j+
1]≠-1)∩(ＴＹ[i+1,j-1]≠-1)∩(ＴＹ[i+1,j+1]≠-1)) すなわち、平坦化処理３では、平坦化処理の対象となる
空格子点と、その空格子点の斜め方向に位置する４つの
空格子点とが同一の類似性を示さない場合（類似性が周
辺部分から孤立している場合）、平坦化処理の対象とな
る空格子点を中間類似とすることができる。
判定値ＴＹに１または−１が設定されている空格子点
[i,j]について、以下に示す条件２４や条件２５が成り
立つ場合、その空格子点[i,j]の類似判定値ＴＹ[i,j]に
０を設定する。 条件２４： (ＴＹ[i,j]=1)∩((ＴＹ[i-1,j-1]≠1)∩(ＴＹ[i-1,j+1]
≠1)∩(ＴＹ[i+1,j-1]≠1)∩(ＴＹ[i+1,j+1]≠1)) 条件２５： (ＴＹ[i,j]=-1)∩((ＴＹ[i-1,j-1]≠-1)∩(ＴＹ[i-1,j+
1]≠-1)∩(ＴＹ[i+1,j-1]≠-1)∩(ＴＹ[i+1,j+1]≠-1)) すなわち、平坦化処理３では、平坦化処理の対象となる
空格子点と、その空格子点の斜め方向に位置する４つの
空格子点とが同一の類似性を示さない場合（類似性が周
辺部分から孤立している場合）、平坦化処理の対象とな
る空格子点を中間類似とすることができる。
【００４６】以上説明したように、平坦化処理１、平坦
化処理２、平坦化処理３のうち、何れか１つを行った
り、２つ以上の平坦化処理を連続して行うことによっ
て、図７（Ａ）〜（Ｅ）に示す縦類似の空格子点を中間
類似に変更することができる。そのため、類似判定値Ｔ
Ｙの分布は、多数の１から成る（０を含む）領域（以
下、「縦類似の領域」と称する。）と多数の−１から成
る（０を含む）領域（以下、「横類似の領域」と称す
る。）とに分けられ、これらの領域の隙間を埋めるよう
に０が配されることになる。
化処理２、平坦化処理３のうち、何れか１つを行った
り、２つ以上の平坦化処理を連続して行うことによっ
て、図７（Ａ）〜（Ｅ）に示す縦類似の空格子点を中間
類似に変更することができる。そのため、類似判定値Ｔ
Ｙの分布は、多数の１から成る（０を含む）領域（以
下、「縦類似の領域」と称する。）と多数の−１から成
る（０を含む）領域（以下、「横類似の領域」と称す
る。）とに分けられ、これらの領域の隙間を埋めるよう
に０が配されることになる。
【００４７】次に、補間処理部２０は、類似判定値ＴＹ
に０が設定されている空格子点について、同色系成分を
各方向の類似度として用い、類似性が強い方向を判定し
直し、類似判定値ＴＹを再設定する（Ｓ５）。すなわ
ち、補間処理部２０は、Ｓ４の処理によって類似判定値
ＴＹが０に変更された空格子点（類似判定値ＴＹを修正
する必要がある空格子点）と、Ｓ３の処理によって類似
判定値ＴＹに０が設定された空格子点（類似性の強い方
向が判定できなかった空格子点）とを対象として、類似
性の強い方向を判定し直す。
に０が設定されている空格子点について、同色系成分を
各方向の類似度として用い、類似性が強い方向を判定し
直し、類似判定値ＴＹを再設定する（Ｓ５）。すなわ
ち、補間処理部２０は、Ｓ４の処理によって類似判定値
ＴＹが０に変更された空格子点（類似判定値ＴＹを修正
する必要がある空格子点）と、Ｓ３の処理によって類似
判定値ＴＹに０が設定された空格子点（類似性の強い方
向が判定できなかった空格子点）とを対象として、類似
性の強い方向を判定し直す。
【００４８】例えば、補間処理部２０は、類似判定値Ｔ
Ｙに０が設定されている空格子点[i,j]について、以下
に示す条件３０が成り立つ場合、その空格子点[i,j]の
類似判定値ＴＹ[i,j]に−１を設定する。また、補間処
理部２０は、類似判定値ＴＹに０が設定されている空格
子点[i,j]について、以下に示す条件３１成り立つ場
合、その空格子点[i,j]の類似判定値ＴＹ[i,j]に１を設
定する。
Ｙに０が設定されている空格子点[i,j]について、以下
に示す条件３０が成り立つ場合、その空格子点[i,j]の
類似判定値ＴＹ[i,j]に−１を設定する。また、補間処
理部２０は、類似判定値ＴＹに０が設定されている空格
子点[i,j]について、以下に示す条件３１成り立つ場
合、その空格子点[i,j]の類似判定値ＴＹ[i,j]に１を設
定する。
【００４９】 条件３０：(ＴＣt2[i,j]-ＴＣy2[i,j])>th00 条件３１：(ＴＣy2[i,j]-ＴＣt2[i,j])>th00 ただし、th00は、閾値である。したがって、補間処理部
２０は、縦類似の領域内に存在する０（中間類似）を１
（縦類似）に変更し、横類似の領域内に存在する０（中
間類似）を−１（横類似）に変更することができる。そ
のため、例えば、図７（Ａ）のように縦類似性が周辺部
分から孤立している空格子点は、Ｓ４によって類似判定
値ＴＹが一旦０に変更され、その後、Ｓ５の処理によっ
て類似判定値ＴＹが周辺部分の類似性と同一の値に設定
されるため、類似性の孤立状態が除去されることにな
る。
２０は、縦類似の領域内に存在する０（中間類似）を１
（縦類似）に変更し、横類似の領域内に存在する０（中
間類似）を−１（横類似）に変更することができる。そ
のため、例えば、図７（Ａ）のように縦類似性が周辺部
分から孤立している空格子点は、Ｓ４によって類似判定
値ＴＹが一旦０に変更され、その後、Ｓ５の処理によっ
て類似判定値ＴＹが周辺部分の類似性と同一の値に設定
されるため、類似性の孤立状態が除去されることにな
る。
【００５０】また、補間処理部２０は、縦類似の領域の
近傍に存在する０（中間類似）を１（縦類似）に変更
し、横類似の領域の近傍に存在する０（中間類似）を−
１（横類似）に変更することができる。そのため、中間
類似の空格子点のうち、縦類似（または横類似）の可能
性が高い空格子点については、類似判定値ＴＹを−１
（または１）に変更することができる。
近傍に存在する０（中間類似）を１（縦類似）に変更
し、横類似の領域の近傍に存在する０（中間類似）を−
１（横類似）に変更することができる。そのため、中間
類似の空格子点のうち、縦類似（または横類似）の可能
性が高い空格子点については、類似判定値ＴＹを−１
（または１）に変更することができる。
【００５１】次に、補間処理部２０は、Ｓ５の処理によ
って、新たに発生した類似判定値ＴＹが孤立する空格子
点を検出し、その空格子点の類似判定値ＴＹを０に変更
する（Ｓ６）。なお、ここでは、補間処理部２０は、上
述したＳ４の平坦化処理を行うことによって、類似判定
値ＴＹが孤立する空格子点の類似判定値ＴＹを０に変更
する。
って、新たに発生した類似判定値ＴＹが孤立する空格子
点を検出し、その空格子点の類似判定値ＴＹを０に変更
する（Ｓ６）。なお、ここでは、補間処理部２０は、上
述したＳ４の平坦化処理を行うことによって、類似判定
値ＴＹが孤立する空格子点の類似判定値ＴＹを０に変更
する。
【００５２】次に、補間処理部２０は、縦方向予測値Ｇ
t、横方向予測値Ｇy、類似判定値ＴＹを用いて、緑色の
補間量を算出する（Ｓ７）。例えば、補間処理部２０
は、任意の空格子点[i,j]の補間量Ｇ[i,j]を、以下に示
す補間量算出方法１、補間量算出方法２、補間量算出方
法３の何れかによって算出する。
t、横方向予測値Ｇy、類似判定値ＴＹを用いて、緑色の
補間量を算出する（Ｓ７）。例えば、補間処理部２０
は、任意の空格子点[i,j]の補間量Ｇ[i,j]を、以下に示
す補間量算出方法１、補間量算出方法２、補間量算出方
法３の何れかによって算出する。
【００５３】<<補間量算出方法１>>補間処理部２０は、
類似判定値ＴＹ[i,j]が−１（横類似）である場合、横
方向予測値Ｇy[i,j]を補間量Ｇ[i,j]とし、類似判定値
ＴＹ[i,j]が１（縦類似）である場合、縦方向予測値Ｇt
[i,j]を補間量Ｇ[i,j]とする。また、補間処理部２０
は、類似判定値ＴＹ[i,j]が０（中間類似）である場
合、横方向予測値Ｇy[i,j]と縦方向予測値Ｇt[i,j]との
平均値を補間量Ｇ[i,j]とする。
類似判定値ＴＹ[i,j]が−１（横類似）である場合、横
方向予測値Ｇy[i,j]を補間量Ｇ[i,j]とし、類似判定値
ＴＹ[i,j]が１（縦類似）である場合、縦方向予測値Ｇt
[i,j]を補間量Ｇ[i,j]とする。また、補間処理部２０
は、類似判定値ＴＹ[i,j]が０（中間類似）である場
合、横方向予測値Ｇy[i,j]と縦方向予測値Ｇt[i,j]との
平均値を補間量Ｇ[i,j]とする。
【００５４】<<補間量算出方法２>>まず、補間処理部２
０は、任意の空格子点[i,j]の周辺の４つの格子点の色
情報(Ｇ[i,j-1]、Ｇ[i,j+1]、Ｇ[i-1,j]、Ｇ[i+1,j])の
差が微少であるかを評価するための評価値ｗ[i,j]を算
出する。例えば、評価値ｗ[i,j]の算術式としては、以
下に示す式２０が考えられる。
０は、任意の空格子点[i,j]の周辺の４つの格子点の色
情報(Ｇ[i,j-1]、Ｇ[i,j+1]、Ｇ[i-1,j]、Ｇ[i+1,j])の
差が微少であるかを評価するための評価値ｗ[i,j]を算
出する。例えば、評価値ｗ[i,j]の算術式としては、以
下に示す式２０が考えられる。
【００５５】 ｗ[i,j]=|Ｇ[i-1,j]-Ｇ[i,j-1]|+|Ｇ[i,j-1]-Ｇ[i+1,j]|+ |Ｇ[i,j+1]-Ｇ[i,j+1]|+|Ｇ[i,j+1]-Ｇ[i-1,j]| ・・・式２０ 補間処理部２０は、評価値ｗ[i,j]が閾値th3未満である
場合、周辺の４つの格子点の色情報(Ｇ[i,j-1]、Ｇ[i,j
+1]、Ｇ[i-1,j]、Ｇ[i+1,j])の平均値を補間量Ｇ[i,j]
とする。
場合、周辺の４つの格子点の色情報(Ｇ[i,j-1]、Ｇ[i,j
+1]、Ｇ[i-1,j]、Ｇ[i+1,j])の平均値を補間量Ｇ[i,j]
とする。
【００５６】また、補間処理部２０は、評価値ｗ[i,j]
が閾値th3以上であり類似判定値ＴＹ[i,j]が−１（横類
似）である場合、横方向予測値Ｇy[i,j]を補間量Ｇ[i,
j]とし、評価値ｗ[i,j]が閾値th3以上であり類似判定値
ＴＹ[i,j]が１（縦類似）である場合、縦方向予測値Ｇt
[i,j]を補間量Ｇ[i,j]とする。
が閾値th3以上であり類似判定値ＴＹ[i,j]が−１（横類
似）である場合、横方向予測値Ｇy[i,j]を補間量Ｇ[i,
j]とし、評価値ｗ[i,j]が閾値th3以上であり類似判定値
ＴＹ[i,j]が１（縦類似）である場合、縦方向予測値Ｇt
[i,j]を補間量Ｇ[i,j]とする。
【００５７】さらに、補間処理部２０は、評価値ｗ[i,
j]が閾値th3以上であり類似判定値ＴＹ[i,j]が０（中間
類似）である場合、横方向予測値Ｇy[i,j]と縦方向予測
値Ｇt[i,j]との平均値を補間量Ｇ[i,j]とする。 <<補間量算出方法３>>まず、補間処理部２０は、補間量
算出方法２と同様に、周辺の４つの格子点の色情報の差
が微少であるかを判定するための評価値ｗ[i,j]を算出
する。
j]が閾値th3以上であり類似判定値ＴＹ[i,j]が０（中間
類似）である場合、横方向予測値Ｇy[i,j]と縦方向予測
値Ｇt[i,j]との平均値を補間量Ｇ[i,j]とする。 <<補間量算出方法３>>まず、補間処理部２０は、補間量
算出方法２と同様に、周辺の４つの格子点の色情報の差
が微少であるかを判定するための評価値ｗ[i,j]を算出
する。
【００５８】補間処理部２０は、類似判定値ＴＹ[i,j]
が−１（横類似）である場合、横方向予測値Ｇy[i,j]を
補間量Ｇ[i,j]とし、類似判定値ＴＹ[i,j]が１（縦類
似）である場合、縦方向予測値Ｇt[i,j]を補間量Ｇ[i,
j]とする。また、補間処理部２０は、類似判定値ＴＹ
[i,j]が０（中間類似）を示し評価値ｗ[i,j]が閾値th3
以上である場合、横方向予測値Ｇy[i,j]と縦方向予測値
Ｇt[i,j]との平均値を補間量Ｇ[i,j]とし、類似判定値
ＴＹ[i,j]が０（中間類似）を示し評価値ｗ[i,j]が閾値
th3未満である場合、周辺の４つの格子点の色情報(Ｇ
[i,j-1]、Ｇ[i,j+1]、Ｇ[i-1,j]、Ｇ[i+1,j])の平均値
を補間量Ｇ[i,j]とする。
が−１（横類似）である場合、横方向予測値Ｇy[i,j]を
補間量Ｇ[i,j]とし、類似判定値ＴＹ[i,j]が１（縦類
似）である場合、縦方向予測値Ｇt[i,j]を補間量Ｇ[i,
j]とする。また、補間処理部２０は、類似判定値ＴＹ
[i,j]が０（中間類似）を示し評価値ｗ[i,j]が閾値th3
以上である場合、横方向予測値Ｇy[i,j]と縦方向予測値
Ｇt[i,j]との平均値を補間量Ｇ[i,j]とし、類似判定値
ＴＹ[i,j]が０（中間類似）を示し評価値ｗ[i,j]が閾値
th3未満である場合、周辺の４つの格子点の色情報(Ｇ
[i,j-1]、Ｇ[i,j+1]、Ｇ[i-1,j]、Ｇ[i+1,j])の平均値
を補間量Ｇ[i,j]とする。
【００５９】次に、補間処理部２０は、赤色の補間処理
および青色の補間処理を行う（Ｓ８）。例えば、補間処
理部２０は、赤色（または青色）が欠落する画素（以
下、補間画素と称する。）に隣接して赤色（または青
色）の色情報を有する２つの画素の色相を算出し、これ
らの２つの画素の色相の平均値を補間画素の色相とし、
補間画素の色相と緑色の色情報とを用いて赤色（または
青色）の補間量を算出する（公知の技術）。
および青色の補間処理を行う（Ｓ８）。例えば、補間処
理部２０は、赤色（または青色）が欠落する画素（以
下、補間画素と称する。）に隣接して赤色（または青
色）の色情報を有する２つの画素の色相を算出し、これ
らの２つの画素の色相の平均値を補間画素の色相とし、
補間画素の色相と緑色の色情報とを用いて赤色（または
青色）の補間量を算出する（公知の技術）。
【００６０】以上説明したように、第１の実施形態で
は、類似性の強い方向を判定し直すことによって、空格
子点の類似判定値ＴＹの信頼性が高められ、緑色の補間
量を精度良く算出することができる。
は、類似性の強い方向を判定し直すことによって、空格
子点の類似判定値ＴＹの信頼性が高められ、緑色の補間
量を精度良く算出することができる。
【００６１】したがって、第１の実施形態によれば、従
来の補間処理と比べて、偽色の発生を確実に低減するこ
とができる。なお、本実施形態では、Ｓ４〜Ｓ６の処理
によって類似判定値ＴＹが変更された後にＳ７によって
緑色の補間量が算出されるが、例えば、Ｓ６の処理を行
わずにＳ７の処理を行ったり、Ｓ６の処理の後にＳ５と
同様の処理を行ってからＳ７の処理を行っても良い。
来の補間処理と比べて、偽色の発生を確実に低減するこ
とができる。なお、本実施形態では、Ｓ４〜Ｓ６の処理
によって類似判定値ＴＹが変更された後にＳ７によって
緑色の補間量が算出されるが、例えば、Ｓ６の処理を行
わずにＳ７の処理を行ったり、Ｓ６の処理の後にＳ５と
同様の処理を行ってからＳ７の処理を行っても良い。
【００６２】また、本実施形態では、Ｓ５によって類似
性の強い方向が判定し直される空格子点は、Ｓ３の処理
によって類似判定値ＴＹに０が設定された空格子点と、
Ｓ４の処理によって類似判定値ＴＹが０に変更された空
格子点とであるが、請求項２を対応付けない場合には、
Ｓ４の処理によって類似判定値ＴＹが０に変更された空
格子点のみＳ５の処理対象としても良いし、請求項１を
対応付けない場合には、Ｓ４およびＳ６の処理を行わ
ず、Ｓ３の処理によって類似判定値ＴＹに０が設定され
た空格子点をＳ５の処理対象としても良い。
性の強い方向が判定し直される空格子点は、Ｓ３の処理
によって類似判定値ＴＹに０が設定された空格子点と、
Ｓ４の処理によって類似判定値ＴＹが０に変更された空
格子点とであるが、請求項２を対応付けない場合には、
Ｓ４の処理によって類似判定値ＴＹが０に変更された空
格子点のみＳ５の処理対象としても良いし、請求項１を
対応付けない場合には、Ｓ４およびＳ６の処理を行わ
ず、Ｓ３の処理によって類似判定値ＴＹに０が設定され
た空格子点をＳ５の処理対象としても良い。
【００６３】さらに、本実施形態では、Ｓ１によって緑
色の補間量の予測値を算出してＳ２によって予測値を用
いて異色系類似度を算出しているが、例えば、補間処理
の対象となる空格子点の色情報と、その空格子点に隣接
する格子点の色情報とを用いて異色系類似度を算出する
など、異なる色の色情報を比較することによって算出で
きれば如何なる方法で異色系類似度を算出しても良い。
色の補間量の予測値を算出してＳ２によって予測値を用
いて異色系類似度を算出しているが、例えば、補間処理
の対象となる空格子点の色情報と、その空格子点に隣接
する格子点の色情報とを用いて異色系類似度を算出する
など、異なる色の色情報を比較することによって算出で
きれば如何なる方法で異色系類似度を算出しても良い。
【００６４】以下、第２の実施形態の動作を説明する。
図４は、第２の実施形態の機能ブロック図である。な
お、第２の実施形態は、請求項７および請求項８に記載
の補間処理プログラムを記録した記録媒体を用いて、パ
ーソナルコンピュータによって補間処理を実行すること
に相当する。
図４は、第２の実施形態の機能ブロック図である。な
お、第２の実施形態は、請求項７および請求項８に記載
の補間処理プログラムを記録した記録媒体を用いて、パ
ーソナルコンピュータによって補間処理を実行すること
に相当する。
【００６５】図４において、機能が図１に示す機能ブロ
ック図と同じものについては、同じ符号を付与して示
し、構成の説明については省略する。なお、図４に示す
電子カメラ３０と図１に示した電子カメラ１０との構成
の相違点は、制御部３１と画像処理部３２とが制御部１
１と画像処理部１８とに代えて設けられ、インタフェー
ス部３３が新たに設けられた点である。
ック図と同じものについては、同じ符号を付与して示
し、構成の説明については省略する。なお、図４に示す
電子カメラ３０と図１に示した電子カメラ１０との構成
の相違点は、制御部３１と画像処理部３２とが制御部１
１と画像処理部１８とに代えて設けられ、インタフェー
ス部３３が新たに設けられた点である。
【００６６】また、図４において、パーソナルコンピュ
ータ４０は、ＣＰＵ４１、インタフェース部４２、ハー
ドディスク４３およびメモリ４４を有し、ＣＰＵ４１
は、バスを介してインタフェース部４２、ハードディス
ク４３およびメモリ４４に接続される。なお、パーソナ
ルコンピュータ４０には、ＣＤ−ＲＯＭなどの記録媒体
に記録された補間処理プログラム（前述した各実施形態
の補間処理部２０と同様にして補間処理を実行する補間
処理プログラム）が予めインストールされているものと
する。すなわち、ハードディスク４３には、このような
補間処理プログラムが実行可能な状態で格納されてい
る。
ータ４０は、ＣＰＵ４１、インタフェース部４２、ハー
ドディスク４３およびメモリ４４を有し、ＣＰＵ４１
は、バスを介してインタフェース部４２、ハードディス
ク４３およびメモリ４４に接続される。なお、パーソナ
ルコンピュータ４０には、ＣＤ−ＲＯＭなどの記録媒体
に記録された補間処理プログラム（前述した各実施形態
の補間処理部２０と同様にして補間処理を実行する補間
処理プログラム）が予めインストールされているものと
する。すなわち、ハードディスク４３には、このような
補間処理プログラムが実行可能な状態で格納されてい
る。
【００６７】以下、図４を参照して第２の実施形態の動
作を説明する。まず、電子カメラ３０では、図１に示し
た電子カメラ１０と同様に生成された画像データが画像
処理部３２に供給される。画像処理部３２は、画像デー
タに補間処理以外の画像処理を施し、記録部１９では、
画像処理が施された画像データが画像ファイルの形式で
記録される。
作を説明する。まず、電子カメラ３０では、図１に示し
た電子カメラ１０と同様に生成された画像データが画像
処理部３２に供給される。画像処理部３２は、画像デー
タに補間処理以外の画像処理を施し、記録部１９では、
画像処理が施された画像データが画像ファイルの形式で
記録される。
【００６８】このような画像ファイルは、インタフェー
ス部３３を介してパーソナルコンピュータ４０に供給さ
れる。パーソナルコンピュータ４０内のＣＰＵ４１は、
インタフェース部４２を介して画像ファイルを取得する
と、前述した補間処理プログラムを実行する。すなわ
ち、第２の実施形態では、前述した各実施形態と同様の
補間処理をパーソナルコンピュータ４０によって行うこ
とができる。
ス部３３を介してパーソナルコンピュータ４０に供給さ
れる。パーソナルコンピュータ４０内のＣＰＵ４１は、
インタフェース部４２を介して画像ファイルを取得する
と、前述した補間処理プログラムを実行する。すなわ
ち、第２の実施形態では、前述した各実施形態と同様の
補間処理をパーソナルコンピュータ４０によって行うこ
とができる。
【００６９】
【発明の効果】以上説明したように、請求項１に記載の
発明では、類似性判定手段による判定に基づき、互いに
近接する複数の空格子点の間で類似性の強い方向に予め
決められた関連が存在しない空格子点について、類似性
が強い方向を判定し直すことができる。
発明では、類似性判定手段による判定に基づき、互いに
近接する複数の空格子点の間で類似性の強い方向に予め
決められた関連が存在しない空格子点について、類似性
が強い方向を判定し直すことができる。
【００７０】また、請求項２に記載の発明は、類似性判
定手段による判定では、類似性の強い方向が判定できな
い空格子点について、類似性が強い方向を判定し直すこ
とができる。さらに、請求項３および請求項４に記載の
発明では、請求項１に記載の発明において、類似性の強
い方向を判定し直す必要がある空格子点を確実に検出す
ることができる。
定手段による判定では、類似性の強い方向が判定できな
い空格子点について、類似性が強い方向を判定し直すこ
とができる。さらに、請求項３および請求項４に記載の
発明では、請求項１に記載の発明において、類似性の強
い方向を判定し直す必要がある空格子点を確実に検出す
ることができる。
【００７１】ところで、１画素間隔の縦縞の画像のよう
に空間周波数が高い画像は、一旦、同色系成分の比率を
高くして類似性の強い方向を判定してしまうと、類似性
の強い方向を判定し直す必要がある空格子点を検出でき
なくなる可能性が高いが、請求項５および請求項６に記
載の発明では、初めに異色系成分の比率を高くして類似
性の強い方向を判定してから、同色系成分の比率を高く
して類似性の強い方向を判定し直すため、空間周波数が
高い画像であっても類似性の強い方向を精度良く判定す
ることができる。
に空間周波数が高い画像は、一旦、同色系成分の比率を
高くして類似性の強い方向を判定してしまうと、類似性
の強い方向を判定し直す必要がある空格子点を検出でき
なくなる可能性が高いが、請求項５および請求項６に記
載の発明では、初めに異色系成分の比率を高くして類似
性の強い方向を判定してから、同色系成分の比率を高く
して類似性の強い方向を判定し直すため、空間周波数が
高い画像であっても類似性の強い方向を精度良く判定す
ることができる。
【００７２】したがって、請求項１ないし請求項６に記
載の発明によれば、従来の補間処理と比べて、偽色の発
生を確実に低減することができる。また、請求項７およ
び請求項８に記載の発明では、請求項１ないし請求項６
の何れか１項に記載の補間処理装置と同様の機能をコン
ピュータで実現することができる。
載の発明によれば、従来の補間処理と比べて、偽色の発
生を確実に低減することができる。また、請求項７およ
び請求項８に記載の発明では、請求項１ないし請求項６
の何れか１項に記載の補間処理装置と同様の機能をコン
ピュータで実現することができる。
【図１】電子カメラの機能ブロック図である。
【図２】第１の実施形態における補間処理部の動作フロ
ーチャートである。
ーチャートである。
【図３】画像データの色情報の配列を示す図である。
【図４】第２の実施形態の機能ブロック図である。
【図５】撮像素子の構成を示す図である。
【図６】従来の補間処理を説明する図である。
【図７】縦類似の空格子点が孤立している状態の例を示
す図である。
す図である。
１０、３０ 電子カメラ １１、３１ 制御部 １２ 撮影光学系 １３ ＯＬＰＦ １４ 撮像素子 １５ Ａ／Ｄ変換部 １６ 画像バッファメモリ １７ 階調変換部 １８、３２ 画像処理部 １９ 記録部 ２０ 補間処理部 ３３、４２ インタフェース部 ４０ パーソナルコンピュータ ４１ ＣＰＵ ４３ ハードディスク ４４ メモリ
───────────────────────────────────────────────────── フロントページの続き (51)Int.Cl.7 識別記号 ＦＩ テーマコート゛(参考） // Ｇ０６Ｔ 1/00 Ｇ０６Ｆ 15/64 ３１０ Ｆターム(参考） 5B047 AB04 CB22 DC09 5C065 AA03 BB23 CC01 DD01 GG13 GG18 GG30 GG32 HH04 5C066 AA01 BA20 CA17 GA01 GB01 KE02 KE03 KE05 KE07 KE11 KE19 KM01 KM05 LA01 LA02 5C076 AA21 AA26 BA06 CA11 5C079 HB01 LA02 LA28 LB01 MA01 MA11 NA03
Claims (8)
- 【請求項１】 最も高い密度で分布する色を出力する格
子点と該色が欠落する空格子点とから成るカラー画像に
対し、空格子点での該色の色情報に相当する補間量を算
出する補間処理を行う補間処理装置において、 空格子点における第１方向の類似度および第２方向の類
似度を算出し、該第１方向の類似度と該第２方向の類似
度とを比較することによって類似性が強い方向を判定す
る類似性判定手段と、 前記類似性判定手段による類似性の強い方向の判定の結
果に基づき、互いに近接する複数の空格子点の間で類似
性の強い方向に予め決められた関連が存在しない空格子
点を検出し、該空格子点について、該類似性判定手段と
は異なる方法で第１方向の類似度および第２方向の類似
度を算出し、該第１方向の類似度と該第２方向の類似度
とを比較することによって類似性が強い方向を判定し直
す類似性修正判定手段と、 前記類似性修正判定手段による類似性の強い方向の判定
の結果に応じて、補間量を算出する際に参照すべき格子
点を決定し、該格子点の色情報を用いて補間量を算出す
る補間量算出手段とを備えたことを特徴とする補間処理
装置。 - 【請求項２】 最も高い密度で分布する色を出力する格
子点と該色が欠落する空格子点とから成るカラー画像に
対し、空格子点での該色の色情報に相当する補間量を算
出する補間処理を行う補間処理装置において、 空格子点における第１方向の類似度および第２方向の類
似度を算出し、該第１方向の類似度と該第２方向の類似
度とを比較することによって類似性が強い方向を判定す
る類似性判定手段と、 前記類似性判定手段では類似性の強い方向が判定できな
い空格子点について、該類似性判定手段とは異なる方法
で第１方向の類似度および第２方向の類似度を算出し、
該第１方向の類似度と該第２方向の類似度とを比較する
ことによって類似性が強い方向を判定し直す類似性再度
判定手段と、 前記前記類似性再度判定手段による類似性の強い方向の
判定の結果に応じて、補間量を算出する際に参照すべき
格子点を決定し、該格子点の色情報を用いて補間量を算
出する補間量算出手段とを備えたことを特徴とする補間
処理装置。 - 【請求項３】 請求項１に記載の補間処理装置におい
て、 前記類似性修正判定手段は、 前記類似性判定手段による判定の結果として類似性の強
い方向が同一となる空格子点が所定個数以上連続しない
場合、該空格子点について、類似性の強い方向を判定し
直すことを特徴とする補間処理装置。 - 【請求項４】 請求項１に記載の補間処理装置におい
て、 前記類似性修正判定手段は、 前記類似性判定手段による判定の結果として類似性の強
い方向が同一となる空格子点が所定の方向に連続しない
場合、該空格子点について、類似性の強い方向を判定し
直すことを特徴とする補間処理装置。 - 【請求項５】 請求項１、請求項３、請求項４の何れか
一項に記載の補間処理装置において、 前記第１方向の類似度および前記第２方向の類似度は、 異なる色の色情報を比較することによって得られる異色
系成分と、同じ色の色情報を比較することによって得ら
れる同色系成分との少なくとも一方で構成され、 前記類似性判定手段は、 前記異色系成分の比率を高くして前記第１方向の類似度
および前記第２方向の類似度を算出し、 前記類似性修正判定手段は、 前記同色系成分の比率を高くして前記第１方向の類似度
および前記第２方向の類似度を算出することを特徴とす
る補間処理装置。 - 【請求項６】 請求項２に記載の補間処理装置におい
て、 前記第１方向の類似度および前記第２方向の類似度は、 異なる色の色情報を比較することによって得られる異色
系成分と、同じ色の色情報を比較することによって得ら
れる同色系成分との少なくとも一方で構成され、 前記類似性判定手段は、 前記異色系成分の比率を高くして第１方向の類似度およ
び前記第２方向の類似度を算出し、 前記類似性再度判定手段は、 前記同色系成分の比率を高くして第１方向の類似度およ
び前記第２方向の類似度を算出することを特徴とする補
間処理装置。 - 【請求項７】 コンピュータを請求項１、請求項３ない
し請求項５の何れか１項に記載の類似性判定手段、類似
性修正判定手段、補間量算出手段として機能させるため
の補間処理プログラムを記録した機械読み取り可能な記
録媒体。 - 【請求項８】 コンピュータを請求項２または請求項６
に記載の類似性判定手段、類似性再度判定手段、補間量
算出手段として機能させるための補間処理プログラムを
記録した機械読み取り可能な記録媒体。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP11024678A JP2000224602A (ja) | 1999-02-02 | 1999-02-02 | 補間処理装置および補間処理プログラムを記録した記録媒体 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP11024678A JP2000224602A (ja) | 1999-02-02 | 1999-02-02 | 補間処理装置および補間処理プログラムを記録した記録媒体 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2000224602A true JP2000224602A (ja) | 2000-08-11 |
Family
ID=12144817
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP11024678A Pending JP2000224602A (ja) | 1999-02-02 | 1999-02-02 | 補間処理装置および補間処理プログラムを記録した記録媒体 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2000224602A (ja) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2010057172A (ja) * | 2008-08-27 | 2010-03-11 | Seiko Epson Corp | 画像処理装置、画像処理方法、およびプログラム |
| US8532370B2 (en) | 2009-08-18 | 2013-09-10 | Olympus Corporation | Image processing apparatus and image processing method |
-
1999
- 1999-02-02 JP JP11024678A patent/JP2000224602A/ja active Pending
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2010057172A (ja) * | 2008-08-27 | 2010-03-11 | Seiko Epson Corp | 画像処理装置、画像処理方法、およびプログラム |
| US8532370B2 (en) | 2009-08-18 | 2013-09-10 | Olympus Corporation | Image processing apparatus and image processing method |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US7835573B2 (en) | Method and apparatus for edge adaptive color interpolation | |
| US6989862B2 (en) | System and method for concurrently demosaicing and resizing raw data images | |
| KR101342806B1 (ko) | 최종 디지털 컬러 이미지를 형성하는 방법 | |
| US8131067B2 (en) | Image processing apparatus, image processing method, and computer-readable media for attaining image processing | |
| JP4127638B2 (ja) | イメージセンサ出力データ処理装置及び処理方法 | |
| US7995840B2 (en) | Image processing apparatus, image processing method, and program for attaining image processing | |
| WO2005117455A1 (ja) | Ｒａｗデ－タから倍率色収差を検出する画像処理装置、画像処理プログラム、および電子カメラ | |
| WO2005101854A1 (ja) | 色ずれ補正機能を有する画像処理装置、画像処理プログラム、および電子カメラ | |
| KR101389562B1 (ko) | 이미지 처리 장치 및 방법 | |
| US8452127B2 (en) | Methods and apparatuses for reducing the effects of noise in image signals | |
| JP2001245314A (ja) | 補間処理装置および補間処理プログラムを記録した記録媒体 | |
| US9030579B2 (en) | Image processing apparatus and control method that corrects a signal level of a defective pixel | |
| JPH11103466A (ja) | 画像信号処理装置及びプログラムを記録した媒体 | |
| JP2013017142A (ja) | 画像処理装置、撮像装置、画像処理方法及びプログラム | |
| JP4292625B2 (ja) | 補間処理装置および補間処理プログラムを記録した記録媒体 | |
| JP4038867B2 (ja) | 補間処理方法 | |
| JP4305989B2 (ja) | 補間処理装置および補間処理プログラムを記録した記録媒体 | |
| JP2000188762A (ja) | 補間処理装置および補間処理プログラムを記録した記録媒体 | |
| JP4702912B2 (ja) | 信号処理方法及び信号処理装置 | |
| JP2000224602A (ja) | 補間処理装置および補間処理プログラムを記録した記録媒体 | |
| JP2000341701A (ja) | 補間処理装置および補間処理プログラムを記録した記録媒体 | |
| JP2002223452A (ja) | 画像補間装置 | |
| JP2002010279A (ja) | 補間処理装置および補間処理プログラムを記録した記録媒体 | |
| KR101327790B1 (ko) | 영상 보간 방법 및 장치 | |
| JP2000069492A (ja) | 補間処理装置および補間処理プログラムを記録した記録媒体 |