JP2001045509A - 補間処理装置および補間処理プログラムを記録した記録媒体 - Google Patents
補間処理装置および補間処理プログラムを記録した記録媒体Info
- Publication number
- JP2001045509A JP2001045509A JP11213746A JP21374699A JP2001045509A JP 2001045509 A JP2001045509 A JP 2001045509A JP 11213746 A JP11213746 A JP 11213746A JP 21374699 A JP21374699 A JP 21374699A JP 2001045509 A JP2001045509 A JP 2001045509A
- Authority
- JP
- Japan
- Prior art keywords
- similarity
- interpolation
- color
- component
- grid point
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Image Processing (AREA)
- Color Television Image Signal Generators (AREA)
Abstract
(57)【要約】
【課題】 第１の色成分および第２の色成分を有する格
子点と第１の色成分および第３の色成分を有する格子点
とから成るカラー画像に対し、各々の格子点に欠落する
色成分の値である補間量を算出する補間処理を行う補間
処理装置と、該補間処理をコンピュータに実行させる補
間処理プログラムを記録した記録媒体とに関し、補間処
理を精度良くかつ容易に行うことを目的とする。 【解決手段】 類似度算出手段は、補間対象格子点を中
心に対称となる位置に存在する２つずつの異色格子点を
通る複数の方向のうち、少なくとも２つの方向に対する
類似度を各々の方向に存在する格子点の色成分の値を用
いて算出し、類似性判定手段は、該少なくとも２つの方
向に対する類似度に基づき各々の方向に対する類似性の
強弱を判定し、補間量算出手段は、類似性が強いと判定
された方向に存在する格子点の色成分の値に基づき補間
量を算出する。
子点と第１の色成分および第３の色成分を有する格子点
とから成るカラー画像に対し、各々の格子点に欠落する
色成分の値である補間量を算出する補間処理を行う補間
処理装置と、該補間処理をコンピュータに実行させる補
間処理プログラムを記録した記録媒体とに関し、補間処
理を精度良くかつ容易に行うことを目的とする。 【解決手段】 類似度算出手段は、補間対象格子点を中
心に対称となる位置に存在する２つずつの異色格子点を
通る複数の方向のうち、少なくとも２つの方向に対する
類似度を各々の方向に存在する格子点の色成分の値を用
いて算出し、類似性判定手段は、該少なくとも２つの方
向に対する類似度に基づき各々の方向に対する類似性の
強弱を判定し、補間量算出手段は、類似性が強いと判定
された方向に存在する格子点の色成分の値に基づき補間
量を算出する。
Description
【０００１】
【発明の属する技術分野】本発明は、３つの色成分から
成る表色系によって示され、第１の色成分および第２の
色成分を有する格子点と、第１の色成分および第３の色
成分を有する格子点とから成るカラー画像に対して、各
々の格子点に欠落する色成分の値に相当する補間量を算
出する補間処理を行う補間処理装置と、該補間処理をコ
ンピュータに実行させる補間処理プログラムを記録した
記録媒体とに関する。
成る表色系によって示され、第１の色成分および第２の
色成分を有する格子点と、第１の色成分および第３の色
成分を有する格子点とから成るカラー画像に対して、各
々の格子点に欠落する色成分の値に相当する補間量を算
出する補間処理を行う補間処理装置と、該補間処理をコ
ンピュータに実行させる補間処理プログラムを記録した
記録媒体とに関する。
【０００２】
【従来の技術】従来から、２板式の撮像素子（例えば、
一方の撮像素子がＧのみから成り他方の撮像素子がＲと
Ｂとから成る構成や、双方の撮像素子がベイア配列され
て成る構成）によって生成されるカラー画像（Ｇ成分お
よびＲ成分を有する格子点とＧ成分およびＢ成分を有す
る格子点とで構成されるカラー画像）に対し、各格子点
毎に欠落する色成分の値を補う補間処理としては、単板
式の撮像素子によって生成されるカラー画像に対する補
間処理と同様に、例えば、米国特許第４，６４２，６７
８号明細書に開示されたような、色差（(Ｒ成分の値-Ｇ
成分の値)や(Ｂ成分の値-Ｇ成分の値)）に応じて線形補
間を行う方法が一般的に用いられている。
一方の撮像素子がＧのみから成り他方の撮像素子がＲと
Ｂとから成る構成や、双方の撮像素子がベイア配列され
て成る構成）によって生成されるカラー画像（Ｇ成分お
よびＲ成分を有する格子点とＧ成分およびＢ成分を有す
る格子点とで構成されるカラー画像）に対し、各格子点
毎に欠落する色成分の値を補う補間処理としては、単板
式の撮像素子によって生成されるカラー画像に対する補
間処理と同様に、例えば、米国特許第４，６４２，６７
８号明細書に開示されたような、色差（(Ｒ成分の値-Ｇ
成分の値)や(Ｂ成分の値-Ｇ成分の値)）に応じて線形補
間を行う方法が一般的に用いられている。
【０００３】しかし、このような補間処理では、カラー
画像内のエッジ部分が無視されて線形補間が行われるた
め、エッジ部分で偽色が発生し易いという問題があっ
た。そこで、このようなエッジ部分における偽色の発生
を低減するために、カラー画像をエッジ部分を境に複数
の領域に分割し、各領域毎に線形補間を行う方法が考え
られている。例えば、米国特許第５，０３２，９１０号
明細書には、Ｇ成分とＲ成分やＢ成分との差を閾値と比
較することによって色が変化するエッジ部分を検出して
カラー画像を複数の領域に分割し、各領域を線形補間す
る方法が開示されており、米国特許第５，０４０，０６
４号明細書には、Ｇ成分の特徴を調べることによってエ
ッジ部分を検出してカラー画像を複数の領域に分割し、
各領域を線形補間する方法が開示されている。
画像内のエッジ部分が無視されて線形補間が行われるた
め、エッジ部分で偽色が発生し易いという問題があっ
た。そこで、このようなエッジ部分における偽色の発生
を低減するために、カラー画像をエッジ部分を境に複数
の領域に分割し、各領域毎に線形補間を行う方法が考え
られている。例えば、米国特許第５，０３２，９１０号
明細書には、Ｇ成分とＲ成分やＢ成分との差を閾値と比
較することによって色が変化するエッジ部分を検出して
カラー画像を複数の領域に分割し、各領域を線形補間す
る方法が開示されており、米国特許第５，０４０，０６
４号明細書には、Ｇ成分の特徴を調べることによってエ
ッジ部分を検出してカラー画像を複数の領域に分割し、
各領域を線形補間する方法が開示されている。
【０００４】
【発明が解決しようとする課題】しかし、これらの明細
書に開示された技術では、エッジ部分を検出する過程
で、連続する格子点の色成分の値を順次読み出し、エッ
ジ部分が検出された時点で、各領域の起点となる格子点
に戻って線形補間を行うことになり、処理の対象となる
格子点の位置を管理するなど、極めて複雑な演算を行う
必要があった。
書に開示された技術では、エッジ部分を検出する過程
で、連続する格子点の色成分の値を順次読み出し、エッ
ジ部分が検出された時点で、各領域の起点となる格子点
に戻って線形補間を行うことになり、処理の対象となる
格子点の位置を管理するなど、極めて複雑な演算を行う
必要があった。
【０００５】ところで、米国特許第５，６２９，７３４
号明細書には、ベイア配列されて成る単板式の撮像素子
によって生成されるカラー画像に対する補間処理を、比
較的簡単に行うことができる技術が開示されている。し
かし、このような補間処理は、２板式の撮像素子によっ
て生成されるカラー画像（Ｇ成分およびＲ成分を有する
格子点とＧ成分およびＢ成分を有する格子点とで構成さ
れるカラー画像）には適用することができない。
号明細書には、ベイア配列されて成る単板式の撮像素子
によって生成されるカラー画像に対する補間処理を、比
較的簡単に行うことができる技術が開示されている。し
かし、このような補間処理は、２板式の撮像素子によっ
て生成されるカラー画像（Ｇ成分およびＲ成分を有する
格子点とＧ成分およびＢ成分を有する格子点とで構成さ
れるカラー画像）には適用することができない。
【０００６】そこで、請求項１ないし請求項８に記載の
発明は、３つの色成分から成る表色系によって示され、
第１の色成分および第２の色成分を有する格子点と、第
１の色成分および第３の色成分を有する格子点とから成
るカラー画像に対する補間処理を、精度良くかつ容易に
行うことができる補間処理装置を提供することを目的と
する。
発明は、３つの色成分から成る表色系によって示され、
第１の色成分および第２の色成分を有する格子点と、第
１の色成分および第３の色成分を有する格子点とから成
るカラー画像に対する補間処理を、精度良くかつ容易に
行うことができる補間処理装置を提供することを目的と
する。
【０００７】また、請求項９ないし請求項１０に記載の
発明は、３つの色成分から成る表色系によって示され、
第１の色成分および第２の色成分を有する格子点と、第
１の色成分および第３の色成分を有する格子点とから成
るカラー画像に対する補間処理を、精度良くかつ容易に
行うことができる補間処理プログラムを記録した記録媒
体を提供することを目的とする。
発明は、３つの色成分から成る表色系によって示され、
第１の色成分および第２の色成分を有する格子点と、第
１の色成分および第３の色成分を有する格子点とから成
るカラー画像に対する補間処理を、精度良くかつ容易に
行うことができる補間処理プログラムを記録した記録媒
体を提供することを目的とする。
【０００８】
【課題を解決するための手段】請求項１に記載の補間処
理装置は、３つの色成分から成る表色系によって示さ
れ、第１の色成分および第２の色成分を有する格子点
と、第１の色成分および第３の色成分を有する格子点と
が市松模様状に配置されて成るカラー画像（図３に示す
画像データに対応する）を補間処理の対象とし、類似度
算出手段（図１の補間処理部５の「類似度を算出する機
能」に対応する）は、補間対象格子点を中心に対称とな
る位置に存在する２つずつの異色格子点を通る複数の方
向（図３（ｂ）において、R[i,j+1],B[i,j],R[i,j-1]を
通る方向、R[i-1,j+2],B[i,j],R[i+1,j-2]を通る方向、
R[i-2,j+1],B[i,j],R[i+2,j-1]を通る方向、R[i-1,j],B
[i,j],R[i+1,j]を通る方向、R[i-2,j-1],B[i,j],R[i+2,
j+1]を通る方向、R[i-1,j-2],B[i,j],R[i+1,j+2]を通る
方向に対応する）のうち、少なくとも２つの方向に対す
る補間対象格子点の類似度を各々の方向に存在する格子
点の色成分の値を用いて算出し（図４Ｓ１０に対応す
る）、類似性判定手段（図１の補間処理部５の「類似性
を判定する機能」に対応する）は、類似度算出手段によ
って算出された少なくとも２つの方向に対する類似度に
基づき、補間対象格子点毎に各々の方向に対する類似性
の強弱を判定し（図４Ｓ１１〜Ｓ１２に対応する）、補
間量算出手段（図１の補間処理部５の「補間量を算出す
る機能」に対応する）は、類似性判定手段によって類似
性が強いと判定された方向に存在する格子点の色成分の
値に基づき、補間対象格子点の補間量を算出する（図４
Ｓ１３〜Ｓ１５に対応する）ことを特徴とする。
理装置は、３つの色成分から成る表色系によって示さ
れ、第１の色成分および第２の色成分を有する格子点
と、第１の色成分および第３の色成分を有する格子点と
が市松模様状に配置されて成るカラー画像（図３に示す
画像データに対応する）を補間処理の対象とし、類似度
算出手段（図１の補間処理部５の「類似度を算出する機
能」に対応する）は、補間対象格子点を中心に対称とな
る位置に存在する２つずつの異色格子点を通る複数の方
向（図３（ｂ）において、R[i,j+1],B[i,j],R[i,j-1]を
通る方向、R[i-1,j+2],B[i,j],R[i+1,j-2]を通る方向、
R[i-2,j+1],B[i,j],R[i+2,j-1]を通る方向、R[i-1,j],B
[i,j],R[i+1,j]を通る方向、R[i-2,j-1],B[i,j],R[i+2,
j+1]を通る方向、R[i-1,j-2],B[i,j],R[i+1,j+2]を通る
方向に対応する）のうち、少なくとも２つの方向に対す
る補間対象格子点の類似度を各々の方向に存在する格子
点の色成分の値を用いて算出し（図４Ｓ１０に対応す
る）、類似性判定手段（図１の補間処理部５の「類似性
を判定する機能」に対応する）は、類似度算出手段によ
って算出された少なくとも２つの方向に対する類似度に
基づき、補間対象格子点毎に各々の方向に対する類似性
の強弱を判定し（図４Ｓ１１〜Ｓ１２に対応する）、補
間量算出手段（図１の補間処理部５の「補間量を算出す
る機能」に対応する）は、類似性判定手段によって類似
性が強いと判定された方向に存在する格子点の色成分の
値に基づき、補間対象格子点の補間量を算出する（図４
Ｓ１３〜Ｓ１５に対応する）ことを特徴とする。
【０００９】請求項２に記載の補間処理装置は、３つの
色成分から成る表色系によって示され、第１の色成分お
よび第２の色成分を有する格子点と、第１の色成分およ
び第３の色成分を有する格子点とがストライプ状に配置
されて成るカラー画像（図５に示す画像データに対応す
る）を補間処理の対象とし、類似度算出手段（図１の補
間処理部５の「類似度を算出する機能」に対応する）
は、補間対象格子点を中心に対称となる位置に存在する
２つずつの異色格子点を通る複数の方向（図５（２−
ｂ）において、R[i-1,j+2],B[i,j],R[i+1,j-2]を通る方
向、R[i-1,j+1],B[i,j],R[i+1,j-1]を通る方向、R[i-1,
j],B[i,j],R[i+1,j]を通る方向、R[i-1,j-1],B[i,j],R
[i+1,j+1]を通る方向、R[i-1,j-2],B[i,j],R[i+1,j+2]
を通る方向に対応する）のうち、少なくとも３つの方向
に対する補間対象格子点の類似度（第２の実施形態にお
ける縦方向の類似度C90[i,j]、斜め45゜方向の類似度C4
5[i,j]、斜め135゜方向の類似度C135[i,j]に対応する）
を各々の方向に存在する格子点の色成分の値を用いて算
出し（図６Ｓ２０に対応する）、類似性判定手段（図１
の補間処理部５の「類似性を判定する機能」に対応す
る）は、類似度算出手段によって算出された少なくとも
３つの方向に対する類似度に基づき、補間対象格子点毎
に各々の方向に対する類似性の強弱を判定し（図６Ｓ２
１〜Ｓ２３に対応する）、補間量算出手段（図１の補間
処理部５の「補間量を算出する機能」に対応する）は、
類似性判定手段によって類似性が強いと判定された方向
に存在する格子点の色成分の値に基づき、補間対象格子
点の補間量を算出する（図６Ｓ２４〜Ｓ２６に対応す
る）ことを特徴とする。
色成分から成る表色系によって示され、第１の色成分お
よび第２の色成分を有する格子点と、第１の色成分およ
び第３の色成分を有する格子点とがストライプ状に配置
されて成るカラー画像（図５に示す画像データに対応す
る）を補間処理の対象とし、類似度算出手段（図１の補
間処理部５の「類似度を算出する機能」に対応する）
は、補間対象格子点を中心に対称となる位置に存在する
２つずつの異色格子点を通る複数の方向（図５（２−
ｂ）において、R[i-1,j+2],B[i,j],R[i+1,j-2]を通る方
向、R[i-1,j+1],B[i,j],R[i+1,j-1]を通る方向、R[i-1,
j],B[i,j],R[i+1,j]を通る方向、R[i-1,j-1],B[i,j],R
[i+1,j+1]を通る方向、R[i-1,j-2],B[i,j],R[i+1,j+2]
を通る方向に対応する）のうち、少なくとも３つの方向
に対する補間対象格子点の類似度（第２の実施形態にお
ける縦方向の類似度C90[i,j]、斜め45゜方向の類似度C4
5[i,j]、斜め135゜方向の類似度C135[i,j]に対応する）
を各々の方向に存在する格子点の色成分の値を用いて算
出し（図６Ｓ２０に対応する）、類似性判定手段（図１
の補間処理部５の「類似性を判定する機能」に対応す
る）は、類似度算出手段によって算出された少なくとも
３つの方向に対する類似度に基づき、補間対象格子点毎
に各々の方向に対する類似性の強弱を判定し（図６Ｓ２
１〜Ｓ２３に対応する）、補間量算出手段（図１の補間
処理部５の「補間量を算出する機能」に対応する）は、
類似性判定手段によって類似性が強いと判定された方向
に存在する格子点の色成分の値に基づき、補間対象格子
点の補間量を算出する（図６Ｓ２４〜Ｓ２６に対応す
る）ことを特徴とする。
【００１０】請求項３に記載の補間処理装置は、請求項
１に記載の補間処理装置の類似度算出手段が、「補間対
象格子点の上下に隣接する２つの異色格子点を通る方向
（第１の実施形態における縦方向に対応する）」と、
「補間対象格子点の左右に隣接する２つの異色格子点を
通る方向（第１の実施形態における横方向に対応す
る）」との２つの方向に対する類似度を算出することを
特徴とする。
１に記載の補間処理装置の類似度算出手段が、「補間対
象格子点の上下に隣接する２つの異色格子点を通る方向
（第１の実施形態における縦方向に対応する）」と、
「補間対象格子点の左右に隣接する２つの異色格子点を
通る方向（第１の実施形態における横方向に対応す
る）」との２つの方向に対する類似度を算出することを
特徴とする。
【００１１】請求項４に記載の補間処理装置は、請求項
２に記載の補間処理装置の類似度算出手段が、「補間対
象格子点の上下または左右に隣接する２つの４異色格子
点を通る方向（第２の実施形態における縦方向に対応す
る）」と、「補間対象格子点の左上と右下に隣接する２
つの異色格子点を通る方向（第２の実施形態における斜
め45゜方向に対応する）」と、「補間対象格子点の右上
と左下に隣接する２つの異色格子点を通る方向（第２の
実施形態における斜め135゜方向に対応する）」との３
つの方向に対する類似度を算出することを特徴とする。
２に記載の補間処理装置の類似度算出手段が、「補間対
象格子点の上下または左右に隣接する２つの４異色格子
点を通る方向（第２の実施形態における縦方向に対応す
る）」と、「補間対象格子点の左上と右下に隣接する２
つの異色格子点を通る方向（第２の実施形態における斜
め45゜方向に対応する）」と、「補間対象格子点の右上
と左下に隣接する２つの異色格子点を通る方向（第２の
実施形態における斜め135゜方向に対応する）」との３
つの方向に対する類似度を算出することを特徴とする。
【００１２】請求項５に記載の補間処理装置は、請求項
１ないし請求項４の何れか１項に記載の補間処理装置の
類似度算出手段が、各々の方向に対する補間対象格子点
の類似度の成分として、「第１の色成分から成る類似度
成分（後述するGG間類似度成分に対応する）」を含むと
共に、(a)「第２の色成分および第３の色成分から成る
類似度成分（後述するRB間類似度成分に対応する）」
と、(b)「第２の色成分のみからなる類似度成分（後述
するRR間類似度成分に対応する）と、(C)「第３の色成
分のみから成る類似度成分（後述するBB間類似度成分に
対応する）」との少なくとも一つを含む類似度を算出す
ることを特徴とする。
１ないし請求項４の何れか１項に記載の補間処理装置の
類似度算出手段が、各々の方向に対する補間対象格子点
の類似度の成分として、「第１の色成分から成る類似度
成分（後述するGG間類似度成分に対応する）」を含むと
共に、(a)「第２の色成分および第３の色成分から成る
類似度成分（後述するRB間類似度成分に対応する）」
と、(b)「第２の色成分のみからなる類似度成分（後述
するRR間類似度成分に対応する）と、(C)「第３の色成
分のみから成る類似度成分（後述するBB間類似度成分に
対応する）」との少なくとも一つを含む類似度を算出す
ることを特徴とする。
【００１３】請求項６に記載の補間処理装置は、請求項
１または請求項３に記載の補間処理装置において、類似
度算出手段によって算出された各々の方向に対する類似
度の差違が所定の閾値よりも小さい場合（図５Ｓ１１の
ＹＥＳ側に対応する）、類似方向判定手段が、各々の方
向に対する類似性が同程度であると判定し、類似方向判
定手段によって各々の方向に対する類似性が同程度であ
ると判定された場合、補間量算出手段が、補間対象格子
点の近傍に存在する格子点の色成分の値を用いて補間対
象格子点の補間量を算出する（図５Ｓ１５に対応する）
ことを特徴とする。
１または請求項３に記載の補間処理装置において、類似
度算出手段によって算出された各々の方向に対する類似
度の差違が所定の閾値よりも小さい場合（図５Ｓ１１の
ＹＥＳ側に対応する）、類似方向判定手段が、各々の方
向に対する類似性が同程度であると判定し、類似方向判
定手段によって各々の方向に対する類似性が同程度であ
ると判定された場合、補間量算出手段が、補間対象格子
点の近傍に存在する格子点の色成分の値を用いて補間対
象格子点の補間量を算出する（図５Ｓ１５に対応する）
ことを特徴とする。
【００１４】請求項７に記載の補間処理装置は、請求項
２または請求項４に記載の補間処理装置において、類似
度算出手段によって算出された各々の方向に対する類似
度の差違が所定の閾値よりも小さい場合（図６Ｓ２２の
ＹＥＳ側に対応する）、類似方向判定手段が、各々の方
向に対する類似性が同程度であると判定し、類似方向判
定手段によって各々の方向に対する類似性が同程度であ
ると判定された場合、補間量算出手段が、補間対象格子
点に最も近接する異色格子点が位置する方向に存在する
格子点の色成分の値を用いて補間対象格子点の補間量を
算出する（図６Ｓ２４に対応する）ことを特徴とする。
２または請求項４に記載の補間処理装置において、類似
度算出手段によって算出された各々の方向に対する類似
度の差違が所定の閾値よりも小さい場合（図６Ｓ２２の
ＹＥＳ側に対応する）、類似方向判定手段が、各々の方
向に対する類似性が同程度であると判定し、類似方向判
定手段によって各々の方向に対する類似性が同程度であ
ると判定された場合、補間量算出手段が、補間対象格子
点に最も近接する異色格子点が位置する方向に存在する
格子点の色成分の値を用いて補間対象格子点の補間量を
算出する（図６Ｓ２４に対応する）ことを特徴とする。
【００１５】請求項８に記載の補間処理装置は、請求項
１ないし請求項５の何れか１項に記載の補間処理装置の
補間量算出手段が、類似性判定手段によって類似性が強
いと判定された方向に存在する格子点が個別に有して補
間対象格子点に欠落する色成分の値、または、該格子点
が個別に有する２つの色成分の値による色相を、重み付
けを行いつつ平均する（第１の実施形態における式１１
〜式２２、第２の実施形態における式４５〜式６２に対
応する）ことによって、補間対象格子点の補間量を算出
することを特徴とする。
１ないし請求項５の何れか１項に記載の補間処理装置の
補間量算出手段が、類似性判定手段によって類似性が強
いと判定された方向に存在する格子点が個別に有して補
間対象格子点に欠落する色成分の値、または、該格子点
が個別に有する２つの色成分の値による色相を、重み付
けを行いつつ平均する（第１の実施形態における式１１
〜式２２、第２の実施形態における式４５〜式６２に対
応する）ことによって、補間対象格子点の補間量を算出
することを特徴とする。
【００１６】請求項９に記載の記録媒体は、３つの色成
分から成る表色系によって示され、第１の色成分および
第２の色成分を有する格子点と、第１の色成分および第
３の色成分を有する格子点とが市松模様状に配置されて
成るカラー画像（図３に示す画像データに対応する）を
補間処理の対象とし、補間対象格子点を中心に対称とな
る位置に存在する２つずつの異色格子点を通る複数の方
向のうち、少なくとも２つの方向に対する補間対象格子
点の類似度を各々の方向に存在する格子点の色成分の値
を用いて算出する類似度算出手順（図４Ｓ１０に対応す
る）と、類似度算出手順によって算出された少なくとも
２つの方向に対する類似度に基づき、補間対象格子点毎
に各々の方向に対する類似性の強弱を判定する類似性判
定手順（図４Ｓ１１〜Ｓ１２に対応する）と、類似性判
定手順によって類似性が強いと判定された方向に存在す
る格子点の色成分の値に基づき、補間対象格子点の補間
量を算出する補間量算出手順（図４Ｓ１３〜Ｓ１５に対
応する）とを備えた補間処理プログラムを記録したこと
を特徴とする。
分から成る表色系によって示され、第１の色成分および
第２の色成分を有する格子点と、第１の色成分および第
３の色成分を有する格子点とが市松模様状に配置されて
成るカラー画像（図３に示す画像データに対応する）を
補間処理の対象とし、補間対象格子点を中心に対称とな
る位置に存在する２つずつの異色格子点を通る複数の方
向のうち、少なくとも２つの方向に対する補間対象格子
点の類似度を各々の方向に存在する格子点の色成分の値
を用いて算出する類似度算出手順（図４Ｓ１０に対応す
る）と、類似度算出手順によって算出された少なくとも
２つの方向に対する類似度に基づき、補間対象格子点毎
に各々の方向に対する類似性の強弱を判定する類似性判
定手順（図４Ｓ１１〜Ｓ１２に対応する）と、類似性判
定手順によって類似性が強いと判定された方向に存在す
る格子点の色成分の値に基づき、補間対象格子点の補間
量を算出する補間量算出手順（図４Ｓ１３〜Ｓ１５に対
応する）とを備えた補間処理プログラムを記録したこと
を特徴とする。
【００１７】請求項１０に記載の記録媒体は、３つの色
成分から成る表色系によって示され、第１の色成分およ
び第２の色成分を有する格子点と、第１の色成分および
第３の色成分を有する格子点とがストライプ状に配置さ
れて成るカラー画像（図５に示す画像データに対応す
る）を補間処理の対象とし、補間対象格子点を中心に対
称となる位置に存在する２つずつの異色格子点を通る複
数の方向のうち、少なくとも３つの方向に対する補間対
象格子点の類似度を各々の方向に存在する格子点の色成
分の値を用いて算出する類似度算出手順（図６Ｓ２０に
対応する）と、類似度算出手順によって算出された少な
くとも３つの方向に対する類似度に基づき、補間対象格
子点毎に各々の方向に対する類似性の強弱を判定する類
似性判定手順（図６Ｓ２１〜Ｓ２３に対応する）と、類
似性判定手順によって類似性が強いと判定された方向に
存在する格子点の色成分の値に基づき、補間対象格子点
の補間量を算出する補間量算出手順（図６Ｓ２４〜Ｓ２
６に対応する）とを備えた補間処理プログラムを記録し
たことを特徴とする。
成分から成る表色系によって示され、第１の色成分およ
び第２の色成分を有する格子点と、第１の色成分および
第３の色成分を有する格子点とがストライプ状に配置さ
れて成るカラー画像（図５に示す画像データに対応す
る）を補間処理の対象とし、補間対象格子点を中心に対
称となる位置に存在する２つずつの異色格子点を通る複
数の方向のうち、少なくとも３つの方向に対する補間対
象格子点の類似度を各々の方向に存在する格子点の色成
分の値を用いて算出する類似度算出手順（図６Ｓ２０に
対応する）と、類似度算出手順によって算出された少な
くとも３つの方向に対する類似度に基づき、補間対象格
子点毎に各々の方向に対する類似性の強弱を判定する類
似性判定手順（図６Ｓ２１〜Ｓ２３に対応する）と、類
似性判定手順によって類似性が強いと判定された方向に
存在する格子点の色成分の値に基づき、補間対象格子点
の補間量を算出する補間量算出手順（図６Ｓ２４〜Ｓ２
６に対応する）とを備えた補間処理プログラムを記録し
たことを特徴とする。
【００１８】
【発明の実施の形態】以下、図面に基づいて、本発明の
実施形態について詳細を説明する。図１は、本発明の第
１の実施形態および第２の実施形態の構成を示す図であ
る。図１において、画像処理装置１は、２つの撮像素子
を有する画像取り込み装置２に接続され、前処理部３と
メモリ４と補間処理部５と表示部６とインタフェース部
７とを有する。前処理部３は、画像取り込み装置２の各
々の撮像素子を介して取り込まれる画像データに対して
ゲイン補正やホワイトバランス補正やγ補正などの画像
処理を行い、メモリ４は、前処理部３によって画像処理
が行われた画像データや、補間処理部５によって補間処
理が行われた画像データを記録し、補間処理部５は、メ
モリ４に記録された画像データに対して後述する補間処
理を行う。
実施形態について詳細を説明する。図１は、本発明の第
１の実施形態および第２の実施形態の構成を示す図であ
る。図１において、画像処理装置１は、２つの撮像素子
を有する画像取り込み装置２に接続され、前処理部３と
メモリ４と補間処理部５と表示部６とインタフェース部
７とを有する。前処理部３は、画像取り込み装置２の各
々の撮像素子を介して取り込まれる画像データに対して
ゲイン補正やホワイトバランス補正やγ補正などの画像
処理を行い、メモリ４は、前処理部３によって画像処理
が行われた画像データや、補間処理部５によって補間処
理が行われた画像データを記録し、補間処理部５は、メ
モリ４に記録された画像データに対して後述する補間処
理を行う。
【００１９】なお、画像取り込み装置２としては、図２
（１）のように縮小光学系を有する電子カメラや、図２
（２）のように一次像面に撮像素子を備えた電子カメラ
などが適用できる。図３は、第１の実施形態における補
間処理の対象となる画像データの色成分の配列を示す図
である。図３において、ｉ、ｊは格子点の位置を示し、
Ｒ、Ｇ、Ｂは格子点の色を示し、各々の格子点には、
（ａ）に示す色成分と（ｂ）に示す色成分とが対応付け
られている。すなわち、図３に示す画像データは、全て
の格子点にＧ成分が配置され、Ｒ成分とＢ成分とが市松
模様状に配置されていることになる（Ｇ成分およびＲ成
分を有する格子点と、Ｇ成分およびＢ成分を有する格子
点とが市松模様状に配置されていることにもなる）。
（１）のように縮小光学系を有する電子カメラや、図２
（２）のように一次像面に撮像素子を備えた電子カメラ
などが適用できる。図３は、第１の実施形態における補
間処理の対象となる画像データの色成分の配列を示す図
である。図３において、ｉ、ｊは格子点の位置を示し、
Ｒ、Ｇ、Ｂは格子点の色を示し、各々の格子点には、
（ａ）に示す色成分と（ｂ）に示す色成分とが対応付け
られている。すなわち、図３に示す画像データは、全て
の格子点にＧ成分が配置され、Ｒ成分とＢ成分とが市松
模様状に配置されていることになる（Ｇ成分およびＲ成
分を有する格子点と、Ｇ成分およびＢ成分を有する格子
点とが市松模様状に配置されていることにもなる）。
【００２０】ところで、第１の実施形態では、説明を簡
単にするため、座標[i,j]に存在してＲ成分が欠落する
格子点を補間対象格子点として扱い、Ｒ成分を有する格
子点を異色格子点として扱い、補間対象格子点のＲ成分
の値を補間量R[i,j]として算出するが、Ｂ成分が欠落す
る格子点の補間量も同様に算出できる。また、第１の実
施形態では、各画素の色成分の値は、R[i+1,j]、G[i,
j]、B[i,j]などのように示す。
単にするため、座標[i,j]に存在してＲ成分が欠落する
格子点を補間対象格子点として扱い、Ｒ成分を有する格
子点を異色格子点として扱い、補間対象格子点のＲ成分
の値を補間量R[i,j]として算出するが、Ｂ成分が欠落す
る格子点の補間量も同様に算出できる。また、第１の実
施形態では、各画素の色成分の値は、R[i+1,j]、G[i,
j]、B[i,j]などのように示す。
【００２１】なお、第１の実施形態において、画像取り
込み装置２が有する２つの撮像素子のＲＧＢの配列は、
図３に示すような画像データが生成できるような配列に
する必要があり、例えば、一方の撮像素子はＧのみから
成り、他方の撮像素子はＲとＢとが市松模様状に配置さ
れることが考えられる。
込み装置２が有する２つの撮像素子のＲＧＢの配列は、
図３に示すような画像データが生成できるような配列に
する必要があり、例えば、一方の撮像素子はＧのみから
成り、他方の撮像素子はＲとＢとが市松模様状に配置さ
れることが考えられる。
【００２２】図４は、第１の実施形態における補間処理
部の動作フローチャート（座標[i,j]に存在する補間対
象格子点の補間量R[i,j]を算出する際の動作フローチャ
ート）である。以下、第１の実施形態の動作を説明する
が、第１の実施形態では、図４を参照して補間対象格子
点の補間量を算出する動作を中心に説明する。
部の動作フローチャート（座標[i,j]に存在する補間対
象格子点の補間量R[i,j]を算出する際の動作フローチャ
ート）である。以下、第１の実施形態の動作を説明する
が、第１の実施形態では、図４を参照して補間対象格子
点の補間量を算出する動作を中心に説明する。
【００２３】まず、補間処理部５は、補間対象格子点の
縦方向の類似度Cv[i,j]および横方向の類似度Ch[i,j]
を、各々の方向に対する複数の類似度成分を加重加算す
ることによって算出する（図４Ｓ１０）。なお、以下で
は、Ｇ成分の値のみを用いて算出される類似度成分を
「GG間類似度成分」と称し、Ｒ成分の値のみを用いて算
出される類似度成分を「RR間類似度成分」と称し、Ｂ成
分の値のみを用いて算出される類似度成分を「BB間類似
度成分」と称し、Ｒ成分の値とＢ成分の値とを用いて算
出される類似度成分を「RB間類似度成分」と称する。
縦方向の類似度Cv[i,j]および横方向の類似度Ch[i,j]
を、各々の方向に対する複数の類似度成分を加重加算す
ることによって算出する（図４Ｓ１０）。なお、以下で
は、Ｇ成分の値のみを用いて算出される類似度成分を
「GG間類似度成分」と称し、Ｒ成分の値のみを用いて算
出される類似度成分を「RR間類似度成分」と称し、Ｂ成
分の値のみを用いて算出される類似度成分を「BB間類似
度成分」と称し、Ｒ成分の値とＢ成分の値とを用いて算
出される類似度成分を「RB間類似度成分」と称する。
【００２４】図４Ｓ１０において、補間処理部５は、例
えば、縦方向のGG間類似度成分Cv_gg[i,j]および横方向
のGG間類似度成分Ch_gg[i,j]を Cv_gg[i,j]=(|G[i-1,j]-G[i,j]|+|G[i+1,j]-G[i,j]|)/2 ・・・式１ Ch_gg[i,j]=(|G[i,j-1]-G[i,j]|+|G[i,j+1]-G[i,j]|)/2 ・・・式２ によって算出し、縦方向のRR間類似度成分Cv_rr[i,j]お
よび横方向のRR間類似度成分Ch_rr[i,j]を Cv_rr[i,j]=|R[i-1,j]-R[i+1,j]| ・・・式３ Ch_rr[i,j]=|R[i,j-1]-R[i,j+1]| ・・・式４ によって算出し、縦方向のBB間類似度成分Cv_bb[i,j]お
よび横方向のBB間類似度成分Ch_bb[i,j]を Cv_bb[i,j]=(|B[i-2,j]-B[i,j]|+|B[i+2,j]-B[i,j]|)/2 ・・・式５ Ch_bb[i,j]=(|B[i,j-2]-B[i,j]|+|B[i,j+2]-B[i,j]|)/2 ・・・式６ によって算出し、縦方向のRB間類似度成分Cv_rb[i,j]お
よび横方向のRB間類似度成分Ch_rb[i,j]を Cv_rb[i,j]=(|R[i-1,j]-B[i,j]|+|R[i+1,j]-B[i,j]|)/2 ・・・式７ Ch_rb[i,j]=(|R[i,j-1]-B[i,j]|+|R[i,j+1]-B[i,j]|)/2 ・・・式８ によって算出し、縦方向の類似度Cv[i,j]および横方向
の類似度Ch[i,j]を によって算出する。
えば、縦方向のGG間類似度成分Cv_gg[i,j]および横方向
のGG間類似度成分Ch_gg[i,j]を Cv_gg[i,j]=(|G[i-1,j]-G[i,j]|+|G[i+1,j]-G[i,j]|)/2 ・・・式１ Ch_gg[i,j]=(|G[i,j-1]-G[i,j]|+|G[i,j+1]-G[i,j]|)/2 ・・・式２ によって算出し、縦方向のRR間類似度成分Cv_rr[i,j]お
よび横方向のRR間類似度成分Ch_rr[i,j]を Cv_rr[i,j]=|R[i-1,j]-R[i+1,j]| ・・・式３ Ch_rr[i,j]=|R[i,j-1]-R[i,j+1]| ・・・式４ によって算出し、縦方向のBB間類似度成分Cv_bb[i,j]お
よび横方向のBB間類似度成分Ch_bb[i,j]を Cv_bb[i,j]=(|B[i-2,j]-B[i,j]|+|B[i+2,j]-B[i,j]|)/2 ・・・式５ Ch_bb[i,j]=(|B[i,j-2]-B[i,j]|+|B[i,j+2]-B[i,j]|)/2 ・・・式６ によって算出し、縦方向のRB間類似度成分Cv_rb[i,j]お
よび横方向のRB間類似度成分Ch_rb[i,j]を Cv_rb[i,j]=(|R[i-1,j]-B[i,j]|+|R[i+1,j]-B[i,j]|)/2 ・・・式７ Ch_rb[i,j]=(|R[i,j-1]-B[i,j]|+|R[i,j+1]-B[i,j]|)/2 ・・・式８ によって算出し、縦方向の類似度Cv[i,j]および横方向
の類似度Ch[i,j]を によって算出する。
【００２５】ただし、式９および式１０において、a1、
a2、a3、a4は、０または正の定数であり、規格化する場
合、「a1+a2+a3+a4=1」とする条件を付加しても良い。
ところで、式１および式２において、GG間類似度成分
は、補間対象格子点のＧ成分の値と、補間対象格子点に
最も近接する異色格子点のＧ成分の値とを同色同士で比
較することによって算出される。そのため、GG間類似度
成分は、エッジ部分などのように空間周波数が高い領域
の類似性を判定するのに最も重要な役割を果たす。しか
し、GG間類似度成分は、Ｇ成分以外の色成分のみが変動
するような領域では、類似性の判定ができない。そこ
で、第１の実施形態では、式９および式１０に示すよう
に、GG間類似度成分とRB間類似度成分とRR間類似度成分
とBB間類似度成分とを加重加算して類似度を算出するこ
とによって、GG間類似度成分の特性を生かしつつ、GG間
類似度成分では検出できない類似度情報（補間対象格子
点の類似性の特性を示す情報に相当する）を補うことが
できる。特に、RB間類似度成分は、互いに隣接する格子
点の色成分の値を比較した結果を示す値であるため、RR
間類似度成分やBB間類似度成分よりも、高周波情報を失
わずにGG間類似度成分に不足する類似度情報を補う効果
に優れているので、RR間類似度成分およびBB間類似度成
分を用いなくても良い。GG間類似度成分の特性を生かし
つつ、RB間類似度成分がGG間類似度成分の付加情報とし
て有効に作用する加重比率として「a1:a2≒5:1」などが
考えられる。
a2、a3、a4は、０または正の定数であり、規格化する場
合、「a1+a2+a3+a4=1」とする条件を付加しても良い。
ところで、式１および式２において、GG間類似度成分
は、補間対象格子点のＧ成分の値と、補間対象格子点に
最も近接する異色格子点のＧ成分の値とを同色同士で比
較することによって算出される。そのため、GG間類似度
成分は、エッジ部分などのように空間周波数が高い領域
の類似性を判定するのに最も重要な役割を果たす。しか
し、GG間類似度成分は、Ｇ成分以外の色成分のみが変動
するような領域では、類似性の判定ができない。そこ
で、第１の実施形態では、式９および式１０に示すよう
に、GG間類似度成分とRB間類似度成分とRR間類似度成分
とBB間類似度成分とを加重加算して類似度を算出するこ
とによって、GG間類似度成分の特性を生かしつつ、GG間
類似度成分では検出できない類似度情報（補間対象格子
点の類似性の特性を示す情報に相当する）を補うことが
できる。特に、RB間類似度成分は、互いに隣接する格子
点の色成分の値を比較した結果を示す値であるため、RR
間類似度成分やBB間類似度成分よりも、高周波情報を失
わずにGG間類似度成分に不足する類似度情報を補う効果
に優れているので、RR間類似度成分およびBB間類似度成
分を用いなくても良い。GG間類似度成分の特性を生かし
つつ、RB間類似度成分がGG間類似度成分の付加情報とし
て有効に作用する加重比率として「a1:a2≒5:1」などが
考えられる。
【００２６】また、RB間類似度成分のように、隣接する
格子点間で異なる色成分の値を用いて算出される類似度
成分としては、Ｒ成分とＧ成分とを用いて算出される類
似度成分や、Ｇ成分とＢ成分とを用いて算出される類似
度成分が考えられるが、これらの類似度成分のうちで
は、RB間類似度成分が最も優れている。前述したように
して縦方向の類似度Cv[i,j]および横方向の類似度Ch[i,
j]を算出すると、補間処理部５は、各々の方向に対する
類似性の強弱を以下のようにして判定する。なお、第１
の実施形態では、類似度の値が小さい方向に対して類似
性が強いことを示す。
格子点間で異なる色成分の値を用いて算出される類似度
成分としては、Ｒ成分とＧ成分とを用いて算出される類
似度成分や、Ｇ成分とＢ成分とを用いて算出される類似
度成分が考えられるが、これらの類似度成分のうちで
は、RB間類似度成分が最も優れている。前述したように
して縦方向の類似度Cv[i,j]および横方向の類似度Ch[i,
j]を算出すると、補間処理部５は、各々の方向に対する
類似性の強弱を以下のようにして判定する。なお、第１
の実施形態では、類似度の値が小さい方向に対して類似
性が強いことを示す。
【００２７】まず、補間処理部５は、縦方向と横方向と
の類似性が同程度であるか否かを判定するために、任意
の値Ｔについて、 |Cv[i,j]-Ch[i,j]|≦Ｔ ・・・条件１ が成り立つか否かを判定する（図４Ｓ１１）。すなわ
ち、第１の実施形態によれば、例えば、ノイズなどによ
って縦方向の類似度Cv[i,j]と横方向の類似度Ch[i,j]と
の間に微少な差違が生じていても、その差違によって類
似性が誤判定されることがない。
の類似性が同程度であるか否かを判定するために、任意
の値Ｔについて、 |Cv[i,j]-Ch[i,j]|≦Ｔ ・・・条件１ が成り立つか否かを判定する（図４Ｓ１１）。すなわ
ち、第１の実施形態によれば、例えば、ノイズなどによ
って縦方向の類似度Cv[i,j]と横方向の類似度Ch[i,j]と
の間に微少な差違が生じていても、その差違によって類
似性が誤判定されることがない。
【００２８】補間処理部５は、条件１が成り立つ場合、
縦方向と横方向との類似性が同程度である（以下、「縦
横類似」と称する）と判断し、条件１が成り立たない場
合、 Cv[i,j]＜Ch[i,j] ・・・条件２ が成り立つか否かを判定する（図４Ｓ１２）。補間処理
部５は、条件２が成り立つ場合には、縦方向の類似性が
強い（以下、「縦類似」と称する）と判断し、条件２が
成り立たない場合には、横方向の類似性が強い（以下、
「横類似」と称する）と判断する。
縦方向と横方向との類似性が同程度である（以下、「縦
横類似」と称する）と判断し、条件１が成り立たない場
合、 Cv[i,j]＜Ch[i,j] ・・・条件２ が成り立つか否かを判定する（図４Ｓ１２）。補間処理
部５は、条件２が成り立つ場合には、縦方向の類似性が
強い（以下、「縦類似」と称する）と判断し、条件２が
成り立たない場合には、横方向の類似性が強い（以下、
「横類似」と称する）と判断する。
【００２９】補間処理部５は、補間対象格子点が縦類似
の場合（図４Ｓ１２のＹＥＳ側）、縦方向に隣接する異
色格子点のＲ成分の値または色差を重み付けしつつ平均
（以下、「加重平均」と称する）した値（後述する演算
式によって算出されるRv[i,j]）を、補間対象格子点の
補間量R[i,j]とする（図４Ｓ１３）。
の場合（図４Ｓ１２のＹＥＳ側）、縦方向に隣接する異
色格子点のＲ成分の値または色差を重み付けしつつ平均
（以下、「加重平均」と称する）した値（後述する演算
式によって算出されるRv[i,j]）を、補間対象格子点の
補間量R[i,j]とする（図４Ｓ１３）。
【００３０】また、補間処理部５は、補間対象格子点が
横類似の場合（図４Ｓ１２のＮＯ側）、横方向に隣接す
る異色格子点のＲ成分の値または色差を加重平均した値
（後述する演算式によって算出されるRh[i,j]）を補間
対象格子点の補間量R[i,j]とする（図４Ｓ１４）。ここ
で、各々の方向に隣接する異色格子点のＲ成分の値また
は色差を加重平均してRv[i,j]やRh[i,j]を算出する過程
を示す。
横類似の場合（図４Ｓ１２のＮＯ側）、横方向に隣接す
る異色格子点のＲ成分の値または色差を加重平均した値
（後述する演算式によって算出されるRh[i,j]）を補間
対象格子点の補間量R[i,j]とする（図４Ｓ１４）。ここ
で、各々の方向に隣接する異色格子点のＲ成分の値また
は色差を加重平均してRv[i,j]やRh[i,j]を算出する過程
を示す。
【００３１】まず、補間処理部５は、補間対象格子点が
縦類似の場合、補間対象格子点の上方向の類似度Cup[i,
j]および下方向の類似度Cdn[i,j]を式１１および式１２
によって算出し、補間対象格子点が横類似の場合、補間
対象格子点の左方向の類似度Clt[i,j]および右方向の類
似度Crt[i,j]を式１３および式１４によって算出する。 Cup[i,j]=b1・|G[i-1,j]-G[i,j]|+b2・|R[i-1,j]-B[i,j]|+offset ・・・式１１ Cdn[i,j]=b1・|G[i+1,j]-G[i,j]|+b2・|R[i+1,j]-B[i,j]|+offset ・・・式１２ Clt[i,j]=b1・|G[i,j-1]-G[i,j]|+b2・|R[i,j-1]-B[i,j]|+offset ・・・式１３ Crt[i,j]=b1・|G[i,j+1]-G[i,j]|+b2・|R[i,j+1]-B[i,j]|+offset ・・・式１４ ただし、式１１〜式１４において、b1、b2は０または正
の定数であるが、式９および式１０と同様の理由によ
り、b1とb2との間の比率は「b1:b2≒5:1」程度に設定す
るのが良い。また、offsetは、正の定数であり、後述す
る加重係数を算出する際に分母が０になり発散すること
を防ぐために設けた値であり、通常は、１を用いる。
縦類似の場合、補間対象格子点の上方向の類似度Cup[i,
j]および下方向の類似度Cdn[i,j]を式１１および式１２
によって算出し、補間対象格子点が横類似の場合、補間
対象格子点の左方向の類似度Clt[i,j]および右方向の類
似度Crt[i,j]を式１３および式１４によって算出する。 Cup[i,j]=b1・|G[i-1,j]-G[i,j]|+b2・|R[i-1,j]-B[i,j]|+offset ・・・式１１ Cdn[i,j]=b1・|G[i+1,j]-G[i,j]|+b2・|R[i+1,j]-B[i,j]|+offset ・・・式１２ Clt[i,j]=b1・|G[i,j-1]-G[i,j]|+b2・|R[i,j-1]-B[i,j]|+offset ・・・式１３ Crt[i,j]=b1・|G[i,j+1]-G[i,j]|+b2・|R[i,j+1]-B[i,j]|+offset ・・・式１４ ただし、式１１〜式１４において、b1、b2は０または正
の定数であるが、式９および式１０と同様の理由によ
り、b1とb2との間の比率は「b1:b2≒5:1」程度に設定す
るのが良い。また、offsetは、正の定数であり、後述す
る加重係数を算出する際に分母が０になり発散すること
を防ぐために設けた値であり、通常は、１を用いる。
【００３２】次に、補間処理部５は、補間対象格子点が
縦類似の場合、上方向の加重係数Wup[i,j]および下方向
の加重係数Wdn[i,j]を Wup[i,j]=Cdn[i,j]/(Cup[i,j]+Cdn[i,j]) ・・・式１５ Wdn[i,j]=Cup[i,j]/(Cup[i,j]+Cdn[i,j]) ・・・式１６ によって算出し、補間対象格子点が横類似の場合、左方
向の加重係数Wlt[i,j]および右方向の加重係数Wrt[i,j]
を Wlt[i,j]=Crt[i,j]/(Clt[i,j]+Crt[i,j]) ・・・式１７ Wrt[i,j]=Clt[i,j]/(Clt[i,j]+Crt[i,j]) ・・・式１８ によって算出する。
縦類似の場合、上方向の加重係数Wup[i,j]および下方向
の加重係数Wdn[i,j]を Wup[i,j]=Cdn[i,j]/(Cup[i,j]+Cdn[i,j]) ・・・式１５ Wdn[i,j]=Cup[i,j]/(Cup[i,j]+Cdn[i,j]) ・・・式１６ によって算出し、補間対象格子点が横類似の場合、左方
向の加重係数Wlt[i,j]および右方向の加重係数Wrt[i,j]
を Wlt[i,j]=Crt[i,j]/(Clt[i,j]+Crt[i,j]) ・・・式１７ Wrt[i,j]=Clt[i,j]/(Clt[i,j]+Crt[i,j]) ・・・式１８ によって算出する。
【００３３】次に、補間処理部５は、Ｒ成分の値を加重
平均する際、補間対象格子点が縦類似の場合、Rv[i,j]
を Rv[i,j]=Wup[i,j]・R[i-1,j]+Wdn[i,j]・R[i+1,j] ・・・式１９ によって算出し、補間対象格子点が横類似の場合、Rh
[i,j]を Rh[i,j]=Wlt[i,j]・R[i,j-1]+Wrt[i,j]・R[i,j+1] ・・・式２０ によって算出する。また、補間処理部５は、色差を加重
平均する際、補間対象格子点が縦類似の場合、Rv[i,j]
を Rv[i,j]=Wup[i,j]・R[i-1,j]+Wdn[i,j]・R[i+1,j] +G[i,j]-Wup[i,j]・G[i-1,j]-Wdn[i,j]・G[i+1,j] ・・・式２１ によって算出し、補間対象格子点が横類似の場合、Rh
[i,j]を Rh[i,j]=Wlt[i,j]・R[i,j-1]+Wrt[i,j]・R[i,j+1] +G[i,j]-Wlt[i,j]・G[i,j-1]-Wrt[i,j]・G[i,j+1] ・・・式２２ によって算出する。
平均する際、補間対象格子点が縦類似の場合、Rv[i,j]
を Rv[i,j]=Wup[i,j]・R[i-1,j]+Wdn[i,j]・R[i+1,j] ・・・式１９ によって算出し、補間対象格子点が横類似の場合、Rh
[i,j]を Rh[i,j]=Wlt[i,j]・R[i,j-1]+Wrt[i,j]・R[i,j+1] ・・・式２０ によって算出する。また、補間処理部５は、色差を加重
平均する際、補間対象格子点が縦類似の場合、Rv[i,j]
を Rv[i,j]=Wup[i,j]・R[i-1,j]+Wdn[i,j]・R[i+1,j] +G[i,j]-Wup[i,j]・G[i-1,j]-Wdn[i,j]・G[i+1,j] ・・・式２１ によって算出し、補間対象格子点が横類似の場合、Rh
[i,j]を Rh[i,j]=Wlt[i,j]・R[i,j-1]+Wrt[i,j]・R[i,j+1] +G[i,j]-Wlt[i,j]・G[i,j-1]-Wrt[i,j]・G[i,j+1] ・・・式２２ によって算出する。
【００３４】また、補間処理部５は、補間対象格子点が
縦横類似の場合（図４Ｓ１１のＹＥＳ側）、縦方向に隣
接する異色格子点のＲ成分の値または色差を加重平均し
た値（Rv[i,j]に相当する）と、横方向に隣接する異色
格子点のＲ成分の値または色差を加重平均した値（Rh
[i,j]に相当する）とを平均することによって、補間対
象格子点の補間量R[i,j]を算出する（図４Ｓ１５）。
縦横類似の場合（図４Ｓ１１のＹＥＳ側）、縦方向に隣
接する異色格子点のＲ成分の値または色差を加重平均し
た値（Rv[i,j]に相当する）と、横方向に隣接する異色
格子点のＲ成分の値または色差を加重平均した値（Rh
[i,j]に相当する）とを平均することによって、補間対
象格子点の補間量R[i,j]を算出する（図４Ｓ１５）。
【００３５】なお、第１の実施形態では、座標[i,j]に
存在する格子点を補間対象格子点として扱っているが、
補間対象格子点を順次変更して、前述した処理（図４Ｓ
１〜Ｓ１５）を繰り返すことによって、全ての格子点の
補間量を算出することができる。すなわち、第１の実施
形態によれば、補間処理の対象となるカラー画像を予め
複数の領域に分割する必要があった従来の技術よりも、
簡単に補間処理を行うことができる。
存在する格子点を補間対象格子点として扱っているが、
補間対象格子点を順次変更して、前述した処理（図４Ｓ
１〜Ｓ１５）を繰り返すことによって、全ての格子点の
補間量を算出することができる。すなわち、第１の実施
形態によれば、補間処理の対象となるカラー画像を予め
複数の領域に分割する必要があった従来の技術よりも、
簡単に補間処理を行うことができる。
【００３６】また、第１の実施形態では、GG間類似度成
分とRB間類似度成分とRR間類似度成分とBB間類似度成分
とを加重加算して類似度を算出するため、GG間類似度成
分の特性を生かしつつGG間類似度成分に不足する類似度
情報が補われて、信頼性の高い類似度を算出することが
できる。また、第１の実施形態では、条件１が成り立つ
場合に縦横類似と判断するため、ノイズなどによる類似
性の誤判定を低減することができる。さらに、第１の実
施形態では、類似性が強いと判定された方向に隣接する
異色格子点のＲ成分の値または色差を加重平均した値を
補間対象格子点の補間量とするため、単純に平均する場
合と比べて、補間量の精度が向上する。
分とRB間類似度成分とRR間類似度成分とBB間類似度成分
とを加重加算して類似度を算出するため、GG間類似度成
分の特性を生かしつつGG間類似度成分に不足する類似度
情報が補われて、信頼性の高い類似度を算出することが
できる。また、第１の実施形態では、条件１が成り立つ
場合に縦横類似と判断するため、ノイズなどによる類似
性の誤判定を低減することができる。さらに、第１の実
施形態では、類似性が強いと判定された方向に隣接する
異色格子点のＲ成分の値または色差を加重平均した値を
補間対象格子点の補間量とするため、単純に平均する場
合と比べて、補間量の精度が向上する。
【００３７】すなわち、第１の実施形態によれば、精度
良く補間処理を行うことができる。なお、第１の実施形
態において、補間対象格子点に最も近接する異色格子点
は縦方向および横方向に存在するため、補間対象格子点
の類似性を判定する方向として、縦方向および横方向が
望ましいが、補間対象格子点の類似性を判定する方向
は、例えば、図３（ｂ）において、R[i-1,j+2],B[i,j],
R[i+1,j-2]を通る方向、R[i-2,j+1],B[i,j],R[i+2,j-1]
を通る方向、R[i-2,j-1],B[i,j],R[i+2,j+1]を通る方
向、R[i-1,j-2],B[i,j],R[i+1,j+2]を通る方向などであ
っても良い。
良く補間処理を行うことができる。なお、第１の実施形
態において、補間対象格子点に最も近接する異色格子点
は縦方向および横方向に存在するため、補間対象格子点
の類似性を判定する方向として、縦方向および横方向が
望ましいが、補間対象格子点の類似性を判定する方向
は、例えば、図３（ｂ）において、R[i-1,j+2],B[i,j],
R[i+1,j-2]を通る方向、R[i-2,j+1],B[i,j],R[i+2,j-1]
を通る方向、R[i-2,j-1],B[i,j],R[i+2,j+1]を通る方
向、R[i-1,j-2],B[i,j],R[i+1,j+2]を通る方向などであ
っても良い。
【００３８】以下、図面に基づいて第２の実施形態の詳
細を説明する。図５は、第２の実施形態における補間処
理の対象となる画像データの色成分の配列を示す図であ
る。図５において、ｉ、ｊは格子点の位置を示し、Ｒ、
Ｇ、Ｂは格子点の色を示し、各々の格子点には、（１−
ａ）に示す色成分と（１−ｂ）に示す色成分とが対応付
けられ、（２−ａ）に示す色成分と（２−ｂ）に示す色
成分とが対応付けられていることを示している。
細を説明する。図５は、第２の実施形態における補間処
理の対象となる画像データの色成分の配列を示す図であ
る。図５において、ｉ、ｊは格子点の位置を示し、Ｒ、
Ｇ、Ｂは格子点の色を示し、各々の格子点には、（１−
ａ）に示す色成分と（１−ｂ）に示す色成分とが対応付
けられ、（２−ａ）に示す色成分と（２−ｂ）に示す色
成分とが対応付けられていることを示している。
【００３９】すなわち、図５（１−ａ）および（１−
ｂ）に示す画像データは、ＲＧＢの各成分がベイア配列
された２つの画像データが組み合わされて、Ｇ成分およ
びＲ色成分を有する格子点と、Ｇ色成分およびＲ色成分
を有する格子点とがストライプ状に配置されていること
になる。また、図５（２−ａ）および（２ーｂ）に示す
画像データは、全ての格子点にＧ成分が配置され、Ｒ成
分とＢ成分とがストライプ状に配置されている（Ｇ成分
およびＲ色成分を有する格子点と、Ｇ色成分およびＲ色
成分を有する格子点とがストライプ状に配置されてい
る）。
ｂ）に示す画像データは、ＲＧＢの各成分がベイア配列
された２つの画像データが組み合わされて、Ｇ成分およ
びＲ色成分を有する格子点と、Ｇ色成分およびＲ色成分
を有する格子点とがストライプ状に配置されていること
になる。また、図５（２−ａ）および（２ーｂ）に示す
画像データは、全ての格子点にＧ成分が配置され、Ｒ成
分とＢ成分とがストライプ状に配置されている（Ｇ成分
およびＲ色成分を有する格子点と、Ｇ色成分およびＲ色
成分を有する格子点とがストライプ状に配置されてい
る）。
【００４０】なお、図５（１−ａ）および（１−ｂ）に
示す画像データと、図５（２−ａ）および（２ーｂ）に
示す画像データとは、一見、異なる配列のようである
が、Ｇ成分およびＲ色成分を有する格子点と、Ｇ色成分
およびＲ色成分を有する格子点とがストライプ状に配置
されているという点で共通している。ところで、第２の
実施形態では、第１の実施形態と同様に、説明を簡単に
するために、座標[i,j]に存在してＲ成分が欠落する格
子点を補間対象格子点として扱い、Ｒ成分を有する格子
点を異色格子点として扱い、各画素の色成分の値をR[i+
1,j]、G[i,j]、B[i,j]などのように示し、補間対象格子
点のＲ成分の値を補間量R[i,j]として算出するが、Ｂ成
分が欠落する格子点の補間量も同様に算出できる。ま
た、第２の実施形態では、図５（２−ｂ）に示すよう
に、B[i,j-1],B[i,j],B[i,j+1]などを通る方向を基準
（0゜方向）とし、左回りを正として、縦方向（90゜方
向に相当する）や斜め45゜方向や斜め135゜方向などの
方向を定義する。
示す画像データと、図５（２−ａ）および（２ーｂ）に
示す画像データとは、一見、異なる配列のようである
が、Ｇ成分およびＲ色成分を有する格子点と、Ｇ色成分
およびＲ色成分を有する格子点とがストライプ状に配置
されているという点で共通している。ところで、第２の
実施形態では、第１の実施形態と同様に、説明を簡単に
するために、座標[i,j]に存在してＲ成分が欠落する格
子点を補間対象格子点として扱い、Ｒ成分を有する格子
点を異色格子点として扱い、各画素の色成分の値をR[i+
1,j]、G[i,j]、B[i,j]などのように示し、補間対象格子
点のＲ成分の値を補間量R[i,j]として算出するが、Ｂ成
分が欠落する格子点の補間量も同様に算出できる。ま
た、第２の実施形態では、図５（２−ｂ）に示すよう
に、B[i,j-1],B[i,j],B[i,j+1]などを通る方向を基準
（0゜方向）とし、左回りを正として、縦方向（90゜方
向に相当する）や斜め45゜方向や斜め135゜方向などの
方向を定義する。
【００４１】なお、第２の実施形態において、画像取り
込み装置２が有する２つの撮像素子のＲＧＢの配列は、
図５に示すような補間処理の対象となる画像データが生
成できるような配列にする必要があり、例えば、２つの
撮像素子はＲＧＢのベイア配列されたり、一方の撮像素
子はＧのみから成り、他方の撮像素子はＲとＢとがスト
ライプ状に配列されることが考えられる。
込み装置２が有する２つの撮像素子のＲＧＢの配列は、
図５に示すような補間処理の対象となる画像データが生
成できるような配列にする必要があり、例えば、２つの
撮像素子はＲＧＢのベイア配列されたり、一方の撮像素
子はＧのみから成り、他方の撮像素子はＲとＢとがスト
ライプ状に配列されることが考えられる。
【００４２】図６は、第２の実施形態における補間処理
部の動作フローチャート（座標[i,j]に存在する補間対
象格子点の補間量R[i,j]を算出する際の動作フローチャ
ート）である。以下、第２の実施形態の動作を説明する
が、第２の実施形態では、図６を参照して補間対象格子
点の補間量を算出する動作を中心に説明する。
部の動作フローチャート（座標[i,j]に存在する補間対
象格子点の補間量R[i,j]を算出する際の動作フローチャ
ート）である。以下、第２の実施形態の動作を説明する
が、第２の実施形態では、図６を参照して補間対象格子
点の補間量を算出する動作を中心に説明する。
【００４３】まず、補間処理部５は、補間対象格子点の
縦方向の類似度C90[i,j]、斜め45゜方向の類似度C45[i,
j]、斜め135゜方向の類似度C135[i,j]を各々の方向に対
する複数の類似度成分を加重加算することによって算出
する（図６Ｓ２０）。例えば、補間処理部５は、縦方向
のGG間類似度成分C90_gg[i,j]、斜め45゜方向の類似度
成分C45_gg[i,j]、斜め135゜方向の類似度成分C135_gg
[i,j]を C90_gg[i,j]=(|G[i-1,j]-G[i,j]|+|G[i+1,j]-G[i,j]|)/2 ・・・式３０ C45_gg[i,j]=(|G[i-1,j+1]-G[i,j]|+|G[i+1,j-1]-G[i,j]|)/2 ・・・式３１ C135_gg[i,j]=(|G[i-1,j-1]-G[i,j]|+|G[i+1,j+1]-G[i,j]|)/2 ・・・式３２ によって算出し、縦方向のRB間類似度成分C90_rb[i,
j]、斜め45゜方向のRB間類似度成分C45_rb[i,j]、斜め1
35゜方向のRB間類似度成分C135_rb[i,j]を C90_rb[i,j]=(|R[i-1,j]-B[i,j]|+|R[i+1,j]-B[i,j]|)/2 ・・・式３３ C45_rb[i,j]=(|R[i-1,j+1]-B[i,j]|+|R[i+1,j-1]-B[i,j]|)/2 ・・・式３４ C135_rb[i,j]=(|R[i-1,j-1]-B[i,j]|+|R[i+1,j+1]-B[i,j]|)/2 ・・・式３５ によって算出し、縦方向のRR間類似度成分C90_rr[i,
j]、斜め45゜方向のRR間類似度成分C45_rr[i,j]、斜め1
35゜方向のRR間類似度成分C135_rr[i,j]を C90_rr[i,j]=|R[i-1,j]-R[i+1,j]| ・・・式３６ C45_rr[i,j]=|R[i-1,j+1]-R[i+1,j-1]| ・・・式３７ C135_rr[i,j]=|R[i-1,j-1]-R[i+1,j+1]| ・・・式３８ によって算出し、縦方向のBB間類似度成分C90_bb[i,
j]、斜め45゜方向のBB間類似度成分C45_bb[i,j]、斜め1
35゜方向のBB間類似度成分C135_bb[i,j]を C90_bb[i,j]=(|B[i-2,j]-B[i,j]|+|B[i+2,j]-B[i,j]|)/2 ・・・式３９ C45_bb[i,j]=(|B[i-2,j+2]-B[i,j]|+|B[i+2,j-2]-B[i,j]|)/2 ・・・式４０ C135_bb[i,j]=(|B[i-2,j-2]-B[i,j]|+|B[i+2,j+2]-B[i,j]|)/2 ・・・式４１ によって算出し、縦方向の類似度C90[i,j]、斜め45゜方
向の類似度C45[i,j]、斜め135゜方向の類似度C135[i,j]
を C90[i,j]=a1・C90_gg[i,j]+a2・C90_rb[i,j] +a3・C90_rr[i,j]+a4・C90_bb[i,j] ・・・式４２ C45[i,j]=a1・C45_gg[i,j]+a2・C45_rb[i,j] +a3・C45_rr[i,j]+a4・C45_bb[i,j] ・・・式４３ C135[i,j]=a1・C135_gg[i,j]+a2・C135_rb[i,j] +a3・C135_rr[i,j]+a4・C135_bb[i,j] ・・・式４４ によって算出する。
縦方向の類似度C90[i,j]、斜め45゜方向の類似度C45[i,
j]、斜め135゜方向の類似度C135[i,j]を各々の方向に対
する複数の類似度成分を加重加算することによって算出
する（図６Ｓ２０）。例えば、補間処理部５は、縦方向
のGG間類似度成分C90_gg[i,j]、斜め45゜方向の類似度
成分C45_gg[i,j]、斜め135゜方向の類似度成分C135_gg
[i,j]を C90_gg[i,j]=(|G[i-1,j]-G[i,j]|+|G[i+1,j]-G[i,j]|)/2 ・・・式３０ C45_gg[i,j]=(|G[i-1,j+1]-G[i,j]|+|G[i+1,j-1]-G[i,j]|)/2 ・・・式３１ C135_gg[i,j]=(|G[i-1,j-1]-G[i,j]|+|G[i+1,j+1]-G[i,j]|)/2 ・・・式３２ によって算出し、縦方向のRB間類似度成分C90_rb[i,
j]、斜め45゜方向のRB間類似度成分C45_rb[i,j]、斜め1
35゜方向のRB間類似度成分C135_rb[i,j]を C90_rb[i,j]=(|R[i-1,j]-B[i,j]|+|R[i+1,j]-B[i,j]|)/2 ・・・式３３ C45_rb[i,j]=(|R[i-1,j+1]-B[i,j]|+|R[i+1,j-1]-B[i,j]|)/2 ・・・式３４ C135_rb[i,j]=(|R[i-1,j-1]-B[i,j]|+|R[i+1,j+1]-B[i,j]|)/2 ・・・式３５ によって算出し、縦方向のRR間類似度成分C90_rr[i,
j]、斜め45゜方向のRR間類似度成分C45_rr[i,j]、斜め1
35゜方向のRR間類似度成分C135_rr[i,j]を C90_rr[i,j]=|R[i-1,j]-R[i+1,j]| ・・・式３６ C45_rr[i,j]=|R[i-1,j+1]-R[i+1,j-1]| ・・・式３７ C135_rr[i,j]=|R[i-1,j-1]-R[i+1,j+1]| ・・・式３８ によって算出し、縦方向のBB間類似度成分C90_bb[i,
j]、斜め45゜方向のBB間類似度成分C45_bb[i,j]、斜め1
35゜方向のBB間類似度成分C135_bb[i,j]を C90_bb[i,j]=(|B[i-2,j]-B[i,j]|+|B[i+2,j]-B[i,j]|)/2 ・・・式３９ C45_bb[i,j]=(|B[i-2,j+2]-B[i,j]|+|B[i+2,j-2]-B[i,j]|)/2 ・・・式４０ C135_bb[i,j]=(|B[i-2,j-2]-B[i,j]|+|B[i+2,j+2]-B[i,j]|)/2 ・・・式４１ によって算出し、縦方向の類似度C90[i,j]、斜め45゜方
向の類似度C45[i,j]、斜め135゜方向の類似度C135[i,j]
を C90[i,j]=a1・C90_gg[i,j]+a2・C90_rb[i,j] +a3・C90_rr[i,j]+a4・C90_bb[i,j] ・・・式４２ C45[i,j]=a1・C45_gg[i,j]+a2・C45_rb[i,j] +a3・C45_rr[i,j]+a4・C45_bb[i,j] ・・・式４３ C135[i,j]=a1・C135_gg[i,j]+a2・C135_rb[i,j] +a3・C135_rr[i,j]+a4・C135_bb[i,j] ・・・式４４ によって算出する。
【００４４】ただし、式４２〜式４４において、a1、a
2、a3、a4は、０または正の定数であり、規格化する場
合、「a1+a2+a3+a4=1」とする条件を付加しても良い。
このように、第２の実施形態では、GG間類似度成分とRB
間類似度成分とRR間類似度成分とBB間類似度成分とを加
重加算することによって類似度を算出しているため、第
１の実施形態と同様に、GG間類似度成分の特性を生かし
つつ、GG間類似度成分に不足する類似度情報を補うこと
ができる。
2、a3、a4は、０または正の定数であり、規格化する場
合、「a1+a2+a3+a4=1」とする条件を付加しても良い。
このように、第２の実施形態では、GG間類似度成分とRB
間類似度成分とRR間類似度成分とBB間類似度成分とを加
重加算することによって類似度を算出しているため、第
１の実施形態と同様に、GG間類似度成分の特性を生かし
つつ、GG間類似度成分に不足する類似度情報を補うこと
ができる。
【００４５】また、RB間類似度成分は、第１の実施形態
と同様に、RR間類似度成分やBB間類似度成分よりも、GG
間類似度成分に不足する類似度情報を補う効果が優れて
いるので、第２の実施形態では、式４２〜式４４におい
て、RR間類似度成分およびBB間類似度成分を用いてなく
ても良い。なお、GG間類似度成分の特性を生かしつつRB
間類似度成分がGG間類似度成分の付加情報として有効に
作用する加重比率として「a1:a2≒5:1」などが考えられ
る。
と同様に、RR間類似度成分やBB間類似度成分よりも、GG
間類似度成分に不足する類似度情報を補う効果が優れて
いるので、第２の実施形態では、式４２〜式４４におい
て、RR間類似度成分およびBB間類似度成分を用いてなく
ても良い。なお、GG間類似度成分の特性を生かしつつRB
間類似度成分がGG間類似度成分の付加情報として有効に
作用する加重比率として「a1:a2≒5:1」などが考えられ
る。
【００４６】次に、補間処理部５は、各々の方向に対す
る類似性の強弱を以下のようにして判定する。なお、第
２の実施形態では、第１の実施形態と同様に、類似度の
値が小さい方向に対して類似性が強いことを示す。ま
ず、補間処理部５は、縦方向の類似度C90[i,j]、斜め45
゜方向の類似度C45[i,j]、斜め135゜方向の類似度C135
[i,j]の最小値Cmin[i,j]を選択する（図６Ｓ２１）。
る類似性の強弱を以下のようにして判定する。なお、第
２の実施形態では、第１の実施形態と同様に、類似度の
値が小さい方向に対して類似性が強いことを示す。ま
ず、補間処理部５は、縦方向の類似度C90[i,j]、斜め45
゜方向の類似度C45[i,j]、斜め135゜方向の類似度C135
[i,j]の最小値Cmin[i,j]を選択する（図６Ｓ２１）。
【００４７】次に、補間処理部５は、任意の値Ｔについ
て、 |Cmin[i,j]-C90[i,j]|≦Ｔ ・・・条件３ が成り立つか否かを判定し（図６Ｓ２２）、条件３が成
り立つ場合、補間対象格子点が縦類似であると判断す
る。
て、 |Cmin[i,j]-C90[i,j]|≦Ｔ ・・・条件３ が成り立つか否かを判定し（図６Ｓ２２）、条件３が成
り立つ場合、補間対象格子点が縦類似であると判断す
る。
【００４８】すなわち、第２の実施形態では、縦方向の
類似性が最も強い場合に補間対象格子点が縦類似である
と判断するだけでなく、他の方向との類似性が近い場合
（縦方向の類似性と他の方向に対する類似性とが同程度
である場合）にも、縦類似であると判断する。その理由
は、第２の実施形態において、補間対象格子点に最も近
接する異色格子点は縦方向に隣接し、他の方向との類似
性が近い場合、縦方向に隣接する異色格子点のＲ成分の
値を参照して補間量を求めることが望ましいので、ノイ
ズなどによって各方向の類似度の間に生じた微少な差違
で縦以外の方向に対して類似性が強いと判定されること
を防ぐためである。
類似性が最も強い場合に補間対象格子点が縦類似である
と判断するだけでなく、他の方向との類似性が近い場合
（縦方向の類似性と他の方向に対する類似性とが同程度
である場合）にも、縦類似であると判断する。その理由
は、第２の実施形態において、補間対象格子点に最も近
接する異色格子点は縦方向に隣接し、他の方向との類似
性が近い場合、縦方向に隣接する異色格子点のＲ成分の
値を参照して補間量を求めることが望ましいので、ノイ
ズなどによって各方向の類似度の間に生じた微少な差違
で縦以外の方向に対して類似性が強いと判定されること
を防ぐためである。
【００４９】次に、補間処理部５は、条件３が成り立た
ない場合（図６Ｓ２２のＮＯ側）、 Cmin[i,j]＝C45[i,j] ・・・条件４ が成り立つか否かを判定する（図６Ｓ２３）。補間処理
部５は、条件４が成り立つ場合には、斜め45゜方向の類
似性が強い（以下、「斜め45゜類似」と称する）と判断
し、条件４が成り立たない場合には、斜め135゜方向の
類似性が強い（以下、「斜め135゜類似」と称する）と
判断する。
ない場合（図６Ｓ２２のＮＯ側）、 Cmin[i,j]＝C45[i,j] ・・・条件４ が成り立つか否かを判定する（図６Ｓ２３）。補間処理
部５は、条件４が成り立つ場合には、斜め45゜方向の類
似性が強い（以下、「斜め45゜類似」と称する）と判断
し、条件４が成り立たない場合には、斜め135゜方向の
類似性が強い（以下、「斜め135゜類似」と称する）と
判断する。
【００５０】補間処理部５は、補間対象格子点が縦類似
の場合（図６Ｓ２２のＹＥＳ側）、縦方向に隣接する異
色格子点のＲ成分の値または色差を加重平均した値（後
述する演算式によって算出されるR90[i,j]）を、補間対
象格子点の補間量R[i,j]とする（図６Ｓ２４）。また、
補間処理部５は、補間対象格子点が斜め45゜類似の場合
（図６Ｓ２３のＹＥＳ側）、斜め45゜方向に存在する異
色格子点のＲ成分の値または色差を加重平均した値（後
述する演算式によって算出されるR45[i,j]）を、補間対
象格子点の補間量R[i,j]とする（図６Ｓ２５）。
の場合（図６Ｓ２２のＹＥＳ側）、縦方向に隣接する異
色格子点のＲ成分の値または色差を加重平均した値（後
述する演算式によって算出されるR90[i,j]）を、補間対
象格子点の補間量R[i,j]とする（図６Ｓ２４）。また、
補間処理部５は、補間対象格子点が斜め45゜類似の場合
（図６Ｓ２３のＹＥＳ側）、斜め45゜方向に存在する異
色格子点のＲ成分の値または色差を加重平均した値（後
述する演算式によって算出されるR45[i,j]）を、補間対
象格子点の補間量R[i,j]とする（図６Ｓ２５）。
【００５１】さらに、補間処理部５は、補間対象格子点
が斜め135゜類似の場合（図６Ｓ２３のＮＯ側）、斜め1
35゜方向に存在する異色格子点のＲ成分の値または色差
を加重平均した値（後述する演算式によって算出される
R135[i,j]）を、補間対象格子点の補間量R[i,j]とする
（図６Ｓ２６）。
が斜め135゜類似の場合（図６Ｓ２３のＮＯ側）、斜め1
35゜方向に存在する異色格子点のＲ成分の値または色差
を加重平均した値（後述する演算式によって算出される
R135[i,j]）を、補間対象格子点の補間量R[i,j]とする
（図６Ｓ２６）。
【００５２】ここで、各々の方向に存在する異色格子点
のＲ成分の値または色差を加重平均してR90[i,j]、R45
[i,j]、R135[i,j]を算出する過程を示す。まず、補間処
理部５は、補間対象格子点が縦類似の場合、補間対象格
子点の上方向の類似度Cup90[i,j]および下方向の類似度
Cdn90[i,j]を式４５および式４６によって算出し、補間
対象格子点が斜め45゜類似の場合、補間対象格子点の右
上方向の類似度Cup45[i,j]および左下方向の類似度Cdn4
5[i,j]を式４７および式４８によって算出し、補間対象
格子点が斜め135゜類似の場合、補間対象格子点の左上
方向の類似度Cup135[i,j]および右下方向の類似度Cdn13
5[i,j]を式４９および式５０によって算出する。
のＲ成分の値または色差を加重平均してR90[i,j]、R45
[i,j]、R135[i,j]を算出する過程を示す。まず、補間処
理部５は、補間対象格子点が縦類似の場合、補間対象格
子点の上方向の類似度Cup90[i,j]および下方向の類似度
Cdn90[i,j]を式４５および式４６によって算出し、補間
対象格子点が斜め45゜類似の場合、補間対象格子点の右
上方向の類似度Cup45[i,j]および左下方向の類似度Cdn4
5[i,j]を式４７および式４８によって算出し、補間対象
格子点が斜め135゜類似の場合、補間対象格子点の左上
方向の類似度Cup135[i,j]および右下方向の類似度Cdn13
5[i,j]を式４９および式５０によって算出する。
【００５３】 Cup90[i,j]=b1・|G[i-1,j]-G[i,j]| +b2・|R[i-1,j]-B[i,j]|+offset ・・・式４５ Cdn90[i,j]=b1・|G[i+1,j]-G[i,j]| +b2・|R[i+1,j]-B[i,j]|+offset ・・・式４６ Cup45[i,j]=b1・|G[i-1,j+1]-G[i,j]| +b2・|R[i-1,j+1]-B[i,j]|+offset ・・・式４７ Cdn45[i,j]=b1・|G[i+1,j-1]-G[i,j]| +b2・|R[i+1,j-1]-B[i,j]|+offset ・・・式４８ Cup135[i,j]=b1・|G[i-1,j-1]-G[i,j]| +b2・|R[i-1,j-1]-B[i,j]|+offset ・・・式４９ Cdn135[i,j]=b1・|G[i+1,j+1]-G[i,j]| +b2・|R[i+1,j+1]-B[i,j]|+offset ・・・式５０ ただし、式４５〜式５０において、b1、b2は０または正
の定数であるが、第１の実施形態と同様に、b1とb2との
間の比率は「b1:b2≒5:1」程度に設定するのが良い。ま
た、offsetは、正の定数であり、後述する加重係数を算
出する際に分母が０になり発散することを防ぐために設
けた値であり、通常は、１を用いる。
の定数であるが、第１の実施形態と同様に、b1とb2との
間の比率は「b1:b2≒5:1」程度に設定するのが良い。ま
た、offsetは、正の定数であり、後述する加重係数を算
出する際に分母が０になり発散することを防ぐために設
けた値であり、通常は、１を用いる。
【００５４】次に、補間処理部５は、補間対象格子点が
縦類似の場合、上方向の加重係数Wup90[i,j]および下方
向の加重係数Wdn90[i,j]を Wup90[i,j]=Cdn90[i,j]/(Cup90[i,j]+Cdn90[i,j]) ・・・式５１ Wdn90[i,j]=Cup90[i,j]/(Cup90[i,j]+Cdn90[i,j]) ・・・式５２ によって算出し、補間対象格子点が斜め45゜類似の場
合、右上方向の加重係数Wup45[i,j]および左下方向の加
重係数Wdn45[i,j]を Wup45[i,j]=Cdn45[i,j]/(Cup45[i,j]+Cdn45[i,j]) ・・・式５３ Wdn45[i,j]=Cup45[i,j]/(Cup45[i,j]+Cdn45[i,j]) ・・・式５４ によって算出し、補間対象格子点が斜め135゜類似の場
合、左上方向の加重係数Wup135[i,j]および右下方向の
加重係数Wdn135[i,j]を Wup135[i,j]=Cdn135[i,j]/(Cup135[i,j]+Cdn135[i,j]) ・・・式５５ Wdn135[i,j]=Cup135[i,j]/(Cup135[i,j]+Cdn135[i,j]) ・・・式５６ によって算出する。
縦類似の場合、上方向の加重係数Wup90[i,j]および下方
向の加重係数Wdn90[i,j]を Wup90[i,j]=Cdn90[i,j]/(Cup90[i,j]+Cdn90[i,j]) ・・・式５１ Wdn90[i,j]=Cup90[i,j]/(Cup90[i,j]+Cdn90[i,j]) ・・・式５２ によって算出し、補間対象格子点が斜め45゜類似の場
合、右上方向の加重係数Wup45[i,j]および左下方向の加
重係数Wdn45[i,j]を Wup45[i,j]=Cdn45[i,j]/(Cup45[i,j]+Cdn45[i,j]) ・・・式５３ Wdn45[i,j]=Cup45[i,j]/(Cup45[i,j]+Cdn45[i,j]) ・・・式５４ によって算出し、補間対象格子点が斜め135゜類似の場
合、左上方向の加重係数Wup135[i,j]および右下方向の
加重係数Wdn135[i,j]を Wup135[i,j]=Cdn135[i,j]/(Cup135[i,j]+Cdn135[i,j]) ・・・式５５ Wdn135[i,j]=Cup135[i,j]/(Cup135[i,j]+Cdn135[i,j]) ・・・式５６ によって算出する。
【００５５】次に、補間処理部５は、Ｒ成分の値を加重
平均する際、補間対象格子点が縦類似の場合、R90[i,j]
を R90[i,j]=Wup90[i,j]・R[i-1,j]+Wdn90[i,j]・R[i+1,j] ・・・式５７ によって算出し、補間対象格子点が斜め45゜類似の場
合、R45[i,j]を R45[i,j]=Wup45[i,j]・R[i-1,j+1]+Wdn45[i,j]・R[i+1,j-1] ・・・式５８ によって算出し、補間対象格子点が斜め135゜類似の場
合、R135[i,j]を R135[i,j]=Wup135[i,j]・R[i-1,j-1]+Wdn135[i,j]・R[i+1,j+1] ・・・式５９ によって算出する。また、補間処理部５は、色差を加重
平均する際、補間対象格子点が縦類似の場合、R90[i,j]
を R90[i,j]=Wup90[i,j]・R[i-1,j]+Wdn90[i,j]・R[i+1,j] +G[i,j]-Wup90[i,j]・G[i-1,j]-Wdn90[i,j]・G[i+1,j] ・・・式６０ によって算出し、補間対象格子点が斜め45゜類似の場
合、R45[i,j]を R45[i,j]=Wup45[i,j]・R[i-1,j+1]+Wdn45[i,j]・R[i+1,j-1] +G[i,j]-Wup45[i,j]・G[i-1,j+1]-Wdn45[i,j]・G[i+1,j-1] ・・・式６１ によって算出し、補間対象格子点が斜め135゜類似の場
合、R135[i,j]を R135[i,j]=Wup135[i,j]・R[i-1,j-1]+Wdn135[i,j]・R[i+1,j+1] +G[i,j]-Wup135[i,j]・G[i-1,j-1]-Wdn135[i,j]・G[i+1,j+1] ・・・式６２ によって算出する。
平均する際、補間対象格子点が縦類似の場合、R90[i,j]
を R90[i,j]=Wup90[i,j]・R[i-1,j]+Wdn90[i,j]・R[i+1,j] ・・・式５７ によって算出し、補間対象格子点が斜め45゜類似の場
合、R45[i,j]を R45[i,j]=Wup45[i,j]・R[i-1,j+1]+Wdn45[i,j]・R[i+1,j-1] ・・・式５８ によって算出し、補間対象格子点が斜め135゜類似の場
合、R135[i,j]を R135[i,j]=Wup135[i,j]・R[i-1,j-1]+Wdn135[i,j]・R[i+1,j+1] ・・・式５９ によって算出する。また、補間処理部５は、色差を加重
平均する際、補間対象格子点が縦類似の場合、R90[i,j]
を R90[i,j]=Wup90[i,j]・R[i-1,j]+Wdn90[i,j]・R[i+1,j] +G[i,j]-Wup90[i,j]・G[i-1,j]-Wdn90[i,j]・G[i+1,j] ・・・式６０ によって算出し、補間対象格子点が斜め45゜類似の場
合、R45[i,j]を R45[i,j]=Wup45[i,j]・R[i-1,j+1]+Wdn45[i,j]・R[i+1,j-1] +G[i,j]-Wup45[i,j]・G[i-1,j+1]-Wdn45[i,j]・G[i+1,j-1] ・・・式６１ によって算出し、補間対象格子点が斜め135゜類似の場
合、R135[i,j]を R135[i,j]=Wup135[i,j]・R[i-1,j-1]+Wdn135[i,j]・R[i+1,j+1] +G[i,j]-Wup135[i,j]・G[i-1,j-1]-Wdn135[i,j]・G[i+1,j+1] ・・・式６２ によって算出する。
【００５６】なお、第２の実施形態では、座標[i,j]に
存在する格子点を補間対象格子点として扱っているが、
補間対象格子点を順次変更して、前述した処理（図６Ｓ
２０〜Ｓ２６）を繰り返すことによって、全ての格子点
の補間量を算出することができる。すなわち、第２の実
施形態によれば、補間処理の対象となるカラー画像を予
め複数の領域に分割する必要があった従来の技術より
も、簡単に補間処理を行うことができる。
存在する格子点を補間対象格子点として扱っているが、
補間対象格子点を順次変更して、前述した処理（図６Ｓ
２０〜Ｓ２６）を繰り返すことによって、全ての格子点
の補間量を算出することができる。すなわち、第２の実
施形態によれば、補間処理の対象となるカラー画像を予
め複数の領域に分割する必要があった従来の技術より
も、簡単に補間処理を行うことができる。
【００５７】また、第２の実施形態では、GG間類似度成
分とRB間類似度成分とRR間類似度成分とBB間類似度成分
とを加重加算して類似度を算出し、類似性が強いと判定
された方向に存在する異色格子点のＲ成分の値または色
差を加重平均した値を補間対象格子点の補間量とするた
め、第１の実施形態と同様に、精度良く補間処理を行う
ことができる。さらに、前述したように、第２の実施形
態では、条件３が成り立つ場合に縦類似であると判定す
ることによって、ノイズなどによる類似性の誤判定を低
減して、補間量の精度を向上することができる。
分とRB間類似度成分とRR間類似度成分とBB間類似度成分
とを加重加算して類似度を算出し、類似性が強いと判定
された方向に存在する異色格子点のＲ成分の値または色
差を加重平均した値を補間対象格子点の補間量とするた
め、第１の実施形態と同様に、精度良く補間処理を行う
ことができる。さらに、前述したように、第２の実施形
態では、条件３が成り立つ場合に縦類似であると判定す
ることによって、ノイズなどによる類似性の誤判定を低
減して、補間量の精度を向上することができる。
【００５８】すなわち、第２の実施形態によれば、精度
良く補間処理を行うことができる。なお、第２の実施形
態では、補間対象格子点の類似性を判定する方向とし
て、縦方向、斜め45゜方向、斜め135゜方向を採用した
が、補間対象格子点の類似性を判定する方向は、これら
の３つの方向に限らず、図７（１）のような５つの方向
や図７（２）のような７つの方向であっても良い。
良く補間処理を行うことができる。なお、第２の実施形
態では、補間対象格子点の類似性を判定する方向とし
て、縦方向、斜め45゜方向、斜め135゜方向を採用した
が、補間対象格子点の類似性を判定する方向は、これら
の３つの方向に限らず、図７（１）のような５つの方向
や図７（２）のような７つの方向であっても良い。
【００５９】また、前述した各実施形態では、類似性が
強い方向に存在する異色格子点のＲ成分の値または色差
を加重平均した値を補間対象格子点の補間量としている
が、類似性が強い方向に存在する異色格子点のＲ成分の
値または色差を単純に平均した値を補間対象格子点の補
間量としても良い。
強い方向に存在する異色格子点のＲ成分の値または色差
を加重平均した値を補間対象格子点の補間量としている
が、類似性が強い方向に存在する異色格子点のＲ成分の
値または色差を単純に平均した値を補間対象格子点の補
間量としても良い。
【００６０】以下、図面に基づいて第３の実施形態の詳
細を説明する。図８は、第３の実施形態の構成を示す図
である。図８において、機能が図１と同じものについて
は、同じ符号を付与して示し、構成の説明については省
略する。なお、図８に示す画像処理装置１０と図１に示
した画像処理装置１との構成の相違点は、画像処理装置
１０には補間処理部５が備えられていない点である。
細を説明する。図８は、第３の実施形態の構成を示す図
である。図８において、機能が図１と同じものについて
は、同じ符号を付与して示し、構成の説明については省
略する。なお、図８に示す画像処理装置１０と図１に示
した画像処理装置１との構成の相違点は、画像処理装置
１０には補間処理部５が備えられていない点である。
【００６１】また、図８において、パーソナルコンピュ
ータ２０は、ＣＰＵ２１、インタフェース部２２、ハー
ドディスク２３およびメモリ２４を有し、ＣＰＵ２１
は、バスを介してインタフェース部２２、ハードディス
ク２３およびメモリ２４に接続される。ところで、パー
ソナルコンピュータ２０には、ＣＤ−ＲＯＭなどの記録
媒体に記録された補間処理プログラム（前述した各実施
形態の補間処理部５と同様にして補間処理を実行する補
間処理プログラム）が予めインストールされているもの
とする。すなわち、ハードディスク２３には、このよう
な補間処理プログラムが実行可能な状態で格納されてい
る。
ータ２０は、ＣＰＵ２１、インタフェース部２２、ハー
ドディスク２３およびメモリ２４を有し、ＣＰＵ２１
は、バスを介してインタフェース部２２、ハードディス
ク２３およびメモリ２４に接続される。ところで、パー
ソナルコンピュータ２０には、ＣＤ−ＲＯＭなどの記録
媒体に記録された補間処理プログラム（前述した各実施
形態の補間処理部５と同様にして補間処理を実行する補
間処理プログラム）が予めインストールされているもの
とする。すなわち、ハードディスク２３には、このよう
な補間処理プログラムが実行可能な状態で格納されてい
る。
【００６２】以下、図８を参照して第３の実施形態の動
作を説明するが、第３の実施形態では、前述した各実施
形態と同一の動作の説明は省略する。まず、画像取り込
み装置２の各々の撮像素子を介して取り込まれた画像デ
ータは、画像処理装置１０内の前処理部３によってゲイ
ン補正やホワイトバランス補正やγ補正などの画像処理
が行われ、所定の画像ファイルの形式でメモリ４に記録
される。メモリ４に記録された画像ファイルは、インタ
フェース部７を介してパーソナルコンピュータ２０に供
給される。
作を説明するが、第３の実施形態では、前述した各実施
形態と同一の動作の説明は省略する。まず、画像取り込
み装置２の各々の撮像素子を介して取り込まれた画像デ
ータは、画像処理装置１０内の前処理部３によってゲイ
ン補正やホワイトバランス補正やγ補正などの画像処理
が行われ、所定の画像ファイルの形式でメモリ４に記録
される。メモリ４に記録された画像ファイルは、インタ
フェース部７を介してパーソナルコンピュータ２０に供
給される。
【００６３】パーソナルコンピュータ２０内のＣＰＵ２
１は、インタフェース部２２を介して画像ファイルを取
得すると、前述した補間処理プログラムを実行する。す
なわち、第３の実施形態では、前述した各実施形態と同
様の補間処理をパーソナルコンピュータ２０によって行
うことができる。
１は、インタフェース部２２を介して画像ファイルを取
得すると、前述した補間処理プログラムを実行する。す
なわち、第３の実施形態では、前述した各実施形態と同
様の補間処理をパーソナルコンピュータ２０によって行
うことができる。
【００６４】なお、第３の実施形態では、パーソナルコ
ンピュータ２０には、画像取り込み装置２の各々の撮像
素子を介して取り込まれた画像データが画像処理装置１
０を介して供給されているが、画像取り込み装置２内
に、ゲイン補正やホワイトバランス補正やγ補正などの
画像処理を行う機能が備えられている場合、画像データ
は、画像処理装置１０を介さずにパーソナルコンピュー
タ２０に供給されても良い。
ンピュータ２０には、画像取り込み装置２の各々の撮像
素子を介して取り込まれた画像データが画像処理装置１
０を介して供給されているが、画像取り込み装置２内
に、ゲイン補正やホワイトバランス補正やγ補正などの
画像処理を行う機能が備えられている場合、画像データ
は、画像処理装置１０を介さずにパーソナルコンピュー
タ２０に供給されても良い。
【００６５】
【発明の効果】以上説明したように、請求項１、請求項
２、請求項９および請求項１０に記載の発明は、異色格
子点（補間対象格子点に欠落する色成分を有する格子
点）が存在する複数の方向に対する類似度を算出し、類
似性が強い方向に存在する格子点の色成分の値に基づ
き、補間対象格子点の補間量を算出するので、各々の格
子点では、周辺部の画像の特徴に応じた補間量が得られ
る。そのため、請求項１、請求項２、請求項９および請
求項１０に記載の発明によれば、精度良く補間処理を行
うことができる。また、請求項１、請求項２、請求項９
および請求項１０に記載の発明では、各々の格子点毎
に、「類似度の算出・類似性の判定・補間量の算出」を
繰り返し行うことによって、補間処理が完了するため、
補間処理の対象となるカラー画像を予め複数の領域に分
割する必要があった従来の技術よりも、簡単に補間処理
を行うことができる。
２、請求項９および請求項１０に記載の発明は、異色格
子点（補間対象格子点に欠落する色成分を有する格子
点）が存在する複数の方向に対する類似度を算出し、類
似性が強い方向に存在する格子点の色成分の値に基づ
き、補間対象格子点の補間量を算出するので、各々の格
子点では、周辺部の画像の特徴に応じた補間量が得られ
る。そのため、請求項１、請求項２、請求項９および請
求項１０に記載の発明によれば、精度良く補間処理を行
うことができる。また、請求項１、請求項２、請求項９
および請求項１０に記載の発明では、各々の格子点毎
に、「類似度の算出・類似性の判定・補間量の算出」を
繰り返し行うことによって、補間処理が完了するため、
補間処理の対象となるカラー画像を予め複数の領域に分
割する必要があった従来の技術よりも、簡単に補間処理
を行うことができる。
【００６６】請求項３および請求項４に記載の発明で
は、複数の異色格子点のうち、補間対象格子点に近接す
る異色格子点が存在する方向に対する類似度を算出し、
類似性が強い方向に存在する格子点の色成分の値に基づ
き、補間対象格子点の補間量を算出するので、請求項１
や請求項２に記載の発明に比べて、補間処理の精度が向
上する。
は、複数の異色格子点のうち、補間対象格子点に近接す
る異色格子点が存在する方向に対する類似度を算出し、
類似性が強い方向に存在する格子点の色成分の値に基づ
き、補間対象格子点の補間量を算出するので、請求項１
や請求項２に記載の発明に比べて、補間処理の精度が向
上する。
【００６７】請求項５に記載の発明では、補間対象格子
点の類似度は、「第１の色成分から成る類似度成分」を
含むと共に、(a)「第２の色成分および第３の色成分か
ら成る類似度成分」と(b)「第２の色成分のみからなる
類似度成分」と(c)「第３の色成分のみから成る類似度
成分」との少なくとも一つを含むため、第１の色成分が
変動する領域だけでなく、第２の色成分や第３の色成分
が変動する領域に補間対象格子点が存在する場合であっ
ても、補間対象格子点の類似度を精度良く算出すること
ができる。
点の類似度は、「第１の色成分から成る類似度成分」を
含むと共に、(a)「第２の色成分および第３の色成分か
ら成る類似度成分」と(b)「第２の色成分のみからなる
類似度成分」と(c)「第３の色成分のみから成る類似度
成分」との少なくとも一つを含むため、第１の色成分が
変動する領域だけでなく、第２の色成分や第３の色成分
が変動する領域に補間対象格子点が存在する場合であっ
ても、補間対象格子点の類似度を精度良く算出すること
ができる。
【００６８】請求項６および請求項７に記載の発明は、
類似度算出手段によって算出された各々の方向に対する
類似度の差違が所定の閾値よりも小さい場合、各々の方
向に対する類似性が同程度であると判定するので、ノイ
ズなどによって各方向の類似度の間に微少な差違が生じ
ても、補間量を精度良く算出することができる。請求項
８に記載の発明では、類似性が強いと判定された方向に
存在する格子点が個別に有する色成分のうち、補間対象
格子点に欠落する色成分の値を重み付けを行いつつ平均
したり、その格子点が個別に有する２つの色成分の値に
よる色相を重み付けを行いつつ平均するため、単純に平
均する場合と比べて、補間量を精度良く算出することが
できる。
類似度算出手段によって算出された各々の方向に対する
類似度の差違が所定の閾値よりも小さい場合、各々の方
向に対する類似性が同程度であると判定するので、ノイ
ズなどによって各方向の類似度の間に微少な差違が生じ
ても、補間量を精度良く算出することができる。請求項
８に記載の発明では、類似性が強いと判定された方向に
存在する格子点が個別に有する色成分のうち、補間対象
格子点に欠落する色成分の値を重み付けを行いつつ平均
したり、その格子点が個別に有する２つの色成分の値に
よる色相を重み付けを行いつつ平均するため、単純に平
均する場合と比べて、補間量を精度良く算出することが
できる。
【図１】第１の実施形態および第２の実施形態の構成を
示す図である。
示す図である。
【図２】画像取り込み装置の例を示す図である。
【図３】第１の実施形態における補間処理の対象となる
画像データの色成分の配列を示す図である。
画像データの色成分の配列を示す図である。
【図４】第１の実施形態における補間処理部の動作フロ
ーチャートである。
ーチャートである。
【図５】第２の実施形態における補間処理の対象となる
画像データの色成分の配列を示す図である。
画像データの色成分の配列を示す図である。
【図６】第２の実施形態における補間処理部の動作フロ
ーチャートである。
ーチャートである。
【図７】第２の実施形態における類似性を判定する複数
の方向の他の例を示す図である。
の方向の他の例を示す図である。
【図８】第３の実施形態の構成を示す図である。
１、１０ 画像処理装置 ２ 画像取り込み装置 ３ 前処理部 ４、２４ メモリ ５ 補間処理部 ６ 表示部 ７、２２ インタフェース部 ２０ パーソナルコンピュータ ２１ ＣＰＵ ２３ ハードディスク
Claims (10)
- 【請求項１】 ３つの色成分から成る表色系によって示
され、第１の色成分および第２の色成分を有する格子点
と、第１の色成分および第３の色成分を有する格子点と
が市松模様状に配置されて成るカラー画像に対して、各
々の格子点に欠落する色成分の値に相当する補間量を算
出する補間処理を行う補間処理装置において、 補間処理の対象となる補間対象格子点を中心に対称とな
る位置に存在して補間対象格子点に欠落する色成分を有
する２つずつの異色格子点を通る複数の方向のうち、少
なくとも２つの方向に対する補間対象格子点の類似度を
各々の方向に存在する格子点の色成分の値を用いて算出
する類似度算出手段と、 前記類似度算出手段によって算出された少なくとも２つ
の方向に対する類似度に基づき、補間対象格子点毎に各
々の方向に対する類似性の強弱を判定する類似性判定手
段と、 前記類似性判定手段によって類似性が強いと判定された
方向に存在する格子点の色成分の値に基づき、補間対象
格子点の補間量を算出する補間量算出手段とを備えたこ
とを特徴とする補間処理装置。 - 【請求項２】 ３つの色成分から成る表色系によって示
され、第１の色成分および第２の色成分を有する格子点
と、第１の色成分および第３の色成分を有する格子点と
がストライプ状に配置されて成るカラー画像に対して、
各々の格子点に欠落する色成分の値に相当する補間量を
算出する補間処理を行う補間処理装置において、 補間処理の対象となる補間対象格子点を中心に対称とな
る位置に存在して補間対象格子点に欠落する色成分を有
する２つずつの異色格子点を通る複数の方向のうち、少
なくとも３つの方向に対する補間対象格子点の類似度を
各々の方向に存在する格子点の色成分の値を用いて算出
する類似度算出手段と、 前記類似度算出手段によって算出された少なくとも３つ
の方向に対する類似度に基づき、補間対象格子点毎に各
々の方向に対する類似性の強弱を判定する類似性判定手
段と、 前記類似性判定手段によって類似性が強いと判定された
方向に存在する格子点の色成分の値に基づき、補間対象
格子点の補間量を算出する補間量算出手段とを備えたこ
とを特徴とする補間処理装置。 - 【請求項３】 請求項１に記載の補間処理装置におい
て、 前記類似度算出手段は、 「補間対象格子点の上下に隣接する２つの異色格子点を
通る方向」と、「補間対象格子点の左右に隣接する２つ
の異色格子点を通る方向」との２つの方向に対する類似
度を算出することを特徴とする補間処理装置。 - 【請求項４】 請求項２に記載の補間処理装置におい
て、 前記類似度算出手段は、 「補間対象格子点の上下または左右に隣接する２つの異
色格子点を通る方向」と、「補間対象格子点の左上と右
下に隣接する２つの異色格子点を通る方向」と、「補間
対象格子点の右上と左下に隣接する２つの異色格子点を
通る方向」との３つの方向に対する類似度を算出するこ
とを特徴とする補間処理装置。 - 【請求項５】 請求項１ないし請求項４の何れか１項に
記載の補間処理装置において、 前記類似度算出手段は、 各々の方向に対する補間対象格子点の類似度の成分とし
て、「第１の色成分から成る類似度成分」を含むと共
に、 (a)「第２の色成分および第３の色成分から成る類似度
成分」と、 (b)「第２の色成分のみからなる類似度成分」と、 (C)「第３の色成分のみから成る類似度成分」との少な
くとも一つを含む類似度を算出することを特徴とする補
間処理装置。 - 【請求項６】 請求項１または請求項３に記載の補間処
理装置において、 前記類似方向判定手段は、 前記類似度算出手段によって算出された各々の方向に対
する類似度の差違が所定の閾値よりも小さい場合、各々
の方向に対する類似性が同程度であると判定し、 前記補間量算出手段は、 前記類似方向判定手段によって各々の方向に対する類似
性が同程度であると判定された場合、補間対象格子点の
近傍に存在する格子点の色成分の値を用いて、補間対象
格子点の補間量を算出することを特徴とする補間処理装
置。 - 【請求項７】 請求項２または請求項４に記載の補間処
理装置において、 前記類似方向判定手段は、 前記類似度算出手段によって算出された各々の方向に対
する類似度の差違が所定の閾値よりも小さい場合、各々
の方向に対する類似性が同程度であると判定し、 前記補間量算出手段は、 前記類似方向判定手段によって各々の方向に対する類似
性が同程度であると判定された場合、補間対象格子点に
最も近接する異色格子点が位置する方向に存在する格子
点の色成分の値を用いて、補間対象格子点の補間量を算
出することを特徴とする補間処理装置。 - 【請求項８】 請求項１ないし請求項５の何れか１項に
記載の補間処理装置において、 前記補間量算出手段は、 前記類似性判定手段によって類似性が強いと判定された
方向に存在する格子点が個別に有して補間対象格子点に
欠落する色成分の値、または、該格子点が個別に有する
２つの色成分の値による色相を、重み付けを行いつつ平
均することによって、補間対象格子点の補間量を算出す
ることを特徴とする補間処理装置。 - 【請求項９】 ３つの色成分から成る表色系によって示
され、第１の色成分および第２の色成分を有する格子点
と、第１の色成分および第３の色成分を有する格子点と
が市松模様状に配置されて成るカラー画像に対して、各
々の格子点に欠落する色成分の値に相当する補間量を算
出する補間処理をコンピュータに実行させる補間処理プ
ログラムを記録した記録媒体において、 補間処理の対象となる補間対象格子点を中心に対称とな
る位置に存在して補間対象格子点に欠落する色成分を有
する２つずつの異色格子点を通る複数の方向のうち、少
なくとも２つの方向に対する補間対象格子点の類似度を
各々の方向に存在する格子点の色成分の値を用いて算出
する類似度算出手順と、 前記類似度算出手順によって算出された少なくとも２つ
の方向に対する類似度に基づき、補間対象格子点毎に各
々の方向に対する類似性の強弱を判定する類似性判定手
順と、 前記類似性判定手順によって類似性が強いと判定された
方向に存在する格子点の色成分の値に基づき、補間対象
格子点の補間量を算出する補間量算出手順とを備えたこ
とを特徴とする補間処理をコンピュータに実行させる補
間処理プログラムを記録した記録媒体。 - 【請求項１０】 ３つの色成分から成る表色系によって
示され、第１の色成分および第２の色成分を有する格子
点と、第１の色成分および第３の色成分を有する格子点
とがストライプ状に配置されて成るカラー画像に対し
て、各々の格子点に欠落する色成分の値に相当する補間
量を算出する補間処理をコンピュータに実行させる補間
処理プログラムを記録した記録媒体において、 補間処理の対象となる補間対象格子点を中心に対称とな
る位置に存在して補間対象格子点に欠落する色成分を有
する２つずつの異色格子点を通る複数の方向のうち、少
なくとも３つの方向に対する補間対象格子点の類似度を
各々の方向に存在する格子点の色成分の値を用いて算出
する類似度算出手順と、 前記類似度算出手順によって算出された少なくとも３つ
の方向に対する類似度に基づき、補間対象格子点毎に各
々の方向に対する類似性の強弱を判定する類似性判定手
順と、 前記類似性判定手順によって類似性が強いと判定された
方向に存在する格子点の色成分の値に基づき、補間対象
格子点の補間量を算出する補間量算出手順とを備えたこ
とを特徴とする補間処理をコンピュータに実行させる補
間処理プログラムを記録した記録媒体。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP11213746A JP2001045509A (ja) | 1999-07-28 | 1999-07-28 | 補間処理装置および補間処理プログラムを記録した記録媒体 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP11213746A JP2001045509A (ja) | 1999-07-28 | 1999-07-28 | 補間処理装置および補間処理プログラムを記録した記録媒体 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2001045509A true JP2001045509A (ja) | 2001-02-16 |
| JP2001045509A5 JP2001045509A5 (ja) | 2006-09-21 |
Family
ID=16644342
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP11213746A Pending JP2001045509A (ja) | 1999-07-28 | 1999-07-28 | 補間処理装置および補間処理プログラムを記録した記録媒体 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2001045509A (ja) |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2003070010A (ja) * | 2001-08-24 | 2003-03-07 | Nikon Corp | ２板式画像取り込み装置 |
| WO2004088992A1 (ja) * | 2003-03-28 | 2004-10-14 | Olympus Corporation | 画像処理装置及び画像処理プログラム |
| JP2006174485A (ja) * | 2004-12-16 | 2006-06-29 | Samsung Electronics Co Ltd | カラーフィルタアレイのイメージデータを補間する方法及び装置 |
| JP2015035782A (ja) * | 2013-08-09 | 2015-02-19 | オリンパス株式会社 | 画像処理装置、撮像装置、顕微鏡システム、画像処理方法及び画像処理プログラム |
-
1999
- 1999-07-28 JP JP11213746A patent/JP2001045509A/ja active Pending
Cited By (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2003070010A (ja) * | 2001-08-24 | 2003-03-07 | Nikon Corp | ２板式画像取り込み装置 |
| WO2004088992A1 (ja) * | 2003-03-28 | 2004-10-14 | Olympus Corporation | 画像処理装置及び画像処理プログラム |
| US7454057B2 (en) | 2003-03-28 | 2008-11-18 | Olympus Corporation | Image processing apparatus and image processing program |
| JP2006174485A (ja) * | 2004-12-16 | 2006-06-29 | Samsung Electronics Co Ltd | カラーフィルタアレイのイメージデータを補間する方法及び装置 |
| JP4664810B2 (ja) * | 2004-12-16 | 2011-04-06 | 三星電子株式会社 | カラーフィルタアレイのイメージデータを補間する方法及び装置 |
| JP2015035782A (ja) * | 2013-08-09 | 2015-02-19 | オリンパス株式会社 | 画像処理装置、撮像装置、顕微鏡システム、画像処理方法及び画像処理プログラム |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP4815807B2 (ja) | Ｒａｗデータから倍率色収差を検出する画像処理装置、画像処理プログラム、および電子カメラ | |
| JP4816725B2 (ja) | 倍率色収差を画像解析する画像処理装置、画像処理プログラム、電子カメラ、および画像処理方法 | |
| JP5576812B2 (ja) | 画像処理装置、画像処理方法、画像処理プログラム、及び、撮像装置 | |
| US8837852B2 (en) | Apparatus and method for removing defective pixels | |
| WO2005101854A1 (ja) | 色ずれ補正機能を有する画像処理装置、画像処理プログラム、および電子カメラ | |
| JP3946866B2 (ja) | 画像信号処理装置及びプログラムを記録した媒体 | |
| JP2005159957A (ja) | 色補間方法 | |
| US9224212B2 (en) | Image processing apparatus and image processing method | |
| JP4329542B2 (ja) | 画素の類似度判定を行う画像処理装置、および画像処理プログラム | |
| JP4717371B2 (ja) | 画像処理装置および画像処理プログラム | |
| JP5841345B2 (ja) | 画像処理装置、画像処理方法、画像処理プログラム、及び、撮像装置 | |
| KR100915970B1 (ko) | 이미지 센서에 의해 획득된 영상의 컬러를 보정하는 방법및 장치 | |
| JP2001045509A (ja) | 補間処理装置および補間処理プログラムを記録した記録媒体 | |
| JP2000341701A (ja) | 補間処理装置および補間処理プログラムを記録した記録媒体 | |
| JP2000188762A (ja) | 補間処理装置および補間処理プログラムを記録した記録媒体 | |
| JP2000244934A (ja) | 補間処理装置および補間処理プログラムを記録した記録媒体 | |
| JP4380399B2 (ja) | 撮像装置、ノイズリダクション装置およびノイズリダクション方法並びにプログラム | |
| JP2013232829A (ja) | 画像処理装置、画像処理方法およびプログラム | |
| JP4605582B2 (ja) | ステレオ画像認識装置及びその方法 | |
| US20060197868A1 (en) | Apparatus for interpolating scanning line and method thereof | |
| JP2009206552A (ja) | 画像処理装置 | |
| JP2011171991A (ja) | 画像処理装置、電子機器、画像処理方法、および、画像処理プログラム | |
| JP2011155365A (ja) | 画像処理装置および画像処理方法 | |
| JP4748278B2 (ja) | 補間処理装置および補間処理プログラムを記録した記録媒体 | |
| JP6552248B2 (ja) | 画像処理装置及び方法、撮像装置、並びにプログラム |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20060613 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20060728 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20080917 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20090526 |
|
| A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20091006 |