JP3304162B2 - 傷補正回路 - Google Patents

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は、ＣＣＤ等の固体撮像素
子における欠陥画素の傷補正回路および固体撮像素子に
関する。

【０００２】

【従来の技術】従来より、ＣＣＤ等における欠陥画素の
傷補正処理は、欠陥画素の位置情報をあらかじめ記憶し
ておき、この傷情報に基いて欠陥画素の隣の画素から得
られる情報を単純に置き換えるいわゆる０次ホールド補
間により行ってきた。しかし、この補正方法では、図１
６に示すように、例えば、傷の直前に画像の濃淡の境界
があった場合に、欠陥補正処理を施した場所Ｘが目立つ
という問題点を有していた。

【０００３】かかる問題を解決するため、特開平３−２
９６３７４号に示されるように、欠陥画素近傍の複数の
画素から出力される映像信号のレベルを比較し、この比
較結果に基づいて補間に用いる画素の映像情報を選択
し、当該欠陥画素の位置における映像情報を補間するこ
とによる補正方法が提案されており、その具体的手段と
して、以下のような手段が開示されている。

【０００４】まず、図１７に示すように、欠陥画素Ｘの
１画素前と１画素後に隣接する画素ＤとＥ、その１水平
ライン前の３画素Ａ、ＢおよびＣ、の合わせて５画素の
信号データを取り込み、当該５画素についてそれぞれ隣
接する画素間（境界Ｉ、境界ＩＩ、境界ＩＩＩ、境界Ｉ
Ｖ）の信号レベル差の絶対値を算出する。次に、当該絶
対値データより、境界Ｉ−ＩＩ、境界Ｉ−ＩＩＩ、境界
ＩＶ−ＩＩ、境界ＩＶ−ＩＩＩのそれぞれについて、隣
接画素間の出力信号レベル差の絶対値の大小比較を行
い、当該結果をラッチすることにより得られるラッチ出
力をもとに、４種類の制御信号を出力する。この制御信
号は、水平、左上がり、右上がり、垂直の４種類のスト
ライプパターンに対応しており、このように識別された
ストライプパターンに対応して、図１８に示すように、
垂直パターンの時には画素Ｂ、左上がりパターンの時に
は画素Ｄ、そして右上がりパターンの時には画素Ｅの出
力データによる０次ホールドを行い、また水平パターン
の時には画素Ｄと画素Ｅの出力データの平均と置き換え
ることにより、欠陥画素の傷補正を行っている。

【０００５】

【発明が解決しようとする課題】しかしながら、上記従
来の傷補正回路や、特開平３−２９６３７４号に示され
る映像情報補間回路を用いた場合、欠陥のある画素の位
置についてあらかじめ記憶しておき、その位置情報に基
づいて傷補正を行っている。したがって、位置情報の記
憶後に生ずる傷、例えば、常温では検出されないが、機
械作動に伴う温度変化により画素が高温になったときに
のみ発生する傷や、経年変化によって発生する傷等は、
機械動作中には検出することができず、全く補正されな
いという問題点があった。さらに、かかる記憶のために
は、場合によってはＣＣＤの総画素数に相当する膨大な
記憶容量が必要となり、かかる点についても、同じく特
開平３−２９６３７４号において指摘されている。

【０００６】また、特開平３−２９６３７４号において
提案される補間回路は、欠陥画素近傍の複数の画素から
出力される映像信号のレベルから、欠陥画素以外の隣接
画素間の信号レベル差の絶対値を算出した上で、当該絶
対値データの大小比較を用いることにより、間接的に欠
陥画素近傍における被写体像のパターンを識別している
ため、識別しうる被写体像のパターンは、水平、左上が
り、右上がり、垂直のストライプパターン４種類に限ら
れる。したがって、例えば、図１９に示すように欠陥画
素近傍で複数の境界が交差する等の複雑な境界があった
場合には、適切に境界を認識できず、十分かつ細やかな
補正ができないという問題が生ずる。

【０００７】本発明はこのような従来の問題を解決する
ものであり、後天的に発生した傷の検出を可能にする傷
判定回路を提供するものであり、また周辺画素境界検出
の必要なく、目立つことのない滑らかな傷補正を簡便に
行い、さらに、欠陥画素近傍で境界が交差するなど複雑
な境界が存在する場合にも適切な傷補正を行いうる優れ
た傷補正回路を提供するものである。

【０００８】

【課題を解決するための手段】上記目的を達成するため
に、一の画素が出力する信号とこの画素周辺に位置する
複数の周辺画素から出力される信号とを各々比較し、第
１の閾値に基づいて相関関係の有無から傷を判断する傷
判断手段と、前記複数の周辺画素のうち隣接する周辺画
素が出力する信号からこれらの周辺画素間における画素
の境界を第２の閾値に基づいて境界を検出する境界検出
手段と、この境界検出手段により検出された周辺画素間
の境界の組合せに基づき補間方法の選択を行う補間手段
と、前記傷判断手段による前記画素が傷であるとの判断
に基づき保管手段の出力への切替を行う切替手段とを備
え、前記第2の閾値を前記第１の閾値と等しいかあるい
は大きい値としたこと特徴とする傷補正回路とするもの
である。また、撮像素子における一の画素とこの画素周
辺に位置する複数の周辺画素から出力される信号を取り
込む画素取込手段と、この画素取込手段により傷を判断
する傷判断手段と、前記画素取込手段により取り込まれ
た前記複数の周辺画素のうち隣接する周辺画素が出力す
る信号からこれらの周辺画素間における画素の境界を検
出する境界検出手段と、この境界検出手段により検出さ
れた周辺画素間の境界に基づいて予め設定された選択基
準により補間方法を選択する補間方法選択手段と、この
補間方法選択手段の出力に基づいて補間出力を出力する
補間手段と、この補間手段の出力と前記画素取込手段に
より取り込まれた一の画素の出力とを比較し、前記傷判
断手段による前記画素が傷でないとの判断に基づき補間
方法の選択の適否を判断する比較手段とを備え、この比
較手段の出力に基づき、前記補間方法選択基準を更新す
ることを特徴とする傷補正回路とするものである。

【０００９】

【００１０】

【００１１】

【作用】したがって、傷判断に用いられる第１の閾値と
境界検出に用いられる第２の閾値とにおいて、第２の閾
値を第１の閾値と等しいかあるいは大きい値とすること
で、適切な補正が可能となる。また、ＣＣＤ動作中にも
補間方法選択基準を更新することがてきるので、様々な
入力画像に応じたよりきめ細やかなで、適正な補正が可
能となる。

【００１２】

【００１３】

【００１４】

【実施例】図１は本発明に関する第１の実施例の構成を
示すものである。図１において、１０はデジタル画像の
入力から３×３のウインドウに相当する９つの画素毎の
信号を取り込む画素取込回路、１１は画素取込回路１０
で取り込まれた９つの画素から出力される信号から中心
画素が傷かどうかを判断する傷判断回路である。

【００１５】次に、この実施例における動作について説
明する。まず、画素から出力される信号の取り込み方法
について説明する。図２は、画素取込回路１０の要部で
ある。図２において５１〜５６は１画素遅延回路であ
り、５７および５８は１水平走査遅延回路（１Ｈ遅延回
路）である。まず、第１の画素から出力される信号を取
り込んだ後、１画素遅延回路５１の働きにより、当該第
１の画素の水平方向に隣接する第２の画素から出力され
る信号を取り込み、さらに、１画素遅延回路５２の働き
により、当該第２の画素の水平方向に隣接する第３の画
素から出力される信号を取り込む。また、１Ｈ遅延回路
５７の働きにより、第１の画素の垂直方向に隣接する第
４の画素から出力される信号を取り込み、その後、１画
素遅延回路５３および５４の働きにより、順次第５、第
６の画素から出力される信号を取り込む。同様にして、
１Ｈ遅延回路５８の働きにより、第４の画素の垂直方向
に隣接する第７の画素から出力される信号を取り込み、
その後、１画素遅延回路５５および５６の働きにより、
順次第８、第９の画素から出力される信号を取り込む。

【００１６】したがって、画素取込回路１０からは、３
×３のウインドウに相当する９つの画素毎の信号を取り
込み、出力することとなる。すなわち、図３に示すよう
に、中心画素に相当するＸ１１から信号ｘ１１、および
周辺画素に相当するＸ００〜Ｘ０２、Ｘ１０、Ｘ１２、
Ｘ２０〜Ｘ２２から信号ｘ００〜ｘ０２、ｘ１０、ｘ１
２、ｘ２０〜ｘ２２がそれぞれ出力される。

【００１７】次に、傷検出方法について説明する。傷判
断回路１１では、かかる出力を基に、中心画素Ｘ１１の
信号値（ｘ１１）と周辺８画素の信号値（ｘ００〜ｘ０
２、ｘ１０、ｘ１２、ｘ２０〜ｘ２２）とについて各々
その差を求める。これらの差が、ある所定の値（「しき
い値１」とする）よりも大きい場合、中心画素はその周
辺画素と相関がないと判断する。ここで、しきい値１
は、各画素の絵柄に違いがあると、肉眼で識別できる程
度の各信号値間の差であり、画素から出力される信号に
含まれるノイズ等を考慮した上で、決定される。かかる
方法により、中心画素と周辺８画素各々との相関関係を
調べ、この中心画素が周辺８画素すべてと相関がないと
判断された時、中心画素は傷であると判断する。

【００１８】このように、周辺画素との相関関係を基に
傷検出を行うことにより、デジタル画像の入力と同時に
リアルタイムに傷の検出を行うことが可能となるため、
傷のある画素の位置をあらかじめ検出し記憶しておく必
要がなく、したがって記憶部を有する必要がなくなる。
さらに、これまで検知することができなかった、動作中
の温度変化に伴い発生する傷や経年変化により発生する
傷等についても検知することが可能となる。

【００１９】図４は、発明に関する第２の実施例の構成
を示すものである。図４において、１０および１１は図
１と同一であるので説明を省略する。２１は画素取込回
路１０から出力された信号を加算しその平均をとる演算
器、２２は傷判断回路１１の出力に基づき、補間出力を
出力するか中心画素から出力される信号を出力するかを
切り替える切替回路である。

【００２０】次に、本実施例の動作について説明する。
演算器２１において、画素取込回路１０から出力される
信号のうち中心画素に相当するＸ１１から出力される信
号ｘ１１以外の信号、すなわち周辺画素に相当する信号
（ｘ００〜ｘ０２、ｘ１０、ｘ１２、ｘ２０〜ｘ２２）
をもとに各信号値の総和をとり、その平均値を出す。演
算器２１はかかる演算結果を補間出力ｐとして出力す
る。切替回路２２は傷判断回路１１の出力に基づき、傷
判断回路１１において中心画素に相当するＸ１１が傷で
あると判断した場合には補間出力ｐを出力し、傷でない
と判断した場合には画素Ｘ１１の出力する信号ｘ１１を
出力する。

【００２１】なお本実施例における傷検出については、
画素取込回路１０を共用でき、かつ欠陥画素の検出を自
動的に行いながら傷補正が可能となることから、請求項
１の発明に関する傷検出回路を利用しているが、従来例
のようにあらかじめ記憶された位置情報を利用してもよ
い。この場合位置情報に基づき傷のある画素を中心画素
とするときにのみ本実施例にかかる傷補正回路による傷
補正を行えばよい。

【００２２】このように、周辺画素から出力される信号
の平均値を補間出力とすることにより、欠陥補正処理を
施した場所が目立つことのない傷補正を、周辺画素の境
界を検出する必要もなく簡便に行うことが可能となる。

【００２３】図５は、本発明に関する第３実施例の構成
を示すものである。図５において、１０、１１および２
２は図１および図４と同一であるので説明を省略する。
３１は周辺画素から出力される８つの信号から隣接する
周辺画素間の境界を求める境界検出回路、３２は境界検
出回路３１からの入力に基づき補間方法を出力する補間
回路である。

【００２４】次に、本実施例の動作について説明する。
まず、境界検出方法について説明する。図６は境界検出
回路３１の要部である。図６において、６１〜６８は相
関検出回路である。境界検出回路３１では、周辺画素取
込回路１０から中心画素Ｘ１１以外の周辺画素から出力
された信号を、８つの相関検出回路６１〜６８に入力す
る。すなわち、信号ｘ００と信号ｘ０１を相関検出回路
６１に入力し、信号ｘ０１と信号ｘ０２を相関検出回路
６２に入力し、以下同様に、相関検出回路６８まで、図
６に示されるように隣合う２つの画素から出力される信
号を入力する。

【００２５】相関検出回路６１〜６８では、入力された
２つの信号の差を求め、これらの差がある所定の値
（「しきい値２」とする）よりも大きい場合、これら２
つの画素は相関がないと判断する。ここで、しきい値２
は、しきい値１と同様に肉眼により各々の画素の絵柄に
違いがあると認められる場合に生ずる各信号値間の差に
より決定されるが、特にしきい値１としきい値２を関係
づける必要はない。ただし以下に示すように、しきい値
１と等しいか、しきい値１よりも大きい値であれば、よ
り効果的な補正が可能となる。

【００２６】すなわち、しきい値の設定には、各々の画
素に関係する信号に含まれるノイズ等が考慮されている
が、温度変化等よりノイズが想定された値より大きい場
合の生ずるおそれがある。このような場合、各々の画素
の絵柄にそれほどの差異がなくとも、信号値の差異が大
きくなり、しきい値を超えて、２つの画素に相関がない
と誤って判断されることとなる。ここで、本発明の傷補
正回路においては、後述のように、検出された境界に基
づき傷の補間を行っているため、境界を誤って検出する
と傷補間が正常に行えないこととなり、不自然な画像を
提供することとなる。一方、傷補間が正常になされてい
れば、傷判断回路１１において傷判断が誤ってなされて
も、それほど不自然な画像とはならない。したがって、
誤検出が発生することがあっても、誤補間が発生するこ
とのないように、しきい値２をしきい値１と等しいか、
しきい値１よりも大きい値とすることにより、より適切
な補正を行うことが可能となる。

【００２７】相関検出回路６１〜６８において、相関が
ないと判断した場合には、それぞれ信号［１］を出力
し、境界が存在することを示す。ここで、Ａ〜Ｈはどの
周辺画素の間に境界があるのかを示すもので、図７にそ
れぞれの位置を示す。例えば、Ａが［１］を出力する場
合は、信号ｘ００と信号ｘ０１の差がしきい値２より大
きいこと、すなわち、周辺画素Ｘ００とＸ０１との間に
境界が存在することを示している。

【００２８】次に本実施例で採用する補間方法について
説明する。本実施例では、補間出力ｙとして、図８に示
されるように４つの補間出力ｙ１〜ｙ４を用いる。ｙ１
は、補間の必要な傷のある画素（Ｘ１１とする）の水平
方向の両隣の画素（Ｘ１０とＸ１２）より出力される信
号を平均した出力である。ｙ２は、Ｘ１１の垂直方向の
両隣の画素（Ｘ０１とＸ２１）より出力される信号を平
均した出力である。ｙ３は、Ｘ１１の右下がりの対角線
上の両隣の画素（Ｘ００とＸ２２）より出力される信号
を平均した出力である。ｙ４は、Ｘ１１の右上がりの対
角線上の両隣の画素（Ｘ０２とＸ２０）より出力される
信号を平均した出力である。

【００２９】なお、このような４つの補間方法のほか
に、例えば、すでに入力されている欠陥画素周辺の８画
素を補間出力として用いたり、前記４つの補間出力ｙ１
〜ｙ４と周辺８画素との双方を用いる場合等が考えられ
る。

【００３０】次に補間方法の選択方法について説明す
る。境界検出回路３１により検出された各周辺画素間の
８つの境界位置（Ａ〜Ｈ）に存在する境界は、ＣＣＤ等
に入力される映像情報に基づき２〜８の境界の組合せと
なり、例えば、［Ａ，Ｃ，Ｆ］や［Ａ，Ｂ，Ｇ，Ｈ］等
のいくつかの組合せにより構成される。その組合せの数
は、境界が２つもしくは７つ検出された場合に各２８通
り、境界が３つもしくは６つ検出された場合に各５６通
り、境界が４つもしくは５つ検出された場合に各７０通
り、さらに境界が８つ検出された場合が１通りの計３０
９通りとなる。

【００３１】このような境界の組合せに対する補間方法
の選択は、補間回路３２において、各々の境界の組合せ
に対して出力すべき補間方法をあらかじめ一義的に設定
しておく。以下に境界の組合せと補間方法との関係につ
いて具体的に説明する。

【００３２】境界検出回路３１により検出された境界
が、図９（ａ）に示すように［Ａ，Ｃ，Ｆ］である場
合、現実の周辺画像境界は、図９（ｂ）、図９（ｃ）等
のいくつかの場合が想定される。しかしながら、これら
の想定された周辺画像境界の中で、検出された境界の組
合せに対応するもっとも頻度が高く一般的な周辺画像境
界は、経験則上特定されうる。かかる特定に基づき、境
界検出回路３１により検出された境界の組合せに対して
出力すべき補間方法を一義的に決定する。例えば前述の
境界の組合せの場合であれば、図９（ｂ）の周辺画像境
界が採用され、その補間に適切な補間出力ｙ３を用いる
と定めておく。

【００３３】以上のように決定された補間出力につい
て、切替回路２２は傷判断回路１１の出力に基づき、傷
判断回路１１において中心画素に相当するＸ１１が傷で
あると判断した場合には補間出力ｙを出力し、傷でない
と判断した場合には画素Ｘ１１の出力する信号ｘ１１を
出力する。なお傷検出について、請求項１の発明に関す
る傷検出回路を利用することによる利点ならびに従来例
を利用できることについては前記第２の実施例と同様で
ある。

【００３４】このように境界検出回路３１により検出さ
れた境界の３０９通りの組合せに対する補間方法をすべ
て一義的に決定しておくことにより、欠陥画素近傍にお
いて複雑な画像境界が存在する場合においても、効果的
な傷補正が可能となる。

【００３５】図１０は、本発明に関する第４の実施例の
構成を示すものである。図１０において、１０、１１、
２２および３１は図１、図４および図５と同一であるの
で説明を省略する。４１は境界検出回路３１で検出され
た周辺画素間の境界から周辺画像の境界をパターン化す
る画像境界識別層、４２は画像境界識別層からの出力に
基づき中心画素に対する最適な補間方法を選択する補間
方法選択層、４３は補間方法選択層１４からの入力に基
づき補間方法を出力する補間回路、４４は画像境界識別
層４１と補間方法選択層４２から成る補間方法選択回路
である。

【００３６】境界検出回路３１により検出された境界Ａ
〜Ｈに関する信号は、画像境界識別層４１に入力され
る。図１１に、画像境界識別層４１の要部を示す。画像
境界識別層４１では、図１１に示されるように、８つの
入力信号のうちの２つずつが２８個のＡＮＤ回路７１〜
９８によって結線されており、例えば、Ａ，Ｆに関係す
る信号が［１］と入力された場合には、ＡＮＤ回路７１
より信号ｕ１が、Ａ，Ｂに関係する信号が［１］と入力
された場合には、ＡＮＤ回路８５より信号ｕ２５が、と
いうように、ＡＮＤ回路７１〜９８より信号が出力され
る。これらの出力信号ｕ１〜ｕ２８は、図１２に示すよ
うに、周辺画素の集合による３×３のウインドウに対し
て得られる２８通りの周辺画像の境界を表している。こ
のように、画像境界識別層３１の働きにより、周辺画素
間の境界を利用して直接的に周辺画像の境界を識別する
ことが可能であり、また、周辺の８画素を基準として境
界パターンを認識するために、複雑な境界パターンであ
っても容易に識別することが可能となる。

【００３７】では、境界検出回路３１の出力信号と画像
境界識別層４１の出力信号との関係を具体的に説明す
る。まず、境界検出回路３１により検出された境界に関
する信号の２つが［１］である場合には、画像境界識別
層４１は、これら２つの境界に対応する２８通りの周辺
画像境界うちの１つを出力する。また、境界検出回路３
２により検出された境界に関する信号の３つ以上が
［１］である場合には、画像境界識別層４１は、２８通
りの周辺画像境界のうちの複数を出力する。例えば、境
界検出回路３１により図７に示す境界Ａ，Ｅ，Ｆ，Ｈに
関係する信号が［１］と出力された場合、画像境界識別
層４２からは、周辺画像の境界に関する信号ｕ９（境界
Ａ−Ｅ），ｕ１（境界Ａ−Ｆ），ｕ２１（境界Ａ−
Ｈ），ｕ２７（境界Ｅ−Ｆ），ｕ６（境界Ｅ−Ｈ），ｕ
２０（境界Ｆ−Ｈ）が出力され、６通りの境界を有する
ことを示している。

【００３８】次に、補間方法について説明する。補間方
法選択層４２では、画像境界識別層４１からの出力ｕ１
〜ｕ２８を入力とし、画像境界識別層４１で決定された
これらの境界を基に補間方法を決定し、補間回路４３よ
り補間方法を出力する。補間方法選択層４２の要部を図
１３に示す。ここで、８１〜８４は、周辺画像の境界に
関する信号ｕ１〜ｕ２８に係数による重み付けがなされ
た信号を加算する加算器である。かかる加算器における
演算結果を比較し、その中で最大値となる加算器から信
号が出力される。

【００３９】本実施例の補間出力として、前記第３の実
施例と同様に４つの補間出力ｙ１〜ｙ４を用いる。な
お、この４つの補間方法のほかに、すでに入力されてい
る欠陥画素周辺の８画素や、前記４つの補間出力ｙ１〜
ｙ４と周辺８画素との双方の１２通りを補間出力として
用いることが可能なことは、前記第３の実施例と同様で
ある。

【００４０】では、補間方法選択層４２での補間方法の
選択方法について説明する。補間方法選択層４２は、図
１３に示すように、［０］か［１］の値を持つ画像境界
識別層４１からの入力ｕｉ（ｉ＝１〜２８）に対して、
補間出力ｙｊ（ｊ＝１〜４）を出力するために、重み付
け係数ｋ（ｉ，ｊ）を掛けた値が、それぞれの加算器８
１〜８４において加算される。この重み付け係数ｋ
（ｉ，ｊ）の値は、入力信号ｕ１〜ｕ２８の組合せに対
して、以下の方法により、あらかじめ行われるシミュレ
ーションによって決定される。

【００４１】すなわち、ＣＣＤ等にある任意の映像情報
を入力するシミュレーションを行うと、画像境界識別層
４１から出力された入力ｕｉに対して、補間方法選択層
４２において重み付け係数ｋ（ｉ，ｊ）を乗じた値がそ
れぞれ４つの加算器に入力され、これら加算された４つ
の値を比較し最大となった補間方法が、欠陥画素に対し
て補間方法選択層４２より出力される。例えば、前述の
ように境界Ａ，Ｅ，Ｆ，Ｈに関係する信号が［１］と出
力された場合に、画像境界識別層４１からはｕ１等の６
通りの境界に関係する信号が［１］の値を持って出力さ
れ、図１４に示されるように、４つの加算器８１〜８４
に向けて２４通り信号が伝達される。これら２４通りの
信号それぞれに重み付け係数ｋ（ｉ，ｊ）が乗じられ、
その値が加算器８１〜８４において加算される。これら
の加算された値の中で、加算器８１における値が他の加
算器における値よりも大きい場合、補間出力としてｙ１
が選択され、補間回路４３に加算器８１から信号が出力
される。このようにして選択され補間回路４３より出力
される補間出力を、人間の目や機械を用いることにより
シミュレーションにおいて与えた映像情報と比較、確認
し、最適な補間方法を選択しているか否かを補間方法選
択層４２に指示する。補間方法選択層４２では、これら
の指示に基いて、適切な補間方法を選択した場合および
不適切な補間方法を選択した場合、それぞれについて重
み付け係数ｋ（ｉ，ｊ）に関するデータが蓄積される。
このようなシミュレーションをさまざまな状況下で繰り
返し行い、蓄積されたデータに基づき、適切な補間方法
の選択を行うような重み付け係数ｋ（ｉ，ｊ）の値を画
像境界識別層３１からの入力に対して一義的に決定す
る。

【００４２】以上のように決定された補間出力につい
て、切替回路２２は傷判断回路１１の出力に基づき、傷
判断回路１１において中心画素に相当するＸ１１が傷で
あると判断した場合には補間出力ｙを出力し、傷でない
と判断した場合には画素Ｘ１１の出力する信号ｘ１１を
出力する。なお傷検出について、第１の実施例に関する
傷検出回路を利用することによる利点、ならびに従来例
を利用できることについては前記第２の実施例と同様で
ある。

【００４３】このような重み付け係数ｋ（ｉ，ｊ）を用
いた補間方法により、前記第３の実施例で示したよう
に、境界検出回路３１により検出された境界が、図９
（ａ）に示すように［Ａ，Ｃ，Ｆ］であり、いくつかの
現実の周辺画像境界が想定される場合に、経験則によっ
てその補間出力を決定することなく、蓄積データに基づ
く細やかな補正が可能となる。

【００４４】図１５は、本発明に関する第５の実施例の
要部の構成を示すものである。図１５において、１０、
１１、および４１〜４３は図１および図１０と同一であ
るので説明を省略する。４５は画素取込回路１０で取り
込まれた９つの画素のうちの中心画素Ｘ１１の信号値
（ｘ１１）と補間回路４３の補間出力を比較する比較回
路である。

【００４５】次に、本実施例の動作について説明する。
補間方法選択層４２では、前記第４の実施例と同様に、
画像境界識別層４１からの出力ｕ１〜ｕ２８を入力と
し、画像境界識別層４１で決定されたこれらの境界を基
に補間方法を決定し、補間回路４３より補間方法を出力
する。ここで、周辺画像の境界に関する信号ｕ１〜ｕ２
８に係数による重み付けがなされるが、この重み付け係
数ｋ（ｉ，ｊ）の値は、以下のようにして決定される。

【００４６】まず、ある入力映像情報に対して、暫定的
に任意に定められた重み付け係数ｋ（ｉ，ｊ）を利用す
ることにより決定された補間方法を補間回路４３から補
間出力ｙを出力し、比較回路４５に入力する。一方、画
素取込回路１０で取り込まれた中心画素Ｘ１１の信号値
（ｘ１１）を同じく比較回路４５に入力する。かかる比
較回路４５において、傷判断回路１１の信号に基づき中
心画素Ｘ１１が傷でないと判断された場合に、入力され
た補間出力ｙとｘ１１とを比較し、その補間方法の選択
の適否を判断し、補間方法選択層４２へ当該判断の結果
を伝達する。このようにして得られた比較結果を順次蓄
積することにより、適切な補間方法の選択を行うような
重み付け係数ｋ（ｉ，ｊ）の値を決定していく。なお、
重み付け係数ｋ（ｉ，ｊ）の初期値は、暫定的に任意に
定められたものを用いてもよく、また第４の実施例で説
明したようにシミュレーションによりあらかじめ決定さ
れた値を用いてもよい。

【００４７】このような構成とすることにより、前記第
４の実施例において、シミュレーションによる蓄積デー
タに基づき画像境界識別層３１からの入力に対して一義
的に決定される重み付け係数ｋ（ｉ，ｊ）の値を、ＣＣ
Ｄの動作中に新たなデータに基づき、更新することが可
能となるため、様々な入力画像に応じたよりきめ細やか
で、かつ適正な傷補正が可能となる。さらに、動作中に
おける比較結果を随時蓄積することが可能となるため、
より適切な補正しうる能力の後天的な獲得が可能とな
る。

【００４８】

【発明の効果】以上から明らかなように、傷判断に用い
られる第１の閾値と境界検出に用いられる第２の閾値と
において、第２の閾値を第１の閾値と等しいかあるいは
大きい値とすることで、適切な補正が可能となる。ま
た、ＣＣＤ動作中にも補間方法選択基準を更新すること
ができるので、様々な入力画像に応じたよりきめ細やか
なで、適正な補正が可能となる。

【００４９】

【００５０】

【図面の簡単な説明】

【図１】本発明に関する第１の実施例における傷判定回
路の概略ブロック図

【図２】画素取込回路の要部を示すブロック図

【図３】画素取込回路により取り込まれた画素のウイン
ドウを示す図

【図４】本発明に関する第２の実施例における傷補正回
路の概略ブロック図

【図５】本発明に関する第３の実施例における傷補正回
路の概略ブロック図

【図６】境界検出回路の要部を示すブロック図

【図７】境界の位置を示す図

【図８】補間方法を示す図

【図９】境界検出の具体例を示す図

【図１０】本発明に関する第４の実施例における傷補正
回路の概略ブロック図

【図１１】画像境界識別層の要部を示すブロック図

【図１２】画像境界識別層により識別される境界を示す
図

【図１３】補間方法選択層の要部を示す図

【図１４】補間方法選択の具体例を示す図

【図１５】本発明に関する第５の実施例のにおける傷補
正回路の要部を示すブロック図

【図１６】従来の０次ホールド補間による傷補正処理を
示す図

【図１７】従来例における欠陥画素近傍の画素配置状態
を示す図

【図１８】従来例により識別されるストライプパターン
を示す図

【図１９】欠陥画素近傍に生じた境界を示す図

【符号の説明】

１０ 画素取込回路 １１ 傷判断回路 ２１ 演算器 ２２ 切替回路 ３１ 境界検出回路 ３２ 補間回路 ４１ 画像境界識別層 ４２ 補間方法選択層 ４３ 補間回路 ４４ 補間方法選択回路 ４５ 比較回路

フロントページの続き (56)参考文献 特開 昭61−261974（ＪＰ，Ａ) 特開 昭63−232579（ＪＰ，Ａ) 特開 平３−296374（ＪＰ，Ａ) 特開 平５−75861（ＪＰ，Ａ) 特開 昭60−256280（ＪＰ，Ａ) 特開 昭61−208980（ＪＰ，Ａ) 特開 平４−239886（ＪＰ，Ａ) 特開 平４−304091（ＪＰ，Ａ) 特開 平５−41867（ＪＰ，Ａ) 特開 平４−345383（ＪＰ，Ａ)

Claims (2)

(57)【特許請求の範囲】
1. 【請求項１】 一の画素が出力する信号とこの画素周辺
   に位置する複数の周辺画素から出力される信号とを各々
   比較し、第１の閾値に基づいて相関関係の有無から傷を
   判断する傷判断手段と、前記複数の周辺画素のうち隣接
   する周辺画素が出力する信号からこれらの周辺画素間に
   おける画素の境界を第２の閾値に基づいて境界を検出す
   る境界検出手段と、この境界検出手段により検出された
   周辺画素間の境界の組合せに基づき補間方法の選択を行
   う補間手段と、前記傷判断手段による前記画素が傷であ
   るとの判断に基づき補間手段の出力への切替を行う切替
   手段とを備え、前記第2の閾値を前記第１の閾値と等し
   いかあるいは大きい値としたことを特徴とする傷補正回
   路。
2. 【請求項２】 撮像素子における一の画素とこの画素周
   辺に位置する複数の周辺画素から出力される信号を取り
   込む画素取込手段と、この画素取込手段により傷を判断
   する傷判断手段と、前記画素取込手段により取り込まれ
   た前記複数の周辺画素のうち隣接する周辺画素が出力す
   る信号からこれらの周辺画素間における画素の境界を検
   出する境界検出手段と、この境界検出手段により検出さ
   れた周辺画素間の境界に基づいて予め設定された選択基
   準により補間方法を選択する補間方法選択手段と、この
   補間方法選択手段の出力に基づいて補間出力を出力する
   補間手段と、この補間手段の出力と前記画素取込手段に
   より取り込まれた一の画素の出力とを比較し、前記傷判
   断手段による前記画素が傷でないとの判断に基づき補間
   方法の選択の適否を判断する比較手段とを備え、この比
   較手段の出力に基づき、前記補間方法選択基準を更新す
   ることを特徴とする傷補正回路。