JP2002185863A - イメージセンサの欠陥ピクセル補正装置及びその方法 - Google Patents

イメージセンサの欠陥ピクセル補正装置及びその方法

Info

Publication number
JP2002185863A
JP2002185863A JP2001328107A JP2001328107A JP2002185863A JP 2002185863 A JP2002185863 A JP 2002185863A JP 2001328107 A JP2001328107 A JP 2001328107A JP 2001328107 A JP2001328107 A JP 2001328107A JP 2002185863 A JP2002185863 A JP 2002185863A
Authority
JP
Japan
Prior art keywords
pixel
image
position information
defective
defective pixel
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2001328107A
Other languages
English (en)
Other versions
JP4058254B2 (ja
Inventor
Kenin Kin
顯殷 金
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
SK Hynix Inc
Original Assignee
Hynix Semiconductor Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hynix Semiconductor Inc filed Critical Hynix Semiconductor Inc
Publication of JP2002185863A publication Critical patent/JP2002185863A/ja
Application granted granted Critical
Publication of JP4058254B2 publication Critical patent/JP4058254B2/ja
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
    • H04N25/68—Noise processing, e.g. detecting, correcting, reducing or removing noise applied to defects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
    • H04N25/63—Noise processing, e.g. detecting, correcting, reducing or removing noise applied to dark current
    • H—ELECTRICITY
    • H01—ELECTRIC ELEMENTS
    • H01L—SEMICONDUCTOR DEVICES NOT COVERED BY CLASS H10
    • H01L27/00—Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate
    • H01L27/14—Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate including semiconductor components sensitive to infrared radiation, light, electromagnetic radiation of shorter wavelength or corpuscular radiation and specially adapted either for the conversion of the energy of such radiation into electrical energy or for the control of electrical energy by such radiation
    • H01L27/144—Devices controlled by radiation
    • H01L27/146—Imager structures
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Power Engineering (AREA)
  • General Physics & Mathematics (AREA)
  • Condensed Matter Physics & Semiconductors (AREA)
  • Electromagnetism (AREA)
  • Computer Hardware Design (AREA)
  • Microelectronics & Electronic Packaging (AREA)
  • Transforming Light Signals Into Electric Signals (AREA)
  • Color Television Image Signal Generators (AREA)
  • Image Input (AREA)
  • Studio Devices (AREA)

Abstract

(57)【要約】 【課題】 外部に別に格納手段を設ける必要がないのみ
でなく、いちいちテストをして欠陥ピクセルに対するプ
ログラミングをする必要もなく、ユーザが使用する間に
も動く欠陥ピクセル(Moving defect pixel)に対する補
正が可能となるようにするための、イメージセンサの欠
陥ピクセル補正装置及びその方法と、前記方法を実現さ
せるためのプログラムを記録したコンピュータで読み出
すことができる記録媒体を提供する。 【解決手段】 本発明は、イメージセンサの欠陥ピクセ
ル補正装置において、欠陥ピクセル探知のためのテスト
のために光源を含んでおり、実際の物体のイメージを入
力されるための感知手段と、欠陥ピクセル探知のための
テストのために、前記感知手段を介して入力されたイメ
ージフレームに対して欠陥ピクセル如何を判断して、そ
の位置情報を格納するための制御手段と、前記制御手段
の欠陥ピクセル位置情報と前記感知手段を介して入力さ
れた実際の物体のイメージフレームのピクセル位置を比
較して欠陥ピクセルに対する補正を行なうためのイメー
ジ補正手段とを含む。

Description

【発明の詳細な説明】
【０００１】
【発明の属する技術分野】本発明は、イメージセンサの
欠陥ピクセル補正装置及びその方法と前記方法を実現さ
せるためのプログラムを記録したコンピュータで読み出
すことができる記録媒体に関する。
【０００２】
【従来の技術】一般に、イメージセンサとは、ＣＣＤま
たはＣＭＯＳからなる半導体素子をいい、このようなイ
メージセンサは、視覚的情報を入力する最も重要な素子
であって、キャムコーダ、ディジタルカメラ、スキャナ
ー(scanner)などの主要部品に用いられる。
【０００３】イメージ情報は、光の情報と言えるが、明
るさと色相とに区分して表現が可能であり、イメージセ
ンサは、このような光情報を電気的信号に変換する装置
であって、アナログである電気的信号をディジタル値に
変換してイメージ処理をすることになる。
【０００４】すなわち、イメージセンサは、複数のピク
セルが２次元構造に配列されており(スキャナーのため
に１次元構成もある)、各ピクセルは、入る光の明るさ
によってこれを電気信号に変換させることになるが、こ
の電気信号を測定すれば、各ピクセルに入る光の量が分
かり、これを利用してピクセル単位のイメージを構成す
ることができる。
【０００５】この場合、各ピクセルの動作は、太陽電池
の動作と類似していると言える。すなわち、光の明るさ
が強いほど多くの電荷を作って蓄積することになり、一
定の時間の間各ピクセルに蓄積された電荷を測定して各
ピクセルの光の強度が分かって各ピクセルを再構成すれ
ば、イメージの形状が分かるようになるのである。
【０００６】図１は、本発明が適用される実際の物体と
センサに捕獲された像の一例示図であって、実際の物体
１０１、センサチップ１０２、ピクセルエリア(Pixel A
rea)１０３及びセンサのピクセルエリアに捕獲された実
際の物体の像１０４を示している。
【０００７】この場合、図面に示すピクセルエリア１０
３内のピクセルが小さく多いほど、実際の物体をより近
似して表現できるようになるのである。
【０００８】このような、イメージセンサには、白黒と
カラーとがある。カラーイメージセンサの場合には、ピ
クセル上にＲ、Ｇ、Ｂ(Red、Green、Blue)などのカラー
フィルタが載せられて各ピクセルは該当色相の光に対し
て反応をする。
【０００９】カラーフィルタが載せられるパターンは、
種々の方式があるが、この中で代表的なものが次の[表
１]に示したことのようなバイエルフォーマット(Bayer
format)である。
【００１０】
【表１】
【００１１】一般に、カラーイメージの各ピクセルは、
一つの色相のみを表示するようになっている。しかし、
実際には全てのピクセルがＲ、Ｇ、Ｂ情報を全部持って
いる時ディスプレーが可能であるので、いない情報を作
るために補間(Interpolation)という手法を使用してい
る。
【００１２】補間手法を利用して前記[表１]の左側３ｘ
３ボックス(Box)の真中にあるＢ１ピクセルのＲ、Ｇ、
Ｂ値を求めれば、次の[数式１]と同様である。
【００１３】
【数１】
【００１４】すなわち、前記のような数式を使用するこ
とによって、Ｂ１ピクセルのＲ、Ｇ、Ｂを全部求めるこ
とができる。
【００１５】もう一つの例として、前記[表１]の右側３
ｘ３ボックスの真中にあるＧ６のＲ、Ｇ、Ｂ値を求めれ
ば、次の[数式２]と同様である。
【００１６】
【数２】
【００１７】一般に、イメージセンサ製造過程中の種々
の理由によって、正常に動作できないピクセルが発生す
ることになるが、このようなピクセルは、光に対して適
切に反応できないので、この出力値を利用してイメージ
を再構成すれば、実際とは違うように現れることにな
る。
【００１８】このようなピクセルは、実際より明るく現
れるか、または実際より暗く現れるが、この中でその差
が大きくいため、顕著に目立つピクセルを欠陥ピクセル
(Defective Pixel)という。
【００１９】この中、実際より明るく現れる欠陥ピクセ
ルをホワイトピクセル(White Pixel)(以下、簡単に「Wh
ite Pixel」という)といい、実際より暗く現れる欠陥ピ
クセルをダークピクセル(Dark Pixel)(以下、簡単に「D
ark Pixel」という)という。このような欠陥ピクセルが
あるセンサは正常的な製品として販売することは困難で
ある。
【００２０】一方、イメージセンサは、ピクセルの数が
多いほど高い解像度を有する高価の製品となるが、ピク
セルの数が多くなるほど前記したような欠陥ピクセルが
発生する可能性も高くなる。
【００２１】実際に欠陥ピクセルは、イメージセンサの
収率を左右する最も大きい要素であり、したがって、欠
陥ピクセルがあるとしてもこれを製品として使用するこ
とができるならば、大きい利益となり得る。
【００２２】このためにＤＰＣ(Defective Pixel Conce
alment)(以下、簡単に「ＤＰＣ」という)という方法を
使用するが、これはセンサの物理的欠陥ピクセルを目に
見えないように補完する方法である。ＤＰＣの基本原理
は前記で説明した補間手法と同一である。
【００２３】すなわち、ディスプレーしようとするピク
セルが欠陥ピクセルであるならば、周囲の同じ色相を持
っている正常的なピクセル値を利用して推定値に置き換
えるものであって、以下では、次の[表２]を参照しなが
ら説明する。
【００２４】
【表２】
【００２５】すなわち、前記[表２]においてＢ２位置ピ
クセルのＲＧＢ値を求めようとするならば、Ｂ２が正常
ピクセルである場合、Ｒ＝（Ｒ２＋Ｒ３＋Ｒ５＋Ｒ６）
／４、Ｂ＝Ｂ２、Ｇ＝（Ｇ２＋Ｇ５＋Ｇ６＋Ｇ８）／４
となる。
【００２６】もし、Ｂ２が欠陥ピクセルであるならば、
Ｂｌｕｅ値が実際とは違うように画面に現れる。この場
合、Ｂ＝Ｂ２の代わりに、Ｂ＝（Ｂ１＋Ｂ３）／２に置
き換えれば、はるかに自然な画面を得ることができる。
【００２７】このような方法を補間によるＤＰＣ方法と
言える。もう一つの方法には、単純にＢ＝Ｂ１に置き換
えることもできるが、これは代替(Substitution)による
ＤＰＣ方法と言える。
【００２８】以下では、補間によるＤＰＣ方法の説明の
ために、もう一つの例として次の[表３]を参照しながら
説明する。
【００２９】
【表３】
【００３０】すなわち、[表３]でＧ５ピクセルのＧｒｅ
ｅｎ値、Ｇ＝Ｇ５に表示される。もしＧ５ピクセルが欠
陥ピクセルであるならば、Ｇ＝（Ｇ１＋Ｇ２＋Ｇ７＋Ｇ
８）／４に置き換えれば良い。
【００３１】この場合、代替によるＤＰＣ方法を利用す
る場合には、Ｇ＝Ｇ４に単に置き換えることもできる。
【００３２】前記のようなＤＰＣ方法の中、補間による
隠蔽(Concealment)が代替(Substitution)による隠蔽方
法よりさらに自然な画面を得ることができるが、ハード
ウェア(Ｈ／Ｗ)がより多く必要となる。
【００３３】前記のようなＤＰＣ方法を具現するための
従来の装置を図２を参照しながら説明する。
【００３４】図２ａないし図２ｃは、従来のイメージセ
ンサの欠陥ピクセル補正装置の一実施例の構成図であっ
て、カメラを一例にして示している。この場合、図２ａ
は、イメージセンサの欠陥ピクセル補正装置の全体構成
を示すものであって、図２ｂは、図２ａに示した感知部
２１０を詳細に示すものであって、図２ｃは、図２ａに
示すイメージ補正部２２０を詳細に示すものである。
【００３５】すなわち、図２ａに示すように、従来に利
用されたイメージセンサの欠陥ピクセル補正装置は、イ
メージを感知するために、センサから構成された感知部
２１０、イメージの欠陥ピクセルを補正するためのイメ
ージ補正部２２０、イメージ欠陥ピクセルの位置情報を
格納するために、ＥＰＲＯＭ(Erasable and Programmab
le ROM)(以下、簡単に「ＥＰＲＯＭ」という)から構成
された格納部２４０、及び前記各部間の移動情報を制御
するための制御部２３０を含んで構成されている。
【００３６】前記のような構成において、イメージ補正
部２２０は、感知部のセンサから伝送されたイメージデ
ータを、補間を含んで実際利用できる形態に処理する回
路であって、ＤＰＣ回路もここに含まれて補間前に処理
すべきである。
【００３７】イメージ補正部２２０を詳細に示すものが
図２ｃであって、図面に示すように、イメージ補正部２
２０は、正常ピクセルに対する補間を行なうための補間
処理器２２１、欠陥ピクセルに対する補間を行なうため
の補間処理器２２２、現在ピクセルの位置情報を管理す
るための現在ピクセルの位置感知器２２３、欠陥ピクセ
ルの位置情報を記録するための欠陥ピクセル位置記録器
２２４、現在ピクセルの位置と欠陥ピクセルの位置とを
比較するための比較器２２５、比較器の比較結果によっ
て、ＤＰＣ過程を行なうためのＤＰＣ処理器２２６、Ｄ
ＰＣ処理器を駆動させるためのＤＰＣ駆動器２２７、Ｄ
ＰＣ処理器の処理結果によって、正常ピクセルに対する
補間処理器または欠陥ピクセルに対する補間処理器の出
力結果を選択するための選択器２２８及びＤＰＣ機能の
他に入力されたイメージフレームに対する別途の機能を
行なうためのその他の過程処理器２２９を含んで構成さ
れている。
【００３８】また、制御部２３０は、イメージ補正部２
２０のデータを分析して適当な処理をし、感知部２１０
やイメージ補正部２２０を用途に合うようにプログラム
する役割をする。
【００３９】また、ＥＰＲＯＭから構成された格納部２
４０は、感知部２１０にあるセンサのピクセルエリア１
０３での欠陥ピクセルの位置情報を格納しており、カメ
ラが正常動作モードに作動することになれば、制御部２
３０はＥＰＲＯＭ２４０に格納されている欠陥ピクセル
の位置情報をイメージ補正部２２０の欠陥ピクセル位置
記録器２２４に記録することになる。
【００４０】以下、前記のような構成を有するイメージ
センサの欠陥ピクセル補正装置で行なわれた従来の欠陥
ピクセル補正方法を説明する。
【００４１】まず、欠陥ピクセルを探してプログラミン
グする方法は次の通りである。
【００４２】すなわち、感知部２１０にあるセンサの露
出を適当にセッティングし適当な照明下で白色面を取
る。
【００４３】このように撮影した画面を制御部２３０で
分析して他のピクセルに比べて顕著に暗いピクセルがあ
れば、これをDark Pixelと見做してピクセルエリア１０
３内での位置を記憶する。
【００４４】センサの露出と照明を他の適当な値にセッ
ティングし黒い背景を取る。
【００４５】このように撮影した画面を制御部２３０で
分析して他のピクセルに比べて顕著に明るいピクセルが
あれば、これをWhite Pixelと見做してピクセルエリア
１０３内での位置を記憶する。
【００４６】前記過程を介して探したDark PixelとWhit
e Pixelの位置をＥＰＲＯＭ２４０に格納する。
【００４７】次に、ＥＰＲＯＭ２４０に格納された欠陥
ピクセルの位置を利用して実際にＤＰＣを行なう方法は
次の通りである。
【００４８】すなわち、カメラに電源が印加されれば、
制御部２３０はＥＰＲＯＭ２４０の欠陥ピクセル位置を
読み出してイメージ補正部２２０の欠陥ピクセル位置記
録器２２４に記録し、ＤＰＣ駆動器２２７を駆動させ
る。
【００４９】この後、各ピクセルの補間を進行する時ご
とに現在ピクセルの位置感知器２２３の値と欠陥ピクセ
ル位置記録器２２４の値とを比較して、もし値が一致す
れば、現在補間しようとするピクセルは欠陥ピクセルで
あるので、選択器２２８では欠陥ピクセルに対する補間
器２２２において処理された値を選択して制御部２３０
にその値を伝達することによって、イメージセンサの欠
陥ピクセルを補正することになる。
【００５０】すなわち、前記のような従来のＤＰＣ方法
は、ＥＰＲＯＭ２４０に欠陥ピクセルの位置を記憶して
おき、カメラに電源が印加されれば、これを欠陥ピクセ
ル位置記録器(ＡＳＩＣのRegister)２２４にロードした
後、センサから伝送されたイメージの各ピクセルが前記
欠陥ピクセルの位置と判断されれば、これを補正して伝
送する方法である。この場合、ＥＰＲＯＭ２４０のデー
タを読み出して欠陥ピクセル位置記録器(ＡＳＩＣのＤ
ＰＣ回路のレジスタ)２２４に記録する理由は、ＥＰＲ
ＯＭ２４０の動作速度が遅くてＥＰＲＯＭに位置データ
を持って直接ＤＰＣをできないためである。
【００５１】このような方法のために、まずピクセルの
欠陥位置を探すべきであるが、探す方法には、システム
の集光タイム(Integration Time)を一定にし、非常に暗
いイメージと非常に明るいイメージを取って異常がある
ピクセルを探し出す方法がある。
【００５２】しかし、前記したことのような従来のＤＰ
Ｃ方法には以下のような問題点がある。
【００５３】すなわち、欠陥ピクセルの位置を格納する
ために、別途の格納装置であるＥＰＲＯＭを必要とし、
欠陥ピクセルの位置を探すために、センサの露出、撮影
環境などを変えながらいちいちテストをすべきであり、
このようにして探した欠陥位置をまたＥＰＲＯＭに格納
する等複雑な過程が要求されるという点である。
【００５４】また、ピクセルの中にはある場合には欠陥
のように現れることもあり、ある場合には正常のように
現れることもあるピクセル(このようなピクセルをMovin
g Defectという)が存在するが、前記のような従来の方
法は、製品出荷前に一回のテストで欠陥ピクセルを探し
てＥＰＲＯＭに格納しておいた状態で、ユーザがカメラ
を使用するので、カメラ使用中に発生するこのような動
く欠陥ピクセル(Moving Defect Pixel)に対してはいか
なる補正もできないという問題点がある。
【００５５】すなわち、前記のような従来の方法によれ
ば、イメージセンサの欠陥ピクセルに対する情報は、イ
メージセンサを製作する事業者の実験により固定した値
に格納されているので、ユーザが前記のようなイメージ
センサの欠陥ピクセル補正装置が付着された製品を使用
する途中に現れる欠陥ピクセルに対しは、いかなる対処
もできないのみでなく、事業者の立場においても販売さ
れる全てのイメージセンサに対していちいち欠陥ピクセ
ルの位置を把握して別途の格納装置に格納させて置くべ
きであるので、複雑な工程及び追加コストを負担しなけ
ればならないという問題点がある。
【００５６】
【発明が解決しようとする課題】そこで、本発明は上記
従来の技術の問題点に鑑みてなされたものであって、外
部に別に格納手段を設ける必要がないのみでなく、いち
いちテストをして欠陥ピクセルに対するプログラミング
をする必要もなく、ユーザが使用する間にも動く欠陥ピ
クセル(Moving defect pixel)に対する補正が可能とな
るようにするための、イメージセンサの欠陥ピクセル補
正装置及びその方法と、前記方法を実現させるためのプ
ログラムを記録したコンピュータで読み出すことができ
る記録媒体を提供することにその目的がある。
【００５７】
【課題を解決するための手段】前記目的を達成するた
め、本発明は、イメージセンサの欠陥ピクセル補正装置
において、欠陥ピクセル探知のためのテストのために光
源を含んでおり、実際の物体のイメージを入力されるた
めの感知手段と、欠陥ピクセル探知のためのテストのた
めに、前記感知手段を介して入力されたイメージフレー
ムに対して欠陥ピクセル如何を判断して、その位置情報
を格納するための制御手段と、前記制御手段の欠陥ピク
セル位置情報と前記感知手段を介して入力された実際の
物体のイメージフレームのピクセル位置を比較して欠陥
ピクセルに対する補正を行なうためのイメージ補正手段
とを含む。
【００５８】また、前記目的を達成するため、本発明
は、イメージセンサの欠陥ピクセル補正装置に適用され
るイメージセンサの欠陥ピクセル補正方法において、イ
メージセンサのホワイトピクセル(White Pixel)を探索
してその位置情報を臨時に格納する第１ステップと、イ
メージセンサのダークピクセル(Dark Pixel)を探索して
その位置情報を臨時に格納する第２ステップと、臨時に
格納された前記ホワイトピクセル位置情報及びダークピ
クセル位置情報を欠陥ピクセル位置記録器に記録し、実
際の物体のイメージを入力される第３ステップと、前記
実際の物体のイメージに対する各ピクセルの位置情報と
前記ホワイトピクセル位置情報、またはダークピクセル
位置情報を比較して同じ位置のピクセルに対しは、欠陥
ピクセルに対する補間を実行した後、前記イメージを再
び組み合わせて出力する第４ステップとを含む。
【００５９】また、前記目的を達成するため、本発明
は、イメージセンサの欠陥ピクセル補正装置に適用され
るイメージセンサの欠陥ピクセル補正方法において、イ
メージセンサのホワイトピクセルの探索条件下で入力さ
れた第１イメージフレームを格納する第１ステップと、
イメージセンサのダークピクセルの探索条件下で入力さ
れた第２イメージフレームを格納する第２ステップと、
前記第１イメージフレーム及び前記第２イメージフレー
ムに対して各々ホワイトピクセル及びダークピクセル如
何を判断して、ホワイトピクセル及びダークピクセルの
位置情報を臨時に格納しておいて、臨時に格納された前
記ホワイトピクセル位置情報及びダークピクセル位置情
報を欠陥ピクセル位置記録器に記録し、実際の物体のイ
メージを入力される第３ステップと、前記実際の物体の
イメージに対する各ピクセルの位置情報と前記ホワイト
ピクセル位置情報、またはダークピクセル位置情報を比
較して同じ位置のピクセルに対しは、欠陥ピクセルに対
する補間を実行した後、前記イメージを再び組み合わせ
て出力する第４ステップとを含む。
【００６０】また、前記目的を達成するため、本発明
は、イメージセンサの欠陥ピクセル補正のために、大容
量のプロセッサを備えたイメージセンサの欠陥ピクセル
補正装置に、イメージセンサのホワイトピクセルを探索
してその位置情報を臨時に格納する第１機能と、イメー
ジセンサのダークピクセルを探索してその位置情報を臨
時に格納する第２機能と、臨時に格納された前記ホワイ
トピクセル位置情報及びダークピクセル位置情報を欠陥
ピクセル位置記録器に記録し、実際の物体のイメージを
入力される第３機能と、前記実際の物体のイメージに対
する各ピクセルの位置情報と前記ホワイトピクセル位置
情報、またはダークピクセル位置情報を比較して同じ位
置のピクセルに対しは欠陥ピクセルに対する補間を実行
した後、前記イメージを再び組み合わせて出力する第４
機能とを実現させるためのプログラムを記録したコンピ
ュータで読み出すことができる記録媒体を提供する。
【００６１】また、前記目的を達成するため、本発明
は、イメージセンサの欠陥ピクセル補正のために、大容
量プロセッサを備えたイメージセンサの欠陥ピクセル補
正装置に、イメージセンサのホワイトピクセルの探索条
件下で入力された第１イメージフレームを格納する第１
機能と、イメージセンサのダークピクセルの探索条件下
で入力された第２イメージフレームを格納する第２機能
と、前記第１イメージフレーム及び前記第２イメージフ
レームに対して各々ホワイトピクセル及びダークピクセ
ル如何を判断して、ホワイトピクセル及びダークピクセ
ルの位置情報を臨時に格納しておいて、臨時に格納され
た前記ホワイトピクセル位置情報及びダークピクセル位
置情報を欠陥ピクセル位置記録器に記録し、実際の物体
のイメージを入力される第３機能と、前記実際の物体の
イメージに対する各ピクセルの位置情報と前記ホワイト
ピクセル位置情報、またはダークピクセル位置情報を比
較して同じ位置のピクセルに対しは欠陥ピクセルに対す
る補間を実行した後、前記イメージを再び組み合わせて
出力する第４機能とを実現させるためのプログラムを記
録したコンピュータで読み出すことができる記録媒体を
提供する。
【００６２】本発明で提供しようとするイメージセンサ
の欠陥ピクセル補正装置は、欠陥ピクセルを探す装置を
内蔵しているので全体システムの稼動時人工知能的に欠
陥ピクセルを探す一方、欠陥ピクセルの位置情報をＡＳ
ＩＣ（応用注文型集積回路）から構成された欠陥ピクセ
ル位置記録器に記録しておくことによって、入力された
イメージの各ピクセルに対して欠陥ピクセルの如何を比
較判断して欠陥ピクセルに対して補正できるようにし
た。
【００６３】
【発明の実施の形態】以下、図３及び図６を参照しなが
ら本発明に係る好ましい一実施例を詳細に説明する。
【００６４】図３は、本発明に係るイメージセンサの欠
陥ピクセル補正装置の一実施例の構成図である。また、
図４ａは、本発明に係るイメージセンサの欠陥ピクセル
補正装置の中、感知部の一実施例詳細構成図であって、
図３に示す感知部（センサ）３１０の断面図を詳細に示
すものである。また、図４ｂは、本発明に係るイメージ
センサの欠陥ピクセル補正装置の中イメージ補正部の一
実施例詳細構成図であって、図３に示すイメージ補正部
３２０を詳細に示したものである。また、図４ｃは、本
発明に係るイメージセンサの欠陥ピクセル補正装置の中
制御部の一実施例詳細構成図であって、図３に示す制御
部３３０を詳細に示したものである。
【００６５】すなわち、図面に示すように、本発明に係
るイメージセンサの欠陥ピクセル補正装置は、感知部
（センサ）３１０、イメージ補正部３２０、及び制御部
３３０を含んで構成されている。
【００６６】前記のような構成を有する本発明に係るイ
メージセンサの欠陥ピクセル補正装置は、キャムコーダ
(Camcorder)、ディジタルカメラ、スキャナー等のよう
なシステムで用いられることができ、以下では、特にデ
ィジタルカメラシステムを一例として説明する。すなわ
ち、図３に示すイメージセンサの欠陥ピクセル補正装置
は、ディジタルカメラシステムに実装されて作動されて
いるものであると言える。
【００６７】まず、図４ａを参照しながらイメージを感
知するための感知部３１０について説明する。図面に示
すように、感知部３１０は、レンズホルダー３１１、レ
ンズ３１２、光源３１３、イメージセンサパッケージ３
１４、イメージセンサダイ３１５、ＰＣＢボード３１６
を含んで構成されており、図２ｂに示す従来の感知部２
１０と比較した時、光源３１３をさらに含んでいる。
【００６８】すなわち、本発明に係るイメージセンサの
欠陥ピクセル補正装置の感知部３１０には、図面に示す
ように、センサと近い所に小さい光源３１３が設けられ
ており、この光源３１３は欠陥ピクセルを探す間のみし
ばらくの間オンにされて正常動作時にはオフされること
になる。
【００６９】一方、センサが正常モードに動作する時、
すなわち、レンズから入ったイメージを捕獲する間に
は、光源３１３がこれを妨害してはいけないので、これ
のために光源３１３はレンズから入る光の経路から外れ
た所に位置することになる。
【００７０】前記のような感知部３１０の構成におい
て、光源３１３がオフされている間は、光源がないこと
のように動作すべきであるが、光源３１３が入った場合
には、逆に外部の画像が無視されるべきであるので、光
源３１３の明るさがレンズから外部の画像がセンサに像
として捕獲されないほど明るいべきであり、この場合、
センサに捕獲される像は内部光源によるものである。
【００７１】次に、図４ｂを参照しながらイメージ補正
部３２０について詳細に説明する。
【００７２】すなわち、図面に示すように、イメージ補
正部３２０は、正常ピクセルに対する補間を行なうため
の補間処理器３２１、欠陥ピクセルに対する補間を行な
うための補間処理器３２２、現在ピクセルの位置情報を
管理するための現在ピクセルの位置感知器３２３、欠陥
ピクセルの位置情報を記録するための欠陥ピクセル位置
記録器３２４、現在ピクセルの位置と欠陥ピクセルの位
置とを比較するための比較器３２５、比較器の比較結果
に応じてＤＰＣ過程を行なうためのＤＰＣ処理器３２
６、ＤＰＣ処理器を駆動させるためのＤＰＣ駆動器３２
７、正常動作モードでＤＰＣ処理器の処理結果に応じて
正常ピクセルに対する補間処理器または欠陥ピクセルに
対する補間処理器の出力結果を選択し、テストモードで
感知部３１０からのイメージフレームを伝達される選択
器３２８、ＤＰＣ機能の他に入力されたイメージフレー
ムに対する別途の機能を行なうためのその他の過程処理
器３２９と、及び前記テストモードであるかまたは正常
動作モードであるかの如何に対する情報を制御部３３０
から入力されて前記選択器３２８の駆動を制御する選択
器制御器３４１を含んで構成されている。
【００７３】一方、図４ｂの本実施例では感知部３１０
のセンサで感知されたテストモード時のイメージフレー
ムが補正部３２０を介して制御部３３０に伝達される構
成からなっているが、感知部３１０から補正部３２０を
介さず直接制御部３３０にテストモード時のイメージフ
レームが伝達されるように具現することもできる。
【００７４】次に、図４ｃを参照しながら制御部３３０
について詳細に説明する。
【００７５】制御部３３０は、カメラ外部のＰＣ等コン
ピュータシステムになり得るのみでなく、カメラ内部の
マイクロコントローラ(Micro Controller)にもなり得る
し、感知部（センサ）３１０、イメージ補正部３２０等
からデータを受け取って処理しこれらを制御する役割を
する。
【００７６】前記のような役割のために、制御部３３０
は、感知部３１０のセンサを介して入力されたイメージ
フレームを格納するためのイメージフレーム格納器３３
３、イメージフレーム格納器に格納されたイメージフレ
ームに対して欠陥ピクセルを探すためのプログラムを格
納し、そのプログラムを行なうための欠陥ピクセル探知
器３３２、欠陥ピクセル探知器で探知された欠陥ピクセ
ルの位置を臨時保管するための欠陥ピクセル位置臨時格
納器３３４及び前記各構成要素３３２ないし３３４と外
部回路間の移動情報を制御するためのイメージ制御器３
３１を含んで構成されている。
【００７７】以下では、前記のような構成を有するイメ
ージセンサの欠陥ピクセル補正装置を利用して欠陥ピク
セルを補正する方法を説明する。
【００７８】図５は、本発明に係るイメージセンサの欠
陥ピクセル補正方法の一実施例のフローチャートであ
る。
【００７９】本発明に係るイメージセンサの欠陥ピクセ
ルの補正のために、まず前記で説明した欠陥ピクセル補
正装置に電源(Power)を印加させる(５１０）。
【００８０】電源が印加されれば、制御部３３０のイメ
ージ制御器３３１は、カメラのモードをWhite Pixelを
探索するためのテストモードにセッティングした後、下
記の過程を介してWhite Pixelを探索してその位置情報
を欠陥ピクセル位置臨時格納器３３４に格納することに
なる（５２０）。
【００８１】すなわち、センサの露出を最小にセッティ
ングし、イメージ補正部３２０の補間機能及びＤＰ機能
を遮断(disable)させる。
【００８２】テストモードにセッティングされたなら
ば、イメージ制御器３３１は、感知部３１０のセンサを
介して入力されたイメージフレームを読み出してイメー
ジフレーム格納器３３３に格納することになり、欠陥ピ
クセル探知器３３２は、イメージフレーム格納器３３３
に格納されたイメージデータをピクセル単位で読み出し
ながら欠陥判定方式によって欠陥如何を判定して(White
Pixel探索)、欠陥ピクセルであるならば、ピクセルの
位置を欠陥ピクセル位置臨時格納器３３４に格納する。
【００８３】前記のようなWhite Pixel探知過程をイメ
ージフレーム格納器３３３の全てのピクセルに対して繰
り返す。
【００８４】イメージフレーム格納器３３３の全てのピ
クセルに対してWhite Pixel探知過程を行なったなら
ば、カメラのモードをDark Pixelを探知するためのテス
トモードにセッティングした後、下記の過程を介してDa
rk Pixelを探索してその位置情報を欠陥ピクセル位置臨
時格納器３３４に格納することになる（５３０）。
【００８５】すなわち、感知部３１０内のセンサの露出
を適当な値にセッティングし、光源３１３をオンにした
状態でセンサから入力されたイメージフレームを読み出
してイメージフレーム格納器３３３に格納した後、光源
３１３をオフにする。
【００８６】光源３１３をオフにした状態でイメージフ
レーム格納器３３３に格納されたデータをピクセル単位
で読み出しながら、欠陥判定方式によって欠陥如何を判
定(Dark Pixel探索)して、欠陥ピクセルであるならば、
ピクセルの位置を欠陥ピクセル位置臨時格納器３３４に
格納する。
【００８７】前記のようなDark Pixel判定過程をイメー
ジフレーム格納器３３３の全てのピクセルに対して繰り
返す。
【００８８】前記のような過程（５２０、５３０）が終
了すれば、イメージ制御器３３１は、欠陥ピクセル位置
臨時格納器３３４に格納されている欠陥ピクセルの位置
情報を読み出してイメージ補正部３２０内の欠陥ピクセ
ル位置記録器３２４に記録し（５４０）、ディジタルカ
メラシステムのモードを正常動作モードにセッティング
する（５５０）。すなわち、イメージ補正部３２０のＤ
ＰＣ機能及び補間機能を駆動させ感知部３１０のセンサ
を介してイメージを入力される。
【００８９】正常動作モードでディジタルカメラシステ
ムは、イメージ補正部３２０のＤＰＣ回路によって正常
動作をすることになるが、現在ピクセルの位置感知部３
２３にある現在ピクセルの位置情報と欠陥ピクセル位置
記録器３２４に記録されている欠陥ピクセルの位置とを
比較して、同じものがあれば、欠陥ピクセルに対する補
間処理器３２２の出力を利用し、そうではなかったら正
常ピクセルに対する補間処理器３２１の出力を利用して
感知部３１０を介して入力されたイメージを再び組み合
わせることになる（５６０）。
【００９０】一方、前記過程はイメージフレーム格納器
３３３を二つの所に設けて進行させることもできる。す
なわち、White Pixel探知過程（５２０）とDark Pixel
探知過程（５３０）で各々読み出されたイメージフレー
ムをまず二つの所のイメージフレーム格納器３３３に各
々格納しておいて、White Pixel如何判定及びDark Pix
el如何判定過程を同時に実行させるのである。
【００９１】図６ａは、本発明に係るイメージセンサの
欠陥ピクセル補正方法の中White Pixel判定方法の一実
施例詳細フローチャートであって、図５に示す過程の中
WhitePixel判定過程（５２０）を詳細に示すものであ
る。
【００９２】前記図５に対する説明のように、ディジタ
ルカメラシステムに電源が印加されれば（５１０）、カ
メラのモードをWhite Pixel探索のためのテストモード
にセッティングさせる（５２１）。
【００９３】すなわち、制御部３３０は、感知部３１０
内のセンサの露出を最小にプログラムし、イメージ補正
部３２０の補間機能及びＤＰＣ機能を遮断させる（この
場合、制御部３３０はディジタルカメラシステム外部の
ＰＣであり得るし、この場合には、ＰＣでカメラ用プロ
グラムを利用してカメラのセンサ及びイメージ補正部３
２０を調整する）。
【００９４】テストモードにセッティングされならば、
感知部３１０内のセンサを介して入力されたイメージの
一つのフレームを読み出してイメージフレーム格納器３
３３に格納する（このイメージフレームは補間されてな
い原始データである）（５２２）。
【００９５】イメージフレームが格納されたならば、欠
陥ピクセル探知器３２２でイメージフレーム格納器３３
３に格納されたピクセルを一つずつ調べて他のピクセル
より顕著に明るく現れるピクセルをWhite Pixelと見做
して（５２３）、その位置を欠陥ピクセル位置臨時格納
器３３４に格納する（５２４）。
【００９６】この場合、他のピクセルより顕著に明るい
ということを判断するために、全体フレーム平均と比較
するか周辺の他のピクセル値と比較することができ、各
ピクセルの一実施例値を示した下記の［表４］を例とし
て説明する。
【００９７】
【表４】
【００９８】まず、全体フレーム平均と比較する方法に
は、全体フレーム平均をＡとし、調べようとするピクセ
ルが［表４］においてＧ５とすれば、Ｇ５＞Ａ＊Ｖであ
れば、Ｇ５ピクセルを欠陥ピクセルと見なすのである
（ここでＶは、重み付け値として平均より３０％以上明
るいピクセルを探そうとすれば、Ｖ＝１．３、５０％以
上明るいものを探そうとすれば、Ｖ＝１．５などとな
る）。
【００９９】次に、周辺の他のピクセル値と比較する方
法には、Ｇ５の場合、Ｇ５＞Ｖ＊（Ｇ１＋Ｒ２＋Ｇ２＋
Ｂ１＋Ｂ２＋Ｇ７＋Ｒ５＋Ｇ８）／８でテストすること
ができる。すなわち周辺の八つのピクセルの平均と比較
する方法に重み付け値Vを使用することは同じである。
【０１００】もう一つの方法には、単に隣の二つのピク
セルとのみ比較することもできる。Ｇ５の場合、Ｇ５＞
Ｖ＊（Ｂ１＋Ｂ２）／２を介してチェックできる。すな
わち、左右の二つの平均と比較することもできる。
【０１０１】もう一つの方法としてさらに簡単には、直
ぐ前の一つのピクセルのみを持ってテストすることも可
能である。すなわち、Ｇ５＞Ｖ＊Ｂ１である場合に、欠
陥ピクセル(White Pixel)と見なす。
【０１０２】前記のような欠陥ピクセルの判断をする
時、全体フレーム平均を利用せず周囲のいくつのピクセ
ル値のみ比較して判断する場合、比較しようとする周囲
のピクセルが欠陥ピクセルである場合には、これを除外
した他の値でのみ判断の根拠とする。
【０１０３】例えば、Ｇ５と周囲の八つのピクセルとを
比較する場合、Ｇ１が欠陥ピクセルであるならば、Ｇ１
を除外した残りの七つのピクセルの平均を使用する。左
右の二つのピクセルのみを利用する場合、一つが欠陥ピ
クセルであるならば、他の一つのみを利用して処理す
る。直ぐ前の一つのピクセルのみを利用する場合に、前
のピクセルが欠陥ピクセルであるならば、処理しようと
するピクセルは欠陥ピクセルではないと見なす。このよ
うな判断のために、現在の時点まで探し出した欠陥ピク
セル位置臨時格納器３３４内の全ての情報を利用するこ
ともできる。
【０１０４】前記のようなWhite Pixel如何判定過程が
イメージフレーム格納器３３３内の全てのピクセルに対
して行なわれたかを判断して（５２５）、イメージフレ
ーム内の全てのWhite Pixelの位置を探して欠陥ピクセ
ル位置臨時格納器３３４に格納する（５２４）。
【０１０５】図６ｂは、本発明に係るイメージセンサの
欠陥ピクセル補正方法の中、ダークピクセル(Dark Pixe
l)判定方法の一実施例詳細フローチャートであって、図
５に示す過程の中Dark Pixel判定過程（５４０）を詳細
に示すものである。
【０１０６】まず、カメラのモードをDark Pixel探索の
ためのテストモードにセッティングさせる（５３１）。
【０１０７】すなわち、光源をオンにして集光タイムを
適切に与えた後、感知部３１０内のセンサを介して入力
されたイメージの一つのフレーム(Raw Data Image Fram
e)を読み出してイメージフレーム格納器３３３に格納し
た後（５３２）、光源をオフにする（５３３）。
【０１０８】イメージ制御器３３１は、イメージフレー
ム格納器３３３に格納されたピクセルを一つずつ調べて
他のピクセルより顕著に暗く現れるピクセルをDark Pix
elと見做して（５３４）、その位置を欠陥ピクセル位置
臨時格納器３３４に格納する（５３５）。
【０１０９】この場合、他のピクセルより顕著に明るい
ということを判断するために、全体フレーム平均と比較
するか、周辺の他のピクセル値と比較することができ、
各ピクセルの一実施例値を示す下記の[表５]を例として
説明する。
【０１１０】
【表５】
【０１１１】まず、全体フレーム平均と比較する方法に
は、全体フレーム平均をＡとし、調べようとするピクセ
ルが［表５］においてＧ５とすれば、Ｇ５＜Ａ＊Ｖであ
れば、Ｇ５ピクセルを欠陥ピクセルと見なすのである
（ここで、Ｖは重み付け値であって平均より３０％以上
暗いピクセルを探そうとすれば、Ｖ＝０．７、５０％以
上暗いものを探そうとすれば、Ｖ＝０．５などとな
る）。
【０１１２】次に、周辺の他のピクセル値と比較する方
法には、Ｇ５の場合、Ｇ５＜Ｖ＊（Ｇ１＋Ｒ２＋Ｇ２＋
Ｂ１＋Ｂ２＋Ｇ７＋Ｒ５＋Ｇ８）／８でテストすること
ができる。すなわち、周辺の八つのピクセルの平均と比
較する方法に重み付け値Vを使用することは同じであ
る。
【０１１３】もう一つの方法には、単に隣の二つのピク
セルのみと比較することもできる。Ｇ５の場合、Ｇ５＜
Ｖ＊（Ｂ１＋Ｂ２）／２を介してチェックできる。すな
わち左右の二つの平均と比較することもできる。
【０１１４】もう一つの方法としてより簡単には、直ぐ
前の一つのピクセルのみを持ってテストすることも可能
である。すなわち、Ｇ５＜Ｖ＊Ｂ１である場合に、欠陥
ピクセルと見なす。
【０１１５】前記のような欠陥ピクセルの判断をする
時、全体フレーム平均を利用せず周囲のいくつのピクセ
ル値のみ比較して判断する場合、比較しようとする周囲
のピクセルが欠陥ピクセルである場合には、これを除外
した他の値のみで判断の根拠とする。
【０１１６】例えば、Ｇ５と周囲の八つのピクセルを比
較する場合、Ｇ１が欠陥ピクセルであるならば、Ｇ１を
除外した残りの七つのピクセルの平均を使用する。左右
の二つのピクセルのみを利用する場合、一つが欠陥ピク
セルであるならば、他の一つのみを利用して処理する。
直ぐ前の一つのピクセルのみを利用する場合に、前のピ
クセルが欠陥ピクセルであるならば、処理しようとする
ピクセルは、欠陥ピクセルではないと見なす。このよう
な判断のために、現在の時点まで探し出した欠陥ピクセ
ル位置臨時格納器３３４内の全ての情報を利用できる。
【０１１７】前記のようなダークピクセル如何判定過程
がイメージフレーム格納器３３４内の全てのピクセルに
対して行なわれたかを判断して（５３６）、イメージフ
レーム内の全てのDark Pixelの位置を探して欠陥ピクセ
ル位置臨時格納器３３４に格納する（５３５）。
【０１１８】図６ｃは、本発明に係るイメージセンサの
欠陥ピクセル補正方法の中、正常モード動作方法の一実
施例の詳細フローチャートであって、図５に示す過程の
中正常動作モードの進行過程（５６０）を詳細に示すも
のである。
【０１１９】正常動作モードで感知部３１０内のセンサ
を介して入力されたピクセルの位置と欠陥ピクセルの位
置情報を、現在ピクセルの位置感知器３２３及び欠陥ピ
クセル位置記録器３２４で各々読み出してその位置情報
を比較する（５６１）。
【０１２０】比較の結果、現在ピクセルの位置が欠陥ピ
クセル位置の中いずれか一つと同一であるならば（５６
２）、処理しようとするピクセルを欠陥ピクセルと判定
して、欠陥ピクセルに対する補間処理器３２２の結果を
出力する（５６４）。
【０１２１】比較の結果、欠陥ピクセルのどの位置とも
一致しなければ（５６２）、正常ピクセルと判定して正
常ピクセルに対する補間処理器３２１の結果を出力する
（５６３）。
【０１２２】前記のような過程を介して正常ピクセルに
対する補間処理器３２１または欠陥ピクセルに対する補
間処理器３２２から出力された値を利用してイメージを
組み合わせた後、ディジタルカメラシステムの出力部を
介してイメージを出力する（５６５）。
【０１２３】尚、本発明は、本実施例に限られるもので
はない。本発明の趣旨から逸脱しない範囲内で多様に変
更実施することが可能である。
【０１２４】
【発明の効果】上述したようになされる本発明による
と、欠陥ピクセルの位置を格納するために、別途の格納
装置であるＥＰＲＯＭを必要としないので、システムの
費用が増加しないだけでなく（ただし、セルフテストの
ためにレンズホルダーにＬＥＤ一つが付着必要)、欠陥
ピクセルの位置を探すために、センサの露出、撮影環境
などを変えながらいちいちテストをすべきである複雑な
過程が要求されないという優れた効果がある。
【０１２５】また、本発明は、ある場合には欠陥ピクセ
ルに現れて、ある場合には正常のように現れることもあ
るピクセル(このようなピクセルをMoving Defectとい
う)に対する補正が可能であるという優れた効果があ
る。
【図面の簡単な説明】
【図１】 本発明が適用される実際の物体とセンサに捕
獲された像の一例示図。
【図２ａないし図２ｃ】 従来のイメージセンサの欠陥
ピクセル補正装置の一実施例の構成図。
【図３】 本発明に係るイメージセンサの欠陥ピクセル
補正装置の一実施例の構成図。
【図４ａ】 本発明に係るイメージセンサの欠陥ピクセ
ル補正装置の中感知部の一実施例の詳細構成図。
【図４ｂ】 本発明に係るイメージセンサの欠陥ピクセ
ル補正装置の中イメージ補正部の一実施例の詳細構成
図。
【図４ｃ】 本発明に係るイメージセンサの欠陥ピクセ
ル補正装置の中制御部の一実施例の詳細構成図。
【図５】 本発明に係るイメージセンサの欠陥ピクセル
補正方法の一実施例のフローチャート。
【図６ａ】 本発明に係るイメージセンサの欠陥ピクセ
ル補正方法の中ホワイトピクセル判定方法の一実施例の
詳細フローチャート。
【図６ｂ】 本発明に係るイメージセンサの欠陥ピクセ
ル補正方法の中ダークピクセル判定方法の一実施例の詳
細フローチャート。
【図６ｃ】 本発明に係るイメージセンサの欠陥ピクセ
ル補正方法の中正常モード動作方法の一実施例の詳細フ
ローチャート。
【符号の説明】
３１０...感知部、３２１...正常ピクセルに対する補間
を行うための補間処理器、３２２...欠陥ピクセルに対
する補間を行うための補間処理器、３２３...現在ピク
セルの位置感知器、３２８...選択器、３２６...ＤＰＣ
処理器、３２５...比較器、３２９...その他の過程処理
器、３２７...ＤＰＣ駆動器、３２４...欠陥ピクセル位
置記録器、３３０...制御器、３４１...選択制御器。

Claims (18)

    【特許請求の範囲】
  1. 【請求項１】 イメージセンサの欠陥ピクセル補正装置
    において、 欠陥ピクセル探知のためのテストのために光源を含んで
    おり、実際の物体のイメージを入力されるための感知手
    段と、 欠陥ピクセル探知のためのテストのために、前記感知手
    段を介して入力されたイメージフレームに対して欠陥ピ
    クセル如何を判断して、その位置情報を格納するための
    制御手段と、 前記制御手段の欠陥ピクセル位置情報と前記感知手段を
    介して入力された実際の物体のイメージフレームのピク
    セル位置を比較して欠陥ピクセルに対する補正を行なう
    ためのイメージ補正手段とを含むことを特徴とするイメ
    ージセンサの欠陥ピクセル補正装置。
  2. 【請求項２】 前記感知手段の光源は、感知手段内のレ
    ンズを介して入ったイメージがセンサに伝達される通路
    から外れた所の中前記センサと近い所に位置しているこ
    とを特徴とする請求項1に記載のイメージセンサの欠陥
    ピクセル補正装置。
  3. 【請求項３】 前記感知手段の光源の明るさは、感知手
    段内のレンズを介して入力された外部の画像がセンサに
    捕獲されないほど明るいことを特徴とする請求項1に記
    載のイメージセンサの欠陥ピクセル補正装置。
  4. 【請求項４】 前記制御手段は、 前記感知手段内のセンサを介して入力されたイメージフ
    レームを格納するためのイメージフレーム格納手段と、 前記イメージフレーム格納手段に格納されたイメージフ
    レームに対して欠陥ピクセル(Defective Pixel)を探す
    ためのプログラムを格納しそのプログラムを行なうため
    の欠陥ピクセル探知手段と、 前記欠陥ピクセル探知手段で探知された欠陥ピクセルの
    位置を臨時保管するための欠陥ピクセル位置臨時格納手
    段と、 前記イメージフレーム格納手段、欠陥ピクセル探知手
    段、欠陥ピクセル位置臨時格納手段、前記感知手段、前
    記イメージ補正手段間の移動情報を制御するためのイメ
    ージ制御手段とを含むことを特徴とする請求項1に記載
    のイメージセンサの欠陥ピクセル補正装置。
  5. 【請求項５】 前記イメージ補正手段は、 正常ピクセルに対する補間を行なうための補間処理手段
    と、 欠陥ピクセルに対する補間を行なうための補間処理手段
    と、 前記感知部を介して入力された現在ピクセルの位置情報
    を管理するための現在ピクセルの位置感知手段と、 欠陥ピクセルの位置情報を前記制御手段から読み出して
    記録するための欠陥ピクセル位置記録手段と、 前記現在ピクセルの位置感知手段に格納されている現在
    ピクセルの位置と前記欠陥ピクセル位置記録手段に記録
    されている欠陥ピクセルの位置とを比較するための比較
    手段と、 前記比較手段の比較結果によってイメージ補正過程を行
    なうためのＤＰＣ処理手段と、 前記ＤＰＣ処理手段の処理結果によって前記正常ピクセ
    ルに対する補間処理手段または前記欠陥ピクセルに対す
    る補間処理手段の出力結果を選択するための選択手段と
    を含むことを特徴とする請求項1ないし４のいずれかに
    記載のイメージセンサの欠陥ピクセル補正装置。
  6. 【請求項６】 イメージセンサの欠陥ピクセル補正装置
    に適用されるイメージセンサの欠陥ピクセル補正方法に
    おいて、 イメージセンサのホワイトピクセル(White Pixel)を探
    索してその位置情報を臨時に格納する第１ステップと、 イメージセンサのダークピクセル(Dark Pixel)を探索
    してその位置情報を臨時に格納する第２ステップと、 臨時に格納された前記ホワイトピクセル位置情報及びダ
    ークピクセル位置情報を欠陥ピクセル位置記録器に記録
    し、実際の物体のイメージを入力される第３ステップ
    と、 前記実際の物体のイメージに対する各ピクセルの位置情
    報と前記ホワイトピクセル位置情報、またはダークピク
    セル位置情報を比較して同じ位置のピクセルに対しは、
    欠陥ピクセルに対する補間を実行した後、前記イメージ
    を再び組み合わせて出力する第４ステップとを含むこと
    を特徴とするイメージセンサの欠陥ピクセル補正方法。
  7. 【請求項７】 前記第１ステップは、 感知部の光源を遮断させ、センサの露出を最小にしてイ
    メージセンサのホワイトピクセルの探索のためのテスト
    条件をセッティングする第５ステップと、 前記テスト条件下で入力されたイメージフレームを格納
    する第６ステップと、 前記イメージフレームの各ピクセルに対して全体フレー
    ム平均値と比較するか、または周辺の他のピクセル値と
    比較して明るいと判断する場合には、該当ピクセルの位
    置情報を臨時に格納する第７ステップとを含むことを特
    徴とする請求項６に記載のイメージセンサの欠陥ピクセ
    ル補正方法。
  8. 【請求項８】 前記第２ステップは、 感知部の光源をオンにしてイメージセンサのダークピク
    セルの探索のためのテスト条件をセッティングする第５
    ステップと、 前記テスト条件下で入力されたイメージフレームを格納
    する第６ステップと、前記光源を遮断させる第７ステッ
    プと、 前記イメージフレームの各ピクセルに対して全体フレー
    ム平均値と比較するか、または周辺の他のピクセル値と
    比較して暗いと判断する場合には、該当ピクセルの位置
    情報を臨時に格納する第８ステップとを含むことを特徴
    とする請求項６に記載のイメージセンサの欠陥ピクセル
    補正方法。
  9. 【請求項９】 前記第7ステップの周辺の他のピクセル
    値と比較する方法は、該当ピクセル周辺の八つのピクセ
    ルの平均と比較する方法、単に隣の二つのピクセルと比
    較する方法、直ぐ前の一つのピクセルと比較する方法の
    中少なくともいずれか一つの方法が利用されることを特
    徴とする請求項７に記載のイメージセンサの欠陥ピクセ
    ル補正方法。
  10. 【請求項１０】 前記第8ステップの周辺の他のピクセ
    ル値と比較する方法は、該当ピクセル周辺の八つのピク
    セルの平均と比較する方法、単に隣の二つのピクセルと
    比較する方法、直ぐ前の一つのピクセルと比較する方法
    の中、少なくともいずれか一つの方法が利用されること
    を特徴とする請求項８に記載のイメージセンサの欠陥ピ
    クセル補正方法。
  11. 【請求項１１】 イメージセンサの欠陥ピクセル補正装
    置に適用されるイメージセンサの欠陥ピクセル補正方法
    において、 イメージセンサのホワイトピクセルの探索条件下で入力
    された第１イメージフレームを格納する第１ステップ
    と、 イメージセンサのダークピクセルの探索条件下で入力さ
    れた第２イメージフレームを格納する第２ステップと、 前記第１イメージフレーム及び前記第2イメージフレー
    ムに対して各々ホワイトピクセル及びダークピクセル如
    何を判断して、ホワイトピクセル及びダークピクセルの
    位置情報を臨時に格納しておいて、臨時に格納された前
    記ホワイトピクセル位置情報及びダークピクセル位置情
    報を欠陥ピクセル位置記録器に記録し、実際の物体のイ
    メージを入力される第３ステップと、 前記実際の物体のイメージに対する各ピクセルの位置情
    報と前記ホワイトピクセル位置情報、またはダークピク
    セル位置情報を比較して同じ位置のピクセルに対しは、
    欠陥ピクセルに対する補間を実行した後、前記イメージ
    を再び組み合わせて出力する第４ステップとを含むこと
    を特徴とするイメージセンサの欠陥ピクセル補正方法。
  12. 【請求項１２】 前記第１ステップの探索条件は、感知
    部の光源を遮断させ、センサの露出を最小にすることを
    特徴とする請求項１１に記載のイメージセンサの欠陥ピ
    クセル補正方法。
  13. 【請求項１３】 前記第２ステップは、 感知部の光源をオンにしてイメージセンサのダークピク
    セルの探索のためのテスト条件をセッティングする第５
    ステップと、 前記テスト条件下で入力されたイメージフレームを格納
    する第６ステップと、前記光源を遮断させる第７ステッ
    プとを含むことを特徴とする請求項11に記載のイメージ
    センサの欠陥ピクセル補正方法。
  14. 【請求項１４】 前記第３ステップは、 前記第１イメージフレームの各ピクセルに対して全体フ
    レーム平均値と比較するか、または周辺の他のピクセル
    値と比較して明るいと判断される場合には、該当ピクセ
    ルの位置情報を臨時に格納する第５ステップと、 前記第２イメージフレームの各ピクセルに対して全体フ
    レーム平均値と比較するか、または周辺の他のピクセル
    値と比較して暗いと判断される場合には、該当ピクセル
    の位置情報を臨時に格納する第６ステップと、 臨時に格納された前記ホワイトピクセル位置情報及びダ
    ークピクセル位置情報を欠陥ピクセル位置記録器に記録
    し、実際の物体のイメージを入力される第７ステップと
    を含むことを特徴とする請求項１１に記載のイメージセ
    ンサの欠陥ピクセル補正方法。
  15. 【請求項１５】 前記第５ステップまたは前記６ステッ
    プの周辺の他のピクセル値と比較する方法には、該当ピ
    クセル周辺の八つのピクセルの平均と比較する方法、単
    に隣の二つのピクセルと比較する方法、直ぐ前の一つの
    ピクセルと比較する方法の中、少なくともいずれか一つ
    の方法が利用されることを特徴とする請求項１４に記載
    のイメージセンサの欠陥ピクセル補正方法。
  16. 【請求項１６】 前記第４ステップは、 感知部内のセンサを介して入力された前記実際の物体の
    イメージに対するピクセルの位置情報を前記ホワイトピ
    クセル位置情報またはダークピクセル位置情報を比較す
    る第９ステップと、 前記第９ステップの比較結果、前記実際の物体のイメー
    ジに対するピクセルの位置情報が前記ホワイトピクセル
    位置情報、またはダークピクセル位置情報の中少なくと
    もいずれか一つと一致する場合には、前記実際の物体の
    イメージに対するピクセルに対して欠陥ピクセルに対す
    る補間を行なってその値を出力する第１０ステップと、 前記第９ステップの比較結果、前記実際の物体のイメー
    ジに対するピクセルの位置情報が前記ホワイトピクセル
    位置情報、またはダークピクセル位置情報の中いずれの
    ものとも一致しない場合には、前記実際の物体のイメー
    ジに対するピクセルに対して正常ピクセルに対する補間
    を行なってその値を出力する第１１ステップと、 前記第１０ステップ及び前記第１１ステップを介して出
    力された値を利用してイメージを組み合わせた後、該当
    イメージを出力する第１２ステップとを含むことを特徴
    とする請求項7ないし１５のいずれかに記載のイメージ
    センサの欠陥ピクセル補正方法。
  17. 【請求項１７】 イメージセンサの欠陥ピクセル補正の
    ために、大容量のプロセッサを備えたイメージセンサの
    欠陥ピクセル補正装置に、 イメージセンサのホワイトピクセルを探索してその位置
    情報を臨時に格納する第１機能と、 イメージセンサのダークピクセルを探索してその位置情
    報を臨時に格納する第２機能と、 臨時に格納された前記ホワイトピクセル位置情報及びダ
    ークピクセル位置情報を欠陥ピクセル位置記録器に記録
    し、実際の物体のイメージを入力される第３機能と、 前記実際の物体のイメージに対する各ピクセルの位置情
    報と前記ホワイトピクセル位置情報、またはダークピク
    セル位置情報を比較して同じ位置のピクセルに対しは欠
    陥ピクセルに対する補間を実行した後、前記イメージを
    再び組み合わせて出力する第４機能とを実現させるため
    のプログラムを記録したコンピュータで読み出すことが
    できる記録媒体。
  18. 【請求項１８】 イメージセンサの欠陥ピクセル補正の
    ために、大容量プロセッサを備えたイメージセンサの欠
    陥ピクセル補正装置に、 イメージセンサのホワイトピクセルの探索条件下で入力
    された第１イメージフレームを格納する第１機能と、 イメージセンサのダークピクセルの探索条件下で入力さ
    れた第２イメージフレームを格納する第２機能と、 前記第１イメージフレーム及び前記第2イメージフレー
    ムに対して各々ホワイトピクセル及びダークピクセル如
    何を判断して、ホワイトピクセル及びダークピクセルの
    位置情報を臨時に格納しておいて、臨時に格納された前
    記ホワイトピクセル位置情報及びダークピクセル位置情
    報を欠陥ピクセル位置記録器に記録し、実際の物体のイ
    メージを入力される第３機能と、 前記実際の物体のイメージに対する各ピクセルの位置情
    報と前記ホワイトピクセル位置情報、またはダークピク
    セル位置情報を比較して同じ位置のピクセルに対しは欠
    陥ピクセルに対する補間を実行した後、前記イメージを
    再び組み合わせて出力する第４機能とを実現させるため
    のプログラムを記録したコンピュータで読み出すことが
    できる記録媒体。
JP2001328107A 2000-10-25 2001-10-25 イメージセンサの欠陥ピクセル補正装置及びその方法 Expired - Lifetime JP4058254B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR20000063040 2000-10-25
KR2000-063040 2000-10-25

Publications (2)

Publication Number Publication Date
JP2002185863A true JP2002185863A (ja) 2002-06-28
JP4058254B2 JP4058254B2 (ja) 2008-03-05

Family

ID=19695464

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2001328107A Expired - Lifetime JP4058254B2 (ja) 2000-10-25 2001-10-25 イメージセンサの欠陥ピクセル補正装置及びその方法

Country Status (4)

Country Link
US (1) US7286171B2 (ja)
JP (1) JP4058254B2 (ja)
KR (1) KR100399884B1 (ja)
CN (2) CN1333572C (ja)

Families Citing this family (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE10205691A1 (de) * 2002-02-04 2003-08-14 Pilz Gmbh & Co Verfahren zum Überprüfen der Funktonssicherheit eines Bildsensors sowie Vorrichtung mit einem Bildsensor
KR100407158B1 (ko) * 2002-02-07 2003-11-28 삼성탈레스 주식회사 적외선 열상장비의 시변결점 보상방법 및 장치
US20030202111A1 (en) * 2002-04-30 2003-10-30 Jaejin Park Apparatus and methods for dark level compensation in image sensors using dark pixel sensor metrics
JP3912672B2 (ja) * 2002-07-05 2007-05-09 ソニー株式会社 固体撮像装置及びその画素欠陥検査方法
KR100461006B1 (ko) * 2002-10-28 2004-12-09 삼성전자주식회사 결함을 갖는 ｃｃｄ소자에 대한 보정기능을 갖는ｃｃｄ카메라 및 그 보정방법
US7136157B2 (en) * 2003-08-22 2006-11-14 Micron Technology, Inc. Method and apparatus for testing image sensors
KR101013631B1 (ko) * 2003-12-30 2011-02-10 엘지디스플레이 주식회사 액정 표시소자의 구동장치 및 그 구동방법
JP4239094B2 (ja) * 2004-03-03 2009-03-18 ノーリツ鋼機株式会社 画像処理装置、方法、及びプログラム
KR100619306B1 (ko) * 2004-09-24 2006-09-12 엘지전자 주식회사 디지털 이미징 장치의 불량화소 추출 방법
TWI244330B (en) * 2004-10-21 2005-11-21 Novatek Microelectronics Corp Image sensing device with pixel correction function and method for correcting pixel sensing-information in an image sensing device
KR100745837B1 (ko) * 2005-11-30 2007-08-02 엠텍비젼 주식회사 여유 데이터가 부가된 화소 데이터 출력 방법 및 장치
US9137466B2 (en) * 2006-08-30 2015-09-15 Micron Technology, Inc. Image sensor defect identification using optical flare
US20080055434A1 (en) * 2006-08-31 2008-03-06 Micron Technology, Inc. Image sensor defect identification using blurring techniques
KR100854722B1 (ko) * 2006-12-01 2008-08-27 엠텍비젼 주식회사 결함 픽셀 보정 방법 및 그 장치
DE102007032609A1 (de) * 2007-07-11 2009-03-05 Corpus.E Ag Kostengünstige Erfassung der inneren Raumform von Fußbekleidung und Körpern
KR101425582B1 (ko) * 2007-08-03 2014-08-04 삼성전자주식회사 초기 설정을 위한 디스플레이 제어방법 및 이를 이용한기기
US20110013053A1 (en) * 2008-09-29 2011-01-20 Rui Chen Defective pixel detection and correction
US20100231763A1 (en) * 2009-03-16 2010-09-16 Harris Corporation, Corporation Of The State Of Delaware Defective pixel detector for a digital video camera and associated methods
TWI495862B (zh) * 2012-10-04 2015-08-11 Pixart Imaging Inc 檢測影像感測器的方法以及相關裝置
WO2015069567A1 (en) * 2013-11-05 2015-05-14 Arizona Board Of Regents For And On Behalf Of Arizona State University Adaptive detection sensor array and method of providing and using the same
US9525865B2 (en) * 2014-10-23 2016-12-20 Texas Instruments Incorporated Fault detection and method of detecting faults in digital imaging systems
US10440299B2 (en) * 2015-09-04 2019-10-08 Apple Inc. Correcting pixel defects based on defect history in an image processing pipeline
KR101729663B1 (ko) 2015-12-31 2017-04-24 에스케이텔레콤 주식회사 양자 노이즈 기반 난수생성기의 성능을 관리하기 위한 장치 및 방법

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5047861A (en) * 1990-07-31 1991-09-10 Eastman Kodak Company Method and apparatus for pixel non-uniformity correction
JPH0762865B2 (ja) * 1993-05-13 1995-07-05 日本電気株式会社 指紋画像入力装置
JPH0750752A (ja) * 1993-08-06 1995-02-21 Fuji Xerox Co Ltd 画像密度変換方法及び装置
JPH07143408A (ja) 1993-11-18 1995-06-02 Hitachi Ltd ビデオカメラ用画素欠陥補正装置
JP3540485B2 (ja) * 1995-04-13 2004-07-07 株式会社リコー 電子スチルカメラ
US6002433A (en) * 1995-08-29 1999-12-14 Sanyo Electric Co., Ltd. Defective pixel detecting circuit of a solid state image pick-up device capable of detecting defective pixels with low power consumption and high precision, and image pick-up device having such detecting circuit
JP3819511B2 (ja) * 1997-02-13 2006-09-13 富士写真フイルム株式会社 Ｃｃｄ撮像デバイスにおけるモニタ方法およびディジタルスチルカメラ
US6665009B1 (en) * 1998-05-20 2003-12-16 Omnivision Technologies, Inc. On-chip dead pixel correction in a CMOS imaging sensor
JP2000217039A (ja) 1999-01-21 2000-08-04 Sanyo Electric Co Ltd 点欠陥検出方法および点欠陥画素値補正方法
JP3864021B2 (ja) 1999-11-01 2006-12-27 シャープ株式会社 ビデオカメラ
US6724945B1 (en) * 2000-05-24 2004-04-20 Hewlett-Packard Development Company, L.P. Correcting defect pixels in a digital image

Also Published As

Publication number Publication date
US7286171B2 (en) 2007-10-23
KR20020032331A (ko) 2002-05-03
KR100399884B1 (ko) 2003-09-29
JP4058254B2 (ja) 2008-03-05
US20020080253A1 (en) 2002-06-27
CN1333572C (zh) 2007-08-22
CN1198443C (zh) 2005-04-20
CN1617563A (zh) 2005-05-18
CN1356820A (zh) 2002-07-03

Similar Documents

Publication Publication Date Title
JP4058254B2 (ja) イメージセンサの欠陥ピクセル補正装置及びその方法
JP3587433B2 (ja) 固体撮像素子の画素欠陥検出装置
US20070065134A1 (en) Target-image position detecting apparatus, method and program for controlling said apparatus
WO2003103275A1 (en) Method and apparatus for real time identification and correction of pixel defects for image sensor arrays
JP2008131273A (ja) 画像処理装置、画像処理方法、及びプログラム
JP2009017475A (ja) 欠陥画素検出装置、撮像装置、および、欠陥画素の検出方法
JP5068158B2 (ja) 撮像装置
JP2003111088A (ja) 固体撮像装置
JP2012044452A (ja) 撮像装置及びその欠陥画素検出方法
JP5520704B2 (ja) 撮像装置、閃光判定方法およびプログラム
US20090102953A1 (en) Performance digital image sensing
JP4167200B2 (ja) 信号処理装置、信号処理方法及びデジタルカメラ
CN108063933B (zh) 图像处理方法及装置、计算机可读存储介质和计算机设备
JP4521858B2 (ja) 画像処理装置
JP4288954B2 (ja) 欠陥検出回路及び欠陥検出方法
US20070269133A1 (en) Image-data noise reduction apparatus and method of controlling same
JP5446955B2 (ja) 撮像装置
JP3128485B2 (ja) 固体撮像素子の欠陥画素検出装置
JP2020022135A (ja) 欠陥画素補正装置、撮像装置、欠陥画素補正方法
JP2009027289A (ja) ディジタル・カメラおよびその動作制御方法
JP5299159B2 (ja) 撮像装置およびプログラム
US20100231763A1 (en) Defective pixel detector for a digital video camera and associated methods
JP5090899B2 (ja) 撮像装置
WO2018193544A1 (ja) 撮像装置および内視鏡装置
JP2001245200A (ja) デジタルカメラ

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20041021

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A711

Effective date: 20060201

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20061101

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20070612

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20070626

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20070925

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20070928

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20071024

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20071211

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20071217

R150 Certificate of patent or registration of utility model

Ref document number: 4058254

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20101221

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111221

Year of fee payment: 4

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121221

Year of fee payment: 5

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20131221

Year of fee payment: 6

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

EXPY Cancellation because of completion of term