JP2007520107A - センサ素子の各領域上に画像を形成する撮像素子を備えたカラーイメージセンサ - Google Patents

センサ素子の各領域上に画像を形成する撮像素子を備えたカラーイメージセンサ Download PDF

Info

Publication number
JP2007520107A
JP2007520107A JP2006545802A JP2006545802A JP2007520107A JP 2007520107 A JP2007520107 A JP 2007520107A JP 2006545802 A JP2006545802 A JP 2006545802A JP 2006545802 A JP2006545802 A JP 2006545802A JP 2007520107 A JP2007520107 A JP 2007520107A
Authority
JP
Japan
Prior art keywords
color
sensor
light
image
region
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2006545802A
Other languages
English (en)
Inventor
シュローダー,デール,ダブリュー
グルーケ,ラッセル,ダブリュー
Original Assignee
アバゴ・テクノロジーズ・ジェネラル・アイピー(シンガポール)プライベート・リミテッド
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by アバゴ・テクノロジーズ・ジェネラル・アイピー(シンガポール)プライベート・リミテッド filed Critical アバゴ・テクノロジーズ・ジェネラル・アイピー(シンガポール)プライベート・リミテッド
Publication of JP2007520107A publication Critical patent/JP2007520107A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/10Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
    • H04N23/13Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths with multiple sensors
    • H04N23/15Image signal generation with circuitry for avoiding or correcting image misregistration
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/10Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
    • H04N23/13Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths with multiple sensors
    • H04N23/16Optical arrangements associated therewith, e.g. for beam-splitting or for colour correction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50Constructional details
    • H04N23/54Mounting of pick-up tubes, electronic image sensors, deviation or focusing coils
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof
    • H04N23/84Camera processing pipelines; Components thereof for processing colour signals
    • H04N23/843Demosaicing, e.g. interpolating colour pixel values
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/10Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
    • H04N25/11Arrangement of colour filter arrays [CFA]; Filter mosaics
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/40Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled
    • H04N25/41Extracting pixel data from a plurality of image sensors simultaneously picking up an image, e.g. for increasing the field of view by combining the outputs of a plurality of sensors

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Color Television Image Signal Generators (AREA)
  • Facsimile Heads (AREA)

Abstract

対象物を表わす画像信号(114)を生成するカラーイメージセンサ(100)。カラーイメージセンサは、光センサ(112)と、対象物の画像を異なる色の光で光センサの対応する領域(131、132、133)上にそれぞれ形成するように構成された撮像素子(101、102、103)とを有する。光センサはセンサ素子(例えば、121)を有し、そこに入射する光に応答して画像信号を生成する働きをする。

Description

背景
電子画像センサは、デジタルカメラに組み込まれるだけでなく、最近では、携帯電話や携帯情報端末(PDA)のような家庭用電子機器にも組み込まれている。こうした製品は市場の圧力を受けて、そのサイズが縮小され、または、所与のサイズの製品の中に組み込まれる機能の数が増加している。
図1は、デジタルカメラ、携帯電話、及び、PDAといった現在の製品に見られる一般的な従来のカラーイメージセンサ10の非常に単純化された例を示す略等角図である。イメージセンサ10は、単一の光センサ12と、その光センサの主表面16上に対象物の画像を形成する単一の撮像素子14とから構成される。
光センサ12は一般に、センサ素子の二次元(一般的には矩形)アレイと、関連読み出し回路(図示せず)とから構成される。例としてセンサ素子20の範囲(境界)が、破線で描かれている。図示の光センサ12の例は、48個のセンサ素子しか有していない点で、非常に単純化されている。一般的な光センサは、数十万個、又は、数百万個のセンサ素子を有する。各センサ素子は通常、相補型金属酸化膜半導体(CMOS)センサ素子、又は,電荷結合素子(CCD)センサ素子である。読み出し回路は、対象物からの光に応答してセンサ素子で生成された電気的値を受信し、通常はラスター走査順序で、その電気的値をアナログまたはデジタルの画像信号に変換する。光センサが、対象物に関する色情報を更に有するカラー画像信号を生成できるようにするために、光センサは、主表面16上にカラーモザイクフィルタ30を更に有する。
カラーモザイクフィルタの最も一般的なタイプは、発明者の名をとって名付けられたベイヤーモザイクフィルタである。図1に示すベイヤーカラーモザイクフィルタ30の例は、光センサ12におけるセンサ素子20の数をNとした場合、N/4個の赤色フィルタ、N/2個の緑色フィルタ、及び、N/4個の青色フィルタを備えている。赤色フィルタ、緑色フィルタ、及び、青色フィルタは一般にカラーフィルタと呼ばれる。各カラーフィルタは、光センサの複数のセンサ素子のうちの対応する1つに入射する光をフィルタリングする。これらのカラーフィルタは、4つで1つの正方形ブロックを成すように配置され、ブロックの1つが例として32に示されている。ブロック32は、赤色フィルタ34、互いに対角方向に配置された2つの緑色フィルタ36,37、及び、青色フィルタ38から構成される。カラーフィルタの残りのブロックの構成も同様である。図1において、フィルタの色は異なるハッチングによって示されている。カラーフィルタの擬似ランダム配置や、4色以上のフィルタの使用といった、ベイヤーパターンの変形も多数試みられている。
各センサ素子20は、そのセンサ素子に入射する光の強度を示す電気的値を生成する。センサ素子に入射する光は、そのセンサ素子の上に重ねられたカラーフィルタを通過する色を有する。例えば、赤色フィルタ34の下にあるセンサ素子は、そのセンサ素子に入射する赤色の光の強度を示す電気的値を生成する。カラー画像を表わすカラー画像信号は一般に、光センサ12の各センサ素子の上にあるカラーフィルタに入射する赤色の光、緑色の光、及び、青色の光の強度を示す電気的値を含むため、光センサは、センサ素子に接続された読み出し回路(図示せず)からそれらの電気的値を受信し、各センサ素子について欠けている電気的値を合成する処理回路(図示せず)を更に有する。処理回路は、近傍のセンサ素子によって生成された電気的値を使用し、欠けている電気的値を補間により合成する。
処理回路は、緑色フィルタによって覆われた各センサ素子について赤色値及び青色値を合成し、赤色フィルタによって覆われた各センサ素子について緑色値及び青色値を合成し、青色フィルタによって覆われた各センサ素子について赤色値及び緑色値を合成することにより、カラー画像信号を生成する。例えば、処理回路は、赤色フィルタ34によって覆われたセンサ素子について、緑色フィルタ36及び37によって覆われたセンサ素子によって生成された電気的値を使用し、場合によっては緑色フィルタによって覆われた他の近傍のセンサ素子から生成された電気的値を更に使用して、緑色値を生成する。緑色値を合成する元になる電気的値は、全て緑色値である。得られるカラー画像信号のうちの3分の2は、適当な色のフィルタによって覆われた近傍のセンサ素子によって生成された電気的値から、補間によって合成される。
従来の光センサ12では欠けている電気的値を合成しなければならないため、カラー画像信号に応じて写真を表示するときに、特定タイプの対象物の場合に、多数の問題が発生する。画像の隣接する領域間に大きな色の違いがあると、誤った色が生成される可能性がある。ほぼ水平な線及びほぼ垂直な線を表示した場合、エッジにギザギザが現われ、色問題が発生することがある。従来のカラーイメージセンサ10は通常、撮像素子14と光センサ12との間に空間フィルタ(図示せず)を更に有する。空間フィルタは、光センサ12上に形成された画像の高周波数成分を減らす働きをする。そのため、表示される画像の鮮明度が、光センサ12におけるセンサ素子20の数や、撮像素子14の光学的品質によって概ね知ることができる鮮明度よりも低下することを犠牲にして、今述べた影響の幾つかは改善されている。
従来の光センサ12の他の問題は、ある光センサ素子から近傍のセンサ素子への光のリークが、表示画像におけるぼやけの原因になるだけでなく、色の誤りの原因にもなることである。
従来のカラーイメージセンサ10が有する更に他の問題は、撮像素子14が、光センサ12上に多色光で画像を形成することから発生する。したがって、撮像素子14によって光センサ12上に形成される画像が全ての色について鮮明になるようにするためには、撮像素子14を色補正しなければならない。そのためには一般に、撮像素子14がマルチコンポーネントレンズでなければならず、マルチコンポーネントレンズは、レンズを通る光の伝送方向において単一コンポーネントレンズよりも一般に長い。そのため、カラーイメージセンサ全体の奥行き(深さ)が増加する。上記のような非常に小型化される用途においてイメージセンサの奥行きが長いことは、特に望ましくない。また、色補正が必要であることから、レンズ材料の選択肢にも制限がある。
従来のカラーイメージセンサ10が抱える更に他の問題は、センサ素子を覆うカラーフィルタの色とは無関係に、全てのセンサ素子が、同じ露光時間を使用することである。その結果、イメージセンサのダイナミックレンジが制限される。例えば、対象物が明るい緑の領域を有している場合、緑色のフィルタを有するセンサ素子の飽和を回避するために、光センサ12の露光時間を短縮しなければならない。この露光時間の短縮は、赤色のフィルタや青色のフィルタを備えたセンサ素子にも適用される。その結果、対象物の非常に小さな赤色部分の画像が形成されるセンサ素子によって生成される電気的値は、望ましくないノイズ成分を含むものとなる。
従来のカラーイメージセンサ10が抱える最後の問題は、照明能力が低いことである。カラーフィルタを使用すると、その下に置かれたセンサ素子は、カラーフィルタに入射する光の一部しか受け取ることができない。
したがって、上記のような問題のないカラーイメージセンサが必要とされている。
発明の概要
本発明は第1の態様において、対象物を表わすカラー画像信号を生成する方法であって、センサ素子のアレイを有する光センサを用意し、対象物からの異なる色の光によって光センサの対応する領域上に個別に画像形成することを含む方法を提供する。光センサは、そこに入射する光に応答してカラー画像信号を生成する働きをする。
本発明は第2の態様において、対象物を表わす画像信号を生成するためのカラーイメージセンサを提供する。このカラーイメージセンサは、光センサと、該光センサの各領域上に対象物の画像を異なる色の光で形成するように構成された撮像素子とを有する。光センサはセンサ素子を有し、そこに入射する光に応答して画像信号を生成する働きをする。
本発明の幾つかの実施形態は、カラーモザイクフィルタを使用せずに、カラー画像信号を生成する。カラーモザイクフィルタを使用しないことで、光センサの各領域の面積を従来の光センサのものに比べて縮小することができる。その結果、より小型の撮像素子を作成し、光センサに配置することが可能となる。また、狭帯域の光で画像を形成する実施形態では、撮像素子をさらに単純化することができ、したがって、従来の撮像素子よりも小型化することができる。実施形態によっては、撮像素子は、同様の特性を有するレンズに比べて大幅に短い奥行き(深さ)の回折素子を含む場合がある。光センサの各領域のサイズを小さくすることによって、特に全領域を同時に読み出す場合に、読み出し時間の短縮が可能となり、ロール・シャッター・アーチファクトが低減される。
光センサの各領域に対して露光制御を個別に適用することにより、各画像信号成分の信号対雑音比が最適化される。実施形態によっては、白色光のような広帯域スペクトルの光によって1以上の画像を形成し、それによって、特に光が弱い状況における信号対雑音比の大幅な向上が得られる。
詳細な説明
図2は、本発明によるカラーイメージセンサの非常に単純化された第1の実施形態100を示す等角図である。カラーイメージセンサ100は、対象物を表わすカラー画像信号を生成し、光センサ112、並びに、101、102及び103によって概略的に示された撮像素子から構成される。光センサ112の主表面116上には、センサ素子が配置される。動作時に、光センサは、主表面116に入射する光に応じてカラー画像信号114を生成する。撮像素子101、102及び103は、対象物の画像を光センサ112の各領域131、132及び133上に異なる色の光で形成するように構成される。画像間における光のリークを防止するために、画像が形成される光センサの各領域は、実質的に空間的に離れている。
カラーイメージセンサ100において、センサ素子は不規則なアレイを形成するように配置され、各領域131、132及び133はセンサ素子の矩形アレイからなる。破線は、領域131における例示的センサ素子121、領域132における例示的センサ素子122、及び、領域133における例示的センサ素子123をの境界を示している。破線126のような他の破線は、各領域131、132及び133におけるセンサ素子の隣接するセンサ素子間の境界を示している。この実施形態及び以下で説明する実施形態の説明において、各領域における例示的センサ素子の参照符号は、領域内の全てのセンサ素子を指すものとして使用される場合がある。各センサ素子は、相補型金属酸化膜半導体(COMS)センサ素子である。各センサ素子は、電荷結合素子(CCD)センサ素子、又は、他の適当なタイプのセンサ素子であってもよい。
図2に示す光センサ112の例は、各領域が24個のセンサ素子しか備えていない点で、非常に単純化されている。光センサ112の一般的な例は、各領域131〜133内に数十万個、又は、数百万個のセンサ素子を有する。同様に、以下で説明するカラーイメージセンサの種々の実施形態における光センサも、非常に単純化されている。また、本開示の図面は、撮像素子を通して見える対象物の見え方に対する撮像素子の効果が描かれていない点で、概略的なものである。
光センサ112の各領域131、132及び133は、関連読み出し回路(図示せず)を有している。各読み出し回路は、対象物からの光に応じて領域内のセンサ素子によって生成された電気的値を受信し、その電気的値を通常はラスター走査順に、アナログ又はデジタルの画像信号成分に変換する。あるいは、光センサ112は、全ての領域に共通な単一の読み出し回路を有する場合がある。領域131〜133によって生成された画像信号成分、又は、それらの画像信号成分から導出された信号は合わせて、対象物を表わすカラー画像信号114を構成する。
上記のように、撮像素子101、102及び103は、対象物の画像を光センサ112の各領域131、132、133上にそれぞれ異なる色の光で形成する。その目的のために、カラーイメージセンサ100は、撮像素子101及び領域131に対して直列になるように光学的に配置されたカラーフィルタ141、撮像素子102及び領域132に対して直列になるように光学的に配置されたカラーフィルタ142、及び、撮像素子103及び領域133に対して直列になるように光学的に配置されたカラーフィルタ143を更に有する。ある領域に入射する光が撮像素子及びカラーフィルタをいずれかの順序で通過した場合、その撮像素子、領域、及びカラーフィルタは直列になるように光学的に配置されている。
図2に示す例において、カラーフィルタ141は、撮像素子101と光センサ112の領域131との間において光センサの主表面上に配置され、カラーフィルタ142は、撮像素子102と光センサの領域132との間において光センサの主表面上に配置され、カラーフィルタ143は、撮像素子103と光センサの領域133との間において光センサの主表面上に配置される。代替実施形態において、カラーフィルタ141、142及び143は、撮像素子101、102及び103と、領域131、132及び133との間にそれぞれ個別に支持される場合がある。更に他の代替実施形態において、カラーフィルタ141、142及び143は、撮像素子101、102及び103によってそれぞれ支持される場合がある。例えば、カラーフィルタはそれぞれ、各撮像素子の表面上に配置される場合がある。カラーフィルタを配置する表面は、対象物の方を向いた表面であってもよいし、光センサの方を向いた表面であってもよい。他の構成として、カラーフィルタ141、142及び143は、対象物と撮像素子101、102及び103との間にそれぞれ配置される場合がある。他の構成も可能である。
図2に示す例において、カラーフィルタ141は、赤色の光を光センサ112の領域131へ通過させる赤色フィルタであり、カラーフィルタ142は、緑色の光を領域132へ通過させる緑色フィルタであり、カラーフィルタ143は、青色の光を領域133へ通過させる青色フィルタである。他の実施形態において、カラーフィルタ141〜143の色は、記載したものとは異なる場合がある。
カラーイメージセンサ100の全体的奥行き(深さ)、すなわち、主表面116とは反対側の光センサ112の主表面と、光センサ112から離れたところにある撮像素子101〜103の表面との間の距離は、図1を参照して上で説明した従来のカラーイメージセンサ10のものに比べて約30%短い。この奥行きの低減に貢献する要素は2つある。
第1に、カラーイメージセンサ100における撮像素子101〜103と光センサ112との間の距離は、従来のカラーイメージセンサ10における撮像素子14と光センサ12との間の距離よりも短い。カラーイメージセンサ100では、モザイクカラーフィルタが存在しないため、空間アーチファクトを指定レベルまで低減するために必要な空間フィルタリングが大幅に少なくて済み、空間フィルタリングは不要な場合もある。空間フィルタリングが減少しているため、光センサ112は、図1に示した従来の光センサ12の約半分未満の数のセンサ素子を備えた各領域131〜133を使用して、指定された空間分解能を提供することができる。したがって、各領域131〜133の直線寸法(長さ寸法)は、従来の光センサ12のものの約1/√2である。領域131〜133を完全に覆う画像を形成するために、撮像素子101〜103と光センサ112の間の距離はその領域の直線寸法に比例して減らすことができ、すなわち、従来のカラーイメージセンサ10における撮像素子14と光センサ12との間の距離に対して、約1/√2、すなわち、約30%だけ減らすことができる。また、撮像素子の寸法自体も、領域の直線寸法の低減に比例して低減される。
第2に、カラーイメージセンサ100において、撮像素子101〜103の奥行き(深さ)は、カラーイメージセンサ10の撮像素子14のものに比べて短い。カラーイメージセンサ100において、撮像素子101〜103は、互いに異なる色の狭帯域幅の光で光センサ112の領域131〜133上に画像を形成する。狭帯域幅の光とは一般に、例えば、赤色、緑色、又は、青色のような1色の原色として感じられる波長範囲の光である。可視スペクトル全体からの成分を少なくとも含む光は、広帯域スペクトル光と呼ばれる。白色光であると感じられる広帯域スペクトル光は白色光と呼ばれ、白は、本開示の目的の色とみなされる。図2の例において、撮像素子101〜103は広帯域スペクトル光を通過させるが、カラーフィルタ141〜143は、狭帯域幅の光しか撮像素子101〜103からセンサ112の各領域131〜133のセンサ素子へ通過させない。そのため、光センサ112上への画像形成に関しては、カラーフィルタ141〜143を通過する狭帯域幅の光に対する撮像素子101〜103の撮像特性だけしか、考慮する必要はない。したがって、撮像素子101〜103の構成は、広帯域幅の光で画像を形成する撮像素子14に比べて単純にすることができる。なぜなら、撮像素子101〜103は、狭帯域幅の光だけを使用して画像を形成するものとみなすことができ、それらの撮像素子は、必要であるとしても、僅かな色補正しか必要としないからである。したがって、各撮像素子101〜103は、撮像素子14に比べて少ない部品で、指定された光学的品質の画像を形成することができる。また、上記のように、各部品のサイズも小さい。撮像素子101〜103はその部品数が少なく、サイズも小さいため、撮像素子の奥行きを撮像素子14のものに比べて短くすることができる。
以下で詳細に説明するように、狭帯域幅の光で画像を形成する各撮像素子101〜103は、単一の凸状非球面と同じくらい単純にすることができる。また、領域131〜133上に狭帯域幅の光で画像を形成する撮像素子101〜103の場合、撮像素子101〜103は、屈折部品の代わりに1以上の回折部品を有することができる。回折部品は一般に、同等の光学特性を有する屈折部品に比べて奥行きが短い。回折部品を使用することで、撮像素子14に比べて撮像素子101〜103の奥行きの更なる縮小を図ることができ、したがって、カラーイメージセンサ10に比べてカラーイメージセンサ100の奥行きの更なる縮小を図ることができる。図11A〜図11Dを参照して以下で説明するものと同様の撮像素子アレイの一実施形態を含むカラーイメージセンサ100の一実施形態の全体的奥行きは、他の同等の従来のカラーイメージセンサの奥行きよりも約60%短い。
上記のように、カラーイメージセンサ100は、各領域131〜133におけるセンサ素子の数が少ないにもかかわらず、発生する空間周波数アーチファクトの数が、カラーイメージセンサ10に比べて少ない。カラーイメージセンサ100は、さらに性能の利点も有する。第1に、撮像素子101〜103が、光センサ112の領域131〜133上にそれぞれ異なる色の光で対象物の画像を形成するため、128で概略的に示されている補助回路は、各領域に対して個別に露光制御を適用する露光制御回路を有する場合がある。個別の露光制御により、各領域131〜133のセンサ素子によって画像を取得する際の露光を設定することで、その領域に入射する光のダイナミックレンジと、その領域におけるセンサ素子のダイナミックレンジとの間に最適な関係を得ることができる。従来の露光制御技術を使用して、各領域に対して個別に露光制御を適用することも可能である。
補助回路128が独立した露光制御回路を有するカラーイメージセンサ100の実施形態において、補助回路128は、各領域131〜133について正規化回路を更に有する。各正規化回路は、露光制御回路によって提供される露光データに応じて、対応する領域によって生成された画像信号を処理し、もしあれば、領域間における露光の差異を補正する。最短露光時間を有する領域の正規化回路は、未変更の領域によって生成された画像信号成分をそのまま維持する。比較的長い露光時間を有する領域の正規化回路はいずれも、その領域によって生成された画像信号成分を、最小露光時間に対するその領域の露光時間の比に比例して減衰させる。正規化回路は、それらの画像信号成分間のレベル関係を補正し、仮に光センサ112の複数の領域が全て同じ露光時間を有していた場合に得られるであろう画像信号成分のレベルに合わせる。この減衰は、画像信号成分を減衰させるだけでなく、その画像信号成分に混入したノイズも減衰させる。その結果、画像信号成分の信号対雑音比が向上し、したがって、全ての領域が最短露光時間に等しい露光時間を有している場合に比べて、カラー画像信号の信号対雑音比が向上する。
光センサ112の各領域131〜133は、図1を参照して上で説明した従来の光センサ12に比べて、小数のセンサ素子しか備えていない。したがって、所与の読み出し速度において、光センサ112の領域131〜133のうちのいずれか1つから画像信号成分を読み出すために要する時間は、光センサ12からカラー画像信号を読み出すために要する時間よりも短い。また、光センサ112では、全ての領域131〜133を並列に読み出すことにより、個々の領域131〜133の読み出し時間の利点が維持される。したがって、従来の光センサ12からのカラー画像信号の読み出しに比べて高速に、3つの画像信号成分を含む完全なカラー画像信号を光センサ112から読み出すことができる。その結果、カラーイメージセンサ100は、従来のカラーイメージセンサ10に比べて少ないロール・シャッタ・アーチファクトしか持たない。
カラーイメージセンサ100の一部の実施形態によって実施されるカラーイメージセンサ100の読み出し時間の短縮、及び、補間処理の省略によれば、カラーイメージセンサ100は、従来のカラーイメージセンサ10に比べて高速に写真を撮影することが可能になる。
図2に示す例において、光センサ112はシリコン基板130を含み、その上に、従来の半導体プロセスを使用して、センサ素子121、122及び123と同様のセンサ素子が、領域131、132及び133にそれぞれ形成される。センサ素子の幾つかの部分は、基板130内に配置される場合もあるが、以下では、説明の都合上、それらが基板「上」にあるものとみなされる。センサ素子が配置される基板外側領域131〜133は、後で説明されるような露光制御回路や、画像信号成分、及び/又は、該画像信号成分から導出されたカラー画像信号の処理を行う信号処理回路のような回路を含む補助回路128によって占められる場合がある。
補助回路128の一部として基板130上に配置される上記の信号処理回路は、画像信号成分、及び/又は、カラー画像信号の圧縮や、JPEG又はMPEGフォーマットのカラー画像信号へのカラー画像信号の変換等の機能を実施する場合がある。補助回路128の一部を形成する信号処理回路の他の機能には、当該技術分野において知られているように、領域131〜133によってそれぞれ生成される赤色、緑色、及び、青色の画像信号成分を合計して照度信号を生成したり、その照度信号から赤色画像信号成分及び青色画像信号成分を減算し、個々のカラー差分信号を生成することなどがある。実施形態によっては、照度信号とカラー差分信号を合わせて、カラー画像信号を構成する場合がある。他の実施形態では、赤色、緑色、及び、青色の画像信号成分を合わせて、カラー画像信号を構成する場合がある。カラー画像信号は、ここに記載した例とは異なる方法で構成してもよい。
センサ素子及び関連回路を基板130上に作成した後、異なる色のカラーフィルタ141〜143が、基板の主表面116上に取り付けられる。
代替実施形態において、センサ素子の各領域131〜133は、個々の基板(図示せず)上に作成される場合がある。各基板上には、上記のように、センサ素子に関連する1以上の回路が更に作成される場合がある。次に、個々の領域と同じのサイズの基板が、プリント回路基板のような、基板間の位置関係を決定するボード上に取り付けられる。個々の基板上に作成されたセンサ素子は合わせてセンサ素子のアレイを形成し、各基板上に作成されたセンサ素子は、そのアレイの対応する領域を構成する。
図示の例において、領域131〜133は、それらの中心が三角形の頂点にそれぞれ位置するようにして、光センサ112に配置されている。そのため、領域は、隣り合った角の部分でしか、近接していない。この配置によれば、光センサ112の各領域131〜133上に形成される画像から隣りの領域への光のリークを最小限に抑えることができる。そのような光のリークは、カラーイメージセンサ100によって生成されるカラー画像信号114に応じて表示される画像に「ゴースト」を形成する可能性があるため、望ましくない。図7〜図9を参照して後で説明するものと同様の光吸収スクリーンを領域131〜133の隣り合う部分の間に配置することにより、光の残存リークを抑えることができる。
図2に示すカラーイメージセンサ100の例は、光センサ112の各領域131〜133が、同数のセンサ素子を有している。しかしながら、多くのカラー撮像システムは、輝度情報よりも少ないクロミナンス(色差)情報を使用して動作する。クロミナンス情報の量を減らすために、補助回路128は、色差信号をダウンサンプリングし、その情報含有量を減らす回路を有する場合がある。あるいは、情報量の少ない画像信号成分を生成するように領域131と領域133を構成してもよい。
図3は、輝度情報よりも少ないクロミナンス情報を使用して動作する用途において使用するのに適した、本発明によるカラーイメージセンサの非常に単純化された第2の実施形態150を示す等角図である。図2を参照して上で説明したカラーイメージセンサ100に対応するカラーイメージセンサ150の要素には、同じ参照符号を付してあり、ここで再び詳しい説明はしない。
カラーイメージセンサ150において、可視スペクトラムの中心から比較的離れたところにある光、すなわち、赤色の光または青色の光で各画像が形成される光センサ162の領域131及び133はいずれも、可視スペクトルの中心に比較的近い光、すなわち、緑色の光で画像が形成される領域132に比べて、少数のセンサ素子しか有していない。図示の例において、領域132におけるセンサ素子の数に対する、領域131及び133のそれぞれにおけるセンサ素子の数の比(センサ素子比)は1/4である。センサ素子比は、1/2のような他のセンサ素子比であってもよい。
カラーイメージセンサ150では、全ての領域131〜133において、センサ素子のサイズが等しい。例えば、領域131におけるセンサ素子121、領域132におけるセンサ素子122、及び、領域133におけるセンサ素子123は、その面積及び直線寸法が全て等しい。そのため、領域131と領域133の面積は、センサ素子比に比例して領域132の面積よりも小さく、ほぼセンサ素子比の平方根だけその直線寸法が小さい。さらに、撮像素子101及び103の直径は撮像素子102よりも小さく、また、撮像素子101及び103と、主表面166との間の距離は、センサ素子比の平方根にほぼ比例して、撮像素子102と、主表面166との間の距離よりも短い。最後に、カラーフィルタ141及び143の直線寸法は、センサ素子比の平方根にほぼ比例して、カラーフィルタ142の直線寸法よりも短い。
カラーイメージセンサ150の実施形態によっては、補助回路128は、領域131及び133の読み出し回路(図示せず)によって生成された画像信号成分をアップサンプリングし、領域132の読み出し回路(図示せず)によって生成される画像信号成分における各緑色値に対応する赤色値及び青色値を生成する回路を有する場合がある。アップサンプリング技術は当該技術分野で既知のものであるから、ここでは説明しない。幾つかの領域が他の領域に比べて小数のセンサ素子しか持たないような以下で説明する実施形態では、補助回路128は、アップサンプリングを実施する回路を有する場合がある。
可視スペクトルの中心から比較的離れたところにある光で画像が形成される領域におけるセンサ素子のサイズを、可視スペクトルの中心に比較的近いところにある光で画像が形成される領域におけるセンサ素子のサイズに比べて大きくし、光センサの全ての領域のサイズ及び直線寸法が等しくなるようにすることによって、撮像素子のサイズを全て同じサイズにし、撮像素子が光センサの主表面から全て同じ距離に配置されるような、撮像素子の設計の単純化を行うことができる。
図4は、光センサ212の領域131〜133の面積及び直線寸法が全て等しい、本発明によるカラーイメージセンサの非常に単純化された第3の実施形態200を示す等角図である。カラーイメージセンサ200は、輝度情報よりも少ないクロミナンス情報を使用して動作する用途における使用に適している。カラーイメージセンサ200において、可視スペクトルの中心から比較的離れたところにある光、すなわち、赤色の光及び青色の光で各画像が形成される光センサ212の領域131及び133はそれぞれ、可視スペクトルの中心に比較的近いところにある光、すなわち、緑色の光で画像が形成される光センサの領域132に比べて、少数のセンサ素子しか有していない。図示の例において、センサ素子比は1/4である。1/2のような他のセンサ素子比も可能である。図2を参照して上で説明したカラーイメージセンサ100の要素に対応するカラーイメージセンサ200の要素には同じ参照符号を付し、再度詳しい説明はしないものとする。
カラーイメージセンサ200において、光センサ212の領域131、132及び133は全て同じサイズを有しているが、可視スペクトルの中心から比較的離れたところにある光、すなわち、赤色の光及び青色の光で各画像が形成される光センサ122の領域131におけるセンサ素子221、及び、領域133におけるセンサ素子223は、可視スペクトルの中心に比較的近いところにある光、すなわち、緑色の光で画像が形成される光センサの領域132におけるセンサ素子222に比べて、その数は少ないが、サイズは大きい。領域131におけるセンサ素子221、及び、領域133におけるセンサ素子223は、センサ素子比の逆数にほぼ比例して、領域132にあるセンサ素子222よりもその面積が大きく、また、センサ素子比の平方根のほぼ逆数だけ、領域132にあるセンサ素子222よりもその直線寸法は大きい。撮像素子102、102及び103は同じ直径を有し、それらは全て、センサ212の主表面216から同じ距離に配置される。その結果、これらの撮像素子の設計は、図3に示したカラーイメージセンサに比べて単純になる。最後に、カラーフィルタ141、142及び143は全て同じサイズを有する。
カラーイメージセンサ200の実施形態によっては、領域131及び133によって生成される画像信号成分を上記のようにアップサンプリングする場合がある。
上記のカラーイメージセンサの実施形態では、センサ素子は全て同じ基板に作成され、基板は通常、単結晶シリコンである。光からキャリアへのシリコンの変換効率は、可視スペクトルの波長全体にわたって変動する。また、カラーフィルタ141〜143は、それらが伝送する光に対して異なる残留減衰量を有する。図4を参照して上で説明した実施形態において、領域131及び133におけるセンサ素子221及び223のサイズをそれぞれ、領域132におけるセンサ素子222に比べて大きくすると、カラーイメージセンサ200は、可視スペクトルの中間における感度よりも、可視スペクトルから離れたところにおける感度の方が高くなる。その結果、緑色の光に対する感度よりも青色の光に対する感度の方が低いシリコンの感度を補正することができ、したがって、領域133によって生成される青色画像信号成分の信号対雑音比を向上させることができる。ただし、領域131にあるセンサ素子のサイズを大きくすると、赤色の光に対する感度が高くなりすぎ、飽和現象が生じる場合がある。異なる色の光に対する光センサの種々の領域の感度の違いは通常、各領域によって生成される画像信号成分を、その色の光が入射する領域におけるセンサ素子の感度に反比例するようにスケーリングすることによって等化される。
図5は、対象物からの各色の光に対して均等な感度が得られるように、光センサの各領域におけるセンサ素子が異なる面積を有するように構成された、本発明によるカラーイメージセンサの非常に単純化された第4の実施形態250を示す等角図である。カラーイメージセンサ250は、輝度情報よりも少ないクロミナンス情報を使用して動作する用途における使用に適している。カラーイメージセンサ250において、可視スペクトルの中心から比較的離れたところにある光、すなわち、赤色の光及び青色の光によって各画像が形成される光センサ262の領域131及び133はそれぞれ、可視スペクトルの中心に比較的近いところにある光、すなわち、緑色の光によって画像が形成される光センサの領域132に比べて、少数のセンサ素子しか有していない。図示の実施形態において、センサ素子比は1/4である。1/2のような他のセンサ素子比も可能である。図2を参照して上で説明したイメージセンサ100の要素に対応するイメージセンサ250の要素には同じ参照符号を付し、ここで再度詳しい説明はしない。
カラーイメージセンサ250において、可視スペクトルの中心から比較的遠いところにある光、すなわち、赤色の光及び青色の光によって各画像が形成される光センサ262の領域131にあるセンサ素子271及び領域にあるセンサ素子273の数は、可視スペクトルの中心に比較的近い光、すなわち、緑色の光によって画像が形成される光センサの領域132にあるセンサ素子272の数よりも少ない。また、領域131〜133に入射する各色の光に対する感度を均等化するために、領域131〜133のそれぞれにおけるセンサ素子の面積及び直線寸法は異なる。例えば、シリコンベースのセンサ素子の一実施形態では一般に、波長約450nmの青色の光に対する感度が、波長約550nmの緑色の光に対する感度の約0.67倍であり、波長約650nmの赤色の光に対する感度が、緑色の光に対する感度の約1.25倍である。カラーイメージセンサ250では、赤色の光で画像が形成される領域131におけるセンサ素子271の面積を、緑色の光で画像が形成される領域132におけるセンサ素子272の面積の約0.8倍にし、青色の光で画像が形成される領域133におけるセンサ素子273の面積を、センサ素子272の面積の約1.5倍にすることにより、各色の光に対する各領域の感度を等化している。言い換えれば、センサ素子271の直線寸法はセンサ素子272の約0.9倍であり、センサ素子273の直線寸法はセンサ素子272の約1.25倍である。
その結果、領域131と領域132の面積比は、センサ素子271とセンサ素子272の面積比と、センサ素子比の積に等しくなり、直線寸法の比は、センサ素子271とセンサ素子272の直線寸法の比と、センサ素子比の積に等しくなる。同様に、領域133と領域132の面積比は、センサ素子273とセンサ素子272の面積比と、センサ素子比の積に等しくなり、直線寸法の比は、センサ素子273とセンサ素子272の直線寸法の比と、センサ素子比の積に等しくなる。
また、この実施形態では、撮像素子101と撮像素子102の直径比及び距離比が、センサ素子271とセンサ素子272の直線寸法の比と、センサ素子比の積に等しい。同様に、撮像素子103と撮像素子102の直径比及び距離比は、センサ素子273とセンサ素子272の直線寸法の比と、センサ素子比の積に等しい。距離比とは、主表面266から各撮像素子までの距離の比である。最後に、カラーフィルタ141、142及び143は、領域131、132及び133と同様の面積及び直線寸法をそれぞれ有する。
カラーフィルタ141、142及び143を通過する光の残留減衰量に違いがあっても、今説明したものとは異なる面積及び長さの比を更に使用して、領域131、132及び133の感度を等化することができる。
上で説明したカラーイメージセンサの実施形態では、各撮像素子と、光センサの対応する領域との間に狭帯域カラーフィルタを配置することによって、各領域に異なる色の光で画像を形成している。各カラーフィルタにより、カラーフィルタに入射する対象物からの光のうちの比較的小さな割合の部分だけが、その下にある光センサの領域にあるセンサ素子に到達する。なぜなら、カラーフィルタは、対象物によって反射された光のうち、狭い波長範囲の光を除いて反射光を全て遮断するからである。その結果、特に、光が弱い状況では、カラーイメージセンサによるカラー画像信号出力の信号対雑音比が劣化する。
図6は、従来のカラーイメージセンサよりも大幅に大きな信号対雑音比を有し、また、本発明によるカラーイメージセンサの上記の実施形態よりも大幅に大きな信号対雑音比を有する、本発明によるカラーイメージセンサの非常に単純化された第5の実施形態300を示す等角図である。この実施形態では、対象物の画像が、白色光によって光センサ312の領域132上に形成され、また、対象物の画像が、可視スペクトルの中心から比較的離れたところにある波長帯域の狭帯域の光、例えば、赤色の光及び青色の光によって光センサの残りの領域131及び領域133上に形成される。
カラーイメージセンサ300において、白色フィルタ342は、撮像素子302及び光センサ312の領域132に対して直列になるように光学的に配置される。白色フィルタ342がそう呼ばれる理由は、このフィルタは、白色光、又は、他の広帯域スペクトルの光を通過させるからである。一実施形態において、白色フィルタ342は、可視スペクトル全体を通過させる赤外線遮断フィルタである。他の実施形態において、白色フィルタは、赤色、緑色、及び、青色のスペクトル成分を通過させる。他の実施形態では、暗いところで写真をとる機能を得るために、白色フィルタは、赤外線付近の光を更に通過させる。白色フィルタ342は、狭帯域幅の光を通過させるフィルタ141、142及び143のうちのどれよりも対象物からの光の大きな部分を通過させ、従って、カラー画像信号の信号対雑音比を12dB程向上させることができる。
図示のカラーイメージセンサ300の例は、輝度情報よりも少ないクロミナンス情報を使用して動作させる用途に適している。対象物の画像が狭帯域幅の光によって形成される光センサ312の領域131及び133はそれぞれ、画像が白色光によって形成される光センサの領域132に比べて、少数の大きなセンサ素子を有している。図示の例において、センサ素子比は1/4である。1/2のような他のセンサ素子比も可能である。これらの領域は、代わりに、同数のセンサ素子を有する場合もある。図2を参照して上で説明したイメージセンサ100の要素に対応するイメージセンサ300の要素には同じ参照符号を付し、ここで再び詳しい説明はしない。
カラーイメージセンサ300において、光センサ312の領域131、132及び133は同じサイズを有しているが、可視スペクトルの中心から比較的離れたところにある狭帯域幅の光、すなわち、赤色の光及び青色の光によって各画像が形成される領域131及び領域133のそれぞれにおけるセンサ素子321及び323は、その狭帯域幅の光よりも広い波長範囲を有する白色光によって画像が形成される領域132におけるセンサ素子322に比べて、その数は少なく、面積は大きい。カラーフィルタ141、342及び143は、全て同じサイズである。
撮像素子101、302及び103は同じ直径を有し、光センサ312の主表面316から全て同じ距離に配置される。撮像素子302は、多色光によって画像を領域132上に形成する点が、撮像素子101及び103とは異なる。したがって、撮像素子302は、複数成分の色補正撮像素子であり、したがって、撮像素子101及び103よりも大きな奥行きを有する。撮像素子302は、図1を参照して上で説明した撮像素子14と同様の構造を有しているが、その直径(したがって、深さ)は撮像素子14よりも小さく、主表面16に対する撮像素子14の距離に比べて、主表面316に近い位置に配置される。なぜなら、領域132は、その直線寸法が光検出器12(図1)よりも小さいからである。したがって、カラーイメージセンサ300は、図2〜図5を参照して上で説明したカラーイメージセンサ100、150、200及び250よりも奥行きが長いが、それでも、カラーイメージセンサ300は、図1を参照して上で説明した従来のカラーイメージセンサ10よりも奥行きが長くはない。また、所与のセンサ素子の面積及び構成の場合、カラーイメージセンサ300は、光の少ない状況下において、従来のカラーイメージセンサ10よりも、実質的に信号対雑音比の大きいカラー画像信号314を生成する。
上記のように、光センサ312の領域131、132及び133は、同じ直線寸法及び面積を有しているが、領域131及び133は領域132に比べて少数のセンサ素子しか有していない。この構成は、図4を参照して上で説明したイメージセンサ200の光センサ212に似ている。ただし、図2を参照して上で説明したカラーイメージセンサ100におけるように領域131〜133が同数の同じ面積のセンサ素子を有することは、本発明にとって重要ではない。他の代替実施形態において、領域131、132及び133におけるセンサ素子は全て同じ面積を有するが、図3を参照して上で説明したカラーイメージセンサ150におけるように、領域131及び133は領域132に比べて少数のセンサ素子しか持たない場合がある。更に他の実施形態では、領域131、132及び133におけるセンサ素子の面積を異ならせることにより、光センサ312のスペクトル感度を等化する場合がある。この場合、図5を参照して上で説明したカラーイメージセンサ250におけるように領域131及び133は領域132に比べて少数のセンサ素子しか持たなくてもよいし、また、上記のように領域131、132及び133が全て同数のセンサ素子を有していてもよい。
上記のように、領域132における撮像素子302による画像形成に使用される白色光は、フルスペクトルの白色光であってもよいし、赤色、緑色、及び、青色のスペクトル成分から構成された白色光であってもよい。上記のように、従来のカラーイメージセンサは、赤色、緑色、又は、青色の光を個別に受信するセンサ素子を使用してカラー画像信号を生成している。そのような従来のカラーイメージセンサでは、赤色、緑色、及び、青色の光のそれぞれに応じて生成される赤色、緑色、及び、青色の画像信号成分を合計し、輝度信号が生成される。さらに、その輝度信号から赤色画像信号成分を減算し、また、その輝度信号から青色画像信号成分を減算することにより、対応するカラー差分信号がそれぞれ生成される。輝度信号及びカラー差分信号は、合わせてカラー画像信号を構成する。
カラーイメージセンサ300の幾つかの実施形態において、撮像素子302が白色光で画像を形成する領域132によって生成される画像信号成分は輝度信号を提供し、赤色の光と青色の光によって画像が形成される領域131及び133によって生成される画像信号成分はそれぞれアップサンプリングされ、輝度信号から減算され、対応するカラー差分信号がそれぞれ生成される。輝度信号及びカラー差分信号は、合わせてカラー画像信号314を構成する。白色光が赤色、緑色、及び、青色のスペクトル成分から構成されるカラーイメージセンサ300の一実施形態は、図1に示したカラーイメージセンサ10によって生成されるカラー画像信号の場合と全く同じ比色法を使用してカラー画像信号314を生成する。白色光がフルスペクトルの白色光であるカラーイメージセンサ300の一実施形態は、従来のカラーイメージセンサによって生成されるカラー画像信号のものとは異なる比色法を使用してカラー画像信号314を生成する。なぜなら、領域132が、可視スペクトルの赤色、緑色、及び、青色のスペクトル成分に応じて輝度信号を生成するのではなく、可視スペクトル全体に応じて輝度信号を生成するからである。多くの用途にとって、この比色法の違いは許容できるものである。
上で説明した本発明によるカラー光センサの実施形態において、光センサの各領域の中心は、三角形の頂点に位置している。これによって、それらの領域の近接して配置される部分のサイズを最小限に抑えることができ、したがって、各領域に形成される画像から隣りの領域への光のリークの影響を最小限に抑えることができる。カラーイメージセンサのサイズをさらに縮小するために、光センサの領域は、代わりに、直線状に配置してもよい。
図7は、光センサの複数の領域が直線状に垂直に配置される、本発明によるカラーイメージセンサの非常に単純化された第6の実施形態350を示す等角図である。本明細書の開示において、「水平」及び「垂直」という用語は、重力によって決まる方向を意味するのではなく、画像の長い方の寸法と短い方の寸法の方向を記すための従来通りのビデオ的意味で使用される。カラーイメージセンサ350は、図4を参照して上で説明したカラーイメージセンサ200に基づいている。図2及び図4を参照して上で説明したカラーイメージセンサの要素に対応するカラーイメージセンサ350の要素には同じ参照符号を付し、ここで再び詳しい説明はしない。
カラーイメージセンサ350は、光センサ362、並びに、101、102及び103で概略的に示されている撮像素子から構成される。光センサ362は、その主表面366上に配置されたセンサ素子を有する。これらの撮像素子は、異なる色の光によって対象物の画像を主表面366上に垂直に配置された各領域131、132及び133上にそれぞれ形成する。
図7に示すカラーイメージセンサ350の例において、光センサ362の領域131、132及び133は全て同じサイズを有しているが、可視スペクトルの中心から比較的離れたところにある光、すなわち、赤色の光及び青色の光によって各画像が形成される光センサの領域131及び133におけるセンサ素子371及び373は、可視スペクトルに比較的近いところにある光、すなわち、緑色の光によって画像が形成される領域132におけるセンサ素子372に比べて、その数は少なく、面積は大きい。領域131におけるセンサ素子371、及び、領域133におけるセンサ素子373の面積は、センサ素子比の逆数に比例して、領域132におけるセンサ素子372よりも大きく、それらの直線寸法は、センサ素子比の逆数の約平方根だけ大きい。撮像素子101、102及び103は全て同じ直径を有し、それらは、光センサ362の主表面366から全て同じ距離に配置される。
カラーイメージセンサ350において、領域131及び133は、それらの長い方の側部が、領域132に近接して配置される。光センサ362の各領域上に形成される画像から隣りの領域への光のリークを防止するために、カラーイメージセンサ350は、スクリーン381及び382を更に有する。これらのスクリーンは、光センサ362の主表面366から実質的に垂直に、撮像素子101〜103の方へ向かって延びている。スクリーン381は、領域131と領域132の間において光センサ362から延び、スクリーン382は、領域133と領域132の間において光センサ362から延びている。不透明材料の単純なウェーハであるスクリーンであっても、光のリークは防止されるが、追加又は代替として、光を吸収する主表面を両面に備えたウェーハであれば、そこに入射した光が光センサ362の隣りの領域へ反射され、その領域にゴースト、及び/又は、フレアが形成されることを更に防止することができるであろう。
図示のカラーイメージセンサ350の例において、光センサ362の領域131、132及び133は、同じ直線寸法及び面積を有しているが、図4を参照して上で説明したイメージセンサ200と同様に、領域131及び133は、領域132に比べて少数のセンサ素子しか有していない。ただし、図2を参照して上で説明したカラーイメージセンサ100におけるように領域131、132及び133が同数の同じ面積のセンサ素子を有することは、本発明にとって重要ではない。他の代替実施形態において、領域131、132及び133におけるセンサ素子は全て同じ面積を有するが、図3を参照して上で説明したカラーイメージセンサ150におけるように、領域131及び133は領域132に比べて少数のセンサ素子しか有していない。更に他の実施形態では、光センサ362のスペクトル感度を等化するために、領域131、132及び133におけるセンサ素子は、その面積が異なる場合がある。その場合、図5を参照して上で説明したカラーイメージセンサ250のように領域131及び133が領域132に比べて少数のセンサ素子しか持たなくてもよいし、又は、上記のように、各領域が同数のセンサ素子を有していてもよい。最後に、カラーフィルタ342は、図6を参照して上で説明した白色フィルタ342と同様の白色フィルタであってもよい。
図8は、光センサの各領域が直線状に水平に配置される、本発明の実施形態によるカラーイメージセンサの非常に単純化された第7の実施形態400を示す等角図である。カラーイメージセンサ400は、図4を参照して上で説明したカラーイメージセンサ200に基づいている。図2及び図4を参照して上で説明したカラーイメージセンサの要素に対応するカラーイメージセンサ400の要素には同じ参照符号を付し、ここで再度説明はしない。
イメージセンサ400は、光センサ412、並びに、101、102及び103で概略的に示された撮像素子から構成される。光センサ412は、その主表面416上に配置されたセンサ素子を有する。撮像素子101、102及び103は、対象物の画像を主表面416上の水平に配置された領域131、132及び133上にそれぞれ形成するように構成される。
カラーイメージセンサ400において、領域131及び133はそれぞれ、その短い方の側部が領域132に近接して配置される。各領域上に形成された画像から隣りの領域への光のリークを防止するために、カラーイメージセンサ400は、スクリーン483及び484を更に有する。スクリーン483は、領域131と領域132の間において光センサ412から延び、スクリーン484は、領域132と領域133の間において光センサ412から延びている。スクリーン483及び484は、そのサイズ、及び、光センサの各領域に対する位置を除き、図7を参照して上で説明したスクリーン381及び382と同一であるため、詳しい説明はしない。
各領域におけるセンサ素子のサイズ及び数、カラーフィルタの色、並びに、撮像素子の構成は、図7を参照して上で例示したものとは違っていてもよい。
本発明によるカラーイメージセンサの上記の実施形態は3つの撮像素子を有し、それらの撮像素子がそれぞれ、光センサの対応する領域に対象物の画像を形成している。しかしながら、カラーイメージセンサは、4以上の撮像素子を有することもでき、それらの撮像素子がそれぞれ、光センサの対応する領域に画像を形成する場合もある。
図9は、4つの撮像素子を備えた本発明によるカラーイメージセンサの非常に単純化された第8の実施形態450を示す等角図である。各撮像素子は、光センサの対応する領域に、対応する色の光によって対象物の画像を形成する。この実施形態において、各領域の中心は、三角形の頂点に位置している。カラーイメージセンサ450は、図4を参照して上で説明したカラーイメージセンサ200に基づいている。図2及び図4を参照して上で説明したカラーイメージセンサの要素に対応するカラーイメージセンサ450の要素には同じ参照符号を付し、ここで再び説明はしない。
イメージセンサ450は、光センサ462、並びに、101、102、103及び104で概略的に示された撮像素子から構成される。撮像素子101、102、103及び104は、矩形アレイをなすように配置され、光センサ462の領域131、132、133及び134上にそれぞれ、異なる色の光によって対象物の画像を形成する。カラーイメージセンサ450は、各撮像素子101、102、103及び104に対して直列になるように光学的に配置されたカラーフィルタを更に含む。図示の例において、カラーフィルタ141、142、143及び144は、光センサの主表面466の領域131、132、133及び134の上にそれぞれ配置される。上記のように、カラーフィルタは他の位置に配置することも可能である。
図9の例において、カラーフィルタ141は、光センサ462の領域131へ赤色の光を通過させる赤色フィルタであり、カラーフィルタ142は、領域132へ緑色の光を通過させる緑色フィルタであり、カラーフィルタ143は、領域133へ青色の光を通過させる青色フィルタであり、カラーフィルタ144は、領域134へ緑色の光を通過させる緑色フィルタである。2つの緑色フィルタは、赤色フィルタと青色フィルタのように、互いに対角に配置される。他の実施形態において、カラーフィルタ141、142、143及び144の色は、記載したものとは異なる場合がある。一例として、カラーフィルタ144は、図6を参照して上で説明した白色フィルタ342と同様の白色フィルタである場合がある。そのような実施形態では、領域134は、白色光によってその領域に形成された画像に応じて輝度信号を生成し、領域131、132及び133は、赤色、緑色、及び、青色の光によってそれらの領域に形成された画像に応じて赤色、緑色、及び、青色の画像信号成分をそれぞれ生成する。
カラーイメージセンサ450において、光センサ462の領域131、132、133及び134は全て同じサイズを有しているが、可視スペクトルの中心から比較的離れたところにある光、すなわち、赤色の光及び青色の光によって各画像が形成される光センサの領域131及び133のそれぞれにおけるセンサ素子471及び473は、可視スペクトルの中心に比較的近いところにある光、すなわち、緑色の光、あるいは、比較的波長範囲の広い光、すなわち、白色光によって画像が形成される領域132におけるセンサ素子472に比べて、その数は少なく、面積は大きい。領域131におけるセンサ素子471、及び、領域133におけるセンサ素子473の面積は、センサ素子比の逆数に比例して、領域132におけるセンサ素子472、及び、領域134におけるセンサ素子474よりも大きく、また、その直線寸法は、センサ素子比の逆数の約平方根だけ長い。撮像素子101、102、103及び104は全て同じ直径を有し、それらは、光センサ462の主表面466から全て同じ距離に配置される。
カラーフィルタ144が白色フィルタであるカラーイメージセンサ450の代替実施形態において、領域132におけるセンサ素子の数及びサイズは、領域131及び133におけるものと同様である場合がある。
カラーイメージセンサ450において、領域131と領域132、領域133と領域134は、互いに長い方の側部が近接するように配置され、領域132と領域133、領域131と領域134は、互いに短い方の側部が近接するように配置される。光センサ462の各領域上に形成される画像から隣りの領域への光のリークを防止するために、カラーイメージセンサ450は、スクリーン481、482、483及び484を更に有する。これらのスクリーンは、光センサ462の主表面466から撮像素子101〜104の方へ向かって実質的に垂直に延びている。スクリーン481は、領域131と領域132の間において光センサ462から延び、スクリーン482は、領域133と領域134の間において光センサ462から延び、スクリーン483は、領域132と領域133の間において光センサ462から延び、スクリーン484は、領域131と領域134の間において光センサ462から延びている。スクリーン481及び482は、それらの領域の長い方の側部に対して平行に配置され、スクリーン483及び484は、それらの領域の短い方の側部に対して平行に配置される。単に不透明材料のウェーハであるスクリーンであっても、光のリークは防止されるが、追加又は代替として、光を吸収する主表面を両面に有するウェーハであれば、そこに入射する光が光センサ462の隣りの領域へ反射され、その領域にゴースト、及び/又は、フレアが形成されることを更に防止することができるであろう。
カラーイメージセンサ450において、光センサ462の領域131、132、133及び134の直線寸法及び面積は等しいが、図4を参照して上で説明したイメージセンサ200と同様に、領域131及び133は、領域132及び134に比べて少数のセンサ素子しか有していない。ただし、図2を参照して上で説明したカラーイメージセンサ100と同様に4つの領域が全て同数の同じ面積のセンサ素子を有することは、本発明にとって重要ではない。他の代替実施形態において、領域131、132、133及び134におけるセンサ素子は全て同じ面積を有するが、図3を参照して上で説明したカラーイメージセンサ150と同様に、領域131及び133は、領域132及び134に比べて少数のセンサ素子しか持たない。更に他の代替実施形態では、光センサ462の各領域のスペクトル感度を等化するために、領域131、132、133及び134におけるセンサ素子の面積は異なる場合がある。その場合、図5を参照して上で説明したカラーイメージセンサ250と同様に領域131及び133が領域132及び134に比べて少数のセンサ素子しか持たなくてもよいし、あるいは、上記のように各領域が同数のセンサ素子を有していてもよい。最後に、カラーフィルタ144は、図6を参照して上で説明した白色フィルタ342と同様の白色フィルタであってもよい。その場合、領域131、132及び133は、領域134に比べて少数のセンサ素子しか持たない場合がある。
本発明によるカラーイメージセンサの上記の実施形態は3個又は4個の撮像素子を有し、それらの撮像素子がそれぞれ、光センサの対応する領域におけるセンサ素子上に画像を形成している。しかしながら、5以上の撮像素子を使用し、各撮像素子が、光センサの対応する領域におけるセンサ素子上に画像を形成するようにすれば、更なる利点が得られる。カラー画像信号の3つの画像信号成分を生成するために必要な最小数よりも多くの撮像素子、及び、対応するセンサ素子の領域を設けることにより、欠陥のあるセンサ素子の訂正が可能となり、また、閉鎖状態の回避にも役立つ。
図10A〜図10Dは、上記のカラーイメージセンサにおいて多数の撮像素子を使用するのに適した光センサ512の非常に単純化された例に関する、センサ素子の幾つかの複数領域構成の例を示している。
図10A、10B及び10Cに示す光センサ512の例において、センサ素子は5つの領域131、132、133、134及び135に配置され、各領域は各自のカラーフィルタ(斜線で示されている)及び撮像素子(図示せず)を有している。図示の実施形態において、センサ素子は全て同じサイズであるが、これは本発明にとって重要ではない。図示の実施形態において、領域132は他の各領域の4倍の数のセンサ素子を有し、その領域には、他の領域において画像を形成する光に比べて、可視スペクトルの中心に近いところにある光、又は、波長範囲の広い光によって画像が形成される。図示の例において、領域132には緑色の光によって画像が形成され、領域131及び134には赤色の光によって画像が形成され、領域133及び135には青色の光によって画像が形成される。あるいは、領域132に形成される画像は、上記のように白色光によって形成される場合もある。
図10Aに示す例では、垂直に配置された領域131及び135からなる領域のペア、領域132、及び、垂直に配置された領域133及び134からなる領域のペアが、順番に水平に配置される。図10Bに示す例では、水平に配置された領域131及び133からなる領域のペア、領域132、及び、水平に配置された領域135及び134からなる領域対が、順番に垂直に配置される。図10Cに示す例では、領域131、132及び134が順番に水平に配置され、領域133、132及び135が順番に垂直に配置される。
図10Dに示す例では、センサ素子は7つの領域に配置される。領域131〜135は、図10Aを参照して上で説明したものと同様のもので、同様に配置される。領域136、領域132、及び、領域137は垂直に配置される。領域136と領域137はそれぞれ、緑色のフィルタ(斜線で示す)を有する。各撮像素子(図示せず)は、領域136及び137のそれぞれの上に緑色の光で画像を形成する。図示の実施形態において、センサ素子は全て同じサイズを有しているが、これは本発明にとって重要ではない。図示の例において、領域132上に形成される画像は、他の領域上に画像を形成する光よりも広い帯域幅の光によって形成される。
図10A〜図10Dに示す各例において、光センサ512の各領域は、その上に形成される画像に応じて画像信号成分を生成する。誤り検出訂正回路(図示せず)は、その画像信号成分の中に、欠陥のあるセンサ素子によって生成された部分がないかどうか検査する。そのような信号部分を検出するプロセスは当該技術分野で既知のものであるから、詳しい説明はしない。一般に、そのようなプロセスは、各画像信号成分のうち、残りの画像信号成分の対応する部分と比較して範囲外にある部分、又は、隣接する幾つかのセンサ素子によって生成される同じ画像信号成分の幾つかの部分と比較して範囲外にある部分を検出する。今説明した光センサ512の例では、赤色の光によって形成される画像に応じて生成される画像信号成分が2つあり、青色の光によって形成される画像に応じて生成される画像信号成分が2つあるため、誤り訂正回路は、同じ色の画像に応じて生成された複数の画像信号成分を使用して欠陥のあるセンサ素子を検出し、一方の領域における欠陥のあるセンサ素子によって生成された信号部分を、他方の領域において同じ色の画像が形成される対応する位置にあるセンサ素子において生成された信号部分で置き換える。
図10A〜図10Cに示す例において、領域132内の欠陥のあるセンサにおいて生成された信号成分に対し、誤り訂正回路は、領域132内の幾つかの近傍センサ素子において生成された画像信号成分の幾つかの部分から代替信号部分を合成する。追加又は代替として、誤り訂正回路は、欠陥のあるセンサ素子において生成された信号部分を、他の領域内の対応する位置にあるセンサ素子において生成された画像信号成分の幾つかの部分から得られる代替信号部分で置き換える。図10Dに示す例の領域132において欠陥のあるセンサ素子から生成された信号部分に対し、誤り訂正回路は、他の領域内の対応する位置にあるセンサ素子において生成された画像信号成分の幾つかの部分を合計することによって、代替信号部分を合成する。
本発明によるカラーイメージセンサの幾つかの実施形態において、撮像素子は、互いに水平方向にオフセットされる。そのため、領域132上に形成される画像中に現れる対象物の1以上の部分は、1以上の他の領域に形成される画像中の対象物の他の部分によって、不明瞭になる可能性がある。上で説明した3領域の実施形態によって生成されるカラー画像信号は、対象物の不明瞭な部分に関して完全な色情報を持たない。図10A〜図10Dに示した5〜7領域の実施形態は、領域132の両側側にある同じ色の光によって画像が形成される領域を見付けることにより、この問題を回避することができる。
例えば、図10Aを参照すると、領域134は領域131から垂直方向および水平方向にオフセットされているため、領域132上に緑色の光によって画像が形成される対象物のうち、領域131上に赤色の光によって形成される画像において不明瞭になっている部分は通常、領域134上に赤色の光によって形成される画像内に存在する。光センサ512の一部を形成する補助回路、または、光センサ512の外部にある補助回路(図示せず)は、領域131及び134上に赤色の光によって形成される画像に応じて生成される画像信号成分を結合し、領域132上に赤色の光によって形成される画像を模倣する仮想的な赤色画像信号成分を生成する。同様に、補助回路は、領域133及び135上に青色の光によって形成される画像に応じて生成される画像信号成分を結合し、領域132上に青色の光によって形成される画像を模倣する仮想的な青色画像信号成分を生成する。これらの仮想的な赤色画像信号成分および青色画像信号成分における不明瞭度は、緑色画像信号成分におけるものと実質的に同じである。したがって、実施形態によっては、仮想的な赤色画像信号成分および青色画像信号成分を領域132によって生成された緑色画像信号成分と加算して輝度信号を生成し、アップサンプリングして、それを輝度信号から減算することにより、カラー差分信号を生成する場合がある。輝度信号およびカラー差分信号を合わせると、光センサ512によって生成されるカラー画像信号114が構成される。
上記のように、各領域におけるセンサ素子のサイズ及び数は、図10A〜図10Dに関する上記の説明において例示したものとは違っていてもよい。
本発明によるカラーイメージセンサの上記の実施形態では、図を単純化するために、撮像素子101〜103のような撮像素子が概略的に描かれている。記載した実施形態において、従来の撮像素子を撮像素子として使用することも可能である。上記のように、光センサにおけるセンサ素子の最大領域のサイズを小さくすれば、本発明によるカラーイメージセンサは、従来のカラーイメージセンサに比べて、光センサの主表面により近い位置において、より小さな従来の撮像素子を使用することが可能になる。また、狭帯域幅の光によって画像を形成する従来の撮像素子は、比較的少数の構成部品を使用して構成することができるため、それでもなお、従来のカラーイメージセンサよりも小さい場合がある。
本発明によるカラーイメージセンサの他の実施形態は、今説明したような比較的小さく、単純な従来の撮像素子を備える代わりに、単純な撮像素子の成形アレイを備える。図11A〜図11Dはそれぞれ、本発明によるカラーイメージセンサの第9の実施形態600の平面図、2枚の直交する断面図、及び、等角図である。カラーイメージセンサ600は、光センサ612の主表面616上にあるセンサ素子が更に保護された、単純な成形撮像素子アレイ650を含む。撮像素子アレイ650は、小型で安価に製造できるだけでなく、ウェーハスケールのアセンブリを使用して、光センサ612を組み込むことができる。換言すれば、シリコンウェーハを個々のカラーイメージセンサに分離する前に、一回の位置決め・取り付けプロセスを使用して、シリコンウェーハ上に形成された全ての光センサのそれぞれに対して撮像素子アレイ650を同時に取り付けることができる。図11A〜図11Dに示すカラーイメージセンサ600の例は、図7を参照して上で説明したカラーイメージセンサ350に基づくものであるが、撮像素子アレイ650が、上で説明した実施形態のうちのいずれに組み込まれるように構成してもよいことは明らかであろう。図2及び図7を参照して上で説明したカラーイメージセンサの要素に対応するカラーイメージセンサ600の要素には同じ符号を使用し、ここで再度説明はしない。
カラーイメージセンサ600は、光センサ612と、該光センサ612の主表面に取り付けられた撮像素子アレイ650とから構成される。光センサ612は、図7を参照して上で説明した光センサ362と同様のものである。光センサ612は、その主表面616上に配置されたセンサ素子(図面を単純化するために図示せず。図7を参照)を有する。これらのセンサ素子は、光センサ612の垂直に配置された領域131、132及び133に配置される。光センサ612の主表面616上には更に、変換領域131、132及び133を覆うようにカラーフィルタ141、142及び143がそれぞれ取り付けられている。光センサ612の主表面616上には更に、撮像素子アレイ650を取り付けるための環状パッド652もある。
撮像素子アレイ650の基本形状は、底部が開口している矩形の区分けされたボックスの形であり、光学基板654、長い方の側面部材656、及び、短い方の側面部材657を含む。これらの側面部材は、光学基板から実質的に垂直に延び、パッド652に隣接してパッドに接合されている。側面部材の高さによって、撮像素子アレイ650の一部である撮像素子101、102及び103と、主表面616との間の間隔が決まる。この間隔によって通常、撮像素子は、平行な光を主表面616において集束させる位置に位置決めする。一実施形態では、これらの側面部材によって、光学基板の位置は主表面616から約2mmの位置に設定される。
光学基板654は、撮像素子101、102及び103を規定する形を有する。一実施形態において、撮像素子101〜103の位置は、光学基板654上において互いに正確に規定され、また、それらの位置は長い方の側面部材656と短い方の側面部材656からなる少なくとも2つの隣接する側面部材の外部主表面660に対しても正確に規定される。撮像素子101、102及び103は、それらの光軸が、光センサ612の領域131〜133の中心間の距離に等しい距離だけ互いに離れるように、互いに間隔を空けて光学基板654上に配置される。外部主表面660に対してそれらの撮像素子を正確に規定された位置に配置すると、光センサ612に対して外部主表面606を正確に位置決めすることにより、組み立ての際に、撮像素子101〜103を光センサ612の領域131〜133に対して正確に位置決めすることが可能になる。
光学基板654は、向かい合った2つの主表面、外側主表面662、及び、内側主表面664を有する。図示の例では、凸状の球面状の屈折性表面666が内側主表面662に規定され、回折補正素子668が内部主表面664に規定され、各回折補正素子668は複数の屈折性表面666のうちの対応する1つに軸合わせされる。撮像素子101、102及び103はそれぞれ、屈折性表面666のうちの1つと、その屈折性表面に軸合わせされた補正素子668のうちの1つとから構成される。
図示の例において、屈折性表面666はそれぞれ球面状である。球面状表面は、正確な成形は容易であるが、球面収差の影響を受けやすい。屈折性表面に軸合わせされた回折補正素子668は、その回折補正素子に対して位置合わせされた屈折性表面の球面収差を補正する構造を有する。
屈折性表面666は、各表面が異なる色の光で画像を形成するため、その曲率半径が互いに異なる。同様に、各回折補正素子は、異なる色の光において隣接する球面状屈折性素子の球面収差を補正するため、回折補正素子668の形状も互いにそのサイズが異なる。したがって、撮像素子101、102及び103の光学特性は、赤色、緑色、及び、青色の光のそれぞれに対して最適化される。
スクリーン681及び682は、長い方の側部656間において短い方の側部657に対して平行に延び、撮像素子アレイ650の基本矩形ボックス形を3つのセクションに分割する。各セクションは、光センサ612のセンサ素子の領域131、132及び133のうちの1つを含む。上記のように、領域間の光のリークを防止するために、これらのスクリーンは光を吸収する表面を有する。
図12Aは、撮像素子アレイ650の代替実施形態を示す断面図であり、具体的には、撮像素子102の断面図である。撮像素子アレイにおける他の撮像素子も同様の構造を有している。凸状の非球面の屈折性表面670が、光学基板654の外側主表面662に規定され、内側主表面664は平坦である。撮像素子アレイ650のこの実施形態において、撮像素子101、102及び103はそれぞれ、屈折性表面670と同様の単一の屈折性表面を有する。各撮像素子101、102及び103の屈折性表面670の特性は通常、光学設計プログラムを使用して規定され、それらの撮像素子が指定された撮像特性を有するように規定され、また、撮像素子が画像を形成する際に使用される色の光において球面収差が最小になるように規定される。
図12Bは、撮像素子アレイ650の他の代替実施形態を示す断面図であり、具体的には、撮像素子102の断面図である。撮像素子アレイにおける他の撮像素子も同様の構造を有している。この実施形態では、凸状の球面状の屈折性表面666が、光学基板654の外側主表面662に規定され、凹状の非球面の屈折性表面666が、内側主表面664に規定される。非球面の屈折性表面672は、球面状の屈折性表面666の球面収差を補正する。撮像素子アレイ650のこの実施形態では、撮像素子101、102及び103はそれぞれ、屈折性表面666及び672のような2つの対向する屈折性表面を有する。
撮像素子101、102及び103において、屈折性表面666の曲率半径は互いに異なり、屈折性表面672の曲率半径も互いに異なる。なぜなら、屈折性表面の各対が、異なる色の光で画像を形成するからである。したがって、撮像素子101、102及び103の光学特性は、赤色、緑色、及び、青色の光のそれぞれに対して最適化される。撮像素子101、102及び103の屈折性表面656及び672の特性は通常、光学設計プログラムを使用して規定され、各撮像素子が指定された撮像特性を有するように規定され、また、撮像素子が画像を形成する際に使用される色の光において球面収差が最小になるように規定される。
図12Cは、撮像素子アレイ650の他の代替実施形態を示す断面図であり、具体的には、撮像素子102の断面図である。画像素子アレイにおける他の撮像素子も同様の構造を有している。この実施形態では、屈折性素子669が光学基板654の外側主表面662に規定され、内側主表面664は平坦である。撮像素子アレイ650のこの実施形態において、撮像素子101、102及び103はそれぞれ、回折素子669のような単一の回折素子を有する。各撮像素子101、102及び103の回折素子669の特性は通常、光学設計プログラムを使用して規定され、各撮像素子がその撮像素子に対して指定された撮像特性を有するように規定され、また、撮像素子が画像を形成する際に使用される色の光において球面収差が最小になるように規定される。
図12Dは、図11A〜図11Dに示したカラーイメージセンサ600の代替実施形態を示す断面図であり、具体的には、撮像素子アレイ650が、光センサ612の領域132に白色光で画像を形成する従来の撮像素子のためのマウンタを備えた代替実施形態を示している。この実施形態において、画像センサアレイ650は、白色光で画像が形成される領域132に対して位置合わせされた撮像素子を持たない。代わりに、撮像素子アレイのその部分には、従来のマルチコンポーネント撮像素子(図示せず)のためのマウンタ676が規定され、更に、光学基板654を通してマルチコンポーネント撮像素子から光センサの領域132へ光を通過させるための開口部678が規定される。
図12Eは、図11A〜図11Dに示したカラーイメージセンサ300の他の代替実施形態を示す断面図であり、具体的には、撮像素子101、103と撮像素子102が、光センサ612の主表面612から異なる距離に配置される実施形態を示している。この実施形態では、光センサの領域131及び133の面積が、領域132の面積とは異なる。撮像素子アレイ650において撮像素子101、103と、撮像素子102を主表面616から異なる位置に配置するために、光学基板654は階段状に構成される。また、光学基板654に規定される撮像素子101〜103のサイズは異なる。
撮像素子アレイ650は、適当なプラスチップ材料で単一部品として成形される。撮像素子アレイ650の成形に使用されるプラスチック材料の望ましい特性には、硬いこと、発煙が少ないこと、屈折率分布が均一であること、熱膨張係数が小さいこと、湿度の影響を受けにくいこと、吸水性が低いこと、可視光の透光性が高いこと、衝撃耐性が高いこと、及び、複屈折性が低いことなどがある。適当な材料には、ポリカーボネート、アクリル樹脂(PMMA)、ポリスチレン、ポリオレフィン、NAS、及び、Optoresがある。具体的な材料としては、日本国東京都(郵便番号104)にあるJSR株式会社からArton(R)Fという商標で販売されているエステル側鎖を有するノルボネン・コポリマーがある。
一実施形態において、撮像素子アレイ650は、ドイツ国レベルクーゼンのベイヤーA.G.によってAPECという商標で販売されている共重合ポリカーボネートで成形される。この材料のうちの幾つかのタイプは、はんだ付けの温度に耐えることができるため、はんだリフロープロセスによって撮像素子アレイ650を光センサ612に接合することができる。当該技術分野においてポリカーボネートは理想的な光学特性を有するものとは考えられていないが、狭帯域幅の光によって撮像素子にそれぞれ画像が形成される際にそれらの光に対する撮像素子の光学特性が最適化されるように、撮像素子101、102及び103の構成要素が全て個別に設計されるこの用途にとって、ポリカーボネートの光学特性は十分に良好である。
回折補正素子668は成形後にマスキングされ、撮像素子アレイの内側表面に光吸収材料が付着される。この光吸収材料は、撮像素子101〜103によって画像を形成する光だけを光センサ612に入射させ、更に、スクリーン681及び682に光を吸収させるためのものである。
あるいは、撮像素子アレイ650は複数の部品から作成することもできる。ただし、そのようにした場合、一体成形部品であることから得られる生産コストの低さ、寸法精度の高さ、繰り返し性の高さといった利点の多くは失われる。あるいは、撮像素子アレイは、スクリーン681及び682なしで成形し、後から、別の光吸収性材料のスクリーンを取り付けてもよい。
図13は、カラーイメージセンサを作成するための本発明による方法700の一実施形態を示すフロー図である。
ブロック704において、光学基板、及び、側面部を有する撮像素子アレイを成形する。光学基板は、間隔を空けて配置された複数の撮像素子を有し、各撮像素子は対応する色の光で画像形成するように構成される。
ブロック706において、センサ素子の領域を有する光センサを用意する。各領域は、その領域に入射する各色の光に応じて、対応する画像信号成分を生成する働きをする。
ブロック708において、光センサの各領域に撮像素子が配置されるようにして、撮像素子アレイを光センサに接合する。
この方法の一実施形態において、撮像素子アレイは、はんだによって光センサに接合される。
この方法の他の実施形態では、1つのシリコンウェーハ上に数百個の光センサ612をアレイ状に作成し、数百個の撮像素子アレイ650を、シリコンウェーハ上に作成された光センサのアレイと同じサイズ及びほぼ同じ寸法のマトリクスとして成形する。そのようなシリコンウェーハの直径の範囲は通常、約150mm〜約300mmである。撮像素子アレイのマトリクスは、各撮像素子アレイを隣りの撮像素子アレイに相互接続する可撓性のプラスチックフィラメントを含むように成形される。マトリクス内の撮像素子アレイ間を相互接続することにより、複数の撮像素子アレイを単一のユニットとして扱うことができるようになるため、撮像素子アレイの取り扱いが容易になる。マトリクス内の隣り合った撮像素子間に設けられる隙間は、ウェーハ上の光センサ間の隙間とほぼ同じである。
撮像素子アレイのマトリクスは、窪みが形成された治具に搭載され、その窪みの中に撮像素子アレイがぴたりと収まり、各撮像素子アレイは、その隣りにある少なくとも2つの撮像素子アレイのサイドピースに係合する。これらのサイドピースは、撮像素子の幾つかの部分を形成する位置に関係するものである。治具上の隣り合った窪み間の間隔は、ウェーハ上の隣り合った光センサ間の間隔に正確に一致する。
位置決め処理を実施し、治具をウェーハ上の基準マークに正確に位置合わせする。この一回の位置決め処理によって、全ての撮像素子アレイが、対応する光センサに正確に位置合わせされる。次に、ウェーハ及び治具アセンブリを加熱し、各光センサの主表面上のパッドに付着されたはんだを溶かす。次に、治具アセンブリを冷やす。はんだが凝固すると、はんだは、撮像素子アレイを対応する光センサに接合する。次に、撮像素子アレイから治具を取り外し、従来の単体化(分離)プロセスを使用して、光センサと撮像素子アレイのアセンブリを個別のカラーイメージセンサとして切り離す。この組み立て方法は、Ertel他によって本明細書と同じ譲受人に譲渡された米国特許出願第10/402,721号に開示された方法に基づくもので、この文献は参照により本明細書に援用される。他のウェーハスケールのプロセス、又は、個別組み立てプロセスを代わりに使用してもよい。
本発明によるカラーイメージセンサの上記の実施形態は、個々の撮像素子によって光センサ上に形成された画像に応じてカラー画像信号を生成する。カラー画像信号に応じて表示される画像における色誤差を最小限に抑えるためには、カラー画像信号の対応する部分が、対象物の同じ部分を表わしていなければならない。光センサの種々の領域に形成される画像が、その領域の(0,0)センサ素子に対して異なる位置にある場合、画像に色誤差が発生する可能性がある。2以上の領域間における(0,0)センサ素子に対する画像の位置の違いは、画像不整合と呼ばれる。ある領域の(0,0)センサ素子とは、その領域内のセンサ素子によって生成された電気的値のラスタースキャン読み出しが開始される場所にあるセンサ素子である。
画像不整合には2つの主な原因がある。すなわち、製造不整合と視差不整合である。製造不整合は主に、撮像素子と光センサの対応する領域との間の製造時の位置合わせ誤差によって発生する。視差不整合は主に、撮像素子間の空間的間隔によって発生する。
図11A〜図11Dを参照して上で説明したような一体型の撮像素子アレイを使用すれば、製造不整合を最小限に抑えることができる。一体型の撮像素子アレイは、個々の撮像素子間の距離の誤差によって発生する製造不整合を大幅に減らすことができる。また、撮像素子アレイと光センサとの間の位置合わせ誤差が、光センサの全ての領域に形成される全ての画像において同じ位置誤差として現れるため、発生する画像不整合を最小限に抑えることができる。ただし、撮像素子アレイと光センサとの間の回転位置合わせ誤差は、光センサの各領域上の画像の位置の差としてそのまま現れるため、画像不整合を引き起こす場合がある。
次に、製造不整合または視差不整合の測定に使用することが可能な不整合測定ルーチン720について、図14を参照して説明する。不整合低減に関するこの説明及び下記の説明は、光センサの領域のうちの2つの領域間における不整合の測定及び低減について説明する。領域のうちの1つは基準領域として指定され、残りの領域は非基準領域として指定される。可視スペクトルの中心に比較的近いところにある光、または、比較的広い波長範囲の光によって画像が形成される領域、例えば図2における領域132は通常、基準領域として指定される。当然ながら、本明細書に記載するプロセスは、基準領域と1以上の他の非基準領域との間の不整合の測定及び低減にも、非基準領域間における不整合の測定及び低減にも適用することができ、それら両方に適用してもよい。
ブロック724において、光センサの種々の領域によって生成される画像信号成分によって表現される画像のエッジを検出する。ビデオ信号によって表現される画像においてエッジを検出するためのアルゴリズムは、当該技術分野で既知のものである。水平エッジと垂直エッジの両方を検出することにより、さらに正確な結果を得ることができる。画像が既知のテストパターンである不整合測定プロセスの実施形態では、比較的単純なエッジ検出アルゴリズムを使用することができる。なぜなら、エッジのおおよその位置が分かっているからである。
ブロック726において、基準領域と非基準領域のそれぞれについて、それらの領域内における、基準点に対する水平エッジの位置、及び、垂直エッジの位置を判定する。その領域の(0,0)センサ素子に対する各エッジの位置が判定される。例えば、任意選択で、各タイプの2以上のエッジの位置を判定する場合がある。
ブロック728では、非基準領域における各エッジの位置と、基準領域における同じエッジの位置の差を計算し、非基準領域と基準領域との間の画像不整合を、垂直方向及び水平方向について定量化する。
不整合低減機能を備えた本発明によるカラーイメージセンサの実施形態において、非基準領域が有するセンサ素子の行及び列の数は、基準領域における対応する行及び列の数よりも多い。すなわち、図2と同様の実施形態における同じ数の行及び列の数、又は、図3と同様の実施形態における行及び列の数の小部分よりも多い。まず、非基準領域の(0,0)センサ素子の位置を1以上の列数だけ右に探索し、そして、その領域内の左上のセンサ素子から1以上の行数だけ下へ探索する。
製造不整合は、カラーイメージセンサの製造の際に位置合わせプロセスを実施することによって低減される。この位置合わせプロセスにおいて、位置合わせを受けるカラーイメージセンサは、テストパターンからの平行な光で照明され、上記の不整合測定ルーチン720が実施され、非基準領域と基準領域との間の画像不整合の垂直成分及び水平成分が測定される。位置合わせプロセスの精度を最適化するとともに、光センサの各領域上に確実に画像を形成するために、この多色光のテストパターンは、明確で鮮明な垂直エッジおよび水平エッジを有する。画像不整合は、非基準領域の行数及び列数で表わされ、整数部と小数部を有する。ルーチン処理を実施し、丸められた画像不整合を生成する。次に、その領域の(0,0)センサ素子として指定されたセンサ素子を、その丸められた画像不整合の逆数だけシフトさせる。
例えば、図2を参照して上で説明したカラーイメージセンサ100において、撮像素子102によって基準領域132上に緑色の光で形成される画像に対する、撮像素子101によって領域131上に赤色の光で形成される画像の画像不整合は、+1.3行、−1.9列であり、これを丸めると、+1行、−2行になる。この場合、ルーチン720を実施すると、領域131の(0,0)センサ素子として指定されたセンサ素子は、(0,0)センサ素子の位置に対して−1行、+2列だけシフトされる。(0,0)センサ素子のこの新たな位置を使用してルーチン720を再び実施することで、領域131の画像不整合が1行、1列未満になったことを確認することができる。
非基準領域における(0,0)センサ素子の新たな位置が決定された後、カラーイメージセンサ100は、非基準領域における(0,0)センサ素子の位置を示すデータを不揮発性メモリに記憶する。カラーイメージセンサ100の通常動作において、非基準領域の読み出し回路(図示せず)は、少なくとも電源投入時にその不揮発性メモリを参照し、その領域の(0,0)センサ素子の位置を決定する。次に、読み出し回路は、(0,0)センサ素子から開始して、最大画像サイズに対応する行数及び列数のセンサ素子を読み出す。例えば、1024×768ピクセルの画像を表わすカラー画像信号を生成するカラーイメージセンサ100の一実施形態は、光センサの各領域において、各行内の1024個のセンサ素子、及び、768行のセンサ素子を読み出し、カラー画像信号を生成する。その領域における(0,0)センサ素子の位置とは無関係に、この数のセンサ素子、及び、この行数のセンサ素子が、各領域から読み出される。実施形態によっては、上記の粗い不整合低減プロセスを実施するだけの場合もある。
他の実施形態において、補助回路128は、今説明したカラーイメージセンサの通常動作中におけるものよりも、製造不整合を正確に低減することが可能な補間プロセスを実施する回路を含む場合がある。そのような実施形態では、今説明した粗い不整合低減プロセスを実施することにより、製造不整合はセンサ素子1つのサイズ未満に低減される。補助回路は、カラーイメージセンサの通常動作中に非基準領域における各センサ素子について補間された値を生成することによって製造不整合を更に低減する細かい不整合低減を実施する。上記のように、各センサ素子についての補間された値は、ルーチン720によって測定された不整合の小部分を使用して決定された重みを使用して、センサ素子によって生成された未加工の電気的値と、そのすぐ隣りにある3つの近傍センサ素子の値から生成される。
そのような実施形態では、上記の位置合わせプロセスを実施し、(0,0)センサ素子の位置がシフトされる。さらに、測定された画像不整合と、丸められた画像不整合との差を計算し、第1の行重み、及び、第1の列重みが生成される。それらの第1の重みを1から減算し、第2の行重み、及び、第2の列重みが生成される。これら4つの重みは、カラーイメージセンサの通常動作中の使用に備えて、上記の不揮発性メモリに記憶される。上記の例において、行重みは0.3と0.7であり、列重みは0.1と0.9である。
領域内のセンサ素子によって生成される未加工の電気的値は、元の画像の各ピクセルの値とみなすことができ、補間された値は、補間された画像の各ピクセルの値とみなすことができる。補完された画像は、元の画像に重なっているものとみなすことができるが、測定された画像不整合と丸められた画像不整合の差に等しいオフセットだけ、元の画像からシフトされているものとみなされる。また、補完された画像の各ピクセルは、最大で元の画像の4つのピクセルまで、重なり合うものとみなされる可能性がある。
カラーイメージセンサの通常動作の際に、補助回路は、不揮発性メモリに記憶された重みを使用して、補完された画像ピクセルが上に重なっている元の画像の最大4ピクセルまでのピクセル値から、補間された画像の各ピクセルの補間された値を計算する。元の画像ピクセル値は、対応するセンサ素子によって生成された未加工の電気的値である。このタイプの補間は、当該技術分野において既知であるため、これ以上詳しい説明はしない。これらの補間された値は、その領域の画像信号成分として出力される。他の補間技術も知られており、それらを代わりに使用してもよい。
製造不整合の更なる低減は、マッピングによる整合低減を実施することによって得られる。この場合、多色の水平線及び垂直線のグリッドを有するテストパターンを使用し、不整合測定ルーチン720を実行し、画像中の複数の位置のそれぞれにおける不整合を測定する。ルーチン720によって生成された不整合測定値から平均画像不整合を計算し、その平均不整合を丸め、非基準領域の(0,0)センサ素子の位置を、丸められた平均不整合の逆数だけシフトさせる。丸められた平均不整合は不揮発性メモリに記憶される。
測定された画像不整合のそれぞれと丸められた平均不整合の行差および列差を計算し、対応する第1の行重み、及び、第1の列重みを生成する。これらの第1の重みを1から減算し、対応する第2の行重み、及び、第2の列重みを生成する。このように、範囲内の各測定値について、すなわち、画像不整合を測定した各位置について、2つの行重み、及び、2つの列重みからなる1セットの重みが計算される。次に、この重みのセットを測定位置から非基準領域内の各センサ素子にマッピングし、各センサ素子に対し、1セットのセンサ素子重みを与える。これらのセンサ素子重みは、センサ素子の補間値の生成に使用される。各センサ素子に対するセンサ素子重みは、カラーイメージセンサの通常動作中におけるセンサ素子の補間値の計算に備えて、上記の不揮発性メモリに記憶される。あるいは、不揮発性メモリの空間を節約するために、上記の差は、不揮発性メモリに記憶してもよい。各電源投入時に、これらの差はセンサ素子に再びマッピングされ、個々のセンサ素子のセンサ素子重みが、上記のようにして計算される。
上記のプロセスのうちの1以上を使用すれば、無限遠にある対象物を表した最小限のカラーアーチファクトしか持たないカラー画像信号が生成されるように、本発明によるカラーイメージセンサを位置決めすることができる。本明細書に記載するタイプのカラーイメージセンサに関し、約2mよりも遠いところにある対象物は、通常、無限遠にあるものとみなされる。
無限遠よりも近いところにある対象物の場合、本発明によるカラーイメージセンサによって生成されるカラー画像信号に応じて表示されるカラー画像には、撮像素子間の空間的間隔によって生じる視差によって、カラーアーチファクトが現れることがある。視差は、光センサの複数の領域上に形成される画像間における画像の少なくとも一部における不整合の原因となる。カラーイメージセンサの通常動作中の視差の影響は、上で説明した粗い不整合低減プロセス、細かい不整合低減プロセス、及び、マッピングによる不整合低減プロセスと同様のプロセスを使用して低減される。視差の低減は、製造不整合の低減とは次の点が異なる:(a)不整合測定が、カラーイメージセンサの通常動作中に対象物のエッジを使用してリアルタイムで実施されること。(b)対象物の種々の部分が、カラーイメージセンサから異なる距離にあることから、適用される視差低減の量が、画像の種々の部分間で異なること。
上記の粗い不整合低減を単純に適用するカラーイメージセンサの一実施形態では、カラーイメージセンサの通常動作中に不整合測定プロセス720を実施し、対象物の一部であるエッジを使用して画像の不整合を測定することにより、視差の低減が得られる。プロセス720のブロック724において実施されるエッジ検出プロセスは通常、目に見える画像不整合が最小であることが望ましいという仮定に基づいて、画像の中間付近におけるエッジの探索を開始するようにセットされる。次に、不整合測定プロセスによって得られた不整合測定値に応じて、非基準領域における(0,0)センサ素子の位置を一時的に変更する。画像を撮影するときは、その新たな(0,0)センサ素子から開始して、非基準領域から画像信号成分を読み出す。画像を撮影し、センサ素子から電気的値を読み出した後、(0,0)センサの位置は通常、その元の位置に戻される。他の実施形態において、(0,0)センサの位置は、視差低減プロセスによって設定された場所のまま維持される場合がある。
今説明した視差低減プロセスは、不整合測定が実施される領域内のエッジに隣接する画像部分における視差不整合を、1つのセンサ素子のサイズ未満にまで低減する。エッジに隣接する画像部分における視差不整合は、上で説明した細かい不整合低減プロセスを更に使用して、更に低減することができる。この細かい不整合低減プロセスは、今説明したように、対象物のエッジを使用して取得された不整合測定値を使用する。
工場における位置合わせプロセスの一部として細かい製造不整合低減プロセスを実施する一実施形態において、細かい視差低減プロセスによって生成される重みを、細かい製造不整合低減プロセスによって生成された重みに一時的に加算し、非基準領域のセンサ素子によって生成される新たな値から、補間された値の算出に使用される重みが生成される。
今説明した視差低減プロセスは、上で説明した不整合測定において使用されるエッジに隣接する画像部分における視差を低減するが、その画像の他の部分における視差は増加する。画像を複数の領域に分割し、各領域に対して不整合測定を実施し、その領域の測定された不整合を使用してその領域に対して不整合低減を実施することにより、画像全体にわたる、より均一な視差低減が得られる。一実施形態では、画像の全範囲にわたって多数の不整合測定を実施し、その不整合測定値から、同様の視差不整合を有する画像の領域間の境界を検出する場合がある。これらの領域は、対象物における種々の対象に対応するものとみなされる。次に、それらの領域に対して、個別に視差低減プロセスが適用される。
次に、対象物を表わすカラー画像信号を生成するための本発明による方法の第1の実施形態800について、図15を参照して説明する。
ブロック804において、光センサを用意する。光センサは、センサ素子のアレイを有し、そこに入射する光に応じてカラー画像信号を生成する働きをする。
ブロック806において、対象物からの異なる色の光で、光センサの対応する領域上に個別に画像を形成する。
一実施形態では、対象物からの光の一部がフィルタリングされ、第1の色の光が生成される。他の実施形態では、対象物からの光の他の部分がフィルタリングされ、第2の色の光が生成される。
他の実施形態では、カラー画像信号は光センサの各領域に対応する画像信号成分を含み、撮影によって光センサの各領域上に画像が形成され、カラー画像信号から画像間の視差の影響を除去するために、画像信号成分が処理される。
他の実施形態では、撮像素子を用意し、撮像素子を光センサに取り付け、カラー画像信号は光センサの各領域に対応する画像信号成分を含み、カラー画像信号から撮像素子と光センサの間の不整合の影響を除去するために、それらの画像信号成分が処理される。
他の実施形態において、カラー画像信号は、光センサの各領域に対応する画像信号成分を含み、それらの画像信号成分の生成に使用される露光時間が互いに個別に制御され、画像信号成分を処理することにより、カラー画像信号が生成される。この処理は、露光時間の差を補正することを含む。
次に、対象物を表わすカラー画像信号を生成するための本発明による方法の第2の実施形態820について、図16を参照して説明する。
ブロック824において、異なる色の光で、対象物の複数の画像を個別に、且つ、同時に形成する。
ブロック826において、それらの画像を、カラー画像信号の対応する画像信号成分に変換する。
本明細書の開示は、例示的実施形態を使用して本発明を詳細に説明している。しかしながら、添付の特許請求の範囲に規定される本発明が、記載した実施形態に厳密に制限されることはない。
従来のカラーイメージセンサの非常に単純化された例を示す等角図である。 本発明によるカラーイメージセンサの非常に単純化された第1の実施形態を示す等角図である。 本発明によるカラーイメージセンサの非常に単純化された第2の実施形態を示す等角図である。 本発明によるカラーイメージセンサの非常に単純化された第3の実施形態を示す等角図である。 本発明によるカラーイメージセンサの非常に単純化された第4の実施形態を示す等角図である。 本発明によるカラーイメージセンサの非常に単純化された第5の実施形態を示す等角図である。 本発明によるカラーイメージセンサの非常に単純化された第6の実施形態を示す等角図である。 本発明によるカラーイメージセンサの非常に単純化された第7の実施形態を示す等角図である。 本発明によるカラーイメージセンサの非常に単純化された第8の実施形態を示す等角図である。 光センサの非常に単純化された例におけるセンサ素子の複数領域構成の例を示す図である。 光センサの非常に単純化された例におけるセンサ素子の複数領域構成の例を示す図である。 光センサの非常に単純化された例におけるセンサ素子の複数領域構成の例を示す図である。 光センサの非常に単純化された例におけるセンサ素子の複数領域構成の例を示す図である。 本発明によるカラーイメージセンサの第9の実施形態の平面図である。 本発明によるカラーイメージセンサの第9の実施形態の断面図である。 図11Bに対して直交する方向における、本発明によるカラーイメージセンサの第9の実施形態の断面図である。 本発明による光センサの第9の実施形態の斜視図である。 図11A〜図11Dに示した撮像素子アレイの代替実施形態を示す断面図である。 図11A〜図11Dに示した撮像素子アレイの代替実施形態を示す断面図である。 図11A〜図11Dに示した撮像素子アレイの代替実施形態を示す断面図である。 図11A〜図11Dに示したカラーイメージセンサの代替実施形態を示す断面図である。 図11A〜図11Dに示したカラーイメージセンサの代替実施形態を示す断面図である。 カラーイメージセンサをせく製するための本発明による方法の一実施形態を示すフロー図である。 製造不整合または視差不整合を測定するために使用可能な不整合測定ルーチンの一実施形態を示すフロー図である。 対象物を表わすカラー画像信号を生成するための本発明による方法の第1の実施形態を示すフロー図である。 対象物を表わすカラー画像信号を生成するための本発明による方法の第2の実施形態を示すフロー図である。

Claims (23)

  1. 対象物を表わすカラー画像信号を生成する方法であって、
    センサ素子のアレイを有する光センサであって、該光センサに入射する光に応答してカラー画像信号を生成する働きをする光センサを用意するステップと、
    前記対象物からの異なる色の光によって、前記光センサの対応する領域上に個別に画像形成するステップと
    からなる方法。
  2. 前記対象物からの光の一部からの光をフィルタリングし、第1の色の光を生成することを更に含む、請求項1に記載の方法。
  3. 前記対象物からの光の他の部分からの光をフィルタリングし、第2の色の光を生成することを更に含む、請求項2に記載の方法。
  4. 前記第2の色の光は、(a)可視スペクトルの中心に比較的近い光、及び、(b)前記第1の色の光よりも波長範囲の広い光のうちの少なくとも一方であり、
    前記画像形成は、前記光センサの複数の領域のうちの第1の領域上に第1の色の光で画像形成し、前記光センサの複数の領域のうちの第2の領域上に第2の色の光で画像形成することを含む、請求項3に記載の方法。
  5. 前記光センサの複数の領域のうちの第1の領域と、前記光センサの複数の領域のうちの第2の領域は、センサ素子の(a)サイズ、及び、(b)数のうちの少なくとも一方が異なる、請求項4に記載の方法。
  6. 前記第2の色の光は、可視光に関してフィルタリングされない、請求項3又は請求項4に記載の方法。
  7. 前記第2の色の光は、赤色の光、緑色の光、及び、青色の光を含む、請求項3又は請求項4に記載の方法。
  8. 前記カラー画像信号は、前記光センサの複数の領域のそれぞれに対応する画像信号成分を含み、
    前記画像形成は、前記光センサの各領域上に画像を形成し、
    前記方法は、前記カラー画像信号から画像間の視差の影響を除去するために、前記画像信号成分を処理することを更に含む、請求項1〜7のうちのいずれか一項に記載の方法。
  9. 前記画像の対応する部分間の視差の影響を除去するために、前記処理が更に実施される、請求項8に記載の方法。
  10. 前記方法は、撮像素子を用意し、該撮像素子を前記光センサに取り付けることを更に含み、
    前記カラー画像信号は、前記光センサの複数の領域のそれぞれに対応する画像信号成分を含み、
    前記方法は、前記カラー画像信号から、前記撮像素子と前記光センサとの間の不整合の影響を除去するために、前記画像信号成分を処理することを更に含む、請求項1〜9のうちのいずれか一項に記載の方法。
  11. 前記カラー画像信号は、前記光センサの複数の領域のそれぞれに対応する画像信号成分を含み、
    前記方法は、
    前記画像信号成分を互いに個別に生成するために使用される露光時間を制御するステップと、
    前記露光時間の差を補正することを含む、前記カラー画像信号を生成するための前記画像信号成分の処理を行うステップと
    を更に含む、請求項1〜9のうちのいずれか一項に記載の方法。
  12. 対象物を表わす画像信号を生成するためのカラーイメージセンサであって、
    センサ素子を有する光センサであって、該光センサに入射する光に応答して画像信号を生成する働きをする光センサと、
    前記対象物の画像を異なる色の光で前記光センサの対応する領域上にそれぞれ形成するように構成された複数の撮像素子と
    からなるカラーイメージセンサ。
  13. 前記複数の撮像素子のうちの第1の撮像素子、及び、前記複数の撮像素子のうちの第2の撮像素子に対して直列になるように光学的に配置され、第1の色の光を通過させるように構成された第1のカラーフィルタを更に含む、請求項12に記載のカラーイメージセンサ。
  14. 前記複数の撮像素子のうちの第2の撮像素子に対して直列になるように光学的に配置され、前記第1の色とは異なる第2の色の光を通過させるように構成された第2のカラーフィルタを更に含む、請求項13に記載のカラーイメージセンサ。
  15. 前記第2の色の光は、(a)可視スペクトルの中心に比較的近い光、及び、(b)前記第1の色の光よりも波長範囲の広い光のうちの少なくとも一方であり、
    前記撮像素子は、前記光センサの複数の領域のうちの第1の領域上に前記第1の色の光で画像を形成し、更に、前記光センサの複数の領域のうちの第2の領域上に前記第2の色の光で画像を形成する、請求項14に記載のカラーイメージセンサ。
  16. 前記複数の領域のうちの第1の領域と、前記複数の領域のうちの第2の領域は、センサ素子の(a)面積、及び、(b)数のうちの少なくとも一方が異なる、請求項15に記載のカラーイメージセンサ。
  17. 前記第2のカラーフィルタは、可視光に関してフィルタリングされていない前記第2の色の光を通過させるように構成される、請求項14又は請求項15に記載のカラーイメージセンサ。
  18. 前記第2のカラーフィルタは、赤色の光、緑色の光、及び、青色の光を前記第2の色の光として通過させるように構成される、請求項14又は請求項15に記載のカラーイメージセンサ。
  19. 前記複数の撮像素子のうちの第3の撮像素子に対して直列になるように光学的に配置され、前記第1の色及び前記第2の色とは異なる第3の色の光を通過させるように構成された第3のカラーフィルタを更に含む、請求項14〜18のうちのいずれか一項に記載のカラーイメージセンサ。
  20. 前記第2の色の光は、(a)可視スペクトルの中心に比較的近い光、及び、(b)前記第1の色の光及び前記第3の色の光よりも波長範囲の広い光のうちの少なくとも一方であり、
    前記撮像素子は、前記光センサの複数の領域のうちの第1の領域上に前記第1の色の光で画像を形成し、前記光センサの複数の領域のうちの第2の領域上に前記第2の色の光で画像を形成し、前記光センサの複数の領域のうちの第3の領域上に前記第3の色の光で画像を形成し、前記複数の領域のうちの第2の領域は、センサ素子の(a)面積、及び、(b)数のうちの少なくとも一方が、前記複数の領域のうちの第1の領域、及び、前記複数の領域のうちの第2の領域とは異なる、請求項19に記載のカラーイメージセンサ。
  21. 前記カラー画像信号は、前記光センサの複数の領域のそれぞれに対応する画像信号成分を含み、
    前記イメージセンサは、前記画像信号成分を処理し、前記カラー画像信号から画像間の視差の影響を除去する働きをするプロセッサを更に含む、請求項12〜20のうちのいずれか一項に記載のカラーイメージセンサ。
  22. 前記撮像素子は前記光センサに取り付けられ、
    前記画像信号成分は、前記光センサの複数の領域のそれぞれに対応する画像信号成分を含み、
    前記イメージセンサは、前記画像信号成分を処理し、前記カラー画像信号から前記光センサに対する前記撮像素子の位置ずれの影響を除去する働きをするプロセッサを更に含む、請求項12〜20のうちのいずれか一項に記載のカラーイメージセンサ。
  23. 全ての前記センサ素子を支持する2以上の基板を更に含む、請求項12〜22のうちのいずれか一項に記載のカラーイメージセンサ。
JP2006545802A 2003-12-18 2004-12-14 センサ素子の各領域上に画像を形成する撮像素子を備えたカラーイメージセンサ Pending JP2007520107A (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US10/741,774 US7123298B2 (en) 2003-12-18 2003-12-18 Color image sensor with imaging elements imaging on respective regions of sensor elements
PCT/US2004/041834 WO2005060636A2 (en) 2003-12-18 2004-12-14 Color image sensor with imaging elements imaging on respective regions of sensor elements

Publications (1)

Publication Number Publication Date
JP2007520107A true JP2007520107A (ja) 2007-07-19

Family

ID=34678265

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2006545802A Pending JP2007520107A (ja) 2003-12-18 2004-12-14 センサ素子の各領域上に画像を形成する撮像素子を備えたカラーイメージセンサ

Country Status (5)

Country Link
US (1) US7123298B2 (ja)
EP (1) EP1695545A4 (ja)
JP (1) JP2007520107A (ja)
CN (1) CN100553291C (ja)
WO (1) WO2005060636A2 (ja)

Cited By (64)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20110010784A (ko) * 2008-05-20 2011-02-07 펠리칸 이매징 코포레이션 이종 이미저를 구비한 모놀리식 카메라 어레이를 이용한 이미지의 캡처링 및 처리
US8619082B1 (en) 2012-08-21 2013-12-31 Pelican Imaging Corporation Systems and methods for parallax detection and correction in images captured using array cameras that contain occlusions using subsets of images to perform depth estimation
US8831367B2 (en) 2011-09-28 2014-09-09 Pelican Imaging Corporation Systems and methods for decoding light field image files
US8861089B2 (en) 2009-11-20 2014-10-14 Pelican Imaging Corporation Capturing and processing of images using monolithic camera array with heterogeneous imagers
US8866920B2 (en) 2008-05-20 2014-10-21 Pelican Imaging Corporation Capturing and processing of images using monolithic camera array with heterogeneous imagers
US8866912B2 (en) 2013-03-10 2014-10-21 Pelican Imaging Corporation System and methods for calibration of an array camera using a single captured image
US8878950B2 (en) 2010-12-14 2014-11-04 Pelican Imaging Corporation Systems and methods for synthesizing high resolution images using super-resolution processes
US8928793B2 (en) 2010-05-12 2015-01-06 Pelican Imaging Corporation Imager array interfaces
JP2015033072A (ja) * 2013-08-06 2015-02-16 株式会社モルフォ 画像処理装置及び画像処理方法
US9100586B2 (en) 2013-03-14 2015-08-04 Pelican Imaging Corporation Systems and methods for photometric normalization in array cameras
US9100635B2 (en) 2012-06-28 2015-08-04 Pelican Imaging Corporation Systems and methods for detecting defective camera arrays and optic arrays
US9106784B2 (en) 2013-03-13 2015-08-11 Pelican Imaging Corporation Systems and methods for controlling aliasing in images captured by an array camera for use in super-resolution processing
US9124831B2 (en) 2013-03-13 2015-09-01 Pelican Imaging Corporation System and methods for calibration of an array camera
US9128228B2 (en) 2011-06-28 2015-09-08 Pelican Imaging Corporation Optical arrangements for use with an array camera
US9143711B2 (en) 2012-11-13 2015-09-22 Pelican Imaging Corporation Systems and methods for array camera focal plane control
US9185276B2 (en) 2013-11-07 2015-11-10 Pelican Imaging Corporation Methods of manufacturing array camera modules incorporating independently aligned lens stacks
US9197821B2 (en) 2011-05-11 2015-11-24 Pelican Imaging Corporation Systems and methods for transmitting and receiving array camera image data
US9210392B2 (en) 2012-05-01 2015-12-08 Pelican Imaging Coporation Camera modules patterned with pi filter groups
US9214013B2 (en) 2012-09-14 2015-12-15 Pelican Imaging Corporation Systems and methods for correcting user identified artifacts in light field images
US9247117B2 (en) 2014-04-07 2016-01-26 Pelican Imaging Corporation Systems and methods for correcting for warpage of a sensor array in an array camera module by introducing warpage into a focal plane of a lens stack array
US9253380B2 (en) 2013-02-24 2016-02-02 Pelican Imaging Corporation Thin form factor computational array cameras and modular array cameras
US9412206B2 (en) 2012-02-21 2016-08-09 Pelican Imaging Corporation Systems and methods for the manipulation of captured light field image data
US9426361B2 (en) 2013-11-26 2016-08-23 Pelican Imaging Corporation Array camera configurations incorporating multiple constituent array cameras
US9438888B2 (en) 2013-03-15 2016-09-06 Pelican Imaging Corporation Systems and methods for stereo imaging with camera arrays
US9445003B1 (en) 2013-03-15 2016-09-13 Pelican Imaging Corporation Systems and methods for synthesizing high resolution images using image deconvolution based on motion and depth information
US9462164B2 (en) 2013-02-21 2016-10-04 Pelican Imaging Corporation Systems and methods for generating compressed light field representation data using captured light fields, array geometry, and parallax information
US9497429B2 (en) 2013-03-15 2016-11-15 Pelican Imaging Corporation Extended color processing on pelican array cameras
US9497370B2 (en) 2013-03-15 2016-11-15 Pelican Imaging Corporation Array camera architecture implementing quantum dot color filters
US9516222B2 (en) 2011-06-28 2016-12-06 Kip Peli P1 Lp Array cameras incorporating monolithic array camera modules with high MTF lens stacks for capture of images used in super-resolution processing
US9521416B1 (en) 2013-03-11 2016-12-13 Kip Peli P1 Lp Systems and methods for image data compression
US9519972B2 (en) 2013-03-13 2016-12-13 Kip Peli P1 Lp Systems and methods for synthesizing images from image data captured by an array camera using restricted depth of field depth maps in which depth estimation precision varies
US9521319B2 (en) 2014-06-18 2016-12-13 Pelican Imaging Corporation Array cameras and array camera modules including spectral filters disposed outside of a constituent image sensor
US9578259B2 (en) 2013-03-14 2017-02-21 Fotonation Cayman Limited Systems and methods for reducing motion blur in images or video in ultra low light with array cameras
US9633442B2 (en) 2013-03-15 2017-04-25 Fotonation Cayman Limited Array cameras including an array camera module augmented with a separate camera
US9638883B1 (en) 2013-03-04 2017-05-02 Fotonation Cayman Limited Passive alignment of array camera modules constructed from lens stack arrays and sensors based upon alignment information obtained during manufacture of array camera modules using an active alignment process
US9766380B2 (en) 2012-06-30 2017-09-19 Fotonation Cayman Limited Systems and methods for manufacturing camera modules using active alignment of lens stack arrays and sensors
US9774789B2 (en) 2013-03-08 2017-09-26 Fotonation Cayman Limited Systems and methods for high dynamic range imaging using array cameras
US9794476B2 (en) 2011-09-19 2017-10-17 Fotonation Cayman Limited Systems and methods for controlling aliasing in images captured by an array camera for use in super resolution processing using pixel apertures
US9813616B2 (en) 2012-08-23 2017-11-07 Fotonation Cayman Limited Feature based high resolution motion estimation from low resolution images captured using an array source
US9888194B2 (en) 2013-03-13 2018-02-06 Fotonation Cayman Limited Array camera architecture implementing quantum film image sensors
US9898856B2 (en) 2013-09-27 2018-02-20 Fotonation Cayman Limited Systems and methods for depth-assisted perspective distortion correction
US9942474B2 (en) 2015-04-17 2018-04-10 Fotonation Cayman Limited Systems and methods for performing high speed video capture and depth estimation using array cameras
US10089740B2 (en) 2014-03-07 2018-10-02 Fotonation Limited System and methods for depth regularization and semiautomatic interactive matting using RGB-D images
US10119808B2 (en) 2013-11-18 2018-11-06 Fotonation Limited Systems and methods for estimating depth from projected texture using camera arrays
US10122993B2 (en) 2013-03-15 2018-11-06 Fotonation Limited Autofocus system for a conventional camera that uses depth information from an array camera
US10250871B2 (en) 2014-09-29 2019-04-02 Fotonation Limited Systems and methods for dynamic calibration of array cameras
US10390005B2 (en) 2012-09-28 2019-08-20 Fotonation Limited Generating images from light fields utilizing virtual viewpoints
US10482618B2 (en) 2017-08-21 2019-11-19 Fotonation Limited Systems and methods for hybrid depth regularization
WO2020085571A1 (ko) * 2018-10-25 2020-04-30 전자부품연구원 360 vr 영상을 실시간으로 생성하는 영상변환장치 및 시스템
US10880475B2 (en) 2018-10-25 2020-12-29 Korea Electronics Technology Institute Video conversion apparatus and system for generating 360-degree virtual reality video in real time
US11270110B2 (en) 2019-09-17 2022-03-08 Boston Polarimetrics, Inc. Systems and methods for surface modeling using polarization cues
US11290658B1 (en) 2021-04-15 2022-03-29 Boston Polarimetrics, Inc. Systems and methods for camera exposure control
US11302012B2 (en) 2019-11-30 2022-04-12 Boston Polarimetrics, Inc. Systems and methods for transparent object segmentation using polarization cues
US11525906B2 (en) 2019-10-07 2022-12-13 Intrinsic Innovation Llc Systems and methods for augmentation of sensor systems and imaging systems with polarization
US11580667B2 (en) 2020-01-29 2023-02-14 Intrinsic Innovation Llc Systems and methods for characterizing object pose detection and measurement systems
US11689813B2 (en) 2021-07-01 2023-06-27 Intrinsic Innovation Llc Systems and methods for high dynamic range imaging using crossed polarizers
US11792538B2 (en) 2008-05-20 2023-10-17 Adeia Imaging Llc Capturing and processing of images including occlusions focused on an image sensor by a lens stack array
US11797863B2 (en) 2020-01-30 2023-10-24 Intrinsic Innovation Llc Systems and methods for synthesizing data for training statistical models on different imaging modalities including polarized images
US11953700B2 (en) 2020-05-27 2024-04-09 Intrinsic Innovation Llc Multi-aperture polarization optical systems using beam splitters
US11954886B2 (en) 2021-04-15 2024-04-09 Intrinsic Innovation Llc Systems and methods for six-degree of freedom pose estimation of deformable objects
US12021102B2 (en) 2019-06-06 2024-06-25 Applied Materials, Inc. Imaging system and method of creating composite images
US12020455B2 (en) 2021-03-10 2024-06-25 Intrinsic Innovation Llc Systems and methods for high dynamic range image reconstruction
US12069227B2 (en) 2021-03-10 2024-08-20 Intrinsic Innovation Llc Multi-modal and multi-spectral stereo camera arrays
US12067746B2 (en) 2021-05-07 2024-08-20 Intrinsic Innovation Llc Systems and methods for using computer vision to pick up small objects

Families Citing this family (69)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7262799B2 (en) * 2000-10-25 2007-08-28 Canon Kabushiki Kaisha Image sensing apparatus and its control method, control program, and storage medium
EP1384046B1 (en) * 2001-05-04 2018-10-03 Vexcel Imaging GmbH Digital camera for and method of obtaining overlapping images
US7442629B2 (en) 2004-09-24 2008-10-28 President & Fellows Of Harvard College Femtosecond laser-induced formation of submicrometer spikes on a semiconductor substrate
US7057256B2 (en) 2001-05-25 2006-06-06 President & Fellows Of Harvard College Silicon-based visible and near-infrared optoelectric devices
JP2003143459A (ja) * 2001-11-02 2003-05-16 Canon Inc 複眼撮像系およびこれを備えた装置
US7460167B2 (en) * 2003-04-16 2008-12-02 Par Technology Corporation Tunable imaging sensor
EP1812968B1 (en) * 2004-08-25 2019-01-16 Callahan Cellular L.L.C. Apparatus for multiple camera devices and method of operating same
US7564019B2 (en) 2005-08-25 2009-07-21 Richard Ian Olsen Large dynamic range cameras
US8124929B2 (en) * 2004-08-25 2012-02-28 Protarius Filo Ag, L.L.C. Imager module optical focus and assembly method
US7916180B2 (en) * 2004-08-25 2011-03-29 Protarius Filo Ag, L.L.C. Simultaneous multiple field of view digital cameras
US7795577B2 (en) * 2004-08-25 2010-09-14 Richard Ian Olsen Lens frame and optical focus assembly for imager module
JP2006122338A (ja) * 2004-10-28 2006-05-18 Aruze Corp 遊技機及びプログラム
US7483065B2 (en) * 2004-12-15 2009-01-27 Aptina Imaging Corporation Multi-lens imaging systems and methods using optical filters having mosaic patterns
JP4486876B2 (ja) * 2004-12-15 2010-06-23 シャープ株式会社 多分割読出ccd補正処理装置および方法
WO2006064751A1 (ja) * 2004-12-16 2006-06-22 Matsushita Electric Industrial Co., Ltd. 複眼撮像装置
US20060187322A1 (en) * 2005-02-18 2006-08-24 Janson Wilbert F Jr Digital camera using multiple fixed focal length lenses and multiple image sensors to provide an extended zoom range
US20070102622A1 (en) * 2005-07-01 2007-05-10 Olsen Richard I Apparatus for multiple camera devices and method of operating same
US20070024721A1 (en) * 2005-07-29 2007-02-01 Rogers Sean S Compensating for improperly exposed areas in digital images
TW200708064A (en) * 2005-08-03 2007-02-16 Elan Microelectronics Corp Sensor array device of handheld image moving tracking sensor
US20070258006A1 (en) * 2005-08-25 2007-11-08 Olsen Richard I Solid state camera optics frame and assembly
US7964835B2 (en) 2005-08-25 2011-06-21 Protarius Filo Ag, L.L.C. Digital cameras with direct luminance and chrominance detection
US7566855B2 (en) * 2005-08-25 2009-07-28 Richard Ian Olsen Digital camera with integrated infrared (IR) response
KR100805834B1 (ko) * 2006-01-09 2008-02-21 삼성전자주식회사 수광소자의 테스트 장치 및 그 방법
EP2001222A4 (en) * 2006-03-22 2013-03-06 Panasonic Corp IMAGING DEVICE
US7773121B1 (en) * 2006-05-03 2010-08-10 The United States Of America As Represented By The Administrator Of The National Aeronautics And Space Administration High-resolution, continuous field-of-view (FOV), non-rotating imaging system
KR100827242B1 (ko) * 2006-06-26 2008-05-07 삼성전기주식회사 이미지 복원 방법 및 장치
US7738017B2 (en) * 2007-03-27 2010-06-15 Aptina Imaging Corporation Method and apparatus for automatic linear shift parallax correction for multi-array image systems
US20090051790A1 (en) * 2007-08-21 2009-02-26 Micron Technology, Inc. De-parallax methods and apparatuses for lateral sensor arrays
EP2186345B1 (en) * 2007-09-14 2019-04-17 Ricoh Company, Ltd. Imaging apparatus and imaging method
US20090159799A1 (en) * 2007-12-19 2009-06-25 Spectral Instruments, Inc. Color infrared light sensor, camera, and method for capturing images
US8405727B2 (en) * 2008-05-01 2013-03-26 Apple Inc. Apparatus and method for calibrating image capture devices
US8538084B2 (en) * 2008-09-08 2013-09-17 Apple Inc. Method and apparatus for depth sensing keystoning
US8527908B2 (en) 2008-09-26 2013-09-03 Apple Inc. Computer user interface system and methods
US7881603B2 (en) * 2008-09-26 2011-02-01 Apple Inc. Dichroic aperture for electronic imaging device
US20100079426A1 (en) * 2008-09-26 2010-04-01 Apple Inc. Spatial ambient light profiling
US8610726B2 (en) 2008-09-26 2013-12-17 Apple Inc. Computer systems and methods with projected display
FR2940720B1 (fr) * 2008-12-31 2011-03-18 St Microelectronics Sa Dispositif de saisie d'images comprenant des moyens de correction de mise au point
US8300108B2 (en) 2009-02-02 2012-10-30 L-3 Communications Cincinnati Electronics Corporation Multi-channel imaging devices comprising unit cells
GB0912970D0 (en) * 2009-07-27 2009-09-02 St Microelectronics Res & Dev Improvements in or relating to a sensor and sensor system for a camera
US9911781B2 (en) 2009-09-17 2018-03-06 Sionyx, Llc Photosensitive imaging devices and associated methods
US9673243B2 (en) 2009-09-17 2017-06-06 Sionyx, Llc Photosensitive imaging devices and associated methods
US8619128B2 (en) 2009-09-30 2013-12-31 Apple Inc. Systems and methods for an imaging system using multiple image sensors
US8502926B2 (en) * 2009-09-30 2013-08-06 Apple Inc. Display system having coherent and incoherent light sources
US8687070B2 (en) * 2009-12-22 2014-04-01 Apple Inc. Image capture device having tilt and/or perspective correction
JP2013527598A (ja) * 2010-03-24 2013-06-27 サイオニクス、インク. 高められた電磁放射線検出を有するデバイス及び関連方法
US8692198B2 (en) 2010-04-21 2014-04-08 Sionyx, Inc. Photosensitive imaging devices and associated methods
EP2583312A2 (en) 2010-06-18 2013-04-24 Sionyx, Inc. High speed photosensitive devices and associated methods
US8497897B2 (en) * 2010-08-17 2013-07-30 Apple Inc. Image capture using luminance and chrominance sensors
US8538132B2 (en) 2010-09-24 2013-09-17 Apple Inc. Component concentricity
US9496308B2 (en) 2011-06-09 2016-11-15 Sionyx, Llc Process module for increasing the response of backside illuminated photosensitive imagers and associated methods
TWI441062B (zh) * 2011-06-21 2014-06-11 Pixart Imaging Inc 光學觸控系統及其影像處理方法
US20130010109A1 (en) * 2011-07-08 2013-01-10 Asia Optical Co., Inc. Trail camera
US20130016203A1 (en) 2011-07-13 2013-01-17 Saylor Stephen D Biometric imaging devices and associated methods
US9064764B2 (en) 2012-03-22 2015-06-23 Sionyx, Inc. Pixel isolation elements, devices, and associated methods
JP6466346B2 (ja) 2013-02-15 2019-02-06 サイオニクス、エルエルシー アンチブルーミング特性を有するハイダイナミックレンジcmos画像センサおよび関連づけられた方法
US9939251B2 (en) 2013-03-15 2018-04-10 Sionyx, Llc Three dimensional imaging utilizing stacked imager devices and associated methods
WO2014209421A1 (en) 2013-06-29 2014-12-31 Sionyx, Inc. Shallow trench textured regions and associated methods
US9356061B2 (en) 2013-08-05 2016-05-31 Apple Inc. Image sensor with buried light shield and vertical gate
US20160248986A1 (en) * 2014-02-27 2016-08-25 Sony Corporation Digital cameras having reduced startup time, and related devices, methods, and computer program products
US20150281601A1 (en) * 2014-03-25 2015-10-01 INVIS Technologies Corporation Modular Packaging and Optical System for Multi-Aperture and Multi-Spectral Camera Core
US20150281538A1 (en) * 2014-03-25 2015-10-01 Semiconductor Components Industries, Llc Multi-array imaging systems and methods
FR3026223B1 (fr) * 2014-09-22 2016-12-23 Photonis France Dispositif d'acquisition d'images bimode a photocathode.
US20160255323A1 (en) 2015-02-26 2016-09-01 Dual Aperture International Co. Ltd. Multi-Aperture Depth Map Using Blur Kernels and Down-Sampling
JP6626783B2 (ja) * 2016-06-02 2019-12-25 Hoya株式会社 画像処理装置および電子内視鏡システム
CN107040724B (zh) * 2017-04-28 2020-05-15 Oppo广东移动通信有限公司 双核对焦图像传感器及其对焦控制方法和成像装置
US20230408889A1 (en) * 2020-11-10 2023-12-21 Sony Group Corporation Imaging apparatus and lens apparatus
US20230064097A1 (en) * 2021-08-26 2023-03-02 Meta Platforms Technologies, Llc Diffractive optical element (doe) on an imaging sensor to reduce and minimize flare
CN116367003B (zh) * 2021-12-22 2023-10-20 荣耀终端有限公司 多光谱传感器以及电子设备
WO2023222278A1 (en) * 2022-05-20 2023-11-23 ams Sensors Germany GmbH Multispectral optical sensor, camera system and parallax compensation method

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH04324789A (ja) * 1991-04-24 1992-11-13 Konica Corp 固体撮像装置
WO1999026419A1 (en) * 1997-11-14 1999-05-27 Tangen Reidar E Optoelectronic camera and method for image formatting in the same
JP2000032354A (ja) * 1998-07-09 2000-01-28 Sony Corp 撮像装置
JP2001157058A (ja) * 1999-11-26 2001-06-08 Dainippon Printing Co Ltd 抑揚付け処理方法および装置
JP2002135796A (ja) * 2000-10-25 2002-05-10 Canon Inc 撮像装置
JP2002204462A (ja) * 2000-10-25 2002-07-19 Canon Inc 撮像装置及びその制御方法及び制御プログラム及び記憶媒体
JP2003101886A (ja) * 2001-09-25 2003-04-04 Olympus Optical Co Ltd 撮像装置
US6611289B1 (en) * 1999-01-15 2003-08-26 Yanbin Yu Digital cameras using multiple sensors with multiple lenses
JP2003283907A (ja) * 2002-03-20 2003-10-03 Japan Science & Technology Corp 撮像装置

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US3971065A (en) * 1975-03-05 1976-07-20 Eastman Kodak Company Color imaging array
US4323925A (en) * 1980-07-07 1982-04-06 Avco Everett Research Laboratory, Inc. Method and apparatus for arraying image sensor modules
JPS58137384A (ja) * 1982-02-10 1983-08-15 Sony Corp カラ−カメラの信号処理回路
US4870483A (en) * 1985-10-02 1989-09-26 Canon Kabushiki Kaisha Color image sensor including a plurality of photocells and a plurality of colored filters provided on the plurality of photocells
US4985760A (en) * 1987-10-09 1991-01-15 Canon Kabushiki Kaisha Color imager having varying filter aperture sizes to compensate for luminance differences between colors
EP0518185B1 (en) * 1991-06-10 1996-12-11 Eastman Kodak Company Cross correlation image sensor alignment system
GB9125954D0 (en) * 1991-12-06 1992-02-05 Vlsi Vision Ltd Electronic camera
US5353056A (en) * 1992-10-27 1994-10-04 Panasonic Technologies, Inc. System and method for modifying aberration and registration of images
SE9600747D0 (sv) * 1996-02-27 1996-02-27 Pharmacia Biotech Ab Calibration method
JP3990025B2 (ja) * 1998-03-24 2007-10-10 オリンパス株式会社 ズームレンズ
US6980248B1 (en) * 1999-06-30 2005-12-27 Canon Kabushiki Kaisha Image pickup apparatus
US6833873B1 (en) * 1999-06-30 2004-12-21 Canon Kabushiki Kaisha Image pickup apparatus
EP1372524B1 (en) * 2001-03-16 2006-09-20 Novartis AG Method for casting ophthalmic lenses
US6766954B2 (en) * 2001-06-15 2004-07-27 Symbol Technologies, Inc. Omnidirectional linear sensor-based code reading engines

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH04324789A (ja) * 1991-04-24 1992-11-13 Konica Corp 固体撮像装置
WO1999026419A1 (en) * 1997-11-14 1999-05-27 Tangen Reidar E Optoelectronic camera and method for image formatting in the same
JP2000032354A (ja) * 1998-07-09 2000-01-28 Sony Corp 撮像装置
US6611289B1 (en) * 1999-01-15 2003-08-26 Yanbin Yu Digital cameras using multiple sensors with multiple lenses
JP2001157058A (ja) * 1999-11-26 2001-06-08 Dainippon Printing Co Ltd 抑揚付け処理方法および装置
JP2002135796A (ja) * 2000-10-25 2002-05-10 Canon Inc 撮像装置
JP2002204462A (ja) * 2000-10-25 2002-07-19 Canon Inc 撮像装置及びその制御方法及び制御プログラム及び記憶媒体
JP2003101886A (ja) * 2001-09-25 2003-04-04 Olympus Optical Co Ltd 撮像装置
JP2003283907A (ja) * 2002-03-20 2003-10-03 Japan Science & Technology Corp 撮像装置

Cited By (199)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9124815B2 (en) 2008-05-20 2015-09-01 Pelican Imaging Corporation Capturing and processing of images including occlusions captured by arrays of luma and chroma cameras
US9049390B2 (en) 2008-05-20 2015-06-02 Pelican Imaging Corporation Capturing and processing of images captured by arrays including polychromatic cameras
US8866920B2 (en) 2008-05-20 2014-10-21 Pelican Imaging Corporation Capturing and processing of images using monolithic camera array with heterogeneous imagers
US8885059B1 (en) 2008-05-20 2014-11-11 Pelican Imaging Corporation Systems and methods for measuring depth using images captured by camera arrays
US9712759B2 (en) 2008-05-20 2017-07-18 Fotonation Cayman Limited Systems and methods for generating depth maps using a camera arrays incorporating monochrome and color cameras
US9749547B2 (en) 2008-05-20 2017-08-29 Fotonation Cayman Limited Capturing and processing of images using camera array incorperating Bayer cameras having different fields of view
US9576369B2 (en) 2008-05-20 2017-02-21 Fotonation Cayman Limited Systems and methods for generating depth maps using images captured by camera arrays incorporating cameras having different fields of view
US8896719B1 (en) 2008-05-20 2014-11-25 Pelican Imaging Corporation Systems and methods for parallax measurement using camera arrays incorporating 3 x 3 camera configurations
US8902321B2 (en) 2008-05-20 2014-12-02 Pelican Imaging Corporation Capturing and processing of images using monolithic camera array with heterogeneous imagers
KR20110010784A (ko) * 2008-05-20 2011-02-07 펠리칸 이매징 코포레이션 이종 이미저를 구비한 모놀리식 카메라 어레이를 이용한 이미지의 캡처링 및 처리
US9485496B2 (en) 2008-05-20 2016-11-01 Pelican Imaging Corporation Systems and methods for measuring depth using images captured by a camera array including cameras surrounding a central camera
US12041360B2 (en) 2008-05-20 2024-07-16 Adeia Imaging Llc Capturing and processing of images including occlusions focused on an image sensor by a lens stack array
US12022207B2 (en) 2008-05-20 2024-06-25 Adeia Imaging Llc Capturing and processing of images including occlusions focused on an image sensor by a lens stack array
US10027901B2 (en) 2008-05-20 2018-07-17 Fotonation Cayman Limited Systems and methods for generating depth maps using a camera arrays incorporating monochrome and color cameras
US10142560B2 (en) 2008-05-20 2018-11-27 Fotonation Limited Capturing and processing of images including occlusions focused on an image sensor by a lens stack array
KR101588877B1 (ko) 2008-05-20 2016-01-26 펠리칸 이매징 코포레이션 이종 이미저를 구비한 모놀리식 카메라 어레이를 이용한 이미지의 캡처링 및 처리
US9235898B2 (en) 2008-05-20 2016-01-12 Pelican Imaging Corporation Systems and methods for generating depth maps using light focused on an image sensor by a lens element array
US9188765B2 (en) 2008-05-20 2015-11-17 Pelican Imaging Corporation Capturing and processing of images including occlusions focused on an image sensor by a lens stack array
US9191580B2 (en) 2008-05-20 2015-11-17 Pelican Imaging Corporation Capturing and processing of images including occlusions captured by camera arrays
JP2019220957A (ja) * 2008-05-20 2019-12-26 フォトネイション リミテッド 異なる種類の撮像装置を有するモノリシックカメラアレイを用いた画像の撮像および処理
JP2011523538A (ja) * 2008-05-20 2011-08-11 ペリカン イメージング コーポレイション 異なる種類の撮像装置を有するモノリシックカメラアレイを用いた画像の撮像および処理
US9094661B2 (en) 2008-05-20 2015-07-28 Pelican Imaging Corporation Systems and methods for generating depth maps using a set of images containing a baseline image
US9041823B2 (en) 2008-05-20 2015-05-26 Pelican Imaging Corporation Systems and methods for performing post capture refocus using images captured by camera arrays
US9041829B2 (en) 2008-05-20 2015-05-26 Pelican Imaging Corporation Capturing and processing of high dynamic range images using camera arrays
KR101733443B1 (ko) 2008-05-20 2017-05-10 펠리칸 이매징 코포레이션 이종 이미저를 구비한 모놀리식 카메라 어레이를 이용한 이미지의 캡처링 및 처리
US11792538B2 (en) 2008-05-20 2023-10-17 Adeia Imaging Llc Capturing and processing of images including occlusions focused on an image sensor by a lens stack array
US9049411B2 (en) 2008-05-20 2015-06-02 Pelican Imaging Corporation Camera arrays incorporating 3×3 imager configurations
US9049381B2 (en) 2008-05-20 2015-06-02 Pelican Imaging Corporation Systems and methods for normalizing image data captured by camera arrays
US9049391B2 (en) 2008-05-20 2015-06-02 Pelican Imaging Corporation Capturing and processing of near-IR images including occlusions using camera arrays incorporating near-IR light sources
US9049367B2 (en) 2008-05-20 2015-06-02 Pelican Imaging Corporation Systems and methods for synthesizing higher resolution images using images captured by camera arrays
US9055233B2 (en) 2008-05-20 2015-06-09 Pelican Imaging Corporation Systems and methods for synthesizing higher resolution images using a set of images containing a baseline image
US9055213B2 (en) 2008-05-20 2015-06-09 Pelican Imaging Corporation Systems and methods for measuring depth using images captured by monolithic camera arrays including at least one bayer camera
JP2015109667A (ja) * 2008-05-20 2015-06-11 ペリカン イメージング コーポレイション 異なる種類の撮像装置を有するモノリシックカメラアレイを用いた画像の撮像および処理
US9060121B2 (en) 2008-05-20 2015-06-16 Pelican Imaging Corporation Capturing and processing of images captured by camera arrays including cameras dedicated to sampling luma and cameras dedicated to sampling chroma
US9060142B2 (en) 2008-05-20 2015-06-16 Pelican Imaging Corporation Capturing and processing of images captured by camera arrays including heterogeneous optics
US9060120B2 (en) 2008-05-20 2015-06-16 Pelican Imaging Corporation Systems and methods for generating depth maps using images captured by camera arrays
US9060124B2 (en) 2008-05-20 2015-06-16 Pelican Imaging Corporation Capturing and processing of images using non-monolithic camera arrays
US9077893B2 (en) 2008-05-20 2015-07-07 Pelican Imaging Corporation Capturing and processing of images captured by non-grid camera arrays
US11412158B2 (en) 2008-05-20 2022-08-09 Fotonation Limited Capturing and processing of images including occlusions focused on an image sensor by a lens stack array
US10306120B2 (en) 2009-11-20 2019-05-28 Fotonation Limited Capturing and processing of images captured by camera arrays incorporating cameras with telephoto and conventional lenses to generate depth maps
US9264610B2 (en) 2009-11-20 2016-02-16 Pelican Imaging Corporation Capturing and processing of images including occlusions captured by heterogeneous camera arrays
US8861089B2 (en) 2009-11-20 2014-10-14 Pelican Imaging Corporation Capturing and processing of images using monolithic camera array with heterogeneous imagers
US8928793B2 (en) 2010-05-12 2015-01-06 Pelican Imaging Corporation Imager array interfaces
US9936148B2 (en) 2010-05-12 2018-04-03 Fotonation Cayman Limited Imager array interfaces
US10455168B2 (en) 2010-05-12 2019-10-22 Fotonation Limited Imager array interfaces
US8878950B2 (en) 2010-12-14 2014-11-04 Pelican Imaging Corporation Systems and methods for synthesizing high resolution images using super-resolution processes
US9047684B2 (en) 2010-12-14 2015-06-02 Pelican Imaging Corporation Systems and methods for synthesizing high resolution images using a set of geometrically registered images
US11875475B2 (en) 2010-12-14 2024-01-16 Adeia Imaging Llc Systems and methods for synthesizing high resolution images using images captured by an array of independently controllable imagers
US11423513B2 (en) 2010-12-14 2022-08-23 Fotonation Limited Systems and methods for synthesizing high resolution images using images captured by an array of independently controllable imagers
US9361662B2 (en) 2010-12-14 2016-06-07 Pelican Imaging Corporation Systems and methods for synthesizing high resolution images using images captured by an array of independently controllable imagers
US9041824B2 (en) 2010-12-14 2015-05-26 Pelican Imaging Corporation Systems and methods for dynamic refocusing of high resolution images generated using images captured by a plurality of imagers
US10366472B2 (en) 2010-12-14 2019-07-30 Fotonation Limited Systems and methods for synthesizing high resolution images using images captured by an array of independently controllable imagers
US10742861B2 (en) 2011-05-11 2020-08-11 Fotonation Limited Systems and methods for transmitting and receiving array camera image data
US9866739B2 (en) 2011-05-11 2018-01-09 Fotonation Cayman Limited Systems and methods for transmitting and receiving array camera image data
US9197821B2 (en) 2011-05-11 2015-11-24 Pelican Imaging Corporation Systems and methods for transmitting and receiving array camera image data
US10218889B2 (en) 2011-05-11 2019-02-26 Fotonation Limited Systems and methods for transmitting and receiving array camera image data
US9516222B2 (en) 2011-06-28 2016-12-06 Kip Peli P1 Lp Array cameras incorporating monolithic array camera modules with high MTF lens stacks for capture of images used in super-resolution processing
US9128228B2 (en) 2011-06-28 2015-09-08 Pelican Imaging Corporation Optical arrangements for use with an array camera
US9578237B2 (en) 2011-06-28 2017-02-21 Fotonation Cayman Limited Array cameras incorporating optics with modulation transfer functions greater than sensor Nyquist frequency for capture of images used in super-resolution processing
US10375302B2 (en) 2011-09-19 2019-08-06 Fotonation Limited Systems and methods for controlling aliasing in images captured by an array camera for use in super resolution processing using pixel apertures
US9794476B2 (en) 2011-09-19 2017-10-17 Fotonation Cayman Limited Systems and methods for controlling aliasing in images captured by an array camera for use in super resolution processing using pixel apertures
US9036928B2 (en) 2011-09-28 2015-05-19 Pelican Imaging Corporation Systems and methods for encoding structured light field image files
US10984276B2 (en) 2011-09-28 2021-04-20 Fotonation Limited Systems and methods for encoding image files containing depth maps stored as metadata
US9031335B2 (en) 2011-09-28 2015-05-12 Pelican Imaging Corporation Systems and methods for encoding light field image files having depth and confidence maps
US11729365B2 (en) 2011-09-28 2023-08-15 Adela Imaging LLC Systems and methods for encoding image files containing depth maps stored as metadata
US10275676B2 (en) 2011-09-28 2019-04-30 Fotonation Limited Systems and methods for encoding image files containing depth maps stored as metadata
US9031342B2 (en) 2011-09-28 2015-05-12 Pelican Imaging Corporation Systems and methods for encoding refocusable light field image files
US9042667B2 (en) 2011-09-28 2015-05-26 Pelican Imaging Corporation Systems and methods for decoding light field image files using a depth map
US8831367B2 (en) 2011-09-28 2014-09-09 Pelican Imaging Corporation Systems and methods for decoding light field image files
US9025895B2 (en) 2011-09-28 2015-05-05 Pelican Imaging Corporation Systems and methods for decoding refocusable light field image files
US9025894B2 (en) 2011-09-28 2015-05-05 Pelican Imaging Corporation Systems and methods for decoding light field image files having depth and confidence maps
US20180197035A1 (en) 2011-09-28 2018-07-12 Fotonation Cayman Limited Systems and Methods for Encoding Image Files Containing Depth Maps Stored as Metadata
US10019816B2 (en) 2011-09-28 2018-07-10 Fotonation Cayman Limited Systems and methods for decoding image files containing depth maps stored as metadata
US9031343B2 (en) 2011-09-28 2015-05-12 Pelican Imaging Corporation Systems and methods for encoding light field image files having a depth map
US9036931B2 (en) 2011-09-28 2015-05-19 Pelican Imaging Corporation Systems and methods for decoding structured light field image files
US12052409B2 (en) 2011-09-28 2024-07-30 Adela Imaging LLC Systems and methods for encoding image files containing depth maps stored as metadata
US9864921B2 (en) 2011-09-28 2018-01-09 Fotonation Cayman Limited Systems and methods for encoding image files containing depth maps stored as metadata
US9811753B2 (en) 2011-09-28 2017-11-07 Fotonation Cayman Limited Systems and methods for encoding light field image files
US10430682B2 (en) 2011-09-28 2019-10-01 Fotonation Limited Systems and methods for decoding image files containing depth maps stored as metadata
US9536166B2 (en) 2011-09-28 2017-01-03 Kip Peli P1 Lp Systems and methods for decoding image files containing depth maps stored as metadata
US9129183B2 (en) 2011-09-28 2015-09-08 Pelican Imaging Corporation Systems and methods for encoding light field image files
US9412206B2 (en) 2012-02-21 2016-08-09 Pelican Imaging Corporation Systems and methods for the manipulation of captured light field image data
US10311649B2 (en) 2012-02-21 2019-06-04 Fotonation Limited Systems and method for performing depth based image editing
US9754422B2 (en) 2012-02-21 2017-09-05 Fotonation Cayman Limited Systems and method for performing depth based image editing
US9210392B2 (en) 2012-05-01 2015-12-08 Pelican Imaging Coporation Camera modules patterned with pi filter groups
US9706132B2 (en) 2012-05-01 2017-07-11 Fotonation Cayman Limited Camera modules patterned with pi filter groups
US9807382B2 (en) 2012-06-28 2017-10-31 Fotonation Cayman Limited Systems and methods for detecting defective camera arrays and optic arrays
US10334241B2 (en) 2012-06-28 2019-06-25 Fotonation Limited Systems and methods for detecting defective camera arrays and optic arrays
US9100635B2 (en) 2012-06-28 2015-08-04 Pelican Imaging Corporation Systems and methods for detecting defective camera arrays and optic arrays
US9766380B2 (en) 2012-06-30 2017-09-19 Fotonation Cayman Limited Systems and methods for manufacturing camera modules using active alignment of lens stack arrays and sensors
US10261219B2 (en) 2012-06-30 2019-04-16 Fotonation Limited Systems and methods for manufacturing camera modules using active alignment of lens stack arrays and sensors
US11022725B2 (en) 2012-06-30 2021-06-01 Fotonation Limited Systems and methods for manufacturing camera modules using active alignment of lens stack arrays and sensors
US9240049B2 (en) 2012-08-21 2016-01-19 Pelican Imaging Corporation Systems and methods for measuring depth using an array of independently controllable cameras
US9147254B2 (en) 2012-08-21 2015-09-29 Pelican Imaging Corporation Systems and methods for measuring depth in the presence of occlusions using a subset of images
US10380752B2 (en) 2012-08-21 2019-08-13 Fotonation Limited Systems and methods for estimating depth and visibility from a reference viewpoint for pixels in a set of images captured from different viewpoints
US9123118B2 (en) 2012-08-21 2015-09-01 Pelican Imaging Corporation System and methods for measuring depth using an array camera employing a bayer filter
US12002233B2 (en) 2012-08-21 2024-06-04 Adeia Imaging Llc Systems and methods for estimating depth and visibility from a reference viewpoint for pixels in a set of images captured from different viewpoints
US9129377B2 (en) 2012-08-21 2015-09-08 Pelican Imaging Corporation Systems and methods for measuring depth based upon occlusion patterns in images
US8619082B1 (en) 2012-08-21 2013-12-31 Pelican Imaging Corporation Systems and methods for parallax detection and correction in images captured using array cameras that contain occlusions using subsets of images to perform depth estimation
US9235900B2 (en) 2012-08-21 2016-01-12 Pelican Imaging Corporation Systems and methods for estimating depth and visibility from a reference viewpoint for pixels in a set of images captured from different viewpoints
US9858673B2 (en) 2012-08-21 2018-01-02 Fotonation Cayman Limited Systems and methods for estimating depth and visibility from a reference viewpoint for pixels in a set of images captured from different viewpoints
US9123117B2 (en) 2012-08-21 2015-09-01 Pelican Imaging Corporation Systems and methods for generating depth maps and corresponding confidence maps indicating depth estimation reliability
US9813616B2 (en) 2012-08-23 2017-11-07 Fotonation Cayman Limited Feature based high resolution motion estimation from low resolution images captured using an array source
US10462362B2 (en) 2012-08-23 2019-10-29 Fotonation Limited Feature based high resolution motion estimation from low resolution images captured using an array source
US9214013B2 (en) 2012-09-14 2015-12-15 Pelican Imaging Corporation Systems and methods for correcting user identified artifacts in light field images
US10390005B2 (en) 2012-09-28 2019-08-20 Fotonation Limited Generating images from light fields utilizing virtual viewpoints
US9143711B2 (en) 2012-11-13 2015-09-22 Pelican Imaging Corporation Systems and methods for array camera focal plane control
US9749568B2 (en) 2012-11-13 2017-08-29 Fotonation Cayman Limited Systems and methods for array camera focal plane control
US9462164B2 (en) 2013-02-21 2016-10-04 Pelican Imaging Corporation Systems and methods for generating compressed light field representation data using captured light fields, array geometry, and parallax information
US10009538B2 (en) 2013-02-21 2018-06-26 Fotonation Cayman Limited Systems and methods for generating compressed light field representation data using captured light fields, array geometry, and parallax information
US9743051B2 (en) 2013-02-24 2017-08-22 Fotonation Cayman Limited Thin form factor computational array cameras and modular array cameras
US9774831B2 (en) 2013-02-24 2017-09-26 Fotonation Cayman Limited Thin form factor computational array cameras and modular array cameras
US9253380B2 (en) 2013-02-24 2016-02-02 Pelican Imaging Corporation Thin form factor computational array cameras and modular array cameras
US9374512B2 (en) 2013-02-24 2016-06-21 Pelican Imaging Corporation Thin form factor computational array cameras and modular array cameras
US9638883B1 (en) 2013-03-04 2017-05-02 Fotonation Cayman Limited Passive alignment of array camera modules constructed from lens stack arrays and sensors based upon alignment information obtained during manufacture of array camera modules using an active alignment process
US9774789B2 (en) 2013-03-08 2017-09-26 Fotonation Cayman Limited Systems and methods for high dynamic range imaging using array cameras
US9917998B2 (en) 2013-03-08 2018-03-13 Fotonation Cayman Limited Systems and methods for measuring scene information while capturing images using array cameras
US8866912B2 (en) 2013-03-10 2014-10-21 Pelican Imaging Corporation System and methods for calibration of an array camera using a single captured image
US9124864B2 (en) 2013-03-10 2015-09-01 Pelican Imaging Corporation System and methods for calibration of an array camera
US9986224B2 (en) 2013-03-10 2018-05-29 Fotonation Cayman Limited System and methods for calibration of an array camera
US11570423B2 (en) 2013-03-10 2023-01-31 Adeia Imaging Llc System and methods for calibration of an array camera
US10225543B2 (en) 2013-03-10 2019-03-05 Fotonation Limited System and methods for calibration of an array camera
US11272161B2 (en) 2013-03-10 2022-03-08 Fotonation Limited System and methods for calibration of an array camera
US11985293B2 (en) 2013-03-10 2024-05-14 Adeia Imaging Llc System and methods for calibration of an array camera
US10958892B2 (en) 2013-03-10 2021-03-23 Fotonation Limited System and methods for calibration of an array camera
US9521416B1 (en) 2013-03-11 2016-12-13 Kip Peli P1 Lp Systems and methods for image data compression
US9106784B2 (en) 2013-03-13 2015-08-11 Pelican Imaging Corporation Systems and methods for controlling aliasing in images captured by an array camera for use in super-resolution processing
US9519972B2 (en) 2013-03-13 2016-12-13 Kip Peli P1 Lp Systems and methods for synthesizing images from image data captured by an array camera using restricted depth of field depth maps in which depth estimation precision varies
US10127682B2 (en) 2013-03-13 2018-11-13 Fotonation Limited System and methods for calibration of an array camera
US9800856B2 (en) 2013-03-13 2017-10-24 Fotonation Cayman Limited Systems and methods for synthesizing images from image data captured by an array camera using restricted depth of field depth maps in which depth estimation precision varies
US9888194B2 (en) 2013-03-13 2018-02-06 Fotonation Cayman Limited Array camera architecture implementing quantum film image sensors
US9741118B2 (en) 2013-03-13 2017-08-22 Fotonation Cayman Limited System and methods for calibration of an array camera
US9733486B2 (en) 2013-03-13 2017-08-15 Fotonation Cayman Limited Systems and methods for controlling aliasing in images captured by an array camera for use in super-resolution processing
US9124831B2 (en) 2013-03-13 2015-09-01 Pelican Imaging Corporation System and methods for calibration of an array camera
US9578259B2 (en) 2013-03-14 2017-02-21 Fotonation Cayman Limited Systems and methods for reducing motion blur in images or video in ultra low light with array cameras
US9100586B2 (en) 2013-03-14 2015-08-04 Pelican Imaging Corporation Systems and methods for photometric normalization in array cameras
US10091405B2 (en) 2013-03-14 2018-10-02 Fotonation Cayman Limited Systems and methods for reducing motion blur in images or video in ultra low light with array cameras
US10547772B2 (en) 2013-03-14 2020-01-28 Fotonation Limited Systems and methods for reducing motion blur in images or video in ultra low light with array cameras
US9787911B2 (en) 2013-03-14 2017-10-10 Fotonation Cayman Limited Systems and methods for photometric normalization in array cameras
US10412314B2 (en) 2013-03-14 2019-09-10 Fotonation Limited Systems and methods for photometric normalization in array cameras
US10542208B2 (en) 2013-03-15 2020-01-21 Fotonation Limited Systems and methods for synthesizing high resolution images using image deconvolution based on motion and depth information
US10674138B2 (en) 2013-03-15 2020-06-02 Fotonation Limited Autofocus system for a conventional camera that uses depth information from an array camera
US10182216B2 (en) 2013-03-15 2019-01-15 Fotonation Limited Extended color processing on pelican array cameras
US9633442B2 (en) 2013-03-15 2017-04-25 Fotonation Cayman Limited Array cameras including an array camera module augmented with a separate camera
US9445003B1 (en) 2013-03-15 2016-09-13 Pelican Imaging Corporation Systems and methods for synthesizing high resolution images using image deconvolution based on motion and depth information
US10455218B2 (en) 2013-03-15 2019-10-22 Fotonation Limited Systems and methods for estimating depth using stereo array cameras
US10122993B2 (en) 2013-03-15 2018-11-06 Fotonation Limited Autofocus system for a conventional camera that uses depth information from an array camera
US9497370B2 (en) 2013-03-15 2016-11-15 Pelican Imaging Corporation Array camera architecture implementing quantum dot color filters
US9955070B2 (en) 2013-03-15 2018-04-24 Fotonation Cayman Limited Systems and methods for synthesizing high resolution images using image deconvolution based on motion and depth information
US9602805B2 (en) 2013-03-15 2017-03-21 Fotonation Cayman Limited Systems and methods for estimating depth using ad hoc stereo array cameras
US9800859B2 (en) 2013-03-15 2017-10-24 Fotonation Cayman Limited Systems and methods for estimating depth using stereo array cameras
US9438888B2 (en) 2013-03-15 2016-09-06 Pelican Imaging Corporation Systems and methods for stereo imaging with camera arrays
US9497429B2 (en) 2013-03-15 2016-11-15 Pelican Imaging Corporation Extended color processing on pelican array cameras
US10638099B2 (en) 2013-03-15 2020-04-28 Fotonation Limited Extended color processing on pelican array cameras
JP2015033072A (ja) * 2013-08-06 2015-02-16 株式会社モルフォ 画像処理装置及び画像処理方法
US10540806B2 (en) 2013-09-27 2020-01-21 Fotonation Limited Systems and methods for depth-assisted perspective distortion correction
US9898856B2 (en) 2013-09-27 2018-02-20 Fotonation Cayman Limited Systems and methods for depth-assisted perspective distortion correction
US9264592B2 (en) 2013-11-07 2016-02-16 Pelican Imaging Corporation Array camera modules incorporating independently aligned lens stacks
US9924092B2 (en) 2013-11-07 2018-03-20 Fotonation Cayman Limited Array cameras incorporating independently aligned lens stacks
US9426343B2 (en) 2013-11-07 2016-08-23 Pelican Imaging Corporation Array cameras incorporating independently aligned lens stacks
US9185276B2 (en) 2013-11-07 2015-11-10 Pelican Imaging Corporation Methods of manufacturing array camera modules incorporating independently aligned lens stacks
US11486698B2 (en) 2013-11-18 2022-11-01 Fotonation Limited Systems and methods for estimating depth from projected texture using camera arrays
US10119808B2 (en) 2013-11-18 2018-11-06 Fotonation Limited Systems and methods for estimating depth from projected texture using camera arrays
US10767981B2 (en) 2013-11-18 2020-09-08 Fotonation Limited Systems and methods for estimating depth from projected texture using camera arrays
US9426361B2 (en) 2013-11-26 2016-08-23 Pelican Imaging Corporation Array camera configurations incorporating multiple constituent array cameras
US9813617B2 (en) 2013-11-26 2017-11-07 Fotonation Cayman Limited Array camera configurations incorporating constituent array cameras and constituent cameras
US10708492B2 (en) 2013-11-26 2020-07-07 Fotonation Limited Array camera configurations incorporating constituent array cameras and constituent cameras
US9456134B2 (en) 2013-11-26 2016-09-27 Pelican Imaging Corporation Array camera configurations incorporating constituent array cameras and constituent cameras
US10089740B2 (en) 2014-03-07 2018-10-02 Fotonation Limited System and methods for depth regularization and semiautomatic interactive matting using RGB-D images
US10574905B2 (en) 2014-03-07 2020-02-25 Fotonation Limited System and methods for depth regularization and semiautomatic interactive matting using RGB-D images
US9247117B2 (en) 2014-04-07 2016-01-26 Pelican Imaging Corporation Systems and methods for correcting for warpage of a sensor array in an array camera module by introducing warpage into a focal plane of a lens stack array
US9521319B2 (en) 2014-06-18 2016-12-13 Pelican Imaging Corporation Array cameras and array camera modules including spectral filters disposed outside of a constituent image sensor
US11546576B2 (en) 2014-09-29 2023-01-03 Adeia Imaging Llc Systems and methods for dynamic calibration of array cameras
US10250871B2 (en) 2014-09-29 2019-04-02 Fotonation Limited Systems and methods for dynamic calibration of array cameras
US9942474B2 (en) 2015-04-17 2018-04-10 Fotonation Cayman Limited Systems and methods for performing high speed video capture and depth estimation using array cameras
US10482618B2 (en) 2017-08-21 2019-11-19 Fotonation Limited Systems and methods for hybrid depth regularization
US10818026B2 (en) 2017-08-21 2020-10-27 Fotonation Limited Systems and methods for hybrid depth regularization
US11562498B2 (en) 2017-08-21 2023-01-24 Adela Imaging LLC Systems and methods for hybrid depth regularization
US11983893B2 (en) 2017-08-21 2024-05-14 Adeia Imaging Llc Systems and methods for hybrid depth regularization
US10880475B2 (en) 2018-10-25 2020-12-29 Korea Electronics Technology Institute Video conversion apparatus and system for generating 360-degree virtual reality video in real time
WO2020085571A1 (ko) * 2018-10-25 2020-04-30 전자부품연구원 360 vr 영상을 실시간으로 생성하는 영상변환장치 및 시스템
US12021102B2 (en) 2019-06-06 2024-06-25 Applied Materials, Inc. Imaging system and method of creating composite images
US11270110B2 (en) 2019-09-17 2022-03-08 Boston Polarimetrics, Inc. Systems and methods for surface modeling using polarization cues
US11699273B2 (en) 2019-09-17 2023-07-11 Intrinsic Innovation Llc Systems and methods for surface modeling using polarization cues
US11525906B2 (en) 2019-10-07 2022-12-13 Intrinsic Innovation Llc Systems and methods for augmentation of sensor systems and imaging systems with polarization
US12099148B2 (en) 2019-10-07 2024-09-24 Intrinsic Innovation Llc Systems and methods for surface normals sensing with polarization
US11982775B2 (en) 2019-10-07 2024-05-14 Intrinsic Innovation Llc Systems and methods for augmentation of sensor systems and imaging systems with polarization
US11302012B2 (en) 2019-11-30 2022-04-12 Boston Polarimetrics, Inc. Systems and methods for transparent object segmentation using polarization cues
US11842495B2 (en) 2019-11-30 2023-12-12 Intrinsic Innovation Llc Systems and methods for transparent object segmentation using polarization cues
US11580667B2 (en) 2020-01-29 2023-02-14 Intrinsic Innovation Llc Systems and methods for characterizing object pose detection and measurement systems
US11797863B2 (en) 2020-01-30 2023-10-24 Intrinsic Innovation Llc Systems and methods for synthesizing data for training statistical models on different imaging modalities including polarized images
US11953700B2 (en) 2020-05-27 2024-04-09 Intrinsic Innovation Llc Multi-aperture polarization optical systems using beam splitters
US12020455B2 (en) 2021-03-10 2024-06-25 Intrinsic Innovation Llc Systems and methods for high dynamic range image reconstruction
US12069227B2 (en) 2021-03-10 2024-08-20 Intrinsic Innovation Llc Multi-modal and multi-spectral stereo camera arrays
US11290658B1 (en) 2021-04-15 2022-03-29 Boston Polarimetrics, Inc. Systems and methods for camera exposure control
US11683594B2 (en) 2021-04-15 2023-06-20 Intrinsic Innovation Llc Systems and methods for camera exposure control
US11954886B2 (en) 2021-04-15 2024-04-09 Intrinsic Innovation Llc Systems and methods for six-degree of freedom pose estimation of deformable objects
US12067746B2 (en) 2021-05-07 2024-08-20 Intrinsic Innovation Llc Systems and methods for using computer vision to pick up small objects
US11689813B2 (en) 2021-07-01 2023-06-27 Intrinsic Innovation Llc Systems and methods for high dynamic range imaging using crossed polarizers

Also Published As

Publication number Publication date
US20050134698A1 (en) 2005-06-23
EP1695545A2 (en) 2006-08-30
WO2005060636A3 (en) 2005-10-06
CN100553291C (zh) 2009-10-21
US7123298B2 (en) 2006-10-17
WO2005060636A2 (en) 2005-07-07
EP1695545A4 (en) 2009-12-02
CN1922864A (zh) 2007-02-28

Similar Documents

Publication Publication Date Title
JP4709958B2 (ja) 各センサ素子領域上に像を形成する結像素子アレイを備えたカラーイメージセンサ
JP2007520107A (ja) センサ素子の各領域上に画像を形成する撮像素子を備えたカラーイメージセンサ
US10015416B2 (en) Imaging systems with high dynamic range and phase detection pixels
KR101442313B1 (ko) 카메라 센서 교정
TWI468021B (zh) 影像感測器件及使用照度及色度感測器之影像擷取之方法
CN204697179U (zh) 具有像素阵列的图像传感器
JP5589146B2 (ja) 撮像素子及び撮像装置
KR101733443B1 (ko) 이종 이미저를 구비한 모놀리식 카메라 어레이를 이용한 이미지의 캡처링 및 처리
KR101517704B1 (ko) 이미지를 기록하기 위한 이미지 기록 장치 및 방법
JP6958554B2 (ja) 撮像装置、撮像素子、および画像処理装置
US10419664B2 (en) Image sensors with phase detection pixels and a variable aperture
JP5404376B2 (ja) カメラモジュール及び画像処理装置
CN101106641B (zh) 用于图像处理的方法和设备
JP2008005488A (ja) カメラモジュール
CN102227665A (zh) 固态摄像元件和摄像设备
JP2006033493A (ja) 撮像装置
CN104041020A (zh) 彩色摄像元件
WO2011063063A1 (en) Sparse color pixel array with pixel substitutes
WO2021157237A1 (ja) 電子機器
JP5978570B2 (ja) 撮像装置
WO2005057278A1 (en) Method and device for capturing multiple images

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20071114

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A711

Effective date: 20080222

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20080604

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20080604

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20091009

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20091110

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20100406