JP2013526801A - 撮像装置アレイおよびアレイカメラのためのアーキテクチャ - Google Patents

撮像装置アレイおよびアレイカメラのためのアーキテクチャ Download PDF

Info

Publication number
JP2013526801A
JP2013526801A JP2013510321A JP2013510321A JP2013526801A JP 2013526801 A JP2013526801 A JP 2013526801A JP 2013510321 A JP2013510321 A JP 2013510321A JP 2013510321 A JP2013510321 A JP 2013510321A JP 2013526801 A JP2013526801 A JP 2013526801A
Authority
JP
Japan
Prior art keywords
array
imaging device
pixels
focal plane
focal planes
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2013510321A
Other languages
English (en)
Other versions
JP5848754B2 (ja
Inventor
ベダブラト パイン,
アンドリュー ケニス ジョン マクマホン,
Original Assignee
ペリカン イメージング コーポレイション
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ペリカン イメージング コーポレイション filed Critical ペリカン イメージング コーポレイション
Publication of JP2013526801A publication Critical patent/JP2013526801A/ja
Application granted granted Critical
Publication of JP5848754B2 publication Critical patent/JP5848754B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/40Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/40Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled
    • H04N25/44Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled by partially reading an SSIS array
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/10Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
    • H04N23/13Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths with multiple sensors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/95Computational photography systems, e.g. light-field imaging systems
    • H04N23/951Computational photography systems, e.g. light-field imaging systems by using two or more images to influence resolution, frame rate or aspect ratio
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/40Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled
    • H04N25/41Extracting pixel data from a plurality of image sensors simultaneously picking up an image, e.g. for increasing the field of view by combining the outputs of a plurality of sensors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/60Noise processing, e.g. detecting, correcting, reducing or removing noise
    • H04N25/67Noise processing, e.g. detecting, correcting, reducing or removing noise applied to fixed-pattern noise, e.g. non-uniformity of response
    • H04N25/671Noise processing, e.g. detecting, correcting, reducing or removing noise applied to fixed-pattern noise, e.g. non-uniformity of response for non-uniformity detection or correction
    • H04N25/672Noise processing, e.g. detecting, correcting, reducing or removing noise applied to fixed-pattern noise, e.g. non-uniformity of response for non-uniformity detection or correction between adjacent sensors or output registers for reading a single image
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70SSIS architectures; Circuits associated therewith
    • H04N25/703SSIS architectures incorporating pixels for producing signals other than image signals
    • H04N25/704Pixels specially adapted for focusing, e.g. phase difference pixel sets
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70SSIS architectures; Circuits associated therewith
    • H04N25/76Addressed sensors, e.g. MOS or CMOS sensors
    • H04N25/767Horizontal readout lines, multiplexers or registers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70SSIS architectures; Circuits associated therewith
    • H04N25/76Addressed sensors, e.g. MOS or CMOS sensors
    • H04N25/77Pixel circuitry, e.g. memories, A/D converters, pixel amplifiers, shared circuits or shared components
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70SSIS architectures; Circuits associated therewith
    • H04N25/76Addressed sensors, e.g. MOS or CMOS sensors
    • H04N25/77Pixel circuitry, e.g. memories, A/D converters, pixel amplifiers, shared circuits or shared components
    • H04N25/772Pixel circuitry, e.g. memories, A/D converters, pixel amplifiers, shared circuits or shared components comprising A/D, V/T, V/F, I/T or I/F converters
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70SSIS architectures; Circuits associated therewith
    • H04N25/76Addressed sensors, e.g. MOS or CMOS sensors
    • H04N25/78Readout circuits for addressed sensors, e.g. output amplifiers or A/D converters
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/10Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
    • H04N25/11Arrangement of colour filter arrays [CFA]; Filter mosaics
    • H04N25/13Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
    • H04N25/134Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements based on three different wavelength filter elements

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computing Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Transforming Light Signals Into Electric Signals (AREA)
  • Solid State Image Pick-Up Elements (AREA)
  • Color Television Image Signal Generators (AREA)

Abstract

本発明の実施形態によるアレイカメラで使用するために構成される、撮像装置アレイのアーキテクチャを説明する。本発明の一実施形態は、複数の焦点面であって、各焦点面は、各次元に少なくとも2つのピクセルを有するピクセルの2次元配設を備え、各焦点面は、別の焦点面からのピクセルを含有しない撮像装置アレイの領域内に含有される複数の焦点面と、焦点面内のピクセルによる画像情報の捕捉を制御するように構成される制御回路であって、制御回路は、焦点面のうちの少なくとも2つの中のピクセルによる画像情報の捕捉が別々に制御可能であるように構成される制御回路と、ピクセル出力をデジタルピクセルデータに変換するように構成されるサンプリング回路とを含む。

Description

本発明は、概して、撮像装置に関し、より具体的には、アレイカメラで使用される撮像装置アレイに関する。
従来の単一のセンサカメラで使用されるセンサは、典型的には、行コントローラと、1つ以上の列読み出し回路とを含む。撮像装置の中のピクセルのアレイとの関連で、「行」という用語は、典型的には、共通制御ラインを共有するピクセル群を指すために使用され、「列」という用語は、共通読み出しラインを共有するピクセル群である。個々のカメラ/センサのアレイ、または単一焦点面センサ上で焦点を合わせられたレンズアレイのいずれか一方を使用する、いくつかのアレイカメラ設計が提案されている。複数の別個のカメラがアレイカメラの実装で使用されるときに、各カメラは、別個の入出力経路を有し、カメラコントローラは、典型的には、何らかの方法で同期化される必要がある。単一焦点面センサ上で焦点を合わせられたレンズアレイが、アレイカメラを実装するために使用されるときに、センサは、典型的には、従来のカメラで使用されるものと同様の従来のセンサである。そのようなものとして、センサは、レンズアレイの中の各センサの画像範囲内のピクセルを独立して制御する能力を保有しない。
撮像装置アレイが、本発明の実施形態によるモノリシック集積回路として実装される、システムおよび方法が開示される。多くの実施形態では、撮像装置アレイは、撮像装置アレイ内の制御論理によってそれぞれ独立して制御される、複数の撮像装置を含み、各撮像装置によって捕捉される画像データは、共通入出力経路を使用して、撮像装置アレイから出力される。いくつかの実施形態では、各撮像装置のピクセルは、裏面照射され、撮像装置アレイのバルクシリコンは、各撮像装置によって感知されるスペクトル波長に従って、異なる撮像装置に対応する領域中で異なる深度まで薄くされる。
本発明の一実施形態は、複数の焦点面であって、各焦点面は、各次元に少なくとも2つのピクセルを有する、ピクセルの2次元配設を備え、各焦点面は、別の焦点面からのピクセルを含有しない、撮像装置アレイの領域内に含有される、複数の焦点面と、焦点面内のピクセルによる画像情報の捕捉を制御するように構成される、制御回路であって、制御回路は、焦点面の少なくとも2つの中のピクセルによる画像情報の捕捉が別々に制御可能であるように、構成される、制御回路と、ピクセル出力をデジタルピクセルデータに変換するように構成される、サンプリング回路とを含む。
さらなる実施形態では、複数の焦点面は、1つの次元に少なくとも3つの焦点面を有する、焦点面の2次元アレイとして配設される。
別の実施形態では、複数の焦点面は、両方の次元に少なくとも3つの焦点面を有する、焦点面の2次元アレイとして配設される。
なおもさらなる実施形態では、焦点面のN×Mアレイとして配設される、複数の焦点面は、青色光を捕捉するように構成される少なくとも2つの焦点面と、緑色光を捕捉するように構成される少なくとも2つの焦点面と、赤色光を捕捉するように構成される少なくとも2つの焦点面とを備える。
なおも別の実施形態では、各焦点面は、ピクセルの行および列を備える。
さらなる実施形態では、制御回路は、ピクセルの再設定を制御することによって、ピクセルによる画像情報の捕捉を制御するように構成される。
さらに別の実施形態では、制御回路は、ピクセルの読み出しを制御することによって、ピクセルによる画像情報の捕捉を制御するように構成される。
再度、さらなる実施形態では、制御回路は、各ピクセルの積分時間を制御することによって、画像情報の捕捉を制御するように構成される。
再度、別の実施形態では、制御回路は、サンプリング回路の利得を制御することによって、画像情報の処理を制御するように構成される。
さらなる付加的な実施形態では、制御回路は、各ピクセルの黒レベルオフセットを制御することによって、画像情報の処理を制御するように構成される。
別の付加的な実施形態では、制御回路は、読み出し方向を制御することによって、画像情報の捕捉を制御するように構成される。
なおもさらなる実施形態では、読み出し方向は、上面から底面、および底面から上面から成る群より選択される。
なおもさらなる別の実施形態では、読み出し方向は、左側から右側、および右側がら左側から成る群より選択される。
再度、なおもさらなる実施形態では、制御回路は、関心の読み出し領域を制御することによって、画像情報の捕捉を制御するように構成される。
再度、なおも別の実施形態では、制御回路は、水平サブサンプリングを制御することによって、画像情報の捕捉を制御するように構成される。
なおもさらなる付加的な実施形態では、制御回路は、垂直サブサンプリングを制御することによって、画像情報の捕捉を制御するように構成される。
なおも別の付加的な実施形態では、制御回路は、ピクセル電荷ビニングを制御することによって、画像情報の捕捉を制御するように構成される。
再度、さらなる実施形態では、撮像装置アレイは、モノリシック集積回路撮像装置アレイである。
再度、さらに別の実施形態では、少なくとも1つの焦点面内の隣接ピクセルの2次元アレイは、同じ捕捉帯域を有する。
さらに付加的な実施形態では、捕捉帯域は、青色光、シアン光、視光および近赤外光を含む拡張色光、緑色光、赤外光、マゼンタ光、近赤外光、赤色光、黄色光、および白色光を含む、群から選択される。
再度、さらなる付加的な実施形態では、第1の焦点面内の隣接ピクセルの第1のアレイは、第1の捕捉帯域を有し、第2の焦点面内の隣接ピクセルの第2のアレイは、第2の捕捉帯域を有し、第1の捕捉帯域と第2の捕捉帯域とは、同じであり、周辺回路は、隣接ピクセルの第1のアレイの積分時間が第1の期間であるように、構成され、周辺回路は、隣接ピクセルの第2のアレイの積分時間が第2の期間であるように、構成され、第2の期間は、第1の期間よりも長い。
別のさらなる実施形態では、焦点面のうちの少なくとも1つは、隣接ピクセルのアレイを含み、隣接ピクセルのアレイの中のピクセルは、光の異なる色を捕捉するように構成される。
さらに別のさらなる実施形態では、隣接ピクセルのアレイは、ベイヤーフィルタパターンを採用する。
なおも別のさらなる実施形態では、複数の焦点面は、焦点面の2×2アレイとして配設され、焦点面のアレイの中の第1の焦点面は、ベイヤーフィルタパターンを採用する隣接ピクセルのアレイを含み、焦点面のアレイの中の第2の焦点面は、緑色光を捕捉するように構成される隣接ピクセルのアレイを含み、焦点面のアレイの中の第3の焦点面は、赤色光を捕捉するように構成される隣接ピクセルのアレイを含み、焦点面のアレイの中の第4の焦点面は、青色光を捕捉するように構成される隣接ピクセルのアレイを含む。
再度、別のさらなる実施形態では、複数の焦点面は、1つの次元に少なくとも3つの焦点面を有する、焦点面の2次元アレイとして配設される。
別のさらなる付加的な実施形態では、複数の焦点面は、両方の次元に少なくとも3つの焦点面を有する、焦点面の2次元アレイとして配設される。
なおもさらに別のさらなる実施形態では、制御回路は、グローバルカウンタを備える。
再度、なおも別のさらなる実施形態では、制御回路は、各焦点面が、グローバルカウンタに対して制御された時間的オフセットを有するように、画像読み出しの開始点を交互にするように構成される。
再度、なおも別のさらなる付加的な実施形態では、制御回路は、グローバルカウンタを使用して、焦点面内のピクセルの捕捉帯域に基づいて、各焦点面内のピクセルの積分時間を別々に制御するように構成される。
再度、さらに別のさらなる実施形態では、制御回路は、グローバルカウンタに基づいて、各焦点面のフレームレートを別々に制御するように構成される。
さらに別のさらなる付加的な実施形態では、制御回路はさらに、各焦点面に対する一対のポインタを備える。
なおもさらなる実施形態では、ポインタ間のオフセットは、積分時間を特定する。
なおもさらなる別の実施形態では、ポインタ間のオフセットは、プログラム可能である。
さらなる実施形態では、制御回路は、各焦点面専用の行コントローラを備える。
さらに別の実施形態では、撮像装置アレイは、M×Nの焦点面のアレイを含み、制御回路は、M個の焦点面の各行の中のピクセルの各行をアドレス指定するように構成される、単一の行デコーダ回路を備える。
再度、さらなる実施形態では、制御回路は、行デコーダおよび列回路が、第1の焦点面内のピクセルの第1の行をサンプリングするように、第1組のピクセルレベルタイミング信号を生成するように構成され、制御回路は、行デコーダおよび列回路が、第2の焦点面内のピクセルの第2の行をサンプリングするように、第2組のピクセルレベルタイミング信号を生成するように構成される。
再度、別の実施形態では、各焦点面は、専用サンプリング回路を備える。
さらなる付加的な実施形態では、サンプリング回路の少なくとも一部分は、複数の焦点面によって共有される。
別の付加的な実施形態では、撮像装置アレイは、M×Nの焦点面のアレイを含み、サンプリング回路は、M個のアナログ信号プロセッサ(ASP)を備え、各ASPは、N個の焦点面から読み出されたピクセルをサンプリングするように構成される。
なおもさらなる実施形態では、各ASPは、N個の入力を介してN個の焦点面からピクセル出力信号を受信するように構成され、各ASPは、そのN個の入力上で各ピクセル出力信号を連続的に処理するように構成される。
なおもさらに別の実施形態では、制御回路は、単一の共通アナログピクセル信号読み出しラインが、N個の焦点面のグループの中の全てのピクセルによって共有されるように、構成され、制御回路は、画像データの捕捉を制御して、M個のASPのそれぞれによって受信されるピクセル出力信号を時間多重化するように構成される。
再度、なおも別の実施形態では、撮像装置アレイは、M×Nの焦点面のアレイを含み、サンプリング回路は、複数のアナログ信号プロセッサ(ASP)を備え、各ASPは、複数の焦点面から読み出されたピクセルをサンプリングするように構成され、制御回路は、単一の共通アナログピクセル信号読み出しラインが、複数の焦点面内の全てのピクセルによって共有されるように、構成され、制御回路は、画像データの捕捉を制御して、複数のASPのそれぞれによって受信されるピクセル出力信号を時間多重化するように構成される。
再度、さらなる実施形態では、サンプリング回路は、アナログフロントエンド(AFE)回路と、アナログ・デジタル変換(ADC)回路とを備える。
再度、さらに別の実施形態では、サンプリング回路は、各焦点面が、専用AFEを有し、少なくとも1つのADCが、少なくとも2つの焦点面の間で共有されるように、構成される。
さらなる付加的な実施形態では、サンプリング回路は、少なくとも1つのADCが、一対の焦点面の間で共有されるように、構成される。
さらに別の付加的な実施形態では、サンプリング回路は、少なくとも1つのADCが、4つの焦点面の間で共有されるように、構成される。
再度、さらに付加的な実施形態では、サンプリング回路は、少なくとも1つのAFEが、少なくとも2つの焦点面の間で共有されるように、構成される。
再度、別の付加的な実施形態では、サンプリング回路は、少なくとも1つのAFEが、少なくとも一対の焦点面の間で共有されるように、構成される。
別のさらなる実施形態では、サンプリング回路は、それぞれAFEを共有する2対の焦点面が、集合的にADCを共有するように、構成される。
なおも別のさらなる実施形態では、制御回路は、各焦点面および関連AFE回路またはその中の処理タイムスロットの電源を切った状態を別々に制御するように構成される。
さらに別のさらなる実施形態では、制御回路は、一定のリセット状態であるように、少なくとも1つの不活性焦点面のピクセルを構成する。
再度、別のさらなる実施形態では、少なくとも1つの焦点面は、焦点面を使用して捕捉されるピクセルデータを較正するように、基準ピクセルを含む。
別のさらなる付加的な実施形態では、制御回路は、焦点面の関連AFE回路またはその中の処理タイムスロットの電源を切った状態を別々に制御するように構成され、制御回路は、焦点面の基準ピクセルの読み出しのために、関連AFE回路またはその中の処理タイムスロットの電源を切ることなく、焦点面の関連AFE回路またはその中の処理タイムスロットの電源を切るように構成される。
なおもさらに別のさらなる付加的な実施形態では、隣接ピクセルのアレイの中のピクセルは、読み出し回路を共有する。
再度、なおも別のさらなる実施形態では、読み出し回路は、リセットトランジスタ、浮動拡散コンデンサ、ソースフォロア増幅器トランジスタとを含む。
なおも別のさらなる付加的な実施形態では、少なくとも1つの焦点面の中の隣接ピクセルのアレイは、隣接ピクセルの第1のアレイであり、撮像装置アレイは、複数の焦点面のうちのもう1つの内側の隣接ピクセルの第2のアレイと、隣接ピクセルの第2のアレイの中のピクセルとを含み、隣接ピクセルの第2のアレイの中のピクセルの捕捉帯域は、隣接ピクセルの第1のアレイの中のピクセルの捕捉帯域とは異なり、隣接ピクセルの第1のアレイの中のピクセルのフルウェルキャパシティは、隣接ピクセルの第2のアレイの中のピクセルのフルウェルキャパシティとは異なる。
再度、さらに別のさらなる実施形態では、隣接ピクセルの第1のアレイの中のピクセルのフルウェルキャパシティは、ピクセルが、所定の最大スペクトル放射輝度を有する第1の捕捉帯域内で輝くように、所定の積分時間にわたって露出されたときに、各ピクセルウェルが生成された電子の数によって充填されるように、構成され、隣接ピクセルの第2のアレイの中のピクセルのフルウェルキャパシティは、ピクセルが、所定の最大スペクトル放射輝度を有する第2の捕捉帯域内で輝くように、所定の積分時間にわたって露出された時に、各ピクセルウェルが生成された電子の数によって充填されるように、構成される。
さらに別のさらなる付加的な実施形態では、浮動拡散容量が、隣接ピクセルのアレイの中の各ピクセルの変換利得を決定する。
さらなる実施形態では、少なくとも1つの焦点面内の隣接ピクセルのアレイは、隣接ピクセルの第1のアレイであり、撮像装置アレイは、複数の焦点面のうちのもう1つの内側に隣接ピクセルの第2のアレイを含み、隣接ピクセルの第2のアレイの中のピクセルは、隣接ピクセルの第2のアレイの中の各ピクセルの変換利得を決定する、浮動拡散容量を有し、隣接ピクセルの第2のアレイの中のピクセルの捕捉帯域は、隣接ピクセルの第1のアレイの中のピクセルの捕捉帯域とは異なり、隣接ピクセルの第1のアレイの中のピクセルの変換利得は、隣接ピクセルの第2のアレイの中のピクセルの変換利得とは異なる。
別の実施形態では、隣接ピクセルの第1および第2のアレイの浮動拡散コンデンサは、ピクセル出力の入力基準雑音を最小限化するように構成される。
なおもさらなる実施形態では、少なくとも1つの焦点面内の隣接ピクセルのアレイは、隣接ピクセルの第1のアレイであり、撮像装置アレイは、複数の焦点面のうちのもう1つの内側に隣接ピクセルの第2のアレイを含み、隣接ピクセルの第2のアレイの中のピクセルは、隣接ピクセルの第2のアレイの中の各ピクセルの変換利得を決定する、浮動拡散容量を有し、隣接ピクセルの第2のアレイの中のピクセルの捕捉帯域は、隣接ピクセルの第1のアレイの中のピクセルの捕捉帯域と同じであり、隣接ピクセルの第1のアレイの中のピクセルの変換利得は、隣接ピクセルの第2のアレイの中のピクセルの変換利得とは異なる。
なおも別の実施形態では、アレイの中の各ピクセルのソースフォロワ利得は、ピクセルの出力電圧を決定する。
さらなる実施形態では、少なくとも1つの焦点面内の隣接ピクセルのアレイは、隣接ピクセルの第1のアレイであり、撮像装置アレイは、複数の焦点面のうちのもう1つの内側に隣接ピクセルの第2のアレイを含み、隣接ピクセルの第2のアレイの中のピクセルは、隣接ピクセルの第2のアレイの中の各ピクセルの固定ソースフォロワ利得を有し、隣接ピクセルの第2のアレイの中のピクセルの捕捉帯域は、隣接ピクセルの第1のアレイの中のピクセルの捕捉帯域とは異なり、隣接ピクセルの第1のアレイの中のピクセルのソースフォロワ利得は、隣接ピクセルの第2のアレイの中のピクセルのソースフォロワ利得とは異なる。
さらに別の実施形態では、隣接ピクセルの第1のアレイと第2のアレイとのソースフォロワ利得は、各ピクセルの最大出力信号振れが同じであるように構成される。
再度、さらなる実施形態では、第1の焦点面内の隣接ピクセルの第1のアレイは、第1の捕捉帯域を有し、第2の焦点面内の隣接ピクセルの第2のアレイは、第2の捕捉帯域を有し、第1および第2の捕捉帯域は、異なり、撮像装置アレイは、裏面照射され、隣接ピクセルの第1のアレイを含有する領域中の撮像装置アレイの薄化深度は、隣接ピクセルの第2のアレイを含有する撮像装置アレイの領域の薄化深度とは異なる。
再度、別の実施形態では、第1の捕捉帯域と第2の捕捉帯域とは、重複しない。
さらに付加的な実施形態では、第1のアレイを含有する領域中のアレイの中の撮像装置の薄化深度は、第1の捕捉帯域に関係し、第2のアレイを含有する領域中のアレイの中の撮像装置の薄化深度は、第2の捕捉帯域に関係する。
別の付加的な実施形態では、第1の薄化深度は、450nmの公称捕捉帯域波長を考慮して、フォトダイオードの空乏領域内にピークキャリア生成を位置付けるよう構成される。
なおもさらなる実施形態では、第1の薄化深度は、550nmの公称捕捉帯域波長を考慮して、フォトダイオードの空乏領域内にピークキャリア生成を位置付けるよう構成される。
なおもさらなる別の実施形態では、第1の薄化深度は、640nmの公称捕捉帯域波長を考慮して、フォトダイオードの空乏領域内にピークキャリア生成を位置付けるよう構成される。
再度、なおもさらなる実施形態では、第1の焦点面内の隣接ピクセルの第1のアレイは、第1の捕捉帯域を有し、第2の焦点面内の隣接ピクセルの第2のアレイは、第2の捕捉帯域を有し、第1および第2の捕捉帯域は、異なり、隣接ピクセルの第1のアレイの中のピクセルは、第1のピクセルサイズであり、隣接ピクセルの第2のアレイの中のピクセルは、第2のピクセルサイズであり、第1のピクセルサイズは、第2のピクセルサイズよりも大きく、第1の捕捉帯域は、第2の捕捉帯域よりも長い光の波長を含む。
なおもさらなる付加的な実施形態では、制御回路の第1の部分は、焦点面の片側に位置し、制御回路の第2の部分は、焦点面の反対側に位置する。
なおも別の付加的な実施形態では、制御回路の第1の部分は、第1の焦点面内の複数のピクセル、および第1の焦点面に隣接して位置する第2の焦点面内の複数のピクセルによる、情報の捕捉を制御するように構成される。
再度、さらなる実施形態では、撮像装置アレイは、撮像装置アレイの焦点面より上側に位置付けられるレンズアレイを受容するように構成され、複数の焦点面のそれぞれは、レンズアレイが撮像装置アレイに載置された時に、レンズアレイの画像範囲に対応する撮像装置アレイの中の領域内に位置する。
再度、さらに別の実施形態はまた、撮像装置アレイの焦点面より上側に載置されるカバーガラスも含む。
再度、さらに付加的な実施形態では、隣接焦点面は、間隔距離によって分離される。
再度、別の付加的な実施形態では、制御回路は、隣接焦点面の間の間隔距離内に位置する。
別のさらなる実施形態では、サンプリング回路は、隣接焦点面の間の間隔距離内に位置する。
一実施形態は、複数の焦点面であって、各焦点面は、各次元に少なくとも2つのピクセルを有する、ピクセルの2次元配設を備え、各焦点面は、別の焦点面からのピクセルを含有しない、撮像装置アレイの領域内に含有される、複数の焦点面と、焦点面内のピクセルによる画像情報の捕捉を制御するように構成される、制御回路であって、制御回路は、焦点面の少なくとも2つの中のピクセルによる画像情報の捕捉が別々に制御可能であるように、構成される、制御回路と、ピクセル出力をデジタルピクセルデータに変換するように構成される、サンプリング回路と、出力インターフェースを介してピクセルデータを伝送するように構成される、出力インターフェース回路とを含む。
本発明のさらなる実施形態では、撮像装置アレイは、M×Nの焦点面を含み、出力インターフェースは、M×N未満の出力ポートを含み、制御回路は、出力インターフェースの出力ポート上にピクセルデータを時間多重化するように構成される。
別の実施形態では、制御回路はさらに、タイムスロットが、ピクセルデータを伝送するために出力インターフェースの出力ポート上で利用可能となるまで、複数の焦点面からピクセルデータをバッファリングするように構成されるメモリを備える。
なおもさらなる実施形態では、制御回路は、出力インターフェースを介して伝送されるピクセルデータの間にコードを挿入するように構成され、コードは、焦点面を識別する情報を提供する。
なおも別の実施形態では、制御回路は、出力インターフェースを介して伝送されるピクセルデータの間にコードを挿入するように構成され、コードは、焦点面内のピクセルの少なくとも1つの行を識別する情報を提供する。
さらなる実施形態では、制御回路は、出力インターフェースを介して伝送されるピクセルデータの間にコードを挿入するように構成され、コードは、焦点面内のピクセルの少なくとも1つの列を識別する情報を提供する。
さらに別の実施形態では、制御回路は、出力インターフェースを介して伝送されるピクセルデータの間にコードを挿入するように構成され、コードは、ピクセルデータ捕捉の相対的時間を識別する情報を提供する。
再度、さらなる実施形態では、コードは、ピクセルデータ捕捉の相対的開始時間を識別する情報を提供する。
再度別の実施形態では、コードは、ピクセルデータ捕捉の相対的終了時間を識別する情報を提供する。
さらに付加的な実施形態では、制御回路はさらに、カウンタを備え、ピクセルデータ捕捉の相対的時間を識別する情報を提供するコードは、カウンタを使用して生成される。
別の付加的な実施形態では、制御回路は、出力インターフェースを介して伝送されるピクセルデータの間にコードを挿入するように構成され、コードは、撮像装置アレイの動作パラメータに関する情報を提供する。
なおもさらなる実施形態では、コードは、各焦点面の積分時間を提供する。
なおもさらなる別の実施形態では、コードは、各焦点面の利得を提供する。
再度、なおもさらなる実施形態では、出力インターフェース回路は、出力インターフェースを介したピクセルデータの伝送の間にフレームブランキング区間を挿入するように構成される。
再度、なおも別の実施形態では、出力インターフェース回路はさらに、出力インターフェースを介したピクセルデータのラインの伝送の間にラインブランキング区間を挿入するように構成される。
なおもさらなる付加的な実施形態では、出力インターフェース回路は、ビット削減を行うことによって、ピクセルデータを変換するように構成される。
本発明の方法の実施形態は、複数の焦点面を有する撮像装置アレイを使用して、ピクセルデータを別々に捕捉するステップであって、各焦点面は、各次元に少なくとも2つのピクセルを有する、ピクセルの2次元配設を備え、各焦点面は、ピクセルデータの捕捉中に、別の焦点面からのピクセルを含有しない、撮像装置アレイの領域内に含有される、ステップと、撮像装置アレイの中のメモリ内に、捕捉したピクセルデータの複数部分をバッファリングするステップと、タイムスロットが出力ポート上で利用可能であるときに、撮像装置アレイの中の出力インターフェースを介して、バッファリングしたピクセルデータを伝送するステップとを含む。
本発明のさらなる実施形態はまた、出力インターフェースを介して伝送されるピクセルデータの間にコードを挿入するために、撮像装置アレイ上の制御回路を使用するステップも含み、コードは、焦点面を識別する情報を提供する。
本発明の別の実施形態はまた、出力インターフェースを介して伝送されるピクセルデータの間にコードを挿入するために、撮像装置アレイ上の制御回路を使用するステップも含み、コードは、焦点面内のピクセルの少なくとも1つの行を識別する情報を提供する。
本発明のなおもさらなる実施形態はまた、出力インターフェースを介して伝送されるピクセルデータの間にコードを挿入するために、撮像装置アレイ上の制御回路を使用するステップも含み、コードは、焦点面内のピクセルの少なくとも1つの列、ピクセルデータ捕捉の相対的時間、ピクセルデータ捕捉の相対的開始時間、ピクセルデータ捕捉の相対的終了時間、各焦点面の積分時間、および各焦点面の利得のうちの少なくとも1つを識別する情報を提供する。
本発明のなおも別の実施形態はまた、出力インターフェースを介した、バッファリングしたピクセルデータの伝送の間にラインブランキング区間を挿入するために、撮像装置アレイ上の制御回路を使用するステップも含む。
本発明のさらなる実施形態はまた、捕捉したピクセルデータの伝送の完了時にフレームブランキング区間を挿入するために、撮像装置アレイ上の制御回路を使用するステップも含む。
図1は、本発明の実施形態による、アレイカメラのブロック図である。 図1Aは、本発明の実施形態による、モノリシック撮像装置アレイのブロック図である。 図2A−2Bは、本発明の実施形態による、撮像装置アレイの撮像装置構成を図示する。 図3は、本発明の実施形態による、撮像装置アレイのアーキテクチャを図示する。 図4は、本発明の実施形態による、共有アナログ・デジタル変換器を含む、撮像装置アレイの別のアーキテクチャを図示する。 図4Aは、本発明の実施形態による、共有列回路を含む、撮像装置アレイのさらなるアーキテクチャを図示する。 図4Bは、本発明の実施形態による、共有分割列回路を含む、撮像装置アレイのなおも別のアーキテクチャを図示する。 図4Cは、本発明の実施形態による、読み出された2つの焦点面からの列回路出力の移相を図示する。 図4Dは、本発明の実施形態による、専用アナログフロントエンド回路を有し、アナログ・デジタル変換器を共有する、撮像装置アレイの中の一対の焦点面を図示する。 図4Eは、本発明の実施形態による、複数対の焦点面がアナログフロントエンド回路を共有し、4つの焦点面のグループがアナログ・デジタル変換器を共有する、撮像装置アレイの4つの焦点面のグループを図示する。 図4Fは、本発明の実施形態による、一対の焦点面が列制御読み出し回路を共有する、撮像装置アレイ内の一対の焦点面を図示する。 図4Gは、本発明の実施形態による、列制御および読み出し回路が分割され、列制御および読み出し回路の単一のブロックが、第1の焦点面からの奇数列および第2の焦点面からの偶数列を読み出す、撮像装置アレイ内の一対の焦点面を図示する。 図4Hは、本発明の実施形態による、焦点面タイミングおよび制御回路を図示するブロック図である。 図5は、本発明の実施形態による、最適化された薄化深度を伴う裏面照射された撮像装置アレイを図示する。
ここで図面を参照すると、本発明の実施形態によるアレイカメラで使用するために構成される、撮像装置アレイのアーキテクチャが図示されている。多くの実施形態では、撮像装置アレイ上の集中コントローラが、アレイの中の各焦点面の捕捉時間の微調整を可能にする。焦点面という用語は、ピクセルの2次元配設を表す。撮像装置アレイの中の焦点面は、典型的には重複しない(すなわち、各焦点面が撮像装置アレイ上の別個の領域内に位置する)。撮像装置という用語は、焦点面、および焦点面内のピクセルを使用して画像情報の捕捉を制御する制御回路の組み合わせを表すために使用される。いくつかの実施形態では、撮像装置アレイの焦点面は、別々に誘起することができる。いくつかの実施形態では、撮像装置アレイの焦点面は、各焦点面内のピクセルの捕捉帯域に併せた異なる積分時間を利用する。ピクセルの捕捉帯域は、典型的には、ピクセルが敏感である、電磁システムの連続サブバンドを指す。加えて、焦点面内のピクセルの全てまたは大部分が同じ捕捉帯域を有するような特定の焦点面の特殊化は、いくつかのピクセル性能向上、および撮像装置アレイ内の周辺回路の利用の効率の増加を可能にする。
いくつかの実施形態では、撮像装置アレイのピクセルは、裏面照射され、焦点面のそれぞれを含有する領域の基板は、各焦点面の中のピクセルによって感知されるスペクトル波長に応じて、異なる深度まで薄くされる。加えて、特定の捕捉帯域に対するピクセルの性能を向上させるように、ピクセル自体を修正することができる。多くの実施形態では、各焦点面の中のピクセルの変換利得、ソースフォロワ利得、およびフルウェルキャパシティは、それらの特定の捕捉帯域に対するピクセルの性能を向上させるように決定される。
いくつかの実施形態では、各焦点面は、画像情報の情報を制御するように専用周辺回路を保有する。ある実施形態では、焦点面の中へ同じ捕捉帯域を捕捉することを目的としているピクセルのグループ化は、周辺回路がピクセルの間で共有されることを可能にする。多くの実施形態では、アナログフロントエンド、アナログ・デジタル変換器、および/または列読み出しおよび制御回路が、2つの焦点面内のピクセルの間で共有される。
多くの実施形態では、撮像装置アレイの中の撮像装置は、電力を節約するように低電力状態にすることができ、それは、出力画像を生成するために全ての撮像装置が使用されることを要求しない動作モード(例えば、低解像度モード)で有用となり得る。いくつかの実施形態では、低電力状態の撮像装置のピクセルは、その最大潜在能力およびキャリア収集能力でフォトダイオードの空乏領域を維持するよう、移動ゲートがオンの状態で保たれ、したがって、非動作中撮像装置の中で生成された光生成キャリアが、動作中撮像装置のピクセルに移動する確率を最小限化する。本発明の実施形態によるアレイカメラおよび撮像装置アレイは、以下でさらに論議される。
(1.アレイカメラアーキテクチャ)
本発明の実施形態による種々のアレイカメラ構成で使用することができる、アレイカメラアーキテクチャが、図1に図示されている。アレイカメラ100は、画像処理パイプラインモジュール120およびコントローラ130に接続される、撮像装置アレイ110を含む。
撮像装置アレイ110は、そのそれぞれが別個のレンズシステムを通して光を受容する、個々の独立した焦点面のM×Nのアレイを含む。撮像装置アレイはまた、焦点面および物理的パラメータを感知する1つ以上のセンサを使用して、画像データの捕捉を制御する他の回路を含むこともできる。制御回路は、露出時間、トリガ時間、利得、および黒レベルオフセット等の撮像および機能パラメータを制御することができる。制御回路はまた、読み出し方向(例えば、上面から底面または底面から上面、および左側から右側または右側がら左側)を制御することによって、画像情報の捕捉を制御することもできる。制御回路はまた、関心の領域、水平サブサンプリング、垂直サブサンプリング、および/または電荷ビニングの読み出しを制御することもできる。多くの実施形態では、撮像パラメータを制御するための回路は、別々に、または同期化して、各焦点面を誘起してもよい。撮像装置アレイは、動作温度における暗電流を推定するように、暗ピクセルを含むが、それらに限定されない、種々の他のセンサを含むことができる。本発明の実施形態によるアレイカメラで利用することができる撮像装置アレイは、その開示が、その全体で参照することにより本明細書に組み込まれる、Venkataramanらに対する国際公開第2009/151903号で開示されている。モノリシック実装では、撮像装置アレイは、モノリシック集積回路を使用して実装されてもよい。本発明の実施形態による撮像装置アレイが、単一の内蔵型SOCチップまたはダイで実装されるときに、撮像装置アレイを撮像装置アレイと呼ぶことができる。撮像装置アレイという用語は、その上で撮像装置アレイおよび関連制御、サポート、および読み出し電子機器が統合される、半導体チップを表すために使用することができる。
画像処理パイプラインモジュール120は、撮像装置アレイ110から受信される画像を処理するためのハードウェア、ファームウェア、ソフトウェア、またはそれらの組み合わせである。画像処理パイプラインモジュール120は、典型的には、本発明の実施形態に従って、カメラアレイによって捕捉される複数の低解像度(LR)画像を処理し、合成高解像度画像を生成する。いくつかの実施形態では、画像処理パイプラインモジュール120は、出力122を介して、合成画像データを提供する。本発明の実施形態によるカメラアレイで利用することができる、種々の画像処理パイプラインモジュールは、その開示が、その全体で参照することにより本明細書に組み込まれる、2010年12月14日出願の「System and Methods for Synthesizing High Resolution Images Using Super−Resolution Processes」と題された米国特許出願第12/967,807号で開示されている。
コントローラ130は、撮像装置アレイ110の種々の動作パラメータを制御するためのハードウェア、ソフトウェア、ファームウェア、またはそれらの組み合わせである。多くの実施形態では、コントローラ130は、ユーザまたは他の外部構成要素から入力132を受信し、撮像装置アレイ110を制御するように操作信号を送信する。コントローラ130はまた、撮像装置アレイ110によって捕捉されるLR画像の処理をサポートするように、情報を画像処理パイプラインモジュール120に送信することもできる。
特定のアレイカメラアーキテクチャが図1に図示されているが、撮像装置アレイを使用して場面の複数の画像を捕捉するための代替的なアーキテクチャも、本発明の実施形態に従って利用することができる。本発明の実施形態による、アレイカメラの動作、撮像装置アレイ構成、および場面の複数の捕捉した画像の処理は、以下でさらに論議される。
(2.撮像装置アレイアーキテクチャ)
本発明の実施形態による撮像装置アレイが、図1Aに図示されている。撮像装置アレイは、焦点面153のアレイを含む焦点面アレイコア152と、全アナログ信号処理、ピクセルレベル制御論理、信号伝達、およびアナログ・デジタル変換回路とを含む。撮像装置アレイはまた、ピクセルを使用して画像情報の捕捉を制御する責任がある、焦点面タイミングおよび制御回路154も含む。いくつかの実施形態では、焦点面タイミングおよび制御回路は、ピクセルの積分時間を制御するために、リセットおよび読み出し信号を利用する。他の実施形態では、ピクセルの積分時間を制御するために、および/またはピクセルを使用して画像情報を捕捉するために、種々の技法のうちのいずれかを利用することができる。多くの実施形態では、焦点面タイミングおよび制御回路154は、高ダイナミックレンジ撮像、高速ビデオ、および電子画像安定化を含む(しかしそれらに限定されない)特徴を可能にする、画像情報捕捉制御の融通性を提供する。種々の実施形態では、撮像装置アレイは、電力管理およびバイアス生成回路156を含む。電力管理およびバイアス生成回路156は、ADCがそれに対して変換される信号を測定する、基準電圧等の電流および電圧基準をアナログ回路に提供する。多くの実施形態では、電力管理およびバイアス回路はまた、節電理由により、使用されていないときに、ある回路への電流/電圧基準をオフにする論理も含む。いくつかの実施形態では、撮像装置アレイは、撮像装置アレイによって捕捉される画像データの黒レベルの一貫性を増加させ、行の時間的雑音および列の固定パターン雑音の出現を低減することができる、暗電流および固定パターン(FPN)補正回路158を含む。いくつかの実施形態では、各焦点面は、焦点面の暗電流およびFPNを較正する目的で基準ピクセルを含み、制御回路は、暗電流およびFPNの較正の必要性を低減することによって、撮像装置アレイに電力供給することができる速度を増加させるために、焦点面の残りのピクセルの電源が切られたときに、基準ピクセルを動作状態に保つことができる。多くの実施形態では、SOC撮像装置は、焦点面から捕捉されたデータをコンテナファイルの中へパッケージ化し、伝送のために捕捉した画像を準備することができる、焦点面フレーミング回路160を含む。いくつかの実施形態では、焦点面フレーミング回路は、捕捉した画像が由来する、焦点面および/またはピクセル群を識別する情報を含む。いくつかの実施形態では、撮像装置アレイはまた、捕捉した画像データを外部デバイスに伝送するためのインターフェースも含む。図示した実施形態では、インターフェースは、撮像装置アレイから30fpsでビデオの読み出しをサポートすることができる、4つのレーンをサポートし、データ出力インターフェース回路162、インターフェース制御回路164、およびインターフェース入力回路166を組み込む、MIPI CSI 2出力インターフェースである。典型的には、各レーンの帯域幅は、撮像装置アレイの中のピクセルの総数および所望のフレームレートのために最適化される。本発明の実施形態による、撮像装置アレイ内の撮像装置のアレイによって捕捉された画像データを外部デバイスに伝送するための、MIPI CSI 2インターフェースを含む種々のインターフェースの使用は、その開示が、その全体で参照することにより本明細書に組み込まれる、2011年5月11日出願の「Systems and Methods for Transmitting Array Camera Data」と題された米国仮特許出願第61/484,920号で説明されている。しかし、撮像装置アレイアーキテクチャの特定の構成要素が、図1Aに関して上記で論議されている。以下でさらに論議されるように、本発明の実施形態に従って、複数の焦点面で場面の画像の捕捉を可能にする、種々の撮像装置アレイのうちのいずれかを、本発明の実施形態に従って構築することができる。したがって、本発明の実施形態による、撮像装置アレイに含むことができる、焦点面アレイコアおよび種々の構成要素が、以下でさらに論議される。
(3.焦点面アレイコア)
本発明の実施形態による焦点面アレイコアは、撮像装置のアレイと、各焦点面内のピクセルを使用して画像データを捕捉するための専用周辺回路とを含む。本発明の実施形態による撮像装置アレイは、特定の用途に適切な種々の異なる構成のうちのいずれかで構成される、焦点面アレイコアを含むことができる。例えば、焦点面、ピクセル、および専用周辺回路に関することを含んで(しかしそれらに限定されない)、特定の撮像装置アレイ設計に、カスタマイズを行うことができる。本発明の実施形態による焦点面アレイコアに組み込むことができる、種々の焦点面、ピクセル設計、および周辺回路は、以下で論議される。
(3.1.撮像装置アレイ上の焦点面の形成)
焦点面がピクセル要素のアレイから形成される、撮像装置アレイを構築することができ、各焦点面は、ピクセルのサブアレイである。各サブアレイが同じ数のピクセルを有する、実施形態では、撮像装置アレイは、K=M×XおよびL=N×Yであるように、X×YピクセルのM×Nのサブアレイで区分される、合計K×Lのピクセル要素を含む。撮像装置アレイとの関連で、各サブアレイまたは焦点面は、場面の別個の画像を生成するために使用することができる。ピクセルの各サブアレイは、従来の撮像装置(すなわち、単一焦点面を含むカメラの中の撮像装置)のピクセルと同じ機能を提供する。
以下でさらに論議されるように、本発明の実施形態による撮像装置アレイは、各焦点面を別々に順序付け、制御することができる、単一のコントローラを含むことができる。共通コントローラおよび入出力回路を有することは、より少ないシリコン面積の使用による、システムの費用の削減、リソース共有および低減したシステム相互接続による、電力消費の減少、M×Nのコントローラおよび読み出し入出力経路よりもむしろ、単一のコントローラのみと通信するホストシステムによる、より単純なシステム統合、共通コントローラの使用による、より単純なアレイ同期化、および相互接続の数の削減による、向上したシステム信頼性を含む、重要なシステム利点を提供することができる。
(3.2.撮像装置のレイアウト)
国際公開第2009/151903号(上記で参照することにより組み込まれた)で開示されているように、撮像装置アレイは、図2Aに図示される撮像装置アレイ(200)等の焦点面の任意のN×Mアレイを含むことができる。焦点面のそれぞれは、典型的には、関連フィルタおよび/または光学要素を有し、異なる光の波長を撮像することができる。いくつかの実施形態では、撮像装置アレイは、赤色光(R)を感知する焦点面と、緑色光(G)を感知する焦点面と、青色光(B)を感知する焦点面とを含む。しかし、いくつかの実施形態では、焦点面のうちの1つ以上は、光の異なる色を捕捉するように構成されるピクセルを含む。いくつかの実施形態では、ピクセルは、焦点面の異なるピクセルが光の異なる色を捕捉することを可能にする、ベイヤーフィルタパターン(または同様のパターン)を採用する。いくつかの実施形態では、2×2撮像装置アレイは、ピクセルがベイヤーフィルタパターン(または同様のパターン)を採用する焦点面と、ピクセルが青色光を捕捉するように構成される焦点面と、ピクセルが緑色光を捕捉するように構成される焦点面と、ピクセルが赤色光を捕捉するように構成される焦点面とを含むことができる。そのようなセンサアレイを組み込むアレイカメラは、ベイヤーフィルタを採用する焦点面を使用して捕捉された画像の色を鮮やかにするために、青色、緑色、および赤色焦点面によって捕捉される色情報を利用することができる。他の実施形態では、ベイヤーパターンを採用する焦点面は、次元のうちの1つに少なくとも3つの焦点面がある、焦点面の2次元配設を含む、撮像装置アレイに組み込まれる。いくつかの実施形態では、両方の次元に少なくとも3つの焦点面がある。
人間の眼は、赤色および青色光よりも緑色光に敏感であり、したがって、赤色または青色光を感知する焦点面よりも多くの緑色光を感知する焦点面を含む、アレイを使用して、撮像装置アレイによって捕捉された低解像度画像データから合成される画像の解像度の増加を達成することができる。緑色光(G)を感知する17個の焦点面、赤色光(R)を感知する4個の焦点面、および青色光(B)を感知する4個の焦点面を含む、5×5撮像装置アレイ(210)が、図2Bに図示されている。いくつかの実施形態では、撮像装置アレイはまた、微光状態でアレイカメラの性能を向上させるために使用することができる、近赤外波長または拡張色波長(すなわち、色および近赤外波長の両方に及ぶ)を感知する焦点面も含む。他の実施形態では、5×5撮像装置アレイは、少なくとも13個の焦点面、少なくとも15個の焦点面、または少なくとも17個の焦点面を含む。加えて、5×5撮像装置アレイは、赤色光を感知する少なくとも4つの焦点面、および/または青色光を感知する少なくとも4つの焦点面を含むことができる。加えて、赤色光を感知する焦点面の数および青色光を感知する焦点面の数は、同じとなり得るが、同じである必要はない。実際に、本発明の実施形態による、いくつかの撮像装置アレイは、異なる数の赤色光を感知する焦点面および青色光を感知する焦点面を含む。多くの実施形態では、3×2アレイ、3×3アレイ、3×4アレイ、4×4アレイ、4×5アレイ、4×6アレイ、5×5アレイ、5×6アレイ、6×6アレイ、および3×7アレイを含む(しかしそれらに限定されない)、他のアレイが利用される。いくつかの実施形態では、撮像装置アレイは、次元のうちの1つに少なくとも3つの焦点面を有する、焦点面の2次元アレイを含む。いくつかの実施形態では、アレイの両方の次元に少なくとも3つの焦点面がある。いくつかの実施形態では、アレイは、青色光を捕捉するように構成されるピクセルを有する、少なくとも2つの焦点面と、緑色光を捕捉するように構成されるピクセルを有する、少なくとも2つの焦点面と、赤色光を捕捉するように構成されるピクセルを有する、少なくとも2つの焦点面とを含む。
付加的な撮像装置アレイ構成は、その開示が、その全体で参照することにより本明細書に組み込まれる、Venkataramanらに対する「Capturing and Process of Images Using Monolithic Camera Array with Heterogenous Imagers」と題された米国特許出願第12/952,106号で開示されている。
特定の撮像装置アレイ構成が上記で開示されているが、可視光、可視光スペクトルの複数部分、近赤外光、スペクトルの他の部分、および/またはスペクトルの異なる部分の組み合わせを感知する撮像装置を含む、撮像装置の種々の規則的または不規則的レイアウトのうちのいずれかを、本発明の実施形態によるSR過程で使用するための情報の1つ以上のチャネルを提供する、画像を捕捉するために利用することができる。本発明の実施形態による、撮像装置アレイの中の撮像装置のピクセルの構造は、撮像装置によって撮像されるスペクトルの特定の部分に依存することができる。本発明の実施形態による撮像装置アレイの焦点面で使用することができる、異なる種類のピクセルが、以下で論議される。
(3.3.ピクセル設計)
色またはマルチスペクトル捕捉のために設計されている撮像装置アレイ内で、可視スペクトルのサブバンドを捕捉するように、各個別焦点面を指定することができる。各焦点面は、それが捕捉するように指定されるスペクトル帯に基づいて、本発明の実施形態による種々の方法で最適化することができる。これらの最適化は、可視スペクトルのそれぞれのサブバンドを捕捉するピクセルが、同じピクセルアレイ内で全て交互配置されるため、過去のベイヤーパターンベースの画像センサで実施することが困難である。本発明の多くの実施形態では、特定の焦点面の捕捉帯域に応じて、撮像装置アレイが異なる深度まで薄くされる、裏面照射が使用される。いくつかの実施形態では、撮像装置アレイの中のピクセルのサイズは、特定の撮像装置の捕捉帯域に基づいて決定される。いくつかの実施形態では、焦点面内のピクセル群の変換利得、ソースフォロワ利得、およびフルウェルキャパシティは、ピクセルの捕捉帯域に基づいて決定される。ピクセルの捕捉帯域に応じて、ピクセルが撮像装アレイの中の焦点面の間で変化し得る、種々の方法が、以下でさらに論議される。
(3.3.1.最適化された薄化深度を伴う裏面照射された撮像装置アレイ)
シリコン基板の中の誘電体スタックの底部に位置する、フォトダイオードに最終的に到達する前に、光子が最初に、誘電体スタックを通って進まなければならない、正面から、従来の画像センサが照射される。誘電体スタックは、素子内の金属相互接続を支持するように存在する。正面照射は、光がピクセル内の金属構造によって遮断されること等の問題により、本質的に不良な量子効率(QE)性能(入射光子に対する生成されたキャリアの比)に悩まされる。向上は、典型的には、ピクセル内の金属構造を回避しようとする円錐状の入射光を集束するよう、各ピクセルに対する誘電体スタックの上のマイクロレンズ要素の堆積を通して達成される。
裏面照射は、撮像装置のQE性能を向上させるよう、画像センサ製造で採用される技法である。裏面照射(BSI)では、光子がシリコン基板の裏面を通ってフォトダイオードの空乏領域に到達することを可能にするように、(通常、化学エッチング過程を用いて)シリコン基板バルクが薄くされる。光が基板の裏面に入射するときに、正面照射に固有の金属構造による開口の問題が回避される。しかしながら、シリコンにおける光の吸収深度は、赤色光子が青色光子よりもはるかに深く浸透するように、波長に比例する。薄化過程が十分なシリコンを除去しない場合、空乏領域は、深くなりすぎて、青色光子から生成された光電子を収集できなくなる。薄化過程が過剰に多くのシリコンを除去する場合、空乏領域は、過剰に浅くなり得て、赤色光子は、相互作用してキャリアを生成することなく真っ直ぐに進む場合がある。赤色光子は、正面から後方に反射し、素子の厚さの軽微な違いにより、入射光子と相互作用して建設的および相殺的干渉を生成し得る。素子の厚さの変動によって引き起こされる効果は、縁パターンとして、および/またはとがったスペクトルQE応答として明白となり得る。
従来の撮像装置では、RGB色捕捉を提供するために、カラーフィルタ(典型的にはベイヤーフィルタ)のモザイクがしばしば使用される。モザイクベースのカラー撮像装置がBSIのために薄くされるとき、使用される過程が、個々のピクセルを異なる深度まで薄くしないため、薄化深度は、典型的には全てのピクセルに対して同じである。ピクセルの共通薄化深度は、青色波長と赤色/近赤外波長との間のQE性能の必要な平衡をもたらす。本発明の実施形態による撮像装置アレイは、焦点面内のピクセルが同じスペクトル波長を感知する、撮像装置のアレイを含む。異なる焦点面は、可視スペクトルの異なるサブバンド、またはシリコンのバンドギャップエネルギーが0よりも大きい量子収率利得を有する、電磁スペクトルの実際にあらゆるサブバンドを感知することができる。したがって、各ピクセルが捕捉するように設計されている光の波長に対応する、吸収深度に最適に合致するように、焦点面のピクセルに対する薄化深度が選択される、BSIを使用することによって、撮像装置アレイの性能を向上させることができる。いくつかの実施形態では、撮像装置アレイのシリコンバルク材料は、QEを最大限化するよう、フォトダイオードの空乏領域内の各カメラの捕捉帯域の吸収深度に合致するように異なる厚さまで薄くされる。
シリコン基板が、本発明の実施形態に従って、異なるスペクトル帯域幅を感知する焦点面(すなわち、サブアレイ)に対応する領域中で異なる深度まで薄くされる、撮像装置アレイが、図5で概念的に図示されている。撮像装置アレイ500は、シリコン基板502を含み、その正面上で、誘電体スタックおよび金属相互接続504が形成される。図示した実施形態では、シリコン基板は、青色光を感知するための焦点面を形成するピクセルのフォトダイオード、緑色光を感知するための焦点面を形成するピクセルのフォトダイオード、赤色光を感知するための焦点面を形成するピクセルのフォトダイオードがそれぞれ位置する、領域506、508、510を含む。シリコン基板の裏面は、各領域中で異なる深度まで薄くされる。図示した実施形態では、基板は、青色光を感知するための撮像装置を形成するピクセルのフォトダイオードが位置する領域506中で、450nm波長光(すなわち、約0.4μm)の吸収深度に対応するように薄くされ、基板は、緑色光を感知するための撮像装置を形成するピクセルのフォトダイオードが位置する領域508中で、550nm波長光(すなわち、約1.5μm)の吸収深度に対応するように薄くされ、および基板は、赤色光を感知するための撮像装置を形成するピクセルのフォトダイオードが位置する領域510中で、640nm波長光(すなわち、約3.0μm)の吸収深度に対応するように薄くされる。特定の深度が図5に示されているが、特定の撮像装置によって感知されるスペクトル波長および用途の要件に適切な他の深度を、本発明の実施形態に従って利用することができる。加えて、異なる薄化深度も、本発明の実施形態による撮像装置アレイを使用して実装されない、アレイカメラで使用することができる。
多くの実施形態では、アレイ内の各撮像装置への色チャネルの指定は、フォトダイオードへの光子の光路内の帯域通過フィルタを通した入射光子の第1の濾過を介して達成される。いくつかの実施形態では、空乏領域の深度が各撮像装置のスペクトルQEを定義するため、薄化深度自体が、捕捉波長の指定を作成するために使用される。
(3.3.2.ピクセルサイズの最適化)
スペクトルの各サブバンドを捕捉するように指定された撮像装置で使用されるピクセルサイズを変更することによって、付加的なSNR利益を達成することができる。ピクセル面積に対するフォトダイオード空乏領域の面積の比が減少するため、ピクセルサイズが縮小するにつれて、ピクセルの効果的なQEが減少する。マイクロレンズは、典型的には、これを代償しようとするために使用され、ピクセルサイズが縮小するにつれて、より重要となる。ピクセルサイズ縮小によるピクセル性能にとっての別の不利益は、増加した雑音に由来する。光活性対読み出し回路面積のバランスを維持しようとするために、多くの実施形態では、ピクセル移動ゲート、ソースフォロワ増幅器トランジスタ、およびリセットトランジスタも小さく作られる。これらのトランジスタがサイズを縮小するにつれて、多数の性能パラメータが低下させられ、典型的には、雑音の増加をもたらす。
電気「クロストーク」も、縮小したピクセルとピクセルの間隔の関数として増加する。長波長光子が、電荷キャリアを作成するようにシリコンと相互作用する前に、基板の中へより深く浸透する。これらの電荷キャリアは、フォトダイオード空乏領域中の再浮上および収集前に、いくらかランダムに動き回る。この推定再浮上および収集の「範囲」は、浸透深度の関数として増大する。したがって、ピクセルがより小さくなるほど、推定再浮上の範囲がより多数のピクセルに及ぶ。この効果は、光子波長の増加とともに、変調伝達関数(MTF)の低下をもたらす。
したがって、より長い波長を捕捉するように指定された撮像装置は、ピクセルサイズを増大させ、したがって、ピクセルのQEを増加させることことによって、システムSNRを向上させるように最適化することができる。MTFが増加した波長の関数として低下するため、解像度目的でのより小さいピクセルの利益は、増加した波長とともに軽減される。したがって、QEを向上させ、したがって、全体的なシステムSNRを向上させるよう、より長い波長に対するピクセルサイズを増大させながら、全体的なシステム解像度を維持することができる。しかし、多くの実施形態では、本発明の実施形態による撮像装置アレイは、製造できるほど小さいピクセルを利用する。したがって、上記で概説される方式でピクセルサイズを増大させることは、単純に、カメラ性能を向上させるために利用することができる1つの技法であり、選択される特定のピクセルサイズは、典型的には、特定の用途に依存する。
(3.3.3.撮像装置最適化)
ますます小さいピクセルの強い要求は、近傍内で読み出し回路を共有するように、ピクセルを再設計するようピクセル設計者を促してきた。例えば、4つのフォトダイオードのグループが、同じリセットトランジスタ、浮動拡散ノード、およびソースフォロワ増幅器トランジスタを共有してもよい。4つのピクセルがベイヤーパターン配設で配設されるときに、4つのピクセルのグループが、捕捉の全可視スペクトルに及ぶ。本発明の実施形態による撮像装置アレイでは、これらの共有ピクセル構造は、焦点面内のピクセルの性能を所与の捕捉帯域に合わせるように適合することができる。これらの構造が、従来の色フィルタアレイベースの画像センサの中に異なる捕捉帯域を有する、ピクセルによって共有されるという事実は、性能向上を達成するための同じ技法が、典型的には実行可能ではないことを意味する。ピクセルの捕捉帯域に基づく、変換利得、ソースフォロワ利得、およびフルウェルキャパシティの選択による、焦点面内のピクセルの性能の向上は、以下で論議される。以下に続く論議は、4T CMOSピクセルに関するが、ピクセルが本発明の実施形態による回路を共有する、任意の撮像装置アレイの中で、ピクセル性能の同様の向上を達成することができる。
(3.3.3.1.変換利得の最適化)
異なる捕捉帯域のそれぞれに合わせた異なる変換利得とともにピクセルを利用することによって、スペクトルの特定のサブバンドを捕捉することを目的としている、撮像装置アレイ内の撮像装置の性能を向上させることができる。典型的な4T CMOSピクセルにおける変換利得は、「感知ノード」、典型的には、浮動拡散コンデンサ(FD)の静電容量のサイズを変更することによって制御することができる。電荷・電圧変換は、方程式V=Q/Cに従い、式中、Qは電荷であり、Cは静電容量であり、Vは電圧である。したがって、静電容量がより小さくなるほど、より高い電圧が所与の電荷に起因し、よって、ピクセルの電荷・電圧変換利得がより高くなる。しかしながら、明らかに、変換利得を無限に増加させることはできない。ピクセルの見掛けのフルウェルキャパシティ(ピクセルが記録することができる光電子の数)は、FDの静電容量が小さくなりすぎた場合に減少する。これは、電子に作用する電位差により、電子がフォトダイオードからFDの中へ移動するためである。電荷移動は、電位差がゼロである(または電位障壁がPFとFDとの間に存在する)ときに停止する。したがって、FDの静電容量が小さすぎる場合、全ての電子がフォトダイオードから外へ移動させられる前に、電位平衡に達してもよい。
(3.3.3.2.ソースフォロワ利得の最適化)
焦点面内の各ピクセルにおける増幅器の特性を変化させることによって、付加的な性能向上を達成することができる。従来の4T CMOSピクセルにおける増幅器は、ソースフォロワトランジスタから構築される。ソースフォロワトランジスタは、列ラインを下って、信号が後にサンプリングされる列回路へ、ピクセル信号を駆動するよう、FDにわたって電圧を増幅する。
インプラントドーピングレベルを変化させることによって、入力電力振幅の関数としての出力電圧振幅(すなわち、ソースフォロワ増幅器の利得)を製造中に制御することができる。ピクセルフォトダイオードの(電子における)フルウェルキャパシティおよびFDの静電容量を考慮して、一連の電圧が、ソースフォロワトランジスタの入力時に、関係Vin=Vrst−Q/Cによって確立され、式中、VrstはFDのリセット電圧であり、QはフォトダイオードからFDに移動させられた電子の電荷であり、CはFDの静電容量である。
フォトダイオードは、蓄積されてもよい電荷の範囲が0電子とフルウェルキャパシティとの間であるように、ピン止め構造である。したがって、フォトダイオードの所与のフルウェルキャパシティ、およびFDの所与の静電容量、およびソースフォロワの所望の出力信号振れを用いて、ソースフォロワトランジスタに対する最適な利得またはほぼ最適な利得を選択することができる。
(3.3.3.3.フルウェルキャパシティの最適化)
行うことができる別の最適化は、フォトダイオードのフルウェルキャパシティの変更によるものである。フォトダイオードのフルウェルキャパシティは、フォトダイオードがその最大空乏状態で貯蔵することができる、最大数の電子である。ピクセルのフルウェルは、フォトダイオードのx−yサイズ、ダイオード構造を形成するインプラントのドーピングレベル、およびピクセルをリセットするために使用される電圧を通して制御することができる。
(3.3.3.4.3パラメータ最適化)
前の項から分かるように、向上した撮像性能のために、同じ捕捉帯域を有する焦点面内でピクセルを構成するために調整することができる、3つの主要な特性がある。3つ全てのパラメータに対する最適な解決法は、特定の焦点面の標的挙動に依存している。各焦点面は、それが捕捉するように構成されるスペクトル帯に合わせることができる。ピクセルの設計を最適化することができる一方で、多くの実施形態では、ピクセルの性能は単純に、(たとえ向上が最適ではない場合があっても)特定の捕捉帯域に対して向上させられる。最適化例は、以下の通りであり、特定の捕捉帯域に対してピクセルの性能を単純に向上させるために、同様の過程を使用することができる。
(a.フォトダイオードフルウェルキャパシティの最適化)
光学部品の速度および色フィルタの透過率を考慮すると、所与の最大スペクトル放射輝度に対する所与の最短積分時間(例えば、50μs)を考慮して生成される電子の数を推定することが可能である。スペクトルの各サブバンド(色)はおそらく、異なる数の生成された電子を有する。各サブバンド(色)に対するフォトダイオードのフルウェルキャパシティは、最短積分時間下でのそのバンド内の最大放射輝度が、ウェルを満たすように、選択することができる。この標的フルウェルキャパシティが達成される手段は、x−y次元を変化させること、ダイオード製造中にドーピングレベルを変化させること、ピクセルのリセット電圧を変化させること、またはこれらのパラメータのうちの2つ以上の組み合わせによるものとなり得る。
(b.変換利得の最適化)
次のステップは、ピクセルの変換利得を最適化することである。フルウェル最適化ステップで定義される電子の数を考慮して、浮動拡散のための最適な静電容量を選択することができる。最適な静電容量は、妥当な持続時間でフルウェルキャパシティを移動させることができるように、FDからの電荷移動をサポートする電位差を維持するものである。この最適化の目標は、入力基準雑音が最小限化され、したがって、各色チャネルに対する最大SNRが実現されるように、電荷・電圧変換利得が可能な限り高くなるように、可能な限り最小の静電容量を選択することである。
(c.ソースフォロワ利得の最適化)
いったん最適なフルウェルキャパシティおよび電荷・電圧変換利得が決定されると、ソースフォロワ増幅器利得を選択することができる。FDのリセット電圧(Vrst)とフルウェル電荷負荷を含有するFDの電圧(Vrst−Q/C)との間の差は、ソースフォロワ増幅器に対する最適な利得の定義を可能にする。ソースフォロワ利得は、VrstとVrst−Q/Cとの間の出力信号振れを定義する。最適な信号振れは、アナログ信号処理の動作電圧、およびピクセル出力信号をサンプリングして変換するA/D変換器等のパラメータによって定義される。ソースフォロワ利得は、それぞれの信号振れが全て相互に合致し、アナログ信号処理およびA/D変換器回路によってサポートされる最大信号振れに合致するように、各色チャネルについて選択される。
これらのピクセルレベル最適化を捕捉帯域ごとに行った後、システムは、線形動作を考慮して、各捕捉帯域に対する最大SNRおよびダイナミックレンジを求める。上記で説明される過程は、最大SNRおよびダイナミックレンジに関して最適な解決法を提供するように設計されているが、特定の捕捉帯域または用途特有の所望の挙動に関して向上したピクセル性能を提供するために、上記で説明される3つのパラメータの選択において、他の設計基準を使用することができる。
(3.3.4.ダイナミックレンジ調整)
同じスペクトル帯内で異なる変換利得のピクセルを使用することによって、撮像装置アレイのさらなる最適化を達成することができる。例えば、「緑色」撮像装置を、2つ以上の異なる変換利得を有するピクセルから構築することができる。したがって、各「緑色」撮像装置は、アレイの中の「緑色」撮像装置のうちのもう1つの中のピクセルの変換利得とは異なる、均一な変換利得を有するピクセルを含む。代替として、各撮像装置は、異なる変換利得を有するピクセルのモザイクから構築することができる。
前述のように、変換利得がある閾値を超えて増加するにつれて、入力基準雑音が減少し続けるが、有効フルウェルキャパシティを犠牲にする。この効果は、より高いダイナミックレンジを有するシステムをもたらすために活用することができる。例えば、入力基準雑音およびフルウェルキャパシティの両方を最適化する変換利得を使用して、全ての「緑色」焦点面の半分を構築することができる(「通常緑色」)。全ての「緑色」焦点面の他方の半分は、より高い変換利得、したがって、より低い入力基準雑音、およびより低い有効フルウェルキャパシティを有するピクセルから構築することができる(「高速緑色」)。より低い光のレベルを有する場面の領域は、「高速緑色」ピクセル(飽和していない)から回収することができ、より明るい光のレベルの領域は、「通常緑色」ピクセルから回収することができる。結果は、システムの大なミッックレンジの全体的増加である。「高速緑色」と「通常緑色」との間の焦点面の特定の50/50割付が上記で論議されているが、「高速」撮像専用の焦点面の数、および「通常」撮像専用の焦点面の数は、特定の用途の要件に完全に依存している。加えて、「高速」および「通常」撮像専用の別個の焦点面は、他のスペクトル帯のダイナミックレンジを増加させるために利用することができ、撮像装置アレイが緑色光を捕捉するダイナミックレンジを増加させることに単純に限定されない。
「高速」ピクセルがより長く統合するように、「高速」および「通常」緑色サブアレイの積分時間を制御することによって、同様の効果を達成することができる。しかしながら、非静止場面では、「高速」ピクセルが「通常」ピクセルよりも長く場面の動きを統合し、望ましくない場合がある、明白な空間的格差を2つの緑色チャネルの間に生じるため、これは、動きアーチファクトをもたらし得る。
本発明は、ある具体的実施形態において説明されているが、多くの付加的な修正および変化例が、当業者に明白となるであろう。したがって、本発明の範囲および精神から逸脱することなく、サイズ、形状、および材料の種々の変更を含んで、本発明が具体的に説明された以外の方法で実践されてもよいことを理解されたい。したがって、本発明の実施形態は、あらゆる点で、制限的ではなく例証的と見なされるべきである。
(3.4.周辺回路)
従来の撮像装置では、ピクセルは、典型的には、ピクセルの各行を横断して走る水平制御ラインを使用して、行方向にアクセスされる。列周囲においてピクセル出力をサンプリング回路に接続するために、各ピクセルを通って垂直に走る出力信号ラインが使用される。水平制御ラインおよび出力信号ラインは、典型的には、シリコン上の金属配線として実装される。行の中の全てのピクセルからの出力は、列周囲において同時にサンプリングされ、列コントローラを使用して連続的にスキャン出力される。しかしながら、撮像装置アレイの中のK個のピクセルの行全体に沿った共通行方向アクセスは、撮像装置が独立して読み出されることを可能にしない。上述のように、撮像装置アレイを利用することの利益の多くは、焦点面の独立、および撮像装置アレイが各焦点面内のピクセルによる画像情報の捕捉を別々に制御する能力に由来する。情報の捕捉を別々に制御する能力とは、焦点面内のピクセルによる画像情報の捕捉を、焦点面が捕捉するように構成されるスペクトル帯にカスタマイズできることを意味する。いくつかの実施形態では、異なる積分時間を有する焦点面を使用して画像の捕捉を同期化すること、およびスローモーションビデオシーケンスを提供するように登録することができる一連の画像を捕捉することにおいて、別個のトリガ時間を提供する能力が有用となり得る。撮像装置アレイ内の異なる焦点面による画像情報の捕捉を制御するために、独立読み出し制御を各焦点面に提供することができる。いくつかの実施形態では、撮像装置アレイは、各焦点面が、関連行(列)コントローラ、列(行)読み出し回路、ならびに専用ピクセル信号アナログプロセッサおよびデジタイザを有するという事実により、独立読み出し制御を有する。多くの実施形態では、焦点面の間で共有される周辺回路を使用して、異なる焦点面内のピクセルによる画像情報の捕捉の別個の制御が達成される。本発明の実施形態による、専用周辺回路および共有周辺回路を使用して実装される撮像装置アレイは、以下で論議される。
(3.4.1.専用周辺回路)
本発明の実施形態による、各焦点面が専用周辺回路を有する、独立読み出し制御およびピクセルデジタル化を有する複数の焦点面を含む、撮像装置アレイが、図3に図示されている。撮像装置アレイ300は、焦点面302のピクセルの複数のサブアレイを含む。各焦点面は、共通行タイミング制御論理回路306によって制御される、専用行制御論理回路304をその周囲に有する。列回路および行デコーダは、焦点面の片側に単一のブロックとして示されているが、単一ブロックとしての描写は、純粋に概念的であり、各ブロックは、2倍のピクセルピッチでレイアウトを可能にするよう、焦点面の左/右および/または上/下の間で分割することができる。このようにして制御および読み出し回路をレイアウトすることは、偶数列が列(行)回路の一方のバンクの中でサンプリングされ、奇数列が他方のバンクの中でサンプリングされる構成をもたらし得る。
M×Nの焦点面を含む素子では、読み出し制御論理は、焦点面の行(N)につき、M組の列制御出力を含む。各列サンプリング/読み出し回路308はまた、捕捉した画像情報をデジタルピクセルデータに変換するための専用サンプリング回路を有することもできる。多くの実施形態では、サンプリング回路は、アナログフロントエンド(AFE)増幅器回路と、アナログ・デジタル変換器(ADC)310とを含む、アナログ信号プロセッサ(ASP)を含む。他の実施形態では、捕捉した画像情報をデジタル化ピクセル情報に変換するために、種々のアナログ回路のうちのいずれかを使用することができる。ASPは、Xが(例えば、パイプラインまたはSAR ADCを伴って)列サンプリング回路によって支配される焦点面の行の中のピクセルの数である、行期間につきX回のピクセル変換で動作する単一のASPとして、行期間につき1回のピクセル変換で並行して動作するX個のASPとして、または1行につきX/P回の変換で並行して動作するP個のASPを含むが、それらに限定されない、いくつかの方法で実装することができる(以下の論議を参照)。共通読み出し制御回路312は、各撮像装置の中の列の読み出しを制御する。
図示した実施形態では、マスタ制御論理回路314は、各撮像装置の独立した読み出しを制御する。マスタ制御論理回路314は、個別焦点面の画像捕捉および読み出し過程を制御するように、高レベルタイミング制御論理回路を含む。いくつかの実施形態では、このブロックのマスタ制御部分は、各焦点面がグローバル基準に対して制御された時間的オフセットを有するように、画像読み出しの開始点を交互にすること、撮像されているスペクトル帯域幅に特有の積分時間を提供するように、特定の焦点面内のピクセルの積分時間を制御すること、各撮像装置の水平および垂直読み出し方向、各焦点面内のピクセルの水平および垂直サブサンプリング/ビニング/ウィンドウイング、各焦点面のフレーム/行/ピクセルレート、および各焦点面の電源を切った状態の制御を含むが、それらに限定されない、特徴を実装することができる。
マスタ制御論理回路314は、撮像装置のそれぞれからのピクセルデータの収集を取り扱う。いくつかの実施形態では、マスタ制御論理回路は、画像データを構造化された出力形式に詰める。画像データを出力するためにM×Nよりも少ない出力ポートが使用される(例えば、2つの出力ポートがある)と考慮して、撮像装置データは、これらの出力ポート上に時間多重化される。いくつかの実施形態では、出力ポート316上の次の利用可能なタイムスロットまで、撮像装置のピクセルからのデータをバッファ格納するために、少量のメモリ(FIFO)が使用され、撮像装置アレイの中のマスタ制御論理回路314または他の回路は、焦点面を識別する情報、焦点面内の行および/または列を識別する情報、および/または捕捉あるいは読み出し過程が焦点面のうちの1つ以上に対して開始/終了した相対的時間を識別する情報を含むが、それらに限定されない情報を提供するデータストリームにコードを周期的に挿入する。相対的時間情報は、オンチップタイマまたはカウンタから導出することができ、その瞬時値は、フレームレートまたはラインレートのいずれか一方で、各撮像装置からのピクセル読み出しの開始/終了時に捕捉することができる。各焦点面の積分時間およびチャネル利得等の動作パラメータを示すよう、付加的なコードもデータ出力に追加することができる。以下でさらに論議されるように、ホストコントローラは、データストリームを、各焦点面によって捕捉された個々の画像に完全に組み立て直すことができる。いくつかの実施形態では、(これらに限定されないが)積分時間および相対的読み出し位置等の動作パラメータにかかわらず、データが常に同じタイミング/順序付け配設でパッケージ化されるように、撮像装置アレイは、全ての焦点面からの画像データの並べ替えおよび/または再タイミング化をサポートするよう、少なくとも全ての焦点面からの画像データの行全体をバッファ格納するのに十分な記憶装置を含む。いくつかの実施形態では、データが、画像データのホストの再構築を容易にする、例えば、画像データを再タイミング化し/並べ替え、相対的読み出し位置にもかかわらず、全ての焦点面からのデータを全ての焦点面に対する均一な行開始位置に整合させる、便利な方式でパケージ化されるように、撮像装置アレイは、全ての焦点面からの画像データの並べ替えおよび/または再タイミング化をサポートするよう、少なくとも全ての焦点面からの画像データの行全体をバッファ格納するのに十分な記憶装置を含む。
(3.4.2.ASP共有)
図3に図示される撮像装置アレイは、各焦点面と関連付けられる別個のASPを含む。ASP、または(これらに限定されないが)AFEあるいはADC等のASPの複数部分が、焦点面の間で共有される、撮像装置アレイを、本発明の実施形態に従って構築することができる。本発明の実施形態による、複数の焦点面の間でASPを共有する撮像装置アレイが、図4に図示されている。撮像装置アレイ300’は、焦点面のM×Nのアレイの一列の中の全てのピクセルのサンプリングのためにASP310’を利用する。図示した実施形態では、M個のASPに接続されたアナログピクセル信号読み出しラインのM個のグループがある。アナログピクセル信号読み出しラインのM個のグループのそれぞれは、N本の個々のラインを有する。M個のASPのそれぞれは、そのN個の入力上で各ピクセル信号を連続的に処理する。そのような構成では、ASPは、その入力における各焦点面が活性状態であるならば、N個の入力のピクセル信号期間につき少なくともN回の過程を行う。ASPの焦点面入力のうちの1つ以上が、不活性状態または電源を切った状態である場合、処理速度を(電力消費のさらなる節約を達成するよう)低減または(フレームレートの増加を達成するよう)維持することができる。代替として、列読み出し制御ブロック312’によって制御されるシークエンシングを通して、ASP処理の時間多重化機能を実装することができるように、共通の単一アナログピクセル信号読み出しラインを焦点面(N)の列の中の全ての列回路によって共有することができる。
図4に図示される撮像装置アレイは、共有ASPを含むが、本発明の多くの実施形態による撮像装置アレイは、専用AFEを含み、ADCを共有することができる。他の実施形態では、AFEおよびADCの共有比は、同じ数の焦点面に従わない。いくつかの実施形態では、各焦点面は、専用AFEを有してもよいが、2つ以上のAFE出力が共通ADCに入力される。多くの実施形態では、2つの隣接焦点面が、同じAFEを共有し、次いで、これらの焦点面組のうちの1つ以上が、ADCの中へ入力される。したがって、AFEおよびADCは、本発明の実施形態による特定の用途に適切な種々の異なる方法のうちのいずれかで、SOC撮像装置の中の異なる焦点面の間で共有することができる。
本発明の実施形態による撮像装置アレイの中の複数対の焦点面間のADCの共有が、図4dに図示されている。図示した実施形態では、複数対の焦点面間のADCの共有を、撮像装置アレイ内の複数対の焦点面の間で複製することができる。複数対の焦点面間のAFEの共有、および本発明の実施形態による撮像装置アレイの中の4つの焦点面のグループ間のADCの共有が、図4eに図示されている。図4eに図示されるAFEおよびADCの共有は、撮像装置アレイ内の4つの焦点面の複数グループの間で複製することができる。多くの実施形態では、共有は、複数対の焦点面および/または3つ以上の焦点面のグループの中で起こる。
多くの実施形態では、各焦点面内のピクセルは、一貫したオフセットおよび利得特性を有するように、常に同じ回路要素を通して一貫して処理される。多くの実施形態では、制御および読み出し回路ならびにAFEは、各焦点面の位相およびタイムスロット割当が一貫しているように、共通クロッキング回路によって制御される。本発明の実施形態による、異なる焦点面の列読み出しの間の位相偏移の実施例が、図4cに図示されている。図に示すように、各焦点面内の列の読み出しは、本発明の実施形態による共有ASPによる処理を可能にするように交互にされる。
ある焦点面が撮像していないときに電力の低減をサポートするために、撮像装置アレイ内で利用されるASP、クロッキング、およびバイアス/電流スキームは、サンプルレートが常に単一焦点面のピクセルレートのP倍であり、Pが処理/サンプリングされている活性焦点面の数であるように、複数のサンプルレート構成をサポートすることができる。
図4に図示されるリソース共有アーキテクチャの回転変化例も実装することができ、単一のASPが、(M×Nの列の中よりもむしろ)M×Nの行の中の全てのピクセルの間で共有される。したがって、そのような配設は、M個の入力、またはM個の焦点面に共通であり、シークエンシング制御を使用して列読み出し制御ブロックによって時間多重化される単一の入力をそれぞれ有する、N個のASPの使用を伴う。
(3.4.3.列回路共有)
本発明の別の実施形態では、MNよりも少ない列回路が、撮像装置アレイの中の焦点面のピクセル値をサンプリングするために使用される。素子が本発明の実施形態によるM組の列回路のみを利用するように、撮像装置アレイの列内の個々の焦点面が共通列回路ブロック308’を共有するように構成される、撮像装置アレイ301が、図4aに図示されている。M個の列回路は、M個のASP310’を伴う。
いくつかの実施形態では、列回路は、列回路より上側および下側の焦点面からのピクセルの読み出しを可能にするように、時間共有される。本発明の実施形態による、撮像装置アレイ内の複数対の焦点面間の列回路の共有が、図4fに図示されている。図4fに示される共有は、M=2である、図4aの特別な場合である。一対の焦点面間の列回路の共有により、列回路は、単一の焦点面からの所望のフレームレートよりも2倍の速度で動作する。多くの実施形態では、ピクセルは、相関二重サンプリングされ、アナログ形態で、または列回路内でアナログ・デジタル変換されて、読み出される。いったん最後のピクセルがシフトアウトされると(または全ての列のアナログ・デジタル変換が行われると)、前のピクセルアレイから残留電荷を除去するように、列回路をリセットすることができる。次いで、同じ動作が第2の焦点面に起こるために、第2のタイムスロットを使用することができる。図示した実施形態では、複数対の焦点面間のADCの共有を、撮像装置アレイ内の複数対の焦点面の間で複製することができる。
他の実施形態では、図4aに図示される撮像装置アレイ301の変化例は、より多いまたは少ないASPを利用することができる。加えて、列回路308’は、デジタル化のためにM個よりも多いまたは少ないアナログ出力を形成するように、分割する、または組み合わせることができる。例えば、撮像装置アレイは、M個の列回路のデジタル化に使用される単一のASPがあるように設計することができる。列回路のM個の出力は、ASPへの入力時に時間多重化される。M個よりも多くのASPが使用される場合、M個の列回路のそれぞれは、各列回路がデジタル化のために1つよりも多くのアナログ出力を有するように、さらに分割される。ASPの数が多くなるほど、標的読み出し速度(フレームレート)を満たすように各ASPがより遅くなり得るため、これらのアプローチは、シリコン面積と電力消費との間のトレードオフを提供する。
図4aに図示される実施形態への構造修正は、M2列回路ブロックがあるように、撮像装置アレイの最上部と底部との間でM個の列回路を分割することである。そのような修正では、M2列回路のそれぞれは、焦点面の列の中の各焦点面のピクセルの半分のみをサンプリングする責任がある(例えば、各焦点面内の全ての偶数ピクセルは、アレイの底部で列回路に接続することができ、全ての奇数ピクセルは、最上部で列回路に接続することができる)。依然としてMX列サンプリング回路があるが、それらは、M2組のX/2列サンプリング回路があるように、物理的に分割される。本発明の実施形態による、分割列回路を含む撮像装置アレイが、図4bに図示されている。撮像装置アレイ301’は、M2列回路ブロック(308a’、308b’)およびM2ASP(310a’、310b’)を使用する。上記で論議されるように、M2列回路よりも少ない、または多くのASPもあり得る。列回路が奇数/偶数列のサンプリングのために最上部/底部に分割され、介在列回路が、列回路より上側および下側の焦点面間で時間共有される、本発明の実施形態による分割列回路を伴う別の変化例が、図4gに図示されている。図示した実施形態では、複数対の焦点面間の列回路の分割および列回路の共有は、本発明の実施形態による撮像装置アレイ内の複数対の焦点面の間で複製される。加えて、列回路のそれぞれは、(撮像装置アレイの周囲における列回路を除いて)上下の焦点面の間で共有することができる。
(3.4.4.ASPの数および速度)
本発明の実施形態による撮像装置アレイの列サンプリング回路に、いくつかの異なる配設がある。しばしば、ASP回路の配設は、X個のピクセルに及ぶ列回路につき、単一のASPが使用され、したがって、行期間につきX回の変換を行うように、列サンプリング回路の論理的実装に従う。代替として、行期間につき1回の変換を行う列回路につき、X個のASPを利用することができる。一般的な意味では、本発明の実施形態は、行期間につきX/P回の変換があるように、X個のピクセルの列回路につきP個のASPを利用することができる。このアプローチは、全体的なADC変換過程が、よりゆっくりした速度で起こるように、任意の列回路におけるサンプルの変換を並行処理することができる手段である。例えば、本明細書で説明される構成のうちのいずれかでは、行期間につきT/P回の変換があるように、いくつかのピクセル(T)をサンプリングし、P個のASPを使用してアナログ・デジタル変換を行う、列回路配設を成すことが可能となる。(固定フレームレートがある場合のように)固定行期間を考慮すると、各ASPの個別変換速度は、因数Pで低減される。例えば、2つのASPがある場合、それぞれは1/2の速度で作動する。4つある場合、各ASPは、1/4の速度で作動しなければならない。この一般的な意味では、列回路の構成にもかかわらず、特定の用途に適切な速度で作動する任意の数のASPを、本発明の実施形態に従って利用することができる。
(3.4.5.行デコーダ最適化)
本発明の実施形態による撮像装置アレイは、各焦点面のピクセルによる画像情報の捕捉に関する別個の動作パラメータを有効にするよう、所与の瞬間に各焦点面内の異なる行にアクセスする能力を保有する。行デコーダは、典型的には、2もの多くの「イネーブル(enable)」信号(しばしば「ワンホット(one−hot)」表現とも呼ばれる)への物理アドレス(Eビット2進数として表される)の第1の組み合わせ復号から形成される。例えば、8ビット物理アドレスは、ピクセルの256行を有するピクセルアレイの中へのアドレス指定をサポートするよう、256個の「イネーブル」信号に復号される。これらの「イネーブル」信号のそれぞれは順に、ピクセルタイミング信号で論理的にANDED処理され、次いで、その結果は、ピクセルリセットおよびピクセル電荷移動等の行ベースのピクセル動作を可能にするよう、ピクセルアレイに適用される。
行デコーダは、ワンホット復号への2進数の共有を通してシリコン面積を縮小するように最適化することができる。ワンホット復号への2進数を含む、完全に機能的な行デコーダを有する各サブアレイよりもむしろ、本発明の多くの実施形態は、撮像装置アレイ内の焦点面の所与の行に対するワンホットデコーダへの単一の2進数を有する。このデコーダの「イネーブル」出力は、全ての焦点面を横断して、各焦点面の(あまり機能的ではない)行デコーダのそれぞれへ送られる。別個の複数組のピクセルレベルタイミング信号は、各焦点面専用となり(行タイミングおよび制御論理回路によって生成される)、論理AND関数が、各焦点面の行デコーダの中に残る。
そのようなスキームによる読み出しは、カメラアレイの中の焦点面の行につきM個のタイムスロットがあるように、各焦点面専用のタイムスロットの中で行われる。第1の焦点面内の第1の行が選択され、専用の1組のピクセルレベルタイミング信号が、その行デコーダに印加され、列回路が、これらのピクセルをサンプリングする。次のタイムスロットでは、物理アドレスが、次の焦点面内の所望の行を指し示すように変化し、別の1組の専用ピクセルレベルタイミング信号が、その行デコーダに印加される。再度、列回路が、これらのピクセルをサンプリングする。過程は、カメラアレイの中の焦点面の行内の全ての焦点面がサンプリングされるまで繰り返す。列回路が撮像装置アレイからの別の行をサンプリングするために利用可能であるとき、過程は再び始まることができる。
(3.5.画像データを記憶するメモリ構造を提供する)
撮像装置アレイの中の各焦点面による画像情報の捕捉の別個の制御の付加的な利益は、個々の焦点面のフレームレートを増加させることなく、スローモーションビデオ捕捉をサポートする能力である。スローモーションビデオでは、各焦点面は、わずかにオフセットした時点で読み出される。従来のカメラでは、フレーム間の時間差分(すなわち、捕捉フレームレート)は、単一のフレームの読み出し時間によって決定付けられる。個別焦点面の独立した読み出し時間のサポートを提供する撮像装置アレイでは、フレーム間の差分は、個別フレームの読み出しよりも小さくなり得る。例えば、別の焦点面が、そのフレームの読み出しの途中である時に、1つの焦点面が、そのフレーム読み出しを始めることができる。したがって、2倍の速度で動作するように焦点面に要求することなく、捕捉速度の見掛け上の倍増が達成される。しかしながら、カメラから画像のストリームを出力するときに、この全ての焦点面からの重複フレーム読み出しは、出力するべき連続的画像があることを意味する。
カメラシステムは、典型的には、ブランキング期間として知られている、画像データの読み出しまたは表示の間の期間を採用する。多くのシステムは、付加的な動作を行うために、このブランキング期間を必要とする。例えば、CRTでは、ブランキング期間は、ラインまたはフレームの終わりから次のラインまたはフレームの始まりまで、電子ビームを再配置するために使用される。撮像装置では、典型的には、ピクセルの次のラインがアドレス指定され、その中の電荷がサンプリング回路によってサンプリングされることを可能にするように、ライン間のブランキング区間がある。また、フレーム読み出し時間よりも長い積分時間を可能にするように、フレーム間のブランキング区間もあり得る。
本発明の実施形態による、スローモーション捕捉モードで動作するアレイカメラについて、全ての焦点面が、異なる時点でそれらのブランキング区間に進入するように、フレーム読み出しは、全ての焦点面内で時間的にオフセットされる。したがって、典型的には、伝送するべき画像データがない時点がなくなる。本発明の実施形態によるアレイカメラは、伝送中に人工ブランキング期間を導入することができるように、画像データの読み出し経路に再タイミング化FIFOメモリを含むことができる。再タイミング化FIFOは、ブランキング区間が導入される時点の間に、全ての焦点面から伝送される画像データを一時的に記憶する。
(3.6.撮像装置アレイ平面図)
本発明の実施形態による撮像装置アレイは、ある設計制約の範囲内でシリコン面積を最小限化するように最適化される、平面図を含むことができる。そのような設計制約は、光学システムに課せられるものを含む。各焦点面を形成するピクセルのサブアレイは、撮像装置アレイより上側に位置付けられるレンズアレイの各個別レンズスタックのイメージサークル内に配置することができる。したがって、レンズ要素の製造過程は、典型的には、撮像装置に最小間隔距離(すなわち、焦点面間の最小ピッチ)を課す。光学的制約に由来する焦点間隔における別の考慮事項は、許容することができる迷光の大きさである。焦点面間の光学的クロストークを制限するために、本発明の実施形態による多くのカメラアレイは、相互から個々の焦点面を光学的に隔離する。レンズスタック内の隣接焦点面の光路の間に、不透明の障壁を作成することができる。不透明の障壁は、センサカバーガラスまで延在し、光学部品結合表面および裏焦点スペーサにセンサを提供するという付加的な目的を果たすことができる。レンズのイメージサークルの中への不透明な遮蔽の侵入は、焦点面の中へのいくらかのレベルの後方反射をもたらし得る。多くの実施形態では、光学部品と撮像装置アレイとの間の複雑な相互作用は、特定の用途の設計制約の平衡を保つ適切な解決法に集中する反復過程の使用をもたらす。
焦点面間の空間(すなわち、間隔距離)は、撮像装置アレイの動作中に利用されるASP回路または他の回路を含む、制御回路ならびにサンプリング回路を実装するために使用することができる。撮像装置アレイ内の論理回路はまた、自動配置およびルーティング技法を使用して、隣接焦点面間の間隔距離内で分解および実装することもできる。
撮像装置アレイの平面図への特定の制約が上記で説明されているが、本発明の実施形態による素子の異なる領域中で撮像装置アレイの種々の論理回路の実装を可能にする、付加的な制約を平面図に課すことができる。多くの実施形態では、ピクセルサイズ/性能、アレイカメラの光学システム、シリコン土台費用、および撮像装置アレイを加工するために使用される製造過程等の要件は全て、撮像装置アレイの全体的アーキテクチャおよび平面図において微妙な変動を推進することができる。
(3.6.1.サンプリング多様性)
多くの実施形態では、平面図はまた、場面の好ましいサンプリング多様性をもたらす配設を収容するように設計されている焦点面も収容する(すなわち、焦点面内のピクセルは、撮像装置アレイ内の他の焦点面に対してわずかに偏移した視野から光を収集している)。これは、種々の技法を通して達成することができる。いくつかの実施形態では、焦点面とそれぞれのレンズとの間の整合における相対的サブピクセル偏移を通して、異なるサブピクセル量だけ、焦点面がそれぞれの光路の中心から相対的にオフセットされるように、撮像装置アレイを構築することによって、サンプリング多様性が達成される。多くの実施形態では、光学視野は、画像におけるサブピクセル偏移に対応する角度(単一のピクセルに対応する立体角よりも小さい量)だけ、わずかに異なって「狙いを定められる」。いくつかの実施形態では、マイクロレンズ(光をピクセルに向け直す)によって捕捉される光の特定の立体角を改変し、したがって、わずかなサブピクセル偏移を達成するために、焦点面間のわずかなマイクロレンズ偏移が利用される。ある実施形態では、焦点面は、光学的整合公差にもかかわらず、サンプリング多様性が提供されるように、焦点面間のピクセルピッチのわずかな差を有するピクセルで構築される。例えば、4×4撮像装置アレイは、サイズ2.0um、2.05um、2.1um、2.15um、および2.2umの長さおよび幅寸法を伴うピクセルを有する、焦点面で構築することができる。他の実施形態では、特定の用途に応じて適宜に、撮像装置アレイ内の焦点面の間のサンプリング多様性を向上させるための種々のピクセル寸法および/または技法のうちのいずれかを利用することができる。
(4.焦点面タイミングおよび制御回路)
図1aを再び参照すると、本発明の実施形態による撮像装置アレイは、撮像装置アレイ内の焦点面のそれぞれの中のピクセルのリセットおよび読み出し(したがって統合)を制御する、焦点面タイミングおよび制御回路154を含むことができる。読み出しおよび積分時間制御における融通性を提供する、本発明の実施形態による撮像装置アレイの能力は、高ダイナミックレンジ撮像、高速ビデオ、および電子画像安定化を含む(がそれらに限定されない)特徴を可能にすることができる。
従来の画像センサは、名目上、ピクセルアレイの中への2つのローリングアドレスポインタを採用し、その役割は、所与の行を列ラインに接続し、ピクセルの感知ノードのサンプリングを可能にするために、ピクセルレベル電荷移動信号ならびに「行選択」信号を受信する行を示すことである。本発明の実施形態による多くのSOC画像アレイでは、これらのローリングアドレスポインタは、2×M×Nのローリングアドレスポインタまで拡張される。各焦点面に対するポインタペアは、各焦点面内の同じ行をアドレス指定することができ、またはグローバル基準に対して相互からオフセットすることができる。
本発明の実施形態による焦点面タイミングおよび制御アドレスポインタ回路が、図4hに図示されている。焦点面タイミングおよび制御回路400は、グローバル行カウンタ402と、読み出しポインタアドレス論理回路404と、各焦点面と関連付けられるリセットポインタアドレス論理回路406とを含む。グローバル行カウンタ402は、ピクセルの行をサンプリングするためのグローバル基準である。いくつかの実施形態では、グローバル行カウンタ402は、0から焦点面内の行の総数まで数える。他の実施形態では、代替的なグローバル行カウンタは、特定の用途の要件に応じて適宜に利用される。読み出しポインタアドレス論理回路404およびリセットポインタアドレス論理回路406は、読み出し方向およびウィンドウウィング等の設定の関数として、グローバル行カウンタ値をアレイ内の物理アドレスに変換する。図示した実施形態では、M×Nの読み出しポインタおよびリセットポインタアドレス論理回路がある。各焦点面読み出しおよびリセット位置(FP_offset[x,y])の行ベースのタイミング偏移が、読み出しポインタアドレス論理およびリセットポインタアドレス論理回路に提供される。これらのタイミング偏移は、撮像装置アレイ内の構成レジスタに記憶することができる。タイミング偏移の値は、読み出しポインタアドレス論理およびリセットポインタアドレス論理回路による変換前に、(行の総数を法として)グローバル行カウンタ値に加算することができる。このようにして、各焦点面には、プログラム可能なタイミングオフセットを提供することができる。いくつかの実施形態では、タイミングオフセットは、アレイカメラの異なる動作モードに基づいて構成される。
(5.システム電力管理およびバイアス生成)
システム電力管理およびバイアス生成回路は、ADCがそれに対して変換される信号を測定する、(これらに限定されないが)基準電圧等の電流および/または電圧基準をアナログ回路に提供するように構成される。加えて、本発明の多くの実施形態による、システム電力管理およびバイアス生成回路は、節電理由により、使用されていないときに、ある回路への電流/電圧基準をオフにすることができる。本発明の多くの実施形態による電力管理回路を使用して実装することができる、付加的な電力管理技法は、以下で論議される。
(5.1.電力最適化)
本発明の多くの実施形態による撮像装置アレイのマスタ制御ブロックは、撮像装置アレイの電力消費を管理することができる。多くの実施形態では、マスタ制御ブロックは、所望の出力解像度が素子の全性能未満である動作モード中に、ある焦点面を「オフにする」ことによって、電力消費を低減することができる。そのようなモードでは、使用されていない焦点面と関連付けられる増幅器、バイアス発生器、ADC、および他のクロック回路は、静的および動的な電力の引き込みを最小限化または排除するように、低電力状態にされる。
(5.1.1.撮像装置の電源が切れている間にキャリア移動を防止する)
電源を切った状態にある焦点面にもかかわらず、光がそのサブアレイの中のピクセルに入射する。入射光子は、シリコン基板の中で電荷キャリアを作成し続ける。電源を切った焦点面内のピクセルが浮動して放置された場合、電荷キャリアがピクセルウェルを充填し、電位障壁を枯渇させ、これ以上キャリアを捕捉できないようにする。次いで、持続的な光子束によって作成される過剰なキャリアは、放置されて基板を動き回る。これらの過剰なキャリアが不活性焦点面から活性焦点面の中へ動き周り、活性焦点面内のピクセルのウェルの中で集まる場合、そのピクセル内で生成された光電子であると誤って測定される。結果は、不活性近傍から活性焦点面の中へ移動する遊離キャリアの流れによって引き起こされる、動作中撮像装置の周辺のブルーミングの出現となり得る。
不活性焦点面からの過剰なキャリアの移動を軽減するために、ピクセルウェルがその最大電位に対して開いたまま保たれるように、不活性焦点面のピクセルにおけるフォトダイオードは、各ピクセル内のトランジスタスイッチを介して電力供給に接続される。ウェルを開いたまま保つことは、フォトダイオードが、入射光によって生成されるキャリアを常に収集し、したがって、非動作中撮像装置からのキャリア移動の問題を低減することを可能にする。各ピクセルにおけるトランジスタは、通常ピクセルアーキテクチャの一部、すなわち、移動ゲートであり、それは、ウェルを開いたまま保つようにトランジスタに信号伝達する行コントローラとともにマスタ制御論理である。
(5.1.2.スタンバイモード)
多くの実施形態では、基準ピクセルが、暗電流およびFPNの較正で使用される。いくつかの実施形態では、電力管理回路は、基準ピクセルが動作中のままであるように、焦点面内のピクセルの電源を切ることを可能にするように構成される。いくつかの実施形態では、これは、基準ピクセルの読み出し中にASPに電力供給するが、別様にASPを低電流モードで維持することによって達成される。このようにして、焦点面は、焦点面が起動されたときに暗電流およびFPNを較正する必要性を低減することによって、より急速に起動することができる。多くの場合において、較正は、焦点面の低電力状態中に基準ピクセルの電源が切られたときに、暗電流およびFPNに対して行われる。他の実施形態では、本発明の実施形態による、焦点面およびその関連周辺回路による電流引き込みを低減するために、回路の種々の部分的電力供給のいくらかでも利用することができる。
(6.焦点面データ照合およびフレーミング論理)
図1aを再び参照すると、本発明のいくつかの実施形態による撮像装置アレイは、焦点面からデータを捕捉し、所定のコンテナ形式に従ってデータをコンテナの中へパッケージ化する責任がある、焦点面データ照合およびフレーミング論理回路を含む。いくつかの実施形態では、回路はまた、データへのビット削減(例えば、10ビットから8ビットの変換)を含むが、それに限定されないデータ変換を行うことによって、伝送のためにデータを準備する。
特定の撮像装置アレイアーキテクチャが上記で説明されているが、本発明の実施形態に従って、ピクセルサイズ/性能、アレイカメラの光学システム、シリコン土台費用、および撮像装置アレイを加工するために使用される製造過程を含むが、それらに限定されない要件に基づく、撮像装置アレイ実装するために代替的な撮像装置アレイアーキテクチャを使用することができる。加えて、発明の実施形態による撮像装置アレイは、正方形のピクセル、長方形のピクセル、六角形のピクセル、および種々のピクセル形状を含むが、それらに限定されない、ピクセルの種々の形状のうちのいずれかを使用して実装することができる。したがって、本発明の範囲は、図示された実施形態によってではなく、添付の請求項およびそれらの同等物によって決定されるべきである。

Claims (53)

  1. 撮像装置アレイであって、
    該撮像装置アレイは、
    複数の焦点面であって、各焦点面は、各次元に少なくとも2つのピクセルを有するピクセルの2次元配設を備え、各焦点面は、別の焦点面からのピクセルを含有しない該撮像装置アレイの領域内に含有される、複数の焦点面と、
    制御回路であって、該制御回路は、該焦点面内の該ピクセルによる画像情報の捕捉を制御するように構成され、該制御回路は、該焦点面のうちの少なくとも2つの中の該ピクセルによる画像情報の捕捉が別々に制御可能であるように構成される、制御回路と、
    ピクセル出力をデジタルピクセルデータに変換するように構成されるサンプリング回路と
    を備える、撮像装置アレイ。
  2. 前記複数の焦点面は、1つの次元に少なくとも3つの焦点面を有する焦点面の2次元アレイとして配設される、請求項1に記載の撮像装置アレイ。
  3. 前記複数の焦点面は、両方の次元に少なくとも3つの焦点面を有する焦点面の2次元アレイとして配設される、請求項1に記載の撮像装置アレイ。
  4. 焦点面のN×Mのアレイとして配設される前記複数の焦点面は、青色光を捕捉するように構成される少なくとも2つの焦点面と、緑色光を捕捉するように構成される少なくとも2つの焦点面と、赤色光を捕捉するように構成される少なくとも2つの焦点面とを備える、請求項1に記載の撮像装置アレイ。
  5. 各焦点面は、ピクセルの行および列を備える、請求項1に記載の撮像装置アレイ。
  6. 前記制御回路は、ピクセルの再設定を制御することによって、前記ピクセルによる画像情報の捕捉を制御するように構成される、請求項1に記載の撮像装置アレイ。
  7. 前記制御回路は、ピクセルの読み出しを制御することによって、前記ピクセルによる画像情報の捕捉を制御するように構成される、請求項1に記載の撮像装置アレイ。
  8. 前記制御回路は、各ピクセルの積分時間を制御することによって、画像情報の捕捉を制御するように構成される、請求項1に記載の撮像装置アレイ。
  9. 前記制御回路は、前記サンプリング回路の利得を制御することによって、画像情報の処理を制御するように構成される、請求項1に記載の撮像装置アレイ。
  10. 前記制御回路は、各ピクセルの黒レベルオフセットを制御することによって、画像情報の処理を制御するように構成される、請求項1に記載の撮像装置アレイ。
  11. 前記制御回路は、読み出し方向を制御することによって、画像情報の捕捉を制御するように構成される、請求項1に記載の撮像装置アレイ。
  12. 前記読み出し方向は、
    上面から底面、および
    底面から上面
    から成る群より選択される、請求項11に記載の撮像装置アレイ。
  13. 前記読み出し方向は、
    左側から右側、および
    右側がら左側
    から成る群より選択される、請求項11に記載の撮像装置アレイ。
  14. 前記制御回路は、画像情報の捕捉を、関心の読み出し領域を制御することによって制御するように構成される、請求項1に記載の撮像装置アレイ。
  15. 前記制御回路は、画像情報の捕捉を、水平サブサンプリングを制御することによって制御するように構成される、請求項1に記載の撮像装置アレイ。
  16. 前記制御回路は、画像情報の捕捉を、垂直サブサンプリングを制御することによって制御するように構成される、請求項1に記載の撮像装置アレイ。
  17. 前記制御回路は、画像情報の捕捉を、ピクセル電荷ビニングを制御することによって制御するように構成される、請求項1に記載の撮像装置アレイ。
  18. 前記撮像装置アレイは、モノリシック集積回路撮像装置アレイである、請求項1に記載の撮像装置アレイ。
  19. 少なくとも1つの焦点面内の隣接ピクセルの2次元アレイは、同じ捕捉帯域を有する、請求項1に記載の撮像装置アレイ。
  20. 前記捕捉帯域は、
    青色光、
    シアン光、
    可視光および近赤外光を含む拡張色光、
    緑色光、
    赤外光、
    マゼンタ光、
    近赤外光、
    赤色光、
    黄色光、および
    白色光
    から成る群より選択される、請求項19に記載の撮像装置アレイ。
  21. 第1の焦点面内の隣接ピクセルの第1のアレイは、第1の捕捉帯域を有し、
    第2の焦点面内の隣接ピクセルの第2のアレイは、第2の捕捉帯域を有し、該第1の捕捉帯域と第2の捕捉帯域とは、同じであり、
    周辺回路は、該隣接ピクセルの第1のアレイの積分時間が第1の期間であるように構成され、
    該周辺回路は、該隣接ピクセルの第2のアレイの積分時間が第2の期間であるように構成され、該第2の期間は、該第1の期間よりも長い、請求項1に記載の撮像装置アレイ。
  22. 前記焦点面のうちの少なくとも1つは、隣接ピクセルのアレイを含み、該隣接ピクセルのアレイの中のピクセルは、光の異なる色を捕捉するように構成される、請求項1に記載の撮像装置アレイ。
  23. 前記隣接ピクセルのアレイは、ベイヤーフィルタパターンを採用する、請求項21に記載の撮像装置アレイ。
  24. 前記複数の焦点面は、焦点面の2×2のアレイとして配設され、
    該焦点面のアレイの中の第1の焦点面は、ベイヤーフィルタパターンを採用する隣接ピクセルのアレイを含み、
    該焦点面のアレイの中の第2の焦点面は、緑色光を捕捉するように構成される隣接ピクセルのアレイを含み、
    該焦点面のアレイの中の第3の焦点面は、赤色光を捕捉するように構成される隣接ピクセルのアレイを含み、
    該焦点面のアレイの中の第4の焦点面は、青色光を捕捉するように構成される隣接ピクセルのアレイを含む、請求項22に記載の撮像装置アレイ。
  25. 前記複数の焦点面は、1つの次元に少なくとも3つの焦点面を有する焦点面の2次元アレイとして配設される、請求項22に記載の撮像装置アレイ。
  26. 前記複数の焦点面は、両方の次元に少なくとも3つの焦点面を有する焦点面の2次元アレイとして配設される、請求項22に記載の撮像装置アレイ。
  27. 前記制御回路は、グローバルカウンタを備える、請求項1に記載の撮像装置アレイ。
  28. 前記制御回路は、各焦点面がグローバルカウンタに対して制御された時間的オフセットを有するように、画像読み出しの開始点を交互にするように構成される、請求項26に記載の撮像装置アレイ。
  29. 前記制御回路は、前記グローバルカウンタを使用して、前記焦点面内の前記ピクセルの前記捕捉帯域に基づいて、各焦点面内の該ピクセルの積分時間を別々に制御するように構成される、請求項26に記載の撮像装置アレイ。
  30. 前記制御回路は、前記グローバルカウンタに基づいて、各焦点面のフレームレートを別々に制御するように構成される、請求項26に記載の撮像装置アレイ。
  31. 前記制御回路は、各焦点面に対する一対のポインタをさらに備える、請求項26に記載の撮像装置アレイ。
  32. 前記ポインタ間のオフセットは、積分時間を特定する、請求項30に記載の撮像装置アレイ。
  33. 前記ポインタ間のオフセットは、プログラム可能である、請求項30に記載の撮像装置アレイ。
  34. 前記制御回路は、各焦点面専用の行コントローラを備える、請求項1に記載の撮像装置アレイ。
  35. 前記撮像装置アレイは、M×Nの焦点面のアレイを含み、
    前記制御回路は、M個の焦点面の各行の中のピクセルの各行をアドレス指定するように構成される単一の行デコーダ回路を備える、請求項1に記載の撮像装置アレイ。
  36. 前記制御回路は、前記行デコーダおよび列回路が、第1の焦点面内のピクセルの第1の行をサンプリングするように、第1組のピクセルレベルタイミング信号を生成するように構成され、
    該制御回路は、該行デコーダおよび列回路が、第2の焦点面内のピクセルの第2の行をサンプリングするように第2組のピクセルレベルタイミング信号を生成するように構成される、請求項34に記載の撮像装置アレイ。
  37. 各焦点面は、専用サンプリング回路を備える、請求項1に記載の撮像装置アレイ。
  38. 前記サンプリング回路の少なくとも一部分は、前記複数の焦点面によって共有される、請求項1に記載の撮像装置アレイ。
  39. 前記撮像装置アレイは、M×Nの焦点面のアレイを含み、
    前記サンプリング回路は、M個のアナログ信号プロセッサ(ASP)を備え、各ASPは、N個の焦点面から読み出されたピクセルをサンプリングするように構成される、請求項37に記載の撮像装置アレイ。
  40. 各ASPは、N個の入力を介して前記N個の焦点面からピクセル出力信号を受信するように構成され、
    各ASPは、そのN個の入力上で各ピクセル出力信号を連続的に処理するように構成される、請求項38に記載の撮像装置アレイ。
  41. 前記制御回路は、単一の共通アナログピクセル信号読出しラインがN個の焦点面のグループの中の全てのピクセルによって共有されるように構成され、
    該制御回路は、画像データの捕捉を制御して、前記M個のASPの各々によって受信される前記ピクセル出力信号を時間多重化するように構成される、請求項38に記載の撮像装置アレイ。
  42. 前記撮像装置アレイは、M×Nの焦点面のアレイを含み、
    前記サンプリング回路は、複数のアナログ信号プロセッサ(ASP)を備え、各ASPは、複数の焦点面から読み出されたピクセルをサンプリングするように構成され、
    前記制御回路は、単一の共通アナログピクセル信号読出しラインが該複数の焦点面内の全てのピクセルによって共有されるように構成され、
    該制御回路は、画像データの捕捉を制御して、該複数のASPの各々によって受信される前記ピクセル出力信号を時間多重化するように構成される、請求項37に記載の撮像装置アレイ。
  43. 前記サンプリング回路は、アナログフロントエンド(AFE)回路と、アナログデジタル変換(ADC)回路とを備える、請求項1に記載の撮像装置アレイ。
  44. 前記サンプリング回路は、各焦点面が専用AFEを有し、少なくとも1つのADCが少なくとも2つの焦点面の間に共有されるように構成される、請求項42に記載の撮像装置アレイ。
  45. 前記サンプリング回路は、少なくとも1つのADCが一対の焦点面の間に共有されるように構成される、請求項43に記載の撮像装置アレイ。
  46. 前記サンプリング回路は、少なくとも1つのADCが4つの焦点面の間に共有されるように構成される、請求項43に記載の撮像装置アレイ。
  47. 前記サンプリング回路は、少なくとも1つのAFEが少なくとも2つの焦点面の間に共有されるように構成される、請求項45に記載の撮像装置アレイ。
  48. 前記サンプリング回路は、少なくとも1つのAFEが少なくとも一対の焦点面の間に共有されるように構成される、請求項46に記載の撮像装置アレイ。
  49. 前記サンプリング回路は各々、AFEを共有する2対の焦点面が集合的にADCを共有するように構成される、請求項47に記載の撮像装置アレイ。
  50. 前記制御回路は、各焦点面および関連AFE回路またはその中の処理タイムスロットの電源を切った状態を別々に制御するように構成される、請求項1に記載の撮像装置アレイ。
  51. 前記制御回路は、少なくとも1つの不活性焦点面の前記ピクセルが一定のリセット状態にあるように構成する、請求項49に記載の撮像装置アレイ。
  52. 少なくとも1つの焦点面は、該焦点面を使用して捕捉されるピクセルデータを較正するための基準ピクセルを含む、請求項1に記載の撮像装置アレイ。
  53. 前記制御回路は、前記焦点面の関連AFE回路またはその中の処理タイムスロットの電源を切った状態を別々に制御するように構成され、
    該制御回路は、該焦点面の前記基準ピクセルの読出しのために、該関連AFE回路またはその中の処理タイムスロットの電源を切ることなく、該焦点面の関連AFE回路またはその中の処理タイムスロットの電源を切るように構成される、請求項51に記載の撮像装置アレイ。
JP2013510321A 2010-05-12 2011-05-12 撮像装置アレイおよびアレイカメラのためのアーキテクチャ Active JP5848754B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US33401110P 2010-05-12 2010-05-12
US61/334,011 2010-05-12
PCT/US2011/036349 WO2011143501A1 (en) 2010-05-12 2011-05-12 Architectures for imager arrays and array cameras

Publications (2)

Publication Number Publication Date
JP2013526801A true JP2013526801A (ja) 2013-06-24
JP5848754B2 JP5848754B2 (ja) 2016-01-27

Family

ID=44911485

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2013510321A Active JP5848754B2 (ja) 2010-05-12 2011-05-12 撮像装置アレイおよびアレイカメラのためのアーキテクチャ

Country Status (7)

Country Link
US (6) US20120012748A1 (ja)
EP (1) EP2569935B1 (ja)
JP (1) JP5848754B2 (ja)
KR (1) KR101824672B1 (ja)
CN (1) CN103004180A (ja)
SG (2) SG185500A1 (ja)
WO (1) WO2011143501A1 (ja)

Cited By (64)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8831367B2 (en) 2011-09-28 2014-09-09 Pelican Imaging Corporation Systems and methods for decoding light field image files
US8885059B1 (en) 2008-05-20 2014-11-11 Pelican Imaging Corporation Systems and methods for measuring depth using images captured by camera arrays
US8928793B2 (en) 2010-05-12 2015-01-06 Pelican Imaging Corporation Imager array interfaces
JP2015033072A (ja) * 2013-08-06 2015-02-16 株式会社モルフォ 画像処理装置及び画像処理方法
KR20150020432A (ko) * 2013-08-14 2015-02-26 삼성전자주식회사 이미지 센서, 아날로그-디지털 컨버터 및 아날로그-디지털 변환 방법
US9041824B2 (en) 2010-12-14 2015-05-26 Pelican Imaging Corporation Systems and methods for dynamic refocusing of high resolution images generated using images captured by a plurality of imagers
US9049411B2 (en) 2008-05-20 2015-06-02 Pelican Imaging Corporation Camera arrays incorporating 3×3 imager configurations
US9100586B2 (en) 2013-03-14 2015-08-04 Pelican Imaging Corporation Systems and methods for photometric normalization in array cameras
US9123117B2 (en) 2012-08-21 2015-09-01 Pelican Imaging Corporation Systems and methods for generating depth maps and corresponding confidence maps indicating depth estimation reliability
US9124864B2 (en) 2013-03-10 2015-09-01 Pelican Imaging Corporation System and methods for calibration of an array camera
US9128228B2 (en) 2011-06-28 2015-09-08 Pelican Imaging Corporation Optical arrangements for use with an array camera
US9143711B2 (en) 2012-11-13 2015-09-22 Pelican Imaging Corporation Systems and methods for array camera focal plane control
US9185276B2 (en) 2013-11-07 2015-11-10 Pelican Imaging Corporation Methods of manufacturing array camera modules incorporating independently aligned lens stacks
US9197821B2 (en) 2011-05-11 2015-11-24 Pelican Imaging Corporation Systems and methods for transmitting and receiving array camera image data
US9210392B2 (en) 2012-05-01 2015-12-08 Pelican Imaging Coporation Camera modules patterned with pi filter groups
US9214013B2 (en) 2012-09-14 2015-12-15 Pelican Imaging Corporation Systems and methods for correcting user identified artifacts in light field images
US9247117B2 (en) 2014-04-07 2016-01-26 Pelican Imaging Corporation Systems and methods for correcting for warpage of a sensor array in an array camera module by introducing warpage into a focal plane of a lens stack array
US9253380B2 (en) 2013-02-24 2016-02-02 Pelican Imaging Corporation Thin form factor computational array cameras and modular array cameras
US9264610B2 (en) 2009-11-20 2016-02-16 Pelican Imaging Corporation Capturing and processing of images including occlusions captured by heterogeneous camera arrays
US9412206B2 (en) 2012-02-21 2016-08-09 Pelican Imaging Corporation Systems and methods for the manipulation of captured light field image data
US9426361B2 (en) 2013-11-26 2016-08-23 Pelican Imaging Corporation Array camera configurations incorporating multiple constituent array cameras
US9438888B2 (en) 2013-03-15 2016-09-06 Pelican Imaging Corporation Systems and methods for stereo imaging with camera arrays
JP2016528822A (ja) * 2013-08-08 2016-09-15 ソニー株式会社 専用のベイヤ―カメラを有するカメラアレイ設計
US9497370B2 (en) 2013-03-15 2016-11-15 Pelican Imaging Corporation Array camera architecture implementing quantum dot color filters
US9497429B2 (en) 2013-03-15 2016-11-15 Pelican Imaging Corporation Extended color processing on pelican array cameras
US9516222B2 (en) 2011-06-28 2016-12-06 Kip Peli P1 Lp Array cameras incorporating monolithic array camera modules with high MTF lens stacks for capture of images used in super-resolution processing
US9521416B1 (en) 2013-03-11 2016-12-13 Kip Peli P1 Lp Systems and methods for image data compression
US9521319B2 (en) 2014-06-18 2016-12-13 Pelican Imaging Corporation Array cameras and array camera modules including spectral filters disposed outside of a constituent image sensor
US9578259B2 (en) 2013-03-14 2017-02-21 Fotonation Cayman Limited Systems and methods for reducing motion blur in images or video in ultra low light with array cameras
US9633442B2 (en) 2013-03-15 2017-04-25 Fotonation Cayman Limited Array cameras including an array camera module augmented with a separate camera
US9733486B2 (en) 2013-03-13 2017-08-15 Fotonation Cayman Limited Systems and methods for controlling aliasing in images captured by an array camera for use in super-resolution processing
US9741118B2 (en) 2013-03-13 2017-08-22 Fotonation Cayman Limited System and methods for calibration of an array camera
US9766380B2 (en) 2012-06-30 2017-09-19 Fotonation Cayman Limited Systems and methods for manufacturing camera modules using active alignment of lens stack arrays and sensors
US9774789B2 (en) 2013-03-08 2017-09-26 Fotonation Cayman Limited Systems and methods for high dynamic range imaging using array cameras
US9794476B2 (en) 2011-09-19 2017-10-17 Fotonation Cayman Limited Systems and methods for controlling aliasing in images captured by an array camera for use in super resolution processing using pixel apertures
US9800856B2 (en) 2013-03-13 2017-10-24 Fotonation Cayman Limited Systems and methods for synthesizing images from image data captured by an array camera using restricted depth of field depth maps in which depth estimation precision varies
US9807382B2 (en) 2012-06-28 2017-10-31 Fotonation Cayman Limited Systems and methods for detecting defective camera arrays and optic arrays
US9813616B2 (en) 2012-08-23 2017-11-07 Fotonation Cayman Limited Feature based high resolution motion estimation from low resolution images captured using an array source
US9888194B2 (en) 2013-03-13 2018-02-06 Fotonation Cayman Limited Array camera architecture implementing quantum film image sensors
US9898856B2 (en) 2013-09-27 2018-02-20 Fotonation Cayman Limited Systems and methods for depth-assisted perspective distortion correction
US9942474B2 (en) 2015-04-17 2018-04-10 Fotonation Cayman Limited Systems and methods for performing high speed video capture and depth estimation using array cameras
US9955070B2 (en) 2013-03-15 2018-04-24 Fotonation Cayman Limited Systems and methods for synthesizing high resolution images using image deconvolution based on motion and depth information
US10009538B2 (en) 2013-02-21 2018-06-26 Fotonation Cayman Limited Systems and methods for generating compressed light field representation data using captured light fields, array geometry, and parallax information
US10089740B2 (en) 2014-03-07 2018-10-02 Fotonation Limited System and methods for depth regularization and semiautomatic interactive matting using RGB-D images
US10119808B2 (en) 2013-11-18 2018-11-06 Fotonation Limited Systems and methods for estimating depth from projected texture using camera arrays
US10122993B2 (en) 2013-03-15 2018-11-06 Fotonation Limited Autofocus system for a conventional camera that uses depth information from an array camera
US10250871B2 (en) 2014-09-29 2019-04-02 Fotonation Limited Systems and methods for dynamic calibration of array cameras
US10390005B2 (en) 2012-09-28 2019-08-20 Fotonation Limited Generating images from light fields utilizing virtual viewpoints
US10482618B2 (en) 2017-08-21 2019-11-19 Fotonation Limited Systems and methods for hybrid depth regularization
KR20210035369A (ko) * 2019-09-23 2021-04-01 삼성전자주식회사 복수의 이미지 센서들에 의해 획득되는 이미지 데이터에 기초하여 비디오 hdr 처리를 수행하기 위한 전자 장치
US11270110B2 (en) 2019-09-17 2022-03-08 Boston Polarimetrics, Inc. Systems and methods for surface modeling using polarization cues
US11290658B1 (en) 2021-04-15 2022-03-29 Boston Polarimetrics, Inc. Systems and methods for camera exposure control
US11302012B2 (en) 2019-11-30 2022-04-12 Boston Polarimetrics, Inc. Systems and methods for transparent object segmentation using polarization cues
US11525906B2 (en) 2019-10-07 2022-12-13 Intrinsic Innovation Llc Systems and methods for augmentation of sensor systems and imaging systems with polarization
US11580667B2 (en) 2020-01-29 2023-02-14 Intrinsic Innovation Llc Systems and methods for characterizing object pose detection and measurement systems
US11689813B2 (en) 2021-07-01 2023-06-27 Intrinsic Innovation Llc Systems and methods for high dynamic range imaging using crossed polarizers
US11792538B2 (en) 2008-05-20 2023-10-17 Adeia Imaging Llc Capturing and processing of images including occlusions focused on an image sensor by a lens stack array
US11797863B2 (en) 2020-01-30 2023-10-24 Intrinsic Innovation Llc Systems and methods for synthesizing data for training statistical models on different imaging modalities including polarized images
US11953700B2 (en) 2020-05-27 2024-04-09 Intrinsic Innovation Llc Multi-aperture polarization optical systems using beam splitters
US11954886B2 (en) 2021-04-15 2024-04-09 Intrinsic Innovation Llc Systems and methods for six-degree of freedom pose estimation of deformable objects
US12020455B2 (en) 2021-03-10 2024-06-25 Intrinsic Innovation Llc Systems and methods for high dynamic range image reconstruction
US12067746B2 (en) 2021-05-07 2024-08-20 Intrinsic Innovation Llc Systems and methods for using computer vision to pick up small objects
US12069227B2 (en) 2021-03-10 2024-08-20 Intrinsic Innovation Llc Multi-modal and multi-spectral stereo camera arrays
US12099148B2 (en) 2020-10-07 2024-09-24 Intrinsic Innovation Llc Systems and methods for surface normals sensing with polarization

Families Citing this family (54)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8118754B1 (en) 2007-11-15 2012-02-21 Flynn Edward R Magnetic needle biopsy
US8447379B2 (en) 2006-11-16 2013-05-21 Senior Scientific, LLC Detection, measurement, and imaging of cells such as cancer and other biologic substances using targeted nanoparticles and magnetic properties thereof
AU2010315007B2 (en) 2009-11-06 2015-05-21 Imagion Biosystems, Inc. Detection, measurement, and imaging of cells such as cancer and other biologic substances using targeted nanoparticles and magnetic properties thereof
US9229096B2 (en) * 2011-07-27 2016-01-05 Semiconductor Components Industries, Llc Time-of-flight imaging systems
WO2013119706A1 (en) * 2012-02-06 2013-08-15 Pelican Imaging Corporation Systems and methods for extending dynamic range of imager arrays by controlling pixel analog gain
WO2013126784A2 (en) 2012-02-23 2013-08-29 Huston Charles D System and method for creating an environment and for sharing a location based experience in an environment
US10600235B2 (en) 2012-02-23 2020-03-24 Charles D. Huston System and method for capturing and sharing a location based experience
US10937239B2 (en) 2012-02-23 2021-03-02 Charles D. Huston System and method for creating an environment and for sharing an event
WO2013166215A1 (en) * 2012-05-01 2013-11-07 Pelican Imaging Corporation CAMERA MODULES PATTERNED WITH pi FILTER GROUPS
EP2677734A3 (en) * 2012-06-18 2016-01-13 Sony Mobile Communications AB Array camera imaging system and method
US8791573B1 (en) * 2012-08-31 2014-07-29 Altera Corporation Skewed partial column input/output floorplan
US9143673B2 (en) 2012-09-19 2015-09-22 Google Inc. Imaging device with a plurality of pixel arrays
DE102012218834B4 (de) * 2012-10-12 2016-07-14 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Bildsensor und system zur optischen abbildung
US9398272B2 (en) * 2012-11-07 2016-07-19 Google Inc. Low-profile lens array camera
US8975594B2 (en) * 2012-11-09 2015-03-10 Ge Aviation Systems Llc Mixed-material multispectral staring array sensor
US9497380B1 (en) 2013-02-15 2016-11-15 Red.Com, Inc. Dense field imaging
US8978984B2 (en) 2013-02-28 2015-03-17 Hand Held Products, Inc. Indicia reading terminals and methods for decoding decodable indicia employing light field imaging
US9638883B1 (en) 2013-03-04 2017-05-02 Fotonation Cayman Limited Passive alignment of array camera modules constructed from lens stack arrays and sensors based upon alignment information obtained during manufacture of array camera modules using an active alignment process
JP6180882B2 (ja) * 2013-10-31 2017-08-16 ソニーセミコンダクタソリューションズ株式会社 固体撮像装置、信号処理装置、および電子機器
IL229983A (en) * 2013-12-17 2017-01-31 Brightway Vision Ltd A pixel array sensor with independent controlled sub-pixel
JP6356427B2 (ja) * 2014-02-13 2018-07-11 浜松ホトニクス株式会社 ファブリペロー干渉フィルタ
EP3171587A4 (en) * 2014-07-16 2018-03-14 Sony Corporation Compound-eye imaging device
US9940527B2 (en) 2014-07-28 2018-04-10 Hyundai Mobis Co., Ltd. Driving assist system for vehicle and method thereof
KR101613849B1 (ko) * 2014-12-04 2016-04-29 현대모비스 주식회사 자동차 주행보조 시스템
US9554100B2 (en) 2014-09-30 2017-01-24 Qualcomm Incorporated Low-power always-on face detection, tracking, recognition and/or analysis using events-based vision sensor
US10728450B2 (en) 2014-09-30 2020-07-28 Qualcomm Incorporated Event based computer vision computation
US9986179B2 (en) 2014-09-30 2018-05-29 Qualcomm Incorporated Sensor architecture using frame-based and event-based hybrid scheme
US9762834B2 (en) 2014-09-30 2017-09-12 Qualcomm Incorporated Configurable hardware for computing computer vision features
US20170132466A1 (en) 2014-09-30 2017-05-11 Qualcomm Incorporated Low-power iris scan initialization
US9940533B2 (en) 2014-09-30 2018-04-10 Qualcomm Incorporated Scanning window for isolating pixel values in hardware for computer vision operations
US9923004B2 (en) 2014-09-30 2018-03-20 Qualcomm Incorporated Hardware acceleration of computer vision feature detection
US9838635B2 (en) 2014-09-30 2017-12-05 Qualcomm Incorporated Feature computation in a sensor element array
US10515284B2 (en) 2014-09-30 2019-12-24 Qualcomm Incorporated Single-processor computer vision hardware control and application execution
CN104811661B (zh) * 2015-03-23 2018-01-12 北京环境特性研究所 图像控制装置、数字场景产生器及图像控制方法
US9704056B2 (en) 2015-04-02 2017-07-11 Qualcomm Incorporated Computing hierarchical computations for computer vision calculations
JP6700673B2 (ja) * 2015-05-15 2020-05-27 キヤノン株式会社 撮像装置、撮像システム
CN105181130A (zh) * 2015-07-03 2015-12-23 中国电子科技集团公司信息科学研究院 探测器及其制造方法
US9921298B2 (en) 2015-07-20 2018-03-20 Google Llc Method and apparatus for increasing the resolution of a time of flight pixel array
US9521351B1 (en) 2015-09-21 2016-12-13 Rambus Inc. Fractional-readout oversampled image sensor
KR102412020B1 (ko) 2015-09-25 2022-06-22 삼성전자주식회사 이미지 센서의 파라미터 제어 방법
EP3403062B1 (en) 2016-01-11 2023-01-04 Carrier Corporation Infrared presence detector system
US10600213B2 (en) 2016-02-27 2020-03-24 Focal Sharp, Inc. Method and apparatus for color-preserving spectrum reshape
JP7083749B2 (ja) * 2016-03-30 2022-06-13 株式会社ニコン 撮像素子
US10614332B2 (en) 2016-12-16 2020-04-07 Qualcomm Incorportaed Light source modulation for iris size adjustment
US10984235B2 (en) 2016-12-16 2021-04-20 Qualcomm Incorporated Low power data generation for iris-related detection and authentication
SG11202000389XA (en) 2017-07-27 2020-02-27 Huawei Tech Co Ltd Multifocal display device and method
CN109167940A (zh) * 2018-08-23 2019-01-08 Oppo广东移动通信有限公司 一种感光芯片、摄像头模组及电子设备
EP3756342B1 (en) 2018-09-12 2022-06-29 Dolby Laboratories Licensing Corporation Cmos sensor architecture for temporal dithered sampling
US11121169B2 (en) * 2019-06-25 2021-09-14 Omnivision Technologies, Inc. Metal vertical transfer gate with high-k dielectric passivation lining
WO2021041841A1 (en) * 2019-08-30 2021-03-04 Flir Commercial Systems, Inc. Multispectral imaging for navigation systems and methods
CN111083403B (zh) * 2019-12-11 2021-07-06 中国电子科技集团公司第四十四研究所 一种片内复用型像素控制电路
US11470282B2 (en) 2020-12-09 2022-10-11 Waymo Llc Systems, apparatus, and methods for transmitting image data
CN114422729B (zh) * 2021-12-23 2024-09-17 北京集创北方科技股份有限公司 图像传感器、图像采集系统和图像采集方法
CN114630034B (zh) * 2022-03-16 2024-02-20 东南大学 一种基于fpga的桥梁水下基础表观检测系统

Citations (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS5925483A (ja) * 1982-08-04 1984-02-09 Hitachi Denshi Ltd 固体撮像装置
JPS6437177A (en) * 1987-08-03 1989-02-07 Canon Kk Image pickup device
JPH02285772A (ja) * 1989-04-26 1990-11-26 Toshiba Corp 画像読取装置
JP2000209503A (ja) * 1999-01-19 2000-07-28 Nippon Hoso Kyokai <Nhk> 固体撮像素子およびそれ用の映像信号出力装置
US20020101528A1 (en) * 1998-01-22 2002-08-01 Paul P. Lee Integrated cmos active pixel digital camera
JP2002252338A (ja) * 2000-12-18 2002-09-06 Canon Inc 撮像装置及び撮像システム
JP2003163938A (ja) * 2001-11-28 2003-06-06 Japan Science & Technology Corp 画像入力装置
JP2004221585A (ja) * 2003-01-09 2004-08-05 Dialog Semiconductor リセットノイズ抑制及びプログラム可能ビニング能力を備えたaps画素
US20050205785A1 (en) * 2001-05-11 2005-09-22 Bert Hornback Imaging device with multiple fields of view incorporating memory-based temperature compensation of an uncooled focal plane array
JP2005295381A (ja) * 2004-04-02 2005-10-20 Sony Corp 撮像装置
US7199348B2 (en) * 2004-08-25 2007-04-03 Newport Imaging Corporation Apparatus for multiple camera devices and method of operating same
US20070228256A1 (en) * 2006-03-31 2007-10-04 Mentzer Ray A Analog vertical sub-sampling in an active pixel sensor (APS) image sensor
JP2008507874A (ja) * 2004-07-23 2008-03-13 ザ サイエンス アンド テクノロジー ファシリティーズ カウンシル 撮像装置
US20080174670A1 (en) * 2004-08-25 2008-07-24 Richard Ian Olsen Simultaneous multiple field of view digital cameras
WO2008108926A1 (en) * 2007-03-07 2008-09-12 Altasens, Inc. Apparatus and method for reducing edge effect in an image sensor
JP2008258885A (ja) * 2007-04-04 2008-10-23 Texas Instr Japan Ltd 撮像装置および撮像装置の駆動方法

Family Cites Families (791)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4124798A (en) 1965-12-09 1978-11-07 Thompson Kenneth B Optical viewing apparatus
US4198646A (en) 1978-10-13 1980-04-15 Hughes Aircraft Company Monolithic imager for near-IR
US4323925A (en) 1980-07-07 1982-04-06 Avco Everett Research Laboratory, Inc. Method and apparatus for arraying image sensor modules
JPS5769476A (en) * 1980-10-16 1982-04-28 Fuji Xerox Co Ltd Reader control system
US4652909A (en) 1982-09-14 1987-03-24 New York Institute Of Technology Television camera and recording system for high definition television having imagers of different frame rate
US4460449A (en) 1983-01-03 1984-07-17 Amerace Corporation Apparatus for making a tool
JPS6140709A (ja) 1984-08-02 1986-02-27 みのる産業株式会社 回転目皿播種機
EP0289885A1 (de) 1987-05-08 1988-11-09 Siemens Aktiengesellschaft Blendensystem zur Erzeugung mehrerer Teilchensonden mit veränderbarem Querschnitt
DE58902538D1 (de) 1988-05-19 1992-12-03 Siemens Ag Verfahren zur beobachtung einer szene und einrichtung zur durchfuehrung des verfahrens.
US5070414A (en) 1988-09-20 1991-12-03 Kabushiki Kaisha Toshiba Method and apparatus for reading image information formed on material
US5157499A (en) 1990-06-29 1992-10-20 Kabushiki Kaisha N A C High-speed video camera using solid-state image sensor
US5144448A (en) 1990-07-31 1992-09-01 Vidar Systems Corporation Scanning apparatus using multiple CCD arrays and related method
US5325449A (en) 1992-05-15 1994-06-28 David Sarnoff Research Center, Inc. Method for fusing images and apparatus therefor
JP3032382B2 (ja) 1992-07-13 2000-04-17 シャープ株式会社 デジタル信号のサンプリング周波数変換装置
US5659424A (en) 1993-05-25 1997-08-19 Hitachi, Ltd. Projecting lens and image display device
JPH0715457A (ja) 1993-06-18 1995-01-17 Hitachi Ltd ディジタル通信切替方式
EP0677821A3 (en) 1994-04-14 1996-03-06 Hewlett Packard Co Enlargement of a digital image by slaving.
US20020195548A1 (en) 2001-06-06 2002-12-26 Dowski Edward Raymond Wavefront coding interference contrast imaging systems
US5629524A (en) * 1995-02-21 1997-05-13 Advanced Scientific Concepts, Inc. High speed crystallography detector
EP0739039A3 (en) 1995-04-18 1998-03-04 Interuniversitair Micro-Elektronica Centrum Vzw Pixel structure, image sensor using such pixel, structure and corresponding peripheric circuitry
US6005607A (en) 1995-06-29 1999-12-21 Matsushita Electric Industrial Co., Ltd. Stereoscopic computer graphics image generating apparatus and stereoscopic TV apparatus
GB2302978A (en) 1995-07-04 1997-02-05 Sharp Kk LIquid crystal device
AU1074797A (en) * 1995-11-07 1997-06-05 California Institute Of Technology Capacitively coupled successive approximation ultra low power analog-to-digital converter
JPH09181913A (ja) 1995-12-26 1997-07-11 Olympus Optical Co Ltd カメラシステム
US5793900A (en) 1995-12-29 1998-08-11 Stanford University Generating categorical depth maps using passive defocus sensing
US6124974A (en) 1996-01-26 2000-09-26 Proxemics Lenslet array systems and methods
US5973844A (en) 1996-01-26 1999-10-26 Proxemics Lenslet array systems and methods
US6493465B2 (en) 1996-02-21 2002-12-10 Canon Kabushiki Kaisha Matching point extracting method and apparatus therefor
US5832312A (en) 1996-02-22 1998-11-03 Eastman Kodak Company Watertight body for accommodating a photographic camera
US5911008A (en) 1996-04-30 1999-06-08 Nippon Telegraph And Telephone Corporation Scheme for detecting shot boundaries in compressed video data using inter-frame/inter-field prediction coding and intra-frame/intra-field coding
US6002743A (en) 1996-07-17 1999-12-14 Telymonde; Timothy D. Method and apparatus for image acquisition from a plurality of cameras
GB9616262D0 (en) 1996-08-02 1996-09-11 Philips Electronics Nv Post-processing generation of focus/defocus effects for computer graphics images
US6141048A (en) 1996-08-19 2000-10-31 Eastman Kodak Company Compact image capture device
US6137535A (en) * 1996-11-04 2000-10-24 Eastman Kodak Company Compact digital camera with segmented fields of view
US5808350A (en) 1997-01-03 1998-09-15 Raytheon Company Integrated IR, visible and NIR sensor and methods of fabricating same
JPH10232626A (ja) 1997-02-20 1998-09-02 Canon Inc 立体画像表示装置
US5801919A (en) 1997-04-04 1998-09-01 Gateway 2000, Inc. Adjustably mounted camera assembly for portable computers
US6097394A (en) 1997-04-28 2000-08-01 Board Of Trustees, Leland Stanford, Jr. University Method and system for light field rendering
NO304715B1 (no) 1997-05-06 1999-02-01 Dimensions As FremgangsmÕte ved bildebehandling
US6515701B2 (en) 1997-07-24 2003-02-04 Polaroid Corporation Focal plane exposure control system for CMOS area image sensors
US6563537B1 (en) 1997-07-31 2003-05-13 Fuji Photo Film Co., Ltd. Image signal interpolation
JP3430935B2 (ja) 1997-10-20 2003-07-28 富士ゼロックス株式会社 画像読取装置及びレンズ
NO305728B1 (no) * 1997-11-14 1999-07-12 Reidar E Tangen Optoelektronisk kamera og fremgangsmÕte ved bildeformatering i samme
JP4243779B2 (ja) 1997-11-14 2009-03-25 株式会社ニコン 拡散板の製造方法および拡散板、並びにマイクロレンズアレイの製造方法およびマイクロレンズアレイ
US6069365A (en) * 1997-11-25 2000-05-30 Alan Y. Chow Optical processor based imaging system
JPH11242189A (ja) 1997-12-25 1999-09-07 Olympus Optical Co Ltd 像形成法、像形成装置
JPH11223708A (ja) 1998-02-09 1999-08-17 Nikon Corp 圧子およびマイクロ光学素子アレイの製造方法
US6054703A (en) 1998-03-20 2000-04-25 Syscan, Inc. Sensing module for accelerating signal readout from image sensors
US6160909A (en) 1998-04-01 2000-12-12 Canon Kabushiki Kaisha Depth control for stereoscopic images
KR100307883B1 (ko) 1998-04-13 2001-10-19 박호군 정합화소수를이용한유사도측정방법및이를구현하기위한장치
JP3931936B2 (ja) 1998-05-11 2007-06-20 セイコーエプソン株式会社 マイクロレンズアレイ基板及びその製造方法並びに表示装置
US6205241B1 (en) 1998-06-01 2001-03-20 Canon Kabushiki Kaisha Compression of stereoscopic images
US6137100A (en) 1998-06-08 2000-10-24 Photobit Corporation CMOS image sensor with different pixel sizes for different colors
US6069351A (en) * 1998-07-16 2000-05-30 Intel Corporation Focal plane processor for scaling information from image sensors
US6903770B1 (en) 1998-07-27 2005-06-07 Sanyo Electric Co., Ltd. Digital camera which produces a single image based on two exposures
US6340994B1 (en) 1998-08-12 2002-01-22 Pixonics, Llc System and method for using temporal gamma and reverse super-resolution to process images for use in digital display systems
DE19838362C1 (de) 1998-08-18 2000-02-10 Deutsch Zentr Luft & Raumfahrt Fokalebenenplatte für eine hochauflösende CCD-Kamera
US6269175B1 (en) 1998-08-28 2001-07-31 Sarnoff Corporation Method and apparatus for enhancing regions of aligned images using flow estimation
US6879735B1 (en) 1998-09-14 2005-04-12 University Of Utah Reasearch Foundation Method of digital image enhancement and sharpening
US6310650B1 (en) 1998-09-23 2001-10-30 Honeywell International Inc. Method and apparatus for calibrating a tiled display
GB2343320B (en) 1998-10-31 2003-03-26 Ibm Camera system for three dimentional images and video
JP3596314B2 (ja) 1998-11-02 2004-12-02 日産自動車株式会社 物体端の位置計測装置および移動体の通行判断装置
US6611289B1 (en) * 1999-01-15 2003-08-26 Yanbin Yu Digital cameras using multiple sensors with multiple lenses
US6603513B1 (en) 1999-02-16 2003-08-05 Micron Technology, Inc. Using a single control line to provide select and reset signals to image sensors in two rows of a digital imaging device
US6563540B2 (en) 1999-02-26 2003-05-13 Intel Corporation Light sensor with increased dynamic range
US20020063807A1 (en) 1999-04-19 2002-05-30 Neal Margulis Method for Performing Image Transforms in a Digital Display System
US6819358B1 (en) 1999-04-26 2004-11-16 Microsoft Corporation Error calibration for digital image sensors and apparatus using the same
US6292713B1 (en) 1999-05-20 2001-09-18 Compaq Computer Corporation Robotic telepresence system
JP2001008235A (ja) 1999-06-25 2001-01-12 Minolta Co Ltd 3次元データの再構成のための画像入力方法及び多眼式データ入力装置
JP2001042042A (ja) * 1999-07-27 2001-02-16 Canon Inc 撮像装置
US6801653B1 (en) 1999-08-05 2004-10-05 Sony Corporation Information processing apparatus and method as well as medium
US7015954B1 (en) 1999-08-09 2006-03-21 Fuji Xerox Co., Ltd. Automatic video system using multiple cameras
US6647142B1 (en) 1999-08-19 2003-11-11 Mitsubishi Electric Research Laboratories, Inc. Badge identification system
US6771833B1 (en) 1999-08-20 2004-08-03 Eastman Kodak Company Method and system for enhancing digital images
US6628330B1 (en) 1999-09-01 2003-09-30 Neomagic Corp. Color interpolator and horizontal/vertical edge enhancer using two line buffer and alternating even/odd filters for digital camera
US6358862B1 (en) 1999-09-02 2002-03-19 Micron Technology, Inc Passivation integrity improvements
US6639596B1 (en) 1999-09-20 2003-10-28 Microsoft Corporation Stereo reconstruction from multiperspective panoramas
US6774941B1 (en) 1999-10-26 2004-08-10 National Semiconductor Corporation CCD output processing stage that amplifies signals from colored pixels based on the conversion efficiency of the colored pixels
US6671399B1 (en) 1999-10-27 2003-12-30 Canon Kabushiki Kaisha Fast epipolar line adjustment of stereo pairs
US6674892B1 (en) 1999-11-01 2004-01-06 Canon Kabushiki Kaisha Correcting an epipolar axis for skew and offset
JP2001195050A (ja) 1999-11-05 2001-07-19 Mitsubishi Electric Corp グラフィックアクセラレータ
DE60014420T2 (de) 1999-11-26 2005-10-13 Sanyo Electric Co., Ltd., Moriguchi Verfahren zur 2d/3d videoumwandlung
JP3950926B2 (ja) 1999-11-30 2007-08-01 エーユー オプトロニクス コーポレイション 画像表示方法、ホスト装置、画像表示装置、およびディスプレイ用インターフェイス
JP3728160B2 (ja) 1999-12-06 2005-12-21 キヤノン株式会社 奥行き画像計測装置及び方法、並びに複合現実感提示システム
US7068851B1 (en) 1999-12-10 2006-06-27 Ricoh Co., Ltd. Multiscale sharpening and smoothing with wavelets
FI107680B (fi) 1999-12-22 2001-09-14 Nokia Oyj Menetelmä videokuvien lähettämiseksi, tiedonsiirtojärjestelmä, lähettävä videopäätelaite ja vastaanottava videopäätelaite
US6476805B1 (en) 1999-12-23 2002-11-05 Microsoft Corporation Techniques for spatial displacement estimation and multi-resolution operations on light fields
US6502097B1 (en) 1999-12-23 2002-12-31 Microsoft Corporation Data structure for efficient access to variable-size data objects
JP2001194114A (ja) 2000-01-14 2001-07-19 Sony Corp 画像処理装置および画像処理方法、並びにプログラム提供媒体
US6523046B2 (en) 2000-02-25 2003-02-18 Microsoft Corporation Infrastructure and method for supporting generic multimedia metadata
JP2001264033A (ja) 2000-03-17 2001-09-26 Sony Corp 三次元形状計測装置とその方法、三次元モデリング装置とその方法、およびプログラム提供媒体
US6571466B1 (en) 2000-03-27 2003-06-03 Amkor Technology, Inc. Flip chip image sensor package fabrication method
JP2001277260A (ja) 2000-03-30 2001-10-09 Seiko Epson Corp マイクロレンズアレイ、その製造方法及びその製造用原盤並びに表示装置
WO2001075949A1 (fr) 2000-04-04 2001-10-11 Advantest Corporation Appareil d'exposition multifaisceau comprenant une lentille electronique multiaxe, et procede de fabrication d'un dispositif a semi-conducteur
WO2001082593A1 (en) 2000-04-24 2001-11-01 The Government Of The United States Of America, As Represented By The Secretary Of The Navy Apparatus and method for color image fusion
JP2001337263A (ja) 2000-05-25 2001-12-07 Olympus Optical Co Ltd 測距装置
CN1451230A (zh) 2000-07-21 2003-10-22 纽约市哥伦比亚大学托管会 图象拼合方法与设备
US7154546B1 (en) 2000-08-07 2006-12-26 Micron Technology, Inc. Pixel optimization for color
US7200261B2 (en) 2000-08-25 2007-04-03 Fujifilm Corporation Parallax image capturing apparatus and parallax image processing apparatus
US7085409B2 (en) 2000-10-18 2006-08-01 Sarnoff Corporation Method and apparatus for synthesizing new video and/or still imagery from a collection of real video and/or still imagery
US6734905B2 (en) 2000-10-20 2004-05-11 Micron Technology, Inc. Dynamic range extension for CMOS image sensors
US7262799B2 (en) 2000-10-25 2007-08-28 Canon Kabushiki Kaisha Image sensing apparatus and its control method, control program, and storage medium
US6476971B1 (en) 2000-10-31 2002-11-05 Eastman Kodak Company Method of manufacturing a microlens array mold and a microlens array
JP3918499B2 (ja) 2000-11-01 2007-05-23 セイコーエプソン株式会社 間隙測定方法、間隙測定装置、形状測定方法、形状測定装置並びに液晶装置の製造方法
US6788338B1 (en) 2000-11-20 2004-09-07 Petko Dimitrov Dinev High resolution video camera apparatus having two image sensors and signal processing
US7490774B2 (en) 2003-11-13 2009-02-17 Metrologic Instruments, Inc. Hand-supportable imaging based bar code symbol reader employing automatic light exposure measurement and illumination control subsystem integrated therein
JP2002171537A (ja) 2000-11-30 2002-06-14 Canon Inc 複眼撮像系、撮像装置および電子機器
US7260274B2 (en) 2000-12-01 2007-08-21 Imax Corporation Techniques and systems for developing high-resolution imagery
US7596281B2 (en) 2000-12-05 2009-09-29 Yeda Research And Development Co. Ltd. Apparatus and method for alignment of spatial or temporal non-overlapping images sequences
JP2002195910A (ja) 2000-12-26 2002-07-10 Omron Corp 光学部品の検査装置
JP2002209226A (ja) 2000-12-28 2002-07-26 Canon Inc 撮像装置
US7805680B2 (en) 2001-01-03 2010-09-28 Nokia Corporation Statistical metering and filtering of content via pixel-based metadata
JP3957460B2 (ja) 2001-01-15 2007-08-15 沖電気工業株式会社 伝送ヘッダ圧縮装置、動画像符号化装置及び動画像伝送システム
US6635941B2 (en) 2001-03-21 2003-10-21 Canon Kabushiki Kaisha Structure of semiconductor device with improved reliability
JP2002324743A (ja) 2001-04-24 2002-11-08 Canon Inc 露光方法及び装置
US6443579B1 (en) 2001-05-02 2002-09-03 Kenneth Myers Field-of-view controlling arrangements
US20020167537A1 (en) 2001-05-11 2002-11-14 Miroslav Trajkovic Motion-based tracking with pan-tilt-zoom camera
US20020190991A1 (en) 2001-05-16 2002-12-19 Daniel Efran 3-D instant replay system and method
US7420602B2 (en) * 2001-05-29 2008-09-02 Samsung Semiconductor Israel R&D Center (Sirc) Cmos imager for cellular applications and methods of using such
US7738013B2 (en) 2001-05-29 2010-06-15 Samsung Electronics Co., Ltd. Systems and methods for power conservation in a CMOS imager
US6482669B1 (en) 2001-05-30 2002-11-19 Taiwan Semiconductor Manufacturing Company Colors only process to reduce package yield loss
US6525302B2 (en) 2001-06-06 2003-02-25 The Regents Of The University Of Colorado Wavefront coding phase contrast imaging systems
US20030025227A1 (en) 2001-08-02 2003-02-06 Zograph, Llc Reproduction of relief patterns
WO2003014796A1 (en) 2001-08-09 2003-02-20 The Trustees Of Columbia University In The City Of New York Adaptive imaging using digital light processing
DE60141901D1 (de) 2001-08-31 2010-06-02 St Microelectronics Srl Störschutzfilter für Bayermusterbilddaten
JP3978706B2 (ja) 2001-09-20 2007-09-19 セイコーエプソン株式会社 微細構造体の製造方法
JP2003139910A (ja) 2001-10-30 2003-05-14 Sony Corp 光学素子、その製造方法およびその製造装置、並びにそれを用いた液晶表示装置および画像投影型表示装置
DE10153237A1 (de) 2001-10-31 2003-05-15 Lfk Gmbh Verfahren und Vorrichtung zur automatisierten Bestimmung der Modulations-Transfer-Funktion (MTF) von Focal-Plane-Array (FPA)- Kameras
US6927922B2 (en) 2001-12-18 2005-08-09 The University Of Rochester Imaging using a multifocal aspheric lens to obtain extended depth of field
US7302118B2 (en) 2002-02-07 2007-11-27 Microsoft Corporation Transformation of images
US20030179418A1 (en) 2002-03-19 2003-09-25 Eastman Kodak Company Producing a defective pixel map from defective cluster pixels in an area array image sensor
US8369607B2 (en) 2002-03-27 2013-02-05 Sanyo Electric Co., Ltd. Method and apparatus for processing three-dimensional images
JP2003298920A (ja) 2002-03-29 2003-10-17 Fuji Photo Film Co Ltd デジタルカメラ
US20030188659A1 (en) 2002-04-05 2003-10-09 Canadian Bank Note Company Limited Method and apparatus for reproducing a color image based on monochrome images derived therefrom
US6856314B2 (en) 2002-04-18 2005-02-15 Stmicroelectronics, Inc. Method and system for 3D reconstruction of multiple views with altering search path and occlusion modeling
JP3567327B2 (ja) 2002-05-08 2004-09-22 富士写真光機株式会社 撮像レンズ
US6783900B2 (en) 2002-05-13 2004-08-31 Micron Technology, Inc. Color filter imaging array and method of formation
JP2004048644A (ja) 2002-05-21 2004-02-12 Sony Corp 情報処理装置、情報処理システム、及び対話者表示方法
JP2003347192A (ja) 2002-05-24 2003-12-05 Toshiba Corp エネルギービーム露光方法および露光装置
US7013318B2 (en) 2002-05-29 2006-03-14 Raytheon Company Method and system for encapsulating cells
JP2004088713A (ja) 2002-06-27 2004-03-18 Olympus Corp 撮像レンズユニットおよび撮像装置
US7129981B2 (en) 2002-06-27 2006-10-31 International Business Machines Corporation Rendering system and method for images having differing foveal area and peripheral view area resolutions
JP4147059B2 (ja) 2002-07-03 2008-09-10 株式会社トプコン キャリブレーション用データ測定装置、測定方法及び測定プログラム、並びにコンピュータ読取可能な記録媒体、画像データ処理装置
JP2004037924A (ja) 2002-07-04 2004-02-05 Minolta Co Ltd 撮像装置
US8111289B2 (en) 2002-07-15 2012-02-07 Magna B.S.P. Ltd. Method and apparatus for implementing multipurpose monitoring system
US20040012689A1 (en) 2002-07-16 2004-01-22 Fairchild Imaging Charge coupled devices in tiled arrays
JP2004078296A (ja) 2002-08-09 2004-03-11 Victor Co Of Japan Ltd 画像生成装置
US7447380B2 (en) 2002-09-12 2008-11-04 Inoe Technologies, Llc Efficient method for creating a viewpoint from plurality of images
US20040050104A1 (en) 2002-09-18 2004-03-18 Eastman Kodak Company Forming information transfer lens array
US20040207836A1 (en) 2002-09-27 2004-10-21 Rajeshwar Chhibber High dynamic range optical inspection system and method
US7084904B2 (en) 2002-09-30 2006-08-01 Microsoft Corporation Foveated wide-angle imaging system and method for capturing and viewing wide-angle images in real time
US7477781B1 (en) 2002-10-10 2009-01-13 Dalsa Corporation Method and apparatus for adaptive pixel correction of multi-color matrix
US20040075654A1 (en) 2002-10-16 2004-04-22 Silicon Integrated Systems Corp. 3-D digital image processor and method for visibility processing for use in the same
JP4171786B2 (ja) 2002-10-25 2008-10-29 コニカミノルタホールディングス株式会社 画像入力装置
US7742088B2 (en) 2002-11-19 2010-06-22 Fujifilm Corporation Image sensor and digital camera
WO2004049736A1 (en) 2002-11-21 2004-06-10 Vision Iii Imaging, Inc. Critical alignment of parallax images for autostereoscopic display
US20040105021A1 (en) * 2002-12-02 2004-06-03 Bolymedia Holdings Co., Ltd. Color filter patterns for image sensors
US20040114807A1 (en) 2002-12-13 2004-06-17 Dan Lelescu Statistical representation and coding of light field data
US7340099B2 (en) 2003-01-17 2008-03-04 University Of New Brunswick System and method for image fusion
DE10301941B4 (de) 2003-01-20 2005-11-17 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Kamera und Verfahren zur optischen Aufnahme eines Schirms
US7379592B2 (en) 2003-01-21 2008-05-27 United States Of America As Represented By The Secretary Of The Navy System and method for significant dust detection and enhancement of dust images over land and ocean
WO2004068862A1 (ja) 2003-01-31 2004-08-12 The Circle For The Promotion Of Science And Engineering 高解像度カラー画像生成方法,高解像度カラー画像生成装置及び高解像度カラー画像生成プログラム
US7005637B2 (en) 2003-01-31 2006-02-28 Intevac, Inc. Backside thinning of image array devices
US7308157B2 (en) 2003-02-03 2007-12-11 Photon Dynamics, Inc. Method and apparatus for optical inspection of a display
US7595817B1 (en) 2003-02-12 2009-09-29 The Research Foundation Of State University Of New York Linear system based, qualitative independent motion detection from compressed MPEG surveillance video
US20040165090A1 (en) 2003-02-13 2004-08-26 Alex Ning Auto-focus (AF) lens and process
JP2004266369A (ja) 2003-02-21 2004-09-24 Sony Corp 固体撮像装置およびその駆動方法
US7106914B2 (en) 2003-02-27 2006-09-12 Microsoft Corporation Bayesian image super resolution
US7148861B2 (en) 2003-03-01 2006-12-12 The Boeing Company Systems and methods for providing enhanced vision imaging with decreased latency
US8218052B2 (en) 2003-03-07 2012-07-10 Iconix Video, Inc. High frame rate high definition imaging system and method
US7218320B2 (en) 2003-03-13 2007-05-15 Sony Corporation System and method for capturing facial and body motion
US6801719B1 (en) 2003-03-14 2004-10-05 Eastman Kodak Company Camera using beam splitter with micro-lens image amplification
US7206449B2 (en) 2003-03-19 2007-04-17 Mitsubishi Electric Research Laboratories, Inc. Detecting silhouette edges in images
US7425984B2 (en) 2003-04-04 2008-09-16 Stmicroelectronics, Inc. Compound camera and methods for implementing auto-focus, depth-of-field and high-resolution functions
US7373005B2 (en) 2003-04-10 2008-05-13 Micron Technology, Inc. Compression system for integrated sensor devices
US7097311B2 (en) 2003-04-19 2006-08-29 University Of Kentucky Research Foundation Super-resolution overlay in multi-projector displays
US6958862B1 (en) 2003-04-21 2005-10-25 Foveon, Inc. Use of a lenslet array with a vertically stacked pixel array
US7428330B2 (en) 2003-05-02 2008-09-23 Microsoft Corporation Cyclopean virtual imaging via generalized probabilistic smoothing
SE525665C2 (sv) 2003-05-08 2005-03-29 Forskarpatent I Syd Ab Matris av pixlar samt elektronisk bildanordning innefattande nämnda matris av pixlar
EP1627526A1 (en) 2003-05-13 2006-02-22 Xceed Imaging Ltd. Optical method and system for enhancing image resolution
JP2004348674A (ja) 2003-05-26 2004-12-09 Noritsu Koki Co Ltd 領域検出方法及びその装置
US20040240052A1 (en) 2003-06-02 2004-12-02 Pentax Corporation Multiple-focal imaging device, and a mobile device having the multiple-focal-length imaging device
JP2004363478A (ja) 2003-06-06 2004-12-24 Sanyo Electric Co Ltd 半導体装置の製造方法
KR100539234B1 (ko) 2003-06-11 2005-12-27 삼성전자주식회사 투명 고분자 소재를 적용한 씨모스형 이미지 센서 모듈 및그 제조방법
US6818934B1 (en) 2003-06-24 2004-11-16 Omnivision International Holding Ltd Image sensor having micro-lens array separated with trench structures and method of making
US7362918B2 (en) 2003-06-24 2008-04-22 Microsoft Corporation System and method for de-noising multiple copies of a signal
US7388609B2 (en) 2003-07-07 2008-06-17 Zoran Corporation Dynamic identification and correction of defective pixels
US7090135B2 (en) 2003-07-07 2006-08-15 Symbol Technologies, Inc. Imaging arrangement and barcode imager for imaging an optical code or target at a plurality of focal planes
US20050007461A1 (en) 2003-07-11 2005-01-13 Novatek Microelectronic Co. Correction system and method of analog front end
JP3731589B2 (ja) * 2003-07-18 2006-01-05 ソニー株式会社 撮像装置と同期信号発生装置
US7233737B2 (en) 2003-08-12 2007-06-19 Micron Technology, Inc. Fixed-focus camera module and associated method of assembly
US7643703B2 (en) 2003-09-03 2010-01-05 Battelle Energy Alliance, Llc Image change detection systems, methods, and articles of manufacture
EP1671258A4 (en) 2003-09-04 2008-03-19 Sarnoff Corp METHOD AND DEVICE FOR CARRYING OUT AN IRIS DETECTION FROM ONE IMAGE
WO2005027038A2 (en) 2003-09-08 2005-03-24 Honda Motor Co., Ltd. Systems and methods for directly generating a view using a layered approach
JP4020850B2 (ja) 2003-10-06 2007-12-12 株式会社東芝 磁気記録媒体の製造方法、製造装置、インプリントスタンパ及びその製造方法
US7079251B2 (en) 2003-10-16 2006-07-18 4D Technology Corporation Calibration and error correction in multi-channel imaging
JP4071793B2 (ja) 2003-10-22 2008-04-02 松下電器産業株式会社 撮像装置とその製造方法、及び携帯機器
US7840067B2 (en) 2003-10-24 2010-11-23 Arcsoft, Inc. Color matching and color correction for images forming a panoramic image
CN1875638A (zh) 2003-11-11 2006-12-06 奥林巴斯株式会社 多谱图像捕捉装置
JP4235539B2 (ja) 2003-12-01 2009-03-11 独立行政法人科学技術振興機構 画像構成装置及び画像構成方法
US20050128509A1 (en) 2003-12-11 2005-06-16 Timo Tokkonen Image creating method and imaging device
US7453510B2 (en) 2003-12-11 2008-11-18 Nokia Corporation Imaging device
US7328288B2 (en) 2003-12-11 2008-02-05 Canon Kabushiki Kaisha Relay apparatus for relaying communication from CPU to peripheral device
JP3859158B2 (ja) 2003-12-16 2006-12-20 セイコーエプソン株式会社 マイクロレンズ用凹部付き基板、マイクロレンズ基板、透過型スクリーン、およびリア型プロジェクタ
US7123298B2 (en) 2003-12-18 2006-10-17 Avago Technologies Sensor Ip Pte. Ltd. Color image sensor with imaging elements imaging on respective regions of sensor elements
US7511749B2 (en) 2003-12-18 2009-03-31 Aptina Imaging Corporation Color image sensor having imaging element array forming images on respective regions of sensor elements
US7376250B2 (en) 2004-01-05 2008-05-20 Honda Motor Co., Ltd. Apparatus, method and program for moving object detection
US7496293B2 (en) 2004-01-14 2009-02-24 Elbit Systems Ltd. Versatile camera for various visibility conditions
US7773143B2 (en) 2004-04-08 2010-08-10 Tessera North America, Inc. Thin color camera having sub-pixel resolution
US8134637B2 (en) 2004-01-28 2012-03-13 Microsoft Corporation Method and system to increase X-Y resolution in a depth (Z) camera using red, blue, green (RGB) sensing
US7453688B2 (en) 2004-01-29 2008-11-18 Inventec Corporation Multimedia device for portable computers
US20050185711A1 (en) 2004-02-20 2005-08-25 Hanspeter Pfister 3D television system and method
SE527889C2 (sv) 2004-03-17 2006-07-04 Thomas Jeff Adamo Apparat för avbildning av ett objekt
JP2006047944A (ja) 2004-03-24 2006-02-16 Fuji Photo Film Co Ltd 撮影レンズ
US8090218B2 (en) 2004-03-31 2012-01-03 Canon Kabushiki Kaisha Imaging system performance measurement
US7633511B2 (en) 2004-04-01 2009-12-15 Microsoft Corporation Pop-up light field
US8634014B2 (en) 2004-04-05 2014-01-21 Hewlett-Packard Development Company, L.P. Imaging device analysis systems and imaging device analysis methods
US7091531B2 (en) 2004-04-07 2006-08-15 Micron Technology, Inc. High dynamic range pixel amplifier
US8049806B2 (en) 2004-09-27 2011-11-01 Digitaloptics Corporation East Thin camera and associated methods
US7620265B1 (en) 2004-04-12 2009-11-17 Equinox Corporation Color invariant image fusion of visible and thermal infrared video
JP2005303694A (ja) 2004-04-13 2005-10-27 Konica Minolta Holdings Inc 複眼撮像装置
US7292735B2 (en) 2004-04-16 2007-11-06 Microsoft Corporation Virtual image artifact detection
US7773404B2 (en) 2005-01-07 2010-08-10 Invisage Technologies, Inc. Quantum dot optical devices with enhanced gain and sensitivity and methods of making same
US8218625B2 (en) 2004-04-23 2012-07-10 Dolby Laboratories Licensing Corporation Encoding, decoding and representing high dynamic range images
US20060034531A1 (en) 2004-05-10 2006-02-16 Seiko Epson Corporation Block noise level evaluation method for compressed images and control method of imaging device utilizing the evaluation method
WO2005110230A1 (en) 2004-05-14 2005-11-24 Philips Intellectual Property & Standards Gmbh System and method for diagnosing breast cancer
US7355793B2 (en) 2004-05-19 2008-04-08 The Regents Of The University Of California Optical system applicable to improving the dynamic range of Shack-Hartmann sensors
US20050265633A1 (en) 2004-05-25 2005-12-01 Sarnoff Corporation Low latency pyramid processor for image processing systems
JP2005354124A (ja) 2004-06-08 2005-12-22 Seiko Epson Corp 複数の低画素密度画像からの高画素密度画像の生成
US7330593B2 (en) 2004-06-25 2008-02-12 Stmicroelectronics, Inc. Segment based image matching method and system
JP4479373B2 (ja) 2004-06-28 2010-06-09 ソニー株式会社 イメージセンサ
JP4408755B2 (ja) 2004-06-28 2010-02-03 Necエレクトロニクス株式会社 デインタリーブ装置、移動通信端末及びデインタリーブ方法
US7447382B2 (en) 2004-06-30 2008-11-04 Intel Corporation Computing a higher resolution image from multiple lower resolution images using model-based, robust Bayesian estimation
JP2006033228A (ja) 2004-07-14 2006-02-02 Victor Co Of Japan Ltd 画像撮像装置
JP2006033493A (ja) 2004-07-16 2006-02-02 Matsushita Electric Ind Co Ltd 撮像装置
US7189954B2 (en) 2004-07-19 2007-03-13 Micron Technology, Inc. Microelectronic imagers with optical devices and methods of manufacturing such microelectronic imagers
JP2006033570A (ja) 2004-07-20 2006-02-02 Olympus Corp 画像生成装置
US8027531B2 (en) 2004-07-21 2011-09-27 The Board Of Trustees Of The Leland Stanford Junior University Apparatus and method for capturing a scene using staggered triggering of dense camera arrays
US20060023197A1 (en) 2004-07-27 2006-02-02 Joel Andrew H Method and system for automated production of autostereoscopic and animated prints and transparencies from digital and non-digital media
US7068432B2 (en) 2004-07-27 2006-06-27 Micron Technology, Inc. Controlling lens shape in a microlens array
DE102004036469A1 (de) 2004-07-28 2006-02-16 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Kameramodul, hierauf basierendes Array und Verfahren zu dessen Herstellung
US20060028476A1 (en) 2004-08-03 2006-02-09 Irwin Sobel Method and system for providing extensive coverage of an object using virtual cameras
US7333652B2 (en) 2004-08-03 2008-02-19 Sony Corporation System and method for efficiently performing a depth map recovery procedure
JP2006050263A (ja) 2004-08-04 2006-02-16 Olympus Corp 画像生成方法および装置
US7430339B2 (en) 2004-08-09 2008-09-30 Microsoft Corporation Border matting by dynamic programming
US7609302B2 (en) 2004-08-11 2009-10-27 Micron Technology, Inc. Correction of non-uniform sensitivity in an image array
US7061693B2 (en) 2004-08-16 2006-06-13 Xceed Imaging Ltd. Optical method and system for extended depth of focus
US7645635B2 (en) 2004-08-16 2010-01-12 Micron Technology, Inc. Frame structure and semiconductor attach process for use therewith for fabrication of image sensor packages and the like, and resulting packages
WO2006036398A2 (en) 2004-08-23 2006-04-06 Sarnoff Corporation Method and apparatus for producing a fused image
US7795577B2 (en) 2004-08-25 2010-09-14 Richard Ian Olsen Lens frame and optical focus assembly for imager module
US8124929B2 (en) 2004-08-25 2012-02-28 Protarius Filo Ag, L.L.C. Imager module optical focus and assembly method
US7564019B2 (en) 2005-08-25 2009-07-21 Richard Ian Olsen Large dynamic range cameras
JP4057597B2 (ja) 2004-08-26 2008-03-05 独立行政法人科学技術振興機構 光学素子
CN100489599C (zh) 2004-08-26 2009-05-20 财团法人秋田企业活性化中心 液晶透镜
US20060046204A1 (en) 2004-08-31 2006-03-02 Sharp Laboratories Of America, Inc. Directly patternable microlens
US20060055811A1 (en) 2004-09-14 2006-03-16 Frtiz Bernard S Imaging system having modules with adaptive optical elements
US7145124B2 (en) * 2004-09-15 2006-12-05 Raytheon Company Multispectral imaging chip using photonic crystals
JP3977368B2 (ja) 2004-09-30 2007-09-19 クラリオン株式会社 駐車支援システム
DE102004049676A1 (de) 2004-10-12 2006-04-20 Infineon Technologies Ag Verfahren zur rechnergestützten Bewegungsschätzung in einer Vielzahl von zeitlich aufeinander folgenden digitalen Bildern, Anordnung zur rechnergestützten Bewegungsschätzung, Computerprogramm-Element und computerlesbares Speichermedium
JP2006119368A (ja) 2004-10-21 2006-05-11 Konica Minolta Opto Inc 広角光学系、撮像レンズ装置、モニタカメラ及びデジタル機器
JP4534715B2 (ja) 2004-10-22 2010-09-01 株式会社ニコン 撮像装置および画像処理プログラム
DE102004052994C5 (de) 2004-11-03 2010-08-26 Vistec Electron Beam Gmbh Multistrahlmodulator für einen Partikelstrahl und Verwendung des Multistrahlmodulators zur maskenlosen Substratsstrukturierung
US7598996B2 (en) 2004-11-16 2009-10-06 Aptina Imaging Corporation System and method for focusing a digital camera
CN101111748B (zh) 2004-12-03 2014-12-17 弗卢克公司 具有激光指示器的可见光和ir组合的图像照相机
US7483065B2 (en) 2004-12-15 2009-01-27 Aptina Imaging Corporation Multi-lens imaging systems and methods using optical filters having mosaic patterns
US8854486B2 (en) 2004-12-17 2014-10-07 Mitsubishi Electric Research Laboratories, Inc. Method and system for processing multiview videos for view synthesis using skip and direct modes
US7728878B2 (en) 2004-12-17 2010-06-01 Mitsubishi Electric Research Labortories, Inc. Method and system for processing multiview videos for view synthesis using side information
JP2008537190A (ja) 2005-01-07 2008-09-11 ジェスチャー テック,インコーポレイテッド 赤外線パターンを照射することによる対象物の三次元像の生成
US7073908B1 (en) 2005-01-11 2006-07-11 Anthony Italo Provitola Enhancement of depth perception
US7671321B2 (en) 2005-01-18 2010-03-02 Rearden, Llc Apparatus and method for capturing still images and video using coded lens imaging techniques
US7767949B2 (en) 2005-01-18 2010-08-03 Rearden, Llc Apparatus and method for capturing still images and video using coded aperture techniques
US7602997B2 (en) 2005-01-19 2009-10-13 The United States Of America As Represented By The Secretary Of The Army Method of super-resolving images
US7408627B2 (en) 2005-02-08 2008-08-05 Canesta, Inc. Methods and system to quantify depth data accuracy in three-dimensional sensors using single frame capture
US7965314B1 (en) 2005-02-09 2011-06-21 Flir Systems, Inc. Foveal camera systems and methods
US7561191B2 (en) 2005-02-18 2009-07-14 Eastman Kodak Company Camera phone using multiple lenses and image sensors to provide an extended zoom range
CN101189487B (zh) 2005-03-11 2010-08-11 形创有限公司 三维扫描自动参考系统和设备
JP2006258930A (ja) 2005-03-15 2006-09-28 Nikon Corp マイクロレンズの製造方法、及びマイクロレンズ用の型の製造方法
WO2006102181A1 (en) 2005-03-21 2006-09-28 Massachusetts Institute Of Technology (Mit) Real-time, continuous-wave terahertz imaging using a microbolometer focal-plane array
WO2006100903A1 (ja) 2005-03-23 2006-09-28 Matsushita Electric Industrial Co., Ltd. 車載撮像装置
US7297917B2 (en) 2005-03-24 2007-11-20 Micron Technology, Inc. Readout technique for increasing or maintaining dynamic range in image sensors
US7880794B2 (en) 2005-03-24 2011-02-01 Panasonic Corporation Imaging device including a plurality of lens elements and a imaging sensor
US7683950B2 (en) 2005-04-26 2010-03-23 Eastman Kodak Company Method and apparatus for correcting a channel dependent color aberration in a digital image
US7656428B2 (en) 2005-05-05 2010-02-02 Avago Technologies General Ip (Singapore) Pte. Ltd. Imaging device employing optical motion sensor as gyroscope
EP1882449A4 (en) 2005-05-18 2010-05-05 Hitachi Medical Corp RADIOGRAPHY DEVICE AND IMAGE PROCESSING PROGRAM
US8411182B2 (en) * 2005-06-02 2013-04-02 Xerox Corporation System for controlling integration times of photosensors in an imaging device
US7968888B2 (en) 2005-06-08 2011-06-28 Panasonic Corporation Solid-state image sensor and manufacturing method thereof
JP2006345233A (ja) 2005-06-09 2006-12-21 Fujifilm Holdings Corp 撮像装置及びデジタルカメラ
KR100813961B1 (ko) 2005-06-14 2008-03-14 삼성전자주식회사 영상 수신장치
US7364306B2 (en) 2005-06-20 2008-04-29 Digital Display Innovations, Llc Field sequential light source modulation for a digital display system
JP4826152B2 (ja) 2005-06-23 2011-11-30 株式会社ニコン 画像合成方法及び撮像装置
US20070102622A1 (en) 2005-07-01 2007-05-10 Olsen Richard I Apparatus for multiple camera devices and method of operating same
JP4577126B2 (ja) 2005-07-08 2010-11-10 オムロン株式会社 ステレオ対応づけのための投光パターンの生成装置及び生成方法
US20090268983A1 (en) * 2005-07-25 2009-10-29 The Regents Of The University Of California Digital imaging system and method using multiple digital image sensors to produce large high-resolution gapless mosaic images
CA2553473A1 (en) 2005-07-26 2007-01-26 Wa James Tam Generating a depth map from a tw0-dimensional source image for stereoscopic and multiview imaging
EP1912434A1 (en) 2005-07-26 2008-04-16 Matsushita Electric Industrial Co., Ltd. Compound eye imaging apparatus
US7969488B2 (en) 2005-08-03 2011-06-28 Micron Technologies, Inc. Correction of cluster defects in imagers
US7929801B2 (en) 2005-08-15 2011-04-19 Sony Corporation Depth information for auto focus using two pictures and two-dimensional Gaussian scale space theory
US20070041391A1 (en) 2005-08-18 2007-02-22 Micron Technology, Inc. Method and apparatus for controlling imager output data rate
US20070040922A1 (en) 2005-08-22 2007-02-22 Micron Technology, Inc. HDR/AB on multi-way shared pixels
US7964835B2 (en) 2005-08-25 2011-06-21 Protarius Filo Ag, L.L.C. Digital cameras with direct luminance and chrominance detection
US20070258006A1 (en) 2005-08-25 2007-11-08 Olsen Richard I Solid state camera optics frame and assembly
US20070083114A1 (en) 2005-08-26 2007-04-12 The University Of Connecticut Systems and methods for image resolution enhancement
JP4804856B2 (ja) 2005-09-29 2011-11-02 富士フイルム株式会社 単焦点レンズ
US8009209B2 (en) 2005-09-30 2011-08-30 Simon Fraser University Methods and apparatus for detecting defects in imaging arrays by image analysis
WO2007044725A2 (en) 2005-10-07 2007-04-19 The Board Of Trustees Of The Leland Stanford Junior University Microscopy arrangements and approaches
US8300085B2 (en) 2005-10-14 2012-10-30 Microsoft Corporation Occlusion handling in stereo imaging
JP4773179B2 (ja) 2005-10-14 2011-09-14 富士フイルム株式会社 撮像装置
US7806604B2 (en) 2005-10-20 2010-10-05 Honeywell International Inc. Face detection and tracking in a wide field of view
KR100730406B1 (ko) 2005-11-16 2007-06-19 광운대학교 산학협력단 중간 요소 영상을 이용한 입체 영상 표시 장치
JP4389865B2 (ja) 2005-11-17 2009-12-24 ソニー株式会社 固体撮像素子の信号処理装置および信号処理方法並びに撮像装置
CN101356831B (zh) 2005-11-30 2010-09-01 意大利电信股份公司 用于确定立体视觉中的分散视差场的方法
US7599547B2 (en) 2005-11-30 2009-10-06 Microsoft Corporation Symmetric stereo model for handling occlusion
JP4516516B2 (ja) 2005-12-07 2010-08-04 本田技研工業株式会社 人物検出装置、人物検出方法及び人物検出プログラム
TWI296480B (en) 2005-12-19 2008-05-01 Quanta Comp Inc Image camera of an electronic device
JP4501855B2 (ja) 2005-12-22 2010-07-14 ソニー株式会社 画像信号処理装置、撮像装置、および画像信号処理方法、並びにコンピュータ・プログラム
JP2007180730A (ja) 2005-12-27 2007-07-12 Eastman Kodak Co デジタルカメラおよびデータ管理方法
JP2009522591A (ja) 2005-12-30 2009-06-11 ノキア コーポレイション 関心領域を追跡することによってビデオカメラの自動焦点を制御するための方法および装置
US7855786B2 (en) * 2006-01-09 2010-12-21 Bae Systems Spectral Solutions Llc Single camera multi-spectral imager
US7675080B2 (en) 2006-01-10 2010-03-09 Aptina Imaging Corp. Uniform color filter arrays in a moat
WO2007083579A1 (ja) 2006-01-20 2007-07-26 Matsushita Electric Industrial Co., Ltd. 複眼方式のカメラモジュール及びその製造方法
DE102006004802B4 (de) 2006-01-23 2008-09-25 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Bilderfassungssystem und Verfahren zur Herstellung mindestens eines Bilderfassungssystems
JP4834412B2 (ja) 2006-02-03 2011-12-14 富士フイルム株式会社 固体撮像装置およびこれを用いた電子内視鏡
US20070201859A1 (en) 2006-02-24 2007-08-30 Logitech Europe S.A. Method and system for use of 3D sensors in an image capture device
US7391572B2 (en) 2006-03-01 2008-06-24 International Business Machines Corporation Hybrid optical/electronic structures fabricated by a common molding process
US7924483B2 (en) 2006-03-06 2011-04-12 Smith Scott T Fused multi-array color image sensor
US7616254B2 (en) 2006-03-16 2009-11-10 Sony Corporation Simple method for calculating camera defocus from an image scene
US8360574B2 (en) 2006-03-20 2013-01-29 High Performance Optics, Inc. High performance selective light wavelength filtering providing improved contrast sensitivity
US7606484B1 (en) * 2006-03-23 2009-10-20 Flir Systems, Inc. Infrared and near-infrared camera hyperframing
JP4615468B2 (ja) 2006-03-23 2011-01-19 富士フイルム株式会社 撮影装置
US8044994B2 (en) 2006-04-04 2011-10-25 Mitsubishi Electric Research Laboratories, Inc. Method and system for decoding and displaying 3D light fields
US7916934B2 (en) 2006-04-04 2011-03-29 Mitsubishi Electric Research Laboratories, Inc. Method and system for acquiring, encoding, decoding and displaying 3D light fields
TW200740212A (en) 2006-04-10 2007-10-16 Sony Taiwan Ltd A stitching accuracy improvement method with lens distortion correction
CN101064780B (zh) 2006-04-30 2012-07-04 台湾新力国际股份有限公司 利用透镜失真校正的影像接合准确度改善方法及装置
US20070263114A1 (en) 2006-05-01 2007-11-15 Microalign Technologies, Inc. Ultra-thin digital imaging device of high resolution for mobile electronic devices and method of imaging
US7580620B2 (en) 2006-05-08 2009-08-25 Mitsubishi Electric Research Laboratories, Inc. Method for deblurring images using optimized temporal coding patterns
US9736346B2 (en) 2006-05-09 2017-08-15 Stereo Display, Inc Imaging system improving image resolution of the system with low resolution image sensor
US7889264B2 (en) 2006-05-12 2011-02-15 Ricoh Co., Ltd. End-to-end design of superresolution electro-optic imaging systems
US7916362B2 (en) 2006-05-22 2011-03-29 Eastman Kodak Company Image sensor with improved light sensitivity
US8139142B2 (en) 2006-06-01 2012-03-20 Microsoft Corporation Video manipulation of red, green, blue, distance (RGB-Z) data including segmentation, up-sampling, and background substitution techniques
IES20070229A2 (en) 2006-06-05 2007-10-03 Fotonation Vision Ltd Image acquisition method and apparatus
US20070177004A1 (en) 2006-06-08 2007-08-02 Timo Kolehmainen Image creating method and imaging device
JP4631811B2 (ja) 2006-06-12 2011-02-16 株式会社日立製作所 撮像装置
JP5106870B2 (ja) 2006-06-14 2012-12-26 株式会社東芝 固体撮像素子
FR2902530A1 (fr) 2006-06-19 2007-12-21 St Microelectronics Rousset Procede de fabrication de lentilles, notamment pour imageur comprenant un diaphragme
TWI362550B (en) 2007-06-21 2012-04-21 Ether Precision Inc The method for manufacturing the image captures unit
US7925117B2 (en) 2006-06-27 2011-04-12 Honeywell International Inc. Fusion of sensor data and synthetic data to form an integrated image
KR100793369B1 (ko) 2006-07-06 2008-01-11 삼성전자주식회사 분해능이 향상되는 이미지 센서 및 이를 이용한 이미지감지 방법
US20080024683A1 (en) 2006-07-31 2008-01-31 Niranjan Damera-Venkata Overlapped multi-projector system with dithering
JP2008039852A (ja) 2006-08-01 2008-02-21 Agc Techno Glass Co Ltd ガラス光学素子及びその製造方法
US20080030592A1 (en) 2006-08-01 2008-02-07 Eastman Kodak Company Producing digital image with different resolution portions
US8406562B2 (en) 2006-08-11 2013-03-26 Geo Semiconductor Inc. System and method for automated calibration and correction of display geometry and color
EP1892688B1 (fr) 2006-08-24 2010-09-01 Valeo Vision Procédé de détermination de passage d'un véhicule dans un goulet
US8306063B2 (en) 2006-08-29 2012-11-06 EXFO Services Assurance, Inc. Real-time transport protocol stream detection system and method
US8687087B2 (en) 2006-08-29 2014-04-01 Csr Technology Inc. Digital camera with selectively increased dynamic range by control of parameters during image acquisition
KR100746360B1 (ko) 2006-08-31 2007-08-06 삼성전기주식회사 스템퍼 제조방법
NO326372B1 (no) 2006-09-21 2008-11-17 Polight As Polymerlinse
WO2008039802A2 (en) 2006-09-25 2008-04-03 Ophthonix, Incorporated Method for correction of chromatic aberration and achromatic lens
JP4403162B2 (ja) 2006-09-29 2010-01-20 株式会社東芝 立体画像表示装置および立体画像の作製方法
US20080080028A1 (en) 2006-10-02 2008-04-03 Micron Technology, Inc. Imaging method, apparatus and system having extended depth of field
US8031258B2 (en) 2006-10-04 2011-10-04 Omnivision Technologies, Inc. Providing multiple video signals from single sensor
US8045280B2 (en) 2006-10-11 2011-10-25 Polight As Compact adjustable lens
US8883019B2 (en) 2006-10-11 2014-11-11 Polight As Method for manufacturing adjustable lens
US8073196B2 (en) 2006-10-16 2011-12-06 University Of Southern California Detection and tracking of moving objects from a moving platform in presence of strong parallax
US7702229B2 (en) 2006-10-18 2010-04-20 Eastman Kodak Company Lens array assisted focus detection
JP4349456B2 (ja) 2006-10-23 2009-10-21 ソニー株式会社 固体撮像素子
WO2008050904A1 (fr) 2006-10-25 2008-05-02 Tokyo Institute Of Technology Procédé de génération d'image dans un plan de focalisation virtuel haute résolution
US7888159B2 (en) 2006-10-26 2011-02-15 Omnivision Technologies, Inc. Image sensor having curved micro-mirrors over the sensing photodiode and method for fabricating
JP4452951B2 (ja) 2006-11-02 2010-04-21 富士フイルム株式会社 距離画像生成方法及びその装置
KR20080043106A (ko) 2006-11-13 2008-05-16 삼성전자주식회사 광학렌즈 및 그 제조방법
US8059162B2 (en) 2006-11-15 2011-11-15 Sony Corporation Imaging apparatus and method, and method for designing imaging apparatus
US20080118241A1 (en) 2006-11-16 2008-05-22 Tekolste Robert Control of stray light in camera systems employing an optics stack and associated methods
SG176440A1 (en) 2006-11-21 2011-12-29 Mantisvision Ltd 3d geometric modeling and 3d video content creation
KR20080047002A (ko) 2006-11-24 2008-05-28 엘지이노텍 주식회사 카메라모듈의 렌즈 어셈블리 및 그 제작 방법
JP4406937B2 (ja) * 2006-12-01 2010-02-03 富士フイルム株式会社 撮影装置
US20100265385A1 (en) 2009-04-18 2010-10-21 Knight Timothy J Light Field Camera Image, File and Configuration Data, and Methods of Using, Storing and Communicating Same
US8559705B2 (en) 2006-12-01 2013-10-15 Lytro, Inc. Interactive refocusing of electronic images
US8570426B2 (en) 2008-11-25 2013-10-29 Lytro, Inc. System of and method for video refocusing
JP5040493B2 (ja) 2006-12-04 2012-10-03 ソニー株式会社 撮像装置及び撮像方法
US8242426B2 (en) 2006-12-12 2012-08-14 Dolby Laboratories Licensing Corporation Electronic camera having multiple sensors for capturing high dynamic range images and related methods
US7646549B2 (en) 2006-12-18 2010-01-12 Xceed Imaging Ltd Imaging system and method for providing extended depth of focus, range extraction and super resolved imaging
US8213500B2 (en) 2006-12-21 2012-07-03 Sharp Laboratories Of America, Inc. Methods and systems for processing film grain noise
TWI324015B (en) 2006-12-22 2010-04-21 Ind Tech Res Inst Autofocus searching method
US8103111B2 (en) 2006-12-26 2012-01-24 Olympus Imaging Corp. Coding method, electronic camera, recording medium storing coded program, and decoding method
US20080158259A1 (en) 2006-12-28 2008-07-03 Texas Instruments Incorporated Image warping and lateral color correction
US20080158698A1 (en) 2006-12-29 2008-07-03 Chao-Chi Chang Lens barrel array and lens array and the method of making the same
US7973823B2 (en) 2006-12-29 2011-07-05 Nokia Corporation Method and system for image pre-processing
US20080165257A1 (en) 2007-01-05 2008-07-10 Micron Technology, Inc. Configurable pixel array system and method
US8655052B2 (en) 2007-01-26 2014-02-18 Intellectual Discovery Co., Ltd. Methodology for 3D scene reconstruction from 2D image sequences
JP5024992B2 (ja) 2007-02-02 2012-09-12 株式会社ジャパンディスプレイセントラル 表示装置
US7792423B2 (en) 2007-02-06 2010-09-07 Mitsubishi Electric Research Laboratories, Inc. 4D light field cameras
JP4969474B2 (ja) 2007-02-09 2012-07-04 オリンパスイメージング株式会社 復号方法、復号装置、及び復号プログラム
JP4386083B2 (ja) 2007-02-27 2009-12-16 トヨタ自動車株式会社 駐車支援装置
JP4153013B1 (ja) 2007-03-06 2008-09-17 シャープ株式会社 撮像レンズ、撮像ユニットおよびそれを備えた携帯型情報端末
US7859588B2 (en) 2007-03-09 2010-12-28 Eastman Kodak Company Method and apparatus for operating a dual lens camera to augment an image
US7683962B2 (en) 2007-03-09 2010-03-23 Eastman Kodak Company Camera using multiple lenses and image sensors in a rangefinder configuration to provide a range map
US7676146B2 (en) 2007-03-09 2010-03-09 Eastman Kodak Company Camera using multiple lenses and image sensors to provide improved focusing capability
US7729602B2 (en) 2007-03-09 2010-06-01 Eastman Kodak Company Camera using multiple lenses and image sensors operable in a default imaging mode
JP2008242658A (ja) 2007-03-26 2008-10-09 Funai Electric Co Ltd 立体物体の撮像装置
JP4915859B2 (ja) 2007-03-26 2012-04-11 船井電機株式会社 物体の距離導出装置
US7738017B2 (en) 2007-03-27 2010-06-15 Aptina Imaging Corporation Method and apparatus for automatic linear shift parallax correction for multi-array image systems
US8165418B2 (en) 2007-03-30 2012-04-24 Brother Kogyo Kabushiki Kaisha Image processor
US8493496B2 (en) 2007-04-02 2013-07-23 Primesense Ltd. Depth mapping using projected patterns
US8098941B2 (en) 2007-04-03 2012-01-17 Aptina Imaging Corporation Method and apparatus for parallelization of image compression encoders
US8213711B2 (en) 2007-04-03 2012-07-03 Her Majesty The Queen In Right Of Canada As Represented By The Minister Of Industry, Through The Communications Research Centre Canada Method and graphical user interface for modifying depth maps
CN101281282A (zh) 2007-04-04 2008-10-08 鸿富锦精密工业(深圳)有限公司 镜头模组
CN102017147B (zh) 2007-04-18 2014-01-29 因维萨热技术公司 用于光电装置的材料、系统和方法
US8467628B2 (en) 2007-04-24 2013-06-18 21 Ct, Inc. Method and system for fast dense stereoscopic ranging
KR100869219B1 (ko) 2007-05-03 2008-11-18 동부일렉트로닉스 주식회사 이미지 센서 및 그 제조방법
US8462220B2 (en) 2007-05-09 2013-06-11 Aptina Imaging Corporation Method and apparatus for improving low-light performance for small pixel image sensors
US7812869B2 (en) 2007-05-11 2010-10-12 Aptina Imaging Corporation Configurable pixel array system and method
JP4341695B2 (ja) 2007-05-17 2009-10-07 ソニー株式会社 画像入力処理装置、撮像信号処理回路、および、撮像信号のノイズ低減方法
JP4337911B2 (ja) 2007-05-24 2009-09-30 ソニー株式会社 撮像装置、撮像回路、および撮像方法
US20080298674A1 (en) 2007-05-29 2008-12-04 Image Masters Inc. Stereoscopic Panoramic imaging system
KR101210116B1 (ko) 2007-05-31 2012-12-07 아트피셜 머슬, 인코퍼레이션 유연한 전기활성 물질을 이용한 광학 시스템
US8290358B1 (en) 2007-06-25 2012-10-16 Adobe Systems Incorporated Methods and apparatus for light-field imaging
WO2009001255A1 (en) 2007-06-26 2008-12-31 Koninklijke Philips Electronics N.V. Method and system for encoding a 3d video signal, enclosed 3d video signal, method and system for decoder for a 3d video signal
WO2009008864A1 (en) 2007-07-12 2009-01-15 Thomson Licensing System and method for three-dimensional object reconstruction from two-dimensional images
US8125619B2 (en) 2007-07-25 2012-02-28 Eminent Electronic Technology Corp. Integrated ambient light sensor and distance sensor
JP5006727B2 (ja) 2007-07-26 2012-08-22 株式会社リコー 画像処理装置およびデジタルカメラ
US8559756B2 (en) 2007-08-06 2013-10-15 Adobe Systems Incorporated Radiance processing by demultiplexing in the frequency domain
EP2034338A1 (en) 2007-08-11 2009-03-11 ETH Zurich Liquid Lens System
EP2026563A1 (en) 2007-08-14 2009-02-18 Deutsche Thomson OHG System and method for detecting defective pixels
US7782364B2 (en) 2007-08-21 2010-08-24 Aptina Imaging Corporation Multi-array sensor with integrated sub-array for parallax detection and photometer functionality
US7973834B2 (en) 2007-09-24 2011-07-05 Jianwen Yang Electro-optical foveated imaging and tracking system
US20090086074A1 (en) 2007-09-27 2009-04-02 Omnivision Technologies, Inc. Dual mode camera solution apparatus, system, and method
US7940311B2 (en) 2007-10-03 2011-05-10 Nokia Corporation Multi-exposure pattern for enhancing dynamic range of images
JP5172267B2 (ja) * 2007-10-09 2013-03-27 富士フイルム株式会社 撮像装置
US8049289B2 (en) 2007-10-11 2011-11-01 Dongbu Hitek Co., Ltd. Image sensor and method for manufacturing the same
US7956924B2 (en) 2007-10-18 2011-06-07 Adobe Systems Incorporated Fast computational camera based on two arrays of lenses
US7920193B2 (en) 2007-10-23 2011-04-05 Aptina Imaging Corporation Methods, systems and apparatuses using barrier self-calibration for high dynamic range imagers
US7777804B2 (en) 2007-10-26 2010-08-17 Omnivision Technologies, Inc. High dynamic range sensor with reduced line memory for color interpolation
WO2009061814A2 (en) 2007-11-05 2009-05-14 University Of Florida Research Foundation, Inc. Lossless data compression and real-time decompression
US7852461B2 (en) 2007-11-15 2010-12-14 Microsoft International Holdings B.V. Dual mode depth imaging
US20090128644A1 (en) 2007-11-15 2009-05-21 Camp Jr William O System and method for generating a photograph
US8351685B2 (en) 2007-11-16 2013-01-08 Gwangju Institute Of Science And Technology Device and method for estimating depth map, and method for generating intermediate image and method for encoding multi-view video using the same
US8126279B2 (en) 2007-11-19 2012-02-28 The University Of Arizona Lifting-based view compensated compression and remote visualization of volume rendered images
KR20090055803A (ko) 2007-11-29 2009-06-03 광주과학기술원 다시점 깊이맵 생성 방법 및 장치, 다시점 영상에서의변이값 생성 방법
JP5010445B2 (ja) 2007-11-29 2012-08-29 パナソニック株式会社 マイクロレンズアレイ用金型の製造方法
GB2455316B (en) 2007-12-04 2012-08-15 Sony Corp Image processing apparatus and method
US8384803B2 (en) 2007-12-13 2013-02-26 Keigo Iizuka Camera system and method for amalgamating images to create an omni-focused image
TWI353778B (en) 2007-12-21 2011-12-01 Ind Tech Res Inst Moving object detection apparatus and method
US7880807B2 (en) 2007-12-26 2011-02-01 Sony Ericsson Mobile Communications Ab Camera system with mirror arrangement for generating self-portrait panoramic pictures
US20110031381A1 (en) 2007-12-28 2011-02-10 Hiok-Nam Tay Light guide array for an image sensor
TWI362628B (en) 2007-12-28 2012-04-21 Ind Tech Res Inst Methof for producing an image with depth by using 2d image
JP4413261B2 (ja) 2008-01-10 2010-02-10 シャープ株式会社 撮像装置及び光軸制御方法
JP5198295B2 (ja) 2008-01-15 2013-05-15 富士フイルム株式会社 撮像素子の位置調整方法、カメラモジュール製造方法及び装置、カメラモジュール
US7962033B2 (en) 2008-01-23 2011-06-14 Adobe Systems Incorporated Methods and apparatus for full-resolution light-field capture and rendering
US8189065B2 (en) 2008-01-23 2012-05-29 Adobe Systems Incorporated Methods and apparatus for full-resolution light-field capture and rendering
JP4956452B2 (ja) 2008-01-25 2012-06-20 富士重工業株式会社 車両用環境認識装置
US8824833B2 (en) 2008-02-01 2014-09-02 Omnivision Technologies, Inc. Image data fusion systems and methods
GB0802290D0 (en) 2008-02-08 2008-03-12 Univ Kent Canterbury Camera adapter based optical imaging apparatus
US8319301B2 (en) 2008-02-11 2012-11-27 Omnivision Technologies, Inc. Self-aligned filter for an image sensor
JP2009206922A (ja) 2008-02-28 2009-09-10 Funai Electric Co Ltd 複眼撮像装置
US9094675B2 (en) 2008-02-29 2015-07-28 Disney Enterprises Inc. Processing image data from multiple cameras for motion pictures
CN101520532A (zh) 2008-02-29 2009-09-02 鸿富锦精密工业(深圳)有限公司 复合镜片
WO2009111499A2 (en) 2008-03-03 2009-09-11 Videoiq, Inc. Dynamic object classification
US8098955B2 (en) 2008-03-25 2012-01-17 Point Grey Research Inc. Efficient selection and application of regions of interest in digital imaging
JPWO2009119229A1 (ja) 2008-03-26 2011-07-21 コニカミノルタホールディングス株式会社 3次元撮像装置及び3次元撮像装置の校正方法
US8497905B2 (en) 2008-04-11 2013-07-30 nearmap australia pty ltd. Systems and methods of capturing large area images in detail including cascaded cameras and/or calibration features
US8259208B2 (en) 2008-04-15 2012-09-04 Sony Corporation Method and apparatus for performing touch-based adjustments within imaging devices
US7843554B2 (en) 2008-04-25 2010-11-30 Rockwell Collins, Inc. High dynamic range sensor system and method
US8155456B2 (en) 2008-04-29 2012-04-10 Adobe Systems Incorporated Method and apparatus for block-based compression of light-field images
US8280194B2 (en) 2008-04-29 2012-10-02 Sony Corporation Reduced hardware implementation for a two-picture depth map algorithm
US8724921B2 (en) 2008-05-05 2014-05-13 Aptina Imaging Corporation Method of capturing high dynamic range images with objects in the scene
EP2283644A4 (en) 2008-05-09 2011-10-26 Ecole Polytech PICTURE SENSOR WITH NONLINEAR REACTION
JP2009273035A (ja) 2008-05-09 2009-11-19 Toshiba Corp 画像圧縮装置、画像伸張装置及び画像処理装置
US8208543B2 (en) 2008-05-19 2012-06-26 Microsoft Corporation Quantization and differential coding of alpha image data
US8866920B2 (en) 2008-05-20 2014-10-21 Pelican Imaging Corporation Capturing and processing of images using monolithic camera array with heterogeneous imagers
JP2011523538A (ja) 2008-05-20 2011-08-11 ペリカン イメージング コーポレイション 異なる種類の撮像装置を有するモノリシックカメラアレイを用いた画像の撮像および処理
US8442355B2 (en) 2008-05-23 2013-05-14 Samsung Electronics Co., Ltd. System and method for generating a multi-dimensional image
US8125559B2 (en) 2008-05-25 2012-02-28 Avistar Communications Corporation Image formation for large photosensor array surfaces
US8131097B2 (en) 2008-05-28 2012-03-06 Aptina Imaging Corporation Method and apparatus for extended depth-of-field image restoration
US8244058B1 (en) 2008-05-30 2012-08-14 Adobe Systems Incorporated Method and apparatus for managing artifacts in frequency domain processing of light-field images
JP2009300268A (ja) 2008-06-13 2009-12-24 Nippon Hoso Kyokai <Nhk> 3次元情報検出装置
KR20100002032A (ko) 2008-06-24 2010-01-06 삼성전자주식회사 영상 생성 방법, 영상 처리 방법, 및 그 장치
JPWO2009157273A1 (ja) 2008-06-25 2011-12-08 コニカミノルタオプト株式会社 撮像光学系及び撮像用レンズの製造方法
US7710667B2 (en) 2008-06-25 2010-05-04 Aptina Imaging Corp. Imaging module with symmetrical lens system and method of manufacture
KR101000531B1 (ko) * 2008-06-26 2010-12-14 에스디씨마이크로 주식회사 데이터 전송 범위가 증대되는 무선랜을 이용한 씨씨티브이관리시스템
US7916396B2 (en) 2008-06-27 2011-03-29 Micron Technology, Inc. Lens master devices, lens structures, imaging devices, and methods and apparatuses of making the same
US8326069B2 (en) 2008-06-30 2012-12-04 Intel Corporation Computing higher resolution images from multiple lower resolution images
US7773317B2 (en) 2008-07-01 2010-08-10 Aptina Imaging Corp. Lens system with symmetrical optics
US7920339B2 (en) 2008-07-02 2011-04-05 Aptina Imaging Corporation Method and apparatus providing singlet wafer lens system with field flattener
US8456517B2 (en) 2008-07-09 2013-06-04 Primesense Ltd. Integrated processor for 3D mapping
KR101445185B1 (ko) 2008-07-10 2014-09-30 삼성전자주식회사 복수 개의 영상촬영유닛을 구비한 플렉시블 영상촬영장치및 그 제조방법
WO2010015086A1 (en) 2008-08-06 2010-02-11 Creaform Inc. System for adaptive three-dimensional scanning of surface characteristics
CN101656259A (zh) 2008-08-20 2010-02-24 鸿富锦精密工业(深圳)有限公司 影像感测器封装结构、封装方法及相机模组
WO2010021666A1 (en) 2008-08-20 2010-02-25 Thomson Licensing Refined depth map
US7924312B2 (en) 2008-08-22 2011-04-12 Fluke Corporation Infrared and visible-light image registration
EP2329315A4 (en) 2008-09-01 2012-01-18 Lensvector Inc PREPARATION OF OPTOELECTRONIC LIQUID CRYSTAL COMPONENTS AT WAF LEVEL
JP5105482B2 (ja) * 2008-09-01 2012-12-26 船井電機株式会社 光学的条件設計方法及び複眼撮像装置
US8098297B2 (en) 2008-09-03 2012-01-17 Sony Corporation Pre- and post-shutter signal image capture and sort for digital camera
KR20100028344A (ko) 2008-09-04 2010-03-12 삼성전자주식회사 휴대단말의 영상 편집 방법 및 장치
JP5238429B2 (ja) 2008-09-25 2013-07-17 株式会社東芝 立体映像撮影装置および立体映像撮影システム
US8553093B2 (en) 2008-09-30 2013-10-08 Sony Corporation Method and apparatus for super-resolution imaging using digital imaging devices
US9064476B2 (en) 2008-10-04 2015-06-23 Microsoft Technology Licensing, Llc Image super-resolution using gradient profile prior
US8310525B2 (en) 2008-10-07 2012-11-13 Seiko Epson Corporation One-touch projector alignment for 3D stereo display
JP5547739B2 (ja) 2008-10-15 2014-07-16 イノベイティブ テクノロジー ディストリビューターズ エルエルシー オプティカルフローの決定のためのデジタル処理方法およびシステム
JP2010096723A (ja) 2008-10-20 2010-04-30 Funai Electric Co Ltd 物体の距離導出装置
US8436909B2 (en) 2008-10-21 2013-05-07 Stmicroelectronics S.R.L. Compound camera sensor and related method of processing digital images
US8913657B2 (en) 2008-10-27 2014-12-16 Lg Electronics Inc. Virtual view image synthesis method and apparatus
US8063975B2 (en) 2008-10-29 2011-11-22 Jabil Circuit, Inc. Positioning wafer lenses on electronic imagers
KR101502597B1 (ko) 2008-11-13 2015-03-13 삼성전자주식회사 고심도 입체 영상 표시가 가능한 디스플레이 장치 및 방법
WO2010057081A1 (en) 2008-11-14 2010-05-20 The Scripps Research Institute Image analysis platform for identifying artifacts in samples and laboratory consumables
AU2008246243B2 (en) 2008-11-19 2011-12-22 Canon Kabushiki Kaisha DVC as generic file format for plenoptic camera
WO2010077625A1 (en) 2008-12-08 2010-07-08 Refocus Imaging, Inc. Light field data acquisition devices, and methods of using and manufacturing same
US8013904B2 (en) 2008-12-09 2011-09-06 Seiko Epson Corporation View projection matrix based high performance low latency display pipeline
KR101200490B1 (ko) 2008-12-10 2012-11-12 한국전자통신연구원 영상 정합 장치 및 방법
US8149323B2 (en) 2008-12-18 2012-04-03 Qualcomm Incorporated System and method to autofocus assisted by autoexposure control
JP4631966B2 (ja) 2008-12-22 2011-02-16 ソニー株式会社 画像処理装置、および画像処理方法、並びにプログラム
CN101770060B (zh) 2008-12-27 2014-03-26 鸿富锦精密工业(深圳)有限公司 相机模组及其组装方法
US8405742B2 (en) 2008-12-30 2013-03-26 Massachusetts Institute Of Technology Processing images having different focus
US8259212B2 (en) 2009-01-05 2012-09-04 Applied Quantum Technologies, Inc. Multiscale optical system
JP4883223B2 (ja) 2009-01-09 2012-02-22 コニカミノルタホールディングス株式会社 動きベクトル生成装置および動きベクトル生成方法
WO2010081010A2 (en) 2009-01-09 2010-07-15 New York University Methods, computer-accessible medium and systems for facilitating dark flash photography
US20100177411A1 (en) 2009-01-09 2010-07-15 Shashikant Hegde Wafer level lens replication on micro-electrical-mechanical systems
US8189089B1 (en) 2009-01-20 2012-05-29 Adobe Systems Incorporated Methods and apparatus for reducing plenoptic camera artifacts
US8315476B1 (en) 2009-01-20 2012-11-20 Adobe Systems Incorporated Super-resolution with the focused plenoptic camera
US8300108B2 (en) 2009-02-02 2012-10-30 L-3 Communications Cincinnati Electronics Corporation Multi-channel imaging devices comprising unit cells
US20100194860A1 (en) 2009-02-03 2010-08-05 Bit Cauldron Corporation Method of stereoscopic 3d image capture using a mobile device, cradle or dongle
US8290301B2 (en) 2009-02-06 2012-10-16 Raytheon Company Optimized imaging system for collection of high resolution imagery
US8761491B2 (en) 2009-02-06 2014-06-24 Himax Technologies Limited Stereo-matching processor using belief propagation
KR101776955B1 (ko) 2009-02-10 2017-09-08 소니 주식회사 고체 촬상 장치와 그 제조 방법, 및 전자 기기
WO2010095440A1 (ja) 2009-02-20 2010-08-26 パナソニック株式会社 記録媒体、再生装置、及び集積回路
US8520970B2 (en) 2010-04-23 2013-08-27 Flir Systems Ab Infrared resolution and contrast enhancement with fusion
KR20100099896A (ko) 2009-03-04 2010-09-15 삼성전자주식회사 메타데이터 생성 방법 및 장치, 그 메타데이터를 이용하여 영상을 처리하는 방법 및 장치
US8207759B2 (en) 2009-03-12 2012-06-26 Fairchild Semiconductor Corporation MIPI analog switch for automatic selection of multiple inputs based on clock voltages
CN105681633B (zh) 2009-03-19 2019-01-18 数字光学公司 双传感器照相机及其方法
US8106949B2 (en) 2009-03-26 2012-01-31 Seiko Epson Corporation Small memory footprint light transport matrix capture
US8450821B2 (en) 2009-03-26 2013-05-28 Micron Technology, Inc. Method and apparatus providing combined spacer and optical lens element
US7901095B2 (en) 2009-03-27 2011-03-08 Seiko Epson Corporation Resolution scalable view projection
JP4529010B1 (ja) 2009-03-30 2010-08-25 シャープ株式会社 撮像装置
JP5222205B2 (ja) 2009-04-03 2013-06-26 Kddi株式会社 画像処理装置、方法及びプログラム
EP2417560B1 (en) 2009-04-07 2017-11-29 Nextvision Stabilized Systems Ltd Video motion compensation and stabilization gimbaled imaging system
US20100259610A1 (en) 2009-04-08 2010-10-14 Celsia, Llc Two-Dimensional Display Synced with Real World Object Movement
US8294099B2 (en) * 2009-04-10 2012-10-23 Bae Systems Information And Electronic Systems Integration Inc. On-wafer butted microbolometer imaging array
US8717417B2 (en) 2009-04-16 2014-05-06 Primesense Ltd. Three-dimensional mapping and imaging
JP5463718B2 (ja) 2009-04-16 2014-04-09 ソニー株式会社 撮像装置
US20120249550A1 (en) 2009-04-18 2012-10-04 Lytro, Inc. Selective Transmission of Image Data Based on Device Attributes
US8908058B2 (en) 2009-04-18 2014-12-09 Lytro, Inc. Storage and transmission of pictures including multiple frames
EP2244484B1 (en) 2009-04-22 2012-03-28 Raytrix GmbH Digital imaging method for synthesizing an image using data recorded with a plenoptic camera
CN101527046B (zh) 2009-04-28 2012-09-05 青岛海信数字多媒体技术国家重点实验室有限公司 一种运动检测方法、装置和系统
KR101671021B1 (ko) * 2009-04-30 2016-11-10 삼성전자주식회사 스테레오스코픽 영상 데이터 전송 장치 및 방법
US8271544B2 (en) 2009-05-01 2012-09-18 Creative Technology Ltd Data file having more than one mode of operation
DE102009003110A1 (de) 2009-05-14 2010-11-18 Robert Bosch Gmbh Bildverarbeitungsverfahren zur Bestimmung von Tiefeninformation aus wenigstens zwei mittels eines Stereokamerasystems aufgenommenen Eingangsbildern
US8203633B2 (en) 2009-05-27 2012-06-19 Omnivision Technologies, Inc. Four-channel color filter array pattern
US8766808B2 (en) 2010-03-09 2014-07-01 Flir Systems, Inc. Imager with multiple sensor arrays
KR20100130423A (ko) 2009-06-03 2010-12-13 삼성전자주식회사 웨이퍼-레벨 렌즈 모듈 및 이를 구비하는 촬상 모듈
CN101931742B (zh) 2009-06-18 2013-04-24 鸿富锦精密工业(深圳)有限公司 影像感测模组及取像模组
US20100321640A1 (en) 2009-06-22 2010-12-23 Industrial Technology Research Institute Projection display chip
JP5254893B2 (ja) 2009-06-26 2013-08-07 キヤノン株式会社 画像変換方法及び装置並びにパターン識別方法及び装置
WO2011008443A2 (en) 2009-06-29 2011-01-20 Lensvector Inc. Wafer level camera module with active optical element
JP2011030184A (ja) 2009-07-01 2011-02-10 Sony Corp 画像処理装置、及び、画像処理方法
US8212197B2 (en) 2009-07-02 2012-07-03 Xerox Corporation Image sensor with integration time compensation
JP2011017764A (ja) 2009-07-07 2011-01-27 Konica Minolta Opto Inc 撮像レンズ,撮像装置及び携帯端末
US8345144B1 (en) 2009-07-15 2013-01-01 Adobe Systems Incorporated Methods and apparatus for rich image capture with focused plenoptic cameras
US20110019243A1 (en) 2009-07-21 2011-01-27 Constant Jr Henry J Stereoscopic form reader
CN101964866B (zh) 2009-07-24 2013-03-20 鸿富锦精密工业(深圳)有限公司 计算摄像型数码相机
GB0912970D0 (en) 2009-07-27 2009-09-02 St Microelectronics Res & Dev Improvements in or relating to a sensor and sensor system for a camera
US20110025830A1 (en) 2009-07-31 2011-02-03 3Dmedia Corporation Methods, systems, and computer-readable storage media for generating stereoscopic content via depth map creation
US8577183B2 (en) 2009-08-05 2013-11-05 Raytheon Company Resolution on demand
US8773652B2 (en) 2009-08-11 2014-07-08 Ether Precision, Inc. Method and device for aligning a lens with an optical system
US8320666B2 (en) 2009-08-14 2012-11-27 Genesis Group Inc. Real-time image and video matting
JP2011044801A (ja) 2009-08-19 2011-03-03 Toshiba Corp 画像処理装置
US8154632B2 (en) 2009-08-24 2012-04-10 Lifesize Communications, Inc. Detection of defective pixels in an image sensor
KR101680300B1 (ko) 2009-08-31 2016-11-28 삼성전자주식회사 액체 렌즈 및 그 제조방법
US9274699B2 (en) 2009-09-03 2016-03-01 Obscura Digital User interface for a large scale multi-user, multi-touch system
US8411146B2 (en) 2009-09-04 2013-04-02 Lockheed Martin Corporation Single camera color and infrared polarimetric imaging
FR2950153B1 (fr) 2009-09-15 2011-12-23 Commissariat Energie Atomique Dispositif optique a membrane deformable a actionnement piezoelectrique
US20140076336A1 (en) 2009-09-17 2014-03-20 Ascentia Health, Inc. Ear insert for relief of tmj discomfort and headaches
US8754941B1 (en) 2009-09-22 2014-06-17 Altia Systems, Inc. Multi-imager video camera with frame-by-frame view switching
RU2551789C2 (ru) 2009-10-02 2015-05-27 Конинклейке Филипс Электроникс Н.В. Выбор точек обзора для формирования дополнительных видов в 3d видео
DE102009049387B4 (de) 2009-10-14 2016-05-25 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Vorrichtung, Bildverarbeitungsvorrichtung und Verfahren zur optischen Abbildung
US8199165B2 (en) 2009-10-14 2012-06-12 Hewlett-Packard Development Company, L.P. Methods and systems for object segmentation in digital images
US10198792B2 (en) 2009-10-14 2019-02-05 Dolby Laboratories Licensing Corporation Method and devices for depth map processing
US8502909B2 (en) 2009-10-19 2013-08-06 Pixar Super light-field lens
US20110207074A1 (en) 2009-10-26 2011-08-25 Olaf Andrew Hall-Holt Dental imaging system and method
JP2013509804A (ja) 2009-10-30 2013-03-14 ヒューレット−パッカード デベロップメント カンパニー エル.ピー. 立体表示システム
WO2011053711A1 (en) 2009-10-30 2011-05-05 Invisage Technologies, Inc. Systems and methods for color binning
WO2011055655A1 (ja) 2009-11-05 2011-05-12 コニカミノルタオプト株式会社 撮像装置、光学ユニット、ウエハレンズ積層体及びウエハレンズ積層体の製造方法
JP5214811B2 (ja) 2009-11-13 2013-06-19 富士フイルム株式会社 測距装置、測距方法、測距プログラムおよび測距システムならびに撮像装置
JP5399215B2 (ja) 2009-11-18 2014-01-29 シャープ株式会社 多眼カメラ装置および電子情報機器
US8643701B2 (en) 2009-11-18 2014-02-04 University Of Illinois At Urbana-Champaign System for executing 3D propagation for depth image-based rendering
EP2502115A4 (en) 2009-11-20 2013-11-06 Pelican Imaging Corp RECORDING AND PROCESSING IMAGES THROUGH A MONOLITHIC CAMERA ARRAY WITH HETEROGENIC IMAGE CONVERTER
WO2011066275A2 (en) 2009-11-25 2011-06-03 Massachusetts Institute Of Technology Actively addressable aperture light field camera
KR101608970B1 (ko) 2009-11-27 2016-04-05 삼성전자주식회사 광 필드 데이터를 이용한 영상 처리 장치 및 방법
US8730338B2 (en) 2009-12-01 2014-05-20 Nokia Corporation Set of camera modules hinged on a body and functionally connected to a single actuator
US8400555B1 (en) 2009-12-01 2013-03-19 Adobe Systems Incorporated Focused plenoptic camera employing microlenses with different focal lengths
JP5446797B2 (ja) 2009-12-04 2014-03-19 株式会社リコー 撮像装置
US8446492B2 (en) 2009-12-10 2013-05-21 Honda Motor Co., Ltd. Image capturing device, method of searching for occlusion region, and program
JP5387377B2 (ja) 2009-12-14 2014-01-15 ソニー株式会社 画像処理装置、および画像処理方法、並びにプログラム
WO2011081646A1 (en) 2009-12-15 2011-07-07 Thomson Licensing Stereo-image quality and disparity/depth indications
US20110153248A1 (en) 2009-12-23 2011-06-23 Yeming Gu Ophthalmic quality metric system
US8885067B2 (en) 2009-12-24 2014-11-11 Sharp Kabushiki Kaisha Multocular image pickup apparatus and multocular image pickup method
JP4983905B2 (ja) 2009-12-25 2012-07-25 カシオ計算機株式会社 撮像装置、3dモデリングデータ生成方法、および、プログラム
KR101643607B1 (ko) 2009-12-30 2016-08-10 삼성전자주식회사 영상 데이터 생성 방법 및 장치
CN102117576A (zh) 2009-12-31 2011-07-06 鸿富锦精密工业(深圳)有限公司 电子相框
CN102118551A (zh) 2009-12-31 2011-07-06 鸿富锦精密工业(深圳)有限公司 成像装置
CN102131044B (zh) 2010-01-20 2014-03-26 鸿富锦精密工业(深圳)有限公司 相机模组
US8649008B2 (en) 2010-02-04 2014-02-11 University Of Southern California Combined spectral and polarimetry imaging and diagnostics
US8593512B2 (en) 2010-02-05 2013-11-26 Creative Technology Ltd Device and method for scanning an object on a working surface
US8326142B2 (en) 2010-02-12 2012-12-04 Sri International Optical image systems
JP5387856B2 (ja) 2010-02-16 2014-01-15 ソニー株式会社 画像処理装置、画像処理方法、画像処理プログラムおよび撮像装置
US8648918B2 (en) 2010-02-18 2014-02-11 Sony Corporation Method and system for obtaining a point spread function using motion information
US20130033579A1 (en) 2010-02-19 2013-02-07 Dual Aperture Inc. Processing multi-aperture image data
KR101802238B1 (ko) 2010-02-23 2017-11-29 삼성전자주식회사 휴대용 단말기에서 입체 영상 데이터를 생성하기 위한 장치 및 방법
WO2011105814A2 (ko) 2010-02-23 2011-09-01 삼성전자 주식회사 다시점 정지 영상 서비스 제공 방법 및 그 장치, 다시점 정지 영상 서비스 수신 방법 및 그 장치
CN102906623A (zh) 2010-02-28 2013-01-30 奥斯特豪特集团有限公司 交互式头戴目镜上的本地广告内容
US8860833B2 (en) 2010-03-03 2014-10-14 Adobe Systems Incorporated Blended rendering of focused plenoptic camera data
US20110222757A1 (en) 2010-03-10 2011-09-15 Gbo 3D Technology Pte. Ltd. Systems and methods for 2D image and spatial data capture for 3D stereo imaging
US20110221950A1 (en) 2010-03-12 2011-09-15 Doeke Jolt Oostra Camera device, wafer scale package
JP2013522681A (ja) 2010-03-17 2013-06-13 ペリカン イメージング コーポレーション 結像レンズアレイのマスタを作製する方法
WO2011116345A1 (en) 2010-03-19 2011-09-22 Invisage Technologies, Inc. Dark current reduction in image sensors via dynamic electrical biasing
CN102282857B (zh) 2010-03-19 2014-03-12 富士胶片株式会社 拍摄装置以及方法
CN102428707B (zh) 2010-03-19 2015-03-11 松下电器产业株式会社 立体视用图像对位装置和立体视用图像对位方法
US8285033B2 (en) 2010-04-01 2012-10-09 Seiko Epson Corporation Bi-affinity filter: a bilateral type filter for color images
US9001227B2 (en) 2010-04-05 2015-04-07 Qualcomm Incorporated Combining data from multiple image sensors
US8896668B2 (en) 2010-04-05 2014-11-25 Qualcomm Incorporated Combining data from multiple image sensors
US8600186B2 (en) 2010-04-26 2013-12-03 City University Of Hong Kong Well focused catadioptric image acquisition
US9053573B2 (en) 2010-04-29 2015-06-09 Personify, Inc. Systems and methods for generating a virtual camera viewpoint for an image
US20110267264A1 (en) 2010-04-29 2011-11-03 Mccarthy John Display system with multiple optical sensors
US20130250150A1 (en) 2010-05-03 2013-09-26 Michael R. Malone Devices and methods for high-resolution image and video capture
US9256974B1 (en) 2010-05-04 2016-02-09 Stephen P Hines 3-D motion-parallax portable display software application
US8885890B2 (en) 2010-05-07 2014-11-11 Microsoft Corporation Depth map confidence filtering
KR20110124473A (ko) 2010-05-11 2011-11-17 삼성전자주식회사 다중시점 영상을 위한 3차원 영상 생성 장치 및 방법
KR101756910B1 (ko) 2010-05-11 2017-07-26 삼성전자주식회사 감쇠 패턴을 포함하는 마스크를 이용한 광 필드 영상 처리 장치 및 방법
JP5545016B2 (ja) 2010-05-12 2014-07-09 ソニー株式会社 撮像装置
US20130147979A1 (en) 2010-05-12 2013-06-13 Pelican Imaging Corporation Systems and methods for extending dynamic range of imager arrays by controlling pixel analog gain
US20120012748A1 (en) 2010-05-12 2012-01-19 Pelican Imaging Corporation Architectures for imager arrays and array cameras
WO2011142774A1 (en) 2010-05-14 2011-11-17 Omnivision Technologies, Inc. Alternative color image array and associated methods
US8576293B2 (en) 2010-05-18 2013-11-05 Aptina Imaging Corporation Multi-channel imager
US8602887B2 (en) 2010-06-03 2013-12-10 Microsoft Corporation Synthesis of information from multiple audiovisual sources
US20120062697A1 (en) 2010-06-09 2012-03-15 Chemimage Corporation Hyperspectral imaging sensor for tracking moving targets
US20110310980A1 (en) 2010-06-22 2011-12-22 Qualcomm Mems Technologies, Inc. Apparatus and methods for processing frames of video data across a display interface using a block-based encoding scheme and a tag id
KR20120000485A (ko) 2010-06-25 2012-01-02 삼성전자주식회사 예측 모드를 이용한 깊이 영상 부호화 장치 및 방법
EP2403234A1 (en) 2010-06-29 2012-01-04 Koninklijke Philips Electronics N.V. Method and system for constructing a compound image from data obtained by an array of image capturing devices
CN101883291B (zh) 2010-06-29 2012-12-19 上海大学 感兴趣区域增强的视点绘制方法
US8493432B2 (en) 2010-06-29 2013-07-23 Mitsubishi Electric Research Laboratories, Inc. Digital refocusing for wide-angle images using axial-cone cameras
GB2482022A (en) 2010-07-16 2012-01-18 St Microelectronics Res & Dev Method for measuring resolution and aberration of lens and sensor
US9406132B2 (en) 2010-07-16 2016-08-02 Qualcomm Incorporated Vision-based quality metric for three dimensional video
US8386964B2 (en) 2010-07-21 2013-02-26 Microsoft Corporation Interactive image matting
US20120019700A1 (en) 2010-07-26 2012-01-26 American Technologies Network Corporation Optical system with automatic mixing of daylight and thermal vision digital video signals
US20120026342A1 (en) 2010-07-27 2012-02-02 Xiaoguang Yu Electronic system communicating with image sensor
US20120026451A1 (en) 2010-07-29 2012-02-02 Lensvector Inc. Tunable liquid crystal lens with single sided contacts
CN102375199B (zh) 2010-08-11 2015-06-03 鸿富锦精密工业(深圳)有限公司 相机模组
US8428342B2 (en) 2010-08-12 2013-04-23 At&T Intellectual Property I, L.P. Apparatus and method for providing three dimensional media content
US8836793B1 (en) 2010-08-13 2014-09-16 Opto-Knowledge Systems, Inc. True color night vision (TCNV) fusion
US8493482B2 (en) 2010-08-18 2013-07-23 Apple Inc. Dual image sensor image processing system and method
US8724000B2 (en) 2010-08-27 2014-05-13 Adobe Systems Incorporated Methods and apparatus for super-resolution in integral photography
US8749694B2 (en) 2010-08-27 2014-06-10 Adobe Systems Incorporated Methods and apparatus for rendering focused plenoptic camera data using super-resolved demosaicing
US8665341B2 (en) 2010-08-27 2014-03-04 Adobe Systems Incorporated Methods and apparatus for rendering output images with simulated artistic effects from focused plenoptic camera data
GB2483434A (en) 2010-08-31 2012-03-14 Sony Corp Detecting stereoscopic disparity by comparison with subset of pixel change points
US20120056982A1 (en) 2010-09-08 2012-03-08 Microsoft Corporation Depth camera based on structured light and stereo vision
US9013550B2 (en) 2010-09-09 2015-04-21 Qualcomm Incorporated Online reference generation and tracking for multi-user augmented reality
US9013634B2 (en) 2010-09-14 2015-04-21 Adobe Systems Incorporated Methods and apparatus for video completion
KR20130139242A (ko) 2010-09-14 2013-12-20 톰슨 라이센싱 차폐 데이터의 압축 방법 및 장치
US8780251B2 (en) 2010-09-20 2014-07-15 Canon Kabushiki Kaisha Image capture with focus adjustment
JP5392415B2 (ja) 2010-09-22 2014-01-22 富士通株式会社 ステレオ画像生成装置、ステレオ画像生成方法及びステレオ画像生成用コンピュータプログラム
US20120086803A1 (en) 2010-10-11 2012-04-12 Malzbender Thomas G Method and system for distance estimation using projected symbol sequences
US20140192238A1 (en) 2010-10-24 2014-07-10 Linx Computational Imaging Ltd. System and Method for Imaging and Image Processing
JP5657343B2 (ja) 2010-10-28 2015-01-21 株式会社ザクティ 電子機器
US9876953B2 (en) 2010-10-29 2018-01-23 Ecole Polytechnique Federale De Lausanne (Epfl) Omnidirectional sensor array system
US9137503B2 (en) 2010-11-03 2015-09-15 Sony Corporation Lens and color filter arrangement, super-resolution camera system and method
US9065991B2 (en) 2010-11-04 2015-06-23 Lensvector Inc. Methods of adjustment free manufacture of focus free camera modules
US20120113232A1 (en) 2010-11-10 2012-05-10 Sony Pictures Technologies Inc. Multiple camera system and method for selectable interaxial separation
MY150361A (en) 2010-12-03 2013-12-31 Mimos Berhad Method of image segmentation using intensity and depth information
WO2012078126A1 (en) 2010-12-08 2012-06-14 Thomson Licensing System and method for trinocular depth acquisition with triangular sensor
US8878950B2 (en) 2010-12-14 2014-11-04 Pelican Imaging Corporation Systems and methods for synthesizing high resolution images using super-resolution processes
JP5963422B2 (ja) 2010-12-17 2016-08-03 キヤノン株式会社 撮像装置、表示装置、コンピュータプログラムおよび立体像表示システム
US9177381B2 (en) 2010-12-22 2015-11-03 Nani Holdings IP, LLC Depth estimate determination, systems and methods
US8682107B2 (en) 2010-12-22 2014-03-25 Electronics And Telecommunications Research Institute Apparatus and method for creating 3D content for oriental painting
US8565709B2 (en) 2010-12-30 2013-10-22 Apple Inc. Digital signal filter
JP5699609B2 (ja) 2011-01-06 2015-04-15 ソニー株式会社 画像処理装置および画像処理方法
WO2012100230A1 (en) 2011-01-20 2012-07-26 Fivefocal, Llc Passively athermalized infrared imaging system and methods of manufacturing same
US8717467B2 (en) 2011-01-25 2014-05-06 Aptina Imaging Corporation Imaging systems with array cameras for depth sensing
US8581995B2 (en) 2011-01-25 2013-11-12 Aptina Imaging Corporation Method and apparatus for parallax correction in fused array imaging systems
JP5594477B2 (ja) 2011-01-26 2014-09-24 Nltテクノロジー株式会社 画像表示装置、画像表示方法、及びプログラム
CN103415860B (zh) 2011-01-27 2019-07-12 苹果公司 确定第一和第二图像间的对应关系的方法以及确定摄像机姿态的方法
US20120200726A1 (en) 2011-02-09 2012-08-09 Research In Motion Limited Method of Controlling the Depth of Field for a Small Sensor Camera Using an Extension for EDOF
CA2767023C (en) 2011-02-09 2014-09-09 Research In Motion Limited Increased low light sensitivity for image sensors by combining quantum dot sensitivity to visible and infrared light
US8698885B2 (en) 2011-02-14 2014-04-15 Intuitive Surgical Operations, Inc. Methods and apparatus for demosaicing images with highly correlated color channels
US20140176592A1 (en) 2011-02-15 2014-06-26 Lytro, Inc. Configuring two-dimensional image processing based on light-field parameters
US8406548B2 (en) 2011-02-28 2013-03-26 Sony Corporation Method and apparatus for performing a blur rendering process on an image
EP2683166B1 (en) 2011-02-28 2017-12-13 Fujifilm Corporation Color imaging device
US8537245B2 (en) 2011-03-04 2013-09-17 Hand Held Products, Inc. Imaging and decoding device with quantum dot imager
CA2769358C (en) 2011-03-08 2016-06-07 Research In Motion Limited Quantum dot image sensor with dummy pixels used for intensity calculations
US9565449B2 (en) 2011-03-10 2017-02-07 Qualcomm Incorporated Coding multiview video plus depth content
KR101792501B1 (ko) 2011-03-16 2017-11-21 한국전자통신연구원 특징기반의 스테레오 매칭 방법 및 장치
US20120249853A1 (en) 2011-03-28 2012-10-04 Marc Krolczyk Digital camera for reviewing related images
US8824821B2 (en) 2011-03-28 2014-09-02 Sony Corporation Method and apparatus for performing user inspired visual effects rendering on an image
US9030528B2 (en) 2011-04-04 2015-05-12 Apple Inc. Multi-zone imaging sensor and lens array
FR2974449A1 (fr) 2011-04-22 2012-10-26 Commissariat Energie Atomique Circuit integre imageur et dispositif de capture d'images stereoscopiques
US20120274626A1 (en) 2011-04-29 2012-11-01 Himax Media Solutions, Inc. Stereoscopic Image Generating Apparatus and Method
EP2708019B1 (en) 2011-05-11 2019-10-16 FotoNation Limited Systems and methods for transmitting and receiving array camera image data
US8843346B2 (en) 2011-05-13 2014-09-23 Amazon Technologies, Inc. Using spatial information with device interaction
US8629901B2 (en) 2011-05-19 2014-01-14 National Taiwan University System and method of revising depth of a 3D image pair
US20120293489A1 (en) 2011-05-20 2012-11-22 Himax Technologies Limited Nonlinear depth remapping system and method thereof
JP5797016B2 (ja) 2011-05-30 2015-10-21 キヤノン株式会社 画像処理装置、画像処理方法、及びプログラム
JP5762142B2 (ja) 2011-05-31 2015-08-12 キヤノン株式会社 撮像装置、画像処理装置およびその方法
EP2721828B1 (en) 2011-06-15 2015-07-15 Microsoft Technology Licensing, LLC High resolution multispectral image capture
JP2013005259A (ja) 2011-06-17 2013-01-07 Sony Corp 画像処理装置、および画像処理方法、並びにプログラム
JP2014521117A (ja) 2011-06-28 2014-08-25 ペリカン イメージング コーポレイション アレイカメラで使用するための光学配列
US20130265459A1 (en) 2011-06-28 2013-10-10 Pelican Imaging Corporation Optical arrangements for use with an array camera
US8773513B2 (en) 2011-07-01 2014-07-08 Seiko Epson Corporation Context and epsilon stereo constrained correspondence matching
US9300946B2 (en) 2011-07-08 2016-03-29 Personify, Inc. System and method for generating a depth map and fusing images from a camera array
JP2013024886A (ja) 2011-07-14 2013-02-04 Sanyo Electric Co Ltd 撮像装置
JP5780865B2 (ja) 2011-07-14 2015-09-16 キヤノン株式会社 画像処理装置、撮像システム、画像処理システム
US9363535B2 (en) 2011-07-22 2016-06-07 Qualcomm Incorporated Coding motion depth maps with depth range variation
US9264689B2 (en) 2011-08-04 2016-02-16 Semiconductor Components Industries, Llc Systems and methods for color compensation in multi-view video
JP2014529214A (ja) 2011-08-09 2014-10-30 サムスン エレクトロニクス カンパニー リミテッド 多視点ビデオデータの深度マップ符号化方法及びその装置、復号化方法及びその装置
US8432435B2 (en) 2011-08-10 2013-04-30 Seiko Epson Corporation Ray image modeling for fast catadioptric light field rendering
US8866951B2 (en) 2011-08-24 2014-10-21 Aptina Imaging Corporation Super-resolution imaging systems
US8704895B2 (en) 2011-08-29 2014-04-22 Qualcomm Incorporated Fast calibration of displays using spectral-based colorimetrically calibrated multicolor camera
US20130070060A1 (en) 2011-09-19 2013-03-21 Pelican Imaging Corporation Systems and methods for determining depth from multiple views of a scene that include aliasing using hypothesized fusion
JP5879549B2 (ja) 2011-09-20 2016-03-08 パナソニックIpマネジメント株式会社 ライトフィールド撮像装置、および画像処理装置
WO2013042440A1 (ja) 2011-09-21 2013-03-28 富士フイルム株式会社 画像処理装置、方法、プログラム及び記録媒体並びに立体撮像装置、携帯電子機器、プリンタ及び立体画像再生装置
US8724893B2 (en) 2011-09-27 2014-05-13 Thomson Licensing Method and system for color look up table generation
US8908083B2 (en) 2011-09-28 2014-12-09 Apple Inc. Dynamic autofocus operations
US8542933B2 (en) 2011-09-28 2013-09-24 Pelican Imaging Corporation Systems and methods for decoding light field image files
JP5831105B2 (ja) 2011-09-30 2015-12-09 ソニー株式会社 撮像装置及び撮像方法
KR20140111642A (ko) 2011-10-11 2014-09-19 펠리칸 이매징 코포레이션 적응형 광학 엘리먼트들을 포함하는 렌즈 스택 어레이들
EP2582128A3 (en) 2011-10-12 2013-06-19 Canon Kabushiki Kaisha Image-capturing device
US20130107061A1 (en) 2011-10-31 2013-05-02 Ankit Kumar Multi-resolution ip camera
JP5149435B1 (ja) 2011-11-04 2013-02-20 株式会社東芝 映像処理装置および映像処理方法
US9692991B2 (en) 2011-11-04 2017-06-27 Qualcomm Incorporated Multispectral imaging system
EP2590138B1 (en) 2011-11-07 2019-09-11 Flir Systems AB Gas visualization arrangements, devices, and methods
US20140313315A1 (en) 2011-11-15 2014-10-23 Technion Research & Development Foundation Limited Method and system for transmitting light
US20130121559A1 (en) 2011-11-16 2013-05-16 Sharp Laboratories Of America, Inc. Mobile device with three dimensional augmented reality
US9661310B2 (en) 2011-11-28 2017-05-23 ArcSoft Hanzhou Co., Ltd. Image depth recovering method and stereo image fetching device thereof
EP2600316A1 (en) 2011-11-29 2013-06-05 Inria Institut National de Recherche en Informatique et en Automatique Method, system and software program for shooting and editing a film comprising at least one image of a 3D computer-generated animation
WO2013119706A1 (en) 2012-02-06 2013-08-15 Pelican Imaging Corporation Systems and methods for extending dynamic range of imager arrays by controlling pixel analog gain
US9172889B2 (en) 2012-02-09 2015-10-27 Semiconductor Components Industries, Llc Imaging systems and methods for generating auto-exposed high-dynamic-range images
WO2013126578A1 (en) 2012-02-21 2013-08-29 Pelican Imaging Corporation Systems and methods for the manipulation of captured light field image data
JP5860304B2 (ja) 2012-02-23 2016-02-16 キヤノン株式会社 撮像装置及びその制御方法、プログラム、並びに記憶媒体
JP6112824B2 (ja) 2012-02-28 2017-04-12 キヤノン株式会社 画像処理方法および装置、プログラム。
EP2637139A1 (en) 2012-03-05 2013-09-11 Thomson Licensing Method and apparatus for bi-layer segmentation
WO2013155403A1 (en) 2012-04-13 2013-10-17 Automation Engineering, Inc. Active alignment using continuous motion sweeps and temporal interpolation
EP2838463B1 (en) 2012-04-16 2017-11-08 Children's National Medical Center Dual-mode stereo imaging system for tracking and control in surgical and interventional procedures
US9210392B2 (en) 2012-05-01 2015-12-08 Pelican Imaging Coporation Camera modules patterned with pi filter groups
EP2820838B1 (en) 2012-05-09 2020-01-08 Lytro, Inc. Optimization of optical systems for improved light field capture and manipulation
CN104508681B (zh) 2012-06-28 2018-10-30 Fotonation开曼有限公司 用于检测有缺陷的相机阵列、光学器件阵列和传感器的系统及方法
JP5929553B2 (ja) 2012-06-28 2016-06-08 ソニー株式会社 画像処理装置、撮像装置、画像処理方法およびプログラム
US20140002674A1 (en) 2012-06-30 2014-01-02 Pelican Imaging Corporation Systems and Methods for Manufacturing Camera Modules Using Active Alignment of Lens Stack Arrays and Sensors
US8896594B2 (en) 2012-06-30 2014-11-25 Microsoft Corporation Depth sensing with depth-adaptive illumination
US9147251B2 (en) 2012-08-03 2015-09-29 Flyby Media, Inc. Systems and methods for efficient 3D tracking of weakly textured planar surfaces for augmented reality applications
US8988566B2 (en) 2012-08-09 2015-03-24 Omnivision Technologies, Inc. Lens array for partitioned image sensor having color filters
US8619082B1 (en) 2012-08-21 2013-12-31 Pelican Imaging Corporation Systems and methods for parallax detection and correction in images captured using array cameras that contain occlusions using subsets of images to perform depth estimation
US20140055632A1 (en) 2012-08-23 2014-02-27 Pelican Imaging Corporation Feature based high resolution motion estimation from low resolution images captured using an array source
WO2014034444A1 (ja) 2012-08-31 2014-03-06 ソニー株式会社 画像処理装置および画像処理方法、並びに情報処理装置
WO2014043641A1 (en) 2012-09-14 2014-03-20 Pelican Imaging Corporation Systems and methods for correcting user identified artifacts in light field images
US9143673B2 (en) 2012-09-19 2015-09-22 Google Inc. Imaging device with a plurality of pixel arrays
US20140092281A1 (en) 2012-09-28 2014-04-03 Pelican Imaging Corporation Generating Images from Light Fields Utilizing Virtual Viewpoints
TW201415879A (zh) 2012-10-12 2014-04-16 Wintek Corp 影像擷取裝置
US9609190B2 (en) 2012-10-31 2017-03-28 Invisage Technologies, Inc. Devices, methods, and systems for expanded-field-of-view image and video capture
WO2014078443A1 (en) 2012-11-13 2014-05-22 Pelican Imaging Corporation Systems and methods for array camera focal plane control
WO2014083489A1 (en) 2012-11-28 2014-06-05 Corephotonics Ltd. High-resolution thin multi-aperture imaging systems
US9001226B1 (en) 2012-12-04 2015-04-07 Lytro, Inc. Capturing and relighting images using multiple devices
US9088369B2 (en) 2012-12-28 2015-07-21 Synergy Microwave Corporation Self injection locked phase locked looped optoelectronic oscillator
US20140183334A1 (en) 2013-01-03 2014-07-03 Visera Technologies Company Limited Image sensor for light field device and manufacturing method thereof
US9671595B2 (en) 2013-01-05 2017-06-06 Light Labs Inc. Methods and apparatus for using multiple optical chains in paralell
KR20140094395A (ko) 2013-01-22 2014-07-30 삼성전자주식회사 복수 개의 마이크로렌즈를 사용하여 촬영하는 촬영 장치 및 그 촬영 방법
US9497380B1 (en) 2013-02-15 2016-11-15 Red.Com, Inc. Dense field imaging
US9462164B2 (en) 2013-02-21 2016-10-04 Pelican Imaging Corporation Systems and methods for generating compressed light field representation data using captured light fields, array geometry, and parallax information
WO2014133974A1 (en) 2013-02-24 2014-09-04 Pelican Imaging Corporation Thin form computational and modular array cameras
US20150002734A1 (en) 2013-07-01 2015-01-01 Motorola Mobility Llc Electronic Device with Modulated Light Flash Operation for Rolling Shutter Image Sensor
US9638883B1 (en) 2013-03-04 2017-05-02 Fotonation Cayman Limited Passive alignment of array camera modules constructed from lens stack arrays and sensors based upon alignment information obtained during manufacture of array camera modules using an active alignment process
US9774789B2 (en) 2013-03-08 2017-09-26 Fotonation Cayman Limited Systems and methods for high dynamic range imaging using array cameras
US8866912B2 (en) 2013-03-10 2014-10-21 Pelican Imaging Corporation System and methods for calibration of an array camera using a single captured image
US9521416B1 (en) 2013-03-11 2016-12-13 Kip Peli P1 Lp Systems and methods for image data compression
US9519972B2 (en) 2013-03-13 2016-12-13 Kip Peli P1 Lp Systems and methods for synthesizing images from image data captured by an array camera using restricted depth of field depth maps in which depth estimation precision varies
US9106784B2 (en) 2013-03-13 2015-08-11 Pelican Imaging Corporation Systems and methods for controlling aliasing in images captured by an array camera for use in super-resolution processing
WO2014160142A1 (en) 2013-03-13 2014-10-02 Pelican Imaging Corporation Systems and methods for using alignment to increase sampling diversity of cameras in an array camera module
US9888194B2 (en) 2013-03-13 2018-02-06 Fotonation Cayman Limited Array camera architecture implementing quantum film image sensors
WO2014164550A2 (en) 2013-03-13 2014-10-09 Pelican Imaging Corporation System and methods for calibration of an array camera
US9578259B2 (en) 2013-03-14 2017-02-21 Fotonation Cayman Limited Systems and methods for reducing motion blur in images or video in ultra low light with array cameras
US9633442B2 (en) 2013-03-15 2017-04-25 Fotonation Cayman Limited Array cameras including an array camera module augmented with a separate camera
JP2016524125A (ja) 2013-03-15 2016-08-12 ペリカン イメージング コーポレイション カメラアレイを用いた立体撮像のためのシステムおよび方法
US20140267286A1 (en) 2013-03-15 2014-09-18 Pelican Imaging Corporation Systems and Methods for Providing an Array Projector
US9497370B2 (en) 2013-03-15 2016-11-15 Pelican Imaging Corporation Array camera architecture implementing quantum dot color filters
US9445003B1 (en) 2013-03-15 2016-09-13 Pelican Imaging Corporation Systems and methods for synthesizing high resolution images using image deconvolution based on motion and depth information
WO2014144157A1 (en) 2013-03-15 2014-09-18 Pelican Imaging Corporation Optical arrangements for use with an array camera
US9497429B2 (en) 2013-03-15 2016-11-15 Pelican Imaging Corporation Extended color processing on pelican array cameras
US9898856B2 (en) 2013-09-27 2018-02-20 Fotonation Cayman Limited Systems and methods for depth-assisted perspective distortion correction
US20150098079A1 (en) 2013-10-09 2015-04-09 Hilti Aktiengesellschaft System and method for camera based position and orientation measurement
US20150104101A1 (en) 2013-10-14 2015-04-16 Apple Inc. Method and ui for z depth image segmentation
US9426343B2 (en) 2013-11-07 2016-08-23 Pelican Imaging Corporation Array cameras incorporating independently aligned lens stacks
WO2015074078A1 (en) 2013-11-18 2015-05-21 Pelican Imaging Corporation Estimating depth from projected texture using camera arrays
US9456134B2 (en) 2013-11-26 2016-09-27 Pelican Imaging Corporation Array camera configurations incorporating constituent array cameras and constituent cameras
US9979878B2 (en) 2014-02-21 2018-05-22 Light Labs Inc. Intuitive camera user interface methods and apparatus
JP6211435B2 (ja) 2014-02-26 2017-10-11 株式会社アドバンテスト 半導体装置の製造方法
US10089740B2 (en) 2014-03-07 2018-10-02 Fotonation Limited System and methods for depth regularization and semiautomatic interactive matting using RGB-D images
US9521319B2 (en) 2014-06-18 2016-12-13 Pelican Imaging Corporation Array cameras and array camera modules including spectral filters disposed outside of a constituent image sensor

Patent Citations (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS5925483A (ja) * 1982-08-04 1984-02-09 Hitachi Denshi Ltd 固体撮像装置
JPS6437177A (en) * 1987-08-03 1989-02-07 Canon Kk Image pickup device
JPH02285772A (ja) * 1989-04-26 1990-11-26 Toshiba Corp 画像読取装置
US20020101528A1 (en) * 1998-01-22 2002-08-01 Paul P. Lee Integrated cmos active pixel digital camera
JP2000209503A (ja) * 1999-01-19 2000-07-28 Nippon Hoso Kyokai <Nhk> 固体撮像素子およびそれ用の映像信号出力装置
JP2002252338A (ja) * 2000-12-18 2002-09-06 Canon Inc 撮像装置及び撮像システム
US20050205785A1 (en) * 2001-05-11 2005-09-22 Bert Hornback Imaging device with multiple fields of view incorporating memory-based temperature compensation of an uncooled focal plane array
JP2003163938A (ja) * 2001-11-28 2003-06-06 Japan Science & Technology Corp 画像入力装置
JP2004221585A (ja) * 2003-01-09 2004-08-05 Dialog Semiconductor リセットノイズ抑制及びプログラム可能ビニング能力を備えたaps画素
JP2005295381A (ja) * 2004-04-02 2005-10-20 Sony Corp 撮像装置
JP2008507874A (ja) * 2004-07-23 2008-03-13 ザ サイエンス アンド テクノロジー ファシリティーズ カウンシル 撮像装置
US7199348B2 (en) * 2004-08-25 2007-04-03 Newport Imaging Corporation Apparatus for multiple camera devices and method of operating same
US20080174670A1 (en) * 2004-08-25 2008-07-24 Richard Ian Olsen Simultaneous multiple field of view digital cameras
US20070228256A1 (en) * 2006-03-31 2007-10-04 Mentzer Ray A Analog vertical sub-sampling in an active pixel sensor (APS) image sensor
WO2008108926A1 (en) * 2007-03-07 2008-09-12 Altasens, Inc. Apparatus and method for reducing edge effect in an image sensor
JP2008258885A (ja) * 2007-04-04 2008-10-23 Texas Instr Japan Ltd 撮像装置および撮像装置の駆動方法

Cited By (178)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9485496B2 (en) 2008-05-20 2016-11-01 Pelican Imaging Corporation Systems and methods for measuring depth using images captured by a camera array including cameras surrounding a central camera
US10027901B2 (en) 2008-05-20 2018-07-17 Fotonation Cayman Limited Systems and methods for generating depth maps using a camera arrays incorporating monochrome and color cameras
US8896719B1 (en) 2008-05-20 2014-11-25 Pelican Imaging Corporation Systems and methods for parallax measurement using camera arrays incorporating 3 x 3 camera configurations
US9749547B2 (en) 2008-05-20 2017-08-29 Fotonation Cayman Limited Capturing and processing of images using camera array incorperating Bayer cameras having different fields of view
US9712759B2 (en) 2008-05-20 2017-07-18 Fotonation Cayman Limited Systems and methods for generating depth maps using a camera arrays incorporating monochrome and color cameras
US12041360B2 (en) 2008-05-20 2024-07-16 Adeia Imaging Llc Capturing and processing of images including occlusions focused on an image sensor by a lens stack array
US9576369B2 (en) 2008-05-20 2017-02-21 Fotonation Cayman Limited Systems and methods for generating depth maps using images captured by camera arrays incorporating cameras having different fields of view
US9188765B2 (en) 2008-05-20 2015-11-17 Pelican Imaging Corporation Capturing and processing of images including occlusions focused on an image sensor by a lens stack array
US8885059B1 (en) 2008-05-20 2014-11-11 Pelican Imaging Corporation Systems and methods for measuring depth using images captured by camera arrays
US10142560B2 (en) 2008-05-20 2018-11-27 Fotonation Limited Capturing and processing of images including occlusions focused on an image sensor by a lens stack array
US9060121B2 (en) 2008-05-20 2015-06-16 Pelican Imaging Corporation Capturing and processing of images captured by camera arrays including cameras dedicated to sampling luma and cameras dedicated to sampling chroma
US9041829B2 (en) 2008-05-20 2015-05-26 Pelican Imaging Corporation Capturing and processing of high dynamic range images using camera arrays
US9041823B2 (en) 2008-05-20 2015-05-26 Pelican Imaging Corporation Systems and methods for performing post capture refocus using images captured by camera arrays
US11412158B2 (en) 2008-05-20 2022-08-09 Fotonation Limited Capturing and processing of images including occlusions focused on an image sensor by a lens stack array
US11792538B2 (en) 2008-05-20 2023-10-17 Adeia Imaging Llc Capturing and processing of images including occlusions focused on an image sensor by a lens stack array
US9049391B2 (en) 2008-05-20 2015-06-02 Pelican Imaging Corporation Capturing and processing of near-IR images including occlusions using camera arrays incorporating near-IR light sources
US9049411B2 (en) 2008-05-20 2015-06-02 Pelican Imaging Corporation Camera arrays incorporating 3×3 imager configurations
US9049381B2 (en) 2008-05-20 2015-06-02 Pelican Imaging Corporation Systems and methods for normalizing image data captured by camera arrays
US9049367B2 (en) 2008-05-20 2015-06-02 Pelican Imaging Corporation Systems and methods for synthesizing higher resolution images using images captured by camera arrays
US9049390B2 (en) 2008-05-20 2015-06-02 Pelican Imaging Corporation Capturing and processing of images captured by arrays including polychromatic cameras
US9124815B2 (en) 2008-05-20 2015-09-01 Pelican Imaging Corporation Capturing and processing of images including occlusions captured by arrays of luma and chroma cameras
US9055233B2 (en) 2008-05-20 2015-06-09 Pelican Imaging Corporation Systems and methods for synthesizing higher resolution images using a set of images containing a baseline image
US9055213B2 (en) 2008-05-20 2015-06-09 Pelican Imaging Corporation Systems and methods for measuring depth using images captured by monolithic camera arrays including at least one bayer camera
US9060124B2 (en) 2008-05-20 2015-06-16 Pelican Imaging Corporation Capturing and processing of images using non-monolithic camera arrays
US9060120B2 (en) 2008-05-20 2015-06-16 Pelican Imaging Corporation Systems and methods for generating depth maps using images captured by camera arrays
US9191580B2 (en) 2008-05-20 2015-11-17 Pelican Imaging Corporation Capturing and processing of images including occlusions captured by camera arrays
US9060142B2 (en) 2008-05-20 2015-06-16 Pelican Imaging Corporation Capturing and processing of images captured by camera arrays including heterogeneous optics
US9077893B2 (en) 2008-05-20 2015-07-07 Pelican Imaging Corporation Capturing and processing of images captured by non-grid camera arrays
US9094661B2 (en) 2008-05-20 2015-07-28 Pelican Imaging Corporation Systems and methods for generating depth maps using a set of images containing a baseline image
US12022207B2 (en) 2008-05-20 2024-06-25 Adeia Imaging Llc Capturing and processing of images including occlusions focused on an image sensor by a lens stack array
US10306120B2 (en) 2009-11-20 2019-05-28 Fotonation Limited Capturing and processing of images captured by camera arrays incorporating cameras with telephoto and conventional lenses to generate depth maps
US9264610B2 (en) 2009-11-20 2016-02-16 Pelican Imaging Corporation Capturing and processing of images including occlusions captured by heterogeneous camera arrays
US8928793B2 (en) 2010-05-12 2015-01-06 Pelican Imaging Corporation Imager array interfaces
US9936148B2 (en) 2010-05-12 2018-04-03 Fotonation Cayman Limited Imager array interfaces
US10455168B2 (en) 2010-05-12 2019-10-22 Fotonation Limited Imager array interfaces
US11875475B2 (en) 2010-12-14 2024-01-16 Adeia Imaging Llc Systems and methods for synthesizing high resolution images using images captured by an array of independently controllable imagers
US9047684B2 (en) 2010-12-14 2015-06-02 Pelican Imaging Corporation Systems and methods for synthesizing high resolution images using a set of geometrically registered images
US11423513B2 (en) 2010-12-14 2022-08-23 Fotonation Limited Systems and methods for synthesizing high resolution images using images captured by an array of independently controllable imagers
US9041824B2 (en) 2010-12-14 2015-05-26 Pelican Imaging Corporation Systems and methods for dynamic refocusing of high resolution images generated using images captured by a plurality of imagers
US9361662B2 (en) 2010-12-14 2016-06-07 Pelican Imaging Corporation Systems and methods for synthesizing high resolution images using images captured by an array of independently controllable imagers
US10366472B2 (en) 2010-12-14 2019-07-30 Fotonation Limited Systems and methods for synthesizing high resolution images using images captured by an array of independently controllable imagers
US9197821B2 (en) 2011-05-11 2015-11-24 Pelican Imaging Corporation Systems and methods for transmitting and receiving array camera image data
US10742861B2 (en) 2011-05-11 2020-08-11 Fotonation Limited Systems and methods for transmitting and receiving array camera image data
US10218889B2 (en) 2011-05-11 2019-02-26 Fotonation Limited Systems and methods for transmitting and receiving array camera image data
US9866739B2 (en) 2011-05-11 2018-01-09 Fotonation Cayman Limited Systems and methods for transmitting and receiving array camera image data
US9578237B2 (en) 2011-06-28 2017-02-21 Fotonation Cayman Limited Array cameras incorporating optics with modulation transfer functions greater than sensor Nyquist frequency for capture of images used in super-resolution processing
US9128228B2 (en) 2011-06-28 2015-09-08 Pelican Imaging Corporation Optical arrangements for use with an array camera
US9516222B2 (en) 2011-06-28 2016-12-06 Kip Peli P1 Lp Array cameras incorporating monolithic array camera modules with high MTF lens stacks for capture of images used in super-resolution processing
US10375302B2 (en) 2011-09-19 2019-08-06 Fotonation Limited Systems and methods for controlling aliasing in images captured by an array camera for use in super resolution processing using pixel apertures
US9794476B2 (en) 2011-09-19 2017-10-17 Fotonation Cayman Limited Systems and methods for controlling aliasing in images captured by an array camera for use in super resolution processing using pixel apertures
US10275676B2 (en) 2011-09-28 2019-04-30 Fotonation Limited Systems and methods for encoding image files containing depth maps stored as metadata
US9031343B2 (en) 2011-09-28 2015-05-12 Pelican Imaging Corporation Systems and methods for encoding light field image files having a depth map
US12052409B2 (en) 2011-09-28 2024-07-30 Adela Imaging LLC Systems and methods for encoding image files containing depth maps stored as metadata
US10984276B2 (en) 2011-09-28 2021-04-20 Fotonation Limited Systems and methods for encoding image files containing depth maps stored as metadata
US9025894B2 (en) 2011-09-28 2015-05-05 Pelican Imaging Corporation Systems and methods for decoding light field image files having depth and confidence maps
US8831367B2 (en) 2011-09-28 2014-09-09 Pelican Imaging Corporation Systems and methods for decoding light field image files
US10430682B2 (en) 2011-09-28 2019-10-01 Fotonation Limited Systems and methods for decoding image files containing depth maps stored as metadata
US9031335B2 (en) 2011-09-28 2015-05-12 Pelican Imaging Corporation Systems and methods for encoding light field image files having depth and confidence maps
US9864921B2 (en) 2011-09-28 2018-01-09 Fotonation Cayman Limited Systems and methods for encoding image files containing depth maps stored as metadata
US9811753B2 (en) 2011-09-28 2017-11-07 Fotonation Cayman Limited Systems and methods for encoding light field image files
US20180197035A1 (en) 2011-09-28 2018-07-12 Fotonation Cayman Limited Systems and Methods for Encoding Image Files Containing Depth Maps Stored as Metadata
US9036931B2 (en) 2011-09-28 2015-05-19 Pelican Imaging Corporation Systems and methods for decoding structured light field image files
US10019816B2 (en) 2011-09-28 2018-07-10 Fotonation Cayman Limited Systems and methods for decoding image files containing depth maps stored as metadata
US11729365B2 (en) 2011-09-28 2023-08-15 Adela Imaging LLC Systems and methods for encoding image files containing depth maps stored as metadata
US9536166B2 (en) 2011-09-28 2017-01-03 Kip Peli P1 Lp Systems and methods for decoding image files containing depth maps stored as metadata
US9025895B2 (en) 2011-09-28 2015-05-05 Pelican Imaging Corporation Systems and methods for decoding refocusable light field image files
US9042667B2 (en) 2011-09-28 2015-05-26 Pelican Imaging Corporation Systems and methods for decoding light field image files using a depth map
US9754422B2 (en) 2012-02-21 2017-09-05 Fotonation Cayman Limited Systems and method for performing depth based image editing
US9412206B2 (en) 2012-02-21 2016-08-09 Pelican Imaging Corporation Systems and methods for the manipulation of captured light field image data
US10311649B2 (en) 2012-02-21 2019-06-04 Fotonation Limited Systems and method for performing depth based image editing
US9210392B2 (en) 2012-05-01 2015-12-08 Pelican Imaging Coporation Camera modules patterned with pi filter groups
US9706132B2 (en) 2012-05-01 2017-07-11 Fotonation Cayman Limited Camera modules patterned with pi filter groups
US9807382B2 (en) 2012-06-28 2017-10-31 Fotonation Cayman Limited Systems and methods for detecting defective camera arrays and optic arrays
US10334241B2 (en) 2012-06-28 2019-06-25 Fotonation Limited Systems and methods for detecting defective camera arrays and optic arrays
US10261219B2 (en) 2012-06-30 2019-04-16 Fotonation Limited Systems and methods for manufacturing camera modules using active alignment of lens stack arrays and sensors
US11022725B2 (en) 2012-06-30 2021-06-01 Fotonation Limited Systems and methods for manufacturing camera modules using active alignment of lens stack arrays and sensors
US9766380B2 (en) 2012-06-30 2017-09-19 Fotonation Cayman Limited Systems and methods for manufacturing camera modules using active alignment of lens stack arrays and sensors
US9858673B2 (en) 2012-08-21 2018-01-02 Fotonation Cayman Limited Systems and methods for estimating depth and visibility from a reference viewpoint for pixels in a set of images captured from different viewpoints
US9123117B2 (en) 2012-08-21 2015-09-01 Pelican Imaging Corporation Systems and methods for generating depth maps and corresponding confidence maps indicating depth estimation reliability
US10380752B2 (en) 2012-08-21 2019-08-13 Fotonation Limited Systems and methods for estimating depth and visibility from a reference viewpoint for pixels in a set of images captured from different viewpoints
US9240049B2 (en) 2012-08-21 2016-01-19 Pelican Imaging Corporation Systems and methods for measuring depth using an array of independently controllable cameras
US9235900B2 (en) 2012-08-21 2016-01-12 Pelican Imaging Corporation Systems and methods for estimating depth and visibility from a reference viewpoint for pixels in a set of images captured from different viewpoints
US9147254B2 (en) 2012-08-21 2015-09-29 Pelican Imaging Corporation Systems and methods for measuring depth in the presence of occlusions using a subset of images
US9129377B2 (en) 2012-08-21 2015-09-08 Pelican Imaging Corporation Systems and methods for measuring depth based upon occlusion patterns in images
US12002233B2 (en) 2012-08-21 2024-06-04 Adeia Imaging Llc Systems and methods for estimating depth and visibility from a reference viewpoint for pixels in a set of images captured from different viewpoints
US9123118B2 (en) 2012-08-21 2015-09-01 Pelican Imaging Corporation System and methods for measuring depth using an array camera employing a bayer filter
US10462362B2 (en) 2012-08-23 2019-10-29 Fotonation Limited Feature based high resolution motion estimation from low resolution images captured using an array source
US9813616B2 (en) 2012-08-23 2017-11-07 Fotonation Cayman Limited Feature based high resolution motion estimation from low resolution images captured using an array source
US9214013B2 (en) 2012-09-14 2015-12-15 Pelican Imaging Corporation Systems and methods for correcting user identified artifacts in light field images
US10390005B2 (en) 2012-09-28 2019-08-20 Fotonation Limited Generating images from light fields utilizing virtual viewpoints
US9143711B2 (en) 2012-11-13 2015-09-22 Pelican Imaging Corporation Systems and methods for array camera focal plane control
US9749568B2 (en) 2012-11-13 2017-08-29 Fotonation Cayman Limited Systems and methods for array camera focal plane control
US10009538B2 (en) 2013-02-21 2018-06-26 Fotonation Cayman Limited Systems and methods for generating compressed light field representation data using captured light fields, array geometry, and parallax information
US9743051B2 (en) 2013-02-24 2017-08-22 Fotonation Cayman Limited Thin form factor computational array cameras and modular array cameras
US9774831B2 (en) 2013-02-24 2017-09-26 Fotonation Cayman Limited Thin form factor computational array cameras and modular array cameras
US9374512B2 (en) 2013-02-24 2016-06-21 Pelican Imaging Corporation Thin form factor computational array cameras and modular array cameras
US9253380B2 (en) 2013-02-24 2016-02-02 Pelican Imaging Corporation Thin form factor computational array cameras and modular array cameras
US9774789B2 (en) 2013-03-08 2017-09-26 Fotonation Cayman Limited Systems and methods for high dynamic range imaging using array cameras
US9917998B2 (en) 2013-03-08 2018-03-13 Fotonation Cayman Limited Systems and methods for measuring scene information while capturing images using array cameras
US11570423B2 (en) 2013-03-10 2023-01-31 Adeia Imaging Llc System and methods for calibration of an array camera
US9986224B2 (en) 2013-03-10 2018-05-29 Fotonation Cayman Limited System and methods for calibration of an array camera
US11985293B2 (en) 2013-03-10 2024-05-14 Adeia Imaging Llc System and methods for calibration of an array camera
US11272161B2 (en) 2013-03-10 2022-03-08 Fotonation Limited System and methods for calibration of an array camera
US10225543B2 (en) 2013-03-10 2019-03-05 Fotonation Limited System and methods for calibration of an array camera
US10958892B2 (en) 2013-03-10 2021-03-23 Fotonation Limited System and methods for calibration of an array camera
US9124864B2 (en) 2013-03-10 2015-09-01 Pelican Imaging Corporation System and methods for calibration of an array camera
US9521416B1 (en) 2013-03-11 2016-12-13 Kip Peli P1 Lp Systems and methods for image data compression
US9733486B2 (en) 2013-03-13 2017-08-15 Fotonation Cayman Limited Systems and methods for controlling aliasing in images captured by an array camera for use in super-resolution processing
US10127682B2 (en) 2013-03-13 2018-11-13 Fotonation Limited System and methods for calibration of an array camera
US9888194B2 (en) 2013-03-13 2018-02-06 Fotonation Cayman Limited Array camera architecture implementing quantum film image sensors
US9741118B2 (en) 2013-03-13 2017-08-22 Fotonation Cayman Limited System and methods for calibration of an array camera
US9800856B2 (en) 2013-03-13 2017-10-24 Fotonation Cayman Limited Systems and methods for synthesizing images from image data captured by an array camera using restricted depth of field depth maps in which depth estimation precision varies
US9100586B2 (en) 2013-03-14 2015-08-04 Pelican Imaging Corporation Systems and methods for photometric normalization in array cameras
US9578259B2 (en) 2013-03-14 2017-02-21 Fotonation Cayman Limited Systems and methods for reducing motion blur in images or video in ultra low light with array cameras
US9787911B2 (en) 2013-03-14 2017-10-10 Fotonation Cayman Limited Systems and methods for photometric normalization in array cameras
US10412314B2 (en) 2013-03-14 2019-09-10 Fotonation Limited Systems and methods for photometric normalization in array cameras
US10547772B2 (en) 2013-03-14 2020-01-28 Fotonation Limited Systems and methods for reducing motion blur in images or video in ultra low light with array cameras
US10091405B2 (en) 2013-03-14 2018-10-02 Fotonation Cayman Limited Systems and methods for reducing motion blur in images or video in ultra low light with array cameras
US10542208B2 (en) 2013-03-15 2020-01-21 Fotonation Limited Systems and methods for synthesizing high resolution images using image deconvolution based on motion and depth information
US10674138B2 (en) 2013-03-15 2020-06-02 Fotonation Limited Autofocus system for a conventional camera that uses depth information from an array camera
US9800859B2 (en) 2013-03-15 2017-10-24 Fotonation Cayman Limited Systems and methods for estimating depth using stereo array cameras
US9955070B2 (en) 2013-03-15 2018-04-24 Fotonation Cayman Limited Systems and methods for synthesizing high resolution images using image deconvolution based on motion and depth information
US9497429B2 (en) 2013-03-15 2016-11-15 Pelican Imaging Corporation Extended color processing on pelican array cameras
US9438888B2 (en) 2013-03-15 2016-09-06 Pelican Imaging Corporation Systems and methods for stereo imaging with camera arrays
US9602805B2 (en) 2013-03-15 2017-03-21 Fotonation Cayman Limited Systems and methods for estimating depth using ad hoc stereo array cameras
US10455218B2 (en) 2013-03-15 2019-10-22 Fotonation Limited Systems and methods for estimating depth using stereo array cameras
US9497370B2 (en) 2013-03-15 2016-11-15 Pelican Imaging Corporation Array camera architecture implementing quantum dot color filters
US10182216B2 (en) 2013-03-15 2019-01-15 Fotonation Limited Extended color processing on pelican array cameras
US9633442B2 (en) 2013-03-15 2017-04-25 Fotonation Cayman Limited Array cameras including an array camera module augmented with a separate camera
US10638099B2 (en) 2013-03-15 2020-04-28 Fotonation Limited Extended color processing on pelican array cameras
US10122993B2 (en) 2013-03-15 2018-11-06 Fotonation Limited Autofocus system for a conventional camera that uses depth information from an array camera
JP2015033072A (ja) * 2013-08-06 2015-02-16 株式会社モルフォ 画像処理装置及び画像処理方法
JP2016528822A (ja) * 2013-08-08 2016-09-15 ソニー株式会社 専用のベイヤ―カメラを有するカメラアレイ設計
KR20150020432A (ko) * 2013-08-14 2015-02-26 삼성전자주식회사 이미지 센서, 아날로그-디지털 컨버터 및 아날로그-디지털 변환 방법
KR102075093B1 (ko) * 2013-08-14 2020-03-03 삼성전자주식회사 이미지 센서, 아날로그-디지털 컨버터 및 아날로그-디지털 변환 방법
US9898856B2 (en) 2013-09-27 2018-02-20 Fotonation Cayman Limited Systems and methods for depth-assisted perspective distortion correction
US10540806B2 (en) 2013-09-27 2020-01-21 Fotonation Limited Systems and methods for depth-assisted perspective distortion correction
US9924092B2 (en) 2013-11-07 2018-03-20 Fotonation Cayman Limited Array cameras incorporating independently aligned lens stacks
US9264592B2 (en) 2013-11-07 2016-02-16 Pelican Imaging Corporation Array camera modules incorporating independently aligned lens stacks
US9185276B2 (en) 2013-11-07 2015-11-10 Pelican Imaging Corporation Methods of manufacturing array camera modules incorporating independently aligned lens stacks
US9426343B2 (en) 2013-11-07 2016-08-23 Pelican Imaging Corporation Array cameras incorporating independently aligned lens stacks
US10119808B2 (en) 2013-11-18 2018-11-06 Fotonation Limited Systems and methods for estimating depth from projected texture using camera arrays
US10767981B2 (en) 2013-11-18 2020-09-08 Fotonation Limited Systems and methods for estimating depth from projected texture using camera arrays
US11486698B2 (en) 2013-11-18 2022-11-01 Fotonation Limited Systems and methods for estimating depth from projected texture using camera arrays
US9426361B2 (en) 2013-11-26 2016-08-23 Pelican Imaging Corporation Array camera configurations incorporating multiple constituent array cameras
US9456134B2 (en) 2013-11-26 2016-09-27 Pelican Imaging Corporation Array camera configurations incorporating constituent array cameras and constituent cameras
US10708492B2 (en) 2013-11-26 2020-07-07 Fotonation Limited Array camera configurations incorporating constituent array cameras and constituent cameras
US9813617B2 (en) 2013-11-26 2017-11-07 Fotonation Cayman Limited Array camera configurations incorporating constituent array cameras and constituent cameras
US10089740B2 (en) 2014-03-07 2018-10-02 Fotonation Limited System and methods for depth regularization and semiautomatic interactive matting using RGB-D images
US10574905B2 (en) 2014-03-07 2020-02-25 Fotonation Limited System and methods for depth regularization and semiautomatic interactive matting using RGB-D images
US9247117B2 (en) 2014-04-07 2016-01-26 Pelican Imaging Corporation Systems and methods for correcting for warpage of a sensor array in an array camera module by introducing warpage into a focal plane of a lens stack array
US9521319B2 (en) 2014-06-18 2016-12-13 Pelican Imaging Corporation Array cameras and array camera modules including spectral filters disposed outside of a constituent image sensor
US11546576B2 (en) 2014-09-29 2023-01-03 Adeia Imaging Llc Systems and methods for dynamic calibration of array cameras
US10250871B2 (en) 2014-09-29 2019-04-02 Fotonation Limited Systems and methods for dynamic calibration of array cameras
US9942474B2 (en) 2015-04-17 2018-04-10 Fotonation Cayman Limited Systems and methods for performing high speed video capture and depth estimation using array cameras
US11562498B2 (en) 2017-08-21 2023-01-24 Adela Imaging LLC Systems and methods for hybrid depth regularization
US10818026B2 (en) 2017-08-21 2020-10-27 Fotonation Limited Systems and methods for hybrid depth regularization
US10482618B2 (en) 2017-08-21 2019-11-19 Fotonation Limited Systems and methods for hybrid depth regularization
US11983893B2 (en) 2017-08-21 2024-05-14 Adeia Imaging Llc Systems and methods for hybrid depth regularization
US11699273B2 (en) 2019-09-17 2023-07-11 Intrinsic Innovation Llc Systems and methods for surface modeling using polarization cues
US11270110B2 (en) 2019-09-17 2022-03-08 Boston Polarimetrics, Inc. Systems and methods for surface modeling using polarization cues
KR102680342B1 (ko) 2019-09-23 2024-07-03 삼성전자주식회사 복수의 이미지 센서들에 의해 획득되는 이미지 데이터에 기초하여 비디오 hdr 처리를 수행하기 위한 전자 장치
KR20210035369A (ko) * 2019-09-23 2021-04-01 삼성전자주식회사 복수의 이미지 센서들에 의해 획득되는 이미지 데이터에 기초하여 비디오 hdr 처리를 수행하기 위한 전자 장치
US11982775B2 (en) 2019-10-07 2024-05-14 Intrinsic Innovation Llc Systems and methods for augmentation of sensor systems and imaging systems with polarization
US11525906B2 (en) 2019-10-07 2022-12-13 Intrinsic Innovation Llc Systems and methods for augmentation of sensor systems and imaging systems with polarization
US11302012B2 (en) 2019-11-30 2022-04-12 Boston Polarimetrics, Inc. Systems and methods for transparent object segmentation using polarization cues
US11842495B2 (en) 2019-11-30 2023-12-12 Intrinsic Innovation Llc Systems and methods for transparent object segmentation using polarization cues
US11580667B2 (en) 2020-01-29 2023-02-14 Intrinsic Innovation Llc Systems and methods for characterizing object pose detection and measurement systems
US11797863B2 (en) 2020-01-30 2023-10-24 Intrinsic Innovation Llc Systems and methods for synthesizing data for training statistical models on different imaging modalities including polarized images
US11953700B2 (en) 2020-05-27 2024-04-09 Intrinsic Innovation Llc Multi-aperture polarization optical systems using beam splitters
US12099148B2 (en) 2020-10-07 2024-09-24 Intrinsic Innovation Llc Systems and methods for surface normals sensing with polarization
US12020455B2 (en) 2021-03-10 2024-06-25 Intrinsic Innovation Llc Systems and methods for high dynamic range image reconstruction
US12069227B2 (en) 2021-03-10 2024-08-20 Intrinsic Innovation Llc Multi-modal and multi-spectral stereo camera arrays
US11954886B2 (en) 2021-04-15 2024-04-09 Intrinsic Innovation Llc Systems and methods for six-degree of freedom pose estimation of deformable objects
US11683594B2 (en) 2021-04-15 2023-06-20 Intrinsic Innovation Llc Systems and methods for camera exposure control
US11290658B1 (en) 2021-04-15 2022-03-29 Boston Polarimetrics, Inc. Systems and methods for camera exposure control
US12067746B2 (en) 2021-05-07 2024-08-20 Intrinsic Innovation Llc Systems and methods for using computer vision to pick up small objects
US11689813B2 (en) 2021-07-01 2023-06-27 Intrinsic Innovation Llc Systems and methods for high dynamic range imaging using crossed polarizers

Also Published As

Publication number Publication date
EP2569935A1 (en) 2013-03-20
US20110279721A1 (en) 2011-11-17
US8928793B2 (en) 2015-01-06
US9936148B2 (en) 2018-04-03
KR101824672B1 (ko) 2018-02-05
JP5848754B2 (ja) 2016-01-27
EP2569935B1 (en) 2016-12-28
US10455168B2 (en) 2019-10-22
US20180227511A1 (en) 2018-08-09
CN103004180A (zh) 2013-03-27
US20160269627A1 (en) 2016-09-15
US20120012748A1 (en) 2012-01-19
SG10201503516VA (en) 2015-06-29
US20170048468A1 (en) 2017-02-16
WO2011143501A1 (en) 2011-11-17
EP2569935A4 (en) 2013-11-06
US20150156414A1 (en) 2015-06-04
SG185500A1 (en) 2012-12-28
KR20130136372A (ko) 2013-12-12

Similar Documents

Publication Publication Date Title
US10455168B2 (en) Imager array interfaces
US20130147979A1 (en) Systems and methods for extending dynamic range of imager arrays by controlling pixel analog gain
WO2013119706A1 (en) Systems and methods for extending dynamic range of imager arrays by controlling pixel analog gain
EP2253017B1 (en) Circuit and photo sensor overlap for backside illumination image sensor
US9445024B2 (en) Solid-state image sensor and camera system
US8884348B2 (en) Solid-state imaging device which can expand dynamic range
US9661306B2 (en) Solid-state imaging device and camera system
JP6229652B2 (ja) 撮像装置および撮像方法、電子機器、並びにプログラム
US20210360175A1 (en) Dual row select pixel for fast pixel binning
US20150304582A1 (en) Image pickup device and camera system
US9001240B2 (en) Common element pixel architecture (CEPA) for fast speed readout
WO2021062661A1 (zh) 图像传感器、摄像头组件及移动终端
US11011569B2 (en) Image sensor including a plurality of transfer transistors coupled between photodiode and floating diffusion region
US20240006430A1 (en) Multiresolution imager for night vision
WO2022050947A1 (en) Multiresolution imager for night vision
JP4375084B2 (ja) 撮像素子

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20140509

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20150430

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20150730

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20150827

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20151028

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20151127

R150 Certificate of patent or registration of utility model

Ref document number: 5848754

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

R360 Written notification for declining of transfer of rights

Free format text: JAPANESE INTERMEDIATE CODE: R360