TWI504276B - 用於捕捉彩色影像之影像感測器 - Google Patents

用於捕捉彩色影像之影像感測器 Download PDF

Info

Publication number
TWI504276B
TWI504276B TW099116878A TW99116878A TWI504276B TW I504276 B TWI504276 B TW I504276B TW 099116878 A TW099116878 A TW 099116878A TW 99116878 A TW99116878 A TW 99116878A TW I504276 B TWI504276 B TW I504276B
Authority
TW
Taiwan
Prior art keywords
color
image
pixel
pixels
interpolated
Prior art date
Application number
TW099116878A
Other languages
English (en)
Other versions
TW201127072A (en
Inventor
James E Adams Jr
Mrityunjay Kumar
Bruce H Pillman
James A Hamilton
Original Assignee
Omnivision Tech Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Omnivision Tech Inc filed Critical Omnivision Tech Inc
Publication of TW201127072A publication Critical patent/TW201127072A/zh
Application granted granted Critical
Publication of TWI504276B publication Critical patent/TWI504276B/zh

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/10—Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
    • H04N25/11—Arrangement of colour filter arrays [CFA]; Filter mosaics
    • H04N25/13—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
    • H04N25/133—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements including elements passing panchromatic light, e.g. filters passing white light
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H04N23/84—Camera processing pipelines; Components thereof for processing colour signals
    • H04N23/843—Demosaicing, e.g. interpolating colour pixel values
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/10—Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
    • H04N25/11—Arrangement of colour filter arrays [CFA]; Filter mosaics
    • H04N25/13—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
    • H04N25/135—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements based on four or more different wavelength filter elements

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Color Television Image Signal Generators (AREA)

Description

用於捕捉彩色影像之影像感測器
本發明係關於自具有彩色通道及一全色通道之一彩色濾光器陣列影像產生具有經改良的空間解析度之一全彩色影像。
一單一感測器數位相機利用一彩色濾光器陣列(CFA)以捕捉來自一單個二維光敏像素陣列之全彩色資訊。該CFA包含過濾各像素正偵測到之光的一彩色濾光器陣列。因此，各像素僅自一色彩接收光，或在一全色或「透明」濾光器的情況下，自所有色彩接收光。為了自該CFA影像重現一全彩色影像，必須在各像素位置處產生三個色彩值。此係藉由自鄰近像素值內插丟失的色彩值而完成。
熟知的CFA圖案使用如由Bayer(美國專利第3971065號)所描述且如圖2所示的三種彩色通道。Bayer CFA具有實現全彩色重現能力之三種彩色通道。然而，該三種通道之準確的光譜響應(「色彩」)代表一折中。為了改良色彩保真度及擴展可由該CFA捕捉的色彩範圍(亦即，色域)，需使該等光譜響應具更多的選擇性(「狹窄的」)。此具有減少到達像素的光的總量且因此減少像素對光的靈敏度之副作用。因而，像素值變得更易受來自非成像源之雜訊(例如，熱雜訊)的影響。一種對該雜訊問題之解決方法係使該CFA光譜響應具更少的選擇性(「較寬的」)以增加到達該像素的光的總量。然而，此伴隨著減小色彩保真度之副作用而發生。
一種對此三通道CFA限制之解決方法係利用由具有「狹窄的」光譜靈敏度之三種色彩及具有一「寬的」光譜靈敏度之一種彩色組成的一四通道CFA。將對光之全譜靈敏之「最寬的」此通道將係全色的或「透明的」。該三個「窄帶」彩色通道將產生具有較高的彩色保真度及較低的空間解析度之一影像，而第四「寬帶」全色通道將產生具有較低的雜訊及較高的空間解析度之一影像。接著此等高色彩保真度、低空間解析度及低雜訊、高空間解析度影像將合併為一最終的高色彩保真度、低雜訊、高空間解析度影像。
為了產生一高空間解析度全色影像，同時維持該等彩色像素之高色彩保真度，必須適當地選擇在該CFA內的全色像素之數目及配置及對應的內插演算法。在先前技術中存在在此點上的具有一或多個缺點之多種實例。Frame(美國專利第7012643號)教示如圖12所示之一CFA，該CFA在一9x9正方形全色(P)像素內僅具有一單一的紅色(R)、綠色(G)、藍色(B)像素。Frame的問題係所得的色彩空間解析度太低以致未能在該影像中產生所有的色彩細節，除了產生最低頻率色彩細節。
Yamagami等人(美國專利第5323233號)描述如圖13A及圖13B所示之具有相同數量的全色像素及彩色像素之兩種CFA圖案，從而避免Frame的缺點。Yamagami等人繼續教示將簡單的雙線性內插用作為用於內插該等丟失的全色值之技術。線性內插方法(諸如雙線性內插)之單獨使用強有力地限制該經內插的影像之空間解析度。諸如在Adams等人(美國專利5506619號)中描述的非線性方法在該CFA圖案允許其等之使用的條件下產生較高經內插的空間解析度內插影像。圖14A闡釋Adams等人所使用的圖案。在圖2所示之三通道系統中提供高空間頻率解析度的綠色(R)像素與在一中央彩色像素周圍之水平方向及垂直方向兩者上的彩色(C)像素交替。重要的是注意此等彩色像素皆係相同色彩(例如，紅色像素)。圖14B顯示使用全色(P)像素代替綠色像素之一類似圖案。在此點上應注意的是，對於一四通道系統，不可能以圖14B顯示的圖案在跨感測器之所有彩色(R、G及B)像素位置處出現之方式配置所有四個通道(R、G、B及P)。因此，任何可能的配置將係以此方式之一些折中。關於Yamagami等人，圖13A具有如圖14B中所配置的綠色及全色像素，但未如此配置紅色及藍色像素。在圖14B之後，諸如在圖14C中之一配置較佳，但圖13A關於紅色及藍色像素皆不具有此配置。圖13B對於任何彩色像素不具有圖14B或圖14C之圖案。Tanaka等人(美國專利第4437112號)描述許多CFA圖案，其中與此討論最相關的圖案係圖15。在圖15中青色(C)、黃色(Y)、綠色(G)及全色(P)像素係經配置使得該等綠色像素係由在圖14C中顯示的近鄰環繞。然而，該等黃色及青色像素不符合圖14B或圖14C之圖案。由Tanaka等人所教示的其他圖案存在相同困難。
Hamilton等人(美國專利申請案第2007/0024879號)教示大量CFA圖案，在圖16A及圖16B中顯示其中的兩種圖案。此等以及Hamilton等人所揭示的所有其他圖案之缺點係缺乏圖14B及圖14C像素配置。
Kijima等人(美國專利申請案第2007/0177236號)描述許多CFA圖案，其中最相關的CFA圖案係顯示在圖17中。雖然全色像素之雙列在垂直方向上提供一圖14C配置，但在圖17中不存在並行的全色值之此水平配置。
因此，存在具有三窄帶彩色通道及具有足夠彩色像素之一寬帶全色通道之一四通道CFA圖案之需要，以提供充足的色彩空間解析度且以此一方式配置以允許該等丟失的全色值之有效的非線性內插。
根據本發明，提供一種用於捕捉一彩色影像之影像感測器，該彩色影像包含一個二維光敏像素陣列，該等光敏像素包含全色像素及具有至少兩種不同色彩響應之彩色像素，該等像素係以具有一正方形最小重複單元之一重複圖案配置，該正方形最小重複單元具至少三列及三行，該等彩色像素係沿著該最小重複單元之諸對角線之一者配置，且所有其他像素皆係全色像素。
本發明之一優點係在無需增加在該感測器內的彩色像素關於全色像素之百分比的情況下改良該影像之該色彩空間解析度。
本發明之進一步優點係在無需增加具有影像之彩色保真度之對應减少之該等彩色像素之光譜帶寬的情況下實現在該影像中的彩色雜訊之一減少。
自對較佳實施例之以下詳細描述及隨附申請專利範圍之檢查及藉由參考隨附圖式將更清楚地瞭解及明白本發明之此及其他態樣、目標、特徵及優點。
在以下描述中，從通常將實施為一軟體程式方面描述本發明之一較佳的實施例。熟習此項技術者將易認知亦可在硬體中建構此軟體之等效物。因為影像操作演算法及系統係熟知的，所以本描述將尤其係關於形成根據本發明之系統及方法之部分或更直接地與該系統及方法協作之演算法及系統。可從此項技術中已知的此等系統、演算法、組件及元件中選擇本文未具體顯示或描述的此等演算法及系統之其他態樣、用於產生及否則處理與之有關的影像信號之硬體或軟體。在如於以下材料中根據本發明所描述之系統的情況下，對本發明之實施方案有用之本文未具體顯示、建議或描述之軟體係習知的且在此等技術之一般技術範圍之內。
再者，可在一電腦可讀儲存媒體中儲存如本文使用的用於執行本發明之該方法之電腦程式，舉例而言，該電腦可讀儲存媒體可包含諸如一磁碟(諸如一硬碟或一軟碟)或磁帶之磁儲存媒體；諸如一光碟、光帶或機器可讀條碼之光學儲存媒體；諸如隨機存取記憶體(RAM)或唯讀記憶體(ROM)之固態電子儲存器件；或用以儲存一電腦程式之任何其他實體裝置或媒體。
因為利用成像裝置及相關電路系統以用於信號捕捉及校正及曝光控制之數位相機係熟知，所以本描述將尤其係關於形成根據本發明之方法及裝置之部分或更直接地與該方法及裝置協作之元件。本文未具體顯示或描述的元件係選自在此項技術中已知的元件。在軟體中提供待描述的實施例之某些態樣。在如於以下材料中根據本發明所描述之系統的情況下，對本發明之實施方案有用之本文未具體顯示、描述或建議之軟體係習知的且在此等技術之一般技術範圍之內。
現參考圖1，顯示具體實施本發明之一影像捕捉器件之一方塊圖。在此實例中，將該影像捕捉器件顯示為一數位相機。然而，雖然現將解釋一數位相機，但本發明亦明顯適用於其他類型的影像捕捉器件。在該經揭示的相機中，將自主體場景之光10係輸入至一成像台11，其中由透鏡12聚焦該光以在一固態彩色濾光器陣列影像感測器20上形成一影像。彩色濾光器陣列影像感測器20針對各圖像元素(像素)將入射光轉換為一電子信號。該較佳實施例之該彩色濾光器陣列影像感測器20係一電荷耦合裝置(CCD)類型或一主動像素感測器(APS)類型。(由於在一互補金屬氧化物半導體製程中製造APS器件的能力，通常將APS器件稱為CMOS感測器。)在具有二維像素陣列之其他類型的影像感測器利用本發明之該等圖案的條件下，亦可使用該等其他類型的影像感測器。供在本發明中使用的該彩色濾光器陣列影像感測器20包含一個二維彩色像素及全色像素陣列，其將在描述圖1之後，在此說明書中之下文變得清晰。
藉由改變孔徑之一光圈區塊14及包含穿插於光學路徑中的一或多個中性密度(ND)濾光器之一中性密度(ND)濾光器區塊13而調節到達該彩色濾光器陣列影像感測器20之光量。並且調節總光位準的時間係在一快門18打開之時。一曝光控制器40回應於由一亮度感測器區塊16所量測的該場景中可獲得的光量並控制所有三種此等調節功能。
一特定相機組態之此描述將為熟習此項技術者所熟悉，且將顯然的是存在許多變更及額外特徵。例如，可增加一自動聚焦系統，或透鏡可為可分離的及可互換的。應瞭解本發明可應用於任何類型的數位相機，其中藉由替代組件提供類似功能性。例如，該數位相機可為一相對簡單的對準即拍數位相機，其中代替更複雜的焦平面配置的是，該快門18係一相對簡單的可移動葉片快門或類似物。亦可使用在諸如行動電話及機動車輛之非相機器件中包含的成像組件實踐本發明。
藉由類比信號處理器22處理來自該彩色濾光器陣列影像感測器20之類比信號且將該類比信號施加於類比轉數位(A/D)轉換器24。一時序產生器26產生各種時脈信號以選擇列及像素並使類比信號處理器22與A/D轉換器24之操作同步。一影像感測器台28包含該彩色濾光器陣列影像感測器20、該類比信號處理器22、該A/D轉換器24及該時序產生器26。影像感測器台28之組件可為經分離製造的積體電路，或可將其等製造為通常由CMOS影像感測器完成的一單一積體電路。將來自該A/D轉換器24之數位像素值之所得串流儲存在與一數位信號處理器(DSP)36相關的一數位信號處理器(DSP)記憶體32中。
在此實施例中，除一系統控制器50及一曝光控制器40之外，該DSP 36係三個處理器或控制器中之一者。雖然多個控制器及處理器之間的相機功能控制之此劃分係典型的，但可以各種方式組合此等控制器或處理器而不影響該相機之功能操作及本發明之應用。此等控制器或處理器可包含一或多個數位信號處理器器件、微控制器、可程式化邏輯器件、或其他數位邏輯電路。雖然已描述此等控制器或處理器之一組合，但應明白一控制器或處理器可經指定以執行所有所需的功能。所有此等變體可執行相同功能且落在本發明範疇之內，且将根据需要使用術語「處理階段」以涵蓋在一片語中(例如，如在圖1中的處理階段38中)之所有此功能。
在所闡釋的實施例中，DSP 36根據永久地儲存在一程式記憶體54中且被複製至DSP記憶體32以供在影像捕捉期間執行之一軟體程式而操縱在該DSP記憶體32中的數位影像資料。DSP 36執行實踐圖1所示的影像處理所需之軟體。DSP記憶體32可為任何類型的隨機存取記憶體(諸如，SDRAM)。包含位址及資料信號之一路徑之匯流排30將DSP 36連接至其之相關DSP記憶體32、A/D轉換器24及其他相關器件。
系統控制器50基於儲存在程式記憶體54中的一軟體程式控制該相機之整體操作，該程式記憶體54可包含快閃EEPROM或其他非揮發性的記憶體。此記憶體亦可用以儲存影像感測器校準資料、使用者設定選擇及當相機關閉時必須保存的其他資料。系統控制器50藉由引導曝光控制器40操作先前描述的該透鏡12、ND濾光器區塊13、光圈14、及快門18；藉由引導該時序產生器26操作該彩色濾光器陣列影像感測器20及相關元件；及藉由引導DSP 36處理經捕捉的影像資料而控制影像捕捉之序列。在捕捉及處理一影像之後，儲存在DSP記憶體32中的最終影像檔案經由主機介面57被傳送至一主機電腦，被儲存在一可移動記憶卡64或其他儲存器件中，並在一影像顯示器88上顯示給對使用者。
一系統控制器匯流排52包含位址、資料及控制信號之一路徑，且將系統控制器50連接至DSP 36、程式記憶體54、一系統記憶體56、主機介面57、一記憶卡介面60及其他相關器件。主機介面57對一個人電腦(PC)或其他主機電腦提供一高速率連接以傳送用於顯示、儲存、操縱或列印之影像資料。此介面可為IEEE1394或USB2.0串列介面或任何其他適當的數位介面。記憶卡64通常係插入記憶卡插座62並經由記憶卡介面60連接至該系統控制器50之一緊湊型快閃(CF)卡。可利用的其他類型的儲存器包含(無限制)個人電腦卡(PC-Card)、多媒體卡(MMC)、或安全數位(SD)卡。
將經處理影像複製至在系統記憶體56中的一顯示緩衝器且經由視訊編碼器80持續地讀取該等經處理影像以產生一視訊信號。從該相機中直接輸出此信號以顯示在一外部監視器上，或藉由顯示控制器82處理此信號且在影像顯示器88上呈現該信號。此顯示器通常係一主動矩陣彩色液晶顯示器(LCD)，然而亦使用其他類型的顯示器。
藉由在曝光控制器40及系統控制器50上執行的軟體程式之一組合而控制包含一取景器顯示器70、一曝光顯示器72、一狀態顯示器76、該影像顯示器88及使用者輸入74之所有或任何組合之一使用者介面68。使用者輸入74通常包含按鈕、搖臂開關、操縱桿、旋轉式撥號盤或觸控螢幕之一些組合。曝光控制器40操作光量測、曝光模式、自動聚焦及其他曝光功能。該系統控制器50管理在該等顯示器之一或多者上(例如，在影像顯示器88上)呈現的一圖形使用者介面(GUI)。該GUI通常包含用於做出各種選項選擇之選單及用於檢閱經捕捉的影像之檢查模式。
曝光控制器40接受選擇曝光模式、透鏡孔徑、曝光時間(快門速度)、及曝光指數或ISO速率評比之使用者輸入且因此針對隨後的捕捉引導該透鏡12及快門18。利用該亮度感測器區塊16以量測場景亮度且提供一曝光表功能以供使用者在手動設定該ISO速度評比、孔徑及快門速度時參考。在此情況下，隨著使用者改變一或多個設定，在取景器顯示器70上呈現的光表指示項告訴該使用者到達何種程度時該影像將會結束或曝光不足。在一自動曝光模式中，使用者改變一設定且該曝光控制器40自動更改另一設定以維持正確的曝光，例如，針對一給定ISO速度評比，當該使用者減小透鏡孔徑時，該曝光控制器40自動增加曝光時間以維持相同的總曝光。
該ISO速度評比係一數位靜態相機之一重要屬性。曝光時間、透鏡孔徑、透鏡透光度、場景照明之位準及光譜分佈，及場景反射率決定一數位靜態相機之曝光位準。當使用一不足曝光而獲得來自一數位靜態相機之一影像時，通常可藉由增加電子或數位增益而維持適當的色調重現，但所得影像通常包含一不可接受的雜訊量。隨著增加曝光，增益減少，且因此通常可將該影像雜訊減少至一可接受的位準。若過分地增加該曝光，則在該影像之明亮區域中的所得信號可超過該影像感測器或相機信號處理之最大信號位準容量。此可導致修剪影像反白顯示以形成一均勻明亮區域，或該影像之周圍區域「起暈(bloom)」。因此，指導使用者設定適當的曝光係重要的。一ISO速度評比旨在充當此一指導。為了使攝影師更易瞭解，一數位靜態相機之該ISO速度評比應直接有關於照相軟片相機之該ISO速度評比。例如，若一數位靜態相機具有ISO 200之一ISO速度評比，則相同曝光時間及孔徑應適合用於一經ISO 200評比的軟片/處理系統。
該ISO速度評比旨在協調軟片ISO速度評比。然而，電子成像系統與排除準確等效性之基於軟片的成像系統之間存在差異。數位靜態相機可包含可變增益，且可在已捕捉到影像資料之後提供數位處理，從而使得在相機曝光之範圍內達成色調重現。因此數位靜態相機可能具有一速度評比範圍。將此範圍定義為ISO速度寬容度(latitude)。為防止混淆，將一單一值指定為固有ISO速度評比，該ISO速度寬容度上限及下限指示該速度範圍，即，包含不同於該固有ISO速度評比之有效速度評比之一範圍。將此記於心中，該固有ISO速度係從在一數位靜態相機之焦平面上提供的曝光計算出、用以產生指定相機輸出信號特性的一數值。該固有速度通常係針對正常場景產生一給定相機系統之峰值影像品質之曝光指數值，其中該曝光指數係與提供給該影像感測器之該曝光成反比例的一數值。
一數位相機之先前描述將為熟習此項技術者所熟悉。顯然存在此實施例之可能的且經選擇以減少成本，增加特徵或改良該相機之效能之許多變更。以下描述將根據本發明詳細揭示用於捕捉影像之此相機之操作。雖然此描述係參考一數位相機，但應瞭解本發明適用於與具有具彩色及全色像素之一影像感測器之任何類型的影像捕捉器件一起使用。
在圖1中顯示的該彩色濾光器陣列影像感測器20通常包含在一矽基板上製造的一個二維光敏像素陣列，該等光敏像素提供將一種將在各像素上的入射光轉換成經量測的電子信號之方法。當該彩色濾光器陣列影像感測器20係曝露於光時，自由電子產生且被捕捉於各像素處之電子結構內。捕捉此等自由電子持續某一時段且接著量測經捕捉的電子數目，或量測產生自由電子的速率可量測在各像素處的光位準。在先前情況下，累積的電荷係從像素陣列中移出至如在一電荷耦合器件(CCD)中的一電荷轉電壓量測電路，或接近各像素之區域可包含如在一主動像素感測器(APS或CMOS感測器)中的一電荷轉電壓量測電路之元件。
每當大體參考以下描述中的一影像感測器時，應瞭解該影像感測器係自圖1之該彩色濾光器陣列影像感測器20之代表。應進一步瞭解在此說明書中揭示的本發明之影像感測器架構及像素圖案之所有實例及其等之等效物係用於彩色濾光器陣列影像感測器20。
在一影像感測器之情況下，一像素(圖像元素」之縮寫)係指一離散光感測區域及與該光感測區域相關之電荷移動或電荷量測電路系統。在一數位彩色影像之情況下，術語像素一般係指在具有相關的彩色值之影像中的一特定位置。
圖2係由Bayer在美國專利第3,971,065號中描述的一熟知彩色濾光器陣列圖案之一最小重複單元之一實例。在該彩色濾光器陣列感測器20(圖1)的表面上重複該最小重複單元，因而在各像素位置處產生一紅色像素、綠色像素、或藍色像素。由彩色濾光器陣列感測器20(圖1)產生的資料與圖2之彩色濾光器陣列圖案可用於以為熟習此項技術者所知的許多方法產生一全彩色影像。Adams等人在美國專利5,506,619中描述一實例。
圖3係本發明之一較佳實施例之該最小重複單元。其係具有沿著諸對角線之一者之彩色像素及在別處的全色像素之一3×3正方形像素陣列。在圖3中，用一紅色像素、一綠色像素及一藍色像素填充色彩像素之該對角線。在該彩色濾光器陣列感測器20(圖1)的表面上重複圖3之此最小重複單元，因而在各像素位置處產生一紅色像素、綠色像素、藍色像素、或全色像素。
圖4顯示本發明之一替代實施例之一最小重複單元。其係具有沿著諸對角線之一者的彩色像素及在別處的全色像素之一4×4正方形像素陣列。在圖4中，用一綠色像素、一紅色像素、一綠色像素及一藍色像素的順序填充彩色像素之該對角線。在該彩色濾光器陣列感測器20(圖1)的表面上重複圖4之此最小重複單元，因而在各像素位置處產生一紅色像素、綠色像素、藍色像素或全色像素。
可將本發明歸納為除分別在圖3中顯示的該3×3圖案及圖4中顯示的該4×4圖案之外的其他大小的CFA圖案。在各情況下，該等像素將以具有具至少三列及三行之一正方形最小重複單元之一重複圖案配置。在該CFA圖案中的該等彩色像素係沿著該最小重複單元之該等對角線之一者配置，且所有其他像素皆係全色像素。
可以各種圖案配置沿著該最小重複圖案之該對角線之該等彩色像素。對於諸如在圖3中顯示的存在三種類型的彩色像素及使用一3×3最小重複單元的情況，該三種色彩的順序係隨意的。對於諸如在圖4中顯示的一4×4最小重複單元的情況，將存在一色彩之兩個像素及其他兩種色彩之每者的一像素。對於三種類型的彩色像素係紅色、綠色及藍色的情況，將通常希望具有如圖4顯示的一紅色像素、兩個綠色像素及一藍色像素。在圖4中顯示的該較佳4×4最小重複圖案中，紅色像素及藍色像素交替地分離該等綠色像素。
在圖4中顯示的該較佳4×4最小重複圖案中，不存在沿著該最小重複單元之該對角線之全色像素。在一替代組態中，存在一紅色像素、一綠色像素、一藍色像素及沿著該最小重複單元之該對角線之一全色像素。
一般而言，希望沿著該對角線配置該等彩色像素之位置以最小化沿著該CFA圖案之該對角線之相同色彩的彩色像素之間的最大距離。例如，在圖4中，綠色像素之間的最大距離係兩個像素(在對角線方向上)。通常此配置將為該兩個綠色像素係彼此緊挨著之組態所偏好，其將導致該等綠色像素之間的最大距離為三個像素。
在圖3及圖4顯示之該等例示性CFA圖案中的該等彩色像素係紅色、綠色及藍色。熟習此項技術者應瞭解可根據本發明使用其他類型的彩色像素。例如，在本發明之一替代實施例中，彩色像素可為青色、洋紅及黃色。在本發明之另一實施例中，彩色像素可為青色、黃色及綠色。在本發明之又一實施例中，彩色像素可為青色、洋紅、黃色及綠色。亦可使用許多其他類型的彩色像素及彩色像素之組合。
圖5係根據本發明之一較佳實施例之用於自產生於最小重複單元(諸如在圖3或圖4中顯示的最小重複單元)之資料產生一全彩色輸出影像之一演算法之一高階圖。該影像感測器20(圖1)產生一彩色濾光器陣列影像100。在該彩色濾光器陣列影像100中，如由該等最小重複單元(諸如在圖3或圖4中顯示的最小重複單元)所判定，各像素位置係一紅色、綠色、藍色或全色像素。一內插全色影像區塊102自該彩色濾光器陣列影像100產生一經內插的全色影像104。一產生色彩差異區塊108自彩色濾光器陣列影像100及該經內插的全色影像104產生色彩差異值110。一內插色彩差異影像區塊112自該色彩差異值110產生一經內插的色彩差異影像區塊114。一產生經內插的彩色影像區塊106自該經內插的全色影像104及該經內插的色彩差異影像114產生一經內插的彩色影像120。最終，一融合影像區塊118自該經內插的全色影像104及該經內插的彩色影像120產生一全彩色輸出影像116。
圖6係在圖3中顯示的該CFA圖案之該內插全色影像區塊104(圖5)中使用的一像素近鄰之一詳細圖。在圖6中，C1 、C4 、C7 、CA 及CD 係指來自該彩色濾光器陣列影像100(圖5)之相同色彩值之彩色像素值。在圖6中，C7 上方、下方、左側及右側存在兩個相鄰的全色像素值。為了產生經內插的全色值P' 7 ，執行以下計算：
在本發明之該較佳實施例中的α值係0。在本發明之一替代實施例中，α值係1。對於熟習此項技術者將為顯然的是，亦可使用其他的α值。改變α值具有控制在判定該經內插的全色值P' 7 之程序中加權多少彩色像素值之效果。在該彩色濾光器陣列影像100(圖5)之各彩色像素位置處藉由該內插全色影像區塊104(圖5)重複此等計算以產生對應的經內插的全色P' 7 值。與初始全色值(在圖6中的P2 、P3 、P5 、P6 、P8 、P9 、PB PC )組合之該等經內插的全色值產生該經內插的全色影像104(圖5)。可將圖3之該較佳實施例之該內插全色影像區塊104(圖5)之細節歸納為適用於圖4之該替代實施例。在圖4中，各彩色像素係由左側、右側、上方及下方之三個全色像素分離。可調整該內插全色影像區塊104(圖5)以容納此不同的彩色像素間隔。在四個方向之各者上的兩個最靠近的全色像素可與三彩色像素遠離該中央彩色像素之彩色像素一起使用以產生如在圖6中的一像素近鄰。那時可如先前描述般應用該內插全色影像區塊104。
圖7係在圖3中顯示的該CFA圖案之該較佳實施例之該內插彩色差異影像區塊112(圖5)中使用的一像素近鄰之一詳細圖。在圖7中，對於一給定色彩(例如，紅色、綠色或藍色)，D0 、D3 、DC 及DF 係由該產生色彩差異區塊108(圖5)產生的色彩差值110(圖5)。作為一實例，現描述紅色色彩差異之內插。D0 、D3 、DC 及DF 之位置對應於在該彩色濾光器陣列影像100(圖5)中的紅色像素。如下計算D0 、D3 、DC 及DF 之值：
D0 =R0 -P' 0
D3 =R3 -P' 3
DC =RC -P' C
DF =RF -P' F
在此等計算中，R係指來自該彩色濾光器陣列影像100(圖5)之初始的紅色像素值，且P'係指來自該經內插的全色影像104(圖5)之對應的經內插的全色值。下標對應於如圖7顯示的像素位置。該內插色彩差異影像區塊112(圖5)在無一既有色彩差值D下在圖7中的像素位置處產生經內插的色彩差值D'。彩色差異值D0 、D3 、DC 及DF 之標準雙線性內插產生該經內插的彩色差值D'。以下方程式顯示可用以判定該經內插的彩色差值D'之明確計算：
D' 1 =(2D0 +D3 )/3
D' 2 =(D0 +2D3 )/3
D' 4 =(2D0 +DC )/3
D' 5 =(4D0 +2D3 +2DC +DF )/9
D' 6 =(2D0 +4D3 +DC +2DF )/9
D' 7 =(2D3 +DF )/3
D' 8 =(D0 +2DC )/3
D' 9 =(2D0 +D3 +4DC +2DF )/9
D' A =(D0 +2D3 +2DC +4DF )/9
D' B =(D3 +2DF )/3
D' D =(2DC +DF )/3
D' E =(DC +2DF )/3
與該等色彩值(D0 、D3 、DC 及DF )組合之該等經內插的色彩差值組成該經內插的色彩差異影像114(圖5)。
該產生經內插的色彩影像區塊106(圖5)自該經內插的色彩差值D'及對應的初始或經內插的全色值產生經內插的色彩值R'。再次參考圖7，執行以下計算：
R' 1 =D' 1 +P1
R' 2 =D' 2 +P2
R' 4 =D' 4 +P4
R' 5 =D' 5 +P' 5
R' 6 =D' 6 +P6
R' 7 =D' 7 +P7
R' 8 =D' 8 +P8
R' 9 =D' 9 +P9
R' A =D' A +P' A
R' B =D' B +PB
R' D =D' D +PD
R' E =D' E +PE
初始色彩值R與該經內插的色彩值R'一起產生該經內插的色彩影像120(圖5)之紅色值。對於綠色及藍色像素值重複操作之先前設定以完成該經內插的色彩影像120(圖5)之產生。
圖8係在圖4之該替代實施例中顯示的該CFA圖案之該經內插的色彩差異影像區塊112(圖5)中使用的一像素近鄰之一詳細圖。在圖8中，D0 、D4 、D8 及DC 係由該產生色彩差異區塊108(圖5)產生的綠色色彩差值110(圖5)。D0 、D4 、D8 及DC 之位置對應於在該彩色濾光器陣列影像100(圖5)中的綠色像素。如下計算D0 、D4 、D8 及DC 之值：
D0 =G0 -P' 0
D4 =G4 -P' 4
D8 =G8 -P' 8
DC =GC -P' C
在此等計算中，G係指來自該彩色濾光器陣列影像100(圖5)之初始綠色像素值，且P'係指來自該經內插的全色影像104(圖5)之對應的經內插的全色值。參考圖8，該內插色彩差異影像區塊112(圖5)在無一既有色彩差異值D下在該等像素位置處產生經內插的色彩差異值D'。該等色彩差異值D0 、D4 、D8 及DC 之標準雙線性內插根據以下明確計算產生該經內插的色彩差異值D'：
D' 1 =(D0 +D4 )/2
D' 2 =(9D0 +3D4 +3D8 +DC )/16
D' 3 =(D0 +D8 )/2
D' 5 =(3D0 +9D4 +D8 +3DC )/16
D' 6 =(D0 +D4 +D8 +DC )/4
D' 7 =(3D0 +D4 +9D8 +3DC )/16
D' 9 =(D4 +DC )/2
D' A =(D0 +3D4 +3D8 +9DC )/16
D' B =(D8 +DC )/2
該等經內插的色彩差異值與該等色彩值(D0 、D4 、D8 及DC )一起組成該經內插的色彩差異影像114(圖5)。該產生經內插的色彩影像區塊106(圖5)自該等經內插的色彩差值D'及對應的初始或經內插的全色值產生經內插的色彩值G'。再次參考圖8，執行以下計算：
G' 1 =D' 1 +P1
G' 2 =D' 2 +P2
G' 3 =D' 3 +P' 3
G' 5 =D' 5 +P5
G' 6 =D' 6 +P6
G' 7 =D' 7 +P7
G' 9 =D' 9 +P' 9
G' A =D' A +PA
G' B =D' B +PB
該等初始色彩值G及該等經內插的色彩值G'組成該經內插的色彩影像120(圖5)之綠色值。
圖9係在圖4之該替代CFA圖案實施例之該內插色彩差異影像區塊112(圖5)中用以內插紅色及藍色色彩差值之一像素近鄰之一詳細圖。在圖8中，D0 、D4 、DK 及DP 係由該產生色彩差異區塊108(圖5)所產生的紅色或藍色色彩差值110(圖5)。D0 、D4 、DK 及DP 之位置對應於在該彩色濾光器陣列影像100(圖5)中的紅色或藍色像素。作為一實例，現描述紅色色彩差異之內插。如下計算D0 、D4 、DK 及DP 之值：
D0 =R0 -P' 0
D4 =R4 -P' 4
DK =RK -P' K
DP =RP -P' P
在此等計算中，R係指來自該彩色濾光器陣列影像100(圖5)之初始紅色像素值，且P'係指來自該內插全色影像104(圖5)之對應的經內插的全色值。
參考圖9，該內插彩色差異影像區塊112(圖5)在無一既有色彩差值D下，在像素位置處產生經內插的色彩差值D'。該等色彩差值D0 、D4 、DK 及DP 之標準雙線性內插產生經內插的色彩差值D'。明確計算如下：
D' 1 =(3D0 +D4 )/4
D' 2 =(D0 +D4 )/2
D' 3 =(D0 +3D4 )/4
D' 5 =(3D0 +DK )/4
D' 6 =(9D0 +3D4 +3DK +DP )/16
D' 7 =(3D0 +3D4 +DK +DP )/8
D' 8 =(3D0 +9D4 +DK +3DP )/16
D' 9 =(3D4 +DP )/4
D' A =(D0 +DK )/2
D' B =(3D0 +D4 +3DK +DP )/8
D' C =(D0 +D4 +DK +DP )/4
D' D =(D0 +3D4 +DK +3DP )/8
D' E =(D4 +DP )/2
D' F =(D0 +3DK )/4
D' G =(3D0 +D4 +9DK +3DP )/16
D' H =(D0 +D4 +3DK +3DP )/8
D' I =(D0 +3D4 +3DK +9DP )/16
D' J =(D4 +3DP )/4
D' L =(3DK +DP )/4
D' M =(DK +DP )/2
D' N =(DK +3DP )/4
該等經內插的色彩差值與該等色彩值(D0 、D4 、DK 及DP )組成該經內插的色彩差異影像114(圖5)。
該產生經內插的色彩影像區塊106(圖5)自該等經內插的色彩差值D'及對應的初始或經內插的全色值產生經內插的色彩值R'。再次參考圖9，執行以下計算：
R' 1 =D' 1 +P1
R' 2 =D' 2 +P2
R' 3 =D' 3 +P3
R' 5 =D' 5 +P5
R' 6 =D' 6 +P' 6
R' 7 =D' 7 +P7
R' 8 =D' 8 +P8
R' 9 =D' 9 +P9
R' A =D' A +PA
R' B =D' B +PB
R' C =D' C +P' C
R' D =D' D +PD
R' E =D' E +PE
R' F =D' F +PF
R' G =D' G +PG
R' H =D' H +PH
R' I =D' I +P' I
R' J =D' J +PJ
R' L =D' L +PL
R' M =D' M +PM
R' N =D' N +PN
該等初始色彩值R與該等經內插的色彩值R'組成該經內插的色彩影像120(圖5)之紅色值。對於藍色像素值重複操作之先前設定以完成該經內插的色彩影像120(圖5)之產生。
圖10係該融合影像區塊118(圖5)之一較佳實施例之一方塊圖。一低通濾光器區塊204自該內插彩色影像120(圖5)產生一低頻彩色影像206。一高通濾光器區塊200自該經內插的全色影像104(圖5)產生一高頻全色影像202。最終，一合併的影像區塊208藉由組合該低頻彩色影像206與該高頻全色影像202產生該全彩色輸出影像116(圖5)。
該低通濾光器區塊204使用一低通濾光器執行該經內插的彩色影像120(圖5)之一迴旋。在本發明之一較佳實施例中，使用以下迴旋核心：
在數學上，C L =C *g ，其中C係該經內插的彩色影像120(圖5)，CL 係該低頻彩色影像206，且「*」代表迴旋運算子。對於熟習此項技術者將清楚的是可根據本發明使用其他迴旋核心。
該高通濾光器區塊200使用一高通濾光器執行該經內插的全色影像104(圖5)之一迴旋。在本發明之一較佳實施例中，使用以下迴旋核心：
在數學上，PH =P*h，其中P係該經內插的全色影像104(圖5)，且PH 係該高頻全色影像202。對於熟習此項技術者將清楚的是可根據本發明使用其他迴旋核心。
該合併影像區塊208將該高頻全色影像202與該低頻彩色影像206組合在一起以產生該全彩色輸出影像116(圖5)。在本發明之一較佳實施例中，此係藉由簡單地增加高頻全色影像202及該低頻彩色影像206而完成。在數學上，C' =CL +PH ，其中C'係該全彩色輸出影像116(圖5)且其他術語係如先前所定義。
圖11係該融合影像區塊118(圖5)之一替代實施例之一方塊圖。一金字塔分解區塊300自該經內插的全色影像104(圖5)產生一全色影像金字塔302。一金字塔分解區塊304自該經內插的彩色影像120(圖5)產生一彩色影像金字塔306。一經合併的重新建構區塊308藉由組合該全色影像金字塔302與該彩色影像金字塔306產生該全彩色輸出影像116(圖5)。該金字塔分解區塊300藉由一種將為熟習此項技術者所知的方法產生一標準的高斯-拉普拉斯(Gaussian-Laplacian)影像金字塔。簡單地說，執行以下計算：
P0 係該經內插的全色影像104(圖5)。P0 係以先前已描述的該低通濾光器迴旋核心g迴旋。藉由一因數2水平地及垂直地(↓2)子取樣迴旋運算之結果。子取樣之結果係P1 ，其係該全色影像金字塔302之對應高斯金字塔之第一層級分量。此程序透過PN (其中N係所需的金字塔層級數目)繼續產生P2 。在本發明之一實施例中，N=4。
Q1 係該全色影像金字塔302之對應拉普拉斯金字塔之第一層級分量。其係藉由獲得該高斯金字塔之該第一層級分量P1 ，且藉由一因數2水平地及垂直地(↑2)增加取樣P1 ，且接著自該經內插的全色影像104(圖5)減去該結果而計算。可以為熟習此項技術者所知之任何方式執行該增加取樣運算。在本發明之一實施例中，使用熟知的雙線性內插執行該增加取樣。繼續此程序以透過QN 產生Q2 。一起獲得的金字塔分量{P1 、...、PN 、Q1 、...、QN }組成該全色影像金字塔302。
以與金字塔分解區塊300相同(除了單獨地處理該經內插的彩色影像120(圖5)之各彩色以產生紅色、綠色及藍色金字塔，所獲得之該等紅色、綠色及藍色金字塔一起組成該彩色影像金字塔306)之方式執行該金字塔分解區塊304。為了建立記數法，藉由該金字塔分解區塊304所執行的計算如下：
金字塔分量{C1 ,...,CN }一起組成該彩色高斯金字塔及金字塔分量{H1 ,...,HN }一起組成該彩色拉普拉斯金字塔。
該經合併的金字塔重新建構區塊308執行係將為熟習此項技術者所知之標準高斯-拉普拉斯金字塔重新建構之一修改之以下計算：
在三個計算之各組中，藉由一因數2增加取樣一高斯彩色金字塔分量C或一經合併的高斯彩色金字塔分量C"且將C或C"加至一拉普拉斯彩色金字塔分量H。接著藉由2增加取樣一高斯全色金字塔分量P或P'，且將P或P'加至一拉普拉斯全色金字塔分量Q。所得高斯彩色金字塔分量C'以先前描述的低通迴旋核心g迴旋，所得高斯全色金字塔分量P'以先前描述的高通迴旋核心h迴旋，相加結果以產生該經合併的高斯彩色金字塔分量C"。重複此等計算直至產生該全彩色輸出影像116(圖5)C"0 。
可在多種使用者背景及環境中利用如在本發明之該較佳實施例中揭示之用於計算該全彩色輸出影像之演算法。例示性背景及環境包含(無限制)：相機內處理(在數位媒體上讀取感測器影像、數位處理、保存經處理的影像)、大規模的數位照片沖刷(其包含諸如對於大規模實現的提交數位影像之例示性處理步驟或階段、數位處理及數位列印)、零散的數位照片沖刷(對於零散實現的提交數位影像、數位處理、及數位列印)、家庭列印(輸入家庭數位影像、數位處理且在一家庭列印機上列印)、桌上型軟體(使演算法應用於數位影像以使其等更好或甚至僅為了改變其等之軟體)、數位實現(從媒體或在網頁上輸入數位影像、數位處理、在媒體上輸出數位影像、在網際網路上的數位形式)、獨立式終端機服務台(輸入數位影像、數位處理、數位列印或輸出數位媒體)、行動器件(例如，可用作為一處理單元、一顯示單元或給予處理指令之一單元之PDA或蜂巢式電話)及作為經由萬維網所提供的一服務。
在各情況下，用於計算該全彩色輸出影像之該演算法可獨立或可作為一更大系統解決方案之一分量。此外，具有該演算法(例如，輸入、數位處理、對一使用者之顯示(若需要)、使用者請求或處理指令之輸入(若需要)及輸出)之各介面可在相同或不同器件及實體位置上，且可經由公共的或私人的網路連接或基於媒體之通信而進行該等器件與位置之間的通信。在與本發明之先前揭示內容一致的情況下，該等演算法本身可係完全自動的、可具有使用者輸入(亦即，其等可係完全或部分手動的)、可使使用者或操作者檢查以接受/拒絕結果，或可由元資料協助(元資料可係使用者提供，可由一量測器件提供(例如，在一相機內)或由一演算法判定)。此外，該等演算法可為多種工作流程使用者介面方案建立連接。
本文根據本發明揭示的該全彩色輸出影像演算法之該計算可具有利用各种資料偵測及減少技術(例如，面偵測、眼偵測、皮膚偵測、快閃偵測)之內部分量。
已特定參考本發明之某些較佳實施例而詳細描述本發明，但應瞭解在本發明之精神及範疇之內可實現變更及修改。
10．．．來自主體場景之光
11．．．成像台
12．．．透鏡
13．．．中性密度(ND)濾光器區塊
14．．．光圈區塊
16．．．亮度感測器區塊
18．．．快門
20．．．彩色濾光器陣列影像感測器
22．．．類比信號處理器
24．．．類比轉數位(A/D)轉換器
26．．．時序產生器
28．．．影像感測器台
30．．．匯流排
32．．．數位信號處理器(DSP)記憶體
36．．．數位信號處理器(DSP)
38．．．處理階段
40．．．曝光控制器
50．．．系統控制器
52．．．系統控制器匯流排
54．．．程式記憶體
56．．．系統記憶體
57．．．主機介面
60．．．記憶卡介面
62．．．記憶卡插座
64．．．記憶卡
68．．．使用者介面
70．．．取景器顯示器
72．．．曝光顯示器
74．．．使用者輸入
76．．．狀態顯示器
80．．．視訊編碼器
82．．．顯示控制器
88．．．影像顯示器
100．．．彩色濾光器陣列影像
102．．．內插全色影像區塊
104．．．經內插的全色影像
106．．．產生經內插的彩色影像區塊
108．．．產生色彩差異區塊
110．．．色彩差值
112．．．內插色彩差異影像區塊
114．．．經內插的色彩差異影像
116．．．全彩色輸出影像
118．．．融合影像區塊
120．．．經內插的彩色影像
200．．．高通濾光器區塊
202．．．高頻全色影像
204．．．低通濾光器區塊
206．．．低頻彩色影像
208．．．合併影像區塊
300．．．金字塔分解區塊
302．．．全色影像金字塔
304．．．金字塔分解區塊
306．．．彩色影像金字塔
308．．．經合併的金字塔重新建構區塊
圖1係用於實施本發明之一數位相機之一方塊圖；
圖2係來自先前技術之一最小重複單元；
圖3係本發明之較佳實施例之一最小重複單元；
圖4係本發明之一替代實施例之一最小重複單元；
圖5係本發明之一較佳實施例之影像處理鏈之一概觀；
圖6係在內插全色影像值中使用的一像素近鄰；
圖7係在內插彩色差值中使用的一像素近鄰；
圖8係在內插彩色差值中使用的一像素近鄰；
圖9係在內插彩色差值中使用的一像素近鄰；
圖10係顯示本發明之一較佳實施例之融合影像區塊之一詳細圖之一方塊圖；
圖11係顯示本發明之一替代實施例之融合影像區塊之一詳細圖之一方塊圖；
圖12係來自先前技術之一最小重複單元；
圖13A及圖13B皆係來自先前技術之最小重複單元；
圖14A、圖14B及圖14C皆係來自先前技術之用於內插全色影像值之像素近鄰；
圖15係來自先前技術之一最小重複單元；
圖16A及圖16B皆係來自先前技術之最小重複單元；及
圖17係來自先前技術之一最小重複單元。
20．．．彩色濾光器陣列影像感測器
100．．．彩色濾光器陣列影像
102．．．內插全色影像區塊
104．．．經內插的全色影像
106．．．產生經內插的彩色影像區塊
108．．．產生色彩差異區塊
110．．．色彩差值
112．．．內插彩色差異影像區塊
114．．．經內插的色彩差異影像
116．．．全彩色輸出影像
118．．．融合影像區塊
120．．．經內插的彩色影像

Claims (8)

  1. 一種用於捕捉一彩色影像之影像感測器，該彩色影像包含：一個二維光敏像素陣列，其包含全色像素及具有至少兩種不同色彩響應之彩色像素，該等像素係配置在複數個相同正方形最小重複單元中，該複數個相同正方形最小重複單元之每一者具有至少三列及三行，該等彩色像素係沿著該正方形最小重複單元之諸對角線之一者配置，且在該正方形最小重複單元內之所有其他像素皆係全色像素，其中該二維光敏像素陣列係藉由將該複數個相同正方形最小重複單元之每一者設置彼此相鄰而形成。
  2. 如請求項1之影像感測器，其中該等彩色像素係紅色、綠色及藍色像素。
  3. 如請求項1之影像感測器，其中該等彩色像素係青色、洋紅及黃色像素。
  4. 如請求項1之影像感測器，其中該最小重複單元具有三列及三行，且其中該最小重複單元之該等對角線之一者具有一紅色像素、一綠色像素及一藍色像素。
  5. 如請求項1之影像感測器，其中該最小重複單元具有四列及四行，且其中該最小重複單元之該等對角線之一者具有一紅色像素、兩個綠色像素及一藍色像素。
  6. 如請求項5之影像感測器，其中該兩個綠色像素係藉由一紅色像素或一藍色像素而分離。
  7. 如請求項1之影像感測器，其中沿著該對角線之該等彩 色像素之位置係經配置以最小化相同色彩的彩色像素之間的最大距離。
  8. 如請求項1之影像感測器，其中在包含彩色像素之該最小重複單元之該等對角線上不存在全色像素。
TW099116878A 2009-05-27 2010-05-26 用於捕捉彩色影像之影像感測器 TWI504276B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
US12/472,563 US8203633B2 (en) 2009-05-27 2009-05-27 Four-channel color filter array pattern

Publications (2)

Publication Number Publication Date
TW201127072A TW201127072A (en) 2011-08-01
TWI504276B true TWI504276B (zh) 2015-10-11

Family

ID=42358124

Family Applications (1)

Application Number Title Priority Date Filing Date
TW099116878A TWI504276B (zh) 2009-05-27 2010-05-26 用於捕捉彩色影像之影像感測器

Country Status (6)

Country Link
US (1) US8203633B2 (zh)
EP (1) EP2436187B1 (zh)
CN (1) CN102484721B (zh)
HK (1) HK1171309A1 (zh)
TW (1) TWI504276B (zh)
WO (1) WO2010138152A1 (zh)

Families Citing this family (96)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8139130B2 (en) 2005-07-28 2012-03-20 Omnivision Technologies, Inc. Image sensor with improved light sensitivity
US8274715B2 (en) 2005-07-28 2012-09-25 Omnivision Technologies, Inc. Processing color and panchromatic pixels
US7916362B2 (en) 2006-05-22 2011-03-29 Eastman Kodak Company Image sensor with improved light sensitivity
US8031258B2 (en) 2006-10-04 2011-10-04 Omnivision Technologies, Inc. Providing multiple video signals from single sensor
US8452082B2 (en) 2007-09-27 2013-05-28 Eastman Kodak Company Pattern conversion for interpolation
US8866920B2 (en) 2008-05-20 2014-10-21 Pelican Imaging Corporation Capturing and processing of images using monolithic camera array with heterogeneous imagers
EP2289235A4 (en) 2008-05-20 2011-12-28 Pelican Imaging Corp RECORDING AND PROCESSING IMAGES BY MONOLITHIC CAMERA ARRANGEMENT WITH HETEROGENIC IMAGE TRANSFORMER
US11792538B2 (en) 2008-05-20 2023-10-17 Adeia Imaging Llc Capturing and processing of images including occlusions focused on an image sensor by a lens stack array
US7859033B2 (en) 2008-07-09 2010-12-28 Eastman Kodak Company Wafer level processing for backside illuminated sensors
US8224082B2 (en) * 2009-03-10 2012-07-17 Omnivision Technologies, Inc. CFA image with synthetic panchromatic image
US8068153B2 (en) * 2009-03-27 2011-11-29 Omnivision Technologies, Inc. Producing full-color image using CFA image
US8045024B2 (en) * 2009-04-15 2011-10-25 Omnivision Technologies, Inc. Producing full-color image with reduced motion blur
US8203633B2 (en) 2009-05-27 2012-06-19 Omnivision Technologies, Inc. Four-channel color filter array pattern
US8237831B2 (en) * 2009-05-28 2012-08-07 Omnivision Technologies, Inc. Four-channel color filter array interpolation
US8125546B2 (en) * 2009-06-05 2012-02-28 Omnivision Technologies, Inc. Color filter array pattern having four-channels
US8253832B2 (en) * 2009-06-09 2012-08-28 Omnivision Technologies, Inc. Interpolation for four-channel color filter array
WO2011063347A2 (en) 2009-11-20 2011-05-26 Pelican Imaging Corporation Capturing and processing of images using monolithic camera array with heterogeneous imagers
SG10201503516VA (en) 2010-05-12 2015-06-29 Pelican Imaging Corp Architectures for imager arrays and array cameras
US8878950B2 (en) 2010-12-14 2014-11-04 Pelican Imaging Corporation Systems and methods for synthesizing high resolution images using super-resolution processes
BR112012026632A2 (pt) 2011-02-21 2016-07-12 Fujifilm Corp elemento de criação de imagem colorida
BR112012027309A2 (pt) 2011-02-28 2016-08-02 Fujifilm Corp aparelho de geração de imagens coloridas
BR112012029513A2 (pt) * 2011-03-09 2016-12-06 Fujifilm Corp elemento de imageamento de cor.
EP2778635B1 (en) 2011-04-25 2023-11-29 Planet Labs PBC Systems and methods for overhead imaging and video
WO2012155119A1 (en) 2011-05-11 2012-11-15 Pelican Imaging Corporation Systems and methods for transmitting and receiving array camera image data
US20130265459A1 (en) 2011-06-28 2013-10-10 Pelican Imaging Corporation Optical arrangements for use with an array camera
WO2013043761A1 (en) 2011-09-19 2013-03-28 Pelican Imaging Corporation Determining depth from multiple views of a scene that include aliasing using hypothesized fusion
KR102002165B1 (ko) 2011-09-28 2019-07-25 포토내이션 리미티드 라이트 필드 이미지 파일의 인코딩 및 디코딩을 위한 시스템 및 방법
EP2817955B1 (en) 2012-02-21 2018-04-11 FotoNation Cayman Limited Systems and methods for the manipulation of captured light field image data
US9191635B2 (en) 2012-03-19 2015-11-17 Semiconductor Components Industries, Llc Imaging systems with clear filter pixels
EP2833635B1 (en) * 2012-03-27 2018-11-07 Sony Corporation Image processing device, image-capturing element, image processing method, and program
US9210392B2 (en) 2012-05-01 2015-12-08 Pelican Imaging Coporation Camera modules patterned with pi filter groups
KR20150023907A (ko) 2012-06-28 2015-03-05 펠리칸 이매징 코포레이션 결함있는 카메라 어레이들, 광학 어레이들 및 센서들을 검출하기 위한 시스템들 및 방법들
US20140002674A1 (en) 2012-06-30 2014-01-02 Pelican Imaging Corporation Systems and Methods for Manufacturing Camera Modules Using Active Alignment of Lens Stack Arrays and Sensors
JP5927068B2 (ja) 2012-07-06 2016-05-25 富士フイルム株式会社 カラー撮像素子
CN107346061B (zh) 2012-08-21 2020-04-24 快图有限公司 用于使用阵列照相机捕捉的图像中的视差检测和校正的系统和方法
WO2014032020A2 (en) 2012-08-23 2014-02-27 Pelican Imaging Corporation Feature based high resolution motion estimation from low resolution images captured using an array source
US9214013B2 (en) 2012-09-14 2015-12-15 Pelican Imaging Corporation Systems and methods for correcting user identified artifacts in light field images
EP2901671A4 (en) 2012-09-28 2016-08-24 Pelican Imaging Corp CREATING IMAGES FROM LIGHT FIELDS USING VIRTUAL POINTS OF VIEW
US9143711B2 (en) 2012-11-13 2015-09-22 Pelican Imaging Corporation Systems and methods for array camera focal plane control
CN103002292A (zh) * 2012-12-26 2013-03-27 陶霖密 彩色图像传感器及彩色滤色元阵列
WO2014130849A1 (en) 2013-02-21 2014-08-28 Pelican Imaging Corporation Generating compressed light field representation data
US9368530B2 (en) 2013-02-21 2016-06-14 Omnivision Technologies, Inc. Image sensor and color filter array including multiple selectable meshed filter sets
US9374512B2 (en) 2013-02-24 2016-06-21 Pelican Imaging Corporation Thin form factor computational array cameras and modular array cameras
WO2014138697A1 (en) 2013-03-08 2014-09-12 Pelican Imaging Corporation Systems and methods for high dynamic range imaging using array cameras
US8866912B2 (en) 2013-03-10 2014-10-21 Pelican Imaging Corporation System and methods for calibration of an array camera using a single captured image
US9521416B1 (en) 2013-03-11 2016-12-13 Kip Peli P1 Lp Systems and methods for image data compression
WO2014164909A1 (en) 2013-03-13 2014-10-09 Pelican Imaging Corporation Array camera architecture implementing quantum film sensors
WO2014165244A1 (en) * 2013-03-13 2014-10-09 Pelican Imaging Corporation Systems and methods for synthesizing images from image data captured by an array camera using restricted depth of field depth maps in which depth estimation precision varies
US9106784B2 (en) 2013-03-13 2015-08-11 Pelican Imaging Corporation Systems and methods for controlling aliasing in images captured by an array camera for use in super-resolution processing
US9124831B2 (en) 2013-03-13 2015-09-01 Pelican Imaging Corporation System and methods for calibration of an array camera
US9578259B2 (en) 2013-03-14 2017-02-21 Fotonation Cayman Limited Systems and methods for reducing motion blur in images or video in ultra low light with array cameras
US9100586B2 (en) 2013-03-14 2015-08-04 Pelican Imaging Corporation Systems and methods for photometric normalization in array cameras
US10122993B2 (en) 2013-03-15 2018-11-06 Fotonation Limited Autofocus system for a conventional camera that uses depth information from an array camera
US9445003B1 (en) 2013-03-15 2016-09-13 Pelican Imaging Corporation Systems and methods for synthesizing high resolution images using image deconvolution based on motion and depth information
US9633442B2 (en) 2013-03-15 2017-04-25 Fotonation Cayman Limited Array cameras including an array camera module augmented with a separate camera
US9497429B2 (en) 2013-03-15 2016-11-15 Pelican Imaging Corporation Extended color processing on pelican array cameras
WO2014145856A1 (en) 2013-03-15 2014-09-18 Pelican Imaging Corporation Systems and methods for stereo imaging with camera arrays
US9497370B2 (en) 2013-03-15 2016-11-15 Pelican Imaging Corporation Array camera architecture implementing quantum dot color filters
FR3004882B1 (fr) * 2013-04-17 2015-05-15 Photonis France Dispositif d'acquisition d'images bimode
US9898856B2 (en) 2013-09-27 2018-02-20 Fotonation Cayman Limited Systems and methods for depth-assisted perspective distortion correction
WO2015070105A1 (en) 2013-11-07 2015-05-14 Pelican Imaging Corporation Methods of manufacturing array camera modules incorporating independently aligned lens stacks
WO2015074078A1 (en) 2013-11-18 2015-05-21 Pelican Imaging Corporation Estimating depth from projected texture using camera arrays
US10136107B2 (en) 2013-11-21 2018-11-20 Semiconductor Components Industries, Llc Imaging systems with visible light sensitive pixels and infrared light sensitive pixels
EP3075140B1 (en) 2013-11-26 2018-06-13 FotoNation Cayman Limited Array camera configurations incorporating multiple constituent array cameras
US10089740B2 (en) 2014-03-07 2018-10-02 Fotonation Limited System and methods for depth regularization and semiautomatic interactive matting using RGB-D images
US9247117B2 (en) 2014-04-07 2016-01-26 Pelican Imaging Corporation Systems and methods for correcting for warpage of a sensor array in an array camera module by introducing warpage into a focal plane of a lens stack array
WO2015192056A1 (en) 2014-06-13 2015-12-17 Urthecast Corp. Systems and methods for processing and providing terrestrial and/or space-based earth observation video
US9521319B2 (en) 2014-06-18 2016-12-13 Pelican Imaging Corporation Array cameras and array camera modules including spectral filters disposed outside of a constituent image sensor
CN113256730B (zh) 2014-09-29 2023-09-05 快图有限公司 用于阵列相机的动态校准的系统和方法
US10871561B2 (en) 2015-03-25 2020-12-22 Urthecast Corp. Apparatus and methods for synthetic aperture radar with digital beamforming
US9942474B2 (en) 2015-04-17 2018-04-10 Fotonation Cayman Limited Systems and methods for performing high speed video capture and depth estimation using array cameras
WO2017044168A2 (en) 2015-06-16 2017-03-16 King Abdulaziz City Of Science And Technology Efficient planar phased array antenna assembly
US9654756B1 (en) 2015-11-16 2017-05-16 Motorola Mobility Llc Method and apparatus for interpolating pixel colors from color and panchromatic channels to color channels
CA3044806A1 (en) 2015-11-25 2017-06-01 Urthecast Corp. Synthetic aperture radar imaging apparatus and methods
EP3631504B8 (en) 2017-05-23 2023-08-16 Spacealpha Insights Corp. Synthetic aperture radar imaging apparatus and methods
EP3646054A4 (en) 2017-05-23 2020-10-28 King Abdulaziz City for Science and Technology APERTURE SYNTHESIS RADAR IMAGING APPARATUS FOR MOBILE TARGETS
US10482618B2 (en) 2017-08-21 2019-11-19 Fotonation Limited Systems and methods for hybrid depth regularization
US11525910B2 (en) 2017-11-22 2022-12-13 Spacealpha Insights Corp. Synthetic aperture radar apparatus and methods
US10616536B2 (en) 2018-01-12 2020-04-07 Semiconductor Components Industries, Llc Imaging systems having broadband monochromatic and chromatic image sensors
JP7349806B2 (ja) * 2018-03-28 2023-09-25 ブラックマジック デザイン ピーティーワイ リミテッド 画像処理方法及びフィルタアレイ
CN114422766B (zh) * 2018-08-03 2024-06-04 杭州海康威视数字技术股份有限公司 一种图像采集设备
CN111684794A (zh) * 2019-05-30 2020-09-18 深圳市大疆创新科技有限公司 一种色彩滤镜阵列、图像传感器和拍摄装置
KR102646521B1 (ko) 2019-09-17 2024-03-21 인트린식 이노베이션 엘엘씨 편광 큐를 이용한 표면 모델링 시스템 및 방법
EP4042101A4 (en) 2019-10-07 2023-11-22 Boston Polarimetrics, Inc. SYSTEMS AND METHODS FOR DETECTING SURFACE NORMALS USING POLARIZATION
EP4066001A4 (en) 2019-11-30 2024-01-24 Boston Polarimetrics, Inc. SYSTEMS AND METHODS FOR TRANSPARENT OBJECT SEGMENTATION USING POLARIZATION GUIDES
JP7462769B2 (ja) 2020-01-29 2024-04-05 イントリンジック イノベーション エルエルシー 物体の姿勢の検出および測定システムを特徴付けるためのシステムおよび方法
WO2021154459A1 (en) 2020-01-30 2021-08-05 Boston Polarimetrics, Inc. Systems and methods for synthesizing data for training statistical models on different imaging modalities including polarized images
CN111314592B (zh) * 2020-03-17 2021-08-27 Oppo广东移动通信有限公司 图像处理方法、摄像头组件及移动终端
CN111510692B (zh) * 2020-04-23 2022-01-18 Oppo广东移动通信有限公司 图像处理方法、终端及计算机可读存储介质
US11953700B2 (en) 2020-05-27 2024-04-09 Intrinsic Innovation Llc Multi-aperture polarization optical systems using beam splitters
CN112235485B (zh) * 2020-10-09 2023-04-07 Oppo广东移动通信有限公司 图像传感器、图像处理方法、成像装置、终端及可读存储介质
CN112261391B (zh) * 2020-10-26 2022-01-04 Oppo广东移动通信有限公司 图像处理方法、摄像头组件及移动终端
US12020455B2 (en) 2021-03-10 2024-06-25 Intrinsic Innovation Llc Systems and methods for high dynamic range image reconstruction
US11290658B1 (en) 2021-04-15 2022-03-29 Boston Polarimetrics, Inc. Systems and methods for camera exposure control
US11954886B2 (en) 2021-04-15 2024-04-09 Intrinsic Innovation Llc Systems and methods for six-degree of freedom pose estimation of deformable objects
US11689813B2 (en) 2021-07-01 2023-06-27 Intrinsic Innovation Llc Systems and methods for high dynamic range imaging using crossed polarizers

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0810795A2 (en) * 1996-05-29 1997-12-03 Eastman Kodak Company A particular pattern of pixels for a color filter array which is used to derive luminance and chrominance values
US20080128598A1 (en) * 2006-03-31 2008-06-05 Junichi Kanai Imaging device camera system and driving method of the same
TW200835350A (en) * 2006-11-30 2008-08-16 Eastman Kodak Co Processing images having color and panchromatic pixels

Family Cites Families (92)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US3971065A (en) 1975-03-05 1976-07-20 Eastman Kodak Company Color imaging array
US4437112A (en) 1980-02-15 1984-03-13 Canon Kabushiki Kaisha Solid-state color imaging apparatus
US4896207A (en) 1988-06-17 1990-01-23 Eastman Kodak Company Color imaging apparatus employing a horizontal stripe color filter to reduce rise-time artifacts
US5323233A (en) 1990-07-31 1994-06-21 Canon Kabushiki Kaisha Image signal processing apparatus having a color filter with offset luminance filter elements
US5903388A (en) 1992-06-11 1999-05-11 Sedlmayr Steven R High efficiency electromagnetic beam projector and systems and method for implementation thereof
US5227313A (en) 1992-07-24 1993-07-13 Eastman Kodak Company Process for making backside illuminated image sensors
US5244817A (en) 1992-08-03 1993-09-14 Eastman Kodak Company Method of making backside illuminated image sensors
US5506619A (en) 1995-03-17 1996-04-09 Eastman Kodak Company Adaptive color plan interpolation in single sensor color electronic camera
US5786236A (en) 1996-03-29 1998-07-28 Eastman Kodak Company Backside thinning using ion-beam figuring
US6097835A (en) 1997-07-23 2000-08-01 Lockheed Martin Corporation Projective pan sharpening methods and apparatus
US5914749A (en) 1998-03-31 1999-06-22 Intel Corporation Magenta-white-yellow (MWY) color system for digital image sensor applications
US6011875A (en) 1998-04-29 2000-01-04 Eastman Kodak Company Process for enhancing the spatial resolution of multispectral imagery using pan-sharpening
US6429036B1 (en) 1999-01-14 2002-08-06 Micron Technology, Inc. Backside illumination of CMOS image sensor
US6168965B1 (en) 1999-08-12 2001-01-02 Tower Semiconductor Ltd. Method for making backside illuminated image sensor
US20010054723A1 (en) 2000-03-17 2001-12-27 Tadashi Narui Image sensor, method of fabricating the same, and exposure apparatus, measuring device, alignment device, and aberration measuring device using the image sensor
US6441848B1 (en) 2000-05-19 2002-08-27 Damon L. Tull Preventing blur caused by motion of the subject in a digital image
US6813046B1 (en) 2000-11-07 2004-11-02 Eastman Kodak Company Method and apparatus for exposure control for a sparsely sampled extended dynamic range image sensing device
US6611380B2 (en) 2001-12-21 2003-08-26 Eastman Kodak Company System and method for calibration of display system with linear array modulator
US7012643B2 (en) 2002-05-08 2006-03-14 Ball Aerospace & Technologies Corp. One chip, low light level color camera
AU2003272202A1 (en) 2002-06-21 2004-01-06 The Trustees Of Columbia University In The City Of New York Systems and methods for de-blurring motion blurred images
US7340099B2 (en) 2003-01-17 2008-03-04 University Of New Brunswick System and method for image fusion
JP3804617B2 (ja) 2003-02-14 2006-08-02 コニカミノルタフォトイメージング株式会社 画像処理装置及び方法
FI20030583A (fi) 2003-04-16 2004-10-17 Upstream Engineering Oy Dataprojektori
JP2004341206A (ja) 2003-05-15 2004-12-02 Olympus Corp 表示装置
US8264576B2 (en) 2007-03-05 2012-09-11 DigitalOptics Corporation Europe Limited RGBW sensor array
JP4349048B2 (ja) 2003-09-22 2009-10-21 セイコーエプソン株式会社 プロジェクタ
JP4046069B2 (ja) 2003-11-17 2008-02-13 ソニー株式会社 固体撮像素子及び固体撮像素子の製造方法
JP2005268738A (ja) 2004-02-17 2005-09-29 Sony Corp 固体撮像素子とその製造方法、及び半導体集積回路装置とその製造方法
JP4211696B2 (ja) 2004-06-30 2009-01-21 ソニー株式会社 固体撮像装置の製造方法
US7298922B1 (en) 2004-07-07 2007-11-20 Lockheed Martin Corporation Synthetic panchromatic imagery method and system
US7880785B2 (en) 2004-07-21 2011-02-01 Aptina Imaging Corporation Rod and cone response sensor
US8570389B2 (en) 2004-07-22 2013-10-29 Broadcom Corporation Enhancing digital photography
US7425460B2 (en) 2004-09-17 2008-09-16 California Institute Of Technology Method for implementation of back-illuminated CMOS or CCD imagers
JP2006184567A (ja) 2004-12-27 2006-07-13 Toshiba Corp プロジェクション映像表示装置とその明るさ調整方法
US7723215B2 (en) 2005-02-11 2010-05-25 Sarnoff Corporation Dark current reduction in back-illuminated imaging sensors and method of fabricating same
US7238583B2 (en) 2005-02-11 2007-07-03 Sarnoff Corporation Back-illuminated imaging device and method of fabricating same
US8654201B2 (en) 2005-02-23 2014-02-18 Hewlett-Packard Development Company, L.P. Method for deblurring an image
US7830430B2 (en) 2005-07-28 2010-11-09 Eastman Kodak Company Interpolation of panchromatic and color pixels
US8139130B2 (en) 2005-07-28 2012-03-20 Omnivision Technologies, Inc. Image sensor with improved light sensitivity
US8274715B2 (en) 2005-07-28 2012-09-25 Omnivision Technologies, Inc. Processing color and panchromatic pixels
US20070046807A1 (en) 2005-08-23 2007-03-01 Eastman Kodak Company Capturing images under varying lighting conditions
US7315014B2 (en) 2005-08-30 2008-01-01 Micron Technology, Inc. Image sensors with optical trench
US20070052050A1 (en) 2005-09-07 2007-03-08 Bart Dierickx Backside thinned image sensor with integrated lens stack
US7978240B2 (en) * 2005-10-03 2011-07-12 Konica Minolta Photo Imaging, Inc. Enhancing image quality imaging unit and image sensor
CN101455075B (zh) * 2005-10-13 2011-09-14 Rjs科技公司 一种高性能色滤光片马赛克阵列的系统与方法
US20070159542A1 (en) 2006-01-12 2007-07-12 Gang Luo Color filter array with neutral elements and color image formation
US7688368B2 (en) 2006-01-27 2010-03-30 Eastman Kodak Company Image sensor with improved light sensitivity
US7586139B2 (en) 2006-02-17 2009-09-08 International Business Machines Corporation Photo-sensor and pixel array with backside illumination and method of forming the photo-sensor
US7680354B2 (en) 2006-03-22 2010-03-16 Arcsoft, Inc. Image deblur based on two images
JP5000914B2 (ja) 2006-03-30 2012-08-15 日東光学株式会社 映像プロジェクション装置
JP5011814B2 (ja) 2006-05-15 2012-08-29 ソニー株式会社 撮像装置、および画像処理方法、並びにコンピュータ・プログラム
US7916362B2 (en) 2006-05-22 2011-03-29 Eastman Kodak Company Image sensor with improved light sensitivity
US7706022B2 (en) 2006-06-12 2010-04-27 Kabushiki Kaisha Toshiba Image forming apparatus and image forming method
KR100791336B1 (ko) 2006-08-10 2008-01-07 삼성전자주식회사 이미지 센서 제조 방법
US8031258B2 (en) 2006-10-04 2011-10-04 Omnivision Technologies, Inc. Providing multiple video signals from single sensor
US7796324B2 (en) 2006-10-10 2010-09-14 Panasonic Corporation Wavelength converting apparatus and image displaying apparatus
US20080123997A1 (en) 2006-11-29 2008-05-29 Adams James E Providing a desired resolution color image
US7893976B2 (en) 2006-12-01 2011-02-22 Eastman Kodak Company Light sensitivity in image sensors
JP5085140B2 (ja) * 2007-01-05 2012-11-28 株式会社東芝 固体撮像装置
US7733931B2 (en) 2007-01-09 2010-06-08 Seiko Epson Corporation Light source device, projector device, monitor device, and lighting device
US8184926B2 (en) 2007-02-28 2012-05-22 Microsoft Corporation Image deblurring with blurred/noisy image pairs
JP4930109B2 (ja) 2007-03-06 2012-05-16 ソニー株式会社 固体撮像装置、撮像装置
WO2008118525A1 (en) 2007-03-27 2008-10-02 Sarnoff Corporation Method of fabricating back-illuminated imaging sensors
US8594451B2 (en) 2007-03-30 2013-11-26 Omnivision Technologies, Inc. Edge mapping incorporating panchromatic pixels
JP4888261B2 (ja) 2007-07-12 2012-02-29 セイコーエプソン株式会社 光源装置、画像表示装置及びモニタ装置
US7855740B2 (en) 2007-07-20 2010-12-21 Eastman Kodak Company Multiple component readout of image sensor
US8896712B2 (en) 2007-07-20 2014-11-25 Omnivision Technologies, Inc. Determining and correcting for imaging device motion during an exposure
CN101408677B (zh) 2007-10-11 2011-07-27 鸿富锦精密工业（深圳）有限公司 立体投影光学系统
US7871165B2 (en) 2007-11-30 2011-01-18 Eastman Kodak Company Stereo projection apparatus using polarized solid state light sources
JP5213670B2 (ja) 2008-01-16 2013-06-19 三洋電機株式会社 撮像装置及びぶれ補正方法
US7999870B2 (en) 2008-02-01 2011-08-16 Omnivision Technologies, Inc. Sampling and readout of an image sensor having a sparse color filter array pattern
WO2009105120A1 (en) 2008-02-19 2009-08-27 Sarnoff Corporation Method and device for reducing crosstalk in back illuminated imagers
US8164651B2 (en) 2008-04-29 2012-04-24 Omnivision Technologies, Inc. Concentric exposure sequence for image sensor
US8035711B2 (en) 2008-05-22 2011-10-11 Panavision Imaging, Llc Sub-pixel array optical sensor
US20100006908A1 (en) 2008-07-09 2010-01-14 Brady Frederick T Backside illuminated image sensor with shallow backside trench for photodiode isolation
US7859033B2 (en) 2008-07-09 2010-12-28 Eastman Kodak Company Wafer level processing for backside illuminated sensors
US8017426B2 (en) 2008-07-09 2011-09-13 Omnivision Technologies, Inc. Color filter array alignment mark formation in backside illuminated image sensors
US7915067B2 (en) 2008-07-09 2011-03-29 Eastman Kodak Company Backside illuminated image sensor with reduced dark current
US8130278B2 (en) 2008-08-01 2012-03-06 Omnivision Technologies, Inc. Method for forming an improved image using images with different resolutions
US8164682B2 (en) 2008-10-14 2012-04-24 Omnivision Technologies, Inc. Dithered focus evaluation
US8111307B2 (en) 2008-10-25 2012-02-07 Omnivision Technologies, Inc. Defective color and panchromatic CFA image
US8073246B2 (en) 2008-11-07 2011-12-06 Omnivision Technologies, Inc. Modifying color and panchromatic channel CFA image
US20100149396A1 (en) 2008-12-16 2010-06-17 Summa Joseph R Image sensor with inlaid color pixels in etched panchromatic array
US8224082B2 (en) 2009-03-10 2012-07-17 Omnivision Technologies, Inc. CFA image with synthetic panchromatic image
US8068153B2 (en) 2009-03-27 2011-11-29 Omnivision Technologies, Inc. Producing full-color image using CFA image
US8218068B2 (en) 2009-04-01 2012-07-10 Omnivision Technologies, Inc. Exposing pixel groups in producing digital images
US8045024B2 (en) 2009-04-15 2011-10-25 Omnivision Technologies, Inc. Producing full-color image with reduced motion blur
US8203633B2 (en) 2009-05-27 2012-06-19 Omnivision Technologies, Inc. Four-channel color filter array pattern
US8237831B2 (en) * 2009-05-28 2012-08-07 Omnivision Technologies, Inc. Four-channel color filter array interpolation
US20100309340A1 (en) 2009-06-03 2010-12-09 Border John N Image sensor having global and rolling shutter processes for respective sets of pixels of a pixel array
US8125546B2 (en) 2009-06-05 2012-02-28 Omnivision Technologies, Inc. Color filter array pattern having four-channels
US8253832B2 (en) 2009-06-09 2012-08-28 Omnivision Technologies, Inc. Interpolation for four-channel color filter array

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0810795A2 (en) * 1996-05-29 1997-12-03 Eastman Kodak Company A particular pattern of pixels for a color filter array which is used to derive luminance and chrominance values
US20080128598A1 (en) * 2006-03-31 2008-06-05 Junichi Kanai Imaging device camera system and driving method of the same
TW200835350A (en) * 2006-11-30 2008-08-16 Eastman Kodak Co Processing images having color and panchromatic pixels

Also Published As

Publication number Publication date
HK1171309A1 (zh) 2013-03-22
TW201127072A (en) 2011-08-01
EP2436187A1 (en) 2012-04-04
CN102484721A (zh) 2012-05-30
CN102484721B (zh) 2014-12-24
US20100302423A1 (en) 2010-12-02
WO2010138152A1 (en) 2010-12-02
EP2436187B1 (en) 2014-04-30
US8203633B2 (en) 2012-06-19

Similar Documents

Publication Publication Date Title
TWI504276B (zh) 用於捕捉彩色影像之影像感測器
US8237831B2 (en) Four-channel color filter array interpolation
US8125546B2 (en) Color filter array pattern having four-channels
US8253832B2 (en) Interpolation for four-channel color filter array
USRE47458E1 (en) Pattern conversion for interpolation
TWI435167B (zh) 影像感測器中改良的光感性
JP5749741B2 (ja) ノイズ低減方法
JP5543616B2 (ja) 色フィルタアレイ画像反復デノイズ
JP2010537555A (ja) パンクロの市松模様パターンを有するカラーフィルタアレイを有する画像センサ
US20110115954A1 (en) Sparse color pixel array with pixel substitutes