TWI489864B - 校正在影像感測器的彩色濾波陣列中彩色畫素的畫素資訊的校正方法 - Google Patents

校正在影像感測器的彩色濾波陣列中彩色畫素的畫素資訊的校正方法 Download PDF

Info

Publication number
TWI489864B
TWI489864B TW102126833A TW102126833A TWI489864B TW I489864 B TWI489864 B TW I489864B TW 102126833 A TW102126833 A TW 102126833A TW 102126833 A TW102126833 A TW 102126833A TW I489864 B TWI489864 B TW I489864B
Authority
TW
Taiwan
Prior art keywords
pixels
color
pixel
mxm
distance coefficient
Prior art date
Application number
TW102126833A
Other languages
English (en)
Other versions
TW201427415A (zh
Inventor
Zong Ru Tu
Wu Cheng Kuo
Chin Chuan Hsieh
Yu Kun Hsiao
Original Assignee
Visera Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Visera Technologies Co Ltd filed Critical Visera Technologies Co Ltd
Publication of TW201427415A publication Critical patent/TW201427415A/zh
Application granted granted Critical
Publication of TWI489864B publication Critical patent/TWI489864B/zh

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/10—Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
    • H04N25/11—Arrangement of colour filter arrays [CFA]; Filter mosaics
    • H04N25/13—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
    • H04N25/133—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements including elements passing panchromatic light, e.g. filters passing white light
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/10—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
    • H04N23/12—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths with one sensor only
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H04N23/84—Camera processing pipelines; Components thereof for processing colour signals
    • H04N23/843—Demosaicing, e.g. interpolating colour pixel values
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/10—Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
    • H04N25/11—Arrangement of colour filter arrays [CFA]; Filter mosaics
    • H04N25/13—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
    • H04N25/135—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements based on four or more different wavelength filter elements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2209/00—Details of colour television systems
    • H04N2209/04—Picture signal generators
    • H04N2209/041—Picture signal generators using solid-state devices
    • H04N2209/042—Picture signal generators using solid-state devices having a single pick-up sensor
    • H04N2209/045—Picture signal generators using solid-state devices having a single pick-up sensor using mosaic colour filter
    • H04N2209/046—Colour interpolation to calculate the missing colour values

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Color Television Image Signal Generators (AREA)
  • Image Processing (AREA)

Description

校正在影像感測器的彩色濾波陣列中彩色畫素的畫素資訊的校正方法
本發明係有關於一種影像感測器的彩色濾波陣列，特別是有關於一種校正方法，用以校正在影像感測器的彩色濾波陣列中彩色畫素的畫素資訊。
互補式金氧半(Complementary Metal Oxide Semiconductor，CMOS)影像感測器(CMOS image sensor，CIS)是一種在數位攝影設備中執行電子底片任務的造像裝置。CIS已廣泛地應用用在各種領域，例如，數位相機、相機手機、網路相機、筆電安全防護裝置、汽車、以及使用於醫療應用的微型造像裝置。為了達到較高的影像感測品質，對於CIS而言必須提供較廣的動態範圍以及較高的靈敏度。
CIS包括彩色濾波陣列、微透鏡陣列、以及畫素感測器(例如感光二極體)。彩色濾波陣列是放置在影像感測器的畫素感測器之上的微小彩色率光片相間配置的陣列，以擷取色彩資訊。貝爾濾波陣列(Bayer filter array)則是一種典型的彩色濾波陣列，其在感光二極體的方格上配置紅色、綠色、與藍色(RGB)彩色濾波器。
目前已提出了具有白色、紅色、綠色、與藍色(WRGB)配置的複數個可能的彩色濾波陣列，以增加CIS的影像靈敏度。舉例來說，Toshiba提出了具有複數畫素陣列的1/4WRGB彩色濾波陣列。如第1A圖所示，每一畫素陣列包括四(4)個2x2畫素單元，且每一個2x2畫素單元具有一(1)個白色畫素、一(1)個紅色畫素、一(1)個綠色畫素、以及一(1)個藍色畫素。
在Toshiba提出1/4WRGB彩色濾波陣列後，Eastman Kodak Company提出了具有複數畫素陣列的2/4WRGB彩色濾波陣列。如第1B圖所示，每一畫素陣列包括四(4)個2x2畫素單元，且每一個2x2畫素單元具有兩(2)個白色畫素以及兩(2)個相同顏色的彩色畫素。
由於1/4WRGB彩色濾波陣列在彩色濾波陣列的每一畫素單元中具有一(1)個白色畫素，因此，1/4WRGB彩色濾波陣列的影像靈敏度高於典型的貝爾濾波陣列。同樣地，由於2/4WRGB彩色濾波陣列在彩色濾波陣列的每一畫素單元中具有兩(2)個白色畫素，因此，2/4WRGB彩色濾波陣列的影像靈敏度高於典型的貝爾濾波陣列以及1/4WRGB彩色濾波陣列。然而，由於在2/4WRGB彩色濾波陣列中的白色畫素數量增加，使得具有2/4彩色濾波陣列的CIS的影像解析度將會降低。因此，在一彩色濾波陣列的白色畫素數量越多時，CIS的影像靈敏度越高，但CIS的影像解析度越低。
根據上述，如何提出其可提供較高影像靈敏度 而不會犧牲影像解析度的影像感測器變為重要的議題。
為了達到上述目的，本發明提出了一種校正方法，用以校正在影像感測器的彩色濾波陣列中複數彩色畫素的畫素資訊。上述彩色濾波陣列包括複數個畫素陣列。每一畫素陣列由四(4)個NxN畫素單元所組成，N等於或大於2的整數。每一NxN畫素陣列具有複數個白色畫素以及至少一個彩色畫素。上述至少一個彩色畫素包括一個或多個紅色畫素、一個或多個綠色畫素、一個或多個藍色畫素、或前述的任何組合。在上述四(4)個畫素單元的每一者中的上述至少一彩色畫素的數量相同，在上述四(4)個畫素單元的每一者中的上述至少一彩色畫素的數量小於在上述四(4)個畫素單元的每一者中的上述白色畫素的數量。上述校正方法包括建立具有MxM個距離係數(dfij )的MxM距離係數表單；以及選擇上述彩色濾波陣列的一組MxM個畫素，其中，上述彩色濾波陣列的上述MxM個畫素包含至少兩個紅色畫素、至少兩個綠色畫素、至少兩個藍色畫素、以及一目標畫素，且上述目標畫素為上述彩色濾波陣列的上述MxM個畫素的中央畫素。上述校正方法還包括藉由使用上述MxM距離係數表單的多個距離係數以及使用上述至少兩個紅色畫素中每一者的估計畫素資訊(Rij )，來計算在上述彩色濾波陣列的上述MxM個畫素中由上述至少兩個紅色畫素至上述目標畫素的紅色-彩色貢獻度(Raverage )；藉由使用上述MxM距離係數表單的多個距離係數以及使用上述至少兩個綠色畫素中每一者的估計畫素資訊(Gij )，來計算在上述彩色濾波陣列的上述MxM個畫素中由上述至少兩個綠色畫素至上 述目標畫素的綠色-彩色貢獻度(Gaverage )；以及藉由使用上述MxM距離係數表單的多個距離係數以及使用上述至少兩個藍色畫素中每一者的估計畫素資訊(Bij )，來計算在上述彩色濾波陣列的上述MxM個畫素中由上述至少兩個藍色畫素至上述目標畫素的藍色-彩色貢獻度(Baverage )。上述校正方法更包括根據上述紅色-彩色貢獻度(Raverage )、上述綠色-彩色貢獻度(Gaverage )、上述藍色-彩色貢獻度(Baverage )、以及上述目標畫素的估計畫素資訊(W)，來計算上述目標畫素的紅色-彩色畫素效能(fRij )、上述目標畫素的綠色-彩色畫素效能(fGij )、以及上述目標畫素的一藍色-彩色畫素效能(fBij )中至少一者；以及計算紅色-彩色校正係數(TR )、綠色-彩色校正係數(TG )、以及藍色-彩色校正係數(TB )中至少一者，其中，上述紅色-彩色校正係數(TR )是上述紅色-彩色畫素效能(fRij )對上述紅色-彩色貢獻度(Raverage )的比例，上述綠色-彩色校正係數(TG )是上述綠色-彩色畫素效能(fGij )對上述綠色-彩色貢獻度(Gaverage )的比例，且上述藍色-彩色校正係數(TB )是上述藍色-彩色畫素效能(fBij )對上述藍色-彩色貢獻度(Baverage )的比例。上述校正方法也包括執行以下複數步驟中至少一者：藉由將上述紅色-彩色校正係數(TR )實施於上述至少兩個紅色畫素中每一者的估計畫素資訊(Rij )來獲得上述至少兩個紅色畫素中每一者的校正畫素資訊(Rfinal )；藉由將上述綠色-彩色校正係數(TG )實施於上述至少兩個綠色畫素中每一者的估計畫素資訊(Gij )來獲得上述至少兩個綠色畫素中每一者的校正畫素資訊(Gfinal )；以及藉由將上述藍色-彩色校正係數 (TB )實施於上述至少兩個藍色畫素中每一者的估計畫素資訊(Bij )來獲得上述至少兩個藍色畫素中每一者的校正畫素資訊(Bfinal )。
R‧‧‧紅色
G‧‧‧綠色
B‧‧‧藍色
B45 、B49 、B85 、B89 ‧‧‧藍色畫素
R54 、R58 、R94 、R98 ‧‧‧紅色畫素
G44 、G48 、G55 、G59 、G84 、G88 、G95 、G99 ‧‧‧綠色畫素
dfij 、dfTP ‧‧‧距離係數
dC ‧‧‧距離係數表單的中央
dij ‧‧‧距離係數表單中的第i列與第j行交錯
S2...S6‧‧‧方法步驟
TP‧‧‧目標(白色)畫素
WTP ‧‧‧目標(白色)畫素的估計畫素資訊
第1A圖表示習知1/4WRGB彩色濾波陣列的畫素陣列；第1B圖表示習知2/4WRGB彩色濾波陣列的畫素陣列；第2圖表示根據本發明一實施例的多個3/4WRGB彩色濾波陣列的畫素陣列；第3圖表示根據本發明一實施例，校正影像感測器之彩色濾波陣列中彩色畫素的畫素資訊的步驟流程圖；第4圖表示根據本發明一實施例關於3/4WRGB彩色濾波陣列的7x7距離敘述表單；第5A-5C圖表示根據本發明一實施例的3/4WRGB彩色濾波陣列以及彩色濾波陣列中所選擇的的7x7個畫素的區域；第6A-6P圖表示根據本發明一實施例，如何計算在3/4WRGB彩色濾波陣列中的紅色-彩色貢獻度(Raverage )、綠色-彩色貢獻度(Gaverage )、以及藍色-彩色貢獻度(Baverage )；以及第7A-7C圖表示根據本發明另一實施例，如何計算在3/4WRGB彩色濾波陣列中的紅色-彩色貢獻度(Raverage )、綠色-彩色貢獻度(Gaverage )、以及藍色-彩色貢獻度(Baverage )。
為使本發明之上述目的、特徵和優點能更明顯 易懂，下文特舉一較佳實施例，並配合所附圖式，作詳細說明如下。
如同本發明所述，影像感測器的彩色濾波陣列包括複數畫素陣列。每一畫素陣列包括四(4)個NxN畫素單元，其中，N為大於或等於2的整數。每一個NxN畫素單元具有複數個白色畫素以及至少一個彩色畫素，且該至少一個彩色畫素包括一個或多個紅色畫素、一個或多個綠色畫素、一個或多個藍色畫素、或前述的任何組合。在四(4)個NxN畫素單元的每一者中的該至少一彩色畫素的數量相同。在四(4)個NxN畫素單元的每一者中的該至少一個彩色畫素的數量，小於在四(4)個NxN畫素單元的每一者中的複數白色畫素的數量。
第2圖係表示根據本發明一實施例的多個3/4WRGB彩色濾波陣列的畫素陣列。每一個3/4WRGB彩色濾波陣列具有複數個畫素陣列。如第2圖所示，每一畫素陣列包括四(4)個2x2畫素單元，且每一個2x2畫素單元具有三(3)個白色畫素以及一(1)個彩色(紅色、綠色、或藍色)畫素。
在另一實施例中，彩色濾波陣列可以是5/9WRGB彩色濾波陣列、6/9WRGB彩色濾波陣列、7/9WRGB彩色濾波陣列、8/9WRGB彩色濾波陣列等等。舉例來說，一個5/9WRGB彩色濾波陣列可具有複數個畫素陣列，每一個畫素陣列由四(4)個3x3畫素單元所組成，且每一3x3畫素單元具有五(5)個白色畫素以及四(4)個彩色(紅色、綠色、以及/或藍色的組合)畫素。尤其是，每一畫素陣列(由四(4)個3x3畫素單元所組成)係由四(4)個紅色畫素、八(8)個綠 色畫素、四個(4)藍色畫素、以及二十(20)個白色畫素所組成。應注意到，本發明也可實施至其具有大於2x2畫素單元以及3x3畫素單元的NxN畫素單元的WRGB彩色濾波陣列。
一個6/9WRGB彩色濾波陣列可具有複數個畫素陣列，每一畫素陣列由四(4)個3x3畫素單元所組成，且每一個3x3畫素單元具有六(6)個白色畫素以及三(3)個彩色(紅色、綠色、以及/或藍色的組合)畫素。尤其是，每一畫素陣列(由四(4)個3x3畫素單元所組成)係由四(4)個紅色畫素、四(4)個綠色畫素、四個(4)藍色畫素、以及二十四(24)個白色畫素所組成，或者係由三(3)個紅色畫素、六(6)個綠色畫素、三個(3)藍色畫素、以及二十四(24)個白色畫素所組成。
一個7/9WRGB彩色濾波陣列可具有複數個畫素陣列，每一畫素陣列由四(4)個3x3畫素單元所組成，且每一個3x3畫素單元具有七(7)個白色畫素以及兩(2)個彩色(紅色、綠色、以及/或藍色的組合)畫素。尤其是，每一畫素陣列(由四(4)個3x3畫素單元所組成)係由兩(2)個紅色畫素、四(4)個綠色畫素、兩個(2)藍色畫素、以及二十八(28)個白色畫素所組成。
一個8/9WRGB彩色濾波陣列可具有複數個畫素陣列，每一畫素陣列由四(4)個3x3畫素單元所組成，且每一個3x3畫素單元具有八(8)個白色畫素以及一(1)個彩色(紅色、綠色、或藍色)畫素。尤其是，每一畫素陣列(由四(4)個3x3畫素單元所組成)係由一(1)個紅色畫素、兩(2)個 綠色畫素、一個(1)藍色畫素、以及三十二(32)個白色畫素所組成。
如上所述，當一彩色濾波陣列的白色畫素數量越多時，影像感測器的影像靈敏度越高，而影像感測器的影像解析度越低。第3圖係表示根據本發明一實施例的校正方法流程圖。該校正方法用來校正影像感測器之彩色濾波陣列中彩色畫素的畫素資訊，藉此提出可提供較高影像靈敏度而不會犧牲影像解析度的一影像感測器。
如第3圖所示，根據本發明一實施例，校正在影像感測器之彩色濾波陣列中彩色畫素的畫素資訊的校正方法包括：建立一個MxM距離係數表單，其具有複數個MxM距離係數(dfij )(步驟S1)；選擇彩色濾波陣列的一組MxM個畫素，其中，彩色濾波陣列的MxM個畫素包括至少兩個紅色畫素、至少兩個綠色畫素、至少兩個藍色畫素、以及至一目標畫素，且該目標畫素是彩色濾波陣列之MxM個畫素的中央畫素(步驟S2)；藉由使用MxM距離係數表單的複數個距離係數以及該等至少兩個紅色畫素中每一者的估計畫素資訊(Rij )，來計算在彩色濾波陣列的MxM個畫素中由該等至少兩個紅色畫素至目標畫素的紅色-彩色貢獻度(Raverage )(步驟S3)；藉由使用MxM距離係數表單的複數個距離係數以及該等至少兩個綠色畫素中每一者的估計畫素資訊(Gij )，來計算在彩色濾波陣列的MxM個畫素中由該等至少兩個綠色 畫素至目標畫素的綠色-彩色貢獻度(Gaverage )(步驟S3)；藉由使用MxM距離係數表單的複數個距離係數以及該等至少兩個藍色畫素中每一者的估計畫素資訊(Bij )，來計算在彩色濾波陣列的MxM個畫素中由該等至少兩個藍色畫素至目標畫素的藍色-彩色貢獻度(Baverage )(步驟S3)；根據紅色-彩色貢獻度(Raverage )、綠色-彩色貢獻度(Gaverage )、藍色-彩色貢獻度(Baverage )、以及該目標畫素的估計畫素資訊(W)，來計算該目標畫素的紅色-彩色畫素效能(fRij )、該目標畫素的綠色-彩色畫素效能(fGij )、以及該目標畫素的藍色-彩色畫素效能(fBij )中至少一者(步驟S4)；計算紅色-彩色校正係數(TR )、綠色-彩色校正係數(TG )、以及藍色-彩色校正係數(TB )中至少一者，其中，紅色-彩色校正係數(TR )是紅色-彩色畫素效能(fRij )對紅色-彩色貢獻度(Raverage )的比例，綠色-彩色校正係數(TG )是綠色-彩色畫素效能(fGij )對綠色-彩色貢獻度(Gaverage )的比例，且藍色-彩色校正係數(TB )是藍色-彩色畫素效能(fBij )對藍色-彩色貢獻度(Baverage )的比例(步驟S5)；以及執行以下至少一個獲得校正畫素資訊的操作：藉由將紅色-彩色校正係數(TR )實施於該等至少兩個紅色畫素中每一者的估計畫素資訊(Rij )來獲得該等至少兩個紅色畫素中每一者的校正畫素資訊(Rfinal )、藉由將綠色-彩色校正係數(TG )實施於該等至少兩個綠色畫素中每一者的估計畫素資訊(Gij )來獲得該等至少兩個綠色畫素中每一者的校正畫素 資訊(Gfinal )、以及藉由將藍色-彩色校正係數(TB )實施於該等至少兩個藍色畫素中每一者的估計畫素資訊(Bij )來獲得該等至少兩個藍色畫素中每一者的校正畫素資訊(Bfinal )(步驟S6)。
特別的是，如第3圖的步驟S1所示，建立了一個具有MxM個距離係數的MxM距離係數表單。MxM個距離係數(dfij )中的每一個係數係對應彩色濾波陣列的MxM個畫素中的一個畫素。位在表單中的第i列與第j行交錯的距離係數dfij 為dij /dC 。
第4圖係表示根據本發明一實施例，關於3/4WRGB彩色濾波陣列的7x7(MxM)距離係數表單。此7x7距離係數表單具有7x7個距離係數，且7x7個距離係數(dfij )中的每一個係數對應彩色濾波陣列的7x7個畫素中的一個畫素。
在本發明的一實施例中，中央距離係數dfc 的數值是在MxM距離係數表單的複數距離係數中的最高數值，且在MxM距離係數表單中距中央距離係數越遠的距離係數，具有在MxM距離係數表單中越低的數值。
舉例來說，如第4圖所示，在7x7距離係數表單中的中央距離係數dfc (即df44 )為dC /dC (即d44 /d44 )=16/16=1，且距離係數df26 =d26 /dC =4/16(即位在表單中的第2列與第6行交錯的距離係數)。
為了決定鄰近的彩色畫素對於一目標畫素如何貢獻，需選擇彩色濾波陣列中的MxM個畫素的區域，其中，彩 色濾波陣列中的MxM個畫素包含至少兩個紅色畫素、至少兩個綠色畫素、至少兩個藍色畫素、以及一個目標畫素，且此目標畫素至彩色濾波陣列中的MxM畫素的中央畫素。
以3/4WRGB彩色濾波陣列(其具有複數畫素陣列，每一畫素陣列由四(4)個2x2畫素單元，且每一個2x2畫素陣列具有三(3)個白色畫素以及一(1)個彩色(紅色、綠色、或藍色)畫素)為例，第5A-5C表示選擇了彩色濾波陣列中的7x7畫素的區域(即虛線區域)。彩色濾波陣列中的被選擇的7x7畫素包括四(4)個紅色畫素、八(8)個綠色畫素、四(4)個藍色畫素、以及三十三(33)個白色畫素。目標(白色)畫素TP位於彩色濾波陣列中的被選擇的7x7畫素的中央。應注意到，在彩色濾波陣列中的每一彩色畫素被標記上R、G、或B，且沒有標記的所有畫素則是白色畫素。
在建立了MxM距離係數表單並選擇了彩色濾波陣列中包含至少兩個紅色畫素、至少兩個綠色畫素、至少兩個藍色畫素、以及一個目標畫素的MxM畫素的區域之後，藉由使用MxM距離係數表單的複數個距離係數以及該等至少兩個紅色畫素中每一者的估計畫素資訊(Rij )，來計算在彩色濾波陣列的MxM個畫素中由該等至少兩個紅色畫素至目標畫素的紅色-彩色貢獻度(Raverage )、藉由使用MxM距離係數表單的複數個距離係數以及該等至少兩個綠色畫素中每一者的估計畫素資訊(Gij )，來計算在彩色濾波陣列的MxM個畫素中由該等至少兩個綠色畫素至目標畫素的綠色-彩色貢獻度(Gaverage )、以及藉由使用MxM距離係數表單的複數個距離係 數以及該等至少兩個藍色畫素中每一者的估計畫素資訊(Bij )，來計算在彩色濾波陣列的MxM個畫素中由該等至少兩個藍色畫素至目標畫素的藍色-彩色貢獻度(Baverage )。
如第5A圖所示，四(4)個紅色畫素的估計畫素資訊(Rij )為：R54 =200 lux、R94 =220 lux、R58 =210 lux、以及R98 =230 lux。同樣地，如第5B圖所示，八(8)個綠色畫素的估計畫素資訊(Gij )為：G44 =235 lux、G48 =235 lux、G55 =235 lux、G59 =235 lux、G84 =235 lux、G88 =215 lux、G95 =235 lux、以及G99 =235 lux。如第5C圖所示，四(4)個藍色畫素的估計畫素資訊(Bij )為：B45 =210 lux、B49 =190 lux、B85 =210 lux、以及B89 =190 lux。此外，目標畫素TP的估計畫素資訊(WTP )為800 lux。應注意到，第5C圖所示的彩色畫素以及目標畫素的估計畫素資訊，僅是單純地使用來說明如何計算由選擇的MxM個畫素中的複數彩色畫素至目標畫素的彩色貢獻度，並非用來限制本發明的範圍。此外，由於此技術領域之入士已知如何估計畫素資訊，因此在此文中沒有詳細敘述如何估計畫素資訊。
在本發明的一實施例中，計算由該等至少兩個紅色畫素至目標畫素的紅色-彩色貢獻度(Raverage )的步驟包括：(a)將MxM距離係數表單指定給彩色濾波陣列的第二組MxM個畫素，其中，該等至少兩個紅色畫素中的一者對應位於MxM距離係數表單中央的一中央距離係數，且根據該目標畫素相對於該等至少兩個紅色畫素中的該一者的相對位置，該目標畫素對應MxM距離係數表單中的一距離係數； (b)使該等至少兩個紅色畫素中的該一者的估計畫素資訊(Rij )與對應目標畫素的距離係數相乘；對該等至少兩個紅色畫素中的每一者來重複步驟(a)與(b)；以及以A對B的比例的方式，來計算由該等至少兩個紅色畫素至該目標畫素的紅色-彩色貢獻度(Raverage )，其中，A表示對於該等至少兩個紅色畫素中的每一者執行步驟(b)的總和，且B表示在每一次重複的步驟(a)中目標畫素的距離係數(dfij )的總和。
藉由以第5A圖所示之3/4WRGB彩色濾波陣列為例且實施第4圖的7x7距離係數表單，第6A-6D圖說明在本發明一實施例中，如何計算在3/4WRGB彩色濾波陣列的7x7格畫素中由四(4)個紅色畫素至目標(白色)畫素TP的紅色-彩色貢獻度(Raverage )。
如第6A圖所示，7x7距離係數表單被指定給3/4WRGB彩色濾波陣列的7x7個畫素(步驟(a))，其中，該等四(4)個紅色畫素中的一者(即第6A圖中標記”16”的畫素)對應位於7x7距離係數表單中央的中央距離係數(dfc =dC /dC =16/16)，且根據目標畫素相對於該等四(4)個紅色畫素中的該一者的相對位置，目標畫素對應7x7距離係數表單中的一距離係數(df13 =d13 /dC =3/16)。
接著，該等四(4)個紅色畫素中的該一者(即第6A圖中標記為”16”的畫素)的估計畫素資訊(R98 ：230 lux)與對應目標畫素的距離係數(即3/16)相乘(步驟(b))， 這可表示為R98 xdfTP =230 lux x 3/16，其中，dfTP 為df13 。
對於該等四(4)個紅色畫素的每一者來重複上述步驟(a)與(b)，如第6A-6B圖所示，來或得以下資訊：R98 x df13 =230 lux x 3/16(參閱第6A圖)；R94 x df17 =220 lux x 1/16(參閱第6B圖)；R54 x df57 =200 lux x 3/16(參閱第6C圖)；以及R58 x df53 =210 lux x 9/16(參閱第6D圖)。
在完成對於該等四(4)個紅色畫素的每一者的上述步驟後，以A對B的比例的方式來計算由該等四(4)個紅色畫素至目標畫素TP的紅色-彩色貢獻度(Raverage )，其中，A表示對於該等四(4)個紅色畫素中的每一者執行步驟(b)的總和，且B表示在每一次重複的步驟(a)中目標畫素的距離係數(dfij )的總和。因此，紅色-彩色貢獻度(Raverage )可表示為：Raverage =ΣRij xdf /Σdf =(R98 x df13 +R94 x df17 +R54 x df57 +R58 x df53 )/(df13 +df17 +df57 +df53 )=(230 lux x 3/16+220 lux x 1/16+200 lux x 3/16+210 lux x 9/16)/(3/16+1/16+3/16+9/16)=212.5 lux。
同樣地，綠色-彩色貢獻度(Gaverage )以及藍色-彩色貢獻度(Baverage )可透過紅色-彩色貢獻度(Raverage )的相同計算方式來計算獲得(參閱第6E-6L圖與第6M-6P圖)。
使用第5A-5C圖中的估計資訊，紅色-彩色貢獻度(Raverage )、綠色-彩色貢獻度(Gaverage )、以及藍色-彩色貢獻度(Baverage )分別為212.5 lux、230 lux、以及200 lux。尤 其是，Gaverage =ΣGij xdf /Σdf =(G44 x df67 +G48 x df63 +G55 x df56 +G59 x df52 +G84 x df27 +G88 x df23 +G95 x df16 +G99 x df12 )/(df67 +df63 +df56 +df52 +df27 +df23 +df16 +df12 )=(235 lux x 2/16+235 lux x 6/16+235 lux x 6/16+235 lux x 6/16+235 lux x 2/16+215 lux x 6/16+235 lux x 2/16+215 lux x 2/16)/(2/16+6/16+6/16+6/16+2/16+6/16+2/16+2/16)=230 lux(參閱第6E-6L圖)。Baverage =ΣBij xdf /Σdf =(B45 x df66 +B49 x df62 +B85 x df26 +B89 x df22 )/(df66 +df62 +df26 +df22 )=(210 lux x 4/16+190 lux x 4/16+210 lux x 4/16+190 lux x 4/16)/(4/16+4/16+4/16+4/16)=200 lux(參閱第6M-6P圖)。
在本發明的另一實施例中，計算由該等至少兩個紅色畫素至目標畫素的紅色-彩色貢獻度(Raverage )的步驟包括：(a’)將MxM距離係數表單指定給彩色濾波陣列的MxM個畫素，其中，該目標畫素對應位於MxM距離係數表單中央的中央距離係數，且分別根據該等至少兩個紅色畫素相對於該目標畫素的相對位置，該等至少兩個紅色畫素分別對應MxM距離係數表單中的兩個距離係數；(b’)使該等至少兩個紅色畫素中的每一者的估計畫素資訊(Rij )與在MxM距離係數表單中的該兩個距離係數的一對應者相乘；以及以A對B的比例的方式，來計算由該等至少兩個紅色畫素至該目標畫素的紅色-彩色貢獻度(Raverage )，其中，A表示對於該等至少兩個紅色畫素中的每一者執行步驟(b’) 的總和，且B表示該等至少兩個紅色畫素中的每一者的距離係數(dfij )的總和。
藉由以第5A-5C圖所示之3/4WRGB彩色濾波陣列為例且實施第4圖的7x7距離係數表單，第7圖說明在本發明一實施例中，如何計算在3/4WRGB彩色濾波陣列的7x7格畫素中由四(4)個紅色畫素至目標(白色)畫素TP的紅色-彩色貢獻度(Raverage )。
如第7A圖所示，7x7距離係數表單被指定給3/4WRGB彩色濾波陣列中被選擇的7x7個畫素，其中，目標畫素對應位於7x7距離係數表單中央的中央距離係數，且分別根據該等四(4)個紅色畫素相對於該目標畫素的相對位置，該等四(4)個紅色畫素分別對應7x7距離係數表單中的四個距離係數(即df75 、df71 、df31 、以及df35 )。
接著，該等四(4)個紅色畫素中的每一者的估計畫素資訊(Rij ，即R98 、R94 、R54 、以及R58 )與在MxM距離係數表單中的該等四(4)個距離係數(df75 、df71 、df31 、以及df35 )的一對應者相乘，藉此或得以下資訊：。
R98 x df75 =230 lux x 3/16；R94 x df71 =220 lux x 1/16；R54 x df31 =200 lux x 3/16；以及R58 x df35 =210 lux x 9/16。
接著，以A對B的比例的方式來計算由該等四(4)個紅色畫素至目標畫素TP的紅色-彩色貢獻度(Raverage )，其中，A表示對於該等四(4)個紅色畫素中的每一者執行步驟 (b’)的總和，且B表示該等四(4)個紅色畫素中的每一者的距離係數(dfij )的總和。因此，紅色-彩色貢獻度(Raverage )可表示為：Raverage =ΣRij xdf /Σdf =(R98 x df75 +R94 x df71 +R54 x df31 +R58 x df35 )/(df75 +df71 +df31 +df35 )=(230 lux x 3/16+220 lux x 1/16+200 lux x 3/16+210 lux x 9/16)/(3/16+1/16+3/16+9/16)=212.5 lux。
同樣地，綠色-彩色貢獻度(Gaverage )以及藍色-彩色貢獻度(Baverage )可透過紅色-彩色貢獻度(Raverage )的相同計算方式來計算獲得(參閱第7B圖與第7C圖)。
使用第5A-5C圖中的估計資訊，紅色-彩色貢獻度(Raverage )、綠色-彩色貢獻度(Gaverage )、以及藍色-彩色貢獻度(Baverage )分別為212.5 lux、230 lux、以及200 lux。尤其是，Gaverage =ΣGij xdf /Σdf =(G44 x df21 +G48 x df25 +G55 x df32 +G59 x df36 +G84 x df61 +G88 x df65 +G95 x df72 +G99 x df75 )/(df21 +df25 +df32 +df36 +df61 +df65 +df72 +df76 )=(235 lux x 2/16+235 lux x 6/16+235 lux x 6/16+235 lux x 6/16+235 lux x 2/16+215 lux x 6/16+235 lux x 2/16+215 lux x 2/16)/(2/16+6/16+6/16+6/16+2/16+6/16+2/16+2/16)=230 lux(參閱第7B圖)。Baverage =ΣBij xdf /Σdf =(B45 x df22 +B49 x df26 +B85 x df62 +B89 x df66 )/(df22 +df26 +df62 +df66 )=(210 lux x 4/16+190 lux x 4/16+210 lux x 4/16+190 lux x 4/16)/(4/16+4/16+4/16+4/16)=200 lux(參閱第67C圖)。
一旦紅色-彩色貢獻度(Raverage )、綠色-彩色 貢獻度(Gaverage )、以及藍色-彩色貢獻度(Baverage )計算獲得，則根據紅色-彩色貢獻度(Raverage )、綠色-彩色貢獻度(Gaverage )、藍色-彩色貢獻度(Baverage )、以及該目標畫素的估計畫素資訊(W)，來計算該目標畫素的紅色-彩色畫素效能(fRij )。
在一實施例中，該目標畫素的紅色-彩色畫素效能(fRij )為fRij =W．Raverage /(Raverage +Gaverage +Baverage )。使用第5A-5C圖的估計資訊以及計算獲得的紅色-彩色貢獻度(Raverage )、綠色-彩色貢獻度(Gaverage )、以及藍色-彩色貢獻度(Baverage )，該目標畫素的紅色-彩色畫素效能(fRij )計算為800 x 212.5/(212.5+230+200)=264.59。
同樣地，根據紅色-彩色貢獻度(Raverage )、綠色-彩色貢獻度(Gaverage )、藍色-彩色貢獻度(Baverage )、以及該目標畫素的估計畫素資訊(W)，來計算該目標畫素的綠色-彩色畫素效能(fGij )。
在一實施例中，該目標畫素的綠色-彩色畫素效能(fGij )為fGij =W．Gaverage /(Raverage +Gaverage +Baverage )。使用第5A-5C圖的估計資訊以及計算獲得的紅色-彩色貢獻度(Raverage )、綠色-彩色貢獻度(Gaverage )、以及藍色-彩色貢獻度(Baverage )，該目標畫素的綠色-彩色畫素效能(fGij )計算為800 x 230/(212.5+230+200)=286.38。
同樣地，根據紅色-彩色貢獻度(Raverage )、綠色-彩色貢獻度(Gaveraga )、藍色-彩色貢獻度(Beverage )、以及該目標畫素的估計畫素資訊(W)，來計算該目標畫素的藍 色-彩色畫素效能(fBij )。
在一實施例中，該目標畫素的藍色-彩色畫素效能(fBij )為fBij =W．Baverage /(Raverage +Gaverage +Baveraga )。使用第5A-5C圖的估計資訊以及計算獲得的紅色-彩色貢獻度(Raverage )、綠色-彩色貢獻度(Gaverage )、以及藍色-彩色貢獻度(Baverage )，該目標畫素的藍色-彩色畫素效能(fBij )計算為800 x 200/(212.5+230+200)=249.03。
一旦獲得該目標畫素的紅色-彩色畫素效能(fRij )，可以透過紅色-彩色畫素效能(fRij )對紅色-彩色貢獻度(Raverage )的比例的方式，來計算紅色-彩色校正係數(TR )，即TR =fRij /Raverage 。使用上述的例子，紅色-彩色校正係數(TR )為264.59/212.5=1.245。
同樣地，一旦獲得該目標畫素的綠色-彩色畫素效能(fGij )，可以透過綠色-彩色畫素效能(fGij )對綠色-彩色貢獻度(Gaverage )的比例的方式，來計算綠色-彩色校正係數(TG )，即TG =fGij /Gaverage 。使用上述的例子，綠色-彩色校正係數(TG )為286.38/230=1.245。
同樣地，一旦獲得該目標畫素的藍色-彩色畫素效能(fBij )，可以透過藍色-彩色畫素效能(fBij )對藍色-彩色貢獻度(Baverage )的比例的方式，來計算藍色-彩色校正係數(TB )，即TB =fBij /Baverage 。使用上述的例子，藍色-彩色校正係數(TB )為249.03/200=1.245。
一旦獲得紅色-彩色校正係數(TR )，該等至少兩個紅色畫素的每一者的校正畫素資訊(Rfinal )的獲得，可藉 由將紅色-彩色校正係數(TR )實施於該等至少兩紅色畫素的每一者的估計畫素資訊(Rij )來實現。
在一實施例中，校正畫素資訊(Rfinal )是該等至少兩個紅色畫素的每一者的估計畫素資訊(Rij )與紅色-彩色校正係數(TR )的乘積，即Rij (final)=Rij (measured)x TR 。
使用第5A-5C圖的例子，該等四(4)個紅色畫素的每一者的校正畫素資訊(Rfinal )可表示為：R54 (final)=R54 (measured)x TR =200 lux x 1.254=249 lux；R94 (final)=R94 (measured)x TR =220 lux x 1.254=273.9 lux；R58 (final)=R58 (measured)x TR =210 lux x 1.254=261.45 lux；以及R98 (final)=R98 (measured)x TR =230 lux x 1.254=286.35 lux
同樣地，一旦獲得綠色-彩色校正係數(TG )，該等至少兩個綠色畫素的每一者的校正畫素資訊(Gfinal )的獲得，可藉由將綠色-彩色校正係數(TG )實施於該等至少兩綠色畫素的每一者的估計畫素資訊(Gij )來實現。
在一實施例中，校正畫素資訊(Gfinal )是該等至少兩個綠色畫素的每一者的估計畫素資訊(Gij )與綠色-彩色校正係數(TG )的乘積，即Gij (final)=Gij (measured)x TG 。
使用第5A-5C圖的例子，該八(8)個綠色畫素的每一者的校正畫素資訊(Gfinal )可表示為：G44 (final)=G44 (measured)x TG =235 lux x 1.254=292.575 lux；G48 (final)=G48 (measured)x TG =235 lux x 1.254=292.575 lux；G55 (final)=G55 (measured)x TG =235 lux x 1.254=292.575 lux；G59 (final)=G59 (measured)x TG =235 lux x 1.254=292.575 lux；G84 (final)=G84 (measured)x TG =235 lux x 1.254=292.575 lux；G88 (final)=G88 (measured)x TG =215 lux x 1.254=267.675 lux；G95 (final)=G95 (measured)x TG =235 lux x 1.254=292.575 lux；以及G99 (final)=G99 (measured)x TG =215 lux x 1.254=267.675 lux。
同樣地，一旦獲得藍色-彩色校正係數(TB )，該等至少兩個藍色畫素的每一者的校正畫素資訊(Bfinal )的獲得，可藉由將藍色-彩色校正係數(TB )實施於該等至少兩藍色畫素的每一者的估計畫素資訊(Bij )來實現。
在一實施例中，校正畫素資訊(Bfinal )是該等至少兩個藍色畫素的每一者的估計畫素資訊(Bij )與藍色-彩 色校正係數(TB )的乘積，即Bij (final)=Bij (measured)x TB 。
使用第5A-5C圖的例子，該等四(4)個藍色畫素的每一者的校正畫素資訊(Bfinal )可表示為：B45 (final)=B45 (measured)x TG =210 lux x 1.254=261.45 lux；B49 (final)=B49 (measured)x TG =190 lux x 1.254=236.55 lux；B85 (final)=B85 (measured)x TG =210 lux x 1.254=261.45 lux；以及B89 (final)=B89 (measured)x TG =190 lux x 1.254=236.55 lux。
藉由將紅色/綠色/藍色-彩色校正係數(TR /TG /TB )實施於在選擇的MxM個畫素中該等至少兩個紅色/綠色/藍色的每一者的估計畫素資訊(Rij /Gij /Bij )，使得彩色畫素的最終畫素資訊可更加精確。由於在彩色濾波陣列中白色畫素數量的增加，此彩色校正係數可以補償估計畫素資訊。因此，可提供較高的影像靈敏度(藉由增加在彩色濾波陣列中白色畫素的數量)，而不會犧牲影像感測器的影像解析度(藉由補償估計畫素資訊)。
此外，雖然本案實施例是使用一個7x7距離係數表單，且在實施例中是在3/4WRGB彩色濾波陣列中選擇7x7個畫素的區域，然而，也可選擇大於7x7距離係數表單的MxM距離係數表單以及選擇大於7x7個畫素的MxM個畫素，只要MxM 個畫素可包含至少兩個紅色畫素、至少兩個率素畫素、以及至少兩個藍色畫素。
再者，對於一個5/8WRGB彩色濾波陣列而言，可使用一個5x5或更大的距離係數表單，且可選擇5x5個畫素或更大的區域，只要5x5個畫素或更大的區域包含至少兩個紅色畫素、至少兩個率素畫素、以及至少兩個藍色畫素。對於6/9WRGB濾波陣列、7/9WRGB濾波陣列、以及8/9WRGB濾波陣列，也是用相同的原則(即可選擇一個MxM或更大的距離係數表單以及MxM個畫素或更大的區域，只要MxM個畫素包含至少兩個紅色畫素、至少兩個率素畫素、以及至少兩個藍色畫素)。
本發明雖以較佳實施例揭露如上，然其並非用以限定本發明的範圍，任何所屬技術領域中具有通常知識者，在不脫離本發明之精神和範圍內，當可做些許的更動與潤飾，因此本發明之保護範圍當視後附之申請專利範圍所界定者為準。
S2...S6‧‧‧方法步驟

Claims (10)

  1. 一種校正方法，用以校正在一影像感測器的一彩色濾波陣列中複數彩色畫素的畫素資訊，該彩色濾波陣列包括複數個畫素陣列，且每一該畫素陣列由四(4)個NxN畫素單元所組成，N等於或大於2的整數，每一該NxN畫素陣列具有複數個白色畫素以及至少一個彩色畫素，該等至少一個彩色畫素包括一個或多個紅色畫素、一個或多個綠色畫素、一個或多個藍色畫素、或前述的任何組合，在該等四(4)個畫素單元的每一者中的該至少一彩色畫素的數量相同，在該等四(4)個畫素單元的每一者中的該至少一彩色畫素的數量小於在該等四(4)個畫素單元的每一者中的該等白色畫素的數量，該校正方法包括：建立具有MxM個距離係數(dfij )的一MxM距離係數表單，其中，M為一奇數；選擇該彩色濾波陣列的一組MxM個畫素，其中，該彩色濾波陣列的該等MxM個畫素包含至少兩個紅色畫素、至少兩個綠色畫素、至少兩個藍色畫素、以及一目標畫素，且該目標畫素為該彩色濾波陣列的該等MxM個畫素的一中央畫素；藉由使用該MxM距離係數表單的該等距離係數以及使用該等至少兩個紅色畫素中每一者的估計畫素資訊(Rij )，來計算在該彩色濾波陣列的該等MxM個畫素中由該等至少兩個紅色畫素至該目標畫素的一紅色-彩色貢獻度(Raverage )；藉由使用該MxM距離係數表單的該等距離係數以及使用該 等至少兩個綠色畫素中每一者的估計畫素資訊(Gij )，來計算在該彩色濾波陣列的該等MxM個畫素中由該等至少兩個綠色畫素至該目標畫素的一綠色-彩色貢獻度(Gaverage )；藉由使用該MxM距離係數表單的該等距離係數以及使用該等至少兩個藍色畫素中每一者的估計畫素資訊(Bij )，來計算在該彩色濾波陣列的該等MxM個畫素中由該等至少兩個藍色畫素至該目標畫素的一藍色-彩色貢獻度(Baverage )；根據該紅色-彩色貢獻度(Raverage )、該綠色-彩色貢獻度(Gaverage )、該藍色-彩色貢獻度(Baverage )、以及該目標畫素的估計畫素資訊(W)，來計算該目標畫素的一紅色-彩色畫素效能(fRij )、該目標畫素的一綠色-彩色畫素效能(fGij )、以及該目標畫素的一藍色-彩色畫素效能(fBij )中至少一者；計算一紅色-彩色校正係數(TR )、一綠色-彩色校正係數(TG )、以及一藍色-彩色校正係數(TB )中至少一者，其中，該紅色-彩色校正係數(TR )是該紅色-彩色畫素效能(fRij )對該紅色-彩色貢獻度(Raverage )的比例，該綠色-彩色校正係數(TG )是該綠色-彩色畫素效能(fGij )對該綠色-彩色貢獻度(Gaverage )的比例，且該藍色-彩色校正係數(TB )是該藍色-彩色畫素效能(fBij )對該藍色-彩色貢獻度(Baverage )的比例；以及執行以下複數步驟中至少一者：藉由將該紅色-彩色校正係數(TR )實施於該等至少兩個紅色畫素中每一者的估計畫素資訊(Rij )來獲得該等至少兩 個紅色畫素中每一者的一校正畫素資訊(Rfinal )；藉由將該綠色-彩色校正係數(TG )實施於該等至少兩個綠色畫素中每一者的估計畫素資訊(Gij )來獲得該等至少兩個綠色畫素中每一者的一校正畫素資訊(Gfinal )；以及藉由將該藍色-彩色校正係數(TB )實施於該等至少兩個藍色畫素中每一者的估計畫素資訊(Bij )來獲得該等至少兩個藍色畫素中每一者的一校正畫素資訊(Bfinal )。
  2. 如申請專利範圍第1項所述之校正方法，其中，計算由該等至少兩個紅色畫素至該目標畫素的該紅色-彩色貢獻度(Raverage )的該步驟包括：(a)將該MxM距離係數表單指定給該彩色濾波陣列的第二組MxM個畫素，其中，該等至少兩個紅色畫素的一者對應位於該MxM距離係數表單中央的一中央距離係數，該目標畫素根據目標畫素相對於該等至少兩個紅色畫素中的該一者的相對位置而對應該MxM距離係數表單中的一個距離係數；(b)使該等至少兩個紅色畫素中的該一者的估計畫素資訊(Rij )與對應該目標畫素的該距離係數相乘；對該等至少兩個紅色畫素中的每一者來重複該步驟(a)與該步驟(b)；以及以A對B的比例的方式，來計算由該等至少兩個紅色畫素至該目標畫素的該紅色-彩色貢獻度(Raverage )，其中，A表示對於該等至少兩個紅色畫素中的每一者執行該步驟(b)的總和，且B表示在每一次重複的該步驟(a)中該目標畫素的 該距離係數(dfij )的總和；其中，該中央距離係數具有在該MxM距離係數表單的該等距離係數中的最高數值，且在該MxM距離係數表單中離該中央距離離係數越遠的該距離係數，具有在該MxM距離係數表單中越低的數值。
  3. 如申請專利範圍第1項所述之校正方法，其中，計算由該等至少兩個紅色畫素至該目標畫素的該紅色-彩色貢獻度(Raverage )的該步驟包括：(a)將該MxM距離係數表單指定給該彩色濾波陣列的該等MxM個畫素，其中，該目標畫素對應位於該MxM距離係數表單中央的一中央距離係數，且該等至少兩個紅色畫素分別根據該等至少兩個紅色畫素相對於該目標畫素的相對位置而對應該MxM距離係數表單中的兩個距離係數；(b)使該等至少兩個紅色畫素中的每一者的估計畫素資訊(Rij )與在該MxM距離係數表單中的該兩個距離係數的一對應者相乘；以及以A對B的比例的方式，來計算由該等至少兩個紅色畫素至該目標畫素的該紅色-彩色貢獻度(Raverage )，其中，A表示對於該等至少兩個紅色畫素中的每一者執行步驟(b)的總和，且B表示該等至少兩個紅色畫素中的每一者的該距離係數(dfij )的總和；其中，該中央距離係數具有在該MxM距離係數表單的該等距離係數中的最高數值，且在該MxM距離係數表單中離該中央距離離係數越遠的該距離係數，具有在該MxM距離係 數表單中越低的數值。
  4. 如申請專利範圍第1項所述之校正方法，其中，計算由該等至少兩個綠色畫素至該目標畫素的該綠色-彩色貢獻度(Gaverage )的該步驟包括：(a)將該MxM距離係數表單指定給該彩色濾波陣列的第二組MxM個畫素，其中，該等至少兩個綠色畫素的一者對應位於該MxM距離係數表單中央的一中央距離係數，該目標畫素根據目標畫素相對於該等至少兩個綠色畫素中的該一者的相對位置而對應該MxM距離係數表單中的一個距離係數；(b)使該等至少兩個綠色畫素中的該一者的估計畫素資訊(Gij )與對應該目標畫素的該距離係數相乘；對該等至少兩個綠色畫素中的每一者來重複該步驟(a)與該步驟(b)；以及以A對B的比例的方式，來計算由該等至少兩個綠色畫素至該目標畫素的該綠色-彩色貢獻度(Gaverage )，其中，A表示對於該等至少兩個綠色畫素中的每一者執行該步驟(b)的總和，且B表示在每一次重複的該步驟(a)中該目標畫素的該距離係數(dfij )的總和；其中，該中央距離係數具有在該MxM距離係數表單的該等距離係數中的最高數值，且在該MxM距離係數表單中離該中央距離離係數越遠的該距離係數，具有在該MxM距離係數表單中越低的數值。
  5. 如申請專利範圍第1項所述之校正方法，其中，計算由該等 至少兩個綠色畫素至該目標畫素的該綠色-彩色貢獻度(Gaverage )的該步驟包括：(a)將該MxM距離係數表單指定給該彩色濾波陣列的該等MxM個畫素，其中，該目標畫素對應位於該MxM距離係數表單中央的一中央距離係數，且該等至少兩個綠色畫素分別根據該等至少兩個綠色畫素相對於該目標畫素的相對位置而對應該MxM距離係數表單中的兩個距離係數；(b)使該等至少兩個綠色畫素中的每一者的估計畫素資訊(Gij )與在該MxM距離係數表單中的該兩個距離係數的一對應者相乘；以及以A對B的比例的方式，來計算由該等至少兩個綠色畫素至該目標畫素的該綠色-彩色貢獻度(Gaverage )，其中，A表示對於該等至少兩個綠色畫素中的每一者執行步驟(b)的總和，且B表示該等至少兩個綠色畫素中的每一者的該距離係數(dfij )的總和；其中，該中央距離係數具有在該MxM距離係數表單的該等距離係數中的最高數值，且在該MxM距離係數表單中離該中央距離離係數越遠的該距離係數，具有在該MxM距離係數表單中越低的數值。
  6. 如申請專利範圍第1項所述之校正方法，其中，計算由該等至少兩個藍色畫素至該目標畫素的該藍色-彩色貢獻度(Baverage )的該步驟包括：(a)將該MxM距離係數表單指定給該彩色濾波陣列的第二組MxM個畫素，其中，該等至少兩個藍色畫素的一者對應 位於該MxM距離係數表單中央的一中央距離係數，該目標畫素根據目標畫素相對於該等至少兩個藍色畫素中的該一者的相對位置而對應該MxM距離係數表單中的一個距離係數；(b)使該等至少兩個藍色畫素中的該一者的估計畫素資訊(Bij )與對應該目標畫素的該距離係數相乘；對該等至少兩個藍色畫素中的每一者來重複該步驟(a)與該步驟(b)；以及以A對B的比例的方式，來計算由該等至少兩個藍色畫素至該目標畫素的該藍色-彩色貢獻度(Baverage )，其中，A表示對於該等至少兩個藍色畫素中的每一者執行該步驟(b)的總和，且B表示在每一次重複的該步驟(a)中該目標畫素的該距離係數(dfij )的總和；其中，該中央距離係數具有在該MxM距離係數表單的該等距離係數中的最高數值，且在該MxM距離係數表單中離該中央距離離係數越遠的該距離係數，具有在該MxM距離係數表單中越低的數值。
  7. 如申請專利範圍第1項所述之校正方法，其中，計算由該等至少兩個藍色畫素至該目標畫素的該藍色-彩色貢獻度(Baverage )的該步驟包括：(a)將該MxM距離係數表單指定給該彩色濾波陣列的該等MxM個畫素，其中，該目標畫素對應位於該MxM距離係數表單中央的一中央距離係數，且該等至少兩個藍色畫素分別根據該等至少兩個藍色畫素相對於該目標畫素的相對位 置而對應該MxM距離係數表單中的兩個距離係數；(b)使該等至少兩個藍色畫素中的每一者的估計畫素資訊(Bij )與在該MxM距離係數表單中的該兩個距離係數的一對應者相乘；以及以A對B的比例的方式，來計算由該等至少兩個藍色畫素至該目標畫素的該藍色-彩色貢獻度(Baverage )，其中，A表示對於該等至少兩個藍色畫素中的每一者執行步驟(b)的總和，且B表示該等至少兩個藍色畫素中的每一者的該距離係數(dfij )的總和；其中，該中央距離係數具有在該MxM距離係數表單的該等距離係數中的最高數值，且在該MxM距離係數表單中離該中央距離離係數越遠的該距離係數，具有在該MxM距離係數表單中越低的數值。
  8. 如申請專利範圍第1項所述之校正方法，其中，該目標畫素的該紅色-彩色畫素效能(fRij )為fRij =W‧Raverage /(Raverage +Gaverage +Baverage )，該目標畫素的該綠色-彩色畫素效能(fGij )為fGij =W‧Gaverage /(Raverage +Gaverage +Baverage )，以及該目標畫素的該藍色-彩色畫素效能(fBij )為fBij =W‧Baverage /(Raverage +Gaverage +Baverage )。
  9. 如申請專利範圍第1項所述之校正方法，其中，該等至少兩個紅色畫素的每一者的該校正畫素資訊(Rfinal )是該等至少兩個紅色畫素的每一者的估計畫素資訊(Rij )與該紅色-彩色校正係數(TR )的乘積。
  10. 如申請專利範圍第1項所述之校正方法，其中，該等至少兩 個綠色畫素的每一者的該校正畫素資訊(Gfinal )是該等至少兩個綠色畫素的每一者的估計畫素資訊(Gij )與該綠色-彩色校正係數(TG )的乘積，以及該等至少兩個藍色畫素的每一者的該校正畫素資訊(Bfinal )是該等至少兩個藍色畫素的每一者的估計畫素資訊(Bij )與該藍色-彩色校正係數(TB )的乘積。
TW102126833A 2012-12-28 2013-07-26 校正在影像感測器的彩色濾波陣列中彩色畫素的畫素資訊的校正方法 TWI489864B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
US13/730,475 US8866944B2 (en) 2012-12-28 2012-12-28 Method for correcting pixel information of color pixels on a color filter array of an image sensor

Publications (2)

Publication Number Publication Date
TW201427415A TW201427415A (zh) 2014-07-01
TWI489864B true TWI489864B (zh) 2015-06-21

Family

ID=51016798

Family Applications (1)

Application Number Title Priority Date Filing Date
TW102126833A TWI489864B (zh) 2012-12-28 2013-07-26 校正在影像感測器的彩色濾波陣列中彩色畫素的畫素資訊的校正方法

Country Status (4)

Country Link
US (2) US8866944B2 (zh)
JP (1) JP5658338B2 (zh)
CN (1) CN103916645B (zh)
TW (1) TWI489864B (zh)

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9361678B1 (en) * 2015-04-17 2016-06-07 National Taiwan University Compensation method of spectral mismatch
KR102348760B1 (ko) * 2015-07-24 2022-01-07 삼성전자주식회사 이미지 센서 및 그에 따른 신호 처리 방법
CN105979233B (zh) * 2016-06-30 2018-10-19 北京奇艺世纪科技有限公司 去马赛克方法、图像处理器及图像传感器
US10079255B1 (en) * 2017-08-04 2018-09-18 GM Global Technology Operations LLC Color filter array apparatus
US10841488B2 (en) * 2018-08-03 2020-11-17 Qualcomm Incorporated Combined monochrome and chromatic camera sensor
CN109348204A (zh) * 2018-10-30 2019-02-15 德淮半导体有限公司 图像传感器及生成图像的方法
EP4033535A4 (en) * 2019-09-30 2023-03-01 Guangdong Oppo Mobile Telecommunications Corp., Ltd. IMAGE SENSOR, CAMERA ASSEMBLY AND MOBILE TERMINAL
KR102230609B1 (ko) * 2019-11-26 2021-03-19 가천대학교 산학협력단 딥 러닝 기반 희소 컬러 센서 이미지 처리장치, 이미지 처리방법 및 컴퓨터-판독가능 매체
KR20210156553A (ko) * 2020-06-18 2021-12-27 에스케이하이닉스 주식회사 이미지 센싱 장치 및 그의 동작 방법
KR20220132069A (ko) 2021-03-22 2022-09-30 삼성전자주식회사 이미지 센서
CN116132812A (zh) * 2021-11-12 2023-05-16 三星电子株式会社 图像传感器和图像传感器的操作方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW200816824A (en) * 2006-03-31 2008-04-01 Sony Corp Imaging device camera system and driving method of the same
TW200926839A (en) * 2007-12-10 2009-06-16 Omnivision Tech Inc Image sensor apparatus and method for color correction with an illuminant-dependent color correction matrix
US20100231770A1 (en) * 2007-06-06 2010-09-16 Kabushiki Kaisha Toshiba Solid-state image sensing device
US20110069210A1 (en) * 2009-09-18 2011-03-24 Canon Kabushiki Kaisha Image processing apparatus and imaging system
US7990447B2 (en) * 2006-06-14 2011-08-02 Kabushiki Kaisha Toshiba Solid-state image sensor

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006165975A (ja) * 2004-12-07 2006-06-22 Konica Minolta Photo Imaging Inc 撮像素子、撮像装置、画像処理方法
US7916362B2 (en) * 2006-05-22 2011-03-29 Eastman Kodak Company Image sensor with improved light sensitivity
JP4930109B2 (ja) * 2007-03-06 2012-05-16 ソニー株式会社 固体撮像装置、撮像装置
JP5454075B2 (ja) * 2009-10-20 2014-03-26 ソニー株式会社 画像処理装置、および画像処理方法、並びにプログラム
CN103404152B (zh) * 2011-12-26 2016-11-23 松下电器（美国）知识产权公司 固体摄像元件、摄像装置、以及信号处理方法
JP5789542B2 (ja) * 2012-02-29 2015-10-07 日立マクセル株式会社 撮像装置

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW200816824A (en) * 2006-03-31 2008-04-01 Sony Corp Imaging device camera system and driving method of the same
US7990447B2 (en) * 2006-06-14 2011-08-02 Kabushiki Kaisha Toshiba Solid-state image sensor
US20100231770A1 (en) * 2007-06-06 2010-09-16 Kabushiki Kaisha Toshiba Solid-state image sensing device
US8045033B2 (en) * 2007-06-06 2011-10-25 Kabushiki Kaisha Toshiba Solid-state image sensing device
TW200926839A (en) * 2007-12-10 2009-06-16 Omnivision Tech Inc Image sensor apparatus and method for color correction with an illuminant-dependent color correction matrix
US20110069210A1 (en) * 2009-09-18 2011-03-24 Canon Kabushiki Kaisha Image processing apparatus and imaging system

Also Published As

Publication number Publication date
JP5658338B2 (ja) 2015-01-21
US20140362250A1 (en) 2014-12-11
CN103916645B (zh) 2016-01-13
TW201427415A (zh) 2014-07-01
CN103916645A (zh) 2014-07-09
US20140184863A1 (en) 2014-07-03
JP2014131256A (ja) 2014-07-10
US8866944B2 (en) 2014-10-21
US9219893B2 (en) 2015-12-22

Similar Documents

Publication Publication Date Title
TWI489864B (zh) 校正在影像感測器的彩色濾波陣列中彩色畫素的畫素資訊的校正方法
US7864233B2 (en) Image photographing device and method
KR101442313B1 (ko) 카메라 센서 교정
US8817141B2 (en) Image processing device and method, recording medium, and imaging device
US8581995B2 (en) Method and apparatus for parallax correction in fused array imaging systems
JP5054856B1 (ja) カラー撮像素子
US8780239B2 (en) Image pickup apparatus and signal value correction method
JP5781998B2 (ja) カラー撮像素子
US9613396B2 (en) Method and apparatus for demosaicing of color filter array image
JP2008070853A (ja) 画像配列データの補償方法
JP2016048815A (ja) 画像処理装置、画像処理方法、及び、画像処理システム
TWI638149B (zh) 輝度測定方法、輝度測定裝置及使用前述方法與裝置之畫質調整技術
CN103517004B (zh) 修正图像系统的渐晕的方法及装置
TWI449027B (zh) 適應性畫素補償方法
US20090060389A1 (en) Image processing apparatus
KR20060078646A (ko) 디지털 촬영장치의 색상 보간법
JP5600812B2 (ja) 撮像装置
JP3905708B2 (ja) 画像補間装置
US9739914B2 (en) Color image sensing
TWI670708B (zh) 顏色偏移校正方法及裝置
JP2015149628A (ja) 画像処理装置、画像処理方法及び撮像装置
JP2010104019A (ja) 画素補間方法
JP4303525B2 (ja) 補間画素生成装置および方法
CN107517367A (zh) 拜尔域图像插值方法、装置、图像处理芯片及存储装置
JP5269016B2 (ja) 画像処理装置