TW201511561A - 圖像處理裝置以及缺陷像素之校正方法 - Google Patents
圖像處理裝置以及缺陷像素之校正方法 Download PDFInfo
- Publication number
- TW201511561A TW201511561A TW102146362A TW102146362A TW201511561A TW 201511561 A TW201511561 A TW 201511561A TW 102146362 A TW102146362 A TW 102146362A TW 102146362 A TW102146362 A TW 102146362A TW 201511561 A TW201511561 A TW 201511561A
- Authority
- TW
- Taiwan
- Prior art keywords
- pixel
- value
- brightness
- luminance
- difference
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims abstract description 19
- 230000002950 deficient Effects 0.000 claims description 90
- 230000003321 amplification Effects 0.000 claims 4
- 238000003199 nucleic acid amplification method Methods 0.000 claims 4
- 235000019557 luminance Nutrition 0.000 description 200
- 238000003672 processing method Methods 0.000 description 8
- 239000000872 buffer Substances 0.000 description 5
- 238000010586 diagram Methods 0.000 description 4
- 101100063435 Caenorhabditis elegans din-1 gene Proteins 0.000 description 3
- 101710170230 Antimicrobial peptide 1 Proteins 0.000 description 2
- 101100422614 Arabidopsis thaliana STR15 gene Proteins 0.000 description 1
- 101100141327 Saccharomyces cerevisiae (strain ATCC 204508 / S288c) RNR3 gene Proteins 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 101150112501 din1 gene Proteins 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/64—Circuits for processing colour signals
- H04N9/646—Circuits for processing colour signals for image enhancement, e.g. vertical detail restoration, cross-colour elimination, contour correction, chrominance trapping filters
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
- H04N25/68—Noise processing, e.g. detecting, correcting, reducing or removing noise applied to defects
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/77—Circuits for processing the brightness signal and the chrominance signal relative to each other, e.g. adjusting the phase of the brightness signal relative to the colour signal, correcting differential gain or differential phase
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Control Of Indicators Other Than Cathode Ray Tubes (AREA)
- Transforming Light Signals Into Electric Signals (AREA)
Abstract
一種缺陷像素之校正方法,適用於一圖像,缺陷像素之校正方法包括:依序判定在一圖像中之一預設區塊的每一像素是否為缺陷像素;當預設區塊中的一當前的像素被判定為缺陷像素且一溫度值高於一閥值時,將在預設區塊中的至少一先前已判定之像素重新判定為缺陷像素,其中先前已判定之像素鄰近於當前的像素;以及校正當前的像素與先前已判定之像素。
Description
本發明係有關於圖像處理方法以及圖像處理裝置。
CMOS(Complementary Metal-Oxide-Semiconductor)圖像感測器中的色彩濾鏡陣列(color filter array)經常被安排在貝爾圖案(Bayer pattern)上。來自感測器的原始數據(raw data)經由解馬賽克處理(色彩插值)後用以產生一圖像,其中該圖像的每一像素(pixe)包括紅色、綠色和藍色成份。舉例而言,在一個2*2像素陣列中所排列的貝爾圖案是由一個紅色像素、一個藍色像素以及兩個綠色像素(Gb以及Gr)所構成。影響CMOS圖像感測器產量的重要因素之一為缺陷像素,尤其是在高溫環境下時,缺陷像素(bad pixels)和雜訊將更為嚴重。
因此,需要缺陷像素校正單元用以校正圖像處理裝置中之缺陷像素。
一種缺陷像素之校正方法,適用於一圖像,缺陷像素之校正方法包括:依序判定在一圖像中之一預設區塊的每一像素是否為缺陷像素;當預設區塊中的一當前的像素被判定為缺陷像素且一溫度值高於一閥值時,將在預設區塊中的至少一先前已
判定之像素重新判定為缺陷像素,其中先前已判定之像素鄰近於當前的像素;以及校正當前的像素與先前已判定之像素。
一種圖像處理裝置,包括一缺陷像素校正單元。缺陷像素校正單元用以依序判定在一圖像中之一預設區塊的每一像素是否為缺陷像素;當預設區塊中的一當前的像素被判定為缺陷像素且一溫度值高於一閥值時,將預設區塊中的至少一先前已判定之像素重新判定為缺陷像素;以及校正當前的像素與先前已判定之像素,其中先前已判定之像素鄰近當前的像素。
100‧‧‧圖像感測器
120‧‧‧像素陣列
140‧‧‧圖像處理器
142‧‧‧行緩衝器
144‧‧‧缺陷像素校正單元
D0-D12、Nc、U0-U7、R0‧‧‧像素
300‧‧‧缺陷像素校正單元
310、320、330、340、350、360‧‧‧運算單元
DH‧‧‧水平亮度差
DV‧‧‧垂直亮度差
DNE‧‧‧反對角線亮度差
DNW‧‧‧主對角線亮度差
AMP1-AMP4、pulse_en‧‧‧信號
Din0、Din1‧‧‧數值
第1圖為本發明中之圖像感測器的示意圖。
第2圖為排列在貝爾圖案之像素陣列的示意圖。
第3圖為根據本發明之實施例的圖像處理方法的流程圖。
第4圖為根據本發明之實施例的圖像處理方法的另一流程圖。
第5圖為根據本發明之實施例的圖像處理裝置的示意圖。
以下將詳細討論本發明各種實施例之裝置及使用方法。然而值得注意的是,本發明所提供之許多可行的發明概念可實施在各種特定範圍中。這些特定實施例僅用於舉例說明本揭露之裝置及使用方法,但非用於限定本發明之範圍。
第1圖為本發明中之圖像感測器的示意圖。圖像感測器100包括一像素陣列120和一圖像處理器(image processor)140。圖像處理器140包括複數個行緩衝器(line buffers)142和一缺陷像
素校正單元(bad pixel correction unit)144。在圖像處理器140中,用以儲存原始資料的行緩衝器142之數量可以盡可能少。舉例而言,在本實施例中,行緩衝器142的數量為4,且用以儲存來自像素陣列120中一原始圖像(raw image)的4行像素。由於具有4個行緩衝器和一當前的資料線(current line),故缺陷像素校正單元144可以一個接一個地處理5*5陣列的資料。第2圖為排列成貝爾圖案之像素陣列的示意圖。當前的像素(current pixel)Nc為缺陷像素校正單元144所處理之5*5陣列的中心像素(例如原始圖像中的一預設區塊146)。如果當前的像素Nc為一缺陷像素,則其他周圍像素有可能受到影響而成為缺陷像素。舉例而言,由於溫度升高,而使得當前的像素Nc的周圍像素成為缺陷像素。在一實施例中,由於溫度升高的影響,在當前的像素Nc之交叉方向的像素D9、D11和D12(或圍繞(周圍)的像素D9、D11和D12)等會成為缺陷像素。
第3圖為根據本發明之實施例的圖像處理方法的流程圖。在用以校正缺陷像素之圖像處理方法的實施例中,於步驟10中,依序判定在原始圖像中一預設區塊中的每一像素是否為一缺陷像素。舉例而言,缺陷像素校正單元144會依序判定具有25個像素之5×5像素陣列的預設區塊146中之像素是否為缺陷像素。在某些實施例中,缺陷像素校正單元144用以依序判定預設區塊146的第一列中的5個像素是否為缺陷像素,然後再依序判定的第二列中的5個像素是否為缺陷像素,並依此類推。
接著,在步驟20中,當預設區塊之一當前的像素被判定為缺陷像素,且溫度值高於一閥值時,將在預設區塊中先前已判定之至少一個像素重新判定為缺陷像素,其中先前已判定之
像素鄰近於當前的像素。舉例而言,缺陷像素校正單元144根據溫度感測器所感測環境溫度的檢測結果,判定溫度值是否高於閥值,但並不限定於此。在本實施例中,當缺陷像素校正單元144判定預設區塊146的當前的像素Nc為缺陷像素,且溫度值高於閥值(例如50℃)時,缺陷像素校正單元144則會重新判定至少一個先前像素為缺陷像素。在一實施例中,先前已判定之像素可以是已經被判定之像素或是在預設區塊146中比當前的像素Nc更早被校正的像素,但並不限於此。在另一實施例中,先前已判定之像素可以是已經被判定之像素或是在預設區塊146中鄰近當前的像素Nc且比當前的像素Nc更早被校正的像素,但並不限於此。舉例而言,當缺陷像素校正單元144判定當前的像素Nc為缺陷像素且溫度值高於該閥值時,缺陷像素校正單元144則重新判定在當前的像素Nc之前被判定的像素(例如像素D8、D9、D10)為缺陷像素,但不以此為限。
之後,在步驟30中,對判定為缺陷之像素的當前的
像素Nc以及至少一先前已判定之像素進行校正。在本實施例中,當前的像素以及像素D8、D9以及D10會被進行校正。舉例而言,對當前的像素Nc進行校正的詳細說明將在步驟210中做說明,而對像素D8、D9以及D1進行校正的詳細說明將在步驟212中做說明,但並不以此為限。
事實上,缺陷像素不能隨時被修正。舉例而言,當
正在處理的像素為像素D8時,用於校正缺陷像素的圖像處理方法則因為缺乏足夠的信息,故不能運作。然而,當正在處理的像素為當前的像素Nc,且像素D8-D10為缺陷像素時,那麼用來修正缺
陷像素的圖像處理方法則可用來校正這些像素。
第4圖根據本發明之實施例的圖像處理方法的另一
流程圖。在步驟202中,藉由缺陷像素校正單元144的第一運算單元,根據在預設區塊146中的當前的像素Nc的亮度值,以及在當前的像素Nc周圍的一些像素的亮度值,產生對應於當前的像素Nc的一水平亮度差、一垂直亮度差、一主對角線亮度差以及一反對角線亮度差。
詳細而言,水平亮度差係根據當前的像素的亮度值以及與當前的像素位在同一行且鄰近於當前的像素的兩個像素的亮度值所產生。參考第2圖,在本實施例中,舉例而言,當前的像素為像素Nc,且鄰近於當前的像素Nc的兩個像素為像素D3和D4。水平亮度差DH可以表示為以下等式:DH=|2*LNc-(LD3+LD4)|數值LNc為像素Nc的亮度值,且數值LD3以及數值LD4分別為像素D3和像素D4的亮度值。
垂直亮度差係根據當前的像素的亮度值以及與當前的像素位在同一行且鄰近於當前的像素的兩個像素的亮度值所生成。參考第2圖,在本實施例中,舉例而言,當前的像素為像素Nc,且鄰近於當前的像素Nc的兩個像素為像素D1和像素D6。垂直亮度差DV可以表示為以下等式:DV=|2*LNc-(LD1+LD6)|
數值LD1和數值LD6分別為像素D1和像素D6的亮度值。
主對角線亮度差為根據當前的像素的亮度值以及與
當前的像素位在相同主對角線上且鄰近於當前的像素的兩個像素的亮度值所產生。參考第2圖,在本實施例中,舉例而言,當前的像素係為像素Nc,且鄰近於當前的像素Nc的兩個像素係為像素D0和像素D7。主對角線亮度差DNW可以表示為以下等式:DNW=|2*LNc-(LD0+LD7)|
數值LD0和數值LD7分別為像素D0和D7的亮度值。
反對角線亮度差係根據當前的像素的亮度值以及在與當前的像素位在同一反對角線上且鄰近當前的像素的兩個像素的亮度值所產生。參考第2圖,在本實施例中,舉例而言,當前的像素係為像素Nc,且鄰近於當前的像素Nc的兩個像素係為像素D2和D5。反對角線亮度差DNE可以表示為以下等式:DNE=|2*LNc-(LD2+LD5)|
數值LD2和數值LD5分別為像素D2和D5的亮度值。
在步驟204中,藉由缺陷像素校正單元144的第二運算單元,根據水平亮度差、垂直亮度差、主對角線亮度差以及反對角線亮度差,產生最小亮度差Lmin。在本實施例中,最小亮度差Lmin可以表示為下面的公式:Lmin=min(DH,DV,DNE,DNW)
在步驟206中,藉由缺陷像素校正單元144的第三運算單元,將一最小亮度差放大一倍、兩倍、三倍以及四倍,用以與一預設亮度差進行比較。在本實施例中,具有四個信號(AMP1到AMP4)可分別表示為四個條件。第一個條件為最小亮度差大於預設亮度差。第二個條件為兩倍最小亮度差大於預設亮度差,並依此類推。當相應的條件滿足時,相應的信號則可邏輯上為真。
在步驟208中,藉由缺陷像素校正單元144的第四運算單元,根據最小亮度差、水平亮度差、垂直亮度差、主對角線亮度差以及反對角線亮度差,產生第一補償亮度值和第二補償亮度值。
詳細而言,當最小亮度差等於水平亮度差時,第一補償亮度值和第二補償亮度值分別為與當前的像素位在同一列且鄰近於當前的像素之兩個像素的亮度值。當最小亮度差等於垂直亮度差時,第一補償亮度值和第二補償亮度值分別為與當前的像素位在同一列且鄰近於當前的像素之兩個像素的亮度值。當最小亮度差等於主對角線亮度差時,第一補償亮度值和第二補償亮度值分別為與當前的像素位在同一主對角線上且鄰近於當前的像素之兩個像素的亮度值。當最小亮度差等於反對角線亮度差時,第一補償亮度值和第二補償亮度值分別與當前的像素位在同一反對角線且鄰近於當前的像素之兩個像素的亮度值。步驟208可以被表示為下面的公式:
數值Din0和Din1分別表示為第一補償亮度值和第二個補償亮度值。數值LDn(n=0到7)表示為像素Dn的亮度值。
在步驟210中,藉由缺陷像素校正單元144的第五運算單元,根據最小亮度差、第一補償亮度值、第二補償亮度值和預設亮度差,判定當前的像素是否為一個缺陷像素,並且根據第一補償亮度值、第二補償亮度值或是根據第一補償亮度值、第二
補償亮度值以及當前的像素的亮度值判定當前的像素的補償亮度值(例如校正的亮度值)。
詳細而言,當最小亮度差大於預設亮度差,並當前
的像素Nc的亮度大於第一補償亮度值和第二補償亮度值之總和的二分之一時,則當前的像素Nc的補償亮度值等於第一補償亮度值和第二補償亮度值之總和的二分之一。當兩倍的最小亮度差大於預設亮度差,並且當前的像素Nc的亮度大於第一補償亮度、第二補償亮度與當前的像素Nc的亮度之總和的三分之一時,則當前的像素Nc的補償亮度值等於第一補償亮度值、第二補償亮度值和當前的像素Nc的亮度值之總和的三分之一。當三倍最小亮度差大於預設亮度差,並且當前的像素Nc的亮度值大於第一補償亮度值、第二補償亮度值以及兩倍的當前的像素Nc的亮度值之總和的四分之一時,則當前的像素Nc的補償亮度值等於第一補償亮度值,第二補償亮度值與兩倍當前的像素Nc的亮度之總和的四分之一。當四倍的最小亮度差大於預設亮度差,並且當前的像素Nc的亮度值大於第一補償亮度值、第二補償亮度值與三倍的當前的像素Nc的亮度值之總和的四分之一,則當前的像素Nc的補償亮度值等於第一補償亮度值、第二補償亮度值以及三倍的當前的像素Nc的亮度之總和的五分之一。步驟210可以表示為下面的公式:
信號(pulse_en)為一致能信號,用以表示所對應的條
件是否符合。舉例而言,若當前的像素被判定為缺陷像素時,則信號pulse_en為1。
在步驟212中,藉由缺陷像素校正單元144的第六運
算單元,根據鄰近於當前的像素的一些像素,判定在預設區塊中至少一個已判定像素的補償亮度值(例如校正的亮度值)。在本實施例中,有三個像素將被補償。換言之,有三個像素將被校正,但並不限於此。
舉例而言,當左上方的像素為紅色或藍色時,根據
最鄰近於當前的像素Nc之左上方的像素的兩個紅色像素或兩個藍色像素的亮度值,判定左上方的像素的補償亮度值。當左上方的像素為綠色時,根據最鄰近於當前的像素Nc之左上方的像素的兩個綠色像素的亮度值,判定左上方的像素的補償亮度值。
舉例而言,當上方的像素為紅色或藍色時,根據最
鄰近於當前的像素Nc之上方的像素的三個紅色像素或三個藍色像素的亮度值,判定上方的像素的補償亮度值。當上方的像素為綠色時,根據最鄰近於當前的像素Nc之上方的像素的兩個綠色像素的亮度值,判定上方的像素的補償亮度值將。
舉例而言,當右上方的像素為紅色或藍色時,根據
最鄰近於當前的像素Nc之右上方的像素的兩個紅色像素或兩個藍色像素的亮度值,判定右上方的像素的補償亮度值。當右上方的像素為綠色時,根據最鄰近於當前的像素Nc之右上方的像素的兩個綠色像素的亮度值,判定右上方的像素的補償亮度值。
步驟212可以表示為下面的公式:
第5圖根據本發明之實施例的圖像處理裝置的示意
圖。圖像處理裝置包括一缺陷像素校正單元300。缺陷像素校正單元300包括第一運算單元310、第二運算單元320、第三運算單元330、第四運算單元340、第五運算單元350以及第六運算單元360。
第一運算單元310用以根據在當前缺陷像素區域中
當前的像素的亮度以及圍繞在當前的像素的一些像素的亮度,產生一水平亮度差、垂直亮度差、主對角線亮度差以及反對角線亮度差。
詳細而言,水平亮度差係根據當前的像素的亮度值以及與當前的像素位在同一列且鄰近於當前的像素的兩個像素的亮度值所產生。參考第2圖,在本實施例中,舉例而言,當前的像素為像素Nc,且與當前的像素Nc鄰近的兩個像素為像素D3和D4。水平亮度差DH可以表示為以下等式:DH=|2*LNc-(LD3+LD4)|
數值LNc為像素Nc的亮度值,且數值LD3以及數值LD4分別為像素D3和像素D4的亮度值。
垂直亮度差係根據當前的像素的亮度值以及與當前的像素位在同一行且鄰近當前的像素的兩個像素的亮度值所產生。參考第2圖,在本實施例中,舉例而言,當前的像素為像素Nc,且與當前的像素Nc鄰近的兩個像素為像素D1和D6。垂直亮
度差DV可以表示為以下等式:DV=|2*LNc-(LD1+LD6)|
數值LD1與數值LD6分別為像素D1和像素D6的亮度值。
主對角線亮度差係根據當前的像素的亮度值以及與當前的像素位在同一主對角線上且鄰近當前的像素的兩個像素的亮度值所產生。參考第2圖,在本實施例中,舉例而言,當前的像素為像素Nc,且與當前的像素Nc鄰近的兩個像素為像素D0和D7。主對角線亮度差DNW可以表示為以下等式:DNW=|2*LNc-(LD0+LD7)|
數值LD0數值LD7分別為像素D0和像素D7的亮度值。
反對角線亮度差係根據當前的像素的亮度值以及與當前的像素位在同一反對角線上且鄰近當前的像素的兩個像素的亮度值所產生。參考第2圖,在本實施例中,舉例而言,當前的像素為像素Nc,且與當前的像素Nc鄰近的兩個像素為像素D2和D5。反對角線亮度差DNE可以表示為以下等式:DNE=|2*LNc-(LD2+LD5)|
數值LD2和數值LD5分別為像素D2和像素D5的亮度值。
第二運算單元320用以根據水平亮度差DH、垂直亮度差DV、主對角線亮度差DNW以及反對角線亮度差DNE,產生一最小亮度差。在本實施例中,最小亮度差可以表示為下面的公式:Lmin=min(DH,DV,DNE,DNW)
數值Lmin可表示為最小亮度差。
第三運算單元330用以將最小亮度差放大一倍、兩
倍、三倍以及四倍,並分別與預設亮度差相比較。在本實施例中,四個信號(AMP1至AMP4)分別表示四個條件。第一條件為最小亮度差Lmin大於預設亮度差。第二條件為兩倍的最小亮度差大於預設亮度差,並依此類推。當相應的條件滿足時,相應的信號邏輯上為真。
第四運算單元340用以根據最小亮度差Lmin、水平亮
度差DH、垂直亮度差DV的、主對角線亮度差DNW以及反對角線亮度差DNE,產生第一補償亮度值和第二補償亮度值。
詳細而言,當最小亮度差Lmin等於水平亮度差DH
時,第一補償亮度值和第二補償亮度值分別為與當前的像素Nc位在同一列且鄰近於當前的像素之兩像素的亮度值。當最小亮度差Lmin等於垂直亮度差DV時,第一補償亮度值和第二補償亮度值係分別為與當前的像素Nc位在同一行且鄰近於當前的像素之兩像素的亮度值。當最小亮度差Lmin等於主對角線亮度差DNW時,第一補償亮度值和第二補償亮度值分別為與當前的像素位在同一主對角線上且鄰近於當前的像素於之兩像素的亮度值。當最小亮度差Lmin等於反對角線亮度差DNE時,第一補償亮度值和第二補償亮度值分別為與當前的像素Nc位在同一反對角線上且鄰近於當前的像素之兩像素的亮度值。第四運算單元340可表示為下面之公式:
數值DIN0和數值DIN1分別為第一補償亮度值和第二補償亮度值。數值LDn(n=0到7)表示像素Dn的亮度值。
第五運算單元350用以根據最小亮度差、第一補償亮度值、第二補償亮度值以及預設亮度差,判定當前的像素是否為缺陷像素,以及根據第一補償亮度值、第二補償亮度值以及當前的像素的亮度值,判定當前的像素的補償值(例如校正的亮度值)。當前的像素的補償值為其校正後的亮度值。
詳細而言,當最小亮度差大於預設亮度差,並且當前的像素Nc的亮度值LNc大於第一補償亮度值和第二補償亮度值之總和的二分之一時,當前的像素Nc的補償亮度等於第一補償亮度值和第二補償亮度值之總和的二分之一。當兩倍的最小亮度差大於預設亮度差,並且當前的像素Nc的亮度值LNc大於第一補償亮度值、第二補償亮度值以及當前的像素Nc的亮度值LNc之總和的三分之一時,則當前的像素Nc的補償亮度值LNc等於第一補償亮度值、第二補償亮度值以及當前的像素的亮度值Nc之總和的三分之一。當三倍的最小亮度差大於預設亮度差,並且當前的像素Nc的亮度值LNc大於第一補償亮度值、第二補償亮度值與放大兩倍的當前的像素Nc亮度值之總和的四分之一時,當前的像素Nc的補償亮度值LNc等於第一補償亮度值、第二補償亮度值以及放大兩倍的當前的像素Nc的亮度值之總和的四分之一。當四倍的最小亮度差大於預設亮度差,並且當前的像素Nc的亮度值大於第一補償亮度值、第二補償亮度值與放大三倍的當前的像素Nc的亮度值之總的四分之一時,當前的像素Nc的補償亮度值LNc等於第一補償亮度值、第二補償亮度值以及放大三倍的當前的像素Nc的亮
度值之總和的五分之一。第五運算單元210可被表示為下面的公式:
信號(pulse_en)為一致能信號,用以表示所對應的條
件是否符合。舉例而言,若當前的像素被判定為缺陷像素時,則信號pulse_en為1。
第六運算單元360用以根據鄰近於當前的像素Nc之
圖像的像素,判定在預設區塊146中其它像素(例如先前已判定之像素)的補償亮度值(例如修正的亮度值)。在本實施例中,有三個像素將被校正。在本實施例中,像素D8、D9以及D10為先前已判定之像素且將被校正,但並不限於此。
舉例而言,當左上方的像素D8為紅色或藍色時,根
據在圖像中最鄰近於左上方的像素D8的兩個紅色像素或兩個藍色像素(例如像素U3以及像素U4)的亮度值,判定左上方的像素D8的補償亮度值。當左上方的像素D8為綠色時,根據最鄰近於左上方的像素D8的兩個綠色像素(例如像素D0以及像素D1)的亮度值,判定左上方的像素D8的補償亮度值。
舉例而言,當上方的像素D9為紅色或藍色時,根據
最鄰近於上方的像素D9的三個紅色像素或三個藍色像素的亮度值,判定上方的像素D9的補償亮度值。當上方的像素D9為綠色時,根據最鄰近於上方的像素D9的兩個綠色像素的亮度值,判定
上方的像素D9的補償亮度值。
舉例而言,當右上方的像素D10為紅色或藍色時,根據最鄰近於當前的像素Nc之右上方的像素D10的兩個紅色像素或兩個藍色像素的亮度值,判定右上方的像素D10的補償亮度值。當右上方的像素D10為綠色時,根據最鄰近於右上方的像素D10的兩個綠色像素的亮度值,判定右上方的像素D10的補償亮度值。第六運算單元360可以表示為下面的公式:
惟以上所述者,僅為本揭露之較佳實施例而已,當不能以此限定本揭露實施之範圍,即大凡依本揭露申請專利範圍及發明說明內容所作之簡單的等效變化與修飾,皆仍屬本揭露專利涵蓋之範圍內。另外,本揭露的任一實施例或申請專利範圍不須達成本揭露所揭露之全部目的或優點或特點。此外,摘要部分和標題僅是用來輔助專利文件搜尋之用,並非用來限制本揭露之權利範圍。
300‧‧‧缺陷像素校正單元
310、320、330、340、350、360‧‧‧運算單元
DH‧‧‧水平亮度差
DV‧‧‧垂直亮度差
DNE‧‧‧反對角線亮度差
DNW‧‧‧主對角線亮度差
AMP1-AMP4、pulse_en‧‧‧信號
Din0、Din1‧‧‧數值
Claims (20)
- 一種缺陷像素之校正方法,適用於一圖像,上述缺陷像素之校正方法包括:依序判定在一圖像中之一預設區塊的每一像素是否為缺陷像素;當上述預設區塊中的一當前的像素被判定為缺陷像素且一溫度值高於一閥值時,將在上述預設區塊中的至少一先前已判定之像素重新判定為缺陷像素,其中上述先前已判定之像素鄰近於上述當前的像素;以及校正上述當前的像素與上述先前已判定之像素。
- 如申請專利範圍第1項所述之缺陷像素之校正方法,其中上述判定步驟包括:根據上述當前的像素的一亮度值以及在上述預設區塊中上述當前的像素周圍之複數像素的複數亮度值,產生一水平亮度差、一垂直亮度差、一主對角線亮度差以及一反對角線亮度差;根據上述水平亮度差、上述垂直亮度差、上述主對角線亮度差以及上述反對角線亮度差,產生一最小亮度差;根據上述最小亮度差、上述水平亮度差、上述垂直亮度差、上述主對角線亮度差以及上述反對角線亮度差,產生一第一補償亮度值和第二補償亮度值;以及 根據上述最小亮度差以及一預設亮度差,判定上述當前的像素是否為缺陷像素。
- 如申請專利範圍第2項所述之缺陷像素之校正方法,其中上述校正步驟包括:根據上述第一補償亮度值、上述第二補償亮度值,或是根據上述第一補償亮度值、上述第二補償亮度值以及上述當前的像素的亮度值,判定上述當前的像素的一補償亮度值;以及在上述區塊中判定上述至少一先前已判定之像素的一補償亮度值。
- 如申請專利範圍第3項所述之缺陷像素之校正方法,其中上述判定步驟包括:將上述最小亮度差放大一倍、兩倍、三倍以及四倍;分別將上述最小亮度差、放大二倍的上述最小亮度差、放大三倍的上述最小亮度差以及放大四倍的上述最小亮度差與上述預設亮度差做比較,其中判定上述當前的像素是否為缺陷像素的步驟包括:當上述最小亮度差大於上述預設亮度差,並且上述當前的像素的上述亮度值大於上述第一補償亮度值與上述第二補償亮度值之總和的二分之一時,判定上述當前的像素為缺陷像素; 當放大兩倍的上述最小亮度差大於上述預設亮度差,並且上述當前的像素的上述亮度值大於上述第一補償亮度值、上述第二補償亮度值與上述當前的像素之上述亮度值之總和的三分之一時,判定上述當前的像素為缺陷像素;當放大三倍的上述最小亮度差大於上述預設亮度差,並且上述當前的像素的上述亮度值大於上述第一補償亮度值、上述第二補償亮度值與上述當前的像素之兩倍的上述亮度值之總和的四分之一時,判定上述當前的像素為缺陷像素;當放大四倍的上述最小亮度差大於上述預設亮度差,並且上述當前的像素的上述亮度值大於上述第一補償亮度值、上述第二補償亮度值與上述當前的像素之三倍的上述亮度值之總和的五分之一時,判定上述當前的像素為缺陷像素;以及不為上述情況時,則判定上述當前的像素不是缺陷像素。
- 如申請專利範圍第4項所述之缺陷像素之校正方法,其中產生上述水平亮度差、上述垂直亮度差、上述主對角線亮度差以及上述反對角線亮度差的步驟包括:根據上述當前的像素的亮度值以及與上述當前的像素位在同一列且鄰近上述當前的像素之兩像素的亮度值,產生上述水平亮度差; 根據上述當前的像素的亮度值以及與上述當前的像素位在同一主對角線且鄰近上述當前的像素之兩像素的亮度值,產生上述主對角線亮度差;根據上述當前的像素的亮度值以及與上述當前的像素位在同一反對角線且鄰近上述當前的像素之兩像素的亮度值產生上述反對角線亮度差。
- 如申請專利範圍第4項所述之缺陷像素之校正方法,其中產生上述第一補償亮度值以及上述第二補償亮度值的步驟包括:當上述最小亮度差等於上述水平亮度差時,上述第一補償亮度值與上述第二補償亮度值分別為與上述當前的像素位在同一列且鄰近上述當前的像素之兩像素的上述亮度值;當上述最小亮度差等於上述垂直亮度差時,上述第一補償亮度值與上述第二補償亮度值分別為與上述當前的像素位在同一行且鄰近上述當前的像素之兩像素的上述亮度值;當上述最小亮度差等於上述主對角線亮度差時,上述第一補償亮度值與上述第二補償亮度值分別為與上述當前的像素位在相同之上述對角線且鄰近上述當前的像素之兩像素的上述亮度值;當上述最小亮度差等於上述反對角線亮度差時,上述第一補償亮度值以及上述第二補償亮度值分別為與上述當前的 像素位在相同之上述反對角線且鄰近上述當前的像素之兩像素的上述亮度值。
- 如申請專利範圍第6項所述之缺陷像素之校正方法,其中判定上述當前的像素的上述補償亮度值的步驟包括:當上述最小亮度差大於上述預設亮度差,並且上述當前的像素的上述亮度值大於上述第一補償亮度值與上述第二補償亮度值之總和的二分之一時,上述當前的像素之上述補償亮度值等於上述第一補償亮度值與上述第二補償亮度值之總和的二分之一;當放大兩倍的上述最小亮度差大於上述預設亮度差,並且上述當前的像素的上述亮度值大於上述第一補償亮度值、上述第二補償亮度值與上述當前的像素之上述亮度值之總和的三分之一時,上述當前的像素之上述補償亮度值等於上述第一補償亮度值、上述第二補償亮度值與上述當前的像素的上述亮度值之總和的三分之一;當放大三倍的上述最小亮度差大於上述預設亮度差,並且上述當前的像素的上述亮度值大於上述第一補償亮度值、上述第二補償亮度值以及放大兩倍之上述當前的像素的上述亮度值之總和的四分之一時,上述當前的像素之上述補償亮度值等於上述第一補償亮度值、上述第二補償亮度值以及上述當前的像素放大兩倍的上述亮度值之總和的四分之一;以及 當放大四倍的上述最小亮度差大於上述預設亮度差,並且上述當前的像素的上述亮度值大於上述第一補償亮度值、上述第二補償亮度值以及放大三倍之上述當前的像素的上述亮度值之總和的四分之一時,上述當前的像素之上述補償亮度值等於上述第一補償亮度值、上述第二補償亮度值與放大三倍之上述當前的像素的上述亮度值之總和的五分之一。
- 如申請專利範圍第7項所述之缺陷像素之校正方法,其中判定上述先前已判定之像素的上述補償亮度值的步驟包括:當上述預設區塊中位於一左上方的像素是紅色或藍色時,根據在上述預設區塊中最鄰近上述左上方的像素的兩個紅色像素或兩個藍色像素的上述亮度值,判定上述左上的像素的一補償亮度值;以及當上述左上方的像素是綠色時,根據在上述預設區塊中最鄰近上述左上方的像素的兩個綠色像素的上述亮度值,判定上述左上的像素的一補償亮度值。
- 如申請專利範圍第8項所述之缺陷像素之校正方法,其中判定上述先前已判定之像素的上述補償亮度值的步驟包括:當上述預設區塊中位於一上方的像素是紅色或藍色時,根據在上述預設區塊中最鄰近上述上方的像素的三個紅色像 素或三個藍色像素的上述亮度值,判定上述上方的像素的一補償亮度值;以及當上述上方的像素是綠色時,根據在上述預設區塊中最鄰近上述上方的像素的兩個綠色像素的上述亮度值,判定上述上方的像素的一補償亮度值。
- 如申請專利範圍第9項所述之缺陷像素之校正方法,其中判定上述先前已判定之像素的上述補償亮度值的步驟包括:當上述預設區塊中位於一右上方的像素是紅色或藍色時,根據在上述預設區塊中最鄰近上述右上方的像素的兩個紅色像素或兩個藍色像素的上述亮度值,判定上述右上方的像素的一補償亮度值;以及當上述右上方的像素是綠色時,根據在上述預設區塊中最鄰近上述右上方的像素的兩個綠色像素的上述亮度值,判定上述右上方的像素的一補償亮度值。
- 一種圖像處理裝置,包括:一缺陷像素校正單元,用以依序判定在一圖像中之一預設區塊的每一像素是否為缺陷像素;當上述預設區塊中的一當前的像素被判定為缺陷像素且一溫度值高於一閥值時,將上述預設區塊中的至少一先前已判定之像素重新判定為缺陷像素;以及校正上述當前的像素與上述先前已判定之像素,其中上述先前已判定之像素鄰近上述當前的像素。
- 如申請專利範圍第11項所述之圖像處理裝置,其中上述缺陷像素校正單元包括:一第一運算單元,用以根據上述當前的像素的一亮度值以及在上述預設區塊中上述當前的像素周圍之複數像素的複數亮度值,產生一水平亮度差、一垂直亮度差、一主對角線亮度差以及一反對角線亮度差;一第二運算單元,用以根據上述水平亮度差、上述垂直亮度差、上述主對角線亮度差以及上述反對角線亮度差,產生一最小亮度差;以及一第三運算單元,用以將上述最小亮度差放大一倍、兩倍、三倍以及四倍,且分別將上述最小亮度差、放大二倍的上述最小亮度差、放大三倍的上述最小亮度差以及放大四倍的上述最小亮度差與上述預設亮度差做比較。
- 如申請專利範圍第12項所述之圖像處理裝置,其中上述缺陷像素校正單元更包括:一第四運算單元,用以根據上述最小亮度差、上述水平亮度差、上述垂直亮度差、上述主對角線亮度差以及上述反對角線亮度差產生一第一補償亮度值和一第二補償亮度值;一第五運算單元,用以根據上述最小亮度差、上述第一補償亮度值、上述第二補償亮度值以及一預設亮度差,判定上述當前的像素是否為一缺陷像素,以及根據上述第一補償亮度值、上述第二補償亮度值或是根據上述第一補償亮度 值、上述第二補償亮度值以及上述當前的像素的上述亮度值判定上述當前的像素的一補償亮度值;以及一第六運算單元,用以在上述區塊中判定至少一上述先前已判定之像素的一補償亮度值。
- 如申請專利範圍第13項所述之圖像處理裝置,其中上述第五運算單元用以當上述最小亮度差大於上述預設亮度差以及上述當前的像素的上述亮度值大於上述第一補償亮度值以及上述第二補償亮度值之總和的二分之一時,判定上述當前的像素為一缺陷像素;上述第五運算單元,用以當放大兩倍的上述最小亮度差大於上述預設亮度差,並且上述當前的像素的上述亮度值大於上述第一補償亮度值、上述第二補償亮度值與上述當前的像素之上述亮度值之總和的三分之一時,判定上述當前的像素為缺陷像素;上述第五運算單元,用以當放大三倍的上述最小亮度差大於上述預設亮度差,並且上述當前的像素的上述亮度值大於上述第一補償亮度值、上述第二補償亮度值與放大兩倍之上述當前的像素的上述亮度值之總和的四分之一時,判定上述當前的像素為缺陷像素;上述第五運算單元,用以當放大四倍的上述最小亮度差大於上述預設亮度差,並且上述當前的像素的上述亮度值大於上述第一補償亮度值、上述第二補償亮度值與放大三倍之 上述當前的像素的上述亮度值之總和的五分之一時,判定上述當前的像素為缺陷像素;以及上述第五運算單元,用以當上述當前的像素不為上述情況時,判定上述當前的像素不是缺陷像素。
- 如申請專利範圍第14項所述之圖像處理裝置,其中上述第一運算單元根據上述當前的像素的亮度值以及與上述當前的像素位在同一列且鄰近上述當前的像素之兩像素的亮度值,產生上述水平亮度差;上述第一運算單元根據上述當前的像素的亮度值以及與上述當前的像素位在同一主對角線且鄰近上述當前的像素之兩像素的亮度值產生上述主對角線亮度差;上述第一運算單元根據上述當前的像素的亮度值以及與上述當前的像素位在同一反對角線且鄰近上述當前的像素之兩像素的亮度值產生上述反對角線亮度差。
- 如申請專利範圍第15項所述之圖像處理裝置,其中上述第四運算單元產生上述第一補償亮度值以及上述第二補償亮度值根據下列步驟:當上述最小亮度差等於上述水平亮度差時,上述第一補償亮度值與上述第二補償亮度值分別為與上述當前的像素位在同一列且鄰近上述當前的像素之兩像素的上述亮度值;當上述最小亮度差等於上述垂直亮度差時,上述第一補償亮度值與上述第二補償亮度值分別為與上述當前的像素位在同一行且鄰近上述當前的像素之兩像素的上述亮度值; 當上述最小亮度差等於上述主對角線亮度差時,上述第一補償亮度值與上述第二補償亮度值分別為與上述當前的像素位在相同之上述對角線且鄰近上述當前的像素之兩像素的上述亮度值;當上述最小亮度差等於上述反對角線亮度差時,上述第一補償亮度值以及上述第二補償亮度值分別為與上述當前的像素位在相同之上述反對角線且鄰近上述當前的像素之兩像素的上述亮度值。
- 如申請專利範圍第16項所述之圖像處理裝置,其中上述第五運算單元產生上述當前的像素的上述補償亮度值,係根據下列步驟:當上述最小亮度差大於上述預設亮度差,並且上述當前的像素的上述亮度值大於上述第一補償亮度值與上述第二補償亮度值之總和的二分之一時,上述當前的像素之上述補償亮度值等於上述第一補償亮度值與上述第二補償亮度值之總和的二分之一;當放大兩倍的上述最小亮度差大於上述預設亮度差,並且上述當前的像素的上述亮度值大於上述第一補償亮度值、上述第二補償亮度值與上述當前的像素之上述亮度值之總和的三分之一時,上述當前的像素之上述補償亮度值等於上述第一補償亮度值、上述第二補償亮度值與上述當前的像素的上述亮度值之總和的三分之一; 當放大三倍的上述最小亮度差大於上述預設亮度差,並且上述當前的像素的上述亮度值大於上述第一補償亮度值、上述第二補償亮度值以及放大兩倍之上述當前的像素的上述亮度值之總和的四分之一時,上述當前的像素之上述補償亮度值等於上述第一補償亮度值、上述第二補償亮度值以及上述當前的像素放大兩倍的上述亮度值之總和的四分之一;以及當放大四倍的上述最小亮度差大於上述預設亮度差,並且上述當前的像素的上述亮度值大於上述第一補償亮度值、上述第二補償亮度值以及放大三倍之上述當前的像素的上述亮度值之總和的四分之一時,上述當前的像素之上述補償亮度值等於上述第一補償亮度值、上述第二補償亮度值與放大三倍之上述當前的像素的上述亮度值之總和的五分之一。
- 如申請專利範圍第17項所述之圖像處理裝置,其中上述第六運算單元產生上述先前已判定之像素之上述補償亮度值,係根據下列步驟:當上述預設區塊中位於一左上方的像素是紅色或藍色時,根據在上述預設區塊中最鄰近上述左上方的像素的兩個紅色像素或兩個藍色像素的上述亮度值,判定上述左上的像素的一補償亮度值;以及 當上述左上方的像素是綠色時,根據在上述預設區塊中最鄰近上述左上方的像素的兩個綠色像素的上述亮度值,判定上述左上的像素的一補償亮度值。
- 如申請專利範圍第18項所述之圖像處理裝置,其中上述第六運算單元產生上述先前已判定之像素之上述補償亮度值,係根據下列步驟:當上述預設區塊中位於一上方的像素是紅色或藍色時,根據在上述預設區塊中最鄰近上述上方的像素的三個紅色像素或三個藍色像素的上述亮度值,判定上述上方的像素的一補償亮度值;以及當上述上方的像素是綠色時,根據在上述預設區塊中最鄰近上述上方的像素的兩個綠色像素的上述亮度值,判定上述上方的像素的一補償亮度值。
- 如申請專利範圍第19項所述之圖像處理裝置,其中上述第六運算單元產生上述先前已判定之像素之上述補償亮度值係根據下列步驟:當上述預設區塊中位於一右上方的像素是紅色或藍色時,根據在上述預設區塊中最鄰近上述右上方的像素的兩個紅色像素或兩個藍色像素的上述亮度值,判定上述右上方的像素的一補償亮度值;以及 當上述右上方的像素是綠色時,根據在上述預設區塊中最鄰近上述右上方的像素的兩個綠色像素的上述亮度值,判定上述右上方的像素的一補償亮度值。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US14/016,378 US9077941B2 (en) | 2013-09-03 | 2013-09-03 | Image processing method and image processing device |
Publications (2)
Publication Number | Publication Date |
---|---|
TW201511561A true TW201511561A (zh) | 2015-03-16 |
TWI528818B TWI528818B (zh) | 2016-04-01 |
Family
ID=52582707
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
TW102146362A TWI528818B (zh) | 2013-09-03 | 2013-12-16 | 圖像處理裝置以及缺陷像素之校正方法 |
Country Status (2)
Country | Link |
---|---|
US (1) | US9077941B2 (zh) |
TW (1) | TWI528818B (zh) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110542482B (zh) * | 2018-05-29 | 2020-11-13 | 杭州海康微影传感科技有限公司 | 一种盲元检测方法、装置及电子设备 |
CN110542480B (zh) * | 2018-05-29 | 2020-11-13 | 杭州海康微影传感科技有限公司 | 一种盲元检测方法、装置及电子设备 |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7173741B1 (en) * | 2000-12-13 | 2007-02-06 | National Semiconductor Corporation | System and method for handling bad pixels in image sensors |
CN1219395C (zh) * | 2002-01-30 | 2005-09-14 | 株式会社理光 | 摄像装置和摄像方法 |
JP4388909B2 (ja) * | 2005-04-25 | 2009-12-24 | イーストマン コダック カンパニー | 画素欠陥補正装置 |
US8131067B2 (en) * | 2008-09-11 | 2012-03-06 | Seiko Epson Corporation | Image processing apparatus, image processing method, and computer-readable media for attaining image processing |
JP5544285B2 (ja) * | 2010-12-21 | 2014-07-09 | 株式会社日立製作所 | 画像信号処理装置及び画像信号処理方法 |
US20130077858A1 (en) * | 2011-09-22 | 2013-03-28 | Himax Imaging Limited | Image processing module and image processing method |
CN104025581B (zh) * | 2011-12-28 | 2015-06-03 | 富士胶片株式会社 | 摄像装置 |
-
2013
- 2013-09-03 US US14/016,378 patent/US9077941B2/en not_active Expired - Fee Related
- 2013-12-16 TW TW102146362A patent/TWI528818B/zh active
Also Published As
Publication number | Publication date |
---|---|
TWI528818B (zh) | 2016-04-01 |
US20150062388A1 (en) | 2015-03-05 |
US9077941B2 (en) | 2015-07-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11069286B2 (en) | Color compensation method, compensation device, and display device | |
JP6373479B2 (ja) | Rgbからrgbwへの色変換システムと方法 | |
US20150172620A1 (en) | Optimal dynamic seam adjustment system and method for image stitching | |
TWI542217B (zh) | 像素值校正裝置與方法 | |
CN103475828A (zh) | 一种图像坏点校正方法及图像传感器 | |
CN103491357A (zh) | 一种图像传感器白平衡处理方法 | |
JP2002010274A (ja) | カラー画像処理装置 | |
JP2008092565A (ja) | カラーマッチング方法及び撮像装置 | |
TW201709721A (zh) | 應用於紅綠藍紅外光感測器的影像處理方法及其相關裝置 | |
TW201541410A (zh) | 鏡頭失真校正方法 | |
JP2011101129A (ja) | 画像処理装置及びその制御方法 | |
JP6619565B2 (ja) | 画像処理装置、画像処理方法およびプログラム | |
JP6445678B2 (ja) | ムラ補正システム、ムラ補正装置及びパネル駆動回路 | |
JP2016050982A (ja) | 輝度補正装置及びこれを備えるシステム並びに輝度補正方法 | |
TW201314623A (zh) | 影像處理模組及影像處理方法 | |
CN103733608A (zh) | 图像处理设备及其控制方法 | |
TW201601538A (zh) | 影像擷取裝置及其影像補償方法 | |
TW201310439A (zh) | 適應性畫素補償方法 | |
TWI528818B (zh) | 圖像處理裝置以及缺陷像素之校正方法 | |
CN103888690B (zh) | 用于检测缺陷像素的设备和方法 | |
TW201411554A (zh) | 修正一影像系統之暈影的方法及裝置 | |
CN106405894B (zh) | 一种液晶面板缺陷自动定位方法 | |
TW201334526A (zh) | 適應性影像處理方法及其相關裝置 | |
TWI537873B (zh) | 影像修正方法與影像修正裝置 | |
JP2015032842A (ja) | 固体撮像素子、撮像装置、および補正方法 |