TWI538515B - 影像感測裝置與缺陷像素檢測與補償方法 - Google Patents

影像感測裝置與缺陷像素檢測與補償方法 Download PDF

Info

Publication number
TWI538515B
TWI538515B TW103137754A TW103137754A TWI538515B TW I538515 B TWI538515 B TW I538515B TW 103137754 A TW103137754 A TW 103137754A TW 103137754 A TW103137754 A TW 103137754A TW I538515 B TWI538515 B TW I538515B
Authority
TW
Taiwan
Prior art keywords
data
sensing
line
row
sensing data
Prior art date
Application number
TW103137754A
Other languages
English (en)
Other versions
TW201616861A (zh
Inventor
林俊宏
Original Assignee
晶相光電股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 晶相光電股份有限公司 filed Critical 晶相光電股份有限公司
Priority to TW103137754A priority Critical patent/TWI538515B/zh
Priority to CN201410705158.9A priority patent/CN105704405B/zh
Priority to US14/703,224 priority patent/US9549133B2/en
Publication of TW201616861A publication Critical patent/TW201616861A/zh
Application granted granted Critical
Publication of TWI538515B publication Critical patent/TWI538515B/zh

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/60Noise processing, e.g. detecting, correcting, reducing or removing noise
    • H04N25/68Noise processing, e.g. detecting, correcting, reducing or removing noise applied to defects
    • H04N25/683Noise processing, e.g. detecting, correcting, reducing or removing noise applied to defects by defect estimation performed on the scene signal, e.g. real time or on the fly detection

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Transforming Light Signals Into Electric Signals (AREA)
  • Image Processing (AREA)

Description

影像感測裝置與缺陷像素檢測與補償方法
本發明係有關於影像感測裝置以及感測元件陣列缺陷像素檢測與補償方法,特別關於行緩衝器(line buffer)之數量縮減。
影像感測用的感測元件陣列(sensor array,如CMOS陣列)可能存有感測效果不佳的缺陷像素(defect pixel)一例如,暗點或亮點。
本技術領域一項重要課題為正確地檢測出感測元件陣列上的缺陷像素、並且妥善補償之。
本案揭露一種少量行緩衝器需求之影像感測裝置以及感測元件陣列缺陷像素檢測與補償方法。
根據本案一種實施方式所實現的一影像感測裝置包括複數條行緩衝器以及一邏輯電路。該邏輯電路係根據一感測元件陣列所感測的一第n行感測資料、以及上述複數條行緩衝器所儲存之數據,尋出該第n行感測資料之缺陷像素候選所在,以於該感測元件陣列供應一第(n+p)行感測資料時,根據該第(n+p)行感測資料以及上述複數條行緩衝器所儲存之數 據,覆核該第n行感測資料上的缺陷像素候選,以補償之。該感測元件陣列供應該第n行感測資料時,上述複數條行緩衝器係儲存一第(n-p)行感測資料至一第(n-1)行感測資料。該感測元件陣列供應該第(n+p)行感測資料時,上述複數條行緩衝器係儲存該第n行感測資料至一第(n+p-1)行感測資料。
相較於傳統技術,以上兩階段式缺陷像素評估方式使得行緩衝器數量減少一半以上。本案一種實施方式係將上述感測元件陣列與上述少量的行緩衝器以及該邏輯電路包裝於同一封裝內。
根據本案一種實施方式所實現的一種感測元件陣列缺陷像素檢測與補償方法,包括以下步驟:根據一感測元件陣列所感測的一第n行感測資料、以及複數條行緩衝器所儲存之數據,尋出該第n行感測資料之缺陷像素候選所在;以及,於該感測元件陣列供應一第(n+p)行感測資料時,根據該第(n+p)行感測資料以及上述複數條行緩衝器所儲存之數據,覆核該第n行感測資料上的缺陷像素候選,以補償之。該感測元件陣列供應該第n行感測資料時,上述複數條行緩衝器係儲存一第(n-p)行感測資料至一第(n-1)行感測資料。該感測元件陣列供應該第(n+p)行感測資料時,上述複數條行緩衝器係儲存該第n行感測資料至一第(n+p-1)行感測資料。
下文特舉實施例,並配合所附圖示,詳細說明本發明內容。
100‧‧‧影像感測裝置
102‧‧‧缺陷像素檢測補償器
104‧‧‧感測元件陣列
106‧‧‧邏輯電路
108‧‧‧缺陷像素粗評模塊
110‧‧‧缺陷像素細評模塊
112‧‧‧缺陷像素補償模塊
B‧‧‧藍色感測像素/數據
BL‧‧‧一位元的亮點標誌
B_W_Marker‧‧‧缺陷像素候選之暗點/亮點標誌
C_Pixel‧‧‧一像素補償後的結果
C_Raw_Data‧‧‧缺陷像素補償後的感測資料
D_L、D_R‧‧‧缺陷像素之位置以及參考點資訊
D_R(k)‧‧‧索引k之參考點資訊
G、G0…G12‧‧‧綠色感測像素/數據
k‧‧‧索引值
Line_Buffer_1、Line_Buffer_2‧‧‧行緩衝器
Line_n、Line_n+2‧‧‧裝置接收Raw_n、Raw_n+2時,行緩衝器Line_Buffer_1、Line_Buffer_2上所緩衝暫存的數據
R、R0…R8‧‧‧紅色感測像素/數據
Raw_Data‧‧‧感測資料
Raw_n-2、Raw_n-1、Raw_n、Raw_n+1、Raw_n+2‧‧‧第(n-2)行…第(n+2)行感測資料
P240‧‧‧缺陷像素補償程序
S202…S246‧‧‧步驟
W‧‧‧一位元的暗點標誌
第1圖根據本案一種實施方式圖解一種影像感測裝置100,包括採用兩階段缺陷像素評估繼而進行補償的一缺陷像素檢測補償器102;第2A圖為流程圖,根據本案一種實施方式圖解該缺陷像素粗評模塊108之操作;第2B圖為流程圖,根據本案一種實施方式圖解該缺陷像素細評模塊110之操作;第2C圖為流程圖,根據本案一種實施方式圖解像素D_C_Pixel之缺陷像素補償程序P240(對應缺陷像素補償模塊112);第3A、3B以及3C圖舉例說明以上缺陷像素粗評模塊108、缺陷像素細評模塊110以及缺陷像素補償模塊112之運作概念;第4圖根據本案一種實施方式圖解行緩衝器上的儲存格式;第5A、5B以及5C圖舉例說明以上缺陷像素粗評模塊108、缺陷像素細評模塊110以及缺陷像素補償模塊112之運作概念,其中係針對綠色感測像素作缺陷檢測與補償。
以下敘述列舉本發明的多種實施例。以下敘述介紹本發明的基本概念,且並非意圖限制本發明內容。實際發明範圍應依照申請專利範圍界定之。
第1圖圖解一種影像感測裝置100,包括採用兩階段缺陷像素評估繼而進行補償的一缺陷像素檢測補償器102。該缺陷像素檢測補償器102係耦接一感測元件陣列104(如 CMOS陣列或其它),以接收感測資料Raw_Data。該缺陷像素檢測補償器102包括兩條行緩衝器Line_Buffer_1、Line_Buffer_2與邏輯電路106。邏輯電路106係提供缺陷像素粗評模塊108、缺陷像素細評模塊110以及缺陷像素補償模塊112。
缺陷像素粗評模塊108作用時,感測元件陣列104係供應第n行感測資料Raw_n,且兩條行緩衝器Line_Buffer_1、Line_Buffer_2儲存內容為數據Lines_n,包括第(n-2)行感測資料Raw_n-2以及第(n-1)行感測資料Raw_n-1。缺陷像素粗評模塊108係根據該第n行感測資料Raw_n、以及兩條行緩衝器Line_Buffer_1、Line_Buffer_2所儲存之數據Lines_n(包括Raw_n-2以及Raw_n-1),尋出該第n行感測資料Raw_n之缺陷像素候選所在。該第n行感測資料Raw_n上的缺陷像素候選之位置、暗點/亮點標誌、以及補償運算時所需之參考點資訊係分別載於D_L、B_W_Marker以及D_R中。
缺陷像素細評模塊110作用時,感測元件陣列104係供應第(n+2)行感測資料Raw_n+2,且兩條行緩衝器Line_Buffer_1、Line_Buffer_2儲存內容為數據Lines_n+2,包括第n行感測資料Raw_n以及第(n+1)行感測資料Raw_n+1。缺陷像素細評模塊110係根據資訊D_L獲得第n行感測資料Raw_n上的缺陷像素候選之位置資訊,並根據資訊B_W_Marker取得第n行感測資料Raw_n上的缺陷像素候選之暗點/亮點標誌。缺陷像素細評模塊110將覆核該第n行感測資料Raw_n上的缺陷像素候選是否真為缺陷像素。缺陷像素細評模塊110係根據該第(n+2)行感測資料Raw_n+2、以及兩條行緩衝器Line_Buffer_1、 Line_Buffer_2所儲存之數據Lines_n+2(包括Raw_n以及Raw_n+1),覆核該第n行感測資料Raw_n上的缺陷像素候選。各缺陷像素候選之暗點/亮點標誌(B_W_Marker)即用於輔助此覆核程序。粗評(108)時判斷可能為亮點的缺陷像素候選,倘若又經細評(110)認定為亮點,則可確定為亮點缺陷像素。粗評(108)時判斷可能為暗點的缺陷像素候選,倘若又經細評(110)認定為暗點,則可確定為暗點缺陷像素。細評(110)確認的缺陷像素即可以該缺陷像素補償模塊112作缺陷像素補償。
如圖所示,假設缺陷像素細評模塊110判定資訊D_L之索引k所指之感測元件確實為缺陷像素,則缺陷像素補償模塊112可根據索引k自資訊D_L取得該感測元件位置,並根據索引k自資訊D_R取得補償所需之參考點資訊。缺陷像素補償模塊112係根據上述參考點資訊、兩條行緩衝器Line_Buffer_1、Line_Buffer_2所儲存之數據Lines_n+2(包括Raw_n以及Raw_n+1)、以及第(n+2)行感測資料Raw_n+2作第n行感測資料Raw_n的缺陷像素補償。一缺陷像素補償後的結果為C_Pixel,將取代該缺陷像素原本感測到的數值。如此一來,缺陷像素檢測補償器102係供應缺陷像素補償後的感測資料C_Raw_Data給後端模塊(如,抗躁處理模塊、影像壓縮模塊…等)。
第2A圖為流程圖,根據本案一種實施方式圖解該缺陷像素粗評模塊108之操作,其中係逐像素分析該第n行感測資料Raw_n是否存有缺陷像素候選,j為像素索引。缺陷像素候選之位置、暗點/亮點標誌以及參考點資訊則是以索引k紀錄於 資訊D_L、B_W_Marker以及D_R中。步驟S202用於重置索引j與k,例如,j=k=0。步驟S204係根據該第n行感測資料Raw_n、以及兩條行緩衝器Line_Buffer_1、Line_Buffer_2所儲存之數據Lines_n(包括Raw_n-2以及Raw_n-1)分析該第n行感測資料之索引j像素Raw_n(j)。步驟S206若判定像素Raw_n(j)為缺陷像素候選,則流程進行步驟S208,以索引k將像素Raw_n(j)的位置、暗點/亮點標誌、以及參考點資訊分別記錄至資訊D_L、B_W_Marker以及D_R。步驟S210負責遞增索引值k。步驟S212判斷第n行感測資料Raw_n是否所有像素都完成缺陷像素粗評。倘若步驟S206判定像素Raw_n(j)非缺陷像素候選,則流程略過步驟S208、S210,進行步驟S212。倘若步驟S212判定第n行感測資料Raw_n尚有像素未粗評過,則流程進行步驟S214遞增索引值j,並再次進行步驟S204。若步驟S212判定第n行感測資料Raw_n所有像素皆粗評過,則程序切換進入缺陷像素細評。
第2B圖為流程圖,圖解該缺陷像素細評模塊110之操作。步驟S222判斷第n行感測資料Raw_n是否存在缺陷像素候選。若第n行感測資料Raw_n存在缺陷像素候選,則流程進入步驟S224,索引值k初始化,例如,索引值k初始至零。步驟S226以索引值k查詢位置資訊D_L,以尋得為缺陷像素候選的一像素D_C_Pixel。步驟S228根據該第(n+2)行感測資料Raw_n+2、以及兩條行緩衝器Line_Buffer_1、Line_Buffer_2所儲存之數據Lines_n+2(包括Raw_n以及Raw_n+1),覆核該缺陷像素候選D_C_Pixel。缺陷像素候選D_C_Pixel之暗點/亮點標誌即根據索引值k查詢資訊B_W_Marker獲得,用於輔助上述覆核程序。步 驟S230若判定缺陷像素候選D_C_Pixel並不屬缺陷像素,則流程進行步驟S232,辨識第n行感測資料Raw_n是否尚有未覆核的缺陷像素候選。若第n行感測資料Raw_n尚有未覆核的缺陷像素候選,則流程進行步驟S234遞增索引值k,並再次進行步驟S226。若步驟S232判定第n行感測資料Raw_n所有缺陷像素候選皆覆核過,則程序結束。
如圖所示,倘若步驟S230判定缺陷像素候選D_C_Pixel符合缺陷像素,則可以程序P240對該像素D_C_Pixel進行補償。第2C圖為流程圖,圖解該像素D_C_Pixel之缺陷像素補償程序P240。步驟S242以索引值k查詢資訊D_R,獲得像素D_C_Pixel之參考點資訊。索引k也可用於自資訊D_L尋得該像素D_C_Pixel於第n行感測資料Raw_n之位置。步驟S244基於上述參考點資訊、兩條行緩衝器Line_Buffer_1、Line_Buffer_2所儲存之數據Lines_n+2(包括Raw_n以及Raw_n+1)、以及該第(n+2)行感測資料Raw_n+2對該像素D_C_Pixel作缺陷像素補償,得出補償後的結果C_Pixel。步驟S246負責以補償結果C_Pixel取代原本像素的感測數據,繼而程序P240結束。
第3A、3B以及3C圖舉例說明以上缺陷像素粗評模塊108、缺陷像素細評模塊110以及缺陷像素補償模塊112之運作概念。
第3A圖對應以上缺陷像素粗評模塊108之操作,此時,感測元件陣列104係提供第n行感測資料Raw_n,其中包括紅色感測像素R3、R4以及R5,而兩條行緩衝器Line_Buffer_1、Line_Buffer_2所儲存的是數據Lines_n,包括屬於第n-2行感測 資料Raw_n-2之紅色感測像素R0、R1以及R2。辨識第n行感測資料Raw_n之紅色感測像素R4是否為缺陷像素候選時,本實施例係將之與第n行感測資料Raw_n之紅色感測像素R3與R5、以及數據Lines_n所供應的紅色感測像素R0、R1以及R2比較。若像素R4數值遠大於(例如,大於一臨界差距)像素R0、R1、R2、R3以及R5的數值,則像素R4可能為亮點。若像素R4數值遠低於(例如,低過一臨界差距)像素R0、R1、R2、R3以及R5的數值,則像素R4可能為暗點。以上暗點/亮點判斷結果可採索引k紀錄於暗點/亮點標誌B_W_Marker中。紅色感測像素R0、R1以及R2數值更是以索引k儲存於資訊D_R,作為參考點資訊。
第3B圖對應以上缺陷像素細評模塊110之操作,此時,感測元件陣列104係提供第(n+2)行感測資料Raw_n+2,其中包括紅色感測像素R6、R7以及R8,而兩條行緩衝器Line_Buffer_1、Line_Buffer_2所儲存的是數據Lines_n+2,包括屬於第n行感測資料Raw_n之紅色感測像素R4。若像素R4於第3A圖被判定為缺陷像素候選,本實施例係基於第3B圖比較數據Lines_n+2所載之紅色感測像素R4以及第(n+2)行感測資料Raw_n+2之紅色感測像素R6、R7與R8,以覆核像素R4是否確為缺陷像素。例如,基於索引k所指示的暗點/亮點標誌B_W_Marker內容,判斷像素R4是否真為亮點或暗點。若像素R4對應之暗點/亮點標誌顯示像素R4可能為亮點,且像素R4數值遠大於(例如,大於一臨界差距)像素R6、R7以及R8的數值,則可確認像素R4為亮點。若像素R4對應之暗點/亮點標誌顯示像素R4可能為暗點,且像素R4數值遠低於(例如,低過一臨界 差距)像素R6、R7以及R8的數值,則可確認像素R4為暗點。若像素R4確實為缺陷像素,可基於第3C圖概念補償之。
第3C圖對應以上缺陷像素補償模塊112之操作,此時,感測元件陣列104係提供第(n+2)行感測資料Raw_n+2,其中包括紅色感測像素R6、R7以及R8,而兩條行緩衝器Line_Buffer_1、Line_Buffer_2所儲存的是數據Lines_n+2,包括屬於第n行感測資料Raw_n之紅色感測像素R3、R4以及R5。若像素R4於第3B圖被確認為缺陷像素,本實施例係基於第3C圖,以索引k自資訊D_R取得像素R4之參考點資訊R0、R1以及R2,並更根據該第(n+2)行感測資料Raw_n+2之紅色感測像素R6、R7與R8以及數據Lines_n+2所載之紅色感測像素R3與R5補償像素R4的感測資料(即獲得C_Pixel)。
相較於傳統技術,本案行緩衝器需求縮減至少一半。以第3A~3C圖的像素R4補償為例,傳統技術需要四條行緩衝器方能備齊補償像素R4所需的5x5拜耳(Bayer)圖樣。然而本案僅使用兩條行緩衝器即可達到同樣補償效果。
另一種實施方式係省略參考點資訊之儲存,即無資訊D_R維護需求。如此一來,像素R4可用的補償參考為感測元件陣列104提供之第(n+2)行感測資料Raw_n+2上的紅色感測像素R6、R7、R8以及兩條行緩衝器Line_Buffer_1、Line_Buffer_2內數據Lines_n+2所供應的紅色感測像素R3以及R5。一種實施方式是以像素R3、R5、R6、R7、R8的中位數作C_Pixel,取代像素R4數值。一種實施方式是根據像素R4為亮點或暗點,取像素R3、R5、R6、R7、R8的最大值或最小值作 C_Pixel,取代像素R4數值。一種實施方式是從像素數值R7、(R3+R5)/2、(R5+R6)/2、(R3+R8)/2中選擇適當數值作作C_Pixel,取代像素R4數值。
在一種實施方式中,上述缺陷像素候選之位置(D_L)、暗點/亮點標誌(B_W_Marker)、與參考點資訊(D_R)係紀錄於行緩衝器Line_Buffer_1、Line_Buffer_2之外的邏輯單元中。該些邏輯單元可為D型正反器(D flip flops)、暫存器…等。相較於一般以大尺寸裝置(如SRAM)實現的行緩衝器Line_Buffer_1、Line_Buffer_2,D型正反器(D flip flops)、暫存器…等邏輯單元更易作電路整合。如此一來,缺陷像素檢測補償器102以及感測元件陣列104可包裝於同一封裝內。
另一種實施方式係擴大行緩衝器Line_Buffer_1、Line_Buffer_2容量,以對應各像素儲存暗點/亮點標誌。第4圖圖解行緩衝器上的儲存格式。地址0、1、2對應不同像素。各地址除了儲存對應像素之影像資料外,更以兩位元BL與W標誌係可能為暗點或亮點。如此格式設計使得行緩衝器即帶有資訊D_L以及B_W_Marker。
另有一種實施方式係針對綠色感測像素作缺陷檢測與補償。第5A、5B以及5C圖舉例說明以上缺陷像素粗評模塊108、缺陷像素細評模塊110以及缺陷像素補償模塊112之運作概念,其中係針對綠色感測像素作缺陷檢測與補償。
第5A圖對應以上缺陷像素粗評模塊108之操作,此時,感測元件陣列104係提供第n行感測資料Raw_n,其中包括綠色感測像素G5、G6以及G7,而兩條行緩衝器Line_Buffer_1、 Line_Buffer_2所儲存的是數據Lines_n,包括屬於第n-2行感測資料Raw_n-2之綠色感測像素G0、G1以及G2、以及屬於第n-1行感測資料Raw_n-1之綠色感測像素G3以及G4。辨識第n行感測資料Raw_n之綠色感測像素G6是否為缺陷像素候選時,本實施例係比較數據Lines_n所供應的綠色感測像素G0、G1、G2、G3與G4以及第n行感測資料Raw_n的綠色感測像素G5、G6與G7。若像素G6數值遠大於(例如,大於一臨界差距)像素G0、G1、G2、G3、G5以及G7的數值,則像素G6可能為亮點。若像素G6數值遠低於(例如,低過一臨界差距)像素G0、G1、G2、G3、G5以及G7的數值,則像素G6可能為暗點。以上暗點/亮點判斷結果可以索引k紀錄於暗點/亮點標誌B_W_Marker中。綠色感測像素G0與G3的外插Gq(=G3+(G3-G0))以及綠色感測像素G2與G4的外插Gr(=G4+(G4-G2))兩者平均((Gq+Gr)/2)則是以索引k儲存於資訊D_R,作為參考點資訊。
第5B圖對應以上缺陷像素細評模塊110之操作,此時,感測元件陣列104係提供第(n+2)行感測資料Raw_n+2,其中包括綠色感測像素G10、G11以及G12,而兩條行緩衝器Line_Buffer_1、Line_Buffer_2所儲存的是數據Lines_n+2,包括屬於第n行感測資料Raw_n之綠色感測像素G5、G6與G7以及第(n+1)行感測資料Raw_n+1之綠色感測像素G8與G9。若像素G6於第5A圖被判定為缺陷像素候選,本實施例係基於第5B圖比較數據Lines_n+2所載之綠色感測像素G6、G8與G9以及第(n+2)行感測資料Raw_n+2之綠色感測像素G10、G11與G12,以覆核像素G6是否確為缺陷像素。例如,基於索引k所指示的暗 點/亮點標誌B_W_Marker內容,判斷像素G6是否真為亮點或暗點。若像素G6對應之暗點/亮點標誌顯示像素G6可能為亮點,且像素G6數值遠大於(例如,大於一臨界差距)像素G8、G9、G10、G11與G12的數值,則可確認像素G6為亮點。若像素G6對應之暗點/亮點標誌顯示像素G6可能為暗點,且像素G6數值遠低於(例如,低過一臨界差距)像素G8、G9、G10、G11與G12的數值,則可確認像素G6為暗點。若像素G6確實為缺陷像素,可基於第5C圖概念補償之。
第5C圖對應以上缺陷像素補償模塊112之操作,此時,感測元件陣列104係提供第(n+2)行感測資料Raw_n+2,其中包括綠色感測像素G10、G11以及G12,而兩條行緩衝器Line_Buffer_1、Line_Buffer_2所儲存的是數據Lines_n+2,包括屬於第n行感測資料Raw_n之綠色感測像素G5、G6與G7以及第(n+1)行感測資料Raw_n+1之綠色感測像素G8與G9。若像素G6於第5B圖被確認為缺陷像素,本實施例係基於第5C圖,以索引k自資訊D_R取得像素G6之參考點資訊((Gq+Gr)/2),並搭配數據Lines_n+2所載之綠色感測像素G5、G7、G8與G9以及第(n+2)行感測資料Raw_n+2之綠色感測像素G10、G11與G12補償像素G6的感測資料(即獲得C_Pixel)。
第5A~5C圖所舉例子需要的參考點資訊D_R極少量,可降低電路體積。
在某些實施方式中,係略去紅色與藍色感測像素R與B之參考點資訊(D_R),僅考量儲存綠色感測像素G之參考點資訊(D_R)。
此外,在其他實施方式中,並不限定僅採用2條行緩衝器達到5x5缺陷像素檢測與補償圖樣。更有實施方式是採用p條行緩衝器達到(2p+1)x(2p+1)缺陷像素檢測與補償圖樣。
此外,在其他實施方式中,感測資料不限定為R、G、B資料,而是其他感測資料型式,如Y、U、V值…等。
凡是採用上述概念作影像感測之缺陷像素檢測與補償的方案都屬於本案所欲保護的範圍。基於以上技術內容,本案更涉及缺陷像素檢測與補償方法,不限定以特定架構的邏輯電路實現。一種實施方式係以微控制器執行運算完成以上技術內容。
雖然本發明已以較佳實施例揭露如上,然其並非用以限定本發明,任何熟悉此項技藝者,在不脫離本發明之精神和範圍內,當可做些許更動與潤飾,因此本發明之保護範圍當視後附之申請專利範圍所界定者為準。
100‧‧‧影像感測裝置
102‧‧‧缺陷像素檢測補償器
104‧‧‧感測元件陣列
106‧‧‧邏輯電路
108‧‧‧缺陷像素粗評模塊
110‧‧‧缺陷像素細評模塊
112‧‧‧缺陷像素補償模塊
B_W_Marker‧‧‧缺陷像素候選之暗點/亮點標誌
C_Pixel‧‧‧一像素補償後的結果
C_Raw_Data‧‧‧缺陷像素補償後的感測資料
D_L、D_R‧‧‧缺陷像素之位置以及參考點資訊
k‧‧‧索引值
Line_Buffer_1、Line_Buffer_2‧‧‧行緩衝器
Line_n、Line_n+2‧‧‧裝置接收Raw_n、Raw_n+2時,行緩衝器Line_Buffer_1、Line_Buffer_2上所緩衝暫存的數據
Raw_Data‧‧‧感測資料
Raw_n-2、Raw_n-1、Raw_n、Raw_n+1、Raw_n+2‧‧‧第(n-2)行…第(n+2)行感測資料

Claims (17)

  1. 一種影像感測裝置,包括:複數條行緩衝器;以及一邏輯電路,根據一感測元件陣列所感測的一第n行感測資料、以及上述複數條行緩衝器所儲存之數據,尋出該第n行感測資料之缺陷像素候選所在,以於該感測元件陣列供應一第(n+p)行感測資料時,根據該第(n+p)行感測資料以及上述複數條行緩衝器所儲存之數據,覆核該第n行感測資料上的缺陷像素候選,以補償之,其中:n與p為數字,n大於p;該感測元件陣列供應該第n行感測資料時,上述複數條行緩衝器係儲存一第(n-p)行感測資料至一第(n-1)行感測資料;且該感測元件陣列供應該第(n+p)行感測資料時,上述複數條行緩衝器係儲存該第n行感測資料至一第(n+p-1)行感測資料。
  2. 如申請專利範圍第1項所述之影像感測裝置,其中:該邏輯電路包括設定該第n行感測資料上的缺陷像素候選之暗點/亮點標誌,用於覆核該第n行感測資料上的缺陷像素候選。
  3. 如申請專利範圍第1項所述之影像感測裝置,其中:該邏輯電路包括根據上述複數條行緩衝器所儲存的該第n行感測資料至該第(n+p-1)行感測資料、以及該感測元件陣 列所供應的該第(n+p)行感測資料作該第n行感測資料的缺陷像素補償。
  4. 如申請專利範圍第2項所述之影像感測裝置,其中:該邏輯電路包括將該第n行感測資料上的缺陷像素候選之位置以及上述暗點/亮點標誌紀錄於上述複數條行緩衝器之外的邏輯單元中。
  5. 如申請專利範圍第1項所述之影像感測裝置,其中:該邏輯電路包括自上述複數條行緩衝器所儲存的該第(n-p)行感測資料至該第(n-1)行感測資料取得該第n行感測資料上的缺陷像素候選之參考點資訊,並將上述參考點資訊紀錄於上述複數條行緩衝器之外的邏輯單元中。
  6. 如申請專利範圍第5項所述之影像感測裝置,其中:該邏輯電路包括根據上述邏輯單元所儲存的上述參考點資訊、上述複數條行緩衝器所儲存的該第n行感測資料至該第(n+p-1)行感測資料、以及該感測元件陣列所供應的該第(n+p)行感測資料作該第n行感測資料的缺陷像素補償。
  7. 如申請專利範圍第5項所述之影像感測裝置,其中:p值為2;該邏輯電路係自上述複數條行緩衝器所儲存的該第(n-2)行感測資料取得一編號0綠色資料以及一編號2綠色資料,並自該第(n-1)行感測資料取得一編號3綠色資料以及一編號4綠色資料,並對該編號0綠色資料與該編號3綠色資料作外插估算得一第一數值,並對該編號2綠色資料與該編號4綠色資料作外插估算得一第二數值,並以該第一數值以及該 第二數值的平均值作該第n行感測資料上一編號6綠色資料的上述參考點資訊,紀錄於上述複數條行緩衝器之外的邏輯單元中;該編號0綠色資料以及該編號3綠色資料位於該編號6綠色資料左上方;且該編號2綠色資料以及該編號4綠色資料位於該編號6綠色資料右上方。
  8. 如申請專利範圍第2項所述之影像感測裝置,其中:上述複數條行緩衝器更供應儲存空間,對應各像素儲存暗點/亮點標誌。
  9. 如申請專利範圍第1項所述之影像感測裝置,更包括:上述感測元件陣列,與上述複數條行緩衝器以及該邏輯電路包裝於同一封裝內。
  10. 一種感測元件陣列缺陷像素檢測與補償方法,包括:根據一感測元件陣列所感測的一第n行感測資料、以及複數條行緩衝器所儲存之數據,尋出該第n行感測資料之缺陷像素候選所在;以及於該感測元件陣列供應一第(n+p)行感測資料時,根據該第(n+p)行感測資料以及上述複數條行緩衝器所儲存之數據,覆核該第n行感測資料上的缺陷像素候選,以補償之,其中:n與p為數字,n大於p;該感測元件陣列供應該第n行感測資料時,上述複數條行緩衝器係儲存一第(n-p)行感測資料至一第(n-1)行感測資料; 且該感測元件陣列供應該第(n+p)行感測資料時,上述複數條行緩衝器係儲存該第n行感測資料至一第(n+p-1)行感測資料。
  11. 如申請專利範圍第10項所述之感測元件陣列缺陷像素檢測與補償方法,更包括:設定該第n行感測資料上的缺陷像素候選之暗點/亮點標誌,用於覆核該第n行感測資料上的缺陷像素候選。
  12. 如申請專利範圍第10項所述之感測元件陣列缺陷像素檢測與補償方法,更包括:根據上述複數條行緩衝器所儲存的該第n行感測資料至該第(n+p-1)行感測資料、以及該感測元件陣列所供應的該第(n+p)行感測資料,作該第n行感測資料的缺陷像素補償。
  13. 如申請專利範圍第10項所述之感測元件陣列缺陷像素檢測與補償方法,更包括:將該第n行感測資料上的缺陷像素候選之位置以及上述暗點/亮點標誌紀錄於上述複數條行緩衝器之外的邏輯單元中。
  14. 如申請專利範圍第10項所述之感測元件陣列缺陷像素檢測與補償方法,更包括:自上述複數條行緩衝器所儲存的該第(n-p)行感測資料至該第(n-1)行感測資料取得該第n行感測資料上的缺陷像素候選之參考點資訊,並將上述參考點資訊紀錄於上述複數條行緩衝器之外的邏輯單元中。
  15. 如申請專利範圍第14項所述之感測元件陣列缺陷像素檢測與補償方法,更包括:根據上述邏輯單元所儲存的上述參考點資訊、上述複數條行緩衝器所儲存的該第n行感測資料至該第(n+p-1)行感測資料、以及該感測元件陣列所供應的該第(n+p)行感測資料作該第n行感測資料的缺陷像素補償。
  16. 如申請專利範圍第14項所述之感測元件陣列缺陷像素檢測與補償方法,更包括:令p值為2;以及自上述複數條行緩衝器所儲存的該第(n-2)行感測資料取得一編號0綠色資料以及一編號2綠色資料,並自該第(n-1)行感測資料取得一編號3綠色資料以及一編號4綠色資料,並對該編號0綠色資料與該編號3綠色資料作外插估算得一第一數值,並對該編號2綠色資料與該編號4綠色資料作外插估算得一第二數值,並以該第一數值以及該第二數值的平均值作該第n行感測資料上一編號6綠色資料的上述參考點資訊,紀錄於上述複數條行緩衝器之外的邏輯單元中,該編號0綠色資料以及該編號3綠色資料位於該編號6綠色資料左上方,且該編號2綠色資料以及該編號4綠色資料位於該編號6綠色資料右上方。
  17. 如申請專利範圍第11項所述之感測元件陣列缺陷像素檢測與補償方法,其中:上述複數條行緩衝器更供應儲存空間,對應各像素儲存暗點/亮點標誌。
TW103137754A 2014-10-31 2014-10-31 影像感測裝置與缺陷像素檢測與補償方法 TWI538515B (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
TW103137754A TWI538515B (zh) 2014-10-31 2014-10-31 影像感測裝置與缺陷像素檢測與補償方法
CN201410705158.9A CN105704405B (zh) 2014-10-31 2014-11-27 影像感测装置与缺陷像素检测与补偿方法
US14/703,224 US9549133B2 (en) 2014-10-31 2015-05-04 Image capture device, and defective pixel detection and correction method for image sensor array

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
TW103137754A TWI538515B (zh) 2014-10-31 2014-10-31 影像感測裝置與缺陷像素檢測與補償方法

Publications (2)

Publication Number Publication Date
TW201616861A TW201616861A (zh) 2016-05-01
TWI538515B true TWI538515B (zh) 2016-06-11

Family

ID=55854157

Family Applications (1)

Application Number Title Priority Date Filing Date
TW103137754A TWI538515B (zh) 2014-10-31 2014-10-31 影像感測裝置與缺陷像素檢測與補償方法

Country Status (3)

Country Link
US (1) US9549133B2 (zh)
CN (1) CN105704405B (zh)
TW (1) TWI538515B (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2017055309A (ja) * 2015-09-10 2017-03-16 キヤノン株式会社 撮像装置及びその制御方法
JP2017055308A (ja) 2015-09-10 2017-03-16 キヤノン株式会社 撮像装置及びその制御方法
KR102525295B1 (ko) * 2016-01-06 2023-04-25 삼성전자주식회사 데이터 관리 방법 및 장치
TWI753410B (zh) * 2020-04-24 2022-01-21 晶相光電股份有限公司 影像感測系統以及缺陷感光元件偵測以及修正方法

Family Cites Families (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6529238B1 (en) * 1997-09-05 2003-03-04 Texas Instruments Incorporated Method and apparatus for compensation of point noise in CMOS imagers
JP3501024B2 (ja) * 1998-08-31 2004-02-23 富士ゼロックス株式会社 画像読取装置および画像読取方法
US7209168B2 (en) 2001-04-11 2007-04-24 Micron Technology, Inc. Defective pixel correction method and system
US6737625B2 (en) * 2001-06-28 2004-05-18 Agilent Technologies, Inc. Bad pixel detection and correction in an image sensing device
JP2003078821A (ja) * 2001-08-31 2003-03-14 Hitachi Kokusai Electric Inc 撮像装置
US7202894B2 (en) * 2002-06-04 2007-04-10 Micron Technology, Inc. Method and apparatus for real time identification and correction of pixel defects for image sensor arrays
US7283164B2 (en) * 2002-09-18 2007-10-16 Micron Technology, Inc. Method for detecting and correcting defective pixels in a digital image sensor
TWI244330B (en) * 2004-10-21 2005-11-21 Novatek Microelectronics Corp Image sensing device with pixel correction function and method for correcting pixel sensing-information in an image sensing device
US8571346B2 (en) 2005-10-26 2013-10-29 Nvidia Corporation Methods and devices for defective pixel detection
US7932938B2 (en) * 2006-08-25 2011-04-26 Micron Technology, Inc. Method, apparatus and system providing adjustment of pixel defect map
US7684634B2 (en) * 2006-08-29 2010-03-23 Raytheon Company System and method for adaptive non-uniformity compensation for a focal plane array
US8035704B2 (en) * 2008-01-03 2011-10-11 Aptina Imaging Corporation Method and apparatus for processing a digital image having defective pixels
US9379156B2 (en) * 2008-04-10 2016-06-28 Nvidia Corporation Per-channel image intensity correction
US8237825B2 (en) * 2008-12-11 2012-08-07 Exelis, Inc. Pixel replacement using five nearest neighbors
US8749662B2 (en) * 2009-04-16 2014-06-10 Nvidia Corporation System and method for lens shading image correction
US8660335B2 (en) 2010-03-24 2014-02-25 Varian Medical Systems, Inc. Transient pixel defect detection and correction
US8508612B2 (en) * 2010-09-30 2013-08-13 Apple Inc. Image signal processor line buffer configuration for processing ram image data
US8405747B2 (en) 2011-02-17 2013-03-26 Omnivision Technologies, Inc. Analog row black level calibration for CMOS image sensor
CN103106927A (zh) * 2011-11-15 2013-05-15 恒景科技股份有限公司 坏点修正方法与装置
JP5913934B2 (ja) * 2011-11-30 2016-05-11 キヤノン株式会社 画像処理装置、画像処理方法およびプログラム、および画像処理装置を有する撮像装置
JP6346439B2 (ja) * 2013-01-07 2018-06-20 キヤノン株式会社 撮像装置及びその制御方法
JP6062800B2 (ja) * 2013-05-24 2017-01-18 ソニーセミコンダクタソリューションズ株式会社 撮像装置および撮像表示システム

Also Published As

Publication number Publication date
US20160127667A1 (en) 2016-05-05
CN105704405B (zh) 2018-12-11
US9549133B2 (en) 2017-01-17
TW201616861A (zh) 2016-05-01
CN105704405A (zh) 2016-06-22

Similar Documents

Publication Publication Date Title
TWI538515B (zh) 影像感測裝置與缺陷像素檢測與補償方法
KR100362178B1 (ko) 이미지센서에서의 실시간 불량화소 검출 및 보정을 위한장치
CN101305620B (zh) 用于处理图像数据的方法
JP4668183B2 (ja) 撮像デバイスにおける暗電流及び欠陥画素の影響を減少させる方法及び装置
US20080317380A1 (en) System and method for detecting blemishes on image sensor package
US20050243181A1 (en) Device and method of detection of erroneous image sample data of defective image samples
TW200828982A (en) Real-time detection method for bad pixel of image
CN103369347A (zh) 相机瑕疵缺陷检测
CN109886351B (zh) 高光谱数据和高分辨率图像融合方法
CN103369265A (zh) 像素信息管理装置及使用该管理装置的图像拍摄装置
CN1964431A (zh) 图像数据处理装置和用于处理图像数据的方法
TWI437878B (zh) 用以校正影像訊號中壞點之方法及電路
US9239230B2 (en) Computing device and method for measuring widths of measured parts
WO2020135230A1 (zh) 一种内切圆确定方法及装置
CN105744184B (zh) 坏像素校正方法以及使用该方法的装置
CN117576108B (zh) 晶圆缺陷检测的可视化优化方法、装置和计算机设备
JP2010021858A (ja) 画素欠陥補正装置
US8310570B1 (en) Repairing defective pixels
US11503236B2 (en) Image-sensing system and detection and correction method for defective pixel
US7916192B2 (en) Method for compensating pixel values of defective pixels and image processing system using the same
US20060087570A1 (en) Image sensing device with pixel correction function and method for correcting pixel sensing data in image sensing device
US8417019B2 (en) Image correction system and method
TW201412110A (zh) 圖像污點查找系統及方法
US7173741B1 (en) System and method for handling bad pixels in image sensors
CN103063139A (zh) 尺寸检测装置及方法