TW420957B - Method and apparatus for dark frame cancellation for CMOS sensor-based tethered video peripherals - Google Patents

Method and apparatus for dark frame cancellation for CMOS sensor-based tethered video peripherals Download PDF

Info

Publication number
TW420957B
TW420957B TW087119982A TW87119982A TW420957B TW 420957 B TW420957 B TW 420957B TW 087119982 A TW087119982 A TW 087119982A TW 87119982 A TW87119982 A TW 87119982A TW 420957 B TW420957 B TW 420957B
Authority
TW
Taiwan
Prior art keywords
dark
shadow
patent application
scope
camera
Prior art date
Application number
TW087119982A
Other languages
English (en)
Inventor
Ashutosh J Bakhle
Bradley C Aldrich
Original Assignee
Intel Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Intel Corp filed Critical Intel Corp
Application granted granted Critical
Publication of TW420957B publication Critical patent/TW420957B/zh

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/60Noise processing, e.g. detecting, correcting, reducing or removing noise
    • H04N25/63Noise processing, e.g. detecting, correcting, reducing or removing noise applied to dark current
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/60Noise processing, e.g. detecting, correcting, reducing or removing noise
    • H04N25/63Noise processing, e.g. detecting, correcting, reducing or removing noise applied to dark current
    • H04N25/633Noise processing, e.g. detecting, correcting, reducing or removing noise applied to dark current by using optical black pixels
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70SSIS architectures; Circuits associated therewith
    • H04N25/76Addressed sensors, e.g. MOS or CMOS sensors

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Transforming Light Signals Into Electric Signals (AREA)
  • Studio Devices (AREA)

Description

420957 五、發明說明(1) 發明背景 1. 發明領域 本發明一般是有關於數位攝影機及靜態相機,尤其是改 善被具有CMOS影像感測器之數位相機所捕捉到的影像品 質。 2. 相關技術說明 在攝影及靜態相機中使用互補金氧半(CMOS)技術的數位 影像感測器,取代了使用電荷耦合元件(CCD)的影像感測 器。當CMOS感測器影像陣列曝露到從現場影像而來的光線 中時,光子會撞擊影像陣列,同時影像陣列中的每個Ci\[0S 感測器會產生電荷。一部分的電荷是正比於從現場影像而 來的光子速率。剩餘的電荷則是來自於製程的非精確度, 是CMOS感測器所產生影像中的固定雜訊。該雜訊會降低感 測影像的品質。 固定暗場雜訊(DFPN)是光二極體漏電流被CMOS感測器感 測到的結果3 D F P N是沒有光線打到C Μ 0 S感測器時所發生 的。因此,這是C Μ 0 S感測器影像陣列操作所必有的一組誤 差。某些DFPN值被加到因現場影像所產生CMOS感測器影像 陣列中每個像素的電荷中:每個像素的D F P N會隨著操作送 度,曝光參數,以及影像障列中的像素位置,而做大幅的 變化。很需要消除掉由感測影像而來的DFPN,以改善影像 品負3 藉捕捉現場影像感測中的近接暗影”,來消除掉D F P Ν。 暗影是在沒有光線打到CMOS感測器影像陣列時所捕捉到
第6頁 420957 五'發明說明(2) 的。該暗影也可以用與現場影像的相同曝光參數來得到: 該暗影資料接著由所感測到現場影像資料中扣除掉|產生 校正的現場影像資料。該校正的現場影像資料不具有因 DFPN所產生的影像劣化現象1通常是存在於CMOS感測器所 得到的影像中。 當使用CMOS感測器當作影像擷取裝置時,通常是周電子 機械快門來擷取暗影,提供給靜態與視訊操作進行消除 DFPN用。消除DFPN的原則如圖1 A與1 B所示。圖1 A顯示數位 相機系統1 0,具有電子機械快門1 2,受螺線圈或馬達1 4控 制。正常操作時,現場影像1 6通過該快門,由相機的其它 部分所處理。然而,對於暗影撷取來說,快門1 2是關閉在 螺線圏或馬達1 4的方向上,所以沒有光線會通過到其它釘 分。既然沒有光線會到CMOS感洌器,CMOS感測II影偉陣列 1 8依據電流操作特性,感測出CMOS感測器操作時的既有電 荷,並儲存該電荷當作是暗影儲存器2 0的D F P M : C Μ 0 S感武 器影像陣列1 8的每個感測器都具有自己的DFPN值》儲存到 暗影储存器2 0中的資料是一陣列感測影像之像素的鞟訊 值=圖1 β顯示出如何使用所得到的D F Ρ Ν資料來校正感測到 的現場影像3當谀門丨2打開時,CMO S感測器影像障穴1 8會 感剖出現場影像1 6 5此時1感測到的現場影像資料包含 DCPN =暗影減除單元2 2是包含到該相機中,參考暗影儲存 器2 0,以得到先前健存的D F Ρ Ν資料,並從感測到的現場影 像貢料中減掉該D F Ρ Ν貰4,以產生彳父正的現場京〉像貢#斗= 從感測到的現場影像資料中減掉該DFPN資料,對最後影
第7頁 五'發明說明(3) 像的訊號對#訊比(S M R ),提供相當好的改善。校正的現 場影像資料被送到其它部分(未顯示)做進一步處理,比如 顯示給使用者或記錄到儲存媒體上。 既然DF PiV會隨環境溫度與感測器設定而改變,在視訊應 用中,需要很頻繁的使用快門來搜集目前可應周的暗影。 操作快門的動作會增加相機的功率消耗,並減少快門1 2與 螺線圈或馬達1 4的失效(MTB F )間的平均時間。此外,如杲 相機是經由如通用串接匯流排(U SB)的匯流排介面而連接 到個人電腦(PC)上,頻繁性的快門操作所增加的功率消耗 將會超過匯流排介面要求的功率上限3當該現象發生時, 相模必需使用比如電池的額外電源,或其它的高成本且低 功率的電子機械裝置,以補充其供電電源。 當然,CMOS感測器的數位相機可以省掉暗影的擷取以及 DFPN的消除,但是會導致影像品質無法被接受的劣化結 果° 需要一種可以克服掉習用技術中暗影擷取與DFPN消除之 缺點的方法,尤其是對於連接到PC上的CMOS感測器的數位 相機= 發明摘要 本發明的實施例是一種控制C\10S感測器的數位相機中固 定暗場雜訊消除的方法=該方法包含提供暗影快取記憶 體,甴資料結構所標定的暗影,資料結構中的每個入口都 儲存有與每個暗影有關的暗行參考資料;從暗行中得到相 棱所產生視頻圖框串的目前視頻圖框中目前暗行參考資
4Ζ〇9δϊ 五、發明說明C4) 科,比較目前的時行參考育科以及在暗行參考貢的貢?ρ[ 結構中的入口;以及使用從袂取記憶體而來與暗行參考資 科的貫料結構中的入口有關的暗影’在目h暗行爹考負不4 符合該入口時,進行視頻圖框串上固定暗場雜訊消除的處 理。 本發明的另一實施例是一種控制CMOS感測器的數位相機 中固定暗場雜訊消除的裝置。該裝置包含暗影快取記憶 體,該袂取記憶體具有標定出暗影的資料結構,每個資料 結構的入口都儲存有與每個暗影有關的暗行參考資料;從 暗行中得到相機所產生視頻圖框串的目前視頻圖框中目前 暗行參考資料的電路;以及使用從快取記憶體而來與暗行 參考資料的貢料結構中的入口有關的暗影,在目可0¾行參 考資料符合該入口時,進行視頻圖框串上固定暗場雜訊消 除處理的電路= 圖式之簡單說明 本發明的特點與優點將在以下本發明的詳細說明後會變 得更為明顯,其中: 圖1 A是擷取暗影(習用技衔)的系統。 圖1 B固定暗場雜訊消除(習用技術)的系統。 圊2是依據本發明的主要暗影快取系統* 圖3是依據本發明的視頻資料圖框= 圖4 A與圖4 B是顯示出暗行參考資料的C MOS感測器影ί象障 列。 圖5顯示暗影怯取記憶體中的暗影=
第9頁 五、發明說明(5) 圖6是系統起始時暗影的週期性摁取。 圖7是本發明管理暗影诀取記憶體步驟的流程圖。 發明之詳細說明 在以下的說明中,將會說明本發明的不同特點。然而, 本發明是可以只用本發明中所提的一些或全部特點來實 現,對於熟知該技術領域的人士來說是很明顯的。為了說 明方便起見,特定的數字,材料以及組合會先行說明,以 提供對本發明整體性的了解。然而,本發明可以不周特定 的細節便能實現,對於熟知該技術領域的人士來說也是很 明顯的。在其它的實例中,會省略或簡化相當熟知的特 點,以便不要模糊掉本發明。 本發明是一種有用的方法,用來消除掉連接到CMOS感測 器數位攝影機中的DFPN。是基於提供並保持住主要暗影怯 取記憶體=既然該相機是連接到主電腦系統上,比如個人 電腦(P C ),其好處是主電腦的儲存以及處理容量。使用暗 影快取記憶體更新目前的可用暗影,給DFPN消除處理周, 擷取暗影的快門操作會戲劇性的降低,進而可以只使闬到 較少的系統資源,比如功率,並增加電子機械裝置的 ΜTBF,比如快門以及螺線圏或馬達。此外,使周主電蹈上 的暗影快取記憶體,降低使用功率會讓該相機停留在經白 如USB介面之連接操作的正常功率預算内= 通常,在相機的不同組合,增益,以及溫度操作特性 上,會得到一些暗影,並黯存到主電蹈系統中=該餑存的 暗影是依據固定且已預定從CMOS感測器·影像陣列的暗行資
420957 五 '發明說明(6) 料,而在主電腦上有詳細的說明=暗行資料表示一部分的 CMOS感測器影像陣列,是被永久性的且整體性的遮蔽住, 用來進行消除DF PN。圖2是依據本發明的主要暗影快取系 統。數位視頻相機30利用雙向介面3 4連接到主系統32。在 其中的一實施例中,該主系統是指以I n t e I架構(I A )指令 集架構(ISA)以及由位於美國Santa Clara 'California 的I n t e 1公司所生產的相關微處理器家族的個人電腦,雖 然也可以使用其它的個人電腦,工作站,定址解碼器以及 電腦系統。實施例中的雙向介面是通用串接匯流排 (USB),雖然也可以使用内部連接電腦組件以及週邊的匯 流排。視頻相機3 0包含許多組件,其中只有與本發明有關 的才顯示於圖2中。CMOS感測器影像陣列3 6產生感測到的 影像資料,代表在相機環境中的現場影像3該感測到的影 像資料本身具有DFPN。感測到的影像資料輸入到DFPN減除 單元3 8 =該D F P +\:減除單元從感測到的影像中減掉目前可應 用暗影(圖2中的暗影(ί ) 4 0 ),產生校正感測影像。暗影 (ί )40是DFPN值的陣列,每個DFPN值代表感測影像中像素 的偏移量。影像處理單元4 2配合主系統3 2控制D F Ρ Ν減除單 元38以及視頻相機30介面的操作,DFPN減除單元38可以用 特殊目的電路或軟體或是由影像處理單元42所執行的軔體 來實現。DFP Ν消除操作是由依據習用已知技術的DF ΡΝ減除 單元來進行。 主系統32包含暗影诀取41 ,錯存在主系統的記憶體内。 暗影诀取4 1包含複數個暗影D I ( 0 ) 4 2 ,D I ( 1 ) 4 4,到
第Π頁 4 209 5 : 五、發明說明(7) D I U ) 4 6。每個暗影代表攝影機暗影快取4 1的.某組特定操 作特性的DF P N。該暗影是與暗行參考資料障列的資料結構 4 8有關。實施例中,暗行參考資料包含在固定大小的陣列 内,而固定大小是依據儲存在主系統中的最大暗影數目, 雖然也可以使用其它已知的資斜結構以及存取技術。暗行 參考資料陣列中的每個入口會參考相關的暗影1並代表相 機特定操作環境的記錄。主系統上的軟體(未顯示)操作會 管理攝影機與暗行參考資料陣列以及暗影間的相互作用。 當攝影機在起始時,將暗影快取4 1中被選定的暗影載入 暗影(I ) 4 0。暗影(I ) 4 0是給DF PN消除處理用的,直到視頻 相機3 0決定出,相機的操作特性對於所使用到的新暗影來 說,已經改變得夠多。使用到新暗影時,存取暗行參考資 料陣列4 8,以定位住符合目前操作特性的入口。目前的操 作特性是由被選定的暗行參考資料所標定。當條件符合 時,相關的暗影經雙向介面3 4下裁到視頻相機,變成給 DFPN消除處理用的新暗影(I )。符合的操作是使同CMOS感 測器影像陣列3 6中暗行下的影像所產生的資料,當作是整 舊暗影的記錄。該記録符合暗行參考資料陣列4 8的入口 3 該記録是從CMOS感測器影像陣列36所產生視訊圖框串的其 中一個圖框中取得的。 CMOS感測器影像陣列連續操作所產生的視訊串包含複數 ill圖框,每個圖框前都立刻有一表頭在前3暗行參考資料 包含在每價表頭中,並由影像處理單元4 2所監控,以決定 目前所需感測影像資料下的操作條件是否改變。如果暗行
苐頁 420957 五、發明說明¢8) 參考資料改變得相當大(比如多於一個預設臨界量),這表 示操作環境已經改變,而且可能需要新的暗影給DF PN消除 處理用。圖3是依據本發明的視訊圖框圖。圖框包含表頭 資料5 2以及現場影像資料5 4。現場影像資料代表在特定時 間被相機所捕捉到的現場。該表頭資料包含與圖框以及與 視訊串中位置有關的不同控制資訊。表頭資料5 2也包含暗 行參考資料5 6。每組特定的暗行參考資料56 (達到暗行參 考資料的最多組數),是儲存在主系統3 2的暗行參考資料 陣列4 8中。當視訊串的圖框發生不同的暗行參考資料陣列 時,該系統會偵測出代表圖框的暗行參考資料的改變,並 使圖框中的暗行參考資料符合主系統3 2中暗行參考資料障 列4 8的暗行參考資料。 圖4 Α與圖4 Β是顯示出0皆行參考資料的CMOS感測器影像障 列。影像陣列的主動區用怯門遮住,比便攧取暗影,並曝 露出來擷取現場影像3在這二例中,最後的影像包含暗行 參考資料,提供相關影像間的記録。圖4A顯示CMOS感測器 影像陣列,其中影像障列的一部分60曝露給一現場:CMOS 感測器在影像障列6 2與6 4中包含二垂直長條,不會曝露到 現場的光線下,而是保持黑暗,進而提供暗行參考資料: 該暗行參考資料當作是目前操作環境的記錄。圖4 B是顯示 當零照度被接收到時,比如當快門關閉時的UI0S感測器影 傈陣列。要注意的是,暗行參考資料仍是可存取的=既然 使用相同的操作環境來捕提這二種情形下的資料,所α可 以使用暗行參考if料來標示該暗影3
第13頁 420957 五、發明說明(9) 使用主暗影快取便不需要經快門操作來頻繁的得到新暗 影=而是只有在曝光參數或環境變化很大,而且相對暗影 並不在主糸統的暗影快取之内時*才需要捕?足暗影。貫際 上,本發明能讓相機系統管理到會被用到的操作環境記憶 體。一旦暗影快取建立好,攝影機便不需要捕捉新的暗 影,除非環境及/或曝光參數與所有儲存暗影的參數比 較,已升到預設變化臨界值以上。 實施例甲,暗影快取中的暗影依據使用頻率分類。最少 用到的暗影會從暗影快取中剔除掉,以便當暗影快取填滿 且需要新的暗影時,能存入新.的暗影3圖5顯示暗影快取 記憶體中的暗影。對暗影D I ( 0 ) 4 2到D I ( Μ ) 4 6以及相對應的 暗行資料陣列4 8入口做分類,以增加使用頻率。最少用到 的D I ( Μ ) 4 6會從主系統記憶體中剔除掉,而且更新暗行參 考資料陣列。新的暗影Ν 6 0儲存在主系統記憶體中,新的 暗行參考資料障列之入口 DC ( X ) 6 2會取代暗行參考資料陣 列中的DC(M) 64 :本實施例中,使用做不常使罔到(LRU )的 運算法,以決定要取代那一暗影,也可以使用其它怯取運 异法。 藉提供複數佴暗影怯取中的暗影,該相機系統便給定了 一堆記憶的操作條件。用一種方法來起始相機系統的暗影 快取,接著再進行設定。起始階段與相機系統的穩定態操 作不同,既然暗影快取在開始時並沒有暗影。在設定階段 中,當相棱第一次開機時,系統會產生暗影快取。每次曝 光改變時,新的暗影會傳送到主系統的暗影快取中,直到
第14頁 Λ2095/ 五、發明說明(ίο) 該快取填滿為止=因此,利用上述的這種袂取取代運算 法,來管理暗影快取的改變。設定時,在系統起始完後, 以週期性間隔來捕捉一串的暗影。圖6是系統起始時暗影 的週期性擷取3開始時,一串的視訊圖框7 0由攝影機以預 設的視訊圖框速荜來產生。一旦在時間Τ 1 7 :[產生第一視 訊圖框,第一暗影7 2被便攝影機所捕捉到,並儲存到主系 統的暗影快取中。在稍後的時間T j 7 3下,當操作特性的 改變1藉檢視視訊圖框表頭中的暗行參考資料,而便偵測 到時,便需要新的暗影7 4。該步驟繼續進行,直到暗影怯 取填滿,而且用暗影X 7 6達到穩定態操作。 圖7是本發明管理暗影快取記憶體步驟的流程圖。在步 騍1 0 0後,檢視相機的操作模式1以決定視訊模式是否有 在步驟1 0 2中起動。如果視訊模式沒有起動,N 0路徑丨0 4會 在步發U 0 6中' 其中有進行相機的靜態模式或其它操作模 式=否則,YES路徑1 08會在步驟1 1 0中。如果是步驟1丨0中 相機的第一動作,YES路徑112會在步騍114中。在該步驟 中,需要暗影儲存在相機内的記憶體中,並傳送到主系統 中的記憶體:更新該暗行參考資料陣列,以反應出新的暗 影。經路徑Π 6與步聲1 1 8靖續該處理過程,其中相機的提 訊串列被致能=如果不是步驟1丨0中相機的第一動作,\ 0 路徑1 2 0會在步驟1 2 2中。此時,目前視訊圖框的暗行參考 資料從相機送到主系統中=如果暗行參考資料在步騍1 2 4 中符合暗行參考資料障列中的入口時,YES路徑1 2 6會在步 霽128中:在步辱128中,主系統暗影侠取的暗影,依據符
15頁 4203 五、發玥說明¢11) 合的暗行參考資料障列入口 ,經雙向介靣而下載到相機的 暗影(I )儲存單元中= 如果暗行參考資料在步驟1 2 4中不符合暗行參考資料陣 列中的任何入口時,N’O路徑1 3 0會在步驟1 3 2中。如杲暗影 快取已儲存最多數目的暗影,YES路徑1 3 4會在步驟I 36 中,其中會決定出最少使用到的暗影,並剔除掉該暗影= 步驟1 1 4繼續進行新暗影的擷取。否則,暗影快取沒有填 滿,所以直接經N0路徑1 38到步驟I 1 4,進行新暗影的擷 取。 一旦視訊系統在相機的步騾1 1 8中被致能,該相機系統 會在週期性的步驟1 4 0中進行檢視,決定曝光參數是否有 改變。如果有改變被剔除掉,YES路徑1 4 2會在步驟1 24 中,其中目前視訊圖框的暗行參考資料,會符合暗行參考 資料陣列中的入口 。否則,如果沒有曝光參數改變被剔除 掉,M0路徑1 44會在步驟146中。此時,會檢視目前的暗行 參考資料,以決定之前所檢視的暗行參考資料是否超過預 設臨界值。如果沒有偵測到改變,繼續經N0路徑1 4 8到步 葬1 18。否則,有很大的改變發生。所以,YES路徑150會 在步驟124中,其中目前視訊圖框的暗行參考資料,會符 合暗行參考資料障列中的入口。 另一實矻例中,如果攝影擒的記憶體與處理資源支援多 個暗影的儲存取控制時,暗影侠取是包含在攝影機中,而 在非主系統中, 用來開關CMOS感測器的電子機械裝置,在視訊操做模式
第16 1 4209 57 五、發明說明(12) 下時,會影響到相機的功率預算以及電子機械裝置的 \1TBF。本發明的主暗影俠取藉極小化使用快門來擷取暗 影,支援寬鬆的功率預算以及對MTBF的改善,且經DFPN消 除,繼續支援最佳影像品質。 本發明已經藉實施例做了解說,而該說明並不是周來做 限定。解說性實施例以及本發明其它實施例,很明顏的, 對於熟知該技術領的人士來說,任何的改變都被視為是在 本發明的精神以及範圍之内3
第丨了頁

Claims (1)

  1. 420957 _案號87119982 抒年7月以曰 修正_ 六、申請專利範圍 1. 一種控制互補式金氧半導體感測器相機中消除固定暗 場雜訊之方法,包含: 提供暗影快取,該暗影是由資料結構所標示,資料結 構中的每個入口儲存有與其中暗影有關的暗行參考資料; 從該相機所產生視訊圖框串中目前視訊圖框的暗影, 得到目前的暗行參考資料; 比較目前的暗行參考資料與暗行參考資料之資料結構 中的入口; 使用快取中的暗影,該快取是與暗行參考資料之資料 結構中的入口有關的,以便當嚷行參考資料之資料結構中 的_入口符合該入口時,進行視訊圖框串上暗場雜訊之消 除。 _ 2. 如申請專利範圍中第1項之方法,其中該快取是儲存 在主電腦系統中*而且該相機是攝影機,耦合到主電腦系-統。 3. 如申請專利範圍中第2項之方法,進一步包含將主電 腦系統中的相關暗影下載到.攝影機。 4. 如申請專利範圍中第2項之方法,進一步包含將攝影 機的目前暗行參考資料傳送到主電腦系統。 5. 如申請專利範圍中第1項之方法,進一步包含能產生 視訊圖框串。 6. 如申請專利範圍中第1項之方法,其中該比較步驟進 一步包含,只有在相機的曝光參數改變時,才比較目前的 暗行參考資料與暗行參考資料之資料結構中的入口。
    O:\55\55S41ptc 第 1 頁 2000. 07.28.018 420957
    7·如申請專利範圍中第1項之方 一舟白人 α . 其'中該比較步驟逸 步包含,只有在目前的暗行參考哪進 資枓不同時,才比較目前的暗行參 考 之資料結構中的入口。 參考身枓與暗仃參考資料 其中目前的暗行參 的入口之差距,是大 其中所提供的步驟 8·如申請專利範圍中第7項之方法 考資料與暗行參考資料之資料結構中 於預設的臨界值。 9.如申請專利範圍中第1項之方法 包含: 獲得新的暗影: - 儲存新的暗影到快取中;以及 加入與新暗影有關的新入口,以更新暗行參考資料之 資料結構’該新人〇包含與新暗影有關的暗行參考資料。 10.如申請專利範圍中第9項之方法,進一步包含將相機-的新暗影傳送到主電腦系統。 11,如申請專利範圍中第9項之方法,進一步包含在當快 取填滿而要儲存新暗影之前,先剔除掉快取中的一暗影。 12. —種裝置,包含: 一暗影快取,該快取包含標示出該暗影的資料結 構,資料結構中的每個人口儲存與其中一暗行 參考資料; 行 一擷取裝置,從視訊圖框串的目前視訊圖框之暗 取得目前暗行參考資料的裝置;以及 -執行裝置’當目前暗行參考資料符合該入口時
    O:\5S\55842.ptc 第2頁 2000. 0Τ. 28.019 420957
    使用與資料結構中入口有關快取的被選定暗影在目前視 訊圖框上進行視訊圖框串上暗場雜訊之消除。 13.如申請專利範圍中第12項之裝置,進一步包含能產 生視訊圖框串的裝置。 1 4·如申請專利範圍中第丨2項之裝置,其中該快取是儲 存在主電腦系統中,而且該擷取裝置與該執行裝置是耦合_ 到主電蹈系統之互補式金氧半導體感測器攝影機令之组 件。. 15·如申請專利範圍中第144之裝置,進—步包含雙向 介面’將該攝影機耦合到主電腦系統。 如申請專利範圍中第15項之裝置,其中該雙向介面 是通用串接匯流排(USB)介面。 17. 如申請專利範圍中第15項之裝置,其中該攝影機包 含有記憶體’用來儲存目前的暗影,進行暗場雜訊之消 除,且被選定的暗影從該快取傳送到該記憶體。 18. 如申請專利範圍中第丨5項之裝置’其中該目前暗行 參考資料是從攝影機的擷取裝置傳送到主電腦系統。 19_如申請專利範園中第18項之裝置’其中該主電腦系 統包含一比較裝置,比較目前暗行參考資料與快取中暗行 參考資料之資料結構中的入口。、 2 0.如申請專利範圍中第19項之裝置,其中該比較裝置 只有在相機的曝光參數改變時,才比較目前的暗行參考資 料與暗行參考資料之資料結構中的入口。 21,如申請專利範圍中第19項之裝置’其中該比較裝置 只有在目前的暗行參考資料與之前的暗行參考資料不同
    0;咖5842.ptc 第3頁 2000. 07.28.020 420957 曰 案號 夂、申請專利範圍 時,才比較目前的暗行參考資料與 構中的入口。 仃參考資料之資料結 22.如申請專利範圍令第2J項之裝 參考資料與暗行參考資料之資料其中目前的暗行 大於預設的臨界值。 的入口之差距,疋 23· —種裝置,包含: 一暗影快取,該快取包含標 構,資料結構中的每個入口 出该暗景ς的資料結 參考資料; .予興具_ 一暗影有關的暗行 >敌一/曰理之元,從視訊圖框声的目前視訊圖框之暗 仃取得目刖暗行參考資料的裝置;以及 一暗場雜訊消除單元’當目前暗行參考 入口時,使用與音祖社接士、 于口 产a: *二Γ 構中 有關快取的被選定暗影, 在目刖視訊圖框上進杆滞1 姑由, 1由圖框串上暗場雜訊之消除。 .如申請專利範圍中第23項之裝置,進一步包含有記 用來儲存目前的暗影’進行暗場雜訊之消除且。被 選定的暗影從該快取傳送到該記憶體。 ’、 25.如申請專利範圍中第23項之裝置,其 存在主電腦系統中,而且該虚理„_ 、 、取疋儲 一錐::而且該處理早兀與該暗場雜訊消除單 兀疋藉由一雙向介面耦合到主電腦系統之互 體感測器攝影機中之組件。 飞备乳+導 /6.如申請專利範圍中第25項之裝置其中該雙向介面 疋通用串接匯流排(USB)介面。 2 7.種機器可讀媒趙,儲存複數個機器可讀指令,是
    0:\55\55842.ptc 2000. 07.28. 021 420957 案號87119982 ff年9月3 /日 修正 六、申請專利範圍 設計給處理器執行的,該機器可讀指令提供暗影快取,該 暗影是由資料結構所標示,資料結構中的每個入口都儲存 有與其中一暗影有關的暗行參考資料;從相機所產生視訊 圖框串的目前視訊圖框之暗影中,取得目前暗行參考資 料:比較目前暗行參考資料與快取中暗行參考資料之資料 結構中的入口;以及當目前暗行參考資料符合該入口時, 使用與資料結構中入口有關快取的被選定暗影,在目前視 訊圖框上進行視訊圖框串上暗場雜訊之消除。
    0:\55\55842.ptc 第5頁 2000. 07. 28. 022
TW087119982A 1997-12-05 1998-12-02 Method and apparatus for dark frame cancellation for CMOS sensor-based tethered video peripherals TW420957B (en)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
US08/985,575 US6061092A (en) 1997-12-05 1997-12-05 Method and apparatus for dark frame cancellation for CMOS sensor-based tethered video peripherals

Publications (1)

Publication Number Publication Date
TW420957B true TW420957B (en) 2001-02-01

Family

ID=25531602

Family Applications (1)

Application Number Title Priority Date Filing Date
TW087119982A TW420957B (en) 1997-12-05 1998-12-02 Method and apparatus for dark frame cancellation for CMOS sensor-based tethered video peripherals

Country Status (8)

Country Link
US (1) US6061092A (zh)
EP (1) EP1034664B1 (zh)
JP (1) JP4080691B2 (zh)
KR (1) KR100344748B1 (zh)
AU (1) AU1314999A (zh)
DE (1) DE69817606T2 (zh)
TW (1) TW420957B (zh)
WO (1) WO1999030506A1 (zh)

Families Citing this family (59)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11112885A (ja) * 1997-10-03 1999-04-23 Olympus Optical Co Ltd カメラ
US6563536B1 (en) * 1998-05-20 2003-05-13 Intel Corporation Reducing noise in an imaging system
US6914627B1 (en) * 1998-05-27 2005-07-05 Omnivision Technologies, Inc. Method and apparatus for digital column fixed pattern noise canceling for a CMOS image sensor
DE69827529T2 (de) * 1998-09-28 2005-11-10 3Dv Systems Ltd. Entfernungsmessung mittels kamera
US7339620B1 (en) * 1998-11-11 2008-03-04 Canon Kabushiki Kaisha Image sensing apparatus having a signal processing device that uses a signal imaged in a non-exposure state to process a signal in an exposure state
US6965410B1 (en) * 1998-12-03 2005-11-15 Canon Kabushiki Kaisha Image sensing apparatus employing dark image data to correct dark noise
JP2000184264A (ja) * 1998-12-14 2000-06-30 Olympus Optical Co Ltd カメラ
US6661929B1 (en) * 1999-07-14 2003-12-09 Hewlett-Packard Development Company, L.P. Controlling an imaging array not having black cells using an array controller that is adapted to imaging arrays having black cells
US7193652B2 (en) * 1999-08-17 2007-03-20 Applied Vision Systems, Inc. Dynamic range video recording and playback system and method
JP3937659B2 (ja) * 1999-08-24 2007-06-27 日本ビクター株式会社 撮像装置および撮像装置の制御方法
US6654054B1 (en) * 1999-11-02 2003-11-25 Agilent Technologies, Inc. Method and apparatus for canceling the effects of noise in an electronic signal
FR2803082B1 (fr) * 1999-12-28 2002-03-22 Trixell Sas Procede de compensation en temperature de la sensibilite d'un detecteur d'image
US7023479B2 (en) * 2000-05-16 2006-04-04 Canon Kabushiki Kaisha Image input apparatus having addition and subtraction processing
JP2002077739A (ja) * 2000-08-30 2002-03-15 Chinon Ind Inc 固体撮像素子、レンズ装置および撮像装置
EP1198127A1 (en) * 2000-10-12 2002-04-17 Canon Kabushiki Kaisha Signal difference correction of picture signals read from multiple readout type image sensing device
GB2372391A (en) * 2001-02-16 2002-08-21 Hewlett Packard Co Removal of specular reflection
US6714241B2 (en) * 2001-04-25 2004-03-30 Hewlett-Packard Development Company, L.P. Efficient dark current subtraction in an image sensor
JP2002354340A (ja) * 2001-05-24 2002-12-06 Olympus Optical Co Ltd 撮像装置
US7317481B2 (en) 2002-02-20 2008-01-08 Canon Kabushiki Kaisha Image data correction processing based on sensitivity
US6956978B2 (en) * 2002-03-12 2005-10-18 Hewlett-Packard Development Company, L.P. Multi-pass dark frame subtraction
US6909459B2 (en) * 2002-08-21 2005-06-21 Alpha Innotech Corporation Method of and apparatus for extending signal ranges of digital images
US7443431B2 (en) * 2002-09-13 2008-10-28 Eastman Kodak Company Fixed pattern noise removal in CMOS imagers across various operational conditions
EP1567891A4 (en) * 2002-09-20 2005-12-28 Bae Systems Information FRONT LENS HOLDER APPLICATION FOR EQUALITY CORRECTION
EP1429542A1 (en) * 2002-12-11 2004-06-16 Dialog Semiconductor GmbH Fixed pattern noise compensation with low memory requirements
US7257278B2 (en) * 2003-02-26 2007-08-14 Hewlett-Packard Development Company, L.P. Image sensor for capturing and filtering image data
EP1475957B1 (en) * 2003-05-08 2010-11-03 STMicroelectronics (Research & Development) Limited Method and apparatus for removing column fixed pattern noise in solid state image sensors
US7372484B2 (en) * 2003-06-26 2008-05-13 Micron Technology, Inc. Method and apparatus for reducing effects of dark current and defective pixels in an imaging device
US7702236B2 (en) 2006-02-14 2010-04-20 Fotonation Vision Limited Digital image acquisition device with built in dust and sensor mapping capability
JP2005045552A (ja) * 2003-07-22 2005-02-17 Canon Inc 撮像装置及び方法
US7280141B1 (en) * 2003-09-23 2007-10-09 Pixim Inc Fixed pattern noise subtraction in a digital image sensor
US7310450B2 (en) * 2003-09-30 2007-12-18 Fotonation Vision Limited Method of detecting and correcting dust in digital images based on aura and shadow region analysis
US7295233B2 (en) * 2003-09-30 2007-11-13 Fotonation Vision Limited Detection and removal of blemishes in digital images utilizing original images of defocused scenes
US7676110B2 (en) * 2003-09-30 2010-03-09 Fotonation Vision Limited Determination of need to service a camera based on detection of blemishes in digital images
US7330208B2 (en) * 2004-03-08 2008-02-12 Eastman Kodak Company Electronic imaging system with adjusted dark floor correction
JP2005294888A (ja) * 2004-03-31 2005-10-20 Sanyo Electric Co Ltd 信号処理回路
DE102004016585B4 (de) * 2004-03-31 2006-02-09 Siemens Ag Verfahren zur Rauschkorrektur bei einem Flachbilddetektor
JP4526315B2 (ja) * 2004-07-07 2010-08-18 オリンパス株式会社 被検体内導入装置および被検体内情報取得システム
JP4760089B2 (ja) * 2004-10-14 2011-08-31 日産自動車株式会社 車載画像処理装置、および画像処理方法
US8182422B2 (en) 2005-12-13 2012-05-22 Avantis Medical Systems, Inc. Endoscope having detachable imaging device and method of using
US8235887B2 (en) 2006-01-23 2012-08-07 Avantis Medical Systems, Inc. Endoscope assembly with retroscope
US8872906B2 (en) 2005-01-05 2014-10-28 Avantis Medical Systems, Inc. Endoscope assembly with a polarizing filter
US7710472B2 (en) * 2006-05-01 2010-05-04 Warner Bros. Entertainment Inc. Detection and/or correction of suppressed signal defects in moving images
MX2008015363A (es) * 2006-05-31 2009-05-12 Univ Indiana Res & Tech Corp Camara digital de barrido laser con optica simplificada y potencial para multiplicar formacion de imagen de luz dispersada.
US8488895B2 (en) * 2006-05-31 2013-07-16 Indiana University Research And Technology Corp. Laser scanning digital camera with pupil periphery illumination and potential for multiply scattered light imaging
US8228405B2 (en) * 2007-01-16 2012-07-24 Bae Systems Information And Electronic Systems Integration Inc. Real-time pixel substitution for thermal imaging systems
US8064666B2 (en) 2007-04-10 2011-11-22 Avantis Medical Systems, Inc. Method and device for examining or imaging an interior surface of a cavity
US20080303922A1 (en) * 2007-06-08 2008-12-11 Imran Chaudhri Image capture
US7978237B2 (en) * 2007-08-14 2011-07-12 Samsung Electronics Co., Ltd. Method and apparatus for canceling fixed pattern noise in CMOS image sensor
US20090213211A1 (en) * 2007-10-11 2009-08-27 Avantis Medical Systems, Inc. Method and Device for Reducing the Fixed Pattern Noise of a Digital Image
US8164657B2 (en) * 2008-06-27 2012-04-24 AltaSens, Inc Pixel or column fixed pattern noise mitigation using partial or full frame correction with uniform frame rates
US8622302B2 (en) * 2009-03-17 2014-01-07 Datalogic ADC, Inc. Systems and methods for compensating for fixed pattern noise
JP5521460B2 (ja) * 2009-09-18 2014-06-11 ソニー株式会社 撮像装置および方法、電子機器、並びにプログラム
US8817132B1 (en) * 2010-01-20 2014-08-26 Ambarella, Inc. Hardware partial frame elimination in a sensor interface
JP5505718B2 (ja) * 2010-06-23 2014-05-28 コニカミノルタ株式会社 画像入力装置
US8355063B2 (en) 2010-09-27 2013-01-15 Sharp Laboratories Of America, Inc. Camera noise reduction for machine vision systems
DE102014224638A1 (de) * 2014-12-02 2016-06-02 Olympus Soft Imaging Solutions Gmbh Digitales Bilderfassungssystem und Verfahren zur Fehlerkorrektur in einem solchen System
US9456123B2 (en) * 2014-12-18 2016-09-27 Xerox Corporation Method and system to configure mobile electronic device settings using remote data store analytics
JP6525756B2 (ja) * 2015-06-15 2019-06-05 キヤノン株式会社 放射線撮像装置及びその制御方法
US11350049B2 (en) * 2020-11-02 2022-05-31 Omnivision Technologies, Inc. Dark current calibration method and associated pixel circuitry

Family Cites Families (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH01147973A (ja) * 1987-12-04 1989-06-09 Hitachi Ltd 固体撮像装置
JP2787710B2 (ja) * 1989-06-07 1998-08-20 株式会社ニコン 光電変換装置の信号補正装置
KR100202343B1 (ko) * 1990-03-13 1999-06-15 이데이 노부유끼 셰이딩 보정 장치
US5047863A (en) * 1990-05-24 1991-09-10 Polaroid Corporation Defect correction apparatus for solid state imaging devices including inoperative pixel detection
DE4227733A1 (de) * 1991-08-30 1993-03-04 Allen Bradley Co Konfigurierbarer cachespeicher und datenverarbeitungssystem mit einem derartigen speicher
US5479206A (en) * 1992-02-04 1995-12-26 Fuji Photo Film Co., Ltd. Imaging system, electronic camera, computer system for controlling said electronic camera, and methods of controlling same
US5608455A (en) * 1992-07-30 1997-03-04 Fuji Photo Film Co., Ltd Interline transfer CCD image sensor with reduced dark current
US5365269A (en) * 1992-10-22 1994-11-15 Santa Barbara Instrument Group, Inc. Electronic camera with automatic image tracking and multi-frame registration and accumulation
JP2984494B2 (ja) * 1992-12-11 1999-11-29 オリンパス光学工業株式会社 固体撮像素子の暗時出力補正装置
JP2817107B2 (ja) * 1992-12-28 1998-10-27 キヤノン株式会社 画像入力装置
JP3297946B2 (ja) * 1993-03-23 2002-07-02 ソニー株式会社 電荷転送装置
JP3014895B2 (ja) * 1993-06-02 2000-02-28 株式会社日立製作所 ビデオカメラ
US5452004A (en) * 1993-06-17 1995-09-19 Litton Systems, Inc. Focal plane array imaging device with random access architecture
JP3318905B2 (ja) * 1993-12-03 2002-08-26 ソニー株式会社 電荷転送装置
JPH07226911A (ja) * 1994-02-15 1995-08-22 Eastman Kodak Japan Kk 電子スチルカメラ
KR960003298A (ko) * 1994-06-02 1996-01-26 이헌조 캠코더의 촬상관 결점보상 방법 및 장치
JPH0851571A (ja) * 1994-08-03 1996-02-20 Olympus Optical Co Ltd 電子的撮像装置
JPH0918793A (ja) * 1995-06-26 1997-01-17 Nikon Corp 撮像装置
JPH0923358A (ja) * 1995-07-07 1997-01-21 Olympus Optical Co Ltd ビデオカメラ
US5568192A (en) * 1995-08-30 1996-10-22 Intel Corporation Method and apparatus for processing digital video camera signals
JPH09149316A (ja) * 1995-11-22 1997-06-06 Sony Corp 撮像装置及び撮像装置の調整方法
JPH09312791A (ja) * 1996-05-21 1997-12-02 Hitachi Ltd 電子カメラおよび電子カメラシステム
GB2317522B (en) * 1996-09-12 2000-09-27 Vsli Vision Limited Low noise operation of an image sensor

Also Published As

Publication number Publication date
EP1034664A4 (en) 2002-01-02
KR100344748B1 (ko) 2002-07-20
DE69817606T2 (de) 2004-06-17
EP1034664A1 (en) 2000-09-13
WO1999030506A1 (en) 1999-06-17
US6061092A (en) 2000-05-09
EP1034664B1 (en) 2003-08-27
AU1314999A (en) 1999-06-28
KR20010032691A (ko) 2001-04-25
JP2001526507A (ja) 2001-12-18
JP4080691B2 (ja) 2008-04-23
DE69817606D1 (de) 2003-10-02

Similar Documents

Publication Publication Date Title
TW420957B (en) Method and apparatus for dark frame cancellation for CMOS sensor-based tethered video peripherals
EP2015566B1 (en) Method and apparatus for compensating handtrembling of camera
RU2619721C2 (ru) Устройство захвата изображений, система захвата изображений и способ управления для устройства захвата изображений
KR20140128885A (ko) 전력 효율적인 이미지 감지 장치, 이미지 감지 장치의 작동 방법 및 눈/시선 추적 시스템
US8120691B2 (en) Image capturing appatatus and method for use in a mobile terminal
JP2003348455A (ja) イメージ・キャプチャ・デバイスの暗電流を適応的に補償するためのシステムおよび方法
JP2017534212A (ja) ピクセル感度及びダイナミックレンジを高める方法及び装置
JP6006083B2 (ja) 撮像装置および撮像方法
US8084730B2 (en) Dual mode source follower for low and high sensitivity applications
CN110806912B (zh) 界面处理方法及相关设备
JP4533171B2 (ja) 処理装置及び処理方法
JP5423204B2 (ja) 撮像装置
CN111064910B (zh) 影像感测方法与影像感测系统
JP3802596B2 (ja) 電子カメラ
JP3631034B2 (ja) ディジタルカメラ
JP2010118963A (ja) 撮像装置及びその制御方法及びプログラム
JP5359299B2 (ja) 撮像装置
JP2002281395A (ja) 撮像装置
JP2011182304A (ja) 撮像装置及びその制御方法
JP6439563B2 (ja) 撮像装置、撮像方法、プログラム
JP2001036820A (ja) 撮像装置
JP2002185857A (ja) 撮像装置
JP2002281394A (ja) 撮像装置
JP2002281392A (ja) 撮像装置
JP2001218105A (ja) 撮像装置

Legal Events

Date Code Title Description
GD4A Issue of patent certificate for granted invention patent
MM4A Annulment or lapse of patent due to non-payment of fees