TW420957B - Method and apparatus for dark frame cancellation for CMOS sensor-based tethered video peripherals - Google Patents
Method and apparatus for dark frame cancellation for CMOS sensor-based tethered video peripherals Download PDFInfo
- Publication number
- TW420957B TW420957B TW087119982A TW87119982A TW420957B TW 420957 B TW420957 B TW 420957B TW 087119982 A TW087119982 A TW 087119982A TW 87119982 A TW87119982 A TW 87119982A TW 420957 B TW420957 B TW 420957B
- Authority
- TW
- Taiwan
- Prior art keywords
- dark
- shadow
- patent application
- scope
- camera
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims description 20
- 230000002093 peripheral effect Effects 0.000 title description 2
- 230000008030 elimination Effects 0.000 claims abstract description 11
- 238000003379 elimination reaction Methods 0.000 claims abstract description 11
- 239000012925 reference material Substances 0.000 claims description 16
- 230000002457 bidirectional effect Effects 0.000 claims description 4
- 230000000295 complement effect Effects 0.000 claims description 3
- 239000004065 semiconductor Substances 0.000 claims description 3
- 238000004519 manufacturing process Methods 0.000 claims 1
- 229910044991 metal oxide Inorganic materials 0.000 claims 1
- 150000004706 metal oxides Chemical class 0.000 claims 1
- 230000008901 benefit Effects 0.000 abstract description 3
- 230000010354 integration Effects 0.000 abstract 1
- 230000008859 change Effects 0.000 description 8
- 230000004888 barrier function Effects 0.000 description 6
- 238000005516 engineering process Methods 0.000 description 4
- 230000000737 periodic effect Effects 0.000 description 4
- 239000000463 material Substances 0.000 description 3
- 230000009467 reduction Effects 0.000 description 3
- 230000009471 action Effects 0.000 description 2
- 230000015556 catabolic process Effects 0.000 description 2
- 238000006731 degradation reaction Methods 0.000 description 2
- 230000006872 improvement Effects 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 230000003068 static effect Effects 0.000 description 2
- SFXIAQRTVLSMEJ-UHFFFAOYSA-N [5-(3,4-dichlorophenyl)furan-2-yl]-piperidin-1-ylmethanethione Chemical compound C1=C(Cl)C(Cl)=CC=C1C1=CC=C(C(=S)N2CCCCC2)O1 SFXIAQRTVLSMEJ-UHFFFAOYSA-N 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 238000013479 data entry Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 238000005286 illumination Methods 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 239000013589 supplement Substances 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
- H04N25/63—Noise processing, e.g. detecting, correcting, reducing or removing noise applied to dark current
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
- H04N25/63—Noise processing, e.g. detecting, correcting, reducing or removing noise applied to dark current
- H04N25/633—Noise processing, e.g. detecting, correcting, reducing or removing noise applied to dark current by using optical black pixels
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/70—SSIS architectures; Circuits associated therewith
- H04N25/76—Addressed sensors, e.g. MOS or CMOS sensors
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Transforming Light Signals Into Electric Signals (AREA)
- Studio Devices (AREA)
Description
420957 五、發明說明(1) 發明背景 1. 發明領域 本發明一般是有關於數位攝影機及靜態相機,尤其是改 善被具有CMOS影像感測器之數位相機所捕捉到的影像品 質。 2. 相關技術說明 在攝影及靜態相機中使用互補金氧半(CMOS)技術的數位 影像感測器,取代了使用電荷耦合元件(CCD)的影像感測 器。當CMOS感測器影像陣列曝露到從現場影像而來的光線 中時,光子會撞擊影像陣列,同時影像陣列中的每個Ci\[0S 感測器會產生電荷。一部分的電荷是正比於從現場影像而 來的光子速率。剩餘的電荷則是來自於製程的非精確度, 是CMOS感測器所產生影像中的固定雜訊。該雜訊會降低感 測影像的品質。 固定暗場雜訊(DFPN)是光二極體漏電流被CMOS感測器感 測到的結果3 D F P N是沒有光線打到C Μ 0 S感測器時所發生 的。因此,這是C Μ 0 S感測器影像陣列操作所必有的一組誤 差。某些DFPN值被加到因現場影像所產生CMOS感測器影像 陣列中每個像素的電荷中:每個像素的D F P N會隨著操作送 度,曝光參數,以及影像障列中的像素位置,而做大幅的 變化。很需要消除掉由感測影像而來的DFPN,以改善影像 品負3 藉捕捉現場影像感測中的近接暗影”,來消除掉D F P Ν。 暗影是在沒有光線打到CMOS感測器影像陣列時所捕捉到
第6頁 420957 五'發明說明(2) 的。該暗影也可以用與現場影像的相同曝光參數來得到: 該暗影資料接著由所感測到現場影像資料中扣除掉|產生 校正的現場影像資料。該校正的現場影像資料不具有因 DFPN所產生的影像劣化現象1通常是存在於CMOS感測器所 得到的影像中。 當使用CMOS感測器當作影像擷取裝置時,通常是周電子 機械快門來擷取暗影,提供給靜態與視訊操作進行消除 DFPN用。消除DFPN的原則如圖1 A與1 B所示。圖1 A顯示數位 相機系統1 0,具有電子機械快門1 2,受螺線圈或馬達1 4控 制。正常操作時,現場影像1 6通過該快門,由相機的其它 部分所處理。然而,對於暗影撷取來說,快門1 2是關閉在 螺線圏或馬達1 4的方向上,所以沒有光線會通過到其它釘 分。既然沒有光線會到CMOS感洌器,CMOS感測II影偉陣列 1 8依據電流操作特性,感測出CMOS感測器操作時的既有電 荷,並儲存該電荷當作是暗影儲存器2 0的D F P M : C Μ 0 S感武 器影像陣列1 8的每個感測器都具有自己的DFPN值》儲存到 暗影储存器2 0中的資料是一陣列感測影像之像素的鞟訊 值=圖1 β顯示出如何使用所得到的D F Ρ Ν資料來校正感測到 的現場影像3當谀門丨2打開時,CMO S感測器影像障穴1 8會 感剖出現場影像1 6 5此時1感測到的現場影像資料包含 DCPN =暗影減除單元2 2是包含到該相機中,參考暗影儲存 器2 0,以得到先前健存的D F Ρ Ν資料,並從感測到的現場影 像貢料中減掉該D F Ρ Ν貰4,以產生彳父正的現場京〉像貢#斗= 從感測到的現場影像資料中減掉該DFPN資料,對最後影
第7頁 五'發明說明(3) 像的訊號對#訊比(S M R ),提供相當好的改善。校正的現 場影像資料被送到其它部分(未顯示)做進一步處理,比如 顯示給使用者或記錄到儲存媒體上。 既然DF PiV會隨環境溫度與感測器設定而改變,在視訊應 用中,需要很頻繁的使用快門來搜集目前可應周的暗影。 操作快門的動作會增加相機的功率消耗,並減少快門1 2與 螺線圈或馬達1 4的失效(MTB F )間的平均時間。此外,如杲 相機是經由如通用串接匯流排(U SB)的匯流排介面而連接 到個人電腦(PC)上,頻繁性的快門操作所增加的功率消耗 將會超過匯流排介面要求的功率上限3當該現象發生時, 相模必需使用比如電池的額外電源,或其它的高成本且低 功率的電子機械裝置,以補充其供電電源。 當然,CMOS感測器的數位相機可以省掉暗影的擷取以及 DFPN的消除,但是會導致影像品質無法被接受的劣化結 果° 需要一種可以克服掉習用技術中暗影擷取與DFPN消除之 缺點的方法,尤其是對於連接到PC上的CMOS感測器的數位 相機= 發明摘要 本發明的實施例是一種控制C\10S感測器的數位相機中固 定暗場雜訊消除的方法=該方法包含提供暗影快取記憶 體,甴資料結構所標定的暗影,資料結構中的每個入口都 儲存有與每個暗影有關的暗行參考資料;從暗行中得到相 棱所產生視頻圖框串的目前視頻圖框中目前暗行參考資
4Ζ〇9δϊ 五、發明說明C4) 科,比較目前的時行參考育科以及在暗行參考貢的貢?ρ[ 結構中的入口;以及使用從袂取記憶體而來與暗行參考資 科的貫料結構中的入口有關的暗影’在目h暗行爹考負不4 符合該入口時,進行視頻圖框串上固定暗場雜訊消除的處 理。 本發明的另一實施例是一種控制CMOS感測器的數位相機 中固定暗場雜訊消除的裝置。該裝置包含暗影快取記憶 體,該袂取記憶體具有標定出暗影的資料結構,每個資料 結構的入口都儲存有與每個暗影有關的暗行參考資料;從 暗行中得到相機所產生視頻圖框串的目前視頻圖框中目前 暗行參考資料的電路;以及使用從快取記憶體而來與暗行 參考資料的貢料結構中的入口有關的暗影,在目可0¾行參 考資料符合該入口時,進行視頻圖框串上固定暗場雜訊消 除處理的電路= 圖式之簡單說明 本發明的特點與優點將在以下本發明的詳細說明後會變 得更為明顯,其中: 圖1 A是擷取暗影(習用技衔)的系統。 圖1 B固定暗場雜訊消除(習用技術)的系統。 圊2是依據本發明的主要暗影快取系統* 圖3是依據本發明的視頻資料圖框= 圖4 A與圖4 B是顯示出暗行參考資料的C MOS感測器影ί象障 列。 圖5顯示暗影怯取記憶體中的暗影=
第9頁 五、發明說明(5) 圖6是系統起始時暗影的週期性摁取。 圖7是本發明管理暗影诀取記憶體步驟的流程圖。 發明之詳細說明 在以下的說明中,將會說明本發明的不同特點。然而, 本發明是可以只用本發明中所提的一些或全部特點來實 現,對於熟知該技術領域的人士來說是很明顯的。為了說 明方便起見,特定的數字,材料以及組合會先行說明,以 提供對本發明整體性的了解。然而,本發明可以不周特定 的細節便能實現,對於熟知該技術領域的人士來說也是很 明顯的。在其它的實例中,會省略或簡化相當熟知的特 點,以便不要模糊掉本發明。 本發明是一種有用的方法,用來消除掉連接到CMOS感測 器數位攝影機中的DFPN。是基於提供並保持住主要暗影怯 取記憶體=既然該相機是連接到主電腦系統上,比如個人 電腦(P C ),其好處是主電腦的儲存以及處理容量。使用暗 影快取記憶體更新目前的可用暗影,給DFPN消除處理周, 擷取暗影的快門操作會戲劇性的降低,進而可以只使闬到 較少的系統資源,比如功率,並增加電子機械裝置的 ΜTBF,比如快門以及螺線圏或馬達。此外,使周主電蹈上 的暗影快取記憶體,降低使用功率會讓該相機停留在經白 如USB介面之連接操作的正常功率預算内= 通常,在相機的不同組合,增益,以及溫度操作特性 上,會得到一些暗影,並黯存到主電蹈系統中=該餑存的 暗影是依據固定且已預定從CMOS感測器·影像陣列的暗行資
420957 五 '發明說明(6) 料,而在主電腦上有詳細的說明=暗行資料表示一部分的 CMOS感測器影像陣列,是被永久性的且整體性的遮蔽住, 用來進行消除DF PN。圖2是依據本發明的主要暗影快取系 統。數位視頻相機30利用雙向介面3 4連接到主系統32。在 其中的一實施例中,該主系統是指以I n t e I架構(I A )指令 集架構(ISA)以及由位於美國Santa Clara 'California 的I n t e 1公司所生產的相關微處理器家族的個人電腦,雖 然也可以使用其它的個人電腦,工作站,定址解碼器以及 電腦系統。實施例中的雙向介面是通用串接匯流排 (USB),雖然也可以使用内部連接電腦組件以及週邊的匯 流排。視頻相機3 0包含許多組件,其中只有與本發明有關 的才顯示於圖2中。CMOS感測器影像陣列3 6產生感測到的 影像資料,代表在相機環境中的現場影像3該感測到的影 像資料本身具有DFPN。感測到的影像資料輸入到DFPN減除 單元3 8 =該D F P +\:減除單元從感測到的影像中減掉目前可應 用暗影(圖2中的暗影(ί ) 4 0 ),產生校正感測影像。暗影 (ί )40是DFPN值的陣列,每個DFPN值代表感測影像中像素 的偏移量。影像處理單元4 2配合主系統3 2控制D F Ρ Ν減除單 元38以及視頻相機30介面的操作,DFPN減除單元38可以用 特殊目的電路或軟體或是由影像處理單元42所執行的軔體 來實現。DFP Ν消除操作是由依據習用已知技術的DF ΡΝ減除 單元來進行。 主系統32包含暗影诀取41 ,錯存在主系統的記憶體内。 暗影诀取4 1包含複數個暗影D I ( 0 ) 4 2 ,D I ( 1 ) 4 4,到
第Π頁 4 209 5 : 五、發明說明(7) D I U ) 4 6。每個暗影代表攝影機暗影快取4 1的.某組特定操 作特性的DF P N。該暗影是與暗行參考資料障列的資料結構 4 8有關。實施例中,暗行參考資料包含在固定大小的陣列 内,而固定大小是依據儲存在主系統中的最大暗影數目, 雖然也可以使用其它已知的資斜結構以及存取技術。暗行 參考資料陣列中的每個入口會參考相關的暗影1並代表相 機特定操作環境的記錄。主系統上的軟體(未顯示)操作會 管理攝影機與暗行參考資料陣列以及暗影間的相互作用。 當攝影機在起始時,將暗影快取4 1中被選定的暗影載入 暗影(I ) 4 0。暗影(I ) 4 0是給DF PN消除處理用的,直到視頻 相機3 0決定出,相機的操作特性對於所使用到的新暗影來 說,已經改變得夠多。使用到新暗影時,存取暗行參考資 料陣列4 8,以定位住符合目前操作特性的入口。目前的操 作特性是由被選定的暗行參考資料所標定。當條件符合 時,相關的暗影經雙向介面3 4下裁到視頻相機,變成給 DFPN消除處理用的新暗影(I )。符合的操作是使同CMOS感 測器影像陣列3 6中暗行下的影像所產生的資料,當作是整 舊暗影的記錄。該記録符合暗行參考資料陣列4 8的入口 3 該記録是從CMOS感測器影像陣列36所產生視訊圖框串的其 中一個圖框中取得的。 CMOS感測器影像陣列連續操作所產生的視訊串包含複數 ill圖框,每個圖框前都立刻有一表頭在前3暗行參考資料 包含在每價表頭中,並由影像處理單元4 2所監控,以決定 目前所需感測影像資料下的操作條件是否改變。如果暗行
苐頁 420957 五、發明說明¢8) 參考資料改變得相當大(比如多於一個預設臨界量),這表 示操作環境已經改變,而且可能需要新的暗影給DF PN消除 處理用。圖3是依據本發明的視訊圖框圖。圖框包含表頭 資料5 2以及現場影像資料5 4。現場影像資料代表在特定時 間被相機所捕捉到的現場。該表頭資料包含與圖框以及與 視訊串中位置有關的不同控制資訊。表頭資料5 2也包含暗 行參考資料5 6。每組特定的暗行參考資料56 (達到暗行參 考資料的最多組數),是儲存在主系統3 2的暗行參考資料 陣列4 8中。當視訊串的圖框發生不同的暗行參考資料陣列 時,該系統會偵測出代表圖框的暗行參考資料的改變,並 使圖框中的暗行參考資料符合主系統3 2中暗行參考資料障 列4 8的暗行參考資料。 圖4 Α與圖4 Β是顯示出0皆行參考資料的CMOS感測器影像障 列。影像陣列的主動區用怯門遮住,比便攧取暗影,並曝 露出來擷取現場影像3在這二例中,最後的影像包含暗行 參考資料,提供相關影像間的記録。圖4A顯示CMOS感測器 影像陣列,其中影像障列的一部分60曝露給一現場:CMOS 感測器在影像障列6 2與6 4中包含二垂直長條,不會曝露到 現場的光線下,而是保持黑暗,進而提供暗行參考資料: 該暗行參考資料當作是目前操作環境的記錄。圖4 B是顯示 當零照度被接收到時,比如當快門關閉時的UI0S感測器影 傈陣列。要注意的是,暗行參考資料仍是可存取的=既然 使用相同的操作環境來捕提這二種情形下的資料,所α可 以使用暗行參考if料來標示該暗影3
第13頁 420957 五、發明說明(9) 使用主暗影快取便不需要經快門操作來頻繁的得到新暗 影=而是只有在曝光參數或環境變化很大,而且相對暗影 並不在主糸統的暗影快取之内時*才需要捕?足暗影。貫際 上,本發明能讓相機系統管理到會被用到的操作環境記憶 體。一旦暗影快取建立好,攝影機便不需要捕捉新的暗 影,除非環境及/或曝光參數與所有儲存暗影的參數比 較,已升到預設變化臨界值以上。 實施例甲,暗影快取中的暗影依據使用頻率分類。最少 用到的暗影會從暗影快取中剔除掉,以便當暗影快取填滿 且需要新的暗影時,能存入新.的暗影3圖5顯示暗影快取 記憶體中的暗影。對暗影D I ( 0 ) 4 2到D I ( Μ ) 4 6以及相對應的 暗行資料陣列4 8入口做分類,以增加使用頻率。最少用到 的D I ( Μ ) 4 6會從主系統記憶體中剔除掉,而且更新暗行參 考資料陣列。新的暗影Ν 6 0儲存在主系統記憶體中,新的 暗行參考資料障列之入口 DC ( X ) 6 2會取代暗行參考資料陣 列中的DC(M) 64 :本實施例中,使用做不常使罔到(LRU )的 運算法,以決定要取代那一暗影,也可以使用其它怯取運 异法。 藉提供複數佴暗影怯取中的暗影,該相機系統便給定了 一堆記憶的操作條件。用一種方法來起始相機系統的暗影 快取,接著再進行設定。起始階段與相機系統的穩定態操 作不同,既然暗影快取在開始時並沒有暗影。在設定階段 中,當相棱第一次開機時,系統會產生暗影快取。每次曝 光改變時,新的暗影會傳送到主系統的暗影快取中,直到
第14頁 Λ2095/ 五、發明說明(ίο) 該快取填滿為止=因此,利用上述的這種袂取取代運算 法,來管理暗影快取的改變。設定時,在系統起始完後, 以週期性間隔來捕捉一串的暗影。圖6是系統起始時暗影 的週期性擷取3開始時,一串的視訊圖框7 0由攝影機以預 設的視訊圖框速荜來產生。一旦在時間Τ 1 7 :[產生第一視 訊圖框,第一暗影7 2被便攝影機所捕捉到,並儲存到主系 統的暗影快取中。在稍後的時間T j 7 3下,當操作特性的 改變1藉檢視視訊圖框表頭中的暗行參考資料,而便偵測 到時,便需要新的暗影7 4。該步驟繼續進行,直到暗影怯 取填滿,而且用暗影X 7 6達到穩定態操作。 圖7是本發明管理暗影快取記憶體步驟的流程圖。在步 騍1 0 0後,檢視相機的操作模式1以決定視訊模式是否有 在步驟1 0 2中起動。如果視訊模式沒有起動,N 0路徑丨0 4會 在步發U 0 6中' 其中有進行相機的靜態模式或其它操作模 式=否則,YES路徑1 08會在步驟1 1 0中。如果是步驟1丨0中 相機的第一動作,YES路徑112會在步騍114中。在該步驟 中,需要暗影儲存在相機内的記憶體中,並傳送到主系統 中的記憶體:更新該暗行參考資料陣列,以反應出新的暗 影。經路徑Π 6與步聲1 1 8靖續該處理過程,其中相機的提 訊串列被致能=如果不是步驟1丨0中相機的第一動作,\ 0 路徑1 2 0會在步驟1 2 2中。此時,目前視訊圖框的暗行參考 資料從相機送到主系統中=如果暗行參考資料在步騍1 2 4 中符合暗行參考資料障列中的入口時,YES路徑1 2 6會在步 霽128中:在步辱128中,主系統暗影侠取的暗影,依據符
15頁 4203 五、發玥說明¢11) 合的暗行參考資料障列入口 ,經雙向介靣而下載到相機的 暗影(I )儲存單元中= 如果暗行參考資料在步驟1 2 4中不符合暗行參考資料陣 列中的任何入口時,N’O路徑1 3 0會在步驟1 3 2中。如杲暗影 快取已儲存最多數目的暗影,YES路徑1 3 4會在步驟I 36 中,其中會決定出最少使用到的暗影,並剔除掉該暗影= 步驟1 1 4繼續進行新暗影的擷取。否則,暗影快取沒有填 滿,所以直接經N0路徑1 38到步驟I 1 4,進行新暗影的擷 取。 一旦視訊系統在相機的步騾1 1 8中被致能,該相機系統 會在週期性的步驟1 4 0中進行檢視,決定曝光參數是否有 改變。如果有改變被剔除掉,YES路徑1 4 2會在步驟1 24 中,其中目前視訊圖框的暗行參考資料,會符合暗行參考 資料陣列中的入口 。否則,如果沒有曝光參數改變被剔除 掉,M0路徑1 44會在步驟146中。此時,會檢視目前的暗行 參考資料,以決定之前所檢視的暗行參考資料是否超過預 設臨界值。如果沒有偵測到改變,繼續經N0路徑1 4 8到步 葬1 18。否則,有很大的改變發生。所以,YES路徑150會 在步驟124中,其中目前視訊圖框的暗行參考資料,會符 合暗行參考資料障列中的入口。 另一實矻例中,如果攝影擒的記憶體與處理資源支援多 個暗影的儲存取控制時,暗影侠取是包含在攝影機中,而 在非主系統中, 用來開關CMOS感測器的電子機械裝置,在視訊操做模式
第16 1 4209 57 五、發明說明(12) 下時,會影響到相機的功率預算以及電子機械裝置的 \1TBF。本發明的主暗影俠取藉極小化使用快門來擷取暗 影,支援寬鬆的功率預算以及對MTBF的改善,且經DFPN消 除,繼續支援最佳影像品質。 本發明已經藉實施例做了解說,而該說明並不是周來做 限定。解說性實施例以及本發明其它實施例,很明顏的, 對於熟知該技術領的人士來說,任何的改變都被視為是在 本發明的精神以及範圍之内3
第丨了頁
Claims (1)
- 420957 _案號87119982 抒年7月以曰 修正_ 六、申請專利範圍 1. 一種控制互補式金氧半導體感測器相機中消除固定暗 場雜訊之方法,包含: 提供暗影快取,該暗影是由資料結構所標示,資料結 構中的每個入口儲存有與其中暗影有關的暗行參考資料; 從該相機所產生視訊圖框串中目前視訊圖框的暗影, 得到目前的暗行參考資料; 比較目前的暗行參考資料與暗行參考資料之資料結構 中的入口; 使用快取中的暗影,該快取是與暗行參考資料之資料 結構中的入口有關的,以便當嚷行參考資料之資料結構中 的_入口符合該入口時,進行視訊圖框串上暗場雜訊之消 除。 _ 2. 如申請專利範圍中第1項之方法,其中該快取是儲存 在主電腦系統中*而且該相機是攝影機,耦合到主電腦系-統。 3. 如申請專利範圍中第2項之方法,進一步包含將主電 腦系統中的相關暗影下載到.攝影機。 4. 如申請專利範圍中第2項之方法,進一步包含將攝影 機的目前暗行參考資料傳送到主電腦系統。 5. 如申請專利範圍中第1項之方法,進一步包含能產生 視訊圖框串。 6. 如申請專利範圍中第1項之方法,其中該比較步驟進 一步包含,只有在相機的曝光參數改變時,才比較目前的 暗行參考資料與暗行參考資料之資料結構中的入口。O:\55\55S41ptc 第 1 頁 2000. 07.28.018 4209577·如申請專利範圍中第1項之方 一舟白人 α . 其'中該比較步驟逸 步包含,只有在目前的暗行參考哪進 資枓不同時,才比較目前的暗行參 考 之資料結構中的入口。 參考身枓與暗仃參考資料 其中目前的暗行參 的入口之差距,是大 其中所提供的步驟 8·如申請專利範圍中第7項之方法 考資料與暗行參考資料之資料結構中 於預設的臨界值。 9.如申請專利範圍中第1項之方法 包含: 獲得新的暗影: - 儲存新的暗影到快取中;以及 加入與新暗影有關的新入口,以更新暗行參考資料之 資料結構’該新人〇包含與新暗影有關的暗行參考資料。 10.如申請專利範圍中第9項之方法,進一步包含將相機-的新暗影傳送到主電腦系統。 11,如申請專利範圍中第9項之方法,進一步包含在當快 取填滿而要儲存新暗影之前,先剔除掉快取中的一暗影。 12. —種裝置,包含: 一暗影快取,該快取包含標示出該暗影的資料結 構,資料結構中的每個人口儲存與其中一暗行 參考資料; 行 一擷取裝置,從視訊圖框串的目前視訊圖框之暗 取得目前暗行參考資料的裝置;以及 -執行裝置’當目前暗行參考資料符合該入口時O:\5S\55842.ptc 第2頁 2000. 0Τ. 28.019 420957使用與資料結構中入口有關快取的被選定暗影在目前視 訊圖框上進行視訊圖框串上暗場雜訊之消除。 13.如申請專利範圍中第12項之裝置,進一步包含能產 生視訊圖框串的裝置。 1 4·如申請專利範圍中第丨2項之裝置,其中該快取是儲 存在主電腦系統中,而且該擷取裝置與該執行裝置是耦合_ 到主電蹈系統之互補式金氧半導體感測器攝影機令之组 件。. 15·如申請專利範圍中第144之裝置,進—步包含雙向 介面’將該攝影機耦合到主電腦系統。 如申請專利範圍中第15項之裝置,其中該雙向介面 是通用串接匯流排(USB)介面。 17. 如申請專利範圍中第15項之裝置,其中該攝影機包 含有記憶體’用來儲存目前的暗影,進行暗場雜訊之消 除,且被選定的暗影從該快取傳送到該記憶體。 18. 如申請專利範圍中第丨5項之裝置’其中該目前暗行 參考資料是從攝影機的擷取裝置傳送到主電腦系統。 19_如申請專利範園中第18項之裝置’其中該主電腦系 統包含一比較裝置,比較目前暗行參考資料與快取中暗行 參考資料之資料結構中的入口。、 2 0.如申請專利範圍中第19項之裝置,其中該比較裝置 只有在相機的曝光參數改變時,才比較目前的暗行參考資 料與暗行參考資料之資料結構中的入口。 21,如申請專利範圍中第19項之裝置’其中該比較裝置 只有在目前的暗行參考資料與之前的暗行參考資料不同0;咖5842.ptc 第3頁 2000. 07.28.020 420957 曰 案號 夂、申請專利範圍 時,才比較目前的暗行參考資料與 構中的入口。 仃參考資料之資料結 22.如申請專利範圍令第2J項之裝 參考資料與暗行參考資料之資料其中目前的暗行 大於預設的臨界值。 的入口之差距,疋 23· —種裝置,包含: 一暗影快取,該快取包含標 構,資料結構中的每個入口 出该暗景ς的資料結 參考資料; .予興具_ 一暗影有關的暗行 >敌一/曰理之元,從視訊圖框声的目前視訊圖框之暗 仃取得目刖暗行參考資料的裝置;以及 一暗場雜訊消除單元’當目前暗行參考 入口時,使用與音祖社接士、 于口 产a: *二Γ 構中 有關快取的被選定暗影, 在目刖視訊圖框上進杆滞1 姑由, 1由圖框串上暗場雜訊之消除。 .如申請專利範圍中第23項之裝置,進一步包含有記 用來儲存目前的暗影’進行暗場雜訊之消除且。被 選定的暗影從該快取傳送到該記憶體。 ’、 25.如申請專利範圍中第23項之裝置,其 存在主電腦系統中,而且該虚理„_ 、 、取疋儲 一錐::而且該處理早兀與該暗場雜訊消除單 兀疋藉由一雙向介面耦合到主電腦系統之互 體感測器攝影機中之組件。 飞备乳+導 /6.如申請專利範圍中第25項之裝置其中該雙向介面 疋通用串接匯流排(USB)介面。 2 7.種機器可讀媒趙,儲存複數個機器可讀指令,是0:\55\55842.ptc 2000. 07.28. 021 420957 案號87119982 ff年9月3 /日 修正 六、申請專利範圍 設計給處理器執行的,該機器可讀指令提供暗影快取,該 暗影是由資料結構所標示,資料結構中的每個入口都儲存 有與其中一暗影有關的暗行參考資料;從相機所產生視訊 圖框串的目前視訊圖框之暗影中,取得目前暗行參考資 料:比較目前暗行參考資料與快取中暗行參考資料之資料 結構中的入口;以及當目前暗行參考資料符合該入口時, 使用與資料結構中入口有關快取的被選定暗影,在目前視 訊圖框上進行視訊圖框串上暗場雜訊之消除。0:\55\55842.ptc 第5頁 2000. 07. 28. 022
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US08/985,575 US6061092A (en) | 1997-12-05 | 1997-12-05 | Method and apparatus for dark frame cancellation for CMOS sensor-based tethered video peripherals |
Publications (1)
Publication Number | Publication Date |
---|---|
TW420957B true TW420957B (en) | 2001-02-01 |
Family
ID=25531602
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
TW087119982A TW420957B (en) | 1997-12-05 | 1998-12-02 | Method and apparatus for dark frame cancellation for CMOS sensor-based tethered video peripherals |
Country Status (8)
Country | Link |
---|---|
US (1) | US6061092A (zh) |
EP (1) | EP1034664B1 (zh) |
JP (1) | JP4080691B2 (zh) |
KR (1) | KR100344748B1 (zh) |
AU (1) | AU1314999A (zh) |
DE (1) | DE69817606T2 (zh) |
TW (1) | TW420957B (zh) |
WO (1) | WO1999030506A1 (zh) |
Families Citing this family (59)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH11112885A (ja) * | 1997-10-03 | 1999-04-23 | Olympus Optical Co Ltd | カメラ |
US6563536B1 (en) * | 1998-05-20 | 2003-05-13 | Intel Corporation | Reducing noise in an imaging system |
US6914627B1 (en) * | 1998-05-27 | 2005-07-05 | Omnivision Technologies, Inc. | Method and apparatus for digital column fixed pattern noise canceling for a CMOS image sensor |
DE69827529T2 (de) * | 1998-09-28 | 2005-11-10 | 3Dv Systems Ltd. | Entfernungsmessung mittels kamera |
US7339620B1 (en) * | 1998-11-11 | 2008-03-04 | Canon Kabushiki Kaisha | Image sensing apparatus having a signal processing device that uses a signal imaged in a non-exposure state to process a signal in an exposure state |
US6965410B1 (en) * | 1998-12-03 | 2005-11-15 | Canon Kabushiki Kaisha | Image sensing apparatus employing dark image data to correct dark noise |
JP2000184264A (ja) * | 1998-12-14 | 2000-06-30 | Olympus Optical Co Ltd | カメラ |
US6661929B1 (en) * | 1999-07-14 | 2003-12-09 | Hewlett-Packard Development Company, L.P. | Controlling an imaging array not having black cells using an array controller that is adapted to imaging arrays having black cells |
US7193652B2 (en) * | 1999-08-17 | 2007-03-20 | Applied Vision Systems, Inc. | Dynamic range video recording and playback system and method |
JP3937659B2 (ja) * | 1999-08-24 | 2007-06-27 | 日本ビクター株式会社 | 撮像装置および撮像装置の制御方法 |
US6654054B1 (en) * | 1999-11-02 | 2003-11-25 | Agilent Technologies, Inc. | Method and apparatus for canceling the effects of noise in an electronic signal |
FR2803082B1 (fr) * | 1999-12-28 | 2002-03-22 | Trixell Sas | Procede de compensation en temperature de la sensibilite d'un detecteur d'image |
US7023479B2 (en) * | 2000-05-16 | 2006-04-04 | Canon Kabushiki Kaisha | Image input apparatus having addition and subtraction processing |
JP2002077739A (ja) * | 2000-08-30 | 2002-03-15 | Chinon Ind Inc | 固体撮像素子、レンズ装置および撮像装置 |
EP1198127A1 (en) * | 2000-10-12 | 2002-04-17 | Canon Kabushiki Kaisha | Signal difference correction of picture signals read from multiple readout type image sensing device |
GB2372391A (en) * | 2001-02-16 | 2002-08-21 | Hewlett Packard Co | Removal of specular reflection |
US6714241B2 (en) * | 2001-04-25 | 2004-03-30 | Hewlett-Packard Development Company, L.P. | Efficient dark current subtraction in an image sensor |
JP2002354340A (ja) * | 2001-05-24 | 2002-12-06 | Olympus Optical Co Ltd | 撮像装置 |
US7317481B2 (en) | 2002-02-20 | 2008-01-08 | Canon Kabushiki Kaisha | Image data correction processing based on sensitivity |
US6956978B2 (en) * | 2002-03-12 | 2005-10-18 | Hewlett-Packard Development Company, L.P. | Multi-pass dark frame subtraction |
US6909459B2 (en) * | 2002-08-21 | 2005-06-21 | Alpha Innotech Corporation | Method of and apparatus for extending signal ranges of digital images |
US7443431B2 (en) * | 2002-09-13 | 2008-10-28 | Eastman Kodak Company | Fixed pattern noise removal in CMOS imagers across various operational conditions |
EP1567891A4 (en) * | 2002-09-20 | 2005-12-28 | Bae Systems Information | FRONT LENS HOLDER APPLICATION FOR EQUALITY CORRECTION |
EP1429542A1 (en) * | 2002-12-11 | 2004-06-16 | Dialog Semiconductor GmbH | Fixed pattern noise compensation with low memory requirements |
US7257278B2 (en) * | 2003-02-26 | 2007-08-14 | Hewlett-Packard Development Company, L.P. | Image sensor for capturing and filtering image data |
EP1475957B1 (en) * | 2003-05-08 | 2010-11-03 | STMicroelectronics (Research & Development) Limited | Method and apparatus for removing column fixed pattern noise in solid state image sensors |
US7372484B2 (en) * | 2003-06-26 | 2008-05-13 | Micron Technology, Inc. | Method and apparatus for reducing effects of dark current and defective pixels in an imaging device |
US7702236B2 (en) | 2006-02-14 | 2010-04-20 | Fotonation Vision Limited | Digital image acquisition device with built in dust and sensor mapping capability |
JP2005045552A (ja) * | 2003-07-22 | 2005-02-17 | Canon Inc | 撮像装置及び方法 |
US7280141B1 (en) * | 2003-09-23 | 2007-10-09 | Pixim Inc | Fixed pattern noise subtraction in a digital image sensor |
US7310450B2 (en) * | 2003-09-30 | 2007-12-18 | Fotonation Vision Limited | Method of detecting and correcting dust in digital images based on aura and shadow region analysis |
US7295233B2 (en) * | 2003-09-30 | 2007-11-13 | Fotonation Vision Limited | Detection and removal of blemishes in digital images utilizing original images of defocused scenes |
US7676110B2 (en) * | 2003-09-30 | 2010-03-09 | Fotonation Vision Limited | Determination of need to service a camera based on detection of blemishes in digital images |
US7330208B2 (en) * | 2004-03-08 | 2008-02-12 | Eastman Kodak Company | Electronic imaging system with adjusted dark floor correction |
JP2005294888A (ja) * | 2004-03-31 | 2005-10-20 | Sanyo Electric Co Ltd | 信号処理回路 |
DE102004016585B4 (de) * | 2004-03-31 | 2006-02-09 | Siemens Ag | Verfahren zur Rauschkorrektur bei einem Flachbilddetektor |
JP4526315B2 (ja) * | 2004-07-07 | 2010-08-18 | オリンパス株式会社 | 被検体内導入装置および被検体内情報取得システム |
JP4760089B2 (ja) * | 2004-10-14 | 2011-08-31 | 日産自動車株式会社 | 車載画像処理装置、および画像処理方法 |
US8182422B2 (en) | 2005-12-13 | 2012-05-22 | Avantis Medical Systems, Inc. | Endoscope having detachable imaging device and method of using |
US8235887B2 (en) | 2006-01-23 | 2012-08-07 | Avantis Medical Systems, Inc. | Endoscope assembly with retroscope |
US8872906B2 (en) | 2005-01-05 | 2014-10-28 | Avantis Medical Systems, Inc. | Endoscope assembly with a polarizing filter |
US7710472B2 (en) * | 2006-05-01 | 2010-05-04 | Warner Bros. Entertainment Inc. | Detection and/or correction of suppressed signal defects in moving images |
MX2008015363A (es) * | 2006-05-31 | 2009-05-12 | Univ Indiana Res & Tech Corp | Camara digital de barrido laser con optica simplificada y potencial para multiplicar formacion de imagen de luz dispersada. |
US8488895B2 (en) * | 2006-05-31 | 2013-07-16 | Indiana University Research And Technology Corp. | Laser scanning digital camera with pupil periphery illumination and potential for multiply scattered light imaging |
US8228405B2 (en) * | 2007-01-16 | 2012-07-24 | Bae Systems Information And Electronic Systems Integration Inc. | Real-time pixel substitution for thermal imaging systems |
US8064666B2 (en) | 2007-04-10 | 2011-11-22 | Avantis Medical Systems, Inc. | Method and device for examining or imaging an interior surface of a cavity |
US20080303922A1 (en) * | 2007-06-08 | 2008-12-11 | Imran Chaudhri | Image capture |
US7978237B2 (en) * | 2007-08-14 | 2011-07-12 | Samsung Electronics Co., Ltd. | Method and apparatus for canceling fixed pattern noise in CMOS image sensor |
US20090213211A1 (en) * | 2007-10-11 | 2009-08-27 | Avantis Medical Systems, Inc. | Method and Device for Reducing the Fixed Pattern Noise of a Digital Image |
US8164657B2 (en) * | 2008-06-27 | 2012-04-24 | AltaSens, Inc | Pixel or column fixed pattern noise mitigation using partial or full frame correction with uniform frame rates |
US8622302B2 (en) * | 2009-03-17 | 2014-01-07 | Datalogic ADC, Inc. | Systems and methods for compensating for fixed pattern noise |
JP5521460B2 (ja) * | 2009-09-18 | 2014-06-11 | ソニー株式会社 | 撮像装置および方法、電子機器、並びにプログラム |
US8817132B1 (en) * | 2010-01-20 | 2014-08-26 | Ambarella, Inc. | Hardware partial frame elimination in a sensor interface |
JP5505718B2 (ja) * | 2010-06-23 | 2014-05-28 | コニカミノルタ株式会社 | 画像入力装置 |
US8355063B2 (en) | 2010-09-27 | 2013-01-15 | Sharp Laboratories Of America, Inc. | Camera noise reduction for machine vision systems |
DE102014224638A1 (de) * | 2014-12-02 | 2016-06-02 | Olympus Soft Imaging Solutions Gmbh | Digitales Bilderfassungssystem und Verfahren zur Fehlerkorrektur in einem solchen System |
US9456123B2 (en) * | 2014-12-18 | 2016-09-27 | Xerox Corporation | Method and system to configure mobile electronic device settings using remote data store analytics |
JP6525756B2 (ja) * | 2015-06-15 | 2019-06-05 | キヤノン株式会社 | 放射線撮像装置及びその制御方法 |
US11350049B2 (en) * | 2020-11-02 | 2022-05-31 | Omnivision Technologies, Inc. | Dark current calibration method and associated pixel circuitry |
Family Cites Families (23)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH01147973A (ja) * | 1987-12-04 | 1989-06-09 | Hitachi Ltd | 固体撮像装置 |
JP2787710B2 (ja) * | 1989-06-07 | 1998-08-20 | 株式会社ニコン | 光電変換装置の信号補正装置 |
KR100202343B1 (ko) * | 1990-03-13 | 1999-06-15 | 이데이 노부유끼 | 셰이딩 보정 장치 |
US5047863A (en) * | 1990-05-24 | 1991-09-10 | Polaroid Corporation | Defect correction apparatus for solid state imaging devices including inoperative pixel detection |
DE4227733A1 (de) * | 1991-08-30 | 1993-03-04 | Allen Bradley Co | Konfigurierbarer cachespeicher und datenverarbeitungssystem mit einem derartigen speicher |
US5479206A (en) * | 1992-02-04 | 1995-12-26 | Fuji Photo Film Co., Ltd. | Imaging system, electronic camera, computer system for controlling said electronic camera, and methods of controlling same |
US5608455A (en) * | 1992-07-30 | 1997-03-04 | Fuji Photo Film Co., Ltd | Interline transfer CCD image sensor with reduced dark current |
US5365269A (en) * | 1992-10-22 | 1994-11-15 | Santa Barbara Instrument Group, Inc. | Electronic camera with automatic image tracking and multi-frame registration and accumulation |
JP2984494B2 (ja) * | 1992-12-11 | 1999-11-29 | オリンパス光学工業株式会社 | 固体撮像素子の暗時出力補正装置 |
JP2817107B2 (ja) * | 1992-12-28 | 1998-10-27 | キヤノン株式会社 | 画像入力装置 |
JP3297946B2 (ja) * | 1993-03-23 | 2002-07-02 | ソニー株式会社 | 電荷転送装置 |
JP3014895B2 (ja) * | 1993-06-02 | 2000-02-28 | 株式会社日立製作所 | ビデオカメラ |
US5452004A (en) * | 1993-06-17 | 1995-09-19 | Litton Systems, Inc. | Focal plane array imaging device with random access architecture |
JP3318905B2 (ja) * | 1993-12-03 | 2002-08-26 | ソニー株式会社 | 電荷転送装置 |
JPH07226911A (ja) * | 1994-02-15 | 1995-08-22 | Eastman Kodak Japan Kk | 電子スチルカメラ |
KR960003298A (ko) * | 1994-06-02 | 1996-01-26 | 이헌조 | 캠코더의 촬상관 결점보상 방법 및 장치 |
JPH0851571A (ja) * | 1994-08-03 | 1996-02-20 | Olympus Optical Co Ltd | 電子的撮像装置 |
JPH0918793A (ja) * | 1995-06-26 | 1997-01-17 | Nikon Corp | 撮像装置 |
JPH0923358A (ja) * | 1995-07-07 | 1997-01-21 | Olympus Optical Co Ltd | ビデオカメラ |
US5568192A (en) * | 1995-08-30 | 1996-10-22 | Intel Corporation | Method and apparatus for processing digital video camera signals |
JPH09149316A (ja) * | 1995-11-22 | 1997-06-06 | Sony Corp | 撮像装置及び撮像装置の調整方法 |
JPH09312791A (ja) * | 1996-05-21 | 1997-12-02 | Hitachi Ltd | 電子カメラおよび電子カメラシステム |
GB2317522B (en) * | 1996-09-12 | 2000-09-27 | Vsli Vision Limited | Low noise operation of an image sensor |
-
1997
- 1997-12-05 US US08/985,575 patent/US6061092A/en not_active Expired - Lifetime
-
1998
- 1998-11-09 EP EP98956688A patent/EP1034664B1/en not_active Expired - Lifetime
- 1998-11-09 JP JP2000524933A patent/JP4080691B2/ja not_active Expired - Fee Related
- 1998-11-09 KR KR1020007005973A patent/KR100344748B1/ko not_active IP Right Cessation
- 1998-11-09 AU AU13149/99A patent/AU1314999A/en not_active Abandoned
- 1998-11-09 DE DE69817606T patent/DE69817606T2/de not_active Expired - Lifetime
- 1998-11-09 WO PCT/US1998/023901 patent/WO1999030506A1/en active IP Right Grant
- 1998-12-02 TW TW087119982A patent/TW420957B/zh not_active IP Right Cessation
Also Published As
Publication number | Publication date |
---|---|
EP1034664A4 (en) | 2002-01-02 |
KR100344748B1 (ko) | 2002-07-20 |
DE69817606T2 (de) | 2004-06-17 |
EP1034664A1 (en) | 2000-09-13 |
WO1999030506A1 (en) | 1999-06-17 |
US6061092A (en) | 2000-05-09 |
EP1034664B1 (en) | 2003-08-27 |
AU1314999A (en) | 1999-06-28 |
KR20010032691A (ko) | 2001-04-25 |
JP2001526507A (ja) | 2001-12-18 |
JP4080691B2 (ja) | 2008-04-23 |
DE69817606D1 (de) | 2003-10-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
TW420957B (en) | Method and apparatus for dark frame cancellation for CMOS sensor-based tethered video peripherals | |
EP2015566B1 (en) | Method and apparatus for compensating handtrembling of camera | |
RU2619721C2 (ru) | Устройство захвата изображений, система захвата изображений и способ управления для устройства захвата изображений | |
KR20140128885A (ko) | 전력 효율적인 이미지 감지 장치, 이미지 감지 장치의 작동 방법 및 눈/시선 추적 시스템 | |
US8120691B2 (en) | Image capturing appatatus and method for use in a mobile terminal | |
JP2003348455A (ja) | イメージ・キャプチャ・デバイスの暗電流を適応的に補償するためのシステムおよび方法 | |
JP2017534212A (ja) | ピクセル感度及びダイナミックレンジを高める方法及び装置 | |
JP6006083B2 (ja) | 撮像装置および撮像方法 | |
US8084730B2 (en) | Dual mode source follower for low and high sensitivity applications | |
CN110806912B (zh) | 界面处理方法及相关设备 | |
JP4533171B2 (ja) | 処理装置及び処理方法 | |
JP5423204B2 (ja) | 撮像装置 | |
CN111064910B (zh) | 影像感测方法与影像感测系统 | |
JP3802596B2 (ja) | 電子カメラ | |
JP3631034B2 (ja) | ディジタルカメラ | |
JP2010118963A (ja) | 撮像装置及びその制御方法及びプログラム | |
JP5359299B2 (ja) | 撮像装置 | |
JP2002281395A (ja) | 撮像装置 | |
JP2011182304A (ja) | 撮像装置及びその制御方法 | |
JP6439563B2 (ja) | 撮像装置、撮像方法、プログラム | |
JP2001036820A (ja) | 撮像装置 | |
JP2002185857A (ja) | 撮像装置 | |
JP2002281394A (ja) | 撮像装置 | |
JP2002281392A (ja) | 撮像装置 | |
JP2001218105A (ja) | 撮像装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
GD4A | Issue of patent certificate for granted invention patent | ||
MM4A | Annulment or lapse of patent due to non-payment of fees |