TWI542224B - 影像訊號處理方法以及影像訊號處理裝置 - Google Patents
影像訊號處理方法以及影像訊號處理裝置 Download PDFInfo
- Publication number
- TWI542224B TWI542224B TW103132661A TW103132661A TWI542224B TW I542224 B TWI542224 B TW I542224B TW 103132661 A TW103132661 A TW 103132661A TW 103132661 A TW103132661 A TW 103132661A TW I542224 B TWI542224 B TW I542224B
- Authority
- TW
- Taiwan
- Prior art keywords
- color filter
- image
- filter array
- signal processing
- image signal
- Prior art date
Links
- 238000003672 processing method Methods 0.000 title claims description 20
- 238000012545 processing Methods 0.000 claims description 88
- 238000000034 method Methods 0.000 claims description 35
- 230000008569 process Effects 0.000 claims description 14
- 238000007781 pre-processing Methods 0.000 claims description 9
- 238000006243 chemical reaction Methods 0.000 claims description 5
- 238000001914 filtration Methods 0.000 claims description 4
- 238000010586 diagram Methods 0.000 description 6
- 230000008901 benefit Effects 0.000 description 5
- 238000013461 design Methods 0.000 description 5
- 238000012805 post-processing Methods 0.000 description 5
- 238000012937 correction Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 230000016776 visual perception Effects 0.000 description 2
- 238000003705 background correction Methods 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 230000002708 enhancing effect Effects 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 238000009499 grossing Methods 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000004321 preservation Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
- G06T3/4015—Image demosaicing, e.g. colour filter arrays [CFA] or Bayer patterns
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/70—Denoising; Smoothing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/10—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
- H04N23/12—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths with one sensor only
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/40—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled
- H04N25/46—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled by combining or binning pixels
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Image Processing (AREA)
Description
本發明所揭露之實施例係相關於影像訊號處理，尤指一種同時參考原始色彩濾波陣列影像以及像素合併之色彩濾波陣列影像的影像訊號處理方法以及相關裝置。
在一般影像訊號處理的實作上，色彩濾波陣列影像(Color Filter Array,CFA)主要會受光子雜訊(photon noise)、無光電流雜訊(dark current noise)和讀出雜訊(readout noise)等若干因素干擾影像品質。為了去除/降低色彩濾波陣列影像中的雜訊，通常會在貝爾色彩濾波陣列影像域或後續轉換的色彩域進行去雜訊處理。
習知的技術例如美國專利US8295631B2，揭露了一種在貝爾色彩濾波陣列中的像素數值技術，其係根據區域邊緣響應(local edge response)來針對亮度(luminance)與彩度(chrominance)進行加權平均估計以去除雜訊。然而，在雜訊程度未知，且硬體線緩衝器(line buffer)資源有限的情況下，此一去雜訊方法有其瓶頸，效果亦受到限制，並且可能附帶影像過度模糊或失真的副作用。
此外，習知的技術另有如美國專利USRE44482E1，揭露了一種具有選擇電路(selection circuitry)來選擇貯存電荷的主動式互補式金屬氧化物
半導體(CMOS)影像感測器，此類型具有貯存電荷能力來合併像素(pixel binning)的感測器，能夠減少讀出雜訊與所需的曝光時間，不過由於像素經過合併輸出，影像的解析度勢必會受到影響。有鑑於此，此領域亟需一種新穎的技術來改善習知技術的種種問題。
根據本發明的實施例，揭露一種同時參考原始色彩濾波陣列影像以及像素合併之色彩濾波陣列影像的影像訊號處理方法以及相關裝置，以解決上述問題。
依據本發明的第一示範性實施例，揭露一種影像訊號處理方法，包含有：接收一原始色彩濾波陣列影像以及一像素合併之色彩濾波陣列影像；使用一運算單元來計算該像素合併之色彩濾波陣列影像的一特定資訊；以及依據該特定資訊來處理該原始色彩濾波陣列影像。
依據本發明的第二示範性實施例，揭露一種影像訊號處理裝置，包含有一輸入端、一運算單元以及一處理單元。其中該輸入端係用來接收一原始色彩濾波陣列影像以及一像素合併之色彩濾波陣列影像。該運算單元係用來計算該像素合併之色彩濾波陣列影像的一特定資訊。該處理單元係用來依據該特定資訊處理該原始色彩濾波陣列影像。
本發明的精神係在於利用像素合併技術的優點，改善現行數位影像訊號處理流程(Image Signal Processing,ISP)的方法架構，並能有效地降低輸出影像的雜訊且不損失解析度。在軟/硬體的實作上，本發明能夠藉由提高影像中紋理特徵的可辨識性，來提升視覺的感受。其最大的好處是可以和現有的影像訊號處理架構進行整合，而非完全摒棄原有的架構，因此可節省軟/硬體的設計成本。
100‧‧‧影像處理系統
102‧‧‧影像感測單元
104‧‧‧色彩內插處理單元
106、300、600‧‧‧影像訊號處理裝置
302‧‧‧前處理單元
304‧‧‧貝爾域去雜訊單元
306、308‧‧‧色彩內插單元
310‧‧‧三原色域去雜訊單元
312‧‧‧後處理單元
400、500、700‧‧‧流程
402~412、502~512、702~714‧‧‧步驟
610‧‧‧亮度-彩度域邊緣加強單元
614、616‧‧‧色域轉換單元
第1圖為本發明影像訊號處理裝置在影像處理系統中的示意圖。
第2圖為上述像素合併操作的示意圖。
第3圖為本發明影像訊號處理裝置的第一實施例的示意圖。
第4圖為本發明貝爾域去雜訊方法的實施例的流程圖。
第5圖為本發明色彩內插方法的實施例的流程圖。
第6圖為本發明影像訊號處理裝置的第二實施例的示意圖。
第7圖為本發明亮度-彩度域邊緣加強方法的實施例的流程圖。
在說明書及後續的申請專利範圍當中使用了某些詞彙來指稱特定的元件。所屬領域中具有通常知識者應可理解，製造商可能會用不同的名詞來稱呼同樣的元件。本說明書及後續的申請專利範圍並不以名稱的差異來作為區分元件的方式，而是以元件在功能上的差異來作為區分的準則。在通篇說明書及後續的請求項當中所提及的「包含」係為一開放式的用語，故應解釋成「包含但不限定於」。另外，「耦接」一詞在此係包含任何直接及間接的電氣連接手段。因此，若文中描述一第一裝置耦接於一第二裝置，則代表該第一裝置可直接電氣連接於該第二裝置，或透過其他裝置或連接手段間接地電氣連接至該第二裝置。
由於在色彩濾波陣列的覆蓋之下，感光元件中每一像素僅會紀錄單一色彩，加上類比訊號在輸出至影像訊號處理流程之前，往往會受到各種雜訊(例如讀出雜訊)的干擾，因此可能會造成影像訊號處理的錯誤，進而產生人眼可察覺的失真。特別是在低光源環境下所拍攝的影像，其雜訊尤甚。本發明的精神係在於利用像素合併技術的優點，改善現行數位影像訊號處理
流程(Image Signal Processing,ISP)的方法架構，並能有效地降低輸出影像的雜訊且不損失邊緣解析度。在軟/硬體的實作上，本發明能夠藉由提高影像中紋理特徵的可辨識性，來提升視覺的感受。其最大的好處是可以和現有的影像訊號處理架構進行整合，而非完全摒棄原有的架構，因此可節省軟/硬體的設計成本。
第1圖為本發明影像訊號處理裝置在影像處理系統中的示意圖。在影像處理系統100中，一影像感測單元102會分別輸出一原始色彩濾波陣列影像I以及一像素合併色彩濾波陣列影像。其中該像素合併色彩濾波陣列影像和原始色彩濾波陣列影像I係分別以不同解析度來顯示相同影像畫面。在實務上，影像感測單元102亦可以係僅提供原始色彩濾波陣列影像I，並在影像感測單元102之外另計算出該像素合併色彩濾波陣列影像。由於該像素合併色彩濾波陣列影像的大小會小於原始色彩濾波陣列影像I，因此在本實施例中，會先經過一色彩內插處理單元104來對該像素合併色彩濾波陣列影像進行一內插處理，以將其大小還原至和原始色彩濾波陣列影像I相同，另外，色彩內插處理單元104可以是任何種類的內插演算法，例如雙線性內插(bilinear interpolation)。色彩內插處理單元104會輸出一色彩濾波陣列影像IB，並連同原始色彩濾波陣列影像I一起輸入至一影像訊號處理裝置106。請注意，色彩內插處理單元104亦可併入影像感測單元102或是影像訊號處理裝置106之中，也就是說，任何實質上相同的配置皆屬於本發明的範圍之中。本發明主要的技術特徵在於影像訊號處理裝置106，其細節容後再述。
第2圖為上述像素合併操作的示意圖。以貝爾型式(Bayer pattern)的色彩濾波陣列為例，其中每2×2個像素可被視為基本貝爾型式單位。每個基本貝爾型式單位包含有四個色彩頻道(color channel)。如第2子圖(a)所示，在對原始色彩濾波陣列進行像素合併操作時，可將4×4個像素中的
四個相同色彩頻道(如四個Gr)所感測到的電荷，合併成為一個超級像素(superpixel)，以得到第2子圖(b)所示的像素合併色彩濾波陣列。而整體的解析度將會由W×H降低為W/2×H/2。然而由於讀出次數以及每個像素平均受讀出雜訊干擾的程度都被降低，因此訊號雜訊比(Signal-to-Noise Ratio,SNR)可以被提升，達到減少曝光時間的需求。也就是說，雖然像素合併色彩濾波陣列的解析度較原始的色彩濾波陣列低，但其雜訊也較低，本發明即是同時利用原始的色彩濾波陣列的高解析度，加上像素合併色彩濾波陣列的低雜訊的兩種好處來進行影像訊號處理。應注意的是，本發明對於所述像素合併操作所採用的具體實施方式並不加以限定，且本發明亦不限定色彩濾波的形式，舉例來說，本發明亦適用於變化式貝爾形式、斜條形式或亂數形式等不同色彩濾波方式。
第3圖為本發明影像訊號處理裝置的第一實施例的示意圖。影像訊號處理裝置300會依據原始色彩濾波陣列影像I和色彩濾波陣列影像IB來產生輸出影像IO。一般來說，一前處理單元302會先針對原始色彩濾波陣列影像I和色彩濾波陣列影像IB進行包含如鏡頭暗影校正(Lens Shading Correction)、自動白平衡(Auto White Balance)等處理。而後處理單元312包含如色彩校正(Color Calibration)、伽馬修正(Gamma Correction)、綠色非均勻性校正(GbGr Unbalance Correction)、壞點補償(Dead Pixel Compensation)等。前處理單元302和後處理單元312的相關技術細節非本發明的重點，故在此不多作贅述，本發明不限定其作法，甚至不限定前處理單元302和後處理單元312為必要元件。原始色彩濾波陣列影像I和色彩濾波陣列影像IB經前處理模組302處理後會分別輸出為前處理後原始色彩濾波陣列影像Ipre和前處理後色彩濾波陣列影像IBpre。本發明的精髓在於使用前處理後色彩濾波陣列影像IBpre來作為參考，以幫助一貝爾域去雜訊單元304、一色彩內插單元306以及一三原色域去雜訊單元310進行相對應處理，其所
分別得到的結果會優於不參考前處理後色彩濾波陣列影像IBpre時所得到的結果。貝爾域去雜訊單元304、色彩內插單元306以及三原色域去雜訊單元310的相關細節將敘述如後。
第4圖為本發明貝爾域去雜訊方法的實施例的流程圖。倘若大體上可達到相同的結果，並不一定需要按照第4圖所示之流程中的步驟順序來進行，且第4圖所示之步驟不一定要連續進行，亦即其他步驟亦可插入其中。此外，第4圖中的某些步驟可根據不同實施例或設計需求省略之。當貝爾域去雜訊方法400應用於第3圖的貝爾域去雜訊單元304時，可降低前處理後原始色彩濾波陣列影像Ipre的雜訊。一般來說，前處理後原始色彩濾波陣列影像Ipre中的像素內容可以被分為：邊緣像素部分以及非邊緣像素部分，因此首先要判斷出前處理後原始色彩濾波陣列影像Ipre中的每一像素係屬於邊緣像素部分還是非邊緣像素部分。由於前處理後色彩濾波陣列影像IBpre具有低雜訊的特性，也就是具有較高的可信度，因此，在步驟404中，貝爾域去雜訊方法400會使用前處理後色彩濾波陣列影像IBpre來作為計算邊緣資訊時的參考以及算出一邊緣資訊，而在步驟406則可依據步驟404所計算出之該邊緣資訊來判斷每一像素係屬於邊緣像素還是非邊緣像素。應注意的是，判斷邊緣像素的機制可以係基於部分像素或是整體影像來進行。
由於前處理後原始色彩濾波陣列影像Ipre對於邊緣的保存較為完整，因此對於邊緣像素來說，步驟408會將前處理後原始色彩濾波陣列影像Ipre輸入貝爾域去雜訊單元304中的一雜訊濾波器(未顯示於圖中)，以針對Ipre進行去雜訊。具體的去雜訊方式，舉例來說，可以係以估計的邊緣方向來與鄰近同色彩頻道的像素進行中間值濾波(median filtering)，然而本發明不以此限。對屬於非邊緣像素來說，步驟410會將前處理後色彩濾波陣列影像IBpre輸入貝爾域去雜訊單元304中的該雜訊濾波器進行去雜訊，並據以針對
Ipre進行去雜訊，減少人眼較敏感的非邊緣像素上雜訊(即平滑區)。除此之外，本實施例中的步驟404亦可變化為計算受雜訊干擾程度、或是計算紋理紛雜程度等其它性質的指標，並相對應地修改後續的步驟。
對於第3圖的色彩內插單元306，也可以採用和貝爾域去雜訊方法400相仿的方式來進行處理。由於感測器輸出的原始色彩濾波陣列影像I中，每一像素都只有記錄紅色、綠色或藍色的色彩頻道資訊，因此需要色彩內插處理來將每一像素所缺少的另外兩個色彩頻道資訊補足。第5圖為本發明色彩內插方法的實施例的流程圖。倘若大體上可達到相同的結果，並不一定需要按照第5圖所示之流程中的步驟順序來進行，且第5圖所示之步驟不一定要連續進行，亦即其他步驟亦可插入其中。此外，第5圖中的某些步驟可根據不同實施例或設計需求省略之。色彩內插方法500可應用於第3圖的色彩內插單元306以降低雜訊。在步驟504中，會參考前處理後色彩濾波陣列影像IBpre來計算經貝爾域去雜訊單元304處理後所輸出的像素內容的一邊緣資訊。而在步驟506中，會判斷該邊緣資訊是否為如水平、垂直等特定方向的邊緣資訊。若是，則會進入步驟508來將經貝爾域去雜訊單元304處理後所輸出的像素內容輸入色彩內插單元306，以進行保存邊緣方向性的色彩內插處理，藉以防止影像失真；反之則會進入步驟510，來將前處理後色彩濾波陣列影像IBpre輸入色彩內插單元306，以進行不保存邊緣方向性(即平滑區)的色彩內插處理，藉以降低平滑區的雜訊。除此之外，本實施例中的步驟504亦可變化為計算受雜訊干擾程度、或是計算紋理紛雜程度等其它性質的指標，並相對應地修改後續的步驟。
對於第3圖的三原色域去雜訊單元310，也可以採用和貝爾域去雜訊方法400相仿的方式，來參考一色彩內插單元308的輸出來對色彩內插單元306的輸出進行內插處理。熟習此領域者在閱讀過上述實施例後，應能
應用本發明原理來類比出適用於三原色域去雜訊單元310的實施方式，故在此便不多作贅述。
第6圖為本發明影像訊號處理裝置的第二實施例的示意圖。和影像訊號處理裝置300相似，影像訊號處理裝置600會依據原始色彩濾波陣列影像I和色彩濾波陣列影像IB來產生輸出影像IO。不同的是，在影像訊號處理裝置600中，會利用色域轉換單元614和616來將貝爾域轉換為亮度-彩度域(YUV)，並分別輸出一原始亮度-彩度域影像IYUV以及一合併亮度-彩度域影像IBYUV。隨後，一亮度-彩度域邊緣加強單元610會參考合併亮度-彩度域影像IBYUV來補強原始亮度-彩度域影像IYUV中的邊緣部分，然後將結果輸出至後處理單元312。其中的具體方法請參考第7圖。
第7圖為本發明亮度-彩度域邊緣加強方法的實施例的流程圖。倘若大體上可達到相同的結果，並不一定需要按照第7圖所示之流程中的步驟順序來進行，且第7圖所示之步驟不一定要連續進行，亦即其他步驟亦可插入其中。此外，第7圖中的某些步驟可根據不同實施例或設計需求省略之。亮度-彩度域邊緣加強方法700可應用於第6圖的亮度-彩度域邊緣加強單元610。在步驟704中，會參考合併亮度-彩度域影像IBYUV來計算原始亮度-彩度域影像IYUV中的Y頻道的一邊緣資訊。而在步驟706中，會依據該邊緣資訊判斷對應像素是否為邊緣區域。若是，則會進入步驟708來進一步判斷對應像素所屬邊緣區域是否為亮邊(亮度較高)。若屬於亮邊，則亮度-彩度域邊緣加強單元610會針對原始亮度-彩度域影像IYUV進行加強亮邊對比度的處理，例如提高原始亮度-彩度域影像IYUV的亮度；若不屬於亮邊(亮度較低，即屬於暗邊)，則亮度-彩度域邊緣加強單元610會針對原始亮度-彩度域影像IYUV進行加強暗邊對比度的處理，例如降低原始亮度-彩度域影像IYUV的亮度。藉由如此處理，可更加提升邊緣對比度和畫面銳利度，同時減少錯將雜訊增
強的情況。以上實施例並不受限於亮度-彩度域，本發明亦可應用在其他具有亮度成分的色彩域，例如色調-飽和度-強度域(HSI)、色調-飽和度-亮度域(HSL)、色調-飽和度-值域(HSV)和色調-飽和度-亮度域(HSB)等。
以上所述僅為本發明之較佳實施例，凡依本發明申請專利範圍所做之均等變化與修飾，皆應屬本發明之涵蓋範圍。
100‧‧‧影像處理系統
102‧‧‧影像感測單元
104‧‧‧色彩內插處理單元
106‧‧‧影像訊號處理裝置
Claims (24)
- 一種影像訊號處理方法，包含有：接收一原始色彩濾波陣列影像以及一像素合併之色彩濾波陣列影像；使用一運算單元來計算該像素合併之色彩濾波陣列影像的一特定資訊；以及依據該特定資訊來處理該原始色彩濾波陣列影像。
- 如申請專利範圍第1項所述的影像訊號處理方法，其中該像素合併之色彩濾波陣列影像的影像大小係小於該原始色彩濾波陣列影像，以及該影像訊號處理方法另包含有：對該像素合併之色彩濾波陣列影像進行一內插處理，使經過該內插處理之該像素合併之色彩濾波陣列影像的影像大小和該原始色彩濾波陣列影像的影像大小相同；其中計算該像素合併之色彩濾波陣列影像的該特定資訊包含有：計算該內插處理之該像素合併之色彩濾波陣列影像的該特定資訊。
- 如申請專利範圍第1項所述的影像訊號處理方法，另包含有：對從該影像感測單元所接收之該原始色彩濾波陣列影像和該像素合併之色彩濾波陣列影像進行一前處理。
- 如申請專利範圍第1項所述的影像訊號處理方法，其中該原始色彩濾波陣列影像係貝爾型式。
- 如申請專利範圍第1項所述的影像訊號處理方法，另包含有：對該原始色彩濾波陣列影像和該像素合併之色彩濾波陣列影像進行一色域轉換處理。
- 如申請專利範圍第1項所述的影像訊號處理方法，其中依據該特定資訊來處理該原始色彩濾波陣列影像的步驟包含：比較該特定資訊與一臨界值來產生一比較結果；以及依據該比較結果來處理該原始色彩濾波陣列影像。
- 如申請專利範圍第6項所述的影像訊號處理方法，其中依據該比較結果來處理該原始色彩濾波陣列影像的步驟包含：若該比較結果指示出該特定資訊大於該臨界值，則依據該原始色彩濾波陣列影像來對該原始色彩濾波陣列影像進行一第一特定處理；以及若該比較結果指示出該特定資訊不大於該臨界值，則依據該像素合併之色彩濾波陣列影像來對該原始色彩濾波陣列影像進行一第二特定處理。
- 如申請專利範圍第7項所述的影像訊號處理方法，其中該第一特定處理係一邊緣去雜訊處理，以及該第二特定處理係一非邊緣去雜訊處理。
- 如申請專利範圍第7項所述的影像訊號處理方法，其中該第一特定處理係一邊緣內插處理，以及該第二特定處理係一非邊緣內插處理。
- 如申請專利範圍第6項所述的影像訊號處理方法，其中依據該比較結果來處理該原始色彩濾波陣列影像的步驟包含：若該比較結果指示出該特定資訊大於該臨界值，則依據該原始色彩濾波陣列影像來對該原始色彩濾波陣列影像進行一特定處理。
- 如申請專利範圍第10項所述的影像訊號處理方法，其中該特定處理係一 邊緣加強處理。
- 如申請專利範圍第1項所述的影像訊號處理方法，其中該特定資訊係一邊緣資訊。
- 如申請專利範圍第1項所述的影像訊號處理方法，其中該特定資訊係一紋理資訊。
- 如申請專利範圍第1項所述的影像訊號處理方法，其中該特定資訊係一雜訊程度資訊。
- 如申請專利範圍第1項所述的影像訊號處理方法，其中該特定資訊係一邊緣亮度資訊。
- 一種影像訊號處理裝置，包含有：一輸入端，用來接收一原始色彩濾波陣列影像以及一像素合併之色彩濾波陣列影像；一運算單元，用來計算該像素合併之色彩濾波陣列影像的一特定資訊；以及一處理單元，用來依據該特定資訊處理該原始色彩濾波陣列影像。
- 如申請專利範圍第16項所述的影像訊號處理裝置，另包含有：一色域轉換單元，用來對從該影像感測單元所接收之該原始色彩濾波陣列影像和該像素合併之色彩濾波陣列影像進行一色域轉換處理。
- 如申請專利範圍第16項所述的影像訊號處理裝置，其中該處理單元比較該特定資訊與一臨界值來產生一比較結果，若該比較結果指示出該特定資 訊大於該臨界值，則依據該原始色彩濾波陣列影像來對該原始色彩濾波陣列影像進行一第一特定處理，以及若該比較結果指示出該特定資訊不大於該臨界值，則依據該像素合併之色彩濾波陣列影像來對該原始色彩濾波陣列影像來進行一第二特定處理。
- 如申請專利範圍第18項所述的影像訊號處理裝置，其中該第一特定處理係一邊緣去雜訊處理，以及該第二特定處理係一非邊緣去雜訊處理。
- 如申請專利範圍第18項所述的影像訊號處理裝置，其中該第一特定處理係一邊緣內插處理，以及該第二特定處理係一非邊緣內插處理。
- 如申請專利範圍第16項所述的影像訊號處理裝置，其中該處理單元比較該特定資訊與一臨界值來產生一比較結果，若該比較結果指示出該特定資訊大於該預定值，則依據該原始色彩濾波陣列影像來對該原始色彩濾波陣列影像進行一特定處理。
- 如申請專利範圍第21項所述的影像訊號處理裝置，其中該特定處理係一邊緣加強處理。
- 如申請專利範圍第16項所述的影像訊號處理裝置，其中該特定資訊係一邊緣資訊。
- 如申請專利範圍第16項所述的影像訊號處理裝置，其中該特定資訊係一邊緣亮度資訊。
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| TW103132661A TWI542224B (zh) | 2014-09-22 | 2014-09-22 | 影像訊號處理方法以及影像訊號處理裝置 |
| US14/859,373 US9779476B2 (en) | 2014-09-22 | 2015-09-21 | Image signal processing method and image signal processor for noise reduction |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| TW103132661A TWI542224B (zh) | 2014-09-22 | 2014-09-22 | 影像訊號處理方法以及影像訊號處理裝置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| TW201613347A TW201613347A (en) | 2016-04-01 |
| TWI542224B true TWI542224B (zh) | 2016-07-11 |
Family
ID=55526192
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| TW103132661A TWI542224B (zh) | 2014-09-22 | 2014-09-22 | 影像訊號處理方法以及影像訊號處理裝置 |
Country Status (2)
| Country | Link |
|---|---|
| US (1) | US9779476B2 (zh) |
| TW (1) | TWI542224B (zh) |
Families Citing this family (14)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US10178359B2 (en) | 2016-04-01 | 2019-01-08 | Stmicroelectronics (Grenoble 2) Sas | Macropixel processing system, method and article |
| US9898831B2 (en) * | 2016-04-01 | 2018-02-20 | Stmicroelectronics (Grenoble 2) Sas | Macropixel processing system, method and article |
| US9811920B2 (en) | 2016-04-01 | 2017-11-07 | Stmicroelectronics (Grenoble 2) Sas | Macropixel processing system, method and article |
| US10068342B2 (en) * | 2016-04-01 | 2018-09-04 | Stmicroelectronics (Grenoble 2) Sas | Macropixel processing system, method and article |
| TWI584642B (zh) * | 2016-04-19 | 2017-05-21 | 瑞昱半導體股份有限公司 | 影像濾波裝置及其影像濾波方法 |
| TWI645706B (zh) * | 2017-05-08 | 2018-12-21 | 瑞昱半導體股份有限公司 | 影像處理方法及影像處理裝置 |
| CN108154543B (zh) * | 2018-01-15 | 2021-12-14 | 网易（杭州）网络有限公司 | 确定游戏贴图尺寸的方法、装置及存储介质 |
| TWI664605B (zh) * | 2018-08-16 | 2019-07-01 | 瑞昱半導體股份有限公司 | 色彩重建裝置與方法 |
| US10764507B1 (en) * | 2019-04-18 | 2020-09-01 | Kneron (Taiwan) Co., Ltd. | Image processing system capable of generating a snapshot image with high image quality by using a zero-shutter-lag snapshot operation |
| KR20210090476A (ko) * | 2020-01-10 | 2021-07-20 | 삼성전자주식회사 | 단일 카메라로 줌 시나리오에서 화질 향상 방법과 이를 포함하는 전자장치 |
| US11265474B2 (en) * | 2020-03-16 | 2022-03-01 | Qualcomm Incorporated | Zoom setting adjustment for digital cameras |
| US11445200B2 (en) * | 2020-05-12 | 2022-09-13 | Alibaba Group Holding Limited | Method and system for processing video content |
| KR20220043571A (ko) * | 2020-09-29 | 2022-04-05 | 에스케이하이닉스 주식회사 | 이미지 센싱 장치 및 그의 동작 방법 |
| CN114331899A (zh) * | 2021-12-31 | 2022-04-12 | 上海宇思微电子有限公司 | 一种图像降噪方法及装置 |
Family Cites Families (12)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP4316170B2 (ja) * | 2001-09-05 | 2009-08-19 | 富士フイルム株式会社 | 画像データ作成方法および装置 |
| US20050281458A1 (en) | 2004-06-16 | 2005-12-22 | Eastman Kodak Company | Noise-reducing a color filter array image |
| US8482618B2 (en) | 2005-02-22 | 2013-07-09 | Hewlett-Packard Development Company, L.P. | Reduction of motion-induced blur in images |
| US8184905B2 (en) * | 2005-12-29 | 2012-05-22 | Mtekvision Co., Ltd. | Apparatus for color interpolation using adjustable threshold |
| US8109634B2 (en) * | 2008-03-05 | 2012-02-07 | Tamir Gil | Snapshot spectral imaging of the eye |
| US8417046B1 (en) * | 2008-11-10 | 2013-04-09 | Marvell International Ltd. | Shadow and highlight image enhancement |
| KR100992362B1 (ko) * | 2008-12-11 | 2010-11-04 | 삼성전기주식회사 | 컬러 보간 장치 |
| US8035698B2 (en) * | 2009-01-21 | 2011-10-11 | Seiko Epson Corporation | Joint automatic demosaicking and white balancing |
| US8295631B2 (en) * | 2010-01-29 | 2012-10-23 | Eastman Kodak Company | Iteratively denoising color filter array images |
| KR101822655B1 (ko) * | 2011-06-21 | 2018-01-29 | 삼성전자주식회사 | 카메라를 이용한 물체 인식 방법 및 이를 위한 카메라 시스템 |
| US9270875B2 (en) * | 2011-07-20 | 2016-02-23 | Broadcom Corporation | Dual image capture processing |
| WO2013187127A1 (ja) | 2012-06-13 | 2013-12-19 | 富士フイルム株式会社 | 画像処理システム、送信側装置および受信側装置 |
-
2014
- 2014-09-22 TW TW103132661A patent/TWI542224B/zh active
-
2015
- 2015-09-21 US US14/859,373 patent/US9779476B2/en active Active
Also Published As
| Publication number | Publication date |
|---|---|
| US20160086309A1 (en) | 2016-03-24 |
| US9779476B2 (en) | 2017-10-03 |
| TW201613347A (en) | 2016-04-01 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| TWI542224B (zh) | 影像訊號處理方法以及影像訊號處理裝置 | |
| US20230217116A1 (en) | Merging multiple exposures to generate a high dynamic range image | |
| CN102077572B (zh) | 用于在成像系统中防止运动模糊和重影的方法及装置 | |
| JP4730412B2 (ja) | 画像処理装置及び画像処理方法 | |
| US8339516B2 (en) | Noise reduction method and unit for an image frame | |
| US8471932B2 (en) | Spatial filtering for image signal processing | |
| US8363123B2 (en) | Image pickup apparatus, color noise reduction method, and color noise reduction program | |
| US8175378B2 (en) | Method and system for noise management for spatial processing in digital image/video capture systems | |
| EP2368226B1 (en) | High dynamic range image combining | |
| US8982232B2 (en) | Image processing apparatus and image processing method | |
| Kim et al. | A novel approach for denoising and enhancement of extremely low-light video | |
| KR101023944B1 (ko) | 영상 처리 장치 및 그 방법 | |
| KR20190003524A (ko) | 컬러 및 모노 이미지들의 쉬프트 및 매칭 융합 | |
| CN107395991B (zh) | 图像合成方法、装置、计算机可读存储介质和计算机设备 | |
| JP2009526448A (ja) | 画像情報をフィルタリングするための適応性画像フィルタ | |
| JP2010500659A (ja) | イメージ情報にフィルタをかけるための適応空間イメージフィルタ | |
| US8189066B2 (en) | Image processing apparatus, image processing method, and computer-readable medium | |
| US9860456B1 (en) | Bayer-clear image fusion for dual camera | |
| KR100607805B1 (ko) | 이미지센서에서의 다크 컨디션 판별 방법 및 컬러 보정 방법 | |
| JP5535443B2 (ja) | 画像処理装置 | |
| US10530996B2 (en) | Electronic device | |
| US20210366084A1 (en) | Deblurring process for digital image processing | |
| Kachatkou et al. | Dynamic range enhancement algorithms for CMOS sensors with non-destructive readout | |
| JP2023111637A (ja) | 画像処理装置及び方法、及び撮像装置 | |
| KR100958175B1 (ko) | 영상 처리 장치 및 그 방법 |