TW200530949A - Image data processing in color spaces - Google Patents

Image data processing in color spaces Download PDF

Info

Publication number
TW200530949A
TW200530949A TW094102929A TW94102929A TW200530949A TW 200530949 A TW200530949 A TW 200530949A TW 094102929 A TW094102929 A TW 094102929A TW 94102929 A TW94102929 A TW 94102929A TW 200530949 A TW200530949 A TW 200530949A
Authority
TW
Taiwan
Prior art keywords
space
color
patent application
scope
item
Prior art date
Application number
TW094102929A
Other languages
English (en)
Inventor
Wei-Feng Huang
Original Assignee
Omnivision Tech Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Omnivision Tech Inc filed Critical Omnivision Tech Inc
Publication of TW200530949A publication Critical patent/TW200530949A/zh

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/64Circuits for processing colour signals
    • H04N9/67Circuits for processing colour signals for matrixing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/002D [Two Dimensional] image generation
    • G06T11/001Texturing; Colouring; Generation of texture or colour
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/46Colour picture communication systems
    • H04N1/56Processing of colour picture signals
    • H04N1/60Colour correction or control
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/46Colour picture communication systems
    • H04N1/64Systems for the transmission or the storage of the colour picture signal; Details therefor, e.g. coding or decoding means therefor
    • H04N1/648Transmitting or storing the primary (additive or subtractive) colour signals; Compression thereof
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2300/00Aspects of the constitution of display devices
    • G09G2300/04Structural and physical details of display devices
    • G09G2300/0439Pixel structures
    • G09G2300/0452Details of colour pixel setup, e.g. pixel composed of a red, a blue and two green components
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00Aspects of display data processing
    • G09G2340/06Colour space transformation
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/20Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
    • G09G3/2003Display of colours

Description

200530949 五、發明說明(1) 【發明所屬之技術領域】 本發明係關於影像處理方法,特別是色彩空間上的影像處 理。 | 【先前技術】 現階段用以產生高品質影像之影像資料處理技術計算量十 分龐大,例如,當所有影像處理程序在y u v色彩空間上進行 | 時,需要高昂的計算成本以及大量的資料儲存空間,而在 I YCbCr色彩空間上進行的影像處理也同樣產生近似的鉅額成 本。另一方面,當所有的影像處理程序於RGB原始色彩空間 β RGB raw color space)上進行時,儲存空間和處理成本: 會相對低廉;然而,在RGB原始彩色空間上處理所得的影像 | 品質卻很低劣。 為了解決上述問題,本發明提出一種有效率地產生高品質 影像的方法。
200530949 五、發明說明(2) 換電話網路。透過上述網路建置的網路連結可能是完全保 持連線(f u 1 1 y - p e r s i s t e n t)、以連線為單位 (session-based),或是如以封包為單位(packet-based )間歇地率接。原始影像資料、任何原始資料處理過程產 生的中繼資料,以及最終處理過的影像資料可同樣地常駐 於任何上述電腦系統的組合。熟知該項技藝人士會給予此 種適用於不同操作環境的裝置正面評價和稱許。 【實施方式】 根據具體實施例,上述裝置可為影像擷取系統,例如視訊 •影相機、監視攝影機、數位相機、數位錄影機或電腦攝 影相機,該影像擷取系統可個別運作,或是-連接至如行動 電話、智慧型手機、網路裝置、個人數位助理(PDA)或個 人電腦等電腦系統。上述影像擷取系統和電腦系統可型構 成一個更大的系統,例如照相手機、照相智慧型手機、視 訊電話、網路攝影相機、附有照相功能的PDA,以及視訊會 議系統。上述裝置可能以軟體或硬體形式實現,或是結合 軟、硬體以實現該裝置之功效。此種影像擷取系統可以透 過固接或是無線網路,或是透過具有高速或低速,轉換率之 &列或是平行匯流排(例如USB 1 · 0、USB 2. 0、IEEE ,3 9 4、LVDS、UART、SPI、I2C、// Wire、EPP/ECP、 CCIR60 1、CCIR 6 5 6、 IrDA、藍芽,或自訂的匯流排),連 結到電腦糸統。 根據具體實施例,上述裝置執行任何影像處理程序前,先
第7頁 200530949 五、發明說明(3) 將影像資料從其所關連之色彩空間轉換至異於上述色彩空 間之另一色彩空間上;於影像處理程序完成後,處理過的 影像資料再轉換至原始色彩空間或是其他色彩空間。舉例 來說,色彩空間有RGB (紅-綠-藍)原始色彩空間(RGB : raw color space) 、RGB合成色彩空間(RGB composite ι i co 1 or space) 、YCbCr (亮度-藍彩度-紅彩度)色彩空 | 間、YU V (亮度-彩色)色彩空間、Y I Q (亮度-相位-正交)| 色彩空間、YDbDi* (亮度 | -lumina_di fference_blue-lumina__di fference_red)色彩 空間、YCC (獨立於顯示器)色彩空間、Η I S (色相-飽和度 ®亮度)色彩空間、HLS (色相-亮度-飽和度)色彩空間、 HSV (色j目-飽和度-亮度)色彩空間、CMY (青-洋紅-黃)| 色彩空間,和CMYK (青-洋紅-黃-黑)色彩空間。
I 第1 A圖顯示本發明裝置處理影像資料之高階流程圖,根據 i
I 具體實施例,步驟1 0 2中,本發明裝置將原始影像資料從第 | 一色彩空間轉換到第二色彩空間,產生對應於上述第二色 丨 彩空間之第二影像資料,上述轉換過程之進一步詳細說明 : 可參照第3圖到第6圖。步驟1 0 4中,本發明裝置針對上述第 二色彩空間生的第二影像資料進行一個或多個影像處理程 基,其詳細說明請參照第1 B圖。步驟1 0 6中,上述第二影像 Ψ料完成影像處理程序後,會轉換為對應於最終色彩空間 之影像資料。 上述最終色彩空間可為下列任一型態:(1 )上述第一色彩 空間,(2 )第三色彩空間,或 (3 )第二色彩空間,但是使
第8頁 200530949 五、發明說明(4) 用異於步驟10 2從第一色彩空間轉換到第二色彩空間之影像丨 資料轉換方法。轉換到最終色彩空間之進一步說明可參見 | 第7圖。 丨
第1 B圖為影像資料處理過程之資料流示意圖。第丨B圖顯示 丨 第一色彩空間1 1 0、第二色彩空間1 2 0,以及最終色彩空間 1 3 0,前述三個色彩空間可依據處理最終影像資料之應用程 式所需,為任何型式的色彩空間。原始影像資料π 2係關聯 於上述第一色彩空間1 1 〇 ;色彩空間轉換器u 4係將上述原 始影像資料1 1 2轉換到關聯於第二色彩空間1 2 〇之影像資料 (未標明於圖示),影像處理程序1 1 6套用於上述色彩空間 鲁2 0之影像資料。色彩空間轉換器1丨8係將上述色彩空間1 2 〇 I 之影像資料轉換至關聯於最終色彩-空間13〇之最終影像資料I 122° 色彩空間轉換器11 4和π 8可根據具體實施例,以軟體或硬 體形式加以實現。根據其他具體實施例,色彩空間轉換器 1 1 4和1 1 8可以是軟體和硬體的組合。 一些影像處理程序11 6的實例,包含自動白平衡調整、自動 曝光控制、伽瑪校正(gamma correction)、邊緣偵測、 邊緣強化、色彩調校、訊號串擾補償(,c r 〇 s s - t a 1 k \ compensation)、色相控制、飽和度控制、亮度控制、對 東控制、去雜點篩渡、平緩篩遽(s m 〇 〇 t h i n g f i 1 t r a t i〇η )、取樣篩慮(d e c i in a t i ο n f i 1 t r a t i ο n)、差補篩淚 (interpolation filtration)、影像資料壓縮、亮點調 校(white pixel correction)、暗點調校(dead pixel
第9頁 200530949 五、發明說明(5) 丨 correction) 、 # 點調校(wounded pixel correction | )、鏡頭調校、頻率偵測、室内偵測、戶外偵測,以及諸 丨 多特效等。 暫存緩衝器可用於存放轉換至上述第二色彩空間之影像資 料,亦可用於儲存經由上述影像處理程序1 1 6處理後的影像 資料,這些暫存緩衝器之大小,可以是多個像素、多個像 素列或多個視格。 第2圖為本發明裝置運作時,一些耦合至該裝置之電腦系統 和其他裝置的典型元件示意圖。電腦系統和裝置2 0 0可包含 i ! 一個或多個中央處理器(CPU) 201,用以執行電腦程式; I #腦記憶體2 0 2,用以儲存程式及其執行所需之資料;永久 | 、儲存裝置203,例如硬碟,用以永久地儲存程式和資料;電」 腦可讀取媒體裝置2 0 4,例如光碟機,用以讀取存放於電腦 可讀取媒體之程式和資料;以及用以連結上述電腦系統和 其他電腦系統之網路連結2 0 5,例如透過網際網路交換程式 和/或資料。依照上述方式配置之電腦系統通常可用於支 援本發明裝置之運作,此種容許不同型態裝置和組態設 ! 定,以及具有不同元件之裝置,對熟習此項技藝者而言, 丨 亦會給予其正面評價和稱許。 2 A圖為耦合至電腦系統(如第2圖電腦系統2 0 0)的影像 取系統示意圖。影像擷取裝置211,例如光耦合元件 丨 (CCD)或互補式金氧半場效電晶體(CMOS)等影像感測 | 器,透過光學鏡片取得影像資料,並且將影像資料轉換為 i
I 電子訊號。上述影像擷取裝置可處理擷取到的電子訊號, |
第10頁 200530949 五、發明說明(6) 並且將該電子訊號數位化。數位訊號處理器2 1 2 (可為硬體 連接或是可程式化)處理數位化後的訊號,並且將前述數 位訊號轉換成特定格式,例如RGB、YUV、YCbCr、JPEG或 MPEG,用以儲存或傳輸,上述轉換方法可在數位訊號處理 器上實施。當數位訊號處理器、中央處理器、内部匯流排 丨 或外部匯流排存取記憶體2 1 3 (如靜態隨選記憶體、動態隨 選記憶體或唯讀記憶體等),用以儲存影像資料、暫存資 ; 料或是程式資料時,中央處理器21 6可控制該影像擷取系 | 統。永久儲存裝置2 1 7,如快閃記憶體、SD記憶卡、MMC記 憶卡、C F記憶卡、M e m 〇 r y S t i c k記憶卡或硬碟等,可儲存 •像資料、暫存資料或是程式資料。顯示器2 1 4,如液晶螢 幕或電視訊號轉換器等,-可顯示已擷取影像、已儲存影像 或一些文字/圖形重疊字幕。介面215,如USB 1.1, USB I 2.0、 IEEE1394、 LVDS、 UART、 SPI、 I2C、 " Wire、 EPP/ECP、 CCIR601、 CCIR656、 IrDA、藍芽或其他自訂的匯 i ) 流排,可連接到電腦系統2 2 0,用以傳輸影像資料、已儲存 資料或指令。 電腦系統2 2 0可為大型電腦系統、個人電腦系統、嵌入式電 j 腦系統或其他自訂的電腦系統,上述電腦系統可包含中央 j »理器2 2 6、記憶體2 2 7、永久儲存裝置2 2 3、電腦可讀取媒 丨 、裝置2 2 4、網路連結2 2 5、介面2 2 2、和顯示器2 2 1。 第3圖係第1 A圖中將影像資料從第一色彩空間轉換到第二色 彩空間之高階流程圖。步驟3 0 2,本發明裝置於轉換標的之 影像資料上執行一色彩差補程序,該程序用以產生遺漏或 丨
第11頁 200530949___ 五、發明說明(7) 所需之資訊,同時可應用於單一色彩元素座標到多重色彩 元素座標之轉換。例如,關聯於R G B原始色彩空間之影像資 料可經由差補法轉換為RGB合成影像,在色彩差補程序完成 後,於步驟3 0 4中,本發明裝置將轉換方程式套用於上述色 彩差補過的影像資料,用以產生對應於第二色彩空間之轉 換後的影像資料。第3圖係參照第1 A圖,將第一色彩空間之 影像資料轉換到第二色彩空間之方法加以說明;參照第3圖 所示之轉換方法亦可應用於將影像資料從第二色彩空間轉 i 換到最終色彩空間。 丨 基於說明之目的,做出以下假設。假設原始資料係R G B原始 料(R G B r a w d a t a),並且具有如貝爾圖形之遽波圖 樣;假設先將具有貝爾圖形(Bayer pat tern)的影像資料 轉換為差補過的RGB合成影像資料,接著再轉換到關聯於第 二色彩空間(如YCbCr色彩空間)之影像資料;假設影像 處理程序發生在YCbCr資料上。接著,為了說明之便,假 設處理過的YCbCr資料會轉換到關聯於RGB原始色彩空間 丨 (即上述第一色彩空間)之最終影像資料。然而,如前所 丨 述,轉換回上述第一色彩空間之上述第二色彩空間之影像 資料並未受限。 , »據所欲轉換的色彩空間,轉換方法可由步驟3 0 2或3 0 4加 說明。例如,假設原始影像資料係RGB原始資料;假設 將RGB原始資料轉換為關聯於第二色彩空間(如RGB合成色 彩空間)之影像資料,在此種情況下,僅執行步驟3 0 2。在 另一實施例中,假設原始影像資料為RGB合成資料;假設
第12頁 200530949___________________ 五、發明說明(8) 將RGB合成資料轉換為關聯於第二色彩空間(如YCbCr色彩 空間)之影像資料,在此種情況下,僅執行步驟3 0 4。 第4圖係貝爾圖形之示意圖,第4圖中以五個像素列,4 0 2、 4 0 4、4 0 6、4 0 8和4 1 0加以解釋。像素列4 0 2、4 0 6和4 1 0僅含 有R、G像素,例如R像素4 1 2和G像素4 1 4 ;而像素列4 0 4和 4 0 8僅含有G、B像素,如G像素4 1 6和B像素4 1 8。在本發明之 實施例中,貝爾圖形資料會被轉換成第二色彩空間之影像 資料,即YCbCr色彩空間;因此,如第3圖步驟3 0 3之色彩差 補程序會套用於貝爾圖形資料,接著再對色彩差補後的影 像資料套用轉換方程式。 •驟3 0 2之色彩差補程序可包含一個或多個下列操作程序: 操作程序1 : - 技同; 象素 像素中缺漏的色彩元素可從其水平方向、含有該色彩元素 之最鄰近的前後像素中内插取得。根據具體實施例,缺漏 的色彩元素可藉由計算最鄰近該像素的前後畫素之平均 值,或是使用加權函數而獲得。參照第4圖的貝爾圖形一 例,如像素4 1 2之R像素所缺漏之色彩元素為B和G,根據貝 爾圖形,最接近R像素的前後像素為G像素,因此,R像素的 色彩元素G可從其最啦近的前後像素平均值計算取得。使用 方法,可差補取得G像素所缺漏的色彩元素R、B,或是 所缺漏的色彩元素G。 操作程序2 : 根據具體實施例,若一像素列中給定的像素並無在前的像
第13頁 200530949 五、發明說明(9) 素,則該像素所缺漏的色彩元素水平地從具有該種色彩元 素,且在後的最鄰近像素導出,例如第4圖中,像素列4 0 2 之第一個R像素並無最接近的在前像素,其所缺漏的G色彩 元素只能透過最接近的在後像素導出。使用相同方法,可 導出像素列4 0 6和4 1 0的第一個R像素,以及像素列4 0 4和4 0 8 的第一個G像素,其所缺漏的色彩元素。 操作程序3 : 根據具體實施例,若一像素列中給定的像素並無在後的像 素,則該像素所缺漏的色彩元素水平地從具有該種色彩元 ,且在前的最鄰近像素導出,例如第4圖中,像素列4 0 2 之最後一個G像素並無最接近的在後像素,-其所缺漏的R色 彩元素只能透過最接近的在前像素導出。使用相同方法, 可導出像素列4 0 6和4 1 0的最後一個G像素,以及像素列4 0 4 和4 0 8的最後一個B像素,其所缺漏的色彩元素。 操作程序4 : 根據具體實施例,給定像素列的像素所缺漏的色彩元素, 可從其在前的像素列所導出。依據本發明實施♦丨,缺漏的 #彩元素可經由計算其在前的像素列之平均值或加權函數 獲得,該給定像素列上的每個像素都會套用上述計算。 例如第4圖像素列4 0 6之RG像素列所缺漏的色彩元素B,可取 其在前的像素列4 0 4之B像素平均值,作為其所缺漏的色彩 元素值。使用相同方法,例如像素列4 0 4和4 0 8之G B像素列 200530949 上的每個像素,可同理導出其所缺漏的色彩元素R。 操作程序5 : 右仏素列並無在前的像素列,則其所缺漏的色彩元素可以 一固定值取代。例如第4圖像素列4〇2之“像素列並無在前 的像^列,因此,毋須計算缺漏的色彩元素B,而是直接以i 固疋值取代,例如〇。根據具體實施例,該固定值之選定| 據所欲轉換之目標色彩空間而加以選擇。根據其他具丨 體實施例,該固定值可從關聯於在前影像資料視格之像素丨 資訊而選定。 第5圖為執行上述操作程序丨到4時,像素中可能產生色彩元 素缺漏情況之示意圖。第5圖係影像資料從貝爾圖形轉換到 RGB合成色彩空間後再行說明。第5圖中,像素列5〇6包含 R、G像素。像素列5 〇 6之R像素為像素5 2 〇、5 2 4、$ 2 8、 5 3 2、5 3 6和5 4 0,像素列5 0 6之G像素為像素5 2 2、5 2 6、 534、53 8和542,像素列50 6之R像素平均值為以55 0表| 不之Rav ;利用相似型式,像素列5 〇 6之在前像素列(未標 示於第5圖〇之B像素平均值為以標號5 4 8表示之Bav;像素 » 5 0 6中,標號5 4 6之R a v係根據R像素5 2 0和5 2 4之平均值所 得;像素列50 6中,標號54 4之Gav係根據G像素5 2 2和526 之平均值所推得。 像素列5 0 8包含G和B像素。像素列5 0 8之G像素為像素5 6 0、 5 6 4、5 6 8、5 7 2、5 7 6和5 8 0,像素列5 0 8之B像素為像素
第15頁 200530949 五、發明說明(11) 562、5 6 6、5 7 0、5 74、5 78和 5 8 2;標號 5 8 6之 Gav係根據 G像 素5 6 0和5 6 4之平均值所推得;標號584之Bav係根據B像素 5 6 2和5 6 6之平均值所推得。 像素列50 6之第一個像素為52〇,該像素為r像素,其所缺漏 的色¥凡素為G和B。像素52〇所缺漏的〇元素可採用上述操丨 作程序2而獲得’換言之,像素5 2 〇所缺漏的g元素可經由最 接近像素5 2 0之在後像素像素5 2 2,而導出。像素52 〇所 缺漏的Btc素可採用上述操作程序4而獲得,換言之,像素i 52,缺漏的元素可經由在前的像素列(未標明於第涵)|
&導出,如雨所述’計算在像素列5 〇 6之前的像素列b像素I 均值’可得出標號5 4 8之Bav,Bav 5 4 8可作為R像素5 2 0缺 漏的B元素。 像素列5 0 6的第二個像素為像素5 2 2,該像素為g像素,其所 缺,的色办το素為咏B。像素5 2 2所缺漏的r元素可採用上 述^作序1而獲付。換言之,像素5 2 2所缺漏的r元素可經 由^接近像素5 2 2之前 '後像素,分別為r像素5 2 〇和5 2 4, 而導出。如則所述’ R像素5 2 0和5 2 4之平均值為標號5 4 6之 !^乂’]^¥ 54 6可作為〇像素5 2 2缺漏的1^元素。像素5 2 2所缺 漏的Btl素可採用上述操作程序4而獲,得,換言之,像素5 2 2 _缺漏的B元素可經由在前的像素列(未標明於第5圖)而 =出^因此,Bav 5 4 8可作為像素5 2 2缺漏的β元素。 苓妝第5圖的像素列5 〇 6,其他G像素,如像素5 2 6、5 3 〇、 5 3, 5 3 8 ’所缺漏的色彩元素可經由參照g像素5 2 2之類似 方式而決定。
第16頁 200530949_ 五、發明說明(12) ^〜' 像素列5 0 6的第三個像素為像素5 24 ’該像素為R像素,里所 缺漏的色彩元素為G和B。像素5 24所缺漏的g亓各π p 」b7L素可採用上 述操作程序1而獲得。換言之,像素5 24所缺漏的G元素可經 由最接近像素524之前、後像素’分別為G像素5 2 2和5 2 6, 而導出。如前所述,G像素5 22和52 6之平均值為標號544之 Gav’ Gav 544可作為R像素5 24缺漏的G元素。作本「0」&从 尔 像素5 2 4所缺 漏的B元素可採用上述操作程序4而獲得,換言之,像素524 所缺漏的B元素可經由在前的像素列(未標明於第5圖)而 導出;因此,Bav 548可作為像素5 2 4缺漏的B元素。 參照第5圖的像素列5 0 6 ’其他R像素,如像素528、532、 §36和54 0,所缺漏的色彩元素可經由參照r像素5 2 4之類似 方式而決定。 像素列5 0 6的最後一個像素為像素54 2,該像素為6像素,其 所缺漏的色衫το素為1^和B。像素5 4 2所缺漏的r元素可採用 上述操作程序3而獲得。換言之,像素54 2所缺漏的R元素可 ^接^像素54 2之在前R像素54〇所取代。像素54 2所缺漏 ΓΛ可Π操作裎序4而獲得,換言之,I素542所 缺漏的Btl素可經由在前的栌去而丨,丄 200530949 五、發明說明(13) 5 6 0所缺漏的R元素可經由在前的像素列(如第5圖的像素列 5 0 6)而導出;如前所述,計算像素列5 0 6的R像素平均值,丨 可得出標號55 0之Rav,Rav 55 0可作為G像素56 0缺漏的R元丨 素。 丨 像素列50 8的第二個像素為像素562,該像素為β像素,其所| 缺漏的色彩元素為G和R。像素.56 2所缺漏的G元素可採用上 丨 述操作程序1而獲得。換言之,像素5 6 2所缺漏的g元素可經I 由最接近像素5 6 2之前、後像素,分別為g像素“ο和564, | 而導出。如前所述’G像素5 6 0和5 64之平均值為標號586之丨 Gav,Gav 5 8 6可作為B像素5 6 2缺漏的G元素。傻音以?所缺! 的R元素可採用上述操作程序4而獲得,換言i 所缺漏的R元素可經由在前的像素列(如第5圖的像素列5〇6 i )而導出;因此,Rav 5 5 0可作為像素5 6 2缺漏的R元素。| 參知、第5圖的像素列5 0 8,其他β像素,如像素566、570、 5 7 4和5 7 8,所缺漏的色彩元素可經由參照B像素5 6 2之類似 方式而決定。 ’、 %、 像素列5 0 8的第三個像素為像素5 64,該像素為g像素,其所 缺漏的色彩元素為B和R。像素564所缺漏的β元可' 〃 述操作程序1而獲得。換言之,像素5 64所缺漏的杬$素可缺 參^近像素564之前、後像素,分別為Β像素π2和μ6广 出。如前所述,Β像素5 6 2和5 6 6之平均值為 Bav’ Bav 584可作為G像素5 6 4缺漏的B元素。斤专^ 漏的R元素可採用上述操作程序4而獲得 ,、4斤共
所缺漏的R元素可經由在前的像素列(如第換素5W 、 乐b圖的像素列506
--—-_ 200530949_ 五、發明說明(14) )而導出;因此,Rav 5 5 0可作為像素5 6 4缺漏的R元素。 參照第5圖的像素列5 0 8,其他G像素,如像素5 6 8、5 7 2、 5 7 6和5 8 0,所缺漏的色彩元素可經由參照G像素5 6 4之類似 方式而決定。 像素列5 0 8的最後一個像素為像素5 8 2,該像素為B像素,其 所缺漏的色彩元素為G和R。像素5 8 2所缺漏的G元素可採用、 上述操作程序3而獲得。換言之,像素5 8 2所缺漏的G元素可 由最—接近像素5 8 2之在前G像素5 8 0所取代。像素5 8 2所缺、漏 的R兀素可採用上述操作程序4而獲得,換言之,像素Μ % g,的R元素可經由在前的像素列(如第5圖的像素列5厅 ^出 口此’ Rav 5 5 0可作為像素5 8 2缺漏的R元素。 :ί料:色:差補程序完成·,根據具體實施例1可對麥 二浐床ΐ仃師濾程序。依據其他具體實施例,可在色彩# 二二例則於,f像資料進行篩遽處理;依據另一類的具崎 二冑r #衫差補程序前後皆可對影像資料進行篩漁収 用於師濾程序的濾-哭‘· ^ ^ ° 無限脈衝響庫(卩二有限脈衝響應(fir)濾波器、 高通(h"濾波器、帶通K (广"=慮波器、 阻(_ “0ρ)遽波器、全;^ =隅)盧慮波严、帶 • ( ant"Hasing)渡波器、上二1 pass) f波反鑛 T_-sampUng)壚波器::”了-二: up-sampling)渡波哭。 久是補(i nterp〇1 ation、
第6圖為影像資料從R 間之示意圖。右繁,°色私空間轉換至RGB合成色彩空 在弟6圖中’每個像素,如像素6〇2、6 0 4和
200530949 五、發明說明(15) 6 0 6,包含R、G、B等多重色彩元素。 步驟3 0 2之色彩差補程序亦可涵蓋其他標準或自訂的差補 法’一些色彩差補法之實例’包含最近鄰點差補法 (nearest neighbor interpolation)、雙線性差補法 (bilinear interpolation)、立方差補法(cublc interpolation)、拉普拉斯差補法(Lapiacian interpolation)、可調式拉普拉斯差補法(adaptive Laplacian interpolation)、視覺平緩轉換(sm〇〇th hue transition)、視覺平緩轉換對數差補法(smo〇th hue transition Log interpolation)、邊緣偵測差補法 • edge sensing interpolation)、可變式斜率差補法 (variable number of gradients)、圖形比對差才南去 (pattern matching interpolation)、線性色彩校正差 補法(linear color correction interpolation)以及像 素叢集差補法(pixel grouping interpolation)。 為了完成影像資料從第一色彩空間到第二色彩空間之轉 換,本發明裝置利用轉換方程式,將差補過的影像資料轉 換為關聯於第二色彩空間之影像資料,依據第二色彩空間 所欲使用的目的έ/彩空間而定,使用不同的轉換方程式。 4述轉換方程式可以是標準方程式或是自訂的方程式。以 ,是一些轉換方程式之實例: RGB 到 YCbCr:
Y = ( 7 7/ 2 5 6 )氺R + (150/256)氺G + ( 2 9 / 2 5 6 )氺B
Cb = -(44/256)*R - (87/256)*G + (131/256)*B + 128
第20頁 200530949- 五、發明說明(16)
Cr = (131/256)*R - (110/256)*G - (21/256)*B + 128
RGB 到 YUV: Y 二 0. 299*R + 0.587*G + 0· 1 14*B U = -0· 147*R -0.289*G - f 0 • 436*B V = 0.615*R - 0.515^G - 0. 1 00*B RGB 到 Y I Q : Y = 0. 299*R + 0. 587^G + 0· 1 14*B I = 0· 596*R - 0. 275*G - 0· 321*B (i = 0. 212*R - 0·523*G + 0· 31 1*B RGB Y = 到 YDbDr·· 0·299*R + 0· 587*G + 0· 114*B Db =~0.450^Ε 0·883*G + 1 · 3 3 3 *B Dr : =-1 · 3 3 3木R + 1· 116*G + 0·217*B RGB 到 YCC: For "R, G, B > 0. 018 R,: :1 · 0 9 9 ·· 45 -0.099 # = =1 · 0 9 9 *G0· 45 -0.099 B,: :1 · 0 9 9 *B0· 45 -0.099
For R, G, B ^ - 0. 0 18
第21頁 200530949_ 五、發明說明(17) R,= -1· 0 9 9 * 旧 0· 45 - 0· 099 G,…1· 0 9 9 * 丨 G | 0. 45 - 0· 099 B1 = - 1. 0 9 9 * | B|0. 4 5 - 0.0 9 9
For -0.018 < R, G, B < 0.018
R’ = 4. 5*R G’ = 4. 5*G B’ - 4. 5*B Y - 0. 2 9 9 *R, + 0. 5 8 7*G, + (K 1 14*B, = - 0.2 9 9 *R’ - 0.5 8 7*G,+ 0·8 6 6 *Β, C2 - 0. 701^R, - 0. 5 8 7*G, - 0· 1 14*B, RGB 到 HSI ·· 設定方程式 (RGB範圍介於 0到 1) ·· Μ 二 max (R, G, Β) m 二 min (R, G , Β) 1 1 1 r = (Μ - -R) / (Μ -m) ; g 二 (Μ - -G) I (Μ -m ) ; (Μ - -Β) / (Μ -m ) ! 計算 亮度 (亮 度 範圍 介於 0到1) : | I 二 (Μ 4 m ) / 2 ;
第22頁 200530949- 五、發明說明(18) 計算飽和度(飽和度範圍介於 〇到1):
If M = m then S = 0 and Η - 180°
If I < 0. 5 then S=(M-m)/(M+m)
If I > 0. 5 then S = (M - m) / (2 - M - m) 計算色相(色相範圍介於 0到3 6 0° ):
Red = 0°
If R = M then Η = 60*(b _ g)
If G = M then H = 60^(2 + r - b) I f B = M then H = 60*(4 + g - r)
Jf H > 3 6 0 then H = H - 360
第23頁 200-53^949- 五、發明說明(19) gzr(M-G)/(M-m) b=(M - B)/(M - m) 計算亮度數值(數值範圍介於 〇到1): V = max (R, G, B) 計 算, 绝和 度(飽 和 度 範圍介 於 0到 1) If M 0 then S = 0 and Η = 1 80。 If M Φ 0 then S : =(M - m) / Μ (g % 1 色相 (色相 範 圍 介於 0到 3 6 0° ) I f R = Μ then -H = 60*(b - g) If G Μ then H = 60*(2 + r - b) If B Μ then H zz 60*(4 + g - r ) If H > 360 then H =H - 360 If H < 0 then H = H + 360
RGB 到 CMY: C = 1 - R Μ = 1 - G = 1 - Β
第24頁 200530949____________________ 五、發明說明(20)
Μ - 1 - G Υ 二 1 - Β K = min (C, Μ, Y) YUV 到 YIQ: I 二 V* cos (33。 )- U*sin (33。) Q = V* sin (33。 )+ U*cos (33。 ) | ! 有關轉換方程式的進一步說明可參見Video Demystified, by Keith Jack, LLH Technology Publishing0 當原始影像資料完全轉換到關聯於第二色彩空間之第二影 •資料時,會將諸如第1 B圖中1 1 6之影像處理程序套用於上 述第二影像資料,藉以產生已處理過的第二影像資料。在 第二影像資料執行過影像處理程序後,上述第二影像資料 i 會轉換成關聯於最終色彩空間之影像資料 j 對照第1 A圖所述之方法,第7圖為影像資料從第二色彩空間 | 轉換到最終色彩空間之高階流程圖。即便第7圖所述之方法 為影像資料從第二色彩空間轉換到最終色彩空間,該種轉 換方法同樣可適用於影像資料從第一色彩空間到第二色彩 空間之轉換。 , &第7圖的步驟7 0 2中,將轉換方程式套用於已處理過的第 二影像資料,上述轉換方程式可依據選定之最終色彩空間 而套用對應的轉換公式,且轉換方程式可以是標準方程 式,或是自訂的方程式。以下是一些轉換方程式之實例:
第25頁 200530949_ 五、發明說明(21) YCbCr 到 RGB: R 二 Y + 1. 3 7 1 * ( C r - 1 2 8 ) G = Y — 0. 698*(Cr-128) — 0. 336*(Cb-128) B = Y + 1· 732*(Cb-128)
YUV 到 RGB: R = Y + 1·140*V G = Y - 0.394*U -0· 581 氺V B = Y + 2.032*U • IQ到 RGB·· R 二 Y + 0.956*1 + 0. 621*Q G = Y - 0. 272*1 -0. 647*Q B - Y - 1.105^1 + 1. 702*Q YDbDr到 RGB: R = Y - 0· 526*Dr G - Y - 0. 129*Db + 0. 2 6 8 *Dr B 二 Y + 0· 665*Db —CC到 RGB·· L, = 1· 3584*(luma)
Cl = 2.2179*(chr〇mal - 156) C 2 = 1 · 82 1 5 * (chroma 2 — 13 7)
第26頁 ,200530949- 五、發明說明(22) R = 1/ + C2 G = L’ - 0. 194*C1 - 0· 5 0 9 *C2 B = L’ + Cl H IS到 RGB·· 設定方程式:
If I <0.5 then M - I*(1 + S)
If I > 0.5 thenM = I + S - I*S
m = 2 氺 I - M
Mf S = 0 then R = G = B= IandH = 180° 計算R之方程式(範圍介於0到1):
Red = 0°
If Η < 60 then R = Μ
If Η < 120 then R 二 m + ((M - m) / ((120 - Η) / 60))
If H < 240 then R = m
If H < 300 then R - m + (<M - m) / ((H - 240) /
60)) ' herwise R = M
Blue = 0°
If H < 60 then R = m + ( (M - in) / (H / 60)) 200530949 五、發明說明(23)
If Η < 180 then R = Μ
If Η < 240 then R = m + ((Μ - m) / ((240 - Η) / 60))
Otherwi se R = m 計算G之方程式(範圍介於0到1):
Red - 0°
If Η < 60 then G = m + ((Μ - m) / (Η / 60))
If H < 180 then G = M
If H < 24 0 then G、丨n + ((M - m) / (( 2 4 0 - H) / ·〇))
Otherwise R = m 麵
Blue = 0°
If H < 120 then G 二 m
If H < 180 then G - m + ((M - m) / ((H - 120) / 60))
If H < 300 then G = M
Otherwise G = m + ((M - m) / ((360 -,H) / 60)) ί算B之方程式(範圍介於0到1):
Red = 0°
If Η < 120 then B = m
If H < 180 then B 二 m + ((M - m) / ((H - 120) /
第28頁 200530949 五、發明說明(24) 60)) if H < 300 then B =M 01 h e r w i s e B = m + (CM - m) / ((360 -H) /60)) Blue = 0。 If H < 60 then B :M If H < 120 then B 二 m + ((M - m ) / ((120 -H) / 60)) If H < 240 then B =m If H < 300 then B 二 m + ((M - m ) / ((H - 2 4 0 )/ 60)) •therw i s e B 二 M HSV到 RGB: Setup equations : If S = 0 then H - :180。 ,R - V, G 二 V, and B =
Otherwise
If Η - 360 then Η - 0 h 二 Η / 60 f· = largest integer of h =h - i p 二 V氺(1-S) q 二 V 氺(1 一 (S氺f)) t = V * (1 - (S*(l - f)))
第29頁 200530949 五、發明說明(25) 計算 RGB (RGB範圍介於 0到 1) ·· If i 二 0 then (R, G, B): :(V, t, P ) If i =1 then (R, G, B): :(Q, V, p) If i 二 2 then (R, G, B): :(P, V, t) If i =3 then (R, G , B)= :(P, q, V) If i 二 4 then (R, G, B)= :(t, P, V) If i 二 5 then (R, G, B)= :(V, P, q) CMY5-J RGB:
# - 1 - C G = 1 - Μ - Β 二 1 - Υ 有關轉換方程式的進一步說明可參見Video Demystified, by Keith Jack, LLH Technology Publishing。在第 7圖步 驟7 0 4中,已處理過的第二影像資料套用適當的轉換方程式 後,將結果影像資料進行像素對像素再映射,用以產生關 聯於最終目的色彩空間之最終影像賢料。參照貝爾圖形實 g例,假設最終目的色彩空間和前述第一色彩空間相同, 即RGB原始色彩空間,第6圖中第二色彩空間(即RGB合成色 彩空間)上的每個像素會經過再映射,如此一來,影像資 料可以轉換到RGB原始色彩空間。在貝爾圖形實施例中,再 映射程序可經由拋除色彩元素而完成。
第30頁 200530949_______________ 五、發明說明(26) 根據所欲轉換的色彩空間,轉換方法如步驟7 0 2或7 0 4所 1 述;例如,假設關聯於第二色彩空間之影像資料為YCbCr資| 料,且目的在於將上述YCbCr資料轉換到如RGB合成色彩空 | 間之最終色彩空間,在這種情況下,僅執行步驟7 0 2。在另 一實施例中,關聯於第二色彩空間之影像資料為RGB合成資 料,且目的在於將上述RGB合成資料轉換到如RGB原始色彩 | 空間之最終色彩空間,在這種情況下,僅執行步驟7 0 4。 丨 第8圖為影像資料從RGB合成色彩空間(第二色彩空間)轉 換至RGB原始色彩空間(最終色彩空間)之示意圖。參考第 6圖,多元素像素60 2可經由再映射形成第8圖的像素802, | 龜述再映射係經由拋除像素6 0 2的R和B元素,以產生RGB原 始色彩空間上-的單元素像素8 0 2。同理,多元素像素6 0 4可 經由再映射拋除像素6 0 4的G和B元素,以產生像素8 0 4 ;多 元素像素6 0 6可經由再映射拋除像素6 0 6的G和R元素,以產 生像素8 0 6。所有第6圖的像素可用同樣的方法,再映射成 1 第8圖中對應的像素。 本發明已透過各種具體實施例說明本發明不同的實施方 式,然其並非用以限定本發明,任何熟悉此項技藝者,在 不脫離本發明之精咐和範圍内,當可做些許更動與潤飾, | »此本發明之保護範圍當視後附之申請專利範圍所界定者 | 準。 丨
第31頁 200530949__________ 圖式簡單說明 【圖式簡單說明】 第1 A圖為影像資料處理系統之高階流程圖。 第1 B圖為影像資料處理過程中資料流之示意圖。 第2圖為本發明裝置運作時,一些耦合至該裝置之電腦系統 和其他裝置的典型元件示意圖。 第2 A圖為耦合至電腦系統的影像擷取系統示意圖。 第3圖為影像資料從第一色彩空間轉換到第二色彩空間之高 階流程圖。 第4圖為貝爾圖形之圖像示意圖。 第5圖為像素中可能產生色彩元素缺漏情況之示意圖。 • 6圖為影像資料從RGB原始色彩空間轉換至RGB合成色彩空 間之示意圖。 - 第7圖為影像資料從第二色彩空間轉換到最終色彩空間之高 階流程圖。 第8圖為影像資料從RGB合成色彩空間轉換至RGB原始色彩空 間之示意圖。 【主要元件符號說明】 1 1 0第一色彩空間 , y 2原始影像資料 、1 18色彩空間轉換器 1 1 6影像處理程序 1 2 0第二色彩空間 1 2 2最終影像資料
第32頁 200530949___________________ 圖式簡單說明 1 3 0最終色彩空間 2 0 0電腦糸統 2 0 1中央處理器 2 0 2記憶體 2 0 3永久儲存裝置(Persistent storage) media 20 4電腦可讀取媒體裝置 (Computer-readable drive) 2 0 5網路連結 2 1 0影像擷取系統 2 1 1影像擷取裝置 _1 2數位訊號處理器 2 1 3記憶體 2 1 4顯示器 2 1 5介面 2 16中央處理器 2 1 7永久儲存裝置 2 2 0電腦糸統 2 21顯示器 2介面 B 3永久儲存裝置 2 2 4電腦可讀取硬碟 2 2 5網路連結 2 2 6中央處理器
第33頁 200530949 圖式簡單說明 2 2 7記憶體 4 0 2、4 0 4、4 0 6、4 0 8、4 1 0像素列 4 1 2 R像素 414G像素 4 1 6 G像素 4 1 8 B像素 5 0 6、5 0 8像素列 5 4 4、5 8 6 G像素平均值 5 4 6、5 5 0 R像素平均值 548、584B像素平均值 籲02、 604、 606多元素像素 802、804、80 6單元素像素 _
第34頁

Claims (1)

  1. 200530949 六、申請專利範圍 1 . 一種影像處理方法,包含·· 步驟 A :將第一影像資料從第一色彩空間轉換成關 二色彩空間的第二影像資料; 步驟 B :在上述第二色彩空間上對第二影像資料進 處理程序以產生已處理過的影像資料;以及 步驟 C :將上述已處理過的影像資料轉換成關聯於 間集合的任何一色彩空間之第三影像資料,上述色 集合包含: 上述第一色彩空間; 第三色彩空間;以及 _述第二色彩空間,但是使用一種異於步驟A之影像 換方法。 2 .如申請專利範圍第1項所述之影像處理方法,其中 一色彩空間係單色彩元素之色彩空間。 3 .如申請專利範圍第1項所述之影像處理方法,其中 一色彩空間係多色彩元素之色彩空間。 4.如申請專利範圍第1項所述之影像處理方法,其中 一色彩空間包含第二色彩空間集合之任一色彩空間 『色彩空間集合包含: fGB原始空間; B合成空間; YCbCr空間; YUV空間; YIQ空間; 聯於第 行影像 色彩空 ! 彩空間 .資料轉 上述第 丨 i 上述第丨 上述第 ,上述
    第35頁 200530949________________________________________________ 六、申請專利範圍 YDbDr空間; YCC空間; HSI空間; HLS空間; HSV空間; i i CMY空間;以及 1 CMYK空間。 I 5.如申請專利範圍第1項所述之影像處理方法,其中上述第 二色彩空間係單色彩元素之色彩空間。 _.如申請專利範圍第1項所述之影像處理方法,其中上述第 二色彩空間係多色彩元素之色彩空間。 | 7.如申請專利範圍第1項所述之影像處理方法,其中上述第 丨 二色彩空間包含第三色彩空間集合之任一色彩空間,上述 ^ 集合包含: RGB原始空間; RGB合成空間; YCbCr空間; YUV空間; , 空間; ObDr^ m ; YCC空間; HSI空間; HLS空間;
    第36頁 200530949 六、申請專利範圍 HSV空間; C Μ Y空間;以及 CMYK空間。 ^處理方法,其中上述第 間。 ^處理方法,其中上述第 間。 像處理方法,其中上述 合之任一色彩《空間,上 8 .如申請專利範圍第1項所述之影1 三色彩空間係單色彩元素之色彩空 9 .如申請專利範圍第1項所述之影4 三色彩空間係多色彩元素之色彩空 _0.如申請專利範圍第1項所述之影 第三色彩空間包含第四色彩空間集 述集合包含: RGB原始空間; RGB合成空間; YCbCr空間; YUV空間; YIQ空間; YDbDr空間; fC空間; Tsi空間; HLS空間; HSV空間; C Μ Y空間;以及
    第37頁 200530949 六、申請專利範圍 CMYK空間。 1 1 .如申請專利範圍第1項所述之影像處理方法,其中步驟^ 更包含使用一或多個暫存緩衝器,用以儲存上述第二影像 資料。 1 2.如申請專利範圍第1項所述之影像處理方法,其中步驟B 更包含使用一或多個暫存緩衝器,用以儲存上述已處理過 的影像資料。 其中步驟 _3 .如申請專利範圍第1項所述之影像處理方法 更包含一或多個以下步驟: 執行自動白平衡; 執行自動曝光控制; 執行伽瑪校正 執行邊緣彳貞測 執行邊緣強化 執行色彩調校 執行訊號串擾補償 §行色相控制; 行飽和度控制; 執行亮度控制; 執行對比控制; 執行去雜點篩濾;
    第38頁 200530949 六、申請專利範圍 執行平緩篩渡 執行取樣篩濾 執行差補篩濾 執行影像資料壓縮 執行亮點調校 執行暗點調校 執行莠點調校 執行鏡頭調校 執行頻率偵測 執行室内偵測 ft行戶外偵測;以及 套用特效。 - 1 4.如申請專利範圍第1項所述之影像處理方法,其中步驟A 更包含執行色彩差補,將關聯於上述第一影像資料之像素 從單色彩元素轉換為多色彩元素,以產生對應之差補過的 像素。 1 5 ·如申請專利範圍第1 4項所述之影像處理方法,更包含對 每一個差補過的像素套用轉換方程式,其知上述轉換方程 &係根據上述第二色彩空間而選定。 β.如申請專利範圍第1項所述之影像處理方法,其中步驟A 更包含對每一個像素套用轉換方程式,其中上述轉換方程 式係根據上述第二色彩空間而選定。
    第39頁 200530949
    第40頁 200530949 六、申請專利範圍 2 0 .如申請專利範圍第1 8項所述之影像處理方法,其中步驟 P更包含將水平方向上最接近上述像素之前、後像素加權計 算。 2 1 .如申請專利範圍第1 8項所述之影像處理方法,其中步驟 S更包含將上述前像素列中含有上述缺漏色彩元素之像素加 以平均。 2 2 .如申請專利範圍第1 8項所述之影像處理方法,其中步驟 S更包含將上述前像素列中含有上述缺漏色彩元素之像素加 權計算。 ’ 2 3 .如申請專利範圍第1 8項所述之影像處理方法,其中上述 固定值係根據在前視格之缺漏色彩元素而定。 2 4 .如申請專利範圍第1 4項所述之影像處理方法,更包含使 用一或多個濾波器,其中上述一或多個渡波器包含: 有限脈衝響應(F I R)濾波器; 無限脈衝響應(I IR)濾波器; 低通濾波器; 200530949
    第42頁 200530949__________ 六、申請專利範圍 像素叢集差補法。 2 9 .如申請專利範圍第1項所述之影像處理方法,其中步驟| 更包含對已處理過的影像資料之每個像素再映射至上述選 定的色彩空間。 3 0 .如申請專利範圍第1項所述之影像處理方法,其中步驟( 更包含將轉換方程式套用於已處理過的影像資料之每個像 素,其中上述轉換方程式係根據從上述色彩空間集合中選 定的色彩空間而決定。 3 1 .如申請專利範圍第3 0項所述之影像處理方法,更包含在 用上述轉換方程式之後,將已處理過的影像資料之每個 像素再映射至上述選定的色彩空間。 - 3 2 .如申請專利範圍第3 1項所述之影像處理方法,其中再映 射包含拋除不想要的色彩元素。 3 3 .如申請專利範圍第3 2項所述之影像處理方法,更包含在 拋除不想要的色彩元素之前,使用濾波器。 3 4 .如申請專利範圍第3 2項所述之影像處理方法,更包含在 i除不想要的色彩元素之後,使用濾波器。 I .如申請專利範圍第3 2項所述之影像處理方法,更包含在 拋除不想要的色彩元素前、後皆使用遽波器。 3 6 . —種攜帶一或多個可用於電腦系統平行處理計算指令集 之電腦可讀取媒體,其中利用一或多個處理器執行一或多
    第43頁 200530949__________________________________ 六、申請專利範圍 個指令集,以使一或多個處理器執行以下步驟: 步驟 A ··將第一影像資料從第一色彩空間轉換成關聯於第 二色彩空間的第二影像資料; 步驟 B :在上述第二色彩空間上對第二影像資料進行影像 處理程序以產生已處理過的影像資料;以及 步驟 C :將上述已處理過的影像資料轉換成關聯於色彩空 間集合的任何一色彩空間之第三影像資料,上述色彩空間 集合包含: 上述第一色彩空間; 第三色彩空間;以及 #述第二色彩空間,但是使用一種異於步驟A之影像資料轉 換方法。 - 3 7 .如申請專利範圍第3 6項所述之電腦可讀取媒體,其中上 述第一色彩空間係單色彩元素之色彩空間。 3 8 .如申請專利範圍第3 6項所述之電腦可讀取媒體,其中上 述第一色彩空間係多色彩元素之色彩空間。 #.如申請專利範圍第3 6項所述之電腦可讀取媒體,其中上 第一色彩空間包含第二色彩空間集合之任一色彩空間, 上述集合包含: RGB原始空間; RGB合成空間;
    第44頁 200530949________________________________ 六、申請專利範圍 YCbCr空間; YUV空間; YIQ空間; YDbDr空間; YCC空間; HSI空間; HLS空間; HSV空間; C Μ Y空間;以及 CMYK空間。 • 4 0 .如申請專利範圍第3 6項所述之電腦可讀取媒體,其中上 述第二色彩空間係單色彩元素之色彩空間。 4 1 .如申請專利範圍第3 6項所述之電腦可讀取媒體,其中上 述第二色彩空間係多色彩元素之色彩空間。 4 2 .如申請專利範圍第3 6項所述之電腦可讀取媒體,其中上 述第二色彩空間包含第三色彩空間集合之任一色彩空間, 上述集合包含: RGB原始空間; ' &GB合成空間; ▼CbCr空間; YUV空間; YIQ空間; YDbDr空間;
    第45頁 200530949____________ 六、申請專利範圍 YCC空間; HSI空間; HLS空間; HSV空間; CMY空間;以及 CMYK空間。 4 3 .如申請專利範圍第3 6項所述之電腦可讀取媒體,其中上 述第三色彩空間係單、色彩元素之色彩空間。 4 4 .如申請專利範圍第3 6項所述之電腦可讀取媒體,其中上 ft第三色彩空間係多色彩元素之色彩空間。 4 5 .如申請專利範圍第3 6項所述之電腦可讀取媒體,其中上 述第三色彩空間包含第四色彩空間集合之任一色彩空間, 上述集合包含: RGB原始空間; RGB合成空間; YCbCr空間; YUV空間; 間; r空間 ▲IQ空 ObD YCC空間; H S I空間; HLS空間;
    第46頁 200530949 六、申請專利範圍 HSV空間; CMY空間;以及 CMYK空間。 4 6 .如申請專利範圍第3 6項所述之電腦可讀取媒體,其中步 驟A更包含使用一或多個暫存緩衝器,用以儲存上述第二影 像資料。 4 7 .如申請專利範圍第3 6項所述之電腦可讀取媒體,其中步 驟B更包含使用一或多個暫存緩衝器,用以儲存上述已處理 ®的影像資料。 其中步 4 8 .如申請專利範圍第3 6項所述之電腦可讀取媒體 驟B更包含一或多個以下步驟: 執行自動白平衡; 執行自動曝光控制; 龜行 冒行 執行伽瑪校正 執行邊緣偵測 執行邊緣強化 色彩調校 訊號串擾補償 執行色相控制; 執行飽和度控制; 執行亮度控制; 200530949 六、申請專利範圍 執行對比控制; 執行去雜點篩濾; 執行平緩篩濾; 執行取樣篩遽; 執行差補篩濾; 執行影像資料壓縮; 執行亮點調校; 執行暗點調校; 執行莠點調校; 執行鏡頭調校; _行頻率偵測; 執行室内偵測; 執行戶外偵測;以及 套用特效。 4 9 .如申請專利範圍第3 6項所述之電腦可讀取媒體,其中步 驟A更包含執行色彩差補,將關聯於上述第一影像資料之像 素從單色彩元素轉換為多色彩元素,以產生對應之差補過 的像素。 遍)·如 每 申請專利範圍第4 9項所述之電腦可讀取媒體,更包含 一個差補過的像素套用轉換方程式,其中上述轉換方 程式係根據上述第二色彩空間而選定。 5 1 .如申請專利範圍第3 6項所述之電腦可讀取媒體,其中步
    第48頁 200530949____________________________________ 六、申請專利範圍 丨 驟A更包含對每一個像素套用轉換方程式,其中上述轉換方 | 程式係根據上述第二色彩空間而選定。 52. 如申請專利範圍第4 9項所述之電腦可讀取媒體,其中執 I 行色彩差補更包含從相鄰像素導出每個像素所缺漏的色彩 丨 元素,其中上述相鄰像素含有上述缺漏的色彩元素。 | 53. 如申請專利範圍第5 2項所述之電腦可讀取媒體,其中從 i 相鄰像素導出每個像素所缺漏的色彩元素,更包含一或多 | | 個下列步驟: i 拳驟P:每個像素所缺漏的色彩元素之計算,係由水平方向 上最接近上述像素之前、後像素所導出,其中上述最接近 I 之前、後像素含有上述缺漏之色彩元素; 步驟Q :每個水平方向上無在前像素之像素所缺漏的色彩元 : 素之計算,係由水平方向上最接近上述像素之在後像素所 導出,其中上述在後像素含有上述缺漏之色彩元素; | 步驟R :每個水平方向上無在後像素之像素所缺漏的色彩元 i 素之計算,係由水平方向上最接近上述像素之在前像素所 i 導出,其中上述在前像素含有上述缺漏之色彩元素; g驟S:像素列所缺漏的色彩元素之計算,係由上述像素列 之前一列像素列所導出,其中上述前一列像素列含有上述 缺漏之色彩元素;以及 步驟T :若像素列並無在前的像素列,則上述像素列所缺漏 的色彩元素以一固定值取代。
    第49頁 200530949____ 六、申請專利範圍 5 4 .如申請專利範圍第5 3項所述之電腦可讀取媒體,其中步 驟P更包含將水平方向上最接近上述像素之前、後像素加以 平均。 5 5 .如申請專利範圍第5 3項所述之電腦可讀取媒體其中步驟 P更包含將水平方向上最接近上述像素之前、後像素加權計 蓄 0 5 6 .如申請專利範圍第5 3項所述之電腦可讀取媒體,其中步 驟S更包含將上述前像素列中含有上述缺漏色彩元素之像素 φ以平均。 5 7 .如申請專利範圍第5 3項所述之電腦可讀取媒體,其中步 驟S更包含將上述前像素列中含有上述缺漏色彩元素之像素 加權計算。 5 8 .如申請專利範圍第5 3項所述之電腦可讀取媒體,其中上 述固定值係根據在前視格之缺漏色彩元素而定。 & .如申請專利範圍第4 9項所述之電腦可讀取媒體,更包含 冒用一或多個渡波器,其中上述一或多個渡波器包含: 有限脈衝響應(F IR)濾波器; 無限脈衝響應(IIR)濾波器; 低通濾波器;
    第50頁 200530949 六、申請專利範圍 高通濾波器; 帶通濾波器; 帶阻濾波器; 全通濾波器; 反鋸齒濾波器; 取樣濾、波器;以及 差補濾波器。 6 0 .如申請專利範圍第4 9項所述之電腦可讀取媒體,更包含 色彩差補執行前使用濾波器。 I 6 1 .如申請噚利範圍第4 9項所述之電腦可讀取媒體,更包含 色彩差補執行後使用濾波器。 6 2 .如申請專利範圍第4 9項所述之電腦可讀取媒體,更包含 色彩差補執行前、後皆使用濾波器。 6 3 .如申請專利範圍第4 9項所述之電腦可讀取媒體,其中色 彩差補之執行更包含使用一或多個下列差補方法: 最近鄰點差補法; g線性差補法; 立方差補法; 拉普拉斯差補法; 可調式拉普拉斯差補法; 視覺平緩轉換;
    第51頁 200530949 六、申請專利範圍 視覺平緩轉換對數差補法; 邊緣偵測差補法; 可變式斜率差補法; 圖形比對差補法; 線性色彩校正差補法;以及 像素叢集差補法。 6 4 .如申請專利範圍第3 6項所述之電腦可讀取媒體,其中步 驟C更包含對已處理過的影像資料之每個像素再映射至上述 選定的色彩空間。 •5 .如申請專利範圍第3 6項所述之電腦可讀取媒體,其中步 驟C更包含將轉換方程式套用於已處理過的影像資料之每個 像素,其中上述轉換方程式係根據從上述色彩空間集合中 選定的色彩空間而決定。 6 6 .如申請專利範圍第6 5項所述之電腦可讀取媒體,更包含 在套用上述轉換方程式之後,將已處理過的影像資料之每 個像素再映射至上述選定的色彩空間。 6 7 .如申請專利範圍第6 6項所述之電腦可讀取媒體,其中再 g射包含拋除不想要的色彩元素。 6 8 .如申請專利範圍第6 7項所述之電腦可讀取媒體,更包含 在拋除不想要的色彩元素之前,使用濾波器。
    第52頁 200530949______ 六、申請專利範圍 69.如申請專利範圍第67項所述之電腦可讀取媒體,更包含 | 在拋除不想要的色彩元素之後,使用濾波器。 | j i 7 0 .如申請專利範圍第6 7項所述之電腦可讀取媒體更包含在 拋除不想要的色彩元素前、後皆使用渡波器。
    第53頁
TW094102929A 2004-02-24 2005-01-31 Image data processing in color spaces TW200530949A (en)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
US10/786,900 US20050185836A1 (en) 2004-02-24 2004-02-24 Image data processing in color spaces

Publications (1)

Publication Number Publication Date
TW200530949A true TW200530949A (en) 2005-09-16

Family

ID=34861871

Family Applications (1)

Application Number Title Priority Date Filing Date
TW094102929A TW200530949A (en) 2004-02-24 2005-01-31 Image data processing in color spaces

Country Status (4)

Country Link
US (1) US20050185836A1 (zh)
EP (1) EP1580982A3 (zh)
CN (1) CN1662071A (zh)
TW (1) TW200530949A (zh)

Families Citing this family (34)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060039602A1 (en) * 2004-08-20 2006-02-23 Isakharov Svetlana M Data driven color conversion
TW200632771A (en) * 2005-03-10 2006-09-16 Avisonic Technology Corp Automatic white balance method applicable for color digital image
JP2007067625A (ja) * 2005-08-30 2007-03-15 Matsushita Electric Ind Co Ltd カメラシステムにおけるフィルタ補正回路
DE102005058415A1 (de) * 2005-12-07 2007-06-14 Olympus Soft Imaging Solutions Gmbh Verfahren zur Farbkorrekturberechnung
KR100801057B1 (ko) * 2006-07-18 2008-02-04 삼성전자주식회사 컬러 보정 블럭을 구비하는 cmos 이미지 센서 및 그이미지 센싱 방법
WO2010030141A2 (ko) * 2008-09-11 2010-03-18 동명대학교 산학협력단 무인운송장치의 정차제어시스템 및 방법
US8284232B2 (en) * 2009-01-30 2012-10-09 Hewlett-Packard Development Company, L.P. Equalization of video streams
CN101835052B (zh) * 2009-03-13 2013-02-06 华硕电脑股份有限公司 影像处理装置及影像处理方法
CN101835053B (zh) * 2009-03-13 2012-01-25 华硕电脑股份有限公司 影像处理装置及影像处理方法
TWI390961B (zh) 2009-03-13 2013-03-21 Asustek Comp Inc 影像處理裝置及影像處理方法
US20110032269A1 (en) * 2009-08-05 2011-02-10 Rastislav Lukac Automatically Resizing Demosaicked Full-Color Images Using Edge-Orientation Maps Formed In The Demosaicking Process
US8457393B2 (en) * 2010-07-14 2013-06-04 Omnivision Technologies, Inc. Cross-color image processing systems and methods for sharpness enhancement
CN102957903A (zh) * 2011-08-24 2013-03-06 赵翔 基于3g网络通讯的照片和视频低失真压缩传输方法
CN102547304A (zh) * 2011-12-31 2012-07-04 蔡静 一种视频图像数据获取装置及方法
CN102769758A (zh) * 2012-07-18 2012-11-07 京东方科技集团股份有限公司 一种rgb数据的处理方法及系统
KR101812860B1 (ko) 2012-11-07 2017-12-27 브이아이디 스케일, 인크. Hdr 비디오를 디노이징하기 위한 시간적 필터
CN103096092B (zh) * 2013-02-07 2015-12-02 上海国茂数字技术有限公司 基于颜色空间变换进行编解码误差修正的方法和系统
CN103235937A (zh) * 2013-04-27 2013-08-07 武汉大学 一种基于脉冲耦合神经网络的交通标志识别方法
TWI522962B (zh) * 2013-06-03 2016-02-21 天鈺科技股份有限公司 顯示控制系統及方法
TW201447862A (zh) * 2013-06-03 2014-12-16 Fitipower Integrated Tech Inc 顯示控制系統及方法
US9542736B2 (en) * 2013-06-04 2017-01-10 Paypal, Inc. Evaluating image sharpness
ES2820499T3 (es) 2013-09-12 2021-04-21 Shenzhen Yunyinggu Tech Co Ltd Método y aparato para representación de subpíxeles
CN104766348B (zh) * 2014-01-07 2018-08-10 厦门美图网科技有限公司 一种基于颜色空间的偏色检测方法
CN104486607B (zh) * 2014-12-31 2016-08-24 上海富瀚微电子股份有限公司 一种图像色度降噪的方法及装置
CN104935838B (zh) * 2015-06-04 2018-04-06 上海集成电路研发中心有限公司 一种图像还原的方法
US11070830B2 (en) 2015-08-24 2021-07-20 Interdigital Madison Patent Holdings, Sas Coding and decoding method with color conversion and corresponding devices
US10282888B2 (en) 2016-01-28 2019-05-07 Biosense Webster (Israel) Ltd. High definition coloring of heart chambers
CN107633477B (zh) * 2017-10-20 2021-04-20 上海兆芯集成电路有限公司 图像处理方法及其装置
US20190139189A1 (en) * 2017-11-06 2019-05-09 Qualcomm Incorporated Image remosaicing
CN108200347A (zh) * 2018-01-30 2018-06-22 努比亚技术有限公司 一种图像处理方法、终端和计算机可读存储介质
CN108710850B (zh) * 2018-05-17 2022-12-06 中国科学院合肥物质科学研究院 一种枸杞果实识别方法和系统
CN110278419B (zh) * 2019-05-30 2021-07-09 厦门硅图科技有限公司 一种基于线阵相机的视觉检测方法、装置、系统及存储介质
KR20210045027A (ko) * 2019-10-16 2021-04-26 주식회사 실리콘웍스 미세 보정이 가능한 색역 매핑 장치
CN113923474B (zh) * 2021-09-29 2023-06-23 北京百度网讯科技有限公司 视频帧处理方法、装置、电子设备以及存储介质

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5805217A (en) * 1996-06-14 1998-09-08 Iterated Systems, Inc. Method and system for interpolating missing picture elements in a single color component array obtained from a single color sensor
JP3707187B2 (ja) * 1996-09-18 2005-10-19 コニカミノルタホールディングス株式会社 電子カメラ
US6198842B1 (en) * 1997-06-19 2001-03-06 International Business Machines Corporation Multi-spectral image compression with bounded loss
US6392699B1 (en) * 1998-03-04 2002-05-21 Intel Corporation Integrated color interpolation and color space conversion algorithm from 8-bit bayer pattern RGB color space to 12-bit YCrCb color space
US6236433B1 (en) * 1998-09-29 2001-05-22 Intel Corporation Scaling algorithm for efficient color representation/recovery in video
US6546117B1 (en) * 1999-06-10 2003-04-08 University Of Washington Video object segmentation using active contour modelling with global relaxation
US6275206B1 (en) * 1999-03-17 2001-08-14 Intel Corporation Block mapping based up-sampling method and apparatus for converting color images
US6252577B1 (en) * 1999-03-18 2001-06-26 Intel Corporation Efficient methodology for scaling and transferring images
US6404918B1 (en) * 1999-04-30 2002-06-11 Hewlett-Packard Company Image demosaicing method utilizing directional smoothing
US6809765B1 (en) * 1999-10-05 2004-10-26 Sony Corporation Demosaicing for digital imaging device using perceptually uniform color space
US6462748B1 (en) * 2000-02-25 2002-10-08 Microsoft Corporation System and method for processing color objects in integrated dual color spaces
EP1289308B1 (en) * 2001-08-29 2006-04-26 STMicroelectronics S.r.l. Image generating system
JP3800192B2 (ja) * 2002-05-21 2006-07-26 カシオ計算機株式会社 撮像装置、画像合成方法及び画像合成プログラム

Also Published As

Publication number Publication date
EP1580982A2 (en) 2005-09-28
EP1580982A3 (en) 2008-04-16
CN1662071A (zh) 2005-08-31
US20050185836A1 (en) 2005-08-25

Similar Documents

Publication Publication Date Title
TW200530949A (en) Image data processing in color spaces
JP5045421B2 (ja) 撮像装置、色ノイズ低減方法および色ノイズ低減プログラム
US10645268B2 (en) Image processing method and apparatus of terminal, and terminal
US8547450B2 (en) Methods and systems for automatic white balance
Andriani et al. Beyond the Kodak image set: A new reference set of color image sequences
JP7182907B2 (ja) カメラの画像データ処理方法およびカメラ
CN101521751B (zh) 摄像设备
WO2017008377A1 (zh) 一种图像处理方法及终端
KR20150142600A (ko) Rgb 색차와 w 휘도를 조합하여 rgbw 디모자이크 하는 방법
US6069972A (en) Global white point detection and white balance for color images
TW200903347A (en) Edge mapping using panchromatic pixels
US20100194918A1 (en) Methods and Systems for Automatic White Balance
WO2023016035A1 (zh) 视频处理方法、装置、电子设备和存储介质
WO2023016146A1 (zh) 图像传感器、图像采集装置、图像处理方法及图像处理器
WO2023016037A1 (zh) 视频处理方法、装置、电子设备和存储介质
CN108122201A (zh) 一种拜耳插值拉链效应去除方法
CN107613216A (zh) 对焦方法、装置、计算机可读存储介质和电子设备
WO2015098243A1 (ja) 画像処理装置、撮像装置、プログラム及び画像処理方法
KR101650842B1 (ko) 영상 처리 장치, 영상 처리 방법, 및 이를 실행하기 위해 프로그램을 저장한 기록 매체
US20140037207A1 (en) System and a method of adaptively suppressing false-color artifacts
TWI415480B (zh) 影像處理方法與影像處理系統
WO2023016044A1 (zh) 视频处理方法、装置、电子设备和存储介质
WO2023016040A1 (zh) 视频处理方法、装置、电子设备和存储介质
WO2017183273A1 (ja) 画像処理装置
WO2022027469A1 (zh) 图像处理方法、装置和存储介质