TWI792265B - 用於彩色濾波器陣列(cfa)型樣影像之寫碼技術 - Google Patents

用於彩色濾波器陣列(cfa)型樣影像之寫碼技術 Download PDF

Info

Publication number
TWI792265B
TWI792265B TW110113262A TW110113262A TWI792265B TW I792265 B TWI792265 B TW I792265B TW 110113262 A TW110113262 A TW 110113262A TW 110113262 A TW110113262 A TW 110113262A TW I792265 B TWI792265 B TW I792265B
Authority
TW
Taiwan
Prior art keywords
sample
weighted sum
sample position
color coordinates
samples
Prior art date
Application number
TW110113262A
Other languages
English (en)
Other versions
TW202143719A (zh
Inventor
湯瑪斯 李希特
克里斯汀 米奴斯
米賈 尼采
克里斯汀 雪爾
渥爾夫岡 海普納
托畢亞斯 賈舍克
馬克斯 佛萊斯雷班
比拉爾 艾哈默德
Original Assignee
弗勞恩霍夫爾協會
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 弗勞恩霍夫爾協會 filed Critical 弗勞恩霍夫爾協會
Publication of TW202143719A publication Critical patent/TW202143719A/zh
Application granted granted Critical
Publication of TWI792265B publication Critical patent/TWI792265B/zh

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/10Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
    • H04N25/11Arrangement of colour filter arrays [CFA]; Filter mosaics
    • H04N25/13Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
    • H04N25/134Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements based on three different wavelength filter elements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof
    • H04N23/84Camera processing pipelines; Components thereof for processing colour signals
    • H04N23/843Demosaicing, e.g. interpolating colour pixel values

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Color Television Image Signal Generators (AREA)
  • Image Processing (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)
  • Compression Of Band Width Or Redundancy In Fax (AREA)

Abstract

本案提供一種用於寫碼一CFA型樣影像之技術,其中對於包含第一至第四樣本位置之該CFA型樣影像的樣本叢集中之各者,計算第一至第四色彩座標以便提供該CFA型樣影像之一影像表示。

Description

用於彩色濾波器陣列(CFA)型樣影像之寫碼技術
發明領域
本揭露內容之實施例係關於一種用於將CFA型樣影像寫碼成影像表示之設備及一種用於將影像表示解碼成CFA型樣影像之設備。本揭露內容之實施例亦係關於一種用於CFA型樣影像之變換,且特定而言,係關於一種用於CFA型樣影像之色彩去相關或組合色彩及空間去相關。
發明背景
典型的數位攝影機配備有所謂的CFA型樣感測器(例如,拜耳感測器),其由感測器元件之規則柵格組成,該等感測器元件覆疊有彩色濾波器之規則型樣(或陣列)以產生三個色彩通道(參見圖1)。通常,濾波器對應於紅光、綠光及藍光,但其他濾波器配置亦為可能的,例如,紅光、透明(無濾波器)、藍光。以此方式,可俘獲三個獨立的色彩通道,但該等通道彼此不對準且需要額外後處理以自所俘獲影像產生全色影像。
為了節省感測器附近之頻寬及處理功率,希望將CFA感測器資料按原樣壓縮,亦即,不重建構(或後處理)為全解析度RGB(真彩色)影像,傳輸經壓縮CFA影像信號且在接收器側處重建構該資料。接著在解碼器側處對經重建構CFA影像資料執行全解析度真彩色影像之產生,亦即,後處理步驟。由於此需要每感測器僅傳輸1個分量而非3個,因此頻寬已減少。
有效傳輸及頻寬減少通常進一步包括CFA資料之有損壓縮,其由多個步驟組成:首先,跨組件之去相關,其表示為「色彩去相關」;空間信號去相關,例如藉由小波或離散餘弦變換(DCT);其後接著量化(精確度之不可逆降低);其後接著資料之熵寫碼。
色彩去相關程序及空間去相關程序二者旨在促進及高效編碼程序及與經解碼影像之高品質組合的高壓縮速率。
發明概要
因此,本揭露內容之目標為提供一種用於寫碼CFA型樣影像之更高效技術。此目標係藉由在此所附的獨立技術方案之主題來達成。
根據本發明之第一態樣的本揭露內容之實施例係基於如下發現:若將CFA型樣影像之二個通道的能量壓緊成或主要構成輸出影像表示之一個輸出座標,則可更高效地編碼CFA型樣影像。相比於旨在將CFA型樣影像之三個通道之能量壓緊成一個座標的常見變換,例如就所恢復CFA型樣影像之改善信雜比而言,所揭露技術實現更高的寫碼效率。
另外,根據本發明之可與第一態樣組合之第二態樣的本揭露內容之實施例係基於可藉由以下操作改善寫碼CFA型樣影像之品質的發現:對於諸如超像素之樣本叢集的寫碼,諸如為空間去相關起見,考慮位於與包括至少一行之CFA型樣影像的行及列交叉的CFA型樣影像之一部分中的CFA型樣影像之樣本以及與當前待寫碼之樣本叢集之樣本的至少一個列偏移。藉由考慮CFA型樣影像之較大部分,可改善去相關且因此可更高效地壓緊能量,從而允較高壓縮速率及較低信雜比。
根據本揭露內容之第一態樣,此發現用於寫碼CFA型樣影像,該影像分割成各自具有CFA型樣影像的第一通道之一個第一樣本、第二通道之一個第二樣本及第三通道之二個第三樣本的樣本叢集。CFA型樣影像之寫碼包含:對於各樣本叢集之第一及第二樣本位置,藉由分別形成各別樣本叢集之第一樣本或第二樣本與第一或第二經濾波第三樣本值的差來分別計算第一及第二色彩座標。CFA型樣影像之寫碼的另一步驟包含:對於各樣本叢集之第三及第四樣本位置,藉由分別形成各別樣本叢集之第三樣本或第四樣本與第一或第二經濾波色彩座標的總和來分別計算第三及第四色彩座標。藉由形成與各別第三及第四樣本位置相鄰之第一及第二色彩座標的第三及第四加權和,導出第一及第二經濾波色彩座標,其中第三及第四加權和中之各者的權重之總和大於二分之一。其可等於或大於一。在一實例中,對於與第一色彩座標相關之權重,該總和大於四分之一,且對於與第二色彩座標相關之權重,該總和大於四分之一。其可等於或大於0.5。由於用於計算第三及第四色彩座標之第三及第四加權和的權重之此選擇,第一及第二通道(特定而言,低頻分量)相對於第一通道在第三及第四色彩座標中過重,或換言之,第三及第四色彩座標之能量主要由CFA型樣影像之第一及第二通道的能量判定,最終結果為較佳去相關且藉此導致後繼量化及熵寫碼程序中之較高壓縮速率或較低量化損失。在第三通道為綠色且對於第一及第二樣本具有相等權重之RGB型樣的狀況下,第三及第四色彩座標主要對應於CFA影像之低通濾波版本的洋紅色或藍色與紅色之混合物,其中在較小能量下無綠色或僅具有綠色之一部分。
根據實施例,第三及第四加權和之權重由用於對第一色彩座標及第二色彩座標進行加權之個別權重組成,使得該等權重可分別適應於各別通道之敏感度。藉由選擇第一及第二色彩座標之權重使得第一及第二通道在第三及第四色彩座標中經相等地加權,提高寫碼效率。
根據實施例,第三及第四加權和中用於對第一及第二色彩座標進行加權的權重各自實施為二之冪,其中二之冪中的各者之指數為整數。因此,第一及第二色彩座標與其各別權重之乘法可作為在計算上高效之位元移位運算來執行。
根據實施例,一組操作模式可用於寫碼CFA型樣影像,該影像之第一至第三樣本以列及行配置。在列及行之內容背景下,水平方向係指CFA型樣影像之列內的方向且豎直方向係指沿著CFA型樣影像之行的方向。另外,列及行之定義可藉由將CFA型樣影像旋轉90°互換,使得列及行之屬性應理解為非限制性的。對於一些實例,CFA型樣影像之寫碼可逐列執行,且被稱作位於第二列上方之第一列應理解為待在第二列之前寫碼。因此,第二列位於第一列下方。該組操作模式包括各向同性操作模式、豎直因果操作模式及條帶操作模式中之一或多者,其不同之處在於考慮用於計算選定樣本叢集之選定樣本位置之色彩座標的CFA型樣影像之一部分。在所有命名操作模式下,在計算色彩座標時包括位於選定樣本叢集所位於之列中的若干樣本。在各向同性操作模式下,在計算選定樣本位置之各別類型的色彩座標時包括位於選定樣本叢集所位於之列(命名為當前列)上方及下方的列中之樣本。藉由在計算時包括CFA型樣影像之當前列的額外列,可分開CFA型樣影像在豎直方向上之低頻分量及高頻分量,使得能夠將CFA型樣影像之能量較佳地壓緊成一或多個色彩座標。相比之下,僅使用當前列內之樣本可執行能量之壓緊,主要在水平方向上。因此,包括當前列上方及/或下方之額外列可提供更高效資料壓縮及更低信雜比。在豎直因果操作模式下,在計算選定樣本位置之各別類型的色彩座標時包括位於當前列上方但不位於當前列下方之列中的樣本。由於不考慮位於當前列下方之列中的樣本,因此可緊接在接收到發信當前列之樣本的資料之後執行寫碼,而無需等待發信後續列之樣本的資料。又,藉由考慮位於當前列上方之列中的樣本,在計算色彩座標時考慮CFA型樣影像之大部分,此提高品質。因此,此操作模式可提供高寫碼量與快速寫碼之組合。在條帶操作模式下,在計算色彩座標時排他性地包括位於當前列內之樣本。因此,相較於豎直因果及各向同性操作模式,在計算特定樣本位置之色彩座標時覆寫或丟棄特定樣本位置之樣本,且需要儲存的參考當前列上方之列的資料較少。因此,條帶操作模式組合快速豎直因果操作模式與低記憶體要求之優點。
根據實施例,CFA型樣影像之寫碼包括計算差分色彩座標、第三及第四色彩座標及基於第四及差分色彩座標計算組合色彩座標之其他步驟。提供此等步驟以用於將CFA型樣影像之能量尤其高度地壓緊成一個色彩座標,亦即,組合色彩座標,因此允許藉由熵編碼程序對影像表示進行高度壓縮。
根據本揭露內容之第二態樣,上文所介紹之技術用於寫碼CFA型樣影像,該型樣影像具有CFA型樣影像的第一通道之第一樣本、第二通道之第二樣本及第三通道之第三樣本,第一至第三樣本係以具有列及行之陣列配置。寫碼CFA型樣影像包含:對於第一樣本所位於之第一樣本位置中之各者,藉由形成在各別第一樣本位置處之第一樣本與第一經濾波第三樣本值的差來計算第一色彩座標,該第一經濾波第三樣本值係藉由形成與第一樣本位置相鄰之第三樣本的第一加權和來導出。用於第三加權和之第三樣本包含位於與各別第一樣本位置之樣本叢集所位於的一或多個列(在下文中命名為當前列)相鄰的列中之第三樣本。舉例而言,相鄰列可為當前列上方之列,且可能先前已經寫碼,使得該列已可用於寫碼程序。藉由在計算第三加權和時包括與當前列相鄰之列的第三樣本,需要一個額外列,但增強了寫碼品質,如上文關於豎直因果及各向同性操作模式所解釋。
根據實施例,一組操作模式可用於寫碼CFA型樣影像,該等操作模式中之第三者包含第一操作模式,例如上文所介紹之豎直因果及各向同性操作模式以及條帶操作模式中之一者。在條帶操作模式下,具有第一加權和之第三樣本由位於當前列內之樣本組成。因此,操作模式之間的選擇係可能的,條帶操作模式提供快速寫碼及低記憶體要求,且第一操作模式提供更高品質以達成更高寫碼效率。
根據如上文所描述之第一及第二態樣的本揭露內容之實施例可用於將CFA型樣影像寫碼成影像表示,該影像表示可如此提供或可以影像表示之經編碼表示提供,且用於藉由解碼影像表示而分別自影像表示或經編碼表示獲得CFA型樣影像。因此,關於CFA型樣影像之寫碼所描述的特徵、功能性及優點同樣適用於寫碼及解碼程序。
較佳實施例之詳細說明
在下文中,詳細地論述實施例,然而,應瞭解,實施例提供可體現於廣泛多種影像及視訊處理及寫碼中之許多可適用技術。所論述之特定實施例僅說明實施及使用本發明技術之特定方式,且並不限制實施例之範圍。在以下描述中,闡述多個細節以提供對本揭露內容之實施例的更透徹解釋。然而,熟習此項技術者將顯而易見,可在無此等特定細節的情況下實踐其他實施例。在其他情況下,以方塊圖形式而非詳細地展示熟知結構及裝置以便避免混淆本文中所描述之實例。此外,除非另外特定地指出,否則可將本文中所描述之不同實施例的特徵彼此組合。
在實施例之以下描述中,相同或類似元件或具有相同功能性之元件具備相同參考符號或以相同名稱來識別,且通常省略具備相同參考數字或以相同名稱識別之元件的重複描述。因此,為具有相同或類似參考數字或以相同名稱識別之元件提供的描述可在不同實施例中相互交換或可應用於彼此。
可將多種色彩變換應用於色彩去相關以編碼CFA型樣影像。此等變換亦可包括空間去相關。
一個實例為RCTD變換,其為出於有損或無損壓縮之目的而應用於真彩色影像的RCT變換之四分量變體。其將如圖8中所見的CFA型樣分成2×2「超像素」,其中之各者由一個紅色值、一個藍色值及二個綠色值組成,且自該等值,因而在各超像素內形成四個分量:
Figure 02_image001
Figure 02_image003
Figure 02_image005
Figure 02_image007
Figure 02_image009
Figure 02_image011
表示捨入至整數,例如至下一較低整數之向下取整或向下捨入運算,或至下一較高整數之向上取整或向上捨入運算。此表示適用於整個申請案中之公式。接著將四元組(Y,Cb ,Cr ,Δ)輸入至其他壓縮步驟。易於看出,此變換完全可逆而無損失。
最近,比利時公司intoPix提議以上變換之變體,包括空間去相關步驟連同色彩變換。為此目的,其將CFA影像分成水平條帶,其中之各者為二個像素或一個超像素高且與整個CFA影像一樣寬。在各條帶內,在四個提昇步驟中執行色彩變換,該等步驟中之各者自身為可逆的。
第一步驟自紅色及藍色樣本以及相鄰綠色樣本產生二個色度座標,如圖9中所展示。
為定義變換,藉由子索引l指示當前位置左方之樣本值且藉由子索引r指示當前位置右方之樣本值。類似地,子索引t指示當前樣本頂部之位置,且子索引b指示當前樣本下方之樣本位置。接著,第一提昇步驟自紅色及藍色值減去綠色樣本值之加權和,且因此類似於以上情況但自綠色值之加權鄰域形成Cb 及Cr 通道:
Figure 02_image013
Figure 02_image015
在左邊緣及右邊緣處,非現有左方綠色通道由右方綠色通道替換,且在右方影像邊緣處,非現有右方綠色通道由左方樣本值替換。
在第二提昇步驟中,二個明度通道Y1 及Y2 如下由Cb 、Cr 及綠色通道形成:
Figure 02_image017
Figure 02_image019
其中Y1 樣本位於二行像素配置之頂部列上,且Y2 樣本位於底部列上,如圖2中所指示。
第三提昇步驟現自Y1 及Y2 計算頂部列上之明度差通道Δ。類似於以上情況,子索引rt指示對角線右上方之樣本值,lt指示左上方之樣本值,rb指示右下方之樣本值且lb指示左下方之樣本值。因此:
Figure 02_image021
最終,最後提昇步驟經由使用差信號Δ自Y1 及Y2 產生輸出明度信號作為平均值:
Figure 02_image023
接著將四元組(Y,Cb ,Cr ,Δ)輸入至其他壓縮步驟,其中視情況自任何空間去相關排除Δ,此係因為其已由高通濾波差信號組成。
類似變換(亦即,組合空間去相關與色彩去相關之變換)已在先前文獻中論述,例如在2018年的國際影像處理會議會刊(ICIP)中由T. Suzuki:「Lossless compression of CFA-sampled images using YDgCoCg transforms with CDF wavelets」論述。然而,彼處所論述之變換係基於首先由H. S. Malvar及G. J. Sullivan在2012年4月(Snowbird,UT) DCC'12會刊第3至12頁之「Progressive-to-lossless compression of color-filter-array images using macropixel spectralspatial transformatio」中提議的YCgCo變換。
Suzuki變換亦係基於提昇,類似於由intoPix所描述之提昇,但不限於二行。
上文所描述之intoPix變換旨在將三個通道之能量壓緊成一個明度通道,亦即,Y,且進一步限於水平條帶。如先前所介紹,根據本揭露內容之第一態樣的想法為壓緊三個通道中之二者的能量。根據本揭露內容之第二態樣,變換包括超出當前經寫碼樣本叢集之列的樣本之至少一列。
詳細描述之第一部分介紹藉由根據本揭露內容之二個態樣之實施例實施的一般技術。隨後,參考一般技術指定根據第一及第二態樣之不同實施例。
圖1展示用於將CFA型樣影像10寫碼成影像表示70之設備100之實例的示意性表示。CFA型樣影像10包含第一通道之第一樣本12、第二通道之第二樣本14及第三通道之第三樣本16,該等第三樣本包括第三樣本16A、16B。舉例而言,第一至第三通道由紅色、藍色及綠色通道或紅色、白色及藍色通道組成。
舉例而言,CFA影像型樣10係自多個感測器元件獲得,該等感測器元件中之各者與第一通道、第二通道及第三通道中之一者相關聯,其中與共同通道相關聯之感測器元件經組配以偵測特定於通道之共同波長範圍內的光。舉例而言,CFA型樣影像可具有拜耳型樣,例如,如圖8中所展示。
CFA型樣影像10分割成樣本叢集20,其各自分別包含位於第一樣本位置22處之第一樣本12中之一者、位於第二樣本位置24處之第二樣本14中之一者、位於第三樣本位置26處之第三樣本16A及位於第四樣本位置28處之另一第三樣本16B。
設備100經組配以藉由針對樣本叢集20中之各者的第一至第四樣本位置22、24、26、28而計算第一至第四色彩座標110、120、130、140來將CFA型樣影像寫碼成影像表示70。在可被稱作第一提昇步驟之步驟1中,對於樣本叢集20中之各者,設備100針對各別樣本叢集20'之第一樣本位置22'而計算第一色彩座標110',例如第一色度差通道座標,使得吾人將第一色彩座標理解為呈現各別樣本叢集20'之第一樣本及第一樣本位置22'與第一經濾波第三樣本值112'的差。藉由形成與第一樣本位置22'相鄰之第三樣本16的第一加權和114'來導出第一經濾波第三樣本值12'。應注意,與特定樣本位置相鄰之樣本可為與特定樣本位置相同之樣本叢集之部分,但亦可為另一樣本叢集之部分。另外,設備100經組配以針對各別樣本叢集20'之第二樣本位置24'而計算第二色彩座標120',例如第二色度差通道座標,使得第二色彩座標120'表示各別樣本叢集20'之第二樣本14'及第二樣本位置14'與第二經濾波第三樣本值122'的差。藉由形成與第二樣本位置24'相鄰之第三樣本16的第二加權和124'來導出第二經濾波第三樣本值122'。
在可被稱作第二提昇步驟之後續步驟2中,對於樣本叢集20中之各者,設備100經組配以針對各別樣本叢集20'之第三樣本位置26'而藉由形成在各別樣本叢集20'之第三樣本位置26'處的第三樣本16A'與第一經濾波色彩座標132'之總和(例如,相等加權和)來計算第三色彩座標130',該第一經濾波色彩座標係藉由形成針對與第三樣本位置26'相鄰之第一樣本位置22及第二樣本位置24而計算的第一色彩座標110及第二色彩座標120之第三加權和134'來導出。設備100經組配以針對各樣本叢集20'之第四樣本位置28'而藉由形成在各別樣本叢集20'之第四樣本位置28'處的第三樣本16B'與第二經濾波色彩座標142'之總和(例如,相等加權和)來計算第四色彩座標140',該第二經濾波色彩座標係藉由針對與第四樣本位置28'相鄰之第一樣本位置22及第二樣本位置24而計算的第一色彩座標110及第二色彩座標120之第四加權和144'來導出。
舉例而言,對於樣本叢集20中之各者,設備100可在影像表示70中提供各別第一至第四色彩座標110、120、130、140。基於第一至第四色彩座標110、120、130、140之影像表示70的表示可被稱作經變換表示149。
替代地,設備100可經組配以使用第三色彩座標130及第四色彩座標140作為中間值,以用於針對樣本叢集20中之各者而計算差分色彩座標250及組合色彩座標260。圖2展示設備100之另一實例的示意性表示,除了計算第一至第四色彩座標110、120、130、140以外,該設備亦包含用於基於第三色彩座標130及第四色彩座標140而計算差分色彩座標250及組合色彩座標260之二個額外步驟。在此狀況下,設備100可針對樣本叢集20中之各者而在影像表示70中提供各別的第一色彩座標110、第二色彩座標120、差分色彩座標250及組合色彩座標260。基於第一色彩座標110、第二色彩座標120、差分色彩座標250及組合色彩座標260之影像表示70的表示可被稱作壓緊之經變換表示249。
因此,在可被稱作第三提昇步驟之第三步驟3中,對於樣本叢集20中之各者,設備100可針對各別樣本叢集20'之第三樣本位置26'而藉由形成在各別樣本叢集20'之第三樣本位置26'處的第三色彩座標130'與經濾波第四色彩座標252'之差來計算差分色彩座標250'。藉由形成針對與第三樣本位置26'相鄰之第四樣本位置28而計算的第四色彩座標140之第五加權和254'(例如,相等加權和)來導出經濾波第四色彩座標252'。
在可被稱作第四提昇步驟之第四步驟4中,對於樣本叢集20中之各者,設備100可針對各別樣本叢集20'之第四樣本位置28'而藉由形成在各別樣本叢集20'之第四樣本位置28'處的第四色彩座標140'與經濾波差分色彩座標262'之總和來計算組合色彩座標260。藉由形成針對與第四樣本位置28'相鄰之第三樣本位置26而計算的差分色彩座標250之第六加權和264'(例如,相等加權和)來導出經濾波差分色彩座標262'。
根據例如如關於圖1中之CFA影像型樣所說明的實施例,第一至第四樣本位置以具有第一類型之列52及第二類型之列54的陣列配置。第一類型之列52包含交替地配置之第一樣本位置22及第三樣本位置26,且第二類型之列54包含交替地配置之第二樣本位置24及第四樣本位置28。第一類型之列52及第二類型之列沿著陣列之行交替地配置。第一類型之列52的第一樣本位置22及第二類型之列54的第二樣本位置24位於陣列之不同行62、64中。
因此,在所描述之陣列配置中,第一樣本位置22中之各者與四個第三樣本16相鄰,該等第三樣本中之二個第三樣本16A位於在水平方向上與第一樣本位置22相鄰之第三樣本位置26處,且二個第三樣本16B位於在豎直方向上與第一樣本位置22相鄰之第四樣本位置28處。在此上下文中,水平方向係指頂部及底部,且豎直方向係指左方及右方。同樣,第二樣本位置24中之各者與四個第三樣本16相鄰,該等第三樣本中之二個第三樣本16位於在豎直方向上與第二樣本位置24相鄰之第三樣本位置26處,且二個第三樣本16位於在水平方向上與第二樣本位置24相鄰之第四樣本位置28處。根據樣本位置之配置的所描述實例,樣本叢集20中之各者位於包含第一類型之一列52及第二類型之一列54的一對二個相鄰樣本列內。應指出,如圖1中所展示的關於第一類型及列52及第二類型之列54以及關於第一類型之行62及第二類型之行64的樣本叢集20之視圖配置為例示性的,亦即,可分別交換列及行之上部及下部位置以及左方及右方位置,此可導致樣本叢集20內之第一至第四樣本位置的四個不同配置。
舉例而言,設備100可以逐列方式(亦即,一列接著一列)執行計算色彩座標,亦即,第一至第四色彩座標110、120、130、140且視情況,差分色彩座標250及組合色彩座標260。不同的處理方案或操作模式可為可能的,不同之處在於充當第一至第六加權和114'、124'、134'、144'、254'、264'之各別輸入值之源的CFA型樣影像之一部分的大小。
舉例而言,設備100可將在各別第一至第四提昇步驟期間計算之第一至第四色彩座標及/或差分及組合色彩座標儲存於各別資料緩衝器中,使得後續提昇步驟可利用所儲存色彩座標。當對於計算其他樣本叢集之色彩座標不需要時,可釋放或覆寫所緩衝的色彩座標110、120、130、140、250、260或樣本12、14、16。因此,需要儲存於各別資料緩衝器中之資料的量因此可取決於在利用各別資料緩衝器之提昇步驟中考慮的相鄰樣本位置之數目。
圖3說明包含供計算色彩座標之樣本叢集20'的CFA型樣影像10之一部分的實例。樣本叢集20'位於第一類型之列52'及第二類型之列54'中,該等列被稱作當前列56。
舉例而言,設備100可在條帶操作模式或行內操作模式下操作,其中僅位於當前列56內之樣本位置處的樣本可有助於第一至第六加權和114'、124'、134'、144'、254'、264'。替代地,設備100可在豎直因果操作模式下操作,其中位於當前列56上方之一或多列中的樣本另外可有助於第一至第六加權和114'、124'、134'、144'、254'、264'中之一或多者。在又一試驗中,設備100可操作各向同性操作模式,其中除豎直因果操作模式以外,位於當前列56下方之一或多列中的樣本亦可有助於第一至第六加權和114'、124'、134'、144'、254'、264'中之一或多者。
應指出,對於並非在CFA型樣影像之邊緣處之位置的樣本位置,對有助於第一至第六加權和114'、124'、134'、144'、254'、264'之樣本進行詳細描述。對於邊緣樣本位置,缺失樣本位置可由鑒於供計算各別加權和之樣本位置而言與缺失樣本位置相對的樣本位置替換。
在條帶操作模式下,僅位於當前列56內的樣本被視為第一至第六加權和114'、124'、134'、144'、254'、264'之輸入值。舉例而言,用於第一加權和114'之第三樣本16可由位於在水平方向上與各別樣本叢集20'之第一樣本位置22'相鄰的第三樣本位置26-1、26'處之第三樣本16以及位於第四樣本位置28'處之第三樣本16組成。相應地,用於第二加權和124'之第三樣本16可由位於在水平方向上與各別樣本叢集20'之第二樣本位置24'相鄰的第四樣本位置28-1、28'處之第三樣本16以及位於第三樣本位置26'處之第三樣本16組成。用於計算第四加權和144'之第一色彩座標110及第二色彩座標120可由位於在水平方向上與各別樣本叢集20'之第四樣本位置28'相鄰的第二樣本位置24'、24-1處之第二色彩座標120及位於在第一豎直方向(例如,頂部方向)上與第三樣本位置26'相鄰之第一樣本位置22'處的第一色彩座標110組成。另外,用於計算第三加權和134'之第一色彩座標110及第二色彩座標120可由位於在水平方向上與各別樣本叢集20'之第三樣本位置26'相鄰的第一樣本位置22'、22-1處之第一色彩座標110及位於在第二豎直方向(例如,底部方向)上與第三樣本位置26'相鄰之第二樣本位置24'處的第二色彩座標120組成。
用於計算第五加權和254'及第六加權和264'之第四色彩座標140及差分色彩座標250在陣列之對角線方向上分別與各別的第三樣本位置26'及第四樣本位置28'相鄰。第一及第二對角線方向係指具有指向第一豎直方向或頂部方向之豎直分量的對角線方向。第三及第四對角線方向係指具有指向第二豎直方向或按鈕方向之豎直分量的對角線方向。
在條帶操作模式下,用於計算第五加權和254'之第四色彩座標140可由針對在陣列之第三及第四對角線方向(例如,左下及按鈕右對角線方向)上與各別樣本叢集20之第三樣本位置26'相鄰的第四樣本位置28'、28-1而計算的第四色彩座標140組成。因此,第六加權和264'之差分色彩座標250可由針對與各別樣本叢集20'以及第一及第二對角線方向(例如,右上對角線方向上之左上方)之第四樣本位置28'相鄰的第三樣本位置26'、26-1而計算的差分色彩座標250組成。
因為在條帶操作模式下,樣本可明確地僅用於計算當前列56之色彩座標,所以特定樣本位置可由針對特定樣本位置而計算之色彩座標替換。因此,此操作模式具有尤其低的記憶體要求。又,由於將第一通道及第二通道之能量壓緊成影像表示之一個色彩座標,相對於目前先進技術變換,其可在低位元速率下將效能改善約0.3 dB。
對於第一、第二及第三通道為紅色、藍色及綠色通道之狀況下,用於計算各別色彩座標之當前列56的另一實例描繪於圖9中。
另一可能的操作模式為參看圖3所解釋之豎直因果操作模式。在豎直因果操作模式下,可在計算第一至第六加權和114'、124'、134'、144'、254'、264'中之一或多者時包括在第一豎直方向上與當前列56相鄰之一或多列內的樣本位置。較佳地,第一豎直方向指向陣列之由設備100接收到的在時間上處於當前列56之前的列。因此,可寫碼CFA型樣影像10而相對於條帶操作模式無額外時間延遲。
舉例而言,在豎直因果操作模式下,可計算第二加權和124'、第四加權和144'及第六加權和264',如關於條帶操作模式所描述。用於第一加權和114'之第三樣本16可由位於在水平方向上與各別樣本叢集20'之第一樣本位置22'相鄰的第三樣本位置26-1、26'處之第三樣本16及位於在豎直方向上與第一樣本位置22'相鄰之第四樣本位置28'、28-2處的第三樣本16組成。另外,用於計算第三加權和134'之第一色彩座標110及第二色彩座標120可由位於在水平方向上與各別樣本叢集20'之第三樣本位置26'相鄰的第一樣本位置22'、22-1處之第一色彩座標110及位於在豎直方向上與第三樣本位置26'相鄰之第二樣本位置24'、24-2處的第二色彩座標120組成。用於計算第五加權和254'之第四色彩座標140可由針對在陣列之四個對角線方向上與各別樣本叢集20之第三樣本位置26'相鄰的第四樣本位置28'、28-1、28-3、28-4而計算的第四色彩座標140組成。換言之,在豎直因果模式之實例中,僅存取頂部相鄰者,且因此不產生額外潛時,但每個提昇步驟皆必須緩衝一個額外行。亦即,編碼器(例如,設備100)輸入緩衝器要求可增加四行,且解碼器(例如,圖5之設備500)輸出緩衝器要求可增加四行。
在條帶操作模式及豎直因果操作模式下,第一至第六加權和114'、124'、134'、144'可經加權使得來自在水平方向上與供計算各別色彩座標之樣本位置相鄰之樣本位置的貢獻之總權重等於來自在豎直方向上與供計算各別色彩座標之樣本位置相鄰之樣本位置的貢獻之總權重。亦即,在僅考慮一個豎直相鄰樣本位置之狀況下,各別值可經雙倍加權。
另一可能的操作模式為各向同性操作模式,其中在計算色彩座標110、120、130、140、250、260中之一或多者或全部時考慮位於在二個豎直方向上與當前列56相鄰之列中的樣本。可計算第一加權和114'、第三加權和134'及第五加權和254',如關於豎直因果操作模式所描述。用於第二加權和124'之第三樣本16可包含位於在水平方向上與各別樣本叢集20'之第二樣本位置24'相鄰的第四樣本位置28-1、28'處之第三樣本16及位於在豎直方向上與第二樣本位置24'相鄰之第三樣本位置26'、26-2處的第三樣本16。在此狀況下,對於計算第二色彩座標120,需要關於先前所描述之操作模式的當前列56下方之一個額外列。另外但視情況,例如取決於藉由考慮位於當前列56下方之額外列而引入的最大可接受時間延遲,用於計算第四加權和144'之第一色彩座標110及第二色彩座標120可包含位於在水平方向上與各別樣本叢集20'之第四樣本位置28'相鄰的第二樣本位置24'、24-1處之第二色彩座標120及位於在豎直方向上與第三樣本位置26'相鄰之第一樣本位置22'、22-2處的第一色彩座標110。在此狀況下,需要關於先前所描述之操作模式的當前列56下方之二個額外列。另外但視情況,第六加權和264'之差分色彩座標250可由針對在四個對角線方向上與各別樣本叢集20'之第四樣本位置28'相鄰的第三樣本位置26'、26-1、26-2、26-3而計算的差分色彩座標250組成。在此狀況下,需要關於先前所描述之操作模式的當前列56下方之四個額外列。換言之,編碼器變換將其輸出70延遲4行或列,且解碼器包括額外延遲4行或列,因此端對端潛時可增加8行列。
根據實施例,設備100包含一組操作模式,其包含各向同性操作模式、豎直因果操作模式及條帶操作模式中之一或多者。因此,可取決於可用記憶體且取決於寫碼及解碼CFA型樣影像10可接受之最大時間延遲而選擇該組操作模式中之一者。
根據實施例,設備100可選擇該組操作模式中之一者以用於寫碼CFA型樣影像10且使得在資料串流中發信選定操作模式,影像表示70在該資料串流發信。
根據實施例,藉由捨入運算分別自第一加權和114'、第二加權和124'、第三加權和134'、第四加權和144'、第五加權和254'及第六加權和264'獲得第一經濾波第三樣本值112'、第二經濾波第三樣本值122'、第一經濾波色彩座標132'、第二經濾波色彩座標142'、經濾波第四色彩座標252'及經濾波差分色彩座標262',此可允許各別色彩座標之高效計算及儲存。舉例而言,捨入運算可為向下取整或向上取整運算,其可分別將數字捨入至下一較低或較高整數。
根據實施例,第一加權和114'及第二加權和124'各自表示其各別第三樣本之平均值。因此,第一色彩值110'及第二色彩值120'可分別表示第一樣本12'及第二樣本14'與相鄰於第一位置22'及第二樣本位置24'之各別第三樣本的經空間濾波平均值之間的差。
根據實施例,第三加權和134'及第四加權和144'之權重由用於對第一色彩座標進行加權之第一權重及用於對第二色彩座標進行加權之第二權重組成。舉例而言,第一權重可實施為二之第一冪,且第二權重可實施為二之第二冪,二之第一冪及第二冪的指數為整數,例如負整數、零或正整數。
在下文中,更詳細地描述計算色彩座標110、120、130、140、250、260之實例。出於說明之目的且根據一些實例,假定第一通道為紅色通道,第二通道為藍色通道且第三通道為綠色通道。然而,所描述變換對於不同組態亦為有利的。舉例而言,在其他實施例中,第一通道及第二通道可交換及/或第三通道可為白色通道。在以下公式中,R表示第一樣本12,B表示第二樣本22,且G表示第三樣本24或更精確而言,表示其樣本值。亦出於說明性目的而非限制性的,將第一豎直方向選擇為頂部方向,將第二豎直方向選擇為底部方向,且將水平方向選擇為左方及右方。用l 為待供計算各別色彩座標之樣本位置的左方相鄰樣本編索引,用r 為右方相鄰樣本編索引,用t 為頂部相鄰樣本編索引且用b 為底部相鄰樣本編索引,且用ltlbrtrb 為對應對角線方向編索引。因此,第一色彩座標110可被稱作第一色度差通道Cr ,第二色彩座標120可被稱作第二色度差通道Cb ,第三色彩座標130可被稱作第一洋紅色通道M1 ,第四色彩座標140可被稱作第二洋紅色通道M2 ,差分色彩座標250可被稱作洋紅色差分通道Δ,且組合色彩座標260可被稱作平均洋紅色通道M。
根據實施例,在第三加權和134'及第四中加權和144'中之各者中,用於第一色彩座標110之總權重等於用於第二色彩座標120之總權重,且各別加權和之權重的總和等於一。對於此特定狀況且結合第一加權和114'及第二加權和124'為相等加權和,此可形成第三通道(例如,綠色通道)之空間高通,且所得組合色彩座標之高頻率分量或DC分量主要或甚至僅含有第一及第二通道之分量,例如紅色及藍色分量,但不含有第三通道之分量,例如綠色分量。因此,在第一及第二通道表示其餘通道及藍色通道之狀況下,組合色彩座標可被稱作洋紅色通道(M)。換言之,M之DC分量可為紅色及藍色通道之平均值,從而獲得其名稱「洋紅色」。然而,例如第三及第四列舉步驟之提昇步驟可確保可自Cb 、Cr 及M重建構綠色DC分量,將CFA型樣影像之能量壓緊成洋紅色通道可導致更高效寫碼,從而將信雜比減小例如0.3 dB。
舉例而言,在第一列舉步驟中,可根據以下公式計算第一色彩座標110及第二色彩座標120,該等公式對於各向同性操作模式經極佳地展示:
Figure 02_image025
Figure 02_image027
在「豎直因果」模式下,Cb 之計算中的Gb 由Gt 替換。在「條帶操作模式」下,進行先前替代,且Cr 之計算中的Gt 亦由Gb 替換。
在第二提昇步驟中,可在各向同性操作模式下根據下式計算第三色彩座標130及第四色彩座標140:
Figure 02_image029
Figure 02_image031
舉例而言,M1 樣本位於頂部列處,且M2 通道位於底部列上。在豎直因果操作模式下,M2 之計算中的Cr,b 可由Cr,t 替換,在條帶操作模式下,另外,Cb,t 可由Cb,b 替換。替代規則類似於第一提昇步驟之規則,亦即,藉由自上方或下方反射類似樣本來建立不可用樣本。
在以上關於M1及M2之公式中,用於第一色彩座標110 (Cr )之權重實施為二之第一冪,且用於第二色彩座標120 (Cb )之權重實施為二之第二冪。對於r=b=1之狀況,二之第一冪的指數及二之第二冪的指數二者均等於-2,從而導致用於第一及第二色彩座標中之各者的權重為1/4,使得第三加權和134'及第四加權和144'之權重的總和在此狀況下為一,因此提供用於在第一通道及第二通道分別為紅色及藍色通道之狀況下將CFA型樣影像之能量壓緊成洋紅色通道的例示性實施方案。
根據實施例,第五加權和254'為第五加權和254'之第四色彩座標140的相等加權平均值。舉例而言,在此狀況下,差分色彩座標250可主要表示前二個第三通道之差分分量,使得差分色彩座標250可尤其小,此允許高效編碼。
舉例而言,在各向同性及豎直因果操作模式下,可根據下式計算差分色彩座標250:
Figure 02_image033
在條帶操作模式下,Mlt 可由Mlb 替換且Mrt 由Mrb 替換。
根據實施例,第六加權和264'為第六加權和264'之第四色彩座標的相等加權平均值,且第六加權和264'之權重的總和等於二分之一。
舉例而言,可根據下式計算組合色彩座標260:
Figure 02_image035
因此,所描述變換可在組合色彩座標216中接觸第一及第二通道之能量。在豎直因果模式及條帶操作模式下,Δlb 可由Δlt 替換且Δrb 可由Δrt 替換。
舉例而言,變換之最終輸出(例如,壓緊之經變換表示249)可為(M,Cb ,Cr ,Δ)樣本之陣列。此等樣本可為進一步空間去相關之輸入。視情況,僅Δ可能不需要額外空間去相關。
圖4說明用於寫碼CFA型樣影像10之設備100的另一實例。如所展示,設備100可另外包含量化器480及熵寫碼器490。量化器480可藉由量化經變換表示149 (亦即,樣本叢集20之第一至第四色彩座標110、120、130、140)或替代地量化壓緊之經變換表示249 (亦即,樣本叢集20之第一色彩座標110及第二色彩座標120以及差分色彩座標250及組合色彩座標260)來導出經量化表示482。熵寫碼器490可編碼經量化表示482,以便獲得可提供為影像表示70之經編碼表示495。
視情況,設備100可進一步包含空間去相關級475,其可使用空間去相關變換(例如,離散餘弦變換或離散小波變換)以進一步空間去相關經變換表示149或壓緊之經變換表示249。在一個實例中,空間去相關級475將空間去相關變換應用於第一至第四色彩座標110、120、130、140或第一色彩座標110、第二色彩座標120、差分色彩座標250及組合色彩座標260,以便獲得空間去相關表示478,基於該表示,量化器480可導出經量化表示482。在另一實例中,空間去相關級475將空間去相關變換應用於第一色彩座標110、第二色彩座標120及組合色彩座標2060以便獲得空間去相關表示478,且量化器480可自空間去相關表示478及樣本叢集20之差分色彩座標250導出經量化表示482。
圖5展示用於解碼影像表示70以便獲得CFA型樣影像10之設備500的示意性表示。設備500經組配以針對樣本叢集20之各樣本叢集20'而自第一至第四色彩座標110、120、130、140計算第一樣本12'、第二樣本14'及二個第三樣本16A'、16B'。
設備500可針對各別樣本叢集20'之第三樣本位置26'而藉由形成在各別樣本叢集20'之第三樣本位置26'處的第三色彩座標130'與第一經濾波色彩座標132'之差來計算各別第三樣本位置26'處之第三樣本16A'。另外,設備500可針對各樣本叢集20'之第四樣本位置28'而藉由形成在各別樣本叢集20'之第四樣本位置28'處的第四色彩座標140'與第二經濾波色彩座標142'之差來計算各別第四樣本位置28'處之第三樣本16B'。可自第一及第二色彩座標獲得第一經濾波色彩座標132及第二經濾波色彩座標142,如關於設備100所描述。
在後續步驟中,設備500可針對各樣本叢集20'之第一樣本位置22'而藉由形成在各別樣本叢集20'之第一樣本位置22'處的第一色彩座標110'與第一經濾波第三樣本值112'之總和來計算各別第一樣本位置22'處之第一樣本12'。另外,設備500可針對各樣本叢集20'之第二樣本位置24'而藉由形成在各別樣本叢集20'之第二樣本位置24'處的第二色彩座標120'與第二經濾波第三樣本值122'之總和來計算各別第二樣本位置14'處之第二樣本14'。可根據如關於設備100所描述之前一步驟自針對第三樣本位置26及第四樣本位置28而計算的第三樣本16獲得第一經濾波第三樣本值112及第二經濾波第三樣本值122。
與設備100等效地,設備500可包含用於計算第一至第六加權和之一組操作模式。根據實施例,設備500可自發信影像表示之資料串流導出待用於解碼影像表示之操作模式,且可相應地選擇該組操作模式中之一者。
圖6說明設備500之另一實例,該設備經組配以自可在影像表示70內發信之第一色彩座標110及第二色彩座標120以及差分色彩座標250及組合色彩座標260獲得第一至第四樣本12、14、16A、16B。圖6中所展示之實施例包含關於圖5中所展示之實施例的用於自差分色彩座標250及組合色彩座標260計算第三色彩座標130及第四色彩座標140的二個額外步驟。出於彼目的,設備500可針對各別樣本叢集20'之第四樣本位置28'而藉由形成在各別樣本叢集20'之第四樣本位置28'處的組合色彩座標260'與經濾波差分色彩座標262'之差來計算各別第四樣本位置28'處之第四色彩座標140'。可自差分色彩座標250獲得經濾波差分色彩座標262,如關於設備100所描述。
在後續步驟中,設備500可針對各別樣本叢集20'之第三樣本位置26'而藉由形成在各別樣本叢集20'之第三樣本位置26'處的差分色彩座標250'與經濾波第四色彩座標252'之總和來計算各別第三樣本位置26'處之第三色彩座標130'。可自第四色彩座標140獲得經濾波第四色彩座標252,如關於設備100所描述。
圖7展示進一步包含熵解碼器590及反量化器580之設備500的另一實例之示意性表示。熵解碼器590可解碼可表示影像表示70之經編碼表示495,以便獲得經量化表示482。反量化器580可使用反量化程序以便自經量化表示482獲得可指示為經變換表示149之第一至第四色彩座標110、120、130、140,或替代地獲得可指示為壓緊之經變換表示249的第一色彩座標110、第二色彩座標120、差分色彩座標250及組合色彩座標260。
視情況,反量化器580提供如關於設備100 (參見圖4)所介紹之空間去相關表示478,且設備500進一步包含反空間去相關級575,該反空間去相關級可使用反空間去相關變換(例如,反離散餘弦變換或反離散小波變換)以導出第一至第四色彩座標110、120、130、140或第一色彩座標110、第二色彩座標120、差分色彩座標250及組合色彩座標260。
根據另一選項,反量化器580提供空間去相關表示478及差分色彩座標250,且設備500進一步包含可使用反空間去相關變換以導出第一色彩座標110、第二色彩座標120及組合色彩座標260的反空間去相關級575。
對於用於將影像表示70解碼成CFA型樣影像10之設備500的其他細節,參考設備100之描述。儘管用相同參考符號指示之信號例如由於量化損失而可能不同,但用如關於設備100之相同參考符號指示的設備500之特徵具有等效功能性且可等效地實施,如在各別描述中所介紹。
在下文中,描述根據第一及第二態樣的本揭露內容之實施例。展示基於設備100之實施例,如關於圖1所描述。
在根據本揭露內容之第一態樣的實施例中,以使得第三加權和134'之權重的總和大於二分之一的方式計算第三加權和134',且以使得第四加權和144'之權重的總和大於二分之一的方式導出第四加權和144'。
在根據本揭露內容之第二態樣的實施例中,第一加權和114'之第三樣本16的第三樣本位置26超出各別樣本叢集20'所位於之陣列的當前列56。舉例而言,可計算第一加權和114',如關於各向同性操作模式或豎直因果操作模式所描述。視情況,亦可根據用於豎直因果操作模式之各向同性操作模式中之一者執行第二至第六加權和124'、134'、144'、254'、264'之計算。換言之,根據本揭露內容之第二態樣,設備100、500可包含各向同性操作模式及豎直因果操作模式中之一者。上文描述了此等操作模式之不同的可能實施方案。
根據第二態樣之其他實施例可另外包含條帶操作模式。舉例而言,設備100、500可在條帶操作模式與第一操作模式之間進行選擇,該第一操作模式可例如對應於各向同性或豎直因果操作模式。根據實施例,設備100可經組配以在資料串流中發信用於計算影像表示70之操作模式,影像表示70在該資料串流中發信。因此,設備500可經組配以自資料串流導出待用於解碼影像表示70以便獲得CFA型樣影像之操作模式。
儘管已在設備之內容背景下將一些態樣描述為特徵,但顯然,此描述亦可被視為方法之對應特徵的描述。儘管已在方法之內容背景下將一些態樣描述為特徵,但顯然,此描述亦可被視為關於設備之功能性的對應特徵之描述。
可由(或使用)比如微處理器、可規劃電腦或電子電路之硬體設備執行方法步驟中之一些或全部。在一些實施例中,可由此設備執行最重要方法步驟中之一或多者。
本發明之經編碼影像信號可儲存於數位儲存媒體上,或可在諸如無線傳輸媒體或諸如網際網路之有線傳輸媒體的傳輸媒體上傳輸。
取決於某些實施方案要求,本發明之實施例可以硬體或軟體或至少部分地以硬體或至少部分地以軟體實施。可使用例如軟碟、DVD、藍光(Blu-Ray)、CD、ROM、PROM、EPROM、EEPROM或快閃記憶體之數位儲存媒體來執行實施方案,該數位儲存媒體具有儲存於其上之電子可讀控制信號,該等電子可讀控制信號與可規劃電腦系統協作(或能夠協作)使得執行各別方法。因此,數位儲存媒體可為電腦可讀的。
根據本發明之一些實施例包含具有電子可讀控制信號之資料載體,該等控制信號能夠與可規劃電腦系統協作,使得執行本文中所描述之方法中的一者。
一般而言,本發明之實施例可實施為具有程式碼之電腦程式產品,當電腦程式產品在電腦上運行時,程式碼操作性地用於執行該等方法中之一者。程式碼可例如儲存於機器可讀載體上。
其他實施例包含儲存於機器可讀載體上的用於執行本文中所描述之方法中之一者的電腦程式。
換言之,本發明方法之實施例因此為電腦程式,其具有用於在電腦程式運行於電腦上時執行本文中所描述之方法中之一者的程式碼。
因此,本發明方法之另一實施例為資料載體(或數位儲存媒體,或電腦可讀媒體),其包含記錄於其上的用於執行本文中所描述之方法中之一者的電腦程式。資料載體、數位儲存媒體或記錄媒體通常為有形的及/或非暫時性的。
因此,本發明方法之另一實施例為表示用於執行本文中所描述之方法中之一者的電腦程式之資料串流或信號序列。資料串流或信號序列可例如經組配以經由資料通訊連接(例如,經由網際網路)而傳送。
另一實施例包含處理構件,例如經組配或經調適以執行本文中所描述之方法中之一者的電腦或可規劃邏輯裝置。
另一實施例包含電腦,其上安裝有用於執行本文中所描述之方法中之一者的電腦程式。
根據本發明之另一實施例包含經組配以(例如,電子地或光學地)將用於執行本文中所描述之方法中之一者的電腦程式傳送至接收器的設備或系統。接收器可例如為電腦、行動裝置、記憶體裝置或其類似者。設備或系統可例如包含用於將電腦程式傳送至接收器之檔案伺服器。
在一些實施例中,可規劃邏輯裝置(例如,場可規劃閘陣列)可用以執行本文中所描述之方法的功能性中之一些或全部。在一些實施例中,場可規劃閘陣列可與微處理器合作,以便執行本文中所描述之方法中的一者。一般而言,該等方法較佳由任何硬體設備執行。
本文中所描述之設備可使用硬體設備或使用電腦或使用硬體設備與電腦之組合來實施。
本文中所描述之方法可使用硬體設備或使用電腦或使用硬體設備與電腦之組合來執行。
在前述實施方式中,可見各種特徵出於精簡本揭露內容之目的而在實例中分組在一起。不應將本揭露內容之方法解譯為反映以下意圖:所主張實例要求比各技術方案中明確敍述更多的特徵。實情為,如以下申請專利範圍所反映,主題可在於單個所揭露實例之少於全部的特徵。因此,以下申請專利範圍特此併入實施方式中,其中各技術方案就其自身而言可作為分開實例。雖然各技術方案就其自身而言可作為分開實例,但應注意,儘管附屬技術方案可能在申請專利範圍中提及與一或多個其他技術方案之特定組合,但其他實例亦可包括附屬技術方案與各其他附屬技術方案之主題的組合或各特徵與其他附屬或獨立技術方案之組合。除非陳述並不希望特定組合,否則在本文中提議此等組合。此外,希望亦包括技術方案對於任何其他獨立技術方案的特徵,即使並不直接使此技術方案附屬於獨立技術方案亦如此。
上文所描述之實施例僅說明本揭露內容之原理。應理解,本文中所描述之配置及細節的修改及變化對於熟習此項技術者將為顯而易見的。因此,其僅希望由接下來之申請專利範圍之範圍限制,而非由藉助於本文中實施例之描述及解釋所呈現的特定細節限制。
10:CFA型樣影像 12:第一樣本 12':第一經濾波第三樣本值/第一樣本 14:第二樣本 14':第二樣本位置/第二樣本 16,16A,16B,16A',16B':第三樣本 20,20':樣本叢集 22,22',22-1,22-2:第一樣本位置 24,24',24-1,24-2:第二樣本位置 26,26',26-1,26-2,26-3:第三樣本位置 28,28',28-1,28-2,28-3,28-4:第四樣本位置 52,52':第一類型之列 54,54':第二類型之列 56:當前列 62,64:行 70:影像表示/輸出 100:用於將CFA型樣影像寫碼成影像表示之設備 110:第一色彩座標 110':第一色彩座標/第一色彩值 112,112':第一經濾波第三樣本值 114':第一加權和 120:第二色彩座標 120':第二色彩座標/第二色彩值 122,122':第二經濾波第三樣本值 124':第二加權和 130,130':第三色彩座標 132':第一經濾波色彩座標 134':第三加權和 140,140':第四色彩座標 141:元件 142':第二經濾波色彩座標 144':第四加權和 149:經變換表示 249:壓緊之經變換表示 250,250':差分色彩座標 252':經濾波第四色彩座標 254':第五加權和 260,260':組合色彩座標 262':經濾波差分色彩座標 264':第六加權和 475:空間去相關級 478:空間去相關表示 480:量化器 482:經量化表示 490:熵寫碼器 495:經編碼表示 500:用於解碼影像表示以便獲得CFA型樣影像之設備 575:反空間去相關級 580:反量化器 590:熵解碼器
本揭露內容之有利實施方案為附屬技術方案之主題,且下文關於諸圖更詳細地描述較佳實施例,在該等圖中: 圖1展示根據一實施例之用於寫碼CFA型樣影像的設備, 圖2展示根據另一實施例之用於寫碼CFA型樣影像的設備, 圖3展示CFA型樣影像之實例, 圖4展示根據另一實施例之用於寫碼CFA型樣影像的設備, 圖5展示根據一實施例之用於將影像表示解碼成CFA型樣影像的設備, 圖6展示根據另一實施例之用於將影像表示解碼成CFA型樣影像的設備, 圖7展示根據另一實施例之用於將影像表示解碼成CFA型樣影像的設備, 圖8展示CFA型樣影像之實例, 圖9展示用於在條帶操作模式下寫碼CFA型樣影像之當前列的實例。
10:CFA型樣影像
12:第一樣本
12':第一經濾波第三樣本值/第一樣本
14:第二樣本
14':第二樣本位置/第二樣本
16,16A,16B,16A',16B':第三樣本
20,20':樣本叢集
22,22':第一樣本位置
24,24':第二樣本位置
26,26':第三樣本位置
28,28':第四樣本位置
52:第一類型之列
54:第二類型之列
62,64:行
70:影像表示/輸出
100:用於將CFA型樣影像寫碼成影像表示之設備
110:第一色彩座標
110':第一色彩座標/第一色彩值
112':第一經濾波第三樣本值
114':第一加權和
120:第二色彩座標
120':第二色彩座標/第二色彩值
122':第二經濾波第三樣本值
124':第二加權和
130':第三色彩座標
132':第一經濾波色彩座標
134':第三加權和
140':第四色彩座標
141:元件
142':第二經濾波色彩座標
144':第四加權和
149:經變換表示

Claims (78)

  1. 一種用於將一影像表示解碼成一CFA型樣影像之設備,其中該CFA型樣影像包含一第一通道之第一樣本、一第二通道之第二樣本及一第三通道之第三樣本,其中該CFA型樣影像分割成樣本叢集,該等樣本叢集中之各者包含第一至第四樣本位置,其中該等第一樣本中之一者位於該第一樣本位置處,該等第二樣本中之一者位於該第二樣本位置處,且二個第三樣本分別位於該第三樣本位置及該第四樣本位置處,其中該設備經組配以針對各樣本叢集而導出各別樣本叢集之該第一樣本位置的一第一色彩座標、該各別樣本叢集之該第二樣本位置的一第二色彩座標、該各別樣本叢集之該第三樣本位置的一第三色彩座標及該各別樣本叢集之該第四樣本位置的一第四色彩座標,其中該設備經組配以藉由以下操作將該影像表示解碼成該CFA影像:對於各樣本叢集之該第三樣本位置,藉由形成在該第三樣本位置處之該第三色彩座標與一第一經濾波色彩座標的一差而計算各別第三樣本位置處之該第三樣本,該第一經濾波色彩座標係藉由以使得位於與該第三樣本位置相鄰之第一及第二樣本位置處的第一及第二色彩座標之一第三加權和的權重之一總和大於二分之一的一方式形成該第三加權和來導出,對於各樣本叢集之該第四樣本位置,藉由形成在該第四樣本位置處之該第四色彩座標與一第二經濾波色彩座標的一差而計算各別第四樣本位置處之該第三樣本,該第二經濾波色彩座標係藉由以使得位於與該第四樣本位置相鄰之第一及第二樣本位置處的第一及第二色彩座標之一第四加權和的權重之一總和大於二分之一的一方式形成該第四加權和來導出,對於各樣本叢集之該第一樣本位置,藉由形成在該第一樣本位置處之 該第一色彩座標與一第一經濾波第三樣本值的一總和而計算各別第一樣本位置處之該第一樣本,該第一經濾波第三樣本值係藉由形成針對與該第一樣本位置相鄰之第三樣本位置及第四樣本位置而計算的第三樣本之一第一加權和來導出,對於各樣本叢集之該第二樣本位置,藉由形成在該第二樣本位置處之該第二色彩座標與一第二經濾波第三樣本值的一總和而計算各別第二樣本位置處之一第二樣本,該第二經濾波第三樣本值係藉由形成針對與該第二樣本位置相鄰之第三樣本位置及第四樣本位置而計算的第三樣本之一第二加權和來導出。
  2. 如請求項1之設備,其中該第三加權和及該第四加權和之該等權重由用於對第一色彩座標進行加權之一第一權重及用於對第二色彩座標進行加權之一第二權重組成。
  3. 如請求項2之設備,其中該第一權重實施為二之一第一冪,且其中該第二權重實施為二之一第二冪,二之該第一冪及該第二冪的指數為一整數。
  4. 如請求項1之設備,其中該等第一至第四樣本位置係以具有一第一類型之列及一第二類型之列的一陣列配置,第一類型之列各自包含交替地配置之第一樣本位置及第三樣本位置,第二類型之列包含交替地配置之第二樣本位置及第三樣本位置,其中該第一類型之該等列及該第二類型之列沿著該陣列之行交替地配置,且其中一方面該第一類型之該等列內的該等第三樣本位置及另一方面該第二類型之該等列內的該等第三樣本位置位於不同行中。
  5. 如請求項4之設備,其中該設備包含一組操作模式,其包含一各向同性操作模式、一豎直因果操作模式及一條帶操作模式下之至少一者,其中除了位於該CFA型樣影像之一邊緣處的樣本叢集以外,該設備經組配以亦排 他地包括以下各者以針對該各別樣本叢集之該等樣本位置中之一者而計算該等色彩座標中之一或多者,在該各向同性操作模式下,位於該各別樣本叢集所位於之一或多個當前列內的樣本位置處之樣本及位於該等當前列上方及下方之列中的樣本,在該豎直因果操作模式下,位於該等當前列內之樣本位置處的樣本及位於該等當前列上方之一或多個列中的樣本,以及在該條帶操作模式下,位於該等當前列內之樣本位置處的樣本。
  6. 如請求項5之設備,其中該設備經組配以選擇該組操作模式中之一者且其中該設備經組配以自發信該影像表示之一資料串流導出待用於解碼該影像表示之該操作模式。
  7. 如請求項1之設備,其中該第三加權和及該第四加權和為各別第一及第二色彩座標之相等加權平均值。
  8. 如請求項1之設備,其中該設備經組配以使用一捨入運算自該第一加權和導出該第一經濾波第三樣本值,自該第二加權和導出該第二經濾波第三樣本值,自該第三加權和導出該第一經濾波色彩座標,且自該第四加權和導出該第二經濾波色彩座標。
  9. 如請求項1之設備,其中該設備經組配以藉由以下操作來導出該等第三及第四色彩座標:對於各樣本叢集之該第四樣本位置,藉由形成在該第四樣本位置處之組合色彩座標與一經濾波差分色彩座標之一差而計算該各別第四樣本位置處之該第四色彩座標,該經濾波差分色彩座標係藉由形成位於與該第四樣本位置相鄰之第三樣本位置處的差分色彩座標之一第五加權和來導出,對於各樣本叢集之該第三樣本位置,藉由形成在該第三樣本位置處之該差分色彩座標與一經濾波第四色彩座標之一總和而計算該各別第三樣本位置處之 該第三色彩座標,該經濾波第四色彩座標係藉由形成針對與該第三樣本位置相鄰之第四樣本位置而計算的第四色彩座標之一第六加權和來導出。
  10. 如請求項8之設備,其中該設備經組配以使用一捨入運算自該第五加權和導出該經濾波差分色彩座標且自該第六加權和導出該經濾波第四色彩座標。
  11. 如請求項9之設備,其中該等第一至第四樣本位置係以具有一第一類型之列及一第二類型之列的一陣列配置,第一類型之列各自包含交替地配置之第一樣本位置及第三樣本位置,第二類型之列包含交替地配置之第二樣本位置及第三樣本位置,其中該第一類型之該等列及該第二類型之列沿著該陣列之行交替地配置,且其中一方面該第一類型之該等列內的該等第三樣本位置及另一方面該第二類型之該等列內的該等第三樣本位置位於不同行中,且其中該設備具有一各向同性操作模式,其中,該第一加權和之該等第三樣本包含在該陣列之豎直及水平方向上與該第一樣本位置相鄰之該等第三樣本,該第二加權和之該等第三樣本包含在該陣列之豎直及水平方向上與該第二樣本位置相鄰之該等第三樣本,該第三加權和之該等第一及第二色彩座標包含針對在該陣列之豎直及水平方向上與該第三樣本位置相鄰之第一及第二樣本位置而計算的該等第一及第二色彩座標,該第四加權和之該等第一及第二色彩座標包含針對在該陣列之豎直及水平方向上與該第四樣本位置相鄰之第一及第二樣本位置而計算的該等第一及第二色彩座標,該第五加權和之該等第四色彩座標包含針對在該陣列之對角線方向上與該第三樣本位置相鄰之第四樣本位置而計算的該等第四色彩座標, 該第六加權和之該等差分色彩座標包含針對在該陣列之對角線方向上與該第四樣本位置相鄰之第三樣本位置而計算的該等差分色彩座標。
  12. 如請求項9之設備,其中該等第一至第四樣本位置係以具有一第一類型之列及一第二類型之列的一陣列配置,第一類型之列各自包含交替地配置之第一樣本位置及第三樣本位置,第二類型之列包含交替地配置之第二樣本位置及第三樣本位置,其中該第一類型之該等列及該第二類型之列沿著該陣列之行交替地配置,且其中一方面該第一類型之該等列內的該等第三樣本位置及另一方面該第二類型之該等列內的該等第三樣本位置位於不同行中,且其中該設備具有一豎直因果操作模式,其中,該第一加權和之該等第三樣本由在該陣列之豎直及水平方向上與該第一樣本位置相鄰之該等第三樣本組成,該第二加權和之該等第三樣本由在該陣列之水平方向及一第一豎直方向上與該第二樣本位置相鄰之該等第三樣本組成,其中在水平方向上與該第二樣本位置相鄰之該等第三樣本的該第二加權和之權重的一總和等於在該第一豎直方向上與該第二樣本位置相鄰之該第三樣本的該第二加權和之一權重,該第三加權和之該等第一及第二色彩座標由針對在該陣列之豎直及水平方向上與該第三樣本位置相鄰之第一及第二樣本位置而計算的該等第一及第二色彩座標組成,該第四加權和之該等第一及第二色彩座標由針對在該陣列之水平方向及該第一豎直方向上與該第四樣本位置相鄰之第一及第二樣本位置而計算的該等第一及第二色彩座標組成,該第五加權和之該等第四色彩座標由針對在該陣列之對角線方向上與該第三樣本位置相鄰之第四樣本位置而計算的該等第四色彩座標組成,該第六加權和之該等差分色彩座標由針對在該陣列之一第一對角線方向及 一第二對角線方向上與該第四樣本位置相鄰之第三樣本位置而計算的該等差分色彩座標組成,其中該第一對角線方向及該第二對角線方向之豎直分量指向與該第一豎直方向相同的方向。
  13. 如請求項9之設備,其中該等第一至第四樣本位置係以具有一第一類型之列及一第二類型之列的一陣列配置,第一類型之列各自包含交替地配置之第一樣本位置及第三樣本位置,第二類型之列包含交替地配置之第二樣本位置及第三樣本位置,其中該第一類型之該等列及該第二類型之列沿著該陣列之行交替地配置,且其中一方面該第一類型之該等列內的該等第三樣本位置及另一方面該第二類型之該等列內的該等第三樣本位置位於不同行中,且其中該設備具有一條帶操作模式,其中,該第一加權和之該等第三樣本由在該陣列之水平方向及一第二豎直方向上與該第一樣本位置相鄰之該等第三樣本組成,其中在水平方向上與該第二樣本位置相鄰之該等第三樣本的該加權和之權重的一總和等於在該第二豎直方向上與該第二樣本位置相鄰之該第三樣本的該加權和之一權重,該第二加權和之該等第三樣本由在該陣列之水平方向及一第一豎直方向上與該第二樣本位置相鄰之該等第三樣本組成,其中在水平方向上與該第二樣本位置相鄰之該等第三樣本的該加權和之權重的一總和等於在該第一豎直方向上與該第一樣本位置相鄰之該第三樣本的該加權和之一權重,該第三加權和之該等第一及第二色彩座標由針對在該陣列之水平方向及該第二豎直方向上與該第三樣本位置相鄰之第一及第二樣本位置而計算的該等第一及第二色彩座標組成,該第四加權和之該等第一及第二色彩座標由針對在該陣列之水平方向及該第一豎直方向上與該第四樣本位置相鄰之第一及第二樣本位置而計算的該等第一及第二色彩座標組成, 該第五加權和之該等第四色彩座標由針對在該陣列之一第三對角線方向及一第四對角線方向上與該第三樣本位置相鄰之第四樣本位置而計算的該等第四色彩座標組成,其中該第三對角線方向及該第四對角線方向之豎直分量指向與該第二豎直方向相同的方向,該第六加權和之該等差分色彩座標由針對在該陣列之一第一對角線方向及一第二對角線方向上與該第四樣本位置相鄰之第三樣本位置而計算的該等差分色彩座標組成,其中該第一對角線方向及該第二對角線方向之豎直分量指向與該第一豎直方向相同的方向。
  14. 如請求項9之設備,其中該第六加權和為一相等加權和,其中該第六加權和之權重的一總和等於二分之一。
  15. 如請求項9之設備,其中該第五加權和為該等第四色彩座標之一相等加權平均值。
  16. 如請求項1之設備,其中該設備經組配以接收一經編碼表示作為該影像表示,且其中該設備進一步包含一熵解碼器,其經組配以解碼該經編碼表示以便導出該影像表示之一經量化表示,以及一反量化器,其經組配以藉由一反量化程序導出該等第一至第四色彩座標或該第一色彩座標、該第二色彩座標、該差分色彩座標及該組合色彩座標。
  17. 如請求項1之設備,其中該設備經組配以接收一經編碼表示作為該影像表示,且其中該設備進一步包含一熵解碼器,其經組配以解碼該經編碼表示以便導出該影像表示之一經量化表示,一反量化器,其經組配以藉由一反量化程序基於該經量化表示而導出一空間去相關表示,以及 一反空間去相關級,其經組配以藉由使用一反空間去相關變換自該空間去相關表示導出該等第一至第四色彩座標或該第一色彩座標、該第二色彩座標、該差分色彩座標及該組合色彩座標。
  18. 如請求項9之設備,其中該設備經組配以接收一經編碼表示作為該影像表示,且其中該設備進一步包含一熵解碼器,其經組配以解碼該經編碼表示以便導出該影像表示之一經量化表示,一反量化器,其經組配以藉由一反量化程序基於該經量化表示而導出一空間去相關表示及該等差分色彩座標,以及一反空間去相關級,其經組配以藉由使用一反空間去相關變換自該空間去相關表示導出該第一色彩座標、該第二色彩座標及該組合色彩座標。
  19. 一種用於將一CFA型樣影像寫碼成一影像表示之設備,其中該CFA型樣影像包含一第一通道之第一樣本、一第二通道之第二樣本及一第三通道之第三樣本,其中該CFA型樣影像分割成樣本叢集,該等樣本叢集中之各者包含第一至第四樣本位置,其中該等第一樣本中之一者位於該第一樣本位置處,該等第二樣本中之一者位於該第二樣本位置處,且二個第三樣本分別位於該第三樣本位置及該第四樣本位置處,其中該設備經組配以藉由以下操作將該CFA型樣影像寫碼成該影像表示:對於各樣本叢集之該第一樣本位置,計算一第一色彩座標使得該第一色彩座標表示在該第一樣本位置處之該第一樣本與一第一經濾波第三樣本值的一差,該第一經濾波第三樣本值係藉由形成與該第一樣本位置相鄰之第三樣本的一第一加權和來導出,對於各樣本叢集之該第二樣本位置,計算一第二色彩座標使得該第二 色彩座標表示在該第二樣本位置處之該第二樣本與一第二經濾波第三樣本值的一差,該第二經濾波第三樣本值係藉由形成與該第二樣本位置相鄰之第三樣本的一第二加權和來導出,對於各樣本叢集之該第三樣本位置,藉由形成在該第三樣本位置處之該第三樣本與一第一經濾波色彩座標的一總和而計算一第三色彩座標,該第一經濾波色彩座標係藉由以使得針對與該第三樣本位置相鄰之第一及第二樣本位置而計算的第一及第二色彩座標之一第三加權和的權重之一總和大於二分之一的一方式形成該第三加權和來導出,對於各樣本叢集之該第四樣本位置,藉由形成在該第四樣本位置處之該第三樣本與一第二經濾波色彩座標之一總和而計算一第四色彩座標,該第二經濾波色彩座標係以使得針對與該第四樣本位置相鄰之第一及第二樣本位置而計算的第一及第二色彩座標之一第四加權和的權重之一總和大於二分之一的一方式藉由該第四加權和來導出。
  20. 如請求項19之設備,其中該第三加權和及該第四加權和之該等權重由用於對第一色彩座標進行加權之一第一權重及用於對第二色彩座標進行加權之一第二權重組成。
  21. 如請求項20之設備,其中該第一權重實施為二之一第一冪,且其中該第二權重實施為二之一第二冪,二之該第一冪及該第二冪的指數為一整數。
  22. 如請求項19之設備,其中該等第一至第四樣本位置係以具有一第一類型之列及一第二類型之列的一陣列配置,第一類型之列各自包含交替地配置之第一樣本位置及第三樣本位置,第二類型之列包含交替地配置之第二樣本位置及第三樣本位置,其中該第一類型之該等列及該第二類型之列沿著該陣列之行交替地配置,且其中一方面該第一類型之該等列內的該等第三樣本位 置及另一方面該第二類型之該等列內的該等第三樣本位置位於不同行中。
  23. 如請求項22之設備,其中該設備包含一組操作模式,其包含一各向同性操作模式、一豎直因果操作模式及一條帶操作模式下之至少一者,其中除了位於該CFA型樣影像之一邊緣處的樣本叢集以外,該設備經組配以排他地包括以下各者以針對該各別樣本叢集之該等樣本位置中之一者而計算該等色彩座標中之一或多者,在該各向同性操作模式下,位於該各別樣本叢集所位於之一或多個當前列內的樣本位置處之樣本及位於該等當前列上方及下方之列中的樣本,在該豎直因果操作模式下,位於該等當前列內之樣本位置處的樣本及位於該等當前列上方之一或多個列中的樣本,以及在該條帶操作模式下,位於該等當前列內之樣本位置處的樣本。
  24. 如請求項23之設備,其中該設備經組配以選擇該組操作模式中之一者且其中該設備經組配以在一資料串流中發信用於獲得該影像表示之該操作模式,該影像表示在該資料串流中發信。
  25. 如請求項19之設備,其中該第三加權和及該第四加權和為各別第一及第二色彩座標之相等加權平均值。
  26. 如請求項19之設備,其中該設備經組配以使用一捨入運算自該第一加權和導出該第一經濾波第三樣本值,自該第二加權和導出該第二經濾波第三樣本值,自該第三加權和導出該第一經濾波色彩座標,且自該第四加權和導出該第二經濾波色彩座標。
  27. 如請求項19之設備,其中該設備經組配以將該等第三及第四色彩座標用作中間值以對於各樣本叢集之該第三樣本位置,藉由形成在該第三樣本位置處之該第三色彩座標與一經濾波第四色彩座標之一差而計算一差分色彩座標,該經濾波 第四色彩座標係藉由形成針對與該第三樣本位置相鄰之第四樣本位置而計算的第四色彩座標之一第五加權和來導出,對於各樣本叢集之該第四樣本位置,藉由形成在該第四樣本位置處之該第四色彩座標與一經濾波差分色彩座標之一總和而計算一組合色彩座標,該經濾波差分色彩座標係藉由形成針對與該第四樣本位置相鄰之第三樣本位置而計算的差分色彩座標之一第六加權和來導出。
  28. 如請求項27之設備,其中該設備經組配以使用一捨入運算自該第五加權和導出該經濾波差分色彩座標且自該第六加權和導出該經濾波第四色彩座標。
  29. 如請求項27之設備,其中該等第一至第四樣本位置係以具有一第一類型之列及一第二類型之列的一陣列配置,第一類型之列各自包含交替地配置之第一樣本位置及第三樣本位置,第二類型之列包含交替地配置之第二樣本位置及第三樣本位置,其中該第一類型之該等列及該第二類型之列沿著該陣列之行交替地配置,且其中一方面該第一類型之該等列內的該等第三樣本位置及另一方面該第二類型之該等列內的該等第三樣本位置位於不同行中,且其中該設備具有一各向同性操作模式,其中,該第一加權和之該等第三樣本包含在該陣列之豎直及水平方向上與該第一樣本位置相鄰之該等第三樣本,該第二加權和之該等第三樣本包含在該陣列之豎直及水平方向上與該第二樣本位置相鄰之該等第三樣本,該第三加權和之該等第一及第二色彩座標包含針對在該陣列之豎直及水平方向上與該第三樣本位置相鄰之第一及第二樣本位置而計算的該等第一及第二色彩座標,該第四加權和之該等第一及第二色彩座標包含針對在該陣列之豎直及水平 方向上與該第四樣本位置相鄰之第一及第二樣本位置而計算的該等第一及第二色彩座標,該第五加權和之該等第四色彩座標包含針對在該陣列之對角線方向上與該第三樣本位置相鄰之第四樣本位置而計算的該等第四色彩座標,該第六加權和之該等差分色彩座標包含針對在該陣列之對角線方向上與該第四樣本位置相鄰之第三樣本位置而計算的該等差分色彩座標。
  30. 如請求項27之設備,其中該等第一至第四樣本位置係以具有一第一類型之列及一第二類型之列的一陣列配置,第一類型之列各自包含交替地配置之第一樣本位置及第三樣本位置,第二類型之列包含交替地配置之第二樣本位置及第三樣本位置,其中該第一類型之該等列及該第二類型之列沿著該陣列之行交替地配置,且其中一方面該第一類型之該等列內的該等第三樣本位置及另一方面該第二類型之該等列內的該等第三樣本位置位於不同行中,且其中該設備具有一豎直因果操作模式,其中,該第一加權和之該等第三樣本由在該陣列之豎直及水平方向上與該第一樣本位置相鄰之該等第三樣本組成,該第二加權和之該等第三樣本由在該陣列之水平方向及一第一豎直方向上與該第二樣本位置相鄰之該等第三樣本組成,其中在水平方向上與該第二樣本位置相鄰之該等第三樣本的該第二加權和之權重的一總和等於在該第一豎直方向上與該第二樣本位置相鄰之該第三樣本的該第二加權和之一權重,該第三加權和之該等第一及第二色彩座標由針對在該陣列之豎直及水平方向上與該第三樣本位置相鄰之第一及第二樣本位置而計算的該等第一及第二色彩座標組成,該第四加權和之該等第一及第二色彩座標由針對在該陣列之水平方向及該第一豎直方向上與該第四樣本位置相鄰之第一及第二樣本位置而計算的該等第 一及第二色彩座標組成,該第五加權和之該等第四色彩座標由針對在該陣列之對角線方向上與該第三樣本位置相鄰之第四樣本位置而計算的該等第四色彩座標組成,該第六加權和之該等差分色彩座標由針對在該陣列之一第一對角線方向及一第二對角線方向上與該第四樣本位置相鄰之第三樣本位置而計算的該等差分色彩座標組成,其中該第一對角線方向及該第二對角線方向之豎直分量指向與該第一豎直方向相同的方向。
  31. 如請求項27之設備,其中該等第一至第四樣本位置係以具有一第一類型之列及一第二類型之列的一陣列配置,第一類型之列各自包含交替地配置之第一樣本位置及第三樣本位置,第二類型之列包含交替地配置之第二樣本位置及第三樣本位置,其中該第一類型之該等列及該第二類型之列沿著該陣列之行交替地配置,且其中一方面該第一類型之該等列內的該等第三樣本位置及另一方面該第二類型之該等列內的該等第三樣本位置位於不同行中,且其中該設備具有一條帶操作模式,其中,該第一加權和之該等第三樣本由在該陣列之水平方向及一第二豎直方向上與該第一樣本位置相鄰之該等第三樣本組成,其中在水平方向上與該第二樣本位置相鄰之該等第三樣本的該加權和之權重的一總和等於在該第二豎直方向上與該第二樣本位置相鄰之該第三樣本的該加權和之一權重,該第二加權和之該等第三樣本由在該陣列之水平方向及一第一豎直方向上與該第二樣本位置相鄰之該等第三樣本組成,其中在水平方向上與該第二樣本位置相鄰之該等第三樣本的該加權和之權重的一總和等於在該第一豎直方向上與該第一樣本位置相鄰之該第三樣本的該加權和之一權重,該第三加權和之該等第一及第二色彩座標由針對在該陣列之水平方向及該第二豎直方向上與該第三樣本位置相鄰之第一及第二樣本位置而計算的該等第 一及第二色彩座標組成,該第四加權和之該等第一及第二色彩座標由針對在該陣列之水平方向及該第一豎直方向上與該第四樣本位置相鄰之第一及第二樣本位置而計算的該等第一及第二色彩座標組成,該第五加權和之該等第四色彩座標由針對在該陣列之一第三對角線方向及一第四對角線方向上與該第三樣本位置相鄰之第四樣本位置而計算的該等第四色彩座標組成,其中該第三對角線方向及該第四對角線方向之豎直分量指向與該第二豎直方向相同的方向,該第六加權和之該等差分色彩座標由針對在該陣列之一第一對角線方向及一第二對角線方向上與該第四樣本位置相鄰之第三樣本位置而計算的該等差分色彩座標組成,其中該第一對角線方向及該第二對角線方向之豎直分量指向與該第一豎直方向相同的方向。
  32. 如請求項27之設備,其中該第六加權和為一相等加權和,其中該第六加權和之權重的一總和等於二分之一。
  33. 如請求項27之設備,其中該第五加權和為該等第四色彩座標之一相等加權平均值。
  34. 如請求項19之設備,其中該CFA影像型樣係自多個感測器元件獲得,該等感測器元件中之各者與該第一通道、該第二通道及該第三通道中之一者相關聯,其中與一共同通道相關聯的感測器元件經組配以偵測特定於該通道之一共同波長範圍內之光。
  35. 如請求項19之設備,其進一步包含一量化器,其經組配以基於該等第一至第四色彩座標或基於該第一色彩座標、該第二色彩座標、該差分色彩座標及該組合色彩座標而導出一經量化表示,以及 一熵寫碼器,其經組配以編碼該經量化表示以便導出一經編碼表示。
  36. 如請求項35之設備,其中該設備進一步包含一空間去相關級,該空間去相關級經組配以藉由使用一空間去相關變換基於該等第一至第四色彩座標或基於該第一色彩座標、該第二色彩座標、該差分色彩座標及該組合色彩座標而導出一空間去相關表示,且其中該量化器經組配以自該空間去相關表示導出該經量化表示。
  37. 如請求項27之設備,其進一步包含一空間去相關級,其經組配以藉由使用一空間去相關變換基於該第一色彩座標、該第二色彩座標及該組合色彩座標而導出一空間去相關表示,一量化器,其經組配以自該空間去相關表示及該等差分色彩座標導出一經量化表示,以及一熵寫碼器,其經組配以編碼該經量化表示以便導出一經編碼表示。
  38. 一種用於將一影像表示解碼成一CFA型樣影像之設備,其中該CFA型樣影像包含一第一通道之第一樣本、一第二通道之第二樣本及一第三通道之第三樣本,其中該CFA型樣影像分割成樣本叢集,該等樣本叢集中之各者包含第一至第四樣本位置,其中該等第一樣本中之一者位於該第一樣本位置處,該等第二樣本中之一者位於該第二樣本位置處,且二個第三樣本分別位於該第三樣本位置及該第四樣本位置處,其中該設備經組配以針對各樣本叢集而導出各別樣本叢集之該第一樣本位置的一第一色彩座標、該各別樣本叢集之該第二樣本位置的一第二色彩座標、該各別樣本叢集之該第三樣本位置的一第三色彩座標及該各別樣本叢集之該第四樣本位置的一第四色彩座標,其中該等第一至第四樣本位置係以具有一第一類型之列及一第二類型之列 的一陣列配置,第一類型之列各自包含交替地配置之第一樣本位置及第三樣本位置,第二類型之列包含交替地配置之第二樣本位置及第三樣本位置,其中該第一類型之該等列及該第二類型之列沿著該陣列之行交替地配置,且其中一方面該第一類型之該等列內的該等第三樣本位置及另一方面該第二類型之該等列內的該等第三樣本位置位於不同行中,其中該設備經組配以藉由以下操作將該影像表示解碼成該CFA影像:對於各樣本叢集之該第三樣本位置,藉由形成在該第三樣本位置處之該第三色彩座標與一第一經濾波色彩座標的一差而計算各別第三樣本位置處之該第三樣本,該第一經濾波色彩座標係藉由形成位於與該第三樣本位置相鄰之第一及第二樣本位置處的第一及第二色彩座標之一第三加權和來導出,對於各樣本叢集之該第四樣本位置,藉由形成在該第四樣本位置處之該第四色彩座標與一第二經濾波差分色彩座標之一差而計算各別第四樣本位置處之該第三樣本,該第二經濾波色彩座標係藉由形成位於與該第四樣本位置相鄰之第一及第二樣本位置處的第一及第二色彩座標之一第四加權和來導出,對於各樣本叢集之該第一樣本位置,藉由形成在該第一樣本位置處之該第一色彩座標與一第一經濾波第三樣本值的一總和而計算各別第一樣本位置處之該第一樣本,該第一經濾波第三樣本值係藉由形成針對與該第一樣本位置相鄰之第三樣本位置及第四樣本位置而計算的第三樣本之一第一加權和來導出,其中該第一加權和之該等第三樣本的該等第三樣本位置超出該各別樣本叢集所位於之該陣列的列,對於各樣本叢集之該第二樣本位置,藉由形成在該第二樣本位置處之該第二色彩座標與一第二經濾波第三樣本值的一總和而計算各別第二樣本 位置處之一第二樣本,該第二經濾波第三樣本值係藉由形成針對與該第二樣本位置相鄰之第三樣本位置及第四樣本位置而計算的第三樣本之一第二加權和來導出。
  39. 如請求項38之設備,其中該第三加權和及該第四加權和之該等權重由用於對第一色彩座標進行加權之一第一權重及用於對第二色彩座標進行加權之一第二權重組成。
  40. 如請求項39之設備,其中該第一權重實施為二之一第一冪,且其中該第二權重實施為二之一第二冪,二之該第一冪及該第二冪的指數為一整數。
  41. 如請求項38之設備,其中該第三加權和及該第四加權和為各別第一及第二色彩座標之相等加權平均值。
  42. 如請求項38之設備,其中該設備包含一組操作模式,其中在一第一操作模式下,該第一加權和之該等第三樣本的該等第三樣本位置超出該各別樣本叢集所位於之該陣列的當前列,且其中該設備包含一條帶操作模式,其中該第一加權和之該等第三樣本由位於該等當前列內之樣本組成。
  43. 如請求項42之設備,其中該設備經組配以選擇該組操作模式中之一者且其中該設備經組配以自發信該影像表示之一資料串流導出待用於解碼該影像表示之該操作模式。
  44. 如請求項38之設備,其中該設備經組配以使用一捨入運算自該第一加權和導出該第一經濾波第三樣本值,自該第二加權和導出該第二經濾波第三樣本值,自該第三加權和導出該第一經濾波色彩座標,且自該第四加權和導出該第二經濾波色彩座標。
  45. 如請求項38之設備,其中該設備經組配以藉由以下操作來導出該等第三及第四色彩座標: 對於各樣本叢集之該第四樣本位置,藉由形成在該第四樣本位置處之組合色彩座標與一經濾波差分色彩座標之一差而計算該各別第四樣本位置處之該第四色彩座標,該經濾波差分色彩座標係藉由形成位於與該第四樣本位置相鄰之第三樣本位置處的差分色彩座標之一第五加權和來導出,對於各樣本叢集之該第三樣本位置,藉由形成在該第三樣本位置處之該差分色彩座標與一經濾波第四色彩座標之一總和而計算該各別第三樣本位置處之該第三色彩座標,該經濾波第四色彩座標係藉由形成針對與該第三樣本位置相鄰之第四樣本位置而計算的第四色彩座標之一第六加權和來導出。
  46. 如請求項45之設備,其中該設備經組配以使用一捨入運算自該第五加權和導出該經濾波差分色彩座標且自該第六加權和導出該經濾波第四色彩座標。
  47. 如請求項45之設備,其中該設備具有一各向同性操作模式,其中,該第一加權和之該等第三樣本包含在該陣列之豎直及水平方向上與該第一樣本位置相鄰之該等第三樣本,該第二加權和之該等第三樣本包含在該陣列之豎直及水平方向上與該第二樣本位置相鄰之該等第三樣本,該第三加權和之該等第一及第二色彩座標包含針對在該陣列之豎直及水平方向上與該第三樣本位置相鄰之第一及第二樣本位置而計算的該等第一及第二色彩座標,該第四加權和之該等第一及第二色彩座標包含針對在該陣列之豎直及水平方向上與該第四樣本位置相鄰之第一及第二樣本位置而計算的該等第一及第二色彩座標,該第五加權和之該等第四色彩座標包含針對在該陣列之對角線方向上與該 第三樣本位置相鄰之第四樣本位置而計算的該等第四色彩座標,該第六加權和之該等差分色彩座標包含針對在該陣列之對角線方向上與該第四樣本位置相鄰之第三樣本位置而計算的該等差分色彩座標。
  48. 如請求項45之設備,其中該設備具有一豎直因果操作模式,其中,該第一加權和之該等第三樣本由在該陣列之豎直及水平方向上與該第一樣本位置相鄰之該等第三樣本組成,該第二加權和之該等第三樣本由在該陣列之水平方向及一第一豎直方向上與該第二樣本位置相鄰之該等第三樣本組成,其中在水平方向上與該第二樣本位置相鄰之該等第三樣本的該第二加權和之權重的一總和等於在該第一豎直方向上與該第二樣本位置相鄰之該第三樣本的該第二加權和之一權重,該第三加權和之該等第一及第二色彩座標由針對在該陣列之豎直及水平方向上與該第三樣本位置相鄰之第一及第二樣本位置而計算的該等第一及第二色彩座標組成,該第四加權和之該等第一及第二色彩座標由針對在該陣列之水平方向及該第一豎直方向上與該第四樣本位置相鄰之第一及第二樣本位置而計算的該等第一及第二色彩座標組成,該第五加權和之該等第四色彩座標由針對在該陣列之對角線方向上與該第三樣本位置相鄰之第四樣本位置而計算的該等第四色彩座標組成,該第六加權和之該等差分色彩座標由針對在該陣列之一第一對角線方向及一第二對角線方向上與該第四樣本位置相鄰之第三樣本位置而計算的該等差分色彩座標組成,其中該第一對角線方向及該第二對角線方向之豎直分量指向與該第一豎直方向相同的方向。
  49. 如請求項45之設備,其中該設備具有一條帶操作模式,其中, 該第一加權和之該等第三樣本由在該陣列之水平方向及一第二豎直方向上與該第一樣本位置相鄰之該等第三樣本組成,其中在水平方向上與該第二樣本位置相鄰之該等第三樣本的該加權和之權重的一總和等於在該第二豎直方向上與該第二樣本位置相鄰之該第三樣本的該加權和之一權重,該第二加權和之該等第三樣本由在該陣列之水平方向及一第一豎直方向上與該第二樣本位置相鄰之該等第三樣本組成,其中在水平方向上與該第二樣本位置相鄰之該等第三樣本的該加權和之權重的一總和等於在該第一豎直方向上與該第一樣本位置相鄰之該第三樣本的該加權和之一權重,該第三加權和之該等第一及第二色彩座標由針對在該陣列之水平方向及該第二豎直方向上與該第三樣本位置相鄰之第一及第二樣本位置而計算的該等第一及第二色彩座標組成,該第四加權和之該等第一及第二色彩座標由針對在該陣列之水平方向及該第一豎直方向上與該第四樣本位置相鄰之第一及第二樣本位置而計算的該等第一及第二色彩座標組成,該第五加權和之該等第四色彩座標由針對在該陣列之一第三對角線方向及一第四對角線方向上與該第三樣本位置相鄰之第四樣本位置而計算的該等第四色彩座標組成,其中該第三對角線方向及該第四對角線方向之豎直分量指向與該第二豎直方向相同的方向,該第六加權和之該等差分色彩座標由針對在該陣列之一第一對角線方向及一第二對角線方向上與該第四樣本位置相鄰之第三樣本位置而計算的該等差分色彩座標組成,其中該第一對角線方向及該第二對角線方向之豎直分量指向與該第一豎直方向相同的方向。
  50. 如請求項45之設備,其中該第六加權和為一相等加權和,其中該第六加權和之權重的一總和等於二分之一。
  51. 如請求項45之設備,其中該第五加權和為該等第四色彩座標之一相等加權平均值。
  52. 如請求項38之設備,其中該設備經組配以接收一經編碼表示作為該影像表示,且其中該設備進一步包含一熵解碼器,其經組配以解碼該經編碼表示以便導出該影像表示之一經量化表示,以及一反量化器,其經組配以藉由一反量化程序導出該等第一至第四色彩座標或該第一色彩座標、該第二色彩座標、該差分色彩座標及該組合色彩座標。
  53. 如請求項38之設備,其中該設備經組配以接收一經編碼表示作為該影像表示,且其中該設備進一步包含一熵解碼器,其經組配以解碼該經編碼表示以便導出該影像表示之一經量化表示,一反量化器,其經組配以藉由一反量化程序基於該經量化表示而導出一空間去相關表示,以及一反空間去相關級,其經組配以藉由使用一反空間去相關變換自該空間去相關表示導出該等第一至第四色彩座標或該第一色彩座標、該第二色彩座標、該差分色彩座標及該組合色彩座標。
  54. 如請求項45之設備,其中該設備經組配以接收一經編碼表示作為該影像表示,且其中該設備進一步包含一熵解碼器,其經組配以解碼該經編碼表示以便導出該影像表示之一經量化表示,一反量化器,其經組配以藉由一反量化程序基於該經量化表示而導出一空間去相關表示及該等差分色彩座標,以及一反空間去相關級,其經組配以藉由使用一反空間去相關變換自該空間去 相關表示導出該第一色彩座標、該第二色彩座標及該組合色彩座標。
  55. 一種用於將一CFA型樣影像寫碼成一影像表示之設備,其中該CFA型樣影像包含一第一通道之第一樣本、一第二通道之第二樣本及一第三通道之第三樣本,其中該CFA型樣影像分割成樣本叢集,該等樣本叢集中之各者包含第一至第四樣本位置,其中該等第一樣本中之一者位於該第一樣本位置處,該等第二樣本中之一者位於該第二樣本位置處,且二個第三樣本分別位於該第三樣本位置及該第四樣本位置處,其中該等第一至第四樣本位置係以具有一第一類型之列及一第二類型之列的一陣列配置,第一類型之列各自包含交替地配置之第一樣本位置及第三樣本位置,第二類型之列包含交替地配置之第二樣本位置及第三樣本位置,其中該第一類型之該等列及該第二類型之列沿著該陣列之行交替地配置,且其中一方面該第一類型之該等列內的該等第三樣本位置及另一方面該第二類型之該等列內的該等第三樣本位置位於不同行中,其中該設備經組配以藉由以下操作將該CFA型樣影像寫碼成該影像表示:對於各樣本叢集之該第一樣本位置,計算一第一色彩座標使得該第一色彩座標表示在該第一樣本位置處之該第一樣本與一第一經濾波第三樣本值的一差,該第一經濾波第三樣本值係藉由形成與該第一樣本位置相鄰之第三樣本的一第一加權和來導出,其中該第一加權和之該等第三樣本的該等第三樣本位置超出各別樣本叢集所位於之該陣列的列,對於各樣本叢集之該第二樣本位置,計算一第二色彩座標使得該第二色彩座標表示在該第二樣本位置處之該第二樣本與一第二經濾波第三樣本值的一差,該第二經濾波第三樣本值係藉由形成與該第二樣本位置相鄰之第三樣本的一第二加權和來導出, 對於各樣本叢集之該第三樣本位置,藉由形成在該第三樣本位置處之該第三樣本與一第一經濾波色彩座標的一總和而計算一第三色彩座標,該第一經濾波色彩座標係藉由形成針對與該第三樣本位置相鄰之第一及第二樣本位置而計算的第一及第二色彩座標之一第三加權和來導出,對於各樣本叢集之該第四樣本位置,藉由形成在該第四樣本位置處之該第三樣本與一第二經濾波色彩座標之一總和而計算一第四色彩座標,該第二經濾波色彩座標係藉由針對位於與該第四樣本位置相鄰之第一及第二樣本位置而計算的第一及第二色彩座標之一第四加權和來導出。
  56. 如請求項55之設備,其中該第三加權和及該第四加權和之該等權重由用於對第一色彩座標進行加權之一第一權重及用於對第二色彩座標進行加權之一第二權重組成。
  57. 如請求項56之設備,其中該第一權重實施為二之一第一冪,且其中該第二權重實施為二之一第二冪,二之該第一冪及該第二冪的指數為一整數。
  58. 如請求項55之設備,其中該第三加權和及該第四加權和為各別第一及第二色彩座標之相等加權平均值。
  59. 如請求項55之設備,其中該設備包含一組操作模式,其中在一第一操作模式下,該第一加權和之該等第三樣本的該等第三樣本位置超出該各別樣本叢集所位於之該陣列的當前列,且其中該設備包含一條帶操作模式,其中該第一加權和之該等第三樣本由位於該等當前列內之樣本組成。
  60. 如請求項59之設備,其中該設備經組配以選擇該組操作模式中之一者且其中該設備經組配以在一資料串流中發信用於獲得該影像表示之該操作模式,該影像表示在該資料串流中發信。
  61. 如請求項55之設備,其中該設備經組配以使用一捨入運算自 該第一加權和導出該第一經濾波第三樣本值,自該第二加權和導出該第二經濾波第三樣本值,自該第三加權和導出該第一經濾波色彩座標,且自該第四加權和導出該第二經濾波色彩座標。
  62. 如請求項55之設備,其中該設備經組配以將該等第三及第四色彩座標用作中間值以對於各樣本叢集之該第三樣本位置,藉由形成在該第三樣本位置處之該第三色彩座標與一經濾波第四色彩座標之一差而計算一差分色彩座標,該經濾波第四色彩座標係藉由形成針對與該第三樣本位置相鄰之第四樣本位置而計算的第四色彩座標之一第五加權和來導出,對於各樣本叢集之該第四樣本位置,藉由形成在該第四樣本位置處之該第四色彩座標與一經濾波差分色彩座標之一總和而計算一組合色彩座標,該經濾波差分色彩座標係藉由形成針對與該第四樣本位置相鄰之第三樣本位置而計算的差分色彩座標之一第六加權和來導出。
  63. 如請求項62之設備,其中該設備經組配以使用一捨入運算自該第五加權和導出該經濾波差分色彩座標且自該第六加權和導出該經濾波第四色彩座標。
  64. 如請求項62之設備,其中多個操作模式包含一各向同性操作模式,其中,該第一加權和之該等第三樣本包含在該陣列之豎直及水平方向上與該第一樣本位置相鄰之該等第三樣本,該第二加權和之該等第三樣本包含在該陣列之豎直及水平方向上與該第二樣本位置相鄰之該等第三樣本,該第三加權和之該等第一及第二色彩座標包含針對在該陣列之豎直及水平方向上與該第三樣本位置相鄰之第一及第二樣本位置而計算的該等第一及第二 色彩座標,該第四加權和之該等第一及第二色彩座標包含針對在該陣列之豎直及水平方向上與該第四樣本位置相鄰之第一及第二樣本位置而計算的該等第一及第二色彩座標,該第五加權和之該等第四色彩座標包含針對在該陣列之對角線方向上與該第三樣本位置相鄰之第四樣本位置而計算的該等第四色彩座標,該第六加權和之該等差分色彩座標包含針對在該陣列之對角線方向上與該第四樣本位置相鄰之第三樣本位置而計算的該等差分色彩座標。
  65. 如請求項62之設備,其中該等多個操作模式包含一豎直因果操作模式,其中,該第一加權和之該等第三樣本由在該陣列之豎直及水平方向上與該第一樣本位置相鄰之該等第三樣本組成,該第二加權和之該等第三樣本由在該陣列之水平方向及一第一豎直方向上與該第二樣本位置相鄰之該等第三樣本組成,其中在水平方向上與該第二樣本位置相鄰之該等第三樣本的該第二加權和之權重的一總和等於在該第一豎直方向上與該第二樣本位置相鄰之該第三樣本的該第二加權和之一權重,該第三加權和之該等第一及第二色彩座標由針對在該陣列之豎直及水平方向上與該第三樣本位置相鄰之第一及第二樣本位置而計算的該等第一及第二色彩座標組成,該第四加權和之該等第一及第二色彩座標由針對在該陣列之水平方向及該第一豎直方向上與該第四樣本位置相鄰之第一及第二樣本位置而計算的該等第一及第二色彩座標組成,該第五加權和之該等第四色彩座標由針對在該陣列之對角線方向上與該第三樣本位置相鄰之第四樣本位置而計算的該等第四色彩座標組成, 該第六加權和之該等差分色彩座標由針對在該陣列之一第一對角線方向及一第二對角線方向上與該第四樣本位置相鄰之第三樣本位置而計算的該等差分色彩座標組成,其中該第一對角線方向及該第二對角線方向之豎直分量指向與該第一豎直方向相同的方向。
  66. 如請求項62之設備,其中在該條帶操作模式下,該第一加權和之該等第三樣本由在該陣列之水平方向及一第二豎直方向上與該第一樣本位置相鄰之該等第三樣本組成,其中在水平方向上與該第二樣本位置相鄰之該等第三樣本的該加權和之權重的一總和等於在該第二豎直方向上與該第二樣本位置相鄰之該第三樣本的該加權和之一權重,該第二加權和之該等第三樣本由在該陣列之水平方向及一第一豎直方向上與該第二樣本位置相鄰之該等第三樣本組成,其中在水平方向上與該第二樣本位置相鄰之該等第三樣本的該加權和之權重的一總和等於在該第一豎直方向上與該第一樣本位置相鄰之該第三樣本的該加權和之一權重,該第三加權和之該等第一及第二色彩座標由針對在該陣列之水平方向及該第二豎直方向上與該第三樣本位置相鄰之第一及第二樣本位置而計算的該等第一及第二色彩座標組成,該第四加權和之該等第一及第二色彩座標由針對在該陣列之水平方向及該第一豎直方向上與該第四樣本位置相鄰之第一及第二樣本位置而計算的該等第一及第二色彩座標組成,該第五加權和之該等第四色彩座標由針對在該陣列之一第三對角線方向及一第四對角線方向上與該第三樣本位置相鄰之第四樣本位置而計算的該等第四色彩座標組成,其中該第三對角線方向及該第四對角線方向之豎直分量指向與該第二豎直方向相同的方向,該第六加權和之該等差分色彩座標由針對在該陣列之一第一對角線方向及 一第二對角線方向上與該第四樣本位置相鄰之第三樣本位置而計算的該等差分色彩座標組成,其中該第一對角線方向及該第二對角線方向之豎直分量指向與該第一豎直方向相同的方向。
  67. 如請求項62之設備,其中該第六加權和為一相等加權和,其中該第六加權和之權重的一總和等於二分之一。
  68. 如請求項62之設備,其中該第五加權和為該等第四色彩座標之一相等加權平均值。
  69. 如請求項55之設備,其中該CFA影像型樣係自多個感測器元件獲得,該等感測器元件中之各者與該第一通道、該第二通道及該第三通道中之一者相關聯,其中與一共同通道相關聯的感測器元件經組配以偵測特定於該通道之一共同波長範圍內之光。
  70. 如請求項55之設備,其進一步包含一量化器,其經組配以基於該等第一至第四色彩座標或基於該第一色彩座標、該第二色彩座標、該差分色彩座標及該組合色彩座標而導出一經量化表示,以及一熵寫碼器,其經組配以編碼該經量化表示以便導出一經編碼表示。
  71. 如請求項70之設備,其中該設備進一步包含一空間去相關級,該空間去相關級經組配以藉由使用一空間去相關變換基於該等第一至第四色彩座標或基於該第一色彩座標、該第二色彩座標、該差分色彩座標及該組合色彩座標而導出一空間去相關表示,且其中該量化器經組配以自該空間去相關表示導出該經量化表示。
  72. 如請求項62之設備,其進一步包含一空間去相關級,其經組配以藉由使用一空間去相關變換基於該第一色彩座標、該第二色彩座標及該組合色彩座標而導出一空間去相關表示, 一量化器,其經組配以自該空間去相關表示及該等差分色彩座標導出一經量化表示,以及一熵寫碼器,其經組配以編碼該經量化表示以便導出一經編碼表示。
  73. 一種用於將一影像表示解碼成一CFA型樣影像之方法,其中該CFA型樣影像包含一第一通道之第一樣本、一第二通道之第二樣本及一第三通道之第三樣本,其中該CFA型樣影像分割成樣本叢集,該等樣本叢集中之各者包含第一至第四樣本位置,其中該等第一樣本中之一者位於該第一樣本位置處,該等第二樣本中之一者位於該第二樣本位置處,且二個第三樣本分別位於該第三樣本位置及該第四樣本位置處,其中該方法包含針對各樣本叢集而導出各別樣本叢集之該第一樣本位置的一第一色彩座標、該各別樣本叢集之該第二樣本位置的一第二色彩座標、該各別樣本叢集之該第三樣本位置的一第三色彩座標及該各別樣本叢集之該第四樣本位置的一第四色彩座標,其中該方法包含藉由以下操作將該影像表示解碼成該CFA影像:對於各樣本叢集之該第三樣本位置,藉由形成在該第三樣本位置處之該第三色彩座標與一第一經濾波色彩座標的一差而計算各別第三樣本位置處之該第三樣本,該第一經濾波色彩座標係藉由以使得位於與該第三樣本位置相鄰之第一及第二樣本位置處的第一及第二色彩座標之一第三加權和的權重之一總和大於二分之一的一方式形成該第三加權和來導出,對於各樣本叢集之該第四樣本位置,藉由形成在該第四樣本位置處之該第四色彩座標與一第二經濾波色彩座標的一差而計算各別第四樣本位置處之該第三樣本,該第二經濾波色彩座標係藉由以使得位於與該第四樣本位置相鄰之第一及第二樣本位置處的第一及第二色彩座標之一第四加權和 的權重之一總和大於二分之一的一方式形成該第四加權和來導出,對於各樣本叢集之該第一樣本位置,藉由形成在該第一樣本位置處之該第一色彩座標與一第一經濾波第三樣本值的一總和而計算各別第一樣本位置處之該第一樣本,該第一經濾波第三樣本值係藉由形成針對與該第一樣本位置相鄰之第三樣本位置及第四樣本位置而計算的第三樣本之一第一加權和來導出,對於各樣本叢集之該第二樣本位置,藉由形成在該第二樣本位置處之該第二色彩座標與一第二經濾波第三樣本值的一總和而計算各別第二樣本位置處之一第二樣本,該第二經濾波第三樣本值係藉由形成針對與該第二樣本位置相鄰之第三樣本位置及第四樣本位置而計算的第三樣本之一第二加權和來導出。
  74. 一種用於將一CFA型樣影像寫碼成一影像表示之方法,其中該CFA型樣影像包含一第一通道之第一樣本、一第二通道之第二樣本及一第三通道之第三樣本,其中該CFA型樣影像分割成樣本叢集,該等樣本叢集中之各者包含第一至第四樣本位置,其中該等第一樣本中之一者位於該第一樣本位置處,該等第二樣本中之一者位於該第二樣本位置處,且二個第三樣本分別位於該第三樣本位置及該第四樣本位置處,其中該方法包含藉由以下操作將該CFA型樣影像寫碼成該影像表示:對於各樣本叢集之該第一樣本位置,計算一第一色彩座標使得該第一色彩座標表示在該第一樣本位置處之該第一樣本與一第一經濾波第三樣本值的一差,該第一經濾波第三樣本值係藉由形成與該第一樣本位置相鄰之第三樣本的一第一加權和來導出,對於各樣本叢集之該第二樣本位置,計算一第二色彩座標使得該第二 色彩座標表示在該第二樣本位置處之該第二樣本與一第二經濾波第三樣本值的一差,該第二經濾波第三樣本值係藉由形成與該第二樣本位置相鄰之第三樣本的一第二加權和來導出,對於各樣本叢集之該第三樣本位置,藉由形成在該第三樣本位置處之該第三樣本與一第一經濾波色彩座標的一總和而計算一第三色彩座標,該第一經濾波色彩座標係藉由以使得針對與該第三樣本位置相鄰之第一及第二樣本位置而計算的第一及第二色彩座標之一第三加權和的權重之一總和大於二分之一的一方式形成該第三加權和來導出,對於各樣本叢集之該第四樣本位置,藉由形成在該第四樣本位置處之該第三樣本與一第二經濾波色彩座標之一總和而計算一第四色彩座標,該第二經濾波色彩座標係以使得針對與該第四樣本位置相鄰之第一及第二樣本位置而計算的第一及第二色彩座標之一第四加權和的權重之一總和大於二分之一的一方式藉由該第四加權和來導出。
  75. 一種用於將一影像表示解碼成一CFA型樣影像之方法,其中該CFA型樣影像包含一第一通道之第一樣本、一第二通道之第二樣本及一第三通道之第三樣本,其中該CFA型樣影像分割成樣本叢集,該等樣本叢集中之各者包含第一至第四樣本位置,其中該等第一樣本中之一者位於該第一樣本位置處,該等第二樣本中之一者位於該第二樣本位置處,且二個第三樣本分別位於該第三樣本位置及該第四樣本位置處,其中該方法包含針對各樣本叢集而導出各別樣本叢集之該第一樣本位置的一第一色彩座標、該各別樣本叢集之該第二樣本位置的一第二色彩座標、該各別樣本叢集之該第三樣本位置的一第三色彩座標及該各別樣本叢集之該第四樣本位置的一第四色彩座標, 其中該等第一至第四樣本位置係以具有一第一類型之列及一第二類型之列的一陣列配置,第一類型之列各自包含交替地配置之第一樣本位置及第三樣本位置,第二類型之列包含交替地配置之第二樣本位置及第三樣本位置,其中該第一類型之該等列及該第二類型之列沿著該陣列之行交替地配置,且其中一方面該第一類型之該等列內的該等第三樣本位置及另一方面該第二類型之該等列內的該等第三樣本位置位於不同行中,其中該方法包含藉由以下操作將該影像表示解碼成該CFA影像:對於各樣本叢集之該第三樣本位置,藉由形成在該第三樣本位置處之該第三色彩座標與一第一經濾波色彩座標的一差而計算各別第三樣本位置處之該第三樣本,該第一經濾波色彩座標係藉由形成位於與該第三樣本位置相鄰之第一及第二樣本位置處的第一及第二色彩座標之一第三加權和來導出,對於各樣本叢集之該第四樣本位置,藉由形成在該第四樣本位置處之該第四色彩座標與一第二經濾波色彩座標之一差而計算各別第四樣本位置處之該第三樣本,該第二經濾波色彩座標係藉由形成位於與該第四樣本位置相鄰之第一及第二樣本位置處的第一及第二色彩座標之一第四加權和來導出,對於各樣本叢集之該第一樣本位置,藉由形成在該第一樣本位置處之該第一色彩座標與一第一經濾波第三樣本值的一總和而計算各別第一樣本位置處之該第一樣本,該第一經濾波第三樣本值係藉由形成針對與該第一樣本位置相鄰之第三樣本位置及第四樣本位置而計算的第三樣本之一第一加權和來導出,其中該第一加權和之該等第三樣本的該等第三樣本位置超出該各別樣本叢集所位於之該陣列的列,對於各樣本叢集之該第二樣本位置,藉由形成在該第二樣本位置處之 該第二色彩座標與一第二經濾波第三樣本值的一總和而計算各別第二樣本位置處之一第二樣本,該第二經濾波第三樣本值係藉由形成針對與該第二樣本位置相鄰之第三樣本位置及第四樣本位置而計算的第三樣本之一第二加權和來導出。
  76. 一種用於將一CFA型樣影像寫碼成一影像表示之方法,其中該CFA型樣影像包含一第一通道之第一樣本、一第二通道之第二樣本及一第三通道之第三樣本,其中該CFA型樣影像分割成樣本叢集,該等樣本叢集中之各者包含第一至第四樣本位置,其中該等第一樣本中之一者位於該第一樣本位置處,該等第二樣本中之一者位於該第二樣本位置處,且二個第三樣本分別位於該第三樣本位置及該第四樣本位置處,其中該等第一至第四樣本位置係以具有一第一類型之列及一第二類型之列的一陣列配置,第一類型之列各自包含交替地配置之第一樣本位置及第三樣本位置,第二類型之列包含交替地配置之第二樣本位置及第三樣本位置,其中該第一類型之該等列及該第二類型之列沿著該陣列之行交替地配置,且其中一方面該第一類型之該等列內的該等第三樣本位置及另一方面該第二類型之該等列內的該等第三樣本位置位於不同行中,其中該方法包含藉由以下操作將該CFA型樣影像寫碼成該影像表示:對於各樣本叢集之該第一樣本位置,計算一第一色彩座標使得該第一色彩座標表示在該第一樣本位置處之該第一樣本與一第一經濾波第三樣本值的一差,該第一經濾波第三樣本值係藉由形成與該第一樣本位置相鄰之第三樣本的一第一加權和來導出,其中該第一加權和之該等第三樣本的該等第三樣本位置超出各別樣本叢集所位於之該陣列的列,對於各樣本叢集之該第二樣本位置,計算一第二色彩座標使得該第二 色彩座標表示在該第二樣本位置處之該第二樣本與一第二經濾波第三樣本值的一差,該第二經濾波第三樣本值係藉由形成與該第二樣本位置相鄰之第三樣本的一第二加權和來導出,對於各樣本叢集之該第三樣本位置,藉由形成在該第三樣本位置處之該第三樣本與一第一經濾波色彩座標的一總和而計算一第三色彩座標,該第一經濾波色彩座標係藉由形成針對與該第三樣本位置相鄰之第一及第二樣本位置而計算的第一及第二色彩座標之一第三加權和來導出,對於各樣本叢集之該第四樣本位置,藉由形成在該第四樣本位置處之該第三樣本與一第二經濾波色彩座標之一總和而計算一第四色彩座標,該第二經濾波色彩座標係藉由針對位於與該第四樣本位置相鄰之第一及第二樣本位置而計算的第一及第二色彩座標之一第四加權和來導出。
  77. 一種用於在執行於一電腦或信號處理器上時實施如請求項73或74或75或76之方法的電腦程式。
  78. 一種資料串流,其包含藉由如請求項19或55之一設備產生的該影像表示。
TW110113262A 2020-04-16 2021-04-13 用於彩色濾波器陣列(cfa)型樣影像之寫碼技術 TWI792265B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
WOPCT/EP2020/060790 2020-04-16
PCT/EP2020/060790 WO2021209143A1 (en) 2020-04-16 2020-04-16 Decorrelation transform for a color filter array pattern image

Publications (2)

Publication Number Publication Date
TW202143719A TW202143719A (zh) 2021-11-16
TWI792265B true TWI792265B (zh) 2023-02-11

Family

ID=70295145

Family Applications (1)

Application Number Title Priority Date Filing Date
TW110113262A TWI792265B (zh) 2020-04-16 2021-04-13 用於彩色濾波器陣列(cfa)型樣影像之寫碼技術

Country Status (7)

Country Link
US (1) US20230055561A1 (zh)
EP (1) EP4136849A1 (zh)
JP (1) JP2023521471A (zh)
KR (1) KR20230004678A (zh)
CN (1) CN115918081A (zh)
TW (1) TWI792265B (zh)
WO (1) WO2021209143A1 (zh)

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
網路文獻 Lee, Sang-Yong & Ortega, Antonio. (2009). A Novel Approach for Compression of Images Captured using Bayer Color Filter Arrays

Also Published As

Publication number Publication date
EP4136849A1 (en) 2023-02-22
US20230055561A1 (en) 2023-02-23
JP2023521471A (ja) 2023-05-24
TW202143719A (zh) 2021-11-16
CN115918081A (zh) 2023-04-04
WO2021209143A1 (en) 2021-10-21
KR20230004678A (ko) 2023-01-06

Similar Documents

Publication Publication Date Title
US7480417B2 (en) System and method for encoding mosaiced image data employing a reversible color transform
TWI454154B (zh) 色度採樣位置資訊的訊令及使用
US11533480B2 (en) Method and apparatus for image filtering with adaptive multiplier coefficients
JP7384974B2 (ja) 適応乗算係数を用いた画像フィルタリングのための方法および装置
CN111819856A (zh) 用于视频编码的环路滤波装置及方法
Lee et al. Lossless compression of HDR color filter array image for the digital camera pipeline
TWI792265B (zh) 用於彩色濾波器陣列(cfa)型樣影像之寫碼技術
CN114788280A (zh) 视频的编解码方法与装置
CN112385232B (zh) 用于双向帧内预测的参考像素插值方法和装置
JP6460691B2 (ja) 映像圧縮装置、映像圧縮方法及び映像圧縮プログラム
US11765366B2 (en) Method for processing transform coefficients
RU2772313C2 (ru) Способ и устройство для фильтрации изображений с адаптивными коэффициентами множителя
RU2295839C2 (ru) Способ сжатия цифровых изображений и устройство для его реализации
KR20150068603A (ko) 방향성 이산 코사인 변환을 이용한 다중 표현 부호화 방법
Bazhyna et al. A lossy compression algorithm for bayer pattern color filter array data