TW201605228A - 處理影像資料之方法及裝置 - Google Patents

處理影像資料之方法及裝置 Download PDF

Info

Publication number
TW201605228A
TW201605228A TW104123152A TW104123152A TW201605228A TW 201605228 A TW201605228 A TW 201605228A TW 104123152 A TW104123152 A TW 104123152A TW 104123152 A TW104123152 A TW 104123152A TW 201605228 A TW201605228 A TW 201605228A
Authority
TW
Taiwan
Prior art keywords
color
color difference
component
gain factor
image
Prior art date
Application number
TW104123152A
Other languages
English (en)
Other versions
TWI725939B (zh
Inventor
派翠克 羅培茲
法布列斯 拉蘭鈉克
揚尼克 奧利維
大衛 托茲
Original Assignee
湯姆生特許公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 湯姆生特許公司 filed Critical 湯姆生特許公司
Publication of TW201605228A publication Critical patent/TW201605228A/zh
Application granted granted Critical
Publication of TWI725939B publication Critical patent/TWI725939B/zh

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117Filters, e.g. for pre-processing or post-processing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124Quantisation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136Incoming video signal characteristics or properties
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H04N19/36Scalability techniques involving formatting the layers as a function of picture distortion after decoding, e.g. signal-to-noise [SNR] scalability
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Facsimile Image Signal Circuits (AREA)
  • Color Television Systems (AREA)
  • Processing Of Color Television Signals (AREA)

Abstract

本發明係為一種處理影像資料之方法及裝置,為延伸動態範圍,將色差分量在編碼前定標,在一實施例中將色差分量在量化前編碼,在另一實施例中將色差分量在量化後編碼,一解碼器係配置用以處理增益因數之資料表示以用於一解碼過程。

Description

處理影像資料之方法及裝置
本發明相關處理影像資料的方法及裝置,尤其(但非限定)本發明相關色差分量的編碼及色差分量的解碼。
影像如數位相機捕捉的影像或電腦產生的影像,包含色彩資訊,定義各像素或一像素群的色彩特性,此類色彩資訊可表示為色彩分量,定義一色空間中的色彩。色彩分量例如可將色彩強度表示為luma亮度及chr0ma(色度)從中灰階色朝向藍或紅的色偏差測度(YUV),或作為紅、綠或藍光分量強度的測度(RGB)。一YUV模型通常按照一luma(Y)及二色度(UV)分量以定義一色空間,通常Y表示luma分量(亮度),及U與V係色度(色彩)或chroma分量。
XYZ色空間係由CIE(國際照明委員會)研發的國際標準,此色模型係基於三原色,XYZ,及所有可視色皆使用X、Y及Z的正值表示,Y原色係定義用以緊密匹配到亮度,而X及Z原色提供色彩資訊。
高動態範圍成像(亦稱為HDR或HDRI)能使一場景的亮區與暗區之間有較大動態範圍,及比起傳統低動態範圍(LDR)影像能有較大色域範圍,此係藉由信號表示延伸到較廣動態範圍在HDR成像中達成,為要在整個範圍之中提供高信號準確度。在HDR影像中,像素的色彩分量值通常係以較大位元數表示(例如從16位元到64位元),包括有按照浮點格式(例如32位元或16位元用於各分量,亦即浮點或半浮點),最常用格式係openEXR半浮點格式(每RGB分量16位元,即每像素48位元),或按照具有長表示的整數,通常至少16位元。此類範圍對應到人類視覺系統的天生靈敏度,依此方式,HDR影像較準確地表示真實場景中發現寬廣亮度及色彩範圍,藉此提供場景的較真實表示。
為減低色彩資訊儲存所需記憶量,尤其HDR色彩資訊,及為減少傳輸中的頻寬使用,存在許多技術用以將影像資料的色彩資訊壓 縮成較小較可管理的資料大小。
例如,(美國電影電視工程師協會)SMPTE 2085標準定義YDzDx色差編碼使用於高動態範圍XYZ信號,非線性編碼X’、Y’及Z’值表示的色彩資訊係變換到Y’、D’z及D’x色差信號。chroma(色度)信號D’z係定義為分量Z’與Y’之間的加權差,及D’x係色彩分量X’與Y’之間的加權差。亮度信號Y’藉由變換係不變。SMPTE 2085標準定義從X’Y’Z’到Y’D’zD’x的轉換及從Y’D’zD’x到X’Y’Z’的轉換。
色差分量D’z及D’x的動態取決於內容使用的色空間,例如,在ITU Rec709中,D’x在範圍[-0.135;0.131]內變化,然而考量到ITU Rec2020時偏移範圍係[-0.496;0.147]。因此,在ITU Rec2020中有用動態大約係全範圍的65%,但在ITU Rec709中卻只有27%。減少的輸入資料可導致在編碼器輸入引進較多量化雜訊。
有鑑於上述原因,因此提出本發明。
在一般形式中,本發明關注編碼前應用一增益到色差分量,為要延伸動態範圍。
根據本發明的第一方面,提供一種編碼影像資料的方法,該影像資料包括有色彩分量,定義影像部分在一色空間中的色彩特性,該方法包括以下步驟用於一影像的至少一部分:從該影像部分的色彩分量中得到色差分量;藉由應用一增益因數以定標色差分量,用以延伸其動態範圍;及編碼定標的色差分量。應用到各別色差分量的增益因數係可取決於色空間的色域。
在本發明的一實施例中,應用到各別色差分量的增益因數係使色差分量在-0.5到0.5的範圍內,導出色差分量的色彩分量(X’,Y’,Z’)係在範圍[0.0,1.0]中。
在本發明的一實施例中,在色差分量的量化前應用色差分量的定標。
在一實施例中,在色差分量的量化後應用色差分量的定標。
在一實施例中,該影像部分係一高動態範圍影像部分,具有一位元深度大於8位元。
在一實施例中,該方法包括傳送應用的增益因數的資料表示,例如應用的增益因數的資料表示係包括在視訊可用性資訊的一欄位中,指出使用色域的資料例如係可包括在視訊可用性資訊的矩陣_係數欄位中。
根據本發明的第二方面,提供一種解碼影像資料的方法,該影像資料包括有色彩分量,定義影像部分在一色空間中的色彩特性,該方法包括以下步驟用於一影像的至少一部分:將接收的一資料位元流解碼;從解碼的位元流中得到色差分量;藉由應用一重標因數以重標色差分量,該重標因數對應到編碼前應用到色差分量的增益因數;及處理重標的色差分量以得到該影像部分的對應色彩分量。應用到各別色差分量的增益因數係可取決於色空間的色域。
在一實施例中,該方法包括接收編碼前應用的增益因數的資料表示,例如在視訊可用性資訊的一欄位中,指出使用色域的資料例如可包括在視訊可用性資訊的矩陣_係數欄位中。
本發明的第三方面提供一種用以編碼影像資料的編碼裝置,該影像資料包括有色彩分量,定義影像部分在一色空間中的色彩特性,該編碼器包括有:一處理模組,用以從影像部分的色彩分量中得到色差分量;一定標器,用以藉由應用一增益因數以定標色差分量,用以延伸其動態範圍;及一編碼器,用以編碼定標的色差分量。
該編碼裝置係可配置用以應用增益因數到各別色差分量,其係取決於色空間的色域。
該編碼裝置係可配置用以應用增益因數到各別色差分量,以便色差分量係在-0.5到0.5的範圍內。
該編碼裝置係可配置用以在色差分量的量化前定標色差分量。
在另一實施例中,該編碼裝置係可配置用以在色差分量的量化後定標色差分量。
在一實施例中,該編碼裝置包括一發送器,用以傳送應用 的增益因數的資料表示,例如應用的增益因數的資料表示係包括在視訊可用性資訊的一欄位中,指出使用色域的資料例如可包括在視訊可用性資訊的矩陣_係數欄位中。
本發明的第四方面提供一種用以解碼影像資料的解碼裝置,該影像資料包括有色彩分量,定義影像部分在一色空間中的色彩特性,該解碼器包括有:一解碼器,用以將接收的一位元流解碼;一處理模組,用以從解碼的位元流中得到色差分量;一重標器,用以藉由應用一重標因數以重標色差分量,該重標因數對應到編碼前應用到色差分量的一增益因數;及一影像處理器,用以處理重標的色差分量以得到該影像部分的對應色彩分量。應用到各別色差分量的增益因數係可取決於色空間的色域。
該解碼裝置係可配置用以接收編碼前應用的增益因數的資料表示,例如在視訊可用性資訊的一欄位中,指出使用色域的資料例如可包括在視訊可用性資訊的矩陣_係數欄位中。
本發明的第五方面提供資料封包,包括有:編碼影像資料,包括有色彩分量,定義影像部分在一色空間中的色彩特性,該影像資料係根據本發明第一方面的任一實施例的方法來編碼;在編碼前應用到該影像資料的色差分量用以延伸動態範圍的一增益因數的資料表示。
本發明的又一方面提供一種電子裝置,包括有記憶體、一或多個處理器;及一或多個模組,係儲存在該記憶體中及配置成由該一或多個處理器執行,該一或多個模組包括有用以編碼影像資料的指令,該影像資料包括有色彩分量,定義影像部分在一色空間中的色彩特性,指令執行步驟包括有:從影像部分的色彩分量中得到色差分量;藉由應用一增益因數以定標色差分量,用以延伸其動態範圍;及編碼定標的色差分量,應用到各別色差分量的增益因數係可取決於色空間的色域。
本發明的再一方面提供一種電子裝置,包括有記憶體、一或多個處理器;及一或多個模組,係儲存在該記憶體中及配置 成由該一或多個處理器執行,該一或多個模組包括有用以編碼影像資料的指令,該影像資料包括有色彩分量,定義影像部分在一色空間中的色彩特性,指令執行步驟包括有:將接收的一位元流解碼;從解碼的位元流中得到色差分量;藉由應用一重標因數以重標色差分量,該重標因數對應到編碼前應用到色差分量的一增益因數;及處理重標的色差分量以得到影像部分的對應色彩分量。
根據本發明的方法的至少一部分可用電腦實現,因此,本發明可採取形式係完全硬體實施例、完全軟體實施例(包括有韌體、常駐軟體、微碼等)或合併有軟體及硬體方面的實施例,其在本文中通常全稱為”電路”、”模組”或”系統”。此外,本發明可採取電腦程式產品的形式,係具體化在任何有形表達媒體中,具有電腦可使用程式碼具體化在該媒體中。
由於本發明可實現在軟體中,因此本發明可具體化為電腦可讀取碼,在任何合適載體介質上用以提供到可程式裝置。有形載體介質可包括儲存媒體如軟磁碟、CD-ROM(唯讀記憶光碟)、硬磁碟驅動機、磁帶裝置或固態記憶裝置及類似物。暫態載體介質可包括信號如電信號、電子信號、光學信號、聲音信號、磁信號或電磁信號,如微波或紅外線(RE)信號。
100‧‧‧資料通訊系統
110‧‧‧伺服器
111‧‧‧編碼器
120‧‧‧用戶端
121‧‧‧解碼器
140‧‧‧資料流
150‧‧‧資料通訊網路
200‧‧‧影像處理裝置
210‧‧‧記憶體
211‧‧‧高速隨機存取記憶體(RAM)
212‧‧‧唯讀記憶體(ROM)
220‧‧‧處理單元(CPU)
230‧‧‧輸入/輸出介面(I/O)
240‧‧‧電池
250‧‧‧通訊滙流排
260‧‧‧顯示器
300,500‧‧‧編碼裝置
310,510‧‧‧OETF(光電子傳送函數)模組
320,520‧‧‧色彩轉換模組
330,540‧‧‧定標模組
340,530‧‧‧量化模組
350,550‧‧‧編碼器模組
700,900‧‧‧解碼裝置
710,910‧‧‧解碼模組
720,930‧‧‧解量化模組
730,940‧‧‧色彩轉換模組
920‧‧‧重標模組
1300‧‧‧傳輸系統
1310‧‧‧媒體編碼器
1320‧‧‧多工器
1330‧‧‧發送器
1400‧‧‧接收系統
1410‧‧‧接收器
1420‧‧‧解多工器
1430‧‧‧媒體解碼器
1440‧‧‧顯像引擎
S410,S610‧‧‧應用OETF步驟
S420,S620,S830,S1030‧‧‧色彩轉換步驟
S430,S640‧‧‧定標步驟
S440,S630‧‧‧量化步驟
S450,S650‧‧‧編碼步驟
S810,S1010‧‧‧解碼步驟
S820,S1040‧‧‧解量化步驟
S840,S1050‧‧‧進一步處理步驟
S1020‧‧‧重標步驟
X,Y,Z‧‧‧色彩分量
X’,Y’,Z’‧‧‧變換的色彩分量
D’x,Y’,D’z‧‧‧色差分量
QD’x,QY’,QD’z‧‧‧量化的色差分量
gxQD’x,QY’,gzQD’z‧‧‧定標的量化色差分量
gxD’x,Y’,gzD’z‧‧‧定標的色差分量
QgxD’x,QY’,QgzD’z‧‧‧量化的定標色差分量
以下將參考附圖及僅藉由範例方式以描述本發明的實施例,圖中:圖1係以方塊圖顯示一資料通訊系統範例,其中可實現本發明的一或多個實施例;圖2係以方塊圖顯示一影像處理裝置範例,其中可實現本發明的一或多個實施例;圖3係根據本發明的第一實施例以方塊圖顯示一編碼裝置; 圖4係根據本發明的第一實施例以流程圖描繪一編碼方法的步驟;圖5係根據本發明的第二實施例以方塊圖顯示一編碼裝置;圖6係根據本發明的第二實施例以流程圖描繪一編碼方法的步驟;圖7係根據本發明的第一實施例以方塊圖顯示一解碼裝置;圖8係根據本發明的第一實施例以流程圖描繪一解碼方法的步驟;圖9係根據本發明的第二實施例以方塊圖顯示一解碼裝置;圖10係根據本發明的第二實施例以流程圖描繪一解碼方法的步驟;圖11係以方塊圖顯示一接收裝置範例,其中可實現本發明的一或多個實施例;及圖12係以方塊圖顯示另一接收裝置範例,其中可實現本發明的一或多個實施例。
圖1示意描繪一資料通訊系統範例,其中可實現本發明的一或多個實施例。雖然繪示範例中考量到一串流情節,但應了解二裝置之間的資料傳遞係可使用例如一媒體儲存裝置如光碟或一USB金鑰來執行。在繪示範例中,資料通訊系統100包括一傳輸裝置,例如一伺服器110,其可操作用以經由一資料通訊網路150以傳送一資料流的資料封包到一接收裝置,例如一用戶終端機120。資料通訊網路150可係廣域網路(WAN)或區域網路(LAN),此一網路例如可係無線網路(Wifi/802.11a或b或g)、乙太網路、網際網路或數個不同網路組成的混合式網路。在本發明的一特殊實施例中,資料通訊系統可係數位電視廣播系統,其中伺服器110傳送相同資料內容給多個用戶。
伺服器110提供的資料流140包括一位元流,表示一或多個靜態影像或包括有一影像序列的視訊資料。在本發明的一些實施例中,位元流中表示的影像資料係可由傳輸裝置110使用相機(係儲存在傳輸裝置110上)捕捉,由傳輸裝置110從另一資料供應商接收,或在傳輸裝置110產生。傳輸裝置110具備有一編碼器111用以編碼影像資料以提供用 於傳輸的壓縮位元流,其係輸入到編碼器的較緊密影像資料表示。在本發明的一或多個實施例中,編碼的影像資料包括編碼的色差信號,表示該(等)影像的色彩資訊。
用戶終端機120接收傳送來的位元流140,及藉由一解碼器121加以解碼,根據本發明的實施例,該位元流用以呈現媒體資料在用戶終端機上。用戶終端機可係固定裝置如電視或電腦或可攜式電子裝置,包括但不限於可攜式電腦、手持電腦、平板電腦、行動電話、媒體播放器、個人數位助理器或類似物。
圖2係以方塊圖示意描繪一影像處理裝置200的功能組件,係配置用以實現本發明的至少一實施例。根據本發明的實施例,該處理裝置可包括一編碼器或解碼器,用以編碼或解碼一影像。影像處理裝置200可係一裝置如微電腦、工作站或可攜式裝置如智慧型手機、平板或可攜式電腦。
影像處理裝置200包括記憶體210、一或多個處理單元(CPU)220,及一輸入/輸出介面230,用於資料來回一應用的傳送。影像處理裝置200的組件係透過一或多個通訊滙流排250通訊。記憶體210可包括高速隨機存取記憶體(RAM)211及唯讀記憶體(ROM)212,ROM 212至少儲存程式碼及參數。根據本發明實施例的方法的演算法可儲存在ROM 212中,當開關打開,CPU 220上傳程式到RAM 211及執行對應的指令。
RAM 211在一暫存器中包括程式,係由CPU 220執行及裝置200開關打開後上傳,在一暫存器中包括輸入資料,在一暫存器中包括在演算法不同狀態的中間資料,及在一暫存器中包括用於演算法執行的其他變數。
記憶體210可包括不變性記憶體,如一或多個磁碟儲存裝置、快閃記憶裝置或其他不變性固態記憶裝置,在一些實施例中,記憶體尚可包括從一或多個CPU 220遠距設置的儲存器,例如經由一介面及/或一通訊網路可存取的儲存構件。
在一些實施例中,例如在處理裝置係一解碼裝置的情況中,該裝置具備有一顯示器,例如一觸敏螢幕,藉由鍵盤或任何其他使用 者互動構件,用以顯示資料及/或作為與使用者的圖形介面。在一些實施例中,該裝置係具備有一電源如電池240。根據另外的實施例,電源係可在該裝置外部。
在此實施例中,處理裝置200係一可程式裝置,其使用軟體以實施本發明,然而,或者該處理裝置係可實現在硬體中(例如,在應用特定積體電路或ASIC的形式中),或在硬體及軟體的組合中。
在圖3、5、7及9中,繪示的模組對應到功能模組,其可或不用對應到可分辨的實體單元,例如複數個此類模組係可關聯在唯一組件或電路中,或對應到軟體功能性。此外,一模組係可潛在地由分開的實體或軟體功能性組成。
圖3係根據本發明的第一實施例以示意方塊圖描繪一編碼裝置300的功能模組,圖4係根據本發明的第一實施例以流程圖說明一編碼方法的步驟。
輸入到編碼裝置300的資料包括影像資料,影像資料可表示待編碼的影像或部分影像,影像資料的色彩資訊係表示在一色空間中,具有高動態範圍的色域。色彩分量定義影像資料在關聯色空間中的色彩資訊。在此特殊實施例中,色彩分量係以XYZ格式提供,然而應了解本發明可應用到其他色彩分量格式如RGB。在步驟S410中,OETF(光電子傳送函數)模組310應用一光電子傳送函數到色彩分量,OETF函數將輸入信號壓縮到一有限動態,在一圖像的暗區中提供較多細節。從色彩分量X、Y及Z得到的變換色彩分量係分別表示為X’、Y’及Z’。
在步驟S420中,色彩轉換模組320接著在從OETF模組輸出的色彩分量信號X’、Y’及Z’上執行色彩轉換,為要得到色差分量。將變換的X、Y及Z分量轉換到Y’、D’z及D’x色差信號。chroma(色度)信號D’z係定義為色彩分量Z’與Y’之間的一加權差,及色差信號D’x係色彩分量X’與Y’之間的一加權差,亮度信號Y’藉由變換係不變。以下將應用的一色彩轉換範例以數學表達。色差分量D’z、D’x係表達如下: 其中輸入色彩分量X’、Y’及Z’係在範圍[0.0,1.0]中,及輸出色差分量D’z及D’x係在額定範圍[-0.5,+0.5]中。
在步驟S430中,定標模組330應用各別增益因數gx及gz到色差分量D’x及D’z,為要延伸其對應動態範圍,應用的增益因數gx、gz係取決於使用的色域。在一些實施例中,應用的增益因數係為使定標的色差分量gxD’x及gzD’z在範圍[-0.5;0.5]內。
表一中提供一增益因數範例,其可應用於色域Rec709及Rec2020。
在步驟S440中,量化模組340應用量化到色差分量Y’及定標色差分量gxD’x及gzD’z,用以得到量化色差分量QgxD’x、QY’及QgzD’z。
在步驟S450中,由編碼器350將量化色差分量QgxD’x、QY’及QgzD’z編碼到影像資料的位元流表示中。
圖5係根據本發明的第二實施例以示意方塊圖描繪一編碼裝置500的功能模組,圖6係根據本發明的第二實施例以流程圖說明一編碼方法的步驟。
輸入到編碼裝置500的資料包括影像資料,類似於第一實 施例的影像資料,其中影像資料的色彩分量係以XYZ格式提供。本發明的第二實施例不同於第一實施例之處在於,定標係在色差分量的量化後應用到色差分量。根據本發明第二實施例的影像資料編碼方法,在一初始步驟S610中,一OETF模組510應用一光電子傳送函數到色彩分量X、Y、Z,用以得到變換的色彩分量,分別表示為X’、Y’及Z’。
在步驟S620中,色彩轉換模組520接著在從OETF模組輸出的色彩分量信號X’及Z’上執行色彩轉換,為要以相同於本發明第一實施例的方式得到色差分量D’z及D’x,色彩分量Y’仍然維持不變。
在步驟S630中,量化模組530應用量化到色差分量Y’及色差分量D’x及D’z,用以得到量化色差分量QD’x、QY’及QD’z。
在步驟S640中,定標模組540接著應用各別增益因數gx及gz到量化色差分量QD’x及QD’z,為要延伸其動態範圍。
在步驟S650中,由編碼器模組550將定標的量化色差分量gxQD’x、QY’及gzQD’z編碼到影像資料的位元流表示中。
圖7係根據本發明的第一實施例以示意方塊圖描繪一解碼裝置700的功能模組,圖8係根據本發明的第一實施例以流程圖說明一解碼方法的步驟。
輸入到解碼裝置700的資料包括影像資料的編碼位元流表示,係根據本發明的第一實施例編碼。
在步驟S810中,解碼模組710將進入位元流解碼,用以得到量化及定標色差分量QgxD’x、QY’及QgzD’z。
在步驟S820中,由解量化模組710將量化及定標色差分量解量化,用以得到定標色差分量gxD’x、Y’及gzD’z。
在步驟S830中,由色彩轉換模組730處理解量化色差分量,用以得到色彩分量X’、Y’及Z’如下:X’=2D’x+c2Y’
Z’=(2D’z+Y’)/c1其中: 其中X’、Y’及Z’係在範圍[0.0,1.0]中,及D’z及D’x係在範圍[-0.5,0.5]中。
接著可在步驟S840中,根據一顯示裝置與解碼裝置關聯的要求以進一步處理色彩分量X’、Y’及Z’。
圖9係根據本發明的第二實施例以示意方塊圖描繪一解碼裝置900的功能模組,圖10係根據本發明的第二實施例以流程圖說明一解碼方法的步驟。
輸入到解碼裝置900的資料包括影像資訊的編碼位元流表示,係根據本發明的第二實施例編碼。
在步驟S1010中,解碼模組910將進入位元流解碼,用以得到定標及量化色差分量gxQD’x、QY’及gzQD’z。
為要處理定標及量化色差分量gxQD’x及gzQD’z,由解碼裝置得到編碼器應用的增益因數資訊gx,gz。
表二描繪定標解除因數,待應用在表一的增益因數用於色域Rec709及Rec2020情況中。
該資訊可由解碼器依各種方式存取,例如可預存該資訊,或可將該資訊從編碼器傳送到解碼器,與影像資料一起傳送或分開傳送。
在本發明的一特殊實施例中,可使用視訊可用性資訊(VUI) 透過三欄位(色彩_原色、傳送_特性及矩陣_係數)以輸送定標資訊到解碼器。
色彩_原色欄位指出來源原色的色度坐標,係按照x及y的CIE 1931定義,如ISO 11664-1所規定。此欄位可用以指出使用的色域例如是否Rec709或Rec2020。
傳送_特性欄位指出來源圖像的光電子傳送特性,其可用以描述XYZ到待編碼色差分量的轉換。
矩陣-係數欄位指出從綠、藍及紅三原色中得出luma(亮度)及chroma(色度)信號時使用的矩陣係數。
在本發明的此實施例中,將一新值加到矩陣_係數欄位,用於矩陣_係數的此特定值,係根據色彩_原色欄位在編碼器端將分量QD’x及QD’z定標,如表二所示。
例如,若色彩-原色=1(指出Rec709),則在解碼器端,分別藉由一因數8及3將QD’x及QD’z縮小到D’x及D’z。
在步驟S1020中,由解量化模組910將色差分量解量化,用以得到定標色差分量D’x、Y’及D’z。
在步驟S1030中,由色彩轉換模組930處理解量化色差分量,用以得到色彩分量X’、Y’及Z’如下:X’=2D’X+c2Y’
Z’=(2D’Z+Y’)/c1其中: 其中色彩分量X’、Y’及Z’係在範圍[0.0,1.0]中,及色差分量D’z及D’x係在範圍[-0.5,0.5]中。
接著可在步驟S1050中,根據一顯示裝置與解碼裝置關聯 的要求以進一步處理色彩分量X’、Y’及Z’。
本發明的實施例可在各種視訊串流編碼方案中發現應用,如MPEG編碼。
圖11描繪一示範傳輸系統1300,輸入媒體資料(例如包括有HDR影像資料的聲訊及視訊資料)係根據本發明的實施例在媒體編碼器1310編碼,編碼資料係在多工器1320進行多工,及在發送器1330傳送。該傳輸系統可使用在典型電視廣播環境中,或可使用在提供視聽資料用於串流或下載的任何服務。
圖12描繪一示範接收系統1400,系統1400的輸入資料可係編碼在位元流中的多媒體資料,例如系統1300的輸出。該資料係在接收器1410接收,在解多工器1420解多工,及接著在媒體解碼器1430藉由應用根據本發明實施例的解碼方法進行解碼。解碼的封包可放在解多工器1420的緩衝器中,顯影引擎1440呈現媒體內容,例如用以顯示彩色的HDR影像。
雖然以上已參考特定實施例以說明本發明,但應了解本發明未侷限於特定實施例,及熟諳此藝者將明白修改係包含在本發明的範圍內。
例如,雖然在以上範例中已說明一編碼或解碼過程,包括有一預處理SMPTE色彩轉換過程,但應了解本發明未侷限於任何特定用以得到色差分量的過程,其他可應用在影像色彩資訊編碼的過程亦可應用在本發明的相關情況中,例如編碼過程及互補解碼過程係可基於其他涉及一些編碼策略最適步驟的編碼/解碼方法,如MPEG2、MPEG4、AVC、H.263及類似者。
精通此藝者一旦參考以上繪示實施例,自然明白許多進一步修改及變化,繪示實施例係僅藉由範例方式提供,非意欲限制本發明的範圍,其係單單由後附申請專利範圍判定,尤其,只要適當,因不同實施例而有的不同特徵係可交換。
300‧‧‧編碼裝置
310‧‧‧OETF(光電子傳送函數)模組
320‧‧‧色彩轉換模組
330‧‧‧定標模組
340‧‧‧量化模組
350‧‧‧編碼器模組
X,Y,Z‧‧‧色彩分量
X’,Y’,Z’‧‧‧變換之色彩分量
D’x,Y’,D’z‧‧‧色差分量
gxD’x,Y’,gzD’z‧‧‧定標之色差分量
QgxD’x,QY’,QgzD’z‧‧‧量化之色差分量

Claims (14)

  1. 一種編碼影像資料之方法,該影像資料包括有色彩分量,定義影像部分於一色空間中之色彩特性,該方法包括以下步驟用於一影像之至少一部分:藉由應用一增益因數以定標色差分量用以延伸其動態範圍,該等色差分量係從該影像部分之色彩分量得到;其中應用至各別色差分量之增益因數係取決於該色空間之色域;及編碼定標之色差分量。
  2. 如申請專利範圍第1項之方法,其中應用至各別色差分量之增益因數使色差分量係在範圍-0.5至0.5內。
  3. 如先前申請專利範圍中任一項之方法,其中在色差分量之量化前應用色差分量之定標。
  4. 如申請專利範圍第1至2項中任一項之方法,其中在色差分量之量化後應用色差分量之定標。
  5. 如先前申請專利範圍中任一項之方法,其中該影像部分係一高動態範圍影像部分,具有大於8位元之位元深度。
  6. 如先前申請專利範圍中任一項之方法,尚包括傳送應用之增益因數之資料表示。
  7. 如申請專利範圍第6項之方法,其中應用之增益因數之資料表示係包括於視訊可用性資訊之一欄位中。
  8. 如申請專利範圍第7項之方法,其中指出使用色域之資料係包括於視訊可用性資訊之矩陣_係數欄位中。
  9. 一種用以解碼影像資料之方法,該影像資料包括有色彩分量,定義影像部分於一色空間中之色彩特性,該方法包括以下步驟用於一影像之至少一部分:將接收之資料位元流解碼;從解碼位元流中得到色差分量;及藉由應用一重標因數以重標色差分量,該重標因數對應到編碼前應用至色差分量之增益因數,其中該增益因數係取決於該色空間之色域;及 處理重標之色差分量,用以得到該影像部分之對應色彩分量。
  10. 如申請專利範圍第9項之方法,包括接收編碼前應用之增益因數之資料表示,係包括於視訊可用性資訊之欄位中。
  11. 一種用以編碼影像資料之編碼器,該影像資料包括有色彩分量,定義影像部分於一色空間之色彩特性,該編碼器包括:一定標模組,用以藉由應用一增益因數以定標色差分量,用以延伸其動態範圍,該等色差分量係從該影像部分之色彩分量中得到;其中應用至各別色差分量之增益因數係取決於該色空間之色域;及一編碼模組,用以編碼定標之色差分量。
  12. 一種用以解碼影像資料之解碼器,該影像資料包括有色彩分量,定義影像部分於一色空間之色彩特性,該解碼器包括:一解碼模組,用以將接收之位元流解碼;一處理模組,用以從解碼位元流中得到色差分量;及一重標模組,用以藉由應用一重標因數以重標色差分量,該重標因數對應至編碼前應用至色差分量之增益因數,其中應用至各別色差分量之增益因數係取決於該色空間之色域;及一影像處理模組,用以處理重標之色差分量,用以得到該影像部分之對應色彩分量。
  13. 一種資料封包,包括:編碼影像資料,包括有色彩分量,定義影像部分於一色空間之色彩特性,該影像資料係根據申請專利範圍第1至8項中任一項之方法編碼;一增益因數之資料表示,係編碼前應用至影像資料之色差分量用以延伸動態範圍。
  14. 一種用於可程式裝置之電腦程式產品,該電腦程式產品包括有一指令序列,當由該可程式化裝置載入及執行時,用以實施如申請專利範圍第1至10項中任一項之方法。
TW104123152A 2014-07-22 2015-07-17 處理影像資料之方法及裝置 TWI725939B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
EP14306184.4A EP2977958A1 (en) 2014-07-22 2014-07-22 Method and apparatus for processing image data
EP14306184.4 2014-07-22

Publications (2)

Publication Number Publication Date
TW201605228A true TW201605228A (zh) 2016-02-01
TWI725939B TWI725939B (zh) 2021-05-01

Family

ID=51265638

Family Applications (1)

Application Number Title Priority Date Filing Date
TW104123152A TWI725939B (zh) 2014-07-22 2015-07-17 處理影像資料之方法及裝置

Country Status (9)

Country Link
US (1) US10757426B2 (zh)
EP (2) EP2977958A1 (zh)
JP (2) JP6703978B2 (zh)
KR (1) KR102401881B1 (zh)
CN (1) CN106537912B (zh)
AU (1) AU2015294052B2 (zh)
MX (1) MX2017000846A (zh)
TW (1) TWI725939B (zh)
WO (1) WO2016012396A1 (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20180139360A1 (en) * 2015-05-18 2018-05-17 Thomson Licensing Method and device for processing color image data representing colors of a color gamut
EP3119086A1 (en) * 2015-07-17 2017-01-18 Thomson Licensing Methods and devices for encoding/decoding videos
US10728560B2 (en) * 2016-01-28 2020-07-28 Koninklijke Philips N.V. Encoding and decoding HDR videos

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3057255B2 (ja) 1989-08-15 2000-06-26 ソニー株式会社 画像処理装置及び画像処理方法
KR100200363B1 (ko) * 1996-10-10 1999-06-15 윤종용 영상의 다이나믹 레인지 확대 장치
EP1608183A1 (en) 2004-06-14 2005-12-21 Dialog Semiconductor GmbH Matrix circuit for imaging sensors
WO2007066710A1 (ja) 2005-12-07 2007-06-14 Sony Corporation 符号化装置、符号化方法および符号化プログラム、ならびに、復号装置、復号方法および復号プログラム
KR20080102117A (ko) 2006-03-20 2008-11-24 소니 가부시끼 가이샤 화상신호처리장치 및 화상신호처리방법
JP2007295415A (ja) * 2006-04-26 2007-11-08 Sharp Corp 画像処理方法および画像処理装置
US9571856B2 (en) 2008-08-25 2017-02-14 Microsoft Technology Licensing, Llc Conversion operations in scalable video encoding and decoding
CN104486605B (zh) * 2009-03-10 2017-04-12 杜比实验室特许公司 扩展动态范围和扩展维数图像信号转换
US9414054B2 (en) * 2012-07-02 2016-08-09 Microsoft Technology Licensing, Llc Control and use of chroma quantization parameter values
CN104685878B (zh) * 2012-09-24 2018-11-30 华为技术有限公司 具有颜色空间缩放性的视频压缩
JP2015005899A (ja) * 2013-06-21 2015-01-08 ソニー株式会社 復号装置および復号方法、並びに、符号化装置および符号化方法
US10075735B2 (en) * 2013-07-14 2018-09-11 Sharp Kabushiki Kaisha Video parameter set signaling
JP6368365B2 (ja) * 2013-07-18 2018-08-01 コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. Hdrイメージの符号化のためのコードマッピング関数を作成するための方法及び装置、並びに、かかる符号化イメージの使用のための方法及び装置
US20160156915A1 (en) * 2013-07-18 2016-06-02 Samsung Electronics Co., Ltd. Video encoding method and apparatus and video decoding method and apparatus using video format parameter delivery
JP6379636B2 (ja) * 2014-04-30 2018-08-29 ソニー株式会社 情報処理装置、情報記録媒体、および画像処理方法、並びにプログラム

Also Published As

Publication number Publication date
EP2977958A1 (en) 2016-01-27
US20170223366A1 (en) 2017-08-03
JP6703978B2 (ja) 2020-06-03
CN106537912A (zh) 2017-03-22
BR112017000992A2 (pt) 2017-11-14
WO2016012396A1 (en) 2016-01-28
US10757426B2 (en) 2020-08-25
JP6980054B2 (ja) 2021-12-15
KR20170037608A (ko) 2017-04-04
JP2020145707A (ja) 2020-09-10
EP3172718B1 (en) 2022-04-27
CN106537912B (zh) 2020-02-07
KR102401881B1 (ko) 2022-05-26
AU2015294052B2 (en) 2020-12-03
EP3172718A1 (en) 2017-05-31
AU2015294052A1 (en) 2017-02-23
TWI725939B (zh) 2021-05-01
MX2017000846A (es) 2017-05-01
JP2017525290A (ja) 2017-08-31

Similar Documents

Publication Publication Date Title
AU2016212243B2 (en) A method and apparatus of encoding and decoding a color picture
US11647213B2 (en) Method and device for decoding a color picture
CN108352076B (zh) 编码和解码方法及对应设备
WO2021004176A1 (zh) 一种图像处理的方法及装置
JP6980054B2 (ja) 画像データを処理する方法および装置
EP3113496A1 (en) Method and device for encoding both a hdr picture and a sdr picture obtained from said hdr picture using color mapping functions
JP2017522794A (ja) ビットストリーム内で、ldrピクチャのピクチャ/ビデオ・フォーマットと、このldrピクチャおよびイルミネーション・ピクチャから取得された復号済みのhdrピクチャのピクチャ/ビデオ・フォーマットとをシグナリングする方法および装置
KR102574005B1 (ko) 비디오 신호를 컬러 맵핑하기 위한 방법 및 대응하는 디바이스
US11606479B2 (en) Image processing system and image processing method
EP3026908A1 (en) Method and device for quantizing and de-quantizing a picture using scaling factors for chrominance based on luminance
EP3099073A1 (en) Method and device of encoding/decoding a hdr and a sdr picture in/from a scalable bitstream
BR112017000992B1 (pt) Método de codificação de dados de imagem, método para decodificação de dados de imagem, codificador para codificar dados de imagem, decodificador para decodificar dados de imagem e mídia de armazenamento legível por computador não transitória