TW201601516A - 從表示低動態範圍圖像及照明圖像之位元流中將高動態範圍圖像解碼之方法及裝置 - Google Patents

從表示低動態範圍圖像及照明圖像之位元流中將高動態範圍圖像解碼之方法及裝置 Download PDF

Info

Publication number
TW201601516A
TW201601516A TW104119664A TW104119664A TW201601516A TW 201601516 A TW201601516 A TW 201601516A TW 104119664 A TW104119664 A TW 104119664A TW 104119664 A TW104119664 A TW 104119664A TW 201601516 A TW201601516 A TW 201601516A
Authority
TW
Taiwan
Prior art keywords
image
decoded version
color
ldr
sample value
Prior art date
Application number
TW104119664A
Other languages
English (en)
Inventor
皮耶爾 安德烈凡
塞巴斯汀 萊斯里
艾杜華德 法蘭柯西
Original Assignee
湯姆生特許公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 湯姆生特許公司 filed Critical 湯姆生特許公司
Publication of TW201601516A publication Critical patent/TW201601516A/zh

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformations in the plane of the image
    • G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/90—Determination of colour characteristics
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/127—Prioritisation of hardware or computational resources
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/132—Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/98—Adaptive-dynamic-range coding [ADRC]

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computing Systems (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本發明係為一種解碼方法及裝置，用以從表示一低動態範圍(LDR)圖像及一照明圖像之位元流中解碼一HDR(高動態範圍)圖像，該方法包括：藉由LDR圖像之解碼版本之樣本值乘以照明圖像之解碼版本之樣本值以得到HDR圖像之解碼版本；及得到一色彩值表達於一輸出色空間中以用於HDR圖像之解碼版本之各樣本值，該方法之特徵在於尚包括：得到一色彩值表達於該輸出色空間中以用於LDR圖像之解碼版本之各樣本值，係恰好於該等色彩值乘以照明圖像之解碼版本之樣本值前。

Description

從表示低動態範圍圖像及照明圖像之位元流中將高動態範 圍圖像解碼之方法及裝置
本發明一般相關圖像/視訊解碼，尤其(但非限定)本發明的技術領域係相關解碼一圖像，其像素值屬於高動態範圍。
本段落希望向讀者介紹此藝的各種不同方面，其可相關本發明如下說明及/或主張的各種方面，咸信本討論有助於提供讀者背景資訊，使較佳瞭解本發明的不同方面。因此，應瞭解到此等陳述將依此觀點閱讀，並非作為先前技術的認可。
以下，一圖像(在先前技術中有時稱為影像或訊框)包含一或數陣列的樣本(像素值)在一特定圖像/視訊格式中，其中規定一圖像(或視訊)的像素值關連的所有資訊，及可由一顯示器或解碼裝置用以視覺化及/或解碼一圖像(或視訊)的所有資訊。一圖像包括至少一分量，依第一陣列樣本的形狀，通常係一luma(或亮度)分量，及可能地包括至少另一分量，依至少另一陣列樣本的形狀，通常係一色彩分量。
低動態範圍圖像(LDR圖像)係以有限位元數(大部分常是8或10)表示其luma樣本的圖像，此有限表示法不容許小信號變化的正確呈現，尤其在暗淡及明亮的亮度範圍中。在高動態範圍圖像(HDR圖像)中，延伸信號表示法為使信號在其整個範圍中維持高準確度。在HDR圖像中，luma樣本通常係以浮點格式表示(32位元或16位元用於各分量，稱為浮點或半浮點)，最通用格式係openEXR(開放EXR)半浮點格式(每RGB分量16位元，即每樣本48位元)，或以長表示法的整數表示，通常至少16位元。
雙調變方案係一典型措施，用以將一輸入HDR圖像編碼到位元流中，及用以藉由至少部分解碼位元流以得到輸入HDR圖像的解 碼版本。
在編碼端，從輸入HDR圖像中得到一照明圖像IF(亦稱為照明圖或背光圖像)，接著藉由輸入HDR圖像除以照明圖像IF以得到一殘餘圖像Res，及接著將照明圖像IF(或表示該照明圖像的照明資料)及殘餘圖像Res兩者編碼到一位元流F中。使用此措施編碼一輸入HDR圖像導致二分量編碼到一位元流F中：一殘餘圖像Res(以下稱為LDR圖像，其可係一可見圖像，即具有減少的視覺假影及調適用以在一顯示器上觀看的圖像)，及照明圖像IF(或表示該照明圖像的照明資料)。
圖1係根據先前技術以圖顯示從位元流F中解碼一HDR圖像的方法的步驟(例如，”高動態範圍視訊編碼(High Dynamic Range Video Coding)"，Lasserre等人發表於JCTVC-P0159/m32076，2014年1月9-17日在美國加州聖荷西市的第16次MPEG會議)。
在步驟10，一解碼器DEC係配置用以藉由直接將位元流F至少部分解碼，以得到LDR圖像Res的解碼版本的樣本值及照明圖像IF的解碼版本的樣本值。
接著藉由LDR圖像Res的解碼版本乘以照明圖像IF的解碼版本以得到待解碼HDR圖像的解碼版本。
可能地，將一些特定後處理應用到LDR圖像Res的解碼版本，及應用到照明圖像IF的解碼版本。
例如，在步驟11中，一模組PIF係配置用以應用一些後處理到照明圖像IF的解碼版本，其用於非限定範例可係一升取樣及/或反伽馬校正。
用於LDR圖像Res的解碼版本，通常係應用圖1所示的連續後處理。
例如，在步驟12中，將LDR圖像Res的解碼版本的色度分量升取樣，要使LDR圖像Res的解碼版本的一般4：2：0格式轉換到4：4：4格式。此步驟當然係可選步驟。
LDR圖像Res的解碼版本的樣本值通常係表達在熟知的YCbCr色空間中。
例如，在步驟13中，一模組CSC1係配置用以得到一RGB 色彩值以用於LDR圖像Res的解碼版本的各YCbCr樣本值。
例如，在步驟14中，將其他一些後處理應用到LDR圖像的解碼版本。
例如，在子步141中，一模組SCL係藉由LDR圖像Res的解碼版本的各樣本值除以一定標因子cst定標以定標LDR圖像Res的解碼版本，接著由以下式子提供結果的LDR圖像Ress：
例如，將定標因子cst定標定義用以映射LDR圖像Res的解碼版本的樣本值從0到最大值2N-1，其中N係容許作為輸入用於進一步後處理的位元數。
此係藉由映射值1(其粗略係LDR圖像Res的解碼版本的平均值)到中灰階值2N-1以自然地得到，因此，用於具有標準位元數N=8的LDR圖像Res的解碼版本，一定標因子等於120係一極前後一致的值，原因在於極接近在27=128的中間灰階。
例如，在步驟142中，一模組ITMO應用一反色調映射到LDR圖像的解碼版本。
在編碼端，色調映射一LDR圖像包括根據LDR圖像Res的樣本值的一伽馬(gamma)校正或SLog校正。
LDR圖像Res的一色調映射版本Resv例如係由以下公式提供：Res v =A.Res γ A係一常數值，γ係一伽馬曲線係數，例如等於1/2.4。
或者，LDR圖像Res的色調映射版本Resv例如係由以下公式提供：Res v =a.ln(Res+b)+c a,b,c係所判定SLog曲線的係數，使0及1係不變，及SLog曲線的導數在由1以下的一伽馬曲線延長時係持續在1，因此，a、b及c係參數γ的函數。
在LDR圖像Res上應用一伽馬校正，往上拉升暗區域但 不降低夠高光線，用以避免亮像素的燃燒效果。
在LDR圖像Res上應用一SLog校正，降低夠高光線但不往上拉升暗區域。
接著，有利地，色調映射一LDR圖像Res包括根據LDR圖像Res的樣本值的伽馬校正或SLog校正，例如，當LDR圖像Res的像素值係在一臨界值(例如等於1)以下時，則應用伽馬校正，否則應用SLog校正。
反色調映射LDR圖像Res的解碼版本包括應用反Slog校正或反伽馬校正，例如，反色調映射恰好用以從伽馬曲線中找出值，其對應到LDR圖像Res的解碼版本中使用伽馬曲線的樣本值。
例如，在步驟143中，一模組RGBF係配置用以應用一RGB因子到LDR圖像Res的解碼版本，即LDR圖像的解碼版本的樣本值乘以一係數，加上一偏移以取得結果值，及最後右移結果值。
在步驟15中，通常一模組CSC2係配置用以得到一色彩值表達在一特定輸出色空間中以用於HDR圖像的解碼版本的各樣本值。
請注意，模組CSC2係可配置用以應用其他處理如一特定伽馬校正及/或OETF(光電傳遞函數)。
通常，該特定輸出空間係線性的，可使用任何RGB或XYZ(亦稱為CIEXYZ)色空間作為輸出色空間。例如，一XYZ色空間可與一RGB色空間結合，具有符合Rec.2020的原色。當使用XYZ色空間作為輸出色空間時，模組CSC2則配置用以得到一XYZ色彩值用於HDR圖像的解碼版本的各RGB樣本值。
此一解碼方法利用反向相容或(在舊有呈現裝置上)可見的LDR圖像的直接實施考慮浮點算術，為要全沿著解碼處理(步驟11至15)保留信號動態範圍及精確度。然而，在大量地及傳統上利用16或32位元整數算術(算術邏輯單元)的現存消費性電子產品(CE)架構如機上盒(STB)、藍光光碟(BD)播放器、電視機上，使用浮點會妨礙短期部署(搬運)。主要原因在於真實世界部署的色彩轉換器不會接受在色彩轉換期間需要具有大於16或32位元的中間值的信號。
例如，考量到一典型8位元整數轉換器，係配置用以轉換 RGB樣本值(r,g,b)(具有BT.709原色)到具有8位元動態範圍的XYZ色彩值(x,y,z)，以用於輸入及輸出樣本值兩者。熟知的轉換方程係如下：x=(422*r+366*g+185*b+128)>>10；y=(218*r+732*g+74*b+128)>>10；z=(20*r+122*g+973*b+128)>>10；具有10位元係數準確度，為轉換準確度保留的緣故。
用於一XYZ樣本值從一RGB樣本值(255,255,255)的結果x分量，發生以下18位元中間值：422×255+366×255+185×255+128=107610(17位元)+93330(17位元)+47175(16位元)+128(8位元)=200940(18位元)+47303(16位元)=248243(18位元)；接著右移10用於242(8位元)的結果。
因此，用於8位元RGB樣本值(輸入)，中間值的動態範圍高達18位元，其無法實施在一典型16位元整數色彩轉換器上，其他範例顯示24位元輸入需要34位元中間值。
記住效能保留(即浮點到整數轉換的可忽略損耗)，此一解碼方法的直接搬運暗示龐大動態範圍用於輸入/輸出介面，以及中間緩衝(中間值)通常大於16(甚至32)位元，其用於目前大眾市場運算資源會引發爭論。
此外，剪輯中間(及/或輸出)值以縮減其在色彩轉換過程期間的動態範圍有害地衝擊效能。
此外，縮減用於色彩轉換的係數的動態範圍暗示具有高動態範圍的輸入樣本值的準確度失去，及此一縮減則亦涉及有害地衝擊效能。
考量到上述情形，因此提出本發明。
有鑑於以上說明，本發明的方面係指向產生及維持一電腦系統上資料物件之間的語義關係，以下提出本發明的簡化概要，為要提供本發明一些方面的基本瞭解。此概要並非本發明的延伸概述，並非預期用以辨識本發明的重要或關鍵元件，以下概要僅以簡化形式提供本發明的一些方面，作為以下所提供較詳細說明的序幕。
為補救先前技術的一些缺點，本發明揭示一種解碼方法，用以從表示一LDR圖像及一照明圖像的位元流中解碼一HDR圖像，該方法包括：- 藉由LDR圖像的解碼版本的樣本值乘以照明圖像的解碼版本的樣本值以得到HDR圖像的解碼版本；- 得到一色彩值表達在一輸出色空間中以用於HDR圖像的解碼版本的各樣本值；及- 得到一色彩值表達在輸出色空間中以用於LDR圖像的解碼版本的各樣本值，係恰好在該等色彩值乘以照明圖像的解碼版本的樣本值前。
恰好在乘(而非色彩轉換)HDR圖像的解碼版本前將LDR圖像的解碼版本的樣本值進行色彩轉換，重大地縮減待色彩轉換樣本值的動態範圍(及色彩轉換處理期間所需中間值的動態範圍)，及容許完整解碼方法的16(或32)位元整數實作考量到典型16(或32)位元轉換器的限制。
在其他方面，根據本發明，通常在LDR圖像的解碼版本乘以照明圖像的解碼版本後發生的色彩轉換(模組CSC2)已由LDR圖像的解碼版本的色彩轉換取代。請注意此一解碼方法修改替換線性運算(色彩轉換、乘法)，實際上，一般雙調變方案的此一解碼方法修改容許一般雙調變的修改解碼方法的整數實作，其保留整個浮點處理工作流程的效能。
根據一變化，該方法尚包括將LDR的解碼版本的樣本值進行定標及色彩轉換，根據此變化，LDR的解碼版本的樣本值係在定標前進行色彩轉換。
以下將配合附圖說明本發明的實施例，使本發明的特定本質以及本發明的其他目的、優勢、特點及用途更明朗化。
10‧‧‧解碼步驟
11‧‧‧後處理應用步驟
12‧‧‧升取樣步驟
13,15‧‧‧色彩轉換步驟
14‧‧‧其他後處理應用步驟
141‧‧‧定標步驟
142‧‧‧反色調映射步驟
143‧‧‧RGB因子應用步驟
50‧‧‧裝置
51‧‧‧資料及位址滙流排
52‧‧‧微處理器(CPU)
53‧‧‧唯讀記憶體(ROM)、快閃記憶體、硬碟
54‧‧‧隨機存取記憶體(RAM)、視訊記憶體
55‧‧‧輸入/輸出(I/O)介面、儲存介面、通訊介面
56‧‧‧電池
CSC1,CSC2‧‧‧色彩轉換模組
cst定標‧‧‧定標因子
γ‧‧‧參數
DEC‧‧‧解碼器
F‧‧‧位元流
IF‧‧‧照明圖像
‧‧‧照明圖像的解碼版本
‧‧‧HDR圖像的解碼版本
ITMO(I-Slog)‧‧‧反色調映射模組
PIF‧‧‧後處理應用模組
RGBF‧‧‧RGB因子應用模組
Res‧‧‧殘餘圖像
‧‧‧LDR圖像的解碼版本
Ress‧‧‧LDR圖像的定標版本
Resv‧‧‧LDR圖像的色調映射版本
SCL‧‧‧定標模組
附圖中描繪本發明的一實施例，圖中：圖1係根據先前技術以圖顯示從位元流F中解碼一HDR圖像的方法的步驟；圖2係根據本發明的一實施例以圖顯示從位元流F中解碼一HDR圖像的方法的步驟； 圖3係根據本發明的一實施例相關圖1所述一變化以圖顯示從位元流F中解碼一HDR圖像的方法的步驟；圖4顯示YCbCr及RGB色空間兩者的動態範圍的描繪；及圖5係根據本發明的一實施例以顯示一裝置的架構範例。
相同參考數字符號表示相似或相同元件。
以下本文中將參考附圖以更詳細說明本發明，附圖中顯示本發明的實施例，然而本發明係可具體表現在許多替代形式中，不應解釋為限定在本文中提出的實施例。因此，雖然本發明可能作出各種不同的修改及替代形式，但附圖中係藉由範例以顯示本發明的數個特定實施例，並將在本文中詳細說明。然而，應瞭解並無意將本發明限定在所揭示的特殊形式，相反地，本發明將涵蓋所有包含在本發明如後附申請專利範圍所界定的精神及範疇內的修改、同等項及替代。
本文中使用的術語僅為說明特殊實施例，並不預期係本發明的限制，如本文中的使用，預期單數形"一"、一個"及"該"也包括複數形，除非是上下文另有清楚指明。尚應瞭解，本說明書中使用"包括"、"包括有"、"包含"及/或"包含有"等用詞時，明確指出所述特點、整數、步驟、操作、元件及/或組件的存在，但不排除一或多個其他特點、整數、步驟、操作、元件、組件及/或群組的存在或添加。此外，當表示一元件係"回應"或"連接"到另一元件時，該元件係可直接回應或連接到該另一元件，或可存在插入元件。對照下，當表示一元件係"直接回應"或"直接連接"到另一元件時，就無插入元件存在。本文中使用的"及/或"一詞包含列出的一或多個關聯項的任何及所有組合，並可縮寫為"/"。
應瞭解，雖然本文中使用第一、第二等用詞以描述不同元件，但此等元件不應由此等用詞限制，此等用詞只用以區別一元件與另一元件，例如，不背離本發明的教示，第一元件可稱作第二元件，同樣地，第二元件可稱作第一元件。
雖然有些附圖在通訊路徑上包含箭頭用以顯示一主要通訊方向，但應瞭解通訊可發生在所示箭頭的相反方向。
有些實施例係以方塊圖及操作流程圖說明，其中各區塊表示一電路元件、模組，或部分碼，其包括一或多個可執行指令用以實施規定的(數個)邏輯函數。亦應注意，在其他實作中，區塊中所示該(等)函數可不依所示次序發生，例如，取決於所涉及功能性，顯示為連續的二區塊事實上係大體上同時執行，或該等區塊有時係可依相反次序執行。
本文中參考"一個實施例"或"一實施例"意指配合該實施例所說明的一特殊特點、結構或特性係可包含在本發明的至少一實作中。在說明書的各種地方出現"在一實施例中"或”根據一實例”的用語，未必全參考相同實施例，分開或替代的實施例也未必與其他實施例互不相關。
在申請專利範圍中出現的參考數字符號係只藉由繪示說明，在申請專利範圍的範疇上不應具有任何限制作用。
雖未明確說明，但本發明的實施例及變化係可運用在任何組合或子組合中。
以下，一圖像(在先前技術中有時稱為影像或訊框)包含一樣本(像素值)陣列在一特定圖像/視訊格式中，其中規定該圖像(或一視訊)的像素值關連的所有資訊及可由顯示器及/或解碼裝置使用的所有資訊。一圖像包括至少一分量，通常係一luma(或亮度)分量，及可能地至少另一分量，通常係一色彩分量。
本發明係說明用以解碼一圖像，但延伸到一序列圖像(視訊)的解碼，原因在於該序列的各圖像係循序地解碼如以下說明。
圖2係根據本發明的一實施例以圖顯示從位元流F中解碼一HDR圖像的方法的步驟。
相較於圖1，模組CSC2茲係應用到LDR圖像Res的解碼版本(可能經後處理)，而非如先前技術中所述(圖1)應用到HDR圖像的解碼版本。
因此，得到一色彩值表達在輸出色空間如CIEXYZ中，以用於LDR圖像Res的解碼版本的各樣本值表達在一色空間如RGB中。
圖3係根據本發明的實施例相關圖1所述變化以圖顯示從位元流F中解碼一HDR圖像的方法的步驟。
根據此變化，該解碼方法尚包括將LDR圖像Res的解碼 版本進行定標(步驟141)及色彩轉換(步驟13)。
根據本發明，LDR圖像Res的解碼版本的樣本值係在色彩轉換(步驟13)前先進行定標(步驟141)。
較精確地，遵循以上範例，得到一RGB色彩值以用於各定標YCbCr樣本值。
如圖4所說明，因YCbCr樣本值的動態範圍係小於RGB樣本值的動態範圍，因此將YCbCr樣本值定標而非將RGB樣本值定標使結果的定標及色彩轉換樣本值的動態範圍縮減。
使結果的定標及色彩轉換樣本值的動態範圍縮減容許完整解碼方法的16(或32)位元整數實作考量到典型16(或32)位元色彩轉換器的限制。
圖4顯示YCbCr及RGB色空間的體積描繪。
可看出當此等色彩值係表達在YCbCr色空間中而非在RGB色空間中，色彩值係表達在較寬體積中，然而，理論上，四分之三或更多的YCbCr碼組合不表示色彩。例如，當使用8位元Rec.601標準YCbCr時，只17%的碼字表示色彩，因此，比起RGB色空間，YCbCr色空間表示較少色彩(或等效地較多量化雜訊)(SIGGRAPH2004：用於電腦圖形、高畫質電視、數位電影之色彩科學及色彩外觀模型(Color science and color appearance models for CG,HDTV,D-Cinema)，Charles Poynton所著)。
因此，因YCbCr色彩係區域化在YCbCr色空間的整個體積的較小部分，因此表達為YCbCr色彩的樣本值的動態範圍係比此等樣本值表達為RGB色彩時的動態範圍小。
在圖1至3中，該等模組係功能單元，其與可區別的實體單元係可相關或不相關，例如，此等模組或其中有些模組可共同在單一組件或電路中，或對一軟體的功能性作出貢獻。反過來說，一些模組可潛在地由數個分開實體所組成，適合本發明的裝置係使用純硬體來實現，例如使用專用硬體如ASIC或FPGA或VLSI(分別是«應用特定積體電路»、«現場可程式閘陣列»、«極大型積體電路»)，或由嵌入一裝置中的數個積體電子組件來實現，或由硬體與軟體組件混合來實現。
圖5繪示一裝置50的示範架構，其係可配置用以執行相 關圖1至3所述方法。
裝置50包括以下元件，其係藉由一資料及位址匯流排51鏈接起來：- 一微處理器52(或CPU)，其例如係一DSP(或數位訊號處理器)；- 一ROM(或唯讀記憶體)53；- 一RAM(或隨機存取記憶體)54；- 一I/O(輸入/輸出)介面55，用以從一應用程式接收資料用於傳送；及- 一電池56。
根據一變化，電池56係在該裝置的外部，圖5的此等元件各為熟諳此藝者所熟知，不再贅述。在各提及記憶體中，本說明書中使用的«暫存器»一詞可對應到小容量區(一些位元)或對應到極大區(如整個程式，或大量接收或解碼資料)。ROM 53包括至少一程式及數個參數，根據本發明方法的演算法係儲存在ROM 53中。當開關打開時，CPU 52將RAM中的程式上傳及執行對應指令。
RAM 54包括，在一暫存器中係由CPU 52執行及裝置50的開關打開後所上傳的程式，在一暫存器中係輸入資料，在一暫存器中係該方法在不同狀態中的中間資料，及在一暫存器中係用於該方法執行的其他變數。
本文中說明的實作例如可實現在一方法或處理過程、裝置、軟體程式、資料流，或信號中。即若只在單一形式實作的情境中討論(例如只討論作為一方法或一裝置)，所討論特點的實作亦可實現在其他形式(例如一程式)中。一裝置例如可實現在適當硬體、軟體及韌體中，該等方法例如可實現在一裝置如處理器中，其通常指處理裝置，例如包括有電腦、微處理器、積體電路或可程式邏輯裝置。處理器亦包括通訊裝置如電腦、手機、可攜式/個人數位助理器("PDA")，及有助於終端用戶間資訊通訊的其他裝置。
根據解碼或解碼器的不同實施例，解碼圖像係傳送到一目的地，明確地，該目的地屬於一集合，包括：- 一區域記憶體(53或54)，如視訊記憶體或RAM、快閃記憶體、硬碟；- 一儲存介面(55)，如具有大量儲存的介面、RAM、快閃記憶體、ROM、 光碟或磁墊；- 一通訊介面(55)，如有線介面(例如滙流排介面(如USB(或通用序列滙流排)、廣域網路介面、區域網路介面、HDMI(高清晰度多媒體介面)介面)，或無線介面(如IEEE 802.11介面，WiFi®或藍牙®介面)；及- 一顯示器。
根據解碼或解碼器的不同實施例，位元流F係從一來源得到。示範地，位元流係讀取自一區域記憶體，如視訊記憶體(54)、RAM(54)、ROM(53)、快閃記憶體(53)或硬碟(53)。在一變化中，位元流係接收自一儲存介面(55)，如具有大量儲存的介面、RAM、ROM、快閃記憶體、光碟或磁墊，及/或接收自一通訊介面(55)，如到點對點鏈接、滙流排、單點對多點鏈接或廣播網路的介面。
根據不同實施例，裝置50係配置用以實施相關圖1至3所述解碼方法，該裝置屬於一集合，包括：- 行動裝置；- 通訊裝置；- 遊戲裝置；- 機上盒；- 電視機；- 數位板(或平板電腦)；- 膝上型電腦；- 顯示器；及- 解碼晶片。
本文中所述各種不同處理過程及特點的實作可具體實現在各種不同的設備或應用程式中，尤其例如在設備或應用程式中。此類設備範例包括解碼器、後處理器(處理從解碼器來的輸出)、視訊解碼器、網站伺服器、機上盒、膝上型電腦、個人電腦、手機、PDA及其他通訊裝置。顯然地，該設備可係移動式，甚至安裝在汽車中。
此外，該等方法可由一處理器正執行的指令來實施，及此類指令(及/或一實作所產生的資料值)係可儲存在一電腦可讀取儲存媒體上。一電腦可讀取儲存媒體可採取一電腦可讀取程式產品形式，具體化在 一或多個電腦可讀取媒體中，及其上具體化有電腦可執行的電腦可讀取程式碼。如本文中使用的電腦可讀取儲存媒體係考慮一非暫態儲存媒體，提供固有能力用以在其中儲存資訊，以及固有能力用以從其提供資訊檢索。一電腦可讀取儲存媒體例如可係(但不限於)電子、磁性、光學、電磁、紅外線，或半導體系統、裝置，或元件，或以上各項的任何合適組合。應了解，以下雖然提供可應用本發明的電腦可讀取儲存媒體的較特定範例，但如本領域的普通技術人員所容易理解，僅是舉例而非徹查的列表：可攜式電腦磁碟；硬碟；唯讀記憶體(ROM)；可拭除可程式化唯讀記憶體(EPROM或快閃記憶體)；可攜式光碟唯讀記憶體(CD-ROM)；光學儲存裝置；磁性儲存裝置；或以上各項的任何合適組合。
該等指令可形成一應用程式，有形具體化在一處理器可讀取媒體上。
指令例如係可在硬體、韌體、軟體或一組合中，指令例如係可在作業系統、分開的應用程式或二者的組合中找到，因此一處理器的特徵例如係可作為配置用以執行一處理過程的裝置，及同時作為包含有一處理器可讀取媒體的裝置(如儲存裝置)，具有指令用以實施一處理過程。此外，一處理器可讀取媒體可儲存(在指令外添加或代替指令)一實作所產生的資料值。
如熟諳此藝者明白，數個實作可產生各種信號格式化用以攜帶資訊，其例如係可儲存或傳送，該資訊例如可包括指令用以執行一方法，或所述實作中的一者所產生的資料。例如，可將一信號格式化用以攜帶作為資料，即規則用以寫入或讀取所述一實施例的語法，或用以攜帶作為資料，即所述一實施例所寫成的實際語法值。例如可將此一信號格式化作為一電磁波(例如使用頻譜的一射頻部分)或作為一頻帶信號。格式化例如可包括將一資料流編碼及利用編碼資料流以調變一載波。信號攜帶的資訊例如可係類比或數位資訊，如所知，信號係可透過各種不同有線或無線鏈接來傳送，信號係可儲存在一處理器可讀取媒體上。
已說明數個實作，然而，應瞭解可作出不同修改，例如可結合、增補、修改或移除不同實作的元件以產生其他實作。此外，一般技術人員應瞭解其他結構或方法係可替代用於該等揭示者，如所揭示實作， 結果的實作將依(數個)至少大體上相同的方式，執行(數個)至少大體上相同的功能，以達成(數個)至少大體上相同的結果，因此，本發明涵蓋此等及其他實作。
10‧‧‧解碼步驟
11‧‧‧後處理應用步驟
12‧‧‧升取樣步驟
13,15‧‧‧色彩轉換步驟
14‧‧‧其他後處理應用步驟
CSC1,CSC2‧‧‧色彩轉換模組
DEC‧‧‧解碼器
F‧‧‧位元流
‧‧‧HDR圖像之解碼版本
‧‧‧照明圖像之解碼版本
PIF‧‧‧後處理應用模組
‧‧‧LDR圖像之解碼版本

Claims (6)

  1. 一種解碼方法，用以從表示一LDR圖像及一照明圖像之位元流中解碼一HDR圖像，該方法包括：- 藉由將LDR圖像之解碼版本之樣本值進行定標及色彩轉換以得到一中間圖像；- 藉由一中間圖像之樣本值乘以照明圖像之解碼版本之樣本值以得到HDR圖像之解碼版本；及- 得到一色彩值表達於一輸出色空間中以用於HDR圖像之解碼版本之各樣本值；其中- 藉由將LDR之解碼版本之樣本值於色彩轉換前進行定標以得到中間圖像之樣本值；及- 於該等色彩值乘以照明圖像之解碼版本之樣本值前，藉由將中間圖像之各樣本於輸出空間進行色彩轉換，以得到一色彩值表達於輸出色空間中以用於HDR圖像之解碼版本之各樣本值，及其中由下表裝置中之一者實施該方法：- 行動裝置；- 通訊裝置；- 遊戲裝置；- 機上盒；- 電視機；- 數位板(或平板電腦)；- 膝上型電腦；- 顯示器；及- 解碼晶片。
  2. 如申請專利範圍第1項之方法，其中輸出色空間係一CIEXYZ。
  3. 如申請專利範圍第1項之方法，其中輸出色空間係一RGB色空間。
  4. 一種解碼裝置，用以從表示一LDR圖像及一照明圖像之位元流中解碼一HDR圖像，該裝置包括一處理器，配置用以： - 藉由將LDR圖像之解碼版本之樣本值進行定標及色彩轉換以得到一中間圖像；- 藉由一中間圖像之樣本值乘以照明圖像之解碼版本之樣本值以得到HDR圖像之解碼版本；及- 得到一色彩值表達於一輸出色空間中以用於HDR圖像之解碼版本之各樣本值；其中- 藉由將LDR之解碼版本之樣本值於色彩轉換前進行定標以得到中間圖像之樣本值；及- 於該色彩值乘以照明圖像之解碼版本之樣本值前，藉由將中間圖像之各樣本於輸出空間中進行色彩轉換，以得到一色彩值表達於輸出色空間中以用於HDR圖像之解碼版本之各樣本值，及其中該裝置係下表裝置中之一者：- 行動裝置；- 通訊裝置；- 遊戲裝置；- 機上盒；- 電視機；- 數位板(或平板電腦)；- 膝上型電腦；- 顯示器；及- 解碼晶片。
  5. 如申請專利範圍第4項之裝置，其中輸出色空間係一CIEXYZ。
  6. 如申請專利範圍第4項之裝置，其中輸出色空間係一RGB色空間。
TW104119664A 2014-06-20 2015-06-18 從表示低動態範圍圖像及照明圖像之位元流中將高動態範圍圖像解碼之方法及裝置 TW201601516A (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
EP14305949.1A EP2958330A1 (en) 2014-06-20 2014-06-20 Method and device for decoding a HDR picture from a bitstream representing a LDR picture and an illumination picture

Publications (1)

Publication Number Publication Date
TW201601516A true TW201601516A (zh) 2016-01-01

Family

ID=51162631

Family Applications (1)

Application Number Title Priority Date Filing Date
TW104119664A TW201601516A (zh) 2014-06-20 2015-06-18 從表示低動態範圍圖像及照明圖像之位元流中將高動態範圍圖像解碼之方法及裝置

Country Status (4)

Country Link
US (1) US20170118482A1 (zh)
EP (2) EP2958330A1 (zh)
TW (1) TW201601516A (zh)
WO (1) WO2015193115A1 (zh)

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI513327B (zh) * 2011-04-15 2015-12-11 Dolby Lab Licensing Corp 高動態範圍影像的編碼、解碼及表示

Also Published As

Publication number Publication date
WO2015193115A1 (en) 2015-12-23
EP2958330A1 (en) 2015-12-23
US20170118482A1 (en) 2017-04-27
EP3158530A1 (en) 2017-04-26

Similar Documents

Publication Publication Date Title
TWI769128B (zh) 用於影像及視訊之電光及光電轉換的方法、系統及裝置
ES2899979T3 (es) Generación y procesamiento de señales de imagen de rango dinámico alto
TWI680674B (zh) 在位元流中將低動態範圍圖像之圖像／視訊格式及從該低動態範圍圖像及照明圖像中得到之解碼高動態範圍圖像之圖像／視訊格式以信號表示之方法及裝置
TWI707578B (zh) 彩色圖像從位元流解碼之方法和裝置，電腦程式製品，以及處理器可讀式媒體和非暫態儲存媒體
TWI553626B (zh) 反向相容延展影像格式
JP6502947B2 (ja) 高ダイナミックレンジ画像をトーンマッピングする方法及びデバイス
TW201701665A (zh) 編碼及解碼彩色圖像之方法及裝置
JP2018507619A (ja) カラー・ピクチャを符号化および復号する方法および装置
US11062432B2 (en) Method and device for reconstructing an HDR image
TW201701658A (zh) 將高動態範圍圖像與使用色映射函數從該高動態範圍圖像得到之標準動態範圍圖像兩者編碼之方法及裝置
US20180005358A1 (en) A method and apparatus for inverse-tone mapping a picture
US20220256164A1 (en) Data Compression and Packing
TWI740830B (zh) 圖框之編碼方法和裝置及其解碼方法和裝置，電腦程式製品和處理器可讀式媒體，以及非暫態儲存媒體
TW201601517A (zh) 從表示低動態範圍圖像及照明圖像之位元流中將高動態範圍圖像解碼之方法及裝置
US20170272780A1 (en) Extended YCC Format for Backward-Compatible P3 Camera Video
US10972698B2 (en) Method and device for selecting a process to be applied on video data from a set of candidate processes driven by a common set of information data
TW201601516A (zh) 從表示低動態範圍圖像及照明圖像之位元流中將高動態範圍圖像解碼之方法及裝置
TW201601521A (zh) 從表示低動態範圍圖像及照明圖像之位元流中將高動態範圍圖像解碼之方法及裝置
TW201601518A (zh) 在位元流中將低動態範圍圖像之圖像／視訊格式及從該低動態範圍圖像及照明圖像中得到之解碼高動態範圍圖像之圖像／視訊格式以信號表示之方法及裝置
TW201547260A (zh) 將訊框編碼及／或將表示訊框之位元流解碼之方法及裝置
TW201601524A (zh) 在位元流中將低動態範圍圖像之圖像／視訊格式及從該低動態範圍圖像及照明圖像中得到之解碼高動態範圍圖像之圖像／視訊格式以信號表示之方法及裝置
EP3146718B1 (en) Method and device for scalable encoding of a high dynamic range frame and/or decoding a bitstream representing such a frame
TW201547261A (zh) 將訊框編碼及／或將表示訊框之位元流解碼之方法及裝置
TW201545542A (zh) 將訊框編碼及／或將表示訊框之位元流解碼之方法及裝置
TW201547262A (zh) 將訊框編碼及／或將表示訊框之位元流解碼之方法及裝置