TW201702988A - 用於高動態範圍色調映射運算子之方法，裝置及系統 - Google Patents

用於高動態範圍色調映射運算子之方法，裝置及系統 Download PDF

Info

Publication number
TW201702988A
TW201702988A TW105116733A TW105116733A TW201702988A TW 201702988 A TW201702988 A TW 201702988A TW 105116733 A TW105116733 A TW 105116733A TW 105116733 A TW105116733 A TW 105116733A TW 201702988 A TW201702988 A TW 201702988A
Authority
TW
Taiwan
Prior art keywords
hdr
tone mapping
image
curve
dynamic range
Prior art date
Application number
TW105116733A
Other languages
English (en)
Inventor
莫茲丹 賽菲
米梅特 特爾肯
艾瑞克 萊哈爾德
Original Assignee
湯普生證照公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 湯普生證照公司 filed Critical 湯普生證照公司
Publication of TW201702988A publication Critical patent/TW201702988A/zh

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/90—Dynamic range modification of images or parts thereof
    • G06T5/92—Dynamic range modification of images or parts thereof based on global image properties
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/77—Circuits for processing the brightness signal and the chrominance signal relative to each other, e.g. adjusting the phase of the brightness signal relative to the colour signal, correcting differential gain or differential phase
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/40—Image enhancement or restoration using histogram techniques
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N11/00—Colour television systems
    • H04N11/06—Transmission systems characterised by the manner in which the individual colour picture signal components are combined
    • H04N11/20—Conversion of the manner in which the individual colour picture signal components are combined, e.g. conversion of colour television standards
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N17/00—Diagnosis, testing or measuring for television systems or their details
    • H04N17/02—Diagnosis, testing or measuring for television systems or their details for colour television signals
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20172—Image enhancement details
    • G06T2207/20208—High dynamic range [HDR] image processing

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • General Health & Medical Sciences (AREA)
  • Picture Signal Circuits (AREA)
  • Image Processing (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本發明之態樣係針對用於色調映射一高動態範圍(hdr)影像之方法及裝置。該裝置包含用於執行以下各者之一處理器且該方法包含以下各者：獲得該高動態範圍影像之一亮度分量；判定一hdr至hdr色調映射程式曲線；藉由將該hdr至hdr色調映射程式曲線應用於該高動態範圍影像之該亮度分量來判定一色調壓縮影像；其中該hdr至hdr色調映射程式曲線包括用於暗色位準及中間色調位準之一線性部分及用於高亮區之一壓縮非線性部分。

Description

用於高動態範圍色調映射運算子之方法，裝置及系統
本發明係關於影像及視訊處理。特定言之，本發明係關於利用一HDR色調映射運算子來轉換影像或視訊資料。
自然光涵蓋自星光至明亮陽光之一大範圍之亮度位準。然而，傳統成像技術(數位及類比兩者)提供少量經驗，此係因為其無法使人眼可見之寬範圍之亮度及對比度並行。作為回應，開發高動態範圍(「HDR」)技術來允許顯示一擴大範圍之色彩、亮度及對比度。
HDR技術聚焦於擷取、處理及顯示一更寬動態範圍之內容。儘管在開發中存在HDR顯示器及攝影機來擷取HDR內容，但HDR內容需要經歷色調映射以使舊版顯示器能夠再現內容。
色調再現(亦稱為色調映射)旨在將一影像之原始亮度值範圍映射至可由一舊版顯示器再現之一較低亮度值範圍。通常(但非總是)，對自原始彩色影像導出之一亮度通道實施色調映射。色調映射之輸出可與自原始影像保留之色彩資訊重組以產生具有比輸入影像低之一動態範圍之一新彩色影像。
色調映射演算法可被分成兩大類。一第一類別可經界定為全局色調映射。此涉及：將(若干)壓縮函數(例如S型函數或對數函數)獨立地應用於影像或影像序列之各像素之亮度值。
一第二類別可經界定為局部色調映射(亦稱為空間變動色調映射)。對於各像素，局部色調映射考量該像素之亮度值以及來自其鄰近像素之資訊。例如，將依不同於由暗像素之一叢集包圍之一亮像素之方式處理嵌入亮像素之一叢集中之相同亮像素。因此，在局部色調映射情況中，全局色調映射情況之壓縮函數由各像素之環境調變。此具有以下若干結果：
●全局色調映射之運算成本趨向於顯著低於局部色調映射之運算成本。
●局部色調映射之視覺品質可高於使用全局色調映射來達成之視覺品質。
●局部色調映射引入無用視覺假影之可能性高於全局色調映射引入無用視覺假影之可能性。此通常被視為影像中之(暗)光暈。
已知色調映射運算子之所欲使用情況係使亮度值之範圍大幅減小。真實世界中所觀察之光亮位準與所欲輸出(通常為約100尼特)之間的差異非常顯著以迫使適當色調映射運算子之設計權衡於視覺品質與運算複雜性之間。例如，既有色調映射運算子壓縮全亮度通道資訊(例如最大4000尼特內容)以適合於舊版非HDR顯示器之非常低範圍(例如100尼特內容)。然而，在一些情況中，需要色調映射程式來將範圍減小至一顯著更小因數，例如，自最大4000尼特減小至1500尼特(例如，用於不同HDR顯示之間的範圍壓縮)。然而，傳統色調映射運算子無法完全再現HDR感覺，此係因為其壓縮亮度之整個範圍且重新線性調整亮度值以適合於目標顯示範圍。此意謂：鄰近像素之相對亮度跟隨LDR內容之一感覺。
以下論文繪示色調映射之一些實例： -Alper Koz及Frédéric Dufaux之「Optimized tone mapping with perceptually uniform luminance values for backward-compatible high dynamic range video compression」； -Wataru Okado等人之「Regionally optimized image contrast enhancement」，第三屆消費性電子產品全球會議(GCCE)，IEEE，2014年。
鑑於此等問題，需要一解決方案來改良具有一高峰值亮度之顯示器上之亮度再現之視覺品質，但此峰值亮度低於顯示器可接收之內容之峰值亮度。
因此，需要改良具有低於高動態範圍內容之峰值亮度之一峰值亮度之顯示器上之該內容之視覺品質，其中假定顯示器之峰值亮度係較高的(例如，高於500cd/m2)。
本發明之態樣係針對用於色調映射一高動態範圍影像之方法及裝置。該裝置包含用於執行以下各者之一處理器且該方法包含以下各者：獲得該高動態範圍影像之一亮度分量；判定一hdr至hdr色調映射程式曲線；藉由將該hdr至hdr色調映射程式曲線應用於該高動態範圍影像之該亮度分量來判定一色調壓縮影像；其中該hdr至hdr色調映射程式曲線包括用於暗色位準及中間色調位準之一線性部分及用於高亮區之一壓縮非線性部分。
該方法或裝置經組態使得該hdr至hdr色調映射程式包含用於判定亮度何時被線性改變及亮度何時被非線性壓縮之一臨限值。該方法或裝置經組態使得根據以下方程式之一最終臨限值τf基於一初始臨限值τ來判定：
此意謂：若具有大於τ之一值之影像中之像素之百分比通過某一 準則，則可修改一初始臨限值τ。此修改之益處係：若影像總體非常明亮，則壓縮演算法經調整以解釋此修改。此改良有利地產生具有一改良視覺外觀之一色調再現運算子。
該方法或裝置進一步包括：基於待色調映射之該高動態範圍影像之內容來判定該臨限值。該方法或裝置經組態以進一步包括用於迫使該hdr至hdr色調映射程式曲線連續且平滑之準則。此將有助於避免經色調映射之影像中之假影。例如，此將避免具有一平滑梯度之一影像在色調映射之後變成不平滑，即使色調映射曲線中存在一扭折。
該方法或裝置進一步包括：其中該高動態範圍影像係一高動態範圍視訊之部分，且其中該hdr至hdr色調映射程式曲線之該應用包含應用來自先前視訊圖框之資訊來達成時間穩定性。該方法或裝置經組態使得來自先前視訊圖框之該資訊使用基於該臨限值之洩漏積分來應用。
該方法或裝置進一步包括：傳訊表示該hdr至hdr色調映射程式曲線之資訊。該方法或裝置經組態使得傳訊使用包含於一圖像參數集(PPS)、一序列參數集(SPS)、一補充增強資訊(SEI)訊息、一視訊使用性資訊(VUI)、消費性電子產品協會(CEA)訊息及一標頭之至少一者中之至少一語法元素來執行。該方法或裝置經組態使得該hdr至hdr色調映射程式曲線之參數依據該臨限值來調變，且使得該等參數依據選自線性及非線性之一群組之至少一者來調變。
本發明之一態樣係針對一種用於色調映射一高動態範圍影像之方法及裝置，該方法包括：獲得該高動態範圍影像之一亮度分量；判定一hdr至hdr色調映射程式曲線；藉由將該hdr至hdr色調映射程式曲線應用於該高動態範圍影像之該亮度分量來判定一色調壓縮影像；其中該hdr至hdr色調映射程式曲線係多段的；及其中該多段曲線包含至少一非線性段及至少一線性段。該方法及裝置經進一步組態使得該線 性段係針對選自暗色、中間色調及高亮區之一群組之至少一者，且使得該非線性段係針對選自暗色、中間色調及高亮區之一群組之至少一者。
100‧‧‧方法
101‧‧‧區塊
102‧‧‧區塊
103‧‧‧區塊
200‧‧‧方法
201‧‧‧區塊
202‧‧‧區塊
203‧‧‧區塊
204‧‧‧區塊
205‧‧‧區塊
206‧‧‧區塊
207‧‧‧區塊
208‧‧‧區塊
209‧‧‧區塊
300‧‧‧方法
301‧‧‧區塊
302‧‧‧區塊
303‧‧‧區塊
304‧‧‧區塊
305‧‧‧區塊
400‧‧‧方法
401‧‧‧區塊
402‧‧‧區塊
403‧‧‧區塊
404‧‧‧區塊
405‧‧‧區塊
406‧‧‧區塊
407‧‧‧區塊
500‧‧‧器件
501‧‧‧資料及位址匯流排
502‧‧‧微處理器/CPU
503‧‧‧唯讀記憶體(ROM)
504‧‧‧隨機存取記憶體(RAM)
505‧‧‧I/O介面
506‧‧‧電池
601‧‧‧線
701‧‧‧線
可自結合下文所描述之圖式之以下詳細描述明白本發明之特徵及優點：圖1係描繪根據本發明之編碼一圖像之一例示性方法的一圖式。
圖2係描繪根據本發明之編碼一圖像及參數之一例示性方法的一圖式。
圖3係描繪用於判定及編碼色調映射程式之參數之一例示性方法的一圖式。
圖4係描繪根據本發明之用於解碼一圖像或視訊之一例示性方法的一圖式。
圖5係描繪根據本發明之一例示性裝置的一圖式。
圖6係描繪根據本發明之一例示性作圖的一圖式。
圖7係描繪根據本發明之一例示性作圖的一圖式。
圖8係描繪根據本發明之一例示性作圖的一圖式。
本發明係針對用於HDR至HDR色調映射之方法、裝置及系統。
本發明之一態樣解決動態範圍之HDR內容在轉換成一目標顯示時之品質下降問題。本發明之一態樣係關於再現HDR感覺，不管適合於目標顯示範圍之壓縮如何。
本發明之一態樣係關於用於使HDR內容維持類似於原始資料且壓縮僅用於非常高範圍之資訊之內容的方法、裝置及系統。此允許具有觀看HDR內容之感覺，但在較低動態範圍顯示器上。該態樣亦能夠維持一導演之意圖。例如，將以良好品質使一4000尼特參考顯示器上 之分級內容再現顯示於一1000尼特或1500尼特消費性顯示器上。
可在各種應用中利用根據本發明之色調映射運算子。例如，可在一後期製作室中利用色調映射運算子來促使再分級程序產生具有一較低峰值亮度之二次分級。替代地，在消費方面，一HDR至HDR色調映射運算子可併入至一HDR消費性顯示器中或可整合至一視訊轉換盒中。
本發明之一態樣係關於線性改變暗色位準及中間色調位準(或可能不改變)，使得攝影師之意圖被保持儘可能不變。所提出之色調映射程式作用於亮度通道上，且接著校正色度資訊。
本發明之一態樣係關於判定亮度通道之一臨限值τ。接著，針對低於該臨限值之值線性改變亮度通道之輸入且針對高於該臨限值之值非線性改變亮度通道之輸入。值之此線性變化依在大多數情況下被設定為s=1之一比例因數s之形式達成，因此使輸入在亮度值之對應範圍內保持不變。
本發明之一態樣係關於使用一色調映射程式之一變動(例如攝影運算子)來壓縮非常高之亮度值(大於臨限值τ之值)。總HDR-2-HDR色調映射程式經設計以具有一連續曲線，該曲線具有圍繞臨限值τ之平滑分佈過渡。
本發明之一態樣係關於自輸入RBG值判定亮度通道資訊之一初步色彩變換。本發明之一態樣係進一步關於藉由對色調映射曲線引入條件來判定一色調映射程式之設計。本發明之一態樣係關於自本身內容判定臨限值τ。
初步色彩變換
本發明之一態樣係關於基於所接收之內容之一變換來判定各像素之亮度資訊。在一實例中，所接收之內容可位於一標準RGB色彩空間中。在一實例中，若在sRGB色彩空間中給出內容，則由以下方程 式給出像素I之一亮度值之計算：方程式1：I i =0.2126×R i +0.7152×G i +0.0722×B i
可依一類似方式自其他RGB色彩空間導出亮度值，但方程式1中之常數將不同。此取決於各個別RGB色彩空間之界定。實例性RGB色彩空間係ISO RGB空間、擴展ISO RGB空間、scRGB空間、Adobe RGB 98空間、Adobe Wide Gamut RGB空間、Apple RGB空間、ROMM RGB空間、ProPhoto RGB空間、CIE(1931)RGB空間以及在標準ITU-R Rec.BT 709、ITU-R Rec.BT 2020、ITU-R Rec.BT 470、SMPTE RP 145及SMPTE 170M中界定之RGB空間。
替代地，可代以利用任何適當色彩空間(諸如Yuv、Yu'v'、YCbCr、YPbPr、Y'DbDr、Y'CC、CIE Yxy、CIE Lab、CIE Luv、CIE LCh、IPT、Y'I'Q'、EBU Y'U'V')之亮度通道。在此情況中，將影像變換成此一色彩空間，將處理施加於亮度通道，此後，另一色彩空間變換可將影像轉換成一目標色彩空間(其在一實例中可為一RGB色彩空間)。
色調映射程式變動
本發明之一態樣係關於一色調映射演算法之一變動，該色調映射演算法基於判定亮度值大於(或不小於)一固定臨限值來壓縮亮度值。在一實例中，可使用一GUI中之一游標來判定該臨限值或可自動估計該臨限值。
在一實例中，一C1色調映射函數經設計用於全範圍之輸入亮度。如本文所使用，一「C1」函數經界定為其一階導數在導函數域之輸入之整個開區間中係確定且連續之一函數。換言之，平滑準則在I=0及I=I max 處係不確定的。
在一實例中，輸入內容之最大亮度值係I max 且藉由輸出顯示器之最大可生產亮度值係。在一實例中，此等變數之值係I max =4000 尼特且=1500尼特。
在一實例中，所要輸入色調映射程式函數係。在一實例中， 將所要色調映射程式函數設定為攝影運算子。
本發明之一態樣係針對一色調映射程式，其使小於τ之輸入值按比例調整s倍(通常s=1)且根據函數之一變動來非線性壓縮大於τ之值。在一實例中，色調映射程式經界定如下：
需要將三個參數a、c、d設定成滿足以下三個條件以獲得一C1色調映射程式：
i.最大輸入I max 應映射至最大輸出，因此
ii.在I=τ處，色調映射程式需要為連續的，因此
iii.另外，在I=τ處，色調映射程式之梯度需要為連續的，因此，
解算此體系之三個方程式來得出三個未知數a、c、d導致以下方程式：
方程式7：c=s τ d
圖6繪示I對之一作圖。在τ=1200，s=1，I max =4000，=1500時判定圖6之作圖曲線。在圖6中，臨限值τ由線601標記。此作圖展示色調映射程式之總行為，即，在暗色位準及中間色調位準 中係線性的且在高亮區中係壓縮非線性的。吾人可易於驗證：曲線其實係一C1函數。如本文所使用，一「C1」函數經界定為其一階導數在導函數域之輸入之整個開區間中係確定且連續之一函數。
圖7繪示log(I)對之一作圖。在圖7中，臨限值τ由線701標記。此曲線展示對數空間中之色調映射程式且僅用於與大多在對數空間中執行之最新色調映射程式比較。
圖6及圖7中所展示之作圖繪示色調映射程式之行為，即，在暗色位準及中間色調位準中係線性的且在高亮區中係壓縮非線性的。
在另一實例中，可透過一查找表使用即時色調映射之取樣輸入值及輸出值來實施上文結合方程式2所描述之方法。
低亮度值之處理
方程式2至8中所描述之方法使用針對一影像之暗色部分及中間色調之一線性段來描述一色調映射方法。使用一非線性函數來壓縮最亮部分(例如高亮區)。一交越點判定通過函數之線性部分之輸入之最大值及通過函數之非線性部分之輸入之最小值。
根據本發明，可有利地引入一第二交越點以使影像之最暗部分(黑色區)與影像之剩餘部分分離。接著，亦可依一非線性方式處理黑色區以(例如)解釋其中目標顯示器件之黑色位準高於或低於內容之黑色位準(或類似地，用以產生內容之分級監視器之黑色位準)的使用情況。
色調映射曲線參數之處理
方程式2至8中所描述之方法使用針對一影像之暗色部分及中間色調之一線性段來描述一色調映射方法。使用由一參數函數描述之一非線性函數來壓縮最亮部分(例如高亮區)。一交越點判定通過函數之線性部分之輸入之最大值及通過函數之非線性部分之輸入之最小值。
根據本發明，可根據交越點來有利地調變曲線參數。此調變可 為線性的或非線性的。在一實例中，此調變使方程式2之參數收斂於界定值。在一實例中，當交越點收斂於0時，期望a及d收斂於1且c收斂於0。在此情況中，當交越點收斂於0時，收斂於。
設定臨限值τ
影像內容
在一實例中，基於臨限值τ來判定使輸入HDR內容在輸出中僅被線性改變之輸入I i 之最大值。最佳地，臨限值足夠大以涵蓋大於(100-n)%之內容之像素(在一實例中，n=2)及小於100η%之(在一實例中，η=峰值輸出亮度之0.8)以防止框除非常高之輸入亮度值。在一實例中，對於大多數自然場景，非常高之亮度值促成一組稀疏像素(高動態範圍場景直方圖趨向於展示一高度峰態分佈)。對於此內容，臨限值之以下選擇趨向於使小於n%之像素(在一實例中，n=2)被壓縮至之範圍內：
其中一實例之η=0.8。
對於=1500尼特之實例，可將臨限值τ初始化為1200。已用實驗展示η及n之此選擇以導致主觀偏好之輸出影像。
在一實例中，將一內容相依臨限值τ判定為最小亮度值。最小亮度值係基於判定小於n%之像素具有較高亮值。換言之，目標係找到使小於n%之總像素數目位於其右手邊之直方圖上之最小亮度值。
在一實例中，將臨限值n(其對應於將被非線性壓縮之像素之百分比)設定為2%。臨限值n允許判定被改變之像素之數目。然而，在其他實例中，臨限值n之值可被設定為一更高或更低百分比及/或臨限值n之值可取決於內容或應用(例如顯示器件或內容擷取器件)。
在一第一實例中，使用內容之累積直方圖來估計相容相依臨限值τ(即，色調映射曲線之拐點)。輸入亮度I之頻率由h I 表示。可藉由 使用任何選定數目個頻段來計算輸入亮度影像之直方圖來判定值h I 。值I之累積直方圖由c I 表示且可透過以下方程式來找到：
在一實例中，可在以下條件下將最終臨限值設定成等於初始臨限值τf=τ：
此條件將其中存在落於τ與I max 之間的小於n%之像素的情況公式化。此允許僅線性改變大於(100-n)%之像素。若不滿足方程式10中之條件，則斷點(即，色調映射曲線之拐點)經推回以增大壓縮輸入之範圍。
在一實例中，將ρ之值表示如下： 基於方程式11之判定，估計τ之新值之一實例展示如下且由線性減小之τf組成：
其中α表示可在不會引入假影之情況下於動態範圍之僅一小部分中藉由色調映射程式來非線性壓縮之像素之最大百分比。圖8中展示此一曲線之一實例，其中α=12.5。
因此，對於α之任何選擇，若ρ>α，則將最終臨限值τf之值設定為0(可對一影像階層、區塊階層等等執行此判定)。最終臨限值τf之值係有益的，此係因為：若選擇大於0之任何臨限值，則達到大於α%之像素。
本文進一步討論用於判定臨限值τ之值之一第二實例。在一實例 中，需要估計及-c τ 之值。在一實例中，等於影像中之像素之數目。在一實例中，-c τ 指示具有高於臨限值τ之強度之像素之數目。藉由計數高於τ之像素強度之數目來獲得-c τ (及因此ρ)之一快速估計。接著，使用方程式12來獲得最終臨限值τf之相同估計。
在上述第一實例及第二實例兩者中，所估計之最終臨限值τf係內容相依的且小於初始臨限值τ。所估計之最終臨限值τf防止將過多像素壓縮至[τ..]之一小範圍內，且導致一較佳視覺體驗。
視訊內容之臨限值τ之洩漏積分
對於視訊內容，連續圖框之所估計之臨限值可不同。不期望連續視訊圖框之強度顯著變動(「閃爍」)。
本發明之一態樣藉由提供視訊圖框之所估計之最終臨限值τf之一校正來解決閃爍問題。
在一實例中，可應用洩漏積分來獲得一圖框t之參數。使用(根據方程式12來計算)及前一圖框之所估計之洩漏參數(即，)來估計參數。此估計之一實例如下：
方程式13之迭代性隱含：每個下一新圖框需考量先前估計之全部歷史資料。使用者參數β [0 1]控制圖框之間的τnew之平滑度。
色彩重建
在一實例中，根據方程式1自RGB像素值導出亮度值。利用一簡單逐像素方法來重建一色調映射彩色影像。該逐像素方法根據亮度通道之比例變化來按比例調整RGB值如下：
亦可藉由控制飽和量之參數se來參數化一彩色影像之重建如下：
元資料
在一實例中，可將色調映射運算子併入至諸如一視訊轉換盒、一電視、一監視器、一膝上型電腦、一電話、一平板電腦、一智慧型電話顯示器等等之一消費性電子器件中。在此情況中，可對色調映射演算法供應元資料以判定其輸出之視覺外觀。
●目標顯示器之峰值亮度可由電視/監視器本身供應。在使用一視訊轉換盒之情況中，可由一連接顯示器件(例如)透過一HDMI訊息來傳訊此值(參閱方程式3、6、7、8、12)。
●可將內容之峰值亮度I max 編碼為與內容並存之元資料。可將內容之峰值亮度I max 提供為每圖框、每鏡頭或每節目(電視劇集、電影、廣告等等)之一單一值。在一替代實例中，可將I max 之值解譯為所使用之顯示器件(例如，在一後製工房中)之峰值亮度或用於一廣播情境中之一現場攝影機之峰值亮度(參閱方程式3、6、7、8、12)。
●可將用以計算臨限值τ之參數η與內容一起作為元資料發送。在一替代實例中，可代以發送判定色調映射曲線之線性部分與非線性部分之間的交越之臨限值τ(參閱方程式8-b)。
●另外，可供應判定待經受非線性壓縮之像素之百分比的參數n作為元資料(參閱方程式10、12)。
●亦可供應參數α作為元資料(參閱方程式12)。
●亦可將用於視訊內容之臨限值之洩漏積分中之參數β包含於元資料中(參閱方程式13)。
可藉由給予內容之生產者(例如攝影導演、配色師、工作室)對參數η(或τ)、n、α及β之各者之控制來使導演之意圖有利地較佳再現於各種顯示器上。
實驗結果
在HDR影像上測試根據本發明之演算法(其包含方程式1至14)。若I max =4000尼特，則對HDR影像分級。將目標設定為1500尼特且將斜率s設定為1。在sim2顯示器上觀看且主觀地驗證結果。對於此文件中之視覺化，按比例線性調整影像且應用1/2.2之伽瑪校正。
實驗結果表明：色調映射程式將全範圍壓縮成較低動態範圍以因此在低亮度區域及高亮度區域兩者中喪失HDR感覺，而本發明之色調映射程式使大多數像素保持不變且僅將非常高之強度壓縮成較低範圍。
本發明提供若干優點。當一高動態範圍圖框通過軟體時，所有像素之一相當大部分保持完全不變(通常全部為黑色及中間色調)，且僅壓縮最高值。相比而言，按比例線性調整將使所有像素值改變相同量，同時所有其他已知色調映射運算子至多使一小百分比之像素保持原樣(通常透過界定一拐點函數，該拐點函數專門運算一圖框中之最暗值(「黑色」))。
本發明之一優點係：嚴格限制範圍減小量。所欲輸出器件將擁有一高峰值亮度，但該高峰值亮度低於所接收之內容。此意謂：亮度範圍之一比較平緩減小已滿足要求。因而，可設計具全局性且事實上使諸多像素值保持不變之一色調映射運算子。僅將小量壓縮施加於最亮像素。此方法之優點如下：
●非常低之運算複雜性
●如所欲般再現大多數像素
●非常少數目個像素遭受值之某一減小，使得對比度損失(及藉此視覺品質之損失)被最小化。
可在下文所描述之圖內實施上文所描述之實例。
圖1係描繪根據本發明之用於編碼影像或視訊內容之一例示性方法100的一圖式。
方法100可包含：接收及編碼一圖像。可使用任何編碼技術(例如HEVC、AVC)來將該圖像編碼成一位元串流。可依任何類型之工作流程(諸如基於DVB或ATSC標準之分散式工作流程、生產或編輯工作流程、數位視訊攝錄影機)執行方法100。
在一實例中，方法100包含：在區塊101中接收一圖像。圖像可為(例如)用於HDR視訊之視訊影像或圖像。區塊101可接收關於圖像之性質之資訊(其包含線性光RGB資訊)。可使用三色攝影機來將圖像擷取成由三個分量(紅色、綠色及藍色)組成之RGB色彩值。RGB色彩值取決於感測器之三色特性(色彩原色)。圖像可包含影像側資訊，諸如感測器之色彩原色、所擷取之場景之最大亮度峰值及最小亮度峰值。接著，區塊101可將控制傳至區塊102，區塊102包含提供關於所接收之圖像之任何資訊。
區塊102可將一HDR2HDR色調映射程式應用於自區塊101接收之內容。可根據本發明來判定HDR2HDR色調映射程式。HDR2HDR色調映射程式將內容之動態範圍轉換成適合於顯示器之動態範圍。
根據結合本發明所描述之原理來應用HDR2HDR色調映射程式。本發明之使用情況提供使亮度值之範圍大幅減小之優點。根據本發明來應用HDR2HDR色調映射程式導致有限量之範圍減小。所欲輸出器件將擁有一高峰值亮度，但該高峰值亮度低於所接收之內容。此意 謂：亮度範圍之一比較平緩減小將滿足要求。因而，可設計具全局性且事實上使諸多像素值保持不變之一色調映射運算子。僅將小量壓縮施加於最亮像素。此方法之優點如下：
●非常低之運算複雜性
●如所欲般再現大多數像素
●非常少數目個像素遭受值之某一減小，使得對比度損失(及藉此視覺品質之損失)被最小化。
HDR2HDR色調映射程式包含以下之一或多者：1.其含有用於暗色位準及中間色調位準之一線性部分及用於高亮區之一非線性壓縮部分，諸如(例如)方程式2中所概述之資訊；2.迫使準則獲得一C1函數之色調映射曲線之設計：如本文所使用，一「C1」函數經界定為其一階導數在導函數域之輸入之整個開區間中係確定且連續之一函數(參閱(例如)方程式3至8)；3.拐點之基於內容之估計(參閱(例如)方程式9至13)：例如，根據本發明來設計包含具有一小壓縮範圍之一線性曲線之HDR2HDR色調映射程式，曲線之設計匹配平滑準則，且一曲線臨限值之估計基於內容。
區塊103可編碼區塊102之輸出。區塊103可根據任何既有編碼/解碼標準來編碼輸出。例如，區塊103可根據由國際電信聯盟(ITU)組織之高效率視訊編碼(HEVC)標準及動畫專家組(MPEG)組織來編碼。替代地，區塊103可根據由國際標準組織/國際電工技術委員會(ISO/IEC)動畫專家組-4(MPEG-4)組織之H.264或MPEG-4 Part 10、先進視訊編碼(MPEG-4 AVC)來編碼。替代地，區塊103可使用任何其他已知編碼技術來編碼。
圖2係描繪用於編碼一圖像及參數之一例示性方法200的一圖式。方法200包含用於接收內容相依臨限值之參數之一區塊201。所接 收之參數可為目標顯示器之峰值亮度(參閱(例如)方程式3、6、7、8、12)、內容之峰值亮度I max (參閱(例如)方程式3、6、7、8、12)、用以計算臨限值τ之參數η(參閱(例如)方程式8-b)、判定待經受非線性壓縮之像素之百分比的參數n(參閱(例如)方程式10、12)、判定可由色調映射程式壓縮於動態範圍之僅一小部分中之像素之最大百分比的參數α(參閱(例如)方程式12)及用於視訊內容之臨限值之洩漏積分中之參數β(參閱(例如)方程式13)。區塊201中所接收之參數用於根據結合方程式8-b及方程式9至13所描述之原理來估計內容相依臨限值。
區塊202可判定色調映射曲線參數。區塊202可判定參數a、c、d。可基於迫使色調映射曲線成為根據方程式3至8之一C1函數(即，其一階導數在導函數域之輸入之整個開區間中係確定且連續之一函數)之準則來判定色調映射曲線參數。區塊208可編碼由區塊202判定之參數。
區塊203可接收一圖像。在一實例中，區塊203可根據結合圖1之區塊101所概述之原理來接收一圖像。
區塊204可獲得所接收之圖像之亮度通道資訊。在一實例中，區塊204可應用一初步色彩變換以獲得所接收之圖像之亮度通道資訊。在一實例中，區塊204可應用一初步色彩變換以獲得亮度通道資訊。在一實例中，區塊204可根據結合方程式1所描述之原理來判定亮度通道資訊。在另一實例中，區塊204可供選用且可直接自區塊203接收亮度資訊。
區塊205可應用HDR2HDR色調映射程式。在一實例中，區塊205可根據結合圖1之區塊102所描述之原理來應用HDR2HDR色調映射程式。在一實例中，區塊205可應用HDR2HDR色調映射程式來取得一輸出Io。
區塊206可對區塊205之輸出執行色彩校正。例如，區塊206可藉由根據方程式14-a至15-c來按比例調整根據亮度通道之比例變化之RGB值而執行色彩校正。區塊206可輸出一經色彩校正之輸出。
區塊207可編碼區塊206之輸出。
區塊209可將由區塊208編碼之參數及由區塊207編碼之輸出輸出成輸出串流。
圖3係描繪用於判定及編碼色調映射程式之參數之一例示性方法300的一圖式。方法300可編碼拐點τf之參數(其可根據結合方程式12所描述之原理來判定)及曲線參數a、c、d(其可根據結合方程式6至8所描述之原理來判定)。
區塊301可接收可為一視訊之一影像或一圖框的一圖像。
區塊302可執行一初步色彩變換以獲得亮度通道資訊。在一實例中，區塊302可根據結合方程式1所描述之原理來執行一初步色彩變換。替代地，區塊302可供選用且可自區塊301接收亮度通道資訊。
區塊303可判定色調映射程式演算法之臨限值。在一實例中，區塊303可判定界定色調映射曲線之拐點的臨限值(其可根據結合方程式2至8所描述之原理來判定)。區塊303可判定其輸入HDR內容僅在輸出中線性改變之輸入亮度之最大值。將一內容相依臨限值估計為最小亮度值，其相較於小於一先驗固定百分比之像素具有較高亮度值。提供兩種方法作為估計此內容相依臨限值之實例，如上文結合章節「設定臨限值τ」所描述。在一實例中，區塊303可基於內容之累積直方圖來判定臨限值。將累積直方圖表示為值I×c I 以驗證以下條件： ，其中n表示允許由色調映射曲線之非線性部分壓縮之像素之百分比。若滿足此條件，則將目標顯示器之最大亮度之80%之初始值視為拐點。若不滿足此條件，則使用方程式12來獲得臨限 值。透過方程式9至12來使此實例形式化。在另一實例中，由目標顯示器之最大亮度之80%之初始值定限輸入亮度影像，且計數具有大於臨限值之值的像素之數目以及像素之總數目。接著，使用方程式11至12來估計色調映射曲線之最終拐點。
區塊304可估計一C1色調映射運算子(「TMO」)函數之參數。特定言之，色調映射程式需要為連續的，其導數需要為連續的，且最大輸出需要映射至輸出顯示之最大亮度。在方程式3至5中使此等準則形式化且因此在方程式6至8中獲得曲線之所估計之參數。區塊304之輸出係臨限值τf及曲線參數a、c、d。
圖4係描繪根據本發明之用於解碼一圖像或視訊之一例示性方法400的一圖式。
區塊401可接收對應於一視訊或影像序列之一位元串流。已編碼所接收之位元串流(例如，使用AVC、HEVC等等編碼)。接著，區塊401可將控制傳至區塊402。
區塊402可剖析及解碼自區塊401接收之位元串流。在一實例中，區塊402可使用基於HEVC之解碼來剖析及解碼位元串流。接著，區塊402可將控制傳至區塊403。
區塊403可獲得亮度通道資訊。在一實例中，區塊403可供選用。在一實例中，區塊403可根據結合方程式1所描述之原理來獲得亮度通道資訊。接著，區塊403可將控制傳至區塊404及405。
區塊404可根據本發明來判定HDR2HDR色調映射程式之參數。參數可為在此根據本發明所討論之任何參數。在一實例中，基於含於位元串流中之語法(例如一SEI訊息)來判定參數。參數可為臨限值τf及曲線參數a、c、d。可透過位元串流來傳輸此等參數，或亦可在解碼器處判定此等參數。在一實例中，自亮度資訊之直方圖估計此等參數。
區塊405可處理一視訊信號。在一實例中，區塊405可處理一經解碼之Y'CbCr視訊信號。在一實例中，區塊405可將一Y'CbCr視訊信號轉換成一R'G'B'視訊信號。在另一實例中，區塊405可處理一R'G'B'視訊信號。
區塊406可執行曲線之時間濾波。對於視訊內容，連續圖框之所估計之臨限值可不同。鑑於視訊內容不期望閃爍(即，連續圖框之強度之顯著變動)之事實，提出對視訊之每個新圖框之所估計之τf值進行一校正。
特定言之，可將稱為洩漏積分之一標準技術應用於圖框t之參數(其使用如先前章節中所展示般計算之來估計)及前一圖框之所估計之洩漏參數，即，。在一實例中，此可根據結合方程式13所描述之原理來執行。區塊406之輸入係來自區塊403之亮度通道資訊及前一圖框之最終臨限值。區塊406中之曲線對應於色調映射曲線。區塊406係選用的，但強烈建議其消除輸出視訊中之可能閃爍源。區塊406之輸出係使用結合方程式6至8及13所描述之原理之色調映射曲線之臨限值及更新參數之洩漏估計。
區塊407可將HDR2HDR色調映射程式應用於視訊信號。使用對應估計參數來逐圖框執行區塊407。在一實例中，區塊407可根據結合區塊102及205所描述之原理來應用HDR2HDR色調映射程式。在一實例中，區塊407可產生具有列表值之一查找表(LUT)(例如，基於方程式12至13)且接著將LUT應用於待映射/解映射之內容上。
圖5表示一器件500之一例示性架構，其可經組態以實施相對於圖1至圖4及方程式1至13所描述之方法。在一實例中，圖5表示可經組態以實施根據本發明之編碼方法(其包含相對於圖1至圖4所描述之原理)之一裝置。在一實例中，圖5表示可經組態以實施根據本發明之解碼方法(其包含相對於圖4所描述之原理)之一裝置。
器件500包括由一資料及位址匯流排501鏈接在一起之以下元件：-一微處理器502(或CPU)，其係(例如)一DSP(或數位信號處理器)；-一ROM(或唯讀記憶體)503；-一RAM(或隨機存取記憶體)504；-一I/O介面505，其用於自一應用程式接收待傳輸之資料；及-一電池506(或其他適合電源)。
根據一變體，電池506位於器件之外部。在所提及之記憶體之各者中，本說明書中所使用之用語「暫存器」可對應於小容量(若干位元)之區域或對應於非常大區域(例如整個程式或大量所接收或經解碼之資料)。ROM 503包括至少一程式及參數。將根據本發明之方法之演算法儲存於ROM 503中。當開啟CPU 502時，CPU 502上傳RAM中之程式且執行對應指令。
RAM 504包括一暫存器中之由CPU 502執行且在開啟器件500之後上傳之程式、一暫存器中之輸入資料、一暫存器中之方法之不同狀態中之中間資料、及一暫存器中之用於執行方法之其他變數。
可在(例如)一方法或一程序、一裝置、一軟體程式、一資料串流或一信號中實施本文所描述之實施方案。即使僅在實施方案之一單一形式之背景下討論特徵之實施方案(例如，僅討論為一方法或一器件)，但亦可依其他形式(例如一程式)實施所討論之特徵之實施方案。可在(例如)適當硬體、軟體及韌體中實施一裝置。可在(例如)一裝置(諸如(例如)一處理器，其一般係指包含(例如)一電腦、一微處理器、一積體電路或一可程式化邏輯器件之處理器件)中實施方法。處理器亦包含通信器件，諸如(例如)電腦、蜂巢式電話、可攜式/個人數位助理(「PDA」)及促進終端使用者之間的資訊通信之其他器件。
根據編碼或編碼器之一特定實例，自一來源獲得影像或圖像I。例如，該來源屬於包括以下各者之一集合：-一局部記憶體(503或504)，例如一視訊記憶體或一RAM(或隨機存取記憶體)、一快閃記憶體、一ROM(或唯讀記憶體)、一硬碟；-一儲存介面(505)，例如具有一大容量儲存器、一RAM、一快閃記憶體、一ROM、一光碟或一磁性承載體之一介面；-一通信介面(505)，例如一有線介面(例如一匯流排介面、一廣域網路介面、一區域網路介面)或一無線介面(諸如一IEEE 802.11介面或一Bluetooth®介面)；及-一影像擷取電路(例如一感測器，諸如(例如)一CCD(或電荷耦合器件)或CMOS(或互補金屬氧化物半導體))。
根據解碼或解碼器之不同實施例，將經解碼之影像發送至一目的地；具體而言，目的地屬於包括以下各者之一集合：-一局部記憶體(503或504)，例如一視訊記憶體或一RAM、一快閃記憶體、一硬碟；-一儲存介面(505)，例如具有一大容量儲存器、一RAM、一快閃記憶體、一ROM、一光碟或一磁性承載體之一介面；-一通信介面(505)，例如一有線介面(例如一匯流排介面(例如USB(或通用串列匯流排))、一廣域網路介面、一區域網路介面、一HDMI(高清晰度多媒體介面)介面)或一無線介面(諸如一IEEE 802.11介面、Wi-Fi®或一Bluetooth®介面)；及-一顯示器。
根據編碼或編碼器之不同實例，將位元串流BF及/或F發送至一目的地。作為一實例，將位元串流F及BF之一者或位元串流F及BF兩者儲存於一局部或遠端記憶體(例如一視訊記憶體(504)或一RAM(504)、一硬碟(503))中。在一變體中，將一或兩個位元串流發送至一 儲存介面(505)(例如具有一大容量儲存器、一快閃記憶體、ROM、一光碟或一磁性承載體之一介面)及/或通過一通信介面(505)(例如至一點對點鏈路、一通信匯流排、一單點對多點鏈路或一廣播網路之一介面)來傳輸一或兩個位元串流。
根據解碼或解碼器之不同實例，自一來源獲得位元串流BF及/或F。例示性地，自一局部記憶體(例如一視訊記憶體(504)、一RAM(504)、一ROM(503)、一快閃記憶體(503)或一硬碟(503))讀取位元串流。在一變體中，自一儲存介面(505)(例如具有一大容量儲存器、一RAM、一ROM、一快閃記憶體、一光碟或一磁性承載體之一介面)接收位元串流及/或自一通信介面(505)(例如至一點對點鏈路、一匯流排、一單點對多點鏈路或一廣播網路之一介面)接收位元串流。
根據不同實例，經組態以實施根據本發明之一編碼方法之器件500屬於包括以下各者之一集合：-一行動器件；-一通信器件；-一遊戲器件；-一平板(或平板電腦)；-一膝上型電腦；-一靜態影像攝影機；-一視訊攝影機；-一編碼晶片；-一靜態影像伺服器；及-一視訊伺服器(例如一廣播伺服器、一隨選視訊伺服器或一網頁伺服器)。
根據不同實例，經組態以實施根據本發明之一解碼方法之器件500屬於包括以下各者之一集合： -一行動器件；-一通信器件；-一遊戲器件；-一視訊轉換盒；-一電視機；-一平板(或平板電腦)；-一膝上型電腦；-一顯示器；及-一解碼晶片。
本文所描述之各種程序及特徵之實施方案可體現於各種不同設備或應用中。此設備之實例包含一編碼器、一解碼器、處理來自一解碼器之輸出之一後置處理器、將輸入提供至一編碼器之一前置處理器、一視訊編碼器、一視訊解碼器、一視訊編解碼器、一網頁伺服器、一視訊轉換盒、一膝上型電腦、一個人電腦、一蜂巢式電話、一PDA及其他通信器件。應明白，設備可為行動的且甚至安裝於一行動載具中。
另外，可由一處理器執行之指令實施方法，且可將此等指令(及/或由一實施方案產生之資料值)儲存於一處理器可讀媒體(諸如(例如)一積體電路、一軟體載體或其他儲存器件，諸如(例如)一硬碟、一緊密磁碟片(「CD」)、一光碟(諸如(例如)一DVD，通常指稱一數位多功能光碟或一數位視訊光碟)、一隨機存取記憶體(「RAM」)或一唯讀記憶體(「ROM」))上。指令可形成有形地體現於一處理器可讀媒體上之一應用程式。指令可位於(例如)硬體、韌體、軟體或一組合中。指令可見於(例如)一作業系統、一單獨應用程式或兩者之一組合中。因此，可將一處理器特徵化為(例如)經組態以實施一程序之一器件及包含一處理器可讀媒體(諸如一儲存器件)(其具有用於實施一程序 之指令)之一器件兩者。此外，一處理器可讀媒體除儲存指令以外，亦可儲存由一實施方案產生之資料值，或可儲存由一實施方案產生之資料值來代替指令。
如熟習技術者將明白，實施方案可產生經格式化以運載可(例如)被儲存或被傳輸之資訊之各種信號。資訊可包含(例如)用於執行一方法之指令或由所描述之實施方案之一者產生之資料。例如，一信號可經格式化以運載用於寫入或讀取一所描述之實例之語法之規則作為資料或運載由一所描述之實例寫入之實際語法值作為資料。此一信號可經格式化為(例如)一電磁波(例如，使用光譜之一射頻部分)或一基頻信號。格式化可包含(例如)編碼一資料串流且使用編碼資料串流來調變一載波。信號運載之資訊可為(例如)類比或數位資訊。可通過吾人所知之各種不同有線或無線鏈路來傳輸信號。可將信號儲存於一處理器可讀媒體上。
本文已描述若干實施方案。然而，應瞭解，可作出各種修改。例如，不同實施方案之元素可經組合、經補充、經修改或經移除以產生其他實施方案。另外，一般技術者應瞭解，其他結構及程序可替代所揭示之結構及程序且所得實施方案將依(若干)至少實質上相同方式執行(若干)至少實質上相同功能以達成至少實質上相同於所揭示之實施方案之(若干)結果。相應地，本申請案可設想此等及其他實施方案。
本文已闡述諸多具體細節來提供本發明之一完全理解。然而，熟習技術者應瞭解，可在無需此等特定細節之情況下實踐上述實例。在其他例項中，未詳細描述熟知操作、組件及電路以不使本發明不清楚。應瞭解，本文所揭示之具體結構及功能細節可具代表性且未必限制本發明之範疇。
可使用硬體元件、軟體元件或硬體元件及軟體元件兩者之一組 合來實施本發明之各種實例。例如，可使用可儲存一指令或一組指令之一電腦可讀媒體或物件來實施一些實例，該指令或該組指令可在由一機器執行時致使該機器根據該等實例來執行一方法及/或操作。此一機器可包含(例如)任何適合處理平台、運算平台、運算器件、處理器件、運算系統、處理系統、電腦、處理器或其類似者，且可使用硬體及/或軟體之任何適合組合來實施。該電腦可讀媒體或物件可包含(例如)任何適合類型之記憶體單元、記憶體器件、記憶體物件、記憶體媒體、儲存器件、儲存物件、儲存媒體及/或儲存單元。該等指令可包含使用任何適合高階、低階、物件導向、視覺、編譯及/或解譯程式設計語言來實施之任何適合類型之程式碼，諸如原始碼、編譯碼、解譯碼、可執行碼、靜態碼、動態碼、加密碼及其類似者。
可在(例如)一方法或一程序、一裝置、一軟體程式、一資料串流或一信號中實施本文所描述之實施方案。即使僅在實施方案之一單一形式之背景下討論特徵之實施方案(例如，僅討論為一方法)，但亦可依其他形式(例如一裝置或程式)實施所討論之特徵之實施方案。可在(例如)適當硬體、軟體及韌體中實施一裝置及包含於其內之組成元件(例如一處理器、一編碼器及一解碼器)。可在(例如)一裝置(諸如(例如)一處理器，其一般係指包含(例如)一電腦、一微處理器、一積體電路或一可程式化邏輯器件之處理器件)中實施方法。處理器亦包含通信器件，諸如(例如)電腦、蜂巢式電話、可攜式/個人數位助理(「PDA」)及促進終端使用者之間的資訊通信之其他器件。
另外，本申請案或其申請專利範圍可涉及「判定」各種資訊片段。判定資訊可包含(例如)以下之一或多者：估計資訊、計算資訊、預測資訊或自記憶體檢索資訊。
此外，本申請案或其申請專利範圍可涉及「存取」各種資訊片段。存取資訊可包含(例如)以下之一或多者：接收資訊、檢索資訊(例 如，來自記憶體)、儲存資訊、處理資訊、傳輸資訊、移動資訊、複製資訊、擦除資訊、計算資訊、判定資訊、預測資訊或估計資訊。
另外，本申請案或其申請專利範圍可涉及「接收」各種資訊片段。如同「存取」，接收意欲為一廣義術語。接收資訊可包含(例如)以下之一或多者：存取資訊或檢索資訊(例如，來自記憶體)。此外，通常在諸如(例如)以下各者之操作期間依一方式或另一方式涉及「接收」：儲存資訊、處理資訊、傳輸資訊、移動資訊、複製資訊、擦除資訊、計算資訊、判定資訊、預測資訊或估計資訊。
根據不同實施例，在根據本發明來編碼或解碼之圖像中或在包含圖像之一串流中傳訊參數化轉移函數。在一些實施例中，在圖像中或在包含圖像之串流中傳訊表示參數化轉移函數之一資訊。此資訊由一解碼方法或解碼器用以識別根據本發明來應用之參數化轉移函數。在一實施例中，此資訊包含在編碼及解碼方面已知之一識別符。根據其他實施例，此資訊包含用作為參數化轉移函數之一基礎之參數。根據本發明之一變體，此資訊包括圖像中或包含圖像之一位元串流中之參數之一指示符，其基於一組界定值。根據本發明之一變體，此資訊包括基於是否明確地傳訊參數或是否基於一組界定值來隱含地傳訊參數之一指示。根據本發明之不同變體，此資訊包含於至少一語法元素中，該至少一語法元素包含於一圖像參數集(PPS)、一序列參數集(SPS)、一補充增強資訊(SEI)訊息、一視訊使用性資訊(VUI)、消費性電子產品協會(CEA)訊息及一標頭之至少一者中。
本發明亦係關於經調適以分別執行上述編碼方法及解碼方法之編碼及解碼裝置。
200‧‧‧方法
201‧‧‧區塊
202‧‧‧區塊
203‧‧‧區塊
204‧‧‧區塊
205‧‧‧區塊
206‧‧‧區塊
207‧‧‧區塊
208‧‧‧區塊
209‧‧‧區塊

Claims (14)

  1. 一種用於色調映射一高動態範圍(hdr)影像之方法，該方法包括獲得該高動態範圍影像之一亮度分量；判定一hdr至hdr色調映射程式曲線；藉由將該hdr至hdr色調映射程式曲線應用於該高動態範圍影像之該亮度分量而判定一色調壓縮影像；其中該hdr至hdr色調映射程式曲線包括用於暗色位準及中間色調位準之一線性部分及用於高亮區之一壓縮非線性部分。
  2. 一種用於色調映射一高動態範圍(hdr)影像之裝置，該裝置包括：一處理器，其用於獲得該高動態範圍影像之一亮度分量，判定一hdr至hdr色調映射程式曲線，且藉由將該hdr至hdr色調映射程式曲線應用於該高動態範圍影像之該亮度分量而判定一色調壓縮影像；其中該hdr至hdr色調映射程式曲線包括用於暗色位準及中間色調位準之一線性部分及用於高亮區之一壓縮非線性部分。
  3. 如請求項1之方法或如請求項2之裝置，其中該hdr至hdr色調映射程式包含用於判定該亮度何時被線性改變及該亮度何時被非線性壓縮之一臨限值。
  4. 如請求項1至3之方法或裝置，其中基於一初始臨限值τ來判定根據以下方程式之一最終臨限值τf： 其中係該色調壓縮影像之一最大亮度值，n係對應於高亮 區之該影像中之像素之百分比，α表示可在不會將假影引入該色調壓縮影像中之情況下由該色調映射程式非線性壓縮於該動態範圍之僅一小部分中之像素之最大百分比，且其中 ，其中及c τ 分別表示該影像之最大亮度分量I max 之累積直方圖。
  5. 如請求項1至3之方法或裝置，其進一步包括：基於該高動態範圍影像之內容來判定該臨限值。
  6. 如請求項1至3之方法或裝置，其進一步包括用於迫使該hdr至hdr色調映射程式曲線連續且平滑之準則。
  7. 如請求項1之方法或如請求項2之裝置，其中該高動態範圍影像係一高動態範圍視訊之部分，且其中該hdr至hdr色調映射程式曲線之該應用包含：應用來自先前視訊圖框之資訊來達成時間穩定性。
  8. 如請求項7之方法或裝置，其中使用基於該臨限值之洩漏積分來應用來自先前視訊圖框之該資訊。
  9. 如請求項1之方法或如請求項2之裝置，其進一步包括：傳訊表示該hdr至hdr色調映射程式曲線之資訊。
  10. 如請求項8之方法或裝置，其中使用包含於以下之至少一者中之至少一語法元素來執行該傳訊：一圖像參數集(PPS)、一序列參數集(SPS)、一補充增強資訊(SEI)訊息、一視訊使用性資訊(VUI)、消費性電子產品協會(CEA)訊息及一標頭。
  11. 如請求項1之方法或如請求項2之裝置，其中將該hdr至hdr色調映射程式曲線之參數調變為該臨限值之一函數，且其中依選自線性及非線性之一群組之至少一者調變該等參數。
  12. 一種用於色調映射一高動態範圍(hdr)影像之方法，該方法包 括：獲得該高動態範圍影像之一亮度分量；判定一hdr至hdr色調映射程式曲線；藉由將該hdr至hdr色調映射程式曲線應用於該高動態範圍影像之該亮度分量而判定一色調壓縮影像；其中該hdr至hdr色調映射程式曲線係多段的；及其中該多段曲線包含至少一非線性段及至少一線性段。
  13. 如請求項12之方法，其中該線性段係針對選自暗色、中間色調及高亮區之一群組之至少一者；且其中該非線性段係針對選自暗色、中間色調及高亮區之一群組之至少一者。
  14. 一種電腦程式產品，其包括程式碼指令，當此程式由一處理器執行時，該等程式碼指令執行如請求項1、3至13中任一項之方法之步驟。
TW105116733A 2015-05-29 2016-05-27 用於高動態範圍色調映射運算子之方法，裝置及系統 TW201702988A (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
EP15305828 2015-05-29

Publications (1)

Publication Number Publication Date
TW201702988A true TW201702988A (zh) 2017-01-16

Family

ID=53396415

Family Applications (1)

Application Number Title Priority Date Filing Date
TW105116733A TW201702988A (zh) 2015-05-29 2016-05-27 用於高動態範圍色調映射運算子之方法，裝置及系統

Country Status (3)

Country Link
US (1) US20180167597A1 (zh)
TW (1) TW201702988A (zh)
WO (1) WO2016192937A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113096031A (zh) * 2021-03-17 2021-07-09 西安电子科技大学 高动态范围红外图像的压缩显示方法

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10218952B2 (en) 2016-11-28 2019-02-26 Microsoft Technology Licensing, Llc Architecture for rendering high dynamic range video on enhanced dynamic range display devices
EP3340165A1 (en) 2016-12-20 2018-06-27 Thomson Licensing Method of color gamut mapping input colors of an input ldr content into output colors forming an output hdr content
US10104334B2 (en) * 2017-01-27 2018-10-16 Microsoft Technology Licensing, Llc Content-adaptive adjustment of display device brightness levels when rendering high dynamic range content
US10176561B2 (en) 2017-01-27 2019-01-08 Microsoft Technology Licensing, Llc Content-adaptive adjustments to tone mapping operations for high dynamic range content
DK3559901T3 (da) * 2017-02-15 2020-08-31 Dolby Laboratories Licensing Corp Tonekurveafbildning for billeder med højt dynamikområde
US11100888B2 (en) 2017-06-28 2021-08-24 The University Of British Columbia Methods and apparatuses for tone mapping and inverse tone mapping
EP3594894A1 (en) 2018-07-11 2020-01-15 InterDigital VC Holdings, Inc. Tone-mapping of colors of a video content
US10957024B2 (en) 2018-10-30 2021-03-23 Microsoft Technology Licensing, Llc Real time tone mapping of high dynamic range image data at time of playback on a lower dynamic range display
EP3709511B1 (en) * 2019-03-15 2023-08-02 STMicroelectronics (Research & Development) Limited Method of operating a leaky integrator, leaky integrator and apparatus comprising a leaky integrator
CN112154474A (zh) * 2019-07-30 2020-12-29 深圳市大疆创新科技有限公司 图像处理方法、系统、可移动平台及存储介质
US11182884B2 (en) * 2019-07-30 2021-11-23 Nvidia Corporation Enhanced high-dynamic-range imaging and tone mapping
EP3839876A1 (en) * 2019-12-20 2021-06-23 Fondation B-COM Method for converting an image and corresponding device
KR20210123608A (ko) * 2020-04-03 2021-10-14 에스케이하이닉스 주식회사 이미지 센싱 장치 및 그의 동작 방법
US11734806B2 (en) * 2021-11-24 2023-08-22 Roku, Inc. Dynamic tone mapping

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8194997B2 (en) * 2006-03-24 2012-06-05 Sharp Laboratories Of America, Inc. Methods and systems for tone mapping messaging
EP2406959B1 (en) * 2009-03-13 2015-01-14 Dolby Laboratories Licensing Corporation Layered compression of high dynamic range, visual dynamic range, and wide color gamut video
KR101739432B1 (ko) * 2009-06-29 2017-05-24 톰슨 라이센싱 구역 기반의 톤 매핑
JP5383360B2 (ja) * 2009-07-15 2014-01-08 キヤノン株式会社 画像処理装置およびその制御方法
US8831340B2 (en) * 2010-01-27 2014-09-09 Adobe Systems Incorporated Methods and apparatus for tone mapping high dynamic range images
JP5991486B2 (ja) * 2010-08-04 2016-09-14 日本電気株式会社 画像処理方法、画像処理装置及び画像処理プログラム
RU2643663C2 (ru) * 2012-03-26 2018-02-02 Конинклейке Филипс Н.В. Устройства и способы для кодирования и декодирования изображений с hdr на основании областей яркости
US20130321675A1 (en) * 2012-05-31 2013-12-05 Apple Inc. Raw scaler with chromatic aberration correction
US20130329996A1 (en) * 2012-06-10 2013-12-12 Apple Inc. Method and system for auto-enhancing photographs with tonal response curves
CN105787909B (zh) * 2012-08-08 2018-07-20 杜比实验室特许公司 用于高动态范围图像的图像处理
WO2015007510A1 (en) * 2013-07-16 2015-01-22 Koninklijke Philips N.V. Method and apparatus to create an eotf function for a universal code mapping for an hdr image, method and process to use these images
US9361679B2 (en) * 2014-07-28 2016-06-07 Disney Enterprises, Inc. Temporally coherent local tone mapping of HDR video
US9479695B2 (en) * 2014-07-31 2016-10-25 Apple Inc. Generating a high dynamic range image using a temporal filter

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113096031A (zh) * 2021-03-17 2021-07-09 西安电子科技大学 高动态范围红外图像的压缩显示方法
CN113096031B (zh) * 2021-03-17 2024-02-06 西安电子科技大学 高动态范围红外图像的压缩显示方法

Also Published As

Publication number Publication date
US20180167597A1 (en) 2018-06-14
WO2016192937A1 (en) 2016-12-08

Similar Documents

Publication Publication Date Title
JP7179443B2 (ja) 拡張された高ダイナミックレンジ（“ｈｄｒ”）－ｈｄｒトーンマッピングのための方法、装置、及びシステム
US10009613B2 (en) Method, systems and apparatus for HDR to HDR inverse tone mapping
TW201702988A (zh) 用於高動態範圍色調映射運算子之方法，裝置及系統
US11183143B2 (en) Transitioning between video priority and graphics priority
KR102631484B1 (ko) 이미지들 및 비디오의 전기-광학 및 광-전기 변환을 위한 방법들, 시스템들 및 장치
KR102358368B1 (ko) 하이 다이나믹 레인지 픽처를 인코딩하기 위한 방법 및 디바이스, 대응하는 디코딩 방법 및 디코딩 디바이스
WO2018231968A1 (en) Efficient end-to-end single layer inverse display management coding
JP6948309B2 (ja) パラメトリック・トーン調整関数を使用してピクチャをトーン・マッピングする方法およびデバイス
US20190156468A1 (en) Method and device for reconstructing a display adapted HDR image
US11288781B2 (en) Efficient end-to-end single layer inverse display management coding
KR20190031202A (ko) 하이 다이내믹 레인지 화상을 코딩된 비트스트림으로 인코딩/디코딩하기 위한 방법 및 장치
EP3528201A1 (en) Method and device for controlling saturation in a hdr image