TWI790596B - 動態範圍映射的方法和裝置 - Google Patents

動態範圍映射的方法和裝置 Download PDF

Info

Publication number
TWI790596B
TWI790596B TW110113789A TW110113789A TWI790596B TW I790596 B TWI790596 B TW I790596B TW 110113789 A TW110113789 A TW 110113789A TW 110113789 A TW110113789 A TW 110113789A TW I790596 B TWI790596 B TW I790596B
Authority
TW
Taiwan
Prior art keywords
parameter
value
curve
brightness
tone mapping
Prior art date
Application number
TW110113789A
Other languages
English (en)
Other versions
TW202143693A (zh
Inventor
徐巍煒
余全合
陳虎
王弋川
Original Assignee
大陸商華為技術有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 大陸商華為技術有限公司 filed Critical 大陸商華為技術有限公司
Publication of TW202143693A publication Critical patent/TW202143693A/zh
Application granted granted Critical
Publication of TWI790596B publication Critical patent/TWI790596B/zh

Links

Images

Classifications

    • G06T5/92
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/64Circuits for processing colour signals
    • H04N9/68Circuits for processing colour signals for controlling the amplitude of colour signals, e.g. automatic chroma control circuits
    • G06T5/90
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/40Extraction of image or video features
    • G06V10/60Extraction of image or video features relating to illumination properties, e.g. using a reflectance or lighting model
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/20Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
    • G09G3/34Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters by control of light from an independent source
    • G09G3/3406Control of illumination source
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/77Circuits for processing the brightness signal and the chrominance signal relative to each other, e.g. adjusting the phase of the brightness signal relative to the colour signal, correcting differential gain or differential phase
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10024Color image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20172Image enhancement details
    • G06T2207/20208High dynamic range [HDR] image processing
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00Control of display operating conditions
    • G09G2320/06Adjustment of display parameters
    • G09G2320/0626Adjustment of display parameters for control of overall brightness

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • Image Processing (AREA)
  • Facsimile Image Signal Circuits (AREA)
  • Analysing Materials By The Use Of Radiation (AREA)

Abstract

本申請提供了動態範圍映射的方法和裝置,有助於在圖像的最大顯示亮度與顯示設備的最大顯示亮度接近時,避免出現映射之後的終端設備的像素的亮度比原始的圖像還要亮的異常現象。該動態範圍映射的方法,包括:獲取終端設備的顯示參數;獲取圖像數據的特徵訊息;獲取所述圖像數據的第一色調映射曲線的第一參數;在預設條件成立時,根據所述第一參數、所述終端設備的顯示參數和所述圖像數據的特徵訊息,得到第二色調映射曲線的第二參數,其中,所述第二色調映射曲線上第一點處的輸出亮度不高於所述第二色調映射曲線上的所述第一點的輸入亮度;根據所述第二色調映射曲線的第二參數對所述圖像數據進行動態範圍映射。

Description

動態範圍映射的方法和裝置
本申請涉及顯示技術領域,並且更具體地,涉及一種動態範圍映射的方法和裝置。
動態範圍(dynamic range,DR)在很多領域用來表示某個變量的最大值和最小值的比率。在數位圖像中,動態範圍表徵了在圖像可顯示範圍內的最大亮度與最小亮度之間的比率,也就是圖像從“最亮”到“最暗”之間灰度劃分的等級數,其單位為坎德拉每平方米(cd/m2),也可以表示為尼特(nits)。一個圖像的動態範圍越大,它所能表示的亮度層次越豐富,圖像的視覺效果越逼真。由於真實世界中自然場景的動態範圍在10-3到106之間,動態範圍非常大,因此稱之為高動態範圍(high dynamic range,HDR)。相對於高動態範圍圖像,普通圖像的動態範圍為標準動態範圍(standard dynamic range,SDR)或低動態範圍(low dynamic range,SDR)。
現階段的顯示設備,一般把動態範圍不足0.1到400nits的稱為SDR顯示設備;把動態範圍超過0.01到540nits的稱為HDR顯示設備。不同的高動態範圍顯示設備顯示動態範圍也不同,如0.01到540nits的HDR顯示設備,0.005到1000nits的HDR顯示設備等。動態範圍的映射的方法主要應用在前端HDR訊號和後端HDR的顯示設備的適配過程中,包括從高到低的色調映射(tone-mapping)過程,以及從低到高的色調映射過程。例如,前端是採集到的4000nit的光照訊號,而後端顯示設備的HDR顯示能力只有500nit,因此將4000nit的光照訊號映射到500nit的顯示設備上,是一種從高到低的映射過程。又例如,前端是採集到的100nit的SDR光照訊號,而後端顯示設備的HDR顯示能力為2000nit,因此將100nit的光照訊號映射到2000nit的顯示設備上,是一種從低到高的映射過程。
現有技術中,在圖像的最大亮度小於顯示設備的最大顯示亮度的情況下,可以採用基於“S”型曲線的動態範圍的映射演算法,將高動態範圍圖像調整到顯示設備所能顯示的動態範圍內進行顯示。但是,在圖像的最大亮度與顯示設備的最大顯示亮度接近的情況下,若果仍然使用上述方案,會導致映射之後的顯示設備的像素的亮度比原始的圖像還要亮的異常現象,影響用戶體驗。
本申請提供一種動態範圍映射的方法和裝置,有助於在圖像的最大顯示亮度與顯示設備的最大顯示亮度接近時,避免出現映射之後的終端設備的像素的亮度比原始的圖像還要亮的異常現象。
第一方面,提供了一種動態範圍映射的方法,包括:
獲取終端設備的顯示參數;
獲取圖像數據的特徵訊息;
獲取所述圖像數據的第一色調映射曲線的第一參數;
在預設條件成立時,根據所述第一參數、所述終端設備的顯示參數和所述圖像數據的特徵訊息,得到第二色調映射曲線的第二參數,其中,所述第二色調映射曲線上第一點處的輸出亮度不高於所述第二色調映射曲線上的所述第一點的輸入亮度;
根據所述第二色調映射曲線的第二參數對所述圖像數據進行動態範圍映射。
因此,本申請實施例通過對第一色調映射曲線的參數進行進一步的調整,使得調整後的曲線參數(即第二參數)對應的色調映射曲線(即第二色調映射曲線)上的某一點的輸出亮度不高於該點對應的輸入亮度,從而有助於在圖像的最大顯示亮度與顯示設備的最大顯示亮度接近時,避免出現映射之後的終端設備的像素的亮度比原始的圖像還要亮的異常現象。
本申請實施例可以應用於終端設備,該終端設備例如為顯示端設備。顯示端設備的產品形態可以為機上盒、電視顯示設備、手機顯示設備,以及網路直播、視頻應用的轉換設備等電子設備。作為示例,在機上盒、電視顯示設備或手機顯示設備上,本申請實施例提供的方案可以以硬體晶片的形態實現,在網路直播或視頻播放設備上,本申請實施例提供的方案主要以軟體程式代碼的形態實現,但是本申請實施例並不限於此。
示例性的,圖像數據,例如可以為HDR源或SDR源等,例如為圖像中的像素數據,比如每個像素點的亮度和顏色數據等。
示例性的,圖像數據的特徵訊息例如可以從圖像數據的元數據M中獲取,元數據M例如可以包括該圖像數據對應的曲線參數Mcurve 、目標系統顯示實際峰值亮度MTPL (targeted system display actual peak luminance)、圖像數據的內容的亮度的最大值MaxSource(所有像素的Y分量的最大、或者所有像素RGB分量的最大值的最大值)、最小值MinSource(所有像素的Y分量的最小、或者所有像素RGB分量的最大值的最小值)、平均值(所有像素的Y分量的平均值、或者所有像素RGB分量的最大值的平均值)、顯示內容的變化範圍等,本申請實施例對此不作限定。
一些實施例中,還可以從圖像數據V的像素訊息中獲取該圖像數據的特徵訊息;或者使用預設值的圖像數據的特徵訊息值,本申請實施例對此不作限定。
示例性的,終端設備的顯示參數MTPL 可以包括終端設備的最大顯示亮度MaxDisplay和/或最小顯示亮度MinDisplay,或者其他參數,本申請實施例對此不作限定。
結合第一方面,在第一方面的某些實現方式中,符合下列任意之一的條件時,則所述預設條件成立:
根據所述第一參數對於圖像數據進行色調映射時,所述第一色調映射曲線上第二點處的輸出亮度高於所述第一色調映射曲線上的所述第二點處的輸入亮度;或者
所述第一參數中的參數pP1 大於第一值Tp,其中,所述第一值Tp是根據所述第一參數中的aP1 ,以及預設的aP1 與pP1 的對應關係獲得的,其中,Tp表示曲線參數p的閾值。當第一參數pP1 超過了Tp時,就有可能出現第二色調映射曲線上的某一點處輸出亮度高於輸入亮度的現象;或者
所述第一參數中的參數aP1 大於第二值Ta,其中,所述第二值Ta是根據所述第一參數中的pP1 ,以及預設的aP1 與pP1 的對應關係獲得的其中,Ta表示曲線參數a的閾值,當第一參數aP1 超過了Ta時,就有可能出現第二色調映射曲線上的某一點處輸出亮度高於輸入亮度的現象;或者
所述第一參數中的參數aP1 與參數pP1 的乘積大於第三值Tap,其中,所述第三值Tap為預設的有理數,當第一參數中的參數aP1 與參數pP1 的乘積超過了Tap時,就有可能出現第二色調映射曲線上的某一點處輸出亮度高於輸入亮度的現象。示例性的,該第三值Tap可以為3~4之間的有理數,例如3.2或3.4,本申請實施例對此不作限定。
因此,本申請實施例能夠在上述預設條件成立,即按照第一色調映射曲線對於圖像數據進行色調映射,會造成第一色調映射曲線上的某一點的輸出亮度高於該第一色調映射曲線上的該點的輸入亮度時,執行生成上述第二色調映射曲線的第二參數的過程。
結合第一方面,在第一方面的某些實現方式中,所述第二參數包括第一一次樣條曲線參數,所述第一一次樣條曲線參數包括所述第二色調映射曲線中的第一一次樣條的斜率MB[0][0]
Figure 02_image001
或所述第一一次樣條的區間像素點的亮度值的最大值TH3[0]。
本申請實施例中,在根據第二參數對圖像數據進行動態範圍映射時,在圖像數據的暗區可以使用該直線部分(即第一一次樣條)進行色調映射,這樣可以控制亮度的增益,同時更方便控制第二參數從直線逐漸變化到y=x的直線,其中y=x的直線相當於色調映射曲線上的任一點的輸出亮度等於輸入亮度,因此本身實施例對於亮度漸變的內容不容易引起閃爍的現象。
結合第一方面,在第一方面的某些實現方式中,所述第一參數包括第二一次樣條曲線參數,所述第二一次樣條曲線參數包括所述第一色調映射曲線中的第二一次樣條的斜率MB_mid[0][0]和所述第二一次樣條的區間像素點的亮度值的最大值TH3_mid[0],所述顯示參數包括所述終端設備的最大顯示亮度MaxDisplay,所述特徵訊息包括所述圖像數據的最大亮度校正值max_lum;
其中,所述根據所述第一參數、所述顯示參數和所述特徵訊息,獲取第二色調映射曲線的第二參數,包括:
根據所述最大顯示亮度MaxDisplay、所述最大亮度校正值max_lum,對所述曲線參數MB_mid[0][0]和TH3_mid[0]進行調整,獲取所述曲線參數MB[0][0]
Figure 02_image001
和TH3[0]。
因此,本申請實施例可以根據第一色調映射曲線中的第二一次樣條的斜率MB_mid[0][0]和該第二一次樣條的區間像素點的亮度值的最大值TH3_mid[0],以及終端設備的最大顯示亮度MaxDisplay和圖像數據的最大亮度校正值max_lum,來獲取該第二色調映射曲線的第一一次樣條的斜率MB[0][0]
Figure 02_image001
和第一一次樣條的區間像素點的亮度值的最大值TH3[0]。
結合第一方面,在第一方面的某些實現方式中,所述曲線參數MB_mid[0][0]和TH3_mid[0],以及所述曲線參數MB[0][0]
Figure 02_image001
和TH3[0],滿足以下公式:
MB[0][0]=min(max(MB_mid[0][0]+(1- MB_mid[0][0])*
Figure 02_image003
,MB_mid[0][0]),1)
TH3[0]=min(max(TH3_mid[0]+(max_lum-TH3_mid[0]*
Figure 02_image005
,TH3_mid[0]),1) 其中,
Figure 02_image007
或者,
Figure 02_image009
其中
Figure 02_image011
或者
Figure 02_image013
其中, L為輸入訊號,
Figure 02_image015
為色調映射曲線對應的函數H(L)的逆函數, m_a、m_b、m_m、m_n、k1、k2、k3為曲線參數, G(L,m_a_T)表示G(L)的參數M_a取值為m_a_T時輸入變量L對應的G(L)值 N1、N2為有理數,max(a,b)表示求a和b中較大的一個值,min(a ,b)表示求a和b中較小的一個值,H(L)為
Figure 02_image017
或者,
Figure 02_image019
結合第一方面,在第一方面的某些實現方式中,所述第二參數包括三次樣條曲線參數,所述三次樣條曲線參數包括所述第二色調映射曲線上的三次樣條的插點值TH1[1]、TH2[1]、TH3[1],其中,TH1[1]表示所述三次樣條的第一區間像素點的亮度值的最小值,TH2[1]表示所述三次樣條的第一區間像素點的亮度值的最大值和所述三次樣條的第二區間像素點的亮度值的最小值,TH3[1]表示所述三次樣條的第二區間像素點的亮度值的最大值。
結合第一方面,在第一方面的某些實現方式中,所述三次樣條的插點值TH1[1]、TH2[1]、TH3[1]是根據所述第一參數中第二一次樣條曲線參數TH3[0]和三次樣條的插點值TH1[1]、TH2[1]、TH3[1]的計算相關值的預設偏移值得到的,如下所示:
TH1[1]= TH3[0];
TH2[1]= TH1[1]+B;
TH3[1]= TH2[1]+C* TH2[1]- D*TH1[1];
其中,B,C和D為所述三次樣條的插點值TH1[1]、TH2[1]、TH3[1]計算相關值的預設值,B為暗區過渡區像素點的亮度值對應的預設偏移值,C和D為亮區像素點的亮度值對應的預設加權係數。
因此,本申請實施例根據該第一參數中的第二一次樣條曲線參數和三次樣條的插點值TH1[1]、TH2[1]、TH3[1]的計算相關值的預設偏移值,可以得到第二參數中的三次樣條的插點值TH1[1]、TH2[1]、TH3[1]。
結合第一方面,在第一方面的某些實現方式中,所述三次樣條的插點值TH1[1]、TH2[1]、TH3[1]是根據所述第一參數中第二一次樣條曲線參數TH3[0]和三次樣條的插點值TH1[1]、TH2[1]、TH3[1]的計算相關值得到的,如下所示:
TH1[1]=3Spline_TH [i][0][w];
TH2[1]=3Spline_TH [i][0][w]+3Spline_TH_Delta1[i][1][w];
TH3[1]=3Spline_TH[i][0][w]+3Spline_TH_Delta1[i][1][w] + 3Spline_TH_Delta1[i] [2][w];
其中,3Spline_TH [i][0][w]、3Spline_TH_Delta1[i][1][w]、3Spline_TH_Delta1[i] [2][w]為從元數據中提取的三次樣條的插點值TH1[1]、TH2[1]、TH3[1]計算相關值。
因此,本申請實施例根據該第一參數中的第二一次樣條曲線參數和從元數據中提取的該三次樣條的插點值TH1[1]、TH2[1]、TH3[1]的計算相關值,可以得到第二參數中的三次樣條的插點值TH1[1]、TH2[1]、TH3[1]。
結合第一方面,在第一方面的某些實現方式中,所述第二色調映射曲線中的一次樣條在TH3[0]處的Y坐標與所述第二色調映射曲線中的三次樣條在TH1[1]處的Y坐標相同,且所述一次樣條在TH3[0]處的一階導數與所述三次樣條在TH1[1]處的一階導數相同。
這樣,能夠使得第二色調映射曲線中的一次樣條曲線與第二色調映射曲線中的三次樣條曲線在TH[1]處是連續的。
結合第一方面,在第一方面的某些實現方式中,所述第二色調映射曲線中的第一三次樣條在TH2[1]處的Y坐標與所述第二色調映射曲線中的第二三次樣條在TH2[1]處的Y坐標相同,且所述第一三次樣條在TH2[1]處的一階導數與所述第二三次樣條在TH2[1]處的一階導數相同。
這樣,能夠使得第二色調映射曲線中的第一三次樣條曲線與第二三次樣條曲線在TH[2]處是連續的。
結合第一方面,在第一方面的某些實現方式中,所述第二色調映射曲線中的第二三次樣條在TH3[1]處的Y坐標與所述第二色調映射曲線中的第三色調映射函數在TH3[1]處的Y坐標相同,且所述第二三次樣條在TH3[1]處的一階導數與所述第三色調映射函數在TH3[1]處的一階導數相同。
這樣,能夠使得第二色調映射曲線中的第二三次樣條曲線與第三色調映射函數的曲線在TH[3]處是連續的。
結合第一方面,在第一方面的某些實現方式中,所述獲取所述圖像數據的第一色調映射曲線的第一參數,包括:
獲取所述圖像數據的元數據;
根據所述元數據以及所述顯示參數,確定所述第一色調映射曲線的第一參數。
例如,顯示端設備可以根據元數據M中的圖像數據V的內容的亮度的平均值average_maxrgb,和/或亮度的最大值MaxSource,和/或亮度的最小值MinSource,和/或顯示端設備的最大顯示亮度MaxDisplay,和/或顯示端設備的最小顯示亮度MinDisplay,和/或曲線參數Mcurve p1 ,p2,… ),和/或其他數據,獲得該第一色調映射曲線的第一參數,該第一參數例如可表示為P1curveX ,p1,p2,… )。其中,X為輸入亮度值,p1,p2,… 為曲線參數值。
結合第一方面,在第一方面的某些實現方式中,所述第二參數還包括一次樣條曲線參數,所述一次樣條曲線參數包括所述第二色調映射曲線中的第一一次樣條的區間像素點的亮度值的最大值TH3C,以及所述第一一次樣條的斜率Dark。
本申請實施例中,在根據第二參數對圖像數據進行動態範圍映射時,在圖像數據的暗區可以使用該直線部分(即第一一次樣條)進行色調映射,這樣可以控制亮度的增益,同時更方便控制第二參數從直線逐漸變化到y=x的直線,其中y=x的直線相當於色調映射曲線上的任一點的輸出亮度等於輸入亮度,因此本身實施例對於亮度漸變的內容不容易引起閃爍的現象。
結合第一方面,在第一方面的某些實現方式中,還包括:
獲取所述第一一次樣條的初始區間像素點的亮度值的最大值TH3C0;
獲取所述第一一次樣條的初始斜率Dark0;
根據所述初始區間像素點的亮度值的最大值TH3C0,確定所述區間像素點的亮度值的最大值TH3C;
根據所述初始斜率Dark0,確定所述斜率Dark。
結合第一方面,在第一方面的某些實現方式中,所述獲取所述第一一次樣條的初始區間像素點的亮度值的最大值TH3C0,包括:
根據第一參數,確定所述初始區間像素點的亮度值的最大值TH3C0,其中,所述第一參數包括所述第一色調映射曲線中的第二一次樣條的區間像素點的亮度值的最大值TH3[0];或者
根據預設值,確定所述初始區間像素點的亮度值的最大值TH3C0,該預設值例如暗視覺與亮視覺的分解,即人眼視錐細胞與視杆細胞相應強弱發生變化的亮度,比如1nit;或者
根據所述圖像數據的元數據,確定所述初始區間像素點的亮度值的最大值TH3C0,其中,所述元數據包括直方圖暗區像素數量的特徵數據。
結合第一方面,在第一方面的某些實現方式中,所述獲取所述第一一次樣條的初始斜率Dark0,包括:
根據第一參數,確定所述初始斜率Dark0,其中,所述第一參數包括所述第一色調映射曲線中的第二一次樣條的斜率MB[0][0];或者
根據第四值和所述區間像素點的亮度值的最大值TH3C的比值,確定所述初始斜率Dark0,其中所述第四值為所述第一色調映射曲線在所述區間像素點的亮度值的最大值TH3C處的輸出值;或者
根據所述第一色調映射曲線在0至所述區間像素點的亮度值的最大值TH3C之間預設輸入值的斜率值,確定所述初始斜率Dark0。
結合第一方面,在第一方面的某些實現方式中,所述初始區間像素點的亮度值的最大值TH3C0、所述區間像素點的亮度值的最大值TH3C、初始斜率Dark0和所述斜率Dark滿足以下公式:
TH3C=TH3C0+(MaxSource-TH3C0)*(WA)N2 , Dark=Dark0+(1-Dark0)*(WA)N1
Figure 02_image021
Figure 02_image023
其中,TH3C大於TH3C0,且小於MaxSource,TH3C0小於MaxSource,N1和N2為大於0的有理數,H(L)為色調映射曲線、G(L)為所述H(L)的逆函數。
結合第一方面,在第一方面的某些實現方式中,所述初始區間像素點的亮度值的最大值TH3C0、所述區間像素點的亮度值的最大值TH3C、初始斜率Dark0和所述斜率Dark滿足以下公式:
TH3C=TH3C0+(MaxLum-TH3C0)*(WA)N2 , DARK=DARK0+(1-DARK0)*(WA)N1
Figure 02_image025
Figure 02_image027
其中, MaxLum為圖像數據最大亮度的調整值,TH3C大於TH3C0,且小於MaxSource,TH3C0小於MaxSource,N1和N2為大於0的有理數,H(L)為色調映射曲線函數、G(L)為所述H(L)的逆函數。
結合第一方面,在第一方面的某些實現方式中,所述第二參數還包括三次樣條曲線參數,所述三次樣條曲線參數中包括所述第二色調映射曲線的第一三次樣條的第一區間像素點的亮度值的最小值TH1D;
所述方法還包括:
根據所述第二色調映射曲線中的第一一次樣條的區間像素點的亮度值的最大值TH3C,確定所述第一區間像素點的亮度值的最小值TH1D。
結合第一方面,在第一方面的某些實現方式中,所述第二參數還包括三次樣條曲線參數,所述三次樣條曲線參數中包括所述第二色調映射曲線的第一三次樣條的第一區間像素點的亮度值的最大值TH2D;
所述方法還包括:
根據所述第一區間像素點的亮度值的最小值TH1D,確定所述第一區間像素點的亮度值的最大值TH2D。
結合第一方面,在第一方面的某些實現方式中,所述根據所述第一區間像素點的亮度值的最小值TH1D,確定所述第一區間像素點的亮度值的最大值TH2D,包括:
根據所述第一區間像素點的亮度值的最小值TH1D和所述第一參數,確定所述第一區間像素點的亮度值的最大值TH2D;或者
根據所述第一區間像素點的亮度值的最小值TH1D和預設有理數值,確定所述第一區間像素點的亮度值的最大值TH2D;或者
根據所述第一區間像素點的亮度值的最小值TH1D和所述圖像數據的元數據,確定所述第一區間像素點的亮度值的最大值TH2D。
結合第一方面,在第一方面的某些實現方式中,所述第二色調映射曲線的第一三次樣條的第一區間像素點的亮度值的最小值TH1D與所述第一一次樣條的區間像素點的亮度值的最大值TH3C相同,所述第二色調映射曲線中的一次樣條和所述第一三次樣條在TH1D處的輸出值相同,且所述第二色調曲線中的一次樣條和所述第一三次樣條在TH1D處的一階導數相同。
這樣,能夠使得第二色調映射曲線中的一次樣條曲線與第二色調映射曲線中的三次樣條曲線在TH1D處是連續的。
結合第一方面,在第一方面的某些實現方式中,所述三次樣條曲線參數還包括所述第二色調映射曲線的第二三次樣條的第二區間像素點的亮度值的最大值TH3D;
所述方法還包括:
根據所述第一區間像素點的亮度值的最小值TH1D和所述第一區間像素點的亮度值的最大值TH2D,確定所述第二區間像素點的亮度值的最大值TH3D。
結合第一方面,在第一方面的某些實現方式中,所述根據所述第一區間像素點的亮度值的最小值TH1D和所述第一區間像素點的亮度值的最大值TH2D,確定所述第二區間像素點的亮度值的最大值TH3D,包括:
根據所述第一區間像素點的亮度值的最小值TH1D、所述第一區間像素點的亮度值的最大值TH2D和所述第一參數,確定所述第三最大輸入亮度TH3D;或者
根據所述第一區間像素點的亮度值的最小值TH1D、所述第一區間像素點的亮度值的最大值TH2D和預設有理數,確定所述第三最大輸入亮度TH3D;或者
根據所述第一區間像素點的亮度值的最小值TH1D、所述第一區間像素點的亮度值的最大值TH2D和所述圖像數據的元數據,確定所述第三最大輸入亮度TH3D。
結合第一方面,在第一方面的某些實現方式中,所述第二三次樣條的第二區間像素點的亮度值的最小值與所述第一三次樣條的第一區間像素點的亮度值的最大值TH2D相同,所述第一三次樣條和所述第二三次樣條在所述區間像素點的亮度值的最大值TH2D處的輸出值相同,且所述第一三次樣條和所述第二三次樣條在所述區間像素點的亮度值的最大值TH2D處的一階導數相同。
這樣,能夠使得第二色調映射曲線中的第一三次樣條曲線與第二三次樣條曲線在TH2D處是連續的。
結合第一方面,在第一方面的某些實現方式中,所述第二參數還包括所述第二色調映射曲線的色調映射子函數的曲線參數,所述色調映射子函數的第三區間像素點的亮度值的最小值與所述第二區間像素點的亮度值的最大值TH3D相同,所述第二三次樣條和所述色調映射子函數在所述第二區間像素點的亮度值的最大值TH3D處的輸出值相同,且所述第二三次樣條和所述色調映射子函數在所述第二區間像素點的亮度值的最大值TH3D處的一階導數相同。
這樣,能夠使得第二色調映射曲線中的第二三次樣條曲線與色調映射子函數的曲線在TH3D處是連續的。
結合第一方面,在第一方面的某些實現方式中,所述第一參數中包括aP1 、pP1 ,所述根據所述第一參數、所述顯示參數和所述特徵訊息,獲取第二色調映射曲線的第二參數,包括:
根據aP1 以及預設的aP1 與pP1 的對應關係,獲得第一值Tp;
如果pP1 大於Tp,則將所述第一參數中的 pP1 替換為Tp;
將替換後的所述第一參數作為所述第二參數。
因此,通過將第一參數中的pP1 替換為Tp,並將替換後的該第一參數作為第二參數,能夠有助於使得第二色調映射曲線上第一點處的輸出亮度不高於第二色調映射曲線上的該第一點的輸入亮度。
結合第一方面,在第一方面的某些實現方式中,所述第一參數中包括aP1 、pP1 ,所述根據所述第一參數、所述顯示參數和所述特徵訊息,獲取第二色調映射曲線的第二參數,包括:
根據pP1 以及預設的aP1 與pP1 的對應關係獲得第二值Ta;
如果aP1 大於Ta,則將所述第一參數中的 aP1 替換為Ta;
將替換後的所述第一參數作為所述第二參數。
因此,通過將第一參數中的aP1 替換為Ta,並將替換後的該第一參數作為第二參數,能夠有助於使得第二色調映射曲線上第一點處的輸出亮度不高於第二色調映射曲線上的該第一點的輸入亮度。
結合第一方面,在第一方面的某些實現方式中,所述第一參數中包括aP1 、pP1 ,所述根據所述第一參數、所述顯示參數和所述特徵訊息,獲取第二色調映射曲線的第二參數,包括:
如果aP1 * pP1 大於第三值Tap,則將所述第一參數中的pP1 替換為Tap/aP1 ,或者將所述第一參數中的aP1 替換為Tap/pP1
將替換後的所述第一參數作為所述第二參數。
因此,通過將第一參數中的pP1 替換為Tap/aP1 ,或者將第一參數中的aP1 替換為Tap/pP1 ,並將替換後的該第一參數作為第二參數,能夠有助於使得第二色調映射曲線上第一點處的輸出亮度不高於第二色調映射曲線上的該第一點的輸入亮度。
第二方面,提供了一種動態範圍映射的裝置,包括獲取單元,處理單元和映射單元。
獲取單元,用於獲取終端設備的顯示參數;
所述獲取單元還用於獲取圖像數據的特徵訊息;
所述獲取單元還用於獲取所述圖像數據的第一色調映射曲線的第一參數;
處理單元,用於在預設條件成立時,根據所述第一參數、所述終端設備的顯示參數和所述圖像數據的特徵訊息,得到第二色調映射曲線的第二參數,其中,所述第二色調映射曲線上第一點處的輸出亮度不高於所述第二色調映射曲線上的所述第一點的輸入亮度;
映射單元,用於根據所述第二色調映射曲線的第二參數對所述圖像數據進行動態範圍映射。
結合第二方面,在第二方面的某些實現方式中,符合下列任意之一的條件時,則所述預設條件成立:
根據所述第一參數對於圖像數據進行色調映射時,所述第一色調映射曲線上第二點處的輸出亮度高於所述第一色調映射曲線上的所述第二點處的輸入亮度;或者
所述第一參數中的參數pP1 大於第一值Tp,其中,所述第一值Tp是根據所述第一參數中的aP1 ,以及預設的aP1 與pP1 的對應關係獲得的;或者
所述第一參數中的參數aP1 大於第二值Ta,其中,所述第二值Ta是根據所述第一參數中的pP1 ,以及預設的aP1 與pP1 的對應關係獲得的;或者
所述第一參數中的參數aP1 與參數pP1 的乘積大於第三值Tap,其中,所述第三值Tap為預設的有理數。
結合第二方面,在第二方面的某些實現方式中,所述第二參數包括第一一次樣條曲線參數,所述第一一次樣條曲線參數包括所述第二色調映射曲線中的第一一次樣條的斜率MB[0][0]
Figure 02_image001
或所述第一一次樣條的區間像素點的亮度值的最大值TH3[0]。
結合第二方面,在第二方面的某些實現方式中,所述第一參數包括第二一次樣條曲線參數,所述第二一次樣條曲線參數包括所述第一色調映射曲線中的第二一次樣條的斜率MB_mid[0][0]和所述第二一次樣條的區間像素點的亮度值的最大值TH3_mid[0],所述顯示參數包括所述終端設備的最大顯示亮度MaxDisplay,所述特徵訊息包括所述圖像數據的最大亮度校正值max_lum;
其中,處理單元具體用於:
根據所述最大顯示亮度MaxDisplay、所述最大亮度校正值max_lum,對所述曲線參數MB_mid[0][0]和TH3_mid[0]進行調整,獲取所述曲線參數MB[0][0]
Figure 02_image001
和TH3[0]。
結合第二方面,在第二方面的某些實現方式中,所述曲線參數MB_mid[0][0]和TH3_mid[0],以及所述曲線參數MB[0][0]
Figure 02_image001
和TH3[0],滿足以下公式:
MB[0][0]=min(max(MB_mid[0][0]+(1- MB_mid[0][0])*
Figure 02_image003
,MB_mid[0][0]),1)
TH3[0]=min(max(TH3_mid[0]+(max_lum-TH3_mid[0]*
Figure 02_image005
,TH3_mid[0]),1) 其中,
Figure 02_image007
或者
Figure 02_image029
Figure 02_image031
或者
Figure 02_image033
其中, L為輸入訊號,
Figure 02_image015
為色調映射曲線對應的函數H(L)的逆函數, m_a、m_b、m_m、m_n、k1、k2、k3為曲線參數, G(L,m_a_T)表示G(L)的參數M_a取值為m_a_T時輸入變量L對應的G(L)值 N1、N2為有理數,max(a,b)表示求a和b中較大的一個值,min(a ,b)表示求a和b中較小的一個值,H(L)為
Figure 02_image017
或者,
Figure 02_image019
結合第二方面,在第二方面的某些實現方式中,所述第二參數包括三次樣條曲線參數,所述三次樣條曲線參數包括所述第二色調映射曲線上的三次樣條的插點值TH1[1]、TH2[1]、TH3[1],其中,TH1[1]表示所述三次樣條的第一區間像素點的亮度值的最小值,TH2[1]表示所述三次樣條的第一區間像素點的亮度值的最大值和所述三次樣條的第二區間像素點的亮度值的最小值,TH3[1]表示所述三次樣條的第二區間像素點的亮度值的最大值。
結合第二方面,在第二方面的某些實現方式中,所述三次樣條的插點值TH1[1]、TH2[1]、TH3[1]是根據所述第一參數中第二一次樣條曲線參數TH3[0]、所述插點值TH1[1]、TH2[1]、TH3[1]的預設偏移值得到的,如下所示:
TH1[1]= TH3[0];
TH2[1]= TH1[1]+B;
TH3[1]= TH2[1]+C* TH2[1]- D*TH1[1];
其中,B,C和D為所述三次樣條的插點值TH1[1]、TH2[1]、TH3[1]計算相關值的預設值,B為暗區過渡區像素點的亮度值對應的預設偏移值,C和D為亮區像素點的亮度值對應的預設加權係數。
結合第二方面,在第二方面的某些實現方式中,所述三次樣條的插點值TH1[1]、TH2[1]、TH3[1]是根據所述第一參數中第二一次樣條曲線參數TH3[0]、所述插點值TH1[1]、TH2[1]、TH3[1]的計算相關值計算得到的,如下所示:
TH1[1]=3Spline_TH [i][0][w];
TH2[1]=3Spline_TH [i][0][w]+3Spline_TH_Delta1[i][1][w];
TH3[1]=3Spline_TH[i][0][w]+3Spline_TH_Delta1[i][1][w] + 3Spline_TH_Delta1[i] [2][w];
其中,3Spline_TH [i][0][w]、3Spline_TH_Delta1[i][1][w]、3Spline_TH_Delta1[i] [2][w]為從元數據中提取的所述插點值TH1[1]、TH2[1]、TH3[1]的計算相關值。
結合第二方面,在第二方面的某些實現方式中,所述第二色調映射曲線中的一次樣條在TH3[0]處的Y坐標與所述第二色調映射曲線中的三次樣條在TH1[1]處的Y坐標相同,且所述一次樣條在TH3[0]處的一階導數與所述三次樣條在TH1[1]處的一階導數相同。
結合第二方面,在第二方面的某些實現方式中,所述第二色調映射曲線中的第一三次樣條在TH2[1]處的Y坐標與所述第二色調映射曲線中的第二三次樣條在TH2[1]處的Y坐標相同,且所述第一三次樣條在TH2[1]處的一階導數與所述第二三次樣條在TH2[1]處的一階導數相同。
結合第二方面,在第二方面的某些實現方式中,所述第二色調映射曲線中的第二三次樣條在TH3[1]處的Y坐標與所述第二色調映射曲線中的第三色調映射函數在TH3[1]處的Y坐標相同,且所述第二三次樣條在TH3[1]處的一階導數與所述第三色調映射函數在TH3[1]處的一階導數相同。
結合第二方面,在第二方面的某些實現方式中,所述獲取單元具體用於:
獲取所述圖像數據的元數據;
根據所述元數據以及所述顯示參數,確定所述第一色調映射曲線的第一參數。
第三方面,提供了一種計算機可讀儲存媒體,所述計算機可讀儲存媒體中儲存有指令,當其在計算機上運行時,使得計算機執行上述第一方面所述的方法。
第四方面,提供了一種包含指令的計算機程式產品,當其在計算機上運行時,使得計算機執行上述第一方面所述的方法。
第五方面,提供了一種電子設備,包括上述第二方面所述的處理媒體數據的裝置。
應理解,本申請的第二至第五方面及對應的實現方式所取得的有益效果參見本申請的第一方面及對應的實現方式所取得的有益效果,不再贅述。
下面將結合附圖,對本申請中的技術方案進行描述。
首先,對本申請實施例中涉及的相關概念和技術作簡單介紹。
1、動態範圍(dynamic range)在很多領域用來表示某個變量最大值與最小值的比率。在數位圖像中,動態範圍表示了在圖像可顯示的範圍內最大亮度值和最小亮度值之間的比率。自然界的動態範圍是非常大的。例如,星空下的夜景亮度約為0.001cd/m2 ,太陽本身亮度高達1000,000,000cd/m2 。其中,cd/m2 (坎德拉每平方米)是衡量亮度的國際單位制導出單位。這樣,自然界的動態範圍達到了1000,000,000/0.001=1013 的數量級。
但是,在自然界真實的場景當中,太陽的亮度和星光的亮度不會同時得到。對真實世界中的自然場景來說,動態範圍在10-3 到106 範圍內。由於這是一個非常大的動態範圍,因此,我們通常將其稱作為高動態範圍(high dynamic range,HDR)。相對於高動態範圍,普通圖片上的動態範圍稱之為低動態範圍(low dynamic range,LDR)或標準動態範圍(standard dynamic range,SDR)。由此可以理解的是,數位相機的成像過程實際上就是真實世界的高動態範圍到相片的低動態範圍的映射。圖1示出了由真實世界的高動態範圍到顯示設備的低動態映射的一個示例。
圖像的動態範圍越大,表明圖像顯示的場景細節越多,亮度的層次越豐富,視覺效果越逼真。傳統的數位圖像一般採用一個位元組,即8位元的空間來儲存一個像素值,而高動態範圍採用浮點數多位元組來儲存一個像素值,因此,能夠表示出自然場景的高動態範圍。
光學數位成像的過程(例如,數位相機的成像過程)是將真實場景的光輻射通過圖像傳感器轉化為電訊號,並以數位圖像的方式保存下來。而圖像顯示的目的是通過顯示設備重現一幅數位圖像所描述的真實場景。兩者的最終目標是使用戶獲得與其直接觀察真實場景相同的視覺感知。
而光輻射(光訊號)所能展示的真實場景中的亮度層次幾乎是線性的,因此也將光訊號稱為線性訊號。但是,光學數位成像在將光訊號轉換為電訊號的過程中,並不是每一個光訊號都對應著一個電訊號,轉換得到的電訊號是非線性的。因此,也將電訊號稱為非線性訊號。
2、 光電轉移函數(optical electro transfer function,OETF)表示圖像像素的線性訊號到非線性訊號轉換關係。
在可拍攝HDR圖像的攝影機出現前,傳統相機只能通過控制曝光值將拍攝的光訊息記錄在一定的範圍內。由於顯示設備的最大照度訊息並不能達到真實世界的亮度訊息,並且我們通過顯示設備來瀏覽圖像,因此需要光電轉移函數。早期的顯示設備是陰極射線管(cathode ray tube,CRT)顯示器,其光電轉移函數就是Gamma函數。在國際電信聯盟無線通訊組(international telecommunications union-radio communications sector,ITU-R) recommendation BT.1886標準當中定義了這個基於“Gamma”函數的光電轉移函數,如下公式(1)所示。
Figure 02_image035
(1)
通過上述轉換在量化成8位元後的圖像就是傳統的SDR圖像。SDR圖像和上述公式(1)中的轉移函數在傳統的顯示設備(照度在100cd/m2 左右)上表現良好。
隨著顯示設備的不斷升級,相對於傳統的顯示設備,現階段的顯示設備所能顯示的動態範圍不斷增大。現有的消費者級的HDR顯示器可達到600cd/m2 ,高端HDR顯示器能達到2000cd/m2 ,已經遠遠超出了傳統SDR顯示設備的顯示範圍。因此, ITU-R BT.1886標準協議中,與傳統SDR顯示設備相適應的光電轉移函數不再能夠很好地表達現階段HDR顯示設備的顯示性能。因此,需要對光電轉移函數進行改進,以適應HDR顯示設備的升級。
HDR光電轉移函數OETF主要有如下三種:感知量化(perceptual quantizer,PQ)光電轉移函數、混合對數伽馬(hybrid log-Gamma,HLG)光電轉移函數和場景亮度保真(scene luminance fidelity,SLF)光電轉移函數。這三種光電轉移函數為音視頻編碼標準(audio video coding standard,AVS) 標準規定的光電轉移函數。
PQ光電轉移函數是根據人眼的亮度感知模型提出的感知量化光電轉移函數。參見圖2,圖2為PQ光電轉移函數的圖像。
PQ光電轉移函數表示圖像像素的線性訊號值到PQ域非線性訊號值的轉換關係,PQ光電轉移函數可以表示為公式(2):
Figure 02_image037
(2)
其中,式(2)中各參數的計算如下:
Figure 02_image039
其中,L表示線性訊號值,其值正規化為[0,1],
Figure 02_image041
表示非線性訊號值,其值取值範圍為[0,1],m1 、m2 、c1 、c2 、c3 為PQ光電轉移係數,
Figure 02_image043
Figure 02_image045
Figure 02_image047
Figure 02_image049
Figure 02_image051
HLG光電轉移函數是在傳統的Gamma曲線的基礎上改進得到的。參見圖3,圖3為HLG光電轉移函數的圖像。
HLG光電轉移函數在低段應用傳統的Gamma曲線,在高段補充了log曲線。HLG光電轉移函數表示圖像像素的線性訊號值到HLG域非線性訊號值的轉換關係,HLG光電轉移函數可表示為公式(3):
Figure 02_image053
(3)
其中,L表示線性訊號值,其取值範圍為[0,12],
Figure 02_image041
表示非線性訊號值,其取值範圍為[0,1],a、b、c為HLG光電轉移係數,a = 0.17883277,b = 0.28466892,c = 0.55991073。
SLF光電轉移函數是在滿足人眼光學特性的前提下,根據HDR場景亮度分佈獲得的最優曲線。參見圖4,圖4為SLF光電轉移函數的圖像。
SLF光電轉移曲線表示圖像像素的線性訊號值到SLF域非線性訊號值的轉換關係。圖像像素的線性訊號值到SLF域非線性訊號值的轉換關係如公式(4)所示:
Figure 02_image055
(4)
其中,SLF光電轉移函數可以表示為公式(5):
Figure 02_image057
(5)
其中,L表示線性訊號值,其值正規化為[0, 1],
Figure 02_image041
表示非線性訊號值,其值取值範圍為[0, 1],p、m、a、b為SLF光電轉移係數,p=2.3,m=0.14,a=1.12762,b=-0.12762。
3、動態範圍的映射方法主要應用在前端HDR訊號和後端HDR的顯示設備的適配過程中,包括從高到低的色調映射(tone-mapping)過程,以及從低到高的tone-mapping過程。例如,前端是採集到的4000nit的光照訊號,而後端顯示設備(例如電視劇、平板電腦等)的HDR顯示能力只有500nit,因此將4000nit的光照訊號映射到500nit的顯示設備上,是一種從高到低的tone-mapping過程。又例如,前端是採集到的100nit的SDR光照訊號,而後端顯示設備的HDR顯示能力為2000nit,因此將100nit的光照訊號映射到2000nit的顯示設備上,是一種從低到高的tone-mapping過程。
動態範圍的映射方法可以分為靜態的動態範圍映射和動態的動態範圍映射。靜態的動態範圍映射方法是根據同一個視頻內容或者同一個硬碟內容,由單一的數據進行整體的色調映射過程,也就是同一個視頻內容或者硬碟內容的處理曲線通常是一樣的。這種方法的好處是攜帶的訊息較少,並且處理流程比較簡單。這種方法的缺點是每一個場景都使用同一曲線進行色調映射,這樣在有一些場景會導致訊息丟失。例如如果曲線重點保護的是亮區,那麼在一些極其暗的場景會丟掉一些細節,或者乾脆看不見,這樣會影響用戶體驗。
動態的映射方法是根據特定區域,每一個場景或者根據每一幀的內容進行動態的調整。這種方法的好處是可以根據特定區域,每一場景或者每一幀進行不同的曲線處理,這樣處理的圖像顯示結果會更好。但是,缺點是需要每一幀或者每一場景來攜帶相關的場景訊息,攜帶的訊息量較大。
目前,主要有以下五種tone-mapping技術。下面對這五種tone-mapping技術進行描述。
技術一為主要由杜比提出的基於sigmoid曲線的tone-mapping過程。圖5示出了sigmoid曲線的示意圖。參見圖5,橫坐標表示輸入亮度,即動態範圍調整前HDR圖像的亮度,縱坐標表示輸出亮度,即動態範圍調整後圖像的亮度。其中,該sigmoid曲線的形狀為“S”型,曲線的斜率先上升後下降。例如,以該sigmoid曲線上的調整點為例, 通過該sigmoid曲線,可以將亮度約為300cd/m2 的源調整等級(source adaptation level)映射為亮度約為30cd/m2 的目標調整等級(target adaptation level)。
技術二為基於貝塞爾曲線的tone-mapping過程。圖6示出了貝塞爾曲線的示意圖。其中,圖6中橫坐標表示輸入亮度,即動態範圍調整前HDR圖像的亮度,縱坐標表示輸出亮度,即動態範圍調整後圖像的亮度。其中,該貝塞爾曲線在輸入亮度為0至Ks 的範圍內為線性映射過程,輸入亮度為Ks 至1的範圍內為“S”型曲線,曲線的斜率先上升後下降。
技術三是一種基於人眼感知的S型曲線的tone-mapping過程。該曲線的形式如下公式(6)所示:
Figure 02_image059
(6)
其中,L和
Figure 02_image061
表示正規化的電訊號或光訊號,a的取值範圍為在0.0~1.0之間,b的取值範圍在0.0~1.0之間,p、n和m的取值範圍在0.1~N之間,N為大於0.1的有理數,
Figure 02_image061
為範圍是0.0~1.0的有理數,L為範圍是0.0~1.0的有理數,k1、k2、k3為有理數。
技術四是一種結合三次樣條和直線的S型曲線的tone-mapping過程。其中,部分的曲線的形式為如下公式(7)所示:
Figure 02_image063
(7)
其中,L和
Figure 02_image061
為正規化的電訊號或者光訊號。其中a的取值範圍在0.0~1.0之間,b的取值範圍在0.0~1.0之間,p、n和m的取值範圍在0.1~N之間,N為大於0.1的有理數。
Figure 02_image061
為範圍是0.0~1.0的有理數,L為範圍是0.0~1.0的有理數,k1、k2、k3為有理數,k1、k2不同時為0,K3不為0。TH1[i]、TH2[i]、TH3[i]為範圍是0.0~1.0的有理數。
技術五是另一種結合三次樣條和直線的S型曲線的tone-mapping過程。其中,部分的曲線的形式為如下公式(8)所示:
Figure 02_image065
(8)
其中,L和
Figure 02_image061
為正規化的電訊號或者光訊號。其中a的取值範圍在0.0~1.0之間,b的取值範圍在0.0~1.0之間,p、n和m的取值範圍在0.1~N之間,N為大於0.1的有理數。
Figure 02_image061
為範圍是0.0~1.0的有理數,L為範圍是0.0~1.0的有理數,k1、k2、k3為有理數。LT為預設有理數,範圍是0.0~1.0的有理數。TH1[i]、TH2[i]、TH3[i]為範圍是0.0~1.0的有理數。
在動態元數據中會發送與曲線參數相關的元數據。
對於技術一而言,在St2094-10杜比相關的動態元數據定義中,不單發送最大值(maximum PQ-encoded maxRGB)、最小值(minimum PQ-encoded maxRGB)、平均值(average PQ-encoded maxRGB)這些統計值,還發送色調映射偏移(tone mapping offset)、色調映射增益(tone mapping gain)和色調映射伽馬(tone mapping gamma)等這些sigmoid曲線相關的參數。
對於技術2而言,在St2094-40相關的動態元數據定義中包含了直方圖訊息(distribution MaxRGB),同時也包含了貝塞爾曲線參數(Bezier curve anchors)用於直接生成曲線。
而且St2094系列的標準中,元數據中都包含了目標系統顯示實際峰值亮度(targeted system display actual peak luminance)。
對於技術三、技術四和技術五而言,元數據中可以傳遞最大值、最小值、平均值等訊息,也可以傳遞p、m、a、b、n、K1、K2、K3等曲線參數。
在圖像的最大亮度小於顯示設備的最大顯示亮度的情況下,可以採用上述技術一至技術五的動態範圍的映射演算法,將高動態範圍圖像調整到顯示設備所能顯示的動態範圍內進行顯示。但是,在圖像的最大亮度與顯示設備的最大顯示亮度接近的情況下,若果仍然使用上述技術一至技術五的動態範圍的映射演算法,會導致映射之後的顯示設備的像素的亮度比原始的圖像還要亮的異常現象。
圖7示出了圖像的最大亮度與顯示設備的最大顯示亮度相同(例如均為500cd/m2 )時的tone-mapping曲線的示例。請參考圖7,其中y=x的直線(兩個端點分別為A(500,500)和B(0,0))對應於將輸入亮度與輸出亮度相同的tone-mapping曲線。根據該y=x的直線,顯示設備設備上的像素的亮度與原始圖像的亮度相同。例如,對於y=x上面的D點而言,輸入亮度與輸出亮度均為450 cd/m2
繼續參考圖7,對於“S”型曲線(兩個端點分別為A(500,500)和B(0,0)例如技術一種的sigmoid曲線),則在輸入亮度接近500cd/m2 的情況下,在輸入亮度相同的情況下,通過“S”型曲線進行tone-mapping的輸出亮度高於通過y=x進行tone-mapping的輸出亮度。例如,對於與D點輸入亮度相同的“S”型曲線上的E點,其輸出亮度為480 cd/m2
有鑑於此,本申請提供一種動態範圍映射的方法,在圖像的最大亮度與顯示設備的最大顯示亮度接近的情況下,通過對原始的色調映射曲線的參數進行調整,使得調整後的參數對應的色調映射曲線的輸出亮度不高於其輸入亮度,從而有助於避免出現映射之後的顯示設備的像素的亮度比原始的圖像還要亮的異常現象。這裡,該原始的色調映射曲線可以是根據圖像數據的元數據中的目標系統顯示實際峰值亮度調整好的固定曲線,例如上述技術一至技術五種的色調映射曲線。
圖8示出了本申請實施例提供的動態範圍映射的方法的系統架構的示意圖。參見圖8,前端通過採集和製作可以獲取HDR內容,並將該HDR內容和該HDR內容的元數據經傳輸層發送給顯示端。顯示端可以包括HDR顯示設備進而SDR顯示設備。作為示例,當顯示端包括HDR顯示設備時,可以實現將HDR內容映射到HDR顯示設備上,當顯示端包括SDR顯示設備時,可以實現將HDR內容映射到SDR顯示設備上。
示例性的,顯示端的產品形態可以為機上盒、電視顯示設備、手機顯示設備,以及網路直播、視頻應用的轉換設備等電子設備。
作為示例,在機上盒、電視顯示設備或手機顯示設備上,本申請實施例提供的方案可以以硬體晶片的形態實現,在網路直播或視頻播放設備上,本申請實施例提供的方案主要以軟體程式代碼的形態實現,但是本申請實施例並不限於此。
需要說明的是,本申請實施例僅以圖7中的應用場景為例進行描述,但是應用於本申請實施例的系統架構並不限於此。例如,前端還可以獲取SDR內容,此時當顯示端包括HDR顯示設備,可以實現將SDR內容映射到HDR顯示設備上。
圖9為本申請實施例提供的動態範圍映射的方法900的示意性流程圖。方法900適用於圖8中提供的應用場景,例如由圖8中所示的顯示端執行。參見圖9,方法900包括如下步驟910至940。
910,獲取圖像數據的特徵訊息和本地顯示設備的顯示參數。這裡,該圖像數據(可表示為V)可以為HDR圖像數據,或者SDR圖像數據,本申請實施例對此不作限定。
示例性的,顯示端設備可以從前端接收視頻源,其中主要包含圖像數據V,例如像素數據等。一個具體的例子,對於一個4K的視頻源,其可以包括3840*2160個的像素點的亮度和顏色數據等。
需要說明的是,本申請實施例不對該圖像數據V的格式做限定。例如,從像素數據的色彩空間來說,該圖像數據V可以是Y(luminance)UV(chrominance)空間的圖像數據,也可以是RGB像素空間的圖像數據。又例如,從像素數據的位元寬度來說,該圖像數據V可以是8位元的位元寬度,也可以說10位元,或者12位元的位元寬度。
一些實施例中,在獲取圖像數據V的同時,還可以獲取該圖像數據的特徵訊息,例如從元數據(metadata)M中獲取。其中,圖像數據V的元數據M用於表示該圖像數據的數據特徵,例如可以包含圖像數據的格式,或者該圖像數據V對應的曲線參數Mcurve 、目標系統顯示實際峰值亮度MTPL (targeted system display actual peak luminance)、圖像數據的內容的亮度的最大值MaxSource(所有像素的Y分量的最大、或者所有像素RGB分量的最大值的最大值)、最小值MinSource(所有像素的Y分量的最小、或者所有像素RGB分量的最大值的最小值)、平均值(所有像素的Y分量的平均值、或者所有像素RGB分量的最大值的平均值)、顯示內容的變化範圍等等,本申請實施例對此不作限定。
一些實施例中,還可以從圖像數據V的像素訊息中獲取該圖像數據的特徵訊息;或者使用預設值的圖像數據的特徵訊息值,本申請實施例對此不作限定。
需要說明的是,當元數據M中包括曲線參數Mcurve 時,本申請實施例不對曲線參數Mcurve 的格式進行限定。例如,對於上文中的技術三而言,元數據中包括的曲線參數Mcurve 可以是p、m、a、b、n、K1、K2、K3等。
一些實施例中,元數據包括動態元數據和靜態元數據,可參見標準ST2094-1dynamic metadata for color volume transform或靜態元數據的相關標準(static metadata)。示例性的,元數據可以跟隨圖像一起打包,例如包含不同文件格式,不同編碼標準的SEI包,包括硬體的HDMI相關的一些包結構等。
一些實施例中,顯示端設備還可以獲取該顯示端設備(即實際終端設備P,或本地顯示設備)的顯示參數MTPL (也可以稱為顯示亮度參數)。示例性的,顯示參數MTPL 可以包括顯示端設備的最大顯示亮度MaxDisplay和顯示端設備的最小顯示亮度MinDisplay,或者其他參數,本申請實施例對此不作限定。
920,獲取圖像數據的第一色調映射曲線的第一參數。
示例性的,顯示端設備可以根據圖像數據V的元數據M和顯示端設備的顯示參數MTPL ,獲取該圖像數據V的第一色調映射曲線的第一參數。例如,根據元數據M中的圖像數據V的內容的亮度的平均值average_maxrgb,和/或亮度的最大值MaxSource,和/或亮度的最小值MinSource,和/或顯示端設備的最大顯示亮度MaxDisplay,和/或顯示端設備的最小顯示亮度MinDisplay,和/或曲線參數Mcurvep1,p2,… ),和/或其他數據,獲得第一色調映射曲線的第一參數,可表示為P1curveX ,p1,p2,… )。其中,X為輸入亮度值,p1,p2,… 為曲線參數值。
需要說明的是,本申請實施例中對第一色調映射曲線的第一參數P1curve 的形式不作限定。另外,本申請實施例對生成該第一參數P1curve 時所使用的數據,或者生成該第一參數P1curve 時的演算法也不作限定。例如,生成第一參數P1curve 的數據可以是元數據,和/或顯示端設備的顯示參數,也可以是其他預設數據。
作為一個具體的例子,對於上文中的技術五而言,曲線參數Mcurve 例如包括參數值(p、m、a、b、n、K1、K2、K3)和(TH1[i]、TH2[i]、TH3[i]、MB0),可以根據該曲線參數Mcurve 獲得第一色調映射曲線的第一參數P1curve ,例如為(pP1 、mP1 、aP1 、bP1 、nP1 、K1P1 、K2P1 、K3P1 、TH1[i]、TH2[i]、TH3[i]、MD1[i] 、MC1[i] 、MB1[i] 、MA1[i] 、MD2[i] 、MC2[i] 、MB2[i] 、MA2[i]、MB3)。
作為另一個具體的例子,對於上文中的技術四而言,曲線參數Mcurve 例如包括參數值(p、m、a、b、n、K1、K2、K3)和(TH1[i]、TH2[i]、TH3[i]、MB0),可以根據該曲線參數Mcurve 獲得第一色調映射曲線的第一參數P1curve ,例如為(pP1 、mP1 、aP1 、bP1 、nP1 、K1P1 、K2P1 、K3P1 、TH1[i]、TH2[i]、TH3[i]、MD1[i] 、MC1[i] 、MB1[i] 、MA1[i] 、MD2[i] 、MC2[i] 、MB2[i] 、MA2[i])。
需要說明的是,本申請實施例中的第一色調映射曲線為上述原始色調映射曲線的一個示例,包括但不限於技術一、技術二、技術三、技術四和技術五中使用的色調映射曲線。本申請中的第一映射曲線的第一參數包括但不限於技術一、技術二、技術三、技術四、和技術五中使用的色調映射曲線相關的參數。
930,在預設條件成立時,根據所述特徵訊息、顯示參數和第一參數,獲取第二色調映射曲線的第二參數。其中,第二色調映射曲線上第一點處的輸出亮度不高於所述第二色調映射曲線上的該第一點處的輸入亮度。也就是說,在第二色調映射曲線的輸入亮度範圍內,根據該第二色調映射曲線對任意一個輸入亮度進行映射得到的輸出亮度,都不高於該輸入亮度。第二參數用於對圖像數據進行動態範圍映射,可以表示為Rcurve
作為示例,色調映射曲線的輸入亮度可以是線性光,也可以是非線性值,還有可能是線性關係經過正規化後的值(例如10000作為1,或者內容的最大亮度作為1),本申請實施例對此不作限定。
示例性的,可以根據第一參數P1curve ,以及圖像數據V的內容的亮度的平均值average_maxrgb,和/或亮度的最大值MaxSource,和/或亮度的最小值MinSource,和/或顯示端設備的最大顯示亮度MaxDisplay,和/或顯示端設備的最小顯示亮度MinDisplay,和/或其他數據,獲取上述第二色調映射曲線的第二參數Rcurve
示例性的,第二參數Rcurve 可以具有以下公式(9)所示的形態:
Figure 02_image067
(9)
其中,L和
Figure 02_image069
為正規化的電訊號或者光訊號,Dark、TH3C、TH2D、TH3D、MD1D、MC1D、MB1D、MA1D、MD2D、MC2D、MB2D、MA2D為有理數。
在一些實施例中,該預設條件,例如為按照第一色調映射曲線對於圖像數據進行色調映射,會造成第一色調映射曲線上的某一點的輸出亮度高於該第一色調映射曲線上的該點的輸入亮度。
需要說明的是,本申請實施例中,在色調映射曲線的輸出亮度與輸入亮度相差在第一範圍之內的情況下,可以認為該輸出亮度與輸入亮度是基本相同的。也就是說,在色調映射曲線的輸出亮度高於輸入亮度的部分在第一範圍之內時,可以認為二者是基本相同的。反之,在色調映射曲線的輸出亮度高於輸入亮度的部分超出第一範圍時,可以認為輸出亮度高於輸入亮度。
當滿足預設條件,即按照第一參數對圖像數據進行色調映射,會造成第一色調映射曲線的輸出亮度高於第一色調映射曲線的輸入亮度時,執行生成上述第二色調映射曲線的第二參數Rcurve 的過程。
作為一種可能的實現方式,上述預設條件可以為第一參數中的參數pP1 大於第一值Tp,其中,所述第一值Tp是根據所述第一參數中的aP1 ,以及預設的aP1 與pP1 的對應關係獲得的。其中,Tp表示技術三或技術四或技術五中的曲線參數p的閾值。當第一參數pP1 超過了Tp時,就有可能出現第二色調映射曲線上的某一點處輸出亮度高於輸入亮度的現象。
作為一個具體的例子,對於上文中的技術四或技術五而言,第一參數P1curve 中包括aP1 、pP1 等參數。此時,可以將aP1 作為Ta,查找表Tpa(Tp,Ta)得到對應的第一值Tp。這裡,該表Tpa(Tp,Ta)即為預設的aP1 與pP1 的對應關係的一個示例。其中,Ta表示技術三或技術四或技術五中的曲線參數a的閾值。
如果pP1 大於Tp,則滿足預設條件。可選的,此時可以將第一參數P1curve 中pP1 替換為查表獲得的該第一值Tp。這樣,替換後的該第一參數P1curve 即可以為上述第二參數Rcurve
如果pP1 小於或等於Tp,則不需要執行生成第二色調映射曲線的第二參數Rcurve 的過程。
作為另一種可能的實現方式,上述預設條件可以為第一參數中的參數aP1 大於第二值Ta,其中,所述第二值Ta是根據所述第一參數中的pP1 ,以及預設的aP1 與pP1 的對應關係獲得的。當第一參數aP1 超過了Ta時,就有可能出現第二色調映射曲線上的某一點處輸出亮度高於輸入亮度的現象。
作為一個具體的例子,對於上文中的技術四或技術五而言,第一參數P1curve 中包括aP1 、pP1 等參數。此時,可以將pP1 作為Tp,查找表Tpa(Tp,Ta)得到對應的第二值Ta。這裡,該表Tpa(Tp,Ta)即為預設的aP1 與pP1 的對應關係的一個示例。
如果aP1 大於Ta,則滿足預設條件。可選的,此時可以將第一參數P1curve 中的aP1 替換為查表獲得的第二值Ta。這樣,替換後的該第一參數中即可以為上述第二參數Rcurve
如果aP1 小於或等於Ta,則不需要執行生成第二色調映射曲線的第二參數Rcurve 的過程。
在上面的示例中,表Tpa(Tp,Ta)為預設的有理數組合,例如(3.5,0.879),(4.5,0.777)等。需要說明的是,對於表中未出現的值,可以使用線性差值、臨近值,或者臨近值的加權平均值等方式生成該值。另外,本申請實施例對表Tpa(Tp,Ta)的具體形式不作限定,例如表Tpa(Tp,Ta)還可以表示為Tp與Ta之間的函數關係。
作為另一種可能的實現方式,上述預設條件為第一參數中的參數aP1 與參數pP1 的乘積大於第三值Tap,其中,該第三值Tap為預設的有理數。示例性的,該第三值Tap可以為3~4之間的有理數,例如3.2或3.4,本申請實施例對此不作限定。
作為一個具體的例子,對於上文中的技術四或技術五而言,第一參數P1curve 中包括aP1 、pP1 等參數。此時,可以判斷參數aP1 與參數pP1 的乘積aP1 *pP1 是否大於預設值Tap。
如果aP1 *pP1 大於Tap,則滿足預設條件。可選的,此時可以將第一參數P1curve 中的pP1 替換為Tap/aP1 ,或者將所述第一參數中的aP1 替換為Tap/pP1 。這樣,替換後的該第一參數中即可以為上述第二參數Rcurve
如果aP1 *pP1 小於或等於Tap,則不需要執行生成第二色調映射曲線的第二參數Rcurve 的過程。
在另一些實施例中,還可以將第一色調映射曲線對應的第一參數P1curve 轉換到絕對亮度空間,例如線性空間,或者PQ、HLG等非線性空間,此時需要保證y和x相同大小的值亮度相同。然後,可以根據該第一色調映射曲線與y=x直線是否有交點來判斷第一色調映射曲線存在高於y=x的部分。例如,當第一色調映射曲線與y=x直線有交點時,可以確定第一色調映射曲線存在高於y=x的部分,當第一色調映射曲線與y=x沒有交點時,可以確定第一色調映射曲線不存在高於y=x的部分。
因此,本申請實施例通過對第一色調映射曲線的參數進行進一步的調整,使得調整後的曲線參數(即第二參數)對應的色調映射曲線(即第二色調映射曲線)上的某一點的輸出亮度不高於該點對應的輸入亮度,從而有助於在圖像的最大顯示亮度與顯示設備的最大顯示亮度接近時,避免出現映射之後的終端設備的像素的亮度比原始的圖像還要亮的異常現象。
在一些可選的實施例中,上述第二參數還包括一次樣條曲線參數,該一次樣條曲線參數包括該第二色調映射曲線中的一次樣條(可以記為第一一次樣條)的區間像素點的亮度值的最大值TH3C(也可以稱為第一最大輸入亮度TH3C),以及該第一一次樣條的斜率Dark。示例性的,第一一次樣條例如為上文公式(9)中的輸入亮度小於TH3C的色調映射曲線,即
Figure 02_image071
。其中,
Figure 02_image073
為該第一一次樣條的區間像素點。
可選的,顯示端設備可以獲取該第一一次樣條的初始區間像素點的亮度值的最大值TH3C0(也可以稱為初始第一最大輸入亮度TH3C0),和初始斜率Dark0,然後根據該初始第一最大輸入亮度TH3C0,確定上述第一最大輸入亮度TH3C,以及根據該初始斜率Dark0,確定斜率Dark。
以下是本申請實施例提供的三種獲取初始第一最大輸入亮度TH3C0的方法。
方法一
顯示端設備可以根據第一參數P1curve ,確定上述初始第一最大輸入亮度TH3C0。示例性的,當第一色調映射曲線存在一次樣條(可以記為第二一次樣條,例如上文中的技術二、技術四或技術五)時,可以確定初始第一最大輸入亮度TH3C0為第二一次樣條的區間像素點的亮度值的最大值。
方法二
顯示端設備根據預設值,確定所述初始第一最大輸入亮度TH3C0。示例性的,該預設值可以為暗視覺與亮視覺的分解,即人眼視錐細胞與視杆細胞相應強弱發生變化的亮度,比如1nit。
方法三
顯示端設備根據圖像數據V的元數據M,確定所述初始第一最大輸入亮度TH3C0。其中,該元數據M包括直方圖暗區像素數量的特徵數據,例如直方圖暗區像素數量的特徵亮度位置,或者暗區像素從暗到亮像素數/累計像素數顯著變化的亮度,或者從0到特徵亮度累計的像素數占總像素大於預設比例。
以下是本申請實施例提供的三種獲取初始斜率Dark0的方法。
方法一
顯示端設備可以根據第一參數P1curve ,確定該初始斜率Dark0。示例性的,當第一色調映射曲線存在一次樣條(例如第二一次樣條)時,可以確定初始斜率Dark0為該第二一次樣條的斜率,例如技術四或技術五中的MB0。
方法二
顯示端設備可以根據第四值和上述第一最大輸入亮度TH3C的比值,確定該初始斜率Dark0,其中所述第四值為所述第一色調映射曲線在所述第一最大輸入亮度TH3C處的輸出值,例如第四值可以表示為Vdark=P1curve (TH3C),此時該初始斜率Dark0可以表示為(Vdark/TH3C)。
方法三
顯示端設備可以根據所述第一色調映射曲線在0至所述第一最大輸入亮度TH3C之間預設輸入值的斜率值,確定所述初始斜率Dark0。例如可以為0至所述第一最大輸入亮度TH3C之間的斜率值的平均值,或者最大值,或者中間值等,本申請對此不作限定。
需要說明的是,以上獲取初始最大輸入亮度TH3C0,或者初始斜率Dark0的方式僅作為示例,並不對本申請實施例構成限定,例如通過與上述方法類似的方式,或者通過對上述方法進行慣用手段的置換獲得的初始最大輸入亮度TH3C0,或者初始斜率Dark0的方式也在本申請實施例的保護範圍之內。
以下是本申請實施例提供的兩種根據初始第一最大輸入亮度TH3C0和初始斜率Dark0,獲取第二目標色調映射曲線的第一最大輸入亮度TH3C和斜率Dark的方法。
方法一
可以根據以下公式(10)和(11),確定上述第一最大輸入亮度TH3C和斜率Dark,即第一初始最大輸入亮度TH3C0、第一最大輸入亮度TH3C、初始斜率Dark0和斜率Dark滿足下面公式(10)和(11)。 TH3C=TH3C0+(MaxSource-TH3C0)*(WA)N2 (10) Dark=Dark0+(1-Dark0)*(WA)N1 (11) 其中,
Figure 02_image075
Figure 02_image023
其中,N1和N2為大於0的有理數,H(L)為色調映射曲線、G(L)為所述H(L)的逆函數。
方法二
可以根據以下公式(12)和(13),確定第一最大輸入亮度TH3C和斜率Dark,即第一初始最大輸入亮度TH3C0、第一最大輸入亮度TH3C、初始斜率Dark0和斜率Dark滿足下面公式(12)和(13)。 TH3C=TH3C0+(MaxLum-TH3C0)*(WA)N2 (12) Dark=Dark0+(1-Dark0)*(WA)N1 (13) 其中,
Figure 02_image025
Figure 02_image077
其中,MaxLum為圖像數據最大亮度MaxSource的調整值,H(L)為色調映射曲線函數,G(L)為所述H(L)的逆函數。需要說明的是,對於由MaxSource到MaxLum的調整方式,本申請實施例不做限定。
示例性的,對於下面公式(14-1)中的色調映射曲線而言,其逆函數G(L)為公式(15-1)所示。
Figure 02_image059
(14-1)
Figure 02_image079
(15-1)
示例性的,對於下面公式(14-2)中的色調映射曲線而言,其逆函數G(L)為公式(15-2)所示。
Figure 02_image081
(14-2)
Figure 02_image083
(15-2)
本申請實施例中,在根據第二參數對圖像數據進行動態範圍映射時,在圖像數據的暗區可以使用該直線部分進行色調映射,這樣可以控制亮度的增益,同時更方便控制第二參數從直線逐漸變化到y=x的直線,其中y=x的直線相當於色調映射曲線上任一點的輸出亮度等於輸入亮度,因此本身實施例對於亮度漸變的內容不容易引起閃爍的現象。
在一些可選的實施例中,上述第二色調映射曲線還包括三次樣條曲線,該第二參數Rcurve 中還包括第二色調映射曲線的第一三次樣條的第一區間像素點的亮度值的最小值。此時,顯示端設備可以根據第二色調映射曲線中的一次樣條的區間像素點的亮度值的最大值TH3C,即上述第一最大輸入亮度TH3C,確定該第一三次樣條的第一區間像素點的亮度值的最大值TH1D。示例性的,該第一區間像素點的亮度值的最大值TH1D可以等於第一最大輸入亮度TH3C,即TH1D=TH3C。
示例性的,該第一三次樣條對應的色調映射曲線可以為上文公式(9)中輸入亮度範圍為大於或等於TH3C且小於TH2D的色調映射曲線,即
Figure 02_image085
,其中,
Figure 02_image087
為該第一區間像素點。
其中,第二參數Rcurve 中還包括該第一三次樣條的第一區間像素點的亮度值的最大值TH2D,也可以稱為第二最大輸入亮度TH2D。示例性的,可以根據上文中的第一區間像素點的亮度值的最大值TH1D,確定該第二最大輸入亮度TH2D。
在一些可選的實施例中,第二參數Rcurve 中還包括第二色調映射曲線的第二三次樣條的第二區間像素點的亮度值的最大值TH3D,也可以稱為第三最大輸入亮度TH3D。可選的,該第二區間像素點的亮度值的最小值可以為上述TH2D。示例性的,該第二三次樣條對應的色調映射曲線為可以上文公式(9)中輸入亮度範圍為大於或等於TH2D且小於TH3D的色調映射曲線,即
Figure 02_image089
,其中
Figure 02_image091
為該第二區間像素點。
示例性的,顯示端設備可以根據上述第一區間像素點的亮度值的最大值TH1D和第二最大輸入亮度TH2D,確定第三最大輸入亮度TH3D。
以下是本申請實施例提供的三種確定第二最大輸入亮度TH2D和第三最大輸入亮度TH3D的方法。
方法一
顯示端設備可以根據所述第一區間像素點的亮度值的最大值TH1D和所述第一參數中的TH1[0]、TH2[0]、TH3[0](或者元數據M中包含的參數TH1[0]、TH2[0]、TH3[0]),確定該第二最大輸入亮度TH2D。示例性的,TH2D和TH3D可以分別滿足以下公式(16-1)和公式(17-1):
TH2D=TH1D+ TH2[0]-TH1[0]                                    (16-1)
TH3D=TH2D+TH3[0]-TH2[0]                                     (17-1)
方法二
顯示端設備可以根據所述第一區間像素點的亮度值的最大值TH1D和所述第一參數中的deltaTH2[0]、deltaTH3[0](或者元數據M中包含的參數deltaTH2[0]、deltaTH3[0]),確定該第二最大輸入亮度TH2D。示例性的,TH2D和TH3D可以分別滿足以下公式(16-2)和公式(17-2):
TH2D=TH1D+ deltaTH2[0]                                   (16-2)
TH3D=TH2D+deltaTH3[0]                                    (17-2)
方法二
顯示端設備可以根據TH1D和預設值,確定TH2D和TH3D。示例性的,TH2D和TH3D可以分別滿足以下公式(18)和公式(19):
TH2D=TH1D+B                                       (18)
TH3D= TH2D+C* TH2D- D*TH1D                              (19)
其中,B為大於0的有理數,例如可以為暗區過渡區像素點的亮度值對應的偏移值,默認值可以為0.15;C和D為大於0的有理數,例如為亮區像素點的亮度值對應的加權係數,默認值可以為0.5。
可選的,可以確定第二參數Rcurve 中(即公式(9)中)的MD1D、MC1D、MB1D、MA1D、MD2D、MC2D、MB2D、MA2D等參數。示例性的,可以根據以下公式(14)至(19)來確定這些參數。
在一些實施例中,上述第二色調映射曲線的第一三次樣條的第一區間像素點的亮度的最小值TH1D與上述第一最大輸入亮度TH3C(即第一一次樣條的區間像素點的亮度值的最大值TH3C)相同。這樣,能夠使得第二色調映射曲線的一次樣條的區間像素點與第一三次樣條的第一區間像素點連續。並且該第二色調映射曲線中的第一一次樣條和第一三次樣條在TH1D處的輸出值相同,且該第二色調曲線中的第一一次樣條和第一三次樣條在TH1D處的一階導數相同,即該第二色調映射曲線在TH1D處連續。
示例性的,對於公式(9)中的Rcurve 參數而言,當第二色調映射曲線在TH1D處連續時,MA1D、Dark、TH3C、MB1D滿足以下公式(20)和(21):
Figure 02_image093
(20)
Figure 02_image095
(21)
在一些實施例中,上述第二三次樣條的第二區間像素點的亮度值的最大值與第一三次樣條的第一區間像素點的亮度值的最大值TH2D,即第二最大輸入亮度TH2D相同,該第二三次樣條和第一三次樣條在TH2D處的輸出值相同。這樣,能夠使得第二色調映射曲線的第一三次樣條的第一區間像素點與第二三次樣條的第二區間像素點連續。並且該第二三次樣條和第一三次樣條在TH2D處的一階導數相同,即第二色調映射曲線在TH2D處連續。
示例性的,對於公式(9)中的Rcurve 參數而言,當第二色調映射曲線在TH2D處連續時,MD1D、TH3C、MC1D、MB1D、MA1D、MD2D、TH2D、MB2D、MA2D滿足以下公式(22)和(23)
Figure 02_image097
(22)
Figure 02_image099
(23)
在一些實施例中,第二參數還包括第二色調映射曲線的色調映射子函數的曲線參數,該色調映射子函數的第三區間像素點的亮度值的最小值與上述第二三次樣條的第二區間像素點的亮度值的最大值TH3D,即第三最大輸入亮度TH3D相同。這樣,能夠使得第二色調映射曲線的第二三次樣條的第二區間像素點與色調映射子函數對應的第二區間像素點連續。並且,該第二三次樣條和色調映射子函數在所述TH3D處的輸出值相同,且該第二三次樣條和色調映射子函數在TH3D處的一階導數相同,即第二色調映射曲線在TH3D處連續。
示例性的,對於公式(9)中的Rcurve 參數而言,當第二色調映射曲線在TH3D處連續時,MD2D、TH3D、TH2D、MC2D、MB2D、MA2D、MD2D、MC2D、MB2D滿足以下公式(24)和(25)
Figure 02_image101
(24)
Figure 02_image103
(25)
另外,一些實施例中,可以根據預設策略獲取上述兩段三次樣條(即第一三次樣條和第二三次樣條)在TH2D處的值。例如,這兩段三次樣條在TH2D處的值可以是第二色調映射曲線上的輸入亮度為TH1D和TH3D的兩個點連線的中間點的值。
本申請實施例中,第二色調映射曲線中的三次樣條曲線,一方面可以平滑連接一次樣條曲線和基礎曲線,另一方面可以有助於方便控制與直線部分相鄰的部分的增益。
需要說明的是,本申請實施例中,可以只包含獲取第二參數中的一次樣條參數的過程,而並不需要涉及獲得第二參數中除該一次樣條參數之外的參數的過程。
940,根據所述第二色調映射曲線的第二參數對所述圖像數據進行動態範圍映射。示例性的,在獲取第二參數之後,可以獲取第二色調映射曲線,用於對圖像數據進行動態範圍映射。
示例性的,根據上述公式(9),可以獲得從正規化的HDR/SDR 源數據映射到正規化的HDR/SDR顯示數據之間的映射關係。例如,可以根顯示端設備的最大顯示能力、最小小時能力(例如為0),將映射值
Figure 02_image069
反向正規化到顯示端設備的最大顯示能力、最小顯示能力之間。需要說明的是,上面的反向正規化計算可以是PQ的非線性空間,也可以是正規化0~1的線性空間。另外,反向正規化可以是0-10000nit,也可以是0.0001-100000nit等。本申請實施例對於HDR/SDR映射數據
Figure 02_image069
的反向正規化範圍和過程不作限定。
需要說明的是,在獲取第二色調映射曲線之後,後續顯示適配處理不但包含色調映射(tone-mapping),在顯示之前還可以對其進行進一步調整以調整其飽和度處理,和/或色域變換處理,和/或去噪處理,和/或銳化處理等等,本申請實施例對此不做限定。
還需要說明的是,顯示端設備的最大顯示能力可以根據設備的參數或者生產商的訊息獲取。顯示端設備的最小值顯示能力,通常為0nit,也可以為1nit,本申請實施例對此不做限定。
因此,本申請實施例通過對色調映射曲線的參數進行進一步的調整,使得調整後的曲線參數對應的色調映射曲線的輸出亮度不高於該色調映射曲線的輸入亮度,從而有助於在圖像的最大顯示亮度與顯示設備的最大顯示亮度接近時,避免出現映射之後的顯示設備的像素的亮度比原始的圖像還要亮的異常現象。因此,本申請實施例對於不同亮度的終端顯示設備均能提供較大的靈活性,從而在合理調整參數的情況下達到較好的呈現效果。
在本申請一些可選的實施例中,所述第二參數中的一次樣條曲線參數(可以記為第一一次樣條曲線參數),可以包括第二色調映射曲線中的第一一次樣條的斜率(例如可以表示為MB[0][0]
Figure 02_image105
和該第一一次樣條的區間像素點的亮度值的最大值(例如可以表示為TH3[0] )。
在該實施例中,上述第一參數中包括的一次樣條曲線參數(可以記為第二一次樣條曲線參數),可以包括所述第一色調映射曲線中的第二一次樣條的斜率(例如可以表示為MB_mid[0][0])和該第二一次樣條的區間像素點的亮度值的最大值(例如可以表示為TH3_mid[0] )。
此時,在預設條件成立時,根據所述第一參數、所述顯示參數和所述特徵訊息,獲取第二色調映射曲線的第二參數的一種實現方式可以為:根據最大顯示亮度MaxDisplay、最大亮度校正值max_lum,對曲線參數MB_mid[0][0]和TH3_mid[0]進行調整,獲取曲線參數MB[0][0]
Figure 02_image001
和TH3[0]。
示例性的,如果參數m_a(即色調映射曲線參數a)大於Tm_ap(m_p),則執行生成第二參數的過程,即根據max_lum/MaxDisplay來調整MB[0][0]和TH3[0]。其中,Tm_ap可以是根據預設m_p_T與m_a_T的映射關係,例如查表(m_p_T,m_a_T)獲得的,m_p對應色調映射曲線參數p,將根據m_p獲得的m_a的預設值Tm_ap(m_p)為m_a_T。
示例性的,在對曲線參數MB_mid[0][0]和TH3_mid[0]進行調整時,輸入可以為顯示端設備的顯示亮度範圍的最高顯示亮度MaxDisplay(PQ域的值), 待處理幀的最大亮度校正值max_lum,元數據中的targeted_system_display_maximum_luminance(如果元數據中不存在targeted_system_display_maximum_luminance,則targeted_system_display_maximum_luminance等於MaxDisplay); 原始一次樣條曲線(即第一色調映射曲線中的一次樣條曲線)參數, MB[0][0],TH3[0];色彩訊號映射曲線參數Ptone_mapping,包含m_p、m_m、m_n、m_a、m_b、k1、k2、k3。輸出可以為一次樣條曲線(即第二色調映射曲線的一次樣條)參數, MB[0][0], TH3[0]。
作為一種可能的實現方式,曲線參數MB_mid[0][0]和TH3_mid[0],以及曲線參數MB[0][0]
Figure 02_image001
和TH3[0],滿足以下公式(26)和(27):
TH3[0]= TH3_mid[0]+(MaxSource- TH3_mid[0])*(WA)N2 (26)
MB[0][0]= MB_mid[0][0]+(1- MB_mid[0][0])*(WA)N1 (27) 其中,
Figure 02_image021
或者
Figure 02_image077
其中N1和N2為大於0的有理數,G(L)為映射曲線參數Tcurve 的逆函數。
作為另一種可能的實現方式,曲線參數MB_mid[0][0]和TH3_mid[0],以及曲線參數MB[0][0]
Figure 02_image001
和TH3[0],滿足以下公式(28)和(29): TH3[0]= TH3_mid[0]+(MaxLum-TH3_mid[0])*(WA)N2 (28) MB[0][0]= MB_mid[0][0]+(1- MB_mid[0][0])*(WA)N1 (29) 其中,
Figure 02_image107
或者
Figure 02_image077
其中MaxLum為最大亮度校正值 (MaxSource的調整值),G(L)為映射曲線參數Tcurve 的逆函數。
作為另一種可能的實現方式,曲線參數MB_mid[0][0]和TH3_mid[0],以及曲線參數MB[0][0]
Figure 02_image001
和TH3[0],滿足以下公式(30)和(31): MB[0][0]=min(max(MB_mid[0][0]+(1- MB_mid[0][0])*
Figure 02_image003
,MB_mid[0][0]),1) (30) TH3[0]=min(max(TH3_mid[0]+(max_lum-TH3_mid[0]*
Figure 02_image005
,TH3_mid[0]),1) (31) 其中,
Figure 02_image007
或者
Figure 02_image009
其中
Figure 02_image031
或者
Figure 02_image033
其中, L為輸入訊號,
Figure 02_image015
為色調映射曲線對應的函數H(L)的逆函數, m_a、m_b、m_m、m_n、k1、k2、k3為曲線參數, G(L,m_a_T)表示G(L)的參數M_a取值為m_a_T時輸入變量L對應的G(L)值,H(L,m_a_T)同理,N1、N2為有理數,例如N1、N2的默認值可以為0。max(a,b)表示求a和b中較大的一個值;min(a ,b)表示求a和b中較小的一個值。
在一些實施例中,k1、k2不同時為0,K3不為0。 示例性的,H(L)為以下幾種示例:
Figure 02_image109
或者
Figure 02_image111
需要說明的是,本申請實施例中,可以只包含獲取第二參數中的一次樣條參數的過程,而並不需要涉及獲得第二參數中除該一次樣條參數之外的參數的過程,即可以不需要涉及以下處理過程。
在一些可選的實施例中,所述第二參數包括三次樣條曲線參數,所述三次樣條曲線參數包括所述第二色調映射曲線上的三次樣條的插點值TH1[1]、TH2[1]、TH3[1],其中,TH1[1]表示所述三次樣條的第一區間像素點的亮度值的最小值,TH2[1]表示所述三次樣條的第一區間像素點的亮度值的最大值和所述三次樣條的第二區間像素點的亮度值的最小值,TH3[1]表示所述三次樣條的第二區間像素點的亮度值的最大值。示例性的,TH1[1]可以為TH1D的一個示例,TH2[1]可以為TH2D的一個示例,TH3[1]可以為TH3D的一個示例。
作為一種可能的實現方式,上述三次樣條的插點值TH1[1]、TH2[1]、TH3[1]可以根據所述第一參數中第二一次樣條曲線參數TH3[0]和三次樣條的插點值TH1[1]、TH2[1]、TH3[1]的計算相關值的預設偏移值,計算得到。示例性的,TH1[1]、TH2[1]、TH3[1]滿足如下公式(32)至(34):
TH1[1]= TH3[0]                                             (32)
TH2[1]= TH1[1]+B                                         (33)
TH3[1]= TH2[1]+C* TH2[1]- D*TH1[1]                      (34)
其中,B,C和D為所述三次樣條的插點值TH1[1]、TH2[1]、TH3[1]計算相關值的預設值,B為暗區過渡區像素點的亮度值對應的預設偏移值,C和D為亮區像素點的亮度值對應的預設加權係數。示例性的,B的默認值可以為0.15,C和D的默認值可以為0.5。
作為另一種可能的實現方式,上述三次樣條的插點值TH1[1]、TH2[1]、TH3[1]可以根據所述第一參數中第二一次樣條曲線參數TH3[0]和三次樣條的插點值TH1[1]、TH2[1]、TH3[1]的計算相關值,計算得到。示例性的,TH1[1]、TH2[1]、TH3[1]滿足如下公式(35)至(37):
TH1[1]=3Spline_TH [i][0][w]                                (35)
TH2[1]=3Spline_TH [i][0][w]+3Spline_TH_Delta1[i][1][w] (36)
TH3[1]=3Spline_TH[i][0][w]+3Spline_TH_Delta1[i][1][w] + 3Spline_TH_Delta1[i] [2][w]                (37)
其中,3Spline_TH [i][0][w]、3Spline_TH_Delta1[i][1][w]、3Spline_TH_Delta1[i] [2][w]為從元數據中提取的三次樣條的插點值TH1[1]、TH2[1]、TH3[1]計算相關值。
在一些可選的實施例中,可以獲取在第二色調映射曲線中TH1[1]、TH2[1]、TH3[1]對應的坐標(例如Y坐標),例如分別可以表示為VA1, VA2和VA3。其中,所述第二色調映射曲線中的一次樣條在TH3[0]處的Y坐標與所述第二色調映射曲線中的三次樣條在TH1[1]處的Y坐標相同,且所述一次樣條在TH3[0]處的一階導數與所述三次樣條在TH1[1]處的一階導數相同。
在一些可選的實施例中,所述第二色調映射曲線中的第一三次樣條在TH2[1]處的Y坐標與所述第二色調映射曲線中的第二三次樣條在TH2[1]處的Y坐標相同,且所述第一三次樣條在TH2[1]處的一階導數與所述第二三次樣條在TH2[1]處的一階導數相同。
在一些可選的實施例中,其特徵在於,所述第二色調映射曲線中的第二三次樣條在TH3[1]處的Y坐標與所述第二色調映射曲線中的第三色調映射函數在TH3[1]處的Y坐標相同,且所述第二三次樣條在TH3[1]處的一階導數與所述第三色調映射函數在TH3[1]處的一階導數相同。
示例性的,可以根據上述第二色調映射曲線中的一次樣條,獲得公式(38):
F(L)=MB[0][0]
Figure 02_image113
L                                     (38)
然後,將L設置為TH[1],計算得到TH[1]的坐標VA1,滿足下式(39):
VA1= MB[0][0]
Figure 02_image113
TH[1]                                       (39)
接下來,根據上述第二色調映射曲線中的第一三次樣條,獲取MA[0][1],MA[1][1],滿足下式(40)和(41):
MA[0][1]=VA1                                         (40)
MA[1][1]=VA2                                         (41)
然後,計算第二色調映射曲線中的第一三次樣條的一階導數GD1,使MB[0][1]=GD1,並計算第二色調映射曲線中的第二三次樣條在TH3[1]處的一階導數GD3,滿足下式(42)和(43):
MB[0][1]=GD1=MB[0][0]                               (42)
GD3=m_a
Figure 02_image115
m_m
Figure 02_image115
m_p
Figure 02_image115
K3
Figure 02_image115
m_n
Figure 02_image117
(43)
其中,
Figure 02_image119
之後,計算第二色調映射曲線中第一個三次樣條(即第一三次樣條)曲線在TH2[1]處的數值VA2[0],計算第二個三次樣條(即第二三次樣條)曲線在TH3[1]處的數值VA3[0],並使得VA3[0]= VA3。
計算第二個三次樣條曲線在TH3[1]處的導數GD3[0],使得GD3[0]=GD3。
計算該第一個三次樣條曲線和第二個三次樣條曲線分別在TH2[1] 的一階導數GD2[0]、GD2[1],使得GD2[0]= GD2[1]。
計算兩個三次樣條曲線在TH2[1]處的二階導數GGD2[0]、GGD2[1],使GGD2[0]=GGD2[1]。
綜上可得以下公式(44):
Figure 02_image121
(44) 其中,
Figure 02_image123
Figure 02_image125
通過上述計算,結合其他條件可以獲得第二參數中的MC[0][1],MD[0][1],MB[1][1],MC[1][1],MD[1][1]等參數。
因此,本申請實施例通過對第一色調映射曲線的參數進行進一步的調整,使得調整後的曲線參數(即第二參數)對應的色調映射曲線(即第二色調映射曲線)上的某一點的輸出亮度不高於該點對應的輸入亮度,從而有助於在圖像的最大顯示亮度與顯示設備的最大顯示亮度接近時,避免出現映射之後的終端設備的像素的亮度比原始的圖像還要亮的異常現象。
上文結合圖9對本申請實施例的動態範圍映射的方法進行了詳細的描述,下面結合圖10和圖11對本申請實施例的動態範圍映射的裝置進行描述,應理解,圖10和圖11所描述的動態範圍映射的裝置能夠執行圖9所示的動態範圍映射的方法的各個步驟,上文圖9中對各個步驟的限定同樣適用於圖10和圖11所示的裝置,因此,下面在描述圖10和圖11所示的裝置時,為了簡潔,適當省略重複的描述。
圖10是本申請實施例的動態範圍映射的裝置1000的示意性方塊圖。裝置1000包括獲取單元1010,處理單元1020和映射單元1030。
獲取單元1010,用於獲取終端設備的顯示參數。
所述獲取單元1010還用於獲取圖像數據的特徵訊息。
所述獲取單元1010還用於獲取所述圖像數據的第一色調映射曲線的第一參數。
處理單元1020,用於在預設條件成立時,根據所述第一參數、所述終端設備的顯示參數和所述圖像數據的特徵訊息,得到第二色調映射曲線的第二參數,其中,所述第二色調映射曲線上第一點處的輸出亮度不高於所述第二色調映射曲線上的所述第一點的輸入亮度。
映射單元1030,用於根據所述第二色調映射曲線的第二參數對所述圖像數據進行動態範圍映射。
在本申請某些實現方式中,符合下列任意之一的條件時,則所述預設條件成立:
根據所述第一參數對於圖像數據進行色調映射時,所述第一色調映射曲線上第二點處的輸出亮度高於所述第一色調映射曲線上的所述第二點處的輸入亮度;或者
所述第一參數中的參數pP1大於第一值Tp,其中,所述第一值Tp是根據所述第一參數中的aP1,以及預設的aP1與pP1的對應關係獲得的;或者
所述第一參數中的參數aP1大於第二值Ta,其中,所述第二值Ta是根據所述第一參數中的pP1,以及預設的aP1與pP1的對應關係獲得的;或者
所述第一參數中的參數aP1與參數pP1的乘積大於第三值Tap,其中,所述第三值Tap為預設的有理數。
在本申請某些實現方式中,所述第二參數包括第一一次樣條曲線參數,所述第一一次樣條曲線參數包括所述第二色調映射曲線中的第一一次樣條的斜率MB[0][0]
Figure 02_image001
或所述第一一次樣條的區間像素點的亮度值的最大值TH3[0]。
在本申請某些實現方式中,所述第一參數包括第二一次樣條曲線參數,所述第二一次樣條曲線參數包括所述第一色調映射曲線中的第二一次樣條的斜率MB_mid[0][0]和所述第二一次樣條的區間像素點的亮度值的最大值TH3_mid[0],所述顯示參數包括所述終端設備的最大顯示亮度MaxDisplay,所述特徵訊息包括所述圖像數據的最大亮度校正值max_lum;
其中,處理單元1020具體用於:
根據所述最大顯示亮度MaxDisplay、所述最大亮度校正值max_lum,對所述曲線參數MB_mid[0][0]和TH3_mid[0]進行調整,獲取所述曲線參數MB[0][0]
Figure 02_image001
和TH3[0]。
在本申請某些實現方式中,所述曲線參數MB_mid[0][0]和TH3_mid[0],以及所述曲線參數MB[0][0]
Figure 02_image001
和TH3[0],滿足以下公式:
MB[0][0]=min(max(MB_mid[0][0]+(1- MB_mid[0][0])*
Figure 02_image003
,MB_mid[0][0]),1)
TH3[0]=min(max(TH3_mid[0]+(max_lum-TH3_mid[0]*
Figure 02_image005
,TH3_mid[0]),1) 其中,
Figure 02_image007
或者
Figure 02_image009
其中
Figure 02_image031
或者
Figure 02_image033
其中, L為輸入訊號,
Figure 02_image015
為色調映射曲線對應的函數H(L)的逆函數, m_a、m_b、m_m、m_n、k1、k2、k3為曲線參數, G(L,m_a_T)表示G(L)的參數M_a取值為m_a_T時輸入變量L對應的G(L)值,同理H(L,m_a_T), N1、N2為有理數,max(a,b)表示求a和b中較大的一個值,min(a ,b)表示求a和b中較小的一個值,H(L)為
Figure 02_image017
或者,
Figure 02_image019
在本申請某些實現方式中,所述第二參數包括三次樣條曲線參數,所述三次樣條曲線參數包括所述第二色調映射曲線上的三次樣條的插點值TH1[1]、TH2[1]、TH3[1],其中,TH1[1]表示所述三次樣條的第一區間像素點的亮度值的最小值,TH2[1]表示所述三次樣條的第一區間像素點的亮度值的最大值和所述三次樣條的第二區間像素點的亮度值的最小值,TH3[1]表示所述三次樣條的第二區間像素點的亮度值的最大值。
在本申請某些實現方式中,所述三次樣條的插點值TH1[1]、TH2[1]、TH3[1]是根據所述第一參數中第二一次樣條曲線參數TH3[0]、所述插點值TH1[1]、TH2[1]、TH3[1]的預設偏移值得到的,如下所示:
TH1[1]= TH3[0];
TH2[1]= TH1[1]+B;
TH3[1]= TH2[1]+C* TH2[1]- D*TH1[1];
其中,B,C和D為所述三次樣條的插點值TH1[1]、TH2[1]、TH3[1]計算相關值的預設值,B為暗區過渡區像素點的亮度值對應的預設偏移值,C和D為亮區像素點的亮度值對應的預設加權係數。
在本申請某些實現方式中,所述三次樣條的插點值TH1[1]、TH2[1]、TH3[1]是根據所述第一參數中第二一次樣條曲線參數TH3[0]、所述插點值TH1[1]、TH2[1]、TH3[1]的計算相關值計算得到的,如下所示:
TH1[1]=3Spline_TH [i][0][w];
TH2[1]=3Spline_TH [i][0][w]+3Spline_TH_Delta1[i][1][w];
TH3[1]=3Spline_TH[i][0][w]+3Spline_TH_Delta1[i][1][w] + 3Spline_TH_Delta1[i] [2][w];
其中,3Spline_TH [i][0][w]、3Spline_TH_Delta1[i][1][w]、3Spline_TH_Delta1[i] [2][w]為從元數據中提取的所述插點值TH1[1]、TH2[1]、TH3[1]的計算相關值。
在本申請某些實現方式中,所述第二色調映射曲線中的一次樣條在TH3[0]處的Y坐標與所述第二色調映射曲線中的三次樣條在TH1[1]處的Y坐標相同,且所述一次樣條在TH3[0]處的一階導數與所述三次樣條在TH1[1]處的一階導數相同。
在本申請某些實現方式中,所述第二色調映射曲線中的第一三次樣條在TH2[1]處的Y坐標與所述第二色調映射曲線中的第二三次樣條在TH2[1]處的Y坐標相同,且所述第一三次樣條在TH2[1]處的一階導數與所述第二三次樣條在TH2[1]處的一階導數相同。
在本申請某些實現方式中,所述第二色調映射曲線中的第二三次樣條在TH3[1]處的Y坐標與所述第二色調映射曲線中的第三色調映射函數在TH3[1]處的Y坐標相同,且所述第二三次樣條在TH3[1]處的一階導數與所述第三色調映射函數在TH3[1]處的一階導數相同。
在本申請某些實現方式中,所述獲取單元1010具體用於:
獲取所述圖像數據的元數據;
根據所述元數據以及所述顯示參數,確定所述第一色調映射曲線的第一參數。
圖11是本申請實施例的動態範圍映射的裝置1100的硬體結構示意圖。圖11所示的裝置1100可以看成是一種計算機設備,裝置1100可以作為本申請實施例的動態範圍映射的裝置的一種實現方式,也可以作為本申請實施例的動態範圍映射的方法的一種實現方式,裝置1100包括處理器1101、記憶體1102、輸入/輸出介面1103和匯流排1105,還可以包括通訊介面1104。其中,處理器1101、記憶體1102、輸入/輸出介面1103和通訊介面1104通過匯流排1105實現彼此之間的通訊連接。
處理器1101可以採用通用的中央處理器(central processing unit,CPU),微處理器,應用專用積體電路(application specific integrated circuit,ASIC),或者一個或多個積體電路,用於執行相關程式,以實現本申請實施例的處理媒體數據的裝置中的模組所需執行的功能,或者執行本申請方法實施例的處理媒體數據的方法。處理器1101可能是一種積體電路晶片,具有訊號的處理能力。在實現過程中,上述方法的各步驟可以通過處理器701中的硬體的集成邏輯電路或者軟體形式的指令完成。上述的處理器1101可以是通用處理器、數位訊號處理器(digital signal processing,DSP)、專用積體電路(ASIC)、現場可程式化邏輯閘陣列(field programmable gate array,FPGA)或者其他可編程邏輯器件、分立門或者晶體管邏輯器件、分立硬體組件。可以實現或者執行本申請實施例中的公開的各方法、步驟及邏輯方塊圖。通用處理器可以是微處理器或者該處理器也可以是任何常規的處理器等。結合本申請實施例所公開的方法的步驟可以直接體現為硬體譯碼處理器執行完成,或者用譯碼處理器中的硬體及軟體模組組合執行完成。軟體模組可以位於隨機記憶體,閃存、唯讀記憶體,可編程唯讀記憶體或者電可擦寫可編程記憶體、寄存器等本領域成熟的儲存媒體中。該儲存媒體位於記憶體1102,處理器1101讀取記憶體1102中的訊息,結合其硬體完成本申請實施例的處理媒體數據的裝置中包括的模組所需執行的功能,或者執行本申請方法實施例的處理媒體數據的方法。
記憶體1102可以是唯讀記憶體(read only memory,ROM),靜態儲存設備,動態儲存設備或者隨機存取記憶體(random access memory,RAM)。記憶體1102可以儲存操作系統以及其他應用程式。在通過軟體或者韌體來實現本申請實施例的處理媒體數據的裝置中包括的模組所需執行的功能,或者執行本申請方法實施例的處理媒體數據的方法時,用於實現本申請實施例提供的技術方案的程式代碼保存在記憶體1102中,並由處理器1101來執行處理媒體數據的裝置中包括的模組所需執行的操作,或者執行本申請方法實施例提供的處理媒體數據的方法。
輸入/輸出介面1103用於接收輸入的數據和訊息,輸出操作結果等數據。
通訊介面1104使用例如但不限於收發器一類的收發裝置,來實現裝置1100與其他設備或通訊網路之間的通訊。可以作為處理裝置中的獲取模組或者發送模組。
匯流排1105可包括在裝置1100各個部件(例如處理器1101、記憶體1102、輸入/輸出介面1103和通訊介面1104)之間傳送訊息的通路。
應注意,儘管圖11所示的裝置1100僅僅示出了處理器1101、記憶體1102、輸入/輸出介面1103、通訊介面1104以及匯流排1105,但是在具體實現過程中,本領域的技術人員應當明白,裝置1100還包括實現正常運行所必須的其他器件,例如還可以包括顯示器,用於顯示要播放的視頻數據。同時,根據具體需要,本領域的技術人員應當明白,裝置1100還可包括實現其他附加功能的硬體器件。此外,本領域的技術人員應當明白,裝置1100也可僅僅包括實現本申請實施例所必須的器件,而不必包括圖11中所示的全部器件。
本領域普通技術人員可以意識到,結合本文中所公開的實施例描述的各示例的單元及演算法步驟,能夠以電子硬體、或者計算機軟體和電子硬體的結合來實現。這些功能究竟以硬體還是軟體方式來執行,取決於技術方案的特定應用和設計約束條件。專業技術人員可以對每個特定的應用來使用不同方法來實現所描述的功能,但是這種實現不應認為超出本申請的範圍。
本申請實施例還提供了一種計算機可讀儲存媒體,所述計算機可讀儲存媒體中儲存有指令,當其在計算機上運行時,使得計算機執行上述動態範圍映射的方法。
本申請實施例還提供了一種包含指令的計算機程式產品,當其在計算機上運行時,使得計算機執行上述動態範圍映射的方法。
本領域普通技術人員可以意識到,結合本文中所公開的實施例描述的各示例的單元及演算法步驟,能夠以電子硬體、或者計算機軟體和電子硬體的結合來實現。這些功能究竟以硬體還是軟體方式來執行,取決於技術方案的特定應用和設計約束條件。專業技術人員可以對每個特定的應用來使用不同方法來實現所描述的功能,但是這種實現不應認為超出本申請的範圍。
所屬領域的技術人員可以清楚地瞭解到,為描述的方便和簡潔,上述描述的系統、裝置和單元的具體工作過程,可以參考前述方法實施例中的對應過程,在此不再贅述。
在本申請所提供的幾個實施例中,應該理解到,所揭露的系統、裝置和方法,可以通過其它的方式實現。例如,以上所描述的裝置實施例僅僅是示意性的,例如,所述單元的劃分,僅僅為一種邏輯功能劃分,實際實現時可以有另外的劃分方式,例如多個單元或組件可以結合或者可以整合到另一個系統,或一些特徵可以忽略,或不執行。另一點,所顯示或討論的相互之間的耦合或直接耦合或通訊連接可以是通過一些介面,裝置或單元的間接耦合或通訊連接,可以是電性,機械或其它的形式。
所述作為分離部件說明的單元可以是或者也可以不是物理上分開的,作為單元顯示的部件可以是或者也可以不是物理單元,即可以位於一個地方,或者也可以分佈到多個網路單元上。可以根據實際的需要選擇其中的部分或者全部單元來實現本實施例方案的目的。
另外,在本申請各個實施例中的各功能單元可以整合在一個處理單元中,也可以是各個單元單獨物理存在,也可以兩個或兩個以上單元整合在一個單元中。
所述功能如果以軟體功能單元的形式實現並作為獨立的產品銷售或使用時,可以儲存在一個計算機可讀取儲存媒體中。基於這樣的理解,本申請的技術方案本質上或者說對現有技術做出貢獻的部分或者該技術方案的部分可以以軟體產品的形式體現出來,該計算機軟體產品儲存在一個儲存媒體中,包括若干指令用以使得一台計算機設備(可以是個人計算機,伺服器,或者網路設備等)執行本申請各個實施例所述方法的全部或部分步驟。而前述的儲存媒體包括:U盤、移動硬碟、唯讀記憶體(read-only memory,ROM)、隨機存取記憶體(random access memory,RAM)、磁碟或者光碟等各種可以儲存程式代碼的媒體。
以上所述,僅為本申請的具體實施方式,但本申請的保護範圍並不局限於此,任何熟悉本技術領域的技術人員在本申請揭露的技術範圍內,可輕易想到變化或替換,都應涵蓋在本申請的保護範圍之內。因此,本申請的保護範圍應以所述權利要求的保護範圍為准。
900:動態範圍映射方法 910:獲取圖像數據的特徵訊息和終端設備的顯示參數 920:獲取圖像數據的第一色調映射曲線的第一參數 930:在預設條件成立時,根據所述特徵訊息、顯示參數和第一參數,獲取第二色調映射曲線的第二參數 940:根據所述第二色調映射曲線的第二參數對所述圖像數據進行動態範圍映射 1000:裝置 1010:獲取單元 1020:處理單元 1030:映射單元 1100:裝置 1101:處理器 1102:記憶體 1103:輸入輸出介面 1104:通訊介面 1105:匯流排
圖1為PQ光電轉移函數的圖像。 圖2為HLG光電轉移函數的圖像。 圖3為SLF光電轉移函數的圖像。 圖4為本申請實施例提供的高動態範圍圖像的動態範圍調整曲線的示意圖。 圖5示出了sigmoid曲線的示意圖。 圖6示出了貝塞爾曲線的示意圖。 圖7為圖像的最大亮度與顯示設備的最大顯示亮度相同時的映射曲線的示例。 圖8示出了本申請實施例提供的系統架構的示意圖。 圖9示出了本申請實施例提供的動態範圍映射的方法的示意性流程圖。 圖10示出了本申請實施例提供的一種動態範圍映射的裝置的示意性方塊圖。 圖11示出了本申請實施例提供的另一種動態範圍映射的裝置的示意性方塊圖。
900:動態範圍映射方法
910:獲取圖像數據的特徵訊息和終端設備的顯示參數
920:獲取圖像數據的第一色調映射曲線的第一參數
930:在預設條件成立時,根據所述特徵訊息、顯示參數和第一參數,獲取第二色調映射曲線的第二參數
940:根據所述第二色調映射曲線的第二參數對所述圖像數據進行 動態範圍映射

Claims (24)

  1. 一種動態範圍映射方法,包括:獲取終端設備的顯示參數;獲取圖像數據的特徵訊息;獲取所述圖像數據的第一色調映射曲線的第一參數;在預設條件成立時,根據所述第一參數、所述終端設備的顯示參數和所述圖像數據的特徵訊息,得到第二色調映射曲線的第二參數,其中,所述第二色調映射曲線上第一點處的輸出亮度不高於所述第二色調映射曲線上的所述第一點的輸入亮度;根據所述第二色調映射曲線的第二參數對所述圖像數據進行動態範圍映射。
  2. 如請求項1所述的動態範圍映射方法,其中,符合下列任意之一的條件時,則所述預設條件成立:根據所述第一參數對於圖像數據進行色調映射時,所述第一色調映射曲線上第二點處的輸出亮度高於所述第一色調映射曲線上的所述第二點處的輸入亮度;或者所述第一參數中的參數pP1大於第一值Tp,其中,所述第一值Tp是根據所述第一參數中的aP1,以及預設的aP1與pP1的對應關係獲得的;或者所述第一參數中的參數aP1大於第二值Ta,其中,所述第二值Ta是根據所述第一參數中的pP1,以及預設的aP1與pP1的對應關係獲得的;或者所述第一參數中的參數aP1與參數pP1的乘積大於第三值Tap,其中,所述第三值Tap為預設的有理數。
  3. 如請求項1或2所述的動態範圍映射方法,其中,所述第二參數包括第一一次樣條曲線參數,所述第一一次樣條曲線參數包括所述第二色調映射曲線中的第一一次樣條的斜率MB[0][0]或所述第一一次樣條的區間像素點的亮度值的最大值TH3[0]。
  4. 如請求項1或2所述的動態範圍映射方法,其特徵在於,所述第一參數包括第二一次樣條曲線參數,所述第二一次樣條曲線參數包括所述第一色調映射曲線中的第二一次樣條的斜率MB_mid[0][0]和所述第二一次樣條的區間像素點的亮度值的最大值TH3_mid[0],所述顯示參數包括所述終端設備的最大顯示亮度MaxDisplay,所述特徵訊息包括所述圖像數據的最大亮度校正值max_lum;其中,所述根據所述第一參數、所述顯示參數和所述特徵訊息,獲取第二色調映射曲線的第二參數,包括:根據所述最大顯示亮度MaxDisplay、所述最大亮度校正值max_lum,對所述曲線參數MB_mid[0][0]和TH3_mid[0]進行調整,獲取所述曲線參數MB[0][0]和TH3[0]。
  5. 如請求項4所述的動態範圍映射方法,其中,所述曲線參數MB_mid[0][0]和TH3_mid[0],以及所述曲線參數MB[0][0]和TH3[0],滿足以下公式:
    Figure 110113789-A0305-02-0075-15
    TH3_mid[0]),1)其中,
    Figure 110113789-A0305-02-0076-3
    或者
    Figure 110113789-A0305-02-0076-2
    其中,L為輸入訊號,G(L)為色調映射曲線對應的函數H(L)的逆函數,m_a、m_b、m_m、m_n、k1、k2、k3為曲線參數,G(L,m_a_T)表示G(L)的參數M_a取值為m_a_T時輸入變量L對應的G(L)值N1、N2為有理數,max(a,b)表示求a和b中較大的一個值,min(a,b)表示求a和b中較小的一個值,H(L)為
    Figure 110113789-A0305-02-0076-18
    或者,
    Figure 110113789-A0305-02-0076-19
  6. 如請求項1或2所述的動態範圍映射方法,其中,所述第二參數包括三次樣條曲線參數,所述三次樣條曲線參數包括所述第二色調映射曲線上的三次樣條的插點值TH1[1]、TH2[1]、TH3[1],其中,TH1[1]表示所述三次樣條的第一區間像素點的亮度 值的最小值,TH2[1]表示所述三次樣條的第一區間像素點的亮度值的最大值和所述三次樣條的第二區間像素點的亮度值的最小值,TH3[1]表示所述三次樣條的第二區間像素點的亮度值的最大值。
  7. 如請求項6所述的動態範圍映射方法,其中,所述三次樣條的插點值TH1[1]、TH2[1]、TH3[1]是根據所述第一參數中第二一次樣條曲線參數TH3[0]、所述插點值TH1[1]、TH2[1]、TH3[1]的預設偏移值得到的,如下所示:TH1[1]=TH3[0];TH2[1]=TH1[1]+B;TH3[1]=TH2[1]+C* TH2[1]-D*TH1[1];其中,B,C和D為所述三次樣條的插點值TH1[1]、TH2[1]、TH3[1]計算相關值的預設值,B為暗區過渡區像素點的亮度值對應的預設偏移值,C和D為亮區像素點的亮度值對應的預設加權係數。
  8. 如請求項6所述的動態範圍映射方法,其中,所述三次樣條的插點值TH1[1]、TH2[1]、TH3[1]是根據所述第一參數中第二一次樣條曲線參數TH3[0]、所述插點值TH1[1]、TH2[1]、TH3[1]的計算相關值計算得到的,如下所示:TH1[1]=3Spline_TH[i][0][w];TH2[1]=3Spline_TH[i][0][w]+3Spline_TH_Deltal[i][1][w];TH3[1]=3Spline_TH[i][0][w]+3Spline_TH_Deltal[i][1][w]+3Spline_TH_Deltal[i][2][w]; 其中,3Spline_TH[i][0][w]、3Spline_TH_Deltal[i][1][w]、3Spline_TH_Deltal[i][2][w]為從元數據中提取的所述插點值TH1[1]、TH2[1]、TH3[1]的計算相關值。
  9. 如請求項8所述的動態範圍映射方法,其中,所述第二色調映射曲線中的一次樣條在TH3[0]處的Y坐標與所述第二色調映射曲線中的三次樣條在TH1[1]處的Y坐標相同,且所述一次樣條在TH3[0]處的一階導數與所述三次樣條在TH1[1]處的一階導數相同。
  10. 如請求項8所述的動態範圍映射方法,其中,所述第二色調映射曲線中的第一三次樣條在TH2[1]處的Y坐標與所述第二色調映射曲線中的第二三次樣條在TH2[1]處的Y坐標相同,且所述第一三次樣條在TH2[1]處的一階導數與所述第二三次樣條在TH2[1]處的一階導數相同。
  11. 如請求項8所述的動態範圍映射方法,其中,所述第二色調映射曲線中的第二三次樣條在TH3[1]處的Y坐標與所述第二色調映射曲線中的第三色調映射函數在TH3[1]處的Y坐標相同,且所述第二三次樣條在TH3[1]處的一階導數與所述第三色調映射函數在TH3[1]處的一階導數相同。
  12. 如請求項1或2所述的動態範圍映射方法,其中,所述獲取所述圖像數據的第一色調映射曲線的第一參數,包括:獲取所述圖像數據的元數據;根據所述元數據以及所述顯示參數,確定所述第一色調映射曲線的第 一參數。
  13. 一種動態範圍映射裝置,包括:獲取單元,用於獲取終端設備的顯示參數;所述獲取單元還用於獲取圖像數據的特徵訊息;所述獲取單元還用於獲取所述圖像數據的第一色調映射曲線的第一參數;處理單元,用於在預設條件成立時,根據所述第一參數、所述終端設備的顯示參數和所述圖像數據的特徵訊息,得到第二色調映射曲線的第二參數,其中,所述第二色調映射曲線上第一點處的輸出亮度不高於所述第二色調映射曲線上的所述第一點的輸入亮度;映射單元,用於根據所述第二色調映射曲線的第二參數對所述圖像數據進行動態範圍映射。
  14. 如請求項13所述的動態範圍映射裝置,其中,符合下列任意之一的條件時,則所述預設條件成立:根據所述第一參數對於圖像數據進行色調映射時,所述第一色調映射曲線上第二點處的輸出亮度高於所述第一色調映射曲線上的所述第二點處的輸入亮度;或者所述第一參數中的參數pP1大於第一值Tp,其中,所述第一值Tp是根據所述第一參數中的aP1,以及預設的aP1與pP1的對應關係獲得的;或者所述第一參數中的參數aP1大於第二值Ta,其中,所述第二值Ta是根據所述第一參數中的pP1,以及預設的aP1與pP1的對應關係獲得的;或者所述第一參數中的參數aP1與參數pP1的乘積大於第三值Tap,其中,所 述第三值Tap為預設的有理數。
  15. 如請求項13或14所述的動態範圍映射裝置,其中,所述第二參數包括第一一次樣條曲線參數,所述第一一次樣條曲線參數包括所述第二色調映射曲線中的第一一次樣條的斜率MB[0][0]或所述第一一次樣條的區間像素點的亮度值的最大值TH3[0]。
  16. 如請求項13或14所述的動態範圍映射裝置,其中,所述第一參數包括第二一次樣條曲線參數,所述第二一次樣條曲線參數包括所述第一色調映射曲線中的第二一次樣條的斜率MB_mid[0][0]和所述第二一次樣條的區間像素點的亮度值的最大值TH3_mid[0],所述顯示參數包括所述終端設備的最大顯示亮度MaxDisplay,所述特徵訊息包括所述圖像數據的最大亮度校正值max_lum;其中,處理單元具體用於:根據所述最大顯示亮度MaxDisplay、所述最大亮度校正值max_lum,對所述曲線參數MB_mid[0][0]和TH3_mid[0]進行調整,獲取所述曲線參數MB[0][0]和TH3[0]。
  17. 如請求項16所述的動態範圍映射裝置,其中,所述曲線參數MB_mid[0][0]和TH3_mid[0],以及所述曲線參數MB[0][0]和TH3[0],滿足以下公式:
    Figure 110113789-A0305-02-0080-16
    Figure 110113789-A0305-02-0081-17
    其中,
    Figure 110113789-A0305-02-0081-6
    或者
    Figure 110113789-A0305-02-0081-7
    其中,L為輸入訊號,G(L)為色調映射曲線對應的函數H(L)的逆函數,m_a、m_b、m_m、m_n、k1、k2、k3為曲線參數,G(L,m_a_T)表示G(L)的參數M_a取值為m_a_T時輸入變量L對應的G(L)值N1、N2為有理數,max(a,b)表示求a和b中較大的一個值,min(a,b)表示求a和b中較小的一個值,H(L)為
    Figure 110113789-A0305-02-0081-9
    或者,
    Figure 110113789-A0305-02-0081-11
  18. 如請求項13或14所述的裝置,其中,所述第二參數包括三次樣條曲線參數,所述三次樣條曲線參數包括所述第二色調映射曲線上的三次樣條的插點值TH1[1]、TH2[1]、TH3[1],其 中,TH1[1]表示所述三次樣條的第一區間像素點的亮度值的最小值,TH2[1]表示所述三次樣條的第一區間像素點的亮度值的最大值和所述三次樣條的第二區間像素點的亮度值的最小值,TH3[1]表示所述三次樣條的第二區間像素點的亮度值的最大值。
  19. 如請求項18所述的動態範圍映射裝置,其中,所述三次樣條的插點值TH1[1]、TH2[1]、TH3[1]是根據所述第一參數中第二一次樣條曲線參數TH3[0]、所述插點值TH1[1]、TH2[1]、TH3[1]的預設偏移值得到的,如下所示:TH1[1]=TH3[0];TH2[1]=TH1[1]+B;TH3[1]=TH2[1]+C* TH2[1]-D*TH1[1];其中,B,C和D為所述三次樣條的插點值TH1[1]、TH2[1]、TH3[1]計算相關值的預設值,B為暗區過渡區像素點的亮度值對應的預設偏移值,C和D為亮區像素點的亮度值對應的預設加權係數。
  20. 如請求項18所述的動態範圍映射裝置,其中,所述三次樣條的插點值TH1[1]、TH2[1]、TH3[1]是根據所述第一參數中第二一次樣條曲線參數TH3[0]、所述插點值TH1[1]、TH2[1]、TH3[1]的計算相關值計算得到的,如下所示:TH1[1]=3Spline_TH[i][0][w];TH2[1]=3Spline_TH[i][0][w]+3Spline_TH_Deltal[i][1][w];TH3[1]=3Spline_TH[i][0][w]+3Spline_TH_Deltal[i][1][w]+3Spline_TH_Deltal[i][2][w]; 其中,3Spline_TH[i][0][w]、3Spline_TH_Deltal[i][1][w]、3Spline_TH_Deltal[i][2][w]為從元數據中提取的所述插點值TH1[1]、TH2[1]、TH3[1]的計算相關值。
  21. 如請求項20所述的動態範圍映射裝置,其中,所述第二色調映射曲線中的一次樣條在TH3[0]處的Y坐標與所述第二色調映射曲線中的三次樣條在TH1[1]處的Y坐標相同,且所述一次樣條在TH3[0]處的一階導數與所述三次樣條在TH1[1]處的一階導數相同。
  22. 如請求項20所述的動態範圍映射裝置,其中,所述第二色調映射曲線中的第一三次樣條在TH2[1]處的Y坐標與所述第二色調映射曲線中的第二三次樣條在TH2[1]處的Y坐標相同,且所述第一三次樣條在TH2[1]處的一階導數與所述第二三次樣條在TH2[1]處的一階導數相同。
  23. 如請求項20所述的動態範圍映射裝置,其中,所述第二色調映射曲線中的第二三次樣條在TH3[1]處的Y坐標與所述第二色調映射曲線中的第三色調映射函數在TH3[1]處的Y坐標相同,且所述第二三次樣條在TH3[1]處的一階導數與所述第三色調映射函數在TH3[1]處的一階導數相同。
  24. 如請求項13或14所述的裝置,其中,所述獲取單元具體用於:獲取所述圖像數據的元數據;根據所述元數據以及所述顯示參數,確定所述第一色調映射曲線的第 一參數。
TW110113789A 2020-04-30 2021-04-16 動態範圍映射的方法和裝置 TWI790596B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN202010365696.3 2020-04-30
CN202010365696.3A CN113596424B (zh) 2020-04-30 2020-04-30 动态范围映射的方法和装置

Publications (2)

Publication Number Publication Date
TW202143693A TW202143693A (zh) 2021-11-16
TWI790596B true TWI790596B (zh) 2023-01-21

Family

ID=78237389

Family Applications (1)

Application Number Title Priority Date Filing Date
TW110113789A TWI790596B (zh) 2020-04-30 2021-04-16 動態範圍映射的方法和裝置

Country Status (7)

Country Link
US (1) US20230054046A1 (zh)
EP (1) EP4135316A4 (zh)
JP (1) JP7462072B2 (zh)
KR (1) KR20230003066A (zh)
CN (2) CN113596424B (zh)
TW (1) TWI790596B (zh)
WO (1) WO2021218924A1 (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11734806B2 (en) 2021-11-24 2023-08-22 Roku, Inc. Dynamic tone mapping
CN113850743B (zh) * 2021-11-30 2022-03-01 江苏游隼微电子有限公司 一种基于自适应参数的视频全局色调映射方法
CN114359083B (zh) * 2021-12-24 2022-11-29 北京航空航天大学 一种面向干扰环境的高动态热红外图像自适应预处理方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1645942A (zh) * 2004-01-22 2005-07-27 柯尼卡美能达影像株式会社 图像处理装置、摄影装置、图像处理方法及图像处理程序
WO2008136629A1 (en) * 2007-05-03 2008-11-13 Mtekvision Co., Ltd. Image brightness controlling apparatus and method thereof
US20170034520A1 (en) * 2015-07-28 2017-02-02 Canon Kabushiki Kaisha Method, apparatus and system for encoding video data for selected viewing conditions
CN107211182A (zh) * 2015-05-26 2017-09-26 松下电器(美国)知识产权公司 显示方法和显示装置
CN109155844A (zh) * 2016-05-16 2019-01-04 Lg 电子株式会社 图像处理设备和使用该图像处理设备的图像处理方法

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104364820B (zh) * 2012-10-08 2018-04-10 皇家飞利浦有限公司 具有颜色约束的亮度改变图像处理
US20180152686A1 (en) * 2016-11-28 2018-05-31 Microsoft Technology Licensing, Llc Tone mapping functions for rendering high dynamic range video on enhanced dynamic range display devices
US10403214B2 (en) * 2017-05-12 2019-09-03 Apple Inc. Electronic devices with tone mapping to accommodate simultaneous display of standard dynamic range and high dynamic range content
JP7184544B2 (ja) 2018-06-08 2022-12-06 シャープ株式会社 表示制御装置、表示装置、テレビジョン、及び表示制御方法
US10863157B2 (en) 2018-07-06 2020-12-08 Samsung Electronics Co., Ltd. Guided tone mapping of high dynamic range video based on a Bezier curve for presentation on a display device
CN110867172B (zh) * 2019-11-19 2021-02-26 苹果公司 动态控制标准动态范围和高动态范围内容的电子设备

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1645942A (zh) * 2004-01-22 2005-07-27 柯尼卡美能达影像株式会社 图像处理装置、摄影装置、图像处理方法及图像处理程序
WO2008136629A1 (en) * 2007-05-03 2008-11-13 Mtekvision Co., Ltd. Image brightness controlling apparatus and method thereof
CN107211182A (zh) * 2015-05-26 2017-09-26 松下电器(美国)知识产权公司 显示方法和显示装置
US20170034520A1 (en) * 2015-07-28 2017-02-02 Canon Kabushiki Kaisha Method, apparatus and system for encoding video data for selected viewing conditions
CN109155844A (zh) * 2016-05-16 2019-01-04 Lg 电子株式会社 图像处理设备和使用该图像处理设备的图像处理方法

Also Published As

Publication number Publication date
JP2023523775A (ja) 2023-06-07
CN113596424A (zh) 2021-11-02
JP7462072B2 (ja) 2024-04-04
TW202143693A (zh) 2021-11-16
WO2021218924A1 (zh) 2021-11-04
CN113596424B (zh) 2022-12-06
US20230054046A1 (en) 2023-02-23
KR20230003066A (ko) 2023-01-05
EP4135316A4 (en) 2023-09-13
EP4135316A1 (en) 2023-02-15
CN116132648A (zh) 2023-05-16

Similar Documents

Publication Publication Date Title
TWI790596B (zh) 動態範圍映射的方法和裝置
US11183143B2 (en) Transitioning between video priority and graphics priority
US11030729B2 (en) Image processing method and apparatus for adjusting a dynamic range of an image
CN111885312B (zh) Hdr图像的成像方法、系统、电子设备及存储介质
WO2017203942A1 (ja) 画像処理装置、および画像処理方法、並びにプログラム
US10332481B2 (en) Adaptive display management using 3D look-up table interpolation
CN114866809B (zh) 视频转换方法、装置、设备、存储介质及程序产品
WO2021073304A1 (zh) 一种图像处理的方法及装置
CN111724316B (zh) 处理高动态范围图像的方法和装置
JPWO2018047557A1 (ja) 画像処理装置、および画像処理方法、並びにプログラム
US20230140259A1 (en) Image dynamic range processing method and apparatus
CN107197235A (zh) 一种hdr视频预处理方法
JP6860415B2 (ja) 映像信号変換装置、ダイナミックレンジ変換装置およびそれらのプログラム
CN116167950B (zh) 图像处理方法、装置、电子设备及存储介质
WO2021073209A1 (zh) 处理高动态范围图像的方法和装置
EP3108451A1 (en) Image processing to retain small color/gray differences
JP2023525284A (ja) エンコーダ、デコーダ、システム、およびトーンマッピング曲線パラメータを決定するための方法