JP2019506817A5 - - Google Patents

Download PDF

Info

Publication number
JP2019506817A5
JP2019506817A5 JP2018545548A JP2018545548A JP2019506817A5 JP 2019506817 A5 JP2019506817 A5 JP 2019506817A5 JP 2018545548 A JP2018545548 A JP 2018545548A JP 2018545548 A JP2018545548 A JP 2018545548A JP 2019506817 A5 JP2019506817 A5 JP 2019506817A5
Authority
JP
Japan
Prior art keywords
luminance
images
image
video
dynamic range
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2018545548A
Other languages
Japanese (ja)
Other versions
JP2019506817A (en
JP6831389B2 (en
Filing date
Publication date
Application filed filed Critical
Priority claimed from PCT/EP2016/077373 external-priority patent/WO2017089146A1/en
Publication of JP2019506817A publication Critical patent/JP2019506817A/en
Publication of JP2019506817A5 publication Critical patent/JP2019506817A5/ja
Application granted granted Critical
Publication of JP6831389B2 publication Critical patent/JP6831389B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Claims (15)

２つの画像又は２つのビデオのうちの１つが高ダイナミックレンジの画像又はビデオである、複数の画像のうちの当該２つの画像又は２つのビデオを合成するための装置であって、前記装置は、
複数の画像のうちの前記２つの画像又は前記２つのビデオのうちの少なくとも１つの画像又はビデオの最大輝度と、複数の画像のうちの前記２つの画像又は前記２つのビデオをレンダリングするためのディスプレイのピーク明度とのうちの少なくとも１つに基づいて決定される最大輝度を少なくとも特徴とする合成輝度ダイナミックレンジを確立するダイナミックレンジ確立ユニットであって、前記ダイナミックレンジ確立ユニットが、前記合成輝度ダイナミックレンジにおけるアンカー輝度を決定する輝度アンカー決定ユニットをさらに含む、ダイナミックレンジ確立ユニットと、
前記２つの画像又はビデオの少なくとも１つに少なくとも輝度変換を実行する色変換ユニットであって、前記色変換ユニットは、前記２つの画像又はビデオの第１の画像又はビデオを供給する第１のソースからのメタデータから少なくとも１つのソースアンカー輝度を読み出すソースアンカー輝度読み出しユニットを含み、前記色変換ユニットは、前記第１の画像又はビデオに適用される色変換を確立し、前記色変換は、前記ソースアンカー輝度が前記アンカー輝度の近傍の出力輝度にマッピングされるという性質を有することによって、前記ソースアンカー輝度の値に依存する、色変換ユニットと、
複数の画像のうちの前記２つの画像又は２つのビデオを合成して、少なくとも１つの出力画像を形成する画像合成ユニットと
を含む、装置。 An apparatus for combining two images or two videos of a plurality of images, wherein one of the two images or two videos is a high dynamic range image or video, the apparatus comprising:
A maximum brightness of at least one image or video of the two images or the two videos of the plurality of images, and a display for rendering the two images or the two videos of the plurality of images A dynamic range establishing unit that establishes a composite luminance dynamic range characterized by at least a maximum luminance determined based on at least one of the peak brightness of the composite luminance dynamic range. A dynamic range establishing unit, further comprising a luminance anchor determining unit that determines an anchor luminance in;
A color conversion unit for performing at least a luminance conversion on at least one of said two images or videos, said color conversion unit being a first source providing a first image or video of said two images or videos A source anchor luminance readout unit that reads at least one source anchor luminance from metadata from the control unit, wherein the color conversion unit establishes a color conversion applied to the first image or video, wherein the color conversion comprises: A color conversion unit that depends on the value of the source anchor luminance by having the property that the source anchor luminance is mapped to an output luminance near the anchor luminance;
An image combining unit for combining the two images or two videos of the plurality of images to form at least one output image. 前記色変換ユニットは、少なくとも１つの前記ソースアンカー輝度と等しい前記第１の画像又はビデオのピクセルの色の入力輝度に前記色変換を適用した結果として決定される出力輝度が、前記アンカー輝度と等しくなるように、前記色変換を決定する、請求項１に記載の装置。   The color conversion unit is configured such that an output luminance determined as a result of applying the color conversion to an input luminance of a color of the first image or video pixel equal to at least one of the source anchor luminances is equal to the anchor luminance. The apparatus of claim 1, wherein the color conversion is determined to: 前記色変換ユニットは、第２の入力輝度に前記色変換を適用した結果として決定される第２の出力輝度を前記出力輝度で割った輝度比が、前記第２の入力輝度を前記ソースアンカー輝度で割った比の定数倍になるように、前記色変換を決定する、請求項２に記載の装置。   The color conversion unit is configured to calculate a luminance ratio obtained by dividing a second output luminance determined as a result of applying the color conversion to a second input luminance by the output luminance, and to calculate the second input luminance by the source anchor luminance. The apparatus of claim 2, wherein the color conversion is determined to be a constant multiple of a ratio divided by: 前記色変換ユニットは、少なくとも１つの前記ソースアンカー輝度に基づいて輝度オフセットを決定する偏差決定ユニットを含み、前記色変換ユニットは、少なくとも１つの前記ソースアンカー輝度と等しい前記第１の画像又はビデオのピクセルの色の入力輝度に前記色変換を適用した結果として決定される出力輝度が、前記アンカー輝度と前記輝度オフセットとの和と等しくなるように、前記色変換を決定する、請求項１乃至３のいずれか一項に記載の装置。   The color conversion unit includes a deviation determination unit that determines a luminance offset based on at least one of the source anchor luminances, wherein the color conversion unit is equal to at least one of the source anchor luminances. The color conversion is determined such that an output luminance determined as a result of applying the color conversion to an input luminance of a pixel color is equal to a sum of the anchor luminance and the luminance offset. An apparatus according to any one of the preceding claims. 前記色変換ユニットは、前記２つの画像又はビデオの第２の画像又はビデオを供給する第２のソースから得られた少なくとも１つの第２のソースアンカー輝度を読み出し、前記偏差決定ユニットは、少なくとも１つの前記第２のソースアンカー輝度にも基づいて前記輝度オフセットを決定する、請求項４に記載の装置。 The color conversion unit reads at least one second source anchor luminance obtained from a second source that supplies a second image or video of the two images or videos, and the deviation determination unit includes at least one The apparatus of claim 4, wherein the luminance offset is determined based on two of the second source anchor luminances. 前記色変換ユニットは、前記第１の画像又はビデオを、前記第１の画像又はビデオの符号化に関連するダイナミックレンジから、少なくとも乗算係数２だけ異なるピーク明度を有するダイナミックレンジにマッピングするために前記第１の画像又はビデオにおけるオブジェクトの輝度分布の変化を指定する第１の色再マッピング関数にも依存して前記第１の画像又はビデオに適用される色変換を確立し、又は、前記色変換ユニットは、第２の画像又はビデオを、前記第２の画像又はビデオの符号化に関連するダイナミックレンジから、少なくとも乗算係数２だけ異なるピーク明度を有するダイナミックレンジにマッピングするために前記第２の画像又はビデオにおけるオブジェクトの輝度分布の変化を指定する第２の色再マッピング関数にも依存して前記第２の画像又はビデオに適用される色変換を確立する、請求項１乃至５のいずれか一項に記載の装置。 The color conversion unit is operable to map the first image or video from a dynamic range associated with encoding the first image or video to a dynamic range having a peak brightness that differs by at least a factor of two. Establishing a color transformation to be applied to the first image or video, also depending on a first color remapping function specifying a change in the luminance distribution of the object in the first image or video, or unit, the second image or video, from said second image or dynamic range associated with the encoding of video, the second image to be mapped to a dynamic range of at least multiplication factor 2 by different peak brightness Or a second color remapping function that specifies the change in the luminance distribution of the object in the video It exists to establish the color conversion to be applied to the second image or video, the apparatus according to any one of claims 1 to 5. 前記ダイナミックレンジ確立ユニットは、前記２つの画像又はビデオのうちの少なくとも１つに存在する輝度に依存して、前記合成輝度ダイナミックレンジを確立する、請求項１乃至６のいずれか一項に記載の装置。   The dynamic range establishing unit according to claim 1, wherein the dynamic range establishing unit establishes the composite luminance dynamic range depending on luminance present in at least one of the two images or videos. apparatus. 前記ダイナミックレンジ確立ユニットは、少なくとも１つの前記出力画像がレンダリングされるディスプレイのピーク明度に依存して、及び好ましくは視聴環境の明度特性にも依存して、前記合成輝度ダイナミックレンジを確立する、請求項７に記載の装置。   The dynamic range establishing unit establishes the composite luminance dynamic range depending on a peak brightness of a display on which at least one of the output images is rendered, and preferably also on a brightness characteristic of a viewing environment. Item 8. The apparatus according to Item 7. 前記輝度アンカー決定ユニットは、前記合成輝度ダイナミックレンジ、前記２つの画像又はビデオの少なくとも１つの画像又はビデオの輝度、少なくとも１つの前記出力画像がレンダリングされるディスプレイのピーク明度、及び視聴環境の明度特性のうちの少なくとも１つに依存して前記アンカー輝度を決定する、請求項１乃至８のいずれか一項に記載の装置。   The luminance anchor determination unit comprises: the composite luminance dynamic range; the luminance of at least one image or video of the two images or videos; a peak brightness of a display on which at least one output image is rendered; and a brightness characteristic of a viewing environment. Apparatus according to any one of the preceding claims, wherein the anchor luminance is determined depending on at least one of the following. ２つの画像又は２つのビデオのうちの１つが高ダイナミックレンジの画像又はビデオである、複数の画像のうちの当該２つの画像又は２つのビデオを合成するための方法であって、前記方法は、
複数の画像のうちの前記２つの画像又は前記２つのビデオのうちの少なくとも１つの画像又はビデオの最大輝度、及び、複数の画像のうちの前記２つの画像又は前記２つのビデオをレンダリングするためのディスプレイのピーク明度の少なくとも１つに基づいて決定される最大輝度を少なくとも特徴とする合成輝度ダイナミックレンジを確立するステップであって、前記確立するステップが、前記合成輝度ダイナミックレンジにおけるアンカー輝度を決定するステップをさらに含む、確立するステップと、
前記２つの画像又はビデオの少なくとも１つに少なくとも輝度変換から構成される色変換を適用するステップであって、前記色変換は、前記２つの画像又はビデオの第１の画像又はビデオを供給する第１のソースからのメタデータから読み出されるソースアンカー輝度の値に基づいて確立され、前記色変換は、前記ソースアンカー輝度が前記アンカー輝度の近傍の出力輝度にマッピングされるという性質を有する、適用するステップと、
複数の画像のうちの前記２つの画像又は２つのビデオを前記合成輝度ダイナミックレンジにおけるそれらのピクセル色を用いて合成して、少なくとも１つの出力画像を形成するステップと
を有する、方法。 A method for combining two images or two videos of a plurality of images, wherein one of the two images or two videos is a high dynamic range image or video, the method comprising:
A maximum brightness of at least one image or video of the two images or the two videos of the plurality of images, and for rendering the two images or the two videos of the plurality of images. Establishing a composite luminance dynamic range characterized at least by a maximum luminance determined based on at least one of the peak brightness of the display, the establishing step determining an anchor luminance in the composite luminance dynamic range. Establishing, further comprising:
Applying a color transformation comprising at least a luminance transformation to at least one of the two images or videos, the color transformation providing a first image or video of the two images or videos. The color transformation is established based on a value of the source anchor luminance read from metadata from one source, wherein the color transformation has a property that the source anchor luminance is mapped to an output luminance near the anchor luminance. Steps and
Combining the two images or two videos of the plurality of images with their pixel colors in the composite luminance dynamic range to form at least one output image. 前記色変換は、少なくとも１つの前記ソースアンカー輝度と等しい前記第１の画像又はビデオのピクセルの色の入力輝度に前記色変換を適用した結果として決定される出力輝度が、前記アンカー輝度と等しくなるように又は前記アンカー輝度と決定された差との和と等しくなるように、決定される、請求項１０に記載の方法。   The color conversion is such that an output luminance determined as a result of applying the color conversion to an input luminance of a color of the first image or video pixel equal to at least one of the source anchor luminances is equal to the anchor luminance. 11. The method of claim 10, wherein the method is determined to be equal to or the sum of the anchor luminance and the determined difference. 前記色変換は、第２の入力輝度に前記色変換を適用した結果として決定される第２の出力輝度を前記出力輝度で割った輝度比が、前記第２の入力輝度を前記ソースアンカー輝度で割った比の定数倍になるように、決定される、請求項１０又は１１に記載の方法。   In the color conversion, a luminance ratio obtained by dividing a second output luminance determined as a result of applying the color conversion to a second input luminance by the output luminance is obtained by dividing the second input luminance by the source anchor luminance. The method according to claim 10 or 11, wherein the ratio is determined to be a constant multiple of the divided ratio. 複数の画像のうちの第２の画像又はビデオの色変換は、前記２つの画像又はビデオの第２の画像又はビデオを供給する第２のソースから得られた少なくとも１つの第２のソースアンカー輝度に基づいて決定される、請求項１０乃至１２のいずれか一項に記載の方法。 Color conversion of the second image or video of the plurality of images, the two images or at least one second source anchor brightness of the second image or video of the video obtained from the second source supplies The method according to claim 10, wherein the method is determined on the basis of: 前記少なくとも２つの画像又はビデオのそれぞれに適用される前記色変換の少なくとも１つは、それぞれの画像又はビデオが、当該画像又はビデオが符号化される対応するダイナミックレンジから少なくとも２倍以上又はそれ以下のダイナミックレンジにどのように変換されるかを示す少なくとも１つの受信関数に少なくとも部分的に基づいて決定される、請求項１０乃至１３のいずれか一項に記載の方法。   At least one of the color transformations applied to each of the at least two images or videos is such that each image or video is at least twice or less from a corresponding dynamic range in which the images or videos are encoded. 14. The method according to any one of claims 10 to 13, wherein the method is determined based at least in part on at least one reception function indicating how to convert to a dynamic range of 前記合成輝度ダイナミックレンジ及び前記アンカー輝度のうちの少なくとも１つは、前記２つの画像のうちの少なくとも１つにおけるオブジェクトの輝度分布依存性質、前記２つの画像のうちの少なくとも１つの画像の輝度特性を要約する情報、合成された少なくとも１つの前記出力画像がレンダリングされるディスプレイのダイナミックレンジ、及び前記出力画像が見られる視聴環境のための明度測定値のセットからの少なくとも１つの要因に基づいて決定される、請求項１０乃至１４のいずれか一項に記載の方法。   At least one of the composite luminance dynamic range and the anchor luminance is a luminance distribution dependent property of an object in at least one of the two images, and a luminance characteristic of at least one image of the two images. The at least one synthesized output is determined based on at least one factor from a dynamic range of a display on which the output image is rendered, and at least one factor from a set of brightness measurements for a viewing environment in which the output image is viewed. The method according to any one of claims 10 to 14, wherein
JP2018545548A 2015-11-24 2016-11-11 Processing of multiple HDR image sources Active JP6831389B2 (en)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
EP15196054 2015-11-24
EP15196054.9 2015-11-24
US201662383692P 2016-09-06 2016-09-06
US62/383,692 2016-09-06
PCT/EP2016/077373 WO2017089146A1 (en) 2015-11-24 2016-11-11 Handling multiple hdr image sources

Publications (3)

Publication Number Publication Date
JP2019506817A JP2019506817A (en) 2019-03-07
JP2019506817A5 true JP2019506817A5 (en) 2019-12-19
JP6831389B2 JP6831389B2 (en) 2021-02-17

Family

ID=65638024

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018545548A Active JP6831389B2 (en) 2015-11-24 2016-11-11 Processing of multiple HDR image sources

Country Status (3)

Country Link
JP (1) JP6831389B2 (en)
RU (1) RU2723676C2 (en)
ZA (1) ZA201804211B (en)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3451677A1 (en) * 2017-09-05 2019-03-06 Koninklijke Philips N.V. Graphics-safe hdr image luminance re-grading
WO2021108719A1 (en) * 2019-11-27 2021-06-03 Dolby Laboratories Licensing Corporation Rate-control-aware reshaping in hdr imaging
CN111915517B (en) * 2020-07-23 2024-01-26 同济大学 Global positioning method suitable for RGB-D camera under indoor illumination unfavorable environment
CN112949502B (en) * 2021-03-05 2024-03-29 浙江大华技术股份有限公司 Method, system and electronic device for detecting swimming pool safety officer looking around

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8135230B2 (en) * 2007-07-30 2012-03-13 Dolby Laboratories Licensing Corporation Enhancing dynamic ranges of images
CN102422322B (en) * 2009-05-11 2015-01-21 杜比实验室特许公司 Light detection, color appearance models, and modifying dynamic range for image display
US8606009B2 (en) * 2010-02-04 2013-12-10 Microsoft Corporation High dynamic range image generation and rendering
EP2702766B1 (en) * 2011-04-28 2017-06-14 Koninklijke Philips N.V. Apparatuses and methods for hdr image encoding and decoding
UA116082C2 (en) * 2011-09-27 2018-02-12 Конінклійке Філіпс Н.В. Apparatus and method for dynamic range transforming of images
CN103907343B (en) * 2011-10-20 2017-05-03 杜比实验室特许公司 method and system for video equalization
WO2014130213A1 (en) * 2013-02-21 2014-08-28 Dolby Laboratories Licensing Corporation Systems and methods for appearance mapping for compositing overlay graphics
MY173495A (en) * 2013-07-12 2020-01-29 Sony Corp Reproduction device, reproduction method, and recording medium
CN105684412B (en) * 2013-10-22 2017-04-26 杜比实验室特许公司 Calendar mechanism for a clock movement
US9973723B2 (en) * 2014-02-24 2018-05-15 Apple Inc. User interface and graphics composition with high dynamic range video
US9230338B2 (en) * 2014-03-05 2016-01-05 Dolby Laboratories Licensing Corporation Graphics blending for high dynamic range video
WO2015175549A1 (en) * 2014-05-12 2015-11-19 Apple Inc. Techniques for hdr/wcr video coding
BR112017009528A2 (en) * 2014-11-10 2018-02-06 Koninklijke Philips N.V. apparatus and method for decoding an integrated hdr video signal from one or more source signals, apparatus for encoding a video signal, and method for decoding a video signal
WO2016125691A1 (en) * 2015-02-03 2016-08-11 ソニー株式会社 Transmitting device, transmitting method, receiving device, and receiving method

Similar Documents

Publication Publication Date Title
US10462407B2 (en) Display method and display device
JP7101288B2 (en) Methods and devices for converting HDR signals
MX2018006330A (en) Handling multiple hdr image sources.
US10419689B2 (en) Mapping between linear luminance values and luma codes
JP2019506817A5 (en)
JP2017536735A5 (en)
US10937135B2 (en) Saturation processing specification for dynamic range mappings
JP2018503283A5 (en)
RU2707728C2 (en) Image processing with variation of degree of brightness with colour consistency
RU2014143972A (en) PROCESSING IMAGES WITH CHANGE OF BRIGHTNESS WITH COLOR RESTRICTIONS
JP2016533071A5 (en)
RU2018102703A (en) METHODS AND DEVICES FOR CODING AND DECODING HDR COLOR IMAGES
CN103353982A (en) Method for tone mapping based on histogram equalization
WO2010057074A3 (en) System and method for the serving of extended bit depth high resolution images
WO2010057077A3 (en) System and method for the display of extended bit depth high resolution images
US10270942B2 (en) Method of mapping source colors of an image in a chromaticity plane
JP2018508862A5 (en)
JP6520578B2 (en) Image processing apparatus and display determination method
US10645359B2 (en) Method for processing a digital image, device, terminal equipment and associated computer program
JP2015154459A (en) Image processing apparatus and image processing method
CN109118436B (en) Image tone adaptation method, corresponding electronic device and storage medium
RU2018122765A (en) PROCESSING MULTIPLE HDR IMAGE SOURCES
JP2019057080A5 (en)
JP6742417B2 (en) Digital image processing method, associated device, terminal device and computer program
US11900005B2 (en) Video wall