CN105850114B - 用于图像的逆色调映射的方法 - Google Patents
用于图像的逆色调映射的方法 Download PDFInfo
- Publication number
- CN105850114B CN105850114B CN201480070990.4A CN201480070990A CN105850114B CN 105850114 B CN105850114 B CN 105850114B CN 201480070990 A CN201480070990 A CN 201480070990A CN 105850114 B CN105850114 B CN 105850114B
- Authority
- CN
- China
- Prior art keywords
- pixel
- brightness
- image
- value
- low
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000013507 mapping Methods 0.000 title claims abstract description 45
- 238000000034 method Methods 0.000 title claims abstract description 37
- 238000001914 filtration Methods 0.000 claims abstract description 52
- 238000000605 extraction Methods 0.000 claims description 18
- 238000007493 shaping process Methods 0.000 claims description 17
- 238000000926 separation method Methods 0.000 claims description 8
- 230000001965 increasing effect Effects 0.000 claims description 6
- 239000000284 extract Substances 0.000 claims description 4
- 238000012887 quadratic function Methods 0.000 claims description 3
- 230000006870 function Effects 0.000 description 26
- 230000002708 enhancing effect Effects 0.000 description 14
- 238000000354 decomposition reaction Methods 0.000 description 5
- 239000003086 colorant Substances 0.000 description 4
- 238000003384 imaging method Methods 0.000 description 4
- 230000009977 dual effect Effects 0.000 description 3
- 239000000463 material Substances 0.000 description 3
- 230000000007 visual effect Effects 0.000 description 3
- 230000002146 bilateral effect Effects 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000007726 management method Methods 0.000 description 2
- 238000006467 substitution reaction Methods 0.000 description 2
- 230000009471 action Effects 0.000 description 1
- 230000003321 amplification Effects 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 210000004027 cell Anatomy 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 238000004040 coloring Methods 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 239000013078 crystal Substances 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000009826 distribution Methods 0.000 description 1
- 235000013399 edible fruits Nutrition 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000009499 grossing Methods 0.000 description 1
- 239000007788 liquid Substances 0.000 description 1
- 238000003199 nucleic acid amplification method Methods 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 238000002360 preparation method Methods 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 238000013139 quantization Methods 0.000 description 1
- 230000007480 spreading Effects 0.000 description 1
- 238000003892 spreading Methods 0.000 description 1
- 210000000352 storage cell Anatomy 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
- H04N5/57—Control of contrast or brightness
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/90—Dynamic range modification of images or parts thereof
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/90—Dynamic range modification of images or parts thereof
- G06T5/94—Dynamic range modification of images or parts thereof based on local image properties, e.g. for local contrast enhancement
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/90—Determination of colour characteristics
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
- H04N21/4318—Generation of visual interfaces for content selection or interaction; Content or additional data rendering by altering the content in the rendering process, e.g. blanking, blurring or masking an image region
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20024—Filtering details
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20048—Transform domain processing
- G06T2207/20064—Wavelet transform [DWT]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20172—Image enhancement details
- G06T2207/20208—High dynamic range [HDR] image processing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/741—Circuitry for compensating brightness variation in the scene by increasing the dynamic range of the image compared to the dynamic range of the electronic image sensors
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Image Processing (AREA)
- Picture Signal Circuits (AREA)
- Processing Of Color Television Signals (AREA)
- Facsimile Image Signal Circuits (AREA)
Abstract
方法包括：通过对像素的空间邻域中的像素的颜色的亮度值进行低通滤波来针对每个像素获取像素扩展指数值E’(p)，通过对像素的空间邻域中的像素的颜色的亮度值的高频率进行提取来获取的像素亮度增强值Yenhance(p)，并且根据等式Yexp(p)＝Y(p)E’(p)x[Yenhance(p)]c来对亮度Y(p)执行逆色调映射。
Description
技术领域
本发明涉及高动态范围成像领域，并且特别地解决了扩展低动态范围内容的动态范围，以使这些内容准备好由具有特别高峰值亮度的显示设备来显示。
背景技术
显示技术的最新发展已开始以允许对要显示的颜色、亮度和对比度的扩展范围。
允许对图像内容的亮度或明度的范围的扩展技术被称为高动态范围成像(highdynamic range imaging)，通常简称为HDR。HDR技术专注于捕捉、处理和显示更宽的动态范围的内容。
虽然已经出现了一些HDR显示设备，并且研发出了能够捕获具有增加的动态范围的图像的图像摄像头，但可用的HDR内容仍然有非常有限。虽然最近的发展保证了在不久的将来HDR内容的本地捕获，但这无法处理(address)现有内容。
为了为HDR显示设备准备传统的(本文称为LDR低动态范围)内容，也可以使用反向(reverse)或逆色调映射算子(iTMO，inverse tone mapping operator)。这样的算法处理图像内容中颜色的亮度信息，用于回复或重新创建原始场景的外观的目的。通常情况下，iTMOs采用传统的(即，LDR)图像作为输入，以全局的方式扩展该图像的颜色的亮度范围，以及随后局部地处理高光或亮区域，以提升图像中颜色的HDR外观。
虽然存在一些iTMO方案，这些方案专注于感知上再现原始场景的外观，并且有赖于对内容的严格假设。另外，文献中提出的多数扩展方法正朝着动态范围的极端增加进行优化。
通常，HDR成像是通过对颜色的亮度的暗值和亮值之间的动态范围的扩展、和量化步骤的数量的组合来定义的。为了实现动态范围更极端的增大，许多方法将全局扩展与增强图像的高光或其它亮区域的外观的局部处理步骤进行组合。文献中提出的已知全局扩展步骤可以是不同于逆S形的线性或分段线性。
为了增强图像中亮的局部特征，创建亮度扩展图是已知的，其中图像的每个像素与扩展值相关联以适用于该象素的亮度。在最简单的情况下，图像中的限幅区可被检测到随后被使用陡峭扩展曲线来扩张，但这样的方案不提供对图像的外观的充分控制。
需要一种新颖的iTMO，其目的是通过选择性地且动态地重映射其颜色的亮度及其对比度范围，来提高图像的视觉美观性。
发明内容
本发明的目的是通过选择性和动态地重映射图像的颜色的亮度及其对比度范围，来增强图像的视觉吸引力。基本上，不同的亮度处理被认为对图像的不同部分是必要的。当在显示侧动态范围扩展的情境中没有可用的场景相关数据时，任何亮度扩展方案需要在尽可能好地再现原始场景的外观、以及同时确保压缩的伪像或噪声不被扩展之间折衷。因此，在如下文所述的图像逆色调映射方法中，扩展在空间上是变化的，因此完全适用于图像内容。
因此，本发明的主题是用于图像的逆色调映射的方法，其中图像的颜色在将亮度从色度分离的颜色空间中表示，方法包括：
-通过对像素的空间邻域中的像素的颜色的亮度值进行低通滤波，来获取所述图像的每个像素(p)的像素扩展指数值E’(p)，
-通过对像素的空间邻域中的像素的颜色的亮度值的高频率进行提取，来获取所述图像的每个像素(p)的像素亮度增强值Yenhance(p)，
-将所述图像的每个像素(p)的亮度Y(p)逆色调映射到通过下述两项的乘积获得的扩展亮度Yexp(p)：以该像素的亮度Y(p)为底数、以针对像素获取的像素扩展指数值E’(p)为指数的幂，和以针对该像素获取的像素亮度增强值为底数、以指数参数c为指数的幂，其中c大于或等于1。
这表示为Yexp(p)＝Y(p)E’(p)x[Yenhance(p)]c
指数参数c控制由像素亮度增强值带来细节增强量。因此，更大的c值逐渐增加图像边缘的对比度。c＝1.5的值是优选的。
作为亮度值的低通滤波的像素，以获得其像素扩展指数值的空间邻域进行的，这意味着每个像素将获得它自己的扩展指数。
由于在像素的空间邻域中执行了对亮度值的低通滤波来获取其像素扩展指数值，这意味着每个像素将获得其自己的扩展指数。因此，由此方法获得的亮度范围的扩展在空间上是变化的，并且适用于图像内容。
由于在像素的空间邻域中执行了对亮度值的高频的提取来获取其像素亮度增强值，这意味着每个像素将获得其自己的亮度增强，并且这样的亮度增强将有利地适用于至少部分地补偿由执行来扩展亮度的亮度值的低通滤波的空间分量造成的、对图像的细节的平滑。
优选地，低通滤波被执行，使得图像的亮区域内的像素的颜色的增强大于该图像的暗区域内的像素的颜色的增强。
优选地，所述像素扩展指数值E’(p)也通过整形经低通滤波的亮度值来获取，使得这些值被重分布，从而所获取的图像的均值扩展亮度约等于原始图像的均值亮度。
在第一变体中，如果经逆色调映射的图像意欲在具有给定的峰值亮度Dmax的显示设备上再现，则所述像素扩展指数值E’(p)也优选地通过重缩放经低通滤波的亮度值来获取，使得以所述图像的像素中最大亮度max(Y)为底数、以针对具有该最大亮度max(Y)的像素获取的像素扩展指数值为指数的幂等于所述峰值亮度Dmax。
这表示为例如其中E(p)为通过对该像素的空间邻域中的像素(p)的颜色的亮度值进行低通滤波直接获取的值，其中α是可用于控制亮度的整体扩展的重缩放参数。因此，有了项Dmax，图像的亮度处理取决于用于显示该图像的HDR显示设备的能力，特别是其峰值亮度。
该方法随后有利地适用于内容本身和显示设备的亮度范围，并且允许内容的HDR外观的提高，即使显示设备在动态范围内适度增加时被使用。
在第二变体中，所述像素扩展指数值E’(p)优选地通过经由应用到经低通滤波的亮度值的二次函数整形这些值来获取。
优选地，为了计算每个像素的像素扩展指数值，通过计算应用在像素的空间邻域中的第一高斯函数、与应用在该像素的颜色的亮度值的邻域中的第二高斯函数的乘积，来在第一变体中执行所述低通滤波。
这意味着使用应用在像素的空间域的第一高斯函数、以及应用于亮度范围域的第二高斯函数来执行滤波。
优选地，第一高斯函数的标准差σs的值大于或等于3。
第二高斯函数的标准差σr的值应优选地高到足以平滑原始图像中的纹理和噪声，但也低到足以避免该图像的对象之间的交叉边缘。标准差σr的值优选地从0.1max(Y)和0.5max(Y)之间选出，其中max(Y)是原始图像的所有像素中的最大亮度值。
优选地，为了计算像素亮度增强值，通过计算第二低通滤波除以第三低通滤波的比率执行所述亮度值的高频率的提取，其中，第三低通滤波被配置为比第二低通滤波去除图像中更多的细节。
优选地，为了计算像素的像素亮度增强值，所述第二低通滤波通过计算应用于该像素的邻域中的第三高斯函数(其具有第一标准差)、与应用于该像素的颜色的亮度邻域中的第四高斯函数的乘积来执行，并且第三低通滤波通过第二次应用所述第二低通滤波来获取，其中第二低通滤波具有高于第三高斯函数的第一标准差的第二标准差。
通过当在第二次应用所述第二低通滤波时使用第三高斯函数的较高的标准差值，相较于第二低通滤波第三低通滤波除去图像中的更多细节。因此，所获得的比例对应于高通滤波。
优选地，所述颜色的亮度被编码成小波(wavelet)分解的递增级数(1evel)，每个级数具有至少一个高频系数(LH)和低频率系数(LL)，在第二变体中每个像素的像素扩展指数值被计算为等于以最高级数编码所述像素(p)的颜色亮度的低频系数A(p)＝LL，随后在该像素的空间邻域中执行低通滤波。
优选地，为了计算像素的像素亮度增强值，通过计算像素的亮度Y(p)与该像素的低频系数A(p)之差，来执行对位于该像素的空间邻域中的像素的亮度值的高频率的提取。
因此，只有从亮度的小波分解的(最高)级数的最低频率子带除去的高频率得以保留用于对图像的细节的增强。
优选地，计算包括将指数系数应用于该差值。该指数系数优选地等于2。
本发明的主题还是用于图像的逆色调映射的图像处理设备，其中图像的颜色在将亮度从色度分离的颜色空间中进行表示，该图像处理设备包括：
-低通滤波模块，被配置为通过对像素的空间邻域中的像素的颜色的亮度值进行低通滤波，来获取所述图像的每个像素的像素扩展指数值，
-整形/重缩放模块，被配置为对由低通滤波模块提供的经低通滤波的亮度值进行整形/重缩放，
-高频率提取模块，被配置为通过对像素的空间邻域中的像素的颜色的亮度值的高频率进行提取，来获取所述图像的每个像素的像素亮度增强值，
-逆色调映射模块，被配置为将所述图像的每个像素的亮度逆色调映射到通过下述两项的乘积获得的扩展亮度：以该像素的亮度为底数、以由整形/重缩放模块针对像素提供的像素扩展指数值为指数的幂，和以高频率提取模块针对该像素提供的像素亮度增强值为底数、以指数参数c为指数的幂，其中c大于或等于1。
附图说明
阅读下面的描述本发明将得以更清楚地理解，描述通过非限制性示例的方式给出并且参考所附附图，其中：
-图1示出了根据本发明的第一和第二实施例的不同步骤，
-图2示出了要进行逆色调映射的图像的颜色的YUV坐标的小波分解，
-图3示出了该图像的小波分解。
具体实施方式
在图中所示的各种元件的功能可以通过使用专用硬件以及能够与适当的软件结合来执行相关软件的硬件来提供。
应当理解，本发明可以以各种形式的硬件、软件、固件、专用处理器或其组合来实现。术语“处理器”不应当被解释为专指能够执行软件的硬件，并且可以隐含地包括但不限于：数字信号处理器(“DSP”)硬件、用于存储软件的只读存储器(“ROM”)、随机存取存储器(“RAM”)，以及非易失性存储设备。显然本发明可以作为硬件和软件的组合来实现。此外，软件可以作为有形地体现在程序存储单元上的应用程序来实现。这样的软件可以采取要集成到另一软件的插件的形式。该应用程序可以被上传到包括任何适当架构的图像处理设备，并且由该图像处理设备执行。优选地，图像处理设备在计算机平台上实现，计算机平台具有诸如一个或多个中央处理单元(“CPU”)、随机存取存储器(“RAM”)、以及输入/输出(“I/O”)接口之类的硬件。计算机平台还可以包括操作系统和微指令代码。本文描述的各种处理和功能可以是微指令代码的一部分或应用程序的一部分，或者是它们的任意组合，其可以由CPU执行。此外，各种其它外围单元可以连接到计算机平台，例如附加的数据存储单元、显示设备、打印单元、……等等。实现根据本发明的方法实施例的图像处理设备可以是能够接收的图像的任何电子设备(例如，电视机、机顶盒、网关、蜂窝电话、平板电脑)的一部分。
用于图像的逆色调映射的图像处理设备(其中图像的颜色在将亮度从色度分离的颜色空间中进行表示)包括：
-低通滤波模块，被配置为通过对像素的空间邻域中的像素的颜色的亮度值进行低通滤波，来获取所述图像的每个像素的像素扩展指数值，
-整形/重缩放模块，被配置为对由低通滤波模块提供的经低通滤波的亮度值进行整形/重缩放，
-高频率提取模块，被配置为通过对像素的空间邻域中的像素的颜色的亮度值的高频率进行提取，来获取所述图像的每个像素的像素亮度增强值，
-逆色调映射模块，被配置为将所述图像的每个像素的亮度逆色调映射到通过下述两项的乘积获得的扩展亮度：以该像素的亮度为底数、以由整形/重缩放模块针对像素提供的像素扩展指数值为指数的幂，以及以高频率提取模块针对该像素提供的像素亮度增强值为底数、以指数参数c为指数的幂，其中c大于或等于1。
现在将使用如上所述的图像处理设备、参考图1来描述用于图像的逆色调映射的方法的第一实施例。
使用例如图像接收器，图像与和每个像素的颜色相关的所有数据一起被接收，其中与图像的每个像素相关联的颜色被编码为三个颜色坐标，即一种颜色坐标用于每个颜色通道R、G和B。
在本实施例的第一准备步骤(图1中未示出)中，如果需要的话，所接收的这些颜色的RGB颜色坐标被以本身已知的方式归一化和可选地线性化，从而所接收到的图像的颜色被表示在显示设备的RGB颜色空间中。这个RGB颜色空间可以被标准化，并且相应的显示设备是虚拟的显示设备。随后，这些颜色被转换到将亮度从色度分离的颜色空间，例如YUV颜色空间。从RGB颜色空间到YUV颜色空间的颜色转换本身是已知的，因此没有详细描述。替代地可以使用将亮度从色度分离的任何其它颜色空间，例如XYZ、Yxy、CIE、Lab。因此，亮度值Y(p)和两个色度值U(p)、V(p)与所接收的图像中的任何像素p的颜色相关联。将要描述的逆色调映射的方法的实施例的目的是通过将指数值E′(p)提供给每个亮度值Y(p)，来将这些亮度值扩展到扩展亮度值。
在本实施例的第二步骤中，使用低通滤波模块，对于具有其亮度值为Y(p)的图像的每个像素p，通过对像素p的空间邻域中的像素的亮度值(并且可选地还在亮度值Y(p)的邻域中)进行低通滤波来获取中间像素扩展指数值E(p)。该低通滤波步骤优选使用高斯函数。E(p)例如通过以下等式获得：
其中fs是应用于图像的空间域的第一高斯函数，以及fr是应用于亮度范围域的第二高斯函数，其中Ω是以像素p为中心的图像的窗口的尺寸，pi是此窗口中的像素。窗口尺寸可以是例如5或7。为了计算效率，窗口尺寸的较小的值是优选的。
在根据本发明的方法的第一实施例中，随后的低通滤波是双重的(bilateral)。词语“双重的”指的是滤波既在空间域也在亮度范围域执行的事实。
优选地，第一高斯函数fs的标准差σs的值大于或等于2。
第二高斯函数fr的标准差σr的值应优选地高到足以平滑原始图像中的纹理和噪声，但也低到足以避免该图像的对象之间的交叉边缘。标准差σr的值优选地从0.1max(Y)和0.5max(Y)之间选出，其中max(Y)是原始图像的所有像素中的最大亮度值。
在第一实施例的具体实现方式中，空间高斯函数fs的标准差被设定为σs＝3，并且亮度范围高斯函数fr的标准差设定为σr＝0.3×max(Y)。
经由这种低通滤波获取的所有中间像素扩展指数值随后形成中间扩展指数映射E(p)。
在本实施例的第三步骤中，使用整形/重缩放模块，中间扩展指数映射是通过使用S形函数(取决于图像上像素扩展指数值的分布)被整形为最终扩展指数映射，和/或基于将用于再现经扩展的图像的显示设备的峰值亮度被重缩放。
虽然如上述计算出的像素扩展指数值以相对比例指示了每个像素的扩展，这些扩展值需要被重缩放使得它们符合一组约束。尽管有可用于再现由逆色调映射方法提供的HDR图像的HDR显示设备的增加的能力，但由该方法获得的扩展HDR图像中的平均亮度应当优选地保持在能够与原始LDR图像兼容的水平。同时，亮度的扩展应考虑到将用于再现扩展HDR图像的显示设备的峰值亮度Dmax，从而适当地扩展亮度。因此，经由该第三步骤，整形/重缩放像素扩展指数值E’(p)通过以下等式获得：
其中参数α可用来控制亮度扩展的整体行为，其中E(p)为如上文在第二步骤中计算出中间像素扩展指数值，其中max(E)是图像的所有像素中E(p)的最大值，其中项允许当Y(p)＝max(Y)时有Y(p)E’(p)＝Dmax。
参数α的目的是控制亮度扩展的“平面化(flat)”程度。它是的空间上变化的扩展和常量指数之间的加权平衡。α的较高值意味着亮度扩展更为局部，因此导向更极端的结果，而α的较低值导向更接近全局的扩展。值α＝0.1实际上已提供了亮点扩展和对中间色调的有效管理之间的很好的权衡。
在第一实施例的具体实现方式中，参数α设定为值α＝0.1，因为此值提供了亮点扩展和对中间色调的有效管理之间的良好折衷。
随后所有经整形/重缩放的像素扩展指数值形成最终扩展指数映射E’(p)。
在本实施例的第四步骤中，使用高频率提取模块，原始图像中亮度值的高空间频率被提取，以获取针对图像中亮度值为Y(p)的每个像素p的像素亮度增强值Yenhance(p)。本步骤是例如通过如下的三个子步骤执行的。
在滤波的第一子步骤，基底层Ybase计算如下，Ybase包含图像亮度的较大变化，但不包括噪声或其它小的特征：
Ybase(p)＝∑i∈Ω′Y(pi)f′s(||pi-p||)f′r(||Y(pi)-Y(p)||)
使用与上述相同的高斯函数f’s，、f’r，首先在像素p的空间邻域中使用，并且第二次在亮度值Y(p)的邻域中使用，其中Ω’是以像素p为中心的图像的窗口的尺寸，具有与上述相同的优选尺寸，并且其中pi是在窗口中的像素。
在第一实施例的具体的实现方式中，空间高斯函数f’s的标准差现在设置为σ’s＝10，并且亮度范围高斯函数f’r的标准差设置为σ’r＝0.1×max(Y)。
在滤波的第二子步骤中，由第一子步骤中获得的基底层Ybase还使用高斯函数(此次的高斯函数具有更大的亮度范围标准差从而移除图像中更多的亮度细节)进行第二次滤波，获取Y’base如下：
其中f’s，、f’r是与上述相同的高斯函数，首先在像素p的空间邻域中使用，并且第二次在亮度值Y(p)的邻域中使用，其中Ω”是以像素p为中心的图像的窗口的尺寸，具有与上述相同的优选尺寸，并且其中pi是在窗口中的像素。
可选地，Y’base(p)可以被设置成等于如上定义的E(p)，以最小化最终HDR图像中的噪声。
在第一实施例的具体实现方式中，空间高斯函数f’s的标准差现在设置为σ”s＝σ’s，并且亮度范围高斯函数f’r的标准差设置为移除图像中更多的亮度细节(即，σ”r＞σ’r)。例如σ”r＝0.3×max(Y)。
对于图像中的亮度值的高频率的提取的第三和最后子步骤中，对于图像的每个像素，像素亮度增强值Yenhance(p)作为第一子步骤的结果Ybase(p)除以第二子步骤的结果Y’base(p)得出的比例来计算，从而Yenhance(p)＝Ybase(p)/Y’base(p)。由于σ”r＞σ’r，该比例对应于图像中的像素值的高频率的提取。在不脱离本发明的范围的情况下，可以使用其他方式提取图像中的亮度值的高空间频率。
随后所有最终像素亮度增强值形成亮度-增强映射，由于对亮度值的高频率的提取，当被应用于图像的亮度值时亮度-增强映射将增强其细节，
在本实施例的第五步骤中，使用逆色调映射模块，图像的每个像素p的亮度Y(p)被逆色调映到扩展亮度Yexp(p)，扩展亮度Yexp(p)是通过下述两项的乘积获得的：以该像素的亮度为底数、以从上述第三步骤获得的最终像素扩展指数值E’(p)为指数的幂，以及以从上述第四步骤获得的像素亮度增强值为底数、以指数参数c为指数的幂，其中c大于或等于1。这意味着Yexp(p)＝Y(p)E(p)x[Yenhance(p)]c。
指数参数c控制由像素亮度增强值带来细节增强量。因此，更大的c值逐渐增加图像边缘的对比度。c＝1.5的值是优选的。
当如上所述地扩展图像的亮度时，亮度和对比度的改变可能影响图像中的饱和度和颜色的外观。在扩展其亮度范围时，图像的颜色信息可以在第六可选步骤中进行管理，以保持图像的艺术意图。优选地，颜色饱和度使用的扩展指数值作为指导(guide)进行增强。更具体地，每个像素的颜色饱和度由等于该象素的扩展指数的因子来增强。像素p的颜色饱和度例如通过调节该象素的色度值C(p)来增强，在圆柱YUV空间中计算如下：
并且调整后的色度值C’(p)作为该像素p的扩展指数E’(p)、以及该像素p的色度值C(p)的乘积来计算，从而：
C′(p)＝E′(p)xC(p)
在第一实施例的具体实现方式中，将C(p)转换为C’(p)的色度缩放优选地限制为1.5倍，以避免过度饱和的亮点，例如避光爆和亮光。
C’(p)有了新的值，使用从圆柱颜色空间(例如这里的LCH)到YUV空间的惯用转换方式来计算新的色度U’(p)、V’(p)：
U’(p)＝cos[H(p)]×C’(p)
V’(p)＝sin[(H(p)]×C’(p)
其中H(p)为从原始U’(p)、V’(p)如下计算的原始色彩：
H(p)＝arctan[V(p)，U(p)]
在第五或第六步的结束时，图像的每种颜色的YUV坐标随后被映射到表示YUV颜色空间中的扩展的颜色新的Y’U’V’坐标。
在第一实施例的最终的第七步骤(图1中未示出)，扩展颜色的新Y’U’V’坐标以本身已知的方式转化为表示RGB颜色空间中的相同颜色的对应新的R’G’B’坐标。如果需要的话，这些R’G’B’坐标去线性化，以例如代表这样的颜色空间中扩展的颜色：在上述第一步骤中颜色曾在该颜色空间中接收。
如在图1中所述，基于这些扩展颜色的扩展图像现在准备好被发送到峰值亮度为Dmax的显示设备，从而在高动态范围内再现。
优点
通过根据本发明的方法获得的扩展图像尽可能与相同场景的HDR图像看上去近似。所得到的扩展内容相较LDR输入图像具有较高的视觉质量，即使在只能应用于适度扩展的情况下也是如此。这种亮度扩展方法增强了亮图像特征，向观看者递送高亮和光源的外观，同时保留中档值。有赖于用于再现这些扩展图像的显示设备的亮度范围，暗值可以被保留或进一步压缩，以提高图像中的全局对比度。
根据本发明的方法使用空间域中的低通滤波处理来定义用于扩展颜色的亮度的扩展指数值。该低通滤波处理平滑图像的一些细节。有利的是，对细节的移除由对空间域中高空间频率(其用于获取应用到扩展亮度的亮度增强因子)的提取来补偿。换言之，执行亮度值的高通滤波的空间分量，从而至少部分地补偿由亮度值的低通滤波的空间分量造成的、对图像的细节的平滑。
如上所述地对使亮度使用双重的低通滤波器，可以得到有利于图像的亮区域的扩展映射，同时平滑小局部细节(例如如噪声或条纹伪像)。这允许亮区的扩展，但没有放大噪声或纹理信息。
事实上，目前大多数的HDR LCD显示设备的局限性之一是，相较这些设备前端的液晶面板，这些设备随空间变化的背光具有较低的分辨率。因此，尽管这样的HDR显示设备可以达成很高的全局对比度，但在局部对比度受到影响。这在图像的小型高对比度区域(例如亮点)、或者在暗区和亮区间的尖锐过渡处尤为明显。虽然许多方案可用于增强图像的对比度，但在逆色调映射的情境中，需要特别小心以确保噪声或其它伪像不被同时增强。上文描述了用于提取图像的高空间频率的双通双重滤波处理特别适用于增强对比度而不增强噪声和伪像。
当像素扩展指数值E(p)被如上所述地整形为E’(p)时，所获得的扩展图像最好利用用于再现图像的显示设备的可用动态范围。
第一实施例的第一变体
对于图像序列(即视频内容)的逆色调映射，上述方法的实施例顺序地进行应用，序列的一幅图像之后是另一幅图像。如果此方法独立地应用于序列的每个连续图像，可能难以保证所获得的HDR序列的扩展图像之间的时间相干性。事实上，如果场景中存在移动的亮的物体，可能会产生闪烁伪像。为了避免这个问题，优选地通过确保扩展连续镜头的均值亮度保持不变来应用简单的时间处理。对于序列中的图像i(如上述第一实施例所述，已针对该图像获取了扩展亮度值Y’exp.i)，经调整的扩展亮度值Y”exp.i被计算如下，并且取代Y’exp.i用于扩展图像：
为了确保在个场景中的强特征不会传播到下一场景，均值在每一镜头的开始处复位。这可以通过采用现有的镜头检测算法来实现。
第一实施例的第二变体
此第二变体涉及从如上述实施例的第二步骤处获得的中间像素扩展指数值E(p)，计算经整形/重缩放的像素扩展指数E’(p)。现在根据下述等式，提出根据中间像素扩展指数值E(p)的二次函数来整形像素扩展指数值：
E’(p)＝a[E(p)]2+b E(p)+c
需要注意在该等式中，E(p)不像先前的等式中那样由max(E(p))来缩放。
在第一示例中，上述等式中的参数a、b、c可以被设置为常数，并且针对具体的显示设备进行优化。
在第二示例中，上述等式中的参数a、b、c可根据Dmax来计算。下面的等式例如用于计算参数a、b、c的值：
a＝pa1exp(pa2Dmax)+pa3exp(pa4Dmax) (s-1)
c＝1.3 (s-3)
在等式(s-1)和(s-2)中给出的值的示例示出于表1中。
表1
在第三示例中，参数a、b、c的值取决于像素扩展指数值E(p)本身的值，从而与E(p)的暗值形成区分，并且对于E(p)的亮值更好地控制展后得到的图像的亮点和阴影。
根据本变体的所有经整形/重新调整的像素扩展指数随后形成取代先前映射的最终扩展指数映射E，(p)。
现在将公开用于图像的逆色调映射的方法的第二实施例，使用如上所述、但具体针对实现此实施例配置的图像处理设备。
与第一个实施例相比，唯一的区别涉及：
-第二步骤，对于每个像素p，通过对像素p的空间邻域中的像素的亮度值进行低通滤波来获取像素扩展指数值E(p)。
-第四步骤，提取高空间频率来获取图像的每个像素p的像素亮度增强值Yenhance(p)。
在第二实施例中，颜色作为表示将亮度从色度分离的颜色空间(例如YUV颜色空间)中的这些颜色的三色坐标组来接收。重申，可以替代地使用从色度分离的颜色空间的任何其它颜色空间。因此，亮度值Y(p)和两个色度值U(p)、V(p)被关联至图像的任意像素p的颜色。
更具体地，这些三色坐标组以压缩的格式(其为小波压缩类型)被接收，因此，颜色的亮度Y(p)被编码成小波分解的递增级数，每个级数具有至少一个高频系数LH和低频率系数LL，例如如图2所述，其中LL、LH、HL和HH子带分区指示近似图像以及分别具有水平边缘、垂直边缘和角边缘的图像，例如如图3所示。
为了创建像素扩展指数映射和像素亮度增强映射，在此实施例中仅使用了小波分解的一个级数。
为了实现方法的第二步骤，使用所谓的Haar提升小波(Haar lifting wavelet)实现方式，并且像素p的像素扩展指数值E(p)从LL子带获得。hψ(n)＝{1/√2；1/√2}和是卷积滤波器。
因此，这意味着在本实施例的第二步骤中，每个像素的像素扩展指数值被计算为等于编码该像素p的颜色亮度的最高级数的低频系数A(p)＝LL，随后在该像素的空间邻域中执行低通滤波。
实现方法的第四步骤中，通过计算像素p的亮度Y(p)和该像素的低频系数A(p)的之差，来执行对空间域中亮度的高频率的提取。更精确地，LL子带(其是原始亮度Y(p)分辨率除以4的低频率版本A(p))被进行上采样，并且随后从该原始亮度Y(p)中减去，以如下所述地获得像素亮度增强值Yenhance(p)：Yenhance(p)＝((Y(p)-cA(p)↑2)+128)/255*2。
因此，只有从LL子带移除高频被保持用作创建亮度增强映射Yenhance的基础。
所有其它步骤类似于在第一实施例中描述的步骤。当然，因为所获得的扩展颜色的新Y’U’V’坐标可能不需要被转换成相应的新R’G’B’坐标，可以除去最终的第七步骤。
虽然相对于特定示例和优选实施例描述了本发明，应当理解，本发明并不限于这些示例和实施例。因此，要求保护的本发明包括来自本文所述的特定示例和优选实施例的变体，这对本技术领域技术人员是显而易见的。尽管一些具体实施例可以被单独描述并要求保护，应该理解本文所描述和要求保护实施例的各种特征可组合使用。权利要求中出现的参考数字仅仅是说明性的，并且应当对权利要求的范围没有限制作用。
Claims (12)
1.一种用于图像的逆色调映射的方法，其中所述图像的颜色在将亮度从色度分离的颜色空间中表示，所述方法包括：
通过对像素的空间邻域中的像素的颜色的亮度值进行低通滤波，来获取所述图像的每个像素p的像素扩展指数值E’(p)，
通过对所述像素的空间邻域中的像素的颜色的亮度值的高频率进行提取，来获取所述图像的每个像素p的像素亮度增强值Yenhance(p)，
将所述图像的每个像素p的亮度Y(p)逆色调映射到通过下述两项的乘积获得的扩展亮度Yexp(p)：以所述像素的亮度Y(p)为底数、以针对像素获取的像素扩展指数值E’(p)为指数的幂，和以针对该像素获取的像素亮度增强值为底数、以指数参数c为指数的幂，其中c大于或等于1。
2.如权利要求1所述的图像的逆色调映射方法，其中所述像素扩展指数值E’(p)也通过对经低通滤波的亮度值进行整形来获取，使得这些值被重分布，从而所获取的图像的均值扩展亮度约等于原始图像的均值亮度。
3.如权利要求1或2所述的图像的逆色调映射方法，适合于在具有给定的峰值亮度Dmax的显示设备上再现，其中所述像素扩展指数值E’(p)还通过对经低通滤波的亮度值进行重缩放来获取，使得以所述图像的像素中最大亮度max(Y)为底数、以针对具有该最大亮度max(Y)的像素获取的像素扩展指数值为指数的幂约等于所述峰值亮度Dmax。
4.如权利要求1或2所述的图像的逆色调映射方法，其中所述像素扩展指数值E’(p)通过经由应用到经低通滤波的亮度值的二次函数整形这些值来获取。
5.如权利要求1所述的图像的逆色调映射方法，其中为了计算每个像素的像素扩展指数值，通过计算应用在所述像素的所述空间邻域中的第一高斯函数、与应用在所述像素的颜色的亮度值的邻域中的第二高斯函数的乘积，来执行所述低通滤波。
6.如权利要求5所述的图像的逆色调映射方法，其中为了计算像素亮度增强值，通过计算第二低通滤波除以第三低通滤波的比例来执行对所述亮度值的高频率的提取，其中相较于所述第二低通滤波所述第三低通滤波除去所述图像中的更多细节。
7.如权利要求1所述的图像的逆色调映射方法，其中所述颜色的亮度被编码成小波分解的递增级数，每个级数具有至少一个高频系数LH和低频率系数LL，其中每个像素的像素扩展指数值被计算为等于编码所述像素p的颜色亮度的最高级数的低频系数A(p)＝LL，随后在所述像素的所述空间邻域中执行所述低通滤波。
8.如权利要求7所述的图像的逆色调映射方法，其中为了计算像素的像素亮度增强值，通过计算所述像素的亮度Y(p)和所述像素的所述低频系数A(p)之间的差，来执行对位于所述像素的空间邻域中的像素的亮度值的高频率的提取。
9.一种用于图像的逆色调映射的图像处理设备，其中所述图像的颜色在将亮度从色度分离的颜色空间中进行表示，所述图像处理设备包括：
低通滤波模块，所述低通滤波模块被配置为通过对像素的空间邻域中的像素的颜色的亮度值进行低通滤波，来获取所述图像的每个像素的像素扩展指数值，
整形/重缩放模块，所述整形/重缩放模块被配置为对由所述低通滤波模块提供的经低通滤波的亮度值进行整形/重缩放，
高频率提取模块，所述高频率提取模块被配置为通过对像素的空间邻域中的像素的颜色的亮度值的高频率进行提取，来获取所述图像的每个像素的像素亮度增强值，
逆色调映射模块，所述逆色调映射模块被配置为将所述图像的每个像素的亮度逆色调映射到通过下述两项的乘积获得的扩展亮度：以所述像素的亮度为底数、以由所述整形/重缩放模块针对该像素提供的像素扩展指数值为指数的幂，和由所述高频率提取模块针对该像素提供的像素亮度增强值为底数、以指数参数c为指数的幂，其中c大于或等于1。
10.一种电子设备，所述电子设备包括如权利要求9所述图像处理设备。
11.如权利要求10所述的电子设备，还包括：
显示设备，所述显示设备具有给定的峰值亮度Dmax并且被配置为显示所述逆色调映射的图像，以及
模块，所述模块被配置为通过重缩放经低通滤波的亮度值来获取所述像素扩展指数值E’(p)，使得以所述图像的像素中最大亮度max(Y)为底数、以针对具有该最大亮度max(Y)的像素获取的像素扩展指数值为指数的幂约等于所述峰值亮度Dmax。
12.一种包括程度代码指令的计算机可读存储介质，该程度代码指令在由处理器执行时使得所述处理器执行根据权利要求1-8中任一项所述的方法的步骤。
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| EP13306876.7 | 2013-12-27 | ||
| EP13306876 | 2013-12-27 | ||
| PCT/EP2014/076183 WO2015096955A1 (en) | 2013-12-27 | 2014-12-02 | Method for inverse tone mapping of an image |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN105850114A CN105850114A (zh) | 2016-08-10 |
| CN105850114B true CN105850114B (zh) | 2019-05-21 |
Family
ID=50030037
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201480070990.4A Active CN105850114B (zh) | 2013-12-27 | 2014-12-02 | 用于图像的逆色调映射的方法 |
Country Status (8)
| Country | Link |
|---|---|
| US (1) | US9911181B2 (zh) |
| EP (1) | EP3087730B1 (zh) |
| JP (1) | JP6461165B2 (zh) |
| KR (1) | KR102234092B1 (zh) |
| CN (1) | CN105850114B (zh) |
| ES (1) | ES2690371T3 (zh) |
| PL (1) | PL3087730T3 (zh) |
| WO (1) | WO2015096955A1 (zh) |
Families Citing this family (44)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2015192368A1 (zh) * | 2014-06-20 | 2015-12-23 | 深圳市大疆创新科技有限公司 | Hdri的生成方法及装置 |
| TWI764870B (zh) * | 2015-07-28 | 2022-05-21 | 法商內數位麥德遜專利控股有限公司 | 視訊訊號處理裝置及方法 |
| EP3136736A1 (en) | 2015-08-25 | 2017-03-01 | Thomson Licensing | Method for inverse tone mapping of a sequence of images |
| WO2017032822A1 (en) * | 2015-08-25 | 2017-03-02 | Thomson Licensing | Inverse tone mapping based on luminance zones |
| JP6803378B2 (ja) * | 2015-08-31 | 2020-12-23 | インターデジタル ヴイシー ホールディングス， インコーポレイテッド | 逆トーンマッピングの方法及び装置 |
| US9979895B2 (en) * | 2015-09-04 | 2018-05-22 | Disney Enterprises, Inc. | High dynamic range tone mapping |
| GB2549521A (en) * | 2016-04-21 | 2017-10-25 | British Broadcasting Corp | Method and apparatus for conversion of dynamic range of video signals |
| WO2017190786A1 (en) * | 2016-05-04 | 2017-11-09 | 1/1Thomson Licensing | Optimized content-adaptive inverse tone mapping for low to high dynamic range conversion |
| EP3249605A1 (en) | 2016-05-23 | 2017-11-29 | Thomson Licensing | Inverse tone mapping method and corresponding device |
| KR102552747B1 (ko) * | 2016-06-28 | 2023-07-11 | 주식회사 엘엑스세미콘 | 역 톤 매핑 방법 |
| US10275864B2 (en) * | 2016-09-09 | 2019-04-30 | Kabushiki Kaisha Toshiba | Image processing device and image processing method |
| EP3340165A1 (en) * | 2016-12-20 | 2018-06-27 | Thomson Licensing | Method of color gamut mapping input colors of an input ldr content into output colors forming an output hdr content |
| CN107045715B (zh) * | 2017-02-22 | 2019-06-07 | 西南科技大学 | 一种单幅低动态范围图像生成高动态范围图像的方法 |
| US10051252B1 (en) | 2017-03-07 | 2018-08-14 | Filmic Inc. | Method of decaying chrominance in images |
| EP3373585A1 (en) | 2017-03-09 | 2018-09-12 | Thomson Licensing | Method for inverse tone mapping of an image with visual effects |
| EP3418972A1 (en) | 2017-06-23 | 2018-12-26 | Thomson Licensing | Method for tone adapting an image to a target peak luminance lt of a target display device |
| EP3462743A1 (en) | 2017-09-27 | 2019-04-03 | Thomson Licensing | Device and method for dynamic range expansion in a virtual reality scene |
| DE102017218072A1 (de) * | 2017-10-11 | 2019-04-11 | Robert Bosch Gmbh | Verfahren zum Aufnehmen eines Bildes |
| EP3486865A1 (en) * | 2017-11-20 | 2019-05-22 | Thomson Licensing | Method and device for inverse tone mapping |
| EP3503019A1 (en) * | 2017-12-21 | 2019-06-26 | Thomson Licensing | Improved inverse tone mapping method and corresponding device |
| CN108305227A (zh) * | 2018-01-23 | 2018-07-20 | 中国航空工业集团公司洛阳电光设备研究所 | 一种对比度不变的图像低亮度区域增强亮度的方法 |
| EP3522107A1 (en) | 2018-01-31 | 2019-08-07 | InterDigital CE Patent Holdings | Method and apparatus for generating hdr images with reduced clipped areas |
| KR102546990B1 (ko) | 2018-03-16 | 2023-06-23 | 엘지전자 주식회사 | 신호 처리 장치 및 이를 구비하는 영상표시장치 |
| CN108761391B (zh) * | 2018-05-29 | 2022-04-01 | 南京信息工程大学 | 一种模型类无设备目标定位方法 |
| EP3594894A1 (en) * | 2018-07-11 | 2020-01-15 | InterDigital VC Holdings, Inc. | Tone-mapping of colors of a video content |
| CN109060806B (zh) * | 2018-08-29 | 2019-09-13 | 陈青 | 箱子底端材料类型辨识机构 |
| CN109274985B (zh) * | 2018-10-12 | 2020-04-28 | 腾讯科技（深圳）有限公司 | 视频转码方法、装置、计算机设备和存储介质 |
| CN109544463A (zh) * | 2018-10-17 | 2019-03-29 | 天津大学 | 基于图像内容的逆色调映射方法 |
| WO2020081126A1 (en) * | 2018-10-19 | 2020-04-23 | Gopro, Inc. | Tone mapping and tone control integrations for image processing |
| KR102127760B1 (ko) | 2018-11-30 | 2020-06-29 | 고려대학교 산학협력단 | 단일 영상을 기반으로 한 인버스 톤 매핑의 최적화 장치 및 방법, 상기 방법을 수행하기 위한 기록 매체 |
| WO2020216380A1 (en) * | 2019-04-26 | 2020-10-29 | Beijing Bytedance Network Technology Co., Ltd. | Prediction of parameters for in-loop reshaping |
| CN110223256A (zh) | 2019-06-10 | 2019-09-10 | 北京大学深圳研究生院 | 一种逆色调映射方法、装置及电子设备 |
| CN112565645B (zh) * | 2019-09-10 | 2023-07-25 | 瑞昱半导体股份有限公司 | 视角图像补偿方法与电路系统 |
| CN110874816B (zh) * | 2019-11-19 | 2023-07-04 | 抖音视界有限公司 | 一种图像处理方法、装置、移动终端及存储介质 |
| JP2023516184A (ja) | 2020-03-02 | 2023-04-18 | インターデジタル ブイシー ホールディングス フランス | 逆トーンマッピングのための方法及び装置 |
| EP4172928A1 (en) | 2020-06-26 | 2023-05-03 | InterDigital CE Patent Holdings, SAS | Inverse tone mapping with adaptive bright-spot attenuation |
| CN111667541B (zh) * | 2020-06-28 | 2023-07-18 | 北京美摄网络科技有限公司 | 图像颜色量化方法、装置、电子设备及存储介质 |
| CN112200753B (zh) * | 2020-10-30 | 2023-02-10 | 青岛海泰新光科技股份有限公司 | 一种图像宽动态范围的处理方法 |
| JP2023554451A (ja) * | 2020-12-21 | 2023-12-27 | フォンダシオン ベー－コム | 画像の、より高ダイナミックレンジを有する出力画像への変換 |
| CN113518185B (zh) * | 2020-12-30 | 2022-08-05 | 腾讯科技（深圳）有限公司 | 视频转换处理方法、装置、计算机可读介质及电子设备 |
| CN115018714A (zh) * | 2021-03-05 | 2022-09-06 | 思特威(上海)电子科技股份有限公司 | 一种图像像素值映射方法、成像装置及计算机存储介质 |
| US11544827B2 (en) * | 2021-04-30 | 2023-01-03 | Realnetworks, Inc. | Hue-based video enhancement and rendering |
| CN113570519B (zh) * | 2021-07-27 | 2024-03-22 | 重庆金山医疗技术研究院有限公司 | 一种hdr图像快速映射显示方法 |
| WO2023138913A1 (en) | 2022-01-19 | 2023-07-27 | Interdigital Vc Holdings France, Sas | Expansion function selection in an inverse tone mapping process |
Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101690169A (zh) * | 2007-06-27 | 2010-03-31 | 韩国科亚电子股份有限公司 | 非线性色调映射设备和方法以及其上存储有用于执行该方法的计算机可执行指令的计算机可读介质 |
| CN102696220A (zh) * | 2009-10-08 | 2012-09-26 | 国际商业机器公司 | 将数字图像从低动态范围图像转换为高动态范围图像的方法与系统 |
Family Cites Families (19)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US6731823B1 (en) * | 1999-12-22 | 2004-05-04 | Eastman Kodak Company | Method for enhancing the edge contrast of a digital image independently from the texture |
| JP4102985B2 (ja) * | 2002-11-21 | 2008-06-18 | セイコーエプソン株式会社 | 画像処理システム、プロジェクタ、プログラム、情報記憶媒体および画像処理方法 |
| US8050512B2 (en) * | 2004-11-16 | 2011-11-01 | Sharp Laboratories Of America, Inc. | High dynamic range images from low dynamic range images |
| JP5411706B2 (ja) | 2006-11-27 | 2014-02-12 | ドルビー ラボラトリーズ ライセンシング コーポレイション | デジタル画像のダイナミックレンジを増強するための装置及び方法 |
| CA2570090C (en) * | 2006-12-06 | 2014-08-19 | Brightside Technologies Inc. | Representing and reconstructing high dynamic range images |
| US8233738B2 (en) | 2007-07-30 | 2012-07-31 | Dolby Laboratories Licensing Corporation | Enhancing dynamic ranges of images |
| US20090317017A1 (en) * | 2008-06-20 | 2009-12-24 | The Hong Kong University Of Science And Technology | Image characteristic oriented tone mapping for high dynamic range images |
| BRPI0817767A2 (pt) | 2007-10-16 | 2020-01-28 | Thomson Licensing | métodos e aparelhos para remoção de artefato para capacidade de escalonamento de profundidade de bit |
| JP5188356B2 (ja) | 2008-02-28 | 2013-04-24 | ミツビシ・エレクトリック・リサーチ・ラボラトリーズ・インコーポレイテッド | 復号器において画像を逆トーンマッピングする方法 |
| US8184693B2 (en) * | 2008-04-11 | 2012-05-22 | Intel Corporation | Adaptive filtering for bit-depth scalable video codec |
| US9338475B2 (en) * | 2008-04-16 | 2016-05-10 | Intel Corporation | Tone mapping for bit-depth scalable video codec |
| US8290295B2 (en) * | 2009-03-03 | 2012-10-16 | Microsoft Corporation | Multi-modal tone-mapping of images |
| RU2504011C2 (ru) | 2009-03-13 | 2014-01-10 | Долби Лабораторис Лайсэнзин Корпорейшн | Многоуровневое сжатие видеоизображения с расширенным динамическим диапазоном, визуальным динамическим диапазоном и широкой цветовой гаммой |
| CN102422322B (zh) | 2009-05-11 | 2015-01-21 | 杜比实验室特许公司 | 用于在目标环境下在装置处再现来自源环境的图像的色貌的方法和设备 |
| US8606009B2 (en) * | 2010-02-04 | 2013-12-10 | Microsoft Corporation | High dynamic range image generation and rendering |
| US9129445B2 (en) * | 2012-03-14 | 2015-09-08 | Dolby Laboratories Licensing Corporation | Efficient tone-mapping of high-bit-depth video to low-bit-depth display |
| WO2015113655A1 (en) * | 2014-01-31 | 2015-08-06 | Thomson Licensing | Method for conversion of a saturated image into a non-saturated image |
| EP3136736A1 (en) * | 2015-08-25 | 2017-03-01 | Thomson Licensing | Method for inverse tone mapping of a sequence of images |
| EP3139342A1 (en) * | 2015-09-02 | 2017-03-08 | Thomson Licensing | Methods, systems and apparatus for over-exposure correction |
-
2014
- 2014-12-02 ES ES14806604.6T patent/ES2690371T3/es active Active
- 2014-12-02 JP JP2016543050A patent/JP6461165B2/ja active Active
- 2014-12-02 KR KR1020167020125A patent/KR102234092B1/ko active IP Right Grant
- 2014-12-02 WO PCT/EP2014/076183 patent/WO2015096955A1/en active Application Filing
- 2014-12-02 EP EP14806604.6A patent/EP3087730B1/en active Active
- 2014-12-02 US US15/108,562 patent/US9911181B2/en active Active
- 2014-12-02 CN CN201480070990.4A patent/CN105850114B/zh active Active
- 2014-12-02 PL PL14806604T patent/PL3087730T3/pl unknown
Patent Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101690169A (zh) * | 2007-06-27 | 2010-03-31 | 韩国科亚电子股份有限公司 | 非线性色调映射设备和方法以及其上存储有用于执行该方法的计算机可执行指令的计算机可读介质 |
| CN102696220A (zh) * | 2009-10-08 | 2012-09-26 | 国际商业机器公司 | 将数字图像从低动态范围图像转换为高动态范围图像的方法与系统 |
Also Published As
| Publication number | Publication date |
|---|---|
| EP3087730B1 (en) | 2018-08-01 |
| PL3087730T3 (pl) | 2018-12-31 |
| WO2015096955A1 (en) | 2015-07-02 |
| US20160328830A1 (en) | 2016-11-10 |
| KR102234092B1 (ko) | 2021-04-01 |
| US9911181B2 (en) | 2018-03-06 |
| ES2690371T3 (es) | 2018-11-20 |
| JP6461165B2 (ja) | 2019-01-30 |
| CN105850114A (zh) | 2016-08-10 |
| JP2017502602A (ja) | 2017-01-19 |
| KR20160102524A (ko) | 2016-08-30 |
| EP3087730A1 (en) | 2016-11-02 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN105850114B (zh) | 用于图像的逆色调映射的方法 | |
| CN108027961B (zh) | 用于从数字图像提供扩展的动态范围图像的方法和装置 | |
| US10152781B2 (en) | Method for image processing using local statistics convolution | |
| US10013745B2 (en) | Method for inverse tone mapping of a sequence of images | |
| KR102157032B1 (ko) | 고 동적 범위 비디오에 대한 디스플레이 관리 | |
| US9495582B2 (en) | Digital makeup | |
| EP2852152B1 (en) | Image processing method, apparatus and shooting terminal | |
| US8059911B2 (en) | Depth-based image enhancement | |
| US20120093433A1 (en) | Dynamic Adjustment of Noise Filter Strengths for use with Dynamic Range Enhancement of Images | |
| CN107862672B (zh) | 图像去雾的方法及装置 | |
| KR101668829B1 (ko) | 공간 주파수 상에서 인간 시각 특성이 반영된 텍스처 향상 방법 및 장치 | |
| CN116468636A (zh) | 低照度增强方法、装置、电子设备和可读存储介质 | |
| CN110140150B (zh) | 一种图像处理方法、装置以及终端设备 | |
| WO2023205548A1 (en) | Generating hdr image from corresponding camera raw and sdr images | |
| CN117876283A (zh) | 一种自动驾驶高动态场景图像处理方法与装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant | ||
| TR01 | Transfer of patent right | ||
| TR01 | Transfer of patent right |
Effective date of registration: 20191107 Address after: Delaware, USA Patentee after: Interactive Digital VC Holding Company Address before: The French Yixilaimu Leo City Patentee before: Thomson Licensing Company |
|
| TR01 | Transfer of patent right | ||
| TR01 | Transfer of patent right |
Effective date of registration: 20201217 Address after: Fa Guobali Patentee after: Interactive Digital Madison Patent Holdings Address before: Delaware, USA Patentee before: Interactive Digital VC Holdings |