CN113393391A - 图像增强方法、图像增强装置、电子设备和存储介质 - Google Patents
图像增强方法、图像增强装置、电子设备和存储介质 Download PDFInfo
- Publication number
- CN113393391A CN113393391A CN202110648398.XA CN202110648398A CN113393391A CN 113393391 A CN113393391 A CN 113393391A CN 202110648398 A CN202110648398 A CN 202110648398A CN 113393391 A CN113393391 A CN 113393391A
- Authority
- CN
- China
- Prior art keywords
- image
- pixel points
- local
- exposure information
- ratio
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 52
- 230000004044 response Effects 0.000 claims abstract description 7
- 230000006835 compression Effects 0.000 claims description 60
- 238000007906 compression Methods 0.000 claims description 60
- 238000013507 mapping Methods 0.000 claims description 11
- 230000002708 enhancing effect Effects 0.000 claims description 9
- 230000011218 segmentation Effects 0.000 claims 1
- 230000000694 effects Effects 0.000 description 23
- 238000010586 diagram Methods 0.000 description 12
- 230000003321 amplification Effects 0.000 description 8
- 238000003199 nucleic acid amplification method Methods 0.000 description 8
- 230000001965 increasing effect Effects 0.000 description 7
- 238000004891 communication Methods 0.000 description 5
- 230000006870 function Effects 0.000 description 5
- 230000003287 optical effect Effects 0.000 description 2
- 238000001514 detection method Methods 0.000 description 1
- 238000007599 discharging Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/90—Dynamic range modification of images or parts thereof
- G06T5/94—Dynamic range modification of images or parts thereof based on local image properties, e.g. for local contrast enhancement
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20021—Dividing image into blocks, subimages or windows
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20172—Image enhancement details
- G06T2207/20208—High dynamic range [HDR] image processing
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Studio Devices (AREA)
- Image Processing (AREA)
Abstract
本申请公开了一种图像增强方法、图像增强装置、电子设备和存储介质,属于图像处理技术领域,其中,图像增强方法,包括:在显示高动态图像的情况下,接收对高动态图像的局部放大输入;响应于局部放大输入,确定对应的缩放区域,以及缩放区域内的局部图像,其中局部图像是高动态图像的部分;根据局部图像,获取对应的曝光信息;根据曝光信息,对局部图像进行增强显示。
Description
技术领域
本申请属于图像处理技术领域,具体涉及一种图像增强方法、图像增强装置、电子设备和存储介质。
背景技术
在相关技术中,高动态范围(High-dynamic Range,HDR)图像能够显示更高的动态范围,从而得到更好的色彩和对比度。
但是HDR图像是全图高动态范围显示,当对HDR图像的局部进行缩放后,由于区域内的动态范围减少,会导致局部的对比度下降或细节清晰度不足的情况,从而导致HDR图像失去高动态范围效果,用户体验不佳。
发明内容
本申请实施例的目的是提供一种图像增强方法、图像增强装置、电子设备和存储介质,能够解决HDR图像缩放后失去高动态范围效果的问题。
第一方面,本申请实施例提供了一种图像增强方法,包括:
在显示高动态图像的情况下,接收对高动态图像的局部放大输入;
响应于局部放大输入,确定对应的局部图像,其中局部图像是高动态图像的部分;
根据局部图像,获取对应的曝光信息;
根据曝光信息,对局部图像进行增强显示。
第二方面,本申请实施例提供了一种图像增强装置,包括:
接收单元,用于在显示高动态图像的情况下,接收对高动态图像的局部放大输入;
确定单元,用于响应于局部放大输入,确定对应的局部图像,其中局部图像是高动态图像的部分;
获取单元,用于根据局部图像,获取对应的曝光信息;
增强单元,用于根据曝光信息,对局部图像进行增强显示。
第三方面,本申请实施例提供了一种电子设备,包括处理器,存储器及存储在存储器上并可在处理器上运行的程序或指令,程序或指令被处理器执行时实现如第一方面的方法的步骤。
第四方面,本申请实施例提供了一种可读存储介质,该可读存储介质上存储程序或指令,该程序或指令被处理器执行时实现如第一方面的方法的步骤。
第五方面,本申请实施例提供了一种芯片,该芯片包括处理器和通信接口,该通信接口和该处理器耦合,该处理器用于运行程序或指令,实现如第一方面的方法的步骤。
在本申请实施例中,高动态图像具体为高动态范围图像,即HDR图像,在显示高动态图像的情况下,如果接收到了用户的局部放大输入,则根据局部放大输入确定对应的缩放区域,具体的应用场景为:当前电子设备(如手机、平板电脑、笔记本电脑、电脑显示器或电视)显示了高动态图像的完整图像,在接收到用户的局部放大输入之后,变为显示高动态图像的一部分。
具体地,比如用户通过两指外扩的方式,将高动态图像的一部分进行放大显示,此时根据用户两指外扩的距离,在高动态图像上确定一个缩放区域,并确定缩放区域所覆盖的局部图像,能够理解的是,局部图像是高动态图像的一部分。
在确定了局部图像后,进一步根据局部图像,获取对应的曝光信息,该曝光信息为与高动态图像一并保存的原始曝光信息,该原始曝光信息包括高动态图像的全部或部分像素点的原始曝光信息。根据局部图像,确定与之对应的原始曝光信息,即在全部原始曝光信息中,获取局部图像中像素点的原始曝光信息,并通过这些曝光信息,对局部图像中的像素点进行增强显示,如增强色彩和动态范围,对暗部区域的亮度进行降低,同时对亮部区域的亮度进行增加,从而对局部图像实现增强显示,使其保持高动态范围显示。
本申请实施例中,在保存HDR图像时,同步保存该图像的原始的曝光信息,在对HDR图像进行局部放大显示后,通过利用所保存的曝光信息,对放大显示的区域,重新进行色调映射和亮度调节,从而增强局部放大后的图像的对比度和色彩表现,使得HDR图像在局部放大后所显示的局部图像仍然能够保留高动态范围的显示效果,从而能够解决HDR图像缩放后失去高动态范围效果的问题,提高了HDR图像的显示效果。
附图说明
图1示出了根据本申请实施例的图像增强方法的流程图之一;
图2示出了根据本申请实施例的图像增强方法的示意图之一;
图3示出了根据本申请实施例的图像增强方法的示意图之二;
图4示出了根据本申请实施例的图像增强装置的结构框图;
图5示出了根据本申请实施例的电子设备的结构框图;
图6为实现本申请实施例的一种电子设备的硬件结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚地描述,显然,所描述的实施例是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员获得的所有其他实施例,都属于本申请保护的范围。
本申请的说明书和权利要求书中的术语“第一”、“第二”等是用于区别类似的对象,而不用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施,且“第一”、“第二”等所区分的对象通常为一类,并不限定对象的个数,例如第一对象可以是一个,也可以是多个。此外,说明书以及权利要求中“和/或”表示所连接对象的至少其中之一,字符“/”,一般表示前后关联对象是一种“或”的关系。
下面结合附图,通过具体的实施例及其应用场景对本申请实施例提供的进行详细地说明。
在本申请的一些实施例中,提供了一种图像增强方法,图1示出了根据本申请实施例的图像增强方法的流程图之一,如图1所示,方法包括:
步骤102,在显示高动态图像的情况下,接收对高动态图像的局部放大输入;
步骤104,响应于局部放大输入,确定对应的局部图像,其中局部图像是高动态图像的部分;
步骤106,根据局部图像,获取对应的曝光信息;
步骤108,根据曝光信息,对局部图像进行增强显示。
在本申请实施例中,高动态图像具体为高动态范围图像,即HDR图像,在显示高动态图像的情况下,如果接收到了用户的局部放大输入,则根据局部放大输入确定对应的缩放区域,具体的应用场景为:当前电子设备(如手机、平板电脑、笔记本电脑、电脑显示器或电视)显示了高动态图像的完整图像,在接收到用户的局部放大输入之后,变为显示高动态图像的一部分。
具体地,比如用户通过两指外扩的方式,将高动态图像的一部分进行放大显示,此时根据用户两指外扩的距离,在高动态图像上确定一个缩放区域,并确定缩放区域所覆盖的局部图像,能够理解的是,局部图像是高动态图像的一部分。
在确定了局部图像后,进一步根据局部图像,获取对应的曝光信息,该曝光信息为与高动态图像一并保存的原始曝光信息,该原始曝光信息包括高动态图像的全部或部分像素点的原始曝光信息。根据局部图像,确定与之对应的原始曝光信息,即在全部原始曝光信息中,获取局部图像中像素点的原始曝光信息,并通过这些曝光信息,对局部图像中的像素点进行增强显示,如增强色彩和动态范围,对暗部区域的亮度进行降低,同时对亮部区域的亮度进行增加,从而对局部图像实现增强显示,使其保持高动态范围显示。
本申请实施例中,在保存HDR图像时,同步保存该图像的原始的曝光信息,在对HDR图像进行局部放大显示后,通过利用所保存的曝光信息,对放大显示的区域,重新进行色调映射和亮度调节,从而增强局部放大后的图像的对比度和色彩表现,使得HDR图像在局部放大后所显示的局部图像仍然能够保留高动态范围的显示效果,从而能够解决HDR图像缩放后失去高动态范围效果的问题,提高了HDR图像的显示效果。
在本申请的一些实施例中,根据曝光信息,根据局部图像,获取对应的曝光信息,包括:
确定局部图像中包含的全部N个像素点,其中N为大于1的整数;
根据曝光信息,确定N个像素点中每一个像素点的曝光数据;
根据曝光信息,对局部图像进行增强显示,包括:
通过曝光数据,对N个像素点进行色调映射,以对局部图像进行增强显示。
在本申请实施例中,在根据用户的局部放大输入,确定了局部图像之后,对局部图像进行增强显示。具体地,首先确定当前缩放区域中,局部图像包含的全部N个像素点。举例来说,高动态图像的像素点尺寸为1920×1080,则高动态图像共包括了2,073,600个像素点。用户通过局部放大输入,将高动态图像的四分之一进行了放大,得到了局部图像,此时局部图像的像素点尺寸为960×540,即局部图像共包括了518,400个像素点,也即N=518400。
进一步地,在曝光信息中,确定这N个(518400个)像素点中,每个像素点的曝光数据,根据每个像素点的曝光数据,对每个像素点进行色调映射,从而对暗区像素进一步拉暗,对亮区像素进一步提量,从而增强局部图像的对比度,并改善局部图像的色彩表现。
进一步具体举例来说,图2示出了根据本申请实施例的图像增强方法的示意图之一,如图2所示,电子设备200的屏幕上全屏显示高动态图像202。此时,接收到用户的局部放大输入,则切换为显示对应的局部图像204。此时,获取局部图像204对应的曝光数据,通过曝光数据对局部图像204进行增强显示。
在本申请的一些实施例中,在接收对高动态图像的局部放大输入之前,方法还包括:
分割高动态图像,得到M个图区,其中M为大于1的整数;
确定每个图区的压缩比;
在压缩比大于压缩比阈值的情况下,图区配置对应的曝光信息。
在本申请实施例中,可以对高动态图像进行分区,根据每个图区的压缩比,来确定是否为该图区配置曝光信息。具体地,将高动态图像划分成M个图区,具体可以根据高动态图像的分辨率、宽高比等信息,确定具体划分的方式。比如像素点尺寸为1920×1080的图像,其宽高比为16:9,则可以将该图像划分为16×9的144个图区。
其中,由于不同图区中,包括的图像特征不一样,因此,在形成高动态图像时,如通过相机拍摄HDR照片,首先通过县级的图像传感器(cmos)采集RAW格式的原始图像,原始图像经过相机ISPPipeline后,被压缩成JPEG-HDR图像。在这个过程中,高动态图像会损失部分画面细节,并且损失部分动态范围。而对于不同图区,其压缩比不同。
比如高动态图像的内容是以蓝天白云为背景的风景照片,其中整个图区A中仅包括蓝天的内容,其亮度平均,没有明显的明暗冲突,因此压缩比就相对较小,即使经过压缩,也不会损失动态范围。因此对于压缩比小于压缩比阈值的图区,可以不去保存配置曝光信息,从而减少JPEG-HDR图像占用的存储空间。
而当存在图区B,其中既包括蓝天等明亮的画面,也包括如山峦等较为暗的画面,其中存在明显的明暗冲突,因此压缩比相对较大,在经过压缩后,会失去部分动态范围,对于这种图区,为其保存并配置对应的曝光数据,从而在对原始图片进行局部放大时,能够根据曝光数据,对该图区内的图像进行增强,从而在局部放大后仍能保留较大的动态范围,提高HDR图像的显示效果。
在本申请的一些实施例中,确定每个图区的压缩比,包括:
获取高动态图像中,每个像素点的亮度值;
将亮度值大于或等于第一亮度阈值的像素点,标记为亮像素点;
将亮度值小于或等于第二亮度阈值的像素点,标记为暗像素点,其中,第二亮度阈值小于第一亮度阈值;
在高动态图像被压缩前,在每个图区中,确定亮像素点的数量与暗像素点的数量的第一比值;
在高动态图像被压缩后,在每个图区中,确定亮像素点的数量与暗像素点的数量的第二比值;
根据第二比值和第一比值的比值,确定压缩比。
在本申请实施例中,根据压缩前后,图区中像素点的亮暗比变化,来确定压缩比。具体地,首先,对高动态图像中每个像素点的亮度值进行获取,其中,将亮度大于等于第一亮度阈值的像素点标记位上述亮像素点,同时将亮度小于等于第二亮度阈值的像素点标记为上述暗像素点。比如,假设亮度的范围是0到255,则可以将亮度大于等于200的像素点标记为亮像素点,将亮度小于等于50的像素点标记为暗像素点。
进一步地,分别在压缩前后,确定每个图区中,亮像素数量与暗像素的比值,也即每个图区的亮暗比。其中,对于同一个图区,其在压缩前,亮像素数量与暗像素的比值为第一比值,在压缩后为第二比值。
具体地,由于压缩会损失动态范围,比如原始的亮度范围是0-255,压缩后亮度范围缩小。因此,对于一个亮暗比较大,明亮冲突大的图区,在压缩后,其中亮像素的亮度降低,按像素的亮度提高,因此亮暗比会显著降低。而对于亮暗比本就很小,明亮冲突不大的图区,即使对其进行了压缩,其亮暗比变化也不会很大。
因此,根据第二比值和第一比值的比值,就能反映出压缩前后,图区的亮暗比的变化幅度,如果压缩比小,可以不去保存配置曝光信息,从而减少JPEG-HDR图像占用的存储空间。如果压缩比大,则为其保存并配置对应的曝光数据,从而在对原始图片进行局部放大时,能够根据曝光数据,对该图区内的图像进行增强,从而在局部放大后仍能保留较大的动态范围,提高HDR图像的显示效果。
在本申请的一些实施例中,根据曝光信息,对局部图像进行增强显示,包括:
在M个图区中,确定包含至少部分局部图像的目标图区;
在目标图区配置有曝光信息的情况下,根据曝光信息,对目标图区进行增强显示。
在本申请实施例中,对于将高动态图像划分为M个图区的情况,在确定了局部图像后,首先确定包含了至少部分局部图像的目标图区。具体地,图3示出了根据本申请实施例的图像增强方法的示意图之二,如图3所示,其中包括多个图区,其中,第一目标图区302内的全部显示内容均属于局部图像300的一部分,第二目标图区304的显示内容中的一部分属于局部图像300。
进一步地,获取目标图区302和目标图区304的曝光信息。其中,第一目标图区302被配置了曝光信息,则根据曝光信息,对第一目标图区302中的图像进行增强显示。而第二目标图区304的压缩比较小,没有配置曝光信息,则不对第二目标图区304进行增强。从而在提高HDR图像的显示效果,使HDR图像在局部放大后仍能保留较大的动态范围的前提下,减小HDR图像占用的存储空间。
在本申请的一些实施例中,提供了一种图像增强装置,图4示出了根据本申请实施例的图像增强装置的结构框图,如图4所示,图像增强装置400包括:
接收单元402,用于在显示高动态图像的情况下,接收对高动态图像的局部放大输入;
确定单元404,用于响应于局部放大输入,确定对应的局部图像,其中局部图像是高动态图像的部分;
获取单元410,用于根据局部图像,确定对应的曝光信息;
增强单元406,用于根据曝光信息,对局部图像进行增强显示。
在本申请实施例中,高动态图像具体为高动态范围图像,即HDR图像,在显示高动态图像的情况下,如果接收到了用户的局部放大输入,则根据局部放大输入确定对应的缩放区域,具体的应用场景为:当前电子设备(如手机、平板电脑、笔记本电脑、电脑显示器或电视)显示了高动态图像的完整图像,在接收到用户的局部放大输入之后,变为显示高动态图像的一部分。
具体地,比如用户通过两指外扩的方式,将高动态图像的一部分进行放大显示,此时根据用户两指外扩的距离,在高动态图像上确定一个缩放区域,并确定缩放区域所覆盖的局部图像,能够理解的是,局部图像是高动态图像的一部分。
在确定了局部图像后,进一步根据局部图像,获取对应的曝光信息,该曝光信息为与高动态图像一并保存的原始曝光信息,该原始曝光信息包括高动态图像的全部或部分像素点的原始曝光信息。根据局部图像,确定与之对应的原始曝光信息,即在全部原始曝光信息中,获取局部图像中像素点的原始曝光信息,并通过这些曝光信息,对局部图像中的像素点进行增强显示,如增强色彩和动态范围,对暗部区域的亮度进行降低,同时对亮部区域的亮度进行增加,从而对局部图像实现增强显示,使其保持高动态范围显示。
本申请实施例中,在保存HDR图像时,同步保存该图像的原始的曝光信息,在对HDR图像进行局部放大显示后,通过利用所保存的曝光信息,对放大显示的区域,重新进行色调映射和亮度调节,从而增强局部放大后的图像的对比度和色彩表现,使得HDR图像在局部放大后所显示的局部图像仍然能够保留高动态范围的显示效果,从而能够解决HDR图像缩放后失去高动态范围效果的问题,提高了HDR图像的显示效果。
在本申请的一些实施例中,确定单元404还用于确定局部图像中包含的全部N个像素点,其中N为大于1的整数;根据曝光信息,确定N个像素点中每一个像素点的曝光数据;
增强单元406还用于通过曝光数据,对N个像素点进行色调映射,以对局部图像进行增强显示。
在本申请实施例中,在根据用户的局部放大输入,确定了局部图像之后,对局部图像进行增强显示。具体地,首先确定当前缩放区域中,局部图像包含的全部N个像素点。举例来说,高动态图像的像素点尺寸为1920×1080,则高动态图像共包括了2,073,600个像素点。用户通过局部放大输入,将高动态图像的四分之一进行了放大,得到了局部图像,此时局部图像的像素点尺寸为960×540,即局部图像共包括了518,400个像素点,也即N=518400。
进一步地,在曝光信息中,确定这N个(518400个)像素点中,每个像素点的曝光数据,根据每个像素点的曝光数据,对每个像素点进行色调映射,从而对暗区像素进一步拉暗,对亮区像素进一步提量,从而增强局部图像的对比度,并改善局部图像的色彩表现。
在本申请的一些实施例中,图像增强装置400还包括:
分割单元408,用于分割高动态图像,得到M个图区,其中M为大于1的整数;
确定单元404还用于确定每个图区的压缩比;在压缩比大于压缩比阈值的情况下,图区配置对应的曝光信息。
在本申请实施例中,可以对高动态图像进行分区,根据每个图区的压缩比,来确定是否为该图区配置曝光信息。具体地,将高动态图像划分成M个图区,具体可以根据高动态图像的分辨率、宽高比等信息,确定具体划分的方式。比如像素点尺寸为1920×1080的图像,其宽高比为16:9,则可以将该图像划分为16×9的144个图区。
其中,由于不同图区中,包括的图像特征不一样,因此,在形成高动态图像时,如通过相机拍摄HDR照片,首先通过县级的图像传感器(cmos)采集RAW格式的原始图像,原始图像经过相机的ISP Pipeline后,被压缩成JPEG-HDR图像。在这个过程中,高动态图像会损失部分画面细节,并且损失部分动态范围。而对于不同图区,其压缩比不同。
比如高动态图像的内容是以蓝天白云为背景的风景照片,其中整个图区A中仅包括蓝天的内容,其亮度平均,没有明显的明暗冲突,因此压缩比就相对较小,即使经过压缩,也不会损失动态范围。因此对于压缩比小于压缩比阈值的图区,可以不去保存配置曝光信息,从而减少JPEG-HDR图像占用的存储空间。
而当存在图区B,其中既包括蓝天等明亮的画面,也包括如山峦等较为暗的画面,其中存在明显的明暗冲突,因此压缩比相对较大,在经过压缩后,会失去部分动态范围,对于这种图区,为其保存并配置对应的曝光数据,从而在对原始图片进行局部放大时,能够根据曝光数据,对该图区内的图像进行增强,从而在局部放大后仍能保留较大的动态范围,提高HDR图像的显示效果。
在本申请的一些实施例中,获取单元410还用于获取高动态图像中,每个像素点的亮度值;
图像增强装置400还包括:
标记单元412,用于将亮度值大于或等于第一亮度阈值的像素点,标记为亮像素点;将亮度值小于或等于第二亮度阈值的像素点,标记为暗像素点,其中,第二亮度阈值小于第一亮度阈值;
确定单元404,还用于在高动态图像被压缩前,在每个图区中,确定亮像素点的数量与暗像素点的数量的第一比值;在高动态图像被压缩后,在每个图区中,确定亮像素点的数量与暗像素点的数量的第二比值;根据第一比值和第二比值的比值,确定压缩比。
在本申请实施例中,根据压缩前后,图区中像素点的亮暗比变化,来确定压缩比。具体地,首先,对高动态图像中每个像素点的亮度值进行获取,其中,将亮度大于等于第一亮度阈值的像素点标记位上述亮像素点,同时将亮度小于等于第二亮度阈值的像素点标记为上述暗像素点。比如,假设亮度的范围是0到255,则可以将亮度大于等于200的像素点标记为亮像素点,将亮度小于等于50的像素点标记为暗像素点。
进一步地,分别在压缩前后,确定每个图区中,亮像素数量与暗像素的比值,也即每个图区的亮暗比。其中,对于同一个图区,其在压缩前,亮像素数量与暗像素的比值为第一比值,在压缩后为第二比值。
具体地,由于压缩会损失动态范围,比如原始的亮度范围是0-255,压缩后亮度范围缩小。因此,对于一个亮暗比较大,明亮冲突大的图区,在压缩后,其中亮像素的亮度降低,按像素的亮度提高,因此亮暗比会显著降低。而对于亮暗比本就很小,明亮冲突不大的图区,即使对其进行了压缩,其亮暗比变化也不会很大。
因此,根据第二比值和第一比值的比值,就能反映出压缩前后,图区的亮暗比的变化幅度,如果压缩比小,可以不去保存配置曝光信息,从而减少JPEG-HDR图像占用的存储空间。如果压缩比大,则为其保存并配置对应的曝光数据,从而在对原始图片进行局部放大时,能够根据曝光数据,对该图区内的图像进行增强,从而在局部放大后仍能保留较大的动态范围,提高HDR图像的显示效果。
在本申请的一些实施例中,确定单元404还用于在M个图区中,确定包含至少部分局部图像的目标图区;
增强单元406还用于在目标图区配置有曝光信息的情况下,根据曝光信息,对目标图区进行增强显示。
在本申请实施例中,对于将高动态图像划分为M个图区的情况,在确定了局部图像后,首先确定包含了至少部分局部图像的目标图区。具体地,图3示出了根据本申请实施例的图像增强方法的示意图之二,如图3所示,其中包括多个图区,其中,目标图区302内的全部显示内容均属于局部图像300的一部分,第二目标图区304的显示内容中的一部分属于局部图像300。
进一步地,获取目标图区302和目标图区304的曝光信息。其中,目标图区302被配置了曝光信息,则根据曝光信息,对目标图区302中的图像进行增强显示。而目标图区304的压缩比较小,没有配置曝光信息,则不对目标图区304进行增强。从而在提高HDR图像的显示效果,使HDR图像在局部放大后仍能保留较大的动态范围的前提下,减小HDR图像占用的存储空间。
本申请实施例中的图像增强装置可以是装置,也可以是终端中的部件、集成电路、或芯片。该装置可以是移动电子设备,也可以为非移动电子设备。示例性的,移动电子设备可以为手机、平板电脑、笔记本电脑、掌上电脑、车载电子设备、可穿戴设备、超级移动个人计算机(ultra-mobile personal computer,UMPC)、上网本或者个人数字助理(personaldigital assistant,PDA)等,非移动电子设备可以为服务器、网络附属存储器(NetworkAttached Storage,NAS)、个人计算机(personal computer,PC)、电视机(television,TV)、柜员机或者自助机等,本申请实施例不作具体限定。
本申请实施例中的图像增强装置可以为具有操作系统的装置。该操作系统可以为安卓(Android)操作系统,可以为iOS操作系统,还可以为其他可能的操作系统,本申请实施例不作具体限定。
本申请实施例提供的图像增强装置能够实现上述方法实施例实现的各个过程,为避免重复,这里不再赘述。
可选地,本申请实施例还提供一种电子设备500,图5示出了根据本申请实施例的电子设备的结构框图,如图5所示,包括处理器502,存储器504,存储在存储器504上并可在处理器502上运行的程序或指令,该程序或指令被处理器502执行时实现上述方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
需要说明的是,本申请实施例中的电子设备包括上述的移动电子设备和非移动电子设备。
图6为实现本申请实施例的一种电子设备的硬件结构示意图。
该电子设备2000包括但不限于:射频单元2001、网络模块2002、音频输出单元2003、输入单元2004、传感器2005、显示单元2006、用户输入单元2007、接口单元2008、存储器2009、以及处理器2010等部件。
本领域技术人员可以理解,电子设备2000还可以包括给各个部件供电的电源2011(比如电池),电源2011可以通过电源管理系统与处理器2010逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。图6中示出的电子设备结构并不构成对电子设备的限定,电子设备可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置,在此不再赘述。
其中,用户输入单元2007用于在显示高动态图像的情况下,接收对高动态图像的局部放大输入;
处理器2010用于响应于局部放大输入,确定对应的缩放区域,以及缩放区域内的局部图像,其中局部图像是高动态图像的部分;根据局部图像,获取对应的曝光信息;
显示单元2006用于根据曝光信息,对局部图像进行增强显示。
可选地,处理器2010还用于确定局部图像中包含的全部N个像素点;根据曝光信息,确定N个像素点中每一个像素点的曝光数据;
显示单元2006用于通过曝光数据,对N个像素点进行色调映射,以对局部图像进行增强显示。
可选地,处理器2010还用于分割高动态图像,得到M个图区,其中M为大于1的整数;确定每个图区的压缩比;在压缩比大于压缩比阈值的情况下,为图区配置对应的曝光信息。
可选地,处理器2010还用于获取高动态图像中,每个像素点的亮度值;
将亮度值大于或等于第一亮度阈值的像素点,标记为亮像素点;
将亮度值小于或等于第二亮度阈值的像素点,标记为暗像素点,其中,第二亮度阈值小于第一亮度阈值;
在高动态图像被压缩前,在每个图区中,确定亮像素点的数量与暗像素点的数量的第一比值;
在高动态图像被压缩后,在每个图区中,确定亮像素点的数量与暗像素点的数量的第二比值;
根据第一比值和第二比值的比值,确定压缩比。
可选地,处理器2010还用于在M个图区中,确定包含至少部分局部图像的目标图区;
显示单元2006还用于在目标图区配置有曝光信息的情况下,根据曝光信息,对目标图区进行增强显示。
本申请实施例中,在保存HDR图像时,同步保存该图像的原始的曝光信息,在对HDR图像进行局部放大显示后,通过利用所保存的曝光信息,对放大显示的区域,重新进行色调映射和亮度调节,从而增强局部放大后的图像的对比度和色彩表现,使得HDR图像在局部放大后所显示的局部图像仍然能够保留高动态范围的显示效果,从而能够解决HDR图像缩放后失去高动态范围效果的问题,提高了HDR图像的显示效果。
应理解的是,本申请实施例中,输入单元2004可以包括图形处理器(GraphicsProcessing Unit,GPU)5082和麦克风5084,图形处理器5082对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的图片或视频的图像数据进行处理。
显示单元2006可包括显示面板5122,可以采用液晶显示器、有机发光二极管等形式来配置显示面板5122。用户输入单元2007包括触控面板5142以及其他输入设备5144。触控面板5142,也称为触摸屏。触控面板5142可包括触摸检测装置和触摸控制器两个部分。其他输入设备5144可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆,在此不再赘述。存储器2009可用于存储软件程序以及各种数据,包括但不限于应用程序和操作系统。处理器2010可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器2010中。
本申请实施例还提供一种可读存储介质,可读存储介质上存储有程序或指令,该程序或指令被处理器执行时实现上述方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
其中,处理器为上述实施例中的电子设备中的处理器。可读存储介质,包括计算机可读存储介质,如计算机只读存储器(Read-Only Memory,ROM)、随机存取存储器(RandomAccess Memory,RAM)、磁碟或者光盘等。
本申请实施例另提供了一种芯片,芯片包括处理器和通信接口,通信接口和处理器耦合,处理器用于运行程序或指令,实现上述方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
应理解,本申请实施例提到的芯片还可以称为系统级芯片、系统芯片、芯片系统或片上系统芯片等。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。此外,需要指出的是,本申请实施方式中的方法和装置的范围不限按示出或讨论的顺序来执行功能,还可包括根据所涉及的功能按基本同时的方式或按相反的顺序来执行功能,例如,可以按不同于所描述的次序来执行所描述的方法,并且还可以添加、省去、或组合各种步骤。另外,参照某些示例所描述的特征可在其他示例中被组合。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以计算机软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端(可以是手机,计算机,服务器,或者网络设备等)执行本申请各个实施例的方法。
上面结合附图对本申请的实施例进行了描述,但是本申请并不局限于上述的具体实施方式,上述的具体实施方式仅仅是示意性的,而不是限制性的,本领域的普通技术人员在本申请的启示下,在不脱离本申请宗旨和权利要求所保护的范围情况下,还可做出很多形式,均属于本申请的保护之内。
Claims (12)
1.一种图像增强方法,其特征在于,包括:
在显示高动态图像的情况下,接收对所述高动态图像的局部放大输入;
响应于所述局部放大输入,确定对应的局部图像,其中所述局部图像是所述高动态图像的部分;
根据所述局部图像,获取对应的曝光信息;
根据所述曝光信息,对所述局部图像进行增强显示。
2.根据权利要求1所述的图像增强方法,其特征在于,所述根据所述局部图像,获取对应的曝光信息,包括:
确定所述局部图像中包含的全部N个像素点,其中N为大于1的整数;
根据所述曝光信息,确定所述N个像素点中每一个像素点的曝光数据;
所述根据所述曝光信息,对所述局部图像进行增强显示,包括:
通过所述曝光数据,对所述N个像素点进行色调映射,以对所述局部图像进行增强显示。
3.根据权利要求1所述的图像增强方法,其特征在于,在所述接收对所述高动态图像的局部放大输入之前,所述方法还包括:
分割所述高动态图像,得到M个图区,其中M为大于1的整数;
确定每个所述图区的压缩比;
在所述压缩比大于压缩比阈值的情况下,为所述图区配置对应的所述曝光信息。
4.根据权利要求3所述的图像增强方法,其特征在于,所述确定每个所述图区的压缩比,包括:
获取所述高动态图像中,每个像素点的亮度值;
将所述亮度值大于或等于第一亮度阈值的所述像素点,标记为亮像素点;
将所述亮度值小于或等于第二亮度阈值的所述像素点,标记为暗像素点,其中,所述第二亮度阈值小于所述第一亮度阈值;
在所述高动态图像被压缩前,在每个所述图区中,确定所述亮像素点的数量与所述暗像素点的数量的第一比值;
在所述高动态图像被压缩后,在每个所述图区中,确定所述亮像素点的数量与所述暗像素点的数量的第二比值;
根据所述第一比值和所述第二比值的比值,确定所述压缩比。
5.根据权利要求3或4所述的图像增强方法,其特征在于,所述根据所述曝光信息,对所述局部图像进行增强显示,包括:
在所述M个图区中,确定包含至少部分所述局部图像的目标图区;
在所述目标图区配置有所述曝光信息的情况下,根据所述曝光信息,对所述目标图区进行增强显示。
6.一种图像增强装置,其特征在于,包括:
接收单元,用于在显示高动态图像的情况下,接收对所述高动态图像的局部放大输入;
确定单元,用于响应于所述局部放大输入,确定对应的局部图像,其中所述局部图像是所述高动态图像的部分;
获取单元,用于根据所述局部图像,获取对应的曝光信息;
增强单元,用于根据所述曝光信息,对所述局部图像进行增强显示。
7.根据权利要求6所述的图像增强装置,其特征在于,所述确定单元还用于确定所述局部图像中包含的全部N个像素点,其中N为大于1的整数;根据所述曝光信息,确定所述N个像素点中每一个像素点的曝光数据;
所述增强单元还用于通过所述曝光数据,对所述N个像素点进行色调映射,以对所述局部图像进行增强显示。
8.根据权利要求6所述的图像增强装置,其特征在于,还包括:
分割单元,用于分割所述高动态图像,得到M个图区,其中M为大于1的整数;
所述确定单元还用于确定每个所述图区的压缩比;在所述压缩比大于压缩比阈值的情况下,所述图区配置对应的所述曝光信息。
9.根据权利要求8所述的图像增强装置,其特征在于,所述获取单元还用于获取所述高动态图像中,每个像素点的亮度值;
所述图像增强装置还包括:
标记单元,用于将所述亮度值大于或等于第一亮度阈值的所述像素点,标记为亮像素点;将所述亮度值小于或等于第二亮度阈值的所述像素点,标记为暗像素点,其中,所述第二亮度阈值小于所述第一亮度阈值;
所述确定单元,还用于在所述高动态图像被压缩前,在每个所述图区中,确定所述亮像素点的数量与所述暗像素点的数量的第一比值;在所述高动态图像被压缩后,在每个所述图区中,确定所述亮像素点的数量与所述暗像素点的数量的第二比值;根据所述第一比值和所述第二比值的比值,确定所述压缩比。
10.根据权利要求8或9所述的图像增强装置,其特征在于,所述确定单元还用于在所述M个图区中,确定包含至少部分所述局部图像的目标图区;
所述增强单元还用于在所述目标图区配置有所述曝光信息的情况下,根据所述曝光信息,对所述目标图区进行增强显示。
11.一种电子设备,其特征在于,包括处理器,存储器及存储在所述存储器上并可在所述处理器上运行的程序或指令,所述程序或指令被所述处理器执行时实现如权利要求1至5中任一项所述方法的步骤。
12.一种可读存储介质,其特征在于,所述可读存储介质上存储程序或指令,所述程序或指令被处理器执行时实现如权利要求1至5中任一项所述方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110648398.XA CN113393391B (zh) | 2021-06-10 | 2021-06-10 | 图像增强方法、图像增强装置、电子设备和存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110648398.XA CN113393391B (zh) | 2021-06-10 | 2021-06-10 | 图像增强方法、图像增强装置、电子设备和存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN113393391A true CN113393391A (zh) | 2021-09-14 |
CN113393391B CN113393391B (zh) | 2022-05-20 |
Family
ID=77620228
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110648398.XA Active CN113393391B (zh) | 2021-06-10 | 2021-06-10 | 图像增强方法、图像增强装置、电子设备和存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113393391B (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114390197A (zh) * | 2021-12-27 | 2022-04-22 | 维沃移动通信有限公司 | 拍摄方法和装置、电子设备及可读存储介质 |
Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP2166509A1 (en) * | 2008-09-22 | 2010-03-24 | Solomon Systech Limited | Method and apparatus of local contrast enhancement |
US20100177203A1 (en) * | 2009-01-15 | 2010-07-15 | Aptina Imaging Corporation | Apparatus and method for local contrast enhanced tone mapping |
CN101951523A (zh) * | 2010-09-21 | 2011-01-19 | 北京工业大学 | 一种自适应彩色图像处理方法及系统 |
CN106097279A (zh) * | 2016-06-24 | 2016-11-09 | 电子科技大学 | 一种高动态图像增强方法 |
CN106454144A (zh) * | 2016-09-08 | 2017-02-22 | 清华大学 | 一种对谷歌眼镜图像过度曝光的校正方法 |
CN107295248A (zh) * | 2016-04-11 | 2017-10-24 | 佳能株式会社 | 显示图像的图像显示设备和图像显示方法及存储介质 |
CN110060309A (zh) * | 2017-12-06 | 2019-07-26 | 康耐视公司 | 用于符号读取的局部色调映射 |
CN111709898A (zh) * | 2020-06-20 | 2020-09-25 | 昆明物理研究所 | 基于优化clahe的红外图像增强方法与系统 |
CN112365424A (zh) * | 2020-11-17 | 2021-02-12 | 昆明物理研究所 | 基于局部自适应clahe的红外图像去噪增强方法、装置、系统与计算机可读存储介质 |
-
2021
- 2021-06-10 CN CN202110648398.XA patent/CN113393391B/zh active Active
Patent Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP2166509A1 (en) * | 2008-09-22 | 2010-03-24 | Solomon Systech Limited | Method and apparatus of local contrast enhancement |
US20100177203A1 (en) * | 2009-01-15 | 2010-07-15 | Aptina Imaging Corporation | Apparatus and method for local contrast enhanced tone mapping |
CN101951523A (zh) * | 2010-09-21 | 2011-01-19 | 北京工业大学 | 一种自适应彩色图像处理方法及系统 |
CN107295248A (zh) * | 2016-04-11 | 2017-10-24 | 佳能株式会社 | 显示图像的图像显示设备和图像显示方法及存储介质 |
CN106097279A (zh) * | 2016-06-24 | 2016-11-09 | 电子科技大学 | 一种高动态图像增强方法 |
CN106454144A (zh) * | 2016-09-08 | 2017-02-22 | 清华大学 | 一种对谷歌眼镜图像过度曝光的校正方法 |
CN110060309A (zh) * | 2017-12-06 | 2019-07-26 | 康耐视公司 | 用于符号读取的局部色调映射 |
CN111709898A (zh) * | 2020-06-20 | 2020-09-25 | 昆明物理研究所 | 基于优化clahe的红外图像增强方法与系统 |
CN112365424A (zh) * | 2020-11-17 | 2021-02-12 | 昆明物理研究所 | 基于局部自适应clahe的红外图像去噪增强方法、装置、系统与计算机可读存储介质 |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114390197A (zh) * | 2021-12-27 | 2022-04-22 | 维沃移动通信有限公司 | 拍摄方法和装置、电子设备及可读存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN113393391B (zh) | 2022-05-20 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111225150B (zh) | 插帧处理方法及相关产品 | |
CN107507160B (zh) | 一种图像融合方法、终端及计算机可读存储介质 | |
EP3822758B1 (en) | Method and apparatus for setting background of ui control | |
CN113126862B (zh) | 截屏方法、装置、电子设备以及可读存储介质 | |
CN113126937A (zh) | 一种显示终端调整方法及显示终端 | |
CN112399237A (zh) | 屏幕显示控制方法、装置及电子设备 | |
CN112911147B (zh) | 显示控制方法、显示控制装置及电子设备 | |
CN109947973B (zh) | 展示区域的背景配置方法、装置、设备及可读介质 | |
US20230412914A1 (en) | Display Control Method, Electronic Device and Medium | |
WO2023056950A1 (zh) | 图像处理方法和电子设备 | |
CN111835937A (zh) | 图像处理方法、装置及电子设备 | |
CN112037160A (zh) | 图像处理方法、装置及设备 | |
CN113393391B (zh) | 图像增强方法、图像增强装置、电子设备和存储介质 | |
CN112437237B (zh) | 拍摄方法及装置 | |
CN112419218B (zh) | 图像处理方法、装置及电子设备 | |
CN112508820B (zh) | 图像处理方法、装置及电子设备 | |
CN112383708B (zh) | 拍摄方法、装置、电子设备及可读存储介质 | |
CN113284063A (zh) | 图像处理方法、图像处理装置、电子设备和可读存储介质 | |
CN111968605A (zh) | 曝光度调整方法及装置 | |
CN115049572A (zh) | 图像处理方法、装置、电子设备和计算机可读存储介质 | |
CN113012085A (zh) | 图像处理方法和装置 | |
CN113487497A (zh) | 图像处理方法、装置和电子设备 | |
CN113114930B (zh) | 信息显示方法、装置、设备及介质 | |
CN114327715B (zh) | 界面显示方法、界面显示装置、电子设备和可读存储介质 | |
CN113487700A (zh) | 图像处理方法、装置和电子设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |