CN112598609A - 一种动态图像的处理方法及装置 - Google Patents
一种动态图像的处理方法及装置 Download PDFInfo
- Publication number
- CN112598609A CN112598609A CN202011430751.9A CN202011430751A CN112598609A CN 112598609 A CN112598609 A CN 112598609A CN 202011430751 A CN202011430751 A CN 202011430751A CN 112598609 A CN112598609 A CN 112598609A
- Authority
- CN
- China
- Prior art keywords
- image
- pixel values
- pixel points
- pixel
- processed
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000003672 processing method Methods 0.000 title abstract description 7
- 238000000034 method Methods 0.000 claims abstract description 68
- 238000012545 processing Methods 0.000 claims abstract description 41
- 238000004590 computer program Methods 0.000 claims description 24
- 230000004927 fusion Effects 0.000 abstract description 12
- 238000005516 engineering process Methods 0.000 abstract description 7
- 230000008569 process Effects 0.000 description 12
- 238000003384 imaging method Methods 0.000 description 10
- 230000006870 function Effects 0.000 description 9
- 229910002056 binary alloy Inorganic materials 0.000 description 4
- 238000004364 calculation method Methods 0.000 description 4
- 238000010586 diagram Methods 0.000 description 4
- 230000004044 response Effects 0.000 description 4
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 238000012544 monitoring process Methods 0.000 description 3
- 238000004891 communication Methods 0.000 description 2
- 238000013507 mapping Methods 0.000 description 2
- 238000007500 overflow downdraw method Methods 0.000 description 2
- 238000012216 screening Methods 0.000 description 2
- 238000004422 calculation algorithm Methods 0.000 description 1
- 230000001149 cognitive effect Effects 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 230000004069 differentiation Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/50—Image enhancement or restoration using two or more images, e.g. averaging or subtraction
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/73—Deblurring; Sharpening
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10004—Still image; Photographic image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10024—Color image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20016—Hierarchical, coarse-to-fine, multiscale or multiresolution image processing; Pyramid transform
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20172—Image enhancement details
- G06T2207/20208—High dynamic range [HDR] image processing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20212—Image combination
- G06T2207/20221—Image fusion; Image merging
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Studio Devices (AREA)
- Image Processing (AREA)
Abstract
本申请适用于图像处理的技术领域，提供一种动态图像的处理及装置，方法包括：获取待处理图像中所有像素点的像素值；统计所述像素值处于预设区间的像素点的数量；根据所述数量，调整所述待处理图像中所有像素点的像素值，得到第一图像和第二图像；将所述待处理图像、所述第一图像和所述第二图像融合，得到目标图像。通过上述方案，使得目标图像由同一张图像的不同曝光图像融合而成。与传统的技术相比，由于采用同一张图像的不同曝光图像融合而成，故可解决HDR图像上出现重影、模糊或边界痕迹等问题。
Description
技术领域
本申请属于图像处理技术领域，尤其涉及一种动态图像的处理方法、装置、终端设备以及计算机可读存储介质。
背景技术
动态范围是用来描述画面中从最暗的阴影部分到最亮的高光部分的光量强度分布范围。而由于在大光比环境下拍摄，相机受到动态范围的限制，不能记录极端亮或者暗的细节。因而高动态范围成像技术(High-Dynamic Range，HDR)孕育而生。HDR技术通过拍摄三种不同曝光的图像，进而融合形成HDR图像，使得图像拥有较大的动态范围，以提高成像质量。
然而，由于三种不同曝光的图像并不是同时拍摄的，导致HDR图像上出现重影、模糊或边界痕迹等问题。
发明内容
有鉴于此，本申请实施例提供了一种动态图像的处理方法、装置、终端设备以及计算机可读存储介质，可以解决由于三种不同曝光的图像并不是同时拍摄的，导致HDR图像上出现重影、模糊或边界痕迹等问题的技术问题。
本申请实施例的第一方面提供了一种动态图像的处理方法，所述方法包括：
获取待处理图像中所有像素点的像素值；所述像素值为可表征亮度的数值；
统计所述像素值处于预设区间的像素点的数量；
根据所述数量，调整所述待处理图像中所有像素点的像素值，得到第一图像和第二图像；
将所述待处理图像、所述第一图像和所述第二图像融合，得到目标图像。
本申请实施例的第二方面提供了一种动态图像的处理装置，所述装置包括：
获取单元，用于获取待处理图像中所有像素点的像素值；所述像素值为可表征亮度的数值；
统计单元，用于统计所述像素值处于预设区间的像素点的数量；
调整单元，用于根据所述数量，调整所述待处理图像中所有像素点的像素值，得到第一图像和第二图像；
融合单元，用于将所述待处理图像、所述第一图像和所述第二图像融合，得到目标图像。
本申请实施例的第三方面提供了一种终端设备，包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现上述第一方面所述方法的步骤。
本申请实施例的第四方面提供了一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，所述计算机程序被处理器执行时实现上述第一方面所述方法的步骤。
本申请实施例与现有技术相比存在的有益效果是：本申请通过，获取待处理图像中所有像素点的像素值；统计所述像素值处于预设区间的像素点的数量；根据所述数量，调整所述待处理图像中所有像素点的像素值，得到第一图像和第二图像；将所述待处理图像、所述第一图像和所述第二图像融合，得到目标图像。通过上述方案，使得目标图像由同一张图像的不同曝光图像融合而成。与传统的技术相比，由于采用同一张图像的不同曝光图像融合而成，故可解决HDR图像上出现重影、模糊或边界痕迹等问题。
附图说明
为了更清楚地说明本申请实施例中的技术方案，下面将对实施例或相关技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其它的附图。
图1示出了本申请提供的一种动态图像的处理方法的示意性流程图；
图2示出了本申请提供的一种动态图像的处理方法中步骤102具体示意性流程图；
图3示出了本申请提供的一种动态图像的处理方法中步骤1021具体示意性流程图；
图4示出了本申请提供的一种动态图像的处理方法中步骤A2具体示意性流程图；
图5示出了本申请提供的一种动态图像的处理方法中步骤103具体示意性流程图；
图6示出了本申请提供的一种动态图像的处理方法中步骤1033具体示意性流程图；
图7示出了本申请提供的一种动态图像的处理装置的示意图；
图8是本发明一实施例提供的一种终端设备的示意图。
具体实施方式
以下描述中，为了说明而不是为了限定，提出了诸如特定系统结构、技术之类的具体细节，以便透彻理解本申请实施例。然而，本领域的技术人员应当清楚，在没有这些具体细节的其它实施例中也可以实现本申请。在其它情况中，省略对众所周知的系统、装置、电路以及方法的详细说明，以免不必要的细节妨碍本申请的描述。
现实世界中的场景在亮度上常具有非常高的动态范围。而普通数字成像设备(例如相机)在成像过程中，会将传感器上的高比特RAW图(RAW图指CMOS或者CCD图像感应器将捕捉到的光源信号转化为数字信号的原始数据，通常为单通道的16b或12比特数据)信息处理成可以在成像设备上正常显示的低比特RGB或者YUV图像，在该数字图像处理的流程中，经过多个模块处理后，如白平衡，去马赛克颜色插值等模块，低位的比特信息通在不同模块通过移位操作逐渐被丢弃，最终像素值由高比特变为了低比特。由于比特信息的在处理过程中的丢失，使得显示在成像设备的图像比传感器上图像的动态范围要小的多。该特点导致在拍摄大动态范围场景时，会在一次曝光图像中的太亮或者太暗的地方丢失细节信息，形成过曝光或者欠曝光。
为了使成像结果变现出丰富的色彩细节和明暗层次，能更好的匹配人眼对现实世界场景的认知特性，高动态范围(High Dynamic Range，简称HDR)成像成为了数字成像设备中越来越流行的一种成像技术。
高动态范围图像(High-Dynamic Range，HDR)，相比普通的图像，可以提供更多的动态范围和图像细节，根据不同的曝光时间的三张低动态范围图像(Low-Dynamic Range，LDR)，利用每个曝光时间相对应最佳细节的LDR图像来合成最终HDR图像，能够更好的反映出真实环境中的视觉效果。
然而，由于HDR图像中的三种不同曝光的图像并不是同时拍摄的，导致HDR图像上出现重影、模糊或边界痕迹等问题。
有鉴于此，本申请实施例提供了一种动态图像的处理方法、装置、终端设备以及计算机可读存储介质，可以解决上述技术问题。
本申请提供的一种动态图像的处理方法执行主体为终端设备，终端设备可以是相机或摄影机等等具有摄像功能的设备。
请参见图1，图1示出了本申请提供的一种动态图像的处理方法的示意性流程图。
如图1所示，该方法可以包括如下步骤：
步骤101，获取待处理图像中所有像素点的像素值；所述像素值为可表征亮度的数值。
待处理图像是指未经过动态范围处理的图像。待处理图像的格式包括但不限于RAW格式、RGB格式或YUV格式等等。
其中，RAW图像为图像感应器(例如CMOS图像感应器或者CCD图像感应器)将捕捉到的光源信号转化为数字信号的原始数据。RAW图像为单通道数据，每个像素值通常大于8比特，如10比特、12比特以及16比特等。正因由此特性，RAW图像有宽色域的内部色彩，可以进行精确的调整。故本申请优选将RAW图像作为待处理图像。
像素值为可表征亮度的数值，对于RAW图像而言，像素值为单通道的亮度数值。可以理解的是，不同的图像格式对应不同的像素值，例如：对于YUV格式而言，像素值为Y通道的数值。对于RGB格式，像素值为R通道、G通道以及B通道亮度共同构成像素值。即像素值为可表征亮度的数值，适用于不同的图像格式。
而由于相机受到动态范围的限制，不能记录极端亮或者暗的细节，即待处理图像中的动态范围无法准确地成像，故本申请获取待处理图像中所有像素点的像素值，以分析待处理图像中动态范围的表现情况，并作出相应处理。
步骤102，统计所述像素值处于预设区间的像素点的数量。
由于过曝区域或欠曝区域中像素的数量，可以表征图像整体上曝光情况。终端设备可根据预设区间统计过曝像素点数量以及欠曝像素点数量，以评估曝光情况。
其中，预设区间可以为预先设置的数值范围。也可以是根据不同的待处理图像进行计算，得到不同待处理图像各自对应的预设区间。可以理解的是，由于在不同场景下所需的曝光不同，例如：在黑夜与白天下对曝光量需求不同，进而相对于不同场景下过曝范围的数值和欠曝范围的数值也不相同。因此采用预先设置的数值范围作为预设区间，往往存在较大误差。故本实施例优先根据待处理图像进行计算，得到待处理图像对应的预设区间。具体过程如下步骤1021至步骤1023：
作为本申请的一个可选实施例，步骤102包括如下步骤。请参见图2，图2示出了本申请提供的一种动态图像的处理方法中步骤102具体示意性流程图。
值得注意的是，预设区间可以是两个或两个以上。为了更好得解释本申请的技术方案，本申请以预设区间包括第一预设区间和第二预设区间为例，对本申请方案进行解释说明。若采用两个以上的预设区间(例如过曝的范围可设置为两个，欠曝的范围也可设置为两个，以针对不同的曝光需求，进行精细化区分)，可类比本申请的技术方案得到。
步骤1021，根据所有像素点的所述像素值，计算第一预设区间和第二预设区间。
以第一预设区间为欠曝区间，第二预设区域为过曝区间为例。第一预设区间用于筛选相对于待处理图像中处于平均曝光水平以下的像素点。第二预设区间用于筛选相对于待处理图像中处于平均曝光水平以上的像素点。
对于第一预设区间和第二预设区间的计算，包括以下方式：①求取待处理图像中所有像素点的平均曝光值，将平均曝光值减去和加上预设数值，得到T1和T2，将无穷小至T1作为第一预设区间，将T2至无穷大作为第二预设区间。②求取待处理图像中所有像素点的曝光值的中位数，将中位数加上和减去预设数值，得到T1和T2，将无穷小至T1作为第一预设区间，将T2至无穷大作为第二预设区间。③通过预设公式计算得到T1和T2，并将无穷小至T1作为第一预设区间，将T2至无穷大作为第二预设区间，具体过程如下步骤A1至步骤A2：
作为本申请的一个可选实施例，步骤1021包括如下步骤。请参见图3，图3示出了本申请提供的一种动态图像的处理方法中步骤1021具体示意性流程图。
步骤A1，获取所有像素点的像素值中的最大值和最小值。
步骤A2，根据所述最大值和所述最小值，计算所述第一预设区间和所述第二预设区间。
可根据最大值和最小值计算得到平均曝光值，将平均曝光值加上和减去预设数值，得到T1和T2，将无穷小至T1作为第一预设区间，将T2至无穷大作为第二预设区间。也可通过如下公式一和公式二，计算第一预设区间和第二预设区间。具体过程如下步骤A21至步骤A24：
作为本申请的一个可选实施例，步骤A2包括如下步骤。请参见图4，图4示出了本申请提供的一种动态图像的处理方法中步骤A2具体示意性流程图。
步骤A21，将所述最大值和所述最小值代入如下公式一，得到第一数值；
公式一：A＝(pixmax-pixmin)×α+pixmin，
其中，A表示所述第一数值，pixmax表示所述最大值，pixmin表示所述最小值，α表示第一预设参数。第一数值即为上述T1。
步骤A22，将所述最大值和所述最小值代入如下公式二，得到第二数值；
公式二：B＝(pixmax-pixmin)×β+pixmin，
其中，B表示所述第二数值(第二数值即为上述T2)，β表示第二预设参数，所述第二预设参数大于所述第一预设参数。第一预设参数可以为20％等小于1的数值，第二预设参数可以为80％等小于1的数值。如以下公式：
A＝(pixmax-pixmin)×20％+pixmin，
B＝(pixmax-pixmin)×80％+pixmin。
其中，第二预设参数需大于第一预设参数，以拉开第一数值和第二数值之间的差距，进而形成第一预设区间和第二预设区间。
可以理解的是，第一数值和第二数值作为欠曝和过曝的临界值，可结合不同应用场景下对应的欠曝像素值以及过曝像素值的界定值而定，不同的应用场景可对应设置不同的参数。
步骤A23，将无穷小至所述第一数值，作为所述第一预设区间。
步骤A24，将所述第二数值至无穷大，作为所述第二预设区间。
步骤1022，统计所述像素值处于所述第一预设区间的像素点的第一数量。
根据第一预设区间，统计欠曝像素点的数量。
步骤1023，统计所述像素值处于所述第二预设区间的像素点的第二数量；所述第一预设区间小于所述第二预设区间。
根据第一预设区间，统计过曝像素点的数量。
步骤103，根据所述数量，调整所述待处理图像中所有像素点的像素值，得到第一图像和第二图像。
所述数量包括欠曝像素点的数量以及过曝像素点的数量。终端设备可根据欠曝像素点的数量以及过曝像素点的数量，在像素点的像素值的基础上，进行数学运算，以调整像素点的像素值。例如：将欠曝像素点的数量与倍数建立映射关系，欠曝像素点越多映射越大的倍数。进而将所有像素点的像素值与倍数相乘，得到第一图像和第二图像。
而实施例提出了一种更优的调整方式，如下步骤1031至步骤1032：
作为本申请的一个可选实施例，步骤103包括如下步骤。请参见图5，图5示出了本申请提供的一种动态图像的处理方法中步骤103具体示意性流程图。
步骤1031，根据所述待处理图像中所有像素点的个数，计算所述第一数量在所述个数中的第一占比。
步骤1032，根据所述待处理图像中所有像素点的个数，计算所述第二数量在所述个数中的第二占比。
由于欠曝像素点的数量和过曝像素点的数量仅仅只能反映出待处理图像过曝或欠曝区域的大小，无法表征待处理图像整体上的曝光情况。故本实施例根据待处理图像中所有像素点的个数，计算第一数量在所述个数中的第一占比，计算所述第二数量在所述个数中的第二占比，以根据第一占比和第二占比，调整待处理图像中所有像素点的像素值。
步骤1033，根据所述第一占比和所述第二占比，调整所述待处理图像中所有像素点的像素值，得到第一图像和第二图像。
本实施例提供了两种调整方案：
方式一：终端设备可根据第一占比和第二占比，在像素点的原始像素值的基础上，进行数学运算，以调整像素点的像素值。例如：将第一占比倍数建立映射关系，第一占比越高映射越大的倍数。进而将所有像素点的像素值与倍数相乘，得到第一图像和第二图像。
方式二：如下步骤B1至步骤B4：
作为本申请的一个可选实施例，步骤1033包括如下步骤。请参见图6，图6示出了本申请提供的一种动态图像的处理方法中步骤1033具体示意性流程图。
步骤B1，获取所述第一占比对应的第一预设参数。
第一预设参数为预设的用于调整欠曝图像的曝光量的图像。
步骤B2，根据所述第一预设参数，调整所述待处理图像中所有像素点的像素值，得到第一图像。
第一预设参数可以为预设的倍数，并根据倍数提升待处理图像中所有像素点的像素值，得到第一图像。
第一预设参数也可以是对数值的处理参数，根据处理参数调整待处理图像中所有像素点的像素值，得到第一图像，具体过程如下：
第一预设参数包括但不限于第一移动方向以及第一移动位数等一种参数或多种参数之间的组合。将所述待处理图像中所有像素值向所述第一移动方向，移动第一移动位数，得到第一图像。第一移动方向以及第一移动位数用于调整数值中每个数字的位置，得到全新的数值。
示例性地，当第一占比在20％以内，则将每个像素值的整体数字左移1位(相对于二进制数值而言，像素值提升两倍)。当第一占比大于20％小于40％，则将每个像素值的整体数字左移2位(相对于二进制数值而言，像素值提升四倍)。当第一占比在大于40％小于60％，将每个像素值的整体数字左移3位(相对于二进制数值而言，像素值提升八倍)，以此类推。可以理解的是，上述例子适用于二进制，对于其他进制可针对性地设置不同的移动方向和移动位数，以达到提升像素值的目的。
需要强调的是，在左移的过程中，空余的位置用0补齐。例如，像素值为011，左移一位得到像素值110。又例如：像素值为101，左移一位得到像素值1010。
作为本申请的一个可选实施例，左移得到的像素值需要小于所有像素点的像素值中的最大值。例如，最大值为111，则将上述左移一位得到像素值1010视为111。以避免第一图像出现过曝等情况。
步骤B3，获取所述第二占比对应的第二预设参数。
第二预设参数为预设的用于调整过曝图像的曝光量的图像。
步骤B4，根据所述第二预设参数，调整所述待处理图像中所有像素点的像素值，得到第二图像。
第二预设参数可以为预设的倍数，并根据倍数提升待处理图像中所有像素点的像素值，得到第二图像。
第二预设参数也可以是对数值的处理参数，根据处理参数调整待处理图像中所有像素点的像素值，得到第二图像，具体过程如下：
第二预设参数可以为第二移动方向以及第二移动位数。将所述待处理图像中所有像素值向所述第二移动方向，移动第二移动位数，得到第二图像。第二移动方向以及第二移动位数用于调整数值中每个数字的位置，得到全新的数值。
示例性地，当第二占比在20％以内，则将每个像素值的整体数字右移1位(相对于二进制数值而言，像素值为原来的二分之一)。当第二占比大于20％小于40％，则将每个像素值的整体数字右移2位(相对于二进制数值而言，像素值为原来的四分之一)。当第二占比在大于40％小于60％，将每个像素值的整体数字右移3位(相对于二进制数值而言，像素值为原来的八分之一)，以此类推。可以理解的是，上述例子适用于二进制，对于其他进制可针对性地设置不同的移动方向和移动位数，以达到降低像素值的目的。
需要强调的是，在右移的过程中，空余的位置用0补齐。例如，像素值为011，右移一位得到像素值001。又例如：像素值为101，右移一位得到像素值010。
作为本申请的一个可选实施例，右移得到的像素值需要大于所有像素点的像素值中的最小值。例如，最小值为010，则将上述右移一位得到像素值001视为010。以避免第二图像出现欠曝等情况。
步骤104，将所述待处理图像、所述第一图像和所述第二图像融合，得到目标图像。
可将RAW格式的待处理图像、第一图像和第二图像融合，得到RAW格式的目标图像。若需得到RGB格式的目标图像或YUV格式的目标图像，则需经过如下处理：
RGB格式的目标图像的处理过程：将RAW格式的待处理图像、第一图像和第二图像经过白平衡处理、去马赛克图像插值以及颜色校准处理，得到RGB格式的待处理图像、第一图像和第二图像。其中，白平衡处理的方式包括：灰度世界法以及白点检测法等。马赛克图像插值的方式包括：双线性插值法以及基于梯度方法等。颜色校准可以使用标准色卡进行校准，得到最终的三通道的RGB格式的待处理图像、第一图像和第二图像。
将不同曝光的RGB格式的待处理图像、第一图像和第二图像进行融合，得到RGB格式的目标图像。其中融合方式包括：加权融合、高斯金字塔和拉普拉斯金子塔等融合方法。
RGB格式的目标图像的处理过程：在上述得到RGB格式的待处理图像、第一图像和第二图像的基础上，通过如下公式三将RGB格式的待处理图像、第一图像和第二图像转换为YUV格式的待处理图像、第一图像和第二图像。
公式三：
将不同曝光的YUV格式的待处理图像、第一图像和第二图像进行融合，得到YUV格式的目标图像。其中融合方式包括：加权融合、高斯金字塔和拉普拉斯金子塔等融合方法。
作为本申请的一个可选实施例，在进行融合之前，还可以针对待处理图像、第一图像以及第二图像进行色阶调整、曲线调整以及锐化处理等图像处理操作，以进一步提高图像质量。
在本实施例中通过，获取待处理图像中所有像素点的像素值；统计所述像素值处于预设区间的像素点的数量；根据所述数量，调整所述待处理图像中所有像素点的像素值，得到第一图像和第二图像；将所述待处理图像、所述第一图像和所述第二图像融合，得到目标图像。通过上述方案，使得目标图像由同一张图像的不同曝光图像融合而成。与传统的技术相比，由于采用同一张图像的不同曝光图像融合而成，故可解决HDR图像上出现重影、模糊或边界痕迹等问题。
如图7本申请提供了一种动态图像的处理装置7，请参见图7，图7示出了本申请提供的一种动态图像的处理装置的示意图，如图7所示一种动态图像的处理装置包括：
获取单元71，用于获取待处理图像中所有像素点的像素值；所述像素值为可表征亮度的数值；
统计单元72，用于统计所述像素值处于预设区间的像素点的数量；
调整单元73，用于根据所述数量，调整所述待处理图像中所有像素点的像素值，得到第一图像和第二图像；
融合单元74，用于将所述待处理图像、所述第一图像和所述第二图像融合，得到目标图像。
本申请提供的一种动态图像的处理装置通过，获取待处理图像中所有像素点的像素值；统计所述像素值处于预设区间的像素点的数量；根据所述数量，调整所述待处理图像中所有像素点的像素值，得到第一图像和第二图像；将所述待处理图像、所述第一图像和所述第二图像融合，得到目标图像。通过上述方案，使得目标图像由同一张图像的不同曝光图像融合而成。与传统的技术相比，由于采用同一张图像的不同曝光图像融合而成，故可解决HDR图像上出现重影、模糊或边界痕迹等问题。
图8是本发明一实施例提供的一种终端设备的示意图。如图8所示，该实施例的一种终端设备8包括：处理器81、存储器82以及存储在所述存储器82中并可在所述处理器81上运行的计算机程序83，例如一种动态图像的处理程序。所述处理器81执行所述计算机程序83时实现上述各个一种动态图像的处理方法实施例中的步骤，例如图1所示的步骤101至步骤104。或者，所述处理器81执行所述计算机程序83时实现上述各装置实施例中各单元的功能，例如图7所示单元71至74的功能。
示例性的，所述计算机程序83可以被分割成一个或多个单元，所述一个或者多个单元被存储在所述存储器82中，并由所述处理器81执行，以完成本发明。所述一个或多个单元可以是能够完成特定功能的一系列计算机程序指令段，该指令段用于描述所述计算机程序83在所述一种终端设备8中的执行过程。例如，所述计算机程序83可以被分割成获取单元和计算单元各单元具体功能如下：
获取单元，用于获取待处理图像中所有像素点的像素值；所述像素值为可表征亮度的数值；
统计单元，用于统计所述像素值处于预设区间的像素点的数量；
调整单元，用于根据所述数量，调整所述待处理图像中所有像素点的像素值，得到第一图像和第二图像；
融合单元，用于将所述待处理图像、所述第一图像和所述第二图像融合，得到目标图像。
所述一种终端设备可包括，但不仅限于，处理器81、存储器82。本领域技术人员可以理解，图8仅仅是一种终端设备8的示例，并不构成对一种终端设备8的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件，例如所述一种终端设备还可以包括输入输出设备、网络接入设备、总线等。
所述摄像模块80用于在同一场景下采集多个偏正图像或在同一场景下采集多个后续图像。
所述处理器81可以是中央处理单元(Central Processing Unit，CPU)，还可以是其他通用处理器、数字信号处理器(Digital Signal Processor，DSP)、专用集成电路(Application Specific Integrated Circuit，ASIC)、现成可编程门阵列(Field-Programmable Gate Array，FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
所述存储器82可以是所述一种终端设备8的内部存储单元，例如一种终端设备8的硬盘或内存。所述存储器82也可以是所述一种终端设备8的外部存储设备，例如所述一种终端设备8上配备的插接式硬盘，智能存储卡(Smart Media Card，SMC)，安全数字(SecureDigital，SD)卡，闪存卡(Flash Card)等。进一步地，所述存储器82还可以既包括所述一种终端设备8的内部存储单元也包括外部存储设备。所述存储器82用于存储所述计算机程序以及所述一种终端设备所需的其他程序和数据。所述存储器82还可以用于暂时地存储已经输出或者将要输出的数据。
应理解，上述实施例中各步骤的序号的大小并不意味着执行顺序的先后，各过程的执行顺序应以其功能和内在逻辑确定，而不应对本申请实施例的实施过程构成任何限定。
需要说明的是，上述装置/单元之间的信息交互、执行过程等内容，由于与本申请方法实施例基于同一构思，其具体功能及带来的技术效果，具体可参见方法实施例部分，此处不再赘述。
所属领域的技术人员可以清楚地了解到，为了描述的方便和简洁，仅以上述各功能单元、模块的划分进行举例说明，实际应用中，可以根据需要而将上述功能分配由不同的功能单元、模块完成，即将所述装置的内部结构划分成不同的功能单元或模块，以完成以上描述的全部或者部分功能。实施例中的各功能单元、模块可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中，上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。另外，各功能单元、模块的具体名称也只是为了便于相互区分，并不用于限制本申请的保护范围。上述系统中单元、模块的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。
本申请实施例还提供了一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，所述计算机程序被处理器执行时实现可实现上述各个方法实施例中的步骤。
本申请实施例提供了一种计算机程序产品，当计算机程序产品在移动终端上运行时，使得移动终端执行时实现可实现上述各个方法实施例中的步骤。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本申请实现上述实施例方法中的全部或部分流程，可以通过计算机程序来指令相关的硬件来完成，所述的计算机程序可存储于一计算机可读存储介质中，该计算机程序在被处理器执行时，可实现上述各个方法实施例的步骤。其中，所述计算机程序包括计算机程序代码，所述计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。所述计算机可读介质至少可以包括：能够将计算机程序代码携带到拍照装置/终端设备的任何实体或装置、记录介质、计算机存储器、只读存储器(Read-Only Memory，ROM)、随机存取存储器(Random AccessMemory，RAM)、电载波信号、电信信号以及软件分发介质。例如U盘、移动硬盘、磁碟或者光盘等。在某些司法管辖区，根据立法和专利实践，计算机可读介质不可以是电载波信号和电信信号。
在上述实施例中，对各个实施例的描述都各有侧重，某个实施例中没有详述或记载的部分，可以参见其它实施例的相关描述。
本领域普通技术人员可以意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本申请的范围。
在本申请所提供的实施例中，应该理解到，所揭露的装置/网络设备和方法，可以通过其它的方式实现。例如，以上所描述的装置/网络设备实施例仅仅是示意性的，例如，所述模块或单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通讯连接可以是通过一些接口，装置或单元的间接耦合或通讯连接，可以是电性，机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。
应当理解，当在本申请说明书和所附权利要求书中使用时，术语“包括”指示所描述特征、整体、步骤、操作、元素和/或组件的存在，但并不排除一个或多个其它特征、整体、步骤、操作、元素、组件和/或其集合的存在或添加。
还应当理解，在本申请说明书和所附权利要求书中使用的术语“和/或”是指相关联列出的项中的一个或多个的任何组合以及所有可能组合，并且包括这些组合。
如在本申请说明书和所附权利要求书中所使用的那样，术语“如果”可以依据上下文被解释为“当...时”或“一旦”或“响应于确定”或“响应于监测到”。类似地，短语“如果确定”或“如果监测到[所描述条件或事件]”可以依据上下文被解释为意指“一旦确定”或“响应于确定”或“一旦监测到[所描述条件或事件]”或“响应于监测到[所描述条件或事件]”。
另外，在本申请说明书和所附权利要求书的描述中，术语“第一”、“第二”、“第三”等仅用于区分描述，而不能理解为指示或暗示相对重要性。
在本申请说明书中描述的参考“一个实施例”或“一些实施例”等意味着在本申请的一个或多个实施例中包括结合该实施例描述的特定特征、结构或特点。由此，在本说明书中的不同之处出现的语句“在一个实施例中”、“在一些实施例中”、“在其他一些实施例中”、“在另外一些实施例中”等不是必然都参考相同的实施例，而是意味着“一个或多个但不是所有的实施例”，除非是以其他方式另外特别强调。术语“包括”、“包含”、“具有”及它们的变形都意味着“包括但不限于”，除非是以其他方式另外特别强调。
以上所述实施例仅用以说明本申请的技术方案，而非对其限制；尽管参照前述实施例对本申请进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本申请各实施例技术方案的精神和范围，均应包含在本申请的保护范围之内。
Claims (10)
1.一种动态图像的处理方法，其特征在于，所述方法包括：
获取待处理图像中所有像素点的像素值；所述像素值为可表征亮度的数值；
统计所述像素值处于预设区间的像素点的数量；
根据所述数量，调整所述待处理图像中所有像素点的像素值，得到第一图像和第二图像；
将所述待处理图像、所述第一图像和所述第二图像融合，得到目标图像。
2.如权利要求1所述方法，其特征在于，所述预设区间包括第一预设区间和第二预设区间；
所述统计所述像素值处于预设区间的像素点的数量，包括：
根据所有像素点的所述像素值，计算第一预设区间和第二预设区间；
统计所述像素值处于所述第一预设区间的像素点的第一数量；
统计所述像素值处于所述第二预设区间的像素点的第二数量；所述第一预设区间小于所述第二预设区间。
3.如权利要求2所述方法，其特征在于，所述根据所有像素点的所述像素值，计算第一预设区间和第二预设区间，包括：
获取所有像素点的像素值中的最大值和最小值；
根据所述最大值和所述最小值，计算所述第一预设区间和所述第二预设区间。
4.如权利要求3所述方法，其特征在于，所述根据所述最大值和所述最小值，计算所述第一预设区间和所述第二预设区间，包括：
将所述最大值和所述最小值代入如下公式一，得到第一数值；
公式一：A＝(pixmax-pixmin)×α+pixmin，
其中，A表示所述第一数值，pixmax表示所述最大值，pixmin表示所述最小值，α表示第一预设参数；
将所述最大值和所述最小值代入如下公式二，得到第二数值；
公式二：B＝(pixmax-pixmin)×β+pixmin，
其中，B表示所述第二数值，β表示第二预设参数，所述第二预设参数大于所述第一预设参数；
将无穷小至所述第一数值，作为所述第一预设区间；
将所述第二数值至无穷大，作为所述第二预设区间。
5.如权利要求2所述方法，其特征在于，所述根据所述数量，调整所述待处理图像中所有像素点的像素值，得到第一图像和第二图像，包括：
根据所述待处理图像中所有像素点的个数，计算所述第一数量在所述个数中的第一占比；
根据所述待处理图像中所有像素点的个数，计算所述第二数量在所述个数中的第二占比；
根据所述第一占比和所述第二占比，调整所述待处理图像中所有像素点的像素值，得到第一图像和第二图像。
6.如权利要求5所述方法，其特征在于，所述根据所述第一占比和所述第二占比，调整所述待处理图像中所有像素点的像素值，得到第一图像和第二图像，包括：
获取所述第一占比对应的第一预设参数；
根据所述第一预设参数，调整所述待处理图像中所有像素点的像素值，得到第一图像；
获取所述第二占比对应的第二预设参数；
根据所述第二预设参数，调整所述待处理图像中所有像素点的像素值，得到第二图像。
7.如权利要求6所述方法，其特征在于，第一预设参数包括第一移动方向以及第一移动位数；所述第一移动方向以及第一移动位数用于调整数值中每个数字的位置，得到全新的数值；
所述根据所述第一预设参数，调整所述待处理图像中所有像素点的像素值，得到第一图像，包括：
将所述待处理图像中所有像素值向所述第一移动方向，移动第一移动位数，得到第一图像。
8.如权利要求6所述方法，其特征在于，第二预设参数包括第二移动方向以及第二移动位数；所述第二移动方向以及第二移动位数用于调整数值中每个数字的位置，得到全新的数值；
所述根据所述第二预设参数，调整所述待处理图像中所有像素点的像素值，得到第二图像，包括：
将所述待处理图像中所有像素值向所述第二移动方向，移动第二移动位数，得到第二图像。
9.一种终端设备，包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现如权利要求1至8任一项所述方法的步骤。
10.一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1至8任一项所述方法的步骤。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202011430751.9A CN112598609A (zh) | 2020-12-09 | 2020-12-09 | 一种动态图像的处理方法及装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202011430751.9A CN112598609A (zh) | 2020-12-09 | 2020-12-09 | 一种动态图像的处理方法及装置 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN112598609A true CN112598609A (zh) | 2021-04-02 |
Family
ID=75191327
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202011430751.9A Pending CN112598609A (zh) | 2020-12-09 | 2020-12-09 | 一种动态图像的处理方法及装置 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN112598609A (zh) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN113781370A (zh) * | 2021-08-19 | 2021-12-10 | 北京旷视科技有限公司 | 图像的增强方法、装置和电子设备 |
| CN115994858A (zh) * | 2023-03-24 | 2023-04-21 | 广东海洋大学 | 一种超分辨率图像重建方法及系统 |
Citations (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104639845A (zh) * | 2015-03-17 | 2015-05-20 | 上海兆芯集成电路有限公司 | 高动态范围图像产生方法以及使用该方法的装置 |
| CN108492262A (zh) * | 2018-03-06 | 2018-09-04 | 电子科技大学 | 一种基于梯度结构相似性的无鬼影高动态范围成像方法 |
| WO2019085705A1 (zh) * | 2017-10-30 | 2019-05-09 | Oppo广东移动通信有限公司 | 高动态范围图像曝光补偿值获取方法和装置 |
| CN111028189A (zh) * | 2019-12-09 | 2020-04-17 | Oppo广东移动通信有限公司 | 图像处理方法、装置、存储介质及电子设备 |
| CN111418201A (zh) * | 2018-03-27 | 2020-07-14 | 华为技术有限公司 | 一种拍摄方法及设备 |
| CN111565261A (zh) * | 2020-06-02 | 2020-08-21 | 厦门美图之家科技有限公司 | 图像处理方法、装置及电子设备 |
| CN111770282A (zh) * | 2020-06-28 | 2020-10-13 | Oppo广东移动通信有限公司 | 图像处理方法及装置、计算机可读介质及终端设备 |
| CN111953893A (zh) * | 2020-06-30 | 2020-11-17 | 普联技术有限公司 | 一种高动态范围图像生成方法、终端设备及存储介质 |
-
2020
- 2020-12-09 CN CN202011430751.9A patent/CN112598609A/zh active Pending
Patent Citations (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104639845A (zh) * | 2015-03-17 | 2015-05-20 | 上海兆芯集成电路有限公司 | 高动态范围图像产生方法以及使用该方法的装置 |
| US9413980B1 (en) * | 2015-03-17 | 2016-08-09 | Via Alliance Semiconductor Co., Ltd. | Methods for generating HDR (high dynamic range) images and apparatuses using the same |
| WO2019085705A1 (zh) * | 2017-10-30 | 2019-05-09 | Oppo广东移动通信有限公司 | 高动态范围图像曝光补偿值获取方法和装置 |
| CN108492262A (zh) * | 2018-03-06 | 2018-09-04 | 电子科技大学 | 一种基于梯度结构相似性的无鬼影高动态范围成像方法 |
| CN111418201A (zh) * | 2018-03-27 | 2020-07-14 | 华为技术有限公司 | 一种拍摄方法及设备 |
| CN111028189A (zh) * | 2019-12-09 | 2020-04-17 | Oppo广东移动通信有限公司 | 图像处理方法、装置、存储介质及电子设备 |
| CN111565261A (zh) * | 2020-06-02 | 2020-08-21 | 厦门美图之家科技有限公司 | 图像处理方法、装置及电子设备 |
| CN111770282A (zh) * | 2020-06-28 | 2020-10-13 | Oppo广东移动通信有限公司 | 图像处理方法及装置、计算机可读介质及终端设备 |
| CN111953893A (zh) * | 2020-06-30 | 2020-11-17 | 普联技术有限公司 | 一种高动态范围图像生成方法、终端设备及存储介质 |
Non-Patent Citations (4)
| Title |
|---|
| GUANGHUI YUE等: "Referenceless Quality Evaluation of Tone-Mapped HDR and Multiexposure Fused Images", 《IEEE TRANSACTIONS ON INDUSTRIAL INFORMATICS》, vol. 16, no. 3, 9 July 2019 (2019-07-09), pages 1764 - 1775, XP011768058, DOI: 10.1109/TII.2019.2927527 * |
| IOANNIS MERIANOS等: "Multiple-Exposure Image Fusion for HDR Image Synthesis Using Learned Analysis Transformations", 《JOURNAL OF IMAGING》, vol. 5, no. 3, 26 February 2019 (2019-02-26), pages 32 * |
| 刘颖等: "基于亮度分区模糊融合的高动态范围成像算法", 《计算机应用》, vol. 40, no. 01, 31 January 2020 (2020-01-31), pages 233 - 238 * |
| 张旭东: "基于单帧图像的CRF估计及HDR成像方法研究", 《中国优秀硕士学位论文全文数据库 信息科技辑》, no. 02, 15 February 2018 (2018-02-15), pages 138 - 2410 * |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN113781370A (zh) * | 2021-08-19 | 2021-12-10 | 北京旷视科技有限公司 | 图像的增强方法、装置和电子设备 |
| CN115994858A (zh) * | 2023-03-24 | 2023-04-21 | 广东海洋大学 | 一种超分辨率图像重建方法及系统 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN107635102B (zh) | 高动态范围图像曝光补偿值获取方法和装置 | |
| CN108989700B (zh) | 成像控制方法、装置、电子设备以及计算机可读存储介质 | |
| CN108683862B (zh) | 成像控制方法、装置、电子设备及计算机可读存储介质 | |
| CN108335279B (zh) | 图像融合和hdr成像 | |
| US10021313B1 (en) | Image adjustment techniques for multiple-frame images | |
| CN108337445B (zh) | 拍照方法、相关设备及计算机存储介质 | |
| JP5133085B2 (ja) | 撮像装置および撮像方法 | |
| US8737755B2 (en) | Method for creating high dynamic range image | |
| CN110033418B (zh) | 图像处理方法、装置、存储介质及电子设备 | |
| CN100594736C (zh) | 摄像设备及其控制方法 | |
| CN108616689B (zh) | 基于人像的高动态范围图像获取方法、装置及设备 | |
| CN107846556B (zh) | 成像方法、装置、移动终端和存储介质 | |
| CN112565636B (zh) | 图像处理方法、装置、设备和存储介质 | |
| CN108337446B (zh) | 基于双摄像头的高动态范围图像获取方法、装置及设备 | |
| CN111986129A (zh) | 基于多摄图像融合的hdr图像生成方法、设备及存储介质 | |
| CN109040607B (zh) | 成像控制方法、装置、电子设备和计算机可读存储介质 | |
| US20120127336A1 (en) | Imaging apparatus, imaging method and computer program | |
| JP2014153959A (ja) | 画像処理装置及び画像処理方法、プログラム、記憶媒体 | |
| US11601600B2 (en) | Control method and electronic device | |
| WO2020034702A1 (zh) | 控制方法、装置、电子设备和计算机可读存储介质 | |
| WO2020029679A1 (zh) | 控制方法、装置、成像设备、电子设备及可读存储介质 | |
| CN111953893B (zh) | 一种高动态范围图像生成方法、终端设备及存储介质 | |
| CN111209775A (zh) | 信号灯图像处理方法、装置、设备及存储介质 | |
| CN112598609A (zh) | 一种动态图像的处理方法及装置 | |
| CN110807735A (zh) | 图像处理方法、装置、终端设备及计算机可读存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |