CN110060213B - 图像处理方法、装置、存储介质及电子设备 - Google Patents

图像处理方法、装置、存储介质及电子设备 Download PDF

Info

Publication number
CN110060213B
CN110060213B CN201910282213.0A CN201910282213A CN110060213B CN 110060213 B CN110060213 B CN 110060213B CN 201910282213 A CN201910282213 A CN 201910282213A CN 110060213 B CN110060213 B CN 110060213B
Authority
CN
China
Prior art keywords
image
brightness
reference frame
original
original image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201910282213.0A
Other languages
English (en)
Other versions
CN110060213A (zh
Inventor
张弓
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Oppo Mobile Telecommunications Corp Ltd
Original Assignee
Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Oppo Mobile Telecommunications Corp Ltd filed Critical Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority to CN201910282213.0A priority Critical patent/CN110060213B/zh
Publication of CN110060213A publication Critical patent/CN110060213A/zh
Application granted granted Critical
Publication of CN110060213B publication Critical patent/CN110060213B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G06T5/90
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20172Image enhancement details
    • G06T2207/20208High dynamic range [HDR] image processing

Abstract

本申请公开了一种图像处理方法、装置、存储介质及电子设备,所述方法包括:获取多帧不同曝光度的原始图像,并在多帧原始图像当中选取参考帧,根据原始图像的亮度将原始图像划分为多个像素集合,根据像素集合计算参考帧以外的待处理原始图像与参考帧的增益系数,通过增益系数对待处理原始图像进行亮度补偿。本申请可以对多帧图像进行亮度对齐,并且不依赖曝光参数,可以避免由于曝光参数有误导致的图像亮度没有对齐,提升对多帧图像进行亮度对齐的准确性。

Description

图像处理方法、装置、存储介质及电子设备
技术领域
本申请属于人工智能技术领域,尤其涉及一种图像处理方法、装置、存储介质及电子设备。
背景技术
随着电子技术的发展,高动态范围(High Dynamic Range,HDR)成像技术,在智能手机、数码相机等具有拍照功能的电子设备当中逐渐普及,相比普通的图像,可以提供更多的动态范围和图像细节,根据不同的曝光时间的LDR(Low-Dynamic Range)图像,利用每个曝光时间相对应最佳细节的LDR图像来合成最终HDR图像。
目前大部分设备上生成高动态范围的图像是根据多张不同曝光的图像合成,由于存在相机抖动和移动物体,需要对相机和移动物体进行空间上的对齐。但是在做运动对齐之前需要对不同曝光的图像进行亮度对齐。现有技术在对多张图像进行亮度对齐是根据曝光参数进行亮度补偿,这种方法会在曝光参数不准确时就会导致图像亮度的对齐出现误差,如图像对齐问题以及图像亮度过度不自然分界等。
发明内容
本申请提供一种图像处理方法、装置、存储介质及电子设备,可以提升对多帧图像进行亮度对齐的准确性。
第一方面,本申请实施例提供一种图像处理方法,包括:
获取多帧不同曝光度的原始图像,并在所述多帧原始图像当中选取参考帧;
根据所述原始图像的亮度将所述原始图像划分为多个像素集合;
根据所述像素集合计算所述参考帧以外的待处理原始图像与所述参考帧的增益系数;
通过所述增益系数对所述待处理原始图像进行亮度补偿。
第二方面,本申请实施例提供一种图像处理装置,包括:获取模块、划分模块、计算模块以及补偿模块;
所述获取模块,用于获取多帧不同曝光度的原始图像,并在所述多帧原始图像当中选取参考帧;
所述划分模块,用于根据所述原始图像的亮度将所述原始图像划分为多个像素集合;
所述计算模块,用于根据所述像素集合计算所述参考帧以外的待处理原始图像与所述参考帧的增益系数;
所述补偿模块,用于通过所述增益系数对所述待处理原始图像进行亮度补偿。
第三方面,本申请实施例提供一种存储介质,其上存储有计算机程序,当所述计算机程序在计算机上运行时,使得所述计算机执行上述的图像处理方法。
第四方面,本申请实施例提供一种电子设备,包括处理器和存储器,所述存储器存储有多条指令,所述处理器加载所述存储器中的指令用于执行以下步骤:
获取多帧不同曝光度的原始图像,并在所述多帧原始图像当中选取参考帧;
根据所述原始图像的亮度将所述原始图像划分为多个像素集合;
根据所述像素集合计算所述参考帧以外的待处理原始图像与所述参考帧的增益系数;
通过所述增益系数对所述待处理原始图像进行亮度补偿。
本申请实施例提供的图像处理方法可以获取多帧不同曝光度的原始图像,并在多帧原始图像当中选取参考帧,根据原始图像的亮度将原始图像划分为多个像素集合,根据像素集合计算参考帧以外的待处理原始图像与参考帧的增益系数,通过增益系数对待处理原始图像进行亮度补偿。本申请可以对多帧图像进行亮度对齐,并且不依赖曝光参数,可以避免由于曝光参数有误导致的图像亮度没有对齐,提升对多帧图像进行亮度对齐的准确性。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本申请实施例提供的图像处理方法的一种流程示意图。
图2为本申请实施例提供的图像处理方法的另一流程示意图。
图3为本申请实施例提供的图像处理装置的一种结构示意图。
图4为本申请实施例提供的图像处理装置的另一结构示意图。
图5为本申请实施例提供的电子设备的结构示意图。
图6为本申请实施例提供的电子设备的另一结构示意图。
具体实施方式
请参照图式,其中相同的组件符号代表相同的组件,本申请的原理是以实施在一适当的运算环境中来举例说明。以下的说明是基于所例示的本申请具体实施例,其不应被视为限制本申请未在此详述的其它具体实施例。
在以下的说明中,本申请的具体实施例将参考由一部或多部计算机所执行的步骤及符号来说明,除非另有述明。因此,这些步骤及操作将有数次提到由计算机执行,本文所指的计算机执行包括了由代表了以一结构化型式中的数据的电子信号的计算机处理单元的操作。此操作转换该数据或将其维持在该计算机的内存系统中的位置处,其可重新配置或另外以本领域测试人员所熟知的方式来改变该计算机的运作。该数据所维持的数据结构为该内存的实体位置,其具有由该数据格式所定义的特定特性。但是,本申请原理以上述文字来说明,其并不代表为一种限制,本领域测试人员将可了解到以下所述的多种步骤及操作亦可实施在硬件当中。
本申请中的术语“第一”、“第二”和“第三”等是用于区别不同对象,而不是用于描述特定顺序。此外,术语“包括”和“具有”以及它们任何变形,意图在于覆盖不排他的包含。例如包含了一系列步骤或模块的过程、方法、系统、产品或设备没有限定于已列出的步骤或模块,而是某些实施例还包括没有列出的步骤或模块,或某些实施例还包括对于这些过程、方法、产品或设备固有的其它步骤或模块。
请参阅图1,图1为本申请实施例提供的图像处理方法的一种流程示意图。本申请实施例提供的图像处理方法应用于电子设备,具体流程可以如下:
步骤101,获取多帧不同曝光度的原始图像,并在多帧原始图像当中选取参考帧。
在一实施例中,电子设备可以通过摄像头获取上述多帧不同曝光度的原始图像,其中,摄像头的数量可以为一个、两个或者两个以上等等。可以通过一个摄像头获取多帧不同曝光度的原始图像,也可以通过多个摄像头获取多帧不同曝光度的原始图像。其中,多帧曝光度不同的图像可以由摄像头使用不同的曝光时间来进行拍摄而得,曝光时间可指的是从快门打开到关闭的时间间隔,在这一段时间内,物体可在底片等感光面上留下影像。比如,电子设备可预先设定长曝光时间范围、正常曝光时间范围及短曝光时间范围,从而获取三帧不同曝光度的图像,其中,采用长曝光时间范围中的曝光时间采集的图像亮度较大,可能会出现图像过曝的情况;采用正常曝光时间范围采集的图像亮度正常,比较不会出现图像过亮或过暗的情况;采用短曝光时间范围采集的图像亮度较小,可能会出现图像欠曝过暗的情况。
在一实施例当中,电子设备可以直接获取图像传感器捕捉的多张RAW原始图像,其中,RAW是未经处理的格式,RAW图像就是图像传感器将捕捉到的光源信号转化为数字信号的原始数据。多张RAW原始图像组成图像序列,由于不同曝光程度的原始图像对应的亮度不同,可以将图像序列中的原始图像按照亮度进行排序,然后选取参考帧。
上述选取参考帧的方法可以有多种,比如可以由用户对多张原始图像进行手动选择,还可以由电子设备选取亮度最高的一帧图像作为参考帧。举例来说,若图像序列中包括第一图像、第二图像、第三图像共3张原始图像,按照亮度值由大到小的顺序进行排序后,得到排序为第一图像的亮度值大于第二图像的亮度值,第二图像的亮度值大于第三图像的亮度值,则将第一图像确定为参考帧。
步骤102,根据所述原始图像的亮度将所述原始图像划分为多个像素集合。
在一实施例中,可以根据原始图像中每个像素的亮度值将该原始图像中的像素划分为多个像素集合。其中,将原始图像中的像素划分为多个像素集合的方法可以有多种。比如可以将原始图像当中所有的像素按照亮度值进行排序(从大到小排序或是从小到大排序),然后对该排序结果进行等分,以得到多个像素集合。举例来说,若原始图像当中包括10000个像素点,便可以将这10000个像素点按照其对应的亮度值进行排序,若将排序结果等分为5个像素集合,则每个像素集合当中有2000个像素。
在一实施例中,还可以预先设置多个亮度范围,然后分别获取原始图像当中位于上述多个亮度范围亮度的像素,以得到多个像素集合。比如,先获取指纹图像当中所有像素的亮度值,然后根据最高亮度值和最低亮度值确定亮度范围,举例来说,若最高亮度值的像素的亮度为700nit,最低亮度值的像素的亮度为100nit,则可以设置三个亮度范围区间,分别为100nit-300nit、300nit-500nit以及500nit-700nit,然后将原始图像当中的每个像素按照亮度值确定对应的亮度范围,从而得到三个像素集合。需要说明的是,这样计算得到的多个像素集合当中的像素个数可能相同,也可能不同。
步骤103,根据像素集合计算参考帧以外的待处理原始图像与参考帧的增益系数。
在一实施例中,可以针对每一帧原始图像,计算该原始图像当中每个像素集合的均值亮度,然后根据上述均值亮度得到该原始图像的亮度分布,然后进一步计算待处理图像与参考帧的增益系数,其中,所述参考帧以外的每一帧原始图像都为待处理图像。
可以理解的是,上述增益系数是为了使待处理图像的亮度值能够与参考帧的亮度值接近,因此若待处理原始图像的亮度低于参考帧的亮度,则该增益系数的值大于1,若待处理原始图像的亮度高于参考帧的亮度,则该增益系数的值小于1。
步骤104,通过增益系数对待处理原始图像进行亮度补偿。
在一实施例中,通过增益系数对所述待处理原始图像进行亮度补偿,具体可以将待处理原始图像的亮度分布乘以该增益系数,以得到亮度补偿后的目标图像帧。从而实现了将多帧不同曝光度的图像进行亮度对齐。在得到上述多帧亮度对齐后的目标图像帧后,电子设备可以采用HDR算法对多帧目标图像帧进行图像合成,得到待拍摄环境的高质量图像。具体的,通过HDR算法合成的图像能够很好的保持原始图像的高、中、低频细节,得到的合成图像效果好,能满足实际应用需求。
在实际使用当中,HDR图像需要通过对多张图像进行合成,而在拍摄运动中的物体时,上述多张图像由于不是在同一时刻拍摄而得的,因此会出现图像偏移,因此在一实施例中,在对多帧原始图像进行亮度对齐之前或之后,还可以对上述多帧原始图像进行运动对齐,具体就是对图像当中的像素进行对齐,以使图像当中运动的物体进行对齐处理,提升图像对齐效果。
由上可知,本申请实施例提供的图像处理方法可以获取多帧不同曝光度的原始图像,并在多帧原始图像当中选取参考帧,根据原始图像的亮度将原始图像划分为多个像素集合,根据像素集合计算参考帧以外的待处理原始图像与参考帧的增益系数,通过增益系数对待处理原始图像进行亮度补偿。本申请可以对多帧图像进行亮度对齐,并且不依赖曝光参数,可以避免由于曝光参数有误导致的图像亮度没有对齐,提升对多帧图像进行亮度对齐的准确性。
下面将在上述实施例描述的方法基础上,对本申请的清理方法做进一步介绍。参阅图2,图2为本申请实施例提供的图像处理方法的另一流程示意图,该图像处理方法包括:
步骤201,获取多帧不同曝光度的原始图像,分别计算每帧原始图像的平均亮度值。
在一实施例中,电子设备可以通过摄像头获取上述多帧不同曝光度的原始图像,多帧曝光度不同的图像可以由摄像头使用不同的曝光时间来进行拍摄而得。比如,电子设备可预先设定长曝光时间范围、正常曝光时间范围及短曝光时间范围,从而获取三帧不同曝光度的图像。然后分别计算每帧原始图像的平均亮度值,比如,获取每帧图像当中全部像素的亮度值,然后计算平局亮度值。
步骤202,确定平均亮度值最大的原始图像为参考帧。
比如,若图像序列中包括第一图像、第二图像、第三图像共3张原始图像,按照亮度值由大到小的顺序进行排序后,得到排序为第一图像的亮度值大于第二图像的亮度值,第二图像的亮度值大于第三图像的亮度值,则将第一图像确定为参考帧。
步骤203,在原始图像当中获取全部像素的亮度值。
比如,若原始图像当中包括10000个像素点,便可以分别获取上述10000个像素点的亮度值,进一步的,还可以将这10000个像素点按照其对应的亮度值进行排序。
步骤204,将全部像素的亮度值划分为预设个数的亮度区间,并根据亮度区间生成多个像素集合。
在一实施例中,可以预先设置多个亮度区间,然后分别获取原始图像当中位于上述多个亮度区间的像素,以得到多个像素集合。比如,先获取指纹图像当中所有像素的亮度值,然后根据最高亮度值和最低亮度值确定亮度范围,举例来说,若最高亮度值的像素的亮度为700nit,最低亮度值的像素的亮度为100nit,则可以设置三个亮度区间,分别为100nit-300nit、300nit-500nit以及500nit-700nit,然后将原始图像当中的每个像素按照亮度值确定对应的亮度区间,从而得到三个像素集合。
步骤205,计算原始图像当中每个像素集合的平均亮度值。
在一实施例中,在获取多个像素集合后,可以计算每个像素集合的平均亮度值。其中,上述原始图像包括参考帧以及参考帧以外的待处理图像。
步骤206,根据平均亮度值生成原始图像的亮度分布,并根据待处理原始图像的亮度分布与参考帧的亮度分布计算增益系数。
在一实施例中,可以通过最小二乘法分别计算每一个待处理图像与参考帧的增益系数。
步骤207,通过增益系数对待处理原始图像进行亮度补偿。
在一实施例中,通过增益系数对所述待处理原始图像进行亮度补偿,具体可以将待处理原始图像的亮度分布乘以该增益系数,以得到亮度补偿后的目标图像帧。从而实现了将多帧不同曝光度的图像进行亮度对齐。
步骤208,对亮度补偿后的图像进行运动对齐。
在一实施例中,在针对原始图像当中的所有待处理原始图像都完成亮度补偿后,得到多帧目标图像帧,该多帧目标图像帧当中若存在运动物体,则会导致HDR合成的图像出现偏移,因此所述方法还可以包括:
对亮度补偿后的目标图像帧进行运动区域检测;
根据所述检测结果对所述运动区域进行对齐。
比如,上述目标图像帧包括第一图像、第二图像、第三图像共3张图像,以第二图像为参考图像,可以分别检测第一图像和第三图像相对第二图像的运动区域,该运动区域可以为图像中局部微小的运动区域。举例来说,若图像中包括道路及道路上行走的人或车,则所述运动区域可为图像中的人或车。在检测到运动区域后,可以对该运动区域的像素点进行对齐,比如可以将第一图像和第三图像当中运动区域的像素点坐标调整为第二图像当中运动区域的像素点对应的坐标,以实现运动对齐。
由上可知,本申请实施例提供的图像处理方法可以获取多帧不同曝光度的原始图像,分别计算每帧原始图像的平均亮度值,确定平均亮度值最大的原始图像为参考帧,在原始图像当中获取全部像素的亮度值,将全部像素的亮度值划分为预设个数的亮度区间,并根据亮度区间生成多个像素集合,计算原始图像当中每个像素集合的平均亮度值,根据平均亮度值生成原始图像的亮度分布,并根据待处理原始图像的亮度分布与参考帧的亮度分布计算增益系数,通过增益系数对待处理原始图像进行亮度补偿,对亮度补偿后的图像进行运动对齐。本申请可以对多帧图像进行亮度对齐,并且不依赖曝光参数,可以避免由于曝光参数有误导致的图像亮度没有对齐,提升对多帧图像进行亮度对齐的准确性。
请参阅图3,图3为本申请实施例提供的图像处理装置的一种结构示意图。其中该图像处理装置30包括获取模块301、划分模块302、计算模块303以及补偿模块304;
所述获取模块301,用于获取多帧不同曝光度的原始图像,并在多帧原始图像当中选取参考帧。
在一实施例中,电子设备可以通过摄像头获取上述多帧不同曝光度的原始图像,其中,摄像头的数量可以为一个、两个或者两个以上等等。可以通过一个摄像头获取多帧不同曝光度的原始图像,也可以通过多个摄像头获取多帧不同曝光度的原始图像。其中,多帧曝光度不同的图像可以由摄像头使用不同的曝光时间来进行拍摄而得。
在一实施例当中,电子设备可以直接获取图像传感器捕捉的多张RAW原始图像,其中,RAW是未经处理的格式,RAW图像就是图像传感器将捕捉到的光源信号转化为数字信号的原始数据。多张RAW原始图像组成图像序列,由于不同曝光程度的原始图像对应的亮度不同,可以将图像序列中的原始图像按照亮度进行排序,然后选取参考帧,比如可以由电子设备选取亮度最高的一帧图像作为参考帧。
所述划分模块302,用于根据所述原始图像的亮度将所述原始图像划分为多个像素集合。
在一实施例中,可以根据原始图像中每个像素的亮度值将该原始图像中的像素划分为多个像素集合。在一实施例中,可以预先设置多个亮度范围,然后分别获取原始图像当中位于上述多个亮度范围亮度的像素,以得到多个像素集合。比如,先获取指纹图像当中所有像素的亮度值,然后根据最高亮度值和最低亮度值确定亮度范围,举例来说,若最高亮度值的像素的亮度为700nit,最低亮度值的像素的亮度为100nit,则可以设置三个亮度范围区间,分别为100nit-300nit、300nit-500nit以及500nit-700nit,然后将原始图像当中的每个像素按照亮度值确定对应的亮度范围,从而得到三个像素集合。
所述计算模块303,用于根据所述像素集合计算所述参考帧以外的待处理原始图像与所述参考帧的增益系数。
在一实施例中,可以针对每一帧原始图像,计算该原始图像当中每个像素集合的均值亮度,然后根据上述均值亮度得到该原始图像的亮度分布,然后进一步计算待处理图像与参考帧的增益系数,其中,所述参考帧以外的每一帧原始图像都为待处理图像。
所述补偿模块304,用于通过所述增益系数对所述待处理原始图像进行亮度补偿。
在一实施例中,通过增益系数对所述待处理原始图像进行亮度补偿,具体可以将待处理原始图像的亮度分布乘以该增益系数,以得到亮度补偿后的目标图像帧。从而实现了将多帧不同曝光度的图像进行亮度对齐。在得到上述多帧亮度对齐后的目标图像帧后,电子设备可以采用HDR算法对多帧目标图像帧进行图像合成,得到待拍摄环境的高质量图像。具体的,通过HDR算法合成的图像能够很好的保持原始图像的高、中、低频细节,得到的合成图像效果好,能满足实际应用需求。
在一实施例中,如图4所示,所述划分模块302可以包括:获取子模块3021、划分子模块3022以及生成子模块3023;
所述获取子模块3021,用于在所述原始图像当中获取全部像素的亮度值;
所述划分子模块3022,用于将所述全部像素的亮度值划分为预设个数的亮度区间;
所述生成子模块3023,用于根据所述亮度区间生成多个像素集合。
在一实施例中,所述计算模块303可以包括:第一计算子模块3031、分布子模块3032以及第二计算子模块3033;
所述第一计算子模块3031,用于计算所述原始图像当中每个像素集合的平均亮度值;
所述分布子模块3032,用于根据所述平均亮度值生成所述原始图像的亮度分布;
所述第二计算子模块3033,用于根据所述待处理原始图像的亮度分布与所述参考帧的亮度分布计算增益系数。
由上述可知,本申请实施例的图像处理装置可以获取多帧不同曝光度的原始图像,并在多帧原始图像当中选取参考帧,根据原始图像的亮度将原始图像划分为多个像素集合,根据像素集合计算参考帧以外的待处理原始图像与参考帧的增益系数,通过增益系数对待处理原始图像进行亮度补偿。本申请可以对多帧图像进行亮度对齐,并且不依赖曝光参数,可以避免由于曝光参数有误导致的图像亮度没有对齐,提升对多帧图像进行亮度对齐的准确性。
本申请实施例中,图像处理装置与上文实施例中的图像处理方法属于同一构思,在图像处理装置上可以运行图像处理方法实施例中提供的任一方法,其具体实现过程详见图像处理方法的实施例,此处不再赘述。
本文所使用的术语“模块”可看作为在该运算系统上执行的软件对象。本文所述的不同组件、模块、引擎及服务可看作为在该运算系统上的实施对象。而本文所述的装置及方法可以以软件的方式进行实施,当然也可在硬件上进行实施,均在本申请保护范围之内。
本申请实施例还提供一种存储介质,其上存储有计算机程序,当所述计算机程序在计算机上运行时,使得所述计算机执行上述的图像处理方法。
本申请实施例还提供一种电子设备,如平板电脑、手机等。电子设备中的处理器会按照如下的步骤,将一个或一个以上的应用程序的进程对应的指令加载到存储器中,并由处理器来运行存储在存储器中的应用程序,从而实现各种功能:
获取多帧不同曝光度的原始图像,并在所述多帧原始图像当中选取参考帧;
根据所述原始图像的亮度将所述原始图像划分为多个像素集合;
根据所述像素集合计算所述参考帧以外的待处理原始图像与所述参考帧的增益系数;
通过所述增益系数对所述待处理原始图像进行亮度补偿。
在本文中提及“实施例”意味着,结合实施例描述的特定特征、结构或特性可以包含在本申请的至少一个实施例中。在说明书中的各个位置出现该短语并不一定均是指相同的实施例,也不是与其它实施例互斥的独立的或备选的实施例。本领域技术人员显式地和隐式地理解的是,本文所描述的实施例可以与其它实施例相结合。
请参阅图5,电子设备400包括处理器401以及存储器402。其中,处理器401与存储器402电性连接。
处理器400是电子设备400的控制中心,利用各种接口和线路连接整个电子设备的各个部分,通过运行或加载存储在存储器402内的计算机程序,以及调用存储在存储器402内的数据,执行电子设备400的各种功能并处理数据,从而对电子设备400进行整体监控。
存储器402可用于存储软件程序以及模块,处理器401通过运行存储在存储器402的计算机程序以及模块,从而执行各种功能应用以及数据处理。存储器402可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的计算机程序(比如声音播放功能、图像播放功能等)等;存储数据区可存储根据电子设备的使用所创建的数据等。此外,存储器402可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。相应地,存储器402还可以包括存储器控制器,以提供处理器401对存储器402的访问。
在本申请实施例中,电子设备400中的处理器401会按照如下的步骤,将一个或一个以上的计算机程序的进程对应的指令加载到存储器402中,并由处理器401运行存储在存储器402中的计算机程序,从而实现各种功能,如下:
获取多帧不同曝光度的原始图像,并在所述多帧原始图像当中选取参考帧;
根据所述原始图像的亮度将所述原始图像划分为多个像素集合;
根据所述像素集合计算所述参考帧以外的待处理原始图像与所述参考帧的增益系数;
通过所述增益系数对所述待处理原始图像进行亮度补偿。
请一并参阅图6,在一些实施方式中,电子设备400还可以包括:显示器403、射频电路404、音频电路405以及电源406。其中,其中,显示器403、射频电路404、音频电路405以及电源406分别与处理器401电性连接。
显示器403可以用于显示由用户输入的信息或提供给用户的信息以及各种图形用户接口,这些图形用户接口可以由图形、文本、图标、视频和其任意组合来构成。显示器403可以包括显示面板,在一些实施方式中,可以采用液晶显示器(Liquid Crystal Display,LCD)、或者有机发光二极管(Organic Light-Emitting Diode,OLED)等形式来配置显示面板。
射频电路404可以用于收发射频信号,以通过无线通信与网络设备或其他电子设备建立无线通讯,与网络设备或其他电子设备之间收发信号。通常,射频电路501包括但不限于天线、至少一个放大器、调谐器、一个或多个振荡器、用户身份模块(SIM,SubscriberIdentity Module)卡、收发信机、耦合器、低噪声放大器(LNA,Low Noise Amplifier)、双工器等。
音频电路405可以用于通过扬声器、传声器提供用户与电子设备之间的音频接口。音频电路506可将接收到的音频数据转换成电信号,传输到扬声器,由扬声器转换为声音信号输出。
电源406可以用于给电子设备400的各个部件供电。在一些实施例中,电源406可以通过电源管理系统与处理器401逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。电源406还可以包括一个或一个以上的直流或交流电源、再充电系统、电源故障检测电路、电源转换器或者逆变器、电源状态指示器等任意组件。
尽管图6中未示出,电子设备400还可以包括摄像头、蓝牙模块等,在此不再赘述。
在本申请实施例中,存储介质可以是磁碟、光盘、只读存储器(Read Only Memory,ROM)、或者随机存取记忆体(Random Access Memory,RAM)等。
在上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见其他实施例的相关描述。
需要说明的是,对本申请实施例的图像处理方法而言,本领域普通测试人员可以理解实现本申请实施例图像处理方法的全部或部分流程,是可以通过计算机程序来控制相关的硬件来完成,计算机程序可存储于一计算机可读取存储介质中,如存储在电子设备的存储器中,并被该电子设备内的至少一个处理器执行,在执行过程中可包括如图像处理方法的实施例的流程。其中,的存储介质可为磁碟、光盘、只读存储器、随机存取记忆体等。
对本申请实施例的图像处理装置而言,其各功能模块可以集成在一个处理芯片中,也可以是各个模块单独物理存在,也可以两个或两个以上模块集成在一个模块中。上述集成的模块既可以采用硬件的形式实现,也可以采用软件功能模块的形式实现。集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时,也可以存储在一个计算机可读取存储介质中,存储介质譬如为只读存储器,磁盘或光盘等。
以上对本申请实施例所提供的一种图像处理方法、装置、存储介质及电子设备进行了详细介绍,本文中应用了具体个例对本申请的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本申请的方法及其核心思想;同时,对于本领域的技术人员,依据本申请的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本申请的限制。

Claims (9)

1.一种图像处理方法,其特征在于,所述方法包括以下步骤:
获取不同曝光度的多帧原始图像,并在所述多帧原始图像当中选取参考帧;
根据所述原始图像的亮度将所述原始图像划分为多个像素集合;
根据所述像素集合计算所述参考帧以外的待处理原始图像与所述参考帧的增益系数;
通过所述增益系数对所述待处理原始图像进行亮度补偿;
对所述多帧原始图像当中的所有待处理原始图像都完成亮度补偿后,得到多帧目标图像帧;
分别检测多帧目标图像帧相对所述参考帧的运动区域;
将所述多帧目标图像帧中的运动区域的像素点坐标调整为所述参考帧图像中运动区域的像素点对应的坐标,以实现运动对齐;
采用高动态范围算法对实现运动对齐后的多帧目标图像帧进行图像合成。
2.根据权利要求1所述的图像处理方法,其特征在于,根据所述原始图像的亮度将所述原始图像划分为多个像素集合,包括:
在所述原始图像当中获取全部像素的亮度值;
将所述全部像素的亮度值划分为预设个数的亮度区间;
根据所述亮度区间生成多个像素集合。
3.根据权利要求1所述的图像处理方法,其特征在于,根据所述像素集合计算所述参考帧以外的待处理原始图像与所述参考帧的增益系数,包括:
计算所述原始图像当中每个像素集合的平均亮度值;
根据所述平均亮度值生成所述原始图像的亮度分布;
根据所述待处理原始图像的亮度分布与所述参考帧的亮度分布计算增益系数。
4.根据权利要求1所述的图像处理方法,其特征在于,在所述多帧原始图像当中选取参考帧,包括:
分别计算每帧原始图像的平均亮度值;
确定所述平均亮度值最大的原始图像为参考帧。
5.一种图像处理装置,其特征在于,所述装置包括:获取模块、划分模块、计算模块以及补偿模块;
所述获取模块,用于获取不同曝光度的多帧原始图像,并在所述多帧原始图像当中选取参考帧;
所述划分模块,用于根据所述原始图像的亮度将所述原始图像划分为多个像素集合;
所述计算模块,用于根据所述像素集合计算所述参考帧以外的待处理原始图像与所述参考帧的增益系数;
所述补偿模块,用于通过所述增益系数对所述待处理原始图像进行亮度补偿,对所述多帧原始图像当中的所有待处理原始图像都完成亮度补偿后,得到多帧目标图像帧,分别检测多帧目标图像帧相对所述参考帧的运动区域,将所述多帧目标图像帧中的运动区域的像素点坐标调整为所述参考帧图像中运动区域的像素点对应的坐标,以实现运动对齐,采用高动态范围算法对实现运动对齐后的多帧目标图像帧进行图像合成。
6.根据权利要求5所述的图像处理装置,其特征在于,所述划分模块包括:获取子模块、划分子模块以及生成子模块;
所述获取子模块,用于在所述原始图像当中获取全部像素的亮度值;
所述划分子模块,用于将所述全部像素的亮度值划分为预设个数的亮度区间;
所述生成子模块,用于根据所述亮度区间生成多个像素集合。
7.根据权利要求5所述的图像处理装置,其特征在于,所述计算模块包括:第一计算子模块、分布子模块以及第二计算子模块;
所述第一计算子模块,用于计算所述原始图像当中每个像素集合的平均亮度值;
所述分布子模块,用于根据所述平均亮度值生成所述原始图像的亮度分布;
所述第二计算子模块,用于根据所述待处理原始图像的亮度分布与所述参考帧的亮度分布计算增益系数。
8.一种存储介质,其上存储有计算机程序,其特征在于,当所述计算机程序在计算机上运行时,使得所述计算机执行如权利要求1至4任一项所述的图像处理方法。
9.一种电子设备,包括处理器和存储器,所述存储器存储有多条指令,其特征在于,所述处理器加载所述存储器中的指令用于执行以下步骤:
获取不同曝光度的多帧原始图像,并在所述多帧原始图像当中选取参考帧;
根据所述原始图像的亮度将所述原始图像划分为多个像素集合;
根据所述像素集合计算所述参考帧以外的待处理原始图像与所述参考帧的增益系数;
通过所述增益系数对所述待处理原始图像进行亮度补偿;
对所述多帧原始图像当中的所有待处理原始图像都完成亮度补偿后,得到多帧目标图像帧;
分别检测多帧目标图像帧相对所述参考帧的运动区域;
将所述多帧目标图像帧中的运动区域的像素点坐标调整为所述参考帧图像中运动区域的像素点对应的坐标,以实现运动对齐;
采用高动态范围算法对实现运动对齐后的多帧目标图像帧进行图像合成。
CN201910282213.0A 2019-04-09 2019-04-09 图像处理方法、装置、存储介质及电子设备 Active CN110060213B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910282213.0A CN110060213B (zh) 2019-04-09 2019-04-09 图像处理方法、装置、存储介质及电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910282213.0A CN110060213B (zh) 2019-04-09 2019-04-09 图像处理方法、装置、存储介质及电子设备

Publications (2)

Publication Number Publication Date
CN110060213A CN110060213A (zh) 2019-07-26
CN110060213B true CN110060213B (zh) 2021-06-15

Family

ID=67318792

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910282213.0A Active CN110060213B (zh) 2019-04-09 2019-04-09 图像处理方法、装置、存储介质及电子设备

Country Status (1)

Country Link
CN (1) CN110060213B (zh)

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110581956A (zh) * 2019-08-26 2019-12-17 Oppo广东移动通信有限公司 图像处理方法、装置、存储介质及电子设备
CN110728648B (zh) * 2019-10-25 2022-07-19 北京迈格威科技有限公司 图像融合的方法、装置、电子设备及可读存储介质
CN110971781B (zh) * 2019-11-08 2021-06-15 Oppo广东移动通信有限公司 图像处理方法、装置、存储介质及电子设备
CN110769164B (zh) * 2019-11-21 2020-09-18 天津九安医疗电子股份有限公司 一种自动调节目标场景照明水平的方法
CN111554243B (zh) * 2019-12-31 2022-04-12 海信视像科技股份有限公司 亮度调节方法及显示设备
CN113949930B (zh) * 2020-07-17 2024-03-12 晶晨半导体(上海)股份有限公司 选取参考帧的方法、电子设备和存储介质
CN116647685A (zh) * 2020-10-26 2023-08-25 杭州海康威视数字技术股份有限公司 视频编码方法、装置、电子设备及可读存储介质
CN112422841B (zh) * 2020-11-09 2023-01-20 上海原能细胞生物低温设备有限公司 图像补偿方法、装置、计算机设备和存储介质
CN112887639A (zh) * 2021-01-18 2021-06-01 Oppo广东移动通信有限公司 图像处理方法、装置、系统、电子设备以及存储介质
CN113012081A (zh) * 2021-01-28 2021-06-22 北京迈格威科技有限公司 图像处理方法、装置和电子系统
CN112929576B (zh) * 2021-02-01 2023-08-01 北京字节跳动网络技术有限公司 图像处理方法、装置、设备和存储介质
CN115866411B (zh) * 2023-03-01 2023-05-12 深圳市昂星科技有限公司 基于光线校正的车载监控自适应曝光方法、装置及设备

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN202721740U (zh) * 2012-06-21 2013-02-06 无锡鸿图微电子技术有限公司 视频成像系统中背光式场景的自动曝光补偿装置
CN104272377A (zh) * 2012-02-06 2015-01-07 莱金德3D有限责任公司 运动图片项目管理系统

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4325388B2 (ja) * 2003-12-12 2009-09-02 ソニー株式会社 信号処理装置、画像表示装置および信号処理方法
CN100568926C (zh) * 2006-04-30 2009-12-09 华为技术有限公司 自动曝光控制参数的获得方法及控制方法和成像装置
CN101399919B (zh) * 2007-09-25 2010-05-19 展讯通信(上海)有限公司 自动曝光和自动增益调节方法及其装置
CN101340523B (zh) * 2008-08-14 2011-11-23 北京中星微电子有限公司 一种对数字图像进行曝光补偿的方法和装置
US8780143B2 (en) * 2009-02-19 2014-07-15 Samsung Electronics Co., Ltd Display method and apparatus for controlling brightness of projector light source
KR101611914B1 (ko) * 2009-12-18 2016-04-14 엘지디스플레이 주식회사 액정 표시 장치의 로컬 디밍 구동 방법 및 장치
CN103067716B (zh) * 2013-01-10 2016-06-29 华为技术有限公司 深度图像的编解码方法和编解码装置
CN103200406B (zh) * 2013-04-12 2016-10-05 华为技术有限公司 深度图像的编解码方法和编解码装置
JP6143096B2 (ja) * 2013-08-07 2017-06-07 ソニー株式会社 眼底画像処理装置およびプログラム、並びに眼底画像撮影装置
CN104598914A (zh) * 2013-10-31 2015-05-06 展讯通信(天津)有限公司 一种肤色检测的方法及装置
CN105898230B (zh) * 2016-05-20 2019-02-05 深圳英飞拓科技股份有限公司 基于多输入通道的拼接图像亮度均衡方法及装置
CN106840387B (zh) * 2016-12-09 2019-03-05 中国科学院国家天文台 一种增益差别较大的成像系统的目标提取及平场改正方法
CN109413335B (zh) * 2017-08-16 2020-12-18 瑞芯微电子股份有限公司 一种双重曝光合成hdr图像的方法和装置
CN107527360B (zh) * 2017-08-23 2019-05-17 维沃移动通信有限公司 一种图像对齐方法及移动终端
CN109040609B (zh) * 2018-08-22 2021-04-09 Oppo广东移动通信有限公司 曝光控制方法、装置、电子设备和计算机可读存储介质

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104272377A (zh) * 2012-02-06 2015-01-07 莱金德3D有限责任公司 运动图片项目管理系统
CN202721740U (zh) * 2012-06-21 2013-02-06 无锡鸿图微电子技术有限公司 视频成像系统中背光式场景的自动曝光补偿装置

Also Published As

Publication number Publication date
CN110060213A (zh) 2019-07-26

Similar Documents

Publication Publication Date Title
CN110060213B (zh) 图像处理方法、装置、存储介质及电子设备
CN110493538B (zh) 图像处理方法、装置、存储介质及电子设备
CN111418201B (zh) 一种拍摄方法及设备
CN109547701B (zh) 图像拍摄方法、装置、存储介质及电子设备
CN108322646B (zh) 图像处理方法、装置、存储介质及电子设备
US9826149B2 (en) Machine learning of real-time image capture parameters
KR102149187B1 (ko) 전자 장치와, 그의 제어 방법
CN108924420B (zh) 图像拍摄方法、装置、介质、电子设备及模型训练方法
US9986171B2 (en) Method and apparatus for dual exposure settings using a pixel array
CN112073645B (zh) 曝光控制方法、装置、终端设备及存储介质
CN112202986B (zh) 图像处理方法、图像处理装置、可读介质及其电子设备
CN104917973B (zh) 动态曝光调整方法及其电子装置
CN110581956A (zh) 图像处理方法、装置、存储介质及电子设备
US20220245765A1 (en) Image processing method and apparatus, and electronic device
CN115601244B (zh) 图像处理方法、装置和电子设备
CN113810603B (zh) 点光源图像检测方法和电子设备
US20240119566A1 (en) Image processing method and apparatus, and electronic device
CN110766729B (zh) 图像处理方法、装置、存储介质及电子设备
CN114096994A (zh) 图像对齐方法及装置、电子设备、存储介质
US9686523B2 (en) Method for image processing and an electronic device thereof
CN110570370A (zh) 图像信息的处理方法、装置、存储介质及电子设备
CN108540636A (zh) 一种基于双摄像头的拍照方法及装置
CN116095476B (zh) 摄像头的切换方法、装置、电子设备及存储介质
CN111028192B (zh) 一种图像合成方法及电子设备
CN113808066A (zh) 图像选取方法、装置、存储介质及电子设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant