CN115209062A - 一种图像处理方法及装置 - Google Patents
一种图像处理方法及装置 Download PDFInfo
- Publication number
- CN115209062A CN115209062A CN202110394604.9A CN202110394604A CN115209062A CN 115209062 A CN115209062 A CN 115209062A CN 202110394604 A CN202110394604 A CN 202110394604A CN 115209062 A CN115209062 A CN 115209062A
- Authority
- CN
- China
- Prior art keywords
- image
- parameter
- pixel
- parameters
- target image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 25
- 238000000034 method Methods 0.000 claims abstract description 52
- 238000009499 grossing Methods 0.000 claims description 57
- 238000012545 processing Methods 0.000 claims description 53
- 238000010606 normalization Methods 0.000 claims description 30
- 230000008569 process Effects 0.000 claims description 24
- 230000007423 decrease Effects 0.000 claims description 10
- 238000012935 Averaging Methods 0.000 claims description 3
- 230000007704 transition Effects 0.000 abstract description 14
- 230000003247 decreasing effect Effects 0.000 abstract description 4
- 238000004891 communication Methods 0.000 description 32
- 230000006854 communication Effects 0.000 description 32
- 230000006870 function Effects 0.000 description 25
- 238000013461 design Methods 0.000 description 19
- 238000010586 diagram Methods 0.000 description 16
- 238000007726 management method Methods 0.000 description 15
- 230000005236 sound signal Effects 0.000 description 12
- 238000005070 sampling Methods 0.000 description 8
- 230000003287 optical effect Effects 0.000 description 7
- 238000004590 computer program Methods 0.000 description 5
- 238000013500 data storage Methods 0.000 description 4
- 230000000694 effects Effects 0.000 description 4
- 238000003384 imaging method Methods 0.000 description 4
- 238000013528 artificial neural network Methods 0.000 description 3
- 230000008859 change Effects 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 238000004422 calculation algorithm Methods 0.000 description 2
- 230000001413 cellular effect Effects 0.000 description 2
- 238000010438 heat treatment Methods 0.000 description 2
- 230000002093 peripheral effect Effects 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 230000001133 acceleration Effects 0.000 description 1
- 230000003416 augmentation Effects 0.000 description 1
- 230000007175 bidirectional communication Effects 0.000 description 1
- 230000002457 bidirectional effect Effects 0.000 description 1
- 238000013529 biological neural network Methods 0.000 description 1
- 210000000988 bone and bone Anatomy 0.000 description 1
- 210000004556 brain Anatomy 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000015556 catabolic process Effects 0.000 description 1
- 210000004027 cell Anatomy 0.000 description 1
- 230000019771 cognition Effects 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 238000006731 degradation reaction Methods 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 230000036541 health Effects 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 210000002569 neuron Anatomy 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 230000035945 sensitivity Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
Images
Landscapes
- Image Processing (AREA)
Abstract
本申请实施例提供一种图像处理方法及装置。该方法中,首先根据参考图像中各个像素的参数,分别调整m帧第一图像中各个像素的参数,所述参数至少包括像素的亮度,所述第一图像中各个像素在调整后的参数的均值与所述参考图像中各个像素的参数的均值相同;然后,根据所述参考图像中各个像素的参数,分别调整n帧第二图像中各个像素的参数,所述n帧第二图像的调整幅度逐帧递减。通过本申请,能够避免所述第一图像与所述参考图像之间的亮度差异过大的现象。并且,调整之后的第二图像在第一图像和第二相机拍摄的其他图像之间可起到过渡作用,便于用户适应所述其他图像的参数,避免所述其他图像的参数与调整之后的第二图像之间的参数差异过大。
Description
技术领域
本申请涉及图像处理技术领域,具体涉及一种图像处理方法及装置。
背景技术
相机变焦的功能越来越被用户所重视,因此,目前的部分终端设备(例如一些智能手机)设置有多相机模组。所述多相机模组通常包括多个相机,不同相机具备不同的变焦倍率。如果用户应用了相机的变焦功能,在变焦倍率达到一定阈值时,可切换所述多相机模组中的相机,以启用不同变焦倍率的相机,从而能够充分利用多相机模组的优势,满足用户不同场景下的拍摄需求。例如,如果终端设备当前启用的相机的变焦倍率为1x,而用户希望通过更高变焦倍率的相机拍摄时,终端设备可启用多相机模组中具有更高变焦倍率(例如10x)的相机进行拍摄。
但是,变焦倍率不同的相机的感光能力不同,因此,即使在曝光量相同的环境下,变焦倍率不同的相机拍摄的图片的亮度也不相同。这种情况下,如果终端设备在连续拍摄的过程中,切换了变焦倍率不同的相机,则切换前后拍摄的图像往往存在明显的亮度变化,即切换前拍摄的图像和切换后拍摄的图像的亮度往往存在较大的差异,影响用户的体验。
发明内容
为了解决现有技术中,在切换变焦倍率不同的相机之后,切换前拍摄的图像和切换后拍摄的图像的亮度存在较大的差异的问题,本申请实施例提供一种图像处理方法及装置。
第一方面,本申请实施例公开一种图像处理方法,包括:
根据参考图像中各个像素的参数,分别调整m帧第一图像中各个像素的参数,所述参考图像为切换前的所述第一相机拍摄的图像,所述第一图像为切换后的所述第二相机拍摄的图像,所述参数至少包括所述像素的亮度,所述参考图像中各个像素的参数为参考参数,所述第一图像中各个像素在调整后的参数为第一参数,所述第一参数的均值与所述参考参数的均值相同;
根据所述参考图像中各个像素的参数,分别调整n帧第二图像中各个像素的参数,获取调整后的第二图像,所述第二图像为切换后的所述第二相机拍摄的图像,所述第二图像的拍摄时间晚于所述第一图像的拍摄时间,所述n帧第二图像的调整幅度逐帧递减。
通过上述步骤,可对第二相机拍摄的第一图像中各个像素的参数进行调整,使第二相机拍摄的第一图像的第一参数的均值与所述参考参数的均值相同,从而能够避免所述第一图像与所述参考图像之间的亮度差异过大。
另外,通过上述步骤,还可对第二相机拍摄的n帧第二图像中各个像素的参数进行调整,由于所述n帧第二图像的调整幅度逐帧递减,因此,拍摄时间越晚的第二图像在调整后的参数越接近该第二图像的原始的参数。相应的,所述n帧第二图像中拍摄时间较早的图像的参数,较接近所述参考图像的参数,而随着拍摄时间的推移,所述n帧第二图像中拍摄时间越晚的图像的参数,越接近第二相机拍摄的原始的第二图像的参数,这种情况下,所述第二相机在拍摄第二图像之后还拍摄其他图像,调整之后的第二图像在第一图像和所述其他图像之间可起到过渡作用,便于用户适应所述其他图像的参数,避免所述其他图像的参数与调整之后的第二图像之间的参数差异过大。
一种可选的设计中,所述根据参考图像中各个像素的参数,分别调整m帧第一图像中各个像素的参数,包括:
通过以下公式,对第一目标图像中各个像素的参数进行标准化处理:
其中,所述第一目标图像为所述m帧第一图像中的任意一帧图像,originalval为所述第一目标图像中第一像素的参数的原始值,averagecur为在标准化处理之前,所述第一目标图像中各个像素的参数的平均值,stdevcur为在标准化处理之前,所述第一目标图像中各个像素的参数的标准差,newval为所述第一目标图像中的第一像素在标准化处理后的参数;
通过以下公式,对标准化处理后的所述第一目标图像进行反标准化处理,反标准化处理后的所述第一目标图像为所述调整后的第一图像:
processedval=newval*stdevref+averageref;
其中,newval为所述第一目标图像中的第一像素在标准化处理后的参数,stdevref为所述参考图像中各个像素的参数的标准差,averageref为所述参考图像中各个像素的参数的平均值,processedval为所述调整后的第一目标图像中的第一像素的参数。
通过公式(1)和(2),可确定所述调整后的第一图像中的各个像素的参数,继而确定所述调整后的第一图像。并且,通过这一方案,所述调整后的第一图像的参数的方差,与所述参考图像的参数的方差相同。这种情况下,所述调整后的第一图像的对比度与所述参考图像的对比度较为接近,因此,所述调整后的第一图像与所述参考图像之间的亮度差异较小。
一种可选的设计中,所述根据所述参考图像中各个像素的参数,分别调整n帧第二图像中各个像素的参数,包括:
根据所述参考参数以及参数阈值,分别调整所述n帧第二图像中各个像素的参数,根据所述参考参数以及参数阈值调整后的所述第二图像为第一待处理图像;
根据所述n帧第二图像分别对应的平滑系数,分别调整所述第一待处理图像中各个像素的参数,根据所述平滑系数调整后的所述第一待处理图像为所述调整后的第二图像。
通过上述步骤对第二图像进行调整,能够避免第二图像在调整后的参数过大或过小,并且,并且能够使所述n帧第二图像的调整幅度逐帧递减,以使所述第二图像起到过渡的作用。
一种可选的设计中,所述根据所述参考参数以及参数阈值,分别调整所述n帧第二图像中各个像素的参数,包括:
通过分别对所述参考图像和第二目标图像进行下采样,获取所述参考图像对应的第一小图,以及获取所述第二目标图像对应的第二小图,所述第二目标图像为所述n帧第二图像中的任意一帧图像,所述第一小图和所述第二小图的尺寸相同;
确定同一坐标分别对应的所述第一小图的参数与所述第二小图的参数之间的第一参数比值;
根据第一阈值,分别调整各个坐标对应的所述第一参数比值,调整后的所述第一参数比值不大于所述第一阈值中的第一阈值上限,或者,调整后的所述第一参数比值不小于所述第一阈值中的第一阈值下限,所述参数阈值包括所述第一阈值;
根据调整后的所述第一参数比值分别对应的坐标,对调整后的所述第一参数比值进行双线性插值处理,处理之后的各个第一参数比值分别对应所述第二目标图像中的像素;
将所述处理之后的各个第一参数比值分别与对应的所述第二目标图像的参数进行点乘,点乘结果为调整后的第二目标图像中各个像素的参数。
通过上述步骤,能够根据第一阈值,对第二图像进行调整,避免第二图像中的参数过大或过小。并且,在上述步骤中,首先通过下采样技术,获取第一小图和第二小图,然后再对第一小图和第二小图进行处理,因此能够减少处理的数据量,提高处理效率。
一种可选的设计中,所述根据第一阈值,分别调整各个坐标对应的所述第一参数比值,包括:
第一坐标对应的第一参数比值大于所述第一阈值上限,将所述第一坐标对应的第一参数比值调整为所述第一阈值上限;
或者,第二坐标对应的第一参数比值小于所述第一阈值下限,将所述第二坐标对应的第一参数比值调整为所述第一阈值下限。
一种可选的设计中,所述根据所述参考参数以及参数阈值,分别调整所述n帧第二图像中各个像素的参数,包括:
确定同一坐标分别对应的所述参考图像的参数与第三目标图像的参数之间的第二参数比值,所述第三目标图像为所述n帧第二图像中的任意一帧图像;
根据第二阈值,分别调整各个坐标对应的所述第二参数比值,调整后的所述第二参数比值不大于所述第二阈值中的第二阈值上限,或者,调整后的所述第二参数比值不小于所述第二阈值中的第二阈值下限,所述参数阈值包括所述第二阈值;
将调整后的各个坐标对应的第二参数比值分别与对应的第三目标图像的参数进行点乘,点乘结果为调整后的第三目标图像中各个像素的参数。
通过本申请实施例提供的方案,能够根据第二阈值,对第二图像进行调整,避免第二图像中的参数过大或过小。并且,这一实施例中,未对第二图像进行下采样处理,能够提高第二图像处理的准确度。
一种可选的设计中,所述根据所述n帧第二图像分别对应的平滑系数,分别调整所述第一待处理图像中各个像素的参数,包括:
根据所述第一图像的帧数和所述第二图像的帧数,确定第四目标图像对应的平滑系数,所述第四目标图像为所述第一待处理图像中的任意一帧图像;
根据所述第四目标图像对应的平滑系数,确定所述第四目标图像中各个像素的参数在调整后的标准差;
根据所述第四目标图像的参数平滑系数和所述在调整后的标准差,确定所述第四目标图像中各个像素的参数在调整后的平均值;
根据所述第四目标图像的参数的平滑系数和所述在调整后的平均值,确定所述第四目标图像中同一像素在调整后的参数与在调整前的参数的比值;
根据所述比值,确定所述第四目标图像中各个像素在调整后的参数。
一种可选的设计中,通过以下公式确定所述第四目标图像对应的平滑系数:
其中,dampRatio为所述第四目标图像对应的平滑系数,stableFrameCnt为所述第一图像的帧数,transitFrameCnt为所述第二图像的帧数,curFrameCnt为所述第四目标图像的序号,所述第一待处理图像的序号根据拍摄时间依次递增,所述第一待处理图像的序号均为正整数;
或者,通过以下公式,确定所述第四目标图像中各个像素的参数在调整后的标准差:
dampStdevref=stdevref*dampRatio+stdevcur*(1-dampRatio);
其中,dampStdevref为所述第四目标图像中各个像素的参数在调整后的标准差,stdevref为所述参考图像中各个像素的参数的标准差,stdevcur为所述第四目标图像中各个像素的参数在调整前的标准差;
或者,通过以下公式,确定所述第四目标图像中各个像素的参数在调整后的平均值:
dampAverageref=averageref*dampRatio+averagecur*(1-dampRatio);
其中,dampAverageref为所述第四目标图像中各个像素的参数在调整后的平均值,averageref为所述参考图像中各个像素的参数的平均值,averagecur为所述第四目标图像中各个像素的参数在调整前的平均值;
或者,根据以下公式,确定所述第四目标图像中同一像素在调整后的参数与在调整前的参数的比值:
dampRatio(x2,y2)=Ratio(x2,y2)*dampRatio+1*(1-dampRatio);
其中,dampRatio(x2,y2)为所述第四目标图像中,坐标为(x2,y2)的像素在调整后的参数与在调整前的参数的比值,Ratio(x2,y2)为所述参考图像中坐标为(x2,y2)的像素的参数,与所述第四目标图像中坐标为(x2,y2)的像素在调整前的参数之间的比值;
或者,根据以下公式,确定所述第四目标图像中各个像素在调整后的参数:
Param(x2,y2)=dampRatio(x2,y2)*param(x2,y2);
其中,Param(x2,y2)为所述第四目标图像中坐标为(x2,y2)的像素在调整后的参数,param(x2,y2)为所述第四目标图像中坐标为(x2,y2)的像素在调整前的参数。
第二方面,本申请实施例公开一种图像处理装置,包括:
处理器和收发接口;
所述收发接口用于获取参考图像、m帧第一图像和n帧第二图像,所述参考图像为切换前的所述第一相机拍摄的图像,所述第一图像为切换后的所述第二相机拍摄的图像,所述第二图像为切换后的所述第二相机拍摄的图像,所述第二图像的拍摄时间晚于所述第一图像的拍摄时间;
所述处理器用于根据所述参考图像中各个像素的参数,分别调整所述m帧第一图像中各个像素的参数,所述参数至少包括所述像素的亮度,所述参考图像中各个像素的参数为参考参数,所述第一图像中各个像素在调整后的参数为第一参数,所述第一参数的均值与所述参考参数的均值相同;
所述处理器还用于,根据所述参考图像中各个像素的参数,分别调整所述n帧第二图像中各个像素的参数,获取调整后的第二图像,所述n帧第二图像的调整幅度逐帧递减。
一种可选的设计中,所述处理器具体用于,通过以下公式,对第一目标图像中各个像素的参数进行标准化处理:
其中,所述第一目标图像为所述m帧第一图像中的任意一帧图像,originalval为所述第一目标图像中第一像素的参数的原始值,averagecur为在标准化处理之前,所述第一目标图像中各个像素的参数的平均值,stdevcur为在标准化处理之前,所述第一目标图像中各个像素的参数的标准差,newval为所述第一目标图像中的第一像素在标准化处理后的参数;
所述处理器具体用于,通过以下公式,对标准化处理后的所述第一目标图像进行反标准化处理,反标准化处理后的所述第一目标图像为所述调整后的第一图像:
processedval=newval*stdevref+averageref;
其中,newval为所述第一目标图像中的第一像素在标准化处理后的参数,stdevref为所述参考图像中各个像素的参数的标准差,averageref为所述参考图像中各个像素的参数的平均值,processedval为所述调整后的第一目标图像中的第一像素的参数。
一种可选的设计中,所述处理器具体用于,根据所述参考参数以及参数阈值,分别调整所述n帧第二图像中各个像素的参数,根据所述参考参数以及参数阈值调整后的所述第二图像为第一待处理图像;并且,根据所述n帧第二图像分别对应的平滑系数,分别调整所述第一待处理图像中各个像素的参数,根据所述平滑系数调整后的所述第一待处理图像为所述调整后的第二图像。
一种可选的设计中,所述处理器具体用于:
通过分别对所述参考图像和第二目标图像进行下采样,获取所述参考图像对应的第一小图,以及获取所述第二目标图像对应的第二小图,所述第二目标图像为所述n帧第二图像中的任意一帧图像,所述第一小图和所述第二小图的尺寸相同;
确定同一坐标分别对应的所述第一小图的参数与所述第二小图的参数之间的第一参数比值;
根据第一阈值,分别调整各个坐标对应的所述第一参数比值,调整后的所述第一参数比值不大于所述第一阈值中的第一阈值上限,或者,调整后的所述第一参数比值不小于所述第一阈值中的第一阈值下限,所述参数阈值包括所述第一阈值;
根据调整后的所述第一参数比值分别对应的坐标,对调整后的所述第一参数比值进行双线性插值处理,处理之后的各个第一参数比值分别对应所述第二目标图像中的像素;
将所述处理之后的各个第一参数比值分别与对应的所述第二目标图像的参数进行点乘,点乘结果为调整后的第二目标图像中各个像素的参数。
一种可选的设计中,所述处理器具体用于:
第一坐标对应的第一参数比值大于所述第一阈值上限,将所述第一坐标对应的第一参数比值调整为所述第一阈值上限;
或者,第二坐标对应的第一参数比值小于所述第一阈值下限,将所述第二坐标对应的第一参数比值调整为所述第一阈值下限。
一种可选的设计中,所述处理器具体用于:
确定同一坐标分别对应的所述参考图像的参数与第三目标图像的参数之间的第二参数比值,所述第三目标图像为所述n帧第二图像中的任意一帧图像;
根据第二阈值,分别调整各个坐标对应的所述第二参数比值,调整后的所述第二参数比值不大于所述第二阈值中的第二阈值上限,或者,调整后的所述第二参数比值不小于所述第二阈值中的第二阈值下限,所述参数阈值包括所述第二阈值;
将调整后的各个坐标对应的第二参数比值分别与对应的第三目标图像的参数进行点乘,点乘结果为调整后的第三目标图像中各个像素的参数。
一种可选的设计中,所述处理器具体用于:
根据所述第一图像的帧数和所述第二图像的帧数,确定第四目标图像对应的平滑系数,所述第四目标图像为所述第一待处理图像中的任意一帧图像;
根据所述第四目标图像对应的平滑系数,确定所述第四目标图像中各个像素的参数在调整后的标准差;
根据所述第四目标图像的参数平滑系数和所述在调整后的标准差,确定所述第四目标图像中各个像素的参数在调整后的平均值;
根据所述第四目标图像的参数的平滑系数和所述在调整后的平均值,确定所述第四目标图像中同一像素在调整后的参数与在调整前的参数的比值;
根据所述比值,确定所述第四目标图像中各个像素在调整后的参数。
一种可选的设计中,所述处理器具体用于,通过以下公式确定所述第四目标图像对应的平滑系数:
其中,dampRatio为所述第四目标图像对应的平滑系数,stableFrameCnt为所述第一图像的帧数,transitFrameCnt为所述第二图像的帧数,curFrameCnt为所述第四目标图像的序号,所述第一待处理图像的序号根据拍摄时间依次递增,所述第一待处理图像的序号均为正整数;
或者,所述处理器具体用于,通过以下公式,确定所述第四目标图像中各个像素的参数在调整后的标准差:
dampStdevref=stdevref*dampRatio+stdevcur*(1-dampRatio);
其中,dampStdevref为所述第四目标图像中各个像素的参数在调整后的标准差,stdevref为所述参考图像中各个像素的参数的标准差,stdevcur为所述第四目标图像中各个像素的参数在调整前的标准差;
或者,所述处理器具体用于,通过以下公式,确定所述第四目标图像中各个像素的参数在调整后的平均值:
dampAverageref=averageref*dampRatio+averagecur*(1-dampRatio);
其中,dampAverageref为所述第四目标图像中各个像素的参数在调整后的平均值,averageref为所述参考图像中各个像素的参数的平均值,averagecur为所述第四目标图像中各个像素的参数在调整前的平均值;
或者,所述处理器具体用于,根据以下公式,确定所述第四目标图像中同一像素在调整后的参数与在调整前的参数的比值:
dampRatio(x2,y2)=Ratio(x2,y2)*dampRatio+1*(1-dampRatio);
其中,dampRatio(x2,y2)为所述第四目标图像中,坐标为(x2,y2)的像素在调整后的参数与在调整前的参数的比值,Ratio(x2,y2)为所述参考图像中坐标为(x2,y2)的像素的参数,与所述第四目标图像中坐标为(x2,y2)的像素在调整前的参数之间的比值;
或者,所述处理器具体用于,根据以下公式,确定所述第四目标图像中各个像素在调整后的参数:
Param(x2,y2)=dampRatio(x2,y2)*param(x2,y2);
其中,Param(x2,y2)为所述第四目标图像中坐标为(x2,y2)的像素在调整后的参数,param(x2,y2)为所述第四目标图像中坐标为(x2,y2)的像素在调整前的参数。
第三方面,本申请实施例公开一种终端装置,包括:
至少一个处理器和存储器,
所述存储器,用于存储程序指令;
所述处理器,用于调用并执行所述存储器中存储的程序指令,以使所述终端装置执行第一方面所述的图像处理方法。
第四方面,本申请实施例公开一种计算机可读存储介质,其特征在于,
所述计算机可读存储介质中存储有指令,当其在计算机上运行时,使得所述计算机执行如第一方面所述的图像处理方法。
第五方面,本申请实施例提供一种包含指令的计算机程序产品,当所述计算机程序产品在电子设备上运行时,使得所述电子设备执行如第一方面所述的图像处理方法。
本申请实施例提供一种图像处理方法及装置。该方法中,首先根据参考图像中各个像素的参数,分别调整m帧第一图像中各个像素的参数,所述参考图像为切换前的所述第一相机拍摄的图像,所述第一图像为切换后的所述第二相机拍摄的图像,所述参数至少包括所述像素的亮度,所述参考图像中各个像素的参数为参考参数,所述第一图像中各个像素在调整后的参数为第一参数,所述第一参数的均值与所述参考参数的均值相同;然后,根据所述参考图像中各个像素的参数,分别调整n帧第二图像中各个像素的参数,获取调整后的第二图像,所述第二图像为切换后的所述第二相机拍摄的图像,所述第二图像的拍摄时间晚于所述第一图像的拍摄时间,所述n帧第二图像的调整幅度逐帧递减。
这种情况下,通过本申请实施例提供的方案,能够使第二相机拍摄的第一图像的第一参数的均值与所述参考参数的均值相同,从而能够避免所述第一图像与所述参考图像之间的亮度差异过大。并且,还能够调整n帧第二图像中各个像素的参数,获取调整后的第二图像,其中,所述n帧第二图像的调整幅度逐帧递减。
由于在本申请实施例中,n帧第二图像的调整幅度逐帧递减,因此,拍摄时间越晚的第二图像在调整后的参数越接近该第二图像的原始的参数。相应的,所述n帧第二图像中拍摄时间较早的图像的参数,较接近所述参考图像的参数,而随着拍摄时间的推移,所述n帧第二图像中拍摄时间越晚的图像的参数,越接近第二相机拍摄的原始的第二图像的参数。
这种情况下,所述第二相机在拍摄第二图像之后还拍摄其他图像,调整之后的第二图像在第一图像和所述其他图像之间可起到过渡作用,便于用户适应所述其他图像的参数,避免所述其他图像的参数与调整之后的第二图像之间的参数差异过大。
另外,在本申请实施例中,所述参数包括亮度,因此,通过本申请实施例提供的方案,可减少第一图像、第二图像分别与参考图像之间的亮度差异,并且调整之后的第二图像的亮度在第一图像和其他图像的亮度之间起到过渡作用,便于用户适应所述第二相机拍摄的所述其他图像的亮度。
因此,本申请实施例提供的方案,能够减少解决现有技术中,在切换变焦倍率不同的相机之后,切换前拍摄的图像和切换后拍摄的图像的亮度存在较大的差异的问题。
附图说明
图1为本申请实施例公开的一种终端设备的结构示意图;
图2为本申请实施例公开的一种图像处理方法的工作流程示意图;
图3为本申请实施例公开的又一种图像处理方法的工作流程示意图;
图4(a)为本申请实施例公开的一种图像处理方法中,未经过下采样处理的图像的示例图;
图4(b)为本申请实施例公开的一种图像处理方法中,经过下采样处理的图像的示例图;
图5为本申请实施例公开的又一种图像处理方法的工作流程示意图;
图6为本申请实施例公开的又一种图像处理方法的工作流程示意图;
图7为本申请实施例公开的一种图像处理装置的结构示意图;
图8为本申请实施例公开的一种终端装置的结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行描述。
其中,在本申请实施例的描述中,除非另有说明,“/”表示或的意思,例如,A/B可以表示A或B;本文中的“和/或”仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。另外,在本申请实施例的描述中,“多个”是指两个或多于两个。
以下,术语“第一”、“第二”仅用于描述目的。在本申请实施例的描述中,除非另有说明,“多个”的含义是两个或两个以上。
为了下述各实施例的描述清楚简洁,首先给出相关技术的简要介绍:
目前部分终端设备(例如一些智能手机)设置有多相机模组,所述多相机模组通常包括多个相机,不同相机具备不同的变焦倍率。在通过终端设备进行拍摄时,用户可应用相机的变焦功能,以选择拍摄时所需的变焦倍率。在变焦倍率达到一定阈值,当前启用的相机不能满足拍摄需求时,终端设备可启用多相机模组中的其他相机,从而通过切换所述多相机模组中的相机,启用不同变焦倍率的相机,以便能够充分利用多相机模组的优势,满足用户不同场景下的拍摄需求。
也就是说,在拍摄过程中,终端设备可启用不同变焦倍率的相机进行拍摄。
但是,变焦倍率不同的相机的感光能力不同,因此,即使在曝光量相同的环境下,变焦倍率不同的相机拍摄的图片的亮度也不相同。
这种情况下,如果终端设备在连续拍摄的过程中,切换了变焦倍率不同的相机,则切换前后拍摄的图像往往存在明显的亮度变化,即切换前拍摄的图像和切换后拍摄的图像的亮度往往存在较大的差异,这会影响用户的体验。
为了解决这一问题,现有技术通常采用以下两种方案:第一种方案采用标定的方式,这一方案中,在指定的环境(例如指定光源种类和指定环境光强等)下,让多相机模组中的各个相机分别通过固定的曝光量对一个均匀的平面进行拍摄,该曝光量通常包括曝光时间和感光度;然后统计拍摄的各帧图像的中心的平均亮度,并将各帧图像中心的平均亮度与目标亮度进行对比,通过对比,确定所述各帧图像的中心的平均亮度分别与目标亮度之间的系数,将该系数分别作为拍摄各帧图像的各个相机对应的系数;在切换相机后,可通过切换前后的相机分别对应的系数,确定切换后的相机的曝光量,并在拍摄过程的初始阶段,由切换后的相机在确定的曝光量下进行拍摄,以避免相机切换前后的图像的亮度差异过大。
但是,相机的拍摄环境往往是多样化的,第一种方案由于只能在指定的环境下进行标定,因此,通常只能解决在指定环境下拍摄时,相机切换所导致的图像亮度差异较大的问题,如果在其他环境下,相机的切换仍然会带来相机切换前后的图像的亮度差异较大的问题,因此适用的范围较小。
在第二种方案中,将需要切换的相机提前启动,即切换前的相机和切换后的相机同时运行,然后计算两个相机在相同的视场(field ofview,FOV)区域的亮度,再根据亮度的差异,计算切换后的相机对应的曝光量,在所述切换后的相机对应的曝光量下进行拍摄时,所述切换后的相机获取的图像的亮度与切换前的相机获取的图像的亮度的差异较小,以避免相机切换前后的图像的亮度差异过大。
但是,这一方案中,需要终端设备同时运行切换前的相机和切换后的相机,这会导致终端设备的整体功耗增加,终端设备易出现发热现象,且易导致终端设备的性能降低。
为了解决现有技术中,在切换变焦倍率不同的相机之后,切换前拍摄的图像和切换后拍摄的图像的亮度存在较大的差异的问题,本申请实施例提供一种图像处理方法及装置。
其中,本申请实施例提供的图像处理方法可应用于终端设备,该终端设备可为多种类型的设备。该终端设备可与成像装置相连接,或者,所述终端设备内可设置成像装置。
所述成像装置通常包括多相机模组,通过所述多相机模组中包括的多个相机进行拍摄,示例性的,所述成像装置可包括第一相机和第二相机,所述第一相机和第二相机的变焦倍率不同。并且,所述终端设备可根据本申请实施例提供的图像处理方法,对所述成像装置拍摄的图像进行处理,以解决切换前拍摄的图像和切换后拍摄的图像的亮度存在较大的差异的问题。
在一些实施例中,所述终端设备可以是手机、平板电脑、桌面型、膝上型、笔记本电脑、超级移动个人计算机(ultra-mobile personal computer,UMPC)、手持计算机和上网本等设备,本申请对终端设备的具体形式不做特殊限制。
以终端设备为智能手机作为示例,所述终端设备的结构示意图可如图1所示。参见图1,所述终端设备可以包括处理器110,外部存储器接口120,内部存储器121,通用串行总线(universal serial bus,USB)接口130,充电管理模块140,电源管理模块141,电池142,天线1,天线2,射频模块150,通信模块160,音频模块170,扬声器170A,受话器170B,麦克风170C,耳机接口170D,传感器模块180,按键190,马达191,指示器192,摄像头193,屏幕301,以及用户标识模块(subscriber identification module,SIM)卡接口195等。
可以理解的是,本申请实施例示意的结构并不构成对手机的具体限定。在本申请另一些实施例中,手机可以包括比图示更多或更少的部件,或者组合某些部件,或者拆分某些部件,或者不同的部件布置。图示的部件可以以硬件,软件或软件和硬件的组合实现。
处理器110可以包括一个或多个处理单元,例如:处理器110可以包括应用处理器(application processor,AP),调制解调处理器,图形处理器(graphics processingunit,GPU),图像信号处理器(image signal processor,ISP),控制器,存储器,视频编解码器,数字信号处理器(digital signal processor,DSP),基带处理器,和/或神经网络处理器(neural-network processing unit,NPU)等。其中,不同的处理单元可以是独立的器件,也可以集成在一个或多个处理器中。
其中,控制器可以是手机的神经中枢和指挥中心。控制器可以根据指令操作码和时序信号,产生操作控制信号,完成取指令和执行指令的控制。
处理器110中还可以设置存储器,用于存储指令和数据。在一些实施例中,处理器110中的存储器为高速缓冲存储器。该存储器可以保存处理器110刚用过或循环使用的指令或数据。如果处理器110需要再次使用该指令或数据,可从所述存储器中直接调用。避免了重复存取,减少了处理器110的等待时间,因而提高了系统的效率。
在一些实施例中,处理器110可以包括一个或多个接口。接口可以包括集成电路(inter-integrated circuit,I2C)接口,集成电路内置音频(inter-integrated circuitsound,I2S)接口,脉冲编码调制(pulse code modulation,PCM)接口,通用异步收发传输器(universal asynchronous receiver/transmitter,UART)接口,移动产业处理器接口(mobile industry processor interface,MIPI),通用输入输出(general-purposeinput/output,GPIO)接口,用户标识模块(subscriber identity module,SIM)接口,和/或通用串行总线(universal serial bus,USB)接口等。
I2C接口是一种双向同步串行总线,包括一根串行数据线(serial data line,SDA)和一根串行时钟线(derail clock line,SCL)。在一些实施例中,处理器110可以包含多组I2C总线。处理器110可以通过不同的I2C总线接口分别耦合触摸传感器180K,充电器,闪光灯,摄像头193等。例如:处理器110可以通过I2C接口耦合触摸传感器180K,使处理器110与触摸传感器180K通过I2C总线接口通信,实现手机的触摸功能。
I2S接口可以用于音频通信。在一些实施例中,处理器110可以包含多组I2S总线。处理器110可以通过I2S总线与音频模块170耦合,实现处理器110与音频模块170之间的通信。在一些实施例中,音频模块170可以通过I2S接口向通信模块160传递音频信号,实现通过蓝牙耳机接听电话的功能。
PCM接口也可以用于音频通信,将模拟信号抽样,量化和编码。在一些实施例中,音频模块170与通信模块160可以通过PCM总线接口耦合。在一些实施例中,音频模块170也可以通过PCM接口向通信模块160传递音频信号,实现通过蓝牙耳机接听电话的功能。所述I2S接口和所述PCM接口都可以用于音频通信。
UART接口是一种通用串行数据总线,用于异步通信。该总线可以为双向通信总线。它将要传输的数据在串行通信与并行通信之间转换。在一些实施例中,UART接口通常被用于连接处理器110与通信模块160。例如:处理器110通过UART接口与通信模块160中的蓝牙模块通信,实现蓝牙功能。在一些实施例中,音频模块170可以通过UART接口向通信模块160传递音频信号,实现通过蓝牙耳机播放音乐的功能。
MIPI接口可以被用于连接处理器110与屏幕301,摄像头193等外围器件。MIPI接口包括摄像头串行接口(camera serial interface,CSI),显示屏串行接口(display serialinterface,DSI)等。在一些实施例中,处理器110和摄像头193通过CSI接口通信,实现手机的拍摄功能。处理器110和屏幕301通过DSI接口通信,实现手机的显示功能。
GPIO接口可以通过软件配置。GPIO接口可以被配置为控制信号,也可被配置为数据信号。在一些实施例中,GPIO接口可以用于连接处理器110与摄像头193,屏幕301,通信模块160,音频模块170,传感器模块180等。GPIO接口还可以被配置为I2C接口,I2S接口,UART接口,MIPI接口等。
USB接口130是符合USB标准规范的接口,具体可以是Mini USB接口,Micro USB接口,USB Type C接口等。USB接口130可以用于连接充电器为手机充电,也可以用于手机与外围设备之间传输数据。也可以用于连接耳机,通过耳机播放音频。该接口还可以用于连接其他终端设备,例如AR设备等。
可以理解的是,本申请实施例示意的各模块间的接口连接关系,只是示意性说明,并不构成对手机的结构限定。在本申请另一些实施例中,手机也可以采用上述实施例中不同的接口连接方式,或多种接口连接方式的组合。
充电管理模块140用于从充电器接收充电输入。其中,充电器可以是无线充电器,也可以是有线充电器。在一些有线充电的实施例中,充电管理模块140可以通过USB接口130接收有线充电器的充电输入。在一些无线充电的实施例中,充电管理模块140可以通过手机的无线充电线圈接收无线充电输入。充电管理模块140为电池142充电的同时,还可以通过电源管理模块141为终端设备供电。
电源管理模块141用于连接电池142,充电管理模块140与处理器110。电源管理模块141接收电池142和/或充电管理模块140的输入,为处理器110,内部存储器121,外部存储器,屏幕301,摄像头193,和通信模块160等供电。电源管理模块141还可以用于监测电池容量,电池循环次数,电池健康状态(漏电,阻抗)等参数。在其他一些实施例中,电源管理模块141也可以设置于处理器110中。在另一些实施例中,电源管理模块141和充电管理模块140也可以设置于同一个器件中。
手机的无线通信功能可以通过天线1,天线2,射频模块150,通信模块160,调制解调处理器以及基带处理器等实现。
天线1和天线2用于发射和接收电磁波信号。手机中的每个天线可用于覆盖单个或多个通信频带。不同的天线还可以复用,以提高天线的利用率。例如:可以将天线1复用为无线局域网的分集天线。在另外一些实施例中,天线可以和调谐开关结合使用。
射频模块150可以提供应用在手机上的包括2G/3G/4G/5G等无线通信的解决方案。射频模块150可以包括至少一个滤波器,开关,功率放大器,低噪声放大器(low noiseamplifier,LNA)等。射频模块150可以由天线1接收电磁波,并对接收的电磁波进行滤波,放大等处理,传送至调制解调处理器进行解调。射频模块150还可以对经调制解调处理器调制后的信号放大,经天线1转为电磁波辐射出去。在一些实施例中,射频模块150的至少部分功能模块可以被设置于处理器110中。在一些实施例中,射频模块150的至少部分功能模块可以与处理器110的至少部分模块被设置在同一个器件中。
调制解调处理器可以包括调制器和解调器。其中,调制器用于将待发送的低频基带信号调制成中高频信号。解调器用于将接收的电磁波信号解调为低频基带信号。随后解调器将解调得到的低频基带信号传送至基带处理器处理。低频基带信号经基带处理器处理后,被传递给应用处理器。应用处理器通过音频设备(不限于扬声器170A,受话器170B等)输出声音信号,或通过屏幕301显示图像或视频。在一些实施例中,调制解调处理器可以是独立的器件。在另一些实施例中,调制解调处理器可以独立于处理器110,与射频模块150或其他功能模块设置在同一个器件中。
通信模块160可以提供应用在手机上的包括无线局域网(wireless local areanetworks,WLAN)(如无线保真(wireless fidelity,Wi-Fi)网络),蓝牙(Bluetooth,BT),全球导航卫星系统(global navigation satellite system,GNSS),调频(frequencymodulation,FM),近距离无线通信技术(near field communication,NFC),红外技术(infrared,IR)等无线通信的解决方案。通信模块160可以是集成至少一个通信处理模块的一个或多个器件。通信模块160经由天线2接收电磁波,将电磁波信号调频以及滤波处理,将处理后的信号发送到处理器110。通信模块160还可以从处理器110接收待发送的信号,对其进行调频,放大,经天线2转为电磁波辐射出去。
在一些实施例中,手机的天线1和射频模块150耦合,天线2和通信模块160耦合,使得手机可以通过无线通信技术与网络以及其他设备通信。所述无线通信技术可以包括全球移动通讯系统(global system for mobile communications,GSM),通用分组无线服务(general packet radio service,GPRS),码分多址接入(code division multipleaccess,CDMA),宽带码分多址(wideband code division multiple access,WCDMA),时分码分多址(time-division code division multiple access,TD-SCDMA),长期演进(longterm evolution,LTE),BT,GNSS,WLAN,NFC,FM,和/或IR技术等。所述GNSS可以包括全球卫星定位系统(global positioning system,GPS),全球导航卫星系统(global navigationsatellite system,GLONASS),北斗卫星导航系统(beidou navigation satellitesystem,BDS),准天顶卫星系统(quasi-zenith satellite system,QZSS)和/或星基增强系统(satellite based augmentation systems,SBAS)。
手机通过GPU,屏幕301,以及应用处理器等实现显示功能。GPU为图像处理的微处理器,连接屏幕301和应用处理器。GPU用于执行数学和几何计算,用于图形渲染。处理器110可包括一个或多个GPU,其执行程序指令以生成或改变显示信息。在本申请实施例中,屏幕301中可包括显示器和触控器件。显示器用于向用户输出显示内容,触控器件用于接收用户在屏幕301上输入的触摸事件。
在手机中,传感器模块180可以包括陀螺仪,加速度传感器,压力传感器,气压传感器,磁传感器(例如霍尔传感器),距离传感器,接近光传感器,指纹传感器,温度传感器,触摸传感器,热释电红外传感器,环境光传感器或骨传导传感器等一项或多项,本申请实施例对此不做任何限制。
手机可以通过ISP,摄像头193,视频编解码器,GPU,柔性屏幕301以及应用处理器等实现拍摄功能。
ISP用于处理摄像头193反馈的数据。例如,拍照时,打开快门,光线通过镜头被传递到摄像头感光元件上,光信号转换为电信号,摄像头感光元件将所述电信号传递给ISP处理,转化为肉眼可见的图像。ISP还可以对图像的噪点,亮度,肤色进行算法优化。ISP还可以对拍摄场景的曝光,色温等参数优化。在一些实施例中,ISP可以设置在摄像头193中。
摄像头193用于捕获静态图像或视频。物体通过镜头生成光学图像投射到感光元件。感光元件可以是电荷耦合器件(charge coupled device,CCD)或互补金属氧化物半导体(complementary metal-oxide-semiconductor,CMOS)光电晶体管。感光元件把光信号转换成电信号,之后将电信号传递给ISP转换成数字图像信号。ISP将数字图像信号输出到DSP加工处理。DSP将数字图像信号转换成标准的RGB,YUV等格式的图像信号。在一些实施例中,手机可以包括1个或N个摄像头193,N为大于1的正整数。
数字信号处理器用于处理数字信号,除了可以处理数字图像信号,还可以处理其他数字信号。例如,当手机在频点选择时,数字信号处理器用于对频点能量进行傅里叶变换等。
视频编解码器用于对数字视频压缩或解压缩。手机可以支持一种或多种视频编解码器。这样,手机可以播放或录制多种编码格式的视频,例如:动态图像专家组(movingpicture experts group,MPEG)1,MPEG2,MPEG3,MPEG4等。
NPU为神经网络(neural-network,NN)计算处理器,通过借鉴生物神经网络结构,例如借鉴人脑神经元之间传递模式,对输入信息快速处理,还可以不断的自学习。通过NPU可以实现手机的智能认知等应用,例如:图像识别,人脸识别,语音识别,文本理解等。
外部存储器接口120可以用于连接外部存储卡,例如Micro SD卡,实现扩展手机的存储能力。外部存储卡通过外部存储器接口120与处理器110通信,实现数据存储功能。例如将音乐,视频等文件保存在外部存储卡中。
内部存储器121可以用于存储计算机可执行程序代码,所述可执行程序代码包括指令。处理器110通过运行存储在内部存储器121的指令,从而执行手机的各种功能应用以及数据处理。内部存储器121可以包括存储程序区和存储数据区。其中,存储程序区可存储操作系统,至少一个功能所需的应用程序(比如声音播放功能,图像播放功能等)等。存储数据区可存储手机使用过程中所创建的数据(比如音频数据,电话本等)等。此外,内部存储器121可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件,闪存器件,通用闪存存储器(universal flash storage,UFS)等。
手机可以通过音频模块170,扬声器170A,受话器170B,麦克风170C,耳机接口170D,以及应用处理器等实现音频功能。例如网络制式确定,录音等。
音频模块170用于将数字音频信息转换成模拟音频信号输出,也用于将模拟音频输入转换为数字音频信号。音频模块170还可以用于对音频信号编码和解码。在一些实施例中,音频模块170可以设置于处理器110中,或将音频模块170的部分功能模块设置于处理器110中。
扬声器170A,也称“喇叭”,用于将音频电信号转换为声音信号。手机可以通过扬声器170A收听音乐,或收听免提通话。
受话器170B,也称“听筒”,用于将音频电信号转换成声音信号。当手机接听电话或语音信息时,可以通过将受话器170B靠近人耳接听语音。
麦克风170C,也称“话筒”,“传声器”,用于将声音信号转换为电信号。当拨打电话或发送语音信息时,用户可以通过人嘴靠近麦克风170C发声,将声音信号输入到麦克风170C。手机可以设置至少一个麦克风170C。在另一些实施例中,手机可以设置两个麦克风170C,除了采集声音信号,还可以实现降噪功能。在另一些实施例中,手机还可以设置三个,四个或更多麦克风170C,实现采集声音信号,降噪,还可以识别声音来源,实现定向录音功能等。
耳机接口170D用于连接有线耳机。耳机接口170D可以是USB接口130,也可以是3.5mm的开放移动电子设备平台(open mobile terminal platform,OMTP)标准接口,美国蜂窝电信工业协会(cellular telecommunications industry association ofthe USA,CTIA)标准接口。
按键190包括开机键,音量键等。按键190可以是机械按键。也可以是触摸式按键。手机可以接收按键输入,产生与手机的用户设置以及功能控制有关的键信号输入。
马达191可以产生振动提示。马达191可以用于来电振动提示,也可以用于触摸振动反馈。例如,作用于不同应用(例如拍照,音频播放等)的触摸操作,可以对应不同的振动反馈效果。作用于柔性屏幕301不同区域的触摸操作,马达191也可对应不同的振动反馈效果。不同的应用场景(例如:时间提醒,接收信息,闹钟,游戏等)也可以对应不同的振动反馈效果。触摸振动反馈效果还可以支持自定义。
指示器192可以是指示灯,可以用于指示充电状态,电量变化,也可以用于指示消息,未接来电,通知等。
SIM卡接口195用于连接SIM卡。SIM卡可以通过插入SIM卡接口195,或从SIM卡接口195拔出,实现和手机的接触和分离。手机可以支持1个或N个SIM卡接口,N为大于1的正整数。SIM卡接口195可以支持Nano SIM卡,Micro SIM卡,SIM卡等。同一个SIM卡接口195可以同时插入多张卡。所述多张卡的类型可以相同,也可以不同。SIM卡接口195也可以兼容不同类型的SIM卡。SIM卡接口195也可以兼容外部存储卡。手机通过SIM卡和网络交互,实现通话以及数据通信等功能。在一些实施例中,手机采用eSIM,即:嵌入式SIM卡。eSIM卡可以嵌在手机中,不能和手机分离。
另外,在上述部件之上,运行有操作系统。例如苹果公司所开发的iOS操作系统,谷歌公司所开发的安卓Android开源操作系统,微软公司所开发的Windows操作系统等。在该操作系统上可以安装运行应用程序。
为了明确本申请提供的方案,以下结合附图,通过各个实施例,对本申请所提供的方案进行介绍说明。
本申请实施例提供一种图像处理方法,以解决现有技术中,在切换变焦倍率不同的相机之后,切换前拍摄的图像和切换后拍摄的图像的亮度存在较大的差异的问题。其中,应用该图像处理方法的终端设备内可设置第一相机和第二相机,并获取所述第一相机和第二相机拍摄的图像。或者,所述终端设备可与所述第一相机和第二相机相连接,并获取所述第一相机和第二相机的图像。其中,所述第一相机和第二相机的变焦倍率不同,在拍摄过程中,第一相机和第二相机可切换运行,以便通过不同的相机拍摄。
另外,所述终端设备在获取所述第一相机和第二相机拍摄的图像之后,可通过本申请实施例提供的方法,对所述第一相机和第二相机拍摄的图像进行图像处理。
其中,在本申请实施例中,所述第一相机可为切换之前的相机,所述第二相机可为切换之后的相机。也就是说,在通过第一相机拍摄时,如果第一相机的变焦倍率不能满足用户需求,可切换至第二相机,由所述第二相机进行拍摄。
参见图2所示的工作流程示意图,本申请实施例提供的图像处理方法包括以下步骤:
步骤S11、根据参考图像中各个像素的参数,分别调整m帧第一图像中各个像素的参数。
其中,所述参考图像为切换前的所述第一相机拍摄的图像。在一种可行的实现方式中,为了减少切换前后的不同相机拍摄的图像的亮度的差异,所述参考图像可为切换前的第一相机拍摄的最后一帧图像。
另外,所述第一图像为切换后的所述第二相机拍摄的图像。为了减少切换前后的不同相机拍摄的图像的亮度的差异,所述第一图像可包括从所述第一相机切换至第二相机之后,所述第二相机拍摄的第一帧图像及之后拍摄的图像。另外,m为正整数。
在本申请实施例中,所述像素的参数至少包括所述像素的亮度。其中,所述像素的亮度可为YUV颜色空间中的明亮度(即参数Y)。进一步的,为了减少切换前后的不同相机拍摄的图像的差异,所述参数除所述像素的亮度之外,还可包括其他参数。
示例性的,所述参数还可以包括YUV空间中的色度(即参数U和参数V);另外,所述参数还可以包括RGB空间中的红色颜色通道(即参数R)、绿色颜色通道(即参数G)和蓝色颜色通道(即参数B)中的至少一种。
当然,所述参数还可以包括其他颜色空间下的至少一种参数,本申请实施例对此不作限定。
另外,在本申请实施例中,所述参考图像中各个像素的参数为参考参数,所述第一图像中各个像素在调整后的参数为第一参数,所述第一参数的均值与所述参考参数的均值相同。
通过步骤S11的操作,将所述第一图像中各个像素在调整后的参数的均值,调整为与所述参考图像中各个像素的参数的均值相同。这种情况下,所述m帧第一图像与所述参考图像的对比度较为接近,从而减少了参考图像与所述第一图像之间的亮度差异。
进一步的,如果所述参数除了所述像素的亮度以外,还包括其他的参数,通过步骤S11,也能够减少参考图像与第一图像之间其他参数的差异。
步骤S12、根据所述参考图像中各个像素的参数,分别调整n帧第二图像中各个像素的参数,获取调整后的第二图像。
其中,所述第二图像为切换后的所述第二相机拍摄的图像,所述第二图像的拍摄时间晚于所述第一图像的拍摄时间。也就是说,在所述第二相机拍摄所述m帧第一图像之后,才拍摄所述n帧第二图像,n为正整数。
另外,所述第二图像中各个像素在调整后的参数可称为第二参数。
在本申请实施例中,所述n帧第二图像的调整幅度逐帧递减。进一步的,通常情况下,所述n帧第二图像中最早拍摄的图像的调整幅度不大于任意一帧第一图像的调整幅度。
其中,所述调整幅度可通过多种形式实现。在本申请实施例的一种可行的形式中,一帧图像的调整幅度为所述图像在调整后的参数的均值与调整前的参数的均值之差的绝对值;或者,在另一种可行的形式中,一帧图像的调整幅度可为所述图像在调整后的参数的标准差与调整前的参数的标准差之差的绝对值。因此,拍摄时间越晚的第二图像的调整幅度越小,拍摄时间越晚的第二图像在调整后的参数与该第二图像调整前的参数越接近。
也就是说,设定所述n帧第二图像中包括图像一和图像二,图像一的拍摄时间早于所述图像二的拍摄时间,则所述图像一的调整幅度大于所述图像二的调整幅度。
其中,在一个可行的示例中,所述图像一的调整幅度为所述图像一在调整后的各个像素的参数的均值,与所述图像一在调整前的各个像素的参数的均值之差的绝对值;所述图像二的调整幅度为所述图像二在调整后的各个像素的参数的均值,与所述图像二在调整前的各个像素的参数的均值之差的绝对值。
或者,在另一个可行的示例中,所述图像一的调整幅度为所述图像一在调整后的各个像素的参数的标准差,与所述图像一在调整前的各个像素的参数的标准差之差的绝对值;所述图像二的调整幅度为所述图像二在调整后的各个像素的参数的标准差,与所述图像二在调整前的各个像素的参数的标准差之差的绝对值。
设定所述n帧第二图像中拍摄时间最早的图像为图像1,在一种可行的实现方式中,所述图像1的调整幅度可与任意一帧第一图像的调整幅度相同,或者,所述图像1的调整幅度小于任意一帧第一图像的调整幅度。
另外,设定所述n帧第二图像中拍摄时间最晚的图像为图像2,在一种可行的实现方式中,所述图像2的调整幅度可为0,这种情况下,所述图像2在调整后的参数与调整前的参数相同。
在本申请实施例提供的方案中,通过步骤S11,对切换后的第二相机拍摄的m帧第一图像进行处理,并通过步骤S12,对切换后的第二相机拍摄的n帧第二图像进行处理,其中,第二图像的拍摄时间晚于第一图像的拍摄时间。
通过步骤S11的操作,能够使第二相机拍摄的第一图像的第一参数的均值与所述参考参数的均值相同,从而能够避免所述第一图像与所述参考图像之间的亮度差异过大。
另外,通过步骤S12的操作,能够调整所述n帧第二图像中各个像素的参数,获取调整后的第二图像,其中,所述n帧第二图像的调整幅度逐帧递减。
图像的调整幅度,能够体现该图像在调整后与调整前的差异。通常情况下,一幅图像的调整幅度越小,则该图像调整后的参数与调整前的参数的差异越小,即调整后的图像越接近调整前的图像。
由于通过步骤S12的操作,n帧第二图像的调整幅度逐帧递减,因此,拍摄时间越晚的第二图像在调整后的参数越接近该第二图像的原始的参数。相应的,所述n帧第二图像中拍摄时间较早的图像的参数,较接近所述参考图像的参数,而随着拍摄时间的推移,所述n帧第二图像中拍摄时间越晚的图像的参数,越接近第二相机拍摄的原始的第二图像的参数。其中,如果所述n帧第二图像中最晚拍摄的图像的调整幅度为0,则所述n帧第二图像中最晚拍摄的图像在调整后的参数与调整前的参数相同,该图像调整前后的参数保持不变。
这种情况下,所述第二相机在拍摄第二图像之后还拍摄其他图像,调整之后的第二图像在第一图像和所述其他图像之间可起到过渡作用,便于用户适应所述其他图像的参数,避免所述其他图像的参数与调整之后的第二图像之间的参数差异过大。
在本申请实施例中,所述参数包括亮度,因此,通过本申请实施例提供的方案,可减少第一图像、第二图像分别与参考图像之间的亮度差异,并且调整之后的第二图像的亮度在第一图像和其他图像的亮度之间起到过渡作用,便于用户适应所述第二相机拍摄的所述其他图像的亮度。
也就是说,本申请实施例提供的方案,能够减少解决现有技术中,在切换变焦倍率不同的相机之后,切换前拍摄的图像和切换后拍摄的图像的亮度存在较大的差异的问题。
进一步的,本申请实施例提供的方案对各种环境下拍摄的图像均可进行处理,即可应用于各种环境,因此,与现有技术第一种方案(即在指定环境下进行标定的方案)相比,本申请实施例提供的方案所适用的环境更为广泛。
另外,本申请实施例提供的方案无需同时运行第一相机和第二相机,只需在切换到第二相机之后再启动第二相机,并对第二相机拍摄的图像进行处理即可。因此,本申请实施例提供的方案与现有技术第二种方案(即同时运行切换前的相机和切换后的相机的方案)相比,能够减少终端设备的整体功耗,减少终端设备出现的发热现象,提高终端设备的性能。
进一步的,在本申请实施例中,所述像素的参数除了亮度以外,还可包括其他参数,例如,所述参数还可包括色度参数、红色颜色通道参数、绿色颜色通道参数和蓝色颜色通道参数中的至少一种。这种情况下,通过在本申请实施例的方案,还可减少第一图像、第二图像分别与参考图像之间的其他参数的差异,并且,调整后的第二图像的其他参数在第一图像和其他图像的其他参数之间也能起到过渡作用,所述其他图像为所述第二相机在拍摄所述第二图像之后拍摄的图像。
另外,在本申请实施例中,调整后的m帧第一图像的参数的均值,与所述参考图像的参数的均值相同,以避免第二相机在切换之后拍摄的图像的参数与所述参考图像的参数差异过大,因此对所述第一图像的调整幅度通常较大。而第二图像起到在第一图像和第二图像之后的其他图像的过渡作用,以便用户适应所述第二相机之后再拍摄的其他图像的参数。这种情况下,m通常小于n。示例性的,m可为2~9之间的正整数,n可为10~20之间的正整数。
当然,m和n还可以其他数值,本申请实施例对此不作限定。
在本申请实施例中,通过步骤S11,提供根据参考图像中各个像素的参数,分别调整m帧第一图像中各个像素的参数的操作,该操作可通过以下步骤实现:
首先,通过以下公式,对第一目标图像中各个像素的参数进行标准化处理:
其中,所述第一目标图像为所述m帧第一图像中的任意一帧图像,originalval为所述第一目标图像中第一像素的参数的原始值,averagecur为在标准化处理之前,所述第一目标图像中各个像素的参数的平均值,stdevcur为在标准化处理之前,所述第一目标图像中各个像素的参数的标准差,newval为所述第一目标图像中的第一像素在标准化处理后的参数。所述第一像素可为所述第一目标图像中的任意一个像素,这种情况下,可依次将所述第一目标图像中的各个像素作为第一像素,并可根据上述公式,确定所述第一目标图像中各个像素在标准化处理后的参数。
在本申请实施例提供的方案中,可对m帧第一图像进行逐帧处理。上述公式中,以对所述第一图像中的第一目标图像进行标准化处理为例。
通过公式(1),可确定第一目标图像中的各个像素在进行标准化处理之后的参数,相应的,分别选取第一图像中的各帧图像作为第一目标图像,通过公式(1),即可确定各帧第一图像的各个像素在标准化处理之后的参数。
然后,通过以下公式,对标准化处理后的所述第一目标图像进行反标准化处理,反标准化处理后的所述第一目标图像为所述调整后的第一图像:
processedval=newval*stdevref+averageref 公式(2);
其中,newval为所述第一目标图像中的第一像素在标准化处理后的参数,stdevref为所述参考图像中各个像素的参数的标准差,averageref为所述参考图像中各个像素的参数的平均值,processedval为所述调整后的第一目标图像中的第一像素的参数。
通过上述公式,可对所述第一目标图像中各个像素进行反标准化处理,获取反标准化的各个像素的参数。并且,分别选取第一图像中的各帧图像作为第一目标图像,通过公式(2),即可确定各帧第一图像的各个像素在反标准化处理之后的参数。其中,经过反标准化处理的各帧第一图像即为调整后的第一图像。
也就是说,通过公式(1)和(2),可确定所述调整后的第一图像中的各个像素的参数,继而确定所述调整后的第一图像。
通过公式(1)和(2)所确定的调整后的第一图像的参数的均值,与所述参考图像的参数的均值相同,并且,通过这一方案,所述调整后的第一图像的参数的方差,与所述参考图像的参数的方差相同。这种情况下,所述调整后的第一图像的对比度与所述参考图像的对比度较为接近,因此,所述调整后的第一图像与所述参考图像之间的亮度差异较小。
进一步的,如果所述参数还包括其他参数,通过上述步骤,还能够减少调整后的第一图像与参考图像之间的其他参数的差异。
示例性的,所述参数除了亮度以外,还包括色度这一参数,这种情况下,通过上述步骤,不仅能够减少调整后的第一图像与参考图像之间的其他参数的差异,还能够减少调整后的第一图像与参考图像之间的色度的差异。
在步骤S12中,公开根据所述参考图像中各个像素的参数,分别调整n帧第二图像中各个像素的参数的操作,该操作可通过以下步骤实现:
第一步,根据所述参考参数以及参数阈值,分别调整所述n帧第二图像中各个像素的参数,根据所述参考参数以及参数阈值调整后的所述第二图像为第一待处理图像。
通过这一步骤,能够避免所述第一待处理图像中各个像素的参数过大或过小。
第二步,根据所述n帧第二图像分别对应的平滑系数,分别调整所述第一待处理图像中各个像素的参数,根据所述平滑系数调整后的所述第一待处理图像为所述调整后的第二图像。
通过这一步骤,能够根据第二图像对应的平滑系数,分别调整所述第一待处理图像中各个像素的参数,从而使所述n帧第二图像的调整幅度逐帧递减,使所述第二图像起到过渡的作用。
在一种可行的实现方式中,参见图3所示的工作流程示意图,所述根据所述参考参数以及参数阈值,分别调整所述n帧第二图像中各个像素的参数,包括以下步骤:
步骤S21、通过分别对所述参考图像和第二目标图像进行下采样,获取所述参考图像对应的第一小图,以及获取所述第二目标图像对应的第二小图。
其中,所述第二目标图像为所述n帧第二图像中的任意一帧图像,所述第一小图和所述第二小图的尺寸相同。示例性的,所述第一小图的尺寸为H*W,则所述第二小图的尺寸也为H*W。
下采样(即subsampled)也可称为降采样,是一种生成对应图像的缩略图的技术。在本申请实施例中,所采用的下采样方法可为均值下采样方法。
本申请实施例提供一个均值下采样的示例,在该示例中,图4(a)为未经过均值下采样的图像,该图像的分辨率为8*8,图4(b)为对图4(a)的图像进行均值下采样后所获取的图像,该图像的分辨率为2*2。其中,图4(b)中第一行第一列的像素的参数,为图4(a)的图像中第一行至第四行,以及第一列至第四列的区域中包含的像素的参数均值;图4(b)中第一行第二列的像素的参数,为图4(a)的图像中第一行至第四行,以及第五列至第八列的区域中包含的像素的参数均值;图4(b)中第二行第一列的像素的参数,为图4(a)的图像中第五行至第八行,以及第一列至第四列的区域中包含的像素的参数均值;图4(b)中第二行第二列的像素的参数,为图4(a)的图像中第五行至第八行,以及第五列至第八列的区域中包含的像素的参数均值。
当然,在本申请实施例提供的方案中,还可采用其他形式的下采样方法,本申请实施例对此不作限定。
步骤S22、确定同一坐标分别对应的所述第一小图的参数与所述第二小图的参数之间的第一参数比值。
其中,所述第一参数比值可通过以下公式表示:
公式(3)中,refds(x0,y0)为所述第一小图中,坐标为(x0,y0)的像素的参数;curds(x0,y0)为所述第一小图中,坐标为(x0,y0)的像素的参数;ratio(x0,y0)为(x0,y0)这一坐标分别对应的所述第一小图的参数与所述第二小图的参数之间的第一参数比值。
步骤S23、根据第一阈值,分别调整各个坐标对应的所述第一参数比值,调整后的所述第一参数比值不大于所述第一阈值中的第一阈值上限,或者,调整后的所述第一参数比值不小于所述第一阈值中的第一阈值下限,所述参数阈值包括所述第一阈值。
在本申请实施例中,所述参数阈值包括所述第一阈值,所述第一阈值可包括第一阈值上限或第一阈值下限,或同时包括所述第一阈值上限和第一阈值下限。
通过第一阈值,可使调整后的所述第一参数比值不大于所述第一阈值中的第一阈值上限;或者,调整后的所述第一参数比值不小于所述第一阈值中的第一阈值下限;或者,同时满足调整后的所述第一参数比值不大于所述第一阈值中的第一阈值上限,以及调整后的所述第一参数比值不小于所述第一阈值中的第一阈值下限的条件。
步骤S24、根据调整后的所述第一参数比值分别对应的坐标,对调整后的所述第一参数比值进行双线性插值处理,处理之后的各个第一参数比值分别对应所述第二目标图像中的像素。
其中,处理之后的各个第一参数比值分别对应所述第二目标图像中的像素,指的是处理之后的各个第一参数比值与所述第二目标图像中的像素一一对应,即所述第二目标图像中每一个像素对应处理之后的一个第一参数比值。
步骤S25、将所述处理之后的各个第一参数比值分别与对应的所述第二目标图像的参数进行点乘,点乘结果为调整后的第二目标图像中各个像素的参数。
在本申请实施例中,可设定点乘结果为第一目标调整图像中各个像素的参数,所述第一目标调整图像为根据所述参考参数以及参数阈值调整后的所述第二目标图像。
示例性的,如果处理之后的某一个第一参数比值与第二目标图像中的像素(x1,y1)相对应,在根据所述参考参数以及参数阈值调整后的第二目标图像被称为第一目标调整图像,则该第一参数比值与第二目标图像中的像素(x1,y1)的参数的乘积,为所述第一目标调整图像中的像素(x1,y1)的参数。
通过步骤S21至步骤S25的操作,可获取第二目标图像在根据所述参考参数以及参数阈值调整之后的图像。这种情况下,可依次选取所述n帧第二图像中的图像作为第二目标图像,并根据上述步骤,确定各帧第一待处理图像。
通过上述实施例,能够根据第一阈值,对第二图像进行调整,避免第二图像中的参数过大或过小。并且,这一实施例中,首先通过下采样技术,获取第一小图和第二小图,然后再对第一小图和第二小图进行处理,因此能够减少处理的数据量,提高处理效率。
在上述步骤中,公开根据第一阈值,分别调整各个坐标对应的所述第一参数比值的操作,该操作可包括以下步骤:
第一坐标对应的第一参数比值大于所述第一阈值上限,将所述第一坐标对应的第一参数比值调整为所述第一阈值上限;
或者,第二坐标对应的第一参数比值小于所述第一阈值下限,将所述第二坐标对应的第一参数比值调整为所述第一阈值下限。
也就是说,如果某一个坐标对应的第一参数比值大于第一阈值中的第一阈值上限,则将该坐标对应的第一参数比值调整为所述第一阈值上限。另外,如果某一个坐标对应的第一参数比值小于第一阈值中的第一阈值下限,则将该坐标对应的第一参数比值调整为所述第一阈值下限。
另外,在这一实施例中,如果某一个坐标对应的第一参数比值在第一阈值上限和第一阈值下限之间,则可保持该坐标对应的第一参数比值不变。
在另一种可行的实现方式中,参见图5所示的工作流程示意图,所述根据所述参考参数以及参数阈值,分别调整所述n帧第二图像中各个像素的参数,包括以下步骤:
步骤S31、确定同一坐标分别对应的所述参考图像的参数与第三目标图像的参数之间的第二参数比值。
其中,所述第三目标图像为所述n帧第二图像中的任意一帧图像。
步骤S32、根据第二阈值,分别调整各个坐标对应的所述第二参数比值,调整后的所述第二参数比值不大于所述第二阈值中的第二阈值上限,或者,调整后的所述第二参数比值不小于所述第二阈值中的第二阈值下限,所述参数阈值包括所述第二阈值。
在本申请实施例中,所述参数阈值包括所述第二阈值,所述第二阈值包括第二阈值上限或第二阈值下限,或者,所述第二阈值同时包括所述第二阈值上限和第二阈值下限。
其中,如果某一个第二参数比值大于所述第二阈值上限,可将该第二参数比值调整为所述第二阈值上限,或者如果某一个第二参数比值小于所述第二阈值上限,可将该第二参数比值调整为所述第二阈值下限。
步骤S33、将调整后的各个坐标对应的第二参数比值分别与对应的第三目标图像的参数进行点乘,点乘结果为调整后的第三目标图像中各个像素的参数。
通过本申请实施例提供的方案,能够根据第二阈值,对第二图像进行调整,避免第二图像中的参数过大或过小。并且,这一实施例中,未对第二图像进行下采样处理,能够提高第二图像处理的准确度。
在本申请中,公开根据所述第二图像对应的平滑系数,分别调整所述第一待处理图像中各个像素的参数的操作。参见图6所示的工作流程示意图,该操作可通过以下步骤实现:
步骤S41、根据所述第一图像的帧数和所述第二图像的帧数,确定第四目标图像对应的平滑系数,所述第四目标图像为所述第一待处理图像中的任意一帧图像。
具体的,在本申请实施例中,根据第一图像的帧数和第二图像的帧数,以及第四目标图像的序号,确定所述第四目标图像对应的平滑系数。
在本申请实施例提供的一种可行的实现方案中,通过以下公式确定所述第四目标图像对应的平滑系数:
其中,dampRatio为所述第四目标图像对应的平滑系数,stableFrameCnt为所述第一图像的帧数,transitFrameCnt为所述第二图像的帧数,curFrameCnt为所述第四目标图像的序号,所述第一待处理图像的序号根据拍摄时间依次递增,所述第一待处理图像的序号均为正整数。
通常情况下,可根据各帧第一待处理图像的拍摄时间,分别确定各帧第一待处理图像的序号。其中,拍摄时间最早的第一待处理图像的序号为m+1,拍摄时间最晚的第一待处理图像的序号为m+n。也就是说,在公式(4)中,根据拍摄时间从早到晚排序,n帧第一待处理图像的序号依次为m+1,m+2,……,m+n。
另外,在公式(4)中,stableFrameCnt为所述第一图像的帧数,在本申请实施例中,该数值可为m。transitFrameCnt为所述第二图像的帧数,在本申请实施例中,该数值可为n。
根据上述公式(4)可知,由于各帧第一待处理图像的序号不同,而每一帧第一待处理图像的平滑系数与该帧第一待处理图像的序号相关,因此,通过公式(4),可分别确定各帧第一待处理图像分别对应的平滑系数。
步骤S42、根据所述第四目标图像对应的平滑系数,确定所述第四目标图像中各个像素的参数在调整后的标准差。
在本申请实施例提供的一种可行的实现方案中,通过以下公式,确定所述第四目标图像中各个像素的参数在调整后的标准差:
dampStdevref=stdevref*dampRatio+stdevcur*(1-dampRatio) 公式(5);
其中,dampStdevref为所述第四目标图像中各个像素的参数在调整后的标准差,stdevref为所述参考图像中各个像素的参数的标准差,stdevcur为所述第四目标图像中各个像素的参数在调整前的标准差。
这种情况下,通过公式(5),以及根据所述参考图像中各个像素的参数的标准差,以及第四目标图像中各个像素的参数在调整前的标准差,可确定所述第四目标图像中各个像素的参数在调整后的标准差。
当然,还可通过其他方式确定所述第四目标图像中各个像素的参数在调整后的标准差,本申请实施例对此不作限定。
步骤S43、根据所述第四目标图像的参数平滑系数和所述在调整后的标准差,确定所述第四目标图像中各个像素的参数在调整后的平均值。
在本申请实施例提供的一种可行的实现方案中,通过以下公式,确定所述第四目标图像中各个像素的参数在调整后的平均值:
dampAverageref=averageref*dampRatio+averagecur*(1-dampRatio) 公式(6);
其中,dampAverageref为所述第四目标图像中各个像素的参数在调整后的平均值,averageref为所述参考图像中各个像素的参数的平均值,averagecur为所述第四目标图像中各个像素的参数在调整前的平均值。
这种情况下,通过公式(6),以及根据所述参考图像中各个像素的参数的平均值,以及第四目标图像中各个像素的参数在调整前的平均值,可确定所述第四目标图像中各个像素的参数在调整后的平均值。
当然,还可通过其他方式确定所述第四目标图像中各个像素的参数在调整后的平均值,本申请实施例对此不作限定。
步骤S44、根据所述第四目标图像的参数的平滑系数和所述在调整后的平均值,确定所述第四目标图像中同一像素在调整后的参数与在调整前的参数的比值。
在本申请实施例提供的一种可行的实现方案中,根据以下公式,确定所述第四目标图像中同一像素在调整后的参数与在调整前的参数的比值:
dampRatio(x2,y2)=Ratio(x2,y2)*dampRatio+1*(1-dampRatio) 公式(7);
其中,dampRatio(x2,y2)为所述第四目标图像中,坐标为(x2,y2)的像素在调整后的参数与在调整前的参数的比值,Ratio(x2,y2)为所述参考图像中坐标为(x2,y2)的像素的参数,与所述第四目标图像中坐标为(x2,y2)的像素在调整前的参数之间的比值。
这种情况下,通过公式(7),以及根据参考图像中各个像素的参数,以及第四目标图像中各个像素在调整前的参数,可确定所述第四目标图像中同一像素在调整后的参数与在调整前的参数的比值。
当然,还可通过其他方式确定该比值,本申请实施例对此不作限定。
步骤S45、根据所述比值,确定所述第四目标图像中各个像素在调整后的参数。
在本申请实施例提供的一种可行的实现方案中,通过以下公式,确定所述第四目标图像中各个像素在调整后的参数:
Param(x2,y2)=dampRatio(x2,y2)*param(x2,y2) 公式(8);
其中,Param(x2,y2)为所述第四目标图像中坐标为(x2,y2)的像素在调整后的参数,param(x2,y2)为所述第四目标图像中坐标为(x2,y2)的像素在调整前的参数。
这种情况下,通过公式(8),以及根据第四目标图像中各个像素在调整前的参数,可确定所述第四目标图像中各个像素在调整后的参数。
当然,还可通过其他方式确定所述第四目标图像中各个像素在调整后的参数,本申请实施例对此不作限定。
通过上述步骤,能够获取调整后的n帧第二图像,并且,由于所述n帧第二图像根据平滑系数进行调整,而每一帧第二图像对应的平滑系数与该第二图像的序号相关,因此,调整后的n帧第二图像的调整幅度逐帧递减,调整后的n帧第二图像起到过渡作用。
下述为本申请的装置实施例,可以用于执行本申请的方法实施例。对于本申请装置实施例中未披露的细节,请参照本申请的方法实施例。
作为对上述各实施例的实现,本申请实施例公开一种图像处理装置。参见图7所示的结构示意图,所述图像处理装置包括:处理器1110和收发接口1120。
其中,所述收发接口1110用于获取参考图像、m帧第一图像和n帧第二图像,所述参考图像为切换前的所述第一相机拍摄的图像,所述第一图像为切换后的所述第二相机拍摄的图像,所述第二图像为切换后的所述第二相机拍摄的图像,所述第二图像的拍摄时间晚于所述第一图像的拍摄时间。
另外,所述处理器1120用于根据所述参考图像中各个像素的参数,分别调整所述m帧第一图像中各个像素的参数,所述参数至少包括所述像素的亮度,所述参考图像中各个像素的参数为参考参数,所述第一图像中各个像素在调整后的参数为第一参数,所述第一参数的均值与所述参考参数的均值相同;
所述处理器1120还用于,根据所述参考图像中各个像素的参数,分别调整所述n帧第二图像中各个像素的参数,获取调整后的第二图像,所述n帧第二图像的调整幅度逐帧递减。
通过本申请实施例提供的方案,能够使第二相机拍摄的第一图像的第一参数的均值与所述参考参数的均值相同,从而能够避免所述第一图像与所述参考图像之间的亮度差异过大。
另外,通过本申请实施例提供的方案,能够调整所述n帧第二图像中各个像素的参数,获取调整后的第二图像,其中,所述n帧第二图像的调整幅度逐帧递减。
图像的调整幅度,能够体现该图像在调整后与调整前的差异。通常情况下,一幅图像的调整幅度越小,则该图像调整后的参数与调整前的参数的差异越小,即调整后的图像越接近调整前的图像。
由于在本申请实施例提供的方案中,n帧第二图像的调整幅度逐帧递减,因此,拍摄时间越晚的第二图像在调整后的参数越接近该第二图像的原始的参数。相应的,所述n帧第二图像中拍摄时间较早的图像的参数,较接近所述参考图像的参数,而随着拍摄时间的推移,所述n帧第二图像中拍摄时间越晚的图像的参数,越接近第二相机拍摄的原始的第二图像的参数。其中,如果所述n帧第二图像中最晚拍摄的图像的调整幅度为0,则所述n帧第二图像中最晚拍摄的图像在调整后的参数与调整前的参数相同,该图像调整前后的参数保持不变。
这种情况下,所述第二相机在拍摄第二图像之后还拍摄其他图像,调整之后的第二图像在第一图像和所述其他图像之间可起到过渡作用,便于用户适应所述其他图像的参数,避免所述其他图像的参数与调整之后的第二图像之间的参数差异过大。
在本申请实施例中,所述参数包括亮度,因此,通过本申请实施例提供的方案,可减少第一图像、第二图像分别与参考图像之间的亮度差异,并且调整之后的第二图像的亮度在第一图像和其他图像的亮度之间起到过渡作用,便于用户适应所述第二相机拍摄的所述其他图像的亮度。
也就是说,本申请实施例提供的方案,能够减少解决现有技术中,在切换变焦倍率不同的相机之后,切换前拍摄的图像和切换后拍摄的图像的亮度存在较大的差异的问题。
进一步的,本申请实施例提供的方案对各种环境下拍摄的图像均可进行处理,即可应用于各种环境,因此,与现有技术第一种方案(即在指定环境下进行标定的方案)相比,本申请实施例提供的方案所适用的环境更为广泛。
另外,本申请实施例提供的方案无需同时运行第一相机和第二相机,只需在切换到第二相机之后再启动第二相机,并对第二相机拍摄的图像进行处理即可。因此,本申请实施例提供的方案与现有技术第二种方案(即同时运行切换前的相机和切换后的相机的方案)相比,能够减少终端设备的整体功耗,减少终端设备出现的发热现象,提高终端设备的性能。
进一步的,在本申请实施例中,所述像素的参数除了亮度以外,还可包括其他参数,例如,所述参数还可包括色度参数、红色颜色通道参数、绿色颜色通道参数和蓝色颜色通道参数中的至少一种。这种情况下,通过在本申请实施例的方案,还可减少第一图像、第二图像分别与参考图像之间的其他参数的差异,并且,调整后的第二图像的其他参数在第一图像和其他图像的其他参数之间也能起到过渡作用,所述其他图像为所述第二相机在拍摄所述第二图像之后拍摄的图像。
进一步的,在本申请实施例提供的装置中,所述处理器具体用于,通过以下公式,对第一目标图像中各个像素的参数进行标准化处理:
其中,所述第一目标图像为所述m帧第一图像中的任意一帧图像,originalval为所述第一目标图像中第一像素的参数的原始值,averagecur为在标准化处理之前,所述第一目标图像中各个像素的参数的平均值,stdevcur为在标准化处理之前,所述第一目标图像中各个像素的参数的标准差,newval为所述第一目标图像中的第一像素在标准化处理后的参数;
所述处理器具体用于,通过以下公式,对标准化处理后的所述第一目标图像进行反标准化处理,反标准化处理后的所述第一目标图像为所述调整后的第一图像:
processedval=newval*stdevref+averageref;
其中,newval为所述第一目标图像中的第一像素在标准化处理后的参数,stdevref为所述参考图像中各个像素的参数的标准差,averageref为所述参考图像中各个像素的参数的平均值,processedval为所述调整后的第一目标图像中的第一像素的参数。
进一步的,在本申请实施例提供的装置中,所述处理器具体用于,根据所述参考参数以及参数阈值,分别调整所述n帧第二图像中各个像素的参数,根据所述参考参数以及参数阈值调整后的所述第二图像为第一待处理图像;并且,根据所述n帧第二图像分别对应的平滑系数,分别调整所述第一待处理图像中各个像素的参数,根据所述平滑系数调整后的所述第一待处理图像为所述调整后的第二图像。
在一种可行的设计中,所述处理器具体用于:
通过分别对所述参考图像和第二目标图像进行下采样,获取所述参考图像对应的第一小图,以及获取所述第二目标图像对应的第二小图,所述第二目标图像为所述n帧第二图像中的任意一帧图像,所述第一小图和所述第二小图的尺寸相同;
确定同一坐标分别对应的所述第一小图的参数与所述第二小图的参数之间的第一参数比值;
根据第一阈值,分别调整各个坐标对应的所述第一参数比值,调整后的所述第一参数比值不大于所述第一阈值中的第一阈值上限,或者,调整后的所述第一参数比值不小于所述第一阈值中的第一阈值下限,所述参数阈值包括所述第一阈值;
根据调整后的所述第一参数比值分别对应的坐标,对调整后的所述第一参数比值进行双线性插值处理,处理之后的各个第一参数比值分别对应所述第二目标图像中的像素;
将所述处理之后的各个第一参数比值分别与对应的所述第二目标图像的参数进行点乘,点乘结果为调整后的第二目标图像中各个像素的参数。
其中,所述处理器具体用于:
第一坐标对应的第一参数比值大于所述第一阈值上限,将所述第一坐标对应的第一参数比值调整为所述第一阈值上限;
或者,第二坐标对应的第一参数比值小于所述第一阈值下限,将所述第二坐标对应的第一参数比值调整为所述第一阈值下限。
在一种可行的设计中,所述处理器具体用于:
确定同一坐标分别对应的所述参考图像的参数与第三目标图像的参数之间的第二参数比值,所述第三目标图像为所述n帧第二图像中的任意一帧图像;
根据第二阈值,分别调整各个坐标对应的所述第二参数比值,调整后的所述第二参数比值不大于所述第二阈值中的第二阈值上限,或者,调整后的所述第二参数比值不小于所述第二阈值中的第二阈值下限,所述参数阈值包括所述第二阈值;
将调整后的各个坐标对应的第二参数比值分别与对应的第三目标图像的参数进行点乘,点乘结果为调整后的第三目标图像中各个像素的参数。
在一种可行的设计中,所述处理器具体用于:
根据所述第一图像的帧数和所述第二图像的帧数,确定第四目标图像对应的平滑系数,所述第四目标图像为所述第一待处理图像中的任意一帧图像;
根据所述第四目标图像对应的平滑系数,确定所述第四目标图像中各个像素的参数在调整后的标准差;
根据所述第四目标图像的参数平滑系数和所述在调整后的标准差,确定所述第四目标图像中各个像素的参数在调整后的平均值;
根据所述第四目标图像的参数的平滑系数和所述在调整后的平均值,确定所述第四目标图像中同一像素在调整后的参数与在调整前的参数的比值;
根据所述比值,确定所述第四目标图像中各个像素在调整后的参数。
在一种可行的设计中,所述处理器具体用于,通过以下公式确定所述第四目标图像对应的平滑系数:
其中,dampRatio为所述第四目标图像对应的平滑系数,stableFrameCnt为所述第一图像的帧数,transitFrameCnt为所述第二图像的帧数,curFrameCnt为所述第四目标图像的序号,所述第一待处理图像的序号根据拍摄时间依次递增,所述第一待处理图像的序号均为正整数;
或者,所述处理器具体用于,通过以下公式,确定所述第四目标图像中各个像素的参数在调整后的标准差:
dampStdevref=stdevref*dampRatio+stdevcur*(1-dampRatio);
其中,dampStdevref为所述第四目标图像中各个像素的参数在调整后的标准差,stdevref为所述参考图像中各个像素的参数的标准差,stdevcur为所述第四目标图像中各个像素的参数在调整前的标准差;
或者,所述处理器具体用于,通过以下公式,确定所述第四目标图像中各个像素的参数在调整后的平均值:
dampAverageref=averageref*dampRatio+averagecur*(1-dampRatio);
其中,dampAverageref为所述第四目标图像中各个像素的参数在调整后的平均值,averageref为所述参考图像中各个像素的参数的平均值,averagecur为所述第四目标图像中各个像素的参数在调整前的平均值;
或者,所述处理器具体用于,根据以下公式,确定所述第四目标图像中同一像素在调整后的参数与在调整前的参数的比值:
dampRatio(x2,y2)=Ratio(x2,y2)*dampRatio+1*(1-dampRatio);
其中,dampRatio(x2,y2)为所述第四目标图像中,坐标为(x2,y2)的像素在调整后的参数与在调整前的参数的比值,Ratio(x2,y2)为所述参考图像中坐标为(x2,y2)的像素的参数,与所述第四目标图像中坐标为(x2,y2)的像素在调整前的参数之间的比值;
或者,所述处理器具体用于,根据以下公式,确定所述第四目标图像中各个像素在调整后的参数:
Param(x2,y2)=dampRatio(x2,y2)*param(x2,y2);
其中,Param(x2,y2)为所述第四目标图像中坐标为(x2,y2)的像素在调整后的参数,param(x2,y2)为所述第四目标图像中坐标为(x2,y2)的像素在调整前的参数。
相应的,与上述的方法相对应的,本申请实施例还公开一种终端装置。参见图8所示的结构示意图,所述终端装置包括:
至少一个处理器1101和存储器,
其中,所述存储器,用于存储程序指令;
所述处理器,用于调用并执行所述存储器中存储的程序指令,以使所述终端装置执行图2、图3、图5和图6对应的实施例中的全部或部分步骤。
进一步的,该终端装置还可以包括:收发器1102和总线1103,所述存储器包括随机存取存储器1104和只读存储器1105。
其中,处理器通过总线分别耦接收发器、随机存取存储器以及只读存储器。其中,当需要运行该终端装置时,通过固化在只读存储器中的基本输入输出系统或者嵌入式系统中的bootloader引导系统进行启动,引导该终端装置进入正常运行状态。在该终端装置进入正常运行状态后,在随机存取存储器中运行应用程序和操作系统,从而使所述终端装置执行图2、图3、图5和图6对应的实施例中的全部或部分步骤。
本发明实施例的装置可对应于上述图2、图3、图5和图6所对应的实施例中的图像处理装置,并且,该装置中的处理器等可以实现图2、图3、图5和图6所对应的实施例中的图像处理装置所具有的功能或者所实施的各种步骤和方法,为了简洁,在此不再赘述。
在本申请实施例的方案中,所述终端装置可表现为多种形式。示例性的,所述终端装置可包括手机,这种情况下,所述手机包括多个摄像头,多个摄像头共同构成多相机模组,并且,不同的摄像头具备不同的变焦倍率。在用户应用手机拍摄时,该手机可根据用户所需的变焦倍率,切换不同的摄像头,从而可通过不同的摄像头进行拍摄,满足用户的拍摄需求。并且,所述手机可根据本申请实施例提供的方案,对切换后的摄像头拍摄的图像进行图像处理,以减少在摄像头切换前后拍摄的图像的亮度的差异。
另外,所述终端装置还可为其他形式,本申请实施例对此不作限定。
具体实现中,本申请实施例还提供一种计算机可读存储介质,该计算机可读存储介质包括指令。其中,设置在任意设备中计算机可读介质其在计算机上运行时,可实施包括图2、图3、图5和图6对应的实施例中的全部或部分步骤。所述计算机可读介质的存储介质可为磁碟、光盘、只读存储记忆体(英文:read-only memory,简称:ROM)或随机存储记忆体(英文:random access memory,简称:RAM)等。
另外,本申请另一实施例还公开一种包含指令的计算机程序产品,当所述计算机程序产品在电子设备上运行时,使得所述电子设备可实施包括图2、图3、图5和图6对应的实施例中的全部或部分步骤。
本申请实施例中所描述的各种说明性的逻辑单元和电路可以通过通用处理器,数字信息处理器,专用集成电路(ASIC),现场可编程门阵列(FPGA)或其它可编程逻辑装置,离散门或晶体管逻辑,离散硬件部件,或上述任何组合的设计来实现或操作所描述的功能。通用处理器可以为微处理器,可选地,该通用处理器也可以为任何传统的处理器、控制器、微控制器或状态机。处理器也可以通过计算装置的组合来实现,例如数字信息处理器和微处理器,多个微处理器,一个或多个微处理器联合一个数字信息处理器核,或任何其它类似的配置来实现。
本申请实施例中所描述的方法或算法的步骤可以直接嵌入硬件、处理器执行的软件单元、或者这两者的结合。软件单元可以存储于RAM存储器、闪存、ROM存储器、EPROM存储器、EEPROM存储器、寄存器、硬盘、可移动磁盘、CD-ROM或本领域中其它任意形式的存储媒介中。示例性地,存储媒介可以与处理器连接,以使得处理器可以从存储媒介中读取信息,并可以向存储媒介存写信息。可选地,存储媒介还可以集成到处理器中。处理器和存储媒介可以设置于ASIC中,ASIC可以设置于UE中。可选地,处理器和存储媒介也可以设置于UE中的不同的部件中。
应理解,在本申请的各种实施例中,各过程的序号的大小并不意味着执行顺序的先后,各过程的执行顺序应以其功能和内在逻辑确定,而不应对本申请实施例的实施过程构成任何限定。
在上述实施例中,可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时,可以全部或部分地以计算机程序产品的形式实现。所述计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行所述计算机程序指令时,全部或部分地产生按照本申请实施例所述的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。所述计算机指令可以存储在计算机可读存储介质中,或者从一个计算机可读存储介质向另一个计算机可读存储介质传输,例如,所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(DSL))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质,(例如,软盘、硬盘、磁带)、光介质(例如,DVD)、或者半导体介质(例如固态硬盘Solid State Disk(SSD))等。
本说明书的各个实施例之间相同相似的部分互相参见即可,每个实施例重点介绍的都是与其他实施例不同之处。尤其,对于装置和系统实施例而言,由于其基本相似于方法实施例,所以描述的比较简单,相关之处参见方法实施例部分的说明即可。
本领域的技术人员可以清楚地了解到本发明实施例中的技术可借助软件加必需的通用硬件平台的方式来实现。基于这样的理解,本发明实施例中的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品可以存储在存储介质中,如ROM/RAM、磁碟、光盘等,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例或者实施例的某些部分所述的方法。
本说明书中各个实施例之间相同相似的部分互相参见即可。尤其,对于本申请公开的道路约束确定装置的实施例而言,由于其基本相似于方法实施例,所以描述的比较简单,相关之处参见方法实施例中的说明即可。
以上所述的本发明实施方式并不构成对本发明保护范围的限定。
Claims (18)
1.一种图像处理方法,其特征在于,包括:
根据参考图像中各个像素的参数,分别调整m帧第一图像中各个像素的参数,所述参考图像为切换前的所述第一相机拍摄的图像,所述第一图像为切换后的所述第二相机拍摄的图像,所述参数至少包括所述像素的亮度,所述参考图像中各个像素的参数为参考参数,所述第一图像中各个像素在调整后的参数为第一参数,所述第一参数的均值与所述参考参数的均值相同;
根据所述参考图像中各个像素的参数,分别调整n帧第二图像中各个像素的参数,获取调整后的第二图像,所述第二图像为切换后的所述第二相机拍摄的图像,所述第二图像的拍摄时间晚于所述第一图像的拍摄时间,所述n帧第二图像的调整幅度逐帧递减。
2.根据权利要求1所述的方法,其特征在于,所述根据参考图像中各个像素的参数,分别调整m帧第一图像中各个像素的参数,包括:
通过以下公式,对第一目标图像中各个像素的参数进行标准化处理:
其中,所述第一目标图像为所述m帧第一图像中的任意一帧图像,originalval为所述第一目标图像中第一像素的参数的原始值,averagecur为在标准化处理之前,所述第一目标图像中各个像素的参数的平均值,stdevcur为在标准化处理之前,所述第一目标图像中各个像素的参数的标准差,newval为所述第一目标图像中的第一像素在标准化处理后的参数;
通过以下公式,对标准化处理后的所述第一目标图像进行反标准化处理,反标准化处理后的所述第一目标图像为所述调整后的第一图像:
processedval=newval*stdevref+averageref;
其中,newval为所述第一目标图像中的第一像素在标准化处理后的参数,stdevref为所述参考图像中各个像素的参数的标准差,averageref为所述参考图像中各个像素的参数的平均值,processedval为所述调整后的第一目标图像中的第一像素的参数。
3.根据权利要求1所述的方法,其特征在于,所述根据所述参考图像中各个像素的参数,分别调整n帧第二图像中各个像素的参数,包括:
根据所述参考参数以及参数阈值,分别调整所述n帧第二图像中各个像素的参数,根据所述参考参数以及参数阈值调整后的所述第二图像为第一待处理图像;
根据所述n帧第二图像分别对应的平滑系数,分别调整所述第一待处理图像中各个像素的参数,根据所述平滑系数调整后的所述第一待处理图像为所述调整后的第二图像。
4.根据权利要求3所述的方法,其特征在于,所述根据所述参考参数以及参数阈值,分别调整所述n帧第二图像中各个像素的参数,包括:
通过分别对所述参考图像和第二目标图像进行下采样,获取所述参考图像对应的第一小图,以及获取所述第二目标图像对应的第二小图,所述第二目标图像为所述n帧第二图像中的任意一帧图像,所述第一小图和所述第二小图的尺寸相同;
确定同一坐标分别对应的所述第一小图的参数与所述第二小图的参数之间的第一参数比值;
根据第一阈值,分别调整各个坐标对应的所述第一参数比值,调整后的所述第一参数比值不大于所述第一阈值中的第一阈值上限,或者,调整后的所述第一参数比值不小于所述第一阈值中的第一阈值下限,所述参数阈值包括所述第一阈值;
根据调整后的所述第一参数比值分别对应的坐标,对调整后的所述第一参数比值进行双线性插值处理,处理之后的各个第一参数比值分别对应所述第二目标图像中的像素;
将所述处理之后的各个第一参数比值分别与对应的所述第二目标图像的参数进行点乘,点乘结果为调整后的第二目标图像中各个像素的参数。
5.根据权利要求4所述的方法,其特征在于,所述根据第一阈值,分别调整各个坐标对应的所述第一参数比值,包括:
第一坐标对应的第一参数比值大于所述第一阈值上限,将所述第一坐标对应的第一参数比值调整为所述第一阈值上限;
或者,第二坐标对应的第一参数比值小于所述第一阈值下限,将所述第二坐标对应的第一参数比值调整为所述第一阈值下限。
6.根据权利要求3所述的方法,其特征在于,所述根据所述参考参数以及参数阈值,分别调整所述n帧第二图像中各个像素的参数,包括:
确定同一坐标分别对应的所述参考图像的参数与第三目标图像的参数之间的第二参数比值,所述第三目标图像为所述n帧第二图像中的任意一帧图像;
根据第二阈值,分别调整各个坐标对应的所述第二参数比值,调整后的所述第二参数比值不大于所述第二阈值中的第二阈值上限,或者,调整后的所述第二参数比值不小于所述第二阈值中的第二阈值下限,所述参数阈值包括所述第二阈值;
将调整后的各个坐标对应的第二参数比值分别与对应的第三目标图像的参数进行点乘,点乘结果为调整后的第三目标图像中各个像素的参数。
7.根据权利要求3所述的方法,其特征在于,所述根据所述n帧第二图像分别对应的平滑系数,分别调整所述第一待处理图像中各个像素的参数,包括:
根据所述第一图像的帧数和所述第二图像的帧数,确定第四目标图像对应的平滑系数,所述第四目标图像为所述第一待处理图像中的任意一帧图像;
根据所述第四目标图像对应的平滑系数,确定所述第四目标图像中各个像素的参数在调整后的标准差;
根据所述第四目标图像的参数平滑系数和所述在调整后的标准差,确定所述第四目标图像中各个像素的参数在调整后的平均值;
根据所述第四目标图像的参数的平滑系数和所述在调整后的平均值,确定所述第四目标图像中同一像素在调整后的参数与在调整前的参数的比值;
根据所述比值,确定所述第四目标图像中各个像素在调整后的参数。
8.根据权利要求7所述的方法,其特征在于,通过以下公式确定所述第四目标图像对应的平滑系数:
其中,dampRatio为所述第四目标图像对应的平滑系数,stableFrameCnt为所述第一图像的帧数,transitFrameCnt为所述第二图像的帧数,curFrameCnt为所述第四目标图像的序号,所述第一待处理图像的序号根据拍摄时间依次递增,所述第一待处理图像的序号均为正整数;
或者,通过以下公式,确定所述第四目标图像中各个像素的参数在调整后的标准差:
dampStdevref=stdevref*dampRatio+stdevcur*(1-dampRatio);
其中,dampStdevref为所述第四目标图像中各个像素的参数在调整后的标准差,stdevref为所述参考图像中各个像素的参数的标准差,stdevcur为所述第四目标图像中各个像素的参数在调整前的标准差;
或者,通过以下公式,确定所述第四目标图像中各个像素的参数在调整后的平均值:
dampAverageref=averageref*dampRatio+averagecur*(1-dampRatio);
其中,dampAverageref为所述第四目标图像中各个像素的参数在调整后的平均值,averageref为所述参考图像中各个像素的参数的平均值,averagecur为所述第四目标图像中各个像素的参数在调整前的平均值;
或者,根据以下公式,确定所述第四目标图像中同一像素在调整后的参数与在调整前的参数的比值:
dampRatio(x2,y2)=Ratio(x2,y2)*dampRatio+1*(1-dampRatio);
其中,dampRatio(x2,y2)为所述第四目标图像中,坐标为(x2,y2)的像素在调整后的参数与在调整前的参数的比值,Ratio(x2,y2)为所述参考图像中坐标为(x2,y2)的像素的参数,与所述第四目标图像中坐标为(x2,y2)的像素在调整前的参数之间的比值;
或者,根据以下公式,确定所述第四目标图像中各个像素在调整后的参数:
Param(x2,y2)=dampRatio(x2,y2)*param(x2,y2);
其中,Param(x2,y2)为所述第四目标图像中坐标为(x2,y2)的像素在调整后的参数,param(x2,y2)为所述第四目标图像中坐标为(x2,y2)的像素在调整前的参数。
9.一种图像处理装置,其特征在于,包括:
处理器和收发接口;
所述收发接口用于获取参考图像、m帧第一图像和n帧第二图像,所述参考图像为切换前的所述第一相机拍摄的图像,所述第一图像为切换后的所述第二相机拍摄的图像,所述第二图像为切换后的所述第二相机拍摄的图像,所述第二图像的拍摄时间晚于所述第一图像的拍摄时间;
所述处理器用于根据所述参考图像中各个像素的参数,分别调整所述m帧第一图像中各个像素的参数,所述参数至少包括所述像素的亮度,所述参考图像中各个像素的参数为参考参数,所述第一图像中各个像素在调整后的参数为第一参数,所述第一参数的均值与所述参考参数的均值相同;
所述处理器还用于,根据所述参考图像中各个像素的参数,分别调整所述n帧第二图像中各个像素的参数,获取调整后的第二图像,所述n帧第二图像的调整幅度逐帧递减。
10.根据权利要求9所述的装置,其特征在于,
所述处理器具体用于,通过以下公式,对第一目标图像中各个像素的参数进行标准化处理:
其中,所述第一目标图像为所述m帧第一图像中的任意一帧图像,originalval为所述第一目标图像中第一像素的参数的原始值,averagecur为在标准化处理之前,所述第一目标图像中各个像素的参数的平均值,stdevcur为在标准化处理之前,所述第一目标图像中各个像素的参数的标准差,newval为所述第一目标图像中的第一像素在标准化处理后的参数;
所述处理器具体用于,通过以下公式,对标准化处理后的所述第一目标图像进行反标准化处理,反标准化处理后的所述第一目标图像为所述调整后的第一图像:
processedval=newval*stdevref+averageref;
其中,newval为所述第一目标图像中的第一像素在标准化处理后的参数,stdevref为所述参考图像中各个像素的参数的标准差,averageref为所述参考图像中各个像素的参数的平均值,processedval为所述调整后的第一目标图像中的第一像素的参数。
11.根据权利要求9所述的装置,其特征在于,
所述处理器具体用于,根据所述参考参数以及参数阈值,分别调整所述n帧第二图像中各个像素的参数,根据所述参考参数以及参数阈值调整后的所述第二图像为第一待处理图像;并且,根据所述n帧第二图像分别对应的平滑系数,分别调整所述第一待处理图像中各个像素的参数,根据所述平滑系数调整后的所述第一待处理图像为所述调整后的第二图像。
12.根据权利要求11所述的装置,其特征在于,所述处理器具体用于:
通过分别对所述参考图像和第二目标图像进行下采样,获取所述参考图像对应的第一小图,以及获取所述第二目标图像对应的第二小图,所述第二目标图像为所述n帧第二图像中的任意一帧图像,所述第一小图和所述第二小图的尺寸相同;
确定同一坐标分别对应的所述第一小图的参数与所述第二小图的参数之间的第一参数比值;
根据第一阈值,分别调整各个坐标对应的所述第一参数比值,调整后的所述第一参数比值不大于所述第一阈值中的第一阈值上限,或者,调整后的所述第一参数比值不小于所述第一阈值中的第一阈值下限,所述参数阈值包括所述第一阈值;
根据调整后的所述第一参数比值分别对应的坐标,对调整后的所述第一参数比值进行双线性插值处理,处理之后的各个第一参数比值分别对应所述第二目标图像中的像素;
将所述处理之后的各个第一参数比值分别与对应的所述第二目标图像的参数进行点乘,点乘结果为调整后的第二目标图像中各个像素的参数。
13.根据权利要求12所述的装置,其特征在于,所述处理器具体用于:
第一坐标对应的第一参数比值大于所述第一阈值上限,将所述第一坐标对应的第一参数比值调整为所述第一阈值上限;
或者,第二坐标对应的第一参数比值小于所述第一阈值下限,将所述第二坐标对应的第一参数比值调整为所述第一阈值下限。
14.根据权利要求11所述的装置,其特征在于,所述处理器具体用于:
确定同一坐标分别对应的所述参考图像的参数与第三目标图像的参数之间的第二参数比值,所述第三目标图像为所述n帧第二图像中的任意一帧图像;
根据第二阈值,分别调整各个坐标对应的所述第二参数比值,调整后的所述第二参数比值不大于所述第二阈值中的第二阈值上限,或者,调整后的所述第二参数比值不小于所述第二阈值中的第二阈值下限,所述参数阈值包括所述第二阈值;
将调整后的各个坐标对应的第二参数比值分别与对应的第三目标图像的参数进行点乘,点乘结果为调整后的第三目标图像中各个像素的参数。
15.根据权利要求11所述的装置,其特征在于,所述处理器具体用于:
根据所述第一图像的帧数和所述第二图像的帧数,确定第四目标图像对应的平滑系数,所述第四目标图像为所述第一待处理图像中的任意一帧图像;
根据所述第四目标图像对应的平滑系数,确定所述第四目标图像中各个像素的参数在调整后的标准差;
根据所述第四目标图像的参数平滑系数和所述在调整后的标准差,确定所述第四目标图像中各个像素的参数在调整后的平均值;
根据所述第四目标图像的参数的平滑系数和所述在调整后的平均值,确定所述第四目标图像中同一像素在调整后的参数与在调整前的参数的比值;
根据所述比值,确定所述第四目标图像中各个像素在调整后的参数。
16.根据权利要求15所述的装置,其特征在于,
所述处理器具体用于,通过以下公式确定所述第四目标图像对应的平滑系数:
其中,dampRatio为所述第四目标图像对应的平滑系数,stableFrameCnt为所述第一图像的帧数,transitFrameCnt为所述第二图像的帧数,curFrameCnt为所述第四目标图像的序号,所述第一待处理图像的序号根据拍摄时间依次递增,所述第一待处理图像的序号均为正整数;
或者,所述处理器具体用于,通过以下公式,确定所述第四目标图像中各个像素的参数在调整后的标准差:
dampStdevref=stdevref*dampRatio+stdevcur*(1-dampRatio);
其中,dampStdevref为所述第四目标图像中各个像素的参数在调整后的标准差,stdevref为所述参考图像中各个像素的参数的标准差,stdevcur为所述第四目标图像中各个像素的参数在调整前的标准差;
或者,所述处理器具体用于,通过以下公式,确定所述第四目标图像中各个像素的参数在调整后的平均值:
dampAverageref=averageref*dampRatio+averagecur*(1-dampRatio);
其中,dampAverageref为所述第四目标图像中各个像素的参数在调整后的平均值,averageref为所述参考图像中各个像素的参数的平均值,averagecur为所述第四目标图像中各个像素的参数在调整前的平均值;
或者,所述处理器具体用于,根据以下公式,确定所述第四目标图像中同一像素在调整后的参数与在调整前的参数的比值:
dampRatio(x2,y2)=Ratio(x2,y2)*dampRatio+1*(1-dampRatio);
其中,dampRatio(x2,y2)为所述第四目标图像中,坐标为(x2,y2)的像素在调整后的参数与在调整前的参数的比值,Ratio(x2,y2)为所述参考图像中坐标为(x2,y2)的像素的参数,与所述第四目标图像中坐标为(x2,y2)的像素在调整前的参数之间的比值;
或者,所述处理器具体用于,根据以下公式,确定所述第四目标图像中各个像素在调整后的参数:
Param(x2,y2)=dampRatio(x2,y2)*param(x2,y2);
其中,Param(x2,y2)为所述第四目标图像中坐标为(x2,y2)的像素在调整后的参数,param(x2,y2)为所述第四目标图像中坐标为(x2,y2)的像素在调整前的参数。
17.一种终端装置,其特征在于,包括:
至少一个处理器和存储器,
所述存储器,用于存储程序指令;
所述处理器,用于调用并执行所述存储器中存储的程序指令,以使所述终端装置执行权利要求1-8任一项所述的图像处理方法。
18.一种计算机可读存储介质,其特征在于,
所述计算机可读存储介质中存储有指令,当其在计算机上运行时,使得所述计算机执行如权利要求1-8任一项所述的图像处理方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110394604.9A CN115209062A (zh) | 2021-04-13 | 2021-04-13 | 一种图像处理方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110394604.9A CN115209062A (zh) | 2021-04-13 | 2021-04-13 | 一种图像处理方法及装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN115209062A true CN115209062A (zh) | 2022-10-18 |
Family
ID=83570872
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110394604.9A Pending CN115209062A (zh) | 2021-04-13 | 2021-04-13 | 一种图像处理方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN115209062A (zh) |
Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101267505A (zh) * | 2008-04-25 | 2008-09-17 | 北京中星微电子有限公司 | 一种曝光时间调整方法、装置及一种摄像头 |
JP2013162412A (ja) * | 2012-02-07 | 2013-08-19 | Olympus Imaging Corp | 撮像装置及び画質調整方法、画質調整プログラム |
US20140063294A1 (en) * | 2012-09-03 | 2014-03-06 | Kabushiki Kaisha Toshiba | Image processing device, image processing method, and solid-state imaging device |
CN104301624A (zh) * | 2014-10-30 | 2015-01-21 | 青岛海信移动通信技术股份有限公司 | 一种图像拍摄亮度控制方法及装置 |
CN104917976A (zh) * | 2015-06-05 | 2015-09-16 | 北京大恒图像视觉有限公司 | 一种相机自动曝光和自动增益调节方法 |
CN105872311A (zh) * | 2016-05-30 | 2016-08-17 | 深圳Tcl数字技术有限公司 | 高动态范围画面切换方法及装置 |
CN108541374A (zh) * | 2015-12-28 | 2018-09-14 | 华为技术有限公司 | 一种图像融合方法、装置及终端设备 |
JP2020030262A (ja) * | 2018-08-21 | 2020-02-27 | キヤノン株式会社 | 画像表示装置とその制御方法 |
CN111432143A (zh) * | 2020-04-10 | 2020-07-17 | 展讯通信(上海)有限公司 | 摄像头模组切换的控制方法、系统、介质及电子设备 |
CN112202986A (zh) * | 2020-09-30 | 2021-01-08 | 安谋科技(中国)有限公司 | 图像处理方法、图像处理装置、可读介质及其电子设备 |
-
2021
- 2021-04-13 CN CN202110394604.9A patent/CN115209062A/zh active Pending
Patent Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101267505A (zh) * | 2008-04-25 | 2008-09-17 | 北京中星微电子有限公司 | 一种曝光时间调整方法、装置及一种摄像头 |
JP2013162412A (ja) * | 2012-02-07 | 2013-08-19 | Olympus Imaging Corp | 撮像装置及び画質調整方法、画質調整プログラム |
US20140063294A1 (en) * | 2012-09-03 | 2014-03-06 | Kabushiki Kaisha Toshiba | Image processing device, image processing method, and solid-state imaging device |
CN104301624A (zh) * | 2014-10-30 | 2015-01-21 | 青岛海信移动通信技术股份有限公司 | 一种图像拍摄亮度控制方法及装置 |
CN104917976A (zh) * | 2015-06-05 | 2015-09-16 | 北京大恒图像视觉有限公司 | 一种相机自动曝光和自动增益调节方法 |
CN108541374A (zh) * | 2015-12-28 | 2018-09-14 | 华为技术有限公司 | 一种图像融合方法、装置及终端设备 |
CN105872311A (zh) * | 2016-05-30 | 2016-08-17 | 深圳Tcl数字技术有限公司 | 高动态范围画面切换方法及装置 |
JP2020030262A (ja) * | 2018-08-21 | 2020-02-27 | キヤノン株式会社 | 画像表示装置とその制御方法 |
CN111432143A (zh) * | 2020-04-10 | 2020-07-17 | 展讯通信(上海)有限公司 | 摄像头模组切换的控制方法、系统、介质及电子设备 |
CN112202986A (zh) * | 2020-09-30 | 2021-01-08 | 安谋科技(中国)有限公司 | 图像处理方法、图像处理装置、可读介质及其电子设备 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11765463B2 (en) | Multi-channel video recording method and device | |
CN110086985B (zh) | 一种延时摄影的录制方法及电子设备 | |
WO2022262260A1 (zh) | 一种拍摄方法及电子设备 | |
CN113810600B (zh) | 终端的图像处理方法、装置和终端设备 | |
CN113810601B (zh) | 终端的图像处理方法、装置和终端设备 | |
CN110381276B (zh) | 一种视频拍摄方法及电子设备 | |
CN111552451B (zh) | 显示控制方法及装置、计算机可读介质及终端设备 | |
CN111179282A (zh) | 图像处理方法、图像处理装置、存储介质与电子设备 | |
CN112954251B (zh) | 视频处理方法、视频处理装置、存储介质与电子设备 | |
CN114489533A (zh) | 投屏方法、装置、电子设备及计算机可读存储介质 | |
CN112533115B (zh) | 一种提升扬声器的音质的方法及装置 | |
EP4016987A1 (en) | Photographing method and electronic device | |
CN113709464A (zh) | 视频编码方法及相关设备 | |
CN116095476B (zh) | 摄像头的切换方法、装置、电子设备及存储介质 | |
CN113473013A (zh) | 图像美化效果的显示方法、装置和终端设备 | |
CN113497851B (zh) | 控制显示方法及电子设备 | |
CN115412678B (zh) | 曝光处理方法、装置及电子设备 | |
CN114466238B (zh) | 帧解复用方法、电子设备及存储介质 | |
CN117440194A (zh) | 一种投屏画面的处理方法及相关装置 | |
CN115706869A (zh) | 终端的图像处理方法、装置和终端设备 | |
CN115209062A (zh) | 一种图像处理方法及装置 | |
CN115696067B (zh) | 终端的图像处理方法、终端设备和计算机可读存储介质 | |
CN111294905B (zh) | 图像处理方法、图像处理装置、存储介质与电子设备 | |
CN116095509B (zh) | 生成视频帧的方法、装置、电子设备及存储介质 | |
CN117593236A (zh) | 图像的显示方法、装置和终端设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |