CN114331907A - 颜色阴影校正方法及装置 - Google Patents
颜色阴影校正方法及装置 Download PDFInfo
- Publication number
- CN114331907A CN114331907A CN202111677580.4A CN202111677580A CN114331907A CN 114331907 A CN114331907 A CN 114331907A CN 202111677580 A CN202111677580 A CN 202111677580A CN 114331907 A CN114331907 A CN 114331907A
- Authority
- CN
- China
- Prior art keywords
- compensation table
- determining
- value
- interpolation coefficient
- target
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Color Television Image Signal Generators (AREA)
- Facsimile Image Signal Circuits (AREA)
Abstract
本申请提供一种颜色阴影校正方法及装置,首先获取多个补偿表组合,每个补偿表组合包含两个不同色温的光源对应的补偿表,然后通过不同的插值系数计算每个补偿表组合进行颜色阴影校正的误差值,从而确定得到适合当前光源的最优的目标补偿表,进而通过该目标补偿表进行颜色阴影校正,可以准确地对当前光源的颜色阴影进行补偿,从而有效提高颜色阴影校正效果。
Description
技术领域
本申请涉及图像信号处理技术领域,尤其涉及一种颜色阴影校正方法及装置。
背景技术
颜色阴影(Color Shading)是一种常见的镜头阴影,具体表现为图像中心与四周颜色不一致,由于镜头对不同光谱光线的折射程度不同,导致不同波长的光线落在图像传感器(sensor)的不同位置,不同光源色温下,R、G、B通道的衰减趋势不同,导致图像四周和中心的颜色存在偏差,图像的色彩均匀性较差,严重影响图像质量。
针对上述问题,常见的解决方式是在拍摄原始图像后,通过图像信号处理器(Image Signal Processor,ISP)对原始图形进行图像处理,具体为通过ISP中包含的镜头阴影校正(Lens Shading Correction,LSC)模块对原始图像进行校正镜头阴影。
然而,现有的颜色阴影校正技术存在补偿表无法准确适应当前光源而导致颜色阴影校正效果不理想的问题。
在背景技术中公开的上述信息仅用于加强对本申请的背景的理解,因此其可能包含没有形成为本领域普通技术人员所知晓的现有技术的信息。
发明内容
本申请提供一种颜色阴影校正方法及装置,用以解决现有技术存在的问题。
第一方面,本申请提供一种颜色阴影校正方法,包括:
获取至少两个补偿表组合,每个补偿表组合包括第一补偿表和第二补偿表,所述第一补偿表和所述第二补偿表分别包含不同色温的光源对应的颜色阴影补偿数据;
分别确定每个补偿表组合在不同插值系数下进行颜色阴影校正的误差值,并确定最小误差值对应的目标补偿表组合以及目标插值系数;
根据所述目标补偿表组合中的第一补偿表和第二补偿表、以及所述目标插值系数确定目标补偿表,并通过所述目标补偿表进行颜色阴影校正处理。
在一些实施例中,分别确定每个补偿表组合在不同插值系数下进行颜色阴影校正的误差值,并确定最小误差值对应的目标补偿表组合以及目标插值系数,包括:
确定第一可选插值系数;
计算每个补偿表组合在第一可选插值系数下进行颜色阴影校正的第一误差值,根据第一误差值中的最小误差值对应的插值系数确定第二可选插值系数,并将第二可选插值系数作为新的第一可选插值系数,重复执行此步骤,直至满足迭代停止条件;
确定最后一次得到的最小误差值对应的补偿表组合为目标补偿表组合,以及,确定最后一次得到的最小误差值对应的插值系数为目标插值系数。
在一些实施例中,确定第一可选插值系数,包括:
根据第一取值范围以及第一步长,确定第一可选插值系数,其中,第一步长小于第一取值范围中最大值与最小值的差值。
在一些实施例中,计算每个补偿表组合在第一可选插值系数下进行颜色阴影校正的第一误差值,包括:
根据每个补偿表组合中的第一补偿表和第二补偿表、以及第一可选插值系数,执行以下处理:
根据第一补偿表、第二补偿表以及第一可选插值系数对原始图像进行颜色阴影校正,得到校正后统计值图像;
确定校正后统计值图像中至少两个子图像块的误差值;
根据各子图像块的误差值,确定校正后统计值图像的第一误差值。
在一些实施例中,通过以下公式进行颜色阴影校正:
lscm_apply_table=LSCM*table0*ratio+LSCM*table1*(1-ratio)
其中,lscm_apply_table表示校正后统计值图像,LSCM表示降采样的原始图像,table0表示第一补偿表,table1表示第二补偿表,ratio表示第一可选插值系数。
在一些实施例中,确定校正后统计值图像中至少两个子图像块的误差值,包括:
将所述子图像块的r通道与g通道的比值转换到对数域,得到第一子误差值;
将所述子图像块的b通道与g通道的比值转换到对数域,得到第二子误差值;
确定第一子误差值以及第二子误差值的方差之和为子图像块的误差值。
在一些实施例中,根据各子图像块的误差值,确定校正后统计值图像的第一误差值,包括:
根据各子图像块的误差值与平均误差值的大小关系,确定每个子图像块的权重,其中,平均误差值为所有子图像块的误差值的平均值;
根据所有子图像块的误差值以及权重进行加权求和处理,得到校正后统计值图像的第一误差值。
在一些实施例中,根据第一误差值中的最小误差值对应的插值系数确定第二可选插值系数,包括:
根据第一误差值中的最小误差值对应的插值系数确定第二取值范围;
根据第二取值范围以及第二步长,确定第二可选插值系数,其中,第二步长小于第二取值范围中最大值与最小值的差值。
在一些实施例中,根据目标补偿表组合中的第一补偿表和第二补偿表、以及目标插值系数确定目标补偿表,包括:
通过以下公式确定目标补偿表:
table_tar=table0_tar*ratio_tar+table1_tar*(1-ratio_tar)
其中,table_tar表示目标补偿表,table0_tar表示目标补偿表组合中的第一补偿表,table1_tar表示目标补偿表组合中的第二补偿表,ratio_tar表示目标插值系数。
第二方面,本申请提供一种颜色阴影校正装置,包括:
获取模块,用于获取至少两个补偿表组合,每个补偿表组合包括第一补偿表和第二补偿表,所述第一补偿表和所述第二补偿表分别包含不同色温的光源对应的颜色阴影补偿数据;
确定模块,用于分别确定每个补偿表组合在不同插值系数下进行颜色阴影校正的误差值,并确定最小误差值对应的目标补偿表组合以及目标插值系数;
处理模块,用于根据所述目标补偿表组合中的第一补偿表和第二补偿表、以及所述目标插值系数确定目标补偿表,并通过所述目标补偿表进行颜色阴影校正处理。
本申请提供的颜色阴影校正方法及装置,首先获取多个补偿表组合,每个补偿表组合包含两个不同色温的光源对应的补偿表,然后通过不同的插值系数计算每个补偿表组合进行颜色阴影校正的误差值,从而确定得到适合当前光源的最优的目标补偿表,进而通过该目标补偿表进行颜色阴影校正,可以准确地对当前光源的颜色阴影进行补偿,从而有效提高颜色阴影校正效果。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本公开的实施例,并与说明书一起用于解释本公开的原理。
图1为电子设备通过相机模组拍摄图像数据的示意图;
图2为本申请实施例提供的颜色阴影校正方法的示意图;
图3为本申请实施例提供的颜色阴影校正装置的示意图;
图4为本申请实施例提供的电子设备的结构示意图。
通过上述附图,已示出本公开明确的实施例,后文中将有更详细的描述。这些附图和文字描述并不是为了通过任何方式限制本公开构思的范围,而是通过参考特定实施例为本领域技术人员说明本公开的概念。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
在本申请实施例中使用的术语是仅仅出于描述特定实施例的目的,而非旨在限制本发明。在本申请实施例中所使用的单数形式的“一种”和“该”也旨在包括多数形式,除非上下文清楚地表示其他含义。
还需要说明的是,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的商品或者系统不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种商品或者系统所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的商品或者系统中还存在另外的相同要素。
颜色阴影(Color Shading)是一种常见的镜头阴影,具体表现为图像中心与四周颜色不一致,由于镜头对不同光谱光线的折射程度不同,导致不同波长的光线落在图像传感器(sensor)的不同位置,不同光源色温下,R、G、B通道的衰减趋势不同,导致图像四周和中心的颜色存在偏差,图像的色彩均匀性较差,严重影响图像质量。
针对上述问题,常见的解决方式是在拍摄原始图像后,通过图像信号处理器(Image Signal Processor,ISP)对原始图形进行图像处理,具体为通过ISP中包含的镜头阴影校正(Lens Shading Correction,LSC)模块对原始图像进行校正镜头阴影。
现有技术在进行颜色阴影校正时,首先,在多个标准光源下,如TL84光源(色温:4000K)、CWF光源(色温:4150K)、D65光源(色温:6500K)等,通过手机相机或其它成像系统分别拍摄多张原始图像,并分别基于原始图像标定得到各光源下的镜头阴影补偿表,存储在媒介中。在实际场景拍摄图像时,根据当前场景光源,调用存储的补偿表对当前场景光源图像进行颜色阴影补偿。
然而,现有技术存在以下问题:首先,可用于标定的光源数量有限,实际环境色温是线性变化的,不可能对所有色温的光源标定。其次,实际环境光源比标定光源更复杂,可能为混合光源,如室内窗边光源。直接调用预先标定的补偿表,不能较好地适应复杂光源场景,导致颜色阴影校正效果不理想。
本申请提供的颜色阴影校正方法及装置,旨在解决现有技术的如上技术问题。
本申请方案的主要构思为:本申请提出一种光源自适应的颜色阴影校正方法及装置,首先获取多个补偿表组合,每个补偿表组合包含两个不同色温的光源对应的补偿表,然后通过不同的插值系数计算每个补偿表组合进行颜色阴影校正的误差值,从而确定得到适合当前光源的最优的目标补偿表,进而通过该目标补偿表进行颜色阴影校正,可以准确地对当前光源的颜色阴影进行补偿,从而有效提高颜色阴影校正效果。
下面以具体地实施例对本申请的技术方案以及本申请的技术方案如何解决上述技术问题进行详细说明。下面这几个具体的实施例可以相互结合,对于相同或相似的概念或过程可能在某些实施例中不再赘述。下面将结合附图,对本申请的实施例进行描述。
可以理解,本申请中颜色阴影校正方法的处理步骤可以由图像信号处理器ISP实现,具体可以是由ISP中的镜头阴影校正LSC模块实现。
可以理解,本申请的技术方案,可以具体应用于集成有相机模组、具备拍摄功能且需要进行颜色阴影校正的电子设备,例如手机、工业相机、网络相机、平板计算机相机、游戏控制台相机、可视频智能手表、安防摄像头、摄像头模组等。
在上述电子设备中,相机模组一般包括镜头、滤光片(如红外截止滤光片)和图像传感器,其中,镜头一般是由一个或多个透镜组成,图像传感器一般可以为CCD图像传感器或者CMOS图像传感器。
图1为电子设备通过相机模组拍摄图像数据的示意图,如图1所示,光线依次通过镜头101、滤光片102后,到达图像传感器103,图像传感器103将光信号转换为电信号,以采集得到图像数据。在此过程中,光线经过镜头101折射后,角度会发生变化。而滤光片的光透率随着入射角度的变化而改变,即同一种波长的光,入射角度不同,透过率也会相应地不同,从而使得拍摄的图像出现颜色阴影的问题。
图2为本申请实施例提供的颜色阴影校正方法的示意图,如图2所示,该方法主要包括以下步骤:
S100、获取至少两个补偿表组合,每个补偿表组合包括第一补偿表和第二补偿表,所述第一补偿表和所述第二补偿表分别包含不同色温的光源对应的颜色阴影补偿数据,即第一补偿表和第二补偿表为不同色温的光源对应的颜色阴影补偿表;
具体的,补偿表组合是指由两个不同色温的光源对应的颜色阴影补偿表所组成的组合,每个补偿表包含某个色温的光源所对应的颜色阴影补偿数据。
例如,补偿表组合的数量可以是3个,具体为第一补偿表组合、第二补偿表组合以及第三补偿表组合。其中,第一补偿表组合中的第一补偿表对应于色温为x1的光源,第一补偿表组合中的第二补偿表对应于色温为x2的光源;第二补偿表组合中的第一补偿表对应于色温为x3的光源,第二补偿表组合中的第二补偿表对应于色温为x4的光源;第三补偿表组合中的第一补偿表对应于色温为x5的光源,第三补偿表组合中的第二补偿表对应于色温为x6的光源。
可选的,所有补偿表组合中的补偿表对应的光源包含由低色温到高色温的多个光源,例如,结合上述示例,x1、x2可以是低色温,x3、x4可以是中色温,x5、x6可以是高色温,从而保证通过插值得到的目标补偿表可以是适用于不同色温的光源。
可选的,在每个补偿表组合中,第一补偿表和第二补偿表所对应的光源的色温差小于预设阈值,也就是说,第一补偿表和第二补偿表为色温较为接近的光源对应的补偿表,从而,通过对色温较为接近的两个补偿表进行插值处理,可以更好地确定出适合当前色温的目标补偿表。
可选的,获取至少两个补偿表组合的过程,可以是首先通过拍摄设备得到不同色温光源下的多张用于标定(即颜色阴影校正)的原始图像;然后,通过对多张用于标定的原始图像进行颜色阴影校正,从而得到多个不同色温的光源对应的颜色阴影补偿表;最后,对多个不同色温的光源对应的颜色阴影补偿表进行组合,从而得到至少两个补偿表组合。
例如,假定不同色温光源具体包括色温分别为x1、x2、x3、x4、x5、x6(色温数据为由小到大排序,其中x1,为低色温,x6为高色温)的光源,通过标定得到6个补偿表分别为table_x1、table_x2、table_x3、table_x4、table_x5、table_x6,则通过组合可以得到3个补偿表组合,即{table_x1,table_x2}、{table_x3,table_x4}、{table_x5,table_x6}。
此外,根据预设阈值的取值大小的不同,也可以采用其他组合方式得到其他数量的补偿表组合,例如{table_x1,table_x2}、{table_x2,table_x3}、{table_x3,table_x4}、{table_x4,table_x5}、{table_x5,table_x6}等。
另外,也可以是将同一个补偿表与多个其他补偿表进行组合,以得到多个补偿表组合,例如,以table_x1为例,通过组合得到的补偿表组合还可以是{table_x1,table_x2}、{table_x1,table_x3}、{table_x1,table_x4}等,同样,对于table_x2,通过组合得到的补偿表组合还可以是{table_x2,table_x3}、{table_x2,table_x4}、{table_x1,table_x5}等,其他补偿表同理。
S200、分别确定每个补偿表组合在不同插值系数下进行颜色阴影校正的误差值,并确定最小误差值对应的目标补偿表组合以及目标插值系数;
在获取至少两个补偿表组合后,针对每个补偿表组合,采用不同的插值系数对原始图像进行颜色阴影校正,得到每个补偿表组合在不同插值系数下进行颜色阴影校正的误差值,其中,误差值越小,表示颜色阴影校正效果越好,从而,在得到所有误差值后,从所有误差值中筛选出最小误差值,并确定最小误差值对应的目标补偿表组合以及目标插值系数。
S300、根据目标补偿表组合中的第一补偿表和第二补偿表、以及目标插值系数确定目标补偿表,并通过目标补偿表进行颜色阴影校正处理。
在确定最小误差值对应的目标补偿表组合以及目标插值系数后,根据目标补偿表组合中的第一补偿表和第二补偿表、以及目标插值系数确定目标补偿表,即通过目标插值系数对目标补偿表组合中的第一补偿表和第二补偿表进行合并,从而得到适用于当前光源的单个目标补偿表,通过该目标补偿表对当前光源的图像进行颜色阴影校正处理,可以保证颜色阴影校正效果最佳。
本实施例提出一种光源自适应的颜色阴影校正方法,首先获取多个补偿表组合,每个补偿表组合包含两个不同色温的光源对应的补偿表,然后通过不同的插值系数计算每个补偿表组合进行颜色阴影校正的误差值,从而确定得到适合当前光源的最优的目标补偿表,进而通过该目标补偿表进行颜色阴影校正,可以准确地对当前光源的颜色阴影进行补偿,从而有效提高颜色阴影校正效果。
在一些实施例中,分别确定每个补偿表组合在不同插值系数下进行颜色阴影校正的误差值,并确定最小误差值对应的目标补偿表组合以及目标插值系数,包括:
S210、确定第一可选插值系数;
S220、计算每个补偿表组合在第一可选插值系数下进行颜色阴影校正的第一误差值,根据第一误差值中的最小误差值对应的插值系数确定第二可选插值系数,并将第二可选插值系数作为新的第一可选插值系数,重复执行此步骤,直至满足迭代停止条件;
S230、确定最后一次得到的最小误差值对应的补偿表组合为目标补偿表组合,以及,确定最后一次得到的最小误差值对应的插值系数为目标插值系数。
本实施例中,在获取至少两个补偿表组合后,可以对每个补偿表组合中的两个补偿表采用类似N分之一查找法(如四分之一查找法),即通过不同范围的插值系数进行迭代处理,分别找到使补偿效果误差最小的插值系数。
可选的,确定第一可选插值系数,包括:根据第一取值范围以及第一步长,确定第一可选插值系数,其中,第一步长小于第一取值范围中最大值与最小值的差值。
其中,以error表示误差值,以ratio表示插值系数,第一取值范围具体可以是[0,1],第一步长为1/s,则第一可选插值系数具体包括{0*1/s,1*1/s,2*1/s,…,(s-1)*1/s,s*1/s}。
可选的,计算每个补偿表组合在第一可选插值系数下进行颜色阴影校正的第一误差值,包括:
根据每个补偿表组合中的第一补偿表和第二补偿表、以及第一可选插值系数,执行以下处理:
S221、根据第一补偿表、第二补偿表以及第一可选插值系数对原始图像进行颜色阴影校正,得到校正后统计值图像;
其中,统计值图像即为降采样的图像,校正后统计值图像即为进行颜色阴影校正以后的降采样图像。
可选的,对于R、G、B三通道,通过以下公式进行颜色阴影校正:
lscm_apply_table=LSCM*table0*ratio+LSCM*table1*(1-ratio)
其中,lscm_apply_table表示校正后统计值图像,LSCM表示降采样的原始图像,table0表示第一补偿表,table1表示第二补偿表,ratio表示第一可选插值系数。
S222、确定校正后统计值图像中至少两个子图像块的误差值;
在得到校正后统计值图像lscm_apply_table后,将校正后统计值图像lscm_apply_table进行划分,如划分为m*n个子图像块,然后分别计算每个子图像块的误差值。
可选的,确定校正后统计值图像中至少两个子图像块的误差值,包括:
S222a、将子图像块的r/g,b/g值转换到对数域,得到第一子误差值以及第二子误差值;
S222b、确定第一子误差值以及第二子误差值的方差之和为子图像块的误差值。
具体的,对于第i个(i=1,2,3,…,m*n)子图像块,分别将r/g,b/g值转换到对数域,得到第一子误差值以及第二子误差值,分别记为error_r,error_b,然后计算error_r,error_b的方差之和,即第i个子图像块的方差,得到子图像块的误差值,记为error_value。
重复执行上述步骤,直至m*n个子图像块的error_value计算完毕。
S223、根据各子图像块的误差值,确定校正后统计值图像的第一误差值。
在得到m*n个子图像块的误差值error_value后,根据所有子图像块的误差值即可确定得到校正后统计值图像的第一误差值。
可选的,根据各子图像块的误差值,确定校正后统计值图像的第一误差值,包括:
S223a、根据各子图像块的误差值与平均误差值的大小关系,确定每个子图像块的权重,其中,平均误差值为所有子图像块的误差值的平均值;
S223b、根据所有子图像块的误差值以及权重进行加权求和处理,得到校正后统计值图像的第一误差值。
具体的,首先计算m*n个子图像块的误差值error_value的平均误差值,记为avg_error_value,然后根据平均误差值avg_error_value分别确定各子图像块的权重。
可选的,通过以下公式确定各子图像块的权重:
其中,errorweight(i)表示第i个子图像块的权重,error_value(i)表示第i个子图像块的误差值。
在得到各子图像块的权重后,通过进行加权求和即可得到校正后统计值图像的第一误差值error,具体为:
本实施例中,误差评估方法采用加权求和,对于不同方差值赋予不同的权重,充分考虑到不同方差值对误差的重要程度,使误差计算更准确,从而保证补偿表的最优插值系数计算更准确,使得最终插值得到的目标补偿表为最适合当前光源色温的补偿表。
在一些实施例中,在通过一组可选插值系数计算得到第一误差值后,在进行下一次误差值计算的迭代处理时,根据第一误差值中的最小误差值对应的插值系数确定第二可选插值系数,包括:
根据第一误差值中的最小误差值对应的插值系数确定第二取值范围;根据第二取值范围以及第二步长,确定第二可选插值系数,其中,第二步长小于第二取值范围中最大值与最小值的差值。
具体的,以第一取值范围为[0,1],第一步长为1/s,第一可选插值系数包括{0*1/s,1*1/s,2*1/s,…,(s-1)*1/s,s*1/s}为例进行解释说明:
(1)在第一次计算得到的第一误差值中,若最小误差值对应的插值系数接近0,即在[0*1/s,1*1/s]范围内,则可以将最小误差值对应的插值系数所在的范围作为第二取值范围,即第二取值范围为[0*1/s,1*1/s],第二步长小于1*1/s与0*1/s的差值,例如可以为1/s2,则第二可选插值系数可以为{0*1/s2,1*1/s2,2*1/s2,…,(s-1)*1/s2,s*1/s2}。
(2)若最小误差值对应的插值系数接近1,即在[(s-1)*1/s,s*1/s](即[1-1/s,1])范围内,则可以将最小误差值对应的插值系数所在的范围作为第二取值范围,即第二取值范围为[1-1/s,1],第二步长小于1与1-1/s的差值,例如可以为1/s2,则第二可选插值系数可以为{1-s*1/s2,1-(s-1)*1/s2,…,1-3*1/s2,1-2*1/s2,1-1*1/s2,1}。
(3)若最小误差值对应的插值系数在1*1/s,2*1/s,3*1/s等中间点附近,如1*1/s,则第二取值范围例如可以是[1/s-1/s,1/s+1/s],第二步长为1/2s,第二可选插值系数可以为{0*1/2s,1*1/2s,2*1/2s,3*1/2s,…,s*1/2s},其他中间点同理。
在确定第二可选插值系数后,将第二可选插值系数作为新的第一可选插值系数,然后通过S221-S223的步骤计算对应的第一误差值,从而得到每个补偿表组合在第一可选插值系数下进行颜色阴影校正的第一误差值。
可以理解,在本实施例中,基于上一次确定的第一误差值中的最小误差值确定新的第一可选插值系数,并根据新的第一可选插值系数计算对应的第一误差值的过程,可以认为是进行了一次迭代计算过程,迭代计算过程可以重复执行,直至满足迭代停止条件。
可选的,迭代停止条件例如可以是迭代次数达到预设次数(例如8次等),也可以是其他迭代计算的时长达到预设时长,具体可以基于实际场景的计算精度要求以及计算耗时要求来确定。
在一些实施例中,根据目标补偿表组合中的第一补偿表和第二补偿表、以及目标插值系数确定目标补偿表,包括:
通过以下公式确定目标补偿表:
table_tar=table0_tar*ratio_tar+table1_tar*(1-ratio_tar)
其中,table_tar表示目标补偿表,table0_tar表示目标补偿表组合中的第一补偿表,table1_tar表示目标补偿表组合中的第二补偿表,ratio_tar表示目标插值系数。
应该理解的是,虽然上述实施例中的流程图中的各个步骤按照箭头的指示依次显示,但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明,这些步骤的执行并没有严格的顺序限制,其可以以其他的顺序执行。而且,图中的至少一部分步骤可以包括多个子步骤或者多个阶段,这些子步骤或者阶段并不必然是在同一时刻执行完成,而是可以在不同的时刻执行,其执行顺序也不必然是依次进行,而是可以与其他步骤或者其他步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。
在一些实施例中,提供一种颜色阴影校正装置。
图3为本申请实施例提供的颜色阴影校正装置的示意图,如图3所示,该装置包括:
获取模块100,用于获取至少两个补偿表组合,每个补偿表组合包括第一补偿表和第二补偿表,所述第一补偿表和所述第二补偿表分别包含不同色温的光源对应的颜色阴影补偿数据;
确定模块200,用于分别确定每个补偿表组合在不同插值系数下进行颜色阴影校正的误差值,并确定最小误差值对应的目标补偿表组合以及目标插值系数;
处理模块300,用于根据目标补偿表组合中的第一补偿表和第二补偿表、以及目标插值系数确定目标补偿表,并通过目标补偿表进行颜色阴影校正处理。
在一些实施例中,分别确定每个补偿表组合在不同插值系数下进行颜色阴影校正的误差值,并确定最小误差值对应的目标补偿表组合以及目标插值系数,包括:
确定第一可选插值系数;
计算每个补偿表组合在第一可选插值系数下进行颜色阴影校正的第一误差值,根据第一误差值中的最小误差值对应的插值系数确定第二可选插值系数,并将第二可选插值系数作为新的第一可选插值系数,重复执行此步骤,直至满足迭代停止条件;
确定最后一次得到的最小误差值对应的补偿表组合为目标补偿表组合,以及,确定最后一次得到的最小误差值对应的插值系数为目标插值系数。
在一些实施例中,确定第一可选插值系数,包括:
根据第一取值范围以及第一步长,确定第一可选插值系数,其中,第一步长小于第一取值范围中最大值与最小值的差值。
在一些实施例中,计算每个补偿表组合在第一可选插值系数下进行颜色阴影校正的第一误差值,包括:
根据每个补偿表组合中的第一补偿表和第二补偿表、以及第一可选插值系数,执行以下处理:
根据第一补偿表、第二补偿表以及第一可选插值系数对原始图像进行颜色阴影校正,得到校正后统计值图像;
确定校正后统计值图像中至少两个子图像块的误差值;
根据各子图像块的误差值,确定校正后统计值图像的第一误差值。
在一些实施例中,通过以下公式进行颜色阴影校正:
lscm_apply_table=LSCM*table0*ratio+LSCM*table1*(1-ratio)
其中,lscm_apply_table表示校正后统计值图像,LSCM表示降采样的原始图像,table0表示第一补偿表,table1表示第二补偿表,ratio表示第一可选插值系数。
在一些实施例中,确定校正后统计值图像中至少两个子图像块的误差值,包括:
将子图像块的r/g,b/g值转换到对数域,得到第一子误差值以及第二子误差值;
确定第一子误差值以及第二子误差值的方差之和为子图像块的误差值。
在一些实施例中,根据各子图像块的误差值,确定校正后统计值图像的第一误差值,包括:
根据各子图像块的误差值与平均误差值的大小关系,确定每个子图像块的权重,其中,平均误差值为所有子图像块的误差值的平均值;
根据所有子图像块的误差值以及权重进行加权求和处理,得到校正后统计值图像的第一误差值。
在一些实施例中,根据第一误差值中的最小误差值对应的插值系数确定第二可选插值系数,包括:
根据第一误差值中的最小误差值对应的插值系数确定第二取值范围;
根据第二取值范围以及第二步长,确定第二可选插值系数,其中,第二步长小于第二取值范围中最大值与最小值的差值。
在一些实施例中,根据目标补偿表组合中的第一补偿表和第二补偿表、以及目标插值系数确定目标补偿表,包括:
通过以下公式确定目标补偿表:
table_tar=table0_tar*ratio_tar+table1_tar*(1-ratio_tar)
其中,table_tar表示目标补偿表,table0_tar表示目标补偿表组合中的第一补偿表,table1_tar表示目标补偿表组合中的第二补偿表,ratio_tar表示目标插值系数。
关于颜色阴影校正装置的具体限定可以参见上文中对于颜色阴影校正方法的限定,在此不再赘述。上述颜色阴影校正装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于电子设备中的处理器中,也可以以软件形式存储于电子设备中的存储器中,以便于处理器调用执行以上各个模块对应的操作。
本申请提供一种颜色阴影校正装置,首先获取多个补偿表组合,每个补偿表组合包含两个不同色温的光源对应的补偿表,然后通过不同的插值系数计算每个补偿表组合进行颜色阴影校正的误差值,从而确定得到适合当前光源的最优的目标补偿表,进而通过该目标补偿表进行颜色阴影校正,可以准确地对当前光源的颜色阴影进行补偿,从而有效提高颜色阴影校正效果。
在一些实施例中,提供一种电子设备,该电子设备可以根据当前光源的色温自适应进行颜色阴影校正处理。
图4为本申请实施例提供的电子设备的结构示意图,如图4所示,该电子设备,包括:图像捕获模块10、图像信号处理模块20及输出模块30。
其中,图像捕获模块10包括图像传感器11,用于进行图像拍摄,具体例如可以是摄像手机、摄像机、数码相机或其他形式的摄像装置;
图像信号处理模块20包括黑电平校正模块21、镜头阴影校正模块22、自动白平衡模块23、去马赛克模块24及其它图像处理模块(图中未示出);
输出模块30包括显示设备31、存储器32,显示设备可包括LCD或LED屏幕,存储器可包括闪存存储器、RAM、ROM、EEPROM等。
参考图4,图像传感器输出的原始图像数据,输入图像信号处理模块,经黑电平校正、镜头阴影校正、自动白平衡等模块处理,输出到显示设备上显示。图像传感器输出的原始图像数据经降采样得到统计值数据,与固定的多个补偿表组合输入到镜头阴影校正模块,用于计算最适合当前光源的目标补偿表组合以及目标插值系数,从而得到当前光源色温对应的目标补偿表,进而可以准确地对当前光源的颜色阴影进行补偿,有效提高颜色阴影校正效果。
在一些实施例中,提供一种电子设备,包括:存储器,处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述处理器执行所述程序时实现本申请各方法实施例的步骤。
在上述电子设备中,存储器和处理器之间直接或间接地电性连接,以实现数据的传输或交互。例如,这些元件相互之间可以通过一条或者多条通信总线或信号线实现电性连接,如可以通过总线连接。存储器中存储有实现数据访问控制方法的计算机执行指令,包括至少一个可以软件或固件的形式存储于存储器中的软件功能模块,处理器通过运行存储在存储器内的软件程序以及模块,从而执行各种功能应用以及数据处理。
存储器可以是,但不限于,随机存取存储器(Random Access Memory,RAM),只读存储器(Read Only Memory,ROM),可编程只读存储器(Programmable Read-Only Memory,PROM),可擦除只读存储器(Erasable Programmable Read-Only Memory,EPROM),电可擦除只读存储器(Electric Erasable Programmable Read-Only Memory,EEPROM)等。其中,存储器用于存储程序,处理器在接收到执行指令后,执行程序。进一步地,上述存储器内的软件程序以及模块还可包括操作系统,其可包括各种用于管理系统任务(例如内存管理、存储设备控制、电源管理等)的软件组件和/或驱动,并可与各种硬件或软件组件相互通信,从而提供其他软件组件的运行环境。
处理器可以是一种集成电路芯片,具有信号的处理能力。上述的处理器可以是通用处理器,包括中央处理器(Central Processing Unit,CPU)、网络处理器(NetworkProcessor,NP)等。可以实现或者执行本申请实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
在一些实施例中,提供一种计算机可读存储介质,所述计算机可读存储介质中存储有计算机执行指令,所述计算机执行指令被处理器执行时用于实现本申请各方法实施例的步骤。
在一些实施例中,提供一种计算机程序产品,包括计算机程序,该计算机程序被处理器执行时实现本申请各方法实施例的步骤。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,计算机程序可存储于一非易失性计算机可读取存储介质中,该计算机程序在执行时,可包括如上述各方法的实施例的流程。其中,本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用,均可包括非易失性和/或易失性存储器。非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM)或者外部高速缓冲存储器。作为说明而非局限,RAM以多种形式可得,诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDRSDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink)DRAM(SLDRAM)、存储器总线(Rambus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)等。
本领域技术人员在考虑说明书及实践这里公开的申请后,将容易想到本公开的其它实施方案。本申请旨在涵盖本公开的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本公开的真正范围和精神由下面的权利要求书指出。
应当理解的是,本公开并不局限于上面已经描述并在附图中示出的精确结构,并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求书来限制。
Claims (10)
1.一种颜色阴影校正方法,其特征在于,包括:
获取至少两个补偿表组合,每个补偿表组合包括第一补偿表和第二补偿表,所述第一补偿表和所述第二补偿表分别包含不同色温的光源对应的颜色阴影补偿数据;
分别确定每个补偿表组合在不同插值系数下进行颜色阴影校正的误差值,并确定最小误差值对应的目标补偿表组合以及目标插值系数;
根据所述目标补偿表组合中的第一补偿表和第二补偿表、以及所述目标插值系数确定目标补偿表,并通过所述目标补偿表进行颜色阴影校正处理。
2.根据权利要求1所述的方法,其特征在于,所述分别确定每个补偿表组合在不同插值系数下进行颜色阴影校正的误差值,并确定最小误差值对应的目标补偿表组合以及目标插值系数,包括:
确定第一可选插值系数;
计算每个补偿表组合在第一可选插值系数下进行颜色阴影校正的第一误差值,根据所述第一误差值中的最小误差值对应的插值系数确定第二可选插值系数,并将所述第二可选插值系数作为新的第一可选插值系数,重复执行此步骤,直至满足迭代停止条件;
确定最后一次得到的最小误差值对应的补偿表组合为所述目标补偿表组合,以及,确定最后一次得到的最小误差值对应的插值系数为所述目标插值系数。
3.根据权利要求2所述的方法,其特征在于,所述确定第一可选插值系数,包括:
根据第一取值范围以及第一步长,确定所述第一可选插值系数,其中,所述第一步长小于所述第一取值范围中最大值与最小值的差值。
4.根据权利要求2所述的方法,其特征在于,所述计算每个补偿表组合在第一可选插值系数下进行颜色阴影校正的第一误差值,包括:
根据每个补偿表组合中的第一补偿表和第二补偿表、以及所述第一可选插值系数,执行以下处理:
根据所述第一补偿表、所述第二补偿表以及所述第一可选插值系数对原始图像进行颜色阴影校正,得到校正后统计值图像;
确定所述校正后统计值图像中至少两个子图像块的误差值;
根据各所述子图像块的误差值,确定所述校正后统计值图像的第一误差值。
5.根据权利要求4所述的方法,其特征在于,通过以下公式进行颜色阴影校正:
lscm_apply_table=LSCM*table0*ratio+LSCM*table1*(1-ratio)
其中,lscm_apply_table表示校正后统计值图像,LSCM表示降采样的原始图像,table0表示第一补偿表,table1表示第二补偿表,ratio表示第一可选插值系数。
6.根据权利要求4所述的方法,其特征在于,所述确定所述校正后统计值图像中至少两个子图像块的误差值,包括:
将所述子图像块的r通道与g通道的比值转换到对数域,得到第一子误差值;
将所述子图像块的b通道与g通道的比值转换到对数域,得到第二子误差值;
确定所述第一子误差值以及所述第二子误差值的方差之和为所述子图像块的误差值。
7.根据权利要求6所述的方法,其特征在于,所述根据各所述子图像块的误差值,确定所述校正后统计值图像的第一误差值,包括:
根据各所述子图像块的误差值与平均误差值的大小关系,确定每个子图像块的权重,其中,所述平均误差值为所有子图像块的误差值的平均值;
根据所有子图像块的误差值以及权重进行加权求和处理,得到所述校正后统计值图像的第一误差值。
8.根据权利要求2所述的方法,其特征在于,根据所述第一误差值中的最小误差值对应的插值系数确定第二可选插值系数,包括:
根据所述第一误差值中的最小误差值对应的插值系数确定第二取值范围;
根据所述第二取值范围以及第二步长,确定所述第二可选插值系数,其中,所述第二步长小于所述第二取值范围中最大值与最小值的差值。
9.根据权利要求1所述的方法,其特征在于,所述根据所述目标补偿表组合中的第一补偿表和第二补偿表、以及所述目标插值系数确定目标补偿表,包括:
通过以下公式确定目标补偿表:
table_tar=table0_tar*ratio_tar+table1_tar*(1-ratio_tar)
其中,table_tar表示目标补偿表,table0_tar表示目标补偿表组合中的第一补偿表,table1_tar表示目标补偿表组合中的第二补偿表,ratio_tar表示目标插值系数。
10.一种颜色阴影校正装置,其特征在于,包括:
获取模块,用于获取至少两个补偿表组合,每个补偿表组合包括第一补偿表和第二补偿表;
确定模块,用于分别确定每个补偿表组合在不同插值系数下进行颜色阴影校正的误差值,并确定最小误差值对应的目标补偿表组合以及目标插值系数;
处理模块,用于根据所述目标补偿表组合中的第一补偿表和第二补偿表、以及所述目标插值系数确定目标补偿表,并通过所述目标补偿表进行颜色阴影校正处理。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111677580.4A CN114331907A (zh) | 2021-12-31 | 2021-12-31 | 颜色阴影校正方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111677580.4A CN114331907A (zh) | 2021-12-31 | 2021-12-31 | 颜色阴影校正方法及装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN114331907A true CN114331907A (zh) | 2022-04-12 |
Family
ID=81022784
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202111677580.4A Pending CN114331907A (zh) | 2021-12-31 | 2021-12-31 | 颜色阴影校正方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114331907A (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115499631A (zh) * | 2022-09-09 | 2022-12-20 | 北京紫光展锐通信技术有限公司 | 一种图像处理方法、装置、芯片及模组设备 |
CN116419076A (zh) * | 2022-06-07 | 2023-07-11 | 上海玄戒技术有限公司 | 图像处理方法、装置、电子设备及芯片 |
-
2021
- 2021-12-31 CN CN202111677580.4A patent/CN114331907A/zh active Pending
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116419076A (zh) * | 2022-06-07 | 2023-07-11 | 上海玄戒技术有限公司 | 图像处理方法、装置、电子设备及芯片 |
CN116419076B (zh) * | 2022-06-07 | 2024-05-07 | 上海玄戒技术有限公司 | 图像处理方法、装置、电子设备及芯片 |
CN115499631A (zh) * | 2022-09-09 | 2022-12-20 | 北京紫光展锐通信技术有限公司 | 一种图像处理方法、装置、芯片及模组设备 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP3611916A1 (en) | Imaging control method and electronic device | |
CN114331907A (zh) | 颜色阴影校正方法及装置 | |
CN111062876B (zh) | 用于校正模型训练和图像校正的方法和装置及电子设备 | |
CN112752023B (zh) | 一种图像调整方法、装置、电子设备及存储介质 | |
KR20040073378A (ko) | 비네팅 보상 | |
CN105681680A (zh) | 一种图像暗角校正方法、装置及系统 | |
US8659685B2 (en) | Method and apparatus for calibrating and correcting shading non-uniformity of camera systems | |
US20160171697A1 (en) | Method and system of run-time self-calibrating lens shading correction | |
CN107801011B (zh) | 全景拍摄的白平衡处理方法、装置及设备 | |
CN111277699B (zh) | 闪光灯色温校准方法、装置、电子设备和可读存储介质 | |
CN107800971B (zh) | 全景拍摄的自动曝光控制处理方法、装置及设备 | |
CN111861922A (zh) | 颜色校正矩阵的调整方法及装置、存储介质 | |
CN113163127A (zh) | 图像处理方法、装置、电子设备及存储介质 | |
CN109410152A (zh) | 成像方法和装置、电子设备、计算机可读存储介质 | |
CN109697737B (zh) | 摄像头标定方法、装置、电子设备和计算机可读存储介质 | |
CN107635124B (zh) | 人脸拍摄的白平衡处理方法、装置及设备 | |
CN115914601A (zh) | 图像处理方法、系统、电子设备、可读存储介质及芯片 | |
CN107948619B (zh) | 图像处理方法、装置、计算机可读存储介质和移动终端 | |
CN109493391A (zh) | 摄像头标定方法和装置、电子设备、计算机可读存储介质 | |
CN113271450B (zh) | 白平衡调整方法、影像处理装置与影像处理系统 | |
CN112087559B (zh) | 图像传感器、图像拍摄装置和方法 | |
CN113284062A (zh) | 镜头阴影的校正方法、装置、介质及终端 | |
CN114866755B (zh) | 自动白平衡方法、装置和计算机存储介质、电子设备 | |
US20190268520A1 (en) | Image sensor and body module | |
CN116419076B (zh) | 图像处理方法、装置、电子设备及芯片 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |