CN114216573A - 色温检测方法及装置、计算机可读介质、电子设备 - Google Patents
色温检测方法及装置、计算机可读介质、电子设备 Download PDFInfo
- Publication number
- CN114216573A CN114216573A CN202111518317.0A CN202111518317A CN114216573A CN 114216573 A CN114216573 A CN 114216573A CN 202111518317 A CN202111518317 A CN 202111518317A CN 114216573 A CN114216573 A CN 114216573A
- Authority
- CN
- China
- Prior art keywords
- color temperature
- temperature sensor
- spectrum
- camera
- photosensitive area
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000001514 detection method Methods 0.000 title claims abstract description 41
- 238000001228 spectrum Methods 0.000 claims abstract description 94
- 239000011159 matrix material Substances 0.000 claims abstract description 57
- 238000012937 correction Methods 0.000 claims abstract description 32
- 238000000034 method Methods 0.000 claims abstract description 32
- 238000004590 computer program Methods 0.000 claims description 10
- 238000004364 calculation method Methods 0.000 claims description 6
- 238000012545 processing Methods 0.000 abstract description 6
- 230000000875 corresponding effect Effects 0.000 description 27
- 230000003595 spectral effect Effects 0.000 description 17
- 230000008569 process Effects 0.000 description 16
- 238000010586 diagram Methods 0.000 description 15
- 230000006870 function Effects 0.000 description 14
- 238000002310 reflectometry Methods 0.000 description 7
- 230000003287 optical effect Effects 0.000 description 5
- 230000004044 response Effects 0.000 description 5
- 238000004891 communication Methods 0.000 description 4
- 230000009471 action Effects 0.000 description 3
- 238000003384 imaging method Methods 0.000 description 3
- 238000000985 reflectance spectrum Methods 0.000 description 3
- 206010070834 Sensitisation Diseases 0.000 description 2
- XUIMIQQOPSSXEZ-UHFFFAOYSA-N Silicon Chemical compound [Si] XUIMIQQOPSSXEZ-UHFFFAOYSA-N 0.000 description 2
- 230000001413 cellular effect Effects 0.000 description 2
- 239000003086 colorant Substances 0.000 description 2
- 238000005286 illumination Methods 0.000 description 2
- 230000006872 improvement Effects 0.000 description 2
- 230000000644 propagated effect Effects 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 230000008313 sensitization Effects 0.000 description 2
- 229910052710 silicon Inorganic materials 0.000 description 2
- 239000010703 silicon Substances 0.000 description 2
- 230000004913 activation Effects 0.000 description 1
- 230000006978 adaptation Effects 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 238000009529 body temperature measurement Methods 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 230000002596 correlated effect Effects 0.000 description 1
- 230000007812 deficiency Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 238000000265 homogenisation Methods 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 230000003252 repetitive effect Effects 0.000 description 1
- 238000010187 selection method Methods 0.000 description 1
- 239000000126 substance Substances 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
- G01J5/00—Radiation pyrometry, e.g. infrared or optical thermometry
- G01J5/60—Radiation pyrometry, e.g. infrared or optical thermometry using determination of colour temperature
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Spectroscopy & Molecular Physics (AREA)
- Color Television Image Signal Generators (AREA)
- Spectrometry And Color Measurement (AREA)
Abstract
本公开涉及图像处理技术领域,具体涉及色温检测方法及装置、计算机可读介质、电子设备。该方法应用于配置有摄像头和色温传感器的终端设备;色温传感器的感光范围与摄像头的目标感光区域对应;该方法包括:利用色温传感器获取反射光在目标感光区域对应的第一色温数据;根据第一色温数据和预设的校正矩阵计算反射光对应的反射光谱;其中,校正矩阵用于标定色温传感器;根据预设的光谱数据库确定反射光谱对应的光源光谱,并基于光源光谱确定第二色温数据;其中,光谱数据库包括多种类型光源分别在多种单色场景下的光谱数据。本公开的技术方案能够获取准确的色温数据,提升终端设备的白平衡表现和色彩准确性。
Description
技术领域
本公开涉及图像处理技术领域,具体涉及一种色温检测方法、一种色温检测装置、一种计算机可读介质、一种电子设备。
背景技术
白平衡(White Balance)是摄像领域的一个重要概念,通过白平衡可以解决色彩还原和色调处理等系列问题。对白平衡的调节依赖对光源检测结果和光谱的识别结果。但是,在相关技术中,终端设备一般需要较多的传感器来采集环境光的相关参数,导致数据量大,且容易导致终端设备的功耗较高。在光源环境复杂的应用场景中,容易导致白平衡调节不准确而出现的失效。
需要说明的是,在上述背景技术部分公开的信息仅用于加强对本公开的背景的理解,因此可以包括不构成对本领域普通技术人员已知的现有技术的信息。
发明内容
本公开提供一种色温检测方法、一种色温检测装置、一种计算机可读介质、一种电子设备,能够获取准确的色温数据,提升终端设备的白平衡表现和色彩准确性。
本公开的其他特性和优点将通过下面的详细描述变得显然,或部分地通过本公开的实践而习得。
根据本公开的第一方面,提供一种色温检测方法,应用于终端设备,所述终端设备配置有摄像头和色温传感器;所述色温传感器的感光范围与所述摄像头的目标感光区域对应;所述方法包括:
利用所述色温传感器获取反射光在所述目标感光区域对应的第一色温数据;
根据所述第一色温数据和预设的校正矩阵计算所述反射光对应的反射光谱;其中,所述校正矩阵用于标定所述色温传感器;
根据预设的光谱数据库确定所述反射光谱对应的光源光谱,并基于所述光源光谱确定第二色温数据;其中,所述光谱数据库包括多种类型光源分别在多种单色场景下的光谱数据。
根据本公开的第二方面,提供一种色温检测装置,应用于终端设备,所述终端设备配置有摄像头和色温传感器;所述色温传感器的感光范围与所述摄像头的目标感光区域对应;所述装置包括:
第一色温数据获取模块,用于利用所述色温传感器获取反射光在所述目标感光区域对应的第一色温数据;
反射光谱计算模块,用于根据所述第一色温数据和预设的校正矩阵计算所述反射光对应的反射光谱;其中,所述校正矩阵用于标定所述色温传感器;
第二色温数据获取模块,用于根据预设的光谱数据库确定所述反射光谱对应的光源光谱,并基于所述光源光谱确定第二色温数据;其中,所述光谱数据库包括多种类型光源分别在多种单色场景下的光谱数据。
根据本公开的第三方面,提供一种计算机可读介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现上述的色温检测方法。
根据本公开的第四方面,提供一种电子设备,包括:
色温传感器;
摄像头;
一个或多个处理器;
存储装置,用于存储一个或多个程序,当所述一个或多个程序被所述一个或多个处理器执行时,使得所述一个或多个处理器实现上述的色温检测方法。
本公开的一种实施例所提供的色温检测方法,通过预先配置色温传感器的感光范围和终端设备摄像头的目标感光区域相对应,从而利用色温传感器采集反射光在摄像头的目标感光区域的第一色温数据;通过第一色温数据和预设的校正矩阵便可以计算出反射光谱;通过利用预设的光谱数据库对反射光谱进行光谱匹配,从而确定准确的光源光谱,进而可以得到准确的第二色温数据。进而可以利用第二色温数据进行更加准确的白平衡调整,实现图像色彩准确性的提升。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本公开。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本公开的实施例,并与说明书一起用于解释本公开的原理。显而易见地,下面描述中的附图仅仅是本公开的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1示意性示出本公开示例性实施例中一种色温检测方法的示意图;
图2示意性示出本公开示例性实施例中一种装配有后置摄像头和色温传感器的终端设备的示意图;
图3示意性示出本公开示例性实施例中一种装配有前置摄像头和色温传感器的终端设备的示意图;
图4示意性示出本公开示例性实施例中一种装配有多个后置摄像头和色温传感器的终端设备的示意图;
图5示意性示出本公开示例性实施例中一种装配有多个后置摄像头和色温传感器的终端设备的示意图;
图6示意性示出本公开示例性实施例中一种对色温传感器进行标定的示意图;
图7示意性示出本公开示例性实施例中一种光路传播的示意图;
图8示意性示出本公开示例性实施例中一种色温传感器感光范围的示意图;
图9示意性示出本公开示例性实施例中一种色温检测装置的组成示意图;
图10示意性示出本公开示例性实施例中一种电子设备的结构示意图。
具体实施方式
现在将参考附图更全面地描述示例实施方式。然而,示例实施方式能够以多种形式实施,且不应被理解为限于在此阐述的范例;相反,提供这些实施方式使得本公开将更加全面和完整,并将示例实施方式的构思全面地传达给本领域的技术人员。所描述的特征、结构或特性可以以任何合适的方式结合在一个或更多实施方式中。
此外,附图仅为本公开的示意性图解,并非一定是按比例绘制。图中相同的附图标记表示相同或类似的部分,因而将省略对它们的重复描述。附图中所示的一些方框图是功能实体,不一定必须与物理或逻辑上独立的实体相对应。可以采用软件形式来实现这些功能实体,或在一个或多个硬件模块或集成电路中实现这些功能实体,或在不同网络和/或处理器装置和/或微控制器装置中实现这些功能实体。
在相关技术中,目前手机、平板电脑等具备摄像功能的智能终端设备中,光源检测和光谱识别大多是基于硅基传感器。在一些基于终端的多光谱图像摄像头来实现环境光的色温测量的方案中,需要首先对标准色板中的色块进行标定,得到每种颜色模块的多光谱数据,然后再改变环境光色温,获取不同色温下的色块多光谱数据,建立相关的数据库,在使用中根据采集的多光谱数据进行比对和分析,通过最小二乘法拟合使得数据回归,确定拍摄对象的反射函数和光源色温。这样的方案需要额外使用面阵传感器来实现,数据量大且功耗高,价格高而且在标定过程中需要使用均匀单一光源照射,实际应用场景中光源环境复杂无法满足,且只针对标准色板进行标定,对象较少,面对真实场景时容易失效。
针对上述的现有技术的缺点和不足,本示例实施方式中提供了一种色温检测方法,可以应用于装配有摄像头和色温传感器的手机、平板电脑以及智能手表等智能终端设备。参考图1中所示,上述的色温检测方法应用于终端设备,所述终端设备配置有摄像头和色温传感器;所述色温传感器的感光范围与所述摄像头的目标感光区域对应,具体可以包括以下步骤:
S11,利用所述色温传感器获取反射光在所述目标感光区域对应的第一色温数据;
S12,根据所述第一色温数据和预设的校正矩阵计算所述反射光对应的反射光谱;其中,所述校正矩阵用于标定所述色温传感器;
S13,根据预设的光谱数据库确定所述反射光谱对应的光源光谱,并基于所述光源光谱确定第二色温数据;其中,所述光谱数据库包括多种类型光源分别在多种单色场景下的光谱数据。
本示例实施方式所提供的色温检测方法中,通过预先配置色温传感器的感光范围和终端设备摄像头的目标感光区域相对应,一方面,可以利用色温传感器采集反射光在摄像头的目标感光区域的第一色温数据;通过第一色温数据和预设的校正矩阵便可以计算出反射光谱;另一方面,通过对反射光谱进行识别便可以确定准确的环境光谱,从而可以得到准确的第二色温数据。进而可以利用第二色温数据进行更加准确的白平衡调整,实现对图像色彩调节准确性的提升。
下面,将结合附图及实施例对本示例实施方式中的色温检测方法的各个步骤进行更详细的说明。
本示例实施方式中,上述的色温检测方法可以应用于手机、平板电脑、智能手表等装配有摄像头的智能终端设备。在终端设备上,保证摄像头与所述色温传感器设置在所述终端设备的同一装配平面上。
以手机为例,在手机的正面和/或背面可以装配有摄像头以及色温传感器。例如,参考图2所示,在手机的背板上装配有后置摄像头201,和色温传感器202。色温传感器202可以设置在后置摄像头201的下方;或者,色温传感器也可以设置在后置摄像头201的旁侧。参考图3所示,在手机的正面,在顶端装备有前置摄像头301,在前置摄像头的相邻位置可以设置有色温传感器302。其中,色温传感器可以采用硅基探测器,或者短波红外探测器。色温传感器的通道可以是RGB三通道,也可以是多通道,通道之间的间隔是随机的。各通道的滤光层可以采用吸收方式或者反射式。
当然,在一些示例性实施方式中,手机的背板上可以装配有多个摄像头,如图4、图5所示,例如同时装配有主摄像头、广角摄像头、深度摄像头等等;此时,色温传感器可以装配在最下方,或者某一个摄像头的一侧。或者,如图5所示,也可以为各主要的摄像头分别单独配置有一个色温传感器;如为主摄像头和广角摄像头分别配置一个色温传感器。
在终端设备上,仅需使色温传感器与摄像头在同一平面上即可;色温传感器可以与摄像头相邻设置,或者,也可以与摄像头相距较远的距离。对色温传感器与摄像头之间的距离不做特殊限定。
本示例实施方式中,对于终端设备上的色温传感器,可以预先利用不同的单色光源对所述色温传感器进行标定,构建对应的校正矩阵。具体来说,上述的方法可以包括:
步骤S101,通过单色仪发射单一波长的激光;
步骤S102,利用积分球对激光进行分光,一路分光输入光谱仪以获取波长矩阵,另一路分光输入色温传感器以获取原始光谱矩阵;
步骤S103,将所述波长矩阵和所述原始光谱矩阵进行叉乘运算,以获取校正矩阵。
具体的,参考图6所示的标定示意图,单色仪603发出只有单一波长的激光,而且该激光器的波长是可调谐的,调谐范围从可见光到短波红外。单色光入射到积分球601中,在积分球601中将入射激光进行均匀化处理后分成两路,一路被光谱仪测量602得到维度为m*1的相关波长矩阵A,另外一路被短波红外多光谱色温传感器604测量得到维度为n*1的原始数据矩阵S。相关波长矩阵A与矫正矩阵C、原始数据矩阵S之间的关系如下:
其中,校正矩阵C为维度m*n,它与多光谱色温传感器的原始数据矩阵S相乘得到光谱仪的相关波长矩阵A。
因此,通过光谱仪的相关波长矩阵A和多光谱色温传感器的原始数据矩阵S做叉乘就可以得到校正矩阵。其中,光谱仪的相关波长矩阵A用于描述波长的光谱对应的光强度;色温传感器的原始数据矩阵用于表示n个通道的响应。
在步骤S11中,利用所述色温传感器获取反射光在所述目标感光区域对应的第一色温数据。
本示例实施方式中,在终端设备上的色温传感器,可以对所述色温传感器的感光范围进行校准。具体来说,可以包括:
步骤S21,确定摄像头的感光范围,并在所述感光范围划定目标感光区域;
步骤S22,基于所述目标感光区域对色温传感器的感光范围进行校准,以使所述色温传感器的感光范围与所述目标感光区域对应。
具体而言,可以预先为色温传感器感光范围进行校准。例如,在终端设备上装配有多个摄像头时,可以预先为色温传感器与摄像头配置校准关系。例如,终端设备装配有三个后置摄像头,包括主摄像头、广角摄像头和深度摄像头;可以预先配置色温传感器与主摄像头的校准对应关系。在终端设备开机或者系统初始化时,便可以在后台执行校准。对于摄像头来说,可以首先确定其感光范围;例如,可根据摄像头的焦距、感光元件的硬件参数等数据来计算摄像头的感光范围。具体的,可以构建一坐标系,在坐标系中描述摄像头的感光范围,并在摄像头的感光范围内划定目标感光区域。例如,参考7所示,可以在摄像头的感光范围内的中心划定目标感光区域。另外,还可以预先配置目标感光区域的尺寸和形状。例如,可以配置目标感光区域的形状为矩形、圆形等形状;可以配置目标感光区域的尺寸为10nm、200nm等尺寸。
在划定目标感光区域后,便可以利用目标感光区域对色温传感器的感光范围进行校准,使色温传感器只会对目标感光区域进行感光。参考图7所示的场景,在对色温传感器进行感光区域校准后,光源S701照射在物体704上,经过物体704作用之后,进入摄像头702目标感光区域的反射光H进入色温传感器703。通过限制色温传感器的感光范围,可以保证物体反射率的单一性。从而避免实际应用场景中光源复杂时,反射率多样而增加计算的复杂度。
本示例实施方式中,在终端设备上,当用户在终端设备上点击相机控件,或者通过其他应用程序激活摄像功能时,同步触发激活色温传感器启动。在使用摄像头进行拍摄照片或视频时,色温传感器便可以采集在摄像头目标感光区域对应的物体的反射光的第一色温数据。其中,第一色温数据可以是色温传感器在n个通道的响应。具体的,第一色温数据可以是反射光的多个频谱波段各自对应的频谱通道值。
在步骤S12中,根据所述第一色温数据和预设的校正矩阵计算所述反射光对应的反射光谱;其中,所述校正矩阵用于标定所述色温传感器。
本示例实施方式中,在利用色温传感器获取原始色温数据后,便可以利用原始色温数据和上述的校正矩阵进行计算,得到反射光谱数据。具体的,在采集得到物体反射光到色温传感器后,就能得到当前物体反射光和色温传感器的卷积实测值矩阵S,利用上述的公式(1)将实测矩阵S和标定好的校正矩阵C进行相乘就可以得到当前物体反射光的光谱分布A。
在步骤S13中,利用预设的光谱数据库对所述反射光谱进行匹配以标定光源光谱,并基于所述光源光谱确定第二色温数据;其中,所述光谱数据库包括各类型光源在不同的单色场景下的光谱数据。
本示例实施方式中,可以预先构建一光谱数据库。该光谱数据库中可以包括不同光源在不同的单一颜色场景对应的光谱数据。例如,预设的光源类型可以包括:阳光、OLED、LED、白炽灯以及节能灯等光源。上述的单一颜色场景可以包括:赤、橙、黄、绿、青、蓝、紫的基础色彩;或者,还可以使用其他已知的色彩。具体的,可以将各类型的光源分别照射各单一颜色的纸张上,光谱仪采集对应的光谱数据,从而得到各类型光源在各单一颜色场景下的光谱数据。
在获取物体反射光的光谱分布后,便可以利用反射光的光谱分布与预设光谱数据库进行光谱曲线的匹配识别,确定光源类型和光源光谱。
具体的,参考图7所示的场景,光源S(λ)照射在物体上,物体的反射率函数为ρ(λ),经过物体作用之后反射光谱为光源光谱和物体反射函数的卷积,记为:
H(λ)=S(λ)*ρ(λ) (2)
基于该公式,已知反射光谱H(λ)的光谱分布(即上述的当前物体反射光的光谱分布A),在去除掉物体反射率ρ(λ)的影响,便可以得到光源S(λ)的光谱分布,即环境光的光谱分布;实现对光源光谱的识别。
通过光谱曲线匹配识别的方式对光源光谱进行识别和标定,构建R/G-B/G直方图,通过色温曲线获取色温在色度坐标系中的坐标,进行转换得到校正增益。通过对光谱曲线进行匹配识别确定光源类型,进而利用各通道的强度值进行当前环境光的CCT(CorrelatedColor Temperature,相关色温)计算,进而利用光源类型、色温实现更加准确的白平衡调节。
基于上述内容,在本公开一些示例性实施方式中,所述在所述感光范围划定目标感光区域,可以包括:在所述摄像头的感光范围内划定预设尺寸的中心感光区域,并将该中心感光区域配置为所述目标感光区域;或者在所述摄像头的感光范围内按预设尺寸随机划定所述目标感光区域。
举例来说,参考图8所示,在摄像头的感光范围内,也可以通过随机选择的方式来确定目标感光区域。例如,在摄像头的感光范围的边缘部分划定目标感光区域,或者在中心位置划定目标感光区域。例如,在进行色温检测时,可以使用两个不同的目标感光区域进行两次检测,得到两帧的检测结果;再根据两帧的色温检测结果判断差值的大小,再确定最终的色温检测结果。
在本公开一些示例性实施方式中,上述的方法还可以包括:
步骤S31,响应于对所述摄像头的控制操作,确定所述摄像头对应的当前拍摄模式;
步骤S32,基于拍摄模式与目标感光区域的预设对应关系,确定所述当前拍摄模式对应的目标感光区域参数;其中,所述目标感光区域参数包括目标感光区域区域位置和目标感光区域区域尺寸。
具体来说,可以预先配置拍摄模式、摄像头与目标感光区域之间的对应关系。在用户使用终端设备的拍摄功能时,在切换不同的拍摄模式时,例如在使用普通拍摄模式切换到广角模式或人像模式时,需要切换到其他的摄像头,此时可以对切换后的摄像头重新进行目标感光区域的校准。在不同拍摄模式下,终端设备需要使用不同的摄像头进行拍照。例如,在普通照相模式切换到广角拍摄模式时,需要从主摄像头切换到广角摄像头。在切换摄像头时,便可以重新选择目标感光区域。例如,可以预先配置终端设备的拍摄模式、对应使用的摄像头和目标感光区域参数之间的对应关系;配置在各摄像头使用不同的目标感光区域位置和目标感光区域的尺寸。例如,可以配置夜景模型的目标感光区域的尺寸大于普通拍摄模式下的目标感光区域尺寸;配置人像模式的目标感光区域的尺寸小于普通拍摄模型下的目标感光区域尺寸。从而使得在不同的拍摄模式下,可以获取更准确的色温数据。
或者,在一些拍摄模式下,需要同时使用多个摄像头时,可以仅利用指定摄像头的感光范围对色温传感器的感光范围进行校准。例如,在终端设备仅配置一个色温传感器的情况下,可以配置不同摄像之间色温传感器的优先级;例如,优先级由高至低依次为:主摄像头、超大像素摄像头、广角摄像头、深度摄像头。若当前拍摄模块使用多个摄像头时,则可以根据当前所使用的摄像头,根据预设的优先级顺序选定指定的摄像头,并利用该选定的摄像头进行感光区域的校准。
本公开实施例所提供的色温检测方法,在实际使用过程中,首先会确定成像摄像头的感光范围,然后再把色温传感器的感光范围进行校准,使它只会对成像摄像头的目标区域感光,例如中心区域;这样光源照射在物体上,经过物体作用之后反射光谱为光源光谱和物体反射函数的卷积。目标感光区域的反射光经过镜头传播进入多色温传感器中得到原始数据,原始数据和校正矩阵进行相乘就可以得到物体的反射光谱。反射光的光谱分布是物体反射率和光源相互作用的结果;其中,由于色温传感器感光范围的限制保证了物体反射率的单一性,因此接下来会根据大量采集的单色场景下的色温传感器数据构建的光谱数据库进行光谱曲线的匹配识别,也就是光源识别,这样去除掉物体反射率的影响就可以得到光源的光谱信息。当完成光源识别后,最终回归到已标定该光源的R/G和B/G,实现更加准确的AWB和更好的色彩表现。进而实现白平衡提升和色彩改善。本公开了的方案,拓展了成像摄像头的色温探测范围,从可见光到近红外到短波红外;给出了在不同复杂光照环境下的光谱重构实现方式,即在不同常光照下,图像传感器只对各个通道进行读取,通过标准单色仪进行校准得到光谱重构的校准矩阵,通过校准矩阵实现光源和物体卷积光线的光谱更为精准的重构,提升白平衡表现和色彩准确性。在面对大面积纯色的拍摄场景下可以实现更准确的响应度和更高的终端光谱重构功能。
需要注意的是,上述附图仅是根据本发明示例性实施例的方法所包括的处理的示意性说明,而不是限制目的。易于理解,上述附图所示的处理并不表明或限制这些处理的时间顺序。另外,也易于理解,这些处理可以是例如在多个模块中同步或异步执行的。
进一步的,参考图9所示,本示例的实施方式中还提供一种色温检测装置90,应用于终端设备,所述终端设备配置有摄像头和色温传感器;所述色温传感器的感光范围与所述摄像头的目标感光区域对应。所述装置90包括:原始色温数据获取模块901、反射光谱计算模块902、第二色温数据获取模块903。其中,
所述原始色温数据获取模块901可以用于利用所述色温传感器获取反射光在所述目标感光区域对应的第一色温数据。
所述反射光谱计算模块902可以用于根据所述第一色温数据和预设的校正矩阵计算所述反射光对应的反射光谱;其中,所述校正矩阵用于标定所述色温传感器。
所述第二色温数据获取模块903可以用于利用预设的光谱数据库对所述反射光谱进行匹配以标定光源光谱,并基于所述光源光谱确定第二色温数据;其中,所述光谱数据库包括各类型光源在不同的单色场景下的光谱数据。
在本公开的一种示例中,所述装置90还可以包括:色温传感器标定模块。
所述色温传感器标定模块可以用于利用单色光源对所述色温传感器进行标定的方式构建校正矩阵。
在本公开的一种示例中,所述色温传感器标定模块可以包括:通过单色仪发射单一波长的激光;利用积分球对激光进行分光,一路分光输入光谱以获取波长矩阵,一波分光输入色温传感器以获取原始光谱矩阵;将所述波长矩阵和所述原始光谱矩阵进行叉乘运算,以获取校正矩阵。
在本公开的一种示例中,所述装置90还可以包括:感光范围校准模块。
所述感光范围校准模块可以用于预先对所述色温传感器的感光范围进行校准,包括:确定摄像头的感光范围,并在所述感光范围划定目标感光区域;基于所述目标感光区域对色温传感器的感光范围进行校准,以使所述色温传感器的感光范围与所述目标感光区域对应。
在本公开的一种示例中,所述感光范围校准模块还可以包括:在所述摄像头的感光范围内划定预设尺寸的中心感光区域,并将该中心感光区域配置为所述目标感光区域;或者在所述摄像头的感光范围内按预设尺寸随机划定所述目标感光区域。
在本公开的一种示例中,所述装置90还可以包括:校准响应控制模块。
所述校准响应控制模块可以用于响应于对所述摄像头的控制操作,确定所述摄像头对应的当前拍摄模式;基于拍摄模式与目标感光区域的预设对应关系,确定所述当前拍摄模式对应的目标感光区域参数;其中,所述目标感光区域参数包括校准区域位置和校准区域尺寸。
在本公开的一种示例中,所述摄像头与所述色温传感器设置在所述终端设备的同一装配平面上。
上述的色温检测装置中各模块的具体细节已经在对应的色温检测方法中进行了详细的描述,因此此处不再赘述。
应当注意,尽管在上文详细描述中提及了用于动作执行的设备的若干模块或者单元,但是这种划分并非强制性的。实际上,根据本公开的实施方式,上文描述的两个或更多模块或者单元的特征和功能可以在一个模块或者单元中具体化。反之,上文描述的一个模块或者单元的特征和功能可以进一步划分为由多个模块或者单元来具体化。
图10示出了适于用来实现本发明实施例的电子设备的示意图。
需要说明的是,图10示出的电子设备1000仅是一个示例,不应对本公开实施例的功能和使用范围带来任何限制。
如图10所示,电子设备1000包括中央处理单元(Central Processing Unit,CPU)1001,其可以根据存储在只读存储器(Read-Only Memory,ROM)1002中的程序或者从储存部分1008加载到随机访问存储器(Random Access Memory,RAM)1003中的程序而执行各种适当的动作和处理。在RAM 1003中,还存储有系统操作所需的各种程序和数据。CPU 1001、ROM1002以及RAM 1003通过总线1004彼此相连。输入/输出(Input/Output,I/O)接口1005也连接至总线1004。
以下部件连接至I/O接口1005:包括键盘、鼠标等的输入部分1006;包括诸如阴极射线管(Cathode Ray Tube,CRT)、液晶显示器(Liquid Crystal Display,LCD)等以及扬声器等的输出部分1007;包括硬盘等的储存部分1008;以及包括诸如LAN(Local AreaNetwork,局域网)卡、调制解调器等的网络接口卡的通信部分1009。通信部分1009经由诸如因特网的网络执行通信处理。驱动器1010也根据需要连接至I/O接口1005。可拆卸介质1011,诸如磁盘、光盘、磁光盘、半导体存储器等等,根据需要安装在驱动器1010上,以便于从其上读出的计算机程序根据需要被安装入储存部分1008。
电子设备100还可以包括至少一个色温传感器,至少一个摄像头。所述色温传感器的感光范围与所述摄像头的目标感光区域对应。举例来说,上述的电子设备可以是智能穿戴设备、智能终端等,例如智能手表或者手机等电子设备。
特别地,根据本发明的实施例,下文参考流程图描述的过程可以被实现为计算机软件程序。例如,本发明的实施例包括一种计算机程序产品,其包括承载在计算机可读介质上的计算机程序,该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中,该计算机程序可以通过通信部分1009从网络上被下载和安装,和/或从可拆卸介质1011被安装。在该计算机程序被中央处理单元(CPU)1001执行时,执行本申请的系统中限定的各种功能。
具体来说,上述的电子设备可以是手机、平板电脑或者笔记本电脑等智能移动终端设备。或者,上述的电子设备也可以是台式电脑等智能终端设备。
需要说明的是,本发明实施例所示的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(Erasable Programmable Read Only Memory,EPROM)、闪存、光纤、便携式紧凑磁盘只读存储器(Compact Disc Read-Only Memory,CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本发明中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本发明中,计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括但不限于:无线、有线等等,或者上述的任意合适的组合。
附图中的流程图和框图,图示了按照本发明各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,上述模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图或流程图中的每个方框、以及框图或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
描述于本发明实施例中所涉及到的单元可以通过软件的方式实现,也可以通过硬件的方式来实现,所描述的单元也可以设置在处理器中。其中,这些单元的名称在某种情况下并不构成对该单元本身的限定。
需要说明的是,作为另一方面,本申请还提供了一种计算机可读介质,该计算机可读介质可以是上述实施例中描述的电子设备中所包含的;也可以是单独存在,而未装配入该电子设备中。上述计算机可读介质承载有一个或者多个程序,当上述一个或者多个程序被一个该电子设备执行时,使得该电子设备实现如下述实施例中所述的方法。例如,所述的电子设备可以实现如图1所示的各个步骤。
此外,上述附图仅是根据本发明示例性实施例的方法所包括的处理的示意性说明,而不是限制目的。易于理解,上述附图所示的处理并不表明或限制这些处理的时间顺序。另外,也易于理解,这些处理可以是例如在多个模块中同步或异步执行的。
此外,上述附图仅是根据本发明示例性实施例的方法所包括的处理的示意性说明,而不是限制目的。易于理解,上述附图所示的处理并不表明或限制这些处理的时间顺序。另外,也易于理解,这些处理可以是例如在多个模块中同步或异步执行的。
本领域技术人员在考虑说明书及实践这里公开的发明后,将容易想到本公开的其他实施例。本申请旨在涵盖本公开的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本公开的真正范围和精神由权利要求指出。
应当理解的是,本公开并不局限于上面已经描述并在附图中示出的精确结构,并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求来限。
Claims (10)
1.一种色温检测方法,其特征在于,应用于终端设备,所述终端设备配置有摄像头和色温传感器;所述色温传感器的感光范围与所述摄像头的目标感光区域对应;所述方法包括:
利用所述色温传感器获取反射光在所述目标感光区域对应的第一色温数据;
根据所述第一色温数据和预设的校正矩阵计算所述反射光对应的反射光谱;其中,所述校正矩阵用于标定所述色温传感器;
根据预设的光谱数据库确定所述反射光谱对应的光源光谱,并基于所述光源光谱确定第二色温数据;其中,所述光谱数据库包括多种类型光源分别在多种单色场景下的光谱数据。
2.根据权利要求1所述的色温检测方法,其特征在于,所述校正矩阵利用单色光源对所述色温传感器进行标定的方式构建。
3.根据权利要求2所述的色温检测方法,其特征在于,所述利用单色光源对所述色温传感器进行标定以构建所述校正矩阵,包括:
通过单色仪发射单一波长的激光;
利用积分球对激光进行分光,一路分光输入光谱仪以获取波长矩阵,另一路分光输入色温传感器以获取原始光谱矩阵;
将所述波长矩阵和所述原始光谱矩阵进行叉乘运算,以获取校正矩阵。
4.根据权利要求1所述的色温检测方法,其特征在于,所述方法还包括:
对所述色温传感器的感光范围进行校准,包括:
确定摄像头的感光范围,并在所述感光范围划定目标感光区域;
基于所述目标感光区域对色温传感器的感光范围进行校准,以使所述色温传感器的感光范围与所述目标感光区域对应。
5.根据权利要求4所述的色温检测方法,其特征在于,所述在所述感光范围划定目标感光区域,包括:
在所述摄像头的感光范围内划定预设尺寸的中心感光区域,并将该中心感光区域配置为所述目标感光区域;或者
在所述摄像头的感光范围内按预设尺寸随机划定所述目标感光区域。
6.根据权利要求1或4所述的色温检测方法,其特征在于,所述方法还包括:
响应于对所述摄像头的控制操作,确定所述摄像头对应的当前拍摄模式;
基于拍摄模式与目标感光区域的预设对应关系,确定所述当前拍摄模式对应的目标感光区域参数;其中,所述目标感光区域参数包括目标感光区域区域位置和目标感光区域区域尺寸。
7.根据权利要求1所述的色温检测方法,其特征在于,所述摄像头与所述色温传感器设置在所述终端设备的同一装配平面上。
8.一种色温检测装置,其特征在于,应用于终端设备,所述终端设备配置有摄像头和色温传感器;所述色温传感器的感光范围与所述摄像头的目标感光区域对应;所述装置包括:
第一色温数据获取模块,用于利用所述色温传感器获取反射光在所述目标感光区域对应的第一色温数据;
反射光谱计算模块,用于根据所述第一色温数据和预设的校正矩阵计算所述反射光对应的反射光谱;其中,所述校正矩阵用于标定所述色温传感器;
第二色温数据获取模块,用于根据预设的光谱数据库确定所述反射光谱对应的光源光谱,并基于所述光源光谱确定第二色温数据;其中,所述光谱数据库包括多种类型光源分别在多种单色场景下的光谱数据。
9.一种计算机可读介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1至7中任一项所述的色温检测方法。
10.一种终端设备,其特征在于,包括:
色温传感器;
摄像头;
一个或多个处理器;
存储装置,用于存储一个或多个程序,当所述一个或多个程序被所述一个或多个处理器执行时,使得所述一个或多个处理器实现如权利要求1至7中任一项所述的色温检测方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111518317.0A CN114216573B (zh) | 2021-12-13 | 2021-12-13 | 色温检测方法及装置、计算机可读介质、电子设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111518317.0A CN114216573B (zh) | 2021-12-13 | 2021-12-13 | 色温检测方法及装置、计算机可读介质、电子设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN114216573A true CN114216573A (zh) | 2022-03-22 |
CN114216573B CN114216573B (zh) | 2023-12-19 |
Family
ID=80701326
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202111518317.0A Active CN114216573B (zh) | 2021-12-13 | 2021-12-13 | 色温检测方法及装置、计算机可读介质、电子设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114216573B (zh) |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104168468A (zh) * | 2013-11-08 | 2014-11-26 | 深圳市中兴移动通信有限公司 | 白平衡调整方法和装置 |
WO2019047077A1 (zh) * | 2017-09-06 | 2019-03-14 | 深圳传音通讯有限公司 | 终端白平衡处理方法、终端及计算机可读存储介质 |
CN113194303A (zh) * | 2021-06-29 | 2021-07-30 | 深圳小米通讯技术有限公司 | 图像白平衡方法、装置、电子设备和计算机可读存储介质 |
CN113639881A (zh) * | 2021-08-23 | 2021-11-12 | Oppo广东移动通信有限公司 | 色温测试方法及装置、计算机可读介质和电子设备 |
-
2021
- 2021-12-13 CN CN202111518317.0A patent/CN114216573B/zh active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104168468A (zh) * | 2013-11-08 | 2014-11-26 | 深圳市中兴移动通信有限公司 | 白平衡调整方法和装置 |
WO2019047077A1 (zh) * | 2017-09-06 | 2019-03-14 | 深圳传音通讯有限公司 | 终端白平衡处理方法、终端及计算机可读存储介质 |
CN113194303A (zh) * | 2021-06-29 | 2021-07-30 | 深圳小米通讯技术有限公司 | 图像白平衡方法、装置、电子设备和计算机可读存储介质 |
CN113639881A (zh) * | 2021-08-23 | 2021-11-12 | Oppo广东移动通信有限公司 | 色温测试方法及装置、计算机可读介质和电子设备 |
Also Published As
Publication number | Publication date |
---|---|
CN114216573B (zh) | 2023-12-19 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
WO2021238843A1 (zh) | 一种基于多光谱图像探测技术的环境色温测试方法及系统 | |
Pierson et al. | Tutorial: luminance maps for daylighting studies from high dynamic range photography | |
CN110166704B (zh) | 多光谱相机的校准方法及装置 | |
JP6516691B2 (ja) | コンパクトな分光計 | |
EP1583371A1 (en) | Light source estimating device, light source estimating method, and imaging device and image processing method | |
Nixon et al. | Accurate device-independent colorimetric measurements using smartphones | |
US20160371839A1 (en) | Color calibration method of camera module | |
US20070177230A1 (en) | Methods and apparatuses for determining a color calibration for different spectral light inputs in an imaging apparatus measurement | |
CN105577982A (zh) | 一种图像处理的方法及终端 | |
Tominaga et al. | Spectral imaging by synchronizing capture and illumination | |
CN110514304B (zh) | 一种面阵色度测量装置及方法 | |
CN113639881A (zh) | 色温测试方法及装置、计算机可读介质和电子设备 | |
Maksimainen et al. | Calculation of mesopic luminance using per pixel S/P ratios measured with digital imaging | |
Trumpy et al. | A multispectral design for a new generation of film scanners | |
Fliegel et al. | Imaging photometer with a non-professional digital camera | |
CN114216573B (zh) | 色温检测方法及装置、计算机可读介质、电子设备 | |
WO2018028165A1 (zh) | 一种终端及其制造工艺 | |
Deeb et al. | Spectral reflectance estimation from one RGB image using self-interreflections in a concave object | |
CN111258063A (zh) | Hud环境光信号与pwm占空比转化方法、终端设备及存储介质 | |
Scheeline | Smartphone technology–instrumentation and applications | |
Tian et al. | Automatically designing an image processing pipeline for a five-band camera prototype using the local, linear, learned (L3) method | |
Manakov | Evaluation of computational radiometric and spectral sensor calibration techniques | |
McCann et al. | Chromaticity limits in color constancy calculations | |
Kordecki et al. | A study of vignetting correction methods in camera colorimetric calibration | |
JP5120936B2 (ja) | 画像処理装置および画像処理方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |