CN111275725B - 图像的色温与色调的确定方法及装置、存储介质、终端 - Google Patents

Abstract

一种图像的色温与色调的确定方法及装置、存储介质、终端，所述方法包括：提供待处理图像，确定所述待处理图像中多个统计块的RGB值，然后将各个统计块定标至预设的色温‑色调坐标系；确定所述待处理图像在所述色温‑色调坐标系中的综合基本色温与综合基本色调；确定所述待处理图像中是否存在至少一张人脸；如果存在有至少一张人脸，则确定各个统计块是否为肤色块；如果存在有一个或多个肤色块，则判断所述肤色块是否属于有效人脸；如果存在一个或多个人脸统计块，则确定所有的人脸统计块在所述色温‑色调坐标系中的综合人脸色温与综合人脸色调；确定所述待处理图像待采用的色温，确定所述待处理图像待采用的色调。本发明可以提高图像的质量。

Description

图像的色温与色调的确定方法及装置、存储介质、终端

技术领域

本发明涉及计算机技术领域，尤其涉及一种图像的色温与色调的确定方法及装置、存储介质、终端。

背景技术

目前，摄像机(Camera)在多个领域已成为必不可少的一部分，如智能终端，监控领域，安防领域等。

具体地，在拥有Camera且需要抓取有色彩信息的图片或视频的电子设备中，从Camera模组端获取到的图像数据往往需要搭配适当的图像处理方法，例如采用精准的白平衡算法，才可平衡和保证Camera所摄图片与现实人眼视觉之间色彩差异较小问题。例如，采用适当的图像处理方法以实现前后摄拍照，录视频等。为了有更加接近真实色彩的效果表现，可以根据具体情况采用适当的图像处理方法，为带有Camera的电子设备提供更加精准和稳定的色彩表现。

然而在现有的图像处理方法中，对于图像中的人脸的色温和色调的处理精细化不足，容易发生色彩异常。

发明内容

本发明解决的技术问题是提供一种图像的色温与色调的确定方法及装置、存储介质、终端，可以在图像处理的过程中，载入人脸的色温、色调的信息，从而针对相同的环境下，根据有无人人脸做出精细化的效果区分，提高图像的质量。

为解决上述技术问题，本发明实施例提供一种图像的色温与色调的确定方法，包括以下步骤：提供待处理图像，确定所述待处理图像中多个统计块的RGB值，然后根据各个统计块的RGB值，将各个统计块定标至预设的色温-色调坐标系；确定所述待处理图像在所述色温-色调坐标系中的综合基本色温与综合基本色调；确定所述待处理图像中是否存在至少一张人脸；如果存在有至少一张人脸，则确定各个统计块是否为肤色块，其中，所述肤色块的颜色为肤色；如果存在有一个或多个肤色块，则判断所述肤色块是否属于有效人脸，并记录所述属于有效人脸的肤色块为人脸统计块；如果存在一个或多个人脸统计块，则确定所有的人脸统计块在所述色温-色调坐标系中的综合人脸色温与综合人脸色调；根据所述综合基本色温与综合人脸色温，确定所述待处理图像待采用的色温，并且根据所述综合基本色调与综合人脸色调，确定所述待处理图像待采用的色调。

可选的，所述待处理图像被分为M×N个统计块，M、N为正整数，且M≥2，N≥2；确定所述待处理图像中多个统计块的RGB值包括：在标准光源下采用灰卡原图，对各个统计块进行RGB三通道数值提取，以得到所述各个统计块的RGB值。

可选的，所述预设的色温-色调坐标系为色温-色调映射坐标系；根据各个统计块的RGB值，将各个统计块定标至预设的色温-色调坐标系包括：根据各个统计块的RGB值，确定各个统计块在色温-色调标准坐标系的标准色温以及标准色调；根据各个统计块的标准色温以及标准色调，采用下述公式，确定各个统计块在所述色温-色调映射坐标系的映射色温以及映射色调；

Lrs＝Lr；

Lbs＝a*Lr+(1-a)*Lb；

其中，Lrs用于表示映射色温，Lbs用于表示映射色调，Lr用于表示标准色温，Lb用于表示标准色调，a用于表示色调权重值。

可选的，采用下述公式，根据各个统计块的RGB值，确定各个统计块的标准色温以及标准色调：

其中，R[i]用于表示第i个统计块的R值，G[i]用于表示第i个统计块的G值，B[i]用于表示第i个统计块的B值，Lr[i]用于表示第i个统计块的标准色温，Lb[i]用于表示第i个统计块的标准色调。

可选的，确定所述待处理图像在所述色温-色调坐标系中的综合基本色温与综合基本色调包括：采用硬件统计模块统计所述待处理图像中的白点在所述色温-色调坐标系中的落点位置，并且根据所述落点位置确定所述综合基本色温与综合基本色调。

可选的，确定所述待处理图像中是否存在至少一张人脸包括：采用人脸检测算法对所述待处理图像中是否存在人脸进行检测；当检测到存在至少一张人脸时，采用所述人脸检测算法确定每张人脸的坐标位置。

可选的，确定各个统计块是否为肤色块包括：根据各个统计块的RGB值确定各个统计块的亮度Y、蓝色的浓度偏移量Cb以及红色的浓度偏移量Cr；针对每个统计块，根据所述统计块的Cb位于预设的蓝色偏移量范围内、并且Cr位于预设的红色偏移量范围内，确定所述统计块为所述肤色块。

可选的，所述预设的色温-色调坐标系为色温-色调映射坐标系；确定各个统计块是否为肤色块包括：确定各个统计块在所述色温-色调映射坐标系的映射色温以及映射色调；针对每个统计块，根据所述统计块的映射色温位于预设的映射色温范围内、并且映射色调位于预设的映射色调范围内，确定所述统计块为所述肤色块。

可选的，在对所述预设的色温-色调坐标系标定的过程中加入预设色卡的至少两个色块，以建立所述预设色卡中的每种颜色与所述预设的色温-色调坐标系的坐标之间的映射关系；确定各个统计块是否为肤色块包括：根据各个统计块的RGB值，确定各个统计块在所述预设的色温-色调坐标系的坐标；根据每个统计块在所述预设的色温-色调坐标系的坐标，判断所述统计块的在所述预设色卡中的颜色，并确定是否为肤色块；其中，所述预设色卡中包含有一个或多个预定义的肤色色块。

可选的，判断所述肤色块是否属于有效人脸包括：针对每个肤色块，确定所述肤色块是否属于人脸；如果存在肤色块属于人脸，则确定包含有肤色块的人脸的数量；如果所述包含有肤色块的人脸的数量位于预设数量范围内，则判断所述包含有肤色块的各个人脸为有效人脸。

可选的，判断所述肤色块是否属于有效人脸包括：针对每个肤色块，确定所述肤色块是否属于人脸；对于每个属于人脸的肤色块，判断所属的人脸的面积占所述待处理图像的面积的比例；如果所属比例位于预设面积占比范围内，则判断所述肤色块所属的人脸为有效人脸。

可选的，确定所有的人脸统计块在所述色温-色调坐标系中的综合人脸色温与综合人脸色调包括：确定所述有效人脸的数量；如果所述有效人脸的数量等于1，则根据所述预设的色温-色调坐标系确定该有效人脸的综合人脸色温和综合人脸色调。

可选的，确定所有的人脸统计块在所述色温-色调坐标系中的综合人脸色温与综合人脸色调包括：确定所述有效人脸的数量；如果所述有效人脸的数量≥2，则根据每张有效人脸包含的人脸统计块在所述预设的色温-色调坐标系的色温和色调，确定该有效人脸的个体人脸色温和个体人脸色调；确定每张人脸的人脸权重值；根据所述每张人脸的人脸权重值、每张人脸的个体人脸色温和个体人脸色调，通过加权运算得到所述综合人脸色温与综合人脸色调。

可选的，所述人脸权重值根据以下一个或多个参数的加权运算结果确定：所述综合基本色温、所述综合基本色调、所述待处理图像的亮度、每张人脸的面积占所述待处理图像的面积的比例。

可选的，根据所述综合基本色温与综合人脸色温，确定所述待处理图像待采用的色温，并且根据所述综合基本色调与综合人脸色调，确定所述待处理图像待采用的色调包括：确定综合权重值；采用下述公式，确定所述待处理图像待采用的色温和色调：

final_awb_lrs＝basic_lrs*(1-face_weight)+face_lrs*face_weight；

final_awb_lbs＝basic_lbs*(1-face_weight)+face_lbs*face_weight；

其中，final_awb_lrs表示所述待处理图像采用的色温，final_awb_lbs表示所述待处理图像采用的色调，basic_lrs表示所述综合基本色温，basic_lbs表示所述综合基本色调，face_lrs表示所述综合人脸色温，face_lbs表示所述综合人脸色调，face_weight表示所述综合权重值。

可选的，所述综合权重值根据以下一个或多个参数的加权运算结果确定：所述待处理图像的亮度、所述至少一张人脸的面积占所述待处理图像的面积的比例。

可选的，所述待处理图像属于连续的视频，所述图像的色温与色调的确定方法还包括：从所述连续的视频中获取所述待处理图像的前面一帧或多帧图像，记为前帧图像；和/或，从所述连续的视频中获取所述待处理图像的后面一帧或多帧图像，记为后帧图像；对所述待处理图像待采用的色温、前帧图像以及后帧图像的色温进行加权运算，以得到所述待处理图像最终采用的色温；对所述待处理图像待采用的色调、前帧图像以及后帧图像的色调进行加权运算，以得到所述待处理图像最终采用的色调。

为解决上述技术问题，本发明实施例提供一种图像的色温与色调的确定装置，包括：定标模块，适于提供待处理图像，确定所述待处理图像中多个统计块的RGB值，然后根据各个统计块的RGB值，将各个统计块定标至预设的色温-色调坐标系；基本色温-色调确定模块，适于确定所述待处理图像在所述色温-色调坐标系中的综合基本色温与综合基本色调；人脸确定模块，适于确定所述待处理图像中是否存在至少一张人脸；肤色块确定模块，适于如果存在有至少一张人脸，则确定各个统计块是否为肤色块，其中，所述肤色块的颜色为肤色；人脸统计块确定模块，适于如果存在有一个或多个肤色块，则判断所述肤色块是否属于有效人脸，并记录所述属于有效人脸的肤色块为人脸统计块；人脸色温-色调确定模块，适于如果存在一个或多个人脸统计块，则确定所有的人脸统计块在所述色温-色调坐标系中的综合人脸色温与综合人脸色调；色温-色调确定模块，适于根据所述综合基本色温与综合人脸色温，确定所述待处理图像待采用的色温，并且根据所述综合基本色调与综合人脸色调，确定所述待处理图像待采用的色调。

为解决上述技术问题，本发明实施例提供一种存储介质，其上存储有计算机指令，所述计算机指令运行时执行上述图像的色温与色调的确定方法的步骤。

为解决上述技术问题，本发明实施例提供一种终端，包括存储器和处理器，所述存储器上存储有能够在所述处理器上运行的计算机指令，所述处理器运行所述计算机指令时执行上述图像的色温与色调的确定方法的步骤。

与现有技术相比，本发明实施例的技术方案具有以下有益效果：

在本发明实施例中，通过设置预设的色温-色调坐标系，并且先确定所述待处理图像在所述色温-色调坐标系中的综合基本色温与综合基本色调，再在图像中存在人脸的情况下，确定各个统计块是否为肤色块，并对于属于有效人脸的肤色块，确定在所述色温-色调坐标系中的综合人脸色温与综合人脸色调，最后确定所述待处理图像待采用的色温以及色调。采用本发明实施例的方案，可以通过确定是否存在人脸、判断是否有肤色块以及所述肤色块是否属于有效人脸，可以在图像处理的过程中，载入人脸的色温、色调的信息，从而针对相同的环境下，根据有无人人脸做出精细化的效果区分，提高图像的质量。

进一步，通过确定色温-色调映射坐标系，并且设置色温-色调映射坐标系至色温-色调映射坐标系的变换公式，可以实现对各个统计块的定标步骤，从而有机会在各个光源下标定建立一种特殊的白平衡Lrs Lbs坐标系，通过设置适当的色调权重值，使得白平衡落点效果更加直观。

进一步，采用硬件统计模块统计所述待处理图像中的白点在所述色温-色调坐标系中的落点位置，并且根据所述落点位置确定所述综合基本色温与综合基本色调，可以在不考虑人脸的色温、色调的情况下，确定待处理图像的综合基本色温与综合基本色调，从而在没有人脸时予以采用。

进一步，采用人脸检测算法对所述待处理图像中是否存在人脸进行检测；当检测到存在至少一张人脸时，采用所述人脸检测算法确定每张人脸的坐标位置。采用本发明实施例的方案，可以在检测到人脸时，再采用后续步骤载入人脸的色温、色调的信息，从而针对相同的环境下，根据有无人人脸做出精细化的效果区分，并且在未检测到人脸时，采用所述待处理图像的综合基本色温与综合基本色调。

进一步，通过各个统计块的亮度Y、蓝色的浓度偏移量Cb以及红色的浓度偏移量Cr确定所述统计块是否为所述肤色块，可以采用现有技术中成熟度较高的肤色判断方式进行判断，提高确定所述统计块是否为所述肤色块的准确性和可靠性。

进一步，根据所述统计块的映射色温位于预设的映射色温范围内、并且映射色调位于预设的映射色调范围内，确定所述统计块为所述肤色块，相比于向映射色温、映射色调转换至别的参数，再进行判断，有助于提高判断效率，减少运算量。

进一步，在对所述预设的色温-色调坐标系标定的过程中加入预设色卡的至少两个色块，以建立所述预设色卡中的每种颜色与所述预设的色温-色调坐标系的坐标之间的映射关系后，可以根据每个统计块在所述预设的色温-色调坐标系的坐标，判断所述统计块的在所述预设色卡中的颜色，并确定是否为肤色块，通过预先建立色卡的对应关系，可以实现高效、直观地对肤色块进行判断。

进一步，针对每个肤色块，确定所述肤色块是否属于人脸，并在包含有肤色块的人脸的数量位于预设数量范围内，则判断所述包含有肤色块的各个人脸为有效人脸，可以在肤色块其实属于色彩接近人脸的其他物品时，避免图片处理过程中受其影响，进而提高成像质量。

进一步，对于每个属于人脸的肤色块，判断所属的人脸的面积占所述待处理图像的面积的比例，如果位于预设面积占比范围内，则判断所述肤色块所属的人脸为有效人脸，可以在肤色块所属的人脸面积特别小或特别大时，避免图片处理过程中受其影响，进而提高成像质量。

进一步，当有效人脸的数量≥2时，通过确定每张人脸的人脸权重值；根据所述每张人脸的人脸权重值、每张人脸的个体人脸色温和个体人脸色调，通过加权运算得到所述综合人脸色温与综合人脸色调，可以得到待处理图片中所有有效人脸的综合人脸色温与综合人脸色调这一单一数值，有助于提高后续处理中的计算效率。

进一步，确定综合权重值；进而采用公式确定所述所述待处理图像待采用的色温和色调，可以在图像处理的过程中，载入人脸的色温、色调的信息，从而针对相同的环境下，根据有无人人脸做出精细化的效果区分，提高图像的质量。

附图说明

图1是本发明实施例中一种图像的色温与色调的确定方法；

图2是本发明实施例中一种标准色温-标准色调坐标系的示意图；

图3是本发明实施例中一种色温-色调映射坐标系的示意图；

图4是本发明实施例中一种图像的色温与色调的确定装置的结构示意图。

具体实施方式

如前所述，在拥有Camera且需要抓取有色彩信息的图片或视频的电子设备中，白平衡矫正的算法已较为普遍存在且必不可少。例如，很多Camera白平衡算法广泛用于智能手机设备中。用以实现前后摄拍照，录视频等。为了有更加接近真实色彩的效果表现，各家白平衡算法也各不相同。但是最终都意在给带有Camera的电子设备提供更加精准和稳定的色彩表现。

然而在现有的图像处理方法中，对于图像中的人脸的色温和色调的处理精细化不足，容易发生色彩异常。

本发明的发明人经过研究发现，在现有的白平衡算法方案中，实际融入人脸(Face)信息作为输入的计算方法较少，大多未载入人脸信息作为重要的输入源。所以针对同个环境下有无人人脸难以做出精细化的效果区分并设置喜好。进一步地，即使部分算法考虑到人脸信息，但是并未针对和考虑到多种肤色之间的色彩表现差异做出区分，在实际应用中，往往会存在不同人种使用该带有Camera的电子设备时，无法精确的做出区分并还原色彩。

在本发明实施例中，通过设置预设的色温-色调坐标系，并且先确定所述待处理图像在所述色温-色调坐标系中的综合基本色温与综合基本色调，再在图像中存在人脸的情况下，确定各个统计块是否为肤色块，并对于属于有效人脸的肤色块，确定在所述色温-色调坐标系中的综合人脸色温与综合人脸色调，最后确定所述待处理图像待采用的色温以及色调。采用本发明实施例的方案，可以通过确定是否存在人脸、判断是否有肤色块以及所述肤色块是否属于有效人脸，可以在图像处理的过程中，载入人脸的色温、色调的信息，从而针对相同的环境下，根据有无人人脸做出精细化的效果区分，提高图像的质量。

为使本发明的上述目的、特征和有益效果能够更为明显易懂，下面结合附图对本发明的具体实施例做详细的说明。

参照图1，图1是本发明实施例中一种图像的色温与色调的确定方法。所述方法可以包括步骤S11至步骤S17：

步骤S11：提供待处理图像，确定所述待处理图像中多个统计块的RGB值，然后根据各个统计块的RGB值，将各个统计块定标至预设的色温-色调坐标系；

步骤S12：确定所述待处理图像在所述色温-色调坐标系中的综合基本色温与综合基本色调；

步骤S13：确定所述待处理图像中是否存在至少一张人脸；

步骤S14：如果存在有至少一张人脸，则确定各个统计块是否为肤色块，其中，所述肤色块的颜色为肤色；

步骤S15：如果存在有一个或多个肤色块，则判断所述肤色块是否属于有效人脸，并记录所述属于有效人脸的肤色块为人脸统计块；

步骤S16：如果存在一个或多个人脸统计块，则确定所有的人脸统计块在所述色温-色调坐标系中的综合人脸色温与综合人脸色调；

步骤S17：根据所述综合基本色温与综合人脸色温，确定所述待处理图像待采用的色温，并且根据所述综合基本色调与综合人脸色调，确定所述待处理图像待采用的色调。

在步骤S11的具体实施中，可以对待处理图像进行分块，例如采用8×8、64×64的方式分割为多个统计块，然后确定各个统计块的RGB值。

进一步地，所述待处理图像被分为M×N个统计块，M、N为正整数，且M≥2，N≥2；确定所述待处理图像中多个统计块的RGB值包括：在标准光源下采用灰卡原图，对各个统计块进行RGB三通道数值提取，以得到所述各个统计块的RGB值。

在具体实施中，可以定标各个光源，进而计算标准光源下灰卡原始(Raw)图红蓝绿(RBG)统计。其中，标准光源可以主要定标多种光源(如D65,TL84,CWF,A,H)下的标准灰卡或色卡，例如可以是中性18％灰卡,及标准爱色丽24色卡。

进一步地，根据各个统计块的RGB值，将各个统计块定标至预设的色温-色调坐标系的步骤可以包括：根据各个统计块的RGB值，确定各个统计块在色温-色调标准坐标系的标准色温以及标准色调；根据各个统计块的标准色温以及标准色调，确定各个统计块在所述色温-色调映射坐标系的映射色温以及映射色调。

参照图2，图2是本发明实施例中一种标准色温-标准色调坐标系的示意图。所述图2示出了多种标准光源(如D65,TL84,CWF,A,H)下，R/G、B/G的分布。

其中，可以采用下述公式，根据各个统计块的RGB值，确定各个统计块的标准色温以及标准色调：

其中，R[i]用于表示第i个统计块的R值，G[i]用于表示第i个统计块的G值，B[i]用于表示第i个统计块的B值，Lr[i]用于表示第i个统计块的标准色温，Lb[i]用于表示第i个统计块的标准色调。

进一步地，还可以标定光源原点对齐标准光源。

以标准光源为D65为例，标定所述光源原点对齐D65之后，可以采用下述公式，进一步确定各个统计块的标准色温以及标准色调：

Lr[i]＝Lr[i]-Lr_Dt5

Lb[i]＝Lb[i]-Lb_Dt5

其中，Lr_D65与Lb_D65分别用于表示D65光源下的log(r/g)与log(b/g)。

继续参照图1，所述预设的色温-色调坐标系可以为色温-色调映射坐标系；根据各个统计块的标准色温以及标准色调，可以采用下述公式，确定各个统计块在所述色温-色调映射坐标系的映射色温以及映射色调的步骤：

Lrs＝Lr

Lbs＝a*Lr+(1-a)*Lb

其中，Lrs用于表示映射色温，Lbs用于表示映射色调，Lr用于表示标准色温，Lb用于表示标准色调，a用于表示色调权重值。

其中，所述a可以用于补全坐标转换后多个光源之间的色调色温的差异，可以采用Lr，Lb值拟合计算得出。需要指出的是，在本发明实施例中，对于所述色调权重值的具体计算方式不做限制，可以采用适当方式计算得到。

在本发明实施例中，通过确定色温-色调映射坐标系，并且设置色温-色调映射坐标系至色温-色调映射坐标系的变换公式，可以实现对各个统计块的定标步骤，从而有机会在各个光源下标定建立一种特殊的白平衡Lrs Lbs坐标系，通过设置适当的色调权重值，使得白平衡落点效果更加直观。

在步骤S12的具体实施中，确定所述待处理图像在所述色温-色调坐标系中的综合基本色温与综合基本色调。

进一步地，可以采用硬件统计模块统计所述待处理图像中的白点在所述色温-色调坐标系中的落点位置，并且根据所述落点位置确定所述综合基本色温与综合基本色调。

具体地，根据硬件统计白点的落点信息，和以上建立的色温-色调映射坐标系，标定信息等，可以拟合出各个环境下的计算出的Lrs、Lbs值，记为综合基本色温(Basic Lrs)与综合基本色调(Basic Lbs)。

在本发明实施例中，采用硬件统计模块统计所述待处理图像中的白点在所述色温-色调坐标系中的落点位置，并且根据所述落点位置确定所述综合基本色温与综合基本色调，可以在不考虑人脸的色温、色调的情况下，确定待处理图像的综合基本色温与综合基本色调，从而在没有人脸时予以采用。

在步骤S13的具体实施中，确定所述待处理图像中是否存在至少一张人脸。

进一步地，确定所述待处理图像中是否存在至少一张人脸的步骤可以包括：采用人脸检测算法(Face detection)对所述待处理图像中是否存在人脸进行检测；当检测到存在至少一张人脸时，采用所述人脸检测算法确定每张人脸的坐标位置。

具体地，可以根据人脸检测算法判定当前场景中的人脸信息，是否个数为0。若人脸的个数为0，则不载入人脸自动白平衡(Auto white balance，AWB)的相关算法计算。若人脸信息不为0，则可以载入人脸AWB相关的计算算法。

其中，所述AWB统计(statistic)可以由硬件统计模块提供，如可将整图分为64x64个统计点在RGB域做RGB三通道数值提取得到。

在本发明实施例中，采用人脸检测算法对所述待处理图像中是否存在人脸进行检测；当检测到存在至少一张人脸时，采用所述人脸检测算法确定每张人脸的坐标位置。采用本发明实施例的方案，可以在检测到人脸时，再采用后续步骤载入人脸的色温、色调的信息，从而针对相同的环境下，根据有无人人脸做出精细化的效果区分，并且在未检测到人脸时，采用所述待处理图像的综合基本色温与综合基本色调。

在步骤S14的具体实施中，如果所述待处理图像中存在有至少一张人脸，则确定各个统计块是否为肤色块，其中，所述肤色块的颜色为肤色。

在本发明实施例的一种具体实施方式中，确定各个统计块是否为肤色块的步骤可以包括：根据各个统计块的RGB值确定各个统计块的亮度Y、蓝色的浓度偏移量Cb以及红色的浓度偏移量Cr；针对每个统计块，根据所述统计块的Cb位于预设的蓝色偏移量范围内、并且Cr位于预设的红色偏移量范围内，确定所述统计块为所述肤色块。

具体地，可以将待处理图像从RGB空间转换至YCbCr颜色空间，根据肤色的聚类性判断当前统计块是否是肤色块。

在本发明实施例的一种具体应用中，可以根据统计块的Cb值是否位于[120,176]内，并且Cr值是否位于[72,130]内，确定该统计块是否是肤色块。

其中，所述各个统计块的亮度Y、蓝色的浓度偏移量Cb以及红色的浓度偏移量Cr可以采用下述公式确定：

Y＝0.2990*R+0.5780*G+0.1140*B+0；

Cb＝0.5000*R-0.4187*G-0.0813*B+128；

Cr＝-0.1687*R-0.3313*G+0.5000B+128。

需要指出的是，上述公式中采用的具体系数可以根据具体情况选择适当的系数，本发明实施例对于具体计算公式不作限制。

在本发明实施例中，通过各个统计块的亮度Y、蓝色的浓度偏移量Cb以及红色的浓度偏移量Cr确定所述统计块是否为所述肤色块，可以采用现有技术中成熟度较高的肤色判断方式进行判断，提高确定所述统计块是否为所述肤色块的准确性和可靠性。

在本发明实施例的另一种具体实施方式中，可以根据所述统计块的映射色温与预设的映射色温范围的关系，确定所述统计块是否为所述肤色块。

具体地，所述预设的色温-色调坐标系可以为色温-色调映射坐标系；确定各个统计块是否为肤色块的步骤可以包括：确定各个统计块在所述色温-色调映射坐标系的映射色温以及映射色调；针对每个统计块，根据所述统计块的映射色温位于预设的映射色温范围内、并且映射色调位于预设的映射色调范围内，确定所述统计块为所述肤色块。

在本发明实施例中，可以根据所述统计块的映射色温位于预设的映射色温范围内、并且映射色调位于预设的映射色调范围内，确定所述统计块为所述肤色块，相比于向映射色温、映射色调转换至别的参数，再进行判断，有助于提高判断效率，减少运算量。

在本发明实施例的又一种具体实施方式中，可以在对所述预设的色温-色调坐标系标定的过程中加入预设色卡的至少两个色块，以建立所述预设色卡中的每种颜色与所述预设的色温-色调坐标系的坐标之间的映射关系。

参照图3，图3是本发明实施例中一种色温-色调映射坐标系的示意图。

图3示出了在所述色温-色调映射坐标系(也即所述预设的色温-色调坐标系)中，标准光源以及色卡中的各个颜色经过坐标变换后的标定位置。

继续参照图1，在本发明实施例的另一种具体实施方式中，确定各个统计块是否为肤色块的步骤可以包括：根据各个统计块的RGB值，确定各个统计块在所述预设的色温-色调坐标系的坐标；根据每个统计块在所述预设的色温-色调坐标系的坐标，判断所述统计块的在所述预设色卡中的颜色，并确定是否为肤色块；其中，所述预设色卡中包含有一个或多个预定义的肤色色块。

具体地，以预设色卡为标准爱色丽24色卡为例，其中存在有预设的一种或数种颜色可以视为肤色块。

在本发明实施例中，在对所述预设的色温-色调坐标系标定的过程中加入预设色卡的至少两个色块，以建立所述预设色卡中的每种颜色与所述预设的色温-色调坐标系的坐标之间的映射关系后，可以根据每个统计块在所述预设的色温-色调坐标系的坐标，判断所述统计块的在所述预设色卡中的颜色，并确定是否为肤色块，通过预先建立色卡的对应关系，可以实现高效、直观地对肤色块进行判断。

在步骤S15的具体实施中，如果存在有一个或多个肤色块，则判断所述肤色块是否属于有效人脸，并记录所述属于有效人脸的肤色块为人脸统计块。

在本发明实施例的一种具体实施方式中，判断所述肤色块是否属于有效人脸的步骤可以包括：针对每个肤色块，确定所述肤色块是否属于人脸；如果存在肤色块属于人脸，则确定包含有肤色块的人脸的数量；如果所述包含有肤色块的人脸的数量位于预设数量范围内，则判断所述包含有肤色块的各个人脸为有效人脸。

在本发明实施例中，针对每个肤色块，确定所述肤色块是否属于人脸，并在包含有肤色块的人脸的数量位于预设数量范围内，则判断所述包含有肤色块的各个人脸为有效人脸，可以在肤色块其实属于色彩接近人脸的其他物品时，避免图片处理过程中受其影响，进而提高成像质量。

在本发明实施例的另一种具体实施方式中，判断所述肤色块是否属于有效人脸的步骤可以包括：针对每个肤色块，确定所述肤色块是否属于人脸；对于每个属于人脸的肤色块，判断所属的人脸的面积占所述待处理图像的面积的比例；如果所属比例位于预设面积占比范围内，则判断所述肤色块所属的人脸为有效人脸。

在本发明实施例中，对于每个属于人脸的肤色块，判断所属的人脸的面积占所述待处理图像的面积的比例，如果位于预设面积占比范围内，则判断所述肤色块所属的人脸为有效人脸，可以在肤色块所属的人脸面积特别小或特别大时，避免图片处理过程中受其影响，进而提高成像质量。

在步骤S16的具体实施中，如果存在一个或多个人脸统计块，则确定所有的人脸统计块在所述色温-色调坐标系中的综合人脸色温与综合人脸色调。

在具体实施中，可以根据待处理图像中包含一个有效人脸还是多个有效人脸，采用不同的方式确定所有的人脸统计块在所述色温-色调坐标系中的综合人脸色温与综合人脸色调。

具体地，如果仅包含一个有效人脸，则确定所有的人脸统计块在所述色温-色调坐标系中的综合人脸色温与综合人脸色调的步骤可以包括：确定所述有效人脸的数量；如果所述有效人脸的数量等于1，则根据所述预设的色温-色调坐标系确定该有效人脸的综合人脸色温和综合人脸色调。

具体地，可以通过lrs lbs坐标系，确定人脸肤色落点图，并融合标定过程中的偏差值(如Offset值和/或Ratio值)来确定对应的Lrs/Lbs。

如果所述有效人脸的数量≥2，则确定所有的人脸统计块在所述色温-色调坐标系中的综合人脸色温与综合人脸色调的步骤可以包括：确定所述有效人脸的数量；如果所述有效人脸的数量≥2，则根据每张有效人脸包含的人脸统计块在所述预设的色温-色调坐标系的色温和色调，确定该有效人脸的个体人脸色温和个体人脸色调；确定每张人脸的人脸权重值；根据所述每张人脸的人脸权重值、每张人脸的个体人脸色温和个体人脸色调，通过加权运算得到所述综合人脸色温与综合人脸色调。

具体地，可以依次对人脸识别库传出的face[i]的人脸信息进行处理，判断人脸是否落在肤色区间(如Cb[120,176],Cr[72,130])内，求取相应的Lrs/Lbs，最后对不同人脸的Lrs/Lbs加权，求得最终的人脸Lrs/Lbs，记为综合人脸色温与综合人脸色调。

进一步地，所述人脸权重值可以根据以下一个或多个参数的加权运算结果确定：所述综合基本色温、所述综合基本色调、所述待处理图像的亮度、每张人脸的面积占所述待处理图像的面积的比例。

作为一个非限制性的例子，所述综合基本色温、所述综合基本色调在预设范围内时，所述人脸权重值可以越大；所述待处理图像的亮度越大，所述人脸权重值可以越大；所述至少一张人脸的面积占所述待处理图像的面积的比例越大，所述人脸权重值可以越大，以提高图像中主要人脸的精细化效果。

在本发明实施例中，当有效人脸的数量≥2时，通过确定每张人脸的人脸权重值；根据所述每张人脸的人脸权重值、每张人脸的个体人脸色温和个体人脸色调，通过加权运算得到所述综合人脸色温与综合人脸色调，可以得到待处理图片中所有有效人脸的综合人脸色温与综合人脸色调这一单一数值，有助于提高后续处理中的计算效率。

在步骤S17的具体实施中，根据所述综合基本色温与综合人脸色温，确定所述待处理图像待采用的色温，并且根据所述综合基本色调与综合人脸色调，确定所述待处理图像待采用的色调。

进一步地，根据所述综合基本色温与综合人脸色温，确定所述待处理图像待采用的色温，并且根据所述综合基本色调与综合人脸色调，确定所述待处理图像待采用的色调的步骤可以包括：确定综合权重值；采用下述公式，确定所述待处理图像待采用的色温和色调：

final_awb_lrs＝basic_lrs*(1-face_weight)+face_lrs*face_weight；

final_awb_lbs＝basic_lbs*(1-face_weight)+face_lbs*face_weight；

其中，final_awb_lrs表示所述待处理图像采用的色温，final_awb_lbs表示所述待处理图像采用的色调，basic_lrs表示所述综合基本色温，basic_lbs表示所述综合基本色调，face_lrs表示所述综合人脸色温，face_lbs表示所述综合人脸色调，face_weight表示所述综合权重值。

在本发明实施例的一种具体实施例中，为防止人脸移动过程中图像颜色跳变(相邻帧之间检测到人脸/检测不到人脸)，可以将当前帧的人脸AWB和基本AWB(BasicAWB)进行融合(Mix))，调整人脸AWB的综合权重值，所述综合权重值的取值范围可以在[0,1]之间。

进一步地，所述综合权重值根据以下一个或多个参数的加权运算结果确定：所述待处理图像的亮度、所述至少一张人脸的面积占所述待处理图像的面积的比例。

作为一个非限制性的例子，所述待处理图像的亮度越大，所述综合权重值可以越大；所述至少一张人脸的面积占所述待处理图像的面积的比例越大，所述综合权重值可以越大，以提高图像中主要人脸的精细化效果。

在本发明实施例中，确定综合权重值；进而采用公式确定所述待处理图像待采用的色温和色调，可以在图像处理的过程中，载入人脸的色温、色调的信息，从而针对相同的环境下，根据有无人人脸做出精细化的效果区分，提高图像的质量。

在本发明实施例中，所述待处理图像可以属于连续的视频，所述图像的色温与色调的确定方法还可以包括：从所述连续的视频中获取所述待处理图像的前面一帧或多帧图像，记为前帧图像；和/或，从所述连续的视频中获取所述待处理图像的后面一帧或多帧图像，记为后帧图像；对所述待处理图像待采用的色温、前帧图像以及后帧图像的色温进行加权运算，以得到所述待处理图像最终采用的色温；对所述待处理图像待采用的色调、前帧图像以及后帧图像的色调进行加权运算，以得到所述待处理图像最终采用的色调。

在本发明实施例中，通过对前帧、后帧图像的色温、色调加权计算，可以使得所述待处理图像最终采用的色温、色调受到前帧、后帧图像的影响，从而使得连续视频中的色温、色调处理更加流畅，提高用户体验。

在本发明实施例中，通过设置预设的色温-色调坐标系，并且先确定所述待处理图像在所述色温-色调坐标系中的综合基本色温与综合基本色调，再在图像中存在人脸的情况下，确定各个统计块是否为肤色块，并对于属于有效人脸的肤色块，确定在所述色温-色调坐标系中的综合人脸色温与综合人脸色调，最后确定所述待处理图像待采用的色温以及色调。采用本发明实施例的方案，可以通过确定是否存在人脸、判断是否有肤色块以及所述肤色块是否属于有效人脸，可以在图像处理的过程中，载入人脸的色温、色调的信息，从而针对相同的环境下，根据有无人人脸做出精细化的效果区分，提高图像的质量。

参照图4，图4是本发明实施例中一种图像的色温与色调的确定装置的结构示意图。所述图像的色温与色调的确定装置可以包括：

定标模块41，适于提供待处理图像，确定所述待处理图像中多个统计块的RGB值，然后根据各个统计块的RGB值，将各个统计块定标至预设的色温-色调坐标系；

基本色温-色调确定模块42，适于确定所述待处理图像在所述色温-色调坐标系中的综合基本色温与综合基本色调；

人脸确定模块43，适于确定所述待处理图像中是否存在至少一张人脸；

肤色块确定模块44，适于如果存在有至少一张人脸，则确定各个统计块是否为肤色块，其中，所述肤色块的颜色为肤色；

人脸统计块确定模块45，适于如果存在有一个或多个肤色块，则判断所述肤色块是否属于有效人脸，并记录所述属于有效人脸的肤色块为人脸统计块；

人脸色温-色调确定模块46，适于如果存在一个或多个人脸统计块，则确定所有的人脸统计块在所述色温-色调坐标系中的综合人脸色温与综合人脸色调；

色温-色调确定模块47，适于根据所述综合基本色温与综合人脸色温，确定所述待处理图像待采用的色温，并且根据所述综合基本色调与综合人脸色调，确定所述待处理图像待采用的色调。

关于该图像的色温与色调的确定装置的原理、具体实现和有益效果请参照前文及图1示出的关于图像的色温与色调的确定方法的相关描述，此处不再赘述。

本发明实施例还提供了一种存储介质，其上存储有计算机指令，所述计算机指令运行时执行上述方法的步骤。所述存储介质可以是计算机可读存储介质，例如可以包括非挥发性存储器(non-volatile)或者非瞬态(non-transitory)存储器，还可以包括光盘、机械硬盘、固态硬盘等。

本发明实施例还提供了一种终端，包括存储器和处理器，所述存储器上存储有能够在所述处理器上运行的计算机指令，所述处理器运行所述计算机指令时执行上述方法的步骤。所述终端包括但不限于手机、计算机、平板电脑等终端设备。

虽然本发明披露如上，但本发明并非限定于此。任何本领域技术人员，在不脱离本发明的精神和范围内，均可作各种更动与修改，因此本发明的保护范围应当以权利要求所限定的范围为准。

Claims (20)

1.一种图像的色温与色调的确定方法，其特征在于，包括以下步骤：

提供待处理图像，确定所述待处理图像中多个统计块的RGB值，然后根据各个统计块的RGB值，将各个统计块定标至预设的色温-色调坐标系；

确定所述待处理图像在所述色温-色调坐标系中的综合基本色温与综合基本色调；

确定所述待处理图像中是否存在至少一张人脸；

如果存在有至少一张人脸，则确定各个统计块是否为肤色块，其中，所述肤色块的颜色为肤色；

如果存在有一个或多个肤色块，则判断所述肤色块是否属于有效人脸，并记录所述属于有效人脸的肤色块为人脸统计块；

如果存在一个或多个人脸统计块，则确定所有的人脸统计块在所述色温-色调坐标系中的综合人脸色温与综合人脸色调；

根据所述综合基本色温与综合人脸色温，确定所述待处理图像待采用的色温，并且根据所述综合基本色调与综合人脸色调，确定所述待处理图像待采用的色调。

2.根据权利要求1所述的图像的色温与色调的确定方法，其特征在于，所述待处理图像被分为M×N个统计块，M、N为正整数，且M≥2，N≥2；确定所述待处理图像中多个统计块的RGB值包括：

在标准光源下采用灰卡原图，对各个统计块进行RGB三通道数值提取，以得到所述各个统计块的RGB值。

3.根据权利要求1所述的图像的色温与色调的确定方法，其特征在于，所述预设的色温-色调坐标系为色温-色调映射坐标系；

根据各个统计块的RGB值，将各个统计块定标至预设的色温-色调坐标系包括：

根据各个统计块的RGB值，确定各个统计块在色温-色调标准坐标系的标准色温以及标准色调；

根据各个统计块的标准色温以及标准色调，采用下述公式，确定各个统计块在所述色温-色调映射坐标系的映射色温以及映射色调；

Lrs＝Lr；

Lbs＝a*Lr+(1-a)*Lb；

其中，Lrs用于表示映射色温，Lbs用于表示映射色调，Lr用于表示标准色温，Lb用于表示标准色调，a用于表示色调权重值。

4.根据权利要求3所述的图像的色温与色调的确定方法，其特征在于，采用下述公式，根据各个统计块的RGB值，确定各个统计块的标准色温以及标准色调：

其中，R[i]用于表示第i个统计块的R值，G[i]用于表示第i个统计块的G值，B[i]用于表示第i个统计块的B值，Lr[i]用于表示第i个统计块的标准色温，Lb[i]用于表示第i个统计块的标准色调。

5.根据权利要求1所述的图像的色温与色调的确定方法，其特征在于，确定所述待处理图像在所述色温-色调坐标系中的综合基本色温与综合基本色调包括：

采用硬件统计模块统计所述待处理图像中的白点在所述色温-色调坐标系中的落点位置，并且根据所述落点位置确定所述综合基本色温与综合基本色调。

6.根据权利要求1所述的图像的色温与色调的确定方法，其特征在于，确定所述待处理图像中是否存在至少一张人脸包括：

采用人脸检测算法对所述待处理图像中是否存在人脸进行检测；

当检测到存在至少一张人脸时，采用所述人脸检测算法确定每张人脸的坐标位置。

7.根据权利要求1所述的图像的色温与色调的确定方法，其特征在于，确定各个统计块是否为肤色块包括：

根据各个统计块的RGB值确定各个统计块的亮度Y、蓝色的浓度偏移量Cb以及红色的浓度偏移量Cr；

针对每个统计块，根据所述统计块的Cb位于预设的蓝色偏移量范围内、并且Cr位于预设的红色偏移量范围内，确定所述统计块为所述肤色块。

8.根据权利要求1所述的图像的色温与色调的确定方法，其特征在于，所述预设的色温-色调坐标系为色温-色调映射坐标系；

确定各个统计块是否为肤色块包括：

确定各个统计块在所述色温-色调映射坐标系的映射色温以及映射色调；

针对每个统计块，根据所述统计块的映射色温位于预设的映射色温范围内、并且映射色调位于预设的映射色调范围内，确定所述统计块为所述肤色块。

9.根据权利要求1所述的图像的色温与色调的确定方法，其特征在于，在对所述预设的色温-色调坐标系标定的过程中加入预设色卡的至少两个色块，以建立所述预设色卡中的每种颜色与所述预设的色温-色调坐标系的坐标之间的映射关系；

确定各个统计块是否为肤色块包括：

根据各个统计块的RGB值，确定各个统计块在所述预设的色温-色调坐标系的坐标；

根据每个统计块在所述预设的色温-色调坐标系的坐标，判断所述统计块的在所述预设色卡中的颜色，并确定是否为肤色块；

其中，所述预设色卡中包含有一个或多个预定义的肤色色块。

10.根据权利要求1所述的图像的色温与色调的确定方法，其特征在于，判断所述肤色块是否属于有效人脸包括：

针对每个肤色块，确定所述肤色块是否属于人脸；

如果存在肤色块属于人脸，则确定包含有肤色块的人脸的数量；

如果所述包含有肤色块的人脸的数量位于预设数量范围内，则判断所述包含有肤色块的各个人脸为有效人脸。

11.根据权利要求1所述的图像的色温与色调的确定方法，其特征在于，判断所述肤色块是否属于有效人脸包括：

针对每个肤色块，确定所述肤色块是否属于人脸；

对于每个属于人脸的肤色块，判断所属的人脸的面积占所述待处理图像的面积的比例；

如果所属比例位于预设面积占比范围内，则判断所述肤色块所属的人脸为有效人脸。

12.根据权利要求10或11所述的图像的色温与色调的确定方法，其特征在于，确定所有的人脸统计块在所述色温-色调坐标系中的综合人脸色温与综合人脸色调包括：

确定所述有效人脸的数量；

如果所述有效人脸的数量等于1，则根据所述预设的色温-色调坐标系确定该有效人脸的综合人脸色温和综合人脸色调。

13.根据权利要求10或11所述的图像的色温与色调的确定方法，其特征在于，确定所有的人脸统计块在所述色温-色调坐标系中的综合人脸色温与综合人脸色调包括：

确定所述有效人脸的数量；

如果所述有效人脸的数量≥2，则根据每张有效人脸包含的人脸统计块在所述预设的色温-色调坐标系的色温和色调，确定该有效人脸的个体人脸色温和个体人脸色调；

确定每张人脸的人脸权重值；

根据所述每张人脸的人脸权重值、每张人脸的个体人脸色温和个体人脸色调，通过加权运算得到所述综合人脸色温与综合人脸色调。

14.根据权利要求13所述的图像的色温与色调的确定方法，其特征在于，所述人脸权重值根据以下一个或多个参数的加权运算结果确定：所述综合基本色温、所述综合基本色调、所述待处理图像的亮度、每张人脸的面积占所述待处理图像的面积的比例。

15.根据权利要求1所述的图像的色温与色调的确定方法，其特征在于，根据所述综合基本色温与综合人脸色温，确定所述待处理图像待采用的色温，并且根据所述综合基本色调与综合人脸色调，确定所述待处理图像待采用的色调包括：

确定综合权重值；

采用下述公式，确定所述待处理图像待采用的色温和色调：

final_awb_lrs＝basic_lrs*(1-face_weight)+face_lrs*face_weight；

final_awb_lbs＝basic_lbs*(1-face_weight)+face_lbs*face_weight；

其中，final_awb_lrs表示所述待处理图像采用的色温，final_awb_lbs表示所述待处理图像采用的色调，basic_lrs表示所述综合基本色温，basic_lbs表示所述综合基本色调，face_lrs表示所述综合人脸色温，face_lbs表示所述综合人脸色调，face_weight表示所述综合权重值。

16.根据权利要求15所述的图像的色温与色调的确定方法，其特征在于，所述综合权重值根据以下一个或多个参数的加权运算结果确定：所述待处理图像的亮度、所述至少一张人脸的面积占所述待处理图像的面积的比例。

17.根据权利要求1所述的图像的色温与色调的确定方法，其特征在于，所述待处理图像属于连续的视频，所述图像的色温与色调的确定方法还包括：从所述连续的视频中获取所述待处理图像的前面一帧或多帧图像，记为前帧图像；和/或

从所述连续的视频中获取所述待处理图像的后面一帧或多帧图像，记为后帧图像；

对所述待处理图像待采用的色温、前帧图像以及后帧图像的色温进行加权运算，以得到所述待处理图像最终采用的色温；

对所述待处理图像待采用的色调、前帧图像以及后帧图像的色调进行加权运算，以得到所述待处理图像最终采用的色调。

18.一种图像的色温与色调的确定装置，其特征在于，包括：

定标模块，适于提供待处理图像，确定所述待处理图像中多个统计块的RGB值，然后根据各个统计块的RGB值，将各个统计块定标至预设的色温-色调坐标系；

基本色温-色调确定模块，适于确定所述待处理图像在所述色温-色调坐标系中的综合基本色温与综合基本色调；

人脸确定模块，适于确定所述待处理图像中是否存在至少一张人脸；

肤色块确定模块，适于如果存在有至少一张人脸，则确定各个统计块是否为肤色块，其中，所述肤色块的颜色为肤色；

人脸统计块确定模块，适于如果存在有一个或多个肤色块，则判断所述肤色块是否属于有效人脸，并记录所述属于有效人脸的肤色块为人脸统计块；

人脸色温-色调确定模块，适于如果存在一个或多个人脸统计块，则确定所有的人脸统计块在所述色温-色调坐标系中的综合人脸色温与综合人脸色调；

色温-色调确定模块，适于根据所述综合基本色温与综合人脸色温，确定所述待处理图像待采用的色温，并且根据所述综合基本色调与综合人脸色调，确定所述待处理图像待采用的色调。

19.一种存储介质，其上存储有计算机指令，其特征在于，所述计算机指令运行时执行权利要求1至17任一项所述图像的色温与色调的确定方法的步骤。

20.一种终端，包括存储器和处理器，所述存储器上存储有能够在所述处理器上运行的计算机指令，其特征在于，所述处理器运行所述计算机指令时执行权利要求1至17任一项所述图像的色温与色调的确定方法的步骤。

Images