CN108063933A - 图像处理方法及装置、计算机可读存储介质和计算机设备 - Google Patents

Abstract

本申请公开一种图像处理方法，用于计算机设备。图像处理方法包括：处理摄像头采集的第一图像以判断第一图像对应的场景是否存在光源；若否，控制致动器移动镜头和/或图像传感器后控制摄像头采集与第一图像至少部分不重叠的第二图像；处理第二图像以判断第二图像对应的场景是否存在光源；和在第二图像对应的场景存在光源时根据光源的色温对第一图像进行白平衡处理。本申请还公开一种图像处理装置、计算机可读存储介质和计算机设备。本申请的图像处理方法及装置、计算机可读存储介质和计算机设备在第一图像对应的场景不存在光源时，根据第二图像对第一图像进行白平衡处理，使得白平衡处理后的第一图像的颜色更加真实。

Description

图像处理方法及装置、计算机可读存储介质和计算机设备

技术领域

本申请涉及图像处理技术领域，特别涉及一种图像处理方法、图像处理装置、计算机可读存储介质和计算机设备。

背景技术

相关技术的白平衡技术可以通过检测光源的色温并根据色温进行白平衡，然而，这种方式的白平衡技术应用于没有点光源的场景时，往往无法对图像进行准确地白平衡处理。

发明内容

本申请的实施例提供了一种图像处理方法、图像处理装置、计算机可读存储介质和计算机设备。

本申请实施方式的图像处理方法，用于计算机设备，所述计算机设备包括摄像头，所述摄像头包括镜头、图像传感器和致动器，所述图像处理方法包括以下步骤：

处理所述摄像头采集的第一图像以判断所述第一图像对应的场景是否存在光源；

在所述第一图像对应的场景不存在所述光源时，控制所述致动器移动所述镜头和/或所述图像传感器后控制所述摄像头采集与所述第一图像至少部分不重叠的第二图像；和

处理所述第二图像以判断所述第二图像对应的场景是否存在所述光源；和

在所述第二图像对应的场景存在所述光源时检测所述光源的色温并根据所述色温对所述第一图像进行白平衡处理。

本申请实施方式的图像处理装置，用于计算机设备，所述计算机设备包括摄像头，所述摄像头包括镜头、图像传感器和致动器，所述图像处理装置包括：

第一处理模块，所述第一处理模块用于处理所述摄像头采集的第一图像以判断所述第一图像对应的场景是否存在光源；

控制模块，所述控制模块用于在所述第一图像对应的场景不存在所述光源时控制所述致动器移动所述镜头和/或所述图像传感器后控制所述摄像头采集与所述第一图像至少部分不重叠的第二图像；

第二处理模块，所述第二处理模块用于处理所述第二图像以判断所述第二图像对应的场景是否存在所述光源；和

第三处理模块，所述第三处理模块用于在所述第二图像对应的场景存在所述光源时检测所述光源的色温并根据所述色温对所述第一图像进行白平衡处理。

本申请实施方式的一个或多个包含计算机可执行指令的非易失性计算机可读存储介质，当所述计算机可执行指令被一个或多个处理器执行时，使得所述处理器执行所述图像处理方法。

本申请实施方式的计算机设备包括存储器及处理器，所述存储器中储存有计算机可读指令，所述指令被所述处理器执行时，使得所述处理器执行所述图像处理方法。

本申请实施方式的图像处理方法及装置、计算机可读存储介质和计算机设备在第一图像对应的场景不存在光源时，控制致动器移动镜头和/或图像传感器后控制摄像头采集与第一图像至少部分不重叠的第二图像，在第二图像对应的场景存在光源时，可以检测光源的色温并根据光源的色温对第一图像进行白平衡处理，使得白平衡处理后的第一图像的颜色更加真实。

本申请的附加方面和优点将在下面的描述中部分给出，部分将从下面的描述中变得明显，或通过本申请的实践了解到。

附图说明

为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1是本申请某些实施方式的图像处理方法的流程示意图。

图2是本申请某些实施方式的计算机设备的平面示意图。

图3是本申请某些实施方式的摄像头的结构示意图。

图4是本申请某些实施方式的图像处理装置的模块示意图。

图5是本申请某些实施方式的摄像头工作的场景示意图。

图6是本申请某些实施方式的图像处理方法的流程示意图。

图7是本申请某些实施方式的图像处理装置的模块示意图。

图8是本申请某些实施方式的图像处理方法的流程示意图。

图9是本申请某些实施方式的图像处理装置的模块示意图。

图10是本申请某些实施方式的白平衡处理的场景示意图。

图11是本申请某些实施方式的图像处理方法的流程示意图。

图12是本申请某些实施方式的图像处理装置的模块示意图。

图13是本申请某些实施方式的图像处理方法的流程示意图。

图14是本申请某些实施方式的白平衡处理的场景示意图。

图15是本申请某些实施方式的第四处理模块的模块示意图。

图16是本申请某些实施方式的色温曲线示意图。

图17是本申请某些实施方式的图像处理方法的流程示意图。

图18是本申请某些实施方式的图像处理装置的模块示意图。

图19是本申请某些实施方式的图像处理方法的流程示意图。

图20是本申请某些实施方式的图像处理装置的模块示意图。

图21是本申请某些实施方式的图像处理方法的流程示意图。

图22是本申请某些实施方式的第三处理模块的模块示意图。

图23是本申请某些实施方式的图像处理方法的流程示意图。

图24是本申请某些实施方式的图像处理装置的模块示意图。

图25是本申请某些实施方式的计算机设备的模块示意图。

图26是本申请某些实施方式的图像处理电路的模块示意图。

主要元件符号说明：

计算机设备1000、摄像头100、镜头20、透镜30、图像传感器40、致动器60、图像处理装置300、第一处理模块312、第一划分单元3122、第一判断单元3124、第一确定单元3126、第二确定单元3128、控制模块314、第二处理模块316、第二划分单元3162、第二判断单元3164、第五确定单元3166、第六确定单元3168、第三处理模块318、第七确定单元3182、第二处理单元3184、第八确定单元3186、第一判断模块322、第一拼接模块324、第一确定模块326、第四处理模块328、第三确定单元3282、第一处理单元3284、第四确定单元3286、第二判断模块332、第二拼接模块334、第二确定模块336、计算模块338、第三确定模块342、第五处理模块344、系统总线510、处理器520、存储器530、内存储器540、显示屏550、输入装置560、图像处理电路800、ISP处理器810、控制逻辑器820、传感器840、图像存储器850、编码器/解码器860、显示器870。

具体实施方式

为了使本申请的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本申请进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本申请，并不用于限定本申请。

可以理解，本申请所使用的术语“第一”、“第二”等可在本文中用于描述各种元件，但这些元件不受这些术语限制。这些术语仅用于将第一个元件与另一个元件区分。举例来说，在不脱离本申请的范围的情况下，可以将第一图像称为第二图像，且类似地，可将第二图像称为第一图像。第一图像和第二图像两者都是图像，但不是同一图像。

请参阅图1-3，本申请实施方式的图像处理方法可以用于计算机设备1000。计算机设备1000包括摄像头100，摄像头100包括镜头20、图像传感器40和致动器60。图像处理方法包括以下步骤：

S312：处理摄像头100采集的第一图像以判断第一图像对应的场景是否存在光源；

S314：在第一图像对应的场景不存在光源时，控制致动器60移动镜头20和/或图像传感器40后控制摄像头100采集与第一图像至少部分不重叠的第二图像；

S316：处理第二图像以判断第二图像对应的场景是否存在光源；和

S318：在第二图像对应的场景存在光源时检测光源的色温并根据色温对第一图像进行白平衡处理。

请参阅图2-4，本申请实施方式的图像处理装置300可以用于计算机设备1000。计算机设备1000包括摄像头100，摄像头100包括镜头20、图像传感器40和致动器60。图像处理装置300包括第一处理模块312、控制模块314、第二处理模块316和第三处理模块318。第一处理模块312用于处理摄像头100采集的第一图像以判断第一图像对应的场景是否存在光源。控制模块314用于在第一图像对应的场景不存在光源时控制致动器60移动镜头20和/或图像传感器40后控制摄像头100采集第二图像。第二处理模块316用于处理第二图像以判断第二图像对应的场景是否存在光源。第三处理模块318用于在第二图像对应的场景存在光源时检测光源的色温并根据色温对第一图像进行白平衡处理。

本申请实施方式的图像处理方法可以由本申请实施方式的图像处理装置300实现，其中，步骤S312可以由第一处理模块312实现，步骤S314可以由控制模块314实现，步骤S316可以由第二处理模块316实现，步骤S318可以由第三处理模块318实现。

请参阅图2，本申请实施方式的图像处理装置300可以应用于本申请实施方式的计算机设备1000中，也即是说，本申请实施方式的计算机设备1000可以包括本申请实施方式的图像处理装置300。

本申请实施方式的图像处理方法、图像处理装置300和计算机设备1000在第一图像对应的场景不存在光源时，控制致动器60移动镜头20和/或图像传感器40后控制摄像头100采集与第一图像至少部分不重叠的第二图像，在第二图像对应的场景存在光源时，可以检测光源的色温并根据光源的色温对第一图像进行白平衡处理，使得白平衡处理后的第一图像的颜色更加真实。

需要说明的是，第一图像与第二图像至少部分不重叠，可以理解为，第一图像与第二图像完全不重叠，或第一图像与第二图像部分不重叠。

在某些实施方式中，致动器60包括微机电马达或机械马达。微机电马达或机械马达工作时，可以控制镜头20和/或图像传感器40移动。

在某些实施方式中，利用OIS(Optical Image Stabilization，光学防抖)技术控制镜头20和/或图像传感器40移动。

需要说明的是，致动器60控制镜头20和/或图像传感器40移动，可以理解为，致动器60控制镜头20移动，或致动器60控制图像传感器40移动，或致动器60控制镜头20和图像传感器40移动。致动器60控制镜头20和/或图像传感器40移动，可以改变摄像头100的视场。

在某些实施方式中，致动器60用于控制镜头20移动。具体地，致动器60可以与镜头20连接，从而在致动器60工作时控制镜头20移动。需要说明的是，为了避免或减小摄像头100的光轴的偏离，一般控制镜头20移动时，不控制镜头20进行转动，而是控制镜头20进行平移。需要说明的是，在某些实施方式中，镜头20包括镜片组，控制镜头20移动，可以理解为，控制镜片组中的一个或多个镜片进行移动。此外，在某些实施方式中，镜头20还可以包括棱镜，控制镜头20移动，可以理解为，控制棱镜进行移动。

在某些实施方式中，致动器60用于控制图像传感器40移动。具体地，致动器60可以与图像传感器40连接，从而在致动器60工作时控制图像传感器40移动。需要说明的是，为了避免或减小摄像头100的光轴的偏离，一般控制图像传感器40移动时，不控制图像传感器40进行转动，而是控制图像传感器40进行平移。

在某些实施方式中，致动器60用于控制镜头20和图像传感器40进行移动。具体地，致动器60可以与镜头20和图像传感器40均进行连接，从而在致动器60工作时控制镜头20和图像传感器40进行移动。

在某些实施方式中，由于光源的位置、摄像头100的视场等原因，在真实场景存在光源时，处理摄像头100采集的第一图像无法识别到光源，即处理第一图像判断第一图像对应的场景是否存在光源时，获得第一图像对应的场景不存在光源的判断结果，但是由于摄像头100采集的第二图像与第一图像至少部分不重叠，因此摄像头100采集的第二图像可能可以识别到光源，即处理第二图像判断第二图像对应的场景是否存在光源时，获得第二图像对应的场景存在光源的判断结果，由于第一图像的颜色和第二图像的颜色都受到相同光源的影响，因此，可以利用第二图像检测到的光源的色温对第一图像进行白平衡处理，使得第一图像的颜色更加真实。

请参阅图5，在一个实施例中，图像传感器40固定设置，控制致动器60移动镜头20至第一位置时，摄像头100采集第一图像，此时摄像头100只能采集到光源的一小部分，难以在第一图像中识别到光源，因此可以控制致动器60移动镜头20至第二位置时，摄像头100采集第二图像，此时摄像头100能采集到完整的光源，在第一图像中容易识别到光源，因此可以利用第二图像识别到的光源对第一图像进行白平衡处理。第二图像对应的摄像头100与第一图像对应的摄像头100的视场至少部分不重叠，因此第一图像和第二图像也至少部分不重叠。

需要说明的是，判断第一图像对应的场景是否存在光源，可以理解为，判断摄像头100采集的第一图像中是否能够检测到光源。判断第二图像对应的场景是否存在光源，可以理解为摄像头100采集的第二图像中是否能够检测到光源。在第一图像中检测到光源时，确定第一图像对应的场景存在光源；在第一图像中没检测到光源时，确定第一图像对应的场景不存在光源。在第二图像中检测到光源时，确定第二图像对应的场景存在光源；在第二图像中没检测到光源时，确定第二图像对应的场景不存在光源。

在某些实施方式中，计算机设备1000内预存有色温和白平衡参数的对应关系，根据色温在色温和白平衡参数的对应关系中可以查找获得相应的白平衡参数，从而可以根据白平衡参数对图像进行白平衡处理。

请参阅图6，在某些实施方式中，步骤S312包括以下步骤：

S3122：将第一图像分成多个区域；

S3124：根据每个区域的直方图判断区域是否为包括光源的目标区域；

S3126：在存在至少一个目标区域时，确定第一图像对应的场景存在光源；和

S3128：在不存在目标区域时，确定第一图像对应的场景不存在光源。

请参阅图7，在某些实施方式中，第一处理模块312包括第一划分单元3122、第一判断单元3124、第一确定单元3126和第二确定单元3128。第一划分单元3122用于将第一图像分成多个区域。第一判断单元3124用于根据每个区域的直方图判断区域是否为包括光源的目标区域。第一确定单元3126用于在存在至少一个目标区域时，确定第一图像对应的场景存在光源。第二确定单元3128用于在不存在目标区域时，确定第一图像对应的场景不存在光源。

也即是说，步骤S3122可以由第一划分单元3122实现，步骤S3124可以由第一判断单元3124实现，步骤S3126可以由第一确定单元3126实现，步骤S3128可以由第二确定单元3128实现。

如此，可以通过第一图像的每个区域的直方图判断第一图像对应的场景是否存在光源。

具体地，可以将第一图像分成多个区域，例如将第一图像分成64*48个区域。根据每个区域的直方图可以判断每个区域中像素值超过预设像素值P的像素的占比是否超过预设比例，预设像素值P例如是239，预设比例例如是5％，即判断每个区域中像素值超过239的像素的占比是否超过5％，像素值超过预设像素值P的像素的占比超过预设比例的对应区域为包括光源的目标区域。判断第一图像中是否存在目标区域，在第一图像中存在目标区域时，说明第一图像对应的场景存在光源；在第一图像中不存在目标区域时，说明第一图像对应的场景不存在光源。

请参阅图8，在某些实施方式中，步骤S312后包括以下步骤：

S322：在第一图像对应的场景存在光源时，判断是否存在相邻的多个目标区域；

S324：在存在相邻的多个目标区域时将相邻的多个目标区域拼接为光源；和

S326：在不存在相邻的多个目标区域时将目标区域确定为光源。

请参阅图9，在某些实施方式中，图像处理装置300包括第一判断模块322、第一拼接模块324和第一确定模块326。第一判断模块322用于在第一图像对应的场景存在光源时，判断是否存在相邻的多个目标区域。第一拼接模块324用于在存在相邻的多个目标区域时将相邻的多个目标区域拼接为光源。第一确定模块326用于在不存在相邻的多个目标区域时将目标区域确定为光源。

也即是说，步骤S322可以由第一判断模块322实现，步骤S324可以由第一拼接模块324实现，步骤S326可以由第一确定模块326实现。

如此，可以确定第一图像中的光源位置。

在第一图像中存在目标区域时，判断是否存在相邻的多个目标区域，在存在相邻的多个目标区域时，相邻的多个目标区域在真实场景属于同一个光源，因此可以将相邻的多个目标区域拼接为光源；在不存在相邻的多个目标区域时，目标区域即可认为是光源。因此，通过目标区域可以确定第一图像中的光源位置。

请参阅图10，在一个例子中，场景存在光源，根据每个区域的直方图可以判断区域A、区域B、区域C和区域D是包括光源的目标区域，例如从区域A的直方图中，可以判断出区域A中像素值超过预设像素值P的像素的占比超过了预设比例，由于区域A、区域B、区域C和区域D是相邻的多个目标区域，因此可以将区域A、区域B、区域C和区域D拼接起来，从而获得较为完整的光源。

请参阅图11，在某些实施方式中，步骤S312后包括以下步骤：

S328：在第一图像对应的场景存在光源时，检测光源的色温并根据色温对第一图像进行白平衡处理。

请参阅图12，在某些实施方式中，图像处理装置300包括第四处理模块328。第四处理模块328用于在第一图像对应的场景存在光源时，检测光源的色温并根据色温对第一图像进行白平衡处理。

也即是说，步骤S328可以由第四处理模块328实现。

如此，可以在第一图像对应的场景存在光源时，根据光源的色温对第一图像进行白平衡处理，从而使得白平衡处理后的第一图像的颜色更加真实。

请参阅图13和图14，在某些实施方式中，步骤S328包括以下步骤：

S3282：根据光源的中心沿径向向外的亮度分布确定高亮区域H和中亮区域M；

S3284：将高亮区域H的基色通道像素平均值减去中亮区域M的基色通道像素平均值以确定光源颜色；和

S3286：根据光源颜色确定色温。

请参阅图14和图15，在某些实施方式中，第四处理模块328包括第三确定单元3282、第一处理单元3284和第四确定单元3286。第三确定单元3282用于根据光源的中心沿径向向外的亮度分布确定高亮区域H和中亮区域M。第一处理单元3284用于将高亮区域H的基色通道像素平均值减去中亮区域M的基色通道像素平均值以确定光源颜色。第四确定单元3286用于根据光源颜色确定色温。

也即是说，步骤S3282可以由第三确定单元3282实现，步骤S3284可以由第一处理单元3284实现，步骤S3286可以由第四确定单元3286实现。

如此，可以通过第一图像的高亮区域H和中亮区域M确定光源颜色。

请再次参阅图14，在第一图像中的光源位置确定后，可以理解，第一图像中的光源的中心区域O为过曝区域，一般为大白斑，不包含光源颜色的信息。光源颜色可以通过高亮区域H和中亮区域M的基色通道像素平均值确定。高亮区域H可以是指光源的中心沿径向向外的亮度值处于第一亮度范围L1的像素所构成的区域，第一亮度范围L1例如为[200，239)。中亮区域M可以是指光源的中心沿径向向外的亮度值处于第二亮度范围L2的像素所构成的区域，第二亮度范围L2例如为[150，200)。需要说明的是，第一亮度范围L1和第二亮度范围L2的具体取值可以根据光源的中心O沿径向向外的亮度分布确定，例如光源的亮度衰减得比较快，可以增大第一亮度范围L1和第二亮度范围L2；例如光源的亮度衰减得比较慢，可以减小第一亮度范围L1和第二亮度范围L2。

在某些实施方式中，基色通道是指颜色通道，例如包括R(红色)通道、Gr(绿红)通道、Gb(绿蓝)通道、B(蓝色)通道中的至少一个，在某些实施方式中，可以通过Gr通道的像素值和Gb通道的像素值获得G(绿色)通道的像素值。像素平均值可以是指多个像素值的算术平均值，多个像素值可以是高亮区域的所有像素的像素值或中亮区域的所有像素的像素值。在一个例子中，高亮区域的各个基色通道像素平均值(R_avg，G_avg，B_avg)为(200，210，220)，中亮区域的各个基色通道像素平均值(R_avg，G_avg，B_avg)为(160，180，190)，则光源颜色的通道(R，G，B)为(200-160，210-180，220-190)，即(40，30，30)。

在某些实施方式中，根据光源颜色确定色温，具体可以为：根据光源颜色、光源颜色和色温的对应关系确定光源的色温。其中，光源颜色和色温的对应关系可以是映射表和/或色温曲线。

请参阅图16，在一个实施例中，可以在设定色温分别为3000K、4000K、5000K、6000K等标准灯箱下，获取标定图像并通过计算得到在上述不同色温下标定图像对应的光源颜色，由此可以形成光源颜色和色温的色温曲线，并可以将该色温曲线保存在计算机设备1000中。通过光源颜色在色温曲线中查找即可获得对应的色温。

请参阅图17，在某些实施方式中，步骤S316包括以下步骤：

S3162：将第二图像分成多个区域；

S3164：根据每个区域的直方图判断区域是否为包括光源的目标区域；

S3166：在存在至少一个目标区域时，确定第二图像对应的场景存在光源；和

S3168：在不存在目标区域时，确定第二图像对应的场景不存在光源。

请参阅图18，在某些实施方式中，第二处理模块316包括第二划分单元3162、第二判断单元3164、第五确定单元3166和第六确定单元3168。第二划分单元3162用于将第二图像分成多个区域。第二判断单元3164用于根据每个区域的直方图判断区域是否为包括光源的目标区域。第五确定单元3166用于在存在至少一个目标区域时，确定第二图像对应的场景存在光源。第六确定单元3168用于在不存在目标区域时，确定第二图像对应的场景不存在光源。

也即是说，步骤S3162可以由第二划分单元3162实现，步骤S3164可以由第二判断单元3164实现，步骤S3166可以由第五确定单元3166实现，步骤S3168可以由第六确定单元3168实现。

如此，可以通过第二图像的每个区域的直方图判断第二图像对应的场景是否存在光源。

通过第二图像的每个区域的直方图判断第二图像对应的场景是否存在光源的方法与上述通过第一图像的每个区域的直方图判断第一图像对应的场景是否存在光源的方法类似，在此不做赘述。

请参阅图19，在某些实施方式中，步骤S316后包括以下步骤：

S332：在第二图像对应的场景存在光源时，判断是否存在相邻的多个目标区域；

S334：在存在相邻的多个目标区域时将相邻的多个目标区域拼接为光源；和

S336：在不存在相邻的多个目标区域时将目标区域确定为光源。

请参阅图20，在某些实施方式中，图像处理装置300包括第二判断模块332、第二拼接模块334和第二确定模块336。第二判断模块332用于在第二图像对应的场景存在光源时，判断是否存在相邻的多个目标区域。第二拼接模块334用于在存在相邻的多个目标区域时将相邻的多个目标区域拼接为光源。第二确定模块336用于在不存在相邻的多个目标区域时将目标区域确定为光源。

也即是说，步骤S332可以由第二判断模块332实现，步骤S334可以由第二拼接模块334实现，步骤S336可以由第二确定模块336实现。

如此，可以确定第二图像中的光源位置。

确定第二图像中的光源位置的方法与上述确定第一图像中的光源位置的方法类似，在此不做赘述。

请参阅图21，在某些实施方式中，步骤S318包括以下步骤：

S3182：根据光源的中心沿径向向外的亮度分布确定高亮区域和中亮区域；

S3184：将高亮区域的基色通道像素平均值减去中亮区域的基色通道像素平均值以确定光源颜色；和

S3186：根据光源颜色确定色温。

请参阅图22，在某些实施方式中，第三处理模块318包括第七确定单元3182、第二处理单元3184和第八确定单元3186。第七确定单元3182用于根据光源的中心沿径向向外的亮度分布确定高亮区域和中亮区域。第二处理单元3184用于将高亮区域的基色通道像素平均值减去中亮区域的基色通道像素平均值以确定光源颜色。第八确定单元3186用于根据光源颜色确定色温。

也即是说，步骤S3182可以由第七确定单元3182实现，步骤S3184可以由第二处理单元3184实现，步骤S3186可以由第八确定单元3186实现。

如此，可以通过第二图像的高亮区域和中亮区域确定光源颜色。

通过第二图像的高亮区域和中亮区域确定光源颜色的方法与上述通过第一图像的高亮区域和中亮区域确定光源颜色的方法类似，在此不做赘述。

请参阅图23，在某些实施方式中，步骤S316后包括以下步骤：

S338：在第二图像对应的场景不存在光源时，计算第一图像的基色通道像素平均值；

S342：根据第一图像的基色通道像素平均值确定第一图像的基色通道调整值；和

S344：根据基色通道调整值对第一图像进行白平衡处理。

请参阅图24，在某些实施方式中，图像处理装置300包括计算模块338、第三确定模块342和第五处理模块344。计算模块338用于在第二图像对应的场景不存在光源时，计算第一图像的基色通道像素平均值。第三确定模块342用于根据第一图像的基色通道像素平均值确定第一图像的基色通道调整值。第五处理模块344用于根据基色通道调整值对第一图像进行白平衡处理。

也即是说，步骤S338可以由计算模块338实现，步骤S342可以由第三确定模块342实现，步骤S344可以由第五处理模块344实现。

如此，可以通过第一图像的基色通道像素平均值对第一图像进行白平衡处理。

具体地，首先，计算整个第一图像所有像素的像素值的算术平均值以获得各个基色通道像素平均值，例如整个第一图像的基色通道像素平均值(R_avg，G_avg，B_avg)为(50，100，150)。其次，根据第一图像的基色通道像素平均值可以确定第一图像的基色通道调整值，可以理解为，根据整个第一图像的基色通道像素平均值确定调整基准值K，例如(R_avg，G_avg，B_avg)为(50，100，50)，则K＝(R_avg+G_avg+B_avg)/3＝200/3，根据调整基准值K和各个基色通道像素平均值确定第一图像各个基色通道调整值，例如R通道调整值为K/R_avg＝(200/3)/50＝4/3，G通道调整值为K/G_avg＝(200/3)/100＝2/3，B通道调整值为K/B_avg＝(200/3)/50＝4/3。最后，根据基色通道调整值对第一图像进行白平衡处理，可以理解为，将第一图像中的每个像素的各个基色通道乘以对应的基色通道调整值以获得调整后的像素，合并调整后的各个像素即可获得白平衡处理后的第一图像，例如第一图像中一个像素的基色通道像素值为(100，200，150)，根据基色通道调整值对第一图像进行白平衡处理后该像素的基色通道像素值为(100*4/3，200*2/3，150*4/3)＝(400/3，400/3，200)。

上述图像处理装置300中各个模块的划分仅用于举例说明，在其他实施例中，可将图像处理装置300按照需要划分为不同的模块，以完成上述图像处理装置300的全部或部分功能。

本申请实施例还提供了一种计算机可读存储介质。一个或多个包含计算机可执行指令的非易失性计算机可读存储介质，当计算机可执行指令被一个或多个处理器执行时，使得处理器执行以下步骤：

S312：处理摄像头100采集的第一图像以判断第一图像对应的场景是否存在光源；

S314：在第一图像对应的场景不存在光源时，控制致动器60移动镜头20和/或图像传感器40后控制摄像头100采集与第一图像至少部分不重叠的第二图像；

S316：处理第二图像以判断第二图像对应的场景是否存在光源；和

S318：在第二图像对应的场景存在光源时检测光源的色温并根据色温对第一图像进行白平衡处理。

图25为一个实施例中计算机设备的内部结构示意图。如图25所示，该计算机设备1000包括通过系统总线510连接的处理器520、存储器530(例如为非易失性存储介质)、内存储器540、显示屏550和输入装置560。其中，计算机设备1000的存储器530存储有操作系统和计算机可读指令。该计算机可读指令可被处理器520执行，以实现本申请实施方式的图像处理方法。该处理器520用于提供计算和控制能力，支撑整个计算机设备1000的运行。计算机设备1000的内存储器530为存储器520中的计算机可读指令的运行提供环境。计算机设备1000的显示屏550可以是液晶显示屏或者电子墨水显示屏等，输入装置560可以是显示屏550上覆盖的触摸层，也可以是计算机设备1000外壳上设置的按键、轨迹球或触控板，也可以是外接的键盘、触控板或鼠标等。该计算机设备1000可以是手机、平板电脑、笔记本电脑、个人数字助理或穿戴式设备(例如智能手环、智能手表、智能头盔、智能眼镜)等。本领域技术人员可以理解，图25中示出的结构，仅仅是与本申请方案相关的部分结构的示意图，并不构成对本申请方案所应用于其上的计算机设备1000的限定，具体的计算机设备1000可以包括比图中所示更多或更少的部件，或者组合某些部件，或者具有不同的部件布置。

请参阅图26，本申请实施例的计算机设备1000中包括图像处理电路800，图像处理电路800可以利用硬件和/或软件组件实现，可包括定义ISP(Image Signal Processing，图像信号处理)管线的各种处理单元。图26为一个实施例中图像处理电路800的示意图。如图26所示，为便于说明，仅示出与本申请实施例相关的图像处理技术的各个方面。

如图26所示，图像处理电路800包括ISP处理器810(ISP处理器810可为处理器520或处理器520的一部分)和控制逻辑器820。摄像头100捕捉的图像数据首先由ISP处理器810处理，ISP处理器810对图像数据进行分析以捕捉可用于确定摄像头100的一个或多个控制参数的图像统计信息。摄像头100可包括一个或多个透镜30和图像传感器40。图像传感器40可包括色彩滤镜阵列(如Bayer滤镜)，图像传感器40可获取每个成像像素捕捉的光强度和波长信息，并提供可由ISP处理器810处理的一组原始图像数据。传感器840(如陀螺仪)可基于传感器840接口类型把采集的图像处理的参数(如防抖参数)提供给ISP处理器810。传感器840接口可以为SMIA(Standard Mobile Imaging Architecture，标准移动成像架构)接口、其它串行或并行照相机接口或上述接口的组合。

此外，图像传感器40也可将原始图像数据发送给传感器840，传感器840可基于传感器840接口类型把原始图像数据提供给ISP处理器810，或者传感器840将原始图像数据存储到图像存储器850中。

ISP处理器810按多种格式逐个像素地处理原始图像数据。例如，每个图像像素可具有8、10、12或14比特的位深度，ISP处理器810可对原始图像数据进行一个或多个图像处理操作、收集关于图像数据的统计信息。其中，图像处理操作可按相同或不同的位深度精度进行。

ISP处理器810还可从图像存储器850接收图像数据。例如，传感器840接口将原始图像数据发送给图像存储器850，图像存储器850中的原始图像数据再提供给ISP处理器810以供处理。图像存储器850可为存储器530、存储器530的一部分、存储设备、或电子设备内的独立的专用存储器，并可包括DMA(Direct Memory Access，直接直接存储器存取)特征。

当接收到来自图像传感器40接口或来自传感器840接口或来自图像存储器850的原始图像数据时，ISP处理器810可进行一个或多个图像处理操作，如时域滤波。处理后的图像数据可发送给图像存储器850，以便在被显示之前进行另外的处理。ISP处理器810从图像存储器850接收处理数据，并对所述处理数据进行原始域中以及RGB和YCbCr颜色空间中的图像数据处理。ISP处理器810处理后的图像数据可输出给显示器870(显示器870可包括显示屏550)，以供用户观看和/或由图形引擎或GPU(Graphics Processing Unit，图形处理器)进一步处理。此外，ISP处理器810的输出还可发送给图像存储器850，且显示器870可从图像存储器850读取图像数据。在一个实施例中，图像存储器850可被配置为实现一个或多个帧缓冲器。此外，ISP处理器810的输出可发送给编码器/解码器860，以便编码/解码图像数据。编码的图像数据可被保存，并在显示于显示器870设备上之前解压缩。编码器/解码器860可由CPU或GPU或协处理器实现。

ISP处理器810确定的统计数据可发送给控制逻辑器820单元。例如，统计数据可包括自动曝光、自动白平衡、自动聚焦、闪烁检测、黑电平补偿、透镜30阴影校正等图像传感器40统计信息。控制逻辑器820可包括执行一个或多个例程(如固件)的处理元件和/或微控制器，一个或多个例程可根据接收的统计数据，确定摄像头100的控制参数及ISP处理器810的控制参数。例如，摄像头100的控制参数可包括传感器840控制参数(例如增益、曝光控制的积分时间、防抖参数等)、照相机闪光控制参数、透镜30控制参数(例如聚焦或变焦用焦距)、或这些参数的组合。ISP处理器810的控制参数可包括用于自动白平衡和颜色调整(例如，在RGB处理期间)的增益水平和色彩校正矩阵，以及透镜30阴影校正参数。

以下为运用图26中图像处理技术实现图像处理方法的步骤：

S312：处理摄像头100采集的第一图像以判断第一图像对应的场景是否存在光源；

S314：在第一图像对应的场景不存在光源时，控制致动器60移动镜头20和/或图像传感器40后控制摄像头100采集与第一图像至少部分不重叠的第二图像；

S316：处理第二图像以判断第二图像对应的场景是否存在光源；和

S318：在第二图像对应的场景存在光源时检测光源的色温并根据色温对第一图像进行白平衡处理。

本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，所述的程序可存储于一非易失性计算机可读存储介质中，该程序在执行时，可包括如上述各方法的实施例的流程。其中，所述的存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory，ROM)等。

以上所述实施例仅表达了本申请的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对本申请专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本申请构思的前提下，还可以做出若干变形和改进，这些都属于本申请的保护范围。因此，本申请专利的保护范围应以所附权利要求为准。

Claims (22)

1.一种图像处理方法，用于计算机设备，其特征在于，所述计算机设备包括摄像头，所述摄像头包括镜头、图像传感器和致动器，所述图像处理方法包括以下步骤：

处理所述摄像头采集的第一图像以判断所述第一图像对应的场景是否存在光源；

在所述第一图像对应的场景不存在所述光源时，控制所述致动器移动所述镜头和/或所述图像传感器后控制所述摄像头采集与所述第一图像至少部分不重叠的第二图像；和

处理所述第二图像以判断所述第二图像对应的场景是否存在所述光源；和

在所述第二图像对应的场景存在所述光源时检测所述光源的色温并根据所述色温对所述第一图像进行白平衡处理。

2.根据权利要求1所述的图像处理方法，其特征在于，所述处理所述摄像头采集的第一图像以判断所述第一图像对应的场景是否存在光源的步骤包括以下步骤：

将所述第一图像分成多个区域；

根据每个所述区域的直方图判断所述区域是否为包括所述光源的目标区域；

在存在至少一个所述目标区域时，确定所述第一图像对应的场景存在所述光源；和在不存在所述目标区域时，确定所述第一图像对应的场景不存在所述光源。

3.根据权利要求2所述的图像处理方法，其特征在于，所述处理所述摄像头采集的第一图像以判断所述第一图像对应的场景是否存在光源的步骤后包括以下步骤：

在所述第一图像对应的场景存在所述光源时，判断是否存在相邻的多个所述目标区域；

在存在相邻的多个所述目标区域时将相邻的多个所述目标区域拼接为所述光源；和在不存在相邻的多个所述目标区域时将所述目标区域确定为所述光源。

4.根据权利要求1所述的图像处理方法，其特征在于，所述处理所述摄像头采集的第一图像以判断所述第一图像对应的场景是否存在光源的步骤后包括以下步骤：

在所述第一图像对应的场景存在所述光源时，检测所述色温并根据所述色温对所述第一图像进行白平衡处理。

5.根据权利要求4所述的图像处理方法，其特征在于，所述在所述第一图像对应的场景存在所述光源时，检测所述色温并根据所述色温对所述第一图像进行白平衡处理的步骤包括以下步骤：

根据所述光源的中心沿径向向外的亮度分布确定高亮区域和中亮区域；

将所述高亮区域的基色通道像素平均值减去所述中亮区域的基色通道像素平均值以确定所述场景的光源颜色；和

根据所述光源颜色确定所述色温。

6.根据权利要求1所述的图像处理方法，其特征在于，所述处理所述第二图像以判断所述图像对应的场景是否存在所述光源的步骤包括以下步骤：

将所述第二图像分成多个区域；

根据每个所述区域的直方图判断所述区域是否为包括所述光源的目标区域；

在存在至少一个所述目标区域时，确定所述第二图像对应的场景存在所述光源；和在不存在所述目标区域时，确定所述第二图像对应的场景不存在所述光源。

7.根据权利要求6所述的图像处理方法，其特征在于，所述处理所述第二图像以判断所述第二图像对应的场景是否存在所述光源的步骤后包括以下步骤：

在所述第二图像对应的场景存在所述光源时，判断是否存在相邻的多个所述目标区域；

在存在相邻的多个所述目标区域时将相邻的多个所述目标区域拼接为所述光源；和在不存在相邻的多个所述目标区域时将所述目标区域确定为所述光源。

8.根据权利要求1所述的图像处理方法，其特征在于，所述在所述第二图像对应的场景存在所述光源时检测所述光源的色温并根据所述色温对所述第一图像进行白平衡处理的步骤包括以下步骤：

根据所述光源的中心沿径向向外的亮度分布确定高亮区域和中亮区域；

将所述高亮区域的基色通道像素平均值减去所述中亮区域的基色通道像素平均值以确定所述场景的光源颜色；和

根据所述光源颜色确定所述色温。

9.根据权利要求1所述的图像处理方法，其特征在于，所述处理所述第二图像以判断所述第二图像对应的场景是否存在所述光源的步骤后包括以下步骤：

在所述第二图像对应的场景不存在所述光源时，计算所述第一图像的基色通道像素平均值；

根据所述第一图像的基色通道像素平均值确定所述第一图像的基色通道调整值；和

根据所述基色通道调整值对所述第一图像进行白平衡处理。

10.根据权利要求1所述的图像处理方法，其特征在于，所述致动器包括微机电马达或机械马达。

11.一种图像处理装置，用于计算机设备，其特征在于，所述计算机设备包括摄像头，所述摄像头包括镜头、图像传感器和致动器，所述图像处理装置包括：

第一处理模块，所述第一处理模块用于处理所述摄像头采集的第一图像以判断所述第一图像对应的场景是否存在光源；

控制模块，所述控制模块用于在所述第一图像对应的场景不存在所述光源时控制所述致动器移动所述镜头和/或所述图像传感器后控制所述摄像头采集与所述第一图像至少部分不重叠的第二图像；

第二处理模块，所述第二处理模块用于处理所述第二图像以判断所述第二图像对应的场景是否存在所述光源；和

第三处理模块，所述第三处理模块用于在所述第二图像对应的场景存在所述光源时检测所述光源的色温并根据所述色温对所述第一图像进行白平衡处理。

12.根据权利要求11所述的图像处理装置，其特征在于，所述第一处理模块包括：

第一划分单元，所述第一划分单元用于将所述第一图像分成多个区域；

第一判断单元，所述第一判断单元用于根据每个所述区域的直方图判断所述区域是否为包括所述光源的目标区域；

第一确定单元，所述第一确定单元用于在存在至少一个所述目标区域时，确定所述第一图像对应的场景存在所述光源；和

第二确定单元，所述第二确定单元用于在不存在所述目标区域时，确定所述第一图像对应的场景不存在所述光源。

13.根据权利要求12所述的图像处理装置，其特征在于，所述图像处理装置包括：

第一判断模块，所述第一判断模块用于在所述第一图像对应的场景存在所述光源时，判断是否存在相邻的多个所述目标区域；

第一拼接模块，所述第一拼接模块用于在存在相邻的多个所述目标区域时将相邻的多个所述目标区域拼接为所述光源；和

第一确定模块，所述第一确定模块用于在不存在相邻的多个所述目标区域时将所述目标区域确定为所述光源。

14.根据权利要求11所述的图像处理装置，其特征在于，所述图像处理装置包括：

第四处理模块，所述第四处理模块用于在所述第一图像对应的场景存在所述光源时，检测所述光源的色温并根据所述色温对所述第一图像进行白平衡处理。

15.根据权利要求14所述的图像处理装置，其特征在于，所述第四处理模块包括：

第三确定单元，所述第三确定单元用于根据所述光源的中心沿径向向外的亮度分布确定高亮区域和中亮区域；

第一处理单元，所述第一处理单元用于将所述高亮区域的基色通道像素平均值减去所述中亮区域的基色通道像素平均值以确定光源颜色；和

第四确定单元，所述第四确定单元用于根据所述光源颜色确定所述色温。

16.根据权利要求11所述的图像处理装置，其特征在于，所述第二处理模块包括：

第二划分单元，所述第二划分单元用于将所述第二图像分成多个区域；

第二判断单元，所述第二判断单元用于根据每个所述区域的直方图判断所述区域是否为包括所述光源的目标区域；

第五确定单元，所述第五确定单元用于在存在至少一个所述目标区域时，确定所述第二图像对应的场景存在所述光源；和

第六确定单元，所述第六确定单元用于在不存在所述目标区域时，确定所述第二图像对应的场景不存在所述光源。

17.根据权利要求16所述的图像处理装置，其特征在于，所述图像处理装置包括：

第二判断模块，所述第二判断模块用于在所述第二图像对应的场景存在所述光源时，判断是否存在相邻的多个所述目标区域；

第二拼接模块，所述第二拼接模块用于在存在相邻的多个所述目标区域时将相邻的多个所述目标区域拼接为所述光源；和

第二确定模块，所述第二确定模块用于在不存在相邻的多个所述目标区域时将所述目标区域确定为所述光源。

18.根据权利要求11所述的图像处理装置，其特征在于，所述第三处理模块包括：

第七确定单元，所述第七确定单元用于根据所述光源的中心沿径向向外的亮度分布确定高亮区域和中亮区域；

第二处理单元，所述第二处理单元用于将所述高亮区域的基色通道像素平均值减去所述中亮区域的基色通道像素平均值以确定光源颜色；和

第八确定单元，所述第八确定单元用于根据所述光源颜色确定所述色温。

19.根据权利要求11所述的图像处理装置，其特征在于，所述图像处理装置包括：

计算模块，所述计算模块用于在所述第二图像对应的场景不存在所述光源时，计算所述第一图像的基色通道像素平均值；

第三确定模块，所述第三确定模块用于根据所述第一图像的基色通道像素平均值确定所述第一图像的基色通道调整值；和

第五处理模块，所述第五处理模块用于根据所述基色通道调整值对所述第一图像进行白平衡处理。

20.根据权利要求11所述的图像处理装置，其特征在于，所述致动器包括微机电马达或机械马达。

21.一个或多个包含计算机可执行指令的非易失性计算机可读存储介质，当所述计算机可执行指令被一个或多个处理器执行时，使得所述处理器执行权利要求1至10中任一项所述的图像处理方法。

22.一种计算机设备，包括存储器及处理器，所述存储器中储存有计算机可读指令，所述指令被所述处理器执行时，使得所述处理器执行权利要求1至10中任一项所述的图像处理方法。