CN109040607B - 成像控制方法、装置、电子设备和计算机可读存储介质 - Google Patents

Abstract

本申请提出一种成像控制方法、装置、电子设备和计算机可读存储介质，其中，方法应用于成像设备，成像设备包括由多个感光像素单元组成的像素单元阵列，每一感光像素单元包括曝光时长依次增加的短曝光像素、中曝光像素和长曝光像素，方法包括：确定环境亮度的亮度等级；根据环境亮度的亮度等级，从各感光像素单元的短曝光像素、中曝光像素和长曝光像素中，确定目标像素；控制各感光像素单元中确定出的目标像素输出原始像素信息；根据各感光像素单元输出的原始像素信息进行成像。该方法能够保留拍摄图像中较多的有效信息，提升拍摄图像的信噪比，以及提升拍摄图像的亮度，进而提升成像效果和成像质量，改善用户的拍摄体验。

Description

成像控制方法、装置、电子设备和计算机可读存储介质

技术领域

本申请涉及电子设备技术领域，尤其涉及一种成像控制方法、装置、电子设备和计算机可读存储介质。

背景技术

随着终端技术的不断发展，越来越多的用户使用电子设备拍摄图像。在逆光场景下，当用户使用电子设备的前置摄像头自拍时，由于用户处于光源和电子设备之间，容易造成人脸曝光不充分的情况发生。如果通过调节曝光来提高人脸亮度，则会使背景区域过曝光，甚至无法看清自拍的场景。

现有技术中，通过高动态范围(High Dynamic Range，简称HDR)技术，选择像素单元阵列中的一个合适的像素单元参与成像。

但是，一些拍摄场景下使用这种方式拍摄得到的图像噪点较多，以及图像亮度较低。

发明内容

本申请提出一种成像控制方法、装置、电子设备和计算机可读存储介质，用于根据拍摄环境的亮度等级，从各感光像素单元中选取合适的曝光像素作为目标像素，而后利用各感光像素单元中的目标像素参与成像，可以保留拍摄图像中较多的有效信息，提升拍摄图像的信噪比，以及提升拍摄图像的亮度，进而提升成像效果和成像质量，改善用户的拍摄体验，以解决现有技术中图像噪点较多，以及图像亮度较低的技术问题。

本申请一方面实施例提出了一种成像控制方法，应用于成像设备，所述成像设备包括由多个感光像素单元组成的像素单元阵列，每一感光像素单元包括曝光时长依次增加的短曝光像素、中曝光像素和长曝光像素，所述方法包括以下步骤：

确定环境亮度的亮度等级；

根据环境亮度的亮度等级，从各感光像素单元的所述短曝光像素、所述中曝光像素和所述长曝光像素中，确定目标像素；

控制各感光像素单元中确定出的目标像素输出所述原始像素信息；

根据各感光像素单元输出的原始像素信息进行成像。

本申请实施例的成像控制方法，通过确定环境亮度的亮度等级，而后根据环境亮度的亮度等级，从各感光像素单元的短曝光像素、中曝光像素和长曝光像素中，确定目标像素，接着控制各感光像素单元中确定出的目标像素输出原始像素信息，最后根据各感光像素单元输出的原始像素信息进行成像。由此，可以根据拍摄环境的亮度等级，从各感光像素单元中选取合适的曝光像素作为目标像素，而后利用各感光像素单元中的目标像素参与成像，可以保留拍摄图像中较多的有效信息，提升拍摄图像的信噪比，以及提升拍摄图像的亮度，进而提升成像效果和成像质量，改善用户的拍摄体验。

本申请又一方面实施例提出了一种成像控制装置，应用于成像设备，所述成像设备包括由多个感光像素单元组成的像素单元阵列，每一感光像素单元包括曝光时长依次增加的短曝光像素、中曝光像素和长曝光像素，所述装置包括：

亮度确定模块，用于确定环境亮度的亮度等级；

像素确定模块，用于根据环境亮度的亮度等级，从各感光像素单元的所述短曝光像素、所述中曝光像素和所述长曝光像素中，确定目标像素；

控制模块，用于控制各感光像素单元中确定出的目标像素输出所述原始像素信息；

成像模块，用于根据各感光像素单元输出的原始像素信息进行成像。

本申请实施例的成像控制装置，通过确定环境亮度的亮度等级，而后根据环境亮度的亮度等级，从各感光像素单元的短曝光像素、中曝光像素和长曝光像素中，确定目标像素，接着控制各感光像素单元中确定出的目标像素输出原始像素信息，最后根据各感光像素单元输出的原始像素信息进行成像。由此，可以根据拍摄环境的亮度等级，从各感光像素单元中选取合适的曝光像素作为目标像素，而后利用各感光像素单元中的目标像素参与成像，可以保留拍摄图像中较多的有效信息，提升拍摄图像的信噪比，以及提升拍摄图像的亮度，进而提升成像效果和成像质量，改善用户的拍摄体验。

本申请又一方面实施例提出了一种电子设备，包括：由多个感光像素单元组成的像素单元阵列，每一感光像素单元包括曝光时长依次增加的短曝光像素、中曝光像素和长曝光像素，所述电子装置还包括：存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时，实现如本申请前述实施例提出的成像控制方法。

本申请又一方面实施例提出了一种非临时性计算机可读存储介质，其上存储有计算机程序，其特征在于，该程序被处理器执行时实现如本申请前述实施例提出的成像控制方法。

本申请附加的方面和优点将在下面的描述中部分给出，部分将从下面的描述中变得明显，或通过本申请的实践了解到。

附图说明

本申请上述的和/或附加的方面和优点从下面结合附图对实施例的描述中将变得明显和容易理解，其中：

图1为本申请实施例一所提供的成像控制方法的流程示意图；

图2为本申请实施例中成像设备的像素单元阵列的部分结构示意图；

图3为本申请实施例二所提供的成像控制方法的流程示意图；

图4为本申请实施例中逆光场景对应的灰度直方图示意图；

图5为本申请实施例三所提供的成像控制装置的结构示意图；

图6为本申请实施例四所提供的成像控制装置的结构示意图；

图7是本申请某些实施方式的电子设备的模块示意图；

图8是本申请某些实施方式的图像处理电路的模块示意图。

具体实施方式

下面详细描述本申请的实施例，所述实施例的示例在附图中示出，其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的，旨在用于解释本申请，而不能理解为对本申请的限制。

本申请主要针对现有技术中图像噪点较多，以及图像亮度较低的技术问题，提供一种成像控制方法。

本申请实施例的成像控制方法，通过确定环境亮度的亮度等级，而后根据环境亮度的亮度等级，从各感光像素单元的短曝光像素、中曝光像素和长曝光像素中，确定目标像素，接着控制各感光像素单元中确定出的目标像素输出原始像素信息，最后根据各感光像素单元输出的原始像素信息进行成像。由此，可以根据拍摄环境的亮度等级，从各感光像素单元中选取合适的曝光像素作为目标像素，而后利用各感光像素单元中的目标像素参与成像，可以保留拍摄图像中较多的有效信息，提升拍摄图像的信噪比，以及提升拍摄图像的亮度，进而提升成像效果和成像质量，改善用户的拍摄体验。

下面参考附图描述本申请实施例的成像控制方法、装置、电子设备和计算机可读存储介质。

图1为本申请实施例一所提供的成像控制方法的流程示意图。

本申请实施例的成像控制方法，应用于成像设备，成像设备包括由多个感光像素单元组成的像素单元阵列，每一感光像素单元包括曝光时长依次增加的短曝光像素、中曝光像素和长曝光像素。

其中，长曝光像素指的是感光像素对应的曝光时间为长曝光时间，中曝光像素指的是感光像素对应的曝光时间为中曝光时间，短曝光像素指的是感光像素对应的曝光时间为短曝光时间，长曝光时间>中曝光时间>短曝光时间，即长曝光像素的长曝光时间大于中曝光像素的中曝光时间，且中曝光像素的中曝光时间大于短曝光像素的短曝光时间。

在成像设备工作时，长曝光像素、中曝光像素及短曝光像素同步曝光，同步曝光指的是中曝光像素及短曝光像素的曝光时间位于长曝光像素的曝光时间以内。具体地，可以首先控制长曝光像素最先开始曝光，在长曝光像素的曝光期间内，再控制中曝光像素以及短曝光像素曝光，其中，中曝光像素和短曝光像素的曝光截止时间应与长曝光像素的曝光截止时间相同或位于长曝光像素的曝光截止时间之前。

或者，还可以控制长曝光像素、中曝光像素以及短曝光像素同时开始曝光，即长曝光像素、中曝光像素以及短曝光像素的曝光起始时间相同。如此，无需控制像素单元阵列依次进行长曝、中曝和短曝，可减小图像的拍摄时间。

作为一种示例，参见图2，图2为本申请实施例中成像设备的像素单元阵列的部分结构示意图。其中，成像设备30包括像素单元阵列31和设置在像素单元阵列31上的滤光片单元阵列32。像素单元阵列31包括多个感光像素单元311，每个感光像素单元311包括曝光时长依次增加的短曝光像素3111、中曝光像素3111和长曝光像素3111。例如，图2以每个感光像素单元311包括1个长曝光像素3111、2个中曝光像素3111、1个短曝光像素3111示例。当然，每一个感光像素单元311中的长曝光像素、中曝光像素和短曝光像素的数量也可为其他数值，对此不作限制。

滤光片单元阵列32包括与多个感光像素单元311对应的多个滤光片单元322，每个滤光片单元322覆盖对应的感光像素单元311。其中，像素单元阵列31可以为拜耳阵列。

需要说明的是，同一感光像素单元内包含的各曝光像素由同色滤光片覆盖。

如图1所示，该成像控制方法包括以下步骤：

步骤101，确定环境亮度的亮度等级。

本申请实施例中，可以预先将环境亮度划分为三个亮度等级，分别为亮度从小到大排列的低亮度等级、中亮度等级和高亮度等级，例如，亮度等级可以由电子设备的内置程序预先设置，或者，还可以由用户进行设置，对此不作限制。

其中，电子设备可以是手机、平板电脑、个人数字助理、穿戴式设备等具有各种操作系统、触摸屏和/或显示屏的硬件设备。

本申请实施例中，可以采用独立的测光器件，测量环境亮度，或者，还可以读取摄像头自动调节的感光度ISO值，根据读取到的ISO值，确定环境亮度，或者，还可以根据预览图像的曝光度ISO，确定环境亮度，或者，还可以控制像素单元阵列对环境亮度值进行测量，确定环境亮度，对此不作限制。在确定环境亮度后，可以根据该环境亮度，确定亮度等级。

需要说明的是，上述ISO值用来指示摄像头的感光度，常用的ISO值有50、100、200、400、1000等等，摄像头可以根据环境亮度，自动调节ISO值，从而，本实施例中，可以根据ISO值，反推出环境亮度。一般在光线充足的情况下，ISO值可以为50或100，在光线不足的情况下，ISO值可以为400或更高。

应当理解的是，当电子设备所处的场景不同时，亮度等级可以设置不同，举例而言，当白天，且电子设备处于室内时，ISO值处于200至500之间，而当白天，且电子设备处于室外时，ISO值一般低于200。因此，可以根据实际需求以及具体的拍摄场景，设置每个亮度等级的大小和区间。

步骤102，根据环境亮度的亮度等级，从各感光像素单元的短曝光像素、中曝光像素和长曝光像素中，确定目标像素。

需要说明的是，当环境亮度等级属于高亮度等级时，根据红绿蓝(Red GreenBlue，简称RGB)三色直方图，可以直观地显示三色不同明暗度的细节内容分布，过曝的部分就会聚集在直方图的左右两端，在容忍度以内，虽然图像较亮，但是，直方图的左右两端对应的区域并不会完全丢失细节，即不会只显示全白的色块(255,255,255)，此时，为了保留较多的图像细节，可以减小进光量，即采用短曝光像素进行成像。

而当环境亮度等级属于低亮度等级时，根据称RGB三色直方图，可以直观地显示三色不同明暗度的细节内容分布，欠曝的部分就会聚集在直方图的左右两端，在容忍度以内，虽然图像较暗，但是，直方图的左右两端对应的区域并不会完全丢失细节，即不会只显示全黑的色块(0,0,0)，此时，为了保留较多的图像细节，可以增大进光量，即采用长曝光像素进行成像。

因此，本申请中，当拍摄环境的亮度等级属于高亮度等级或低亮度等级时，可以将各感光像素单元中的长曝光像素和短曝光像素确定为目标像素。

而当拍摄环境的亮度等于属于中亮度等级时，此时，拍摄环境的亮度较为适宜，可以保留图像中较多的细节，因此，可以进一步改善图像的成像效果。具体地，可以将各感光像素单元中的长曝光像素、中曝光像素和短曝光像素确定为目标像素。

步骤103，控制各感光像素单元中确定出的目标像素输出原始像素信息。

本申请实施例中，在确定各感光像素单元中的目标像素后，可以控制确定出的目标像素输出原始像素信息。

作为一种可能的实现方式，可以控制各感光像素单元中的目标像素输出分别处于不同曝光时间下的多个原始像素信息。

例如，当拍摄环境的亮度等级属于高亮度等级或低亮度等级时，目标像素为长曝光像素和短曝光像素，此时，可以控制各感光像素单元中的长曝光像素和短曝光像素同步曝光，其中长曝光像素对应的曝光时间为初始长曝光时间，短曝光像素对应的曝光时间为初始短曝光时间，初始长曝光时间和初始短曝光时间均为预先设定好的。在曝光结束后，像素单元阵列中的各感光像素单元中的目标像素将输出分别处于不同曝光时间下的多个原始像素信息。

又例如，当拍摄环境的亮度等于属于中亮度等级时，目标像素为长曝光像素、中曝光像素和短曝光像素，此时，可以控制各感光像素单元中的长曝光像素、中曝光像素和短曝光像素同步曝光，其中长曝光像素对应的曝光时间为初始长曝光时间，中曝光像素对应的曝光时间为初始中曝光时间，短曝光像素对应的曝光时间为初始短曝光时间，初始长曝光时间、初始中曝光时间及初始短曝光时间均为预先设定好的。在曝光结束后，像素单元阵列中的各感光像素单元中的目标像素将输出分别处于不同曝光时间下的多个原始像素信息。

作为另一种可能的实现方式，还可以控制像素单元阵列输出采用相同曝光时间曝光得到的多个原始像素信息。

例如，当拍摄环境的亮度等级属于高亮度等级或低亮度等级时，目标像素为长曝光像素和短曝光像素，此时，可以控制各感光像素单元中的长曝光像素和短曝光像素同步曝光，每个曝光像素的曝光时间相同，即长曝光像素和短曝光像素的曝光截止时间也相同。在曝光结束后，像素单元阵列中的各感光像素单元中的目标像素将输出采用相同曝光时间曝光得到的多个原始像素信息。

又例如，当拍摄环境的亮度等于属于中亮度等级时，目标像素为长曝光像素、中曝光像素和短曝光像素，此时，可以控制各感光像素单元中的长曝光像素、中曝光像素和短曝光像素同步曝光，每个曝光像素的曝光时间相同，即长曝光像素、中曝光像素和短曝光像素的曝光截止时间也相同。在曝光结束后，像素单元阵列中的各感光像素单元中的目标像素将输出分别处于不同曝光时间下的多个原始像素信息。

作为一种示例，假设每个感光像素单元均包括2个长曝光像素、1个中曝光像素和1个短曝光像素，当拍摄环境的亮度等于属于高亮度等级或低亮度等级时，每个感光像素单元将输出2个原始像素信息，分别为1个长曝光像素输出的原始像素信息和1个短曝光像素输出的原始像素信息。而当拍摄环境的亮度等于属于中亮度等级时，每个感光像素单元将输出4个原始像素信息，分别为2个长曝光像素输出的原始像素信息、1个中曝光像素输出的原始像素信息和1个短曝光像素输出的原始像素信息。

步骤104，根据各感光像素单元输出的原始像素信息进行成像。

本申请实施例中，在确定每个感光像素单元输出的原始像素信息后，可以根据原始像素信息进行成像。

可选地，由于每一感光像素单元包括曝光时长依次增加的短曝光像素、中曝光像素和长曝光像素，每一感光像素单元中的目标像素可以为长曝光像素和短曝光像素，或者为长曝光像素、中曝光像素和短曝光像素，因此，每个感光像素单元将输出至少两个原始像素信息，对于每个感光像素单元，可以计算该感光像素单元的合并像素信息，而后对合并像素信息进行差值计算，即可得到成像图像。

本申请实施例的成像控制方法，通过确定环境亮度的亮度等级，而后根据环境亮度的亮度等级，从各感光像素单元的短曝光像素、中曝光像素和长曝光像素中，确定目标像素，接着控制各感光像素单元中确定出的目标像素输出原始像素信息，最后根据各感光像素单元输出的原始像素信息进行成像。由此，可以根据拍摄环境的亮度等级，从各感光像素单元中选取合适的曝光像素作为目标像素，而后利用各感光像素单元中的目标像素参与成像，可以保留拍摄图像中较多的有效信息，提升拍摄图像的信噪比，以及提升拍摄图像的亮度，进而提升成像效果和成像质量，改善用户的拍摄体验。

为了清楚说明上一实施例，本实施例提供了另一种成像控制方法，图3为本申请实施例二所提供的成像控制方法的流程示意图。

如图3所示，该成像控制方法可以包括以下步骤：

步骤201，根据拍摄的预览图像的直方图，确定当前拍摄环境属于逆光场景。

具体地，在拍摄的预览图像时，可以根据像素单元阵列测量测到的环境亮度值对应的灰度值，生成灰度直方图，而后根据处于各灰度范围的感光像素数占比，判断当前拍摄环境是否为逆光场景。

例如，当根据灰度直方图，确定像素单元阵列中测量得到的环境亮度值对应的灰度值处于灰度范围[0,20]的感光像素，与像素单元阵列中所有感光像素的比值grayRatio大于第一阈值，例如第一阈值可以为0.135，且测量得到的环境亮度值对应的灰度值处于灰度范围[200,256)的感光像素，与像素单元阵列中所有感光像素的比值grayRatio大于第二阈值，例如第二阈值可以为0.0899时，则确定当前拍摄环境为逆光场景。

或者，当根据灰度直方图，确定像素单元阵列中测量得到的环境亮度值对应的灰度值处于灰度范围[0,50]的感光像素，与像素单元阵列中所有感光像素的比值grayRatio大于第三阈值，例如第三阈值可以为0.3，且测量得到的环境亮度值对应的灰度值处于灰度范围[200,256)的感光像素，与像素单元阵列中所有感光像素的比值grayRatio大于第四阈值，例如第四阈值可以为0.003时，则确定当前拍摄环境为逆光场景。

或者，当根据灰度直方图，确定像素单元阵列中测量得到的环境亮度值对应的灰度值处于灰度范围[0,50]的感光像素，与像素单元阵列中所有感光像素的比值grayRatio大于第五阈值，例如第五阈值可以为0.005，且测量得到的环境亮度值对应的灰度值处于灰度范围[200,256)的感光像素，与像素单元阵列中所有感光像素的比值grayRatio大于第六阈值，例如第六阈值可以为0.25时，则确定当前拍摄环境为逆光场景。

作为一种示例，逆光场景对应的灰度直方图可以如图4所示。

可以理解的是，一般情况下，在当前拍摄环境为逆光场景时，像素单元阵列中各感光像素测量得到的环境亮度值将存在较高的亮度差异，因此，作为本申请实施例的另一种可能的实现方式，还可以根据像素单元阵列测量得到的环境亮度值，确定成像对象的亮度值以及背景的亮度值，并判断成像对象的亮度值和背景的亮度值之间的差值是否大于预设阈值，在成像对象的亮度值和背景的亮度值之间的差值大于预设阈值时，确定当前拍摄环境为逆光场景，而在成像对象的亮度值和背景的亮度值之间的差值小于或者等于预设阈值时，确定当前拍摄环境为非逆光场景。

其中，预设阈值可以预设在电子设备的内置程序中，或者，预设阈值还可以由用户进行设置，对此不作限制。成像对象为需要电子设备进行拍摄的对象，例如人(或者人脸)、动物、物体、景物等对象。

步骤202，确定环境亮度的亮度等级，其中，亮度等级包括亮度从小到大排列的低亮度等级、中亮度等级和高亮度等级。

步骤203，判断拍摄环境的亮度等级是否属于中亮度等级，若是，执行步骤204，否则，执行步骤205。

步骤204，将各感光像素单元中的长曝光像素、中曝光像素和短曝光像素确定为目标像素。

步骤205，将各感光像素单元中的长曝光像素和短曝光像素确定为目标像素。

步骤206，控制各感光像素单元中确定出的目标像素输出原始像素信息。

步骤202-206的执行过程可以参见上述实施例中步骤101-103的执行过程，在此不做赘述。

步骤207，对每一个感光像素单元，根据对输出的原始像素信息计算平均值，以得到对应感光像素单元的合并像素信息。

本申请实施例中，针对像素单元阵列中的每个感光像素单元，可以根据该感光像素单元输出的至少两个原始像素信息计算平均值，得到该感光像素单元的合并像素信息。

例如，当拍摄环境的亮度等级属于高亮度等级或低亮度等级时，每个感光像素单元输出的原始像素信息包括：长曝光像素输出的原始像素信息和短曝光像素输出的原始像素信息。假设每个感光像素单元包括：1个长曝光像素、2个中曝光像素和1个短曝光像素时，则每个感光像素单元将输出2个原始像素信息，分别为：1个长曝光像素输出的原始像素信息和1个短曝光像素输出的原始像素信息。标记1个长曝光像素输出的原始像素信息为R(L)，1个短曝光像素输出的原始像素信息为R(S)，则该感光像素单元的合并像素信息为：[R(S)+R(L)]/2。

再例如，当拍摄环境的亮度等于属于中亮度等级时，每个感光像素单元输出的原始像素信息包括：长曝光像素输出的原始像素信息、中曝光像素输出的原始像素信息和短曝光像素输出的原始像素信息。假设每个感光像素单元包括：1个长曝光像素、2个中曝光像素和1个短曝光像素时，则每个感光像素单元将输出4个原始像素信息，分别为：1个长曝光像素输出的原始像素信息、2个中曝光像素输出的原始像素信息和1个短曝光像素输出的原始像素信息。标记1个长曝光像素输出的原始像素信息为R(L)，1个短曝光像素输出的原始像素信息为R(S)，2个中曝光像素输出的原始像素信息分别为R(M1)和R(M2)，则该感光像素单元的合并像素信息为：[R(S)+R(M1)+R(M2)+R(L)]/4。

步骤208，根据合并像素信息输出成像图像。

本申请实施例中，像素单元阵列中的每个感光像素单元均输出一个合并像素信息，每个感光像素单元的合并像素信息，对应成像图像中的一个图像像素的像素信息，可以根据每个感光像素单元的合并像素信息，插值计算得到成像图像。

本申请实施例的成像控制方法，通过确定环境亮度的亮度等级，而后根据环境亮度的亮度等级，从各感光像素单元的短曝光像素、中曝光像素和长曝光像素中，确定目标像素，接着控制各感光像素单元中确定出的目标像素输出原始像素信息，最后根据各感光像素单元输出的原始像素信息进行成像。由此，可以根据拍摄环境的亮度等级，从各感光像素单元中选取合适的曝光像素作为目标像素，而后利用各感光像素单元中的目标像素参与成像，可以保留拍摄图像中较多的有效信息，提升拍摄图像的信噪比，以及提升拍摄图像的亮度，进而提升成像效果和成像质量，改善用户的拍摄体验。

为了实现上述实施例，本申请还提出一种成像控制装置。

图5为本申请实施例三所提供的成像控制装置的结构示意图。

如图5所示，该成像控制装置100，应用于成像设备，成像设备包括由多个感光像素单元组成的像素单元阵列，每一感光像素单元包括曝光时长依次增加的短曝光像素、中曝光像素和长曝光像素，成像控制装置100包括：亮度确定模块101、像素确定模块102、控制模块103，以及成像模块104。其中，

亮度确定模块101，用于确定环境亮度的亮度等级。

像素确定模块102，用于根据环境亮度的亮度等级，从各感光像素单元的短曝光像素、中曝光像素和长曝光像素中，确定目标像素。

作为一种可能的实现方式，像素确定模块102，具体用于：若拍摄环境的亮度等级属于高亮度等级或低亮度等级时，将各感光像素单元中的长曝光像素和短曝光像素确定为目标像素；若拍摄环境的亮度等于属于中亮度等级时，将各感光像素单元中的长曝光像素、中曝光像素和短曝光像素确定为目标像素；其中，亮度等级包括亮度从小到大排列的低亮度等级、中亮度等级和高亮度等级。

控制模块103，用于控制各感光像素单元中确定出的目标像素输出原始像素信息。

成像模块104，用于根据各感光像素单元输出的原始像素信息进行成像。

进一步地，在本申请实施例的一种可能的实现方式中，参见图6，在图5所示实施例的基础上，该成像控制装置100还可以包括：

作为一种可能的实现方式，成像模块104，包括：

计算子模块1041，用于对每一个感光像素单元，根据对输出的原始像素信息计算平均值，以得到对应感光像素单元的合并像素信息。

输出子模块1042，用于根据合并像素信息输出成像图像。

作为一种可能的实现方式，一个感光像素单元的合并像素信息，对应成像图像中的一个图像像素的像素信息。

场景确定模块105，用于在确定环境亮度的亮度等级之前，根据拍摄的预览图像的直方图，确定当前拍摄环境属于逆光场景。

作为一种可能的实现方式，亮度确定模块101，具体用于：根据预览图像的曝光度ISO，确定环境亮度的亮度等级。

需要说明的是，前述对成像控制方法实施例的解释说明也适用于该实施例的成像控制装置100，此处不再赘述。

本申请实施例的控制装置，通过确定环境亮度的亮度等级，而后根据环境亮度的亮度等级，从各感光像素单元的短曝光像素、中曝光像素和长曝光像素中，确定目标像素，接着控制各感光像素单元中确定出的目标像素输出原始像素信息，最后根据各感光像素单元输出的原始像素信息进行成像。由此，可以根据拍摄环境的亮度等级，从各感光像素单元中选取合适的曝光像素作为目标像素，而后利用各感光像素单元中的目标像素参与成像，可以保留拍摄图像中较多的有效信息，提升拍摄图像的信噪比，以及提升拍摄图像的亮度，进而提升成像效果和成像质量，改善用户的拍摄体验。

为了实现上述实施例，本申请还提出一种电子设备，包括由多个感光像素单元组成的像素单元阵列，每一感光像素单元包括曝光时长依次增加的短曝光像素、中曝光像素和长曝光像素，所述电子装置还包括：存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时，实现如本申请前述实施例提出的成像控制方法。

为了实现上述实施例，本申请还提出一种非临时性计算机可读存储介质，其上存储有计算机程序，其特征在于，该程序被处理器执行时实现如本申请前述实施例提出的成像控制方法。

请参阅图7，本申请还提供一种电子设备200。电子设备200包括存储器50和处理器60。存储器50中存储有计算机可读指令。计算机可读指令被存储器50执行时，使得处理器60执行上述任一实施方式的成像控制方法。

图7为一个实施例中电子设备200的内部结构示意图。该电子设备200包括通过系统总线81连接的处理器60、存储器50(例如为非易失性存储介质)、内存储器82、显示屏83和输入装置84。其中，电子设备200的存储器50存储有操作系统和计算机可读指令。该计算机可读指令可被处理器60执行，以实现本申请实施方式的成像控制方法。该处理器60用于提供计算和控制能力，支撑整个电子设备200的运行。电子设备200的内存储器50为存储器52中的计算机可读指令的运行提供环境。电子设备200的显示屏83可以是液晶显示屏或者电子墨水显示屏等，输入装置84可以是显示屏83上覆盖的触摸层，也可以是电子设备200外壳上设置的按键、轨迹球或触控板，也可以是外接的键盘、触控板或鼠标等。该电子设备200可以是手机、平板电脑、笔记本电脑、个人数字助理或穿戴式设备(例如智能手环、智能手表、智能头盔、智能眼镜)等。本领域技术人员可以理解，图7中示出的结构，仅仅是与本申请方案相关的部分结构的示意图，并不构成对本申请方案所应用于其上的电子设备200的限定，具体的电子设备200可以包括比图中所示更多或更少的部件，或者组合某些部件，或者具有不同的部件布置。

请参阅图8，本申请实施例的电子设备200中包括图像处理电路90，图像处理电路90可利用硬件和/或软件组件实现，包括定义ISP(Image Signal Processing，图像信号处理)管线的各种处理单元。图8为一个实施例中图像处理电路90的示意图。如图8所示，为便于说明，仅示出与本申请实施例相关的图像处理技术的各个方面。

如图8所示，图像处理电路90包括ISP处理器91(ISP处理器91可为处理器60)和控制逻辑器92。摄像头93捕捉的图像数据首先由ISP处理器91处理，ISP处理器91对图像数据进行分析以捕捉可用于确定摄像头93的一个或多个控制参数的图像统计信息。摄像头93可包括一个或多个透镜932和图像传感器934。图像传感器934可包括色彩滤镜阵列(如Bayer滤镜)，图像传感器934可获取每个成像像素捕捉的光强度和波长信息，并提供可由ISP处理器91处理的一组原始图像数据。传感器94(如陀螺仪)可基于传感器94接口类型把采集的图像处理的参数(如防抖参数)提供给ISP处理器91。传感器94接口可以为SMIA(StandardMobile Imaging Architecture，标准移动成像架构)接口、其它串行或并行照相机接口或上述接口的组合。

此外，图像传感器934也可将原始图像数据发送给传感器94，传感器94可基于传感器94接口类型把原始图像数据提供给ISP处理器91，或者传感器94将原始图像数据存储到图像存储器95中。

ISP处理器91按多种格式逐个像素地处理原始图像数据。例如，每个图像像素可具有8、10、12或14比特的位深度，ISP处理器91可对原始图像数据进行一个或多个图像处理操作、收集关于图像数据的统计信息。其中，图像处理操作可按相同或不同的位深度精度进行。

ISP处理器91还可从图像存储器95接收图像数据。例如，传感器94接口将原始图像数据发送给图像存储器95，图像存储器95中的原始图像数据再提供给ISP处理器91以供处理。图像存储器95可为存储器50、存储器50的一部分、存储设备、或电子设备内的独立的专用存储器，并可包括DMA(Direct Memory Access，直接直接存储器存取)特征。

当接收到来自图像传感器934接口或来自传感器94接口或来自图像存储器95的原始图像数据时，ISP处理器91可进行一个或多个图像处理操作，如时域滤波。处理后的图像数据可发送给图像存储器95，以便在被显示之前进行另外的处理。ISP处理器91从图像存储器95接收处理数据，并对处理数据进行原始域中以及RGB和YCbCr颜色空间中的图像数据处理。ISP处理器91处理后的图像数据可输出给显示器97(显示器97可包括显示屏83)，以供用户观看和/或由图形引擎或GPU(Graphics Processing Unit，图形处理器)进一步处理。此外，ISP处理器91的输出还可发送给图像存储器95，且显示器97可从图像存储器95读取图像数据。在一个实施例中，图像存储器95可被配置为实现一个或多个帧缓冲器。此外，ISP处理器91的输出可发送给编码器/解码器96，以便编码/解码图像数据。编码的图像数据可被保存，并在显示于显示器97设备上之前解压缩。编码器/解码器96可由CPU或GPU或协处理器实现。

ISP处理器91确定的统计数据可发送给控制逻辑器92单元。例如，统计数据可包括自动曝光、自动白平衡、自动聚焦、闪烁检测、黑电平补偿、透镜932阴影校正等图像传感器934统计信息。控制逻辑器92可包括执行一个或多个例程(如固件)的处理元件和/或微控制器，一个或多个例程可根据接收的统计数据，确定摄像头93的控制参数及ISP处理器91的控制参数。例如，摄像头93的控制参数可包括传感器94控制参数(例如增益、曝光控制的积分时间、防抖参数等)、照相机闪光控制参数、透镜932控制参数(例如聚焦或变焦用焦距)、或这些参数的组合。ISP控制参数可包括用于自动白平衡和颜色调整(例如，在RGB处理期间)的增益水平和色彩校正矩阵，以及透镜932阴影校正参数。

例如，以下为运用图7中的处理器60或运用图8中的图像处理电路90(具体为ISP处理器91)实现成像控制方法的步骤：

确定环境亮度的亮度等级；

根据环境亮度的亮度等级，从各感光像素单元的所述短曝光像素、所述中曝光像素和所述长曝光像素中，确定目标像素；

控制各感光像素单元中确定出的目标像素输出所述原始像素信息；

根据各感光像素单元输出的原始像素信息进行成像。

再例如，以下为运用图7中的处理器或运用图8中的图像处理电路90(具体为ISP处理器)实现成像控制方法的步骤：

对每一个感光像素单元，根据对输出的原始像素信息计算平均值，以得到对应感光像素单元的合并像素信息；

根据合并像素信息输出成像图像。

在本说明书的描述中，参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本申请的至少一个实施例或示例中。在本说明书中，对上述术语的示意性表述不必须针对的是相同的实施例或示例。而且，描述的具体特征、结构、材料或者特点可以在任一个或多个实施例或示例中以合适的方式结合。此外，在不相互矛盾的情况下，本领域的技术人员可以将本说明书中描述的不同实施例或示例以及不同实施例或示例的特征进行结合和组合。

此外，术语“第一”、“第二”仅用于描述目的，而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此，限定有“第一”、“第二”的特征可以明示或者隐含地包括至少一个该特征。在本申请的描述中，“多个”的含义是至少两个，例如两个，三个等，除非另有明确具体的限定。

流程图中或在此以其他方式描述的任何过程或方法描述可以被理解为，表示包括一个或更多个用于实现定制逻辑功能或过程的步骤的可执行指令的代码的模块、片段或部分，并且本申请的优选实施方式的范围包括另外的实现，其中可以不按所示出或讨论的顺序，包括根据所涉及的功能按基本同时的方式或按相反的顺序，来执行功能，这应被本申请的实施例所属技术领域的技术人员所理解。

在流程图中表示或在此以其他方式描述的逻辑和/或步骤，例如，可以被认为是用于实现逻辑功能的可执行指令的定序列表，可以具体实现在任何计算机可读介质中，以供指令执行系统、装置或设备(如基于计算机的系统、包括处理器的系统或其他可以从指令执行系统、装置或设备取指令并执行指令的系统)使用，或结合这些指令执行系统、装置或设备而使用。就本说明书而言，"计算机可读介质"可以是任何可以包含、存储、通信、传播或传输程序以供指令执行系统、装置或设备或结合这些指令执行系统、装置或设备而使用的装置。计算机可读介质的更具体的示例(非穷尽性列表)包括以下：具有一个或多个布线的电连接部(电子装置)，便携式计算机盘盒(磁装置)，随机存取存储器(RAM)，只读存储器(ROM)，可擦除可编辑只读存储器(EPROM或闪速存储器)，光纤装置，以及便携式光盘只读存储器(CDROM)。另外，计算机可读介质甚至可以是可在其上打印所述程序的纸或其他合适的介质，因为可以例如通过对纸或其他介质进行光学扫描，接着进行编辑、解译或必要时以其他合适方式进行处理来以电子方式获得所述程序，然后将其存储在计算机存储器中。

应当理解，本申请的各部分可以用硬件、软件、固件或它们的组合来实现。在上述实施方式中，多个步骤或方法可以用存储在存储器中且由合适的指令执行系统执行的软件或固件来实现。如，如果用硬件来实现和在另一实施方式中一样，可用本领域公知的下列技术中的任一项或他们的组合来实现：具有用于对数据信号实现逻辑功能的逻辑门电路的离散逻辑电路，具有合适的组合逻辑门电路的专用集成电路，可编程门阵列(PGA)，现场可编程门阵列(FPGA)等。

本技术领域的普通技术人员可以理解实现上述实施例方法携带的全部或部分步骤是可以通过程序来指令相关的硬件完成，所述的程序可以存储于一种计算机可读存储介质中，该程序在执行时，包括方法实施例的步骤之一或其组合。

此外，在本申请各个实施例中的各功能单元可以集成在一个处理模块中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个模块中。上述集成的模块既可以采用硬件的形式实现，也可以采用软件功能模块的形式实现。所述集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时，也可以存储在一个计算机可读取存储介质中。

上述提到的存储介质可以是只读存储器，磁盘或光盘等。尽管上面已经示出和描述了本申请的实施例，可以理解的是，上述实施例是示例性的，不能理解为对本申请的限制，本领域的普通技术人员在本申请的范围内可以对上述实施例进行变化、修改、替换和变型。

Claims (8)

1.一种成像控制方法，其特征在于，应用于成像设备，所述成像设备包括由多个感光像素单元组成的像素单元阵列，每一感光像素单元包括曝光时长依次增加的短曝光像素、中曝光像素和长曝光像素，所述方法包括以下步骤：

确定环境亮度的亮度等级；

根据环境亮度的亮度等级，从各感光像素单元的所述短曝光像素、所述中曝光像素和所述长曝光像素中，确定目标像素；

控制各感光像素单元中确定出的目标像素输出所述原始像素信息；

根据各感光像素单元输出的原始像素信息进行成像；

所述根据环境亮度的亮度等级，从各感光像素单元的所述短曝光像素、所述中曝光像素和所述长曝光像素中，确定目标像素，包括：

若拍摄环境的亮度等级属于高亮度等级或低亮度等级时，将各感光像素单元中的长曝光像素和短曝光像素确定为所述目标像素；

若所述拍摄环境的亮度等级属于中亮度等级时，将各感光像素单元中的长曝光像素、中曝光像素和短曝光像素确定为所述目标像素；

其中，所述亮度等级包括亮度从小到大排列的低亮度等级、中亮度等级和高亮度等级。

2.根据权利要求1所述的成像控制方法，其特征在于，所述根据各感光像素单元输出的原始像素信息进行成像，包括：

对每一个感光像素单元，根据对输出的原始像素信息计算平均值，以得到对应感光像素单元的合并像素信息；

根据合并像素信息输出成像图像。

3.根据权利要求2所述的成像控制方法，其特征在于，一个感光像素单元的合并像素信息，对应成像图像中的一个图像像素的像素信息。

4.根据权利要求1-3任一项所述的成像控制方法，其特征在于，所述确定环境亮度的亮度等级之前，还包括：

根据拍摄的预览图像的直方图，确定当前拍摄环境属于逆光场景。

5.根据权利要求4所述的成像控制方法，其特征在于，所述确定环境亮度的亮度等级，包括：

根据所述预览图像的感光度ISO，确定所述环境亮度的亮度等级。

6.一种成像控制装置，其特征在于，应用于成像设备，所述成像设备包括由多个感光像素单元组成的像素单元阵列，每一感光像素单元包括曝光时长依次增加的短曝光像素、中曝光像素和长曝光像素，所述装置包括：

亮度确定模块，用于确定环境亮度的亮度等级；

像素确定模块，用于根据环境亮度的亮度等级，从各感光像素单元的所述短曝光像素、所述中曝光像素和所述长曝光像素中，确定目标像素；

控制模块，用于控制各感光像素单元中确定出的目标像素输出所述原始像素信息；

成像模块，用于根据各感光像素单元输出的原始像素信息进行成像；

所述像素确定模块，具体用于：

若拍摄环境的亮度等级属于高亮度等级或低亮度等级时，将各感光像素单元中的长曝光像素和短曝光像素确定为所述目标像素；

若所述拍摄环境的亮度等级属于中亮度等级时，将各感光像素单元中的长曝光像素、中曝光像素和短曝光像素确定为所述目标像素；

其中，所述亮度等级包括亮度从小到大排列的低亮度等级、中亮度等级和高亮度等级。

7.一种电子装置，其特征在于，包括由多个感光像素单元组成的像素单元阵列，每一感光像素单元包括曝光时长依次增加的短曝光像素、中曝光像素和长曝光像素，所述电子装置还包括：存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时，实现如权利要求1-5中任一所述的成像控制方法。

8.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该程序被处理器执行时实现如权利要求1-5中任一所述的成像控制方法。

Images