CN107800971A - 全景拍摄的自动曝光控制处理方法、装置及设备 - Google Patents

Abstract

本申请提出一种全景拍摄的自动曝光控制处理方法、装置及设备，其中，方法包括：根据全景拍摄的场景信息从所拍摄的N帧原始图像中确定M帧为参考图像，其中，M和N均大于1，且M小于或等于N；应用预设的自动曝光控制算法获取M帧参考图像的亮度增强值，根据M帧参考图像的亮度增强值对N帧原始图像进行自动曝光控制处理，获取对应的N帧亮度矫正图像；对N帧亮度矫正图像进行合成处理生成全景照片。由此，该方法解决了现有技术中固定不变采用第一帧参考图像的亮度增强值对N帧原始图像进行自动曝光控制处理导致全景照片部分过曝或者欠曝，严重影响全景照片观感的技术问题，提高了全景拍摄的自动曝光控制处理效果，满足用户需求。

Description

全景拍摄的自动曝光控制处理方法、装置及设备

技术领域

本申请涉及拍照技术领域，尤其涉及一种全景拍摄的自动曝光控制处理方法、装置及设备。

背景技术

目前，大多的拍摄设备都支持自动曝光控制处理。相关技术中，针对全景拍摄模式，全局的亮度增强值是固定不变的，即采用第一帧图像生成的亮度增强值对所有帧的原始图像进行自动曝光控制处理。但是如果第一帧亮度增强值判断有误，偏亮或者偏暗时，会导致整幅全景照片部分明显过曝或者欠曝的问题，严重影响全景照片的观感。

申请内容

本申请提供一种全景拍摄的自动曝光控制处理方法、装置及设备，以解决现有技术中，固定不变采用第一帧参考图像的亮度增强值对N帧原始图像进行自动曝光控制处理导致全景照片部分过曝或者欠曝，严重影响全景照片观感的技术问题。

本申请实施例提供一种全景拍摄的自动曝光控制处理方法，包括以下步骤：根据全景拍摄的场景信息从所拍摄的N帧原始图像中确定M帧为参考图像，其中，M和N均大于1，且M小于或等于N；应用预设的自动曝光控制算法获取所述M帧参考图像的亮度增强值，根据所述M帧参考图像的亮度增强值对所述N帧原始图像进行自动曝光控制处理，获取对应的N帧亮度矫正图像；对所述N帧亮度矫正图像进行合成处理生成全景照片。

本申请另一实施例提供一种全景拍摄的自动曝光控制处理装置，包括：确定模块，用于根据全景拍摄的场景信息从所拍摄的N帧原始图像中确定M帧为参考图像，其中，M和N均大于1，且M小于或等于N；获取模块，用于应用预设的自动曝光控制算法获取所述M帧参考图像的亮度增强值；处理模块，用于根据所述M帧参考图像的亮度增强值对所述N帧原始图像进行自动曝光控制处理，获取对应的N帧亮度矫正图像；生成模块，用于对所述N帧亮度矫正图像进行合成处理生成全景照片。

本申请又一实施例提供一种计算机设备，包括存储器及处理器，所述存储器中储存有计算机可读指令，所述指令被所述处理器执行时，使得所述处理器执行本申请上述实施例所述的全景拍摄的自动曝光控制处理方法。

本申请还一实施例提供一种非临时性计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现如本申请上述实施例所述的全景拍摄的自动曝光控制处理方法。

本申请实施例提供的技术方案可以包括以下有益效果：

通过根据全景拍摄的场景信息从所拍摄的N帧原始图像中确定M帧为参考图像，其中，M和N均大于1，且M小于或等于N，并应用预设的自动曝光控制算法获取M帧参考图像的亮度增强值，根据M帧参考图像的亮度增强值对N帧原始图像进行自动曝光控制处理，获取对应的N帧亮度矫正图像，最后对N帧亮度矫正图像进行合成处理生成全景照片。由此，解决了现有技术中固定不变采用第一帧参考图像的亮度增强值对N帧原始图像进行自动曝光控制处理导致全景照片部分过曝或者欠曝，严重影响全景照片观感的技术问题，提高了全景拍摄的自动曝光控制处理效果，满足用户需求。

本申请附加的方面和优点将在下面的描述中部分给出，部分将从下面的描述中变得明显，或通过本申请的实践了解到。

附图说明

本申请上述的和/或附加的方面和优点从下面结合附图对实施例的描述中将变得明显和容易理解，其中：

图1是根据本申请一个实施例的全景拍摄的自动曝光控制处理方法的流程图；

图2(a)是根据本申请一个实施例的全景拍摄的自动曝光的示意图；

图2(b)是根据本申请另一个实施例的全景拍摄的自动曝光的示意图；

图3是根据本申请另一个实施例的全景拍摄的自动曝光控制处理装置的结构示意图；

图4是根据本申请又一个实施例的全景拍摄的自动曝光控制处理装置的结构示意图

图5是根据本申请一个实施例的全景拍摄的自动曝光控制处理装置的结构示意图；

图6是根据本申请另一个实施例的全景拍摄的自动曝光控制处理装置的结构示意图；以及

图7是根据本申请另一个实施例的图像处理电路的示意图。

具体实施方式

下面详细描述本申请的实施例，所述实施例的示例在附图中示出，其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的，旨在用于解释本申请，而不能理解为对本申请的限制。

下面参考附图描述本申请实施例的全景拍摄的自动曝光控制处理方法、装置及设备。

其中，本申请实施例的全景拍摄的自动曝光控制处理方法和装置的执行主体可以为终端设备，其中，终端设备可以是手机、平板电脑、个人数字助理、穿戴式设备等具有拍摄摄像头的硬件设备。该穿戴式设备可以是智能手环、智能手表、智能眼镜等。

图1为本申请实施例所提供的一种全景拍摄的自动曝光控制处理方法的流程示意图，如图1所示，该方法包括：

步骤101，根据全景拍摄的场景信息从所拍摄的N帧原始图像中确定M帧为参考图像，其中，M和N均大于1，且M小于或等于N。

曝光控制主要用来调节景物整体亮度，如果拍摄对象过于黯淡，可以调节曝光补偿标尺来增加亮度。比如自动曝光指的是拍摄设备自动判断光线，然后自行决定如何调整参数(快门、光圈和感光度)，从而拍出亮度正常的画面。

为了避免全景拍摄中仅仅采用第一帧原始图像确定为参考图像，第一帧参考图像偏亮或者偏暗会导致全景照片部分明显过曝或者欠曝的问题，比如图2(a)中以从室外到室内拍全景为例，可以明显看出全景照片中的室内明显欠曝、再比如图2(b)中以从室内到室外拍全景为例，可以明显看出全景照片中的室外明显过曝。

本申请实施例的全景拍摄的自动曝光控制处理方法，可以从所拍摄的N帧原始图像中确定M帧为参考图像，通过M帧参考图像的亮度增强值对N帧原始图像进行自动曝光控制处理以提高了全景拍摄的自动曝光控制处理效果，满足用户需求，其中，M和N均大于1，且M小于或等于N。

其中，根据不同的应用场景，可以采用不同的方式根据全景拍摄的场景信息从所拍摄的N帧原始图像中确定M帧为参考图像，举例说明如下：

作为一种示例，在日落场景中进行全景拍摄，此时光亮的变化是非常迅速的，为了保证全景拍摄的自动曝光控制处理的效果，可以将拍摄的N帧原始图像都确定为M帧参考图像，此时N等于M。

作为另一种示例，在中午场景中进行全景拍摄，此时光亮的变化是非常缓慢的，为了提高全景拍摄的自动曝光控制处理的效率，可以从拍摄的N帧原始图像选择M帧为参考图像。其中，可以根据实际应用需要，选择M值为2、3等等且小于N。

作为又一种示例，在时间场景中进行全景拍摄，在时间段早上6点到10点，下午17点到19点，可以将拍摄的N帧原始图像都确定为M帧参考图像；在时间段中午12点到14点，可以从拍摄的N帧原始图像选择M帧为参考图像等等。

步骤102，应用预设的自动曝光控制算法获取M帧参考图像的亮度增强值，根据M帧参考图像的亮度增强值对N帧原始图像进行自动曝光控制处理，获取对应的N帧亮度矫正图像。

步骤103，对N帧亮度矫正图像进行合成处理生成全景照片。

具体地，可以根据实际应用需要，预先设置一个或者多个自动曝光控制算法，比如参照亮度值法、亮度与曝光值关系法等等，从而可以根据需要选择相对应的预设自动曝光控制算法对M帧参考图像进行处理，最后获取M帧参考图像的亮度增强值。

举例而言，N为8，M为2，分别是第第四帧原始图像和第八帧原始图像作为参考图像，通过OpenCV中的相关自动曝光控制算法对第四帧参考图像和第八帧参考图像进行处理，可以得到第四帧参考图像的亮度增强值和第八帧参考图像的亮度增强值。

可以理解的是，M大于1，且小于等于N，因此可以根据不同的应用场景，采用不同的方式根据M帧参考图像的亮度增强值对N帧原始图像进行自动曝光控制处理，举例说明如下：

作为一种示例，为了保证全景拍摄的自动曝光控制处理的效果，将拍摄的N帧原始图像都作为参考图像，从而获取N帧参考图像的亮度增强值，也就是说每一帧的原始图像都有其对应的亮度增强值，从而可以根据亮度增强值对每一帧原始图像进行自动曝光控制处理等到对应的N帧亮度矫正图像。

举例而言，将拍摄的八帧原始图像都作为参考图像，从而获取从第一帧到第八帧参考图像对应的亮度增强值，从而根据第一帧参考图像的亮度增强值对第一帧原始图像进行自动曝光控制处理，第二帧参考图像的亮度增强值对第二帧原始图像进行自动曝光控制处理，直到第八帧参考图像的亮度增强值对第八帧原始图像进行自动曝光控制处理后可以得到八帧亮度矫正图像。

作为另一种示例，为了提高全景拍摄的自动曝光控制处理的效率，将拍摄的N帧原始图像中选取部分帧原始图像都作为参考图像，也就是说部分帧的原始图像都有其对应的亮度增强值，从而可以根据部分帧的原始图像的亮度增强值对相应的原始图像进行自动曝光控制处理等到对应的N帧亮度矫正图像。

举例而言，将拍摄的三帧原始图像都作为参考图像，比如确定从第三帧、第五帧和第七帧参考图像作为参考图像，并获取对应的亮度增强值，从而根据第三帧参考图像的亮度增强值对第一、二和三帧原始图像进行自动曝光控制处理，第五帧参考图像的亮度增强值对第四、五和六帧原始图像进行自动曝光控制处理，第七帧参考图像的亮度增强值对第七和八帧原始图像进行自动曝光控制处理后可以得到八帧亮度矫正图像。

进一步地，对N帧亮度矫正图像进行合成处理生成全景照片。

综上所述，本申请实施例的全景拍摄的自动曝光控制处理方法，通过根据全景拍摄的场景信息从所拍摄的N帧原始图像中确定M帧为参考图像，其中，M和N均大于1，且M小于或等于N，并应用预设的自动曝光控制算法获取M帧参考图像的亮度增强值，根据M帧参考图像的亮度增强值对N帧原始图像进行自动曝光控制处理，获取对应的N帧亮度矫正图像，最后对N帧亮度矫正图像进行合成处理生成全景照片。由此，解决了现有技术中固定不变采用第一帧参考图像的亮度增强值对N帧原始图像进行自动曝光控制处理导致全景照片部分过曝或者欠曝，严重影响全景照片观感的技术问题，提高了全景拍摄的自动曝光控制处理效果，满足用户需求。

基于上述实施例，可以根据不同的应用场景选择相应的帧数原始图像确定为参考图像，从而根据参考图像的亮度增强值对N帧原始图像进行自动曝光控制处理，获取对应的N帧亮度矫正图像。为了本领域更加清楚上述过程，下面结合图3以具体场景信息为例进行详细说明如下：

图3为本申请实施例所提供的另一种全景拍摄的自动曝光控制处理方法的流程示意图，如图3所示，该方法包括：

步骤201，检测预设时段内全景拍摄场景的光亮变化速度。

步骤202，判断光亮变化速度是否大于等于预设的第一阈值。

在实际应用中，不同时间段，不同的全景拍摄场景中光亮变化速度不同，比如预设时间段下午17点到19点室外的光亮变化速度是非常迅速的；在比如预设时间段晚上20点到22点室内(灯光照明)的光亮变化速度是非常缓慢的、或者是几乎没变化的。

因此，可以通过检测预设时段内全景拍摄场景的光亮变化速度，从而根据光亮变化速度与预设阈值的比较确定参考图像。其中，可以采用很多种方式检测预设时段内全景拍摄场景的光亮变化速度，可以根据实际应用需要进行选择设置，比如通过相关亮度传感器获取其变化速度、再比如通过拍摄设备中预设的感光装置获取其变化速度等等。

进一步地，将获取的光亮变化速度与预设的第一阈值进行比较判断，需要说明的是，第一阈值可以根据实际需要进行设置。

步骤203，如果是，确定所拍摄的N帧原始图像全部为参考图像，其中，M等于N。

步骤204，根据N帧参考图像的亮度增强值对相应的原始图像进行自动曝光控制处理，获取对应的N帧亮度矫正图像。

具体地，在判断光亮变化速度大于等于预设的第一阈值时，表示光亮变化速度是非常迅速的，即从第一帧到第N帧参考图像的色彩都有较大的偏差，因此，需要将所拍摄的N帧原始图像全部为参考图像，从而根据N帧参考图像的亮度增强值对相应的原始图像进行自动曝光控制处理，获取对应的N帧亮度矫正图像。

步骤205，如果否，根据预设的跳帧策略从所拍摄的N帧原始图像中选择M帧为参考图像，其中，M小于N。

步骤206，确定与每帧参考图像对应进行自动曝光控制处理的P帧原始图像。

步骤207，根据每帧参考图像的亮度增强值对相应的P帧原始图像进行自动曝光控制处理，获取对应的N帧亮度矫正图像。

具体地，在判断光亮变化速度小于预设的第一阈值时，表示光亮变化速度是比较缓慢的，即从第一帧到第N帧参考图像的色彩都有偏差不大，可以根据预设的跳帧策略从所拍摄的N帧原始图像中选择M帧为参考图像，从而根据每帧参考图像的亮度增强值对相应的P帧原始图像进行自动曝光控制处理，获取对应的N帧亮度矫正图像。

其中，可以根据实际应用需要预先设置不同的跳帧策略从所拍摄的N帧原始图像中选择M帧为参考图像，举例说明如下：

作为一种示例，通过设置第二阈值对光亮变化速度进行再次判断，如果确定光亮变化速度比第二阈值还小，即几乎没什么变化，可以选取第一帧图像和最后一帧图像作为参考图像；如果确定光亮变化速度大于等于第二阈值，即相对变化缓慢，可以每隔几帧图像选取一帧作为参考图像等等。

作为另一种示例，通过设置算法、或者是装置对光亮变化速度按照预设周期进行检测，当两次检测的差值大于预设的第三阈值，取当前帧的图像作为参考图像等等。

步骤208，对N帧亮度矫正图像进行合成处理生成全景照片。

最后，对N帧亮度矫正图像进行合成处理生成全景照片。

综上所述，本申请实施例的全景拍摄的自动曝光控制处理方法，通过检测预设时段内全景拍摄场景的光亮变化速度，并判断光亮变化速度是否大于等于预设的第一阈值，如果是，确定所拍摄的N帧原始图像全部为参考图像，其中，M等于N，并根据N帧参考图像的亮度增强值对相应的原始图像进行自动曝光控制处理，获取对应的N帧亮度矫正图像，如果否，根据预设的跳帧策略从所拍摄的N帧原始图像中选择M帧为参考图像，其中，M小于N，确定与每帧参考图像对应进行自动曝光控制处理的P帧原始图像，并根据每帧参考图像的亮度增强值对相应的P帧原始图像进行自动曝光控制处理，获取对应的N帧亮度矫正图像，最后对N帧亮度矫正图像进行合成处理生成全景照片。由此，解决了现有技术中固定不变采用第一帧参考图像的亮度增强值对N帧原始图像进行自动曝光控制处理导致第一帧参考图像色彩发生偏差时全景照片全局偏色，严重影响全景照片观感的技术问题，提高了全景拍摄的自动曝光控制处理效果，满足用户需求。

基于上述实施例，当光亮变化速度小于预设的第一阈值时，即光亮变化速度比较缓慢时，从所拍摄的N帧原始图像中选择M帧为参考图像，为了本领域人员更加清楚如何根据预设的跳帧策略选择M帧为参考图像，下面结合图4以具体的跳帧策略为例进行详细说明：

图4为本申请实施例所提供的又一种全景拍摄的自动曝光控制处理方法的流程示意图，如图4所示，该方法包括：

步骤301，检测光亮变化速度是否小于预设的第一阈值。

步骤302，如果检测到光亮变化速度小于预设的第一阈值，检测光亮变化速度是否小于预设的第二阈值。

步骤303，检测到光亮变化速度小于预设的第二阈值，选择所拍摄第一帧图像和最后一帧图像作为参考图像。

具体地，通过设置第二阈值进一步检测光亮变化速度，也就是说在光亮变化速度小于预设的第一阈值表示变化已经比较缓慢了，在检测光亮变化速度小于预设的第二阈值时表示几乎没啥变化，可以选择所拍摄第一帧图像和最后一帧图像作为参考图像。

步骤304，如果检测到光亮变化速度大于等于预设的第二阈值，则获取全景拍摄参数。

步骤305，根据全景拍摄参数与预先对应设置的跳帧系数从所拍摄的N帧原始图像中选择M帧作为参考图像。

具体地，在检测光亮变化速度大于等于预设的第二阈值时表示有缓慢变化，可以进一步获取全景拍摄参数，从而根据全景拍摄参数与预先对应设置的跳帧系数从所拍摄的N帧原始图像中选择M帧作为参考图像，举例说明如下：

作为一种示例，根据全景拍摄的旋转角度与预先对应设置的跳帧系数从所拍摄的N帧原始图像中选择M帧作为参考图像。

举例而言，比如全景拍摄的旋转角度为270度，根据预先对应设置的跳帧系数从所拍摄的N帧原始图像中选择旋转角度为90度和180度时对应的第M帧图像作为原始图像。

作为另一种示例，根据全景拍摄的原始图像帧数与预先对应设置的跳帧系数从所拍摄的N帧原始图像中选择M帧作为参考图像。

举例而言，比如根据全景拍摄的原始图像帧数为八帧，根据预先对应设置的跳帧系数确定第四帧图像和第八帧图像作为参考图像。

步骤306，确定与每帧参考图像对应进行自动曝光控制处理的P帧原始图像。

具体地，选取的M帧参考图像中，每一帧参考图像对应进行自动曝光控制处理的原始图像不同，举例说明如下：

第一种示例，在检测到光亮变化速度小于预设的第一阈值且小于预设的第二阈值时选择所拍摄第一帧图像和最后一帧图像作为参考图像，当N为偶数时，确定从第一帧到第N/2帧原始图像为与第一帧参考图像对应进行自动曝光控制处理的P帧原始图像，以及确定从第N/2+1帧原始图像为与第N帧参考图像对应进行自动曝光控制处理的N-P帧原始图像；当N为奇数时，确定从第一帧到第(N-1)/2帧原始图像为与第一帧参考图像对应进行自动曝光控制处理的P帧原始图像，以及确定从第(N-1)/2+1帧原始图像为与第N帧参考图像对应进行自动曝光控制处理的N-P帧原始图像。

第二种示例，检测到光亮变化速度小于预设的第一阈值且大于预设的第二阈值时根据全景拍摄参数与预先对应设置的跳帧系数从所拍摄的N帧原始图像中选择M帧作为参考图像，将当前参考图像帧与下一帧参考图像之间的P帧原始图像确定为与当前参考图像帧对应进行自动曝光控制处理的P帧原始图像。

由此，可以根据实际应用需要选择多帧图像作为参考图像，并通过其对应的亮度增强值对对应的原始图像进行自动曝光控制处理，提高了全景拍摄的自动曝光控制处理效果，满足用户需求。

为了实现上述实施例，本申请还提出了一种全景拍摄的自动曝光控制处理装置，图5是根据本申请一个实施例的全景拍摄的自动曝光控制处理装置的结构示意图，如图5所示，该全景拍摄的自动曝光控制处理装置包括确定模块100、获取模块200、处理模块300和生成模块400。

其中，确定模块100，用于根据全景拍摄的场景信息从所拍摄的N帧原始图像中确定M帧为参考图像，其中，M和N均大于1，且M小于或等于N；

获取模块200，用于应用预设的自动曝光控制算法获取M帧参考图像的亮度增强值。

处理模块300，用于根据M帧参考图像的亮度增强值对N帧原始图像进行自动曝光控制处理，获取对应的N帧亮度矫正图像。

生成模块400，用于对N帧亮度矫正图像进行合成处理生成全景照片。

需要说明的是，前述对方法实施例的描述，也适用于本申请实施例的装置，其实现原理类似，在此不再赘述。

上述用户拍照装置中各个模块的划分仅用于举例说明，在其他实施例中，可将用户拍照装置按照需要划分为不同的模块，以完成上述用户拍照装置的全部或部分功能。

综上所述，本申请实施例的全景拍摄的自动曝光控制处理装置，通过根据全景拍摄的场景信息从所拍摄的N帧原始图像中确定M帧为参考图像，其中，M和N均大于1，且M小于或等于N，并应用预设的自动曝光控制算法获取M帧参考图像的亮度增强值，根据M帧参考图像的亮度增强值对N帧原始图像进行自动曝光控制处理，获取对应的N帧亮度矫正图像，最后对N帧亮度矫正图像进行合成处理生成全景照片。由此，解决了现有技术中固定不变采用第一帧参考图像的亮度增强值对N帧原始图像进行自动曝光控制处理导致第一帧参考图像色彩发生偏差时全景照片全局偏色，严重影响全景照片观感的技术问题，提高了全景拍摄的自动曝光控制处理效果，满足用户需求。

图6是根据本申请另一个实施例的全景拍摄的自动曝光控制处理装置的结构示意图，如图6所示，在如图5所示的基础上，该全景拍摄的自动曝光控制处理装置还包括：检测模块500。

其中，检测模块500，用于检测预设时段内全景拍摄场景的光亮变化速度。

确定模块100具体用于：若检测到光亮变化速度大于等于预设的第一阈值，则确定所拍摄的N帧原始图像全部为参考图像，其中，M等于N。

处理模块400具体用于：根据N帧参考图像的亮度增强值对相应的原始图像进行自动曝光控制处理，获取对应的N帧亮度矫正图像。

需要说明的是，前述对方法实施例的描述，也适用于本申请实施例的装置，其实现原理类似，在此不再赘述。

上述用户拍照装置中各个模块的划分仅用于举例说明，在其他实施例中，可将用户拍照装置按照需要划分为不同的模块，以完成上述用户拍照装置的全部或部分功能。

综上所述，本申请实施例的全景拍摄的自动曝光控制处理装置，提高了全景拍摄的自动曝光控制处理效果，满足用户需求。

为了实现上述实施例，本申请还提出了一种计算机设备，上述计算机设备中包括图像处理电路，图像处理电路可以利用硬件和/或软件组件实现，可包括定义ISP(ImageSignal Processing，图像信号处理)管线的各种处理单元。图7为一个实施例中图像处理电路的示意图。如图7所示，为便于说明，仅示出与本申请实施例相关的图像处理技术的各个方面。

如图7所示，图像处理电路包括ISP处理器740和控制逻辑器750。成像设备710捕捉的图像数据首先由ISP处理器740处理，ISP处理器740对图像数据进行分析以捕捉可用于确定和/或成像设备710的一个或多个控制参数的图像统计信息。成像设备710可包括具有一个或多个透镜712和图像传感器714的照相机。图像传感器714可包括色彩滤镜阵列(如Bayer滤镜)，图像传感器714可获取用图像传感器714的每个成像像素捕捉的光强度和波长信息，并提供可由ISP处理器740处理的一组原始图像数据。传感器720可基于传感器720接口类型把原始图像数据提供给ISP处理器740。传感器720接口可以利用SMIA(StandardMobile Imaging Architecture，标准移动成像架构)接口、其它串行或并行照相机接口或上述接口的组合。

ISP处理器740按多种格式逐个像素地处理原始图像数据。例如，每个图像像素可具有8、10、12或14比特的位深度，ISP处理器740可对原始图像数据进行一个或多个图像处理操作、收集关于图像数据的统计信息。其中，图像处理操作可按相同或不同的位深度精度进行。

ISP处理器740还可从图像存储器720接收像素数据。例如，从传感器720接口将原始像素数据发送给图像存储器730，图像存储器730中的原始像素数据再提供给ISP处理器740以供处理。图像存储器730可为存储器装置的一部分、存储设备、或电子设备内的独立的专用存储器，并可包括DMA(Direct Memory Access，直接直接存储器存取)特征。

当接收到来自传感器720接口或来自图像存储器730的原始图像数据时，ISP处理器740可进行一个或多个图像处理操作，如时域滤波。处理后的图像数据可发送给图像存储器730，以便在被显示之前进行另外的处理。ISP处理器740从图像存储器730接收处理数据，并对所述处理数据进行原始域中以及RGB和YCbCr颜色空间中的图像数据处理。处理后的图像数据可输出给显示器770，以供用户观看和/或由图形引擎或GPU(Graphics ProcessingUnit，图形处理器)进一步处理。此外，ISP处理器740的输出还可发送给图像存储器730，且显示器770可从图像存储器730读取图像数据。在一个实施例中，图像存储器730可被配置为实现一个或多个帧缓冲器。此外，ISP处理器740的输出可发送给编码器/解码器760，以便编码/解码图像数据。编码的图像数据可被保存，并在显示于显示器770设备上之前解压缩。编码器/解码器760可由CPU或GPU或协处理器实现。

ISP处理器740确定的统计数据可发送给控制逻辑器750单元。例如，统计数据可包括自动曝光、自动白平衡、自动聚焦、闪烁检测、黑电平补偿、透镜712阴影校正等图像传感器714统计信息。控制逻辑器750可包括执行一个或多个例程(如固件)的处理器和/或微控制器，一个或多个例程可根据接收的统计数据，确定成像设备710的控制参数以及的控制参数。例如，控制参数可包括传感器720控制参数(例如增益、曝光控制的积分时间)、照相机闪光控制参数、透镜712控制参数(例如聚焦或变焦用焦距)、或这些参数的组合。ISP控制参数可包括用于自动白平衡和颜色调整(例如，在RGB处理期间)的增益水平和色彩校正矩阵，以及透镜712阴影校正参数。

以下为运用图7中图像处理技术实现全景拍摄的自动曝光控制处理方法的步骤：

根据全景拍摄的场景信息从所拍摄的N帧原始图像中确定M帧为参考图像，其中，M和N均大于1，且M小于或等于N；

应用预设的自动曝光控制算法获取M帧参考图像的亮度增强值，根据M帧参考图像的亮度增强值对N帧原始图像进行自动曝光控制处理，获取对应的N帧亮度矫正图像；

对N帧亮度矫正图像进行合成处理生成全景照片。

为了实现上述实施例，本申请还提出一种计算机可读存储介质，当所述存储介质中的指令由处理器被执行时，使得能够执行如上述实施例描述的全景拍摄的自动曝光控制处理方法。

在本说明书的描述中，参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本申请的至少一个实施例或示例中。在本说明书中，对上述术语的示意性表述不必须针对的是相同的实施例或示例。而且，描述的具体特征、结构、材料或者特点可以在任一个或多个实施例或示例中以合适的方式结合。此外，在不相互矛盾的情况下，本领域的技术人员可以将本说明书中描述的不同实施例或示例以及不同实施例或示例的特征进行结合和组合。

此外，术语“第一”、“第二”仅用于描述目的，而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此，限定有“第一”、“第二”的特征可以明示或者隐含地包括至少一个该特征。在本申请的描述中，“多个”的含义是至少两个，例如两个，三个等，除非另有明确具体的限定。

流程图中或在此以其他方式描述的任何过程或方法描述可以被理解为，表示包括一个或更多个用于实现定制逻辑功能或过程的步骤的可执行指令的代码的模块、片段或部分，并且本申请的优选实施方式的范围包括另外的实现，其中可以不按所示出或讨论的顺序，包括根据所涉及的功能按基本同时的方式或按相反的顺序，来执行功能，这应被本申请的实施例所属技术领域的技术人员所理解。

在流程图中表示或在此以其他方式描述的逻辑和/或步骤，例如，可以被认为是用于实现逻辑功能的可执行指令的定序列表，可以具体实现在任何计算机可读介质中，以供指令执行系统、装置或设备(如基于计算机的系统、包括处理器的系统或其他可以从指令执行系统、装置或设备取指令并执行指令的系统)使用，或结合这些指令执行系统、装置或设备而使用。就本说明书而言，"计算机可读介质"可以是任何可以包含、存储、通信、传播或传输程序以供指令执行系统、装置或设备或结合这些指令执行系统、装置或设备而使用的装置。计算机可读介质的更具体的示例(非穷尽性列表)包括以下：具有一个或多个布线的电连接部(电子装置)，便携式计算机盘盒(磁装置)，随机存取存储器(RAM)，只读存储器(ROM)，可擦除可编辑只读存储器(EPROM或闪速存储器)，光纤装置，以及便携式光盘只读存储器(CDROM)。另外，计算机可读介质甚至可以是可在其上打印所述程序的纸或其他合适的介质，因为可以例如通过对纸或其他介质进行光学扫描，接着进行编辑、解译或必要时以其他合适方式进行处理来以电子方式获得所述程序，然后将其存储在计算机存储器中。

应当理解，本申请的各部分可以用硬件、软件、固件或它们的组合来实现。在上述实施方式中，多个步骤或方法可以用存储在存储器中且由合适的指令执行系统执行的软件或固件来实现。如，如果用硬件来实现和在另一实施方式中一样，可用本领域公知的下列技术中的任一项或他们的组合来实现：具有用于对数据信号实现逻辑功能的逻辑门电路的离散逻辑电路，具有合适的组合逻辑门电路的专用集成电路，可编程门阵列(PGA)，现场可编程门阵列(FPGA)等。

本技术领域的普通技术人员可以理解实现上述实施例方法携带的全部或部分步骤是可以通过程序来指令相关的硬件完成，所述的程序可以存储于一种计算机可读存储介质中，该程序在执行时，包括方法实施例的步骤之一或其组合。

此外，在本申请各个实施例中的各功能单元可以集成在一个处理模块中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个模块中。上述集成的模块既可以采用硬件的形式实现，也可以采用软件功能模块的形式实现。所述集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时，也可以存储在一个计算机可读取存储介质中。

上述提到的存储介质可以是只读存储器，磁盘或光盘等。尽管上面已经示出和描述了本申请的实施例，可以理解的是，上述实施例是示例性的，不能理解为对本申请的限制，本领域的普通技术人员在本申请的范围内可以对上述实施例进行变化、修改、替换和变型。

Claims (10)

1.一种全景拍摄的自动曝光控制处理方法，其特征在于，包括以下步骤：

根据全景拍摄的场景信息从所拍摄的N帧原始图像中确定M帧为参考图像，其中，M和N均大于1，且M小于或等于N；

应用预设的自动曝光控制算法获取所述M帧参考图像的亮度增强值，根据所述M帧参考图像的亮度增强值对所述N帧原始图像进行自动曝光控制处理，获取对应的N帧亮度矫正图像；

对所述N帧亮度矫正图像进行合成处理生成全景照片。

2.如权利要求1所述的方法，其特征在于，还包括：

检测预设时段内全景拍摄场景的光亮变化速度；

所述根据全景拍摄的场景信息从所拍摄的N帧原始图像中确定M帧为参考图像，包括：

若检测到所述光亮变化速度大于等于预设的第一阈值，则确定所拍摄的N帧原始图像全部为参考图像，其中，M等于N；

所述根据所述M帧参考图像的亮度增强值对所述N帧原始图像进行自动曝光控制处理，包括：

根据N帧参考图像的亮度增强值对相应的原始图像进行自动曝光控制处理，获取对应的N帧亮度矫正图像。

3.如权利要求2所述的方法，其特征在于，所述根据全景拍摄的场景信息从所拍摄的N帧原始图像中确定M帧为参考图像，还包括：

若检测到所述光亮变化速度小于预设的第一阈值，则根据预设的跳帧策略从所拍摄的N帧原始图像中选择M帧为参考图像，其中，M小于N；

所述根据所述M帧参考图像的亮度增强值对所述N帧原始图像进行自动曝光控制处理，包括：

确定与每帧参考图像对应进行自动曝光控制处理的P帧原始图像；

根据每帧参考图像的亮度增强值对相应的P帧原始图像进行自动曝光控制处理，获取对应的N帧亮度矫正图像。

4.如权利要求3所述的方法，其特征在于，所述若检测到所述光亮变化速度小于预设的第一阈值，则根据预设的跳帧策略从所拍摄的N帧原始图像中选择M帧为参考图像，其中，M小于N，包括：

若检测到所述光亮变化速度小于预设的第一阈值，且小于预设的第二阈值，则选择所拍摄第一帧图像和最后一帧图像作为参考图像；

所述确定与每帧参考图像对应进行自动曝光控制处理的P帧原始图像，包括：

当N为偶数时，确定从第一帧到第N/2帧原始图像为与第一帧参考图像对应进行自动曝光控制处理的P帧原始图像，以及确定从第N/2+1帧原始图像为与第N帧参考图像对应进行自动曝光控制处理的N-P帧原始图像；

当N为奇数时，确定从第一帧到第(N-1)/2帧原始图像为与第一帧参考图像对应进行自动曝光控制处理的P帧原始图像，以及确定从第(N-1)/2+1帧原始图像为与第N帧参考图像对应进行自动曝光控制处理的N-P帧原始图像。

5.如权利要求4所述的方法，其特征在于，所述若检测到所述光亮变化速度小于预设的第一阈值，则根据预设的跳帧策略从所拍摄的N帧原始图像中选择M帧为参考图像，其中，M小于N，还包括：

若检测到所述光亮变化速度小于预设的第一阈值，且大于预设的第二阈值，则获取全景拍摄参数；

根据所述全景拍摄参数与预先对应设置的跳帧系数从所拍摄的N帧原始图像中选择M帧作为参考图像；

所述确定与每帧参考图像对应进行自动曝光控制处理的P帧原始图像，包括：

将当前参考图像帧与下一帧参考图像之间的P帧原始图像确定为与当前参考图像帧对应进行自动曝光控制处理的P帧原始图像。

6.如权利要求5所述的方法，其特征在于，所述根据所述全景拍摄参数与预先对应设置的跳帧系数从所拍摄的N帧原始图像中选择M帧作为参考图像，包括：

根据全景拍摄的旋转角度与预先对应设置的跳帧系数从所拍摄的N帧原始图像中选择M帧作为参考图像，或者，

根据全景拍摄的原始图像帧数与预先对应设置的跳帧系数从所拍摄的N帧原始图像中选择M帧作为参考图像。

7.一种全景拍摄的自动曝光控制处理装置，其特征在于，包括：

确定模块，用于根据全景拍摄的场景信息从所拍摄的N帧原始图像中确定M帧为参考图像，其中，M和N均大于1，且M小于或等于N；

获取模块，用于应用预设的自动曝光控制算法获取所述M帧参考图像的亮度增强值；

处理模块，用于根据所述M帧参考图像的亮度增强值对所述N帧原始图像进行自动曝光控制处理，获取对应的N帧亮度矫正图像；

生成模块，用于对所述N帧亮度矫正图像进行合成处理生成全景照片。

8.如权利要求7所述的装置，其特征在于，还包括：

检测模块，用于检测预设时段内全景拍摄场景的光亮变化速度；

所述确定模块具体用于：

若检测到所述光亮变化速度大于等于预设的第一阈值，则确定所拍摄的N帧原始图像全部为参考图像，其中，M等于N；

所述处理模块具体用于：

根据N帧参考图像的亮度增强值对相应的原始图像进行自动曝光控制处理，获取对应的N帧亮度矫正图像。

9.一种计算机设备，其特征在于，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时，实现如权利要求1-6中任一所述的全景拍摄的自动曝光控制处理方法。

10.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该程序被处理器执行时实现如权利要求1-6中任一所述的全景拍摄的自动曝光控制处理方法。