CN112543286A - 一种用于终端的图像生成方法及装置、存储介质、终端 - Google Patents

Abstract

一种用于终端的图像生成方法及装置、存储介质、终端，所述终端具有主摄像头和副摄像头，所述方法包括：获取所述主摄像头在第一曝光值下拍摄的第一主图像，以及所述副摄像头在所述第一曝光值下拍摄得到的第一副图像；如果需要进行高动态处理，则获取所述主摄像头在至少一个第二曝光值下拍摄的至少一张第二主图像；判断是否对所述第一主图像和所述至少一张第二主图像进行图像融合处理，如果是，则生成高动态范围图像；对所述高动态范围图像和深度图像进行合成处理，以生成结果图像，其中，所述深度图像由所述第一主图像和第一副图像计算确定。通过本发明的方案，可以在焦外成像时获得质量较好的图像。

Description

一种用于终端的图像生成方法及装置、存储介质、终端

技术领域

本发明涉及图像处理技术领域，尤其涉及一种用于终端的图像生成方法及装置、存储介质、终端。

背景技术

焦外成像(Bokeh)是指在焦点以外成像，一般是虚像。焦外成像的过程通常是根据终端的主摄像头和副摄像头分别拍摄的图像计算深度图像，然后将深度图像应用在主摄像头所拍摄的图像上。但在某些高动态(High-Dynamic Range，简称HDR)、暗光、逆光等亮度值范围差异较大的特殊场景中，这种焦外成像的方法无法兼顾场景中的明暗细节，也即，容易出现亮度值高的区域过亮，或是亮度值低的区域过暗的情况，从而导致焦外成像的质量不佳，最终得到的图像细节过少。

因此，亟需一种能够在高动态、暗光、逆光等特殊场景中提高焦外成像的质量的方法。

发明内容

本发明解决的技术问题是如何在高动态、暗光、逆光等特殊场景中提高焦外成像的质量。

为解决上述技术问题，本发明实施例提供一种用于终端的图像生成方法，所述方法包括：获取所述主摄像头在第一曝光值下拍摄的第一主图像，以及所述副摄像头在所述第一曝光值下拍摄得到的第一副图像；如果需要进行高动态处理，则获取所述主摄像头在至少一个第二曝光值下拍摄的至少一张第二主图像；判断是否对所述第一主图像和所述至少一张第二主图像进行图像融合处理，如果是，则生成高动态范围图像；对所述高动态范围图像和深度图像进行合成处理，以生成结果图像，其中，所述深度图像由所述第一主图像和第一副图像计算确定。

可选的，判断是否对所述第一主图像和所述至少一张第二主图像进行图像融合处理包括：计算两两主图像之间的帧间偏移量，所述主图像包括所述第一主图像和所述至少一张第二主图像；判断所述帧间偏移量是否均不超过预设偏移阈值，如果是，则对所述第一主图像和所述至少一张第二主图像进行图像融合处理。

可选的，判断是否需要进行高动态处理包括：采集预览图像，所述预览图像包括亮区和暗区，其中，所述预览图像为所述主摄像头在获取所述第一主图像前采集的画面，所述亮区为亮度值超过第一预设亮度阈值的区域，所述暗区为亮度值不超过第二预设亮度阈值的区域，所述第一预设亮度阈值大于等于第二预设亮度阈值；计算亮区面积比例和暗区面积比例，并根据所述亮区面积比例和暗区面积比例，判断是否需要进行高动态处理，其中，所述亮区面积比例为所述亮区的面积占所述预览图像的面积的比例，所述暗区面积比例为所述暗区的面积占所述预览图像的面积的比例。

可选的，获取所述主摄像头在至少一个第二曝光值下拍摄的至少一张第二主图像之前还包括：确定所述至少一个第二曝光值；确定所述至少一个第二曝光值包括：读取多个预设场景的场景信息，所述场景信息包括各个预设场景中的亮区比例范围、暗区比例范围以及各个预设场景中的至少一个第二曝光值；根据所述亮区面积比例和所述暗区面积比例，查找所述预览图像匹配的预设场景；根据所述预览图像匹配的预设场景，确定所述至少一个第二曝光值。

可选的，根据所述亮区面积比例和暗区面积比例，判断是否需要进行高动态处理包括：如果未查找到所述预览图像匹配的预设场景，则判断为不需要进行高动态处理。

可选的，在获取所述主摄像头在第一曝光值下拍摄的第一主图像，以及所述副摄像头在所述第一曝光值下拍摄得到的第一副图像之前，确定所述至少一个第二曝光值。

可选的，所述多个预设场景包括高动态场景，所述高动态场景的亮区比例范围为5.2％～10.2％，所述高动态场景的暗区比例范围为6.5％～20％。

可选的，所述多个预设场景包括逆光场景，所述逆光场景的亮区比例范围为18.2％～100％，所述逆光场景的暗区比例范围为6.5％～20％。

可选的，所述多个预设场景包括暗光场景，如果所述预览图像匹配的预设场景为暗光场景，对所述第一主图像和所述至少一张第二主图像进行图像融合处理包括：对所述第一主图像进行图像去噪处理，以得到去噪后的第一主图像；对所述去噪后的第一主图像和所述至少一张第二主图像进行图像融合处理。

可选的，获取所述主摄像头在所述至少一个第二曝光值下拍摄的至少一张第二主图像时，所述至少一张第二主图像和所述至少一个第二曝光值一一对应。

为了解决上述技术问题，本发明实施例提供一种用于终端的图像生成装置，所述终端具有主摄像头和副摄像头，其特征在于，所述装置包括：第一获取模块，用于获取所述主摄像头在第一曝光值下拍摄的第一主图像，以及所述副摄像头在所述第一曝光值下拍摄得到的第一副图像；第二获取模块，当需要进行高动态处理时，用于获取所述主摄像头在至少一个第二曝光值下拍摄的至少一张第二主图像；融合处理模块，用于判断是否对所述第一主图像和所述至少一张第二主图像进行图像融合处理，如果是，则生成高动态范围图像；生成模块，用于对所述高动态范围图像和深度图像进行合成处理，以生成结果图像，其中，所述深度图像由所述第一主图像和所述第一副图像计算确定。

为了解决上述技术问题，本发明实施例提供一种存储介质，其上存储有计算机程序，所述计算机程序被处理器运行时，执行上述用于终端的图像生成方法的步骤。

为了解决上述技术问题，本发明实施例提供一种终端，包括存储器和处理器，所述存储器上存储有可在所述处理器上运行的计算机程序，所述处理器运行所述计算机程序时执行上述用于终端的图像生成方法的步骤。

与现有技术相比，本发明实施例的技术方案具有以下有益效果：

本发明实施例提供一种用于终端的图像生成方法，所述方法包括：获取所述主摄像头在第一曝光值下拍摄的第一主图像，以及所述副摄像头在所述第一曝光值下拍摄得到的第一副图像；如果需要进行高动态处理，则获取所述主摄像头在至少一个第二曝光值下拍摄的至少一张第二主图像；判断是否对所述第一主图像和所述至少一张第二主图像进行图像融合处理，如果是，则生成高动态范围图像；对所述高动态范围图像和深度图像进行合成处理，以生成结果图像，其中，所述深度图像由所述第一主图像和第一副图像计算确定。本发明实施例的方案中，终端在焦外成像的过程中，除了根据主摄像头和副摄像头在第一曝光值下拍摄的图像计算确定深度图像之外，还判断是否处于需要进行高动态处理的场景，如果是，则由终端的主摄像头在至少一个第二曝光值下拍摄至少一张第二主图像，如果至少一张第二主图像和主摄像头在第一曝光值下拍摄的第一主图像能够进行融合处理，也即主摄像头在不同曝光值下拍摄得到的图像能够进行融合处理，则将融合处理得到高动态范围图像与深度图像进行合成，以得到焦外成像的结果图像。由于高动态范围图像是由不同曝光值的图像融合得到的，其可以体现丰富的亮度信息，再将高动态范围图像与深度图像进行合成，使得焦外成像的结果图像也可以体现较多的明暗细节。

进一步地，本发明实施例的方案中，对在不同曝光值下拍摄的主图像进行融合处理之前，需要先计算两两主图像之间的帧间偏移量，并将两两主图像之间的帧间偏移量分别与预设偏移阈值进行比较，如果各个帧间偏移量均不超过预设偏移阈值，则判断为可以将不同曝光值下拍摄的主图像进行融合，由此可以避免在帧间偏移量较大的情况下对主图像进行融合处理的情况，确保融合得到的高动态范围图像与计算得到的深度图像是匹配的，从而避免了后续将高动态范围图像与深度图像合成时出现虚化错误的问题。

进一步地，本发明实施例的方案中，在判断是否需要进行高动态处理时，先计算采集到的预览图像中的亮区面积比例和暗区面积比例，再同时根据亮区面积比例和暗区面积比例判断是否需要进行高动态处理，由于亮区面积比例和暗区面积比例分别为预览图像中亮区的面积和暗区的面积占预览图像的面积的比例，因此，本发明实施例的方案在判断是否需要进行高动态处理时，同时考虑了预览图像中亮区和暗区的情况，能够更加准确、全面地区分出高动态、逆光、暗光等多种特殊场景。

附图说明

图1是本发明实施例中一种用于终端的图像生成方法的流程示意图。

图2是本发明实施例中一种用于终端的图像生成装置的结构示意图。

具体实施方式

如背景技术所述，亟需一种能够在高动态、暗光、逆光等亮度值范围差异较大的特殊场景中提高焦外成像的质量的方法。

为了解决上述技术问题，本发明实施例提供一种用于终端的图像生成方法，所述方法包括：获取所述主摄像头在第一曝光值下拍摄的第一主图像，以及所述副摄像头在所述第一曝光值下拍摄得到的第一副图像；如果需要进行高动态处理，则获取所述主摄像头在至少一个第二曝光值下拍摄的至少一张第二主图像；判断是否对所述第一主图像和所述至少一张第二主图像进行图像融合处理，如果是，则生成高动态范围图像；对所述高动态范围图像和深度图像进行合成处理，以生成结果图像，其中，所述深度图像由所述第一主图像和第一副图像计算确定。本发明实施例的方案中，终端在焦外成像的过程中，除了根据主摄像头和副摄像头在第一曝光值下拍摄的图像计算确定深度图像之外，终端还判断是否处于需要进行高动态处理的场景，如果是，则由终端的主摄像头在至少一个第二曝光值下拍摄至少一张第二主图像，如果至少一张第二主图像和主摄像头在第一曝光值下拍摄的第一主图像能够进行融合处理，也即主摄像头在不同曝光值下拍摄得到的图像能够进行融合处理，则将融合处理得到高动态范围图像与深度图像进行合成，以得到焦外成像的结果图像。由于高动态范围图像是由不同曝光值的图像融合得到的，其可以体现丰富的亮度信息，再将高动态范围图像与深度图像进行合成，从而焦外成像的结果图像也可以体现较多的明暗细节。

为使本发明的上述目的、特征和有益效果能够更为明显易懂，下面结合附图对本发明的具体实施例做详细的说明。

参照图1，图1是本发明实施例中一种用于终端的图像生成方法的流程示意图。所述方法可以由具有拍照、摄像功能的终端执行，所述终端可以是手机、电脑、物联网设备等，但并不限于此。所述终端包括主摄像头和副摄像头，用户打开所述终端上用于拍摄图像的应用程序以进入拍摄模式，所述主摄像头和副摄像头可以在同一时刻获取相同曝光值下的图像，也可以在不同时刻获取不同曝光值下的图像。所述主摄像头用于对位于焦平面的主体进行成像，所述主摄像头和/或副摄像头可以是长焦摄像头、广角摄像头等，但并不限于此。用户采用终端进行拍摄前，可以从终端的多个摄像头中选择主摄像头和副摄像头，终端也可以根据具体的拍摄场景自动确定主摄像头和副摄像头。

图1所示的用于终端的图像生成的方法具体可以包括如下步骤：

步骤S101：获取所述主摄像头在第一曝光值下拍摄的第一主图像，以及所述副摄像头在所述第一曝光值下拍摄得到的第一副图像；

步骤S102：如果需要进行高动态处理，则获取所述主摄像头在至少一个第二曝光值下拍摄的至少一张第二主图像；

步骤S103：判断是否对所述第一主图像和所述至少一张第二主图像进行图像融合处理，如果是，则生成高动态范围图像；

步骤S104：对所述高动态范围图像和深度图像进行合成处理，以生成结果图像，其中，所述深度图像由所述第一主图像和第一副图像计算确定。

在步骤S101的具体实施中，拍摄图像的过程包括预览阶段和捕获阶段。具体而言，在预览阶段，主摄像头采集预览图像，所述预览图像是指主摄像头进行拍摄动作前采集到的画面，也即主摄像头在获取第一主图像前采集的画面。在捕获阶段，主摄像头对当前的场景进行拍摄动作，也即，主摄像头获取在第一曝光值下的第一主图像。

进一步地，在主摄像头获取第一曝光值下的第一主图像的同时，副摄像头也可以获取第一曝光值下的第一副图像。第一主图像和第一副图像可以用于计算确定深度图像，所述深度图像可以包含景深信息，景深信息可以包括前景景深信息和后景景深信息，前景景深信息是指焦平面之前形成的清晰范围，后景景深是指焦平面之后形成的清晰范围。

进一步地，在采集到预览图像后且进入捕获阶段之前，终端可以根据预览图像确定第一曝光值。作为一个非限制性实施例，可以采用中心测光或者四周测光等自动测光算法确定第一曝光值，但并不限于此。

在步骤S101的具体实施中，除了获取第一主图像和第一副图像之外，还可以判断是否需要进行高动态(HDR)处理。需要说明的是，可以在获取第一主图像和第一副图像之前，判断是否需要进行高动态处理，也即，可以根据采集到的预览图像判断是否需要进行高动态处理；也可以在获取第一主图像之后，判断是否需要进行高动态处理，也即，可以根据获取到的第一主图像判断是否需要进行高动态处理。

在本发明的一个非限制性实施例中，根据采集到的预览图像判断是否需要进行高动态处理。具体而言，主摄像头采集到预览图像后，终端可以识别出预览图像中的亮区和暗区，所述亮区为亮度值超过第一预设亮度阈值的区域，所述暗区为亮度值不超过第二预设亮度阈值的区域，所述第一预设亮度阈值大于等于第二预设亮度阈值。第一预设亮度阈值和/或第二预设亮度阈值可以是预先确定的，也可以是终端根据预览图像中处于焦平面的主体的亮度值实时计算确定的。

需要说明的是，在预览阶段采集预览图像可以是实时进行的，判断是否需要进行高动态处理也可以是实时进行的，也即，当用户触发终端上的拍照键时，终端会根据触发拍照键时采集的前一帧预览图像(也即，根据最新的预览图像)判断是否需要进行高动态处理。

进一步地，终端可以计算确定预览图像中亮区面积比例和暗区面积比例，其中，所述亮区面积比例为所述亮区的面积占所述预览图像的面积的比例，所述暗区面积比例为所述暗区的面积占所述预览图像的面积的比例。

进一步地，终端可以根据所述亮区面积比例和暗区面积比例，判断是否需要进行高动态处理。具体而言，如果预览图像中的亮区面积比例和暗区面积比例均满足预设条件，则判断为需要进行高动态处理。需要说明的是，所述预设条件可以是预先确定的，例如，可以是终端预先从外部接收的。

进一步地，所述终端可以包括多个预设场景的场景信息，如果在场景信息中可以根据预览图像中亮区面积比例和暗区面积比例查找到与预览图像匹配的预设场景，则终端可以判断为需要进行高动态处理，反之，如果未查找到所述预览图像匹配的预设场景，终端可以判断为不需要对预览图像进行高动态处理。需要说明的是，所述多个预设场景的场景信息可以是终端预先从外部接收的。还需要说明的是，各个预设场景的场景信息是可以更新的，对于每个预设场景，可以设置不同的场景信息。

具体而言，所述场景信息可以包括各个预设场景中的亮度比例范围、暗区比例范围。终端计算确定亮区面积比例和暗区面积比例后，可以根据预览图像的亮区面积比例和暗区面积比例在场景信息中查找预览图像匹配的预设场景。如果预览图像的亮区面积比例属于某一预设场景的亮区比例范围，且预览图像的暗区面积比例也属于该预设场景的暗区比例范围，则认为该预设场景为预览图像匹配的预设场景。

进一步地，所述多个预设场景可以包括高动态场景、逆光场景、暗光场景等，终端中存储有预先设置的各个预设场景的亮度比例范围、暗区比例范围。

作为一个非限制性的例子，多个预设场景包括以下一个或多个场景：高动态场景、逆光场景、较暗场景、极暗场景。其中，高动态场景的亮区比例范围为5.2％～10.2％，暗区比例范围为6.5％～20％；逆光场景的亮区比例范围为18.2％～100％，暗区比例范围为6.5％～20％；较暗场景的亮区比例范围为20％～60％，暗区比例范围为0％～1.8％；极暗场景的亮区比例范围为60％～100％，暗区比例范围为0％～0.8％。

需要说明的是，在一个变化例中，也可以根据第一主图像判断是否需要进行高动态处理。

具体而言，主摄像头获取到第一主图像后，终端还可以识别出第一主图像中的亮区和暗区，所述亮区为亮度值超过第一预设亮度阈值的区域，所述暗区为亮度值不超过第二预设亮度阈值的区域，所述第一预设亮度阈值大于等于第二预设亮度阈值。

进一步地，终端可以计算确定第一主图像中亮区面积比例和暗区面积比例，其中，所述亮区面积比例为所述亮区的面积占所述第一主图像的面积的比例，所述暗区面积比例为所述暗区的面积占所述第一主图像的面积的比例。终端可以根据计算得到的亮区面积比例和暗区面积比例，判断是否需要进行高动态处理。如果第一主图像中亮区面积比例和暗区面积比例均满足预设条件，则判断为进行高动态处理。

关于根据第一主图像判断是否需要进行高动态处理的更多内容可以参照上文中根据预览图像判断是否需要进行高动态处理的相关描述，在此不再赘述。

还需要说明的是，现有技术中判断是否需要进行高动态处理时，只考虑预览图像整体的平均亮度值，但是预览图像的平均亮度值并不能全面、真实地反映出当前所要拍摄的场景是否处于高动态场景。例如，当预览图像中存在亮度值极高的一部分区域，还存在亮度值极低的一部分区域，但计算得到的平均亮度值可能会指示该预览图像处于正常的亮度范围内，从而会将需要进行高动态处理的场景误认为不需要进行高动态处理的场景。

而本发明实施例的方案中，在判断是否需要进行高动态处理时，先计算采集到的预览图像中的亮区面积比例和暗区面积比例，再根据亮区面积比例和暗区面积比例判断是否需要进行高动态处理。由于亮区面积比例和暗区面积比例分别为预览图像中亮区的面积和暗区的面积占预览图像的面积的比例，因此，本发明实施例的方案在判断是否需要进行高动态处理时，同时考虑了预览图像中亮区和暗区的情况，能够更加准确地区分出多种场景，例如高动态、逆光、暗光等多种特殊场景。

进一步地，如果终端判断为不需要进行高动态处理，说明当前拍摄的场景不属于高动态、逆光、暗光等特殊场景，终端则将深度图像与第一主图像进行合成，以得到结果图像。此时，该结果图像即为焦外成像的结果图像。

在步骤S102的具体实施中，如果需要进行高动态处理，则可以确定至少一个第二曝光值，并获取主摄像头在至少一个第二曝光值下拍摄的至少一张第二主图像。所述至少一个第二曝光值是指进行高动态处理时，主摄像头拍摄图像采用的一个或多个曝光值。

需要说明的是，如果终端根据采集到的预览图像判断需要进行高动态处理，则主摄像头可以在获取第一主图像和第一副图像之前，确定至少一个第二曝光值；也可以在获取第一主图像和第一副图像之前，确定至少一个第二曝光值，并获取至少一张第二主图像。

作为一个非限制性的例子，主摄像头采集预览图像后，确定第一曝光值并判断是否需要进行高动态处理，如果是，则确定至少一个第二曝光值；确定第一曝光值和第二曝光值后，主摄像头先获取在第一曝光值下拍摄的第一主图像，再获取在至少一个第二曝光值下拍摄的至少一张第二主图像。其中，获取在第一曝光值下拍摄的第一主图像的同时，副摄像头获取在第一曝光值下拍摄的第一副图像。

进一步地，场景信息还可以包括各个预设场景对应的至少一个第二曝光值。终端在场景信息中查找到预览图像匹配的预设场景后，还可以一并确定该预设场景的至少一个第二曝光值。

作为一个非限制性实施例，高动态场景的至少一个第二曝光值包括-1.4和1.5，逆光场景的至少一个第二曝光值包括-2.2和1.5，较暗场景的至少一个第二曝光值包括-0.5和1.0，极暗场景的至少一个第二曝光值包括-0.5和2.0，但并不限于此。

进一步地，将曝光值分别设置为至少一个第二曝光值，主摄像头获取各个第二曝光值下拍摄的第二主图像。

进一步地，场景信息还可以包括每一预设场景中主摄像头需要获取的至少一张第二主图像的数量。也即，在每个第二曝光值下，主摄像头可以拍摄一张或多张第二主图像。

作为一个非限制性实施例，所述至少一个第二曝光值与至少一张第二主图像一一对应，也即，在每一第二曝光值下，主摄像头拍摄一张第二主图像。

在步骤S103的具体实施中，获取到第一主图像和至少一张第二主图像后，终端判断是否对所述第一主图像和所述至少一张第二主图像进行图像融合处理。具体而言，终端可以计算两两主图像之间的帧间偏移量，主图像包括第一主图像和至少一张第二主图像，再判断各个帧间偏移量是否均不超过预设偏移阈值，如果是，则对主图像进行图像融合处理。

在一个非限制性实施例中，终端可以计算每张第二主图像与第一主图像之间的帧间偏移量；再判断计算得到的各个帧间偏移量是否均不超过预设偏移阈值，如果是，则终端判断所述至少一张第二主图像均与第一主图像匹配，对所述第一主图像和所述至少一张第二主图像进行图像融合处理，从而融合得到的高动态图像也可以与深度图像匹配。如果任一第二主图像与第一主图像的帧间偏移量大于预设偏移阈值，则终端判断为第二主图像和第一主图像是不匹配的，无法将至少一张第二主图像与第一主图像进行图像融合处理。

进一步地，在计算确定每张第二主图像与第一主图像之间的帧间偏移量时，可以对第一主图像与第二主图像进行图像块匹配，以得到两者之间的帧间偏移量，也可以采用相位相关函数计算所述帧间偏移量。

在一个非限制性实施例中，可以将第一主图像均匀划分成M×N个第一子区域，以及将第二主图像划分成同样的M×N个第二子区域，第一子区域与第二子区域一一对应，第一子区域在第一主图像中的位置和对应的第二子区域在第二主图像中的位置相同；对于每个第一子区域，确定其与对应的第二子区域的区域偏移量，根据各个第一子区域与对应的第二子区域的区域偏移量，确定第一主图像和第二主图像全图的帧间偏移量。

进一步地，在将主图像进行图像融合处理，以得到高动态范围图像时，可以将至少一张第二主图像与用于计算深度图像的第一主图像进行融合，主摄像头也可以在获取用于计算深度图像的第一主图像之后，额外在第一曝光值下获取至少一张第一主图像，将该至少一张第一主图像与至少一张第二主图像进行图像融合处理，以得到高动态范围图像。

进一步地，如果所述预览图像匹配的预设场景为暗光区域，所述暗光场景可以包括较暗场景和极暗场景，在将第一主图像和所述至少一张第二主图像进行图像融合处理时，需要先对所述第一主图像进行图像去噪处理，以得到去噪后的第一主图像；再对所述去噪后的第一主图像和所述至少一张第二主图像进行图像融合处理。也即，在暗光场景中，可以先对第一主图像进行去噪处理。

具体而言，终端匹配到预览图像的匹配场景为暗光场景时，在捕获阶段，主摄像头可以在第一曝光值下获取多张第一主图像，再根据多张第一主图像进行图像去噪处理，以得到去噪后的第一主图像。

需要说明的是，在捕获阶段，主摄像头可以先获取用于计算深度图像的第一主图像，然后再额外获取多张用于进行图像去噪处理的第一主图像。在进行图像去噪处理时，用于计算深度图像的第一主图像也可以用于进行图像去噪处理。

作为一个非限制性实施例，在较暗场景中，主摄像头在获取用于计算深度图像的第一主图像后，额外在第一曝光值下获取3张第一主图像，以进行图像去噪处理。在极暗场景中，主摄像头在获取用于计算深度图像的第一主图像后，额外在第一曝光值下获取5张第一主图像，以进行图像去噪处理。

进一步地，如果存在两两主图像之间的帧间偏移量大于预设偏移阈值，则直接将第一主图像与深度图像进行合成处理，以得到结果图像。

在步骤S104的具体实施中，在得到高动态范围图像后，对所述高动态范围图像和深度图像进行合成处理，以生成结果图像，其中，所述深度图像是由所述第一主图像和第一副图像计算确定的。在合成处理中，可以根据深度图像对高动态范围图像进行虚化处理，从而可以得到经过高动态处理的焦外成像的结果图像。

参照图2，图2是本发明实施例中一种用于终端的图像生成装置，本发明实施例中的用于终端的图像生成装置可以包括：第一获取模块21、第二获取模块22、融合处理模块23、生成模块24，其中，

第一获取模块21用于获取所述主摄像头在第一曝光值下拍摄的第一主图像，以及所述副摄像头在所述第一曝光值下拍摄得到的第一副图；第二获取模块22用于当需要进行高动态处理时，获取所述主摄像头在至少一个第二曝光值下拍摄的至少一张第二主图像；融合处理模块23用于判断是否对所述第一主图像和所述至少一张第二主图像进行图像融合处理，如果是，则生成高动态范围图像；生成模块24，用于对所述高动态范围图像和深度图像进行合成处理，以生成结果图像，其中，所述深度图像由所述第一主图像和所述第一副图像计算确定。

进一步地，所述第一获取模块还可以包括识别单元(图未示)，所述识别单元用于判断是否需要进行高动态处理。

进一步地，所述生成模块24还可以用于对所述第一主图像和深度图像进行合成处理，以生成结果图像。

关于本发明实施例中的用于终端的图像生成装置的工作原理、工作方式的更多内容，可以参照上述图1的相关描述，在此不再赘述。

本发明实施例还提供了一种存储介质，其上存储有计算机程序，所述计算机程序被处理器运行时执行上述图1所述的用于终端的图像生成方法的步骤。所述存储介质可以是计算机可读存储介质，例如可以包括非挥发性存储器(non-volatile)或者非瞬态(non-transitory)存储器，还可以包括光盘、机械硬盘、固态硬盘等。

本发明实施例还提供一种终端，包括存储器和处理器，所述存储器上存储有可在所述处理器上运行的计算机指令，所述处理器运行所述计算机指令时执行上述图1所述的用于终端的图像生成方法的步骤。所述终端可以是计算机、平板电脑、手机等终端设备，但并不限于此。

具体地，在本发明实施例中，所述处理器可以为中央处理单元(centralprocessing unit，简称CPU)，该处理器还可以是其他通用处理器、数字信号处理器(digital signal processor，简称DSP)、专用集成电路(application specificintegrated circuit，简称ASIC)、现成可编程门阵列(field programmable gate array，简称FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。

还应理解，本申请实施例中的存储器可以是易失性存储器或非易失性存储器，或可包括易失性和非易失性存储器两者。其中，非易失性存储器可以是只读存储器(read-only memory，简称ROM)、可编程只读存储器(programmable ROM，简称PROM)、可擦除可编程只读存储器(erasable PROM，简称EPROM)、电可擦除可编程只读存储器(electricallyEPROM，简称EEPROM)或闪存。易失性存储器可以是随机存取存储器(random accessmemory，简称RAM)，其用作外部高速缓存。通过示例性但不是限制性说明，许多形式的随机存取存储器(random access memory，简称RAM)可用，例如静态随机存取存储器(staticRAM，简称SRAM)、动态随机存取存储器(DRAM)、同步动态随机存取存储器(synchronousDRAM，简称SDRAM)、双倍数据速率同步动态随机存取存储器(double data rate SDRAM，简称DDR SDRAM)、增强型同步动态随机存取存储器(enhanced SDRAM，简称ESDRAM)、同步连接动态随机存取存储器(synchlink DRAM，简称SLDRAM)和直接内存总线随机存取存储器(direct rambus RAM，简称DR RAM)。

本申请实施例中出现的“多个”是指两个或两个以上。

本申请实施例中出现的第一、第二等描述，仅作示意与区分描述对象之用，没有次序之分，也不表示本申请实施例中对设备个数的特别限定，不能构成对本申请实施例的任何限制。

虽然本发明披露如上，但本发明并非限定于此。任何本领域技术人员，在不脱离本发明的精神和范围内，均可作各种更动与修改，因此本发明的保护范围应当以权利要求所限定的范围为准。

Claims (13)

1.一种用于终端的图像生成方法，所述终端具有主摄像头和副摄像头，其特征在于，所述方法包括：

获取所述主摄像头在第一曝光值下拍摄的第一主图像，以及所述副摄像头在所述第一曝光值下拍摄得到的第一副图像；

如果需要进行高动态处理，则获取所述主摄像头在至少一个第二曝光值下拍摄的至少一张第二主图像；

判断是否对所述第一主图像和所述至少一张第二主图像进行图像融合处理，如果是，则生成高动态范围图像；

对所述高动态范围图像和深度图像进行合成处理，以生成结果图像，其中，所述深度图像由所述第一主图像和第一副图像计算确定。

2.根据权利要求1所述的用于终端的图像生成方法，其特征在于，判断是否对所述第一主图像和所述至少一张第二主图像进行图像融合处理包括：

计算主图像之间的帧间偏移量，所述主图像包括所述第一主图像和所述至少一张第二主图像；

判断所述帧间偏移量是否均不超过预设偏移阈值，如果是，则对所述第一主图像和所述至少一张第二主图像进行图像融合处理。

3.根据权利要求1所述的用于终端的图像生成方法，其特征在于，判断是否需要进行高动态处理包括：

采集预览图像，所述预览图像包括亮区和暗区，其中，所述预览图像为所述主摄像头在获取所述第一主图像前采集的画面，所述亮区为亮度值超过第一预设亮度阈值的区域，所述暗区为亮度值不超过第二预设亮度阈值的区域，所述第一预设亮度阈值大于等于第二预设亮度阈值；

计算亮区面积比例和暗区面积比例，并根据所述亮区面积比例和暗区面积比例，判断是否需要进行高动态处理，其中，所述亮区面积比例为所述亮区的面积占所述预览图像的面积的比例，所述暗区面积比例为所述暗区的面积占所述预览图像的面积的比例。

4.根据权利要求3所述的用于终端的图像生成方法，其特征在于，获取所述主摄像头在至少一个第二曝光值下拍摄的至少一张第二主图像之前还包括：确定所述至少一个第二曝光值；

确定所述至少一个第二曝光值包括：

读取多个预设场景的场景信息，所述场景信息包括各个预设场景中的亮区比例范围、暗区比例范围以及各个预设场景中的至少一个第二曝光值；

根据所述亮区面积比例和所述暗区面积比例，查找所述预览图像匹配的预设场景；

根据所述预览图像匹配的预设场景，确定所述至少一个第二曝光值。

5.根据权利要求4所述的用于终端的图像生成方法，其特征在于，根据所述亮区面积比例和暗区面积比例，判断是否需要进行高动态处理包括：

如果未查找到所述预览图像匹配的预设场景，则判断为不需要进行高动态处理。

6.根据权利要求4所述的用于终端的图像生成方法，其特征在于，在获取所述主摄像头在第一曝光值下拍摄的第一主图像，以及所述副摄像头在所述第一曝光值下拍摄得到的第一副图像之前，确定所述至少一个第二曝光值。

7.根据权利要求4所述的用于终端的图像生成方法，其特征在于，所述多个预设场景包括高动态场景，所述高动态场景的亮区比例范围为5.2％～10.2％，所述高动态场景的暗区比例范围为6.5％～20％。

8.根据权利要求4所述的用于终端的图像生成方法，其特征在于，所述多个预设场景包括逆光场景，所述逆光场景的亮区比例范围为18.2％～100％，所述逆光场景的暗区比例范围为6.5％～20％。

9.根据权利要求4所述的用于终端的图像生成方法，其特征在于，所述多个预设场景包括暗光场景，如果所述预览图像匹配的预设场景为暗光场景，对所述第一主图像和所述至少一张第二主图像进行图像融合处理包括：

对所述第一主图像进行图像去噪处理，以得到去噪后的第一主图像；

对所述去噪后的第一主图像和所述至少一张第二主图像进行图像融合处理。

10.根据权利要求1所述的用于终端的图像生成方法，其特征在于，获取所述主摄像头在所述至少一个第二曝光值下拍摄的至少一张第二主图像时，所述至少一张第二主图像和所述至少一个第二曝光值一一对应。

11.一种用于终端的图像生成装置，所述终端具有主摄像头和副摄像头，其特征在于，所述装置包括：

第一获取模块，用于获取所述主摄像头在第一曝光值下拍摄的第一主图像，以及所述副摄像头在所述第一曝光值下拍摄得到的第一副图像；

第二获取模块，当需要进行高动态处理时，用于获取所述主摄像头在至少一个第二曝光值下拍摄的至少一张第二主图像；

融合处理模块，用于判断是否对所述第一主图像和所述至少一张第二主图像进行图像融合处理，如果是，则生成高动态范围图像；

生成模块，用于对所述高动态范围图像和深度图像进行合成处理，以生成结果图像，其中，所述深度图像由所述第一主图像和所述第一副图像计算确定。

12.一种存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器运行时，执行权利要求1至10中任一项所述的用于终端的图像生成方法的步骤。

13.一种终端，包括存储器和处理器，所述存储器上存储有可在所述处理器上运行的计算机程序，其特征在于，所述处理器运行所述计算机程序时执行权利要求1至10中任一项所述的用于终端的图像生成方法的步骤。

Images