WO2018137267A1

WO2018137267A1 - 图像处理方法和终端设备

Info

Publication number: WO2018137267A1
Application number: PCT/CN2017/074827
Authority: WO
Inventors: 孙涛; 朱聪超; 杨永兴
Original assignee: 华为技术有限公司
Priority date: 2017-01-25
Filing date: 2017-02-24
Publication date: 2018-08-02
Also published as: CN109863742A; CN109863742B

Abstract

本申请提供一种图像处理方法和终端设备，该方法包括：获取摄像头传感器交替并连续输出的至少一帧第一图像和至少一帧第二图像；其中，第一图像的分辨率与当前拍照模式所对应的分辨率相同，第一图像的分辨率为第二图像的分辨率的N倍，N为大于1的整数；摄像头传感器采用第一曝光参数输出每帧第一图像，摄像头传感器采用第二曝光参数输出每帧第二图像，第一曝光参数大于第二曝光参数；根据至少一帧第一图像和至少一帧第二图像，进行图像融合，得到融合后的图像。本申请提供的图像处理方法和终端设备，能够提升终端设备在低照度下的拍照效果，提高了用户体验。

Description

图像处理方法和终端设备

技术领域

本申请涉及通信技术，尤其涉及一种图像处理方法和终端设备。

背景技术

随着用户需求的不断提升，终端设备所集成的功能也越来越多。目前，市面上大多数的终端设备可以为用户提供如下功能：拨打电话、发送短信、上网、拍照等。

终端设备可以通过集成在终端设备上的摄像头传感器来实现拍照功能。现有技术中，为了不影响终端设备的体积，通常集成在终端设备上的摄像头传感器较小，使得摄像头传感器的感光面积有限、像素尺寸较小，进而使得摄像头传感器在低照度下的进光量不足。

因此，当用户使用终端设备拍摄光线较暗的场景时，终端设备所拍摄的图像的效果较差(例如：图像的噪声较大、亮度较低等)，使得用户体验较低。

发明内容

本申请提供一种图像处理方法和终端设备，用于解决现有技术中用户使用终端设备拍摄光线较暗的场景时，终端设备所拍摄的图像的效果较差，使得用户体验较低的技术问题。

第一方面，本申请提供一种图像处理方法，方法包括：获取摄像头传感器交替并连续输出的至少一帧第一图像和至少一帧第二图像；其中，第一图像的分辨率与当前拍照模式所对应的分辨率相同，第一图像的分辨率为第二图像的分辨率的N倍，N为大于1的整数；摄像头传感器采用第一曝光参数输出每帧第一图像，摄像头传感器采用第二曝光参数输出每帧第二图像，第一曝光参数大于第二曝光参数；根据至少一帧第一图像和至少一帧第二图像，进行图像融合，得到融合后的图像。

通过第一方面提供的图像处理方法，用户在使用终端设备在低照度下拍照时，终端设备可以获取摄像头传感器交替并连续输出的至少一帧第一图像和至少一帧第二图像，其中，第一图像主要用于提供当前拍摄场景的细节信息，第二图像主要用于提供当前拍摄场景的亮度信息，从而使得终端设备可以根据该至少一帧第一图像和至少一帧第二图像，进行图像融合处理，使得终端设备所得到的融合后的图像的亮度和清晰度均得到了提升，从而使得终端设备在将该融合后的图像呈现给用户时，可以使用户观看到清晰度和亮度较高的图像，提升了终端设备在低照度下的拍照效果，进而提高了用户体验。

可选的，获取摄像头传感器交替输出的至少一帧第一图像和至少一帧第二图像之前，方法还包括：

根据摄像头传感器输出的预览图像，确定摄像头传感器的拍照参数；拍照参数包括：第一图像的尺寸、第一图像的帧数、第二图像的帧数、第一图像的曝光参数、第二图像的曝光参数、第一图像和第二图像的交替顺序；

根据拍照参数，指示摄像头传感器交替并连续输出至少一帧第一图像和至少一帧第二图像。

通过该可能的实施方式提供的图像处理方法，终端设备通过指示摄像头传感器交替并连续输出至少一帧第一图像和至少一帧第一图像，可以减少第一图像之间的相对局部运动，以及，减少多帧第二图像之间的相对局部运动。同时，通过指示摄像头传感器连续输出的方式，能够减少拍照时间，提升拍照速度，进而提高用户体验。

可选的，至少一帧第一图像包括：一帧第一图像，至少一帧第二图像包括：一帧第二图像；则根据至少一帧第一图像和至少一帧第二图像进行图像融合，得到融合后的图像，包括：对第一图像和第二图像进行图像融合，得到融合后的图像。

可选的，对第一图像和第二图像进行图像融合，得到融合后的图像之前，方法还包括：将第一图像从拜耳Bayer格式转换为YUV格式，得到转换格式后的第一图像，并将第二图像从拜耳Bayer格式转换为YUV格式，得到转换格式后的第二图像；对第一图像和第二图像进行图像融合，得到融合后的图像，包括：对转换格式后的第一图像和转换格式后的第二图像进行图像融合，得到融合后的图像。

可选的，至少一帧第一图像包括：多帧第一图像，至少一帧第二图像包括：多帧第二图像；则根据至少一帧第一图像和至少一帧第二图像进行图像融合，得到融合后的图像，包括：对多帧第一图像进行时域降噪，得到第三图像，并对多帧第二图像进行时域降噪，得到第四图像；对第三图像和第四图像进行图像融合，得到融合后的图像。

可选的，对多帧第一图像进行时域降噪，得到第三图像，并对多帧第二图像进行时域降噪，得到第四图像之前，还包括：将多帧第一图像从拜耳Bayer格式转换为YUV格式，得到多帧转换格式后的第一图像，并将多帧第二图像从Bayer格式转换为YUV格式，得到多帧转换格式后的第二图像；对多帧第一图像进行时域降噪，得到第三图像，并对多帧第二图像进行时域降噪，得到第四图像，包括：对多帧转换格式后的第一图像进行时域降噪，得到第三图像，并对多帧转换格式后第二图像进行时域降噪，得到第四图像。

可选的，对第三图像和第四图像进行图像融合，得到融合后的图像，包括：根据第四图像的尺寸，对第三图像进行下采样，得到下采样后的第三图像；下采样后的第三图像的尺寸与第四图像的尺寸相同；将下采样后的第三图像和第四图像进行曝光融合，得到高动态范围HDR图像；根据第三图像的尺寸，将HDR图像进行上采样，得到上采样后的HDR图像；将上采样后的HDR图像与第三图像的细节图像融合，得到融合后的图像；其中，第三图像的细节图像包括第三图像的高频分量。

通过该可能的实施方式提供的图像处理方法，用户在使用终端设备在低照度下拍照时，终端设备通过对所获取的摄像头传感器交替并连续输出的多帧第一图像和第二图像进行时域降噪，得到主要用于提供当前拍摄场景的细节信息的第三图像，以及，主要用于提供拍摄场景的亮度信息的第四图像之后，可以使用该第三图像和第四图像进行图像融合处理，使得终端设备所得到的融合后的图像的亮度和清晰度均得到了提升，从而使得终端设备在将该融合后的图像呈现给用户时，可以使用户观看到清晰度和亮度较高的图像，提升了终端设备在低照度下的拍照效果，进而提高了用户体验。

可选的，将上采样后的HDR图像与第三图像的细节图像融合，得到融合后的图像之前，方法还包括：根据第三图像，获取第三图像的细节图像。

通过该可能的实施方式提供的图像处理方法，终端设备可以获取到“包括第三图像的高频分量”的第三图像的细节图像，从而使得终端设备在将上采样后的HDR图像与该第三图像的细节图像进行融合后，可以将拍摄场景整体的细节信息回填至上采样后的HDR图像中，提高了上采样后的HDR图像的清晰度。

示例性的，根据第三图像，获取第三图像的细节图像，包括：根据第三图像的尺寸，对下采样后的第三图像进行上采样，得到上采样后的第三图像；对上采样后的第三图像与第三图像进行图像相减计算，得到第三图像的细节图像。

可选的，将下采样后的第三图像和第四图像进行曝光融合，得到高动态范围HDR图像之前，方法还包括：以下采样后的第三图像为参考，对第四图像进行图像配准，得到图像配准后的第四图像；根据下采样后的第三图像，对图像配准后的第四图像进行鬼影矫正，得到矫正后的第四图像；将下采样后的第三图像和第四图像进行曝光融合，得到高动态范围HDR图像，包括：将下采样后的第三图像与矫正后的第四图像进行曝光融合，得到HDR图像。

通过该可能的实施方式提供的图像处理方法，用户在使用终端设备在低照度下拍照时，终端设备通过对所获取的摄像头传感器交替并连续输出的多帧第一图像和第二图像进行时域降噪，得到主要用于提供当前拍摄场景的细节信息的第三图像，以及，主要用于提供拍摄场景的亮度信息的第四图像之后，可以在对下采样后的第三图像和第四图像进行图像融合之前，先以下采样后的第三图像为基准，对第四图像进行图像配准和鬼影矫正，从而使得终端设备在使用进行图像配准和鬼影矫正后的第四图像与下采样后的第三图像进行图像融合时，图像融合的效果较好，进而使得终端设备所得到的融合后的图像的清晰度进一步得到了提升。

示例性的，根据下采样后的第三图像，对图像配准后的第四图像进行鬼影矫正，得到矫正后的第四图像，包括：将图像配准后的第四图像的亮度降低至下采样后的第三图像的亮度，得到降低亮度后的第四图像；对下采样后的第三图像和降低亮度后的第四图像进行图像求差计算，得到降低亮度后的第四图像的每个像素点对应的差异绝对值；将差异绝对值大于预设阈值的像素点作为图像配准后的第四图像的鬼影；根据图像配准后的第四图像的亮度，提升下采样后的第三图像的亮度，得到提升亮度后的第三图像；使用提升亮度后的第三图像中的像素点替换图像配准后的第四图像的鬼影，得到矫正后的第四图像。

示例性的，将上采样后的HDR图像与第三图像的细节图像融合，得到融合后的图像，包括：确定摄像头传感器的感光度ISO；根据摄像头传感器的ISO，确定增益系数；将第三图像的细节图像的每个像素点的像素值与增益系数相乘，得到处理后的细节图像；将处理后的细节图像与上采样后的HDR图像进行图像相加计算，得到融合后的图像。

可选的，将上采样后的HDR图像与第三图像的细节图像融合，得到融合后的图像之后，方法还包括：对融合后的图像进行空域降噪，得到空域降噪后的图像。

通过该可能的实施方式提供的图像处理方法，可以通过对融合后的图像进行空域降噪的方式，进一步降低图像的噪声。

示例性的，第一图像为全尺寸图像。

第二方面，本申请提供一种终端设备，终端设备包括：获取模块，用于获取摄像头传感器交替并连续输出的至少一帧第一图像和至少一帧第二图像；其中，第一图像的分辨率与当前拍照模式所对应的分辨率相同，第一图像的分辨率为第二图像的分辨率的N倍，N 为大于1的整数；摄像头传感器采用第一曝光参数输出每帧第一图像，摄像头传感器采用第二曝光参数输出每帧第二图像，第一曝光参数大于第二曝光参数；融合模块，用于根据至少一帧第一图像和至少一帧第二图像，进行图像融合，得到融合后的图像。

可选的，终端设备，还包括：确定模块，用于在获取模块获取摄像头传感器交替并连续输出的至少一帧第一图像和至少一帧第二图像之前，根据摄像头传感器输出的预览图像，确定摄像头传感器的拍照参数；拍照参数包括：第一图像的尺寸、第一图像的帧数、第二图像的帧数、第一图像的曝光参数、第二图像的曝光参数、第一图像和第二图像的交替顺序；指示模块，用于根据拍照参数，指示摄像头传感器交替并连续输出至少一帧第一图像和至少一帧第二图像。

可选的，至少一帧第一图像包括：一帧第一图像，至少一帧第二图像包括：一帧第二图像；融合模块，具体用于对第一图像和第二图像进行图像融合，得到融合后的图像。

可选的，终端设备，还包括：第一格式转换模块，用于在融合模块对第一图像和第二图像进行图像融合，得到融合后的图像之前，将第一图像从拜耳Bayer格式转换为YUV格式，得到转换格式后的第一图像，并将第二图像从拜耳Bayer格式转换为YUV格式，得到转换格式后的第二图像；融合模块，具体用于对转换格式后的第一图像和转换格式后的第二图像进行图像融合，得到融合后的图像。

可选的，至少一帧第一图像包括：多帧第一图像，至少一帧第二图像包括：多帧第二图像；融合模块，具体用于对多帧第一图像进行时域降噪，得到第三图像，并对多帧第二图像进行时域降噪，得到第四图像；对第三图像和第四图像进行图像融合，得到融合后的图像。

可选的，终端设备，还包括：第二格式转换模块，用于在融合模块对多帧第一图像进行时域降噪，得到第三图像，并对多帧第二图像进行时域降噪，得到第四图像之前，将多帧第一图像从拜耳Bayer格式转换为YUV格式，得到多帧转换格式后的第一图像，并将多帧第二图像从Bayer格式转换为YUV格式，得到多帧转换格式后的第二图像；融合模块，具体用于对多帧转换格式后的第一图像进行时域降噪，得到第三图像，并对多帧转换格式后第二图像进行时域降噪，得到第四图像。

可选的，融合模块，包括：下采样单元，用于根据第四图像的尺寸，对第三图像进行下采样，得到下采样后的第三图像；下采样后的第三图像的尺寸与第四图像的尺寸相同；曝光融合单元，用于将下采样后的第三图像和第四图像进行曝光融合，得到高动态范围HDR图像；上采样单元，用于根据第三图像的尺寸，将HDR图像进行上采样，得到上采样后的HDR图像；融合单元，用于将上采样后的HDR图像与第三图像的细节图像融合，得到融合后的图像；其中，第三图像的细节图像包括第三图像的高频分量。

可选的，融合模块，还包括：获取单元，用于在融合单元将上采样后的HDR图像与第三图像的细节图像融合，得到融合后的图像之前，根据第三图像，获取第三图像的细节图像。

示例性的，获取单元，具体用于根据第三图像的尺寸，对下采样后的第三图像进行上采样，得到上采样后的第三图像；对上采样后的第三图像与第三图像进行图像相减计算，得到第三图像的细节图像。

可选的，融合模块，还包括：图像配准单元，用于曝光融合单元将下采样后的第三图像和第四图像进行曝光融合，得到高动态范围HDR图像之前，以下采样后的第三图像为参考，对第四图像进行图像配准，得到图像配准后的第四图像；鬼影矫正单元，用于根据下采样后的第三图像，对图像配准后的第四图像进行鬼影矫正，得到矫正后的第四图像；曝光融合单元，具体用于将下采样后的第三图像与矫正后的第四图像进行曝光融合，得到HDR图像。

示例性的，鬼影矫正单元，具体用于将图像配准后的第四图像的亮度降低至下采样后的第三图像的亮度，得到降低亮度后的第四图像；对下采样后的第三图像和降低亮度后的第四图像进行图像求差计算，得到降低亮度后的第四图像的每个像素点对应的差异绝对值；将差异绝对值大于预设阈值的像素点作为图像配准后的第四图像的鬼影；根据图像配准后的第四图像的亮度，提升下采样后的第三图像的亮度，得到提升亮度后的第三图像；使用提升亮度后的第三图像中的像素点替换图像配准后的第四图像的鬼影，得到矫正后的第四图像。

示例性的，融合单元，具体用于确定摄像头传感器的感光度ISO；根据摄像头传感器的ISO，确定增益系数；将第三图像的细节图像的每个像素点的像素值与增益系数相乘，得到处理后的细节图像；将处理后的细节图像与上采样后的HDR图像进行图像相加计算，得到融合后的图像。

可选的，终端设备还包括：

空域降噪模块，用于在融合单元将上采样后的HDR图像与第三图像的细节图像融合，得到融合后的图像之后，对融合后的图像进行空域降噪，得到空域降噪后的图像。

示例性的，第一图像为全尺寸图像。

上述第二方面以及第二方面的各可能的实施方式所提供的终端设备，其有益效果可以参见上述第一方面和第一方面的各可能的实施方式所带来的有益效果，在此不再赘述。

第三方面，本申请提供一种终端设备，终端设备包括：处理器、存储器；

其中，存储器用于存储计算机可执行程序代码，程序代码包括指令；当处理器执行指令时，指令使终端设备执行如第一方面和第一方面的各可能的实施方式任一项的图像处理方法。

上述第三方面所提供的终端设备，其有益效果可以参见上述第一方面和第一方面的各可能的实施方式所带来的有益效果，在此不再赘述。

本申请第四方面提供一种终端设备，包括用于执行以上第一方面的方法的至少一个处理元件(或芯片)。

本申请第五方面提供一种程序，该程序在被处理器执行时用于执行以上第一方面的方法。

本申请第六方面提供一种程序产品，例如计算机可读存储介质，包括第五方面的程序。

本申请第七方面提供一种计算机可读存储介质，计算机可读存储介质中存储有指令，当其在计算机上运行时，使得计算机执行上述第一方面的方法。

本申请提供的图像处理方法和终端设备，用户在使用终端设备在低照度下拍照时，终端设备可以获取摄像头传感器交替并连续输出的至少一帧第一图像和至少一帧第二图像，其中，第一图像主要用于提供当前拍摄场景的细节信息，第二图像主要用于提供当前拍摄场景的亮度信息，从而使得终端设备可以根据该至少一帧第一图像和至少一帧第二图像，进行图像融合处理，使得终端设备所得到的融合后的图像的亮度和清晰度均得到了提升，从而使得终端设备在将该融合后的图像呈现给用户时，可以使用户观看到清晰度和亮度较高的图像，提升了终端设备在低照度下的拍照效果，进而提高了用户体验。

附图说明

图1为现有技术中的终端设备的示意图；

图2为现有技术中的摄像头传感器binning模式的工作原理示意图；

图3为本申请提供的一种图像处理方法的流程示意图；

图4为本申请提供的另一种图像处理方法的流程示意图；

图5为本申请提供的摄像头传感器的出图示意图；

图6为本申请提供的又一种图像处理方法的流程示意图；

图7为本申请提供的又一种图像处理方法的流程示意图；

图8为本申请提供的又一种图像处理方法的流程示意图；

图9为本申请示出的一种第一图像的示意图；

图10为本申请示出的一种第二图像的示意图；

图11为本申请示出的一种空域降噪后的图像的示意图；

图12为本申请提供的又一种图像处理方法的流程示意图；

图13为本申请提供的一种终端设备的结构示意图；

图14为本申请提供的另一种终端设备的结构示意图；

图15为本申请提供的又一种终端设备的结构示意图；

图16为本申请提供的又一种终端设备的结构示意图；

图17为本申请提供的又一种终端设备的结构示意图；

图18为本申请提供的又一种终端设备的结构示意图；

图19为申请提供的终端设备为手机时的结构框图。

具体实施方式

以下，对本申请中的部分用语进行解释说明，以便于本领域技术人员理解：

终端：可以是无线终端也可以是有线终端，无线终端可以是指向用户提供语音和/或其他业务数据连通性的设备，具有无线连接功能的手持式设备、或连接到无线调制解调器的其他处理设备。无线终端可以经无线接入网(Radio Access Network，RAN)与一个或多个核心网进行通信，无线终端可以是移动终端，如移动电话(或称为“蜂窝”电话)和具有移动终端的计算机，例如，可以是便携式、袖珍式、手持式、计算机内置的或者车载的移动装置，它们与无线接入网交换语言和/或数据。例如，个人通信业务(Personal Communication Service，PCS)电话、无绳电话、会话发起协议(Session Initiation Protocol，SIP)话机、无线本地环路(Wireless Local Loop，WLL)站、个人数字助理(Personal Digital Assistant，PDA)等设备。无线终端也可以称为系统、订户单元 (Subscriber Unit)、订户站(Subscriber Station)，移动站(Mobile Station)、移动台(Mobile)、远程站(Remote Station)、远程终端(Remote Terminal)、接入终端(Access Terminal)、用户终端(User Terminal)、用户代理(User Agent)、用户设备(User Device or User Equipment)，在此不作限定。

本申请中，“多个”是指两个或两个以上。“和/或”，描述关联对象的关联关系，表示可以存在三种关系，例如，A和/或B，可以表示：单独存在A，同时存在A和B，单独存在B这三种情况。字符“/”一般表示前后关联对象是一种“或”的关系。

图1为现有技术中的终端设备的示意图。现有技术中，大多数终端设备通过集成在终端设备上的摄像头传感器来实现拍照功能。其中，这里所说的摄像头传感器可以为终端设备的前置摄像头传感器，还可以为终端设备的后置摄像头传感器。图1示出的是以终端设备为手机为例的示意图。

如图1所示，由于集成在终端设备上的摄像头传感器较小，使得摄像头传感器的感光面积有限、像素尺寸较小，所以摄像头传感器在低照度下的进光量会不足，导致摄像头传感器在低照度下输出的图像的效果较差(例如：图像的噪声较大、亮度较低等)。因此，当用户使用终端设备拍摄光线较暗的场景(例如：夜景)时，因终端设备的摄像头传感器所输出的图像的效果较差，从而使得终端设备在将该图像呈现给用户时，用户体验较低。

目前，存在如下几种解决方案，具体地：

第一种方案：终端设备通过终端设备上的补光灯提升拍摄场景的亮度，以增大摄像头传感器的进光量，进而提高摄像头传感器输出的图像的亮度。

具体的，大多数终端设备上都有设置有补光灯，例如：后置闪光灯、前置发光二极管(Light Emitting Diode，LED)灯等。因此，终端设备在摄像头传感器拍照时，可以使用补光灯对拍摄场景进行补光，提亮拍摄场景的亮度，从而提高摄像头传感器的进光量，进而提高摄像头传感器输出的图像的亮度。

然而，由于补光灯的补光范围有限，使得补光灯只能对近景补光，无法对远景补光，导致摄像头传感器输出的图像中的远景部分仍然较暗，使得终端设备呈现给用户的图像的效果仍然较差，用户体验较低。

第二种方案：终端设备通过将摄像头传感器工作在binning模式，提高摄像头传感器输出的图像的亮度。

具体的，图2为现有技术中的摄像头传感器binning模式的工作原理示意图。如图2所示，摄像头传感器的binning模式为：将摄像头传感器所拍摄的图像中多个相邻的、且相同的像元的像素合并，作为一个像素使用。即，将图像中多个相邻的绿色(Green，G)像元的像素合并，作为一个像素使用；将图像中多个相邻的红色(Red，R)像元的像素合并，作为一个像素使用；将图像中多个相邻的蓝色(Blue，B)像元的像素合并，作为一个像素使用。其中，这里所说的相邻的像元可以为水平方向上相邻的像元，也可以为竖直方向上相邻的像元，还可以既包括水平方向上相邻的像元，又包括竖直方向上相邻的像元。

图2中示出的是以水平方向上相邻的2个像元的像素、以及，竖直方向上相邻的2个像元的像素合并，作为一个像素使用的示意图。为了便于理解，在图2中将合并为同一个像素的4个像元采用相同的线条标识。以图2中左侧的图像为摄像头传感器拍摄的图像为例，则当摄像头传感器工作在binning模式时，摄像头传感器可以将该图像中水平方向上相邻的2个像元的像素、以及，竖直方向上相邻的2个像元的像素合并，得到如图2中右侧所示的图像，进而输出图2中右侧所示的图像。其中，图2中右侧所示的图像可以称为binning图像。由于图2中将4个相同像元的像素进行了合并，因此，像素合并后所得到的binning图像的尺寸降至图2中左侧图像(即原图)的四分之一，同时，binning图像的分辨率也会降至图2中左侧图像(即原图)的四分之一。

通过这种合并像素的方式，可以提升图像的感光面积，提升暗处对光感应的灵敏度，进而可以改善摄像头传感器在低照度下输出的图像的亮度。然而，摄像头传感器工作在binning模式时，在通过提升图像的亮度的同时，会导致像素合并后所得到的图像的分辨率降低，使得图像的高频信息丢失(即图像的细节丢失)，导致图像的清晰度降低。例如：图2所示的将4个相邻的相同的像元的像素和并的方式，会将图2中右侧图像的分辨率降至左侧图像的四分之一，使得摄像头传感器所输出的图像的清晰度降低，进而使得终端设备呈现给用户的图像的效果仍然较差，用户体验较低。

根据上述描述可知，终端设备在采用上述任一方案时，终端设备呈现给用户的图像的效果仍然较差，用户体验较低。因此，考虑到上述问题，本申请提供一种图像处理方法，用于解决现有技术中用户在使用终端设备拍摄光线较暗的场景时，终端设备呈现给用户的图像的效果较差的技术问题。下面以一些实施例对本申请的技术方案进行说明。下面这几个实施例可以相互结合，对于相同或相似的概念或过程可能在某些实施例不再赘述。

图3为本申请提供的一种图像处理方法的流程示意图。如图3所示，该方法可以包括：

S101、获取摄像头传感器交替并连续输出的至少一帧第一图像和至少一帧第二图像。

具体的，在本申请中，当用户使用终端设备在低照度下拍照时，即，当终端设备处于在低照度下(即终端设备当前所拍摄的场景的光线较暗)拍照的状态时，终端设备可以获取摄像头传感器交替并连续输出的至少一帧第一图像和至少一帧第二图像。也就是说，终端设备所获取的第一图像和第二图像为终端设备的同一摄像头传感器当前拍摄同一场景时输出的图像，即第一图像和第二图像包含当前同一拍摄场景。其中，上述所说的同一摄像头传感器可以为终端设备的前置摄像头传感器，也可以为终端设备的后置摄像头传感器。

其中，上述第一图像的分辨率，与，用户当前在终端设备上所选择的拍照模式对应的分辨率相同。上述第一图像的分辨率为第二图像的分辨率的N倍，N为大于1的整数。即第一图像的尺寸为第二图像的尺寸的N倍。也就是说，第一图像的尺寸即为与当前拍照模式对应的分辨率匹配的尺寸，也可以称为该分辨率下的全尺寸图像。而第二图像为相对于第一图像的binning图像，即第二图像为经过像素合并后得到的图像。因此，本申请中的第一图像的清晰度高于第二图像的清晰度，但是第一图像的亮度低于第二图像的亮度。所以第一图像主要用于提供当前拍摄场景的细节信息(即第一图像的高频分量)，第二图像主要用于提供当前拍摄场景的亮度信息(即第二图像的低频分量)。

本实施例不限定上述摄像头传感器交替并连续输出至少一帧第一图像和至少一帧第二图像的方式，例如：摄像头传感器可以先输出一帧第一图像后输出一帧第二图像的方式，交替并连续输出至少一帧第一图像和至少一帧第二图像，还可以先输出一帧第二图像后输出一帧第一图像的方式，交替输出至少一帧第一图像和至少一帧第二图像。需要说明的是，由于第二图像为相对于第一图像的binning图像，即第二图像为经过像素合并后得到的图像，因此，第二图像的亮度高于第一图像。为了避免上述摄像头传感器输出的至少一帧第二图像出现过曝的问题，上述摄像头传感器可以不同的曝光参数输出第一图像和第二图像，例如：采用第一曝光参数输出每帧第一图像，采用小于第一曝光参数的第二曝光参数输出每帧第二图像。其中，第一曝光参数和第二曝光参数的具体取值可以根据摄像头传感器当前的感光值(ISO)确定，对此不再赘述。

S102、根据至少一帧第一图像和至少一帧第二图像，进行图像融合，得到融合后的图像。

具体的，上述终端设备在获取到至少一帧第一图像和至少一帧第二图像之后，可以对该至少一帧第一图像和至少一帧第二图像进行图像融合。即，根据清晰度较高的至少一帧第一图像与亮度较高的至少一帧第二图像进行图像融合。通过这种方式，可以将第一图像的清晰度和第二图像的亮度融合在一帧图像上，从而使得终端设备在执行完图像融合后，所得到的融合后的图像的亮度和清晰度得到提升。

本申请提供的图像处理方法，用户在使用终端设备在低照度下拍照时，终端设备可以获取摄像头传感器交替并连续输出的至少一帧第一图像和至少一帧第二图像，其中，第一图像主要用于提供当前拍摄场景的细节信息，第二图像主要用于提供当前拍摄场景的亮度信息，从而使得终端设备可以根据该至少一帧第一图像和至少一帧第二图像，进行图像融合处理，使得终端设备所得到的融合后的图像的亮度和清晰度均得到了提升，从而使得终端设备在将该融合后的图像呈现给用户时，可以使用户观看到清晰度和亮度较高的图像，提升了终端设备在低照度下的拍照效果，进而提高了用户体验。

图4为本申请提供的另一种图像处理方法的流程示意图。本实施例涉及的是上述终端设备如何指示摄像头传感器交替并连续输出至少一帧第一图像和至少一帧第二图像。如图4所示，则在上述S101之前，该方法还可以包括：

S201、根据摄像头传感器输出的预览图像，确定摄像头传感器的拍照参数。

具体的，在本实施例中，用户在使用终端设备拍照时，若终端设备对摄像头传感器当前输出的预览图像分析确定，摄像头传感器当前处于低照度拍摄状态时，终端设备可以确定摄像头传感器的拍照参数。其中，这里所说的拍照参数可以为用户当前在使用终端设备进行拍照时，终端设备执行一次拍照操作所需要使用的参数。该拍照参数可以包括：第一图像的尺寸、第一图像的帧数、第二图像的帧数、第一图像的曝光参数、第二图像的曝光参数、第一图像和第二图像的交替顺序等。

上述第一图像和第二图像的交替顺序可以为预设的交替顺序，还可以为终端设备随机为摄像头传感器分配的交替顺序等。图5为本申请提供的摄像头传感器的出图示意图。如图5所示，图5示出的是摄像头传感器以先输出第一图像后输出第二图像的交替顺序，输出4帧第一图像和4帧第二图像的出图示意图。本领域技术人员可以理解的是，摄像头传感器还可以以先输出第二图像后输出第一图像的交替顺序，输出4帧第一图像和4帧第二图像，对此不进行限定。

上述终端设备可以通过用户在终端上当前所选择的拍照模式对应的分辨率，确定第一图像的分辨率和尺寸，进而根据第一图像的分辨率与第二图像的分辨率的倍数，确定第二图像的分辨率和尺寸。

上述终端设备可以根据摄像头传感器输出的预览图像，确定摄像头传感器当前的ISO，进而通过ISO与第一图像的帧数和第二图像的帧数的对应关系，确定第一图像的帧数和第二图像的帧数。需要说明的是，当前拍摄场景的光线越暗，ISO就会越高，摄像头传感器输出的图像的噪声也就越高。因此，终端设备需要使用越多帧数的图像进行图像处理，所以ISO对应的第一图像和第二图像的帧数也就越多。示例性的，ISO与第一图像的帧数和第二图像的帧数的对应关系例如可以为：在ISO为500时，对应2帧第一图像和2帧第二图像，在ISO为1000时，对应3帧第一图像和3帧第二图像等。虽然上述示例中以相同帧数的第一图像和第二图像为例进行了说明，但是本领域技术人员可以理解的是，上述第一图像和第二图像的帧数也可以不同。

上述终端设备可以采用现有的计算方式，根据摄像头传感器输出的预览图像的亮度，确定第一图像的曝光参数和第二图像的曝光参数，对此不再赘述。其中，这里所说的曝光参数可以包括：ISO、曝光时间、帧率等。

S202、根据拍照参数，指示摄像头传感器交替并连续输出至少一帧第一图像和至少一帧第二图像。

具体的，上述终端设备在获取到拍照参数之后，可以根据该拍照参数，指示摄像头传感器交替并连续输出至少一帧第一图像和至少一帧第二图像。具体实现时，终端设备可以根据交替顺序，在摄像头传感器输出每帧图像之前，向摄像头传感器发送该帧图像对应的曝光参数，以及，该帧图像的尺寸，从而使得摄像头传感器可以正确的交替并连续输出每帧第一图像和第二图像。

由于摄像头传感器在输出多帧第一图像和多帧第二图像时，时间持续较长，使得摄像头传感器在输出的图像的过程中，可能会存在局部运动。因此，为了避免多帧第一图像和多帧第二图像之间的亮度不同，从而导致后续对多帧第一图像和多帧第二图像的处理比较困难，终端设备通过指示摄像头传感器采用交替并连续输出的方式，输出多帧第一图像和第二图像方式，可以减少多帧第一图像之间的相对局部运动，以及，减少多帧第二图像之间的相对局部运动。同时，通过指示摄像头传感器连续输出的方式，能够减少拍照时间，提升拍照速度，进而提高用户体验。

需要说明的是，由于第一图像的分辨率和第二图像的分辨率不同，因此，为了保持用户在使用终端设备拍照时，在屏幕上看到的画面一致，可以采用在屏幕上向用户显示每帧第一图像，不显示第二图像，提高了用户体验。

本领域技术人员可以理解的是，上述终端设备在执行步骤S201-S202时，可以通过软件来实现，也可以通过硬件来实现，还可以通过软件和硬件结合的方式实现。其中，这里所说的硬件例如可以为图像信号处理器(Image Signal Processing，ISP)等，这里所说的软件例如可以为：自动曝光(Automatic Exposure，AE)模块等。

本申请提供的图像处理方法，用户在使用终端设备在低照度下拍照时，终端设备可以根据摄像头传感器输出的预览图像，确定摄像头传感器的拍照参数，进而通过该拍照参数，指示摄像头传感器交替并连续输出的至少一帧第一图像和至少一帧第二图像，其中，第一图像主要用于提供当前拍摄场景的细节信息，第二图像主要用于提供当前拍摄场景的亮度信息，从而使得终端设备可以根据该至少一帧第一图像和至少一帧第二图像，进行图像融合处理，使得终端设备所得到的融合后的图像的亮度和清晰度均得到了提升，从而使得终端设备在将该融合后的图像呈现给用户时，可以使用户观看到清晰度和亮度较高的图像，提升了终端设备在低照度下的拍照效果，进而提高了用户体验。

进一步地，在上述实施例的基础上，本实施例涉及的是上述终端设备根据所述至少一帧第一图像和所述至少一帧第二图像，进行图像融合，得到融合后的图像的过程，则上述S102可以包括如下两种情况：

第一种情况：上述终端设备获取的是摄像头传感器交替并连续输出的一帧第一图像和一帧第二图像。

具体的，若上述终端设备只获取了摄像头传感器交替并连续输出的一帧第一图像和一帧第二图像，则上述终端设备可以直接对该一帧第一图像和一帧第二图像进行图像融合，以得到融合后的图像。可选的，在本申请的另一实现方式中，上述终端设备还可以先对该一帧第一图像和一帧第二图像进行格式转换(即去马赛克操作)，以将一帧第一图像从拜耳Bayer格式转换为YUV格式，得到一帧转换格式后的第一图像，并将该一帧第二图像从拜耳Bayer格式转换为YUV格式，得到一帧转换格式后的第二图像，进而对该一帧转换格式后的第一图像和一帧转换格式后的第二图像进行图像融合，得到融合后的图像等。

第二种情况：上述终端设备获取的是摄像头传感器交替并连续输出的多帧第一图像和多帧第二图像。

具体的，若上述终端设备获取的是摄像头传感器交替并连续输出的多帧第一图像和多帧第二图像，则上述终端设备可以直接对多帧第一图像和多帧第二图像进行图像融合。

可选的，终端设备还可以先对多帧第一图像进行时域降噪，得到第三图像，对多帧第二图像进行时域降噪，得到第四图像，进而对该第三图像和该第四图像进行图像融合，得到融合后的图像。由于摄像头传感器在低照度下的进光量较少，所以，摄像头传感器在低照度下输出的图像的噪声较大。因此，终端设备可以通过对摄像头传感器输出的多帧第一图像和多帧第一图像分别进行时域降噪的方式，即通过时域上不同帧间的像素平均操作的方式，可以降低图像的噪声，从而使得所得到的第三图像和第四图像的噪声较小，进而使得终端设备在对第三图像和第四图像进行图像融合所得到的融合后的图像的噪声较小。

在本申请的另一实现方式中，终端设备还可以先对该一帧第一图像和一帧第二图像进行格式转换，以将多帧第一图像从拜耳Bayer格式转换为YUV格式，得到多帧转换格式后的第一图像，并将多帧第二图像从Bayer格式转换为YUV格式，得到多帧转换格式后的第二图像。这样，终端设备可以通过对多帧转换格式后的第一图像进行时域降噪，得到第三图像，并对多帧转换格式后第二图像进行时域降噪，得到第四图像，进而对该第三图像和该第四图像进行图像融合，得到融合后的图像等。

图6为本申请提供的又一种图像处理方法的流程示意图。本实施例以第三图像和第四图像为例，介绍终端设备进行图像融合的过程。本领域技术人员可以理解的是，若终端设备获取的是一帧第一图像和一帧第二图像，则终端设备也可以采用如下方式对该一帧第一图像和一帧第二图像进行图像融合，其实现方式和实现原理类似，对此不再赘述。

本实施例中，第三图像为对多帧第一图像进行时域降噪后的图像，第四图像为对多帧第二图像进行时域降噪后的图像，因此，在图像融合过程中，第三图像主要用于提供当前拍摄场景的细节信息(即第一图像的高频分量)，第四图像主要用于提供当前拍摄场景的亮度信息(即第二图像的低频分量)。如图6所示，该方法包括：

S301、根据第四图像的尺寸，对第三图像进行下采样，得到下采样后的第三图像。

具体的，由于上述终端设备所获取到的第三图像为根据多帧第一图像进行时域降噪后所得到的图像，第四图像为根据多帧第二图像进行时域降噪后所得到的图像。因此，第三图像的尺寸与第一图像相同，第四图像的尺寸与第二图像相同，使得第三图像和第四图像的尺寸不同。为了能够将第三图像和第四图像进行曝光融合，终端设备在获取到上述第三图像和第四图像之后，可以根据第四图像的尺寸，对第三图像进行下采样，以缩小第三图像的尺寸，从而使得下采样后的第三图像的尺寸与第四图像的尺寸相同。

S302、将下采样后的第三图像和第四图像进行曝光融合，得到HDR图像。

具体的，终端设备在得到下采样后的第三图像之后，可以将具有相同尺寸的两帧图像(即下采样后的第三图像和第四图像)进行曝光融合。即，将清晰度较高的下采样后的第三图像与亮度较高的第四图像进行曝光融合。通过这种方式，可以将下采样后的第三图像的清晰度和第四图像的亮度融合在一帧图像上，从而使得终端设备在执行完曝光融合后所得到的高动态范围(High-Dynamic Range，HDR)图像整体的亮度得到提升。

其中，本实施例不限定上述终端设备将下采样后的第三图像和第四图像进行曝光融合的实现方式。例如：终端设备可以采用“以图像亮度作为权重计算参数”的曝光融合方式。作为一种可实施的方式，终端设备可以将图像亮度的中心值128作为基准，为下采样后的第三图像的每个像素点分配权重。其中，亮度低于128的像素点中，像素点的亮度越低，该像素点的权重越小；亮度高于128的像素点中，像素点的亮度越高，该像素点权重越小。同样的，终端设备可以采用上述方式，为第四图像中的每个像素点分配权重。然后，终端设备可以将下采样后的第三图像的每个像素点的像素值与该像素点的权重值相乘，得到处理后的第三图像。同样的，终端设备可以将第四图像的每个像素点的像素值与该像素点的权重值相乘，得到处理后的第四图像。最后，终端设备将处理后的第三图像和处理后的第四图像进行图像相加计算，即可得到HDR图像，至此就完成了曝光融合的过程。通过这种方式，可以通过亮度较高的第四图像中的像素点来提升下采样后的第三图像中较暗的像素点，并通过下采样后的第三图像的像素点弥补第四图像中过曝的像素点，从而使得终端设备所得到的HDR图像中既不会出现太暗的区域，也不会出现太亮的区域，进而使得HDR图像的亮度得到整体的提升。需要说明的是，上述权重值的取值范围例如可以在0至1之间，上述权重值与亮度的对应关系具体可以根据用户的需求确定。

S303、根据第三图像的尺寸，将HDR图像进行上采样，得到上采样后的HDR图像。

具体的，终端设备在将下采样后的第三图像和第四图像进行曝光融合，所得到HDR 图像的尺寸与第四图像的尺寸相同。因此，终端设备需要根据第三图像的尺寸，将HDR图像进行上采样，以放大HDR图像的尺寸，从而使得上采样后的HDR图像的尺寸与第三图像的尺寸相同。通过这种方式，可以使上采样后的HDR图像的尺寸，适配于，用户当前在终端设备上所选择的拍照模式对应的分辨率。

S304、将上采样后的HDR图像与第三图像的细节图像融合，得到融合后的图像。

具体的，上述终端设备在对第三图像进行下采样的过程中，由于下采样会丢失第三图像的高频分量(即当前拍摄场景的细节信息)，所以，下采样后的第三图像与原本的第三图像相比，下采样后第三图像的分辨率会降低。这样，在通过对下采样后的第三图像与第四图像进行曝光融合所得到的HDR图像的分辨率也会低于第三图像的分辨率，使得上采样后的HDR图像的清晰度仍然较低。

因此，终端设备在获取到上采样后的HDR图像之后，可以将上采样后的HDR图像与“包括第三图像的高频分量”的第三图像的细节图像进行融合，以将拍摄场景整体的细节信息回填至上采样后的HDR图像中，提高上采样后的HDR图像的清晰度。通过这种方式，使得终端所得到的融合后的图像的亮度和清晰度均得到了提升。这样，终端设备在将该融合后的图像呈现给用户时，可以使用户观看到清晰度和亮度较高的图像，提升了用户体验。

其中，本实施例不限定终端设备将上采样后的HDR图像与第三图像的细节图像融合的实现方式。例如：上述终端设备可以直接对上采样后的HDR图像与第三图像的细节图像进行图像相加计算，以得到融合后的图像。作为一种可实施的方式，上述终端设备还可以先确定摄像头传感器当前在低照度下的感光度(ISO)，进而根据该摄像头传感器的ISO，确定一个与该摄像头传感器ISO适配的增益系数。然后，终端设备可以将细节图像的每个像素点的像素值与增益系数相乘，以对细节图像进行增强，得到处理后的细节图像。最后，终端设备通过将处理后的细节图像与上采样后的HDR图像进行图像相加计算，得到融合后的图像。由于在进行融合之前，结合了摄像头传感器当前的ISO所对应的增益系数，对细节图像进行了增强，从而使得融合后的图像的锐度提升，进而提升了融合后的图像的清晰度。具体实现时，上述终端设备可以通过摄像头传感器当前预览的图像，确定摄像头传感器当前在低照度下的感光度。上述终端设备可以根据ISO与增益系数之间的映射关系，确定摄像头传感器的ISO对应的增益系数。其中，ISO与增益系数之间的映射关系具体可以根据实际情况设定。ISO与增益系数之间的映射关系例如可以为：在ISO小于或等于500时，增益系数可以为1.5；在ISO大于500且小于或等于1000时，增益系数可以为1.4；在ISO大于1000且小于或等于1500时，增益系数可以为1.3；在ISO大于1500且小于或等于2000时，增益系数可以为1.2，在ISO大于2000时，增益系数可以为1.1等。

其中，上述第三图像的细节图像可以由终端设备在执行S304之前，根据第三图像，获取的第三图像的细节图像。其中，本实施例不限定获取第三图像的细节图像的实现方式。例如，终端设备可以先对第三图像进行傅里叶变换，去除第三图像中的低频分量，保留第三图像的高频分量。然后，终端设备再对只保留高频分量的第三图像进行反傅里叶变换，就可以得到第三图像的细节图像。可选的，在本申请的一种实现方式中，终端设备还可以根据第三图像的尺寸，对下采样后的第三图像进行上采样，得到上采样后的第三图像。由于上采样后的第三图像比第三图像模糊，因此，终端设备通过对上采样后的第三图像与第三图像进行图像相减计算，即可得到第三图像的细节图像。

可选的，上述终端设备在将上采样后的HDR图像与第三图像的细节图像融合，得到融合后的图像之后，还可以对融合后的图像进行空域降噪，以进一步降低图像的噪声。可选的，终端设备可以通过非局部均值去噪算法对融合后的图像进行空域降噪，还可以采用现有技术中的方法对融合后的图像进行空域降噪，对此不再赘述。

本申请提供的图像处理方法，用户在使用终端设备在低照度下拍照时，终端设备通过对所获取的摄像头传感器交替并连续输出的多帧第一图像和第二图像进行时域降噪，得到主要用于提供当前拍摄场景的细节信息的第三图像，以及，主要用于提供拍摄场景的亮度信息的第四图像之后，可以使用该第三图像和第四图像进行图像融合处理，使得终端设备所得到的融合后的图像的亮度和清晰度均得到了提升，从而使得终端设备在将该融合后的图像呈现给用户时，可以使用户观看到清晰度和亮度较高的图像，提升了终端设备在低照度下的拍照效果，进而提高了用户体验。

图7为本申请提供的又一种图像处理方法的流程示意图。如图7所示，在上述S302之前，该方法还可以包括：

S401、以下采样后的第三图像为参考，对第四图像进行图像配准，得到图像配准后的第四图像。

具体的，在本实施例中，上述终端设备在对下采样后的第三图像和第四图像进行曝光融合之前，还可以先以下采样后的第三图像为参考，对第四图像进行图像配准，从而使下采样后的第三图像与第四图像中相同的特征对准。这样，终端设备在后续对下采样后的第三图像和第四图像进行图像融合时，可以准确的将相同的特征融合在一起，提高了图像融合的效果。

具体实现时，终端设备可以通过加速稳健特征(Speeded Up Robust Features，SURF)的配准方法，对第四图像进行图像配准。当然，终端设备还可以采用现有技术中的图像配准方法，对第四图像进行图像配准，对此不再赘述。

S402、根据下采样后的第三图像，对图像配准后的第四图像进行鬼影矫正，得到矫正后的第四图像。

具体的，终端设备在以下采样后的第三图像为参考，对第四图像进行图像配准，得到图像配准后的第四图像之后，还可以根据下采样后的第三图像，对图像配准后的第四图像进行鬼影矫正，以得到矫正后的第四图像。其中，这里所说的鬼影为在将下采样后的第三图像与图像配准后的第四图像进行曝光融合时，下采样后的第三图像与图像配准后的第四图像中移动的物体在融合后的图像中所形成重影。则在该实现方式下，上述终端设备可以将下采样后的第三图像与矫正后的第四图像进行曝光融合，得到HDR图像，从而使得所得到HDR图像中各物体的边缘清楚，无重影现象，进一步提高了HDR图像的清晰度。

其中，本实施例不限定终端设备根据下采样后的第三图像，对图像配准后的第四图像进行鬼影矫正的方式。可选的，终端设备可以先将图像配准后的第四图像的亮度降低至下采样后的第三图像的亮度，得到降低亮度后的第四图像。然后，终端设备对下采样后的第三图像和降低亮度后的第四图像进行图像求差计算，得到降低亮度后的第四图像的每个像素点对应的差异绝对值。此时，若某一像素点对应的差异绝对值大于预设阈值，则终端设备可以在图像配准后的第四图像中找到该像素点所在的位置，该位置即为图像配准后的第四图像的一个鬼影。通过这种方式，可以获取到图像配准后的第四图像的所有鬼影。在获取到图像配准后的第四图像的所有鬼影之后，终端设备可以根据图像配准后的第四图像的亮度，提升下采样后的第三图像的亮度，得到提升亮度后的第三图像。这样，终端设备可以使用提升亮度后的第三图像中的像素点替换图像配准后的第四图像的鬼影，以得到矫正后的第四图像。由于终端设备使用的是与图像配准的第四图像具有相同亮度的第三图像中的像素点来矫正鬼影，因此，所得到的矫正后的第四图像中仍然可以原有的亮度。

本申请提供的图像处理方法，用户在使用终端设备在低照度下拍照时，终端设备通过对所获取的摄像头传感器交替并连续输出的多帧第一图像和第二图像进行时域降噪，得到主要用于提供当前拍摄场景的细节信息的第三图像，以及，主要用于提供拍摄场景的亮度信息的第四图像之后，可以在对下采样后的第三图像和第四图像进行图像融合之前，先以下采样后的第三图像为基准，对第四图像进行图像配准和鬼影矫正，从而使得终端设备在使用进行图像配准和鬼影矫正后的第四图像与下采样后的第三图像进行图像融合时，图像融合的效果较好，进而使得终端设备所得到的融合后的图像的清晰度进一步得到了提升。

下面以两个示例，来对本申请提供的图像处理方法进行说明。

示例一、图8为本申请提供的又一种图像处理方法的流程示意图。在本实施例中，终端设备获取的是摄像头传感器交替并连续输出的多帧第一图像和第二图像。如图8所示，该方法可以包括：

S501、根据摄像头传感器输出的预览图像，确定摄像头传感器的拍照参数。

S502、根据拍照参数，指示摄像头传感器交替并连续输出多帧第一图像和多帧第二图像。

S503、获取摄像头传感器交替并连续输出的多帧第一图像和多帧第二图像。

S504、将多帧第一图像从Bayer格式转换为YUV格式，得到多帧转换格式后的第一图像。

具体的，现有的终端设备在执行拍照功能，所向用户呈现所拍摄的图像的格式大多为JPEG格式。现有技术中，受终端设备的芯片技术的限制(例如：带宽限制和处理速度限制等)，终端设备无法快速地将图像从Bayer格式直接转换成可以呈现给用户的JPEG格式，满足不了拍照过程的流畅需求。因此，现有的终端设备需要先将图像的格式从Bayer格式转换成YUV格式，然后再将YUV格式转换成JPEG格式。

对应到本实施例中，由于摄像头传感器输出的多帧第一图像和多帧第二图像均为Bayer格式的图像，因此，在执行本实施例的图像处理方法的过程中，需要对图像的格式进行转换，以从Bayer格式转换成YUV格式。该操作可以在对图像进行融合处理之后进行，也可以在对图像进行融合处理之前执行。若该操作可以在对图像进行融合处理之后进行，则该操作大多由终端设备的软件模块执行。若该操作可以在对图像进行融合处理之前进行，则该操作大多由终端设备的ISP执行。由于ISP的执行速率快于终端设备的软件模块，因此通过这种方式，可以提高终端设备拍照的效率。具体实现时，终端设备的ISP可以通过对多帧第一图像执行去马赛克操作的方式，将多帧第一图像从Bayer格式转换为YUV格式，得到多帧转换格式后的第一图像。

本领域技术人员可以理解的是，若后续终端设备的芯片技术可以支持将图像从Bayer格式实时直接转换成可以呈现给用户的JPEG格式，则在执行本申请所示的实施例的过程中，可以不用再执行将图像从Bayer格式转换成YUV格式的操作。

S505、将多帧第二图像从Bayer格式转换为YUV格式，得到多帧转换格式后的第二图像。

需要说明的是，步骤S505和步骤S504的执行可以不分先后顺序。

S506、对多帧转换格式后的第一图像进行时域降噪，得到第三图像。

具体的，由于摄像头传感器在低照度下的进光量较少，所以，摄像头传感器在低照度下输出的图像的噪声较大。因此，终端设备可以通过对摄像头传感器输出的多帧第一图像进行时域降噪的方式，即通过时域上不同帧间的像素平均操作的方式，可以降低第一图像的噪声，从而使得所得到的第一图像的噪声较小。具体实现时，终端设备可以采用现有的时域降噪的方式，对多帧转换格式后的第一图像进行时域降噪，例如：对多帧转换格式后的第一图像依次进行全局图像配准、局部鬼影检测、时域融合操作，得到第一图像，对此不再赘述。

S507、对多帧转换格式后的第二图像进行时域降噪，得到第四图像。

需要说明的是，步骤S506和步骤S507的执行可以不分先后顺序。

S508、根据第四图像的尺寸，对第三图像进行下采样，得到下采样后的第三图像。

S509、以下采样后的第三图像为参考，对第四图像进行图像配准，得到图像配准后的第四图像。

S510、根据下采样后的第三图像，对图像配准后的第四图像进行鬼影矫正，得到矫正后的第四图像。

S511、将下采样后的第三图像与矫正后的第四图像进行曝光融合，得到HDR图像。

S512、根据第三图像的尺寸，将HDR图像进行上采样，得到上采样后的HDR图像。

S513、根据第三图像，获取第三图像的细节图像。

S514、将上采样后的HDR图像与第三图像的细节图像融合，得到融合后的图像。

S515、对融合后的图像进行空域降噪，得到空域降噪后的图像。

至此，就完成了整个图像处理过程。通过这种方式，可以在用户使用终端设备在低照度下拍照时，终端设备通过执行上述图像处理过程，得到一个亮度较高、清晰度较高、噪声较小的图像，从而使得终端设备在将该该亮度较高、清晰度较高、噪声较小的图像呈现给用户时，可以使用户观看到清晰度和亮度较高的图像，提升了终端设备在低照度下的拍照效果，进而提高了用户体验。

图9为本申请示出的一种第一图像的示意图，图10为本申请示出的一种第二图像的示意图，图11为本申请示出的一种空域降噪后的图像的示意图。如图11所示，图11示出的是采用上述S501-S515步骤处理后所得到的图像，通过将图11与图9和图10对比可知，图11所示的空域降噪后的图像整体的亮度和清晰度均有大幅度的提升，整个图像中也不会出现过曝和/或过暗的区域。因此，终端设备在将该该亮度较高、清晰度较高、噪声较小的图像呈现给用户时，可以使用户观看到清晰度和亮度较高的图像，提升了终端设备在低照度下的拍照效果，进而提高了用户体验。本领域技术人员可以理解的是，上述图9至图11仅用于示例性的说明采用本申请所提供的图像处理方法后，图像的清晰度和亮度的提升效果，并不对所处理的图像的颜色和内容进行限定。

可选的，在本申请的另一实现方式中，为了进一步提升亮度，终端设备还可以在根据拍照参数，指示摄像头传感器交替并连续输出至少一帧第一图像和至少一帧第二图像的过程中，同时指示终端设备的补光灯开启，以通过补光进一步提升第一图像和第二图像的亮度。这样，在基于该第一图像和第二图像进行后续的图像处理后，所得到的空余降噪后的图像中的前景后景亮度都有提升，且不会出现局部过曝或者过暗问题，进一步提升了终端设备在低照度下的拍照效果。在该种实现方式下，由于摄像头传感器的进光量有所增加，因此，摄像头传感器输出的图像噪声会有降低，所以，可以采用指示摄像头传感器只输出一帧第一图像和一帧第二图像的方式，以省略上述示例中的时域降噪的过程。下述示例二以终端设备获取摄像头传感器交替并连续输出的一帧第一图像和一帧第二图像为例，对图像处理方法进行说明。

示例二、图12为本申请提供的又一种图像处理方法的流程示意图。在本实施例中，终端设备获取的是摄像头传感器交替并连续输出的一帧第一图像和一帧第二图像。如图12所示，该方法可以包括：

S601、根据摄像头传感器输出的预览图像，确定摄像头传感器的拍照参数。

S602、根据拍照参数，指示摄像头传感器交替并连续输出一帧第一图像和一帧第二图像。

S603、获取摄像头传感器交替并连续输出的一帧第一图像和一帧第二图像。

S604、将第一图像从Bayer格式转换为YUV格式，得到转换格式后的第一图像。

S605、将第二图像从Bayer格式转换为YUV格式，得到转换格式后的第二图像。

需要说明的是，步骤S605和步骤S604的执行可以不分先后顺序。

S606、根据转换格式后的第二图像的尺寸，对转换格式后的第一图像进行下采样，得到下采样后的第一图像。

S607、以下采样后的第一图像为参考，对转换格式后的第二图像进行图像配准，得到图像配准后的第二图像。

S608、根据下采样后的第一图像，对图像配准后的第二图像进行鬼影矫正，得到矫正后的第二图像。

S609、将下采样后的第一图像与矫正后的第二图像进行曝光融合，得到HDR图像。

S610、根据转换格式后的第一图像的尺寸，将HDR图像进行上采样，得到上采样后的HDR图像。

S611、根据转换格式后的第一图像，获取第一图像的细节图像。

S612、将上采样后的HDR图像与第一图像的细节图像融合，得到融合后的图像。

S613、对融合后的图像进行空域降噪，得到空域降噪后的图像。

至此，就完成了整个图像处理过程。

需要说明的是，本申请所提供的图像处理方法，不仅适用于终端设备采用前置摄像头传感器拍摄的应用场景，也适用于终端设备采用后置摄像头传感器拍摄的应用场景。同样的，本申请的方法还适用于终端设备采用双摄像头传感器拍摄的应用场景，在该应用场景下，终端设备可以通过对每个摄像头传感器输出的图像均采用S301-S315的步骤进行处理，最后，再采用现有的融合方式，将通过对两个摄像头传感器所输出的图像进行处理，分别得到的空域降噪后的图像再进行融合，以得到清晰度和亮度较高的图像。或者，终端设备可以只对双摄像头传感器中的其中一个摄像头传感器输出的图像采用S301-S315的步骤进行处理，而使用另一个摄像头传感器对图像进行特殊效果(例如：虚化等)处理，对此不再赘述。

图13为本申请提供的一种终端设备的结构示意图。如图13所示，上述终端设备可以包括：

获取模块11，用于获取摄像头传感器交替并连续输出的至少一帧第一图像和至少一帧第二图像；其中，第一图像的分辨率与当前拍照模式所对应的分辨率相同，第一图像的分辨率为第二图像的分辨率的N倍，N为大于1的整数；摄像头传感器采用第一曝光参数输出每帧第一图像，摄像头传感器采用第二曝光参数输出每帧第二图像，第一曝光参数大于第二曝光参数；示例性的，第一图像例如可以为全尺寸图像。

融合模块12，用于根据至少一帧第一图像和至少一帧第二图像，进行图像融合，得到融合后的图像。

本申请提供的终端设备，可以执行上述方法实施例，其实现原理和技术效果类似，在此不再赘述。

图14为本申请提供的另一种终端设备的结构示意图。如图14所示，在上述图13所示框图的基础上，上述终端设备，还包括：

确定模块13，用于在获取模块11获取摄像头传感器交替并连续输出的至少一帧第一图像和至少一帧第二图像之前，根据摄像头传感器输出的预览图像，确定摄像头传感器的拍照参数；拍照参数包括：第一图像的尺寸、第一图像的帧数、第二图像的帧数、第一图像的曝光参数、第二图像的曝光参数、第一图像和第二图像的交替顺序；

指示模块14，用于根据拍照参数，指示摄像头传感器交替并连续输出至少一帧第一图像和至少一帧第二图像。

若至少一帧第一图像包括：一帧第一图像，至少一帧第二图像包括：一帧第二图像；则融合模块12，可以具体用于对第一图像和第二图像进行图像融合，得到融合后的图像。

则在本申请的一种实现方式中，图15为本申请提供的又一种终端设备的结构示意图。如图15所示，在上述图13所示框图的基础上，上述终端设备，还包括：

第一格式转换模块15，用于在融合模块12对第一图像和第二图像进行图像融合，得到融合后的图像之前，将第一图像从拜耳Bayer格式转换为YUV格式，得到转换格式后的第一图像，并将第二图像从拜耳Bayer格式转换为YUV格式，得到转换格式后的第二图像；

则在该实现方式下，融合模块12，具体用于对转换格式后的第一图像和转换格式后的第二图像进行图像融合，得到融合后的图像。

若至少一帧第一图像包括：多帧第一图像，至少一帧第二图像包括：多帧第二图像；则融合模块12，可以具体用于对多帧第一图像进行时域降噪，得到第三图像，并对多帧第二图像进行时域降噪，得到第四图像；对第三图像和第四图像进行图像融合，得到融合后的图像。则在本申请的一种实现方式中，图16为本申请提供的又一种终端设备的结构示意图。如图16所示，在上述图13所示框图的基础上，上述终端设备，还包括：第二格式转换模块16，用于在融合模块12对多帧第一图像进行时域降噪，得到第三图像，并对多帧第二图像进行时域降噪，得到第四图像之前，将多帧第一图像从拜耳Bayer格式转换为YUV格式，得到多帧转换格式后的第一图像，并将多帧第二图像从Bayer格式转换为YUV格式，得到多帧转换格式后的第二图像；

融合模块12，具体用于对多帧转换格式后的第一图像进行时域降噪，得到第三图像，并对多帧转换格式后第二图像进行时域降噪，得到第四图像。

图17为本申请提供的又一种终端设备的结构示意图。在本实施例中，融合模块12，可以具体用于对多帧第一图像进行时域降噪，得到第三图像，并对多帧第二图像进行时域降噪，得到第四图像；对第三图像和第四图像进行图像融合，得到融合后的图像。则如图17所示，在上述图13所示框图的基础上，上述融合模块12，可以包括：

下采样单元121，用于根据第四图像的尺寸，对第三图像进行下采样，得到下采样后的第三图像；下采样后的第三图像的尺寸与第四图像的尺寸相同

曝光融合单元122，用于将下采样后的第三图像和第四图像进行曝光融合，得到高动态范围HDR图像；

上采样单元123，用于根据第三图像的尺寸，将HDR图像进行上采样，得到上采样后的HDR图像；

融合单元124，用于将上采样后的HDR图像与第三图像的细节图像融合，得到融合后的图像；其中，第三图像的细节图像包括第三图像的高频分量。示例性的，融合单元124，可以具体用于确定摄像头传感器的感光度ISO；根据摄像头传感器的ISO，确定增益系数；将第三图像的细节图像的每个像素点的像素值与增益系数相乘，得到处理后的细节图像；将处理后的细节图像与上采样后的HDR图像进行图像相加计算，得到融合后的图像。

继续参照图17，可选的，融合模块12，还可以包括：

获取单元125，用于在融合单元124将上采样后的HDR图像与第三图像的细节图像融合，得到融合后的图像之前，根据第三图像，获取第三图像的细节图像。示例性的，获取单元125，可以具体用于根据第三图像的尺寸，对下采样后的第三图像进行上采样，得到上采样后的第三图像；对上采样后的第三图像与第三图像进行图像相减计算，得到第三图像的细节图像。

继续参照图17，可选的，融合模块12，还可以包括：

图像配准单元126，用于曝光融合单元122将下采样后的第三图像和第四图像进行曝光融合，得到高动态范围HDR图像之前，以下采样后的第三图像为参考，对第四图像进行图像配准，得到图像配准后的第四图像；

鬼影矫正单元127，用于根据下采样后的第三图像，对图像配准后的第四图像进行鬼影矫正，得到矫正后的第四图像；示例性的，鬼影矫正单元127，可以具体用于将图像配准后的第四图像的亮度降低至下采样后的第三图像的亮度，得到降低亮度后的第四图像；对下采样后的第三图像和降低亮度后的第四图像进行图像求差计算，得到降低亮度后的第四图像的每个像素点对应的差异绝对值；将差异绝对值大于预设阈值的像素点作为图像配准后的第四图像的鬼影；根据图像配准后的第四图像的亮度，提升下采样后的第三图像的亮度，得到提升亮度后的第三图像；使用提升亮度后的第三图像中的像素点替换图像配准后的第四图像的鬼影，得到矫正后的第四图像。

则曝光融合单元122，具体用于将下采样后的第三图像与矫正后的第四图像进行曝光融合，得到HDR图像。

继续参照图17，可选的，上述终端设备还可以包括：

空域降噪模块17，用于在融合单元124将上采样后的HDR图像与第三图像的细节图像融合，得到融合后的图像之后，对融合后的图像进行空域降噪，得到空域降噪后的图像。

图18为本申请提供的又一种终端设备的结构示意图。如图18所示，该终端设备可以包括：处理器21(例如CPU)和存储器22；存储器22可能包含高速RAM存储器，也可能还包括非易失性存储器NVM，例如至少一个磁盘存储器，存储器22中可以存储各种指令，以用于完成各种处理功能以及实现本申请的方法步骤。可选的，本申请涉及的终端设备还可以包括：接收器23、发送器24、电源25、通信总线26以及通信端口27。接收器23和发送器24可以集成在终端设备的收发信机中，也可以为终端设备上独立的收发天线。通信总线26用于实现元件之间的通信连接。上述通信端口27用于实现终端设备与其他外设之间进行连接通信。

在本申请中，上述存储器22用于存储计算机可执行程序代码，程序代码包括指令；当处理器21执行指令时，指令使终端设备执行上述方法实施例，其实现原理和技术效果类似，在此不再赘述。

正如上述实施例，本申请涉及的终端设备可以是手机、平板电脑等无线终端，因此，以终端设备为手机为例：图19为申请提供的终端设备为手机时的结构框图。参考图19，该手机可以包括：射频(Radio Frequency，RF)电路1110、存储器1120、输入单元1130、显示单元1140、传感器1150、音频电路1160、无线保真(wireless fidelity，WiFi)模块1170、处理器1180、以及电源1190等部件。本领域技术人员可以理解，图19中示出的手机结构并不构成对手机的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。

下面结合图19对手机的各个构成部件进行具体的介绍：

RF电路1110可用于收发信息或通话过程中，信号的接收和发送，例如，将基站的下行信息接收后，给处理器1180处理；另外，将上行的数据发送给基站。通常，RF电路包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器(Low Noise Amplifier，LNA)、双工器等。此外，RF电路1110还可以通过无线通信与网络和其他设备通信。上述无线通信可以使用任一通信标准或协议，包括但不限于全球移动通讯系统(Global System of Mobile communication，GSM)、通用分组无线服务(General Packet Radio Service，GPRS)、码分多址(Code Division Multiple Access，CDMA)、宽带码分多址(Wideband Code Division Multiple Access,WCDMA)、长期演进(Long Term Evolution,LTE))、电子邮件、短消息服务(Short Messaging Service，SMS)等。

存储器1120可用于存储软件程序以及模块，处理器1180通过运行存储在存储器1120的软件程序以及模块，从而执行手机的各种功能应用以及数据处理。存储器1120可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等；存储数据区可存储根据手机的使用所创建的数据(比如音频数据、电话本等)等。此外，存储器1120可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。

输入单元1130可用于接收输入的数字或字符信息，以及产生与手机的用户设置以及功能控制有关的键信号输入。具体地，输入单元1130可包括触控面板1131以及其他输入设备1132。触控面板1131，也称为触摸屏，可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触控面板1131上或在触控面板1131附近的操作)，并根据预先设定的程式驱动相应的连接装置。可选的，触控面板1131可包括触摸检测装置和触摸控制器两个部分。其中，触摸检测装置检测用户的触摸方位，并检测触摸操作带来的信号，将信号传送给触摸控制器；触摸控制器从触摸检测装置上接收触摸信息，并将它转换成触点坐标，再送给处理器1180，并能接收处理器1180发来的命令并加以执行。此外，可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触控面板1131。除了触控面板1131，输入单元1130还可以包括其他输入设备1132。具体地，其他输入设备1132可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆等中的一种或多种。

显示单元1140可用于显示由用户输入的信息或提供给用户的信息以及手机的各种菜单。显示单元1140可包括显示面板1141，可选的，可以采用液晶显示器(Liquid Crystal Display，LCD)、有机发光二极管(Organic Light-Emitting Diode,OLED)等形式来配置显示面板1141。进一步的，触控面板1131可覆盖于显示面板1141之上，当触控面板1131检测到在其上或附近的触摸操作后，传送给处理器1180以确定触摸事件的类型，随后处理器1180根据触摸事件的类型在显示面板1141上提供相应的视觉输出。虽然在图10中，触控面板1131与显示面板1141是作为两个独立的部件来实现手机的输入和输入功能，但是在某些实施例中，可以将触控面板1131与显示面板1141集成而实现手机的输入和输出功能。

手机还可包括至少一种传感器1150，比如光传感器、运动传感器以及其他传感器。具体地，光传感器可包括环境光传感器及接近传感器，其中，环境光传感器可根据环境光线的明暗来调节显示面板1141的亮度，光传感器可在手机移动到耳边时，关闭显示面板1141和/或背光。作为运动传感器的一种，加速度传感器可检测各个方向上(一般为三轴)加速度的大小，静止时可检测出重力的大小及方向，可用于识别手机姿态的应用(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等；至于手机还可配置的陀螺仪、气压计、湿度计、温度计、红外线传感器等其他传感器，在此不再赘述。

音频电路1160、扬声器1161以及传声器1162可提供用户与手机之间的音频接口。音频电路1160可将接收到的音频数据转换后的电信号，传输到扬声器1161，由扬声器1161转换为声音信号输出；另一方面，传声器1162将收集的声音信号转换为电信号，由音频电路1160接收后转换为音频数据，再将音频数据输出处理器1180处理后，经RF电路1110以发送给比如另一手机，或者将音频数据输出至存储器1120以便进一步处理。

WiFi属于短距离无线传输技术，手机通过WiFi模块1170可以帮助用户收发电子邮件、浏览网页和访问流式媒体等，它为用户提供了无线的宽带互联网访问。虽然图19示出了WiFi模块1170，但是可以理解的是，其并不属于手机的必须构成，完全可以根据需要在不改变本申请的本质的范围内而省略。

处理器1180是手机的控制中心，利用各种接口和线路连接整个手机的各个部分，通过运行或执行存储在存储器1120内的软件程序和/或模块，以及调用存储在存储器1120内的数据，执行手机的各种功能和处理数据，从而对手机进行整体监控。可选的，处理器1180可包括一个或多个处理单元；例如，处理器1180可集成应用处理器和调制解调处理器，其中，应用处理器主要处理操作系统、用户界面和应用程序等，调制解调处理器主要处理无线通信。可以理解的是，上述调制解调处理器也可以不集成到处理器1180中。

手机还包括给各个部件供电的电源1190(比如电池)，可选的，电源可以通过电源管理系统与处理器1180逻辑相连，从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。

手机还可以包括摄像头1200，该摄像头可以为前置摄像头，也可以为后置摄像头。尽管未示出，手机还可以包括蓝牙模块、GPS模块等，在此不再赘述。

在本申请中，该手机所包括的处理器1180可以用于执行上述图像处理方法实施例，其实现原理和技术效果类似，在此不再赘述。

在上述实施例中，可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时，可以全部或部分地以计算机程序产品的形式实现。计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行计算机程序指令时，全部或部分地产生按照本发明实施例的流程或功能。计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。计算机指令可以存储在计算机可读存储介质中，或者从一个计算机可读存储介质向另一个计算机可读存储介质传输，例如，计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(DSL))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。可用介质可以是磁性介质，(例如，软盘、硬盘、磁带)、光介质(例如，DVD)、或者半导体介质(例如固态硬盘Solid State Disk(SSD))等。

Claims

一种图像处理方法，其特征在于，所述方法包括：

获取摄像头传感器交替并连续输出的至少一帧第一图像和至少一帧第二图像；其中，所述第一图像的分辨率与当前拍照模式所对应的分辨率相同，所述第一图像的分辨率为所述第二图像的分辨率的N倍，所述N为大于1的整数；所述摄像头传感器采用第一曝光参数输出每帧第一图像，所述摄像头传感器采用第二曝光参数输出每帧第二图像，所述第一曝光参数大于所述第二曝光参数；

根据所述至少一帧第一图像和所述至少一帧第二图像，进行图像融合，得到融合后的图像。
根据权利要求1所述的方法，其特征在于，所述获取摄像头传感器交替输出的至少一帧第一图像和至少一帧第二图像之前，所述方法还包括：

根据所述摄像头传感器输出的预览图像，确定摄像头传感器的拍照参数；所述拍照参数包括：所述第一图像的尺寸、所述第一图像的帧数、所述第二图像的帧数、所述第一图像的曝光参数、所述第二图像的曝光参数、所述第一图像和第二图像的交替顺序；

根据所述拍照参数，指示所述摄像头传感器交替并连续输出至少一帧第一图像和至少一帧第二图像。
根据权利要求1所述的方法，其特征在于，所述至少一帧第一图像包括：一帧第一图像，所述至少一帧第二图像包括：一帧第二图像；

则所述根据所述至少一帧第一图像和所述至少一帧第二图像进行图像融合，得到融合后的图像，包括：

对第一图像和第二图像进行图像融合，得到所述融合后的图像。
根据权利要求3所述的方法，其特征在于，所述对第一图像和第二图像进行图像融合，得到所述融合后的图像之前，所述方法还包括：

将所述第一图像从拜耳Bayer格式转换为YUV格式，得到转换格式后的第一图像，并将所述第二图像从拜耳Bayer格式转换为YUV格式，得到转换格式后的第二图像；

所述对第一图像和第二图像进行图像融合，得到所述融合后的图像，包括：

对所述转换格式后的第一图像和所述转换格式后的第二图像进行图像融合，得到所述融合后的图像。
根据权利要求1所述的方法，其特征在于，所述至少一帧第一图像包括：多帧第一图像，所述至少一帧第二图像包括：多帧第二图像；

则所述根据所述至少一帧第一图像和所述至少一帧第二图像进行图像融合，得到融合后的图像，包括：

对所述多帧第一图像进行时域降噪，得到第三图像，并对所述多帧第二图像进行时域降噪，得到第四图像；

对所述第三图像和所述第四图像进行图像融合，得到所述融合后的图像。
根据权利要求5所述的方法，其特征在于，所述对所述多帧第一图像进行时域降噪，得到第三图像，并对所述多帧第二图像进行时域降噪，得到第四图像之前，还包括：

将所述多帧第一图像从拜耳Bayer格式转换为YUV格式，得到多帧转换格式后的第一图像，并将所述多帧第二图像从Bayer格式转换为YUV格式，得到多帧转换格式后的第二图像；

所述对所述多帧第一图像进行时域降噪，得到第三图像，并对所述多帧第二图像进行时域降噪，得到第四图像，包括：

对所述多帧转换格式后的第一图像进行时域降噪，得到所述第三图像，并对所述多帧转换格式后第二图像进行时域降噪，得到第四图像。
根据权利要求5所述的方法，其特征在于，所述对所述第三图像和所述第四图像进行图像融合，得到所述融合后的图像，包括：

根据所述第四图像的尺寸，对所述第三图像进行下采样，得到下采样后的第三图像；所述下采样后的第三图像的尺寸与所述第四图像的尺寸相同；

将所述下采样后的第三图像和所述第四图像进行曝光融合，得到高动态范围HDR图像；

根据所述第三图像的尺寸，将所述HDR图像进行上采样，得到上采样后的HDR图像；

将所述上采样后的HDR图像与所述第三图像的细节图像融合，得到融合后的图像；其中，所述第三图像的细节图像包括所述第三图像的高频分量。
根据权利要求7所述的方法，其特征在于，所述将所述上采样后的HDR图像与所述第三图像的细节图像融合，得到融合后的图像之前，所述方法还包括：

根据所述第三图像，获取所述第三图像的细节图像。
根据权利要求8所述的方法，其特征在于，所述根据所述第三图像，获取所述第三图像的细节图像，包括：

根据所述第三图像的尺寸，对所述下采样后的第三图像进行上采样，得到上采样后的第三图像；

对所述上采样后的第三图像与所述第三图像进行图像相减计算，得到所述第三图像的细节图像。
根据权利要求7所述的方法，其特征在于，所述将所述下采样后的第三图像和所述第四图像进行曝光融合，得到高动态范围HDR图像之前，所述方法还包括：

以所述下采样后的第三图像为参考，对所述第四图像进行图像配准，得到图像配准后的第四图像；

根据所述下采样后的第三图像，对所述图像配准后的第四图像进行鬼影矫正，得到矫正后的第四图像；

所述将所述下采样后的第三图像和所述第四图像进行曝光融合，得到高动态范围HDR图像，包括：

将所述下采样后的第三图像与所述矫正后的第四图像进行曝光融合，得到所述HDR图像。
根据权利要求10所述的方法，其特征在于，所述根据所述下采样后的第三图像，对所述图像配准后的第四图像进行鬼影矫正，得到矫正后的第四图像，包括：

将图像配准后的所述第四图像的亮度降低至所述下采样后的第三图像的亮度，得到降低亮度后的第四图像；

对所述下采样后的第三图像和所述降低亮度后的第四图像进行图像求差计算，得到所述降低亮度后的第四图像的每个像素点对应的差异绝对值；

将差异绝对值大于预设阈值的像素点作为所述图像配准后的第四图像的鬼影；

根据所述图像配准后的第四图像的亮度，提升所述下采样后的第三图像的亮度，得到提升亮度后的第三图像；

使用所述提升亮度后的第三图像中的像素点替换所述图像配准后的第四图像的鬼影，得到所述矫正后的第四图像。
根据权利要求7所述的方法，其特征在于，所述将所述上采样后的HDR图像与所述第三图像的细节图像融合，得到融合后的图像，包括：

确定所述摄像头传感器的感光度ISO；

根据所述摄像头传感器的ISO，确定增益系数；

将所述第三图像的细节图像的每个像素点的像素值与所述增益系数相乘，得到处理后的细节图像；

将所述处理后的细节图像与所述上采样后的HDR图像进行图像相加计算，得到融合后的图像。
根据权利要求7-12任一项所述的方法，其特征在于，所述将所述上采样后的HDR图像与所述第三图像的细节图像融合，得到融合后的图像之后，所述方法还包括：

对所述融合后的图像进行空域降噪，得到空域降噪后的图像。
根据权利要求1-13任一项所述的方法，其特征在于，所述第一图像为全尺寸图像。
一种终端设备，其特征在于，所述终端设备，包括：

获取模块，用于获取摄像头传感器交替并连续输出的至少一帧第一图像和至少一帧第二图像；其中，所述第一图像的分辨率与当前拍照模式所对应的分辨率相同，所述第一图像的分辨率为所述第二图像的分辨率的N倍，所述N为大于1的整数；所述摄像头传感器采用第一曝光参数输出每帧第一图像，所述摄像头传感器采用第二曝光参数输出每帧第二图像，所述第一曝光参数大于所述第二曝光参数；

融合模块，用于根据所述至少一帧第一图像和所述至少一帧第二图像，进行图像融合，得到融合后的图像。
根据权利要求15所述的终端设备，其特征在于，所述终端设备，还包括：

确定模块，用于在所述获取模块获取摄像头传感器交替并连续输出的至少一帧第一图像和至少一帧第二图像之前，根据所述摄像头传感器输出的预览图像，确定摄像头传感器的拍照参数；所述拍照参数包括：所述第一图像的尺寸、所述第一图像的帧数、所述第二图像的帧数、所述第一图像的曝光参数、所述第二图像的曝光参数、所述第一图像和第二图像的交替顺序；

指示模块，用于根据所述拍照参数，指示所述摄像头传感器交替并连续输出至少一帧第一图像和至少一帧第二图像。
根据权利要求15所述的终端设备，其特征在于，所述至少一帧第一图像包括：一帧第一图像，所述至少一帧第二图像包括：一帧第二图像；

所述融合模块，具体用于对第一图像和第二图像进行图像融合，得到所述融合后的图像。
根据权利要求17所述的终端设备，其特征在于，所述终端设备，还包括：

第一格式转换模块，用于在所述融合模块对第一图像和第二图像进行图像融合，得到所述融合后的图像之前，将所述第一图像从拜耳Bayer格式转换为YUV格式，得到转换格式后的第一图像，并将所述第二图像从拜耳Bayer格式转换为YUV格式，得到转换格式后的第二图像；

所述融合模块，具体用于对所述转换格式后的第一图像和所述转换格式后的第二图像进行图像融合，得到所述融合后的图像。
根据权利要求15所述的终端设备，其特征在于，所述至少一帧第一图像包括：多帧第一图像，所述至少一帧第二图像包括：多帧第二图像；

所述融合模块，具体用于对所述多帧第一图像进行时域降噪，得到第三图像，并对所述多帧第二图像进行时域降噪，得到第四图像；对所述第三图像和所述第四图像进行图像融合，得到所述融合后的图像。
根据权利要求19所述的终端设备，其特征在于，所述终端设备，还包括：

第二格式转换模块，用于在所述融合模块对所述多帧第一图像进行时域降噪，得到第三图像，并对所述多帧第二图像进行时域降噪，得到第四图像之前，将所述多帧第一图像从拜耳Bayer格式转换为YUV格式，得到多帧转换格式后的第一图像，并将所述多帧第二图像从Bayer格式转换为YUV格式，得到多帧转换格式后的第二图像；

所述融合模块，具体用于对所述多帧转换格式后的第一图像进行时域降噪，得到所述第三图像，并对所述多帧转换格式后第二图像进行时域降噪，得到第四图像。
根据权利要求19所述的终端设备，其特征在于，所述融合模块，包括：

下采样单元，用于根据所述第四图像的尺寸，对所述第三图像进行下采样，得到下采样后的第三图像；所述下采样后的第三图像的尺寸与所述第四图像的尺寸相同；

曝光融合单元，用于将所述下采样后的第三图像和所述第四图像进行曝光融合，得到高动态范围HDR图像；

上采样单元，用于根据所述第三图像的尺寸，将所述HDR图像进行上采样，得到上采样后的HDR图像；

融合单元，用于将所述上采样后的HDR图像与所述第三图像的细节图像融合，得到融合后的图像；其中，所述第三图像的细节图像包括所述第三图像的高频分量。
根据权利要求21所述的终端设备，其特征在于，所述融合模块，还包括：

获取单元，用于在所述融合单元将所述上采样后的HDR图像与所述第三图像的细节图像融合，得到融合后的图像之前，根据所述第三图像，获取所述第三图像的细节图像。
根据权利要求22所述的终端设备，其特征在于，

所述获取单元，具体用于根据所述第三图像的尺寸，对所述下采样后的第三图像进行上采样，得到上采样后的第三图像；对所述上采样后的第三图像与所述第三图像进行图像相减计算，得到所述第三图像的细节图像。
根据权利要求21所述的终端设备，其特征在于，所述融合模块，还包括：

图像配准单元，用于所述曝光融合单元将所述下采样后的第三图像和所述第四图像进行曝光融合，得到高动态范围HDR图像之前，以所述下采样后的第三图像为参考，对所述第四图像进行图像配准，得到图像配准后的第四图像；

鬼影矫正单元，用于根据所述下采样后的第三图像，对所述图像配准后的第四图像进行鬼影矫正，得到矫正后的第四图像；

所述曝光融合单元，具体用于将所述下采样后的第三图像与所述矫正后的第四图像进行曝光融合，得到所述HDR图像。
根据权利要求24所述的终端设备，其特征在于，

所述鬼影矫正单元，具体用于将图像配准后的所述第四图像的亮度降低至所述下采样后的第三图像的亮度，得到降低亮度后的第四图像；对所述下采样后的第三图像和所述降低亮度后的第四图像进行图像求差计算，得到所述降低亮度后的第四图像的每个像素点对应的差异绝对值；将差异绝对值大于预设阈值的像素点作为所述图像配准后的第四图像的鬼影；根据所述图像配准后的第四图像的亮度，提升所述下采样后的第三图像的亮度，得到提升亮度后的第三图像；使用所述提升亮度后的第三图像中的像素点替换所述图像配准后的第四图像的鬼影，得到所述矫正后的第四图像。
根据权利要求21所述的终端设备，其特征在于，

所述融合单元，具体用于确定所述摄像头传感器的感光度ISO；根据所述摄像头传感器的ISO，确定增益系数；将所述第三图像的细节图像的每个像素点的像素值与所述增益系数相乘，得到处理后的细节图像；将所述处理后的细节图像与所述上采样后的HDR图像进行图像相加计算，得到融合后的图像。
根据权利要求21-26任一项所述的终端设备，其特征在于，所述终端设备还包括：

空域降噪模块，用于在所述融合单元将所述上采样后的HDR图像与所述第三图像的细节图像融合，得到融合后的图像之后，对所述融合后的图像进行空域降噪，得到空域降噪后的图像。
根据权利要求15-27任一项所述的终端设备，其特征在于，所述第一图像为全尺寸图像。
一种终端设备，其特征在于，所述终端设备包括：处理器、存储器；

其中，所述存储器用于存储计算机可执行程序代码，所述程序代码包括指令；当所述处理器执行所述指令时，所述指令使所述终端设备执行如权利要求1-14任一项所述的图像处理方法。