CN108280817B - 一种图像处理方法及移动终端 - Google Patents

Abstract

本发明提供了一种图像处理方法及移动终端，其中图像处理方法包括：获取摄像头采集的第一图像数据和第二图像数据；根据第一图像数据和第二图像数据，进行图像合成；其中，第一图像数据为摄像头采集的光信号转换为数字信号后的数据，第二图像数据为经第一图像数据进行图像信号处理后的数据。本发明实施例在进行图像合成时，根据不同的处理流程采用对应类型的数据执行操作过程，可以结合第一图像数据和第二图像数据的优点，实现在保证图像处理效果的基础上，提高处理速度。

Description

一种图像处理方法及移动终端

技术领域

本发明实施例涉及通信技术领域，尤其涉及一种图像处理方法及移动终端。

背景技术

现有的HDR(High-Dynamic Range，高动态范围图像)技术大多是基于单摄像头的多帧合成技术，在进行多帧合成的时候要么根据YUV(颜色编码方法)HDR算法使用YUV数据进行合成，要么根据RAW(RAW Image Format，未经处理和压缩的图片格式)HDR算法使用RAW数据进行合成。

RAW数据就是CMOS(Complementary Metal-Oxide Semiconductor，互补金属氧化物半导体)或者CCD(charge coupled device，电荷耦合元件)图像感应器将捕捉到的光源信号转化为数字信号的原始数据，使用RAW数据进行HDR处理的明显好处就是可以得到最好的HDR效果，因为RAW数据中有最丰富的真实图像信息。但是缺点就是RAW HDR算法计算量极大，处理速度较慢。

YUV数据是RAW数据经过ISP(Image Signal Processor，图像处理器)处理之后的图像数据，使用YUV数据进行HDR处理的好处是有较快的处理速度。但是因为数据已经过处理，会损失一些真实图像的信息，处理后的结果没有RAW数据的结果好。

目前图像处理技术存在的缺陷包括：使用RAW数据进行图像处理时计算量大，处理速度较慢；使用YUV数据进行图像处理时处理的效果较RAW数据差，单纯使用两种数据中的任意一种，无法兼顾处理速度和效果。

发明内容

本发明实施例提供一种图像处理方法及移动终端，以解决现有技术中的图像处理技术存在计算量大，处理速度较慢或者图像处理效果不佳的问题。

第一方面，本发明实施例提供一种图像处理方法，包括：

获取摄像头采集的第一图像数据和第二图像数据；

根据第一图像数据和第二图像数据，进行图像合成；

其中，第一图像数据为摄像头采集的光信号转换为数字信号后的数据，第二图像数据为经第一图像数据进行图像信号处理后的数据。

第二方面，本发明实施例提供一种移动终端，包括：

获取模块，用于获取摄像头采集的第一图像数据和第二图像数据；

合成模块，用于根据第一图像数据和第二图像数据，进行图像合成；

其中，第一图像数据为摄像头采集的光信号转换为数字信号后的数据，第二图像数据为经第一图像数据进行图像信号处理后的数据。

第三方面，本发明实施例还提供一种移动终端，包括处理器、存储器及存储在存储器上并可在处理器上运行的计算机程序，计算机程序被处理器执行时实现上述的图像处理方法的步骤。

第四方面，本发明实施例提供一种计算机可读存储介质，计算机可读存储介质上存储计算机程序，计算机程序被处理器执行时实现上述的图像处理方法的步骤。

在本发明实施例中，通过获取拍摄图像时采集的光信号转换为数字信号后的第一图像数据以及将第一图像数据进行图像信号处理后的第二图像数据之后，根据第一图像数据和第二图像数据进行图像合成，可以实现针对不同的处理流程采用对应类型的数据执行操作过程，以结合第一图像数据和第二图像数据的优点，在保证图像处理效果的基础上，提高处理速度。

附图说明

图1表示本发明实施例的图像处理方法示意图之一；

图2表示本发明实施例的图像处理方法示意图之二；

图3表示本发明实施例的图像处理方法示意图之三；

图4a表示本发明实施例移动终端示意图一；

图4b表示本发明实施例移动终端示意图二；

图5表示本发明实施例移动终端硬件结构示意图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

本发明实施例提供一种图像处理方法，如图1所示，包括：

步骤101、获取摄像头采集的第一图像数据和第二图像数据。

移动终端首先需要获取在拍摄图像时采集的第一图像数据和第二图像数据，其中第一图像数据为摄像头采集的光信号转换为数字信号后的数据，第二图像数据为经第一图像数据进行图像信号处理后的数据。通过采用第一图像数据进行图像处理，可以保证好的图像处理效果，通过采用第二图像数据进行图像处理，可提升图像处理速度。本发明实施例中的第一图像数据为RAW数据；第二图像数据为YUV数据。

上述过程，通过获取两种图像数据，可以在后续处理过程中结合第一图像数据和第二图像数据的优点，保证图像的处理效果并提升处理速度。

在获取摄像头采集的第一图像数据和第二图像数据之后，还包括：将摄像头采集的每帧图像的第一图像数据分别存储至缓存器内；根据相同的帧标识，将同一帧图像的第二图像数据存储至第一图像数据所对应的缓存器内，并建立同一帧图像的第一图像数据与第二图像数据的对应关系。

在获取每帧图像的第一图像数据和第二图像数据之后，需要对第一图像数据和第二图像数据进行存储，并根据帧标识建立第一图像数据和第二图像数据的对应关系，避免后续选用第一图像数据和第二图像数据时，出现所选用的第一图像数据和第二图像数据的来源属于不同帧的情况。

在进行数据存储以及建立相同帧的第一图像数据和第二图像数据的对应关系时，需要将所获取的每一帧图像的第一图像数据分别存储至缓存器内，即一帧图像对应于一个缓存器。在将每一帧图像的第一图像数据进行存储之后，根据相同的帧标识，将第二图像数据存储至对应的缓存器内。在实现对第一图像数据和第二图像数据的存储之后，可以形成第一图像数据和第二图像数据的对应关系，进而实现第一图像数据和第二图像数据的绑定。其中在进行数据缓存以及数据绑定时，需要针对每一帧图像都进行此操作。

通过进行数据缓存并形成相同帧的第一图像数据和第二图像数据的对应关系，可以保证后续图像合成时选用相同帧图像的不同类型数据的准确性，进而可以保证图像的处理效果并优化处理速度。

步骤102、根据第一图像数据和第二图像数据，进行图像合成。

在获取第一图像数据和第二图像数据之后，需要根据第一图像数据和第二图像数据进行图像合成，以生成合成图像。在根据第一图像数据和第二图像数据，进行图像合成时，需要根据第一图像数据和第二图像数据，执行图像合成的至少两个处理流程，生成合成图像；其中，第一处理流程根据第一图像数据执行，第二处理流程根据第二图像数据执行。

在执行图像合成的至少两个处理流程时，可以采用第一图像数据执行第一处理流程，采用第二图像数据执行第二处理流程。其中第一处理流程可以包括至少一个子流程，第二处理流程也可以包括至少一个子流程。

第一处理流程可以作为主流程，第二处理流程可以作为从流程；或者第二处理流程可以作为主流程，第一处理流程可以作为从流程。当将第一处理流程作为主流程，将第二处理流程作为从流程时，可以减少第一图像数据的计算量，在不降低图像质量的情况下，提高处理速度。当将第二处理流程作为主流程，将第一处理流程作为从流程时，可以提高第二图像数据的处理效果，在不降低处理速度的情况下，提升最终的图片质量。

在本发明实施例中，根据第一图像数据和第二图像数据，执行图像合成的至少两个处理流程，生成合成图像时，包括：在图像合成的最后一个处理流程为第一处理流程的情况下，将合成图像所对应的第一图像数据转化为第二图像数据。

在进行图像合成的过程中，需要检测最后一个处理流程为第一处理流程还是为第二处理流程，由于第一处理流程采用第一图像数据进行执行，在图像合成的最后一个处理流程为第一处理流程的情况下，则需要将合成图像进行图像信号处理，将当前状态下合成图像的第一图像数据转化为第二图像数据，便于后续过程的处理。

在通过第一处理流程获得合成图像后，将合成图像的数据类型转化为第二图像数据，可以便于后续的后处理和编码操作。

其中，在本发明实施例中，至少两个处理流程包括人脸检测流程，该方法还包括：确定第二处理流程为人脸检测流程；根据第二图像数据获取人脸检测结果，将人脸检测结果传递至第一处理流程。

在进行图像处理时，若图像中包括人脸区域，为了在人脸区域获取更好的效果，一般会进行人脸相关检测，然后针对人脸区域进行特殊处理。而人脸相关检测流程可以当做图像处理过程中的一个流程，对这个流程来说，在第一图像数据和第二图像数据上处理都能够检测到正确信息，但是在通过第二图像数据进行人脸检测处理时，可以更快的获取处理效果。

因此在图像处理的过程中包括人脸检测流程时，则需要将第二处理流程确定为人脸检测流程，然后根据第二图像数据进行人脸检测，获取人脸检测的结果，并在通过第二处理流程获取人脸检测结果之后，将人脸检测结果传递至第一处理流程。可以在保证图像质量的情况下，提高图像处理速度。

下面以一具体实例来对包含人脸检测的图像合成过程进行介绍，其中该实施例中以第一处理流程为主流程，第二处理流程为从流程，目的是在保证图像效果的基础上，提升图像处理速度，如图2所示，包括：

步骤201、开启摄像头，获取拍摄指令。

首先需要移动终端开启摄像头，并获取用户所输入的拍摄指令，根据拍摄指令进行图像拍摄，然后执行步骤202。

步骤202、获取摄像头采集的第一图像数据和第二图像数据，建立每帧图像的第一图像数据和第二图像数据的绑定关系。

在获取摄像头所采集的第一图像数据和第二图像数据之后，需要针对每帧图像，建立第一图像数据和第二图像数据的绑定关系，此时将每一帧图像的第一图像数据分别存储至缓存器内，即一帧图像对应于一个缓存器。在将每一帧图像的第一图像数据进行存储之后，根据相同的帧标识，将第二图像数据存储至对应的缓存器内。在实现对第一图像数据和第二图像数据的存储之后，可以形成第一图像数据和第二图像数据的绑定。

步骤203、在图像合成过程中存在人脸检测流程时，确定采用第二图像数据进行处理的第二处理流程为人脸检测流程，根据第二图像数据获取人脸检测结果，将人脸检测结果传递至采用第一图像数据进行处理的第一处理流程，由第一处理流程根据人脸检测结果生成合成图像。

在图像合成过程中，根据第一图像数据和第二图像数据，执行图像合成的至少两个处理流程。若确定图像合成过程中存在人脸检测流程，则需要对这个流程进行分析。针对人脸检测流程而言，在第一图像数据和第二图像数据上处理都能够检测到正确信息，但是在通过第二图像数据进行人脸检测处理时，可以更快的获取处理效果。因此确定第二处理流程为人脸检测流程，并根据第二处理流程所对应的第二图像数据进行人脸检测过程，获得人脸检测结果。

在获取第二处理流程所获得的人脸检测结果之后，将人脸检测结果传递至第一处理流程，第一处理流程在获取人脸检测结果之后，进行后续的相关处理，最终生成合成图像。

在本实施例中，第一处理流程可以包括多个子流程，第二处理流程仅对应人脸检测的流程，其中人脸检测的流程可以处于多个子流程之间。将第一处理流程划分至第一图像数据域内，将第二处理流程划分至第二图像数据域内。

在进行图像合成时，可以采用第一图像数据执行第一处理流程中的部分子流程，采用第二图像数据执行人脸检测流程，根据人脸检测流程的结果，继续执行第一处理流程中的其他子流程。即在执行第一处理流程中的其他子流程时可直接采用第二处理流程的结果，无需在第一处理流程中进行人脸检测的过程，可以提升图像处理速度。需要说明的是，人脸检测可以作为一个相对独立的流程，在采用第二图像数据执行人脸检测流程时，可以按照预设顺序进行执行，也可以与其他不相关的流程并行处理，以节省处理时间。即在采用第一图像数据执行第一处理流程中的部分子流程时，可以同时采用第二图像数据执行人脸检测流程。

进一步来说，在缓存器中可以获得某一帧图像所对应的第一图像数据，根据第一图像数据执行第一处理流程。在执行第一处理流程的同时，根据相同的帧标识获取当前帧图像所对应的第二图像数据，根据第二图像数据执行第二处理流程，并获得第二处理流程的执行结果。其中第一处理流程可以直接采用第二流程的执行结果，不需要重复执行第二处理流程的执行过程。

例如在进行人脸处理时需要用到人脸检测的结果，可直接使用第二处理流程得到的人脸检测结果，然后基于人脸检测结果进行更进一步的处理。这样就不用根据第一图像数据再进行人脸检测，可以实现提高处理速度。

在采用第二图像数据执行人脸检测流程时，在缓存器中得到对应的第二图像数据，根据第二图像数据执行人脸检测过程，在得到人脸检测的结果后将人脸检测结果供给第一处理流程使用。其中两种数据并行执行的方式，可以在保证图像处理效果的基础上加快处理速度。

步骤204、将合成图像进行图像信号处理，使合成图像的数据类型由第一图像数据转化为第二图像数据。

在通过第一处理流程生成合成图像之后，由于此时合成图像的数据类型为第一图像数据，需要将合成图像进行图像信号处理，将数据类型由第一图像数据转化为第二图像数据，便于后续过程的后处理以及编码操作。

上述实施方式，可以以第一处理流程为主，第二处理流程为辅，通过第二处理流程可以极大降低第一处理流程的计算量，在不降低图像质量的情况下，提高图像处理速度。

在本发明实施例中，当前拍摄模式为高动态范围HDR模式；第一处理流程为获取过曝区域和欠曝区域的合成数据的流程；则根据第一图像数据和第二图像数据，执行图像合成的至少两个处理流程，生成合成图像的过程包括：获取第一处理流程的合成数据；将合成数据进行图像信号处理后传递至第二处理流程，由第二处理流程根据合成数据生成合成图像。

在当前拍摄模式为高动态范围HDR模式的状态下，在获取第一图像数据和第二图像数据时，需要获取在三种曝光状态下分别对应的第一图像数据，其中三种曝光状态所对应的曝光参数不同；对三种曝光状态下的第一图像数据进行图像信号处理，获取对应的第二图像数据。

具体为：在拍摄过程中，需要获取三种曝光状态下分别对应的第一图像数据，这里的三种曝光状态分别为过曝状态、正常曝光状态以及欠曝光状态。在针对三种曝光状态均获取第一图像数据之后，还需要针对每种曝光状态下的第一图像数据进行图像信号处理，以获取每种曝光状态下的第二图像数据。

其中三种曝光状态的实现是通过调整曝光值来实现的，在改变曝光值后，需要重新计算曝光时间和增益，将新计算出的参数设置到寄存器中，来控制寄存器输出HDR合成需要的不同曝光参数，进而实现可获取处于不同曝光状态的拍摄图像。针对一拍摄图像而言，对应于三种曝光状态，每一种曝光状态可对应于一帧图像，即一拍摄图像对应于三帧曝光参数不同的图像，根据三种曝光状态下的数据可进行HDR图像合成。

在合成HDR图像时，需要从过曝帧中获得欠曝区的信息，从欠曝帧中获得过曝区的信息，然后将它们合成到正常曝光的图片中。其中第一图像数据中的过曝区域和欠曝区域与第二图像数据中的过曝区域和欠曝区域相比，具有更丰富的图像细节信息，那么在做HDR多帧融合时，使用第一图像数据进行合成，这样可以得到更优质的效果。

即针对当前拍摄模式为HDR模式的场景，需要确定第一处理流程为获取过曝区域和欠曝区域的合成数据的流程，根据第一图像数据获取过曝区域和欠曝区域的合成数据，将所获取的合成数据传递至第二处理流程，由第二处理流程根据获取的合成数据进行后续处理生成合成图像。

下面以一具体实例来对HDR图像的合成过程进行介绍，其中该实施例中以第二处理流程为主流程，第一处理流程为从流程，目的是在保证图像处理速度的基础上提升图像效果。如图3所示，包括：

步骤301、开启摄像头，获取拍摄指令。

首先需要移动终端开启摄像头，并获取用户所输入的拍摄指令，然后执行步骤302。

步骤302、在当前处于HDR拍摄模式时，改变曝光值，并重新计算曝光时间和增益，将计算出的三组曝光参数设置到寄存器中，来控制寄存器输出HDR合成需要的不同曝光参数，以获取处于不同曝光状态的拍摄图像。

在开启摄像头并获取拍摄指令之后，需要判断当前的拍照模式是否为HDR拍照模式，在当前的拍照模式属于HDR拍照模式时，则进行HDR图像处理的流程。此时需要改变曝光值，并重新计算三组曝光时间和增益，将计算出的三组曝光参数设置到寄存器中，来控制寄存器输出HDR合成需要的不同曝光参数。其中三组曝光参数分别为欠曝状态的曝光参数、过曝状态的曝光参数以及正常曝光状态的曝光参数。

步骤303、获取摄像头采集的第一图像数据和第二图像数据，建立每帧图像的第一图像数据和第二图像数据的绑定关系。

在获取摄像头所采集的第一图像数据和第二图像数据之后，需要针对每帧图像，建立第一图像数据和第二图像数据的绑定关系，此时将每一帧图像的第一图像数据分别存储至缓存器内，即一帧图像对应于一个缓存器。在将每一帧图像的第一图像数据进行存储之后，根据相同的帧标识，将第二图像数据存储至对应的缓存器内。在实现对第一图像数据和第二图像数据的存储之后，可以形成第一图像数据和第二图像数据的绑定。其中在进行数据缓存以及数据绑定时，需要针对每一帧图像都进行此操作。即对处于不同曝光状态的每帧图像都需要进行数据缓存以及数据绑定。

步骤304、确定采用第一图像数据处理的第一处理流程为获取过曝区域和欠曝区域的合成数据的流程，根据第一图像数据获取过曝区域和欠曝区域的合成数据，将合成数据进行图像信号处理后传递至采用第二图像数据进行处理的第二处理流程，由第二处理流程根据合成数据生成合成图像。

在合成HDR图像时，需要从过曝帧中获得欠曝区的信息，从欠曝帧中获得过曝区的信息，然后将它们合成到正常曝光的图片中。其中第一图像数据中的过曝区域和欠曝区域与第二图像数据中的过曝区域和欠曝区域相比，具有更丰富的图像细节信息，那么在做HDR多帧融合时，使用第一图像数据进行合成，这样可以得到更优质的效果。

在获取第一处理流程所得到的过曝区域和欠曝区域的合成数据之后，对合成数据进行图像信号处理，在进行图像信号处理之后，将合成数据传递至第二处理流程，第二处理流程在获取过曝区域和欠曝区域的经过图像信号处理后的合成数据之后，进行后续的相关处理，最终生成合成图像。

其中在本实施例中，第二处理流程包括多个子流程，第一处理流程仅对应获取过曝区域和欠曝区域的合成数据的流程，其中获取过曝区域和欠曝区域的合成数据的流程处于多个子流程之间。将第一处理流程划分至第一图像数据域内，将第二处理流程划分至第二图像数据域内。

在进行HDR图像合成时，采用第二图像数据执行第二处理流程中的部分子流程，同时可以采用第一图像数据执行获取过曝区域和欠曝区域的合成数据的流程，将合成数据进行图像信号处理，并根据图像信号处理后的结果继续执行第二处理流程中的其他子流程。即在执行第二处理流程中的其他子流程时可直接采用第一处理流程的结果，无需在第二处理流程中执行获取过曝区域和欠曝区域的合成数据的步骤，可以保证图像处理效果。进一步来说，在获取不同曝光参数的第二图像数据后，根据第二图像数据执行第二处理流程。在执行第二处理流程的同时，根据相同的帧标识获取对应的第一图像数据，根据第一图像数据执行第一处理流程，并获得第一处理流程所对应的执行结果。其中第二处理流程可以直接采用第一处理流程经过图像信号处理后的执行结果，不需要重复执行第一处理流程的执行过程。

例如在进行HDR图像合成时，过曝区域和欠曝区域的合成数据可以使用第一处理流程的执行结果，将得到的结果进行图像信号处理后与第二处理流程的处理结果合到一起，完成整个图片的合成过程。其中采用第二处理流程的处理结果进行合成时，需要剔除根据第二图像数据生成的过曝区和欠曝区，获取剩余的图像部分，将剩余的图像部分与第一处理流程的进行图像信号处理的合成数据进行合成。此种方式会比全部用第二图像数据合成的图片拥有更丰富的细节，增强了图像效果。

采用第一图像数据获取过曝区域和欠曝区域的合成数据时，获取不同曝光参数分别对应的第一图像数据，根据第一图像数据执行获取过曝区域和欠曝区域的合成数据的过程，同时第二处理流程执行相应过程。在得到过曝区域和欠曝区域的合成数据后进行图像信号处理并将其结果供给第二处理流程使用。上述两种数据并行执行的方式，可以在保证处理速度的基础上提高图像处理效果。

上述实施过程，可以以第二处理流程为主，第一处理流程为辅，通过第一处理流程可以提高第二处理流程的图像处理效果，在保证处理速度的基础上进一步优化图像处理效果。

在本发明实施例中，根据第一图像数据和第二图像数据，进行图像合成后，还包括：对生成的合成图像进行图像后处理和编码操作，并进行存储。通过对合成图像进行后续的后处理和编码操作，可以获取最终的图像，同时可便于图像的存储和传输。

在本发明实施例中，通过获取拍摄图像时采集的光信号转换为数字信号后的第一图像数据以及将第一图像数据进行图像信号处理后的第二图像数据之后，根据第一图像数据和第二图像数据进行图像合成，获得合成图像，可以实现针对不同的处理流程采用对应类型的数据执行操作过程，以结合第一图像数据和第二图像数据的优点，在保证图像处理效果的基础上，提高处理速度。

本发明实施例还提供一种移动终端，如图4a所示，包括：

获取模块10，用于获取摄像头采集的第一图像数据和第二图像数据；

合成模块20，用于根据第一图像数据和第二图像数据，进行图像合成；

其中，第一图像数据为摄像头采集的光信号转换为数字信号后的数据，第二图像数据为经第一图像数据进行图像信号处理后的数据。

其中，合成模块20进一步用于：

根据第一图像数据和第二图像数据，执行图像合成的至少两个处理流程，生成合成图像；

其中，第一处理流程根据第一图像数据执行，第二处理流程根据第二图像数据执行。

其中，如图4b所示，移动终端还包括：

存储模块30，用于在获取模块10获取摄像头采集的第一图像数据和第二图像数据之后，将摄像头采集的每帧图像的第一图像数据分别存储至缓存器内；

处理模块40，用于根据相同的帧标识，将同一帧图像的第二图像数据存储至第一图像数据所对应的缓存器内，并建立同一帧图像的第一图像数据与第二图像数据的对应关系。

其中，合成模块20进一步用于：

在图像合成的最后一个处理流程为第一处理流程的情况下，将合成图像所对应的第一图像数据转化为第二图像数据。

其中，至少两个处理流程包括人脸检测流程，合成模块20包括：

确定子模块21，用于确定第二处理流程为人脸检测流程；

第一传递子模块22，用于根据第二图像数据获取人脸检测结果，将人脸检测结果传递至第一处理流程。

其中，当前拍摄模式为高动态范围HDR模式；第一处理流程为获取过曝区域和欠曝区域的合成数据的流程；合成模块20包括：

获取子模块23，用于获取第一处理流程的合成数据；

第二传递子模块24，用于将合成数据进行图像信号处理后传递至第二处理流程，由第二处理流程根据合成数据生成合成图像。

其中，第一图像数据为RAW数据；第二图像数据为YUV数据。

本发明实施例的移动终端能够实现图1至图3的方法实施例中移动终端实现的各个过程，为避免重复，这里不再赘述。

这样，通过获取拍摄图像时采集的光信号转换为数字信号后的第一图像数据以及将第一图像数据进行图像信号处理后的第二图像数据之后，根据第一图像数据和第二图像数据进行图像合成，可以实现针对不同的处理流程采用对应类型的数据执行操作过程，以结合第一图像数据和第二图像数据的优点，在保证图像处理效果的基础上，提高处理速度。

图5为实现本发明各个实施例的一种移动终端的硬件结构示意图，该移动终端500包括但不限于：射频单元501、网络模块502、音频输出单元503、输入单元504、传感器505、显示单元506、用户输入单元507、接口单元508、存储器509、处理器510、以及电源511等部件。本领域技术人员可以理解，图5中示出的移动终端结构并不构成对移动终端的限定，移动终端可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。在本发明实施例中，移动终端包括但不限于手机、平板电脑、笔记本电脑、掌上电脑、车载终端、可穿戴设备、以及计步器等。

其中，处理器510用于：获取摄像头采集的第一图像数据和第二图像数据；根据第一图像数据和第二图像数据，进行图像合成；其中，第一图像数据为摄像头采集的光信号转换为数字信号后的数据，第二图像数据为经第一图像数据进行图像信号处理后的数据。

可选的，在根据第一图像数据和第二图像数据，进行图像合成时，处理器510还用于执行以下步骤：根据第一图像数据和第二图像数据，执行图像合成的至少两个处理流程，生成合成图像；其中，第一处理流程根据第一图像数据执行，第二处理流程根据第二图像数据执行。

可选的，获取摄像头采集的第一图像数据和第二图像数据之后，处理器510还用于执行以下步骤：将摄像头采集的每帧图像的第一图像数据分别存储至缓存器内；根据相同的帧标识，将同一帧图像的第二图像数据存储至第一图像数据所对应的缓存器内，并建立同一帧图像的第一图像数据与第二图像数据的对应关系。

可选的，根据第一图像数据和第二图像数据，执行图像合成的至少两个处理流程，生成合成图像时，处理器510还用于执行以下步骤：在图像合成的最后一个处理流程为第一处理流程的情况下，将合成图像所对应的第一图像数据转化为第二图像数据。

可选的，至少两个处理流程包括人脸检测流程，处理器510还用于执行以下步骤：确定第二处理流程为人脸检测流程；根据第二图像数据获取人脸检测结果，将人脸检测结果传递至第一处理流程。

可选的，当前拍摄模式为高动态范围HDR模式；第一处理流程为获取过曝区域和欠曝区域的合成数据的流程；根据第一图像数据和第二图像数据，执行图像合成的至少两个处理流程，生成合成图像时，处理器510还用于执行以下步骤：获取第一处理流程的合成数据；将合成数据进行图像信号处理后传递至第二处理流程，由第二处理流程根据合成数据生成合成图像。

可选的，第一图像数据为RAW数据；第二图像数据为YUV数据。

这样，通过获取拍摄图像时采集的光信号转换为数字信号后的第一图像数据以及将第一图像数据进行图像信号处理后的第二图像数据之后，根据第一图像数据和第二图像数据进行图像合成，可以实现针对不同的处理流程采用对应类型的数据执行操作过程，以结合第一图像数据和第二图像数据的优点，在保证图像处理效果的基础上，提高处理速度。

应理解的是，本发明实施例中，射频单元501可用于收发信息或通话过程中，信号的接收和发送，具体的，将来自基站的下行数据接收后，给处理器510处理；另外，将上行的数据发送给基站。通常，射频单元501包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器、双工器等。此外，射频单元501还可以通过无线通信系统与网络和其他设备通信。

移动终端通过网络模块502为用户提供了无线的宽带互联网访问，如帮助用户收发电子邮件、浏览网页和访问流式媒体等。

音频输出单元503可以将射频单元501或网络模块502接收的或者在存储器509中存储的音频数据转换成音频信号并且输出为声音。而且，音频输出单元503还可以提供与移动终端500执行的特定功能相关的音频输出(例如，呼叫信号接收声音、消息接收声音等等)。音频输出单元503包括扬声器、蜂鸣器以及受话器等。

输入单元504用于接收音频或视频信号。输入单元504可以包括图形处理器(Graphics Processing Unit，GPU)5041和麦克风5042，图形处理器5041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。处理后的图像帧可以显示在显示单元506上。经图形处理器5041处理后的图像帧可以存储在存储器509(或其它存储介质)中或者经由射频单元501或网络模块502进行发送。麦克风5042可以接收声音，并且能够将这样的声音处理为音频数据。处理后的音频数据可以在电话通话模式的情况下转换为可经由射频单元501发送到移动通信基站的格式输出。

移动终端500还包括至少一种传感器505，比如光传感器、运动传感器以及其他传感器。具体地，光传感器包括环境光传感器及接近传感器，其中，环境光传感器可根据环境光线的明暗来调节显示面板5061的亮度，接近传感器可在移动终端500移动到耳边时，关闭显示面板5061和/或背光。作为运动传感器的一种，加速计传感器可检测各个方向上(一般为三轴)加速度的大小，静止时可检测出重力的大小及方向，可用于识别移动终端姿态(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等；传感器505还可以包括指纹传感器、压力传感器、虹膜传感器、分子传感器、陀螺仪、气压计、湿度计、温度计、红外线传感器等，在此不再赘述。

显示单元506用于显示由用户输入的信息或提供给用户的信息。显示单元506可包括显示面板5061，可以采用液晶显示器(Liquid Crystal Display，LCD)、有机发光二极管(Organic Light-Emitting Diode,OLED)等形式来配置显示面板5061。

用户输入单元507可用于接收输入的数字或字符信息，以及产生与移动终端的用户设置以及功能控制有关的键信号输入。具体地，用户输入单元507包括触控面板5071以及其他输入设备5072。触控面板5071，也称为触摸屏，可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触控面板5071上或在触控面板5071附近的操作)。触控面板5071可包括触摸检测装置和触摸控制器两个部分。其中，触摸检测装置检测用户的触摸方位，并检测触摸操作带来的信号，将信号传送给触摸控制器；触摸控制器从触摸检测装置上接收触摸信息，并将它转换成触点坐标，再送给处理器510，接收处理器510发来的命令并加以执行。此外，可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触控面板5071。除了触控面板5071，用户输入单元507还可以包括其他输入设备5072。具体地，其他输入设备5072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆，在此不再赘述。

进一步的，触控面板5071可覆盖在显示面板5061上，当触控面板5071检测到在其上或附近的触摸操作后，传送给处理器510以确定触摸事件的类型，随后处理器510根据触摸事件的类型在显示面板5061上提供相应的视觉输出。虽然在图5中，触控面板5071与显示面板5061是作为两个独立的部件来实现移动终端的输入和输出功能，但是在某些实施例中，可以将触控面板5071与显示面板5061集成而实现移动终端的输入和输出功能，具体此处不做限定。

接口单元508为外部装置与移动终端500连接的接口。例如，外部装置可以包括有线或无线头戴式耳机端口、外部电源(或电池充电器)端口、有线或无线数据端口、存储卡端口、用于连接具有识别模块的装置的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等等。接口单元508可以用于接收来自外部装置的输入(例如，数据信息、电力等等)并且将接收到的输入传输到移动终端500内的一个或多个元件或者可以用于在移动终端500和外部装置之间传输数据。

存储器509可用于存储软件程序以及各种数据。存储器509可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等；存储数据区可存储根据手机的使用所创建的数据(比如音频数据、电话本等)等。此外，存储器509可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。

处理器510是移动终端的控制中心，利用各种接口和线路连接整个移动终端的各个部分，通过运行或执行存储在存储器509内的软件程序和/或模块，以及调用存储在存储器509内的数据，执行移动终端的各种功能和处理数据，从而对移动终端进行整体监控。处理器510可包括一个或多个处理单元；优选的，处理器510可集成应用处理器和调制解调处理器，其中，应用处理器主要处理操作系统、用户界面和应用程序等，调制解调处理器主要处理无线通信。可以理解的是，上述调制解调处理器也可以不集成到处理器510中。

移动终端500还可以包括给各个部件供电的电源511(比如电池)，优选的，电源511可以通过电源管理系统与处理器510逻辑相连，从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。

另外，移动终端500包括一些未示出的功能模块，在此不再赘述。

优选的，本发明实施例还提供一种移动终端，包括处理器510，存储器509，存储在存储器509上并可在所述处理器510上运行的计算机程序，该计算机程序被处理器510执行时实现上述图像处理方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。

本发明实施例还提供一种计算机可读存储介质，计算机可读存储介质上存储有计算机程序，该计算机程序被处理器执行时实现上述图像处理方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。其中，所述的计算机可读存储介质，如只读存储器(Read-Only Memory，简称ROM)、随机存取存储器(Random Access Memory，简称RAM)、磁碟或者光盘等。

需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。

通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台终端(可以是手机，计算机，服务器，空调器，或者网络设备等)执行本发明各个实施例所述的方法。

上面结合附图对本发明的实施例进行了描述，但是本发明并不局限于上述的具体实施方式，上述的具体实施方式仅仅是示意性的，而不是限制性的，本领域的普通技术人员在本发明的启示下，在不脱离本发明宗旨和权利要求所保护的范围情况下，还可做出很多形式，均属于本发明的保护之内。

Claims (12)

1.一种图像处理方法，其特征在于，包括：

获取摄像头采集的第一图像数据和第二图像数据；

根据所述第一图像数据和所述第二图像数据，进行图像合成；

其中，所述第一图像数据为摄像头采集的光信号转换为数字信号后的数据，所述第二图像数据为经所述第一图像数据进行图像信号处理后的数据；

所述根据所述第一图像数据和所述第二图像数据，进行图像合成，包括：

根据所述第一图像数据和所述第二图像数据，并行执行图像合成的至少两个处理流程，生成合成图像；

所述根据所述第一图像数据和所述第二图像数据，并行执行图像合成的至少两个处理流程，包括：

采用第一图像数据执行第一处理流程，并采用第二图像数据并行执行第二处理流程；

其中，在所述第一处理流程作为主流程的情况下，所述第二处理流程作为从流程；在所述第一处理流程作为从流程的情况下，所述第二处理流程作为主流程；

所述第一图像数据为RAW数据；所述第二图像数据为YUV数据。

2.根据权利要求1所述的图像处理方法，其特征在于，所述获取摄像头采集的第一图像数据和第二图像数据之后，还包括：

将摄像头采集的每帧图像的所述第一图像数据分别存储至缓存器内；

根据相同的帧标识，将同一帧图像的所述第二图像数据存储至所述第一图像数据所对应的缓存器内，并建立同一帧图像的所述第一图像数据与所述第二图像数据的对应关系。

3.根据权利要求1所述的图像处理方法，其特征在于，所述根据所述第一图像数据和所述第二图像数据，执行图像合成的至少两个处理流程，生成合成图像，包括：

在图像合成的最后一个处理流程为所述第一处理流程的情况下，将所述合成图像所对应的所述第一图像数据转化为所述第二图像数据。

4.根据权利要求1所述的图像处理方法，其特征在于，所述至少两个处理流程包括人脸检测流程，所述方法还包括：

确定所述第二处理流程为人脸检测流程；

根据所述第二图像数据获取人脸检测结果，将所述人脸检测结果传递至所述第一处理流程。

5.根据权利要求1所述的图像处理方法，其特征在于，当前拍摄模式为高动态范围HDR模式；所述第一处理流程为获取过曝区域和欠曝区域的合成数据的流程；

所述根据所述第一图像数据和所述第二图像数据，执行图像合成的至少两个处理流程，生成合成图像，包括：

获取所述第一处理流程的合成数据；

将所述合成数据进行图像信号处理后传递至所述第二处理流程，由所述第二处理流程根据所述合成数据生成所述合成图像。

6.一种图像处理装置，其特征在于，包括：

获取模块，用于获取摄像头采集的第一图像数据和第二图像数据；

合成模块，用于根据所述第一图像数据和所述第二图像数据，进行图像合成；

其中，所述第一图像数据为摄像头采集的光信号转换为数字信号后的数据，所述第二图像数据为经所述第一图像数据进行图像信号处理后的数据；

所述合成模块进一步用于：

根据所述第一图像数据和所述第二图像数据，并行执行图像合成的至少两个处理流程，生成合成图像；

所述合成模块具体用于：采用第一图像数据执行第一处理流程，并采用第二图像数据并行执行第二处理流程；

其中，在所述第一处理流程作为主流程的情况下，所述第二处理流程作为从流程；在所述第一处理流程作为从流程的情况下，所述第二处理流程作为主流程；

所述第一图像数据为RAW数据；所述第二图像数据为YUV数据。

7.根据权利要求6所述的图像处理装置，其特征在于，所述装置还包括：

存储模块，用于在所述获取模块获取摄像头采集的第一图像数据和第二图像数据之后，将摄像头采集的每帧图像的所述第一图像数据分别存储至缓存器内；

处理模块，用于根据相同的帧标识，将同一帧图像的所述第二图像数据存储至所述第一图像数据所对应的缓存器内，并建立同一帧图像的所述第一图像数据与所述第二图像数据的对应关系。

8.根据权利要求6所述的图像处理装置，其特征在于，所述合成模块进一步用于：

在图像合成的最后一个处理流程为所述第一处理流程的情况下，将所述合成图像所对应的所述第一图像数据转化为所述第二图像数据。

9.根据权利要求6所述的图像处理装置，其特征在于，所述至少两个处理流程包括人脸检测流程，所述合成模块包括：

确定子模块，用于确定所述第二处理流程为人脸检测流程；

第一传递子模块，用于根据所述第二图像数据获取人脸检测结果，将所述人脸检测结果传递至所述第一处理流程。

10.根据权利要求6所述的图像处理装置，其特征在于，当前拍摄模式为高动态范围HDR模式；所述第一处理流程为获取过曝区域和欠曝区域的合成数据的流程；

所述合成模块包括：

获取子模块，用于获取所述第一处理流程的合成数据；

第二传递子模块，用于将所述合成数据进行图像信号处理后传递至所述第二处理流程，由所述第二处理流程根据所述合成数据生成所述合成图像。

11.一种移动终端，其特征在于，包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述计算机程序被所述处理器执行时实现如权利要求1至5中任一项所述的图像处理方法的步骤。

12.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储计算机程序，所述计算机程序被处理器执行时实现如权利要求1至5中任一项所述的图像处理方法的步骤。

Images