CN108810416B - 一种图像处理方法及终端设备 - Google Patents

Abstract

本发明公开了一种图像处理方法及终端设备，用以解决现有技术中，在昏暗的环境下拍摄照片成像效果差的问题。本申请提供的方法包括：获取第一输入图像，第一输入图像包括N个输入像素点；采用预设边长的滑动窗口以预设步长遍历第一输入图像，得到M个子图像，每个子图像由位于滑动窗口内的T个输入像素点组成；基于每个子图像所包含的T个输入像素点，将M个子图像进行像素点合成，生成M个输出像素点；根据M个输出像素点，生成输出图像；相邻的两个子图像中包含至少两个相同的输入像素点；预设步长小于预设边长。本申请将多个输入像素点合成多个输出像素点，输出像素点的数量与输入像素点的数量相接近，能使输出图像具有较好的成像效果。

Description

一种图像处理方法及终端设备

技术领域

本发明实施例涉及通信技术领域，尤其涉及一种图像处理方法及终端设备。

背景技术

目前智能电子产品已经走进千家万户，功能繁多，许多电子设备都具有拍照功能，以便满足用户的拍照摄像需求。拍照可以理解为通过物体所反射的光线使感光介质曝光的过程，在光线充足的环境下拍照效果往往较好，但在光线不足的环境下，拍摄出的照片往往显得昏暗不清晰。

在现有技术中，为了改善昏暗环境下的拍摄效果，往往采用“彩色相机(RGB)+黑白相机(Mono)”的组合结构，在拍摄时由彩色相机获取一张彩色照片，黑白相机获取一张黑白照片，然后将两张照片根据一定的算法进行合成。其中，彩色相机能获取拍摄对象的颜色，但彩色相机的每个像素点都仅获取一种颜色光，即红色、绿色或者蓝色，因此，彩色相机在拍摄过程中会过滤大部分光线，导致拍摄出来的彩色照片亮度不足。而黑白相机不对光线进行过滤，仅获取拍摄对象反射光线的亮度。因此，“彩色相机+黑白相机”的组合结构能提高拍摄照片的亮度和对比度，改善拍摄效果。在黑白相机中，每个像素点的感光度往往是固定的，感光度可以理解为对于光线的灵敏程度。在昏暗的环境下，瞬时拍摄的照片通常对比度差，像素接收的光线不足，为了提高黑白相机拍摄对比度，往往需要延长像素曝光的时间，但延长像素曝光时间往往会由于手抖导致照片模糊。

发明内容

本发明实施例提供一种图像处理方法，用以解决现有技术中，在昏暗的环境下拍摄照片成像效果差的问题。

为了解决上述技术问题，本发明是这样实现的：

第一方面，提供了一种图像处理方法，包括：

获取第一输入图像，所述第一输入图像包括N个输入像素点；

采用预设边长的滑动窗口以预设步长遍历所述第一输入图像，得到M个子图像，每个子图像由位于所述滑动窗口内的T个输入像素点组成；

基于每个所述子图像所包含的T个输入像素点，将所述M个子图像进行像素点合成，生成M个输出像素点；

根据所述M个输出像素点，生成输出图像；

其中，相邻的两个所述子图像中包含至少两个相同的输入像素点；所述预设步长小于所述预设边长；N、M、T均为正整数。

第二方面，提供了一种终端设备，包括：

第一输入图像获取模块，用于获取第一输入图像，所述第一输入图像包括N个输入像素点；

子图像获取模块，用于采用预设边长的滑动窗口以预设步长遍历所述第一输入图像，得到M个子图像，每个子图像由位于所述滑动窗口内的T个输入像素点组成；

像素点合成模块，基于每个所述子图像所包含的T个输入像素点，将所述M个子图像进行像素点合成，生成M个输出像素点；

输出图像生成模块，用于根据所述M个输出像素点生成输出图像；

其中，相邻的两个所述子图像中包含至少两个相同的输入像素点；所述预设步长小于所述预设边长；N、M、T均为正整数。

第三方面，提供了一种终端设备，该终端设备包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述计算机程序被所述处理器执行时实现如第一方面所述的方法的步骤。

第四方面，提供了一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储计算机程序，所述计算机程序被处理器执行时实现如第一方面所述的方法的步骤。

在本发明实施例中，通过将多个输入像素点合成多个输出像素点的方式提高拍摄照片整体的亮度和对比度，在合成输出像素点的过程中，至少一个输入像素点多次包含在不同子图像中，使输出像素点的数量与输入像素点的数量相接近，避免在合成像素点的过程中过多的降低拍摄图片的分辨率。由此，在昏暗的环境下，本申请提供的技术方案能对瞬时拍摄得到的输入像素点进行合成，得到成像效果较好的输出图像。

附图说明

图1是本发明提供的一种图像处理方法流程示意图之一；

图2是本发明提供的方法中获取子图像的步骤示意图之一；

图3是本发明提供的基于图2的合成输出像素点的步骤示意图；

图4是本发明提供的基于图3的生成输出图像的步骤示意图；

图5是本发明提供的方法中获取子图像的步骤示意图之二；

图6是本发明提供的方法中获取子图像的步骤示意图之三；

图7是本发明提供的一种图像处理方法流程示意图之二；

图8是本发明的提供的融合生成输出图像的步骤示意图之一；

图9是本发明的提供的融合生成输出图像的步骤示意图之二；

图10a是本发明提供的一种终端设备结构示意图；

图10b是本发明提供的像素电路示意图；

图11是本发明提供的一种移动终端的硬件结构示意图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

本申请提供一种图像处理方法，可以应用于具有拍摄功能的各种电子设备，例如手机、平板电脑、电子相机等，尤其应用于包括黑白相机(Mono)的电子设备，如图1所示，该方法包括：

步骤11：获取第一输入图像，所述第一输入图像包括N个输入像素点。

其中，输入像素点可以是摄像头模组中一个或多个像素的感光信息，感光信息可以理解为像素在瞬间曝光时接收到的由拍摄物体反射的光的亮度，感光信息通常与单位像素的曝光时间、感光度、感光面积有关。

上述步骤11可以理解为摄像头像素曝光的过程，在曝光时，摄像头与拍摄物体应保持相对静止，但对于手机、平板电脑、电子相机等电子设备往往通过手持拍摄，很难保证与拍摄物体保持静止，通常在拍摄时有小幅移动，如果曝光时间过长，则拍摄得到的照片会出现残影、模糊等现象。而且，在抓拍移动物体时，过长的曝光时间很难清晰地捕捉物体的细节。因此，虽然增加曝光时间能提高拍摄照片的对比度，但为了保证拍摄图片清晰，往往曝光时间不宜过长。上述感光度也可称为ISO值，可以理解为像素对于光的灵敏程度，感光度与摄像头的结构、像素材质等硬件有关，提升空间有限。

步骤12：采用预设边长的滑动窗口以预设步长遍历所述第一输入图像，得到M个子图像，每个子图像由位于所述滑动窗口内的T个输入像素点组成。

如图2所示，获取的第一输入图像X包括按照3行3列阵列排列的A11、A12、A13、A21、A22、A23、A31、A32、A33共9个像素点，本例中，第一输入图像包括9个像素点，即N＝9，滑动窗口W的边长可以是2个像素点，预设步长可以是1个像素点，用滑动窗口W框选第一输入图像X中的多个像素点可以得到多个子图像。滑动窗口W遍历第一输入图像X得到多个子图像的过程可以理解为用滑动窗口W在第一输入图像X中多次移动进行框选，根据滑动窗口W内的像素点得到多个不同的子图像的过程，每次滑动窗口的移动距离为预设步长。如图2所示，用滑动窗口W遍历所述第一输入图像X可以框选得到Y1、Y2、Y3、Y4共4个子图像，即M＝4，每个子图像包括按照2行2列阵列排列的4个像素点，即T＝4。

本步骤中滑动窗口中框选整数个输入像素点，即滑动窗口的边长为整数个输入像素点，且预设步长为整数个输入像素点，得到的多个子图像均由完整的多个输入像素点组成。本方案中滑动窗口可以是矩形，滑动窗口的边长即矩形边长，预设步长可以理解为滑动窗口当前位置和移动一次之后的滑动窗口的位置之间的距离。

步骤13：基于每个所述子图像所包含的T个输入像素点，将所述M个子图像进行像素点合成，生成M个输出像素点。

如图3所示，将步骤12中得到的4个子图像各自包含的多个输入像素点进行合成，具体的，将Y1中的输入像素点A11、A12、A21和A22合成为输出像素点B11，该B11为与子图像Y1对应的输出像素点。同理，将Y2、Y3、Y4分别合成为B12、B21、B22。

步骤14：根据所述M个输出像素点，生成输出图像。

其中，相邻的两个所述子图像中包含至少两个相同的输入像素点；所述预设步长小于所述预设边长；N、M、T均为正整数。

根据上述步骤13得到的多个输出像素点生成输出图像，具体可以包括将输出像素点按阵列结构组合成输出图像，如图4所示，图中示出的Z即输出图像。

在本实施例中，像素点A12、A21、A22、A23和A32多次包含在不同的子图像中，在合成过程中这些像素点被多次利用，上述按照3×3排列的9个像素点通过本方案的合成可以得到2×2排列的4个像素点，上述A22分别参与了4个像素点的合成。本方案中至少一个输入像素点在合成中多次利用，在实际应用过程中，上述方法可以包括以下步骤：获取输入图像，所述输入图像包括沿相互垂直的第一方向和第二方向阵列排布的多个输入像素点，先选取所述多个输入像素点中的任一输入像素点作为基准像素点，基于所述基准像素点，确定在所述第一方向上连续排布的K个输入像素点，记为第一输入像素点，所述第一输入像素点中包括所述基准像素点，基于所述第一输入像素点，确定在所述第二方向上连续排布的K个输入像素点，记为第二输入像素点，所述第二输入像素点中包括所述第一输入像素点，基于所述第二输入像素点，合成与所述基准像素点相对应的输出像素点，将所述基准像素点沿第一方向或第二方向的第L个输入像素点作为新的基准像素点，重复执行获取输入图像之后的步骤，直至遍历所述多个输入像素点，得到多个输出像素点，其中，所述K为大于1的整数，所述L为小于K的正整数，然后根据所述多个输出像素点生成输出图像。

在本发明实施例中，通过将多个输入像素点合成多个输出像素点的方式提高拍摄图片中像素点的亮度和对比度，在合成输出像素点的过程中，将至少一个输入像素点与多个相邻像素点分别合成，使输出像素点的数量与输入像素点的数量相接近，避免在合成像素点的过程中过多的降低拍摄图片的分辨率。由此，在昏暗的环境下，本申请提供的技术方案能对瞬时拍摄得到的输入像素点进行合成，得到对比度高、亮度高的输出像素点。同时，由于本方案在合成的过程中对输入像素点多次利用，得到的输出像素点的数量与输入像素点的数量相接近，保证由输出像素点构成的照片有较高的分辨率，进而提高照片的整体成像效果。

基于上述实施例，本申请提供的图像处理方法中，所述滑动窗口为边长为D个像素点的正方形，所述预设步长为E个像素点，其中，所述D为大于1的整数，所述E为小于所述D的正整数。

参见图2，图中示出的滑动窗口W为边长为2个像素点的正方形，所述预设步长为1个像素点，即D＝2，E＝1。如图5所示，输入图像X包括4行4列阵列排布的共16个输入像素点，滑动窗口为边长为3个像素点的正方形，预设步长可以为1个像素点，得到的4个子图像Y1、Y2、Y3、Y4如图所示。在实际应用过程中，第一输入图像往往包括大量输入像素点，上述预设步长和滑动窗口的边长为整数，且预设步长小于滑动窗口的边长。即当滑动窗口为边长为3个像素点的正方形时，预设步长可以为1个像素点或2个像素点。当滑动串口为边长为2个像素点的正方形时，如图6所示，输入像素X包括16个输入像素点，预设步长为1个像素点时，可以得到Y1～Y9共9个子图像。

本申请实施例提供的方案能将输入像素点利用滑动窗口框选得到多个子图像，由于多个输入像素点被重复框选在不同的子图像中，因此，得到的子图像的数量与输入像素点的数量相接近。随后生成的输出图像的像素点数量与输入图像的像素点数量基本相同，避免在图像处理的过程中过多的降低图像分辨率，有效提高输出图像的清晰度。

基于上述实施例所述的方法，当所述第一输入图像为灰度图时，上述步骤步骤13，基于每个所述子图像所包含的T个输入像素点，将所述M个子图像进行像素点合成，生成M个输出像素点，包括：

计算每个子图像包含的输入像素点的灰度值之和，并将所述灰度值之和确定为与所述子图像对应的输出像素点的灰度值；其中，每个子图像对应一个输出像素点。

灰度图又称灰阶图，是一种用灰白黑像素点组成的图片。灰度是指把白色与黑色之间按对数关系分为256个等级，用0～255数值表示像素点灰色程度，其中0代表黑色，255代表白色。灰度图可以由黑白相机拍摄获得，单位像素点的灰度值与相机曝光一瞬间该单位像素点所占面积的进光量有关，拍摄得到的灰度图中每个像素点的灰度值对应该像素点所占面积的进光量。在暗态环境下拍摄照片时，由于环境光线较弱，因此每个像素点进光量都很少，拍摄到的灰度图整体偏暗，对比度较差，清晰度较差。本方案计算子图像包含的多个输入像素点的灰度值之和，参见图2，当每个子图像包括4个输入像素点时，本步骤计算4个输入像素点的灰度值之和，将计算得到的数值结果作为与该子图像对应的输出像素点的灰度值。本方案得到的输出像素点的灰度值对应4个像素点所占面积的进光量，相当于扩大了进光面积，将4个像素点在曝光一瞬间接收到的亮度作为一个输出像素点的灰度值。在暗态环境下，本方案能提高灰度图的整体亮度，增强对比度，提高图片清晰度。

上述方案中的灰度图还可以用于提高彩色图的图片效果，在上述步骤14，根据所述M个输出像素点，生成输出图像之前，如图7所示，所述方法还包括：

步骤15：获取第二输入图像，所述第二输入图像为彩色图。

彩色图通常由彩色相机拍摄获得，彩色相机可以是RGB相机，拍摄时每个像素点获取红、绿、蓝中的一种颜色，随后将多个彩色像素点阵列排列得到彩色照片，即彩色图。与上述黑白相机同理，拍摄得到的彩色照片每个像素点的亮度与曝光一瞬间进光量相关，在暗态拍摄环境下，由于进光量较少，导致拍摄得到的彩色照片整体亮度不足，对比度和清晰度较低。对于在暗态环境下拍摄得到的不清晰的彩色照片，可以利用上述经过处理的黑白照片对上述彩色图进行优化。彩色照片应与黑白照片的拍摄物体相同、拍摄时间相同、且拍摄角度基本一致，在这种情况下彩色照片才能与黑白照片进行融合。对上述彩色照片和黑白照片进行融合时，上述步骤14，根据所述M个输出像素点生成输出图像，具体包括：

步骤141：根据所述M个输出像素点的灰度值，生成第一灰度图。

将输出像素点按照一定顺序阵列排列得到灰度图，通常情况下，生成的第一灰度图为矩形。

步骤142：基于所述第一灰度图和所述第二输入图像，融合生成输出图像。

通过上述步骤合成得到的多个输出像素点随后还可以与彩色图片进一步进行合成，以“彩色相机+黑白相机”结构的双摄像头为例，上述输入像素点是通过黑白相机拍摄得到的并经过合成优化的输出像素点，多个输出像素点可以组成黑白图，该黑白图还可以和彩色相机拍摄得到的彩色图进一步合成，在合成过程中，黑白图可以辅助提高彩色图的亮度和对比度，最终合成得到的照片同时具有彩色图的颜色以及黑白图的亮度和对比度，具有较好的成像效果。

当上述灰度图和彩色图的像素点数量相同，且阵列排布方式也相同时，灰度图中的像素点与彩色图中的像素点一一对应，此时将灰度图中的像素点与相对应的彩色图中的像素点进行融合，生成输出图像。输出图像与第二输入图像相比具有更强的对比度，另外，相同像素数量的黑白相机与彩色相机相比，黑白相机拍摄得到的灰度图的细节精度更高，所以，与第二输入图像相比，本方案融合生成的输出图像具有更高的精度，更高的对比度，图像效果更好。

当上述灰度图和彩色图的像素点数量不同或者数量相同阵列排布方式不同，且灰度图和彩色图的像素点数量相差较大时，可以对像素点数量少的图进行拉伸，如图8所示，灰度图Z1包括按照2行2列排布的4个像素点，彩色图Z2包括按照4行4列排布的16个像素点，此时灰度图Z1的像素点数量与彩色图的像素点数量相差较大，可以将灰度图Z1进行拉伸，将拉伸后的灰度图Z1与彩色图Z2进行融合，融合时1个灰度图中的像素点对应4个彩色图中的像素点，即与1个灰度图中像素点相重合的4个彩色图中的像素点均根据这1个灰度值进行融合，经过融合可以得到按照4行4列排布的16个像素点，生成输出图像Z’。对于像素点数量相差较多的灰度图与彩色图，本方案能实现灰度图与彩色图的融合，融合后生成的输出图像对比度较高，能改善暗态环境下拍摄的图片的效果。

当上述灰度图和彩色图的像素点数量不同或者阵列排布方式不同，且灰度图和彩色图的像素点数量相差较小时，可以将彩色图和灰度图重叠，选取完全重叠的区域进行融合，生成输出图像。如图9所示，灰度图Z1包括按照4行5列排布的20个像素点，彩色图Z2包括5行4列排布的20个像素点，虽然灰度图Z1与彩色图Z2的像素点数量相同但由于阵列排布方式不同，因此灰度图Z1与彩色图Z2中的像素点不能一一对应，此时，可以将灰度图Z1与彩色图Z2重叠，仅保留重叠的区域进行融合，融合时灰度图Z1与彩色图Z2中的像素点一一对应。具体的，如图9所示，以左上角为基准将灰度图Z1与彩色图Z2进行重叠，得到4行4列排布的16个像素点，融合后生成的输出图像Z’如图9中所示。本方案的输出图像Z’具有较高的对比度，同时具有较高的分辨率，从而实现对图片整体效果的优化。

需要说明的是，本申请提供的附图主要用于示意多个像素点的阵列结构，用于说明融合时的对应关系，附图中填充像素点的斜线阴影仅用于示意，在实际应用过程中，两个像素点的融合应按照实际需求的相关算法进行计算。

基于上述实施例所述的方法，在上述步骤12，采用预设边长的滑动窗口以预设步长遍历所述第一输入图像，得到M个子图像，每个子图像由位于所述滑动窗口内的T个输入像素点组成之前，所述方法还包括：

检测所述第一输入图像的对比度是否大于预设值，上述步骤12，采用预设边长的滑动窗口以预设步长遍历所述第一输入图像，得到M个子图像，每个子图像由位于所述滑动窗口内的T个输入像素点组成，包括：

在检测到所述第一输入图像的对比度小于或等于所述预设值的情况下，采用预设边长的滑动窗口以预设步长遍历所述第一输入图像，得到M个子图像。

本申请在获取第一输入图像之后，先判断所述第一输入图像的对比度是否大于预设值，该步骤主要用于判断当前获取的第一输入图像是否是在暗态环境下拍摄的照片，照片是否需要提升对比度。在判断对比度是否达到预设值的基础上，还可以进一步根据第一输入图像的亮度、清晰度等指标提高判断的准确性。当第一输入图像的对比度小于或等于预设值时，可以确定照片中多个像素点的灰度值相接近，整体照片不清晰，因此，执行步骤12，对照片的效果进行优化。当第一输入图像的对比度大于或等于预设值时，可以确定照片中多个像素点的灰度值相差较大，整体照片比较清晰，因此，可以不进行优化直接生成输出图像。

本申请提供的技术方案能判断第一输入图像的对比度是否达到预设值，进而确定该第一输入图像是否清晰，进而对不清晰的图像进行优化处理，对于清晰的图像直接生成输出图像，本方案在拍摄大量图像时可以简化图像的处理过程，着重对不清晰的图像进行优化处理，提高处理图像的效率，同时保证生成的多个输出图像的效果较好。

本申请提供一种终端设备，如图10a所示，包括：

第一输入图像获取模块101，用于获取第一输入图像，所述第一输入图像包括N个输入像素点；

子图像获取模块102，用于采用预设边长的滑动窗口以预设步长遍历所述第一输入图像，得到M个子图像，每个子图像由位于所述滑动窗口内的T个输入像素点组成；

像素点合成模块103，用于基于每个所述子图像所包含的T个输入像素点，将所述M个子图像进行像素点合成，生成M个输出像素点；

输出图像生成模块104，用于根据所述M个输出像素点生成输出图像；

其中，相邻的两个所述子图像中包含至少两个相同的输入像素点；所述预设步长小于所述预设边长；N、M、T均为正整数。

所述子图像获取模块102与所述第一输入图像获取模块101以及所述像素点合成模块103相连，所述像素点合成模块103与所述输出图像生成模块104相连，连接关系参见图10a。

在本实施例中，通过将多个输入像素点合成多个输出像素点的方式提高拍摄照片中像素点的亮度和对比度，在合成输出像素点的过程中，至少两个输入像素点多次包含在不同子图像中，使输出像素点的数量与输入像素点的数量相接近，避免在合成像素点的过程中过多的降低拍摄图片的分辨率。由此，在昏暗的环境下，本申请提供的技术方案能对瞬时拍摄得到的输入像素点进行合成，得到对比度高、亮度高的输出图像，从而提高输入图像整体成像效果。

基于上述实施例提供的终端设备，所述滑动窗口为边长为D个像素点的正方形，所述预设步长为E个像素点，其中，所述D为大于1的整数，所述E为小于所述D的正整数。

本申请实施例提供的方案能将输入像素点利用滑动窗口框选得到多个子图像，由于多个输入像素点被重复框选在不同的子图像中，因此，得到的子图像的数量与输入像素点的数量相接近。随后生成的输出图像的像素点数量与输入图像的像素点数量基本相同，避免在图像处理的过程中过多的降低图像分辨率，有效提高输出图像的清晰度。

基于上述实施例提供的终端设备，所述第一输入图像为灰度图；

则所述像素点合成模块103，具体用于：

计算每个子图像包含的输入像素点的灰度值之和，并将所述灰度值之和确定为与所述子图像对应的输出像素点的灰度值；其中，每个子图像对应一个输出像素点。

在暗态环境下，本方案能提高灰度图的整体亮度，增强对比度，提高图片清晰度。

基于上述实施例提供的终端设备，所述终端设备还包括：

第二输入图像获取模块，用于获取第二输入图像，所述第二输入图像为彩色图；

则所述输出图像生成模块104，具体用于：

根据所述M个输出像素点的灰度值，生成第一灰度图；

基于所述第一灰度图和所述第二输入图像，融合生成输出图像。

本方案能实现灰度图与彩色图的融合，融合后生成的输出图像对比度较高，能改善暗态环境下拍摄的图片的效果。

基于上述实施例提供的终端设备，所述终端设备还包括：

对比度检测模块，检测所述第一输入图像的对比度是否大于预设值，

所述子图像获取模块，具体用于：在检测到所述第一输入图像的对比度小于或等于预设值的情况下，采用预设边长的滑动窗口以预设步长遍历所述第一输入图像，得到M个子图像。

本申请提供的技术方案能检测第一输入图像的对比度是否大于预设值，进而确定该第一输入图像是否清晰，进而对不清晰的图像进行优化处理，对于清晰的图像直接生成输出图像，本方案在拍摄大量图像时可以简化图像的处理过程，着重对不清晰的图像进行优化处理，提高处理图像的效率，同时保证生成的多个输出图像的效果较好。

本申请可以应用于包含有黑白相机的电子设备，以黑白相机为例，相机中包含有多个像素点，每个像素点电路如图10b所示，电路中包括光电二极管(photodiode，PD)、转移开关(transfer gate，TG)、复位开关(reset gate，RG)、源跟随器(source followertransistor，SF)、选择开关(select transistor，SEL)。具体的连接方式如图10b所示，在黑白相机的图像传感器中，可以包括多个如图10b所示的像素电路，多个像素电路可以阵列排布，每个像素电路的输出端可以连接至ADC模拟数字转换器，实现信号输出。在本方案中，SEL位于ADC与像素电路之间，能有效减少ADC开闭的次数，起到降低功耗的作用，上述电路结构能控制输出信号的时刻和多个像素电路输出的次序，能实现上述实施例所述的图像处理方法。

图11为实现本发明各个实施例的一种移动终端的硬件结构示意图，该移动终端1100包括但不限于：射频单元1101、网络模块1102、音频输出单元1103、输入单元1104、传感器1105、显示单元1106、用户输入单元1107、接口单元1108、存储器1109、处理器1110、以及电源1111等部件。本领域技术人员可以理解，图11中示出的移动终端结构并不构成对移动终端的限定，移动终端可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。在本发明实施例中，移动终端包括但不限于手机、平板电脑、笔记本电脑、掌上电脑、车载终端、可穿戴设备、以及计步器等。

其中，射频单元1101，用于获取第一输入图像，所述第一输入图像包括多个输入像素点。

处理器1110，采用预设边长的滑动窗口、以预设步长遍历所述第一输入图像，得到多个子图像，所述子图像由位于所述滑动窗口内的多个输入像素点组成，所述预设步长小于所述预设边长；根据组成所述多个子图像的输入像素点，将所述多个子图像各自所包含的多个输入像素点，合成为与所述多个子图像各自对应的输出像素点；根据所述多个输出像素点生成输出图像。

在本发明实施例中，通过将多个输入像素点合成多个输出像素点的方式提高拍摄照片中像素点的亮度和对比度，在合成输出像素点的过程中，至少一个输入像素点多次包含在不同子图像中，使输出像素点的数量与输入像素点的数量相接近，避免在合成像素点的过程中过多的降低拍摄图片的分辨率。由此，在昏暗的环境下，本申请提供的技术方案能对瞬时拍摄得到的输入像素点进行合成，得到对比度高、亮度高的输出图像，从而提高输入图像整体成像效果。

应理解的是，本发明实施例中，射频单元1101可用于收发信息或通话过程中，信号的接收和发送，具体的，将来自基站的下行数据接收后，给处理器1110处理；另外，将上行的数据发送给基站。通常，射频单元1101包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器、双工器等。此外，射频单元1101还可以通过无线通信系统与网络和其他设备通信。

移动终端通过网络模块1102为用户提供了无线的宽带互联网访问，如帮助用户收发电子邮件、浏览网页和访问流式媒体等。

音频输出单元1103可以将射频单元1101或网络模块1102接收的或者在存储器1109中存储的音频数据转换成音频信号并且输出为声音。而且，音频输出单元1103还可以提供与移动终端1100执行的特定功能相关的音频输出(例如，呼叫信号接收声音、消息接收声音等等)。音频输出单元1103包括扬声器、蜂鸣器以及受话器等。

输入单元1104用于接收音频或视频信号。输入单元1104可以包括图形处理器(Graphics Processing Unit，GPU)11041和麦克风11042，图形处理器11041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。处理后的图像帧可以显示在显示单元1106上。经图形处理器11041处理后的图像帧可以存储在存储器1109(或其它存储介质)中或者经由射频单元1101或网络模块1102进行发送。麦克风11042可以接收声音，并且能够将这样的声音处理为音频数据。处理后的音频数据可以在电话通话模式的情况下转换为可经由射频单元1101发送到移动通信基站的格式输出。

移动终端1100还包括至少一种传感器1105，比如光传感器、运动传感器以及其他传感器。具体地，光传感器包括环境光传感器及接近传感器，其中，环境光传感器可根据环境光线的明暗来调节显示面板11061的亮度，接近传感器可在移动终端1100移动到耳边时，关闭显示面板11061和/或背光。作为运动传感器的一种，加速计传感器可检测各个方向上(一般为三轴)加速度的大小，静止时可检测出重力的大小及方向，可用于识别移动终端姿态(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等；传感器1105还可以包括指纹传感器、压力传感器、虹膜传感器、分子传感器、陀螺仪、气压计、湿度计、温度计、红外线传感器等，在此不再赘述。

显示单元1106用于显示由用户输入的信息或提供给用户的信息。显示单元1106可包括显示面板11061，可以采用液晶显示器(Liquid Crystal Display，LCD)、有机发光二极管(Organic Light-Emitting Diode,OLED)等形式来配置显示面板11061。

用户输入单元807可用于接收输入的数字或字符信息，以及产生与移动终端的用户设置以及功能控制有关的键信号输入。具体地，用户输入单元1107包括触控面板11071以及其他输入设备11072。触控面板11071，也称为触摸屏，可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触控面板11071上或在触控面板11071附近的操作)。触控面板11071可包括触摸检测装置和触摸控制器两个部分。其中，触摸检测装置检测用户的触摸方位，并检测触摸操作带来的信号，将信号传送给触摸控制器；触摸控制器从触摸检测装置上接收触摸信息，并将它转换成触点坐标，再送给处理器1110，接收处理器1110发来的命令并加以执行。此外，可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触控面板11071。除了触控面板11071，用户输入单元1107还可以包括其他输入设备11072。具体地，其他输入设备11072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆，在此不再赘述。

进一步的，触控面板11071可覆盖在显示面板11061上，当触控面板11071检测到在其上或附近的触摸操作后，传送给处理器1110以确定触摸事件的类型，随后处理器1110根据触摸事件的类型在显示面板11061上提供相应的视觉输出。虽然在图11中，触控面板11071与显示面板11061是作为两个独立的部件来实现移动终端的输入和输出功能，但是在某些实施例中，可以将触控面板11071与显示面板11061集成而实现移动终端的输入和输出功能，具体此处不做限定。

接口单元1108为外部装置与移动终端1100连接的接口。例如，外部装置可以包括有线或无线头戴式耳机端口、外部电源(或电池充电器)端口、有线或无线数据端口、存储卡端口、用于连接具有识别模块的装置的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等等。接口单元1108可以用于接收来自外部装置的输入(例如，数据信息、电力等等)并且将接收到的输入传输到移动终端1100内的一个或多个元件或者可以用于在移动终端1100和外部装置之间传输数据。

存储器1109可用于存储软件程序以及各种数据。存储器1109可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等；存储数据区可存储根据手机的使用所创建的数据(比如音频数据、电话本等)等。此外，存储器1109可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。

处理器1110是移动终端的控制中心，利用各种接口和线路连接整个移动终端的各个部分，通过运行或执行存储在存储器1109内的软件程序和/或模块，以及调用存储在存储器1109内的数据，执行移动终端的各种功能和处理数据，从而对移动终端进行整体监控。处理器1110可包括一个或多个处理单元；优选的，处理器1110可集成应用处理器和调制解调处理器，其中，应用处理器主要处理操作系统、用户界面和应用程序等，调制解调处理器主要处理无线通信。可以理解的是，上述调制解调处理器也可以不集成到处理器1110中。

移动终端1100还可以包括给各个部件供电的电源1111(比如电池)，优选的，电源1111可以通过电源管理系统与处理器1110逻辑相连，从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。

另外，移动终端1100包括一些未示出的功能模块，在此不再赘述。

优选的，本发明实施例还提供一种移动终端，包括处理器1110，存储器1109，存储在存储器1109上并可在所述处理器1110上运行的计算机程序，该计算机程序被处理器1110执行时实现上述一种图像处理方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。

本发明实施例还提供一种计算机可读存储介质，计算机可读存储介质上存储有计算机程序，该计算机程序被处理器执行时实现上述一种图像处理方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。其中，所述的计算机可读存储介质，如只读存储器(Read-Only Memory，简称ROM)、随机存取存储器(Random Access Memory，简称RAM)、磁碟或者光盘等。

需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。

通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台终端(可以是手机，计算机，服务器，空调器，或者网络设备等)执行本发明各个实施例所述的方法。

上面结合附图对本发明的实施例进行了描述，但是本发明并不局限于上述的具体实施方式，上述的具体实施方式仅仅是示意性的，而不是限制性的，本领域的普通技术人员在本发明的启示下，在不脱离本发明宗旨和权利要求所保护的范围情况下，还可做出很多形式，均属于本发明的保护之内。

Claims (8)

1.一种图像处理方法，其特征在于，包括：

获取第一输入图像，所述第一输入图像包括N个输入像素点；

采用预设边长的滑动窗口以预设步长遍历所述第一输入图像，得到M个子图像，每个子图像由位于所述滑动窗口内的T个输入像素点组成；

基于每个所述子图像所包含的T个输入像素点，将所述M个子图像进行像素点合成，生成M个输出像素点；

根据所述M个输出像素点，生成输出图像；

其中，相邻的两个所述子图像中包含至少两个相同的输入像素点；所述预设步长小于所述预设边长；N、M、T均为正整数；

其中，所述第一输入图像为灰度图；则，

所述基于每个所述子图像所包含的T个输入像素点，将所述M个子图像进行像素点合成，生成M个输出像素点，包括：

计算每个子图像包含的输入像素点的灰度值之和，并将所述灰度值之和确定为所述子图像对应的输出像素点的灰度值；

其中，每个子图像对应一个输出像素点；

其中，所述根据所述M个输出像素点，生成输出图像之前，所述方法还包括：

获取第二输入图像，所述第二输入图像为彩色图；

则所述根据所述M个输出像素点，生成输出图像，包括：

根据所述M个输出像素点的灰度值，生成第一灰度图；

基于所述第一灰度图和所述第二输入图像，融合生成输出图像；

所述基于所述第一灰度图和所述第二输入图像，融合生成输出图像，包括：

当所述第一灰度图与所述第二输入图像的像素点数量相同，且阵列排布方式相同时，将所述第一灰度图中的像素点与相对应的所述第二输入图像中的像素点进行融合，生成输出图像；

当所述第一灰度图与所述第二输入图像的像素点数量不同或阵列排布方式不同时，选取所述第一灰度图与所述第二输入图像重叠的区域进行融合，生成输出图像，或将像素点数量少的图像拉伸后进行融合，生成输出图像。

2.根据权利要求1所述的方法，其特征在于，所述滑动窗口为边长为D个像素点的正方形，所述预设步长为E个像素点，其中，所述D为大于1的整数，所述E为小于所述D的正整数。

3.根据权利要求1所述的方法，其特征在于，在所述采用预设边长的滑动窗口以预设步长遍历所述第一输入图像，得到M个子图像，每个子图像由位于所述滑动窗口内的T个输入像素点组成之前，所述方法还包括：

检测所述第一输入图像的对比度是否大于预设值，

所述采用预设边长的滑动窗口以预设步长遍历所述第一输入图像，得到M个子图像，每个子图像由位于所述滑动窗口内的T个输入像素点组成，包括：

在检测到所述第一输入图像的对比度小于或等于所述预设值的情况下，采用预设边长的滑动窗口以预设步长遍历所述第一输入图像，得到M个子图像。

4.一种终端设备，其特征在于，包括：

第一输入图像获取模块，用于获取第一输入图像，所述第一输入图像包括N个输入像素点；

子图像获取模块，用于采用预设边长的滑动窗口以预设步长遍历所述第一输入图像，得到M个子图像，每个子图像由位于所述滑动窗口内的T个输入像素点组成；

像素点合成模块，基于每个所述子图像所包含的T个输入像素点，将所述M个子图像进行像素点合成，生成M个输出像素点；

输出图像生成模块，用于根据所述M个输出像素点生成输出图像；

其中，相邻的两个所述子图像中包含至少两个相同的输入像素点；所述预设步长小于所述预设边长；N、M、T均为正整数；

其中，所述第一输入图像为灰度图；则，

所述像素点合成模块，具体用于：

计算每个子图像包含的输入像素点的灰度值之和，并将所述灰度值之和确定为所述子图像对应的输出像素点的灰度值；

其中，每个子图像对应一个输出像素点；

其中，所述终端设备还包括：

第二输入图像获取模块，用于获取第二输入图像，所述第二输入图像为彩色图；

则所述输出图像生成模块，具体用于：

根据所述M个输出像素点的灰度值，生成第一灰度图；

基于所述第一灰度图和所述第二输入图像，融合生成输出图像；

所述输出图像生成模块，用于：

当所述第一灰度图与所述第二输入图像的像素点数量相同，且阵列排布方式相同时，将所述第一灰度图中的像素点与相对应的所述第二输入图像中的像素点进行融合，生成输出图像；

当所述第一灰度图与所述第二输入图像的像素点数量不同或阵列排布方式不同时，选取所述第一灰度图与所述第二输入图像重叠的区域进行融合，生成输出图像，或将像素点数量少的图像拉伸后进行融合，生成输出图像。

5.根据权利要求4所述的终端设备，其特征在于，所述滑动窗口为边长为D个像素点的正方形，所述预设步长为E个像素点，其中，所述D为大于1的整数，所述E为小于所述D的正整数。

6.根据权利要求4所述的终端设备，其特征在于，所述终端设备还包括：

对比度检测模块，检测所述第一输入图像的对比度是否大于预设值，

所述子图像获取模块，具体用于：在检测到所述第一输入图像的对比度小于或等于预设值的情况下，采用预设边长的滑动窗口以预设步长遍历所述第一输入图像，得到M个子图像。

7.一种终端设备，其特征在于，包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述计算机程序被所述处理器执行时实现如权利要求1至3中任一项所述的方法的步骤。

8.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现如权利要求1至3中任一项所述的方法的步骤。

Images