CN105635568B

CN105635568B - 一种移动终端中的图像处理方法和移动终端

Info

Publication number: CN105635568B
Application number: CN201510992003.2A
Authority: CN
Inventors: 穆青
Original assignee: Hisense Mobile Communications Technology Co Ltd
Current assignee: Hisense Mobile Communications Technology Co Ltd
Priority date: 2015-12-25
Filing date: 2015-12-25
Publication date: 2019-09-17
Anticipated expiration: 2035-12-25
Also published as: CN105635568A

Abstract

本发明公开了一种移动终端中的图像处理方法和移动终端，用于解决现有技术中存在的由于曝光时间和预览帧率之间的矛盾影响了移动终端的拍照功能的性能，降低了用户体验的问题。方法包括：在确定出第一摄像头的预览帧率小于或等于设定的帧率阈值后，将第一摄像头和第二摄像头的预览帧率分别固定设置为帧率阈值；将第一摄像头当前采集到的第一图像与第二摄像头在同一时刻采集到的第二图像进行合成，得到合成图像；调整第二摄像头的曝光值，以使合成图像的亮度满足设定的亮度要求；将合成图像传输到移动终端的显示屏中进行显示。在保证预览不卡顿的情况下，能够提升输出图像的亮度，从而提高用户体验。

Description

一种移动终端中的图像处理方法和移动终端

技术领域

本发明涉及图像处理技术领域，特别涉及一种移动终端中的图像处理方法和移动终端。

背景技术

目前，具有照相功能的移动终端已很普遍，比如手机、平板电脑等。人们在旅游或者闲暇时，可以使用具有照相功能的移动终端，对自己喜欢的物体，比如建筑物等进行拍摄。

在使用移动终端进行拍照时，被拍摄景物通过移动终端中的摄像头中的镜头，将景物的光学图像(反射光线)投射到该摄像头中的图像传感器(sensor)上，由图像传感器将光学图像信号转换成电信号，电信号经过一定的变换和处理后，再通过专用的接口(如MIPI(Mobile Industry Processor Interface)接口)传输到移动终端中的主板进行处理，最终转换成移动终端的屏幕上能够看到的图像，在拍摄时，可以把预览图像通过一定的格式存储(如JPG格式)在存储移动终端的内存或存储卡上。

移动终端中的图像传感器的曝光时间和预览帧率是成反比的，曝光时间越长，预览帧率越低，从而会导致预览时出现卡顿；而曝光不足的话，会导致拍摄画面不清楚。曝光时间和预览帧率之间的矛盾影响了移动终端的拍照功能的性能，降低了用户体验。

发明内容

本发明实施例提供了一种移动终端中的图像处理方法和移动终端，用于解决现有技术中存在的由于曝光时间和预览帧率之间的矛盾影响了移动终端的拍照功能的性能，降低了用户体验的问题。

第一方面，一种移动终端中的图像处理方法，包括：

在确定出第一摄像头的预览帧率小于或等于设定的帧率阈值后，将所述第一摄像头和第二摄像头的预览帧率分别固定设置为所述帧率阈值，其中，所述第一摄像头和第二摄像头位于移动终端同一侧且并排设置；

将所述第一摄像头当前采集到的第一图像与所述第二摄像头在同一时刻采集到的第二图像进行合成，得到合成图像；

调整所述第二摄像头的曝光值，以使所述合成图像的亮度满足设定的亮度要求；

将所述合成图像传输到所述移动终端的显示屏中进行显示。

可选的，将所述第一摄像头当前采集到的第一图像与所述第二摄像头在同一时刻采集到的第二图像进行合成，得到合成图像，包括：

确定出所述第一图像与所述第二图像中相互重叠的第一区域；

将所述第一图像和所述第二图像中的第一区域内的图像进行叠加处理；

将叠加后得到的图像与所述第一图像中除所述第一区域之外的第二区域内的图像进行合成，得到所述合成图像。

可选的，确定出所述第一图像与所述第二图像中相互重叠的第一区域，包括：

根据物距阈值、所述第一摄像头能够进行对焦的最大物距、以及所述第一摄像头与所述第二摄像头之间的距离，确定出所述第一图像与所述第二图像中相互重叠的第一区域的宽度，其中，所述物距阈值用于表征所述第一摄像头与所述第二摄像头所拍摄的图像中重叠区域的物体的最小物距；

根据所述第一区域的宽度，分别确定出所述第一图像和所述第二图像中的所述第一区域。

可选的，根据物距阈值、所述第一摄像头能够进行对焦的最大物距、以及所述第一摄像头与所述第二摄像头之间的距离，按照如下公式，确定出所述第一图像与所述第二图像中相互重叠的第一区域的宽度：

其中，W表示所述第一区域的宽度，L表示所述第一摄像头与所述第二摄像头之间的距离，H表示所述物距阈值，H1表示所述第一摄像头能够进行对焦的最大物距。

可选的，该方法还包括：

根据所述第一摄像头的视场角、所述第二摄像头的视场角、以及所述第一摄像头与所述第二摄像头之间的距离，确定出物距阈值。

可选的，根据所述第一摄像头的视场角、所述第二摄像头的视场角、以及所述第一摄像头与所述第二摄像头之间的距离，按照如下公式，确定出物距阈值：

H＝a*b*sin((A+B)/2)/L，其中：

其中，H表示所述物距阈值，A表示所述第一摄像头的视场角，B表示所述第二摄像头的视场角，L表示所述第一摄像头与所述第二摄像头之间的距离。

基于上述任一实施例，可选的，触发第二摄像头工作之后，该方法还包括：

在确定出设定时长内所述合成图像的亮度在不调整所述第二摄像头的曝光值的情况下能够满足所述亮度要求后，停止所述第二摄像头工作，并将所述第一摄像头的预览帧率设置为自动调节；

将所述第一摄像头采集到的图像传输到所述显示屏中进行显示。

第二方面，一种移动终端，所述移动终端包括位于同一侧且并排设置的第一摄像头和第二摄像头，所述移动终端还包括：

确定模块，用于在确定出所述第一摄像头的预览帧率小于或等于设定的帧率阈值后，将所述第一摄像头和所述第二摄像头的预览帧率分别固定设置为所述帧率阈值；

图像合成模块，用于将所述第一摄像头当前采集到的第一图像与所述第二摄像头在同一时刻采集到的第二图像进行合成，得到合成图像；

曝光调整模块，用于调整所述第二摄像头的曝光值，以使所述合成图像的亮度满足设定的亮度要求；

显示模块，用于将所述合成图像传输到所述移动终端的显示屏中进行显示。

可选的，所述图像合成模块具体用于：

确定出所述第一图像与所述第二图像中相互重叠的第一区域；将所述第一图像和所述第二图像中的第一区域内的图像进行叠加处理；将叠加后得到的图像与所述第一图像中除所述第一区域之外的第二区域内的图像进行合成，得到所述合成图像。

可选的，所述图像合成模块具体用于：

根据物距阈值、所述第一摄像头能够进行对焦的最大物距、以及所述第一摄像头与所述第二摄像头之间的距离，确定出所述第一图像与所述第二图像中相互重叠的第一区域的宽度，其中，所述物距阈值用于表征所述第一摄像头与所述第二摄像头所拍摄的图像中重叠区域的物体的最小物距；根据所述第一区域的宽度，分别确定出所述第一图像和所述第二图像中的所述第一区域。

可选的，所述图像合成模块根据物距阈值、所述第一摄像头能够进行对焦的最大物距、以及所述第一摄像头与所述第二摄像头之间的距离，按照如下公式，确定出所述第一图像与所述第二图像中相互重叠的第一区域的宽度：

可选的，所述移动终端还包括：

阈值确定模块，用于根据所述第一摄像头的视场角、所述第二摄像头的视场角、以及所述第一摄像头与所述第二摄像头之间的距离，确定出物距阈值。

可选的，所述阈值确定模块根据所述第一摄像头的视场角、所述第二摄像头的视场角、以及所述第一摄像头与所述第二摄像头之间的距离，按照如下公式，确定出物距阈值：

H＝a*b*sin((A+B)/2)/L，其中：

基于上述任一实施例，可选的，所述确定模块触发第二摄像头工作之后，还用于：

在确定出设定时长内所述合成图像的亮度在不调整所述第二摄像头的曝光值的情况下能够满足所述亮度要求后，停止所述第二摄像头工作，并将所述第一摄像头的预览帧率设置为自动调节；将所述第一摄像头采集到的图像传输到所述显示屏中进行显示。

本发明实施例提供的方法和设备中，在确定出第一摄像头的预览帧率小于或等于设定的帧率阈值后，将第一摄像头和第二摄像头的预览帧率分别固定设置为帧率阈值，以保证预览不发生卡顿现象；将第一摄像头和第二摄像头分别在当前时间点采集到的图像进行合成，得到合成图像；调整所述第二摄像头的曝光值，以使所述合成图像的亮度满足设定的亮度要求，从而提升了合成图像的亮度；以及将合成图像传输到所述移动终端的显示屏中进行显示。本发明实施例在保证预览不卡顿的情况下，能够提升输出图像的亮度，从而提高用户体验。

附图说明

图1为本发明实施例一中的一种移动终端中的图像处理方法的流程图；

图2为本发明实施例一中第一摄像头和第二摄像头同一时刻采集到的图像中产生的重叠画面的示意图；

图3A为本发明实施例一中的第一图像中的第一区域的示意图；

图3B为本发明实施例一中的第一图像中的第一区域的示意图；

图4为本发明实施例一中确定物距阈值的示意图；

图5为本发明实施例一中确定第一区域的宽度的示意图；

图6为本发明实施例二中的一种移动终端的示意图。

具体实施方式

为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

本发明实施例一中，提供了一种移动终端中的图像处理方法，如图1所示，该方法包括如下步骤：

S11、在确定出第一摄像头的预览帧率小于或等于设定的帧率阈值后，将第一摄像头和第二摄像头的预览帧率分别固定设置为帧率阈值，其中，第一摄像头和第二摄像头位于移动终端同一侧且并排设置。

一般情况下，摄像头的预览帧率都是动态调节的，即根据环境光的亮度自动调节预览帧率的大小，通常，预览帧率的调节范围为7.5fps～30fps。

本发明实施例中，帧率阈值为预览图像时可接受的最低的预览帧率，例如，帧率阈值可以为预览不卡顿的情况下的最小预览帧率。帧率阈值可由用户设定，也可以根据经验值或仿真确定，本发明实施例中不作限定。

本步骤在实施中，在用户启动移动终端的拍照功能后，可以同时启动第一摄像头与第二摄像头工作，此时，仅将第一摄像头当前采集到的图像传输到该移动终端的显示屏中进行显示。在用户启动移动终端的拍照功能后，也可以仅启动第一摄像头工作，在在确定出第一摄像头的预览帧率小于或等于设定的帧率阈值后，再启动第二摄像头工作，此时，将所述第一摄像头当前采集到的第一图像与所述第二摄像头在同一时刻采集到的第二图像的合成图像传输到该移动终端的显示屏中进行显示。本发明实施例不对第一摄像头与第二摄像头的启动顺序进行限定。

本发明实施例中，第一摄像头和第二摄像头可以均为前置摄像头，也可以均为后置摄像头。

S12、将第一摄像头当前采集到的第一图像与第二摄像头在同一时刻采集到的第二图像进行合成，得到合成图像。

本步骤中，在进行图像合成时，需要保证第一摄像头和第二摄像头所采集的图像为同一时刻的图像。

其中，第一摄像头与第二摄像头的分辨率相同。

S13、调整第二摄像头的曝光值，以使合成图像的亮度满足设定的亮度要求。

本步骤在实施时，可以根据合成图像的亮度调整第二摄像头的曝光值，以使合成图像的亮度满足设定的亮度要求；也可以根据第一图像的亮度调整第二摄像头的曝光值，以使合成图像的亮度满足设定的亮度要求；还可以根据合成图像的亮度或第一图像的亮度，通过反馈机制，调整第二摄像头的曝光值，以使合成图像的亮度满足设定的亮度要求。

S14、将合成图像传输到移动终端的显示屏中进行显示。

本发明实施例中，在确定出第一摄像头的预览帧率小于或等于设定的帧率阈值后，将第一摄像头和第二摄像头的预览帧率分别固定设置为帧率阈值，以保证预览不发生卡顿现象；将第一摄像头和第二摄像头分别在当前时间点采集到的图像进行合成，得到合成图像；调整所述第二摄像头的曝光值，以使所述合成图像的亮度满足设定的亮度要求，从而提升了合成图像的亮度；以及将合成图像传输到所述移动终端的显示屏中进行显示。本发明实施例在保证预览不卡顿的情况下，能够提升输出图像的亮度，从而提高用户体验。

本发明实施例中，作为一种可能的实现方式，S12中将第一摄像头当前采集到的第一图像与第二摄像头在同一时刻采集到的第二图像进行合成，得到合成图像，包括如下过程：

具体的，先确定出第一摄像头和第二摄像头同一时刻采集到的图像中相互重叠的第一区域；然后，将两幅采集图像中的第一区域进行叠加处理，即将两幅采集图像中的第一区域中的同一位置的像素点的像素值相加；最后，将叠加后得到的图像与第一摄像头采集到的图像中除该第一区域之外的第二区域内的图像进行合成，得到合成图像。

基于上述实施例，可选的，确定出所述第一图像与所述第二图像中相互重叠的第一区域，包括：

根据物距阈值、所述第一摄像头能够进行对焦的最大物距、以及所述第一摄像头与所述第二摄像头之间的距离，确定出所述第一图像和所述第二图像中相互重叠的第一区域的宽度W，其中，所述物距阈值用于表征所述第一摄像头与所述第二摄像头所拍摄的图像中重叠区域的物体的最小物距；

根据所述第一区域的宽度W，分别确定出所述第一图像和所述第二图像中的所述第一区域。

具体的，第一摄像头和第二摄像头在进行图像采集时，同一时刻采集到的图像中一般会产生如图2所示的重叠画面(即第一区域)，图2中的A表示第一摄像头的视场角，B表示第二摄像头的视场角，L表示第一摄像头与第二摄像头之间的间距。先确定出重叠画面的宽度，在根据第一区域的宽度，分别确定出第一摄像头和第二摄像头在同一时刻采集到的图像中的第一区域。其中，第一图像中的第一区域为该第一图像中靠近第二摄像头的一侧向左延伸W后形成的区域，第二图像中的第一区域为该第二图像中靠近第一摄像头的一侧向左延伸W后形成的区域。例如，以第一摄像头与第二摄像头采用图2所示的拍摄方向进行拍摄为例，第一图像中的第一区域为该第一图像的最右侧向左延伸W后形成的区域，如图3A所示中阴影部分所示，第二图像中的第一区域为该第二图像的最左侧向左延伸W后形成的区域，如图3B所示中阴影部分所示。

在实施中，作为一种可选的实现方式，该方法还包括：根据所述第一摄像头的视场角、所述第二摄像头的视场角、以及所述第一摄像头与所述第二摄像头之间的距离，确定出物距阈值。

具体的，物距阈值可以在移动设备出厂之前确定，并将确定出的物距阈值作为移动设备的参数信息写入移动设备的系统中，以便在需要时直接获取；也可以在移动设备初次启动时确定，并将确定出的物距阈值作为移动设备的参数信息写入移动设备的系统中，以便在需要时直接获取；还可以在移动设备的拍摄功能初次启动时确定，并将确定出的物距阈值作为移动设备的参数信息写入移动设备的系统中，以便在需要时直接获取；还可以在每次触发第二摄像头工作时确定，本发明实施例不作限定。

H＝a*b*sin((A+B)/2)/L，其中：

具体的，基于三角形的勾股定理，根据第一摄像头与第二摄像头的参数信息(视场角、第一摄像头与第二摄像头之间的间距等)，可以确定出第一摄像头和第二摄像头在同一时刻采集到的图像产生重叠画面的分界点，即物距阈值。如图4所示，正弦定理公式表示为：

根据上述正弦定理公式可计算得出三角形的边长a和b。该三角形的面积公式为：根据该三角形的面积公式以及三角形的边长a和b的值，能够确定出物距阈值H的值。第一摄像头与第二摄像头在进行拍摄时，对于同一时刻所拍摄的物体，物距超过该物距阈值的物体的成像即为第一摄像头与第二摄像头同一时刻采集到的图像中相互重叠的第一区域。

需要说明的是，第二摄像头能够进行对焦的最大物距与第一摄像头能够进行对焦的最大物距相同。

具体的，如图5所示，根据三角形相似定律，两个相似三角形的高与边长之比相等，即：从而可以确定出所述第一区域的宽度。

具体的，在启动第二摄像头后，若确定出设定时长内所述合成图像的亮度在不调整所述第二摄像头的曝光值的情况下也能够满足所述亮度要求，则停止第二摄像头工作，并将第一摄像头的预览帧率设置为自动调节。

上述方法处理流程可以用软件程序实现，该软件程序可以存储在存储介质中，当存储的软件程序被调用时，执行上述方法步骤。

基于同一发明构思，本发明实施例中还提供了一种移动终端，由于该设备解决问题的原理与上述图1所示的一种移动终端中的图像处理方法相似，因此该移动终端的实施可以参见方法的实施，重复之处不再赘述。

本发明实施例二中，提供了一种移动终端，如图6所示，所述移动终端包括位于同一侧且并排设置的第一摄像头61和第二摄像头62，所述移动终端还包括：

确定模块63，用于在确定出所述第一摄像头的预览帧率小于或等于设定的帧率阈值后，将所述第一摄像头和所述第二摄像头的预览帧率分别固定设置为所述帧率阈值；

图像合成模块64，用于将所述第一摄像头当前采集到的第一图像与所述第二摄像头在同一时刻采集到的第二图像进行合成，得到合成图像；

曝光调整模块65，用于调整所述第二摄像头的曝光值，以使所述合成图像的亮度满足设定的亮度要求；

显示模块66，用于将所述合成图像传输到所述移动终端的显示屏中进行显示。

本发明实施例的移动终端可以为具有拍摄功能的手机、具有拍摄功能的平板电脑、具有拍摄功能的笔记本电脑等，本发明实施例不作限定。

可选的，所述图像合成模块64具体用于：

可选的，所述移动终端还包括：

H＝a*b*sin((A+B)/2)/L，其中：

可选的，所述图像合成模块64根据物距阈值、所述第一摄像头能够进行对焦的最大物距、以及所述第一摄像头与所述第二摄像头之间的距离，按照如下公式，确定出所述第一图像与所述第二图像中相互重叠的第一区域的宽度：

基于上述任一实施例，可选的，所述确定模块63触发第二摄像头工作之后，还用于：

本领域内的技术人员应明白，本发明的实施例可提供为方法、系统、或计算机程序产品。因此，本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。

本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。

这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。

这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。

尽管已描述了本发明的优选实施例，但本领域内的技术人员一旦得知了基本创造性概念，则可对这些实施例作出另外的变更和修改。所以，所附权利要求意欲解释为包括优选实施例以及落入本发明范围的所有变更和修改。

显然，本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样，倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。

Claims

1.一种移动终端中的图像处理方法，其特征在于，该方法包括：

将所述第一摄像头当前采集到的第一图像与所述第二摄像头在同一时刻采集到的第二图像进行合成，得到合成图像，所述第一摄像头和所述第二摄像头的分辨率相同；

将所述合成图像传输到所述移动终端的显示屏中进行显示；

其中，将所述第一摄像头当前采集到的第一图像与所述第二摄像头在同一时刻采集到的第二图像进行合成，得到合成图像，包括：

2.如权利要求1所述的方法，其特征在于，确定出所述第一图像与所述第二图像中相互重叠的第一区域，包括：

3.如权利要求2所述的方法，其特征在于，该方法还包括：

4.如权利要求3所述的方法，其特征在于，根据所述第一摄像头的视场角、所述第二摄像头的视场角、以及所述第一摄像头与所述第二摄像头之间的距离，按照如下公式，确定出物距阈值：

H＝a*b*sin((A+B)/2)/L，其中：

5.如权利要求2所述的方法，其特征在于，根据物距阈值、所述第一摄像头能够进行对焦的最大物距、以及所述第一摄像头与所述第二摄像头之间的距离，按照如下公式，确定出所述第一图像与所述第二图像中相互重叠的第一区域的宽度：

6.如权利要求1～5任一项所述的方法，其特征在于，触发第二摄像头工作之后，该方法还包括：

7.一种移动终端，其特征在于，所述移动终端包括位于同一侧且并排设置的第一摄像头和第二摄像头，所述移动终端还包括：

图像合成模块，用于将所述第一摄像头当前采集到的第一图像与所述第二摄像头在同一时刻采集到的第二图像进行合成，得到合成图像，所述第一摄像头和所述第二摄像头的分辨率相同；

显示模块，用于将所述合成图像传输到所述移动终端的显示屏中进行显示；

其中，所述图像合成模块具体用于：

8.如权利要求7所述的移动终端，其特征在于，所述图像合成模块具体用于：

9.如权利要求8所述的移动终端，其特征在于，所述移动终端还包括：

10.如权利要求9所述的移动终端，其特征在于，所述阈值确定模块根据所述第一摄像头的视场角、所述第二摄像头的视场角、以及所述第一摄像头与所述第二摄像头之间的距离，按照如下公式，确定出物距阈值：

H＝a*b*sin((A+B)/2)/L，其中：

11.如权利要求8所述的移动终端，其特征在于，所述图像合成模块根据物距阈值、所述第一摄像头能够进行对焦的最大物距、以及所述第一摄像头与所述第二摄像头之间的距离，按照如下公式，确定出所述第一图像与所述第二图像中相互重叠的第一区域的宽度：

12.如权利要求7～11任一项所述的移动终端，其特征在于，所述确定模块触发第二摄像头工作之后，还用于：