CN107566739B - 一种拍照方法及移动终端 - Google Patents
一种拍照方法及移动终端 Download PDFInfo
- Publication number
- CN107566739B CN107566739B CN201710971163.8A CN201710971163A CN107566739B CN 107566739 B CN107566739 B CN 107566739B CN 201710971163 A CN201710971163 A CN 201710971163A CN 107566739 B CN107566739 B CN 107566739B
- Authority
- CN
- China
- Prior art keywords
- image data
- images
- frames
- image
- frame
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Landscapes
- Studio Devices (AREA)
- Image Processing (AREA)
Abstract
本发明提供了一种拍照方法及移动终端,涉及通信领域,解决现有技术中动态范围扩展技术拍照性能差,且动态范围扩展效果差的问题。方法包括:获取摄像头采集的N组目标图像数据;将每组目标图像数据中的至少两帧图像进行动态范围扩展,生成M帧第一合成图像;将M帧第一合成图像进行图像合成处理,生成X帧第二合成图像;若接收到拍照指令,则根据X帧第二合成图像,生成照片;其中,每组目标图像数据包括至少两帧图像,且每组目标图像数据中不同图像对应的曝光参数不同;N、M和X均为正整数,M小于或等于N,且X小于或等于M。本发明的方案利用多帧合成处理可以实时保存高动态范围高质量的图像,提高了拍照性能,提高了动态范围扩展效果。
Description
技术领域
本发明涉及通信领域,尤其涉及一种拍照方法及移动终端。
背景技术
当用户使用普通相机拍照时遇到下面几种场景时,会很难捕捉到真实的画面:拍摄一些发光物体,比如太阳,灯光等等;逆光场景,画面里物体反射率差异很大的场景。但由于人眼具有局部适应性,且人眼感知亮度的动态范围很广,因此人眼可以看到的很多细节,用普通相机和普通的拍照方式很难完全捕捉到。目前很多动态范围扩展技术,比如动态范围扩展的传感器技术、包围式曝光等,基本都需要在触发拍照动作后才进行抓帧,拍照性能差,且动态范围扩展效果差,容易出现鬼影。
发明内容
本发明实施例提供一种拍照方法及移动终端,以解决现有技术中动态范围扩展技术拍照性能差,且动态范围扩展效果差的问题。
为了解决上述技术问题,本发明是这样实现的:一种拍照方法,包括:
获取摄像头采集的N组目标图像数据;
将每组目标图像数据中的至少两帧图像进行动态范围扩展,生成M帧第一合成图像;
将所述M帧第一合成图像进行图像合成处理,生成X帧第二合成图像;
若接收到拍照指令,则根据所述X帧第二合成图像,生成照片;
其中,每组目标图像数据包括至少两帧图像,且每组目标图像数据中不同图像对应的曝光参数不同;N、M和X均为正整数,M小于或等于N,且X小于或等于M。
第一方面,本发明的实施例还提供了一种移动终端,包括:
获取模块,用于获取摄像头采集的N组目标图像数据;
第一生成模块,用于将每组目标图像数据中的至少两帧图像进行动态范围扩展,生成M帧第一合成图像;
第二生成模块,用于将所述M帧第一合成图像进行图像合成处理,生成X帧第二合成图像;
第三生成模块,用于若接收到拍照指令,则根据所述X帧第二合成图像,生成照片;
其中,每组目标图像数据包括至少两帧图像,且每组目标图像数据中不同图像对应的曝光参数不同;N、M和X均为正整数,M小于或等于N,且X小于或等于M。
第二方面,本发明的实施例还提供了一种移动终端,包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述计算机程序被所述处理器执行时实现如上任一项所述的拍照方法的步骤。
第三方面,本发明的实施例还提供了一种计算机可读存储介质,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现如上任一项所述的拍照方法的步骤。
在本发明实施例中,首先获取摄像头采集的N组目标图像数据;然后将每组目标图像数据中的至少两帧图像进行动态范围扩展,生成M帧第一合成图像,其中,每组目标图像数据包括至少两帧图像,且每组目标图像数据中不同图像对应的曝光参数不同,这样得到了M帧高动态范围的图像;再将M帧第一合成图像进行图像合成处理,生成X帧第二合成图像,这样得到了X帧高动态范围和高质量的图像;若接收到拍照指令,则根据X帧第二合成图像,生成照片;N、M和X均为正整数,M小于或等于N,且X小于或等于M。从而利用多帧合成处理可以实时保存高动态范围高质量的图像,在接收到拍照指令后,可直接获取高动态范围和高质量的图像,生成照片,提高了拍照性能,提高了动态范围扩展效果。
附图说明
图1为本发明实施例提供的拍照方法的流程图之一;
图2为本发明实施例提供的拍照方法的流程图之二;
图3为本发明实施例提供的拍照方法的流程图之三;
图4为本发明实施例提供的拍照方法的流程图之四;
图5为本发明实施例提供的移动终端的结构示意图之一;
图6为本发明实施例提供的移动终端的结构示意图之二;
图7为本发明实施例提供的移动终端的结构示意图之三。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
在本发明的一些实施例中,提供了一种拍照方法,参照图1所示,包括:
步骤101,获取摄像头采集的N组目标图像数据。
这里,首先获取摄像头采集的N组目标图像数据,以基于N组目标图像数据进行动态范围扩展。
其中,每组目标图像数据包括至少两帧图像,且每组目标图像数据中不同图像对应的曝光参数不同。例如,每组目标图像数据包括5帧图像,每组目标图像数据中不同图像对应的曝光参数分别为z、z+1ev、z+2ev、z-1ev、z-2ev。其中z为正常曝光图像的曝光参数,每组目标图像数据的正常曝光图像的曝光参数z可以不同。
具体的,如图3所示,上述步骤101包括:
步骤1011,按照预设帧率和每帧图像分别对应的曝光参数,对摄像头采集的N组初始图像数据进行曝光处理,生成N组目标图像数据。
这里,按照预设帧率和每帧图像分别对应的曝光参数,对摄像头采集的图像数据进行包围式曝光,假设每个曝光周期为s,利用包围式曝光得到N组目标图像数据,每组目标图像数据包括s帧不同动态范围的图像,从而可基于s帧不同动态范围的图像进行动态范围扩展。
其中,预设帧率采用高帧率,如240fps@FHD、180fps@2k等等,具体可根据实际需求进行设定。此时支持高帧率输出,比如240fps@FHD,则以240fps的帧率对图像进行曝光获取。
其中,可将摄像头采集的图像数据存储在存储器(如ROM)或缓存空间buffer中,以便于随时调用。
步骤102,将每组目标图像数据中的至少两帧图像进行动态范围扩展,生成M帧第一合成图像。
这里,由于每组目标图像数据中不同图像对应的曝光参数不同,每组目标图像数据的不同图像分别记录了不同亮度灰阶下的信息,因此可将每组目标图像数据中的至少两帧图像进行动态范围扩展,生成M帧高动态范围的第一合成图像。
例如,如下表1所示,摄像头配置好设定,获取到稳定的图像数据,这一帧记为第n帧,从第n帧图像开始获取N组目标图像数据,每组目标图像数据包括5帧图像。每组目标图像数据的5帧图像分别记录了不同亮度灰阶下的信息。通过将每组目标图像数据的5帧图像进行动态范围扩展,生成M帧高动态范围的第一合成图像。如将第n帧、第n+1帧、第n+2帧、第n+3帧和第n+4帧图像进行动态范围扩展,生成第1帧第一合成图像m1,将第n+5帧、第n+6帧、第n+7帧、第n+8帧和第n+9帧图像进行动态范围扩展,生成第2帧第一合成图像m2,以此类推,生成M帧第一合成图像。
n | n+1 | n+2 | n+3 | n+4 |
n+5 | n+6 | n+7 | n+8 | n+9 |
… | … | … | … | … |
n+5(N-1) | n+5(N-1)+1 | … | … | n+5(N-1)+4 |
表1
其中,将每组目标图像数据中的至少两帧图像进行动态范围扩展的方式不限,可采用任意一种公知方式。
其中,可将生成的M帧第一合成图像存储在存储器(如ROM)或缓存空间buffer中,以便于随时调用。
步骤103,将所述M帧第一合成图像进行图像合成处理,生成X帧第二合成图像。
这里,通过将M帧高动态范围的第一合成图像进行图像合成处理,生成了X帧高动态范围高质量的第二合成图像。
例如,将M帧第一合成图像每连续4帧图像进行图像合成处理,生成X帧第二合成图像。
其中,可将生成的X帧第二合成图像存储在存储器(如ROM)或缓存空间buffer中,以便于随时调用。
其中,N、M和X均为正整数,M小于或等于N,且X小于或等于M。
具体的,上述步骤103,包括:
将所述M帧第一合成图像进行降噪处理,生成X帧第二中间合成图像。
这里,通过将M帧第一合成图像进行降噪合成,生成X帧第二中间合成图像,提高了图像质量。
例如,将M帧第一合成图像每连续4帧图像(m1、m2、m3、m4,m5、m6、m7、m8……)进行降噪处理,生成X帧第二中间合成图像(x1、x2……)。
其中,将M帧第一合成图像进行降噪处理的方式不限,可采用任意一种公知方式。
对所述X帧第二中间合成图像进行分辨率重建,生成X帧预设尺寸的第二合成图像。
这里,通过对X帧第二中间合成图像进行分辨率重建,生成X帧预设尺寸的第二合成图像,将较小尺寸图像放大到预设尺寸,进一步提高了图像质量。
其中,对X帧第二中间合成图像进行分辨率重建的方式不限,可采用任意一种公知方式。
步骤104,若接收到拍照指令,则根据所述X帧第二合成图像,生成照片。
这里,接收到拍照指令后,可直接获取X帧高动态范围高质量的第二合成图像,生成照片,提高了拍照性能,提高了动态范围扩展效果。
其中,可将第二合成图像送到ISP(Image Signal Processing,图像信号处理)模块进行后续图像处理,如线性纠正、噪声去除、坏点去除、内插、白平衡等,生成照片。
本发明实施例的拍照方法,利用多帧合成处理可以实时保存高动态范围高质量的图像,在接收到拍照指令后,可直接获取高动态范围和高质量的图像,生成照片,提高了拍照性能,提高了动态范围扩展效果。
可选的,如图2所示,上述步骤101之后,还包括:
步骤105,将所述N组目标图像数据中的一组目标图像数据的至少两帧图像进行动态范围扩展,生成第三合成图像。
这里,通过将N组目标图像数据中的一组目标图像数据的至少两帧图像进行动态范围扩展,生成了高动态范围的第三合成图像。
例如,参照上文所述,假设摄像头配置好设定,获取到稳定的图像数据,这一帧记为第n帧,从第n帧图像开始获取N组目标图像数据,每组目标图像数据包括5帧图像,每组目标图像数据中不同图像对应的曝光参数分别为z、z+1ev、z+2ev、z-1ev、z-2ev。此时如可将第n帧、第n+1帧和第n+3帧图像进行动态范围扩展,生成第三合成图像。
步骤106,将所述第三合成图像在预览界面进行显示。
这里,通过将第三合成图像在预览界面进行显示,使用户能够实时预览高动态范围的图像。
此时,在预览时可以实时通过多帧合成处理得到高动态范围的图像,并实时更新到屏幕上,即在预览时实时展现高动态范围的图像,提高了预览效果。且在实时预览的同时再通过另外的通路对图像数据进行动态范围扩展、多帧降噪合成和分辨率重建,这样可以实时保存高动态范围高质量的图像。当接收到拍照指令后,即可直接获取到已经处理好的高动态范围高质量的图像,进行后续完整的图像处理流程,最后完成拍照动作,和正常拍照性能没有差异。
可选的,如图3所示,上述步骤1011之前,还包括:
步骤107,根据所述N组初始图像数据中的第一组初始图像数据中正常曝光图像的图像亮度,确定第二组初始图像数据中正常曝光图像对应的曝光参数。
这里,可首先根据N组初始图像数据中的第一组初始图像数据中正常曝光图像的图像亮度进行自动曝光,确定出第二组初始图像数据中正常曝光图像对应的曝光参数,以便于确定其他图像的曝光参数,从而对图像进行曝光处理。
其中,第一组初始图像数据和第二组初始图像数据为连续采集的两组图像数据,第一组初始图像数据为在先采集的图像数据,第二组初始图像数据为在后采集的图像数。
例如,如上表1所示,摄像头配置好设定,获取到稳定的图像数据,这一帧记为第n帧,从第n帧图像开始获取N组目标图像数据,每组目标图像数据包括5帧图像。第n帧图像对应的曝光参数为z1,可根据第n帧图像的图像亮度进行自动曝光,确定出第n+5帧图像对应的曝光参数z2。依次类推,可确定出n+5、n+9、…、n+5(N-1)等帧的图像对应的曝光参数。
其中,根据第一组初始图像数据中正常曝光图像的图像亮度,确定第二组初始图像数据中正常曝光图像对应的曝光参数的方式不限,可基于自动曝光原理采用任意一种公知方式。
其中,首次获取的一组图像数据中正常曝光图像的曝光参数,如第n帧图像的曝光参数,也可基于自动曝光原理采用任意一种公知方式确定,这里不作限定。
步骤108,根据所述曝光参数,确定所述第二组初始图像数据中除正常曝光图像外其他图像对应的曝光参数。
这里,确定第二组初始图像数据中正常曝光图像对应的曝光参数,可根据正常曝光图像的曝光参数,确定出其他图像对应的曝光参数,从而对图像进行曝光处理。
如假设第二组初始图像数据中正常曝光图像对应的曝光参数为z,每组包括5帧图像,可将第二组初始图像数据中除正常曝光图像外其他图像对应的曝光参数依次设定为z+1ev、z+2ev、z-1ev、z-2ev。
可选的,如图4所示,上述步骤102包括:
步骤1021,对每组目标图像数据中的图像进行图像配准。
这里,由于不同曝光的图像不是在同一时间点拍摄,所以不同图像之间会存在角度差异。因此,本步骤中,在进行图像合成之前首先需要对图像进行图像配准,以保证图像之间合成的准确性。
其中,可以基于每组目标图像数据中的正常曝光图像或者其他曝光图像为基准,对图像进行配准。
其中,对每组目标图像数据中的图像进行图像配准的方式不限,可采用任意一种公知方式。例如可首先对多帧不同曝光且有相同区域的图像提取特征点,然后进行特征点匹配,再计算畸变校正,最后输出配准结果。
步骤1022,提取每组目标图像数据中经过图像配准后的每帧图像的亮度信息。
这里,通过提取每组目标图像数据中每帧图像的亮度信息,便于后续基于亮度信息进行动态范围扩展。
其中,可将每张不同曝光的图像从YUV格式转换到HSV格式,V表示图像的亮度信息。提取每帧图像的亮度信息V。
步骤1023,根据每帧图像的亮度信息以及每帧图像对应的曝光参数,将每组目标图像数据中的至少两帧图像进行动态范围扩展,生成M帧第一中间合成图像。
这里,可根据每帧图像对应的曝光参数,确定每组目标图像数据中的正常曝光帧、过曝帧和欠曝帧,可根据每帧图像的亮度信息,提取每组目标图像数据中的过曝帧的暗部细节、欠曝帧的亮部细节、正常曝光帧的中间影调细节,然后基于提取的每组目标图像数据的暗部细节、亮部细节和中间影调细节,对每组目标图像数据进行动态范围扩展合成,生成M帧高动态范围的第一中间合成图像。
其中,每帧图像提取的细节强度不同,可根据正常曝光帧或者算法指定帧的直方图来确定。
其中,为了避免动态范围扩展后的不真实感,可将每帧图像经过曲线调整,使得暗部细节、中间影调细节和亮部细节都维持正确的影调秩序,同时将各个影调还原到符合该场景的亮度区域,再对调整后的图像进行合成,得到最终的第一中间合成图像。
步骤1024,对所述M帧第一中间合成图像进行图像均衡处理,生成M帧第一合成图像。
这里,通过对M帧第一中间合成图像进行图像均衡处理,生成M帧第一合成图像,实现了对图像的平滑过渡,提高了图像质量。
本发明实施例的拍照方法,还可在屏幕上显示进入超级动态范围模式的按钮,方便用户根据自己的需求选择是否进入超级动态范围模式,若进入超级动态范围模式,则启动本发明实施例的拍照方法的流程,以得到高动态范围和高质量的照片。
本发明实施例的拍照方法,能够利用摄像头的高帧率模式,在不影响预览帧率的前提下,通过多图像处理模块进行并行处理一系列图像处理算法,比如动态范围扩展、多帧降噪以及超分辨率重建等。在接收到拍照指令后,可以立即获取到已经经过动态范围扩展、多帧降噪和分辨率重建的高动态范围的全尺寸(预设尺寸)图像,提高了拍照性能,提高了动态范围扩展效果。而预览也可以通过不同动态范围的图像进行简单的动态范围扩展,得到高动态范围的图像,提高了预览效果。
在本发明的一些实施例中,参照图5所示,还提供了一种移动终端500。移动终端500包括:
获取模块501,用于获取摄像头采集的N组目标图像数据。
这里,首先获取摄像头采集的N组目标图像数据,以基于N组目标图像数据进行动态范围扩展。
第一生成模块502,用于将每组目标图像数据中的至少两帧图像进行动态范围扩展,生成M帧第一合成图像。
这里,由于每组目标图像数据中不同图像对应的曝光参数不同,每组目标图像数据的不同图像分别记录了不同亮度灰阶下的信息,因此可将每组目标图像数据中的至少两帧图像进行动态范围扩展,生成M帧高动态范围的第一合成图像。
第二生成模块503,用于将所述M帧第一合成图像进行图像合成处理,生成X帧第二合成图像。
这里,通过将M帧高动态范围的第一合成图像进行图像合成处理,生成了X帧高动态范围高质量的第二合成图像。
第三生成模块504,用于若接收到拍照指令,则根据所述X帧第二合成图像,生成照片。
这里,接收到拍照指令后,可直接获取X帧高动态范围高质量的第二合成图像,生成照片,提高了拍照性能,提高了动态范围扩展效果。
其中,每组目标图像数据包括至少两帧图像,且每组目标图像数据中不同图像对应的曝光参数不同;N、M和X均为正整数,M小于或等于N,且X小于或等于M。
本发明实施例的移动终端500,利用多帧合成处理可以实时保存高动态范围高质量的图像,在接收到拍照指令后,可直接获取高动态范围和高质量的图像,生成照片,提高了拍照性能,提高了动态范围扩展效果。
可选的,如图6所示,移动终端500还包括:
第四生成模块505,用于将所述N组目标图像数据中的一组目标图像数据的至少两帧图像进行动态范围扩展,生成第三合成图像。
这里,通过将N组目标图像数据中的一组目标图像数据的至少两帧图像进行动态范围扩展,生成了高动态范围的第三合成图像。
显示模块506,用于将所述第三合成图像在预览界面进行显示。
这里,通过将第三合成图像在预览界面进行显示,使用户能够实时预览高动态范围的图像。
此时,在预览时可以实时通过多帧合成处理得到高动态范围的图像,并实时更新到屏幕上,即在预览时实时展现高动态范围的图像,提高了预览效果。且在实时预览的同时再通过另外的通路对图像数据进行动态范围扩展、多帧降噪合成和分辨率重建,这样可以实时保存高动态范围高质量的图像。当接收到拍照指令后,即可直接获取到已经处理好的高动态范围高质量的图像,进行后续完整的图像处理流程,最后完成拍照动作,和正常拍照性能没有差异。
可选的,所述获取模块501包括:
第一生成子模块5011,用于按照预设帧率和每帧图像分别对应的曝光参数,对摄像头采集的N组初始图像数据进行曝光处理,生成N组目标图像数据。
这里,按照预设帧率和每帧图像分别对应的曝光参数,对摄像头采集的图像数据进行包围式曝光,假设每个曝光周期为s,利用包围式曝光得到N组目标图像数据,每组目标图像数据包括s帧不同动态范围的图像,从而可基于s帧不同动态范围的图像进行动态范围扩展。
可选的,移动终端500还包括:
第一确定模块507,用于根据所述N组初始图像数据中的第一组初始图像数据中正常曝光图像的图像亮度,确定第二组初始图像数据中正常曝光图像对应的曝光参数。
这里,可首先根据N组初始图像数据中的第一组初始图像数据中正常曝光图像的图像亮度进行自动曝光,确定出第二组初始图像数据中正常曝光图像对应的曝光参数,以便于确定其他图像的曝光参数,从而对图像进行曝光处理。
第二确定模块508,用于根据所述曝光参数,确定所述第二组初始图像数据中除正常曝光图像外其他图像对应的曝光参数。
这里,确定第二组初始图像数据中正常曝光图像对应的曝光参数,可根据正常曝光图像的曝光参数,确定出其他图像对应的曝光参数,从而对图像进行曝光处理。
可选的,所述第一生成模块502包括:
配准子模块5021,用于对每组目标图像数据中的图像进行图像配准。
这里,由于不同曝光的图像不是在同一时间点拍摄,所以不同图像之间会存在角度差异。因此,本步骤中,在进行图像合成之前首先需要对图像进行图像配准,以保证图像之间合成的准确性。
提取子模块5022,用于提取每组目标图像数据中经过图像配准后的每帧图像的亮度信息。
这里,通过提取每组目标图像数据中每帧图像的亮度信息,便于后续基于亮度信息进行动态范围扩展。
第二生成子模块5023,用于根据每帧图像的亮度信息以及每帧图像对应的曝光参数,将每组目标图像数据中的至少两帧图像进行动态范围扩展,生成M帧第一中间合成图像。
这里,可根据每帧图像对应的曝光参数,确定每组目标图像数据中的正常曝光帧、过曝帧和欠曝帧,可根据每帧图像的亮度信息,提取每组目标图像数据中的过曝帧的暗部细节、欠曝帧的亮部细节、正常曝光帧的中间影调细节,然后基于提取的每组目标图像数据的暗部细节、亮部细节和中间影调细节,对每组目标图像数据进行动态范围扩展合成,生成M帧高动态范围的第一中间合成图像。
第三生成子模块5024,用于对所述M帧第一中间合成图像进行图像均衡处理,生成M帧第一合成图像。
这里,通过对M帧第一中间合成图像进行图像均衡处理,生成M帧第一合成图像,实现了对图像的平滑过渡,提高了图像质量。
可选的,所述第二生成模块503包括:
第四生成子模块5031,用于将所述M帧第一合成图像进行降噪处理,生成X帧第二中间合成图像。
这里,通过将M帧第一合成图像进行降噪合成,生成X帧第二中间合成图像,提高了图像质量。
第五生成子模块5032,用于对所述X帧第二中间合成图像进行分辨率重建,生成X帧预设尺寸的第二合成图像。
这里,通过对X帧第二中间合成图像进行分辨率重建,生成X帧预设尺寸的第二合成图像,将较小尺寸图像放大到预设尺寸,进一步提高了图像质量。
本发明实施例提供的移动终端能实现图1至图4的方法实施例中移动终端实现的各个过程,为避免重复,在此不再赘述。本发明实施例的移动终端500,利用多帧合成处理可以实时保存高动态范围高质量的图像,在接收到拍照指令后,可直接获取高动态范围和高质量的图像,生成照片,提高了拍照性能,提高了动态范围扩展效果。
图7为实现本发明各个实施例的一种移动终端的硬件结构示意图。该移动终端700包括但不限于:射频单元701、网络模块702、音频输出单元703、输入单元704、传感器705、显示单元706、用户输入单元707、接口单元708、存储器709、处理器710、以及电源711等部件。本领域技术人员可以理解,图7中示出的移动终端结构并不构成对移动终端的限定,移动终端可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。在本发明实施例中,移动终端包括但不限于手机、平板电脑、笔记本电脑、掌上电脑、车载终端、可穿戴设备、以及计步器等。
其中,处理器710,用于获取摄像头采集的N组目标图像数据;将每组目标图像数据中的至少两帧图像进行动态范围扩展,生成M帧第一合成图像;将所述M帧第一合成图像进行图像合成处理,生成X帧第二合成图像;若用户输入单元707接收到拍照指令,则根据所述X帧第二合成图像,生成照片;其中,每组目标图像数据包括至少两帧图像,且每组目标图像数据中不同图像对应的曝光参数不同;N、M和X均为正整数,M小于或等于N,且X小于或等于M。
该移动终端700利用多帧合成处理可以实时保存高动态范围高质量的图像,在接收到拍照指令后,可直接获取高动态范围和高质量的图像,生成照片,提高了拍照性能,提高了动态范围扩展效果。
可选的,处理器710还用于:将所述N组目标图像数据中的一组目标图像数据的至少两帧图像进行动态范围扩展,生成第三合成图像;将所述第三合成图像在显示单元706的预览界面进行显示。
可选的,处理器710还用于:按照预设帧率和每帧图像分别对应的曝光参数,对摄像头采集的N组初始图像数据进行曝光处理,生成N组目标图像数据。
可选的,处理器710还用于:根据所述N组初始图像数据中的第一组初始图像数据中正常曝光图像的图像亮度,确定第二组初始图像数据中正常曝光图像对应的曝光参数;根据所述曝光参数,确定所述第二组初始图像数据中除正常曝光图像外其他图像对应的曝光参数。
可选的,处理器710还用于:对每组目标图像数据中的图像进行图像配准;提取每组目标图像数据中经过图像配准后的每帧图像的亮度信息;根据每帧图像的亮度信息以及每帧图像对应的曝光参数,将每组目标图像数据中的至少两帧图像进行动态范围扩展,生成M帧第一中间合成图像;对所述M帧第一中间合成图像进行图像均衡处理,生成M帧第一合成图像。
可选的,处理器710还用于:将所述M帧第一合成图像进行降噪处理,生成X帧第二中间合成图像;对所述X帧第二中间合成图像进行分辨率重建,生成X帧预设尺寸的第二合成图像。
应理解的是,本发明实施例中,射频单元701可用于收发信息或通话过程中,信号的接收和发送,具体的,将来自基站的下行数据接收后,给处理器710处理;另外,将上行的数据发送给基站。通常,射频单元701包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器、双工器等。此外,射频单元701还可以通过无线通信系统与网络和其他设备通信。
移动终端通过网络模块702为用户提供了无线的宽带互联网访问,如帮助用户收发电子邮件、浏览网页和访问流式媒体等。
音频输出单元703可以将射频单元701或网络模块702接收的或者在存储器709中存储的音频数据转换成音频信号并且输出为声音。而且,音频输出单元703还可以提供与移动终端700执行的特定功能相关的音频输出(例如,呼叫信号接收声音、消息接收声音等等)。音频输出单元703包括扬声器、蜂鸣器以及受话器等。
输入单元704用于接收音频或视频信号。输入单元704可以包括图形处理器(Graphics Processing Unit,GPU)7041和麦克风7042,图形处理器7041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。处理后的图像帧可以显示在显示单元706上。经图形处理器7041处理后的图像帧可以存储在存储器709(或其它存储介质)中或者经由射频单元701或网络模块702进行发送。麦克风7042可以接收声音,并且能够将这样的声音处理为音频数据。处理后的音频数据可以在电话通话模式的情况下转换为可经由射频单元701发送到移动通信基站的格式输出。
移动终端700还包括至少一种传感器705,比如光传感器、运动传感器以及其他传感器。具体地,光传感器包括环境光传感器及接近传感器,其中,环境光传感器可根据环境光线的明暗来调节显示面板7061的亮度,接近传感器可在移动终端700移动到耳边时,关闭显示面板7061和/或背光。作为运动传感器的一种,加速计传感器可检测各个方向上(一般为三轴)加速度的大小,静止时可检测出重力的大小及方向,可用于识别移动终端姿态(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等;传感器705还可以包括指纹传感器、压力传感器、虹膜传感器、分子传感器、陀螺仪、气压计、湿度计、温度计、红外线传感器等,在此不再赘述。
显示单元706用于显示由用户输入的信息或提供给用户的信息。显示单元706可包括显示面板7061,可以采用液晶显示器(Liquid Crystal Display,LCD)、有机发光二极管(Organic Light-Emitting Diode,OLED)等形式来配置显示面板7061。
用户输入单元707可用于接收输入的数字或字符信息,以及产生与移动终端的用户设置以及功能控制有关的键信号输入。具体地,用户输入单元707包括触控面板7071以及其他输入设备7072。触控面板7071,也称为触摸屏,可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触控面板7071上或在触控面板7071附近的操作)。触控面板7071可包括触摸检测装置和触摸控制器两个部分。其中,触摸检测装置检测用户的触摸方位,并检测触摸操作带来的信号,将信号传送给触摸控制器;触摸控制器从触摸检测装置上接收触摸信息,并将它转换成触点坐标,再送给处理器710,接收处理器710发来的命令并加以执行。此外,可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触控面板7071。除了触控面板7071,用户输入单元707还可以包括其他输入设备7072。具体地,其他输入设备7072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆,在此不再赘述。
进一步的,触控面板7071可覆盖在显示面板7061上,当触控面板7071检测到在其上或附近的触摸操作后,传送给处理器710以确定触摸事件的类型,随后处理器710根据触摸事件的类型在显示面板7061上提供相应的视觉输出。虽然在图7中,触控面板7071与显示面板7061是作为两个独立的部件来实现移动终端的输入和输出功能,但是在某些实施例中,可以将触控面板7071与显示面板7061集成而实现移动终端的输入和输出功能,具体此处不做限定。
接口单元708为外部装置与移动终端700连接的接口。例如,外部装置可以包括有线或无线头戴式耳机端口、外部电源(或电池充电器)端口、有线或无线数据端口、存储卡端口、用于连接具有识别模块的装置的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等等。接口单元708可以用于接收来自外部装置的输入(例如,数据信息、电力等等)并且将接收到的输入传输到移动终端700内的一个或多个元件或者可以用于在移动终端700和外部装置之间传输数据。
存储器709可用于存储软件程序以及各种数据。存储器709可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等;存储数据区可存储根据手机的使用所创建的数据(比如音频数据、电话本等)等。此外,存储器709可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
处理器710是移动终端的控制中心,利用各种接口和线路连接整个移动终端的各个部分,通过运行或执行存储在存储器709内的软件程序和/或模块,以及调用存储在存储器709内的数据,执行移动终端的各种功能和处理数据,从而对移动终端进行整体监控。处理器710可包括一个或多个处理单元;优选的,处理器710可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器710中。
移动终端700还可以包括给各个部件供电的电源711(比如电池),优选的,电源711可以通过电源管理系统与处理器710逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。
另外,移动终端700包括一些未示出的功能模块,在此不再赘述。
优选的,本发明实施例还提供一种移动终端,包括处理器710,存储器709,存储在存储器709上并可在所述处理器710上运行的计算机程序,该计算机程序被处理器710执行时实现上述拍照方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
本发明实施例还提供一种计算机可读存储介质,计算机可读存储介质上存储有计算机程序,该计算机程序被处理器执行时实现上述拍照方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。其中,所述的计算机可读存储介质,如只读存储器(Read-Only Memory,简称ROM)、随机存取存储器(Random Access Memory,简称RAM)、磁碟或者光盘等。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本发明各个实施例所述的方法。
上面结合附图对本发明的实施例进行了描述,但是本发明并不局限于上述的具体实施方式,上述的具体实施方式仅仅是示意性的,而不是限制性的,本领域的普通技术人员在本发明的启示下,在不脱离本发明宗旨和权利要求所保护的范围情况下,还可做出很多形式,均属于本发明的保护之内。
Claims (12)
1.一种拍照方法,其特征在于,包括:
获取摄像头采集的N组目标图像数据;
将每组目标图像数据中的至少两帧图像进行动态范围扩展,生成M帧第一合成图像;
将所述M帧第一合成图像进行图像合成处理,生成X帧第二合成图像;
若接收到拍照指令,则根据所述X帧第二合成图像,生成照片;
其中,每组目标图像数据包括至少两帧图像,且每组目标图像数据中不同图像对应的曝光参数不同;N、M和X均为正整数,M等于N,且X小于或等于M;
所述将所述M帧第一合成图像进行图像合成处理,生成X帧第二合成图像的步骤,包括:
将所述M帧第一合成图像进行降噪处理,生成X帧第二中间合成图像;
对所述X帧第二中间合成图像进行分辨率重建,生成X帧预设尺寸的第二合成图像。
2.根据权利要求1所述的方法,其特征在于,所述获取摄像头采集的N组目标图像数据之后,还包括:
将所述N组目标图像数据中的一组目标图像数据的至少两帧图像进行动态范围扩展,生成第三合成图像;
将所述第三合成图像在预览界面进行显示。
3.根据权利要求1所述的方法,其特征在于,所述获取摄像头采集的N组目标图像数据的步骤,包括:
按照预设帧率和每帧图像分别对应的曝光参数,对摄像头采集的N组初始图像数据进行曝光处理,生成N组目标图像数据。
4.根据权利要求3所述的方法,其特征在于,所述按照预设帧率和每帧图像分别对应的曝光参数,对摄像头采集的N组初始图像数据进行曝光处理,生成N组目标图像数据之前,还包括:
根据所述N组初始图像数据中的第一组初始图像数据中正常曝光图像的图像亮度,确定第二组初始图像数据中正常曝光图像对应的曝光参数;
根据所述曝光参数,确定所述第二组初始图像数据中除正常曝光图像外其他图像对应的曝光参数。
5.根据权利要求1所述的方法,其特征在于,所述将每组目标图像数据中的至少两帧图像进行动态范围扩展,生成M帧第一合成图像的步骤,包括:
对每组目标图像数据中的图像进行图像配准;
提取每组目标图像数据中经过图像配准后的每帧图像的亮度信息;
根据每帧图像的亮度信息以及每帧图像对应的曝光参数,将每组目标图像数据中的至少两帧图像进行动态范围扩展,生成M帧第一中间合成图像;
对所述M帧第一中间合成图像进行图像均衡处理,生成M帧第一合成图像。
6.一种移动终端,其特征在于,包括:
获取模块,用于获取摄像头采集的N组目标图像数据;
第一生成模块,用于将每组目标图像数据中的至少两帧图像进行动态范围扩展,生成M帧第一合成图像;
第二生成模块,用于将所述M帧第一合成图像进行图像合成处理,生成X帧第二合成图像;
第三生成模块,用于若接收到拍照指令,则根据所述X帧第二合成图像,生成照片;
其中,每组目标图像数据包括至少两帧图像,且每组目标图像数据中不同图像对应的曝光参数不同;N、M和X均为正整数,M等于N,且X小于或等于M;
所述第二生成模块包括:
第四生成子模块,用于将所述M帧第一合成图像进行降噪处理,生成X帧第二中间合成图像;
第五生成子模块,用于对所述X帧第二中间合成图像进行分辨率重建,生成X帧预设尺寸的第二合成图像。
7.根据权利要求6所述的移动终端,其特征在于,还包括:
第四生成模块,用于将所述N组目标图像数据中的一组目标图像数据的至少两帧图像进行动态范围扩展,生成第三合成图像;
显示模块,用于将所述第三合成图像在预览界面进行显示。
8.根据权利要求6所述的移动终端,其特征在于,所述获取模块包括:
第一生成子模块,用于按照预设帧率和每帧图像分别对应的曝光参数,对摄像头采集的N组初始图像数据进行曝光处理,生成N组目标图像数据。
9.根据权利要求8所述的移动终端,其特征在于,还包括:
第一确定模块,用于根据所述N组初始图像数据中的第一组初始图像数据中正常曝光图像的图像亮度,确定第二组初始图像数据中正常曝光图像对应的曝光参数;
第二确定模块,用于根据所述曝光参数,确定所述第二组初始图像数据中除正常曝光图像外其他图像对应的曝光参数。
10.根据权利要求6所述的移动终端,其特征在于,所述第一生成模块包括:
配准子模块,用于对每组目标图像数据中的图像进行图像配准;
提取子模块,用于提取每组目标图像数据中经过图像配准后的每帧图像的亮度信息;
第二生成子模块,用于根据每帧图像的亮度信息以及每帧图像对应的曝光参数,将每组目标图像数据中的至少两帧图像进行动态范围扩展,生成M帧第一中间合成图像;
第三生成子模块,用于对所述M帧第一中间合成图像进行图像均衡处理,生成M帧第一合成图像。
11.一种移动终端,其特征在于,包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述计算机程序被所述处理器执行时实现如权利要求1至5中任一项所述的拍照方法的步骤。
12.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现如权利要求1至5中任一项所述的拍照方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710971163.8A CN107566739B (zh) | 2017-10-18 | 2017-10-18 | 一种拍照方法及移动终端 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710971163.8A CN107566739B (zh) | 2017-10-18 | 2017-10-18 | 一种拍照方法及移动终端 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN107566739A CN107566739A (zh) | 2018-01-09 |
CN107566739B true CN107566739B (zh) | 2019-12-06 |
Family
ID=60985526
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201710971163.8A Active CN107566739B (zh) | 2017-10-18 | 2017-10-18 | 一种拍照方法及移动终端 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN107566739B (zh) |
Families Citing this family (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108307109B (zh) * | 2018-01-16 | 2020-04-17 | 维沃移动通信有限公司 | 一种高动态范围图像预览方法及终端设备 |
CN108391060B (zh) * | 2018-03-26 | 2021-02-09 | 华为技术有限公司 | 一种图像处理方法、图像处理装置和终端 |
CN108765281A (zh) * | 2018-04-23 | 2018-11-06 | Oppo广东移动通信有限公司 | 一种生成缩略图的方法、装置以及计算机存储介质 |
CN108898652B (zh) * | 2018-06-13 | 2022-11-25 | 珠海豹趣科技有限公司 | 一种皮肤图像设置方法、装置及电子设备 |
CN110072052B (zh) * | 2019-04-09 | 2021-08-27 | Oppo广东移动通信有限公司 | 基于多帧图像的图像处理方法、装置、电子设备 |
CN110012227B (zh) | 2019-04-09 | 2021-06-29 | Oppo广东移动通信有限公司 | 图像处理方法、装置、存储介质及电子设备 |
CN110035237B (zh) * | 2019-04-09 | 2021-08-31 | Oppo广东移动通信有限公司 | 图像处理方法、装置、存储介质及电子设备 |
CN110198417A (zh) * | 2019-06-28 | 2019-09-03 | Oppo广东移动通信有限公司 | 图像处理方法、装置、存储介质及电子设备 |
CN110445989B (zh) * | 2019-08-05 | 2021-03-23 | Oppo广东移动通信有限公司 | 图像处理方法、装置、存储介质及电子设备 |
CN113364964B (zh) * | 2020-03-02 | 2023-04-07 | RealMe重庆移动通信有限公司 | 图像处理方法、图像处理装置、存储介质与终端设备 |
CN113992861B (zh) * | 2020-07-27 | 2023-07-21 | 虹软科技股份有限公司 | 一种图像处理方法及图像处理装置 |
CN112818732B (zh) * | 2020-08-11 | 2023-12-12 | 腾讯科技(深圳)有限公司 | 一种图像处理方法、装置、计算机设备和存储介质 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104335569A (zh) * | 2012-06-11 | 2015-02-04 | 索尼电脑娱乐公司 | 图像生成设备以及图像生成方法 |
WO2015117397A1 (zh) * | 2014-08-25 | 2015-08-13 | 中兴通讯股份有限公司 | 一种拍照方法、装置及设备 |
CN105791707A (zh) * | 2015-12-31 | 2016-07-20 | 北京金山安全软件有限公司 | 一种图像处理的方法、装置及电子设备 |
CN105827754A (zh) * | 2016-03-24 | 2016-08-03 | 维沃移动通信有限公司 | 一种高动态范围图像的生成方法及移动终端 |
CN105872148A (zh) * | 2016-06-21 | 2016-08-17 | 维沃移动通信有限公司 | 一种高动态范围图像的生成方法及移动终端 |
CN106960414A (zh) * | 2016-12-12 | 2017-07-18 | 天津大学 | 一种多视角ldr图像生成高分辨率hdr图像的方法 |
-
2017
- 2017-10-18 CN CN201710971163.8A patent/CN107566739B/zh active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104335569A (zh) * | 2012-06-11 | 2015-02-04 | 索尼电脑娱乐公司 | 图像生成设备以及图像生成方法 |
WO2015117397A1 (zh) * | 2014-08-25 | 2015-08-13 | 中兴通讯股份有限公司 | 一种拍照方法、装置及设备 |
CN105791707A (zh) * | 2015-12-31 | 2016-07-20 | 北京金山安全软件有限公司 | 一种图像处理的方法、装置及电子设备 |
CN105827754A (zh) * | 2016-03-24 | 2016-08-03 | 维沃移动通信有限公司 | 一种高动态范围图像的生成方法及移动终端 |
CN105872148A (zh) * | 2016-06-21 | 2016-08-17 | 维沃移动通信有限公司 | 一种高动态范围图像的生成方法及移动终端 |
CN106960414A (zh) * | 2016-12-12 | 2017-07-18 | 天津大学 | 一种多视角ldr图像生成高分辨率hdr图像的方法 |
Also Published As
Publication number | Publication date |
---|---|
CN107566739A (zh) | 2018-01-09 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107566739B (zh) | 一种拍照方法及移动终端 | |
CN108307109B (zh) | 一种高动态范围图像预览方法及终端设备 | |
CN109688322B (zh) | 一种生成高动态范围图像的方法、装置及移动终端 | |
CN110365907B (zh) | 一种拍照方法、装置及电子设备 | |
CN107566730B (zh) | 一种全景图像拍摄方法及移动终端 | |
CN107566749B (zh) | 拍摄方法及移动终端 | |
CN109218626B (zh) | 一种拍照方法及终端 | |
CN108449541B (zh) | 一种全景图像拍摄方法及移动终端 | |
CN111405199B (zh) | 一种图像拍摄方法和电子设备 | |
CN108280817B (zh) | 一种图像处理方法及移动终端 | |
CN107623818B (zh) | 一种图像曝光方法和移动终端 | |
CN107730460B (zh) | 一种图像处理方法及移动终端 | |
CN107749046B (zh) | 一种图像处理方法及移动终端 | |
CN109803087B (zh) | 一种图像生成方法及终端设备 | |
CN111182211B (zh) | 拍摄方法、图像处理方法及电子设备 | |
CN109819166B (zh) | 一种图像处理方法和电子设备 | |
CN110766610A (zh) | 一种超分辨率图像的重建方法及电子设备 | |
CN109005314B (zh) | 一种图像处理方法及终端 | |
CN111131722A (zh) | 图像处理方法、电子设备及介质 | |
CN110086998B (zh) | 一种拍摄方法及终端 | |
CN109639981B (zh) | 一种图像拍摄方法及移动终端 | |
CN108259808B (zh) | 一种视频帧压缩方法和移动终端 | |
CN107734269B (zh) | 一种图像处理方法及移动终端 | |
CN108156386B (zh) | 一种全景拍照方法及移动终端 | |
CN111010514B (zh) | 一种图像处理方法及电子设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |