CN111726533B - 图像处理方法、装置、移动终端及计算机可读存储介质 - Google Patents
图像处理方法、装置、移动终端及计算机可读存储介质 Download PDFInfo
- Publication number
- CN111726533B CN111726533B CN202010615147.7A CN202010615147A CN111726533B CN 111726533 B CN111726533 B CN 111726533B CN 202010615147 A CN202010615147 A CN 202010615147A CN 111726533 B CN111726533 B CN 111726533B
- Authority
- CN
- China
- Prior art keywords
- image
- sub
- images
- target
- cache
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/62—Control of parameters via user interfaces
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Human Computer Interaction (AREA)
- Studio Devices (AREA)
Abstract
本申请适用于图像处理技术领域,提供了一种图像处理方法、装置、移动终端及计算机可读存储介质,包括:获取目标场景的参考图像和图像缓存队列存储的M帧缓存图像;将M帧缓存图像中的每帧缓存图像均根据预设分割算法分割为N个子区域;从每个子区域对应的M个子图像中,获取每个子区域对应的目标子图像,每个子区域对应的目标子图像是每个子区域对应的M个子图像中清晰度最高的子图像;将N个目标子图像进行拼接,获得候选图像;根据候选图像和参考图像,获取目标图像。通过本申请可获得高质量图像。
Description
技术领域
本申请属于图像处理技术领域,尤其涉及一种图像处理方法、装置、移动终端及计算机可读存储介质。
背景技术
随着成像技术和移动终端的不断发展,越来越多的用户使用移动终端(如智能手机、平板电脑等)进行图像拍摄,用户对图像质量的要求也越来越高。
目前。通常采用多帧降噪的方式改善图像质量,多帧降噪是根据场景亮度,选择合适的拍摄帧数,将拍摄帧数进行合成得到最终图像。然而,在多帧合成时,容易造成合成的图像中的部分区域出现重影,且合成的图像经过加权等计算也容易丢失图像细节,从而导致最终获得的图像质量较差。
发明内容
本申请提供了一种图像处理方法、装置、移动终端及计算机可读存储介质,以获得高质量图像。
第一方面,本申请实施例提供了一种图像处理方法,所述图像处理方法包括:
获取目标场景的参考图像和图像缓存队列存储的M帧缓存图像,M为大于1的整数,所述参考图像是指在接收到拍摄指令时对所述目标场景进行拍摄所获得的图像,所述M帧缓存图像是指存储在所述图像缓存队列中的M帧图像,所述M帧图像是在接收到所述拍摄指令之前和/或之后,采集的所述目标场景的图像;
将所述M帧缓存图像中的每帧缓存图像均按照预设分割算法分割为N个子区域,其中,在所述M帧缓存图像中,对应同一位置的子区域所对应的子图像个数为M,N为大于1的整数;
从每个子区域对应的M个子图像中,获取所述每个子区域对应的目标子图像,得到N个目标子图像,所述每个子区域对应的目标子图像是所述每个子区域对应的M个子图像中清晰度最高的子图像;
将所述N个目标子图像进行拼接,获得候选图像;
根据所述候选图像和所述参考图像,获取目标图像。
第二方面,本申请实施例提供了一种图像处理装置,所述图像处理装置包括:
第一获取模块,用于获取目标场景的参考图像和图像缓存队列存储的M帧缓存图像,M为大于1的整数,所述参考图像是指在接收到拍摄指令时对所述目标场景进行拍摄所获得的图像,所述M帧缓存图像是指存储在所述图像缓存队列中的M帧图像,所述M帧图像是在接收到所述拍摄指令之前和/或之后,采集的所述目标场景的图像;
图像分割模块,用于将所述M帧缓存图像中的每帧缓存图像均按照预设分割算法分割为N个子区域,其中,在所述M帧缓存图像中,对应同一位置的子区域所对应的子图像个数为M,N为大于1的整数;
第二获取模块,用于从每个子区域对应的M个子图像中,获取所述每个子区域对应的目标子图像,得到N个目标子图像,所述每个子区域对应的目标子图像是所述每个子区域对应的M个子图像中清晰度最高的子图像;
图像拼接模块,用于将所述N个目标子图像进行拼接,获得候选图像;
第三获取模块,用于根据所述候选图像和所述参考图像,获取目标图像。
第三方面,本申请实施例提供了一种移动终端,包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现如上述第一方面所述图像处理方法的步骤。
第四方面,本申请实施例提供了一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,所述计算机程序被处理器执行时实现如上述第一方面所述图像处理方法的步骤。
第五方面,本申请实施例提供了一种计算机程序产品,当所述计算机程序产品在移动终端上运行时,使得所述移动终端执行如上述第一方面所述图像处理方法的步骤。
由上可见,本申请通过将图像缓存队列存储的目标场景的M帧缓存图像根据相同的预设分割算法均分割为N个子区域,可以从表示同一位置的子区域所对应的M个子图像中获取清晰度最高的目标子图像,再将N个不同区域对应的N个目标子图像进行拼接,可以得到清晰度最高的候选图像,最后根据清晰度最高的候选图像和目标场景的参考图像,可以获得高质量目标图像。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1是本申请实施例一提供的图像处理方法的实现流程示意图;
图2a是缓存图像分割示例图;图2b是候选图像示例图;
图3是本申请实施例二提供的图像处理方法的实现流程示意图;
图4是本申请实施例三提供的图像处理方法的实现流程示意图;
图5是本申请实施例四提供的图像处理装置的结构示意图;
图6是本申请实施例五提供的移动终端的结构示意图;
图7是本申请实施例六提供的移动终端的结构示意图。
具体实施方式
以下描述中,为了说明而不是为了限定,提出了诸如特定系统结构、技术之类的具体细节,以便透彻理解本申请实施例。然而,本领域的技术人员应当清楚,在没有这些具体细节的其它实施例中也可以实现本申请。在其它情况中,省略对众所周知的系统、装置、电路以及方法的详细说明,以免不必要的细节妨碍本申请的描述。
应当理解,当在本说明书和所附权利要求书中使用时,术语“包括”指示所描述特征、整体、步骤、操作、元素和/或组件的存在,但并不排除一个或多个其它特征、整体、步骤、操作、元素、组件和/或其集合的存在或添加。
还应当理解,在此本申请说明书中所使用的术语仅仅是出于描述特定实施例的目的而并不意在限制本申请。如在本申请说明书和所附权利要求书中所使用的那样,除非上下文清楚地指明其它情况,否则单数形式的“一”、“一个”及“该”意在包括复数形式。
具体实现中,本申请实施例中描述的移动终端包括但不限于诸如具有触摸敏感表面(例如,触摸屏显示器和/或触摸板)的移动电话、膝上型计算机或平板计算机之类的其它便携式设备。还应当理解的是,在某些实施例中,所述设备并非便携式通信设备,而是具有触摸敏感表面(例如,触摸屏显示器和/或触摸板)的台式计算机。
在接下来的讨论中,描述了包括显示器和触摸敏感表面的移动终端。然而,应当理解的是,移动终端可以包括诸如物理键盘、鼠标和/或控制杆的一个或多个其它物理用户接口设备。
移动终端支持各种应用程序,例如以下中的一个或多个:绘图应用程序、演示应用程序、文字处理应用程序、网站创建应用程序、盘刻录应用程序、电子表格应用程序、游戏应用程序、电话应用程序、视频会议应用程序、电子邮件应用程序、即时消息收发应用程序、锻炼支持应用程序、照片管理应用程序、数码相机应用程序、数字摄影机应用程序、web浏览应用程序、数字音乐播放器应用程序和/或数字视频播放器应用程序。
可以在移动终端上执行的各种应用程序可以使用诸如触摸敏感表面的至少一个公共物理用户接口设备。可以在应用程序之间和/或相应应用程序内调整和/或改变触摸敏感表面的一个或多个功能以及终端上显示的相应信息。这样,终端的公共物理架构(例如,触摸敏感表面)可以支持具有对用户而言直观且透明的用户界面的各种应用程序。
应理解,本实施例中各步骤的序号的大小并不意味着执行顺序的先后,各过程的执行顺序应以其功能和内在逻辑确定,而不应对本申请实施例的实施过程构成任何限定。
为了说明本申请所述的技术方案,下面通过具体实施例来进行说明。
参见图1,是本申请实施例一提供的图像处理方法的实现流程示意图,该图像处理方法应用于移动终端,如图所示该图像处理方法可以包括以下步骤:
步骤101,获取目标场景的参考图像和图像缓存队列存储的M帧缓存图像。
其中,M为大于1的整数,M可以为系统默认数值,也可以为用户自定义数值;参考图像是指在接收到拍摄指令时对目标场景进行拍摄所获得的图像,目标场景是指用户所要拍摄的场景,即摄像头对准的场景(例如启动移动终端上的相机应用程序,将摄像头对准某一物体进行拍照,摄像头对准的包含有该物体的场景即为目标场景);M帧缓存图像是指存储在图像缓存队列中的M帧图像,该M帧图像是在接收到拍摄指令之前和/或之后,采集的目标场景的图像(即该M帧图像是在拍摄时间上与参考图像相邻的图像),存储在图像缓存队列中的图像可以是RAW图像,RAW图像是图像传感器获取的原始图像,其中包含有更多的图像细节,将其作为获取目标图像的基础图像,可以确保得到的目标图像具有更多的细节。
需要说明的是,在图像缓存队列存储的缓存图像的帧数较多时,可能导致所采集的缓存图像与预览画面(即当前时刻预览框中的画面)不匹配,进而导致缓存图像不是用户所要拍摄的图像,故可以通过将M的大小控制在合理范围内(例如M为10)或者提升图像传感器的输出帧率(即图像传感器每秒钟输出的图像帧数),改善图像不匹配的问题。
拍摄指令可以是指触发移动终端中摄像头拍摄图像的指令,该拍摄指令可以在检测到触发摄像头拍摄图像的任一操作时生成,例如在检测到用户对屏幕显示的拍摄按钮的点击操作时,生成拍摄指令。
图像缓存队列可以是指在移动终端的存储空间中预先设置的一个先进先出的缓存区域。为了节约缓存资源,可以将图像缓存队列设置为固定长度,例如将图像缓存队列的固定长度设置为最多存储10帧图像,在获取到第11帧图像时,需要先从图像缓存队列中删除最先存储的图像(即位于队头的图像),然后再将第11帧图像添加至图像缓存队列中。
可选地,在获取图像缓存队列存储的M帧缓存图像之前,还包括:
在拍摄预览时,持续采集目标场景的图像,并按照采集的先后顺序将目标场景的图像存储至图像缓存队列,直到接收到拍摄指令,图像缓存队列存储的图像为缓存图像;和/或
在接收到拍摄指令之后,持续采集目标场景的图像,并按照采集的先后顺序将目标场景的图像存储至图像缓存队列,直到图像采集时间达到预设时间,图像缓存队列存储的图像为缓存图像。
在本实施例中,可以通过如下三种方式将目标场景的图像存储至图像缓存队列。
第一种方式,在启动移动终端上的相机应用程序之后,通常会开启拍摄预览,移动终端在开启拍摄预览后,移动终端的摄像头可以按照预设采集频率采集目标场景的图像,并将采集的目标场景的图像依次存储至图像缓存队列,直到接收到拍摄指令,停止采集目标场景的图像。其中,预设采集频率可以是指摄像头中图像传感器的输出帧率。摄像头采集目标场景的图像之后,可以在预览框实时地显示目标场景的图像,便于用户预览。拍摄预览是一个对目标场景的图像进行实时显示的过程。
第二种方式,在接收到拍摄指令之后,移动终端的摄像头可以按照预设采集频率采集目标场景的图像,并将采集的目标场景的图像依次存储至图像缓存队列,直到图像采集时间达到预设时间,停止采集目标场景的图像。其中,预设时间是指接收到拍摄指令之后,对目标场景进行图像采集的最长时间,为了确保采集的图像是用户所要拍摄的图像,预设时间需要设置在合理的范围内,可根据经验值设置。
第三种方式,将上述第一种方式和第二种方式相结合,实现图像缓存队列中缓存图像的存储。
需要说明的是,在采集目标场景的图像的过程中,当采集到新的图像时,需要先判断图像缓存队列中图像的帧数是否达到预设帧数,若达到预设帧数,则删除图像缓存队列中最先存储的图像,并将新采集的图像存储至图像缓存队列;若未达到预设帧数,则将新采集的图像存储至图像缓存队列,预设帧数是指图像缓存队列能够存储的最多帧数。
步骤102,将M帧缓存图像中的每帧缓存图像均根据预设分割算法分割为N个子区域。
其中,在M帧缓存图像中,对应同一位置的子区域所对应的子图像个数为M,N为大于1的整数。
预设分割算法是指预先设置的将图像分割为互不相交的子区域的算法(例如基于场景检测算法确定缓存图像中的感兴趣区域,基于感兴趣区域进行图像分割的算法),即本申请根据预设分割算法将每帧缓存图像分割为互不相交的N个子区域。
在一实施例中,在对缓存图像进行分割时,可以依次对每个子区域对应的子图像进行编号,该编号包括缓存图像编号和子区域编号,Mi为缓存图像编号,i表示第i帧缓存图像,Nj为子区域编号,j表示第j个子区域,故,MiNj表示第i帧缓存图像中的第j个子区域,M帧缓存图像中子区域编号相同的子区域表示同一位置,子区域编号不同的子区域表示不同位置,如图2a所示是缓存图像分割示例图,将第一帧缓存图像和第二帧缓存图像均分割为三个子区域,在对第一帧缓存图像和第二帧缓存图像进行分割后,共有三个不同的子区域,M1N1和M2N1表示同一子区域,M1N2和M2N2表示同一子区域,M1N3和M2N3表示同一子区域。
步骤103,从每个子区域对应的M个子图像中,获取每个子区域对应的目标子图像,得到N个目标子图像。
其中,每个子区域对应的目标子图像是每个子区域对应的M个子图像中清晰度最高的子图像。
对于N个子区域中的第j个子区域,该第j个子区域是N个子区域中的任一子区域,可以从第j个子区域对应的M个子图像中,选择一个清晰度最高的子图像,被选中的清晰度最高的子图像即为第j个子区域对应的目标子图像。
步骤104,将N个目标子图像进行拼接,获得候选图像。
其中,候选图像是指N个目标子图像拼接后所得的图像,候选图像的尺寸与缓存图像以及参考图像的尺寸相同。
在一实施例中,在将N个目标子图像进行拼接获得候选图像之后,可以对候选图像进行平滑处理,平滑处理后的候选图像过渡自然,可以减少候选图像的噪声,提高候选图像质量。
可选地,在将N个目标子图像进行拼接之前,本实施例还包括:
获取N个子区域在M帧缓存图像中的位置分布信息;
相应地,将N个目标子图像进行拼接包括:
根据N个子区域在M帧缓存图像中的位置分布信息,将N个目标子图像进行拼接。
其中,N个子区域在M帧缓存图像中的位置分布信息可以是指N个子区域在M帧缓存图像中的位置信息,如图2a中M1N1、M1N2和M1N3在第一帧缓存图像中的位置信息。
在一实施例中,根据N个子区域在M帧缓存图像中的位置分布信息,可以获知N个子区域各自对应的目标子图像(即N个目标子图像)在候选图像中的位置信息,根据N个目标子图像在候选图像中的位置信息,对N个目标子图像进行拼接,拼接后所得图像即为候选图像,如图2b所示是候选图像示例图,在图2b中第一个子区域对应的目标子图像是第一个子区域在第一帧缓存图像中的图像(即M1N1在第一帧缓存图像中的图像),第二个子区域对应的目标子图像是第二个子区域在第二帧缓存图像中的图像(即M2N2在第二帧缓存图像中的图像),第三个子区域对应的目标子图像是第三个子区域在第一帧缓存图像中的图像(即M1N3在第一帧缓存图像中的图像),基于第一个子区域、第二个子区域以及第三个子区域的位置信息,将子区域M1N1在第一帧缓存图像中的图像、M2N2在第二帧缓存图像中的图像以及M1N3在第一帧缓存图像中的图像进行拼接,图2b所示即为拼接后所得的候选图像。
步骤105,根据候选图像和参考图像,获取目标图像。
其中,目标图像是指基于候选图像和参考图像,获得的质量较好的图像。
可选地,根据候选图像和参考图像,获取目标图像包括:
检测候选图像与参考图像是否匹配;
若候选图像与参考图像匹配,则将候选图像和参考图像进行融合,确定融合后所得图像为目标图像;
若候选图像与参考图像不匹配,则确定候选图像为目标图像。
在一实施例中,可以采用预设匹配算法检测候选图像与参考图像是否匹配,若候选图像与参考图像匹配,则可以将候选图像和参考图像进行融合,提升目标场景中暗处的图像表现力,实现多帧降噪的效果;若候选图像与参考图像不匹配,则可能是在触发拍摄指令时,由于移动终端抖动使得获取的参考图像较为模糊,与参考图像的内容相差较大,故此时可以选择候选图像作为目标图像,因为候选图像是由多个质量较好的子图像拼接而成,相比于候选图像,更为接近用户想要拍摄的图像。其中,预设匹配算法可以是指预先设置的任一匹配算法,例如尺度不变特征变换(Scale-Invariant Feature Transform,SIFT)匹配算法。
可选地,在获取目标图像之后,本实施例还包括:
清空图像缓存队列。
在一实施例中,在获取到目标图像之后,清空图像缓存队列,可以减少对移动终端的存储空间的占用,提高移动终端的数据处理性能。可选地,在清空图像缓存队列之前,可以先将目标图像保存至移动终端的相册,便于后续查看或使用目标图像。
本申请实施例通过图像缓存队列可以从表示同一区域的M个子图像中获取质量较好的目标子图像,再将N个不同区域对应的N个目标子图像进行拼接,可以得到质量较好的候选图像,基于候选图像获取目标图像,可以降低移动终端抖动造成的图像损失,从而得到清晰度更好,质量更好的目标图像,也可以省略拍摄时相机的对焦动作,减少拍摄时对焦带来的计算延时和图像处理功耗。
参见图3,是本申请实施例二提供的图像处理方法的实现流程示意图,该图像处理方法应用于移动终端,如图所示该图像处理方法可以包括以下步骤:
步骤301,获取目标场景的参考图像和图像缓存队列存储的M帧缓存图像。
该步骤与步骤101相同,具体可参见步骤101的相关描述,在此不再赘述。
步骤302,将M帧缓存图像中的每帧缓存图像均根据预设分割算法分割为N个子区域。
该步骤与步骤102相同,具体可参见步骤102的相关描述,在此不再赘述。
步骤303,获取每个子区域对应的M个子图像各自的清晰度。
在一实施例中,可以根据预设清晰度算法,获取每个子区域对应的M个子图像中每个子图像的清晰度。其中,预设清晰度算法可以是指预先设置的任一能够评价图像清晰度的算法,例如,能量梯度函数、Brenner梯度函数等。
以能量梯度函数为例,在获取一子图像的清晰度时,可以先获取子图像中每个像素点的灰度值,对于子图像中的任一像素点,计算该像素点与横坐标上相邻像素点的灰度差(即该像素点的灰度值与横坐标上相邻像素点的灰度值的差值)的平方以及该像素点与纵坐标上相邻像素点的灰度差(即该像素点的灰度值与纵坐标上相邻像素点的灰度值的差值)的平方,再将子图像中所有像素点对应的两个灰度差的平方进行累加,所得累加值即为子图像的清晰度。
能量梯度函数的公式如下:
D(f)=∑y∑x(|f(x+1,y)-f(x,y)|2+|f(x,y+1)-f(x,y)|2)
其中,f(x,y)表示子图像f中像素点(x,y)的灰度值,f(x+1,y)表示子图像f中像素点(x+1,y)的灰度值,f(x,y+1)表示子图像f中像素点(x,y+1)的灰度值,表示子图像f的清晰度,像素点(x+1,y)表示像素点(x,y)在横坐标上的相邻像素点,像素点(x,y+1)表示像素点(x,y)在纵坐标上的相邻像素点。
步骤304,从每个子区域对应的M个子图像中选出清晰度最高的子图像,并确定清晰度最高的子图像为每个子区域对应的目标子图像,得到N个目标子图像。
在一实施例中,对于N个子区域中的第j个子区域,该第j个子区域是N个子区域中的任一子区域,在获取到第j个子区域对应的M个子图像中每个子图像的清晰度之后,可以从M个子图像中选出清晰度最高的子图像,清晰度最高的子图像即为第j个子区域对应的目标子图像。子图像的清晰度是指子图像中各细部影纹及其边界的清晰程度,子图像的清晰度越高,表征子图像的质量越好。
步骤305,将N个目标子图像进行拼接,获得候选图像。
该步骤与步骤104相同,具体可参见步骤104的相关描述,在此不再赘述。
步骤306,根据候选图像和参考图像,获取目标图像。
该步骤与步骤105相同,具体可参见步骤105的相关描述,在此不再赘述。
本申请实施例在实施例一的基础上,通过获取每个子图像的清晰度,并将多个子图像中清晰度最高的子图像作为目标子图像,可以获得清晰度最高、质量最好的目标子图像,从而基于目标子图像拼接得到清晰度最高、质量最好的候选图像。
参见图4,是本申请实施例三提供的图像处理方法的实现流程示意图,该图像处理方法应用于移动终端,如图所示该图像处理方法可以包括以下步骤:
步骤401,获取目标场景的参考图像和图像缓存队列存储的M帧缓存图像。
该步骤与步骤101相同,具体可参见步骤101的相关描述,在此不再赘述。
步骤402,将M帧缓存图像中的每帧缓存图像均根据预设分割算法分割为N个子区域。
该步骤与步骤102相同,具体可参见步骤102的相关描述,在此不再赘述。
步骤403,显示每个子区域对应的M个子图像。
步骤404,在接收到对每个子区域对应的M个子图像中任一子图像的选择指令时,确定被选中的子图像为每个子区域对应的目标子图像,得到N个目标子图像。
在一实施例中,为了区分不同子区域对应的子图像,可以按照预设顺序在移动终端屏幕上依次显示每个子区域对应的M个子图像。以图2a为例进行说明,预设顺序为先显示第一个子区域对应的两个子图像,从第一个子区域对应的两个子图像中选出目标子图像之后,显示第二个子区域对应的两个子图像,从第二个子区域对应的两个子图像中选出目标子图像之后,显示第三个子区域对应的两个子图像,最后从第三个个子区域对应的两个子图像中选出目标子图像。
需要说明的是,对于任一子区域,在子区域对应的子图像数量较少(例如小于数量阈值)时,可在屏幕上同时显示一个子区域对应的所有子图像;在子区域对应的子图像数量较多(例如大于或等于数量阈值)时,屏幕可能无法同时显示一个子区域对应的所有子图像,此时可以在屏幕上显示所有子图像各自的缩略图,移动终端在检测到对某一缩略图的第一预设操作时,显示该缩略图对应的子图像(该子图像可以悬浮显示在显示缩略图的界面之上),在检测到对显示的子图像的第二预设操作时,结束该子图像的悬浮显示,用户可以继续对其他缩略图进行第一预设操作,便于查看屏幕上显示的所有缩略图各自对应的子图像,在检测到对某一缩略图的第三预设操作时,触发生成对该缩略图对应的子图像的选择指令。其中,第一预设操作用于显示缩略图对应的子图像,第二预设操作用于结束子图像的悬浮显示,第三预设操作用于触发生成对子图像的选择指令。
步骤405,将N个目标子图像进行拼接,获得候选图像。
该步骤与步骤104相同,具体可参见步骤104的相关描述,在此不再赘述。
步骤406,根据候选图像和参考图像,获取目标图像。
该步骤与步骤105相同,具体可参见步骤105的相关描述,在此不再赘述。
本申请实施例在实施例一的基础上,通过显示每个子区域对应的所有子图像,可以便于用户从显示的所有子图像中选择清晰度最高、质量最高的子图像作为目标图像,从而基于目标子图像拼接得到清晰度最高、质量最好的候选图像。
参见图5,是本申请实施例四提供的图像处理装置的结构示意图,为了便于说明,仅示出了与本申请实施例相关的部分。
图像处理装置包括:
第一获取模块51,用于获取目标场景的参考图像和图像缓存队列存储的M帧缓存图像,M为大于1的整数,参考图像是指在接收到拍摄指令时对目标场景进行拍摄所获得的图像,M帧缓存图像是指存储在图像缓存队列中的M帧图像,M帧图像是在接收到拍摄指令之前和/或之后,采集的目标场景的图像;
图像分割模块52,用于将M帧缓存图像中的每帧缓存图像均按照预设分割算法分割为N个子区域,其中,在M帧缓存图像中,对应同一位置的子区域所对应的子图像个数为M,N为大于1的整数;
第二获取模块53,用于从每个子区域对应的M个子图像中,获取每个子区域对应的目标子图像,得到N个目标子图像,每个子区域对应的目标子图像是每个子区域对应的M个子图像中清晰度最高的子图像;
图像拼接模块54,用于将N个目标子图像进行拼接,获得候选图像;
第三获取模块55,用于根据候选图像和参考图像,获取目标图像。
可选地,图像处理装置还包括:
图像采集模块,用于在拍摄预览时,持续采集目标场景的图像,并按照采集的先后顺序将目标场景的图像存储至图像缓存队列,图像缓存队列存储的图像为缓存图像;和/或
在接收到拍摄指令之后,持续采集目标场景的图像,并按照采集的先后顺序将目标场景的图像存储至图像缓存队列,直到图像采集时间达到预设时间,图像缓存队列存储的图像为缓存图像。
可选地,第二获取模块53包括:
清晰度获取单元,用于获取每个子区域对应的M个子图像各自的清晰度;
第一确定单元,用于从每个子区域对应的M个子图像中选出清晰度最高的子图像,并确定清晰度最高的子图像为每个子区域对应的目标子图像;或者
图像显示单元,用于显示每个子区域对应的M个子图像;
第二确定单元,用于在接收到对每个子区域对应的M个子图像中任一子图像的选择指令时,确定被选中的子图像为每个子区域对应的目标子图像。
可选地,图像处理装置还包括:
位置获取模块,用于获取N个子区域在M帧缓存图像中的位置分布信息;
图像拼接模块54具体用于:
根据N个子区域在M帧缓存图像中的位置分布信息,将N个目标子图像进行拼接。
可选地,第三获取模块55具体用于:
检测候选图像与参考图像是否匹配;
若候选图像与参考图像匹配,则将候选图像和参考图像进行融合,确定融合后所得图像为目标图像;
若候选图像与参考图像不匹配,则确定候选图像为目标图像。
可选地,图像处理装置还包括:
缓存清空模块,用于清空图像缓存队列。
本申请实施例提供的图像处理装置可以应用在前述方法实施例中,详情参见上述方法实施例的描述,在此不再赘述。
图6是本申请实施例五提供的移动终端的结构示意图。如图所示的该移动终端可以包括:一个或多个处理器601(图中仅示出一个);一个或多个输入设备602(图中仅示出一个),一个或多个输出设备603(图中仅示出一个)和存储器604。上述处理器601、输入设备602、输出设备603和存储器604通过总线605连接。存储器604用于存储指令,处理器601用于执行存储器604存储的指令时实现上述各个图像处理方法实施例中的步骤。
应当理解,在本申请实施例中,处理器601可以是中央处理单元(CentralProcessing Unit,CPU),该处理器还可以是其他通用处理器、数字信号处理器(DigitalSignal Processor,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现成可编程门阵列(Field-Programmable Gate Array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
输入设备602可以包括触控板、指纹采传感器(用于采集用户的指纹信息和指纹的方向信息)、麦克风、数据接收接口等。输出设备603可以包括显示器(LCD等)、扬声器、数据发送接口等。
该存储器604可以包括只读存储器和随机存取存储器,并向处理器601提供指令和数据。存储器604的一部分还可以包括非易失性随机存取存储器。例如,存储器604还可以存储设备类型的信息。
具体实现中,本申请实施例中所描述的处理器601、输入设备602、输出设备603和存储器604可执行本申请实施例提供的图像处理方法的实施例中所描述的实现方式,也可执行实施例四图像处理装置中所描述的实现方式,在此不再赘述。
图7是本申请实施例六提供的移动终端的结构示意图。如图7所示,该实施例的移动终端7包括:一个或多个处理器70(图中仅示出一个)、存储器71以及存储在存储器71中并可在至少一个处理器70上运行的计算机程序72。处理器70执行计算机程序72时实现上述各个图像处理方法实施例中的步骤。
移动终端7可以是智能手机、平板电脑等具有拍摄功能的移动设备。移动终端可包括,但不仅限于,处理器70、存储器71。本领域技术人员可以理解,图7仅仅是移动终端7的示例,并不构成对移动终端7的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件,例如移动终端还可以包括输入输出设备、网络接入设备、总线等。
所称处理器70可以是中央处理单元CPU,还可以是其他通用处理器、数字信号处理器DSP、专用集成电路ASIC、现成可编程门阵列FPGA或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
存储器71可以是移动终端7的内部存储单元,例如移动终端7的硬盘或内存。存储器71也可以是移动终端7的外部存储设备,例如移动终端7上配备的插接式硬盘,智能存储卡(Smart Media Card,SMC),安全数字(Secure Digital,SD)卡,闪存卡(Flash Card)等。进一步地,存储器71还可以既包括移动终端7的内部存储单元也包括外部存储设备。存储器71用于存储计算机程序以及移动终端所需的其他程序和数据。存储器71还可以用于暂时地存储已经输出或者将要输出的数据。
所属领域的技术人员可以清楚地了解到,为了描述的方便和简洁,仅以上述各功能单元、模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能单元、模块完成,即将装置的内部结构划分成不同的功能单元或模块,以完成以上描述的全部或者部分功能。实施例中的各功能单元、模块可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中,上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。另外,各功能单元、模块的具体名称也只是为了便于相互区分,并不用于限制本申请的保护范围。上述系统中单元、模块的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述或记载的部分,可以参见其它实施例的相关描述。
本领域普通技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本申请的范围。
在本申请所提供的实施例中,应该理解到,所揭露的装置/移动终端和方法,可以通过其它的方式实现。例如,以上所描述的装置/移动终端实施例仅仅是示意性的,例如,模块或单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通讯连接可以是通过一些接口,装置或单元的间接耦合或通讯连接,可以是电性,机械或其它的形式。
作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
集成的模块/单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请实现上述实施例方法中的全部或部分流程,也可以通过计算机程序来指令相关的硬件来完成,的计算机程序可存储于一计算机可读存储介质中,该计算机程序在被处理器执行时,可实现上述各个方法实施例的步骤。其中,计算机程序包括计算机程序代码,计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。计算机可读介质可以包括:能够携带计算机程序代码的任何实体或装置、记录介质、U盘、移动硬盘、磁碟、光盘、计算机存储器、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、电载波信号、电信信号以及软件分发介质等。需要说明的是,计算机可读介质包含的内容可以根据司法管辖区内立法和专利实践的要求进行适当的增减,例如在某些司法管辖区,根据立法和专利实践,计算机可读介质不包括电载波信号和电信信号。
本申请实现上述实施例方法中的全部或部分流程,也可以通过一种计算机程序产品来完成,当计算机程序产品在移动终端上运行时,使得移动终端执行时实现可实现上述各个方法实施例中的步骤。
以上实施例仅用以说明本申请的技术方案,而非对其限制;尽管参照前述实施例对本申请进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本申请各实施例技术方案的精神和范围,均应包含在本申请的保护范围之内。
Claims (10)
1.一种图像处理方法,其特征在于,所述图像处理方法包括:
获取目标场景的参考图像和图像缓存队列存储的M帧缓存图像,M为大于1的整数,所述参考图像是指在接收到拍摄指令时对所述目标场景进行拍摄所获得的图像,所述M帧缓存图像是指存储在所述图像缓存队列中的M帧图像,所述M帧图像是在接收到所述拍摄指令之前和/或之后,采集的所述目标场景的图像;
将所述M帧缓存图像中的每帧缓存图像均按照预设分割算法分割为N个子区域,其中,在所述M帧缓存图像中,对应同一位置的子区域所对应的子图像个数为M,N为大于1的整数;
从每个子区域对应的M个子图像中,获取所述每个子区域对应的目标子图像,得到N个目标子图像,所述每个子区域对应的目标子图像是所述每个子区域对应的M个子图像中清晰度最高的子图像;
将所述N个目标子图像进行拼接,获得候选图像;
根据所述候选图像和所述参考图像,获取目标图像。
2.如权利要求1所述的图像处理方法,其特征在于,在获取图像缓存队列存储的M帧缓存图像之前,还包括:
在拍摄预览时,持续采集所述目标场景的图像,并按照采集的先后顺序将所述目标场景的图像存储至图像缓存队列,直到接收到所述拍摄指令,所述图像缓存队列存储的图像为缓存图像;和/或
在接收到所述拍摄指令之后,持续采集所述目标场景的图像,并按照采集的先后顺序将所述目标场景的图像存储至图像缓存队列,直到图像采集时间达到预设时间,所述图像缓存队列存储的图像为缓存图像。
3.如权利要求1所述的图像处理方法,其特征在于,所述从每个子区域对应的M个子图像中,获取所述每个子区域对应的目标子图像包括:
获取所述每个子区域对应的M个子图像各自的清晰度;
从所述每个子区域对应的M个子图像中选出清晰度最高的子图像,并确定所述清晰度最高的子图像为所述每个子区域对应的目标子图像。
4.如权利要求1所述的图像处理方法,其特征在于,所述从每个子区域对应的M个子图像中,获取所述每个子区域对应的目标子图像包括:
显示所述每个子区域对应的M个子图像;
在接收到对所述每个子区域对应的M个子图像中任一子图像的选择指令时,确定被选中的子图像为所述每个子区域对应的目标子图像。
5.如权利要求1所述的图像处理方法,其特征在于,在将所述N个目标子图像进行拼接之前,还包括:
获取所述N个子区域在所述M帧缓存图像中的位置分布信息;
相应地,所述将所述N个目标子图像进行拼接包括:
根据所述N个子区域在所述M帧缓存图像中的位置分布信息,将所述N个目标子图像进行拼接。
6.如权利要求1所述的图像处理方法,其特征在于,所述根据所述候选图像和所述参考图像,获取目标图像包括:
检测所述候选图像与所述参考图像是否匹配;
若所述候选图像与所述参考图像匹配,则将所述候选图像和所述参考图像进行融合,确定融合后所得图像为所述目标图像;
若所述候选图像与所述参考图像不匹配,则确定所述候选图像为所述目标图像。
7.如权利要求1至6任一项所述的图像处理方法,其特征在于,在获取目标图像之后,还包括:
清空所述图像缓存队列。
8.一种图像处理装置,其特征在于,所述图像处理装置包括:
第一获取模块,用于获取目标场景的参考图像和图像缓存队列存储的M帧缓存图像,M为大于1的整数,所述参考图像是指在接收到拍摄指令时对所述目标场景进行拍摄所获得的图像,所述M帧缓存图像是指存储在所述图像缓存队列中的M帧图像,所述M帧图像是在接收到所述拍摄指令之前和/或之后,采集的所述目标场景的图像;
图像分割模块,用于将所述M帧缓存图像中的每帧缓存图像均按照预设分割算法分割为N个子区域,其中,在所述M帧缓存图像中,对应同一位置的子区域所对应的子图像个数为M,N为大于1的整数;
第二获取模块,用于从每个子区域对应的M个子图像中,获取所述每个子区域对应的目标子图像,得到N个目标子图像,所述每个子区域对应的目标子图像是所述每个子区域对应的M个子图像中清晰度最高的子图像;
图像拼接模块,用于将所述N个目标子图像进行拼接,获得候选图像;
第三获取模块,用于根据所述候选图像和所述参考图像,获取目标图像。
9.一种移动终端,包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现如权利要求1至7任一项所述图像处理方法的步骤。
10.一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1至7任一项所述图像处理方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010615147.7A CN111726533B (zh) | 2020-06-30 | 2020-06-30 | 图像处理方法、装置、移动终端及计算机可读存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010615147.7A CN111726533B (zh) | 2020-06-30 | 2020-06-30 | 图像处理方法、装置、移动终端及计算机可读存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN111726533A CN111726533A (zh) | 2020-09-29 |
CN111726533B true CN111726533B (zh) | 2021-11-16 |
Family
ID=72570440
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010615147.7A Active CN111726533B (zh) | 2020-06-30 | 2020-06-30 | 图像处理方法、装置、移动终端及计算机可读存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111726533B (zh) |
Families Citing this family (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112184610B (zh) * | 2020-10-13 | 2023-11-28 | 深圳市锐尔觅移动通信有限公司 | 图像处理方法及装置、存储介质和电子设备 |
CN112312023B (zh) * | 2020-10-30 | 2022-04-08 | 北京小米移动软件有限公司 | 一种相机的缓存队列分配方法、装置、电子设备和存储介质 |
CN112330649B (zh) * | 2020-11-12 | 2022-11-04 | 清华大学 | 结合多光谱和可见光图像的生理信息获取方法和装置 |
CN114520890B (zh) * | 2020-11-19 | 2023-07-11 | 华为技术有限公司 | 图像处理方法及装置 |
CN112365521B (zh) * | 2020-12-08 | 2021-08-27 | 萱闱(北京)生物科技有限公司 | 终端设备的速度监测方法、装置、介质和计算设备 |
CN112989943A (zh) * | 2021-02-09 | 2021-06-18 | 联想(北京)有限公司 | 一种信息处理方法和信息处理装置 |
CN112949446B (zh) * | 2021-02-25 | 2023-04-18 | 山东英信计算机技术有限公司 | 一种物体识别方法、装置、设备及介质 |
CN113077425A (zh) * | 2021-03-23 | 2021-07-06 | 上海联影智能医疗科技有限公司 | 目标图像的确定方法、装置、计算机设备和存储介质 |
CN113076159B (zh) * | 2021-03-26 | 2024-02-27 | 西安万像电子科技有限公司 | 图像显示方法和装置、存储介质及电子设备 |
CN113034493A (zh) * | 2021-04-19 | 2021-06-25 | 广州绿怡信息科技有限公司 | 摄像检测模型训练方法及摄像检测方法 |
CN113225451B (zh) * | 2021-04-28 | 2023-06-27 | 维沃移动通信(杭州)有限公司 | 图像处理方法、装置和电子设备 |
CN115661485B (zh) * | 2022-12-23 | 2023-03-10 | 南京芯驰半导体科技有限公司 | 图像特征提取方法、装置、设备及存储介质 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110136091A (zh) * | 2019-04-12 | 2019-08-16 | 深圳云天励飞技术有限公司 | 图像处理方法及相关产品 |
CN110572584A (zh) * | 2019-08-26 | 2019-12-13 | Oppo广东移动通信有限公司 | 图像处理方法、装置、存储介质及电子设备 |
CN111316319A (zh) * | 2019-03-15 | 2020-06-19 | 深圳市大疆创新科技有限公司 | 图像处理方法、电子设备及计算机可读存储介质 |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103873780B (zh) * | 2012-12-17 | 2017-11-28 | 联想(北京)有限公司 | 一种采集视频的方法及电子设备 |
CN107172296A (zh) * | 2017-06-22 | 2017-09-15 | 维沃移动通信有限公司 | 一种图像拍摄方法及移动终端 |
CN111131698B (zh) * | 2019-12-23 | 2021-08-27 | RealMe重庆移动通信有限公司 | 图像处理方法及装置、计算机可读介质、电子设备 |
-
2020
- 2020-06-30 CN CN202010615147.7A patent/CN111726533B/zh active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111316319A (zh) * | 2019-03-15 | 2020-06-19 | 深圳市大疆创新科技有限公司 | 图像处理方法、电子设备及计算机可读存储介质 |
CN110136091A (zh) * | 2019-04-12 | 2019-08-16 | 深圳云天励飞技术有限公司 | 图像处理方法及相关产品 |
CN110572584A (zh) * | 2019-08-26 | 2019-12-13 | Oppo广东移动通信有限公司 | 图像处理方法、装置、存储介质及电子设备 |
Also Published As
Publication number | Publication date |
---|---|
CN111726533A (zh) | 2020-09-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111726533B (zh) | 图像处理方法、装置、移动终端及计算机可读存储介质 | |
CN111654594B (zh) | 图像拍摄方法、图像拍摄装置、移动终端及存储介质 | |
CN113592887B (zh) | 视频拍摄方法、电子设备及计算机可读存储介质 | |
CN107172345B (zh) | 一种图像处理方法及终端 | |
WO2017215501A1 (zh) | 图像降噪处理方法、装置及计算机存储介质 | |
CN108737739B (zh) | 一种预览画面采集方法、预览画面采集装置及电子设备 | |
WO2019104705A1 (zh) | 图像处理的方法和设备 | |
CN111698553A (zh) | 视频处理方法、装置、电子设备及可读存储介质 | |
CN108924440B (zh) | 贴纸显示方法、装置、终端及计算机可读存储介质 | |
WO2021098609A1 (zh) | 图像检测方法、装置及电子设备 | |
WO2018166069A1 (zh) | 拍照预览方法、图形用户界面及终端 | |
CN112188097B (zh) | 拍摄方法、拍摄装置、终端设备及计算机可读存储介质 | |
CN112102164A (zh) | 一种图像处理方法、装置、终端及存储介质 | |
CN115689963B (zh) | 一种图像处理方法及电子设备 | |
CN107302666A (zh) | 拍照方法、移动终端及计算机可读存储介质 | |
CN110166696B (zh) | 拍摄方法、装置、终端设备以及计算机可读存储介质 | |
CN110022429A (zh) | 影像撷取装置、储存空间调整方法与计算机可读记录媒体 | |
CN106231200A (zh) | 一种拍照方法及装置 | |
CN117061861B (zh) | 一种拍摄方法、芯片系统和电子设备 | |
CN112055156B (zh) | 预览图像更新方法、装置、移动终端及存储介质 | |
CN110049247B (zh) | 图像优选方法、装置、电子设备及可读存储介质 | |
CN110677586B (zh) | 图像显示方法、图像显示装置及移动终端 | |
CN110969587A (zh) | 一种图像采集方法、装置及电子设备 | |
CN113744139A (zh) | 图像处理方法、装置、电子设备及存储介质 | |
CN112383708B (zh) | 拍摄方法、装置、电子设备及可读存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |