CN114390189A - 图像处理方法、装置、存储介质及移动终端 - Google Patents

图像处理方法、装置、存储介质及移动终端 Download PDF

Info

Publication number
CN114390189A
CN114390189A CN202011141267.4A CN202011141267A CN114390189A CN 114390189 A CN114390189 A CN 114390189A CN 202011141267 A CN202011141267 A CN 202011141267A CN 114390189 A CN114390189 A CN 114390189A
Authority
CN
China
Prior art keywords
focusing
different
image
depth
determining
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202011141267.4A
Other languages
English (en)
Inventor
李雅楠
王晓涛
张萌
雷磊
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Xiaomi Mobile Software Co Ltd
Original Assignee
Beijing Xiaomi Mobile Software Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Xiaomi Mobile Software Co Ltd filed Critical Beijing Xiaomi Mobile Software Co Ltd
Priority to CN202011141267.4A priority Critical patent/CN114390189A/zh
Publication of CN114390189A publication Critical patent/CN114390189A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/67Focus control based on electronic image sensor signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/95Computational photography systems, e.g. light-field imaging systems
    • H04N23/958Computational photography systems, e.g. light-field imaging systems for extended depth of field imaging
    • H04N23/959Computational photography systems, e.g. light-field imaging systems for extended depth of field imaging by adjusting depth of field during image capture, e.g. maximising or setting range based on scene characteristics

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computing Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Studio Devices (AREA)

Abstract

本公开是关于一种图像处理方法、装置、存储介质及移动终端。该方法包括:针对目标场景的不同深度范围,获取不同焦距的多张备选图像;根据检测到的对焦指令,确定所述对焦指令的对焦区域;其中,不同的对焦区域具有不同的深度范围;在所述多张备选图像中,确定所述对焦区域的深度范围对应焦距的备选图像为对焦后的目标图像。通过本公开实施例的技术方案,对同一目标场景获取了多张不同焦距的备选图像,从而可以根据对焦指令选择对应焦距的备选图像作为目标图像,实现对图像的重新对焦。

Description

图像处理方法、装置、存储介质及移动终端
技术领域
本公开涉及图像处理技术领域,尤其涉及一种图像处理方法、装置、存储介质及移动终端。
背景技术
随着智能移动终端的图像处理技术的发展,手机和平板电脑等移动终端不仅具有通过摄像头进行拍照和录影等功能,还可以实现在拍摄过程中对拍摄图像的多种功能调整。例如,在拍摄过程中实现对焦、光线、色彩调整以及延时拍摄等等。但是对于已经拍摄得到的图像,则难以实现图像的重新对焦,造成拍摄的图像不能满足用户的需求。
发明内容
本公开提供一种图像处理方法、装置、存储介质及移动终端。
根据本公开实施例的第一方面,提供一种图像处理方法,包括:
针对目标场景的不同深度范围,获取不同焦距的多张备选图像;
根据检测到的对焦指令,确定所述对焦指令的对焦区域;其中,不同的对焦区域具有不同的深度范围;
在所述多张备选图像中,确定所述对焦区域的深度范围对应焦距的备选图像为对焦后的目标图像。
在一些实施例中,所述针对目标场景的不同深度范围,获取不同焦距的多张备选图像,包括:
根据预览画面对所述目标场景进行区域划分;其中,划分后的不同区域具有不同的深度范围;
通过镜头针对不同区域进行对焦,并获取对应的所述备选图像。
在一些实施例中,所述根据预览画面对所述目标场景进行区域划分,包括:
根据所述预览画面,通过所述镜头获取所述目标场景中的深度关系数据;其中,所述镜头为单目镜头;
根据所述深度关系数据,将所述目标场景划分为不同深度范围的区域。
在一些实施例中,所述根据所述深度关系数据,将所述目标场景划分为不同深度范围的区域,包括:
根据所述深度关系数据,对属于相同深度范围的像素划分至一个区域。
在一些实施例中,所述方法还包括:
确定每个区域对应的对焦像素位置;其中,所述对焦像素位置用于供所述镜头进行对焦时确定对焦焦点。
在一些实施例中,所述通过镜头针对不同区域进行对焦,并获取对应的所述备选图像,包括:
通过所述镜头根据不同区域对应的所述对焦像素进行对焦,并对对焦后的场景进行图像采集,得到所述备选图像。
在一些实施例中,所述方法还包括:
对所述多张备选图像进行对齐处理;
删除所述多张备选图像中对齐偏差大于预定阈值的备选图像。
在一些实施例中,所述根据检测到的对焦指令,确定所述对焦指令的对焦区域,包括:
根据终端触控屏上检测到的触控操作,确定触控位置所属于的区域为所述对焦区域。
根据本公开实施例的第二方面,提供一种图像处理装置,包括:
获取模块,用于针对目标场景的不同深度范围,获取不同焦距的多张备选图像;
第一确定模块,用于根据检测到的对焦指令,确定所述对焦指令的对焦区域;其中,不同的对焦区域具有不同的深度范围;
第二确定模块,用于在所述多张备选图像中,确定所述对焦区域的深度范围对应焦距的备选图像为对焦后的目标图像。
在一些实施例中,所述获取模块,包括:
第一划分子模块,用于根据预览画面对所述目标场景进行区域划分;其中,划分后的不同区域具有不同的深度范围;
第一获取子模块,用于通过镜头针对不同区域进行对焦,并获取对应的所述备选图像。
在一些实施例中,所述第一划分子模块,包括:
第二获取子模块,用于根据所述预览画面,通过所述镜头获取所述目标场景中的深度关系数据;其中,所述镜头为单目镜头;
第二划分子模块,用于根据所述深度关系数据,将所述目标场景划分为不同深度范围的区域。
在一些实施例中,所述第二划分子模块,包括:
第三划分子模块,用于根据所述深度关系数据,对属于相同深度范围的像素划分至一个区域。
在一些实施例中,所述装置还包括:
第三确定模块,用于确定每个区域对应的对焦像素位置;其中,所述对焦像素位置用于供所述镜头进行对焦时确定对焦焦点。
在一些实施例中,所述第一获取子模块,包括:
采集子模块,用于通过所述镜头根据不同区域对应的所述对焦像素进行对焦,并对对焦后的场景进行图像采集,得到所述备选图像。
在一些实施例中,所述装置还包括:
对齐模块,用于对所述多张备选图像进行对齐处理;
删除模块,用于删除所述多张备选图像中对齐偏差大于预定阈值的备选图像。
在一些实施例中,所述第一确定模块,包括:
确定子模块,用于根据终端触控屏上检测到的触控操作,确定触控位置所属于的区域为所述对焦区域。
根据本公开实施例的第三方面,提供一种移动终端,所述移动终端至少包括:处理器和用于存储能够在所述处理器上运行的可执行指令的存储器,其中:
处理器用于运行所述可执行指令时,所述可执行指令执行上述任一图像处理方法中的步骤。
根据本公开实施例的第四方面,提供一种非临时性计算机可读存储介质,所述计算机可读存储介质中存储有计算机可执行指令,该计算机可执行指令被处理器执行时实现上述任一项图像处理方法中的步骤。
本公开的实施例提供的技术方案可以包括以下有益效果:通过本公开实施例的技术方案,对同一场景获取了多张不同焦距的备选图像,从而便于在使用图像时,可以根据对焦区域所的深度范围,选择对应焦距的备选图像作为目标图像。这样,目标图像的对焦位置能够满足对焦指令所对应的需求,从而实现对同一场景的图像的重对焦。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本公开。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本发明的实施例,并与说明书一起用于解释本发明的原理。
图1是根据一示例性实施例示出的一种图像处理方法的流程图一;
图2是根据一示例性实施例示出的一种图像处理方法的流程图二;
图3是根据一示例性实施例示出的一种图像处理方法的流程图三;
图4是根据一示例性实施例示出的一种图像处理方法的流程图四;
图5是根据一示例性实施例示出的一种图像处理装置的结构框图;
图6是根据一示例性实施例示出的一种移动终端的实体结构框图。
具体实施方式
这里将详细地对示例性实施例进行说明,其示例表示在附图中。下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本发明相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本发明的一些方面相一致的装置和方法的例子。
图1是根据一示例性实施例示出的一种图像处理方法的流程图,如图1所示,该方法包括以下步骤:
步骤S101、针对目标场景的不同深度范围,获取不同焦距的多张备选图像;
步骤S102、根据检测到的对焦指令,确定所述对焦指令的对焦区域;其中,不同的对焦区域具有不同的深度范围;
步骤S103、在所述多张备选图像中,确定所述对焦区域的深度范围对应焦距的备选图像为对焦后的目标图像。
这里,深度是指图像中物体相对于图像采集装置,如镜头的距离远近的程度。由于在拍摄图像的过程中,可以通过调整焦距来实现对不同远近距离的物体的对焦,深度与对焦的焦距相同的物体则可以拍摄到清晰的效果,而深度与对焦的焦距不同的物体则在画面中呈现出模糊的效果。这样,拍摄得到的图像则会呈现出三维立体的效果,使得观看图像时可以感受到图像中不同物体的深度。
在本公开实施例中,目标场景为备选图像对应的同一场景,多张备选图像均为针对该目标场景拍摄的图像。由于多张备选图像是基于不同的焦距获取得到的,因此多张备选图像的焦距所对应的图像中的深度不同的物体。也就是说,如果在目标场景中存在多个深度不同的物体,那么多张备选图像则分别对焦在这些不同的物体上,使得多张备选图像分别具有不同的对焦效果。
上述对焦指令可以是针对目标场景选择对焦区域的指令,可以是用户手动选择的也可以是基于预设规则自动选择的。例如,在显示目标场景显示屏上,检测选择目标场景中区域的指令。可以是通过点击选择目标场景中某一物品对应的区域,也可以是通过圈选出的指定区域。
在本公开实施例中,不同的对焦区域具有不同的深度范围,例如,在一个画面中人物所在区域的深度与背景画面的深度属于不同的深度范围。由于不同的深度范围具有不同的备选图像,因此,根据对焦指令所确定的对焦区域可以与多张备选图像中的至少一张相对应。因此,可以确定对焦对焦区域的深度范围对应焦距的备选图像为对焦后的目标图像。
在一实施例中,可以在显示屏上显示目标图像。这样,显示的目标图像的对焦位置则在对焦指令所指示的区域内,例如,当对焦指令指示对焦在图像中一人物的人脸所在的区域内时,显示屏上显示的目标图像则为该人脸清晰,而与该人脸所在的深度范围不同的其他区域(包括背景、前景以及其他人物等)则显示为虚化的模糊图像,从而在视觉上可以体现出注视该对焦的人脸的使用感受。
在本公开实施例中,可以针对目标场景的多张备选图像中可以包含一张初始图像,用于在未接受到对焦指令的情况下显示。该初始图像的对焦位置可以是在拍摄图像的过程中,预览画面中对焦位置所对应的图像,也可以是多张备选图像中的任意一张备选图像。在展示该初始图像时可以检测对焦指令,进而在备选图像中选择目标图像。在另一实施例中,还可以在显示目标图像时再次接收对焦指令,然后根据对焦指令重新在备选图像中选择目标图像。如此,可以实现更加丰富的图像展示效果,便于用户在观赏图像时,根据需要重点观看的区域,反复调整图像的对焦位置,提升用户的使用体验。
在一些实施例中,如图2所示,上述步骤S101中,所述针对目标场景的不同深度范围,获取不同焦距的多张备选图像,包括:
步骤S201、根据预览画面对所述目标场景进行区域划分;其中,划分后的不同区域具有不同的深度范围;
步骤S202、通过镜头针对不同区域进行对焦,并获取对应的所述备选图像。
由于目标场景是三维的实际空间所形成的场景,因此,目标场景中可包含有不同深度范围的对象。例如,摆放在不同位置的物品、与拍摄镜头的距离不同的人物以及背景中的建筑、自然景观以及天空、陆地等均具有不同的深度。预览画面为拍摄图像时,根据镜头采集的画面在显示屏上实时显示的图像数据流。其中,不同深度对应的像素可通过不同的像素亮度值、灰度值等参数来体现。因此,根据预览画面中各像素的参数,可以确定出不同位置的深度数据。
在本公开实施例中,可根据预览画面中的深度数据,对目标场景进行区域划分。例如,将深度值属于同一深度范围的像素所在的区域划分为目标场景中的一个区域。这样,对于目标场景中属于不同深度范围的物体可以划分至不同的区域内。
这里,针对不同的区域可分别进行对焦并获取对应的备选图像。因此,针对目标场景所获取的备选图像的数量可以根据目标场景划分的区域的数量确定。例如,每一区域对应获取一张备选图像,或者针对每一区域对应获取多张备选图像。此外,当然也可根据实际情况,对某些区域不对应获取备选图像,例如,针对背景(如天空)所在的区域不进行对焦及备选图像的获取。
如此,就可以对同一目标场景的不同区域获取得到对焦不同区域的多张备选图像。也就是说,多张备选图像清晰与模糊的区域所在的位置不同。
在一些实施例中,如图3所示,上述步骤S201中,所述根据预览画面对所述目标场景进行区域划分,包括:
步骤S301、根据所述预览画面,通过所述镜头获取所述目标场景中的深度关系数据;其中,所述镜头为单目镜头;
步骤S302、根据所述深度关系数据,将所述目标场景划分为不同深度范围的区域。
在针对目标场景进行区域划分时,可以根据区域的深度关系数据来进行划分。由于在同一目标场景中,不同的物体与摄像头的距离不同,因此具有不同的深度值。在进行区域划分时,可以检测目标场景中不同位置的深度值,然后根据深度值所属于的深度范围确定上述深度关系数据。此外,也可以不进行深度值的检测,直接通过目标场景的预览画面,获取不同位置的深度关系,例如,不同位置的物体之间的深度差,进而确定上述深度关系数据。
然后根据上述深度关系数据将属于同一深度范围的不同位置划分至同一区域。当然,划分至同一区域的位置可以形成连续的区域,例如,属于同一个物体。
在本公开实施例中,上述镜头为单目镜头。单目镜头不同于双目镜头或者深度镜头,无法直接获得深度值。但是,通过单目镜头获取到图像可通过各像素的像素值,利用单目深度估计的方法获取目标场景中的深度关系数据。由于单目深度估计对硬件的要求较低,虽然不能获得精确的深度值,但是能够获得目标场景中不同位置的深度关系。单目镜头的结构简单,成本低,因此,使用单目镜头可以广泛应用于各种电子设备。
在另一实施例中,也可以利用双目深度估计或者tof(Time of Flight,飞行时间法)等方法获取上述深度关系数据,或者直接获取不同位置的深度值。
在一些实施例中,所述根据所述深度关系数据,将所述目标场景划分为不同深度范围的区域,包括:
根据所述深度关系数据,对属于相同深度范围的像素划分至一个区域。
考虑到通过深度关系数据的范围直接对图像进行区域划分,可能会由于不准确等情况使得同一对象被划分至不同的区域中,并且深度区域的数量可能与实际不符。因此,在本公开实施例中,可以使用聚类等处理方法,对图像的像素进行处理,将属于同一连续范围内的像素划分至同一区域。此外,还可以结合图像的边缘识别等技术辅助区域的划分,进而使得划分的区域更加符合实际场景中的不同对象所在的区域。
在一些实施例中,所述方法还包括:
确定每个区域对应的对焦像素位置;其中,所述对焦像素位置用于供所述镜头进行对焦时确定对焦焦点。
由于划分出的每个区域的大小和形状都可能不同,在进行备选图像获取时,实际对焦的焦点可以是对应区域中的任意位置。因此,可以在进行区域划分时,对每个区域确定一个对焦像素的位置。该对焦像素的位置可以是区域的中心位置、边缘位置或者区域的多个顶点的交点位置等等。这样,在拍摄时,可以根据目标场景中多个区域的对焦像素的位置分别进行对焦,并获取对应的备选图图像。
在一些实施例中,所述通过镜头针对不同区域进行对焦,并获取对应的所述备选图像,包括:
通过所述镜头不同区域对应的所述对焦像素进行对焦,并对对焦后的场景进行图像采集,得到所述备选图像。
在本公开实施例中,每个区域都可以具有一个对焦像素,对焦像素的位置可以通过像素的坐标数据来确定。因此,在进行图像采集时,镜头根据对焦像素的坐标来进行焦距调整,进而实现像素级别的准确对焦。
如此,镜头进行对焦时,不需要进行复杂的运算和处理,只需要直接获取对焦像素的坐标数据,就可以方便地进行对焦。
在一些实施例中,所述方法还包括:
对所述多张备选图像进行对齐处理;
删除所述多张备选图像中对齐偏差大于预定阈值的备选图像。
由于在拍摄图像的过程中,多张备选图像是依次对同一目标场景进行拍摄得到的,在拍摄过程中需要进行多次焦距的调整,因此,这个过程需要花费一段时间。而由于拍摄过程中可能存在抖动等情况,会使得多张备选图像之间存在位置偏差。
因此,在本公开实施例中可以对采集到的多张备选图像进行对齐处理,对于偏差过大的备选图像则可以进行删除。
需要说明的是,为了减少由于对齐过程中删除了部分区域对焦的图像造成无法展示这些区域对焦的目标图像的情况,可以对每个区域进行对焦时获取多张图像,并在对齐过程中删除偏差过大的部分图像。
此外,在拍摄过程中场景中的物体还可能发生变化,例如,场景中的人物动作发生了改变。在这种情况下,可以通过检测出场景中产生运动的区域,然后进行对齐时去除该区域不进行运算,以减少造成对齐错误、重影等情况。
在一些实施例中,所述根据检测到的对焦指令,确定所述对焦指令的对焦区域,包括:
根据终端触控屏上检测到的触控操作,确定触控位置所属于的区域为所述对焦区域。
在本公开实施例中,可以通过终端的显示屏来展示目标图像,也可以在终端的显示屏上展示目标场景对应的初始图像(任一备选图像)。
该显示屏可以为具有触控检测功能的触控屏,在展示上述初始图像或者目标图像时,可以检测用户在触控屏上的触控操作,该触控操作可以为用于对焦的对焦指令。触控操作所触控的位置则用于确定对焦区域。
这样,终端可根据触控操作的位置作为对焦区域,然后在备选图像中选择与之对应的备选图像作为新的目标图像,并显示在该触控屏上,从而实现对图像的重对焦。
本公开实施例还提供如下示例:
图像的重对焦指对拍摄后的照片重新指定焦点,使得焦点深度的区域清晰同时其他区域产生失焦模糊。通过图像重对焦可以突出一张图像中不同的部分,例如在拍照取景时让花朵或树枝作为前景、人物作为中景、风景做背景,对这样一张图像重对焦到前景的植物上或中景的人物上能够获得不同风格的图像,而这些图像可以都是高质量的图像。
在一实施例中,图像重对焦的方法可包括:获取一张清晰RGB(红绿蓝)图像和对应的深度图,重新选择对焦点之后通过深度图对不同深度的区域划分,针对每个区域对RGB图像进行不同程度的模糊处理。通过这种方法,在拍照过程中一些手机不具备获取深度图的硬件条件,对于没有对应深度的单张图像无法进行重对焦的处理。此外,对RGB图像的模糊处理不如真实镜头拍摄得到的失焦效果自然,例如光晕和模糊程度等,并且处理后的图像有可能会因为深度的错误导致处理后的图像产生断层问题。
在本公开实施例中,通过在拍摄阶段通过深度估计引导,采集多张焦距不同的图像,可以解决模糊处理会导致图像不真实或产生错误断层的问题。
在一实施例中,图像的处理方法可包括:获取图像,并将图像划分出分割区域和距离层;将距离层合并,并进行处理;对属于不同层分割区域进行标记,然后进行处理;新建一张空白结果图像,将一层一层图像粘贴到该结果图像上,进而得到结果图像。通过对图像的区域分割对背景图像根据不同距离,分别做不同程度强度的模糊处理,能够使得结果图像背景过度得更加自然,不会导致图像的失真,保证的图像原有的真实度;同时通过距离层一层一层的贴图融合,使得背景的模糊扩散不会扩散到前景中,使前景到背景的边缘效果更好,更加符合光学成像的效果。
然而,上述实施例中的方法需要RGB图像对应的深度图,获取比较复杂。并且,模糊处理的结果是很大程度上依赖深度图的准确性,深度图不准确则会导致处理后的图像出现断层,从而失真。
本公开实施例在图像拍摄过程中加入深度引导,通过对场景进行多次拍摄解决拍摄后期图像处理困难导致的重对焦不真实。
在拍照过程中,首先通过预览流获得当前场景的图像,对当前场景进行单目深度估计,根据估计结果对场景进行区域划分,对每个区域对焦并拍摄并记录相应位置,对拍摄得到的多张图像对齐。在重对焦过程中,对用户选择的区域找到相应的图像并显示。
具体流程如图4所示,包括:
步骤S401、单目深度估计;目的是获得场景中的深度关系。其他获取深度的方法,例如双目深度估计或者tof,都需要硬件支持,并且在深度结果上都有各自的缺点。单目深度没有深度和光线的限制,虽然不能获得精确的深度数值,但是能够获得场景中的深度关系,即不同物体的远近关系,而在拍摄过程中不需要精确的深度,可以通过区域对焦得到清晰的图像。单目深度估计技术通过CNN(Convolutional Neural Networks,卷积神经网络)实现,输入RGB图像,输出精度为像素级的深度估计,通过像素亮度表示深度的远近。
步骤S402、深度区域划分;目的是对步骤S401中得到的深度估计图中同一范围深度的区域进行划分。深度估计的结果中,相同的亮度代表相同的深度,对相近亮度的区域进行划分可以得到场景同一深度的物体在图像中的位置。如果通过简单的阈值方法可能会导致同一个物体被分到两个区域中,并且深度区域的数量可能会与实际不符。在区域划分的过程中使用聚类的方法,自动确定图像中的深度层次并确定每个层次对应图像中的像素位置。
步骤S403、多焦段拍摄;目的是获得对焦到每个深度层次的图像。如果没有深度的引导,则需要对图像进行分块并对每一块图像都拍摄准焦图像,分块少会导致不能概括深度分布,分块大会导致同一深度的重复拍摄以及耗时的增加。对每一个深度层次,通过像素点对应的位置进行区域对焦,得到在该深度清晰,其他深度模糊的图像。通过此模块得到与深度层次相同数量的图像,同时记录下每张图像对应的准焦区域。
步骤S404、图像对齐;目的是对多张图像对齐,解决由于拍摄时手抖等原因造成的像素偏移的问题。由于在最后进行重对焦的时候几张图像需要是像素对齐的关系,因此在拍摄完成后需要对几张图像进行对齐处理,同时需要检测出几张图像中产生运动的区域并进行去除。图像对齐可以用常用的对齐方法,例如光流对齐、ransac(Random SampleConsensus,随机抽样一致算法)等。
步骤S405、图像重对焦;目的是在用户指定重对焦区域时完成重对焦过程。在使用时,用户选择图像中的某个区域,重对焦模块通过步骤S403中记录的深度区域找到对应的图像并显示,完成重对焦过程。
图5是根据一示例性实施例示出的一种图像处理装置的结构示意图,如图5所示,该装置500包括:
获取模块501,用于针对目标场景的不同深度范围,获取不同焦距的多张备选图像;
第一确定模块502,用于根据检测到的对焦指令,确定所述对焦指令的对焦区域;其中,不同的对焦区域具有不同的深度范围;
第二确定模块503,用于在所述多张备选图像中,确定所述对焦区域的深度范围对应焦距的备选图像为对焦后的目标图像。
在一些实施例中,所述获取模块,包括:
第一划分子模块,用于根据预览画面对所述目标场景进行区域划分;其中,划分后的不同区域具有不同的深度范围;
第一获取子模块,用于通过镜头针对不同区域进行对焦,并获取对应的所述备选图像。
在一些实施例中,所述第一划分子模块,包括:
第二获取子模块,用于根据所述预览画面,通过所述镜头获取所述目标场景中的深度关系数据;其中,所述镜头为单目镜头;
第二划分子模块,用于根据所述深度关系数据,将所述目标场景划分为不同深度范围的区域。
在一些实施例中,所述第二划分子模块,包括:
第三划分子模块,用于根据所述深度关系数据,对属于相同深度范围的像素划分至一个区域。
在一些实施例中,所述装置还包括:
第三确定模块,用于确定每个区域对应的对焦像素位置;其中,所述对焦像素位置用于供对焦时确定对焦焦点。
在一些实施例中,所述第一获取子模块,包括:
采集子模块,用于通过所述镜头针对不同区域对应的所述对焦像素进行对焦,并对对焦后的场景进行图像采集,得到所述备选图像。
在一些实施例中,所述装置还包括:
对齐模块,用于对所述多张备选图像进行对齐处理;
删除模块,用于删除所述多张备选图像中对齐偏差大于预定阈值的备选图像。
在一些实施例中,所述第一确定模块,包括:
确定子模块,用于根据终端触控屏上检测到的触控操作,确定触控位置所属于的区域为所述对焦区域。
关于上述实施例中的装置,其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述,此处将不做详细阐述说明。
图6是根据一示例性实施例示出的一种移动终端600的框图。例如,移动终端600可以是移动电话、计算机、数字广播终端、消息收发设备、游戏控制台、平板设备、医疗设备、健身设备、个人数字助理等。
参照图6,移动终端600可以包括以下一个或多个组件:处理组件601,存储器602,电源组件603,多媒体组件604,音频组件605,输入/输出(I/O)接口606,传感器组件607,以及通信组件608。
处理组件601通常控制移动终端600的整体操作,诸如与显示、电话呼叫、数据通信、相机操作和记录操作相关联的操作。处理组件601可以包括一个或多个处理器610来执行指令,以完成上述的方法的全部或部分步骤。此外,处理组件601还可以包括一个或多个模块,便于处理组件601和其他组件之间的交互。例如,处理组件601可以包括多媒体模块,以方便多媒体组件604和处理组件601之间的交互。
存储器610被配置为存储各种类型的数据以支持在移动终端600的操作。这些数据的示例包括用于在移动终端600上操作的任何应用程序或方法的指令、联系人数据、电话簿数据、消息、图片、视频等。存储器602可以由任何类型的易失性或非易失性存储设备或者它们的组合实现,如静态随机存取存储器(SRAM)、电可擦除可编程只读存储器(EEPROM)、可擦除可编程只读存储器(EPROM)、可编程只读存储器(PROM)、只读存储器(ROM)、磁存储器、快闪存储器、磁盘或光盘。
电源组件603为移动终端600的各种组件提供电力。电源组件603可以包括:电源管理系统,一个或多个电源,及其他与为移动终端600生成、管理和分配电力相关联的组件。
多媒体组件604包括在所述移动终端600和用户之间提供一个输出接口的屏幕。在一些实施例中,屏幕可以包括液晶显示器(LCD)和触摸面板(TP)。如果屏幕包括触摸面板,屏幕可以被实现为触摸屏,以接收来自用户的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、滑动和触摸面板上的手势。所述触摸传感器可以不仅感测触摸或滑动动作的边界,而且还检测与所述触摸或滑动操作相关的持续时间和压力。在一些实施例中,多媒体组件604包括一个前置摄像头和/或后置摄像头。当移动终端600处于操作模式,如拍摄模式或视频模式时,前置摄像头和/或后置摄像头可以接收外部的多媒体数据。每个前置摄像头和/或后置摄像头可以是一个固定的光学透镜系统或具有焦距和光学变焦能力。
音频组件605被配置为输出和/或输入音频信号。例如,音频组件605包括一个麦克风(MIC),当移动终端600处于操作模式,如呼叫模式、记录模式和语音识别模式时,麦克风被配置为接收外部音频信号。所接收的音频信号可以被进一步存储在存储器610或经由通信组件608发送。在一些实施例中,音频组件605还包括一个扬声器,用于输出音频信号。
I/O接口606为处理组件601和外围接口模块之间提供接口,上述外围接口模块可以是键盘、点击轮、按钮等。这些按钮可包括但不限于:主页按钮、音量按钮、启动按钮和锁定按钮。
传感器组件607包括一个或多个传感器,用于为移动终端600提供各个方面的状态评估。例如,传感器组件607可以检测到移动终端600的打开/关闭状态、组件的相对定位,例如所述组件为移动终端600的显示器和小键盘,传感器组件607还可以检测移动终端600或移动终端600的一个组件的位置改变,用户与移动终端600接触的存在或不存在,移动终端600方位或加速/减速和移动终端600的温度变化。传感器组件607可以包括接近传感器,被配置为在没有任何的物理接触时检测附近物体的存在。传感器组件607还可以包括光传感器,如CMOS或CCD图像传感器,用于在成像应用中使用。在一些实施例中,该传感器组件607还可以包括加速度传感器、陀螺仪传感器、磁传感器、压力传感器或温度传感器。
通信组件608被配置为便于移动终端600和其他设备之间有线或无线方式的通信。移动终端600可以接入基于通信标准的无线网络,如WiFi、2G或3G,或它们的组合。在一个示例性实施例中,通信组件608经由广播信道接收来自外部广播管理系统的广播信号或广播相关信息。在一个示例性实施例中,所述通信组件608还包括近场通信(NFC)模块,以促进短程通信。例如,在NFC模块可基于射频识别(RFID)技术、红外数据协会(IrDA)技术、超宽带(UWB)技术、蓝牙(BT)技术或其他技术来实现。
在示例性实施例中,移动终端600可以被一个或多个应用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、控制器、微控制器、微处理器或其他电子元件实现,用于执行上述方法。
在示例性实施例中,还提供了一种包括指令的非临时性计算机可读存储介质,例如包括指令的存储器602,上述指令可由移动终端600的处理器610执行以完成上述方法。例如,所述非临时性计算机可读存储介质可以是ROM、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。
本公开实施例还提供一种非临时性计算机可读存储介质,当所述存储介质中的指令由移动终端的处理器执行时,使得移动终端能够执行上述任一实施例所提供的方法。
本领域技术人员在考虑说明书及实践这里公开的发明后,将容易想到本发明的其它实施方案。本申请旨在涵盖本发明的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本发明的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本发明的真正范围和精神由下面的权利要求指出。
应当理解的是,本发明并不局限于上面已经描述并在附图中示出的精确结构,并且可以在不脱离其范围进行各种修改和改变。本发明的范围仅由所附的权利要求来限制。

Claims (18)

1.一种图像处理方法,其特征在于,包括:
针对目标场景的不同深度范围,获取不同焦距的多张备选图像;
根据检测到的对焦指令,确定所述对焦指令的对焦区域;其中,不同的对焦区域具有不同的深度范围;
在所述多张备选图像中,确定所述对焦区域的深度范围对应焦距的备选图像为对焦后的目标图像。
2.根据权利要求1所述的方法,其特征在于,所述针对目标场景的不同深度范围,获取不同焦距的多张备选图像,包括:
根据预览画面对所述目标场景进行区域划分;其中,划分后的不同区域具有不同的深度范围;
通过镜头针对不同区域进行对焦,并获取对应的所述备选图像。
3.根据权利要求2所述的方法,其特征在于,所述根据预览画面对所述目标场景进行区域划分,包括:
根据所述预览画面,通过所述镜头获取所述目标场景中的深度关系数据;其中,所述镜头为单目镜头;
根据所述深度关系数据,将所述目标场景划分为不同深度范围的区域。
4.根据权利要求3所述的方法,其特征在于,所述根据所述深度关系数据,将所述目标场景划分为不同深度范围的区域,包括:
根据所述深度关系数据,对属于相同深度范围的像素划分为一个区域。
5.根据权利要求2至4任一所述的方法,其特征在于,所述方法还包括:
确定每个区域对应的对焦像素位置;其中,所述对焦像素位置用于供所述镜头进行对焦时确定对焦焦点。
6.根据权利要求5所述的方法,其特征在于,所述通过镜头针对不同区域进行对焦,并获取对应的所述备选图像,包括:
通过所述镜头根据不同区域对应的所述对焦像素进行对焦,并对对焦后的场景进行图像采集,得到所述备选图像。
7.根据权利要求1所述的方法,其特征在于,所述方法还包括:
对所述多张备选图像进行对齐处理;
删除所述多张备选图像中对齐偏差大于预定阈值的备选图像。
8.根据权利要求1所述的方法,其特征在于,所述根据检测到的对焦指令,确定所述对焦指令的对焦区域,包括:
根据终端的触控屏上检测到的触控操作,确定触控位置所属于的区域为所述对焦区域。
9.一种图像处理装置,其特征在于,包括:
获取模块,用于针对目标场景的不同深度范围,获取不同焦距的多张备选图像;
第一确定模块,用于根据检测到的对焦指令,确定所述对焦指令的对焦区域;其中,不同的对焦区域具有不同的深度范围;
第二确定模块,用于在所述多张备选图像中,确定所述对焦区域的深度范围对应焦距的备选图像为对焦后的目标图像。
10.根据权利要求9所述的装置,其特征在于,所述获取模块,包括:
第一划分子模块,用于根据预览画面对所述目标场景进行区域划分;其中,划分后的不同区域具有不同的深度范围;
第一获取子模块,用于通过镜头针对不同区域进行对焦,并获取对应的所述备选图像。
11.根据权利要求10所述的装置,其特征在于,所述第一划分子模块,包括:
第二获取子模块,用于根据所述预览画面,通过所述镜头获取所述目标场景中的深度关系数据;其中,所述镜头为单目镜头;
第二划分子模块,用于根据所述深度关系数据,将所述目标场景划分为不同深度范围的区域。
12.根据权利要求11所述的装置,其特征在于,所述第二划分子模块,包括:
第三划分子模块,用于根据所述深度关系数据,对属于相同深度范围的像素划分至一个区域。
13.根据权利要求10至12任一所述的装置,其特征在于,所述装置还包括:
第三确定模块,用于确定每个区域对应的对焦像素位置;其中,所述对焦像素位置用于供所述镜头进行对焦时确定对焦焦点。
14.根据权利要求13所述的装置,其特征在于,所述第一获取子模块,包括:
采集子模块,用于通过所述镜头根据不同区域对应的所述对焦像素进行对焦,并对对焦后的场景进行图像采集,得到所述备选图像。
15.根据权利要求9所述的装置,其特征在于,所述装置还包括:
对齐模块,用于对所述多张备选图像进行对齐处理;
删除模块,用于删除所述多张备选图像中对齐偏差大于预定阈值的备选图像。
16.根据权利要求9所述的装置,其特征在于,所述第一确定模块,包括:
确定子模块,用于根据终端触控屏上检测到的触控操作,确定触控位置所属于的区域为所述对焦区域。
17.一种移动终端,其特征在于,所述移动终端至少包括:处理器和用于存储能够在所述处理器上运行的可执行指令的存储器,其中:
处理器用于运行所述可执行指令时,所述可执行指令执行上述权利要求1至8任一项提供的图像处理方法中的步骤。
18.一种非临时性计算机可读存储介质,其特征在于,所述计算机可读存储介质中存储有计算机可执行指令,该计算机可执行指令被处理器执行时实现上述权利要求1至8任一项提供的图像处理方法中的步骤。
CN202011141267.4A 2020-10-22 2020-10-22 图像处理方法、装置、存储介质及移动终端 Pending CN114390189A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011141267.4A CN114390189A (zh) 2020-10-22 2020-10-22 图像处理方法、装置、存储介质及移动终端

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011141267.4A CN114390189A (zh) 2020-10-22 2020-10-22 图像处理方法、装置、存储介质及移动终端

Publications (1)

Publication Number Publication Date
CN114390189A true CN114390189A (zh) 2022-04-22

Family

ID=81194577

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011141267.4A Pending CN114390189A (zh) 2020-10-22 2020-10-22 图像处理方法、装置、存储介质及移动终端

Country Status (1)

Country Link
CN (1) CN114390189A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115866399A (zh) * 2023-02-28 2023-03-28 广东欧谱曼迪科技有限公司 一种3d内窥镜自动调焦方法、装置、电子设备及储存介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104081755A (zh) * 2012-11-30 2014-10-01 松下电器产业株式会社 图像处理装置以及图像处理方法
CN104243828A (zh) * 2014-09-24 2014-12-24 宇龙计算机通信科技(深圳)有限公司 一种拍摄照片的方法、装置及终端
US20150002724A1 (en) * 2013-06-27 2015-01-01 Altek Semiconductor Corp. Method for adjusting focus position and electronic apparatus
WO2015196802A1 (zh) * 2014-06-25 2015-12-30 华为技术有限公司 一种拍照方法、装置及电子设备
CN110602397A (zh) * 2019-09-16 2019-12-20 RealMe重庆移动通信有限公司 图像处理方法、装置、终端及存储介质

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104081755A (zh) * 2012-11-30 2014-10-01 松下电器产业株式会社 图像处理装置以及图像处理方法
US20150002724A1 (en) * 2013-06-27 2015-01-01 Altek Semiconductor Corp. Method for adjusting focus position and electronic apparatus
WO2015196802A1 (zh) * 2014-06-25 2015-12-30 华为技术有限公司 一种拍照方法、装置及电子设备
CN104243828A (zh) * 2014-09-24 2014-12-24 宇龙计算机通信科技(深圳)有限公司 一种拍摄照片的方法、装置及终端
CN110602397A (zh) * 2019-09-16 2019-12-20 RealMe重庆移动通信有限公司 图像处理方法、装置、终端及存储介质

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115866399A (zh) * 2023-02-28 2023-03-28 广东欧谱曼迪科技有限公司 一种3d内窥镜自动调焦方法、装置、电子设备及储存介质

Similar Documents

Publication Publication Date Title
CN108182730B (zh) 虚实对象合成方法及装置
CN108986199B (zh) 虚拟模型处理方法、装置、电子设备及存储介质
CN109670397B (zh) 人体骨骼关键点的检测方法、装置、电子设备及存储介质
CN106651955B (zh) 图片中目标物的定位方法及装置
CN109889724B (zh) 图像虚化方法、装置、电子设备及可读存储介质
EP3057304A1 (en) Method and apparatus for generating image filter
CN108154466B (zh) 图像处理方法及装置
CN107944367B (zh) 人脸关键点检测方法及装置
CN112219224B (zh) 图像处理方法及装置、电子设备和存储介质
CN111553864A (zh) 图像修复方法及装置、电子设备和存储介质
CN111860373B (zh) 目标检测方法及装置、电子设备和存储介质
CN110796012A (zh) 图像处理方法、装置、电子设备及可读存储介质
CN107730443B (zh) 图像处理方法、装置及用户设备
CN106469446B (zh) 深度图像的分割方法和分割装置
CN114390189A (zh) 图像处理方法、装置、存储介质及移动终端
CN115100253A (zh) 图像对比方法、装置、电子设备及存储介质
US11252341B2 (en) Method and device for shooting image, and storage medium
CN112866555B (zh) 拍摄方法、装置、设备及存储介质
CN114697517A (zh) 视频处理方法、装置、终端设备及存储介质
CN109035136B (zh) 图像处理方法及装置、存储介质
CN110910304A (zh) 图像处理方法、装置、电子设备及介质
CN113329220B (zh) 图像展示的处理方法、装置以及存储介质
CN114339018B (zh) 镜头切换的方法、装置及存储介质
CN109034068B (zh) 视频处理方法及装置、电子设备和存储介质
CN117408868A (zh) 图像处理方法及装置、电子设备、存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination