CN110766729B - 图像处理方法、装置、存储介质及电子设备 - Google Patents
图像处理方法、装置、存储介质及电子设备 Download PDFInfo
- Publication number
- CN110766729B CN110766729B CN201910984204.6A CN201910984204A CN110766729B CN 110766729 B CN110766729 B CN 110766729B CN 201910984204 A CN201910984204 A CN 201910984204A CN 110766729 B CN110766729 B CN 110766729B
- Authority
- CN
- China
- Prior art keywords
- image
- processed
- frame
- registration
- images
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/30—Determination of transform parameters for the alignment of images, i.e. image registration
- G06T7/33—Determination of transform parameters for the alignment of images, i.e. image registration using feature-based methods
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10004—Still image; Photographic image
Landscapes
- Engineering & Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Facsimile Image Signal Circuits (AREA)
- Studio Devices (AREA)
Abstract
本申请公开了一种图像处理方法、装置、存储介质及电子设备,所述方法包括:获取待处理图像,并对待处理图像进行图像配准,在完成图像配准后,获取待处理图像边界的裁切宽度,并判断裁切宽度是否小于预设宽度,若小于,则获取待处理图像在进行图像配准前的原始图像比例,根据原始图像比例调整待处理图像边界的裁切宽度。本申请实施例通过裁切宽度将超过阈值的图像进行剔除,并且基于原图像比例对图像边界的裁切宽度进行调整,保证图像比例与原始比例一致,从而提升图像配准后的准确性以及图像质量。
Description
技术领域
本申请属于图像处理技术领域,尤其涉及一种图像处理方法、装置、存储介质及电子设备。
背景技术
随着电子技术的发展,多帧合成技术在智能手机、数码相机等具有拍照功能的电子设备当中逐渐普及,相比普通的图像,可以提升清晰度,降低噪点。然而电子设备多帧图像的处理因为应用场景多为手持的关系,图像会出现移动的问题,因此多帧图像的处理之前一般会进行多帧图像配准的预处理,使图像的内容在空间位置上保持一致。经过配准之后的图像会因为移动和旋转的原因,图像的边界会成为无效数据,因此需要将图像的边界裁剪掉。
但是图像的配准并不是每次都能够准确实现,有些场景会出现配准失误,配准失误的图像反而会导致后面的多帧处理出现更加严重的图像质量下降问题,所以对于出现配准失误的图像一个好的解决方案就是放弃这张图像的配准,将它直接踢除。另一个问题是因为长宽四个方向的裁剪范围并不一定相同,所以裁剪后的图像比例和原来的图像也不一样,这样再次放大以后有可能导致图像的比例失调。
发明内容
本申请提供一种图像处理方法、装置、存储介质及电子设备,可以提升图像配准后的准确性以及图像质量。
第一方面,本申请实施例提供一种图像处理方法,包括:
获取待处理图像,并对所述待处理图像进行图像配准;
在完成所述图像配准后,获取所述待处理图像边界的裁切宽度,并判断所述裁切宽度是否小于预设宽度;
若小于,则获取所述待处理图像在进行图像配准前的原始图像比例;
根据所述原始图像比例调整所述待处理图像边界的裁切宽度。
第二方面,本申请实施例提供一种图像处理装置,包括:
第一获取模块,用于获取待处理图像,并对所述待处理图像进行图像配准;
判断模块,用于在完成所述图像配准后,获取所述待处理图像边界的裁切宽度,并判断所述裁切宽度是否小于预设宽度;
第二获取模块,用于当所述判断模块判断为是时,获取所述待处理图像在进行图像配准前的原始图像比例;
调整模块,用于根据所述原始图像比例调整所述待处理图像边界的裁切宽度。
第三方面,本申请实施例提供一种存储介质,其上存储有计算机程序,当所述计算机程序在计算机上运行时,使得所述计算机执行上述的图像处理方法。
第四方面,本申请实施例提供一种电子设备,包括处理器和存储器,所述存储器存储有多条指令,所述处理器加载所述存储器中的指令用于执行以下步骤:
获取待处理图像,并对所述待处理图像进行图像配准;
在完成所述图像配准后,获取所述待处理图像边界的裁切宽度,并判断所述裁切宽度是否小于预设宽度;
若小于,则获取所述待处理图像在进行图像配准前的原始图像比例;
根据所述原始图像比例调整所述待处理图像边界的裁切宽度。
本申请实施例提供的图像处理方法可以获取待处理图像,并对待处理图像进行图像配准,在完成图像配准后,获取待处理图像边界的裁切宽度,并判断裁切宽度是否小于预设宽度,若小于,则获取待处理图像在进行图像配准前的原始图像比例,根据原始图像比例调整待处理图像边界的裁切宽度。本申请实施例通过裁切宽度将超过阈值的图像进行剔除,并且基于原图像比例对图像边界的裁切宽度进行调整,保证图像比例与原始比例一致,从而提升图像配准后的准确性以及图像质量。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本申请实施例提供的图像处理方法的一种流程示意图。
图2为本申请实施例提供的图像处理方法的另一流程示意图。
图3为本申请实施例提供的图像处理方法的一种场景示意图。
图4为本申请实施例提供的图像处理装置的一种结构示意图。
图5为本申请实施例提供的图像处理装置的另一结构示意图。
图6为本申请实施例提供的电子设备的结构示意图。
图7为本申请实施例提供的电子设备的另一结构示意图。
具体实施方式
请参照图式,其中相同的组件符号代表相同的组件,本申请的原理是以实施在一适当的运算环境中来举例说明。以下的说明是基于所例示的本申请具体实施例,其不应被视为限制本申请未在此详述的其它具体实施例。
在以下的说明中,本申请的具体实施例将参考由一部或多部计算机所执行的步骤及符号来说明,除非另有述明。因此,这些步骤及操作将有数次提到由计算机执行,本文所指的计算机执行包括了由代表了以一结构化型式中的数据的电子信号的计算机处理单元的操作。此操作转换该数据或将其维持在该计算机的内存系统中的位置处,其可重新配置或另外以本领域测试人员所熟知的方式来改变该计算机的运作。该数据所维持的数据结构为该内存的实体位置,其具有由该数据格式所定义的特定特性。但是,本申请原理以上述文字来说明,其并不代表为一种限制,本领域测试人员将可了解到以下所述的多种步骤及操作亦可实施在硬件当中。
本申请中的术语“第一”、“第二”和“第三”等是用于区别不同对象,而不是用于描述特定顺序。此外,术语“包括”和“具有”以及它们任何变形,意图在于覆盖不排他的包含。例如包含了一系列步骤或模块的过程、方法、系统、产品或设备没有限定于已列出的步骤或模块,而是某些实施例还包括没有列出的步骤或模块,或某些实施例还包括对于这些过程、方法、产品或设备固有的其它步骤或模块。
请参阅图1,图1为本申请实施例提供的图像处理方法的一种流程示意图。本申请实施例提供的图像处理方法应用于电子设备,具体流程可以如下:
步骤101,获取待处理图像,并对待处理图像进行图像配准。
在一实施例中,上述待处理图像为电子设备在进行多帧合成前,需要进行图像配准的图像。其中,图像配准是图像处理研究领域中的一种技术,其目的在于比较或融合针对同一对象在不同条件下获取的多帧图像,例如图像会来自不同的采集设备,取自不同的时间,不同的拍摄视角等等,有时也需要用到针对不同对象的图像配准问题。具体地说,对于一组图像数据集中的两幅图像,通过寻找一种空间变换把一幅图像映射到另一幅图像,使得两图中对应于空间同一位置的点一一对应起来,从而达到信息融合的目的。
在一实施例中,上述多帧图像可以为电子设备的成像装置在进行拍摄时获取当前场景的多帧图像。该成像装置可以是前置摄像头、后置摄像头等。启动电子设备的成像装置,使其进入拍照预览模式,并将被拍摄的场景显示在电子设备的显示窗口,并将此时显示窗口所显示的画面定义为预览图像。其中,成像装置硬件上一般包括五个部分:外壳(马达)、镜头、红外滤光片、图像传感器(例如CCD或COMS)和挠性印刷电路板(FPCB)等。在拍照预览模式下,显示预览图像的过程中,镜头在马达的驱动下移动,被拍摄的物体经过镜头在图像传感器上成像。图像传感器通过光-电转换将光信号转换为电信号输给图像处理电路进行后续处理。其中,图像处理电路可以利用硬件和/或软件组件实现,可包括定义ISP(Image Signal Processing,图像信号处理)管线的各种处理单元。
进一步的,以该成像装置是后置摄像头为例,上述多帧图像可以为电子设备的一个摄像头多次拍摄获取的,也可以为电子设备的多个摄像头分别获取的。比如,若电子设备包括一个摄像头,则可以在拍照时控制摄像头连续采集多帧当前场景的图像,以得到多帧图像,若电子设备包括多个摄像头,比如双摄、三摄、四摄等等,则可以在拍照时控制摄像头同时采集当前场景的图像,以得到多帧图像。
在一实施例中,上述多帧图像可以使用不同的曝光参数也可以使用相同的曝光参数进行拍摄。上述多帧图像可以为电子设备直接获取摄像头的图像传感器捕捉的多张RAW原始图像,其中,RAW是未经处理的格式,RAW图像就是图像传感器将捕捉到的光源信号转化为数字信号的原始数据。
其中,图像配准的方式可以概括为相对配准和绝对配准两种:相对配准是指选择多图像中的一张图像作为参考图像,将其它的相关图像与之配准,其坐标系统是任意的。绝对配准是指先定义一个控制网格,所有的图像相对于这个网格来进行配准,也就是分别完成各分量图像的几何校正来实现坐标系的统一。在一实施例中,可以使用相对配准的方式进行图像配准,比如,在获取到的多帧图像当中选取一个标准帧,其余图像即为待处理图像,然后将待处理图像根据标准帧进行图像配准。
步骤102,在完成图像配准后,获取待处理图像边界的裁切宽度,并判断裁切宽度是否小于预设宽度,若是,则执行步骤103。
在一实施例中,对待处理图像进行图像配准时,需要对待处理图像的边界进行裁切,通常情况下,需要对图像的长宽四个方向的边界进行裁切,比如对待处理图像的上下左右四个边界分别进行裁切。在其他实施例中,也可以对上述四个边界中的部分边界进行裁切,比如对待处理图像的上侧边界、下侧边界以及右侧边界进行裁切,左侧边界维持原状,可以理解的是,还可以只对上述四个边界中的一个或两个边界进行裁切,对此不作进一步限定。
进一步的,获取到待处理图像边界的裁切宽度后,判断裁切宽度是否小于预设宽度,其中,上述预设宽度可以为配准后不会出现配准失败的临界宽度,可以有电子设备预先计算设置,若小于该预设宽度,则表明不会导致配准失败以及图像质量下降等问题,可以进一步执行步骤103,若裁切宽度大于或等于该预设宽度,则表明这张图像中的一些场景会出现配准失败,从而影响图像质量,因此可以将该待处理图像从上述多帧图像当中直接删除。
举例来说,若上述待处理图像的四个边界都需要进行裁切,裁切宽度分别为上边界裁切宽度2、下边界裁切宽度2、左边界裁切宽度3、右边界裁切宽度4,预设宽度为5,此时分别将上述四个边界的裁切宽度与预设宽度对比,且全部低于该预设宽度,则确定该待处理图像满足配准要求,可以继续执行下一步骤。在其他实施例中,还可以分别对上述不同的边界设置不同的预设宽度,比如上下边界的第一预设宽度为3,左右边界的第二预设宽度为4,此时需要将上述上下边界的裁切宽度与第一预设宽度对比,且均小于第一预设宽度,然后将上述左右边界裁切宽度与第二预设宽度对比,对比可知左边界的裁切宽度小于第二预设宽度,但右边界的裁切宽度等于第二预设宽度,此时确定该待处理图像不满足配准要求,可以直接将其从多帧图像当中删除。
步骤103,获取待处理图像在进行图像配准前的原始图像比例。
在一实施例中,若上述待处理图像边界的裁切宽度小于预设宽度,则可以进一步获取待处理图像在进行图像配准前的原始图像比例。其中,获取图像比例的方式可以有多种,比如分别获取图像配准前的原始图像的宽度以及高度,然后根据宽度以及高度计算原始图像比例。再比如,还可以提取拍摄原始图像的摄像头参数,其中该摄像头参数当中包括图像比例即为上述原始图像比例,比如4:3、16:9、18:9等等。
步骤104,根据原始图像比例调整待处理图像边界的裁切宽度。
在本申请实施例中,由于该待处理图像在图像配准后对图像边界进行了裁切,因此配准完成后的图像比例可能发生了改变,比如原始图像比例为16:9,而完成图像配准后的图像比例则为16:8,因此需要对配准完成后的待处理图像再次进行调整,具体的,可以根据原始图像比例调整待处理图像边界的裁切宽度,以使其图像比例与原始图像比例一致或接近,从而避免后续的图像处理过程中图像内容比例失调的问题。其中,可以在保证裁切宽度不变小的情况下,动态增加各个方向的裁切宽度,使得裁切后的图像比例和原图像比例相同。
在一实施例中,在对待处理图像进行配准后,还可以获取该图像的配准图像比例,然后判断该配准图像比例与上述原始图像比例是否相同,若不同,则执行根据所述原始图像比例调整所述待处理图像边界的裁切宽度,若相同,则不必继续进行调整,即可结束当前流程。
需要说明的是,在对上述多帧图像全部进行处理后,即可进行多帧合成,以得到最终的图像,比如高动态范围图像。进一步的,在合成得到最终图像后,还可以先进行降噪处理,然后,电子设备可以对该降噪后的图像进行色调映射处理(Tone Mapping),从而得到目标图像。可以理解的是,对该降噪后的图像进行色调映射处理可以提高图像的图像对比度,从而使得目标图像具有更高的动态范围,成像效果更好。电子设备还可以将色调映射处理后的图像作为当前场景的预览图像在电子设备的屏幕上进行展示。
以上通过将色调映射处理后的图像作为拍摄场景的预览图像进行展示,可以使得用户提前查看到对当前场景进行拍照所得的图像的高动态范围效果,帮助用户更好的拍照。
在一实施例中,在将上述预览图像在所述电子设备的屏幕上进行展示之前,所述图像处理方法还可以包括:
根据电子设备屏幕当前的分辨率对预览图像进行降采样处理。
可以理解的是,预览图像的实际分辨率大于屏幕显示的分辨率情况,相较于预览图像的实际分辨率等于屏幕显示分辨率的情况并不会获得更好的显示效果。因此,在将预览图像在电子设备的屏幕上进行展示之前,首先获取到屏幕当前的分辨率,再根据屏幕当前的分辨率对预览图像进行降采样处理,使得预览图像的分辨率与屏幕当前的分辨率一致。这样,能够提高多帧合成的合成效率,并且在将预览图像进行展示时,也不会降低其显示效果。
由上可知,本申请实施例提供的图像处理方法可以获取待处理图像,并对待处理图像进行图像配准,在完成图像配准后,获取待处理图像边界的裁切宽度,并判断裁切宽度是否小于预设宽度,若小于,则获取待处理图像在进行图像配准前的原始图像比例,根据原始图像比例调整待处理图像边界的裁切宽度。本申请实施例通过裁切宽度将超过阈值的图像进行剔除,并且基于原图像比例对图像边界的裁切宽度进行调整,保证图像比例与原始比例一致,从而提升图像配准后的准确性以及图像质量。
下面将在上述实施例描述的方法基础上,对本申请的图像处理方法做进一步介绍。参阅图2,图2为本申请实施例提供的图像处理方法的另一流程示意图,该图像处理方法包括:
步骤201,获取对当前场景进行拍照的多帧原始图像。
在一实施例中,上述多帧原始图像为电子设备在进行多帧合成前,需要进行图像配准的图像。其中上述多帧原始图像可以为电子设备的成像装置在进行拍摄时获取当前场景的多帧图像。进一步的,以该成像装置是后置摄像头为例,上述多帧图像可以为电子设备的一个摄像头多次拍摄获取的,也可以为电子设备的多个摄像头分别获取的。比如,若电子设备包括一个摄像头,则可以在拍照时控制摄像头连续采集多帧当前场景的图像,以得到多帧图像,若电子设备包括多个摄像头,则可以在拍照时控制摄像头同时采集当前场景的图像,以得到多帧图像。其中,上述多帧图像具有相同的尺寸。
步骤202,从多帧原始图像当中选取标准帧,计算多帧待处理图像中每帧待处理图像相对于标准帧的偏移量。
在一实施例中,该标准帧可以为多帧原始图像中清晰度最高的一帧。在其他实施例中,若上述多帧原始图像由于拍摄时的曝光参数不同而导致亮度不同,该标准帧还可以为亮度最高的一帧。可以由系统自动选取。比如,若包括第一图像、第二图像、第三图像共3张原始图像,按照亮度值由大到小的顺序进行排序后,得到排序为第一图像的亮度值大于第二图像的亮度值,第二图像的亮度值大于第三图像的亮度值,则将第一图像确定为标准帧。当然,上述标准帧也可以由用户根据个人喜好手动挑选。
在一实施例中,若根据清晰度选取标准帧,可以分别计算所述多帧原始图像中每帧待图像的梯度值,选取梯度值最大的图像作为清晰度最高的标准帧。当然,本实施例不限于采用其他图像清晰度评价函数计算图像的清晰度;其中,所述图像清晰度评价函数包括但不限于以下函数的至少之一:均差法、峰值信噪比、HVS、点锐度算法、空域参数方差、频域调制传递函数MTF等。当然,本实施方式中也可通过人眼识别的方式获得清晰度最高的图像作为标准帧。
进一步的,选取出标准帧后,剩下的即为待处理图像,计算多帧待处理图像中每帧待处理图像相对于标准帧的偏移量。其中上述偏移量可以包括图像的每个边界的偏移量,比如上边界的偏移量、下边界的偏移量、左边界的偏移量以及右边界的偏移量。
步骤203,根据偏移量对每帧待处理图像的边界进行裁切。
对上述待处理图像的边界进行裁切后即可得到配准完成后的图像。需要说明的是,上述标准帧无需进行图像配准,也即无需进行裁切。
步骤204,在完成图像配准后,获取待处理图像边界的裁切宽度,并判断裁切宽度是否小于预设宽度,若是,则执行步骤205。
在一实施例中,对待处理图像进行图像配准时,需要对待处理图像的边界进行裁切,通常情况下,需要对图像的长宽四个方向的边界进行裁切,比如对待处理图像的上下左右四个边界分别进行裁切。在其他实施例中,也可以对上述四个边界中的部分边界进行裁切。
分别获取图像每个边界的裁切宽度,判断裁切宽度是否小于预设宽度,其中,上述预设宽度可以为配准后不会出现配准失败的临界宽度,可以有电子设备预先计算设置,若小于该预设宽度,则表明不会导致配准失败以及图像质量下降等问题,可以执行下一步骤。若裁切宽度大于或等于该预设宽度,则表明这张图像中的一些场景会出现配准失败,从而影响图像质量,因此可以将该待处理图像从上述多帧图像当中直接删除。
步骤205,获取待处理图像在进行图像配准前的原始图像比例。
在一实施例中,若上述待处理图像边界的裁切宽度小于预设宽度,则可以进一步获取待处理图像在进行图像配准前的原始图像比例。比如分别获取图像配准前的原始图像的宽度以及高度,然后根据宽度以及高度计算原始图像比例。
步骤206,根据待处理图像的原始图像比例以及完成图像配准后的配准图像比例,确定待处理图像的目标边界以及对应的裁切量。
在本申请实施例中,由于该待处理图像在图像配准后对图像边界进行了裁切,因此配准完成后的图像比例可能发生了改变,比如原始图像比例为16:9,而完成图像配准后的图像比例则为16:8,因此需要对配准完成后的待处理图像再次进行调整。但是在进行调整的过程中,不一定要对所有边界的裁切宽度继续调整,比如只对其中一个边界进行调整即可使得配准图像比例与原始图像比例相同,因此可以根据待处理图像的原始图像比例以及完成图像配准后的配准图像比例,确定待处理图像的目标边界以及对应的裁切量。
步骤207,根据裁切量对目标边界进行裁切。
举例来说,如图3所示,假设原始图像的宽高分别为16和12,比例为4:3。四个边界计算出的裁切宽度分别为:左边界裁切宽度1、右边界裁切宽度2、上边界裁切宽度1、下边界裁切宽度1.5。按照当前计算出的裁切宽度裁切之后的图像宽高分别是13和9.5,比例约为4:2.92。可以看出图像宽高的比例下降了。如果要保持原来的宽高比,裁切后的宽度应该为9.5*4/3=12.67,所以裁切的范围应该是16-12.67=3.33。为了尽量保持图像居中,所以在原本裁切的基础上,可以将图像的左侧再裁切0.33。在实际的图像裁切操作中都是取整数,让配准图像比例与原始图像比例相同或接近即可。这样即可保持裁切后的图像比例和原始图像相同,避免图像放大后图像内容比例失调的问题。
步骤208,获取待处理图像在进行图像配准前的原始图像分辨率,根据原始图像分辨率对调整后的待处理图像进行放大。
由于在对原始图像进行配准以及二次裁切后,图像尺寸势必会变小,因此可以将图像放大,以使放大后的图像与原始图像的尺寸以及分辨率均保持一致。在对上述多帧图像全部进行处理后,即可进行多帧合成,以得到最终的图像。
由上可知,本申请实施例提供的图像处理方法可以获取对当前场景进行拍照的多帧原始图像,从多帧原始图像当中选取标准帧,计算多帧待处理图像中每帧待处理图像相对于标准帧的偏移量,根据偏移量对每帧待处理图像的边界进行裁切,在完成图像配准后,获取待处理图像边界的裁切宽度,并判断裁切宽度是否小于预设宽度,若是,则获取待处理图像在进行图像配准前的原始图像比例,根据待处理图像的原始图像比例以及完成图像配准后的配准图像比例,确定待处理图像的目标边界以及对应的裁切量,根据裁切量对目标边界进行裁切,获取待处理图像在进行图像配准前的原始图像分辨率,根据原始图像分辨率对调整后的待处理图像进行放大。本申请实施例通过裁切宽度将超过阈值的图像进行剔除,并且基于原图像比例对图像边界的裁切宽度进行调整,保证图像比例与原始比例一致,从而提升图像配准后的准确性以及图像质量。
请参阅图4,图4为本申请实施例提供的图像处理装置的一种结构示意图。其中该图像处理装置30包括:
第一获取模块301,用于获取待处理图像,并对所述待处理图像进行图像配准;
判断模块302,用于在完成所述图像配准后,获取所述待处理图像边界的裁切宽度,并判断所述裁切宽度是否小于预设宽度;
第二获取模块303,用于当所述判断模块302判断为是时,获取所述待处理图像在进行图像配准前的原始图像比例;
调整模块304,用于根据所述原始图像比例调整所述待处理图像边界的裁切宽度。
在一实施例中,请参阅图5,所述调整模块304可以包括:
确定子模块3041,用于根据所述待处理图像的原始图像比例以及完成所述图像配准后的配准图像比例,确定所述待处理图像的目标边界以及对应的裁切量;
裁切子模块3042,用于根据所述裁切量对所述目标边界进行裁切。
在一实施例中,所述图像处理装置30还可以包括:
第三获取模块305,用于在所述调整模块根据所述原始图像比例调整所述待处理图像边界的裁切宽度之后,获取所述待处理图像在进行图像配准前的原始图像分辨率;
放大模块306,用于根据所述原始图像分辨率对所述调整后的待处理图像进行放大。
由上述可知,本申请实施例的图像处理装置30可以获取待处理图像,并对待处理图像进行图像配准,在完成图像配准后,获取待处理图像边界的裁切宽度,并判断裁切宽度是否小于预设宽度,若小于,则获取待处理图像在进行图像配准前的原始图像比例,根据原始图像比例调整待处理图像边界的裁切宽度。本申请实施例通过裁切宽度将超过阈值的图像进行剔除,并且基于原图像比例对图像边界的裁切宽度进行调整,保证图像比例与原始比例一致,从而提升图像配准后的准确性以及图像质量。
本申请实施例中,图像处理装置与上文实施例中的图像处理方法属于同一构思,在图像处理装置上可以运行图像处理方法实施例中提供的任一方法,其具体实现过程详见图像处理方法的实施例,此处不再赘述。
本文所使用的术语“模块”可看作为在该运算系统上执行的软件对象。本文所述的不同组件、模块、引擎及服务可看作为在该运算系统上的实施对象。而本文所述的装置及方法可以以软件的方式进行实施,当然也可在硬件上进行实施,均在本申请保护范围之内。
本申请实施例还提供一种存储介质,其上存储有计算机程序,当所述计算机程序在计算机上运行时,使得所述计算机执行上述的图像处理方法。
本申请实施例还提供一种电子设备,如平板电脑、手机等。电子设备中的处理器会按照如下的步骤,将一个或一个以上的应用程序的进程对应的指令加载到存储器中,并由处理器来运行存储在存储器中的应用程序,从而实现各种功能:
获取待处理图像,并对所述待处理图像进行图像配准;
在完成所述图像配准后,获取所述待处理图像边界的裁切宽度,并判断所述裁切宽度是否小于预设宽度;
若小于,则获取所述待处理图像在进行图像配准前的原始图像比例;
根据所述原始图像比例调整所述待处理图像边界的裁切宽度。
在本文中提及“实施例”意味着,结合实施例描述的特定特征、结构或特性可以包含在本申请的至少一个实施例中。在说明书中的各个位置出现该短语并不一定均是指相同的实施例,也不是与其它实施例互斥的独立的或备选的实施例。本领域技术人员显式地和隐式地理解的是,本文所描述的实施例可以与其它实施例相结合。
请参阅图6,电子设备400包括处理器401以及存储器402。其中,处理器401与存储器402电性连接。
处理器400是电子设备400的控制中心,利用各种接口和线路连接整个电子设备的各个部分,通过运行或加载存储在存储器402内的计算机程序,以及调用存储在存储器402内的数据,执行电子设备400的各种功能并处理数据,从而对电子设备400进行整体监控。
存储器402可用于存储软件程序以及模块,处理器401通过运行存储在存储器402的计算机程序以及模块,从而执行各种功能应用以及数据处理。存储器402可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的计算机程序(比如声音播放功能、图像播放功能等)等;存储数据区可存储根据电子设备的使用所创建的数据等。此外,存储器402可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。相应地,存储器402还可以包括存储器控制器,以提供处理器401对存储器402的访问。
在本申请实施例中,电子设备400中的处理器401会按照如下的步骤,将一个或一个以上的计算机程序的进程对应的指令加载到存储器402中,并由处理器401运行存储在存储器402中的计算机程序,从而实现各种功能,如下:
获取待处理图像,并对所述待处理图像进行图像配准;
在完成所述图像配准后,获取所述待处理图像边界的裁切宽度,并判断所述裁切宽度是否小于预设宽度;
若小于,则获取所述待处理图像在进行图像配准前的原始图像比例;
根据所述原始图像比例调整所述待处理图像边界的裁切宽度。
请一并参阅图7,在一些实施方式中,电子设备400还可以包括:显示器403、射频电路404、音频电路405以及电源406。其中,其中,显示器403、射频电路404、音频电路405以及电源406分别与处理器401电性连接。
显示器403可以用于显示由用户输入的信息或提供给用户的信息以及各种图形用户接口,这些图形用户接口可以由图形、文本、图标、视频和其任意组合来构成。显示器403可以包括显示面板,在一些实施方式中,可以采用液晶显示器(Liquid Crystal Display,LCD)、或者有机发光二极管(Organic Light-Emitting Diode,OLED)等形式来配置显示面板。
射频电路404可以用于收发射频信号,以通过无线通信与网络设备或其他电子设备建立无线通讯,与网络设备或其他电子设备之间收发信号。通常,射频电路501包括但不限于天线、至少一个放大器、调谐器、一个或多个振荡器、用户身份模块(SIM,SubscriberIdentity Module)卡、收发信机、耦合器、低噪声放大器(LNA,Low Noise Amplifier)、双工器等。
音频电路405可以用于通过扬声器、传声器提供用户与电子设备之间的音频接口。音频电路506可将接收到的音频数据转换成电信号,传输到扬声器,由扬声器转换为声音信号输出。
电源406可以用于给电子设备400的各个部件供电。在一些实施例中,电源406可以通过电源管理系统与处理器401逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。电源406还可以包括一个或一个以上的直流或交流电源、再充电系统、电源故障检测电路、电源转换器或者逆变器、电源状态指示器等任意组件。
尽管图7中未示出,电子设备400还可以包括摄像头、蓝牙模块等,在此不再赘述。
在本申请实施例中,存储介质可以是磁碟、光盘、只读存储器(Read Only Memory,ROM)、或者随机存取记忆体(Random Access Memory,RAM)等。
在上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见其他实施例的相关描述。
需要说明的是,对本申请实施例的图像处理方法而言,本领域普通测试人员可以理解实现本申请实施例图像处理方法的全部或部分流程,是可以通过计算机程序来控制相关的硬件来完成,计算机程序可存储于一计算机可读取存储介质中,如存储在电子设备的存储器中,并被该电子设备内的至少一个处理器执行,在执行过程中可包括如图像处理方法的实施例的流程。其中,的存储介质可为磁碟、光盘、只读存储器、随机存取记忆体等。
对本申请实施例的图像处理装置而言,其各功能模块可以集成在一个处理芯片中,也可以是各个模块单独物理存在,也可以两个或两个以上模块集成在一个模块中。上述集成的模块既可以采用硬件的形式实现,也可以采用软件功能模块的形式实现。集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时,也可以存储在一个计算机可读取存储介质中,存储介质譬如为只读存储器,磁盘或光盘等。
以上对本申请实施例所提供的一种图像处理方法、装置、存储介质及电子设备进行了详细介绍,本文中应用了具体个例对本申请的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本申请的方法及其核心思想;同时,对于本领域的技术人员,依据本申请的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本申请的限制。
Claims (6)
1.一种图像处理方法,其特征在于,所述方法包括以下步骤:
获取对当前场景进行拍照的多帧待处理图像;
根据多帧待处理图像的清晰度或亮度从多帧处理图像中选取标准帧,并根据所述标准帧对多帧待处理图像进行图像配准,其中,计算多帧待处理图像中每帧待处理图像相对于所述标准帧的偏移量;根据所述偏移量对所述每帧待处理图像的边界进行裁切;
在完成所述图像配准后,获取多帧待处理图像边界的裁切宽度,并判断所述裁切宽度是否小于预设宽度,其中,预设宽度为进行图像配准后不会出现配准失败的临界宽度;
若多帧待处理图像的所述裁切宽度小于所述预设宽度,则获取多帧待处理图像在进行图像配准前的原始图像比例,其中,若多帧待处理图像中存在所述裁切宽度大于或等于所述预设宽度的不满足配准要求的待处理图像,则从多帧待处理图像中删除所述不满足配准要求的待处理图像;
根据所述原始图像比例调整多帧待处理图像边界的裁切宽度;
获取多帧待处理图像在进行图像配准前的原始图像分辨率;
根据所述原始图像分辨率对调整后的多帧待处理图像进行放大,以使放大后的所述调整后的多帧待处理图像与原始图像的尺寸以及分辨率保持一致;
将所述放大后的所述调整后的多帧处理图像进行合成,得到最终图像。
2.根据权利要求1所述的图像处理方法,其特征在于,根据所述原始图像比例调整多帧待处理图像边界的裁切宽度的步骤,包括:
根据多帧待处理图像的原始图像比例以及完成所述图像配准后的配准图像比例,确定多帧待处理图像的目标边界以及对应的裁切量;
根据所述裁切量对所述目标边界进行裁切。
3.一种图像处理装置,其特征在于,所述装置包括:
第一获取模块,用于获取对当前场景进行拍照的多帧待处理图像;
图像配准模块,用于根据多帧待处理图像的清晰度或亮度从多帧处理图像中选取标准帧,并根据所述标准帧对多帧待处理图像进行图像配准,其中,计算多帧待处理图像中每帧待处理图像相对于所述标准帧的偏移量;根据所述偏移量对所述每帧待处理图像的边界进行裁切;
判断模块,用于在完成所述图像配准后,获取多帧待处理图像边界的裁切宽度,并判断所述裁切宽度是否小于预设宽度,其中,预设宽度为进行图像配准后不会出现配准失败的临界宽度;
第二获取模块,用于若多帧待处理图像的所述裁切宽度小于所述预设宽度,则获取多帧待处理图像在进行图像配准前的原始图像比例,其中,若多帧待处理图像中存在所述裁切宽度大于或等于所述预设宽度的不满足配准要求的待处理图像,则从多帧待处理图像中删除所述不满足配准要求的待处理图像;
调整模块,用于根据所述原始图像比例调整多帧待处理图像边界的裁切宽度;
第三获取模块,用于获取多帧待处理图像在进行图像配准前的原始图像分辨率;
放大模块,用于根据所述原始图像分辨率对调整后的多帧待处理图像进行放大,以使放大后的所述调整后的多帧待处理图像与原始图像的尺寸以及分辨率保持一致;
合成模块,用于将所述放大后的所述调整后的多帧处理图像进行合成,得到最终图像。
4.根据权利要求3所述的图像处理装置,其特征在于,所述调整模块包括:
确定子模块,用于根据多帧待处理图像的原始图像比例以及完成所述图像配准后的配准图像比例,确定多帧待处理图像的目标边界以及对应的裁切量;
裁切子模块,用于根据所述裁切量对所述目标边界进行裁切。
5.一种存储介质,其上存储有计算机程序,其特征在于,当所述计算机程序在计算机上运行时,使得所述计算机执行如权利要求1至3任一项所述的图像处理方法。
6.一种电子设备,包括处理器和存储器,所述存储器存储有多条指令,其特征在于,所述处理器加载所述存储器中的指令用于执行以下步骤:
获取对当前场景进行拍照的多帧待处理图像;
根据多帧待处理图像的清晰度或亮度从多帧处理图像中选取标准帧,并根据所述标准帧对多帧待处理图像进行图像配准,其中,计算多帧待处理图像中每帧待处理图像相对于所述标准帧的偏移量;根据所述偏移量对所述每帧待处理图像的边界进行裁切;
在完成所述图像配准后,获取多帧待处理图像边界的裁切宽度,并判断所述裁切宽度是否小于预设宽度,其中,预设宽度为进行图像配准后不会出现配准失败的临界宽度;
若多帧待处理图像的所述裁切宽度小于所述预设宽度,则获取多帧待处理图像在进行图像配准前的原始图像比例,其中,若多帧待处理图像中存在所述裁切宽度大于或等于所述预设宽度的不满足配准要求的待处理图像,则从多帧待处理图像中删除所述不满足配准要求的待处理图像;
根据所述原始图像比例调整多帧待处理图像边界的裁切宽度;
获取多帧待处理图像在进行图像配准前的原始图像分辨率;
根据所述原始图像分辨率对调整后的多帧待处理图像进行放大,以使放大后的所述调整后的多帧待处理图像与原始图像的尺寸以及分辨率保持一致;
将所述放大后的所述调整后的多帧处理图像进行合成,得到最终图像。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910984204.6A CN110766729B (zh) | 2019-10-16 | 2019-10-16 | 图像处理方法、装置、存储介质及电子设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910984204.6A CN110766729B (zh) | 2019-10-16 | 2019-10-16 | 图像处理方法、装置、存储介质及电子设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN110766729A CN110766729A (zh) | 2020-02-07 |
CN110766729B true CN110766729B (zh) | 2023-05-16 |
Family
ID=69332355
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910984204.6A Active CN110766729B (zh) | 2019-10-16 | 2019-10-16 | 图像处理方法、装置、存储介质及电子设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN110766729B (zh) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112163985B (zh) * | 2020-09-22 | 2022-11-29 | Oppo(重庆)智能科技有限公司 | 图像处理方法、装置、存储介质及电子设备 |
CN113628229B (zh) * | 2021-08-04 | 2022-12-09 | 展讯通信(上海)有限公司 | 图像裁剪方法及相关产品 |
CN113971689A (zh) * | 2021-09-08 | 2022-01-25 | 浙江大华技术股份有限公司 | 图像配准方法以及相关装置 |
CN114473234B (zh) * | 2022-01-21 | 2024-08-30 | 深圳市大族数控科技股份有限公司 | 激光加工控制方法、装置、计算机设备及存储介质 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101909165A (zh) * | 2010-07-29 | 2010-12-08 | 哈尔滨工业大学 | 一种基于混合测度的视频数据宽景成像方法 |
CN104574431A (zh) * | 2015-02-13 | 2015-04-29 | 河南五星科技有限公司 | 一种基于视频分析监测pm2.5的方法及装置 |
CN109754414A (zh) * | 2018-12-27 | 2019-05-14 | 上海商汤智能科技有限公司 | 图像处理方法、装置、电子设备及计算机可读存储介质 |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
TW584758B (en) * | 2002-05-03 | 2004-04-21 | Delta Electronics Inc | Assembling type liquid crystal panel |
CN108257086B (zh) * | 2017-12-22 | 2021-04-13 | 微幻科技(北京)有限公司 | 一种全景照片处理的方法及装置 |
CN110310309B (zh) * | 2019-07-09 | 2021-08-31 | 中国电子科技集团公司第十三研究所 | 一种图像配准方法、图像配准装置及终端 |
-
2019
- 2019-10-16 CN CN201910984204.6A patent/CN110766729B/zh active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101909165A (zh) * | 2010-07-29 | 2010-12-08 | 哈尔滨工业大学 | 一种基于混合测度的视频数据宽景成像方法 |
CN104574431A (zh) * | 2015-02-13 | 2015-04-29 | 河南五星科技有限公司 | 一种基于视频分析监测pm2.5的方法及装置 |
CN109754414A (zh) * | 2018-12-27 | 2019-05-14 | 上海商汤智能科技有限公司 | 图像处理方法、装置、电子设备及计算机可读存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN110766729A (zh) | 2020-02-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110766729B (zh) | 图像处理方法、装置、存储介质及电子设备 | |
JP6803982B2 (ja) | 光学撮像方法および装置 | |
CN110060213B (zh) | 图像处理方法、装置、存储介质及电子设备 | |
JP6945744B2 (ja) | 撮影方法、装置、およびデバイス | |
CN110493538B (zh) | 图像处理方法、装置、存储介质及电子设备 | |
CN111418201B (zh) | 一种拍摄方法及设备 | |
CN109671106B (zh) | 一种图像处理方法、装置与设备 | |
CN113727016A (zh) | 一种拍摄方法及电子设备 | |
CN111028189A (zh) | 图像处理方法、装置、存储介质及电子设备 | |
CN109495689B (zh) | 一种拍摄方法、装置、电子设备及存储介质 | |
US20120070097A1 (en) | Refocusing images using scene captured images | |
CN110581956A (zh) | 图像处理方法、装置、存储介质及电子设备 | |
US11032484B2 (en) | Image processing apparatus, imaging apparatus, image processing method, imaging method, and program | |
CN107147851B (zh) | 照片处理方法、装置、计算机可读存储介质及电子设备 | |
CN116095476B (zh) | 摄像头的切换方法、装置、电子设备及存储介质 | |
US20210218948A1 (en) | Depth image obtaining method, image capture device, and terminal | |
CN113810590A (zh) | 图像处理方法、电子设备、介质和系统 | |
CN113298735A (zh) | 图像处理方法、装置、电子设备及存储介质 | |
US11032483B2 (en) | Imaging apparatus, imaging method, and program | |
CN113808066A (zh) | 图像选取方法、装置、存储介质及电子设备 | |
EP3889883A1 (en) | Image processing method and device, mobile terminal, and storage medium | |
CN115426449B (zh) | 一种拍照方法和终端 | |
CN114143471B (zh) | 图像处理方法、系统、移动终端及计算机可读存储介质 | |
CN107071293B (zh) | 一种拍摄装置、方法和移动终端 | |
CN117880645A (zh) | 一种图像处理的方法、装置、电子设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |